F5-TTS
Trang Soniqo này ghi lại F5-TTS theo triển khai hiện có trong speech-swift / speech-core. Liên kết Hugging Face nằm bên dưới phần ghi chú tích hợp.
Ưu tiên trang nội bộ
Thẻ trên trang chính và menu tài liệu trỏ vào đây trước; liên kết model nguồn và bundle vẫn có trong trang này.
Tổng quan
| Model | F5-TTS |
|---|---|
| Vai trò | Zero-shot voice cloning from a short reference plus transcript |
| Backend | MLX fp16 |
| Đầu ra | 24 kHz mono waveform |
| Ngôn ngữ | English and Mandarin, mixed EN/ZH supported |
| Giấy phép | CC-BY-NC-4.0 weights; non-commercial bundle |
| Trạng thái | Ready through speech speak --engine f5 and the F5TTS Swift product |
| Nguồn | SWivid F5-TTS |
| Sản phẩm Swift | F5TTS |
| CLI / runtime | speech speak --engine f5 |
Cách dùng
Đoạn dưới đây khớp với API hoặc lệnh hiện tại do speech-swift cung cấp.
# Clone a voice from a ~10 s reference clip plus its transcript.
.build/release/speech speak "Hello from my cloned voice." \
--engine f5 \
--voice-sample reference.wav \
--f5-reference-text "Text spoken in the reference clip." \
-o cloned.wav
Liên kết model
Ghi chú triển khai
- 16 flow steps are the default (RTF 0.57 on an M5 Pro, lower is faster); --f5-steps 32 for maximum fidelity, 12 runs at RTF 0.43 — ASR roundtrips are word-identical across all three.
- --f5-reference-text is required: cloning conditions on the reference transcript, and quality tracks how cleanly the reference clip ends on a sentence boundary.
- Mandarin runs through a bundled pinyin lexicon with tone sandhi baked in at export time (99.2% token-exact against the upstream rjieba/pypinyin frontend), so Swift needs no external tokenizer.
- Deterministic per --f5-seed; --f5-speed scales pacing, CFG strength and sway sampling are exposed as flags; about 0.8 GB peak RSS makes it the smallest cloning engine in the package.