Higgs TTS 3
Trang Soniqo này ghi lại Higgs TTS 3 theo triển khai hiện có trong speech-swift / speech-core. Liên kết Hugging Face nằm bên dưới phần ghi chú tích hợp.
Ưu tiên trang nội bộ
Thẻ trên trang chính và menu tài liệu trỏ vào đây trước; liên kết model nguồn và bundle vẫn có trong trang này.
Tổng quan
| Model | Higgs TTS 3 |
|---|---|
| Vai trò | Conversational TTS and zero-shot cloning with inline emotion, style, and SFX tags |
| Backend | MLX bf16 backbone with float32 codec |
| Đầu ra | 24 kHz mono waveform, 25 frames per second |
| Ngôn ngữ | 100+ languages |
| Giấy phép | Boson Higgs TTS 3 Research and Non-Commercial License |
| Trạng thái | Ready through speech speak --engine higgs and the HiggsTTS Swift product |
| Nguồn | Boson AI higgs-tts-3-4b |
| Sản phẩm Swift | HiggsTTS |
| CLI / runtime | speech speak --engine higgs |
Cách dùng
Đoạn dưới đây khớp với API hoặc lệnh hiện tại do speech-swift cung cấp.
# Expressive cloned speech with an inline emotion tag.
.build/release/speech speak "<|emotion:elation|> We did it — the demo works!" \
--engine higgs \
--voice-sample reference.wav \
--higgs-ref-text "Text spoken in the reference clip." \
-o higgs.wav
Liên kết model
Ghi chú triển khai
- RTF 0.78 on an M5 Pro for cloned and plain synthesis alike: sampling stays on the GPU with the delay ramp masked on-device, and asyncEval overlaps decode with the end-of-codes state machine.
- Cloning gates: English lexical overlap 1.00 and Mandarin CER 0.000 on ASR roundtrips; the language model and codec are parity-validated against the upstream implementations in both directions.
- Control tags are ordinary tokens inside the target text: <|emotion:...|>, <|style:whispering|>, <|sfx:laughter|>, <|prosody:pause|> and friends.
- Encoding a 12 s reference costs about 0.6 s once and the codes are reusable across generations; omit --voice-sample for reference-free synthesis in a stock voice.
- The CLI defaults to temperature 0.8 because the upstream 1.0 wobbles on single sentences; expect about 8.6 GB peak RSS for the 4B backbone.