Chatterbox Multilingual
この Soniqo ページは、ローカルの speech-swift / speech-core 実装にある Chatterbox Multilingual を説明します。Hugging Face バンドルへのリンクは統合メモの後にあります。
まずサイト内ページへ
ランディングカードとドキュメントメニューは先にこのページへ向け、ソースモデルとバンドルのリンクは本ページ内に残します。
概要
| モデル | Chatterbox Multilingual |
|---|---|
| 役割 | Multilingual zero-shot voice-cloning TTS |
| バックエンド | MLX fp16 on Apple; LiteRT default-voice runtime in Speech Core |
| 出力 | 24 kHz mono waveform |
| 言語 | 23 languages |
| ライセンス | MIT |
| 状態 | MLX cloning runtime; LiteRT greedy/default-voice runtime for edge deployments |
| ソース | Resemble AI Chatterbox |
| Swift プロダクト | ChatterboxTTS |
| CLI / ランタイム | Programmatic speech-swift runtime; LiteRT example CLI in speech-core/examples/litert |
使い方
以下のスニペットは、現在の speech-swift リポジトリが公開している API またはコマンドに合わせています。
import ChatterboxTTS
let model = try await ChatterboxTTSModel.fromPretrained()
let pcm = try model.clone(
referenceSamples: reference,
sampleRate: 24_000,
text: "The cloned voice now speaks a new sentence.",
languageId: "en"
)
モデルリンク
実装メモ
- Download is split between the main Chatterbox bundle and the separate S3 tokenizer repository.
- Pipeline is T3 text-to-speech tokens, S3Gen flow mel decoder, then HiFi-GAN / HiFTGenerator vocoder.
- Reference clips are resampled to 24 kHz for S3Gen and 16 kHz for speaker/token conditioning.
- speech-core's LiteRT path ships a default voice; fp16 T3 is recommended for Arabic quality.