Teks ke Tutur

Kokoro adalah model teks-ke-tutur 82 juta parameter yang mencecah lebih daripada kelas beratnya. Walaupun saiznya kecil, ia menghasilkan pertuturan yang luar biasa semulajadi dan ekspresif. Kokoro menyokong pelbagai bahasa termasuk bahasa Inggeris, Jepun, Cina, dan Korea dengan pelbagai suara ekspresif. Ia berjalan sangat pantas — menghasilkan audio hampir 100x lebih pantas daripada masa nyata pada GPU.

Piper adalah enjin teks-ke-tutur ringan yang dikembangkan oleh Rhasspy yang menggunakan VITS dan larynx. Ia berjalan sepenuhnya pada CPU, menjadikannya sesuai untuk peranti tepi, automasi rumah, dan aplikasi yang memerlukan TTS luar talian. Dengan lebih 100 suara melebihi 30+ bahasa, Piper memberikan pertuturan bunyi-semulajadi pada kelajuan masa nyata bahkan pada Raspberry Pi 4.

VITS (Kesimpulan Variasi dengan pembelajaran lawan untuk Teks-ke-Tutur hujung-ke-hujung) adalah kaedah TTS hujung-ke-hujung sejajar yang menghasilkan audio berbunyi lebih semulajadi daripada model dua-tahap semasa. Ia mengamalkan kesimpulan variasi yang dipertingkatkan dengan aliran normalisasi dan proses latihan lawan, mencapai peningkatan yang ketara dalam kebolehan semulajadi.

MeloTTS oleh MyShell.ai adalah pustaka TTS berbilang bahasa yang menyokong Bahasa Inggeris (Amerika, British, India, Australia), Sepanyol, Perancis, Cina, Jepun, dan Korea. Ia sangat pantas, pemprosesan teks pada kelajuan hampir masa nyata pada CPU sahaja. MeloTTS direka untuk penggunaan pengeluaran dan menyokong kedua-dua CPU dan GPU inferensi.

Bark oleh Suno adalah model teks-ke-audio berasaskan penambah yang boleh menghasilkan ucapan multibahasa yang sangat realistik serta audio lain seperti muzik, bunyi latarbelakang, dan kesan bunyi. Ia boleh menghasilkan komunikasi nonverbal seperti ketawa, menjerit, dan menangis. Bark menyokong lebih daripada 100 praset pembicara dan 13+ bahasa.

Bark Small adalah versi distilasi model Bark yang menukarkan kualiti audio untuk kelajuan inferensi yang lebih pantas dan keperluan memori yang lebih rendah. Ia menyimpan keupayaan Bark untuk menghasilkan ucapan dengan emosi, ketawa, dan berbilang bahasa.

CosyVoice 2 oleh Tongyi Lab Alibaba mencapai kualiti pertuturan setanding manusia dengan latensi yang sangat rendah, menjadikannya sesuai untuk aplikasi masa nyata. Ia menggunakan pendekatan kuantum skala berakhir untuk sintesis strim dan menyokong klon suara sifar-tembak, sintesis lintas-bahasa, dan kawalan emosi berkadaran halus. Ia lebih baik daripada banyak sistem TTS komersial dalam penilaian subjektif.

Dia oleh Nari Labs adalah model teks-ke-tutur parameter 1.6B yang direka khas untuk menghasilkan dialog multi-pembesar. Ia boleh menghasilkan perbualan berbunyi semulajadi antara dua pembesar dengan mengambil pusingan yang sesuai, prosody, dan ungkapan emosi. Dia sempurna untuk mencipta kandungan gaya podcast, dialog buku audio, dan AI perbualan interaktif.

Parler TTS adalah model teks-ke-tutur yang menggunakan huraian suara bahasa semulajadi untuk mengawal pertuturan yang dijana. Alih-alih memilih dari suara praset, anda menerangkan suara yang anda mahu (cth, "suara wanita hangat dengan loghat British yang ringan, bercakap perlahan dan jelas") dan Parler menghasilkan pertuturan yang sepadan dengan huraian itu. Ini menjadikannya unik fleksibel untuk aplikasi kreatif.

GLM-TTS oleh Zhipu AI adalah sistem teks-ke-tutur yang dibina pada arsitektur Llama dengan penyesuaian aliran. Ia mencapai kadar ralat aksara terendah di antara model TTS sumber terbuka, bermakna ia menghasilkan pengucapan yang paling tepat. GLM-TTS menyokong bahasa Inggeris dan Cina dengan klon suara dari sampel audio 3-10 saat.

IndexTTS-2 adalah sistem teks-ke-tutur yang maju yang cemerlang pada sintesis suara sifar-tembak dengan kawalan emosi berkadaran halus. Ia boleh menghasilkan pertuturan dengan nada emosi tertentu seperti gembira, sedih, marah, atau takut tanpa memerlukan data latihan emosi tertentu. Model menggunakan vektor emosi untuk mengawal ungkapan emosi pertuturan yang dijana dengan tepat.

Spark TTS oleh SparkAudio adalah model teks-ke-tutur yang menggabungkan klon suara dengan emosi yang boleh dikawal dan gaya bercakap. Menggunakan hanya 5 saat audio rujukan, ia boleh mengklon suara dan kemudian menghasilkan ucapan dengan emosi, kelajuan, dan gaya yang berbeza sambil mengekalkan identiti suara yang diklon. Spark TTS menggunakan sistem kawalan berasaskan prompt.

GPT-SoVITS menggabungkan pemodelan bahasa gaya GPT dengan SoVITS (Pengertian Suara Menyanyi melalui Terjemahan dan Sintetis) untuk klon suara beberapa-tembak yang kuat. Dengan hanya 5 saat audio rujukan, ia boleh klon suara dengan tepat dan cipta ucapan baru sambil memelihara ciri-ciri unik pembicara. Ia hebat pada sintesis suara bercakap dan menyanyi.

Orpheus adalah model teks-ke-tutur berskala besar yang mencapai ungkapan emosi tahap manusia. Dilatih pada lebih 100,000 jam data pertuturan yang berlainan, ia cemerlang dalam menghasilkan pertuturan dengan emosi semulajadi, penekanan, dan gaya bercakap. Orpheus boleh menghasilkan pertuturan yang hampir tidak dapat dibezakan daripada rakaman manusia.

Chatterbox oleh Resemble AI adalah model klon suara sifar-tembak terkini. Ia boleh meniru sebarang suara dari sampel audio tunggal dengan ketepatan yang mengagumkan, menangkap bukan sahaja timbre tetapi juga gaya bertutur dan nuansa emosi. Chatterbox juga mempunyai kawalan emosi halus, membolehkan anda menyelaraskan nada emosi percakapan yang dihasilkan secara bebas dari identiti suara.

Tortoise TTS adalah sistem teks-ke-tutur berbilang-suara autoregresif yang mengutamakan kualiti audio berbanding kelajuan. Ia menggunakan arsitektur terinspirasi DALL-E untuk menghasilkan pertuturan yang sangat semulajadi dengan prosodi yang baik dan kemiripan pembicara. Walaupun lebih perlahan daripada banyak alternatif, Tortoise menghasilkan sebahagian daripada pertuturan sintetik yang paling realistik yang ada dalam ekosistem sumber terbuka.

StyleTTS 2 mencapai sintesis TTS tahap manusia dengan menggabungkan penyebaran gaya dengan latihan lawan menggunakan model bahasa pertuturan besar. Ia menghasilkan pertuturan yang terdengar paling semula jadi di antara model penutur tunggal, bersaing dengan rakaman manusia. StyleTTS 2 menggunakan pemodelan gaya berasaskan penyebaran untuk menangkap julat penuh variasi pertuturan manusia.

OpenVoice oleh MyShell.ai membolehkan klon suara seketika dengan kawalan granular terhadap gaya suara, emosi, loghat, irama, jeda, dan intonasi. Ia boleh klon suara dari klip audio pendek dan cipta percakapan dalam beberapa bahasa sambil memelihara identiti pembicara. OpenVoice juga berfungsi sebagai penukar suara, membenarkan transformasi suara masa nyata.

Qwen3-TTS ialah model teks-ke-tutur 1.7 bilion parameter dari pasukan Qwen Alibaba. Ia menyokong tiga mod: suara praset dengan kawalan emosi (9 pembesar suara), klon suara dari hanya 3 saat audio, dan mod reka bentuk suara unik di mana anda menerangkan suara yang anda mahu dalam bahasa semulajadi. Ia merangkumi 10 bahasa dengan ekspresi tinggi dan prosodi semulajadi.

Sesame CSM (Conversational Speech Model) adalah model 1 bilion parameter yang direka khas untuk menghasilkan perbualan perbualan. Ia memodelkan corak semula jadi perbualan manusia termasuklah waktu bertukar-tukar, tindak balas saluran belakang, tindak balas emosi, dan aliran perbualan. CSM menghasilkan audio yang berbunyi seperti perbualan manusia semula jadi bukannya perbualan sintetik.

Kitten TTS by KittenML is an ultra-lightweight text-to-speech model built on ONNX. With variants from 15M to 80M parameters (25-80 MB on disk), it delivers high-quality voice synthesis on CPU without requiring a GPU. Features 8 built-in voices, adjustable speech speed, and built-in text preprocessing for numbers, currencies, and units. Ideal for edge deployment and low-latency applications.