github.devotd.
新着マルチモーダル

idiap/coqui-ai-tts v0.28.0 — 音声合成と学習のツールキット

Idiap が保守する音声合成ディープラーニングツールキット idiap/coqui-ai-tts の最新リリース v0.28.0 とその構成、公開資料が明かさない変更内容を扱う。

リポジトリ情報idiap/coqui-ai-tts ↗

Idiap が保守する音声合成ディープラーニングツールキット idiap/coqui-ai-tts の最新リリース v0.28.0 とその構成、公開資料が明かさない変更内容を扱う。

GitHub の説明: 🐸💬 - a deep learning toolkit for Text-to-Speech, battle-tested in research and production

スター
★ 2.3K
フォーク
298
言語
Python
ライセンス
MPL-2.0
最新リリース
v0.28.0
原文を見る ↗GitHub で見る ↗

idiap/coqui-ai-tts の最新リリースは v0.28.0 である。このリポジトリはテキストを音声に合成するディープラーニングツールキットで、Coqui TTS の後継として Idiap が保守している。リポジトリの説明は、このライブラリを研究と運用の両面で検証してきたツールとして紹介している。2023 年 10 月 31 日に作成され、現在はスター 2338 個を集めている。

このツールキットは多数の TTS(テキスト音声合成)、ボコーダー(vocoder、音声波形を生成するモデル)、音声変換モデルを一か所に集めている。学習済みモデルをそのまま使うだけでなく、新しいモデルを学習したり既存モデルをファインチューニングしたりするツール、データセットを分析し整理するユーティリティも到一起にしているため、音声データを整え、合成し、直す流れを 1 つのライブラリの中で続けられる。多話者・多言語合成と音声変換に対応し、コマンドラインと Python API の両方を提供する。実装言語は Python、ライセンスは MPL-2.0 である。

ただし v0.28.0 で変更された項目は、この資料にリリースノートがないため、ここでは確定できない。性能を比較したベンチマーク数値も公開された資料にはない。資料に記録されたモメンタム指標は 10 点満点で 1.0 と低い。そのため、このリポジトリを現在の代表となる音声合成プロジェクトだと断定するのは難しい。代わりに、複数のモデルと学習・ファインチューニング・データセット整理のツールを一つのまとまりにまとめているという点で、多話者・多言語の音声合成や音声変換を直接扱う対象になる。