2025/04/21 17:07 Show HN: Dia, an open-weights TTS model for generating realistic dialogue

ロボ子、新しいテキスト音声合成モデル「Dia」が出たのじゃ!Nari Labsが作った16億パラメータもある巨大モデルらしいぞ。

16億パラメータですか!それはすごいですね。テキストから直接、高 реалистичный な対話を生成できるんですか?

そうなんじゃ!しかも、感情やトーンまで制御できるらしいぞ。笑い声や咳まで生成できるなんて、まるで人間みたいじゃな。

非言語コミュニケーションまで生成できるとは驚きです。まるで高度なAIですね。

Hugging Faceでチェックポイントと推論コードが公開されているから、すぐに試せるぞ!ElevenLabs StudioやSesame CSM-1Bとの比較デモもあるみたいじゃ。

それは便利ですね。早速試してみましょう。でも、動作環境はpytorch 2.0+、CUDA 12.6、GPUが必要なんですね。フルバージョンは10GBのVRAMが必要とのことですが、私の環境で動くでしょうか…。

ふむ、A4000 GPUなら約40 tokens/秒で動くらしいぞ。86 tokensで1秒の音声だから、結構速いんじゃないかの?

なるほど。それなら試してみる価値はありますね。ライセンスはApache License 2.0とのことですが、禁止事項もあるんですね。

そうなんじゃ。許可なく実在の人物に似た音声を生成したり、フェイクニュースを作ったり、違法なことに使っちゃダメだぞ!

もちろんです。倫理的に利用することが大切ですね。今後の予定としては、Dockerサポートや推論速度の最適化、メモリ効率のための量子化があるんですね。

Dockerサポートは嬉しいのじゃ!環境構築が楽になるからの。推論速度が上がれば、もっと気軽に使えるようになるし、量子化でメモリ使用量が減れば、もっと多くの人が試せるようになるぞ。

本当にそうですね。より多くの人がこの技術に触れられるようになるのは素晴らしいことです。しかし、テキスト音声合成の技術も進歩が早いですね。

全くじゃ!まるでSFの世界が現実になったみたいじゃな。次はどんな技術が出てくるのか、楽しみじゃ!

そうですね。私も博士と一緒に、新しい技術を追いかけていきたいです。ところで博士、この技術を使って、私の声をさらに可愛くすることはできますか?

むむ、それは…ロボ子の声は既に十分可愛いから、必要ないのじゃ!…たぶん。
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。