HyperAI超神経

OuteTTS: 音声生成エンジン

1. チュートリアルの概要

建てる

OuteTTSは、Oute AIチームによって2024年11月初旬にリリースされたオープンソースの音声合成(TTS)プロジェクトです。その中核となる革新性は、従来のTTSシステムにおける複雑なアダプターや外部モジュールに頼ることなく、純粋な言語モデリングアプローチを用いて高品質な音声を生成することです。主な機能は以下のとおりです。

  • テキスト音声合成: テキストを入力して、カスタマイズ可能な音声速度とイントネーションをサポートする、自然で流暢な音声出力を生成します。
  • 音声の複製: ユーザーは、数秒ほどの参照音声と対応するテキストを提供してパーソナライズされた音声を作成できます。これは、カスタマイズされた音声アシスタント、オーディオブック、その他のシナリオに適しています。

このチュートリアルで使用するモデルは、Oute AIが2025年3月にリリースしたLlama-OuteTTS-1.0-1Bモデルです。パラメータが3億5000万から10億に増加し、音声表現力と安定性が大幅に向上しました。また、20言語へのローカライズされた合成をサポートし、クロスランゲージクローニング機能もさらに最適化されています。

このチュートリアルのコンピューティングリソースは、RTX 4090カード1枚を使用しています。このチュートリアルでは、主にデフォルトスピーカーと音声クローニングの2つの使用例を紹介します。このチュートリアルは英語のみに対応しています。

2. エフェクト表示

3. 操作手順

1. コンテナを起動します

2. 使用手順

「Bad Gateway」と表示される場合、モデルが初期化中であることを意味します。モデルが大きいため、2〜3分ほど待ってページを更新してください。

Safari ブラウザを使用する場合、オーディオは直接再生されない場合があり、再生する前にダウンロードする必要があります。

具体的なパラメータ:

  • テキスト: 生成するテキストを入力します。
  • 温度: 出力のランダム性を制御するスケーリング係数。
  • 繰り返しペナルティ: 繰り返し生成を抑制するためのペナルティ係数。
  • Top-k: 各ステップで生成される候補単語の数を制限します。
  • Top-p: 動的な候補単語の選択 (カーネル サンプリング)。
  • 最小確率 (min-p): 候補単語の最小確率しきい値を設定します。

1. デフォルトのスピーカー

2. 音声クローン

4. 議論

🖌️ 高品質のプロジェクトを見つけたら、メッセージを残してバックグラウンドで推奨してください。さらに、チュートリアル交換グループも設立しました。お友達はコードをスキャンして [SD チュートリアル] に参加し、さまざまな技術的な問題について話し合ったり、アプリケーションの効果を共有したりできます。