このページは英語から機械翻訳されています。英語の原文を読む。

Fish Audio S2 Pro(音声モデル、非商用)

公式オーディオGPUv1.0.2aigd.tts-fish-s2-pro
インストール アプリがまだない方は 無料でダウンロード
またはターミナルから
gamedev pkg add aigd.tts-fish-s2-pro
お使いのコンピューターで実行します。 モデルを一度ダウンロードするだけで、このコンピューターの GPU で生成します。

概要

Fish Audioの4Bテキスト読み上げモデルをローカルで実行できます。80以上の言語に対応し、音声クリップとその文字起こしからのボイスクローニング、さらに[laughing]、[whisper]、[pause]といったインラインの話し方タグを利用できます。audio.cppにより8 GB以上のGPUで動作します。非商用ライセンスのため、商用利用にはFish Audioとの別途ライセンスが必要です。

Fish Audio S2 Proは、80以上の言語に対応し、音声クローンと[laughing]、[whisper]、[pause]などのインライン話し方タグを備えた4Bのテキスト読み上げモデルです。AI Game Devでは、ローカル音声生成(aigd.audiocpp、audio.cpp)を通じて、お使いのGPU(8 GB以上)で動作します。ライセンスは研究および非商用利用のみを許可しているため、プロトタイプ、商用予定のないゲームジャム、Mod、個人プロジェクトに適しています。商用ゲームにはFish Audioからの別途ライセンスが必要です。

作成できるもの

  • テキストに話し方を書き込むことで、ささやき、笑い、間などを含む表現豊かなキャラクターダイアログを作成できます。
  • 3–30 sのクリップとその文字起こしからクローンした声でダイアログを作成できます。
  • 多くの言語のボイス台詞を作成できます。言語設定はありません(auto)。モデルは書かれたとおりにテキストを読み上げます。

リクエスト例

  • 「この幽霊の台詞をささやき声で演じてください:『[whisper] ここに来るべきではなかった。』」
  • 「Audio/ref/narrator.wavをクローンし(文字起こしはnarrator.txt)、プロローグを読み上げてください。」
  • 「道化師の台詞の最後に笑いを入れてください。」

ハイライト

モデルIDaigd.tts-fish-s2-pro.q8-0
言語80以上、言語設定なし(auto)
ボイスモデル自身の声、または3–30 sのクリップとその文字起こしによるクローン
話し方タグインライン([laughing]、[whisper]、[pause]など)
出力44.1 kHz
リクエストあたりのテキスト最大2,000文字
動作環境8 GB以上のGPU: NVIDIA(CUDA)、Vulkan、またはMac(Metal)
ダウンロード6.32 GB、1ファイル
ライセンスFish Audio Research License: 非商用利用のみ

動作の仕組み

このパッケージはデータのみで、モデルファイルを指定するだけです。ライセンスに同意すると、アプリがHugging Faceからそれらをダウンロードし、それぞれをsha256で検証して、お使いのコンピューター上でローカル音声生成(aigd.audiocpp、audio.cpp)により実行します。

ダウンロード

  • Fish Audio S2 Pro(aigd.tts-fish-s2-pro.q8-0): 6.32 GB、audio-cpp/audio.cpp-ggufからの1ファイル(そのコミットに固定)

対応コンピューター

8 GB以上のGPUが必要です。

ボイスと言語

  • Fish Audio S2 Pro: 言語は自動。クリップとその文字起こしによる音声クローンに対応します。

参照クリップがない場合、モデルは自身の声を選択します。クローンにはクリップの文字起こしが必要です。

ライセンス

Fish Audio Research License。非商用利用のみ。 研究および非商用利用に限られます。商用利用にはFish Audioからの別途書面によるライセンスが必要です。

必要な帰属表示: "This model is licensed under the Fish Audio Research License, Copyright © 39 AI, INC. All Rights Reserved."

制限事項:

  • 研究および非商用利用に限られます。製品、有料ゲーム、企業内の業務での利用を含む商用利用には、Fish Audioからの別途ライセンスが必要です。
  • モデルまたはそれを利用した製品を共有する場合は、ライセンスのコピーを提供し、Fish Audioの通知をNotice ファイルに保持し、"Built with Fish Audio"を目立つ形で表示してください。
  • モデルおよびその出力は、別の基盤生成AIモデルの作成または改善に使用できません。
  • 利用はFish AudioのAcceptable Use Policyに従う必要があります。

ダウンロードするモデルのライセンスを遵守する責任は利用者にあります。すべてのファイルはHugging Faceからダウンロードされます。AI Game Devはそれらをホストしていません。

バージョン

Fish Audio S2 Pro(音声モデル、非商用)のリリース
バージョンリリース日アプリが必要
1.0.2最新0.32.0-beta.6 以降
1.0.10.32.0-beta.6 以降

インストール

デスクトップアプリで

Packages ウィンドウを開き(ステータスバーのパッケージアイコン)、Browse を選んで aigd.tts-fish-s2-pro を検索し、Add to Project をクリックします。

アプリがまだない方は、Windows、macOS、Linux 用の AI Game Dev を無料でダウンロードしてください。

ターミナルから

gamedev CLI を使い、プロジェクトフォルダーで実行します。

gamedev pkg add aigd.tts-fish-s2-pro

必要条件

  • AI Game Dev 0.32.0-beta.6 以降

パッケージについて詳しく

インストール
gamedev pkg add aigd.tts-fish-s2-pro