Fish Audio S2 Pro(音声モデル、非商用)
gamedev pkg add aigd.tts-fish-s2-pro概要
Fish Audioの4Bテキスト読み上げモデルをローカルで実行できます。80以上の言語に対応し、音声クリップとその文字起こしからのボイスクローニング、さらに[laughing]、[whisper]、[pause]といったインラインの話し方タグを利用できます。audio.cppにより8 GB以上のGPUで動作します。非商用ライセンスのため、商用利用にはFish Audioとの別途ライセンスが必要です。
Fish Audio S2 Proは、80以上の言語に対応し、音声クローンと[laughing]、[whisper]、[pause]などのインライン話し方タグを備えた4Bのテキスト読み上げモデルです。AI Game Devでは、ローカル音声生成(aigd.audiocpp、audio.cpp)を通じて、お使いのGPU(8 GB以上)で動作します。ライセンスは研究および非商用利用のみを許可しているため、プロトタイプ、商用予定のないゲームジャム、Mod、個人プロジェクトに適しています。商用ゲームにはFish Audioからの別途ライセンスが必要です。
作成できるもの
- テキストに話し方を書き込むことで、ささやき、笑い、間などを含む表現豊かなキャラクターダイアログを作成できます。
- 3–30 sのクリップとその文字起こしからクローンした声でダイアログを作成できます。
- 多くの言語のボイス台詞を作成できます。言語設定はありません(
auto)。モデルは書かれたとおりにテキストを読み上げます。
リクエスト例
- 「この幽霊の台詞をささやき声で演じてください:『[whisper] ここに来るべきではなかった。』」
- 「
Audio/ref/narrator.wavをクローンし(文字起こしはnarrator.txt)、プロローグを読み上げてください。」 - 「道化師の台詞の最後に笑いを入れてください。」
ハイライト
| モデルID | aigd.tts-fish-s2-pro.q8-0 |
| 言語 | 80以上、言語設定なし(auto) |
| ボイス | モデル自身の声、または3–30 sのクリップとその文字起こしによるクローン |
| 話し方タグ | インライン([laughing]、[whisper]、[pause]など) |
| 出力 | 44.1 kHz |
| リクエストあたりのテキスト | 最大2,000文字 |
| 動作環境 | 8 GB以上のGPU: NVIDIA(CUDA)、Vulkan、またはMac(Metal) |
| ダウンロード | 6.32 GB、1ファイル |
| ライセンス | Fish Audio Research License: 非商用利用のみ |
動作の仕組み
このパッケージはデータのみで、モデルファイルを指定するだけです。ライセンスに同意すると、アプリがHugging Faceからそれらをダウンロードし、それぞれをsha256で検証して、お使いのコンピューター上でローカル音声生成(aigd.audiocpp、audio.cpp)により実行します。
ダウンロード
- Fish Audio S2 Pro(
aigd.tts-fish-s2-pro.q8-0): 6.32 GB、audio-cpp/audio.cpp-ggufからの1ファイル(そのコミットに固定)
対応コンピューター
8 GB以上のGPUが必要です。
ボイスと言語
- Fish Audio S2 Pro: 言語は自動。クリップとその文字起こしによる音声クローンに対応します。
参照クリップがない場合、モデルは自身の声を選択します。クローンにはクリップの文字起こしが必要です。
ライセンス
Fish Audio Research License。非商用利用のみ。 研究および非商用利用に限られます。商用利用にはFish Audioからの別途書面によるライセンスが必要です。
- Fish AudioによるS2 Pro: モデルカード、Fish Audio Research License。ライセンス本文: Fish Audio Research License。
- このパッケージのすべてのファイルは
audio-cpp/audio.cpp-ggufに由来します。Fish Audio Research License(上流のライセンス。audio.cppによる変換)。audio.cppのファミリー別ライセンス表: model_licenses.md。
必要な帰属表示: "This model is licensed under the Fish Audio Research License, Copyright © 39 AI, INC. All Rights Reserved."
制限事項:
- 研究および非商用利用に限られます。製品、有料ゲーム、企業内の業務での利用を含む商用利用には、Fish Audioからの別途ライセンスが必要です。
- モデルまたはそれを利用した製品を共有する場合は、ライセンスのコピーを提供し、Fish Audioの通知をNotice ファイルに保持し、"Built with Fish Audio"を目立つ形で表示してください。
- モデルおよびその出力は、別の基盤生成AIモデルの作成または改善に使用できません。
- 利用はFish AudioのAcceptable Use Policyに従う必要があります。
ダウンロードするモデルのライセンスを遵守する責任は利用者にあります。すべてのファイルはHugging Faceからダウンロードされます。AI Game Devはそれらをホストしていません。
バージョン
| バージョン | リリース日 | アプリが必要 |
|---|---|---|
| 1.0.2最新 | 0.32.0-beta.6 以降 | |
| 1.0.1 | 0.32.0-beta.6 以降 |
インストール
デスクトップアプリで
Packages ウィンドウを開き(ステータスバーのパッケージアイコン)、Browse を選んで aigd.tts-fish-s2-pro を検索し、Add to Project をクリックします。
アプリがまだない方は、Windows、macOS、Linux 用の AI Game Dev を無料でダウンロードしてください。
ターミナルから
gamedev CLI を使い、プロジェクトフォルダーで実行します。
gamedev pkg add aigd.tts-fish-s2-pro必要条件
- AI Game Dev 0.32.0-beta.6 以降
gamedev pkg add aigd.tts-fish-s2-pro