Windows 向けリアルタイムのアニメ音声翻訳

全編のウォークスルーを見る（11:06）— 字幕は23言語

日本語音声のリアルタイム認識と AI 吹き替え

VoxisLive は、ブラウザ、メディアプレーヤー、ゲームから出る日本語のシステム音声を処理します。発話の検出はお使いの PC 上で行われ、翻訳された声は話し手から数秒遅れてついてきます。任意で字幕オーバーレイをオンにすると、再生中のセリフが文字でも表示されます。

Windows で視聴セッションを設定する

アニメの音声は、ブラウザのストリーム、VTuber の配信、VLC で開いたローカルファイルのどれから流れても同じように扱われます。そのため、音源が何であっても設定は変わりません。

1. エピソードを再生し、セリフを1つ流します。これで Windows が出力デバイスを実際に開いた状態になります。
2. VoxisLive を開き、動画・ゲームモードを選んで、79の翻訳先から聞きたい言語を選びます。
3. 「開始」を押します。プレーヤーには何もインストールしません。Voxis は WASAPI ループバックでシステムの音声ミックスを読み取り、クラウドのモデルに送ります。
4. 音声だけでなく文字でも見たい場合は、字幕オーバーレイをオンにします。

ここから、日本語のトラックは小さくなり、その上に声優のセリフから数秒遅れてついてくる翻訳音声が重なります。セリフの合間には元の音量に戻ります。発話の検出と話者の切り替えラベルはお使いの CPU 上で計算されるため、2人のやり取りが1つの長い文章にまとまってしまうことはありません。

できないこと

1クールぶんの視聴計画を立てる前に、無料プランとアプリ自体の限界を正確にお伝えします。

• 無料プランで音声が出るのは、79言語のうち35言語です。どのプランでも79の翻訳先すべてが翻訳されますが、無料で音声が付くのは35言語だけです。残りの44言語は、聞くのではなく読むライブ字幕で届きます。
• デスクトップ専用です。VoxisLive は Windows 10 バージョン 2004 以降で動作し、それより古いビルドでは従来のループバックキャプチャに切り替わります。Linux でも snap としてインストールして使えます。macOS 版はないため、Mac やスマートフォンで見ているエピソードは対象外です。
• 無料時間には1日の上限があります。1日10分に加え、有料エンジンを一度だけ15分お試しできます。長いシリーズには、プリペイド式の分数が必要です。分数はアカウントが有効な間は失効しません。