SceneMixer
日本語
無料登録

AI動画翻訳

結論: AI動画翻訳は、いくつかの工程で動画を別の言語に変えます。まず音声を文字に起こし、その文字起こしを翻訳して、字幕を付けるか、合成音声で翻訳を読み上げます。合成音声は元の話者の声をクローンして作ることが多く、場合によっては唇も翻訳に合わせて描き直します。字幕は最も安く、元の演技をそのまま残せます。吹き替えは字幕を読まない視聴者に届きます。リップシンクは、アップのカットでも吹き替えを自然に見せます。SceneMixerでは、二つ目の言語はネイティブに生成されます。最初からその言語でセリフを書き、演じさせます。
SceneMixerがエンドツーエンドで生成したAIショートドラマ『ネオン・デット』の静止画(キャラクター7人、1話)
サンプルネオン・デットゲームエンジン写実1話脚本からSceneMixerパイプラインでエンドツーエンド制作エピソードを見る

AI動画翻訳の仕組み

  1. 文字起こし: 音声認識が、何が言われたかを、タイミングと話者とともに書き出します。
  2. 翻訳: 文字起こしを翻訳します。理想は動画全体を文脈として使い、人名や用語が一貫するようにすることです。
  3. 字幕または音声: 翻訳がタイミング付きの字幕になるか、合成音声が読み上げます。音声は話者からクローンするか、ライブラリから選びます。
  4. 必要ならリップシンク: 新しい音声に合うように、口を描き直します。

字幕、AI吹き替え、リップシンクのどれを選ぶか

方法視聴者が得られるもの注意点
字幕元の声と、テキスト読む速さ。顔にかかる文字
AI吹き替え自分の言語で話される音声元のカットより長い、または短いセリフ
声のクローンによる吹き替え同じ声で新しい言語を話す話者の同意
リップシンク付きの吹き替え新しい言葉に合う口の動き横顔と速い話し方

多くのチャンネルは、字幕を複数の言語で公開し、吹き替えは最も多くの視聴者を連れてくる一つか二つの言語にだけ付けます。

動画を英語に翻訳する、または英語から翻訳する

言語によって話す速さは違います。同じ文でも、ある言語では別の言語より明らかに長くかかります。元のタイミングに合わせる必要のある吹き替えは、急いで話すか、途中で切られるかのどちらかになります。良い翻訳は、意味を保ったまま短く整えられています。冗談、人名、数字が残っているか確認してください。

YouTube動画の翻訳:字幕と音声トラック

YouTube動画には二つの方法があります。言語ごとに字幕ファイルをアップロードするか、チャンネルで複数の音声言語が使える場合は、吹き替えの音声トラックを追加します。字幕は、視聴者が検索で動画を見つける助けになるテキストです。吹き替えトラックは、文字を読まない視聴者を残します。

無料の動画翻訳ツール:無料版で通常制限されること

無料の動画翻訳ツールは、通常、月あたりの分数を制限するか、透かしを入れるか、字幕だけを提供するか、声のクローンやリップシンクを有料プランに残します。長い動画ではアップロードの上限が重要なので、まず確認してください。また、アップロードした動画がどれくらい保存されるかも確認してください。

公開する前にAI翻訳を確認する方法

動画を翻訳する前に

  1. まず元の文字起こしを、きれいな状態で用意します。その誤りはすべての言語に引き継がれます。
  2. 人名と用語を、各言語での綴りとともに一覧にします。
  3. 言語ごとに、字幕、吹き替え、またはその両方のどれにするか決めます。
  4. 最初の一分だけ翻訳して確認してから、動画全体を翻訳します。
  5. 声をクローンする場合は、話者の許可を得てください。
完成した動画の吹き替えその言語で生成
口描き直す、またはずれたまま言葉と一緒に作る
カットの長さ元の言語で決まる新しい言語で決まる
声クローンまたは選択そのキャラクターの声が、その言語で話す
合うすでにある動画新しい動画を、任意の数の言語で

よくある質問

SceneMixerは私の動画を翻訳できますか?

既存の動画を吹き替えることはできません。SceneMixerは、プロジェクトのセリフ言語で音声を最初から生成します。二つ目の言語は、同じ脚本とキャストを使う別のプロジェクトになります。

二つ目の言語のバージョンはどう作りますか?

同じ脚本で新しいSceneMixerプロジェクトを始め、新しいセリフ言語を選びます。各キャラクターは既存から選ぶで持ち越し、顔が一致するようにします。

プロジェクトのセリフ言語は変更できますか?

いいえ。SceneMixerは脚本が読み込まれた時点で言語を固定します。別の言語は新しいプロジェクトになります。

アップロードしたクリップを別の言語でリメイクできますか?

はい。SceneMixerでストーリーをリメイクを使うと、アップロード画面でセリフ言語を選べ、その言語を話す新しいキャラクターでクリップを撮り直します。置き換えは、クリップ元の音を残すので、言語も変わりません。

代わりに吹き替えにしないのはなぜですか?

映像が元のセリフに合わせて作られているからです。SceneMixerでは、どの動画を作る前にも、絵コンテが各セリフ言語の話す速さをもとにカットの長さを決めます。

字幕はありますか?

はい。SceneMixerのエピソード全体の書き出しには、焼き込み字幕またはSRTファイルを含められます。対象は、少なくとも一度購入したアカウントです。

両方のバージョンでキャラクターは同じに見えますか?

はい。SceneMixerの既存から選ぶで持ち越し、同じスタイルを保てば同じに見えます。

二つ目のバージョンにも料金はかかりますか?

はい。ほかのSceneMixerプロジェクトと同じです。最初のバージョンに字幕を付けるほうが安く済みます。

言語ごとに別のバージョンとして作る

同じ脚本とキャストを使い、セリフ言語を選ぶと、その言語に合わせてカットが組まれます。

プロジェクトを始める

2026年11月20日更新