自分の声でAI吹き替え:仕組みと確認すべきこと
AI吹き替えでは、動画を収録した本人の声で翻訳を話すことができます。その声がどこから来るのか、ライブラリの音声より優れているのはどんなときか、そして別の言語で話す自分の声を聴くときに何を確認すべきかを紹介します。
はい、AIで自分の声のまま動画を吹き替えられます
はい。AI吹き替えツールは、あなたに似た声で動画の翻訳を話せるので、受講者や視聴者は知らない人ではなくあなたの声を聞けます。DubForge では、声はアップロードしたファイルから取得されます。事前に声を録音したり学習させたりする必要はありません。レッスンをアップロードして言語を選べば、あなたの声で吹き替えが返ってきます。
自分の声での吹き替えも、ソフトウェアが話す翻訳であることに変わりはありません。あなたがその言語を話している録音ではないので、ほかの吹き替えと同じように、言葉、用語、タイミング、聞こえ方を確認する必要があります。
声はどこから来るのか
ツールによっては、あなたの代わりに話せるようになる前に、マイクに向かって台本を読んだり、声のサンプルを別にアップロードしたりする必要があります。DubForge は、吹き替える動画をもとに処理します。そのファイル内の話し声が翻訳の対象であり、同時に声の取得元でもあります。
これには実用面での意味もあります。録音から声を取得するツールはどれも、録音に含まれるものをもとに処理します。そのため、マイクを近づけ、室内の雑音が少ないクリアな録音ほど、使える情報が多くなります。チェックリストの残りは吹き替え用の動画を準備する方法で紹介しています。
アップロードするのは YouTube のリンクではなく、ファイルそのもの(MP4、MOV、M4A、WAV)です。リンクでは、権利を持っていることを示せないからです。プロジェクトの作成時には、音楽や背景音を残すかどうかも選びます。音楽と背景音は話し声から分離され、吹き替えの下に再びミックスされます。
複数の人が話している場合
レッスンの声は1人であることが多いものの、いつもそうとは限りません。共同ホスト、ゲスト、質問する受講者などです。DubForge でプロジェクトを作成するときは、動画内の声の数(1人、2人、3人以上、わからない)を選びます。話している一人ひとりがその人自身の声で吹き替えられ、元と同じタイミングで話します。そのため、質問は受講者の声のまま、答えはあなたの声のままに聞こえます。
エディターでは、それぞれの声に動画の時間軸上の専用レーンがあり、どのセグメントからでもオリジナルまたは吹き替えを再生して、誰が何を言っているかを聴けます。声を吹き替えるすべての人の同意が必要です。これについては後述します。
自分の声か、ライブラリの音声か
ライブラリの音声とは、ツールが誰にでも提供している既成の音声です。明瞭で心地よい声のこともあり、動画によってはそれが正しい選択です。自分の声が重要になるのは、視聴者が情報だけでなく、あなたという人物を追っている場合です。
- 自分の声を選ぶのは、視聴者があなたを目当てに戻ってくる場合です。講座、定期的に更新するチャンネル、受講者がすでに声を知っている講師などです。そうした視聴者は、知らない人が教えていることに気づきます。
- ライブラリの音声が合うのは、画面上の人物が重要でない場合です。発表者のいない製品紹介、ナレーション付きの解説動画、自分の声を聞かせたくない動画などです。
チャンネルは長く続く関係でもあります。元の動画があなたの声なら、吹き替えもあなたの声にすることで、チャンネルの吹き替え版も聞いてすぐあなたのものだとわかります。DubForge は一人ひとりをその人自身の声で吹き替えるので、前者のケースに合わせて作られています。チャンネルの観点からの選び方は、YouTube クリエイター向けガイドで紹介しています。
自分の声を聴くときのポイント
自分が話せないかもしれない言語で自分の声を聴くと、最初は違和感があります。そして最初の反応は、吹き替えそのものより、その違和感に向けられがちです。2回聴いてみましょう。1回目は自分として、2回目はあなたの声を聞いたことのない視聴者として。
- エネルギー。 普段どおりに教えている日のあなたのように聞こえるべきです。興奮しすぎず、平板すぎず、アナウンサーのようでもなく。
- 最初から最後まで同じ声か。 最初の1分のセグメントを再生し、次に最後のほうのセグメントを再生します。そのあいだで声が変わっていないはずです。
- 名前と用語。 製品名、メニュー項目、ショートカット、数字は、翻訳でミスが起きやすい部分です。文字起こしか翻訳で修正しましょう。
- 間。 何かの読み込みを待つために話を止めたなら、吹き替えも止まるべきです。吹き替えで間が大切な理由をご覧ください。
- 行の終わり。 各行の最後の言葉を聴きましょう。途切れた語尾は見逃しやすく、視聴者が一度気づくと、あらゆる箇所で耳につくようになります。
- 繰り返した行。 同じことを意図して2回言った場合、2回目が貼り付けたように聞こえないか確認します。
おかしな箇所があれば、そのセグメントの文字起こしまたは翻訳を編集して再生成します。1語だけを差し替えるのではなく、考えのまとまり全体が同じ声で作り直されます。すべてのバージョンが保存され、以前のバージョンに戻すのは無料です。一連の手順はAI吹き替えの確認方法にまとめています。

同意と、視聴者への説明
声は個人的なものであり、吹き替えはその人に新しい言葉を語らせることです。DubForge で吹き替えられるのは、ご自身の声、または声の持ち主から書面で許可を得た声です。プロジェクトごとに、そのファイルについて確認していただきます。著名人も例外ではなく、その声にも本人の書面による許可が必要です。
動画に共同ホストやゲストが登場して話す場合は、吹き替える前に書面で許可を得てください。詳しくは誰の声を吹き替えられるかで説明しています。音声ガイドラインと利用ポリシーでは、なりすましや詐欺など、決して許可されない行為を含むルールを定めています。
書き出した音声には AI による生成であることを示す表示が付きます。また DubForge の利用規約では、吹き替えが AI で作成されたことを視聴者に伝えるようお願いしています。「英語音声は、元のポルトガル語から AI で吹き替えたものです」のような一文を説明欄に入れれば、視聴者は何を聴いているのかがわかります。
ファイルは非公開のままです。見られるのはあなただけで、ダウンロードリンクは5分で期限切れになります。チームがプロジェクトにアクセスできるのは管理ツールを通じてのみで、その閲覧はすべて記録されます。詳しくは信頼性のページをご覧ください。
質問
自分の声でAI吹き替えをするには、声のサンプルを録音する必要がありますか?
DubForge では必要ありません。声はアップロードした動画から取得されるので、事前に録音したり学習させたりするものはありません。
AI吹き替えは自分とまったく同じ声に聞こえますか?
あなたの声で話しますが、それはソフトウェアが話す翻訳であって、あなたがその言語を話しているわけではありません。ご自身の動画で結果を確かめてください。DubForge の無料トライアルでは30秒を吹き替えられ、聴いて確かめるには十分です。
他人の声をAIで吹き替えられますか?
本人から書面で許可を得た場合に限ります。また、ファイルごとにそれを確認していただきます。著名人の声も同様です。
行を編集すると、吹き替えの声は変わりますか?
いいえ。セグメントの文字起こしまたは翻訳を編集して再生成すると、考えのまとまり全体が同じ声で作り直されます。以前のバージョンはすべて保存され、戻すのは無料です。