リップシンクか音声タイミングか:吹き替え動画に必要なもの
AI吹き替えではリップシンクが注目されがちですが、多くの教育動画では、吹き替えの出来を左右するのはそこではありません。両者の違いと、自分の動画にどちらが必要かの見分け方を紹介します。

リップシンクと音声タイミングは別の仕事
リップシンクは映像を変えます。話し手の口を描き直し、新しい言葉に合わせて動くようにします。音声タイミングは映像には手を加えず、新しい話し声を元の発話と同じ位置に間ごと配置し、画面の出来事と合うようにします。画面を使って教える動画のほとんどに必要なのは後者で、口がまったく映らない動画も多くあります。
両者が直すずれは違います。リップシンクは、口の動きと話している内容が違うずれを直します。タイミングは、カーソルがまだ画面の反対側にあるのに、声が「ここで Render をクリック」と言ってしまうずれを直します。
| リップシンク | 音声タイミング | |
|---|---|---|
| 変えるもの | 話し手の口の映像 | 新しい話し声の各セリフが聞こえるタイミング |
| 合わせるもの | 口を新しい言葉に | 声を、それが話された瞬間と画面に |
| 重要になる場面 | クローズアップ、顔出し動画、俳優が出演するシーン | チュートリアル、レッスン、画面録画、ナレーション |
| 欠けているとき | 口と声が別のことを言っている | 画面に表示される前に、声が手順を説明してしまう |
画面録画で大事なのはタイミング
画面録画、ソフトウェアのチュートリアル、ナレーション付きのレッスンには、合わせるべき顔がありません。視聴者が見ているのはカーソル、メニュー、ビューポートです。視聴者が気づくのは、声と画面が合っているかどうか。クリックと同時に指示が聞こえ、レンダリングが終わるまで説明が待ち、カーソルが探している間にためらいが入る、ということです。
タイミングがずれていると、ほかの何をもってしても吹き替えは救えません。言葉が正しく、声があなたのものでも、視聴者は各手順を目にする少し前に聞くことになるため、レッスンは元よりわかりにくくなります。吹き替えがタイミングを失う原因については、吹き替えで間が大切な理由で紹介しています。
視聴者があなたの顔ではなく画面を見ているなら、吹き替えに必要なのはタイミングです。
顔が画面いっぱいに映るとき
リップシンクは、画面上の口が大きいほど重要になります。インタビューのクローズアップ、顔出し動画、俳優が出演するシーンでは、言葉と合わない口の動きに視聴者は気づき、動画への没入が途切れてしまいます。画面録画の隅に小さく映るウェブカメラなら、ずれはずっと目立ちません。顔の映らないナレーションでは、そもそもずれようがありません。
リップシンクは、吹き替えとは別の工程でもあります。実在の顔の映像をコマごとに編集するもので、独自の確認作業が必要です。教育動画の場合、その確認は画面のごく一部に費やされることになりますが、視聴者が見入っているのは画面のほうです。
DubForge の立ち位置
DubForge はリップシンクを行いません。タイミングのために作られています。一人ひとりを本人の声で吹き替え、発話を一つひとつ動画自身の時間軸に配置するため、元の沈黙は吹き替えでも沈黙のまま、カーソルがクリックに届くときに声もそこに届きます。声に合わせて映像を変えるのではなく、映像に合わせて声を配置します。
この選択は、DubForge の始まりに由来します。DubForge は、Cinema 4D を教え、レッスンをポルトガル語で収録している 3D 講師が始めました。Cinema 4D のレッスンで視聴者が見るのはビューポートであり、解決すべき問題は、カーソルが届く前に声が「turn it off」と言ってしまうことでした。
オンライン講座、ソフトウェアのチュートリアル、自分のチャンネルで教えるクリエイターのために作られています。動画の大半が顔のクローズアップなら、リップシンク向けに作られたツールのほうがそうした動画には合っているでしょう。
冒頭に顔出しのイントロがある場合
多くのチュートリアルは、講師がカメラの前で1分ほど話してから画面に切り替わります。その最初の1分には、3つの現実的な選択肢があります:
- 顔を小さくする。 新しく収録するなら、カメラ映像を画面の隅に置くか、声だけで画面から始めましょう。小さな顔なら、画面いっぱいの場合よりずれがずっと目立ちません。
- 受け入れる。 口が合わない短いイントロのあとに、すべてのクリックに声が合うレッスンが続くなら、納得できるトレードオフかもしれません。吹き替えでイントロを見て、気になるかどうか判断してください。
- その部分は字幕にする。 動画編集ソフトで、イントロは元の音声のまま視聴者の言語の字幕を付け、画面録画が始まったところで吹き替えに切り替えます。
3つ目の方法は、DubForge のダウンロードで実現できます。吹き替え済みの動画に加えて、声のみの音声、音楽・背景音のみの音声、元の言語と吹き替え言語の字幕(吹き替えにタイミングを合わせた SRT と VTT ファイル)が手に入ります。これがあれば、編集ソフトで元の声と吹き替え言語の字幕を使ってイントロを作り直せます。その字幕の各行が、あなたが話している位置に合っているか確認してください。それぞれが向いている場面については字幕か吹き替えかで紹介しています。
質問
画面録画にリップシンクは必要ですか?
いいえ。合わせるべき顔がありません。視聴者が気づくのは、画面にその手順が表示されるときに声がそれを話しているかどうかなので、確認すべきはタイミングです。
隅に小さく映るウェブカメラにもリップシンクは必要ですか?
通常はあまり必要ありません。隅の小さな顔は、クローズアップよりずれがはるかに目立たず、視聴者の目は画面録画に向いています。吹き替えで1分ほど見て、ご自身で判断してください。
リップシンクとボイスシンクの違いは?
リップシンクは、口が新しい言葉に合うよう動画を変えます。音声タイミング(ボイスシンクとも呼ばれます)は、新しい話し声を元の発話の位置に配置し、画面の出来事に合わせます。
DubForge はリップシンクに対応していますか?
いいえ。DubForge はタイミングのために作られており、レッスン、チュートリアル、画面録画のために、間とクリックを元と同じ位置に保ちます。