ファンサイトに戻る

PROMPT GUIDE

AIで口パク(リップシンク)動画を作る方法

キャラクターがしゃべる動画を作りたい時に使うのが、口の動きを音声に合わせる「リップシンク」です。絵の選び方と音声の準備で仕上がりが大きく変わります。この記事では、口パク動画に向いている絵、作る手順、うまくいかない時の直し方をまとめました。

最終更新: よみもの めやす 約3分

結論を先に

AIの口パク(リップシンク)動画は、正面を向いた顔がはっきり写った絵と、雑音の少ない音声を用意して作ります。口の動きを音声に合わせる機能は、動画生成AIの一部や専用のサービスにあります。実在の人の顔や声を使う時は、必ず本人の同意をとってください。

AIの口パク(リップシンク)とは?

音声に合わせて、絵や動画の人物の口を動かす機能です。

リップシンクは、音声の「あ・い・う」のような口の形を読みとって、顔の口元を動かします。動画生成AIの一部の機能として入っているものや、口パク専用のサービスがあります。アニメのイラストに強いもの、写真向けのものなど得意分野が違い、料金や使える長さも変わるので、使う前に公式の説明を確認してください。

よく使われる形できること向いている使い方
1枚の絵+音声絵の口が動くキャラの自己紹介・あいさつ
動画+音声動いている人物の口を合わせる作った動画にセリフを足す
音も作れる動画生成AIセリフと口の動きをいっしょに作る短いセリフのカット

イラストの利用ルール

口パクに向いている絵は?

正面を向いていて、顔が大きく、口のまわりに何もかかっていない絵が向いています。

横顔や下を向いた顔、手や髪が口にかかっている絵は、口の形を読みとりにくく崩れやすくなります。顔が画面の3分の1以上の大きさで写っている胸から上の絵が扱いやすいです。口を閉じているか、軽く開いた自然な表情の絵から始めると、動きがなめらかになります。

口パク動画を作る手順は?

絵と音声を用意し、短いセリフで試してから本番を作ります。

AIで口パク動画を作る手順

  1. 正面を向いた、顔の大きい胸から上の絵を用意する
  2. セリフの音声を用意する。雑音や BGM の入っていない、声だけの音声がよい
  3. まずは3〜5秒の短いセリフで試し、口の動きと顔の崩れを確かめる
  4. うまくいったら本番のセリフで作る。長い時は文ごとに分けて作り、あとでつなぐ
  5. 動画編集ソフトで BGM や字幕を足して仕上げる

口がずれる・顔が崩れる時は?

音声の雑音と、絵の向き・大きさを見直すと直ることが多いです。

失敗原因直し方
口の動きが音声とずれる音声に BGM や雑音が入っている声だけの音声にしてから作る
口のまわりがゆがむ横顔・顔が小さい正面で顔の大きい絵にする
歯や口の中がおかしい大きく口を開けた絵から始めた口を閉じた自然な表情の絵にする
顔全体がゆれる動きが大きくなる設定・長いセリフ短く分けて作る。動きの強さを下げる
アニメの絵で口が出ない写真向けのサービスを使っているイラストに対応したサービスを選ぶ

実在の人の顔や声を使う時の注意は?

本人の同意がない顔や声を使うことはできません。

実在の人の写真や声を使って、その人が言っていないことを話しているように見せる動画は、本人を傷つけたり、だましたりすることにつながります。自分の写真や声、本人から許可をもらったもの、自分で作ったキャラクターだけを使ってください。サービスの利用規約でも、他人の顔や声の使い方が決められていることが多いです。

りんかのコツ

  • キャラの声は、音声合成のサービスの利用規約(商用利用など)も確かめる
  • セリフが長い時は、1文ずつ作ってつなぐと崩れにくい
  • 字幕をつけておくと、音なしで見る人にも伝わる

画像から動画を作る基本の手順は 画像から動画を作るAIの使い方(静止画を動かす手順) →

口パク動画は、まず短いあいさつ(「こんにちは」など)で試すと、絵や音声の向き不向きがすぐに分かります。うまくいった絵と音声の組み合わせを保存しておくと、次からの作り直しが少なくなります。

AI動画にBGM・効果音をつける方法は AI動画にBGM・効果音をつける方法 →

写真をアニメ風にする時の注意(肖像権)は 写真をアニメ風のイラストにするAIの使い方(頼み方・失敗の直し方・注意点) →

コピペ用:口パク向けの絵を作る時のプロンプトの例

口パクに使う1枚目の絵を作る時の例です。1本目がタグ型、2本目が文章型です。

1girl, solo, looking at viewer, facing viewer, closed mouth, light smile, portrait, upper body, simple background, soft lighting
A front-facing portrait of an anime girl from the chest up, looking straight at the viewer with a calm closed-mouth smile, hair kept away from her face, plain soft background, even lighting.

FAQ

よくある質問

AIで口パク動画を作るには何が必要ですか?

正面を向いた顔のはっきりした絵と、雑音の少ないセリフの音声が必要です。口の動きを合わせる機能のある動画生成AIか、口パク専用のサービスを使います。

アニメのイラストでも口パクできますか?

できるサービスがありますが、写真向けのサービスだと口がうまく動かないことがあります。イラストに対応しているか、公式の説明を確認してください。

口の動きが音声とずれます。

音声に BGM や雑音が入っていると、口の形を読みとりにくくなります。声だけの音声にしてから作り、長いセリフは短く分けてください。

有名人の写真で口パク動画を作ってもいいですか?

本人の同意がない実在の人の顔や声を使うことはできません。自分の写真や声、許可をもらったもの、自作のキャラクターだけを使ってください。

RINKA WORLD

読んだあとは、りんかワールドで

MORE

あわせてどうぞ