参照画像でキャラの顔を固定する、AIショート動画の一貫性テクニック
AIショート動画を作り始めて、最初にぶつかる壁が「キャラの顔が毎カットで変わる」問題です。1カット目は可愛いヒロインだったのに、2カット目では別人になっている——そんな経験、ありませんか？
特に連続したストーリーを短尺で見せるAI短劇では、顔の一貫性は作品の命です。視聴者は「同じ人物が同じ物語を生きている」と信じられなければ、数秒で離脱してしまいます。
この記事では、参照画像を使ってキャラの顔を固定し、キャラ一貫性を保ったままAIショート動画を量産するための、実践的なステップとコツを整理します。使用するのは、MiniMax H3を主模型とした「墨川导演台（MiniMax H3 AI导演台）」です。
なぜ参照画像が「顔固定」の鍵になるのか
考え方はシンプルです。AIに「こんな顔の人物」と文章だけで伝えると、毎回モデルが微妙に違う顔を想像してしまいます。一方、参照画像を渡せば、モデルは「この顔を基準に描く」という縛りを得られます。
これは料理に似ています。「カレーを作って」と言われたら人によって味がバラバラですが、「このレシピ通りに」と渡されれば毎回同じ味に近づきます。参照画像は、キャラの顔における“レシピ”なのです。
墨川导演台では、資産庫でキャラ・シーン・道具・参考動画を管理でき、参考画像をアップロードして人物やシーンの一貫性を保てます。ここにキャラの基準顔を登録しておくのが、すべての出発点になります。
ステップバイステップ：参照画像で顔を固定する流れ
ステップ1：キャラの「基準顔」を用意する
まず、そのキャラの決定版となる顔画像を1枚用意します。正面寄りで、表情がニュートラルなものが扱いやすいです。AI制図の文生図・図生図を使えば、ゼロから基準顔を作ることもできます。
作った基準顔は、資産庫にキャラとしてアップロードして登録します。ここで大切なのは「1キャラ＝1基準顔」を最初に決め切ること。途中で基準を変えると、前後のカットで顔がズレます。
ステップ2：AI編劇で六段式の脚本と絵コンテを作る
次にAI編劇の出番です。対話形式で六段式の脚本と絵コンテの下書きを生成できます。日本語・中文・英語・スペイン語・アラビア語の5言語に対応しており、AIは返答しながら下書きを実際に脚本ライブラリへ書き込みます。
ここで各カットに「どのキャラが登場するか」を明確にしておくと、後の生成で参照画像を紐づけやすくなります。
ステップ3：絵コンテカードに参照画像を紐づける
脚本庫では脚本・エピソード・絵コンテカードを管理できます。各カットに対して、ステップ1で登録したキャラの参照画像を割り当てていきます。
このとき、AI制図で首フレーム（首帧）・尾フレーム（尾帧）やキャラ参考図を生成しておくと、カット間のつながりが滑らかになります。前のカットの尾フレームを次のカットの首フレームに近づける——これが分镜衔接の基本テクニックです。
ステップ4：プロジェクト庫で単镜生成→批量生成
プロジェクト庫では、プロジェクト単位で生成タスクとバージョンを整理し、単镜生成と批量生成の両方に対応しています。
コツとしては、いきなり全カットを批量生成せず、まず1カットだけ単镜生成して顔を確認すること。基準顔とズレていれば、参照画像の選び方やプロンプトを見直します。納得できたら、同じ設定で残りを批量生成すれば、顔が揃った状態で一気に量産できます。
ステップ5：音声とリップシンクを合わせる
顔が固定できたら、次は声です。音声庫では音色克隆・リップシンク・BGM・効果音を扱えます。AI配音はIndexTTS 2.5による多言語配音で、感情コントロールにも対応。同じキャラには同じ音色を固定で割り当てることで、「顔も声も同じ人物」という一貫性が完成します。
一貫性を崩さないための実践的なコツ
- 基準顔は正面・ニュートラルで：表情が強すぎる画像は、他の感情のカットで破綻しやすくなります。
- 参照画像はキャラごとに整理：資産庫でキャラ・シーン・道具を分けて管理すると、どのカットで何を使ったか追いやすくなります。
- シーンも参照画像で固定：人物だけでなく背景も参照画像を用意すると、同じ部屋・同じ街並みが保てます。
- 生成ログを確認する習慣：AI日志／系统志で生成ログとシステム状態をリアルタイムに確認できます。うまくいった設定を再現する手がかりになります。
- クラウド推論はComfyUIワークフロー：参照画像の一貫性・分镜衔接・批量キューに対応しています。ローカルGPUでも、クラウド（AutoDL・阿里云・腾讯云・仙宫云・カスタムSSHサーバー）でも動かせます。SSHで接続する際はローカルトンネルのポートが自動で隔離されるため、複数ユーザーでも混線しません。
はじめての方は、仙宫云のプライベートイメージを使ったテストが案内されています。仙宫云公式サイト（https://www.xiangongyun.com/register/B1H9M6 ）で招待コード B1H9M6 を入力して再登録し、認証後にアカウントIDを客服（WeChat：ymcandai）へ送ると、テストアカウントが開通して导演台イメージが使えるようになります。インスタンス起動後、右側のSSHから接続ホスト・ポート・パスワードを取得し、「云部署」ページに入力→「验证 SSH」→「启动云端 ComfyUI」で緑の起動成功表示を待てば、脚本を書いて動画生成をテストできます。
まとめ：顔を固定すれば、物語が立つ
参照画像でキャラの顔を固定することは、AIショート動画の品質を一段引き上げる最初の investment です。基準顔を決める→絵コンテに紐づける→単镜で確認→批量で量産→声を合わせる。この流れを一度作ってしまえば、あとは同じ設定を回すだけです。
分からない点があれば、公式サイト www.ymcdirector.com をチェックするか、客服WeChat ymcandai で相談してみてください。テンプレートや素材を探すなら、淘宝で「杨墨川AI」を検索するのも手です。まずは1キャラ・1カットから、顔固定の感覚をつかんでみましょう。🎬
