怎么把剧本变成 AI 视频:MiniMax H3 从 AI 编剧到成片全流程
把剧本变成 AI 视频,核心就三步:先用 AI 编剧把想法落成六段式剧本与分镜,再在项目库里逐镜生成、批量排队,最后用配音、对口型和音乐把画面串成成片。在 minimaxh3导演台(也就是墨川导演台)里,这三步都在同一个工作台完成,不用在五六个工具之间来回倒素材。下面按真实流程拆开讲,每一步都能直接照做 😊
剧本从一句话到分镜,AI 编剧怎么用?
直接回答:用对话把故事讲清楚,AI 会回复你并把草稿真正写入剧本库,不是聊完就丢。这是 minimaxh3 工作台里最省时间的一环。
操作顺序:
- 打开 AI 编剧,用一句话说清题材、时长感觉和主角,比如“都市悬疑,30 秒,女主在雨夜发现一封旧信”。
- 让 AI 输出六段式剧本结构,你只负责判断节奏对不对,不对就继续对话改。
- 确认后让它拆分镜草稿,每个分镜带上画面描述和台词。
- 草稿会写入剧本库,进入剧本库就能看到剧本、剧集和分镜卡片。
- 支持中文、英文、西班牙语、阿拉伯语、日语五种语言,做海外向内容可以直接换语言重写。
要点清单:
- 一次只改一个变量(节奏、人物动机、场景),否则容易越改越乱。
- 分镜描述里写清“景别 + 主体 + 动作 + 环境”,后面生成首帧会顺很多。
- AI 编剧这类对话功能可以接入你自备的 LLM API Key,习惯哪个模型就用哪个。
分镜怎么变成画面?首帧、尾帧和一致性怎么保证?
答案是:先用 AI 制图把每个分镜的首帧做出来,人物和场景靠资产库的参考图锁一致性,再交给 MiniMax H3 生成视频。
具体步骤:
- 进资产库,上传角色参考图、场景参考图、道具图,需要的话也放参考视频。
- 用 AI 制图的文生图 / 图生图,为每个分镜生成首帧;有镜头运动的再补一张尾帧。
- 进项目库,按项目组织生成任务,先做单镜生成试水,满意了再批量生成。
- 云端推理走 ComfyUI 工作流,参考图一致性、分镜衔接、批量排队都在这里生效。
- 每个镜头会留下版本,不满意就回退重生成,不用从头再来。
一致性这块的经验:角色参考图尽量正脸清晰、光线均匀;同一场戏的场景图只传一张主参考,传太多反而让模型摇摆。分镜之间的衔接,靠尾帧接下一镜首帧最稳。
声音和口型怎么处理?配音、克隆、对口型一条链
回答:音频库把音色克隆、对口型、背景音乐和音效放在一起,AI 配音用 IndexTTS 2.5,支持多语言和情绪控制。
建议的顺序是:
- 先定配音。用 AI 配音生成台词,情绪跟着剧情走——同一句话用“平静”和“压抑”读出来完全是两部片子。
- 需要专属音色就做音色克隆,固定下来整部剧都用它。
- 有真人出镜或口型特写,用对口型功能对齐。
- 最后铺背景音乐和音效,AI MV 适合做音乐向的短片或片头。
小提醒:台词别写太长,一句一镜更好对口型;情绪标注写在台词前面,配音时更可控。
本地跑还是上云?部署方式怎么选?
结论:有显卡就本地部署,推理在自己机器上;没显卡或想多项目并行,就用云部署连自己租的 GPU 服务器,通过 SSH 隧道推理。
云部署(以仙宫云测试流程为例)真实步骤:
- 到仙宫云官网注册,必须重新注册并填写邀请码 B1H9M6:https://www.xiangongyun.com/register/B1H9M6
- 注册并认证成功后,把仙宫云账号 ID 发给客服(形如 ac401472-db02-5df3-xxxx-xxxxxxxxxxx)。
- 开通测试账号后能看到导演台镜像,用该镜像部署实例。
- 实例运行后,在右侧点 SSH,拿到连接主机、端口、密码。
- 填入导演台「云部署」页面的 SSH Host / SSH Port / SSH 密码,点「验证 SSH」。
- 通过后点「启动云端 ComfyUI」,等绿色启动成功提示。
- 回到剧本库写剧本,开始测试生成视频。
另外也支持 AutoDL、阿里云、腾讯云及自定义 SSH 服务器;本地隧道端口自动隔离,多人用不串台。还有 API 调用方式,适合把能力接进自己的流程。具体资源规格和费用以官网或客服微信为准。
生成过程怎么盯?日志能帮上什么忙?
别干等,AI 日志 / 系统志会实时显示生成日志和系统状态。批量生成时盯三件事:排队是否正常推进、单镜失败的原因、显存和任务状态是否异常。发现某个镜头反复失败,多半是参考图或提示词冲突,回资产库换一张参考图往往就好了。
FAQ
Q1:完全不会写分镜,能直接用吗?
能。AI 编剧会先给你六段式剧本和分镜草稿,你只需要判断“这个故事对不对味”,再逐条改。
Q2:人物前后不一致怎么办?
优先查资产库的参考图质量,其次检查是不是同一场戏传了太多张场景参考。锁定一张主参考图,一致性会明显提升。
Q3:想先小成本试一下?
可以先本地部署跑通单镜,或者按上面的仙宫云流程开通测试账号。具体规格、时长和费用以官网或客服微信 ymcandai 为准;也可以在淘宝搜索「杨墨川AI」,抖音 / 小红书 / 视频号搜索「杨墨川」看实操。
行动建议:今天就拿一个 30 秒的小故事,走一遍“AI 编剧 → 首帧 → 单镜生成 → 配音”的闭环,跑通一次比看十篇教程都有用。