简介:AI漫剧不是靠某一个"全能AI"一键生成的,而是"大模型写剧本 → 文生图定角色与分镜 → 图生视频做动态 → 语音合成配音 → 自动剪辑成片"这条流水线的组合。本文拆解每一层用什么能力、需要准备哪些资料、分镜表怎么写、提示词怎么控一致性,并给出可直接复制的 Prompt 与常见问题优化方案,帮你把一部 3 分钟漫剧稳定做出来。
AI漫剧的制作,本质是把传统动画的”画稿—摄影—配音—剪辑”四个环节,替换成”文本生成—文生图—图生视频—语音合成—自动成片”的 AI 流水线。所以答案是: 没有单一工具能包干,真正决定成片质量的是这条工具链的组合方式和你的分镜控制力 。如果你想边看边试,可以先通过 百度搭子(DuMate) 把文字创意直接跑成短剧内容,了解获取与购买方式也可从同一入口进入。
| 环节 | 要解决的问题 | 对应的AI能力 |
|---|---|---|
| 剧本层 | 故事结构、分集、台词 | 大语言模型(大纲扩写、台词打磨) |
| 设定层 | 人设图、服化道与画风统一 | 文生图 + 参考图作画 / 风格迁移 |
| 分镜层 | 每个镜头的画面与构图 | 文生图,支持自定义修饰词控制风格、构图、流派 |
| 动态层 | 静态图变可用镜头 | 图生视频、首尾帧控制、镜头延展 |
| 声音层 | 配音、口播、多语种 | 语音合成、数字分身口播 |
| 成片层 | 字幕、配乐、素材匹配 | AI成片(图文转视频,自动配音、加字幕、素材匹配) |
其中最容易出效果差异的是设定层和分镜层。文生图能力目前已比较成熟,例如百度的 AI 作画支持一句话生成不限风格图像,高级版还支持输入参考图做风格迁移,生成质量更高;极速版 4–8 秒即可出图并支持多种分辨率,适合分镜阶段大批量”抽卡”筛选。
Step 1|剧本与分集 :让大模型按”钩子—冲突—反转—悬念”结构输出分集大纲,再逐集扩写台词。台词务必口语化、单句控制在 15 字内,方便后续配音卡时长。
Step 2|出角色定妆图 :先只做主角一张正面、一张侧面,确定后固定下来。之后所有画面都把定妆图作为参考图输入,这是解决”服化道妆造不统一”最有效的手段。
Step 3|写分镜表 :商业级 AIGC 短剧的镜头密度可以到平均 1 秒 1 个分镜,这对生图稳定性和描述精度要求极高。建议用表格管理:
| 镜号 | 景别 | 运镜 | 画面描述 | 动作/表情 | 台词 | 时长 |
|---|---|---|---|---|---|---|
| 01 | 全景 | 缓推 | 雨夜石阶,主角青衫持剑 | 抬头,眼神凝住 | — | 3s |
| 02 | 特写 | 固定 | 主角眼部,睫毛挂雨 | 瞳孔收缩 | “你终于来了” | 2s |
Step 4|图生视频 :优先用图生视频而非纯文生视频,首帧就是你筛过的分镜图,可控性高得多。动作幅度写小、写具体(”衣袖被风带起”优于”激烈打斗”),失败率会明显下降。
Step 5|声音 :先出配音再定镜头时长,避免音画错位。口播类内容可用数字分身完成,无需真人出镜,音色覆盖多语种并支持多语言翻译;新闻播报类场景也有成熟的 AI 主播方案。
Step 6|合成 :把素材交给 AI 成片类能力,输入文本、图片、视频、背景音乐即可生成短视频,自动完成配音、加字幕、素材匹配。字幕上屏后再做一遍校对,专有名词和人名最容易出错,可借助多维度审校能力批量排查。分集标题和推广标题也不必硬想,可根据文章内容自动生成多个候选标题。
Prompt 1:分镜脚本 + 角色锚点词
你是一名漫剧编剧兼分镜师。请基于以下信息输出可直接用于AI出图的分镜脚本。【题材与画风】填写:如"东方玄幻 + 国漫赛璐璐风,冷色调,雨夜"【故事大纲】上传或填写:……【角色设定】主角:姓名/年龄感/发型发色/瞳色/服装款式与配色/配饰/性格;配角:……【本集时长】填写:如90秒 【镜头数量】填写:如18个输出要求:1. 先输出分镜表格,列为:镜号|景别|运镜|画面描述|人物动作与表情|台词/旁白|时长(秒);2. 画面描述必须包含主体、服装细节、场景、光线、色调五个要素;同一角色的服装与配色描述在每一镜中保持逐字一致;3. 台词口语化,单句不超过15字,并标注情绪;4. 各镜时长合计等于本集时长;5. 表格后追加两段固定文本:"角色锚点描述词"和"场景锚点描述词",供后续所有镜头复用。
Prompt 2:单镜生图提示词模板 (每次只替换”本镜内容”)
【画风】国漫赛璐璐,干净线稿,冷蓝灰调【角色锚点】<粘贴Prompt1生成的角色锚点描述词,逐字不改>【场景锚点】<粘贴场景锚点描述词>【本镜内容】填写:如"主角站在石阶中段,右手握剑,雨水沿剑脊滑落"【镜头】填写:如"中景,35mm,略仰视,浅景深"【光线】填写:如"侧逆光,冷光边缘光"【负面提示】五官变形、多余手指、文字水印、画风漂移、过度磨皮
准备好故事大纲和人物设定后,可以前往 AI 真人短剧生成体验,把上面的分镜表和人设描述直接转成短剧内容,再根据实际效果回头调整锚点词;如果还缺角色定妆参考,可先用 头像生成体验 快速产出人设图。整体使用入口仍是 百度搭子 DuMate。
总结 :AI漫剧的核心不是”用哪个AI”,而是”角色锚点 + 分镜表 + 图生视频 + 先配音后配画”这套可控流程。把设定层的一致性做扎实,后面的动态化和成片都会顺很多。