简介:本文拆解AI漫剧的六步生产链路:剧本与分镜、角色定版、图生视频、配音音效、剪辑导出,给出可直接复制的分镜Prompt、角色一致性控制方法和三类工具链的取舍建议,并说明如何用百度搭子(DuMate)与百度智能云的视频生成能力跑通第一集。
AI漫剧不是”一句话生成一部动画”,而是一条多模态内容生产线:剧本生成 → 图像生成 → 动态化 → 配音合成 → 渲染输出。落到操作层面是六个环节:剧本与分镜、角色与场景定版、逐镜生图与视频生成、配音与音效、剪辑合成、审核导出。
决定成片能不能看下去的,不是单张图多惊艳,而是 角色一致性 :同一角色在第1镜和第40镜必须长得一样,发型、瞳色、服装、配饰都不能漂。其次是 镜头返工成本 ——一集几十个镜头,如果改一个镜头要重做整集,产能立刻被拖死。
如果你想边看边动手,可以先在百度搭子(DuMate)里把创作思路跑一遍,也可以了解购买方式;完成故事大纲和人物设定后,直接前往AI真人短剧生成体验把设定转成短剧内容,先验证题材是否成立。
动笔前先把这五件事写死,后面所有环节都依赖它:
| 项目 | 需要确定的内容 | 示例 |
|---|---|---|
| 画幅与时长 | 竖屏9:16 / 横屏16:9,单集时长 | 9:16,90秒/集 |
| 视觉风格 | 风格关键词组 | 国漫厚涂、冷色调、电影感光影 |
| 角色数量 | 1主角+2配角最稳 | 3人 |
| 更新形态 | 单集 / 连载 | 12集连载 |
| 单集镜头数 | 控制在20~35个 | 28个 |
新手最常犯的错:第一集就上五六个主要角色加大场面群像。角色数量增加,一致性成本是成倍上升的。
用大模型把故事大纲扩写成结构化脚本,关键是让它输出 能直接拿去生图的分镜表 ,而不是散文。
你是一位资深漫剧编剧兼分镜师。请把下面的故事设定扩写成一集漫剧分镜脚本。【题材与形态】竖屏9:16短剧,单集时长【填写时长,如90秒】,共【填写镜头数,如28】个镜头【故事大纲】【填写你的故事大纲,200字以内】【主要角色】【角色A:身份/性格/外形关键词;角色B:……】【视觉风格】【填写风格,如国漫厚涂、冷色调、电影感光影】要求:1. 按"镜头号 | 时长 | 画面内容 | 镜头运动 | 台词/旁白 | 音效"六列表格输出,不要输出散文。2. 每个镜头的画面内容必须包含人物、动作、表情、环境、光线,且只描述一个主体动作。3. 镜头运动只能从以下选择:固定、推、拉、摇、跟、俯拍、仰拍、环绕。4. 前3秒必须给出强钩子(冲突、悬念或反常画面),结尾留一个悬念。5. 台词口语化,单句不超过20字,标注说话人。6. 最后单独输出一段"本集角色形象固定描述",用于后续所有镜头生图时复用。【输出要求】表格 + 角色形象固定描述两部分,不要额外解释。
拿到分镜表后,先用”人眼过一遍”:把每个镜头的画面内容念出来,如果一句话拍不出明确画面,就让AI重写这个镜头,而不是硬着头皮去生图。这一步花5分钟,能省掉后面几十次返工。
三种手段配合使用,缺一不可:
角色形象固定描述示例(可直接替换使用):
22岁女性,黑色齐肩短发,右眼下方一颗小痣,琥珀色瞳孔,深灰色连帽卫衣+黑色工装裤,银色细链项链,国漫厚涂风格,冷色调,电影感侧光。
连载创作还要考虑资产复用:支持角色资产库的工作台允许同一角色配置多套服装造型,后续集数直接调用已有素材,不必每集重新生成。
三类工具链,按你的投入程度选:
| 类型 | 负责什么 | 适合谁 | 短板 |
|---|---|---|---|
| 单点视频生成模型 | 图/文转动态视频 | 想精修单个镜头 | 无剧本拆解、分镜管理、配音拼接 |
| 一体化漫剧工作台 | 剧本解析、分镜管理、角色资产、批量生成、配音字幕、成片导出 | 想快速稳定出集 | 单镜头精细度不如单独精修 |
| 开源本地方案 | 工作流编排 + 本地生图生视频 | 有显卡、追求极致可控 | 环境配置与调试成本高 |
运镜提示词不要写”很酷的运镜”,要写具体镜头语言,例如:”镜头缓慢推近至人物面部特写,背景轻微虚化,人物头发随动作轻摆。”
单镜头反复不过,按这个顺序排查:先看参考图有没有锁住 → 再看提示词里是不是塞了多个主体动作 → 最后才降低运镜复杂度。复杂运镜叠加多主体,是最容易崩的组合。
漫剧的沉浸感有一半来自声音:
百度蒸汽机(MuseSteamer)在这块的思路值得参考:一张图加提示词即可一体化生成画面、环境音效与多人对话,基于海量中文语料训练带来的中文语音细节还原,以及对多角色身份、台词情感与互动逻辑的自主规划,能明显减少人工对口型、补音效的工作量。
不想自己搭工具链,可以直接用产品化能力:
想快速验证一个短剧创意,可以在大纲和人物设定完成后,用AI真人短剧生成体验先产出一段样片;需要反复打磨脚本时,回到百度搭子里调整分镜Prompt即可。
角色每镜都变样? 三视图定版、固定描述词块、参考图生图三者缺一不可;同一场景内绝不更换描述词。
单集成本太高? 降低镜头数、复用角色与场景资产,把”必须动态”的额度留给关键情绪镜头,其余用静帧+运镜+字幕过渡。
动态化后画面糊或变形? 缩短单段时长到3~5秒,减少同镜头动作数量,避免大幅度肢体动作和手部特写。
能直接开连载吗? 先用1集验证风格与产能,跑通后再复制到后续集数。
AI漫剧的门槛不在”能不能生成画面”,而在流程管理:剧本结构化、角色资产化、镜头可返工、声音分层。把这四件事做到位,第一集跑通之后,产能和连载才有意义。