AI漫剧都是用啥做的?制作流程与工具全解析

作者:梅琳marlin2026.11.19 08:20浏览量:0

简介:本文围绕“AI漫剧都是用啥做的”这一问题,拆解剧本、角色设定、分镜、图像生成、视频生成、配音字幕和剪辑发布流程,并提供可复制Prompt与优化建议,帮助你快速搭建一套可落地的AI漫剧制作方法。

AI漫剧并不是靠某一个软件单独完成,而是一条由大模型、文生图、图生视频、语音合成和剪辑工具共同组成的流水线。若你想先快速体验从故事到短剧的转化,可以通过百度搭子 DuMate进入相关AI创作场景,也可以先了解购买方式。下面按实际制作顺序,讲清楚每一步该用什么、怎么做、如何优化。

一、先给结论:AI漫剧到底是用什么做的?

AI漫剧通常不是“一个工具一键生成”,而是由多个AI能力组合完成。核心链路可以概括为:

故事文本 → 角色设定 → 分镜脚本 → 图像生成 → 图生视频 → 配音字幕 → 剪辑合成 → 发布封面与标题。

具体来说,常见制作方式包括以下几类:

制作环节 常用AI能力 输入内容 输出结果
剧本创作 大语言模型 题材、人物、世界观、集数 故事大纲、台词、分集脚本
角色设定 大语言模型 + 文生图 人物小传、外貌关键词 角色卡、立绘、表情参考
分镜设计 大语言模型 + 图像生成 脚本、镜头需求 分镜表、画面提示词
场景画面 文生图、图生图 场景描述、风格词 背景图、概念图、关键帧
动态视频 图生视频、首尾帧、多主体参考 静态图、动作描述 镜头动态、人物动作
声音制作 语音合成、音画同步 台词、情绪、语速要求 配音、旁白、字幕
后期合成 剪辑工具、字幕工具 视频片段、音频、字幕 成片、封面、标题

从平台能力角度看,AI成片类服务可以把文本、图片、视频、背景音乐等素材组合成短视频,并自动完成配音、加字幕、素材匹配等环节。这说明AI漫剧并不是单点生成,而是“素材生产 + 自动合成”的组合流程。

二、第一步:用AI写剧本和人物设定

AI漫剧的第一块基石是剧本。如果没有清晰的人物、冲突和节奏,后面的画面再精美,也很难形成完整故事。

你需要先准备以下资料:

  1. 题材类型 :玄幻、都市、悬疑、恋爱、搞笑、国风、科幻等。
  2. 目标时长 :单集30秒、1分钟、3分钟,还是多集连续剧。
  3. 主角设定 :姓名、年龄、身份、性格、目标、弱点。
  4. 核心冲突 :主角想要什么,谁阻止他,最大危机是什么。
  5. 视觉风格 :国漫、二次元、水墨、赛博、写实、绘本风等。

可以让AI先输出“故事大纲 + 人物小传 + 分集梗概”,再进入分镜阶段。

可复制Prompt:AI漫剧剧本与人物设定

  1. 你是一名资深漫剧编剧,请根据以下信息创作一部AI漫剧。
  2. 【填写题材类型】例如:国风玄幻 / 都市悬疑 / 恋爱轻喜剧
  3. 【填写目标时长】例如:单集60秒,共3集
  4. 【填写主角设定】例如:女主是年轻机关术师,冷静聪明,但害怕失败
  5. 【填写核心冲突】例如:她必须在天亮前修复一座失控的机关城
  6. 【填写视觉风格】例如:国漫风格,冷色调,电影感光影
  7. 请输出以下内容:
  8. 1. 故事一句话梗概;
  9. 2. 三集剧情大纲,每集包含:开场钩子、冲突升级、结尾悬念;
  10. 3. 主角、反派、关键配角的人物小传;
  11. 4. 每个主要角色的外貌关键词,包括发型、服装、配饰、气质;
  12. 5. 每集3个关键场景,并说明场景氛围。
  13. 要求:
  14. - 剧情节奏快,适合短视频平台;
  15. - 每集结尾必须留下悬念;
  16. - 人物设定要便于后续AI绘图保持一致;
  17. - 输出格式清晰,使用表格或分点列表。

这个Prompt的重点不是让AI“随便编”,而是提前锁定人物、冲突和视觉风格。后续所有画面生成,都要围绕这份设定展开。

三、第二步:解决角色一致性问题

AI漫剧最常见的问题之一是角色不一致:上一秒还是红衣少女,下一秒变成短发御姐;同一个角色在不同镜头里脸型、服装、配饰都不同。这会严重破坏观看体验。

解决方法不是单纯“抽卡重试”,而是建立一套角色资产。

1. 给每个角色建立“角色卡”

角色卡应包含固定描述,例如:

  1. 角色名:林青禾
  2. 身份:机关术师
  3. 年龄:18岁
  4. 发型:黑色高马尾,额前碎发
  5. 服装:青蓝色短打,银色护腕,腰间挂小型机关匣
  6. 气质:冷静、干练、眼神坚定
  7. 风格:国漫风,精致线条,电影感光影

每次生成角色图时,都尽量复用这些关键词。

2. 先生成角色三视图

建议先让AI生成:

  • 正面半身像;
  • 侧面半身像;
  • 全身立绘;
  • 表情参考:平静、愤怒、惊讶、悲伤。

这些图可以作为后续图生视频的参考图,减少角色漂移。

3. 固定风格词和负面词

例如:

  1. 风格词:国漫风格,精致线稿,电影级光影,高细节,稳定人物结构
  2. 负面词:多手多脚,五官变形,服装不一致,画面模糊,低清晰度

如果某个角色总是生成错误,可以减少复杂动作,先保证静态形象稳定,再进入动态视频。

四、第三步:用AI生成分镜和关键画面

分镜是把文字剧本变成画面的过程。一个合格的分镜表通常包括:

镜号 画面内容 景别 镜头运动 台词/音效 生成提示词
1 女主站在机关城门前 全景 缓慢推进 风声 国漫风,少女站在巨大机关城门前,冷色调
2 女主抬手触碰机关 特写 固定 机关启动声 手部特写,银色护腕,机关纹路亮起
3 城门缓缓打开 远景 拉远 低沉音效 巨大石门打开,尘埃飞扬,史诗感

分镜阶段可以先让AI生成“文字分镜表”,再逐条转成图像提示词。

可复制Prompt:分镜脚本生成

  1. 请根据以下剧本内容,生成一份适合AI漫剧制作的分镜表。
  2. 【上传或粘贴剧本内容】
  3. 【填写单集时长】例如:60秒
  4. 【填写视觉风格】例如:国漫风,电影感,冷色调
  5. 【填写角色设定】例如:女主林青禾,黑色高马尾,青蓝色短打,银色护腕
  6. 请输出表格,包含:
  7. 镜号、画面内容、景别、镜头运动、台词、音效、AI绘图提示词。
  8. 要求:
  9. 1. 每个镜头时长控制在2到5秒;
  10. 2. 开头3秒必须有强钩子;
  11. 3. 每个镜头都要能独立生成一张关键帧;
  12. 4. 提示词中必须包含角色固定特征,避免人物不一致;
  13. 5. 不要生成过于复杂的多人动作,优先保证画面稳定。

在图像生成阶段,文生图系统可以根据自然语言生成不同风格图像,为角色概念图、场景图和分镜画面提供基础。你可以先生成静态关键帧,再挑选最稳定的一张进入视频生成。

五、第四步:把静态图变成动态视频

AI漫剧真正难的地方,是让画面“动起来”。常见做法包括:

  1. 图生视频 :上传一张关键帧,让AI生成简单动态。
  2. 首尾帧控制 :指定开始画面和结束画面,让中间过渡更可控。
  3. 镜头运动控制 :推、拉、摇、移、跟拍等。
  4. 动作简化 :复杂打斗容易崩坏,建议拆成多个短镜头。
  5. 多主体参考 :多人同框时,需要明确人物位置关系和服装特征。

可复制Prompt:图生视频提示词

  1. 请基于以下图片生成一段3秒动态视频。
  2. 【上传关键帧图片】
  3. 【填写角色动作】例如:女主缓缓抬头,风吹动发丝
  4. 【填写镜头运动】例如:镜头缓慢推进
  5. 【填写环境效果】例如:尘埃飘动,远处机关城灯光闪烁
  6. 【填写风格要求】例如:国漫风,电影感,稳定人物结构
  7. 要求:
  8. - 保持人物脸型、发型、服装不变;
  9. - 动作幅度不要过大;
  10. - 画面不要闪烁;
  11. - 背景元素保持稳定;
  12. - 输出适合短视频平台的横屏或竖屏画面。

如果生成结果出现人物变形,可以缩短动作描述,例如把“女主快速奔跑并回头拔剑”改成“女主缓慢回头,手握住剑柄”。动作越复杂,AI越容易失控。

六、第五步:配音、字幕和音画同步

AI漫剧的声音部分通常包括:

  • 角色配音;
  • 旁白;
  • 环境音效;
  • 背景音乐;
  • 字幕;
  • 口型或节奏匹配。

AI成片类能力可以辅助完成配音、字幕和素材匹配,减少人工剪辑压力。数字人、数字员工类平台也可支持AI视频、多语种音色等能力,为漫剧衍生内容提供更多形式。

配音优化建议

  1. 给不同角色设置不同音色 :主角、反派、旁白要区分。
  2. 控制语速 :短视频漫剧语速不宜过慢,但也不能快到听不清。
  3. 标注情绪 :如“冷静”“愤怒”“急促”“悲伤”。
  4. 字幕短句化 :每行不超过15个字,方便手机端阅读。
  5. 音画同步 :重要台词出现时,画面尽量给到人物脸部或动作特写。

可复制Prompt:配音与字幕脚本整理

  1. 请将以下漫剧脚本整理成配音和字幕版本。
  2. 【粘贴脚本内容】
  3. 【填写角色音色要求】例如:女主冷静清亮,反派低沉压迫,旁白沉稳
  4. 【填写单集时长】例如:60秒
  5. 请输出表格,包含:
  6. 镜号、角色、台词、情绪、语速、字幕文本、音效建议。
  7. 要求:
  8. 1. 字幕每行不超过15个字;
  9. 2. 台词口语化,适合短视频观看;
  10. 3. 每句台词标注情绪和语速;
  11. 4. 如果一句台词超过20个字,请拆成两句;
  12. 5. 输出结果要能直接用于配音和字幕制作。

七、第六步:剪辑合成与发布优化

当素材齐全后,进入剪辑阶段。AI漫剧的剪辑重点不是炫技,而是节奏清楚、情绪连贯。

建议按以下顺序处理:

  1. 粗剪 :按分镜顺序排列画面。
  2. 卡点 :根据音乐或台词节奏调整镜头长度。
  3. 补镜头 :如果某段不连贯,补生成过渡画面。
  4. 加字幕 :字幕要短、清楚、与语音同步。
  5. 加音效 :风声、脚步声、机关声、转场音能增强氛围。
  6. 做封面 :封面要突出主角、冲突和悬念。
  7. 写标题 :标题要直接体现剧情钩子。

在发布环节,AI还可以辅助生成标题。例如根据文章内容自动生成多个标题,帮助内容生产者快速获得选题灵感。

可复制Prompt:漫剧标题与简介生成

  1. 请根据以下漫剧剧情,生成适合短视频平台发布的标题和简介。
  2. 【粘贴剧情梗概】
  3. 【填写目标平台风格】例如:悬疑感、爽感、情感向、国风
  4. 【填写主角名称】例如:林青禾
  5. 请输出:
  6. 1. 10个标题,每个标题不超过20字;
  7. 2. 3个视频简介,每个简介不超过80字;
  8. 3. 5个适合作为封面的关键词;
  9. 4. 3个开头钩子文案。
  10. 要求:
  11. - 标题要有悬念,不要空泛;
  12. - 避免夸张虚假表达;
  13. - 突出主角身份、核心冲突或反转;
  14. - 适合手机端快速阅读。

八、常见问题与优化方法

1. 角色总是变样怎么办?

优先检查三个地方:

  • 是否每次生成都使用了同一套角色关键词;
  • 是否上传了参考图;
  • 是否让角色做了过于复杂的动作。

优化方法:先固定角色立绘,再生成简单动作,最后逐步增加镜头复杂度。

2. 画面闪烁、人物崩坏怎么办?

可以尝试:

  • 缩短单镜头时长;
  • 减少人物数量;
  • 避免快速打斗;
  • 把复杂动作拆成多个镜头;
  • 使用首尾帧控制过渡。

3. 剧情不吸引人怎么办?

回到脚本层面检查:

  • 开头3秒是否有冲突;
  • 主角是否有明确目标;
  • 每集结尾是否有悬念;
  • 台词是否太长;
  • 是否存在无效场景。

4. 制作效率太低怎么办?

建议建立模板:

  • 固定角色卡模板;
  • 固定分镜表模板;
  • 固定提示词模板;
  • 固定配音字幕模板;
  • 固定封面标题模板。

这样每次新项目都可以复用,而不是从零开始。

九、一个完整可复制的AI漫剧制作Prompt

  1. 你是一名AI漫剧制作专家,请帮助我完成一部短篇AI漫剧的制作方案。
  2. 【填写题材】例如:国风玄幻
  3. 【填写时长】例如:单集60秒,共3集
  4. 【填写主角设定】例如:林青禾,18岁,机关术师,冷静聪明
  5. 【填写核心冲突】例如:她必须在天亮前修复失控的机关城
  6. 【填写视觉风格】例如:国漫风,冷色调,电影感光影
  7. 【填写输出要求】例如:需要剧本、人物卡、分镜表、绘图提示词、视频提示词、配音字幕表
  8. 请按以下格式输出:
  9. 1. 故事梗概;
  10. 2. 三集分集大纲;
  11. 3. 主要角色人物卡;
  12. 4. 每集分镜表,包含镜号、画面、景别、台词、音效、绘图提示词;
  13. 5. 每个关键镜头的图生视频提示词;
  14. 6. 配音与字幕表;
  15. 7. 发布标题和封面关键词。
  16. 要求:
  17. - 适合短视频平台;
  18. - 角色描述必须固定,方便后续保持一致;
  19. - 每个镜头时长控制在2到5秒;
  20. - 避免复杂多人动作;
  21. - 输出内容要能直接用于AI生成和剪辑。

完成故事大纲和人物设定后,可以前往AI真人短剧生成体验,尝试将创作思路转化为短剧内容。如果你做的是偏动漫、漫画风格的漫剧,也可以在体验时把风格要求改成“国漫风”“二次元”“绘本风”等,再逐步调整角色和镜头描述。

十、总结:AI漫剧的关键不是工具堆叠,而是流程设计

AI漫剧的制作,本质上是把传统影视流程拆成多个可被AI辅助完成的模块: 剧本、人物、分镜、图像、视频、声音、剪辑、发布 。真正决定成片质量的,不是某一个工具,而是你是否建立了稳定的制作流程。

如果你刚开始尝试,可以按这个顺序推进:

  1. 写一个3集以内的短故事;
  2. 固定主角和视觉风格;
  3. 生成角色卡和三视图;
  4. 做文字分镜表;
  5. 生成关键帧图片;
  6. 用图生视频做简单动态;
  7. 配好台词、字幕和音效;
  8. 剪辑成片并优化标题封面。

按照这套方法,即使没有专业影视团队,也可以逐步完成一部结构完整、画面统一、节奏清晰的AI漫剧。