引言:那个让我又爱又恨的“全AI实验”
去年冬天,我突发奇想:能不能做一部完全由AI生成、0人工参与的漫剧?从剧本、分镜、角色、场景到配音、剪辑,全部交给AI。听起来很酷对吧?结果我花了整整三周,踩了无数坑,最后成片只有1分47秒,还差点把电脑砸了。但正是这次“极限挑战”,让我真正摸清了AI漫剧的全流程。今天,我就以“如果让我重新学一次”的视角,把那些血泪教训拆给你看。如果你是美术生或设计新手,这篇日记能帮你省下至少2000块试错成本。

阶段一:剧本与分镜——别让AI替你“想故事”
坑1:以为ChatGPT能直接写出可用的漫剧本
我一开始让ChatGPT写一个“赛博朋克+校园”的短剧剧本,它洋洋洒洒给了3000字,但全是对话和旁白,没有场景描述、没有镜头提示,更别说分镜了。我拿着这个剧本去生成画面,AI完全不知道“主角站在天台边缘”该是什么构图。
导师建议:AI是“扩写器”不是“创作者”。你得先自己写一个300字的故事大纲,明确每个场景的“时间、地点、人物动作、情绪”,再让AI帮你扩写成带镜头描述的脚本。分镜必须手动拆分,每个镜头写清楚“景别、角度、运动”。
坑2:分镜图直接丢给Midjourney,结果风格全乱
我天真地把分镜文字直接喂给Midjourney,出来的图一会儿写实、一会儿二次元,角色发型换了8次。后来我才知道,必须先用一个“风格锚定词”固定画风,比如“anime style, flat color, clean line, consistent character design”,并且每个镜头都要带上相同的角色描述(发色、瞳色、服装)。
避坑提示:建一个“角色设定表”,把主角的5个关键特征写成固定短语,每次生成都复制粘贴,别偷懒。

阶段二:图像生成——一致性是最大的敌人
坑3:以为Stable Diffusion的ControlNet能解决一切
我听说ControlNet可以锁定姿势,就兴冲冲地用了OpenPose,结果角色脸崩了。原来ControlNet只控制姿势,不控制脸。要保证角色一致性,得用LoRA训练自己的角色模型,或者用IP-Adapter参考图。我花了三天训练LoRA,结果过拟合,角色只会站军姿。
导师建议:新手别一上来就训LoRA。先用“固定种子+详细描述+参考图”三件套,能解决80%的一致性问题。等角色稳定了,再考虑LoRA。
坑4:背景和角色分开生成,合成时光影全错
我为了省时间,角色和背景分开生成,结果合成时角色像贴上去的,光影方向完全不对。后来我改用“图生图+局部重绘”,先出一张完整构图,再单独重绘角色部分,光影自然多了。
避坑提示:永远先合成再重绘,别分开生成硬拼。
阶段三:动态与配音——别让AI“演”得太假
坑5:Runway Gen-2直接生成动作,角色像抽搐
我用Runway把静态图转成动态,结果角色走路像丧尸,说话嘴型对不上。原来Runway对“人物特写”的动态生成很弱,尤其是面部。后来我改用“静态图+轻微镜头运动(推拉摇移)+音效”的方式,反而更有漫剧感。
导师建议:AI漫剧不是越动越好。用“有限动画”思路——只动关键部位(眨眼、嘴型、头发飘动),其他用镜头运动带节奏,观众反而觉得高级。
坑6:AI配音情感为零,像机器人念经
我用了某免费TTS,出来的声音平得像心电图。后来换了ElevenLabs,调了“稳定性”和“相似度”参数,再手动加停顿和重音标记,才勉强能听。但最关键的还是——剧本台词要写得口语化,别写书面语。
避坑提示:写台词时自己先读一遍,拗口就改。AI配音救不了烂台词。
阶段四:剪辑与合成——0人工参与的幻觉
坑7:以为剪辑软件能自动对齐音画
我天真地以为PR能自动对齐口型和配音,结果完全对不上。最后只能手动一帧帧调,花了4个小时。所谓“0人工参与”根本不存在,AI只是把“画图”变成了“调参数”,人工判断一点没少。
导师建议:接受“AI辅助”而不是“AI替代”。把精力花在“决策”上——选哪张图、调哪个参数、保留哪个版本,这些才是你的价值。
坑8:忽略音效和BGM,成片像PPT
我一开始只关注画面,忘了音效。成片出来干巴巴的,像幻灯片。后来加了环境音(雨声、脚步声)和BGM,瞬间有了电影感。AI漫剧的“氛围”一半靠声音。
避坑提示:建一个音效库,每个场景至少配3层声音:环境音、动作音、情绪音。

如果重来一次,我会这样走最优路径
- 第1天:手写300字故事大纲+角色设定表(5个特征)+风格锚定词。
- 第2-3天:用Midjourney生成所有分镜图,固定种子+参考图,每张图检查一致性。
- 第4天:用Stable Diffusion局部重绘修正光影和细节,不追求完美,只求统一。
- 第5天:用Runway做轻微动态(镜头运动+局部动效),不强行生成复杂动作。
- 第6天:ElevenLabs配音+手动标记停顿,音效库铺3层声音。
- 第7天:PR剪辑,手动对齐音画,加字幕和转场。
这样一周能出一部3分钟左右的漫剧,质量稳定,且真正体现你的审美决策。记住:AI是画笔,你是画家。
关于火星人教育
如果你也想系统学习AI漫剧全流程,少走我这些弯路,欢迎来火星人教育。我们创办24年来专注数字艺术与AIGC实战职业技能培训,开设课程包括:AI漫剧创作、AIGC视觉设计、UE5游戏特效、室内全屋定制、MAYA三维动画、C4D动态设计、工业设计、NUKE影视后期、摄影摄像实训。北京、深圳双校区线下面授,面向美术生、在校大学生及转行人群,项目化实训教学,帮你把“兴趣”变成“职业”。咨询电话:010-65918670。






评论(0)