【视频技巧】用深度九宫格控制AI视频:角色、场景与镜头分工
同一张九宫格既能换人物,也能换场景。关键是让每份参考素材只负责一件事,减少不同信息之间的干扰。
内容预览
教程内容
同一张九宫格既能换人物,也能换场景。关键是让每份参考素材只负责一件事,减少不同信息之间的干扰。
一起来看一下成品:
那么接下来,按照我的思路和步骤,你也可以做出这样的作品,一起来实操吧~
准备工具
ChatGPT https://chatgpt.com/c/
nanobanan pro/nanobanan 2 https://labs.google/fx/tools/flow/
Midjourney https://www.midjourney.com/imagine
即梦seedance2.0 https://jimeng.jianying.com/ai-tool/
倘若不知道模型怎么使用,可以参考这个教程(https://www.super-i.cn/info-2796.html),与本教程一起使用
如果不想各个网页跳转模型,可以使用flowpix平台,已接入所有热门模型
本次教程的链接如下
https://www.flowpix.club/bj/37017.html?token=8d17bfe10aadecc1f73e7d451c0e48a6
这套方法能解决什么问题?
直接把普通九宫格交给视频模型,分镜图中的颜色、纹理、错误五官和画面噪点也可能影响成片。我的处理方式是先把九宫格转换成深度图,只保留人物轮廓、动作姿态、镜头构图和空间层次,再分别提供人物、场景和道具参考图。
每张图只负责一件事:
完整制作流程分为六步:
准备人物 → 设计剧情 → 生成场景与道具 → 制作九宫格 → 转换深度图 → 生成视频
第一步:准备人物参考图
开始制作前,首先需要一个稳定的人物形象。
本次案例使用的是之前生成的写实3D CG人物(详细教程可看这一篇https://www.super-i.cn/info-2972.html)。
得到了这一张图片
随后生成人物面部三视图和人物全身三视图(使用nanobanan pro)
面部三视图提示词:
生成人物的面部三视图,正面,半侧面,纯侧面,灰色背景,超清画质。光线只使用干净统一的摄影棚三点式打光:正左侧主光,正右侧辅助光,后右侧轮廓光。不要杂乱光效,不要彩色灯光,不要强氛围特效。背景为纯净灰色无缝影棚背景。
人物躯干三视图:
生成人物的全身图,正面,侧面,背面,灰色背景,超清画质。光线只使用干净统一的摄影棚三点式打光:正左侧主光,正右侧辅助光,后右侧轮廓光。不要杂乱光效,不要彩色灯光,不要强氛围特效。背景为纯净灰色无缝影棚背景。裁切掉头部,只留下身体
第二步:使用GPT设计15秒剧情
准备好人物后,将人物参考图上传给GPT等大语言模型,让它根据人物外形和气质设计一段15秒剧情。
15秒不能容纳太复杂的故事。比较适合的结构是:
明确目标 → 出现阻碍 → 做出反击 → 高潮结尾
本次案例中,女主的目标是带着数据核心离开货运平台;阻碍是无人机追击;反击方式是诱导导弹击落集装箱;结尾是女主利用集装箱斜坡跃上磁悬浮列车。
可以直接使用下面的剧情提示词:
请以我上