130 lines
6.0 KiB
Plaintext
130 lines
6.0 KiB
Plaintext
# IMAGE-FIRST-GUIDE.hdlp · 本地漫剧生产规范(苍耳经验固化版)
|
||
|
||
> HLDP://video-ai-system/IMAGE-FIRST-GUIDE.hdlp
|
||
> 耳耳蛋 · ICE-GL-耳耳蛋 · D205 · 2026-08-03
|
||
> 经验来源:苍耳爸爸实战方法论(旧经验固化,见下方关联)
|
||
> 配套:LOCAL-PIPELINE-V1.hdlp(流程) · BC-006-IMAGE-FIRST-PRODUCTION.hdlp(协议)
|
||
|
||
## §0 · 来源关联(本文件 = 旧经验的落地补充,非重新发明)
|
||
|
||
```
|
||
已固化的旧经验(苍耳已教 · 蛋蛋已记):
|
||
├── D176-LEARN.hdlp 分镜prompt模板·单镜单动作单运镜·景别时长标准
|
||
├── D177-I2I-CONSISTENCY 图生图锁一致性(参考图image参数)
|
||
├── EED-EXPER-013.hdlp 画风一致性踩坑:纯文字会漂·必须参考图锁风格
|
||
└── EED-EXPER-009~012 刷图/批量/质检流程
|
||
本文件新增(落地细节,旧经验未覆盖):
|
||
├── 黑白草图 → ControlNet(union) + IP-Adapter 的节点级工作流(§2)
|
||
├── 色卡/群像/前中后景/声音 的完整生视频要素表(§3)
|
||
└── 中英文加权提示词实例(§5)
|
||
铁律(§1)= 苍耳三原则,与旧经验一致,重申不改。
|
||
```
|
||
|
||
---
|
||
|
||
## §1 · 铁律(苍耳三原则)
|
||
|
||
```
|
||
① 资产非常重要,保证质量
|
||
→ 资产图 = 全片的地基。角色/场景/道具先精修到能用,再谈分镜。
|
||
→ 一致性靠: 角色 LoRA(subai_lora_v1 已验证)+ 资产图库复用 + 文字词条锁
|
||
|
||
② 提示词规范、有逻辑性、主次关系
|
||
→ 顺序 = 主体 → 动作 → 环境 → 光影 → 风格 → 质量修饰(主到次)
|
||
→ 主词在前,修饰在后;禁止杂糅无主次的堆砌
|
||
|
||
③ 提示词一定要详细,专业术语中英文描述并加重权重
|
||
→ 中文表意 + 英文专业词 + (词:权重) 加权
|
||
→ 例: 特写 close-up, 电影侧光 cinematic rim light, 铁锈质感 rust texture
|
||
→ (masterpiece:1.2) (cinematic lighting:1.3) 等
|
||
```
|
||
|
||
## §2 · 黑白草图生分镜(问题①答案)
|
||
|
||
```
|
||
原理: 草图管「构图/布局/空间」,提示词管「内容/风格/光影/色调」
|
||
ComfyUI 用 ControlNet 吃草图结构 + IP-Adapter 锁风格 → 出分镜彩图
|
||
|
||
工作流(ComfyUI 节点链):
|
||
① 黑白草图(布局底图)
|
||
├── 手绘黑白稿 / 3D 摆好视角渲线框(hunyuan3d 可辅助)
|
||
├── 或 程序生成:黑白剪影 + 人物站位 + 前中后景分区
|
||
└── 黑白 = 只留明暗结构,喂给控制
|
||
② ControlNet(controlnet-union-sdxl-1.0)
|
||
├── 模式选 canny(线稿) 或 depth(深度) 或 pose(姿态)
|
||
├── 作用: 把草图的构图/人物位置/透视强约束进生成
|
||
└── strength 0.6~0.9(草图不完美就调低,给 AI 发挥空间)
|
||
③ IP-Adapter(sdxl_clipvision + ipadapter)
|
||
├── 吃参考图(已定角色/场景/风格图)
|
||
└── 作用: 锁风格、锁资产外观、锁色调倾向
|
||
④ 正向提示词: 景别 + 主体 + 动作 + 前中后景 + 光影 + 色调 + 画风 + 质量词
|
||
⑤ 负向提示词: 变形/多余肢体/低清/水印 等
|
||
⑥ KSampler → VAEDecode → 分镜彩图
|
||
|
||
产出: 每镜 1 张分镜图(构图已由草图锁定,风格由 IP-Adapter+提示词锁定)
|
||
```
|
||
|
||
## §3 · 分镜图 → 关键帧 → 视频(问题②③答案)
|
||
|
||
```
|
||
锁定链路(生视频前必须锁死):
|
||
├── 锁定风格 IP-Adapter + 风格参考图 + 画风关键词
|
||
├── 锁定资产 角色 LoRA + 资产图库(同一套图不能换脸)
|
||
├── 色卡色调 全局色板(深海迷航=冷蓝/暗红)统一所有镜
|
||
├── 群像 多角色时: 空间关系/谁前谁后/谁主谁次 一次定死
|
||
├── 声音 配音/音效/BGM 规划先出(影响镜头节奏)
|
||
└── 镜头要素 视角 + 景别 + 运镜 + 人物空间关系 + 前中后景画内容
|
||
+ 人物表演 + 台词 + 环境音效
|
||
|
||
关键帧生成:
|
||
分镜图 → 精修出关键帧(构图/表情/光影到位、可直接当画面起点)
|
||
1 镜 = 1 关键帧起步(复杂镜可 2-3 帧做转场)
|
||
|
||
生视频(两条路):
|
||
A. 本地运镜(¥0 首选): 关键帧图 → tools/local_motion.py → 推拉摇移
|
||
✅ 已验证出片(EP01-MINIMAL-LOCAL-VALIDATED.mp4)
|
||
B. 本地视频模型: 关键帧 → LTX 2.3 I2V(唯一主力)→ 真实动态
|
||
适合必须运动的镜头(表演/水浪/动作)→ 由苍耳圈定
|
||
|
||
画面 → 声音同步:
|
||
配音 edge-tts(已验证)· 音效/音乐 stable_audio_3 · 字幕 SRT
|
||
```
|
||
|
||
## §4 · 分镜脚本要素模板(供 Ollama 生成时锁定)
|
||
|
||
```
|
||
每镜:
|
||
景别 shot type : close-up / medium / wide / POV(中英文)
|
||
视角 camera angle : 平视 / 俯视 / 仰视
|
||
运镜 camera move : push-in / slow pan / tilt / handheld(只写运镜不写时长)
|
||
人物空间关系 layout : 主体位置 / 前中后景各画什么
|
||
光影 lighting : 冷蓝顶光 / 暗红氛围 / 逆光剪影(中文+英文加权)
|
||
色调 color palette : 冷蓝+暗红(对应色卡)
|
||
画风 style : 写实动漫 / 厚涂 / 赛璐璐
|
||
表演 action : 单一明确动作 + 表情
|
||
台词/音效 dialogue : 台词原文 + 环境音效提示
|
||
禁止项 negative : no cartoon motion / no bright colors 等
|
||
⏱ 时长: 不写(让 AI 自由发挥)
|
||
```
|
||
|
||
## §5 · 提示词模板(中英文加权示例)
|
||
|
||
```
|
||
正向:
|
||
(close-up:1.2) of Lin Hao, (worn work clothes:1.1), jolting awake,
|
||
(grabbing the iron bed frame:1.1), cold blue industrial lighting,
|
||
rust texture on metal, dark atmosphere, (cinematic lighting:1.3),
|
||
(anime realistic style:1.1), (masterpiece:1.2), (high detail:1.2)
|
||
|
||
负向:
|
||
(bad anatomy:1.3), extra fingers, deformed face, blurry, watermark,
|
||
lowres, cartoon motion, bright colors
|
||
|
||
控制: sketch(controlnet strength 0.7) + 角色参考图(ip-adapter)
|
||
```
|
||
|
||
---
|
||
|
||
> ⊢ 苍耳方法论 · 蛋蛋固化 · 全本地 ¥0
|
||
> ⊢ 待办: 黑白草图工作流实搭验证 → 16 镜分镜实跑
|