AI 内容创作 / 系统课时

参考图与图像条件

参考图与图像条件

文字提示适合描述意图,却很难精确表达机位、姿态、空间层级和画面风格。参考图与图像条件的作用,是把这些难以用语言稳定描述的关系变成可观察、可调节的视觉约束。

学习目标

  • 区分构图、姿态、深度、线稿和风格参考的不同职责。
  • 根据镜头目标选择必要条件,并设置合理的约束优先级。
  • 通过条件清单与对照验收减少参考冲突和结果漂移。

参考图解决什么问题

当任务只要求“生成一个人在车站等待”,文本通常足以表达主题;当任务要求“人物位于画面右三分之一、身体略向左转、前景栏杆遮挡、远处灯箱形成纵深”,仅靠文字就容易产生歧义。图像条件可以把结构、轮廓、空间或风格直接交给生成链路。

参考图不是越多越好。增加条件会增加影响生成的信号。不同管线能接收的条件类型、模型版本和权重范围不同,输入合法也可能只部分遵循。条件之间如果指向不同构图、不同姿态或不同光线,结果可能出现变形、折中或对某一条件的忽略。

五类常见图像条件

条件类型 主要控制对象 适合场景 主要风险
构图参考 主体位置、景别、画面重心 复现分镜布局、保持镜头连续 参考图内容可能被误当成语义
姿态参考 人体骨架、关节方向、动作轮廓 表演动作、多人站位、连续动作 遮挡或关节点错误会放大畸变
深度参考 前后关系、空间层级、距离变化 室内空间、走廊、复杂前景 深度图不准会造成结构塌陷
线稿参考 边缘、轮廓、建筑或道具形状 概念设计、场景还原、产品轮廓 过强约束会限制材质和光影
风格参考 色彩、笔触、材质和视觉气质 统一项目美术方向 可能带入不需要的构图与内容

图像条件类型与约束层级图

约束强度与优先级

约束强度是指定工具的参数。以支持多 ControlNet 的 Diffusers 管线为例,可为各控制输入分别设置权重和作用步段;先检查所选模型和管线是否支持。风格参考可能来自另一种适配器,不能直接套用结构控制参数。过弱时,条件只提供大致方向;过强时,生成结果可能机械复制轮廓,牺牲自然姿态、材质或光影。正确做法不是把所有强度拉满,而是先确定哪些关系必须保持,哪些允许变化。

一个实用的优先级是:先锁定镜头结构,再锁定关键动作和角色特征,最后统一风格。若项目更强调美术风格,也可以调整顺序,但必须在任务开始前写清优先级。出现冲突时,先删除非必要条件,而不是继续叠加更多参考图。

建立条件清单与版本记录

下面的 JSON 是制作记录卡,用于描述条件来源和验收标准,不代表某个平台的 API 格式。

json
{
  "shotId": "s03-sh002",
  "goal": "手与屏幕时间线都可辨,右上留空",
  "frame": {
    "width": 1024,
    "height": 576,
    "orientation": "upright"
  },
  "conditions": [
    {
      "role": "layout",
      "source": "layout-v2.png",
      "size": [
        1024,
        768
      ],
      "transform": {
        "scale": 0.75,
        "offsetXY": [
          128,
          0
        ]
      },
      "review": "同一参考点 (320,200) 映射到 (368,150)"
    },
    {
      "role": "edges",
      "source": "edges-from-layout-v2.png",
      "sourceStage": "aligned-layout",
      "review": "手和屏幕边界与布局叠合"
    },
    {
      "role": "style",
      "source": "lighting-board-v3.png",
      "review": "只参考暖桌灯与冷屏幕色温对比",
      "use": "secondary"
    }
  ],
  "mustKeep": [
    "原声图层替换区留空",
    "右手与键鼠位置不变"
  ],
  "canChange": [
    "背景亮度细微变化",
    "键帽表面轻微变化"
  ]
}

卡片采用整幅缩放加留边方案。1024×768 以 0.75 缩放得到 768×576,左右各填 128 像素;(320,200) 因而映射到 (368,150)。定位、姿态和边缘条件必须共享翻转、旋转与画幅变换。此处边缘图从对齐后的布局生成,先叠合查看锚点,再检查 mustKeep 和风格。若构图偏移,优先排查构图参考是否被裁切或强度不足;若人物扭曲,检查姿态图中的遮挡和关节点;若画面像参考图但不符合项目风格,则降低结构条件中的语义干扰,并单独处理风格参考。

从单一条件到组合条件

先做无条件基线,再只加入一个关键结构条件,例如布局或姿态。在同一组种子上比较目标锚点偏差与新缺陷。第二步再加入深度或线稿,解决空间和轮廓问题。最后加入风格参考,并用较弱强度观察是否只改变视觉气质而不破坏镜头结构。

组合条件时要保持来源一致。构图图中的人物在左侧,而姿态图中的人物在右侧,会迫使系统折中;深度图与线稿的透视关系不一致,则可能造成墙面、地面或肢体变形。最有效的修复通常是统一参考来源或重新制作条件图。

Tips 与常见错误

  • 参考图在导入前应统一画幅、方向和主体裁切,减少无意义的坐标差异。
  • 姿态图要检查遮挡、左右手方向和关节点,错误骨架会直接传递到结果。
  • 风格参考尽量选择构图简单、主题干扰少的图,避免把无关物体一并带入。
  • 同一镜头使用多个条件时,记录每个条件的来源、版本和强度,避免无法复现。
  • 不要用低质量参考图补救提示词问题。先明确镜头目标,再选择条件。

本课练习

  1. 为一个“人物穿过雨夜街道”的镜头,分别选择构图、姿态和风格参考。写出每项必须保持的内容,以及允许变化的内容。
  2. 设计一次组合条件测试:先使用单一构图条件,再加入姿态条件,最后加入风格参考。为三个阶段各设置一个验收指标,并说明出现冲突时的删除顺序。

本课总结

  • 构图、姿态、深度、线稿和风格参考分别约束不同的视觉关系,不能相互替代。
  • 组合条件的关键是明确优先级、统一参考来源,并逐项加入验证。
  • 参考图管理必须包含来源、版本、强度和验收标准,才能支持镜头复现。

下一课预告

下一课将把通过核对的条件配置用于关键帧和概念图,分别建立筛选和版本归档规则。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

参考图与图像条件

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通