05 图像编辑应用


第 5 章 · 图像编辑应用

本章要回答的三个问题:照片上缺了一块或多了个路人,扩散模型怎么做到"只改那块、别的都别动"?改一个人物的表情、发型或一件衣服,靠模型的什么能力才能"在语义上动刀、不伤及无辜"?"把我的风格固定下来反复用"这种个人化需求,是怎么被 LoRA 这类微调满足的?

为什么会有这一章

第四章讲的是"从无到有"与"从有到改",第五章则是"改现有的画"。它和生成共享同一套扩散骨架,但多了一个必须处理的新约束:编辑要在不破坏背景、不破坏构图的前提下,只对目标区域动刀。背后是同一道"把画稿当有价值资产来保护"的命题。本章把这些需求分成三类:局部修复补洞与向外扩图、语义层面的改头换面、以及把"你家那只猫"的个人风格固化下来反复用。读完,你会理解这些功能为什么不是魔法,而是一系列巧妙的加噪与条件工程。

延续画室意象:修复补洞像画室里给破损处补纸、扩图像把画框往外推一点再接着画;语义编辑像请同一位画师对在同一张画上小改一个角色的衣领;个性化微调则是给画师"长期雇佣"一个专属形象,而不是每次都要现场口述。

三路编辑诉求对应三种不同的"动刀方式",一图画清它们的分工:

读完能解决什么

对照开篇三个问题:

  • 你能说清 inpainting 的"掩码 + 局部再加噪 + 只对掩码去噪"三步手术。
  • 你能解释 outpainting 与对象移除、对象替换各适用什么场景。
  • 你能在"局部精细编辑 vs 全局重绘"之间选对手段。
  • 你会明白 LoRA 如何用一个低秩增量注册固定某个角色/风格,并知道什么时候该微调、什么时候别微调。

编辑与生成的同一道命门

编辑看似只是在"改画",其实它和生成共用同一道命门——"要改的和不能改的,都必须说得足够清楚"。生成时要把"想画什么"说清,编辑时则多了一层:不仅要告诉模型"这块要改成什么样",还要保护"其余部分别动"。这正是编辑比生成难一截的地方,也是掩码、denoise、提示分词、LoRA 这些工具真正的用武之地。读这章时请把注意力放在"模型怎么知道该动哪、不该动哪"这个核心问题上,你会发现三种编辑手段不过是对这道命门的三套不同回答。

各节怎么分工

节号 回答哪个问题 关键产出
5.1 图像修复与扩展 缺块补洞怎么不伤背景 inpainting/outpainting/对象移除手术
5.2 语义编辑与图像混合 改表情换衣着靠什么 语义驱动编辑 + 多图混合
5.3 个性化与微调 固定一个形象咋办 LoRA 注册与微调边界

先决条件

  • 承接第四章 img2img 的 denoise 直觉,与第二章条件注入。
  • 会用掩码这类"指定动作区域"的概念。
  • 对"训练一个小模型"有概念的读者更好,但本章会把过程讲清楚。

别把"能改"误解成"随意改"

学完这章你会拿到一堆能改图的能力,但请记住一句纪律:能改,不等于该随意改。编辑能力越强,越要分清"该不该动这张图"——真人的照片、有版权的作品、正在传播中的内容,都可能因为一次轻率的编辑引发后果。所以这一章在给你技术的同时,也在给你一个尺度:技术负责"改得成",判断负责"值不值得改、改完要不要负责"。两者配合,才用得踏实。

往下走到哪

编辑是"控制"的练习场。你在这里练会的"只改想要的部分"能力,到第六章会被 ControlNet 接过去变成"用姿态、边缘、深度去锁死结构"。所以说本章是第六章的引子,也是"从生成走向产品"的必经门槛。

作者与出处
原作者:灏天文库
来源:平台策划编纂
整理人: 灏天文库整理
由灏天文库平台收录,内容或由平台用户上传,仅供学习交流
发布者: 作者: 灏天文库 转发
评论区 (0)
U