[SD实战]实现人物写真背景图像融合，深度剖析蒙版重绘与CN局部重绘实战

原创 于 2025-01-04 11:55:32 发布 · 751 阅读 · 30 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#人工智能 #stable diffusion #AI #美女 #SD #SD教程 #AI设计

在摄影与图像处理领域，人物写真背景图像融合一直是技术难点。传统方法往往难以实现自然且富有艺术感的融合效果。然而，随着深度学习技术的发展，蒙版重绘与CN局部重绘技术为我们提供了全新的思路。本文将带你深入剖析这两种技术的实战应用，探索如何将人物与背景完美融合，实现令人惊叹的艺术效果。
在这里插入图片描述

今天实战介绍SD人物换背景 。在实际写真场景中，涉及切换人物背景图并融合。我们这里使用图生图-蒙版重绘 与 ControlNet
局部重绘 实现背景图的融合。

人物蒙版制作

在这里需要首先安装SD插件：sd-webui-inpaint-anything 插件操作提取蒙版。

插件的安装地址为：（需要的同学可以自行扫描获取）

然后利用sd-webui-inpaint-anything
插件制作并提取人物蒙版，可以根据页面提示操作和精修，然后我们就可以获得精修后的人物蒙版遮挡图像。

人物案例图像

获取人物蒙版

人物写真换背景

上传重绘蒙版

到这一步，我们就可以进入SD图生图 界面，在上传重绘蒙版
标签页，分别上传被切换原始人物写真图像和上一步提取的人物蒙版遮罩。相关配置如下所示：

ControlNet局部重绘

同时，还需要配置ControlNet局部重绘 ，上传背景图像实现人物的融合。这里需要选择局部重绘
，inpaint_only+lama 预处理器和control_v11p_sd15_inpaint
ControlNet处理器。配置如下所示：

融合效果

点击生成 按钮，就可以得到相应的融合背景图像：

更多背景融合案例

本文绘图配置如下所示：

• 绘图模型：AWPortrait_v1.4

• 采样方法：DPM++ 2M Karras

• 迭代步数：30步

• 分辨率：512* 768

• 提示词引导系数 (CFG Scale)：7

• 放大算法：4x-UltraSharp 2X放大

• 启用ADetailer 修复脸部和手部细节。

本文涉及模型下载地址：（需要的小伙伴可以文末自行扫描获取）

• AWPortrait

• AgainStyle3_Lotus_荷花荷叶效果 LoRA模型

01

lora:AgainStyle3_Lotus:1,AgainStyle3 Lotus,no
humans,outdoors,scenery,day,white flower,sky,blue sky,sunlight,lotus,still
life,green flower,plant,water,bud,realistic,leaf,lily pad,cloud,

背景图想

融合图像

02

lora:AgainStyle3_Lotus:1,AgainStyle3 Lotus,no
humans,flower,sky,outdoors,day,blue sky,blurry,cloud,scenery,depth of
field,red flower,still life,blurry background,orange
flower,sunlight,water,realistic,lens flare,

背景图想

融合图像

生成图后，如果存在边缘融合不充分的，可以采用图生图0.3~0.5低幅度重绘，并结合tiled diffusion和tiled
VAE插件和ControlNet tile模型进行细节的修复和增强。

资料软件免费放送

次日同一发放请耐心等待

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

对于0基础小白入门：

如果你是零基础小白，想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短，学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括：stable diffusion安装包、stable diffusion0基础入门全套PDF，视频学习教程。带你从零基础系统性的学好AI绘画！

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

（全套教程文末领取哈）
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示：篇幅有限，已打包文件夹，获取方式在：文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

在这里插入图片描述

温馨提示：篇幅有限，已打包文件夹，获取方式在：文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

请添加图片描述

6 零基础学webUI | 图生图重绘方式--涂鸦、涂鸦重绘、局部重绘、上传蒙版重绘
画青山的博客
07-17 664
本文介绍了AI绘图工具WebUI在图生图功能中的四种重绘方式：1）涂鸦功能通过简单手绘轮廓结合提示词生成图像，重绘幅度决定创意自由度；2）涂鸦重绘可在原图上修改指定区域，如改变服饰颜色；3）局部重绘通过蒙版标记修改区域，不识别颜色仅依赖提示词引导；4）上传蒙版重绘支持外制精确蒙版图。重点解析了各功能的操作步骤、核心参数（重绘幅度、蒙版模式等）对效果的影响机制，并通过多组对比实验展示了参数调整的实际差异，为精准控制图像修改提供实用指导。
ComfyUI 基础教程（十四）：ComfyUI中4种实现局部重绘方法
细节控-AI先行者的博客
05-06 2610
在中有多种方式可以实现，简单的方式是使用VAE内补编码器进行局部重绘，也可以用进行局部重绘，还可以用controlNet的inpaint模型进行局部重绘！
SD 两张图融合在一起
菜鸟的博客
08-06 1246
3.此时如果直接生成，则背景是随机的。需要controlnet提供ipadapter,同时给个局部重绘，增加两张图的融合。把关键词发送至图生图，并上传杯子图以及蒙版。背景通过tag 反推关键词。
AI绘图的场景应用：文生图、图生图
qq_41314882的博客
03-15 6181
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
AI绘画Stable Diffusion【艺术写真】：蒙版法图生图，局部重绘实现AI艺术写真
A13531922961的博客
05-28 1299
未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。高品质，杰作，细节丰富，摄影逼真，8k，高清画质，一个女孩，独唱，棕色眼睛，棕色头发，长发，衣服,耳环,白色连衣裙,田野，鲜花，鲜花的田野，看着观众，户外，粉色的花朵。：1女孩，独奏，黑色头发，蓝色连衣裙，红唇，头饰，看着观众，雪，下雪，回头看，户外，雪花，冰城堡，楼梯，模糊的背景，风，逼真，全身。女孩，独奏，汉服，珠宝，项链，耳环，完美的身体，巨大的白色荷叶，水，在夏天，荷花盛开，阳光明媚，风，云，明亮。
Stable Diffusion：蒙版法图生图局部重绘实现AI艺术写真
AA1213888的博客
07-10 1074
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
AI修手有救了？在comfyui中使用Flux模型实现局部重绘案例
聚梦小课堂
09-18 3167
局部重绘相关的话题我们已经讨论和测试过很多次了，比如说inpaint模型、brushnet模型、powerpaint模型等等，最近对于flux模型重绘画面的案例也越来越多了，那我们就结合flux模型的重绘来试试看效果。
打工人必看！SD+PS: 白底图换场景图，新式 AI 工作流
白帽阿叁的博客
03-11 2772
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
一键生成透明底图像！教你用AI绘画开源 SD 插件实现素材自由！
白帽阿叁的博客
03-20 2433
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
说真的，学会用SD做电商图，你才是真的入了门
Android_XG的博客
11-28 975
最后，如果大家对AIGC感兴趣，SD的相关学习资料，以及AI绘画进阶版——Comfu UI桌面版、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了，无需自行查找，有需要的小伙伴文末扫码自行获取。跑出一张图之后，你就可以多抽几次背景，或者继续修改提示词尝试，再或者按照之前介绍的扩图方法延展画面，最后加上必要的文字，一系列咖啡杯广告图就做好了。如果你的商品已经是实物，毫无疑问，必然货要对板。左键选择要保留的图形，右键选择不需要的图形，然后点击预览，前后不过一分钟的时间，蒙板就已经做好了。
【图像融合】剪切变换和平均亮度的图像融合（含PSNR、SSIM）【含Matlab源码 3328期】
订阅付费专栏Matlab（奶茶价版），可赠送奶茶价版付费专栏指定代码1份；
10-30 247
剪切变换和平均亮度的图像融合（含PSNR、SSIM） 完整的代码，方可运行；可提供运行操作视频！适合小白！
一键生成透明底图像！教你用开源 SD 插件实现素材自由！
qq_41314882的博客
04-08 1136
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
【SD进阶教程】局部重绘
ikesoft_com的博客
08-21 2093
教大家一招【局部重绘】让您的作品瞬间焕发新生！
Stable Diffusion【实战】一下给我整破防了！！SD制作商业海报——香水海报
2401_84760719的博客
06-03 1064
人“狠”话不多，大家请上车！！一步两步三步四步~往前走,你却把别人放在眼里”，下面进入实战内容。这里以上次给大家推荐的“万能”大模型——为例杰作，最佳质量，8K，逼真，一瓶香水，玫瑰花瓣落入水中这里没有添加其他Lora，因为老徐觉得可以不需要，开个玩笑，这里建议个人根据实际情况来选择。这里只是简单制作教程，就略过了。1024*1024（这里海报通常是竖图，选择的商品图的尺寸调整到了该尺寸，建议和商品图大小保持一致，可后期进行高清放大）357。
在ComfyUI中使用Qwen Image Edit模型，能否使用蒙版进行局部重绘
最新发布
08-29
<think>我们正在讨论的是ComfyUI中使用Qwen Image Edit模型是否支持蒙版进行局部重绘。根据用户提供的引用内容，并没有直接提到Qwen Image Edit模型在ComfyUI中是否支持蒙版局部重绘。但是，我们可以从引用[2]中得知Qwen-Image模型具有图像到图像（I2I）的功能，这通常包括图像编辑任务。 在图像编辑领域，使用蒙版进行局部重绘是一种常见的技术，它允许用户指定图像中需要修改的区域（通过蒙版），然后模型根据提示在该区域生成新的内容。因此，我们推断Qwen Image Edit模型很可能支持蒙版局部重绘，因为这是图像编辑中的基本功能。 然而，由于引用中没有明确说明，我们需要进一步确认。根据一般经验，如果Qwen Image Edit模型是基于扩散模型（如Stable Diffusion）的，那么它通常会支持蒙版操作。另外，ComfyUI作为一款支持节点式工作流的UI，通常也支持加载各种模型并配合蒙版使用。 因此，我们可以这样回答： 是的，在ComfyUI中使用Qwen Image Edit模型时，通常可以使用蒙版进行局部重绘。具体操作步骤可能如下： 1. 加载Qwen Image Edit模型节点。 2. 加载原始图像。 3. 创建蒙版（Mask），指定需要重绘的区域。 4. 提供文本提示（Prompt），描述想要在蒙版区域生成的内容。 5. 将图像、蒙版和提示输入到Qwen Image Edit模型节点中，执行生成。 但请注意，由于Qwen Image Edit模型的具体实现细节未在引用中给出，建议查阅官方文档或示例以确认其是否支持蒙版局部重绘。 如果用户需要更详细的操作指南，可以进一步提供。 §§相关问题§§ 1. Qwen Image Edit模型在ComfyUI中的具体使用步骤是什么？ 2. 除了局部重绘，Qwen Image Edit模型还有哪些图像编辑功能？ 3. 如何优化Qwen Image Edit模型在局部重绘中的效果？</think>是的，在ComfyUI中使用Qwen Image Edit模型时，**可以通过蒙版实现局部重绘**。以下是关键技术依据和操作要点： ### 技术依据 1. **图像编辑能力** Qwen Image Edit模型基于流匹配（Flow Matching）和普通微分方程（ODE）技术，支持文本到图像（T2I）和图像到图像（I2I）任务[^2]。这种架构天然适配蒙版操作，因为： - 蒙版定义了需要修改的区域（I2I输入） - 文本提示指导重绘内容（T2I控制） 2. **位置编码机制** 类似PhotoDoodle的位置编码重用机制（确保编辑区域与背景的一致性）[^1]，Qwen Image Edit在局部重绘时： - 通过蒙版坐标锁定编辑区域 - 自动融合透视和纹理（如边缘平滑、光照匹配） ### ComfyUI操作步骤 ```mermaid graph TB A[加载原始图像] --> B[添加蒙版图层] B --> C[指定重绘区域] C --> D[输入文本提示<br>如“将衣服换成红色”] D --> E[运行Qwen Image Edit节点] E --> F[生成局部重绘结果] ``` ### 注意事项 1. **蒙版精度要求** - 需精确覆盖目标区域（避免边缘溢出） - 推荐使用软边缘蒙版（透明度渐变） 2. **提示词优化** - 需包含上下文关联词（如“与背景匹配的红色衣服”） - 避免与蒙版区域外内容冲突的描述 3. **性能瓶颈** 高分辨率图像需调整以下参数： ```python # ComfyUI节点示例 "qwen_image_edit": { "mask_dilation": 5, # 蒙版扩展像素 "blend_strength": 0.7, # 融合强度 "ode_steps": 20 # ODE求解步数（影响细节） } ``` ### 应用场景示例 | 蒙版类型 | 文本提示 | 效果 | |----------------|-------------------------|--------------------| | 人脸区域 | “微笑表情” | 修改表情 | | 服装区域 | “丝绸材质晚礼服” | 更换服装材质 | | 背景建筑 | “现代风格玻璃幕墙” | 替换建筑风格 | ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值