ComfyUI产品摄影工作流(自定义产品位置并保留细节)
作者: Vito的AI力量 来源: Vito的AI力量
今天,我将介绍一个最新开发的产品摄影的ComfyUI工作流。只需要提供一张产品图片,然后用提示词描述你想要的画面,就可以生成一张效果非常自然的产品摄影图片。
# 工作流简介
举个例子,我有一张护肤产品的图片,然后写一段提示词,经过一系列流程,这个产品就很自然地融入背景中。
产品的光影完美匹配背景的光影,并且产品的细节得到了百分百的保留,产品上的文字也依然清晰可见。
建议预先用AI自动生成一个背景,比如我用Midjourney生成的背景。
它的光影和大理石基座比用Stable Diffusion生成的更加出色。然后,通过"ImageBlend"节点精确地改变产品的大小,把它精确地放到石头底座上。
然后我们通过我创建的"Relight/打光"节点组对它们重新打光。
如果光线效果不好的话,可以用下面这个节点组重绘一下。
这时候产品的细节出现了损失。我们再通过最下面的组重新恢复产品的细节和整体的颜色。
如果你喜欢看视频教程,那么我非常欢迎你观看本文所对应的视频(B站同名帐号):
https://www.bilibili.com/video/BV1Pf421B7Vb/
工作流链接:
https://openart.ai/workflows/myaiforce/GL2vEhda2lKbX0snXCNG
其他产品和背景测试
我还用这个工作流测试了其他产品和背景。
比如,我上传了一张红酒的产品图和一张背景图。
然后把红酒放到了这个木头底座上。
接着对它们重新打光。
然后重绘一下让效果更加自然。
最后,通过最下面的节点一步步恢复产品的细节。
还有这个瓷碗被放到这个大理石台面上。瓷碗的细节和色彩都得到了很好的保留。
# 工作流详解(预先上传背景图)
在介绍完ComfyUI工作流的效果后,接下来深入讲解这个工作流的运行逻辑和参数设置。工作流用到的主要节点链接将在文章末尾提供。
1. 上传图片和设置背景
1️⃣上传产品图和背景图
-
在左上角的控制面板里,上传产品图和背景图。
-
输入提示词。
2️⃣设置背景图尺寸
-
尺寸按照你的需求设置
-
将布尔值设置为"True",暂时使用上传的背景图作为最终图片的背景。
2. 基础调整
1️⃣产品和背景基础调整
- 打开“产品和背景”组,调整产品和背景。
2️⃣调整产品图尺寸
-
使用"Image Resize"节点,根据控制面板设置的数值调整产品图的宽度和高度。
-
使用"Image Remove Bg"节点移除产品图的白色背景。
3️⃣抠图问题解决
- 如果“Image Remove Bg”节点抠图不干净,可以预先用其他工具抠好产品图,放到黑色背景上,再上传产品图,抠图效果更好。不要直接上传带透明背景的PNG格式图片。
4️⃣调整亮度
- 使用"Exposure"节点调整产品图的亮度,设为负值可让其变暗。背景图的操作同理。
3. 产品定位
1️⃣定位产品
- 打开“定位产品”组,使用“ImageBlend”节点将产品放入背景中,并调整大小和位置。
-
参数设置:
-
“x_percent” 控制横向位置
-
“y_percent” 控制纵向位置
-
“scale” 控制产品大小
-
“mirror” 进行镜像处理
-
“rotate” 进行旋转
-
2️⃣图像混合
-
“Image Blend”节点有两个输出端,分别输出混合后的图片和蒙版。
-
使用“AutoAdjust”节点调整混合后图像的色彩、对比度、饱和度等。
4. 打光设置
1️⃣生成亮度图像
-
右边一组节点用于生成亮度图像,作为打光参考。
-
打光通过右上角的“打光”组完成。
2️⃣调整亮度和对比度
-
使用"Brightness&Contrast"节点调整亮度和对比度,增大亮度使图像更亮,增大对比度使光线更硬。
-
使用"ImageBlur"节点对亮度图进行模糊操作,光线凌乱时增加模糊度。
5. 生成背景
1️⃣提示词生成背景
-
打开“生成背景”组,用提示词生成背景图,效果可能优于上传的背景。
-
使用Lightning版本的Checkpoint快速出图,K采样器用“product_rgb_bg”生成RGB值定义的纯色背景的产品图。
- 设置RGB值接近想要的背景图颜色,使用模仿Midjourney风格的LoRA,生成光线效果更好的背景图。
2️⃣ControlNet
-
ControlNet用于定位产品,生成的背景图中产品细节与实际产品不同,但位置相同,方便恢复细节。
-
若提示词生成的背景效果更好,切换“使用背景图”布尔值为“False”,以提示词生成背景图作为最终背景。
6. 打光和重绘
1️⃣运行打光工作流
-
核心是IC-Light节点,虽然有缺陷,但能实现光影效果,增加产品立体感。
-
使用色彩混合节点恢复原先色彩,同时保留光影效果。
2️⃣调整打光参数
- 若对打光效果不满意,调整“定位产品”组右边节点的参数,改变亮度图以调整打光效果。
3️⃣重绘图像
-
打光效果不理想时进行重绘,先回到控制面板,打开“重绘”组。
-
通过重绘恢复被打光工作流损失的细节。
7. 还原细节和色彩
1️⃣恢复细节
-
回到控制面板,打开“还原细节”组。若重绘效果不理想,将“重绘”布尔值切换为“False”。
-
“Detail Transfer”节点恢复产品文字,调整“blend_factor”恢复立体感,使用“Restore Detail”节点进一步恢复高光和阴影。
2️⃣恢复颜色
-
使用“ColorAdapter”节点恢复颜色,参考“定位产品”组中的图片或提示词生成的图片,取决于“控制面板”中的布尔值设置。
-
最后,使用图像混合节点中和效果,调整“混合百分比”参数决定最终效果更接近哪张图。
最终图片效果
通过上述步骤,生成的最终图片自然融合产品与背景,细节丰富,光影效果出色。以下是最终图片的示例:
# 工作流详解(提示词生成背景)
在之前的步骤中,我们已经用上传的背景图让AI对产品进行了自然的融合。现在,让我们来看一下不上传背景图,而是用提示词生成背景图的效果。
1. 设置控制面板
1️⃣选择上传的产品图
- 回到控制面板,在上传背景图的位置选择上传的产品图,这样可以避免工作流报错。
2️⃣切换布尔值
- 将“使用背景图”的布尔值切换为“False”,这样工作流就不会使用之前上传的背景图节点。
2. 关闭无关组
1️⃣关闭无关组
- 先关闭“打光”、“重绘”、“还原细节”这些组,以专注于生成背景图。
3. 生成背景图
1️⃣打开生成背景组
- 打开“生成背景”组,使用提示词生成背景图。
2️⃣生成效果
- 生成的背景图效果不错,但仔细观察,底部会多出一些原先产品上没有的东西。即使使用“Canny”来控制,这也是为什么推荐先做好背景图再上传的原因。
4. 打光
1️⃣打光效果
- 进行打光,可以看到,产品的立体感变强了。
5. 重绘
- 通过重绘,使产品的光影效果更加自然。
6. 还原细节
- 进行细节还原,这是最终的图片效果。
最终图片效果
通过上述步骤,我们得到了用提示词生成背景图后的最终效果。以下是最终图片的示例:
# 总结
以上就是这个工作流的详细介绍。
另外,给大家推荐我正在跑SD的云平台:
玩 Stable Diffusion 没有好显卡?试试秋叶大佬推荐的云平台
工作流用到的节点:
-
ComfyUI LayerStyle: https://github.com/chflame163/ComfyUI_LayerStyle
-
ComfyUI IC-Light: https://github.com/kijai/ComfyUI-IC-Light
-
ControlNet Auxiliary Preprocessors: https://github.com/Fannovel16/comfyui_controlnet_aux
-
ComfyUI Image Filters: https://github.com/spacepxl/ComfyUI-Image-Filters
-
CharacterFaceSwap: https://github.com/ArtBot2023/CharacterFaceSwap
-
Comfyroll Studio: https://github.com/Suzie1/ComfyUI_Comfyroll_CustomNodes
-
ComfyUI Easy Use: https://github.com/yolain/ComfyUI-Easy-Use
-
ComfyUI Essentials: https://github.com/cubiq/ComfyUI_essentials
-
WAS Node Suite: https://github.com/WASasquatch/was-node-suite-comfyui
Checkpoint:
-
Juggernaut XL Lightning: https://civitai.com/models/133005?modelVersionId=357609
-
epiCRealism: https://civitai.com/models/25694/epicrealism
LoRA:
- Midjourney mimic: https://civitai.com/models/251417/midjourney-mimic
更多AI工具,参考Github-AiBard123,国内AiBard123