使用 ComfyUI 中的视频 IC-light 的步骤如下:
需要注意的是,IC Light 处理过的图片可能会颜色发黄偏色,不是处理过的就是好的,有时可能会负优化。另外,在进行背景替换时,不同图片合并要考虑光线、色调、边缘细节等问题。
在管理器中节点管理搜索ComfyUI-IC-Light,安装后重启ComfyUI模型可以在网盘里,下载后放入ComfyUI/models/unet文件夹IC Light是用来处理原视频和新背景之间的光影效果的。[heading4]Animatediff[content]这个部分根据实际情况,可以开启或者关闭取决于视频的流畅度。
背景替换是一个看似简单,但是又难的活,难在于不同图片合并时候要考虑,光线、色调、边缘细节,这个工作流在测试了目前多种技术,选择了表示较好的,将他们流程化。有许多细节是需要注意的[heading3]背景移除[content]模型放在E:\ComfyUI\models\rembg需要下载对应的模型[heading3]填充背景[content]用来移除背景里面的主题,模型需要放在E:\ComfyUI\models\lama下[heading3]ic-light[content]在管理器中节点管理搜索ComfyUI-IC-Light,安装后重启ComfyUI模型可以在网盘里,下载后放入ComfyUI/models/unet文件夹ic处理过的图片,颜色会发黄偏色,这里就需要让做颜色匹配和细节的迁移,注意,不是IC Light处理过的就是好的,有时候反而会负优化。[heading3]
1、文本方式:上传1张前景图片,自动抠图,填写详细文本提示词,并在几种给定的光源方向选择即可2、背景+前景方式:上传1张背景图+1张前景图,自动融合,填写简单文本提示词,并在几种给定的光源方向选择即可群友纷纷喊融图神器啊[heading2]测试:小田[content][heading2]测试:歸藏[content][heading2]测试:frankzcy[content][heading2]测试:歸藏[content][heading2]测试:随风起舞[content]但是衣服颜色变了[heading2]测试:Rui测试comfyUI中的效果[content][heading2]测试:L.YAN🐳[content][heading2]测试:麦橘[content]提示了黑色毛衣,没成功再试一次成功了[heading2]测试:Stuart[content]家居背景抠图重添加背景【Zho】做好了敏神刚放出的打光模型IC-Light的Colab方案!免费层可运行!不用在Demo排队了!另外,我也把作者暂时没给Demo(但给了代码)的背景条件模型也加上了,支持选择背景图片+简单提示词,就可以完美重新打光拿去玩:https://colab.research.google.com/drive/1-pXSpTH-zNhaAKFmMvh-xj7Zp9781L2f?usp=sharing