ComfyUI 的工作流包括以下方面:
Workflow是ComfyUI的精髓。所谓Workflow工作流,在ComfyUI这里就是它的节点结构及数据流运转过程。[heading2]推荐工作流网站[heading3]“老牌”workflow网站Openart.ai[content]https://openart.ai/workflows/流量比较高,支持上传、下载、在线生成,免费账户总共有50个积分,加入Discord可以再加100积分,开通最低的每个月6美元的套餐后,每个月会有5000积分。[heading3]ComfyWorkflows网站[content]https://comfyworkflows.com/cloud支持在线运行工作流,从workflow的实际下载量和访问量来看,略少于openart。[heading3]Flowt.ai[content]https://flowt.ai/community
这个方法的目的是让FLUX模型能在较低的显存情况下也能运行.分阶段处理的思路:1.使用Flux模型进行初始生成,在较低分辨率下工作以提高效率2.采用两阶段处理:先用Flux生成,后用SDXL放大,效控制显存的使用3.使用SD放大提升图片质量工作流的流程:初始图像生成(Flux):UNETLoader:加载flux1-dev.sft模型DualCLIPLoader:加载t5xxl和clip_l模型VAELoader:加载flux-ae.sftCLIPTextEncode:处理输入提示词BasicGuider和RandomNoise:生成初始噪声和引导SamplerCustomAdvanced:使用Flux模型生成初始图像VAEDecode:解码生成的潜在图像初始图像预览:PreviewImage:显示Flux生成的初始图像图像放大和细化(SDXL):CheckpointLoaderSimple:加载SDXL模型(fenrisxl_SDXLLightning.safetensors)UpscaleModelLoader:加载RealESRGAN_x4.pth用于放大VAELoader:加载sdxl_vae.safetensorsImageSharpen:对初始图像进行锐化处理UltimateSDUpscale:使用SDXL模型和放大模型进行最终的放大和细化最终图像预览:PreviewImage:显示最终放大和细化后的图像
这个工作流,可以用在电商服饰行业,换装,虚拟试穿等场景。在提升效果的同时,简化了工作流。没有繁琐的依赖,环境,更多的使用了原生的节点。工作流的整体思路是:首先,生成适合服装的模特。为什么做这一步?这是因为,很多时候,换装的效果不好,有违和感,是因为服装和人物匹配。这一步,我们可以抽卡,抽到满意的模特后进入第二步。第二步,开始进行高精度的换装。先进行预处理的工作,拼出来mask然后重绘mask区域。[heading3]工作流解释[content][heading4]模特生成[content]接下来一起来过一下工作流先生成与衣服匹配的模特这里可以先不关注衣服的相似度,先抽出满意的模特。这里加入Redux模型,强度不用太高。让提示词生效,Redux-prompt节点风格细节等级(1=27×27最强,14=1×1最弱))。[heading4]服装高精度处理[content][heading5]mask的处理[content]高精度换装前的准备:这里做两个工作1.将模特身上的衣服分割出来2.拼接出来对应模特与衣服合并后图片的遮罩[heading5]提示词格式与Redux权重[content]这里使用的是Flux的fill模型,提示词书写的格式:这是一组图片,左边是衣服,右边的模特穿着左边的衣服需要注意的是,Redux这里,把权重的调整为最大。这样我们就可以对mask位置,对服装进行了进一步的处理原来的服装细节得到了还原,并且也有了需要的模特。