以下是针对您所遇到的报错问题的一些解决建议:
另外,换脸工作流的核心组件是 Apply InstantID Advanced 节点,这个节点的作用就是将源人脸替换到目标图像中。其中,instantID 模型擅长提取图片的高层次特征,包括面部的纹理信息、几何结构、风格特征等,在图中例子是 IP-Adpater,用于识别和保留目标图像 image_kps 的风格并迁移到生成图像中。instantID Face Analysis 节点用于提取人脸五官的特征向量,作用是使生成图像时,人脸的眼睛、鼻子、嘴巴等样子仍然符合源人脸 image 的特征。controlnet 模型的作用是识别目标图像 image_kps 的低层次特征,包括骨架、姿势、边缘、结构。controlnet 模型和 instantID 模型起到不同的控制作用,结合使用可以达到将源人脸的五官替换目标图像中五官的效果。
⑥对于ipadater部分,倘若加载器部分报错说model不存在,将文中画圈部分修改调整到不报错:⑦Pulid部分,除了下载好对应的节点以及参考官方网站[GitHub - cubiq/PuLID_ComfyUI:PuLID native implementation for ComfyUI](https://github.com/cubiq/PuLID_ComfyUI)最下面的安装对应要求外:还要注意上图中的第二要点,对应安装一些内容,具体要求如下图(在云盘中命名为“pulid插件模型位置.png”)及对应的云盘链接:PulID全套模型链接:https://pan.baidu.com/s/1ami4FA4w9mjuAsPK49kMAw?pwd=y6hb提取码:y6hb否则将会遇到以下的报错:Error occurred when executing PulidEvaClipLoader:(MaxRetryError('HTTPSConnectionPool(host=\'huggingface.co\',port=443):Max retries exceeded with url:/QuanSun/EVA-CLIP/resolve/main/EVA02_CLIP_L_336_psz14_s6B.pt(Caused by SSLError(CertificateError("hostname \'huggingface.co\' doesn\'t match either of \'*.extern.facebook.com\',\'extern.facebook.com\'")))'),'(Request ID:05b932bd-e982-434e-8dc7-e41cca2e949f)')⑧Ollama大模型部分,为了应对没下载大模型带来的报错,因此需要下载大模型首先,下载ollama,网站:[Download Ollama on Windows](https://ollama.com/download)
这个换脸工作流的核心组件是Apply InstantID Advanced节点,这个节点的作用就是将源人脸替换到目标图像中,展开看一下这个节点的模型和参数,就能理解这个节点的工作原理了。1.instantID:载入instantID模型,instantID模型擅长提取图片的高层次特征,包括面部的纹理信息、几何结构、风格特征等,在图中例子是IP-Adpater,用于识别和保留目标图像image_kps的风格并迁移到生成图像中。1.insightface:接入instantID Face Analysis节点,用于提取人脸五官的特征向量,作用是使生成图像时,人脸的眼睛、鼻子、嘴巴等样子仍然符合源人脸image的特征。1.controlnet:载入控制模型,controlnet模型的作用是识别目标图像image_kps的低层次特征,包括骨架、姿势、边缘、结构。controlnet模型和instantID模型起到不同的控制作用,结合使用可以达到将源人脸的五官替换目标图像中五官的效果。1.image、image_kps:image源人脸,在本文工作流中,即用户上传的人脸,是提供五官特征向量的图片。image_kps(image key points)目标图像,提供五官对齐的特征点、表情、风格等,以便将源人脸的五官特征替换到目标图像的对应位置。1.model:
用的是熊木大佬在open art分享的黏土工作流如果你缺少ipadapter的模型,去这个网址下载:https://github.com/cubiq/ComfyUI_IPAdapter_plus工作流中用的的模型和LoRA:Juggernaut XL大模型:https://civitai.com/models/133005?modelVersionId=357609CLAYMATE - SDXL的粘土化风格https://civitai.com/models/208168/claymate-claymation-style-for-sdxlDoctor Diffusion的粘土风格LoRAhttps://civitai.com/models/181962/doctor-diffusions-claymation-style-lora我也将这几个模型上传到了网盘,方便下载:Juggernaut XL大模型链接:https://pan.baidu.com/s/1X_KUygwJLiqTtv746nVvcg?pwd=6npe提取码:6npeCLAYMATE - SDXL的粘土化风格LoRA链接:https://pan.baidu.com/s/1eV-QQO8WDLtfZt1Tp2Qa8Q?pwd=q7g6提取码:q7g6Doctor Diffusion的粘土风格LoRA链接:https://pan.baidu.com/s/1JQf560WUHM_gBhwfr-IxOA?pwd=7hgg提取码:7hgg我也下载到本地,一直遇到这种报错,“Error occurred when executing IPAdapterUnifiedLoader:ClipVision model not found.......”类似下图这样:研究了一天终于解决了,是在这个网址里找到的有多个关于IPAdapter报错的解决办法:https://github.com/cubiq/ComfyUI_IPAdapter_plus/issues/313