ComfyUI-Clay 模型部署教程本项目能够通过输入一张图片,然后根据这张图片的ID进行提取,并通过提示词的引导和lora模型的结合,最终生成具有粘土捏制效果的粘土风格图片。下面将详细介绍如何在ComfyUI中实现该工作流获得理想效果。

显存要求:>11G
本文档针对ComfyUI进行部署使用,因此在正式部署之前需要部署ComfyUI
git clone https://github.com/comfyanonymous/ComfyUI.git
cd ComfyUI
下面需要使用 Anaconda 或 Mimiconda 创建虚拟环境,可以输入 conda --version 进行检查。下面是 Mimiconda 的安装过程:
wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh
bash Miniconda3-latest-Linux-x86_64.sh
按 Enter 键查看许可证条款,阅读完毕后输入 yes 接受条款,安装完成后,脚本会询问是否初始化 conda 环境,输入 yes 并按 Enter 键。
source ~/.bashrc 命令激活 conda 环境conda --version 命令来验证是否安装成功,如果出现类似 conda 4.10.3 这样的输出就成功了。输入下面的命令:
conda create -n comfyui python=3.10
conda activate comfyui
pip install torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/cu121
pip install -r requirements.txt
此时所需环境就已经搭建完成,通过下面命令进行启动:
python main.py
访问网址得到类似下图界面即表示成功启动:

(1)instantid模型下载
放置在ComfyUI/models/instantid目录中
模型主页: https://huggingface.co/InstantX/InstantID/resolve/main/ip-adapter.bin?download=true
点击上面链接即可下载,也可访问 Hugging Face 下载模型。首次访问该页面时,可能需要同意用户协议才能看到模型下载页。
进入网页后搜索”InstantX/InstantID“下载图中模型:

(2)face alalysis 模型下载
下载后解压到ComfyUI/models/insightface/models/antelopev2
下载地址:https://huggingface.co/MonsterMMORPG/tools/resolve/main/antelopev2.zip
同理,点击上面链接直接下载,也可访问 Hugging Face 自己选择条件下载:

(3)controlnet 模型下载
放置在ComfyUI/models/controlnet目录中
同理,点击上面链接直接下载,也可访问 Hugging Face 自己选择条件下载:

(4) Lora模型下载
claymate-claymation-style-for-sdxl模型
放置在ComfyUI/models/loras目录中
访问C站(civitai)进行下载:

doctor-diffusions-claymation-style-lora模型
放置在ComfyUI/models/loras目录中
访问C站(civitai)进行下载:

(5)CKPT模型
CinematicRedmond-SDXL模型
放置在ComfyUI/models/checkpoints文件夹下
下载地址:https://huggingface.co/artificialguybr/CinematicRedmond-SDXL/tree/main
同理,点击上面链接直接下载,也可访问 Hugging Face 自己选择条件下载:

获取工作流
获取地址:ClayU | ComfyUI Workflow (openart.ai)

然后将下载的工作流拖入cmfyui界面,出现下图中红色未安装节点,这需要我们进行安装。
如果已经安装“ComfyUI-Manager”管理器,则可通过”安装缺失节点“进行安装,如下图:

然后将出现的所有节点进行安装,安装完重启ComfyUI就可以使用了,效果如下:

manager 是一个用来加强ComfyUI可用性的扩展,提供了对ComfyUI各种自定义节点的安装、删除、禁用、启用等管理功能。同时还提供了中心功能和便利功能,用来访问 ComfyUI 中各种信息。
cd /ComfyUI/custom_nodes
git clone https://github.com/ltdrdata/ComfyUI-Manager.git
成功安装之后重启界面会出现一个“Manager”如图:

git clone https://github.com/AIGODLIKE/AIGODLIKE-ComfyUI-Translation.git
下载文件之后需要重新启动,重启模型之后:

设置一次之后可点击图中框选出的选项进行语言的切换:

cd /ComfyUI/custom_nodes
git clone https://github.com/thisjam/comfyui-sixgod_prompt.git
然后重启ComfyUI后看到下图的小标志就表示可以了:

使用方法:双击页面,在搜索框中搜索“six”即可出现,点击sixGodPrompts,此时出现的就是提示词的中文输入框可以替代自带的clip输入框,可点击左下角的小标或按“AIT”+“q”打开和隐藏。

使用方法如下:

点击此处,立即体验ComfyUI-Clay(粘土风格)!
