banner
cylll

cylll

honorificabilitudinitatibus
twitter

SDXL Turbo + ComfyUI 秒级出图

18aeb2d971d835d3b615c226cdc657ba

安装基础环境#

安装 Xcode 依赖#

xcode-select --install

安装 python3 git#

brew install python3 
brew install git 

安装 Pytorch Nightly Build#

根据 Apple 官方文档指导

https://developer.apple.com/metal/pytorch/

pip3 install --pre torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/nightly/cpu

克隆 ComfyUI 项目代码#

切换到任意目录下克隆 ComfyUI 项目,这里以 4sspai 为例子:

首先进入 4sspai 目录下 cd 4sspai
git clone https://github.com/comfyanonymous/ComfyUI.git

b8f0910b0f9219e7ddaf24b8bde923d3

安装 ComfyUI 依赖包#

进入 ComfyUI 项目目录下并安装依赖包

cd ComfyUI && pip3 install -r requirements.txt

#

a016a54465a792c6fad8dc15eee6b2d8
克隆 ComfyUI Manager 项目代码

进入 ComfyUI 项目目录下 custom_nodes 文件夹下,克隆 ComfyUI Manager 项目代码:

cd custom_nodes git clone https://github.com/ltdrdata/ComfyUI-Manager.git

cbb0f224aea298fd67a677dff7d4c640

安装 ComfyUI Manager 依赖包#

进入 ComfyUI Manager 项目目录下并安装依赖包:

cd ComfyUI-Manager && pip3 install -r requirements.txt
9f0cad579c6c6c77c7a23ed2ecf4f70b

SDXL Turbo 模型#

StabilityAI 在刚刚发布 Stable Video Diffusion 之后,又发布了爆炸性模型:SDXL Turbo,

SDXL Turbo 通过新的蒸馏技术实现了最先进的性能,使得单步图像生成具有前所未有的质量,将所需步骤数量从 50 减少到仅 1 步。
请参阅我们的研究论文,以获取有关该模型新蒸馏技术的具体技术细节,该技术利用对抗训练和评分蒸馏相结合。

在 Hugging Face 上下载模型和代码,允许个人及非商业用途。
下载 SDXL Turbo 模型地址:
https://huggingface.co/stabilityai/sdxl-turbo/blob/main/sd_xl_turbo_1.0_fp16.safetensors

729a7ae8e0551b3100d729d0e882412d
208c36165671b2c2d89f270d0d03237f

将下载好的模型放到 ComfyUI/models/checkpoints/ 路径下

启动 ComfyUI + 出图#

启动 ComfyUI#

在终端切换到 ComfyUI 项目路径,执行 python main.py --force-fp16 来启动:
e354d0be951f52308f0ff2add6abe5d7

最后在浏览器中访问 http://127.0.0.1:8188

加载工作流#

下载使用 github 别人分享的工作流配置文件:

https://github.com/hylarucoder/comfyui-workflow/blob/e6f7ea4c109775835319366308e48d06c8fbaf74/sdxl_turbo/lab-sdxl-turbo.json

在浏览器中选择刚刚下载的配置文件:
63cdebc3e0864198570449193d0de957

测试出图#

本人配置:
3e13c91c34305b19c4fc8f836a2258f4

简单图片大概是 1.5 到 1.9 秒每张:
e261beaf384243230f0a2de86662d0c0

最后#

在最后再推荐一个开箱即用 App,支持绝大多数的模型,甚至可以在 8G 的 mac 上运行:)

https://apps.apple.com/us/app/draw-things-ai-generation/id6444050820

image

Loading...
Ownership of this post data is guaranteed by blockchain and smart contracts to the creator alone.