banner
cylll

cylll

honorificabilitudinitatibus
twitter

SDXL Turbo + ComfyUI 秒級出圖

18aeb2d971d835d3b615c226cdc657ba

安裝基礎環境#

安裝 Xcode 依賴#

xcode-select --install

安裝 python3 git#

brew install python3 
brew install git 

安裝 Pytorch Nightly Build#

根據 Apple 官方文件指導

https://developer.apple.com/metal/pytorch/

pip3 install --pre torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/nightly/cpu

複製 ComfyUI 專案代碼#

切換到任意目錄下複製 ComfyUI 專案,這裡以 4sspai 為例子:

首先進入 4sspai 目錄下 cd 4sspai
git clone https://github.com/comfyanonymous/ComfyUI.git

b8f0910b0f9219e7ddaf24b8bde923d3

安裝 ComfyUI 依賴包#

進入 ComfyUI 專案目錄下並安裝依賴包

cd ComfyUI && pip3 install -r requirements.txt

#

a016a54465a792c6fad8dc15eee6b2d8
複製 ComfyUI Manager 專案代碼

進入 ComfyUI 專案目錄下 custom_nodes 文件夾下,複製 ComfyUI Manager 專案代碼:

cd custom_nodes git clone https://github.com/ltdrdata/ComfyUI-Manager.git

cbb0f224aea298fd67a677dff7d4c640

安裝 ComfyUI Manager 依賴包#

進入 ComfyUI Manager 專案目錄下並安裝依賴包:

cd ComfyUI-Manager && pip3 install -r requirements.txt
9f0cad579c6c6c77c7a23ed2ecf4f70b

SDXL Turbo 模型#

StabilityAI 在剛剛發布 Stable Video Diffusion 之後,又發布了爆炸性模型:SDXL Turbo,

SDXL Turbo 通過新的蒸餾技術實現了最先進的性能,使得單步圖像生成具有前所未有的質量,將所需步驟數量從 50 減少到僅 1 步。
請參閱我們的研究論文,以獲取有關該模型新蒸餾技術的具體技術細節,該技術利用對抗訓練和評分蒸餾相結合。

在 Hugging Face 上下載模型和代碼,允許個人及非商業用途。
下載 SDXL Turbo 模型地址:
https://huggingface.co/stabilityai/sdxl-turbo/blob/main/sd_xl_turbo_1.0_fp16.safetensors

729a7ae8e0551b3100d729d0e882412d
208c36165671b2c2d89f270d0d03237f

將下載好的模型放到 ComfyUI/models/checkpoints/ 路徑下

啟動 ComfyUI + 出圖#

啟動 ComfyUI#

在終端切換到 ComfyUI 專案路徑,執行 python main.py --force-fp16 來啟動:
e354d0be951f52308f0ff2add6abe5d7

最後在瀏覽器中訪問 http://127.0.0.1:8188

加載工作流#

下載使用 github 別人分享的工作流配置文件:

https://github.com/hylarucoder/comfyui-workflow/blob/e6f7ea4c109775835319366308e48d06c8fbaf74/sdxl_turbo/lab-sdxl-turbo.json

在瀏覽器中選擇剛剛下載的配置文件:
63cdebc3e0864198570449193d0de957

測試出圖#

本人配置:
3e13c91c34305b19c4fc8f836a2258f4

簡單圖片大概是 1.5 到 1.9 秒每張:
e261beaf384243230f0a2de86662d0c0

最後#

在最後再推薦一個開箱即用 App,支持絕大多數的模型,甚至可以在 8G 的 mac 上運行:)

https://apps.apple.com/us/app/draw-things-ai-generation/id6444050820

image

載入中......
此文章數據所有權由區塊鏈加密技術和智能合約保障僅歸創作者所有。