SDXL Lightning ⚡比 SDXL Turbo 更快更好

在 2023 年底 SDXL Turbo 才首次亮相。不足三個月一個更優秀和更迅速的 SDXL Lightning 閃電般誕生。這款創新模型能夠在短時間內生成優質圖像,提供從 1 到 8 步的選擇。再跟 LoRA 和 Unet 進行整合,SDXL Lightning 使用家能夠以閃電般的效率生成圖像。


什麼是 SDXL Lightning⚡?

SDXL Lightning 代表了文生圖的最新突破,擁有極速和卓越的品質。這款新登場的 Model 能夠在短短幾步之內生成高解析度 1024 x 1024 的圖像,詳情可參考研究論文 SDXL-Lightning: Progressive Adversarial Diffusion Distillation

這款 Model 基於 stabilityai/stable-diffusion-xl-base-1.0,這是一個包含 1 步、2 步、4 步和 8 步精煉 Model。 SDXL Lightning 實現的圖像生成品質真是令人驚嘆,其中 1 步 Model 因品質問題還是實驗性質。

此外,還提供了完整的 UNet 和 LoRA Checkpoint。完整的 UNet Model 著重於圖像質量,但 LoRA Model 提供了靈活性,允許與其他 checkpoint 混合使用,以滿足不同的應用需求。


網上測試

SDXL Lightning - a Hugging Face Space by AP123
Discover amazing ML apps made by the community

輸入提示並在幾秒鐘內生成圖像。例如,只需輸入 1girl 作為 prompt。

網上測試

1girl 為 prompt 生成 1步,2步,4步,8步的圖片測試。


通過 ComfyUI 進行本地測試⚡

您可以下載不同步驟或方法的模型。

如果您使用普通的 SDXL Lightning Checkpoint 進行 4 步生成,請下載 sdxl_lightning_4step.safetensors

如果您需要帶有 8 步的 UNet SDXL Lightning Checkpoint,請下載 sdxl_lightning_8step_unet.safetensors

如果您需要帶有 2 步的 SDXL LoRA,請下載 sdxl_lightning_2step_lora.safetensors

您還可以從官方 huggingface 網站下載工作流程。

ByteDance/SDXL-Lightning at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.

使用 SDXL Lightning Checkpoint 或 UNet 檢查點,您可以使用以下 workflow 生成圖像。

SDXL Lightning Full workflow for Checkpoint

使用 LoRA 則可以使用以下 workflow。

SDXL Lightning workflow for LoRA

其實在 Civitai 中已經有許多基於 SDXL Lightning 訓練的 Checkpoint ,您可以簡單地下載它並直接在 Automatic1111 這樣的 WebUI 中使用。

DreamShaper XL - Lightning DPM++ SDE | Stable Diffusion Checkpoint | Civitai
DreamShaper XL - Now Turbo! Also check out the 1.5 DreamShaper page Check the version description below (bottom right) for more info and add a ❤️ to…
RedOlives - v3.0 SDXL-Lightning | Stable Diffusion Checkpoint | Civitai
This is a ❤️ merge of many awesome 🫶 models with intent to create a model that is good GREAT for AI 🎨🖌️Art, Illustration (Anime 💦🫠 ) and ... 📸Photogr…
PixelWaveLightning - 01 | Stable Diffusion Checkpoint | Civitai
⚡⚡⚡PixelWaveLightning⚡⚡⚡ 8 Steps. DPMPP SDE Simple. CFG 1 For my friends who don’t want to apply the LoRA all the time. Also by not applying the Lo…
marduk191’s Pseudo-Modern Anime (lightning) - v1.0 | Stable Diffusion Checkpoint | Civitai
Tip Jar This is an early version of an Anime model I have been working on lately that finally got to a starting point. Trying to fuse the darkpizza…

Stable Diffusion 由 LCM、SDXL Turbo 到現在的 SDXL Ligthning 在生成速度上取得了顯著的進步。隨著每一次迭代,Stable Diffusion 的生成速度都在穩步增加。這一進步意味著很快,在任何計算機上輕鬆實現生成高品質圖像。