SDXL Lightning ⚡比 SDXL Turbo 更快更好
在 2023 年底 SDXL Turbo 才首次亮相。不足三個月一個更優秀和更迅速的 SDXL Lightning 閃電般誕生。這款創新模型能夠在短時間內生成優質圖像,提供從 1 到 8 步的選擇。再跟 LoRA 和 Unet 進行整合,SDXL Lightning 使用家能夠以閃電般的效率生成圖像。
什麼是 SDXL Lightning⚡?
SDXL Lightning 代表了文生圖的最新突破,擁有極速和卓越的品質。這款新登場的 Model 能夠在短短幾步之內生成高解析度 1024 x 1024
的圖像,詳情可參考研究論文 SDXL-Lightning: Progressive Adversarial Diffusion Distillation。
這款 Model 基於 stabilityai/stable-diffusion-xl-base-1.0,這是一個包含 1 步、2 步、4 步和 8 步精煉 Model。 SDXL Lightning 實現的圖像生成品質真是令人驚嘆,其中 1 步 Model 因品質問題還是實驗性質。
此外,還提供了完整的 UNet 和 LoRA Checkpoint。完整的 UNet Model 著重於圖像質量,但 LoRA Model 提供了靈活性,允許與其他 checkpoint 混合使用,以滿足不同的應用需求。
網上測試
輸入提示並在幾秒鐘內生成圖像。例如,只需輸入 1girl
作為 prompt。
以 1girl
為 prompt 生成 1步,2步,4步,8步的圖片測試。
通過 ComfyUI 進行本地測試⚡
您可以下載不同步驟或方法的模型。
如果您使用普通的 SDXL Lightning Checkpoint 進行 4 步生成,請下載 sdxl_lightning_4step.safetensors
如果您需要帶有 8 步的 UNet SDXL Lightning Checkpoint,請下載 sdxl_lightning_8step_unet.safetensors
如果您需要帶有 2 步的 SDXL LoRA,請下載 sdxl_lightning_2step_lora.safetensors
您還可以從官方 huggingface 網站下載工作流程。
使用 SDXL Lightning Checkpoint 或 UNet 檢查點,您可以使用以下 workflow 生成圖像。
使用 LoRA 則可以使用以下 workflow。
其實在 Civitai 中已經有許多基於 SDXL Lightning 訓練的 Checkpoint ,您可以簡單地下載它並直接在 Automatic1111 這樣的 WebUI 中使用。
Stable Diffusion 由 LCM、SDXL Turbo 到現在的 SDXL Ligthning 在生成速度上取得了顯著的進步。隨著每一次迭代,Stable Diffusion 的生成速度都在穩步增加。這一進步意味著很快,在任何計算機上輕鬆實現生成高品質圖像。