SDXL Lightning ⚡比 SDXL Turbo 更快更好

在 2023 年底 SDXL Turbo 才首次亮相。不足三個月一個更優秀和更迅速的 SDXL Lightning 閃電般誕生。這款創新模型能夠在短時間內生成優質圖像,提供從 1 到 8 步的選擇。再跟 LoRA 和 Unet 進行整合,SDXL Lightning 使用家能夠以閃電般的效率生成圖像。

SDXL Lightning ⚡比 SDXL Turbo 更快更好
SDXL Lightning ⚡比 SDXL Turbo 更快更好

在 2023 年底 SDXL Turbo 才首次亮相。不足三個月一個更優秀和更迅速的 SDXL Lightning 閃電般誕生。這款創新模型能夠在短時間內生成優質圖像,提供從 1 到 8 步的選擇。再跟 LoRA 和 Unet 進行整合,SDXL Lightning 使用家能夠以閃電般的效率生成圖像。


什麼是 SDXL Lightning⚡?

SDXL Lightning 代表了文生圖的最新突破,擁有極速和卓越的品質。這款新登場的 Model 能夠在短短幾步之內生成高解析度 1024 x 1024 的圖像,詳情可參考研究論文 SDXL-Lightning: Progressive Adversarial Diffusion Distillation

這款 Model 基於 stabilityai/stable-diffusion-xl-base-1.0,這是一個包含 1 步、2 步、4 步和 8 步精煉 Model。 SDXL Lightning 實現的圖像生成品質真是令人驚嘆,其中 1 步 Model 因品質問題還是實驗性質。

此外,還提供了完整的 UNet 和 LoRA Checkpoint。完整的 UNet Model 著重於圖像質量,但 LoRA Model 提供了靈活性,允許與其他 checkpoint 混合使用,以滿足不同的應用需求。


網上測試

SDXL Lightning - a Hugging Face Space by AP123
Discover amazing ML apps made by the community

輸入提示並在幾秒鐘內生成圖像。例如,只需輸入 1girl 作為 prompt。

網上測試

1girl 為 prompt 生成 1步,2步,4步,8步的圖片測試。


通過 ComfyUI 進行本地測試⚡

您可以下載不同步驟或方法的模型。

如果您使用普通的 SDXL Lightning Checkpoint 進行 4 步生成,請下載 sdxl_lightning_4step.safetensors

如果您需要帶有 8 步的 UNet SDXL Lightning Checkpoint,請下載 sdxl_lightning_8step_unet.safetensors

如果您需要帶有 2 步的 SDXL LoRA,請下載 sdxl_lightning_2step_lora.safetensors

您還可以從官方 huggingface 網站下載工作流程。

ByteDance/SDXL-Lightning at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.

使用 SDXL Lightning Checkpoint 或 UNet 檢查點,您可以使用以下 workflow 生成圖像。

SDXL Lightning Full workflow for Checkpoint

使用 LoRA 則可以使用以下 workflow。

SDXL Lightning workflow for LoRA

其實在 Civitai 中已經有許多基於 SDXL Lightning 訓練的 Checkpoint ,您可以簡單地下載它並直接在 Automatic1111 這樣的 WebUI 中使用。

DreamShaper XL - Lightning DPM++ SDE | Stable Diffusion Checkpoint | Civitai
DreamShaper XL - Now Turbo! Also check out the 1.5 DreamShaper page Check the version description below (bottom right) for more info and add a ❤️ to…
RedOlives - v3.0 SDXL-Lightning | Stable Diffusion Checkpoint | Civitai
This is a ❤️ merge of many awesome 🫶 models with intent to create a model that is good GREAT for AI 🎨🖌️Art, Illustration (Anime 💦🫠 ) and ... 📸Photogr…
PixelWaveLightning - 01 | Stable Diffusion Checkpoint | Civitai
⚡⚡⚡PixelWaveLightning⚡⚡⚡ 8 Steps. DPMPP SDE Simple. CFG 1 For my friends who don’t want to apply the LoRA all the time. Also by not applying the Lo…
marduk191’s Pseudo-Modern Anime (lightning) - v1.0 | Stable Diffusion Checkpoint | Civitai
Tip Jar This is an early version of an Anime model I have been working on lately that finally got to a starting point. Trying to fuse the darkpizza…

Stable Diffusion 由 LCM、SDXL Turbo 到現在的 SDXL Ligthning 在生成速度上取得了顯著的進步。隨著每一次迭代,Stable Diffusion 的生成速度都在穩步增加。這一進步意味著很快,在任何計算機上輕鬆實現生成高品質圖像。

Read more

Unity AI Assistant 2.7.0 將不再支援 MCP 連接

Unity AI Assistant 2.7.0 將不再支援 MCP 連接

相信有不少人用 Unity AI MCP 來連接 Claude Code / Codex 等 AI 工具進行開發,近日隨著 Unity AI 進入公測,Unity 官方 Package com.unity.ai.assistant 亦升級到 v2.7.0-pre.2 。這個新版本的 Unity AI Assistant 在 Unity MCP Server 上加上了限制,Connected Clients limit 在 0 個 direct connection(以前是 Unlimited),就是不讓開發者使用其他 AI 工具來支援開發。 官方也有說明可以怎樣做,

Game Engine 的選擇

Game Engine 的選擇

在前陣子在決定寫 game 的期間,我試用了三大主流 Game Engine 來實作 demo,現在比較一下 Unreal,Unity 及 Godot 適合什麼開發者。 自我定位 在開始選擇前,我首先要確定自己是什麼開發者,以什麼角度去選擇 Game Engine。 * 首先我是獨立開發者,就是一個人會負責所有東西,繪圖設計,故事劇情,程式開發,宣傳銷售,後續經營,所以簡單很重要。 * 我使用 Macbook Pro M1 來開發,由於我沒有 desktop,單靠效能有限的主機來開發,所以效能夠不夠對我來說也是很重要。 * 遊戲平台,我的初期目標是 Steam/Andriod/iOS,如果有成果才會推向各大主機,雖然三大 Game Engine 都支持多平台輸出,但實際上調查後發現還是有一些限制,我會在下面解釋。 * 遊戲類型,