SDXL 要怎樣使用 VAE 呢?

在使用 SDXL 時,很多 SD 1.5 / 2.1 的 Model 都不能再使用,其中 VAE 也不能再使用了,那麼要用什麼 VAE 配搭 SDXL 呢,還是在 SDXL 已經不需要 VAE 呢?

SDXL 要怎樣使用 VAE 呢?
SDXL 要怎樣使用 VAE 呢?

在使用 SDXL 時,很多 SD 1.5 / 2.1 的 Model 都不能再使用,其中 VAE 也不能再使用了,那麼要用什麼 VAE 配搭 SDXL 呢,還是在 SDXL 已經不需要 VAE 呢?

什麼是 VAE?

Stable Diffusion 中的 VAE 是什麼?
在 Stable Diffusion 中常常會見到 Checkpoint Model 需要配合 VAE 使用,到底 VAE 是什麼?有什麼用途?什麼時候需要用?要怎樣用?以下我就會為大家詳盡解釋 VAE 是什麼東西。

就像 StabilityAI 官方為 Stable Diffusion SD 1.5 推出的 vae-ft-mse-84000 一樣,其實官方也有推出 VAE 以供 SDXL 使用,而且還有兩種方法。

第一種方法

就是使用已包含 VAE 在內的 SDXL Model,分別有 base 及 refiner 版本。

  • sd_xl_base_1.0_0.9vae.safetensors 容量為 6.94 GB。
  • sd_xl_refiner_1.0_0.9vae.safetensors 容量為 6.08 GB。
sd_xl_base_1.0_0.9vae.safetensors · stabilityai/stable-diffusion-xl-base-1.0 at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
sd_xl_refiner_1.0_0.9vae.safetensors · stabilityai/stable-diffusion-xl-refiner-1.0 at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.

下載後只需直接使用該 SDXL Model,此兩個 SDXL Model 皆已合併 VAE 毋需另行加入 VAE。


第二種方法

當然使用原生 SDXL 時還是需要配搭 VAE 使用,可以下載 SDXL 專用的 VAE 。

stabilityai/sdxl-vae at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.

只要放到 models/VAE 內即可以選取。

選取 sdxl_vae
左邊沒有使用 VAE,右邊使用了 SDXL VAE
左邊沒有使用 VAE,右邊使用了 SDXL VAE

從結果上來看,使用了 VAE 對比度會比較高,輪廓會比較明顯,但也沒有 SD 1.5 時灰了一片的情況,所以也可以按情況決定有沒有需要加上 VAE。

Read more

Unity AI Assistant 2.7.0 將不再支援 MCP 連接

Unity AI Assistant 2.7.0 將不再支援 MCP 連接

相信有不少人用 Unity AI MCP 來連接 Claude Code / Codex 等 AI 工具進行開發,近日隨著 Unity AI 進入公測,Unity 官方 Package com.unity.ai.assistant 亦升級到 v2.7.0-pre.2 。這個新版本的 Unity AI Assistant 在 Unity MCP Server 上加上了限制,Connected Clients limit 在 0 個 direct connection(以前是 Unlimited),就是不讓開發者使用其他 AI 工具來支援開發。 官方也有說明可以怎樣做,

Game Engine 的選擇

Game Engine 的選擇

在前陣子在決定寫 game 的期間,我試用了三大主流 Game Engine 來實作 demo,現在比較一下 Unreal,Unity 及 Godot 適合什麼開發者。 自我定位 在開始選擇前,我首先要確定自己是什麼開發者,以什麼角度去選擇 Game Engine。 * 首先我是獨立開發者,就是一個人會負責所有東西,繪圖設計,故事劇情,程式開發,宣傳銷售,後續經營,所以簡單很重要。 * 我使用 Macbook Pro M1 來開發,由於我沒有 desktop,單靠效能有限的主機來開發,所以效能夠不夠對我來說也是很重要。 * 遊戲平台,我的初期目標是 Steam/Andriod/iOS,如果有成果才會推向各大主機,雖然三大 Game Engine 都支持多平台輸出,但實際上調查後發現還是有一些限制,我會在下面解釋。 * 遊戲類型,