Cos Stable Diffusion XL 及 Edit 登場,重新定義 inpaint

Stability AI 又推出一款新的 Checkpoint Model - Cos Stable Diffusion XL,Cos 的意思就是 Cosine-Continuous。其中最大賣點就是 Cos Stable Diffusion XL Edit 版整,使用這個 Checkpoint Model 以全新的方法去進行 inpaint,不用落 mask,不用 controlnet,直接用 prompt 就可以做到 inpaint 效果!

Cos Stable Diffusion XL 及 Edit 登場,重新定義 inpaint
Cos Stable Diffusion XL 及 Edit 登場,重新定義 inpaint

Cos Stable Diffusion XL 1.0 Base 是經過 Cosine-Continuous EDM VPred 調整的 Checkpoint Model。這次調整最顯著的特點是其能夠從黑到純白產生完整的色彩範圍,同時在每個步驟中對模型對圖像的變化速率進行了更微妙的改進。

Cos Stable Diffusion XL 1.0 Edit,一樣經過 Cosine-Continuous EDM VPred 調整調,並升級為執行指導式圖像編輯。此 Checkpoint Model 可以以 img2img 和 prompt 作為輸入,將 prompt 解釋為如何改變圖像的指令。


什麼是 Cos Stable Diffusion XL 及 Cos StableDiffusion XL Edit?

Stability AI 又推出一款新的 Checkpoint Model - Cos Stable Diffusion XL,Cos 的意思就是 Cosine-Continuous。其中最大賣點就是 Cos Stable Diffusion XL Edit 版整,使用這個 Checkpoint Model 以全新的方法去進行 inpaint,不用落 mask,不用 ControlNet,直接用 prompt 就可以做到 inpaint 效果!


使用 ComfyUI 及 Cos XL Edit 進行 inpaint

首先到官方 Hugging Face 下載 cosxl_edit.safetensors 這個用於 inpaint 的版本。下載前需要輸入一些個人資料確定,隨便輸入就可以。

stabilityai/cosxl at main
We’re on a journey to advance and democratize artificial intelligence through open source and open science.

使用 Cos XL Edit 作為 Checkpoint 加入簡單的 prompts,即可完成 inpaint,保持圖片風格/外型的情況下,不用落 mask,ControlNet 或任何額外操作。

直接用 prompts 描述一隻粉藍色的狗就可以生成跟原圖相似的圖片。

另一個 Cos XL Edit inpaint 的例子

只需輸入 underwater,原本在太空騎馬慢步的太空人即時變成水中慢步。


Cos Stable Diffusion XL Edit 大大改變了一直以來 inpaint 的方法,完全不用其他操作,只用 prompt 就可以進行 inpaint,實現了文字分析圖像及理解文字描述所指需要重繪的位置,令整個 inpaint 修改圖片的動作變的極為簡易,相信是另一個改變 Stable Diffusion 生態的重大發佈。

Read more

未來 AI 是否取代人類工作?

未來 AI 是否取代人類工作?

近幾年 AI 發展蓬勃,每個月都有大量新 AI 工具推出,每幾個月就有一次大革新,很多人都預言 AI 會取代人類工作,但是 AI 會怎樣取代人類的工作呢?人類會否因此失業? AI 真的會取代你的工作嗎? 大家心目中的 AI 總是一個機械人的樣子,當然現時也有很多公司已經開發機械人,然後這個機械人坐在你原本的位置取代了你的工作。 這種事情會發生嗎? 簡單直接地說就是短時間內不會發生,AI 可以取代人的唯一原因是,使用 AI 更便宜。你認為買一個機械人要多少錢,還要訂閱 AI 服務才會聽的懂你的指令,還有機械人壞了要維修,還有很多機械人未能支援的工作,可能每幾年又要花錢升級機械人。 對老闆來說花這麼多錢買個不肯定能完成工作的機械人來取代人工作太不化算了,大概會有些公司會花錢買幾隻玩玩,但用來取代便宜得多的人手是不現實的。 那麼 ChatGPT 會取代我的工作岡位嗎? 相信有部門功能性極底的工作可以由 ChatGPT 取代,但是不會是全部,而且取代的方式也不會是你的工作岡位消失變成由 ChatGPT 工作。 舉一個例子,一間公司有設計師,