2023-04-11

Stable Diffusion 二種細節表現最好的模型

阿舍一開始用 Stable Diffusion 的時候,就傻傻用 SD 1.5 版的模型,就不熟又不懂,怎麼都弄不出別人那種美美或真實感十足的成品出來,後來,才發現大家都是用 Chilloutmax 這個模型來繪製人物,可是,阿舍用一用就覺得這個模型產出來的圖,仔細看看,臉跟身體似乎不是太協調,有點像臉是最後再貼上去的,所以,阿舍就想換個模型來用用,於是就找到 Citivai 這個網站,然後,就開始阿舍一段漫長的模型試用之旅。

Stable Diffusion 繪製 (DeliberateV2)


模型是訓練和調校出來的

Stable Diffusion 模型都是善心人士花時間收集資料訓練和調校而成的,所以,除了像 Stable Diffusion 的生父母 Stability.ai 公司所提供的 SD 1.4、SD 1.5 和 SD 2.1 的基礎模型是通用型之外,大部份的模型都是會用這幾個通用型的模式為基礎,以特定主題或人物的資料集進行模型的訓練和調校,新產生出來的模型就會在那些訓練過的主題或人物的繪製上,會有明顯較好的成像品質和細節。

而模型可以往上再堆疊,也就是再基於新產生的模型再拿來訓練成新的模型,因此,偶爾,會看到模型的作者會說,他是基於那個模型為基礎所加入的訓練成果,這樣訓練出來的模型才能保有一定的通用性,才不會需要每次都要從碩訓練,不然,就真的只能繪製訓練過的物件了。

另外,各種模型的訓練方式不斷推陳出新和簡化,現在只要能熟悉使用 Stable Diffusion Automatic1111 Webui 提供的模型訓練工具 (有很多種方式,改天有空阿舍再來寫寫),就能夠自己訓練出自己喜歡的模型,也因為這樣,現在模式推出的速度之快,真是有點讓人不知所措。

擬真實物通用首選 Deliberate V2

Stable Diffusion 模型的分類有很多種,可以依繪圖方式 (例如,立體紙調雕、像素繪圖)、繪畫風格(例如,擬真、日式動漫) 及特定主題等種類,如果有空沒事做,可以都下載來玩玩,像是立體紙脽的模型,繪出來的圖就很有趣,另一個用毛線畫圖的模型也是很有效果,只不過,真正要創作的話,還是要選用比較通用型的模型會比較方便。

阿舍在繪製比較接近真實感的物件時,本來都是用 Realistic Vision V1.3 和 V2.0 的版本,可是,它繪製的東方人臉型阿舍不愛,而西方人的效果則是很不錯,在其它物件的真實性也還不錯,但是,很多細節還是沒有很自然,所以,阿舍才又去找了別的模型來試,就找到 Deliberate V2 來用,這個模型繪製出來的作品的細節和光線比較自然,阿舍試著用來繪製不同的物件,效果還不錯,如果是用來畫成 3D 質感的成品,效果也都還不錯。

另外,就是這個模型看的懂的提示詞比較多,因此,不會像某些模型懂的不多,就會亂亂畫,很容易就遇到妖魔鬼怪了。

高畫質日本動漫風格 DreamShaper

阿舍目前唯美型的圖都會用 DreamShaper 這個模型來產,基本上,產出來的成品的品質都有一定的水準,不過,要注意的是,作者也有提到,就是要搭配 Hires 來出大圖,會比較好,而且用大圖幾乎就不需用到修臉的功能了,阿舍實測,圖的大小真的有差,放大繪製出來的品質和細節都很不錯,也超立體的,喜歡這種風格的朋友們,可以下載來試試,不過,因為都要 x2 或 x3 來產圖,真的很燒顯示卡。 

下面這一張是阿舍用 DreamShaper 繪製的成品,阿舍有更多繪製出來的圖,放在這裡,有作品就會貼上去,有興趣可以看看,另外,DreamShaper 作者還有另外二個動漫型的模型,效果也不錯,這位作者真是厲害 ... 👍

Stable Diffusion 繪製 (DreamShaperV4)


結語: 先決定風格再說

Stable Diffusion 的模型真的還不少,而且,還一直在新增,如果想要都玩一玩是真的滿花時間的,所以,阿舍會建議先依自己想要的風格來決定好方向,然後,再到  Citivai 網站去搜尋相關的模組來用,這樣比較節省時間,如果懶的找和懶得試的話,阿舍建議的這二款模型,應該就先夠用了,等用了一陣子,找出自己覺得這二款模型有少了什麼感覺後,再來換模型,就會比較有方向了。

阿舍後續繪製的作品會放在下面這裡,有興趣請來看看囉 !
https://twitter.com/arthurtoday

(續) Stable Diffusion 簡單畫出令人驚豔作品的方法



推薦閱讀


有疑問? 問題還是沒解決嗎? 歡迎下方留言提問和討論 😁

沒有留言 :

張貼留言

歡迎留言提問和討論 .... 😁