2023-05-04

Stable Diffusion 合併多個 LoRA 模型產生新人物長相

標籤

阿舍在準備這篇討論合併模型的文章時，才發現到有一個 Automatic1111 的擴充工具（Extension)，不但有更厲害的 Checkpoint 模型合併功能外，還可以把 LoRA 模型合併到大型的 CheckPoint 模型裡，然後，也可以直接把多個 LoRA 模型合併成一個新的 LoRA 模型來使用，看到這樣的擴充工具就讓阿舍很好奇，如果把台日韓那幾個人物 LoRA 拿來合併後，不知會長出怎樣的人物啊 ... 🤩


Stable Diffusion 繪製


SuperMerger 真的很 Super

阿舍發現到的這個擴充工具叫做「SuperMerger」，在 Automatic1111 WebUI 裡，直接用 URL 安裝或是在擴充工具清單找到後安裝，都沒問題，SuperMerger 的功能其實不少，但是，有不少東西阿舍是有看沒有懂的，感覺上，對於熟悉模型運作方式的朋友們來說，這會是一個很有用且好用的工具。 

以下是 SuperMerger 在模型合併上可以使用的主要功能。

  • CheckPoint 模型合併 CheckPoint 模型
  • CheckPoint 模型合併 LoRA 模型
  • LoRA 模型合併 LoRA 模型

想找 SuperMerge 教學？下面是阿舍參考的教學影片:
* 這裡 (簡中)
* 這裡 (韓文字幕，請開啟繁中自動翻譯字幕).
* SuperMerger Github (選日本版本，再用翻譯成繁中看)

合併要注意的事項

這個 SuperMerger 擴充工具在合併 LoRA 模型時，並沒有數量的限制，只要所有要合併的 LoRA 模型的比例加總為 1 即可，但是，它合併時，不會檢查是否刐好等於 1， 阿舍一開始沒注意到，全部都給 1，結果 ... 合併後的 LoRA 模型就畫不出東西了 ... 😱，還有，維度不同的 LoRA 模型也不能合併，要先做維度的調整，這個部份在上面的教學影片中，都有說明。

另外，合併完成的檔案名稱的部份，現在都會自動加上模型名稱及比例，所以，建議可以採用預設就好，不需先自己給定，等比例和組合都確認後，再自己改檔名就好，這樣會比較方便測試與比較。

效果如何 ?

如果 LoRA 模型的內容已經很相近時，阿舍覺得效果似乎就不太明顯，像阿舍是把台日韓三組 DollLikeness 的 LoRA 模型以 Taiwan:0.3 + Korean:0.35 + Japanese:0.35 的比例做合併，然後，發現，新 LoRA 模型和原來 KoreanDollLikeness V2 繪製的人物沒有太明顯的差異。

 <lora:koreandolllikenessV20_v20:1>


<lora:Taiwan-doll-likeness_0.3+Japanese-doll-likeness_0.35+koreandolllikenessV20_v20_0.35:1>

但是，阿舍再試著用 RussianDollLikeness V3 和神力女超人蓋兒的 LoRA 以 0.65:0.35 的比例進行合併時，就感覺的出來有差別了。 

 <lora:russianDollLikeness_v3:1>

<lora:russianDollLikeness_v3_0.65+galGadot_v1_0.35:1>

結論: LoRA 併 LoRA 再併入 Checkpoint

阿舍自己是還沒有再進一步往下測，不過，直接以 LoRA 模型來做合併應該會比用 Checkpoint 模型合併更容易產生出新的人物長相，所以，建議有空可以試試到 Civitai 找一些人物的 LoRA 模型來合併看看，應該會滿有趣的，而且，一旦合併出喜歡的 LoRA 模型後，還可以利用 Supermeger 的功能，把它合併到自己常用的模型中，這樣，使用起來就更方便了 ... 😊

推薦閱讀


有疑問？ 問題還是沒解決嗎? 歡迎下方留言提問和討論 😁

沒有留言 :

張貼留言

歡迎留言提問和討論 .... 😁

訂閱： 張貼留言 ( Atom )