iT邦幫忙

2024 iThome 鐵人賽

DAY 10
0
生成式 AI

(A)ㄟ你啥時要換大頭貼ㄞ(I)系列 第 10

DAY10 : 使用LORA微調圖像

  • 分享至 

  • xImage
  •  

LoRA

LoRA(Low-Rank Adaptation)模型是一種強大的工具,用於優化和加速各種機器學習任務。LoRA模型的優勢在於它能夠靈活地適應不同的應用需求,並且允許使用多種LoRA模型進行協同運作。

這種多模型的使用方式可以帶來更高的準確性和更好的性能。然而,無論使用多少種LoRA模型,權重比的總和必須等於1。這是因為在模型融合的過程中,權重比代表了每個模型對最終結果的影響力。

如果權重比的總和超過1,將會導致過度擬合,反之則會導致欠擬合。因此,正確分配和調整各模型的權重比,是實現最佳性能的關鍵。這一原則在實踐中需要謹慎遵循,以確保模型融合的穩定性和效能。

首先要選擇model,並且一定不能選sd出來的model,根據官方文件說明他們本身不提供lora得使用功能,所以在這邊我使用chilloutmix_v10.ckpt得模型說明
https://ithelp.ithome.com.tw/upload/images/20240919/20161432tkswMQIDnU.png
再來就是點擊lora選項
https://ithelp.ithome.com.tw/upload/images/20240919/201614325zs8ykMLTg.png
之前的文章已經有說明了如何下載lora模型,如果忘記的話可以翻看看之前的文章。
https://ithelp.ithome.com.tw/upload/images/20240919/20161432O3h0X45LOj.png
最後依照你得prompt就可以生成你想要得圖片


上一篇
DAY9 : 如何去背景與換背景
下一篇
DAY11 : 如何訓練SD模型
系列文
(A)ㄟ你啥時要換大頭貼ㄞ(I)30
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言