前往
大廳

主題

[AI繪圖] 在Colab上使用LoRA模型

WuLing | 2023-01-31 23:45:27 | 巴幣 1014 | 人氣 5613

關於colab AI繪畫請參考：

http://www.jamesdambrosio.com/artwork.php?sn=5607797

關於LoRA的使用方法請參考：

https://www.ptt.cc/bbs/AI_Art/M.1673978488.A.2AB.html

一般來說只要用ptt的方法就行了

然而colab玩家的COMMANDLINE_ARGS一定要有--share

導致下載Extension會被擋

更改/content/stable-diffusion-webui/modules/ui_extensions.py

這樣就可以下載Extension了

順便曬一下最近剛學會LoRA訓練的成品

https://huggingface.co/WuLing/Genshin_Noelle_LoRA

#AI繪圖 #AI #NovelAI #Anything V3.0 #Colab #LoRA

留言

創作回應

還有 7 則留言

WuLing

之後再來寫寫看怎麼訓練LoRA
找教程的過程繞了好多彎路
直到看到這個影片
https://m.bilibili.com/video/BV1fs4y1x7p2

2023-02-01 00:47:34

WUP

請問一下我完全照著參數走為什麼訓練出來的連樣子都打不上邊啊完全是不同的人物連髮色髮型都不一樣@@

2023-02-07 23:26:51

WuLing

使用LoRA沒特徵的原因有很多，我慢慢分析。
1. 使用LoRA的時候忘記enable：如果沒動過參數，訓練集也沒問題的話，最有可能是這個，這就跟訓練無關了，打開enable就完事。
2. 資料集不夠純粹：我強調過訓練LoRA的圖片質比量重要，之前我訓練過原神菲謝爾的LoRA，由於20張圖其中有一張背景有一個小小的莫娜，導致訓練的模型被污染，出圖一半金髮一半黑髮。
3. LoRA模型太小：使用webui或LoRA github提供的colab訓練LoRA有這個問題，模型太小導致即使學到極致對SD模型的影響也很小。
4. 訓練Epochs不夠：也就是LoRA沒訓練完全。
綜合來說，你的情況聽起來比較像1，可以先試試看，不行的話檢查一下參數和資料集。

2023-02-08 08:41:39

WUP

請問一下訓練的示例圖很糊是素材的問題還是參數的問題

2023-02-09 20:52:02

WuLing

資訊量太少了
你是用哪種方式訓練LoRA?
有可能是epochs過大造成overfitting
可以取epochs較少的模型
或是使用LoRA的時候調低Weight

2023-02-09 21:29:30

WuLing

也有可能是SD model本身的問題
需要多跑幾個step產圖的品質比較好

2023-02-09 21:31:44

WUP

我是本地訓練的沒用Colab

2023-02-09 21:31:33

WuLing

總之上面幾種方法都可以試試看通常是參數的問題

2023-02-09 21:36:26

律以

ptt裡面指的sd內extension是甚麼??@@大大能開示一下嗎??完全不懂以為是從GIT裡面載程式碼到PY執行就可以了但開起來發現不是

2023-02-16 21:50:17

WuLing

我現在才發現ptt那篇步驟沒有很完整可以參考這篇的後半：
http://www.jamesdambrosio.com/artwork.php?sn=5652683
也可以用我今天寫好的Colab方法：
http://www.jamesdambrosio.com/artwork.php?sn=5661689

2023-02-16 21:57:50

律以

好的非常感謝大大開示

2023-02-16 21:59:08

WuLing

[e19]

2023-02-16 21:59:53