关于训练LORA模型的问题

txsou1986

这几天一直学着训练LORA，但是出现了不少问题，也就是说至今还没有成功过，具体如下：
1.底图约30张，包括头部，身体，服饰，分别为三个文件夹组成一个数据集；

2.训练参数为默认，见图1
3.训练到5000步以下的时候，生成的人物基本不会失真，但是与原底图只有3分像，训练到6500步以上，整个服饰开始崩，接着脸部也开始崩了；


对比图如下：




请教大佬，如何调整参数图片才不会崩

若苗瞬

1）从个人经验看30张有点少，也不能确认覆盖各种角度。
2）为啥人物要训练服饰。
3）三个文件夹组成一个数据集，3个文件夹分别次数是多少呢？
4）8个epoch输出的模型对比啥样子。
5）网络大小我听说最大128。。。

反正我都是源图几十上百张，去背景，训练次数故意偏多，再对比选各个epoch输出，看哪个更好（无欠拟合，过拟合）。

奇奇怪怪1973

好的LORA一定要好的训练集，人物的大头，服饰，半身，全身，姿势等等你都要包含，分层训练，不行回炉继续微调，修改学习率，等参数，网上很多介绍，可以自己度。

womeichi

试试调整一下network_dim值 角色人物64/32
  alpha 32/1

linwin

训练的话，原图清晰度跟尺寸应该要保证的

006

我连训练都不会     有大神可以指导一下吗

lvltoken

慢慢学习中。。。。。。。