txsou1986 发表于 2023-6-9 10:29:37

关于训练LORA模型的问题


这几天一直学着训练LORA,但是出现了不少问题,也就是说至今还没有成功过,具体如下:
1.底图约30张,包括头部,身体,服饰,分别为三个文件夹组成一个数据集;

2.训练参数为默认,见图1
3.训练到5000步以下的时候,生成的人物基本不会失真,但是与原底图只有3分像,训练到6500步以上,整个服饰开始崩,接着脸部也开始崩了;


对比图如下:




请教大佬,如何调整参数图片才不会崩

若苗瞬 发表于 2023-6-9 11:07:23

1)从个人经验看30张有点少,也不能确认覆盖各种角度。
2)为啥人物要训练服饰。
3)三个文件夹组成一个数据集,3个文件夹分别次数是多少呢?
4)8个epoch输出的模型对比啥样子。
5)网络大小我听说最大128。。。

反正我都是源图几十上百张,去背景,训练次数故意偏多,再对比选各个epoch输出,看哪个更好(无欠拟合,过拟合)。

奇奇怪怪1973 发表于 2023-6-9 11:30:53

好的LORA一定要好的训练集,人物的大头,服饰,半身,全身,姿势等等你都要包含,分层训练,不行回炉继续微调,修改学习率,等参数,网上很多介绍,可以自己度。

womeichi 发表于 2023-6-25 19:56:24

试试调整一下network_dim值 角色人物64/32
alpha 32/1

linwin 发表于 2023-6-25 23:20:43

训练的话,原图清晰度跟尺寸应该要保证的

006 发表于 2023-7-2 15:47:15

我连训练都不会 {:6:}    有大神可以指导一下吗

lvltoken 发表于 2023-8-16 12:52:38

慢慢学习中。。。。。。。
页: [1]
查看完整版本: 关于训练LORA模型的问题