关于训练LORA模型的问题
这几天一直学着训练LORA,但是出现了不少问题,也就是说至今还没有成功过,具体如下:
1.底图约30张,包括头部,身体,服饰,分别为三个文件夹组成一个数据集;
2.训练参数为默认,见图1
3.训练到5000步以下的时候,生成的人物基本不会失真,但是与原底图只有3分像,训练到6500步以上,整个服饰开始崩,接着脸部也开始崩了;
对比图如下:
请教大佬,如何调整参数图片才不会崩
1)从个人经验看30张有点少,也不能确认覆盖各种角度。
2)为啥人物要训练服饰。
3)三个文件夹组成一个数据集,3个文件夹分别次数是多少呢?
4)8个epoch输出的模型对比啥样子。
5)网络大小我听说最大128。。。
反正我都是源图几十上百张,去背景,训练次数故意偏多,再对比选各个epoch输出,看哪个更好(无欠拟合,过拟合)。 好的LORA一定要好的训练集,人物的大头,服饰,半身,全身,姿势等等你都要包含,分层训练,不行回炉继续微调,修改学习率,等参数,网上很多介绍,可以自己度。 试试调整一下network_dim值 角色人物64/32
alpha 32/1 训练的话,原图清晰度跟尺寸应该要保证的 我连训练都不会 {:6:} 有大神可以指导一下吗 慢慢学习中。。。。。。。
页:
[1]