Lora
资料
方法:
主流的两种LORA模型训练方式,分别是朱尼酱的赛博丹炉和秋叶大佬的训练脚本,训练效果应该是赛博丹炉更好,我个人更推荐朱尼酱的赛博丹炉
SDXL建议使用秋叶的训练器
底模:
sd_lora则是和以前一样,所以模型种类选择sdxl_lora,底模文件路径可以选择base这种祖宗级的模型,也可以选择一个你喜欢的SDXL模型作为底模(最好与你的训练数据风格相近),推荐第二种。
参考经验
二维人物LORA训练,大概10张手绘图,训练结果严重失真,loss值一直很低,请教原因
一是训练集少,且不是常规图片,二是必须找与你图片类型相近的底模,否则肯定大概率翻车,建议使用sd1.5炼制,sdxl就目前炼制效果很难和sd1.5比,而且sd1.5应该有与你图片相近的底模型
用1.5模型炼的loss收敛得很好,换了sdxl的loss死活下不去
使用50到一百张高质量图片,用赛博丹炉抠图和加强脸部训练裁剪到1024 1024,repeat20,然后我参数基本不动,在确定batch情况下,调节学习率,这次训练的很好,虽然达不到sd1.5的效果,估计只有0.8左右,但是我看了下网上现有的,超越他们是没啥问题,当然其实很多人模型都是不公开的
工具训练参数教程训练数据格式Loading...