Lora

资料

方法:

主流的两种LORA模型训练方式,分别是朱尼酱的赛博丹炉和秋叶大佬的训练脚本,训练效果应该是赛博丹炉更好,我个人更推荐朱尼酱的赛博丹炉
SDXL建议使用秋叶的训练器

底模:

sd_lora则是和以前一样,所以模型种类选择sdxl_lora,底模文件路径可以选择base这种祖宗级的模型,也可以选择一个你喜欢的SDXL模型作为底模(最好与你的训练数据风格相近),推荐第二种。

参考经验

二维人物LORA训练,大概10张手绘图,训练结果严重失真,loss值一直很低,请教原因
一是训练集少,且不是常规图片,二是必须找与你图片类型相近的底模,否则肯定大概率翻车,建议使用sd1.5炼制,sdxl就目前炼制效果很难和sd1.5比,而且sd1.5应该有与你图片相近的底模型
用1.5模型炼的loss收敛得很好,换了sdxl的loss死活下不去
使用50到一百张高质量图片,用赛博丹炉抠图和加强脸部训练裁剪到1024 1024,repeat20,然后我参数基本不动,在确定batch情况下,调节学习率,这次训练的很好,虽然达不到sd1.5的效果,估计只有0.8左右,但是我看了下网上现有的,超越他们是没啥问题,当然其实很多人模型都是不公开的
工具
训练参数
教程
训练数据格式
Loading...
目录
文章列表
王小扬博客
产品
Think
Git
软件开发
计算机网络
CI
DB
设计
缓存
Docker
Node
操作系统
Java
大前端
Nestjs
其他
PHP