欢迎光临散文网 会员登陆 & 注册

【AI绘画懒羊羊_V1】SD1.5 Lora炼丹笔记

2023-10-01 23:39 作者:澄清万里  | 我要投稿

本文以专栏的形式对我的懒羊羊Lora训练过程做一个记录、整理。以后我的炼丹过程记录就以专栏的形式发布吧,视频就不做了,节省时间精力。

V0:

训练集:(53张图,分辨率960*512)

打标时设置触发词:Paddi


训练参数:

repeat=10, 底模:SD1.5, epoch=10, 其他参数乱调。


模型测试:

效果都不太好。

效果图


过程总结:

那个时候的我好认真啊!
这个进阶计划是什么[惊]?先鸽了,以后再说。。。


-----后来我看了几篇教程-----


V1:

训练集:(25张图,分辨率512*512)

打标时,删去了如furry, sheep ear, white hair等描述特征的词,增加了触发词:1boy, Paddi, sheep,增加了如looking at viewer, from behind等描述角度的词,检查、改正、补全了描述表情、动作的词。


训练参数:

repeat=7,其他如下:

loss曲线

模型测试:

以下为中期测试:

以下为最终测试:

NovelAI(好起来了)
Anything(感觉0.5的权重最好(bushi))
Anything(挺好挺好)
Counterfeit(感觉不如Anything)
Counterfeit(不如Anything)
AbyssOrange(这什么玩意儿)
AbyssOrange(这什么玩意儿)
SD1.5(有点意思)

最后选了第10个,权重0.9时最佳。

效果图:(已上传C站:civitai.com/user/yuyuchengqing)

以下为模型直出,未经修改:

以下图片为修图后的产物:

四肢没有修
假装有羊角


后续:

尝试了分层控制,想去除模型对背景的影响,但是没能实现理想的效果。

分层控制
分层前
分层后
将分层融进模型后

参考资料:

主流程:BV1Aa4y1M76n

打标:BV12k4y1e7EoBV1ZM411c7aj

分层控制:BV1Zh411A7ikBV1Wv4y157NHBV1th411F7CR

【AI绘画懒羊羊_V1】SD1.5 Lora炼丹笔记的评论 (共 条)

分享到微博请遵守国家法律