AI星瞳(绘画及翻唱)模型分享及制作经验分享

AI翻唱
1.模型
基于So-VITS-SVC 4.0项目(项目仓库:https://github.com/svc-develop-team/so-vits-svc)。
挑选了星瞳近一年的唱歌音声作为声源素材进行模型训练,最终留下了三个模型。

链接:https://pan.baidu.com/s/121BwSxmpS-xAEN0dhA-SFA?pwd=d9lh
提取码:d9lh
我自己最常用的是99200这个。
2.人声分离
需要用到软件UVR5(Ultimate Vocal Remover)。
下面是我最常用也是我个人觉得比较不错的提取设置。


AI绘画
1.星瞳Lora模型

链接:https://pan.baidu.com/s/1qzVJ093APxqN1Kz6RrkAUQ?pwd=x3fn
提取码:x3fn
这几个lora的触发词都是:1girl, blue eyes, short hair,white hair
带2d的lora主要素材是2d素材,带2.5d的主要是用的3d素材基于不同的大模型制作,5.27是用的赛博星天使素材
我自己最常用的三个lora是:xingtong2d.safetensors, xingtong2.5d-000008.safetensors,
xingtong2.5d(realisticVisionV20)-000008.safetensors
xingtong2d.safetensors:建议权重在0.55-0.8,可以不开启分层控制,如果出现衣服杂乱的清空,可以开启分层控制,推荐1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1(举个例子:<lora:xingtong2d:0.55:1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1>)
xingtong2.5d-000008.safetensors:建议权重在0.6-0.9,强烈建议开启分层控制,推荐1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1(举个例子:<lora:xingtong2.5d:0.8:1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1>)
xingtong2.5d(realisticVisionV20)-000008.safetensors:同上
2.参数设置

我一般出图都是按照pc壁纸来做的,所以直出分辨率都是1920*1080,如果是出竖向图可以将宽度高度改成960*600或者900*500。就我的经验来说竖向图的出好图率是要远高于出横向图的,出横向图提示词尽量对画面背景要有详细的描述,否则整个画面就会出现很多无效内容。
如果是想出等身抱枕图,宽高比最好是1:3,开启高清修复2倍倍率的前提下宽高可以设置成250*750

3.大模型推荐
3.1 GhostMix
算的上是我最喜欢的模型,也是我用过最好的2.5d模型,兼容性很好,良图率高,同时画面质量也高。


3.2 Primemix_colorAnim, CetusMix , MeinaMix, tmndMix
几个不错的2d模型,兼容型高

3.3 darkSushiMix
风格独特,很适合做暗系图

3.4 其他

4.其他Lora推荐
4.1 hanfu 汉服(c站地址:https://civitai.com/models/15365/hanfu)
建议权重0.4-0.6


4.2 Eye (c站地址:https://civitai.com/models/5529?modelVersionId=6433)
增加眼镜细节的lora,推荐权重0.6-0.8

4.3 Add More Details(c站地址:https://civitai.com/models/82098?modelVersionId=87153)
增加整个画面细节的lora,也可以设置成负数减少细节,具体权重可以自己多试试,我一般用的话就会调成1
4.4 塔罗牌 (c站地址:https://civitai.com/models/11177/anime-tarot-card-art-style-lora)
推荐权重0.8-1
4.5 Blue Archive Emoji style(c站地址:https://civitai.com/models/43256/blue-archive-emoji-style)
一个表情包lora,推荐权重0.7左右
4.6 花想容/中国风(c站地址:https://civitai.com/models/89348/chinese-style-lora)
很喜欢的一个中国风lora,推荐权重0.8

4.7 幻想世界(c站地址:https://civitai.com/models/81928/fansty-world-lora)
推荐权重1

5.超分辨率
直出4k图或者是8k图应该是不可能的,所以都需要用到超分辨率,方法有很多。我最近常用的是 Tiled diffusion和分块VAE ,原理简单来说就是把图分成很多小块,然后逐一进行高清化。贴一下大概的参数设置,重绘幅度:0.2-0.4

6.其他
1.呆毛的提示词是:ahoge
2.我自己的出图流程大致是先有一个大概的想法,然后选定好大模型,定好基本参数,然后写好提示词,选好lora,然后先试着出图,一边出图一边调整提示词和lora,调整好了之后就可以调整生成批次,一次出多张图,然后进行初筛,将还不错的图进行保存,出到一定量的图之后就可以进行复筛,确定好复筛后的图如果有些细小的问题就可以拿去ps里面进行初次修改,修改之后再进行超分辨率,有问题的拿去ps里进行最后一次修改,最终出好一张成图。
3.不同模型因为原始素材不同,所以人物特征就会有不同的情况,可以根据提示词进行调整
4.一些能提高画面质量的起手式是有必要的,例如:masterpiece, top quality, best quality, official art, beautiful and aesthetic, extreme detailed,highest detailed
5.只要不是出小分辨率的图,文生图的高清修复建议一直开启