欢迎光临散文网 会员登陆 & 注册

AI星瞳(绘画及翻唱)模型分享及制作经验分享

2023-07-04 19:23 作者:白金独角兽  | 我要投稿

AI翻唱

1.模型

基于So-VITS-SVC 4.0项目(项目仓库:https://github.com/svc-develop-team/so-vits-svc)。

挑选了星瞳近一年的唱歌音声作为声源素材进行模型训练,最终留下了三个模型。

链接:https://pan.baidu.com/s/121BwSxmpS-xAEN0dhA-SFA?pwd=d9lh 

提取码:d9lh 

我自己最常用的是99200这个。

2.人声分离

需要用到软件UVR5(Ultimate Vocal Remover)。

下面是我最常用也是我个人觉得比较不错的提取设置。

如果原曲人声干净且没有和声一般用一次这个就行了
如果上面提取出的人声带杂音或者有和声就再用这个设置提取一次


AI绘画

1.星瞳Lora模型

链接:https://pan.baidu.com/s/1qzVJ093APxqN1Kz6RrkAUQ?pwd=x3fn 

提取码:x3fn 


这几个lora的触发词都是:1girl, blue eyes, short hair,white hair

带2d的lora主要素材是2d素材,带2.5d的主要是用的3d素材基于不同的大模型制作,5.27是用的赛博星天使素材

我自己最常用的三个lora是:xingtong2d.safetensors, xingtong2.5d-000008.safetensors,

xingtong2.5d(realisticVisionV20)-000008.safetensors

xingtong2d.safetensors建议权重在0.55-0.8,可以不开启分层控制,如果出现衣服杂乱的清空,可以开启分层控制,推荐1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1(举个例子:<lora:xingtong2d:0.55:1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1>)

 xingtong2.5d-000008.safetensors:建议权重在0.6-0.9,强烈建议开启分层控制,推荐1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1(举个例子:<lora:xingtong2.5d:0.8:1,0,0,0,0,0,0,0.5,1,1,1,1,0,0,0,1,1>)

xingtong2.5d(realisticVisionV20)-000008.safetensors:同上


2.参数设置

我一般出图都是按照pc壁纸来做的,所以直出分辨率都是1920*1080,如果是出竖向图可以将宽度高度改成960*600或者900*500。就我的经验来说竖向图的出好图率是要远高于出横向图的,出横向图提示词尽量对画面背景要有详细的描述,否则整个画面就会出现很多无效内容。

如果是想出等身抱枕图,宽高比最好是1:3,开启高清修复2倍倍率的前提下宽高可以设置成250*750


3.大模型推荐

3.1 GhostMix

算的上是我最喜欢的模型,也是我用过最好的2.5d模型,兼容性很好,良图率高,同时画面质量也高。

3.2 Primemix_colorAnim, CetusMix , MeinaMix, tmndMix

几个不错的2d模型,兼容型高

3.3 darkSushiMix

风格独特,很适合做暗系图

3.4 其他



4.其他Lora推荐

4.1 hanfu 汉服(c站地址:https://civitai.com/models/15365/hanfu)

建议权重0.4-0.6

4.2 Eye (c站地址:https://civitai.com/models/5529?modelVersionId=6433)

增加眼镜细节的lora,推荐权重0.6-0.8

4.3 Add More Details(c站地址:https://civitai.com/models/82098?modelVersionId=87153)

增加整个画面细节的lora,也可以设置成负数减少细节,具体权重可以自己多试试,我一般用的话就会调成1


4.4 塔罗牌 (c站地址:https://civitai.com/models/11177/anime-tarot-card-art-style-lora)

推荐权重0.8-1

4.5 Blue Archive Emoji style(c站地址:https://civitai.com/models/43256/blue-archive-emoji-style)

一个表情包lora,推荐权重0.7左右

4.6 花想容/中国风(c站地址:https://civitai.com/models/89348/chinese-style-lora)

很喜欢的一个中国风lora,推荐权重0.8

4.7 幻想世界(c站地址:https://civitai.com/models/81928/fansty-world-lora)

推荐权重1


5.超分辨率

直出4k图或者是8k图应该是不可能的,所以都需要用到超分辨率,方法有很多。我最近常用的是 Tiled diffusion和分块VAE ,原理简单来说就是把图分成很多小块,然后逐一进行高清化。贴一下大概的参数设置,重绘幅度:0.2-0.4

6.其他

1.呆毛的提示词是:ahoge

2.我自己的出图流程大致是先有一个大概的想法,然后选定好大模型,定好基本参数,然后写好提示词,选好lora,然后先试着出图,一边出图一边调整提示词和lora,调整好了之后就可以调整生成批次,一次出多张图,然后进行初筛,将还不错的图进行保存,出到一定量的图之后就可以进行复筛,确定好复筛后的图如果有些细小的问题就可以拿去ps里面进行初次修改,修改之后再进行超分辨率,有问题的拿去ps里进行最后一次修改,最终出好一张成图。

3.不同模型因为原始素材不同,所以人物特征就会有不同的情况,可以根据提示词进行调整

4.一些能提高画面质量的起手式是有必要的,例如:masterpiece, top quality, best quality, official art, beautiful and aesthetic, extreme detailed,highest detailed

5.只要不是出小分辨率的图,文生图的高清修复建议一直开启


 



AI星瞳(绘画及翻唱)模型分享及制作经验分享的评论 (共 条)

分享到微博请遵守国家法律