stable diffusion图生图漫画转真人高级进阶--改进的流程
之前发布的【简单的用stable diffusion把漫画变成真人(干货)】
【stable diffusion图生图漫画转真人高级进阶----局部重绘及细节调之一】
【stable diffusion图生图漫画转真人高级进阶----局部重绘及细节调整之二】
有同学看过教程之后作图的时候发现原图如果是多人,头部以及手部占画面比例过小的情况下需要重绘的次数就会暴涨,而且后期tile很难把控细节,成品画面高清化后再放大图片观察重绘的部分会有撕裂感。关于这些问题,经过反复尝试后这次再出一期教学。
关于AI绘画我也是在学习中,有不足的地方也请多多包涵,鞠躬。
好吧现在我们仍然从一张基础的原稿开始,把原稿放入反推得到提示词,发送到图生图中,调整tag,添加controlnet插件的线稿模型,然后调整相关参数跑一张图看看效果
详细过程参考:【简单的用stable diffusion把漫画变成真人(干货)】

然后跑出来的图是这个样子:

到了这一步,按照【stable diffusion图生图漫画转真人高级进阶----局部重绘及细节调之一】介绍的流程,我们该进入局部绘制了,这里我们用另一种办法,先放大图像增加巨量细节,然后再局部绘制。
把图像发送到【图生图】然后关闭线稿,启用tile,参考【stable diffusion图生图漫画转真人高级进阶----局部重绘及细节调之一】末尾部分,以及【stable diffusion图生图漫画转真人高级进阶----局部重绘及细节调整之二】的设置
把提示词权重设置为:15
重绘幅度设置为:0.3
强制面部修复打开(这里跟之前的教学是不同的,之前是关闭的)
好了打开sd脚本放大功能,参考【stable diffusion图生图漫画转真人高级进阶----局部重绘及细节调整之二】的设置
放大4倍,放大算法:R-ESRGAN 4x+(细节上更接近高精度手绘) 或 4x-UltraSharp(细节上4x-UltraSharp更接近照片)都可以
然后得到一副人物脸部修复,以及添加了大量细节的高清大图:

这时得到的图已经非常接近完成品了,但是还需要修饰,直接把图发送到【局部绘制】,注意这时候你发送的是大图片,在局部绘制中,默认分辨率就是你发送到局部绘制的全图分辨率这种级别的分辨率局部绘制是不能直接用的,4090也扛不住。

在调整好局部绘制蒙版之后,把分辨率调整为512x512即可,这力你设置大了效果并不好因为大模型本身就是512x512训练的,这个分辨率是局部绘制的最优解
接下来关闭tile模型,关闭sd脚本放大(一定要记得关闭不然时间暴涨),tile模型,和sd脚本在后面的创作过程中已经不需要了。
重新打开controlnet的线稿模式,进行局部重绘,参考【stable diffusion图生图漫画转真人高级进阶----局部重绘及细节调之一】
提示词权重:7
重绘强度:0.75
线稿权重:0.76
仅蒙版绘制参考半径(像素):64(原来是32,这个参数在低分辨率时候不用改,但是在原图是高清大图的时候就必须改大,不然模版边缘会产生及其明显的撕裂感)

最后看结果:

是不是很惊艳?对了,之前的教学我一直没提lora的使用,因为低分辨率下用lora效果也不见得好,但是这是高清大图的局部重绘就随便用吧,。。。哈。。。哈。。。哈。。。