详细聊聊AI绘画

2023-01-30 09:51 作者:哈尔ACG 0人读过 | 我要投稿

首先，在2022年中最火的事情之一绝对有AI绘画一票。所以最近刚好有空我也研究了一下AI绘画，发现水还挺深，而且相当的有趣。它让每一个人都可以成为艺术家。现来和大家分享下我所了解的东西。

其实AI绘画并不是今年才有的，其本质是计算机视觉领域的研究所延伸出来的技术。计算机视觉的研究早已铺垫了6,7年以上，只不过刚好在今年爆发井喷出来了而已。AI绘画是比较拟人化的说法，其接近事物本质的说法应该叫“图像生成程序”。“输入”为你所给出的人类自然语言（英语或中文等），“输出”为对应的图像。

背后的程序是神经网络模型，任何再好看再神奇的画作在计算机来看，本质就是三个超大型数字矩阵。红，绿，蓝三个通道各一个（这里只说RGB模式）。背后AI模型进行的运算实际上就是这些矩阵之间的运算，模型计算主要用到线性代数（也会用高数和概率论）。这里就不展开了。。

这里列几个我试过的主流的AI绘画工具：

midjourney：https://midjourney.com/home/?callbackUrl=%2Fapp%2F
Disco Diffusion（不推荐）：https://colab.research.google.com/github/alembics/disco-diffusion/blob/main/Disco_Diffusion.ipynb
Novel AI：https://novelai.net/

https://www.bilibili.com/video/BV17d4y1C73R/?spm_id_from=333.999.0.0

https://www.bilibili.com/video/BV1EV4y1L7dX/?spm_id_from=333.999.0.0
Dall-E2：https://labs.openai.com/
Stable Diffusion：https://beta.dreamstudio.ai/dream
百度文心一格（国内研发）：https://yige.baidu.com/

（PS：这里好多需要科学上网嗷，这点UP帮不了你）

上面midjourney是搭载在Discord平台上面的，有社区环境，所以大家一起讨论啊，生态啊特别好。风格多样。

Disco Diffusion是运行在谷歌colab上的AI模型，

Novel AI专注于二次元领域，二次元的生成效果挺好的。你去官网上付费使用也可以，本地部署也可以。

Dall-E2是顶级AI公司openAI研发的（但我尝试下来效果好像挺一般的。。。），Dall-E2在写实风领域比较强，在二次元领域效果还差很多。但这模型在精确修改方面很强。

Stable Diffusion是业界超级慈善家Stability AI公司的AI模型，重点：此模型已经完全开源！！！！代码在github上，这是迄今为止唯一公开开源的AI绘画模型。效果也非常好。几乎所有你看到的国内乱冒出来小AI绘画软件，例如某open，muse某，大某家domo等等都是拿着stable diffusion的开源内核套了个皮就出来赚钱。。

文心一格我试了两张图，一言难尽好吧一言难尽。

一，下面看看我在Dall-E2上面的尝试

1.img2img模式，女，二次元风格，无提示词（上面为原图，下面为生成的4种变体）

可以看到效果不太行，画风都变了，脸也有错误。

2.img2img模式，男，二次元风格，无提示词

这个额。。看到生成的第四张的表情我是没绷住的。。总体效果中等偏下吧，五官方面不太行，还有很大提升空间

这里说一个细节，这里我给的两张二次元图都是偏平涂风的，光影过渡并不细腻，但是你仔细看dall-e2画的变图，它把我两张图的光影都变的细腻多了。变的往写实风和厚涂风靠了。

3.img2img模式，女，写实风格，无提示词

额，这个就是恐怖片了。。可见在写实全身像方面不太行，其实身体动作，四肢衣服大体上还是很可以的，就是脸和手指向来是AI的弱项。

4.img2img模式，男，写实风格，无提示词

这几张是真的牛逼，可以看到虽然生成的头像丑是丑了点熬，而且并不像原图，但是你看它五官是如此的自然协调，仿佛跟真人照片一样，要知道这四张是程序生成的像素排列，并不是照片，世界上应该不存在五官和这四个人像完全一样的真人！

总结一下DALL-E2，个人拙见感觉其在写实风格（即光影过渡细腻）的领域比较强，其在近距离写实人脸生成方面很强。至于二次元风格还差的远呢。

二，看看我在Novel AI上面的尝试

Novel AI在二次元领域之外的画风都不行，基本上只有二次元画风。

1.img2img模式，鸡你太美，二次元风格，有提示词限定

可能篮球把脖子打歪了

2.img2img模式，男，二次元风格，有提示词限定

3.img2img模式，女，二次元风格，有提示词限定

这张图效果基本完美，很好的二次元化了真人照片。姿势正确，解剖结构正确，五官基本正确，发型也OK。所以。。你的头像可以自己DIY了。

4.Tex2img模式，女，二次元风格。

这张我忘了文本是啥了，反正记得有beautiful detailed eyes,beautiful detailed face.我特别强调了眼睛和脸。

5.Tex2img模式，男，二次元风格。

这张男特工碉堡了，我试了很久才试出来，用的是本地部署的novel AI，左上角AI模型用的是final-prune.ckpt【925997e9】，图像种子4115438947

正向提示词：masterpiece, best quality,(impasto),(ray tracing),one handsome and young special agent, male,Side close-up,(beautiful detailed eyes),((beautiful detailed face)),short hair, Pale yellow hair,(Black cap), ultra detailed hair, detailed dark blue short sleeves inside,((detailed black jacket outside)),White casual pants,Lean against the wall,(Sit on the ground),The left hand uses a laptop,Right hand against chin,The coat is open

反向提示词：lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry,bad feet

多试试你也可以！！