什么?Midjourney也能本地化免费用了?

不能。
但是,我发现了一个可以让Stable Diffusion做出类似Midjourney的精致效果的方法。实验结果详见分割线后。

如上图所示,在上一篇专栏的最后,我刚刚吐槽了SD的不稳定性,以及对midjourney的羡慕,结果瞌睡来了就有人送枕头:今天在群里发现了个模型清单(https://rentry.org/sdmodels)。其中有一个模型很吸引我:midjourney-v4-diffusion。(https://huggingface.co/prompthero/midjourney-v4-diffusion)
模型描述说,这是Stable diffusion fine tunned on midjourney v4 images,by PromptHero。也就是这仍是一个SD模型,只是以midjouney-v4的图像为参照,对模型进行了调整(fine tune)。
作者说,模型的触发词是“mdjrny-v4 style”。意思好像是在使用sd模型时直接在prompt中添加该词即可起作用,但是经实测,这样好像不管用。而是需要直接改用mdjrny-v4的ckpt文件作为扩散模型。
下面是一些测试结果

测试结果

可以看出,图片确实更有midjourney的感觉,整体像是SD和Midjourney的折中,但已经多少出来了那种“精致”的感觉。可以说算是midjourney青春版吧。
文章所有图片除额外标注外均来自本人个人电脑运行,欢迎讨论,但未经允许转载请先Σ。