打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了
画面质感超棒!
西风 发自 凹非寺
量子位 | 公众号 QbitAI
破次元壁计划已启动!
就在最近,有网友分享了一个用Stable Diffusion打造二次元动画的工具,直接在网上爆火。
先快来看一波效果。
万物皆可妙化为二次元,耳机也可蜕变成小兔兔:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/cd62aece8671585b3194186469e56a1f.gif)
瞧!连易拉罐的拉环也化身成了超“卡哇伊”的模样:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/caaaab06f23bbf270be890b23e1aacfc.gif)
而且还能从无到有召唤出美少女:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/73e06869b25e172d90bc02e525d2bef2.gif)
漫画手!是不是很有力量感(已经中二起来了):
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/bb2992e2546325443f8a2ab1e8a8c542.gif)
这效果,有木有敲爱?
和小编一样激动的,还有8000+点赞、2000+转发的广大网友们:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/79fa218d5f0a199cc03f7bf8fca6cb8a.png)
有网友被生成的画面质感所震撼到:
如果使用毛绒玩具,也许可以重新制作《神奇宝贝》动漫了。
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/ef66b2fbb16aa0227f67e1ca2f8a8ca8.png)
还有网友认为:
Neuralink需要搭载这个动漫滤镜(anime filter),这样每个人都可以与他们的waifus(动漫、漫画、游戏等虚拟世界的女性角色)约会了。
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/3e7d3f0fb749cb91909459d8fa5136ae.png)
当然,要进行二次元的转化需要将影像从iPhone传到PC端,在PC端进行生成。
有时候,我们也可以考虑将现实世界变成一个异世界,而无需真的创造另一个虚拟世界。这样一来,现实世界也许就可以变得像游戏或虚拟世界。
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/ac34bb4e4fd51a391894ba506eca6681.png)
看到这里,你是不是迫不及待也想开启自己的打破次元壁计划了?
如何使用?
要想创作出网友所展示的这种效果,首先需要使用到Windows OS和Automatic1111stable-diffusion-webui。
并且确保在“webui-user.bat”中设置了“—xformers”和“—api”命令行参数:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/44945d36bffbf35ae1d3551b030ffdb8.png)
还要用到下面的框架、这位网友用的Redream工具等:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/2bbdb0f478b0de1da0a09e382132c36c.jpeg)
然后就是启动Automatic1111 stable-diffusion-webui。
这位网友还在github分享了Redream的使用方法:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/572783a4443e131fba32c5eeb1cd3e7c.png)
点击下面这个工具可以捕获你所需要的区域,然后点击左键锁定位置。:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/e441f8f747a3f3ae97230d1f07b9a9c3.png)
使用下面三个按钮可以对动画进行调整:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/7c9c1d67d29a10cfb3f4a2574a2381e5.png)
△从上到下,分别是启动/停止按钮、保存按钮(保存生成的每帧画面)、更改纵横比按钮
点击下面几个图标可以更改参数设置:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/541a2cc426c1a9cb4a8980798bc918e2.png)
△从上到下,依次可以设置:种子值、steps、去噪强度、CFG缩放
工具栏最下面一栏是保存预设,可以将当前的设置、参数或效果配置保存为预设文件。
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/6876227b4a1b31425c3d763a0f32cd1e.gif)
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/235eb796bd6ca8d5f1af6b0b1c55ce02.png)
△点击第一个按钮启用Fav mod,然后预设将开始闪烁,点一下就可以将当前prompt保存到所选的插槽号中。
点击下面这个按钮,可以看到最后捕获的图像:
![打破次元壁!Stable Diffusion将现实影像转成二次元动画,推特转赞10k+,网友:都可以重做《神奇宝贝》动漫了](/wp-content/uploads/replace/1aea903751e21da8956a8765560e2039.png)
传送门:
[1]https://github.com/Fictiverse/Redream(如果你有StableDiffusion webUI,可以用网友提供的这个工具来试试)
参考链接:
[1]https://twitter.com/Yokohara_h/status/1663566645581983748
- CPU、GPU的互连从1米飙至100米,英特尔:你相信光吗?2024-07-27
- Nature封面:AI训AI,越训越傻2024-07-27
- 打乱/跳过Transformer层会怎样?最新研究揭开其信息流动机制,一口气解答8大问题2024-07-26
- 谷歌AI拿下IMO银牌,仅差一分得金!第四题仅用时19秒2024-07-26