画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

郭一璞 发自 凹非寺
量子位 报道 | 公众号 QbitAI

上帝画了一只猫,程序员把它变成了真猫,还抱起来吸了一口。

是的,现在pix2pix图像转换可以在3D模型上实现了。

推特博主高桥启治郎(Keijiro Takahashi)最近上传了一个3D猫猫,用pix2pix来给3D模型加上一层“猫皮”,而3D模型则用的是(打游戏用的)Unity。

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

△ 这个logo是不是经常在游戏启动页面上见到?

所以,这样的3D猫是怎么做出来的呢?

学会画画,你一定会有猫的

上帝说,要有猫。

于是,高桥拿出了Sketch Pad。

Sketch Pad是一个吸猫神器,想吸什么样的猫就有什么样的猫,想让猫摆成什么姿势就可以让猫摆成什么姿势。

前提是,你画得出来。

比如这样:

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

或者这样:

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

系统和模型准备

除了Sketch Pad,你还需要装好Unity 2018.1以及计算着色器功能,包含DX11、 Metal和Vulkan。

另外,因为作者没有准备模型,所以最好先下载一个训练好的edges2cats模型,最好先学会pix2pix-tensorflow训练模型。

猫是如何成精的?

罗马不是一天建成的,猫猫不是一天成精的。

高桥从本月初开始就一直在研究如何用Unity结合pix2pix来生成3D猫。

但猫的生成并非一帆风顺的,刚开始,是这样的混沌状态。

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

突然就有了出息,知道如何“做猫”。

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

外形有了,但精神状态似乎不太好,所以就让它学会了运动。

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

最后,才能修炼成真猫。

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

One More Thing

其实作者高桥启治郎一直沉迷用Unity生成各种奇怪的玩意,从场景、雕塑到卡通角色。

为什么他对Unity爱的这么深沉?

因为……Unity给他发工资。

高桥是一位游戏开发工程师,之前在索尼工作了十年,后来跳到了Unity,就专注创造各种3D作品。比如下面这个萌妹子Unity酱就是他参与创作的。

画猫成真!只要寥寥几笔,会动的3D猫咪就出现了

觉得妹子萌的话可以戳github围观开源代码:

https://github.com/keijiro/unitychan-crs

内附妹子唱歌跳舞的油管视频,有好心的up主搬运到了B站:

https://www.bilibili.com/video/av7622460/

传送门

github:

https://github.com/keijiro/Pix2Pix

高桥启治郎推特:

https://twitter.com/_kzr/status/1041611079082663937

就酱,吸猫愉快~

版权所有,未经授权不得以任何形式转载及使用,违者必究。