表情最逼真机器人靠AIGC再进化!接入Stable Diffusion能用笔画画
“如果你不喜欢我的画,你可能只是不懂艺术”
梦晨 发自 凹非寺
量子位 | 公众号 QbitAI
把Stable Diffusion接入机器人会怎样?
告诉它你想让它画什么,然后一笔一笔画出来。
![](/wp-content/uploads/replace/9f1f925caad578986e15ebe2b2009833.gif)
只见它一边与旁边的人类工程师谈笑风生,一边熟练地用马克笔在白板上画出一只简笔的猫。
![](/wp-content/uploads/replace/3fccea0f79f190862f487d4147956c33.gif)
最后还不忘签下自己的名字“Ameca”,然后抬起执笔的手,用眼神继续审视着刚刚完成的作品。
![](/wp-content/uploads/replace/7efaadf59f6a34834e2516dbd4068a5a.gif)
当Ameca询问人类对它的作品是否满意的时候,工程师老哥耿直地回答“这画的有点简略了”。
![](/wp-content/uploads/replace/51d30249e008a1205f895b71caaae492.png)
然后高能来了。
Ameca生气地呛了回去:
如果你不喜欢我的画,你可能只是不懂艺术。
![](/wp-content/uploads/replace/a16b99631006488bad0d5bec25a023ea.gif)
机器人Ameca,来自英国公司Engineered Arts,之前就以表情逼真到吓人出名过一次。
![](/wp-content/uploads/replace/5011e74ade30e1c653eca6f5028ccc3f.gif)
现在它get到用笔画画的新能力,又惊艳了一众网友。
每一笔画完后轻轻举起笔,就像一个真正的素描艺术家一样,这个小细节太酷了。
![](/wp-content/uploads/replace/43cab844310b89034463ed8bb6c8b01e.png)
机器人怎么用笔画画的?
Ameca具体是怎么学会画画的,它自己就能解释明白:
我使用开源的Stable Diffusion,对生成的图像做骨架化和向量化,然后再把转化出的轨迹转换成动作并执行。
![](/wp-content/uploads/replace/2c2e4c30629471147b79ee756db542d0.png)
就这样,Ameca的身体动作和面部表情由Engineered Arts自研技术驱动,语言能力来自GPT-3(没错,不是3.5),再加上Stable Diffusion,组成了一位机器人画家。
有网友表示,这样的能力在教育中很有用,对于学生来说,用机器人比盯着电脑屏幕看有意思多了。
![](/wp-content/uploads/replace/b475d4066bb62df29583499977e73f09.png)
Engineered Arts自研技术包括机器人操作系统Tritium和机器人生产平台Mesmer。
首先用36台摄像机无死角捕捉海量真人面部数据,包括骨骼结构,皮肤纹理和表情等。
![](/wp-content/uploads/replace/f22805000790ac03dc491d1c15d6a761.png)
对这些数据做3D建模,并3D打印出机器人的硅胶皮肤。
![](/wp-content/uploads/replace/094487304bf87250a2180e2d8d8da374.png)
Tritium操作系统连接了硬件、软件和云端,可以驱动机器人的每一个组件,除了面部,还会牵动头颈、肢体的不同“肌肉”。
![](/wp-content/uploads/replace/40beea9a9e8bed7913ba43c26b67170c.png)
最终实现更逼真的表情。
![](/wp-content/uploads/replace/1839311be8d434ab57d6678d259bdac0.gif)
再加上语言模型GPT-3和语音技术,Ameca已经初步具备了与人类互动的能力。
![](/wp-content/uploads/replace/c3af4cae3e197927aa253ce7c8949e9c.gif)
这次除了画画以外,Engineered Arts还公布了另一条人类与Ameca讨论音乐的视频,或许暗示这是下一个挑战方向。
Ameca说自己喜欢爵士古典和电子乐,人类给他出的难题“如果要把这三种风格融合在一起写一首歌,第一句歌词是什么。”
Ameca略加思索就给出了回答。
另外Ameca还在搞一场与网友互动的活动。
如果你有什么问题想问它,可以去原视频评论区留言,下一条视频可能就是Ameca回答你的问题了。
参考链接:
[1]https://www.youtube.com/watch?v=_1OA_9_wW70
[2]https://www.youtube.com/watch?v=L32BRcvnWRU
[3]https://www.engineeredarts.co.uk/mesmer-creation/
- 让AI视频进入「全民GC」时代,这家中国公司刚刚真的做到了2024-07-24
- 百川智能回应200亿元估值:为B轮投前估值,A轮总融资额达50亿元2024-07-25
- 刚刚,中国IMO奥数憾失第一,五连冠统治被美国队终结2024-07-21
- 给iPhone背面贴个AI录音机,生意老好了2024-07-21