新智元报道  

编辑：桃子 拉燕

【新智元导读】机器人皮肤、气动触觉手套，Meta让未来元宇宙有了更真实的触觉交互。同样，视觉交互也不能忽视。一项已提交的专利显示，Meta又要研发机械仿生眼了。

机器人皮肤、气动触觉手套... Meta让未来的元宇宙有了更真实的触觉交互。

 

若想看到元宇宙中高保真的虚拟世界，视觉交互也不能忽视。

 

这不，Meta要研发机械仿生眼了。

 



 

给人装的吗？不是...

 

Meta称未来要把它放在仿生人的身体里，看来这是打算要造MetaHumans了？

 

近日，这家公司申请到了一种机械仿生眼的专利，名为Two-axis rotatable mechanical eyeball。

 



 

据称，这项专利中的技术可以被用于构建Facebook的AR/VR应用程序，为了在元宇宙中更快地呈现3D图像和体验。

 

总之，这一专利可以称得上是Meta在元宇宙中的又一进展。

Meta下一步，元宇宙之眼？

一项2021年12月批准的「机械眼球100」（mechanical eyeball 100）文件称，这个金属球体是一个类似于人眼的机器眼，有两个相交于中心点的旋转轴。

 

从专利提交时间可以看，这项仿生眼专利是在2019年6月11日提交，2021年12月7日得到审批。

 



 

这项专利详细介绍了一种高性能和逼真机械仿生眼的设计。

 

该机械眼未来将用作电子动画设备的一部分，以便更精准地追踪人类眼球的运动。

 



 

专利中，关于这项仿生眼设计的描述似乎也相当复杂，部分设计意在模仿人类眼睛的巩膜、视网膜和角膜，以及瞳孔和虹膜。

 

Meta为什么要单独设计一个仿生眼呢？

 

难道是给《西部世界》拥有人工智能的仿生人使用吗？

 



 

Meta称，设计机械仿生眼是为了与机器人头部进行匹配，为了让眼睛显得更加真实。

 

这只仿生眼将配备传感器，以帮它「看见」真实的世界，并且可以通过机器学习进行训练和改进。

 

机器学习可能基于人类眼球运动数据，然后将这种能力映射到机械眼上。

 



 

专利中还提到了，眼球将被放在类似于人类皮肤的模具中。这一模具可能包括头部和身体。

 

有网友表示，「那么，他们是MetaHumans吗？」

 



 

但这项设计究竟用于何处，一位Meta发言人称，「该公司不对其专利的具体覆盖范围或申请专利的原因发表评论。一般来说，专利并不一定涵盖我们产品和服务中使用的技术。」

 

要知道，Meta这只仿生眼也可以提供更多的实际应用。

 



 

仿生眼可以被用作更精确地追踪人眼运动的工具，来观测它在屏幕上以及图像上停留的时间。

比如，广告中经常会用眼动追踪技术观察用户对广告的喜爱程度。



另外，眼动追踪技术也可以被用于构建Facebook的AR/VR应用程序。

 

就比如一直爆火的Oculus头显，如果未来有了这项技术的加持，简直如虎添翼。

 

 

正如知情人士所指出，这种技术可能会加速公司的增强现实和虚拟现实应用的发展，这些应用严重依赖于眼球追踪。

 

不管怎么说，这项机械仿生眼技术更加坚定了Meta进军元宇宙的决心。

 



一举打通元宇宙「视触听」

这已经不是Meta第一次考虑给机器人加入人类感官特征了。

 

早在去年11月，Meta与卡内基梅隆大学（CMU）合作开发了一款轻量级，触觉传感机器人「皮肤」，可以给机器人赋予触觉。

 



 

据称，机械仿生眼和人造皮肤的探索是Meta人工智能部门在2019年进行更广泛的机器人实验的一部分。

 

这款皮肤名叫ReSkin，厚度只有2-3mm，表面类似橡胶具有弹性。

 

 

仔细看图，可以发现其内部嵌入了磁性颗粒。当按压/触摸产生时，皮肤表面产生形变带动内部粒子的磁场变化。这些变化会被磁力计监测收集，并反馈给通过自监督学习训练过的AI模型。

 



 

扎克伯格表示，可以用于元宇宙中的虚拟对象，使我们与之交互时获得触觉感受。

 



 

Meta首席人工智能科学家 Yann LeCun认为机器人技术成为了研究人工智能的方式，他曾表示，机器人技术是扎克伯格抵制的一个领域。

 

LeCun曾表示，「这是人工智能研究人员试图到达的地方。感知、推理、计划和行动的形成一个不断循环的完整闭环，最后能够从环境中获得反馈。」

 



 

仿生眼主视觉，ReSkin电子皮肤主触觉，还有Meta最具代表性的Oculus头显融合了视觉和听觉效果。

 

可以看出，Meta在进军元宇宙这条路上已经打通了视觉、听觉、触觉这人类三大感官体验。

 

其实，在触觉方面，前段时间，Meta还揭秘了其秘密研发七年的项目「气动触觉手套」。

 

这种触觉手套可以通过气囊让你体验到抓取虚拟物体时的真实触感。对于Meta来说，这款手套和其他可穿戴技术，都将让我们通往在VR和AR中实现互动的未来。

 



 

但是，真正元宇宙中的体验不仅仅包括「视触听」这三种感官特征，还要能够闻到不同气味，尝到不同的味道。

 

目前来说，在Meta元宇宙技术体系中，没有提到的感觉便是气味和味道，这对攻克技术难题有了更高的要求。

 

不过，未来没有什么不可能。

谁说Meta元宇宙是PPT？

2021年11月，Facebook在Connect大会上改名Meta，计划投入千亿美元，要大举进军元宇宙。

 

Meta这一举动将所有人的视线转移到其创造的虚拟世界中。



 

其实，Meta在元宇宙的布局不仅仅是上面所提到的项目，还有关于Avatar的研发等。

 

元宇宙是一个具有沉浸式空间感的3D数字化世界。

 

在这个世界中，人们通过穿戴VR设备或是芯片植入的方式，创造出人类的化身 (Avatar) ，融入其中。

 



 

在元宇宙中不只有人，还有虚拟物品，更重要的是还有机器人。

 

除了人-人、人-物交互以外，人-机、机-机、机-物交互也十分重要。

 

与机器人相关的，叫做机器人元宇宙。机器人元宇宙是机器人理解物理世界的基础。上述提到的仿生眼、人造皮肤等技术，都是为了让机器人更加的类人、逼真。

 



 

Meta在提升人类在元宇宙中的体验也做了很多的尝试，有相当多的突破。

 

比如，Codec Avatar这个项目就是一个利用3D捕捉和AI技术，创造逼真人物头像的系统。这个项目从最初的高清头像开始，一步步发展到全身的虚拟化身。

 



 

在这个过程中，全身视频编解码器被研发出来，使得元宇宙中的人类avatars可以支持更复杂的眼部、面部、四肢、躯干等部位的运动。举例来说，项目团队通过EMG腕带进行XR输入，对人的手部动作的方式做了精准的测量。

 



 

人类化身都取得了很多突破，那么通过物理手段对现实世界中的物品在元宇宙中进行映射也不在话下。

 

比如，衣服在元宇宙中的真实模拟就十分逼真。不光完美复刻了衣服面料的弹性，如果抖动衣服，衣服表面的褶皱也栩栩如生。

 



 

Meta所有项目的研发都是为了让人能够在元宇宙中有更好的体验。这也更加印证了，小扎的进军元宇宙的宣言不是纸上谈兵。