元宇宙TM2022-01-26 14:41:54
机器人皮肤、气动触觉手套... Meta让未来的元宇宙有了更真实的触觉交互。
若想看到元宇宙中高保真的虚拟世界,视觉交互也不能忽视。
这不,Meta要研发机械仿生眼了。
给人装的吗?不是...
Meta称未来要把它放在仿生人的身体里,看来这是打算要造MetaHumans了?
近日,这家公司申请到了一种机械仿生眼的专利,名为Two-axis rotatable mechanical eyeball。
据称,这项专利中的技术可以被用于构建Facebook的AR/VR应用程序,为了在元宇宙中更快地呈现3D图像和体验。
总之,这一专利可以称得上是Meta在元宇宙中的又一进展。
Meta下一步,元宇宙之眼?
一项2021年12月批准的「机械眼球100」(mechanical eyeball 100)文件称,这个金属球体是一个类似于人眼的机器眼,有两个相交于中心点的旋转轴。
从专利提交时间可以看,这项仿生眼专利是在2019年6月11日提交,2021年12月7日得到审批。
这项专利详细介绍了一种高性能和逼真机械仿生眼的设计。
该机械眼未来将用作电子动画设备的一部分,以便更精准地追踪人类眼球的运动。
专利中,关于这项仿生眼设计的描述似乎也相当复杂,部分设计意在模仿人类眼睛的巩膜、视网膜和角膜,以及瞳孔和虹膜。
Meta为什么要单独设计一个仿生眼呢?
难道是给《西部世界》拥有人工智能的仿生人使用吗?
Meta称,设计机械仿生眼是为了与机器人头部进行匹配,为了让眼睛显得更加真实。
这只仿生眼将配备传感器,以帮它「看见」真实的世界,并且可以通过机器学习进行训练和改进。
机器学习可能基于人类眼球运动数据,然后将这种能力映射到机械眼上。
专利中还提到了,眼球将被放在类似于人类皮肤的模具中。这一模具可能包括头部和身体。
有网友表示,「那么,他们是MetaHumans吗?」
但这项设计究竟用于何处,一位Meta发言人称,「该公司不对其专利的具体覆盖范围或申请专利的原因发表评论。一般来说,专利并不一定涵盖我们产品和服务中使用的技术。」
要知道,Meta这只仿生眼也可以提供更多的实际应用。
仿生眼可以被用作更精确地追踪人眼运动的工具,来观测它在屏幕上以及图像上停留的时间。
比如,广告中经常会用眼动追踪技术观察用户对广告的喜爱程度。
另外,眼动追踪技术也可以被用于构建Facebook的AR/VR应用程序。
就比如一直爆火的Oculus头显,如果未来有了这项技术的加持,简直如虎添翼。
正如知情人士所指出,这种技术可能会加速公司的增强现实和虚拟现实应用的发展,这些应用严重依赖于眼球追踪。
不管怎么说,这项机械仿生眼技术更加坚定了Meta进军元宇宙的决心。
一举打通元宇宙「视触听」
这已经不是Meta第一次考虑给机器人加入人类感官特征了。
早在去年11月,Meta与卡内基梅隆大学(CMU)合作开发了一款轻量级,触觉传感机器人「皮肤」,可以给机器人赋予触觉。
据称,机械仿生眼和人造皮肤的探索是Meta人工智能部门在2019年进行更广泛的机器人实验的一部分。
这款皮肤名叫ReSkin,厚度只有2-3mm,表面类似橡胶具有弹性。
仔细看图,可以发现其内部嵌入了磁性颗粒。当按压/触摸产生时,皮肤表面产生形变带动内部粒子的磁场变化。这些变化会被磁力计监测收集,并反馈给通过自监督学习训练过的AI模型。
扎克伯格表示,可以用于元宇宙中的虚拟对象,使我们与之交互时获得触觉感受。
Meta首席人工智能科学家 Yann LeCun认为机器人技术成为了研究人工智能的方式,他曾表示,机器人技术是扎克伯格抵制的一个领域。
LeCun曾表示,「这是人工智能研究人员试图到达的地方。感知、推理、计划和行动的形成一个不断循环的完整闭环,最后能够从环境中获得反馈。」
仿生眼主视觉,ReSkin电子皮肤主触觉,还有Meta最具代表性的Oculus头显融合了视觉和听觉效果。
可以看出,Meta在进军元宇宙这条路上已经打通了视觉、听觉、触觉这人类三大感官体验。
其实,在触觉方面,前段时间,Meta还揭秘了其秘密研发七年的项目「气动触觉手套」。
这种触觉手套可以通过气囊让你体验到抓取虚拟物体时的真实触感。对于Meta来说,这款手套和其他可穿戴技术,都将让我们通往在VR和AR中实现互动的未来。
但是,真正元宇宙中的体验不仅仅包括「视触听」这三种感官特征,还要能够闻到不同气味,尝到不同的味道。
目前来说,在Meta元宇宙技术体系中,没有提到的感觉便是气味和味道,这对攻克技术难题有了更高的要求。
不过,未来没有什么不可能。
谁说Meta元宇宙是PPT?
2021年11月,Facebook在Connect大会上改名Meta,计划投入千亿美元,要大举进军元宇宙。
Meta这一举动将所有人的视线转移到其创造的虚拟世界中。
其实,Meta在元宇宙的布局不仅仅是上面所提到的项目,还有关于Avatar的研发等。
元宇宙是一个具有沉浸式空间感的3D数字化世界。
在这个世界中,人们通过穿戴VR设备或是芯片植入的方式,创造出人类的化身 (Avatar) ,融入其中。
在元宇宙中不只有人,还有虚拟物品,更重要的是还有机器人。
除了人-人、人-物交互以外,人-机、机-机、机-物交互也十分重要。
与机器人相关的,叫做机器人元宇宙。机器人元宇宙是机器人理解物理世界的基础。上述提到的仿生眼、人造皮肤等技术,都是为了让机器人更加的类人、逼真。
Meta在提升人类在元宇宙中的体验也做了很多的尝试,有相当多的突破。
比如,Codec Avatar这个项目就是一个利用3D捕捉和AI技术,创造逼真人物头像的系统。这个项目从最初的高清头像开始,一步步发展到全身的虚拟化身。
在这个过程中,全身视频编解码器被研发出来,使得元宇宙中的人类avatars可以支持更复杂的眼部、面部、四肢、躯干等部位的运动。举例来说,项目团队通过EMG腕带进行XR输入,对人的手部动作的方式做了精准的测量。
人类化身都取得了很多突破,那么通过物理手段对现实世界中的物品在元宇宙中进行映射也不在话下。
比如,衣服在元宇宙中的真实模拟就十分逼真。不光完美复刻了衣服面料的弹性,如果抖动衣服,衣服表面的褶皱也栩栩如生。
Meta所有项目的研发都是为了让人能够在元宇宙中有更好的体验。这也更加印证了,小扎的进军元宇宙的宣言不是纸上谈兵。
Meta拓展元宇宙的下一步,你期待吗?
参考资料:
https://www.businessinsider.com/facebook-patents-animatronic-eyeball-robot-head-resembling-human-skin-meta-2022-1
https://patft.uspto.gov/netacgi/nph-Parser?Sect1=PTO2&Sect2=HITOFF&p=3&u=%2Fnetahtml%2FPTO%2Fsearch-bool.html&r=119&f=G&l=50&co1=AND&d=PTXT&s1=facebook.ASNM.&OS=AN/facebook&RS=AN/facebook
文章来源于新智元
以太坊Layer 2必知必会2023-04-26 15:03:27
浅析NFT未来:仅少数项目上涨 出圈项目会成赢家2023-04-26 14:15:26
E-CNY时代来临:当你的工资成为数字人民币2023-04-26 12:43:48
浅谈为什么MEV搜索者矿池并不可行?2023-04-26 12:08:40
"庄家"互撕 曝出加密巨头拉的那些"帮派"2023-04-26 11:59:08
怎样到达Web3世界:使用Web3技术的公司及集成到业务的步骤2023-04-26 11:53:15
稳定币项目 HAI、Starknet 2023 路线图2023-04-26 11:46:35
ChatGPT类产品安全隐患解决?英伟达发布开源工具包2023-04-26 11:26:24
蚂蚁集团发布HOU、AntChainBridge、Web3开放联盟链等多个Web3产品2023-04-26 11:24:46
ChatGPT背后的算力博弈 中国企业亟待打破美国桎梏2023-04-26 10:59:28
简析DWF Labs:出手频繁 颇具争议的加密做市商2023-04-26 10:48:45
NFT 交易平台生存现状研究:后版税战争时代下的龙头之争2023-04-26 09:20:51
以太坊提款功能开启后的带宽使用情况2023-04-26 08:30:24
上海升级提款效应:数据揭示 LSD 项目们的表现2023-04-26 07:28:37
3分钟读懂基于LayerZero的多链抗MEV DEX聚合器Cashmere2023-04-25 20:05:34
对话去中心化流动性质押协议Rocket Pool:如何促进以太坊Staking民主化?2023-04-25 19:02:21
Bankless:欧美都想监管稳定币 他们怎么做?2023-04-25 17:43:44
Coinbase起诉SEC全文:请在合理时间内回应加密规则请愿书2023-04-25 16:43:34
慢雾:Web3 假钱包第三方源调查分析2023-04-25 15:43:36
Binance Sensei介绍:您的Web3 AI导师2023-04-25 13:20:55