Auto Byte

专注未来出行及智能汽车科技

微信扫一扫获取更多资讯

Science AI

关注人工智能与其他前沿技术、基础学科的交叉研究与融合发展

微信扫一扫获取更多资讯

扎克伯格在元宇宙里一小时的「真人对话」,惊艳了全世界

「一度让我忘记了眼前的不是真人。」

「这是我与扎克伯格在元宇宙中的对话。我跟 Mark 物理距离有上百英里,但我感觉是在和他面对面。因为我们的形象都由照片级精度的 3D 模型进行了建模,这技术太神奇了!我认为这就是人们未来在互联网上交流的方式,」Lex Fridman 说道。

图片

昨天,麻省理工学院(MIT)科学家 Lex Fridman 与 Meta 首席执行官马克・扎克伯格的一番隔空对话,成为了社交网络上的最大热门。他们在元宇宙里长达一个小时的采访视频播放量很快就冲上了千万。

现在,在元宇宙里,我们的形象可以做到和真人几乎一致,从全身细节到表情动作,自然得让人惊叹。

以至于在现实世界里,我们需要注意管理一下表情:

                             效果过于真实,让人有些绷不住了。

在 Lex Fridman 播客的「首次 Metaverse 对话」中,扎克伯格展示了 Meta 的新型 Codec 虚拟现实化身,其使用扫描技术构建用户面部的 3D 模型,再由机器学习实现驱动。在对话过程中,新型头显会检测用户的面部表情并将其实时映射到 3D 化身上形成动作。

扎克伯格说,在元宇宙对话时,「平台基本上是在通过网络发送你形象的编码版本,这种方式甚至比传输视频的带宽效率更高。」

当然在元宇宙里,你也可以对自己的形象进行一些定制,比如修改一下打光:

与 Meta 最初的虚拟化身不同,此前的技术被嘲笑为无腿、目光呆滞且令人难受,新一代的形象却显得极其真实,延迟也可以忽略不计,能让你在虚拟世界里感受到和别人在一起。

扎克伯格表示:「这触及了增强现实愿景的核心,即无论你身在世界何处,它都能提供一种临场感。」

这一切显然给进行渲染的硬件带来了更多的负载。在对话中,扎克伯格和 Fridman 都戴着最新版 Quest Pro,它具有内置的面部跟踪和眼球跟踪功能。需要注意的是,这并不是前几天发布的 Quest 3。Quest Pro 可能要等 2025 年才能正式发布。

图片                            Codec 形象需要对用户的面部进行扫描,以建立 3D 虚拟模型。

扎克伯格的采访是在元宇宙里,聊的内容也是元宇宙。在长达一小时的对话中,扎克伯格聊了元宇宙、增强现实、大模型等话题。

扎克伯格说,其实人们大部分的交流并不是通过语言完成的,而是通过表情等细节。Meta 正尝试着用更多卡通化身来捕捉表情,在传递逼真体验的同时,也有一定的真实感。

他建议用户可以编辑他们的虚拟分身,让他们展示更为夸张的情绪,并开玩笑说他可能会用化身技术来调整他著名的无表情的讲话方式。

图片

尽管虚拟化身令人印象深刻,但要广泛使用它们可能还需要一段时间。

需要注意的是,这次采访中显示的人物形象是使用最先进的、长达数小时的扫描(包括数百个摄像头)创建的,这是普通消费者现在还无法企及的。

不过扎克伯格在采访中表示,Meta 的计划是让人们能够使用智能手机进行非常快速的扫描。

「你只需拿起你的手机在自己面前晃动几分钟,说几句话,做出一堆表情...... 然后 AI 就可以制作出我们现在拥有的质量的东西,」扎克伯格告诉 Lex Fridman。

扎克伯格说,Meta 计划在未来几年里把这项技术整合到产品中。

与 Meta 的免费 VR 游戏和社交平台 Horizon Worlds 所使用的卡通头像相比,目前逼真的投影效果有了显著改善。

图片

                              扎克伯格的元宇宙自拍照。

去年,扎克伯格在虚拟埃菲尔铁塔外发布了一张他的元宇宙化身的自拍照,遭到了社交媒体上的一片嘲讽,评论者将其画面与上世纪 90 年代的电子游戏相提并论。扎克伯格当时承认,这个头像是「基本的」程度。

没想到时隔一年,技术的进步就如此巨大。

正如 AI 科学家 Lex Fridman 在采访过程中感叹的:「我真的不知道如何形容这种感觉,这就像是我们正在同一个房间里,就像是未来。」

扎克伯格持续不断的努力正在改变人们对 Horizon Worlds 的印象。他告诉 Lex Fridman,逼真的虚拟形象可能有助于吸引那些对元宇宙里图像感到反感的人,「人们被这种体验所震撼,但我们确实收到了一些反馈,人们说头像在这种环境中感觉没有那么逼真。」

显然,如今的元宇宙能力会给我们的交互方式带来巨大的变化。不得不承认的是,这是扎克伯格元宇宙项目有史以来最令人印象深刻的展示。

图片

                           「改变了,我们对元宇宙的观感开始改变了」——这是划时代的技术。

如果不久之后,Meta 在消费级产品做到这样的效果,它可能会成为一种改变游戏规则的应用。

参考内容:

https://www.businessinsider.com/mark-zuckerberg-new-metaverse-avatars-are-now-humanlike-2023-9

https://futurism.com/the-byte/new-metaverse-lifelike-avatar

https://twitter.com/lexfridman/status/1707453830344868204

工程MeTA扎克伯格
相关数据
增强现实技术

增强现实,是指透过摄影机影像的位置及角度精算并加上图像分析技术,让屏幕上的虚拟世界能够与现实世界场景进行结合与互动的技术。这种技术于1990年提出。随着随身电子产品运算能力的提升,增强现实的用途也越来越广。

机器学习技术

机器学习是人工智能的一个分支,是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、计算复杂性理论等多门学科。机器学习理论主要是设计和分析一些让计算机可以自动“学习”的算法。因为学习算法中涉及了大量的统计学理论,机器学习与推断统计学联系尤为密切,也被称为统计学习理论。算法设计方面,机器学习理论关注可以实现的,行之有效的学习算法。

虚拟现实技术

虚拟现实,简称虚拟技术,也称虚拟环境,是利用电脑模拟产生一个三维空间的虚拟世界,提供用户关于视觉等感官的模拟,让用户感觉仿佛身历其境,可以及时、没有限制地观察三维空间内的事物。用户进行位置移动时,电脑可以立即进行复杂的运算,将精确的三维世界视频传回产生临场感。

映射技术

映射指的是具有某种特殊结构的函数,或泛指类函数思想的范畴论中的态射。 逻辑和图论中也有一些不太常规的用法。其数学定义为:两个非空集合A与B间存在着对应关系f,而且对于A中的每一个元素x,B中总有有唯一的一个元素y与它对应,就这种对应为从A到B的映射,记作f:A→B。其中,y称为元素x在映射f下的象,记作:y=f(x)。x称为y关于映射f的原象*。*集合A中所有元素的象的集合称为映射f的值域,记作f(A)。同样的,在机器学习中,映射就是输入与输出之间的对应关系。

推荐文章
暂无评论
暂无评论~