混合现实+AI+智能眼镜!Meta Connect 大会打出组合拳

IP归属:广东

文/VR陀螺 Welkin、万里

北京时间9月28日凌晨1点,Meta Connect大会正式拉开帷幕。

作为Connect大会的重点,马克·扎克伯格在Keynote演讲中公布了Meta Quest 3、个性化AI模型、第二代智能眼镜以及系列MR内容生态。以下是Keynote演讲的重要信息汇总。

Quest 3与爆料完全一致,首发高通XR2 Gen 2,引入Augment玩法

Quest 3的信息与此前公布或爆料完全一致,产品参数表如下:

活动现场,扎克伯格花了较长的篇幅介绍了未来元宇宙时代可能会出现的一些新变化趋势:现实世界实际上是我们所居住的物理世界和正在建立的数字世界的结合,但我们接触数字世界主要是通过屏幕,它就像置于与我们的物理生活完全不同的平面之上。我认为未来几十年XR行业中最有趣的问题之一将是:如何把我们拥有的物理体验与这个充满活力的数字世界统一起来,创造出比任何东西都更连贯、更好的东西?

当前这个问题的最佳答案或许是MR。Quest 3基于两颗彩色摄像头和一颗深度传感器实现VST,它所显示的物理空间像素要比Quest 2高10倍,并且可以自动映射所处的空间。

演讲中,扎克伯格提到了几种Quest 3所能实现的虚实结合用例:

  • 拿起一个数字球扔向墙面它会反弹回来;
  • 游戏玩家朝你射击,你可以躲在物理沙发后面;
  • 可以在真实房间拼虚拟乐高或者在任何平面放置自己的创作;
  • 与身处不同地点的朋友在现实空间玩一场拟真的桌面游戏;
  • 在房间中进行一场游戏作战式健身训练。

此外,扎克伯格还介绍了Quest 3的MR大屏观影场景,用户可以将屏幕锚定在物理房间的任何地方,就像真正的屏幕一样。今年12月份,Quest 3将推出Xbox云游戏服务,届时玩家可以通过头显畅玩《光环》、《上古卷轴》等数百款大型游戏。

Quest 3即将在明年带来一个名为Augments的新功能,这是一种能够识别空间的交互式虚拟对象,它可固定于现实环境中。如用户可以在墙上挂上包含Facebook和Instagram照片/视频的电子相框等。未来Quest Store可能会带来更多MR装饰以及品牌合作玩法。

Quest 3首发骁龙XR2 Gen 2,图形性能是上一代的两倍。会上拿即将发售的《阿斯加德之怒2》举了一个例子:初代游戏需要外接PC才能正常运行,如今可以在一体机设备上直接游玩。此外,《刺客信条Nexus VR》、《Roblox》、《XRadium》等也将会在Quest Store中进一步引入。

关于办公以及生产力,Meta将于下周推出Meta Quest for Business服务,便于企业大规模管理、使用MR应用及设备。此外,Workspace、Microsoft 365等办公套件也即将推出。

Quest 3售价499美元,现已接受预定,于10月10日发售。官网指出,限时购买Quest 3有机会免费获得《阿斯加德之怒2》,购买512GB版本还有机会获得6个月的Meta Quest+订阅服务。

图像生成模型Emu 5秒生成照片,打造多达28款个性化AI角色

在过去一年中,Meta相继推出了文本生成3D视频模型、图像分割模型SAM、开源大语言模型Llama 2等。扎克伯格提到,目前团队正着手于将最先进的AI带入数十亿人使用的应用程序中(即Facebook、Instagram等社交全家桶)。Meta现已推出测试版Meta AI,这是一款适用于社交APP以及智能设备的高级对话助手。

会上,扎克伯格还公布了团队正在研究的图像生成模型Emu。基于Emu可以生成一系列高质量的照片,它的一大特点是生成速度很快,只需要大约5秒钟。Emu即将在Facebook的聊天以及贴纸功能中推出,并计划在下个月上线Instagram等平台。

此外,扎克伯格还公布了早些时候《华尔街日报》所爆料的“Meta个性化AI”计划。扎克伯格指出,团队并不认为未来会存在一个能够与每个人都进行互动的单一超级智能,相反,人们需要与一堆不同属性不同角色的AI(AIs)进行交互并完成相关活动。

Meta团队已经打造了多达28个个性化AI形象,他们每个人都有相应的社交账号、具有不同的身份,用户可以在社交平台上与他们进行不同类型的对话。如你可以向AI角色Lily询问主题演讲稿建议、向Lorena询问旅行计划、与Snoop Dogg玩一场文字冒险游戏等。个性化AI将于明年实现语音交流能力。

Meta还在着手于构建一个人工智能平台AI Studio,该平台包含系列AI API接口,将在未来几周内开放。此外,团队还构建了一个沙盒,使得不会编码的人也能够训练人工智能,这一功能将于明年年初发布。

扎克伯格特别提到,团队正努力将AI带到元宇宙中使之具体化,它们将以Avatar呈现,可以应用于游戏NPC、企业客服或者代言人等,这是Meta接下来一年的工作方向之一。

新一代智能眼镜,内置Meta AI,续航拍照进一步提升

除头显外,此前爆料的新款智能眼镜Ray-Ban Meta也得到亮相。Meta曾与雷朋合作打造了Ray-Ban Stories,这款眼镜配备了双摄像头以及扬声器,可以实现拍照、听音乐等功能。有数据指出,初代Ray-Ban Stories共计销售了超过30万台,但是设备活跃度一般。

对于这类智能眼镜,扎克伯格表示:我认为智能眼镜将成为未来的一个重要平台......之前团队不少人认为智能眼镜只有当真正实现3D全息图、内置显示器等才会真正普及,但是这需要很长的时间。如今得益于AI的进步,内置的AI助手将能看到你所看到的,听到你所听到的,AI将与其他AR功能同样重要。

新款Ray-Ban Meta与上代类似,同样配备扬声器、摄像机等组件,但它具有更好的图像以及视频质量、更出色的音频效果以及更舒适的佩戴体验。

新款眼镜配备了32GB存储,可拍摄12兆像素照片和1080p视频。声音方面,Ray-Ban Meta全新设计了扬声器,具有更大的音量、更好的低音效果。其改进了定向音频设计,能够进一步改善漏音等问题。

Ray-Ban Meta的佩戴舒适度也有所提升,眼镜的重量进一步减轻,并且重量分布有所改善,采用了更通用的鼻贴合橡胶垫,并支持IPX4防水等级。

Ray-Ban Meta搭载高通骁龙AR1 Gen 1处理器,处理器运行功耗低于1瓦,智能眼镜充满电可持续使用4-6小时,充电盒可以为眼镜持续充电8次。

产品集成了Meta AI,用户可通过“Hey Meta”唤醒,现场提到了它所能实现的几种用例:询问烹饪菜品所需时间;打球时判断是否违反规则;询问一些医疗建议等。Meta AI将会在美国地区率先推出。据透露明年Meta还将为Ray-Ban Meta推出软件更新,届时它将能获得更为强大的现实场景理解能力,如识别建筑名称、翻译指示牌、询问水龙头修理建议等。

其他方面,Ray-Ban Meta还新增了Facebook和Instagram平台的视频直播功能。此外,Meta对眼镜外侧的LED也进行了改进,LED在设备拍摄录制时会发出更明显的闪烁提醒信号。

Ray-Ban Meta售价299美元,将于10月17日推出。

凭借MR和Xbox云游戏,Quest 3的内容生态将呈爆炸式增长

▋游戏

在扎克伯格之后,Meta公司的CTO Andrew Bosworth和开发者关系主管Melissa Brown先后登场,进一步介绍了Meta Quest 3上的内容生态。

佩戴过VR头显的用户都知道,在启动时都需要手动设定虚拟边界,以确保使用时的安全性、避免现实环境对用户造成危害。Quest 3可以自动识别场景,无需再手动设置边界,不仅如此,识别到的现实环境还可以成为虚拟世界的一部分。比如房间里的沙发,能够作为射击游戏中的掩体;《Drop Dead: The Cabin》里的丧尸,会翻过房间里的家具;《First Encounters》里的外星人飞船,会“撞破”天花板,落在客厅的茶几上……

明年,Meta还会更新另一大功能:允许用户使用交互式和空间感知的数字对象“Augments”,来装饰自己的房间。比如把一幅虚拟的艺术品挂在墙上,在桌子上放置天气预报提醒装置,让墙上的虚拟相框显示发布在Facebook和Instagram上的视频或照片,通过传送门快速返回自己喜欢的VR游戏等等。而且这些虚拟物品都会锚定在现实环境的特定坐标上,因此每次戴上Quest 3,它们都会在相同的位置出现。

图源:Meta

迄今为止,全体用户在Quest商店的累计消费已达20亿美元。在内容生态方面,Quest 3向下兼容Quest 2、Quest Pro等头显适用的全部内容,因此在发售当天就有超过500款游戏和应用可供挑选——这些无疑是Quest 3内容生态的坚实基础。不仅如此,今年内还会针对Quest 3推出超过100款新游戏和升级游戏,而且其中超过一半以上会包含MR内容。

“新游戏”指的是全新推出的游戏新作,虽然它们也会登陆Quest 2等其他平台,但无疑在Quest 3上才会有更好的体验,包括:

  • ·预定11月16日上市的育碧经典IP《刺客信条Nexus VR》
  • ·将于12月15日发售的3A级大作《阿斯加德之怒2》(预订Quest 3的用户可以免费获得)
  • ·根据网飞热门剧集改编的《怪奇物语VR》
  • ·在今天的Connect大会上新公布的乐高授权游戏《LEGO Bricktales》等

LEGO Bricktales(图源:Meta)

“升级游戏”则是指已经发售,但会针对Quest 3的硬件升级和相关技术推出更新补丁,从各方面优化游戏体验的作品。以《行尸走肉 圣徒与罪人》为例,升级后的画面表现将有大幅提升,同屏的丧尸数量更多,并且加载速度也会更快;今年8月登陆AppLab的《Roblox》上线5天,下载量就突破百万,该作今天也正式登陆Quest商店,而且会有针对VR的超过5000种优化体验。

去年的Meta Connect大会上,微软CEO萨蒂亚·纳德拉曾登场宣布与Meta的多个合作项目,其中游戏方面的合作终于将落地。Xbox Cloud Gaming服务将于今年12月登陆Quest平台,届时用户们可以在VR头显里的便携3D巨幕上,随时体验包括《光环 无限》《我的世界 传奇》《极限竞速 地平线5》在内的数百款优质Xbox游戏,这一合作无疑让Quest上的游戏数量得到指数级增长。(注:需要付费订阅Xbox Game Pass Ultimate服务,并额外购买无线手柄。)

Xbox Cloud Gaming(图源:Meta)

▋社交

Meta的元宇宙平台Horizon Worlds本月将更新两款游戏:6人联机的射击游戏《Super Rumble》,融合了Roguelite元素的动作冒险游戏《Citadel》。此前第三方Horizon创作者都必须在VR内构建世界,而这两款游戏则是通过PC软件导入3D资源和TypeScript制作的。

社交体验正在Quest上快速发展,尤其是在与游戏相结合时,Meta也希望更多开发者能选择在他们的游戏中添加社交功能。在未来的一年里,Meta将更新Quest上的社交功能,比如让用户能够从聊天界面接受好友的邀请,直接进入游戏。而虚拟化身的体型、妆容、发色等,也会有更多的选择。

此外,Horizon World目前已经可以在网页和智能手机端运行,无论用户使用什么设备,都能与朋友们相聚,这也令社交元素变得更加便捷和出色。

图源:Meta

▋健身

健身类应用在Quest 3上会得到更加充分的施展:《LES MILLS BODYCOMBAT》增加了MR模式,让家庭瞬间变成健身房;《FitXR》首次将Zumba健身操引入VR;《Headspace》是一款即将发布、注重心理健康的应用,能通过VR的沉浸感使人更加专注;得益于Quest 3分辨率的提升,热门VR健身应用《Supernatural》的场景也得到升级,而且费用从19.99美元/月降低为9.99美元/月。

▋视频

视频方面,用户可以通过《Xtadium》观看身临其境的NBA比赛和MMA现场直播;在Red Rocks和iHeartRadio Live音乐会上于前排位置免费观看喜欢的艺术家的表演;或者在Peacock和Pluto TV等流媒体应用程序上观看电影、电视和体育节目。

改编自经典黏土动画片《Wallace and Gromit》(国内译名:超级无敌掌门狗》的VR互动体验《Wallace & Gromit in The Grand Getaway》也即将登陆Quest 3。购买该作还能获得MR游戏《Jamtastic!》,将Wallace和Gromit带进玩家的客厅,让虚拟角色与玩家更紧密地联系在一起。

图源:Meta

▋办公

数以百万计的人已经使用Quest上的工作场所和生产力应用程序,而Quest 3和MR只会加速这一趋势。

对于希望有效利用Quest的企业,Meta有一系列关键业务工作应用程序可以提供帮助。微软和Adobe等顶级企业软件制造商也推出了自己的新产品:Adobe Substance 3D Modeler已于今年早些时候推出,可以让用户在VR、桌面或两个平台之间进行建模;Microsoft Mesh for Teams现已进入公开预览阶段,可以轻松加入身临其境的会议。

Microsoft 365将于今年年底登陆Quest,用户可以使用Word、PowerPoint和Excel等熟悉的生产力应用程序。Windows 365很快将提供一种新的方式,安全地将Windows体验传输到Quest,包括用户的个人应用程序、内容和设置。

为了帮助企业充分释放潜力,Meta将在下个月推出Meta Quest for Business。它允许企业在用户、应用程序和设备层面管理设备,提高团队工作效率,确保企业安全,此外还提供企业级客户支持。

图源:Meta

结语

今年回归线下的Meta Connect围绕MR、AI和智能眼镜作为基调演讲的核心,而扎克伯格心目中的元宇宙大业,其实也在AI的助力下持续发展着。

有意思的是,扎克伯格在会上还隐约谈到了对于苹果Vision Pro的看法:创新的一个重要部分是确保技术对于每个人都可访问(显然Vision Pro 3499美元的高售价访问性没那么好),而Meta的做法是持续创新并让每个人都负担得起。此外,扎克伯格还谈到,对于Quest 3而言,只需要花费499美元,就可以拥有更好的分辨率、优秀的MR体验、紧凑的一体式设计,显然是一个更具性价比的选择。

Meta Connect将持续两天,除了今天的基调演讲外,来自Meta和其他相关企业的行业精英还会基于不同的主题、通过演讲的形式进行分享。VR陀螺也会持续关注,为各位奉上本次大会的后续资讯。

本文来源:陀螺科技 文章作者:VR陀螺
收藏
举报
VR陀螺
累计发布内容3588篇 累计总热度10万+

陀螺科技现已开放专栏入驻,详情请见入驻指南: https://www.tuoluo.cn/article/detail-27547.html

VR陀螺专栏: https://www.tuoluo.cn/columns/author1286744/

本文网址: https://www.tuoluo.cn/article/detail-10109717.html

免责声明:
1、本文版权归原作者所有,仅代表作者本人观点,不代表陀螺科技观点或立场。
2、如发现文章、图片等侵权行为,侵权责任将由作者本人承担。

相关文章