Meta两项手势追踪新专利曝光,可实现更自然沉浸式交互

IP归属:广东

编译/VR陀螺

从近年来曝光的专利可以看出,苹果、谷歌、Meta和业内许多其他公司正在开发的下一代混合现实头显和AR智能眼镜产品有一个共同的功能,那就是支持手部追踪与手势交互,人们可以直接使用双手控制UI,移动虚拟物体等。

近日,两项Meta新专利曝光,显示了他们的工程师正在进行的一些工作。此外,Meta还公布了一个开发者视频,展示了其关于手部追踪的SDK。

图源:Meta

在图中,可以看到开发者在移动他的手,而在更大的显示区域,可以看到追踪开发者手部动作的虚拟手与潜在的头显用户界面的各个部分正在进行互动。

图源:Meta

在美国商标专利局公布的两项Meta新专利中,有一项是2022年4月21日申请的题为"手部存在优于键盘的包容性"的专利。在其中,Meta的工程师展示了他们发明的专门用于虚拟键盘的手部追踪,这将需要超高的准确性和灵巧性。

Meta的专利图5A和5B说明了在虚拟现实环境#500中,用户的手#210显示在渲染的虚拟键盘#420上的例子。在专利图5B中,显示的内容是"你好,我正在VR中打字!"。

图源:patentlyapple

更多细节可查阅Meta的专利申请20220121343

Meta上周在欧洲提交的第二个专利申请标题为 "具有滑动菜单的人工现实系统",它涵盖了一个AR头显的菜单UI,在选择菜单项目时可以通过手部追踪的手势进行操作。

Meta在专利摘要指出:"该专利描述了一个人工现实系统,该系统在人工现实环境中渲染、呈现和控制用户界面元素,并响应用户的一个或多个检测到的手势执行操作。该人工现实系统包括一个可以用一只手激活和互动的菜单。响应于检测到用一只手执行的菜单激活手势,人工现实系统可以呈现出一个菜单。手的菜单滑动手势(例如,水平运动)可用于使可滑动的用户界面(UI)元素沿着菜单的水平尺寸移动,而UI菜单的水平定位保持不变。手部与菜单滑动手势正交的运动(例如,非水平运动)可以使菜单重新定位。人工现实系统的实施确实需要使用双手或使用其他输入设备,以便与人工现实系统互动。"

图源:patentlyapple

在Meta的专利图2中,我们看到安装在HMD上的摄像头(#210)如何被用来追踪用户的手势,这些手势与HMD内部显示屏上的AR用户界面同步使用;图6是一个流程图,说明了一个用于定位和与UI菜单互动的示例方法的操作。

图源:patentlyapple

在Meta的专利图7G和7E中,我们看到了几个例子,用户通过选择 "设置 "和/或 "社交 "媒体按钮,利用HMD的摄像系统捕捉到的手指手势来操作菜单。

想了解更多专利细节,可查阅欧洲专利申请EP3980870

下一代头戴式设备的关键战役之一将是为用户提供一个复杂的菜单,并允许用户利用眼睛和手的追踪来控制内容和游戏。苹果、Facebook、索尼和其他公司都在深度参与开发系统,而Meta SDK的视频则帮助我们看到这在未来可能会是怎样的效果。

回顾iPhone最初的发展演变,就能了解到苹果的HMD同样会有一个很长的发展演变路线。《韩国先驱报》上周五发布的一篇新文章涉及三星的研究主管Sebastian Seung,描述了他们在6G技术方面的初步工作。6G时代可能在十年之后到来,届时将对XR(扩展现实)、全息图和数字孪生的发展起到至关重要的作用。

Seung表示,为了 "实现这样的服务,6G应该支持巨大的实时数据处理,超快的数据速率和极低的延迟"。Seung补充说,现在是开始为6G做准备的正确时机,这与其白皮书中的建议相呼应,即6G将比5G快50倍,延迟为5G的十分之一。

在短期内,该行业正在竞相开发和提供下一代眼睛和手部追踪技术,将HMD体验提升到新的水平。控制HMD的特定用户界面将增强沉浸式游戏的体验,同时允许用户执行参与社交媒体的基本功能,甚至是在虚拟计算机设备上打字等工作任务。

来源:patentlyapple

陀螺科技现已开放专栏入驻,详情请见入驻指南: https://www.tuoluo.cn/article/detail-27547.html

VR陀螺专栏: https://www.tuoluo.cn/columns/author1286744/

本文网址: https://www.tuoluo.cn/article/detail-10097977.html

免责声明:
1、本文版权归原作者所有,仅代表作者本人观点,不代表陀螺科技观点或立场。
2、如发现文章、图片等侵权行为,侵权责任将由作者本人承担。

相关文章