Oculus Quest手部追踪技术如何工作


Oculus任务 (原始的和第二种模式 )都有一段有趣的历史,那就是在硬件淘汰之后很久才添加了功能。其中最著名的是Oculus Link ,它有效地将Quest变成了Oculus Rift。该功能非常成功,以至于Oculus决定停止使用除Quest之外的所有头戴式耳机。

手部跟踪并没有像Oculus Link那样引人注目,但是它仍然是一个了不起的功能,具有很大的潜力。使用手动跟踪,您根本不需要控制器。您自己的双手已数字化进入VR世界!

如果您有Quest或正在考虑购买一个,值得了解手部追踪的工作原理以及它可以为VR体验带来什么。

Quest如何追踪世界

Oculus Quest使用了一种创新技术运动跟踪的方法,通常称为“由内而外”的跟踪,这与过去的运动跟踪非常不同。

2010年代中期首批下一代头戴式耳机发布时,它们使用了一个或多个外部跟踪摄像头。头戴式耳机上的特殊运动跟踪灯告诉相机确切的位置。借助一些聪明的数学运算,该数据便可以转换为3D空间中非常精确的运动跟踪。这就是高级VR头戴式耳机提供“六个自由度”(也称为6DoF)的方式。

Quest移动相机传感器放置在耳机本身上,在这种情况下,请将其放置在设备上的重要位置。其他耳机可能会使用更多相机以提高准确性。这四个摄像头使Quest可以查看您周围的真实世界,并确定您在该空间中的位置。

这就是使Quest能够独立且便携的原因。这也是使Oculus可以进行手动跟踪的功能。

标准Oculus触摸控制器

了解什么使Oculus手动跟踪如此令人印象深刻,我们必须从Oculus Quest附带的相当普通的物理控制器开始。每个传感器都通过内部传感器和特殊的运动跟踪标记进行了完整的运动跟踪,这些标记可以告诉Quest的车载摄像头控制器相对于头戴式耳机的位置。

在VR中握住触摸控制器时,重新以令人难以置信的准确性进行跟踪。使用控制器上的手柄和触发按钮,VR软件可以创建令人信服的抓取和操纵物品的体验。这在半条命A攀登 之类的游戏中非常有用,在VR世界中,抓取物品是游戏玩法的核心部分。

触摸屏控制器借助称为“线性执行器”的设备,可以提供触觉反馈,该设备可以产生撞到物体,振动和其他触摸感觉的物理感觉。当您无法在实际空间中四处移动时,指尖和按钮也提供了一种熟悉的方式来在VR空间中四处移动。

与手跟踪相比,此方法的主要缺点是您的手有钩子。您可以用虚拟手执行简单的捏捏动作,但这只是它的范围。当围绕控制器设计游戏时,这似乎不是主要的限制,但是手部跟踪为VR开辟了一系列新的可能性。

Oculus手部跟踪的作用

何时启用手部跟踪功能后,您将在VR世界中看到真实手部的准确表示。您的手指或手腕的每次移动都将反映在其虚拟的doppelgangers中。

手部跟踪已不再是Quest的测试版功能。现在,它已集成到操作系统和许多第一方Quest应用程序中。这里的第一个主要好处是,如果您只是想快速穿上Quest并在VR中观看电影或在应用商店中浏览,则无需花费很多精力在触摸控制器上。只需用一只手,您就可以访问系统菜单并轻松浏览。

现在,手动跟踪是Quest的一项正式功能,第三方应用程序开发人员可以将其添加到他们的应用程序中。已经有许多应用程序很好地利用了Oculus的手动跟踪功能,但是我们确信开发人员会发现更多令人兴奋的方式,直接的手动跟踪可以改变VR体验

如何Oculus手动跟踪有效

手动跟踪的结果非常惊人,但是它实际上是如何工作的呢?显然,Oculus不会公开其专有解决方案的确切细节,但是我们确实知道其中涉及的技术和原理。

首先,车载摄像头对于进行手动跟踪工作至关重要。它们不仅提供立体深度信息,而且还提供视觉数据以供机器视觉处理。什么是机器视觉?它是人工智能 的一个分支,特别是称为机器学习的领域。这项技术可以让您的手机相机应用快速识别照片中的脸部。

从本质上讲,该软件必须了解相机提供的图像数据中的什么是手,什么不是手。可以通过在不同环境中向成千上万的手展示该软件来完成此操作,直到它可以可靠地找到一种快速有效的方法,将它们与房间中的其他一切区分开。

一旦软件可以创建准确,实时的手部虚拟模型,应用程序开发人员可以将其用于他们能想到的任何事情。您现在可以在VR中精确地操纵对象!

值得一试的手动跟踪体验

如果您拥有Oculus Quest,则可以尝试使用Oculus手动跟踪功能,而无需购买任何工具特定的应用程序。如上所述,它可以在主要Quest环境以及一些第一方应用程序中使用。当涉及到第三方体验时,有一些值得强调的地方。

线 是$ 4.99的叙述体验,也可作为手部追踪的完美技术演示。它讲述了一个在钟表机构和铁轨上运行的比例模型镇的故事。

我们的英雄佩德罗(Pedro)爱上了罗莎(Rosa),但他无法逃脱命运。直到有一天发生新的事情。您可以用手转动旋钮,拉杆并摆弄所有可能的东西,从而与他们的比例模型世界互动。这是一种线性的简短体验,但可以在大约15分钟内以非常有趣的方式展示手部跟踪。

巫师的华尔兹 (9.99美元)是该技术的另一个出色展示。您可以用手投掷咒语,并与周围的VR世界中的几乎所有事物进行交互。如果您曾经想过要成为一个可以从他们的手中射出一束光的巫师的幻想,那么这就是适合您的游戏!

您如何看待Quest上的手部追踪?你试过了吗?您会推荐哪些游戏?在评论中分享您的见解。

Related posts:

立即免费畅玩的6种最佳公共领域视频游戏 什么是PS5和Xbox Series X上的8K游戏?这值得么? 10最佳Nintendo Switch复古游戏 Twitch vs YouTube:哪种流媒体更好? 7种最佳游戏SSD 什么是PS4安全模式,何时应使用它? Minecraft的6个高级工具提示,可帮助您提高游戏质量

11.03.2021