对于虚拟现实耳机来说，透视是关键。当用户移动眼睛或四处移动时，耳机需要重新调整眼前的场景，以适应新的视角。过渡也必须以闪电般的速度进行，以避免破坏幻觉。

得益于名为OculusInsight的系统，脸书公司在其OculusVR设备系列中成功实现了所有这些任务，并于今日进行了详细披露。Insight使用人工智能帮助脸书的耳机实时跟踪佩戴者的位置和头部方向。

首先，一些背景。脸书今年推出了两款VR耳机：第一款叫做OculusRiftS，必须和电脑捆绑，第二款是OculusQuest，可以无线工作。该公司为这两款产品提供了一对手持控制器，佩戴者可以使用它们与虚拟物体进行交互。

OculusInsight依靠控制器和耳机中的传感器来跟踪用户的位置。核心数据由所谓的惯性测量单元提供，惯性测量单元收集关于设备线性加速度及其转速的信息。

Insight可以使用这些读数来大致了解用户的位置和头部角度，但光有这些信息是不够的。这是因为惯性测量单元容易出现微小误差，如果不检查，主要数据误差会增加。Insight采用两种不同的方法来消除测量误差，一种是针对用户的VR耳机，另一种是针对手中的控制器。

为了跟踪耳机，该系统使用了OculusRiftS和OculusQuest的内置摄像头。Insight使用用户环境的静态功能作为位置指示器来平衡惯性测量单元数据中的误差

“耳机中摄像头的图像数据有助于生成房间的3D地图，并准确定位地标，例如家具的角落或地板上的图案。脸书研究人员乔尔赫施、安娜科兹明斯基和奥斯卡林德在一篇博客文章中解释说：“对这些地标的反复观察可以让Insight弥补漂移。"

第二种纠错方法有助于跟踪控制器在用户手中的位置。控制器外的二极管发出的红外光肉眼看不见，但可以被Oculus耳机拾取，然后用来确定手持配件的相对位置。

OculusInsight每毫秒更新一次位置测量，以提供平稳的过渡。作为额外的措施，脸书工程师在系统中内置了一个预测引擎，可以在几毫秒内预测用户头部和手部的位置，这样内置的AI算法可以进一步优化性能。

OculusInsight的创新可能不仅对VR耳机有更大的价值。核心的位置跟踪技术——同时定位和映射(SLAM)也应用于包括自动驾驶在内的其他领域。

脸书的JoelHesch、AnnaKozminksi和OskarLinde写道：“这项工作可能会对研究SLAM的研究人员以及任何受益于低资源和高精度房间制图的系统(如数字助理和物理机器人)产生广泛影响。”。他们补充说，这项技术可能有助于未来制造“具有空间感知能力的全天佩戴式AR眼镜”。