脸书的Joel Hesch谈论Oculus Insight追踪是VR/AR的现在和未来

脸书的Oculus最近发生了很多变化，移动VR团队的主要高管Nate Mitchell和Max Cohen都离开了。但今年春天发布的脸书独立VR头戴设备Oculus Quest仍然是今年最好的VR硬件成就.并可能表明脸书可能是AR的下一个目标。

脸书现在公开谈论Oculus Insight如何将虚拟现实转化为增强现实，同时促进未来的耳机技术。Insight是在Rift Valley S和task headset中的计算机视觉和基于人工智能的跟踪。它被用于耳机摄像头、运动传感器和控制器中的红外LED，以映射到真实空间中的VR，并使一切感觉流畅和流畅。脸书并不是唯一一家在VR中使用这种跟踪的公司，但很明显，脸书也将这项技术视为通往AR的敲门砖，它将是脸书长期承诺的AR眼镜技术工作的一部分。

负责Oculus Insight开发的脸书工程经理乔尔赫希(Joel Hesch)与CNET讨论了跟踪技术最终可能落户的地方。

虚拟现实和现实的混合体

有时候，Oculus Quest感觉像是一个虚拟和现实融合的门户，尤其是在设置虚拟游戏空间边界和步入游戏世界的泡沫时：Oculus Insight基于摄像头的跟踪非常适合感觉你在现实世界中重新划分边界。跟踪可以用于下一次大规模的体验。

赫希以去年的Oculus Connect 5发布会为指标。参考去年的竞技场规模追踪演示，玩家绕着一个有障碍物的巨型竞技场跑来跑去玩VR激光标记版VR射击游戏Dead and Buried。“我们有真实世界的物体。这些盒子可以隐藏在虚拟世界物体的后面并与之对齐。这种体验给了我们一些思考，我们如何考虑混合现实世界和虚拟世界的内容，我们如何考虑多用户体验？这个领域不止一个人。

脸书是否能让Oculus Quest对基于位置的体验或LBE(类似主题公园的VR景点，如The Void)的公司更具可定制性，还有待观察。(对于定制Oculus Insight追踪体验的制造商来说，“选项不会离开桌面，”Hesch说，但他承认优先考虑的是“尽可能多的情况。”)一些公司，比如MANUVR，已经找到了一种方法，利用微软的Azure space anchor将Oculus Quest与更大的竞技场混合在一起。脸书通过系统更新改进了Oculus Rift S和Quest的追踪功能。赫希说：“我们非常致力于长期的改进路线图。”

脸书耳机入口

脸书的博客文章说，“这项技术的未来是全天候可穿戴AR眼镜，它具有空间意识。这需要运行SLAM(同步定位和地图绘制)和更大的限制，包括进一步降低延迟和功耗。只需要2%的HMD(头戴显示器)SLAM。”但AR眼镜也可能意味着把Oculus Quest的物理控制器的输入换成别的东西。

赫希没有说未来的脸书AR头戴设备是否也会使用像Oculus Rift S和Quest这样的控制器，但他说Oculus VR或AR最终可能会识别手势：“理论上，你在四个设备上有一组摄像头，所以如果你看看学术文献，有许多不同的计算机视觉，感知应用可以用普通的摄像头数据来完成。不在路线图上谈论任何具体的东西，但是你可以发挥你的想象力。当你有了相机数据，就会有不同的可能性。”

有了AR耳机，输入可能最终会更加基于手动，就像微软HoloLens和Magic Leap已经纳入的那样。“如果你考虑一般虚拟和增强计算体验的输入，”Hesch说，“它应该是什么样的？我们真的围绕着试图找出在用户工作的用例中什么对用户最有意义。我们希望与时俱进。我们非常致力于找到输入跟踪选项的完整空间，并了解我们可以为产品带来什么，这将使用户体验到最好的东西。

脸书门户和其他设备会相交吗？

Oculus Insight不仅允许VR头戴设备进行空间跟踪：Hesch表示，计算机视觉技术的元素已经用于脸书基于手机的AR。“对于我们今天在移动设备上使用AR所做的事情以及我们在Quest和Rift S上所做的事情，许多常见的构建模块(如Insight system)实际上可以跨平台运行。我们认为这是一个利用我们机会的真正机会。我们研究可以推向市场的新形状和新产品。”赫希特别指出了太空AI:“我们认为太空AI对所有平台都非常重要。”

脸书门户是脸书AR/VR部门的视频会议平板，Oculus Insight技术尚未使用。然而，Hesch建议，“如果你看看可穿戴设备和基站设备之间的跨平台交集，肯定有合作/重叠的潜力。”

其他所有关于Oculus的公告很可能会在9月底的Oculus Connect 6上发布，仅仅一个月的时间。我们将看到有多少脸书AR计划在那里宣布。

标签：