Magic Leap 2真机图流出,手柄或配备用于inside-out追踪的摄像头

2022年03月08日 追踪 控制器

  Peter H.Diamandis最近发布了一张Magic Leap 2的照片,从照片中能够清楚地看到Magic Leap 2控制手柄的正面。这张照片显示了控制手柄上似乎有两个摄像头传感器,表明它很可能支持inside-out追踪功能。

  据了解,最初的Magic Leap 1控制器采用磁性追踪,所以头显右侧有一块奇怪的方形组件(包含用于检测磁场的接收器)。根据Peter H.Diamandis的图片,Magic Leap 2的控制器似乎采用了inside-out追踪,所以头显的方形组件已经消失。

  值得一提的是,早前有消息称Meta将于今年亮相的高端头显Project Cambria同样会为控制器采用inside-out追踪的方式。假设Magic Leap 2比Meta的Project Cambria更早上市,那么这将是首次有商用XR头显采用这种方法。

  目前其他一体式的XR头显,如Quest 2,通常使用基于头显的inside-out追踪来捕捉其控制手柄(或用户的手)。也就是说,这种方法是利用头显上的摄像头寻找控制手柄(通常用红外LED排列),并使用它们的位置来映射它们相对于头显的运动。

  尽管这种方法有效,但前提是控制器需要位于头显摄像头的视场之内。这意味着,如果控制器过于脱离摄像头视场,头显就会丢失控制器的追踪。但如果控制器进行独立定位,则无论控制器位置何在都可以实现追踪。

  除了更全面的追踪覆盖,将inside-out追踪直接放在控制手柄上意味着头显将不需要配备那么多摄像头(Quest 2使用4个摄像头,而Rift S有5个),而且这意味着取消了“追踪环”(在大多数一体式头显的控制手柄上都能看到),将使它们更时尚,也许更不容易损坏。

  还有更多潜在的好处,例如更容易地组合利用多种输入方式,比如一只手握持控制器,另一只手进行裸手追踪。目前这是一个挑战,因为与追踪双手相比,头显端摄像头倾向于对追踪控制器采用不同的曝光设置。另外,将控制器追踪与头显分离有望减少控制器追踪延迟。

  这种方法虽好,但也不是没有缺点。为控制手柄增加inside-out追踪可能意味着需要在手柄内部放置一个专门的处理器,需要有足够的功率来压缩传入的图像并计算位置,与使用简单的红外LED相比,预计将导致更高的成本和更多的电池能耗。

  另外,机载摄像头存在运动模糊问题。尽管头显端的内向外追踪技术表现出色,但控制器的移动速度可以大大加快,尤其是在激烈的游戏会话中。事实上,正是因为这种控制器的高速运动促使Valve更新了SteamVR追踪技术。

  可以想象,对于《Beat Saber》等会造成高速控制器运动的用例,这么快的摆动很可能会引起图像传感器的运动模糊,特别是在黑暗的场景中,需要增加曝光时间来收集更多的光线。

  当然,Magic Leap 2不是为游戏玩家设计,所以这可能不会成为B端用户的问题。或者说,控制手柄上的图像传感器足够快,即使在快速移动时也能避免运动模糊情况出现?或者最有可能的解决方案是,传感器并没有高于平均水平,但控制手柄将主要依靠基于IMU的追踪,直到控制手柄放慢速度以获得适当的位置。

  Magic Leap早前表示该头显预计将在今年推出,但具体发布日期尚未公布。值得一提的是,Peter H.Diamandis表示Magic Leap首席执行官Peggy Johnson将在4月底参加他的Abundance 360活动,这可能预示着该公司下次将披露更多关于头显的细节。