眼球追踪是VR的下一个阶段 不管你是否准备好了


查看Pico Neo2眼耳机,其中有一个环眼跟踪相机 。
虚拟现实似乎在过去的一年里经历了一场戏剧性的重新聚焦:远离个人电脑,转向像突破性的Oculus Quest这样的无所不包的耳机 。

在拉斯维加斯的CES上,一个非常像Oculus Quest的独立VR耳机出现在我的脸上,这是我在节目中尝试的许多VR演示之一 。皮科尼奥2眼可能永远不会是你最终购买的耳机,但这是一个有趣的迹象,不久的将来 。这是一个独立的VR耳机,就像Face book的优秀的Oculus Quest 。但是的,它也追踪到了我的眼睛 。
多年来,专注于眼睛跟踪的瑞典科技公司Tobii一直致力于将其硬件集成到各种VR和AR耳机,甚至是计算机中(戴尔的Alienware系列使用Tobii技术) 。去年发布的HT CVive Pro Eye是第一款内置了Tobii眼部追踪功能的主要VR耳机,但它是为商业用途而设计的,价格极其昂贵 。Pico Neo2Eye是第一款使用Tobii技术和高通Snapdragon845芯片的较小规模的眼睛跟踪VR耳机,这是我两年前第一次看到的预览版本 。
Oculus Quest使用的是更老的高通Snapdragon835芯片,尽管它令人惊叹 。皮科V R耳机具有更好的图形能力,在纸上 。高通拥有更先进的VR芯片:一种更新的XR2芯片不仅保证了更好的图形,而且还有大量同时可以跟踪外部世界的摄像机.并向内看,跟踪你的脸和眼睛 。
独立的PicoNeo2眼从前面,它的房间跟踪前摄像头和它的一个手持遥控器 。
根据Tobii的说法,眼睛跟踪是VR和AR前进的重要组成部分,但它还没有成为主流 。Tobii的首席执行官兼联合创始人HenrikEskillson告诉我:“我们正在与大多数制造商合作,将目光跟踪纳入其中 。“第一台设备是2019年,2020年更多的设备 。我们预计,根据我们在2021年的约定,它将达到真正的消费量 。然后更大的规模,并或多或少地成为事实上的标准,[在]2022年,2023年 。”企业和高端AR耳机,如HoloLens2和Magic Leap已经有眼睛跟踪,但此时没有主流的AR/VR产品做 。
眼睛跟踪可能是非常有用的 。无论我看什么都可以注册,这当然可以帮助应用程序专注于调整控制器输入,以匹配我感兴趣的目标 。眼睛跟踪和手跟踪也可以在一些有趣的方式结合在道路上 。
【眼球追踪是VR的下一个阶段 不管你是否准备好了】眼睛跟踪还有一个真正实用的原因:它帮助智能地将图形处理减少到只有你的凹面(称为凹面渲染),创造了一种看起来一样的体验,但对处理器的征税要少得多 。这意味着只有你直接看到的图像的部分才能获得最充分的分辨率和图像质量,其他一切都可以节省GPU周期 。
一个演示,我尝试与托比和PicoNeo2眼显示了一个房间,图形效果是应用,有和没有眼睛跟踪/雾渲染 。通过眼睛跟踪,帧速率最终会平滑得多,这也意味着更少的滞后和更少的恶心 。
我的较厚的眼镜有时不能很好地与托比的内环的眼睛跟踪VR相机,但希望未来的耳机将改善技术如何与我的眼镜 。
但是,随着眼睛的追踪,还有一些悬而未决的问题 。公司可以知道你对什么感兴趣,广告目标,或其他任何东西 。眼睛跟踪可以接近一种类型的心灵阅读 。这就带来了各种隐私和数据跟踪问题 。你想要一个广告跟踪器知道你的眼睛专注于网页或视频的哪些部分吗?该数据如何共享,或与个人可识别的信息连接?情绪状态是否能够被记录下来,或者公司会认为这些眼睛的运动表示情绪吗?这只是数字行为跟踪战争的另一条战线 。
Oculus Quest使用一种固定类型的凹形渲染,它只会使显示的中心比外围高 。它还允许Face book暂时跳过眼睛跟踪,以及像Face book这样的公司将如何处理眼睛跟踪数据这一迫在眉睫的问题 。Face book现在使用Oculus VR活动进行广告定位,如果你是用Oculus耳机登录Face book的话 。如何处理眼睛追踪?高通公司(Qualcomm)是一家推动通过XR平台上的同步摄像机跟踪不断增加的信息量的公司,它有一个处理这些数据收集的愿景,但目前还不清楚这将如何发挥作用 。
还有一个成本问题 。Pico Neo2的眼睛跟踪成本(约900美元)比没有(约700美元)的版本要高得多 。虽然眼睛跟踪可以帮助提高图形性能,但没有明确的词来说明这将如何影响整体电池寿命的独立耳机 。
尽管如此,我一直在想,眼睛跟踪什么时候会到达家庭VR耳机,以及它将如何处理 。这一时刻可能很快就会到来,但它也可能会重新关注隐私和用户跟踪 。

    推荐阅读