Meta 的最新原型耳机 Flamera 看起来直接来自科幻动作电影,并且在SIGGRAPH 2023上迅速引起人们的关注,Flamera 赢得了令人垂涎的最佳展示奖。
Flamera 耳机有着巨大的眼睛,散发着不祥的红色光芒,是一款令人生畏的套件,看起来与同类产品截然不同。而且外观不仅仅是为了展示。该耳机首次采用了新的镜头设计,可以解决增强现实最紧迫的问题:“直通”,即使用外部摄像头为耳机用户提供周围世界的视图。
“我没有感受到Meta Quest Pro 的‘游泳’品质,” Moor Insights & Strategy 副总裁兼首席分析师Anshel Sag说道。“这绝对是我见过的质量最好的[增强现实]穿越之一。”
给现实以虫眼
出于显而易见的原因,从物理角度来说,不可能将头显的摄像头放置在与用户眼睛完全相同的位置。这种位移导致了我个人经历过的视角的转变:在使用 AR/VR 耳机时,我曾撞到墙壁、被椅子绊倒。像Meta Quest Pro这样的尖端耳机,可以通过从正确的角度重新投影周围环境的视图来跨越这一障碍,但该解决方案可能会导致视觉失真,即 Sag 提到的“游泳”。
Meta 的瞪大眼睛的 Flamera 提出了一种新颖的解决方案。它放弃了当前耳机所青睐的外部摄像头阵列,采用独特的“光场直通”设计,将图像传感器与光圈配对,以物理方式控制到达传感器的光线。会产生不正确视角的光线被阻挡,而提供准确视角的光线则被允许到达传感器。
直接通过镜头观察时,结果很奇怪:这有点像通过纸上的洞看世界。耳机重新排列原始图像以消除间隙并重新定位传感器数据。完成后,耳机将为用户提供准确的世界视图。
“这绝对是一个原型,但图像质量和分辨率给我留下了深刻的印象,”萨格说。“而且帧率很好。” ModiFace软件开发总监Edgar Maucourant也演示了这款耳机,并同样留下了深刻的印象。“我的眼睛看到的内容和我的手的位置与我的手的实际位置之间没有延迟,也没有差异。”
Maucourant 认为 Flamera 的准确性可能会为用户直接与周围世界互动的 AR 应用程序带来福音。“例如,如果我们考虑远程协助,人们必须操纵物体,那么今天它是通过 HoloLens 和 Magic Leap 等 AR 眼镜来完成的……我们可以想象使用 AR 直通来实现这一点。”
Meta 对 Apple Vision Pro 的回应?
与微软的 HoloLens 和 Magic Leap 的比较很重要。它们通过透明显示屏绕过了透视问题,使用户的视野不受阻碍。当 HoloLens 于 2016 年发布时,这种方法感觉就像是未来,但其显示质量、视野和亮度仍然存在问题。
Meta 的 Quest Pro 和苹果即将推出的 Vision Pro 强调了这种方向的转变。尽管以 AR/VR 耳机的形式(或者在苹果公司的例子中,作为“空间计算机”)进行销售,但它们显然是虚拟现实家族的一个分支。它们通过不透明的显示屏完全遮挡了用户的视野。增强现实是通过视频源提供的,将外部世界投射到显示器上。
Vision Pro 对直通问题的解决方案更注重体力而不是大脑。它使用类似于其他 AR/VR 耳机的一系列外部摄像头,但将它们与 Apple 的定制 R1 芯片配对,该芯片与 Apple M2 芯片(如该公司笔记本电脑中的芯片)协同工作。R1 是一个“视觉处理器”,可帮助 Vision Pro 的 12 个摄像头通过计算纠正视角(以及其他任务)。这很像 Meta 在 Quest Pro 上尝试的方法,但苹果将功率提高到 11。
Meta 的 Flamera 将计算方法扔进了垃圾箱,而是用它的镜头来校正透视。这大大降低了精确直通 AR 所需的原始计算能力。
但这并不是说 Meta 已经彻底破解了直通 AR。Flamera 的技术距离可购买的头戴设备的上市还有很长的路要走,而且目前相对于传统的直通式 AR 还存在一些缺点。萨格表示,这款耳机的“视野相当有限”,并注意到其景深“不连续”,这意味着远处的物体看起来比实际距离更近。Maucourant 警告说,“颜色不太好”,并认为耳机的分辨率不佳。
尽管如此,Flamera 仍展示了 Meta、苹果和其他希望进入 AR 领域的公司之间即将发生的冲突。科技界的大腕们似乎相信,明天最好的 AR/VR 耳机将看起来更像最初的 Oculus Rift,而不是微软的 HoloLens,但他们的顶级工程师仍然有一些惊喜。