苹果Reality Pro耳机解释:AR、VR、MR是什么意思?
苹果即将发布十年来最重要的新产品。据传,Reality Pro 将是一款独一无二的 VR 耳机。不,我的意思是 AR 耳机。等等,做一个带转盘的MR耳机,可以随意切换AR和VR……
尽管谷歌、微软、索尼、Facebook/Meta 等大牌公司的耳机已经推出多年,但大多数人仍然不了解 AR、VR 或 MR。在苹果向我们展示 Reality Pro 之前,让我们先澄清一下这些内容的含义,并讨论一下我们对苹果新平台的期望。
虚拟现实
让我们从简单的开始。虚拟现实 (VR) 产品将屏幕置于您的眼前,并通过镜头扩大视野。通常有两个屏幕(或一个分成两半),每个屏幕显示您每只眼睛的视点,以提供真正的 3D 效果。
必须使用陀螺仪和传感器跟踪耳机的移动和位置,以便根据您在屏幕上看到的每一个微小移动来调整您的视图。为了让您感到完全沉浸并避免晕动病,这必须非常快地完成,并且”运动到光子延迟”(您的头部运动和从显示器输出变化之间的时间)非常低。
最终的效果是,你看起来就像处于一个完全由计算机生成的地方。它可以是卡通的,也可以是现实的,但一切——环境和其中的一切——都是由计算机图形制成的。这就是 VR:不再是现实世界,全是虚拟世界。
示例产品:Meta Quest、PlayStation VR、HTC Vive、Valve Index
Meta Quest 2 等 VR 耳机会模糊你对世界的看法,并完全用计算机图形取代它。
元数据
增强现实
增强现实 (AR) 并不是用虚拟世界取代现实世界,而是将数字对象融入现实世界。这可以在屏幕上完成,例如在 iPhone 上的 AR 应用程序中、在耳机中或使用一副眼镜。
基本思想是,您看到的是现实世界,但计算机生成的东西被添加到其中:图标、箭头、文本、浮动视频屏幕、人物等等。
重要的一点是,图形必须呈现在现实世界中。当您在现实世界中移动时,AR 对象可以保持在同一位置,甚至可以与现实世界的几何体(如地面、桌子、墙壁甚至人)进行交互。仅仅在眼前的透明显示屏上显示浮动图形并不是 AR。
AR 至少需要对您的周围环境进行一些基本的 3D 映射,这通常是使用多个摄像头和传感器(例如 LIDAR)来完成的。许多产品将自己标榜为 AR,但更准确地称为”平视显示器”,因为它们实际上无法将计算机图形集成到现实世界中。这些产品不会制作您周围环境的 3D 地图以将图形集成到其中,它们只是将物体漂浮在您面前。 Google Glass、Nreal Air 和 Vuzix Blade 2 就是这样的例子。
《Pokémon Go》经常被认为是一款 AR 应用程序,这常常与您在现实世界中玩它的事实混为一谈。这只是基于位置的游戏,而不是 AR。游戏中有一个小的 AR 部分:当您投掷神奇宝贝球来捕捉神奇宝贝时,您可以切换”AR 模式”,在我们的手机屏幕上显示现实世界中的目标神奇宝贝。该部分,仅此部分,就符合 AR 的资格。 (大多数玩家都会将其关闭。)
如果 AR 耳机使用外部摄像头将周围环境的实时视频传输到内部屏幕,它可能看起来就像 VR 耳机一样,完全阻挡您对外部世界的视野。这就是苹果 Reality Pro 的工作原理,它与 Microsoft HoloLens 等具有透明屏幕和集成显示屏的产品形成鲜明对比,因此您实际上可以直接看到现实世界本身。
不过,只要您实时看到周围的现实世界,其中集成了计算机生成的图形,而不仅仅是漂浮在您面前,那就被认为是增强现实。
示例产品:Microsoft HoloLens、Magic Leap 和即将推出的下一代 Snap Spectacles 都符合真正的 AR 眼镜或耳机的条件。
微软的 HoloLens 2 是一款真正的 AR 耳机,但据说苹果的设备功能要强大得多。
微软
混合现实
这就是令人困惑的地方。显然,增强现实的增强程度还不够,因此业界创造了一个术语,它甚至似乎无法明确定义将真实的 AR 与所有这些虚拟显示器、平视显示器以及 AR 手机应用程序分开。
查找混合现实 (MR),您会发现十几个不同的定义,其中充满了不太精确的短语,例如”以更加身临其境的方式将现实世界和虚拟世界结合在一起”或”允许多个用户可以在虚拟空间中进行互动。”有人说它需要你用自己的双手操纵虚拟物体,而另一些人则说混合现实可以使用控制器。
同时,微软表示,”它将我们从屏幕中解放出来-通过在我们的生活空间和我们的朋友中提供与数据的本能交互来绑定体验。”我不知道什么是与数据的”本能交互”,但这听起来非常乏味。 “人们甚至可能没有意识到他们在 Instagram 上使用的 AR 滤镜是混合现实体验。”
因此,即使在最大的科技公司中,对于如何定义 MR,或者对于产品或体验被贴上混合现实标签的最低标准,似乎也没有达成一致。
我认为一个很好的思考方式是:混合现实是增强现实的超集。它是具有更高交互和沉浸最低标准的 AR。它是用您自己的眼睛观看的(通过透明眼镜或带有来自外部摄像头的直通视频的耳机),而不是显示在手机或平板电脑屏幕上。它不仅显示集成到现实世界中的信息,还允许您与这些虚拟对象进行交互,并让对象与环境进行交互。
像谷歌眼镜这样的”智能眼镜”无法将图形与现实世界结合起来,只能将信息漂浮在你的视野中。
谷歌
Apple Reality Pro 的预期
据我们对 Apple 耳机的了解,它将提供无与伦比的 VR、AR 和 MR 体验。据说这是一款类似于滑雪镜的耳机,它会遮挡你对外界的视线。
多个摄像头将提供您周围世界的实时视图,一组传感器将创建您周围环境的 3D 地图,以便虚拟对象可以与其集成并交互。您将用手控制应用程序并操纵物体,内部传感器甚至可以检测您的眼球运动。
外部的表盘类似于 Apple Watch 上的数字表冠,可让您控制希望看到的外部世界的范围。向一个方向转动,世界就会被封锁,只剩下虚拟环境:VR。把它转向另一个方向,你就可以看到完整的现实世界(从多个外部摄像头馈送到耳机显示器),并集成了计算机生成的图形(AR/MR)。
当 Reality Pro 正式发布时(可能是 6 月 5 日),我们将在 WWDC 主题演讲。如果当前的传言属实,它将在质量、细节、沉浸感、互动……和价格方面树立新的高标准,价格可能高达 3,000 美元。