MR(Mix Reality,混合现实)将AR (Augmented Reality,增强现实)和VR(Virtual Reality,虚拟现实)的优点结合在一起,通过一系列的摄像头和传感器捕捉现实世界,然后将其投射在用户眼前的显示器上。MR相较于全封闭的VR,用户可以看到真实的环境,更具有现实感和交互性,因此具有更广阔的应用前景。
从消费电子的发展历程来看,Vision Pro作为苹果在 MR 领域中的重磅产品,无疑是一个里程碑。
Vision Pro不仅打破了传统VR头显的应用场景局限,更重新定义了头显的新范式。有望替代传统PC和游戏机,引领用户进入一个全新的空间计算时代。在2023年6月的全球开发者大会WWDC 2023上,苹果首次向公众揭开了其混合现实头显—Vision Pro的面纱。
Vision Pro 全新 Vision OS 系统,内 嵌 iOS 框架、空间计算框架、音频引擎、3D 空间引擎、注视点渲染引擎、实时驱动等子系统。搭载了M2+R1双芯片、3P Pancake方案、单眼4K MicroOLED、眼动+手部追踪交互等多项核心技术,使得它在硬件配置上已经领先同行。这些技术也为VisionPro带来了VR/AR模式平滑切换、虹膜识别、双向透视等一系列创新功能。
Vision Pro通过空间计算技术,将真实世界和虚拟世界混合在一起,为用户呈现出一个亦真亦幻的新世界。用户通过Vision Pro看到的虚拟画面,实际上是由摄像头和传感器捕捉的现实影像,经过空间计算处理后呈现出来的。这种技术可以理解为在现实空间上增添了一层更加优质的虚拟“图层”。在交互方式上,VisionPro也展现了其前瞻性。它跳过了当前主流的手柄6DOF、裸手交互、语音、眼动追踪等协同方式,直接进入自然交互模式。用户可以通过简单的手势、眼神等方式与虚拟世界进行自然流畅的交互。
截至目前,苹果已经申请了多项相关专利,包括手动控制+智能戒指、空间窗口、眼动交互、空间音频+气味生成等交互功能布局以及多人共享远程会议、“隔空打字”的虚拟键盘等场景布局。