visionOS 2 的稳定版本现已面向 Apple Vision Pro 发布。
visionOS 2 于 6 月份的 Apple WWDC24 活动中发布。此后,苹果公司发布了 9 个测试版和一个候选版本,需要用户选择加入参与测试。现在第一个稳定版本发布,所有 Apple Vision Pro 用户都可以使用。
visionOS 2 的变化和改进
visionOS 2 为 Apple Vision Pro 的操作系统引入了新功能和多项改进。
菜单手势
visionOS 2 添加了两个系统手势。打开手掌并将食指捏住拇指现在会调出应用启动器(与 Meta Quest 头显上的菜单手势相同)。再次将手掌向下,将显示一个新的手持锁定信息栏,其中包含时间、音量、电池百分比和连接状态。轻捏它将打开控制中心。
此更新还允许您在主屏幕上重新排列应用,以前应用只能按字母顺序排序,无法自定义。
将任何图像转换为空间照片
visionOS 2 可以使用“高级机器学习”将任何 2D 图像转换为空间照片,使它们成为 3D 图像。
我们已经试用了这个功能,发现它运行得非常好。
手部追踪和场景理解改进
visionOS 2 为手部追踪带来了两项改进,为场景理解带来了两项改进。
在 visionOS 1 中,系统为开发者提供了 30Hz 的手部追踪姿势。在 visionOS 2 中,手部追踪姿势以显示刷新率提供,通常为 90Hz。
手部追踪的另一项改进是预测,这对于开发者来说是可选的。启用预测将提供外推的手部姿势,代表每个帧显示时手部应该在的位置。这会导致有效延迟明显降低,但会牺牲一些准确性。
通过 visionOS 2,头显现在具有房间追踪功能。系统将为开发者提供每个房间墙壁和地板的精确几何形状,甚至支持非矩形墙壁。进入一个新的房间时,系统将通知开发者并只开始提供新房间的几何形状。苹果表示开发者可以使用这个功能,例如让一只虚拟宠物在你进入卧室时迎接你。
除了墙壁和地板,visionOS 2 还对平面检测进行了改进。虽然 visionOS 1 只能检测水平和垂直平面,但 visionOS 2 可以检测倾斜平面。
Safari 获取电影模式和 WebXR 默认功能
在 visionOS 2 中,Safari 支持在虚拟环境中将全屏视频播放到巨大的虚拟屏幕上,包括 YouTube 和 Netflix。
WebXR 现在也默认启用,不再隐藏在用户需要启用的功能标志之后。
Vision Pro 现在是 AirPlay 接收器
在 visionOS 2 中,Vision 头显现在是 AirPlay 接收器,这意味着您可以将 iPhone 或 iPad 显示屏投射到头显。
将 iPhone 和 iPad 集成到 visionOS 中是苹果的一项重大生态系统整合举措。
新的虚拟环境:Bora Bora
键盘突破和物理鼠标
在 visionOS 2 中,您的物理 Magic Keyboard 现在显示完全沉浸式的环境,称为 Keyboard Breakthrough。
此外,现在支持物理鼠标,而以前只支持触控板。
访客模式升级
visionOS 2 允许您最多保存 30 天的访客用户的手部和眼睛设置。
这对于经常使用你的头显的配偶、室友或朋友来说非常有用,因为以前你需要在每次使用时重新进行手部和眼睛设置。
静态 3D 对象追踪
visionOS 2 还为开发者添加了追踪 3D 对象的能力,这是一种全新的追踪功能。
开发者必须在应用程序编译之前,将追踪的 3D 对象作为 USDZ 3D 模型提供到 Mac 上的 Create ML 工具。Create ML 将为每个对象训练一个神经网络,该网络将被烘焙到应用程序中。
火车旅行模式
目前为飞机设计的旅行模式正在获得对火车的支持。
实时字幕
正如 5 月份宣布的那样,visionOS 2 添加了一个实时字幕选项,该选项将应用于通过麦克风输入的实时对话以及来自任何应用程序的音频,包括 FaceTime 通话。
HealthKit & TableTopKit
HealthKit 用于其他 Apple 设备,也可在 visionOS 2 中使用,使健康和健身应用程序能够存储和读取 Apple 健康配置文件中的数据。
一个新的 TableTopKit 使开发者更容易“快速构建以桌子为中心的共享和协作应用程序体验,例如棋盘游戏或制造工作站”。
企业级原始相机访问
通过 visionOS 2,企业可以访问 Vision Pro 的透视摄像头来运行自定义计算机视觉模型。
苹果明确表示,这些功能只能在“仅供商业用途的应用程序”中使用,使用这些功能的应用程序只能作为内部专有应用程序或为特定业务使用 Apple Business Manager 制造的自定义应用程序进行分发,而不能在 App Store 上分发。需要一个受管理的授权,以及与您的 Apple 开发者帐户绑定的许可文件。
超宽 Mac 虚拟显示器(今年晚些时候推出)
Mac 虚拟显示器功能即将迎来重大改进,将显示器扩展到相当于两个 4K 显示器合并在一起的虚拟超宽显示器。苹果表示,这将由眼球追踪动态视觉化技术提供支持。
此功能需要 visionOS 的未来版本。它尚未推出。