在 WWDC24 上 Apple 为上市不到半年的 VisionPro发布了新的 visionOS 2,预计将于今年秋季正式发布。
Vision Pro 上市不足半年,visionOS 的更新幅度并不算大,更像是一个 visionOS 1 的「完全体」,主要围绕中文支持、更加高效的交互操作、和更加舒适的内容消费体验三个方面展开。我们在体验了新版系统之后,帮你整理了 visionOS 2 中值得关注的新特性。
随着 Vision Pro 在世界更多地区上市,visionOS 2 终于有了语言和地区选项,可设置为包括简体中文的 9 种语言。
除了一些 visionOS 2 中的新功能(如系统设置中的键盘透视选项)之外,中文覆盖情况非常完全,连 Persona设置时的引导视频也有了中文语音。此外,visionOS 2 也补上了为单个 App 设置语言的选项,设置方式类似于 iOS,具体语言要看 App 本身的提供情况。
为 App 单独设置语言
值得注意的是,虽然 visionOS 2 是我们首次正式体验到的中文 visionOS,但由于 Vision Pro 在国内上市的时间(6 月 28 日)早于 visionOS 2 正式推出时间,Vision Pro 搭载的visionOS 1.2 也会兼容中文,与 visionOS 2的情况可能略有区别。
除了系统可显示中文,中文输入法也到位了。在系统设置中可选择拼音、双拼、笔画、五笔等六种键盘。由于仍然只能使用两根手指打字,目前感受下来按键最大的九宫格体验最佳。
切换键盘的方式和 iOS 类似,点击键盘上的地球图标即可。另外,尽管可以安装 iOS 上的第三方输入法(如微信输入法)但实际输入时无法呼出。
中文输入
同时,语音输入也支持了中文,通过点击麦克风图标即可用中文输入,相比二指禅打字高效很多。
中文 Siri
现在我们也可以用中文与 Siri 对话,可用「嘿Siri」或 「Siri」来唤醒。有了中文支持,让 Siri 打开 App 会比自己动手方便不少。Apple Intelligence 加持的新 Siri 在 visionOS 2 中同样未见踪影。
用中文使用 Siri
地区可设为中国大陆
由于完整的语言和地区设置已经来到 visionOS 2,地区也可设置为中国大陆了。我们将地区由默认的美国切换至中国大陆之后并未感受到明显的变化,Apple TV、Apple Music、App Store 等均跟随已登录的 Apple 帐号区域设置。
国区的 App Store 也已准备就绪,登陆国区账号即可使用。目前专为 Vision Pro 设计的 App 数量不算很多但大量的 iPadOS 应用可以下载。
国区 App Store
在 visionOS 1 中,主屏幕仅可通过按下机体上方的数码表冠呼出,而控制中心则需抬头并拉下小圆圈,可以说这两个高频使用的系统界面呼出方式都有些麻烦。
Vision OS 2 将主屏幕、控制中心、音量控制全部整合在了一套手势操作中,只需将掌心向上,主屏幕按钮就会出现在虎口上方,此时有三个操作可以进行:
visionOS 2 手势操作
捏合手指:呼出主屏幕;
翻手:呼出状态小面板,可查看时间、电量、音量等信息;
翻手并捏住小面板:调节音量;
翻手并点击小面板:呼出控制中心。
虽然集合了翻手、捏住、点击等多种操作,但这套手势并不难掌握,习惯后要比曾经的呼出方式方便很多。我们也测试了一些边界情况和细节:
主屏幕仍然可以通过按下数字表冠呼出;
抬头呼出控制中心的方式被去掉了,但在录屏的时候仍然可以用这种方式呼出控制中心;
数码表冠调节音量的功能被去掉了;
必须看着手才可以呼出,单纯掌心朝上是没有用的;
呼出后视线移出手部,主屏幕按钮和小面板就会消失;
左右手均可呼出;
不完全张开手掌,仅张开食指和大拇指也可呼出;
手里拿着东西也可呼出;
如果手里拿了遮住了手掌的大东西(比如手机),就无法呼出了;
空间型应用(比如 Sky Guide)占用整个环境空间时,需要手掌向上并捏合一次手指,主屏幕按钮才会出现;
必须等主屏幕按钮出现之后才可翻手呼出小面板,直接翻手无法呼出;
主屏幕按钮变为小面板时的动画也是翻转的,很细腻。
小面板动画
点击麦克风开始语音输入是贯穿各个 Apple 系统的操作,这个操作在 visionOS 2 上得到了进一步简化:只需要注视麦克风图标,语音输入就会自动激活,省去了捏一下手指的动作。
注视麦克风图标开始语音输入
目前来看,这项功能仅在带有麦克风的输入框中可用(比如系统设置的搜索框、信息 App 会话的输入框),系统输入法上的麦克风图标和无麦克风图标的输入框均无法使用。这些注视麦克风操作的体验细节值得关注:
需要注视 1-2 秒钟才会启动,不担心误操作;
注视过程会伴随麦克风变化的动画;
仍然可以通过点击麦克风开始语音输入,实测其实比注视快一点,但动作麻烦;
语音输入激活后不需要一直注视;
如果激活后不说话且视线移开,语音输入会自动取消;
可同时输入中文和英文;
该功能可在系统设置中关闭。
支持蓝牙鼠标
visionOS 1 可连接蓝牙鼠标,但连接后只会得到一个配件不兼容的提示。visionOS 2 兼容了蓝牙鼠标,通过系统蓝牙设置即可将鼠标与 VisionPro 配对。如果是 Magic Mouse,则需要开关一次 Magic Mouse 即可在系统设置中看到并配对。
visionOS 2 鼠标设置界面
目前来看鼠标兼容已经比较完善,但由于鼠标是二维输入设备,而 visionOS 是三维世界的操作系统,其鼠标的表现略有复杂,具体体验如下:
全局表现:
鼠标仅会在视线所在的窗口内工作,无法突破窗口边界。想要让鼠标去另一个窗口必须视线先过去,鼠标就会自动切换到新的窗口中;
鼠标右键和滚轮均可使用,具体取决于 App 是否兼容,和 iPadOS 的情况类似;
鼠标可以操作系统级的界面,比如主屏幕和控制中心,但鼠标无法呼出他们。
鼠标跟随视线
对于窗口化的应用(比如 Safari、备忘录、系统设置):
鼠标可以操作窗口下方的圆点和横条(关闭和移动窗口),从窗口下边缘移出去即可;
虽然鼠标可以移动窗口,但仅有平面维度的移动,无法拉近拉远;
鼠标可以调整窗口尺寸,但需要视线先看过去,让操作区域出现再从窗口边角移出;
鼠标和眼动+手势是两套独立的交互,可交替使用但无法实现「眼动+鼠标点击」的交叉操作;
鼠标的外观和 iPadOS 上一致,是一个圆点且有吸附效果。
对于有体积的应用(比如 Cut the Rope 等游戏):
光标不会显示,移动鼠标没有任何反应;
此时鼠标可配合眼动使用,按下鼠标按键等于捏合手指。
对于 Mac 虚拟显示器:
注视 Mac 虚拟显示器的窗口,Vision Pro 连接的鼠标键盘就会切换为 Mac 鼠标键盘,体验类似 iPad 和 Mac 之间的互联互通功能;
Mac 会接管鼠标键盘的全部交互,体验和 Mac 本体连接的鼠标键盘无异,鼠标滚轮、系统级的快捷键、媒体控制等操作都会直接映射到 Mac;
鼠标无法调整 Mac 虚拟显示器的窗口尺寸(可能因为 Mac 有触发角的交互,两者冲突)。
现在我们在全沉浸的环境下看到键盘了,符号和修饰键好找了很多。对于支持穿透的键盘,大概会在 1 米范围内弱弱浮现出来,手放上去就会彻底穿透。
键盘穿透效果
遗憾的是想要实现键盘穿透,需要满足诸多要求,我们将要求和体验细节汇总如下:
是否穿透是根据连接状态判断的,只有直接连接到 Vision Pro 或作为 Mac 虚拟显示器的键盘才会穿透;
Magic Keyboard 以外的键盘不支持穿透;
iPad 的 Magic Keyboard 不支持穿透;
MacBook 的键盘会连带着触摸板一起穿透;
鼠标和触控板都不支持穿透;
键盘穿透的范围内不存在再次抠像,所以用键盘穿透看其他东西是可行的;
系统设置中提供选择「仅当手靠近时穿透键盘」选项,打开后只有手附近的键盘会穿透;
该功能可在系统设置中关闭。
主屏幕视图可编辑
visionOS 2 的主屏幕图标可以自由排序了,操作逻辑和 iOS 类似,按住主屏幕上的图标直至抖动,拖拽并松手即可摆放到新的位置。另外,「兼容的 App」中的应用也可以移到主屏幕和圆形图标的 App 们平起平坐了。
编辑主屏幕
遗憾的是文件夹功能可能要等到 visionOS 3 了。
Apple 终于兑现了 visionOS 1 中标记为「即将到来」的环境之一 —— 波拉岛。这个位于南太平洋的海岛为热带雨林气候,全年温暖湿润,平均气温大约在 24°C 到 30°C 之间。进入波拉岛环境之后,立即置身于热带海岛,耳边可以听到海风和海鸥的声音,满满的度假感。亮色模式可以助你心平气和地打开 PPT,暗色模式更可以惬意地来部沙滩电影,非常放松。
波拉岛环境
visionOS 2 的环境选择界面也有微小的变化,除了还有一个「即将到来」的环境仍没有确切发布时间,所有的环境图标一律换成了小幅的空间图片,移动视角时可感受到空间感。
和朋友家人分享 Vision Pro 是许多用户都会做的事,visionOS 2 可以在 30 天内记住最后一次使用的访客的手与眼信息,该访客带上 Vision Pro 时无需再次进行初始化设定,不过目前仅能记住 1 位。
visionOS 2 客人用户更新提示
现在我们可以将 iPad 或 iPhone 通过 Airplay 投屏到 Vision Pro 中了。投屏方法与 Mac 虚拟屏幕类似,可以在 iPad 和 iPad 的控制中心投屏也可以直接在 visionOS 的控制中心中投屏。
Airplay 投屏
一些关于投屏体验的细节:
投屏进来的 iPhone 和 iPad 可改变窗口尺寸拉进拉远;
无法在 Vision Pro 中直接操作 iPhone 和 iPad;
锁屏后投屏会提示「设备已锁定」;
解锁投屏设备仍需使用设备本身进行解锁;
解锁设备时投屏里会隐藏密码键盘;
无法同时投屏两台 iPhone 或 iPad,但可以同时投屏一台 Mac + 一台 iPhone 或 iPad。
visionOS 1 中的 Mac 虚拟显示器尺寸并不算大,常让人产生「怎么还没有我显示器大?」疑问。根据 Apple 官方的演示效果,用户可以选择普通(Normal)、宽(Wide)、超宽(Ultrawide)三种比例,最大尺寸等同于两块 4K 屏幕拼在一起的分辨率。
超宽 Mac 虚拟显示器
该功能仍无法体验,根据 visionOS 2的介绍页面 ,该功能将于今年晚些时候正式推出
内容消费:照片更鲜活,视频更震撼照片 App 可将平面图片转换空间图片、支持视频裁切
visionOS 2 可将普通的平面图片直接转换为「空间图片」,这意味着手机和相机里的所有照片都可以拥有真实的空间效果。其转换效果比「真·空间图片」差距不大,足够赋予老照片新生命。转换一张空间图片,只需要在相册 App 中打开图片,点击左上角的空间图标,等上 6-10 秒钟即可。
转换为空间照片
一些平面图片转换空间图片的体验细节:
任何图片都可以(甚至截图都可以);
兼容 RAW 格式;
转换之后的图片会自动加入到照片 App 的「空间」分类中,和真·空间图片并列展示;
转换之后的图片在 iOS 上的「空间」分类中也可找到。
此外,visionOS 2 的照片应用也支持了视频裁切,实际体验与 iOS 上类似。
visionOS 1 中的 Safari ,全屏播放的视频仍会被被限制在窗口之内,而 visionOS 2 的 Safari 可将视频以一种类似影院荧幕的方式中进行播放。想要启用这个视图首先要在 Safari 中全屏播放一个视频,然后再在全屏窗口的左上角点击按钮进入该模式。
进入之后将强制进入沉浸环境,其他窗口都会消失,一张距离更远和尺寸更大的荧幕在面前出现,仿佛把近处的大电视换成了远处的荧幕,配合原生的播放控件,几乎达到了原生 App 的观看体验。下面是两种模式进行了截图,但图片所展示的效果并不明显,实际观感更加震撼一些。
全屏播放
在场景中播放
尽管各种视频平台的官方 App 可能还要等上一段时间,但 Safari 的新视频观看形式曲线救国,没有 App 也可以有不错的观看体验。
Persona 在 visionOS 2 中亦有简单的效果优化,升级之后需要重新录入 Persona。衣服颜色、表情、肤色、手部动作细节均有小幅度提升。同时,官方也将此功能翻译为「自影像」。
Persona效果增强(左为 visionOS 1,右为 visionOS 2)
此外,Persona 新增了选择「默认相机背景」的选项,类似视频会议软件中的虚拟背景功能。FaceTime 之外的 App 调用 Persona 的时候会默认带有我们选择的背景。背景可以选择纯色、场景或照片。
默认相机背景选项
visionOS 2 为 Vision Pro 带来了「呼吸检测」的功能,是通过 Vision Pro 朝下的摄像头捕捉胸部动作来实现的,初次开始正念会有一个「呼吸」权限申请。
具体的体验主要是呼吸的后半程(面前的球打开之后),其粒子的伸缩和音效的音调都会跟随我的呼吸进行。
正念 App 中的粒子跟随呼吸运动
visionOS 2 中增强了火车场景的稳定性,在控制中心打开「旅行模式」即可。
visionOS 2 旅行模式提示
以上就是 visionOS 2 开发者测试版中相对重要的更新点,正如开头所说 visionOS 2 的更新幅度并不大。结合当下恰好是 Vision Pro 登陆更多地区市场的时间,visionOS 2 的表现更像是 visionOS 1 的完全体。
它运行稳定且细节更优,但少了一些能赋予 Vision Pro 更多购买理由的惊喜。面市仅一年的 Vision 产品线,在热度渐退的 XR 领域中仍需更多时间成为人们理想中的样子。