我有过两次AppleVisioPro体验:一次是六个月前,即Apple发布混合现实耳机的那天,另一次是几个小时前。第一次体验时,我感觉自己已经了解了耳机的功能,而今天,我感觉自己已经具备了成为VisionPro潜水员的资格。我的意思是,在不仅在VisionPro上体验了空间视频,而且还使用标准iPhone15Pro为耳机拍摄了这种形式的视频之后,我还能有什么感受呢?
现在,您可能知道苹果今天发布的iOS17.2公开测试版将是我们大多数人第一次获得空间视频的体验。当然,最初这只是体验的一半。随着iOS17更新,您的iPhone15Pro和iPhone15ProMax将添加一个新的摄像选项,您可以在“设置”中的“相机格式”下切换该选项。一旦VisionPro于明年某个时候发货,该格式将自动为已将混合现实设备连接到其iCloud帐户的VisionPro用户打开。
我不仅抢先体验了新的iPhone15Pro功能,还体验了在价值3,499美元的AppleVisionPro耳机上观看的逼真内容是什么样子,现在我意识到空间视频可能是VisionPro的杀手级应用。
要了解苹果在产品开发方面是如何进行长期游戏的,你只需看看你的iPhone15Pro或iPhone15ProMax,你就会发现你可能错过的微妙设计和功能变化,但这显然是关于尚未发布的VisionPro的一切。事实证明,苹果在设计iPhone15Pro和ProMax时考虑了VisionPro的空间需求,将13mm超广角摄像头从48MP主摄像头斜对面的位置(在iPhone14Pro上)移至垂直下方的位置主摄像头,在14Pro上被长焦摄像头占据;长焦相机移至超广角相机的旧插槽。
通过重新定位这两个镜头,苹果使拍摄立体或空间视频成为可能,但前提是您以横向模式握住iPhone15Pro和iPhone15ProMax。
据我了解,这不仅仅是同时通过两个镜头录制视频并以稍微不同的角度拍摄同一场景来创建虚拟3D效果的问题。由于13毫米超宽相机拍摄的帧要大得多,因此Apple的计算摄影必须裁剪和缩放超宽视频,以匹配来自主相机的帧。
为了简化问题,Apple仅以HEVC(高效视频编码)格式捕获两个1080p/30fps视频流。由于采用双码流,文件大小会稍大一些,大约一分钟的视频会创建一个130MB的文件。
尽管这些空间文件表面上是一种新的媒体格式,但它们在iPhone或Mac上的显示方式与任何其他2D视频文件一样。然而,也会有限制。您可以修剪其中一个视频,但不能应用任何其他编辑,以免破坏两个流之间的完美同步。
在测试中,我使用了运行iOS17开发者测试版的标准iPhone15Pro。我们已经在“相机/格式”的“设置”下启用了AppleVisionPro的空间视频。在相机应用程序的视频拍摄模式中,我可以选择一个小图标,它自然看起来就像VisionPro一样,以空间视频模式进行拍摄。
当我选择该选项时,手机会引导我将手机旋转90度,使其处于横向状态(只要点击VisionPro图标就会旋转)。我还注意到,当您使用空间视频时,图像级别工具(对于所有格式都是可选的)默认处于打开状态。这是因为空间视频在水平拍摄时效果最佳。事实上,在你知道自己可能无法保持手机水平的情况下拍摄它们(例如动作镜头)可能是一个坏主意。这主要是关于在VisionPro耳机中观看成品的感觉-3D视频中距离您脸部几厘米的大量运动可能会引起不适。
同样,我发现最好与拍摄对象保持三到八英尺的距离,这样它们就不会在最终的空间视频中看起来像巨人。
我拍摄了几个女人准备寿司的空间短片。我尝试将寿司放在前景,将她放在背景,以使场景有一定的深度。拍摄这段视频与我拍摄的其他视频没有什么不同,尽管我在尝试制作一对有趣的空间视频时可能想得太多了。
尽管iPhone正在跳过一堆计算环节来根据您拍摄的内容创建空间视频,但您应该能够立即播放视频。我们交出了手机,几分钟后,我们就可以在VisionPro中观看视频了。
虽然我担心这几个月之后我会不记得如何使用VisionPro,但我只花了一两分钟就重新适应了它的凝视、手势和基于数字表冠的控件。它仍然是一项极其直观的尖端技术。我仍然需要交出眼镜进行处方测量,以便我们确保Apple插入了正确的蔡司镜片(使用耳机时不戴眼镜)。这提醒我们,与iPhone不同,VisionPro将提供某种程度的定制体验。
在第二次佩戴过程中,我没有可选的头戴带,这意味着我第一次感受到头带的全部重量。我尽力使用耳机背面附近的控制旋钮来调整头带,同时小心不要将其拧得过紧,但我不确定我是否找到了最佳位置(自我注意:在使用时获取额外的头带)您终于可以评测其中一款耳机了)。
自从我上次尝试VisionPro以来,出现了一些新的控件-例如,我现在可以通过查看窗口边缘,然后通过虚拟捏拉出现在窗口正下方的白色曲线来调整窗口大小。我在第二次尝试时就得到了这个,然后它就成了第二天性。
我终于仔细查看了VisionProPhotos应用程序,使用凝视和手指点击即可轻松导航-您可以用任意一只手捏合和拉动来滑动浏览照片和图库。在执行这些手势时,我通常将双手放在膝盖上或靠近膝盖。我查看了用iPhone15Pro以24MP和48MP拍摄的照片。放大这些照片很有趣,所以它们充满了我的视野,然后捏并拖动以在图像中移动并看到一些精致的细节,例如红色连衣裙上的蕾丝。
我看了一些令人难以置信的全景照片,其中一张来自亚利桑那州的纪念碑谷,另一张来自冰岛,其中有一个冰冻的瀑布,几乎一直围绕着我。正如我在最初的VisionPro体验中所指出的,终于有了用iPhone拍摄全景照片的理由了。
VisionProPhotos应用程序中有一个名为Spatial的新媒体类别。我在这里观看了一些罐装空间视频,最后是我在iPhone15Pro上拍摄的一对空间视频。我在WWDC2023体验期间看到了篝火场景、生日庆祝活动、家庭露营的亲密场景、家庭在厨房做饭的场景,以及我最喜欢的母亲和孩子玩泡泡的场景。
您可以在窗口或全屏中观看这些空间视频,其中边缘与您的直通视图或沉浸式环境(新环境是约书亚树)混合,用360度环绕图像取代您的现实世界。在气泡视频中,气泡似乎漂浮在场景中并靠近我的脸;我有一种想伸出手去触摸它们的冲动。
在厨房场景中,一家人坐在厨房岛周围吃饭,父亲在后台做饭,3D效果最初使父亲看起来像一个小个子。当他转身靠近家人时,奇怪的效果就消失了。
目前尚不清楚iPhone15Pro拍摄的空间视频如何处理焦点,以及是否默认使用长景深或使用不同的东西来实现3D效果。您可以在空间视频拍摄期间通过点击iPhone屏幕来设置焦点,但您无法在编辑中更改此设置。
如果我自己这么说的话,我的两个短片令人印象深刻。拍摄过程中,我尽力将厨师递给我的一块寿司放在前景中,在最终的结果中,我得到了我想要的效果。深度很有趣,但并不霸道或刺耳。相反,这个场景看起来和我记忆中的一模一样,充满了栩栩如生的深度。这对于传统的摄像来说是不可能的。
我没有站起来并靠近空间视频。同样,这些视频也不是您可以进入并移动的视频。您仍然只抓取两个略有不同的视频来创建深度错觉。
如果您想知道,音频也会被捕获,这听起来很正常。我没有注意到任何形式的空间效果,但这些视频不是用跨越房间距离的音频源拍摄的。
因为当你安装iOS17.2公共测试版时,你将拥有空间视频拍摄功能,从现在到苹果最终开始向消费者销售VisionPro,你可能会拍摄大量空间视频。这些视频看起来完全正常——但想象一下,当您最终购买VisionPro时,可以浏览一个空间视频库。这一点,以及你的全景图在设备上看起来令人惊叹的事实,可能最终是你购买苹果耳机的原因。
当然,这里最大的障碍因素是价格。苹果计划为VisionPro定价3,499美元(约2,800英镑/5,300澳元),不包括头带配件,正如前面提到的,你可能需要这个配件。这意味着,虽然数百万人可能拥有iPhone15Pro并能够拍摄空间视频,但只有少数人能够在VisionPro上观看它们。
也许苹果会将VisionPro纳入其融资计划之一,以便人们可以按月付费还清它。如果你购买iPhone15Pro也可能有折扣。也许不会。无论苹果做什么,空间视频可能是迄今为止最引人注目的案例,如果你没有拥有VisionPro,那么至少希望你拥有。