两次体验苹果眼镜后，他说：这个技术可能会成为Vision Pro的杀手级应用|VR|AR|iOS17.2|不止生动，宛若临境
警长按语：
作为XR业界最早介绍并倡导重视空间视频的科技媒体人之一，警长一直致力于解析空间视频的原理、特性及其价值。在各种行业交流中，警长不断强调这一技术的重要性。警长坚信，XR行业的发展不能仅仅依赖“高大上”的游戏应用，更要重视那些“接地气”、能够贴近普通人日常生活的泛视频内容。游戏做的再好，受众也永远只有一部分人，但泛视频内容却具有更低的制作成本和更广泛的受众基础，它是XR行业实现破圈的希望所在。
近期，苹果在其iOS 17.2公测版上推出了iPhone空间视频拍摄功能，这一功能迅速引起了行业的广泛关注。在此背景下，美国资深科技记者兰斯·尤兰诺夫（Lance Ulanoff）第二次亲身体验了苹果的Vision Pro及其与iPhone空间视频协同。他体验后撰文只写了一个主题，那就是空间视频。为了让读者更好地了解这一新兴领域，警长将尤兰诺夫的文章进行了全文翻译，全文如下：
🔺（图片来源：wired）
迄今为止，我已有两次Apple Vision Pro的体验：一次是六个月前，Apple宣布推出其混合现实头显之日；另一次则是在几小时前。初次体验时，我仅略窥头显潜能，但现在，我仿佛成了Vision Pro的行家。除了亲自体验了用Vision Pro拍摄空间视频，我还使用iPhone 15 Pro为拍摄空间视频并传到Vision Pro。
苹果今日发布的iOS 17.2公测版，将首次让我们大多数人接触到空间视频。尽管最初体验可能并不全面，但你的iPhone 15 Pro和iPhone 15 Pro Max将在iOS 17更新后增添新的视频拍摄功能，可在设置中的相机格式里切换。待Vision Pro发售后，iPhone端拍摄的空间视频就可以通过iCloud自动同步给Vision Pro。
我不仅提前体验了iPhone 15 Pro的新功能，还通过Apple Vision Pro观看了手机拍摄的空间视频——我现在意识到，空间视频可能会成为Vision Pro的杀手级应用。
关键的iPhone设计调整
🔺（图片来源：Apple）
要了解苹果如何深谋远虑地发展产品，只需审视你手中的iPhone 15 Pro或iPhone 15 Pro Max，你会发现一个细微的设计和功能变更，显然是为即将发布的Vision Pro准备的。苹果在设计iPhone 15 Pro和Pro Max时已考虑到Vision Pro的空间视频需求，将13mm超广角摄像头从iPhone 14 Pro上48MP主摄的对角线位置移至主摄正下方，而长焦摄像头则被移至超广角的原位置。
这样的重新定位使得iPhone 15 Pro和iPhone 15 Pro Max能够在横向模式下拍摄立体或空间视频。
这不只是同时通过两个镜头录制视频，并从不同角度拍摄同一场景以营造虚拟3D效果。由于13mm超广角摄像头拍摄的画幅更大，苹果的计算摄影技术必须对超广角视频进行裁剪和缩放，以匹配主摄像头的画面。
为简化操作，苹果只捕捉两个1080p/30fps的HEVC（高效视频编码）格式视频流。双流导致文件略大，大约一分钟的视频约130MB。
这些空间文件虽然技术上是新的媒体格式，但在iPhone或Mac上看起来与其他2D视频无异。你可以剪辑这些视频，但不能进行其他编辑，以免破坏两个视频流间的完美同步。
拍摄过程
🔺图：随iOS 17.2公测版更新，空间视频拍摄功能现已登陆iPhone 15 Pro和15 Pro Max，今日起任何人都可下载（需更改设置以接受测试版更新）。请注意，只能拍摄横向空间视频。（图片来源：Apple）
我使用运行iOS 17开发者测试版的iPhone 15 Pro进行了测试。我们已在相机/格式设置中启用了Apple Vision Pro的空间视频功能。在相机应用的视频拍摄模式中，我选择了一个外观像Vision Pro的小图标来启动空间视频模式。
选择后，手机指引我将手机旋转90度至横向模式（一点击Vision Pro图标便自动旋转）。我还注意到，默认开启了空间视频的“图像水平工具”，因为水平拍摄对于空间视频至关重要。这主要是考虑到在Vision Pro头显中观看视频时的体验——靠近脸部的空间视频若画面变化过于剧烈，可能引起不适。
🔺图：这里是在最新的iOS 17.2公开测试版中启用空间视频的方法。（图片来源：Future）
同样，我发现最佳拍摄距离为3至8英尺（警长注：约0.9至2.4米），这样拍摄对象在最终视频中不会显得过大。
我拍摄了几个短暂的空间视频，内容包括一位女士在制作寿司。我尝试将寿司放在前景，她在背景中，以增加场景深度。尽管我可能多想了一些，但拍摄过程与我以往的体验无异，我试图打造一些引人入胜的空间视频。
尽管iPhone需要进行一系列计算才能将你拍摄的内容转化为空间视频，但你可以即时回放。我们交出手机（给苹果工作人员），几分钟后就可以在Vision Pro上观看这些视频。
🔺图：拍摄空间视频的方式示意（图片来源：Future）
你好，老朋友
虽然我担心经过这么久，我可能已忘记如何使用Vision Pro，但实际上我只用了几分钟就再次熟悉了它的眼动、手势和数字表冠控制。它是一款惊艳的尖端技术产品。我需要交出我的眼镜进行验光，让苹果工作人员为我定制蔡司镜片（使用头显时不戴眼镜）。这提醒了我，与iPhone不同，Vision Pro提供的是一种量身定制的体验。
在此次体验中，我没有使用额外的头顶带，首次感受到了头显的全部重量。我尽力调整头带，小心不过度紧绷，但我不确定是否找到了最佳位置（提醒自己：在正式评测时要记得试用额外的头带）。
🔺图：（图片来源：Apple）
自我上次体验Vision Pro以来，出现了一些新的控制方式——比如，现在我可以通过看向窗口边缘并模拟捏合与拉动下方出现的白色曲线来调整窗口大小。第二次尝试就成功了，然后这就变成了第二天性。（警长注解：第二天性原文为"Second nature"， Second nature是一个英语习语，指的是某种技能、行为或习惯变得如此自然和熟练，以至于做起来就像是本能一样，不需要刻意思考或努力。当某事变成了某人的“second nature”，意味着他们可以非常自然和轻松地进行这项活动，就像呼吸或走路一样自然。）
我深入体验了Vision Pro的照片应用，只需通过眼动和手指轻点便能轻松导航——用手指捏合与拖动即可浏览照片和画廊。进行这些手势时，我通常将手放在腿上或附近。我浏览了用iPhone 15 Pro拍摄的24MP和48MP照片。放大这些照片后，我可以将它们填满视野，并通过捏合与拖动在图像中移动，观赏例如红色连衣裙上蕾丝的精细细节。
我还欣赏了一些惊人的全景照片，特别是一张拍摄于亚利桑那州纪念碑谷的照片和一张展示冰岛冰冻瀑布的照片。这些照片让我仿佛身临其境。正如我之前在Vision Pro的初体验中所说，现在终于有了用iPhone拍全景照片的好理由。
空间视频体验
🔺图：这段空间视频体验非常震撼。那些泡泡就像是漂浮在我脸旁边。（图片来源：Apple）
Vision Pro照片应用中新增了一个“空间”类别。我在这里看到了一些内置的空间视频样例，以及我用iPhone 15 Pro拍摄并通过iCloud同步到Vision Pro的两个空间视频。包括一个我在WWDC 2023上看到的营火场景、一个生日派对、一个家庭露营的温馨场景，以及一个家庭厨房烹饪的场景，我的最爱是一位母亲和孩子一起玩泡泡的画面。
这些空间视频可以在窗口或全屏模式下观看，其边缘与你的视角或沉浸式环境（如新的约书亚树环境）融合，后者用360度的图像取代了你的真实世界。在泡泡视频中，泡泡不仅在场景中飘动，而且仿佛更接近我的脸，让人忍不住想伸手去触摸。
在我拍摄的厨房场景中，一家人围坐在厨岛上吃东西，而父亲在后面做饭。3D效果一开始让父亲看起来很小，但当他转身向家人走来时，那种效果就消失了。
iPhone 15 Pro拍摄的空间视频如何处理焦点还不太清楚，它可能是默认使用长景深，或者采用其他方式实现3D效果。在拍摄时，你可以通过轻触iPhone屏幕来设置焦点，但编辑时不能更改。
我拍摄的两个短视频效果令人印象深刻。我努力在拍摄过程中把一块寿司放在前景，最终效果正如我所愿。深度效果既有趣又不过分，看起来就像我当时所想象的那样逼真，这是传统摄影所无法做到的。
我没有尝试的是站起来走近空间视频。这些视频并不是可以走进去四处移动的类型，你看到的只是两个略有不同的视频，创造了一种深度错觉。
关于音频，它也被完美捕捉，听起来很自然。我没有注意到任何空间音效，但这些视频也不是跨音源拍摄的。
🔺（图片来源：Apple）
未来展望
如果你现在安装了iOS 17.2公测版，你就可以开始拍摄空间视频了。从现在到Apple正式向消费者推出Vision Pro的时候，你可能会拍摄很多空间视频。这些视频（在手机上）看起来很普通，但想象一下，当你最终购买了Vision Pro，你届时就直接就有了一大批空间视频，你能看到一个充满空间视频的图库。加上你那些在头显上看起来令人惊叹的全景照片，这些可能就是让你最终决定购买Apple头显的原因。
当然，价格是一个大问题。Apple对Vision Pro定价3,499美元，不包括可能需要的头带配件。Apple可能会提供Vision Pro的分期付款计划，让人们可以通过每月付款的方式购买。如果你购买了iPhone 15 Pro，可能还会有折扣。也许不会。无论Apple如何推进，空间视频可能是迄今为止最有说服力的（购买）理由，即使你没有Vision Pro，也至少会希望拥有一台。
警长后记：
至明年年底，支持空间视频功能的iPhone用户预计将达到8000万至1亿台之间。与之形成鲜明对比的是，即便将XR行业多年的发货量累加，也难以匹及这一庞大的数字。苹果让其手机支持空间视频，仿佛是将XR行业这个“小朋友”抱到了巨人的肩膀上。这一战略有望使XR行业借助手机行业这个大平台，看的更高，走得更远。警长坚信空间视频的兴起不仅将引领XR行业的革新，也有潜力深刻改变整个手机行业的发展轨迹。
兰斯·尤兰诺夫为他的文章写了这样一个副标题：It's not just lifelike – it's like life。警长思考再三，将其翻译为：不止生动，宛若临境。
🔺图：AI基于It's not just lifelike – it's like life生成的图片
随着空间视频技术的迅猛发展和广泛应用，XR行业正迎来前所未有的变革和机遇。为了让各位读者更深入地了解这一领域的最新动态和深度分析，警长在公众号上会持续分享相关内容。不论您是技术爱好者还是行业专业人士，相信在公众号“AR圈”，您都能找到值得关注的精彩内容。敬请关注公众号“AR圈”，一起探索XR行业的未来之路。
往期推荐
投稿/商务/转载/合作
请联系微信：XRInstitute
点个在看你最好看