Apple 在 iPhone 15 Pro 上引入空间视频拍摄

Apple 在 iPhone 15 Pro 上推出了“空间视频”功能,使用两个后置摄像头录制立体影像,旨在为即将推出的 Vision Pro 头显提供沉浸式播放。评论者围绕镜头间距较小的情况下 3D 效果能有多逼真、是否使用了 LiDAR 或 AI 来增强深度,以及 1080p、30 fps 是否足以满足高分辨率 VR 显示展开讨论。另一些人指出,这些视频采用已公开的 MV-HEVC 格式编码,也已经可以转换为非 Apple 头显播放,但质疑它究竟会成为主流媒介,还是会像 Live Photos 一样走向小众。

近距镜头带来的深度感知

  • 一些评论质疑,iPhone 摄像头之间约 1–2 cm 的间距是否能产生有意义的 3D 效果。
  • 另一些人表示效果是可感知的,但很微妙,尤其是与人眼更宽的 6–7 cm 间距相比。
  • 还有人认为 Apple 可能会用算法“夸张”立体感(增加视差并修补空隙),以模拟更宽的基线。

LiDAR 与深度重建

  • 目前不清楚空间视频是否 वास्तव上使用了 LiDAR;Apple 的文章并未说明。
  • 有人认为 LiDAR 可能有助于构建深度图、改善小基线下的立体效果,或提供有限的视角相关视差。
  • 也有人指出,手机级 LiDAR 的测距范围有限、在日光下噪声较大,可能更适合校准,而不是每帧密集深度重建。

格式、开放性,以及非 Apple 播放

  • 空间视频本质上只是带有已公开配置文件的 MV-HEVC 立体视频,因此任何平台都可以实现播放。
  • 现有工具已经可以将其提取为适合 Quest、Pico 等头显的左右并排/上下堆叠格式;但纵横比可能会比较别扭。
  • 有人希望 Apple 能直接支持转换并采用开放标准,以便更广泛地用于 VR。

立体 vs 6DoF

  • 结论基本一致:录制内容是立体视频,而不是完整的 6 自由度。
  • 讨论涉及通过深度图和修补(inpainting)实现理论上的 6DoF,但也承认存在遮挡限制,而且需要大量计算。

分辨率、帧率与感知质量

  • 对一些人来说,1080p30 SDR 显得不够惊艳,尤其是考虑到 Vision Pro 的高表观像素密度,以及手机视频长期以来被 4K60 所塑造的期待。
  • 另一些人认为 30 fps 已经足够(电影也是 24 fps),而头显的视场角加上重采样可能会让 1080p“足够好”,不过关于插值和缩放损失的争论仍在继续。

硬件布局与 iPhone 15 Pro 独占

  • 一个被强调的限制拍摄机型到 iPhone 15 Pro 的关键原因,是广角与超广角镜头在同一轴线上的新排列方式。
  • 争论的焦点在于 14 Pro 是否可以通过裁切/旋转支持该功能;有人认为技术上可行,但会降低用户体验和有效分辨率。

使用场景、生态与长期性

  • 有人将空间视频视为一种情感驱动、偏重记忆保存的功能,类似 Live Photos,而这类功能对一部分用户来说价值很高。
  • 也有人担心它会变成另一种 Apple 独占、最终悄然消退的小众格式。
  • 存储膨胀被认为可能是一个商业激励因素。
  • 第三方低成本头显(例如基于手机的“Cardboard 风格”设备)正在把自己定位为无需购买 Vision Pro 也能观看此类内容的方式。