专栏名称: Cocoa开发者社区
CocoaChina苹果开发中文社区官方微信,提供教程资源、app推广营销、招聘、外包及培训信息、各类沙龙交流活动以及更多开发者服务。
目录
相关文章推荐
51好读  ›  专栏  ›  Cocoa开发者社区

空间化保存你的记忆 iOS 17.2更新开始为Vision Pro铺路

Cocoa开发者社区  · 公众号  · ios  · 2023-11-14 11:14

正文

请到「今天看啥」查看全文



全景照片带给我一种惊艳的感受。它们仿佛开启了一扇通往其他世界的窗户,环绕着我,让我感到身临其境。这些照片几乎有了三维的效果,仿佛我将能走入其中。同时,空间视频也给我带来了极佳的视觉享受。这种3D效果、宛如鬼魅般的播放质量,无疑让我沉浸其中,而不仅仅是简单地观看视频回放。


然而,在短暂的体验过程中,我也发现了一些限制。例如,尽管我能捕捉到照片和录制的内容,但由于所有照片都是由Apple提供的,我只能通过他们的描述来了解我的体验。


15 Pro上的空间视频是如何工作的呢?

空间视频录制需要将手机保持水平状态。iPhone 15 Pro在横向模式下同时使用主摄像头和超广角摄像头来创建3D视频。它一次记录两个1080p、30fps的视频,并通过计算摄影解决镜头和距离差异。这些文件以HEVC格式保存,与其他Apple视频文件类似,存储大小约为每分钟130MB。值得注意的是,由于文件被限制为相对较低的1080p和30fps分辨率和帧率,这在一定程度上影响了视频的质量。



您可以通过Messages或AirDrop分享您录制的空间视频剪辑,但在其他应用中可能会压缩文件并丢失3D数据。不过,这些视频剪辑可以在任何地方作为日常视频文件使用,这对于那些想要选择“特殊”3D视频格式的人来说无疑是一个好消息。


要在Apple的Camera应用程序中设置或查看Spatial Video模式,您需要使用形状像Vision Pro的切换开关。这将限制您的视频分辨率和帧速率,并要求您以横向模式拍摄。目前没有提供3D垂直视频的功能。有人建议我将摄像头转向侧面,并与物体保持一定距离。当我拍摄制作寿司的人时,我靠近了一些并且效果非常好。我在一个光线充足的房间里进行录制,但空间视频录制模式阻止我调整亮度和对比度,这意味着在低光环境下录制可能会产生比普通视频更多的颗粒感。


空间视频的演变与编辑

Apple的空间视频,那是一种沉浸式的3D体验,采用HEVC格式,但目前没有API支持,这意味着第三方应用还无法识别这些文件。然而,未来的发展或许会改变这一现状,因为开发者总是能找到解决之道。而且,除了在Vision Pro上观看,还没有其他的3D视频观看方式,这无疑是一种局限性。


空间3D录制,理论上,它可以被应用于如Meta Quest 3等虚拟现实(VR)头显。这是一种直接获取的立体视频,不依赖激光雷达或深度感知技术进行全移动空间捕获。然而,目前这还未被纳入Apple的计划之中,我们期待未来会有所改变。


录制时间上没有任何限制,理论上你可以制作空间视频的3D长片电影。然而,这些视频片段只能在iPhone或Vision Pro中进行修剪,无法在其它设备上进行编辑,这不得不说是一种遗憾。好消息是,Final Cut Pro,Apple的视频编辑软件预计在明年会获得空间视频编辑的支持。如果你打算在Mac或iOS视频编辑器中编辑这些视频文件,它们最终将以2D格式呈现。


无法在4K分辨率下录制视频也是一种遗憾。考虑到Apple的Vision Pro头显具有惊人的质量和分辨率,一旦在头显中查看iPhone照片,并对它们进行缩放或在环绕视图模式下查看全景照片,高分辨率和高流畅度的需求就变得尤为明显。这些空间视频已经表现得非常好,但如果有更高流畅度、更高清晰度的60fps或4K格式,那无疑会更好。也许未来的某一天我们能够实现这样的录制体验。


记忆的3D未来







请到「今天看啥」查看全文