最近苹果Vision Pro的动态明显增多,第二代苹果XR头显爆料不断,又传苹果手机的系统UI也将引入Vision Pro的设计原则,这或许预示着,苹果将在WWDC期间为Vision Pro带来重大更新。外界普遍认为昂贵的Vision Pro已经“凉凉”,实际上苹果并没有放弃它,反而在不断提升Vision Pro在苹果生态系统的影响力。
20+部沉浸式视频和专用视频软件,苹果实现弯道超车
在XR影视内容方面的投入,苹果还是那只领头羊。
一年前,Vision Pro尚未正式发布时,苹果就单独为其推出空间视频格式“Apple Immersive Video”(苹果沉浸式视频),通过Spatial Audio捕捉的180度8K 3D录像让用户身临其境。并宣称这将带来一系列突破性的娱乐体验。如今看来,苹果也确实兑现了这项承诺。
最初Vision Pro的内置应用Apple TV+、Disney+、Max等是观看这些8K 3D视频内容的主要平台。其首发沉浸式视频阵容主要为音乐演出类《Alicia Keys: Rehearsal Room》,极限冒险类《Highlining》,史前时代类《Prehistoric Planet Immersive》等等,此外在Apple TV+还能观看超过150部3D电影,让家里的空间随时变成个人影院。
苹果沉浸式视频内容选题的多样化和观感上限在不断提升,目前已保持每月更新至少一部作品的节奏,作品总数已超过20部。详情可阅读:《苹果沉浸式电影首秀:内容震撼,然后呢?》《触手可及的音乐现场,苹果和Metallica创下沉浸式视频高峰》
图源:VR陀螺整理
一直以来,苹果都没有合适的渠道或方法来管理这些沉浸式视频。随着沉浸式视频内容列表的不断丰富,苹果也有了新的动作。最近苹果悄然在App Store上线了一款全新的免费视频软件“Apple Immersive Video Utility”,可用来管理沉浸式视频库内容,并支持多台Vision Pro设备串流播放。
根据App Store上的介绍,“Apple Immersive Video Utility”应用适用于macOS和visionOS,用户可在Mac上导入、整理、打包和查看苹果沉浸式视频内容,并结合visionOS端的应用,直接在Vision Pro上连接并查看沉浸式视频,目前仅支持英文版本。
可见该应用的重点是能给其他访客演示沉浸式视频,比如直接把Vision Pro递给其他用户,然后自己用Mac直接操作,为他们播放沉浸式视频,这在一些XR线下体验店、会议办公、展览展示、教育培训等场景的使用都将更加便捷。
在正式使用该应用前,需要准备一台装有Apple Silicon、运行macOS 15.0或更高版本的Mac,以及装有visionOS 1或更高版本的Vision Pro才能有效使用Apple Immersive Video Utility应用。
连接过程也相对简单,在Mac和Vision Pro上同时打开Apple Immersive Video Utility应用,并让设备都连接至同一个Wi-Fi网络上。如果使用有线连接,则需要使用USB-C电缆连接到Vision Pro的开发者配件(Developer Strap)。在Mac上,点击边栏底部的设备名称进行搜索后就可以连接一台或多台Vision Pro。
网友“AppealMundane5486”分享了一个使用尼康Z8+佳能双鱼眼相机,通过定制转接环拍摄的150007500(单眼75007500)分辨率视频文件,下载视频后,可通过格式转换工具“Spatial-Metadata”将原视频SBS VR180转换为MV-HEVC格式。苹果在AVFoundation中提供了对MV-HEVC编码和解码的支持。感兴趣的用户可以通过以下相关链接进行尝试。
https://drive.google.com/file/d/1Y2LVy-lXY6zRZwMkWsC5TaXtj36qKbIq/view ?usp=drive_link
https://github.com/Kartaverse/Spatial-Metadata
https://support.apple.com/zh-hk/guide/immersive-video-utility/welcome/1.0/web
软硬协同共筑苹果沉浸式视频内容生态
苹果一直在推广沉浸式视频,现在既可以用手机录制空间视频,又支持第三方工具和应用,例如专业级Blackmagic相机和DaVinci Resolve软件,以及《Prima Immersive》和《Story: Spatial Storytelling》应用等。
Blackmagic URSA Cine Immersive摄影机
近段时间,全美广播电视协会 (NAB) 大会上首次公开了从摄像机到苹果Vision Pro的完整沉浸式视频工作流程,从使用Blackmagic RAW格式采集,到DaVinci Resolve处理,再到使用MV-HEVC元数据在Vision Pro上进行原生沉浸式播放。整套方案非常适合广播电视和远程Immersive 180采集环境,最终可实现真正的单眼8K分辨率播放,无需任何预渲染,也不会造成双通道质量损失。
NAB大会期间,Apple Immersive Video Utility的应用也正式发布了,博主“hugh.hou”作为首批亲身体验它的创作者之一,在现场体验并分享了相关信息。
他表示:“这是我整个职业生涯中见过的最佳沉浸式图像质量,甚至比Apple TV上苹果自家的沉浸式内容还要好。没有色差,角落里没有立体冲突,只有纯粹、舒适的3D深度和极其清晰的分辨率——即使在特写镜头中也是如此。
借助Apple Immersive Video Utility应用观看由Blackmagic URSA Cine Immersive摄影机录制的视频,同一视频可以在空间视频和沉浸式180度之间无缝切换,控制权完全掌握在观看者手中。沉浸感太强?点击按钮,同一内容将以16:9的空间格式播放。想要完全180度?轻点一下,即可回到沉浸式模式。空间视频和沉浸式180度视频之间不再有界限。”
图源:hugh.hou/Instagram
尽管官方的介绍文字中没有明确指出,但Apple Immersive Video Utility应用似乎是专为视频领域专业人士和内容创作者的后期制作工作而设计的,目前所有用户都可下载该应用。
另一方面,第三方沉浸式视频应用也开始崭露头角,不限于视频转码、视频制作等领域。而Vision Pro上的一款第三方原创沉浸式节目应用“Prima Immersive”,在用户群体中取得了不错的口碑。今年2月,Prima Immersive上线了一场来自蓝草乐队AJ Lee & Blue Summit的16分钟沉浸式音乐会,节目售价3.99美元,用户可以免费试看1分钟的沉浸式预告片。
该应用的开发商Immersive Company表示,该节目使用了一款名为Immersive Camera Two的定制摄像机拍摄,拍摄规格为8K单眼分辨率、90 FPS、支持HDR和空间音频。用户普遍反馈画面清晰度甚至优于苹果第一方拍摄内容。Vision Pro+超清3D沉浸式视频+第三方软硬件,已经开始成为苹果沉浸式内容生态的重要一环。
为了扩展Apple Immersive Video的可用库,需要有工具来创建和管理海量视频文件。或许苹果推出低价版Vision Pro,很快就能看到创作者加入到沉浸式视频的阵容中,也会出现更多针对该视频格式的硬件和软件解决方案。
苹果正式掀起一场深度体验革命
现在我们也可以简单谈谈苹果的沉浸式视频。
实际上,最早进军3D VR180格式的是谷歌,然而发展途中不尽如人意,谷歌后来在2019年几乎放弃了沉浸式视频的道路。而苹果的沉浸式视频拥有的8K分辨率,90fps的帧速率和16档动态范围,让沉浸式视频在空间计算时代再次兴起。直到现在,陀螺君还记得第一次在Vision Pro观看苹果沉浸式视频的那份惊喜。
从前文整理出的一年以来苹果发布的沉浸式视频主题来看,这是苹果在利用人类视觉和听觉刺激深度体验的感官认知。作品中出现了各种处在高空鸟瞰、在水下深潜的镜头,容易激发人们对极限运动挑战的担忧和对不熟悉的生物共处的恐惧等,苹果将可见性放在了沉浸感的首位。
2024年苹果发布的一系列沉浸式视频中,大部分内容属于技术演示,体验时长在4至20分钟之间,以纪录片形式为主,加之简单的叙事。
苹果沉浸式视频与现在的主流电影形式有着共同点:空间音频与环绕声、画面高清色彩分明、3D、巨幕大屏等等。早期的沉浸式视频并非都是具有叙事性的,这也跟早期电影的实验性类似。例如卢米埃尔兄弟于1986年拍摄的《火车进站》一般,能以捕捉到的运动、动作镜头获得强有力的感官和认知的冲击力,现在的3D效果则进一步放大了这种视觉体验。
直到《西线无战事》导演Edward Berger执导了17分钟的短片,苹果沉浸式视频中终于出现精心处理的蒙太奇剪辑,我们能看到连贯的镜头和情节、特写镜头中人物的情绪变化和对话等,这与我们平常在电影院看到的画面并无太大差异,却是“首部使用苹果沉浸式视频拍摄的剧本电影”范例。
苹果沉浸式视频从最初的技术演示逐步迈向具备深度叙事的剧本电影创作,无疑是一次重要的创新。尽管Apple Immersive Video发布之初并未获得太多的关注,但苹果在沉浸式视频领域动作频频,未来有望进一步降低用户门槛,推动沉浸式视频从小众走向大众。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
版权申明:本文为VR陀螺原创,任何第三方未经授权不得转载。如需转载请联系微信:vrtuoluo233 申请授权,并在转载时保留转载来源、作者以及原文链接信息,不得擅自更改内容,违规转载法律必究。文中有图片、视频素材来自互联网或无法核实出处,如涉及版权问题,请联系本网站协商处理。
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息