文/VR陀螺 冉启行
2023 年,是“科技变革”集中的一年。
以 ChatGPT 为首的生成式人工智能席卷全球,并逐步深入落地到各行各业,AI 大模型正在颠覆人与机器的沟通方式,深入更多 C 端应用,科幻电影中的人形 AI 机器人加速入场。
双碳战略下,“第三空间”的汽车行业即将完成最后一公里的蜕变转型。以特斯拉、蔚小理为代表的新能源汽车加速推动智能座舱的全面升级,华为鸿蒙座舱系统也拟重塑消费者的驾乘体验,开启车联网时代。
聚焦消费电子产品上,苹果更是带来了号称下一代计算平台的 Vision Pro,传统 PC、智能手机正面临新一轮的市场竞争,空间计算让“屏”不再止于“实体屏”,颠覆想象力与传统认知。
回顾 2023 年 XR 十大高频词,让我们 2024 年更好出发。
品牌向、产品向
一、苹果Vision Pro(avp)
苹果 Vision Pro 是 XR 产业 2023 年最大的关键词,真正出圈的一款 XR 硬件产品。
谷歌趋势显示,按“产品线 Apple Vision Pro”的热度趋势,从 2023 年 6 月初在 WWDC 正式发布该硬件以来,相关热度一直呈现较大的搜索热度,基本维持在“50”以上。不管是从 XR 产业角度,还是整个消费电子行业,Vision Pro 的相关动态一直牵引着大家的注意力。
Vision Pro 是一款颠覆性产品。正如苹果在推出 iPhone 时取消了屏幕手写笔一样,Vision Pro 也不需要任何物理控制器来使产生交互,Vision Pro 内置了眼动追踪模组,并支持强大的手势交互。
苹果 CEO 库克称它会是继 Mac、iPhone 后的一代计算平台,所以在 Vision Pro 上,我们看到了极尽奢华的硬件配置:2×单眼 4K Micro-OLED 微显示器、PC 级 M2+R1 芯片组合, 12 个摄像头、6 个麦克风和 5 个传感器.......
苹果 Vision Pro 在 2023 年可谓是进一步打开整个 XR 圈的想象力,不仅仅是在极其强大的硬件配置上,还有它打出的空间计算口号,更是让人热血沸腾,仿佛看见了下一代计算革命浪潮的来临。
二、Meta Quest
Meta 作为全球 VR 消费市场霸主,截至 2023 年,官方透露已售出超 2000 万台 Quest 头显。这是过去几年, Meta 用 299 美元的 Quest 2,每季度亏损数十亿美元换来的 VR 消费市场的重要里程碑。
不可否认,作为先行者的 Meta,扎克伯格对于 XR 业务一以贯之,为整个产业起量的巨大推动作用。在 Meta Quest 的各种动态中,我们也能经常看到扎克伯格的身影,CEO 亲自下场做 PR。
2023 年,在 Reality Labs 持续运营亏损数百亿美元,以及经济下行周期带来的 Meta 广告业务压力下,Meta 在经营策略方面也开始“务实”了,499 美金的 Quest 3 比 Quest 2 首发时足足高出了 200 美金(约1400元)。
内容生态方面,Meta 今年的重心显然放在了更符合时代发展的 MR 内容之上,通过 Quest 3 上的双 RGB 摄像头+四灰度摄像头+深度传感器+环境光传感器,Meta 实现了超越自家高端头显 Quest Pro 更好的 MR 效果。
虽然 Meta 从 Quest Pro 开始就让以 VST 为突破口,企图打破游戏机的标签,并引入办公、社交等应用内容,不过从目前市场反馈来看,仍是一条长久的路线。一方面是人们习惯于传统 PC 办公软件,另外一方面,Quest 目前仍然没有展示 MR 办公的“特别”与“必须”属性。
三、PlayStation VR2
当所有厂商都在 XR 技术场景上求变的时候,索尼像是一个异类,继续深耕游戏场景,打造属于它的独特性内容生态。
2023 年 2 月,索尼新一代 VR 头显 PlayStation VR2 (以下简称“PS VR2”)正式开售,国行版售价 4499 元。
PS VR2 在近眼显示光学方面与众不同,其配备了菲涅尔透镜+ OLED 显示器,单目分辨率为 2000×2040,支持 90Hz/120Hz 刷新率,视场角为 110°。另外,眼动追踪传感器的增加,使 PS VR2 具备注视点渲染技术,有助于改善用户视觉体验,并拓展到一些特殊的游戏玩法,解锁新体验。
定位交互方面,相比于上一代产品 Outside-In 的追踪方式,PS VR2 通过头显上的四颗摄像头,实现了 Inside-Out 的追踪,简化了用户调试使用成本。其他产品亮点:PS VR2 头显具备振动反馈功能,Sense 控制器具备自适应扳机、触觉反馈和手指触摸检测功能。
索尼继续延续了以“PS 主机+游戏”为核心的商业路线,服务特定游戏玩家。目前已上线譬如《地平线 山之呼唤》、《生化危机 8 村庄》、《生化危机4 重制版》和《Gran Turismo 7》诸多大型 IP 内容。
官方数据指出,PS VR2 在发售 6 周内销量达到了约 60 万台(2023 年 5 月),预计 2023 年整体销量超过 150 万台。当然,这个数据并不算太多,毕竟 PS5 全球销量已经突破了 5000 万台(截至2023年官方公布数据)。
四、PICO
作为国内最大的 XR 厂商,PICO 在 2021 年被字节跳动收购之后,得到了较为全面的高速发展,在国内市场份额继续领跑第一,并在海外加速扩张。
2023 年,搭载眼动追踪与面部追踪的 PICO 4 Pro 正式上线。基于眼动追踪与面部识别带来了瞳距自动调节、注视点渲染、虚拟人自适应表情等全新功能,标志着 PICO 在高端 XR 消费市场的初步探索正式落地。
内容生态方面,2023 年,PICO 持续引进海外精品内容,以及自创一方内容,比如《灵笼VR沉浸式互动体验》、《跟着德爷闯东非》、《VRChat》和《迷室VR》等等。
据 VR陀螺 2023 年 12 月第四周游戏周报统计,PICO 应用商店以 595 款内容持续领跑一体机内容生态,同期对比之下,Meta Quest 内容总量为 572 款。
当然,在 2023 年,PICO 的持续扩张被按下了“暂停键”,一度登上各大新闻头条热搜榜。
2023 年 11 月 7 日上午 10:00,字节跳动旗下 XR 业务部门 PICO 举行了一场全员会议,PICO 负责人周宏伟宣布 PICO 移动 OS 团队将并入字节跳动产品研发和工程架构中台,以加强 OS 核心技术研发的中台投入和统一管理,与此同时,PICO 还会对内容、运营和市场部门进行重点优化。
关于本次调整,外界传闻猜测纷纷,有观点认为本次裁员为字节跳动最高决策人张一鸣拍板,或与母公司字节跳动即将上市,而 PICO 预期销量不佳有关;另也有传闻称,该决定是周宏伟到新加坡体验到了苹果 Vision Pro 后决定的。与此同时,PICO 副总裁任利锋也于 2023 年卸任抖音集团所有职务。
关于 PICO 的后续产品进展,以及公司相关动态,VR陀螺也将持续高度关注。
五、腾讯XR
腾讯曾被视为是继字节跳动之后,第二家入局 XR 硬件的互联网大厂,毕竟传闻中 PICO 的竞标对手就是腾讯。
在黑鲨收购一事受阻后,腾讯原先通过直接收购来自建 XR 硬件生态的路径将有所改变,因此对 XR 业务线内部分项目进行了调整。2023 年 1 月 13 日,VR陀螺独家获悉,腾讯 XR 部分业务已暂停。
放弃了 XR 硬件业务的自研后,腾讯转向了类似于任天堂 Switch 的代理销售模式。2023 年 9 月,腾讯经总办定进行组织架构调整。
IEG 互动娱乐事业群 XR 业务线下成立XR设备与内容业务部,负责腾讯自有品牌的 XR 设备研发、销售、市场推广及其围绕的内容生态建设。由 IEG 互动娱乐事业群 XR 业务线 XR 设备与内容业务部助理总经理钱赓作为部门第一负责人,全面负责相关业务及团队管理,向高级副总裁Stevenma(马晓轶)汇报。
据华尔街日报消息,腾讯已经与 Meta 达成初步协议,将于 2024 年在国内代理销售其新型、低成本版本的 VR 头戴设备。据称这款头显将采用比 Quest 3 更加便宜的光学镜头,不过 GPU 则要比 Quest 2更先进,从而拥有更便宜的定价。
腾讯将于 2024 年底开始生产 Meta 的这个新款头显,并作为中国的独家销售商。Meta 将获得设备销售的大部分收入,而腾讯的收益更多来自内容和服务。
技术向、趋势向
六、空间计算
空间计算是一种使计算机能够以自然的方式融入物理世界的技术,苹果并不是第一家入局 XR 硬件的厂商,但是它使得这个概念进一步扩大,并与强大性能的 XR 设备直接挂钩。
具体来看,空间计算是指 VR/AR 设备使用计算机视觉,处理来自摄像机和其他传感器的数据并捕获有关环境的视觉信息,包括物体的位置、方向和运动,甚至材质属性。通过多个传感器(例如深度传感器和RGB摄像头)的数据融合,以创建准确且全面的环境视图。
基于该环境视图,VR/AR 设备可以使用空间映射来创建环境的 3D 模型,从而可以更精确地放置和操作数字内容。空间计算的主要优势之一是它能够理解环境的深度,这允许用户与虚拟对象进行真实且自然的交互,因为它们可以以与物理世界相对应的方式放置和操作。
例如,虚拟对象可以放置在桌子上、四处移动或隐藏在其他对象后面,以反映我们在真实世界的行为——当然,这种情况,大家通常称为 MR。
在苹果提出“空间计算”后,2023 年,Rokid、玩出梦想、Nimo、创维XR、诠视科技等品牌厂商,皆基于该概念提出自己的相关主张与产品业务布局。
七、VST&OST
RGB 全彩摄像头的搭配,以及产品战略的上调,正在让传统 VR 设备与 AR 设备边界线逐渐模糊。
2023 年,我们更喜欢用 VST(视频透视Video See-Through)和 OST (光学透视Optical See-Through)的技术路径来阐述一款产品为实现 MR 所使用的透视方法。
VST 代表产品诸如苹果 Vision Pro、PICO 4 Pro、Meta Quest 3 等,OST 代表产品包括雷鸟X2、Rokid Max Pro、MYVU 等。它们从产品形态、光学方案、内容生态上都展现了较大的差异化。
目前,VST 技术路径的头显产品的优势在于可以实现优秀的近眼显示体验,基本标配 100° 以上 FOV、高亮度、高分辨率、高 PPD、高性能、并支持手势识别、精准的 SLAM 定位等。OST 技术路径的眼镜产品的长处依旧聚焦在普通眼镜的产品外观设计、轻薄的佩戴体验,高透光率、可戴出门等方面。
事实上,基于目前的供应链技术,以及产业发展阶段,要想做到一款 MYVU 那样 43g 的眼镜形态,但却拥有苹果 Vision Pro 那样强大的性能、超大 FOV、多人机交互的设计,可以说是近乎不可能,这其中涉及太多零部件与光学技术的“革命”。
MR 是大家共同想要展现的形式,但 VST 与 OST 的技术路径产品在未来将会持续博弈,终局留给时间。
八、XR芯片
一个产业的变革,通常从供应链开始,而“芯”是最重要的一环。
相对于传统 PC、手机,XR 设备需要解决的是“交互”与“显示”两个最为特殊,也是最重要的技术面。
所以,在通用 PC、移动芯片的基础上,XR 主要聚焦“交互”与“显示”两大板块,以“协处理器”作为切入,这是 XR 产品本身设计需求的延伸。特别是 2023 年苹果 Vision Pro R1 芯片的出现,再次拔高了大家对于 XR 协处理器的关注度。
R1 本质上是一个数字信号处理器(DSP),采用了集成更多晶体管的 5nm 芯片工艺,集成了 1 GB DRAM,以处理来自 12 个摄像头,5 个传感器和 6 个麦克风的数据,生成塑造混合现实环境的输出数据。
2023 年 10 月,国内 XR 芯片厂商耀宇视芯推出自主研发的 空间定位协处理芯片协处理芯片“启明”。
国内另外一家专注于 VST “显示”层面的 XR 芯片厂商万有引力虽未发产品,但在 2023 年接连完成 Pre-A+(4月),以及 A 轮融资(10月)。投资方包括招商创投、米哈游、同歌创投、三七互娱和红杉资本等知名基金机构和产投机构。
图源:耀宇视芯
另外,移动芯片巨头高通在 2023 年也接连发布了两款芯片,包含应用于 VR/MR 头显类产品的第二代骁龙 XR2、应用于 AR/音频类眼镜产品的第一代骁龙 AR1。
第二代骁龙 XR2 主要是基于前一代芯片的优化改进,主要表现在 GPU 性能提升 2.5 倍,功耗降低 50%,最大支持 3K×3K 分辨率显示。第一代骁龙 AR1 似乎是对 AI 时代的顺应,以及为轻量级 AR 眼镜的设计而生,不仅拥有眼镜侧 AI 能力,还支持低功耗单/双目图像显示。
九、Micro-OLED/LED
当前,头戴式 XR 设备的近眼显示光学质量,离不开以 Micro-OLED 和 Micro-LED 微显示技术的发展。
Micro-OLED,也称为 OLEDoS 和硅基 OLED 微型显示器,是一种微型显示技术。今年苹果 Vision Pro 的发布,无疑将 Micro-OLED 拉到了舞台中央,1 英寸以上、单眼高分辨率的大 Micro-OLED 正在成为供应链密切关注的技术。
除 Vision Pro 原供应商索尼外,国内包括视涯科技、京东方、湖畔光芯、昀光科技等皆有跟进。大尺寸,高分辨率的 Micro-OLED 有利于头显体积的小型化、显示更清晰(包括高亮度、高色域、高 PPD),以及带来更大的 FOV。
图源:网络
Micro-OLED 目前广泛应用于消费市场的分体式 AR 眼镜,如雷鸟Air 2、XREAL Air 2、ARknovv A1、Rokid Max 等产品中,不过皆以 1080P 分辨率的 0.68''、0.55'' 为主,FOV 主要被控制在 50 度以内,满足一定场景使用需求。
2023 年 Micro-LED 技术的发展也迎来了更进一步的。单绿色 Micro-LED 在特定量级的出货下,成本加速下降,如千元级别的 INMO GO、MYVU 等 AR 眼镜。基于合色方案的全彩 Micro-LED 也正式落地,如雷鸟X2、MYVU Discovery等,不过 R、G、B 三光机的组合,也带来了高昂的成本。
单片全彩仍是行业未来趋势。供应链端,镭昱在 2023 年 4 月宣布成功点亮,能适配 AR 眼镜的单片全彩 Micro-LED 微显示屏,包括 0.11 和 0.22 英寸两个型号,实现 7000 PPI,亮10 万尼特亮度。Porotech 在 2023 年 5 月也发布 0.26 英寸 AR 用单面板全彩色 MicroLED 显示器;国内 Micro-LED 厂商 JBD 在 2023 年 8 月宣布单片式 RGB Micro-LED 微显示屏 Phoenix(凤凰)系列原型已开始出货,并且可设计用于 50° 以上 FOV 波导。
除供应链发力外,不少大厂也在自研相关技术。2023 年,苹果和 Meta 都被爆出在自研 Micro-LED,以用于未来的 XR 硬件产品中。
十、AR+AI
2023 年以来,以 ChatGPT 为主的 AI 大模型火爆互联网,国产大模型、行业大模型络绎不绝。
AI 大模型的出现,在 XR 产业,同样引起了不小的震荡,主要表现在 AI 与 XR 设备在人机交互、内容生态与营销战略上的变化。
头戴式近眼显示设备受限于无直接实体屏幕,而手势识别又具备一定门槛,在人机交互上一直是一个痛点。而 AI 大模型的深度集成可以帮助 AR 眼镜优化“语音型指令”,AI 大模型可以更好理解用户的语义,从而进行相关功能的调用。
内容层面,传统 AR 眼镜的内容翻译需要依靠特定 APP 的植入,类似于传统手机翻译软件的交互逻辑,但 AI 大模型可以直接通过“提示词”解决翻译问题,并且还可以带来知识科普、商业分析与情感疏导等更自然的对话。
利用摄像头,不少 AR 眼镜还增添了一些新功能,如致敬未知的 ARknovv A1,通过外置摄像头的调用,实现了“图生图”,将真实图像转化为特定风格的虚拟画像。雷鸟 X2 也通过外置摄像头,实现了 AI 识别实物的功能。
当然,从营销层面来看,作为 AI 的最佳载体,AR 眼镜在新技术的赋能下,或能真正打动用户,带动一波市场增量。
图源:致敬未知
2023 年的十大高频词已是过去式,2024 年的十大高频词,将由大家共同去书写。愿新年,胜旧年。