中国厂商接棒,安卓阵营首款空间计算机横空出世!
日前,Apple Vision Pro已正式宣布登陆全球市场,国内售价29,999元起。作为一款次世代的革命设备,其顶奢的硬件配置、精准的交互算法、高昂的售价不仅让普通消费者望尘莫及,连不少国内科技企业也踌躇不前。
如此背景下,一家中国XR公司揽下了「中国智造」的重任。6月25日,玩出梦想科技在新加坡召开全球新品发布会,正式发布全新MR空间计算产品——玩出梦想MR。产品从硬件参数到功能场景全面对标Apple Vision Pro,成为全球首款名副其实的「安卓系统空间计算机」。
售价1X999人民币,拥有512GB和1TB两个版本可选, 将于年底正式发售。
玩出梦想MR在新加坡的推出,是玩出梦想科技XR业务立项以来所有技术的结晶,也是其全球化战略的重要一步。在本次活动上,玩出梦想科技也计划以新加坡为全球市场的起点,开拓亚太市场,扬帆出海。
借此契机,VR陀螺也与玩出梦想科技首席技术工程师张腾博士、玩出梦想科技CMO朱然围绕MR新品进行了深入交流,并体验了MR新品。
全球首款安卓系统空间计算机
玩出梦想MR「空间系列」体验媲美Vision Pro
作为玩出梦想科技第三代XR硬件产品,玩出梦想MR在沿袭过往优秀技术的同时,吸收了Apple Vision Pro在产品设计上的精华。
(一)1.35英寸Micro-OLED,顶配安卓系统空间计算机
外观方面,玩出梦想MR采用了一体化流线型曲面设计,兼顾时尚与科技属性,头显前后配重合理,实际佩戴无明显下压受力感。
头显包含了11个摄像头、7类传感器,包括6颗向外追踪摄像头和深度传感器,全彩VST摄像头共两个,单个像素为3200万像素,比Apple Vision Pro更高,主要用于全彩透视以及3D空间视频拍摄。
玩出梦想MR的核心亮点在于其双眼8K分辨率的Micro-OLED微显示器,这为其近眼显示光学系统提供了最底层的体验。
在产品美学设计上,玩出梦想MR在头显上方有两个物理按钮,右边旋钮,按下可以呼出菜单,旋转可以切换沉浸程度,也可以支持渐变调整沉浸程度,左边的按钮为电源开关。
当然,实际测试的体验,远比描述参数来得更具象,全新的空间计算机上,玩出梦想科技也拿出了新的场景。
(二)「空间观影+MR游戏+空间拍看」新场景,玩出梦想MR实际体验
相对于玩出梦想科技此前的产品线,玩出梦想MR增加了空间观影、MR游戏、3D空间拍看上的能力。在媒体会现场,VR陀螺也提前体验了玩出梦想MR带来的诸多新场景。
大屏观影是玩出梦想MR主打的场景之一。得益于单眼4K高清晰度,在180度3D空间观影上,玩出梦想MR整体效果非常不错,其模拟了电影院场景,3D“出屏”效果显著,并且能够保持流畅运行,据称帧率可稳定保持在90帧。
在MR游戏体验方面,无论是拳击还是乒乓球,玩出梦想MR均展现出流畅的运行表现。特别在乒乓球游戏中,MR模式下的虚拟球桌定位极为稳定,桌腿位置在大幅运动下会有小幅偏移,但几乎不影响整体游戏体验。
在另外一个MR场景体验中,在现场的两面墙上分别放置了一个鱼缸和一块大屏电视。玩出梦想MR空间锚定稳定性非常不错,在房间走动一圈之后再看虚拟物体与空间的位置,几乎误差在厘米级。
空间拍看方面,玩出梦想MR与Vision Pro一样支持直接用头显拍摄空间视频,同时支持其他设备拍摄的空间视频在该终端上观看。 此外,在实际体验中,玩出梦想MR整体3D深度效果与苹果相差不大,在水平方向没有合像问题。
空间影像,作为数字时代的一种全新记录方式,打破了传统平面影像的局限,让用户能够以更加直观和生动的方式记录身边的美好瞬间,并在Vision Pro、玩出梦想MR这类空间计算机上实现“重现”过去的功能。有望成为继文字、照片、视频之后第四大信息传播载体。
众所周知,Vision Pro不仅仅是个人娱乐终端,也是一台计算设备,所以办公、效率、设计等都是它的重要场景。此次玩出梦想MR提供体验的机器,由于还处于工程机阶段,手势和眼动功能目前尚未加入,因此体验以手柄为主。
得益于玩出梦想科技全新的光学模组。即使在画面边缘,色散和畸变也被控制在微小范围内,尤其是当显示直线和网格时,几乎察觉不到任何畸变,这得益于出色的畸变校正算法。在玩出梦想科技的前两代产品中,其精准的SLAM定位算法让人印象深刻,这一优势也被完美沿袭到新的终端中。
办公场景中,玩出梦想科技展示了电脑屏幕通过投屏直接显示在玩出梦想MR中,相当于眼前一台巨大的4K弧形屏,且鼠标、键盘均可正常连接使用。据了解玩出梦想MR的PPD (角分辨率)达到45,因此就连细小的文字也可以清晰显示。PPD是衡量XR头显清晰度的重要参数,即每一度角中所呈现的像素数量,人眼PPD为 60,玩出梦想MR已经达到45,相对于之前的产品已大幅接近人眼水平。
同时,玩出梦想MR也兼容主流办公应用和支持PC和Steam串流。由于玩出梦想MR内置两颗3200万像素的RGB摄像头用于VST透视,清晰度丝毫不亚于Vision Pro,在透视环境下办公仿佛一台真实的显示器置于面前。
从空间观影、MR游戏、3D空间拍看到轻办公,玩出梦想MR能够拥有如此多优秀空间计算应用体验的核心原因在于其三大底层技术的支持——追踪系统、环境感知与地图构建、视觉体验。
三大底层空间技术架构支撑
部分光学参数单点超越Vision Pro
基于玩出梦想科技对于空间计算机、产品侧和应用侧的理解,其构建了三大能力。
(一)最高45PPD,单眼4K Micro-OLED+4P Pancake
为媲美Vision Pro,玩出梦想科技在新款空间计算产品上同样采用了两块单眼 4K分辨率的Micro—OLED(3552×3840),PPI高达3882。搭配自研4P超轻树脂 Pancake光学方案,实现了镜头中心区域高达45的PPD数值。作为对比,Vision Pro 的PPD预估为34。
PPD在XR设备中是衡量清晰度的重要指标,玩出梦想MR能够达到如此高清晰度的主要原因在于玩出梦想科技光学方案的巧妙搭配,目前市面上的Pancake方案主要以两片和三片式为主。
在物理光学系统中,通常镜片数量与清晰度、MTF呈正比,4片式的Pancake折叠光路设计则带给了玩出梦想MR更高的清晰度。当然,镜片数量太多同样也会造成FOV缩小,但实际上,玩出梦想MR 在FOV上也有不错的表现,在不虚标的情况下达到了103°,该设计应该是玩出梦想科技经过多次测试得到的最优解。
张腾和朱然告诉VR陀螺:玩出梦想科技最早也尝试了其他厂商提供的Pancake方案,但是在适配单眼4K屏幕时,远达不到理想的光学参数。而团队自研的四片式Pancake方案则能很好地适配,特别是在实际体验时,边界畸变会变得更少更小。目前采用4片式是从屏幕尺寸、入瞳距离、贴合工艺多方面考虑的。配合12mm超大 Eye-Box设计与51-78mm自动瞳距调节,确保每位用户都能获得最佳视觉效果。
在用于混合现实的全彩透视上(VST),玩出梦想MR用上了比Vision Pro像素更高的两颗彩色摄像头(3200 万像素),以及自研的软件算法设计,达到了最低14ms的延迟,同时进行针对性畸变处理,实现1:1还原真实物理空间。
玩出梦想科技告诉VR陀螺,VST是玩出梦想科技非常重视的一个功能。第一,相比于上一代产品,最大的不同在于其优化了整个软件链路的设计,主要是从摄像头捕捉画面到最终投摄到屏幕上,其中去除了安卓框架中不必要的一些环节,减少了传输时间;第二,充分利用屏幕本身特性,新一代的屏幕是Micro-OLED,不像之前用的有液晶翻转的过程,利用这个特性减少那部分的延迟;除此之外,在VST里的插帧补帧预测这块也花了很多功夫,才有最终14ms的低延迟体验。
相比于 Vision Pro单独使用一颗R1协处理芯片来处理摄像头的数据,玩出梦想MR的设计在保证同样效果的同时,降低了功耗的使用,控制了BOM成本。
(二)头+手+眼+手柄,多模态追踪交互
XR设备追踪系统的精准度与响应速度是实现自然流畅空间交互的关键。玩出梦想科技在前两代硬件产品上,已实现头部6DoF追踪、手部26个关节点追踪,其追踪精度与低延迟达到了国内乃至全球一线水准。
在新款空间计算机玩出梦想MR 上,通过配备多达11个摄像头和7类传感器,实现了更高的追踪精度与鲁棒性,将延迟降至最低,确保用户的每一个细微动作都能在虚拟空间中得到即时反映。
眼动追踪模块越来越成为XR硬件的标配,玩出梦想科技在引入这项新技术的同时也做了一些差异化创新。张腾表示:“通过眼动追踪传感器,玩出梦想MR一方面实现了与Vision Pro一样的基础眼动交互,还利用该传感器实现了类似于虹膜识别的安全认证功能。当然,虹膜识别是一个支付级别的功能,目前我们做到的仅仅是一个小样本的识别,让用户在佩戴设备的时候,可以免去手动输入密码的过程。”
“此外,我们还试图使用眼动进行注视点渲染。从内部研究来看,它能够大幅度的降低GPU以及其他子计算资源的消耗,超过30%。非常重要的是,我们也正在研究使用眼动来解决一个称为Pupil Swim的问题,简单的来说就是我们试图让用户看到的画面更加真实自然,这也是我们正在进一步完善的能力。”
众所周知,高通第二代骁龙XR2+芯片性能并不低,而凭借注视点渲染技术,玩出梦想科技更是降低了高分辨显示带来的高功耗。
事实上,为保证高分辨率显示与低功耗高性能的平衡,玩出梦想科技在整个渲染链里面优化非常多。除注视点渲染外,其还通过类似于ATW、ASW画面插帧、补帧技术,极大节约了GPU算力,在6DoF追踪性能、画面预测补偿的算法上做足了积累。
玩出梦想科技还告诉VR陀螺,第二代骁龙XR2+芯片实际上里面有6核CPU,还有DSP、NPU等,玩出梦想MR很多功能充分利用了这些异构芯片,所以能够降低很大一部分的计算资源消耗,保证芯片的最大化利用。
(三)环境感知与地图构建,对标苹果、Meta
作为体验过玩出梦想科技前两代产品的老玩家,玩出梦想MR在SLAM算法上还是一如既往地精准。通过6个向外追踪摄像头,玩出梦想MR在用户体验设备时,感知物理环境,通过空间锚点,进行三维重建,以实现物理世界与数字世界的跨界交互。
张腾表示:要和周围环境进行互动,要把现实世界进行数字化。为此,我们构建了地图模块,地图模块通过传感器感知到周围环境以后能够很快形成地图,这个地图目前由三个元素组成,点云、网格、语义标签,这是我们构建的地图能力,地图数据还能被保存下来被用户读取和分享。
在地图构建方面,除基础重建技术外,在用户的细节化体验上也有一些改善。早在2022年,玩出梦想科技便率先在 XR 设备上推出了多地图记忆功能,支持高达 5个地图的安全边界智能记忆与自动切换。2023年,公司进一步升级,成为国内首个上线空间感应功能的企业,能够同时检测、识别并提示动态与静态障碍物,极大地提升了用户的使用安全与体验。
环境感知与地图构建,一直是XR设备的重要算法功能,是MR体验的最基础架构。此前,业内一直以来都以Meta Quest设备为衡量标准,它在多地图记忆、障碍物检测、虚实地图贴合上拥有较高技术壁垒。而现在,透过玩出梦想MR上,我们看到了国产技术正在无限追赶、趋近于海外体验。
拥抱时代变化
玩出梦想科技做「空间计算」的长期主义
玩出梦想科技正以安卓系统空间计算先驱之姿,躬身入局,拥抱时代变化。
玩出梦想MR不仅在三大底层「空间计算」架构下了重功夫,且在应用场景上融入了AI大模型功能。从某种程度上来看,可以说是弥补了大家对于visionOS 2没有 AI大模型支持的想象力。 玩出梦想MR搭载智能助手,可实现AI搜索、翻译、音乐创作等功能,支持语音唤醒、语音控制、生活管家功能。 未来也计划实现2D 转 3D、物体识别等能力。
当然,这场「空间计算」的竞赛也并没有想象中那么容易——传统手机巨头如华为、vivo、荣耀等,虽重心仍置于手机与PC的利润沃土,但亦洞察到空间计算赛道的潜力,早已悄然布局。此情此景,恰似黎明前的宁静,预示着一场即将爆发的商业争夺战。
“在大厂犹豫是不是All in或者说小批量试的时候,正是我们这类初创企业破局而出的黄金时机。未来大家都会进入这个赛道,正如F(玩出梦想科技创始人兼CEO黄锋)所言,我们要抓住历史的机遇和时间窗口,把我们的技术和相关实力储备得更好,不断打磨产品,方能在这些巨头利用绝对优势后发制人之前,构建起自己的竞争壁垒。”
“我们不会摇摆,一会儿布局,一会儿暂停。XR也是F人生的最后一个创业赛道,决心在这条赛道上倾尽全力。我们想表达的主要有三点:第一,我们和苹果一样坚定看好这个赛道;第二,我们是坚持长期主义的企业;第三,我们希望通过我们的努力和对这件事情的专注程度能够在极短的时间窗口当中赢得未来。”朱然表示。
玩出梦想科技深知,未来的战场属于那些敢于拥抱变化、不断磨砺技术锋刃的勇者。且面对国内科技大厂,玩出梦想科技的选择清晰而坚定——时不我待,唯有全力以赴,玩出梦想MR则是这场全力以赴的征途中的阶段性成果。
此外,手机大厂入局XR也并非想象中那么简单,张腾补充表示:“做空间计算机和做手机区别表面看起来有一些相似相近之处,但本质上差别非常大。空间计算机不仅是消费类电子,而且也是一个高精密测绘仪器。其中空间计算和空间智能的技术底座实际上对标的是4G/5G通信、电容屏触控的功能,实现这些技术链条非常长。我们花了巨量的时间和经历进行研发布局底层技术,这正是玩出梦想科技的优势。”
“比如,玩出梦想MR要做到1:1真实还原的超低延迟VST,可能需要结构、ID设计、电路优化、软件链路、算法,甚至包括生态的通力配合,它的复杂度在消费类电子里面可能史无前例。由此,我们认为空间计算机和手机在产品实现上面其实差距非常大,是属于完全不同的赛道。”
从2021年的一代产品,2022年的第二代产品,再到2024年的第三款产品,全新的空间计算机,我们看到了玩出梦想科技的坚持、求变与技术沉淀。
玩出梦想科技,正以行动诠释着长期主义者最纯粹的追求,成为空间计算时代安卓系统第一接棒人。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
版权申明:本文为VR陀螺原创,任何第三方未经授权不得转载。如需转载请联系微信:vrtuoluo233 申请授权,并在转载时保留转载来源、作者以及原文链接信息,不得擅自更改内容,违规转载法律必究。文中有图片、视频素材来自互联网或无法核实出处,如涉及版权问题,请联系本网站协商处理。
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息