文/VR陀螺 灵火
未来,VR头显和AR眼镜将融为一体,并以轻巧、便携和高效的形态被人们应用在生活中的各处。2021年,VR产业发展明显升温,但这似乎距离前面描述的目标还有很长的路要走。
就在上周,陀螺君从B站某UP主那学到了一个实现类似效果的半吊子玩法。其实就是基于Oculus Quest头显的边界系统Guardian功能,在开启透视的同时显示VR界面并调整到合适的透明度玩VR游戏。
Quest开Guardian功能实现伪MR视效(图源:B站)
这种黑白透视的新奇体验,令陀螺君不禁联想到:如果真有一款结合了AR眼镜的增强现实显示效果和VR头显的6DoF强交互玩法的产品,那它的体验究竟如何呢?
实际上,还真有一款叫“鸿鹄”的MR眼镜与这一想法不谋而合。恰好,陀螺君也在这周收到了这款产品制造商影创科技寄来的快递。就这样,陀螺君抱着上面的疑惑开启了这次的体验之旅。
售价2W块
一款硬实力在线的MR眼镜
图源:VR陀螺
鸿鹄,由影创科技和英国PhotonLens联合设计,是首批搭载高通骁龙XR2平台的混合现实设备之一,其主体分为主机、可拆卸6DoF体感手柄和MR眼镜三个部分,眼镜和主机之间则通过Type-C数据线连接。
从外观来看,“鸿鹄”给人的第一印象更像是一个缩小版的Switch掌机。但所谓麻雀虽小五脏俱全,“鸿鹄” 的一副蓝牙手柄采用磁吸式链接,可以实现供电、游玩两不误。手柄内部还内置了两个6DoF“天线”,可供轻度交互时使用。
可拆卸+蓝牙手柄+便携式6DoF演示(图源:影创)
XR2平台是高通针对XR设备,新推出的7nm工艺制程扩展现实平台。其原生支持5G网络传输,CPU采用8核处理器、最高主频可达2.84GHz,GPU采用Adreno 650 图形处理器搭建。据悉,XR2的CPU和GPU 性能比上一代提升了2 倍、视频带宽提升4 倍、分辨率提升6 倍、AI 性能提升了11 倍。
交互方面,XR2定制化的计算机视觉处理器确保交互过程中的精准高效,且可支持最多7路并行摄像头下高精度实时追踪用户头部、嘴唇和眼球,支持26点手部骨骼追踪。计算机视觉则可高效进行场景理解和3D重建。
这些所有底层功能,为“鸿鹄”的后期流畅体验带来保障。而也的确如上所述,“鸿鹄”这款MR眼镜独特的地方,在于将目前流行的VR一体机交互方案无缝移植到了增强现实终端上。
图源:VR陀螺
其CV方案头手双6DoF追踪功能,基于影创自研的SLAM空间定位算法。
得益于XR2芯片和影创自研算法加持,“鸿鹄”MR眼镜实现了虚拟物体与真实环境相对位置的持久化的功能。无论何种意外情况发生,虚拟物体在真实世界中的位置都是固定不变的。同时,手柄上还集成了隐藏式追踪灯环,可有效弥补强光环境下CV方案的短板,实现稳定追踪。
SLAM定位遮挡测试(图源:影创)
就实际体验感受来说,“鸿鹄”MR眼镜的追踪方案与Quest相差无异。据影创科技透露,摄像机的拍摄速度是60Hz,每帧间隔16.6ms,视频里每一帧的延迟都低于16.6ms。这种情况下依旧保持较高效的虚实叠加呈现,表明整个系统的延迟都在1帧以内。
图源:影创
除了主机和MR眼镜部分,“鸿鹄”的配件也相当丰富。通过连接在主机背面的圆型磁吸支架,用户可以随意加载5G模块或者外接充电宝供电。“鸿鹄”还配备了一个可拆卸的肩键设计。用户可以根据需要选择是否使用,这在保障完整手柄体验的同时,实现了便携。
图源:影创
此外,“鸿鹄”还配备了全自由度自然手势追踪系统,这块在后面的系统实测环节中会讲到。
系统、操作趋于“科幻”
真实版赛博朋克来了
实际上,这并非是陀螺君第一次体验“鸿鹄”。
今年一月初体验时,这款MR眼镜给我的最大震撼,来源于它将6DoF交互和混合现实相融合的新奇想法。但系统层面,尽管当时是内置安卓10以及Blue Cat 2.0双系统,但体验感受上仍处在初级状态。
正所谓一日不见如隔三秋,这次再体验“鸿鹄”,竟有种时空穿越的感觉。
镜框两侧为两颗CV摄像头,镜片外侧为两颗红外感应器,中心为一颗800万像素摄像头(图源:VR陀螺)
操作系统
MR眼镜的系统操作体验,通常由视觉通透性、色彩对比度和交互三方面决定。说到这,相信大部分人都会首先想起于2019年底发售的,赫赫有名的微软HoloLens 2。
“鸿鹄”MR眼镜中,可以看到一些借鉴的影子。首先,该设备也和HoloLens 2一样支持全自由度自然手势追踪,这意味着用户只需要正常的通过抓、握、拽等常见动作就可以实现系统交互。
图源:影创
操作界面的可视化,“鸿鹄”采用了更加靠近安卓电视桌面的排布方式。上手后不会像HoloLens 2那种手腕呼出界面一样令人感到陌生。几秒内,用户就可以用手拖动界面对应的位置滑动图标并选择应用。
值得一提的是,手势模型到控制界面之间,有一条“磁力线”作为链接。这使得用户不用像HoloLens 2中一样非得走到面前去戳对应的位置,而是可以与虚拟窗口保持一定距离实现流畅操作。
缩放操作演示(图源:影创)
以页面窗口为例,用户可以通过将“磁力线”吸附在边框上进行翻转。配合比较直观的过渡动画效果,可以给人一种自然、高流畅度操控感受。
绘画应用
回到6DoF交互上,基于手柄“鸿鹄”可以准确追踪用户手臂更多自由度的活动。为了更好地展现其在MR眼镜上的表现,“鸿鹄”内置了一款类似MR版本《Tilt Brush》的绘画应用。
图源:影创
在实际体验过程中,悬空的画板和真实环境背景形成透视关系,更像是在现实生活中的一张透明亚克力板。同样的,作画过程中笔触的力道、轨迹都模拟的非常真实。值得一提的是,因为“鸿鹄”使用的是BB光学方案,其对比度、透光性和色彩控制都要比波导类更好,此外相较VR头显又少了分辨率问题的困扰,在这样的场景下的绘画体验十分新奇,可谓是极具科幻感。
图源:影创
绘画过程中,手柄与笔触做到无缝衔接。在这里,可以全面呈现出“鸿鹄”6DoF手柄在无延迟三维空间追踪效果的出色表现。
在虚拟鸿鹄的创作过程中,手柄与SLAM算法相融合,实时感知现实空间的三维信息,XR2处理器做出机器视觉信息运算,再将虚拟画面与手柄轨迹一一对应,这样的闭环计算几乎感知不到延迟,更是靠肉眼无法察觉的。
影音娱乐
6DoF交互+SLAM呈现,为一些成熟的游戏作品移植打好了坚实的基础。比如,在MR环境中体验《Beat Saber》,需要的是超低延迟和长时间高频运动下稳定的虚拟环境定位。可以说,此次体验里“鸿鹄”都做到了。
此外,“鸿鹄”的安卓10系统自然可以原生支持安卓游戏在其上流畅运行。陀螺君在MR眼镜上尝试了王者荣耀和网页浏览。面对全息大屏打游戏、追剧,并且还有种飘浮在半空中若隐若现的感觉,这种游戏体验像极了各类赛博朋克电影中的经典场景。
图源:影创
最重要的是,相较于仅仅作为外接显示器的传统手机+AR分体式眼镜设备,“鸿鹄”自带的手柄可以蓝牙适配大部分游戏内容,遥感+按键操作的舒适度远超盲搓手机。
“鸿鹄”背后
承载着影创怎样的大志?
“鸿鹄”的背后,是CV方案6DoF交互、XR2芯片组、手势识别等技术趋于成熟的写照;VR产业从Cardboard到Quest,AR产业从15°FOV棱镜到45°FOV BB光学......这些底层技术不再被高高挂起,各大厂商结合自有特色研发出新产品,并开启探索走向商用化和普及化的征程。
Quest VR游戏生态正在海外市场掀起一场热潮。 其成熟生态的背后,离不开技术硬实力的支撑。而影创作为国内MR硬件厂商,凭借自研将6DoF等技术成功赋能到MR眼镜上,这证明国内内容生态起势前的技术储备阶段已经颇见成效。
便携性大幅提升(图源:影创)
至于国内MR游戏未来是否会像VR游戏一样火爆,现阶段不好妄下结论。但是,“鸿鹄”给了国内VR、AR游戏开发者更多可能性,无论是旧游戏移植还是新游戏创作,对于急待发展优质内容和良性营收闭环的中国VR/AR游戏生态来说都是好事。
总结
上次体验时,影创工作人员告诉陀螺君,他们正在以一天N次迭代的高强度工作方式来优化“鸿鹄”操作系统、可视化界面和人机交互的体验成熟度。今天,“鸿鹄”算是交上了一份满意的答卷。
“鸿鹄”MR眼镜原价是20000元,预售定金是5000元。目前“鸿鹄”MR眼镜已经开启预售通道,影创科技还推出了“趣味问答免尾款”(限量198台,目前已售罄)、“体验反馈赢免单”和“2021 Qualcomm XR 创新应用挑战赛赢奖品”活动。
如果参加“体验反馈赢免单”和“2021 Qualcomm XR 创新应用挑战赛赢奖品”活动,将有机会获得影创科技免费赠送的“鸿鹄”MR眼镜。
无论是从技术、算法层面看,还是创新能力和想象力上看,国内以影创为代表的一众厂商正在MR这条道路上扩宽探索半径。随着海外消费级市场的崛起,成熟商业化技术模式的形成,国内将依托独有的产业链优势助推国内厂商一路向前,以更好的体验、更加低廉的成本后发抢占国际市场。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
版权申明:本文为VR陀螺原创,任何第三方未经授权不得转载。如需转载请联系微信:vrtuoluo233 申请授权,并在转载时保留转载来源、作者以及原文链接信息,不得擅自更改内容,违规转载法律必究。文中有图片、视频素材来自互联网或无法核实出处,如涉及版权问题,请联系本网站协商处理。
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息