2020年11月,深圳市瑞立视多媒体科技有限公司(Realis,以下简称瑞立视)举办了2020新品发布会,展现了能够实现人机智能交互的全息3D智能立体交互系统。发布会的主角是基于瑞立视核心的光学空间定位技术研发的最新产品:RTS-3DHOLO全息3D智能交互数字虚拟沙盘、RTS-3DESK全息3D桌面交互系统以及RTS-DINO双目红外光学定位相机。而发布会的重头戏则是RTS-3DHOLO全息3D智能交互数字虚拟沙盘。
瑞立视全息3D智能交互数字虚拟沙盘:让虚拟世界更真实
RTS-3DHOLO全息3D智能交互数字虚拟沙盘是一款结合三维仿真、光学空间定位、视点追踪全息3D显示、人机交互的一体化产品,能够将数字虚拟内容进行三维立体化展现的一套可交互的全息3D虚拟沙盘系统。
换句话说,该产品以“全息3D”贯穿产品的视觉概念,通过光学定位动作捕捉等一系列交互系统构成了一个完整的信息处理平台,该产品改变了人们对于显示屏单调、平面的认知以及使用方式,实现了从2D到3D、定点到360度环绕、静止到实时动态交互的显示屏应用改革,提高人机交互的沉浸感。
融合全息、3D、交互新型人机智能交互产品形态
当讲到高沉浸感的人机交互体验,也许第一反应是戴上VR头显或AR眼镜,与虚拟环境互动以获得身临其境般的体验。而全息3D显示技术作为增强现实(AR)的其中一种呈现形式,在行业应用中也有不少的成果。其中较为广为人知的全息投影方案有早期的初音未来演唱会,或者邓丽君“复活”与周杰伦合唱等。
基于3D全息技术建立的三维图像,消弭了人与计算机画面的距离,使数字图像到达了“让画面走出来”的阶段。而全息技术的商业落地,继续发展出了不同的产品形态,比如应用在裸眼3D大屏,进行产品展示、舞台效果设计等。
但无论是全息影像,还是裸眼3D应用,观众都只是停留在“观看”层面,要实现更深度的沉浸感,还需要加入交互元素,目前市面上缺少能够很好地整合全息技术、3D视觉技术、人机智能交互及XR技术的产品,但其对应的图形仿真和立体化、沉浸交互体验正是用户的关键需求。基于这一点,RTS-3DHOLO全息3D智能交互数字虚拟沙盘应运而生。
这套交互系统不同于主打封闭式沉浸体验的VR头显,十分适用于B端企业协同作业场景,对此类需求较高的企业来说该解决方案具有开放式沉浸的使用特性。其应用领域包括地产展示、展览展陈、智慧城市、文创博览、军事仿真、教育教学、医学培训和工业仿真等等。
内容层面,传统3D项目开发落地相较VR内容成熟度、普及度更高,其可供参考案例及覆盖受众较广,具备较强的变现能力。对于政企客户来说,这种介于传统与黑科技之间的沉浸式展示模式更易于被接受和推广,教育场景下也更符合实操、分享式学习理念。
瑞立视正在积极推动其“全息3D智能立体交互系统”成为一个可广泛应用于各大行业的产品体系。这意味着,在房地产、军事、工业制造、智慧城市、文创产品、教育、医学等领域,人们可以更方便地获取知识、理解更复杂的工程,从而提升信息交流的效率和质量。
全方位构建完整的产品体验与内容生产生态
RTS-3DHOLO采用计算机3D仿真技术结合基于光学空间定位的视点追踪全息3D显示技术,将3D场景立体化展现。人与虚拟沙盘之间的交互,通过瑞立视核心的光学空间定位、人机交互技术,捕捉到操控手柄空间数据,手柄发出指令对全息3D内容实时操控,将3D显示载体以水平观看的方式呈现。
构建可交互的全息3D虚拟沙盘系统,其难点在于基于计算机视觉原理,实现由多个高速相机从不同角度对目标特征点的监视和跟踪,同时结合带有Marker标记点的眼镜及手柄对应的算法来完成对头部及体验者相对位置的捕捉。
通过标记点式光学动捕算法,将光学空间定位、视点追踪全息3D显示、数字虚拟场景智能交互和双视角全方位立体操控等技术融于一身,这正是RTS-3DHOLO全息3D智能交互数字虚拟沙盘能够呈现出逼真全息3D人机交互效果的核心所在。
瑞立视在高交会的展示现场
当陀螺君戴上带有定位标记点的3D眼镜,眼前平面的LED屏幕就出现了立体的3D内容。透过眼镜的3D立体成像,可以看到3D内容是立在屏幕的物理平面上的。
带上3D眼镜后的效果图例
实际体验时,戴上定制的3D眼镜,体验者能够与全息3D立体成像进行360度实时互动。体验者不仅可以从不同角度观看立体成像,还可以靠近以观察细节。除此之外,体验者可以使用手柄拖动眼前的场景,以获得更丰富的场景信息。通过全息3D显示的数字场景内容跃然屏上,栩栩如生,仿佛就在眼前的台面上灵活跳动!当你伸手想去触碰,却又触不可及……
内容生产上,据介绍,面向B端,瑞立视表示将会根据客户具体需求,提供定制化内容。同时,瑞立视表示已有成熟的开发者系统,以方便客户进行个性化内容生产。
RTS-3DESK全息3D桌面交互系统:让真实更近
除了RTS-3DHOLO全息3D智能交互数字虚拟沙盘,瑞立视也研发生产了全息3D桌面交互系统RTS-3DESK,类似于zSpace一体机。
zSpace VR-AR笔记本电脑
RTS-3DESK全息3D桌面交互系统
与同类3D桌面交互系统对比,RTS-3DESK全息3D桌面交互系统带给体验者最直观的变化在于设备形态更加轻薄,更加接近于一台普通的电脑显示器。
该系统采用计算机3D仿真技术结合基于双目红外光学定位相机系统的视点追踪全息3D显示技术,将3D场景立体化展现,同时利用瑞立视核心的光学空间定位、人机交互技术,捕捉到交互笔空间数据,交互笔发出指令对全息3D场景内容实施操控,将3D显示载体用桌面式3D显示设备呈现,从而构建出一套可交互的全息3D桌面显示系统。
与传统3D桌面交互系统最大区别在于,RTS-3DESK全息3D桌面交互系统搭载了瑞立视研发的RTS-DINO双目红外光学定位相机,这是一款便携式高精度光学定位跟踪双目相机,使用RTS-DINO配合RTS-tracker算法软件,可以实现对目标物体上标记点刚体的6DOF捕捉与定位跟踪,实时输出其3D坐标与方位角,从而构建出一套安装简便的3D定位捕捉跟踪系统。RTS-DINO通过USB接口直接和电脑连接进行传输,紧凑便携、即插即用、扩展性强。
如果说RTS-3DESK全息3D桌面交互系统是一款适用于各类协同作业场景下的产品,那么RTS-3DHOLO全息3D智能交互数字虚拟沙盘则将这一理念再度放大,并且延伸出了更多的新颖玩法。首先,无论是展览、地产展示还是教育教学这些场景,其涉及的协作人群很多时候不是一两个人而是一群人,全息虚拟沙盘正好满足了更多人同时协同作业的需求。
其次,我们设想一下,如果是一所学校或者一个展览馆的某展区。或许学校大手笔点可以挥挥衣袖为师生人手配备一套桌面级3D交互产品以供教学使用,那换做是展馆这样的流量群体场景要如何实现呢?显然,RTS-3DHOLO全息3D智能交互数字虚拟沙盘一方面满足了公共场所下的展示、体验需求,对于很多细分使用场景或者个体企业来说,也提供了更省成本的方案选项。
AR社交+虚拟沙盘,这种看似奇奇怪怪的组合形式,其实进一步将协同作业的定义扩展到了旁观者在内的更广阔人群,团队协同作业同时为监管者、客户开启了一双上帝之眼,可以直观参与项目进程,3D全息的可视化呈现令其无需面对各类数据、图纸时束手无策。
结语
电影《钢铁侠》中,斯塔克随意地对空中的3D全息投影进行操作,能够把远处的人或物以3D全息投影的形式呈现在空气之中,实现真正的裸眼3D,视觉效果非常酷炫。斯塔克的全息系统成为了人们对AR未来生态的想象。
而瑞立视的全息3D智能交互数字虚拟沙盘使科幻电影的想象更接近现实。从实际体验来看,RTS-3DHOLO全息3D智能交互数字虚拟沙盘完美融合了视点追踪全息3D显示和智能人机交互的优势,在虚拟仿真实训、医学教育、工业仿真等众多应用场景下突出3D全息及人机交互的实用之处,有望获得业界青睐。较之传统的模拟实训课程,集成了强大且便捷的数字内容快速开发工具包的RTS-3DHOLO全息3D智能交互数字虚拟沙盘不仅可以节省各种设施成本,也有助于师生在课程内容设计上发挥更多的创意。
瑞立视CEO许秋子曾在一次采访中,对人机智能交互形态表达了展望:“在一个空间内采集人的动作,只要有摄像头就可以采集分析信息,而人无需穿戴设备。”RTS-3DHOLO全息3D智能交互数字虚拟沙盘进一步满足了人们对人机智能交互的想象。伴随着5G时代的来临,全息3D应用将会有更多可能:办公场景的全息视频会议,电子竞技的全息游戏交互,教育场景里的全息教学课堂,设计场景里的全息建模,家庭场景的智能家居物联终端等等,都将让我们离未来世界更进一步。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息