编译/VR陀螺
Niantic Spatial SDK v3.15为开发者提供了先进的MR功能:厘米级精度的户外视觉定位系统(VPS)、长距离实时场景网格划分以及语义分割。自今年年初以来,Meta已允许第三方Horizon OS应用访问Quest 3和Quest 3S的摄像头,而Niantic则利用这一功能运行其开发了近十年的计算机视觉模型。
以下是Niantic Spatial SDK为Quest开发者提供的MR功能概述:
厘米级精准的视觉定位系统(VPS)
视觉定位系统(VPS)则是一种软件系统,它通过计算机视觉技术,利用摄像头实时捕捉的画面中独特的视觉模式,并与现有高精度3D世界地图进行比对,从而确定用户的位置。因此,VPS仅在已完成高密度物理几何结构3D建模的区域内有效。但在这些区域内,它可实现厘米级精度的精确定位。Niantic的VPS支持智能手机,以及Meta Quest 3和Quest 3S,以及Magic Leap 2。
Niantic的VPS地图覆盖超过100万个地点,这些数据来源于《Pokemon Go》和Scaniverse等游戏玩家的扫描结果。此外,Niantic声称其VPS提供“行业领先的精度”,并为扫描的公共场所提供3D网格模型。
实时场景建模
Quest 3和Quest 3S允许用户扫描房间以生成3D场景网格,MR应用可利用该网格使虚拟物体与物理几何体互动或重新映射环境。而Niantic Spatial SDK的实时网格化功能支持长距离网格化。该功能采用Niantic自有的计算机视觉算法,通过透视摄像头采集的视图构建网格。因此,Niantic的方案更适合户外使用,并与其VPS系统配合效果良好。
语义分割与目标检测
Niantic Spatial SDK还能够实时识别并标注物体和表面。物体识别功能与Quest透视摄像头访问开发者示例类似,而分割功能似乎更为先进。
定价与未来规划
Niantic的VPS功能按API调用次数计费,而Niantic Spatial SDK的设备端计算机视觉功能虽无使用限制,但需按每月活跃用户(MAU)支付约0.10美元/月的费用。Niantic表示正“持续扩展对更多头戴设备的兼容性、提升性能并引入新功能(如增强遮挡处理和持续场景理解)”,并指出开发者反馈将决定未来发展方向。
来源:uploadvr
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息