VR陀螺11月22日消息,Google 开发者大会 (Google Developer Summit) 是谷歌面向开发者展示最新产品和平台的年度盛会。2020 Google 开发者大会于 11 月 16 日 至 21 日举行,这是谷歌首次以全线上大会的形式与中国开发者相聚。本次大会以“代码不止”为主题,介绍了相关产品更新以及一系列面向本地开发者的技术支持内容,旨在赋能开发者高效创新、持续不断地创造愉悦的产品体验。
其中,11月21日,Google大中华区AR/VR负责人熊子青以“ARCore新近更新及应用实例”为主题,从ar 近期发展、arcore进程、2020新近更新三个方面介绍了ARCore产品动态。
一 、AR的近期发展
熊子青表示,目前AR已经从只是畅想发展到今天的技术相对成熟的状态,应用也不断推陈出新。加上5G的带动,越来越多的AR体验走进生活,被更多人了解和使用。
随着科技的不断演进,人机交互的方式也不断变更。摄像头成为了数字世界的眼睛,能看懂并感知这个世界,再结合IMU、GPS,加上背后的算法及深度学习后,在最需要的位置和时空中无缝联结,并响应现实世界。
AR提供了一种体验信息以及获得答案的新方法,吸引了人们的注意力,最终帮助推动了用户行动起来。无论是应用的下载、互动,还是应用内购买,都看到了显著的提升。
二、ARCore 进程
AR技术被应用在更丰富的应用场景中,以帮助人们生活更便利、更有趣,包括在学习、购物、导航等。
Google search中,设计了许多3D模型,老虎、狮子,甚至是数学公式,让用户在搜寻时能360度观看,也可以用ar方式投射到家中,立体化地了解信息。疫情期间,获得了全球使用者的广大回响。
关于Google lens智慧镜头应用,用户打开摄像头就可以识别花草、文字、电视、地标、菜单。
在YouTube中的应用。用户可以一边看美妆博主示范化妆方式,一边可以使用AR功能进行实时试妆。
Google Map中也应用了ar户型导航。用户可以看到方向指示牌和导览提示,仿佛一个专属的私人导游。该应用是目前GoogleAR应用中使用者最多的应用之一。
随着手机的普及,营销媒介也发展出基于手机相机的新应用。运用AR将人们带入沉浸式体验,将人们带入品牌世界。Google display network中,Google推出了3D Swirl营销工具,该营销应用在今年下半年正式完成了beta测试版,并且已经看到了用户参与度及品牌影响力的显著提升。
5G实践前沿。随着5G商用化,ARCore与LG Uplus合作,在韩国首尔进行了AR+5G的实践尝试。在首尔地铁站布建了AR艺术长廊和展示车厢,5G加持能够克服地铁站人多信号差的缺陷,人们能够顺畅地体验到丰富的AR艺术内容。
昌德宫。联合国教科文组织世界遗产站点。Google与SK Telecom和文化遗产管理局合作,创建了全球首个5G赋能的AR文旅体验。AR导览由一个活化的石狮子带领,游客可以穿越到朝鲜王朝,体验传统习俗和体会朝鲜贵族生活。
三、关于ARCore核心功能
1、运动追踪。用来帮助用户实现虚拟现实的映射关系。
2、环境理解。对现实环境中的平面信息进行评估,利用特征点来估算位置、大小以及朝向。
3、光估测。ARCore可以分析估算当前环境中的光照信息,对渲染的虚拟内容进行光照色彩的校正,使其与手机摄像头拍到的真实画面结合得更加自然。
另外ARCore还有许多延伸的功能:
1、增强脸部识别。提供了高精度468点的3D Mesh。可以精准地追踪脸部细微表情,不需要深度传感器,而是运用机器学习(ML)技术深度学习,以达到这样的功能。同时支持安卓及IOS用户。
2、环境光HDR。要让虚拟物品看起来更逼真,更融入实景,其中最重要的功能之一就是要有正确的光照呈现。运用了ARCore所提供的360度全景光照信息,图中的虚拟小火箭,就可以有了对应的反光及影子。
3、Scene Viewer场景观测器。让开发者可以直接在网页上向用户提供方便、好用的3D内容及AR浏览功能。
4、Agumented Image增强图像。可以检测手机拍摄到的图像信息,并与预先设置在数据库中的图像进行匹配。可精确匹配包括移动中的图像,或是同时检测多个图像。
5、云锚点。为安卓和iOS用户创建共享的跨平台体验。就如同图中的案例,从两个人到数百人,都可以在各自的设备上一起种花、浇灌。
四、新近更新的案例补充
此前,VR陀螺已整理了AR软件工程总监王启文(Leon Wang)关于ARCore最新动态的演讲。在此基础上,熊子青补充了一些案例。
1、瞬间放置API(Instant Placement API)
这个功能允许用户仅需根据小范围的平面特征,快速流畅地放置物件与互动,无需先移动设备,等待完整的环境跟踪。
瞬间放置与比例维持功能相结合时,具有以下特点:
美图也运用了Instant Placement 在一些特别的滤镜中,例如在地上摆放一个宝藏箱,或是在地面刻印上今天的天气、日期,用户可以直接跳过扫描平面的步骤,快速放置或移动虚拟物件。
2、景深应用API(Depth API)
景深API关键功能是遮挡虚拟物体、与虚拟对象互动、获得沉浸式效果。这三个功能使得虚拟对象能够与场景真正融合在一起。
例如谷歌创新实验室打造了一款实验性应用Lines of Play。将多米诺骨牌及AR融合,借助深度信息,倒塌的骨牌会与房间中的墙壁家具,产生自然的互动。
Reality Crisis的Skatrix游戏,让用户无论是跳跃在楼梯边缘或书桌上,都可以真实展现遮挡及碰撞的技术魅力。
除了移动游戏及自我表达类应用外,深度信息还在很多工具类应用上大放光彩。
例如提供远程技术解决方案的应用TeamViewer,专家足不出户就可以使用实时3D AR,在机器中准确标注,为用户提供远程技术支持,一步步指示你修好家中的打印机。
知名手机制造商三星,也应用了ARCore Depth API。智能手机可以利用预制尺子进行物体大小参数的测量。
3、持久云锚点API(Persistent Cloud Anchors API)
该应用可以让用户在更大的区域、更长的时间映射锚点内容。换句话说就是开启AR的“保存按钮”,将数字和真实世界对应叠加,用户可以将锚点叠加在任何需要的地方,例如附加笔记。
过去云锚点只能保存二十四小时,这次我们推出全新的架构,将每次保存的时间可设定为一年内任意天数,并可以多次延长时间。
例如创梦天地携手SYBO开发的社交应用MARK。通过Persistent Cloud Anchor,将用户的AR涂鸦创作与真实世界的位置链接。
瑞典铁路局在火车站中的室内导航SJ Labs,也运用了持久云锚点,协助旅客轻松地找到出口或特产店。
除此之外,由于疫情原因,博物馆关闭。REWILD项目组充分运用深度API及Persistent Cloud Anchor,将博物馆搬到家中。这个项目已经两年获得了著名威比奖的最佳AR奖项。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息