5月27日下午,由武汉东湖新技术开发区管理委员会主办,陀螺科技联合主办的2022元宇宙产业创新交流会在深圳市南山区举行。
本次交流会以“世界光谷·元力觉醒”为主题,聚焦游戏、XR、数字文创、元宇宙等领域,邀请了多位重磅嘉宾参会交流。
包括HTC、中兴通讯、万兴科技、英伟达、燧光、睿悦信息、瑞云科技、达晨财智、火花幻境、Dream Glass、中科未来、VR陀螺等元宇宙行业先锋代表,腾讯、阿里云、字节跳动、TCL、OPPO、VIVO、华强方特、雷鸟、清博智能、飞蝶虚拟现实等国内外知名企业代表参会。
大会现场,Dream Glass 营销总监 蒋利以“AR眼镜如何在医疗行业落地”为主题发表了演讲。
图源:陀螺科技
以下为演讲实录:
大家下午好,我是蒋利。很开心今天和大家进行交流和学习,我今天要分享的主题是《AR眼镜在医疗行业的落地》。
从2016年开始,VR和AR眼镜做了很多行业应用,很多人心中会有一个疑问,这些应用对教育、医疗,文旅,工业,是否真的起到了助力行业升级的实际价值?是不是一次性的示范性工程?这些项目是否可以达到可复制性?今天我会分享一些Dream Glass最近做的一些实际的医疗案例,借此跟大家探讨一下,什么样的应用是具有可复制性,是具有实际落地价值的。
首先,介绍一下我们公司 Dream Glass。2016年我们在美国硅谷成立,成立之初便获得了几千万的融资。2018年,我们率先推出了自己的C端产品,在天猫和京东开通了旗舰店,成为真正开始做C端的第一家AR眼镜品牌。去年年底,我们获得了新一轮数千万元的投资。
2018年,我们在海外进行众筹,总金额是150万美金,成绩是非常不错的,这个成绩放到现在也非常不错,大概售出四千多台产品。第二年,这款产品进行了量产,2020年双十一销售1千多台,单品销量在XR品类京东天猫双榜排行第一,成绩非常亮眼,给AR眼镜做C端注入了一针强心剂。我们在无人机市场也做了探索,和大疆消费级和行业级产品进行适配。除了大疆,Dream Glass线下还入驻了电信、联通,switch游戏店,商场数码店等。
刚才说的是C端的市场,我们在教育,医疗,工业,文旅市场都做了相关的探索,今天我重点说一下我们在医疗方面的行业应用:5G+AR远程急诊协助方案, 5G+AR远程手术指导, 5G+AR远程手术培训, 5G+AR超声波远程会诊,5G+AR病房探视。首先我们来了解下AR远程急诊协助。为了让大家更了解这个方案,我播放一段医院的实际使用视频。
(视频介绍)这个是基层医院的接诊室,左下角是远程专家端,遇到急难杂症,基层医院给值班室的医生打电话。基层医院没有很好的办法解决这种急诊问题,可以戴上眼镜,由远程的专家进行协同救治。完成救治后进行病人建档,现场的通话视频也会进行存档。我们做了摄像头优化,电脑端的画面看得比较清楚。
AR远程急诊协助方案,让基层医生解放了医生的双手,同时能够无障碍参与治疗。对于远程的专家,能够不间断的通过第一视角观察病患,掌握患者的完整病征信息,以便作出更好的判断和治疗,同时可以对患者进行标注,降低基层医生对沟通的理解歧义。远程协助可以解决基层医院医资力量不足的问题,推荐医院同质化建设。
Dream Glass这款自由曲面的眼镜,为什么适合做远程急诊协助方案?首先是它的大视场角90度,高清分辨率4K,使远程专家发送救治资料到眼镜端让基层医疗实时查看,成为可能。另外我们定制了高透的医疗镜片,透光率达到85%。戴上这个眼镜,医生观察病患和周围环境,几乎没有阻挡的感觉。同时对摄像头做了优化处理,因为摄像头不能是固定的,真正治疗过程中,基层医生一直在操作,头部一直在动,远程端看清现场的画面有一定的阻碍,我们定制了可手动调节摄像头,让远程专家可以观察到不同角度的位置。另外焦距也做了优化,我们做了很多实践,医生和患者的距离大概是一个手臂,这个距离是最好的,所以我们把摄像头的聚焦定在大约0.45米,把细节都做完善。
大家知道,学医是很辛苦的,70-80%的医生都戴眼镜,近视友好是实际应用非常重要的方面,医生佩戴眼镜可以直接使用,不用调焦距或者定制镜片。另外它是一款一体机,比较轻巧,用头部承重,所以佩戴起来一两个小时是没有问题的。如果我们用BB或者光波导形式的的眼镜,戴在鼻梁上,医生俯身的时候,眼镜万一掉下来砸到伤口是非常严重的,而头部佩戴的这种方式非常牢固。每个细节我们都从不断的实践中,考虑到了。
关于AR远程手术指导,如果大型的手术出现了异常的情况,主刀医生向专家发起申请,进行实时的协同救治。包括三个方面,一个是病情评估,专家发回评估表了解病情,让主刀医生把病人的现状填一下,比如脉搏、血压,现场情况等。填写的过程,一个是通过语音,如果病人不是全麻的情况下不能用语音,因为会影响病人的情绪,那么就用手势识别,用简单的手势,一或者二三四,后台根据视频自动填病情评估量表。
其次是实时指导,因为在手术中出现异常的情况,专家不能按照原来的手术方案进行,就用新的手术方案,主刀医生存在不熟的情况,专家会发实时的手术流程给到主刀医生AR眼镜上进行显示,主刀医生根据流程提示进行操作,并接受远程专家的实时指导。肯定有人会问,这么重要的手术台前,如果戴着AR眼镜会不会影响工作效率,遮挡视线。这些问题我们其实都考虑了,手术台上有强光,AR眼镜对医生视线的影响刚好可以忽略。手术室的强光照射,摄像头的画面是曝光的,摄像头我们做了一个强光检测,同时后天实时做曝光处理,实时反馈到摄像头,让远程专家在强光下也能清楚的以第一视角获得到现场的信息。
一般的医院是终身的培训制,如果厉害的专家医生主刀相对大型的手术,其他的医生想学习,那么,由专家医生戴上眼镜,其他医生可以通过智慧大屏进行实操的远程学习。
超声波会诊,主要由手势操作,因为B超穿过的层次非常多,检测母体,胎心或者特殊专科,如眼科的时候,需要非常有经验的专家操作,这时候需要用到远程协助会诊。眼镜摄像头采集医生手势动作,通过超声机接口采集超声波超声动图,
后台实时合成视频,专家端通过合成视频远程判断。传统的远程会诊采集装置,固定摄像头,手势采集时,远近难控制,易遮挡,不够灵活,需要在采集工作站(采集超声动图),超声机,患者间频繁切换视角。AR方案中,眼镜戴在操作医生的头上,手势采集过程简单,清晰,无须频繁切换视角,装置灵活,病人床边也可以一键发起远程超声的会诊。
AR病房的探视方案,比如ICU或者EICU的场景,病人家属没有办法进入,护士护理病人的时候,戴上眼镜,家属可以实时知道病人的情况。
以上就是我要分享的Dream Glass 最近实际在医院落地的方案。回到我最初提出的问题,这些方案是否真的有实际使用价值?答案是肯定的。我们做这些方案的时候,目标非常明确,我们所做的方案需要可复制性,真的能够帮助医生提高工作效率和质量,这样的方案才是有意义的,而不是一次性的示范性工程。我们Dream Glass的做事方式也会一直保持这种实事求是的风格。
我的分享结束,谢谢大家!
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
版权申明:本文为VR陀螺原创,任何第三方未经授权不得转载。如需转载请联系微信:vrtuoluo233 申请授权,并在转载时保留转载来源、作者以及原文链接信息,不得擅自更改内容,违规转载法律必究。文中有图片、视频素材来自互联网或无法核实出处,如涉及版权问题,请联系本网站协商处理。
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息