发布时间：2020-05-07 11:15 | 标签：
VR AR Oculus Quest VROOM
微信扫一扫：分享
微信里点“发现”，扫一下
二维码便可将本文分享至朋友圈
微软推在线会议虚拟机器人系统VROOM，可结合AR/VR协同办公
Microsoft Research成员今天推出了用于在线会议的虚拟机器人系统（VROOM），它是一种将AR和VR技术结合在一起，并通过远程呈现机器人将真人大小的化身带入工作场所的方法。VROOM的开发者在最近发布的一篇论文中详细介绍了该系统，并表示这将使在VR中进行远程工作的人和在办公室工作并戴着HoloLens 头显的人感觉到同处一室。
当Windows Mixed Reality头显跟踪远程工作人员的姿势和头部运动时，他们可以通过机器人对周围环境和运动进行360度查看。Unity应用程序用于根据远程工作人员的运动为佩戴HoloLens的人设置虚拟化身。
用户的手势和手臂动作由控制器记录，两个参与者可以看到这些动作。该系统增加了人们说话时的嘴巴动作，以及眨眼和闲置的动作，使虚拟形象看起来更逼真。
VROOM还可以将2D图像转换为3D头像，以将远程工作人员的脸部放在虚拟化身的头部。VROOM系统还为VR用户提供了第一人称视角，因此远程工作者可以看到他们的手部动作和手势，以及使用HoloLens头显的人。当远程工作者指示机器人移动时，可以看到虚拟化身行走。
VROOM由西蒙·弗雷泽大学博士候选人和Microsoft研究实习生Brennan Jones、Microsoft研究工程师Yaying Zhang、Microsoft研究社交通信技术高级研究员Sean Rintel和Microsoft研究人员Priscilla Wong开发而成。
“尽管我们使用了带屏幕的远程呈现机器人，以便可以在标准机器人远程呈现和VROOM之间进行比较，但在所有本地用户都戴着头显的空间中并不需要屏幕。因此，在将来的迭代中可以使用任何可驱动并安装了360度摄像机的机器人，”研究人员在论文中说道。
研究人员期望像VROOM这样的技术能够适用于经常使用白板或设计会议的行业，远程呈现机器人的其他有据证明的用途包括博物馆中的应用、出席远程学术会议和远距离关系。
VROOM仅演示了一对一的交互，其未来的工作可能会探索多人应用程序，在共享的混合现实工作区中进行实验，或者与价格较低的移动机器人一起工作。
其他最新的VR工作场所应用程序包括上个月引入了VR Zoom会议的Spaces应用程序，上周HTC也推出了适用于虚拟现实的会议和协作Vive Sync应用程序。
索尼研究人员推新VR控制手柄原型：具有手动追踪功能，采用关节式设计
索尼互动娱乐（SIE）的研究人员最近推出了一款运动控制器原型，该控制器展示了使用机器学习和电容传感器进行全手跟踪的实验技术。
像Leap Motion这样的基于视觉的手部跟踪系统非常适合在不使用运动控制器之类的物体时追踪手部，但在使用控制器通常会遮挡手指的移动。
为了让VR运动控制器具有更好的手感，SIE研究人员Kazuyuki Arimatsu和Hideki Mori着手构建了一个原型控制器，该控制器集成了许多如Valve Index控制手柄那样的电容式接近传感器。
原型包含62个电极，这些电极记录了许多不同的手的大小和姿势的训练数据集。与Index控制器一样，Sony的原型采用了带有腕带的开放式手掌设计。
论文指出：“我们引入了2.5D表示法，将卷积神经网络方法应用于曲面的电容图像，并基于计算机视觉领域的最新成果对两种类型的网络架构进行了评估，我们还使用该原型实现了实时交互应用程序，并演示了在VR应用程序中使用手指进行直观交互的可能性。”
但是Arimatsu和Mori也承认，他们的设计目前存在一些缺陷，即缺乏对所有不同大小手部的支持。
“如果我们将该方案交付给全球用户，这可能会造成问题。由于我们需要光学跟踪系统来记录训练数据集，因此无法使用我们当前的训练方法实际根据用户的使用情况微调训练。为了更好地适应各种手型，需要研究一种用于增强或合成电容图像的方法。”
当前的算法无法估算用户手部的形状（例如手指的粗细），这会在执行诸如捏等动作之类的操作时在实际手部姿势和虚拟手部姿势之间造成差距。用户当然可以在拾取较小的虚拟物品时进行自我调整，尽管对于Knuckles以及原始的Oculus Touch控制器来说，这确实是正确的。Oculus Touch控制器是首个具有相对较小的电容传感器阵列的主流VR控制器。
无论是通过Sony内置的PC解决方案还是打算与PS5配合使用控制器，Sony都将继续朝着商业化的方向发展。我们仍在屏息等待下一代PSVR的发布，希望Sony至少能够淘汰老化的PS Move和PS Camera光学组合。
Oculus曝光下一代Quest：体积更小刷新更高，将于2021年推出
据外媒报道，Oculus正在研发第二代Quest，相比现在的版本，下一代将拥有较小的外形尺寸，更快的刷新率和新的控制手柄。
彭博社的报道援引匿名人士的话说，Oculus第二代的目标似乎不是Quest 2，并且Oculus正在测试Quest的多个新版本，计划在2020年末推出这款头显，但是由于新冠病毒影响，头显面世时间会延迟到2021年。
消息人士告诉彭博社，Quest新一代版本比现有Quest体积小10％至15％，而且重量更轻。Facebook通过去除Quest的面料装饰并重新设计头带来减轻一些重量。Oculus新版本之前已经展示了原型头显，其外形尺寸有了显着改善，但是该技术很可能不会在一段时间内离开实验室。
此外，据说下一代Quest的刷新率至少为90Hz，可能高达120Hz，高于大部分头显当前的72Hz。更快的刷新速度意味着头显中的动作更平稳，更舒适，但是可能需要更高的性能。Oculus此前曾表示，目前Quest的显示器在技术上能够达到90Hz，但如果他们想在事后改变这一现状，则公司将不得不向监管机构为新头显重新认证，这是他们不愿做的。鉴于据说Quest继任者至少有一些迭代使用90Hz显示屏，因此新耳机可能仍会使用与当前相同的显示屏。而且如此高的刷新率将需要从Quest当前的Qualcomm 835处理器升级到更强大的处理器，除非Oculus选择执行内插60 FPS到120Hz刷新率之类的操作（类似于PSVR）。
消息人士还告诉彭博社，Oculus正在为头显重新设计的控制器，以解决在剧烈使用过程中电池盖滑落的问题。据报道，该控制器将与当前的Quest之后版本兼容（因此也可能与Rift S兼容）。据称，正在开发的某些Quest二代保留了与当前头显类似的IPD模块。消息人士还指出，新的Quest型号将继续支持Oculus Link，从而使头显能够与PC捆绑在一起，体验高端VR游戏。
索尼新专利曝光新头显面部追踪功能
索尼一项美国专利透露了该公司对VR中面部追踪的研究，这是未来多人游戏和VR社交的一项至关重要的技术。
该专利的标题为“在虚拟现实环境中VR用户的面部追踪功能集成”，该专利是在头显底部或鼻隙中使用一个或多个摄像头来实时捕获用户嘴巴和面部表情的情况。追踪的数据将显示在虚拟形象上，并在多人游戏中在线显示给其他用户。
与以前的Sony专利一样，该头显还具有眼动追踪功能。该专利还解决了摄像头无法完全扫描面部的问题，通过一种弯曲传感器（Flex Sensor）压在用户的面部上来描绘用户面部细节，同时还运用了一种感测鼻翼精确位置的方法，使这部分细节扫描独立于整个面部。有消息称，Facebook早前也展示过类似技术的雏型。
目前没有消息称索尼的这项技术将运用在PlayStation VR 2中，或是索尼即将推出的PlayStation 5头显上。
第一时间了解XR资讯
关注VR陀螺官网（vrtuoluo.cn）
投稿/爆料：tougao@youxituoluo.com
稿件/商务合作： 六六（微信 13138755620）
加入行业交流群：六六（微信 13138755620）
