发布时间：2020-06-23 07:12 | 标签：
VR 初音未来 AR Oculus 苹果 ValveIndex
微信扫一扫：分享
微信里点“发现”，扫一下
二维码便可将本文分享至朋友圈
ASU研究人员展示可识别空间书写的VR手指追踪工具FMKit
尽管混合现实头戴设备的制造商每年都在致力于推出功能更先进的设备，以使用户感受到真实世界与数字世界的融合，但是输入方式（在VR或AR环境中进行交互的能力）仍然具有挑战性，因为大多数设备在交互时仍然需要控制器。本周，美国亚利桑那州立大学（ASU）的研究人员展示了一种名为FMKit的潜在替代产品，它使头显能够精确跟踪单个手指的运动，并识别空中手写。
ASU的工作超出了Leap Motion配件和Oculus Quest VR头显中的手部追踪功能，可以将单个手指的路径记录在3D空间中，并与四个手写样本数据集进行比较。指尖书写可用于识别单个用户，通过密码安全地对用户进行身份验证以及创建文本输入，以替代使用手持控制器键入，说出或选择单词的方式。
该系统的价值不仅仅在于将空中书写的英语或汉语单词转换为文本（研究人员正在关注的功能），还具有潜在的商业应用前景。包括可以在空中绘制独特的签名，以解锁受保护的XR头显或单独受保护的应用，从而使公司能够高度个性化保护数字内容。或者，公司可以让团队共享一个通用的密码系统，该系统不仅可以识别数字或字母，还可以识别五角星或其他独特标记等符号。
FMKit当前支持两种类型的输入设备-每秒运动110次的Leap Motion控制器和每秒运动50次的自定义惯性测量数据手套-使用Python模块来收集，预处理和可视化扫描信号。作为用户识别系统，FMKit搭配Leap Motion精度可达到93％以上，搭配手套的精度可达到96％以上。但是对于手写识别来说，使用Leap Motion的效果更好，而且该系统最多只能在87.4％的时间内准确识别单词。这还不足以取代语音输入来进行听写，但这对于只能与手指和头戴式传感器一起使用的系统来说是一个好的开始。
ASU的Duo Lu，Linzhen Luo，Dijiang Huang和Yeye Yang已在GitHub上发布了FMKit的源代码，这是一个开放源代码项目，其中包括库和数据集，希望其他研究人员能够扩展他们的工作。作者将在本周作为CVPR 2020计算机视觉增强和虚拟现实研讨会的一部分介绍他们的研究。
Valve针对Index头显发布Room View 3D更新，带来更好的3D透视效果
Valve的Index头显自推出以来就具有passthrough查看功能，但是该公司刚刚发布了一项实验性更新，旨在通过创建与用户的眼睛实际所见更加匹配的合成图像，使摄像头的视图更加逼真。
一周前，如果用户戴上Valve Index头显并点按两次菜单按钮，就会看到周围环境的“直通”视图。尽管此视图在技术上是立体的，但它并不能完全显示用户未佩戴头显时会看到的景象，这在很大程度上是因为头显上的摄像头与眼球的位置不同。实际上，这些摄像头距离用户的眼睛实际位置只有几英寸远，并且摄像头之间的距离要远得多。
Valve在本周发布了针对Index的passthrough视图的实验性升级，该视图旨在解决这些问题并为用户提供“立体正确”的视图。Valve称其为“ Room View 3D”，如果您自己拥有Index头显，今天就可以通过安装SteamVR beta版本1.13，然后在SteamVR的“相机”选项中启用“3D”来进行检出。在此更新中，Valve还更新了Index的固件，以减少头显摄像头的延迟。
至于Room View 3D，我们的理解是，与其简单地向用户确切地显示摄像机所看到的内容，不如将每个摄像机的视图进行比较以评估场景各部分的深度。然后，场景将从原始摄像机输入中“变形”，以更加匹配一对摄像机在与用户的眼睛完全相同的位置时所看到的图像。
我们测试了Room View 3D，可以看到立体校正视图的好处。当系统正常运行时，一切都会变得更加逼真，尤其是头显前手的大小。
但是，该系统在此实验阶段非常不稳定。即使只是缓慢地环顾四周，也会显示深度伪像，看起来像场景的各个部分都出现了毛刺。有时候，当将手靠近头显时，它会在多个不同深度上出现拉伸和变形，这可能是因为Index相机的低感光度。
Valve的Room View 3D方法类似于Quest和Rift S上的“ Passthrough +”功能，尽管即使在类似的照明条件下，Oculus的解决方案在这一点上也更加稳定和可用。Valve的“实验”方法看起来会随着时间的推移而改进；该公司指出：“此功能正在迅速发展，因此我们希望听到您的想法和反馈。” Valve说，它与Arcturus Industries和Occipital合作开发了基础的计算机视觉技术。
在头显发布之前，Valve称Index上的摄像头非常适合用于计算机视觉，但是在发布之后将近一年，该公司在最初的直通视角之外对它们所做的工作很少，直到现在。不幸的是，原始的直通视图和新的Room View 3D继续遭受很长（几秒钟）的激活延迟，相比之下，Oculus头显上的直通激活几乎是即时的，这使得快速外观与某人交谈或确保没有任何东西进入用户的游戏空间变得更加可行。
Valve表示，用户可以“期望在接下来的几个月中看到更多的实验”，并且希望这项工作最终能够将直通视图用于SteamVR的边界设置过程中，因为Oculus的最新头显已经证明这有助于更流畅的设置经验。
彭博社：苹果或于2022年推出头显设备，外形类似Oculus Quest
彭博社（Bloomberg）的Mark Gurman在一篇报道中详细介绍了苹果公司内部VR/AR部门的情况，以及其AR和VR头戴式设备的开发过程是如何被改变的。
具体来说，该报道内容涵盖了前苹果设计主管Jony Ive和Mike Rockwell之间的分歧，这两位高管领导着苹果公司VR和AR的1000人秘密项目小组，涉及头戴式设备N301的基本方面。
N301最初被设计为一款超强大的系统，其图形和处理速度在可穿戴产品中是所闻所未闻的。但该设备处理能力过于先进，从而产生了过多的热量，以至于该技术无法被塞入光滑的头显中。为此，Rockwell的团队计划出售一个固定式计算单元以承担复杂的处理能力，该单元的原型类似于一个小型Mac，可以通过无线信号连接到头戴式设备。在Rockwell的早期版本中，该头戴式设备还可以在功能较弱的独立模式下运行。
Ive对销售头显的前景感到担忧，该头显需要单独的固定设备才能发挥全部功能。他鼓励Rockwell和他的团队围绕可以完全嵌入到设备中的功能较弱的技术重新开发N301。但Rockwell对此方案并不认同，他认为搭配无线单元将实现出色的性能，以至于让市场上的其他任何东西都无法比拟该设备。这样的僵局持续了几个月。
根据该报道，苹果首席执行官蒂姆·库克最终选择支持Ive，后者不希望苹果推广将人们带离现实世界的技术。结果，这款头显设备将不再与单独的运算单元通信而采用一体式设计，从而使图形不太可能像以前那样好，并且下载速度可能会变慢。
尽管现在正在开发的头显设备在技术上没有达到最初的预期，但它已经相当先进了。它的设计中配备有超高分辨率的屏幕，这几乎使用户几乎无法将虚拟世界与真实世界区分开。使用过该原型的人说，电影扬声器系统将使体验更加逼真。
据说N301的原型看起来像是较小的Oculus Quest头显，主体为织物，但塑料却比Quest少。据报道，苹果的工程团队仍在测试不同头部形状的设备，以找到理想的佩戴方式，而且该公司尚未决定该设备的售价。
苹果希望这款头显拥有自己的App Store，“专注于游戏和流视频内容的功能，同时还可以作为一种用于虚拟会议的超高科技通信设备”。Siri将能够控制头显，尽管据报道这款头显设备也已通过物理控制器进行了测试。
N301头显似乎只是苹果公司正在进行的AR / VR项目之一。另一款据说是代号为N421的AR眼镜，目前的原型与太阳镜相似，带有“可容纳电池和芯片的加厚镜架”。曾在苹果公司工作了近三年的Ive于去年离开苹果公司，据说他更喜欢N421眼镜的概念。
苹果的增强现实头显设备预计将于2022年发布，紧接着将有一对时尚的增强现实眼镜在2023年发布。
仿90年代复古游戏，《Theta Legion VR》将于今年夏天登陆Quest
《Theta Legion》是一款受《Doom》和《Quake》等90年代FPS经典游戏启发而制作开发的游戏，这一点在整个设计中都很明显。大多数纹理以像素艺术为特色，并且混合了3D环境和2D角色，这给了它一种真正的复古感觉。
《Theta Legion》 实际上是《Theta Legion Go》的升级版，后者于2018年12月在Oculus Go上免费发布。当《Theta Legion》 在去年登陆Rift时，开发者将其描述为比Go版本更大胆、快速、厉害的一次升级，这也适用于即将到来的Quest版本。
在Oculus Quest上尝试了游戏的早期版本之后，结果令人印象深刻。正如所期待的那样，这款游戏就像一款现代化的经典射击游戏，像素美术图形效果非常好。甚至还有一些漂亮的水面反光特效图形，这些细节的呈现令这款复古游戏看起来有一种不一样的美感，也正是因为其细腻的图像呈现限制了其在移动硬件上运行，比如Quest。但现在，玩家终于可以在Quest的平台上看到它了。
开发团队Garage Collective称，目前还没有关于Quest移植的具体发布日期，因为还有大量的工作要做，现阶段可以体验的版本只是一个早期试玩版本。尽管如此，该团队指出，它目前的目标是在夏季末在Oculus Quest商店上发布。
疫情期间无集会，初音未来VR主题公园MIKU LAND GATE β将于8月开放
在Virtual Cast和Gugenka®公司的共同努力下，日本流行的全息虚拟歌手初音未来将拥有自己的虚拟现实主题公园——MIKU LAND GATE β。
今年8月,Virtual Cast 的粉丝们可以进入一个虚拟的主题公园——在那里他们可以参加初音未来的演唱会开/闭幕式与其他游客互动和聊天，还可以购买独家初音未来相关的原创商品，这其中包括一个真人大小的初音未来数字模型以及各类游戏角色中的虚拟服装。
MIKU LAND GATE β 的入口是免费的，对世界各地的初音迷和尚未接触初音的玩家开放。这可能是一个让你说服自己的朋友去看虚拟偶像迷们是怎么追星的，甚至可以让他们首次体验到VR的神奇之处。
线下初音未来音乐会门票平均约100美元，由于持续的冠状病毒大流行迫使大型公共集会取消，这种时候创建一个虚拟现实主题公园可以给粉丝们一个与同样宅家无法出门的朋友见面，并且观看他们最喜欢的虚拟明星在这个表演。
日本一流的建筑设计事务所 Takeru Shoji Architects负责初音未来主题公园场景的打造。该场景结合了真实环境BIM数据，十分逼真。此外，还有消息称，MIKU LAND GATE β将支持AR观看，这意味着有可能虚拟偶像迷可以通过手机将整个主题公园映射到现实世界中，但是这很可能只是为了方便在社交媒体上分享，因为其并未体积是否会基于一些高端的AR设备推出。
初音未来本身是由十几岁的数字天后voicebank 开发的一款Vocaloid声音合成软件，用户可以通过输入歌词生成合成声音。从那时起，基于Vocaloid声音合成软件建立的各种虚构歌手已形象经发展成为一种文化偶像，初音未来就是最成功的一个。由于虚拟偶像拥有庞大的国际粉丝群，全球各地的现场演出门票爆满。
2014年，初音未来首次亮相美国网络电视节目《大卫·莱特曼》，并在2014年的巡演中与流行偶像Lady Gaga见面，Gaga本人在推特上写道:“我最喜欢的虚拟流行歌星初音未来将于5月6日至6月3日在ARTPOP专辑中亮相!看，她多可爱!”
初音未来与Karent唱片公司签约，拥有4000多首可供商业使用的歌曲。初音未来的粉丝可以通过Steam上的Virtual Cast 或智能手机应用Holomodels(在iOS/Android上提供)进入MIKU LAND GATE β，该项目将于8月8日- 10日正式启动，并向公众免费开放。
第一时间了解XR资讯
关注VR陀螺官网（vrtuoluo.cn）
投稿/爆料：tougao@youxituoluo.com
稿件/商务合作： 六六（微信 13138755620）
加入行业交流群：六六（微信 13138755620）
.png)
