编译/VR陀螺
社交VR平台VRChat近日在Steam公开测试版客户端,以及Avatars SDK 3.10.6-beta.1及以上版本中,正式推出了SDK级别的原生虚拟化身面部追踪支持。
此前VRChat的眼部、面部追踪一直依赖OSC协议和第三方工具VRCFaceTracking实现,虚拟化身本身并不原生支持完整的面部追踪能力,没有插件的情况下只能实现基础的注视、眼睑运动。本次原生支持落地后,创作者可以直接通过化身组件的专属模块配置面部表情,新系统将表情映射到混合变形与动画参数,兼容VRCFT的统一表情标准,还与平台原有的音频驱动口型、眼神眼睑功能做了打通。

原生方案的另一大优势是面部追踪数据支持网络同步,且不会占用虚拟化身的同步参数预算,理论上可以降低同步负载,让其他用户看到的面部表情更统一,同时提升系统运行性能。适配方面,该功能既支持VRCFT这类OSC第三方方案,也兼容平台自带的自拍表情功能,台式机和安卓端用户都可以通过摄像头将面部动作镜像到虚拟化身上。
据了解,该功能经过了一段时间的封闭测试,收集了多位社区知名创作者的反馈,目前已有热门头像包率先推出适配版本。硬件层面,目前同时支持眼动追踪与摄像头面部追踪的主流头显包括Pico 4 Pro/企业版、Meta Quest Pro、三星Galaxy XR,Quest 3/3S等设备也有社区开源方案可用,仅支持眼动的设备也可接入对应数据。

值得关注的是,即将推出的Meta VR眼镜虽然硬件支持眼动与摄像头面部追踪,但据开发者挖掘,首发阶段并不会向第三方开放视觉面部追踪的API接口,第三方应用仅能获取眼动数据,面部表情只能依靠音频驱动方案,摄像头面部追踪能力仅限第一方应用使用。这一限制引发了不少开发者不满,相关官方反馈帖已获得高票支持,目前已被Meta列入待办清单。
来源:uploadvr
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 林南(微信 19250561593)
加入行业交流群:林南(微信 19250561593)
版权申明:本文经原作者授权发布,不代表VR陀螺立场,如需转载请直接联系原作者
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息