编译/VR陀螺

近日，美国专利商标局公布了苹果公司的一项专利申请，涉及基于手部特征验证用户身份的技术。苹果在专利中指出，可能会有多个家庭成员都想使用 Apple Vision Pro，系统必须识别出不同的手势来控制 visionOS。在另一个例子中，苹果公司描述了一种工作场所场景，即多个戴头显的人在合作项目时，Vision Pro可以在办公室或仅在单个项目上识别注册过的不同用户的手，从而赋予这些用户查看项目（如草稿）或编辑项目的权限。

苹果公司在其专利背景中指出，在 Apple Vision Pro 中，一个人的物理动作或其表现形式的子集会被追踪，作为回应，XR 环境中模拟的一个或多个虚拟对象的一个或多个特征会以符合现实属性的方式进行调整。某些 XR 环境允许多个用户与 XR 环境中的虚拟对象或彼此进行交互。例如，用户可以使用手势与 XR 环境的组件进行交互。然而，我们需要一种改进的技术来管理确定执行手势的用户的身份。

确认手势身份

苹果公司的发明涵盖了捕捉周围环境的传感器数据，这些数据可用于提取手部特征。在某些实施例中，二维图像帧可用于提取手部特征，这些特征可用于手部追踪。根据一个或多个实施例，可对网络进行训练，以读取传感器数据（如二维图像帧）并生成手部特征，如边界框、手部关键点、手部中心和手的特性。网络经过训练后，可根据单个二维图像帧为手部特征提供三维数据。例如，关键点、边界框和/或手中心能够以空间三维坐标的形式提供。

在某些实施例中，手部特征可用于预测环境中的特定手部是否属于应被追踪的特定用户。例如，可以追踪捕获传感器数据的设备的用户，而忽略场景中的其他手。被追踪的手的手部特征可用于手部追踪技术。

图源：patentlyapple

苹果专利图 10 以框图形式显示了用于确认手势身份的示例系统；图 1 显示了用于管理场景中活动用户身份的系统设置。

图源：patentlyapple

苹果专利图 2 显示了注册用户手部的技术流程图；图 5 显示了根据手部特征确定用户授权的系统设置；图 8 显示了从图像数据中提取手部特征的技术流程图。

更具体到图 5，我们看到的是多个用户参与的多用户通信会话的表示视图 #500。多用户通信会话包括虚拟对象 #510，它是供多个用户可见的多用户通信会话演示草稿。如图所示，用户 Emily Smith #504 的右手正在虚拟对象上做出双指轻扫手势 #514。同样，无名氏 508 的右手也在虚拟对象上做出双指轻扫的手势 #518。在本示例中，双指轻扫手势可能与删除或以其他方式操作虚拟对象有关。

苹果专利图 5 还包括授权列表 #520。授权列表可以存储为授权存储区等。在某些实施例中，授权列表可以是身份验证模块和/或追踪模块管理的用户列表的一部分。

如图所示，授权列表包括与多用户通信会话中的对象相关联的授权信息。如授权列表示例所示，无名氏可以查看演示文稿（如虚拟对象 #510），但不能进行编辑。同时，用户 Emily Smith 有权编辑演示文稿。

此外，Anon 1 配置文件可能没有授权。在某些实施例中，匿名配置文件可能与无授权或有限授权相关联。因此，在某些实施例中，演示文稿草稿可以对与Anon 1 配置文件相关联的用户进行混淆。例如，草稿演示虚拟对象可能对未经授权的用户（如与Anon 1 配置文件相关联的用户）完全不可见。因此，如上所述，与Emily Smith #504 的右手相关联的手势 #514 可能会导致虚拟对象被操作，而与无名氏的右手相关联的手势 #518 #508 可能会被检测到，被确定为未授权编辑任务，并被忽略。

在某些实施例中，可生成和/或传输与无名氏未经授权的尝试操作相关的日志条目或通知。因此，这些技术允许电子设备确认执行特定手势的手的身份，以防止在电子设备视线范围内的未经授权的用户劫持设备，或无意中导致设备根据手势执行操作。

想了解更多关于本专利的细节，请查阅苹果公司的专利申请 20230306097。

来源：patentlyapple