苹果专利可为AR VR用户进行源于人工智能的全身身体姿态建模

(映维网 2021年10月25日)对于特定的XR体验而言,系统需要首先理解用户的身体姿势,比如说能够呈现用户映射行为的虚拟化身应用。在所述示例中,如果用户活动物理身体的一部分,则虚拟化身需要活动相应的虚拟身体部分。又例如,特定的XR体验可以根据用户的身体姿势改变渲染的场景画面,亦即场景能够随着用户的移动而发生变化。所以,生成用户身体姿势信息的技术十分重要。
 
在一份名为”Generating body pose information“的专利申请中,苹果就描述了这样一种技术。
发明描述的系统主要用于生成人体姿势信息。在各种实现中,设备包括非暂时性存储器和与非暂时性存储器耦合的一个或多个处理器。在一个实现中,所述方法包括通过设备获取与人体对应的一组图像。在一个实现中,所述方法包括生成由多个分支神经网络系统定义的人体姿势模型。
 
在一个实现中,多个分支神经网络系统中的每个神经网络系统共享第一各自人体关节的至少相邻部分,从而对第一各自身体关节和第二各自身体关节之间的人体各自部分进行建模。
 
接下来,所述方法包括向多个分支神经网络系统中的第一个神经网络和第二个神经网络提供相应部分的图像集。在一个实现中,第一个神经网络和第二神经网络对应于相邻的身体部分。
 
最后,至少由多个神经网络系统中的第一个神经网络和第二个神经网络联合确定第一个相应身体关节和第二个相应身体关节的姿势信息。
 
简单来说,用户设备首先获取人体的图像,然后再由神经网络处理得出身体的姿势信息。在获取人体的姿势信息后,系统可以将其用于支持各种XR用例,比如说需要映射用户物理行为的虚拟化身应用。

dawei

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注