用于预测肘关节姿势的系统和方法与流程

文档序号:35453263发布日期:2023-09-14 11:57阅读:来源:国知局

技术特征:

1.一种方法,包括:由计算设备:

2.根据权利要求1所述的方法,其中,所述传感器数据包括所述头戴式设备的所述摄像头所采集到的所述图像或所述头戴式设备的第二摄像头所采集到的第二图像,所述图像或所述第二图像包括所述用户所握持或佩戴的控制器的一部分;

3.根据权利要求1或2所述的方法,其中,所述用户的、至少包括所推断的与所述用户相关联的肘部姿势的所述身体姿势是通过非线性求解器来推断的。

4.根据权利要求1、2或3所述的方法,其中,所述头戴式设备的所述摄像头指向向下的方向,以采集所述用户的所述身体的所述一部分。

5.根据前述权利要求中任一项所述的方法,其中,所述头部姿势、所述手腕姿势和所述头戴式设备的所述摄像头所采集到的所述图像可以与相同的时间戳相关联。

6.根据前述权利要求中任一项所述的方法,其中,所述图像中与所述用户的所述身体的所述一部分对应的所述一个或多个区域是:

7.根据前述权利要求中任一项所述的方法,其中,所述三维体积约束由三维边界限定,当所述一个或多个区域被放置在所述摄像头的图像平面中时,所述三维边界源于所述摄像头位姿,且朝向所述图像中的所述一个或多个区域的一个或多个二维边界。

8.根据前述权利要求中任一项所述的方法,其中,所述所推断的与所述用户相关联的肘部姿势位于所述三维体积约束内。

9.一种或多种计算机可读非暂态存储介质,所述一种或多种计算机可读非暂态存储介质包括软件,所述软件在被服务器执行时可操作以:

10.根据权利要求9所述的介质,其中,所述传感器数据包括所述头戴式设备的所述摄像头所采集到的所述图像或所述头戴式设备的第二摄像头所采集到的第二图像,所述图像或所述第二图像包括所述用户所握持或佩戴的控制器的一部分;

11.根据权利要求9或10所述的介质,其中,所述用户的、至少包括所推断的与所述用户相关联的肘部姿势的所述身体姿势是通过非线性求解器来推断的。

12.根据权利要求9、10或11所述的介质,其中,所述头戴式设备的所述摄像头指向向下的方向,以采集所述用户的所述身体的所述一部分;和/或优选地,其中,所述图像中与所述用户的所述身体的所述一部分对应的所述一个或多个区域使用分割掩模来表示;和/或优选地,其中,所述头部姿势、所述手腕姿势和所述头戴式设备的所述摄像头所采集到的所述图像可以与相同的时间戳相关联。

13.一种系统,包括:一个或多个处理器;以及

14.根据权利要求13所述的系统,其中,所述传感器数据包括所述头戴式设备的所述摄像头所采集到的所述图像或所述头戴式设备的第二摄像头所采集到的第二图像,所述图像或所述第二图像包括所述用户所握持或佩戴的控制器的一部分;

15.根据权利要求14所述的系统,其中,所述用户的、至少包括所推断的与所述用户相关联的肘部姿势的所述身体姿势是通过非线性求解器来推断的;和/或优选地,其中,所述头戴式设备的所述摄像头指向向下的方向,以采集所述用户的所述身体的所述一部分;和/或优选地,其中,所述图像中与所述用户的所述身体的所述一部分对应的所述一个或多个区域使用分割掩模来表示。


技术总结
计算系统可以基于头戴式设备所采集到的传感器数据,来确定用户的头部姿势和手腕姿势。计算系统还可以接收头戴式设备的摄像头所采集到的图像,该图像包括用户的身体的至少一部分。计算系统可以使用该图像来确定图像中与用户的身体对应的一个或多个区域,并且基于这些区域和摄像头的摄像头位姿来确定在采集到该图像时用户的肘部可能处于的三维体积约束。计算系统可以根据该信息,利用头部姿势、手腕姿势和三维体积约束来推断用户的身体姿势,该身体姿势至少包括所推断的与用户相关联的肘部姿势。

技术研发人员:马赫迪·萨尔马尼·拉希米,本杰明·安托万·乔治·勒福杜,基肖尔·文卡特山,塞缪尔·艾伦·约翰逊
受保护的技术使用者:元平台技术有限公司
技术研发日:
技术公布日:2024/1/15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1