手势识别方法、装置、头戴设备、头戴系统及介质与流程

本申请涉及头戴，更具体地，涉及一种手势识别方法、一种手势识别装置、一种头戴设备、一种头戴系统以及一种计算机可读存储介质。

背景技术：

1、随着科技与经济的发展，头戴设备已经被越来越广泛的使用。以及，手势识别功能为头戴设备重要的功能之一。

2、目前头戴设备上设置有两个采集外界环境的相机。头戴设备根据这两个相机采集用户手部图像，确定出用户手势。而当相机和用户手部之间存在遮挡物，或者用户一个手遮挡另一个手势时，头戴设备则无法根据上述的两个相机确定出正确的用户手势。

技术实现思路

1、本申请的一个目的是提供一种用于手势识别的新技术方案。

2、根据本申请的第一方面，提供了一种手势识别方法，应用于头戴设备，所述头戴设备适配有至少一个手柄，所述方法包括：

3、获取同一时刻所述头戴设备和任一所述手柄分别采集执行参考手势的手的手部图像，所述参考手势为遮挡手势；

4、根据所述手部图像，确定识别手势；

5、根据所述识别手势以及参考手势，确定手势识别结果；

6、在所述手势识别结果表征所述识别手势存在偏差的情况下，输出调整所述手柄位置的提示信息；

7、以及，重复所述获取同一时刻所述头戴设备和任一所述手柄分别采集到的执行参考手势的手的手部图像，直至所述手势识别结果表征手势识别准确。

8、可选地，所述方法在所述获取同一时刻所述头戴设备和任一所述手柄分别采集执行参考手势的手的手部图像之前，还包括：

9、输出参考手势的图像或描述语音中的至少一个。

10、可选地，所述方法还包括：

11、在所述头戴设备运行目标应用，且接收到手势识别存在偏差的通知信息的情况下，触发所述获取同一时刻所述头戴设备和任一所述手柄分别采集执行参考手势的手的手部图像。

12、可选地，所述方法还包括获取所述通知信息的步骤，所述步骤包括：

13、检测设定的触发事件是否发生；

14、在发生的情况下，生成手势识别存在偏差的通知信息；

15、所述设定的触发事件包括：未识别到手势、识别到的手势为异常手势以及接收到手势识别存在偏差的用户指示信息中的至少一个。

16、可选地，所述方法在所述获取同一时刻所述头戴设备和任一所述手柄分别采集执行参考手势的手的手部图像之后，还包括：

17、对于任一所述手部图像，剔除所述手部图像中的背景图像；

18、将剔除所述背景图像后的所述手部图像转换为灰度图像；

19、所述根据所述手部图像，确定识别手势，包括：

20、根据所述灰度图像，确定识别手势。

21、根据本申请的第二方面，提供了一种手势识别装置，其特征在于，所述装置应用于头戴设备，所述头戴设备是配有至少一个手柄，所述装置包括：

22、获取模块，用于获取同一时刻所述头戴设备和任一所述手柄分别采集执行参考手势的手的手部图像，所述参考手势为遮挡手势；

23、第一确定模块，用于根据所述手部图像，确定识别手势；

24、第二确定模块，用于根据所述识别手势以及参考手势，确定手势识别结果；

25、第一输出模块，用于在所述手势识别结果表征所述识别手势存在偏差的情况下，输出调整所述手柄位置的提示信息；

26、重复模块，用于重复所述获取同一时刻所述头戴设备和任一所述手柄分别采集到的执行参考手势的手的手部图像，直至所述手势识别结果表征手势识别准确。

27、可选地，所述装置还包括：

28、第二输出模块，用于输出参考手势的图像或描述语音中的至少一个。

29、根据本申请的第三方面，提供了一种头戴设备，所述头戴设备包括如第二方面所述的装置；或者，

30、包括存储器和处理器，所述存储器用于存储计算机指令，所述处理器用于从所述存储器中调用所述计算机指令，以执行如第一方面中任一项所述的手势识别方法。

31、根据本申请的第四方面，提供了一种头戴系统，所述头戴系统包括如第三方面所述的头戴设备以及至少一个手柄。

32、根据本申请的第五方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序在被处理器执行时实现根据第一方面中任一项所述的手势识别方法。

33、本申请实施例提供了手势识别方法，该方法应用于头戴设备，头戴设备适配有至少一个手柄，方法包括：获取同一时刻头戴设备和任一手柄分别采集执行参考手势的手的手部图像，参考手势为遮挡手势；根据手部图像，确定识别手势；根据识别手势以及参考手势，确定手势识别结果；在手势识别结果表征识别手势存在偏差的情况下，输出调整手柄位置的提示信息；以及，重复获取同一时刻头戴设备和任一手柄分别采集到的执行参考手势的手的手部图像，直至手势识别结果表征手势识别准确。在该方法中，通过手柄辅助头戴设备的方式，在不引入额外的硬件成本的情况下可使得头戴设备得到更为准确的识别手势。进一步的基于本申请实施例提供的手势识别方法可实现对遮挡手势的准确识别。

34、通过以下参照附图对本申请的示例性实施例的详细描述，本申请的其它特征及其优点将会变得清楚。

技术特征：

1.一种手势识别方法，其特征在于，应用于头戴设备，所述头戴设备适配有至少一个手柄，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述方法在所述获取同一时刻所述头戴设备和任一所述手柄分别采集执行参考手势的手的手部图像之前，还包括：

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

4.根据权利要求3所述的方法，其特征在于，所述方法还包括获取所述通知信息的步骤，所述步骤包括：

5.根据权利要求1所述的方法，其特征在于，所述方法在所述获取同一时刻所述头戴设备和任一所述手柄分别采集执行参考手势的手的手部图像之后，还包括：

6.一种手势识别装置，其特征在于，所述装置应用于头戴设备，所述头戴设备是配有至少一个手柄，所述装置包括：

7.根据权利要求6所述的装置，其特征在于，所述装置还包括：

8.一种头戴设备，其特征在于，所述头戴设备包括如权利要求6或7所述的装置；或者，

9.一种头戴系统，其特征在于，所述头戴系统包括如权利要求8所述的头戴设备以及至少一个手柄。

10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-5中任一项所述的手势识别方法。

技术总结
本申请公开了一种手势识别方法、装置、头戴设备、头戴系统及介质，涉及头戴技术领域。其中方法应用于头戴设备，头戴设备适配有至少一个手柄，方法包括：获取同一时刻头戴设备和任一手柄分别采集执行参考手势的手的手部图像，参考手势为遮挡手势；根据手部图像，确定识别手势；根据识别手势以及参考手势，确定手势识别结果；在手势识别结果表征识别手势存在偏差的情况下，输出调整手柄位置的提示信息；重复获取同一时刻头戴设备和任一手柄分别采集到的执行参考手势的手的手部图像，直至手势识别结果表征手势识别准确。通过该方法可实现对遮挡手势的准确识别。

技术研发人员：孙臣乐,尹伟
受保护的技术使用者：歌尔科技有限公司
技术研发日：
技术公布日：2024/1/13