基于头戴显示设备的兴趣识别方法、头戴显示设备及介质与流程

本申请涉及虚拟显示，尤其涉及一种基于头戴显示设备的兴趣识别方法、头戴显示设备及介质。

背景技术：

1、头戴显示设备所应用的技术主要有ar(augmentedreality，增强现实)技术、vr(virtualreality，虚拟现实)技术和mr(mixedreality，混合现实)技术，基于这些技术，用户在佩戴头戴显示设备时，能够通过设备中的各类传感器、摄像装置或者光学组件体验到真实或是虚拟的视觉场景。

2、然而，在常规的应用当中，头戴显示设备主要还是用于被动为用户呈现用户选择看到的真实或是虚拟场景，并且基于用户自身的操作进行内容呈现，无法主动为用户推荐感兴趣的内容，也无法为用户匹配兴趣相同的其他用户，以实现用户的交友需求。

3、综上，如何充分利用头戴式显示设备，智能识别并理解用户的兴趣倾向，从而实现内容的个性化推荐，增强设备的定制化服务效能，俨然已成为本领域亟需解决的技术问题。

4、上述内容仅用于辅助理解本申请的技术方案，并不代表承认上述内容是现有技术。

技术实现思路

1、本申请的主要目的在于提供一种基于头戴显示设备的兴趣识别方法、头戴显示设备及介质，旨在解决如何基于头戴显示设备来识别用户的兴趣的技术问题。

2、为实现上述目的，本申请提出一种基于头戴显示设备的兴趣识别方法，所述的方法包括：

3、通过头戴显示设备的检测设备识别佩戴者的情绪状态；

4、在检测到所述情绪状态为预设兴奋状态时，生成情绪激发指令；

5、在检测到所述情绪激发指令时，获取所述佩戴者的视觉画面，并将所述视觉画面作为样本数据；

6、根据所述样本数据确定所述佩戴者的兴趣倾向。

7、在一实施例中，所述检测设备包括：对内相机；所述通过头戴显示设备的检测设备识别佩戴者的情绪状态的步骤包括：

8、通过所述对内相机获取所述佩戴者的面部表情；

9、在所述面部表情中获取表情特征，并根据所述表情特征判定所述佩戴者的情绪状态。

10、在一实施例中，所述根据所述样本数据确定所述佩戴者的兴趣倾向的步骤之前还包括：

11、在检测到所述头戴显示设备处于佩戴状态时，按照预设的时间间隔通过所述头戴显示设备的对外相机采集环境画面；

12、将所述环境画面作为样本数据。

13、在一实施例中，所述获取所述佩戴者的视觉画面的步骤包括：

14、判断所述头戴显示设备的显示屏中是否存在全屏显示的图像内容；

15、若存在所述图像内容，则对所述图像内容进行截图得到所述视觉画面；

16、若不存在所述图像内容，则基于所述头戴显示设备的对外相机获取所述视觉画面。

17、在一实施例中，所述基于所述头戴显示设备的对外相机获取所述视觉画面的步骤包括：

18、通过所述头戴显示设备的传感器获取佩戴者眼球的眼球位置；

19、根据所述眼球位置和所述头戴显示设备的对外相机的相机位置建立目标坐标系，以确定所述眼球位置和所述相机位置的相对位置关系；

20、通过头戴显示设备的对内相机获取所述佩戴者的注视方向与注视焦距；

21、根据所述相对位置关系将所述注视方向转换为所述对外相机的第一画面方向，和，将所述注视焦距转换为所述对外相机的第一画面焦距；

22、基于所述相对位置关系、所述第一画面方向和所述第一画面焦距获取所述佩戴者的视觉画面。

23、在一实施例中，所述基于所述相对位置关系、所述第一画面方向和所述第一画面焦距获取所述佩戴者的视觉画面的步骤包括：

24、在所述头戴显示设备的显示屏中不存在显示画面时，通过所述对外相机拍摄不同方向和不同焦段的外部画面；

25、判断各所述外部画面中是否存在画面焦距与所述第一画面焦距相同，且画面方向与所述第一画面方向相同的第一外部画面；

26、若存在所述第一外部画面，则将所述第一外部画面作为所述视觉画面；

27、若不存在所述第一外部画面，则在各所述外部画面中确定第二外部画面，所述第二外部画面的第二画面方向与所述第一画面方向的角度差值小于预设角度阈值，且所述第二外部画面的第二画面焦距与所述第一画面焦距的焦距差值小于预设焦距阈值；

28、在存在多个所述第二外部画面时，根据所述第一画面方向将各所述第二画面进行裁剪和拼接得到中间画面；

29、根据所述第一画面焦距和各所述第二画面焦距对所述中间画面进行处理得到所述视觉画面，以使所述视觉画面的画面焦距与所述第一画面焦距相同。

30、在一实施例中，所述基于所述相对位置关系、所述第一画面方向和所述第一画面焦距获取所述佩戴者的视觉画面的步骤包括：

31、在所述头戴显示设备的显示屏中存在显示画面时，根据所述第一画面方向和所述第一画面焦距调整所述对外相机的拍摄方向和拍摄焦段；

32、通过所述对外相机按照所述拍摄方向和所述拍摄焦段进行拍照得到外部画面；

33、基于所述相对位置关系将所述外部画面与所述显示画面合成得到所述视觉画面。

34、在一实施例中，所述根据所述样本数据确定所述佩戴者的兴趣倾向的步骤包括：

35、对所述样本数据中的各样本图像进行预处理得到相同图像格式的各中间样本图像；

36、根据预设的图像处理模型对各所述中间样本图像进行标签预测得到各所述中间样本图像的特征标签；

37、计算各所述特征标签的出现频率，并将各所述出现频率中超过预设频率的目标特征标签作为所述佩戴者的兴趣倾向。

38、此外，为实现上述目的，本申请还提出一种头戴显示设备，所述头戴显示设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序配置为实现如上文所述的基于头戴显示设备的兴趣识别方法的步骤。

39、此外，为实现上述目的，本申请还提出一种存储介质，所述存储介质为计算机可读存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上文所述的基于头戴显示设备的兴趣识别方法的步骤。

40、本申请提供了一种基于头戴显示设备的兴趣识别方法，本申请通过头戴显示设备检测佩戴者的情绪状态，在佩戴者的情绪状态满足预设的兴奋状态时，生成情绪激发指令，响应于该情绪激发指令，头戴显示设备获取佩戴者此刻的视觉画面，并将视觉画面作为样本数据来对佩戴者的兴趣倾向进行预测。

41、综上可知，本申请通过获取用户在处于兴奋下的视觉画面，使得头戴显示设备能够获取到引起佩戴者情绪波动的画面，即用户感兴趣的画面，从而基于该视觉画面能够对用户的兴趣进行识别，得到用户的兴趣倾向，从而使得头戴显示设备能够识别用户的兴趣，从而更加贴合用户的个性化需求。

技术特征：

1.一种基于头戴显示设备的兴趣识别方法，其特征在于，所述的方法包括：

2.如权利要求1所述的方法，其特征在于，所述检测设备包括：对内相机；所述通过头戴显示设备的检测设备识别佩戴者的情绪状态的步骤包括：

3.如权利要求1所述的方法，其特征在于，所述根据所述样本数据确定所述佩戴者的兴趣倾向的步骤之前还包括：

4.如权利要求1所述的方法，其特征在于，所述获取所述佩戴者的视觉画面的步骤包括：

5.如权利要求4所述的方法，其特征在于，所述基于所述头戴显示设备的对外相机获取所述视觉画面的步骤包括：

6.如权利要求5所述的方法，其特征在于，所述基于所述相对位置关系、所述第一画面方向和所述第一画面焦距获取所述佩戴者的视觉画面的步骤包括：

7.如权利要求6所述的方法，其特征在于，所述基于所述相对位置关系、所述第一画面方向和所述第一画面焦距获取所述佩戴者的视觉画面的步骤包括：

8.如权利要求1所述的方法，其特征在于，所述根据所述样本数据确定所述佩戴者的兴趣倾向的步骤包括：

9.一种头戴显示设备，其特征在于，所述头戴显示设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序配置为实现如权利要求1至8中任一项所述的基于头戴显示设备的兴趣识别方法的步骤。

10.一种存储介质，其特征在于，所述存储介质为计算机可读存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的基于头戴显示设备的兴趣识别方法的步骤。

技术总结
本申请公开了一种基于头戴显示设备的兴趣识别方法、头戴显示设备及介质，涉及虚拟显示技术领域，公开了一种基于头戴显示设备的兴趣识别方法，包括：通过头戴显示设备的检测设备识别佩戴者的情绪状态；在检测到情绪状态为预设兴奋状态时，生成情绪激发指令；在检测到情绪激发指令时，获取佩戴者的视觉画面，并将视觉画面作为样本数据；根据样本数据确定佩戴者的兴趣倾向。本申请通过获取用户在处于情绪激发状态下的视觉画面，使得头戴显示设备能够获取到引起佩戴者情绪波动的画面，即用户感兴趣的画面，从而基于该视觉画面能够对用户的兴趣进行识别，得到用户的兴趣倾向，从而使得头戴显示设备能够识别用户的兴趣，从而更加贴合用户的个性化需求。

技术研发人员：朱客客,于洋
受保护的技术使用者：歌尔股份有限公司
技术研发日：
技术公布日：2024/9/23