头戴式可穿戴装置、音频信息的处理方法及存储介质与流程

本申请涉及音频处理，具体涉及头戴式可穿戴装置、音频信息的处理方法及存储介质。

背景技术：

1、随着ar/vr市场的渐渐兴起，用户对于处于虚拟世界的体验具有更高的要求。例如，用户佩戴着ar眼镜以及耳机，可以畅游于虚拟世界中。获取用户的头部姿势并利用头部相关传递函数(hrtf)为虚拟世界的用户模拟3d环境中声音的声学交互(例如，自然声波传播、衰减和/或交互)。

2、以头戴式耳机为例，检测头戴式耳机的位姿，并把位姿信息传送给手机等智能设备，由手机等智能设备基于头戴式耳机位姿的变化，调整3d音频，并把调整后的音频发送给头戴式耳机并进行播放。然而，当用户的位姿有变化时，比如用户进行较大幅度的移动、转动，手机等智能设备先获取用户位姿信息，再据此将调整后的音频发送给头戴式耳机需要较大的时延，并且，其中耳机将位姿信息传送给手机等智能设备也将增加耗时，这都将导致3d音频的调整出现较大时延，实时性较差，引起用户听觉不适，用户体验较差。

技术实现思路

1、针对现有技术中存在的上述技术问题，提出了本申请。本申请旨在提供头戴式可穿戴装置、音频信息的处理方法及存储介质，其能够直接将多声道音频信息转换为两声道音频信息，减少调整音频信息的时延，提高音频信息转换的实时性，从而提高用户佩戴头戴式可穿戴装置的音频体验。

2、根据本申请的第一方案，提供一种头戴式可穿戴装置，包括位姿测量单元、wifi通信单元、处理单元和左右耳扬声器。所述位姿测量单元，其配置为：测得所述头戴式可穿戴装置在参考时刻的第一位姿以及当前时刻的第二位姿；wifi通信单元，其配置为：获取来自智能设备的多声道pcm音频信息；处理单元，其配置为：基于所述多声道pcm音频信息的多声道的设置、所述第一位姿和所述第二位姿，适配所调用的所述多声道中各个声道的音频源的左耳fir滤波器和右耳fir滤波器，其中，所述左耳fir滤波器表征从各个声道的音频源到左耳的当前声音空间感知属性，所述右耳fir滤波器表征从各个声道的音频源到右耳的当前声音空间感知属性；基于所述多声道pcm音频信息，利用各个声道的左耳fir滤波器和右耳fir滤波器的组，转换为两声道pcm音频信息；以及左右耳扬声器，其配置为分别播放所述两声道pcm音频信息。

3、根据本申请的第二方案，提供一种音频信息的处理方法，包括获取头戴式可穿戴装置在参考时刻的第一位姿以及当前时刻的第二位姿；获取来自智能设备的多声道pcm音频信息；基于所述多声道pcm音频信息的多声道的设置、所述第一位姿和所述第二位姿，适配所调用的所述多声道中各个声道的音频源的左耳fir滤波器和右耳fir滤波器，其中，所述左耳fir滤波器表征从各个声道的音频源到左耳的当前声音空间感知属性，所述右耳fir滤波器表征从各个声道的音频源到右耳的当前声音空间感知属性；基于所述多声道pcm音频信息，利用各个声道的左耳fir滤波器和右耳fir滤波器的组，转换为两声道pcm音频信息。

4、根据本申请的第三方案，提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序指令在被处理器运行时使得所述处理器执行本申请各个实施例所述的音频信息的处理方法。

5、与现有技术相比，本申请实施例的有益效果在于：

6、本申请实施例提供的头戴式可穿戴装置基于wifi通信单元获取来自智能设备的多声道pcm音频信息，wifi无线通信具有更高的无线传输能力，传输吞吐量较高，适用于头戴式可穿戴装置和智能设备之间的pcm音频信息的传送，具有较低的传输时延。从智能设备接收的pcm音频信息，无需经过音频解码，可以直接被转换为两声道pcm音频信息，减少了音频调整的时延。该头戴式可穿戴装置能够基于多声道pcm音频信息的多声道的设置、第一位姿和第二位姿，适配多声道中各个声道的音频源的左耳fir滤波器和右耳fir滤波器，并利用各个声道的左耳fir滤波器和右耳fir滤波器的组，将多声道pcm音频信息直接转换为两声道pcm音频信息，从整体上大大减少了音频信息转换的时延。如此，该头戴式可穿戴装置能够在用户移动或者头部转动时，及时地对3d音频信息进行调整，以保证音频信息地空间特性和方向性，从而提高用户佩戴该头戴式可穿戴装置进行游戏或者畅游于虚拟世界时的音频体验。

7、上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述说明和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。

技术特征：

1.一种头戴式可穿戴装置，其特征在于，包括：

2.根据权利要求1所述的头戴式可穿戴装置，其特征在于，所述处理单元进一步配置为：

3.根据权利要求1所述的头戴式可穿戴装置，其特征在于，所述左耳fir滤波器的组包括第一滤波器组和第三滤波器组，所述右耳fir滤波器的组包括第二滤波器组和第四滤波器组；

4.根据权利要求3所述的头戴式可穿戴装置，其特征在于，所述处理单元进一步配置为：

5.根据权利要求3所述的头戴式可穿戴装置，其特征在于，所述处理单元进一步配置为：对所述第二位姿和第三位姿进行分析，以得到所述第三位姿相较于所述第二位姿的偏差，在所述偏差大于阈值的情况下，执行第一滤波器组和第三滤波器组、第二滤波器组和第四滤波器组之间的切换。

6.根据权利要求1所述的头戴式可穿戴装置，其特征在于，所述参考时刻为所述头戴式可穿戴装置进行音频播放的初始时刻或用户设置的预定时刻；在所述参考时刻为用户设置的预定时刻的情况下，所述处理单元被进一步配置为：接收用户对所述预定时刻的设置。

7.根据权利要求1所述的头戴式可穿戴装置，其特征在于，所述位姿测量单元为惯性测量单元和/或同步定位与地图构建。

8.根据权利要求1所述的头戴式可穿戴装置，其特征在于，所述位姿测量单元进一步配置为：将所述第一位姿和所述第二位姿发送至所述智能设备；

9.根据权利要求1所述的头戴式可穿戴装置，其特征在于，所述头戴式可穿戴装置为智能眼镜、耳机或智能眼镜与耳机的组合装置。

10.一种音频信息的处理方法，其特征在于，包括：

11.根据权利要求10所述的处理方法，其特征在于，对所述第一位姿和第二位姿进行分析，在所述第二位姿相较于所述第一位姿发生变化的情况下，适配所调用的在所述当前时刻的各个声道的左耳fir滤波系数和右耳fir滤波系数，并基于所述左耳fir滤波系数和右耳fir滤波系数，来执行所述左耳fir滤波器和右耳fir滤波器的滤波处理。

12.根据权利要求10所述的处理方法，其特征在于，所述左耳fir滤波器的组包括第一滤波器组和第三滤波器组，所述右耳fir滤波器的组包括第二滤波器组和第四滤波器组；

13.根据权利要求12所述的处理方法，其特征在于，在所述第一滤波器组和第三滤波器组之间以及第二滤波器组和第四滤波器组之间进行切换的预设时间段内，

14.一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序指令在被处理器运行时使得所述处理器执行如权利要求10-13任一项所述的音频信息的处理方法。

技术总结
本申请提供了头戴式可穿戴装置、音频信息的处理方法及存储介质。头戴式可穿戴装置包括位姿测量单元、WIFI通信单元、处理单元和左右耳扬声器。位姿测量单元被配置为测得头戴式可穿戴装置在参考时刻的第一位姿以及当前时刻的第二位姿。WIFI通信单元被配置为获取来自智能设备的多声道PCM音频信息。处理单元被配置为基于多声道PCM音频信息的多声道的设置、第一位姿和第二位姿，适配多声道中各个声道的音频源的左耳FIR滤波器和右耳FIR滤波器；基于多声道PCM音频信息，利用各个声道的左耳FIR滤波器和右耳FIR滤波器的组，转换为两声道PCM音频信息。如此，在用户位姿发生变化时，可降低音频调整的时延，提高用户体验。

技术研发人员：童伟峰,黎骅,张大庆,张亮
受保护的技术使用者：恒玄科技（北京）有限公司
技术研发日：
技术公布日：2024/1/14