空间音频参数合并的制作方法

文档序号:41117489发布日期:2025-03-04 16:44阅读:124来源:国知局
空间音频参数合并的制作方法

本技术涉及用于频带中的声场相关参数估计的装置和方法,但并不排他地涉及用于音频编码器和解码器的时频域声场相关参数估计的装置和方法。


背景技术:

1、参数空间音频处理是音频信号处理的一个领域,其中使用一组参数来描述声音的空间方面。例如,在从麦克风阵列进行参数化空间音频捕获时,从麦克风阵列信号估计一组参数是一种典型且有效的选择,该组参数诸如是频带中声音的方向、以及频带中被捕获声音的定向与非定向部分的比率。众所周知,这些参数很好地描述了在麦克风阵列的位置处的被捕获声音的感知空间特性。这些参数可以相应地在空间声音的合成中使用,以用于双耳式耳机、扬声器、或诸如全景环绕声(ambisonics)之类的其他格式。

2、因此,频带中的方向和直接总能量比(direction and direct-to-total energyratio)是对描述空间音频特别有效的参数化。


技术实现思路

1、根据第一方面,提供了一种装置,包括用于执行以下操作的部件:针对具有音频信号格式的至少一个第一音频信号,确定至少一个元数据参数;针对具有另一音频信号格式的至少一个其他音频信号,确定至少一个其他元数据参数;控制至少一个元数据参数与至少一个其他元数据参数的组合,以生成组合元数据,其中,该组合元数据被配置为与从至少一个第一音频信号和至少一个其他音频信号形成的组合音频信号相关联,以使得该组合元数据包括至少一个空间音频参数。

2、用于针对至少一个第一/其他音频信号确定至少一个元数据参数的部件可以用于执行以下中的至少一个:接收与至少一个第一/其他音频信号相关联的至少一个元数据参数;分析至少一个第一/其他音频信号,以确定至少一个元数据参数;以及对至少一个第一/其他音频信号进行解码,以确定至少一个元数据参数。

3、用于控制与第一音频信号相关联的至少一个元数据参数和与其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的部件可以用于:提取包括至少一个空间音频参数的至少一个元数据参数作为元数据块,该元数据参数与至少一个第一/其他音频信号相关联;将所提取的包括至少一个空间音频参数的至少一个元数据参数作为辅助元数据块添加到分别与至少一个其他/第一音频信号相关联的元数据中,该元数据参数与至少一个第一或其他音频信号相关联。

4、用于提取包括至少一个空间音频参数的至少一个元数据参数作为元数据块,该元数据参数与至少一个第一/其他音频信号相关联的部件可以用于提取以下中的至少一个作为元数据块:至少一个方向参数;至少一个能量比参数;以及与至少一个第一/其他音频信号相关联的至少一个相干性参数,并且其中,用于将所提取的包括至少一个空间音频参数的至少一个元数据参数作为辅助元数据块添加到分别与至少一个其他/第一音频信号相关联的元数据中,该元数据参数与第一/其他音频信号相关联的部件可以用于将以下中的至少一个作为辅助元数据块附加到与至少一个其他/第一音频信号相关联的元数据中:至少一个方向参数;至少一个能量比参数;以及与至少一个第一/其他音频信号相关联的至少一个相干性参数,与至少一个其他/第一音频信号相关联的元数据还可以包括:至少一个主元数据块,其包括与至少一个其他/第一音频信号相关联的至少一个空间音频参数,与至少一个其他/第一音频信号相关联的至少一个空间音频参数包括以下中的至少一个:至少一个方向参数;至少一个能量比参数;以及与其他/第一音频信号相关联的至少一个相干性参数;以及公共元数据块,其与至少一个其他/第一音频信号相关并且包括至少一个非空间音频相关参数,该至少一个非空间音频相关参数包括以下中的至少一个:版本标识符;时频分辨率标识符;多个方向标识符。

5、用于控制至少一个元数据参数与至少一个其他元数据参数的组合以生成组合元数据的部件可以用于:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号比;基于至少一个第一信号比,生成至少一个第一信号权重;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号比;基于至少一个其他信号比,生成至少一个其他信号权重;比较至少一个第一信号权重和至少一个其他信号权重;以及基于比较至少一个第一信号权重和至少一个其他信号权重,生成组合元数据。

6、用于基于比较至少一个第一信号权重和至少一个其他信号权重来生成组合元数据的部件可以用于:在比较指示至少一个第一信号权重比至少一个其他信号权重大确定阈值时,使用与至少一个第一音频信号相关联的至少一个元数据参数作为组合元数据;在比较指示至少一个其他信号权重比至少一个第一信号权重大另一确定阈值时,使用与至少一个其他音频信号相关联的至少一个元数据参数作为组合元数据;在比较另有指示时,生成与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的加权平均。

7、用于控制与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的部件还可以用于:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号能量;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号能量,其中,用于基于至少一个第一信号比来生成至少一个第一信号权重的部件进一步基于至少一个第一信号能量,其中,用于基于至少一个其他信号比来生成至少一个其他信号权重的部件进一步基于至少一个其他信号能量。

8、用于控制与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的部件还可以用于:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号用户输入;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号用户输入,其中,用于基于至少一个第一信号比来生成至少一个第一信号权重的部件可以进一步基于至少一个第一用户输入能量,其中,用于基于至少一个其他信号比来生成至少一个其他信号权重的部件可以进一步基于至少一个其他信号用户输入。

9、用于控制与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的部件还可以用于:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号服务器输入;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号服务器输入,其中,用于基于至少一个第一信号比来生成至少一个第一信号权重的部件进一步基于至少一个第一服务器输入能量,其中,用于基于至少一个其他信号比来生成至少一个其他信号权重的部件可以进一步基于至少一个其他信号服务器输入。

10、所述部件还可以用于将与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数进行组合,以生成组合元数据。

11、具有音频信号格式的至少一个第一音频信号可以是以下中的至少一个:空间麦克风阵列的2-n个通道;多通道音频信号的2-n个通道;一阶全景环绕声信号;高阶全景环绕声信号;以及空间音频信号。

12、具有另一音频信号格式的至少一个其他音频信号可以是以下中的至少一个:空间麦克风阵列的2-n个通道;多通道音频信号的2-n个通道;一阶全景环绕声信号;高阶全景环绕声信号;以及空间音频信号。

13、用于控制至少一个元数据参数与至少一个其他元数据参数的组合以生成组合元数据的部件可以使得组合元数据包括至少一个空间音频参数和至少一个非空间音频相关参数。

14、根据第二方面,提供了一种装置,包括至少一个处理器和包括计算机程序代码的至少一个存储器,该至少一个存储器和计算机程序代码被配置为与至少一个处理器一起使得该装置至少:针对具有音频信号格式的至少一个第一音频信号,确定至少一个元数据参数;针对具有另一音频信号格式的至少一个其他音频信号,确定至少一个其他元数据参数;控制至少一个元数据参数与至少一个其他元数据参数的组合,以生成组合元数据,其中,该组合元数据被配置为与从至少一个第一音频信号和至少一个其他音频信号形成的组合音频信号相关联,以使得该组合元数据包括至少一个空间音频参数。

15、被使得针对至少一个第一/其他音频信号确定至少一个元数据参数的该装置可以进一步被使得执行以下中的至少一个:接收与至少一个第一/其他音频信号相关联的至少一个元数据参数;分析至少一个第一/其他音频信号,以确定至少一个元数据参数;以及对至少一个第一/其他音频信号进行解码,以确定至少一个元数据参数。

16、被使得控制与第一音频信号相关联的至少一个元数据参数和与其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的该装置可以进一步被使得:提取包括至少一个空间音频参数的至少一个元数据参数作为元数据块,该元数据参数与至少一个第一/其他音频信号相关联;将所提取的包括至少一个空间音频参数的至少一个元数据参数作为辅助元数据块添加到分别与至少一个其他/第一音频信号相关联的元数据中,该元数据参数与至少一个第一或其他音频信号相关联。

17、被使得提取包括至少一个空间音频参数的至少一个元数据参数作为元数据块,该元数据参数与至少一个第一/其他音频信号相关联的该装置可以被使得提取以下中的至少一个作为元数据块:至少一个方向参数;至少一个能量比参数;以及与至少一个第一/其他音频信号相关联的至少一个相干性参数,并且其中,被使得将所提取的包括至少一个空间音频参数的至少一个元数据参数作为辅助元数据块添加到分别与至少一个其他/第一音频信号相关联的元数据中,该元数据参数与第一/其他音频信号相关联的该装置可以进一步被使得将以下中的至少一个作为辅助元数据块附加到与至少一个其他/第一音频信号相关联的元数据中:至少一个方向参数;至少一个能量比参数;以及与至少一个第一/其他音频信号相关联的至少一个相干性参数,与至少一个其他/第一音频信号相关联的元数据还可以包括:至少一个主元数据块,其包括与至少一个其他/第一音频信号相关联的至少一个空间音频参数,与至少一个其他/第一音频信号相关联的至少一个空间音频参数可以包括以下中的至少一个:至少一个方向参数;至少一个能量比参数;以及与其他/第一音频信号相关联的至少一个相干性参数;以及公共元数据块,其与至少一个其他/第一音频信号相关并且可以包括至少一个非空间音频相关参数,该至少一个非空间音频相关参数包括以下中的至少一个:版本标识符;时频分辨率标识符;多个方向标识符。

18、被使得控制至少一个元数据参数与至少一个其他元数据参数的组合以生成组合元数据的该装置可以被使得:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号比;基于至少一个第一信号比,生成至少一个第一信号权重;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号比;基于至少一个其他信号比,生成至少一个其他信号权重;比较至少一个第一信号权重和至少一个其他信号权重;以及基于比较至少一个第一信号权重和至少一个其他信号权重,生成组合元数据。

19、被使得基于比较至少一个第一信号权重和至少一个其他信号权重来生成组合元数据的该装置可以被使得:在比较指示至少一个第一信号权重比至少一个其他信号权重大确定阈值时,使用与至少一个第一音频信号相关联的至少一个元数据参数作为组合元数据;在比较指示至少一个其他信号权重比至少一个第一信号权重大另一确定阈值时,使用与至少一个其他音频信号相关联的至少一个元数据参数作为组合元数据;在比较另有指示时,生成与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的加权平均。

20、被使得控制与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的该装置可以进一步被使得:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号能量;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号能量,其中,被使得基于至少一个第一信号比来生成至少一个第一信号权重的该装置可以进一步基于至少一个第一信号能量,其中,被使得基于至少一个其他信号比来生成至少一个其他信号权重的该装置可以进一步基于至少一个其他信号能量。

21、被使得控制与至少一个第一音频信号相关联的至少一个元数据参数和与其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的该装置可以进一步被使得:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号用户输入;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号用户输入,其中,被使得基于至少一个第一信号比来生成至少一个第一信号权重的该装置可以进一步基于至少一个第一用户输入能量,其中,被使得基于至少一个其他信号比来生成至少一个其他信号权重的该装置可以进一步基于至少一个其他信号用户输入。

22、被使得控制与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据的该装置可以进一步被使得:确定与至少一个第一音频信号相关联的至少一个元数据参数所关联的至少一个第一信号服务器输入;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号服务器输入,其中,被使得基于至少一个第一信号比来生成至少一个第一信号权重的该装置可以进一步基于至少一个第一服务器输入能量,其中,被使得基于至少一个其他信号比来生成至少一个其他信号权重的该装置可以进一步基于至少一个其他信号服务器输入。

23、该装置可以进一步被使得将与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数进行组合,以产生组合元数据。

24、具有音频信号格式的至少一个第一音频信号可以是以下中的至少一个:空间麦克风阵列的2-n个通道;多通道音频信号的2-n个通道;一阶全景环绕声信号;高阶全景环绕声信号;以及空间音频信号。

25、具有另一频信号格式的至少一个其他音频信号可以是以下中的至少一个:空间麦克风阵列的2-n个通道;多通道音频信号的2-n个通道;一阶全景环绕声信号;高阶全景环绕声信号;以及空间音频信号。

26、被使得控制至少一个元数据参数与至少一个其他元数据参数的组合以生成组合元数据的该装置可以使得组合元数据包括至少一个空间音频参数和至少一个非空间音频相关参数。

27、根据第三方面,提供了一种方法,包括:针对具有音频信号格式的至少一个第一音频信号,确定至少一个元数据参数;针对具有另一音频信号格式的至少一个其他音频信号,确定至少一个其他元数据参数;控制至少一个元数据参数与至少一个其他元数据参数的组合,以生成组合元数据,其中,该组合元数据被配置为与从至少一个第一音频信号和至少一个其他音频信号形成的组合音频信号相关联,以使得该组合元数据包括至少一个空间音频参数。

28、针对至少一个第一/其他音频信号确定至少一个元数据参数还可以包括以下中的至少一个:接收与至少一个第一/其他音频信号相关联的至少一个元数据参数;分析至少一个第一/其他音频信号,以确定至少一个元数据参数;以及对至少一个第一/其他音频信号进行解码,以确定至少一个元数据参数。

29、控制与第一音频信号相关联的至少一个元数据参数和与其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据还可以包括:提取包括至少一个空间音频参数的至少一个元数据参数作为元数据块,该元数据参数与至少一个第一/其他音频信号相关联;将所提取的包括至少一个空间音频参数的至少一个元数据参数作为辅助元数据块添加到分别与至少一个其他/第一音频信号相关联的元数据中,该元数据参数与至少一个第一或其他音频信号相关联。

30、提取包括至少一个空间音频参数的至少一个元数据参数作为元数据块,该元数据参数与至少一个第一/其他音频信号相关联还可以包括提取以下中的至少一个作为元数据块:至少一个方向参数;至少一个能量比参数;以及与至少一个第一/其他音频信号相关联的至少一个相干性参数,并且其中,将所提取的包括至少一个空间音频参数的至少一个元数据参数作为辅助元数据块添加到分别与至少一个其他/第一音频信号相关联的元数据中,该元数据参数与第一/其他音频信号相关联还可以包括将以下中的至少一个作为辅助元数据块附加到与至少一个其他/第一音频信号相关联的元数据中:至少一个方向参数;至少一个能量比参数;以及与至少一个第一/其他音频信号相关联的至少一个相干性参数,与至少一个其他/第一音频信号相关联的元数据还可以包括:至少一个主元数据块,其包括与至少一个其他/第一音频信号相关联的至少一个空间音频参数,与至少一个其他/第一音频信号相关联的至少一个空间音频参数包括以下中的至少一个:至少一个方向参数;至少一个能量比参数;以及与其他/第一音频信号相关联的至少一个相干性参数;以及公共元数据块,其与至少一个其他/第一音频信号相关并且包括至少一个非空间音频相关参数,该至少一个非空间音频相关参数包括以下中的至少一个:版本标识符;时频分辨率标识符;多个方向标识符。

31、控制至少一个元数据参数与至少一个其他元数据参数的组合以生成组合元数据还可以包括:确定与至少一个第一音频信号相关联的至少一个元数据参数所关联的至少一个第一信号比;基于至少一个第一信号比,生成至少一个第一信号权重;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号比;基于至少一个其他信号比,生成至少一个其他信号权重;比较至少一个第一信号权重和至少一个其他信号权重;以及基于比较至少一个第一信号权重和至少一个其他信号权重,生成组合元数据。

32、基于比较至少一个第一信号权重和至少一个其他信号权重来生成组合元数据还可以包括:在比较指示至少一个第一信号权重比至少一个其他信号权重大确定阈值时,使用与至少一个第一音频信号相关联的至少一个元数据参数作为组合元数据;在比较指示至少一个其他信号权重比至少一个第一信号权重大另一确定阈值时,使用与至少一个其他音频信号相关联的至少一个元数据参数作为组合元数据;在比较另有指示时,生成与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的加权平均。

33、控制与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据还可以包括:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号能量;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号能量,其中,基于至少一个第一信号比来生成至少一个第一信号权重的可以进一步基于至少一个第一信号能量,其中,基于至少一个其他信号比来生成至少一个其他信号权重可以进一步基于至少一个其他信号能量。

34、控制与至少一个第一音频信号相关联的至少一个元数据参数和与其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据还可以包括:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号用户输入;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号用户输入,其中,基于至少一个第一信号比来生成至少一个第一信号权重可以进一步基于至少一个第一用户输入能量,其中,基于至少一个其他信号比来生成至少一个其他信号权重可以进一步基于至少一个其他信号用户输入。

35、控制与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数的组合以生成组合元数据还可以包括:确定与至少一个第一音频信号所关联的至少一个元数据参数相关联的至少一个第一信号服务器输入;确定与至少一个其他音频信号所关联的至少一个元数据参数相关联的至少一个其他信号服务器输入,其中,基于至少一个第一信号比来生成至少一个第一信号权重可以进一步基于至少一个第一服务器输入能量,其中,基于至少一个其他信号比来生成至少一个其他信号权重可以进一步基于至少一个其他信号服务器输入。

36、该方法还可以包括:将与至少一个第一音频信号相关联的至少一个元数据参数和与至少一个其他音频信号相关联的至少一个元数据参数进行组合,以产生组合元数据。

37、具有音频信号格式的至少一个第一音频信号可以是以下中的至少一个:空间麦克风阵列的2-n个通道;多通道音频信号的2-n个通道;一阶全景环绕声信号;高阶全景环绕声信号;以及空间音频信号。

38、具有另一音频信号格式的至少一个其他音频信号可以是以下中的至少一个:空间麦克风阵列的2-n个通道;多通道音频信号的2-n个通道;一阶全景环绕声信号;高阶全景环绕声信号;以及空间音频信号。

39、控制至少一个元数据参数与至少一个其他元数据参数的组合以生成组合元数据可以使得组合元数据包括至少一个空间音频参数和至少一个非空间音频相关参数。

40、根据第四方面,提供了一种包括指令的计算机程序(或包括程序指令的计算机可读介质),该指令用于使得装置至少执行以下操作:针对具有音频信号格式的至少一个第一音频信号,确定至少一个元数据参数;针对具有另一音频信号格式的至少一个其他音频信号,确定至少一个其他元数据参数;控制至少一个元数据参数与至少一个其他元数据参数的组合,以生成组合元数据,其中,该组合元数据被配置为与从至少一个第一音频信号和至少一个其他音频信号形成的组合音频信号相关联,以使得该组合元数据包括至少一个空间音频参数。

41、根据第五方面,提供了一种非暂时性计算机可读介质,包括程序指令,该程序指令用于使得装置至少执行以下操作:针对具有音频信号格式的至少一个第一音频信号,确定至少一个元数据参数;针对具有另一音频信号格式的至少一个其他音频信号,确定至少一个其他元数据参数;控制至少一个元数据参数与至少一个其他元数据参数的组合,以生成组合元数据,其中,该组合元数据被配置为与从至少一个第一音频信号和至少一个其他音频信号形成的组合音频信号相关联,以使得该组合元数据包括至少一个空间音频参数。

42、根据第六方面,提供了一种装置,包括:第一元数据确定电路,被配置为针对具有音频信号格式的至少一个第一音频信号,确定至少一个元数据参数;其他元数据确定电路,被配置为针对具有另一音频信号格式的至少一个其他音频信号,确定至少一个其他元数据参数;控制电路,被配置为控制至少一个元数据参数与至少一个其他元数据参数的组合,以生成组合元数据,其中,该组合元数据被配置为与从至少一个第一音频信号和至少一个其他音频信号形成的组合音频信号相关联,以使得该组合元数据包括至少一个空间音频参数。

43、根据第七方面,提供了一种包括程序指令的计算机可读介质,该程序指令用于使得装置至少执行以下操作:针对具有音频信号格式的至少一个第一音频信号,确定至少一个元数据参数;针对具有另一音频信号格式的至少一个其他音频信号,确定至少一个其他元数据参数;控制至少一个元数据参数与至少一个其他元数据参数的组合,以生成组合元数据,其中,该组合元数据被配置为与从至少一个第一音频信号和至少一个其他音频信号形成的组合音频信号相关联,以使得该组合元数据包括至少一个空间音频参数。

44、一种装置,包括用于执行如上所述的方法的动作的部件。

45、一种装置,被配置为执行如上所述的方法的动作。

46、一种计算机程序,包括用于使计算机执行如上所描述的方法的程序指令。

47、一种在介质上存储的计算机程序产品,可以使装置执行如本文所描述的方法。

48、一种电子设备,可以包括如本文所描述的装置。

49、一种芯片组,可以包括如本文所描述的装置。

50、本技术的实施例旨在解决与现有技术相关联的问题。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1