空间音频的制作方法

本公开的实施例涉及空间音频。特别地，一些实施例涉及在发射机装置与接收机装置之间传输音频信号。

背景技术：

1、空间音频适应用户的变化的视点。例如，对于头戴式耳机收听，空间音频可以随着用户转动他或她的头部而旋转。

2、人类非常善于检测声源方向。人类使用变化的视点(例如头部旋转)来改进对声源方向的检测。例如，用户可以旋转他或她的头部，以使所期望的声音到达用户的声源方向检测能力最好的中心位置。而且，头部旋转可以用于区分在用户前后的声源。采用左到右的头部旋转，前面的声源从右到左移动，而后面的声源从左到右移动。

3、在现有的解决方案中，跟踪用户的视点的视点数据由发射机装置传输或获得，该发射机装置根据视点数据修改音频信号以旋转音频场景。然后，发射机装置对音频信号进行低位速率编码，并将编码后的音频发送到接收机装置以用于渲染。在一些示例中，接收机装置可以是头戴式耳机。接收机装置对音频进行解码，并将其回放给用户。这些步骤可导致响应于用户的视点的变化而在向用户渲染修改后的音频时的延迟。通常，延迟可以是几百毫秒。因此，声源方向会显得滞后。期望减小该延迟。

技术实现思路

1、根据各种但不一定所有的实施例，提供了一种用于实现自适应回放的装置，其包括被配置为执行以下操作的部件：

2、针对第一视点获得用于至少第一声道和第二声道的第一音频信号；

3、针对第二视点获得用于至少第一声道和第二声道的第二音频信号；

4、至少基于第一音频信号与第二音频信号之间的差异，针对第二视点确定单声道差异音频信号；

5、取决于单声道差异音频信号和第一音频信号，使得能够估计针对第二视点的第二音频信号的第一声道和第二声道两者。

6、根据一些但不一定所有的示例，被配置为基于第一音频信号与第二音频信号之间的差异来确定单声道差异音频信号的部件被配置为确定第一音频信号和第二音频信号的参考声道之间的差异，其中，参考声道是第一声道、第二声道、或者基于第一声道和第二声道的合成声道，并且其中，被配置为使得能够估计第二音频信号的第一声道和第二声道两者的部件取决于单声道差异音频信号和第一音频信号的参考声道使得能够进行估计。

7、根据一些但不一定所有的示例，被配置为针对第二视点确定单声道差异音频信号的部件被配置为在时域中确定第一音频信号与第二音频信号之间的差异。

8、根据一些但不一定所有的示例，该装置进一步包括平滑部件，其被配置为在频域中对单声道差异音频信号进行平滑以获得平滑的单声道差异音频信号，并取决于平滑的单声道差异音频信号和第一音频信号，使得能够估计至少第二音频信号。

9、根据一些但不一定所有的示例，平滑部件被配置为针对一个或多个不同的频段在频段内复制频率仓(bin)。

10、根据一些但不一定所有的示例，平滑部件被配置为进行动态平滑，其中，至少基于针对第一视点的第一音频信号与针对第二视点的第二音频信号之间的差异，对单声道差异音频信号的动态平滑取决于从第一视点到第二视点的视点变化的可能性。

11、根据一些但不一定所有的示例，该装置包括被配置为执行以下操作的部件：

12、当第二视点从第一视点偏移正的第一角度并且第三视点从第一视点偏移负的第一角度时，针对第二视点但不针对第三视点获得单声道差异音频信号。

13、根据各种但不一定所有的实施例，提供了一种用于实现自适应回放的方法，其包括：

14、针对第一视点获得用于至少第一声道和第二声道的第一音频信号；

15、针对第二视点获得用于至少第一声道和第二声道的第二音频信号；

16、至少基于第一音频信号与第二音频信号之间的差异，针对第二视点确定单声道差异音频信号；

17、取决于针对第二视点的单声道差异音频信号和第一音频信号，使得能够估计针对第二视点的第二音频信号的第一声道和第二声道。

18、根据各种但不一定所有的实施例，提供了一种用于自适应回放的装置，其包括被配置为执行以下操作的部件：

19、至少取决于针对第一视点的第一音频信号与针对第二视点的第二音频信号之间的差异，针对第二视点获得单声道差异音频信号；以及

20、取决于单声道差异音频信号和第一音频信号，估计针对第二视点的第二音频信号的第一声道和第二声道。

21、根据一些但不一定所有的示例，该装置包括被配置为执行以下操作的部件：至少取决于针对第一视点的第一音频信号与针对第二视点的第二音频信号之间在时域中的差异，在时域中针对第二视点获得单声道差异音频信号；以及

22、取决于在时域中的单声道差异音频信号和在时域中的第一音频信号，在时域中估计针对第二视点的第二音频信号的第一声道和第二声道。

23、根据一些但不一定所有的示例，该装置被配置为使得如果第二视点对应于相对于第一视点的头部旋转，则至少基于涉及单声道差异音频信号与第一音频信号的第一声道和第二声道中的一个声道的加法以及涉及单声道差异音频信号与第一音频信号的第一声道和第二声道中的另一个声道的减法，估计第二音频信号。

24、根据一些但不一定所有的示例，该装置被配置为使得如果第二视点对应于相对于第一视点的头部平移，则至少基于涉及单声道差异音频信号与第一音频信号的第一声道和第二声道中的一个声道的加法以及涉及单声道差异音频信号与第一音频信号的第一声道和第二声道中的另一个声道的加法，估计第二音频信号，或者至少基于涉及单声道差异音频信号与第一音频信号的第一声道和第二声道中的一个声道的减法以及涉及单声道差异音频信号与第一音频信号的第一声道和第二声道中的另一个声道的减法，估计第二音频信号。

25、根据一些但不一定所有的示例，该装置包括被配置为执行以下操作的部件：

26、当第二视点从第一视点偏移正的第一角度并且第三视点从第一视点偏移负的第一角度时，重新使用针对第二视点的单声道差异音频信号的逆作为针对第三视点的单声道差异音频信号。

27、根据各种但不一定所有的实施例，提供了一种方法，包括：

28、至少取决于针对第一视点的第一音频信号与针对第二视点的第二音频信号之间的差异，针对第二视点获得单声道差异音频信号；以及

29、取决于单声道差异音频信号和第一音频信号，估计针对第二视点的第二音频信号的第一声道和第二声道。

30、根据各种但不一定所有的实施例，提供了一种用于实现自适应回放的装置，其包括用于执行以下操作的部件：

31、针对第一视点获得第一音频信号；

32、针对第二视点获得第二音频信号；

33、基于第一音频信号与第二音频信号之间的差异，针对第二视点至少确定差异音频信号；

34、在频域中对差异音频信号进行平滑，以获得平滑的第一差异音频信号；

35、取决于平滑的差异音频信号和第一音频信号，使得能够估计至少第二音频信号。

36、根据各种但不一定所有的实施例，提供了一种方法，其包括：

37、针对第一视点获得第一音频信号；

38、针对第二视点获得第二音频信号；

39、基于第一音频信号与第二音频信号之间的差异，针对第二视点至少确定差异音频信号；

40、在频域中对差异音频信号进行平滑，以获得平滑的第一差异音频信号；

41、取决于平滑的差异音频信号和第一音频信号，使得能够估计至少第二音频信号。

42、根据各种但不一定所有的实施例，提供了如所附的权利要求中要求保护的示例。