音频信号的监测的制作方法

文档序号:32929946发布日期:2023-01-14 06:00阅读:44来源:国知局
音频信号的监测的制作方法

1.示例实施例涉及一种与对音频信号的监测(例如,对表示由音频捕获设备捕获的内容的音频信号的监测)有关的装置、方法和计算机程序。


背景技术:

2.当例如使用具有一个或多个麦克风的移动设备捕获音频时,用户可能希望实时监测音频方面的正在被捕获的内容。例如,由于环境条件(诸如风)和/或由于用户处理,在所捕获的音频中可能存在不想要的噪声。基于所监测的音频,用户能够调节捕获设备的定位或处理,从而不捕获或至少在所捕获的音频中减轻不想要的噪声。


技术实现要素:

3.本发明的各种实施例所寻求的保护范围由独立权利要求规定。在本说明书中描述的不属于独立权利要求的范围的实施例和特征(如果有的话)将被解释为对理解本发明的各种实施例有用的示例。
4.根据第一方面,本说明书描述了一种装置,该装置包括用于以下各项的部件:基于来自与音频捕获设备相关联的一个或多个第一麦克风的信号,提供一个或多个主音频信号;基于来自与音频监测设备相关联的一个或多个第二麦克风的信号,提供一个或多个辅音频信号,音频监测设备与音频捕获设备分离并且被配置用于通过一个或多个扬声器输出一个或多个主音频信号和一个或多个辅音频信号;以及修改主音频信号和辅音频信号中的一者或两者,使得一个或多个主音频信号的输出与一个或多个辅音频信号的输出区分开。
5.该装置还可以包括:用于监测主音频信号和辅音频信号中的一者或两者的一个或多个特性的部件,其中基于所监测的一个或多个特性来触发修改部件,以暂时修改主音频信号和辅音频信号中的一者或两者。
6.监测部件被配置为:监测主音频信号和辅音频信号中的一者或两者的幅度,其中基于主音频信号和辅音频信号中的一者的所监测的幅度越过预定阈值来触发修改部件。
7.音频监测设备可以包括用于对来自一个或多个第二麦克风的信号执行噪声消除处理的部件,一个或多个辅音频信号表示噪声消除处理的伪效应(artefact),伪效应通过一个或多个扬声器可听到。
8.修改部件可以被配置为:禁用噪声消除处理。
9.修改部件可以被配置为:禁用一个或多个第二麦克风。
10.修改部件可以被配置为:修改主音频信号和辅音频信号中的一者相对于主音频信号和辅音频信号中的另一者的幅度。
11.修改部件可以被配置为:相对于一个或多个辅音频信号的幅度增加一个或多个主音频信号的幅度。
12.一个或多个主音频信号可以表示空间音频,修改部件被配置为:修改一个或多个主音频信号在通过一个或多个扬声器输出时被感知到的空间位置。
13.该装置还可以包括用于确定与一个或多个辅音频信号相关联的接收方向的部件,其中修改部件可以被配置为:修改空间位置,使得一个或多个主音频信号在通过一个或多个扬声器输出时,从与一个或多个辅音频信号相关联的接收方向不同的方向被感知。
14.该装置还可以包括用于确定音频捕获设备相对于音频监测设备的方向或地点的部件,其中修改部件可以被配置为:修改空间位置,使得一个或多个主音频信号在通过一个或多个扬声器输出时,基本上从音频捕获设备的方向或地点被感知。
15.修改部件可以被配置为:借助于音频合成处理和/或借助于音频滤波来修改主音频信号和辅音频信号中的一者或两者,使得主音频信号和辅音频信号中的一者的至少一些音频属性以不同于主音频信号和辅音频信号中的另一者的方式被修改。
16.修改部件可以被配置为:借助于所选择的音频合成过程和/或音频滤波器来处理主音频信号和辅音频信号中的一者或两者,选择基于主音频信号和辅音频信号中的一者或两者的特性。
17.该装置可以是音频监测设备。该装置可以包括一组耳机或头戴式耳机。
18.根据第二方面,本说明书描述了一种方法,该方法包括:基于来自与音频捕获设备相关联的一个或多个第一麦克风的信号,提供一个或多个主音频信号;基于来自与音频监测设备相关联的一个或多个第二麦克风的信号,提供一个或多个辅音频信号,音频监测设备与音频捕获设备分离并且被配置用于通过一个或多个扬声器输出所述一个或多个主音频信号和所述一个或多个辅音频信号;以及修改主音频信号和辅音频信号中的一者或两者,使得一个或多个主音频信号的输出与一个或多个辅音频信号的输出区分开。
19.该方法还可以包括:监测主音频信号和辅音频信号中的一者或两者的一个或多个特性,其中基于所监测的一个或多个特性来触发修改,以暂时修改主音频信号和辅音频信号中的一者或两者。
20.监测可以监测主音频信号和辅音频信号中的一者或两者的幅度,其中基于主音频信号和辅音频信号中的一者的所监测的幅度越过预定阈值来触发修改。
21.音频监测设备可以被配置为:对来自一个或多个第二麦克风的信号执行噪声消除处理,一个或多个辅音频信号表示噪声消除处理的伪效应,伪效应通过一个或多个扬声器可听到。
22.修改可以禁用噪声消除处理。
23.修改可以禁用一个或多个第二麦克风。
24.修改可以修改主音频信号和辅音频信号中的一者相对于主音频信号和辅音频信号中的另一者的幅度。
25.修改可以相对于一个或多个辅音频信号的幅度增加一个或多个主音频信号的幅度。
26.一个或多个主音频信号可以表示空间音频,并且修改可以修改一个或多个主音频信号在通过一个或多个扬声器输出时被感知到的空间位置。
27.该方法还可以包括:确定与一个或多个辅音频信号相关联的接收方向,其中修改可以修改空间位置,使得一个或多个主音频信号在通过一个或多个扬声器输出时,从与一个或多个辅音频信号所关联的接收方向不同的方向被感知。
28.该方法还可以包括:确定音频捕获设备相对于音频监测设备的方向或地点,其中
修改可以修改空间位置,使得一个或多个主音频信号在通过一个或多个扬声器输出时,基本上从音频捕获设备的方向或地点被感知。
29.修改可以借助于音频合成处理和/或借助于音频滤波来修改主音频信号和辅音频信号中的一者或两者,使得主音频信号和辅音频信号中的一者的至少一些音频属性以不同于主音频信号和辅音频信号中的另一者的方式被修改。
30.修改可以借助于所选择的音频合成过程和/或音频滤波器来处理主音频信号和辅音频信号中的一者或两者,选择基于主音频信号和辅音频信号中的一者或两者的特性。
31.该方法可以由音频监测设备执行,例如一组耳机或头戴式耳机。
32.根据第三方面,本说明书描述了一种计算机程序,该计算机程序包括用于引起装置至少执行以下操作的指令:基于来自与音频捕获设备相关联的一个或多个第一麦克风的信号,提供一个或多个主音频信号;基于来自与音频监测设备相关联的一个或多个第二麦克风的信号,提供一个或多个辅音频信号,音频监测设备与音频捕获设备分离并且被配置用于通过一个或多个扬声器输出所述一个或多个主音频信号和所述一个或多个辅音频信号;以及修改主音频信号和辅音频信号中的一者或两者,使得一个或多个主音频信号的输出与一个或多个辅音频信号的输出区分开。
33.示例实施例还可以提供第二方面的任何特征。
34.根据第四方面,本说明书描述了一种计算机可读介质(例如,非暂态计算机可读介质),该计算机可读介质包括存储在其上的程序指令,该程序指令用于执行至少以下操作:基于来自与音频捕获设备相关联的一个或多个第一麦克风的信号,提供一个或多个主音频信号;基于来自与音频监测设备相关联的一个或多个第二麦克风的信号,提供一个或多个辅音频信号,音频监测设备与音频捕获设备分离并且被配置用于通过一个或多个扬声器输出所述一个或多个主音频信号和所述一个或多个辅音频信号;以及修改主音频信号和辅音频信号中的一者或两者,使得一个或多个主音频信号的输出与一个或多个辅音频信号的输出区分开。
35.根据第五方面,本说明书描述了一种装置,该装置包括:至少一个处理器;以及包括计算机程序代码的至少一个存储器,计算机程序代码在由至少一个处理器执行时引起该装置:基于来自与音频捕获设备相关联的一个或多个第一麦克风的信号,提供一个或多个主音频信号;基于来自与音频监测设备相关联的一个或多个第二麦克风的信号,提供一个或多个辅音频信号,音频监测设备与音频捕获设备分离并且被配置用于通过一个或多个扬声器输出所述一个或多个主音频信号和所述一个或多个辅音频信号;以及修改主音频信号和辅音频信号中的一者或两者,使得一个或多个主音频信号的输出与一个或多个辅音频信号的输出区分开。
附图说明
36.现在将参考附图以非限制性示例的方式描述示例实施例,在附图中:
37.图1示出了包括用户操作音频捕获设备并且监测所捕获的音频的场景;
38.图2是根据示例实施例的处理操作的流程图;
39.图3是指示示例处理操作的部分流程图,该示例处理操作可以包括图2的流程图中所指示的修改操作;
40.图4是根据另一示例实施例的处理操作的局部流程图;
41.图5示出了在随后时间图1的场景;
42.图6是可以根据一些示例实施例而配置的装置的示意图;以及
43.图7是根据一些示例实施例的可以携带计算机可读代码的非暂态介质。
具体实施方式
44.示例实施例可以涉及一种与对音频信号(例如,表示由音频捕获设备捕获的内容的音频信号)的监测有关的装置、方法和计算机程序。
45.可能需要实时或接近实时地至少监测由包括一个或多个麦克风的音频捕获设备捕获的音频信号的指示。例如,可以是诸如风等环境噪声被一个或多个麦克风拾取,并且在用户未必意识到的情况下被捕获。由于用户的手在音频捕获设备上的移动,对用户来说,处理噪声可能在捕获期间也并不明显。出于这个原因,用户可能希望实时或接近实时地监测通过使用另一设备(即,音频监测设备)的一个或多个扬声器捕获的内容,以便用户可以做出反应以避免或减轻不想要的噪声。
46.监测可以提供一种形式的实时或接近实时的反馈,该反馈可以提示并且随后引导用户改变音频捕获设备的位置和/或处理,使得所得到的所捕获的音频内容几乎没有或没有不想要的噪声。然而,用户不一定知道噪声是包括基于由与音频捕获设备相关联的一个或多个麦克风接收或拾取的信号的音频信号(以下称为“主音频信号”)上的噪声、还是包括基于由与音频监测设备相关联的一个或多个麦克风接收或拾取的信号的类似噪声的音频信号(以下称为“辅音频信号”)上的噪声。
47.术语“基于”表示可以在一个或多个麦克风接收到音频信号之后在音频捕获设备和/或音频监测设备处执行一些信号处理。
48.例如,音频捕获设备可以包括对其一个或多个麦克风接收的信号执行的一个或多个信号处理功能,诸如噪声消除、空间化、自动粒度控制和压缩。
49.例如,音频监测设备可以包括与诸如噪声消除等处理功能相关联的一个或多个麦克风,该处理功能可以产生一个或多个辅音频信号,该辅音频信号可以同时经由一个或多个扬声器作为主音频信号被用户听到。这两者可能很难区分。
50.示例实施例涉及修改主音频信号和辅音频信号中的一者或两者,使得一个或多个主音频信号的输出与一个或多个辅音频信号的输出区分开。因此,这向用户提供了增强的反馈。
51.示例实施例涉及音频捕获设备和单独的音频监测设备的使用。
52.音频捕获设备可以包括具有一个或多个第一麦克风的任何设备,第一麦克风用于提供一个或多个主音频信号以传输到音频监测设备。音频监测设备可以包括一个或多个扬声器,该一个或多个扬声器用于输出一个或多个主音频信号以用于监测目的。音频捕获设备还可以包括存储部件,存储部件用于存储一个或多个主音频信号的表示,例如数字表示。存储部件可以包括任何合适的数据存储部件,例如一个或多个存储器模块,例如但不限于固态存储器、硬盘驱动器和/或可移动存储卡或模块。在一些实施例中,音频捕获设备可以将主音频信号传输到作为另一种形式的存储器模块的外部存储系统或设备。
53.音频捕获设备可以包括但不限于智能手机、数字助理、数字音乐播放器、个人电
脑、膝上型电脑、平板电脑、或诸如智能手表等可穿戴设备。音频捕获设备还可以包括一个或多个解码器,该一个或多个解码器用于将音频数据解码成适合由音频监测设备的扬声器输出的格式。
54.音频捕获设备能够使用有线或无线通信通道与诸如音频监测设备等其他设备建立通信会话。用户设备可以包括用于使用例如bluetooth、zigbee或wifi等短距离无线通信的部件。考虑到所设想的实时或接近实时的监测性质,无线通信通道可以使用低延迟技术,举例来说,诸如通过使用bluetooth 5.0。
55.音频捕获设备还可以包括显示屏和/或一个或多个控制按钮。显示屏可以是触敏的。音频捕获设备可以包括一个或多个天线,该一个或多个天线用于与包括音频监测设备在内的外部设备通信。
56.音频监测设备可以包括具有一个或多个扬声器的任何设备,该一个或多个扬声器用于输出从音频捕获设备接收的一个或多个主音频信号。例如,音频监测设备可以包括诸如虚拟现实耳机等可穿戴设备的一个或多个头戴式耳机、耳机、耳塞或扬声器。如果在接收的音频信号中提供一对这样的扬声器,一对这样的扬声器可以输出单声道、立体和可能的空间声音,如果在所接收的音频信号中提供了这些声音的话。在一些实施例中,音频监测设备可以仅包括一个扬声器,该扬声器例如构成单个耳机或耳塞的一部分,因此只能输出单声道声音。
57.示例实施例专注于作为耳机设备的音频监测设备,该术语将在下文中使用。该术语可以用作涵盖这样的上述示例或已知等效物的通用术语。示例实施例涉及一种包括第一耳机和第二耳机的耳机设备。为避免疑义,实施例还可以在仅包括一个耳机的耳机设备中实现。
58.耳机设备还可以包括一个或多个输入变换器,例如一个或多个麦克风。一个或多个麦克风可以为佩戴上述耳机设备的用户提供参与例如电话呼叫的部件,如果音频捕获设备具有这样的功能的话。一个或多个麦克风还可以与耳机设备可以提供的有源噪声消除处理(anc)功能相关联。
59.耳机设备还可以包括使得其能够参与同上述音频捕获设备的通信会话的功能。为该目的,耳机设备可以包括一个或多个天线。
60.anc功能(有时称为主动降噪(anr)功能)使用与一个或多个麦克风和一个或多个扬声器(诸如耳机设备的扬声器)相关联的电气或电子系统。anc系统执行信号处理(例如通过处理由一个或多个麦克风接收的环境声音),以生成用于由一个或多个扬声器输出的消除信号。消除信号借助于相消干涉用于在输出时减少或消除用户对环境声音的感知。例如,anc系统可以生成与所接收的环境声音反相的消除信号。
61.在包括第一耳机和第二耳机的耳机设备中,每个耳机可以包括麦克风、anc系统和扬声器。对于每个耳机,该耳机的麦克风可以接收环境声波,环境声波然后被转换为环境声音信号并且由anc系统处理以生成抵消信号,该抵消信号由该耳机的扬声器输出。因此,每个耳机都可以具有独立的anc功能。替代地,第一耳机和第二耳机共用的anc系统可以从第一耳机和第二耳机的麦克风接收环境声音信号,并且可以生成相应消除信号以发送回第一耳机和第二耳机。
62.anc系统可以以多种模式操作。例如,在所谓的前馈模式下,anc系统可以经由一个
或多个麦克风接收环境声音信号,该麦克风位于每个耳机之外或外部,通常位于扬声器的相对侧。以这种方式,可以在用户听到环境声音之前瞬间生成消除信号。例如,在所谓的反馈模式下,anc系统可以经由一个或多个麦克风接收环境声音信号,麦克风位于每个耳机的内部,通常位于扬声器与用户耳朵之间。以这种方式,消除信号可以基于用户将从扬声器听到的内容。例如,所谓的混合模式可以利用从位于每个耳机的外部和内部的麦克风接收的信号来产生消除信号。以这种方式,可以利用前馈模式和反馈模式的好处来生成抵消信号。例如,与反馈模式相比,前馈模式可以更好地减少或消除较高频率的信号,但反馈模式可以更好地减少或消除更宽频率范围内的信号。
63.anc系统还可以提供上面简要提到的直听模式(hear-through mode)或透明模式(transparent mode)。类似于上述其他模式,直听模式可以是用户可选择的,例如经由用户设备的用户界面、或通过轻敲耳机设备上的控制器。在用户希望听到经由一个或多个耳机的一个或多个麦克风接收的至少一些环境声音的情况下,可以使用直听模式。
64.用户可以选择在特定情况下使用上述anc模式中的哪个,例如经由用户设备的用户界面、或通过轻敲耳机设备上的控制器。然而,为避免疑问,示例实施例不限于任何特定类型的anc系统或提供上述模式的anc系统。
65.anc系统在消除环境声音方面可能并不完美。例如,诸如风等环境噪声可能不会被完全消除,并且在监测来自音频捕获设备的一个或多个主音频信号的情况下,在一个或多个所谓的辅音频信号中可能仍然可以听到一些噪声伪效应,这些噪声伪效应让用户无法知道噪声的来源。
66.图1示出了包括用户10操作音频捕获设备30(例如,智能手机)以捕获事件20的音频和可能的视频的场景,该事件20产生声波22以用于捕获。用户10以特定的第一方向/取向握持音频捕获设备30以进行适当的捕获。音频捕获设备30可以包括显示屏32和一个或多个麦克风34。音频捕获设备30还可以包括一个或多个相机(未示出)。音频捕获设备30的使用可以涉及用户将一个或多个麦克风34指向事件20,并且显示屏32可以提供或可以不提供捕获性能的某种指示、以及正在捕获的任何视频(如果适当的话)。一个或多个麦克风34接收事件20的声波22、以及可能的其他噪声,诸如风噪声50和/或处理噪声60,该噪声被共同数字化编码为主音频信号并且可以存储在音频捕获设备30的一个或多个存储器模块上。
67.用户10可以使用由具有相应扬声器的第一耳塞40a和第二耳塞40b组成的耳机设备40来实时或接近实时地监测主音频信号。主音频信号可以由音频捕获设备30通过通信通道65传输,该通信通道65可以是bluetooth 5.0或其他低延迟通道,如上所述。用户10因此可以监测他们感知为由音频捕获设备30捕获的内容,并且因此可以修改第一方向/取向、或者甚至对音频捕获设备的处理,以减轻不想要的噪声。
68.然而,在耳机设备40能够通过耳塞40a、40b的相应扬声器与主音频信号同时输出辅音频信号的情况下,则用户可能无法准确地感知正在被捕获的内容。因此可能会进行不必要的调节或对捕获质量有害的调节。例如,在耳机设备40包括如上所述的anc系统的情况下,辅音频信号可以包括由于一个或多个第二麦克风34对风噪声等的拾取而造成的伪效应。
69.图2是指示例如可以由耳机设备40执行的处理操作的流程图,尽管上述操作可以使用外部系统执行。
70.处理操作可以通过硬件、软件、固件或其组合来执行。
71.第一操作200可以是可选的,可以包括检测监测模式的启用。也就是说,当用户10希望开始对捕获的音频进行音频监测时,监测模式可以经由例如显示屏32的用户界面和/或经由音频捕获设备30可检测的语音命令来被启用。替代地或另外地,监测模式可以基于所接收的噪声水平来被启用,例如因为它越过预定阈值,并且如果噪声在反方向上返回,则监测模式可以被禁用。替代地或另外地,监测模式可以借助于耳机设备40来被启用。
72.第二操作201可以包括:基于从与音频捕获设备相关联的一个或多个第一麦克风接收的信号,提供一个或多个主音频信号。
73.第三操作202可以包括:基于来自与耳机设备40(作为音频监测设备的给定示例)相关联的一个或多个第二麦克风的信号,提供一个或多个辅音频信号。
74.第四操作203可以包括:修改主音频信号和辅音频信号中的一者或两者,使得一个或多个主音频信号的输出与一个或多个辅音频信号的输出区分开。
75.如下文将解释的,另一操作可以包括:监测主音频信号和辅音频信号中的一者或两者的一个或多个特性,其中基于所监测的一个或多个特性来触发修改,以暂时修改主音频信号和辅音频信号中的一者或两者。例如,监测可以涉及监测主音频信号和辅音频信号中的一者或两者的幅度,并且基于主音频信号和辅音频信号中的一者的所监测的幅度越过预定阈值来触发修改。例如,如果辅音频信号越过预定阈值,指示不能去除的特定水平的环境噪声,则可以触发修改。在所监测的幅度从预定阈值返回时,或者由于某个其他检测到的条件(诸如经由显示屏32进行的取消输入或相关联的语音命令),可以取消修改。预定阈值可以是相对于主音频信号的对应特性的阈值。例如,如果在给定时间辅音频信号的幅度比主音频信号的幅度大预定阈值,则可以触发修改。
76.可以有多种选项用于修改主音频信号和/或辅音频信号,以增强用户区分例如来自anc系统的所监测的主音频信号和辅音频信号的能力。
77.例如,图3是另一流程图,其指示可以作为图2的过程的第四操作203的一部分而执行的修改操作,其可以单独使用或组合使用。
78.例如,第一示例修改操作301可以包括:修改主信号和辅信号中的一者相对于主音频信号和辅音频信号中的另一者的幅度(音量)。例如,修改操作301可以包括:相对于一个或多个辅音频信号的幅度增加一个或多个主音频信号的幅度。替代地或另外地,一个或多个辅音频信号的幅度可以相对于一个或多个主音频信号的幅度减小。
79.第一示例修改操作301可以在外部噪声影响音频捕获设备30和耳机设备40两者时执行。第一示例修改操作301可以在第二音频信号包括的噪声量不是太大(低于预定阈值,可能与主音频信号相关)并且用户将能够轻松标识提升后的主音频信号时执行。
80.在执行单声道渲染的情况下,例如仅通过耳机设备40的一个耳塞40a,和/或在外部噪声仅影响耳机设备的一个或多个第二麦克风34的情况下,显示屏32的用户界面可以经由某种视觉指示来确认音频捕获设备30正在捕获音频而没有检测到高于预定阈值的附加噪声。
81.第二示例修改操作303可以包括修改一个或多个主音频信号(或者,一个或多个辅音频信号)中的一个或多个的空间位置。在这点上,其中一个或多个主音频信号表示空间音频,修改可以包括修改一个或多个主音频信号在通过耳机设备40的一个或多个扬声器输出
时被感知到的空间位置。移动一个或多个主音频信号还可以帮助用户将这样的信号与一个或多个辅音频信号区分开。
82.例如,作为第二示例修改操作303的一部分,可以确定与一个或多个辅音频信号相关联的接收方向,例如,基于第一耳塞40a和第二耳塞40b中的哪个接收到最多噪声或高于预定阈值的噪声。修改可以包括修改空间位置,使得一个或多个主音频信号在通过第一耳塞40a和第二耳塞40b的一个或多个相应扬声器输出时,从与一个或多个辅音频信号所关联的接收方向不同的方向被感知。
83.例如,作为第二示例修改操作303的一部分,可以确定或假定音频捕获设备30相对于耳机设备40的方向或地点,例如,通常情况下,它相对于耳机设备基本上处于中心位置。修改可以包括修改空间位置,使得一个或多个主音频信号在通过第一耳塞40a和第二耳塞40b的一个或多个相应扬声器输出时,基本上从音频捕获设备30的方向或地点被感知。
84.空间位置的暂时修改可以与上述关于第一示例修改操作301的幅度修改相结合。
85.第三示例修改操作305可以包括禁用音频耳机设备40的一个或多个第二麦克风34。这将去除来自上述第二麦克风34的噪声伪效应并且仅留下一个或多个主音频信号。这有效地取消了耳机设备40的anc处理功能。
86.第四示例修改操作307可以包括禁用耳机设备40的anc处理功能,以有效地实现与上述相同的效果,或者替代地,减少anc处理的量,从而执行较少的噪声去除。
87.第五示例修改操作309可以包括合成和/或滤波主音频信号和辅音频信号中的一者或两者。这可以包括:利用一个或多个合成器和/或滤波器模块来区分例如一个或多个辅音频信号,以使它们听起来不同,同时保留原始信号的特性。例如,可以启用一个或多个风噪声降噪滤波器来修改一个或多个辅音频信号以使其不那么明显。
88.作为第五示例修改操作309的一部分,可以提供多个不同音频合成模块和/或滤波器模块,其中这些模块中的一个是基于主音频信号和辅音频信号中的一者或两者的一个或多个特性来选择的。例如,该一个或多个特性可以基于在辅音频信号中检测到的噪声类型(例如,风噪声、处理噪声或其他类型的噪声)和/或哪些音频通道受影响最大。
89.举例来说,如果辅音频信号的一个或多个特性指示风噪声,则可以将风噪声降噪滤波器应用于辅音频信号,例如,举一个简单的示例,截止频率约为50-150hz的高通滤波器。如果确定辅音频信号上的风噪声高于预定阈值,则可以改为执行上述禁用一个或多个第二麦克风34的修改操作。
90.例如,如果辅音频信号的一个或多个特性指示仅一个通道中的风噪声,即,与一个或多个第二麦克风34的左麦克风和右麦克风相关联的左通道或右通道,则可以仅针对该通道执行风噪声降噪,或者与该通道相关联的相关第二麦克风可以被禁用。在一些示例实施例中,未受影响的通道中的音频信号可以替换受影响的通道中的音频信号,从而使辅音频信号成为单声道音频信号。
91.例如,如果辅音频信号的一个或多个特性指示处理噪声,则可以以与风噪声类似的方式执行不同的降噪滤波和/或禁用操作,但是使用具有适合于减轻处理噪声的响应的滤波器。在实践中处理噪声更有可能仅在一个通道中,并且因此滤波和/或禁用仅一个通道和/或通道替换操作更可能用于这种形式的噪声。
92.例如,如果辅音频信号的一个或多个特性指示由于anc处理和/或anc系统的直通
操作引起的噪声,则可以禁用anc处理和/或直通操作。如果只有一个通道受到影响,则可以仅对该通道禁用上述anc处理和直通操作。与上述类似,未受影响的通道中的音频信号可以替换受影响的通道中的音频信号。
93.例如,如果辅音频信号的一个或多个特性指示任何形式的噪声并且主音频信号的一个或多个特性指示很少或没有噪声,则可以将主音频信号转换为单声道音频信号,并且可能比辅音频信号响亮,以便用户可以在空间上区分主音频信号和辅音频信号。
94.例如,人工风噪声等可以混合为单声道信号,从而与左侧或右侧的辅噪声分开并且区分开。
95.图4是指示图2和图3的流程图的变体的另一流程图。
96.在第三操作202之后,另外的操作402可以包括监测主音频信号和辅音频信号中的一者或两者的一个或多个特性。例如,特性可以包括主音频信号和辅音频信号中的一者或两者的幅度。
97.另外的操作403可以包括确定预定触发条件是否满足。
98.如果满足,则另外的操作404可以包括:基于所监测的一个或多个特性,暂时修改主音频信号和辅音频信号中的一者或两者,例如,使得上述音频信号中的一者的输出与另一上述音频信号区分开。
99.例如,可以监测主音频信号和辅音频信号中的一者或两者的幅度,并且可以基于主音频信号和辅音频信号中的一者的所监测的幅度越过预定阈值来触发修改。暂时地,这表示,在特定时间段之后和/或在检测到所监测的一个或多个特性已经在计数器方向上返回越过阈值时,完全地或逐渐地取消修改。
100.图5示出了在不同的后续时间范围内的图1的场景。可以看出,用户10已经基于通过耳机设备40提供的反馈调节了音频捕获设备30的方向,以避免或减轻对先前经历的风噪声和处理噪声的捕获。
101.示例实施例因此可以帮助用户监测所捕获的音频(即使在嘈杂的条件下),并且可以利用本文中描述的区别方面来调节音频捕获设备的定位和/或处理以避免或减轻捕获不想要的音频(诸如风噪声或处理噪声)。
102.示例设备
103.图6示出了根据一些示例实施例的装置,该装置可以包括音频捕获设备30或耳机设备40中的任何一个。该装置可以被配置为执行本文中描述的操作,例如参考任何公开的过程描述的操作。该装置包括至少一个处理器600和与处理器直接或紧密连接的至少一个存储器601。存储器601包括至少一个随机存取存储器(ram)601a和至少一个只读存储器(rom)601b。计算机程序代码(软件)605存储在rom 601b中。该装置可以连接到传输器(tx)和接收器(rx)。该装置可以可选地与用于指示该装置和/或用于输出数据的用户界面(ui)连接。至少一个处理器600被布置为与至少一个存储器601和计算机程序代码605一起使该装置至少执行根据任何前述过程的至少方法,例如如关于本文中的流程图所公开的方法及其相关特征。
104.图7示出了根据一些实施例的非暂态介质700。非暂态介质700是计算机可读存储介质。它可以是例如cd、dvd、usb记忆棒、蓝光光盘等。非暂态介质700存储计算机程序代码,以使装置执行任何前述过程的方法,例如,如关于本文中的流程图所公开的方法及其相关
特征。
105.网络元素、协议和方法的名称基于当前标准。在其他版本或其他技术中,这些网络元素和/或协议和/或方法的名称可以不同,只要它们提供相应功能即可。例如,实施例可以部署在2g/3g/4g/5g网络和3gpp的更进一步的世代中,但也可以部署在诸如wifi等非3gpp无线电网络中。
106.存储器模块可以是易失性或非易失性的。它可以是例如ram、sram、闪存、fpga block ram、dcd、cd、usb记忆棒和蓝光光盘。
107.如果没有另外说明或从上下文中很清楚,则两个实体不同的陈述表示它们执行不同的功能。这并不一定表示它们基于不同的硬件。也就是说,本说明书中描述的每个实体可以基于不同的硬件,或者一些或所有实体可以基于相同的硬件。这并不一定表示它们基于不同的软件。即,本说明书中描述的各个实体可以基于不同的软件,或者部分或全部实体可以基于相同的软件。本说明书中描述的每个实体可以实施在云中。
108.作为非限制性示例,任何上述块、装置、系统、技术或方法的实现包括作为硬件、软件、固件、专用电路或逻辑、通用硬件或控制器或其他计算设备或其某种组合的实现。一些实施例可以在云中实现。
109.应当理解,以上描述的是目前认为的优选实施例。然而,应当注意,优选实施例的描述仅作为示例给出,并且可以进行各种修改而不脱离所附权利要求限定的范围。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1