一种回声消除的方法及终端设备与流程

本发明涉及语音通信技术领域，尤其涉及一种回声消除的方法及终端设备。

背景技术：

在双端通话场景，例如，会议设备、电话、语音聊天应用等，均采用回声消除技术，以提高通话质量。其中，回声消除技术是采用参考信号和回声信号进行回声消除，参考信号通过调用播放线程驱动解码单元，将终端设备a发送的语音解码生成的信号，回声信号为终端设备b调用采集线程驱动解码单元将在声卡处采集的语音解码生成的信号，然后在采集线程中进行回声消除处理。

由于终端设备的处理器性能限制和操作系统线程调度机制存在不合理之处，导致不同线程占用处理器的时间不稳定，例如，播放线程与采集线程的调用频率不一致，使得参考信号和回声信号输入回声消除单元的频度不同。通话建立后，由于回声路径基本确定,播放线程与采集线程的调用频率不一致，所以会使得参考信号与回声信号的相对延时波动较大，主要体现为参考信号缓存的长度与回声信号缓存的长度差波动较大，在这种波动情况下，回声消除单元则需要反复重新估计回声路径，以适应延时的变化，从而求得最小估计误差，但频繁的重新估计回声路径会使得回声消除单元工作状态的稳定性较差。

技术实现要素：

本发明提供了一种回声消除的方法及终端设备，能够解决现有技术中回声消除单元在进行回声消除时工作状态不稳定的问题。

第一方面提供一种回声消除的方法，所述方法包括：

采集第一语音信号，并缓存所述第一语音信号；

在第一定时周期内，获取缓存的所述第一语音信号，以及获取参考信号队列中与所述第一语音信号匹配的参考信号，以使所述第一语音信号与所述参考信号之间的延时估计值在预设范围内；

使用所述参考信号对所述第一语音信号中的回声信号进行回声消除处理，得到第二语音信号，输出所述第二语音信号。

第二方面提供一种用于回声消除的终端设备，所述终端设备具有实现对应于上述第一方面提供的回声消除的方法的功能。所述功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的单元，所述单元可以是软件和/或硬件。所述终端设备包括第一缓存单元、第一定时器、第一定时驱动单元和回声消除单元；

所述第一缓存单元，用于缓存采集到的第一语音信号；

所述第一定时器，用于触发第一定时周期；

所述第一定时驱动单元，用于在所述第一定时器的第一定时周期内，从所述第一缓存单元中获取所述第一语音信号，以及获取参考信号队列中与所述第一语音信号匹配的参考信号，并将所述第一语音信号和所述参考信号输入所述回声消除单元，以使所述第一语音信号与所述参考信号之间的延时估计值在预设范围内；

所述回声消除单元，用于使用所述第一定时驱动单元输出的所述参考信号对所述第一定时驱动单元输出的所述第一语音信号中的回声信号进行回声消除处理，得到第二语音信号，输出所述第二语音信号。

相较于现有技术，本发明提供的方案中，缓存采集到的第一语音信号；在第一定时周期内，获取缓存的所述第一语音信号，以及获取参考信号队列中与所述第一语音信号匹配的参考信号，以使所述第一语音信号与所述参考信号之间的延时估计值在预设范围内；使用所述参考信号对所述第一语音信号中的回声信号进行回声消除处理，得到第二语音信号，输出所述第二语音信号。通过本方案可以稳定参考信号和回声信号的相对时延，以及提升回声消除单元的工作稳定性。

附图说明

图1为本实施例中回声消除的方法的一种流程示意图；

图2为本实施例中回声消除的方法的另一种流程示意图；

图3为本实施例中终端设备的一种结构示意图；

图4为本实施例中终端设备的另一种结构示意图；

图5为本实施例中终端设备的另一种结构示意图。

具体实施方式

本发明实施例提供了一种回声消除的方法及终端设备，能够稳定参考信号和回声信号的相对时延，以及提升回声消除单元的工作稳定性。

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例，基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元，本文中所出现的单元的划分，仅仅是一种逻辑上的划分，实际应用中实现时可以有另外的划分方式，例如多个单元可以结合成或集成在另一个系统中，或一些特征可以忽略，或不执行，另外，所显示的或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元之间的间接耦合或通信连接可以是电性或其他类似的形式，本文中均不作限定。并且，作为分离部件说明的单元或子单元可以是也可以不是物理上的分离，可以是也可以不是物理单元，或者可以分不到多个电路单元中，可以根据实际的需要选择其中的部分或全部单元来实现本发明实施例方案的目的。

为解决上述技术问题，本发明实施例主要提供以下技术方案：

1、在接收端侧，接收到发送端发送的语音信号后，播放后，使用该语音信号生成参考信号，放入参考信号队列中。

2、缓存采集到的回声信号，该回声信号为在回声路径采集到的音频信号。

3、启动定时器，在定时器的定时周期内，将回声信号和参考信号输入回声消除单元，使得回声信号与参考信号之间的延时估计值在预设范围内，回声消除单元再根据参考信号消除该回声信号，达到有效消除回声信号的目的。

下面从作为接收方的终端设备进行回声消除的角度介绍本发明实施例中回声消除的方法。

请参照图1，为本发明实施例中回声消除的方法的一个实施例，本发明实施例包括：

101、采集第一语音信号。

所述第一语音信号是指终端设备的麦克风录下的音频信号，该音频信号包括终端设备的声卡播放的音频信号，以及终端设备周围的音频信号。声卡播放的音频信号可以是另一终端设备发送的语音信号，例如通话中对方的说话声，终端设备周围的音频信号可以是所述终端设备的用户的说话声、也可以是该终端设备周围可以捕捉到的任何声音。

另外，所述第一语音信号是由采集单元在终端设备内部的回声路径中采集得到，举例来说，终端设备的声卡播放了来自远端的终端设备发送的语音信号a后，终端设备的麦克风会录下播放的语音信号a，然后将录下的语音信号a输入回声路径，要做回声消除，就需要从回声路径中采集语音信号a，将采集到的语音信号a称为回声信号。

102、缓存采集到的第一语音信号。

可以通过第一缓存单元来缓存第一语音信号，该第一缓存单元为终端设备的存储介质中一个缓存空间，可以是专门用于回声消除的缓存介质，也可以是缓存介质中预留的一个缓存空间，具体本发明实施例不作限定。所述第一缓存单元的缓存长度(即第一语音信号的缓存长度)还需要参考声卡录音单元的最小缓存长度(recordminbuffersize)进行动态的调整。例如，第一语音信号的缓存长度可以根据终端设备中声卡录音单元的最小缓存长度和第一缓存系数得到。举例来说，可以定义第一缓存系数为1.5，即将第一缓存单元的缓存长度设为recordminbuffersize的1.5倍，从而平衡回声消除单元的延时估计和采集的稳定性，具体第一缓存系数的取值本文不作限定。

其中，缓存第一语音信号的目的是：在回声路径采集到第一语音信号后，不直接将采集到的第一语音信号输入至回声消除单元，而是在下述步骤103中的第一定时器触发的第一定时周期内，才将第一语音信号输入至回声消除单元，从而控制回声估计时延的稳定性。

103、在第一定时周期内，获取缓存的所述第一语音信号，以及获取参考信号队列中与所述第一语音信号匹配的参考信号，以使所述第一语音信号与所述参考信号之间的延时估计值在预设范围内。

其中，第一定时周期由第一定时器触发。

通过定义在第一定时周期内，获取所述第一语音信号和所述参考信号，可以使得回声消除单元在进行回声的延时估计时，所述第一语音信号与所述参考信号之间的延时估计值不出现波动，而是稳定在预设范围内，相应的，使得输入回声消除单元的两个输入信号(第一语音信号和参考信号)同步，不会发生帧错位，避免一个输入信号到回声消除单元了，另一个输入信号还未到导致回声无法消除，甚至破坏原始采集到的音频信号导致声音难辨的问题。

可以理解的是，在所述第一语音信号缓存完成后，即可启动终端设备内部的第一定时器，第一定时器在触发后，会周期性的计时(计时时长为第一定时周期)。第一定时器可以是由终端设备内部安装的定时工具、或这是终端设备系统自带的定时器模块，该定时器模块可以使用实时系统毫秒级、微秒级或纳秒级的定时器实现，也可实现更加精确的定时功能，利用定时器前一响应时刻(可精确到毫秒、微秒级或纳秒级)和当前时刻(可精确到毫秒、微秒级或纳秒级)的时间差，计算出更加准确的触发周期。

可选的，另外，由于不同型号的音频编码器所编码的帧长不同，例如有的音频编码器可以编码的帧长为20ms一帧，有的音频编码器则是23ms一帧，所以为了进一步获得更优的回声消除效果，所述第一定时周期可根据终端设备的音频编码器选择编码的帧长得到，例如可以将第一定时器触发的第一定时周期设为音频编码器的帧长，也可以采用其他的计算方式，具体第一定时周期的计算方式，本发明实施例不作限定。

104、使用所述参考信号对所述第一语音信号中的回声信号进行回声消除处理，得到第二语音信号，输出所述第二语音信号。

其中，回声消除处理可以是通过添加回声消除器来实现、例如单路回声消除器，在进行回声消除时，将来自远端的音频信号a作为回声消除的参考信号，在麦克风从声卡处获取到包含来自远端的音频信号a的第一语音信号，并输入到单路回声消除器后，单路回声消除器将第一语音信号与参考信号进行比较，比较发现音频信号a与参考信号一致，那么单路回声消除器便将音频信号a从所述第一语音信号中消除，这样便达到了回声消除的目的，最终得到是没有回声信号的第二语音信号。

本发明实施例中，缓存采集到的第一语音信号；在第一定时周期内，获取缓存的所述第一语音信号和参考信号，使得第一语音信号与参考信号之间的延时估计值在预设范围内；然后使用所述参考信号对所述第一语音信号中的回声信号进行回声消除处理，得到第二语音信号，输出所述第二语音信号。通过本方案可以稳定参考信号和回声信号的相对时延，以及提升回声消除单元的工作稳定性。

可选的，在一些发明实施例中，为稳定参考信号队列的稳定性，以及进一步提高回声消除单元的两个输入信号(即第一语音信号和参考信号)之间的相对时延，在采集第一语音信号之前，如图2所示，本发明实施例还包括：

步骤a、采集接收到的第三语音信号，然后缓存接收到的第三语音信号，所述第一语音信号至少包括与所述第三语音信号相同的信号。

可以通过第二缓存单元来缓存所述第三语音信号，该第二缓存单元为终端设备的存储介质中一个缓存空间，可以是专门用于回声消除的缓存介质，也可以是缓存介质中预留的一个缓存空间，第一缓存单元和第二缓存单元相互独立，两者可以是一个缓存介质中的两个逻辑独立的缓存空间，也可以是物理上独立的缓存空间。为提高读写效率，第一缓存单元和第二缓存单元还可以采用高速缓存介质，具体本发明实施例不作限定。

可选的，考虑到声卡播放单元在播放第三语音信号时，比采集第三语音信号更容易产生卡顿现象，所以在缓存采集的第三语音信号时，第二缓存单元的缓存长度(即第三语音信号的缓存长度、第二缓存单元能够缓存的信号的长度)还需要参考声卡播放单元的最小缓存长度(playminbuffersize)进行动态的调整。例如，所述第三语音信号的缓存长度可以根据所述终端设备中声卡播放单元的最小缓存长度和第二缓存系数得到。举例来说，可以定义第二缓存系数为2，即将第二缓存单元的缓存长度设为playminbuffersize的2倍，从而缓解由于声卡播放单元卡顿引起的参考信号抖动的问题，具体第二缓存系数的取值本文不作限定。

步骤b、在第二定时周期内，获取缓存的所述第三语音信号，然后将获取到的所述第三语音信号解码生成所述参考信号，并将解码生成的所述参考信号加入所述参考信号队列中。其中，所述第二定时周期由第二定时器触发，所述第二定时器提前于所述第一定时器触发定时。

通过定义在第二定时周期内，获取所述第三语音信号，并将第三语音信号解码生成参考信号，将参考信号加入参考信号队列中，稳定参考信号队列的长度，并且使得后续回声消除单元在第一定时周期内，在消除第一语音信号中的回声信号时，从参考信号队列中去匹配和提取与回声信号对应的参考信号，进一步的稳定回声消除单元对回声的延时估计，使得所述第一语音信号与所述参考信号之间的延时估计值不出现波动，而是稳定在预设范围内，相应的，使得输入回声消除单元的两个输入信号(第一语音信号和参考信号)同步，不会发生帧错位，避免一个输入信号到回声消除单元了，另一个输入信号还未到导致回声无法消除，甚至破坏原始采集到的音频信号导致声音难辨的问题。

可以理解的是，在所述第三语音信号缓存完成后，即可启动终端设备内部的第二定时器，第二定时器在触发后，会周期性的计时(计时时长为第二定时周期)。第二定时器可以是由终端设备内部安装的定时工具、或这是终端设备系统自带的定时器模块，该定时器模块可以使用实时系统毫秒级、微秒级或纳秒级的定时器实现，也可实现更加精确的定时功能，利用定时器前一响应时刻(可精确到毫秒、微秒级或纳秒级)和当前时刻(可精确到毫秒、微秒级或纳秒级)的时间差，计算出更加准确的触发周期。本发明实施例中的第一定时器和第二定时器是相对独立的定时器，调用这两个定时器的线程是固定的，例如第一定时器是由录音线程调用，第二定时器是由播放线程调用。

另外，由于不同型号的音频编码器所编码的帧长不同，例如有的音频编码器可以编码的帧长为20ms一帧，有的音频编码器则是23ms一帧，所以为了进一步获得更优的回声消除效果，还可以定义所述第二定时周期是根据终端设备的音频编码器选择编码的帧长得到，例如可以将第二定时器触发的第二定时周期设为音频编码器的帧长，也可以采用其他的计算方式，第二定时周期与第一定时周期可相同或不同，具体第二定时周期的计算方式，本发明实施例不作限定。

可选的，在一些发明实施例中，某些特定场景下，例如网络状态不佳，发送端停滞等现象导致终端设备接收不到发送端的数据包，一方面，会出现第一缓存单元中缓存的语音信号被取空的现象，导致回声消除单元进行回声路径估计时出现波动，无法继续进行回声消除操作(例如不会从参考信号队列去匹配参考信号)。另一方面，由于第二缓存单元一直在缓存发送端发送的数据包，而第二定时驱动单元和解码单元又在周期性的生成参考信号，从而会导致参考信号队列变长，特别是在回声消除单元无法进行回声消除操作时，参考信号队列的长度更不稳定。因此，为保证声卡(包括声卡录音单元和声卡播放单元)工作的稳定性，以及保证参考信号队列长度的稳定性，可以通过向声卡和参考信号队列填充临时数据的方式来减少采集-播放相对时延波动，和稳定回声消除单元的回声路径估计。例如，若在所述第一定时周期内，缓存中不存在可用的语音信号，则将临时数据分别填充至所述声卡播放单元和所述参考信号队列中，所述临时数据为0组成的序列。可以理解的是，缓存中不存在可用的语音信号可以是上述第一语音信号，即表明还未缓存该第一语音信号，也可以是其他时刻采集的语音信号，具体本发明实施例不作限定。

以上对本发明中一种回声消除的方法进行说明，以下对执行上述回声消除的方法的终端设备30进行描述。

一、参照图3，对终端设备30进行说明，所述终端设备包括音频采集单元301、第一缓存单元302、第一定时器303、第一定时驱动单元304和回声消除单元305；

所述音频采集单元301，用于采集第一语音信号。

所述第一缓存单元302，用于缓存所述音频采集单元301采集到的第一语音信号，其中，缓存第一语音信号的目的是：在回声路径采集到第一语音信号后，不直接将采集到的第一语音信号输入至回声消除单元，而是在第一定时器触发的第一定时周期内，才将第一语音信号输入至回声消除单元，从而控制回声估计时延的稳定性。

所述第一定时器303，用于触发第一定时周期。

所述第一定时驱动单元304，用于在所述第一定时器303的第一定时周期内，从所述第一缓存单元中获取所述第一语音信号，以及获取参考信号队列中与所述第一语音信号匹配的参考信号，并将所述第一语音信号和所述参考信号输入所述回声消除单元，以使所述第一语音信号与所述参考信号之间的延时估计值在预设范围内。

所述回声消除单元305，用于使用所述第一定时驱动单元304输出的所述参考信号对所述第一定时驱动单元304输出的所述第一语音信号中的回声信号进行回声消除处理，得到第二语音信号，输出所述第二语音信号。

本发明实施例中，第一缓存单元302缓存第一语音信号，所述第一定时驱动单元304在所述第一定时器303的第一定时周期内，从所述第一缓存单元302中获取第一语音信号后，将参考信号和第一语音信号输入驱动回声消除单元，驱动回声消除单元305使用参考信号对第一语音信号中的回声信号进行回声消除处理，将得到第二语音信号输出。通过本方案可以稳定参考信号和回声信号的相对时延，以及提升回声消除单元的工作稳定性。

可选的，在一些发明实施例中，为稳定参考信号队列的稳定性，以及进一步提高回声消除单元的两个输入信号(即第一语音信号和参考信号)之间的相对时延，如图4所示，所述终端设备30还包括接收单元306、第二缓存单元307、第二定时器308、第二定时驱动单元309和解码单元300；

所述接收单元306，用于接收第三语音信号，第三语音信号为发送端发送给所述终端设备30的音频信号，该第三语音信号由终端设备30的声卡播放单元播放；

所述第二缓存单元307，用于缓存采集到的第三语音信号，所述第一语音信号至少包括与所述第三语音信号相同的信号；

所述第二定时器308，用于触发第二定时周期；

所述第二定时驱动单元309，用于在所述第二定时器的第二定时周期内，从所述第二缓存单元307中获取所述第三语音信号，并将从所述第二缓存单元307中获取到的所述第三语音信号输入所述解码单元300；

所述解码单元300，用于将所述第二定时驱动单元309输出的所述第三语音信号解码生成所述参考信号，并将解码生成的所述参考信号放入参考信号队列。

可选的，在一些发明实施例中，由于不同型号的音频编码器所编码的帧长不同，例如有的音频编码器可以编码的帧长为20ms一帧，有的音频编码器则是23ms一帧，所以为了进一步获得更优的回声消除效果，还可以定义所述第一定时周期根据音频编码器选择编码的帧长得到、以及所述第二定时周期是根据终端设备的音频编码器选择编码的帧长得到，例如可以将第一定时器触发的第一定时周期设为音频编码器的帧长，以及可以将第二定时器触发的第二定时周期设为音频编码器的帧长，也可以采用其他的计算方式，第二定时周期与第一定时周期可相同或不同，具体第一定时周期和第二定时周期的计算方式，本发明实施例不作限定。

可选的，在一些发明实施例中，该第一缓存单元302为终端设备的存储介质中一个缓存空间，可以是专门用于回声消除的缓存介质，也可以是缓存介质中预留的一个缓存空间，具体本发明实施例不作限定。所述第一缓存单元302的缓存长度(即所述第一语音信号的缓存长度)还需要参考声卡录音单元的最小缓存长度进行动态的调整，以平衡回声消除单元305的延时估计和采集的稳定性。例如，第一语音信号的缓存长度可以根据终端设备中声卡录音单元的最小缓存长度和第一缓存系数得到。举例来说，可以定义第一缓存系数为1.5，即将第一缓存单元302的缓存长度设为recordminbuffersize的1.5倍，从而平衡回声消除单元305的延时估计和采集的稳定性，具体第一缓存系数的取值本文不作限定。

可选的，在一些发明实施例中，该第二缓存单元307为终端设备的存储介质中一个缓存空间，可以是专门用于回声消除的缓存介质，也可以是缓存介质中预留的一个缓存空间，具体本发明实施例不作限定。

可选的，考虑到声卡播放单元在播放第三语音信号时，比采集第三语音信号更容易产生卡顿现象，所以在缓存采集的第三语音信号时，第二缓存单元307的缓存长度(即缓存第三语音信号的长度)还需要参考声卡播放单元的最小缓存长度进行动态的调整。例如，第三语音信号的缓存长度可以根据所述终端设备中声卡播放单元的最小缓存长度和第二缓存系数得到。举例来说，可以定义第二缓存系数为2，即将第二缓存单元307的缓存长度设为playminbuffersize的2倍，从而缓解由于声卡播放单元卡顿引起的参考信号抖动的问题，具体第二缓存系数的取值本文不作限定。

可选的，在一些发明实施例中，某些特定场景下，例如网络状态不佳，发送端停滞等现象导致终端设备接收不到发送端的数据包，一方面，会出现第一缓存单元302中缓存的语音信号被取空的现象，导致回声消除单元305进行回声路径估计时出现波动，无法继续进行回声消除操作(例如不会从参考信号队列去匹配参考信号)。另一方面，由于第二缓存单元307一直在缓存发送端发送的数据包，而第二定时驱动单元309和解码单元300又在周期性的生成参考信号，从而会导致参考信号队列变长，特别是在回声消除单元304无法进行回声消除操作时，参考信号队列的长度更不稳定。因此，为保证声卡(包括声卡录音单元和声卡播放单元)工作的稳定性，以及保证参考信号队列长度的稳定性，可以通过向声卡和参考信号队列填充临时数据的方式来减少采集-播放相对时延波动，和稳定回声消除单元305的回声路径估计。例如，若在所述第一定时器的定时周期内，所述第一缓存单元302中不存在可用语音信号，则所述第一定时驱动单元304将临时数据分别填充至所述声卡播放单元和所述参考信号队列中，所述临时数据为0组成的序列。

上面从单元化功能实体的角度对本发明实施例中的终端设备进行了描述，下面从硬件处理的角度分别对本发明实施例中的终端设备40进行描述。

如图5所示，本发明实施例中的终端设备40应用于回声消除的方法,终端设备40包括：

缓存器401、输入/输出单元402、处理器403和存储器404(其中处理器403的数量可以一个或多个，图5中以一个处理器403为例)。缓存器

在本发明的一些实施例中，缓存器401、输入/输出单元402、处理器403和存储器404可通过总线或其它方式连接，其中，图5中以通过总线连接为例。

本发明实施例涉及的服务器可以具有比图5所示出的更多或更少的部件，可以组合两个或更多个部件，或者可以具有不同的部件配置或设置，各个部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件或硬件和软件的组合实现。

其中，通过调用存储器405存储的操作指令，处理器404用于执行如下步骤：

通过所述缓存器401缓存采集到的第一语音信号；

在第一定时周期内，通过所述输入/输出单元402获取缓存的所述第一语音信号，以及获取参考信号队列中与所述第一语音信号匹配的参考信号，以使所述第一语音信号与所述参考信号之间的延时估计值在预设范围内；

使用所述参考信号对所述第一语音信号中的回声信号进行回声消除处理，得到第二语音信号，通过所述输入/输出单元402输出所述第二语音信号。

可选的，所述处理器403在采集第一语音信号之前，还用于执行如下步骤：

通过所述缓存器401缓存接收到的第三语音信号，所述第一语音信号至少包括与所述第三语音信号相同的信号；

在第二定时周期内，通过所述输入/输出单元402获取缓存的所述第三语音信号，所述第二定时周期提前于所述第一定时周期；

将获取到的所述第三语音信号解码生成所述参考信号，并将解码生成的所述参考信号加入所述参考信号队列中。

可选的，所述第一定时周期或所述第二定时周期为根据终端设备中音频编码器选择编码的帧长得到。

可选的，第一语音信号的缓存长度为根据终端设备中声卡录音单元的最小缓存长度和第一缓存系数得到。

可选的，第三语音信号的缓存长度为根据所述终端设备中声卡播放单元的最小缓存长度和第二缓存系数得到。

可选的，通过调用存储器404存储的操作指令，处理器403还用于执行如下步骤：

若在所述第一定时周期内，缓存器401中不存在可用的语音信号，则将临时数据分别填充至所述声卡播放单元和所述参考信号队列中，所述临时数据为0组成的序列。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上对本发明所提供的技术方案进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。