技术特征:
1.一种终端设备,包括:第一传声器;第二传声器;波束成形器,用于将第一信号和第二信号之间的时延补齐后进行叠加,成为波束成形信号,所述第一信号是所述第一传声器接收到的信号,所述第二信号是所述第二传声器接收到的信号;频点部分处理单元,用于将所述第一信号和所述第二信号分成频域中的频点部分,对各频点部分进行处理,以增强所述波束成形信号中的语音。2.根据权利要求1所述的终端设备,其中,所述对各频点部分进行处理包括:确定所述第一信号和所述第二信号在频点的修正后相位差;确定所述修正后相位差是否满足第一预定条件;如果不满足第一预定条件,将该频点部分进行抑制。3.根据权利要求2所述的终端设备,其中,所述第一预定条件包括:所述修正后相位差小于第一阈值;所述抑制包括:滤除该频点部分。4.根据权利要求2所述的终端设备,其中,所述第一预定条件包括:所述修正后相位差小于第一阈值;所述抑制包括:如果所述修正后相位差在所述第一阈值和第二阈值之间,则将所述频点部分衰减预定比率;如果所述修正后相位差大于第二阈值之间,则将所述频点部分滤除,其中,所述第二阈值大于所述第一阈值。5.根据权利要求2所述的终端设备,其中,所述确定所述第一信号和所述第二信号在频点的修正后相位差,包括:确定所述第一信号和所述第二信号的相位角的差;确定所述第一信号和所述第二信号的时延;用所述相位角的差减去该频点的角频率与所述时延的积,得到所述修正后相位差。6.根据权利要求5所述的终端设备,其中,所述确定所述第一信号和所述第二信号的相位角的差,包括:根据所述第一信号和所述第二信号变换到频域后的实部和虚部,分别确定所述第一信号的相位角和所述第二信号的相位角;将所述第一信号的相位角和所述第二信号的相位角相减,得到所述相位角的差。7.根据权利要求5所述的终端设备,其中,所述确定所述第一信号和所述第二信号的时延,包括:获取候选时延集合;针对候选时延集合中的候选时延,用所述相位角的差减去该频点的角频率与所述候选时延的积,得到候选修正后相位差,如果确定频点的所述候选修正后相位差不满足第二预定条件,将所述波束成形信号的该频点部分进行抑制,并将抑制后的波束成形信号输入先验语音识别模型,由所述先验语音识别模型输出识别出特定词的概率;将候选时延集合中所述先验语音识别模型输出概率最大的候选时延,作为确定的时延。8.根据权利要求1所述的终端设备,还包括:识别单元,用于对所述频点部分处理单元输出的信号进行语音识别。9.根据权利要求8所述的终端设备,还包括:处理器,用于根据语音识别结果,执行相应
动作。10.根据权利要求9所述的终端设备,其中,所述终端设备包括音箱,所述相应动作包括开启所述音箱。11.一种终端设备,包括:基准传声器,接收到第一信号;多个其它传声器,分别接收到第二信号;波束成形器,用于将各第二信号相比于第一信号的时延补齐,将各时延补齐后的第二信号与第一信号叠加,成为波束成形信号;频点部分处理单元,用于将所述第一信号和第二信号分成频域中的频点部分,对各频点部分进行处理,以增强所述波束成形信号中的语音。12.根据权利要求11所述的终端设备,其中,所述对各频点部分进行处理包括:确定所述第一信号和各第二信号在频点的修正后相位差;确定确定的各修正后相位差的平均值是否满足第一预定条件;如果不满足第一预定条件,将该频点部分进行抑制。13.一种终端设备插件,用于插接在具有第一传声器、第二传声器和波束成形器的终端设备,所述波束成形器用于将第一信号和第二信号之间的时延补齐后进行叠加,成为波束成形信号,所述第一信号是所述第一传声器接收到的信号,所述第二信号是所述第二传声器接收到的信号,所述终端设备插件包括:频点部分处理单元,用于将所述第一信号和所述第二信号分成频域中的频点部分,对各频点部分进行处理,以增强所述波束成形信号中的语音。14.一种终端设备插件,用于插接在具有基准传声器、多个其它传声器和波束成形器的终端设备,所述基准传声器接收到第一信号,所述多个其它传声器分别接收到第二信号,所述波束成形器将各第二信号相比于第一信号的时延补齐,将各时延补齐后的第二信号与第一信号叠加,成为波束成形信号,所述终端设备插件包括:频点部分处理单元,用于将所述第一信号和所述第二信号分成频域中的频点部分,对各频点部分进行处理,以增强所述波束成形信号中的语音。15.一种片上系统,与终端设备的第一传声器和第二传声器的输入及终端设备的波束成形器的输出连接,所述波束成形器用于将第一信号和第二信号之间的时延补齐后进行叠加,成为波束成形信号,所述第一信号是所述第一传声器接收到的信号,所述第二信号是所述第二传声器接收到的信号,所述片上系统包括:频点部分处理单元,用于将所述第一信号和所述第二信号分成频域中的频点部分,对各频点部分进行处理,以增强所述波束成形信号中的语音。16.根据权利要求15所述的片上系统,其中,所述对各频点部分进行处理包括:确定所述第一信号和所述第二信号在频点的修正后相位差;确定所述修正后相位差是否满足第一预定条件;如果不满足第一预定条件,将该频点部分进行抑制。17.根据权利要求15所述的片上系统,还包括:识别单元,用于对所述频点部分处理单元输出的信号进行语音识别。18.一种片上系统,与终端设备的基准传声器和多个其它传声器的输入及终端设备的波束成形器的输出连接,所述基准传声器接收到第一信号,所述多个其它传声器分别接收到第二信号,所述波束成形器将各第二信号相比于第一信号的时延补齐,将各时延补齐后
的第二信号与第一信号叠加,成为波束成形信号,所述片上系统包括:频点部分处理单元,用于将所述第一信号和第二信号分成频域中的频点部分,对各频点部分进行处理,以增强所述波束成形信号中的语音。19.根据权利要求18所述的片上系统,其中,所述对各频点部分进行处理包括:确定所述第一信号和各第二信号在频点的修正后相位差;确定确定的各修正后相位差的平均值是否满足第一预定条件;如果不满足第一预定条件,将该频点部分进行抑制。20.一种终端设备音频处理方法,其中,所述终端设备具有第一传声器和第二传声器,所述方法包括:将第一信号和第二信号之间的时延补齐后进行叠加,成为波束成形信号,所述第一信号是所述第一传声器接收到的信号,所述第二信号是所述第二传声器接收到的信号;将所述第一信号和所述第二信号分成频域中的频点部分;对各频点部分进行处理,以增强所述波束成形信号中的语音。21.根据权利要求20所述的方法,其中,所述对各频点部分进行处理,包括:确定所述第一信号和所述第二信号在频点的修正后相位差;确定所述修正后相位差是否满足第一预定条件;如果不满足第一预定条件,将该频点部分进行抑制。22.一种终端设备音频处理方法,其中,所述终端设备具有基准传声器和多个其它传声器,所述基准传声器接收到第一信号,所述多个其它传声器分别接收到第二信号,所述方法包括:将各第二信号相比于第一信号的时延补齐,将各时延补齐后的第二信号与第一信号叠加,成为波束成形信号;将所述第一信号和第二信号分成频域中的频点部分;对各频点部分进行处理,以增强所述波束成形信号中的语音。23.根据权利要求22所述的方法,其中,所述对各频点部分进行处理包括:确定所述第一信号和各第二信号在频点的修正后相位差;确定确定的各修正后相位差的平均值是否满足第一预定条件;如果不满足第一预定条件,将该频点部分进行抑制。
技术总结
本公开实施例提供了一种终端设备、终端设备插件、片上系统和相关方法。该终端设备包括:第一传声器;第二传声器;波束成形器,用于将第一信号和第二信号之间的时延补齐后进行叠加,成为波束成形信号,所述第一信号是所述第一传声器接收到的信号,所述第二信号是所述第二传声器接收到的信号;频点部分处理单元,用于将所述第一信号和所述第二信号分成频域中的频点部分,对各频点部分进行处理,以增强所述波束成形信号中的语音。本公开提高了具有传声器阵列的终端设备的语音增强效果。阵列的终端设备的语音增强效果。阵列的终端设备的语音增强效果。
技术研发人员:吴泽先
受保护的技术使用者:阿里巴巴集团控股有限公司
技术研发日:2020.12.03
技术公布日:2022/6/10