本公开涉及,具备可穿戴扬声器的扬声器系统、对由可穿戴扬声器处理的声音进行处理的声音处理装置、声音处理方法以及程序。
背景技术:
在由头戴式的耳机听音乐等的情况下,在头部产生压迫感,头部的负担大。并且,会有产生头内定位,给用户带来不协调的情况。于是,提出了可穿戴扬声器(颈挂式扬声器)(例如,参照专利文献1)。据此,能够减轻头部的负担,并且,通过由可穿戴扬声器的头外定位,用户能够得到临场感。例如,关于在线游戏等,估计在长时间玩游戏,因此,为了听游戏声音以及通信对方的聊天语音,而适用可穿戴扬声器是有效的。
(现有技术文献)
(专利文献)
专利文献1:国际公开第2018/110161号
例如,关于在线游戏等,为了听游戏声音以及通信对方的聊天语音而利用可穿戴扬声器,并且,为了将安装了可穿戴扬声器的说话者的语音传递到通信对方,而也利用收集说话者的语音的麦克风的情况多。在此情况下,可穿戴扬声器与麦克风的位置相近,麦克风也收集从可穿戴扬声器输出的声音,因此,说话者的语音和从可穿戴扬声器输出的声音混合并传递到通信对方,会有难以听到说话者的语音的情况。例如,在说话者发声的期间,可以考虑使来自可穿戴扬声器的声音变小(例如静音),但是,若每当说话者发声时使声音变小,则导致使说话者感到不舒服以及不协调感。
并且,不仅限于在线游戏等,在利用可穿戴扬声器听音乐等的情况下,在利用所述麦克风以及智能手机等进行通话时(例如来电话时),以麦克风不收集从可穿戴扬声器输出的音乐的方式,同样,可以考虑使来自可穿戴扬声器的声音变小。
因此,需要不使来自可穿戴扬声器的声音变小,而提取说话者的语音。
技术实现要素:
于是,本公开,提供能够有效地提取穿戴了可穿戴扬声器的说话者的语音的扬声器系统等。
本公开的扬声器系统,所述扬声器系统具备:可穿戴扬声器,由说话者穿戴,并且,能够输出第一声音以及第二声音,所述第一声音是所述说话者的通信对方的语音,所述第二声音与所述第一声音不同;麦克风,用于收集所述说话者的语音;以及声音处理装置,对从所述可穿戴扬声器输出的声音以及由所述麦克风收集的声音进行处理,所述可穿戴扬声器具备,至少两个扬声器单元,所述麦克风具备,至少一个麦克风单元,所述声音处理装置,经由第一接口,获得示出所述第一声音的第一信号,经由与所述第一接口不同的第二接口,获得示出所述第二声音的第二信号,合成所述第一信号与所述第二信号,来生成参考信号,将所述第一信号以及所述第二信号输出到所述至少两个扬声器单元,从所述至少一个麦克风单元获得包括所述说话者的语音的拾音信号,针对所述拾音信号,利用所述参考信号,进行从所述至少两个扬声器单元输出的声音的成分的抵消处理,输出进行了所述抵消处理的拾音信号。
本公开的声音处理装置,对从可穿戴扬声器输出的声音、以及由麦克风收集的声音进行处理,所述可穿戴扬声器由说话者穿戴,并且,能够输出第一声音以及第二声音,所述第一声音是所述说话者的通信对方的语音,所述第二声音与所述第一声音不同,所述麦克风用于收集所述说话者的语音,所述声音处理装置,经由第一接口,获得示出所述第一声音的第一信号,经由与所述第一接口不同的第二接口,获得示出所述第二声音的第二信号,合成所述第一信号与所述第二信号,来生成参考信号,将所述第一信号以及所述第二信号输出到所述可穿戴扬声器具备的至少两个扬声器单元,从所述麦克风具备的至少一个麦克风单元获得包括所述说话者的语音的拾音信号,针对所述拾音信号,利用所述参考信号,进行从所述至少两个扬声器单元输出的声音的成分的抵消处理,输出进行了所述抵消处理的拾音信号。
本公开的声音处理方法,对从可穿戴扬声器输出的声音、以及由麦克风收集的声音进行处理,所述可穿戴扬声器由说话者穿戴,并且,能够输出第一声音以及第二声音,所述第一声音是所述说话者的通信对方的语音,所述第二声音与所述第一声音不同,所述麦克风用于收集所述说话者的语音,在所述声音处理方法中,经由第一接口,获得示出所述第一声音的第一信号,经由与所述第一接口不同的第二接口,获得示出所述第二声音的第二信号,合成所述第一信号与所述第二信号,来生成参考信号,将所述第一信号以及所述第二信号输出到所述可穿戴扬声器具备的至少两个扬声器单元,从所述麦克风具备的至少一个麦克风单元获得包括所述说话者的语音的拾音信号,针对所述拾音信号,利用所述参考信号,进行从所述至少两个扬声器单元输出的声音的成分的抵消处理,输出进行了所述抵消处理的拾音信号。
本公开的程序是,用于使计算机执行所述的声音处理方法的程序。
根据本公开的扬声器系统等,能够有效地提取穿戴了可穿戴扬声器的说话者的语音。
附图说明
图1是示出实施方式涉及的扬声器系统的适用例的图。
图2是示出实施方式涉及的可穿戴扬声器的结构的一个例子的图。
图3是示出实施方式涉及的声音处理装置的结构的第一例的图。
图4是示出实施方式涉及的声音处理装置的结构的第二例的图。
图5是示出实施方式涉及的声音处理装置的结构的第三例的图。
图6是示出实施方式涉及的声音处理装置的工作的一个例子的图。
图7是示出实施方式涉及的扬声器系统的其他的适用例的图。
图8是示出实施方式的变形例涉及的可穿戴扬声器的结构的一个例子的图。
图9是示出实施方式的变形例涉及的声音处理装置的结构的一个例子的图。
具体实施方式
以下,适当地参照附图,详细说明实施方式。但是,会有省略必要以上的详细说明的情况。例如,会有省略已经周知的情况的详细说明以及实质上相同的结构的重复说明的情况。这是因为,为了避免以下说明的不必要的冗长,使本领域技术人员能够容易理解的缘故。
而且,发明人,为了使本领域技术人员充分理解本公开而提供附图以及以下的说明,并不试图由它们限定实施方案所记载的主题。
(实施方式)
以下,利用图1至图8说明实施方式。
[扬声器系统的适用例]
首先,对于实施方式涉及的扬声器系统的适用例,利用图1进行说明。
图1是示出实施方式涉及的扬声器系统1的适用例的图。
例如,扬声器系统1,能够适用于在说话者100与通信对方200进行语音聊天的同时,也将与说话者100以及通信对方200的语音不同的声音输出到说话者100以及通信对方200的系统(服务)。例如,扬声器系统1,能够适用于在线游戏等。以下,说明说话者100利用扬声器系统1的例子。而且,说话者100的通信对方200,不仅限于一个人,也可以多个人。
扬声器系统1具备,声音处理装置10、可穿戴扬声器20、以及麦克风23(参照后述的图2)。而且,在本实施方式中,一体地设置可穿戴扬声器20以及麦克风23。
声音处理装置10是,对由可穿戴扬声器20以及麦克风23处理的声音进行处理的计算机。声音处理装置10,例如,从pc(personalcomputer)30获得作为说话者100的通信对方200的语音的第一声音,将第一声音处理并输出到可穿戴扬声器20。并且,声音处理装置10,从pc30获得与第一声音不同的第二声音(例如游戏声音等),将第二声音处理并输出到可穿戴扬声器20。并且,声音处理装置10,获得由麦克风23收集的声音,将该声音处理,例如,经由pc30向通信对方200输出。
可穿戴扬声器20是,在使用时由说话者100穿戴的扬声器(例如颈挂式扬声器)。可穿戴扬声器20,能够输出作为说话者100的通信对方200的语音的第一声音以及与第一声音不同的第二声音。可穿戴扬声器20,从声音处理装置10获得用于输出第一声音以及第二声音的信号。并且,可穿戴扬声器20具备,用于收集说话者100的语音的麦克风23。麦克风23,将包含收集的说话者100的语音的拾音信号输出到声音处理装置10。
例如,可穿戴扬声器20与声音处理装置10进行有线连接。图中未示出,也可以将电力经由ac适配器或与usb标准对应的接口提供到声音处理装置10,也可以将电力从声音处理装置10由有线提供到可穿戴扬声器20。据此,在可穿戴扬声器20不需要搭载电池,或者,不需要设置电源电路等,因此,能够使可穿戴扬声器20小型化、轻量化。并且,有线连接,与无线连接相比能够抑制通信延迟。而且,可穿戴扬声器20与声音处理装置10也可以进行无线连接。
pc30是,例如,通用的计算机,安装有游戏应用程序以及聊天应用程序等。pc30具备,各种各样的接口。例如,pc30具备,与hdmi(high-definitionmultimediainterface)(注册商标)标准对应的接口。并且,例如,pc30具备,与usb(universalserialbus)标准对应的接口、光输出接口、模拟声音输出端子或麦克风端子等。并且,pc30也可以具备,displayport、dvi(digitalvisualinterface)或vga端子等。pc30,经由与hdmi标准对应的接口、以及与usb标准对应的接口、光输出接口、模拟声音输出端子或麦克风端子等,与声音处理装置10连接。而且,安装在pc30的聊天应用程序也可以具有,能够选择获得的聊天语音信号(通信对方200的语音信号)的输出目的地的功能。也就是说,例如,作为通信对方200的语音信号的输出目的地,也可以从与hdmi标准对应的接口、与usb标准对应的接口、光输出接口或模拟声音输出端子中选择。而且,pc30也可以,经由displayport、dvi或vga端子等与监视器40连接。
并且,pc30能够,经由互联网等的网络300,与其他的计算机进行通信。据此,说话者100,能够与通信对方200进行语音聊天,并且,能够与通信对方200进行在线游戏。
监视器40是,例如,在说话者100利用pc30进行游戏时显示游戏影像的监视器。监视器40,例如,经由声音处理装置10从pc30获得游戏影像来显示。而且,监视器40也可以,直接从pc30获得游戏影像。
头戴式耳机50,将扬声器以及麦克风一体化而被形成,由通信对方200穿戴。头戴式耳机50,输出说话者100的语音以及游戏声音等。头戴式耳机50,从pc60获得示出说话者100的语音以及游戏声音等的信号。并且,头戴式耳机50,收集通信对方200的语音。头戴式耳机50,将示出收集的通信对方200的语音的信号输出到pc60。
pc60是,例如,通用的计算机,安装有游戏应用程序以及聊天应用程序等,关于基本结构以及功能,与pc30相同,因此,省略说明。pc60,经由与hdmi标准对应的接口、与usb标准对应的接口、光输出接口、模拟声音输出端子或麦克风端子等,与头戴式耳机50连接。并且,pc60,经由与hdmi标准对应的接口、displayport、dvi或vga端子等,与监视器70连接。
监视器70是,例如,在通信对方200利用pc60进行游戏时显示游戏影像的监视器。监视器70,例如,从pc60获得游戏影像并显示。
[可穿戴扬声器的结构]
接着,对于可穿戴扬声器20的结构,利用图2进行说明。
图2是示出实施方式涉及的可穿戴扬声器20的结构的一个例子的图。
可穿戴扬声器20是,穿戴在人而被使用的扬声器。可穿戴扬声器20是,具备连接部25,连接部25被挂在人的脖子上,从而被穿戴在人的脖子的颈挂式扬声器。连接部25,例如,由柔性的材料构成。并且,与后述的扬声器单元、麦克风单元以及开关等连接的信号线穿通连接部25。在本实施方式中,可穿戴扬声器20,由说话者100穿戴。
可穿戴扬声器20具备,至少两个扬声器单元。该至少两个扬声器单元包括,在可穿戴扬声器20由说话者100穿戴时,位于说话者100的侧方或后方的扬声器单元。并且,该至少两个扬声器单元包括,在可穿戴扬声器20由说话者100穿戴时,位于说话者100的前方的扬声器单元。例如,在至少两个扬声器单元中,在可穿戴扬声器20由说话者100穿戴时,包括位于说话者100的侧方或后方的两个以上的扬声器单元,包括位于说话者100的前方的两个以上的扬声器单元。
在本实施方式中,可穿戴扬声器20具备,可穿戴扬声器20由说话者100穿戴时,位于说话者100的前方的扬声器单元21a以及21b、以及位于说话者100的后方的扬声器单元22a以及22,以作为至少两个扬声器单元。如此,在本实施方式中,扬声器系统1是,具备四个扬声器单元的多通道(4通道)对应的系统。扬声器单元21a是,位于说话者100的前方右侧的前r扬声器,扬声器单元21b是,位于说话者100的前方左侧的前l扬声器,扬声器单元22a是,位于说话者100的后方右侧的后r扬声器(环绕r扬声器),扬声器单元22b是,位于说话者100的后方左侧的后l扬声器(环绕l扬声器)。扬声器单元21a、21b、22a以及22b,配置在连接部25上。
而且,扬声器系统1也可以具备,与可穿戴扬声器20分开设置的扬声器。例如,与可穿戴扬声器20分开设置的扬声器也可以是,与声音处理装置10一体地设置的扬声器。在此情况下,可穿戴扬声器20,也可以不具备作为前l/r扬声器的扬声器单元21a以及21b,也可以将从扬声器单元21a以及21b输出的声音,从与可穿戴扬声器20分开设置的扬声器输出。
并且,可穿戴扬声器20也可以,除了扬声器单元21a、21b、22a以及22b以外,还具备与可穿戴扬声器20分开设置的扬声器。例如,扬声器单元21a及21b、以及与可穿戴扬声器20分开设置的扬声器,也可以在同时输出相同的声音,也可以选择任意一方,仅任意一方输出声音。
并且,可穿戴扬声器20具备的扬声器单元的数量,若是两个以上,则没有特别的限定。并且,与可穿戴扬声器20分开设置的扬声器的数量,没有特别的限定。
并且,用于收集说话者100的语音的麦克风23具备,至少一个麦克风单元。在本实施方式中,麦克风23具备,作为至少一个麦克风单元的、两个麦克风单元23a以及23b。并且,在本实施方式中,将可穿戴扬声器20与麦克风23一体地设置,将麦克风单元23a以及23b,配置在连接部25上。麦克风单元23a以及23b,在可穿戴扬声器20由说话者100穿戴时,位于说话者100的前方(说话者100的嘴的周边)。例如,麦克风单元23a以及23b,由mems(microelectromechanicalsystems)麦克风实现。
并且,可穿戴扬声器20具备,开关24。说话者100,操作开关24,从而能够调整从各个扬声器单元输出的声音的音量。
可穿戴扬声器20,连接部25挂在说话者100的脖子而被使用,因此,与头戴式的耳机不同,难以给说话者100的耳朵以及头部带来压迫感。并且,可穿戴扬声器20,与头戴式的耳机不同,即使在长时间使用也在耳朵以及头部难以出汗。并且,可穿戴扬声器20,难以因出汗而弄脏,因此,便于维修。并且,可穿戴扬声器20,与头戴式的耳机不同,难以使说话者100的发型变乱。
并且,可穿戴扬声器20,在说话者100的周围配置扬声器单元,因此,能够给说话者100带来临场感(例如被声音包围的感觉)。例如,即使环绕耳机也产生头内定位,但是,可穿戴扬声器20,能够造出头外定位。可穿戴扬声器20,由说话者100穿戴,因此,即使说话者100在有线连接的范围内或无线连接的范围内移动,所谓最佳点也随着说话者的移动而向最佳的位置移动。
并且,即使利用可穿戴扬声器20,也不会耳机那样捂住耳朵,因此,说话者100,也能够听到周围环境的声音,能够使说话者100感到放心。
并且,使可穿戴扬声器20具有,按照从可穿戴扬声器20输出的声音向身体传递振动的功能,从而能够减轻说话者100的疲劳,或者,能够不感到可穿戴扬声器20的重量。
[声音处理装置的结构]
接着,对于声音处理装置10的结构,利用图3至图5进行说明。
首先,对于声音处理装置10的结构的第一例,利用图3进行说明。
图3是示出实施方式涉及的声音处理装置10的结构的第一例的图。而且,在图3中,除了声音处理装置10以外,还示出可穿戴扬声器20以及pc30。
声音处理装置10具备,第一接口(第一if)11a、第二接口(第二if)11b、解码部12、第一合成部13、第二合成部14a、相位调整部15、语音提取部16、第一amp(amplifier)17a以及第二amp17b。
第一if11a是,用于获得示出作为说话者100的通信对方200的语音的第一声音的第一信号的接口。第一if11a是,例如,与usb标准对应的接口,且是在与pc30之间能够进行信号的输入输出的接口。例如,经由第一if11a获得第一信号,经由第一if11a将示出由麦克风23收集的说话者100的语音的拾音信号输出到pc30。而且,第一if11a,也可以不是在与pc30之间能够进行信号的输入输出的接口,也可以是仅能够输入的接口。并且,由第一if11a处理的信号,也可以是数字(差动pwm(pulsewidthmodulation))信号,也可以是模拟信号。例如,第一if11a也可以是,获得从pc30具备的光输出接口作为第一信号输出的光信号的光输入接口。并且,例如,第一if11a也可以是,获得从pc30具备的模拟声音输出端子作为第一信号输出的模拟声音信号的aux端子。在第一if11a是仅能够输入的接口的情况下,声音处理装置10也可以还具备,用于输出拾音信号的输出接口。
第二if11b是,与第一if11a不同的接口,且是用于获得示出与第一声音不同的第二声音的第二信号的接口。第二声音是,例如,游戏声音等。关于在线游戏等,针对说话者100操作的游戏内的对象,说话者100能够知道游戏内的声音(攻击声音,接近音等)是来自哪个位置(方向)的声音是重要的。于是,第二if11b中获得的第二信号是,包括声音的位置信息的信号,例如,是声音形式为比特流的信号。在第二信号中,以元数据的形式包括左右方向以及高度方向的声音的位置信息(坐标信息)。第二if11b是,能够也将这样的位置信息与语音信号等一起传输的接口(换而言之,能够以不丢失这样的位置信息的方式进行传输的接口),例如,是与hdmi标准对应的接口。与hdmi标准对应的接口能够,由一个接口传输影像、语音以及控制信号。而且,第二if11b,若是能够也将位置信息与语音信号等一起传输的接口,则不仅限于与hdmi标准对应的接口。
第二if11b,例如,也可以除了语音信号以外,还获得影像信号,也可以将获得的影像信号,输出到监视器40。并且,第二if11b也可以,不获得影像信号,影像信号也可以从pc30经由displayport、dvi或vga端子等直接输出到监视器40。
解码部12是,对第二信号进行解码的处理部。并且,解码部12,判断第二if11b中获得的信号是否包括,位置信息(是否是声音形式为比特流的信号),在包括位置信息的情况下,解密该位置信息,利用解密的位置信息,向可穿戴扬声器20具备的至少两个扬声器单元(在此,扬声器单元21a、21b、22a以及22b)的每一个,分配并输出第二信号。此时,解码部12,对分配的各个第二信号进行虚拟环绕效果,输出到后级。图3所示的前l/r信号示出,向作为前l/r扬声器的扬声器单元21a以及21b分配的第二信号。并且,图3所示的后l/r信号示出,向作为后l/r扬声器的扬声器单元22a以及22b分配的第二信号。并且,解码部12,为了在后述的第一合成部13中,合成第一信号和第二信号,而将第二信号的采样频率与第一信号的采样频率一致(例如设为48khz)。而且,解码部12能够,与包括由前扬声器以及后扬声器构成的通道结构的各种各样的通道结构。例如,在此,解码部12,向四个扬声器单元(四个通道)分配信号,但是,不仅限于四个,能够按照扬声器系统1具备的扬声器单元的数量,进行信号的分配等。
第一合成部13,对向作为前l/r扬声器的扬声器单元21a以及21b输出的前l/r信号(第二信号)、与通信对方200的语音信号(第一信号)进行合成。据此,能够从扬声器单元21a以及21b,将作为游戏声音等的第二声音与作为通信对方200的语音的第一声音一起输出。如本实施方式,在多通道的扬声器系统1中,说话者100能够,从说话者100的前方的扬声器单元21a以及21b以自然的形式容易听到通信对方200的语音。
第二合成部14a,对由第一合成部13合成的前l/r信号以及通信对方200的语音信号、与向作为后l/r扬声器的扬声器单元22a以及22b输出的后l/r信号进行合成。由麦克风23收集的拾音信号中包括,作为第二信号的前l/r信号及后l/r信号、以及作为第一信号的通信对方200的语音信号,为了在后述的抵消部16a,抵消这些信号,在第二合成部14a中,对前l/r信号以及通信对方200的语音信号的合成信号、与后l/r信号进行合成。
相位调整部15是,调整信号的相位的处理部。例如,通过第一合成部13的处理,产生从扬声器单元21a以及21b输出的信号、与从扬声器单元22a以及22b输出的信号的相位差。于是,相位调整部15,以抑制该相位差的方式,调整各个信号的相位。
第一amp17a,将合成的前l/r信号以及通信对方200的语音信号放大到,从作为前l/r扬声器的扬声器单元21a以及21b能够输出的程度,输出到扬声器单元21a以及21b。
第二amp17b,将后l/r信号放大到,从作为后l/r扬声器的扬声器单元22a以及22b能够输出的程度,输出到扬声器单元22a以及22b。
在可穿戴扬声器20中,从扬声器单元21a、21b、22a以及22b,根据前l/r信号、后l/r信号以及通信对方200的语音信号,输出第一声音以及第二声音。麦克风23(麦克风单元23a以及23b)被设置为,位于人的嘴周边,因此,从设置在输出的声音由人的耳朵听到的位置的扬声器单元21a、21b、22a以及22b输出的声音,也由麦克风23收集。因此,麦克风23,在收集说话者100的语音时,会有也收集从扬声器单元21a、21b、22a以及22b输出的第一声音以及第二声音的情况。
语音提取部16,获得由麦克风23收集的拾音信号,进行说话者100的声音的提取处理。语音提取部16,作为用于进行该提取处理的功能构成要素,具备抵消部16a以及噪音处理部16b。
抵消部16a,对拾音信号进行从扬声器单元21a、21b、22a以及22b输出的声音的成分的抵消处理。在拾音信号中,除了说话者100的语音以外,还能够包括从扬声器单元21a、21b、22a以及22b输出的前l/r信号、后l/r信号以及通信对方200的语音信号,但是,前l/r信号、后l/r信号以及通信对方200的语音信号是,原来由声音处理装置10处理,从声音处理装置10向各个扬声器单元输出的信号。因此,抵消部16a能够,利用由第二合成部14a生成的、对前l/r信号、后l/r信号、以及通信对方200的语音信号进行合成的参考信号,抵消拾音信号中包括的、从扬声器单元21a、21b、22a以及22b输出的声音的成分。例如,抵消部16a,进行噪声消除处理,具体而言,将拾音信号,与对参考信号的相位进行反转的信号相加,从而能够从拾音信号中提取说话者100的语音信号。而且,抵消部16a,将提取的说话者100的语音信号输出到第一if11a,说话者100的语音信号经由第一if11a输出到pc30。
并且,在拾音信号中,除了说话者100的语音以外,还会包括说话者100(麦克风23)的周边的噪声。于是,噪音处理部16b,检测麦克风23的周边的噪声,进行消除或减少噪声的处理。实现该处理的方法,没有特别限制,也可以利用一般进行的任何方法。
接着,对于声音处理装置10的结构的第二例,利用图4进行说明。
图4是示出实施方式涉及的声音处理装置10的结构的第二例的图。
如图4示出,第二例与第一例不同之处是,声音处理装置10,代替第二合成部14a而具备第二合成部14b。对于其他之处,与第一例相同,因此,省略说明。在第一例中,在第一amp17a以及第二amp17b中放大信号之前,第二合成部14a,生成前l/r信号、后l/r信号、以及通信对方200的语音信号的参考信号。麦克风23收集的、从扬声器单元21a、21b、22a以及22b输出的信号是,第一amp17a以及第二amp17b中进行了放大处理的信号,对此,由第二合成部14a生成的参考信号是,第一amp17a以及第二amp17b中进行放大处理之前的信号。也就是说,在第一例中,抵消部16a,利用第一amp17a以及第二amp17b的放大前的参考信号,抵消第一amp17a以及第二amp17b的放大后的信号。
对此,在第二例中,在第一amp17a以及第二amp17b中放大信号后,第二合成部14b,生成前l/r信号、后l/r信号、以及通信对方200的语音信号的参考信号。因此,抵消部16a,利用第一amp17a以及第二amp17b的放大后的参考信号,抵消第一amp17a以及第二amp17b的放大后的信号,能够更准确地进行抵消。
接着,对于声音处理装置10的结构的第三例,利用图5进行说明。
图5是示出实施方式涉及的声音处理装置10的结构的第三例的图。
如图5示出,第三例与第二例不同之处是,声音处理装置10不具备第二合成部14b,不从第二amp17b向抵消部16a输出后l/r信号。对于其他之处,与第二例相同,因此,省略说明。
在第三例中,将合成了从第一amp17a输出的前l/r信号与通信对方200的语音信号的信号作为参考信号输入到抵消部16a。如图2示出,麦克风23、与作为前l/r扬声器的扬声器单元21a以及21b配置在近的位置,麦克风23、与作为后l/r扬声器的扬声器单元22a以及22b配置在远的位置的情况多。在此情况下,麦克风23,收集从扬声器单元21a以及21b输出的声音的可能性高,收集从扬声器单元22a以及22b输出的声音的可能性低。
因此,从由麦克风23收集的可能性低的扬声器单元输出的信号(例如后l/r信号)也可以,不包括在参考信号中。也就是说,如第三例,参考信号也可以,并不一定包括从扬声器系统1具备的所有的扬声器单元输出的信号。据此,能够简化声音处理装置10的电路结构。
而且,第一例至第三例的、解码部12、第一合成部13、第二合成部14a、14b、相位调整部15以及抵消部16a,例如,由dsp(digitalsignalprocessor)等的处理器(微处理器)实现。
[声音处理装置的工作]
接着,对于声音处理装置10的工作,利用图6进行说明。
图6是示出实施方式涉及的声音处理装置10的工作的一个例子的图。
声音处理装置10,经由第一if11a,获得示出作为说话者100的通信对方200的语音的第一声音的第一信号(步骤s11)。
声音处理装置10,经由与第一if11a不同的第二if11b,获得示出与第一声音不同的第二声音的第二信号(步骤s12)。
声音处理装置10,合成第一信号与第二信号来生成参考信号(步骤s13)。
在图3所示的声音处理装置10的结构的第一例中,声音处理装置10(第一合成部13),合成第一信号、与第二信号之中的前l/r信号,进一步,声音处理装置10(第二合成部14a),生成合成了该合成的信号、与第二信号之中的后l/r信号的参考信号。
在图4所示的声音处理装置10的结构的第二例中,声音处理装置10(第一合成部13),合成第一信号、与第二信号之中的前l/r信号,进一步,声音处理装置10(第二合成部14b),生成合成了放大了该合成的信号的信号、与放大了第二信号之中的后l/r信号的信号的参考信号。
在图5所示的声音处理装置10的结构的第三例中,声音处理装置10(第一合成部13),生成放大了合成了第一信号、与第二信号之中的前l/r信号的信号的参考信号。
声音处理装置10,将第一信号以及第二信号输出到可穿戴扬声器20具备的至少两个扬声器单元(步骤s14)。具体而言,声音处理装置10,利用第二信号中包括的位置信息,向至少两个扬声器单元分配并输出第二信号。更具体而言,声音处理装置10,将合成了第一信号、与前l/r信号(第二信号)的信号,经由第一amp17a,输出到扬声器单元21a以及21b,将后l/r信号(第二信号)经由第二amp17b,输出到扬声器单元22a以及22b。
声音处理装置10,从麦克风23具备的至少一个麦克风单元(在此,麦克风单元23a以及23b)获得包括说话者100的语音的拾音信号(步骤s15)。在拾音信号中,会包括第一信号以及第二信号的成分。
声音处理装置10,针对拾音信号利用参考信号进行从至少两个扬声器单元输出的声音的成分的抵消处理(步骤s16)。具体而言,声音处理装置10,对拾音信号中包括的、从扬声器单元输出的第一信号以及第二信号的成分,利用合成了第一信号与第二信号的参考信号进行抵消。拾音信号中包括的、第一信号以及第二信号的成分,原来是从声音处理装置10输出的成分,因此,声音处理装置10能够,利用第一信号与第二信号的参考信号容易抵消该成分。
声音处理装置10,输出进行了抵消处理的拾音信号(步骤s17)。也就是说,声音处理装置10,作为进行了抵消处理的拾音信号,输出由麦克风23收集的声音中提取了说话者100的语音的语音信号。声音处理装置10,例如,经由第一if11a,向pc30,输出进行了抵消处理的拾音信号。
而且,声音处理装置10也可以,在步骤s16中,针对拾音信号,除了利用参考信号的抵消处理以外,还进行消除或减少麦克风23的周边的噪声的处理。而且,声音处理装置10也可以,在步骤s17中,输出除了抵消处理以外,还进行了消除或减少噪声的处理的拾音信号。
[扬声器系统的其他的适用例]
而且,对于说话者100与通信对方200的语音聊天,说明了经由pc30进行的例子,但是,也可以经由智能手机进行。对此,利用图7进行说明。
图7是示出实施方式涉及的扬声器系统1的其他的适用例的图。
如图7示出,声音处理装置10也可以,与智能手机80连接,说话者100与通信对方200也可以,经由声音处理装置10以及智能手机80进行语音聊天。在此情况下,声音处理装置10具备的第一if11a,从智能手机80获得通信对方200的语音信号(第一信号),向智能手机80输出说话者100的语音信号(进行了抵消处理的拾音信号)。智能手机80与声音处理装置10,也可以由4极模拟电缆等进行有线连接,也可以由bluetooth(注册商标)等进行无线连接。
[变形例涉及的可穿戴扬声器的结构]
在所述实施方式中说明了,可穿戴扬声器20,作为至少两个扬声器单元,具备四个扬声器单元21a、21b、22a以及22b的例子,但是,不仅限于此。以下,说明具备两个扬声器单元的、实施方式的变形例涉及的可穿戴扬声器20。
图8是示出实施方式的变形例涉及的可穿戴扬声器20的结构的一个例子的图。
图9是示出实施方式的变形例涉及的声音处理装置10的结构的一个例子的图。
实施方式的变形例涉及的可穿戴扬声器20,与实施方式涉及的可穿戴扬声器20不同之处是,不具备扬声器单元22a以及22b。对于其他之处,与实施方式相同,因此,省略说明。
如图8示出,实施方式的变形例涉及的可穿戴扬声器20也可以,仅具备两个扬声器单元。也就是说,可穿戴扬声器20也可以是,双通道。例如,可穿戴扬声器20也可以,仅具备扬声器单元21a以及21b(前l/r扬声器)。在此情况下,在所述第一例中,声音处理装置10也可以,不具备第二合成部14a、相位调整部15以及第二amp17b,由第一合成部13合成的信号成为参考信号。并且,在所述第二例中,声音处理装置10也可以,不具备第二合成部14b、相位调整部15以及第二amp17b,从第二amp17b输出的信号成为参考信号。并且,在所述第三例中,声音处理装置10也可以,不具备相位调整部15以及第二amp17b。在所述第三例中,由图9示出不具备相位调整部15以及第二amp17b时的声音处理装置10的一个例子。
而且,实施方式的变形例涉及的可穿戴扬声器20也可以,代替扬声器单元21a以及21b,而仅具备扬声器单元22a以及22b(后l/r扬声器)。
[效果等]
如上说明,扬声器系统1具备:可穿戴扬声器20,由说话者100穿戴,能够输出说话者100的通信对方200的语音即第一声音以及与第一声音不同的第二声音;麦克风23,用于收集说话者100的语音;以及声音处理装置10,对从可穿戴扬声器20输出的声音以及由麦克风23收集的声音进行处理。可穿戴扬声器20具备,至少两个扬声器单元,麦克风23具备,至少一个麦克风单元。声音处理装置10,经由第一if11a,获得示出第一声音的第一信号,经由与第一if11a不同的第二if11b,获得示出第二声音的第二信号,合成第一信号以及第二信号来生成参考信号,将第一信号以及第二信号输出到至少两个扬声器单元,从至少一个麦克风单元获得包括说话者100的语音的拾音信号,针对拾音信号,利用参考信号,进行从至少两个扬声器单元输出的声音的成分的抵消处理,输出进行了该抵消处理的拾音信号。
基于示出通信对方200的语音即第一声音的第一信号、以及示出与第一声音不同的第二声音(例如游戏声音等)的第二信号的声音,从可穿戴扬声器20输出,该声音与说话者100的语音一起由麦克风23收集。由麦克风23收集的声音的成分之中的、从可穿戴扬声器20输出的声音的成分具有,与声音处理装置10生成的合成了第一信号与第二信号的参考信号相同的成分,因此,声音处理装置10能够,利用参考信号进行麦克风23收集的说话者100的语音以外的从可穿戴扬声器20输出的声音的抵消处理。据此,能够有效地提取穿戴了可穿戴扬声器20的说话者100的语音。抵消从可穿戴扬声器20输出的声音,因此,说话者100,不降低可穿戴扬声器20的音量,也能够通过麦克风23与通信对方200舒适地进行通话(例如,也可以不进行基于文字聊天应用程序的会话)。并且,第一信号与第二信号,分别个别地被获得,因此,即使第二信号中发生问题,也能够顺利进行基于第一信号的通话。
并且,也可以是,第二信号是,包括位置信息的信号,声音处理装置10,利用位置信息,向至少两个扬声器单元的每一个,分配并输出第二信号。例如,也可以是,第二信号是,声音形式为比特流的信号。并且,例如,也可以是,第二接口是,与hdmi标准对应的接口。
第二信号中包括的位置信息是,为了输出环绕声而需要的信息,但是,例如,若由pc30等的通用的计算机进行第一信号与第二信号的合成,则丢失第二信号中包括的位置信息,难以从可穿戴扬声器20输出环绕声。另一方面,在声音处理装置10中,从第一if11a获得第一信号,从第二if11b获得包括位置信息的第二信号,获得第二信号中包括的位置信息。据此,不丢失位置信息,也能够进行第一信号与第二信号的合成。因此,能够从可穿戴扬声器20输出环绕声,并且,有效地提取穿戴了可穿戴扬声器20的说话者100的语音。例如,第二信号的声音形式为比特流的信号,因此,能够将第二信号包括在位置信息中。并且,例如,第二if11b是与hdmi标准对应的接口,因此,声音处理装置10能够,以包括位置信息的状态获得第二信号。
并且,也可以是,在至少两个扬声器单元中包括,在可穿戴扬声器20由说话者100穿戴时,位于说话者100的侧方或后方的扬声器单元。
据此,在可穿戴扬声器20由说话者100穿戴时,扬声器单元位于说话者100的侧方或后方,据此,从说话者100的侧方或后方能够输出声音,说话者更能够获得临场感。可穿戴扬声器20,由说话者100穿戴,因此,即使说话者100移动,也能够所谓最佳点也随着说话者100的移动而时常向最佳的位置移动。
并且,也可以是,在至少两个扬声器单元中包括,在可穿戴扬声器20由说话者100穿戴时,位于说话者100的前方的扬声器单元。
通常,在与人进行会话时,对方位于前方从前方听到对方的语音,因此,在可穿戴扬声器20由说话者100穿戴时扬声器单元位于说话者100的前方,据此,与通常的会话相同,能够从说话者100的前方听到通信对方200的语音。
并且,也可以是,在至少两个扬声器单元中,在可穿戴扬声器20由说话者100穿戴时,包括位于说话者100的侧方或后方的两个以上的扬声器单元,包括位于说话者100的前方的两个以上的扬声器单元。
据此,在可穿戴扬声器20由说话者100穿戴时,两个以上的扬声器单元分别位于说话者100的前方、以及说话者100的侧方或后方,据此,从说话者100的周围能够输出声音,说话者100更能够获得临场感。并且,能够从说话者100的前方输出通信对方200的语音。
并且,也可以是,扬声器系统1还具备,与可穿戴扬声器20分开设置的扬声器。
如此,也可以与可穿戴扬声器20分开设置扬声器(例如,固定型扬声器等)。
并且,也可以是,可穿戴扬声器20与麦克风23被一体地设置。
如此,可穿戴扬声器20与麦克风23也可以被一体地设置。例如,与分开设置它们时相比能够抑制成本。
并且,也可以是,可穿戴扬声器20与声音处理装置10进行有线连接。
例如,在线游戏等中,若从可穿戴扬声器20输出的游戏声音以及聊天语音,与游戏的影像错开地输出,则使说话者100感到不舒服或不协调感。对此,可穿戴扬声器20与声音处理装置10进行有线连接,因此,可穿戴扬声器20与声音处理装置10进行无线连接的情况相比,能够抑制可穿戴扬声器20与声音处理装置10的通信延迟,能够不使说话者100感到不舒服或不协调感。
并且,声音处理装置10是,对从由说话者100穿戴的、能够输出说话者100的通信对方200的语音即第一声音以及与第一声音不同的第二声音的可穿戴扬声器20输出的声音、以及由用于收集说话者100的语音的麦克风23收集的声音进行处理的装置。声音处理装置10,经由第一if11a,获得示出第一声音的第一信号,经由与第一if11a不同的第二if11b,获得示出第二声音的第二信号,合成第一信号与第二信号来生成参考信号,将第一信号以及第二信号输出到可穿戴扬声器20具备的至少两个扬声器单元,从麦克风23具备的至少一个麦克风单元获得包括说话者100的语音的拾音信号,针对拾音信号,利用参考信号,进行从至少两个扬声器单元输出的声音的成分的抵消处理,输出进行了抵消处理的拾音信号。
据此,能够提供能够有效地提取穿戴了可穿戴扬声器20的说话者100的语音的声音处理装置10。
(其他的实施方式)
如上所述,作为本申请中公开的技术的例子,说明了实施方式。然而,公开的技术不仅限于此,也可以应用于适当地进行变更、替换、补充、省略等的实施方式。并且,也能够组合所述实施方式中说明的各个构成要素,来设为新的实施方式。
例如,在所述实施方式中说明了,语音提取部16具备,噪音处理部16b,但是,也可以不具备。也就是说,进行从至少两个扬声器单元输出的声音的成分的抵消处理即可,并不一定需要进行消除或减少麦克风23的周边的噪声的处理。
并且,例如,在所述实施方式中说明了,第二信号是,包括声音的位置信息的信号,但是,第二信号也可以不包括位置信息。例如,第二信号也可以不是,声音形式为比特流的信号。在此情况下,第二信号中不包括位置信息,即使由pc30进行第一信号与第二信号的合成,第二信号中原来不包括位置信息,因此,不成问题。因此,在此情况下,pc30也可以,进行第一信号与第二信号的合成。在此情况下,声音处理装置10,经由第二if11b获得由pc30合成的第一信号以及第二信号。声音处理装置10,判断第二if11b获得的信号是否包括,位置信息(是否为声音形式为比特流的信号),在不包括位置信息的情况下,不进行第一合成部13的处理。
并且,例如,在所述实施方式中说明了,合成向前l/r扬声器即扬声器单元21a以及22b输出的前l/r信号、与通信对方200的声音信号来生成参考信号的例子,但是,也可以合成向后l/r扬声器即扬声器单元22a以及22b出的后l/r信号、与通信对方200的声音信号来生成参考信号。
并且,例如,在所述实施方式中说明了,将pc30与声音处理装置10分开设置的例子,但是,若pc30具备能够实现声音处理装置10的功能的专用的dsp等,则pc30也可以具备声音处理装置10的功能。
并且,例如,在所述实施方式中说明了,将可穿戴扬声器20与声音处理装置10分开设置的例子,但是,也可以将可穿戴扬声器20与声音处理装置10一体地设置。
并且,例如,在所述实施方式中说明了,将麦克风23与可穿戴扬声器20一体地设置的例子,但是,也可以将麦克风23与可穿戴扬声器20分开设置。在此情况下,麦克风23,以位于说话者100的嘴附近的方式,由说话者100穿戴。
并且,本公开,不仅能够作为扬声器系统1或声音处理装置10实现,也能够作为包括构成声音处理装置10的构成要素进行的步骤(处理)的声音处理方法实现。
具体而言,声音处理方法是,对从由说话者100穿戴的、能够输出说话者100的通信对方的语音即第一声音以及与第一声音不同的第二声音的可穿戴扬声器20输出的声音、以及由用于收集说话者100的语音的麦克风23收集的声音进行处理的方法。如图6示出,在声音处理方法中,经由第一if11a,获得示出第一声音的第一信号(步骤s11),经由与第一if11a不同的第二if11b,获得示出第二声音的第二信号(步骤s12),合成第一信号与第二信号生成参考信号(步骤s13),将第一信号以及第二信号输出到可穿戴扬声器20具备的至少两个扬声器单元(步骤s14),从麦克风23具备的至少一个麦克风单元获得包括说话者100的语音的拾音信号(步骤s15),针对拾音信号,利用参考信号,进行从至少两个扬声器单元输出的声音的成分的抵消处理(步骤s16),输出进行了抵消处理的拾音信号(步骤s17)。
例如,这些步骤,也可以由计算机(计算机系统)执行。而且,本公开,能够作为用于使计算机执行这些方法中包括的步骤的程序实现。进一步,本公开,能够作为记录有该程序的cd-rom等的非暂时性的计算机可读取的记录介质实现。
例如,在本公开,以程序(软件)实现的情况下,利用计算机的cpu、存储器以及输入输出电路等的硬件资源执行程序,从而执行各个步骤。也就是说,cpu将数据从存储器或输入输出电路等获得并运算,或者,将运算结果输出到存储器或输入输出电路等,从而执行各个步骤。
例如,所述实施方式的声音处理装置10包括的各个构成要素也可以,由作为集成电路(ic:integratedcircuit)的lsi(largescaleintegration)实现。
并且,集成电路,不仅限于lsi,也可以作为专用电路或通用处理器来实现。也可以利用能够编程的fpga(fieldprogrammablegatearray)、或能够重构lsi内部的电路单元的连接以及设定的可重构处理器。
进而,若因半导体技术的进步或派生的其他的技术而出现代替lsi的集成电路化的技术,当然,也可以利用该技术进行声音处理装置10包括的构成要素的集成电路化。
如上所述,作为本公开涉及的技术的例子说明了实施方式。为此,提供了附图以及详细说明。
因此,在附图以及详细说明所记载的构成要素中,不仅包括为了解决课题而需要的构成要素,也可以包括为了解决课题而不需要的构成要素。因此,不应该因附图以及详细说明中记载这些不需要的构成要素,就将这些不需要的构成要素认定为需要。
并且,上述实施方式,用于示出本公开的技术的例子,因此,在实施方案或其均匀的范围内能够进行各种变更、替换、补充、省略等。
本公开,能够适用于利用可穿戴扬声器输出声音,并且与通信对方进行通话的系统。
符号说明
1扬声器系统
10声音处理装置
11a第一if
11b第二if
12解码部
13第一合成部
14a,14b第二合成部
15相位调整部
16语音提取部
16a抵消部
16b噪音处理部
17a第一amp
17b第二amp
20可穿戴扬声器
21a,21b,22a,22b扬声器单元
23麦克风
23a,23b麦克风单元
24开关
25连接部
30pc
40监视器
50头戴式耳机
60pc
70监视器
80智能手机
100说话者
200通信对方
300网络