车辆用声音输入输出装置的制作方法

本申请要求于2018年10月31日提交的日本专利申请no.2018-205671的35usc119的优先权，其公开内容通过引用整体而并入本文。

本发明涉及一种车辆用声音输入输出装置。

背景技术：

在日本特开2006-94389号公报中，公开了一种具备能够切换为话筒或扬声器的发音/收音元件的车内对话辅助装置。

在日本特开2006-94389号公报的技术中，通过根据需要而将发音/收音元件切换为话筒或扬声器，从而对车内中的对话进行辅助。另外，假设了如下场景，即，乘员为了获得车辆或车辆周边的信息，从而与搭载于车辆上的系统进行对话的场景。在这种情况下，存在成为处于睡眠中的乘员等清醒程度较低的乘员的妨碍的可能性。

技术实现要素：

本公开内容考虑到上述事实，其目的在于，获得一种能够确保乘员的舒适性的车辆用声音输入输出装置。

用于解决课题的方法

本公开内容的第一方式所涉及的车辆用声音输入输出装置具有：收音部，其被设置于车厢内，且对乘员的语音进行收音；输出部，其被设置于车厢内，且对各个座椅输出声音或影像；清醒程度判断部，其对乘员的清醒程度进行判断；输出控制部，其在基于由所述收音部所收音到的语音而判断为发声出了与车辆或车辆周边有关的内容的情况下，使与车辆或车辆周边相关的信息从与清醒程度高于预定值的乘员所落座的座椅相对应的各输出部输出。

在本公开内容的第一方式所涉及的车辆用声音输入输出装置中，在车厢内设置有收音部和输出部，通过收音部而对乘员的语音进行收音，并通过输出部而对各个座椅输出声音或影像。此外，通过清醒程度判断部而对乘员的清醒程度进行判断。并且，在判断为发声出了与车辆或车辆周边相关的内容的情况下，输出控制部从输出部向乘员输出与车辆或车辆周边相关的信息。由此，即使乘员不实施特别的操作，也能够仅通过进行发声而获得车辆或车辆周边的信息。

此外，输出控制部使信息仅向由清醒程度判断部所判断出的清醒程度高于预定值的乘员输出。由此，能够抑制成为处于睡眠中的乘员等清醒程度较低的乘员的妨碍。

本公开内容的第二方式所涉及的车辆用声音输入输出装置为，在第一方式中，所述输出控制部使与车辆或车辆周边相关的信息以语音方式而从与清醒程度高于预定值的乘员所落座的座椅相对应的各输出部输出，并且，使反相声音从与清醒程度低于预定值的乘员所落座的座椅相对应的各输出部输出。

在本公开内容的第二方式所涉及的车辆用声音输入输出装置中，由于从与清醒程度低于预定值的乘员所落座的座椅相对应的输出部输出反相声音，因此能够使清醒程度较低的乘员听不到声音。

本公开内容的第三方式所涉及的车辆用声音输入输出装置为，在第一方式或第二方式中，在与所述车辆周边相关的信息中，包含有关于车辆正在行驶的位置的信息。

在本公开内容的第三方式所涉及的车辆用声音输入输出装置中，通过使乘员朝向收音部发声，从而从输出部对乘员输出关于车辆正在行驶的位置的信息。

本公开内容的第四方式所涉及的车辆用声音输入输出装置为，在第一方式至第三方式中的任意一个方式中，在与所述车辆周边相关的信息中，包含有关于车辆正在行驶的位置的周边的地形或建筑物的信息。

在本公开内容的第四方式所涉及的车辆用声音输入输出装置中，通过使乘员朝向收音部发声，从而从输出部对乘员输出关于车辆周边的地形或建筑物的信息。

如以上所说明的那样，根据第一方式所涉及的车辆用声音输入输出装置，能够确保乘员的舒适性。

根据第二方式所涉及的车辆用声音输入输出装置，能够有效地仅向欲获得信息的乘员传达信息。

根据第三方式所涉及的车辆用声音输入输出装置，能够使乘员迅速地掌握当前位置。

根据第四方式所涉及的车辆用声音输入输出装置，能够使乘员轻易地获得有关于车辆周边的地形或建筑物的信息。

附图说明

图1为示意性地表示搭载有一个实施方式所涉及的车辆用声音输入输出装置的车辆的车厢内的立体图。

图2为示意性地表示搭载有一个实施方式所涉及的车辆用声音输入输出装置的车辆的车厢内的侧视图。

图3为示意性地表示搭载有一个实施方式所涉及的车辆用声音输入输出装置的车辆的车厢内的俯视图。

图4为表示一个实施方式所涉及的车辆用声音输入输出装置的硬件结构的框图。

图5为表示ecu的硬件结构的框图。

图6为表示车辆用声音输入输出装置的功能结构的框图。

图7为表示语音入输出处理的流程的一个示例的流程图。

具体实施方式

参照附图而对一个实施方式所涉及的车辆用声音输入输出装置10进行说明。另外，为了便于说明，有时会夸大附图的尺寸比，从而与实际的尺寸比不同。此外，在各个附图中所适当标记的箭头标记fr、箭头标记up及箭头标记rh分别表示车辆的前方向、上方向及宽度方向的右侧。以下，在仅使用前后、上下、左右的方向来进行说明的情况下，只要没有特别记载，则表示车辆前后方向的前后、车辆上下方向的上下、朝向车辆前方向的情况下的左右。

如图1所示，本实施方式的车辆用声音输入输出装置10被搭载于车辆12上。车辆12为，无需乘员p进行操纵而能够自动行驶的、所谓的自动驾驶车辆，且能够通过传感器类部件来掌握周围的状况从而进行自动驾驶。另外，本实施方式的车辆12被构成为，能够在乘员p进行驾驶的手动驾驶模式、与进行自动行驶的自动驾驶模式之间进行切换。

在车辆12的车厢内配置有多个座椅14。如图1及图3所示，在本实施方式中，作为一个示例而配置有座椅14a、座椅14b、座椅14c及座椅14d这四个座椅14。

在此，在车辆12的顶部上设置有多个声音输入输出部18。在本实施方式中，设置有四个声音输入输出部18a、声音输入输出部18b、声音输入输出部18c及声音输入输出部18d，且各自被构成为，包括：作为具备指向性的收音部的话筒32、和作为具备指向性的输出部的扬声器34(参照图4)。

声音输入输出部18a及声音输入输出部18b被设置于座椅14a及座椅14b的前斜上方的顶置控制台16上。而且，声音输入输出部18a朝向座椅14a。即，声音输入输出部18a的话筒32a以能够对落座于座椅14a上的乘员p1所发出的语音进行收音的方式而被构成。此外，声音输入输出部18a的扬声器34a以能够仅向乘员p1输出声音的方式而被构成。

声音输入输出部18b朝向座椅14b。即，声音输入输出部18b的话筒32b以能够对落座于座椅14b上的乘员p2所发出的语音进行收音的方式而被构成。此外，声音输入输出部18b的扬声器34b以能够仅向乘员p2输出声音的方式而被构成。

声音输入输出部18c及声音输入输出部18d被设置于座椅14c及座椅14d的前斜上方处，且声音输入输出部18c朝向座椅14c。即，声音输入输出部18c的话筒32c以能够对落座于座椅14c上的乘员p3所发出的语音进行收音的方式而被构成。此外，声音输入输出部18c的扬声器34c以能够仅向乘员p3输出声音的方式而被构成。

声音输入输出部18d朝向座椅14d。即，声音输入输出部18d的话筒32d以能够对落座于座椅14d上的乘员p4所发出的语音进行收音的方式而被构成。此外，声音输入输出部18d的扬声器34d以能够仅向乘员p4输出声音的方式而被构成。

除了声音输入输出部18a及声音输入输出部18b之外，在顶置控制台16上还设置有车厢内摄像机20。车厢内摄像机20朝向车厢内，且以能够对乘员p1～乘员p4的脸部进行拍摄的方式而被构成。

在车辆12的前部设置有ecu(electroniccontrolunit：电子控制装置)22。而且，车辆用声音输入输出装置10以包括声音输入输出部18、车厢内摄像机20及ecu22的方式而被构成。此外，如图2所示，ecu22以能够经由网络而与服务器24连接的方式被构成。此外，在座椅14a的座椅靠背的内部设置有用于对乘员p1的心率进行检测的心率检测部30。同样地，在座椅14c的座椅靠背的内部设置有用于对乘员p3的心率进行检测的心率检测部30。另外，虽然并未进行图示，但是在座椅14b及座椅14d中也各自设置有心率检测部30。

图4为表示车辆用声音输入输出装置10的硬件结构的框图。如该图4所示，车辆用声音输入输出装置10以包括ecu22、话筒放大器26、扬声器放大器28、四个话筒32(话筒32a、话筒32b、话筒32c、话筒32d)、四个监视器35(监视器35a、监视器35b、监视器35c、监视器35d)、四个扬声器34(扬声器34a、扬声器34b、扬声器34c、扬声器34d)、服务器24、车厢内摄像机20及心率检测部30的方式而被构成。

话筒32a为构成声音输入输出部18a的话筒，且经由话筒放大器26而与ecu22电连接。同样地，话筒32b、话筒32c及话筒32d分别为，构成声音输入输出部18b、声音输入输出部18c及声音输入输出部18d的话筒，且经由话筒放大器26而与ecu22电连接。

扬声器34a为构成声音输入输出部18a的扬声器，且经由扬声器放大器28而与ecu22电连接。同样地，扬声器34b、扬声器34c及扬声器34d分别为，构成声音输入输出部18b、声音输入输出部18c及声音输入输出部18d的扬声器，且经由扬声器放大器28而与ecu22电连接。

监视器35a为用于对从ecu22所输出的影像进行显示的监视器。此外，监视器35a被配置在座椅14a的周边，且以对乘员p1显示影像的方式而构成。同样地，监视器35b被配置在座椅14b的周边，且以对乘员p2显示影像的方式而构成。

监视器35c被配置在座椅14c的周边，且以对乘员p3显示影像的方式而构成。监视器35d被配置在座椅14d的周边，且以对乘员p4显示影像的方式而构成。

心率检测部30为对落座于座椅14上的乘员p的心率进行检测的装置，且如上文所述，被内置于各个座椅14的座椅靠背中。

图5为表示ecu22的硬件结构的框图。如该图5所示，ecu22以包括cpu(centralprocessingunit：处理器)36、rom(readonlymemory：只读存储器)38、ram(randomaccessmemory：随机存取存储器)40、存储器42及通信接口44的方式而被构成。此外，各结构经由总线45而以能够相互通信的方式被连接在一起。

cpu36为中央运算处理单元，其执行各种程序、或者对各个部分进行控制。即，cpu36从rom38或存储器42读取程序，并将ram40作为工作区来执行程序。cpu36根据被记录在rom38或存储器42中的程序，而进行上述各结构的控制及各种运算处理。

rom38对各种程序及各种数据进行存储。ram40作为工作区而临时性地对程序或数据进行存储。存储器42通过hdd(harddiskdrive：硬盘驱动器)或ssd(solidstatedrive：固态驱动器)而被构成，且对包括操作系统在内的各种程序及各种数据进行存储。

通信接口44为，用于使ecu22与服务器24及其他设备进行通信的接口，例如使用了以太网(注册商标)、fddi、wi-fi(注册商标)等的规格。

车辆用声音输入输出装置10使用上述的硬件资源来实现各种功能。参照图6，而对车辆用声音输入输出装置10所实现的功能结构进行说明。

如图6所示，车辆用声音输入输出装置10作为功能结构而以包括语音记录部46、语音提取部48、清醒程度判断部50、输出位置确定部52、反相声音生成部54及输出控制部56的方式而被构成。各功能结构通过使cpu36读取并执行被存储在rom38或存储器42中的程序，从而被实现。

语音记录部46对由话筒32所收音到的语音进行记录。此外，语音提取部48从由语音记录部46所记录的语音中提取确定的词语。作为语音提取部48所提取的词语，例如提取包括燃料的剩余量或车辆12的行驶状况等的与车辆12相关的询问在内的词语、或包括与车辆12所行驶的位置的周边的地形或建筑物相关的询问在内的词语。

清醒程度判断部50对乘员p的清醒程度进行判断。具体而言，清醒程度判断部50基于来自车厢内摄像机20及心率检测部30中的至少一方的信号，而对乘员p的清醒水平进行判断。在此，在清醒程度较低的情况下，表示乘员p处于入睡倾向中。

输出位置确定部52对输出信息的位置进行确定。具体而言，输出位置确定部52对座椅14a～座椅14d中的输出信息的座椅14进行确定。

反相声音生成部54根据由话筒32所收音到的语音而生成反相声音。输出控制部56使语音从与由输出位置确定部52所确定的座椅14相对应的扬声器34输出，或者使与由输出位置确定部52所确定的座椅14相对应的监视器35输出影像。另外，也可以采用如下方式，即，在使语音从扬声器34输出的同时，使监视器35输出影像。

接下来，参照图7的流程图，来对由车辆用声音输入输出装置10实现的语音入输出处理的流程的一个示例进行说明。通过使cpu36从rom38或存储器42读取程序并在ram40中展开而执行，从而实施语音输入输出处理。

如图7所示，在步骤s102中，cpu36通过语音记录部46的功能而对语音进行记录。在此，在收音到乘员p通过话筒32a～话筒32d所发声的内容的情况下，对语音进行记录。

在步骤s104中，cpu36对是否发声出了与车辆12或车辆12的周边相关的词语进行判断。具体而言，在cpu36通过语音提取部48的功能而从由语音记录部46所记录的语音中提取出了与车辆12相关的词语或与车辆12的周边相关的词语的情况下，转移至步骤s106。此外，在cpu36没有提取出与车辆12或车辆12的周边相关的信息的情况下，反复进行步骤s104的处理直至提取出这些信息。

在步骤s106中，cpu36对是否存在清醒程度低于预定值的乘员p进行判断。具体而言，在cpu36通过清醒程度判断部50的功能、并基于来自车厢内摄像机20及心率检测部30中的至少一方的信息而判断为存在清醒程度低于预定值的乘员的情况下，向步骤s108的处理转移。此外，在判断为不存在清醒程度低于预定值的乘员的情况下，向步骤s110的处理转移。

在步骤s108中，cpu36将与所确定的乘员p所落座的座椅14相对应的扬声器34及监视器35从信息的输出目标中除外。具体而言为，将与在步骤s106中被判断为清醒程度较低的乘员p所落座的座椅14相对应的扬声器34及监视器35从信息的输出目标中除外。例如，在被判断为图1中乘员p3的清醒程度较低的情况下，不实施从与座椅14c相对应的扬声器34c的语音的输出。此外，不实施向与座椅14c相对应的监视器35c的影像的输出。

在步骤s110中，cpu36通过语音及影像中的至少一方而对输出目标的座椅14输出如下信息，即，和在步骤104中通过语音提取部48的功能所提取出的、与车辆12或车辆12的周边相关的词语相关联的信息。具体而言，cpu36通过输出控制部56的功能，而使语音从与被设定为输出目标的座椅14相对应的扬声器34输出。此时，也可以使影像从与被设定为输出目标的座椅14相对应的监视器35输出。

如上文所述，在本实施方式中，能够使与车辆12或车辆12的周边相关的信息仅向由清醒程度判断部50所判断出的清醒程度高于预定值的乘员p输出。

(作用)

接下来，对本实施方式的作用进行说明。

在本实施方式的车辆用声音输入输出装置10中，输出控制部56从扬声器34及监视器35中的至少一方输出和通过语音提取部48所提取出的与车辆12或车辆12的周边相关的词语相关联的信息。由此，即使乘员p不实施特别的操作，也能够仅通过进行发声的方式来获得与车辆12或车辆12的周边相关的信息。例如，在乘员p对车辆12的行驶状况进行了发声的情况下，通过语音提取部48的功能而对与行驶状況相关的语音进行提取。而且，cpu36使有关于车辆12的行驶状况的信息从扬声器34及监视器35中的至少一方输出。

此外，在本实施方式中，并不向由清醒程度判断部50所判断出的清醒程度低于预定值的乘员p输出信息。即，仅向由清醒程度判断部50所判断出的清醒程度高于预定值的乘员p输出信息。由此，能够抑制成为处于睡眠中的乘员p等清醒程度较低的乘员p的妨碍的情况。其结果为，能够确保其他乘员p的舒适性。

以上，虽然对实施方式进行了说明，但在不脱离本发明的主旨的范围内，当然可以以各种各样的方式来实施。例如，虽然在上述实施方式中，并不向通过图6的清醒程度判断部50而被判断为清醒程度低于预定值的乘员p实施信息的输出，但并未被限定于此。输出控制部56也可以向通过清醒程度判断部50而被判断为清醒程度低于预定值的乘员p输出反相声音。

作为一个示例，也可以采用如下方式，即，通过反相声音生成部54的功能而生成反相声音，并使输出控制部56从与清醒程度较低的乘员p所落座的座椅14相对应的扬声器34输出反相声音。如果采用这种方式，则能够使清醒程度较低的乘员p听不到声音。由此，能够有效地仅向欲获得信息的乘员p传达信息。

此外，也可以使cpu36之外的各种处理器来执行在上述各实施方式中cpu36读取并执行了软件(程序)而实施的处理。作为这种情况下的处理器，可例示出专用电路等，所述专用电路为，具有在fpga(field-programmablegatearray：现场可编程逻辑门阵列)等的制造之后能够改变电路结构的pld(programmablelogicdevice：可编程逻辑器件)、及asic(applicationspecificintegratedcircuit：特殊应用集成电路)等、为了执行确定的处理而专门被设计的电路结构的处理器。此外，既可以通过这些各种处理器中的一个来执行上述处理，也可以通过同种或不同种的两个以上的处理器的组合(例如，多个fpga、及cpu与fpga的组合等)来执行上述处理。此外，更具体而言，这些各种处理器的硬件结构为，对半导体元件等电路元件进行了组合而形成的电路。

并且，虽然在上述各实施方式中将存储器42设为记录部，但并未被限定于此。例如，也可以将cd(compactdisk：光盘)、dvd(digitalversatiledisk：数字多功能光盘)及usb(universalserialbus：通用串行总线)存储器等记录介质设为记录部。