专利名称:车辆周围监测装置的制作方法
技术领域:
本发明涉及一种车辆周围监测装置。更具体地讲,本发明涉及一种对校正红外线摄像头的信号输出的校正时刻进行控制的技术,该红外线摄像头用来监测车辆的周围情况。
背景技术:
车载红外线摄像头的温度会根据车辆行驶状态的不同而产生变动。其结果,因该红外线摄像头的输出也会产生变动,所以需要在规定时刻校正其输出。但是,如果不对该校正时刻进行适当的控制,会给车辆周围监测工作造成障碍,即,当驾驶员想查看由红外线摄像头拍到的监测图像时却无法看到该监测图像。在专利文献I中公开有一种用来搭载在移动体上的红外线图像拍摄装置。在该红外线图像拍摄装置中,根据移动体处于停止或者低速行驶状态,或在移动体的前进方向上有或没有被监测对象等,该红外线图像拍摄装置控制其输出的修正时刻。专利文献1:日本发明专利公报第4016022号但是在专利文献I中所记载的红外线图像拍摄装置中,其对输出进行修正的条件并不充分,该修正不一定是在通常认为驾驶员不看监测图像时所进行的,或者未必是根据红外线图像拍摄装置的工作状态来看在适于进行修正的状态下所进行的。即,很难说红外线图像拍摄装置对其输出的修正时刻的控制是恰当的。对此,本发明的目的是在通常认为驾驶员不看监测图像时和红外线图像拍摄装置正处于适于对红外线摄像头进行修正的状态,在该特定条件(时刻)下对其输出进行修正(校正),从而使得红外线摄像头处于能够可靠并且正常地进行拍摄的状态。
发明内容
为了实现上述目的,本发明提供一种车辆周围监测装置。该车辆周围监测装置包括:红外线摄像头,其搭载在车辆上,用来拍摄该车辆的周围情况;显示机构,其根据红外线摄像头拍到的图像数据生成显示图像并对其进行显示;校正机构,其根据拍到的快门表面的图像数据对红外线摄像头的像素之间的输出误差进行校正,所述快门用来开关可使光线进入红外线摄像头的开口 ;推测机构,由其根据车辆的行驶状态推测红外线摄像头的温度是否平稳;判断机构,由其根据车辆的行驶状态判断驾驶员在看显示机构的可能性。当推测红外线摄像头的温度处于平稳状态,并判断驾驶员在看显示机构的可能性较低时,由校正机构对红外线摄像头的输出进行校正。采用本发明时,因在推测红外线摄像头的温度处于平稳状态,并判断驾驶员在看显示机构的可能性较低时,由校正机构对红外线摄像头的输出进行校正。故不会给车辆周围监测工作造成障碍,而且,可在红外线摄像头处在适于对其进行校正的状态下对其输出进行适当的校正。根据本发明的一个实施方式,还具有用来确定车辆周围的被监测对象所在位置的雷达,当推测红外线摄像头的温度处于平稳状态,并且自身车辆到被确定为被监测对象的行驶在前面的车辆的距离在规定距离以内时,由校正机构进行校正。采用本发明的该实施方式时,当行驶在前面的车辆位于自身车辆附近且难以用红外线摄像头拍摄自身车辆周围的情况时,可以对红外线摄像头的输出进行校正。根据本发明的一个实施方式,当车辆以高于规定速度的速度行驶规定时间以上时,推测机构推测红外线摄像头的温度处于平稳状态。采用本发明的该实施方式时,当红外线摄像头的温度处于平稳状态,S卩,其处在适于进行校正的状态时,可对其输出进行校正。根据本发明的一个实施方式,当车辆在转弯或刚刚完成转弯,或者处于急加速或急减速状态时,判断机构判断驾驶员在看显示机构的可能性较低。采用本发明的该实施方式时,当驾驶员在看显示装置的可能性较低时,可对红外线摄像头的输出进行校正。根据本发明的一个实施方式,推测机构根据从上次校正到当前为止的红外线摄像头的温度变化量来推测红外线摄像头的温度是否平稳。采用本发明的该实施方式时,若从上次校正起温度变化量较小,则不对红外线摄像头进行校正,反之,若从上次校正起温度变化量较大,则会立即进行校正。即,可以根据温度变化量迅速而恰当地进行校正。根据本发明的一个实施方式,根据由上述红外线摄像头拍到的图像数据测出的规定生物与上述车辆处于规定的位置关系时,校正机构不进行上述校正。采用本发明的该实施方式时,例如从车辆所在的位置起在规定距离内有人正在移动的情况下,可以避免从行驶安全方面考虑应该确认摄像头图像却进行了校正的情形。根据本发明的一个实施方式,由校正机构根据来自导航装置的导航信息确定上述校正时刻。采用本发明的该实施方式时,若导航信息中提示了事故多发区,可推迟校正时刻直至通过该地区,或者前置校正时刻而在通过该地区之前完成校正。
图1是表示本发明一个实施例的车辆周围监测装置的结构框图。图2是表示本发明一个实施例的由控制装置进行处理的流程图。图3是表示确认校正条件I的流程的图。图4是表示确认校正条件2的流程的图。图5是用来说明判定红外线摄像头的温度是否平稳的方法的图。图6是表示本发明一个实施例的由控制装置进行处理的流程图。图7是表示确认校正条件O的流程的图。
具体实施例方式下面,参照
本发明的实施方式。图1是表示本发明一个实施方式的车辆周围监测装置的结构框图。车辆周围监测装置100搭载在车辆上,其具有用来拍摄该车辆的周围情况的红外线摄像头10、控制装置20、扬声器30和显示装置40。
红外线摄像头10具有:红外线检测器101,其为微辐射热测量计等,用来测出红外线;光学系统102,其由镜头等构成,由该镜头将从被摄物体放射过来的红外线成像在红外线检测器101上;快门103 ;温度传感器104。红外线检测器101是具有平面像素的平面传感器。快门103采用如下结构,S卩,在由控制装置20所控制的时刻进行开闭。呈关闭状态时会切断从被摄物体向光学系统102入射的红外线。优选快门103呈其表面温度均匀分布的平板状。由温度传感器104测出红外线摄像头10的内部的温度并将该检测信号传送给控制装置20。控制装置20也称为电子控制单元(以下称为“E⑶”),其为具有中央处理器(CPU)和存储器的计算机。控制装置20大体上具有以下两种功能,即,(i )根据由红外线摄像头10拍到的图像数据而测出车辆周围的被监测对象的图像处理功能、(ii)接收来自红外线摄像头10、搭载在车辆上的雷达12、车辆状态传感器14和导航装置16的信号而进行各种控制的功能。雷达12例如相当于扫描式激光雷达,通过接受由其在向各方向进行扫描的的光束被物体所反射的反射光,由此测出各方向上的物体的位置和距该物体的距离,并将其作为检测点。车辆状态传感器14是自身车辆的多个传感器的总称,所述多个传感器分别用来检测自身车辆的各种参数。车辆状态传感器14例如包括:车速传感器,其用来测出自身车辆的速度;加速度传感器;制动传感器,其用来测出制动踏板的踩踏程度;横向角速度传感器,其用来测出横向角速度(朝向转弯方向的转动角的变化速度)等等。图1中所示的控制装置20内的各框分别表示可由该控制装置20完成的各功能(结构)。即,图1中所示的控制装置20作为下述各机构而起作用,S卩,物体位置确定机构201,由其接收来自雷达12的信号,从而确定车辆周围的物体的位置(距离);图像获取机构202,由其将从红外线摄像头10拍到的车辆周围情况的图像作为灰色等级图像而获取;校正机构203,其根据由红外线摄像头10拍到的快门103的表面的图像数据,对红外线摄像头10的红外线检测器101的像素之间的输出误差进行校正;推测机构204,由其推测红外线摄像头10的温度是否平稳;判断机构205,由其根据车辆的行驶状态来判断驾驶员在看显示机构40的可能性。各框所具有的功能均通过控制装置20所具有的计算机(CPU)来实现。另外,控制装置20的各结构也可以组装在导航装置16中。作为控制装置20的硬件设施,例如具有:A/D变换回路,由其将被输入的模拟信号变换为数字信号;图像存储器,由其存储经数字处理过的图像信号;中央处理器(CPU),由其进行各种运算处理;RAM (随机存储器),当CPU进行各种运算处理时,由该RAM (随机存储器)存储各种数据;R0M (只读存储器),由其存储运行CPU时用到的程序和数据(包括表格、图);输出回路,由其向扬声器30输出驱动信号和向显不装置40输出显不信号等。由雷达12以及红外线摄像头10输出的信号被变换为数字信号后输出给CPU。根据控制装置20中的规定的被监测对象(行人等)的测出结果,由扬声器30产生声音或语音提示。显示装置40既显示红外线摄像头10所拍到的图像又进行可以使驾驶员察觉到车辆周围的被监测对象的显示。另外,作为扬声器30和显示装置40,也可以利用导航装置16所具有的该项功能。
图2是表示由控制装置20进行处理的流程图。该处理流程为用来对红外线摄像头10的红外线检测器101的像素之间的输出误差进行校正的控制流程,由控制装置20中的CPU读取存储在存储器中的处理程序,并且每隔规定的时间间隔运行。在步骤S 10中获取车辆的行驶信息。车辆的行驶信息包括车辆的行驶时间、车速的变化履历等。在步骤Sll中,根据所获取的车辆的行驶信息判定红外线摄像头10的温度是否平稳。当判定结果为”否”时,进入到步骤S18的快门控制程序并开始进行校正。当红外线摄像头10的温度呈不平稳状态时,优选对其进行校正,以获取适当的摄像图像。图5是用来说明判定红外线摄像头的温度是否平稳的方法的一个例子的图。在图5所示的图表中,车辆的工作状况如下,即,时间为O时起动发动机,时间为Tl时开始行驶,时间为T2时停止,当时间为T 3时再次进行怠速运转,图5表示在上述工作状况下的车速B和红外线摄像头的温度A的变化情况。红外线摄像头的温度A在从起动发动机后到怠速运转时上升,到时间Tl后因车辆开始行驶而逐渐下降,之后当车辆匀速行驶时其呈平稳状态。到时间为T2而车辆刚刚停止时温度A也呈平稳状态,当时间为T3而开始怠速运转后温度A再次上升。从图5中的车速B和红外线摄像头的温度A的关系来看,例如图中的区间C所示的车辆在匀速行驶后减速时,或者在车辆刚刚停止时的2种情况下,可判定(推测)为红外线摄像头的温度呈平稳状态。当推测红外线摄像头的温度处于平稳状态时,在步骤S12中,获取由雷达12测出的车辆周围的物体的信息(位置、距离)。在步骤S13中,根据所获取的车辆周围的物体的信息判定前方是否有多个车辆或人等物体,即,判断前方是否至少有规定数量以上的车辆或人等物体。该判定结果为”是”时结束处理。以防止在对车辆周围进行监测的必要性较高的状况下因正在进行校正处理而无法确认车辆周围物体的图像这样的情况出现。当步骤S13的判定结果为”否”时,在步骤S14中确认校正条件I。图3是表示确认校正条件I的流程的图。在步骤S141中,根据车辆状态传感器14中的加速度传感器测出的加速度数据,判定该加速度的大小是否在规定数值以上。该判定结果为”是”时在步骤S145中完成校正条件I=TRUE (真)而发出校正指示。若是急加速的情况,由于驾驶员一般没有看显示装置的空余时间,换言之,驾驶员正在看显示装置的可能性较低,所以即使进行校正也不会产生问题。当步骤S141的判定结果为”否”时,在下一个步骤S142中,根据车辆状态传感器14中的制动传感器测出的制动踏板被踩下的程度的数据,判定该制动踏板被踩下的程度是否在规定数值以上。该判定结果为”是”时在步骤S145中完成校正条件I=TRUE而发出校正指示。若是急减速的情况,由于驾驶员没有看显示装置的空余时间,换言之,驾驶员正在看显示装置的可能性较低,所以即使进行校正也不会产生问题。当步骤S142的判定结果为”否”时,在下一个步骤S143中,根据车辆状态传感器14中的横向角速度传感器测出的方位角数据,判定该方位角是否在规定数值以上。该判定结果为”是”时在步骤S145中完成校正条件I=TRUE而发出校正指示。如果是急转弯的情况,由于驾驶员没有看显示装置的空余时间,换言之,驾驶员正在看显示装置的可能性较低,所以即使进行校正也不会产生问题。当步骤S143的判定结果为”否”时,在下一个步骤S144中,根据雷达12测出的到前面车辆的距离数据,判定到前面车辆的距离是否在规定数值以下。该判定结果为”是”时在步骤S145中完成校正条件I=TRUE而发出校正指示。如果前面车辆就在前方不远处时,由于难以用红外线摄像头10获取车辆周围的图像,所以即使进行校正也不会产生问题。当步骤S144的判定结果为”否”时,在步骤S146中完成校正条件I=FALSE (伪)而发出不进行校正的指示。下面返回图2中的流程,在步骤S15中判定校正条件I是否已被满足。在图3所示的流程中,当校正条件I=TRUE时判定为校正条件I已被满足,当校正条件I=FALSE时判定为校正条件I未被满足。该判定结果为”是”时进入步骤S18 S20中的校正流程。当步骤S15的判定结果为”否”时,在下一个步骤S16中确认校正条件2。图4是表示确认校正条件I的流程的图。在步骤S161中,根据车辆状态传感器14中的车速传感器测出的车速数据,判定当前车速是否在规定数值以上。该判定结果为”是”时,在步骤S163中完成校正条件2=TRUE而发出校正指示。在车辆高速行驶的情况下,因驾驶员不会把视线移开前方,所以驾驶员在看显示装置的可能性较低,即使进行校正也不会产生问题。当步骤S161的判定结果为”否”时,在下一个步骤S162中,判定由扬声器30或显示装置30发出警报起至今是否在规定时间以内。该判定结果为”是”时在步骤S163中完成校正条件2=TRUE而发出校正指示。若是刚刚发出警报的情况,由于刚刚已向驾驶员提示过其应注意,所以即使进行因校正而无法在显示装置中看到图像也不会产生问题。当步骤S162的判定结果为”否”时,在步骤S164中完成校正条件2=FALSE而发出不进行校正的指
/Jn ο下面返回图2中的流程,在步骤S17中判定校正条件2是否已被满足。在图4所示的流程中,当校正条件2=TRUE时判定为校正条件2已被满足,当校正条件2=FALSE时判定为校正条件2未被满足。该判定结果为”是”时进入步骤S18 S20中的校正流程。该判定结果为”否”时结束处理。在步骤S18中,为进行校正而进行关闭红外线摄像头10的快门103控制处理,切断从被摄物体向光学系统102入射的红外线。在步骤S19中,用红外线摄像头10拍摄快门103的表面。在步骤S20中,对拍摄快门103的表面时的红外线摄像头10的输出进行校正。具体地讲,快门103为表面温度均匀分布的平板状时,调整每个像素或每个规定像素区域(线、区域)的信号放大率(增益率),以由红外线摄像头10的红外线检测器101的平面配置的各像素获取均匀的检测信号。上述调整(校正)方法可采用现有技术中的任一种方法。下面参照图6和图7说明图2所示的处理流程的其他实施方式。图6是表示由控制装置20进行处理的流程图的其他例子。图6与图2中的流程的主要不同点是在图6中采用步骤S102 S104共3个步骤,以代替图2中采用步骤Sll S13共3个步骤。另外,图6中的步骤S105 Slll中的内容,即,确认校正条件I和2、快门控制以及校正内容等,都与与之相对应的图2中的步骤S14 S20的内容基本相同。在图6所示的步骤SlOl中获取车辆的行驶信息。车辆的行驶信息包括车辆的行驶时间、车速的变化履历等。在步骤S102中确认校正条件O。图7是表示确认校正条件O的流程的图。在步骤S1021中,获取由雷达12测出的车辆周围的物体的信息(位置、距离)。在步骤S1022中,根据所获取的车辆周围的物体的信息判定前方是否有多个车辆或人等物体,即,判断前方是否至少有规定数量以上的车辆或人等物体。该步骤S1022的判定结果与图2中步骤S13的判定结果相同。该判定结果为”是”时,在步骤S1027中完成校正条件O=FALSE而发出不进行校正的指示。该判定结果为”否”时,进入下一个步骤S1023。在步骤S1023中,用红外线摄像头10拍摄车辆前方并获取图像。在步骤S1024中,从所获取的图像中判定有无规定的生物(例如人、其他四肢动物等)。该判定结果为”是”时,在步骤S1027中完成校正条件O=FALSE而发出不进行校正的指示。其原因在于,车辆前方有人等物体时,从安全方面考虑应该确认图像而不应该进行校正处理。该判定结果为”否”时,进入下一个步骤S1025。在步骤S1025中,用导航装置16获取前面车辆的信息、交通堵塞信息、道路信息等。在步骤S1026中,根据所获取的信息判定有无危险信息,例如判定是否正要通过事故多发的危险道路等。该判定结果为”是”时,在步骤S1027中完成校正条件O=FALSE而发出不进行校正的指示。其原因在于,当收到危险信息时,从安全方面考虑应该确认图像而不该进行校正处理。该判定结果为”否”时,在下一个步骤S1028中完成校正条件O=TRUE而发出可进行校正的指示。下面返回图6中的流程,在步骤S103中判定校正条件O是否已被满足。在图7所示的流程中,当校正条件O=TRUE时判定为校正条件O已被满足(”是”),当校正条件O=FALSE时判定为校正条件O未被满足(”否”)。该判定结果为”是”时进入步骤S104。该判定结果为”否”时结束处理。在下一个步骤S104中,求出上次校正到当前为止的红外线摄像头10的温度变化量AT,并且判定其绝对值和规定变化量(阈值)的大小关系。该温度变化量AT可由温度传感器104的检测信号求出。
如果温度变化量Λ T的绝对值大于规定的最大的阈值ATL ( ΔΤ > Λ TL)时进入步骤S109并且立即进行校正。其原因在于,红外线摄像头10的温度变化量很大时应该尽早进行校正。如果温度变化量AT的绝对值小于规定的最小的阈值ATS ( ΔΤ < Λ TS)时进入步骤S 112并且确认校正条件I。确认校正条件I的流程已在图3中说明过。如果温度变化量AT的绝对值在规定的最小的阈值ATS以上,并且在规定的最大的阈值ATL以下(ATS彡ΔΤ ^ Λ TL)时,进入步骤S105 S108中的校正条件I和2的确认步骤中。该步骤S105 S108的确认方法与已经说明的图2中的步骤S14 S17的相同。当图6所示的步骤S106和SI 13中的校正条件I未被满足(”否”)时,或是步骤S108中的校正条件2被满足(”是”)时进入步骤S109 S111,进行关闭红外线摄像头10的快门103的控制,并进行校正处理。其校正与图2所示的步骤S18 S20中的相同。当S 113中的校正条件I已被满足(”是”)时,或步骤S108中的校正条件2未被满足(”否”)时结束处理。采用图6所示的流程,尤其是采用步骤S102 S104流程时可以保持红外线摄像头的校正精度,还能够在驾驶员需要确认图像时限制校正,即,将关闭快门的控制降到最低限度。如上所述,采用本发明的实施方式时,在红外线摄像头的温度平稳的状态下,而且在不妨碍车辆驾驶的时刻,尤其是不妨碍驾驶员对车辆周围进行监测的时刻对红外线摄像头进行校正(快门控制),所以可以在精度较高且在恰当的时刻高效地进行校正。
以上说明了本发明的特定实施方式,但本发明并不局限于此,在不脱离本发明主旨的范围内可对其进行各种变型。另外,本发明可以适用于毫米波雷达。附图标记说明10:红外线摄像头;20:控制装置;30:扬声器;40:显示装置;100:车辆周围监测
装置·
权利要求
1.一种车辆周围监测装置,该车辆周围监测装置包括:红外线摄像头,其搭载在车辆上,用来拍摄该车辆的周围情况;显示机构,其根据所述红外线摄像头拍到的图像数据生成显示图像并对其进行显示;校正机构,其根据拍到的快门表面的图像数据对所述红外线摄像头的像素之间的输出误差进行校正,所述快门用来开关使光线进入所述红外线摄像头的开口 ;推测机构,其用来推测所述红外线摄像头的温度是否平稳;判断机构,由其根据车辆的行驶状态判断驾驶员在看所述显示机构的可能性,其特征在于, 在推测所述红外线摄像头的温度处于平稳状态,并且判断驾驶员在看所述显示机构的可能性较低时,由所述校正机构进行校正。
2.根据权利要求1所述的车辆周围监测装置,其特征在于, 还具有用来确定所述车辆周围的被监测对象所在的位置的雷达,在推测所述红外线摄像头的温度处于平稳状态,并且自身车辆到被确定为被监测对象的行驶在前面的车辆的距离在规定距离以内时,由所述校正机构进行所述校正。
3.根据权利要求1或2所述的车辆周围监测装置,其特征在于, 当所述车辆以高于规定速度的速度行驶规定时间以上时,所述推测机构推测所述红外线摄像头的温度处于平稳状态。
4.根据权利要求1 3的任意一项所述的车辆周围监测装置,其特征在于, 当所述车辆在转弯或刚刚完成转弯,或者处于急加速或者急减速状态时,所述判断机构判断驾驶员在看所述显示机构的可能性较低。
5.根据权利要求1所述的车辆周围监测装置,其特征在于, 所述推测机构根据从上次校正到当前为止的所述红外线摄像头的温度变化量来推测该红外线摄像头的温度是否平稳。
6.根据权利要求1所述的车辆周围监测装置,其特征在于, 根据所述红外线摄像头拍到的图像数据测出的规定生物与所述车辆处于规定的位置关系时,所述校正机构不进行所述校正。
7.根据权利要求1所述的车辆周围监测装置,其特征在于, 所述校正机构根据来自导航装置的导航信息确定校正时刻。
全文摘要
本发明提供一种车辆周围监测装置,该车辆周围监测装置包括红外线摄像头,其搭载在车辆上,用来拍摄该车辆的周围情况;显示机构,其根据红外线摄像头拍到的图像数据生成显示图像并对其进行显示;校正机构,其根据拍到的快门表面的图像数据对红外线摄像头的像素之间的输出误差进行校正,该快门用来开关可使光线进入红外线摄像头的开口;推测机构,由其根据车辆的行驶状态推测红外线摄像头的温度是否平稳;判断机构,由其根据车辆的行驶状态来判断驾驶员在看显示机构的可能性。当推测红外线摄像头的温度处于平稳状态,并判断驾驶员在看显示机构的可能性较低时,由校正机构进行校正。
文档编号G08G1/16GK103098110SQ201180012349
公开日2013年5月8日 申请日期2011年2月21日 优先权日2010年3月17日
发明者根来昌树, 横地裕次, 阿久津直人, 西垣守道, 泽田健一, 谷口文则, 藤井信彦 申请人:本田技研工业株式会社