专利名称：一种基于视频的闯红灯检测系统的制作方法
技术领域：
本实用新型关于图像识别技术，特别是关于交通管理中的闯红灯检测技术, 具体的讲是一种基于视频的闯红灯检测系统。
背景技术：
现有技术中的闯红灯检测方案，大多采用线圈触发的方式来启动摄像头的 拍摄，这种线圈触发的方案是在每条车道的红灯等待线下埋设一个检测线圈， 检测线圈接入线圈控制器，线圈控制通过I/0卡接入工业控制计算机；红灯信"^ 由红绿灯控制器接入I/0卡提供给工业控制计算机；每车道都对应有一个近景摄 像机， 一个补光装置和一个车牌识别器；车牌识别器通过网络接口接入工业控
制计算机；再将一个远景摄像机通过视频分配器将该远景摄像机的视频信号分
为两路经多路视频采集卡接入工业控计算机。在进行闯红灯检测时，闯红灯车 辆压到检测线圈，检测线圈输出触发信号，如果此时红绿灯控制器输出的是红 灯信号，则由近景摄像机拍摄该闯红灯车辆的一帧图片并根据拍摄的一帧图片
来识别该闯红灯车辆的车牌；同时由远景摄像摄连续拍摄该闯红灯车辆的多张 图片，连续拍摄的图片可以是三张，拍摄每张图片之间的时间间隔可以预先设 定，所连续拍摄的三张图片便可以构成闯红灯的证据图片。
上述方案采存在以下的缺陷(一)存在检测线圈本身的寿命问题。(二) 存在断路、挖路对检测线圈铺设及维护的问题。(三)存在道路工程对检测线 圈的破坏问题。(四)上述方案的车牌识别和闯红灯拍摄是由不同设备完成的，-所以需要将车牌识别结果和拍摄的图片一一对应才能生成准确的闯红灯证据图 片，然而在一些特殊情况下不同设备的协同会出问题，从而造成车牌识别结果 和拍摄的图片无法一一对应。例如检测线圈会误被触发，车牌识别有误等。 (五)在上述方案中， 一个路口的多个方向的闯红灯检测仅由一台工业控制计算机完成检测控制，因此检测软件的复杂度较高。(六)由于上述方案采用检 测线圈触发之后延时连续拍摄闯红灯的方法，因此使得第一帧远景图片质量较
好，而延迟(如延迟500ms)后拍摄的第二帧图像，以及再过500ms拍摄的第三帧 图像则会出现问题，第二帧位置和第三帧车辆位置会有不同，只能适应大部分 速度车辆，当速度较大时有可能第三帧图片中不含有车辆。位置不一致，造成 整个闯红灯数据的证据不足。
当然还有采用雷达作为触发信号的技术方案，但由于雷达扫面的整个断面 只要有车辆通过即发出触发信号，所以对触发信号的处理较复杂，再加上成本 问题，采用雷达作为触发信号的技术方案无法大面积推广使用。
现有技术中也有采用视频车牌识别作为触发、远景摄像机进行抓拍的技术 方案。该方案包括视频车牌器，红绿控制器、远景摄像机、近景摄像机，省略 了上述线圈方案中的线圈和线圈控制器。该方案将视频车牌器的识别范围设定 在红灯线之后一定区域，认为红灯亮时，车牌出现在该区域的车辆即为闯红灯， 此时触发远景摄像头拍摄，之后延时拍摄另两帧远景图片，从而构成闯红灯数 据。然而，该方案仍然没有解决上述线圈方案所存在的问题。
现有技术中还有视频检测闯红灯系统配和单张图片车牌识别的技术方案， 然而，该方案仍然没有解决上述线圈方案所存在的问题。该方案仍需接入红绿 灯信号，而且视频检测闯红灯系统与单张图片车牌识别两者之间的结合依靠时 间的同步，如果不能完全同步，则会出现较大的错误率。由于图片拍摄与车辆 的不对应，造成了大量不能作为执法证据的数据，据统计证据充分的闯红灯执 法数据只占全部拍摄的闯红灯数据的20%左右。
中国实用新型专利200520055168.9公开了一种汽车牌照自动识别器，该汽 车牌照自动识别器公开的技术方案可合并于此，以作为本实用新型的现有技术。
发明内容
本实用新型提供一种基于视频的闯红灯检测系统，用于通过视频流和车牌 自动识别解决闯红灯检测的问题。本实用新型的技术方案为一种基于视频的阁红灯检测系统，所述的系统包括全景摄像机，用于对 闯红灯检测区域内的交通信号灯状态和车辆进行全景视频拍摄，生成全景视频 数据；近景摄像机，用于对闯红灯检测区域内的车辆进行近景视频拍摄，生成 被检测车辆的近景视频数据；视频数据联合处理装置，分别与所述的全景摄像 机和近景摄像机相连接，所述的视频数据联合处理装置包括视频采集单元， 用于采集所述的交通信号灯状态视频数据、被检测车辆的全景视频数据和近景 视频数据；信号灯状态检测单元，用于根据所述的交通信号灯状态视频数据获 取红灯信号时间段；全景闯红灯车辆检测单元，用于对所述的红灯信号时间段 内被检测车辆的全景视频数据进行处理，生成全景阁红灯车辆数据；近景闯红 灯车辆检测单元，用于对所述的红灯信号时间段内被检测车辆的近景视频数据 进行处理，生成近景闯红灯车辆数据；全/近景视频数据佐证单元，用于将相同 拍摄时段的全景闯红灯车辆数据与近景闯红灯车辆数据一一对应，生成全/近景 闯红灯车辆数据；闯红灯数据输出单元，将所述的全/近景闯红灯车辆数据输出。
本实用新型的有益效果在于可以采用视频检测交通信号灯的红绿灯状态-不用接入红绿灯信号。对闯红灯的车辆具有跟踪功能，可获取和定位闯红灯车 辆的连续(如连续三张)的图片。具有视频车牌识别功能，以实现全景和近景 视频数据的相互作证，提高车辆与车牌的对应率，提高了作为闯红灯图像证据 的有效性。本实用新型方案直接通过网络将闯红灯的结果传输到监控中心的计 算机，极大减少了故障点。
图l是本实用新型系统的结构框图； 图2是本实用新型视频数据联合处理装置的结构框图； 图3是本实用新型系统补光装置的结构框图； 图4是本实用新型车牌识别单元的原理示意图。
具体实施方式
以下结合附图说明本实用新型的具体实施方式
。图l为本实用新型在同方向 两车道环境下的实施方式，本实施方式中 一车道上设置的近景摄像机201和二
车道上设置的近景摄像机204,近景摄像机201获得一车道上的近景视频数据， 近景摄像机204获得二车道上的近景视频数据；与近景摄像机201相连接的补光 装置202和近景摄像机204相连接的补光装置205，分别为一车道和二车道的近景 拍摄补光；全景摄像机203，对交通信号灯的状态和进入闯红灯检测区域的一车 道和二车道的车辆进行全景视频拍摄，生成全景视频数据；视频分配器，用于将 远景摄像机203拍摄的全景视频数据分为两路，生成两路全景视频数据；视频数 据联合处理装置206及视频数据联合处理装置207 ，视频数据联合处理装置206 分别通过串口与补光装置205连接、通过视频接口与近景摄像机204连接、通过 视频接口与全景摄像机203连接；视频数据联合处理装置207分别通过串口与补 光装置202连接、通过视频接口与近景摄像机201连接、通过视频接口与全景摄 像机203连接；视频数据联合处理装置206及视频数据联合处理装置207用于对所 述红灯信号时间段内的被检测车辆的全景视频数据和近景视频数据进行处理， 获取被检测车辆的连续的多张全景图片和该被检测车辆的车牌数据；视频数据 联合处理装置206如图2所示，包括视频采集单元、信号灯状态检测单元、全景 闯红灯车辆检测单元、近景闯红灯车辆检测单元、全/近景视频数据佐证单元、 闯红灯数据输出单元，视频采集单元，采集全景摄像机203的交通信号灯状态视 频数据、由全景摄像机203采集的被检测车辆的全景视频数据和由近景摄像机 204采集的近景视频数据；信号灯状态检测单元，根据视频采集单元采集的交通
信号灯状态视频数据获取红灯信号时间段；全景闯红灯车辆检测单元，对由信 号灯状态检测单元获取的红灯信号时间段内被检测车辆的由全景摄像机203采
集的全景视频数据进行处理，生成全景闯红灯车辆数据；近景闯红灯车辆检测 单元，对由信号灯状态检测单元获取的红灯信号时间段内被检测车辆的由近景 摄像机204采集的近景视频数据进行处理，生成近景闯红灯车辆数据；全/近景视频数据佐证单元，将相同拍摄时段的由全景闯红灯车辆检测单元生成的全景 闯红灯车辆数据与由近景闯红灯车辆检测单元近景闯红灯车辆数据一一对应， 生成全/近景闯红灯车辆数据；闯红灯数据输出单元，将由全/近景视频数据佐 证单元生成的全/近景闯红灯车辆数据输出；视频数据联合处理装置207的结构 和视频数据联合处理装置206相同；工业控制计算机，通过网络接口与视频数据 联合处理装置206及视频数据联合处理装置207相连接，用于接收、储存和现实 闯红灯证据数据。
视频数据联合处理装置可以采用数字信号处理器(DSP)实现，如图2所示， 在视频数据联合处理装置中设置有参数设置模块、补光灯控制模块、视频采 集模块、视频红绿检测模块、视频闯红灯检测模块、视频识别模块、闯红灯检 测和车牌识别相互佐证模块。其中
参数设置模块，用于设置视频识别参数、视频闯红灯参数、相互佐证参数、 视频红绿灯检测参数等。设置的各个参数通过网络接口发送给视频数据联合处 理装置及视频数据联合处理装置207 ，视频数据联合处理装置206及视频数据联 合处理装置207将收到参数储存在自身的FALSH中，并启用这些参数。这些参数 的数值根据检测现场的实际情况而定，比如信号灯状态持续的时间，路面的宽 度，选取的图像帧的数量等。
补光控制模块，可以根据采集图像中计算的特征值控制补光的强度，通过 获得视频的场同步信号，将LED补光灯控制在摄像机采集时刻变亮，之后变暗， 形成和视频同步闪烁的补光。
视频采集模块，利用视频采集芯片实现视频的模/数转换，将形成的数字图 像弓I入到DSP可操作的内存中。本模块可采集全景和近景两路视频数据。
全景视频闯红灯检测模块，采用车辆跟踪技术，车辆进入检测区域到车辆 离开检区域每一帧的位置均可获得，其中采用了帧差，自定位边缘，数字滤波， 运动预测等方法来获取车辆的全景视频数据。
近景车牌识别模块，主要功能是识别车辆牌照，该模块包括车辆闯入检测，车牌定位，车牌切割，车牌识别，车身颜色边缘特征识别。
视频红绿灯检测模块，该模块的功能为检测视场中红绿灯状态，为闯红灯 检测提供红灯信号状态。通过检测指定的红绿灯区域的颜色获得红、黄、绿的 状态。并获取红、黄、绿状态持续的时间段。
闯红灯检测和车牌识别相互佐证模块,该相互佐证模块可实现全/近景视频 数据的同时采集、实时对应，所以全/近景视频数据对应关系将更好。该相互佐 证模块还可以在全景视频数据中进行全景车辆特征信息提取，全景车辆特征信 息包括车辆位置，车辆纹理、车辆的颜色等信息。同时，该相互佐证模块在与 全景视频数据对应的近景视频数据中提取近景车辆特征信息，近景车辆特征信 息包括车辆的外部轮廓信息、车辆颜色等信息。根据这些信息实现车辆全景图 片和近景图片的一一对应。
如图3所示，为本实用新型补光控制部分的原理示意图，处理单元采用ARM 微处理器，通过串口可以和车牌识别器通讯，可以采集视频图像的场同步信号 和光强信号，可以控制摄像机的快门和LED补光管矩阵的开关。
如图4所示，为本实用新型的车牌识别器的原理示意图，核心处理单元采用 TiC6000系列的高性能处理器，保证视频车牌识别大运算量的实现，FLASH用来 存储程序和参数，SDRM作为内存，视频采集芯片用于图像采集，视频输出芯片 用于图像送显，网络芯片用于送出识别结果和对外沟通，串口扩展芯片用于送 出识别结果和对外沟通，还扩展有I/0接口，预留其他开关量的接入和输出。
本具体实施方式
无需接入线圈;全视频工作；无需接入红绿灯信号;同一 处理器内工作，加入相互佐证模块，远景证据图片和近景证据实现一一对应； 简化路口设备，降低故障点。从而较大提高了证据图片的有效性。
本具体实施方式
可以视频检测红绿灯,不用接入红绿灯信号,视频闯红灯 具有跟踪功能，较好定位闯红灯车辆的三张图片,具有视频车牌识别功能从实 现相互作证模块，提高对应率，从而闯红灯的数据的有效性。本实用新型只需 接入远景视频和近景视频即可，采用视频闯红灯检测和视频车牌识别在同一电路板完成，相互佐证，从而实现闯红灯数据的较高有效性，简化现场的设备， 减少故障点，提高稳定性。同时可更加灵活的配置，完全可以将设备置于路口 检测机柜中，直接通过网络将闯红灯的结果传输到监控中心的计算机，尤其使 用与路口无人值守的环境，路口可以没有工业控制计算机，极大减少的故障点。 因此以上具体实施方式
仅用于说明本实用新型，而非用于限定本实用新型。
权利要求1.一种基于视频的闯红灯检测系统，其特征是，所述的系统包括全景摄像机，对闯红灯检测区域内的交通信号灯状态和车辆进行全景视频拍摄，生成全景视频数据；近景摄像机，对闯红灯检测区域内的车辆进行近景视频拍摄，生成被检测车辆的近景视频数据；视频数据联合处理装置，分别与所述的全景摄像机和近景摄像机相连接，所述的视频数据联合处理装置包括视频采集单元，采集所述的交通信号灯状态视频数据、由所述的全景摄像机采集的被检测车辆的全景视频数据和由所述的近景摄像机采集的近景视频数据；信号灯状态检测单元，根据所述的视频采集单元采集的交通信号灯状态视频数据获取红灯信号时间段；全景闯红灯车辆检测单元，对所述的由信号灯状态检测单元获取的红灯信号时间段内被检测车辆的由所述的全景摄像机采集的全景视频数据进行处理，生成全景闯红灯车辆数据；近景闯红灯车辆检测单元，对所述的由信号灯状态检测单元获取的红灯信号时间段内被检测车辆的由所述的近景摄像机采集的近景视频数据进行处理，生成近景闯红灯车辆数据；全/近景视频数据佐证单元，将相同拍摄时段的由所述的全景闯红灯车辆检测单元生成的全景闯红灯车辆数据与由所述的近景闯红灯车辆检测单元近景闯红灯车辆数据一一对应，生成全/近景闯红灯车辆数据；闯红灯数据输出单元，将所述的由全/近景视频数据佐证单元生成的全/近景闯红灯车辆数据输出。
2. 根据权利要求l所述的系统，其特征是，所述的系统包括 多台所述的近景摄像机，每台近景摄像机与闯红灯检测区域的每条车道一一对应的设置，每台近景摄像机对本车道的车辆进行近景视频拍摄；以及视频分配器，将所述的全景视频数据分配到对应的视频数据联合处理装置； 多个所述的视频数据联合处理装置，所述的视频数据联合处理装置与所述的近景摄像机一一对应的设置，接收对应车道的车辆近景视频数据和经所述视频分配器分配的全景视频数据。
3. 根据权利要求2所述的系统，其特征是，所述的近景摄像机包括补光 装置，所述的补光装置对近景视频拍摄进行补光。
4. 根据权利要求1或2所述的系统，其特征是，所述的近景闻红灯车辆检测单元根据所述的近景视频数据进行车牌识别和 近景车辆特征信息提取；所述的全景闯红灯车辆检测单元根据所述的全景视频数据进行被检测车辆 的连续多张全景图片的生成和全景车辆特征信息提取；所述的全/近景视频数据佐证单元将相同拍摄时段的所述的近景车辆特征 信息与全景车辆特征信息进行对应，生成包括被检测车辆的连续的多张全景图 片和对应的车牌数据在内的全/近景闯红灯车辆数据。
5. 根据权利要求4所述的系统，其特征是，所述的近景车辆特征信息包括-车辆颜色信息和车辆轮廓信息；所述的全景车辆特征信息包括车辆位置信息、车辆纹理信息和车辆颜色倍息o
专利摘要本实用新型提供一种基于视频的闯红灯检测系统，所述的系统包括全景摄像机、近景摄像机和视频数据联合处理装置。其中所述视频数据联合处理装置分别与所述的全景摄像机和所述近景摄像机相连接。所述的视频数据联合处理装置包括视频采集单元、信号灯状态检测单元、全景闯红灯车辆检测单元、近景闯红灯车辆检测单元、全/近景视频数据佐证单元、闯红灯数据输出单元。本实用新型通过将车辆闯红灯信息的全景视频和近景视频进行联合处理，提高了闯红灯图像证据的有效性。同时由于通过视频检测信号灯的状态，故不用接入红绿灯信号。
文档编号G08G1/01GK201134165SQ200720173789
公开日2008年10月15日 申请日期2007年10月24日 优先权日2007年10月24日
发明者房颜明, 邓永强 申请人:北京万集科技有限责任公司