本发明涉及计算机视觉领域,特别是涉及一种待检设备的检测系统和检测方法。
背景技术:
目前显示屏出厂前需要检测员人眼确认显示效果与性能,不同人眼在瞳距、视力、色觉等个差异以及周围环境光线的差异,对检测结果可靠性带来很大的影响。显示装置越来越多的应用于人们生活和工作的各个方面,如何高效而准确地对显示屏质量做出检测判断是各厂家急需解决的问题。深度学习和现代电子信息技术的结合,采用计算机代替人类去捕获图像,构建计算机深度学习模型模拟人的判别去理解和识别图像,从而达到分析和提取图像特征的目的,这方面的应用在电子设备检测行业还未见较多的报道。
技术实现要素:
本发明主要解决的技术问题是提供一种待检设备检测系统和检测方法,避免个体以及环境差异对检测结果带来的影响,提高检测结果的可靠性。
为解决上述技术问题,本发明采用的一个技术方案是:
提供一种待检设备检测系统,包括:
图像采集装置,用于捕获包含有待检设备的图像;
图像检测装置,与所述图像采集装置连接,用于从所述图像采集装置接收所述图像并通过存储单元存储的卷积神经网络模型对接收到的图像进行识别以获得感兴趣区域图像,处理单元对感兴趣区域图像进行检测分析后输出结果。
为解决上述技术问题,本发明采用的另一个技术方案是:
提供一种待检设备的检测方法,包括:
设置图像采集装置于待检设备前方的检测区域内;
通过所述图像检测装置捕获包含有待检设备的图像;
传输所述图像采集装置捕获到的图像至图像检测装置;
通过卷积神经网络模型对图像进行识别,得到感兴趣区域图像;
图像检测装置对得到的感兴趣区域图像进行检测分析;及
输出检测结果。
本发明的有益效果是:区别于现有技术的情况,本发明通过图像检测装置存储单元存储的卷积神经网络模型对图像采集装置捕获到的图像进行处理以获得感兴趣区域图像,图像检测装置处理单元对感兴趣区域图像进行检测分析后输出结果,通过上述方式能够避免个体以及环境差异对待检设备检测结果带来的影响,提高待检设备检测结果的可靠性。
附图说明
图1是本发明待检设备图像检测系统结构示意图;
图2是本发明第一实施例显示屏图像检测系统中图像检测装置的结构示意图;
图3是本发明第二实施例显示屏图像检测系统中图像检测装置的结构示意图;
图4是本发明第三实施例显示屏图像检测系统中图像检测装置的结构示意图;
图5是本发明待检设备检测方法的流程示意图。
具体实施方式
下面结合附图和实施例对本发明进行详细的说明。
请参阅图1,是本发明待检设备的检测系统结构示意图。所述待检设备检测系统包括图像采集装置100,用于捕获包含有待检设备的图像;图像检测装置200,与所述图像采集装置100连接,用于从所述图像采集装置100接收所述图像并通过存储单元存储的卷积神经网络模型210对接收到的图像进行识别以获得感兴趣区域图像,处理单元220对感兴趣区域图像进行检测分析后输出结果。
其中,在所述图像检测装置100通过卷积神经网络模型210对接收到的图像进行识别以获得感兴趣区域图像之前包括:对卷积神经网络模型210进行训练。
具体的,对卷积神经网络模型210进行训练包括:捕获包含待检设备的图像样本;对捕获到的图像样本中的感兴趣区域图像进行标记;获取所述感兴趣区域图像若干位置的标记图案与标记坐标,并处理分析后获得卷积核和检测正确率。
具体的,所述待检设备为显示屏,所述感兴趣图像若干位置为所述显示屏的四个顶角位置。
具体的,所述卷积神经网络模型210采用lenet-5模型。
具体的,所述图像采集装置100与所述图像检测装置200通过数据线连接,所述图像检测装置100为电脑。
请参阅图2,是本发明第一实施例显示屏检测系统中图像采集装置的结构示意图。包括支架110,与所述支架110一端相连的固定部120,一摄像头130设置在所述支架110的远离所述固定部120的一端,通过所述固定部120将所述图像采集装置100固定在头上。
本实施例中图像采集装置100可用于捕获普通平面显示图像。
请参阅图3,是本发明第二实施例显示屏检测系统中图像采集装置的结构示意图。包括两平行设置的支架111和112,与所述两支架一端相连的调节部140,与所述调节部140相连的固定部120,两摄像头131和132(在本实施例中设置为两个摄像头,其他实施例中不限制)分别设置在所述两支架111和112的远离所述调节部140的一端,所述调节部140上设置有调节旋钮141,通过所述调节按钮141控制所述两支架111和112相对移动以调节所述摄像头131和132的间距,通过所述固定部120将所述图像采集装置100固定在头上。
本实施例中图像采集装置100可用于捕获裸眼3d显示图像,通过所述采集装置100上的两摄像头131和132捕获左右两不同视角下的图像,经图像检测装置对捕获到的两不同视角下的图像分析处理合成裸眼3d图像。
请参阅图4,是发明第三实施例显示屏检测系统中图像采集装置的结构示意图。所述第三实施例的显示屏检测系统中的图像采集装置100与所述第一实施例及第二实施例中的的区别之处在于:所述图像采集装置100的所述固定部120内设置红外发射器121,所述红外发射器121与跟踪式立体显示器中设置的红外接收器通信,捕获包含有待检设备的图像。
本实施例中图像采集装置100可用于捕获3d显示图像,适用于检测跟踪式立体显示器(内含红外接收器及处理单元,红外接收器与处理单元连接),通过所述图像采集装置100固定部120上的红外发射器121发射红外信号,跟踪式立体显示器内红外接收器接收所发射的红外信号,将红外信号传输至处理单元,处理单元根据所接收信息(如红外发射器与红外接收器的位置角度信息)追踪红外发射器121(图像采集装置100),对所要显示的图像进行适应性调整处理,以针对红外发射器121(图像采集装置100)显示出更好的3d显示效果,以使图像采集装置100捕获包含有待检设备的3d显示图像。
请参阅图5,是发明待检设备检测方法的流程示意图,步骤包括:
步骤s1:设置图像采集装置于待检设备前方的检测区域内。
图像采集人员佩戴本发明图像采集装置100(本方法实施例中采用第二实施例中图像采集装置,其他方法中可采用其他装置实施例中的图像采集装置)站在屏幕前既定的观看区域内,通过调节按钮141调节摄像头131和132的间距以适应瞳距位置,保证摄像头131和132与图像采集人员双眼位置相同,保持观看待检测屏幕。
具体的,所述待检设备为显示屏。
步骤s2:通过所述图像检测装置捕获包含有待检设备的图像。
通过本实施例中图像采集装置100上的两摄像头131和132捕获左右两不同视角下包含有待检测显示屏的图像,经图像检测装置200对捕获到的两不同视角下的图像分析处理合成裸眼3d图像。
所述图像检测装置100捕获包含有待检显示屏的图像包括静态图像(如图片)和/或动态图像(如视频)。
步骤s3:传输所述图像采集装置捕获到的图像至图像检测装置。
通过数据线(本方法中采数据线的连接方式,如通过设置usb接口并通过数据线连接,其他方法中可采用其他连接方式)将图像采集装置100和图像检测装置200连接,将摄像头131和132拍摄到的图像传输至图像检测装置200,如pc(personalcomputer,个人计算机)中(也可为其他图像检测装置,如手机等);
步骤s4:通过卷积神经网络模型对图像进行识别,得到感兴趣区域图像。
在通过卷积神经网络模型210对图像进行识别之前需要对其进行训练,只有经过大量针对性数据训练,模型收敛达到稳定,才能得出最终所需的模型参数,才能应用于识别感兴趣区域图像。在本实施例中采用lenet-5模型(其他实施例中可采用其他卷积神经网络训练模型),网络结构为8层。卷积层conv-n,池化层pool-n,全连接层fc-n,整体结构为input+conv-1+pool-2+conv-3+pool-4+fc-5+fc-6+fc-7+output。
卷积、池化层、过滤器(filter)结构:
对于conv-1,filter采用尺寸为5x5,深度为6,步长为1,不使用全0填充;
对于pool-2,filter采用尺寸为2x2,步长为2,最大池化;
对于conv-3,filter采用尺寸为5x5,深度为12,步长为1,不使用全0填充;
对于pool-4,filter采用尺寸为2x2,步长为2,最大池化。
通过摄像头131和132拍摄默认640*480*3像素的图像(两摄像头拍摄后处理得到的一图像)作为输入训练样本(sample),对每张训练样本rio(regionofinterest,感兴趣区域)图像均手动进行标记,具体的,所述待检设备为显示屏,在本实施例中即针对显示屏区域进行手动标记,提取显示屏区域四个顶点附近10*10像素的标记图案与标记坐标(label),sample与label文件一一对应。
训练时,对n张样本进行训练,保存1次卷积核(kernel),例如,给定输入图像,在输出图像中每一个像素是输入图像中一个小区域中像素的加权平均,其中权值由一个函数定义,这个函数就是卷积核,sample为输入图像,label为目标输出图像,即给定输入n张sample,n张目标输出label,sample与label文件一一对应,已知目标label为sample中四个顶点区域的10*10像素的卷积核,可简单理解卷积核为sample与label之间的函数关系,并打印出此次训练的检测正确率,即实际输出图像与目标输出图像之间的正确占比关系,以此记作1次训练。重复进行m次训练,当检测正确率收敛到一个稳定值后,停止训练,产生最终kernel,卷积神经网络模型训练完成。
再将传输至图像检测装置200的待检测图像样本通过训练的卷积神经网络模型210进行识别,得到感兴趣区域图像,在本实施例中即为得到显示屏区域。
步骤5:图像检测设备对所得到的感兴趣区域图像进行分析处理。
经图像检测装置200中处理单元220对所得到的的对感兴趣区域图像即显示屏进行显示性能分析,如立体分光性能、画面亮度、色彩度等显示性能。
步骤s6:输出检测结果。
根据所得显示性能分析结果结合裸眼3d显示图案(其他实施例还包括普通显示图案,3d显示图案等)显示器评判标准得出该显示屏检测样本的检测结果。
本发明显示屏检测系统中的图像采集装置包括两平行设置的支架,与所述两支架一端相连的调节部,与所述调节部相连的固定部,至少两摄像头分别设置在所述两支架的远离所述调节部的一端,所述调节部上设置有调节旋钮,通过该图像采集装置捕获包含有待检显示屏的图像,再通过图像检测装置存储单元中的卷积神经网络模型对图像采集装置所捕获的图像进行识别,得到感兴趣区域图像,进而通过图像检测装置处理单元对所感兴趣区域图像进行检测分析得出显示屏检测结果,以避免人为检测因个体差异以及环境差异对显示屏检测结果带来的影响,从而提高显示屏检测结果的可靠性。
以上所述仅为本发明的实施方式,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。