伤情图片自动化审核方法、装置、电子设备及存储介质与流程

文档序号:23161394发布日期:2020-12-04 13:55阅读:124来源:国知局
伤情图片自动化审核方法、装置、电子设备及存储介质与流程

本发明涉及智慧医疗,尤其涉及一种面向车险理赔的伤情图片自动化审核、装置、电子设备及计算机可读存储介质。



背景技术:

在智慧医疗中,人伤理赔是车辆保险中重要的理赔服务。进行该项理赔时,展示伤情图片(人身受伤情况的图片)是用于理赔的重要材料。

传统获取伤情图片的方法是派遣车险人伤理赔员赶往现场或医院拍摄伤情图片。这种方案虽然能够可靠获取符合理赔要求的伤情图片,但需要投入较高的人力成本和交通成本。

现有技术中,车险客户可以通过移动端软件提交伤情图片,交由远程的理赔员人工审核的方案。这种方案虽然节省了派遣理赔员的交通成本,但由于客户(特别是年级较大、受教育程度不高的客户)拍摄的伤情图片不一定满足理赔要求,可能需要多次与客户沟通并请求重新拍摄,一定程度上影响了理赔速度和服务质量。另外,投入人力成本并未显著减少。

当前流行的深度学习方法,可以较好地构建伤情图片自动化审核流程,并取得较好的实用化效果。但存在其他突出问题。一是训练深度学习模型需要大量伤情图片,伤情图片明显属于客户的隐私信息,因而使用客户伤情图片进行模型训练存在较高的信息违规风险。也就是说,基于深度学习的方案虽然效果理想,但很可能因为缺乏合规数据而不可实现;二是是深度学习模型计算复杂,对硬件资源要求较高,目前主要通过将功能部署在远程高性能服务器实现,而直接部署在客户移动端存在困难,这导致深度学习方案的运营成本较高,仍然不能很好地达到减少理赔成本的根本目的。



技术实现要素:

本发明提供一种面向车险理赔的伤情图片自动化审核、装置、电子设备及计算机可读存储介质,其主要目的在于提高一次拍摄符合要求的伤情图片的成功概率,提升客户体验。

为实现上述目的,本发明提供的一种伤情图片自动化审核方法,所述方法包括:

获得拟审核的伤情图片;

审核所述伤情图片的皮肤区域,包括:基于色彩空间阈值分割对伤情图片中皮肤区域进行检测;判断检测到的皮肤区域的面积是否符合面积大小要求;如果检测到的皮肤区域的面积不符合面积大小要求,发送第一不合格指令给客户端,重新获得拟审核的伤情图片,所述第一不合格指令包括光照异常指令;如果检测到的皮肤区域的面积符合面积大小要求,从检测到的皮肤区域分离出伤口区域;

审核所述伤情图片的伤口区域,包括:基于色彩空间阈值分割对伤口区域进行检测;判断分离出的伤口面积是否符合伤口面积要求;如果分离出的伤口面积不符合伤口面积要求,发送第二不合格指令给客户端,重新获得拟审核的伤情图片,所述第二不合格指令包括拍摄距离远;如果分离出的伤口面积符合伤口面积要求,基于模板匹配的方法定位伤情图片中出现的人脸;

审核所述伤情图片的人脸,包括:判断定位的人脸是否符合人脸要求;如果定位的人脸不符合人脸要求,则发送第三不合格指令给客户端,重新获得拟审核的伤情图片,所述第三不合格指令包括调整拍摄角度或调整拍摄距离;如果定位的人脸符合人脸要求,获得伤者证件,对伤者证件进行人脸检测,获得伤者证件中的人脸;

审核伤情图片中的人脸和伤者证件中的人脸的相似度,包括:将证件中的人脸和伤情图片中的人脸进行相似度对比;判断所述相似度对比的对比结果是否符合相似度要求;如果对比结果不符合相似度要求,发送第四不合格指令给客户端,重新获得拟审核的伤情图片,所述第四不合格指令包括传错单证;如果对比结果符合相似度要求,上传伤情图片。

可选地,所述审核所述伤情图片的皮肤区域的步骤包括:

基于色彩空间分析伤情图片的光照;

设定色彩空间中各参数的光照阈值,获得第一判别条件;

判断伤情图片的光照是否满足第一判别条件;

如果伤情图片的光照不满足第一判别条件,发出第一不合格指令,所述第一不合格指令包括光照过暗、光照过曝或不均匀光照;

如果伤情图片的光照满足第一判别条件,基于色彩空间分析伤情图片的光照的均匀性;

设定光照均匀度阈值,获得第二判别条件;

判断伤情图片的光照的均匀性是否满足第二判别条件;

如果伤情图片的光照的均匀性不满足第二判别条件,发出第一不合格指令,所述第一不合格指令包括局部过暗或局部过曝;

如果伤情图片的光照的均匀性满足第二判别条件,基于色彩空间阈值分割伤情图片,获得伤情图片的皮肤区域,获得皮肤区域的面积;

设定皮肤区域面积的阈值,获得第四判别条件;

判断伤情图片的皮肤区域的面积是否满足第四判别条件;

如果伤情图片的皮肤区域的面积不满足第四判别条件,发出第一不合格指令,所述第一不合格指令包括皮肤面积过小和拍摄距离过远;

如果伤情图片的皮肤区域的面积满足第四判别条件,从检测到的皮肤区域分离出伤口区域。

可选地,所述基于色彩空间阈值分割伤情图片,获得伤情图片的皮肤区域的步骤包括:

获得伤情图片的多个色彩空间的数据;

设定皮肤区域对应的多个色彩空间中各参数的阈值,获得第三判别条件;

从伤情图片的多个色彩空间的数据中筛选出满足第三判别条件的多个像素点;

通过形态学闭运算填充所述像素点围成区域的内部空隙,得到一个或多个闭合区域,从而获得皮肤区域。

可选地,所述审核所述伤情图片的伤口区域的步骤包括:

基于色彩空间阈值分割皮肤区域,获得皮肤区域中的伤口区域,获得伤口区域的面积;

设定伤口区域面积的阈值,获得第六判别条件;

判断伤口区域的面积是否满足第六判别条件;

如果伤口区域的面积不满足第六判别条件,发出第二不合格指令,所述第二不合格指令包括伤口面积过小和拍摄距离过远;

如果伤口区域的面积满足第六判别条件,基于模板匹配的方法定位伤情图片中出现的人脸。

可选地,所述基于色彩空间阈值分割皮肤区域,获得皮肤区域中的伤口区域的步骤包括:

获得皮肤区域的多个色彩空间的数据;

设定伤口区域对应的多个色彩空间中各参数的阈值,获得第五判别条件;

从皮肤区域的多个色彩空间的数据中筛选出满足判别条件第五判别条件的多个像素点;

通过形态学闭运算填充所述像素点围成区域的内部空隙,得到一个或多个闭合区域,从而获得伤口区域。

可选地,所述基于模板匹配的方法定位伤情图片中出现的人脸的步骤包括:

将伤情图片的rgb图像转换为灰度图像;

以目前公开的人脸数据集制作平均脸并作为模板,采用模板匹配算法对所述灰度图像进行扫描检测,检测出人脸。

可选地,所述审核所述伤情图片的人脸的步骤包括:

采用非极大值抑制算法消除同一位置检测重叠的、多余的人脸;

若检测无人脸,发出第三不合格指令,所述第三不合格指令包括伤者调整拍摄距离或调整人脸拍摄角度;

若检测到2张及以上人脸,发出第四不合格指令,所述第四不合格指令包括伤者以外的人员暂离拍摄画面;

若检测到1张人脸,获得伤者证件,对伤者证件进行人脸检测,获得伤者证件中的人脸。

为了解决上述问题,本发明还提供一种伤情图片自动化审核装置,所述装置包括:

获得部,获得拟审核的伤情图片;

第一审核部,审核所述伤情图片的皮肤区域,包括:皮肤区域检测模块,基于色彩空间阈值分割对伤情图片中皮肤区域进行检测;第一面积判断模块,判断检测到的皮肤区域的面积是否符合面积大小要求,如果检测到的皮肤区域的面积不符合面积大小要求,发送第一不合格指令给客户端,获得部重新获得拟审核的伤情图片,所述第一不合格指令包括光照异常指令;如果检测到的皮肤区域的面积符合面积大小要求,发送信号给伤口区域获得模块;伤口区域获得模块,从检测到的皮肤区域分离出伤口区域并发送给第二审核部;

第二审核部,审核所述伤情图片的伤口区域,包括:伤口区域检测模块,基于色彩空间阈值分割对第一审核部获得的皮肤区域中的伤口区域进行检测;第二面积判断模块,判断分离出的伤口面积是否符合伤口面积要求,如果分离出的伤口面积不符合伤口面积要求,发送第二不合格指令给客户端,获得部重新获得拟审核的伤情图片,所述第二不合格指令包括拍摄距离远;如果分离出的伤口面积符合伤口面积要求,发送信号给第一人脸获得模块;第一人脸获得模块,基于模板匹配的方法定位伤情图片中出现的人脸并发送给第三审核部和相似度获得部;

第三审核部,审核所述伤情图片的人脸,包括:人脸判断模块,判断定位的人脸是否符合人脸要求,如果定位的人脸不符合人脸要求,则发送第三不合格指令给客户端,获得部重新获得拟审核的伤情图片,所述第三不合格指令包括调整拍摄角度或调整拍摄距离;如果定位的人脸符合人脸要求,发送信号给第二人脸获得模块;第二人脸获得模块,获得伤者证件,对伤者证件进行人脸检测,获得伤者证件中的人脸并发送给相似度获得部;

相似度获得部,将证件中的人脸和伤情图片中的人脸进行相似度对比,判断所述相似度对比的对比结果是否符合相似度要求,如果对比结果不符合相似度要求,发送第四不合格指令给客户端,获得部重新获得拟审核的伤情图片,所述第四不合格指令包括传错单证;如果对比结果符合相似度要求,发送信号给上传部;

上传部,上传符合第一审核部、第二审核部、第三审核部和相似度获得部要求的伤情图片。

为了解决上述问题,本发明还提供一种电子设备,所述电子设备包括:

存储器,存储至少一个指令;及

处理器,执行所述存储器中存储的指令以实现上述所述的伤情图片自动化审核方法。

为了解决上述问题,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一个指令,所述至少一个指令被电子设备中的处理器执行以实现上述所述的伤情图片自动化审核方法。

本发明所述伤情图片自动化审核方法、装置、电子设备及计算机可读存储介质实时引导客户在拍摄伤情图片时调整环境光线、距离、拍摄角度,提高一次拍摄符合要求的伤情图片成功概率,从而提升客户体验,采用的是基于色彩空间阈值分割和模板匹配多种轻量级数字图像处理方法,计算量小,可部署于客户手机,减少部署远程服务器的成本,在用户未按下快门之前就实时提醒用户进行相应调整,从而在保证拍摄出有效的伤情图片的同时提升客户的体验,更为重要的是可以离线自动审核。

附图说明

图1是本发明所述伤情图片自动化审核方法的流程图;

图2是本发明一实施例提供的伤情图片自动化审核装置的模块示意图;

图3是本发明一实施例提供的实现伤情图片自动化审核方法的电子设备的内部结构示意图。

本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。

具体实施方式

应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。

图1是本发明所述伤情图片自动化审核方法的流程图,如图1所示,所述伤情图片自动化审核方法包括:

步骤s1,获得拟审核的伤情图片;

步骤s2,审核所述伤情图片的皮肤区域,包括:基于色彩空间阈值分割对伤情图片中皮肤区域进行检测;判断检测到的皮肤区域的面积是否符合面积大小要求;如果检测到的皮肤区域的面积不符合面积大小要求,发送第一不合格指令给客户端,返回步骤s1,重新获得拟审核的伤情图片,所述第一不合格指令包括光照异常指令;如果检测到的皮肤区域的面积符合面积大小要求,从检测到的皮肤区域分离出伤口区域,执行步骤s3;

步骤s3,审核所述伤情图片的伤口区域,包括:基于色彩空间阈值分割对伤口区域进行检测;判断分离出的伤口面积是否符合伤口面积要求;如果分离出的伤口面积不符合伤口面积要求,发送第二不合格指令给客户端,返回步骤s1,重新获得拟审核的伤情图片,所述第二不合格指令包括拍摄距离远;如果分离出的伤口面积符合伤口面积要求,基于模板匹配的方法定位伤情图片中出现的人脸,执行步骤s4;

步骤s4,审核所述伤情图片的人脸,包括:判断定位的人脸是否符合人脸要求;如果定位的人脸不符合人脸要求,则发送第三不合格指令给客户端,返回步骤s1,重新获得拟审核的伤情图片,所述第三不合格指令包括调整拍摄角度或调整拍摄距离;如果定位的人脸符合人脸要求,获得伤者证件,对伤者证件进行人脸检测,获得伤者证件中的人脸,执行步骤s5;

步骤s5,审核伤情图片中的人脸和伤者证件中的人脸的相似度,包括:将证件中的人脸和伤情图片中的人脸进行相似度对比;判断所述相似度对比的对比结果是否符合相似度要求;如果对比结果不符合相似度要求,发送第四不合格指令给客户端,返回步骤s1,重新获得拟审核的伤情图片,所述第四不合格指令包括传错单证;如果对比结果符合相似度要求,执行步骤s6;

步骤s6,上传符合步骤s2-s5要求的伤情图片。

在一个实施例中,步骤s2中,所述审核所述伤情图片的皮肤区域的步骤包括:

基于色彩空间分析伤情图片的光照;

设定色彩空间中各参数的光照阈值,获得第一判别条件;

判断伤情图片的光照是否满足第一判别条件;

如果伤情图片的光照不满足第一判别条件,发出第一不合格指令,所述第一不合格指令包括光照过暗、光照过曝或不均匀光照;

如果伤情图片的光照满足第一判别条件,基于色彩空间分析伤情图片的光照的均匀性;

设定光照均匀度阈值,获得第二判别条件;

判断伤情图片的光照的均匀性是否满足第二判别条件;

如果伤情图片的光照的均匀性不满足第二判别条件,发出第一不合格指令,所述第一不合格指令包括局部过暗或局部过曝;

如果伤情图片的光照的均匀性满足第二判别条件,基于色彩空间阈值分割伤情图片,获得伤情图片的皮肤区域,获得皮肤区域的面积;

设定皮肤区域面积的阈值,获得第四判别条件;

判断伤情图片的皮肤区域的面积是否满足第四判别条件;

如果伤情图片的皮肤区域的面积不满足第四判别条件,发出第一不合格指令,所述第一不合格指令包括皮肤面积过小和拍摄距离过远;

如果伤情图片的皮肤区域的面积满足第四判别条件,从检测到的皮肤区域分离出伤口区域。

优选地,所述基于色彩空间阈值分割伤情图片,获得伤情图片的皮肤区域的步骤包括:

获得伤情图片的多个色彩空间的数据;

设定皮肤区域对应的多个色彩空间中各参数的阈值,获得第三判别条件;

从伤情图片的多个色彩空间的数据中筛选出满足第三判别条件的多个像素点;

通过形态学闭运算填充所述像素点围成区域的内部空隙,得到一个或多个闭合区域,从而获得皮肤区域。

在一个优选实施例中,步骤s2包括:

步骤s21,将伤情图片从rgb色彩空间转换到hsv色彩空间,获得伤情图片的r通道、g通道、b通道和v通道的均值整体环境光照正常的第一判别条件为:

其中,ηr、ηg、ηb分别为r通道,g通道、b通道的均值上限,如果某通道均值高于上限,说明光照色温存在严重的偏差;ηv1、ηv2为v通道的均值的下限和上限,低于ηv1说明光照过暗,高于ηv2说明光照过亮;当满足第一判别条件时,执行步骤s22,当不满足第一判别条件时,根据r通道、g通道、b通道和v通道的均值发出不同的第一不合格指令,所述第一不合格指令包括光照过暗、光照过曝或不均匀光照。

步骤s22,环境光照均匀性快速分析,将伤情图片的整图均匀切分为n*n的子块,检查所有子块的v通道均值vij(i,j=1,2,3,...,n)是否满足第二判别条件,当满足第二判别条件,执行步骤s23,当不满足第二判别条件,根据所有子块的v通道均值发出不同的第一不合格指令,所述第一不合格指令包括局部过暗或局部过曝,

其中,ηvl是子块与整图相对亮度均值的下限,低于此值说明伤情图片存在局部过暗的问题;ηvh是子块与整图相对亮度均值的上限,高于此值说明伤情图片存在局部过曝的问题。

步骤s23,皮肤区域检测,将伤情图片从rgb色彩空间转换至ycrcb、hsv等色彩空间,对于宽高为w*h的伤情图像,将每个像素点用三种色彩空间表示为pij=(r,g,b,y,cr,cb,h,s,v),筛选出pij满足第三判别条件的像素点,通过形态学闭运算填充所述像素点围成区域的内部空隙,得到一个或多个闭合区域,从而获得皮肤区域,判断所述皮肤区域的像素点是否符合第四判别条件,如果不满足第四判别条件,根据发出第一不合格指令,所述第一不合格指令包括皮肤面积过小和拍摄距离过远,如果满足第四判别条件,执行步骤s3,其中,第三判别条件为:

其中,第四判别条件为:

其中,pij属于皮肤区域内的一个点,各不等式两边的阈值是针对皮肤设定的,n为满足第三判别条件的像素点的个数,若表明皮肤面积过小。

在一个实施例中,步骤s3中,所述审核所述伤情图片的伤口区域的步骤包括:

基于色彩空间阈值分割皮肤区域,获得皮肤区域中的伤口区域,获得伤口区域的面积;

设定伤口区域面积的阈值,获得第六判别条件;

判断伤口区域的面积是否满足第六判别条件;

如果伤口区域的面积不满足第六判别条件,发出第二不合格指令,所述第二不合格指令包括伤口面积过小和拍摄距离过远;

如果伤口区域的面积满足第六判别条件,基于模板匹配的方法定位伤情图片中出现的人脸。

优选地,所述基于色彩空间阈值分割皮肤区域,获得皮肤区域中的伤口区域的步骤包括:

获得皮肤区域的多个色彩空间的数据;

设定伤口区域对应的多个色彩空间中各参数的阈值,获得第五判别条件;

从皮肤区域的多个色彩空间的数据中筛选出满足判别条件第五判别条件的多个像素点;

通过形态学闭运算填充所述像素点围成区域的内部空隙,得到一个或多个闭合区域,从而获得伤口区域。

优选地,所述基于模板匹配的方法定位伤情图片中出现的人脸的步骤包括:

将伤情图片的rgb图像转换为灰度图像;

以目前公开的人脸数据集制作平均脸并作为模板,采用模板匹配算法对所述灰度图像进行扫描检测,检测出人脸。

在一个优选实施例中,步骤s3包括:

步骤s31,将皮肤区域的图像从rgb色彩空间转换至ycrcb、hsv等色彩空间。对于宽高为w*h的伤情图像,将皮肤区域的每个像素点用三种色彩空间表示为p′ij=(r′,g′,b′,y′,c′r,c′b,h′,s′,v′),筛选出p′ij满足第五判别条件的像素点,通过形态学闭运算填充所述像素点围成区域的内部空隙,得到一个或多个闭合区域,从而获得伤口区域,判断所述伤口区域的像素点是否符合第六判别条件,如果不满足第六判别条件,根据发出第二不合格指令,所述第二不合格指令包括伤口面积过小和拍摄距离过远,如果满足第六判别条件,执行步骤s4,其中,第五判别条件为:

其中,第六判别条件为:

其中,p′ij属于伤口区域内的一个点,各不等式两边的阈值是针对伤口设定的,n′为满足第五判别条件的像素点的个数,若表明伤口面积过小。

步骤s32,将伤情图片的rgb图像转换为灰度图像,对于尺寸为w*h的图像,将每一个rgb像素按下述公式转换为灰度像素(i=1,2,3…w,j=1,2,3…,h):

grayij=r'ij*0.299+g'ij*0.587+b'ij*0.114。

步骤s33,以目前公开的人脸数据集制作“平均脸”并作为模板,采用模板匹配算法对所述灰度图像进行扫描检测,检测出人脸。

在一个实施例中,步骤s4中,所述审核所述伤情图片的人脸的步骤包括:

采用非极大值抑制算法(nonmaximumsuppression)消除同一位置检测重叠的、多余的人脸;

若检测无人脸,发出第三不合格指令,所述第三不合格指令包括伤者调整拍摄距离或调整人脸拍摄角度;

若检测到2张及以上人脸,发出第四不合格指令,所述第四不合格指令包括伤者以外的人员暂离拍摄画面;

若检测到1张人脸,获得伤者证件,对伤者证件进行人脸检测,获得伤者证件中的人脸。

优选地,所述伤者证件为身份证、驾驶证等格式固定(有固定的模板)的证件,进一步,优选地,从身份证截取第二人脸子块,由于身份证版式固定而提取其中头像较为简单,可替换为其他更为简便的方法,例如,因为身份证的头像位置固定,根据相对位置截取头像。

在一个优选实施例中,所述获得伤者证件中的人脸的步骤包括:

将伤者证件的rgb图像转二值化图像;

使用均值滤波器消除部分噪声;

使用图像学的“闭运算”将伤者证件图像的文字和头像填充为方块;

使用伤者证件的模板,以模板匹配算法定位到伤者证件在图像中的位置;

因为头像在伤者证件的相对位置是固定的,根据相对位置截取头像。

在一个实施例中,步骤s5中,所述审核伤情图片中的人脸和伤者证件中的人脸的相似度的步骤包括:

人脸提取,根据检测到的1张人脸相对整图的位置,截取其中的1张人脸作为第一人脸子块;从身份证截取第二人脸子块;

将第一人脸子块和第二人脸子块统一缩放,并分别提取lbp特征(局部二值模式,localbinarypatterns);

采用相似度方法根据提取的第一人脸子块和第二人脸子块的lbp特征进行人脸特征匹配获得第一人脸子块和第二人脸子块的相似度;

判断所述相似度是否符合相似度要求;

如果所述相似度不符合相似度要求,发送第四不合格指令给客户端,重新获得拟审核的伤情图片,所述第四不合格指令包括传错单证(例如客户端误上传自己的身份证而不是伤者的身份证,提示客户核查证件是否属于伤者);

如果所述相似度符合相似度要求,上传伤情图片。

优选地,人脸不同位置的特征区分程度不一样,例如眼部、鼻部位置的特征重要性大于人脸边缘靠近背景位置的特征,根据特征重要性对人脸的不同位置赋予不同的权重,特征重要性越大,权值越大,进一步,优选地,设计固定的权重调节向量w,区分人脸不同位置的权重。

优选地,基于余弦相似度根据提取的第一人脸子块和第二人脸子块的lbp特征进行人脸特征匹配获得第一人脸子块和第二人脸子块的相似度

其中,fsource为从伤情图像中提取的人脸lbp特征向量,ftarget为从身份证图像中提取的人脸lbp特征向量,⊙是向量同位置元素相乘操作,||||是求向量模长操作,s为第一人脸子块和第二人脸子块的相似度,0≤s≤1,s越大,表明两lbp特征越相近,可用作对人脸相似度的表征。

若s≥smin,即s高于阈值smin,则认为人脸匹配,执行步骤s6;否则发出第四不合格指令。

在本发明所述伤情图片自动化审核方法中,皮肤区域检测(从伤情图片中分离出皮肤区域)。此步骤目的是减少伤口区域检测的误检测概率(伤口只存在于皮肤上)。伤者的皮肤检测不通过是因为光照异常(过暗,过曝,或不均匀光照导致检测出来的皮肤面积过小),相应地,提示客户调整拍摄环境光线情况;伤口区域检测:从检出的皮肤区域分离出伤口区域,此步骤目的是核实图片中存在受伤的部位,在前述步骤通过的前提下,伤者的皮肤检测不通过是因为镜头与伤者的距离过远,导致检测出来的伤口面积过小,相应地,提示客户调整拍摄距离;人脸检测:定位图像中出现的人脸,在前述步骤通过的前提下,伤者的人脸检测不通过是因为镜头没有拍摄到人脸或人脸未朝向镜头,相应地,提示客户调整拍摄距离或调整拍摄角度,可行的技术方案包括基于模板匹配的人脸检测方法,由于前两个步骤为简化本步骤算法创造了条件,可使用模板匹配算法实现快速人脸检测;人脸相似度比对:将证件(一般为身份证)图片中的人脸和伤情图片中的人脸进行相似度比对,此步骤的目的是核实伤者的身份,抵御骗保等欺诈情况。

本发明所述伤情图片自动化审核方法步骤s2-s5总体计算量较小,所以对设备性能要求不高,移动端cpu可在数秒以内完成处理所需要的计算,满足“离线型”的设计要求,在实现伤情图片全自动化审核的同时,减少高性能服务器的部署成本,进一步达到减少伤情图片审核的根本目的。

另外,对于发布时间较新、性能较强的移动端,本发明所述伤情图片自动化审核方法可实现为在用户未按下快门之前就实时提醒用户进行相应调整,从而在保证拍摄出有效的伤情图片的同时提升客户的体验。

此外,本发明所述伤情图片自动化审核方法可不直接使用伤情图片,例如使用已公开论文推荐的参数完成皮肤检测模型的设计,使用已公开的人脸检测数据集完成人脸检测模型的设计等,从而规避隐私数据的使用问题。

图2是本发明所述伤情图片自动化审核装置装置的构成框图,如图2所示,所述伤情图片自动化审核装置装置100可以安装于电子设备中。根据实现的功能,所述数据稽核装置可以包括获得部110、第一审核部120、第二审核部130、第三审核部140、相似度获得部150和上传部160,第一审核部120包括皮肤区域检测模块121、第一面积判断模块122和伤口区域获得模块123,第二审核部130包括伤口区域检测模块131、第二面积判断模块132和第一人脸获得模块133,第三审核部140包括人脸判断模块141和第二人脸获得模块142。本发所述部/模块是指一种能够被电子设备处理器所执行,并且能够完成固定功能的一系列计算机程序段,其存储在电子设备的存储器中。

在本实施例中,关于各部/模块的功能如下:

获得部110,获得拟审核的伤情图片;

第一审核部120,审核所述伤情图片的皮肤区域,包括:皮肤区域检测模块121,基于色彩空间阈值分割对伤情图片中皮肤区域进行检测;第一面积判断模块122,判断检测到的皮肤区域的面积是否符合面积大小要求,如果检测到的皮肤区域的面积不符合面积大小要求,发送第一不合格指令给客户端,获得部110重新获得拟审核的伤情图片,所述第一不合格指令包括光照异常指令;如果检测到的皮肤区域的面积符合面积大小要求,发送信号给伤口区域获得模块123;伤口区域获得模块123,从检测到的皮肤区域分离出伤口区域并发送给第二审核部130;

第二审核部130,审核所述伤情图片的伤口区域,包括:伤口区域检测模块131,基于色彩空间阈值分割对第一审核部120获得的皮肤区域中的伤口区域进行检测;第二面积判断模块132,判断分离出的伤口面积是否符合伤口面积要求,如果分离出的伤口面积不符合伤口面积要求,发送第二不合格指令给客户端,获得部110重新获得拟审核的伤情图片,所述第二不合格指令包括拍摄距离远;如果分离出的伤口面积符合伤口面积要求,发送信号给第一人脸获得模块133;第一人脸获得模块133,基于模板匹配的方法定位伤情图片中出现的人脸并发送给第三审核部140和相似度获得部150;

第三审核部140,审核所述伤情图片的人脸,包括:人脸判断模块141,判断定位的人脸是否符合人脸要求,如果定位的人脸不符合人脸要求,则发送第三不合格指令给客户端,获得部110重新获得拟审核的伤情图片,所述第三不合格指令包括调整拍摄角度或调整拍摄距离;如果定位的人脸符合人脸要求,发送信号给第二人脸获得模块142;第二人脸获得模块142,获得伤者证件,对伤者证件进行人脸检测,获得伤者证件中的人脸并发送给相似度获得部150;

相似度获得部150,将证件中的人脸和伤情图片中的人脸进行相似度对比,判断所述相似度对比的对比结果是否符合相似度要求,如果对比结果不符合相似度要求,发送第四不合格指令给客户端,获得部110重新获得拟审核的伤情图片,所述第四不合格指令包括传错单证;如果对比结果符合相似度要求,发送信号给上传部160;

上传部160,上传符合第一审核部120、第二审核部130、第三审核部140和相似度获得部150要求的伤情图片。

在一个实施例中,上述皮肤区域检测模块121包括:

光照获得单元,基于色彩空间分析伤情图片的光照;

第一判别条件设定单元,设定色彩空间中各参数的光照阈值,获得第一判别条件;

光照判别单元,判断伤情图片的光照是否满足第一判别条件;如果伤情图片的光照不满足第一判别条件,发出第一不合格指令,所述第一不合格指令包括光照过暗、光照过曝或不均匀光照;如果伤情图片的光照满足第一判别条件,发送信号给均匀度获得单元;

均匀度获得单元,基于色彩空间分析伤情图片的光照的均匀性;

第二判别条件设定单元,设定光照均匀度阈值,获得第二判别条件;

均匀度判别单元,判断伤情图片的光照的均匀性是否满足第二判别条件;如果伤情图片的光照的均匀性不满足第二判别条件,发出第一不合格指令,所述第一不合格指令包括局部过暗或局部过曝;如果伤情图片的光照的均匀性满足第二判别条件,发送信号给皮肤区域获得单元;

皮肤区域获得单元,基于色彩空间阈值分割伤情图片,获得伤情图片的皮肤区域及皮肤区域的面积。

优选地,皮肤区域获得单元包括:

色彩空间转换子单元,获得伤情图片的多个色彩空间的数据;

第三判别条件获得子单元,设定皮肤区域对应的多个色彩空间中各参数的阈值,获得第三判别条件;

筛选子单元,从伤情图片的多个色彩空间的数据中筛选出满足第三判别条件的多个像素点;

填充单元,通过形态学闭运算填充所述像素点围成区域的内部空隙,得到一个或多个闭合区域,从而获得皮肤区域。

伤口区域检测模块131的实现方式和上述皮肤区域检测模块121的实现方式类似,由于皮肤区域检测模块121已经对伤情图片的光照和均匀度进行了检测,因此伤口区域检测模块131仅仅需要检测伤口区域的面积。

在一个实施例中,上述第一人脸获得模块133包括:

灰度转化单元,将伤情图片的rgb图像转换为灰度图像;

模板匹配单元,以目前公开的人脸数据集制作平均脸并作为模板,采用模板匹配算法对所述灰度图像进行扫描检测,检测出人脸。

在一个实施例中,上述人脸判断模块141包括:

消除单元,采用非极大值抑制算法消除同一位置检测重叠的、多余的人脸;

人脸计数单元,对消除单元处理后的伤情图片中的人脸进行计数,若检测无人脸,发出第三不合格指令,所述第三不合格指令包括伤者调整拍摄距离或调整人脸拍摄角度;若检测到2张及以上人脸,发出第四不合格指令,所述第四不合格指令包括伤者以外的人员暂离拍摄画面;若检测到1张人脸,发送信号给第二人脸获得模块142。

在一个实施例中,相似度获得部150包括:

人脸提取单元,根据检测到的1张人脸相对整图的位置,截取其中的1张人脸作为第一人脸子块;从身份证截取第二人脸子块;

特征提取单元,将第一人脸子块和第二人脸子块统一缩放,并分别提取lbp特征;

相似度匹配单元,采用相似度方法根据提取的第一人脸子块和第二人脸子块的lbp特征进行人脸特征匹配获得第一人脸子块和第二人脸子块的相似度;

相似度判别单元,判断所述相似度是否符合相似度要求;如果所述相似度不符合相似度要求,发送第四不合格指令给客户端,重新获得拟审核的伤情图片,所述第四不合格指令包括传错单证;如果所述相似度符合相似度要求,发送信号给上传部160。

本发明所述伤情图片自动化审核装置能够有效降低伤情图片的审核成本,提高理赔效率,并提升客户体验,基于多种轻量级数字图像处理方法和机器学习方法,可以实现离线型伤情图片审核。

如图3所示,是本发明实现伤情图片自动化审核方法的电子设备的结构示意图。

所述电子设备1可以包括处理器10、存储器11和总线,还可以包括存储在所述存储器11中并可在所述处理器10上运行的计算机程序,如伤情图片自动化审核程序12。

其中,所述存储器11至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、移动硬盘、多媒体卡、卡型存储器(例如:sd或dx存储器等)、磁性存储器、磁盘、光盘等。所述存储器11在一些实施例中可以是电子设备1的内部存储单元,例如该电子设备1的移动硬盘。所述存储器11在另一些实施例中也可以是电子设备1的外部存储设备,例如电子设备1上配备的插接式移动硬盘、智能存储卡(smartmediacard,smc)、安全数字(securedigital,sd)卡、闪存卡(flashcard)等。进一步地,所述存储器11还可以既包括电子设备1的内部存储单元也包括外部存储设备。所述存储器11不仅可以用于存储安装于电子设备1的应用软件及各类数据,例如伤情图片自动化审核程序的代码等,还可以用于暂时地存储已经输出或者将要输出的数据。

所述处理器10在一些实施例中可以由集成电路组成,例如可以由单个封装的集成电路所组成,也可以是由多个相同功能或不同功能封装的集成电路所组成,包括一个或者多个中央处理器(centralprocessingunit,cpu)、微处理器、数字处理芯片、图形处理器及各种控制芯片的组合等。所述处理器10是所述电子设备的控制核心(controlunit),利用各种接口和线路连接整个电子设备的各个部件,通过运行或执行存储在所述存储器11内的程序或者模块(例如伤情图片自动化审核程序等),以及调用存储在所述存储器11内的数据,以执行电子设备1的各种功能和处理数据。

所述总线可以是外设部件互连标准(peripheralcomponentinterconnect,简称pci)总线或扩展工业标准结构(extendedindustrystandardarchitecture,简称eisa)总线等。该总线可以分为地址总线、数据总线、控制总线等。所述总线被设置为实现所述存储器11以及至少一个处理器10等之间的连接通信。

图3仅示出了具有部件的电子设备,本领域技术人员可以理解的是,图3示出的结构并不构成对所述电子设备1的限定,可以包括比图示更少或者更多的部件,或者组合某些部件,或者不同的部件布置。

例如,尽管未示出,所述电子设备1还可以包括给各个部件供电的电源(比如电池),优选地,电源可以通过电源管理装置与所述至少一个处理器10逻辑相连,从而通过电源管理装置实现充电管理、放电管理、以及功耗管理等功能。电源还可以包括一个或一个以上的直流或交流电源、再充电装置、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。所述电子设备1还可以包括多种传感器、蓝牙模块、wi-fi模块等,在此不再赘述。

进一步地,所述电子设备1还可以包括网络接口,可选地,所述网络接口可以包括有线接口和/或无线接口(如wi-fi接口、蓝牙接口等),通常用于在该电子设备1与其他电子设备之间建立通信连接。

可选地,该电子设备1还可以包括用户接口,用户接口可以是显示器(display)、输入单元(比如键盘(keyboard)),可选地,用户接口还可以是标准的有线接口、无线接口。可选地,在一些实施例中,显示器可以是led显示器、液晶显示器、触控式液晶显示器以及oled(organiclight-emittingdiode,有机发光二极管)触摸器等。其中,显示器也可以适当的称为显示屏或显示单元,用于显示在电子设备1中处理的信息以及用于显示可视化的用户界面。

应该了解,所述实施例仅为说明之用,在专利申请范围上并不受此结构的限制。

所述电子设备1中的所述存储器11存储的伤情图片自动化审核问程序12是多个指令的组合,在所述处理器10中运行时,可以实现:

获得拟审核的伤情图片;

审核所述伤情图片的皮肤区域,包括:基于色彩空间阈值分割对伤情图片中皮肤区域进行检测;判断检测到的皮肤区域的面积是否符合面积大小要求;如果检测到的皮肤区域的面积不符合面积大小要求,发送第一不合格指令给客户端,重新获得拟审核的伤情图片,所述第一不合格指令包括光照异常指令;如果检测到的皮肤区域的面积符合面积大小要求,从检测到的皮肤区域分离出伤口区域;

审核所述伤情图片的伤口区域,包括:基于色彩空间阈值分割对伤口区域进行检测;判断分离出的伤口面积是否符合伤口面积要求;如果分离出的伤口面积不符合伤口面积要求,发送第二不合格指令给客户端,重新获得拟审核的伤情图片,所述第二不合格指令包括拍摄距离远;如果分离出的伤口面积符合伤口面积要求,基于模板匹配的方法定位伤情图片中出现的人脸;

审核所述伤情图片的人脸,包括:判断定位的人脸是否符合人脸要求;如果定位的人脸不符合人脸要求,则发送第三不合格指令给客户端,重新获得拟审核的伤情图片,所述第三不合格指令包括调整拍摄角度或调整拍摄距离;如果定位的人脸符合人脸要求,获得伤者证件,对伤者证件进行人脸检测,获得伤者证件中的人脸;

审核伤情图片中的人脸和伤者证件中的人脸的相似度,包括:将证件中的人脸和伤情图片中的人脸进行相似度对比;判断所述相似度对比的对比结果是否符合相似度要求;如果对比结果不符合相似度要求,发送第四不合格指令给客户端,重新获得拟审核的伤情图片,所述第四不合格指令包括传错单证;如果对比结果符合相似度要求,上传伤情图片。

具体地,所述处理器10对上述指令的具体实现方法可参考图1对应实施例中相关步骤的描述,在此不赘述。

进一步地,所述电子设备1集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、u盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(rom,read-onlymemory)。

本发明所述面向车险理赔的伤情图片自动化审核、装置、电子设备及计算机可读存储介质基于多种轻量级数字图像处理方法和机器学习方法,可以构建离线型伤情图片审核方案,伤情图片全自动化审核,节省人伤理赔的人力成本和交通成本等;实时引导客户在拍摄伤情图片时调整环境光线、距离、拍摄角度,提高一次拍摄符合要求的伤情图片成功概率,从而提升客户体验;计算量小,可部署于客户手机,减少部署远程服务器的成本;仅在算法研发时使用到极少量客户的伤情图片,尽可能保护用户隐私,满足数据使用的合规要求。

在本发明所提供的几个实施例中,应该理解到,所揭露的设备,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。

所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。

对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。

因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附关联图标记视为限制所涉及的权利要求。

在本发明所提供的几个实施例中,应该理解到,所揭露的设备,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。

所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。

对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。

因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附关联图标记视为限制所涉及的权利要求。

此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。系统权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第二等词语用来表示名称,而并不表示任何特定的顺序。

最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1