技术特征：
1.一种人脸异常行为检测方法，其特征在于，包括：在进行在线考试过程中，采集考生的人脸图像，得到待标记的当前帧图像，并获取所述考生预先上传的正常的模板图像；分别对所述当前帧图像和所述模板图像进行视觉区域的提取，得到预设数量个所述当前帧图像的视觉区域，和预设数量个所述模板图像的视觉区域，每一个所述视觉区域用于表征图像中人脸的一个关键特征点；对于所提取到的所述当前帧图像和所述模板图像的每一个所述视觉区域，利用生物启发变换模型对所述视觉区域进行处理，得到与所述视觉区域对应的特征图，由所述特征图得到对应的特征向量；对于所述当前帧图像的每一个特征向量，分别计算本特征向量与所述模板图像的各个特征向量的pearson相关性，得到预设数量个相关性计算结果，若存在大于第一预设值的所述相关性计算结果，则将与本特征向量对应的视觉区域标记为命中区域；若所述当前帧图像的命中区域的数量达到第二预设值，则将所述当前帧图像标记为正常，否则，将所述当前帧图像标记为异常。2.根据权利要求1所述的方法，其特征在于，提取图像的所述视觉区域，包括：采用sift算法提取所述图像中的特征点；对提取到的特征点进行kmeans聚类，得到n个聚类中心；对于每一个所述聚类中心，获取所述图像中的以所述聚类中心为中心的预设尺寸的图像，得到与所述图像的所述聚类中心对应的视觉区域。3.根据权利要求2所述的方法，其特征在于，利用生物启发变换模型对所述视觉区域进行处理，包括：利用生物启发变换模型中的gabor滤波器、方向边缘检测器、局部空间频率检测器、整形处理单元relu和池化单元依次对所述视觉区域进行处理，得到与所述视觉区域对应的特征图。4.根据权利要求1所述的方法，其特征在于，在分别对所述当前帧图像和所述模板图像进行视觉区域的提取之前，该方法还包括：获取所述当前帧图像之前的被标记为正常的前连续帧图像，由所述当前帧图像和所述前连续帧图像构成输入图像组；利用协同显著性检测模型对所述输入图像组进行处理，得到协同显著图，所述协同显著图用于表征在所述输入图像组的各帧图像中重复出现的显著性目标；基于所述协同显著图得到所述当前帧图像与所述前连续帧图像各自的向量，基于所述向量进行pearson相关性计算，得到第一相关性计算结果；在所述第一相关性计算结果小于第三预设值的情况下，输出用于表征当前人脸行为异常的标识。5.根据权利要求4所述的方法，其特征在于，所述利用协同显著性检测模型对所述输入图像组进行处理，得到协同显著图，包括：统一所述输入图像组中的各帧图像的尺寸；利用协同显著性检测模型分别对统一尺寸的各帧图像进行处理，得到各帧图像各自的图内协同显著图；
对统一尺寸后的各帧图像进行拼接处理，利用协同显著性检测模型对拼接处理后的图像进行处理，得到图间协同显著图；对于每一帧图像，利用本帧图像的所述图内协同显著图与所述图间协同显著图中的与所述本帧图像对应的区域进行图像融合；将融合后的图像作为协同显著图。6.根据权利要求5所述的方法，其特征在于，所述利用协同显著性检测模型对拼接处理后的图像进行处理，得到图间协同显著图，包括：利用协同显著性检测模型对拼接处理后的图像进行kmeans聚类分析，得到图间聚类结果，所述图间聚类结果包括k个图间聚类及各自的图间聚类中心；基于所述图间聚类结果计算得到各个所述图间聚类的注意力索引线索，所述图间聚类的注意力索引线索包括对比度线索、中心偏移度线索和重复度线索；对于每个所述图间聚类，对所述图间聚类的注意力索引线索进行高斯归一化，将归一化的所述图间聚类的各个注意力索引线索的乘积作为所述图间聚类的显著性线索权值，利用概率框架软分配的方式将所述图间聚类的显著性线索权值分配给各帧图像中的属于所述图间聚类的像素点，以生成图间协同显著图。7.根据权利要求5所述的方法，其特征在于，所述利用协同显著性检测模型分别对统一尺寸的各帧图像进行处理，得到各帧图像各自的图内协同显著图，包括：利用协同显著性检测模型分别对统一尺寸的每一帧图像，执行下述步骤：对本帧图像进行kmean聚类，得到图内聚类结果，所述图内聚类结果包括k个图内聚类及各自的图内聚类中心；对于每一个所述图内聚类，基于所述图内聚类结果计算得到本类的注意力索引线索，所述注意力索引线索包括对比度线索、中心偏移度线索；对本类的注意力索引线索进行高斯归一化，将归一化的本类的各个注意力索引线索的乘积作为本类的显著性线索权值；利用概率框架软分配的方式将本类的显著性线索权值分配给所述本帧图像中的属于本类的像素点，以生成本帧图像的图内协同显著图。8.一种人脸异常行为检测装置，其特征在于，包括：输入图像获取单元，用于在进行在线考试过程中，采集考生的人脸图像，得到待标记的当前帧图像，并获取所述考生预先上传的正常的模板图像；视觉区域提取单元，用于分别对所述当前帧图像和所述模板图像进行视觉区域的提取，得到预设数量个所述当前帧图像的视觉区域，和预设数量个所述模板图像的视觉区域，每一个所述视觉区域用于表征图像中人脸的一个关键特征点；生物启发变换单元，用于对于所提取到的所述当前帧图像和所述模板图像的每一个所述视觉区域，利用生物启发变换模型对所述视觉区域进行处理，得到与所述视觉区域对应的特征图，由所述特征图得到对应的特征向量；命中区域标记单元，用于对于所述当前帧图像的每一个特征向量，分别计算本特征向量与所述模板图像的各个特征向量的pearson相关性，得到预设数量个相关性计算结果，若存在大于第一预设值的所述相关性计算结果，则将与本特征向量对应的视觉区域标记为命中区域；
当前帧图像标记单元，用于判断所述当前帧图像的命中区域的数量达到第二预设值，若是，则将所述当前帧图像标记为正常，否则，将所述当前帧图像标记为异常。9.一种人脸异常行为检测设备，其特征在于，包括：存储器和处理器；所述存储器，用于存储程序；所述处理器，用于执行所述程序，实现如权利要求1～7中任一项所述的人脸异常行为检测方法的各个步骤。10.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1～7中任一项所述的人脸异常行为检测方法的各个步骤。
技术总结
本申请公开了一种人脸异常行为检测方法、装置、设备及存储介质，通过对提取到的视觉区域进行生物启发变换，得到不变属性特征图，从而得到具备旋转、缩放等不变性的特征向量，通过依次将当前帧图像的每个特征向量与模板图像的所有特征向量进行Pearson相关性计算，存在满足阈值的相关性计算结果则标记一个命中区域，最后统计命中区域的数量，用命中区域的数量表征当前帧图像和模板图像间的相关性，当命中区域的数量超过预设值时，将当前帧图像标记为正常。由于不同人脸图像的特征图是不同的，可以实现对本人脸的判断，且不会因为图像被翻转或缩放将当前帧图像误判为异常，应用本方案可以得到较为正确的考生人脸检测结果。方案可以得到较为正确的考生人脸检测结果。方案可以得到较为正确的考生人脸检测结果。
技术研发人员：夏旭梅
受保护的技术使用者：中国农业银行股份有限公司
技术研发日：2022.11.07
技术公布日：2023/3/28