一种异物处理方法、装置、电子设备及存储介质与流程

本申请涉及图像处理，特别是涉及一种异物处理方法、装置、电子设备及存储介质。

背景技术：

1、目前，市场上的毫米波检测设备分为两大类：主动设备和被动设备。其中，主动设备主动向对象主动发射毫米波信号，当毫米波信号碰到人体或物品时，会发生反射现象，检测设备接受反射的毫米波信号，从而实现对对象的检测。主动设备具有回波信噪比高、输出的图像质量好、能够获得距离信息等优点，从而能够实现对对象的三维成像；被动设备不发射毫米波信号，仅通过接收自然界存在的毫米波信号实现成像，其设备信噪较差、图像质量低，且只能获得二维图像。故而主动设备的应用范围更加广泛。

2、相关技术中，毫米波检测设备输出毫米波图像之后，需要对毫米波图像进行识别，以确定是否存在异物（例如违禁品或者危险品），例如，利用深度学习算法检测出存在异物的区域。然而毫米波检测设备输出的为对象的三维点云图像，直接基于三维点云识别异物存在标注不方便、深度学习算法输入数据量太大以及运算量大等问题，因此相关技术中先将三维点云转化为二维图像，然后利用深度学习算法对二维图像进行检测，并直接在二维图像中利用矩形框标注出异物位置，例如图1所示。

3、然而采用上述方法，在二维图像中标注出异物位置，异物位置示意效果较差，不利于工作人员直观的获取异物在人体上的位置。

技术实现思路

1、本申请实施例的目的在于提供一种异物处理方法、装置、电子设备及存储介质，以实现提高异物位置的示意效果，便于工作人员直观的获取异物在对象上的位置。具体技术方案如下：

2、第一方面，本申请实施例提供了一种异物处理方法，包括：

3、获取检测对象的二维图像、所述二维图像的深度信息及三维人偶图像；

4、对所述二维图像进行异物识别，得到异物在所述二维图像中的二维位置信息；

5、根据所述深度信息及所述二维位置信息，确定所述异物在所述三维人偶图像中的三维位置信息；

6、按照所述三维位置信息，在所述三维人偶图像中表示出所述异物。

7、第二方面，本申请实施例提供了一种异物处理装置，包括：

8、数据获取模块，用于获取检测对象的二维图像、所述二维图像的深度信息及三维人偶图像；

9、异物识别模块，用于对所述二维图像进行异物识别，得到异物在所述二维图像中的二维位置信息；

10、三维位置确定模块，用于根据所述深度信息及所述二维位置信息，确定所述异物在所述三维人偶图像中的三维位置信息；

11、异物表示模块，用于按照所述三维位置信息，在所述三维人偶图像中表示出所述异物。

12、第三方面，本申请实施例提供了一种电子设备，包括：

13、存储器，用于存放计算机程序；

14、处理器，用于执行存储器上所存放的程序时，实现本申请中任一所述的异物处理方法。

15、第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现本申请中任一所述的异物处理方法。

16、第五方面，本申请实施例提供了本申请实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行本申请中任一所述的异物处理方法。

17、本申请实施例有益效果：

18、本申请实施例提供的异物处理方法、装置、电子设备及存储介质，获取检测对象的二维图像、二维图像的深度信息及三维人偶图像；对二维图像进行异物识别，得到异物在二维图像中的二维位置信息；根据深度信息及二维位置信息，确定异物在三维人偶图像中的三维位置信息；按照三维位置信息，在三维人偶图像中表示出异物。在得到异物在二维图像中的二维位置信息后，利用二维图像的深度信息，将异物映射到三维人偶图像中，得到异物在三维人偶图像中的三维位置信息，并按照三维位置信息在三维人偶图像中表示出异物，实现了在异物与检测对象相对位置的三维展示，提高了异物位置的示意效果，便于工作人员直观的获取异物在检测对象上的位置。

19、当然，实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。

技术特征：

1.一种异物处理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

3.根据权利要求1所述的方法，其特征在于，所述二维图像包括所述检测对象的正面二维图像和/或背面二维图像；所述深度信息包括所述正面二维图像的正面图像深度信息、和/或所述背面二维图像的背面图像深度信息；其中，所述正面二维图像和所述背面二维图像表示所述检测对象的相背两个方向的检测图像；

4.根据权利要求3所述的方法，其特征在于，所述获取检测对象的二维图像、所述二维图像的深度信息及三维人偶图像，包括：

5.根据权利要求3所述的方法，其特征在于，所述根据所述正面图像深度信息、所述背面图像深度信息、所述正面二维位置信息、以及所述背面二维位置信息，确定所述异物在所述三维人偶图像中的三维位置信息，包括：

6.根据权利要求3至5任一所述的方法，其特征在于，

7.根据权利要求6所述的方法，其特征在于，

8.根据权利要求7所述的方法，其特征在于，所述根据所述正面图像深度信息，确定所述第一正面二维位置信息表示的异物区域在多个预设方向上的扩展区域的深度值，包括：

9.根据权利要求8所述的方法，其特征在于，所述根据所述第一正面二维位置信息对应的第一深度值及第二深度值，计算得到所述第一正面二维位置信息表示的异物区域在所述三维人偶图像中的水平轴倾斜角度，包括：

10.根据权利要求9所述的方法，其特征在于，所述根据所述第一正面二维位置信息表示的异物区域在所述正面二维图像中的长、宽以及所述第一正面二维位置信息对应的倾斜角度，计算得到所述第一正面二维位置信息表示的异物区域在所述正面二维图像中对应的厚度，包括：

11.根据权利要求5所述的方法，其特征在于，所述根据所述合并二维位置信息、所述正面图像深度信息、所述背面图像深度信息，确定所述合并二维位置信息表示的异物区域在所述三维人偶图像中三维位置信息，包括：

12.根据权利要求6所述的方法，其特征在于，所述根据第三正面二维位置信息以及所述正面图像深度信息，确定所述第三正面二维位置信息表示的异物区域在所述三维人偶图像中的尺寸信息，包括：

13.根据权利要求5所述的方法，其特征在于，所述将交并比大于预设百分比阈值的第二正面二维位置信息与第二背面二维位置信息进行合并，得到合并二维位置信息，包括：

14.一种异物处理装置，其特征在于，包括：

15.一种电子设备，其特征在于，包括：

16.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-13任一所述的方法。

技术总结
本申请实施例提供了一种异物处理方法、装置、电子设备及存储介质，获取检测对象的二维图像、二维图像的深度信息及三维人偶图像；对二维图像进行异物识别，得到异物在二维图像中的二维位置信息；根据深度信息及二维位置信息，确定异物在三维人偶图像中的三维位置信息；按照三维位置信息，在三维人偶图像中表示出异物。在得到异物在二维图像中的二维位置信息后，利用二维图像的深度信息，将异物映射到三维人偶图像中，得到异物在三维人偶图像中的三维位置信息，并按照三维位置信息在三维人偶图像中表示出异物，实现了在异物与检测对象相对位置的三维展示，提高了异物位置的示意效果，便于工作人员直观的获取异物在检测对象上的位置。

技术研发人员：陶毅,徐光明
受保护的技术使用者：杭州睿影科技有限公司
技术研发日：
技术公布日：2024/1/13