基于机器视觉的测试方法、装置及电子设备和存储介质与流程

1.本技术涉及机器视觉技术领域，更具体地说，涉及一种基于机器视觉的测试方法、装置及一种电子设备和一种计算机可读存储介质。


背景技术：

2.随着人工智能在测试领域的应用和发展，利用机器视觉辅助对设备功能性的测试越来越多。在相关技术中，利用机器视觉对设备进行测试时，只能进行单个设备的测试，若获取的图像包含多个设备，对于识别到的目标对象，无法确定其属于的具体设备。
3.因此，如何利用机器视觉实现多台设备互不干扰的并行测试是本领域技术人员需要解决的是技术问题。
4.申请内容
5.本技术的目的在于提供一种基于机器视觉的测试方法、装置及一种电子设备和一种计算机可读存储介质，利用机器视觉实现了多台设备互不干扰的并行测试。
6.为实现上述目的，本技术提供了一种基于机器视觉的测试方法，包括：
7.获取包含目标设备的测试图像，并在所述测试图像中确定预设标识的位置；
8.根据每个所述预设标识的位置对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标设备；
9.确定待测试目标设备，通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试。
10.其中，所述根据每个所述预设标识的位置对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标设备，包括：
11.根据每个所述预设标识的位置，在所述测试图像中建立每个所述标识对应的区域分割线；其中，所述区域分割线经过对应的预设标识的位置；
12.利用所有所述预设标识对应的区域分割线对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标待目标设备；
13.相应的，所述通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试，包括：
14.通过建立的区域分割线确定每个区域在所述测试图像中的坐标范围；
15.在所述测试图像中检测目标对象，并确定所述目标对象的位置所属的坐标范围，以确定所述目标对象对应的区域；
16.根据在所述待测试目标设备对应的区域内检测到的目标对象，实现对所述待测试目标设备的测试。
17.其中，所述根据每个所述预设标识的位置，在所述测试图像中建立每个所述预设标识对应的区域分割线，包括：
18.确定对应区域中所述目标设备在所述测试图像的排列方向；其中，所述排列方向包括水平方向和竖直方向；
19.在所述测试图像中建立每个所述预设标识对应的区域分割线；其中，所述区域分割线的方向为所述排列方向的垂直方向。
20.其中，所述标识包括条形码。
21.其中，所述根据每个所述预设标识的位置，在所述测试图像中建立每个所述预设标识对应的区域分割线，包括：
22.通过读取每个所述条形码的信息确定每个所述条形码对应的目标方向；
23.在所述测试图像中以每个所述条形码对应的目标方向建立每个所述条形码对应的区域分割线。
24.其中，所述通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试，包括：
25.利用神经网络在所述待测试目标设备对应的区域内检测目标对象，以实现对所述目标设备的测试。
26.其中，所述通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试，包括：
27.在所述测试图像中检测目标对象，并确定所述待测试目标设备的所述目标对象的标准数量；
28.通过比较在所述待测试目标设备对应的区域内检测到的所述目标对象的数量与所述标准数量得到所述待测试目标设备的测试结果。
29.为实现上述目的，本技术提供了一种基于机器视觉的测试装置，包括：
30.确定模块，用于获取包含目标设备的测试图像，并在所述测试图像中确定预设标识的位置；
31.划分模块，用于根据每个所述预设标识的位置对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标设备；
32.测试模块，用于确定待测试目标设备，通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试。
33.为实现上述目的，本技术提供了一种电子设备，包括：
34.存储器，用于存储计算机程序；
35.处理器，用于执行所述计算机程序时实现如上述基于机器视觉的测试方法的步骤。
36.为实现上述目的，本技术提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述基于机器视觉的测试方法的步骤。
37.通过以上方案可知，本技术提供的一种基于机器视觉的测试方法，包括：获取包含目标设备的测试图像，并在所述测试图像中确定预设标识的位置；根据每个所述预设标识的位置对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标设备；确定待测试目标设备，通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试。
38.本技术提供的基于机器视觉的测试方法，在测试台上使用预设标识对目标设备的区域进行标记，程序根据识别到的预设标识的位置对测试图像进行分割，得到每个目标设
备对应的区域。在每个区域内进行目标对象的检测，可以得到该区域对应的目标设备的测试结果。由此可见，本技术提供的基于机器视觉的测试方法，在测试图像中包括多个目标设备时，实现了多台目标设备互不干扰的并行测试，提高了测试效率和准确性。本技术还公开了一种基于机器视觉的测试装置及一种电子设备和一种计算机可读存储介质，同样能实现上述技术效果。
39.应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本技术。
附图说明
40.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。附图是用来提供对本公开的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本公开，但并不构成对本公开的限制。在附图中：
41.图1为根据一示例性实施例示出的一种基于机器视觉的测试方法的流程图；
42.图2为根据一示例性实施例示出的另一种基于机器视觉的测试方法的流程图；
43.图3为根据一示例性实施例示出的一种测试图像的示意图；
44.图4为根据一示例性实施例示出的又一种基于机器视觉的测试方法的流程图；
45.图5为根据一示例性实施例示出的一种基于机器视觉的测试装置的结构图；
46.图6为根据一示例性实施例示出的一种电子设备的结构图。
具体实施方式
47.下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本技术保护的范围。另外，在本技术实施例中，“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
48.本技术实施例公开了一种基于机器视觉的测试方法，利用机器视觉实现了多台设备互不干扰的并行测试。
49.参见图1，根据一示例性实施例示出的一种基于机器视觉的测试方法的流程图，如图1所示，包括：
50.s101：获取包含目标设备的测试图像，并在所述测试图像中确定预设标识的位置；
51.本实施例的实现前提为测试人员将目标设备摆放在以预设标识进行标记的测试台固定工位上，并将电源和网线插到对应的接口上。上述预设标识用于区分各目标设备的位置，例如条形码，可以包括一维码、例如qr(quick response)码的二维码等，当然也可以为其他形式的预设标识，在此不进行具体限定。
52.在具体实施中，首先获取包含目标设备的测试图像，可以利用图像采集装置进行拍摄，也可以利用视频采集装置拍摄视频，并在该视频中截取视频帧以得到测试图像，在此
不进行具体限定。其次，识别测试图像中的预设标识，确定每个预设标识在测试图像中的位置，即坐标信息。
53.s102：根据每个所述预设标识的位置对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标设备；
54.可以理解的是，由于该预设标识为测试人员预先设置的用于划分各目标设备的位置的标识，因此，基于各预设标识的坐标信息可以将整个测试图像划分为不同的区域，即确定每个区域的坐标范围，每个区域中仅包含对应的目标设备。
55.作为一种可行的实施方式，本步骤可以包括：根据每个所述预设标识的位置，在所述测试图像中建立每个所述标识对应的区域分割线；其中，所述区域分割线经过对应的预设标识的位置；利用所有所述预设标识对应的区域分割线对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标待目标设备。在具体实施中，在测试图像中建立经过预设标识位置的区域分割线，每个预设标识对应一条区域分割线。利用建立的区域分割线可以将测试图像划分为不同的区域，即利用区域分割线和测试图像的边界线确定每个区域的坐标范围。
56.s103：确定待测试目标设备，通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试。
57.本步骤的目的在于对待测试目标设备进行测试。在具体实施中，若需要测试测试图像中的一台或多台目标设备，可以直接对每台目标设备对应的区域进行检测，得到该区域内的目标对象，也可以对整个测试图像进行检测，通过对比检测到的目标对象的坐标位置与区域的坐标范围得到目标对象所属的目标设备，即本步骤包括：在所述测试图像中检测目标对象，并确定所述目标对象的位置所属的坐标范围，以确定所述目标对象对应的区域；根据在所述待测试目标设备对应的区域内检测到的目标对象，实现对所述待测试目标设备的测试。
58.作为一种优选的实施方式，本步骤包括：利用神经网络在所述待测试目标设备对应的区域内检测目标对象，以实现对所述目标设备的测试。在具体实施中，可以首先利用目标对象的训练图像训练神经网络，训练完成的神经网络可以识别测试图像中的目标对象，利用神经网络可以提高检测目标对象的效率和准确度。
59.需要说明的是，上述目标对象可以包括目标设备的指示灯，例如红外灯。在测试过程中，可以基于检测到的指示灯的数量得到目标设备的测试结果。即作为一种可行的实施方式，本步骤可以包括：在所述测试图像中检测目标对象，并确定所述待测试目标设备的所述目标对象的标准数量；通过比较在所述待测试目标设备对应的区域内检测到的所述目标对象的数量与所述标准数量得到所述待测试目标设备的测试结果。在具体实施中，若在待测试目标设备在对应的区域内检测到的目标对象的数量与该待测试目标设备对应的目标对象的标准数量一致，则判定待测试目标设备通过测试，若在待测试目标设备在对应的区域内检测到的目标对象的数量小于该待测试目标设备对应的目标对象的标准数量，则待测试目标设备未通过测试。
60.本技术实施例提供的基于机器视觉的测试方法，在测试台上使用预设标识对设备的区域进行标记，程序根据识别到的标识的位置对测试图像进行分割，得到每个目标设备对应的区域。在每个区域内进行目标对象的检测，可以得到该区域对应的目标设备的测试
结果。由此可见，本技术实施例提供的基于机器视觉的测试方法，在测试图像中包括多个目标设备时，实现了多台目标设备互不干扰的并行测试，提高了测试效率和准确性。
61.本技术实施例公开了一种基于机器视觉的测试方法，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。具体的：
62.参见图2，根据一示例性实施例示出的另一种基于机器视觉的测试方法的流程图，如图2所示，包括：
63.s201：获取包含目标设备的测试图像，并在所述测试图像中确定预设标识的位置；
64.s202：确定对应区域中所述目标设备在所述测试图像的排列方向；其中，所述排列方向包括水平方向和竖直方向；
65.在本实施例中，各目标设备以预设的排列方式分布于测试台上，图像采集装置采集到的测试图像中，各目标设备呈现某一排列方向的分布。例如，各目标设备在测试图像中以水平方向或竖直方向进行分布。
66.s203：在所述测试图像中建立每个所述预设标识对应的区域分割线；其中，所述区域分割线的方向为所述排列方向的垂直方向；
67.s204：利用所有所述预设标识对应的区域分割线对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标待目标设备；
68.在具体实施中，以上述排列方向的垂直方向建立经过每个预设标识位置的区域分割线，通过各区域分割线可以将测试图像划分为不同的区域。
69.s205：确定待测试目标设备，通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试。
70.例如，各目标设备在测试图像的排列方向为水平方向，如图3所示，qr码a、qr码b及qr码c与测试图像的边界测试图像分割为区域uut1、区域uut2、区域uut3及区域uut4，每个区域内仅包含一个目标设备。测试图像的宽度为w，高度为h，以测试图像的左下角为原点，宽度方向为x轴，高度方向为y轴，qr码a坐标(x1，y1)，qr码b坐标(x2，y2)，qr码c坐标(x3，y3)。区域uut1水平区间[0，x1]，区域uut2水平区间为[x1，x2]，区域uut3水平区间[x2，x3]，区域uut4水平区间[x
3，w
]。
[0071]
假设当前进行区域uut1内的目标设备进行测试，检测到测试图像中包含目标对象a和目标对象b，其中，目标对象a坐标(xa，ya)，目标对象b坐标(xb，yb)，判定目标对象a的坐标位于区域uut1内，为测试有效目标，而目标对象b的坐标落在区域uut2水平区间内，为测试干扰目标。当然，还可以对多个区域内的目标设备并行测试，即每个区域内的有效目标对象，各目标设备的测试不存在干扰。
[0072]
由此可见，本实施例对于以固定排列方向分布的目标设备，提供了一种划分测试图像的实施方式，即以上述排列方向的垂直方向建立经过每个预设标识位置的区域分割线，通过各区域分割线可以将测试图像划分为不同的区域。在每个区域内进行目标对象的检测，可以得到该区域对应的目标设备的测试结果，在测试图像中包括多个目标设备时，实现了多台目标设备互不干扰的并行测试，提高了测试效率和准确性。
[0073]
本技术实施例公开了一种基于机器视觉的测试方法，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。具体的：
[0074]
参见图4，根据一示例性实施例示出的又一种基于机器视觉的测试方法的流程图，
如图4所示，包括：
[0075]
s301：获取包含目标设备的测试图像，并在所述测试图像中确定条形码的位置；
[0076]
s302：通过读取每个所述条形码的信息确定每个所述条形码对应的目标方向；
[0077]
s303：在所述测试图像中以每个所述条形码对应的目标方向建立每个所述条形码对应的区域分割线；
[0078]
在本实施例中，各目标设备在测试图像中的分布不规则，测试人员预先根据各目标设备的位置确定测试图像中每条区域分割线的方向，并将方向存储于条形码中。测试程序通过读取条形码中的信息获取该条形码的方向，并建立经过该条形码的目标方向的区域分割线。
[0079]
s304：利用所有所述预设标识对应的区域分割线对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标待目标设备。
[0080]
s305：确定待测试目标设备，通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试。
[0081]
由此可见，本实施例对于无规律分布的目标设备，提供了一种划分测试图像的实施方式，即以每个条形码的信息中的目标方向建立经过每个条形码位置的区域分割线，通过各区域分割线可以将测试图像划分为不同的区域。在每个区域内进行目标对象的检测，可以得到该区域对应的目标设备的测试结果，在测试图像中包括多个目标设备时，实现了多台目标设备互不干扰的并行测试，提高了测试效率和准确性。
[0082]
下面对本技术实施例提供的一种基于机器视觉的测试装置进行介绍，下文描述的一种基于机器视觉的测试装置与上文描述的一种基于机器视觉的测试方法可以相互参照。
[0083]
参见图5，根据一示例性实施例示出的一种基于机器视觉的测试装置的结构图，如图5所示，包括：
[0084]
确定模块501，用于获取包含目标设备的测试图像，并在所述测试图像中确定预设标识的位置；
[0085]
划分模块502，用于根据每个所述预设标识的位置对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标设备；
[0086]
测试模块503，用于确定待测试目标设备，通过在所述待测试目标设备对应的区域内检测目标对象，实现对所述待测试目标设备的测试。
[0087]
本技术实施例提供的基于机器视觉的测试装置，在测试台上使用预设标识对设备的区域进行标记，程序根据识别到的预设标识的位置对测试图像进行分割，得到每个目标设备对应的区域。在每个区域内进行目标对象的检测，可以得到该区域对应的目标设备的测试结果。由此可见，本技术实施例提供的基于机器视觉的测试装置，在测试图像中包括多个目标设备时，实现了多台目标设备互不干扰的并行测试，提高了测试效率和准确性。
[0088]
在上述实施例的基础上，作为一种优选实施方式，所述划分模块502包括：
[0089]
建立单元，用于根据每个所述预设标识的位置，在所述测试图像中建立每个所述标识对应的区域分割线；其中，所述区域分割线经过对应的预设标识的位置；
[0090]
划分单元，用于利用所有所述预设标识对应的区域分割线对所述测试图像进行区域划分，以使划分得到的每个区域仅包含对应的目标待目标设备；
[0091]
相应的，所述测试模块503包括：
[0092]
确定单元，用于确定待测试目标设备，并通过建立的区域分割线确定每个区域在所述测试图像中的坐标范围；
[0093]
第一检测单元，用于在所述测试图像中检测目标对象，并确定所述目标对象的位置所属的坐标范围，以确定所述目标对象对应的区域；
[0094]
测试单元，用于根据在所述待测试目标设备对应的区域内检测到的目标对象，实现对所述待测试目标设备的测试。
[0095]
在上述实施例的基础上，作为一种优选实施方式，所述建立单元包括：
[0096]
第一确定子单元，用于确定对应区域中所述目标设备在所述测试图像的排列方向；其中，所述排列方向包括水平方向和竖直方向；
[0097]
第一建立子单元，用于在所述测试图像中建立每个所述预设标识对应的区域分割线；其中，所述区域分割线的方向为所述排列方向的垂直方向。
[0098]
在上述实施例的基础上，作为一种优选实施方式，所述标识包括条形码。
[0099]
在上述实施例的基础上，作为一种优选实施方式，所述建立单元包括：
[0100]
第二确定子单元，用于通过读取每个所述条形码的信息确定每个所述条形码对应的目标方向；
[0101]
第二建立子单元，用于在所述测试图像中以每个所述条形码对应的目标方向建立每个所述条形码对应的区域分割线。
[0102]
在上述实施例的基础上，作为一种优选实施方式，所述测试模块503具体为利用神经网络在所述待测试目标设备对应的区域内检测目标对象，以实现对所述目标设备的测试的模块。
[0103]
在上述实施例的基础上，作为一种优选实施方式，所述测试模块503包括：
[0104]
第二检测单元，用于在所述测试图像中检测目标对象，并确定所述待测试目标设备的所述目标对象的标准数量；
[0105]
比较单元，用于通过比较在所述待测试目标设备对应的区域内检测到的所述目标对象的数量与所述标准数量得到所述待测试目标设备的测试结果。
[0106]
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
[0107]
基于上述程序模块的硬件实现，且为了实现本技术实施例的方法，本技术实施例还提供了一种电子设备，图6为根据一示例性实施例示出的一种电子设备的结构图，如图6所示，电子设备包括：
[0108]
通信接口1，能够与其它设备比如网络设备等进行信息交互；
[0109]
处理器2，与通信接口1连接，以实现与其它设备进行信息交互，用于运行计算机程序时，执行上述一个或多个技术方案提供的应用的访问方法。而所述计算机程序存储在存储器3上。
[0110]
当然，实际应用时，电子设备中的各个组件通过总线系统4耦合在一起。可理解，总线系统4用于实现这些组件之间的连接通信。总线系统4除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图6中将各种总线都标为总线系统4。
[0111]
本技术实施例中的存储器3用于存储各种类型的数据以支持电子设备的操作。这
些数据的示例包括：用于在电子设备上操作的任何计算机程序。
[0112]
可以理解，存储器3可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(rom，read only memory)、可编程只读存储器(prom，programmable read-only memory)、可擦除可编程只读存储器(eprom，erasable programmable read-only memory)、电可擦除可编程只读存储器(eeprom，electrically erasable programmable read-only memory)、磁性随机存取存储器(fram，ferromagnetic random access memory)、快闪存储器(flash memory)、磁表面存储器、光盘、或只读光盘(cd-rom，compact disc read-only memory)；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(ram，random access memory)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的ram可用，例如静态随机存取存储器(sram，static random access memory)、同步静态随机存取存储器(ssram，synchronous static random access memory)、动态随机存取存储器(dram，dynamic random access memory)、同步动态随机存取存储器(sdram，synchronous dynamic random access memory)、双倍数据速率同步动态随机存取存储器(ddrsdram，double data rate synchronous dynamic random access memory)、增强型同步动态随机存取存储器(esdram，enhanced synchronous dynamic random access memory)、同步连接动态随机存取存储器(sldram，synclink dynamic random access memory)、直接内存总线随机存取存储器(drram，direct rambus random access memory)。本技术实施例描述的存储器2旨在包括但不限于这些和任意其它适合类型的存储器。
[0113]
上述本技术实施例揭示的方法可以应用于处理器2中，或者由处理器2实现。处理器2可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器2中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器2可以是通用处理器、dsp，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器2可以实现或者执行本技术实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本技术实施例所公开的方法的步骤，可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中，该存储介质位于存储器3，处理器2读取存储器3中的程序，结合其硬件完成前述方法的步骤。
[0114]
处理器2执行所述程序时实现本技术实施例的各个方法中的相应流程，为了简洁，在此不再赘述。
[0115]
在示例性实施例中，本技术实施例还提供了一种存储介质，即计算机存储介质，具体为计算机可读存储介质，例如包括存储计算机程序的存储器3，上述计算机程序可由处理器2执行，以完成前述方法所述步骤。计算机可读存储介质可以是fram、rom、prom、eprom、eeprom、flash memory、磁表面存储器、光盘、或cd-rom等存储器。
[0116]
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。
[0117]
或者，本技术上述集成的单元如果以软件功能模块的形式实现并作为独立的产品
销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台电子设备(可以是个人计算机、服务器、或者网络设备等)执行本技术各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。
[0118]
以上所述，仅为本技术的具体实施方式，但本技术的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本技术揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本技术的保护范围之内。因此，本技术的保护范围应以所述权利要求的保护范围为准。