餐盘垫纸的检测方法及装置、存储介质、电子装置与流程

本发明涉及计算机视觉技术领域，具体而言，涉及一种餐盘垫纸的检测方法及装置、存储介质、电子装置。

背景技术：

餐盘垫纸主要用于快餐餐厅或烘焙店内用于隔离食物或者托盘，使食品保持干净、卫生。

由于餐盘纸重量很轻，因此在配餐流水线自动分发餐盘纸时，极易造成餐盘纸部分甚至完全飘出餐盘，影响食品安全以及消费者的取餐体验。

针对相关技术中，无法确定配餐流水线上的餐盘垫纸是否摆放合格的问题，目前尚未存在有效的解决方案。

技术实现要素：

本发明实施例提供了一种餐盘垫纸的检测方法及装置、存储介质、电子装置，以至少解决相关技术中无法确定配餐流水线上的餐盘垫纸是否摆放合格的问题。

根据本发明的一个实施例，提供了一种餐盘垫纸的检测方法，包括：获取分发餐盘垫纸后的目标餐盘上的第一图像信息；从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域；在所述图像区域的区域面积达到第一阈值条件的情况下，确定所述餐盘垫纸已被摆放至所述目标餐盘中；从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息；在所述距离信息达到第二阈值条件的情况下，确定所述餐盘垫纸在所述目标餐盘中摆放合格。

在本申请的可选实施例中，所述从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域包括：根据所述目标餐盘的自身颜色从所述第一图像信息中识别出所述目标餐盘被所述餐盘垫纸覆盖的面积；根据所述目标餐盘与所述餐盘垫纸的面积比和所述目标餐盘被所述餐盘垫纸覆盖的面积，识别出所述目标餐盘自身颜色变化的图像区域。

在本申请的可选实施例中，所述从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域包括：将所述目标餐盘自身颜色变化的图像区域的预设区域面积作为所述第一阈值条件，其中，所述预设区域面积包括：所述目标餐盘中颜色减少的区域面积。

在本申请的可选实施例中，所述从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息包括：从所述第一图像信息中识别出所述餐盘垫纸的两个相邻边界之间的夹角；根据所述夹角所在的顶点位置与所述目标餐盘的边界之间的距离，识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息。

在本申请的可选实施例中，所述从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息包括：将所述餐盘垫纸的边界与所述目标餐盘的边界之间的预设距离信息作为所述第二阈值条件，其中，所述预设距离信息包括：所述餐盘垫纸的边界不超出所述目标餐盘的边界时的距离。

根据本发明的另一个实施例，提供了一种餐盘垫纸的检测装置，包括：获取模块，用于获取分发餐盘垫纸后的目标餐盘上的第一图像信息；第一识别模块，用于从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域；第一确定模块，用于在所述图像区域的区域面积达到第一阈值条件的情况下，确定所述餐盘垫纸已被摆放至所述目标餐盘中；第二识别模块，用于从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息；第二确定模块，用于在所述距离信息达到第二阈值条件的情况下，确定所述餐盘垫纸在所述目标餐盘中摆放合格。

根据本发明的又一个实施例，还提供了一种存储介质，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。

通过本发明，由于获取分发餐盘垫纸后的目标餐盘上的第一图像信息，并根据第一图像信息识别出目标餐盘自身颜色发生变化的图像区域和所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息，能够准确地确定餐盘垫纸是否被摆放至目标餐盘且摆放位置合格。因此，可以解决无法确定配餐流水线上的餐盘垫纸是否摆放合格的问题，达到减少餐纸摆放不合格的餐盘进入后续配餐的情况发生、同时提高了流水线配餐的食品安全质量的效果。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是本发明实施例的餐盘垫纸的检测方法的移动终端的硬件结构框图；

图2是根据本发明实施例的餐盘垫纸的检测方法的流程示意图；

图3是根据本发明实施例的餐盘垫纸的检测装置的结构框图；

图4(a)-图4(c)是根据本发明实施例餐盘垫纸与餐盘摆放关系的结构示意图。

具体实施方式

下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。

实施例1

本申请实施例一所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例，图1是本发明实施例的一种餐盘垫纸的检测方法的移动终端的硬件结构框图。如图1所示，移动终端10可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器mcu或可编程逻辑器件fpga等的处理装置)和用于存储数据的存储器104，可选地，上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述移动终端的结构造成限定。例如，移动终端10还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。

存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本发明实施例中的餐盘垫纸的检测方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至移动终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端10的通信供应商提供的无线网络。在一个实例中，传输装置106包括一个网络适配器(networkinterfacecontroller，简称为nic)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置106可以为射频(radiofrequency，简称为rf)模块，其用于通过无线方式与互联网进行通讯。

在本实施例中提供了一种运行于上述移动终端的餐盘垫纸的检测方法，图2是根据本发明实施例的餐盘垫纸的检测方法的流程图，如图2所示，该流程包括如下步骤：

步骤s202，获取分发餐盘垫纸后的目标餐盘上的第一图像信息；

通过图像采集设备获取配餐流水线上分发餐盘垫纸后的所述目标餐盘上的图像信息。

步骤s204，从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域；

根据图像信息识别出目标餐盘自身的颜色发生变化时的图像区域，即预先保存目标餐盘未分发餐盘垫纸时自身颜色的图像，根据实时拍摄获取的图像信息中识别的图像区域与预先保存的图像进行对比。

步骤s206，在所述图像区域的区域面积达到第一阈值条件的情况下，确定所述餐盘垫纸已被摆放至所述目标餐盘中；

当所述图像区域中的区域面积达到一定阈值条件的情况下，可以确定出餐盘垫纸已被摆放至目标餐盘中。

步骤s208，从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息；

继续从标餐盘上的图像信息中识别出餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息，即通过图像识别的方式，可以获取餐盘垫纸的边界与目标餐盘边界之间的距离信息。

步骤s210，在所述距离信息达到第二阈值条件的情况下，确定所述餐盘垫纸在所述目标餐盘中摆放合格。

当所述距离信息达到一定阈值条件的情况下，可以确定出餐盘垫纸已被摆放至目标餐盘中且摆放合格。

具体实施时，需在配餐流水线餐盘纸分发区域部署图像采集装置比如一个或多个摄像头，采集发放餐盘垫纸后的餐盘图像信息，通过计算机视觉技术识别餐盘纸摆放的合规情况，如果摆放合规的餐盘方可进行流水线后续的配餐动作。

通过上述步骤，由于获取分发餐盘垫纸后的目标餐盘上的第一图像信息，并根据第一图像信息识别出目标餐盘自身颜色发生变化的图像区域和所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息，能够准确地确定餐盘垫纸是否被摆放至目标餐盘且摆放位置合格。因此，可以解决无法确定配餐流水线上的餐盘垫纸是否摆放合格的问题，达到减少餐纸摆放不合格的餐盘进入后续配餐的情况发生、同时提高了流水线配餐的食品安全质量的效果。

进一步地，所述从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域包括：根据所述目标餐盘的自身颜色从所述第一图像信息中识别出所述目标餐盘被所述餐盘垫纸覆盖的面积；根据所述目标餐盘与所述餐盘垫纸的面积比和所述目标餐盘被所述餐盘垫纸覆盖的面积，识别出所述目标餐盘自身颜色变化的图像区域。即通过预存的目标餐盘与所述餐盘垫纸的面积比和目标餐盘被所述餐盘垫纸覆盖的面积可以识别确定出餐盘被所述餐盘垫纸覆盖的面积。

进一步地，所述从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域包括：将所述目标餐盘自身颜色变化的图像区域的预设区域面积作为所述第一阈值条件，其中，所述预设区域面积包括：所述目标餐盘中颜色减少的区域面积。设置第一阈值条件，其中包括目标餐盘自身颜色变化的图像区域的预设区域面积，如果达到了预设区域面积，则确定所述餐盘垫纸已被摆放至所述目标餐盘中。优选地，将目标餐盘中颜色减少的区域面积作为预设区域面积。

进一步地，所述从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息包括：从所述第一图像信息中识别出所述餐盘垫纸的两个相邻边界之间的夹角；根据所述夹角所在的顶点位置与所述目标餐盘的边界之间的距离，识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息。即首先通过第一图像信息识别出餐盘垫纸的两个相邻边界之间的夹角，然后根据所述夹角所在的顶点位置与所述目标餐盘的边界之间的距离识别出两者边界之间的夹角。

优选地，所述夹角至少包括两个，对应的包括两个顶点位置。

进一步地，所述从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息包括：将所述餐盘垫纸的边界与所述目标餐盘的边界之间的预设距离信息作为所述第二阈值条件，其中，所述预设距离信息包括：所述餐盘垫纸的边界不超出所述目标餐盘的边界时的距离。即第二阈值条件包括餐盘垫纸的边界与所述目标餐盘的边界之间的预设距离信息，如果达到预设距离信息，则确定餐盘垫纸在所述目标餐盘中摆放合格。优选地，所述预设距离信息中的盘垫纸的边界不超出所述目标餐盘的边界时的距离。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

实施例2

在本实施例中还提供了一种餐盘垫纸的检测装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。

图3是根据本发明实施例的餐盘垫纸的检测装置的结构框图，如图2所示，该装置包括

获取模块30，用于获取分发餐盘垫纸后的目标餐盘上的第一图像信息；

第一识别模块32，用于从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域；

第一确定模块34，用于在所述图像区域的区域面积达到第一阈值条件的情况下，确定所述餐盘垫纸已被摆放至所述目标餐盘中；

第二识别模块36，用于从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息；

第二确定模块38，用于在所述距离信息达到第二阈值条件的情况下，确定所述餐盘垫纸在所述目标餐盘中摆放合格。

在所述获取模块30中通过图像采集设备获取配餐流水线上分发餐盘垫纸后的所述目标餐盘上的图像信息。

在所述第一识别模块32中根据图像信息识别出目标餐盘自身的颜色发生变化时的图像区域，即预先保存目标餐盘未分发餐盘垫纸时自身颜色的图像，根据实时拍摄获取的图像信息中识别的图像区域与预先保存的图像进行对比。

在所述第一确定模块34中当所述图像区域中的区域面积达到一定阈值条件的情况下，可以确定出餐盘垫纸已被摆放至目标餐盘中。

在所述第二识别模块36中继续从标餐盘上的图像信息中识别出餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息，即通过图像识别的方式，可以获取餐盘垫纸的边界与目标餐盘边界之间的距离信息。

在所述第二确定模块38中当所述距离信息达到一定阈值条件的情况下，可以确定出餐盘垫纸已被摆放至目标餐盘中且摆放合格。

具体实施时，需在配餐流水线餐盘纸分发区域部署图像采集装置比如一个或多个摄像头，采集发放餐盘垫纸后的餐盘图像信息，通过计算机视觉技术识别餐盘纸摆放的合规情况，如果摆放合规的餐盘方可进行流水线后续的配餐动作。

通过上述模块，由于获取分发餐盘垫纸后的目标餐盘上的第一图像信息，并根据第一图像信息识别出目标餐盘自身颜色发生变化的图像区域和所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息，能够准确地确定餐盘垫纸是否被摆放至目标餐盘且摆放位置合格。因此，可以解决无法确定配餐流水线上的餐盘垫纸是否摆放合格的问题，达到减少餐纸摆放不合格的餐盘进入后续配餐的情况发生、同时提高了流水线配餐的食品安全质量的效果。

进一步地，所述第一识别模块34，用于根据所述目标餐盘的自身颜色从所述第一图像信息中识别出所述目标餐盘被所述餐盘垫纸覆盖的面积；根据所述目标餐盘与所述餐盘垫纸的面积比和所述目标餐盘被所述餐盘垫纸覆盖的面积，识别出所述目标餐盘自身颜色变化的图像区域。

在所述第一识别模块34中通过预存的目标餐盘与所述餐盘垫纸的面积比和目标餐盘被所述餐盘垫纸覆盖的面积可以识别确定出餐盘被所述餐盘垫纸覆盖的面积。

进一步地，所述第二识别模块36，用于从所述第一图像信息中识别出所述餐盘垫纸的两个相邻边界之间的夹角；根据所述夹角所在的顶点位置与所述目标餐盘的边界之间的距离，识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息。

在所述第二识别模块36中首先通过第一图像信息识别出餐盘垫纸的两个相邻边界之间的夹角，然后根据所述夹角所在的顶点位置与所述目标餐盘的边界之间的距离识别出两者边界之间的夹角。

需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。

为了更好的理解上述餐盘垫纸的检测方法流程，以下结合优选实施例对上述技术方案进行解释说明，但不用于限定本发明实施例的技术方案。

本发明优选实施例采集分发餐盘垫纸后的目标餐盘的图像信息，通过计算机视觉技术识别出餐盘垫纸摆放的合规情况。摆放合规的餐盘方可进行流水线后续的配餐动作。如图4(a)所示为餐盘垫纸摆放合规的情况，其中，包括餐盘垫纸20和餐盘10。

首先，在执行图像识别时，预存餐盘垫纸与餐盘的面积比以及存餐盘的颜色信息。通过对餐盘自身色彩的面积变化识别，确定已分发餐盘垫纸后餐盘颜色面积变化。预设分发餐盘垫纸后餐盘底色减少面积的合格阈值，若未达到阈值，则餐盘纸未摆放到餐盘内，判断餐盘纸摆放不合格，该餐盘不得进入后续配餐流程。若餐盘底色减少面积达到符合阈值，则需要继续分析是否摆放合规。如图4(c)所示为餐盘纸未摆放到餐盘内的情况。

其次，使用计算机视觉技术识别出餐盘边框及餐盘纸边框，选取餐盘纸任意两个角，计算该任意两个角对应的顶点距离餐盘所邻近的两个边的垂直距离。如图4(b)所示为餐盘纸摆放到餐盘内但是未摆放合格的情况。

最后，预设餐盘纸于餐盘两边的距离阈值范围，若计算距离超出阈值，则餐盘垫纸摆放不合格，该餐盘不得进入后续配餐流程。若两个角对应的顶点的距离均在阈值范围内，则餐盘垫纸摆放合格，可进入后续配餐流程。

本发明的实施例还提供了一种存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的计算机程序：

s1，获取分发餐盘垫纸后的目标餐盘上的第一图像信息；

s2，从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域；

s3，在所述图像区域的区域面积达到第一阈值条件的情况下，确定所述餐盘垫纸已被摆放至所述目标餐盘中；

s4，从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息；

s5，在所述距离信息达到第二阈值条件的情况下，确定所述餐盘垫纸在所述目标餐盘中摆放合格。

可选地，存储介质还被设置为存储用于执行以下步骤的计算机程序：

s1，根据所述目标餐盘的自身颜色从所述第一图像信息中识别出所述目标餐盘被所述餐盘垫纸覆盖的面积；

s2，根据所述目标餐盘与所述餐盘垫纸的面积比和所述目标餐盘被所述餐盘垫纸覆盖的面积，识别出所述目标餐盘自身颜色变化的图像区域。

可选地，存储介质还被设置为存储用于执行以下步骤的计算机程序：

s3，从所述第一图像信息中识别出所述餐盘垫纸的两个相邻边界之间的夹角；

s4，根据所述夹角所在的顶点位置与所述目标餐盘的边界之间的距离，识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息。

可选地，在本实施例中，上述存储介质可以包括但不限于：u盘、只读存储器(read-onlymemory，简称为rom)、随机存取存储器(randomaccessmemory，简称为ram)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。

本发明的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。

可选地，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。

可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：

s1，获取分发餐盘垫纸后的目标餐盘上的第一图像信息；

s2，从所述第一图像信息中识别出所述目标餐盘自身颜色发生变化的图像区域；

s3，在所述图像区域的区域面积达到第一阈值条件的情况下，确定所述餐盘垫纸已被摆放至所述目标餐盘中；

s4，从所述第一图像信息中识别出所述餐盘垫纸的边界与所述目标餐盘的边界之间的距离信息；

s5，在所述距离信息达到第二阈值条件的情况下，确定所述餐盘垫纸在所述目标餐盘中摆放合格。

可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。

显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。