家用电器的控制方法、装置及家用电器与流程

本发明涉及家用电器，尤其涉及家用电器的控制方法、装置及家用电器。

背景技术：

1、随着科技的发展，家用电器的智能化水平逐渐提升，家用电器通过搭载图像检测识别技术，为用户提供更加便捷且智能化的服务。

2、带有图像检测识别技术的家用电器，对于图像中物品的精准判断有很高的要求，图像识别结果影响了家用电器的操作控制和智能化水平。

技术实现思路

1、本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明提出一种家用电器的控制方法，通过提高图像识别的准确度，提升家用电器的操作控制的智能化水平。

2、根据本发明第一方面实施例的家用电器的控制方法，包括：

3、获取多张待处理图像，所述多张待处理图像是在不同光照环境下采集的家用电器的工作区域的图像；

4、将所述多张待处理图像输入至图像处理模型，获得所述图像处理模型输出的目标图像；

5、对所述目标图像进行图像识别，输出目标控制指令至所述家用电器的目标执行机构，所述目标控制指令用于控制所述目标执行机构动作；

6、所述图像处理模型为，以样本图像集为样本，以预先确定的与所述样本图像集对应的样本图像为样本标签，训练得到。

7、根据本发明实施例的家用电器的控制方法，通过使用图像处理模型将不同环境亮度对应的多张待处理图像进行结合，得到一张可以分辨家用电器内部的最清晰的目标图像，充分利用了深度学习的理念，无须任何手工的参数调节设置，结合多张待处理图像来生成最优的目标图像，提高图像识别结果的准确度，进而提高了后续家用电器功能的实现质量，提升用户的使用体验。

8、根据本发明的一个实施例，所述将所述多张待处理图像输入至图像处理模型，获得所述图像处理模型输出的目标图像，包括：

9、将所述多张待处理图像输入至所述图像处理模型的拼接层，获得所述拼接层输出的拼接特征向量；

10、将所述拼接特征向量输入至所述图像处理模型的编码器，对所述拼接特征向量进行卷积处理和下采样处理，获得所述编码器输出的目标特征图像；

11、将所述目标特征图像输入至所述图像处理模型的解码器，对所述目标特征图像进行上采样处理和卷积处理，获得所述解码器输出的所述目标图像。

12、根据本发明的一个实施例，在所述将所述拼接特征向量输入至所述图像处理模型的编码器，对所述拼接特征向量进行卷积处理和下采样处理，获得所述编码器输出的目标特征图像之后，在所述将所述目标特征图像输入至所述图像处理模型的解码器，对所述目标特征图像进行上采样处理和卷积处理，获得所述解码器输出的所述目标图像之前，所述方法还包括：

13、获取所述编码器中卷积处理得到的多个第一特征向量；

14、所述将所述目标特征图像输入至所述图像处理模型的解码器，对所述目标特征图像进行上采样处理和卷积处理，获得所述解码器输出的所述目标图像，包括：

15、将所述目标特征图像输入至所述解码器进行上采样处理，得到多个第二特征向量；

16、将所述多个第一特征向量与对应的所述多个第二特征向量进行特征融合和卷积处理，获得所述解码器输出的所述目标图像。

17、根据本发明的一个实施例，在所述获取所述编码器中卷积处理得到的多个第一特征向量之后，在所述将所述目标特征图像输入至所述图像处理模型的解码器，对所述目标特征图像进行上采样处理和卷积处理，获得所述解码器输出的所述目标图像之前，所述方法还包括：

18、将各第一特征向量与其上一层卷积处理得到的所述第一特征向量进行特征融合，得到多个第三特征向量；

19、所述将所述多个第一特征向量与对应的所述多个第二特征向量进行特征融合和卷积处理，获得所述解码器输出的所述目标图像，包括；

20、将所述多个第三特征向量与对应的所述多个第二特征向量进行特征融合和卷积处理，获得所述解码器输出的所述目标图像。

21、根据本发明的一个实施例，所述将所述多张待处理图像输入至所述图像处理模型的拼接层，获得所述拼接层输出的拼接特征向量，包括：

22、将所述多张待处理图像输入至所述拼接层，将所述多张待处理图像进行拼接处理，得到第一特征图像；

23、将所述第一特征图像进行特征提取，获得所述拼接层输出的所述拼接特征向量。

24、根据本发明的一个实施例，所述将所述多张待处理图像输入至所述图像处理模型的拼接层，获得所述拼接层输出的拼接特征向量，包括：

25、将所述多张待处理图像输入至所述拼接层，对所述多张待处理图像进行特征提取，得到多个第五特征向量；

26、将所述多个第五特征向量进行拼接处理，获得所述拼接层输出的所述拼接特征向量。

27、根据本发明的一个实施例，在所述将所述多张待处理图像输入至图像处理模型，获得所述图像处理模型输出的目标图像之后，所述方法还包括：

28、基于所述多张待处理图像和所述目标图像，确定所述目标图像为困难样本的情况下，将所述目标图像加入所述样本图像集对所述图像处理模型进行训练。

29、根据本发明第二方面实施例的家用电器的控制装置，包括：

30、获取模块，用于获取多张待处理图像，所述多张待处理图像是在不同光照环境下采集的家用电器的工作区域的图像；

31、处理模块，用于将所述多张待处理图像输入至图像处理模型，获得所述图像处理模型输出的目标图像；

32、输出模块，用于对所述目标图像进行图像识别，输出目标控制指令至所述家用电器的目标执行机构，所述目标控制指令用于控制所述目标执行机构动作；

33、所述图像处理模型为，以样本图像集为样本，以预先确定的与所述样本图像集对应的样本图像为样本标签，训练得到。

34、根据本发明第三方面实施例的家用电器，包括：

35、目标执行机构；

36、补光灯，所述补光灯用于为家用电器的工作区域补光；

37、摄像头，所述摄像头用于采集多张待处理图像；

38、如上文描述的家用电器的控制装置，所述家用电器的控制装置与所述目标执行机构、所述补光灯以及所述摄像头电连接。

39、根据本发明第四方面实施例的电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述任一种所述家用电器的控制方法的步骤。

40、根据本发明第五方面实施例的非暂态计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述家用电器的控制方法的步骤。

41、根据本发明第六方面实施例的计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述家用电器的控制方法的步骤。

42、本发明实施例中的上述一个或多个技术方案，至少具有如下技术效果之一：

43、通过结合不同光照环境对应的多张待处理图像生成目标图像，再利用目标图像对家用电器内部情况进行准确识别，提升家用电器功能实现的质量，进而提升用户的使用体验。

44、进一步的，u-net结构的图像处理模型可以将编码器的特征输出拼接到相对应的解码器的输出上，增强更多的语义信息，提高解码器输出图像的准确度。

45、本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。