图像处理方法、计算机程序以及图像处理装置与流程

本发明涉及一种进行针对动态图像的图像处理的图像处理方法、计算机程序以及图像处理装置。

背景技术：

1、对动态图像中的场面(场景或镜头等)的变化进行检测的图像处理的技术得到广泛使用。在这样的技术中，例如针对构成动态图像的多个帧，对时序上连续的帧之间的像素值进行比较，并基于该比较结果来判断是否有场面的变化。此外，近年来还开发了使用为了检测场面变化而预先进行了机器学习的学习模型的方法。

2、在专利文献1中，提出了一种通过从视频内检测场景变化，对连续的场景的变化的数量进行计数，从而检测快速运动的场景并从场景中选择关键帧的方法。

3、现有技术文献

4、专利文献

5、专利文献1：日本特表2003-519946号公报

技术实现思路

1、发明所要解决的技术问题

2、在对帧之间的像素值进行比较以进行场面检测的方法中，有可能将例如拍摄动态图像的摄像头在拍摄中晃动的部分等误判为场面的变化。此外，在使用进行了机器学习的学习模型的方法中，针对拍摄有与机器学习中所使用的动态图像的状况不同的动态图像，场面变化的检测精度可能会降低，并且为了导入所需的成本可能会增加。

3、本发明是鉴于上述情况作出的，其目的在于提供一种能够期待从动态图像中高精度地检测场面的变化的图像处理方法、计算机程序以及图像处理装置。

4、解决技术问题所采用的技术方案

5、在第一方式的图像处理方法中，图像处理装置进行下述动作：从动态图像中检测场面变化位置的候选，从构成所述动态图像的帧中检测能作为场面的主要帧的候选帧，从所述候选帧中确定主要帧，并基于场面变化位置的候选以及主要帧的时序顺序，来从场面变化位置的候选中确定场面变化位置。

6、第二方式的图像处理方法是在第一方式的图像处理方法的基础上，在时序上排列的两个场面变化位置的候选之间不存在主要帧的情况下，通过将所述两个场面变化位置中的任意一方从候选中去除，从而确定场面变化位置。

7、第三方式的图像处理方法是在第一方式或第二方式的图像处理方法的基础上，在时序上排列且相似的两个主要帧之间存在场面变化位置的候选的情况下，通过将该场面变化位置从候选中去除，从而确定场面变化位置。

8、第四方式的图像处理方法是在第一方式至第三方式中任一方式的图像处理方法的基础上，计算各帧的统计值，并基于两个帧的统计值的差异来检测场面变化位置的候选。

9、第五方式的图像处理方法是在第一方式至第四方式中任一方式的图像处理方法的基础上，计算各帧的哈希值，并基于两个帧的哈希值的差异来检测场面变化位置的候选。

10、第六方式的图像处理方法是在第一方式至第五方式中任一方式的图像处理方法的基础上，从各帧中提取边缘，并基于两个帧之间的边缘的变化来检测候选帧。

11、第七方式的图像处理方法是在第一方式至第六方式中任一方式的图像处理方法的基础上，从候选帧中提取特征点，并基于多个候选帧间的特征点的比较结果来去除候选帧，从而从候选帧中确定主要帧。

12、第八方式的图像处理方法是在第一方式至第七方式中任一方式的图像处理方法的基础上，将与确定出的场面变化位置和主要帧相关的信息与所述动态图像建立对应并进行存储，接受对场面变化位置或主要帧的选择，并进行基于被选择的场面变化位置或主要帧的所述动态图像的播放。

13、第九方式的图像处理方法是在第八方式的图像处理方法的基础上，将与确定出的场面变化位置以及主要帧相关的信息和与所述动态图像相关的文字信息建立对应并进行存储。

14、第十方式的图像处理方法是在第九方式的图像处理方法的基础上，获取拍摄空调相关设备的施工或修理的作业而得到的动态图像，针对获取到的动态图像确定场面变化位置和主要帧，并将与确定出的场面变化位置以及主要帧相关的信息和与空调相关设备相关的文字信息建立对应并进行存储。

15、第十一方式的图像处理方法是在第一方式至第十方式中任一方式的图像处理方法的基础上，基于确定出的场面变化位置以及主要帧，从所述动态图像中提取部分动态图像，并结合提取的部分动态图像而生成概要动态图像。

16、第十二方式的图像处理方法是在第一方式至第十一方式中任一方式的图像处理方法的基础上，将确定出的主要帧输入至针对拍摄有空调相关设备的施工或修理的作业的动态图像的主要帧的输入对施工或修理的类别进行分类的学习模型，获取该学习模型所输出的分类结果，并基于获取到的分类结果来确定所述动态图像或所述动态图像所包括的场面的标题。

17、第十三方式的计算机程序使计算机执行下述处理：从动态图像中检测场面变化位置的候选，从构成所述动态图像的帧中检测能作为场面的主要帧的候选帧，从所述候选帧中确定主要帧，并基于场面变化位置的候选以及主要帧的时序上的顺序，来从场面变化位置的候选中确定场面变化位置。

18、第十四方式的图像处理装置包括：场面变化位置候选检测部，所述场面变化位置候选检测部从动态图像中检测场面变化位置的候选；候选帧检测部，所述候选帧检测部从构成所述动态图像的帧中检测能作为场面的主要帧的候选帧；主要帧确定部，所述主要帧确定部从所述候选帧中确定主要帧；以及场面变化位置确定部，所述场面变化位置确定部基于场面变化位置的候选以及主要帧的时序上的顺序，来从场面变化位置的候选中确定场面变化位置。

19、发明效果

20、在一实施方式的情况下，能够期待从动态图像中高精度地检测场面的变化。

技术特征：

1.一种图像处理方法，其特征在于，

2.根据权利要求1所述的图像处理方法，其特征在于，

3.根据权利要求1或2所述的图像处理方法，其特征在于，

4.根据权利要求1至3中任一项所述的图像处理方法，其特征在于，

5.根据权利要求1至4中任一项所述的图像处理方法，其特征在于，

6.根据权利要求1至5中任一项所述的图像处理方法，其特征在于，

7.根据权利要求1至6中任一项所述的图像处理方法，其特征在于，

8.根据权利要求1至7中任一项所述的图像处理方法，其特征在于，

9.根据权利要求8所述的图像处理方法，其特征在于，

10.根据权利要求9所述的图像处理方法，其特征在于，

11.根据权利要求1至10中任一项所述的图像处理方法，其特征在于，

12.根据权利要求1至11中任一项所述的图像处理方法，其特征在于，

13.一种计算机程序，其特征在于，

14.一种图像处理装置，其特征在于，包括：

技术总结
提供一种能够期待从动态图像中高精度地检测场面的变化的图像处理方法、计算机程序以及图像处理装置。在本实施方式的图像处理方法中，图像处理装置从动态图像中检测场面变化位置的候选，从构成所述动态图像的帧中检测能作为场面的主要帧的候选帧，从所述候选帧中确定主要帧，并基于场面变化位置的候选以及主要帧的时序上的顺序，从场面变化位置的候选中确定场面变化位置。在时序上排列的两个场面变化位置的候选之间不存在主要帧的情况下，也可以通过从候选中去除所述两个场面变化位置中的任意一方来确定场面变化位置。

技术研发人员：V·帕特拉瓦拉,A·瑟纳希,V·巴蒂亚
受保护的技术使用者：大金工业株式会社
技术研发日：
技术公布日：2025/2/10