一种镜头切分方法和装置与流程

本发明涉视频处理技术领域，更具体地，涉及一种镜头切分方法和装置。

背景技术：

目前，常使用镜头切分来进行视频分割，以将一段视频根据镜头切分为视频片段，精确的镜头切分能够大大降低系统的存储和数据上传负担。

然而，在使用镜头切分时，常会遇到的问题是：当视频中有闪光灯闪烁时(例如会场中记者们的摄影机闪光灯)，会影响镜头切分的正确性。

技术实现要素：

有鉴于此，本发明实施例的目的是提出一种镜头切分方法和装置，能够减少闪光灯等对镜头切分的影响。

为了达到上述目的，本发明实施例提出一种镜头切分方法，包括：

使用灰度特征对视频进行镜头切分获得第一镜头切分结果；

使用非灰度特征对所述视频进行镜头切分获得第二镜头切分结果；

当所述第一镜头切分结果与所述第二镜头切分结果一致时，确认镜头切分为第一镜头切分结果。

在本发明一实施例中，所述方法还包括：

当所述第一镜头切分结果与第二镜头切分结果不一致时，获取第一镜头切分结果的第一置信度和第二镜头切分结果的第二置信度；

根据所述第一置信度、第二置信度以及分别为使用灰度特征进行镜头切分和使用非灰度特征进行镜头切分设置的权重，确认镜头切分为第一镜头切分结果和第二镜头切分结果中的一个。

在本发明一实施例中，所述非灰度特征包括局部二值模式特征。

在本发明一实施例中，所述方法还包括：

当所述第一镜头切分结果与第二镜头切分结果不一致时，对相邻的不同镜头之间的相邻图像进行人脸检测；

根据相邻的不同镜头之间的相邻图像具有不同的人脸，来确认镜头切分为第一镜头切分结果和第二镜头切分结果中的一个。

本发明实施例还提出一种镜头切分装置，包括：

第一切分模块，用于使用灰度特征对视频进行镜头切分获得第一镜头切分结果；

第二切分模块，用于使用非灰度特征对所述视频进行镜头切分获得第二镜头切分结果；

第一确认模块，用于当所述第一镜头切分结果与所述第二镜头切分结果一致时，确认镜头切分为第一镜头切分结果。

在本发明一实施例中，所述装置还包括：

获取模块，用于当所述第一镜头切分结果与第二镜头切分结果不一致时，获取第一镜头切分结果的第一置信度和第二镜头切分结果的第二置信度；

第二确认模块，用于根据所述第一置信度、第二置信度以及分别为使用灰度特征进行镜头切分和使用非灰度特征进行镜头切分设置的权重，确认镜头切分为第一镜头切分结果和第二镜头切分结果中的一个。

在本发明一实施例中，所述非灰度特征包括局部二值模式特征。

在本发明一实施例中，所述装置还包括：

检测模块，用于当所述第一镜头切分结果与第二镜头切分结果不一致时，对相邻的不同镜头之间的相邻图像进行人脸检测；

第三确认模块，用于根据相邻的不同镜头之间的相邻图像具有不同的人脸，来确认镜头切分为第一镜头切分结果和第二镜头切分结果中的一个。

本发明实施例提供的技术方案可以包括以下有益效果：

本发明同时使用灰度特征和非灰度特征对视频进行切分，只有当两种切分方式切分出的镜头一致时，才确认镜头切分。因此，本发明可以有效地保证镜头切分的正确性。

本发明实施例的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明实施例的技术方案做进一步的详细描述。

附图说明

附图用来提供对本发明实施例的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明实施例的限制。在附图中：

图1是本发明一实施例中的镜头切分方法的流程图。

图2是本发明一实施例中的镜头切分方法的流程图。

图3是本发明一实施例中的镜头切分方法的流程图。

图4是本发明一实施例中的镜头切分装置的结构示意图。

图5是本发明一实施例中的镜头切分装置的结构示意图。

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明实施例，并不用于限定本发明实施例。

如图1所示为本发明实施例中的镜头切分方法的流程图，该方法包括：

步骤S11：使用灰度特征对视频进行镜头切分获得第一镜头切分结果。

步骤S12：使用非灰度特征对所述视频进行镜头切分获得第二镜头切分结果。

步骤S13：当所述第一镜头切分结果与所述第二镜头切分结果一致时，确认镜头切分为第一镜头切分结果。

本发明实施例中，对同一视频分别采用灰度特征和非灰度特征来进行镜头切分，只有当两种切分方式切分出的镜头一致时，才确认镜头切分为第一镜头切分结果(或第二镜头切分结果，因为两者一致)。单独使用灰度特征进行的镜头切分，不可避免地会受到例如闪光灯的影响，闪光灯会影响到镜头图片的像素灰度，从而造成错误的切分。本发明中，再同时使用非灰度特征对视频进行切分，只有当两种切分方式切分出的镜头一致时，才确认镜头切分的结果。因此，本发明可以有效地保证镜头切分的正确性。

如图2所示为本发明另一实施例提供的镜头切分方法的流程图，在该实施例中，包括以下步骤：

步骤S21：使用灰度特征对视频进行镜头切分获得第一镜头切分结果。

例如，使用灰度特征对视频进行切分时，相邻图像的相似性超过一定阈值就算是相同的镜头。

步骤S22：使用非灰度特征对所述视频进行镜头切分获得第二镜头切分结果。

非灰度特征例如是LBP(Local Binary Pattern，局部二值模式)，LBP是一种用来描述图像局部纹理特征的算子，它具有旋转不变性和灰度不变性等显著的优点。

应当注意的是，上述步骤S21和步骤S22的执行顺序不限于此，还可以同时执行。

步骤S23：判断第一镜头切分结果和第二镜头切分结果是否一致；若是，则执行步骤S29；若否，则执行步骤S24。

步骤S24：获取第一镜头切分结果的第一置信度和第二镜头切分结果的第二置信度。

置信度就是镜头切分结果的可靠度，一般使用相似值来衡量，当不同镜头的相邻图片之间的相似度很高(高于某一个阈值)，就认为这两个镜头是相似的，应该是属于一个镜头的，不应该切分成两个镜头，此时置信度就较低；如果相似度很低(达不到相似度阈值)，那么说明这两个镜头是不同的镜头，此时置信度较高。

步骤S25：获取为使用灰度特征进行镜头切分和使用非灰度特征进行镜头切分设置的权重。

在本实施例中，可以将使用非灰度特征进行镜头切分的权重设置得相对高些。因为，非灰度特征不会受到闪光灯的影响。

步骤S26：根据第一置信度、第二置信度以及权重，计算第一镜头切分结果和第二镜头切分结果的分数(用于对切分结果可靠度的衡量)。

例如，第一置信度为X1，第二置信度为X2，使用灰度特征进行镜头切分的权重为W1，使用非灰度特征进行镜头切分的权重为W2：

第一镜头切分结果的分数Q1＝X1×W1；

第二镜头切分结果的分数Q2＝X2×W2。

步骤S27：比较第一镜头切分结果和第二镜头切分结果的分数。

即比较上述的Q1和Q2值。

步骤S28：确认镜头切分为第一镜头切分结果和第二镜头切分结果中分数较高的一个。

步骤S29：确认镜头切分为第一镜头切分结果。

在本实施例中，当使用两种方式切分的镜头不一致时，采用计算镜头的分数的方式来确定哪个镜头是切分正确的。非灰度特征切分能够在有闪光灯的情况下替代灰度图发挥作用进行镜头切分。

如图3所示为本发明另一实施例提供的镜头切分方法的流程图，在该实施例中，包括以下步骤：

步骤S31：使用灰度特征对视频进行镜头切分获得第一镜头切分结果。

步骤S32：使用非灰度特征对所述视频进行镜头切分获得第二镜头切分结果。

步骤S33：判断第一镜头切分结果和第二镜头切分结果是否一致；若是，则执行步骤S36；若否，则执行步骤S34。

步骤S34：对相邻的不同镜头之间的相邻图像进行人脸检测。

步骤S35：根据相邻的不同镜头之间的相邻图像具有不同的人脸，来确认镜头切分为第一镜头切分结果和第二镜头切分结果中的一个。

步骤S36：确认镜头切分为第一镜头切分结果。

本实施例中，考虑到例如在新闻中，闪光灯密集的时段，一般都是有重要领导人出现的时候，所以人脸检测也可以辅助判断是否同一个人出现，从而减少因闪光灯引起的错误的切分问题。当相邻图像中是不同的人脸时，确定可以以此进行镜头切分，当相邻图像中是同一个人脸时，确认此处应属于同一个镜头。因此，可以分别在第一镜头切分结果中和第二镜头切分结果中，以这个标准来判断第一镜头切分结果和第二镜头切分结果哪一个正确。

如图4所示，本发明实施例还提出一种数据处理装置，包括：

第一切分模块401，用于使用灰度特征对视频进行镜头切分获得第一镜头切分结果；

第二切分模块402，用于使用非灰度特征对所述视频进行镜头切分获得第二镜头切分结果；

第一确认模块403，用于当所述第一镜头切分结果与所述第二镜头切分结果一致时，确认镜头切分为第一镜头切分结果。

如图5所示，所述装置还包括：

获取模块404，用于当所述第一镜头切分结果与第二镜头切分结果不一致时，获取第一镜头切分结果的第一置信度和第二镜头切分结果的第二置信度；

第二确认模块405，用于根据所述第一置信度、第二置信度以及分别为使用灰度特征进行镜头切分和使用非灰度特征进行镜头切分设置的权重，确认镜头切分为第一镜头切分结果和第二镜头切分结果中的一个。

所述非灰度特征包括局部二值模式特征。

如图5所示，所述装置还包括：

检测模块406，用于当所述第一镜头切分结果与第二镜头切分结果不一致时，对所述第二镜头切分结果进行人脸检测；

第三确认模块407，用于根据相邻的不同镜头之间的相邻图像具有不同的人脸，来确认镜头切分为第一镜头切分结果和第二镜头切分结果中的一个。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。