专利名称：一种电视节目中挂角广告的提取方法及装置的制作方法
技术领域：
本发明涉及图像处理领域，尤其涉及一种电视节目中挂角广告的提取方法和装置。
背景技术：
近年来，电视已经遍布千家万户，看电视成为了人们日常消遣、娱乐所必不可少的方式。随着电视广播技术的迅速发展，电视频道以及相应的电视节目的数量出现了爆炸式的增长。在播放电视节目的同时，在电视画面周边插播广告进行宣传的方法也已经被很多电视频道所采用。现有电视画面的广告检测方法中，由于挂角广告与台标同为画面元素，故常 采用对台标的检测方法提取挂角广告。现有技术通常采用基于全局匹配的识别方法来识别台标，这种识别方法虽然对大部分台标的识别效果还可以，但挂角广告在电视画面中的位置、形状、色彩、亮度等信息各异，故对挂角广告未必适用。具体的，现在常用的台标检测方法有帧差法和模型统计法。帧差法通过分析图像帧进行广告检测，由于台标区域相邻两帧的颜色相对不变，背景区域的颜色相对变化较大，因此在台标区域差值较小，非台标区域差值大，利用阈值即可将台标和非台标区域分割开来。但该方法对不透明的台标检测效果较好，而对挂角广告之类的半透明或动画等类型的台标检测效果较差，且容易受图像噪声的影响。模型统计法也是建立在帧差法的基础上，由于台标区域此较固定，非台标区域变化较大，一般通过帧间差统计各像素根据时间变化的统计模型，并根据统计模型判断新的像素是否属于台标。但挂角广告的样式繁多，对新样本无法确定，没有统一的模板。因此，电视画面中的挂角广告提取难度较大，在视频进行二次利用时，往往无法有效地就挂角广告区域填充像素，形成无广告的视频资源。
发明内容
本发明的实施例提供了一种电视节目中挂角广告的提取方法和装置，解决传统的提取方式对挂角广告效果较差的问题。为达到上述目的，采用如下技术方案一种视频中挂角广告的提取方法，包括分析检测视频中的各关键帧，根据关键帧提取视频中的稳定区域；对所述稳定区域进行跟踪，检测所述稳定区域时序上的变化情况；根据所述变化情况从所述稳定区域中提取挂角广告。优选的，所述分析检测视频中的各关键帧时，基于视频内容对视频进行分析，将视频分割为各镜头；分别对每个镜头中的各图像帧进行提取，得到对应的各关键帧。优选的，所述基于视频内容对视频进行分析时，
提取视频中各图像帧之间的帧间差，从而提取中视频中的转换边界；根据所述转换边界将视频进行分割，得到各镜头。优选的，所述对每个镜头中的各图像帧进行提取时，按序列读入镜头中的各图像帧，将各图像帧由RGB颜色空间分别转换为HSV空间；分别计算相邻两图像帧HSV颜色空间的相似度；当HSV颜色空间的相似度大于相似阈值时,将对应的图像帧作为所述镜头对应的关键中贞。优选的，所述根据关键帧提取视频中的稳定区域时， 将各关键巾贞分别转化为売度图像，统计各売度图像中每一像素在时序上最大売度值和最小亮度值，统计亮度变化稳定的区域作为视频中的稳定区域。优选的，所述将各关键帧分别转化为亮度图像前，根据既定阈值去除各关键帧边缘的黑边。优选的，所述检测所述稳定区域时序上的变化情况时，根据稳定区域中亮度值时序上的变化阈值调整稳定区域的大小。本发明还公开了一种视频中挂角广告的提取装置，包括分析单元，用于分析检测视频中的各关键帧，根据关键帧提取视频中的稳定区域；跟踪单元，用于对所述稳定区域进行跟踪，检测所述稳定区域时序上的变化情况；提取单元，用于根据所述变化情况从所述稳定区域中提取挂角广告。优选的，所述分析单元分析检测视频中的各关键帧时，基于视频内容对视频进行分析，将视频分割为各镜头；分别对每个镜头中的各图像帧进行提取，得到对应的各关键帧。优选的，所述跟踪单元检测所述稳定区域时序上的变化情况时，根据稳定区域中亮度值时序上的变化阈值调整稳定区域的大小。本发明实施例提供的一种电视节目中挂角广告的提取方法和装置，通过根据视频中的各镜头分别提取各关键巾贞，并对关键巾贞中的稳定区域进行跟踪，从而提取出挂角广告。本发明分别在各镜头所属的场景中分别对关键帧进行分析、跟踪，不但不易受图像噪声的影响，而且充分适应了挂角广告在电视画面中的位置、形状、色彩、亮度等的多样性特点，从而将电视画面中的挂角广告有效提取，进而将挂角广告区域填充像素，制作无广告的视频资源。
图I为本发明实施例一提供的一种电视节目中挂角广告的提取方法的流程图；图2为本发明实施例一提供的一种电视节目中挂角广告的提取方法中分析检测视频中的各关键帧时的流程图；图3为本发明实施例一提供的一种电视节目中挂角广告的提取方法中对视频进行分析时的流程图4为本发明实施例一提供的一种电视节目中挂角广告的提取方法中对每个镜头中的各图像帧进行提取时的流程图；图5为本发明实施例二提供的一种电视节目中挂角广告的提取装置的模块结构图。
具体实施例方式下面结合附图对本发明实施例一种电视节目中挂角广告的提取方法和装置进行详细描述。在过去的二十年时间里，电视广告发展很快，出现了各式各样的广告，有的广告喜闻乐见，但有的广告却招致诟病，其中挂角广告就属于招致诟病的一类。本方面主要解决电视画面中挂角广告提取的问题。挂角广告主要存在中国大陆的电视节目中，国外的电视节目中相对较少发现。现有电视画面往往将台标或logo提取完 毕后填充像素，使电视画面中自动消除台标。由于挂角广告主要位于电视画面的边角位置，其位置大小相对固定，且有一定的持续时间，挂角广告一般色彩鲜艳，且大部分为不透明的logo。本发明即将挂角广告作为一种特殊的logo，实现挂角广告的提取。本发明公开了一种视频中挂角广告的提取方法，如图I所示，包括步骤10、分析检测视频中的各关键帧，根据关键帧提取视频中的稳定区域；在视频分析领域中，镜头是组成视频的基本单元和进行视频序列分析的基础。镜头分割的好坏直接影响到最终关键帧的提取结果。例如，视频通常跨若干镜头，同一组镜头内，图像内容变化很小。因此通过镜头分割，可提供一组广告的持续镜头数和关键帧的信肩、O优选的，所述分析检测视频中的各关键帧时，如图2所示，包括如下步骤步骤101、基于视频内容对视频进行分析，将视频分割为各镜头；优选的，如图3所示，所述基于视频内容对视频进行分析时，步骤101a、提取视频中各图像帧之间的帧间差，从而提取中视频中的转换边界；本实施例中，采用滑动窗口对视频中的相邻帧进行图像检索，根据相邻帧图像变化和差异性统计相邻帧之间的帧间差。将相邻帧对应的颜色局部累积直方图与图像帧的纹理相结合，分别在相邻帧中进行扫描，从而统计出相邻帧的帧间差。从各图像帧之间的帧间差中按梯度阈值统计出帧间差较大时对应的图像帧,则所述图像帧对应视频中的转换边界。步骤101b、根据所述转换边界将视频进行分割，得到各镜头。按转换边界将视频进行分割，相邻两转换边界对应的视频内容为镜头。步骤102、分别对每个镜头中的各图像帧进行提取，得到对应的各关键帧。优选的，如图4所示，所述对每个镜头中的各图像帧进行提取时，步骤102a、按序列读入镜头中的各图像帧，将各图像帧由RGB颜色空间分别转换为HSV空间；步骤102b、分别计算相邻两图像帧HSV颜色空间的相似度；步骤102c、当HSV颜色空间的相似度大于相似阈值时，将对应的图像帧作为镜头对应的关键帧。
本实施例中，对每个镜头中的各图像帧进行提取时，对每个镜头提取一帧图像作为关键帧，用于稳定区域判断的初始化条件。采用基于颜色直方图的方法进行镜头分割，即从第I帧关键帧开始，采用循环过程完成以下步骤I.读入第i帧图像帧pk，将第i帧图像帧pk由RGB颜色空间转换为HSV颜色空间；2.在HSV颜色空间中，依据颜色空间HSV中H，S通道分别计算HS空间颜色直方图—t ；3.计算当前图像帧直方图/^《和上一图像帧直方图的相似度Sim(k，k_l)
[
权利要求
1.一种视频中挂角广告的提取方法，其特征在于，包括 分析检测视频中的各关键帧，根据关键帧提取视频中的稳定区域； 对所述稳定区域进行跟踪，检测所述稳定区域时序上的变化情况； 根据所述变化情况从所述稳定区域中提取挂角广告。
2.根据权利要求I所述的方法，其特征在于所述分析检测视频中的各关键帧时， 基于视频内容对视频进行分析，将视频分割为各镜头； 分别对每个镜头中的各图像帧进行提取，得到对应的各关键帧。
3.根据权利要求2所述的方法，其特征在于所述基于视频内容对视频进行分析时， 提取视频中各图像帧之间的帧间差，从而提取中视频中的转换边界； 根据所述转换边界将视频进行分割，得到各镜头。
4.根据权利要求2所述的方法，其特征在于所述对每个镜头中的各图像帧进行提取时， 按序列读入镜头中的各图像帧，将各图像帧由RGB颜色空间分别转换为HSV空间； 分别计算相邻两图像帧HSV颜色空间的相似度； 当HSV颜色空间的相似度大于相似阈值时，将对应的图像帧作为所述镜头对应的关键帧。
5.根据权利要求I所述的方法，其特征在于所述根据关键帧提取视频中的稳定区域时， 将各关键帧分别转化为亮度图像，统计各亮度图像中每一像素在时序上最大亮度值和最小亮度值，统计亮度变化稳定的区域作为视频中的稳定区域。
6.根据权利要求5所述的方法，其特征在于所述将各关键帧分别转化为亮度图像前，根据既定阈值去除各关键帧边缘的黑边。
7.根据权利要求I或5所述的方法，其特征在于所述检测所述稳定区域时序上的变化情况时，根据稳定区域中亮度值时序上的变化阈值调整稳定区域的大小。
8.一种视频中挂角广告的提取装置，其特征在于，包括 分析单元，用于分析检测视频中的各关键帧，根据关键帧提取视频中的稳定区域； 跟踪单元，用于对所述稳定区域进行跟踪，检测所述稳定区域时序上的变化情况； 提取单元，用于根据所述变化情况从所述稳定区域中提取挂角广告。
9.根据权利要求8所述的装置，其特征在于所述分析单元分析检测视频中的各关键帧时， 基于视频内容对视频进行分析，将视频分割为各镜头； 分别对每个镜头中的各图像帧进行提取，得到对应的各关键帧。
10.根据权利要求8所述的装置，其特征在于所述跟踪单元检测所述稳定区域时序上的变化情况时，根据稳定区域中亮度值时序上的变化阈值调整稳定区域的大小。
全文摘要
本发明实施例公开了一种电视节目中挂角广告的提取方法和装置，属于图像处理领域。方法包括分析检测视频中的各关键帧，根据关键帧提取视频中的稳定区域；对所述稳定区域进行跟踪，检测所述稳定区域时序上的变化情况；根据所述变化情况从所述稳定区域中提取挂角广告。本发明通过分别在各镜头所属的场景中分别对关键帧进行分析、跟踪，不但不易受图像噪声的影响，而且充分适应了挂角广告在电视画面中的位置、形状、色彩、亮度等的多样性特点，从而将电视画面中的挂角广告有效提取，进而将挂角广告区域填充像素，制作无广告的视频资源。
文档编号G06T7/00GK102831611SQ201210297749
公开日2012年12月19日 申请日期2012年8月21日 优先权日2012年8月21日
发明者徐洪伟 申请人:北京捷成世纪科技股份有限公司