专利名称：用于显示摘要视频的方法和设备的制作方法
技术领域：
在此公开了用于显示摘要视频的方法和设备。
背景技术：
通常，数字拍摄设备(诸如，数码相机或摄像机)在显示屏幕上以再现模式显示存储在记录介质中的图像和视频。此外，包括捕获的图像和视频的多条数据可相互相关。由于大规模多媒体数据库的增加以及通信和数字媒体处理技术的发展，已出现了 很多视频，因此通过基于视频的订购的摘要信息的搜索服务向用户提供便利和满足的努力在增加。但是，直到现在，用户不得不通过直接选择在视频中的合适场景或图像来订购视频摘要信息。最近，由于已经开发了与视频相关各种类型的交易，所以自动分析大量视频的需要在增加，因此广泛地进行研究以解决这种问题。订购视频的方法的示例包括视频浏览(skim)方法、突出显示方法和视频概括方法。对于突出显示方法，从视频选择基于特定事件的感兴趣部分并订购感兴趣部分。对于视频概括方法，主要选择重要内容和关于视频的结构信息，并且一般以主静止图像的关键帧的序列的形式表示视频概括的结果。直到现在，对于视频订购的大部分研究目的在于产生视频摘要信息。通过关键帧表示的视频摘要允许用户一眼确定整个视频内容，并且包括关键帧功能的场景或快照作为入口。因此，视频摘要操作可被理解为用于选择最优关键帧的操作或用于选择最优关键帧所位于的片段的操作，并且通常可将视觉效果(诸如，颜色、移动等)用作选择关键帧的重要必要条件。
发明内容
本发明的各种实施例提供了一种用于显示摘要视频的方法和设备，其中，可根据文件属性自动地确定各种效果，并且可自动地将视频概括为具有所述各种效果并显示视频摘要。根据本发明的实施例，提供了一种显示摘要视频的方法，所述方法包括如下步骤选择包括视频或图像的文件；根据选择的文件的属性确定不同效果，并显示应用了确定的效果的摘要视频，其中，文件的属性是关于包括在文件中的相关图像的信息。相关图像可以是在视频的记录期间捕获的图像。关于相关图像的信息可包括关于捕获相关图像的时间的信息。关于相关图像的信息可包括相关图像的数量。关于相关图像的信息可存储在视频文件的头中。所述方法还可包括如下步骤当选择的文件是图像文件时，产生根据图像的拍摄类型应用了不同效果的摘要视频。拍摄类型可以是从包括全景拍摄类型、连续拍摄类型和高速拍摄类型的组中选择的任意一个。所述方法还可包括如下步骤当选择的文件是视频且视频中不存在相关图像时，产生根据视频的再现时间应用了不同效果的摘要视频。当选择的文件是视频，包括在视频中的相关图像的数量等于或多于第一阈值，并且初始相关图像与最终相关图像之间的时间间隔等于或大于第二阈值时，以视频被显示在显示屏幕的第一区域上，相关图像在沿一个方向滑动的同时被显示在显示屏幕的第二区域上的方式，产生摘要视频。当初始相关图像与最终相关图像之间的时间间隔小于第二阈值时，以视频被显示 在显示屏幕上，并且相关图像在相关图像被捕获的时间被弹出以与显示的视频重叠，然后消失的方式，产生摘要视频。当选择的文件是视频，且包括在视频中的相关图像的数量等于或多于第二阈值且小于第一阈值时，以视频被显示在显示屏幕上，并且相关图像在相关图像被捕获的时间被弹出以与显示的视频重叠，然后消失的方式，产生摘要视频。所述方法还可包括如下步骤输入摘要视频的主题；产生根据输入的主题应用了预定效果的摘要视频。所述方法还可包括如下步骤基于关于相关图像的信息，从视频提取关键片段；使用提取的关键片段和确定的效果，产生摘要视频。所述方法还可包括如下步骤基于关于捕获每个相关图像的时间的信息，从视频提取关键片段；根据包括相关图像的数量和相关图像之间的时间间隔的组中选择的至少一个，确定将被应用于摘要视频的效果；使用提取的关键片段和确定的效果，产生摘要视频。根据本发明的另一实施例，提供了一种产生摘要视频的方法，所述方法包括如下步骤接收视频并分析输入视频的视频文件的属性；根据所述属性从视频提取关键片段；根据所述属性确定不同的效果；使用提取的关键片段和确定的效果，产生摘要视频，其中，视频文件的属性是关于包括在视频文件中的相关图像的信息。相关图像可以是在视频的记录期间捕获的图像。关于相关图像的信息可包括从包括关于相关图像被捕获的时间的信息和相关图像的数量的组中选择的至少一个。关于相关图像的信息可存储在视频文件的头中。根据本发明的另一实施例，提供了一种摘要视频显示设备，包括选择单元，用于选择包括视频或图像的文件；控制器，用于根据选择的文件的属性确定不同效果，并显示应用了确定的效果的摘要视频，其中，文件的属性是关于包括在文件中的相关图像的信息。关于相关图像的信息可存储在视频的视频文件的头中。控制器可包括文件属性确定单元，用于确定选择的文件的属性；提取单元，用于在选择的文件是视频时提取关于与视频相关的图像的信息；效果确定单元，用于基于确定的文件的属性和关于相关图像的信息，确定将被应用于摘要视频的效果；摘要视频产生单元，用于根据确定的效果产生摘要视频。提取单元可基于相关图像的时间信息提取视频的关键片段。
通过下面结合附图对本发明示例性实施例进行的详细描述，本发明的上述和其他特点和优点将会变得更清楚，其中图1是根据本发明的实施例的作为显示设备的示例的数码相机的示意框图；图2是图1中示出的数字信号处理器的示意框图；图3是图2中示出的分析单元的示意框图；图4是用于描述根据本发明的另一实施例的产生摘要视频的流程图；图5是用于描述根据本发明的另一实施例的根据文件属性应用效果的方法的流程图；图6是用于描述根据本发明的另一实施例的根据文件属性应用效果的方法的流程图；图7是用于描述根据本发明的另一实施例的根据文件属性应用效果的方法的流程图；图8至图9E是用于描述根据本发明的另一实施例的应用了宝丽来效果的摘要视频的示图；图10至图1lF是用于描述根据本发明的另一实施例的应用了每日故事效果的摘要视频的示图。
具体实施例方式以下，将参照附图详细描述本发明的各种实施例。但是，本发明不限于此，应该理解，在不脱离权利要求的精神和范围的情况下，可进行形式和细节的各种修改。即，仅为了 解释本发明的示例性实施例而提供了特定结构或功能的描述。在以下描述中，当确定关于相关公知功能和结构的详细描述使本发明不清楚时，在此将被省略详细描述。在此使用的诸如“第一”和“第二”的术语仅描述各种构成元件，但是这些构成元件不应被这些术语所限制。仅为了将一个构成元件与另一构成元件区分的目的而使用上述术语。在本说明书中使用的术语用于解释特定示例性实施例，而不是用于限制本发明。因此，除非在上下文中另外明确指出，否则在本说明书中的单数形式的表述包括复数形式的表述。此外，诸如“包括”或“包含”的术语可被理解为指示特定特征、数量、步骤、操作、构成元件或它们的组合，但是不应被理解为排除一个或多个其它特征、数量、步骤、操作、构成元件或它们的组合的存在或添加的可能性。附图中的相同标号表示相似元件。在此将省略相似元件的多余描述。如这里使用的，术语“和/或”包括相关所列项目的一个或多个的任意或所有组合。当诸如“至少一个”的表述在列出的元素之后时，所述表述修饰所有列出的元素且不修饰列出的单个元素。图1是根据示例性实施例的作为显示设备的示例的数码相机100的示意框图。以下作为根据本发明的实施例的显示设备的示例而描述数码相机100。但是，所述显示设备不限于图1的数码相机100，并且所述显示设备不仅可以应用于便携式设备(诸如，相机电话、个人数字助理(PDA)、便携式多媒体播放器(PMP)或摄像机)，还可以应用于家用电器(诸如，电视机(TV)或具有用于显示所有类型的内容的显示功能的监视器)。根据本实施例的数码相机100可包括镜头单元110、镜头单元驱动单元111、光圈112、光圈驱动单元113、拍摄装置115、拍摄装置控制器116、模拟信号处理器120、程序存储单元130、缓冲存储单元140、数据存储单元150、显示驱动单元162、显示单元160、数字信号处理器(DSP) 200和操作单元170。镜头单元110、镜头单元驱动单元111、光圈112、光圈驱动单元113、拍摄装置115、拍摄装置控制器116、模拟信号处理器120可被统称为拍摄单
J Li o镜头单元110对入射光进行聚焦。镜头单元110包括用于根据焦距控制视角增加或减小的变焦镜头和用于调整对象的焦点的聚焦镜头。变焦镜头和聚焦镜头中的每一个镜头可以由一个透镜或一组多个透镜形成。光圈112根据其打开的程度调整入射光的量。镜头单元驱动单元111和光圈驱动单元113从DSP 200接收控制信号，并分别驱动透镜单元110和光圈112。镜头单元驱动单元111通过控制透镜的位置来调整焦距，以执 行自动聚焦、变焦和焦点改变的操作。具体地讲，光圈驱动单元113通过控制f 数或光圈的值来调整光圈112的打开程度，以执行自动聚焦、自动曝光校正、焦点改变和景深调整的操作。通过镜头单元110的光信号在拍摄装置115的光接收表面上形成对象的图像。拍摄装置115可使用电荷耦合器件(CCD)、互补金属氧化物半导体图像传感器(CIS)或用于将光信号转换成电信号的高速图像传感器。可由拍摄装置控制器116来调整拍摄装置115的敏感度。拍摄装置控制器116可根据通过实时输入的图像信号自动产生的控制信号或通过用户的操作手动输入的控制信号，来控制拍摄装置115。拍摄装置115的曝光时间由快门(未示出)调整。所述快门包括用于通过移动幕帘来调整光的入射的机械快门和用于通过将电信号施加到拍摄装置115来控制曝光的电子快门。模拟信号处理器120对由拍摄装置115施加的模拟信号执行降噪处理、增益控制、波形整形和模数转换处理。操作单元170用于由例如用户输入外部控制信号。操作单元170可包括快门释放按钮，用于输入快门释放信号，该快门释放信号用于通过将拍摄装置115曝光预定时间来捕获图像；电源按钮，用于输入用于控制电源的接通/断开的控制信号；广角变焦按钮和长焦变焦按钮，用于根据输入来增加或减小视角；各种功能按钮，用于选择模式(诸如，文本输入模式、拍摄模式、再现模式、白平衡设置模式或曝光设置模式)。操作单元170可具有如上所述的各种按钮，但是本发明不限于此。例如，可以以各种方式(诸如，通过使用可由用户使用以输入数据的键盘、触摸垫、触摸屏或遥控器)来实现操作单元170。在当前实施例中，用户通过包括在显示单元160中的触摸垫或触摸屏来输入数据显示操作。当前实施例的数码相机100通过基于关于在视频的记录期间捕获静止图像的时间的信息提取视频的关键片段，来产生摘要视频文件。数码相机110可在视频的记录期间捕获静止图像。例如，包括在数码相机100中的视频拍摄按钮(例如，REC按钮)被按压，以开始视频的记录，并且当在视频的记录期间，捕获将被记录为静止图像的场景时，静止图像拍摄按钮(例如，快门释放按钮)被按压，以捕获静止图像。例如，如果在记录视频一分钟时捕获5个静止图像，则产生一分钟视频文件和5个静止图像文件。例如，视频文件以各种视频文件格式(例如，MPEG-4部分14 (MP4)文件格式、视窗媒体视频(WMV)文件格式等)中的任意视频文件格式被存储在记录介质(诸如安全数码(SD)卡)中，静止图像文件以联合图像专家组(JPEG)文件格式被存储在记录介质中。在当前实施例中，为了产生和显示摘要视频，关于与记录的视频相关的静止图像的信息被存储在视频文件的头中。即，与关于捕获静止图像的时间的信息对应的关于静止图像文件的信息作为元数据被存储在视频文件的头中。例如，对于MP4文件,可使用自由标签(free tag)。此外，当前实施例的数码相机100可再现视频和静止图像。为此，数码相机100可包括视频解码器和静止图像解码器，并且还可包括用于产生摘要视频的视频编码器。数码相机100包括程序存储单元130，用于存储程序，诸如用于驱动数码相机100的操作系统或应用系统；缓冲存储单元140，用于临时存储执行操作所需的数据或结果数据；数据存储单元150，用于存储程序所需的各种信息，诸如具有图像信号的文件。数码相机100包括用于显示数码相机100的操作状态或由数码相机100捕获的静止图像或视频的显示单元160。显示单元160可将视觉信息和听觉信息提供给用户。为了提供视觉信息，显示单元160可包括例如液晶显示器(LCD)面板或有机 发光显示器(OLED)面板。显示器驱动单元162将驱动信号提供给显示单元160。数码相机100包括DSP 200, DSP 200处理输入图像信号并根据处理的输入图像信号或外部输入信号控制每个元件。DSP 200可降低输入图像数据的噪声并执行用于提高图像品质的图像信号处理(诸如，伽马校正、滤色器阵列插值、色彩矩阵、色彩校正或色彩增强)。此外，DSP 200可通过压缩图像数据来产生图像文件(其中，所述图像数据通过执行用于提高图像品质的图像信号处理而产生)，或者从图像文件恢复图像数据。图像压缩格式可以是可逆(无损)格式或不可逆(有损)格式。压缩的数据可被存储到数据存储单元150中。此外，DSP 200可功能性地执行清晰度处理、色彩处理、模糊处理、边缘增强处理、图像插值处理、图像识别处理或图像效果处理。面部识别处理或场景识别处理可作为图像识别处理而执行。例如，还可执行亮度等级控制、色彩校正、对比度控制、轮廓增强控制、屏幕划分处理或字符图像产生与合成处理。此外，DSP 200可通过执行存储在程序存储单元130中的程序或使用单独的模块来产生用于控制自动聚焦、变焦、焦点改变或自动曝光校正的控制信号，并且将产生的控制信号提供给镜头单元驱动单元111、光圈驱动单元113和拍摄装置控制器116，从而可在整体上控制设置在数码相机100中的元件(诸如，快门或闪光灯)的操作。下面，将参照图2和图3来详细描述图1中示出的DSP 200。参照图2，DSP 200包括分析单元201和摘要视频产生单元202。这里，DSP 200可被理解为具有与权利要求中的控制器相同的含义。用户选择在DSP200中的包括视频或图像的文件。这里，用户可通过操作单元170选择将被概括的视频或静止图像。此外，在DSP200中，视频或静止图像不是由用户手动选择，而是可选择任意或自动确定的视频或静止图像。DSP 200根据文件属性确定不同效果。这里，文件属性包括关于选择的文件是视频还是静止图像的信息。此外，当选择的文件是视频时，文件属性可包括关于是否存在相关图像的信息、关于相关图像的数量的信息和关于相关图像的时间信息。此外，当不存在相关图像时，文件属性可以是视频的长度或视频的再现时间。在这方面，相关图像可以是在视频的记录期间捕获的静止图像。文件属性可包括关于是否存在视频的记录期间捕获的静止图像的信息、关于静止图像的数量的信息和关于捕获每个静止图像的时间的信息。可从包括在视频文件的头中的关于相关图像的信息分析这种文件属性。此外，当选择的文件是静止图像时，文件属性包括静止图像的拍摄类型或静止图像的相关图像。例如，拍摄类型包括全景拍摄类型、高速拍摄类型和连续拍摄类型。但是，本发明不限于此，可使用各种拍摄类型中的任意拍摄类型。可从关于静止图像的图像捕获信息或可交换图像文件格式(Exif)分析关于拍摄类型的信息。DSP 200分析文件属性并根据文件属性应用不同效果。这里，效果可包括各种效果，诸如，混合效果(hybrid effect)、普通视频效果、全景图像效果、文件夹图像效果、单一图像效果等，并且将在稍后描述摘要视频效果。视频或静止图像在分析单元201中由用户选择，以产生摘要视频，并且分析单元201分析选择的视频或静止图像。这里，视频或静止图像的分析表示针对每个文件的分析。例如，对于视频，分析单元201分析视频文件的头，以确定选择的视频是否具有相关图像、相关图像的数量、初始图像与最终图像之间的时间间隔，并且如果没有相关图像，则确定视 频再现时间是短还是长。参照图3，分析单元201包括文件属性确定单元301、提取单元302和效果确定单元 303。文件属性确定单元301确定输入或选择的视频或静止图像的文件属性。可通过分析输入文件的头来确定文件属性。文件属性包括关于输入图像是视频还是静止图像的信息。此外，当输入图像是视频时，文件属性可包括关于是否存在相关图像的信息、关于相关图像的数量的信息和关于相关图像的时间信息。当输入图像是静止图像时，文件属性可包括关于拍摄类型是全景拍摄类型，高速拍摄类型，还是连续拍摄类型的信息。提取单元302提取关于输入视频和相关图像的信息。此外，提取单元302基于相关图像的时间信息提取视频的关键片段。这里，相关图像可以是在视频的记录期间捕获的静止图像，并且时间信息包括捕获静止图像的时间。例如，当视频是十分钟视频时，如果在一分钟、五分钟和八分钟处捕获相关图像，则对于与一分钟对应的相关图像之前和之后的三十秒提取关键片段(即，提取总共一分钟的关键片段)，对于与五分钟对应的相关图像之前和之后的三十秒提取关键片段(即，提取另一个一分钟的关键片段)，以及对于与八分钟对应的相关图像之前和之后的三十秒提取关键片段(即，提取另一个一分钟的关键片段)。因此，摘要视频的时间长度可被概括为三分钟。这里，已经描述了 基于关于捕获相关图像的时间的信息通过区分相关图像之前和之后的预定时间来提取视频的关键片段。但是，本发明不限于此，可使用提取片段的另一方法。效果确定单元303基于文件属性和关于相关图像的信息，确定将被应用到摘要视频的效果。例如，当存在相关图像时，效果确定单元303确定混合效果。当存在等于或多于预定数量的相关图像并且初始图像与最终图像之间的时间间隔等于或大于预定时间段时，效果确定单元303确定每日故事效果(daily story effect) 当存在等于或多于预定数量的相关图像并且初始图像与最终图像之间的时间间隔小于预定时间段时，效果确定单元303确定宝丽来效果(Polaroid effect)。当存在小于预定数量的相关图像时,效果确定单元303也确定宝丽来效果。当不存在相关图像时，效果确定单元303确定视频效果。此外，当输入图像不是视频时，如果静止图像的拍摄类型是全景拍摄类型，则效果确定单元303确定全景效果。如果静止图像的拍摄类型是高速/连续拍摄类型，则效果确定单元303确定文件夹图像效果。如果静止图像的拍摄类型是普通拍摄类型，则效果确定单元303确定单一图像效果。这里，虽然上述效果已作为示例而被描述，但是可根据文件属性和关于相关图像的信息使用各种其它效果。返回参照图2，摘要视频产生单元202根据由效果确定单元303确定的效果产生摘要视频。摘要视频产生单元202分析将被输入的文件属性并产生根据分析的结果应用了不同效果的摘要视频。这里，摘要视频可包括多个静止图像，或包括通过提取视频的关键片段并组合所提取的关键片段而产生的视频。摘要视频产生单元202可包括视频解码器、视频编码器和静止图像解码器。视频解码器从关于将被输入的视频的提取的关键片段的信息解码出视频，静止图像解码器从将被输入的静止图像解码出静止图像。视频编码器对通过使用根据关于视频的提取的关键片段的信息解码的视频数据、关于根据文件属性确定的效果的应用的效果信息数据和/或解码的静止图像数据产生的摘要视频数据进行编码。例如，视频解码器将以压缩格式(诸如，H. 264、MPEG-4或MPEG-2)编码的视频比 特流解码为未压缩的YUV/RGB视频帧格式。视频编码器将YUV/RGB视频帧格式实时编码为压缩格式(诸如，H. 264、MPEG-4或MPEG-2)。静止图像解码器将编码的JPEG图像解码为未压缩的YUV/RGB图像。这里，虽然已经描述了上述编码器和解码器被实现为DSP 200中的软件，但是上述编码器和解码器可被实现为硬件。图4是用于描述根据本发明另一实施例的产生摘要视频的方法的流程图。参照图4，在操作400，图像和/或视频被输入。这里，用户可一起选择图像和视频或单独选择图像和视频。此外，可选择多个图像或多个视频。这里，可由用户手动输入图像和视频，或可将图像和视频自动地设置为输入。在操作402，将输入图像或输入视频的文件划分为各种种类。这里，可通过分析将被输入的文件属性来划分种类。文件属性可包括关于输入文件是视频还是静止图像的信息。当输入文件是视频时，文件属性可包括关于是否存在相关图像的信息、关于相关图像的数量的信息和关于相关图像的时间信息。当输入图像是静止图像时，文件属性可包括关于静止图像的拍摄类型是全景拍摄类型，高速拍摄类型，还是连续拍摄类型的信息。在操作404，由用户输入主题。这里，主题表示将被概括的摘要视频的整体氛围。例如，主题可包括高兴、自然、悲伤等。在操作406，预定效果被选择。选择适合于在操作404中选择的主题的摘要视频的效果。在操作408，映射与选择的效果对应的文件。这里，确定应用选择的效果的视频或图像。这里，在操作404至408，作为默认提供主题的选择以及根据选择的主题的效果的应用，以产生摘要视频，但是可排除操作404至408来产生摘要视频。在操作410，确定在操作400输入的文件是否是视频。如果输入文件不是视频，则在操作412，产生将选择的效果应用到图像文件的摘要视频。这里，存在多个图像文件，并且通过将在操作404至408确定的效果应用到图像文件来产生摘要视频。此外，由用户输入摘要视频的长度或再现时间和摘要视频的大小(例如，1280X1080,640X480或320X240)，以用于产生摘要视频。在操作410，当输入文件是视频时，在操作414提取视频的关键片段。这里，关键片段是用于形成摘要视频的单元，且关键片段是重要部分或感兴趣的部分。基于包括在视频文件的头中的相关图像的时间信息从视频文件提取关键片段。例如，当视频文件十分钟视频文件时，如果在一分钟、五分钟和八分钟处捕获了相关图像，则对于与一分钟对应的相关图像之前和之后的三十秒钟提取关键片段(即，提取总共一分钟的关键片段)，对于与五分钟对应的相关图像之前和之后的三十秒钟提取关键片段(即，提取另一个一分钟的关键片段)，对于与八分钟对应的相关图像之前和之后的三十秒钟提取关键片段(即，提取另一个一分钟的关键片段)。因此，可通过合成上述关键片段来产生三分钟·的摘要视频。在操作416，根据关于与视频相关的图像的信息来确定效果。例如，当存在相关图像时，确定混合效果。当存在等于或多于预定数量的相关图像并且初始图像与最终图像之间的时间间隔等于或大于预定时间段时，确定每日故事效果。当存在等于或多于预定数量的相关图像并且初始图像与最终图像之间的时间间隔小于预定时间段时，确定宝丽来效果。当存在少于预定数量的相关图像时，确定视频效果。在操作418，产生应用了在操作414提取的关键片段和在操作416确定的效果的摘要视频。图5是用于描述根据本发明的另一实施例的根据文件属性应用效果的方法的流程图。参照图5，在操作500，视频和/或图像被选择。如果在操作502选择了视频，则在操作504确定是否存在相关图像。可通过确认关于相关图像的时间信息是否被存储在视频文件的头中来执行所述确定。这里，相关图像可以是在视频的记录期间捕获的图像。可选择地，相关图像与记录的视频相关，且可以是由用户设置的图像。在操作504，确定是否存在相关图像。如果存在相关图像，则在操作506获得相关图像。由于关于相关图像的信息被存储在视频文件头中，所以可根据关于相关图像的信息调用存储在记录介质(未示出)中的图像文件。如果存在相关图像，则在操作508确定混合效果，然后，所述方法进行到操作522。在操作504，确定是否存在相关图像。如果不存在相关图像，则在操作510确定视频效果，然后，所述方法进行到操作522。如果在操作502选择了图像，则在操作512确定图像是否是全景图像。可使用图像文件的EXIF信息执行所述确定。如果在操作512确定图像是全景图像，则在操作514确定全景图像效果，然后所述方法进行到操作522。如果在操作512确定图像不是全景图像，则确定图像是连续拍摄图像或高速拍摄图像。可使用图像文件的EXIF信息来执行所述确定。如果在操作516确定图像是连续拍摄图像或高速拍摄图像，则在操作518确定文件夹图像效果，然后所述方法进行到操作522。如果在操作516确定图像不是连续拍摄图像或高速拍摄图像，则在操作520确定
单一图像效果。在操作522，如果图像文件是最终图像文件，则所述方法结束。如果不是最终图像文件，则所述方法返回到操作500。图6是用于描述根据本发明的另一实施例的根据文件属性应用效果的方法的流程图。参照图6，在操作600，获得关于与视频相关的图像的信息。在操作602，获得关于在视频拍摄操作期间捕获的图像的时间信息。在操作604，确定是否存在等于或多于4个的相关图像。这里，可任意执行确定是否存在等于或多于4个的相关图像，并且本发明不限于此。如果在操作604，存在等于或多于4个的相关图像，则在操作606确定初始图像与最终图像之间的时间间隔是否大于三十秒。类似地，可任意执行确定初始图像与最终图像之间的时间间隔是否等于或大于三十秒，并且本发明不限于此。在操作606，如果时间间隔大于三十秒，则所述方法进行到操作608，然后确定每日故事效果。以下，将参照图10和图1lA至图1IF来描述应用了每日故事效果的摘要视频。参照图10，在显示屏幕的第一区域上再现视频1000。然后，第一相关图像1010至第四相关图像1040在显示屏幕的上侧从右至左滑动的同时被显示。如图1lA至IlF所示，每日的时间变化的视频被概括并在第一区域中被再现。相关图像以拍摄时间的顺序被布置并且在从右至左滑动的同时在第二显示区域中被显示。这里，相关图像是缩略像，相关图像滑动的时间与在第一区域上再现的视频的屏幕转换 时间同步。在操作606，如果时间间隔等于或小于三十秒，则在操作612确定宝丽来效果。在操作604，如果存在少于4个的相关图像，则在操作610确定是否存在等于或多于2个的相关图像。如果存在等于或多于2个的相关图像，则在操作612确定宝丽来效果。以下，将参照图8和图9A至图9E描述应用了宝丽来效果的摘要视频。参照图8，显示应用了宝丽来效果的摘要视频。视频800再现在显示屏幕的第一区域上，相关图像810在捕获相关图像的时间弹出(pop up)到显示屏幕的中间，并且相关图像810被显示。参照图9A,再现视频910。在图9B和9C中，在捕犾相关图像910的时间显不相关图像910,并且像宝丽来相片(Polaroid photo) —样来显示相关图像910。在图9D中，显示的相关图像930消失。在图9E中，再现视频900。在操作610，当存在少于2个的相关图像时，在操作614确定视频效果。这里，视频效果表示将图像处理为普通视频。关于视频效果，捕获一个相关图像的时间是视频的中间点，基于所述中间点在十秒钟内提取关键片段，以产生摘要视频。图7是用于描述根据本发明的另一实施例的根据文件属性应用效果的方法的流程图。参照图7，在操作700，获得视频文件。在操作702，确定视频再现时间是否小于一分钟。如果视频再现时间小于一分钟，则在操作704，从视频文件的开始部分提取与十秒钟对应的视频数据作为关键片段，并且跳过十秒钟，然后提取与十秒钟对应的视频数据作为另一关键片段。即，一分钟视频文件被产生为三十秒钟摘要视频。如果在操作702，视频再现时间等于或大于一分钟，则在操作706，确定视频再现时间是否小于三分钟。在操作706，如果视频再现时间等于或大于三分钟，则在操作708确定快进效果。在操作706，如果视频再现时间小于三分钟，则在操作710，将视频划分为与相同时间对应的三个片段，并且从每个片段提取10秒钟视频数据作为关键片段。然后，当显示摘要视频时，在第一片段中，显示屏幕的布局被再现为整个显示频幕。然后，在与第二片段对应的时间，显示屏幕被划分为两半，以显示与第二片段对应的视频。然后，在与第三片段对应的时间，与第三片段对应的视频显示在一半的显示屏幕上。在该示例中，与第一片段和第二片段对应的视频的最终帧以停止的状态显示在另一半上。然后，在操作712，每个片段被概括为关键片段。在此描述的设备可包括处理器、用于存储将由所述处理器执行的程序数据的存储器、诸如盘驱动器的永久存储装置、用于处理与外部装置的通信的通信端口以及诸如显示器、键等的用户接口装置。当包括软件模块时，这些软件模块可作为可由处理器执行的程序指令或计算机可读代码存储在非暂时性计算机可读介质(诸如，只读存储器(ROM)、随机存取存储器(RAM)、⑶-ROM、磁带、软盘和光学数据存储装置)中。计算机可读记录介质还可分布于网络连接的计算机系统上，从而以分布方式存储和执行计算机可读代码。所述介质可由计算机读取，可存储于存储器中，且可由处理器执行。通过如同每个参考文献单独和具体地表示为通过引用而合并以及在此阐述其全部内容一样地参照相同内容，在此引用的所有参考文献(包括出版物、专利申请和专利)被合并与此。·为了促进本发明的原理的理解的目的，已对附图中示出的实施例进行了引用，并且已使用特定语言来描述这些实施例。但是，这些特定语言不意图限制本发明的范围，并且本发明应该被理解为包括本领域的普通技术人员通常想到的所有实施例。可按照功能块部件和各种处理步骤描述本发明。这些功能块可通过配置为执行特定功能的任意数量的硬件和/或软件部件来实现。例如，本发明可采用可在一个或多个微处理器或其它控制装置的控制下执行各种功能的各种集成电路部件，例如，存储器元件、处理元件、逻辑元件、查询表等。类似地，当使用软件程序或软件元件实现本发明的元件时，可利用任意编程或脚本语言(诸如，C、C++、Java、汇编语言等)和通过数据结构、对象、处理、例程或其它编程元件的任意组合实现的各种算法，来实现本发明。可通过在一个或多个处理器中执行的算法实现功能方面。此外，本发明可采用任意数量的用于电子构造、信号处理和/或控制、数据处理等的传统技术。术语“机制”和“元件”被广义地使用且不限于机械或物理实施例，而是可包括与处理器结合的软件例程等。在此示出和描述的特定实施方式是本发明的示意性示例，且不意图以任意方式另外限制本发明的范围。为了简洁，可不详细描述传统电子、控制系统、软件开发和系统的其它功能方面(以及系统的单独操作部件的部件)。此外，提供的附图中示出的连接线或连接器意图表示各种元件之间的示例性功能关系和/或物理或逻辑连接。应该注意的是，在实际装置中，可存在多个可选或附加的功能关系、物理连接或逻辑连接。此外，除非元件被特定地描述为“必需的”或“关键的”，否则没有项目或部件是实施本发明所必须的。应该理解，如这里使用的术语“包括”、“包含”和“具有”具体地意图作为本领域的开放式术语来阅读。在描述本发明的语境中(尤其在权利要求的语境中)的单数形式和相似描述应被理解为包含单数和复数。此外，除非在此另外指出，否则这里的值的范围的记载仅意图用作单独地引用落入所述范围内的每个单独值的速记方法，并且每个单独值如该值单独在此被记载一样地合并于说明书中。最后，除非在此另外指出或与语境明显矛盾，否则可以以任意合适的顺序执行在此描述的所有方法的步骤。在此提供的任意和所有示例或示例性语言(例如，“诸如”)的使用仅意图更好地说明本发明，而不意图限制本发明的范围，除非另外声明。在不脱离本发明的精神和范围的情况下，各种修改和变动对于本领域的普通人员来说是显而易见的。
本发明的显示摘要视频的方法可根据文件属性自动地确定各种效果并且可自动地概括视频，从而使其具有各种效果，并显示视频摘要。虽然已参照本发明的示例性实施例具体示出和描述了本发明，但是本领域的普通技术人员将明白，在不脱离由权利要求限定的本发明的精神和范围的情况下，可进行各种形式和细节的修改。
权利要求
1.一种显示摘要视频的方法，所述方法包括如下步骤 选择包括视频或图像的文件； 根据选择的文件的属性确定不同效果，并显示应用了确定的效果的摘要视频， 其中，文件的属性是关于包括在文件中的相关图像的信息。
2.如权利要求1所述的方法，其中，相关图像是在视频的记录期间捕获的图像。
3.如权利要求1所述的方法，其中，关于相关图像的信息包括关于捕获相关图像的时间的信息。
4.如权利要求1所述的方法，其中，关于相关图像的信息包括相关图像的数量。
5.如权利要求1所述的方法，其中，关于相关图像的信息存储在视频文件的头中。
6.如权利要求1所述的方法，还包括如下步骤当选择的文件是图像文件时，产生根据图像的拍摄类型应用了不同效果的摘要视频。
7.如权利要求6所述的方法，其中，拍摄类型是从包括全景拍摄类型、连续拍摄类型和高速拍摄类型的组中选择的任意一个。
8.如权利要求1所述的方法，还包括如下步骤当选择的文件是视频且视频中不存在相关图像时，产生根据视频的再现时间应用了不同效果的摘要视频。
9.如权利要求1所述的方法，其中， 当选择的文件是视频，包括在视频中的相关图像的数量等于或多于第一阈值，并且初始相关图像与最终相关图像之间的时间间隔等于或大于第二阈值时，以视频被显示在显示屏幕的第一区域上，相关图像在沿一个方向滑动的同时被显示在显示屏幕的第二区域上的方式，产生摘要视频。
10.如权利要求9所述的方法，其中，当初始相关图像与最终相关图像之间的时间间隔小于第二阈值时，以视频被显示在显示屏幕上，并且相关图像在相关图像被捕获的时间被弹出以与显示的视频重叠，然后消失的方式，产生摘要视频。
11.如权利要求9所述的方法，其中， 当选择的文件是视频，且包括在视频中的相关图像的数量等于或多于第三阈值且小于第一阈值时，以视频被显示在显示屏幕上，并且相关图像在相关图像被捕获的时间被弹出以与显示的视频重叠，然后消失的方式，产生摘要视频。
12.如权利要求1所述的方法，还包括如下步骤 输入摘要视频的主题； 产生根据输入的主题应用了预定效果的摘要视频。
13.如权利要求1所述的方法，还包括如下步骤 基于关于相关图像的信息，从视频提取关键片段； 使用提取的关键片段和确定的效果，产生摘要视频。
14.如权利要求1所述的方法，还包括如下步骤 基于关于捕获每个相关图像的时间的信息，从视频提取关键片段； 根据包括相关图像的数量和相关图像之间的时间间隔的组中选择的至少一个，确定将被应用于摘要视频的效果； 使用提取的关键片段和确定的效果，产生摘要视频。
15.一种产生摘要视频的方法，所述方法包括如下步骤接收视频并分析输入视频的视频文件的属性； 根据所述属性从视频提取关键片段； 根据所述属性确定不同的效果； 使用提取的关键片段和确定的效果，产生摘要视频， 其中，视频文件的属性是关于包括在视频文件中的相关图像的信息。
16.如权利要求15所述的方法，其中，相关图像是在视频的记录期间捕获的图像。
17.如权利要求15所述的方法，其中，关于相关图像的信息包括从包括关于相关图像被捕获的时间的信息和相关图像的数量的组中选择的至少一个。
18.如权利要求15所述的方法，其中，关于相关图像的信息存储在视频文件的头中。
19.一种摘要视频显不设备，包括 选择单元，用于选择包括视频或图像的文件； 控制器，用于根据选择的文件的属性确定不同效果，并显示应用了确定的效果的摘要视频， 其中，文件的属性是关于包括在文件中的相关图像的信息。
20.如权利要求19所述的摘要视频显示设备，其中，关于相关图像的信息存储在视频的视频文件的头中。
21.如权利要求19所述的摘要视频显示设备，其中，控制器包括 文件属性确定单元，用于确定选择的文件的属性； 提取单元，用于在选择的文件是视频时提取关于与视频相关的图像的信息； 效果确定单元，用于基于确定的文件的属性和关于相关图像的信息，确定将被应用于摘要视频的效果； 摘要视频产生单元，用于根据确定的效果产生摘要视频。
22.如权利要求21所述的摘要视频显示设备，其中，提取单元基于相关图像的时间信息提取视频的关键片段。
全文摘要
一种用于显示摘要视频的方法和设备。根据所述方法，可根据文件的属性自动地确定各种效果，并且视频可被自动地概括为具有各种效果并被显示。
文档编号H04N21/431GK103024607SQ20121035215
公开日2013年4月3日 申请日期2012年9月20日 优先权日2011年9月20日
发明者彼姆灿德·星·外克姆, 方孝相, 承贞我 申请人:三星电子株式会社