获取视频的信息的方法及设备及播放视频的方法及设备的制作方法
【专利摘要】本发明公开了一种获取视频的信息的方法及设备及播放视频的方法及设备。获取视频的信息的方法包括如下步骤:(a)在播放视频时实时采集视频观看者的面部表情；(b)分析所述脸部表情，得出观看者的情绪类别；(c)将所述情绪类别在视频播放时间轴上进行标记；(d)生成视频播放配置信息，所述视频播放配置信息记录了观看者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。根据本发明的获取视频的信息的方法，无需打断观看者观看视频，即可自动记录视频的各个精彩片段，简单方便。
【专利说明】获取视频的信息的方法及设备及播放视频的方法及设备
【技术领域】
[0001]本发明涉及交互式媒体领域。更具体地讲，涉及一种获取视频的信息的方法及设备及播放视频的方法及设备。
【背景技术】
[0002]目前网络上视频节目资源日益丰富，尤其是电影类的长视频，给人们观看视频带来了极大的便利。人们可以在网络上随意搜索感兴趣的视频进行观看。在网络上收看视频类节目已逐渐成为人们观看视频的主要方式之一。在人们选择观看一个视频之前，可以通过视频封面或者是关于视频的评论，来初步获得关于该视频的一些信息。但是这些都无法直观地、真实地反映视频给观看者的感受。因此，需要一种能够便捷地获取视频的信息的方法。
【发明内容】
[0003]本发明的目的在于提供一种获取视频的信息的方法及设备及播放视频的方法及设备、一种拍摄视频的方法及设备，以解决上述问题之一。
[0004]为了实现上述目的，本发明提供了一种获取视频的信息的方法，包括以下步骤:(a)在播放视频时实时采集视频观看者的面部表情；(b)分析所述脸部表情，得出观看者的情绪类别；(C)将所述情绪类别在视频播放时间轴上进行标记；(d)生成视频播放配置信息，所述视频播放配置信息记录了观看者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。
[0005]优选地，步骤d包括:针对不同的观看者生成对应的视频播放配置信息。
[0006]优选地，所述面部表情还包括脸部范围内的手部动作。
[0007]优选地，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
[0008]优选地，步骤b包括分析之前预定长度的时间段内情绪类别的变化，得出观看者的情绪类别。
[0009]优选地，步骤d还包括，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频播放时间轴上的变化曲线。
[0010]优选地，所述视频为播放的视频或观看者通过录像设备实时录制的视频。
[0011]本发明还提供了一种播放视频的方法，包括以下步骤:在播放视频的同时，获取与该视频对应的视频播放配置信息；将获取到的视频播放配置信息加载到视频播放时间轴上进行展示，其中，所述视频播放配置信息包括观看者的情绪类别、以及所述情绪类别在视频播放时间轴上出现的时间段。
[0012]优选地，将获取到的视频播放配置信息加载到视频播放时间轴上进行展示的步骤包括:根据情绪类别在视频播放时间轴上出现的时间段，将时间段标识为与情绪类别对应的颜色。[0013]优选地，获取与该视频对应的视频播放配置信息的步骤包括:接收对预定观众的选择；获取与该视频和选择的观众对应的视频播放配置信息。
[0014]本发明还提供了一种拍摄视频的方法，包括如下步骤:(a)在拍摄视频时实时采集被拍摄者的面部表情；(b)分析所述脸部表情，得出被拍摄者的情绪类别；(c)将所述情绪类别在视频拍摄时间轴上进行标记；(d)生成视频播放配置信息，所述视频播放配置信息记录了被拍摄者的情绪类别以及所述情绪类别在视频拍摄时间轴上出现的时间段。
[0015]优选地，步骤d包括:针对不同的观看者生成对应的视频播放配置信息。
[0016]优选地，所述面部表情还包括脸部范围内的手部动作。
[0017]优选地，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
[0018]优选地，步骤b包括分析之前预定长度的时间段内情绪类别的变化，得出被拍摄者的情绪类别。
[0019]优选地，步骤d还包括，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频拍摄时间轴上的变化曲线。
[0020]本发明还提供了一种获取视频的信息的设备，包括:采集单元，用于在播放视频时实时采集视频观看者的面部表情；分析单元，用于分析所述脸部表情，得出观看者的情绪类别；标记单元，用于将所述情绪类别在视频播放时间轴上进行标记；生成单元，用于生成视频播放配置信息，所述视频播放配置信息记录了观看者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。
[0021]优选地，生成单元还用于针对不同的观看者生成对应的视频播放配置信息。
[0022]优选地，所述面部表情还包括脸部范围内的手部动作。
[0023]优选地，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
[0024]优选地，分析单元还用于分析之前预定长度的时间段内情绪类别的变化，得出观看者的情绪类别。
[0025]优选地，生成单元还用于，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频播放时间轴上的变化曲线。
[0026]优选地，所述视频为播放的视频或观看者通过录像设备实时录制的视频。
[0027]本发明还提供了一种播放视频的设备，包括:获取单元，用于在播放视频的同时，获取与该视频对应的视频播放配置信息；展示单元，用于将获取到的视频播放配置信息加载到视频播放时间轴上进行展示，其中，所述视频播放配置信息包括观看者的情绪类别、以及所述情绪类别在视频播放时间轴上出现的时间段。
[0028]优选地，展示单元还用于，根据情绪类别在视频播放时间轴上出现的时间段，将时间段标识为与情绪类别对应的颜色。
[0029]优选地，获取单元还用于接收对预定观众的选择，获取与该视频和选择的观众对应的视频播放配置信息。
[0030]本发明还提供了了一种拍摄视频的设备，包括:采集单元，用于在拍摄视频时实时采集被拍摄者的面部表情；分析单元，用于分析所述脸部表情，得出被拍摄者的情绪类别；标记单元，用于将所述情绪类别在视频拍摄时间轴上进行标记；生成单元，用于生成视频播放配置信息，所述视频播放配置信息记录了被拍摄者的情绪类别以及所述情绪类别在视频拍摄时间轴上出现的时间段。
[0031 ] 优选地，生成单元还用于针对不同的被拍摄者生成对应的视频播放配置信息。
[0032]优选地，所述面部表情还包括脸部范围内的手部动作。
[0033]优选地，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
[0034]优选地，分析单元还用于分析之前预定长度的时间段内情绪类别的变化，得出被拍摄者的情绪类别。
[0035]优选地，生成单元还用于，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为被拍摄者情绪在视频拍摄时间轴上的变化曲线。
[0036]根据本发明的获取视频的信息的方法和设备，无需打断观看者观看视频，即可自动记录视频的各个精彩片段，简单方便。
[0037]根据本发明的一种播放视频的方法和设备，可以直观的了解视频的精彩片段。
[0038]根据本发明一种拍摄视频的方法和设备，可以快速的获取被监控对象的情绪状况。
【专利附图】
【附图说明】
[0039]通过下面结合附图进行的详细描述，本发明的上述和其它目的、特点和优点将会变得更加清楚，其中:
[0040]图1为根据本发明实施例的获取视频的信息的方法的流程图；
[0041]图2为根据本发明实施例的视频配置信息的示例图；
[0042]图3为根据本发明实施例的播放视频的方法的流程图；
[0043]图4为根据本发明实施例的加载了视频配置信息的视频播放画面的示例图；
[0044]图5为根据本发明实施例的拍摄视频的方法的流程图；
[0045]图6为根据本发明实施例的获取视频的信息的设备的框图；
[0046]图7为根据本发明实施例的播放视频的设备的框图；
[0047]图8为根据本发明实施例的拍摄视频的设备的框图。
【具体实施方式】
[0048]现在，将参照附图更充分地描述不同的示例实施例，其中，一些示例性实施例在附图中示出。
[0049]图1示出了本发明实施例的获取视频的信息的方法的流程图。
[0050]如图1所示，本发明实施例的获取视频的信息的方法，包括以下步骤。
[0051]在步骤101，在播放视频时实时采集视频观看者的面部表情。这样，可以获得观看者在不同时间点的面部表情。
[0052]在步骤102，分析所述脸部表情，得出观看者的情绪类别。这样，可以得到观看者在不同时间点的情绪类别。
[0053]一般来说，人的情绪大部分都会通过脸部表情表达出来。有研究表明人类情感交流中的地位:语言内容占7%，语言语调占38%，而面部表情占55%。所以通过观察脸部表情就大体能够判断一个人所处于的情绪。可以通过设置摄像头捕捉观看者的脸部表情，检测脸部特征，如眼、鼻、鼻孔、眉毛、嘴、嘴唇、耳朵等部位的形状及存在位置。同时也可以结合脸部范围的手部动作，如托下巴、擦鼻子、擦眼泪、捂嘴等，通过这些判断出观看者此时的情绪。
[0054]借助成熟的脸部识别技术(包含人脸识别及表情识别)，识别出以下情绪中的至少一项，开心、感动、平静、悲伤、愤怒、厌倦，当然情绪类别不限于以上列举的类型。
[0055]在另一个实施例中，由于人类的表情比较复杂，所以在某个时间点上，同样脸部表情会给出不同的情绪的可能性概率。这时可以通过分析该时间点之前预定长度的时间段内情绪类别的变化，得出观看者在该时间点的情绪类别。将当前观看者可能的几种情绪类别与之前预定长度的时间段内的情绪类别进行对比，将与之前预定长度的时间段内的情绪类别相同或接近的情绪类别作为当前观看者的情绪类别。比如某个时间点上，分析脸部表情得到观看者的情绪类别:笑(即开心)的可能性概率是40%，平静的可能性概率是60%。如果前面预定长度的时间段内(如一分钟)观看者的情绪都是开心，则可判断此时观看者的情绪是开心。如果前面预定时间内(如一分钟)观看者的情绪都是平静的，则可判断此时观看者的情绪是平静的。预定长度可以根据情况进行设置。
[0056]在步骤103，将所述情绪类别在视频播放时间轴上进行标记，即将观看者的情绪类别与在视频中出现该情绪类别的时间相关联。
[0057]在进行标记时，可以针对各个时间点标记情绪类别，或者可以将时间轴划分为多个时间段，针对每个时间段标记情绪类别。
[0058]例如，在针对各个时间点标记情绪类别的情况下，如果一同观看的观看者有多个，可以将不同的观看者的情绪类别分别在时间轴的对应的时间点上进行标记；也可以通过计算得到各个时间点上各个观看者的情绪类别中比率最高的情绪类别，将该比率最高的情绪类别作为该时间点的观看者的综合的情绪类别并且在时间轴的对应的时间点上进行标记。
[0059]在针对每个时间段标记情绪类别的情况下，对于任意时间段，根据在该时间段内各个时间点的情绪类别，统计该时间段内观看者的每种情绪类别出现的频率(即，具有该种情绪类别的时间点的数量)，将出现频率最高的情绪类别标记为该时间段的观看者情绪类别，将该情绪类别标记在该时间段。例如在某个时间段内开心的情绪类别出现频率最高，则该时间段的观看者情绪类别为开心。对于上述一同观看的观看者有多个的情况，如果将不同的观看者的情绪类别分别在时间轴上进行标记，则分别统计各时间段内各观看者每种情绪类别出现的频率，将出现频率最高的各个情绪类别标记为该时间段的各个观看者各自的情绪类别；如果将观看者的综合的情绪类别在时间轴上进行标记，则统计各时间段内观看者的综合的情绪类别中出现频率最闻的综合的情绪类别标记为该时间段内观看者的综合的情绪类别。
[0060]在步骤104，生成视频播放配置信息，所述视频播放配置信息记录了观看者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。所述时间段的信息包括了情绪类别在视频播放时间轴上出现的起始时间点和持续时间长度。视频播放配置信息可以与视频一起分享给他人，也可单独分享给他人，他人通过视频播放配置信息的内容可以直观的了解该视频的精彩片段，如是否搞笑、感人等。
[0061]对于一同观看的观看者有多个的情况，针对不同的观看者生成对应的视频播放配置信息，即可以对应步骤103中将不同的观看者的情绪类别分别在时间轴上进行标记，在步骤104中生成各自对应的视频播放配置信息，也可以对应步骤103中将观看者的综合的情绪类别在时间轴上进行标记，在步骤104中生成一个综合的视频播放配置信息。
[0062]为了更加直观的展示整个视频的精彩片段，步骤104还包括检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频播放时间轴上的变化曲线。情绪线以平静的情绪为零点，零点以上的为正面的情绪，如开心、感动等，零点以下的为负面的情绪，如悲伤、愤怒等。图2示出了根据本发明实施例的视频播放配置信息的示例图。如图2所示，该视频播放配置信息是某个观看者观看完片名为“小时候的你”的视频之后生成的，在该视频播放配置信息中为了符合大众的阅读习惯，将开心的情绪对应的视频片段命名为搞笑，厌倦的情绪对应的视频片段命名为无聊，并截取了搞笑和感动两种视频片段记录在视频播放配置信息中，他人可以直接点击该视频片段进行观看。
[0063]上述视频可以是播放的视频，也可以是观看者通过录像设备实时录制的视频，SP观看者同时也是视频的拍摄者，在拍摄视频的过程中，拍摄者的情绪被自动记录了下来，拍摄结束后生成视频播放配置信息。
[0064]根据本发明的获取视频的信息的方法，无需打断观看者观看视频，即可自动记录视频的各个精彩片段，简单方便。
[0065]图3示出了根据本发明的实施例的播放视频的方法的流程图。
[0066]参照图3，本发明实施例的播放视频的方法，包括以下步骤。
[0067]在步骤301，播放视频的同时，获取与该视频对应的视频播放配置信息。所述视频播放配置信息可以是参照图1中的方法生成的。
[0068]在步骤302，将获取到的视频播放配置信息加载到视频播放时间轴上进行展示，其中所述视频播放配置信息包括观看者的情绪类别、以及所述情绪类别在视频播放时间轴上出现的时间段。
[0069]优选地，获取与该视频对应的视频播放配置信息的步骤可以包括:接收对预定观众的选择；获取与该视频和选择的观众对应的视频播放配置信息。换句话说，由于可能存在多个不同的观看者观看后生成的不同的视频播放配置信息，用户可以选择某个观看者观看后生成的不同的视频播放配置信息进行加载，也可以选择多个不同的观看者观看后生成的多个不同的视频播放配置信息加载。如果选择了多个视频播放配置信息则可以对各视频播放配置信息中的各种情绪进行综合归类，可以在视频播放时间轴上展示所有选定的视频播放配置信息中的同一种情绪类别出现的所有时间段。例如，用户只关心开心的片段，则在视频播放时间轴上展示所有选定视频播放配置信息的开心的情绪出现的所有时间段。
[0070]优选地，为了方便识别不同的情绪的视频片段，根据情绪类别在视频播放时间轴上出现的时间段，将时间段标识为与情绪类别对应的颜色。图4示出了根据本发明实施例的加载了视频播放配置信息的视频播放画面的示例图。如图4所示，视频播放时间轴上用不同的颜色标识了搞笑(即开心)、感动、无聊(即厌倦)情绪对应的时间段，当然在其他视频中还可能有悲伤、恐惧等其他趣点。
[0071]根据本发明的一种播放视频的方法，可以直观的了解视频的精彩片段。[0072]本发明实施例中的获取视频的信息的方法也可以应用到视频监控中。图5示出了根据本发明实施例的拍摄视频的方法的流程图。参照图5，本发明实施例的拍摄视频的方法，包括如下步骤。
[0073]在步骤501，在拍摄视频时实时采集被拍摄者的面部表情，这样，可以获得被拍摄者在不同时间点的面部表情。
[0074]在步骤502，分析所述脸部表情，得出被拍摄者的情绪类别。这样，可以得到观看者在不同时间点的情绪类别。优选地，同时结合脸部范围的手部动作，如托下巴、擦鼻子、擦眼泪、捂嘴等，通过这些判断出观看者此时的情绪。借助成熟的脸部识别技术(包含人脸识别及表情识别)，识别出以下情绪中的至少一项，开心、感动、平静、悲伤、愤怒、厌倦，当然情绪类别不限于以上列举的类型。
[0075]在另一个实施例中，由于人类的表情比较复杂，所以在某个时间点上，同样脸部表情会给出不同的情绪的可能性概率。这时可以通过分析该时间点之前预定长度的时间段内情绪类别的变化，得出被拍摄者在该时间点的情绪类别。将当前被拍摄者可能的几种情绪类别与之前预定长度的时间段内的情绪类别进行对比，将与之前预定长度的时间段内的情绪类别相同或接近的情绪类别作为当前被拍摄者的情绪类别。
[0076]在步骤503，将所述情绪类别在视频拍摄时间轴上进行标记，即将被拍摄者的情绪类别与在被拍摄视频中出现该情绪类别的时间相关联。
[0077]在进行标记时，可以针对各个时间点标记情绪类别，或者可以将时间轴划分为多个时间段，针对每个时间段标记情绪类别。
[0078]例如，在针对各个时间点标记情绪类别的情况下，如果同时被拍摄的人有多个，可以将不同的被拍摄者的情绪类别分别在时间轴的对应的时间点上进行标记；也可以通过计算得到各个时间点上各个被拍摄者的情绪类别中比率最高的情绪类别，将该比率最高的情绪类别作为该时间点的被拍摄者的综合的情绪类别并且在时间轴的对应的时间点上进行
己 O
[0079]在针对每个时间段标记情绪类别的情况下，对于任意时间段，根据在该时间段内各个时间点的情绪类别，统计该时间段内被拍摄者的每种情绪类别出现的频率(即，具有该种情绪类别的时间点的数量)，将出现频率最高的情绪类别标记为该时间段的观看者情绪类别，将该情绪类别标记在该时间段。例如在某个时间段内开心的情绪类别出现频率最高，则该时间段的被拍摄者情绪类别为开心。对于上述同时被拍摄的人有多个的情况，如果将不同的同时被拍摄的人有多个的情绪类别分别在时间轴上进行标记，则分别统计各时间段内各被拍摄者每种情绪类别出现的频率，将出现频率最高的各个情绪类别标记为该时间段的各个被拍摄者各自的情绪类别；如果将被拍摄者的综合的情绪类别在时间轴上进行标记，则统计各时间段内被拍摄者的综合的情绪类别中出现频率最高的综合的情绪类别标记为该时间段内被拍摄者的综合的情绪类别。
[0080]在步骤504，生成视频播放配置信息，所述视频播放配置信息记录了被拍摄者的情绪类别以及所述情绪类别在视频拍摄时间轴上出现的时间段。所述时间段的信息包括了情绪类别在视频播放时间轴上出现的起始时间点和持续时间长度。这样通过查看视频播放配置信息，就可以快速的获取 被监控对象的情绪状况。
[0081]对于被拍摄的人有多个的情况，针对不同的被拍摄者生成对应的视频播放配置信息，即可以对应步骤503中将不同的被拍摄者的情绪类别分别在时间轴上进行标记，在步骤504中生成各自对应的视频播放配置信息，也可以对应步骤503中将被拍摄者的综合的情绪类别在时间轴上进行标记，在步骤504中生成一个综合的视频播放配置信息。
[0082]为了更加直观的展示整个拍摄视频中被拍摄者的情绪状况，步骤504还包括检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为被拍摄者情绪在视频拍摄时间轴上的变化曲线。
[0083]图6示出了根据本发明实施例的获取视频的信息的设备的框图。如图6所示，根据本发明实施例的获取视频的信息的设备包括采集单元601、分析单元602、标记单元603、生成单元604。
[0084]采集单元601用于在播放视频时实时采集视频观看者的面部表情，这样，可以获得观看者在不同时间点的面部表情。
[0085]分析单元602用于分析所述脸部表情，得出观看者的情绪类别，这样，可以得到观看者在不同时间点的情绪类别。
[0086]通过采集单元采集观看者的脸部表情，检测脸部特征，如眼、鼻、鼻孔、眉毛、嘴、嘴唇、耳朵等部位的形状及存在位置。同时也可以结合脸部范围的手部动作，如托下巴、擦鼻子、擦眼泪、捂嘴等，通过这些判断出观看者此时的情绪。借助成熟的脸部识别技术(包含人脸识别及表情识别)，识别出以下情绪中的至少一项，开心、感动、平静、悲伤、愤怒、厌倦，当然情绪类别不限于以上列举的类型。
[0087]在另一个实施例中，由于人类的表情比较复杂，所以在某个时间点上，同样脸部表情会给出不同的情绪的可能性概率。分析单元还可以用于通过分析该时间点之前预定长度的时间段内情绪类别的变化，得出观看者在该时间点的情绪类别。将当前观看者可能的几种情绪类别与之前预定长度的时间段内的情绪类别进行对比，将与之前预定长度的时间段内的情绪类别相同或接近的情绪类别作为当前观看者的情绪类别。
[0088]标记单元603，用于将所述情绪类别在视频播放时间轴上进行标记，即将观看者的情绪类别与在视频中出现该情绪类别的时间相关联。在进行标记时，可以针对各个时间点标记情绪类别，或者可以将时间轴划分为多个时间段，针对每个时间段标记情绪类别。
[0089]例如，在针对各个时间点标记情绪类别的情况下，如果一同观看的观看者有多个，可以将不同的观看者的情绪类别分别在时间轴的对应的时间点上进行标记；也可以通过计算得到各个时间点上各个观看者的情绪类别中比率最高的情绪类别，将该比率最高的情绪类别作为该时间点的观看者的综合的情绪类别并且在时间轴的对应的时间点上进行标记。
[0090]在针对每个时间段标记情绪类别的情况下，对于任意时间段，根据在该时间段内各个时间点的情绪类别，统计该时间段内观看者的每种情绪类别出现的频率(即，具有该种情绪类别的时间点的数量)，将出现频率最高的情绪类别标记为该时间段的观看者情绪类别，将该情绪类别标记在该时间段。例如在某个时间段内开心的情绪类别出现频率最高，则该时间段的观看者情绪类别为开心。对于上述一同观看的观看者有多个的情况，如果将不同的观看者的情绪类别分别在时间轴上进行标记，则分别统计各时间段内各观看者每种情绪类别出现的频率，将出现频率最高的各个情绪类别标记为该时间段的各个观看者各自的情绪类别；如果将观看者的综合的情绪类别在时间轴上进行标记，则统计各时间段内观看者的综合的情绪类别中出现频率最闻的综合的情绪类别标记为该时间段内观看者的综合的情绪类别。
[0091]生成单元604，用于生成视频播放配置信息，所述视频播放配置信息记录了观看者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。所述时间段的信息包括了情绪类别在视频播放时间轴上出现的起始时间点和持续时间长度。
[0092]对于多个一同观看的观看者有多个的情况，生成单元604还可以用于针对不同的观看者生成对应的视频播放配置信息，即可以生成各个观看者各自的视频播放配置信息，生成一个观看者的综合的视频播放配置信息。。
[0093]为了更加直观的展示整个视频的精彩片段，生成单元604还可以用于检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频播放时间轴上的变化曲线。
[0094]上述视频可以是播放的视频，也可以是观看者通过录像设备实时录制的视频，SP观看者同时也是视频的拍摄者，在拍摄视频的过程中，拍摄者的情绪被自动记录了下来，拍摄结束后生成视频播放配置信息。
[0095]根据本发明的获取视频的信息的设备，无需打断观看者观看视频，即可自动记录视频的各个精彩片段，简单方便。
[0096]图7示出了根据本发明实施例的播放视频的设备的框图。如图7所述，根据本发明实施例的一种播放视频的设备，包括获取单元701和展示单元702。
[0097]获取单元701，用于在播放视频的同时，获取与该视频对应的视频播放配置信息。
[0098]展示单元702，用于将获取到的视频播放配置信息中加载到视频播放时间轴上进行展示，其中，所述视频播放配置信息包括观看者的情绪类别、以及所述情绪类别在视频播放时间轴上出现的时间段。
[0099]优选地，获取单元701还可以用于接收对预定观众的选择，获取与该视频和选择的观众对应的视频播放配置信息。换句话说，由于可能存在多个不同的观看者观看后生成的不同的视频播放配置信息，用户可以选择某个观看者观看后生成的不同的视频播放配置信息进行加载，也可以选择多个不同的观看者观看后生成的多个不同的视频播放配置信息加载。如果选择了多个视频播放配置信息则可以对各视频播放配置信息中的数据进行综合归类。
[0100]优选地，为了方便识别不同的情绪的视频片段，展示单元702还可以用于根据情绪类别在视频播放时间轴上出现的时间段，将时间段标识为与情绪类别对应的颜色。
[0101]根据本发明的一种播放视频的设备，可以直观的了解视频的精彩片段。
[0102]图8示出了根据本发明实施例的拍摄视频的设备的框图。如图8所示，根据本发明实施例的拍摄视频的设备，包括采集单元801、分析单元802、标记单元803、生成单元804。
[0103]采集单元801用于在拍摄视频时实时采集被拍摄者的面部表情，这样，可以获得被拍摄者在不同时间点的面部表情。
[0104]分析单元802用于分析所述脸部表情，得出被拍摄者的情绪类别，这样，可以得到被拍摄者在不同时间点的情绪类别。
[0105]通过采集单元采集被拍摄者的脸部表情，检测脸部特征，如眼、鼻、鼻孔、眉毛、嘴、嘴唇、耳朵等部位的形状及存在位置。同时也可以结合脸部范围的手部动作，如托下巴、擦鼻子、擦眼泪、捂嘴等，通过这些判断出被拍摄者此时的情绪。借助成熟的脸部识别技术(包含人脸识别及表情识别)，识别出以下情绪中的至少一项，开心、感动、平静、悲伤、愤怒、厌倦，当然情绪类别不限于以上列举的类型。
[0106]在另一个实施例中，由于人类的表情比较复杂，所以在某个时间点上，同样脸部表情会给出不同的情绪的可能性概率。分析单元还可以用于通过分析该时间点之前预定长度的时间段内情绪类别的变化，得出被拍摄者在该时间点的情绪类别。将当前被拍摄者可能的几种情绪类别与之前预定长度的时间段内的情绪类别进行对比，将与之前预定长度的时间段内的情绪类别相同或接近的情绪类别作为当前被拍摄者的情绪类别。
[0107]标记单元803，用于将所述情绪类别在视频拍摄时间轴上进行标记，即将被拍摄者的情绪类别与在视频中出现该情绪类别的时间相关联。在进行标记时，可以针对各个时间点标记情绪类别，或者可以将时间轴划分为多个时间段，针对每个时间段标记情绪类别。
[0108]例如，在针对各个时间点标记情绪类别的情况下，如果一同被拍摄的人有多个，可以将不同的被拍摄者的情绪类别分别在时间轴的对应的时间点上进行标记；也可以通过计算得到各个时间点上各个被拍摄者的情绪类别中比率最高的情绪类别，将该比率最高的情绪类别作为该时间点的被拍摄者的综合的情绪类别并且在时间轴的对应的时间点上进行标记。[0109]在针对每个时间段标记情绪类别的情况下，对于任意时间段，根据在该时间段内各个时间点的情绪类别，统计该时间段内被拍摄者的每种情绪类别出现的频率(即，具有该种情绪类别的时间点的数量)，将出现频率最高的情绪类别标记为该时间段的被拍摄者情绪类别，将该情绪类别标记在该时间段。例如在某个时间段内开心的情绪类别出现频率最高，则该时间段的被拍摄者情绪类别为开心。对于上述一同被拍摄的人有多个的情况，如果将不同的被拍摄者的情绪类别分别在时间轴上进行标记，则分别统计各时间段内各被拍摄者每种情绪类别出现的频 率，将出现频率最高的各个情绪类别标记为该时间段的各个被拍摄者各自的情绪类别；如果将被拍摄者的综合的情绪类别在时间轴上进行标记，则统计各时间段内被拍摄者的综合的情绪类别中出现频率最高的综合的情绪类别标记为该时间段内被拍摄者的综合的情绪类别。
[0110]生成单元804，用于生成视频播放配置信息，所述视频播放配置信息记录了被拍摄者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。所述时间段的信息包括了情绪类别在视频拍摄时间轴上出现的起始时间点和持续时间长度。
[0111]对于多个一同被拍摄的人有多个的情况，生成单元804还可以用于针对不同的被拍摄者生成对应的视频播放配置信息，即可以生成各个被拍摄者各自的视频播放配置信息，也可以生成一个被拍摄者的综合的视频播放配置信息。
[0112]为了更加直观的展示整个拍摄视频中被拍摄者的情绪状况，生成单元804还可以用于检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为被拍摄者情绪在视频拍摄时间轴上的变化曲线。
[0113]根据本发明实施例的拍摄视频的设备，可以快速的获取被监控对象的情绪状况。
[0114]应该理解，上述方法和设备中都出现的名词或语句的含义相同，其含义已在方法部分进行了详述，在设备部分就不再赘述。
[0115]此外，根据本发明的示例性实施例的各种方法可以被实现为计算机程序。
[0116]此外，根据本发明的示例性实施例的各个单元可被实现硬件组件。本领域技术人员根据限定的各个单元所执行的处理，可以例如使用现场可编程门阵列(FPGA)或专用集成电路(ASIC)来实现各个单元。
[0117]尽管已经参照其示例性实施例具体显示和描述了本发明，但是本领域的技术人员应该理解，在不脱离权利要求所限定的本发明的精神和范围的情况下，可以对其进行形式和细节上的各种改变。
【权利要求】
1.一种获取视频的信息的方法，其特征在于，包括如下步骤: (a)在播放视频时实时采集视频观看者的面部表情； (b)分析所述脸部表情，得出观看者的情绪类别； (C)将所述情绪类别在视频播放时间轴上进行标记； (d)生成视频播放配置信息，所述视频播放配置信息记录了观看者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。
2.根据权利要求1所述获取视频的信息的方法，其特征在于，步骤d包括:针对不同的观看者生成对应的视频播放配置信息。
3.根据权利要求1所述的获取视频的信息的方法，其特征在于，所述面部表情还包括脸部范围内的手部动作。
4.根据权利要求1所述的获取视频的信息的方法，其特征在于，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
5.根据权利要求1所述的获取视频的信息的方法，其特征在于，步骤b包括分析之前预定长度的时间段内情绪类别的变化，`得出观看者的情绪类别。
6.根据权利要求1所述的获取视频的信息的方法，其特征在于，步骤d还包括，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频播放时间轴上的变化曲线。
7.根据权利要求1所述的获取视频的信息的方法，其特征在于，所述视频为播放的视频或观看者通过录像设备实时录制的视频。
8.一种播放视频的方法，其特征在于，包括: 在播放视频的同时，获取与该视频对应的视频播放配置信息； 将获取到的视频播放配置信息加载到视频播放时间轴上进行展示，其中，所述视频播放配置信息包括观看者的情绪类别、以及所述情绪类别在视频播放时间轴上出现的时间段。
9.根据权利要求8所述的播放视频的方法，其特征在于，将获取到的视频播放配置信息加载到视频播放时间轴上进行展示的步骤包括:根据情绪类别在视频播放时间轴上出现的时间段，将时间段标识为与情绪类别对应的颜色。
10.根据权利要求8所述的方法，其特征在于，获取与该视频对应的视频播放配置信息的步骤包括: 接收对预定观众的选择； 获取与该视频和选择的观众对应的视频播放配置信息。
11.一种拍摄视频的方法，其特征在于，包括如下步骤: (a)在拍摄视频时实时米集被拍摄者的面部表情； (b)分析所述脸部表情，得出被拍摄者的情绪类别； (C)将所述情绪类别在视频拍摄时间轴上进行标记； (d)生成视频播放配置信息，所述视频播放配置信息记录了被拍摄者的情绪类别以及所述情绪类别在视频拍摄时间轴上出现的时间段。
12.根据权利要求11所述的拍摄视频的方法，其特征在于，步骤d包括:针对不同的观看者生成对应的视频播放配置信息。
13.根据权利要求11所述的拍摄视频的方法，其特征在于，所述面部表情还包括脸部范围内的手部动作。
14.根据权利要求11所述的拍摄视频的方法，其特征在于，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
15.根据权利要求11所述的拍摄视频的方法，其特征在于，步骤b包括分析之前预定长度的时间段内情绪类别的变化，得出被拍摄者的情绪类别。
16.根据权利要求11所述的拍摄视频的方法，其特征在于，步骤d还包括，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频拍摄时间轴上的变化曲线。
17.一种获取视频的信息的设备，其特征在于，包括: 采集单元，用于在播放视频时实时采集视频观看者的面部表情； 分析单元，用于分析所述脸部表情，得出观看者的情绪类别； 标记单元，用于将所述情绪类别在视频播放时间轴上进行标记； 生成单元，用于生成视频播放配置信息，所述视频播放配置信息记录了观看者的情绪类别以及所述情绪类别在视频播放时间轴上出现的时间段。
18.根据权利要求 17所述获取视频的信息的设备，其特征在于，生成单元还用于针对不同的观看者生成对应的视频播放配置信息。
19.根据权利要求17所述的获取视频的信息的设备，其特征在于，所述面部表情还包括脸部范围内的手部动作。
20.根据权利要求17所述的获取视频的信息的设备，其特征在于，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
21.根据权利要求17所述的获取视频的信息的设备，其特征在于，分析单元还用于分析之前预定长度的时间段内情绪类别的变化，得出观看者的情绪类别。
22.根据权利要求17所述的获取视频的信息的设备，其特征在于，生成单元还用于，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度占整个视频时间长度的比例、情绪线，所述情绪线为观看者情绪在视频播放时间轴上的变化曲线。
23.根据权利要求17所述的获取视频的信息的设备，其特征在于，所述视频为播放的视频或观看者通过录像设备实时录制的视频。
24.一种播放视频的设备，其特征在于，包括: 获取单元，用于在播放视频的同时，获取与该视频对应的视频播放配置信息； 展示单元，用于将获取到的视频播放配置信息加载到视频播放时间轴上进行展示，其中，所述视频播放配置信息包括观看者的情绪类别、以及所述情绪类别在视频播放时间轴上出现的时间段。
25.根据权利要求24所述的播放视频的设备，其特征在于，展示单元还用于，根据情绪类别在视频播放时间轴上出现的时间段，将时间段标识为与情绪类别对应的颜色。
26.根据权利要求24所述的设备，其特征在于，获取单元还用于接收对预定观众的选择，获取与该视频和选择的观众对应的视频播放配置信息。
27.一种拍摄视频的设备，其特征在于，包括: 采集单元，用于在拍摄视频时实时采集被拍摄者的面部表情； 分析单元，用于分析所述脸部表情，得出被拍摄者的情绪类别； 标记单元，用于将所述情绪类别在视频拍摄时间轴上进行标记； 生成单元，用于生成视频播放配置信息，所述视频播放配置信息记录了被拍摄者的情绪类别以及所述情绪类别在视频拍摄时间轴上出现的时间段。
28.根据权利要求27所述的拍摄视频的设备，其特征在于，生成单元还用于针对不同的被拍摄者生成对应的视频播放配置信息。
29.根据权利要求27所述的拍摄视频的设备，其特征在于，所述面部表情还包括脸部范围内的手部动作。
30.根据权利要求27所述的拍摄视频的设备，其特征在于，所述情绪类别包括开心、感动、平静、悲伤、愤怒、厌倦中的至少一项。
31.根据权利要求27所述的拍摄视频的设备，其特征在于，分析单元还用于分析之前预定长度的时间段内情绪类别的变化，得出被拍摄者的情绪类别。
32.根据权利要求27所述的拍摄视频的设备，其特征在于，生成单元还用于，检测以下数据中的至少一项并将检测的数据记录在视频播放配置信息中:各种情绪类别出现的次数、各种情绪类别出现的时间长度 占整个视频时间长度的比例、情绪线，所述情绪线为被拍摄者情绪在视频拍摄时间轴上的变化曲线。
【文档编号】H04N21/442GK103826160SQ201410011366
【公开日】2014年5月28日 申请日期:2014年1月9日 优先权日:2014年1月9日
【发明者】施伟雄 申请人:广州三星通信技术研究有限公司, 三星电子株式会社