一种视频交流的信息处理方法及装置制造方法
【专利摘要】本申请公开了一种视频交流的信息处理方法及装置。方法包括：对每个当前视频交流参与者进行身份识别并分配唯一的身份标识及角色标识；获取当前视频交流的初始化信息以及收集当前视频交流过程的信息；根据当前视频交流参与者的角色标识和预定策略之间的关联关系，查找得到当前视频交流参与者所对应的预定策略；使用预定策略对初始化信息以及当前视频交流过程的信息进行汇总处理，得到当前视频交流评价信息；将当前视频交流评价信息发送给当前视频交流参与者。通过上述方式，充分利用视频交流的初始化信息以及视频交流过程的信息，能够有效的提升视频交流效果。
【专利说明】一种视频交流的信息处理方法及装置
【技术领域】
[0001]本发明涉及通信【技术领域】，特别是涉及一种视频交流信息处理方法及装置。
【背景技术】
[0002]在计算机、网络技术高速发展的今天，传统的通讯方式如电话、传真等因达不到面对面沟通的效果，不能满足人们日益增长的交流需求，而日益发展的网络环境又使视频和音频的传输成为可能，因此也就诞生了一种新的通信方式一视频交流。
[0003]视频交流系统是指通过现有的各种电气通讯传输媒体，将人物的静、动态图像、语音、文字等多种资料分送到各个用户的计算机上，实时传送声音、图像的通信方式。通过视频交流使得在地理上分散的用户可以在网络中共聚一处，通过电视发表意见，同时观察对方的形象、动作、表情等，并能出示实物、图纸、文件等实拍的电视图像或者显示在黑板、白板上写的字和画的图，使参加会议的人感到如同跟对方在进行现场“面对面”的交谈，增加双方对内容的理解，在效果上可以代替现场举行的会议。
[0004]随着现代社会的发展，视频交流成为工作沟通或远程教学中越来越重要的手段。与此同时，视频交流系统吸引着越来越多的组织和个人通过它进行更为有效的沟通。
[0005]一般的视频交流系统并没有充分利用视频交流的初始化信息以及视频交流过程的信息，不能很好的提升视频交流效果。
【发明内容】
[0006]本申请提供了一种视频交流的信息处理方法及装置的实施方式，能够充分利用视频交流的初始化信息以及视频交流过程的信息，有效提升视频交流效果。
[0007]第一方面，提供一种视频交流的信息处理方法，包括:对每个当前视频交流参与者进行身份识别，为每个当前视频交流参与者分配唯一的身份标识及角色标识；获取当前视频交流的初始化信息以及收集当前视频交流过程的信息；根据当前视频交流参与者的角色标识和预定策略之间的关联关系，查找并得到所述当前视频交流参与者所对应的预定策略；使用所述查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到所述当前视频交流参与者的当前视频交流评价信息；将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
[0008]结合第一方面，在第一种可能的实现方式中:所述收集当前视频交流过程的信息的步骤包括:通过人脸跟踪技术检测到有第一参与者的人脸不在图像中时，查找所述第一参与者的人脸以获取第一身份标识，并记录所述第一身份标识及人脸不在图像中的第一参与者离开会场的时间。
[0009]结合第一方面的第一种可能的实现方式，在第二种可能的实现方式中:所述收集当前视频交流过程的信息的步骤还包括:通过人脸跟踪技术检测到有新人脸出现时，查找所述新人脸是否与记录的所述第一身份标识相匹配，若是，记录所述第一参与者重回会场的时间，若否，为所述新人脸分配身份标识以及记录所述新人脸的入场的时间。[0010]结合第一方面的第一种可能的实现方式，在第三种可能的实现方式中:所述收集当前视频交流过程的信息的步骤包括:当通过人脸跟踪技术检测到图像中的人脸数量低于预设的数值时，记录当前时间以作为中场休息开始时间；当通过人脸跟踪技术再次检测到图像中的人脸数量达到所述预设的数值时，记录当前时间以作为中场休息结束时间。
[0011]结合第一方面，在第四种可能的实现方式中:所述收集当前视频交流过程的信息的步骤包括:通过人脸跟踪技术检测到第二参与者的人脸，并进一步根据表情识别技术检测所述第二参与者的人脸是否打瞌睡，若是，则根据所述打瞌睡的第二参与者的人脸查找到第二身份标识，记录所述第二身份标识以及所述打瞌睡开始时间和结束时间。
[0012]结合第一方面，在第五种可能的实现方式中:所述收集当前视频交流过程的信息的步骤包括:当通过语音识别技术检测到有第三参与者的语音时，根据所述第三参与者的语音查找到第三身份标识，记录所述第三身份标识及所述第三参与者发言开始时间。
[0013]结合第一方面的第五种可能的实现方式，在第六种可能的实现方式中:所述收集当前视频交流过程的信息的步骤还包括:当通过语音识别技术检测到所述第三参与者的语音结束，记录所述第三参与者发言结束时间，并检测当前时间的会场音量。
[0014]结合第一方面的第六种可能的实现方式，在第七种可能的实现方式中:所述检测当前时间的会场音量的步骤之后，还包括:当所述会场音量低于预设的第一阈值，记录所述第三参与者的发言效果为一般；当所述会场音量大于预设的第一阈值但小于预设的第二阈值，记录所述第三参与者的发言效果为良；当所述会场音量大于预设的第二阈值，记录所述第三参与者的发言效果为优，其中，所述第二阈值大于所述第一阈值。
[0015]结合第一方面的第五种可能的实现方式，在第八种可能的实现方式中:所述收集当前视频交流过程的信息的步骤还包括:当第一次检测到所述第三参与者的发言时，初始化所述第三参与者的发言次数为1，否则，所述第三参与者的发言次数加I。
[0016]结合第一方面，在第九种可能的实现方式中:所述获取当前视频交流的初始化信息的步骤包括:通过初始化当前视频交流系统以获取当前视频交流的至少包括会场数目、每个会场的应到人数信息、实到人数信息、未到场人数信息、当前视频交流开始的时间信息、每个当前视频交流参与者入场的初始时间信息以及每个参与者信息的初始化信息。
[0017]结合第一方面，在第十种可能的实现方式中:所述将得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者的步骤包括:通过移动终端、电子邮件、即时通讯工具的至少一种方式将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
[0018]结合第一方面，在第十一种可能的实现方式中:所述为每个当前视频交流参与者分配唯一的身份标识及角色标识的步骤包括:为每个当前视频交流参与者分配唯一的身份标识及主持人、主讲人、助理、管理员、普通参与者中的至少一种角色标识。
[0019]结合第一方面的第十一种可能的实现方式，在第十二种可能的实现方式中:所述使用查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到所述当前视频交流参与者的当前视频交流评价信息的步骤包括下列获取视频交流评价信息中的至少其中一 项:使用所述查找得到的主持人/主讲人的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息；使用所述查找得到的助理的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括视频交流实时信息、视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息；使用所述查找得到的普通参与者的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息及所述普通参与者自己的整体表现信息的视频交流评价信息；使用所述查找得到的管理员的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括会场出勤率信息的视频交流评价信息。
[0020]第二方面，提供一种视频交流的信息处理装置，包括分配模块、获取模块、查找模块、处理模块以及发送模块，其中:所述分配模块用于对每个当前视频交流参与者进行身份识别，为所述每个当前视频交流参与者分配唯一的身份标识及角色标识；所述获取模块用于获取当前视频交流的初始化信息以及收集当前视频交流过程的信息，并将所述当前视频交流的初始化信息以及所述当前视频交流过程的信息发送给所述处理模块；所述查找模块用于根据当前视频交流参与者的角色标识和预定策略之间的关联关系，查找并得到所述当前视频交流参与者所对应的预定策略，并将所述预定策略发送给所述处理模块；所述处理模块用于使用所述查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到所述当前视频交流参与者的当前视频交流评价信息，并将所述当前视频交流参与者的当前视频交流评价信息发送给所述发送模块；所述发送模块用于将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
[0021]结合第二方面，在第一种可能的实现方式中:所述获取模块具体用于通过人脸跟踪技术检测到第一参与者的人脸不在图像中时，查找所述第一参与者的人脸以获取第一身份标识，并记录所述第一身份标识及人脸不在图像中的第一参与者离开会场的时间。
[0022]结合第二方面的第一种可能的实现方式，在第二种可能的实现方式中:所述获取模块还用于通过人脸跟踪技术检测到有新人脸出现时，查找所述新人脸是否与记录的所述第一身份标识相匹配，若是，记录所述第一参与者重回会场的时间，若否，通知所述分配模块为所述新人脸分配身份标识以及记录所述新人脸的入场的时间。
[0023]结合第二方面的第一种可能的实现方式，在第三种可能的实现方式中:所述获取模块还用于当通过人脸跟踪技术检测到图像中的人脸数量低于预设的数值时，记录当前时间以作为中场休息开始时间；当通过人脸跟踪技术再次检测到图像中的人脸数量达到所述预设的数值时，记录当前时间以作为中场休息结束时间。
[0024]结合第二方面，在第四种可能的实现方式中:所述获取模块具体用于通过人脸跟踪技术检测到第二参与者的人脸，并进一步根据表情识别技术检测所述第二参与者的人脸是否打瞌睡，若是，则根据所述打瞌睡的第二参与者的人脸查找到相应的第二身份标识，记录所述第二身份标识以及所述打瞌睡开始时间和结束时间。
[0025]结合第二方面，在第五种可能的实现方式中:所述获取模块具体用于当通过语音识别技术检测到有第三参与者的语音时，根据所述第三参与者的语音查找到第三身份标识，记录所述第三身份标识及所述第三参与者发言开始时间。
[0026]结合第二方面的第五种可能的实现方式，在第六种可能的实现方式中:所述获取模块还用于当通过语音识别技术检测到所述第三参与者的语音结束，记录所述第三参与者发言结束时间，并检测当前时间的会场音量。
[0027]结合第二方面的第六种可能的实现方式，在第七种可能的实现方式中:所述获取模块还用于当所述会场音量低于预设的第一阈值，记录所述第三参与者的发言效果为一般；当所述会场音量大于预设的第一阈值但小于预设的第二阈值，记录所述第三参与者的发言效果为良；当所述会场音量大于预设的第二阈值，记录所述第三参与者的发言效果为优，其中，所述第二阈值大于所述第一阈值。
[0028]结合第二方面的第五 种可能的实现方式，在第八种可能的实现方式中:所述获取模块还用于当第一次检测到所述第三参与者的发言时，初始化所述第三参与者的发言次数为1，否则，所述第三参与者的发言次数加I。
[0029]结合第二方面，在第九种可能的实现方式中:所述获取模块用于通过初始化当前视频交流系统以获取当前视频交流的至少包括会场数目、每个会场的应到人数信息、实到人数信息、未到场人数信息、当前视频交流开始的时间信息、每个当前视频交流参与者入场的初始时间信息以及每个参与者信息的初始化信息。
[0030]结合第二方面，在第十种可能的实现方式中:所述发送模块具体用于通过移动终端、电子邮件、即时通讯工具的至少一种方式将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
[0031]结合第二方面，在第十一种可能的实现方式中:所述分配模块具体用于对每个当前视频交流参与者进行身份识别，为每个当前视频交流参与者分配唯一的身份标识及主持人、主讲人、助理、管理员、普通参与者中的至少一种角色标识。
[0032]结合第二方面的第十一种可能的实现方式，在第十二种可能的实现方式中:所述处理模块具体用于使用所述查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到下列视频交流评价信息中的至少其中一项:使用所述查找得到的主持人/主讲人的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息；使用所述查找得到的助理的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括视频交流实时信息、视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息；使用所述查找得到的普通参与者的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息及所述普通参与者自己的整体表现信息的视频交流评价信息；使用所述查找得到的管理员的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括会场出勤率信息的视频交流评价信息。
[0033]本申请实施方式提供的视频交流的信息处理方法，根据当前视频交流参与者的角色标识和预定策略之间的关联关系，查找并得到当前视频交流参与者所对应的预定策略，并使用该预定策略对初始化信息以及当前视频交流过程的信息进行汇总处理，得到所述当前视频交流参与者的当前视频交流评价信息。通过这种方式，能够充分利用视频交流的初始化信息以及视频交流过程的信息，并结合不同参与者的角色而采用预定的策略对信息进行处理而得到针对不同角色的不同视频交流评价信息，从而使参与者能够获得跟自己角色对应的视频交流评价信息，既节省了参与者阅读视频交流评价数据的时间，又能得到对自 己有帮助的视频交流评价数据，有效提升视频交流的效果。
【专利附图】
【附图说明】
[0034]为了更清楚地说明本申请实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0035]图1是本申请视频交流的信息处理方法的应用场景示意图；
[0036]图2是本申请视频交流的信息处理方法的另一个应用场景示意图；
[0037]图3是本申请视频交流的信息处理方法一个实施方式的流程图；
[0038]图4是本申请视频交流的信息处理方法其中一个实施方式中，收集视频交流过程的信息的流程图；
[0039]图5是本申请视频交流的信息处理方法其中一个实施方式中，收集视频交流过程的信息的流程图；
[0040]图6是本申请视频交流的信息处理方法其中一个实施方式中，收集视频交流过程的信息的流程图；
[0041]图7是本申请视频交流的信息处理装置一个实施方式的结构示意图；
[0042]图8是本申请视频交流系统一个实施方式的结构示意图。
【具体实施方式】
[0043]为使本申请实施方式的目的、技术方案和优点更加清楚，下面将结合本申请实施方式中的附图，对本申请实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式是本申请一部分实施方式，而不是全部的实施方式。基于本申请中的实施方式，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式，都属于本申请保护的范围。
[0044]本申请视频交流的信息处理方法可以在视频交流系统上实现。请参阅图1和图2，为本申请视频交流的信息处理方法的应用场景。图1中是点对点的视频交流应用场景，视频交流系统100之间通过通信总线200实现通信；图2是多点的视频交流应用场景，多个视频交流系统100通过通信总线200与共同的第三方应用300实现通信。
[0045]其中，视频交流系统100可以包括信息采集设备11、信息收发设备12以及信息展不设备13。
[0046]信息采集设备11用于采集视频交流过程的语音、图像信息等，可以是现有技术中的任何信息采集设备，比如摄像机、麦克风等等。
[0047]信息收发设备12用于接收和发送视频交流过程的信息，可以是现有技术中任何可以收发信息的终端设备。
[0048]信息展示设备13用于展示视频交流过程的语音、图像信息以及文本信息等，可以是显示器、会控触摸屏、联网的个人终端如手机、Pad等等。
[0049]第三方应用300可以是服务器、媒体网关设备、微控制单元设备(MCU)等等。
[0050]请参阅图3，本申请视频交流的信息处理方法一个实施方式包括:[0051]步骤SlOl:对每个当前视频交流参与者进行身份识别，为每个当前视频交流参与者分配唯一的身份标识及角色标识；
[0052]自动识别每个视频交流参与者，比如可以是通过指纹识别、虹膜识别、视频分析、语音识别的任一种方式识别视频交流参与者。并为每个视频交流参与者分配唯一的身份标识，比如ID号。以及为每个视频交流参与者分配角色标识，其中，角色标识可以包括是主持人、主讲人、助理、管理员、普通参与者。通常一个视频交流参与者只有一个角色标识，当然，根据需要，也可以同时有两个或两个以上角色标识。
[0053]本申请实施方式中，主持人是视频交流的主要管理者和主要发言者，在视频交流中可以分配角色、管理权限、设置视频交流参数、共享文档，并使得参与者跟随主持人的内容切换；主讲人是视频交流的主要发言者，在视频交流过程中可进行转换视频界面，主讲人可以进行发言、共享文档，并使得参加者跟随主讲人的内容切换；助理是视频交流中的协助者，在视频交流过程中可以协助点名，创建投票，问卷，分配权限，文档管理等；普通参与者是视频交流中的主要参加者，主持人或助理可以在视频交流中分配给参与者权限或角色，使其进行语音和数据的交互；管理员负责视频交流会场的各项管理工作。
[0054]目前视频交流大多通过管理界面、或者配置文件对这些角色进行配置。也有通过视频分析技术进行自动识别的情形，如视频教学中依据走动时间的多少自动识别老师和学生角色，但视频分析技术与具体应用场景强相关，普适性并不理想。
[0055]步骤S102:获取当前视频交流的初始化信息以及收集当前视频交流过程的信息；
[0056]通过初始化当前视频交流系统以获取当前视频交流初始化信息。其中，视频交流的初始化信息包括但不限于是:会场数目信息，比如本次视频交流有3个会场；每个会场应到的人数信息，比如每个会场应到3人；实到人数信息，比如甲、乙、丙会场的实到人数分别为2、2、1等；未到场人信息，比如甲会场王某、乙会场丁某以及丙会场张某、李某未到场等等；当前视频交流开始的时间，比如当前视频交流开始时间为9:30 ;每个当前视频交流参与者入场的初始时间信息，比如可以设定在视频交流开始时间之前入场的参与者入场的初始时间都设定为视频交流开始时间，而在视频交流开始时间之后入场的参与者入场的初始时间设定为该参与者实际入场时间；每个参与者信息，比如参与者的联系方式，可以包括参与者的手机号、QQ号、微信号码以及电子邮箱等等。
[0057]这些视频交流初始化信息会实时的输出给相关人员比如视频交流的秘书或者主持人，以使相关人员可以根据实际情况采取相应的行动。比如秘书可以及时的通知未到场的人员及时入场，或者主持人也可以在未到场参与者比较多的情况下适当将视频交流的开始时间延后等。
[0058]通过音频以及视频结合的方式获取视频交流过程的信息。比如通过人脸识别及跟踪技术与语音识别技术相结合的方式实时获取视频交流现场的信息。其中，视频交流过程的信息包括但不限于是:视频交流进行中的实时信息比如:会场情况信息、参与者状态信息、视频交流状态信息等。
[0059]会场情况信息包括但不限于是:
[0060]视频交流的中途休息情况信息，比如本次视频交流中途休息了两次,每次休息15分钟；
[0061]视频交流的中途人员离场以及离场时间信息，比如视频交流中途甲会场的王某离开会场20分钟；
[0062]视频交流的中途人员入场以及入场时间信息，比如张某在视频交流中途进入丙会场等等。当然，为了记录更为详细的信息，还可以包括具体的时间点，比如张某在15点43分进入丙会场。
[0063]参与者状态信息包括但不限于:
[0064]参与者精力不集中的状态信息,包括参与者讨论、低头、瞌睡、玩手机的状态信息，比如乙会场的李某打瞌睡半小时；
[0065]参与者发言次数以及发言时长信息，比如丙会场的张某发言3次，每次发言2分钟，合计6分钟；
[0066]每次发言后其他参与者的反应信息，比如丙会场的张某A发言有2次引起大家鼓旱寺。
[0067]步骤S103:根据当前视频交流参与者的角色标识和预定策略之间的关联关系，查找并得到当前视频交流参与者所对应的预定策略；
[0068]通常情况下，每个视频交流参与者因为角色不一样，其关注的视频交流相关的信息不一样。例如会场管理员会关注会场出勤率，但不会对各参与者的信息感兴趣；隐私，如A参与者关心自己的视频交流出勤率及表现情况，但不会关注B参与者的相关信息，也不愿意自己的视频交流信息被其他参与者获知。因此，可以设定不同的角色标识对应不同的视频交流信息处理的策略。
[0069]根据当前视频交流参与者的角色标识，通过查找可以得到当前视频交流参与者所对应的预定策略。
[0070]步骤S104:使用查找得到的预定策略对初始化信息以及当前视频交流过程的信息进行汇总处理，得到当前视频交流参与者的当前视频交流评价信息；
[0071]使用查找得到的预定策略对初始化信息以及当前视频交流过程的信息进行汇总处理，得到针对视频交流参与者的角色的不同的视频交流评价信息。本实施方式，不同角色标识对应的视频交流评价信息包含的内容可参见表I。
[0072]其中，视频交流评价信息包括但不限于是以下视频交流评价信息中的至少一项:
[0073]适于视频交流助理查看的至少包括视频交流实时信息、视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息，比如本次视频交流有甲、乙、丙3个会场，每个会场应到人数3人，每个会场实到人数分别为2人，每个会场还有I人未入会；本次视频交流实际时长2小时，中途休息0.5小时；甲、乙会场出勤率分别为100%、丙会场出勤率66.7% ;甲会场的王某在场时间2小时，有效在场时间1.5小时(其中有效在场时间为在场总时间减去精力不集中的时间)，其他人在场时间\有效在场时间都为2小时；乙会场的李某在场时间2小时，有效在场时间1.5小时，其他人在场时间\有效在场时间都为2小时；丙会场的2人在场时间\有效在场时间分别都为2小时；大家对议题“技术方案”和“产品前景”比较感兴趣等，助理可以将这样的视频交流评价信息通过口头或书面形式向领导汇报；
[0074]适于视频交流普通参与者查看的至少包括当前视频交流整体信息及普通参与者自己的整体表现信息的视频交流评价信息，比如针对普通参与者王某的视频交流评价信息可以包括:本次视频交流进行2.5小时，有效时长2小时，中场休息0.5小时；王某打瞌睡0.5小时，王某发言8次以及发言的相应内容，大家为王某鼓掌6次；大家对“技术方案”讨论激烈，“产品前景”引起的欢笑和鼓掌最多等；
[0075]适于视频交流主讲人/主持人查看的至少包括当前视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息，如本次视频交流参与者出勤率高，中途乙会场有I人入会，甲会场的王某离开会场0.5小时，乙会场的李某打瞌睡0.5小时，丙会场的张某发言积极，而且发言后得到大家的一致认同，大家对“技术方案”这一话题的讨论非常激烈；大家对议题“技术方案”和“产品前景”比较感兴趣等；
[0076]适于管理员查看的至少包括会场出勤率信息的视频交流评价信息，如本次视频交流甲乙会场出勤率分别为100%，丙会场出勤率66.7% ；
[0077]以上只是本实施方式根据视频交流角色的不同，生成相应不同的视频交流评价信息的举例，在实际应用过程中，可以根据需要设定策略，从而使生成的每个角色对应的视频交流评价信息所包含的内容能够满足视频交流参与者的实际需求。
[0078]步骤S105:将得到的当前视频交流参与者的当前视频交流评价信息发送给当前视频交流参与者；
[0079]通过移动终端(如手机、Pad)、电子邮件、即时通讯工具(比如QQ、MSN等)的至少一种方式将得到的当前视频交流参与者的当前视频交流评价信息发送给当前视频交流参与者。
[0080]视频交流参与者可以通过会控触摸屏、移动终端如手机、电子邮箱等查看视频交流评价信息(包括文本/图片/视频/语音等任意形式的视频交流评价信息)。详请参阅表
1
[0081]表1:不同角色对应的视频交流评价信息内容以及展示方式
[0082]
【权利要求】
1.一种视频交流的信息处理方法，其特征在于，包括: 对每个当前视频交流参与者进行身份识别，为每个当前视频交流参与者分配唯一的身份标识及角色标识； 获取当前视频交流的初始化信息以及收集当前视频交流过程的信息； 根据当前视频交流参与者的角色标识和预定策略之间的关联关系，查找并得到所述当前视频交流参与者所对应的预定策略； 使用所述查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到所述当前视频交流参与者的当前视频交流评价信息； 将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
2.根据权利要求1所述的方法，其特征在于，所述收集当前视频交流过程的信息的步骤包括:通过人脸跟踪技术检测到有第一参与者的人脸不在图像中时，查找所述第一参与者的人脸以获取第一身份标识，并记录所述第一身份标识及人脸不在图像中的第一参与者离开会场的时间。
3.根据权利要求2所述的方法，其特征在于，所述收集当前视频交流过程的信息的步骤还包括:通过人脸跟踪技术检测到有新人脸出现时，查找所述新人脸是否与记录的所述第一身份标识相匹配，若是，记录所述第一参与者重回会场的时间，若否，为所述新人脸分配身份标识以及记录所述新人脸的入场的时间。
4.根据权利要求2所述的方法，其特征在于，所述收集当前视频交流过程的信息的步骤包括:当通过人脸跟踪技术检测到图像中的人脸数量低于预设的数值时，记录当前时间以作为中场休息开始时间；当通过人脸跟踪技术再次检测到图像中的人脸数量达到所述预设的数值时，记录当前时间以作为中场休息结束时间。
5.根据权利要求1所述的方法，其特征在于，所述收集当前视频交流过程的信息的步骤包括:通过人脸跟踪技术检测到第二参与者的人脸，并进一步根据表情识别技术检测所述第二参与者的人脸是否打瞌睡，若是，则根据所述打瞌睡的第二参与者的人脸查找到第二身份标识，记录所述第二身份标识以及所述打瞌睡开始时间和结束时间。
6.根据权利要求1所述的方法，其特征在于，所述收集当前视频交流过程的信息的步骤包括:当通过语音识别技术检测到有第三参与者的语音时，根据所述第三参与者的语音查找到第三身份标识，记录所述第三身份标识及所述第三参与者发言开始时间。
7.根据权利要求6所述的方法，其特征在于，所述收集当前视频交流过程的信息的步骤还包括:当通过语音识别技术检测到所述第三参与者的语音结束，记录所述第三参与者发言结束时间，并检测当前时间的会场音量。
8.根据权利要求7所述的方法，其特征在于，所述检测当前时间的会场音量的步骤之后，还包括:当所述会场音量低于预设的第一阈值，记录所述第三参与者的发言效果为一般；当所述会场音量大于预设的第一阈值但小于预设的第二阈值，记录所述第三参与者的发言效果为良；当所述会场音量大于预设的第二阈值，记录所述第三参与者的发言效果为优，其中，所述第二阈值大于所述第一阈值。
9.根据权利要求6所述的方法，其特征在于，所述收集当前视频交流过程的信息的步骤还包括:当第一次检测 到所述第三参与者的发言时，初始化所述第三参与者的发言次数为1，否则，所述第三参与者的发言次数加I。
10.根据权利要求1所述的方法，其特征在于，所述获取当前视频交流的初始化信息的步骤包括:通过初始化当前视频交流系统以获取当前视频交流的至少包括会场数目、每个会场的应到人数信息、实到人数信息、未到场人数信息、当前视频交流开始的时间信息、每个当前视频交流参与者入场的初始时间信息以及每个参与者信息的初始化信息。
11.根据权利要求1所述的方法，其特征在于，所述将得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者的步骤包括:通过移动终端、电子邮件、即时通讯工具的至少一种方式将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
12.根据权利要求1所述的方法，其特征在于，所述为每个当前视频交流参与者分配唯一的身份标识及角色标识的步骤包括:为每个当前视频交流参与者分配唯一的身份标识及主持人、主讲人、助理、管理员、普通参与者中的至少一种角色标识。
13.根据权利要求12所述的方法，其特征在于，所述使用查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到所述当前视频交流参与者的当前视频交流评价信息的步骤包括下列获取视频交流评价信息中的至少其中一项:使用所述查找得到的主持人/主讲人的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴 趣议题信息的视频交流评价信息；使用所述查找得到的助理的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括视频交流实时信息、视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息；使用所述查找得到的普通参与者的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息及所述普通参与者自己的整体表现信息的视频交流评价信息；使用所述查找得到的管理员的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括会场出勤率信息的视频交流评价信息。
14.一种视频交流的信息处理装置，其特征在于，包括分配模块、获取模块、查找模块、处理模块以及发送模块，其中: 所述分配模块用于对每个当前视频交流参与者进行身份识别，为所述每个当前视频交流参与者分配唯一的身份标识及角色标识； 所述获取模块用于获取当前视频交流的初始化信息以及收集当前视频交流过程的信息，并将所述当前视频交流的初始化信息以及所述当前视频交流过程的信息发送给所述处理模块； 所述查找模块用于根据当前视频交流参与者的角色标识和预定策略之间的关联关系，查找并得到所述当前视频交流参与者所对应的预定策略，并将所述预定策略发送给所述处理模块； 所述处理模块用于使用所述查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到所述当前视频交流参与者的当前视频交流评价信息，并将所述当前视频交流参与者的当前视频交流评价信息发送给所述发送模块； 所述发送模块用于将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
15.根据权利要求14所述的装置，其特征在于，所述获取模块具体用于通过人脸跟踪技术检测到第一参与者的人脸不在图像中时，查找所述第一参与者的人脸以获取第一身份标识，并记录所述第一身份标识及人脸不在图像中的第一参与者离开会场的时间。
16.根据权利要求15所述的装置，其特征在于，所述获取模块还用于通过人脸跟踪技术检测到有新人脸出现时，查找所述新人脸是否与记录的所述第一身份标识相匹配，若是，记录所述第一参与者重回会场的时间，若否，通知所述分配模块为所述新人脸分配身份标识以及记录所述新人脸的入场的时间。
17.根据权利要求15所述的装置，其特征在于，所述获取模块还用于当通过人脸跟踪技术检测到图像中的人脸数量低于预设的数值时，记录当前时间以作为中场休息开始时间；当通过人脸跟踪技术再次检测到图像中的人脸数量达到所述预设的数值时，记录当前时间以作为中场休息结束时间。
18.根据权利要求14所述的装置，其特征在于，所述获取模块具体用于通过人脸跟踪技术检测到第二参与者的人脸，并进一步根据表情识别技术检测所述第二参与者的人脸是否打瞌睡，若是，则根据所述打瞌睡的第二参与者的人脸查找到相应的第二身份标识，记录所述第二身份标识以及所述打瞌睡开始时间和结束时间。
19.根据权利要求14所述的装置，其特征在于，所述获取模块具体用于当通过语音识别技术检测到有第三参与者的语音时，根据所述第三参与者的语音查找到第三身份标识，记录所述第三身份标识及所述第三参与者发言开始时间。
20.根据权利要求19所述的装置，其特征在于，所述获取模块还用于当通过语音识别技术检测到所述第三参与者的语音结束，记录所述第三参与者发言结束时间，并检测当前时间的会场音量。
21.根据权利要求20所述的装置，其特征在于，所述获取模块还用于当所述会场音量低于预设的第一阈值，记录所述第三参与者的发言效果为一般；当所述会场音量大于预设的第一阈值但小于预设的第二阈值，记录所述第三参与者的发言效果为良；当所述会场音量大于预设的第二阈值，记录所述第三参与者的发言效果为优，其中，所述第二阈值大于所述第一阈值。
22.根据权利要求19所述的装置，其特征在于，所述获取模块还用于当第一次检测到所述第三参与者的发言时，初始化所述第三参与者的发言次数为1，否则，所述第三参与者的发言次数加I。
23.根据权利要求14所述的装置，其特征在于，所述获取模块用于通过初始化当前视频交流系统以获取当前视频交流的至少包括会场数目、每个会场的应到人数信息、实到人数信息、未到场人数信息、当前视频交流开始的时间信息、每个当前视频交流参与者入场的初始时间信息以及每个参与者信息的初始化信息。
24.根据权利要求14所述的装置，其特征在于，所述发送模块具体用于通过移动终端、电子邮件、即时通讯工具的至少一种方式将所述得到的所述当前视频交流参与者的当前视频交流评价信息发送给所述当前视频交流参与者。
25.根据权利要求14所述的装置，其特征在于，所述分配模块具体用于对每个当前视频交流参与者进行身份识别，为每个当前视频交流参与者分配唯一的身份标识及主持人、主讲人、助理、管理员、普通参与者中的至少一种角色标识。
26.根据权利要求25所述的装置，其特征在于，所述处理模块具体用于使用所述查找得到的预定策略对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到下列视频交流评价信息中的至少其中一项:使用所述查找得到的主持人/主讲人的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息；使用所述查找得到的助理的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括视频交流实时信息、视频交流整体信息、各参与者整体表现信息、视频交流议题及感兴趣议题信息的视频交流评价信息；使用所述查找得到的普通参与者的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括当前视频交流整体信息及所述普通参与者自己的整体表现信息的视频交流评价信息；使用所述查找得到的管理员的预定策略，对所述初始化信息以及所述当前视频交流过程的信息进行汇总处理，得到至少包括会场出勤率信息的视频交流评价信息。
【文档编号】G06Q10/06GK103903074SQ201210568135
【公开日】2014年7月2日 申请日期:2012年12月24日 优先权日:2012年12月24日
【发明者】刘畅, 李凯, 李军华 申请人:华为技术有限公司