多点音频视频通信中远程互动的方法及设备与流程

文档序号:13217069阅读:194来源:国知局
技术领域本发明涉及通信领域,具体而言,涉及一种多点音频视频通信中远程互动的方法及设备。

背景技术:
随着IP网络和多媒体通信技术的快速发展,以及全球环保低碳的理念的影响,用户已经不需要亲临现场就可以通过音频视频多媒体技术实现的远程通信参与到会议、决策等,这使得音频视频远程通信在各行各业中得到了广泛的应用。会议电视系统、远程教育、远程医疗就是比较典型的应用。图1是根据相关技术的多点音频视频通信系统的结构示意图,如图1所示,多点音频视频通信系统包括:多点音频视频通信业务管理系统1和多点音频视频通信多点控制处理单元2。在如图1所示的系统中,通过多点音频视频通信多点控制处理单元2连接分布各地的多个多点音频视频通信终端,实现与会人员的互动和沟通。在现实应用中,例如远程教育和远程培训,经常会用到调查问卷,小测验之类的使用场景。而对于一些需要用户进行投票、打分、表决的使用场景下,大多数情况都是需要用户亲临现场,对用户的差旅费和时间都是很大的浪费。为了实现远程的投票、打分、表决,有必要增加表决功能。图2是根据相关技术的具有表决功能的多点音频视频通信系统的结构示意图,如图2所示,在如图1所示的系统中增加第三方的表决系统。上述通过引入第三方表决系统的方案存在一定的缺陷:一方面,需要改变多点音频视频通信系统的组网,在资源、配置等各个方面均需要匹配设置,专业性要求较高,对其使用效率产生影响;另一方面,购入第三方表决系统也会增大资金投入,不便于广泛推广。

技术实现要素:
本发明提供了一种多点音频视频通信中远程互动的方法及设备,以至少解决现有技术中在多点音频视频通信系统中引入第三方交互系统实现交互所导致的缺陷。根据本发明的一个方面,提供了一种音频视频会议中的远程互动方法,包括:MCU将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端;其中,各与会终端均支持用户输入通道;会议业务管理系统统计各与会终端根据音频和/或视频界面的指引而反馈的互动信息;MCU将会议业务管理系统得到的统计结果发送至各与会终端。进一步的,MCU将音频和/或视频界面发送至各与会终端前包括:MCU获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成用以指引用户输入的音频和视频界面。进一步的,MCU将指引用户输入的音频和/或视频界面发送至各与会终端,具体包括:MCU获取各与会终端支持的信息类型,并基于该信息类型向各与会终端发送音频和/或视频界面。进一步的,MCU将指引用户输入的音频和/或视频界面发送至各与会终端,具体包括:MCU获取各与会终端支持的信息类型,并检测各与会终端是否对接收信息的类型进行设定;若进行了设定,则检测对应与会终端设定的信息类型是否属于其支持的信息类型,若是,则基于设定的信息类型向对应与会终端发送音频或视频界面;否则,基于与会终端支持的信息类型向对应与会终端发送音频或视频界面;若未进行设定,则基于各与会终端支持的信息类型,向各与会终端发送音频和/或视频界面。进一步的,MCU将统计结果发送至各与会终端,具体包括:MCU将统计结果合成文字、音频和视频,并基于在先获取的各与会终端支持的信息类型,向各与会终端发送文字、音频和/或视频的统计结果。进一步的,MCU获取各与会终端支持的信息类型的方式包括:MCU获取为各与会终端建立的逻辑通道,根据逻辑通道的类型确定与会终端支持的信息类型;逻辑通道的类型包括:音频、视频和数据。进一步的,MCU将指引用户输入的音频和/或视频界面发送至各与会终端,进一步包括:MCU将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端;MCU将统计结果发送至各与会终端,进一步包括:MCU将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。进一步的,互动的类型包括:投票、打分和表决。根据本发明的另一个方面,提供了一种多点控制单元MCU,包括:互动发起模块,用于在视频会议中,将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端;其中,各与会终端均支持用户输入通道;互动处理模块,用于接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息,并将互动信息发送至会议业务管理系统,以及接收会议业务管理系统利用互动信息进行统计得到的统计结果,将统计结果发送至各与会终端。进一步的,互动发起模块,还用于获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成用以指引用户输入的音频和视频界面。进一步的,互动发起模块,具体用于获取各与会终端支持的信息类型,并基于该信息类型向各与会终端发送音频和/或视频界面。进一步的,互动发起模块,具体用于获取各与会终端支持的信息类型,并检测各与会终端是否对接收信息的类型进行设定,若进行了设定,则检测对应与会终端设定的信息类型是否属于其支持的信息类型,若是,则基于设定的信息类型向对应与会终端发送音频或视频界面;否则,基于与会终端支持的信息类型向对应与会终端发送音频或视频界面;若未进行设定,则基于各与会终端支持的信息类型,向各与会终端发送音频和/或视频界面。进一步的,互动处理模块,进一步用于将统计结果合成文字、音频和视频,并基于在先获取的各与会终端支持的信息类型,向各与会终端发送文字、音频和/或视频的统计结果。进一步的,互动发起模块,进一步用于将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端;互动处理模块,进一步用于将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。根据本发明的再一个方面,提供了一种音频视频会议中的远程互动系统,包括:会议业务管理系统、与会终端、以及上述的MCU;与会终端,用于在接收到MCU发送的与本次互动对应的用于指引用户输入的音频和/或视频界面后,根据音频和/或视频界面的指引进行互动操作,并将操作得到的互动信息发送至MCU;会议业务管理系统,用于接收MCU发送的各与会终端根据音频和/或视频界面的指引而反馈的互动信息,并对互动信息进行统计后,将统计结果发送至MCU。根据本发明的再一个方面,提供了一种多点音频视频通信中远程互动方法,包括:多点音频视频通信多点控制处理单元将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端;其中,各与会终端均支持用户输入通道;多点音频视频通信多点控制处理单元接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息;多点音频视频通信多点控制处理单元将互动信息发送至多点音频视频通信业务管理系统;多点音频视频通信多点控制处理单元接收多点音频视频通信业务管理系统利用互动信息进行统计得到的统计结果;多点音频视频通信多点控制处理单元将统计结果发送至各与会终端。进一步的,多点音频视频通信多点控制处理单元将音频和/或视频界面发送至各与会终端之前,还包括:多点音频视频通信多点控制处理单元获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成用以指引用户输入的音频和视频界面。进一步的,多点音频视频通信多点控制处理单元将指引用户输入的音频和/或视频界面发送至各与会终端,包括:多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型;多点音频视频多点控制处理单元基于各与会终端支持的信息类型向各将指引用户输入的音频和/或视频界面发送至各与会终端。进一步的,多点音频视频通信多点控制处理单元将指引用户输入的音频和/或视频界面发送至各与会终端,包括:多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型,并检测各与会终端是否对接收信息的类型进行设定;当与会终端设定了接收信息的类型时,检测对应与会终端设定的信息类型是否属于其支持的信息类型,若是,基于设定的信息类型向对应与会终端发送音频和/或视频界面;若否,基于与会终端支持的信息类型向对应与会终端发送音频和/或视频界面;和/或当与会终端未设定接收信息的类型时,基于各与会终端支持的信息类型,向各与会终端发送音频和/或视频界面。进一步的,多点音频视频通信多点控制处理单元将统计结果发送至各与会终端,包括:多点音频视频通信多点控制处理单元将统计结果合成文字、音频和视频,并基于在先获取的各与会终端支持的信息类型,向各与会终端发送文字、音频和/或视频的统计结果。进一步的,多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型的方式包括:多点音频视频通信多点控制处理单元获取为各与会终端建立的逻辑通道,根据逻辑通道的类型确定与会终端支持的信息类型;逻辑通道的类型包括:音频、视频和数据。进一步的,多点音频视频通信多点控制处理单元将指引用户输入的音频和/或视频界面发送至各与会终端,包括:多点音频视频通信多点控制处理单元将用于指引用户输入的音频和/或视频界面与当前多点音频视频通信中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端;多点音频视频通信多点控制处理单元将统计结果发送至各与会终端,包括:多点音频视频通信多点控制处理单元将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。进一步的,互动的类型包括:投票、打分和表决。进一步的,多点音频视频通信多点控制处理单元包括多点控制单元MCU。根据本发明的再一个方面,提供了一种多点音频视频通信多点控制处理单元,包括:互动发起模块,用于在多点音频视频通信中,将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端;其中,各与会终端均支持用户输入通道;互动处理模块,用于接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息,并将互动信息发送至多点音频视频通信业务管理系统,以及接收会议业务管理系统利用互动信息进行统计得到的统计结果,将统计结果发送至各与会终端。进一步的,互动发起模块,还用于获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成用以指引用户输入的音频和视频界面。进一步的,互动发起模块,用于获取各与会终端支持的信息类型,并基于该信息类型向各与会终端发送音频和/或视频界面。进一步的,互动发起模块,用于获取各与会终端支持的信息类型,并检测各与会终端是否对接收信息的类型进行设定,若进行了设定,则检测对应与会终端设定的信息类型是否属于其支持的信息类型,若是,则基于设定的信息类型向对应与会终端发送音频或视频界面;否则,基于与会终端支持的信息类型向对应与会终端发送音频或视频界面;若未进行设定,则基于各与会终端支持的信息类型,向各与会终端发送音频和/或视频界面。进一步的,互动处理模块,进一步用于将统计结果合成文字、音频和视频,并基于在先获取的各与会终端支持的信息类型,向各与会终端发送文字、音频和/或视频的统计结果。进一步的,互动发起模块,进一步用于将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端;互动处理模块,进一步用于将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。进一步的,多点音频视频通信包括语音视频会议;多点音频视频通信多点控制处理单元包括多点控制单元MCU。通过本发明,在多点音频视频通信系统中实现了远程交互,从而无需引入第三方设备,提高了可操作性并降低了成本。附图说明此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:图1是根据相关技术的多点音频视频通信系统的结构示意图;图2是根据相关技术的具有表决功能的多点音频视频通信系统的结构示意图;图3是根据本发明实施例一的多点音频视频通信中远程互动的方法的流程图;图4是根据本发明实施例一的多点音频视频通信多点控制处理单元的结构框图;图5是根据本发明实施例一的另一多点音频视频通信中远程互动的方法的流程图;图6是根据本发明实施例一的多点音频视频通信业务管理系统的结构框图;图7是根据本发明实施例二的多点音频视频通信中远程互动的方法的流程图;图8是根据本发明实施例二的多点音频视频通信多点控制处理单元的结构框图;图9是根据本发明实施例可选实施方式一的多点音频视频通信中远程互动的方法的流程图;图10是根据本发明实施例可选实施方式二的多点音频视频通信中远程互动的方法的流程图;图11是根据本发明实施例可选实施方式三的多点音频视频通信多点控制处理单元的结构框图;以及图12是根据本发明实施例可选实施方式四的远程教育中的远程互动系统的结构示意图。具体实施方式下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。实施例一在本实施例中提供了一种多点音频视频通信中远程互动的方法,图3是根据本发明实施例一的多点音频视频通信中远程互动的方法的流程图,如图3所示,该流程包括如下步骤:步骤S302,多点音频视频通信多点控制处理单元向多点音频视频通信终端发送承载第一互动信息的音频和/或视频数据;步骤S304,多点音频视频通信多点控制处理单元接收多点音频视频通信终端根据第一互动信息发送的承载第二互动信息的音频和/或视频数据;步骤S306,多点音频视频通信多点控制处理单元处理第二互动信息。通过本发明实施例,在多点音频视频通信系统中实现了远程交互,从而无需引入第三方设备,提高了可操作性并降低了成本。在本发明实施例的一个可选实施方式中,上述步骤S306中多点音频视频通信多点控制处理单元处理第二互动信息可以包括:多点音频视频通信多点控制处理单元向多点音频视频通信业务管理系统发送上述第二互动信息,接收多点音频视频通信业务管理系统根据上述第二互动信息发送的处理结果。通过该可选实施方式,降低了多点音频视频通信多点控制处理单元的处理负荷。在本发明实施例的一个可选实施方式中,多点音频视频通信多点控制处理单元接收多点音频视频通信业务管理系统根据第二互动信息发送的处理结果之后,还可以向多点音频视频通信终端发送承载上述处理结果的音频和/或视频数据。在本发明实施例的一个可选实施方式中,多点音频视频通信多点控制处理单元向多点音频视频通信终端发送承载第一互动信息的音频和/或视频数据,包括:多点音频视频通信多点控制处理单元获取第一互动信息,将该第一互动信息和会议中的语音和/或视频码流编码,得到承载上述第一互动信息的音频和/或视频数据,向多点音频视频通信终端发送上述承载第一互动信息的音频和/或视频数据。通过该可选实施方式,将会以中的信息和交互信息编码后发送给多点音频视频通信终端。在本发明实施例的一个可选实施方式中,多点音频视频通信多点控制处理单元向多点音频视频通信终端发送上述承载处理结果的音频和/或视频数据,包括:多点音频视频通信多点控制处理单元将上述处理结果和会议中的语音和/或视频码流编码,得到承载处理结果的音频和/或视频数据,向多点音频视频通信终端发送该承载处理结果的音频和/或视频数据。在本实施例中还提供了一种多点音频视频通信多点控制处理单元,该单元用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。图4是根据本发明实施例的多点音频视频通信多点控制处理单元的结构框图,如图4所示,该多点音频视频通信多点控制处理单元包括:第一发送模块410,用于向多点音频视频通信终端发送承载第一互动信息的音频和/或视频数据;接收模块420,与第一发送模块410相连,用于接收多点音频视频通信终端根据上述第一互动信息发送的承载第二互动信息的音频和/或视频数据;处理模块430,与接收模块420相连,用于处理上述第二互动信息。在本发明实施例的一个可选实施方式中,上述处理模块430可以包括:发送单元,用于向多点音频视频通信业务管理系统发送第二互动信息;接收单元,与发送单元相连,用于接收多点音频视频通信业务管理系统根据第二互动信息发送的处理结果。在本发明实施例的一个可选实施方式中,上述多点音频视频通信多点控制处理单元还包括:第二发送模块,用于向多点音频视频通信终端发送承载处理结果的音频和/或视频数据。在本发明实施例的一个实施方式中,上述第一发送模块410可以包括:获取单元,用于获取第一互动信息;第一编码单元,与上述获取单元相连,用于将第一互动信息和会议中的语音和/或视频码流编码,得到承载第一互动信息的音频和/或视频数据;第一发送单元,与第一编码单元相连,用于向多点音频视频通信终端发送承载第一互动信息的音频和/或视频数据。在本发明实施例的一个可选实施方式中,上述第二发送模块可以包括:第二编码单元,用于将处理结果和会议中的语音和/或视频码流编码,得到承载处理结果的音频和/或视频数据;第二发送单元,与第二编码单元相连,用于向多点音频视频通信终端发送承载处理结果的音频和/或视频数据。在本实施例中还提供了另一种多点音频视频通信中远程互动的方法,图5是根据本发明实施例一的另一多点音频视频通信中远程互动的方法的流程图,如图5所示,该流程包括如下步骤:步骤S502,多点音频视频通信业务管理系统指示多点音频视频通信多点控制处理单元向多点音频视频通信终端发送第一互动信息;步骤S504,该多点音频视频通信业务管理系统接收多点音频视频通信多点控制处理单元发送的多点音频视频通信终端根据上述第一互动信息反馈的第二互动信息;步骤S506,多点音频视频通信业务管理系统处理该第二互动信息。在本发明实施例的一个可选实施方式中,上述步骤S506,多点音频视频通信业务管理系统处理上述第二互动信息之后,多点音频视频通信业务管理系统还可以指示多点音频视频通信多点控制处理单元向多点音频视频通信终端发送处理结果。在本发明实施例的一个可选实施方式中,上述第一互动信息包括投票信息和/或打分信息;上述第二互动信息包括:投票选择和/或打分分数;上述步骤S506中多点音频视频通信业务管理系统处理上述第二互动信息可以包括:多点音频视频通信业务管理系统对投票选择和/或打分分数进行统计分析,得到投票结果和/或打分结果。在本实施例中还提供了一种多点音频视频通信业务管理系统,该单元用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。图6是根据本发明实施例一的多点音频视频通信业务管理系统的结构框图,如图6所示,该系统包括:第一指示模块610,用于指示多点音频视频通信多点控制处理单元向多点音频视频通信终端发送第一互动信息;接收模块620,与第一指示模块610相连,用于接收多点音频视频通信多点控制处理单元发送的多点音频视频通信终端根据第一互动信息反馈的第二互动信息;处理模块630,与接收模块620相连,用于处理第二互动信息。在本发明实施例的一个可选实施方式中,上述多点音频视频通信业务管理系统还包括:第二指示模块,用于指示多点音频视频通信多点控制处理单元向多点音频视频通信终端发送处理结果。在本发明实施例的一个可选实施方式中,第一互动信息包括投票信息和/或打分信息;第二互动信息包括以下至少之一:投票选择和/或打分分数;上述处理模块,用于多点音频视频通信业务管理系统对投票选择和/或打分分数进行统计分析得到投票结果和/或打分结果。实施例二在本实施例中提供了一种多点音频视频通信中远程互动的方法,图7是根据本发明实施例二的多点音频视频通信中远程互动的方法的流程图,如图7所示,该流程包括如下步骤:步骤S702,多点音频视频通信多点控制处理单元将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端;其中,各与会终端均支持用户输入通道;步骤S704,多点音频视频通信多点控制处理单元接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息;步骤S706,多点音频视频通信多点控制处理单元将互动信息发送至多点音频视频通信业务管理系统;步骤S708,多点音频视频通信多点控制处理单元接收多点音频视频通信业务管理系统利用互动信息进行统计得到的统计结果;步骤S710,多点音频视频通信多点控制处理单元将统计结果发送至各与会终端。在本发明实施例的一个可以实施方式中,多点音频视频通信多点控制处理单元将音频和/或视频界面发送至各与会终端之前,还包括:多点音频视频通信多点控制处理单元获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成用以指引用户输入的音频和视频界面。在本发明实施例的一个可以实施方式中,多点音频视频通信多点控制处理单元将指引用户输入的音频和/或视频界面发送至各与会终端,包括:多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型;多点音频视频多点控制处理单元基于各与会终端支持的信息类型向各将指引用户输入的音频和/或视频界面发送至各与会终端。在本发明实施例的一个可以实施方式中,多点音频视频通信多点控制处理单元将指引用户输入的音频和/或视频界面发送至各与会终端,包括:多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型,并检测各与会终端是否对接收信息的类型进行设定;当与会终端设定了接收信息的类型时,检测对应与会终端设定的信息类型是否属于其支持的信息类型,若是,基于设定的信息类型向对应与会终端发送音频和/或视频界面;若否,基于与会终端支持的信息类型向对应与会终端发送音频和/或视频界面;和/或当与会终端未设定接收信息的类型时,基于各与会终端支持的信息类型,向各与会终端发送音频和/或视频界面。在本发明实施例的一个可以实施方式中,多点音频视频通信多点控制处理单元将统计结果发送至各与会终端,包括:多点音频视频通信多点控制处理单元将统计结果合成文字、音频和视频,并基于在先获取的各与会终端支持的信息类型,向各与会终端发送文字、音频和/或视频的统计结果。在本发明实施例的一个可以实施方式中,多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型的方式包括:多点音频视频通信多点控制处理单元获取为各与会终端建立的逻辑通道,根据逻辑通道的类型确定与会终端支持的信息类型;逻辑通道的类型包括:音频、视频和数据。在本发明实施例的一个可以实施方式中,多点音频视频通信多点控制处理单元将指引用户输入的音频和/或视频界面发送至各与会终端,包括:多点音频视频通信多点控制处理单元将用于指引用户输入的音频和/或视频界面与当前多点音频视频通信中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端;多点音频视频通信多点控制处理单元将统计结果发送至各与会终端,包括:多点音频视频通信多点控制处理单元将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。在本发明实施例的一个可以实施方式中,互动的类型包括:投票、打分和表决。在本发明实施例的一个可以实施方式中,多点音频视频通信包括音频视频会议;多点音频视频通信多点控制处理单元包括多点控制单元MCU。在本实施例中还提供了一种多点音频视频通信多点控制处理单元,该单元用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。图8是根据本发明实施例二的多点音频视频通信多点控制处理单元的结构框图,如图8所示,包括:互动发起模块810,用于在多点音频视频通信中,将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端;其中,各与会终端均支持用户输入通道;互动处理模块820,用于接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息,并将互动信息发送至多点音频视频通信业务管理系统,以及接收会议业务管理系统利用互动信息进行统计得到的统计结果,将统计结果发送至各与会终端。在本发明实施例的一个可选实施方式中,互动发起模块810,还用于获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成用以指引用户输入的音频和视频界面。在本发明实施例的一个可选实施方式中,互动发起模块810,用于获取各与会终端支持的信息类型,并基于该信息类型向各与会终端发送音频和/或视频界面。在本发明实施例的一个可选实施方式中,互动发起模块810,用于获取各与会终端支持的信息类型,并检测各与会终端是否对接收信息的类型进行设定,若进行了设定,则检测对应与会终端设定的信息类型是否属于其支持的信息类型,若是,则基于设定的信息类型向对应与会终端发送音频或视频界面;否则,基于与会终端支持的信息类型向对应与会终端发送音频或视频界面;若未进行设定,则基于各与会终端支持的信息类型,向各与会终端发送音频和/或视频界面。在本发明实施例的一个可选实施方式中,互动处理模块820,进一步用于将统计结果合成文字、音频和视频,并基于在先获取的各与会终端支持的信息类型,向各与会终端发送文字、音频和/或视频的统计结果。在本发明实施例的一个可选实施方式中,互动发起模块810,进一步用于将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端;互动处理模块820,进一步用于将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。在本发明实施例的一个可选实施方式中,多点音频视频通信包括语音视频会议;多点音频视频通信多点控制处理单元包括多点控制单元MCU。在发明实施例中,多点音频视频通信可以包括各种类型的通信,例如视频会议、语音会议等,但是不限于此。下面以语音频视频会议为例,对本发明实施例的可选实施方式进行描述。可选实施方式一在该可选实施方式中提供一种音频视频会议中的互动方法,在本可选实施方式中,以上述的第一互动信息为指引用户输入的音频和/或视频界面为例进行说明,如图9所示,该方法包括如下步骤:步骤S902,多点音频视频通信多点控制处理单元将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会多点音频视频通信终端;该步骤中,上述互动的类型包括但不限于为:投票、打分和表决。该步骤中,各与会多点音频视频通信终端均支持用户输入通道;确切地讲,多点音频视频通信多点控制处理单元在各与会终端入会时,为各与会终端开启用户输入通道,以使各与会终端支持用户输入通道,进而为终端用户的二次输入提供技术支持。该步骤中,上述用于指引用户输入的音频和/或视频界面的获取方式包括:多点音频视频通信多点控制处理单元获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成用以指引用户输入的音频和视频界面。该步骤中,多点音频视频通信多点控制处理单元向各与会终端下发音频、视频还是音频和视频,由与会终端支持的信息类型来决定,举例说明:若与会终端仅支持音频或视频,则向其发送音频或者视频界面,若与会终端支持音频和视频,则向其发送音频和视频界面。其中,多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型的方式包括但不限于为:多点音频视频通信多点控制处理单元获取为各与会终端建立的逻辑通道,根据逻辑通道的类型确定与会终端支持的信息类型;该逻辑通道的类型包括:音频、视频和数据。或者,将用户的意愿考虑进来,实现方式如下:多点音频视频通信多点控制处理单元获取各与会终端支持的信息类型,并检测各与会终端是否对接收信息的类型进行设定;若进行了设定,则检测对应与会终端设定的信息类型是否属于其支持的信息类型,若是,则基于设定的信息类型向对应与会终端发送音频或视频界面;否则,基于与会终端支持的信息类型向对应与会终端发送音频或视频界面;若未进行设定,则基于各与会终端支持的信息类型,向各与会终端发送音频和/或视频界面。步骤S904,多点音频视频通信业务管理系统统计各与会终端根据音频和/或视频界面的指引而反馈的互动信息;步骤S906,多点音频视频通信多点控制处理单元将多点音频视频通信业务管理系统得到的统计结果发送至各与会终端。该步骤中,多点音频视频通信多点控制处理单元将统计结果合成文字、音频和视频,并基于在先获取的各与会终端支持的信息类型,向各与会终端发送文字、音频和/或视频的统计结果。在该可选实施方式中为了将互动过程与现有的会议过程进行有效结合,节省网络资源,将多点音频视频通信多点控制处理单元与各与会终端间交互的信息与会议中的数据、音频和视频码流一起编码为媒体流格式后进行交互。具体表现为:多点音频视频通信多点控制处理单元将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。多点音频视频通信多点控制处理单元将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。综上所述,可知在本可选实施方式中,在不改变用户的会议系统组网、不改变用户对会议系统的原始使用习惯的基础上,能使得与会终端用户能够有如临现场一样进行投票、打分或表决的互动体验。在该可选实施方式中,多点音频视频通信可以为电视视频会议,多点音频视频通信多点控制处理单元可以为MCU。可选实施方式二在该可选实施方式中提供一种音频视频会议中的互动方法,如图10所示,该方法包括如下步骤:步骤S1002,会议管理员在多点音频视频通信业务管理系统选择终端列表,召开视频会议。多点音频视频通信业务管理系统通知协议与通道控制模块召开视频会议,呼叫各与会终端入会。其中,能力协商和逻辑通道打开的过程中就支持用户输入的通道(UserInput)。通过支持用户输入通道为以后互动过程中用户按照指示输入提供必要的技术支持。步骤S1004,业务管理系统根据会议现场的需要判断,是否需要启用投票、打分或者表决的流程,如果不需要则会议保持普通的模式继续,如果需要则进入投票、打分或者表决的流程,转步骤S1006。步骤S1006,多点音频视频通信多点控制处理单元对已经保存好的音频文件、图片文件分别进行合成,形成提醒用户输入的音频和视频界面(即视频的用户界面UI)。步骤S1008:多点音频视频通信多点控制处理单元将音频和视频界面与当前会议中的数据、音频和视频码流一起进行编码成媒体流格式。步骤S1010:多点音频视频通信多点控制处理单元将音频和视频码流发送给与会终端;对于音频会议或只支持音频能力的终端,在S1002步骤中就不会打开视频通道,因此也不会将视频媒体流发送给对应的与会终端。步骤S1012,与会终端根据收到的音频和/或视频界面的引导,使用遥控器、键盘等输入自己的投票、打分或表决数据并进行提交。其中,根据收到的音频和/视频界面的引导进行操作是一种交互式音频视频应答(IVR或者IVVR)技术。步骤S1014,多点音频视频通信多点控制处理单元收到所有与会终端提交的投票、打分或表决数据,提交给多点音频视频通信业务管理系统进行决策。步骤S1016,多点音频视频通信业务管理系统将所有的投票、打分或表决数据进行汇总,根据用户意志进行决策,并将汇总结果发给多点音频视频通信多点控制处理单元。步骤S1018,多点音频视频通信多点控制处理单元将投票、打分或表决的结果合成文字、音频、视频发送给与会终端。其中,对于音频会议和只支持音频能力的终端,则只会发送音频给对应的与会终端告知其结果。步骤S1020,投票、打分或表决流程结束之后会议保持普通模式继续,只要会议中需要进行投票打分的过程就进入到上述流程进行,直到会议结束。综上所述,可知本发明实施例所述方案,基于音频视频会议系统的原有组网,在会议、面试、远程互动等有关的多媒体远程现场接入的场景中,帮助用户进行投票、打分、发表自己的观点,实现了音频视频会议中的互动。本发明实施例所述方案,实现简单,完全不需要改变用户当前的会议系统组网,也不需增加如传统的第三方表决系统,更不需要人工的在会议中统计和核算与会成员的投票打分结果,系统采用互动式音频视频应答方式(IVR、IVVR)让用户方便的进行投票打分,系统根据设置自动的统计和计算结果并以多媒体的方式展示给用户。可选实施方式三本发明实施例提供一种多点音频视频通信多点控制处理单元,如图11所示,包括:互动发起模块1110,用于在多点音频视频通信中,将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各通信终端;其中,各通信终端均支持用户输入通道;互动处理模块1120,用于接收各通信终端根据音频和/或视频界面的指引而反馈的互动信息,并将所述互动信息发送至多点音频视频通信业务管理系统,以及接收多点音频视频通信业务管理系统利用所述互动信息进行统计得到的统计结果,将所述统计结果发送至各通信终端。基于上述结构框架及实施原理,下面给出在上述结构下的几个具体及优选实施方式,用以细化和优化本发明所述多点音频视频通信多点控制处理单元的功能,具体涉及如下内容:互动发起模块1110,通过获取预先存储的与本次互动对应的音频文件和图片文件,并对音频文件和图片文件分别进行合成,形成所述用以指引用户输入的音频和视频界面。互动发起模块1110,获取各通信终端支持的信息类型,并基于该信息类型向各通信终端发送音频和/或视频界面;或者,获取各通信终端支持的信息类型,并检测各通信终端是否对接收信息的类型进行设定,若进行了设定,则检测对应通信终端设定的信息类型是否属于其支持的信息类型,若是,则基于设定的信息类型向对应通信终端发送音频或视频界面;否则,基于通信终端支持的信息类型向对应通信终端发送音频或视频界面;若未进行设定,则基于各通信终端支持的信息类型,向各通信终端发送音频和/或视频界面。互动处理模块1120,将统计结果合成文字、音频和视频,并基于在先获取的各通信终端支持的信息类型,向各通信终端发送文字、音频和/或视频的统计结果。可选地,本实施例中为了将互动过程与现有的会议过程进行有效结合,节省网络资源,将多点音频视频通信多点控制处理单元与各通信终端间交互的信息与会议中的数据、音频和视频码流一起编码为媒体流格式后进行交互。具体表现为:互动发起模块1110,将用于指引用户输入的音频和/或视频界面与当前通信中的数据、音频及视频码流一同编码为媒体流格式后发送至各通信终端;互动处理模块1120,将统计结果与当前通信中的数据、音频及视频码流一同编码为媒体流格式后发送至各通信终端。综上所述,可知本实施例所述多点音频视频通信多点控制处理单元在不改变用户的会议系统组网、不改变用户对会议系统的原始使用习惯的基础上,通过本实施例所阐述的多点音频视频通信多点控制处理单元,能使得通信终端用户能够有如临现场一样进行投票、打分或表决的互动体验。可选实施方式四本发明实施例提供一种远程教育中的远程互动系统,如图12所示,包括:多点音频视频通信业务管理系统1210、多点音频视频通信终端1220、以及可选实施方式三的多点音频视频通信多点控制处理单元1230;其中:远程多点音频视频通信终端1220,用于在接收到多点音频视频通信多点控制处理单元1230发送的与本次互动对应的用于指引用户输入的音频和/或视频界面后,根据音频和/或视频界面的指引进行互动操作,并将操作得到的互动信息发送至多点音频视频通信多点控制处理单元1230;多点音频视频通信业务管理系统1210,用于接收多点音频视频通信多点控制处理单元630发送的各远程终端根据音频和/或视频界面的指引而反馈的互动信息,并对所述互动信息进行统计后,将统计结果发送至多点音频视频通信多点控制处理单元1230。进一步地,由于实施例二中已经对多点音频视频通信多点控制处理单元的具体组成以及实施原理进行了详细阐述,所以在本实施例中对其结构及功能不作赘述。综上所述,可知本实施例所述系统在不改变用户的会议系统组网、不改变用户对会议系统的原始使用习惯的基础上,通过本实施例所阐述的多点音频视频通信多点控制处理单元,能使得与会终端用户能够有如临现场一样进行投票、打分或表决的互动体验。显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1