专利名称：移动通信终端和视频通话方法
技术领域：
本发明涉及移动通信领域，尤其涉及一种移动通信终端和视频通话方法。
背景技术：
随着移动通信技术的发展和智能手机处理能力的提高，作为3G网络基本功能之 一的视频通话，逐步得到应用和完善。视频通话可以起到面对面交流的效果，使得人与人之 间的交流更方便，沟通更有效。利用手机实现视频通话的基本工作过程是在进行视频通话 过程中，将手机摄像头采集到的视频图像，按照规定的视频编码标准进行编码，得到编码码 流，将该编码码流通过3G无线通信协议发送到接收方用户的手机上，接收方用户手机对接 收到的编码码流进行解码，还原成视频图像并显示。人们在进行视频通话时，在有些情况下，除了需要面对面的交流外，还需要进行及 时的信息交互，例如，需要将手机屏幕显示区域中的文本、图像或网页等多媒体信息发送给 对方观看。现有技术中，可以在进行视频通话时，将上述多媒体信息通过短信或彩信的形式 传输给接收方，但是由于短信和彩信等均不具有实时性，不能满足用户在视频通话过程中 实时进行多媒体信息交互的需求。
发明内容
有鉴于此，本发明实施例提供一种移动通信终端和视频通话方法，能够满足用户 在视频通话过程中实时进行多媒体信息交互的需求。为解决上述问题，本发明实施例提供一种移动通信终端，包括处理模块，用于在视频通话过程中，对需要发送的多媒体信息进行处理，得到需要 发送的视频图像，所述多媒体信息为所述移动通信终端中存储的多媒体信息或所述移动 通信终端的屏幕显示区域中显示的多媒体信息；编码模块，用于对所述需要发送的视频图像进行压缩编码，得到编码码流；通信模块，用于将所述编码码流传输给接收方。所述移动通信终端还包括图像摄取模块，用于摄取第一视频图像；
所述处理模块还包括第一处理单元，用于对所述需要发送的多媒体信息进行视频图像采集，得到第二 视频图像；图像融合单元，用于对所述第一视频图像和所述第二视频图像进行图像融合，得 到合成后的视频图像，并将所述合成后的视频图像作为所述需要发送的视频图像发送给所 述编码模块。所述处理模块包括第二处理单元，用于对所述需要发送的多媒体信息进行视频图像采集，得到第二 视频图像，并将所述第二视频图像作为所述需要发送的视频图像发送给所述编码模块。
所述移动通信终端还包括选择模块，用于在进行所述视频通话之前或所述视频通话过程中，选择所述需要 发送的多媒体信息。所述移动通信终端还包括触发模块，用于在接收到发送所述多媒体信息的指令时，触发所述处理模块对所 述需要发送的多媒体信息进行处理。本发明实施例还提供一种视频通话方法，包括以下步骤移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到需要 发送的视频图像，所述多媒体信息为所述移动通信终端中存储的多媒体信息或所述移动 通信终端的屏幕显示区域中显示的多媒体信息；所述移动通信终端对所述需要发送的视频图像进行压缩编码，得到编码码流；所述移动通信终端将所述编码码流传输给接收方。所述移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到 需要发送的视频图像之前还包括所述移动通信终端摄取第一视频图像；所述移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到 需要发送的视频图像具体为所述移动通信终端对所述需要发送的多媒体信息进行视频图像采集，得到第二视 频图像；所述移动通信终端对所述第一视频图像和所述第二视频图像进行图像融合，得到 合成后的视频图像，所述合成后的视频图像为所述需要发送的视频图像。所述移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到 需要发送的视频图像具体为所述移动通信终端对所述需要发送的多媒体信息进行视频图像采集，得到第二视 频图像，所述第二视频图像为所述需要发送的视频图像。所述移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到 需要发送的视频图像之前还包括所述移动通信终端选择所述需要发送的多媒体信息。所述移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到 需要发送的视频图像之前还包括所述移动通信终端接收发送所述多媒体信息的指令。本发明的实施例具有以下有益效果在视频通话过程中，对需要发送的多媒体信息进行视频图像采集，得到包含多媒 体信息内容的视频图像，将包含多媒体信息内容的视频图像与移动通信终端摄取到的视频 图像融合，并将融合后的视频图像压缩编码后传输，或者，直接将包含多媒体信息内容的视 频图像压缩编码后传输，可以满足用户在视频通话过程中实时进行多媒体信息交互的需 求，且实现简单，无需改变现有的无线通信协议。
图1为本发明实施例的移动通信终端的结构示意图；图2为本发明实施例的移动通信终端的另一结构示意图；图3为本发明实施例的移动通信终端的又一结构示意图；图4为本发明实施例的视频通话方法的流程示意图；图5为本发明实施例的视频通话方法的另一流程示意图。
具体实施例方式下面结合附图和实施例，对本发明的具体实施方式
作进一步详细描述。如图1所示为本发明实施例的移动通信终端，所述移动通信终端可以为手机或 PDA等通信设备，所述移动通信终端包括处理模块101，用于在视频通话过程中，对需要发送的多媒体信息进行处理，得到 需要发送的视频图像，所述多媒体信息为所述移动通信终端中存储的多媒体信息或所述 移动通信终端的屏幕显示区域中显示的多媒体信息；所述多媒体信息可以为文本、图像、网 页、视频或者移动通信终端手写屏上的内容等。编码模块102，用于对所述需要发送的视频图像进行压缩编码，得到编码码流；通信模块103，用于将所述编码码流传输给接收方。当然，在进行上述视频通话之前，所述移动通信终端需要与上述接收方建立视频 通话连接，所述视频通话连接可以采用3G无线通信技术来进行连接，例如，TD-SCDMA或 WCDMA等无线通信技术，当然，也可以采用其他支持视频通话业务的无线通信技术。在所述 视频通话连接采用3G无线通信技术来进行连接时，所述编码模块102需要按照3G标准中 规定的视频编码标准对需要发送的视频图像进行压缩编码，例如，可以采用MPEG-4编码方 式对需要发送的视频图像进行压缩编码。另外，所述通信模块103需要按照3G无线通信协 议(例如H. 324-M协议)将所述编码模块102得到的编码码流传输给接收方。通常情况下，在进行视频通话时，所述移动通信终端是将自身摄取到的视频图像 (通常为用户图像)进行压缩编码并传输，本发明实施例中，为了可以将所述需要发送的多 媒体信息同样以视频图像的形式传输给接收方，上述处理模块101可以首先对所述多媒体 信息进行视频图像采集，然后将采集到视频图像与移动通信终端自身摄取到的视频图像进 行融合，得到一合成图像，并由所述编码模块102对所述合成图像进行压缩编码，得到编码 码流，由所述通信模块103将所述编码码流实时传输给接收方，使得接收方在观看到所述 移动通信终端自身摄取的视频图像的同时，也可以观看到所述多媒体信息。如图2所示为本发明实施例的移动通信终端的另一结构示意图，所述移动通信终 端还可以具有一图像摄取模块104，用于摄取第一视频图像；所述图像摄取模块104可以为 包括一用于摄取外部环境图像的摄像头，以及对摄像头摄取到的外部环境图像进行处理的 其他图像处理单元。所述处理模块101还包括第一处理单元1011，用于对所述需要发送的多媒体信息进行视频图像采集，得到第 二视频图像；根据所述多媒体信息的不同，所述第一处理单元1011对所述多媒体信息的处理 方式也有所不同。在所述多媒体信息为屏幕显示区域中显示的文本、图像、网页或者手写屏上的内容时，所述第一处理单元1011可以直接将所述多媒体信息以视频图像的格式进行采集， 所述视频图像的格式可以为YUV格式或RGB格式等。在所述多媒体信息为移动通信终端中存 储的文本、图像或网页等多媒体信息时，所述第一处理单元1011需要获取所述多媒体信息的 存储地址，读取所述多媒体信息，然后再进行视频图像的采集。另外，在所述多媒体信息为视 频时，所述处理单元1011需要对所述视频进行解码，然后再进行视频图像的采集。图像融合单元1012，用于对所述第一视频图像和所述第二视频图像进行图像融 合，得到合成后的视频图像，并将所述合成后的视频图像作为所述需要发送的视频图像发 送给所述编码模块102。所述图像融合单元1012可以采用多种融合方式，对所述第一视频 图像和所述第二视频图像进行融合，例如，可以将所述第一视频图像作为背景，调整所述第 二视频图像的透明度，将调整后的第二视频图像作为前景，对所述第一视频图像和所述第 二视频图像进行Alpha (透明度)融合，使得接收方可以同时观看到所述第一视频图像和所 述第二视频图像的内容。另外，还可以将所述第一视频图像作为背景，将所述第二视频图像 的尺寸缩小，将缩小后的第二视频图像作为所述第一视频图像中的一个小窗口，与所述第 一视频图像进行融合。当然，图像融合的方式不限于此，在此不再一一列举。另外，也可以不对所述第一视频图像和第二视频图像进行融合，而是直接对包含 所述多媒体信息的第二视频图像进行编码，并传输给接收方，丢弃所述图像摄取模块104 摄取到的第一视频图像，或者，直接关闭所述图像摄取模块104，不再摄取外部环境图像。所述处理模块101包括第二处理单元1013，用于对所述需要发送的多媒体信息进行视频图像采集，得到 第二视频图像，并将所述第二视频图像作为所述需要发送的视频图像发送给所述编码模块 102。当然，所述移动通信终端还可以具有一选择菜单，由用户选择是将所述第一视频 图像和所述第二视频图像融合后发送，还是直接发送所述第二视频图像。从上述实施例可以看出，所述移动通信终端可以仅发送包括多媒体信息内容的第 二视频图像，不对所述图像摄取单元104摄取到的第一视频图像进行处理，因此，可以理解 的是，所述移动通信终端也可以是不具有摄像头的移动通信终端，即所述移动通信终端可 以不包括上述图像摄取单元104。当然，通常情况，支持视频通话业务的移动通信终端均具 有包含摄像头的图像摄取单元104。上述实施例中，用户可以在视频通话开始之前或者视频通话过程中的任意时刻， 随时选择需要发送的多媒体信息，因此，如图3所示，在图1所示的实施例的基础上，所述移 动通信终端还包括选择模块105，用于在进行所述视频通话之前或所述视频通话过程中，选择所述需 要发送的多媒体信息。另外，上述处理模块101需要在接收到发送所述多媒体信息的指令时，对所述多 媒体信息进行处理并发送，所述移动通信终端还包括触发模块106，用于在接收到发送所述多媒体信息的指令时，触发所述处理模块 101对所述多媒体信息进行处理。当然，也可以将视频通话的启动作为发送所述多媒体信息 的指令，即一旦视频通话启动，则对需要发送的多媒体信息进行处理并发送。当然，上述移动通信终端也可以作为上述编码码流的接收方，所述移动通信终端
7在接收到另一终端发送的编码码流时，需要对所述编码码流进行解码，还原成视频图像并 显示，或者也可以对解码后的视频图像进行缩放或旋转等处理后再显示，在此不再详细描 述。通过上述实施例提供的移动通信终端，在视频通话过程中，对需要发送的多媒体 信息进行视频图像采集，得到包含多媒体信息内容的视频图像，将包含多媒体信息内容的 视频图像与移动通信终端摄取到的视频图像融合，并将融合后的视频图像压缩编码后传 输，或者，直接将包含多媒体信息内容的视频图像压缩编码后传输，可以满足用户在视频通 话过程中实时进行多媒体信息交互的需求，且实现简单，无需改变现有的无线通信协议。如图4所示为本发明实施例的视频通话方法的流程示意图，所述视频通话方法包 括以下步骤步骤401，移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理， 得到需要发送的视频图像，所述多媒体信息为所述移动通信终端中存储的多媒体信息或 所述移动通信终端的屏幕显示区域中显示的多媒体信息；所述多媒体信息可以为文本、图 像、网页、视频或者移动通信终端手写屏上的内容等。步骤402，所述移动通信终端对所述需要发送的视频图像进行压缩编码，得到编码 码流；步骤403，所述移动通信终端将所述编码码流传输给接收方。当然，在进行上述视频通话之前，所述移动通信终端需要与上述接收方建立视频 通话连接，所述视频通话连接可以采用3G无线通信技术来进行连接，当然，也可以采用其 他支持视频通话业务的无线通信技术。通常情况下，在进行视频通话时，所述移动通信终端是将自身摄取到的视频图像 进行压缩编码并传输，本发明实施例中，为了可以将所述需要发送的多媒体信息同样以视 频图像的形式传输给接收方，所述移动通信终端可以首先对所述多媒体信息进行视频图像 采集，然后将采集到视频图像与移动通信终端自身摄取到的视频图像进行融合，得到一合 成图像，并对所述合成图像进行压缩编码，得到编码码流，将所述编码码流实时传输给接收 方，使得接收方在观看到所述移动通信终端自身摄取的视频图像的同时，也可以观看到所 述多媒体信息。当然，所述移动通信终端也可以不对所述第一视频图像和第二视频图像进 行融合，而是直接对包含所述多媒体信息的第二视频图像进行编码，并传输给接收方，丢弃 所述移动通信终端自身摄取到的第一视频图像，或者，直接关闭摄像头，不再摄取外部环境 图像。如图5所示为本发明实施例的视频通话方法的另一流程示意图，所述视频通话方 法包括以下步骤步骤501，移动通信终端选择需要发送的多媒体信息；该步骤也可以在所述移动 通信终端与接收方建立视频通话连接之后执行；步骤502，所述移动通信终端与接收方建立视频通话连接；步骤503，所述移动通信终端摄取第一视频图像；当然，该步骤之后还包括将所述 第一视频图像进行压缩编码，并传输给接收方的步骤，由于与现有技术中的视频通话实现 方法相同，在此就不再描述。步骤504，所述移动通信终端在接收到发送所述多媒体信息的指令时，对所述多媒体信息进行视频图像采集，得到第二视频图像；根据所述多媒体信息不同，对所述多媒体信 息的处理方式也有所不同。在所述多媒体信息为屏幕显示区域中显示的文本、图像、网页或 者手写屏上的内容时，可以直接将所述多媒体信息以视频图像的格式进行采集。在所述多 媒体信息为移动通信终端中存储的文本、图像或网页等多媒体信息时，需要获取所述多媒 体信息的存储地址，读取所述多媒体信息，然后再进行视频图像的采集。另外，在所述多媒 体信息为视频时，需要对所述视频进行解码，然后再进行视频图像的采集。步骤505，所述移动通信终端判断是否需要进行图像融合，如果是，进入步骤506， 否则，进入步骤508;步骤506，所述移动通信终端对所述第一视频图像和所述第二视频图像进行图像 融合，得到合成后的视频图像；所述移动通信终端可以采用多种融合方式，对所述第一视频 图像和所述第二视频图像进行融合，例如，可以将所述第一视频图像作为背景，调整所述第 二视频图像的透明度，将调整后的第二视频图像作为前景，对所述第一视频图像和所述第 二视频图像进行Alpha融合，使得接收方可以同时观看到所述第一视频图像和所述第二视 频图像的内容。另外，还可以将所述第一视频图像作为背景，将所述第二视频图像的尺寸缩 小，将缩小后的第二视频图像作为所述第一视频图像中的一个小窗口，与所述第一视频图 像进行融合。步骤507，所述移动通信终端对所述合成后的视频图像进行压缩编码，得到编码码 流；步骤508，所述移动通信终端对所述第二视频图像进行压缩编码，得到编码码流；步骤509，所述移动通信终端将所述编码码流传输给接收方。在所述视频通话连接采用3G无线通信技术来进行连接时，上述步骤507和步骤 508中，所述移动通信终端需要按照3G标准中规定的视频编码标准对需要发送的视频图像 进行压缩编码，例如，可以采用MPEG-4编码方式对需要发送的视频图像进行压缩编码。另 外，上述步骤509中，所述移动通信终端需要按照3G无线通信协议(例如H. 324-M协议) 将上述步骤507或步骤508中得到的编码码流传输给接收方。通过上述实施例提供的视频通信方法，在视频通话过程中，对需要发送的多媒体 信息进行视频图像采集，得到包含多媒体信息内容的视频图像，将包含多媒体信息内容的 视频图像与移动通信终端摄取到的视频图像融合，并将融合后的视频图像压缩编码后传 输，或者，直接将包含多媒体信息内容的视频图像压缩编码后传输，可以满足用户在视频通 话过程中实时进行多媒体信息交互的需求，且实现简单，无需改变现有的无线通信协议。以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人 员来说，在不脱离本发明原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应 视为本发明的保护范围。
权利要求
一种移动通信终端，其特征在于，包括处理模块，用于在视频通话过程中，对需要发送的多媒体信息进行处理，得到需要发送的视频图像，所述多媒体信息为所述移动通信终端中存储的多媒体信息或所述移动通信终端的屏幕显示区域中显示的多媒体信息；编码模块，用于对所述需要发送的视频图像进行压缩编码，得到编码码流；通信模块，用于将所述编码码流传输给接收方。
2.根据权利要求1所述的移动通信终端，其特征在于，还包括图像摄取模块，用于摄取第一视频图像；所述处理模块还包括第一处理单元，用于对所述需要发送的多媒体信息进行视频图像采集，得到第二视频 图像；图像融合单元，用于对所述第一视频图像和所述第二视频图像进行图像融合，得到合 成后的视频图像，并将所述合成后的视频图像作为所述需要发送的视频图像发送给所述编 码模块。
3.根据权利要求1所述的移动通信终端，其特征在于，所述处理模块包括第二处理单元，用于对所述需要发送的多媒体信息进行视频图像采集，得到第二视频 图像，并将所述第二视频图像作为所述需要发送的视频图像发送给所述编码模块。
4.根据权利要求1所述的移动通信终端，其特征在于，还包括选择模块，用于在进行所述视频通话之前或所述视频通话过程中，选择所述需要发送 的多媒体信息。
5.根据权利要求1所述的移动通信终端，其特征在于，还包括触发模块，用于在接收到发送所述多媒体信息的指令时，触发所述处理模块对所述需 要发送的多媒体信息进行处理。
6.一种视频通话方法，其特征在于，包括以下步骤移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到需要发送 的视频图像，所述多媒体信息为所述移动通信终端中存储的多媒体信息或所述移动通信 终端的屏幕显示区域中显示的多媒体信息；所述移动通信终端对所述需要发送的视频图像进行压缩编码，得到编码码流；所述移动通信终端将所述编码码流传输给接收方。
7.根据权利要求6所述的视频通话方法，其特征在于，所述移动通信终端在视频通话 过程中，对需要发送的多媒体信息进行处理，得到需要发送的视频图像之前还包括所述移动通信终端摄取第一视频图像；所述移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到需要 发送的视频图像具体为所述移动通信终端对所述需要发送的多媒体信息进行视频图像采集，得到第二视频图像；所述移动通信终端对所述第一视频图像和所述第二视频图像进行图像融合，得到合成 后的视频图像，所述合成后的视频图像为所述需要发送的视频图像。
8.根据权利要求6所述的视频通话方法，其特征在于，所述移动通信终端在视频通话过程中，对需要发送的多媒体信息进行处理，得到需要发送的视频图像具体为所述移动通信终端对所述需要发送的多媒体信息进行视频图像采集，得到第二视频图 像，所述第二视频图像为所述需要发送的视频图像。
9.根据权利要求6所述的视频通话方法，其特征在于，所述移动通信终端在视频通话 过程中，对需要发送的多媒体信息进行处理，得到需要发送的视频图像之前还包括所述移动通信终端选择所述需要发送的多媒体信息。
10.根据权利要求6所述的视频通话方法，其特征在于，所述移动通信终端在视频通话 过程中，对需要发送的多媒体信息进行处理，得到需要发送的视频图像之前还包括所述移动通信终端接收发送所述多媒体信息的指令。
全文摘要
本发明提供一种移动通信终端和视频通话方法，所述移动通信终端包括处理模块，用于在视频通话过程中，对需要发送的多媒体信息进行处理，得到需要发送的视频图像，所述多媒体信息为所述移动通信终端中存储的多媒体信息或所述移动通信终端的屏幕显示区域中显示的多媒体信息；编码模块，用于对所述需要发送的视频图像进行压缩编码，得到编码码流；通信模块，用于将所述编码码流传输给接收方。使用本发明，能够满足用户在视频通话过程中实时进行多媒体信息交互的需求。
文档编号H04N7/26GK101931797SQ20091008785
公开日2010年12月29日 申请日期2009年6月24日 优先权日2009年6月24日
发明者梁立伟, 王宁 申请人:中兴通讯股份有限公司