专利名称：用于自动修改多媒体消息的系统和方法
技术领域：
本发明涉及无线电通信系统。更具体且不以限制的方式来说，本发明涉及用于自动修改从具有多媒体功能的移动电话发送的多媒体消息的系统和方法。
图1是其中实施了多媒体消息传送业务环境(MMSE)11的典型网络配置的简化框图。多媒体消息传送业务(MMS)允许移动订户利用他们的具有照相机功能的移动电话拍摄照片，并通过网络将照片发送到其他移动电话或固定线路订户。移动订户(即MMS用户代理)12-14可以通过例如2G移动网络15、3G移动网络16或外来移动网络17和因特网或其他IP网络18访问MMSE。多媒体消息传送中心(MMC)19可以包括MMS中继20、MMS服务器21和用于存储MMS消息直到接收人检索它们为止的消息存储器22。可以将存储例如订户简介信息、预订信息或其他归属位置寄存器(HLR)信息的其他用户数据库23连接到MMS中继。还可以将MMS增值业务(VAS)应用24连接到MMS中继。外部服务器25和有线电子邮件客户26可以通过因特网/IP网络连接到MMS中继。
图2是说明在使用常规信令方法将例如照片的多媒体消息从始发MMS用户代理(MO)31发送到终端MMS用户代理(MT)32时网元之间的消息流的消息流程图。MO经无线应用协议(WAP)网关/推送代理35通过向多媒体消息传送中心(MMC)发送M-Send.req消息33来始发多媒体消息。这从MO向MMC中继/服务器传送照片所需的数据，并提供用于结果M-Send.conf响应消息36的事务场景。
MMC中继/服务器34经HTTP/PUSH通过WAP网关38向MT32发送M-Notification.ind消息37。M-Notification.ind消息通知MT，有多媒体消息供检索。作为数据组成包括的是MMC中继/服务器当前存储的多媒体消息的通用资源定位符(URL)。URL充当要送达该特定MT的特定消息的消息ID。MT向MMC中继/服务器发送M-Notify Response.ind 39，指示接收到M-Notification.ind消息。一段时间之后，当MT期望检索该多媒体消息时，MT向MMC中继/服务器发送WSP GET.req消息40。通过WSP/HTTP在所提供的URL上执行该检索活动。作为响应，MMC中继/服务器向MT发送M-Retrieve.conf消息41，其中包含要呈示给接收订户的实际多媒体消息。
MMC中继/服务器34还可以从MT 32请求信息以确认MT确实接收到该多媒体消息。在一种方法中，当成功接收到多媒体消息时，从MT向MMC中继/服务器发送不同的M-Acknowledge.ind消息42。MMC中继/服务器可以可选地向MO 31回送送达报告。这可以利用HTTP/PUSH技术向MO发送M-Delivery.ind消息43来实现。
不管上述的特征如何，订户利用MMS的数量和频度都低于网络运营商的期望。在许多情况中，订户可以利用MMS，但是条件不适于拍摄照片。或者，订户可能认为他们的照片不够有趣而不发送。本发明提出一种解决方案帮助克服这些问题并增加MMS的订户利用率。
发明内容
因此，本发明的目的在于克服上述问题，以及提出一种用于自动修改从具有多媒体功能的移动电话发送的多媒体消息的系统和方法。
因此，在一个方面，本发明针对一种修改从具有照相机功能的移动电话发送的多媒体消息中包含的照片的方法。该方法包括如下步骤在服务中心接收多媒体消息中的原始照片；从图像数据库提取图像；以及通过将图像粘贴到原始照片以创建修改的照片。多媒体消息还可以包含该具有照相机功能的移动电话的位置信息，以及提取步骤可以包括利用该位置信息从数据库提取与该移动电话的位置相关联的图像。该方法还可以包括向具有照相机功能的移动电话发送修改的照片；从具有照相机功能的移动电话接收修改的照片被选择用于发送到接收人的指示；以及向接收人发送修改的照片。
在另一个方面，本发明针对一种修改从具有照相机功能的移动电话发送的多媒体消息中包含的照片的方法。该方法包括如下步骤在服务中心接收多媒体消息中的原始照片；以及通过增强原始照片的亮度、颜色或清晰度以创建修改的照片。
在又一个方面，本发明针对一种修改从具有视频功能的移动设备发送的多媒体消息中包含的视频流的多媒体消息传送服务中心。该中心包括用于从具有视频功能的移动设备接收原始视频流的部件；用于存储许多视频图像的数据库；以及通过将从数据库提取的许多视频图像粘贴到原始视频流来创建修改的视频流的视频处理器。该中心还可以包括用于将修改的视频流发送到具有视频功能的移动设备的部件；用于从具有视频功能的移动设备接收修改的视频流被选择用于发送到接收人的指示的接收部件，；以及用于向接收人发送修改的视频流的部件。
在下文部分中，将参考附图所示的示范实施例来描述本发明，其中图1(现有技术)是其中实施了多媒体消息传送业务(MMSE)的典型网络配置的简化框图；图2(现有技术)是说明在使用常规信令方法将例如照片的多媒体消息从始发MMS用户代理(MO)发送到终端MMS用户代理(MT)时网元之间的消息流的消息流程图；图3是说明本发明方法的优选实施例的步骤的流程图；图4是说明根据本发明原理、由增强的MMS+中心处理如照片的多媒体消息、然后从MO发送到MT时网元之间的消息流的消息流程图；以及图5是本发明的增强的MMS+中心的实施例的简化框图。
具体实施例方式
在下文描述中，出于解释而非限定的目的，给出了一些特定的细节，如特定的实施例、电路、信号格式等，以便提供对本发明的透彻理解。对于本领域人员来说，显然本发明可以在不同于这些特定细节的其他实施例中实施。
本发明提出一种增强的MMS+业务，它在环境条件对于拍摄照片并非最优时特别有用。例如，可能没有足够的光线，可能正在下雨，或订户希望拍摄的特定旅游者吸引点可能正在建造或修缮。本发明使订户能在并非最优条件下拍摄照片，并将照片发送到MMS+业务提供商。MMS+业务提供商自动处理照片以提高它的质量，并向订户发送照片的一个或多个版本以供查看和认可。MMS+业务提供商可以自己处理照片(例如对感兴趣的项放大或调整亮度、颜色或清晰度)或可以将来自图像数据库的图像粘贴到照片中。订户可以接受处理的照片并将其发送给另一个订户，喜欢原始照片而拒绝处理的照片并丢弃它，或完全取消事务。
在一个实施例中，订户的移动电话通过基于位置的业务来请求其位置，并将其位置信息连同照片一起发送到MMS+业务提供商。在从移动电话发送照片之前，能以适合的方式(例如通过Java应用程序)将位置信息粘贴到照片中。当MMS+业务提供商接收到该照片和位置信息时，MMS+业务提供商提取位置信息。然后可以将位置信息转换成ID，该ID与从移动电话接收的位置最接近的核准的MMS+位置相关联。然后使用位置信息或可选地位置ID来访问图像数据库以判断数据库中是否存储有可应用于从订户接收的照片的图像。如果是的话，执行自动处理。
在另一个实施例中，移动电话向MMS+业务提供商发送含有照片和请求增强的MMS+业务的指示的MMS消息。MMS+业务提供商然后通过基于位置的业务获取该移动电话的位置。或者，使用延后的位置报告，无论何时只要用户进入提供增强的MMS+业务的标识区域，则通知MMS+业务提供商。MMS+业务提供商存储该信息，以便当MMS+业务提供商从移动电话接收MMS消息时，MMS+业务提供商可以将该位置与接收到的MMS消息相关联。
在一个实施例中，如果照片包含质量差的背景前的人物，则MMS+业务提供商可以通过保留前景中的人物并利用适于所报告的位置的高质量背景图像替代该背景以增强该照片。例如，如果位置信息指示该订户在艾菲尔铁塔附近，则选择高质量的艾菲尔铁塔背景图像，并将其粘贴在照片中。因为照片是从已知位置朝已知方向拍摄的，所以原始照片与数据库中的图像的透视应该非常相似。
作为附加或作为备选，MMS+业务提供商可以处理照片以增强颜色、提高图像的亮度和/或提高图像的清晰度。MMS+业务提供商将两个图片比较，并针对每个像素调整它们以将亮度和颜色上的差值降至最小。此外，可以利用模板来标记原始照片中如包含前景中的人物的区域或包含兴趣点的区域的特定区域。在该区域内，将原始照片与数据库中的图像比较。就颜色和亮度比较原始照片与数据库中的图像之间的每个像素。如果差值超过预定义的阈值，则从原始照片提取像素颜色和亮度；否则，从数据库图像提取像素颜色和亮度。可以利用更完善公知的边缘检测机制以将模板处理的区域与照片的其余部分之间的边界最小化。
在另一个实施例中，MMS+业务提供商可以将先前不在原始照片中的元素添加到照片中。例如，可以将诸如政治家、娱乐明星、体育明星等的公众关注的名人的图像插入到照片中，以使他们看上去像是与原始照片中的人物站在一起。还可以将其他对象的图像插入到照片中以增加趣味或幽默。该机制可以仅将侧面像添加到原始照片。插入侧面像的位置可以是固定的，或可以进行规定让订户使用他的移动电话指定期望的位置。例如，利用具有照相机功能的移动电话拍摄照片之后，或接收到预览图像时，启动移动电话中的小应用程序。订户利用小光标在图片中标记侧面像的期望位置。可以通过分开的数据消息、例如短消息业务(SMS)消息将该信息传送到MMS+业务提供商，或可以将数据包括在图片本身中。MMS+业务提供商因此检索该信息并定位侧面像。或者可以使用该过程在照片内重新定位模板处理的区域。
图像数据库可以包含不同照相机类型或镜头焦距的图片。因此，具有照相机功能的移动电话还可以向MMS+业务提供商发送其他信息，诸如照相机类型、焦距、分辨率和与照片中的人物的距离。该信息使MMS+业务提供商能利用存储的透视信息来选择适合比例的图像并将其粘贴到照片中。
具有照相机功能的移动电话还可以下载或以其他方式包含编辑应用程序，该编辑应用程序向订户提供更强大的编辑能力。编辑可以在电话中执行，或应用程序可以允许订户向MMS+业务提供商指示期望的编辑更改，然后由MMS+业务提供商执行实际编辑并将编辑的照片返回给订户以供查看。例如，特定感兴趣的建筑物可能出现在照片的背景，但是该建筑物太小。编辑应用程序允许订户剪切照片，并放大建筑物，以使前景的人物看上去像是站在离建筑物更近的地方。如果MMS+业务提供商执行编辑，则订户可以将光标置于建筑物上并单击命令来缩放。然后将照片和编辑命令发送到MMS+业务提供商，MMS+业务提供商执行处理并将照片返回给订户以供查看。还可以执行其他类型的编辑和特殊效果，如广角或鱼眼镜头效果。
图3是说明本发明方法的优选实施例的步骤的流程图。在步骤51，始发移动订户(MO)准备使用具有照相机功能的移动电话拍摄照片。延后的位置报告可用于将MO引导到可通过增强的MMS+业务获得处理的照片的地方，并通知MO可获得图像的视角方向。或者，可以当场设置标记来标识可通过增强的MMS+业务获得的处理的照片的位置和视角方向。在步骤52，MO利用具有照相机功能的移动电话拍摄照片。在步骤53，不是通过缺省MMS中心发送照片，而是将照片发送到能够处理照片的MMS+中心。发送照片和MO的位置信息。此外，MMS+数据库可以包含不同照相机类型或镜头焦距的图片。因此，可以将诸如照相机类型、镜头焦距和到照片中人物的距离之类的其他信息发送到MMS+中心。该信息使MMS+中心能选择适合比例的图像并将该图像粘贴到照片中。
在步骤54，不是立即向MT发送M-Notification.ind消息，而是MMS+中心访问数据库，并可以利用来自数据库的图像处理照片以创建一个或多个预览版本。MMS+中心可以应用如今PC图片或电影编辑程序使用的许多方法来自动处理照片。在步骤55，MMS+中心将一个或多个预览回送到MO以供查看。这些预览可以被一次一个地发送，或可选地，在一副图像中发送多个预览。或者，可以发送描述性文本，以允许MO选择他希望查看的预览。在步骤56，MO选择这些预览的其中之一，并从MMS+中心请求它。可以通过向MMS+中心发送SMS消息来发出该请求。在步骤57，MMS+中心接收到该请求并将所请求的处理的照片发送到MO。在步骤58，MO接收到处理的照片，并在步骤59，通过MMS+中心或常规MMC将其发送到MT。
在为MO对该业务计费的过程中有许多备选要点。例如，当他向MMS+中心发送照片来请求处理时，可以对他计费。或者，可以稍后仅在他喜欢并选择了这些预览的其中之一的情况下才对MO计费。
图4是说明根据本发明原理、由增强的MMS+中心处理如照片的多媒体消息、然后从MO 61发送到MT 32时网元之间的消息流的消息流程图。MO经WAP网关/推送代理通过向增强的MMS+中心63发送M-Send.req消息62来启动该过程。在本发明中，MO修改M-Send.req消息，以包含MO的位置信息和可选地照相机类型信息。MMS+中心向MO回送M-Send.conf响应消息64，其中具有可获得预览的指示。MO向MMS+中心发送WSP GET.req消息65，而MMS+中心在M-Retrieve.conf消息66中将下载的预览发送到MO。MO然后查看这些预览，并在M-Send.req消息67中将预览选择发送到MMS+中心。
MMS+中心63然后经HTTP/PUSH通过WAP网关38向MT 32发送M-Notification.ind消息68。M-Notification.ind消息通知MT，有多媒体消息供检索。MT向MMS+中心发送M-Notify Response.ind 69，指示接收到M-Notification.ind消息。一段时间之后，当MT期望检索该多媒体消息时，MT向MMS+中心发送WSP GET.req消息70。作为响应，MMS+中心向MT发送M-Retrieve.conf消息71，其中包含MO发送的处理的照片。当成功接收到该多媒体消息时，MT然后向MMS+中心发送M-Acknowledge.ind消息72。MMS+中心可以可选地向MO回送M-Delivery.ind消息73，指示已完成送达。
图5是本发明的增强的MMS+中心的实施例的简化框图。现在将参考图4和5，解释MMS+中心的操作。MO 61向增强的MMS+中心63发送M-Send.req消息62，其中包含订户拍摄的照片。在本发明中，MO修改M-Send.req消息，以包含MO的位置信息和可选地照相机类型信息。MMS+中心在判断功能81判断M-send.req消息是请求普通转发还是MMS+业务。如果该消息未包括位置信息，则判断功能可以确定正在请求普通转发，并将该消息和照片发送到普通MMS转发功能82。但是，如果该消息包含位置信息，则判断功能可以确定正在请求的是MMS+业务。在此情况中，判断功能将该消息转发到信息提取器83。信息提取器提取位置信息，并将其转换成适于输入图像数据库84的ID格式。如果M-Send.req消息中还包含照相机类型，则还可以将照相机信息发送到数据库。
将照片和可选地照相机类型发送到照片处理器85。照片处理器可以包括先前描述的背景图像替换器86；颜色、亮度和锐度增强器87；以及图像插入器88。将来自图像数据库84的图像提供到照片处理器(如果有的话)。如果有图像和/或可以执行其他处理，则照片处理器通知预览控制器89有一个或多个预览可用。预览控制器通知MO61有预览可用，并且如果MO请求它们，则在M-Retrieve.conf消息66中将它们发送到MO。MO然后查看这些预览，并在M-Send.req消息67中将预览选择发送到MMS+中心。预览控制器89然后将请求的照片发送到普通MMS转发功能82，以供转发到MT 32，如图4的步骤68-73所示。
上文针对静态照片描述的过程还可以用来修改视频和/或音频序列。因此，可以修改移动设备拍摄并发送到MMS+中心的流式视频，以处理或增强视频的质量。例如，如果制作人物站在风景吸引点前面的短电影，则MMS+中心能以看上去像是名人走过电影背景的方式将图像添加到视频序列中。如果视频具有相关联的音频，则还可以修改音频。
如本领域技术人员将认识到的，可以在广泛应用范围之上修改和变更本申请中所述的创新概念。因此，申请专利的主题范围不应限于上文论述的任何特定示范原理，而是由所附权利要求的定义。
权利要求
1.一种修改从具有照相机功能的移动电话发送的多媒体消息中包含的照片的方法，所述方法包括在服务中心接收所述多媒体消息中的原始照片；从图像数据库提取图像；以及通过将所述图像粘贴到所述原始照片中来创建修改的照片。
2.如权利要求1所述的方法，其特征在于，所述多媒体消息还包含所述具有照相机功能的移动电话的位置信息，以及所述提取步骤包括利用所述位置信息从所述数据库提取与所述移动电话的位置相关联的图像。
3.如权利要求2所述的方法，其特征在于，所述多媒体消息还包含有关所述具有照相机功能的移动电话的照相机类型的信息，以及所述提取步骤包括利用所述照相机类型信息从所述数据库提取与所述具有照相机功能的移动电话的所述照相机类型相关联的图像。
4.如权利要求2所述的方法，其特征在于，所述照片还包含背景区域和含有至少一个人物的图像的前景区域，以及所述粘贴步骤包括利用从所述数据库提取的图像替换所述照片的背景区域，同时保留所述前景区域中的人物的图像。
5.如权利要求1所述的方法，其特征在于，所述照片包含至少一个人物的图像，以及所述提取步骤包括提取名人的图像，其中所述粘贴步骤包括将从所述数据库提取的所述名人的图像粘贴到所述照片中的人物的图像旁边。
6.如权利要求1所述的方法，还包括向接收人发送所述修改的照片。
7.如权利要求6所述的方法，还包括在向接收人发送所述修改的照片的步骤之前的如下步骤。向所述具有照相机功能的移动电话发送所述修改的照片；以及从所述具有照相机功能的移动电话接收所述修改的照片被选择用于发送到所述接收人的指示。
8.一种自动修改从具有照相机功能的移动电话发送的多媒体消息中包含的照片的方法，所述方法包括在服务中心接收所述多媒体消息，所述消息包含原始照片和所述具有照相机功能的移动电话的位置信息；使用所述位置信息从图像数据库提取与所述移动电话的位置相关联的图像；通过将所述图像粘贴到所述原始照片中来创建修改的照片；向所述具有照相机功能的移动电话发送所述修改的照片；从所述具有照相机功能的移动电话接收所述修改的照片被选择用于发送到接收人的指示；以及向所述接收人发送所述修改的照片。
9.如权利要求8所述的方法，其特征在于，创建修改的照片的步骤还包括增强所述原始照片的特征，所述特征是从由透视、比例、亮度、颜色、分辨率和清晰度组成的集合中选择的。
10.如权利要求8所述的方法，其特征在于，创建修改的照片的步骤还包括调整所述图像的特征以与所述原始照片匹配，所述特征是从由透视、比例、亮度、颜色、分辨率和清晰度组成的集合中选择的。
11.一种修改从具有照相机功能的移动电话发送的多媒体消息中包含的照片的方法，所述方法包括在服务中心接收所述多媒体消息中的原始照片；以及通过增强所述原始照片的特征来创建修改的照片，所述特征是从由透视、比例、亮度、颜色、分辨率和清晰度组成的集合中选择的。
12.如权利要求11所述的方法，其特征在于，创建修改的照片的步骤包括如下步骤接收所述具有照相机功能的移动电话的报告的位置；使用所述报告的位置从图像数据库提取与所述移动电话的位置相关联的图像；确定所述原始照片的每个像素与从所述数据库提取的所述图像的每个对应像素之间在亮度和颜色上的差值；如果所述原始照片的给定像素与所提取的图像的对应像素之间在亮度和颜色上的差值超过预定义的阈值，则在所述修改的照片中保留来自所述原始照片的像素的亮度和颜色；以及如果所述原始照片的给定像素与所提取的图像的对应像素之间在亮度和颜色上的差值未超过预定义的阈值，则在所述修改的照片中利用从所述数据库提取的所述图像中的像素的亮度和颜色。
13.一种自动修改从具有照相机功能的移动电话发送的多媒体消息中包含的照片的方法，所述方法包括在服务中心接收所述多媒体消息，所述消息包含原始照片和所述具有照相机功能的移动电话的位置信息；使用所述位置信息从图像数据库提取与所述移动电话的位置相关联的许多图像；通过制作所述原始照片的许多副本并将所述许多图像的每一个粘贴到所述原始照片的不同副本中来创建许多修改的照片；向所述具有照相机功能的移动电话发送所述许多修改的照片；从所述具有照相机功能的移动电话接收用于发送到接收人的所述修改的照片的其中之一的选择；以及向所述接收人发送所选择的修改的照片。
14.如权利要求13所述的方法，其特征在于，依次将所述许多修改的照片发送到所述具有照相机功能的移动电话。
15.如权利要求13所述的方法，其特征在于，在一副图像中将所述许多修改的照片发送到所述具有照相机功能的移动电话。
16.一种修改从具有照相机功能的移动电话发送的多媒体消息中包含的照片的服务中心，所述中心包括用于接收所述多媒体消息中的原始照片的部件；图像的数据库；以及照片处理器，通过将从所述数据库提取的图像粘贴到所述原始照片中来创建修改的照片。
17.如权利要求16所述的服务中心，其特征在于，所述多媒体消息还包含所述具有照相机功能的移动电话的位置信息，以及所述位置信息被利用来从所述数据库提取与所述移动电话的位置相关联的图像。
18.如权利要求17所述的服务中心，其特征在于，所述照片包含背景区域和含有至少一个人物的图像的前景区域，以及所述照片处理器包括用于利用从所述数据库提取的图像替换所述照片的背景区域、同时保留所述前景区域中的人物的图像的部件。
19.如权利要求17所述的服务中心，还包括用于向接收人发送所述修改的照片的部件。
20.如权利要求19所述的服务中心，还包括用于向所述具有照相机功能的移动电话发送所述修改的照片的部件；以及从所述具有照相机功能的移动电话接收所述修改的照片被选择用于发送到所述接收人的指示的部件。
21.一种修改从具有视频功能的移动设备发送的多媒体消息中包含的视频流的服务中心，所述中心包括用于从所述具有视频功能的移动设备接收原始视频流的部件；用于存储许多视频图像的数据库；以及视频处理器，通过将从所述数据库提取的许多视频图像粘贴到所述原始视频流来创建修改的视频流。
22.如权利要求21所述的服务中心，还包括用于将所述修改的视频流发送到所述具有视频功能的移动设备的部件；从所述具有视频功能的移动设备接收所述修改的视频流被选择用于发送到所述接收人的指示的部件；以及用于向所述接收人发送所述修改的视频流的部件。
23.一种增加多媒体业务(MMS)的订户利用率的方法，所述方法包括如下步骤在服务中心接收从具有照相机功能的移动电话发送的多媒体消息中包含的原始照片；修改所述原始照片；以及向接收人发送所修改的照片。
24.如权利要求23所述的方法，还包括在所述发送步骤之前的如下步骤向所述具有照相机功能的移动电话发送所修改的照片；以及从所述具有照相机功能的移动电话接收所修改的照片被选择用于发送到所述接收人的指示。
25.如权利要求24所述的方法，其特征在于，所述修改步骤包括增强所述原始照片的特征，所述特征是从由透视、比例、亮度、颜色、分辨率或清晰度组成的集合中选择的。
26.如权利要求24所述的方法，其特征在于，所述修改步骤包括将图像粘贴到所述原始照片中。
27.一种增加多媒体业务(MMS)的订户利用率的方法，所述方法包括如下步骤在服务中心接收从具有照相机功能的移动电话发送的多媒体消息中包含的原始照片修改所述原始照片；以及将所修改的照片发送回所述具有照相机功能的移动电话。
28.如权利要求27所述的方法，还包括如下步骤从具有照相机功能的移动电话接收所修改的照片被选择用于发送到标识的接收人的指示；以及向所述标识的接收人发送所修改的照片。
29.如权利要求27所述的方法，还包括如下步骤在将所述多媒体消息发送到所述服务中心之前，向所述具有照相机功能的移动电话的用户提供所修改的照片，以指示对所述原始照片的期望的编辑更改。
全文摘要
一种增强的多媒体消息传送服务中心(MMS+中心)，它处理从具有照相机功能的移动电话发送的MMS消息中包含的照片。中心接收MMS消息中的原始照片以及具有照相机功能的移动电话的位置信息。利用该位置消息，从图像数据库中提取与该移动电话的位置相关联的图像。照片处理器通过将提取的图像粘贴到原始照片来创建修改的照片。向该移动电话发送修改的照片的预览以供查看。如果该预览被认可，则MMS+中心将修改的照片发送到接收人。
文档编号H04L29/08GK1965551SQ200580015249
公开日2007年5月16日 申请日期2005年5月13日 优先权日2004年5月14日
发明者J·C·厄沃特, M·斯图姆帕特 申请人:艾利森电话股份有限公司