运动图像存储系统、运动图像存储方法和运动图像存储程序的制作方法

专利名称：运动图像存储系统、运动图像存储方法和运动图像存储程序的制作方法
技术领域：
本发明涉及一种运动图像存储系统、运动图像存储方法和运动图像存 储程序，其用于转换和存储已经作为输入被接收的运动图像。
背景技术：
在线路交换网中使用便携终端装置的视频电话服务和运动图像分发服 务正在得到广泛使用。其中在线路交换网或者IMS (IP多媒体子系统)/NGN (下一代网络)中从便携终端装置接收的运动图像数据被存储在服 务器中并且然后被服务器分发的服务预期会变得广泛普及。MPEG-4 (ISO/IEC 14496-2: 2003 "音频和视频可视对象的信息技术 编码——第二部分可视")在第三代合作伙伴计划(3GPP)便携终端装置中被广泛地用作运动图像编码方法。MPEG-4包括帧内模式(intramode)，其中，编码仅仅使用当前帧 的图像；以及，帧间模式(intermode)，其中，通过参考过去帧的图像来 执行编码。在帧内模式中，输入像素进行DCT (离散余弦变换)，其是以 被称为"宏块"的单位被执行的，其后，DCT系数经历可变长度编码。在 帧间模式中，在过去帧的输入像素和解码的像素之间执行运动补偿预测， 以找到差分像素。在所述差分像素进行DCT后，运动向量和DCT系数进 行可变长度编码。当存储己经从终端装置发送的运动图像数据时，在运动图像存储装置 中存储在从终端装置实时发送的运动图像数据中的指定间隔的数据(例如 参见专利文件1)。因为在再现时，对于存储图像的第一帧，不能参考在 前帧(leading frame)的图像，因此必须将所述第一帧转换为进行了帧内 编码(intramode coding)的数据。图1是示出了运动图像存储系统的典型配置的示例的框图。在图1所
示的运动图像存储系统中，数据接收器901将接收来自终端装置(未示出)的接收数据900。接收数据900包括控制数据902、图像数据903和 音频数据904，所述控制数据902是与图像编码相关的信息。控制数据 902和图像数据903被应用为图像数据转换器905的输入。图像数据转换 器905根据从控制数据902获得的信息将己经接收的图像数据903的第一 帧转换为帧内模式帧。转换后的图像数据然后被提供到切换器906。音频 数据904被应用为切换器906的输入。当通过转换指示信号909而被通知了转换的开始时，切换器906将已 经进行转换的音频数据904和图像数据应用为数据存储单元908的输入， 直到通过转换指示信号909而被通知了转换的结束。但是，当运动图像存储系统实时地存储从终端装置发送的运动图像 时，必须从终端装置向运动图像存储系统发送存储的开始和结束指示。但 是，频繁产生下述问题终端装置的操作员不识别用于指示存储的开始和 结束的方法。专利文件l: JP-A-2002-232847 (段落0002-0005，图2)发明内容本发明旨在解决上述问题，并且其目的是提供一种运动图像存储系 统、运动图像存储方法和运动图像存储程序，用于向终端装置发送与关于 存储开始和结束的操作的方法相关的导引图像(guidance image)，然后根 据来自所述终端装置的指示信号而存储从终端装置实时发送的运动图像。根据本发明的运动图像存储系统包括接收器，用于从终端装置接收 和提供包含音频数据和图像数据的至少之一的信号；发送器，用于当存储 从接收器提供的音频数据和图像数据的至少之一时，向终端装置发送图 像、语音或者图像和语音来作为通知存储开始的方法的导引 (guidance);检测器，用于检测从终端装置发送的通知信号；以及，转 换器，用于使用来自检测器的检测结果来将存储已经开始时的图像数据转 换为帧内模式。在本发明的第一实施例中，接收器从终端装置接收音频数据(例如分
组数据)和图像数据(例如分组数据)的至少之一。在本发明的第二实施例中，接收器从接收自终端装置的信号(例如复 用信号)中分离出音频数据和图像数据的至少之一。运动图像存储系统可以具有同步模块，该同步模块用于按照经转换器 转换后的图像数据中的数据量，来调节音频数据和图像数据之间的同步。运动图像存储系统可以具有控制模块，该控制模块用于实现控制以使 得帧内模式图像数据中的代码量是预定值。运动图像存储系统可以具有控制模块，该控制模块用于控制帧内编码 量，以使得经转换器转换后的代码量等于转换前的代码量。根据本发明，从运动图像存储系统向终端装置提供用于指示存储的开 始和结束的方法，以从终端装置发送用于开始和结束运动图像存储系统中 的存储的指示，并且根据来自终端装置的指示，从终端装置实时发送的运 动图像可以被存储。


图1是运动图像存储系统的典型配置示例的框图；图2是示出了本发明运动图像存储系统的第一实施例的配置的框图； 图3是示出了本发明运动图像存储系统的第二实施例的配置的框图； 图4是示出了本发明运动图像存储系统的第一工作示例的框图； 图5是示出了本发明运动图像存储系统的第二工作示例的框图； 图6A是用于说明本发明中的数据同步调节的说明视图； 图6B是用于说明本发明中的数据同步调节的说明视图； 图7是示出了本发明运动图像存储系统的第三工作示例的框图； 图8是示出了图7所示的图像数据转换器的配置的示例的框图； 图9是示出了本发明运动图像存储系统的第四工作示例的配置示例的 框图；图IO是示出了本发明运动图像存储系统的第五工作示例的框图； 图11是示出了图IO所示的图像数据转换器的配置示例的框图； 图12是示出了本发明的运动图像存储系统的第六工作示例的框图13是示出了本发明运动图像存储系统的第七工作示例的框图； 图14是示出了本发明运动图像存储系统的第八工作示例的框图； 图15是示出了本发明运动图像存储系统的第九工作示例的框图；以及图16是示出了本发明运动图像存储系统的第十工作示例的框图。
具体实施方式
接着参见

本发明的实施例。第一实施例图2是根据本发明的运动图像存储系统的第一实施例的配置的框图。图2所示的运动图像存储系统1是分组交换网5中的运动图像存储系统。在本实施例中，通过下述方式来确定音频/图像编码中的参数通过当启动 通信时在作为终端装置4的一个示例的便携终端和运动图像存储系统1之间，根据由IETF RFC3261/RFC2327规定的SIP/SDP而执行能力 (capability)交换。运动图像存储系统1接着向终端装置4发送导引，该 导引提供了发送通知信号的方法，所述通知信号用于指示运动图像存储的 开始和结束(存储开始/结束通知方法)。运动图像存储系统1根据从终端 装置4接收的通知信号而存储从终端装置4接收的运动图像。另外，基于 例如RFC2833的DTMF信号被用作来自终端装置4的指示信号。图2所示的运动图像存储系统1具有接收器11，用于从终端装置4 接收音频数据和图像数据中的至少之一；发送器14，用于当在存储单元 10中存储接收的音频数据和图像数据中的至少之一时，向终端装置4发送 导引图像和导引语音中的至少之一，所述导引图像用于提供关于通知例如 存储开始的方法的导引，所述导引语音用于提供关于通知例如存储开始的 方法的导引；检测器16，用于检测已经从终端装置4发送的通知信号；以 及，转换器15，用于使用检测器16的检测结果来将存储己经开始时的图 像数据转换为帧内模式。另外，所述导引示出终端装置4中的操作方法。
第二实施例图3是示出了根据本发明的运动图像存储系统的第二实施例的配置的框图。图3所示的运动图像存储系统2是基于H.324M的运动图像存储系 统，所述H.324M是线路交换网6中的ITU-T的标准。在本实施例中，通 过下述方式来确定基于H.223的控制/音频/图像数据的复用/分离和音频/图 像编码中的参数通过在通信的开始时间在作为终端装置4的一个示例的 便携终端和运动图像存储系统2之间基于H.245而执行能力交换。运动图 像存储系统2接着向终端装置4发送导引，用于提供发送通知信号的方 法，所述通知信号用于指示运动图像存储的开始和结束。运动图像存储系 统2然后根据从终端装置4接收的通知信号而存储从终端装置4接收的运 动图像。另外，DTMF信号被用作来自终端装置4的指示信号。图3所示的运动图像存储系统2具有接收器21，用于从终端装置4 接收音频数据和图像数据中的至少之一；发送器24，用于当在存储单元 10中存储接收的音频数据和图像数据中的至少之一时，向终端装置4发送 导引图像和导引语音中的至少之一，所述导引图像用于提供关于通知例如 存储开始的方法的导引，所述导引语音用于提供关于通知例如存储开始的 方法的导引；检测器16，用于检测从终端装置4发送的通知信号；以及， 转换器15，用于使用检测器16的检测结果来将存储已经开始时的图像数 据转换为帧内模式。另外，所述导引示出终端装置4中的操作方法。工作示例 第一工作示例接着参见图4说明根据本发明的运动图像存储系统(运动图像存储装 置)的第一工作示例。本工作示例对应于在分组交换网中使用的第一实施 例(参见图2)。本工作示例和第二到第五工作示例的每个都是将基于 RFC2833的DTMF信号用作来自终端装置的指示信号的示例。等同于图2所示的接收器11的数据接收器101分析从终端装置(未示 出)接收到的所接收分组100，并且作为输出而提供接收控制数据102、 接收图像数据103、接收音频数据104和DTMF数据116中的至少之一。
接收控制数据102被提供到控制模块107。接收图像数据103被提供到等 同于图2中的转换器15的图像数据转换器105和切换器108。接收音频数 据104被提供到切换器108。 DTMF数据116被提供到等同于图2所示的 检测器16的DTMF检测器106。在通信的开始，控制模块107向数据发送器114 (等同于图2所示的 发送器14)提供基于SIP/SDP的发送控制数据111，以在所述终端装置和 所述运动图像存储装置之间执行呼叫连接和能力交换。在完成能力交换 后，控制模块107向数据接收器101提供用于接收接收图像数据103和接 收音频数据104的端口号，并且向数据发送器114提供用于发送发送图像 数据112和发送音频数据113的端口号。另夕卜，控制模块107向等同于图 2所示的存储单元IO的存储装置IIO提供导引运动图像发送指示信号，其 示出了所述终端装置中的操作方法。在接收到作为输入的导引运动图像发 送指示信号时，存储装置IIO向数据发送器114提供对应于导引运动图像 的发送图像数据112和发送音频数据113。所述导引运动图像包含具有内 容"当开始记录时请按下号码'0'和当结束记录时按下号码"，"的语 音和图像的至少之一。数据发送器114将发送控制数据111、发送图像数据112和发送音频 数据113的至少之一转换为分组，并且提供发送分组115。当通过诸如包括计算机的服务器装置之类的装置实现运动图像存储装 置时，通过程序以及按照所述程序而执行处理的CPU来实现用于在数据接 收器101中分析所接收的分组100的能力，用于在数据发送器114中将数 据转换为分组的能力，以及图像数据转换器105、 DTMF检测器106和控 制模块107。终端装置通过基于IETF RFC2833的DTMF信号而发送开始记录指示 或者结束记录指示。在从终端装置接收到基于IETF RFC2833的DTMF信 号来作为开始记录指示或者结束记录指示时，数据接收器101向DTMF检 测器106提供DTMF数据116。 DTMF检测器106分析已经作为输入而接 收的DTMF数据116，并且向控制模块107提供分析结果来作为DTMF信 号检测结果。 当DTMF信号检测结果示出开始记录指示时，控制模块107向图像数 据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块107向图像数据转换器105和切换器108提 供结束记录指示。在输入开始记录指示时，图像数据转换器105将在输入时的接收图像 数据103转换为进行了帧内编码的图像数据，并且向切换器108提供结 果。为了执行这种处理，图像数据转换器105不断地解码已经作为输入接 收的接收图像数据103，并且在接收到作为输入的开始记录指示时，对所 解码的图像进行帧内编码。在输入开始记录指示时，切换器108向存储装置IIO提供己经进行了 帧内编码并且从图像数据转换器105提供的图像数据。从记录已经开始时 直到输入结束记录指示，切换器108持续向存储装置IIO提供接收图像数 据103。切换器108还从输入开始记录指示直到输入结束记录指示，向存 储装置IIO提供接收音频数据104。第二工作示例接着参见图5说明本发明的第二工作示例。本工作示例对应于在分组 交换网中使用的第一实施例(参见图2)。数据接收器101分析从终端装置接收到的所接收分组100，并且提供 接收控制数据102、接收图像数据103、接收音频数据104和DTMF数据 116中的至少之一作为输出。接收控制数据102被提供到控制模块107。 接收图像数据103被提供到图像数据转换器105和切换器108。接收音频 数据104被提供到切换器108。 DTMF数据116被提供到DTMF检测器 106。为了在通信开始时在终端装置和运动图像存储系装置之间执行呼叫连 接和能力交换，控制模块107向数据发送器114提供基于由IETF RFC3261/RFC2327规定的SIP/SDP的发送控制数据111。在完成能力交换 后，控制模块107向数据接收器101提供用于接收接收图像数据103和接 收音频数据104的端口号，并且向数据发送器114发送用于发送发送图像 数据112和发送音频数据113的端口号。控制模块107还向存储装置110 提供导引运动图像发送指示信号，用于示出终端装置中的操作方法。在接 收到作为输入的导引运动图像发送指示信号时，存储装置110向数据发送 器114提供对应于导引运动图像的发送图像数据112和发送音频数据 113。所述导引运动图像包含具有例如"当开始记录时请按下号码'0'和当结束记录时按下号码'r "的内容的语音和图像的至少之一。数据发送器114将发送控制数据111、发送图像数据112和发送音频 数据113的至少之一转换为分组，并且提供所产生的发送分组115。在从终端装置接收到作为开始记录指示或者结束记录指示的、基于 IETF RFC2833的DTMF信号时，数据接收器101向DTMF检测器106提 供DTMF数据116。 DTMF检测器106分析已经作为输入接收的DTMF数 据116，并且向控制模块107提供DTMF信号检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块107向图像数 据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块107向图像数据转换器105和切换器108提 供结束记录指示。在输入开始记录指示时，图像数据转换器105将那时的接收图像数据 103转换为进行了帧内编码的图像数据，并且向切换器108提供结果。为 了执行这种处理，图像数据转换器105不断地解码作为输入被接收的接收 图像数据103，并且在接收到开始记录指示时，对所解码的图像进行帧内 编码。在输入开始记录指示时，切换器108向媒体同步模块109提供己经进 行了帧内编码并且己经从图像数据转换器105提供的图像数据。从记录己 经开始时直到输入结束记录指示，切换器108持续向媒体同步模块109提 供接收图像数据103。切换器108从输入开始记录指示直到输入结束记录 指示，向媒体同步模块109提供接收音频数据104。媒体同步模块109将时间信息赋予经转换的音频数据和图像数据，并 且将这些数据提供到存储装置110。此时，作为帧内编码的结果，在记录 已经开始时的图像数据中的代码量通常大于在转换之前的代码量。因此，
当在转换开始时同步图像和语音时，所述图像的显示被延迟。媒体同步模块109因此通过将如图6A的帧N中所示的音频数据向后 平移而进行调节，以获得图像和语音的同步。换句话说，当经图像数据转 换器105转换的图像数据中的代码量相对于在转换之前的代码量改变时， 媒体同步模块109调节与音频数据的再现定时相关的信息。此时，当对应 于在前图像的音频数据的缺少在再现时引起问题时，媒体同步模块109例 如插入静默数据，以对应于经历了转换的在前图像数据，如图6B所示。第三工作示例接着参见图7来说明本发明的第三工作示例。本工作示例对应于在分 组交换网中使用的第一实施例(参见图2)。数据接收器101分析从终端装置接收的分组100，并且提供接收控制 数据102、接收图像数据103、接收音频数据104和DTMF数据116中的 至少之一作为输出。接收控制数据102被提供到控制模块107。接收图像 数据103被提供到图像数据转换器125和切换器108。接收音频数据104 被提供到切换器108。 DTMF数据116被提供到DTMF检测器106。控制模块107向数据发送器114提供基于由IETF RFC3261/RFC2327 规定的SIP/SDP的发送控制数据111，以在开始通信时在终端装置和运动 图像存储装置之间执行呼叫连接和能力交换。在完成能力交换时，控制模 块107向数据接收器101提供用于接收接收图像数据103和接收音频数据 104的端口号，并且向数据发送器114提供用于发送发送图像数据112和 发送音频数据113的端口号。控制模块107还向存储装置IIO提供导引运 动图像发送指示信号，其示出了终端装置中的操作方法。在接收到作为输 入的导引运动图像发送指示信号时，存储装置110向数据发送器114提供 对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引 运动图像包括例如具有内容"当开始记录时请按下号码'0'和当结束记 录时按下号码"的语音和图像的至少之一。数据发送器114将发送控制数据111、发送图像数据112和发送音频 数据113的至少之一转换为分组，并且提供发送分组115。
在从终端装置接收到作为开始记录指示或者结束记录指示的、基于IETF RFC2833的DTMF信号时，数据接收器101向DTMF检测器106提 供DTMF数据116。 DTMF检测器106分析已经作为输入接收的DTMF数 据116，并且向控制模块107提供DTMF信号的检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块107向图像数 据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块107向图像数据转换器125和切换器108提 供结束记录指示。在作为输入接收到开始记录指示时，图像数据转换器125将那时的接 收图像数据103转换为经历了帧内编码的图像数据，并且向切换器108提 供结果。为了执行这种处理，图像数据转换器125不断地解码作为输入接 收的接收图像数据103，并且在输入开始记录指示时，对所解码的图像进 行帧内编码。图像数据转换器125在此实现控制以使得在转换后的图像数 据大小变为预定目标值。图8是示出了图像数据转换器125的配置的框图。如图8所示，图像 数据转换器125具有图像解码器701、代码量控制模块705和图像编码器 707。图像解码器701向代码量控制模块705提供解码时间量化精度 702，其是当解码时获得的在解码时的量化精度；以及，经MPEG-4编码 的接收图像数据103中的接收代码量703，其是以帧、宏块或者视频分组 为单位的，所述视频分组是宏块组。代码量控制模块705使用解码时间量化精度702、接收代码量703和 目标代码量704的至少之一来确定在编码时的量化精度706，并且向图像 编码器707提供结果。图像编码器707按照量化精度706来执行量化，以 执行图像编码。解码时间量化精度702是当图像解码器701执行解码时获 得的参数，并且是当控制编码使得在编码后的代码量接近目标代码量704 时的有效信息。例如，当接收代码量703大于目标代码量704时，代码量控制模块 705实现控制以使得编码时间量化精度706比解码时间量化精度702更
粗。当即使在编码期间的量化精度706被设置为最粗的水平的情况下代码 量704也超过目标的时候，可以通过将在编码期间的DCT系数的较高阶 值的几个设置为"0"来减少所提供的代码量。设置目标代码量704防止 经图像编码器707编码的图像数据中的代码量的大变化。图7所示的切换器108在输入开始记录指示时向存储装置110提供已 经进行了帧内编码并且已经从图像数据转换器125提供的图像数据。切换 器108从记录已经开始时直到输入结束记录指示，向存储装置110持续提 供接收图像数据103。切换器108还从输入开始记录指示直到输入结束记 录指示，向存储装置110提供接收音频数据104。第四工作示例接着参见图9来说明本发明的第四工作示例。本工作示例对应于在分 组交换网中使用的第一实施例(参见图2)。数据接收器101分析已经从终端装置接收的所接收分组100，并且提 供接收控制数据102、接收图像数据103、接收音频数据104和DTMF数 据116中的至少之一作为输出。接收控制数据102被提供到控制模块 107。接收图像数据103被提供到图像数据转换器135和切换器108。接收 音频数据104被提供到切换器108。 DTMF数据116被提供到DTMF检测 器106。控制模块107向数据发送器114提供基于由IETF RFC3261/RFC2327 规定的SIP/SDP的发送控制数据111，以在通信开始时在终端装置和运动 图像存储装置之间执行呼叫连接和能力交换。在完成能力交换时，控制模 块107向数据接收器101提供用于接收接收图像数据103和接收音频数据 104的端口号，并且向数据发送器114提供用于发送发送图像数据112和 发送音频数据113的端口号。控制模块107还向存储装置IIO提供导引运 动图像发送指示信号，用于示出终端装置中的操作方法。在接收到作为输 入的导引运动图像发送指示信号时，存储装置110向数据发送器114提供 对应于导引运动图像的发送图像数据112和发送音频数据113。所述导引 运动图像例如包含具有内容"当开始记录时请按下号码'0'和当结束记 录时按下号码'r "的语音和图像的至少之一。数据发送器114将发送控制数据111、发送图像数据112和发送音频 数据113的至少之一转换为分组，并且提供发送分组115。在从终端装置接收到作为开始记录指示或者结束记录指示的、基于 IETF RFC2833的DTMF信号时，数据接收器101向DTMF检测器106提 供DTMF 116。 DTMF检测器106分析已经接收的DTMF数据116，并且 向控制模块107提供DTMF信号检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块107向图像数 据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块107向图像数据转换器125和切换器108提 供结束记录指示。在输入开始记录指示时，图像数据转换器125将此时的接收图像数据 103转换为经历了帧内编码的图像数据，并且向切换器108提供结果。为 了执行这种处理，图像数据转换器105不断地解码作为输入接收的接收图 像数据103，并且当接收到作为输入的开始记录指示时，对所解码的图像 进行帧内编码。像在第三工作示例中那样，图像数据转换器125具有图8的示例中所 示的配置。图像数据转换器125因此与第三工作示例的情况类似地工作。在输入开始记录指示时，切换器108向媒体同步模块109提供已经经 历了帧内编码并且已经从图像数据转换器105被提供的图像数据。切换器 108从已经开始记录时直到输入结束记录指示，持续向媒体同步模块109 提供接收图像数据103。切换器108还从输入开始记录指示直到输入结束 记录指示，向媒体同步模块109提供接收音频数据104。媒体同步模块109将时间信息赋予经转换的音频数据和图像数据，并 且向存储装置IIO提供这些数据。此时，经历了帧内编码的、在记录已经 开始时的图像数据中的代码量通常大于转换之前的图像数据中的代码量。 因此，如果图像和语音在开始转换时被同步，则图像将以延迟的方式被显 示。媒体同步模块109因此通过下述方式而调节通过将如图6A的帧N
中所示的音频数据向后平移，以使得在图像和语音之间建立同步。此时， 如果当再现时，对应于在前图像的音频数据的缺少引起问题，则媒体同步模块109例如插入如图6B所示的静默数据。第五工作示例接着参考图10来说明第五工作示例。本工作示例对应于在分组交换 网中使用的第一实施例(参见图2)。数据接收器101分析从终端装置接收的所接收分组100，并且提供作 为输出的接收控制数据102、接收图像数据103、接收音频数据104和 DTMF数据116的至少之一。接收控制数据102被提供到控制模块107。 接收图像数据103被提供到图像数据转换器135和切换器108。接收音频 数据104被提供到切换器108。 DTMF数据116被提供到DTMF检测器 106。为了在开始通信时在终端装置和运动图像存储装置之间执行呼叫连接 和能力交换，控制模块107向数据发送器114提供基于由IETF RFC3261/RFC2327规定的SIP/SDP的发送控制数据111。在完成能力交换 时，控制模块107向数据接收器101提供用于接收接收图像数据103和接 收音频数据104的端口号，并且向数据发送器114提供用于发送发送图像 数据112和发送音频数据113的端口号。控制模块107还向存储装置110 提供导引运动图像发送指示信号，用于示出终端装置中的操作方法。在接 收到所述导引运动图像发送指示信号时，存储装置110向数据发送器114 提供对应于导引运动图像的发送图像数据112和发送音频数据113。所述 导引运动图像例如包括具有内容"当开始记录时请按下号码'0'和当结 束记录时按下号码<r "的语音和图像的至少之一。数据发送器114将发送控制数据111、发送图像数据112和发送音频 数据113的至少之一转换为分组，并且提供发送分组115。在从终端装置接收到用于示出开始记录指示或者结束记录指示的、基 于IETF RFC2833的DTMF信号时，数据接收器101向DTMF检测器106 提供DTMF数据116。 DTMF检测器106分析所述DTMF数据116，然后 向控制模块107提供DTMF信号检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块107向图像数 据转换器135和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块107向图像数据转换器135和切换器108提 供结束记录指示。在接收到作为输入的开始记录指示时，图像数据转换器135将那时的 接收图像数据103转换为经历了帧内编码的图像数据，并且向切换器108 提供所述结果。为了执行这种处理，图像数据转换器135不断地解码已经 作为输入而接收的接收图像数据103，并且当接收到开始记录指示时，对 所解码的图像进行帧内编码。在此，图像数据转换器135实现控制，以使 得在转换后的图像数据大小与所接收的图像数据中的代码量相同。图11是示出了图像数据转换器135的配置的框图。如图11所示，图 像数据转换器135包括图像解码器701、代码量控制模块805和图像编 码器707。图像解码器701向代码量控制模块805提供解码时间量化精度702 和经MPEG-4编码的接收图像数据103中的接收代码量703，其以帧、宏 块或者视频分组为单位，所述视频分组为宏块组。解码时间量化精度702 是当图像解码器701执行解码时获得的参数，并且是当实现编码控制以使 得在编码后的代码量接近接收代码量703时的有效信息。代码量控制模块805使用解码时间量化精度702和接收代码量703的 至少之一来确定编码时间量化精度706，并且向图像编码器707提供结 果。代码量控制模块805确定量化精度706，以使得在转换后的代码量 (当图像编码器707己经执行编码时的代码量)是与在转换之前的代码量 (在图像解码器701执行解码之前的代码量)相同的代码量(允许一定量 的误差)。通过这种控制，在图像和语音之间建立同步。图IO所示的切换器108在输入开始记录指示时向存储装置IIO提供已 经经历了帧内编码并且已经从图像数据转换器135提供的图像数据。从记 录已经开始时直到输入结束记录指示，切换器108持续向存储装置110提 供接收图像数据103。另外，切换器108从输入开始记录指示直到输入结 束记录指示，向存储装置110提供接收音频数据104。第六工作示例接着参考图12来说明本发明的第六工作示例。本工作示例对应于在 线路交换网中使用的第二实施例(参见图3)。本工作示例和第七到第十 工作示例考虑其中DTMF信号被用作来自终端装置的指示信号的情况。对应于图3所示的接收器21的数据分离器201从已经复用和从终端装 置接收的接收复用数据200中分离出接收控制数据202、接收图像数据 103和接收音频数据104的至少之一。接收控制数据202被提供到控制模 块207。接收图像数据103被提供到对应于图3所示的转换器15的图像数 据转换器105和切换器108。接收音频数据104被提供到对应于图3所示 的检测器16的DTMF检测器206和切换器108。为了在开始通信时在终端装置和运动图像存储装置之间执行能力交 换，控制模块207向对应于图3所示的发送器24的数据复用器214提供基 于由ITU-T规定的H.245的发送控制数据211，并且向数据分离器201和 数据复用器214提供被包含在接收控制数据202中的与复用相关的能力信 息(复用表和在多个AL-SDU大小的复用和分离中使用的参数的最大 值)。根据该能力信息，数据分离器201执行接收复用数据200的分离。 数据复用器214复用发送控制数据211、发送图像数据112和发送音频数 据113的至少之一。当通过诸如包括计算机的服务器装置之类的装置来实现运动图像存储 装置时，通过程序以及按照所述程序而执行处理的CPU来实现用于在数据 分离器201中分离数据的能力，用于在数据复用器214中复用数据的能 力，以及图像数据转换器105、 DTMF检测器206和控制模块207。在完成能力交换时，控制模块207向对应于图3所示的存储装置10的 存储装置110提供导引运动图像发送指示信号，其示出终端装置中的操作 方法。在接收到作为输入的导引运动图像发送指示信号时，存储装置110 向数据复用器214提供对应于导引运动图像的发送图像数据112和发送音 频数据113。所述导引运动图像例如包含具有内容"当开始记录时请按下
号码'0'和当结束记录时按下号码"的语音和图像的至少之一。数据复用器214将发送控制数据211、发送图像数据112和发送音频 数据113的至少之一复用，并且提供发送复用数据215。当从终端装置发送开始记录指示或者结束记录指示时，DTMF检测器 206通过分析从接收音频数据104获得的音频信号的频率而检测DTMF信 号，并且向控制模块207提供DTMF信号检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块207向图像数 据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块207向图像数据转换器105和切换器108提 供结束记录指示。在输入开始记录指示时，图像数据转换器105将在此时的接收图像数 据103转换为经历了帧内编码的图像数据，并且向切换器108提供结果。 为了执行这种处理，图像数据转换器105不断地解码作为输入接收的接收 图像数据103，并且在输入开始记录指示时，对所解码的图像进行帧内编 码。切换器108在输入开始记录指示时向存储装置110提供已经经历了帧 内编码并且已经从图像数据转换器105提供的图像数据。切换器108从开 始记录时直到输入结束记录指示，持续向存储装置iio提供接收图像数据 103。切换器108还从输入开始记录指示直到输入结束记录指示，向存储 装置110提供接收音频数据104。第七工作示例接着参考图13而说明本发明的第七工作示例。本工作示例对应于在 线路交换网中使用的第二实施例(参见图3)。数据分离器201从已经复用和从终端装置接收的接收复用数据200中 分离出接收控制数据202、接收图像数据103和接收音频数据104的至少 之一。接收控制数据202被提供到控制模块207。接收图像数据103被提 供到图像数据转换器105和切换器108。接收音频数据104被提供到 DTMF检测器206和切换器108。
为了在开始通信时在终端装置和运动图像存储装置之间执行能力交换，控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发 送控制数据211，并且向数据分离器201和数据复用器214提供被包含在 接收控制数据202中的与复用相关的能力信息(诸如复用表和在多个AL-SDU大小的复用和分离期间使用的参数的最大值)。根据该能力信息，数 据分离器201分离接收复用数据200。数据复用器214复用在发送控制数 据211、发送图像数据112和发送音频数据113中的至少之一。在完成能力交换后，控制模块207向存储装置110提供导引运动图像 发送指示信号，其用于示出终端装置中的操作方法。当作为输入接收到导 引运动图像发送指示信号时，存储装置110向数据复用器214提供对应于 所接收的导引运动图像的发送图像数据112和发送音频数据113。所述导 引运动图像例如包括具有内容"当开始记录时请按下号码'0'和当结束 记录时按下号码'r "的语音和图像的至少之一。数据复用器214将发送控制数据211、发送图像数据112和发送音频 数据113的至少之一复用，并且提供发送复用数据215。当从终端装置发送开始记录指示或者结束记录指示时，DTMF检测器 206分析从接收音频数据104获得的音频信号的频率以检测DTMF信号， 并且向控制模块207提供DTMF信号检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块207向图像数 据转换器105和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块207向图像数据转换器105和切换器108提 供结束记录指示。在接收到作为输入的开始记录指示时，图像数据转换器105将在此时 的接收图像数据103转换为经历了帧内编码的图像数据，并且向切换器 108提供结果。为了执行这种处理，图像数据转换器105不断地解码作为 输入接收的接收图像数据103，并且在接收到作为输入的开始记录指示 时，对所解码的图像进行帧内编码。切换器108在输入开始记录指示时向媒体同步模块109提供已经经历 帧内编码并且已经从图像数据转换器105提供的图像数据。切换器108从
开始记录时直到输入结束记录指示，持续向媒体同步模块109提供接收图像数据103。媒体同步模块109将时间信息赋予经转换的音频数据和图像数据，并 且向存储装置110提供这些数据。此时，已经经历帧内编码的、当开始记 录时的图像数据中的代码量通常大于在转换之前的代码量。在这种情况 下，在转换开始时同步图像和语音导致被延迟的图像显示。作为响应，媒体同步模块109通过下述方式来进行调节通过将如图6A的帧N中所示的音频数据向后平移，以使得在图像和语音之间建立同 步。此时，当缺少在前图像的音频数据在再现时引起问题时，媒体同步模 块109例如插入了图6B所示的静默数据。第八工作示例接着参考图14来说明本发明的第八工作示例。本工作示例对应于在 线路交换网中使用的第二实施例(参见图3)。数据分离器201从已经复用和从终端装置接收的接收复用数据200中 分离出接收控制数据202、接收图像数据103、接收音频数据104的至少 之一。接收控制数据202被提供到控制模块207。接收图像数据103被提 供到图像数据转换器125和切换器108。接收音频数据104被提供到 DTMF检测器206和切换器108。为了在开始通信时在终端装置和运动图像存储装置之间执行能力交 换，控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发 送控制数据211，并且向数据分离器201和数据复用器214提供被包含在 接收控制数据202中的与复用相关的能力信息(复用表和在多个AL-SDU 大小的复用和分离期间使用的参数的最大值)。根据该能力信息，数据分 离器201执行接收复用数据200的分离。数据复用器214复用发送控制数 据211、发送图像数据112和发送音频数据113的至少之一。在完成能力交换时，控制模块207向存储装置110提供导引运动图像 发送指示信号，其示出终端装置中的操作方法。在输入导引运动图像发送 指示信号时，存储装置110向数据复用器214提供对应于导引运动图像的
发送图像数据112和发送音频数据113。所述导引运动图像例如包含具有内容"当开始记录时请按下号码'o'和当结束记录时按下号码'r "的语音和图像的至少之一。数据复用器214将发送控制数据211、发送图像数据112和发送音频 数据113的至少之一复用，并且提供发送复用数据215作为输出。当从终端装置发送开始记录指示或者结束记录指示时，DTMF捡测器 206分析从接收音频数据104获得的音频信号的频率以检测DTMF信号， 并且向控制模块207提供DTMF信号检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块207向图像数 据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块207向图像数据转换器125和切换器108提 供结束记录指示。在输入开始记录指示时，图像数据转换器125将在此时的接收图像数 据103转换为经历了帧内编码的图像数据，并且向切换器108提供结果。 为了执行这种处理，图像数据转换器125不断地解码作为输入接收的接收 图像数据103，并且在输入开始记录指示时，对所解码的图像进行帧内编 码。像在第三工作示例中那样，图像数据转换器125具有图8所示的配 置，并且图像数据转换器125的操作因此类似于第三工作示例的图像数据 转换器125的操作。切换器108在输入开始记录指示时向存储装置IIO提供已经经历帧内 编码并且己经从图像数据转换器125提供的图像数据。切换器108从开始 记录时直到输入结束记录指示，持续向存储装置IIO提供接收图像数据 103。切换器108还从输入开始记录指示直到输入结束记录指示，向存储 装置IIO提供接收音频数据104。第九工作示例接着参考图15而说明本发明的第九工作示例。本工作示例对应于在 线路交换网中使用的第二实施例(参见图3)。
数据分离器201从已经复用和从终端装置接收的接收复用数据200中 分离出接收控制数据202、接收图像数据103和接收音频数据104的至少 之一。接收控制数据202被提供到控制模块207。接收图像数据103被提 供到图像数据转换器125和切换器108。接收音频数据104被提供到 DTMF检测器206和切换器108。为了在开始通信时在终端装置和运动图像存储装置之间执行能力交 换，控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发 送控制数据211，并且向数据分离器201和数据复用器214提供被包含在 接收控制数据202中的与复用相关的能力信息(复用表和在多个AL-SDU 大小的复用和分离期间使用的参数的最大值)。根据该能力信息，数据分 离器201分离接收复用数据200。数据复用器214复用在发送控制数据 211、发送图像数据112和发送音频数据113中的至少之一。在完成能力交换后，控制模块207向存储装置110提供导引运动图像 发送指示信号，其用于示出终端装置中的操作方法。当接收到导引运动图 像发送指示信号时，存储装置110向数据复用器214提供对应于导引运动 图像的发送图像数据112和发送音频数据113。所述导引运动图像例如包 括具有内容"当开始记录时请按下号码'0'和当结束记录时按下号码 "的语音和图像的至少之一。数据复用器214将发送控制数据211、发送图像数据112和发送音频 数据113的至少之一复用，并且提供发送复用数据215作为输出。当从终端装置发送开始记录指示或者结束记录指示时，DTMF检测器 206分析从接收音频数据104获得的音频信号的频率以检测DTMF信号， 并且向控制模块207提供DTMF信号检测结果。当DTMF信号检测结果示出开始记录指示时，控制模块207向图像数 据转换器125和切换器108提供开始记录指示。当DTMF信号检测结果示 出结束记录指示时，控制模块207向图像数据转换器125和切换器108提 供结束记录指示。在接收到作为输入的开始记录指示时，图像数据转换器125将在此时 的接收图像数据103转换为经历了帧内编码的图像数据，并且向切换器108提供结果。为了执行这种处理，图像数据转换器105不断地解码作为 输入接收的接收图像数据103，并且在接收到作为输入的开始记录指示 时，对所解码的图像进行帧内编码。像对于第三工作示例那样，图像数据转换器125具有图8所示的配 置，并且图像数据转换器125因此具有与在第三工作示例中相同的操作。切换器108在输入开始记录指示时向媒体同步模块109提供已经经历 帧内编码并且已经从图像数据转换器125提供的图像数据。切换器108从 开始记录时直到输入结束记录指示，持续向媒体同步模块109提供接收图 像数据103。切换器108还从输入开始记录指示直到输入结束记录指示， 向媒体同步模块109提供接收音频数据104。媒体同步模块109将时间信息赋予经转换的音频数据和图像数据，并 且向存储装置IIO提供这些数据。此时，经历了帧内编码的、当开始记录 时的图像数据中的代码量通常大于在转换之前的代码量。结果，当在已经 开始转换时同步语音和图像时，图像的显示被延迟。媒体同步模块109因此通过下述方式来进行调节通过将如图6A的 帧N中所示的音频数据向后平移，以使得在图像和语音之间获得同步。此 时，如果缺少对应于在前图像的音频数据在再现时引起问题，则媒体同步 模块109例如插入图6B所示的静默数据。第十工作示例接着参考图16来说明本发明的第十工作示例。本工作示例对应于在 线路交换网中使用的第二实施例(参见图3)。数据分离器201从已经复用和从终端装置接收的接收复用数据200中 分离出接收控制数据202、接收图像数据103、接收音频数据104的至少 之一。接收控制数据202被提供到控制模块207。接收图像数据103被提 供到图像数据转换器135和切换器108。接收音频数据104被提供到 DTMF检测器206和切换器108。为了在开始通信时在终端装置和运动图像存储装置之间执行能力交 换，控制模块207向数据复用器214提供基于由ITU-T规定的H.245的发 送控制数据211，并且向数据分离器201和数据复用器214提供被包含在 接收控制数据202中的与复用相关的能力信息(复用表和在多个AL-SDU 大小的复用和分离期间使用的参数的最大值)。根据该能力信息，数据分 离器201执行接收复用数据200的分离。数据复用器214复用发送控制数 据211 、发送图像数据112和发送音频数据113的至少之一。在完成能力交换时，控制模块207向存储装置110提供导引运动图像 发送指示信号，其示出终端装置中的操作方法。在接收到作为输入的导引 运动图像发送指示信号时，存储装置110向数据复用器214提供对应于导 引运动图像的发送图像数据112和发送音频数据113。所述导引运动图像 例如包含具有内容"当开始记录时请按下号码'0'和当结束记录时按下 号码'r "的语音和图像的至少之一。像在第五工作示例中那样，图像数据转换器135实现控制，以使得在 转换后的图像数据的大小与所接收的图像数据中的代码量相同。换句话 说，就像第五工作示例的情况那样，图像数据转换器135具有图11所示 的配置，并且图像数据转换器135因此具有类似于第五工作示例的情况的 操作。切换器108在输入开始记录指示时向存储装置110提供已经经历帧内 编码并且已经从图像数据转换器135提供的图像数据。切换器108从开始 记录时直到输入结束记录指示，持续向存储装置110提供接收图像数据 103。切换器108还从输入开始记录指示直到输入结束记录指示，向存储 装置110提供接收音频数据104。产业上的使用潜力本发明理想上被应用于例如当存储和分发从视频电话服务接收的或者 从运动图像分发服务接收的运动图像数据时，在服务器中存储从终端装置 接收的运动图像数据，所述运动图像分发服务在线路交换网或者分组交换 网中使用便携终端。
权利要求
1. 一种运动图像存储系统，用于存储从终端装置接收到的运动图像，所述运动图像存储系统包括接收器，其用于接收包含来自所述终端装置的音频数据和图像数据中的至少之一的信号并且提供该信号作为输出；发送器，其用于当存储从所述接收器提供的音频数据和图像数据中的至少之一时，向所述终端装置发送图像、语音或者图像和语音来作为通知存储开始的方法的导引；检测器，其用于检测从所述终端装置发送的通知信号；以及转换器，其用于使用来自所述检测器的检测结果来将存储已经开始时的图像数据转换为帧内模式。
2. 根据权利要求1的运动图像存储系统，其中，所述接收器从所述终端装置接收音频数据和图像数据中的至少之一。
3. 根据权利要求1的运动图像存储系统，其中，所述接收器从接收 自所述终端装置的信号中分离出音频数据和图像数据中的至少之一。
4. 根据权利要求1到3的任一项的运动图像存储系统，还包括同步 模块，所述同步模块用于根据经所述转换器转换后的图像数据中的数据量 来调节音频数据和图像数据之间的同步。
5. 根据权利要求1到4的任一项的运动图像存储系统，还包括控制 模块，所述控制模块用于实现控制以使得帧内模式图像数据中的代码量达 到预定值。
6. 根据权利要求1到4的任一项的运动图像存储系统，还包括控制 模块，所述控制模块用于控制帧内编码量，以使得经所述转换器转换后的 代码量等于转换前的代码量。
7. 根据权利要求1到6的任一项的运动图像存储系统，其中，所述 检测器检测作为通信信号从所述终端装置发送的DTMF信号。
8. —种运动图像存储方法，用于存储从终端装置接收到的运动图 像，所述运动图像存储方法包括 接收步骤，用于接收包含来自所述终端装置的音频数据和图像数据中的至少之一的信号并且提供该信号作为输出；发送步骤，用于当存储所述接收步骤中作为输出而提供的信号中包含的音频数据和图像数据中的至少之一时，向所述终端装置发送图像、语音或者图像和语音，以提供通知存储开始的方法的导引；检测步骤，用于检测从所述终端装置发送的通知信号；以及 转换步骤，用于使用由所述检测步骤获得的检测结果来将存储已经开始时的图像数据转换为帧内模式。
9. 根据权利要求8的运动图像存储方法，其中，所述接收步骤包括 从所述终端装置接收音频数据和图像数据中的至少之一 。
10. 根据权利要求8的运动图像存储方法，其中，所述接收步骤包括 从接收自所述终端装置的信号中分离出音频数据和图像数据中的至少之
11. 一种运动图像存储程序，用于使得属于存储从终端装置接收到的 运动图像的运动图像存储装置的计算机执行下述处理从所述终端装置接收包含音频数据和图像数据中的至少之一的信号； 当存储所接收的信号中包含的音频数据和图像数据中的至少之一时，向所述终端装置发送图像、语音或者图像和语音，以提供通知存储开始的方法的导引；检测从所述终端装置发送的通知信号；以及按照所检测的通知信号来将存储已经开始时的图像数据转换为帧内模式。
全文摘要
当从终端装置发送开始记录指示或者结束记录指示时，DTMF检测器(106)检测DTMF信号，并且向控制模块(107)提供检测结果。控制模块(107)向图像数据转换器(105)和切换器(108)提供开始记录指示或者结束记录指示。当开始记录指示被接收作为输入时，图像数据转换器(105)将接收图像数据(103)转换为经历了帧内模式编码的图像数据，并将结果提供给切换器(108)。切换器(108)在记录记录指示被接收作为输入时向存储装置(110)提供从图像数据转换器(105)所提供的图像数据，并且从记录已经开始时直到输入结束记录指示，向存储装置(110)提供接收图像数据(103)。
文档编号H04N5/92GK101401423SQ200680053920
公开日2009年4月1日 申请日期2006年12月8日 优先权日2006年3月27日
发明者伊藤博纪, 小泽一范 申请人:日本电气株式会社