专利名称:图像数据通信系统和图像数据通信方法
技术领域:
本发明涉及用于利用移动通信网络来分发和/或接收运动图片图像数据的方法、设备和系统。本发明还涉及用于分发和/或接收这种类型的运动图片图像数据的程序。
背景技术:
近年来,用于传输利用基于帧间预测的高效压缩实现的编码数据的各种方法已被用作有效传输运动图片图像数据的方法。在这些传输方法中,通过对预测的参数和预测的残留图像数据进行编码,可以实现在时间方向上具有高相关性的运动图片图像数据的信息量的减少,其中所述预测的参数和预测的残留图像数据是通过基于时间上在前和在后的帧对编码后的图像进行预测而获得的。另外,对预测的残留运动图片数据的变换编码和量化实现了更高效率的压缩编码,并因而能够以有限的传输带宽来传输运动图片图像数据。
上述传输方法的代表性示例包括使用诸如MPEG(运动图片专家组)-1、MPEG-2和MPEG-4之类压缩编码方法的方法。在这些压缩编码方法中,输入的图像帧经历通过以具有固定尺寸的矩形区域(被称为“宏块”)为单位的运动补偿而进行的帧间预测,并且通过对预测的残留图像数据进行二维离散余弦变换和量化而获得的已被压缩的运动向量和信号数据被执行变长编码。
存在很多经由使用分组交换方法的IP(因特网协议)网络来分发经压缩编码的运动图片图像压缩信息(例如上述信息)的方法。可以预见,在未来,运动图片图像的分发将在如下的移动通信系统中得以发展进化,在此移动通信系统中,由PHS(个人手持电话系统)、便携式电话或使用这些设备作为通信装置的便携式终端构成的移动台通过无线电信道而连接到无线电基站。
但是,在移动通信系统中,当移动台超出一个无线电区域(小区)并移动到相邻的无线电区域时,会发生越区切换(handover)。通常,通过其实现通信的无线电信道的接收电平在移动台中被监控,并且当越区切换致使接收电平下降到指定电平以下时,越区切换请求被发送到网络侧,并且在网络侧,根据来自移动台的越区切换请求,将移动台的连接目的地从移动前的基站切换到移动后的基站。
但是,在越区切换间隔期间,数据接收被中止,从而导致大量数据丢失,并且接收到的图像的质量恶化。在使用帧间预测的编码方法(尤其如MPEG)中,未经历预测的数据在越区切换完成之后被接收,因此在接收期间运动图片图像数据的质量遭受严重恶化。该图像干扰也会影响后续帧。
可以减少由于越区切换导致的数据丢失的移动通信系统已被提出(参考JP-A-2000-152307(在下文中称之为“专利文献1”))。该移动通信系统具有连接到网络的多个基站和经由无线电信道选择性地连接到这些基站的移动台。当来自当前连接的基站的无线电信号的接收质量由于越区切换而下降到指定电平以下时,移动台向网络发送执行广播程序的请求。在网络侧,根据来自移动台的执行请求,寻址到移动台的通信信息被广播到当前连接到该移动台的基站以及在当前连接的基站附近的其他基站。然后通信信息被从当前连接的基站和在附近的其他基站广播到移动台。利用这种广播传输,移动台可以在完成越区切换之后立即获得寻址到其上的通信信息,并因此可以减少由于越区切换所导致的数据丢失。
发明内容
以下说明涉及现有技术的技术问题。
如以上说明所述,存在如下问题当运动图片图像经由移动通信系统中的无线电信道被分发到移动台时,在越区切换间隔期间的数据丢失导致接收到的图像的质量严重恶化。
在专利文献1所述的移动通信系统中,移动台可以在完成越区切换之后立即获得被寻址到其上的通信信息,因此可以减少由于越区切换所导致的数据丢失。但是,在越区切换间隔期间的数据丢失无法通过控制无线电功率来完全解决,因此在专利文献1中描述的广播传输无法避免这种发生在越区切换间隔期间的数据丢失。因此,如专利文献1所述的移动通信系统无法对关于接收到的图像质量恶化的问题提供完全的解决方案。
将丢失的数据重新发送到移动台可被看作另一种方法。但是,这种情况将导致在移动台中同时接收到两种类型的数据原始图像数据和重传图像数据,并且其结果会加大使网络资源负担过重的可能性。
因此本发明的目的在于提供能够在不会使网络资源负担过重的情况下抑制在越区切换间隔期间的数据丢失从而解决上述问题的图像数据通信系统、图像数据分发设备、图像数据接收设备、图像数据通信方法和程序。
为了实现上述目的,本发明的图像数据通信系统包括图像数据分发设备,用于顺序分发具有指定时间差的相同的运动图片图像数据的多个集合;以及图像数据接收设备,用于当在多个无线电区域之间移动的同时,接收从所述图像数据分发设备分发的运动图片图像数据;其中所述图像数据接收设备在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述图像数据分发设备分发的所述具有指定时间差的相同的运动图片图像数据的多个集合,并从接收到的运动图片图像数据中选择所需数据,以重建运动图片图像数据的一个集合。
本发明的图像数据分发设备是这样的图像数据分发设备,该设备被连接,以便允许通过传输线路与在多个无线电区域之间移动的图像数据接收设备通信;所述图像数据分发设备包括编码后图像数据生成装置,用于生成相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像数据被编码;编码后图像数据发送装置,用于以指定的时间差在所述传输线路上顺序发送已经由所述编码后图像数据生成装置生成的相同的编码后图像数据的多个集合;以及控制装置,用于执行所述传输线路上的指定控制设置,以使得在发生于所述图像数据接收设备从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,从所述编码后图像数据发送装置发送的所述具有指定时间差的相同的编码后图像数据的多个集合在指定间隔中在所述图像数据接收设备中被接收。
本发明的图像数据接收设备是这样的图像数据接收设备,该设备被连接,以便允许通过传输线路与图像数据分发设备通信,该图像数据分发设备以指定的时间差顺序分发相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像数据被编码;所述图像数据接收设备包括编码后图像数据接收装置,用于在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述图像数据分发设备分发的所述具有指定时间差的相同的编码后图像数据的多个集合;以及数据重建装置,用于从已经在所述指定间隔中接收到的所述具有指定时间差的相同的编码后图像数据的多个集合中选择所需数据,以重建编码后图像数据的一个集合。
本发明的图像数据通信方法是一种在通信系统中执行的图像数据通信方法,在所述通信系统中,图像数据分发设备和图像数据接收设备通过传输线路被连接,以便允许通信;所述图像数据通信方法包括第一步骤,在该步骤中,所述图像数据分发设备将具有指定时间差的相同的运动图片图像数据的多个集合顺序分发到所述图像数据接收设备;以及第二步骤,在该步骤中,所述图像数据接收设备在发生于所述图像数据接收设备从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述图像数据分发设备分发的所述具有指定时间差的相同的运动图片图像数据的多个集合,并从接收到的运动图片图像数据中选择所需数据,以重建运动图片图像数据的一个集合。
本发明的第一程序是一种在通信系统中使用的程序,在所述通信系统中,服务器和客户终端通过传输线路被连接,以便允许通信,所述程序致使所述服务器的计算机执行第一进程,该进程用于将具有指定时间差的相同的运动图片图像数据的多个集合顺序分发到所述客户终端;并且致使所述客户终端的计算机执行第二进程,该进程用于在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收所述具有指定时间差的相同的运动图片图像数据的多个集合,并从接收到的运动图片图像数据中选择所需数据,以重建运动图片图像数据的一个集合。
本发明的第二程序是一种在服务器中使用的程序,所述服务器被连接,以便允许通过传输线路与在多个无线电区域之间移动的客户终端通信,所述第二程序致使所述服务器中的计算机执行第一进程,用于生成相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像数据被编码;第二进程,用于以指定的时间差在所述传输线路上顺序发送已经在所述第一进程中生成的相同的编码后图像数据的多个集合;以及第三进程,用于在发生于所述客户终端从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,执行所述传输线路上的指定控制设置,以使得在所述第二进程中发送的所述具有指定时间差的相同的编码后图像数据的多个集合在指定间隔中在所述客户终端中被接收。
本发明的第三程序是一种在客户终端中使用的程序,所述客户终端被连接,以便允许通过传输线路与服务器通信,所述服务器图以指定时间差顺序分发相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像被编码;所述程序致使所述客户终端的计算机执行以下进程在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述服务器分发的所述具有指定时间差的相同的编码后图像数据的多个集合;以及从已经在所述指定间隔中接收到的所述具有指定时间差的相同的编码后图像数据的多个集合中选择所需数据,以重建编码后图像数据的一个集合。
在根据上述描述的本发明的图像数据通信系统、图像数据分发设备、图像数据接收设备、图像数据通信方法和程序中,具有指定时间差的相同的运动图片图像数据的多个集合(或者相同的编码后图像数据的多个集合)在越区切换时的指定间隔中被接收。然后,从在指定间隔中已经接收到的所述具有指定时间差的相同的运动图片图像数据的多个集合(或者相同的编码后图像数据的多个集合)中选择所需数据来重建运动图片图像数据(或编码后图像数据)的一个集合。以下将更具体说明该重建。
作为具有指定时间差的相同的运动图片图像数据的多个集合,可以考虑运动图片图像数据的两个集合A和B。运动图片图像数据A由n个帧A1、A2、...、A(n-1)、An构成;这些帧按此顺序被顺序发送。运动图片图像数据B由n个帧B1、B2、...、B(n-1)、Bn构成;这些帧按此顺序被顺序发送,但是假设该运动图片图像数据B的发送相对于运动图片图像数据A被延迟5帧。给定这些条件,在运动图片图像数据A的帧A11-A21被接收的指定时间间隔期间,运动图片图像数据B的帧B5-B15被接收。如果在指定时间间隔期间,运动图片图像数据A的三个帧A12-A14由于与越区切换间隔而丢失,则运动图片图像数据B的三个帧B6-B9也将丢失。这样一来,在指定时间间隔期间,运动图片图像数据A的帧A1和A15-A21被接收,而运动图片图像数据B的帧B5和B10-B15被接收。在此情况下,三个帧B12-B14与在越区切换间隔期间已经丢失的三个帧A12-A14相对应,并且运动图片图像数据A的丢失的帧可以被这三个帧B12-B14所补偿。通过以这种方式执行重建,在越区切换间隔期间丢失的帧被补偿。
这里,上述运动图片图像数据A和B由m个图像数据分组构成即图像数据分组A1、A2、...、A(m-1)、Am和图像数据分组B1、B2、...、B(m-1)、Bm,其中运动图片图像数据的相同帧的相同点已被编码。在以下说明中,上述帧可以是图像数据分组。
在上述重建中,只在指定间隔中需要运动图片图像数据B,而在通常情况下不需要。因此,可以执行控制,以使得在正常操作期间,如果网络资源不够,则不接收运动图片图像数据B。
根据上述本发明,丢失的数据可以通过重建来补偿,而与越区切换的发生无关,并且因此可以将图像质量的恶化抑制到最低限度。
此外,由于接收到的数据在上述重建之后被解码,因此可以消除对解码图像数据的多个集合的需求,并且因此可以将解码所需计算量的任何增长抑制到最低水平。
另外,对于网络资源不够的原因的消除可以提供稳定的图像数据通信。
图1的框图示出了作为本发明第一工作示例的图像数据通信系统的示意性配置;图2的示意图示出了当在图1所示的图像数据通信系统中执行越区切换时,图像数据的重建的实际示例;图3的框图示出了作为本发明第二工作示例的图像数据通信系统的示意性配置;图4的示意图示出了当在图3所示的图像数据通信系统中执行越区切换时,图像数据的重建的实际示例;图5的示意图示出了当在作为本发明第三工作示例的图像数据通信系统中执行越区切换时,图像数据的重建的实际示例;图6的示意图示出了当在作为本发明第三示例的图像数据通信系统中执行越区切换时,图像数据的重建的实际示例;图7的框图示出了作为本发明第五工作示例的图像数据通信系统的示意性配置;图8的示意图示出了当在图7所示的图像数据通信系统中执行越区切换时,图像数据的重建的实际示例;以及图9的框图示出了作为本发明第六工作示例的图像数据通信系统的示意性配置。
具体实施例方式
以下参考附图的说明涉及本发明的实施例。
作为本发明实施例的图像数据通信系统的主要组件包括图像数据分发设备和图像数据接收设备,所述图像数据接收设备是通过移动通信网络至少连接到图像数据分发设备的移动通信终端(客户终端)。图像数据分发设备向图像数据接收设备发送具有指定时间差的同样的运动图片图像数据的多个集合。图像数据接收设备至少在越区切换时,在指定的间隔内接收来自图像数据分发设备的所述具有指定时间差的同样的运动图片图像数据的多个集合,并从这些已经接收到的运动图片图像数据中选择必要的数据来重建运动图片图像数据的一个集合。通过这种重建,在越区切换时间间隔期间丢失的图像数据可以被补偿。
以下说明涉及根据本发明的图像数据通信系统的实际构造的工作示例1-6。
工作示例1图1示出了作为本发明第一工作示例的图像数据通信系统的示意性配置。在该图像数据通信系统中,图像数据分发设备101和图像数据接收设备107连接在一起,以便允许通过传输线路106进行通信,在该传输线路106中IP网络被构建在无线电物理层上。
图像数据分发设备101使用作为一个因特网标准协议的UDP(数据报协议)/IP向图像数据接收设备107分发编码后的图像数据,并且图像数据分发设备101由以下组件构成控制信息处理器102、图像数据存储/生成单元103和编码后图像数据发送器104和105。
图像数据存储/生成单元103对预先存储的图像数据进行编码,或者对从外部实时提供的图像数据进行编码,并生成编码后图像数据1和2。这些已生成的编码后图像数据1和2被分别提供到编码后图像数据发送器104和105。编码后图像数据1和2是已经过高效压缩的同样的编码后数据的集合,所述高效压缩以MPEG标准为代表。
编码后图像数据发送器104和105在具有指定时间差的各自不同会话中将已从图像数据存储/生成单元103提供的编码后图像数据1和2发送到传输线路106上。在本实施例中,赋予了时间差,以使得来自编码后图像数据发送器105的编码后图像数据2的发送相对于来自编码后图像数据发送器104的编码后图像数据1的发送被延迟指定的时间间隔。这里,指定的时间差是用于实现重建(在下文中将描述)的时间差。在此情况下,编码后图像数据发送器104和105中的每一个都具有向编码后的图像数据添加与RTP(实时传输协议)相对应的信息(例如RTP头部)的能力,以便允许从接收到的数据中选择必要的数据,并且允许在图像数据接收设备107接收到编码后图像数据1和2的集合并重建数据时交换数据的顺序。
在正常操作期间,控制信息处理器102设置无线电传输线路上的路由优先级和/或功率控制,以使得编码后图像数据1在图像数据接收设备107中被优先接收;但是在越区切换时,即在从接收到来自图像数据接收设备107的越区切换开始通知到接收到越区切换结束通知之间的时间间隔期间,控制信息处理器102将无线电传输线路上的路由优先级和/或功率控制设置为使得编码后图像数据1和2都在图像数据接收设备107中被接收。在这种设置无线电传输线路上的路由优先级和功率控制的过程中可以应用现有方法。
图像数据接收设备107是连接到无线电IP网络的客户终端,并且其配置包括控制信息处理器108、编码后图像数据接收器109和110、编码后数据缓冲/重建单元111和解码器112。
编码后图像数据接收器109接收从编码后图像数据发送器104发送的编码后图像数据1,并向控制信息处理器108提供接收电平。编码后图像数据接收器110接收从编码后图像数据发送器105发送的编码后图像数据2,并向控制信息处理器108提供接收电平。利用编码后图像数据接收器109和110,接收到的编码后图像数据被提供到编码后数据缓冲/重建单元111。
控制信息处理器108在从编码后图像数据接收器109提供的编码后图像数据1的接收电平从至少为指定电平的状态转换到低于指定电平的状态时确定越区切换开始,并将开始通知(或对改变设置的请求)发送到控制信息处理器102。控制信息处理器108还在从编码后图像数据接收器109提供的编码后图像数据1和2的接收电平从低于指定电平的状态转换到高于指定电平的状态时确定越区切换结束,并在从结束起经过指定时间间隔之后,向控制信息处理器102发送越区切换结束通知(或对改变设置的请求)。
在正常操作期间,编码后数据缓冲/重建单元111仅仅将接收自编码后图像数据接收器109的运动图片图像编码后数据提供到解码器112。但是,当编码后图像数据1和2都在编码后图像数据接收器109和110中被接收时,编码后数据缓冲/重建单元111基于例如等同于RTP的功能、接收到的会话和图像数据的压缩程度从接收到的编码后图像数据1和2中选择必要的数据,使用选出的数据重建图像数据的一个集合,并将该重建的图像数据提供到解码器112。因此,即使在编码后图像数据1和2都被接收时,也只有图像数据的一个集合被解码,从而解码器112的解码过程上的负担没有增大。解码器112是用于对接收自图像数据分发设备101的编码后图像数据1和2进行解码的公知设备。
以下说明涉及本工作示例的图像数据通信系统的操作的具体示例。
首先说明正常操作,即在图像数据接收设备107在单个无线电区域(小区)内移动期间的操作。在图像数据分发设备101中,编码后图像数据发送器104发送编码后图像数据1,而编码后图像数据发送器105发送编码后图像数据2,该编码后图像数据2与编码后图像数据1相同,但相对于编码后图像数据1的发送被延迟了指定时间间隔。
在传输编码后图像数据1和2期间,控制信息处理器102执行设置,以使编码后图像数据1以高于编码后图像数据2的优先级在传输线路106上被路由,和/或使得编码后图像数据1以高于编码后图像数据2的功率在传输线路106的无线电传输线路上被发送。通过执行这些设置,当传输线路106的资源不够时,优先向图像数据接收设备107递送编码后图像数据1,而编码后图像数据2在传输线路106上被丢弃,由此来抑制由于传输线路106上的过量流量所导致的溢出。
在图像数据接收设备107中,最低限度上,编码后图像数据1在编码后图像数据接收器109中被接收。这些接收到的编码后图像数据1被暂时存储在编码后数据缓冲/重建单元111中,随后被提供到解码器112并在解码器112处经历解码过程。
以下说明涉及越区切换时的操作,即当图像数据接收设备107在接收编码后图像数据1的同时从当前无线电区域移动到另一相邻无线电区域时的操作。
当图像数据接收设备107移动离开当前无线电区域的基站时,编码后图像数据1的接收电平下降。控制信息处理器108在从编码后图像数据接收器109提供的编码后图像数据1的接收电平下降到指定电平以下时,向图像数据分发设备101发送越区切换开始通知。
当在图像数据分发设备101中接收到越区切换开始通知之后,控制信息处理器102将无线电传输线路上的路由优先级和/或功率控制设置为使得编码后图像数据1和2都在图像数据接收设备107中被接收,由此在传输越区切换开始通知之后,相同的编码后图像数据1和2以指定时间差在图像数据接收设备107中被接收。
当到当前无线电区域的基站的距离进一步增大时,图像数据接收设备107中的编码后图像数据1和2的接收电平下降得更多,直到接收丢失。编码后图像数据1和2的接收丢失时的时间点是越区切换间隔的开始点。另一方面,随着图像数据接收设备107接近作为移动目的地的另一无线电区域中的基站,图像数据接收设备107中的编码后图像数据1和2的接收电平逐渐增大,直到编码后图像数据1和2的接收变为可能。编码后图像数据1的2的接收变为可能的时间点是越区切换间隔的结束点。在越区切换间隔期间,在图像数据接收设备107中编码后图像数据1和2的接收都变为不可能,因此数据丢失。
当编码后图像数据1和2的接收变为可能并且编码后图像数据1和2的接收电平超过指定电平时,图像数据接收设备107中的控制信息处理器108在从接收电平超过预定电平的时刻起经过一段指定时间间隔之后,将越区切换结束通知发送到图像数据分发设备101。
在越区切换间隔结束之后的指定间隔期间,编码后图像数据1和2都在图像数据接收设备107中被接收。编码后图像数据1的在越区切换间隔期间丢失的数据的全部或部分被包含在该指定间隔期间接收到的编码后图像数据2中。编码后数据缓冲/重建单元111从接收到的编码后图像数据2中选择与编码后图像数据1的丢失数据相对应的数据,并通过对该选出的数据和已经接收到的编码后图像数据1进行正确排序来重建图像数据的一个集合。利用该重建,编码后图像数据1的丢失数据的全部或部分被补偿。这些重建的图像数据被提供到解码器112并在解码器112处被解码。
在上述指定间隔之后,在图像数据分发设备101中接收到越区切换结束通知。然后控制信息处理器102执行设置,以使编码后图像数据1以比编码后图像数据2更高的优先级在传输线路106上被路由,和/或使得编码后图像数据1以比编码后图像数据2更高的功率在传输线路106的无线电传输线路上被传送。通过这些设置,在图像数据接收设备107中实现了与在上述正常操作期间相同的操作。
图2示出了在上述越区切换时图像数据的重建的实际示例。第7帧、第8帧、...、第30帧的数据作为编码后图像数据1按此顺序被发送,第1帧、第2帧、...、第24帧的数据作为编码后图像数据2按此顺序被发送,在这些编码后图像数据1和2之间存在6帧的时间差。在编码后图像数据1中,第7-14帧和第25-30帧(如粗体字所示的帧)是被设置为高优先级的部分,而第15-24帧(如细体字所示的帧)是已被设置为优先级较低的部分。在编码后图像数据2中,第1-8帧和第19-24帧(如小字所示的帧)是被设置为低优先级的帧,而第9-18帧(如带下划线的字符所示的帧)是已被设置为正常优先级的部分。
在图2的示例中,图像数据接收设备107在接收编码后图像数据1的第14帧时向图像数据分发设备101发送越区切换开始通知,并且在接收编码后图像数据1的第24帧时向图像数据分发设备101发送越区切换结束通知。在图像数据接收设备107发送越区切换开始通知之前,编码后图像数据1的第7-14帧的数据优先被接收,而在发送了越区切换结束通知之后,编码后图像数据1的第25-30帧的数据优先被接收。
在图像数据分发设备101中,优先级和/或功率控制被设置为使得在从接收越区切换开始通知到接收越区切换结束通知之间的间隔中,编码后图像数据1和2都在图像数据接收设备107中被接收。因此,在发送了越区切换开始通知之后,对于编码后图像数据1降低从第15帧开始的优先级,而对于编码后图像数据2从第9帧开始设置正常优先级,由此从编码后图像数据1的第15帧开始以及从编码后图像数据2的第9帧开始,编码后图像数据的这两个集合都在图像数据接收设备107中被接收。
编码后图像数据1的第16-20帧以及编码后图像数据2的第10-14帧之间的间隔是越区切换间隔,并且在该越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备107中被接收。因此,在该越区切换间隔期间,对于编码后图像数据1,第16帧到第20帧的数据丢失,而对于编码后图像数据2,第10帧到第14帧的数据丢失。
在越区切换间隔结束之后并且在越区切换结束通知之前,从编码后图像数据1的第21帧开始并且从编码后图像数据2的第15帧开始,数据在图像数据接收设备107中被顺序接收。这样一来,在从越区切换开始通知到越区切换结束通知之间的间隔期间,编码后图像数据1的第15帧和第21-24帧的数据以及编码后图像数据2的第9帧和第15-18帧的数据都在图像数据接收设备107中被接收。然后,从已经接收到的编码后图像数据1的第21帧到第24帧和编码后图像数据2的第15帧到第18帧中执行图像数据的重建。因此,编码后图像数据1的在越区切换间隔期间丢失的第16帧到第20帧中,丢失的第16帧到第18帧被补偿。
工作示例2图3示出了作为本发明第二工作示例的图像数据通信系统的示例性配置。在该图像数据通信系统中,图像数据分发设备301和图像数据接收设备307被连接,以便允许它们通过传输线路306彼此通信,在该传输线路306中IP网络被构建在无线电物理层上。
图像数据分发设备301使用UDP/IP将编码后的图像数据分发到图像数据接收设备307,并且图像数据分发设备301具有如下配置其包括接收状态报告接收器302、图像数据存储/生成单元303和编码后图像数据发送器304和305。图像数据存储/生成单元303和编码后图像数据发送器304与305与图1所示的图像数据存储/生成单元103和编码后图像数据发送器104与105基本相同。
接收状态报告接收器302基于来自图像数据接收设备307的接收状态报告来确定图像数据接收设备307中越区切换的开始和结束。另外,接收状态报告接收器302将无线电传输线路上的路由优先级和/或功率控制设置为使得在正常操作期间在图像数据接收设备307中优先接收编码后图像数据1,并且将无线电传输线路上的路由优先级和/或功率控制设置为使得在越区切换时,即在从越区切换开始到结束之间的间隔期间,编码后图像数据1和2都在图像数据接收设备307中被接收。在这种设置无线电传输线路上的路由优先级和功率控制的过程中可以应用已知方法。
图像数据接收设备307是连接到无线电IP网络的客户终端,并且具有以下配置其包括接收状态报告发送器308、编码后图像数据接收器309和310、编码后数据缓冲/重建单元311和解码器312。编码后数据缓冲/重建单元311和解码器312与图1所示的编码后数据缓冲/重建单元111和解码器112基本相同。
编码后图像数据接收器309接收从编码后图像数据发送器304发送的编码后图像数据1,而编码后图像数据接收器310接收从编码后图像数据发送器305发送的编码后图像数据2。由编码后图像数据接收器309和310接收到的编码后图像数据1和2被提供到编码后数据缓冲/重建单元311。
接收状态报告发送器308为分别接收自编码后图像数据接收器309和310的编码后图像数据1和2收集RTCP(RTP控制协议)的RR(接收器报告)或等同于这些报告的信息,并且这种信息是以基于RTCP规范的间距(spacing)、固定间距或依赖于过去信息的改变程度的间距(当改变较大时间距变短,当改变较小时间距变长)来收集的;从收集的信息中导出诸如丢失因子之类的统计量;并将该信息作为接收状态报告发送到图像数据分发设备301。
以下说明涉及本工作示例的图像数据通信系统的实际操作。
首先说明正常操作,即图像数据接收设备307在单个无线电区域(小区)内移动期间的操作。当编码后图像数据1和2在正常操作期间被发送时,接收状态报告接收器302将无线电传输线路上的路由优先级和/或功率控制设置为使得在图像数据接收设备307中优先接收编码后图像数据1。通过这种设置,当传输线路306的资源不够时,编码后图像数据1在图像数据接收设备307中优先到达,而编码后图像数据2在传输线路306上被丢弃。这样一来,抑制了由于过量流量所引起的传输线路306上的溢出。
在图像数据接收设备307中,至少编码后图像数据1在编码后图像数据接收器309中被接收。这些接收到的编码后图像数据1被暂时存储在编码后数据缓冲/重建单元311中,随后被提供到解码器312,并且编码后数据在解码器312处经历解码。
接下来的说明涉及在越区切换时的操作,即当图像数据接收设备307在接收编码后图像数据的同时从当前无线电区域移动到另一相邻无线电区域时的操作。
随着到当前无线电区域的基站的距离增大,编码后图像数据1在图像数据接收设备307中的接收状态恶化,并且丢失因子增大。当丢失因子增大时,作为来自接收状态报告发送器308的接收状态报告的编码后图像数据1的丢失因子的统计值超过指定值。
当编码后图像数据1的丢失因子的统计值超过指定值时,图像数据分发设备301中的接收状态报告接收器302确定越区切换开始,并将无线电传输线路上的路由优先级和/或功率控制设置为使得编码后图像数据1和2都在图像数据接收设备307中被接收。更具体而言,接收状态报告接收器302执行设置,以降低编码后图像数据1在传输线路上的路由优先级和/或传输功率,并提高编码后图像数据2在传输线路上的路由优先级和/或传输功率,由此在越区切换开始之后,具有指定时间差的相同的编码后图像数据1和2都在图像数据接收设备307中被接收。
随着到当前无线电区域的基站的距离的进一步增大,编码后图像数据1和2在图像数据接收设备307中的接收状态进一步恶化,直到接收变为不可能。在编码后图像数据1和2的接收变为不可能的时间点上越区切换间隔开始。随着图像数据接收设备307接近作为移动目的地的另一无线电区域中的基站,编码后图像数据1和2在图像数据接收设备307中的接收状态逐渐改善,最终使得能够接收编码后图像数据1和2。编码后图像数据1和2的接收变为可能的时间点是越区切换间隔的结束点。在越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备307中被接收并且数据丢失。
当编码后图像数据1和2的接收变为可能时,作为来自接收状态报告发送器308的接收状态报告的编码后图像数据1和2的丢失因子的统计值下降到指定值以下。在图像数据分发设备301中,接收状态报告接收器302在从统计值下降到指定值之下的时刻起经过指定时间间隔之后,确定越区切换结束,并且使无线电传输线路上的路由优先级和/或功率控制返回正常设置,以使编码后图像数据1在图像数据接收设备307中被优先接收。
在越区切换间隔结束之后的指定间隔期间,编码后图像数据1和2都在图像数据接收设备307中被接收。在该指定间隔期间接收到的编码后图像数据2包含了编码后图像数据1的在越区切换间隔期间丢失的数据的全部或部分。编码后数据缓冲/重建单元311从接收到的编码后图像数据2中选择与编码后图像数据1的丢失数据相对应的数据,并对选出的数据和接收到的编码后图像数据1正确排序,以重建图像数据的一个集合。利用该重建,编码后图像数据1的丢失数据的全部或部分被补偿。以这种方式重建的图像数据被提供到解码器312并在解码器312处被解码。
在上述指定间隔之后,执行与图像数据接收设备中的上述正常操作相同的操作。
图4示出了在上述越区切换时图像数据的重建的实际示例。第7帧、第8帧、...、第30帧的数据作为编码后图像数据1按顺序被发送,第1帧、第2帧、...、第24帧的数据作为编码后图像数据2按顺序被发送,在编码后图像数据1和2之间存在6帧的时间差。在编码后图像数据1中,第7-14帧和第27-30帧(如粗体字所示的帧)是被设置为高优先级的部分,而第15-26帧(如细体字所示的帧)是优先级被设置为较低的部分。在编码后图像数据2中,第1-8帧和第21-24帧(如小字符所示的部分)是被设置为低优先级的帧,而第9-20帧(如带下划线的字符所示的帧)是被设置为正常优先级的部分。
在图4的示例中,图像数据接收设备307每隔6帧向图像数据分发设备301发送接收状态报告。图像数据接收设备301在接收编码后图像数据1的第14帧时确定越区切换开始,并在接收编码后图像数据1的第26帧时确定越区切换结束。在图像数据接收设备307中,在越区切换开始之前,编码后图像数据1的第7-14帧的数据优先被接收,在越区切换结束之后,编码后图像数据1的第27-30帧的数据优先被接收。
在从越区切换开始起到越区切换结束之间的间隔期间,优先级和/或功率控制的设置被执行,以使编码后图像数据1和2都在图像数据接收设备307中被接收。因此,在越区切换开始之后,对于编码后图像数据1从第15帧开始降低优先级,而对于编码后图像数据2从第9帧开始优先级为正常。这样一来,从编码后图像数据1的第15帧开始以及从编码后图像数据2的第9帧开始,图像数据的两个集合都在图像数据接收设备307中被接收。
编码后图像数据1的第16帧到第20帧(编码后图像数据2的第10帧到第14帧)的间隔处于越区切换间隔内,并且在此越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备307中被接收。因此,在此越区切换间隔期间,编码后图像数据1的第16帧到第20帧的数据丢失,而编码后图像数据2的第10帧到第14帧的数据丢失。
在越区切换间隔结束之后直到越区切换结束之间的间隔期间,从编码后图像数据1的第21帧以及从编码后图像数据2的第15帧开始,编码后图像数据1和2在图像数据接收设备307中被顺序接收。这样一来,在从越区切换开始到结束之间的间隔期间,编码后图像数据1的第15帧和第21-26帧的数据和编码后图像数据2的第9帧和第15-20帧的数据都在图像数据接收设备307中被接收。然后从已经接收到的编码后图像数据1的第21-26帧以及编码后图像数据2的第15-20帧中执行图像数据的重建,由此编码后图像数据1的在越区切换间隔期间丢失的第16-20帧被编码后图像数据2的第16-20帧所补偿。
工作示例3本工作示例的图像数据通信系统具有与图1的系统相同的配置,但是有部分操作不同。更具体而言,本工作示例的操作与图1的系统的不同之处在于,在图像数据分发设备101中,编码后图像数据2在控制信息处理器102的控制下只在越区切换时从编码后图像数据发送器105发送。其他操作都与图1的系统的操作相同。
以下说明涉及本工作示例的图像数据通信系统的实际操作。
通常,在图像数据分发设备101中,编码后图像数据1从编码后图像数据发送器104中被发送,但是编码后图像数据2没有从编码后图像数据发送器105中被发送。在图像数据接收设备107中,只有编码后图像数据1在编码后图像数据接收器109中被接收。这些接收到的编码后图像数据1被暂时存储在编码后数据缓冲/重建单元111中,随后被提供到解码器112,并且数据在解码器112处经历解码过程。
以下说明涉及越区切换时的操作。
在图像数据接收设备107中,随着到当前无线电区域的基站的距离增大,编码后图像数据1的接收电平下降。当从编码后图像数据接收器109提供的编码后图像数据1的接收电平下降到指定电平以下时,控制信息处理器108向图像数据分发设备101发送越区切换开始通知。取代该越区切换开始通知或与该越区切换开始通知一起,控制信息处理器108可以向图像数据分发设备101提交请求,以使编码后图像数据1被切换到具有低比特率的编码后图像数据,并且编码后图像数据2的分发开始。在此情况下,控制信息处理器108可以提交对于重新设置传输线路106上的优先级路由和/或传输线路106的无线电传输线路上的功率控制的请求。
在图像数据分发设备101中,在接收到越区切换开始通知(和/或对于改变到低比特率并开始分发编码后图像数据2的请求)之后,控制信息处理器102将从编码后图像数据发送器104发送的编码后图像数据1切换到具有较低比特率的编码后图像数据,并且致使编码后图像数据发送器105发送编码后图像数据2。这时,控制信息处理器102还可以重新设置传输线路106上的优先级路由或传输线路106的无线电传输线路上的功率控制,以使编码后图像数据1和2都在图像数据接收设备107中被接收。
随着到当前无线电区域的基站的距离进一步增大,编码后图像数据1和2在图像数据接收设备107中的接收电平进一步下降,直到接收最终丢失。在编码后图像数据1和2的接收变为不可能的时间点上越区切换间隔开始。随着图像数据接收设备107接近作为移动目的地的另一无线电区域中的基站,编码后图像数据1和2在图像数据接收设备107中的接收电平逐渐增大,直到编码后图像数据1和2的接收最终变为可能。编码后图像数据1和2的接收变为可能的这个时间点是越区切换间隔的结束点。在越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备107中被接收,并且因此数据丢失。
当编码后图像数据1和2的接收变为可能,并且编码后图像数据1和2的接收电平超过指定电平时,图像数据接收设备107中的控制信息处理器108在从编码后图像数据1和2的接收电平都超过指定电平的时间点起经过指定时间间隔之后,向图像数据分发设备101发送越区切换结束通知。取代该越区切换结束通知或者与该越区切换结束通知一起,控制信息处理器108还可以向图像数据分发设备101提交对于中止编码后图像数据2的分发并切换到具有编码后图像数据1的正常比特率的编码后图像数据的请求。另外,如果在越区切换开始时改变了传输线路106上的路由优先级和/或无线电传输线路上的传输功率控制,控制信息处理器108则向图像数据分发设备101提交请求,以使这些设置返回到正常操作期间的原始状态。
在完成越区切换间隔之后的指定间隔期间,编码后图像数据1和2都在图像数据接收设备107中被接收。在该指定间隔期间接收到的编码后图像数据2包括编码后图像数据1的在越区切换间隔期间丢失的数据的全部或部分。编码后数据缓冲/重建单元111从已经接收到的编码后图像数据2中选择与编码后图像数据1的丢失数据相对应的数据,并且对该选出的数据和已经接收到的编码后图像数据1正确排序,以重建图像数据的一个集合。通过该重建,编码后图像数据1的丢失数据的全部或部分被补偿。以这种方式重建的图像数据随后被提供到解码器112,并在解码器112处经历解码。
在上述指定间隔之后,越区切换结束通知(和/或对于改变到正常比特率和中止分发编码后图像数据2的请求)在图像数据分发设备101中被接收。然后,控制信息处理器102将从编码后图像数据发送器104发送的具有低比特率的编码后图像数据1切换到具有正常比特率的编码后图像数据,并且还中止来自编码后图像数据发送器104的编码后图像数据2的分发,由此与上述正常操作相同的操作被执行。
图5示出了在上述越区切换时图像数据的重建的实际示例。第7帧、第8帧、...、第30帧的数据作为编码后图像数据1按顺序被发送,并且在越区切换时,第9帧、第10帧、...、第22帧的数据作为编码后图像数据2与编码后图像数据1一起按顺序被发送。在这些编码后图像数据1和2之间存在6帧的时间差。在编码后图像数据1中,第7-14帧和第25-30帧(如粗体字所示的部分)被设置为以正常比特率被发送;而第15-24帧(如细体字所示的部分)是被设置为以低比特率发送的部分。在编码后图像数据2中,第9-22帧(如细体字所示的部分)是被设置为以低比特率发送的部分。
在图5的示例中,图像数据接收设备107在接收编码后图像数据1的第14帧时向图像数据分发设备101发送越区切换开始通知,和/或对于改变到低比特率并开始分发编码后图像数据2的请求(在下文中简称为“越区切换开始通知/请求”),并且在接收编码后图像数据1的第24帧时,向图像数据分发设备101发送越区切换结束通知,和/或对于改变到正常比特率并中止分发编码后图像数据2的请求(在下文中简称为“越区切换结束通知/请求”)。
在图像数据接收设备107中,编码后图像数据1的第7-14帧的数据在发送越区切换开始通知/请求之前被接收,并且编码后图像数据1的第29-30帧的数据在发送越区切换结束通知/请求之后被接收。
在从在图像数据分发设备101中接收到越区切换开始通知/请求到接收到越区切换结束通知/请求之间的间隔中,从编码后图像数据1的第15帧开始以低比特率顺序执行发送,并且从编码后图像数据2的第9帧开始顺序执行发送。因此,从编码后图像数据1的第15帧以及从编码后图像数据2的第9帧开始,在图像数据接收设备107中接收图像数据的这两个集合。
从编码后图像数据1的第16帧到第20帧以及从编码后图像数据2的第10帧到第14帧的间隔是越区切换间隔,并且在该越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备107中被接收。因此,在此越区切换间隔期间,对于编码后图像数据1,从第16帧到第20帧的数据丢失,对于编码后图像数据2,从第10帧到第14帧的数据丢失。
在越区切换间隔结束之后并在越区切换结束通知之前的间隔期间,从编码后图像数据1的第21帧开始以及从编码后图像数据2的第15帧开始的数据在图像数据接收设备107中被顺序接收。因此,在从越区切换开始通知到越区切换结束通知之间的间隔期间,编码后图像数据1的第15帧和第21-28帧的数据和编码后图像数据2的第9帧和第15-22帧的数据都在图像数据接收设备107中被接收。然后,从这些已经接收到的编码后图像数据中选出第15-28帧,并将这些帧排列为正确顺序以重建图像数据。这样一来,编码后图像数据1的在越区切换间隔期间丢失的第16帧到第20帧被补偿。
工作示例4本工作示例的图像数据通信系统具有与图3的系统相同的配置,但是有部分操作不同。更具体而言,本工作示例的操作与图3的系统的不同之处在于,在图像数据分发设备301中,在接收状态报告接收器302在控制下,编码后图像数据2只在越区切换时从编码后图像数据发送器305中被发送。其他操作都与图3的系统的操作基本相同。
以下说明涉及本工作示例的图像数据通信系统的操作的实际示例。
在正常操作期间,编码后图像数据1从图像数据分发设备301中的编码后图像数据发送器304中被发送,但是编码后图像数据2不从编码后图像数据发送器305中被发送。在图像数据接收设备307的编码后图像数据接收器309中只有编码后图像数据1被接收。这些接收到的编码后图像数据1被暂时存储在编码后数据缓冲/重建单元311中,随后被提供到解码器312,并在解码器312处被解码。
以下说明涉及在越区切换时的操作。
随着到当前无线电区域的基站的距离增大,编码后图像数据1在图像数据接收设备307中的接收状态恶化,并且丢失因子增大。当丢失因子到达高级别时,作为来自接收状态报告发送器308的接收状态报告的编码后图像数据1的丢失因子的统计值超过指定值。
当编码后图像数据1的丢失因子的统计值下降到指定值以下时,图像数据分发设备301中的接收状态报告接收器302确定越区切换开始,并将从编码后图像数据发送器304发送的编码后图像数据1切换到具有较低比特率的编码后图像数据,并致使编码后图像数据2从编码后图像数据发送器305中被发送。这时,接收状态报告接收器302还可以对传输线路306上的优先级路由和/或传输线路306的无线电传输线路上的功率控制执行重新设置,以使编码后图像数据1和2都在图像数据接收设备307中被接收,由此在越区切换开始之后,具有指定时间差的相同的编码后图像数据1和2都在图像数据接收设备307中被接收。
随着到当前无线电区域的基站的距离进一步增大,编码后图像数据1和2在图像数据接收设备307中的接收状态进一步恶化,直到接收变为不可能。编码后图像数据1和2的接收变为不可能的时间点是越区切换间隔的开始点。另一方面,随着图像数据接收设备307接近作为移动目的地的另一无线电区域中的基站,编码后图像数据1和2在图像数据接收设备307中的接收状态逐渐改善,直到最终编码后图像数据1和2的接收变为可能。编码后图像数据1和2的接收变为可能的时间点是越区切换间隔的结束点。在越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备307中被接收,因此数据丢失。
当编码后图像数据1和2的接收变为可能时,作为来自接收状态报告发送器308的接收状态报告的编码后图像数据1和2的丢失因子的统计值下降到指定值以下。图像数据分发设备301中的接收状态报告接收器302在从该统计值下降到指定值以下的时刻起经过指定时间间隔之后确定越区切换结束,并且随后将正从编码后图像数据发送器304发送的编码后图像数据1从低比特率切换到正常比特率,并且中止从编码后图像数据发送器305发送编码后图像数据2。这时,如果在确定越区切换开始时已经改变了传输线路306上的路由优先级和/或无线电传输线路上的传输功率控制,则接收状态报告发送器308将这些设置返回到正常操作的状态(原始状态)。
在越区切换间隔结束之后的指定间隔期间,编码后图像数据1和2都在图像数据接收设备307中被接收。在该指定间隔期间接收到的编码后图像数据2包含编码后图像数据1的在越区切换间隔期间丢失的数据的全部或部分。编码后数据缓冲/重建单元311从接收到的编码后图像数据2中选择与编码后图像数据1的丢失数据相对应的数据,并正确排列选出的数据和已接收到的编码后图像数据1,以重建图像数据的一个集合。通过该重建,编码后图像数据1的丢失数据的全部或部分被补偿。已利用该方式重建的图像数据被提供到解码器312,并在解码器312处被解码。
在上述指定间隔之后,执行与上述正常操作相同的操作。
图6示出了在上述越区切换时图像数据的重建的实际示例。作为编码后图像数据1,第7帧、第8帧、...、第30帧的数据被顺序发送。在越区切换时,第7帧、第8帧、...、第22帧的数据作为编码后图像数据2与编码后图像数据1一起被顺序发送,这些编码后图像数据1和2之间存在6帧的时间差。在编码后图像数据1中,第7-12帧和第29-30帧(以粗体字指示的部分)被设置为以正常比特率发送,而第13-28帧(以细体字指示的部分)是被设置为以较低比特率发送的部分。在编码后图像数据2中,第7-22帧(以细体字指示的部分)是被设置为以低比特率发送的部分。
在图6的示例中,图像数据接收设备307每隔6帧向图像数据分发设备301发送接收状态报告。图像数据分发设备301在接收编码后图像数据1的第12帧时确定越区切换开始,并在接收编码后图像数据1的第28帧时确定越区切换结束。在图像数据接收设备307中,编码后图像数据1的第7-12帧的数据在越区切换开始之前以正常比特率被接收,并且编码后图像数据1的第29-30帧的数据在越区切换结束之后以正常比特率被接收。
在从越区切换开始到结束的间隔期间,执行控制以使编码后图像数据1和2都在图像数据接收设备307中以低比特率被接收。从而,在越区切换开始之后,数据从编码后图像数据1的第13帧开始以低比特率被发送,并且数据从编码后图像数据2的第7帧开始以低比特率被发送。这样一来,从编码后图像数据1的第13帧和编码后图像数据2的第7帧开始,这两种图像数据都在图像数据接收设备307中被接收。
编码后图像数据1的第16-20帧(编码后图像数据2的第10-14帧)的间隔处于越区切换间隔内,并且在该越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备307中被接收。因此,在此越区切换间隔期间,编码后图像数据1的第16-20帧的数据丢失,并且编码后图像数据2的第10-14帧的数据丢失。
在越区切换间隔结束之后直到确定越区切换结束的间隔中,从编码后图像数据1的第21帧和从编码后图像数据2的第15帧开始,数据以低比特率在图像数据接收设备307中被顺序接收。这样一来,在从越区切换开始到结束的间隔期间,编码后图像数据1的第13-15帧和第21-28帧的数据和编码后图像数据2的第7-9帧和第15-22帧的数据都在图像数据接收设备307中被接收。然后,通过从这些已经接收到的编码后图像数据中选择第13-28帧,并随后以正确顺序排列数据,从而实现了图像数据的重建。这样一来,编码后图像数据1的在越区切换间隔期间丢失的第16-20帧被补偿。
工作示例5图7示出了作为本发明第五工作示例的图像数据通信系统的示意性配置。在该图像数据通信系统中,图像数据分发设备701和图像数据接收设备707被连接,以便允许它们通过无线电网络控制设备705和传输线路106来彼此通信,在该传输线路106中IP网络被构建在无线电物理层上。
图像数据分发设备701使用UDP/IP向图像数据接收设备707分发编码后的图像数据,并且图像数据分发设备701具有如下结构,其包括图像数据存储/生成单元702和编码后图像数据发送器703和704。图像数据存储/生成单元702和编码后图像数据发送器703和704与图1所示的图像数据存储/生成单元103和编码后图像数据发送器104和105基本相同。
无线电网络控制设备705基于线路状态来监控图像数据接收设备707中的越区切换操作,所述线路状态例如是在图像数据接收设备707中接收到的编码后图像数据在传输线路706的无线电传输线路上的误比特率。另外,在正常操作期间,无线电网络控制设备705以较高优先级和/或功率发送从编码后图像数据发送器703发送的编码后图像数据1,以使编码后图像数据1在图像数据接收设备707中被优先接收,此外,对于从编码后图像数据发送器704发送的编码后图像数据2,或者不发送编码后图像数据2,或者以较低优先级和/或较低功率来发送编码后图像数据2。另外,在越区切换时,无线电网络控制设备705降低编码后图像数据1的优先级和/或功率,并且或者致使编码后图像数据2被发送,或者提高其优先级和/或功率,从而使从编码后图像数据发送器703和704发送的编码后图像数据1和2都在图像数据接收设备707中被接收。
图像数据接收设备707是连接到无线电IP网络的客户终端,并且具有如下配置,其包括编码后图像数据接收器708和709、编码后数据缓冲/重建单元710和解码器711。这些编码后图像数据接收器708和709、编码后数据缓冲/重建单元710和解码器711分别与图1所示的编码后图像数据接收器109和110、编码后数据缓冲/重建单元111和解码器112基本相同。
以下说明涉及本工作示例的图像数据通信系统的实际操作。
首先说明正常操作,即当图像数据接收设备707在特定无线电区域(小区)内移动时的操作。在图像数据分发设备701中,编码后图像数据发送器703发送编码后图像数据1,并且编码后图像数据发送器704发送与编码后图像数据1相同的编码后图像数据2,该编码后图像数据2相对于编码后图像数据1的发送被延迟了指定的时间间隔。
无线电网络控制设备705以较高优先级和/或功率发送从编码后图像数据发送器703发送来的编码后图像数据1,并且或者不发送从编码后图像数据发送器704发送来的编码后图像数据2,或者以较低优先级和/或功率发送编码后图像数据2。这样一来,抑制了由于过量流量所导致的传输线路706的溢出。
在图像数据接收设备707中,至少编码后图像数据1在编码后图像数据接收器708中被接收。这些接收到的编码后图像数据1被暂时存储在编码后数据缓冲/重建单元710中,随后被提供到解码器711,并在解码器711处经历解码过程。
下面的说明涉及在越区切换时的操作,即当图像数据接收设备707在接收编码后图像数据1的同时从当前无线电区域移动到另一相邻无线电区域时的操作。
随着到当前无线电区域的基站的距离增大,在图像数据接收设备707中接收到的编码后图像数据在传输线路706的无线电传输线路上的误比特率增大。当误比特率超过指定值时,无线电网络控制设备705确定越区切换开始,并降低编码后图像数据1的优先级和/或功率,并且或者致使编码后图像数据2被发送,或者提高编码后图像数据2的优先级和/或功率,以使从编码后图像数据发送器703和704发送的编码后图像数据1和2都在图像数据接收设备707中被接收。这样一来,编码后图像数据1和2都在图像数据接收设备707中被接收。
随着到当前无线电区域的基站的距离进一步增大,编码后图像数据1和2在图像数据接收设备707中的接收状态进一步恶化,直到接收最终变为不可能。编码后图像数据1和2的接收变为不可能的这个时间点是越区切换间隔的开始点。另一方面,随着图像数据接收设备707接近作为移动目的地的另一无线电区域内的基站,编码后图像数据1和2在图像数据接收设备707中的接收状态逐渐改善,直到编码后图像数据1和2的接收变为可能。编码后图像数据1和2的接收变为可能的这个时间点是越区切换间隔的结束点。在越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备707中被接收,并因此数据丢失。
当编码后图像数据1和2的接收变为可能时,在图像数据接收设备707中接收到的编码后图像数据在传输线路706的无线电传输线路上的误比特率下降。在从误比特率下降到指定值以下的时刻起经过指定的时间间隔之后,无线电网络控制设备705确定越区切换结束并以较高优先级和/或较高功率发送从编码后图像数据发送器703发送的编码后图像数据1,并且或者防止从编码后图像数据发送器704发送的编码后图像数据2被发送,或者以较低优先级和/或较低功率发送编码后图像数据2。
在越区切换结束之后的指定间隔期间,编码后图像数据1和2都在图像数据接收设备707中被接收。在该指定间隔期间接收到的编码后图像数据2包含了编码后图像数据1的在越区切换间隔期间丢失的数据的全部或部分。编码后数据缓冲/重建单元710从已接收到的编码后图像数据2中选择与编码后图像数据1的丢失数据相对应的数据,并正确排列选出的数据和接收到的编码后图像数据1,以重建图像数据的一个集合。通过该重建,编码后图像数据1的丢失数据的全部或部分被补偿。这些重建后的图像数据随后被提供到解码器711,并在解码器711处被解码。
在上述指定间隔之后,执行与图像数据接收设备707中的上述正常操作相同的操作。
图8示出了在上述越区切换时图像数据的重建的实际示例。作为编码后图像数据1,第7帧、第8帧、...、第30帧的数据按此顺序被发送,作为编码后图像数据2,第1帧、第2帧、...、第24帧的数据按此顺序被发送,在编码后图像数据1和2的这些集合之间存在6帧的时间差。在编码后图像数据1中,第7-14帧和第27-30帧(如粗体字所示的部分)是被设置为高优先级的部分,而第15-26帧(如细体字所示的部分)是被设置为优先级较低的部分。在编码后图像数据2中,第1-8帧和第21-24帧(如小字符所示的部分)是被设置为低优先级的部分,而第9-20帧(如带下划线的字符所示的部分)是被设置为正常优先级的部分。
在图8的示例中,无线电网络控制设备705在图像数据接收设备707中接收到编码后图像数据1的第14帧时确定越区切换开始,并且在图像数据接收设备707中接收到编码后图像数据1的第26帧时确定越区切换结束。在图像数据接收设备707中,编码后图像数据1的第7-14帧的数据在越区切换开始之前被优先接收,并且编码后图像数据1的第27-30帧的数据在越区切换结束之后被优先接收。
在从越区切换开始到越区切换结束之间的间隔期间,优先级和/或功率受到控制,以使编码后图像数据1和2都在图像数据接收设备707中被接收。这样一来,在越区切换开始之后,编码后图像数据1从第15帧开始优先级变得较低,而编码后图像数据2从第9帧开始优先级变为正常,由此从编码后图像数据1的第15帧和编码后图像数据2的第9帧开始,这两种图像数据都在图像数据接收设备707中被接收。
从编码后图像数据1的第16帧到第20帧(从编码后图像数据2的第10帧到第14帧)之间的间隔在越区切换间隔内,并且在该越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备707中被接收。因此,在此越区切换间隔期间,编码后图像数据1的第16-20帧的数据丢失,而编码后图像数据2的第10-14帧的数据丢失。
在从越区切换间隔结束直到越区切换结束之间的间隔中,从编码后图像数据1的第21帧以及从编码后图像数据2的第15帧开始的图像数据在图像数据接收设备707中被顺序接收。因此,在从越区切换开始到结束之间的间隔期间,编码后图像数据1的第15帧和第21-26帧的数据以及编码后图像数据2的第9帧和第15-20帧的数据都在图像数据接收设备707中被接收。然后,从已经接收到的编码后图像数据1的第21-26帧以及编码后图像数据2的第15-20帧中执行图像数据的重建,由此在越区切换间隔期间丢失的编码后图像数据1的第16-20帧被编码后图像数据2的第16-20帧所补偿。
工作示例6图9示出了作为本发明的第六工作示例的图像数据通信系统的示意性配置。在此图像数据通信系统中,图像数据分发设备901和图像数据接收设备906被连接,以便允许通过传输线路905进行通信,在该传输线路905中IP网络被构建在无线电物理层上。
图像数据分发设备901使用UDP/IP向图像数据接收设备906分发编码后的图像数据,并且图像数据分发设备901具有如下结构,其包括图像数据存储/生成单元902和编码后图像数据发送器903和904。图像数据存储/生成单元902和编码后图像数据发送器903和904与图3所示的图像数据存储/生成单元303和编码后图像数据发送器304和305相同,但是在本工作示例中,编码后图像数据发送器903和904分别利用组播(广播)在不同的会话中分发编码后图像数据1和2。
传输线路905是如下网络其允许转发组播流量,并且支持用于控制加入/离开组播组的IGMP(因特网群组管理协议)或等同于IGMP的协议。
图像数据接收设备906是连接到无线电IP网络的客户终端,并且具有如下配置,其包括组播组加入/离开处理器907、编码后图像数据接收器908和909、编码后数据缓冲/重建单元910和解码器911。编码后图像数据接收器908和909、编码后数据缓冲/重建单元910和解码器911与图3所示的编码后图像数据接收器309和310、编码后数据缓冲/重建单元311和解码器312基本相同。
在正常操作期间,组播组加入/离开处理器907加入由编码后图像数据发送器903分发的编码后图像数据1的组播组,并基于编码后图像数据1的接收状态确定越区切换开始。在确定越区切换开始之后,组播组加入/离开处理器907还加入由编码后图像数据发送器904分发的编码后图像数据2的组播组,并根据编码后图像数据1和2的接收状态确定越区切换间隔的开始和结束。组播组加入/离开处理器907还在从越区切换间隔结束起经过指定时间间隔之后,确定越区切换结束,并在此确定之后,离开由编码后图像数据发送器904分发的编码后图像数据2的组播组。
以下说明涉及本工作示例的图像数据通信系统的实际操作。
首先说明正常操作,即当图像数据接收设备906在特定无线电区域(小区)内移动时的操作。在正常操作期间,组播组加入/离开处理器907已经加入由编码后图像数据发送器903分发的编码后图像数据1的组播组,并因此编码后图像数据1在图像数据接收设备906中的编码后图像数据接收器908中被接收。这些已经接收到的编码后图像数据1被暂时存储在编码后数据缓冲/重建单元910中,随后被提供到解码器911,并在解码器911处经历解码。
以下说明涉及在越区切换时的操作,即当图像数据接收设备906在接收编码后图像数据1的同时从当前无线电区域移动到另一相邻无线电区域时的操作。
随着到当前无线电区域的基站的距离增大,编码后图像数据1在图像数据接收设备906中的接收状态恶化,并且丢失因子增大。当该丢失因子超过指定值时,组播组加入/离开处理器907确定越区切换开始,并加入由编码后图像数据发送器904分发的编码后图像数据2的组播组。因此,在越区切换开始之后,具有指定时间差的相同的编码后图像数据1和2的集合都在图像数据接收设备906中被接收。
随着到当前无线电区域的基站的距离进一步增大,编码后图像数据1和2在图像数据接收设备906中的接收状态进一步恶化,并且接收最终变为不可能。编码后图像数据1和2的接收变为不可能的这个时间点是越区切换间隔的开始点。另一方面,随着图像数据接收设备906接近作为移动目的地的另一无线电区域中的基站,编码后图像数据1和2在图像数据接收设备906中的接收状态逐渐改善,最终编码后图像数据1和2的接收变为可能。编码后图像数据1的2的接收变为可能的这个时间点是越区切换间隔的结束点。在越区切换间隔期间,编码后图像数据1和2都无法在图像数据接收设备906中被接收,因此数据丢失。
在越区切换间隔之后的指定间隔期间,组播组加入/离开处理器907属于由编码后图像数据发送器904分发的编码后图像数据1和2中的每一个的组播组,因此编码后图像数据1和2都在图像数据接收设备906中被接收。在此指定间隔期间接收到的编码后图像数据2包含编码后图像数据1的在越区切换间隔期间丢失的数据的全部或部分。编码后数据缓冲/重建单元910从已接收到的编码后图像数据2中选择与编码后图像数据1的丢失数据相对应的数据,并正确排列这些选出的数据和接收到的编码后图像数据1,以重建图像数据的一个集合。通过这种重建,编码后图像数据1的丢失数据的全部或部分被补偿。以这种方式重建的图像数据随后被提供到解码器911,并在解码器911处被解码。
在上述指定间隔之后,组播组加入/离开处理器907确定越区切换结束,并离开由编码后图像数据发送器904分发的编码后图像数据2的组播组。因此,编码后图像数据2在图像数据接收设备906中的接收被中止,并且随后执行与上述正常操作相同的操作。
根据上述工作示例1-6中的每一个的图像数据通信系统,在越区切换间隔期间丢失的数据的全部或部分可以被补偿,由此可以提供更高的图像质量。
另外,当存在剩余网络资源时,图像数据接收设备可以接收编码后图像数据1和2两者,由此,即使编码后图像数据的一个集合会丢失,该丢失也可以被编码后图像数据的另一集合所补偿。因此,对于除了越区切换间隔之外的情况,可以获得更高的图像质量稳定性。此外,利用广播方法的方法可以被采用。例如,编码后图像数据1和2可以始终被接收,或者只有编码后图像数据1可以在正常操作期间被接收,然后分别在越区切换之前和之后执行编码后图像数据2的接收开始和接收中止。这些方法不需要加入和离开组播组的过程。虽然在这些示例中网络资源的消耗可能很大,但是可以消除对于组播组加入/离开处理器907的需求,并且可以简化处理。
上述工作示例中的每一个示例的图像数据通信系统都仅仅是示例。本发明并不局限于这些工作示例中的每一个示例的图中所示出的形式,并且其配置可以被适当地修改。例如,重建是通过从具有指定时间差的相同编码后图像数据的两个集合中选择必需的数据来实现的,但是,在该重建中使用的数据也可以是具有指定时间差的相同编码后图像数据的三个或更多个集合。在这种情况下,使用具有指定时间差的相同编码后图像数据的三个或更多个集合的重建可以更可靠地补偿丢失的帧。
另外,可以采用具有多个传输线路的配置,并且编码后图像数据1和2中的每一个可以通过不同的传输线路来传输。
此外,虽然在工作示例的说明中是编码后图像数据被发送,但是也可以仅仅分发已存储的运动图片图像数据以代替这些编码后图像数据,或者发送通过实时地转换已有图像数据而生成的运动图片图像数据。
在上述工作示例中的每个示例的图像数据通信系统中,图像数据分发设备和图像数据通信设备例如分别对应于服务器和客户终端;并且其中任一设备都是利用具有用于存储程序的存储器设备的计算机系统来实现的。在上述工作示例中的每个示例中所描述的图像数据分发设备和图像数据通信设备中的所有操作都是利用致使计算机执行与这些操作相关的进程的程序来实现的。
另外,上述工作示例中的每个示例的编码后图像数据的帧可以是如下的图像数据分组,在这种分组中,编码后图像数据的每个集合的相同帧的相同点被编码。
最后,虽然已经根据上述实施例描述了本发明,但是本发明并不局限于上述实施例的形式,并且当然可以在如每个权利要求所述的本发明的范围内,进行对本领域技术人员来说可能发生的各种修改和变换。
权利要求
1.一种图像数据通信系统,包括图像数据分发设备,用于顺序分发具有指定时间差的相同的运动图片图像数据的多个集合;以及图像数据接收设备,用于当在多个无线电区域之间移动的同时,接收从所述图像数据分发设备分发的运动图片图像数据;其中所述图像数据接收设备在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述图像数据分发设备分发的所述具有指定时间差的相同的运动图片图像数据的多个集合,并从接收到的运动图片图像数据中选择所需数据,以重建运动图片图像数据的一个集合。
2.如权利要求1所述的图像数据通信系统,其中所述相同的运动图片图像数据的多个集合是编码后图像数据的多个集合,在所述编码后图像数据中,相同的图像数据已由相同的编码方法所编码。
3.如权利要求2所述的图像数据通信系统,其中所述图像数据分发设备包括编码后图像数据发送装置,用于至少在所述指定间隔中,在传输线路上顺序发送所述具有指定时间差的相同的编码后图像数据的多个集合,并且在该发送期间,向所述相同的编码后图像数据信息的多个集合中的每个集合赋予所述重建所需的信息;并且所述图像数据接收设备包括编码后图像数据接收装置,用于通过所述传输线路接收来自所述编码后图像数据发送装置的所述具有所述指定时间差的相同的编码后图像数据的多个集合;以及重建装置,用于参考已赋予编码后图像数据的所述重建所需的信息来重建在所述编码后图像数据接收装置中已经接收到的所述具有所述指定时间差的相同的编码后图像数据的多个集合,作为编码后图像数据的一个集合。
4.如权利要求3所述的图像数据通信系统,其中所述图像数据分发设备还包括控制装置,用于对于从所述编码后图像数据发送装置发送的所述具有指定时间差的相同的编码后图像数据的多个集合,执行所述传输线路上的指定控制设置;并且所述控制装置执行所述指定控制设置,以使得在除了所述指定间隔之外的正常操作期间,在所述具有指定时间差的相同的编码后图像数据的多个集合中,至少编码后图像数据的指定集合在所述图像数据接收设备中被优先接收;并且设置所述指定控制,以使得在所述指定间隔期间,所述具有指定时间差的相同的编码后图像数据的多个集合都在所述图像数据接收设备中被接收。
5.如权利要求4所述的图像数据通信系统,其中所述图像数据接收设备还包括控制信息处理装置,用于基于所述编码后图像数据接收装置中的编码后图像数据的接收状态来确定所述越区切换的开始和结束;所述控制信息处理装置既在所述越区切换开始时向所述控制装置发送开始通知,还在从所述越区切换结束时起经过指定的时间间隔之后向所述控制装置发送结束通知;并且所述控制装置在以从接收到所述开始通知到接收到所述结束通知之间的间隔作为所述指定间隔的情况下,执行所述指定控制设置。
6.如权利要求4所述的图像数据通信系统,其中所述图像数据接收设备还包括控制信息处理装置,用于基于所述编码后图像数据接收装置中的编码后图像数据的接收状态来确定所述越区切换的开始;所述控制信息处理装置在所述越区切换开始时向所述控制装置发送对于改变所述指定控制设置的第一请求,并且在从所述越区切换结束时起经过指定的时间间隔之后向所述控制装置发送对于改变所述指定控制设置的第二请求;并且所述控制装置在以从接收到所述第一请求到接收到所述第二请求之间的间隔作为所述指定间隔的情况下,执行所述指定控制设置。
7.如权利要求4所述的图像数据通信系统,其中所述图像数据接收设备还包括接收状态报告装置,用于以指定的间隔将所述编码后图像数据接收装置中的编码后图像数据的接收状态报告给所述图像数据分发设备;并且所述控制装置基于来自所述接收状态报告装置的接收状态报告来确定所述越区切换的开始和结束,并且在以包括了所述越区切换间隔和从所述结束到经过指定的时间间隔之间的间隔在内的间隔作为所述指定间隔的情况下,执行所述指定控制设置。
8.如权利要求4到7中的任何一项所述的图像数据通信系统,其中所述指定控制设置是所述传输线路上的路由优先级控制。
9.如权利要求8所述的图像数据通信系统,其中在所述正常操作期间,所述控制装置将与所述具有指定时间差的相同的编码后图像数据的多个集合中的所述指定的编码后图像数据相关的所述路由优先级设置为高于其他编码后图像数据的路由优先级;并且在所述指定间隔期间,既将与所述指定的编码后图像数据相关的所述路由优先级设置为低于在所述正常操作期间的路由优先级,还将与所述其他编码后图像数据相关的所述路由优先级设置为高于在所述正常操作期间的路由优先级。
10.如权利要求4到7中的任何一项所述的图像数据通信系统,其中所述指定控制设置是在作为所述传输线路的一部分的无线电传输线路上的功率控制。
11.如权利要求10所述的图像数据通信系统,其中在所述正常操作期间,所述控制装置将在与所述具有指定时间差的相同的编码后图像数据的多个集合中的所述指定的编码后图像数据相关的所述无线电传输线路上的功率设置为高于针对其他编码后图像数据的功率,并且在所述指定间隔期间,既将在与所述指定的编码后图像数据相关的所述无线电传输线路上的功率设置为低于在所述正常操作期间的功率,还将在与所述其他编码后图像数据相关的所述无线电传输线路上的功率设置为高于在所述正常操作期间的功率。
12.如权利要求4到7中的任何一项所述的图像数据通信系统,其中所述指定控制设置是在所述传输线路上传输的编码后图像数据的比特率。
13.如权利要求12所述的图像数据通信系统,其中在所述正常操作期间,所述控制装置将与所述具有指定时间差的相同的编码后图像数据的多个集合中的所述指定的编码后图像数据相关的所述比特率设置为高于其他编码后图像数据的比特率;并且在所述指定间隔期间,既将与所述指定的编码后图像数据相关的所述比特率设置为低于在所述正常操作期间的比特率,还将与所述其他编码后图像数据相关的所述比特率设置为高于在所述正常操作期间的比特率。
14.如权利要求3所述的图像数据通信系统,还包括无线电网络监控设备,用于监控作为所述传输线路的一部分的无线电传输线路的状态;并且根据所述无线电传输线路的状态,对于从所述编码后图像数据发送装置发送的所述具有指定时间差的相同的编码后图像数据的多个集合执行所述传输线路上的指定控制设置;其中所述无线电网络监控设备在除了所述指定间隔之外的正常操作期间执行所述指定控制设置,以使得在所述具有指定时间差的相同的编码后图像数据的多个集合中,至少指定的编码后图像数据在所述图像数据接收设备中被优先接收;并且在所述指定间隔期间执行所述指定控制设置,以使得所述具有指定时间差的相同的编码后图像数据的多个集合在所述图像数据接收设备中被一起接收。
15.如权利要求14所述的图像数据通信系统,其中所述指定控制设置是所述传输线路上的路由优先级控制。
16.如权利要求15所述的图像数据通信系统,其中所述无线电网络监控设备在所述正常操作期间,将与所述具有指定时间差的相同的编码后图像数据的多个集合中的所述指定的编码后图像数据相关的所述路由优先级设置为高于其他编码后图像数据的路由优先级,并且在所述指定间隔期间,既将与所述指定的编码后图像数据相关的所述路由优先级设置为低于在所述正常操作期间的路由优先级,还将与所述其他编码后图像数据相关的所述路由优先级设置为高于在所述正常操作期间的路由优先级。
17.如权利要求14所述的图像数据通信系统,其中所述指定控制设置是所述传输线路的无线电传输线路上的功率控制。
18.如权利要求17所述的图像数据通信系统,其中所述无线电网络监控设备在所述正常操作期间,将在与所述具有指定时间差的相同的编码后图像数据的多个集合中的所述指定的编码后图像数据相关的所述无线电传输线路上的功率设置为高于针对其他编码后图像数据的功率;并且在所述指定间隔期间,既将在与所述指定的编码后图像数据相关的所述无线电传输线路上的功率设置为低于在所述正常操作期间的功率,还将在与所述其他编码后图像数据相关的所述无线电传输线路上的功率设置为高于在所述正常操作期间的功率。
19.如权利要求3所述的图像数据通信系统,其中所述编码后图像数据发送装置被配置为允许对在所述传输线路上传输的相同的编码后图像数据的多个集合中的每个集合的组播或广播分发;并且所述图像数据接收设备还包括接收装置,用于在除了所述指定间隔之外的正常操作期间,接收所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据的组播或广播流量,并且在所述指定间隔期间,接收所述具有指定时间差的相同的编码后图像数据的多个集合中的每个集合的组播或广播流量。
20.如权利要求3所述的图像数据通信系统,其中所述编码后图像数据发送装置被配置为允许对在所述传输线路上传输的所述相同的编码后图像数据的多个集合中的每个集合的组播分发;并且所述图像数据接收设备还包括组播组加入/离开装置,用于在除了所述指定间隔之外的正常操作期间,加入所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据的组播组;并且在所述指定间隔期间,加入所述具有指定时间差的相同的编码后图像数据的多个集合中的每个集合的组播组。
21.一种图像数据分发设备,该设备被连接,以便允许通过传输线路与在多个无线电区域之间移动的图像数据接收设备通信;所述图像数据分发设备包括编码后图像数据生成装置,用于生成相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像数据被编码;编码后图像数据发送装置,用于以指定的时间差在所述传输线路上顺序发送已经由所述编码后图像数据生成装置生成的相同的编码后图像数据的多个集合;以及控制装置,用于执行所述传输线路上的指定控制设置,以使得在发生于所述图像数据接收设备从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,从所述编码后图像数据发送装置发送的所述具有指定时间差的相同的编码后图像数据的多个集合在指定间隔中在所述图像数据接收设备中被接收。
22.如权利要求21所述的图像数据分发设备,其中所述指定控制设置是所述传输线路上的路由优先级控制。
23.如权利要求22所述的图像数据分发设备,其中所述控制装置在除了所述指定间隔之外的所述正常操作期间,将与所述具有指定时间差的相同的编码后图像数据的多个集合中的至少所述指定的编码后图像数据相关的所述路由优先级设置为高于其他编码后图像数据的路由优先级;并且在所述指定间隔期间,既将与所述指定的编码后图像数据相关的所述路由优先级设置为低于在所述正常操作期间的路由优先级,还将与所述其他编码后图像数据相关的所述路由优先级设置为高于在所述正常操作期间的路由优先级。
24.如权利要求21所述的图像数据分发设备,其中所述指定控制设置是在作为所述传输线路的一部分的无线电传输线路上的功率控制。
25.如权利要求24所述的图像数据分发设备,其中所述控制装置在除了所述指定间隔之外的所述正常操作期间,将在与所述具有指定时间差的相同的编码后图像数据的多个集合中的至少所述指定的编码后图像数据相关的所述无线电传输线路上的功率设置为高于针对其他编码后图像数据的功率,并且在所述指定间隔期间,既将在与所述指定的编码后图像数据相关的所述无线电传输线路上的功率设置为低于在所述正常操作期间的功率,还将在与所述其他编码后图像数据相关的所述无线电传输线路上的功率设置为高于在所述正常操作期间的功率。
26.如权利要求21所述的图像数据分发设备,其中所述指定控制设置是在所述传输线路上传输的编码后图像数据的比特率。
27.如权利要求26所述的图像数据分发设备,其中所述控制装置在除了所述指定间隔之外的所述正常操作期间,将与所述具有指定时间差的相同的编码后图像数据的多个集合中的至少所述指定的编码后图像数据相关的所述比特率设置为高于其他编码后图像数据的比特率;并且在所述指定间隔期间,既将与所述第一编码后图像数据相关的所述比特率设置为低于在所述正常操作期间的比特率,还将与所述其他编码后图像数据相关的所述比特率设置为高于在所述正常操作期间的比特率。
28.一种图像数据接收设备,该设备被连接,以便允许通过传输线路与图像数据分发设备通信,该图像数据分发设备以指定的时间差顺序分发相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像数据被编码;所述图像数据接收设备包括编码后图像数据接收装置,用于在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述图像数据分发设备分发的所述具有指定时间差的相同的编码后图像数据的多个集合;以及数据重建装置,用于从已经在所述指定间隔中接收到的所述具有指定时间差的相同的编码后图像数据的多个集合中选择所需数据,以重建编码后图像数据的一个集合。
29.如权利要求28所述的图像数据接收设备,其中所述图像数据分发设备执行对所述相同的编码后图像数据的多个集合中的每个集合的组播或广播分发;并且所述图像数据接收设备还包括如下装置,该装置用于在除了所述指定间隔之外的所述正常操作期间,接收所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据的组播或广播流量;并且在所述指定间隔期间,接收所述相同的编码后图像数据的多个集合中的每个集合的组播或广播流量。
30.如权利要求28所述的图像数据接收设备,其中所述图像数据分发设备执行对所述相同的编码后图像数据的多个集合中的每个集合的组播或广播分发;并且所述图像数据分发设备还包括组播组加入/离开装置,用于在除了所述指定间隔之外的所述正常操作期间,加入所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据的组播组;并且在所述指定间隔期间,加入所述相同的编码后图像数据的多个集合中的每个集合的组播组。
31.一种在通信系统中执行的图像数据通信方法,在所述通信系统中,图像数据分发设备和图像数据接收设备被连接,以便允许通过传输线路进行通信;所述图像数据通信方法包括第一步骤,在该步骤中,所述图像数据分发设备将具有指定时间差的相同的运动图片图像数据的多个集合顺序分发到所述图像数据接收设备;以及第二步骤,在该步骤中,所述图像数据接收设备在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述图像数据分发设备分发的所述具有指定时间差的相同的运动图片图像数据的多个集合,并从接收到的运动图片图像数据中选择所需数据,以重建运动图片图像数据的一个集合。
32.如权利要求31所述的图像数据通信方法,其中所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备在发送所述相同的运动图片图像数据的多个集合时,向所述相同的运动图片图像数据的多个集合中的每个集合赋予所述重建所需的信息;并且所述第二步骤包括以下步骤,在该步骤中,所述图像数据接收设备参考已赋予所述运动图片图像数据的所述重建所需的所述信息来重建在所述指定间隔中已从所述图像数据分发设备分发的所述具有所述指定时间差的相同的运动图片图像数据的多个集合,作为运动图片图像数据的一个集合。
33.如权利要求31所述的图像数据通信方法,其中所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备在除了所述指定间隔之外的正常操作期间,执行所述传输线路上的指定控制设置,以使得在所述具有指定时间差的相同的运动图片图像数据的多个集合中,至少指定的运动图片图像数据在所述图像数据接收设备中被优先接收;以及如下步骤,在该步骤中,所述图像数据分发设备在所述指定间隔期间,执行所述指定控制设置,以使得所述具有指定时间差的相同的运动图片图像数据的多个集合在所述图像数据接收设备中被一起接收。
34.如权利要求33所述的图像数据通信方法,其中所述第二步骤包括如下步骤,在该步骤中,所述图像数据接收设备基于所述运动图片图像数据的接收状态来确定所述越区切换的开始和结束;以及如下步骤,在该步骤中,所述图像数据接收设备既在所述越区切换开始时向所述图像数据分发设备发送开始通知,还在从所述越区切换结束时起经过指定的时间间隔之后向所述图像数据分发设备发送结束通知;并且所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备在以从接收到所述开始通知到接收到所述结束通知之间的间隔作为所述指定间隔的情况下,执行所述指定控制设置。
35.如权利要求33所述的图像数据通信方法,其中所述第二步骤包括如下步骤,在该步骤中,所述图像数据接收设备基于所述运动图片图像数据的接收状态来确定所述越区切换的开始和结束;以及如下步骤,在该步骤中,所述图像数据接收设备在所述越区切换开始时向所述图像数据分发设备发送对于改变所述指定控制设置的第一请求,并且在从所述越区切换结束时起经过指定的时间间隔之后向所述图像数据接收设备发送对于改变所述指定控制设置的第二请求;并且所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备在以从接收到所述第一请求到接收到所述第二请求之间的间隔作为所述指定间隔的情况下,执行所述指定控制设置。
36.如权利要求33所述的图像数据通信方法,其中所述第二步骤包括如下步骤,在该步骤中,所述图像数据接收设备以指定的时间间隔向所述图像数据分发设备报告所述运动图片图像数据的接收状态;并且所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备基于来自所述图像数据接收设备的接收状态报告来确定所述越区切换的开始和结束,并且在以包括了所述越区切换的间隔和从所述结束到经过指定的时间间隔之间的间隔在内的间隔作为所述指定间隔的情况下,执行所述指定控制设置。
37.如权利要求33到36中的任何一项所述的图像数据通信方法,其中所述指定控制设置是所述传输线路上的路由优先级控制。
38.如权利要求37所述的图像数据通信方法,其中所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备在所述正常操作期间,将与所述具有指定时间差的相同的运动图片图像数据的多个集合中的所述指定的运动图片图像数据相关的所述路由优先级设置为高于其他运动图片图像数据的路由优先级,并且在所述指定间隔期间,既将与所述指定的运动图片图像数据相关的所述路由优先级设置为低于在所述正常操作期间的路由优先级,还将与所述其他运动图片图像数据相关的所述路由优先级设置为高于在所述正常操作期间的路由优先级。
39.如权利要求33到36中的任何一项所述的图像数据通信方法,其中所述指定控制设置是在所述传输线路的无线电传输线路上的功率控制。
40.如权利要求39所述的图像数据通信方法,其中所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备在所述正常操作期间,将在与所述具有指定时间差的相同的运动图片图像数据的多个集合中的所述指定的运动图片图像数据相关的所述无线电传输线路上的功率设置为高于针对其他运动图片图像数据的功率,并且在所述指定间隔期间,既将在与所述指定的运动图片图像数据相关的所述无线电传输线路上的功率设置为低于在所述正常操作期间的功率,还将在与所述其他运动图片图像数据相关的所述无线电传输线路上的功率设置为高于在所述正常操作期间的功率。
41.如权利要求33到36中的任何一项所述的图像数据通信方法,其中所述指定控制设置是在所述传输线路上传输的编码后图像数据的比特率。
42.如权利要求41所述的图像数据通信方法,其中所述第一步骤包括如下步骤,在该步骤中,所述图像数据分发设备在所述正常操作期间,将与所述具有指定时间差的相同的运动图片图像数据的多个集合中的所述指定的运动图片图像数据相关的所述比特率设置为高于其他运动图片图像数据的比特率,并且在所述指定间隔期间,既将与所述指定的运动图片图像数据相关的所述比特率设置为低于在所述正常操作期间的比特率,还将与所述其他运动图片图像数据相关的所述比特率设置为高于在所述正常操作期间的比特率。
43.如权利要求31所述的图像数据通信方法,还包括第三步骤,在该步骤中,用于监控作为所述传输线路的一部分的无线电传输线路的状态的无线电网络监控设备根据所述无线电传输线路的状态,对于从所述图像数据分发设备发送的相同的运动图片图像数据的集合执行所述传输线路上的指定控制设置;以及第四步骤,在该步骤中,所述无线电网络监控设备在除了所述指定间隔之外的正常操作期间,执行所述指定控制设置,以使得所述具有指定时间差的相同的运动图片图像数据的多个集合中的至少指定的运动图片图像数据在所述图像数据接收设备中被优先接收;并且在所述指定间隔期间,执行所述指定控制设置,以使得所述具有指定时间差的相同的运动图片图像数据的多个集合在所述图像数据接收设备中被一起接收。
44.如权利要求43所述的图像数据通信方法,其中所述指定控制设置是所述传输线路上的路由优先级控制。
45.如权利要求44所述的图像数据通信方法,还包括如下步骤,其中所述无线电网络监控设备在所述正常操作期间,将与所述具有指定时间差的相同的运动图片图像数据的多个集合中的所述指定的运动图片图像数据相关的所述路由优先级设置为高于其他运动图片图像数据的路由优先级;并且在所述指定间隔期间,既将与所述指定的运动图片图像数据相关的所述路由优先级设置为低于在所述正常操作期间的路由优先级,还将与所述其他运动图片图像数据相关的所述路由优先级设置为高于在所述正常操作期间的路由优先级。
46.如权利要求43所述的图像数据通信方法,其中所述指定控制设置是在所述传输线路的无线电传输线路上的功率控制。
47.如权利要求46所述的图像数据通信方法,还包括如下步骤,其中所述无线电网络监控设备在所述正常操作期间,将在与所述具有指定时间差的相同的运动图片图像数据的多个集合中的所述指定的运动图片图像数据相关的所述无线电传输线路上的功率设置为高于针对其他运动图片图像数据的功率;并且在所述指定间隔期间,既将在与所述指定的运动图片图像数据相关的所述无线电传输线路上的功率设置为低于在所述正常操作期间的功率,还将在与所述其他运动图片图像数据相关的所述无线电传输线路上的功率设置为高于在所述正常操作期间的功率。
48.如权利要求31所述的图像数据通信方法,还包括如下步骤,其中所述图像数据分发设备执行对所述具有指定时间差的相同的运动图片图像数据的多个集合中的每个集合的组播或广播分发;以及如下步骤,其中所述图像数据接收设备在除了所述指定间隔之外的所述正常操作期间,接收所述具有指定时间差的相同的运动图片图像数据的多个集合中的至少指定的运动图片图像数据的组播或广播流量,并且在所述指定间隔期间,接收所述具有指定时间差的相同的运动图片图像数据的多个集合中的每个集合的组播或广播流量。
49.如权利要求31所述的图像数据通信方法,还包括如下步骤,其中所述图像数据分发设备执行对所述具有指定时间差的相同的运动图片图像数据的多个集合中的每个集合的组播分发;以及如下步骤,其中所述图像数据接收设备在除了所述指定间隔之外的正常操作期间,加入所述具有指定时间差的相同的运动图片图像数据的多个集合中的至少指定的运动图片图像数据的组播组,并且在所述指定间隔期间,加入所述具有指定时间差的相同的运动图片图像数据的多个集合的每个组播组。
50.如权利要求31到49中的任何一项所述的图像数据通信方法,其中所述相同的运动图片图像数据的多个集合是在其中利用相同的编码方法对相同的图像数据进行编码的编码后图像数据的多个集合。
51.一种在通信系统中使用的程序,在所述通信系统中,服务器和客户终端被连接,以便允许通过传输线路进行通信,所述程序致使所述服务器的计算机执行第一进程,该进程用于将具有指定时间差的相同的运动图片图像数据的多个集合顺序分发到所述客户终端;并且致使所述客户终端的计算机执行第二进程,该进程用于在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述服务器分发的所述具有指定时间差的相同的运动图片图像数据的多个集合,并从接收到的运动图片图像数据中选择所需数据,以重建运动图片图像数据的一个集合。
52.一种在服务器中使用的程序,所述服务器被连接,以便允许通过传输线路与在多个无线电区域之间移动的客户终端通信,所述程序致使所述服务器的计算机执行第一进程,用于生成相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像数据被编码;第二进程,用于以指定的时间差在所述传输线路上顺序发送已经在所述第一进程中生成的相同的编码后图像数据的多个集合;以及第三进程,用于在发生于所述客户终端从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,执行所述传输线路上的指定控制设置,以使得在所述第二进程中发送的所述具有指定时间差的相同的编码后图像数据的多个集合在指定间隔中在所述客户终端中被接收。
53.如权利要求52所述的程序,其中所述指定控制设置是所述传输线路上的路由优先级控制。
54.如权利要求53所述的程序,其中所述程序致使所述服务器的计算机还执行如下进程在除了所述指定间隔之外的正常操作期间,将与所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据相关的所述路由优先级设置为高于其他编码后图像数据的路由优先级;并且在所述指定间隔期间,既将与所述指定的编码后图像数据相关的所述路由优先级设置为低于在所述正常操作期间的路由优先级,还将与所述其他编码后图像数据相关的所述路由优先级设置为高于在所述正常操作期间的路由优先级。
55.如权利要求52所述的程序,其中所述指定控制设置是在作为所述传输线路的一部分的无线电传输线路上的功率控制。
56.如权利要求55所述的程序,其中所述程序致使所述服务器的计算机还执行如下进程在除了所述指定间隔之外的所述正常操作期间,将在与所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据相关的所述无线电传输线路上的功率设置为高于针对其他编码后图像数据的功率;并且在所述指定间隔期间,既将在与所述指定的编码后图像数据相关的所述无线电传输线路上的所述功率设置为低于在所述正常操作期间的功率,还将在与所述其他编码后图像数据相关的所述无线电传输线路上的功率设置为高于在所述正常操作期间的功率。
57.如权利要求52所述的程序,其中所述指定控制设置是在所述传输线路上传输的编码后图像数据的比特率。
58.如权利要求57所述的程序,其中所述程序致使所述服务器的计算机还执行如下进程在除了所述指定间隔之外的所述正常操作期间,将与所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据相关的所述比特率设置为高于其他编码后图像数据的比特率;并且在所述指定间隔期间,既将与所述指定的编码后图像数据相关的所述比特率设置为低于在所述正常操作期间的比特率,还将与所述其他编码后图像数据相关的所述比特率设置为高于在所述正常操作期间的比特率。
59.一种在客户终端中使用的程序,所述客户终端被连接,以便允许通过传输线路与服务器通信,所述服务器以指定时间差顺序分发相同的编码后图像数据的多个集合,在所述相同的编码后图像数据中,相同的图像被编码;所述程序致使所述客户终端的计算机执行以下进程在发生于从当前无线电区域移动到另一相邻的无线电区域之时的越区切换时,在指定间隔中接收从所述服务器分发的所述具有指定时间差的相同的编码后图像数据的多个集合;以及从已经在所述指定间隔中接收到的所述具有指定时间差的相同的编码后图像数据的多个集合中选择所需数据,以重建编码后图像数据的一个集合。
60.如权利要求59所述的程序,其中所述程序致使所述客户终端的计算机还执行如下进程对所述相同的编码后图像数据的多个集合中的每个集合的组播或广播分发;并且在除了所述指定间隔之外的所述正常操作期间,接收所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据的组播或广播流量,并且在所述指定间隔期间,接收所述相同的编码后图像数据的多个集合中的每个集合的组播或广播流量。
61.如权利要求59所述的程序,其中所述程序致使所述客户终端的计算机还执行如下进程对所述相同的编码后图像数据的多个集合中的每个集合的组播分发;并且在除了所述指定间隔之外的所述正常操作期间,加入所述具有指定时间差的相同的编码后图像数据的多个集合中的至少指定的编码后图像数据的组播组;并且在所述指定间隔期间,加入所述相同的编码后图像数据的多个集合中的每个集合的组播组。
全文摘要
一种图像数据通信系统,其使得能够抑制在越区切换间隔期间的数据丢失,而不会引起网络资源不足,该系统包括图像数据分发设备101,用于以预定时间差顺序分发编码后图像数据1和2,在所述编程后图像数据1和2中相同的图像被编码;以及图像数据接收设备107用于在多个无线电区域之间移动的同时,接收从图像数据分发设备101分发的编码后图像数据1和2。图像数据接收设备107在发生于从当前无线电区域移动到另一个相邻无线电区域之时的越区切换时,在指定间隔中接收从图像数据分发设备101分发的具有指定时间差的编码后图像数据1和2,并且从接收到的编码后图像数据1和2中选择所需数据来重建编码后图像数据的一个集合。
文档编号H04Q7/22GK1826821SQ20048001638
公开日2006年8月30日 申请日期2004年6月1日 优先权日2003年6月10日
发明者出井洋明 申请人:日本电气株式会社