专利名称:使用关于多视点视频流的链接信息发送数字广播流的方法和设备以及接收数字广播流的 ...的制作方法
技术领域:
与示例性实施例一致的设备和方法涉及用于提供ニ维(2D)内容或三维(3D)内容的数字数据发送和接收。
背景技术:
在基于运动图像专家组(MPEG)传输(TS)的数字广播方法中,发送终端将未压缩的视频数据和未压缩的音频流插入各个基本流(ES)中,对每个ES进行复用以产生TS,并经由信道发送TS。TS包括与ES —起的节目说明信息(PSI)。PSI典型地包括节目关联表(以下,称为PAT信息)和节目映射表(以下,称为PMT信息)。提供单个节目信息的PMT信息描述用 于每个ES的包标识符(PID),PAT信息描述用于每个PMT信息的PID。接收终端经由信道接收TS,并通过与在发送终端中执行的处理相反的处理来从TS提取ES。由显示装置恢复和再现包含在ES中的数字内容。
发明内容
技术问题提供了根据示例性实施例的能够提供3D视频服务的数字广播流发送设备和方法以及能够提供3D视频服务的数字广播流接收设备和方法。技术方案根据示例性实施例的一方面,提供了一种用于提供3D视频服务的数字广播流发送方法,所述方法包括产生针对多条视频信息的多个ES,所述多条视频信息包括以下项中的至少一个关于3D视频的基本视点视频的信息、关于与基本视点视频对应的附加视点视频的信息以及具有与3D视频的视点不同的视点的2D视频;通过将所述多个TS与用于标识与所述多条视频信息中的每一条链接的至少一条视频信息的链接信息进行复用来产生至少ー个TS ;经由至少ー个信道发送产生的所述至少ー个TS。有益效果本发明可在保持与使用基于运动图像专家组(MPEG)的TS的数字广播系统的兼容性的同时提供3D视频的数字内容服务和2D视频的数字内容服务。由于PMT信息包括关于单个视频ES的信息,因此发送终端将用于标识相对视频信息所在的ES、TS或信道的关联信息插入每个PMT信息,从而接收终端可在3D再现模式或2D再现模式下根据ES、TS或信道之间的关联信息再现关联项视频数据。另外,由于经由PMT信息不仅发送和接收链接信息,还发送和接收关于在2D视频再现方法和3D视频再现方法之间转换的信息以及关于3D视频特性的附加信息,因此本发明可在保持与用于2D内容服务的数字广播系统的兼容性的同时,平滑地提供3D视频的数字内容服务。
不需要新产生PSI或用于PSI的TS,多条视频信息和附加信息(诸如,3D视频流描述符)之间的链接信息可被包括在PMT信息或PAT信息中。另外,附加信息可被包括在保留字段中而不需要将包标识符(PID)添加到PMT信息。
图I是根据示例性实施例的数字广播流发送设备的框图;图2是根据示例性实施例的数字广播流接收设备的框图;图3是根据示例性实施例的用于2D内容服务的数字TV发送系统的框图; 图4是根据示例性实施例的用于2D内容服务的数字TV接收系统的框图;图5示出根据第一示例性实施例的经由多个信道发送和接收多个视频流的信道频带的分布的示例;图6是根据图5中示出的第一示例性实施例的经由多个信道发送包括链接信息的3D视频流的数字广播流发送设备的框图;图7示出根据第二示例性实施例的能够经由单个信道发送和接收针对3D视频流和2D视频流的多个TS的信道频带的分布的示例;图8是根据图7中示出的第二示例性实施例的经由单个信道发送具有链接信息的多个TS的数字广播流发送设备的框图;图9是根据第三示例性实施例的经由单个信道发送包括3D视频流和2D视频流的单个TS的数字广播流发送设备的框图;图10是根据第四示例性实施例的经由与多个传输网络系统对应的多个信道接收多个TS的数字广播流接收设备的框图;图11示出根据第五示例性实施例的信道频带分布的示例,在该信道频带中,能够经由多个信道发送和接收针对3D视频的基本视点视频流的多个TS并且能够经由单个信道发送和接收针对于3D视频的附加视点视频流的单个TS ;图12示出根据示例性实施例的能够经由单个信道发送和接收用于多视点视频流的多个TS的信道频带的分布的示例;图13示出根据示例性实施例的使用了针对3D复合格式的按比例缩减方法的示例;图14、图15、图16、图17和图18是根据示例性实施例的数字广播流接收设备的再现单元的示意图;图19是根据示例性实施例的能够提供3D视频服务的数字广播流发送方法的流程图;图20是根据示例性实施例的能够提供3D视频服务的数字广播流接收方法的流程图。
具体实施例方式最佳模式根据示例性实施例的一方面,提供了一种用于提供3D视频服务的数字广播流发送方法,所述方法包括产生针对多条视频信息的多个ES,所述多条视频信息包括关于3D视频的基本视点视频的彳目息、关于与基本视点视频相应的附加视点视频的彳目息和具有与3D视频的视点不同的视点的2D视频中的至少一个;通过将所述多个ES与链接信息进行复用来产生至少一个TS,其中,所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息;经由至少一个信道发送产生的所述至少一个TS。产生所述至少一个TS的步骤可包括对每个ES进行复用以产生至少一个TS,发送所述至少一个TS的步骤可包括经由不同的信道发送所述至少一个多节目传输流。产生所述至少一个TS的步骤可包括对每个ES进行复用以产生至少一个TS,发送所述至少一个TS的步骤可包括经由单个信道发送所述至少一个TS。产生所述至少一个TS的步骤可包括对ES进行复用以产生单个TS,发送所述至少一个TS的步骤可包括经由单个信道发送所述单个个TS。根据另一示例性实施例的一方面,提供了一种提供3D视频服务的数字广播流接 收方法,所述方法包括经由至少一个信道接收针对多条视频信息的至少一个TS,所述多条视频 目息包括关于3D视频的基本视点视频的/[目息、关于3D视频的附加视点视频的/[目息和具有与3D视频的视点不同的视点的2D视频中的至少一个;对接收的所述至少一个TS进行解复用以从所述至少一个TS提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个ES ;对提取的所述至少一个ES进行解码以基于链接信息再现通过解码而恢复的3D视频和2D视频中的至少一个。接收的步骤可包括通过对所述至少一个信道中的每个信道进行解码并从所述至少一个信道中的每个信道接收单个TS来接收至少一个TS,提取的步骤可包括通过对所述至少一个多节目TS中的每一个进行解复用来提取至少一个ES。接收的步骤可包括通过对所述至少一个信道中的一个信道进行解码来经由所述信道接收多个TS,提取的步骤可包括通过对所述至少一个TS中的每一个进行解复用来提取所述至少一个ES。接收的步骤还可包括通过对所述至少一个信道中的一个信道进行解码来接收该信道的TS,提取的步骤可包括通过对传输流进行解复用来提取所述至少一个ES。链接信息可包括链接标识符和链接描述符,链接标识符表示在至少一个TS中包括的多条视频信息中是否存在相互链接的多条视频信息,链接描述符包括关于在至少一个TS中包括的多条视频信息中相互链接的多条视频信息之间的链接的信息。链接标识符可被包括在针对所述至少一个TS的节目关联表中。 链接描述符可被包括在针对相互链接的多条视频信息的ES的节目映射表中。包括用于再现当前TS的当前视频信息的附加信息的3D视频流描述符可被包括在针对当前视频信息的节目映射表中。根据另一示例性实施例的一方面,提供了一种用于提供3D视频服务的数字广播流发送设备,所述设备包括ES产生单元,产生针对多条视频信息的多个ES,所述多条视频
息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个;TS产生单元,通过将产生的所述多个ES与链接信息进行复用来产生至少一个TS,其中,所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息;发送单元,经由至少一个信道发送产生的所述至少一个TS。
根据另一示例性实施例的一方面,提供了一种提供3D视频服务的数字广播流接收设备,所述设备包括TS接收单元,经由至少一个信道接收针对多条视频信息的至少一个TS,所述多条视频彳目息包括关于3D视频的基本视点视频的/[目息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个;ES提取单元,对接收的所述至少一个TS进行解复用以从所述至少一个TS提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个ES ;再现单元,以基于链接信息所表示的链接,再现通过对提取的所述至少一个ES进行解码而恢复的3D视频数据和2D视频数据中的至少一个。根据另一示例性实施例的一方面,提供了一种其上记录有上述的用于提供3D视频服务的数字广播流发送方法的程序的计算机可读记录介质。根据另一示例性实施例的一方面,提供了一种其上记录有上述的用于提供3D视频服务的数字广播流接收方法的程序的计算机可读记录介质。
本发明的模式以下,将参照附图更完整地描述示例性实施例。应理解,当诸如“中的至少一个”的表述出现在列出的元件之后时,其修饰列出的全部元件而不是修饰列出的单个元件。此外,在此使用的“单元”可被实施为硬件组件和/或由计算机或硬件处理器执行的软件组件。现在将参照图I到图20详细描述根据示例性实施例的能够提供3D视频服务的数字广播流发送设备和方法以及能够提供3D视频服务的数字广播流接收设备和方法。图I是根据示例性实施例的数字广播流发送设备100的框图。参照图I,数字广播流发送设备100包括基本流(ES)产生单元110、传输流(TS)产生单元120和发送单元130。ES产生单元110产生针对多条视频信息的多个ES,所述多条视频信息包括以下项中的至少一个关于3D视频的基本视点视频的/[目息、关于3D视频的附加视点视频的彳目息以及二维(2D)视频。可针对单条视频信息产生单个ES。3D视频可以是单个基本视点视频和与单个基本视点视频相应的单个附加视点视频的组合(诸如,立体视频),或者是单个基本视点视频和与单个基本视点视频相应的多个附加视点视频的组合。关于附加视点视频的信息表示与基本视点视频相应的附加视点视频,因此可以是附加视点视频数据本身,或者是与基本视点视频数据相关的深度信息、视差信息等中的至少一个。2D视频可以不是3D视频的一个视点的视频而是具有与3D视频的视点分离的视点的2D视频。TS产生单元120接收由ES产生单元110产生的多个ES。TS产生单元120将多条视频信息之间的链接信息与多个ES进行复用,以产生针对多个ES的至少一个TS。发送单元130经由至少一个信道发送所述至少一个TS。链接信息包括用于指示与多条视频信息中的每一条相关联的至少一条视频信息的标识符。TS产生单元120可通过对多个ES中的每一个进行复用来产生至少一个TS,发送单元130可经由不同的信道发送所述至少一个TS。
TS产生单元120可通过单独地复用多个ES来产生至少一个TS,发送单元130可经由单个信道发送所述至少一个TS。TS产生单元120可通过对多个ES进行利用来产生单个TS,发送单元130可经由单个信道发送所述单个TS。现在将详细描述TS产生单元120的操作。TS产生单元120可单独地将ES打包以产生打包的基本流(PES)包,并复用包括PES包和链接信息的节目映射表(以下,称为PMT信息),以产生单节目传输流(SP TS)。TS产生单元120可通过复用视频ES、音频ES、附加数据等来产生SP TS0可针对每个SP产生PMT信息。TS产生单元120可通过将至少一个SP TS与节目关联表(以下,称为PAT信息)进行复用来产生多节目传输流(MP TS)。 在这种情况下,可通过将SP TS复用到若干组中来产生不大于SP TS的总数的多个 MP TS0现在将描述第一到第五示例性实施例,其中,TS产生单元120和发送单元130经由不同的ES、不同的TS或不同的信道发送多条视频信息。根据第一示例性实施例,TS产生单元120可通过单独地复用至少一个ES来产生至少一个SP TS,并通过单独地复用至少一个SP TS来产生至少一个MP TS0根据第一示例性实施例,发送单元130可经由基于相同传输网络系统的多个信道分别发送由根据第一示例性实施例的TS产生单元120产生的至少一个MP TS0根据第二示例性实施例,TS产生单元120可通过单独地复用至少一个ES来产生至少一个SP TS,并通过将所述至少一个SP TS复用在一起来产生单个MP TS0根据第二示例性实施例,发送单元130可经由单个信道发送由根据第二示例性实施例的TS产生单元120产生的单个MP TS0根据第三示例性实施例,TS产生单元120可通过将至少一个ES复用在一起来产生单个SP TS,并通过复用单个SP TS来产生单个MP TSo根据第三示例性实施例,发送单元130可经由单个信道发送由根据第三示例性实施例的TS产生单元120产生的单个MP TS0根据第四示例性实施例,TS产生单元120可像第一示例性实施例一样从至少一个ES产生至少一个SP TS和至少一个MP TS0然而,与第一不例性实施例不同,根据第四不例性实施例的发送单元130可经由基于各个类型的传输网络系统的多个信道分别发送至少一个 MP TS0根据第五示例性实施例,TS产生单元120可单独地复用至少一个ES中的针对至少一个基本视点视频的ES以产生针对至少一个基本视点视频的至少一个SP TS0根据第五示例性实施例,TS产生单元120可单独地复用针对至少一个基本视点视频的至少一个SP TS以产生至少一个基本视点MP TS0另外,根据第五示例性实施例,TS产生单元120可单独地复用针对与至少一个基本视点视频相应的至少一个附加视点视频的ES,以产生针对至少一个附加视点视频的至少一个SP TS0根据第五示例性实施例,TS产生单元120可将针对至少一个附加视点视频的至少一个SP TS复用在一起以产生单个的附加视点MP TS0根据第五示例性实施例,发送单元130可经由不同的信道分别发送由根据第五示例性实施例的TS产生单元120产生的至少一个基本视点MP TS和单个附加视点MP TS0参照回到图1,TS产生单元120可通过将多条视频信息之间的链接信息插入节目说明信息(PSI)来将链接信息包括在至少一个TS中。链接信息可被分类为链接标识符和链接描述符。链接标识符指示在至少一个TS中包括的多条视频信息中是否存在关联的多条视频信息。TS产生单元120可将链接标识符包括在关于至少一个TS的PAT信息中。在这种情况下,链接标识符可指示由PAT信息标识的多条PMT信息是否彼此链接。
链接描述符可包括与至少一个TS中所包括的多条视频信息中存在的关联的多条视频信息之间的链接有关的信息。TS产生单元120可将链接描述符插入PMT信息的描述符区。TS产生单元120不仅可将链接信息插入PMT信息,还可将用于表示当前ES是否是针对3D视频的3D视频认证描述符插入PMT信息。例如,包括3D视频信息开始信息的3D视频开始描述符和包括3D视频的格式标识符信息的3D视频注册描述符中的至少一个可被插入关于当前ES的PMT信息,其中,所述3D视频信息开始信息表示关于3D视频的附加信息开始被插入的位置。以下将参照表I更详细地描述链接描述符,以下将参照表4、表5和表6更详细地描述链接描述符,并且以下将参照表2和表3更详细地描述3D视频认证描述符。TS产生单元120不仅可将链接信息插入针对当前视频信息的PMT信息,还可将包括用于再现当前TS的当前视频信息的附加信息的3D视频流描述符插入该PMT信息。3D视频流描述符可包括关于针对当前视频流发生的2D/3D再现模式的转换的信肩、O3D视频流描述符可包括用于单独(例如,针对小孩和成人)设置视点信息的关于3D视频的视点的信息。以下将参照表7到表16更详细地描述3D视频流描述符。因此,图I的数字广播流发送设备100可将3D视频信息插入不同的信道、不同的TS或不同的ES以发送3D视频信息。对于关联的多条视频信息,可设置用于标识它们的相对的多条视频信息已经被插入的位置的链接信息。链接信息可被插入针对关联的多条视频信息的TS的PMT信息并被发送。图2是根据示例性实施例的数字广播流接收设备200的框图。参照图2,数字广播流接收设备200包括TS接收单元210、ES提取单元220和再现单元230。TS接收单元210经由至少一个信道接收包括多条视频信息的至少一个TS。接收的至少一个TS可包括以下项中的至少一个关于3D视频的基本视点视频的信息、关于与基本视点视频对应的附加视点视频的信息以及2D视频。2D视频可以是视点与3D视频的视点不同的视频信息。关于与基本视点视频对应的附加视点视频的信息可以是附加视点视频数据本身,或者可以是使附加视点视频数据可基于基本视点视频数据被恢复的视差信息和深度信息中的至少一个。ES提取单元220从TS接收单元210接收至少一个TS,并将TS解复用以从TS提取针对多条视频信息的至少一个ES。ES提取单元220还从解复用的TS提取多条视频信息之间的链接信息。TS接收单元210可经由至少一个信道接收MP TS0可经由每个信道接收单个MP
TSoTS接收单元210可通过单独地对多个信道进行解码并从每个信道接收单个TS来接收多个TS。ES提取单元220可通过单独地对多个MP TS进行解复用来提取多个ES。TS接收单元210可通过对单个信道进行解码来接收多个TS,ES提取单元220可通过对多个TS进行解复用来提取多个ES。TS接收单元210可通过对单个信道进行解码来接收单个TS,ES提取单元220可通过对单个TS进行解复用来提取多个ES。现在将更详细地描述ES提取单元220的操作。ES提取单元220可对MP TS进行解复用以从解复用的MP TS提取至少一个SP TS以及PAT信息。ES提取单元220可对每个SP TS进行解复用以提取PES包和PMT信息。PMT信息可包括关于包括在至少一个SP TS中的多个ES之间的链接的链接信息。PES包可被解包为ES。每个ES可包括针对3D视频的基本视点视频信息、针对3D视频的附加视点视频信息、基本视点视频信息和附加视点视频信息的3D复合格式或2D视频信息。ES提取单元220还可从解复用的SP TS提取音频ES。由于单个MP TS可被解复用为至少一个SP TS,因此可提取不少于多个MP TS的SP TSoTS接收单元210和ES提取单元220分别接收分别由TS产生单元120产生并由发送单元130发送的TS,并对TS解复用。因此,根据上述的第一到第五示例性实施例的TS接收单元210接收至少一个TS和ES提取单元220从TS提取ES的操作如下。根据第一示例性实施例,TS接收单元210可通过单独地对至少一个信道进行解码并从每个信道接收单个MP TS来接收至少一个MP TS0根据第一示例性实施例,ES提取单元220可单独地对至少一个MP TS进行解复用以从每个MP TS提取单个SP TS,并对每个SP TS进行解复用以从每个MP TS提取单个ES。因此,根据第一示例性实施例的TS接收单元210和ES提取单元220可最终从针对至少一个信道接收的至少一个TS提取针对3D视频信息或2D视频信息的ES。根据第二示例性实施例,TS接收单元210可对单个信道进行解码以提取单个MPTS0根据第二示例性实施例,ES提取单元220可对单个MP TS进行解复用以提取至少一个SP TS,并单独地对所述至少一个SP TS进行解复用以提取至少一个ES。因此,根据第二示例性实施例的TS接收单元210和ES提取单元220可经由单个信道提取至少一个SP TS,因此可提取针对3D视频信息或2D视频信息的ES。根据第三示例性实施例,TS接收单元210可对单个信道进行解码以提取单个MPTS0根据第三示例性实施例,ES提取单元220可对单个MP TS进行解复用以提取单个SPTS,并对单个SP TS进行解复用以提取至少一个ES。因此,根据第三示例性实施例的TS接收单元210和ES提取单元220可最终经由单个信道提取包括3D视频信息或2D视频信息的至少一个ES。根据第四示例性实施例,与第一示例性实施例相反,TS接收单元210可单独地对基于各个类型的传输网络系统的信道进行解码,并接收针对每个信道的单个MP TS,从而接收至少一个MP TS0根据第四示例性实施例,ES提取单元220可单独地对至少一个MP TS进行解复用以从至少一个MP TS中的每一个提取单个SP TS,并对每个SP TS进行解复用以从每个SP TS提取单个ES。因此,根据第四示例性实施例的TS接收单元210和ES提取单元220可最终从分别经由基于各个类型的传输网络类型的多个信道接收的TS提取针对3D视频信息或2D视频信息的ES。根据第五示例性实施例,TS接收单元210可对多个信道进行解码以从所述多个信道中的至少一个接收针对3D视频的至少一个基本视点MP TS,并从所述多个信道之一接收针对3D视频的单个附加视点MP TS0根据第五示例性实施例,ES提取单元220可单独地对至少一个基本视点MP TS进行解复用以提取至少一个基本视点SP TS,并单独地对至少一个基本视点SP TS进行解复用以提取至少一个基本视点ES。根据第五示例性实施例,ES提取单元220还可对单个附加视点MP TS进行解复用以提取至少一个附加视点SP TS,并单独地对所述至少一个附加视点SP TS进行解复用以提取至少一个附加视点ES。 因此,根据第五示例性实施例的TS接收单元210和ES提取单元220可最终经由多个信道提取针对3D视频信息或2D视频信息的多个ES。参照回到图2,从ES提取单元220提取的链接信息包括用于指示与多条视频信息中的每一条关联的至少一条视频信息的标识符。再现单元230可使用链接信息搜索与预定视频数据相应的其它视频数据,并在保持它们之间的链接的同时再现视频数据。ES提取单元220可从TS的PSI提取多条视频信息之间的链接信息。链接信息可包括链接标识符和链接描述符。ES提取单元220可从TS的PAT信息提取链接信息的链接标识符。在这种情况下,链接标识符可表示由PAT信息标识的多条PMT信息是否彼此链接。ES提取单元220可从PMT信息的描述符区提取链接信息的描述符。ES提取单元220不仅可从PMT信息提取链接信息,还可从PMT信息提取3D视频认证描述符。可从被提取作为3D认证描述符的3D视频开始描述符和3D视频注册描述符中的至少一个来检查在当前ES中是否包括3D视频信息。以下将参照表I更详细地描述链接标识符,以下将参照表4、表5和表6更详细地描述链接描述符,以下将参照表2和表3更详细地描述3D视频认证描述符。ES提取单元220不仅可从针对当前视频信息的PMT信息提取链接信息,还可从针对当前视频信息的PMT信息提取3D视频流描述符。ES提取单元220可从3D视频流描述符提取与针对当前视频流发生的2D/3D再现模式的转换相关的信息、用于单独(例如,针对小孩和成人)设置视点信息的与3D视频的视点相关的信息以及其它信息。以下将参照表7到表16更详细地描述3D视频流描述符。再现单元230对由ES提取单元220提取的至少一个ES进行解码以恢复3D视频数据或2D视频数据。再现单元230可考虑由链接信息表示的链接来再现恢复的3D视频数据和恢复的2D视频数据中的至少一个。例如,如果再现单元230从ES提取单元220接收针对3D视频的基本视点视频信息的ES和针对3D视频的附加视点视频信息的ES,则再现单元230可从这些ES恢复3D视频的基本视点视频数据和附加视点视频数据。具体地,再现单元230可基于链接信息搜索并恢复基本视点视频数据和附加视点视频数据,并可按照能够被3D显示装置再现的3D再现格式来转换并再现基本视点视频数据和附加视点视频数据。如果再现单元230从ES提取单元220接收了针对2D视频信息的ES和针对附加视点视频的视差信息或深度信息的ES,则再现单元230可从ES恢复基本视点视频数据和附加视点视频数据。具体地,再现单元230可基于链接信息搜索与2D视频数据相应的视差信息或深度信息以恢复附加视点视频数据,并可将附加视点视频数据转换为能够被3D显示装置再现的3D再现格式并再现附加视点视频数据。另外,可将针对3D复合格式的3D视频的ES和针对2D视频的ES输入到再现单元230。再现单元230可基于链接信息将3D复合格式的视频信息恢复为3D视频数据,并可将3D视频数据转换为均可被3D显示装置再现的基本视点视频数据和附加视点视频数据。由于再现单元230还可恢复3D视频数据,再现单元230可选择性地再现基本视点视频数据、附加视点视频数据和2D视频数据。
如果关联的针对2D视频的ES被输入再现单元230,则再现单元230可基于链接信息恢复相应的2D视频数据的项,并选择性地、独立地再现2D视频数据项。再现单元230可在画中画(PIP)模式中选择性地根据链接信息再现相应的2D视频数据项。数字广播流接收设备200的ES提取单元220可通过使用链接信息检测经由不同信道、不同的SP TS或不同的ES发送的关联的多条视频信息,以仅提取关联的ES。数字广播流接收设备200的再现单元230可根据链接信息识别与用户选择的SP视频流关联的不同视频流的存在,并可再现关联的视频流。数字广播流发送设备100和数字广播流接收设备200可在保持与使用基于运动图像专家组(MPEG)的TS的数字广播系统的兼容性的同时,提供3D视频的数字内容服务和2D视频的数字内容服务。由于PMT信息包括关于单个视频ES的信息,因此发送终端将用于标识相对视频信息所在的ES、TS或信道的关联信息插入每个PMT信息,因此接收终端可在3D再现模式或2D再现模式下根据ES、TS或信道之间的关联信息再现关联项视频数据。另外,由于不仅链接信息经由PMT信息被发送和接收而且关于2D视频再现方法和3D视频再现方法之间的转换的信息以及关于3D视频特性的附加信息也经由PMT信息被发送和接收,因此数字广播流发送设备100和数字广播流接收设备200可在保持与用于2D内容服务的数字广播系统的兼容性的同时平稳地提供3D视频的数字内容服务。不需要新产生PSI或用于PSI的TS,多条视频信息之间的链接信息和诸如3D视频流描述符的附加信息可被包括在PMT信息或PAT信息中。另外,附加信息可被包括在保留字段中,而不需要将包标识符(PID)添加到PMT信息。图3是根据示例性实施例的用于2D内容服务的数字TV发送系统300的框图。参照图3,数字TV发送系统300通过使用单节目编码器310来产生包括单个视频ES和单个音频ES的SP TS,并通过使用复用器(MUX) 380对由多个单节目编码器产生的至少一个SP TS进行复用以产生并发送MP TS0单节目编码器310包括视频编码器320、音频编码器330、打包器340和350以及复用器(MUX) 360。视频编码器320和音频编码器330分别对未压缩的视频数据和未压缩的音频数据进行编码以分别产生和输出视频ES和音频ES。单节目编码器310的打包器340和350分别对视频ES和音频ES进行打包,并将PES头分别插入打包的视频ES和打包的音频ES,以分别产生视频PES包和音频PES包。MUX 360对视频PES包、音频PES包和各种附加数据进行复用以产生第一单节目传输流SP TSl。PMT信息可与视频PES包和音频PES包复用,并被包括在单节目传输流SPTSl中。PMT信息被插入每个单节目传输流并描述每个ES或附加数据的PID。MUX 380将多个单节目传输流SP TSUSP TS2、...与PAT信息复用以产生多节目传输流MP TS。由PSI以及节目和系统信息协议(PSIP)产生器370产生PMT信息和PAT信息。多节目传输流(MP TS)可包括PAT信息和PSIP。PAT信息描述关于包括在多节目传输流中的单节目传输流的PMT信息的PID。
图4是根据示例性实施例的用于2D内容服务的数字TV接收系统400的框图。数字TV接收系统400接收数字广播流,并从数字广播流中提取视频数据、音频数据和附加数据。数字TV(DTV)调谐器410被调谐到根据观看者输入的物理信道选择信号选择的信道的波频率,以选择性地提取经由与波频率相应的波接收的信号。信道解码器和解调器420从信道信号提取多节目传输流MP TS0多节目传输流MP TS被解复用器(DEMUX) 430解复用为多个单节目传输流SP TS1、SPTS2、...和PSIP。单节目解码器440对观看者输入的节目选择信号选择的第一单节目传输流SPTSl进行解码。单节目解码器440进行与单节目编码器310相反的操作。从第一单节目传输流SP TSl恢复视频PES包、音频PES包和附加数据。解包器460和465分别将视频PES和音频PES恢复为ES,然后视频解码器470和音频解码器475分别将ES恢复为视频数据和音频数据。显示处理器480可将视频数据转换为可显示的格式。时钟恢复和音频/视频(AV)同步装置490可通过使用从第一单节目传输流SPTSl提取的节目时钟参考(PCR)信息和时间戳信息来将视频数据再现时间与音频数据再现时间同步。节目指南数据库445可接收观看者输入的节目选择信号,通过将节目选择信号与从多节目传输流MP TS提取的PSIP进行比较来搜索与观看者输入的节目选择信号相应的信道和节目,并随后将信道选择输入信号发送到数字TV调谐器410,并将节目选择输入信号发送到DEMUX 430。节目指南数据库445还可将同屏显示信息发送到显示处理器480并支持同屏显示操作。现在将参照图5到图11描述各种示例性实施例,其中,数字广播流发送设备100和数字广播流接收设备200通过多个信道或多个ES发送和接收3D视频信息、链接信息和3D附加信息,从而在与用于提供2D内容服务的基于MPEG-TS的数字广播系统保持兼容性的同时提供3D数字广播服务。以下,视频流可以是用于视频信息(诸如视频数据、视差信息、深度信息等)和作为在不同阶段执行的转换的结果的ES、PES包、单节目传输流和多节目传输流的通项(general term)。在以下参照图5到图11描述的示例性实施例中,为了便于解释,包括左视点视频和右视点视频的立体视频流被发送和接收。然而,数字广播流发送设备100和数字广播流接收设备200也可应用于多视点视频流,所述多视点视频流均包括参考视点和至少一个附加视点,如图12的示例性实施例。图5示出根据上述第一示例性实施例的信道频带500的分布的示例,在信道频带500中,可经由多个信道发送和接收多个视频流。在信道频带500中,频带被分配给多个信道中的每一个。例如,信道频带500包括用于信道6的频带510、用于信道7的频带520、用于信道8的频带530、用于信道9的频带540和用于信道10的频带550。可通过用于信道6的频带510和用于信道8的频带530分别发送和接收针对左视点视频信息的TS和针对右视点视频信息的TS以作为第一立体视频。在这种情况下,可针对信道6和信道8设置指示立体视频的多个视频之间的关联存在(即,指示多个视频被立体链接)的链接信息。可在信道、TS或ES之间设置链接信息。
可通过用于信道7的频带520和用于信道10的频带520分别发送和接收针对左视点视频信息的TS和针对右视点视频信息的TS以作为第二立体视频。在这种情况下,可针对信道7和信道10设置指示立体视频的多个视频之间的关联存在(即,指示多个视频被立体链接)的链接信息。因此,在根据第一示例性实施例的将立体视频流分配到多个信道的方法中,分别经由不同的信道发送针对左视点视频的TS和针对右视点视频的TS。图6是根据以上参照图5描述的第一示例性实施例的经由多个信道发送具有链接信息的3D视频流的数字广播流发送设备600的框图。数字广播流发送设备600对应于根据图5的第一示例性实施例构建的数字广播流发送设备100的框图。数字广播流发送设备600的单节目编码器610、630和650以及MUX620,640和660的操作与根据第一示例性实施例执行的数字广播流发送设备100的ES产生单元110和TS产生单元120的操作对应。数字广播流发送设备600的信道编码器和调制器625、645和665以及DTV发送器670的操作与根据第一示例性实施例执行的数字广播流发送设备100的发送单元130的操作对应。单节目编码器610、630和650可分别接收左视点视频序列Left Seq.、2D视频序列2D Seq.和右视点视频序列Right Seq.,以分别产生和输出第一单节目传输流SP TSU第二单节目传输流SP TS2和第三单节目传输流SP TS3。MUX 620可对针对左视点视频序列的第一单节目传输流SP TSl进行复用以产生第一多节目传输流MP TSl。类似地,MUX 640和660可分别对针对2D视频序列的第二单节目传输流SP TS2和针对右视点视频序列的第三单节目传输流SP TS3进行复用,以分别产生第二多节目传输流MP TS2和第三多节目传输流MP TS3。信道编码器和调制器625可根据信道6 (或信道7)对第一多节目传输流MP TSl进行编码和调制。信道编码器和调制器665可根据信道8 (或信道10)对第三多节目传输流MP TS3进行编码和调制。信道编码器和调制器645可根据信道9对第二多节目传输流MP TS2进行编码和调制。DTV发送器670可发送分配到多个信道的广播视频流。因此,根据第一示例性实施例的数字广播流发送设备600和数字广播流发送设备100可从立体视频的左视点视频和右视点视频中的每一个以及2D视频产生单节目传输流和多节目传输流,并分别经由多个信道发送单节目传输流和多节目传输流。用于左视点视频的单节目编码器610可设置用于将右视点视频标识为与左视点视频相应的链接信息615。用于右视点视频的单节目编码器650可设置用于将左视点视频标识为与右视点视频相应的链接信息655。如果存在与2D视频关联的视频,则用于2D视频的单节目编码器630可设置用于标识关联的视频的链接信息635。可将每个链接信息插入单节目传输流的PMT信息。根据第一示例性实施例,数字广播流接收设备200可选择性地接收经由不同信道发送的针对立体视频的左视点视频的TS、针对立体视频的右视点视频的TS和针对2D视频的TS,并恢复期望的TS的视频数据。根据第一示例性实施例,数字广播流接收设备200的ES提取单元220可提取链接信息。根据第一示例性实施例的再现单元230可通过使用链接信息识别与左视点视频序列相应的右视点视频序列,并因此执行3D再现。ES提取单元220还可在搜索与第一单节目传 输流相应的第三单节目传输流时使用链接信息,以分别从第一单节目传输流和第三单节目传输流提取ES。图7示出根据上述的第二示例性实施例的信道频带700的分布的示例,在信道频带700中,可经由单个信道发送和接收针对3D视频流和2D视频流的多个TS。信道频带700包括用于信道8的频带710、用于频道9的频带720和用于频道10的频带730。可通过用于信道8的频带710发送和接收针对左视点视频信息的TS 740和针对右视点视频信息的TS 760以作为立体视频。在这种情况下,可在针对左视点视频信息的ES和针对右视点视频信息的ES之间设置指示立体视频的多个视频之间的关联存在(即,指示多个视频被立体链接)的链接信息,或可在针对左视点视频信息的SP TS和针对右视点视频信息的SP TS之间设置链接信息。可通过用于信道8的频带710发送和接收用于普通2D视频的TS 750和另一 TS770。因此,在根据第二示例性实施例的将立体视频流分配给多个信道的方法中,经由单个信道发送和接收针对左视点视频的TS和针对右视点视频的TS。图8是根据以上参照图7描述的第二示例性实施例的经由单个信道发送具有链接信息的多个TS的数字广播流发送设备800的框图。数字广播流发送设备800与根据第二示例性实施例构建的数字广播流发送设备100的框图对应。换而言之,数字广播发送设备800的单节目编码器810、820和830以及MUX 840的操作对应于根据第二示例性实施例执行的数字广播流发送设备100的ES产生单元110和TS产生单元120的操作。数字广播发送设备800的信道编码器和调制器850以及DTV发送器860的操作对应于根据第二示例性实施例执行的数字广播流发送设备100的发送单元130的操作。单节目编码器810、820和830可分别接收左视点视频序列Left Seq.、2D视频序列2D Seq.和右视点视频序列Right Seq.,以分别产生和输出第一单节目传输流SP TSU第二单节目传输流SP TS2和第三单节目传输流SP TS3。
MUX 840可对第一单节目传输流SP TS1、第二单节目传输流SP TS2和第三单节目传输流SP TS3进行复用,以产生多节目传输流MP TS。换而言之,可将针对左视点视频序列的第一单节目传输流SP TS1、针对于2D视频序列的第二单节目传输流SP TS2和针对右视点视频序列的第三单节目传输流SPTS3复用在一起以产生单个多节目传输流MP TS0信道编码器和调制器850可根据信道8对多节目传输流MP TS进行编码和调制。DTV发送器860可发送分配给信道8的广播视频流。因此,根据第二示例性实施例的数字广播流发送设备800和数字广播流发送设备100可将针对立体视频的左视点视频、立体视频的右视点视频和2D视频中的每一个的单节目传输流复用为单个多节目传输流,并经由单个信道发送所述单个多节目传输流。用于左视点视频的单节目编码器810可设置用于将右视点视频标识为与左视点视频对应的链接信息815,并可将链接信息815插入第一单节目传输流SP TSl的PMT信息。 用于右视点视频的单节目编码器830可设置用于将左视点视频标识为与右视点视频对应的链接信息835,并可将链接信息835插入第三单节目传输流SP TS3的PMT信息。如果存在与2D视频关联的视频,则用于2D视频的单节目编码器820可设置用于标识关联的视频的链接信息825,并可将链接信息825插入第二单节目传输流SP TS2的PMT信息。根据第二示例性实施例的单节目编码器810、820和830可符合各个数字数据通信系统。例如,先进电视系统委员会(ATSC)地面广播通信方法支持高级残余边带(E-VSB)技术。在VSB技术中,可按照与MPEG技术不同的方式构建TS。例如,由于根据示例性实施例的链接信息被插入将被发送的TS,因此可按照MPEG传输流的形式发送基本视点视频流,并可按照E-VSB传输流的形式发送附加视点视频流。根据第二示例性实施例的单节目编码器810、820和830可符合各个视频编码系统。由于根据示例性实施例的链接信息被插入TS的PMT信息,因此可根据MPEG-2视频编码方法对基本视点视频进行编码,并根据MPEG高级视频编码(AVC)/H. 264编码方法对附加视点视频进行编码。根据第二示例性实施例,数字广播流接收设备200可接收经由单个信道发送的、针对立体视频的左视点视频、立体视频的右视点视频和2D视频的单个多节目传输流,将单个多节目传输流解复用为针对左视点视频的单节目传输流、针对右视点视频的单节目传输流和针对2D视频的单节目传输流,并从所述单节目传输流提取至少一个,从而恢复期望的视频序列数据。根据第二示例性实施例,数字广播流接收设备200的ES提取单元220可提取链接信息。根据第二示例性实施例的再现单元230可通过使用链接信息识别与左视点视频序列对应的右视点视频序列,并因此执行3D再现。ES提取单元220还可在搜索与第一单节目传输流对应的第三单节目传输流并分别从第一单节目传输流和第三单节目传输流提取ES时使用链接信息。图9是根据上述第三示例性实施例的经由单个信道发送包括3D视频流和2D视频流的单个TS的数字广播流发送设备900的框图。数字广播流发送设备900与根据第三示例性实施例构建的数字广播流发送设备100的框图对应。换而言之,数字广播发送设备900的单节目编码器910以及MUX 980的操作对应于根据第三示例性实施例执行的数字广播流发送设备100的ES产生单元110和TS产生单元120的操作。数字广播发送设备900的信道编码器和调制器990以及DTV发送器995的操作对应于根据第三示例性实施例执行的数字广播流发送设备100的发送单元130的操作。单节目编码器910可接收左视点视频、右视点视频和2D视频,并通过使用视频编码器920、930和940来分别产生第一视频基本流Video ESI、第二视频基本流Video ES2和第三视频基本流Video ES3。第一视频基本流VideoESl、第二视频基本流Video ES2和第三视频基本流Video ES3分别被打包器925、935和945打包为第一视频PES包Video PESl、第二视频PES包VideoPES2和第三视频PES包Video PES3。单节目编码器910可接收音频,通过使用音频编码器950将音频转换为音频基本流Audio ES,并通过使用打包器955将音频基本流Audio ES转换为音频PES包Audio PES0单节目编码器910的MUX 960可将第一视频PES包、第二视频PES包和第三视频PES包以及音频PES包复用为第一单节目传输流SP TSl。单节目编码器910还可接收由PSI和PSIP产生器970产生的PMT信息以及各种附加数据DATA,并通过使用MUX 960将PMT信 息和附加数据DATA与第一视频PES包、第二视频PES包和第三视频PES包以及音频PES包复用在一起,从而使PMT信息和附加数据DATA被插入第一单节目传输流SP TSl。第一单节目传输流SP TSl可随后被输出。3D视频数据和其它2D视频数据中的至少一个可与PMT信息被复用到第二单节目传输流SP TS2。PSI和PSIP产生器970可产生包括PMT信息的PID的PAT信息和关于各种节目和系统信息的PSIP,其中,所述PMT信息包括在第一单节目传输流SP TSl和第二单节目传输流SP TS2中。MUX 980可将第一单节目传输流SP TSl和第二单节目传输流SPTS2、PAT信息以及PSIP复用为单个多节目传输流MP TS0信道编码器和调制器990可根据信道对多节目传输流MP TS进行编码和调制。DTV发送器995可发送分配给信道的广播视频流。因此,根据第三示例性实施例的数字广播流发送设备900和数字广播流发送设备100可将针对所有的立体视频的左视点视频、立体视频的右视点视频和2D视频的ES复用为单个单节目传输流,并经由单个信道发送所述单个多节目传输流。单节目编码器910可将用于将彼此对应的左视点视频或右视点视频标识为立体视频的多个视频(即,指示多个视频被立体链接)的链接信息分别设置到第一视频PES包或第二视频PES包,并可将立体链接信息插入第一单节目传输流SP TSl的PMT信息。根据第三示例性实施例的单节目编码器910可根据独立的数字数据通信方法产生TS。例如,可按照MPEG传输流的形式产生第一单节目传输流SPTSl,可按照E-VSB传输流的形式发送第二单节目传输流SP TS2,并可将链接信息插入第一单节目传输流SP TSl的PMT信息和第二单节目传输流SPTS2的PMT信息中的每一个。根据第三示例性实施例的视频编码器920和930可符合独立的视频编码方法。例如,可根据MPEG-2视频编码方法对基本视点视频进行编码,可根据MPEG AVC/H. 264视频编码方法对附加视点视频进行编码,并可将链接信息插入第一单节目传输流SP TSl的PMT信息和第二单节目传输流SP TS2的PMT信息中的每一个。根据第三示例性实施例,数字广播流接收设备200可提取经由单个信道发送的、针对立体视频的左视点视频、立体视频的右视点视频、2D视频以及音频的单个多节目传输流,对所述单个多节目传输流进行解复用,从而选择和提取期望的单节目传输流。另外,根据第三示例性实施例的数字广播流接收设备200可从提取的单节目传输流选择和提取针对立体视频的左视点视频的视频ES、针对立体视频的右视点视频的视频ES和针对2D视频的视频ES,从而恢复期望的视频数据。根据第三示例性实施例,数字广播流接收设备200的ES提取单元220可提取链接信息。根据第三示例性实施例的再现单元230可通过使用链接信息来识别与左视点视频数据对应的右视点视频数据,并因此可准确地再现3D视频。ES提取单元220还可在搜索和提取与第一视频ES对应的第二视频ES时使用链接信息。图10是根据上述的第四示例性实施例的经由基于多个传输网络系统的多个信道接收多个TS的数字广播流接收设备1000的框图。根据第四示例性实施例,数字广播流发送设备1000经由基于各个传输网络系统(例如,地面系统1010、卫星TV系统1012、有线TV系统1014、互联网协议电视(IPTV)系统 1016等)的不同信道接收针对左视点视频的TS和针对右视点视频的TS。数字广播流接收设备1000对应于根据第四示例性实施例构建的数字广播接收设备200的框图。换而言之,数字广播流接收设备1000的地面数字调谐器1020或卫星数字调谐器1060以及信道解码器和解调器1030和1070的操作可对应于根据第四示例性实施例执行的数字广播流接收设备200的TS接收单元210的操作,数字广播流接收设备1000的TS DEMUX 1040和1080以及单节目解码器1050和1090的操作可对应于根据第四示例性实施例执行的数字广播流接收设备200的ES提取单元220的操作。数字广播流接收设备1000可以是数字TV接收系统。数字广播流接收设备1000可经由与地面系统1010、卫星TV系统1012、有线TV系统1014和IPTV系统1016对应的多个信道接收广播流。地面数字调谐器1020以及信道解码器和解调器1030被调谐到地面信道以提取经由地面波接收的多节目传输流。在这种情况下,可经由地面信道接收针对立体视频的左视点视频的TS。卫星数字调谐器1060以及信道解码器和解调器1070被调谐到卫星信道以提取经由卫星波接收的多节目传输流。在这种情况下,可经由卫星信道接收针对立体视频的右视点视频的TS。TS DEMUX 1040和1080可将多节目传输流解复用为多个单节目传输流。单节目解码器1050和1090可分别将单节目传输流恢复为左视点视频和右视点视频。在这种情况下,经由地面信道接收和提取的针对左视点视频的单节目传输流可包括关于构成立体图像的其余视点的右视点视频的链接信息1055。在这种情况下,左视点视频的链接信息可包括指示经由卫星信道接收的右视点视频的信道、TS或ES的标识符。经由卫星信道接收和提取的针对右视点视频的单节目传输流可包括关于左视点视频的链接信息1095。右视点视频的链接信息可包括指示经由地面信道接收的左视点视频的信道、TS或ES的标识符。数字广播流接收设备1000可通过使用用于再现3D视频的链接信息来检测分别经由地面信道和卫星信道接收的左视点视频和右视点视频,从而提供3D视频广播服务。图11示出根据上述的第五示例性实施例的信道频带1100的分布的示例,在信道频带1100中,可经由多个信道发送和接收针对3D视频的左视点视频的多个TS,并可经由单个信道发送和接收针对3D视频的右视点视频的TS。信道频带1100包括用于信道8的频带1110、用于信道9的频带1120和用于频道10的频带1130。根据第五示例性实施例,第一立体视频的左视点视频Left Video I和第二立体视频的左视点视频Left Video 2分别被分配给用于信道9的频带1120和用于信道10的频带1130。可通过用于信道8的频带1110发送和接收针对第一立体视 频的右视点视频RightVideo I的TS 1140和针对第二立体视频的右视点视频Right Video 2的TS 1150。在这种情况下,可在第一立体视频的左视点视频Left Video I和右视点视频Right Video I的信道(视频流)之间以及第二立体视频的左视点视频Left Video 2和右视点视频Right Video 2的信道(视频流)之间设置链接信息,该链接信息指示在立体视频的多个视频之间存在关联,即,指示多个视频被立体链接。虽然在图11中没有示出,但是如果另一左视点视频被分配给另一信道,则可经由用于信道8的频带1110发送针对另一右视点视频的TS 1160。如果信道频带1100足够大,则还可发送针对其它数据的TS 1170。因此,根据第五示例性实施例的数字广播流发送设备100可对针对至少一个左视点视频的ES进行复用以产生针对所述至少一个左视点视频的至少一个单节目传输流,并从所述至少一个单节目传输流产生至少一个左视点多节目传输流。根据第五示例性实施例的数字广播流发送设备100还可对针对与所述至少一个左视点视频对应的至少一个右视点视频的ES进行复用以产生针对所述至少一个右视点视频的至少一个单节目传输流,并从所述至少一个单节目传输流产生单个右视点多节目传输流。因此,根据第五示例性实施例的数字广播流发送设备100可经由不同的信道发送至少一个左视点多节目传输流和单个右视点多节目传输流。根据第五示例性实施例的数字广播流接收设备200可对多个信道进行解码以从所述多个信道中的至少一个接收3D视频的左视点多节目传输流,并从所述多个信道之一接收3D视频的右视点多节目传输流。根据第五示例性实施例的数字广播流接收设备200可单独地对至少一个左视点多节目传输流进行解复用以提取至少一个左视点单节目传输流,并可对所述至少一个左视点单节目传输流进行解复用以提取至少一个左视点基本流。根据第五示例性实施例的ES提取单元220可对单个右视点多节目传输流进行解复用以提取至少一个右视点单节目传输流,并单独地对所述至少一个右视点单节目传输流进行解复用以提取至少一个右视点基本流。因此,根据第五示例性实施例的数字广播流接收设备200可经由多个信道提取针对3D视频信息或2D视频信息的多个ES。另外,根据第五示例性实施例的数字广播流接收设备200可通过使用链接信息来三维地再现相互关联的立体视频。以上参照图5到图11关于3D视频的立体视频描述了数字广播流发送设备100和数字广播流接收设备200的第一到第五示例性实施例。然而,应理解,另外的示例性实施例不限于立体图像。例如,3D视频可以是包括至少三个视点视频的多视点视频。根据上述的第一到第五示例性实施例,可经由至少一个信道和至少一个TS发送或接收相互关联的多个视频流。
根据第二和第三示例性实施例,可经由单个信道发送或接收相互关联的左视点视频流和右视点视频流。例如,提出了这样的情况实施第二或第三示例性实施例以保持与现有技术2D数字地面广播系统的兼容性。当2D数字地面广播系统以第一比特率在19. 38Mbps附近的频带内发送和接收单个视频流时,2D数字地面广播系统可以以低于第一比特率的第二比特率发送和接收基本视点视频流,并以剩余的比特率发送附加视点视频流,以便实现第二或第三示例性实施例。根据第二和第三示例性实施例,经由单个信道发送和接收基本视点视频信息和附加视点视频信息,因此可以在不使用附加信道的情况下实现与现有广播系统的兼容性。当使用高压缩能力编码和解码方法来压缩视频数据时,最小化了由于基本视点视频流的压缩造成的数据损失,并且可经由单个信道与附加视点视频信息一起发送和接收基本视点视频流。根据第一、第四和第五示例性实施例,可经由多个信道发送和接收基本视点视频流和附加视点视频流。例如,如果实施第一、第四和第五示例性实施例以允许保持与现有技术2D数字地面广播系统的兼容性,则可经由现有信道发送基本视点视频流,并可经由附加信道发送附加视点视频流。 根据第一、第四和第五示例性实施例,经由不同的信道发送和接收基本视点视频信息和附加视点视频信息,因此,如果第一、第四和第五示例性实施例在逐个信道的基础上与现有技术广播系统兼容,则可在不使显示的图像的质量降级的情况下提供多视点数字内容广播服务。图12示出根据示例性实施例的信道频带1200的分布的示例,在信道频带1200中,可经由单个信道发送和接收针对多视点视频流的多个TS。信道频带1200包括用于信道8的频带1210和用于信道9的频带1220等。根据本示例性实施例,可通过用于信道8的频带1210发送和接收针对多视点视频的第一视点视频信息Video I的TS 1230、针对多视点视频的第二视点视频信息Video 2的TS 1240、针对多视点视频的第三视点视频信息Video 3的TS 1250、针对多视点视频的第四视点视频信息Video 4的TS 1260和针对多视点视频的第五视点视频信息Video 5的TS1270。如果第三视点视频信息Video 3是主视点视频,则可设置链接信息“3d linked”,用于表示在第一视点视频信息Video I、第二视点视频信息Video 2、第四视点视频信息Video 4和第五视点视频信息Video 5中的每一个与第三视点视频信息Video 3之间存在的链接。根据本示例性实施例的用于实现多视点视频服务的数字广播流发送设备100可将构成多视点视频的多个视点的视频的ES分别转换为单节目传输流,将针对各个视点的单节目传输流复用为单个多节目传输流,并经由单个信道发送单个多节目传输流。以下,多个视点的多个视频被称为多个视点视频。根据本示例性实施例的用于实现多视点视频服务的数字广播流接收设备200可对单个信道进行解码以提取单个多节目传输流,并可对单个多节目传输流进行解复用以提取针对多个视点视频的各个单节目传输流。多个视点视频构成一个多视点视频,可从针对所述多个视点视频的单节目传输流提取针对所述多个视点视频的各个ES。因此,根据本示例性实施例的数字广播流接收设备200可最终经由单个信道提取所述多个视点视频的单节目传输流和所述多个视点视频的ES,并因此再现恢复的多个视点视频。由于根据图I的示例性实施例的数字广播流发送设备100经由不同的信道、TS或ES发送相互关联的多条视频信息,因此根据图2的示例性实施例的数字广播流接收设备200可检查已经通过哪个信道、TS或ES接收了与提取的视频信息关联的视频信息。为此,根据图I的示例性实施例的数字广播流发送设备100和根据图2的示例性实施例的数字广播流接收设备200使用表示3D视频(诸如立体视频或多视点视频)之间的关联的链接信肩、O由于根据图I的示例性实施例的数字广播流发送设备100将相互关联的多条3D视频信息转换为发送格式,并以该发送格式发送相互关联的多条3D视频信息,因此根据图2的示例性实施例的数字广播流接收设备200可确定3D视频的特征以便正确地将相互关联的多条3D视频信息恢复为3D再现格式,并以该3D再现格式再现相互关联的多条3D视频信息。因此,根据图I的示例性实施例的数字广播流发送设备100和根据图2的示例性实施例的数字广播流接收设备200使用用于表示3D视频信息的存在或不存在的3D视频开始 描述符或3D视频注册描述符以及3D视频流描述符,以准确的恢复和再现3D视频信息。现在将参照表I到表18来描述示例性实施例,其中,图I的数字广播流发送设备100和图2的数字广播流接收设备200通过使用PSI发送和接收链接信息、3D视频开始描述符或3D视频注册描述符以及3D视频流描述符。根据示例性实施例的链接信息可包括链接标识符和链接描述符,其中,链接标识符表示在TS中包括的多条视频信息中是否存在关联的多条视频信息,链接描述符用于标识与每条视频信息关联的视频信息的ES、TS或信道。图I的数字广播流发送设备100的TS产生单元120可将根据示例性实施例的链接标识符插入PAT信息。图2的数字广播流接收设备200的ES提取单元220检查从TS提取的PAT信息中所包括的链接标识符,并预测包括在TS中的多条PMT信息之间的链接。相互关联的多条PMT信息包括定义多条视频信息之间的链接的链接描述符。例如,可针对PAT信息内的每个PMT信息另外设置包括链接标识符的参数“ linked_indicator”。如果当前 PMT 信息的参数 “ linked_indicator” 是 000,则 PAT 信息所指示的至少一条相对PMT信息中没有PMT信息与当前PMT信息关联。另一方面,如果当前PMT信息的参数“linked_indicator”是001到111中的一个,则PAT信息所指示的至少一条相对PMT信息中包括具有与当前PMT信息相同的值的参数“linkecLindicator”的PMT信息与当前PMT信息关联。换而言之,包括具有相同值的参数“linkecLindicator”的多条PMT信息均可包括定义它们之间的链接的链接描述符。图I的数字广播流发送设备100的TS产生单元120可将根据示例性实施例的链接描述符插入PMT信息。可针对每个视频信息设置链接描述符。图2的数字广播流接收设备200的ES提取单元220可检查从单节目传输流提取的PMT信息中包括的链接描述符,并确定与包括在单节目传输流中的视频信息对应的相对视频信息的位置。因此,图2的设置广播流接收设备200可检测相互关联的多条视频信息,并从相互关联的多条视频信息恢复多条视频息。表I显示了 PMT信息的参数“program_stream_map () ”的语法的示例。根据示例性实施例的链接描述符包括在参数“linked_descriptor”中。参数“linked_descriptor”可包括在作为以下参数“elementary_stream_info_length”的描述符区的参数“descriptor () ” 中,参数“elementary_stream_info_length” 包括在参数“program_stream_map (),,中。表I
权利要求
1.一种提供三维(3D)视频服务的数字广播流发送方法,所述方法包括 产生针对多条视频信息的多个基本流,所述多条视频信息包括关于3D视频的基本视点视频的彳目息、关于与基本视点视频相应的附加视点视频的彳目息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个; 通过将产生的所述多个基本流与链接信息进行复用来产生至少一个传输流,其中,所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息; 经由至少一个信道发送产生的所述至少一个传输流。
2.如权利要求I所述的数字广播流发送方法,其中 产生所述至少一个传输流的步骤包括单独地对产生的所述多个基本流中的每一个进行复用以产生多个单节目传输流;单独地对产生的所述多个单节目传输流中的每一个进行复用以产生多个多节目传输流; 发送产生的所述至少一个传输流的步骤包括经由不同的信道发送产生的所述多个多节目传输流。
3.如权利要求I所述的数字广播流发送方法,其中,产生所述至少一个传输流的步骤包括 单独地对产生的所述多个基本流中的每一个进行复用以产生多个单节目传输流;对产生的所述多个单节目传输流进行复用以产生单个多节目传输流; 发送产生的所述至少一个传输流的步骤包括经由单个信道发送产生的所述单个多节目传输流。
4.如权利要求I所述的数字广播流发送方法,其中 产生所述至少一个传输流的步骤包括 对产生的所述多个基本流中的针对至少一个基本视点视频的每个基本视点基本流进行复用,以产生针对所述至少一个基本视点视频的至少一个基本视点单节目传输流,并对产生的所述至少一个基本视点单节目传输流中的每一个进行复用以产生针对所述至少一个基本视点视频的至少一个基本视点多节目传输流; 对产生的所述多个基本流中的、针对关于对应于所述至少一个基本视点视频的至少一个附加视点视频的信息的附加视点基本流进行复用,以产生针对所述至少一个附加视点视频的单个附加视点单节目传输流,并对产生的所述单个附加视点单节目传输流进行复用以产生针对所述至少一个附加视点视频的单个附加视点多节目传输流; 发送产生的所述至少一个传输流的步骤包括经由不同的信道发送产生的所述至少一个基本视点多节目传输流和产生的所述单个附加视点多节目传输流。
5.如权利要求I所述的数字广播流发送方法,其中,链接信息包括链接标识符和链接描述符之一,所述链接标识符和链接描述符之一表示在产生的所述至少一个传输流中包括的多条视频信息中是否存在相互链接的多条视频信息, 其中,链接标识符被插入所述至少一个传输流的节目关联表,并且表示这样的信息该信息指示由节目关联表标识的相互链接的多条视频信息的节目映射表是否彼此链接, 其中,链接描述符被插入产生的针对互相链接的多个视频信息的多个基本流的节目映射表。
6.一种提供三维(3D)视频服务的数字广播流接收方法,所述方法包括经由至少一个信道接收针对多条视频信息的至少一个传输流,所述多条视频信息包括关于3D视频的基本视点视频的/[目息、关于3D视频的附加视点视频的彳目息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个; 对接收的所述至少一个传输流进行解复用以从所述至少一个传输流提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个基本流; 对提取的所述至少一个基本流进行解码以基于提取的链接信息再现通过解码恢复的3D视频和2D视频中的至少一个。
7.如权利要求6所述的数字广播流接收方法,其中 接收的步骤包括通过对所述至少一个信道中的每个信道进行解码并从所述至少一个信道中的每个信道接收单个多节目传输流来接收至少一个多节目传输流; 提取的步骤包括 通过对接收的所述至少一个多节目传输流中的每一个进行解复用,并从解复用的所述至少一个多节目传输流中的每一个提取单个单节目传输流,来提取至少一个单节目传输流; 通过对提取的所述至少一个单节目传输流中的每一个进行解复用,并从解复用的所述至少一个单节目传输流中的每一个提取单个基本流,来提取所述至少一个基本流。
8.如权利要求6所述的数字广播流接收方法,其中 接收的步骤包括通过对所述至少一个信道中的一个信道进行解码来经由该信道接收多节目传输流; 提取的步骤包括 通过对接收的多节目传输流进行解复用来提取至少一个单节目传输流; 通过对提取的所述至少一个单节目传输流中的每一个进行解复用,并从解复用的所述至少一个单节目传输流中的每一个提取单个基本流,来提取所述至少一个基本流。
9.如权利要求6所述的数字广播流接收方法,其中 接收的步骤包括通过对所述至少一个信道中的一个信道进行解码来经由该信道接收多节目传输流; 提取的步骤包括 通过对接收的多节目传输流进行解复用来提取单节目传输流; 通过对提取的单节目传输流进行解复用来提取所述至少一个基本流。
10.如权利要求6所述的数字广播流接收方法,其中 接收的步骤包括通过对所述至少一个信道中的每一个信道进行解码,并经由所述至少一个信道中的每个信道接收至少一个基本视点多节目传输流和单个附加视点多节目传输流中的单个多节目传输流,来接收针对基本视点视频的至少一个基本视点多节目传输流和针对附加视点视频的单个附加视点多节目传输流; 提取步骤包括 通过将接收的所述至少一个基本视点多节目传输流中的每一个解复用为单个单节目传输流,来从接收的所述至少一个基本视点多节目传输流提取至少一个基本视点单节目传输流,并通过将提取的所述至少一个基本视点单节目传输流中的每一个进行解复用为一个基本视点基本流,来提取至少一个基本视点单节目传输流; 从接收的单个附加视点多节目传输流提取至少一个附加视点单节目传输流,并通过将提取的所述至少一个附加视点单节目传输流中的每一个解复用为一个附加视点基本流,来从提取的所述至少一个附加视点单节目传输流提取至少一个附加视点基本流。
11.如权利要求6所述的数字广播流接收方法,其中,链接信息包括链接标识符和链接描述符之一,所述链接标识符和链接描述符之一表示在接收的所述至少一个传输流中包括的多条视频信息中是否存在相互链接的多条视频信息, 其中,链接标识符从所述至少一个传输流的节目关联表被提取,并且表示这样的信息该信息指示由节目关联表标识的相互链接的多条视频信息的节目映射表是否彼此链接,其中,链接描述符从针对相互链接的多条视频信息的所述至少一个基本流的节目映射表被提取。
12.—种其上记录有用于权利要求I的数字广播流发送方法的程序的计算机可读记录介质。
13.一种其上记录有用于权利要求6的数字广播流接收方法的程序的计算机可读记录介质。
14.一种提供三维(3D)视频服务的数字广播流发送设备,所述设备包括 基本流产生单元,产生针对多条视频信息的多个基本流,所述多条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的彳目息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个; 传输流产生单元,通过将产生的所述多个基本流与链接信息进行复用来产生至少一个传输流,其中,所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息; 发送单元,经由至少一个信道发送产生的所述至少一个传输流。
15.一种提供三维(3D)视频服务的数字广播流接收设备,所述设备包括 传输流接收单元,经由至少一个信道接收针对多条视频信息的至少一个传输流,所述多条视频 目息包括关于3D视频的基本视点视频的/[目息、关于3D视频的附加视点视频的/[目息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个; 基本流提取单元,对接收的所述至少一个传输流进行解复用以从所述至少一个传输流提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个基本流; 再现单元,基于链接信息所表示的链接,再现通过对提取的所述至少一个基本流进行解码而恢复的3D视频数据和2D视频数据中的至少一个。
全文摘要
提供了一种数字广播流发送方法。所述发送方法包括产生针对多条视频信息的多个基本流(ES),所述多条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个;通过将所述多个ES与链接信息进行复用来产生至少一个传输流(TS),其中,所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息;经由至少一个信道发送产生的所述至少一个TS。
文档编号H04H20/86GK102835047SQ201180016428
公开日2012年12月19日 申请日期2011年1月28日 优先权日2010年1月28日
发明者金容台, 李栽准, 张庸硕, 郑吉洙, 朴洪奭 申请人:三星电子株式会社