专利名称：信息回放设备及信息回放方法
技术领域：
本发明涉及一种信息回放设备及一种信息回放方法，用于同步回放包含视频和音频的多个流。
背景技术：
已知的是，在一个累积介质播放器里，通过使用预置系统时钟(STC)作为主时钟来同步回放视频和音频，该累积介质播放器从诸如光盘的存储介质里，例如数字多功能磁盘(DVD)，读出包含了存储在存储介质中的该视频和音频的单个流，并对该流进行回放。
另一方面，近年来开发了一种信息回放设备，该信息回放设备能够将每一个均包含视频和音频的多个流作为输入，并且相对于从输入的流中选出的主流中的视频和音频，该信息回放设备对其它流中的视频和音频进行同步回放。
在这种信息回放设备里，需根据与其他流同步的主流来设定作为主时钟的STC；否则，显示的主流中的视频可能产生跳跃，或音频可能被中断，令正在观看和收听的用户感到不适。
公开号为2002-281445的日本专利申请公开了以下结构设置。即，将视频和音频每一编码数据中的回放时间管理信息(PTS)与预置STC作比较，以检测出同步及异步状态，并且在同步状态下将允许解码发送到解码处理单元而在异步状态下将不允许解码发送到解码处理单元中。这样，减少了视频和音频之间的同步错位或因转送路径出错导致的回放中断。
发明内容
本发明正是基于考虑到上述缺陷及其它问题而提出的。本发明的一个目的是提供一种信息回放设备及一种信息回放方法，可同步回放多个流而不会令用户对视频和音频感到不适。
根据本发明的一个方面，提供一种信息回放设备，包含输入单元，配置成用于接收每一个均包含视频和音频的多个流；选择单元，配置成用于从输入到输入单元的多个流里选择出一预定流；以及同步回放单元，配置成通过使用选择单元所选流的音频回放时间作为主时钟，来同步回放被选的流的视频和未被选的流的视频和音频。
根据本发明的另一方面，提供一种信息回放方法，包含第一步，输入多个流，其中的每个流包含视频和音频；第二步，从第一步里输入的多个流中选择一预定流；以及第三步，通过使用在第二步中选择的流的音频回放时间作为主时钟，来对被选的流的视频和未被选的流的视频和音频进行同步回放。
图1为示意性示出根据本发明一个实施例的一种信息回放设备的结构示意框图；图2为根据该实施例，该信息回放设备的解码处理单元的详细示意框图；图3和图4为在主流切换情况下，每一个分别示出该实施例的一个示例显示视频的示意图；图5为根据该实施例的信息回放设备的同步回放操作的流程图；以及图6为根据该实施例的信息回放设备上所显示的示范主流选择屏幕的示意图。
具体实施例方式
接下来将参照附图对本发明的一个实施例进行详尽描述。图1为本实施例所述的一个信息回放设备11的示意图。具体地说，该信息回放设备11具有多个输入终端121到12n。
从输入终端121到12n输入的是每一个均包含视频和音频的输入的流，诸如从DVD之类的存储媒介中回放的流、通过接收广播而获得的流、以及通过网络获得的流。
输入到输入终端121到12n的流被分别提供给数据处理单元131到13n，并进行预定的数据处理，比如格式调整，然后将已处理的流提供给解码处理单元14。
解码处理单元14将每一输入的流分为视频信号和音频信号。之后，该解码处理单元14对每一已分离的视频信号进行解码处理，并将解码的视频信号输出到视频处理单元15。
视频处理单元15按照用户要求的视频显示格式将输入的视频信号结合，并通过输出终端16将结合的视频信号提供到外部视频显示单元17，从而显示该视频。
另外，解码处理单元14对每个已分离的音频信号进行解码处理并将解码的音频信号输出到音频处理单元18。该音频处理单元18从输入的音频信号中选择出用户要求的一个音频信号，然后通过输出终端19将被选音频信号提供给外部扬声器20，从而回放该音频。
信息回放设备11中，包括前述各回放操作在内的多个操作步骤均由控制单元21综合控制。控制单元21是一个合并了中央处理器(CPU)或类似器件的微处理器。该控制单元21接收来自于操作单元22的操作信息，或通过感光器单元24接收来自于遥控器23的操作信息，从而控制每一单元以反映操作内容。
在这种情况下，控制单元21采用了存储单元25。该存储单元25主要包含一个只读存储器(ROM)，存有由CPU执行的控制程序；一个随机存储器(RAM)，为CPU提供工作区域；以及一个非易失性存储器，用于存放各种设置信息、控制信息等。
图2为解码处理单元14的详细框图。为简略起见，图2的解码处理单元14被示意为可接收两个流作为输入。具体而言，解码处理单元14具有第一输入终端261和第二输入终端262。
流1和2分别输入到第一输入终端261和第二输入终端262，该流1和2的每一个都被提供给多路分离器27并被分离成视频信号和音频信号。多路分离器27把从流1和2分离出的视频和音频信号以打包基本流(PES)格式输出，此格式中已加入了显示时间标记(PTS)，即管理这些信号的回放时间的信息。
这些信号中，从流1分离出的视频信号通过输入缓冲器28被提供给视频解码器29，从而对该视频信号进行解码处理。之后，把由STC产生单元30产生的用于系统管理的时间信息STC与输入视频信号所含的具有PES格式的PTS相比较，从而确定已解码视频信号的输出定时，并且随后该视频解码器29通过输出终端31将该视频信号输出至视频处理单元15。
从流1分离出的音频信号通过输入缓冲器32被提供给音频解码器33，从而对该音频信号进行解码处理。然后，音频解码器33将STC产生单元34输出的STC与输入音频信号所含的具有PES格式的PTS相比较，从而确定已解码音频信号的输出定时，并且随后该音频解码器33通过输出终端35将该音频信号输出至音频处理单元18。
被音频解码器33解码的音频信号的PTS和STC产生单元34输出的STC被一起提供给差值计算单元36，并计算出PTS与STC之间的差值Δstc1。将该差值Δstc1提供给结合在多路分离器27内部的选择器37的一个输入终端。
从流2分离出的视频信号通过输入缓冲器38提供给视频解码器39，从而对该视频信号进行解码处理。然后视频解码器39将STC产生单元40输出的STC与输入视频信号所包含的具有PES格式的PTS相比较，从而确定已解码视频信号的输出定时，并且随后该视频解码器39通过输出终端41将该视频信号输出至视频处理单元15。
从流2分离出的音频信号通过输入缓冲器42提供给音频解码器43，从而对该音频信号进行解码处理。然后，音频解码器43将STC产生单元44输出的STC与输入音频信号所含的具有PES格式的PTS相比较，从而确定已解码音频信号的输出定时，并且随后由该音频解码器43通过输出终端45将该音频信号输出至音频处理单元18。
被音频解码器43解码的音频信号的PTS和STC产生单元44输出的STC被一起提供给差值计算单元46，并计算出PTS与STC之间的差值Δstc2。将该差值Δstc2提供至结合在多路分离器27内部的选择器37的另一个输入终端。
根据控制单元21通过控制终端47提供的一个选择信号，选择器37可将被提供给两个输入终端的差值Δstc1和Δstc2其中任一提供给STC产生单元30、34、40及44的每一个。
STC产生单元30、34、40及44的每一个的功能为将选择器37提供的差值Δstc1和Δstc2之一作为偏移量分别提供给从各自的STC产生单元产生的STC。
现在开始对流1和2的同步回放进行说明。在流1被选为主流，而流2保持与流1同步的情况下，在视频显示单元17上提供多屏幕显示，以使流1的视频为主视频，而流2的视频为子视频，如图3所示。此时，从扬声器20回放流1的音频。
作为另一种选择，当流2被选为主流而流1保持与流2同步时，在视频显示单元17上提供多屏幕显示，以使流2的视频为主视频，而流1的视频为子视频，如图4所示。此时，从扬声器20回放流2的音频。
用户可通过操作遥控器23上的切换键或类似键来容易的完成将流1和2之一用作主流的选择，即对主流的选择。流1和2的任一被选为主流，其音频的STC将成为主时钟。
更具体地说，如图3所示，当选择流1作为主流时，用于流1的音频的STC成为主时钟；而如图4所示，当流2被选为主流时，用于流2的音频的STC成为主时钟。
结果，举例来说，当流2被选为主流时，控制单元21产生一个选择信号，来对选择器37进行控制，从而将差值计算单元46输出的差值Δstc2提供给STC产生单元30、34、40及44。因此，各STC产生单元30、34、40及44把选择器37提供的各差值Δstc2作为偏移量分别提供给从各自的STC产生单元产生的STC。
视频解码器29对从STC产生单元30获得的已被提供了差值Δstc2作为偏移量的STC的值与下一次将输出的视频信号的PTS作比较。若STC超前于PTS，则跳过对非参考视频信号的解码处理。若STC比PTS延迟，则通过重复当前输出视频来将PTS的值调整到STC。更具体地说，流1的视频信号输出定时能与流2的音频信号输出定时同步。
视频解码器39还对从STC产生单元40获得的已被提供了差值Δstc2作为偏移量的STC的值与下一次将输出的视频信号的PTS作比较。若STC超前于PTS，则跳过对非参考视频信号的解码处理。若STC比PTS延迟，则通过重复当前输出视频来将PTS的值调整到STC。更具体地说，流2的视频信号输出定时能与流2的音频信号输出定时同步。
而且，音频解码器33对从STC产生单元34获得的已被提供了差值Δstc2作为偏移量的STC的值与下一次将输出的音频帧的PTS作比较。若STC超前于PTS，则跳过对此音频帧的解码处理。若STC比PTS延迟，则通过停止解码处理来将PTS的值调整到STC。更具体地说，流1的音频信号的输出定时能与流2的音频信号的输出定时同步。
流程图5对前述同步回放操作进行了概括。即，当处理开始时(步骤S1)，步骤S2中控制单元21检测主流的切换状态，并在步骤S3中判定主流是流1还是2。
若判定出主流为流2，则在步骤S4中，控制单元21控制选择器37，使得从差值计算单元46输出的差值Δstc2被提供给STC产生单元30、34、40及44。
接下来，在步骤S5中，除开处理流2的音频信号的音频解码器43以外，视频解码器29与39以及音频解码器33的每一个将已提供了差值Δstc2作为偏移量的STC与下一输出信号的PTS相比较，并执行操作，以使PTS的值调整到STC，从而处理过程结束(步骤S6)。
因此，在对作为主流的流2进行回放期间，执行同步回放，从而使流2的视频与未被选的流1的视频和音频同步。
若在步骤S3里判定出流1为主流，则控制单元21将在步骤S7中控制选择器37，从而将差值计算单元36输出的Δstc1提供给STC产生单元30、34、40及44。
在接下来的步骤S8中，除开处理流1的音频信号的音频解码器33以外，视频解码器29与39以及音频解码器43的每一个将已提供了差值Δstc1作为偏移量的STC与下一输出信号的PTS相比较，并执行操作，以将PTS的值调整到STC，从而处理过程结束(步骤S6)。
因此，在对作为主流的流1的音频进行回放期间，执行同步回放，从而使流1的视频与未被选的流2的视频和音频同步。
根据上述实施例，流1和2被同步回放时，从主流的音频获得STC主时钟。因此，流1和2能被同步回放，而不会令用户对视频和音频感到不适。
尽管上述实施例所描述的情况里，同步回放的是两个流1和2，但本发明并不局限于此。毋庸多言，即使有3个或更多流被同步回放，也能通过从主流的音频获得一个STC主时钟来实现同步回放。
当输入3个或更多流时，用户操纵遥控器23，来在视频显示单元17上显示主流选择屏幕，如图6所示。然后通过操作遥控器23，从主流选择屏幕上所显示的多个流中选出期望的流，从而设定主流。
本发明并非只局限于上述实施例，在实施阶段，可在本发明涉及范围之内对其组成部分进行各种改换来实施本发明。另外，对上述实施例中公开的各组成部分进行适当组合还可创造出不同的发明。比如，该实施例中的所有部件中的一些可以省略。而且可适当地结合另一实施例的组成部分。
权利要求
1.一种信息回放设备，其特征在于包含输入单元(261，262)，配置来用于接收各自包含视频和音频的多个流(1，2)；选择单元(17，21，23)，配置来从输入到输入单元(261，262)的多个流(1，2)中选择一个预定流；以及同步回放单元(27到47)，配置来通过使用选择单元(17，21，23)所选流的音频回放时间作为主时钟，来对被选流的视频及未被选的流的视频和音频进行同步回放。
2.根据权利要求1的一种信息回放设备，其特征在于，所述同步回放单元(27到47)包含多个视频解码单元(29，39)，其分别提供给输入到所述输入单元(261，262)的多个流(1，2)，并配置成用于对包含于各自流中的视频信号进行解码处理；多个音频解码单元(33，43)，其分别提供给输入到所述输入单元(261，262)的多个流(1，2)，并配置成用于对包含于各自流中的音频信号进行解码处理；以及同步控制单元(36，37，46)，配置成使一个音频解码单元输出的音频信号的输出定时与另一个音频解码单元输出的音频信号的输出定时同步，其中所述一个音频解码单元对未被选的流的音频信号和所述多个视频解码单元(29，39)输出的视频信号进行解码处理，所述另一个音频解码单元对所述选择单元(17，21，23)选出的流的音频信号进行解码处理。
3.根据权利要求2的一种信息回放设备，其特征在于所述的多个视频解码单元(29，39)的每一个配置成把包含于将要输入的视频信号中的回放时间管理信息(PTS)与为各视频解码单元(29，39)及系统管理而产生的时间信息(STC)作比较，从而确定已解码的视频信号的输出定时，所述的多个音频解码单元(33，43)的每一个配置成把包含于将要输入的音频信号中的回放时间管理信息(PTS)与为各音频解码单元(33，43)及系统管理而产生的时间信息(STC)作比较，从而确定已解码的音频信号的输出定时，以及同步控制单元(36，37，46)，其被配置成将差值(Δstc)作为偏移量提供到为所述多个视频解码单元(29，39)的每一个和所述多个音频解码单元(33，43)的每一个以及为系统管理而产生的时间信息(STC)中，所述差值(Δstc)是包含在选择单元(17，21，23)所选流的音频信号中的回放时间管理信息(PTS)与为了对被选的流的音频信号进行解码处理的音频解码单元和为系统管理而产生的时间信息(STC)之间的差。
4.根据权利要求3的一种信息回放设备，其特征在于所述同步控制单元(36，37，46)包含多个运算单元(36，46)，其分别提供给所述多个音频解码单元(33，43)，并配置成用于计算包含在输入到相应音频解码单元的音频信号中的回放时间管理信息(PTS)与为所述音频解码单元及系统管理而产生的时间信息(STC)之间的差值(Δstc)以及一个差值选择单元(37)，配置成用于从所述多个运算单元(36，46)所获得的差值(Δstc1，Δstc2)中选出一个，并将被选出的差值作为偏移量提供给为所述多个视频解码单元(29，39)的每一个和所述多个音频解码单元(33，43)的每一个以及为系统管理而产生的时间信息(STC)，所述被选出的差值是由提供给某一音频解码单元的运算单元所获得的，该音频解码单元对选择单元(17，21，23)所选的流的音频信号执行解码处理。
5.根据权利要求3的一种信息回放设备，其特征在于包含在音频信号和视频信号中的所述回放时间管理信息是PTS；而为所述多个视频解码单元(29，39)和所述多个音频解码单元(33，43)以及为系统管理而产生的所述时间信息为STC。
6.一种信息回放方法，其特征在于包含第一步(261，262)，输入多个流(1，2)，所述各流均包含视频和音频；第二步(17，21，23，S2，S3)，从第一步(261，262)中被输入的多个流(1，2)里选择一个预定流；以及第三步(27到47，S4，S5，S7，S8)，通过使用第二步(17，21，23，S2，S3)中所选流的音频回放时间作为主时钟，来对被选的流的视频和未被选的流的视频和音频进行同步回放。
7.根据权利要求6的一种信息回放方法，其特征在于所述第三步(27到47，S4，S5，S7，S8)包含第四步，由分别提供给在第一步(261，262)中输入的多个流(1，2)的视频解码单元(29，39)来对包含于各个流(1，2)的视频信号进行解码处理；第五步，由分别提供给在第一步(261，262)中输入的多个流(1，2)的音频解码单元(29，39)来对包含于各个流(1，2)的音频信号进行解码处理；以及第六步(36，37，46，S4，S5，S7，S8)，同步化。使一个音频解码单元输出的音频信号的输出定时和来自另一音频解码单元的音频信号的输出定时同步，其中所述一个音频解码单元对未被选的流的音频信号和所述多个视频解码单元(29，39)输出的视频信号进行解码处理，所述另一个音频解码单元对在第二步(17，21，23，S2，S3)中所选的流的音频信号进行解码处理。
8.根据权利要求7的一种信息回放方法，其特征在于所述多个视频解码单元(29，39)各有一步骤，来将包含于将要输入的视频信号中的回放时间管理信息(PTS)与为各视频解码单元(29，39)和系统管理而产生的时间信息(STC)进行比较，从而确定已解码的视频信号的输出定时，所述的多个音频解码单元(33，43)各有一步骤，来将包含于将要输入的音频信号中的回放时间管理信息(PTS)与为各音频解码单元(33，43)及系统管理而产生的时间信息(STC)进行比较，从而确定已解码的音频信号的输出定时，以及在所述第六步(36，37，46，S4，S5，S7，S8)里，将差值(Δstc)作为偏移量提供到为所述多个视频解码单元(29，39)的每一个和所述多个音频解码单元(33，43)的每一个以及为系统管理而产生的时间信息(STC)中，所述差值(Δstc)是包含于第二步(17，21，23，S2，S3)所选的流的音频信号中的回放时间管理信息(PTS)与为了对被选的流的音频信号进行解码处理的音频解码单元和为系统管理而产生的时间信息(STC)之间的差。
9.根据权利要求8的一个信息回放方法，其特征在于所述第六步(36，37，46，S4，S5，S7，S8)包含第七步，由分别提供给所述多个音频解码单元(33，43)的运算单元(36，46)，来计算出包含于输入到相应音频解码单元(33，43)的音频信号中的回放时间管理信息(PTS)与为所述音频解码单元(33，43)及系统管理而产生的时间信息(STC)之间的差值(Δstc 1和Δstc2)；以及第八步，从第七步中由所述的多个运算单元(36，46)所获得的差值(Δstc1，Δstc2)中选出一个，并将被选出的差值作为偏移量提供给为所述多个视频解码单元(29，39)的每一个和所述多个音频解码单元(33，43)的每一个以及为系统管理而产生的时间信息(STC)里，所述被选出的差值是由提供给某一音频解码单元的运算单元所获得的，该音频解码单元对第二步(17，21，23，S2，S3)所选的流的音频信号进行解码处理。
10.根据权利要求8的一个信息回放方法，其特征在于包含于音频信号和视频信号中的所述回放时间管理信息是PTS；为所述多个视频解码单元(29，39)和所述多个音频解码单元(33，43)以及为系统管理而产生的所述时间信息是STC。
全文摘要
一种信息回放设备，包含以每个流均包含视频和音频的多个流(1，2)为输入的输入单元(261，262)；一个选择单元(17，21，23)，用于从输入的多个流(1，2)中选择一个预定流；以及一个同步回放单元(27到47)，通过使用被选择的流的音频回放时间作为主时钟，来对被选的流的视频及未被选的流的视频和音频进行同步回放。
文档编号H04N7/24GK1893609SQ200610090750
公开日2007年1月10日 申请日期2006年6月30日 优先权日2005年6月30日
发明者铃木信幸 申请人:株式会社东芝