专利名称:信息编码方法、信息重放方法和信息存储介质的制作方法
技术领域:
本发明的一个实施例涉及胶片颗粒技术(FGT)。
背景技术:
为了多功能光盘(DVD)内容应用目的而编码电影胶片的视频画面时,通常会损坏电影独有的氛围。这是因为视频画面中的胶片颗粒(胶片的颗粒)作为编码的结果而丢失了。胶片颗粒被称为“好莱坞的灵魂”,并在DVD授权工作室中被给予了很高的重要性。
美国专利申请No.2006/0082649公开了一种胶片颗粒仿真方法。作为一个运动图像编码国际标准的H.264公开了一种胶片颗粒技术(FGT)。按照这些公开的技术,通过将胶片颗粒图像合成到主图像中,可以提供保留胶片颗粒的视频画面。
根据发明人的实验,当将弱的胶片颗粒图像添加到解码的主图像时,也就是,当指示了再现胶片颗粒所必需的信息的胶片颗粒强度的信息值较小时,在输出图像的块垂直边缘处观察到失真的发生。这大大损害了输出图像的质量。
当最初不需要的胶片颗粒被添加到接触视频区域的黑条区域时,这也会损害输出图像的质量。
发明内容
本发明的一个目的是为了提供一种允许满意地再现胶片颗粒的信息编码方法和信息存储介质,以及一种具有胶片颗粒高度可再现性的信息重放方法。
根据本发明的一个实施例的一种信息编码方法包括通过对输入图像信息进行降噪处理,从输入图像信息中产生主图像信息;从输入图像信息和主图像信息中估计包括在输入图像信息中的噪声图像信息,以产生与噪声图像信息对应的第一模型信息;对包括在第一模型信息中的多个参数中的不满足预定条件的参数进行校正,以产生包括反映该校正的多个参数的第二模型信息;对主图像信息进行编码,以产生编码图像信息;以及产生包括编码图像信息、第一模型信息和第二模型信息的编码信息。
根据本发明的一个实施例的一种信息重放方法包括从包括在由信息编码方法产生的编码信息中的第一模型信息和第二模型信息中选择第一模型信息;从第一模型信息中产生噪声图像信息;通过对包含在编码信息中的编码图像信息进行解码,来产生解码图像信息;基于解码图像信息和噪声图像信息产生输出图像信息;以及输出该输出图像信息。
根据本发明的一个实施例的一种信息存储介质存储了由信息编码方法产生的编码信息。
本发明的其他的目的和优点将在下文的描述中得到阐述,并从描述中部分地是清楚的,或者可以通过本发明的实践被认识到。通过在下文特别指出通过工具和组合的手段可达到本发明的目的。
合并在说明书中并构成说明书一部分的附示了本发明的实施例,并和上文给出的概述以及下文给出的实施例的详细描述一起,来说明本发明的原理。
图1是示出根据本发明的第一实施例的运动图像编码设备的示意框图; 图2是示出根据本发明的第一和第二实施例的运动图像解码设备的示意框图; 图3是示出根据本发明第二实施例的运动图像编码设备的示意框图; 图4是示出根据本发明第三和第四实施例的运动图像解码设备的示意框图; 图5示出了胶片颗粒再现信息的参数限制区域的例子; 图6是示出根据本发明第三实施例的运动图像编码设备的示意框图; 图7是示出根据本发明第四实施例的运动图像编码设备的示意框图; 图8示出了通过将胶片颗粒重叠在黑条部分和胶片颗粒帧上来改进图像质量的例子; 图9示出了将胶片颗粒重叠在黑条部分上的例子; 图10示出了包括黑条部分、胶片颗粒和胶片颗粒帧的视频解码图像之间关系的例子; 图11是高级内容的示意视图; 图12是高级内容的示意视图; 图13是标准内容的示意视图; 图14是标准内容的示意视图; 图15是PVTS的视频标题集信息VTSI的示意视图; 图16是说明主视频显示区域的视图; 图17是SVTS的时间映射STMAP的示意视图; 图18是示出在高级内容中平面和输出图像之间的关系的视图; 图19是HD DVD视频播放器的示意框图; 图20是标准内容的视频管理器记录区域VMG和视频管理器信息区域VMGI的示意视图; 图21是视频管理器信息管理表VMGI_MAT的示意视图; 图22是胶片颗粒帧信息FP_FILMG_FI和FP_GPCM的胶片颗粒帧信息VMGM_FILMG_FI的示意视图; 图23是标准内容的视频标题集记录区域VTS的视频标题集信息区域VTSI的示意视图; 图24是视频标题集信息管理表VTSI_MAT的示意视图; 图25是VTSM胶片颗粒帧信息VTSM_FILMG_FI和VTS标题胶片颗粒帧信息VTSTT_FILMG_FI的示意视图; 图26是示出在标准内容中平面和输出图像之间的关系的视图; 图27是示出胶片颗粒附加/非附加区域设置例子的视图; 图28是PVTS的视频标题集信息VTSI的示意视图; 图29是说明主视频显示区域例子的视图; 图30是SVTS的时间映射STMAP的示意视图; 图31是HD DVD视频播放器的示意框图; 图32是根据本发明第六实施例的视频解码器的示意框图; 图33是标准内容的视频管理器记录区域VMG的视频管理器信息 区域VMGI的示意视图; 图34是视频管理器信息管理表VMGI_MAT的示意视图; 图35是胶片颗粒帧信息FP_FILMG_FI和VMGM胶片颗粒帧信息VMGM_FILMG_FI的示意视图; 图36是视频标题集信息区域VTSI的示意视图; 图37是视频标题集信息管理表VTSI_MAT的示意视图; 图38是VTSM胶片颗粒帧信息VTSM_FILMG_FI和VTS标题胶片 颗粒帧信息VTSTT_FILMG_FI的示意视图。
具体实施例方式 参照附图,在下文将对根据本发明的多个实施例进行描述。总的来说,根据本发明的一实施例,信息编码方法包括通过对输入图像信息进行降噪处理,来从输入图像信息中产生主图像信息;从输入图像信息和主图像信息中估计包括在输入图像信息中的噪声图像信息,以产生对应于噪声图像信息的第一模型信息;对包括在第一模型信息中的多个参数中的不满足预定条件的参数进行校正,以产生包括反映该校正的多个参数的第二模型信息;对主图像信息进行编码,以产生编码图像信息;以及产生包括编码图像信息、第一模型信息和第二模型信息的编码信息。
参照附图,在下文对本发明的实施例进行描述。
下面将对胶片颗粒编码处理的概要进行描述。通过对作为运动图像的输入图像进行胶片颗粒去除处理产生胶片颗粒被去除的主图像。编码单元利用运动补偿、正交变换和量化,来对产生的主图像实施压缩编码过程。另一方面,噪声估计单元基于输入图像和主图像的差,产生胶片颗粒图像,并估计再现胶片颗粒所需的信息(识别要被引用的胶片颗粒图像数据库和胶片颗粒强度等所需要的信息),从而产生模型信息。
在解码处理中,解码单元产生胶片颗粒被去除的主图像作为解码图像。噪声产生单元利用从编码单元发送的模型信息产生噪声图像,即,胶片颗粒图像。通过对产生的主图像和胶片颗粒图像进行相加,获得胶片颗粒在其中再现的输出图像。
由于胶片颗粒是分类的和模型化的,利用上述的处理,通过编码处理,可以在不丢失胶片颗粒的情况下再现影片的独特氛围。
根据发明人的实验,当弱的胶片颗粒图像被添加到已解码主图像时,也就是当再现胶片颗粒所必需的指示信息的胶片颗粒强度的信息值较小时,在输出图像的块垂直边缘处观察到失真的发生。这大大地损害了输出图像的质量。在胶片颗粒图像产生处理中,为了隐藏胶片颗粒图像之间的缝隙,对块的垂直边缘施加被称作去块效应滤波器的平滑滤波处理。该去块效应滤波器实施不包括任何舍入条件(rounding term)的截断处理,如下所述 for(k=0;k<8;k++){ l1=previous_fg_block[6][k] l0=previous_fg_block[7][k] r0=fg_block
[k] r1=fg_block[1][k] fg_block
[k]=(10+(r0<<1)+r1)>>2 previous_fg_block[7][k]=(11+(10<<1)+r0)>>2 } 出于这种原因,由于在块的垂直边缘处的、其值由去块效应滤波器更新的胶片颗粒信号电平分布相对于在其他区域产生的胶片颗粒信号电平值转换为负的一侧,所以这导致了在输出图像的块的垂直边缘处观察到的失真。通过对比,采取省略去块效应滤波器的措施,执行包括了在去块效应滤波器中的舍入条件的舍入处理或类似的处理,可以消除在垂直边缘的失真。
在采取这样的垂直失真措施时,需要确保支持垂直失真措施的设备和不支持垂直失真措施的设备之间的兼容性。也就是,在以高的胶片颗粒再现性重放数据时(也就是,包括指示胶片颗粒强度的信息值较小时的情形),支持垂直失真措施的设备可以在没有任何垂直失真的情况下重放这样的数据,而在不支持垂直失真措施的设备中有产生垂直失真的危险。稍后描述的实施例可以确保在这些支持垂直失真措施的设备和不支持垂直失真措施的之间的设备兼容性。
而且,要防止在接触影片视频区域的黑条区域中最初不需要的胶片颗粒的添加。由于为解码图像的每个块添加了胶片颗粒,当给定的解码图像的块延伸穿过视频区域和黑条区域时,将相当于视频区域的胶片颗粒的胶片颗粒添加到黑条。下文描述的实施例可以防止图像质量由于将胶片颗粒这样添加到黑条而下降。
(第一实施例) 第一实施例将说明一种产生两条胶片颗粒特性补充增强信息(SEI)的图像(降噪)编码设备(具有降噪[NR])、一种存储包括两条FG_SEI的压缩数据的信息存储介质、以及一种选择在信息存储介质中存储的两条FG_SEI的一个的图像解码设备(信息重放设备)。
胶片颗粒仿真系统包括图像编码设备和图像解码设备。
首先对图像编码设备进行描述。如图1所示,图像编码设备A108包括降噪单元A101、视频编码单元A102、胶片颗粒估计单元A103、胶片颗粒再现信息调制单元A104、胶片颗粒再现信息双工单元A105、以及多路复用单元A106。
降噪单元A101从输入图像A100中去除胶片颗粒。在下文中将从降噪单元A101中输出的图像称为主图像。编码单元A102利用运动补偿、正交变换以及量化,对主图像实施运动图像编码处理,从而产生主图像压缩数据。
胶片颗粒估计单元A103通过计算包括胶片颗粒的输入图像A100与胶片颗粒在其中被去除的主图像之间的差,产生胶片颗粒图像。而且,胶片颗粒估计单元A103估计胶片颗粒信号的强度以及要被引用的胶片颗粒数据库的ID,该ID在再现胶片颗粒图像时使用。在下文中将这些信息称为胶片颗粒再现信息。作为胶片颗粒再现信息的实际例子,在H.264/AVC中的胶片颗粒特性补充增强信息(SEI)消息是公知的。
胶片颗粒再现信息调制单元A104调制(校正)所估计的胶片颗粒再现信息(第一模型信息),以便包括在胶片颗粒再现信息中的多个参数落在特定的参数范围内,从而产生包括多个已调制(已校正)参数的参数受限胶片颗粒再现信息(第二模型信息)。如上所述,FGT经受由于去块效应滤波器的截断处理而产生的信号的偏置,因此,垂直线可能出现在输出图像中。由于胶片颗粒信号强度很低,以及胶片颗粒数据库的使用频率很低,所以产生的信号的偏置很显著。因此,所估计的胶片颗粒再现信息被调制为落在可以消除信号产生的偏置的参数范围内,从而避免垂直线出现在输出图像中的问题。图5示出了特定参数范围的例子。垂直轴画出的是胶片颗粒信号强度,水平轴画出的是胶片颗粒数据库的ID。根据FGT,参数受限胶片颗粒再现信息被设计为在执行胶片颗粒产生处理时使用,在FGT中,在去块效应滤波器中进行截断处理。
胶片颗粒再现信息双工单元A105对胶片颗粒再现信息和参数受限胶片颗粒再现信息进行双工处理,以产生双工胶片颗粒再现信息。作为在这种情况下的信息顺序,胶片颗粒再现信息首先出现,然后是参数受限胶片颗粒再现信息。在执行垂直失真措施支持的FGT产生处理(其中去块效应滤波器执行舍入处理)时,没有应用去块效应滤波器或类似的器件,解码侧采用胶片颗粒再现信息。另一方面,在执行不支持垂直失真措施的FGT产生处理时,解码侧采用参数受限胶片颗粒再现信息。也就是,支持垂直失真措施的设备选择胶片颗粒再现信息,不支持垂直失真措施的设备选择参数受限胶片颗粒再现信息。以这种方式可以确保支持垂直失真措施的设备和不支持垂直失真措施的设备之间的兼容性。
多路复用单元A106将双工胶片颗粒再现信息附加到主图像压缩数据中。以这种方式完成兼容于胶片颗粒仿真系统的压缩数据A107。
信息存储介质存储该压缩数据A107。
在下文将描述用于对存储在信息存储介质中的压缩数据A107进行解码的图像解码设备。如图2所示,图像解码设备A207包括胶片颗粒再现信息分离单元A201、视频解码单元A202、胶片颗粒再现信息选择单元A203、胶片颗粒产生单元A204、和图像加法单元A205。
胶片颗粒再现信息分离单元A201从压缩数据A200中分离一条或两条胶片颗粒再现信息。所述一条或两条分离出的胶片颗粒再现信息被发送到胶片颗粒再现信息选择单元A203中。视频解码单元A202利用运动补偿、量化和反正交变换,对保留的压缩数据实施图像解码处理,以获得主图像。
胶片颗粒再现信息选择单元A203接收一条或两条胶片颗粒再现信息。如果接收到的胶片颗粒再现信息的数量是一个,则胶片颗粒再现信息选择单元A203将该信息发送至胶片颗粒产生单元A204。如果接收到的胶片颗粒再现信息的数量是两条,则胶片颗粒再现信息选择单元A203根据胶片颗粒产生单元A204的处理内容,选择这些信息中的一条。
在图像解码设备(不支持垂直失真措施的设备)中,去块效应滤波器在胶片颗粒产生单元A204中执行截断处理。这意味着可能出现垂直线失真。也就是,图像解码设备(不支持垂直失真措施的设备)选择位于两条胶片颗粒再现信息的后面位置的参数受限胶片颗粒再现信息。
在图像解码设备(支持垂直失真措施的设备)中,去块效应滤波器执行舍入处理,或者在胶片颗粒产生单元A204中忽略舍入处理。这意味着采取确定的垂直线失真措施。也就是,图像解码设备(支持垂直失真措施的设备)选择位于前面位置的胶片颗粒再现信息。
最后,图像加法单元A205将胶片颗粒产生单元A204产生的胶片颗粒图像加到解码单元A202的输出图像上。以这种方式获得输出图像A206。
如上所述,该胶片颗粒仿真系统在编码侧产生第一胶片颗粒再现信息和第二胶片颗粒再现信息,对这些信息块进行双工处理,并将这些双工信息附加到压缩数据中。由于第一胶片颗粒再现信息的参数没有被具体地限制,所以它可以再现忠实于原始图像的胶片颗粒。然而,当第一胶片颗粒再现信息在没有任何垂直线失真措施的情况下被用于胶片颗粒产生处理时,可能产生垂直线失真。由于第二胶片颗粒再现信息的参数受到限制,它并不总是再现忠实于原始图像的胶片颗粒。然而,当第二胶片颗粒再现信息在没有任何垂直线失真措施的情况下被用于胶片颗粒产生处理时,不会产生垂直线失真。
当胶片颗粒产生处理已经在去块效应滤波器中采取垂直线失真措施(去块效应滤波器中的舍入处理、忽略去块效应滤波器等等)时,使用第一胶片颗粒再现信息。另一方面,当胶片颗粒产生处理没有采取任何垂直线失真措施时,使用第二胶片颗粒再现信息。
以这种方式,即使在包括采取了垂直线失真措施的胶片颗粒产生处理和没有采取垂直线失真措施的胶片颗粒产生处理的系统中,在胶片颗粒再现性最大化时,也可以抑制垂直线失真的产生。
(第二实施例) 第二实施例将说明一种产生两条FG_SEI的图像编码设备(没有降噪)、一种存储包括两条FG_SEI的压缩数据的信息存储介质、以及一种对在信息存储介质中存储的两条FG_SEI中的一条进行选择的图像解码设备(信息重放设备)。
胶片颗粒仿真系统包括图像编码设备和图像解码设备。
首先描述图像编码设备。如图3所示,图像编码设备A307包括视频编码单元A301、胶片颗粒估计单元A302、胶片颗粒再现信息调制单元A303、胶片颗粒再现信息双工单元A304、以及多路复用单元A305。
视频编码单元A301利用运动补偿、正交变换以及量化,对输入图像A300实施运动图像编码处理,从而产生主图像压缩数据。
胶片颗粒估计单元A302通过计算包括胶片颗粒的输入图像A300与通过视频编码减少了其中的胶片颗粒的主图像压缩数据的本地解码图像之间的差,产生胶片颗粒图像。而且,胶片颗粒估计单元A302估计胶片颗粒信号的强度以及要被引用的胶片颗粒数据库的ID,该ID在再现胶片颗粒图像时使用。在下文中将这些信息条称为胶片颗粒再现信息。作为胶片颗粒再现信息的实际例子,在H.264/AVC中的胶片颗粒特性补充增强信息(SEI)消息是公知的。
胶片颗粒再现信息调制单元A303调制(校正)所估计的胶片颗粒再现信息(第一模型信息),以便包括在胶片颗粒再现信息中的多个参数落在特定的参数范围内,从而产生包括多个已调制(已校正)参数的参数受限胶片颗粒再现信息(第二模型信息)。如上所述,FGT遭受到由于去块效应滤波器的截断处理而产生的信号的偏置,因此,垂直线可能出现在输出图像中。由于胶片颗粒信号强度很低,以及胶片颗粒数据库的使用频率很低,所以产生的信号的偏置很显著。因此,所估计的胶片颗粒再现信息被调制为落在可以消除信号产生的偏置的参数范围内,从而避免垂直线出现在输出图像中的问题。图5示出了特定参数范围的例子。垂直轴画出的是胶片颗粒信号强度,水平轴画出的是胶片颗粒数据库的ID。根据FGT,参数受限胶片颗粒再现信息被设计为在执行胶片颗粒产生处理时使用,在FGT中,在去块效应滤波器中进行截断处理。
胶片颗粒再现信息双工单元A304对胶片颗粒再现信息和参数受限胶片颗粒再现信息进行双工处理,以产生双工胶片颗粒再现信息。作为在这种情况下的信息顺序,胶片颗粒再现信息首先出现,然后是参数受限胶片颗粒再现信息。在执行由去块效应滤波器在其中执行舍入处理的FGT产生处理支持的垂直失真措施时,没有应用去块效应滤波器或类似的器件,解码侧采用胶片颗粒再现信息。另一方面,在执行FGT产生处理不支持的垂直失真措施时,解码侧采用参数受限胶片颗粒再现信息。也就是,支持垂直失真措施的设备选择胶片颗粒再现信息,不支持垂直失真措施的设备选择参数受限胶片颗粒再现信息。以这种方式可以确保支持垂直失真措施的设备和不支持垂直失真措施的设备之间的兼容性。
多路复用单元A305将双工胶片颗粒再现信息附加到主图像压缩数据中。以这种方式完成兼容于胶片颗粒仿真系统的压缩数据A306。
信息存储介质存储该压缩数据A306。
用以对存储在信息存储介质中的压缩数据A306进行解码的图像解码设备执行与第一实施例中相同的处理。
如上所述,该胶片颗粒仿真系统在编码侧产生第一胶片颗粒再现信息和第二胶片颗粒再现信息,对这些信息块进行双工处理,并将这些双工信息附加到压缩数据中。由于第一胶片颗粒再现信息的参数没有被具体地限制,所以它可以再现忠实于原始图像的胶片颗粒。然而,当第一胶片颗粒再现信息在没有任何垂直线失真措施的情况下被用于胶片颗粒产生处理时,可能产生垂直线失真。由于第二胶片颗粒再现信息的参数受到限制,它并不总是再现忠实于原始图像的胶片颗粒。然而,当第二胶片颗粒再现信息在没有任何垂直线失真措施的情况下被用于胶片颗粒产生处理时,不会产生垂直线失真。
当胶片颗粒产生处理已经在去块效应滤波器中采取垂直线失真措施(去块效应滤波器中的舍入处理、忽略去块效应滤波器等等)时,使用第一胶片颗粒再现信息。另一方面,当胶片颗粒产生处理没有任何采取垂直线失真措施时,使用第二胶片颗粒再现信息。
以这种方式,即使在包括采取了垂直线失真措施的胶片颗粒产生处理和没有采取垂直线失真措施的胶片颗粒产生处理的系统中,在胶片颗粒再现性最大化时,也可以抑制垂直线失真的产生。
(第三实施例) 第三实施例将说明一种在FG_SEI中记录FG区域信息的图像编码设备(具有降噪)、一种对包括FG_SEI中的FG区域信息的压缩数据信息进行存储的存储介质、以及一种对基于FG区域信息的FG进行解码的图像解码设备(信息重放设备)。
胶片颗粒仿真系统包括图像编码设备和图像解码设备。
首先描述图像编码设备。如图6所示,图像编码设备A606包括降噪单元A601、视频编码单元A602、胶片颗粒估计单元A603以及多路复用单元A604。
降噪单元A601从输入图像A600中去除胶片颗粒。在下文中将从降噪单元A601输出的图像称为主图像。编码单元A602利用运动补偿、正交变换以及量化,对主图像实施运动图像编码处理,从而产生主图像压缩数据。
胶片颗粒估计单元A603通过计算包括胶片颗粒的输入图像A600与去除了胶片颗粒的主图像之间的差,产生胶片颗粒图像。而且,胶片颗粒估计单元A603估计胶片颗粒信号的强度以及要被引用的胶片颗粒数据库的ID,该ID在再现胶片颗粒图像时使用。在下文中将这些信息条称为胶片颗粒再现信息(模型信息)。作为胶片颗粒再现信息的实际例子,在H.264/AVC中的胶片颗粒特性补充增强信息(SEI)消息是公知的。而且,胶片颗粒估计单元A603接收区域信息A607,并在胶片颗粒再现信息中对它进行描述。解码侧利用区域信息A607来检验感兴趣的区域是否是胶片颗粒被添加到的区域。
多路复用单元A604将胶片颗粒再现信息附加到主图像压缩数据中。以这种方式完成兼容于胶片颗粒仿真系统的压缩数据A605。
信息存储介质存储该压缩数据A605。
下面描述用以对存储在信息存储介质中的压缩数据A605进行解码的图像解码设备。如图4所示,图像解码设备A407包括胶片颗粒再现信息分离单元A401、视频解码单元A402、胶片颗粒产生单元A403、胶片颗粒应用范围设置单元A404以及图像加法单元A405。
胶片颗粒再现信息分离单元A401从压缩数据A400中分离胶片颗粒再现信息。
视频解码单元A402利用运动补偿、去量化以及反正交变换,对从胶片颗粒再现信息中分离出的压缩数据实施图像解码处理(例如,H.264),以获得视频数据。
胶片颗粒再现信息应用于胶片颗粒产生单元A403中,以获得胶片颗粒图像。胶片颗粒产生单元A403的处理是为了按照胶片颗粒再现信息为各个图像块产生胶片颗粒图像。例如,可以使用FGT的胶片颗粒产生算法。
胶片颗粒应用范围设置单元A404接收作为输入的胶片颗粒再现信息和胶片颗粒图像。胶片颗粒再现信息将区域信息A607描述为胶片颗粒应用区域,对于像素的整数部分,胶片颗粒应用区域掩盖了为各个块产生的胶片颗粒图像。例如,将影片的上黑条和下黑条的像素数描述为胶片颗粒应用区域,将落在黑条区域内的胶片颗粒图像的胶片颗粒信号设置为0。最后,图像加法单元A405将从胶片颗粒应用范围设置单元A404输出的胶片颗粒图像加到视频解码单元A402输出的视频数据输出上。以这种方式,完成输出图像A406。
如上所述,在该胶片颗粒仿真系统中,胶片颗粒应用范围设置单元A404可以将要被加到影片中的黑条区域的胶片颗粒信号设置为0。以这种方式,可以解决不必要的胶片颗粒加到黑条上的问题。
(第四实施例) 第四实施例将说明一种在FG_SEI中记录FG区域信息的图像编码设备(不降噪)、一种存储包括FG_SEI中的FG区域信息的压缩数据的信息存储介质以及对基于FG区域信息的FG进行解码的图像解码设备(信息重放设备)。
胶片颗粒仿真系统包括图像编码设备和图像解码设备。
首先对图像编码设备进行描述。如图7所示,图像编码设备A705包括视频编码单元A701、胶片颗粒估计单元A702和多路复用单元A703。
视频编码单元A701利用运动补偿、正交变换以及量化,对输入图像A700实施运动图像编码处理,从而产生主图像压缩数据。
胶片颗粒估计单元A702通过计算包括胶片颗粒的输入图像A700与通过视频编码减少了其中的胶片颗粒的主图像压缩数据的本地解码图像之间的差,产生胶片颗粒图像。而且,胶片颗粒估计单元A702估计胶片颗粒信号的强度以及要被引用的胶片颗粒数据库的ID,该ID在再现胶片颗粒图像时使用。在下文中将这些信息条称为胶片颗粒再现信息。作为胶片颗粒再现信息的实际例子,在H.264/AVC中的胶片颗粒特性补充增强信息(SEI)消息是公知的。而且,胶片颗粒估计单元A702接收区域信息A706,并在胶片颗粒再现信息中对它进行描述。解码侧利用区域信息A706来检验感兴趣的区域是否是胶片颗粒被添加到的区域。
多路复用单元A703将胶片颗粒再现信息附加到主图像压缩数据上。以这种方式,完成兼容于胶片颗粒仿真系统的压缩数据A704。
信息存储介质存储该压缩数据A704。
对存储在信息存储介质中的压缩数据A704进行解码的图像解码设备与第三实施例中的图像解码设备相同。
如上所述,在该胶片颗粒仿真系统中,胶片颗粒应用范围设置单元A404可以将要被加到影片中的黑条区域上的胶片颗粒信号设置为0。以这种方式,可以解决不必要的胶片颗粒加到黑条上的问题。
(第五实施例) 第五实施例将说明存储胶片颗粒帧信息(帧的色彩信息、图像区域的位置信息(真实的视频区域))的信息存储介质、和用以基于存储在信息存储介质中的胶片颗粒帧信息来重放胶片颗粒帧的信息重放。
如图9所示,当FGT被用于类似于影片的包括黑条的视频画面B1-3时,由于胶片颗粒B1-2被加到各个块的解码图像上,所以最初不需要的胶片颗粒被加到接触视频区域的黑条区域上。结果,如图8所示,产生输出视频画面B1-1,在该图像中,最初不需要的胶片颗粒被添加到黑条区域。
相反,如图10所示,具有通过以特定颜色涂黑条区域并剪辑视频区域所获得的形式的图像(在下文被称为胶片颗粒帧B1-5)被重叠在解码图像B1-3和胶片颗粒B1-2上。以这种方式,如图8所示,可以获得能够删掉添加到不必要部分上的胶片颗粒的输出图像B1-4。为了实现输出图像B1-4的重放,DVD视频、高分辨率视频DVD(HD DVD视频)、蓝光光盘(BD视频)以及类似的视频格式的视频内容具有被用来再现胶片颗粒的信息、胶片颗粒帧的色彩信息以及作为帧剪辑部分的视频区域信息。也就是,诸如光盘或类似介质之类的信息存储介质存储包括图像区域(真实视频区域)和非图像区域的视频内容(图像信息)、用以再现胶片颗粒(噪声图像信息)的信息以及胶片颗粒帧信息(用以控制非图像区域和噪声图像的重叠区域的重放的控制信息)的视频内容。
下面将对HD DVD内容的例子进行描述。
HD DVD是后继DVD的光学光盘介质,被HD DVD播放器重放的HD DVD视频是一种HD DVD应用,与DVD视频相比,该HD DVD应用可以以更高的图像质量记录视频数据、更高的声音质量记录声音数据、更高分辨率记录字幕数据和记录更有交互性的导航数据。对于HD DVD视频,有两种可用的不同的内容类型高级内容,其具有更高的交互性,可以以画中画形式实现注释视频数据和类似的数据(图11和12);标准内容,与DVD视频相比,当使用与DVD视频相同的结构时,其可以获得更高的视频数据图像质量,更高的音频数据声音质量、以及更高分辨率的字幕数据(图13和14)。
通过用来管理高级内容重放信息的播放列表、主要视频集、次要视频集、高级应用、以及字幕数据的高级字幕对高级内容进行配置,其中,被设置为视频、音频和字幕数据的集的主要视频集主要保存在光盘中,被设置为视频、音频和字幕数据的集的次要视频集可以被保存在不同于光盘的位置中,高级应用包括高级内容的重放控制信息、由菜单窗口的按钮等所表示的图形元素、和效果音音频数据。主要视频集PVTS包括视频标题集信息文件VTSI,其记录与视频、音频和字幕数据相关的属性信息和管理信息;主要视频集的时间映射文件PTMAP,其记录用以将主要视频集的时间信息转换为地址信息的时间映射;以及主要增强型视频对象文件PEVOB,其记录作为视频信息自身的主要增强型视频对象。次要视频集SVTS包括次要视频集的时间映射文件STMAP,其记录用来将次要视频集的时间信息转换为地址信息的时间映射;以及次要增强型视频对象文件SEVOB,其记录作为视频信息自身的次要增强型视频对象。
标准内容被增强型视频对象数据和导航数据IFO配置,该增强型视频对象数据记录视频信息自身,导航数据IFO记录该增强型视频对象数据的管理信息。标准内容STDCT包括表示菜单窗口的视频管理器VMG以及记录视频数据的标准视频标题集STDVTS。由作为对视频信息自身进行记录的增强型视频对象数据EVOB的第一播放PGC菜单增强型视频对象FP_PGCM_EVOBS和视频管理菜单增强型视频对象VMGM_EVOBS、作为对这些视频对象的管理信息进行记录的导航数据IFO的视频管理器信息VMGMI、和作为该信息的备份数据的视频管理器信息备份VMGI_BUP来对记录菜单窗口的视频管理器VMG进行配置。标准视频标题集STDVTS包括作为对视频信息自身进行记录的增强型视频对象数据EVOB的视频标题集菜单增强型视频对象VTSM_EVOBS和视频标题集标题增强型视频对象VTSTT_EVOBS、作为对这些视频对象的管理信息进行记录的导航数据IFO的视频标题集信息VTSI、以及作为该信息的备份数据的视频标题集信息备份VTSI_BUP。
此时,HD DVD视频高级内容具有随后的胶片颗粒信息,以解决黑条问题。
高级内容的主视频集PVTS的视频标题集信息VTSI具有如图15所示的结构。VTSI记录视频标题集增强型视频对象属性表VTS_EVOB_ATRT,其包括视频标题集增强型视频对象属性表信息VTS_EVOB_ATRTI、视频标题集增强型视频对象属性搜索指针VTS_EVOB_ATR_SRP、以及视频标题集增强型视频对象属性VTS_EVOB_ATR。而且,视频标题集增强型视频对象属性VTS_EVOB_ATR描述了主视频、副视频、主音频、副音频、和子画面的属性信息以及类似的属性信息。在该实施例中,VTS_EVOB_ATR记录了胶片颗粒帧信息FILMG_FI。胶片颗粒帧信息FILMG_FI记录了视频显示区域开始X坐标FILMG_x1、视频显示区域开始Y坐标FILMG_y1、视频显示区域结束X坐标FILMG_x2、和视频显示区域结束Y坐标FILMG_y2(这些坐标表示作为胶片颗粒帧的剪辑部分的视频显示区域(见图16))、以及记录胶片颗粒帧区域亮度值Y FILMGCOLOR_Y、胶片颗粒帧区域色彩差值Cr FILMGCOLOR_Cr、和胶片颗粒帧区域色彩差值CbFILMGCOLOR_Cb(这些值表示胶片颗粒帧的色彩信息,如图15所示)。由于FILMG_FI记录在这个区域中,高级内容可以具有每个EVOB的FILMG_FI。当胶片颗粒帧没有被使用时,用0填充胶片颗粒帧信息FILMG_FI区域。该区域通常是一个用0填充的保留区域,从而保持对通常的HD DVD视频内容和播放器的兼容性。
高级内容的次要视频集SVTS的时间映射STMAP具有如图17所示的结构。STMAP包括TMAP通用信息管理器TMAP_GI、TMAP搜索指针TMAPI_SRP、TMAP信息TMAPI、以及EVOB属性EVOB_ATR。EVOB属性EVOB_ATR描述了主视频、副视频、主音频、和副音频的属性以及类似的属性。在该实施例中,EVOB_ATR记录了胶片颗粒帧信息FILMG_FI。胶片颗粒帧信息具有与前述的PVTS中相同的信息。当胶片颗粒帧没有被使用时,用0填充胶片颗粒帧信息FILMG_FI区域。该区域通常是一个用0填充的保留区域,从而保持对通常的内容和播放器的兼容性。播放列表也可以有相同的信息。
通过以图18所示的顺序叠加平面,来显示具有如上所述的胶片颗粒帧信息FILMG_FI的高级内容。在最低的位置显示作为主视频的主视频平面。主视频是通过将胶片颗粒加到解码为主视频的图像中所获得的图像。在主视频平面上叠加胶片颗粒帧平面,该胶片颗粒帧平面具有色彩,该色彩由记录在胶片颗粒帧信息FILMG_FI中的胶片颗粒帧的色彩信息(FILMGCOLOR_Y,FILMGCOLOR_Cr,FILMGCOLOR_Cb)指示,以及由视频显示区域信息(FILMG_x1,FILMG_y1,FILMG_x2,FILMG_y2)所定义的区域作为胶片颗粒帧的剪辑部分从该胶片颗粒帧平面中剪辑出来。那么,用于注释内容或类似内容的副视频平面,用于字幕的子画面平面,分别用于按钮、菜单主视频以及相类似的图形平面,以及指示用户指针位置的光标平面被以该顺序输出以相互重叠。如上所述,通过在主视频平面和副视频平面之间插入胶片颗粒帧平面,由胶片颗粒帧对叠加在主视频平面最初不需要的区域上的胶片颗粒进行改写,从而只对不必要胶片颗粒效应的部分消去胶片颗粒效应。
下面将对那个时刻的HD DVD播放器的系统模型进行描述。如图19所示,HD DVD播放器除了可以访问光盘B6-3之外,还可以访问永久性存储器B6-1和网络服务器B6-2。输入包括从遥控器B6-9或类似的控制器输入的用户操作信息,输出包括输出到TV监视器和扬声器B6-10的视频数据和音频数据。播放器单元大概包括数据访问管理器B6-4、数据高速缓冲存储器B6-5、导航管理器B6-6、展现引擎B6-7以及AV渲染器B6-8。数据访问管理器B6-4控制对光盘、网络存储器和永久性存储器的访问。数据高速缓冲存储器B6-5包括文件高速缓冲存储器和流缓冲存储器,并临时记录正在重放的数据。导航管理器B6-6包括接受用户操作的用户接口引擎和加载对导航文件并进行语法分析的语法分析器。导航管理器B6-6执行重放初始化,并控制作为标题重放时间轴的标题时间线和命令等。展现引擎B6-7对视频、音频和字幕数据进行信号分离和解码,并将视频、音频和字幕信息输出到AV渲染器B6-8。AV渲染器B6-8包括控制音频混合的部件以及控制视频混合的部件。已经对HD DVD播放器的系统模型进行了示例说明,如图19所示,该系统模型另外还包括胶片颗粒帧产生器B6-11。胶片颗粒帧产生器B6-11基于导航管理器B6-6说明的胶片颗粒帧信息FILMG_FI产生胶片颗粒帧图像。AV渲染器B6-8以图18所示的顺序对从胶片颗粒帧产生器B6-11输出的胶片颗粒帧进行叠加。
下面将对HD DVD视频标准内容具有胶片颗粒帧信息的情形进行描述。
标准内容的视频管理器VMG的视频管理器信息区域VMGI有如图20-22所示的配置,并包括视频管理器信息管理表VMGI_MAT、标题搜索指针表TT_SRPT、视频管理器菜单PGCI单元表VMGM_PGCI_UT、父级管理信息表PTL_MAIT、视频标题集属性信息表VTS_ATRT、文本数据管理器TXTDT_MG、首先播放PGC菜单单元地址表FP_PGCM_C_ADT、首先播放PGC菜单增强型视频对象单元地址映射FP_PGCM_EVOBU_ADMAP、视频管理器菜单单元地址表VMGM_C_ADT、以及视频管理器菜单增强型视频对象单元地址映射VMGM_VOBU_ADMAP。以VMG识别信息、VMGI中的地址信息、FP_PGCM和VMGM视频、音频和字幕数据以及相似的信息对VMGI_MAT进行了配置。在这实施例中,VMGI_MAT记录了FP_PGCM胶片颗粒帧信息FP_FILMG_FI以及VMGM胶片颗粒帧信息VMGM_FILMG_FI。胶片颗粒帧信息FP_FILMG_FI/VMGM_FILMG_FI记录了视频显示区域开始X坐标FILMG_x1、视频显示区域开始Y坐标FILMG_y1、视频显示区域结束X坐标FILMG_x2、以及视频显示区域结束Y坐标FILMG_y2,这些坐标表示作为胶片颗粒帧的剪辑部分的视频显示区域,还记录胶片颗粒帧区域亮度值Y FILMGCOLOR_Y、胶片颗粒帧区域色彩差值CrFILMGCOLOR_Cr、和胶片颗粒帧区域色彩差值Cb FILMGCOLOR_Cb,这些值表示胶片颗粒帧的色彩信息,这与高级内容的情况是一样的。由于在这个区域记录了FILMG_FI,所以标准内容可以具有每个FP_PGC和每个VTSM的FILMG_FI。当没有使用胶片颗粒帧时,用0填充胶片颗粒帧信息FP_FILMG_FI/VMGM_FILMG_FI区域。这个区域通常是用0填充的保留区域,从而保持对通常的内容和播放器的兼容性。
视频标题集信息区域VTSI被配置为如图23-25所示的构造,并包括视频标题集信息管理表VTSI_MAT、视频标题集PTT搜索指针表VTS_PTT_SRPT、视频标题集程序链信息表VTS_PGCIT、视频标题集菜单PGCI单元表VTSM_PGCI_UT、视频标题集时间映射表VTSM_TMAPT、视频标题集菜单单元地址表VTSM_C_ADT、视频标题集菜单视频对象单元地址映射VTSM_EVOBU_ADMAP、视频标题集单元地址表VTS_C_ADT、以及视频标题集视频对象单元地址映射VTS_EVOBU_ADMAP。以VTS识别信息、VTSI中的地址信息、VTSM以及VTS标题的视频、音频和字幕数据的属性信息以及类似的信息对VTSI_MAT进行了配置。在该实施例中,VTSI_MAT记录VTSM胶片颗粒帧信息VTSM_FILMG_FI和VTS标题胶片颗粒帧信息VTSTT_FILMG_FI。胶片颗粒帧信息VTSM_FILMG_FI/VTSTT_FILMG_FI具有与前文所述的信息FP_FILMG_FI/VMGM_FILMG_FI中相同的信息。由于在这个区域记录了FILMG_FI,标准内容可以具有每个VTSM和每个VTS标题的FILMG_FI。当没有使用胶片颗粒帧时,用0填充胶片颗粒帧信息FILMG_FI区域。这个区域通常是用0填充的保留区域,从而保持对通常的内容和播放器的兼容性。
通过以图26所示的顺序叠加平面来显示标准内容,该标准内容具有如上所述的胶片颗粒帧信息条FP_FILMG_FI/VMGM_FILMG_FI/VTSM_FILMG_FI/VTSTT_FILMG_FI。在最下面的位置显示作为主视频的主视频平面。主视频是通过将胶片颗粒加到解码为主视频的图像上得到的图像。在主视频平面上叠加胶片颗粒帧平面,该胶片颗粒帧平面具有色彩,该色彩是由记录在胶片颗粒帧信息FP_FILMG_FI/VMGM_FILMG_FI/VTSM_FILMG_FI/VTSTT_FILMG_FI区域中的胶片颗粒帧的色彩信息(FILMGCOLOR_Y,FILMGCOLOR_Cr,FILMGCOLOR_Cb)指示的色彩,以及从该胶片颗粒帧平面中剪辑出由视频显示区域信息(FILMG_x1,FILMG_y1,FILMG_x2,FILMG_y2)所定义的区域作为胶片颗粒帧的剪辑部分。那么,用于字幕的子画面平面、用于显示诸如按钮之类的选择区域的高亮平面被以该顺序输出以相互重叠。如上所述,在该实施例中,通过在主视频平面和子画面平面之间插入胶片颗粒帧平面,由胶片颗粒帧对叠加在主视频平面最初不需要的区域上的胶片颗粒进行改写,从而只对不必要胶片颗粒效应的部分消去胶片颗粒效应。
此时,标准内容的HD DVD播放器系统模型和图19中所示的高级内容的模型是一样的。
如上所述,数据包括胶片颗粒帧的色彩信息和剪辑区域的信息。在重放时,胶片颗粒帧被叠加在解码图像和胶片颗粒上,从而避免被叠加的胶片颗粒出现在接触视频区域的黑条区域上的问题。
(第六实施例) 第六实施例将说明存储胶片颗粒帧信息(图像区域(真实视频区域)的位置信息)的信息存储介质,以及用以基于存储在该信息存储介质中的胶片颗粒帧信息重放图像区域和胶片颗粒的合成图像的信息重放。
下面将对HD DVD视频的例子进行描述。
HD DVD视频的高级内容具有下列的胶片颗粒帧信息。
高级内容的主要视频集PVTS的视频标题集信息VTSI具有图28所示的结构。VTSI记录了视频标题集增强型视频对象属性表VTS_EVOB_ATRT,该表包括视频标题集增强型视频对象属性表信息VTS_EVOB_ATRTI、视频标题集增强型视频对象属性搜索指针VTS_EVOB_ATR_SRP、以及视频标题集增强型视频对象属性VTS_EVOB_ATR。而且,视频标题集增强型视频对象属性VTS_EVOB_ATR描述了主视频、副视频、主音频、副音频、和子画面的属性以及类似的属性。在该实施例中,VTS_EVOB_ATR记录了胶片颗粒帧信息FILMG_FI。如图28所示,胶片颗粒帧信息FILMG_FI记录了视频显示区域开始X坐标FILMG_x1、视频显示区域开始Y坐标FILMG_y1、视频显示区域结束X坐标FILMG_x2和视频显示区域结束Y坐标FILMG_y2,这些坐标表示出作为胶片颗粒帧剪辑部分的视频显示区域 (见图29)。由于FILMG_FI记录在这个区域中,所以高级内容可以具有针对每个EVOB的FILMG_FI。当胶片颗粒帧没有被使用时,用0填充胶片颗粒帧信息FILMG_FI区域。该区域通常是一个用0填充的保留区域,从而保持对通常的HD DVD视频内容和播放器的兼容性。
高级内容的次要视频集SVTS的时间映射STMAP具有如图30所示的结构。STMAP包括TMAP通用信息管理器TMAP_GI、TMAP搜索指针TMAPI_SRP、TMAP信息TMAPI、以及EVOB属性EVOB_ATR。EVOB属性EVOB_ATR描述了主视频、副视频、主音频、和副音频的属性信息等等。在该实施例中,EVOB_ATR记录了胶片颗粒帧信息FILMG_FI。胶片颗粒帧信息具有与前述的PVTS中相同的信息。当胶片颗粒帧没有被使用时,用0填充胶片颗粒帧信息FILMG_FI区域。该区域通常是一个用0填充的保留区域,从而保持对通常的视频内容和播放器的兼容性。播放列表也可以有相同的信息。
HD DVD播放器的系统模型如图31所示。HD DVD播放器除了可以访问光盘B13-3之外,还可以访问永久性存储器B13-1和网络服务器B13-2。输入包括从遥控器B13-9或类似的控制器输入的用户操作信息,输出包括输出到TV监视器和扬声器B13-10的视频数据和音频数据。播放器单元大概包括数据访问管理器B13-4、数据高速缓冲存储器B13-5、导航管理器B13-6、展现引擎B13-7以及AV渲染器B13-8。数据访问管理器B13-4控制对光盘、网络存储器和永久性存储器的访问。数据高速缓冲存储器B13-5包括文件高速缓冲存储器和流缓冲存储器,并临时记录正在重放的数据。导航管理器B13-6包括接收用户操作的用户接口引擎和加载对导航文件并进行语法分析的语法分析器。导航管理器B13-6执行重放初始化,并控制作为标题重放时间轴的标题时间线、和命令等。展现引擎B13-7对视频、音频和字幕数据进行信号分离和解码,并将视频、音频和字幕信息输出到AV渲染器B13-8。AV渲染器B13-8包括控制音频混合的部件以及控制视频混合的部件。该实施例的展现引擎B13-7包括图32所示的视频解码器。展现引擎B13-7接收由导航管理器解释的胶片颗粒帧信息FILMG_FI,并将它转发至解码器的输入端。视频解码器B14-9包括胶片颗粒再现信息分离单元B14-2、视频解码单元B14-3、胶片颗粒再现信息处理单元B14-4、胶片颗粒加法区域设置单元B14-6、以及加法单元B14-7。胶片颗粒再现信息分离单元从编码数据B14-1中分离出胶片颗粒再现信息(胶片颗粒再现信息处理单元B14-4再现胶片颗粒所必需的信息)。视频解码单元B14-3对编码数据进行解码,从该编码数据中分离出胶片颗粒再现信息,以获得解码图像。胶片颗粒再现信息处理单元B14-4根据胶片颗粒再现信息产生胶片颗粒图像。此时,由于胶片颗粒图像是为各个图像块产生的,所以它具有对应于块的尺寸倍数的垂直和水平尺寸。胶片颗粒加法区域设置单元B14-6按照胶片颗粒帧信息FILMG_FI B14-5将胶片颗粒信息分为加法区域和非加法区域。此时,胶片颗粒帧区域是胶片颗粒非加法区域,主视频显示区域是胶片颗粒加法区域。非加法区域的胶片颗粒图像的信号级别为0。加法单元B14-7对胶片颗粒图像的加法区域和解码图像进行相加,以产生输出图像B14-8。由这些操作产生的输出图像从不将胶片颗粒加到黑条上,即使在影片材料包括黑条的情况下。
下面将对向HD DVD视频标准内容提供胶片颗粒帧信息的方法进行描述。
标准内容的视频管理器VMG的视频管理器信息区域VMGI具有如图33-35所示的构造,并包括视频管理器信息管理表VTSI_MAT、标题搜索指针表TT_SRPT、视频管理器菜单PGCI单元表VMGM_PGCI_UT、父级管理信息表PTL_MAIT、视频标题集属性信息表VTS_ATRT、文本数据管理器TXTDT_MG、首先播放PGC菜单单元地址表FP_PGCM_C_ADT、首先播放PGC菜单增强型视频对象单元地址映射FP_PGCM_EVOBU_ADMAP、和视频管理器菜单单元地址表VMGM_C_ADT以及视频管理器菜单增强型视频对象单元地址映射VMGM_VOBU_ADMAP。以VMG识别信息、VMGI中的地址信息、FP_PGCM和VMGM视频、音频和字幕数据以及相似的信息对VMGI_MAT进行了配置。在该实施例中,VMGI_MAT记录了FP_PGCM胶片颗粒帧信息FP_FILMG_FI以及VMGM胶片颗粒帧信息VMGM_FILMG_FI。胶片颗粒帧信息FP_FILMG_FI/VMGM_FILMG_FI记录了视频显示区域开始X坐标FILMG_x1、视频显示区域开始Y坐标FILMG_y1、视频显示区域结束X坐标FILMG_x2、以及视频显示区域结束Y坐标FILMG_y2,这些坐标表示作为胶片颗粒帧的剪辑部分的视频显示区域,这和高级内容的情况是一样的。由于在这个区域记录了FILMG_FI,所以标准内容可以具有每个FP_PGC和每个VTSM的FILMG_FI。当没有使用胶片颗粒帧时,用0填充胶片颗粒帧信息FP_FILMG_FI/VMGM_FILMG_FI区域。这个区域通常是用0填充的保留区域,从而保持对通常的内容和播放器的兼容性。
视频标题集信息区域VTSI被配置为如图36-38所示的构造,并包括视频标题集信息管理表VTSI_MAT、视频标题集PTT搜索指针表VTS_PTT_SRPT、视频标题集程序链信息表VTS_PGCIT、视频标题集菜单PGCI单元表VTSM_PGCI_UT、视频标题集时间映射表VTSM_TMAPT、视频标题集菜单单元地址表VTSM_C_ADT、视频标题集菜单视频对象单元地址映射VTSM_EVOBU_ADMAP、视频标题集单元地址表VTS_C_ADT、以及视频标题集视频对象单元地址映射VTS_EVOBU_ADMAP。以VTS识别信息、VTSI中的地址信息、VTSM以及VTS标题的视频、音频和字幕数据的属性信息以及类似的信息对VTSI_MAT进行了配置。在该实施例中,VTSI_MAT记录了VTSM胶片颗粒帧信息VTSM_FILMG_FI和VTS标题胶片颗粒帧信息VTSTT_FILMG_FI。胶片颗粒帧信息VTSM_FILMG_FI/VTSTT_FILMG_FI具有与前文所述的信息FP_FILMG_FI/VMGM_FILMG_FI相同的信息。由于在这个区域记录了FILMG_FI,所以标准内容可以具有每个VTSM和每个VTS标题的FILMG_FI。当没有使用胶片颗粒帧时,用0填充胶片颗粒帧信息FILMG_FI区域。这个区域通常是用0填充的保留区域,从而保持对通常的内容和播放器的兼容性。
由于标准内容的HD DVD播放器系统模型和包括在HD DVD播放器系统模型中的展现引擎中的视频解码器与在高级内容情况下的是一样的(图31和32),因此胶片颗粒从来不被加到黑条中,即使在影片材料包括黑条的情况下。
如上所述,数据包括胶片颗粒帧的剪辑区域的信息。为各个块产生的胶片颗粒图像被分进加法区域和非加法区域,胶片颗粒图像的非加法区域的信号级别被设置为0。如图27所示,在将解码图像和胶片颗粒图像相加时,只有加法区域的胶片颗粒图像被加到解码图像,从而避免被叠加的胶片颗粒出现在接触视频区域的黑条区域上的问题。
对于本领域的技术人员而言,很容易产生其他的优点和修改。因此,在广义上的本发明不局限于文中示出和描述的特定细节以及描写的实施例。于是,在不脱离由附加的权利要求和他们的等价定义的通常发明概念的精神或范围的情况下,可以进行很多修改。
权利要求
1.一种信息重放方法,用以重放记录了由信息编码方法产生的编码信息的信息存储介质,其特征在于包括
从包含在编码信息中的第一模型信息中产生噪声图像信息;
通过对包含在编码信息中的编码图像信息进行解码,来产生解码图像信息;
基于解码图像信息和噪声图像信息,产生输出图像信息;以及
输出所述输出图像信息。
2.按照权利要求1所述的方法,其特征在于所述信息编码方法包括
通过对输入图像信息实施降噪处理,来从输入图像信息中产生主图像信息;
从输入图像信息和主图像信息中估计包含在输入图像信息中的噪声图像信息,以产生对应于噪声图像信息的第一模型信息;
对包含在第一模型信息中的多个参数中的不满足预定条件的参数进行校正,以产生包括反映校正的多个参数的第二模型信息;
对主图像信息进行编码,以产生编码图像信息;以及
产生包括编码图像信息、第一模型信息和第二模型信息的编码信息。
3.按照权利要求2所述的方法,其特征在于所述信息存储介质存储编码信息。
4.按照权利要求1所述的方法,其特征在于所述信息编码方法包括
对输入图像信息进行编码,以产生编码图像信息;
从输入图像信息以及编码图像信息的解码图像信息中,估计在产生编码图像信息时丢失的噪声图像信息,以产生对应于噪声图像信息的第一模型信息;
对包含在第一模型信息中的多个参数中的不满足预定条件的参数进行校正,以产生包括反映校正的多个参数的第二模型信息;以及
产生包括编码图像信息、第一模型信息和第二模型信息的编码信息。
5.按照权利要求4所述的方法,其特征在于信息存储介质存储了编码信息。
6.一种信息重放方法,用以重放信息存储介质,该信息存储介质记录了由信息编码方法产生的编码信息,其特征在于包括
通过对包含在编码信息中的编码图像信息进行解码,来产生解码图像信息;
基于包含在解码信息中的模型信息中的区域信息,将模型信息中的噪声图像信息合成到解码图像信息;以及
输出合成的图像。
7.按照权利要求6所述的方法,其特征在于信息编码方法包括
通过对输入图像信息实施降噪处理,从输入图像信息中产生主图像信息;
从输入图像信息和主图像信息中估计包含在输入图像信息中的噪声图像信息,以产生模型信息,该模型信息包括噪声图像信息和区域信息,该区域信息指示噪声图像信息到主图像信息的合成区域;
对主图像信息进行编码,以产生编码图像信息;以及
产生包括编码图像信息和模型信息的编码信息。
8.按照权利要求7所述的方法,其特征在于信息存储介质存储了编码信息。
9.按照权利要求6所述的方法,其特征在于信息编码方法包括
对输入图像信息进行编码,以产生编码图像信息;
从输入图像信息以及编码图像信息的解码图像信息中,估计在产生编码图像信息时丢失的噪声图像信息,以产生模型信息,该模型信息包括噪声图像信息、和噪声图像信息到主图像信息的合成区域;
对主图像信息进行编码,以产生编码图像信息;以及
产生包括编码图像信息和模型信息的编码信息。
10.按照权利要求9所述的方法,其特征在于信息存储介质存储了编码信息。
11.一种信息重放方法,用以重放信息存储介质,该信息存储介质存储了包括图像区域和非图像区域的图像信息、要被合成到图像信息的噪声图像信息、以及控制非图像区域和噪声图像的重叠区域的显示的控制信息,该方法的特征在于包括
基于要被叠加在非图像区域上的控制图像的色彩信息、以及指示了包括在控制信息中的图像区域的显示位置的位置信息,产生控制图像;
对图像信息、噪声图像信息和控制图像进行合成;以及
输出合成的图像。
12.按照权利要求11所述的方法,其特征在于基于噪声图像信息和指示了图像区域显示位置的位置信息,将噪声图像信息合成到图像区域;
输出合成图像;以及
控制信息包括位置信息。
13.一种信息编码方法,其特征在于包括
通过对输入图像信息实施降噪处理,从输入图像信息中产生主图像信息;
从输入图像信息和主图像信息中估计包含在输入图像信息中的噪声图像信息,以产生对应于噪声图像信息的第一模型信息;
对包含在第一模型信息中的多个参数中的不满足预定条件的参数进行校正,以产生包括反映校正的多个参数的第二模型信息;
对主图像信息进行编码,以产生编码图像信息;以及
产生包括编码图像信息、第一模型信息和第二模型信息的编码信息。
14.一种信息存储介质,用以存储编码信息,该编码信息由按照权利要求13的信息编码方法产生。
全文摘要
本发明提供了信息编码方法、信息重放方法和信息存储介质。按照一个实施例,信息编码方法通过对输入的图像信息实施降噪处理来从输入图像信息中产生主图像信息,从输入图像信息和主图像信息中估计包含在输入图像信息中的噪声图像信息,以产生对应于噪声图像信息的第一模型信息,对包含在第一模型信息中的多个参数中的不满足预定条件的参数进行校正,产生包括反映该校正的多个参数的第二模型信息,对主图像信息进行编码,产生编码图像信息,并产生包括编码图像信息、第一模型信息和第二模型信息的编码信息。
文档编号H04N7/26GK101262602SQ20081000653
公开日2008年9月10日 申请日期2008年2月28日 优先权日2007年2月28日
发明者伊达直人, 山影朋夫, 小野寺美枝子 申请人:株式会社东芝