专利名称:图像处理设备和图像处理方法
技术领域:
本发明涉及适用于例如编码设备对通过数字地面广播传送的图像数据进行编码的图像处理设备和图像处理方法。
背景技术:
对通过数字地面广播传送的广播节目内容进行编码并将该广播节目内容存储在硬盘或光盘中的图像处理设备是众所周知的。该图像处理设备的例子包括硬盘记录器或蓝光盘(注册商标)记录器。在数字地面广播中,由观看者观看的广播节目内容和与广播节目内容相关的信息(在下文中称为EPG信息)被传送。EPG信息包含广播节目内容的细节或关键词、广播时间表、以及与广播节目内容的类型相关的类型信息。能够以更高的压缩比再次存储在一段时间内未被再现的已存储的广播节目内容的图像处理设备是已知的(例如参见日本未审专利申请公开2009-10603)。在该图像处理设备中,根据类型信息选择压缩比和增大该压缩比的时间。根据广播节目内容的细节对类型信息进行分类。在一些情况下,图像数据的特性可以根据广播节目内容的细节而改变。因此,认为该图像处理设备在对图像数据进行编码时可以有效地利用类型信息。希望提供一种能够改善图像质量的图像处理设备和图像处理方法。
发明内容
根据本发明的实施例,提供了一种图像处理设备,该设备包括:确定单元,该确定单元根据类型信息来确定表示对能够通过对编码数据进行解码而获得的局部图像进行滤波的滤波器的特性的特性参数;特性改变单元,该特性改变单元根据由确定单元确定的特性参数来改变该滤波器的特性;以及编码单元,该编码单元通过利用根据由特性改变单元改变的滤波器的特性进行滤波后的局部解码图像执行预测处理,来产生该编码数据。利用这种配置,由于该图像处理设备可以将节目内容细节反映到滤波器的特性上,因此可以适当地设置滤波器的特性。根据本发明的实施例,提供了一种图像处理方法,该方法包括以下步骤:根据类型信息来确定表示对能够通过对编码数据进行解码而获得的局部图像进行滤波的滤波器的特性的特性参数;根据在对特性参数的确定中确定的特性参数来改变该滤波器的特性;以及通过利用根据对滤波器特性的改变中改变的滤波器的特性进行滤波后的局部解码图像执行预测处理,而产生该编码数据。利用这种配置,由于该图像处理方法可以将节目内容细节反映到滤波器的特性上,因此可以适当地设置滤波器的特性。根据本发明的所述实施例,可以将节目内容细节反映到滤波器的特性上。因此,由于可以适当地设置滤波器特性,因此可以实现能够改善图像质量的图像处理设备和图像处
理方法。
图1是示出图像处理设备的配置的示意图。图2是示出图像编码单元的配置的示意图。图3是示出滤波器块和宏块的示意图。图4是示出α和β的定义的示意图。图5是示出滤波器强度参数的确定的示意图。图6是不出偏移值的设置的不意图。图7是示出滤波器特性的设置序列的示意图。图8是示出附加系数表的示意图。图9是示出根据另一实施例的异常滤波器强度参数的示意图。图10是示出使用时间信息的示例性滤波器特性改变处理的示意图。
具体实施例方式根据本发明的实施例,提供了一种图像处理设备,该设备包括:确定单元,该确定单元根据类型信息来确定表示对能够通过对编码数据进行解码而获得的局部图像进行滤波的滤波器的特性的特性参数;特性改变单元,该特性改变单元根据由确定单元确定的特性参数来改变该滤波器的特性;以及编码单元,该编码单元通过利用根据由特性改变单元改变的滤波器的特性进行滤波后的局部解码图像执行预测处理,来产生该编码数据。根据本发明的实施例,提供了一种图像处理方法,该方法包括以下步骤:根据类型信息来确定表示对能够通过对编码数据进行解码而获得的局部图像进行滤波的滤波器的特性的特性参数;根据在对特性参数的确定中确定的特性参数来改变该滤波器的特性;以及通过利用根据对滤波器特性的改变中改变的滤波器的特性进行滤波后的局部解码图像执行预测处理,而产生该编码数据。下面对照附图详细描述本发明的优选实施例。该描述按照以下顺序进行。1.第一实施例(滤波器特性根据图像特性而变化)2.第二实施例(其它信息的使用)3.其它实施例1.第一实施例1-1.图像处理设备的配置图1是示出图像处理设备的总体配置的图。图像处理设备I包括硬盘记录器以及能够接收和存储广播节目内容作为节目内容的个人计算机。数字广播接收单元2包括连接到天线或网络(例如互联网)并接收广播信号SI (例如数字地面广播)的外部接口。例如按照标准MPEG (运动图像专家组)2对广播信号SI进行编码。
当数字广播接收单元2接收代表广播节目内容的广播信号SI时,数字广播接收单元2将广播信号SI作为广播信号S2而提供给数字调谐单元3。数字调谐单元3对广播信号S2进行解码以产生EPG (电子节目指南)信息S3、图像数据S4和音频数据S5,并将EPG信息S3、图像数据S4和音频数据S5提供给诸如电视设备之类的显示设备(未示出)。EPG信息包含广播节目内容的细节或关键词、广播时间表、广播站信息、时间信息和类型信息。作为结果,显示基于图像数据S4的图像,并输出基于音频数据S5的声音。此外,响应于用户的请求而显示EPG信息的各种信息。数字调谐单元3将EPG信息S3和图像数据S4提供给图像编码单元4并将音频数据S5提供给音频编码单元5。图像编码单元4按照H.264/AVC (先进视频编码)方法对图像数据S4进行编码,以通过下面描述的图像编码处理来产生比特流S6,然后将该比特流S6提供给存储单元6。音频编码单元5通过预定的编码方法对音频数据S5进行编码以产生音频编码数据S7,并将该音频编码数据提供给存储单元6。存储单元6包括硬盘、诸如蓝光盘(注册商标)之类的光盘驱动器、以及闪速存储器。存储单元6相互对应地存储比特流S6和音频编码数据S7。作为结果,广播节目内容以编码状态被存储在存储单元6中。图像处理设备I响应于用户的请求而读取存储在存储单元6中的广播节目内容,通过解码单元(未示出)对广播节目内容进行解码并再现该图像数据S4和音频数据S5。解码单元将图像数据S4和音频数据S5提供给显示设备。作为结果,在该显示设备中显示基于图像数据S4的图像并输出基于音频数据S5的声音。1-2.图像编码单元的配置如图2所示,当EPG信息S3和图像数据S4被从数字调谐单元3提供时,图像编码单元4将EPG信息S3和图像数据S4分别提供给EPG信息接收部分31和画面重排缓冲器12。在图像数据S4的情况下,画面重排缓冲器12按照GOP(画面组)的结构重排图像数据S4,并将重排的图像数据S4提供给计算部分13、运动预测补偿部分14、帧内预测(intraprediction)部分15和计算部分25。在图像数据S4被巾贞间编码(inter-encoded)时,计算部分13从图像数据S4减去从运动预测补偿部分14提供的预测值L5,并将相减结果作为差分数据Dl而提供给正交变换部分17。在图像数据S4被巾贞内编码(intra-encoded)时,计算部分13从图像数据S4减去从帧内预测部分15提供的预测值L5,并将相减结果作为差分数据Dl而提供给正交变换部分17。正交变换部分17对差分数据Dl执行诸如DCT (离散余弦变换)变换或Karhunen-Loeve变换之类的正交变换,并将正交变换系数D2提供给量化部分18。量化部分18通过使用由速率控制部分19的控制确定的量化参数QP来对正交变换系数D2进行量化,并将量化系数D3提供给逆量化部分23和可逆编码部分20。可逆编码部分20根据诸如CAVLC (基于上下文自适应的可变长度码)或CABAC (上下文自适应二进制算术编码)之类的熵编码方法对量化系数D3执行可逆编码,并将可逆编码数据D5提供给存储缓冲器21。
可逆编码部分20将与帧内编码和帧间编码相关的信息以及从运动预测补偿部分14和帧内预测部分15获取的信息设置到可逆编码数据D5的头部信息。存储缓冲器21存储可逆编码数据D5,并以预定的传输速率输出可逆编码数据D5作为比特流S6。速率控制部分19监测存储缓冲器21,并确定量化参数QP,使得可逆编码数据D5的产生码量接近于每个预定控制单元的特定码量(例如帧或G0P)。逆量化部分23执行对量化系数D3的逆量化以产生再现正交变换系数LI,并将该再现正交变换系数LI提供给逆正交变换部分24。逆正交变换部分24执行对再现正交变换系数LI的逆正交变换以产生再现差分数据L2,并将该再现差分数据L2提供给计算部分25。计算部分25将再现差分数据L2与从运动预测补偿部分14或帧内预测部分15提供的预测值L5相加,以产生处理目标块的局部解码图像L3,并将该局部解码图像L3提供给去块(deblocking)滤波器26和帧存储器27。去块滤波器26对处理目标块执行去块滤波器处理,并将结果提供给帧存储器27。作为结果,经过去块滤波器处理的局部解码图像L4被存储在帧存储器27中。帧存储器27将经过去块滤波器处理的局部解码图像L4中的与基准目标块相对应的局部解码图像L4提供给运动预测补偿部分14或帧内预测部分15。运动预测补偿部分14通过参考局部解码图像L4进行与图像数据S4相关的运动预测来产生处理目标块的预测值L5,并将预测值L5提供给计算部分13和25。帧内预测部分15通过参考局部解码图像L4进行与图像数据S4相关的帧内预测来产生该处理目标块的预测值L5,并将该预测值L5提供给计算部分13和25。这样,图像编码单元4对图像数据S4进行编码以产生比特流S6。1-3.去块滤波器处理接下来,描述由去块滤波器26进行的去块滤波器处理。图像编码单元4对由预定像素数形成的每个处理单元块执行上述编码处理。处理单元块基本上是具有16X16个像素的宏块,但是处理单元块的大小取决于所处理的内容。例如,正交变换部分17对具有4X4个像素或8X8个像素的每个DCT块执行DCT处理。量化部分18通过使用在每个宏块中设置的量化参数QP来执行量化处理。因此,在一些情况下在由逆正交变换部分24产生的局部解码图像L3中可能出现块之间的失真(在下文中称为块失真)。当图像编码单元4参考包含该块失真的局部解码图像L3产生预测值L5时,图像编码单元4可能扩散了图像质量的劣化。因此,图像编码单元4执行去块滤波器处理以消除块失真,产生局部解码图像L4,然后参考局部解码图像L4产生预测值L5。结果,图像编码单元4几乎不扩散编码中导致的图像质量的劣化。去块滤波器处理导致图像分辨率的劣化,但是减小了块失真。因此,图像编码单元4选择性地对在其处容易出现块失真的区域施加去块滤波器。如图3所示,作为处理目标的具有4X4个像素的块被称为滤波器块P。与滤波器块P的右侧或下侧相邻接的块被称为邻接块Q。滤波器块P和邻接块Q之间的边界被称为块边界(由粗实线表示)。与块边界相邻接的像素被称为PO和q0。滤波器块的在以下方向上的像素被称为pl、p2和p3:该像素沿着该方向而远离块边界。邻接块Q的同样方式的像素被称为ql、q2和q3。宏块之间的边界被称为宏块边界。去块滤波器26根据滤波器块P距宏块中的块边界的位置来确定块边界的强度Bs、滤波器P是否是内部块、以及帧间编码中的基准画面和运动矢量值。按五个阶段“O”至“4”评估块边界的强度Bs。当表达式I至4都被满足时,去块滤波器26对块边界施加去块滤波器。相反地,当表达式I至4任何一个未被满足时,去块滤波器26不对块边界施加去块滤波器。表达式IBs>0......(I)表达式2I p0-q0 |〈 α......(2)表达式3|ρ1-ρθ|〈β......(3)表达式4I ql-qO | < β......(4)也就是说,当滤波器块P和邻接块Q是帧间块且具有几乎与基准画面相同的设计时,去块滤波器26将块边界的强度Bs评估为“O”。此时,去块滤波器26不对块边界施加去块滤波器。只有当块边界的强度Bs为“I”或以上、且以下条件I)至3)都被满足时,去块滤波器26才对块边界施加去块滤波器:I)与块边界相邻接的像素值PO和qO之间的差小于指标α ;2)像素值ρ0和与像素值ρ0相邻接的像素值pi之间的差小于指标β ;以及3)像素值qO和与像素值q0相邻接的像素值ql之间的差小于指标β。在此,图4示出指标α和β的列表。如图4中所示,与量化参数QP相对应地设置指标α和β。当量化参数QP的值增加时,指标α和β的值也增加。换句话说,当量化参数QP较小时(小于等于“15”),去块滤波器26不对块边界施加去块滤波器。这是因为几乎不出现块失真。当量化参数QP大时(大于等于“16”),去块滤波器26根据像素值之间的差而确定是否施加去块滤波器。当在像素值之间的差大的情况下施加去块滤波器时,分辨率可能显著劣化。当量化参数QP相对小、块失真出现的可能性小、且块失真的出现程度小时,即使在出现块失真时,去块滤波器26也优先保持分辨率而不是减小块失真。只有当像素值之间的差进一步小于具有小的值的指标α和β时,去块滤波器26才施加去块滤波器。也就是说,当量化参数QP相对小时,去块滤波器26仅在保持分辨率的情况下才对块边界施加去块滤波器。因此,去块滤波器的强度变小。当量化参数QP大时,块失真出现的可能性大,并且块失真的出现程度大,从而显现块失真。当量化参数QP相对大时,去块滤波器26优先减小噪声而不是保持分辨率。当像素值之间的差小于具有大的值的指标α和β时,去块滤波器26施加去块滤波器。也就是说,当量化参数QP相对大时,去块滤波器26很可能对块边界施加去块滤波器。因此,去块滤波器的强度变大。
也就是说,去块滤波器26通过对块失真出现的可能性和分辨率的减小进行比较来确定指标α和β,以随着量化参数QP的值的增加而优先减小噪声,而不是保持分辨率。例如,当量化参数QP是“30”时,去块滤波器26选择“25”和“8”分别作为指标α和β。去块滤波器26通过参考表达式I至4使用指标α和β来确定是否对块边界施加去块滤波器。H.264/AVC标准描述了当指标α和β被选择时可以将量化参数QP加上偏移(在下文中称为QP偏移)。这样,可以改变块失真的减小和分辨率的减小之间的优先次序。然而,广播节目内容提供具有各种图像和图像质量的图像数据。例如,在介绍自然、历史建筑等的广播节目内容中,图像质量是非常重要的因素,因此优先保持分辨率。替代性地,在诸如体育之类的广播节目中,分辨率不是重要因素,因此优先去除噪声。在数字地面广播中,传送EPG信息以及广播节目内容。EPG信息包含根据广播节目内容的细节来分类的类型信息以及广播时间表信息或广播节目内容的细节。根据该实施例的图像编码单元4通过根据类型信息选择QP偏移来根据广播节目内容的细节而改变块失真的减小和分辨率的维持之间的优先次序。1-4.滤波器特性的设置接下来描述根据类型信息设置去块滤波器26的强度的滤波器特性设置处理。在具有运动活跃的图像的广播节目内容中,由于用户主要观看运动,所以分辨率不是重要的。因此,在具有运动活跃的图像的广播节目内容所属的类型中,噪声的减小必须优先于分辨率的维持。相反地,在具有运动少的图像的广播节目内容中,完整的图像是重要因素,因此由于用户不主要观看具体图像,分辨率的保持必须是优先的。如上所述,在数字地面广播中,传送根据诸如MPEG-2等的编码方法而编码的图像数据。具体来说,在现场直播的广播中,由于广播节目内容被实时传送,所以广播节目内容的分辨率通常是低的。因此,在输入阶段,在一些情况下可能已经出现块失真。在具有低质量的图像数据S4的广播节目内容所属的类型中,噪声的减小优先于分辨率的保持。另一方面,在介绍自然、历史建筑等的广播节目内容中,传送由能够拍摄高质量画面的设备拍摄的高质量图像。因此,在具有高质量图像数据S4的广播节目内容所属的类型中,分辨率的维持优先于噪声的减小。在介绍音乐的广播节目内容中,歌手唱歌的场景是非常重要的因素。在该场景中,由于观看者主要观看歌手的表情,所以观看者甚至可能注意到小的块失真。因此,在具有观看者主要观看其区域的重要场景中的纹理(texture)的广播节目内容所属的类型中,噪声的减小必须优先于分辨率的保持。在本实施例中,根据广播节目内容的每个类型的图像数据S4的视觉特征来评估噪声的减小和分辨率的维持的优先次序。根据该优先次序,调整去块滤波器26的强度。图5是示出类型信息和与类型信息相对应的滤波器强度参数的列表的图。在数字地面广播中,广播节目内容被分类为12个类型(所谓的大分类)。在本实施例中,根据上述规则,对表示噪声减小的优先次序的噪声优先次序因素进行计分。根据总点数确定去块滤波器处理中的滤波器强度。在该实施例中,噪声优先次序因素的例子包括“运动”、“输入”和“纹理”。在具有运动活跃的图像的广播节目内容所属的类型中,噪声的减小必须优先。因此增大分数。“输入”是表示输入图像数据S4的质量的噪声优先次序因素。当质量低时,噪声的减小必须优先。因此增大分数。“纹理”是表示具有观看者主要观看的区域的图像的噪声优先次序因素。噪声的减小必须优先。因此增大分数。噪声优先次序因素的最高分数(在括号中示出)彼此不同。也就是说,根据重要性对噪声优先次序因素进行加权。通过将相应的噪声优先次序因素的值相加获得的高的总分数意味着噪声的减小优先于分辨率的保持,因此将滤波器的强度设置为大的。相反地,低的总分数意味着分辨率的保持优先于噪声的减小,并且将滤波器的强度设置为低的。在本实施例中,总分数“9”是中间值。当总分数在“8”至“10”的范围内时,将滤波器强度参数设置为“中”。当总分数是“11”或以上时,将滤波器强度参数设置为“大”。当总分数是“7”或以下时,将滤波器强度参数设置为“小”。特别地,在新闻/报导中,由于包括其运动活跃的诸如体育之类的图像和在记者陈述新闻时传送的接近于静止的图像,所以“运动”被评估为“4”作为中间值。在新闻/报导中,由于存在从预先录制的图像到现场直播的广播图像的各种质量的图像数据S4,所以“输入”被评估为“2”作为中间值。在新闻/报导中,由于相同的原因,“纹理”也被评估为“3”作为中间值。结果,总分数为“9”。因此,滤波器强度参数被设置为“中”。在体育中,由于运动十分活跃,所以“运动”被评估为“7”作为最大值。在体育中,由于体育主要被实时广播,所以“输入”被评估为“3”作为最大值,并且“纹理”被评估为“2”作为中间值。结果,总分数是“13”,因此滤波器强度参数被设置为“大”。在信息/谈话节目(wide show)中,如同新闻/报导中那样,由于输入各种图像数据S4,所以“运动”、“输入”和“纹理”被评估为“4”、“2”和“3”作为中间值。结果,总分数是“9”,因此滤波器强度参数被设置为“中”。在戏剧中,存在各种诸如爱情剧之类的其运动不活跃的戏剧、以及诸如动作剧和体育剧之类的戏剧。因此,在戏剧中,如同新闻/报导那样,“运动”、“输入”和“纹理”被评估为“4”、“2”和“3”作为中间值。结果,总分数是“9”,因此滤波器强度参数被设置为“中”。在音乐中,由于照相机工作或闪光灯照明,“运动”相对活跃,因此被评估为“6”。由于其中歌手唱歌的场景,“纹理”被评估为“5”。“输入”被评估为“2”作为中间值。结果,总分数是“13”,因此滤波器强度参数被设置为“大”。在综艺节目中,由于动作游戏中表演者的运动相对活跃并且还存在大量照相机工作,所以“运动”被评估为“6”。在综艺节目中,“输入”和“纹理”被评估为“2”和“3”作为中间值。结果,总分数是“11”,因此滤波器强度参数被设置为“大”。在电影中,如同戏剧节目中那样,存在各种诸如爱情电影之类的其运动不活跃的电影、以及诸如动作电影和体育电影之类的其运动活跃的电影。因此,在电影节中,如同新闻/报导和戏剧中那样,“运动”、“输入”和“纹理”被分别评估为“4”、“2”和“3”作为中间值。结果,总分数是“9”,因此滤波器强度参数被设置为“中”。动画/特效拍摄是动画和特效拍摄的结合形式。动画主要由其色调被快速改变的线图像形成,并具有其中块失真容易被注意到的特征。然而,特效拍摄是现场动作。由于照相机工作不多,运动不活跃,因此特效拍摄具有不同于动画的特征。因此,在动画/特效拍摄中,与新闻/报导和戏剧一样,“运动”、“输入”和“纹理”分别被评估为“4”、“2”和“3”作为中间值。结果,总分数是“9”,因此滤波器强度参数被设置为“中”。在记录片/文化节目中,由于主要拍摄风景而不是表演者,所以运动不活跃。“运动”被评估为“2”。由于分辨率的影响大,所以“纹理”被评估为“2”。在纪录片/文化节目中,节目由能够拍摄高质量画面的设备拍摄并被小心地处理。由于图像数据S4通常具有高分辨率,所以“输入”被评估为“ I ”。结果,总分数是“5”,因此滤波器强度参数被设置为“小”。在剧场/演出中,有许多节目,例如其运动不活跃的喜剧故事、以及诸如舞蹈和芭蕾之类的其运动活跃的且照相机工作多的节目。因此,在剧场/演出中,如同新闻/报导和戏剧中那样,“运动”、“输入”和“纹理”被分别评估为“4”、“2”和“3”作为中间值。结果,总分数是“9”,因此滤波器强度参数被设置为“中”。在爱好/文化节目中,有很多节目,例如介绍如何从事园艺或如何玩日本象棋的节目,并且存在很多用于进行解说的静止画面。因此,在爱好/文化节目中,“运动”被评估为“2”,并且“输入”和“纹理”被分别评估为“2”和“3”作为中间值。结果,总分数是“9”,因此滤波器强度参数被设置为“中”。在福利节目中,有包括介绍福利问题的节目的各种其运动不活跃的节目、以及其运动活跃的包括文本广播的历史剧。因此,在福利节目中,如同新闻/波导和戏剧中那样,“运动”、“输入”和“纹理”被分别评估为“4”、“2”和“3”作为中间值。结果,总分数是“9”,因此滤波器强度参数被设置为“中”。特别地,当图像编码单元4的EPG信息接收部分31 (见图2)接收从数字调谐单元3提供的EPG信息S3时(见图1),EPG信息接收部分31将EPG信息S3提供给类型信息接收部分32。类型信息接收部分32从EPG信息S3中提取与作为记录目标的广播节目内容相对应的类型信息,并将该类型信息提供给强度确定部分33。强度确定部分33存储通过与滤波器强度参数和类型信息相对应而制成的设置表。当强度确定部分33选择对应于类型信息的滤波器强度参数时,强度确定部分33将该滤波器强度参数提供给强度设置部分34。强度设置部分34根据从强度确定部分33提供的滤波器强度参数将在量化处理中使用的量化参数QP的值加上QP偏移。也就是说,强度设置部分34根据滤波器强度参数而改变包含在局部解码图像L3的切片头部中的slice_alpha_c0_offset_div2和slice_beta_offset_div2 的值。如图6中所示,当滤波器强度参数是“大”时,强度设置部分34将Slice_alpha_c0_offset_div2和slice_beta_offset_div2的值设置为“6”。此时,当在量化处理中使用的量化参数QP的值例如是“30”时,去块滤波器26认为量化参数QP的值是通过在选择指标α和β时将量化参数QP的值仅偏移6/2而给出的“33”。如图4中所示,去块滤波器26选择指标α = “36”和指标β = “9”。结果,去块滤波器26能够以与量化参数QP= “33”相同的滤波器强度执行去块滤波器处理,也就是说,滤波器的强度大于在实际量化处理中使用的量化参数QP。当滤波器强度参数是“中”时,强度设置部分34将slice_alpha_c0_offset_div2和slice_beta_offset_div2的值设置为“O”。此时,由于不加上QP偏移,所以去块滤波器26能够以与在实际量化处理中使用的量化参数QP相同的滤波器强度执行去块滤波器处理。当滤波器强度参数是“小”时,强度设置部分34将slice_alpha_c0_offset_div2和slice_beta_offset_div2的值设置为“_6”。此时,当在量化处理中使用的量化参数QP的值例如是“30”时,去块滤波器26认为量化参数QP的值是通过在选择指标α和β时将量化参数QP的值仅偏移6/2而给出的“27”。去块滤波器26根据量化参数QP= “27”选择指标α= “17”和指标β= “6”。结果,去块滤波器26能够以与量化参数QP= “27”相同的滤波器强度执行去块滤波器处理,也就是说,滤波器的强度小于在实际量化处理中使用的量化参数QP。这样,图像编码单元4根据取决于广播节目内容的各个类型而不同的图像数据S4的视觉特征来评估表示噪声减小的优先次序的噪声优先次序因素。图像编码单元4根据对该噪声优先次序因素的评估来调整去块滤波器26的强度。图像编码单元4可以根据图像数据S4的视觉特征来改变去块滤波器26的强度。因此,由于图像编码单元4设置适用于图像数据S4的滤波器强度,所以图像编码单元4可以改善局部解码图像L4的质量。结果,由于图像编码单元4参考该高质量局部解码图像来对图像数据S4进行编码,所以图像编码单元4可以改善比特流S6的图像质量。上述系列的编码处理和滤波器特性设置处理可以通过硬件或软件来执行。当通过软件执行该编码处理和滤波器特性设置处理时,实际上由CPU和RAM实现图像编码单元4。然后,将存储在ROM中的编码处理程序和滤波器特性设置处理程序展开在RAM中,以执行编码处理和滤波器特性设置处理。1-5.滤波器特性设置处理的序列接下来,对照图7的流程图描述根据滤波器特性设置处理程序执行的滤波器特性设置处理的序列RTI。图像编码单元4开始滤波器特性设置处理的序列RTl。在步骤SPl中,当EPG信息S3和图像数据S4被提供时,该处理前进到接下来的步骤SP2。在步骤SP2中,当图像编码单元4根据EPG信息获取类型信息时,该处理前进到接下来的步骤SP3。在步骤SP3中,图像编码单元4确定与类型信息相对应的滤波器强度参数。此时,当图像编码单元4确定滤波器强度参数是“大”时,该处理前进到步骤SP4。或者,当图像编码单元4确定滤波器强度参数是“中”时,该处理前进到步骤SP5。或者,当图像编码单元4确定滤波器强度参数是“小”时,该处理前进到步骤SP6。在步骤SP4中,图像编码单元4增大滤波器的强度并优先减小噪声。因此,当slice_alpha_c0_offset_div2 和 slice_beta_offset_div2 的值分别被设置为“6”时,该处理前进到接下来的步骤SP7。在步骤SP5中,图像编码单元4保持滤波器的标准强度。因此,当Slice_alpha_c0_offset_div2和slice_beta_offset_div2的值被分别设置为“O”时,该处理前进到接下来的步骤SP7。在步骤SP6中,图像编码单元4减小滤波器的强度并保持分辨率。因此,当slice_alpha_c0_offset_div2 和 slice_beta_offset_div2 的值分别被设置为“6”时,该处理前进到接下来的步骤SP7。
在步骤SP7中,当图像编码单元4以在步骤SP4至SP6中设置的滤波器的强度执行去块滤波器处理时,该处理前进到结束步骤以结束该处理。1-6.操作和优点利用上述配置,图像处理设备I的图像编码单元4接收广播节目内容的图像数据S4和与该广播节目内容相关的类型信息作为从数字调谐单元3提供的节目内容。图像编码单元4确定滤波器强度参数作为表示对局部解码图像L3进行滤波的滤波器(去块滤波器26)的特性的特性参数,其中该局部解码图像L3是通过对根据类型信息编码的量化系数D3执行局部解码而获得的。图像编码单元4根据所确定的滤波器强度参数来改变滤波器的特性(滤波器的强度)。图像编码单元4通过使用滤波后的局部解码图像L4执行预测处理(画面内(inside picture)预测和运动预测)来对该图像数据进行编码。此时,图像编码单元4对作为编码图像数据的量化系数D3进行解码,以产生局部解码图像L3。图像编码单元4执行去块滤波器处理作为对所产生的局部解码图像L3进行滤波的处理,以产生局部解码图像L4。这样,图像编码单元4可以将由类型信息表示的广播节目内容的细节反映到滤波器的强度上。也就是说,图像编码单元4可以根据即使分析图像数据S4也不能掌握的广播节目内容的细节而以适当的滤波器强度执行去块滤波器处理。结果,与现有方法相对比地,图像编码单元4可以设置适当的滤波器强度,并且因此可以在分辨率和噪声之间保持平衡。图像编码单元4根据由类型信息表示的图像数据S4的视觉特征来确定滤波器的强度。也就是说,图像编码单元4根据广播节目内容的细节并考虑到观看者观看大量图像而针对滤波器的强度来确定分辨率减小和噪声减小之间的平衡。这样,由于观看者可能未注意到去块的劣化或分辨率的减小,所以图像编码单元4可以改善图像质量。图像编码单元4考虑到当图像的运动活跃时可以允许分辨率的减小。这是因为观看者被图像的运动吸引且因此观看者可能未注意到分辨率的减小。因此,图像编码单元4优先减小其中图像运动活跃的广播节目内容的噪声,并增大滤波器的强度。相反地,当图像的运动不活跃时,观看者观看少量图像,并且因此分辨率的减小是个问题。因此,图像编码单元4优先保持广播节目内容的分辨率并减小滤波器的强度。图像编码单元4考虑当输入图像数据S4的质量低时噪声可能被注意到的可能性。因此,图像编码单元4优先减小具有低质量的类型的广播节目内容的噪声并增大滤波器的强度。相反地,当图像数据S4的质量高时,以高分辨率产生原始图像且因此噪声低。图像编码单元4优先保持具有高质量的类型的广播节目内容的分辨率并减小滤波器的强度。当人的表情是重要因素时,图像编码单元4集中在观看者可能注意到轻微噪声的高可能性上,这是因为观看者主要观看人的面部。因此,图像编码单元4优先减小其中观看者主要观看特定区域的广播节目内容的噪声,并增大滤波器的强度。相反地,当人的存在不是重要因素时,观看者关注特定区域的可能性小。图像编码单元4优先保持其中观看者主要观看特定区域的广播节目内容的分辨率,并减小滤波器的强度。这样,图像编码单元4可以将观看者关注的广播内容的细节的运动或滤波器程度反映在滤波器的强度上。结果,与仅根据图像数据S4的像素的特性来确定滤波器强度的现有方法相比,图像编码单元4可以更适当地设置滤波器的强度。当类型信息表示体育时,图像编码单元4确定滤波器强度参数,使得增大滤波器的强度。这样,图像编码单元4优先减小其中图像数据S4具有低图像质量并且其中运动活跃的广播节目内容的噪声。在其中运动活跃的广播节目内容中,容易出现噪声。图像编码单元4优先减少噪声,从而有效地减小噪声。当类型信息表示音乐时,图像编码单元4确定滤波器强度参数,使得增大滤波器的强度。在其类型信息是音乐的广播节目内容中,歌手唱歌的场景是重要的因素。在该场景中,使用电子照明作为背景或者使用闪光灯。另外,照相机工作多并且因此运动相对活跃。因此,观看者难以注意到分辨率的劣化。另外,由于歌手的表情是重要因素并且观看者主要观看歌手的面部区域,所以观看者容易注意到小的噪声并且观看者感到不满意的区域变得比其它区域更大。这是因为认为当观看者注意到观看者喜欢的歌手的面部区域中存在噪声时观看者可能感觉到不舒服。由于图像编码单元4优先减小噪声,所以可以从歌手的面部区域差不多去除噪声,并且因此观看者可以几乎不感觉到不满意。当类型信息表示综艺节目时,图像编码单元4确定滤波器强度参数,使得增大滤波器的强度。这样,图像编码单元4可以优先减小其中运动活跃的广播节目内容的噪声。当类型信息表示纪录片/文化节目时,图像编码单元4确定特性参数,使得减小滤波器的强度。这样,图像编码单元4可以优先保持其中运动小且其中输入图像数据S4具有高图像质量的广播节目内容的分辨率。也就是说,可以抑制以高分辨率传送的广播节目内容的分辨率的劣化。图像编码单元4参考通过对编码图像数据进行解码产生的局部解码图像L4来对图像数据S4进行编码。去块滤波器26对局部解码图像L3执行去块滤波器处理,以产生局部解码图像L4。这样,图像编码单元4可以参照其中噪声被减小的局部解码图像L3。因此,可以抑制在编码处理中出现的噪声扩散到后续编码的图像。对于滤波器强度参数,基于作为是视觉特征的多个优先次序因素的噪声优先次序参数来评估噪声减小是否优先。按照各个类型信息确定滤波器强度参数。这样,图像编码单元4可以基于多个噪声优先次序因素而全面确定噪声减小是否优先。因此,可以适当地设置滤波器的强度。评估滤波器强度参数,从而按照各个噪声优先次序因素来对滤波器强度参数进行加权。这样,图像编码单元4可以根据重要性针对各个噪声优先次序因素改变优先次序,其中噪声减小优先。因此,可以更适当地设置滤波器的强度。利用这种配置,图像编码单元4通过使用广播节目内容的类型信息而根据由类型信息表示的广播节目内容的细节在对广播节目内容进行编码时设置去块滤波器的滤波器强度。这样,图像编码单元4可以将不能通过分析图像数据S4来识别的广播节目内容的细节反映到滤波器强度上。因此,可以确定噪声的减小和分辨率的保持之间的优先次序。根据本发明的实施例,可以实现该图像处理设备和该图像处理方法。2.第二实施例2-1.使用除了类型信息之外的信息的滤波器特性设置处理根据图8中所示的第二实施例,对图1至图7中所示的第一实施例的相同要素赋予相同的附图标记,并省略相同的描述。第二实施例与第一实施例的不同之处在于,不仅使用类型信息而且还使用除了包含在EPG信息S3中的类型信息之外的信息来改变滤波器的强度。EPG信息S3包含与传送广播节目内容的广播站相关的广播站信息和描述广播节目内容的事件信息以及类型信息。对于广播节目内容,由于广播节目内容被拍摄并被作为发送源的广播站编辑,所以图像数据S4的分辨率由于广播站中使用的设备和技术而具有不同的倾向。在基于从可能传送具有高分辨率的广播节目内容的广播站传送的广播信号SI的图像数据S4中,分辨率的保持必须是优先的。相反地,在基于从可能传送具有低分辨率的广播节目内容的广播站传送的广播信号SI的图像数据S4中,噪声的减小必须是优先的。根据第二实施例,图像编码单元104 (未示出)将广播站信息反映到滤波器强度参数上。事件信息直接描述广播节目内容的细节。例如,当事件信息包含“现场直播广播”、“实况”或“实时远程”时,广播节目内容中最重要的可能是现场直播广播。在此情况下,噪声的减小必须优先于分辨率的保持。当与属于诸如电影、戏剧和爱好/文化之类的除了体育之外的类型的广播节目内容相对应的事件信息中包含“体育标题”时,很可能至少在重要部分中包括体育场景。在此情况下,噪声的减小必须优先于分辨率的保持。当属于纪录片/文化节目类型的广播节目内容的事件信息包含自然或历史建筑的位置名称或者自然或历史建筑的名称时,自然或历史建筑的场景可能被包含在至少重要的部分中。自然现象或历史建筑的位置名称的例子包括“大峡谷”和“大堡礁”。自然现象和历史建筑的名称的例子包括“珊瑚礁”、“山毛榉林”、“丛林”、“世界遗产地”和“历史城市”。在此情况下,分辨率的保持必须优先于噪声的减小。当表示图像数据S4的视觉特征的关键词(在下文中称为特征关键词)被包含在事件信息中时,图像编码单元104将特征关键词反映在滤波器强度参数上。当从EPG信息接收部分31提供EPG信息S3时,与类型信息接收部分32相对应的类型信息接收部分132 (未示出)从EPG信息S3中提取与正被记录的广播节目内容相对应的类型信息和广播站信息,并将类型信息和广播站信息提供给强度确定部分33。类型信息接收部分132存储表示图像数据S4的视觉特征的特征关键词的列表。类型信息接收部分132从EPG信息S3搜索来自与正被记录的广播节目内容相对应的事件信息的关键词。当该特征关键词被包含在事件信息中时,类型信息接收部分132将该特征信息以及类型信息和广播站信息提供给与强度确定部分33相对应的强度确定部分133。
强度确定部分133存储通过与总分数和类型信息相对应而制成的分数表,作为对通过与强度参数和类型信息相对应而制成的设置表的替代(见图5)。如图8中所示,强度确定部分133存储通过与广播站信息、特征关键词和附加系数相对应而制成的附加系数表。强度确定部分133参考该分数表来选择对应于类型信息的总分数。强度确定部分133参考附加系数表来选择从类型信息接收部分132提供的广播站信息以及对应于特征关键词的附加系数。当类型信息是体育时,由于总分数是基于已包含体育场景的假定而确定的,所以排除附加系数的应用。当提供体育标题时,强度确定部分144确认类型信息。只有在类型信息不是体育时,强度确定部分133才选择附加系数。当类型信息不是纪录片/文化节目时,假定节目不是由能够拍摄高质量画面的设备拍摄的。当提供自然或历史建筑的位置名称或名称时,强度确定部分133确认类型信息。只有当类型信息是纪录片/文化节目时,强度确定部分133才选择附加系数。强度确定部分133通过将所选择的总分数与附加系数相乘来计算乘积分数。例如,当类型信息是纪录片/文化节目时,广播站信息由“H”表示,“现场直播广播”和“自然名称”被提供作为特征关键词,总分数“5”被乘以对应于“H”的0.9、对应于“现场直播广播”的“1.2”和对应于“自然名称”的“0.8”。结果,计算出5X0.9X 1.2X0.8=4.32作为乘积分数。当不提供特征关键词时,强度确定部分133将对应于类型信息的总分数仅乘以对应于广播站信息的附加系数。强度确定部分133具有五个阶段的偏移值“_9、-6、0、6和9”,并且因此选择对应于乘积分数的一个偏移值。该偏移值作为一个值表示滤波器强度参数。不改变地使用slice_alpha_c0_offset_div2 和 slice_beta_offset_div2 的值。当乘积分数是“5.0或以下”时,强度确定部分133选择“_9”作为偏移值。当乘积分数是“5.0或以上且8.0或以下”时,强度确定部分133选择“_6”作为偏移值。当乘积分数是“8.0或以上且10.0或以下”时,强度确定部分133选择“O”作为偏移值。当乘积分数是“大于10.0且小于13.0”时,强度确定部分133选择“6”作为偏移值。当乘积分数是“大于13.0”时,强度确定部分133选择“9”作为偏移值。强度确定部分133将所选择的偏移值提供给对应于强度设置部分34的强度设置部分134(未不出)。强度设置部分134将所提供的偏移值设置给slice_alpha_cO_offset_div2和slice_beta_offset_div2。结果,使用量化参数选择指标α和β,将该指标α和β加上QP偏移,以改变滤波器的强度。这样,图像编码单元104通过计算乘积分数来将乘积分数与类型信息相加,并通过使用广播站信息和特征关键词来确定图像数据S4中的噪声的减小和分辨率的保持之间的优先次序。因此,图像编码单元104可以通过使用不是从类型信息获得的图像数据S4的视觉特征来确定噪声的减小和分辨率的保持之间的优先次序,并且可以更适当地设置滤波器的强度。2-2.操作和优点利用上述配置,图像编码单元104接收描述广播节目内容细节的事件信息。当表示图像数据的视觉特征的特征关键词被包含在事件信息中时,图像编码单元104将该特征关键词反映在作为特性参数的滤波器强度参数上。这样,由于图像编码单元104将特征关键词以及类型信息反映到滤波器的强度上,所以与第一实施例相比较,可以更适当地设置滤波器的强度。图像编码单元104接收包含在EPG信息S3内的且表示传送该广播节目内容的广播站的广播站信息,并将该表示传送该广播节目内容的广播站的广播站信息反映到滤波器强度参数上。这样,由于图像编码单元104将各个广播站的特性反映到滤波器的强度上,所以与第一实施例相比,可以更适当地设置滤波器的强度。利用这种配置,通过将包含在事件信息中的特征关键词反映到滤波器强度参数上,图像编码单元104可以更适当地将图像数据S4的视觉特征反映到滤波器的强度上。结果,图像编码单元104可以通过适当地调整分辨率的保持和噪声的减小之间的平衡来改善比特流S6的图像质量。在上述的第一实施例和第二实施例中,已经关于图像编码单元根据广播节目内容所属的大分类的类型来确定滤波器强度参数的例子进行了描述。然而,本发明不局限于此。例如,可以根据由类型信息表示的广播节目内容所属的中间分类的类型来确定特性参数。在此情况下,图像编码单元存储通过与中间分类的类型与滤波器强度参数相对应而制成的设置表,并根据中间分类的类型来选择滤波器强度参数。这样,图像编码单元可以更详细地对广播节目内容进行分类,并且因此可以更适当地选择滤波器强度参数。图像编码单元可以具有通过与滤波器强度参数与异常中间分类相对应而制成的设置表(见图9),其中广播节目内容所属的中间分类的类型表示由大分类的类型表示的视觉特征的异常特性。当广播节目内容所属的中间分类是异常中间分类时,图像编码单元确定与异常中间分类的类型相对应的滤波器强度参数作为广播节目内容的滤波器强度参数,而不考虑与大分类的类型相对应的特性参数。当中间分类是政治.会议和讨论.交谈(新闻/报导)、生活/家庭节目、食品/烹饪、健康/医疗服务(信息/谈话节目)、古典/歌剧(音乐)、旅游/综艺(综艺)、特效拍摄(动画/特效拍摄)、历史/旅行节目、访谈/讨论(纪录片/文化节目)以及喜剧故事/戏剧表演(剧场/表演)时,图像编码单元减小滤波器强度参数。另一方面,当中间分类是动画(电影)、国内动画和国际动画(动画/特效拍摄)、体育(纪录片/文化节目)以及舞蹈和芭蕾(剧场/表演)时,图像编码单元增大滤波器强度参数。括号描述中间分类的类型所属的大分类的类型。这样,图像编码单元能够以适当的滤波器强度进行去块滤波器处理,以处理属于具有与大分类的类型的倾向不相同的倾向的异常中间分类的广播节目内容。在上述的第一实施例中,已经关于根据类型信息来选择滤波器强度参数的例子进行了描述。然而,本发明不仅限于此。可以接收关于当前时间的时间信息以将该时间信息反映在滤波器强度参数上。例如,可以在传送大量的低质量图像的半夜中将滤波器强度设置为较大。如图10中所示,当时间信息落在预定时间范围内时(例如,上午5:00至上午8:59),图像编码单元确定滤波器强度参数,以降低在其处显示时间的时间显示区域TM中的滤波器强度。此时,图像编码单元如同第一实施例中那样地确定除了时间显示区域TM以外的区域中的滤波器强度参数。当在帧图像50中显示文本信息时,图像编码单元可以保持时间显示区域TM中的分辨率。因此,文本信息可以被清楚地显示在屏幕上,同时保持文本信息的分辨率。这样,图像编码单元防止观看者由于文本信息被不清楚地显示而注意到总体上的低分辨率。在不同于图10中所示的例子的另一例子中,可以在在其处显示许多字幕的字幕区域中,或者在其中频繁使用字幕的诸如综艺节目之类的类型中的帧图像的整个区域中,将滤波器强度设置为低的。在上述的第一实施例和第二实施例中,已经关于去块滤波器26改变作为滤波器特性的滤波器强度的例子进行了描述。然而,本发明不局限于此。例如,可以改变例如标签数量等的特性。或者,作为改变滤波器强度的方法,可以使用各种方法,以及改变slice_alpha_c0_offset_div2和slice_beta_offset_div2的值的方法。或者,偏移值的数量、偏移值、以及计算偏移值的方法不受限制。例如,可以通过将作为滤波器强度参数的总分数乘以预定系数来计算偏移值。在上述的第一实施例和第二实施例中,已经关于使用去块滤波器26作为滤波器的例子进行了描述。然而,本发明不局限于此。可以使用诸如差值滤波器等的滤波器,只要该滤波器可以减小编码过程中出现的噪声即可。在上述的第一实施例和第二实施例中,已经关于传送数字地面广播的例子进行了描述。然而,本发明不局限于此。例如,可以将例如通过使用互联网的流传送和按需传送的方法应用于各种节目内容。或者,可以不同时接收EPG信息S3和广播信号SI。例如,可以通过诸如互联网等的网络分离地接收EPG信息S3和广播信号SI。在此情况下,可以接收更详细的类型信息。在上述的第一实施例中,已经描述了从所提供的EPG信息S3提取类型信息的例子。然而,本发明不局限于此。例如,数字调谐单元3可以只将类型信息提供给信息编码单元4,并且类型信息接收单元32可以接收类型信息。在上述的第一实施例和第二实施例中,已经描述了根据H.264/AVC标准执行编码处理的例子。然而,本发明不局限于此。编码方法和处理细节不受限制。本发明适用于其中在局部解码图像中使用减小在编码处理中出现的噪声的滤波器的所有编码方法。在上述的第一实施例中,作为评估噪声优先次序因素作为优先次序因素的方法,已经关于评估噪声减小的优先次序的例子进行了描述。然而,本发明不局限于此。可以评估分辨率保持的优先次序。优先次序因素的个数不受限制。可以使用一个或多个任意的优先次序因素。在上述的第二实施例中,已经关于将根据类型信息而选择的滤波器强度参数与根据广播站信息和特征关键词而选择的附加系数相乘的例子进行了描述。然而,本发明不局限于此。可以将广播站信息和特征关键词二者或其中之一反映到滤波器强度参数上。例如,可以加上根据广播站信息和特征关键词而选择的附加分数。或者,可以仅根据广播站信息和特征关键词中的一个选择附加系数。或者,根据本发明的实施例,可以将广播站信息和特征关键词二者或者其中之一反映到滤波器强度参数上,而不使用类型信息。在此情况下,参考通过与滤波器强度参数以及广播站信息和特征关键词二者或其中之一相对应而制成的设置表来选择滤波器强度参数。在上述实施例中,已经关于将编码程序、滤波器特性设置处理程序等预先存储在ROM或硬盘驱动中的例子进行了描述。然而,本发明不局限于此。可以将编码程序、滤波器特性设置处理程序等从诸如存储棒(索尼公司的注册商标)等的外部存储介质安装到闪速存储器等中。或者,可以经由USB (通用串行总线)或诸如以太网(注册商标)(电气和电子工程师协会)802.lla/b/g之类的无线LAN (局域网)而从外部接收滤波器特性设置处理程序等,并且可以通过数字地面电视广播或BS数字电视广播传送该滤波器特性设置处理程序等。在上述实施例中,已经关于图像处理设备I作为图像处理设备的例子进行了描述,该图像处理设备包括:画面重排缓冲器12和用作接收单元的类型信息接收部分32、运动预测补偿部分14、帧内预测部分15、正交变换部分17、用作编码单元的量化部分18、量化部分23、逆量化部分24、计算部分25、用作编码单元的去块滤波器26、作为确定单元的强度确定部分33以及用作特性改变单元的强度设置部分34。根据本发明实施例的图像处理设备可以仅由例如图像编码单元4配置,只要该图像处理设备至少包括接收单元、确定单元、特性改变单元和编码单元即可。或者,在本发明的实施例中,该图像处理设备可以包括接收单元、确定单元、特性改变单元和编码单元以实现各种配置。本申请包含2009年6月11日在日本专利局提交的日本优先权专利申请JP2009-140367中公开的相关主题,其全部内容通过引用包含于此。本领域的技术人员应该理解,根据设计要求和其它因素,可以进行各种变型、组合、子组合和替换,只要所述变型、组合、子组合和替换在所附权利要求及其等同内容的范围之内即可。
权利要求
1.一种图像处理设备,包括: 确定单元,所述确定单元根据类型信息来确定表示对能够通过对编码数据进行解码而获得的局部图像进行滤波的滤波器的特性的特性参数; 特性改变单元,所述特性改变单元根据由所述确定单元确定的特性参数来改变所述滤波器的特性;以及 编码单元,所述编码单元通过利用根据由所述特性改变单元改变的所述滤波器的特性而进行滤波后的局部解码图像执行预测处理,来产生所述编码数据。
2.根据权利要求1所述的图像处理设备,其中所述确定单元根据由所述类型信息表示的、与所述类型信息相关的节目内容的图像数据的视觉特征来确定所述滤波器的特性。
3.根据权利要求2所述的图像处理设备,其中所述特性参数表示所述滤波器的强度。
4.根据权利要求3所述的图像处理设备,其中所述确定单元确定所述特性参数,使得在所述类型信息表示体育的情况下增大所述滤波器的强度。
5.根据权利要求4所述的图像处理设备,其中所述确定单元确定所述特性参数,使得在所述类型信息表示音乐的情况下增大所述滤波器的强度。
6.根据权利要求5所述的图像处理设备,其中所述确定单元确定所述特性参数,使得在所述类型信息表示综艺节目的情况下增大所述滤波器的强度。
7.根据权利要求6所述的图像处理设备,其中所述确定单元确定所述特性参数,使得在所述类型信息表示纪录片/文化节目的情况下减小所述滤波器的强度。
8.根据权利要求1所述的图像处理设备,其中所述滤波器是减少块失真的去块滤波器。
9.根据权利要求8所述的图像处理设备, 其中所述编码单元按照H.264/AVC标准来产生所述编码数据,以及 其中所述特性改变单兀通过改变slice_alpha_c0_offset_div2和slice_beta_offset_div2的值来改变所述滤波器的强度。
10.根据权利要求9所述的图像处理设备,其中通过基于作为所述视觉特征的多个优先次序因素而确定噪声的减小优先还是分辨率的保持优先来评估各个所述类型信息中的所述特性参数。
11.根据权利要求10所述的图像处理设备,其中按照各个优先次序因素对所述特性参数进行加权。
12.根据权利要求3所述的图像处理设备, 其中,在用于描述所述节目内容的细节的事件信息包含表示所述图像数据的视觉特征的特征关键词的情况下,所述确定单元将所述特征关键词反映到所述特性参数上。
13.根据权利要求12所述的图像处理设备, 其中,所述确定单元将与传送所述节目内容的广播站相关的广播站信息反映到所述特性参数上。
14.根据权利要求13所述的图像处理设备, 其中所述确定单元根据所述节目内容所属的大分类的类型来确定所述特性参数,以及 其中在所述节目内容所属的中间分类的类型表示相对于由所述大分类的类型表示的视觉特征的异常特征的情况下,所述确定单元确定与异常中间分类相对应的特性参数作为所述节目内容的特性参数,而不考虑与所述大分类的类型相对应的特性参数。
15.根据权利要求13所述的图像处理设备,其中所述确定单元根据由所述类型信息表示的节目内容所属的中间分类的类型来确定所述特性参数。
16.根据权利要求12所述的图像处理设备, 其中,所述确定单元将与当前时间相关的时间信息反映到所述特性参数上。
17.根据权利要求16所述的图像处理设备,其中所述确定单元确定所述特性参数,使得在所述时间信息落在预定时间范围内的情况下减小所述滤波器的在在其处显示时间的时间显示区域中的强度。
18.根据权利要求9所述的图像处理设备,还包括: 存储单元,所述存储单元存储由所述编码单元产生的所述编码数据;以及 解码单元,所述解码单元对存储在所述存储单元中的所述编码数据进行解码。
19.一种图像处理方法,包括以下步骤: 根据类型信息来确定表示对能够通过对编码数据进行解码而获得的局部图像进行滤波的滤波器的特性的特性参数; 根据在对所述特性参数的确定中所确定的特性参数来改变所述滤波器的特性;以及通过利用根据在对所述滤波器特性的改变中改变的所述滤波器的特性进行滤波后的局部解码图像执行预测处理,来产生所述编码数据。
20.根据权利要求19所述的图像处理方法,其中确定所述特性参数包括:根据由所述类型信息表示的、与所述类型信息相关的节目内容的图像数据的视觉特征来确定所述滤波器的特性。
21.根据权利要求20所述的图像处理方法,其中所述特性参数表示所述滤波器的强度。
22.根据权利要求21所述的图像处理方法,其中根据由所述类型信息表示的视觉特征来确定所述特性参数包括:确定所述特性参数,使得在所述类型信息表示体育的情况下增大所述滤波器的强度。
23.根据权利要求22所述的图像处理方法,其中根据由所述类型信息表示的视觉特征来确定所述特性参数包括:确定所述特性参数,使得在所述类型信息表示音乐的情况下增大所述滤波器的强度。
24.根据权利要求23所述的图像处理方法,其中根据由所述类型信息表示的视觉特征来确定所述特性参数包括:确定所述特性参数,使得在所述类型信息表示综艺节目的情况下增大所述滤波器的强度。
25.根据权利要求24所述的图像处理方法,其中根据由所述类型信息表示的视觉特征来确定所述特性参数包括:确定所述特性参数,使得在所述类型信息表示纪录片/文化节目的情况下减小所述滤波器的强度。
26.根据权利要求19所述的图像处理方法,其中所述滤波器是减少块失真的去块滤波器。
27.根据权利要求26所述的图像处理方法, 其中产生所述编码数据包括:按照H.264/AVC标准来产生所述编码数据,以及 其中改变所述滤波器的特性包括:通过改变slice_alpha_c0_offset_div2和slice_beta_offset_div2的值来改变所述滤波器的强度。
28.根据权利要求27所述的图像处理方法,其中通过基于作为所述视觉特征的多个优先次序因素而确定噪声的减小优先还是分辨率的保持优先来评估各个所述类型信息中的所述特性参数。
29.根据权利要求28所述的图像处理方法,其中按照各个优先次序因素对所述特性参数进行加权。
30.根据权利要求21所述的图像处理方法, 其中,确定所述特性参数包括:在用于描述所述节目内容的细节的事件信息包含表示所述图像数据的视觉特征的特征关键词的情况下,将所述特征关键词反映到所述特性参数上。
31.根据权利要求30所述的图像处理方法, 其中,确定所述特性参数包括:将与传送所述节目内容的广播站相关的广播站信息反映到所述特性参数上。
32.根据权利要求31所述的图像处理方法, 其中,根据由所述类型信息表示的视觉特征来确定所述特性参数包括: 根据所述节目内容所属的大分类的类型来确定所述特性参数,以及 在所述节目内容所属的中间分类的类型表示相对于由所述大分类的类型表示的视觉特征的异常特征的 情况下,确定与异常中间分类相对应的特性参数作为所述节目内容的特性参数,而不考虑与所述大分类的类型相对应的特性参数。
33.根据权利要求31所述的图像处理方法,其中,根据由所述类型信息表示的视觉特征来确定所述特性参数包括:根据由所述类型信息表示的节目内容所属的中间分类的类型来确定所述特性参数。
34.根据权利要求30所述的图像处理方法, 其中,确定所述特性参数包括:将与当前时间相关的时间信息反映到所述特性参数上。
35.根据权利要求34所述的图像处理方法,其中,将所述时间信息反映到所述特性参数上包括:确定所述特性参数,使得在所述时间信息落在预定时间范围内的情况下减小所述滤波器的在在其处显示时间的时间显示区域中的强度。
36.根据权利要求27所述的图像处理方法,还包括: 存储所产生的所述编码数据;以及 对所存储的所述编码数据进行解码。
全文摘要
公开了图像处理设备和图像处理方法。该图像处理设备包括确定单元,所述确定单元根据类型信息来确定表示对能够通过对编码数据进行解码而获得的局部图像进行滤波的滤波器的特性的特性参数;特性改变单元,所述特性改变单元根据由所述确定单元确定的特性参数来改变所述滤波器的特性;以及编码单元,所述编码单元通过利用根据由所述特性改变单元改变的所述滤波器的特性而进行滤波后的局部解码图像执行预测处理,来产生所述编码数据。
文档编号H04N21/84GK103179404SQ201310097249
公开日2013年6月26日 申请日期2010年6月4日 优先权日2009年6月11日
发明者樱井裕音, 田中润一, 佐藤数史 申请人:索尼公司