大编码单元确定关于至少一 个编码模式的信息。另外,由于根据深度对图像数据进行分层划分,因此最大编码单元的图 像数据的编码深度可根据位置而不同,因此可针对图像数据设置关于编码深度和编码模式 的信息。
[0083] 因此,输出单元130可将关于相应的编码深度和编码模式的编码信息分配给包括 在最大编码单元中的编码单元、预测单元和最小单元中的至少一个。
[0084] 根据本公开的实施例的最小单元是通过将构成最低深度的最小编码单元划分为4 份而获得的矩形数据单元。可选择地,最小单元可W是被包括在最大编码单元中所包括的 所有编码单元、预测单元、分区单元和变换单元中的具有最大尺寸的最大矩形数据单元。
[0085] 例如,通过输出单元130输出的编码信息可被分类为根据编码单元的编码信息和 根据预测单元的编码信息。根据编码单元的编码信息可包括关于预测模式的信息和关于分 区尺寸的信息。根据预测单元的编码信息可包括关于帖间模式的估计方向的信息、关于帖 间模式的参考图像索引的信息、关于运动矢量的信息、关于帖内模式的色度分量的信息、W 及关于帖内模式的插值方法的信息。
[0086] 此外,根据画面、条带或GOP定义的关于编码单元的最大尺寸的信息和关于最大 深度的信息可被插入到比特流的头、序列参数集(SP巧或画面参数集(PPS)中。
[0087] 另外,还可通过比特流的头、SPS或PPS来输出关于可允许用于当前视频的变换单 元的最大尺寸的信息、W及关于变换单元的最小尺寸的信息。
[008引在视频编码设备100中,较深层编码单元可W是通过将更高深度的编码单元(更 高一层)的高度或宽度划分成两份而获得的编码单元。换言之,当当前深度的编码单元的 尺寸是2NX 2N时,更低深度的编码单元的尺寸是NXN。另外,尺寸为2NX 2N的当前深度的 编码单元可包括最多4个所述更低深度的编码单元。
[0089] 因此,视频编码设备100可基于考虑当前画面的特征而确定的最大编码单元的尺 寸和最大深度,通过针对每个最大编码单元确定具有最优形状和最优尺寸的编码单元来形 成具有树结构的编码单元。另外,由于可通过使用各种预测模式和变换中的任意一个对每 个最大编码单元执行编码,因此可考虑各种图像尺寸的编码单元的特征来确定最优编码模 式。
[0090] 因此,如果W传统宏块对具有高分辨率或大数据量的图像进行编码,则每个画面 的宏块的数量极度增加。因此,针对每个宏块产生的压缩信息的条数增加,因此难W发送压 缩的信息,且数据压缩效率降低。然而,通过使用视频编码设备100,由于在考虑图像的尺寸 的同时增加编码单元的最大尺寸,并同时在考虑图像的特征的同时调整编码单元,因此可 提高图像压缩效率。
[0091] 图2是根据本公开的实施例的基于树结构的编码单元的视频解码设备200的框 图。
[0092] 基于根据树结构的编码单元的视频解码设备200包括符号获得器220和图像数据 解码器230。在下文中,为了便于描述,使用基于根据树结构的编码单元的视频预测的视频 解码设备200将被称为"视频解码设备200"。
[0093] 用于视频解码设备200的解码操作的各种术语(诸如编码单元、深度、预测单元、 变换单元和关于各种编码模式的信息)的定义与参照图1和视频编码设备100描述的定义 相同。
[0094] 符号获得器220接收和解析编码视频的比特流。符号获得器220从解析的比特流, 针对每个编码单元提取编码图像数据,并将提取的图像数据输出到图像数据解码器230,其 中,编码单元具有根据每个最大编码单元的树结构。符号获得器220可从关于当前画面的 头、SPS或PPS提取关于当前画面的编码单元的最大尺寸的信息。
[0095] 另外,符号获得器220从解析的比特流,根据每个最大编码单元,提取关于具有树 结构的编码单元的编码深度和编码模式的信息。提取的关于编码深度和编码模式的信息被 输出到图像数据解码器230。换言之,比特流中的图像数据被划分为最大编码单元,使得图 像数据解码器230针对每个最大编码单元对图像数据进行解码。
[0096] 可针对关于与编码深度相应的至少一个编码单元的信息设置关于根据最大编码 单元的编码深度和编码模式的信息,关于编码模式的信息可包括关于与编码深度相应的相 应编码单元的分区类型的信息、关于预测模式的信息和关于变换单元的尺寸的信息。另外, 根据深度的划分信息可被提取为关于编码深度的信息。
[0097] 由符号获得器220提取的关于根据每个最大编码单元的编码深度和编码模式的 信息是该样的关于编码深度和编码模式的信息;该信息被确定为在编码器(诸如,视频编 码设备100)根据每个最大编码单元对根据深度的每个较深层编码单元重复地执行编码时 产生最小编码误差。因此,视频解码设备200可通过根据产生最小编码误差的编码深度和 编码模式对图像数据进行解码来恢复图像。
[009引 由于关于编码深度和编码模式的编码信息可被分配给相应的编码单元、预测单元 和最小单元中的预定数据单元,因此符号获得器220可根据预定数据单元,提取关于编码 深度和编码模式的信息。被分配了关于编码深度和编码模式的相同信息的预定数据单元可 被推断为包括在相同最大编码单元中的数据单元。
[0099] 图像数据解码器230基于关于根据最大编码单元的编码深度和编码模式的信息, 通过对每个最大编码单元中的图像数据进行解码,来恢复当前画面。换言之,图像数据解码 器230可基于提取出的关于包括在每个最大编码单元中的具有树结构的编码单元之中的 每个编码单元的分区类型、预测模式和变换单元的信息,对编码的图像数据进行解码。解码 处理可包括预测(包含帖内预测和运动补偿)和逆变换。根据逆正交变换或逆整数变换来 执行逆变换。
[0100] 图像数据解码器230可基于关于根据编码深度的编码单元的预测单元的分区类 型和预测模式的信息,根据每个编码单元的分区和预测模式,执行帖内预测或运动补偿。
[0101] 此外,针对每个最大编码单元的逆变换,图像数据解码器230可针对每个编码单 元读取根据树结构的变换单元信息W确定每个编码单元的变换单元,并基于每个编码单元 的变换单元来执行逆变换。经过逆变换,可恢复编码单元的空间域的像素值。
[0102] 图像数据解码器230可通过使用根据深度的划分信息来确定当前最大编码单元 的至少一个编码深度。如果划分信息指示图像数据在当前深度中不再被划分,则当前深度 是编码深度。因此,图像数据解码器230可通过使用关于用于与编码深度相应的每个编码 单元的预测单元的分区类型、预测模式和变换单元的尺寸的信息,对当前最大编码单元中 的与每个编码深度相应的至少一个编码单元的编码数据进行解码,并输出当前最大编码单 元的图像数据。
[0103] 换言之,可通过观察被分配给编码单元、预测单元和最小单元中的预定数据单元 的编码信息集来收集包含包括相同划分信息的编码信息的数据单元,并且收集的数据单元 可被认为是将由图像数据解码器230 W相同编码模式进行解码的一个数据单元。针对如上 所述被确定的每个编码单元,可获得关于编码模式的信息W对当前编码单元进行解码。
[0104] 视频解码设备200可获得关于当对每个最大编码单元递归地执行编码时产生最 小编码误差的至少一个编码单元的信息,并可使用所述信息来对当前画面进行解码。换 言之,可对在每个最大编码单元中被确定为最佳编码单元的具有树结构的编码单元进行解 码。此外,编码单元的最大尺寸在考虑分辨率和图像数据量的情况下被确定。
[01化]因此,即使图像数据具有高分辨率和大数据量,也可通过使用编码单元的尺寸和 编码模式,有效地对图像数据进行解码和恢复,其中,通过使用从编码器接收到的关于最优 编码模式的信息,根据图像数据的特征自适应地确定所述编码单元的尺寸和编码模式。
[0106] 图3是用于描述根据本公开的实施例的编码单元的构思的示图。
[0107] 编码单元的尺寸可被表示为宽度X高度,并且可W是64X64、32X32、16X 16和 8X8。64X64的编码单元可被划分为64X64、64X32、32X64或32X32的分区,32X32的 编码单元可被划分为32X32、32X16、16X32或16X16的分区,16X16的编码单元可被划 分为16X16、16X8、8X16或8X8的分区,8X8的编码单元可被划分为8X8、8X4、4X8或 4X4的分区。
[0108] 在视频数据310中,分辨率为1920X1080,编码单元的最大尺寸为64,最大深度为 2。在视频数据320中,分辨率为1920X1080,编码单元的最大尺寸为64,最大深度为3。在 视频数据330中,分辨率为352X288,编码单元的最大尺寸为16,最大深度为1。图10中示 出的最大深度表示从最大编码单元到最小编码单元的划分总次数。
[0109] 如果分辨率高或数据量大,则编码单元的最大尺寸可能较大,从而不仅提高编码 效率,而且准确地反映图像的特征。因此,具有比视频数据330更高分辨率的视频数据310 和320的编码单元的最大尺寸可W是64。
[0110] 由于视频数据310的最大深度是2,因此由于通过对最大编码单元划分两次,深度 加深至两层,因此视频数据310的编码单元315可包括长轴尺寸为64的最大编码单元和长 轴尺寸为32和16的编码单元。同时,由于视频数据330的最大深度是1,因此由于通过对 最大编码单元划分一次,深度加深至一层,因此视频数据330的编码单元335可包括长轴尺 寸为16的最大编码单元和长轴尺寸为8的编码单元。
[0111] 由于视频数据320的最大深度是3,因此由于通过对最大编码单元划分=次,深度 加深至3层,因此视频数据320的编码单元325可包括长轴尺寸为64的最大编码单元和长 轴尺寸为32、16和8的编码单元。随着深度加深,详细信息可被精确地表示。
[0112] 图4是根据本公开的实施例的基于编码单元的图像编码器400的框图。
[0113] 图像编码器400执行视频编码设备100的编码单元确定器120的操作来对图像数 据进行编码。换言之,帖内预测器410对当前帖405中的帖内模式下的编码单元执行帖内 预测,运动估计器420和运动补偿器425通过使用当前帖405和参考帖495,对当前帖405 中的帖间模式下的编码单元执行帖间估计和运动补偿。
[0114] 从帖内预测器410、运动估计器420和运动补偿器425输出的数据通过变换器430 和量化器440被输出为量化后的变换系数。量化后的变换系数通过反量化器460和逆变换 器470被恢复为空间域中的数据,恢复的空间域中的数据在通过去块单元480和环路滤波 单元490后处理之后被输出为参考帖495。量化后的变换系数可通过滴编码器450被输出 为比特流455。
[0115] 为了在视频编码设备100中应用图像编码器400,图像编码器400的所有元件 (即,帖内预测器410、运动估计器420、运动补偿器425、变换器430、量化器440、滴编码器 450、反量化器460、逆变换器470、去块单元480和环路滤波单元490)在考虑每个最大编码 单元的最大深度的同时,基于具有树结构的编码单元中的每个编码单元执行操作。
[0116] 具体地,帖内预测器410、运动估计器420和运动补偿器425在考虑当前最大编码 单元的最大尺寸和最大深度的同时确定具有树结构的编码单元中的每个编码单元的分区 和预测模式,变换器430确定具有树结构的编码单元中的每