用于处理视频信号的方法和装置与流程

用于处理视频信号的方法和装置
1.本技术是申请号为201780041685.6、申请日为2017年6月30日、发明名称为“用于处理视频信号的方法和装置”的中国发明专利申请的分案申请。
技术领域
2.本发明涉及用于处理视频信号的方法和装置。


背景技术：

3.近来，在各种应用领域中对高分辨率和高质量图像如高清晰度(hd)图像和超高清晰度(uhd)图像的需求已经增加。然而，与常规图像数据相比，分辨率和质量更高的图像数据的数据量增加了。因此，当通过使用介质如常规的有线和无线宽带网络来传送图像数据时或者当通过使用常规的存储介质存储图像数据时，传送和存储的成本增加了。为了解决随着图像数据的分辨率和质量的提高而出现的这些问题，可以利用高效的图像编码/解码技术。
4.图像压缩技术包括各种技术，各种技术包括：根据当前图片的先前图片或后续图片对包括在当前图片中的像素值进行预测的帧间预测技术；通过使用当前图片中的像素信息对包括在该当前图片中的像素值进行预测的帧内预测技术；将短代码分配给出现频率高的值并且将长代码分配给出现频率低的值的熵编码技术等。可以通过使用这样的图像压缩技术来有效地压缩图像数据，并且可以传送或存储图像数据。
5.同时，随着对高分辨率图像的需求增加，对作为新的图像服务的立体图像内容的需求也在增加。正在探讨的是用于有效地提供具有高分辨率和超高分辨率的立体图像内容的视频压缩技术。


技术实现要素：

6.技术问题
7.本发明的目的旨在提供在对视频信号进行编码/解码时用于有效地预测编码/解码目标块的方法和装置。
8.本发明的目的旨在提供在对视频信号进行编码/解码时对多个预测模式进行组合的预测方法和使用该预测方法的装置。
9.本发明的目的旨在提供在对视频信号进行编码/解码时用于以子块为单位执行预测的方法和装置。
10.通过本发明要实现的技术目的不限于上面提到的技术问题。并且本领域技术人员将从下面的描述中清楚地理解没有提到的其他技术问题。
11.技术方案
12.根据本发明的用于对视频信号进行解码的方法和装置可以基于第一预测模式来生成当前块的第一预测块，基于第二预测模式来生成当前块的第二预测块，并且基于第一预测块和第二预测块来生成当前块的最终预测块。
13.根据本发明的用于对视频信号进行编码的方法和装置可以基于第一预测模式来生成当前块的第一预测块，基于第二预测模式来生成当前块的第二预测块，并且基于第一预测块和第二预测块来生成当前块的最终预测块。
14.在根据本发明的用于对视频信号进行编码/解码的方法和装置中，第一预测模式可以与第二预测模式不同。
15.在根据本发明的用于对视频信号进行编码/解码的方法和装置中，第一预测模式可以是帧内预测模式，而第二预测模式可以是帧间预测模式。
16.在根据本发明的用于对视频信号进行编码/解码的方法和装置中，第一预测模式可以是与第二预测模式不同的帧间预测模式，并且帧间预测模式可以包括跳过模式、合并模式、amvp(高级运动向量预测)模式或当前图片参考模式中的至少一个。
17.在根据本发明的用于对视频信号进行编码/解码的方法和装置中，可以基于第一预测块与第二预测块之间的加权和运算来获得最终预测块。
18.在根据本发明的用于对视频信号进行编码/解码的方法和装置中，可以基于当前块的加权预测参数来确定被应用于第一预测块和第二预测块的权重。
19.在根据本发明的用于对视频信号进行编码/解码的方法和装置中，可以基于当前块的形状或尺寸来确定是否要使用对第一预测模式和第二预测模式进行组合的预测方法。
20.在根据本发明的用于对视频信号进行编码/解码的方法和装置中，当前块可以包括第一子块和第二子块，第一子块的最终预测块可以基于第一预测块来生成，而第二子块的最终预测块可以基于第一预测块和第二预测块来生成。
21.上面针对本发明简要概述的特征仅是下面的本发明的详细描述的说明性方面，而且不限制本发明的范围。
22.有益效果
23.根据本发明，可以有效地预测编码/解码目标块。
24.根据本发明，可以通过对多个预测模式进行组合来预测编码/解码目标块。
25.根据本发明，可以以子块为单位确定预测方法，并且可以以子块为单位执行预测。
26.能够通过本发明获得的效果不限于上面提到的效果，并且本领域技术人员可以从下面的描述中清楚地理解没有提到的其他效果。
附图说明
27.图1是示出了根据本发明的实施方式的用于对视频进行编码的设备的框图。
28.图2是示出了根据本发明的实施方式的用于对视频进行解码的设备的框图。
29.图3是示出了根据本发明的实施方式的基于树结构对编码块进行分级划分的示例的图。
30.图4是示出了根据本发明的实施方式的允许基于二叉树的划分的划分类型的图。
31.图5是示出了根据本发明的实施方式的仅允许预定类型的基于二叉树的划分的示例的图。
32.图6是根据应用了本发明的实施方式的用于说明对与二叉树划分的可允许数目有关的信息进行编码/解码的示例的图。
33.图7是示出了根据本发明的实施方式的适用于编码块的划分模式的图。
34.图8是示出了根据应用了本发明的实施方式的获得残差样本的过程的流程图。
35.图9是示出了根据应用了本发明的实施方式的帧间预测方法的流程图。
36.图10是示出了当将合并模式应用于当前块时得到当前块的运动信息的过程的图。
37.图11是示出了当将amvp模式应用于当前块时得到当前块的运动信息的过程的图。
38.图12是根据本发明的实施方式的双方向加权预测方法的流程图。
39.图13是用于说明双方向加权预测的原理的图。
40.图14是示出了相邻块之间的扫描顺序的图。
41.图15是示出了根据本发明的组合预测方法的流程图。
42.图16和图17是示出了基于通过不同预测模式获得的多个预测块的加权和来生成当前块的预测块的示例的图。
43.图18是示出了以子块为单位执行预测的示例的图。
44.图19是根据本发明的光照补偿预测的方法的流程图。
45.图20是基于光照补偿的双方向加权预测方法的流程图。
46.图21是示出了使用应用了光照补偿的预测块来执行双方向加权预测的示例的图。
具体实施方式
47.可以对本发明进行各种修改，并且存在本发明的各种实施方式，现在将参照附图提供实施方式的示例，并且详细描述这些示例。然而，本发明不限于此，并且示例性实施方式可以被解释为包括本发明的技术构思和技术范围内的全部修改、等同物或替代方案。在所描述的附图中，相似的附图标记指代相似的元件。
48.说明书中使用的术语“第一”、“第二”等可以用于描述各种部件，但是这些部件不被解释为限制于这些术语。这些术语仅用于区分一个部件与其他部件。例如，在不偏离本发明的范围的情况下，“第一”部件可以被称为“第二”部件，并且“第二”部件也可以被类似地称为“第一”部件。术语“和/或”包括多个项或者多个术语中的任意一个术语的组合。
49.应当理解的是，在本说明书中，当元件被简称为“连接至”或“耦接至”另一元件而不是“直接连接至”或“直接耦接至”另一元件时，该元件可以是“直接连接至”或“直接耦接至”另一个元件，或者该元件可以被连接至或耦接至另一元件，并且存在其他元件介于它们之间。相反地，应该理解的是，当元件被称为“直接耦接”或“直接连接”至另一元件时，不存在中间元件。
50.本说明书中使用的术语仅用于描述特定实施方式，而并不旨在限制本发明。以单数形式使用的表述包含复数形式的表述，除非该表述在上下文中有明显不同的含义。在本说明书中，应当理解的是，诸如“包括”、“具有”等术语旨在指示本说明书中公开的特征、数字、步骤、动作、元件、部件或其组合的存在，并且不旨在排除可以存在或可以添加一个或更多个其他特征、数字、步骤、动作、元件、部件或其组合的可能性。
51.在下文中，将参照附图详细描述本发明的优选实施方式。在下文中，附图中的相同组成元件用相同的附图标记来表示，并且将省略对相同元件的重复描述。
52.图1是示出了根据本发明的实施方式的用于对视频进行编码的设备的框图。
53.参照图1，用于对视频进行编码的设备100可以包括：图片划分模块110、预测模块120和125、变换模块130、量化模块135、重排模块160、熵编码模块165、逆量化模块140、逆变
换模块145、滤波器模块150和存储器155。
54.图1中所示的组成部分被独立地示出，以表示用于对视频进行编码的设备中彼此不同的特征功能。因此，并不意味着每个组成部分是由分开的硬件或软件的组成单元组成的。换句话说，为了方便起见，每个组成部分包括列举的组成部分中的每个。因此，每个组成部分中的至少两个组成部分可以被组合以形成一个组成部分，或者一个组成部分可以被分成多个组成部分以执行每个功能。在不偏离本发明的本质的情况下，组合每个组成部分的实施方式和分割一个组成部分的实施方式也包括在本发明的范围内。
55.此外，组成部分中的一些可以不是执行本发明的基本功能的不可缺少的组成部分，而是仅用于改善本发明的性能的可选组成部分。可以通过排除用于改善性能的组成部分之外仅包括用于实现本发明的实质的不可缺少的组成部分来实现本发明。排除仅用于改善性能的可选组成部分之外仅包括不可缺少的组成部分的结构也包括在本发明的范围内。
56.图片划分模块110可以将输入图片划分成一个或更多个处理单元。在此，处理单元可以是预测单元(pu)、变换单元(tu)或编码单元(cu)。图片划分模块110可以将一个图片划分成多个编码单元、预测单元和变换单元的组合，并且可以通过使用预定准则(例如，成本函数)选择编码单元、预测单元和变换单元的一个组合来对图片进行编码。
57.例如，一个图片可以被划分成多个编码单元。可以使用递归树结构如四叉树结构将图片划分成编码单元。在一个图片或最大编码单元作为根的情况下被划分成其他编码单元的编码单元可以以子节点与所划分的编码单元的数目对应的方式进行划分。按照预定限制不能再划分的编码单元用作叶节点。也就是说，当假设对于一个编码单元仅正方形划分可行时，一个编码单元可以最多被划分成四个其他编码单元。
58.在下文中，在本发明的实施方式中，编码单元可以意指执行编码的单元或者执行解码的单元。
59.预测单元可以是被划分成在单个编码单元中具有相同尺寸的正方形形状或矩形形状的划分中的一个，或者预测单元可以是被划分成在单个编码单元中具有不同的形状/尺寸的划分中的一个。
60.当基于编码单元生成要进行帧内预测的预测单元并且编码单元不是最小编码单元时，可以在不将编码单元划分成多个预测单元n
×
n的情况下执行帧内预测。
61.预测模块120和125可以包括执行帧间预测的帧间预测模块120和执行帧内预测的帧内预测模块125。可以确定对于预测单元是执行帧间预测还是执行帧内预测，并且可以确定根据每个预测方法的详细信息(例如，帧内预测模式、运动向量、参考图片等)。在此，要进行预测的处理单元可以不同于对其确定了预测方法和详细内容的处理单元。例如，可以由预测单元确定预测方法、预测模式等，并且可以由变换单元执行预测。所生成的预测块与原始块之间的残差值(残差块)可以被输入至变换模块130。此外，用于预测的预测模式信息、运动向量信息等可以与残差值一起由熵编码模块165进行编码，并且可以被传送至用于对视频进行解码的设备。当使用特定编码模式时，可以通过按原样对原始块进行编码来传送至用于对视频进行解码的设备，而不通过预测模块120和125生成预测块。
62.帧间预测模块120可以基于当前图片的先前图片或后续图片中的至少一个的信息来预测预测单元，或者在一些情况下，可以基于当前图片中的一些编码区域的信息来预测预测单元。帧间预测模块120可以包括参考图片插值模块、运动预测模块和运动补偿模块。
63.参考图片插值模块可以从存储器155接收参考图片信息，并且可以根据参考图片来生成整像素或小于整像素的像素信息。在亮度像素的情况下，可以使用具有不同滤波器系数的基于dct的8抽头插值滤波器以1/4像素为单位生成整像素或小于整像素的像素信息。在色度信号的情况下，可以使用具有不同滤波器系数的基于dct的4抽头插值滤波器以1/8像素为单位生成整像素或小于整像素的像素信息。
64.运动预测模块可以基于由参考图片插值模块进行插值的参考图片来执行运动预测。作为用于计算运动向量的方法，可以使用诸如基于全搜索的块匹配算法(fbma)、三步搜索(tss)和新三步搜索算法(nts)等的各种方法。基于插值像素，运动向量可以具有以1/2像素或1/4像素为单位的运动向量值。运动预测模块可以通过改变运动预测方法来预测当前预测单元。作为运动预测方法，可以使用诸如跳过方法、合并方法、amvp(高级运动向量预测)方法、帧内块复制方法等的各种方法。
65.帧内预测模块125可以基于与作为当前图片中的像素信息的当前块相邻的参考像素信息来生成预测单元。在当前预测单元的相邻块是要进行帧间预测的块并且因此参考像素是要进行帧间预测的像素时，可以使用要进行帧内预测的相邻块的参考像素信息来代替包括在要进行帧间预测的块中的参考像素。也就是说，当参考像素不可用时，可以使用可用参考像素中的至少一个参考像素来代替不可用的参考像素信息。
66.帧内预测中的预测模式可以包括根据预测方向使用参考像素信息的方向预测模式和在执行预测时不使用方向信息的无方向性预测模式。用于预测亮度信息的模式可以与用于预测色度信息的模式不同，并且为了预测色度信息，可以利用用于预测亮度信息的帧内预测模式信息或者可以利用预测的亮度信号信息。
67.在执行帧内预测时，当预测单元的尺寸与变换单元的尺寸相同时，可以基于位于该预测单元的左侧、左上侧和上侧的像素对预测单元执行帧内预测。然而，在执行帧内预测时，当预测单元的尺寸与变换单元的尺寸不同时，可以使用基于变换单元的参考像素来执行帧内预测。此外，可以使用仅针对最小编码单元使用n
×
n划分的帧内预测。
68.在帧内预测方法中，可以在根据预测模式将ais(自适应帧内平滑)滤波器应用于参考像素之后生成预测块。应用于参考像素的ais滤波器的类型可以不同。为了执行帧内预测方法，可以根据与当前预测单元相邻的预测单元的帧内预测模式来预测当前预测单元的帧内预测模式。在通过使用根据相邻预测单元预测到的模式信息来预测当前预测单元的预测模式的过程中，在当前预测单元的帧内预测模式与相邻预测单元的帧内预测模式相同时，可以使用预定的标记信息来传送指示当前预测单元的预测模式与相邻预测单元的预测模式彼此相同的信息。在当前预测单元的预测模式与相邻预测单元的预测模式不同时，可以执行熵编码，以对当前块的预测模式信息进行编码。
69.此外，可以基于由预测模块120和125生成的预测单元来生成包括关于残差值的信息的残差块，残差值是要进行预测的预测单元与预测单元的原始块之间的差。可以将所生成的残差块输入至变换模块130。
70.变换模块130可以通过使用变换方法(例如，离散余弦变换(dct)、离散正弦变换(dst)和klt)来对包括关于原始块与由预测模块120和125生成的预测单元之间的残差值的信息的残差块进行变换。可以基于用于生成残差块的预测单元的帧内预测模式信息来确定是应用dct、dst还是klt来对残差块进行变换。
71.量化模块135可以对由变换模块130变换到频域的值进行量化。量化系数可以根据图片的块或重要性而变化。可以将由量化模块135计算的值提供至逆量化模块140和重排模块160。
72.重排模块160可以对经量化的残差值的系数进行重排。
73.重排模块160可以通过系数扫描方法将二维块形式的系数变为一维向量形式的系数。例如，重排模块160可以使用之字形扫描方法从dc系数扫描至高频域的系数，以将系数变为一维向量形式。根据变换单元的尺寸和帧内预测模式，可以使用沿列方向扫描二维块形式的系数的垂直方向扫描或沿行方向扫描二维块形式的系数的水平方向扫描来代替之字形扫描。也就是说，可以根据变换单元的尺寸和帧内预测模式来确定使用之字形扫描、垂直方向扫描和水平方向扫描中的哪种扫描方法。
74.熵编码模块165可以基于由重排模块160计算的值来执行熵编码。熵编码可以使用各种编码方法，例如，指数哥伦布(golomb)编码、上下文自适应变长编码(cavlc)和上下文自适应二进制算术编码(cabac)。
75.熵编码模块165可以对来自重排模块160以及预测模块120和125的诸如编码单元的残差值系数信息和块类型信息、预测模式信息、划分单元信息、预测单元信息、变换单元信息、运动向量信息、参考帧信息、块插值信息、滤波信息等的各种信息进行编码。
76.熵编码模块165可以对从重排模块160输入的编码单元的系数进行熵编码。
77.逆量化模块140可以对由量化模块135量化的值进行逆量化，并且逆变换模块145可以对由变换模块130变换的值进行逆变换。可以将由逆量化模块140和逆变换模块145生成的残差值与由预测模块120和125的运动估计模块、运动补偿模块和帧内预测模块预测的预测单元进行组合，使得可以生成重构块。
78.滤波器模块150可以包括去块滤波器、偏移校正单元和自适应环路滤波器(alf)中的至少一个。
79.去块滤波器可以去除由于重构图片中的块之间的边界而出现的块失真。为了确定是否执行去块，包括在块的若干行或若干列中的像素可以是确定是否对当前块应用去块滤波器的基础。当对块应用去块滤波器时，可以根据所需的去块滤波强度来应用强滤波器或弱滤波器。此外，在应用去块滤波器时，可以并行地处理水平方向滤波和垂直方向滤波。
80.偏移校正模块可以针对要进行去块的图片以像素为单位校正与原始图片的偏移。为了对特定图片执行偏移校正，可以使用考虑每个像素的边缘信息来施加偏移的方法，或者可以使用下述方法：将图片的像素划分为预定数目的区域、确定要执行偏移的区域，并且对所确定的区域施加偏移。
81.可以基于通过将经滤波的重构图片与原始图片进行比较而获得的值来执行自适应环路滤波(alf)。可以将包括在图片中的像素分成预定组，可以确定要应用于每个组的滤波器，并且可以针对每个组单独地执行滤波。可以通过编码单元(cu)传送关于是否应用alf和亮度信号的信息。用于alf的滤波器的形状和滤波器系数可以根据每个块而不同。此外，无论应用目标块的特性如何，都可以应用相同形状(固定形状)的用于alf的滤波器。
82.存储器155可以存储通过滤波器模块150计算的重构块或重构图片。可以在执行帧间预测时将所存储的重构块或重构图片提供至预测模块120和125。
83.图2是示出了根据本发明的实施方式的用于对视频进行解码的设备的框图。
84.参照图2，用于对视频进行解码的设备200可以包括：熵解码模块210、重排模块215、逆量化模块220、逆变换模块225、预测模块230和235、滤波器模块240和存储器245。
85.当从用于对视频进行编码的设备输入视频比特流时，可以根据用于对视频进行编码的设备的逆过程来对输入比特流进行解码。
86.熵解码模块210可以根据由用于对视频进行编码的设备的熵编码模块进行的熵编码的逆过程来执行熵解码。例如，对应于由用于对视频进行编码的设备执行的方法，可以应用诸如指数哥伦布编码、上下文自适应变长编码(cavlc)和上下文自适应二进制算术编码(cabac)的各种方法。
87.熵解码模块210可以对关于由用于对视频进行编码的设备执行的帧内预测和帧间预测的信息进行解码。
88.重排模块215可以基于在用于对视频进行编码的设备中使用的重排方法对由熵解码模块210进行熵解码的比特流执行重排。重排模块可以将一维向量形式的系数重构和重排为二维块形式的系数。重排模块215可以接收与在用于对视频进行编码的设备中执行的系数扫描有关的信息，并且可以基于在用于对视频进行编码的设备中执行的扫描顺序经由对系数进行逆扫描的方法来执行重排。
89.逆量化模块220可以基于从用于对视频进行编码的设备接收的量化参数和经重排的块的系数来执行逆量化。
90.逆变换模块225可以执行逆变换，即，逆dct、逆dst和逆klt，这是由变换模块对由用于对视频进行编码的设备的量化结果执行的变换的逆过程，即dct、dst和klt。可以基于由用于对视频进行编码的设备所确定的传输单元来执行逆变换。用于对视频进行解码的设备的逆变换模块225可以根据多条信息(例如，预测方法、当前块的尺寸、预测方向等)来选择性地执行变换方案(例如，dct、dst、klt)。
91.预测模块230和235可以基于关于从熵解码模块210接收到的预测块生成的信息和从存储器245接收到的图片信息或先前解码的块来生成预测块。
92.如上所述，类似于用于对视频进行编码的设备的操作，在执行帧内预测时，当预测单元的尺寸与变换单元的尺寸相同时，可以基于位于预测单元的左侧、左上侧和上侧的像素对预测单元执行帧内预测。在执行帧内预测时，当预测单元的尺寸与变换单元的尺寸不同时，可以使用基于变换单元的参考像素来执行帧内预测。此外，可以使用仅针对最小编码单元使用n
×
n划分的帧内预测。
93.预测模块230和235可以包括预测单元确定模块、帧间预测模块和帧内预测模块。预测单元确定模块可以从熵解码模块210接收诸如预测单元信息、帧内预测方法的预测模式信息、关于帧间预测方法的运动预测的信息等的各种信息，可以将当前编码单元分成预测单元，并且可以确定对预测单元执行帧间预测还是帧内预测。通过使用从用于对视频进行编码的设备接收的当前预测单元的帧间预测所需的信息，帧间预测模块230可以基于包括当前预测单元的当前图片的先前图片或后续图片中的至少一个的信息来对当前预测单元执行帧间预测。可替选地，可以基于包括当前预测单元的当前图片中的一些预先重构区域的信息来执行帧间预测。
94.为了执行帧间预测，可以针对编码单元来确定将跳过模式、合并模式、amvp模式和帧间块复制模式中的哪个用作包括在编码单元中的预测单元的运动预测方法。
95.帧内预测模块235可以基于当前图片中的像素信息来生成预测块。当预测单元是要进行帧内预测的预测单元时，可以基于从用于对视频进行编码的设备接收到的预测单元的帧内预测模式信息来执行帧内预测。帧内预测模块235可以包括自适应帧内平滑(ais)滤波器、参考像素插值模块和dc滤波器。ais滤波器对当前块的参考像素执行滤波，并且可以根据当前预测单元的预测模式来确定是否应用滤波器。可以通过使用从用于对视频进行编码的设备接收到的预测单元的预测模式和ais滤波器信息来对当前块的参考像素执行ais滤波。在当前块的预测模式是不执行ais滤波的模式时，可以不应用ais滤波器。
96.当预测单元的预测模式是基于通过对参考像素进行插值而获得的像素值来执行帧内预测的预测模式时，参考像素插值模块可以对参考像素进行插值，以生成整像素或小于整像素的参考像素。在当前预测单元的预测模式是在没有对参考像素进行插值的情况下生成预测块的预测模式时，可以不对参考像素进行插值。在当前块的预测模式是dc模式时，dc滤波器可以通过滤波来生成预测块。
97.可以将重构块或重构图片提供至滤波器模块240。滤波器模块240可以包括去块滤波器、偏移校正模块和alf。
98.可以从用于对视频进行编码的设备接收关于是否将去块滤波器应用于相应的块或图片的信息以及关于当应用去块滤波器时应用强滤波器和弱滤波器中的哪个滤波器的信息。用于对视频进行解码的设备的去块滤波器可以从用于对视频进行编码的设备接收关于去块滤波器的信息，并且可以对相应的块执行去块滤波。
99.偏移校正模块可以基于在执行编码时应用于图片的偏移校正的类型和偏移值信息来对重构图片执行偏移校正。
100.可以基于从用于对视频进行编码的设备接收到的关于是否应用alf的信息、alf系数信息等将afl应用于编码单元。alf信息可以被提供为被包括在特定参数集中。
101.存储器245可以存储重构图片或重构块以用作参考图片或参考块，并且可以将重构图片提供至输出模块。
102.如上所述，在本发明的实施方式中，为了便于说明，编码单元被用作表示用于编码的单元的术语，然而，编码单元可以用作执行解码以及编码的单元。
103.另外，当前块可以表示要进行编码/解码的目标块。并且，当前块可以根据编码/解码步骤来表示编码树块(或编码树单元)、编码块(或编码单元)、变换块(或变换单元)、预测块(或预测单元)等。
104.可以通过将图片分成具有正方形形状或非正方形形状的基础块来对图片进行编码/解码。此时，基础块可以被称为编码树单元。编码树单元可以被定义为序列或片内允许的最大尺寸的编码单元。可以通过序列参数集、图片参数集或片头来用信号通知关于编码树单元是具有正方形形状还是具有非正方形形状的信息或者关于编码树单元的尺寸的信息。编码树单元可以被分成较小的尺寸划分。此时，如果假设通过分割编码树单元生成的划分的深度为1，则通过分割深度为1的划分生成的划分的深度可以被定义为2。也就是说，通过在编码树单元中分割深度为k的划分而生成的划分可以被定义为具有深度k+1。
105.通过分割编码树单元生成的任意尺寸的划分可以被定义为编码单元。编码单元可以被递归地分割或分割成用于执行预测、量化、变换或环路内滤波等的基础单元。例如，通过分割编码单元生成的任意尺寸的划分可以被定义为编码单元，或者可以被定义为变换单
元或预测单元，该单元是用于执行预测、量化、变换或环路内滤波等的基础单元。
106.可以基于垂直线和水平线中的至少一个来执行编码树单元或编码单元的划分。另外，划分编码树单元或编码单元的垂直线或水平线的数目可以是至少一个或更多个。例如，可以使用一条垂直线或一条水平线将编码树单元或编码单元分成两个划分，或者可以使用两条垂直线或两条水平线将编码树单元或编码单元分成三个划分。可替选地，可以通过使用一条垂直线和一条水平线将编码树单元或编码单元分成长度为1/2且宽度为1/2的四个划分。
107.当使用至少一条垂直线或至少一条水平线将编码树单元或编码单元分成多个划分时，该划分可以具有统一尺寸或不同尺寸。可替选地，任意一个划分可以具有与剩余划分不同的尺寸。
108.在以下描述的实施方式中，假设编码树单元或编码单元被分成四叉树结构或二叉树结构。然而，还可以使用更多数目的垂直线或更多数目的水平线来分割编码树单元或编码单元。
109.图3是示出了根据本发明的实施方式的基于树结构对编码块进行分级划分的示例的图。
110.以预定的块为单位对输入视频信号进行解码。用于对输入视频信号进行解码的这样的默认单元是编码块。编码块可以是执行帧内/帧间预测、变换和量化的单元。另外，以编码块为单位来确定预测模式(例如，帧内预测模式或帧间预测模式)，并且包括在编码块中的预测块可以共享所确定的预测模式。编码块可以是具有在8
×
8至64
×
64的范围内的任意尺寸的正方形块或非正方形块，或者可以是具有128
×
128、256
×
256或更大尺寸的正方形块或非正方形块。
111.具体地，可以基于四叉树和二叉树中的至少一个来对编码块进行分级划分。在此，基于四叉树的划分可以意指将2n
×
2n的编码块分成四个n
×
n的编码块，并且基于二叉树的划分可以意指将一个编码块分成两个编码块。尽管基于二叉树的划分被执行，但是正方形形状的编码块可以存在于较下深度中。
112.可以对称地或非对称地执行基于二叉树的划分。基于二叉树划分的编码块可以是正方形块或诸如矩形形状的非正方形块。例如，允许基于二叉树划分的划分类型可以包括对称类型的2n
×
n(水平方向非正方形编码单元)或n
×
2n(垂直方向非正方形编码单元)、非对称类型的nl
×
2n、nr
×
2n、2n
×
nu或2n
×
nd中的至少一个。
113.基于二叉树的划分可以限制性地允许对称类型划分或非对称类型划分中之一。在这种情况下，构建具有正方形块的编码树单元可以对应于四叉树cu划分，而构建具有对称的非正方形块的编码树单元可以对应于二叉树划分。构建具有正方形块和对称的非正方形块的编码树单元可以对应于四叉树cu划分和二叉树cu划分。
114.可以对不能再执行基于四叉树的划分的编码块执行基于二叉树的划分。可以不再对基于二叉树划分的编码块执行基于四叉树的划分。
115.此外，可以根据较上深度的划分类型来确定较下深度的划分。例如，如果允许在两个或更多个深度中基于二叉树的划分，则可以仅允许在较下深度中二叉树划分的类型与在较上深度中二叉树划分的类型相同。例如，如果利用2n
×
n类型执行在较上深度中基于二叉树的划分，则也利用2n
×
n类型来执行在较下深度中基于二叉树的划分。可替选地，如果利
用n
×
2n类型执行在较上深度中基于二叉树的划分，则也利用n
×
2n类型来执行在较下深度中基于二叉树的划分。
116.相反地，也可以仅允许在较下深度中二叉树划分的类型与在较上深度中二叉树划分的类型不同。
117.可以限制仅特定类型的基于二叉树的划分用于序列、片、编码树单元或编码单元。作为示例，对编码树单元，可以仅允许2n
×
n类型的基于二叉树的划分或n
×
2n类型的基于二叉树的划分。可以在编码器或解码器中预定义可用划分类型。或者可以对关于可用划分类型或不可用划分类型的信息进行编码，然后通过比特流用信号通知该信息。
118.图5是示出了仅允许特定类型的基于二叉树的划分的示例的图。图5的上部示出了仅允许n
×
2n类型的基于二叉树的划分的示例，图5的下部示出了仅允许2n
×
n类型的基于二叉树的划分的示例。为了实现基于四叉树或基于二叉树的自适应划分，可以使用指示基于四叉树的划分的信息、关于允许基于四叉树的划分的编码块的尺寸/深度的信息、指示基于二叉树的划分的信息、关于允许基于二叉树的划分的编码块的尺寸/深度的信息、关于不允许基于二叉树的划分的编码块的尺寸/深度的信息、关于是沿垂直方向还是沿水平方向执行基于二叉树的划分的信息等。
119.另外，可以针对编码树单元或特定编码单元获得关于允许二叉树划分的次数、允许二叉树划分的深度或允许二叉树划分的深度的数目的信息。可以以编码树单元或编码单元为单位对该信息进行编码，并且可以通过比特流将该信息传送至解码器。
120.例如，可以通过比特流对指示允许二叉树划分的最大深度的语法“max_binary_depth_idx_minus1”进行编码/解码。在这种情况下，“max_binary_depth_idx_minus1+1”可以指示允许二叉树划分的最大深度。
121.参考图6所示的示例，在图6中，已经对深度为2的编码单元和深度为3的编码单元执行了二叉树划分。因此，可以通过比特流对下述信息中的至少一个进行编码/解码：指示在编码树单元中已经执行二叉树划分的次数(即，2次)的信息、指示在编码树单元中已经允许二叉树划分的最大深度(即，深度为3)的信息或者在编码树单元中已经执行二叉树划分的深度的数目(即，2(深度2和深度3))的信息。
122.作为另一示例，可以针对每个序列或每个片获得关于允许二叉树划分的次数、允许二叉树划分的深度或允许二叉树划分的深度的数目的信息中的至少一个。例如，可以以序列单元、图片单元或片单元为单位对该信息进行编码，并且通过比特流传送该信息。因此，在第一片中二叉树划分的数目、在第一片中允许二叉树划分的最大深度或者在第一片中执行二叉树划分的深度的数目中的至少一个可以与第二片不同。例如，在第一片中，可以允许仅一个深度的二叉树划分，而在第二片中，可以允许两个深度的二叉树划分。
123.作为另一示例，可以根据片或图片的时间水平标识符(temporal id)来不同地设置允许二叉树划分的次数、允许二叉树划分的深度或允许二叉树划分的深度的数目。在此，使用时间水平标识符(temporal id)来标识具有视图、空间、时间或质量中的至少一个的可扩展性的多个视频层中的每个视频层。
124.如图3所示，可以基于四叉树将划分深度(分割深度)为k的第一编码块300划分成多个第二编码块。例如，第二编码块310至340可以是宽度为第一编码块的一半且高度为第一编码块的一半的正方形块，并且第二编码块的划分深度可以增加至k+1。
125.划分深度为k+1的第二编码块310可以被划分为划分深度为k+2的多个第三编码块。可以通过选择性地使用四叉树和二叉树中之一根据划分方法来执行第二编码块310的划分。在此，可以根据指示基于四叉树的划分的信息和指示基于二叉树的划分的信息中的至少一个来确定划分方法。
126.当基于四叉树对第二编码块310进行划分时，第二编码块310可以被划分成宽度为第二编码块的一半且高度为第二编码块的一半的四个第三编码块310a，并且第三编码块310a的划分深度可以增加至k+2。相比之下，当基于二叉树对第二编码块310进行划分时，可以将第二编码块310划分成两个第三编码块。在此，两个第三编码块中的每个可以是宽度为第二编码块的一半和高度为第二编码块的一半中之一的非正方形块，并且划分深度可以增加至k+2。可以根据划分方向将第二编码块确定为水平方向或垂直方向的非正方形块，并且可以基于关于是沿垂直方向还是沿水平方向执行基于二叉树的划分的信息来确定划分方向。
127.同时，可以将第二编码块310确定为不再基于四叉树或二叉树进行划分的叶编码块。在这种情况下，可以将叶编码块用作预测块或变换块。
128.类似于第二编码块310的划分，可以将第三编码块310a确定为叶编码块，或者可以基于四叉树或二叉树进一步划分第三编码块310a。
129.同时，可以基于二叉树将基于二叉树划分的第三编码块310b进一步划分成垂直方向的编码块310b-2或水平方向的编码块310b-3，并且相关编码块的划分深度可以增加至k+3。可替选地，可以将第三编码块310b确定为不再基于二叉树划分的叶编码块310b-1。在这种情况下，可以将编码块310b-1用作预测块或变换块。然而，可以基于下述信息中的至少一个来限制性地执行上述划分过程：关于允许基于四叉树的划分的编码块的尺寸/深度的信息、关于允许基于二叉树的划分的编码块的尺寸/深度的信息以及关于不允许基于二叉树的划分的编码块的尺寸/深度的信息。
130.表示编码块的尺寸的候选的数目可以被限制为预定数目或者预定单元中的编码块的尺寸可以具有固定值。作为示例，可以将序列或图片中的编码块的尺寸限制为256
×
256、128
×
128或32
×
32。可以通过序列头或图片头用信号通知指示序列或图片中的编码块的尺寸的信息。
131.作为基于四叉树和二叉树划分的结果，可以将编码单元表示为任意尺寸的正方形形状或矩形形状。
132.使用跳过模式、帧内预测、帧间预测或跳过方法中的至少一个对编码块进行编码。一旦确定编码块，可以通过编码块的预测划分来确定预测块。可以通过指示编码块的划分类型的划分模式(part_mode)来执行编码块的预测划分。可以根据编码块的划分模式来确定预测块的尺寸或形状。例如，根据划分模式确定的预测块的尺寸可以等于或小于编码块的尺寸。
133.图7是示出了当通过帧间预测对编码块进行编码时可以应用于编码块的划分模式的图。
134.如在图4所示的示例中，当通过帧间预测对编码块进行编码时，可以将8个划分模式中之一应用于编码块。
135.当通过帧内预测对编码块进行编码时，可以将划分模式part_2n
×
2n或划分模式
part_n
×
n应用于编码块。
136.当编码块具有最小尺寸时，可以应用part_n
×
n。在此，可以在编码器和解码器中预定义编码块的最小尺寸。或者可以经由比特流用信号通知关于编码块的最小尺寸的信息。例如，可以通过片头用信号通知编码块的最小尺寸，使得可以针对每个片定义编码块的最小尺寸。
137.通常，预定块的尺寸可以从64
×
64到4
×
4。然而，当通过帧间预测对编码块进行编码时，可以限制预测块不具有4
×
4的尺寸，以在执行运动补偿时减少存储器带宽。
138.图8是示出了根据应用了本发明的实施方式的获得残差样本的过程的流程图。
139.首先，可以获得当前块的残差系数s810。解码器可以通过系数扫描方法来获得残差系数。例如，解码器可以使用之字形扫描、垂直扫描或水平扫描来执行系数扫描，并且可以获得以二维块形式的残差系数。
140.可以对当前块的残差系数执行逆量化s820。
141.根据是否要跳过对当前块的逆量化的残差系数的逆变换来选择性地执行逆变换s830。具体地，解码器可以确定是否要跳过在当前块的水平方向或垂直方向中的至少一个上的逆变换。当确定在当前块的水平方向或垂直方向中的至少一个上应用逆变换时，可以通过对当前块的逆量化的残差系数进行逆变换来获得当前块的残差样本。在此，可以使用dct、dst和klt中的至少一个来执行逆变换。
142.当跳过在当前块的水平方向和垂直方向两者上的逆变换时，不在当前块的水平方向和垂直方向上执行逆变换。在这种情况下，可以通过利用预定值缩放逆量化的残差系数来获得当前块的残差样本。
143.跳过水平方向上的逆变换意指：不在水平方向上执行逆变换，但是在垂直方向上执行逆变换。此时，可以在水平方向上执行缩放。
144.跳过垂直方向上的逆变换意指：不在垂直方向上执行逆变换，但是在水平方向上执行逆变换。此时，可以在垂直方向上执行缩放。
145.可以根据当前块的划分类型来确定是否可以将逆变换跳过技术用于当前块。例如，如果通过基于二叉树的划分来生成当前块，则可以针对当前块限制逆变换跳过方案。因此，当通过基于二叉树的划分来生成当前块时，可以通过对当前块进行逆变换来获得当前块的残差样本。另外，当通过基于二叉树的划分来生成当前块时，可以省略指示是否跳过逆变换的信息(例如，transform_skip_flag)的编码/解码。
146.可替选地，当通过基于二叉树的划分来生成当前块时，可以将逆变换跳过方案限制于水平方向或垂直方向中的至少一个。在此，可以基于从比特流解码的信息来确定逆变换跳过方案被限制的方向，或者可以基于当前块的尺寸、当前块的形状或当前块的帧内预测模式中的至少一个来自适应地确定逆变换跳过方案被限制的方向。
147.例如，在当前块是宽度大于高度的非正方形块时，可以仅允许垂直方向上的逆变换跳过方案并且限制水平方向上的逆变换跳过方案。也就是说，在当前块是2n
×
n时，在当前块的水平方向上执行逆变换，并且可以在垂直方向上选择性地执行逆变换。
148.换句话说，在当前块是高度大于宽度的非正方形块时，可以仅允许水平方向上的逆变换跳过方案并且限制垂直方向上的逆变换跳过方案。也就是说，在当前块是n
×
2n时，在当前块的垂直方向上执行逆变换，并且可以在水平方向上选择性地执行逆变换。
149.与上述示例相比，在当前块是宽度大于高度的非正方形块时，可以仅允许水平方向上的逆变换跳过方案，并且在当前块是高度大于宽度的非正方形块时，可以仅允许垂直方向上的逆变换跳过方案。
150.可以通过比特流用信号通知指示是否要跳过水平方向上的逆变换的信息或指示是否要跳过垂直方向上的逆变换的信息。例如，指示是否要跳过水平方向上的逆变换的信息是1比特的标记“hor_transform_skip_flag”，而指示是否要跳过垂直方向上的逆变换的信息是1比特的标记“ver_transform_skip_flag”。编码器可以根据当前块的形状来对“hor_transform_skip_flag”或“ver_transform_skip_flag”中的至少一个进行编码。此外，解码器可以通过使用“hor_transform_skip_flag”或“ver_transform_skip_flag”中的至少一个来确定是否跳过水平方向上的逆变换或垂直方向上的逆变换。
151.可以根据当前块的划分类型进行设置，以跳过当前块的任意一个方向上的逆变换。例如，如果通过基于二叉树的划分生成当前块，则可以跳过水平方向上的逆变换或垂直方向上的逆变换。也就是说，如果通过基于二叉树的划分生成当前块，则在没有对指示是否跳过当前块的逆变换的信息(例如，transform_skip_flag、hor_transform_skip_flag、ver_transform_skip_flag)进行编码/解码的情况下，就可以确定跳过在水平方向或垂直方向中的至少一个上对当前块的逆变换。
152.图9是示出了根据应用了本发明的实施方式的帧间预测方法的流程图。
153.参照图9，确定当前块的运动信息s910。当前块的运动信息可以包括与当前块有关的运动向量、当前块的参考图片索引或当前块的帧间预测方向中的至少一个。
154.可以基于通过比特流用信号通知的信息或与当前块相邻的相邻块的运动信息中的至少一个来获得当前块的运动信息。
155.图10是示出了当将合并模式应用于当前块时得到当前块的运动信息的过程的图。
156.如果将合并模式应用于当前块，则可以从当前块的空间相邻块得到空间合并候选s1010。空间相邻块可以包括与当前块的左边、上边或角(例如，左上角、右上角或左下角中的至少一个)相邻的块中的至少一个。
157.空间合并候选的运动信息可以被设置成与空间相邻块的运动信息相同。
158.可以从当前块的时间相邻块得到时间合并候选s1020。时间相邻块可以意指包括在并置图片中的块。并置图片具有与包括当前块的当前图片不同的图片顺序计数(poc)。可以将并置图片确定为在参考图片列表中具有预定索引的图片，或者可以通过从比特流用信号通知的索引来确定并置图片。时间相邻块可以被确定为包括与并置图片中的当前块具有相同位置的并置块中的坐标的块或与并置块相邻的块。例如，包括并置块的中心坐标的块或与并置块的左下边界相邻的块中的至少一个可以被确定为时间相邻块。
159.可以基于时间相邻块的运动信息来确定时间合并候选的运动信息。例如，可以基于时间相邻块的运动向量来确定时间合并候选的运动向量。另外，时间合并候选的帧间预测方向可以被设置成与时间相邻块的帧间预测方向相同。然而，时间合并候选的参考图片索引可以具有固定值。例如，时间合并候选的参考图片索引可以被设置为“0”。
160.此后，可以生成包括空间合并候选和时间合并候选的合并候选列表s1030。如果包括在合并候选列表中的合并候选的数目小于最大合并候选数目，则对两个或更多个合并候选进行组合的组合合并候选可以包括在合并候选列表中。
161.当生成合并候选列表时，可以基于合并候选索引来指定包括在合并候选列表中的合并候选中的至少一个s1040。
162.当前块的运动信息可以被设置成与通过合并候选索引指定的合并候选的运动信息相同s1050。例如，当通过合并候选索引来选择空间合并候选时，当前块的运动信息可以被设置成与空间相邻块的运动信息相同。可替选地，当通过合并候选索引来选择时间合并候选时，当前块的运动信息可以被设置成与时间相邻块的运动信息相同。
163.图11是示出了当将amvp模式应用于当前块时得到当前块的运动信息的过程的图。
164.当将amvp模式应用于当前块时，可以根据比特流对当前块的帧间预测方向或参考图片索引中的至少一个进行解码s1110。也就是说，当应用amvp模式时，可以基于通过比特流编码的信息来确定当前块的帧间预测方向或参考图片索引中的至少一个。
165.可以基于当前块的空间相邻块的运动向量来确定空间运动向量候选s1120。空间运动向量候选可以包括从当前块的顶相邻块得到的第一空间运动向量候选和从当前块的左相邻块得到的第二空间运动向量候选中的至少一个。在此，顶相邻块可以包括与当前块的顶部或右上角相邻的块中的至少一个，并且当前块的左相邻块可以包括与当前块的左边或左下角相邻的块中的至少一个。与当前块的左上角相邻的块可以被视为顶相邻块或左相邻块。
166.在当前块与空间相邻块之间的参考图片彼此不同时，还可以通过缩放空间相邻块的运动向量来获得空间运动向量。
167.可以基于当前块的时间相邻块的运动向量来确定时间运动向量候选s1130。在当前块与时间相邻块之间的参考图片彼此不同时，还可以通过缩放时间相邻块的运动向量来获得时间运动向量。
168.可以生成包括空间运动向量候选和时间运动向量候选的运动向量候选列表s1140。
169.当生成了运动向量候选列表时，可以基于从运动向量候选列表中指定至少一个的信息来指定包括在运动向量候选列表中的运动向量候选中的至少一个s1150。
170.通过该信息指定的运动向量候选可以被设置为当前块的运动向量预测值，并且可以将运动向量差值与运动向量预测值相加以获得当前块的运动向量s1160。此时，可以通过比特流来解析运动向量差值。
171.当获得了当前块的运动信息时，可以基于所获得的运动信息来执行对当前块的运动补偿s920。更具体地，可以基于帧间预测方向、参考图片索引和当前块的运动向量来执行对当前块的运动补偿。
172.帧间预测方向可以指示n个方向。此处，n是自然数并且可以是1、2或3或更大。如果帧间预测方向指示n个方向，则这意指基于n个参考图片或n个参考块来执行当前块的帧间预测。例如，在当前块的帧间预测方向指示单方向时，可以基于一个参考图片来执行当前块的帧间预测。另一方面，在当前块的帧间预测指示双方向时，可以使用两个参考图片或两个参考块来执行当前块的帧间预测。
173.还可以基于当前块的尺寸或形状中的至少一个来确定是否允许对当前块的多方向预测。例如，当编码单元具有正方形形状时，对于该编码单元的编码/解码，允许多方向预测。换句话说，当编码单元具有非正方形形状时，对于该编码单元的编码/解码，仅允许单方
向预测。与上述情况相反，还可以设定，在编码单元具有非正方形形状时，对于编码/解码该编码单元，允许多方向预测，而在编码单元具有正方形形状时，对于编码/解码该编码单元，仅允许单方向预测。可替选地，还可以设定，当预测单元具有4
×
8或8
×
4等的非正方形形状时，对于编码/解码该预测单元，不允许多方向预测。
174.参考图片索引可以指定要用于当前块的帧间预测的参考图片。具体地，参考图片索引可以指定包括在参考图片列表中的参考图片中的任意一个。例如，在当前块的帧间预测方向是双方向时，通过参考图片索引l0来指定包括在参考图片列表l0中的参考图片(参考图片l0)，并且通过参考图片索引l1来指定包括在参考图片列表l1中的参考图片(参考图片l1)。
175.可替选地，一个参考图片可以包括在两个或更多个参考图片列表中。因此，即使包括在参考图片列表l0中的参考图片的参考图片索引与包括在参考图片列表l1中的参考图片的参考图片索引不同，但是两个参考图片的时间顺序(图片顺序计数，poc)可以相同。
176.运动向量可以用于对应于当前块的预测块来指定参考块在参考图片中的位置。可以基于由运动向量在参考图片中指定的参考块来执行当前块的帧间预测。例如，包括在参考块中的整像素或通过对整像素进行插值而生成的非整像素可以被生成为当前块的预测样本。以下也是可以的：由不同运动向量指定的参考块可以包括在同一参考图片中。例如，当选自参考图片列表l0的参考图片和选自参考图片列表l1的参考图片相同时，通过运动向量l0指定的参考块和通过运动向量l1指定的参考块可以包括在同一参考图片中。
177.如上所述，在当前块的帧间预测方向指示两个或更多个方向时，可以基于两个或更多个参考图片或者两个或更多个参考块来执行对当前块的运动补偿。
178.例如，在利用双方向预测对当前块进行编码时，可以基于从两个参考图片获得的两个参考块来获得当前块的预测块。此外，在利用双方向预测对当前块进行编码时，可以对指示原始块与基于两个参考块获得的预测块之间的差的残差块进行编码/解码。
179.当使用两个或更多个参考图片时，可以通过将相同或不同的权重应用于相应的参考图片来执行对当前块的运动补偿。在下文中，在帧间预测方向指示两个或更多个方向时，将在下面的实施方式中详细描述对当前块执行加权预测的方法。为了便于说明，假设当前块的帧间预测方向是双方向的。然而，甚至在当前块的帧间预测方向指示三个或更多个方向时，下面的实施方式仍然可以适用于本技术。另外，使用两个预测图像对当前块的运动补偿将被称为双方向预测方法或双方向预测编码/解码方法。
180.当将双方向预测应用于当前块时，用于当前块的双方向预测的参考图片可以包括：时间顺序(图片顺序计数，poc)在当前图片之前的图片、时间顺序在当前图片之后的图片或当前图片。例如，两个参考图片中之一可以是时间顺序在当前图片之前的图片，而另一图片可以是时间顺序在当前图片之后的图片。可替选地，两个参考图片中之一可以是当前图片，而另一图片可以是时间顺序在当前块之前的图片或者时间顺序在当前图片之后的图片。可替选地，两个参考图片都可以具有在当前图片之前的时间顺序，或者都可以具有在当前图片之后的时间顺序。可替选地，两个参考图片都可以是当前图片。
181.可以从两个参考图片列表中的每个生成两个预测块。例如，可以基于运动向量l0来生成基于参考图片l0的预测块，并且可以基于运动向量l1来生成基于参考图片l1的预测块。以下也是可以的：可以基于同一参考图片来生成通过运动向量l0生成的预测块和通过
运动向量l1生成的预测块。
182.可以基于根据两个参考图片生成的预测块的平均值来获得当前块的预测块。例如，等式1示出了基于多个预测块的平均值来获得当前块的预测块的示例。
183.[等式1]
[0184]
p(x)＝1/2*p0(x)+1/2*p1(x)
[0185]
在等式1中，p(x)指代当前块的最终预测样本或双方向预测的预测样本，pn(x)指代基于参考图片ln生成的预测块ln的样本值。例如，p0(x)可以意指基于参考图片l0生成的预测块的预测样本，p1(x)可以意指基于参考图片l1生成的预测块的预测样本。也就是说，根据等式1，可以基于根据多个参考图片生成的多个预测块的加权和来获得当前块的最终预测块。此时，可以为每个预测块分配在编码器/解码器中预定义的是固定值的权重。
[0186]
根据本发明的实施方式，基于多个预测块的加权和来获得当前块的最终预测块，并且可以可变地/自适应地确定分配给每个预测块的权重。例如，当两个参考图片或两个预测块具有不同的亮度时，与通过对预测块进行平均来对当前块执行双方向预测相比，通过将不同的权重应用于预测块中的每个来对当前块执行双方向预测是更有效的。在下文中，为了便于说明，双方向预测方法在可变地/自适应地确定分配给预测块中的每个的权重时将被称为“双方向加权预测”。
[0187]
还可以基于当前块的尺寸或形状中的至少一个来确定：对于当前块，是否允许双方向加权预测。例如，如果编码单元具有正方形形状，则允许使用双方向加权预测对该编码单元进行编码/解码，而如果编码单元具有非正方形形状，则不允许使用双方向加权预测对该编码单元进行编码/解码。与上述情况相反，还可以设定，当编码块具有非正方形形状时，允许使用双方向加权预测对该编码块进行编码/解码，并且在编码块具有正方形形状时，不允许使用双方向加权预测对该编码块进行编码/解码。可替选地，还可以设定，在预测单元是尺寸为4
×
8或8
×
4等的非正方形划分时，对于编码/解码该预测单元，不允许双方向加权预测。
[0188]
图12是根据本发明的实施方式的双方向加权预测方法的流程图。
[0189]
为了执行双方向加权预测，可以确定用于当前块的加权预测参数s1210。该加权预测参数可以用于确定要应用于两个参考图片的权重。例如，如图13中描绘的，可以将权重1-w应用于基于参考图片l0生成的预测块，并且可以将权重w应用于基于参考图片l1生成的预测块。基于加权预测参数，确定要应用于每个预测块的权重s1220，并且基于所确定的权重来执行多个预测块的加权和运算以生成当前块的最终预测块s1230。例如，可以基于下面的等式2来生成当前块的最终预测块。
[0190]
[等式2]
[0191]
p(x)＝(1-w)*p0(x)+w*p1(x)
[0192]
在等式2中，w表示加权预测参数。
[0193]
如等式2所示，可以通过将权重1-w分配给预测块p0并且将权重w分配给预测块p1来获得当前块的最终预测块p(x)。与等式2所示的相反，还可以将权重w分配给预测块p0并且将权重1-w分配给预测块p1。
[0194]
可以基于参考图片之间的亮度的差来确定加权预测参数，或者可以基于当前图片与参考图片之间的距离(即，poc差)来确定加权预测参数。可替选地，还可以基于当前块的
尺寸或形状来确定加权预测参数。
[0195]
可以以块为单位(例如，编码树单元、编码单元、预测单元或变换单元)来确定加权预测参数，或者可以以片或图片为单位来确定加权预测参数。
[0196]
此时，可以基于预定的候选加权预测参数来确定加权预测参数。作为示例，加权预测参数可以被确定为预定值如-1/4、1/4、3/8、1/2、5/8、3/4或5/4中之一。
[0197]
可替选地，在确定用于当前块的加权预测参数集之后，还可以从包括在所确定的加权预测参数集中的候选加权预测参数中的至少一个来确定加权预测参数。可以以块为单位(例如，编码树单元、编码单元、预测单元或变换单元)来确定加权预测参数集，或者可以以片或图片为单位来确定加权预测参数集。
[0198]
例如，如果选择了加权预测参数集w0和w1中之一，则包括在所选择的加权预测参数集中的候选加权预测参数中的至少一个可以被确定为用于当前块的加权预测参数。例如，假设加权预测参数集为：w0＝{-1/4，1/4，3/8，1/2，5/8，3/4，5/4}，w1＝{-3/8，-1/4，1/4，3/8，1/2，5/8，3/4}。当选择了加权预测参数集w0时，当前块的加权预测参数w可以被确定为包括在w0中的候选加权预测参数-1/4、1/4、3/8、1/2、5/8、3/4和5/4中之一。
[0199]
可以根据用于双方向预测的参考图片的时间顺序或时间方向来确定可用于当前块的加权预测参数集。时间顺序可以指示图片之间的编码/解码顺序，或者可以指示图片的输出顺序(例如，poc)。另外，时间方向可以指示参考图片的时间顺序是在当前图片之前还是在当前图片之后。
[0200]
作为示例，根据用于双方向预测的两个参考图片是否具有相同的时间顺序，可以确定可用于当前图片的加权预测参数集。例如，根据参考图片l0和参考图片l1是否是相同的图片(也就是说，图片的时间顺序相同)或者参考图片l0和参考图片l1是否彼此不同(也就是说，图片的时间顺序不同)，可以可变地确定可用于当前块的加权预测参数集。
[0201]
不同的加权预测参数集可以意指：包括在每个加权预测参数集中的加权预测参数的绝对值、符号或数量中的至少一个是不同的。例如，当参考图片l0和参考图片l1的时间方向相同时，可以使用加权预测参数集w0＝{-1/4，1/4，3/8，1/2，5/8，3/4，5/4}，并且当参考图片l0和参考图片l1的时间方向不同时，可以使用加权预测参数集w1＝{-3/8，-1/4，1/4，3/8，1/2，5/8，3/4}。
[0202]
作为示例，根据用在双方向预测中的两个参考图片的时间方向是否相同，可以确定可用于当前图片的加权预测参数集。例如，可以在两个参考图片的时间方向相同时与在两个参考图片的时间方向不同时之间不同地确定可用于当前块的加权预测参数集。具体地，可以根据参考图片l0和参考图片l1是否都在当前图片之前、参考图片l0和参考图片l1是否都在当前图片之后或者参考图片l0与参考图片l1的时间方向是否不同来不同地确定当前块的加权预测参数。
[0203]
可以针对每个块、每个片或每个图片不同地设置可用的候选加权预测参数的数目或可用的加权预测参数集的数目。例如，可以以片为单位用信号通知可用的候选加权预测参数的数目或可用的加权预测参数集的数目。因此，对于每个片而言，可用的候选加权预测参数的数目或可用的加权预测参数集的数目可以不同。
[0204]
可以从与当前块相邻的相邻块来得到加权预测参数。在此，与当前块相邻的相邻块可以包括当前块的空间相邻块或时间相邻块中的至少一个。
[0205]
作为示例，当前块的加权预测参数可以被设置为与当前块相邻的相邻块的加权预测参数中的最小值或最大值，或者可以被设置为相邻块的加权预测参数的平均值。
[0206]
作为示例，可以从与当前块相邻的相邻块中的位于预定位置处的相邻块来得到当前块的加权预测参数。在此，可以可变地或固定地确定预定位置。具体地，通过当前块(例如，编码单元、预测单元或变换单元)的尺寸、当前块在编码树单元中的位置、当前块的形状(例如，当前块的划分类型)或当前块的划分索引来确定相邻块的位置。可替选地，可以在编码器/解码器中预定义并且固定地确定相邻块的位置。
[0207]
作为示例，可以从与当前块相邻的相邻块中的应用了双方向加权预测的相邻块来得到当前块的加权预测参数。具体地，当以预定顺序扫描与当前块相邻的相邻块时，可以从应用了双方向加权预测的第一检测相邻块的加权预测参数来得到当前块的加权预测参数。图14是示出了相邻块之间的扫描顺序的图。在图14中，按照左相邻块、上相邻块、右上相邻块、左下相邻块和左上相邻块的顺序来执行该扫描，但是本发明不限于示出的示例。当按照下面的预定顺序来执行该扫描时，应用了双方向加权预测的第一检测相邻块的加权预测参数可以用作当前块的加权预测参数。
[0208]
可替选地，当按照下面的预定顺序来执行该扫描时，还可以将应用了双方向加权预测的第一检测相邻块的加权预测参数设置为当前块的加权预测参数预测值。在这种情况下，可以通过使用加权预测参数预测值和加权预测参数残差值来获得当前块的加权预测参数。
[0209]
作为示例，还可以从与当前块的运动信息合并的空间相邻块或时间相邻块或者从用于得到当前块的运动向量预测值的空间相邻块或时间相邻块来得到当前块的加权预测参数。
[0210]
还可以通过比特流用信号通知用于确定加权预测参数的信息。例如，可以基于指示加权预测参数的值的信息、指定候选加权预测参数中之一的索引信息或指定加权预测参数集中之一的集索引信息中的至少一个来确定当前块的加权预测参数。
[0211]
在对加权预测参数进行二值化和编码时，可以将最小二进制码字映射至统计上具有最高使用频率的加权预测参数。例如，如下面的表1中所示，可以对加权预测参数执行截断一元二值化。表1是在cmax为6的情况下的示例。
[0212]
[表1]
[0213]
索引加权预测参数二进制码字0-1/411111111/41111023/811031/2045/81053/4111065/4111110
[0214]
除了在预先接收输入的最大值(cmax)之后执行转换之外，表1中所示的截断一元二值化方法与一元二值化方法基本上相同。表2示出了在cmax为13的情况下的截断一元二值化。
[0215]
[表2]
[0216]
值二值化00110211031110... 121111111111110131111111111111
[0217]
在加权预测参数二值化期间，还可以根据用于双方向预测的参考图片的时间方向是否相同来使用不同的二进制码字。例如，表3示出了根据参考图片l0与参考图片l1的时间方向是否相同的二进制码字。
[0218]
[表3]
[0219][0220][0221]
还可以根据当前图片与参考图片之间的时间顺序差来确定当前块的加权预测参数。在此，时间顺序差可以指示图片之间的编码/解码顺序差或图片之间的输出顺序差(例如，poc差值)。例如，可以基于当前图片与参考图片l0之间的poc差值(在下文中被称为第一参考距离)以及当前图片与参考图片l1之间的poc差值(在下文中被称为第二参考距离)中的至少一个来确定当前图片的加权预测参数。
[0222]
具体地，可以基于第一参考距离与第二参考距离之间的比率来确定当前块的加权
预测参数。当第一参考距离是w并且第二参考距离是h时，可以将w/(w+h)用作当前块的加权预测参数。例如，当第一参考距离和第二参考距离相同时，可以将当前块的加权预测参数确定为1/2。另外，当第一参考距离是1并且第二参考距离是3时，可以将当前块的加权预测参数确定为1/4。
[0223]
可替选地，当第一参考距离是w并且第二参考距离是h时，还可以将候选加权预测参数中的具有与w/(w+h)最类似的值的候选加权预测参数用作当前块的加权预测参数。
[0224]
可替选地，还可以在考虑第一参考距离和第二参考距离的情况下对当前块的加权预测参数进行二值化。表4示出了基于第一参考距离和第二参考距离的二进制码字。
[0225]
[表4]
[0226][0227][0228]
在表4所示的示例中，当第一参考距离与第二参考距离相同时，将加权预测参数设置为1/2的概率高。因此，当第一参考距离与第二参考距离相同时，可以给最小码字分配1/2。
[0229]
当第一参考距离与第二参考距离不同时，可以将最小二进制码字映射至统计上最频繁使用的加权预测参数。例如，当第一参考距离大于第二参考距离时，为参考图片l1分配更大的权重的概率高。因此，可以将最小二进制码字映射至大于1/2的加权预测参数。换句
话说，当第一参考距离小于第二参考距离时，为参考图片l0分配更大的权重的概率高。因此，可以将最小二进制码字映射至小于1/2的加权预测参数。
[0230]
与表4中所示的示例相反，还可以在第一参考距离大于第二参考距离时将最小二进制码字映射至小于1/2的加权预测参数，而在第一参考距离小于第二参考距离时将最小二进制码字映射至大于1/2的加权预测参数。
[0231]
还可以通过对两个或更多个预测模式进行组合来对当前块执行预测。组合预测模式可以是帧间预测模式和帧内预测模式的组合或者两个或更多个帧间预测方法的组合。在此，帧间预测方法可以包括跳过模式、合并模式、amvp模式或当前图片参考模式中的至少一个。当前图片参考模式表示使用包括当前块的当前图片作为参考图片的帧间预测方法。当使用当前图片参考模式时，可以从在当前块之前重构的区域来得到当前块的预测块。还可以将当前图片参考模式分类为帧内预测模式中之一而不是帧间预测模式。可替选地，当前图片参考模式可以被理解为跳过模式、合并模式或amvp模式的一个实施方式。可替选地，还可以利用两个或更多个帧内预测模式(例如，方向预测模式和非方向预测模式或者两个或更多个方向预测模式等)来构建组合预测模式。
[0232]
在下文中，将详细描述通过对两个或更多个预测模式进行组合来对当前块执行预测的方法。
[0233]
图15是示出了根据本发明的组合预测方法的流程图。
[0234]
首先，基于第一预测模式，可以生成用于当前块的第一预测块s1510。然后，基于第二预测模式，可以生成用于当前块的第二预测块s1520。第一预测模式与第二预测模式可以是不同的预测模式。可以通过多方向预测来生成第一预测块或第二预测块中的任意一个。
[0235]
可以确定用于当前块的加权预测参数s1530。由于已经参照图12详细描述了用于确定加权预测参数的实施方式，因此将在本实施方式中省略对其的详细描述。
[0236]
基于加权预测参数来确定要应用于第一预测块和第二预测块的权重s1540。并且通过基于所确定的权重执行多个预测块的加权和运算来生成当前块的最终预测块s1550。
[0237]
图16和图17是示出了基于通过不同预测模式获得的多个预测块的加权和来生成当前块的预测块的示例的图。
[0238]
参照图16，可以基于参考图片l0或参考图片l1来生成预测块p0(帧间预测)，并且可以基于在当前块之前编码/解码的相邻样本来生成预测块p1(帧内预测)。在这种情况下，可以基于预测块p0和预测块p1的加权和运算来生成当前块的预测块。
[0239]
参照图17，可以基于参考图片l0或参考图片l1来生成预测块p0，并且可以基于在当前图片参考模式下的当前图片来生成预测块p1。在这种情况下，可以基于预测块p0和预测块p1的加权和运算来生成当前块的预测块。
[0240]
可以基于通过比特流用信号通知的信息来确定：是否要使用对两个或更多个预测模式进行组合的组合预测方法。例如，可以通过比特流用信号通知指示帧内预测模式、帧间预测模式或组合预测模式中的至少一个的信息。还可以根据块的尺寸或形状来限制组合预测模式的使用。例如，如果当前块的尺寸等于或小于8
×
8或者如果当前块具有非正方形形状，则可以限制组合预测模式的使用。
[0241]
可以以子块为单位来确定当前块的预测模式。例如，在当前块被划分为n个划分时，可以针对n个划分中的每个划分单独确定预测模式。当前块的划分类型可以是对称的或
非对称的。因此，子块可以具有正方形形状或非正方形形状。可以以子块为单位来确定是使用单个预测模式还是使用组合预测模式。
[0242]
此时，可以在考虑距参考样本的距离的情况下确定用于每个子块的预测模式。例如，当利用帧内预测模式对当前块进行编码时，随着距参考样本的距离增加，与参考样本的相关性变得越小。因此，可以认为，当前块中远离参考样本的样本(例如，包括在当前块的右列或下行中的样本)与参考样本之间的相关性小。因此，可以通过帧内预测对与参考样本相邻的子块(例如，顶参考样本或左参考样本)进行编码/解码，并且可以通过对帧内预测和帧间预测进行组合的组合预测方法来对远离参考样本的子块进行编码/解码。
[0243]
如在图18所示的示例中，可以基于帧内预测模式来生成子块0的预测块。换句换说，可以基于第一预测块和第二预测块的加权和运算来生成子块1的预测块，所述第一预测块基于帧内预测模式来生成，所述第二预测块通过帧间预测模式来生成。
[0244]
尽管当前块与参考图片中的参考块类似，但是如果在当前图片与先前图片之间存在亮度的变化，则可以降低帧内预测或帧间预测的效率。因此，可以针对当前图片与参考图片之间的亮度的变化来考虑光照补偿，以用于补偿通过帧内预测或帧间预测生成的预测样本或者基于该预测样本重构的重构样本。可以通过将光照补偿权重和偏移应用于在帧内预测或帧间预测中被编码/解码的图像来执行光照补偿。例如，可以基于下面的等式3来执行光照补偿预测。
[0245]
[等式3]
[0246]
p
′
＝l
×
p+f
[0247]
在等式3中，p可以指代通过帧内预测或帧间预测编码/解码的预测样本。l指代光照补偿权重，f指代偏移。p
′
可以指代应用了光照补偿的加权预测样本。
[0248]
还可以将光照补偿应用于基于在帧内预测或帧间预测中被编码/解码的预测样本获得的重构样本。具体地，可以在应用环路内滤波器之前将光照补偿应用于重构样本，或者在应用环路内滤波器之后将光照补偿应用于重构样本。在这种情况下，在等式3中，p可以指代重构样本，p
′
可以指代应用了光照补偿的加权重构样本。
[0249]
在将当前图片或当前片与先前图片或先前片进行比较时，可能跨当前图片或当前片的整个区域发生光照改变。因此，可以以序列、图片或片为单位执行光照补偿。
[0250]
可替选地，在将当前片或当前序列与先前片或先前序列进行比较时，可能仅在片或序列内的部分区域中发生光照改变。因此，可以以图片或片中的预定区域为单位来执行光照补偿。也就是说，通过确定是否以预定区域为单位执行光照补偿，可以仅对图片或片中的发生光照改变的部分区域执行光照补偿。
[0251]
当仅对图片或片内的预定区域执行光照补偿时，可以对用于确定执行光照补偿的区域的信息进行编码/解码。例如，可以对下述信息进行编码/解码，所述信息指示执行光照补偿的区域的位置、执行光照补偿的区域的尺寸或执行光照补偿的区域的形状。
[0252]
可替选地，还可以对指示是否以块为单位执行光照补偿的信息进行编码/解码。该信息可以是1比特的标记，但不限于此。例如，可以以编码树单元、编码单元、预测单元或变换单元为单位来确定是否要执行光照补偿。因此，可以以编码树单元、编码单元、预测单元或变换单元为单位来确定指示是否要执行光照补偿的信息。
[0253]
还可以确定图片或片中执行光照补偿的区域，然后确定是否要对包括在该区域中
的每个块执行光照补偿。例如，当预定区域包括多个编码树单元、多个编码单元、多个预测单元或多个变换单元时，可以用信号通知指示是否要对包括在预定区域中的每个块执行光照补偿的信息。因此，可以对包括在要执行光照补偿的单元中的每个块选择性地执行光照补偿。
[0254]
基于上面的描述，将详细描述根据本发明的光照补偿预测方法。
[0255]
图19是根据本发明的光照补偿预测的方法的流程图。
[0256]
首先，可以确定用于当前块的光照补偿参数s1910。光照补偿参数可以包括光照补偿权重或偏移中的至少一个。
[0257]
可以以序列、图片、片或编码/解码块为单位通过比特流用信号通知光照补偿参数。在此，编码/解码块的单位可以表示编码树单元、编码单元、预测单元或变换单元中的至少一个。
[0258]
可替选地，还可以用信号通知用于执行光照补偿的每个预定区域的光照补偿参数。例如，可以用信号通知用于包括多个块的预定区域的光照补偿参数。包括在预定区域中的多个块可以使用相同的光照补偿参数。
[0259]
无论当前块的编码模式如何，都可以用信号通知光照补偿参数。可替选地，可以根据当前块的编码模式来确定是否要用信号通知光照补偿参数。例如，可以仅在当前块的编码模式具有预定义的模式时才用信号通知光照补偿参数。在此，编码模式可以指示是以帧内预测(即，帧内预测模式)对当前块进行编码还是以帧间预测(即，帧间预测模式)对当前块进行编码。例如，可以仅在利用帧间预测对当前块进行编码时才用信号通知光照补偿参数。可替选地，以下也是可以的：编码模式可以指示作为当前块的帧间预测方法的跳过模式、合并模式、amvp模式或当前图片参考模式中之一。
[0260]
作为示例，当利用跳过模式或当前图片参考模式对当前块进行编码时，可以不用信号通知光照补偿参数。换句话说，当利用合并模式或amvp模式对当前块进行编码时，可以通过比特流用信号通知光照补偿参数。如果不用信号通知光照补偿参数，则可以不执行对当前块的光照补偿。可替选地，如果不用信号通知光照补偿参数，则可以使用在编码器/解码器中预定义的光照补偿参数来执行当前块的光照补偿。
[0261]
可以基于当前图片中的第一模板区域与参考图片中的第二模板区域之间的光照改变来得到光照补偿参数。第一模板区域可以与当前块相邻，第二模板区域可以与参考块相邻。在此，参考块用于生成当前块的预测块，并且可以通过当前块的运动向量来指定参考块。可替选地，第二模板区域可以在参考图片中具有与第一模板区域协同定位的位置。可以根据参考图片或当前块的编码模式可变地确定第二模板区域的位置。
[0262]
当不可用样本被包括在第二模板区域中时，可以使用可用样本为不可用样本分配替换值。例如，可用样本可以被复制到不可用样本的位置，或者可以将使用多个可用样本计算的内插值分配至不可用样本的位置。可用样本可以包括在第二模板区域中或者可以位于第二模板区域外部。例如，可以基于包括在参考块中的可用样本来计算包括在第二模板区域中的不可用样本的替换值。可以基于模板区域的尺寸或形状中的至少一个可变地确定在内插中使用的滤波器的滤波器系数、形状或滤波器抽头的数目中的至少一个。
[0263]
可以基于包括在第一模板区域中的样本与包括在第二模板区域中的样本之间的差值来计算光照补偿参数。例如，当将当前块的相邻样本假设为yi(i为0到n-1)并且将参考
块的相邻样本假设为xi(i为0到n-1)时，可以通过计算等式4中的e(w，f)的最小值来得到光照补偿权重l和偏移f。
[0264]
[等式4]
[0265]
e(w，f)＝∑i(p
i-(lp
i-f))2+λ(w-1)2[0266]
等式4可以被修改为下面的等式5。
[0267]
[等式5]
[0268][0269]
根据等式5，可以得到用于得到光照补偿权重l的等式6和用于得到偏移f的等式7。
[0270]
[等式6]
[0271][0272]
[等式7]
[0273]
f＝∑iy
i-a*∑ixi[0274]
如果确定了光照补偿参数，就可以使用所确定的光照补偿参数来执行对当前块的光照补偿s1920。可以通过将光照补偿权重和偏移应用于在帧内预测或帧间预测中被编码/解码的块(例如，预测块或重构块)来执行光照补偿。
[0275]
在当前块的帧间预测方向指示多个方向时，可以对多个预测块中的至少一个预测块执行补偿，并且可以基于应用了光照补偿的预测块对当前块执行多方向预测。例如，如果将双方向加权预测应用于当前块，则可以对第一预测块和第二预测块中的至少一个执行光照补偿，然后可以基于第一预测块与第二预测块之间的加权和运算来生成当前块的最终预测块或双方向预测块。
[0276]
图20是基于光照补偿的双方向加权预测方法的流程图。
[0277]
参照图20，首先，可以确定是否对参考图片执行光照补偿s2010。可以基于通过比特流用信号通知的信息来确定是否对参考图片执行光照补偿。该信息可以是1比特的标记，但不限于此。例如，pred_ic_comp_flag可以指示是否对参考图片执行光照补偿。
[0278]
如果确定要对参考块执行光照补偿，则可以确定要执行光照补偿的参考图片s2020。具体地，当确定对参考块执行光照补偿时，可以确定是对参考图片l0执行光照补偿还是对参考图片l1执行光照补偿。可以基于通过比特流用信号通知的信息来执行该确定。该信息可以指定参考图片中的任意一个。可替选地，该信息可以是指示是否对每个参考图片执行光照补偿的多个1比特的标记。例如，可以通过比特流用信号通知指示是否对参考图片l0执行光照补偿的pred_ic_comp_l0_enalbed_flag或指示是否对参考图片l1执行光照补偿的pred_ic_comp_l1_enalged_flag中的至少一个。
[0279]
如果确定了将对其执行光照补偿的参考图片，则可以确定要应用于参考图片的光照补偿参数s2030。因为已经参照图19详细描述了光照补偿参数的确定，所以将在本实施方式中省略对其的详细描述。
[0280]
基于所确定的光照补偿参数，可以对基于要执行光照补偿的参考图片生成的预测
块执行光照补偿s2040。然后，可以使用光照补偿的预测块来执行对当前块的双方向加权预测s2050。
[0281]
图21是示出了使用应用了光照补偿的预测块来执行双方向加权预测的示例的图。在图21中，示出了已经对基于参考图片l1生成的预测块执行了光照补偿。因此，可以基于预测块p0和光照补偿预测块(1*p1+f)的加权和来执行对当前块的双方向加权预测，所述预测块p0基于参考图片l0来生成，所述光照补偿预测块(1*p1+f)基于参考图片l1来生成。
[0282]
还可以基于用于光照补偿的光照补偿权重来执行对当前块的双方向加权预测。
[0283]
作为示例，基于光照补偿权重，可以得到当前块的加权预测参数，以对当前块执行双方向加权预测。此时，当前块的加权预测参数w可以被设置为与光照补偿权重l相同的值，或者可以被设置为(1-l)。例如，当将基于光照补偿权重l的光照补偿应用于基于参考图片l0生成的预测块时，可以基于下面的等式8来计算对当前块的双方向加权预测。
[0284]
[等式8]
[0285]
p(x)＝l
×
p0(x)+f+(1-l)*p1(x)
[0286]
作为示例，还可以通过将由加权预测参数确定的权重应用于多个预测块中之一并且将光照补偿权重应用于多个预测块中的其他预测块来执行当前块的双方向加权预测。例如，可以基于下面的等式9来计算对当前块的双方向加权预测。
[0287]
[等式9]
[0288]
p(x)＝l
×
p0(x)+f+w*p1(x)
[0289]
尽管已经基于一系列步骤或流程图描述了上述实施方式，但是它们不限制本发明的时间序列顺序，并且可以根据需要同时或以不同顺序来执行。此外，构成上述实施方式中的框图的部件(例如，单元、模块等)中的每个可以由硬件设备或软件以及多个部件来实现。或者可以通过单个硬件设备或软件来组合并实现多个部件。上述实施方式可以以程序指令的形式来实现，所述程序指令可以通过各种计算机部件来执行并且被记录在计算机可读记录介质中。计算机可读记录介质可以包括程序命令、数据文件、数据结构等中之一或者程序命令、数据文件、数据结构等的组合。计算机可读介质的示例包括磁介质(如硬盘、软盘和磁带)、光记录介质(如cd-rom和dvd)、磁光介质(如光磁软盘)、介质以及专门被配置成存储和执行程序指令的硬件设备(如rom、ram、闪速存储器)等。硬件设备可以被配置成操作为用于执行根据本发明的处理的一个或更多个软件模块，反之亦然。
[0290]
工业适用性
[0291]
本发明可以应用于能够对视频进行编码/解码的电子设备。
[0292]
此外，本发明实施例还包括：
[0293]
(1).一种用于对视频进行解码的方法，所述方法包括：
[0294]
基于第一预测模式来生成当前块的第一预测块；
[0295]
基于第二预测模式来生成当前块的第二预测块；以及
[0296]
基于所述第一预测块和所述第二预测块来生成所述当前块的最终预测块。
[0297]
(2).根据(1)所述的方法，其中，所述第一预测模式与所述第二预测模式不同。
[0298]
(3).根据(2)所述的方法，其中，所述第一预测模式是帧内预测模式，而所述第二预测模式是帧间预测模式。
[0299]
(4).根据(1)所述的方法，其中，所述第一预测模式是与所述第二预测模式不同的
帧间预测模式，并且所述帧间预测模式包括跳过模式、合并模式、amvp(高级运动向量预测)模式或当前图片参考模式中的至少一个。
[0300]
(5).根据(1)所述的方法，其中，基于所述第一预测块与所述第二预测块之间的加权和运算来获得所述最终预测块。
[0301]
(6).根据(5)所述的方法，其中，基于所述当前块的加权预测参数来确定被应用于所述第一预测块和所述第二预测块的权重。
[0302]
(7).根据(1)所述的方法，其中，基于所述当前块的形状或尺寸来确定是否使用对所述第一预测模式和所述第二预测模式进行组合的预测方法。
[0303]
(8).根据(1)所述的方法，其中，所述当前块包括第一子块和第二子块，并且
[0304]
其中，基于所述第一预测块来生成所述第一子块的最终预测块，并且基于所述第一预测块和所述第二预测块来生成所述第二子块的最终预测块。
[0305]
(9).一种用于对视频进行编码的方法，所述方法包括：
[0306]
基于第一预测模式来生成当前块的第一预测块；
[0307]
基于第二预测模式来生成当前块的第二预测块；以及
[0308]
基于所述第一预测块和所述第二预测块来生成所述当前块的最终预测块。
[0309]
(10).根据(9)所述的方法，其中，所述第一预测模式与所述第二预测模式不同。
[0310]
(11).根据(10)所述的方法，其中，所述第一预测模式是帧内预测模式，而所述第二预测模式是帧间预测模式。
[0311]
(12).根据(9)所述的方法，其中，所述第一预测模式是与所述第二预测模式不同的帧间预测模式，并且所述帧间预测模式包括跳过模式、合并模式、amvp(高级运动向量预测)模式或当前图片参考模式中的至少一个。
[0312]
(13).根据(9)所述的方法，其中，所述当前块包括第一子块和第二子块，并且
[0313]
其中，基于所述第一预测块来生成所述第一子块的最终预测块，并且基于所述第一预测块和所述第二预测块来生成所述第二子块的最终预测块。
[0314]
(14).一种用于对视频进行解码的装置，所述装置包括：
[0315]
预测单元，所述预测单元基于第一预测模式来生成当前块的第一预测块，基于第二预测模式来生成当前块的第二预测块，并且基于所述第一预测块和所述第二预测块来生成所述当前块的最终预测块。
[0316]
(15).一种用于对视频进行编码的装置，所述装置包括：
[0317]
预测单元，所述预测单元基于第一预测模式来生成当前块的第一预测块，基于第二预测模式来生成当前块的第二预测块，并且基于所述第一预测块和所述第二预测块来生成所述当前块的最终预测块。