三维网格帧间预测编码方法、解码方法、装置及电子设备与流程

本申请属于三维动态网格编解码，具体涉及一种三维网格帧间预测编码方法、解码方法、装置及电子设备。

背景技术：

1、近年来，随着多媒体技术的迅速发展，三维模型成为继音频、图像、视频之后的新一代数字化媒体，三维网格是一种常用的三维模型表示方式。三维网格在经过网格简化、网格参数化和细分变形后得到基础网格，在对基础网格进行编码时，会将其划分为i子网格、p子网格和skip子网格三类进行编码，其中对于p子网格，采用帧间编码模式，需要编码子网格参考信息和各顶点的运动向量(motion vector，mv)，目前通常是使用固定方式进行运动向量预测，这样的预测方式并不适用于所有顶点的mv，造成部分顶点mv预测不准确的情况。

技术实现思路

1、本申请实施例提供一种三维网格帧间预测编码方法、解码方法、装置及电子设备，能够解决相关技术中三维网格帧间预测的准确度不高的问题。

2、第一方面，提供了一种三维网格帧间预测编码方法，由编码端执行，包括：

3、编码端对待编码三维网格进行第一处理，以得到基础网格；

4、所述编码端对所述基础网格进行子网格划分，以得到p子网格；

5、所述编码端确定所述p子网格中待编码网格顶点的目标编码模式以及第一目标运动向量预测mvp值，所述第一目标mvp值为第一候选列表包括的n个mvp值中的一个，所述第一候选列表中的每个所述mvp值对应一个索引，n为大于1的整数；

6、所述编码端对所述目标编码模式及所述第一目标mvp值对应的索引进行编码，得到包括第一信息的码流，所述第一信息用于表征所述目标编码模式及所述第一目标mvp值对应的索引。

7、第二方面，提供了一种三维网格帧间预测解码方法，由解码端执行，包括：

8、解码端获取编码端发送的码流，所述码流包括基础网格码流；

9、所述解码端对所述基础网格码流进行子网格类型解码，得到包括第一信息的p子网格码流，所述第一信息用于表征目标编码方式及第一目标mvp值对应的索引；

10、所述解码端根据所述第一信息确定目标编码模式，以及根据所述第一目标mvp值对应的索引从第一候选列表中确定第一目标mvp值，所述第一候选列表包括n个mvp值及每个mvp值对应的索引，所述第一目标mvp值为所述n个mvp值中的一个，n为大于1的整数；

11、所述解码端根据所述目标编码模式及所述第一目标mvp值对所述p子网格码流进行解码，得到p子网格中待解码网格顶点的mv值。

12、第三方面，提供了一种三维网格帧间预测编码装置，包括：

13、处理模块，用于对待编码三维网格进行第一处理，以得到基础网格；

14、划分模块，用于对所述基础网格进行子网格划分，以得到p子网格；

15、第一确定模块，用于确定所述p子网格中待编码网格顶点的目标编码模式以及第一目标运动向量预测mvp值，所述第一目标mvp值为第一候选列表包括的n个mvp值中的一个，所述第一候选列表中的每个所述mvp值对应一个索引，n为大于1的整数；

16、编码模块，用于对所述目标编码模式及所述第一目标mvp值对应的索引进行编码，得到包括第一信息的码流，所述第一信息用于表征所述目标编码模式及所述第一目标mvp值对应的索引。

17、第四方面，提供了一种三维网格帧间预测解码装置，包括：

18、获取模块，用于获取编码端发送的码流，所述码流包括基础网格码流；

19、第一解码模块，用于对所述基础网格码流进行子网格类型解码，得到包括第一信息的p子网格码流，所述第一信息用于表征目标编码方式及第一目标mvp值对应的索引；

20、第二确定模块，用于根据所述第一信息确定目标编码模式，以及根据所述第一目标mvp值对应的索引从第一候选列表中确定第一目标mvp值，所述第一候选列表包括n个mvp值及每个mvp值对应的索引，所述第一目标mvp值为所述n个mvp值中的一个，n为大于1的整数；

21、第二解码模块，用于根据所述目标编码模式及所述第一目标mvp值对所述p子网格码流进行解码，得到p子网格中待解码网格顶点的mv值。

22、第五方面，提供了一种电子设备，包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面或第二方面所述的方法的步骤。

23、第六方面，提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤，或者实现如第二方面所述的方法的步骤。

24、第七方面，提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法，或实现如第二方面所述的方法。

25、第八方面，提供了一种计算机程序/程序产品，所述计算机程序/程序产品被存储在存储介质中，所述程序/程序产品被至少一个处理器执行以实现如第一方面所述的方法，或实现如第二方面所述的方法。

26、在本申请实施例中，编码端不再局限于是使用固定的运动向量预测方式来进行编码，而是能够从第一候选列表中灵活地选择第一目标mvp值进行运动向量预测，使得编码端对于p子网格运动向量的编码方式更加灵活，从而有助于提升编码端对于p子网格帧间预测的准确性，也有助于提升编码效率。

技术特征：

1.一种三维网格帧间预测编码方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述编码端确定所述p子网格中待编码网格顶点的目标编码模式以及第一目标mvp值之前，所述方法还包括：

3.根据权利要求2所述的方法，其特征在于，所述编码端基于所述p子网格中待编码网格顶点相邻的已编码网格顶点构建所述第一候选列表，包括：

4.根据权利要求3所述的方法，其特征在于，所述编码端基于所述m个已编码网格顶点各自对应的mv值确定第二mvp值，包括：

5.根据权利要求3或4所述的方法，其特征在于，所述第一候选列表中的l个所述第一mvp值的排列顺序与第一距离相关，所述第一距离为所述第一mvp值对应的已编码网格顶点与所述待编码网格顶点之间的距离。

6.根据权利要求5所述的方法，其特征在于，l个所述第一mvp值按照所述第一距离从小到大的顺序排列。

7.根据权利要求3-6中任一项所述的方法，其特征在于，在l+1＜n的情况下，所述编码端基于l个所述第一mvp值以及所述第二mvp值，构建所述第一候选列表，包括：

8.根据权利要求2-7中任一项所述的方法，其特征在于，所述编码端基于所述p子网格中待编码网格顶点相邻的已编码网格顶点构建所述第一候选列表之后，所述方法还包括：

9.根据权利要求8所述的方法，其特征在于，所述编码端对所述第一候选列表中的所述n个mvp值进行重排序，包括：

10.根据权利要求9所述的方法，其特征在于，重排序后的所述第一候选列表中的所述n个mvp值按照对应的误差和从小到大的顺序排列。

11.根据权利要求1-10中任一项所述的方法，其特征在于，所述确定第一目标mvp值，包括：

12.根据权利要求11所述的方法，其特征在于，所述第一目标mvp值对应的第一率失真代价或第二率失真代价为n个所述第一率失真代价和n个所述第二率失真代价中最小的一个。

13.根据权利要求11或12所述的方法，其特征在于，在所述第一目标mvp值对应的第一率失真代价为n个所述第一率失真代价和n个所述第二率失真代价中最小的一个的情况下，所述目标编码模式为所述第一编码模式；或，

14.根据权利要求13所述的方法，其特征在于，所述第一编码模式为直接基于mvp值进行编码的模式，所述第二编码模式为基于mvp值和运动向量残差mvd值进行编码的模式；

15.根据权利要求11-14中任一项所述的方法，其特征在于，目标率失真代价与第一长度差值和第一角度相关，所述第一长度差值为第三目标mvp值模长与所述待编码网格顶点的mv值模长之间的差值，所述第一角度为所述第三目标mvp值与所述待编码网格顶点的mv值之间的角度；

16.一种三维网格帧间预测解码方法，其特征在于，包括：

17.根据权利要求16所述的方法，其特征在于，所述根据所述目标mvp值对应的索引从第一候选列表中确定第一目标mvp值之前，所述方法还包括：

18.根据权利要求17所述的方法，其特征在于，所述解码端基于与所述p子网格中待解码网格顶点相邻的已解码网格顶点构建所述第一候选列表，包括：

19.根据权利要求18所述的方法，其特征在于，所述解码端基于所述m个已解码网格顶点各自对应的mv值确定第二mvp值，包括：

20.根据权利要求18或19所述的方法，其特征在于，所述第一候选列表中的l个所述第一mvp值的排列顺序与第一距离相关，所述第一距离为所述第一mvp值对应的已解码网格顶点与所述待解码网格顶点之间的距离。

21.根据权利要求20所述的方法，其特征在于，l个所述第一mvp值按照所述第一距离从小到大的顺序排列。

22.根据权利要求18-21中任一项所述的方法，其特征在于，在l+1＜n的情况下，所述解码端基于l个所述第一mvp值以及所述第二mvp值，构建所述第一候选列表，包括：

23.根据权利要求17-22中任一项所述的方法，其特征在于，所述解码端基于与所述p子网格中待解码网格顶点相邻的已解码网格顶点构建所述第一候选列表之后，所述方法还包括：

24.根据权利要求23所述的方法，其特征在于，所述解码端对所述第一候选列表中的所述n个mvp值进行重排序，包括：

25.根据权利要求24所述的方法，其特征在于，重排序后的所述第一候选列表中的所述n个mvp值按照对应的误差和从小到大的顺序排列。

26.根据权利要求16-25中任一项所述的方法，其特征在于，所述目标编码模式为第一编码模式或第二编码模式，所述第一编码模式为直接基于mvp值进行编码的模式，所述第二编码模式为基于mvp值和mvd值进行编码的模式。

27.根据权利要求26所述的方法，其特征在于，在所述目标编码模式为所述第二编码模式的情况下，所述p子网格码流中还包括mvd值，所述方法还包括：

28.一种三维网格帧间预测编码装置，其特征在于，包括：

29.一种三维网格帧间预测解码装置，其特征在于，包括：

30.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-27中任一项所述的方法的步骤。

31.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-27中任一项所述的方法的步骤。

技术总结
本申请公开了一种三维网格帧间预测编码方法、解码方法、装置及电子设备，属于三维动态网格编解码技术领域，本申请实施例的编码方法包括：编码端对待编码三维网格进行第一处理，以得到基础网格；所述编码端对所述基础网格进行子网格划分，以得到P子网格；所述编码端确定所述P子网格中待编码网格顶点的目标编码模式以及第一目标运动向量预测MVP值，所述第一目标MVP值为第一候选列表包括的N个MVP值中的一个，所述第一候选列表中的每个所述MVP值对应一个索引，N为大于1的整数；所述编码端对所述目标编码模式及所述第一目标MVP值对应的索引进行编码，得到包括第一信息的码流，所述第一信息用于表征所述目标编码模式及所述第一目标MVP值对应的索引。

技术研发人员：邹文杰,张伟,杨付正,吕卓逸
受保护的技术使用者：维沃移动通信有限公司
技术研发日：
技术公布日：2025/1/2