口型动画处理方法、装置及存储介质与流程

文档序号:35392504发布日期:2023-09-09 14:45阅读:来源:国知局

技术特征:

1.一种口型动画处理方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的方法,其特征在于,所述根据所述音频强度在所述多个口型图像帧中确定多个目标图像帧区间,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述多个目标音频帧,在所述多个口型图像帧中确定多个目标图像帧区间,包括:

4.根据权利要求3所述的方法,其特征在于,所述目标视素的种类有多个;所述在所述多个口型图像帧中,确定与所述多个目标音频帧对应的多个目标图像帧,包括:

5.根据权利要求4所述的方法,其特征在于,所述根据所述多个目标图像帧的分布情况,确定多个目标图像帧区间,包括:

6.根据权利要求5所述的方法,其特征在于,所述对不同种类的所述目标视素对应的所述候选图像帧区间之间,进行基于时间维度的区间去重,包括:

7.根据权利要求1所述的方法,其特征在于,所述根据所述冲突视素在所述多个目标图像帧区间中确定视素冲突帧区间,包括:

8.根据权利要求1所述的方法,其特征在于,所述根据所述视素权重曲线计算得到权重抑制曲线,包括:

9.根据权利要求8所述的方法,其特征在于,所述根据所述视素权重曲线和所述权重均值,计算得到权重抑制曲线,包括:

10.根据权利要求9所述的方法,其特征在于,所述对所述初始抑制曲线进行基于幅值的归一化处理,得到权重抑制曲线,包括:

11.根据权利要求1所述的方法,其特征在于,所述根据所述权重抑制曲线和所述视素权重曲线,对所述视素冲突帧区间的图像内容进行调整,包括:

12.一种口型动画处理装置,其特征在于,包括:

13.一种口型动画处理装置,其特征在于,包括:

14.一种计算机可读存储介质,其特征在于,其中存储有处理器可执行的计算机程序,所述处理器可执行的计算机程序被处理器执行时用于实现如权利要求1至11任意一项所述的口型动画处理方法。


技术总结
本申请公开了一种口型动画处理方法、装置及存储介质,先在口型动画中确定与目标音素对应的多个候选音频帧以及与目标视素对应的多个口型图像帧,再获取各个候选音频帧中目标音素的音频强度,并根据音频强度在多个口型图像帧中确定多个目标图像帧区间,然后确定会与目标视素产生冲突的冲突视素,并根据冲突视素在多个目标图像帧区间中确定视素冲突帧区间,接着获取视素冲突帧区间的视素权重曲线,根据视素权重曲线计算得到权重抑制曲线,并根据权重抑制曲线和视素权重曲线对视素冲突帧区间的图像内容进行调整。本申请实施例能够提高口型的准确性,从而能够提高口型与发音的匹配度,改善观众的观看体验。

技术研发人员:陈欢,陈长海,陈伟杰,童妍钰,陈宇
受保护的技术使用者:腾讯科技(深圳)有限公司
技术研发日:
技术公布日:2024/1/15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1