换脸视频的生成方法、装置、计算机设备及可读存储介质与流程

文档序号:31790729发布日期:2022-10-14 14:55阅读:来源:国知局

技术特征:
1.一种换脸视频的生成方法,其特征在于,包括:获取待换脸视频,将所述待换脸视频拆分为多个待换脸图像帧;将所述多个待换脸图像帧输入至换脸模型,获取所述换脸模型输出的多个已换脸图像帧,所述换脸模型基于用户的人脸素材训练得到且用于将输入的待换脸图像帧中的人脸替换为所述人脸素材;对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理,以及对缩小后的每个已换脸图像帧进行超分重建,得到多个待输出图像帧;对所述多个待输出图像帧进行视频合成处理,得到换脸视频。2.根据权利要求1所述的方法,其特征在于,所述获取待换脸视频,将所述待换脸视频拆分为多个待换脸图像帧之后,所述方法还包括:读取所述多个待换脸图像帧中每个待换脸图像帧对应的时间点;按照时间点在时间轴上的先后顺序,对所述多个待换脸图像帧进行排序;对排序后的所述多个待换脸图像帧进行编号处理,为所述多个待换脸图像帧添加图片编号,以及将编号后的所述多个待换脸图像帧进行存储。3.根据权利要求1所述的方法,其特征在于,所述对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理,包括:获取预设下采样倍数,对所述多个已换脸图像帧中每个已换脸图像帧执行以下处理:按照所述预设下采样倍数对所述已换脸图像帧进行下采样处理,将所述已换脸图像帧的图片尺寸缩小至所述预设下采样倍数指示的目标尺寸,得到缩小后的所述已换脸图像帧;将完成缩小处理后的所述多个已换脸图像帧进行缓存。4.根据权利要求1所述的方法,其特征在于,所述对缩小后的每个已换脸图像帧进行超分重建,得到多个待输出图像帧,包括:获取预设上采样倍数,对所述缩小后的每个已换脸图像帧进行以下处理:获取超分重建模型,将缩小后的已换脸图像帧输入至所述超分重建模型,利用所述超分重建模型对所述缩小后的已换脸图像帧进行上采样处理,得到图片尺寸与所述预设上采样倍数匹配的图像帧作为待输出图像帧;将得到的所述多个待输出图片进行存储。5.根据权利要求1所述的方法,其特征在于,所述对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理,以及对缩小后的每个已换脸图像帧进行超分重建,得到多个待输出图像帧之后,所述方法还包括:对于所述多个待输出图像帧中每个待输出图像帧,读取所述待输出图像帧中的多个像素点,以及对所述多个像素点中每个像素点执行以下处理:按照预设权重,构建所述像素点的权重矩阵,采用所述权重矩阵对所述像素点的多个相邻像素点的像素值进行权重计算,得到多个处理后的像素值,以及计算所述多个处理后的像素值的和值作为所述像素点的高斯模糊值;获取所述多个像素点对应的多个高斯模糊值,采用所述多个高斯模糊值进行图片重构,得到完成高斯模糊处理的所述待输出图像帧;将高斯模糊处理后的所述多个待输出图像帧进行视频合成处理,以及将视频合成处理得到的视频作为所述换脸视频。
6.根据权利要求1所述的方法,其特征在于,所述对所述多个待输出图像帧进行视频合成处理,得到换脸视频,包括:对所述待换脸视频进行音频提取,得到待添加音频资源;按照所述多个待输出图像帧中每个待输出图像帧对应的图片编号,将所述多个待输出图像帧合成为初始视频;向所述初始视频添加所述待添加音频资源,得到所述换脸视频。7.根据权利要求1所述的方法,其特征在于,所述获取待换脸视频,将所述待换脸视频拆分为多个待换脸图像帧之前,所述方法还包括:获取所述用户上传的人脸素材,采用神经网络算法生成所述人脸素材的像素点分布;以所述像素点分布为基础进行模型训练,得到所述换脸模型。8.一种换脸视频的生成装置,其特征在于,包括:拆分模块,用于获取待换脸视频,将所述待换脸视频拆分为多个待换脸图像帧;输入模块,用于将所述多个待换脸图像帧输入至换脸模型,获取所述换脸模型输出的多个已换脸图像帧,所述换脸模型基于用户的人脸素材训练得到且用于将输入的待换脸图像帧中的人脸替换为所述人脸素材;处理模块,用于对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理,以及对缩小后的每个已换脸图像帧进行超分重建,得到多个待输出图像帧;合成模块,用于对所述多个待输出图像帧进行视频合成处理,得到换脸视频。9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。10.一种可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。

技术总结
本申请公开了一种换脸视频的生成方法、装置、计算机设备及可读存储介质,涉及计算机视觉技术领域,将缩小处理、超分重建处理结合应用,提高图像的清晰度,解决了视频图像内清晰度不一致、面部模糊的问题,对换脸视频中产生的面部抖动起到缓解的作用,提升生成换脸视频的成功率。所述方法包括:获取待换脸视频,将待换脸视频拆分为多个待换脸图像帧;将多个待换脸图像帧输入至换脸模型,获取换脸模型输出的多个已换脸图像帧;对多个已换脸图像帧中每个已换脸图像帧进行缩小处理,以及对缩小后的每个已换脸图像帧进行超分重建,得到多个待输出图像帧;对多个待输出图像帧进行视频合成处理,得到换脸视频。得到换脸视频。得到换脸视频。


技术研发人员:王月宝 黄明星 李银锋 刘海伦 董婉 吴志超 黄平 沈鹏
受保护的技术使用者:北京健康之家科技有限公司
技术研发日:2022.05.26
技术公布日:2022/10/13
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1