用于生成视频的方法、装置、设备及计算机可读介质与流程

本申请涉及计算机视觉领域，尤其涉及一种用于生成视频的方法、装置、电子设备及计算机可读介质。

背景技术：

1、随着互联网技术的发展，人们通过互联网，在线分享视频或者基于视频的方式与其他用户进行互动。例如，人们可以通过直播应用(application，app)、在线视频app等各视频类应用来获取上述服务。

2、为了丰富视频的内容、提升视频的质量，一些平台允许用户通过视频融合的方式，在原有视频的基础上增加其他内容，以形成内容更为丰富的融合视频进行分析、互动。由此，如何为用户提供更好的视频融合服务，丰富用户的互动体验，是值得关注和迫切需求的。

技术实现思路

1、本申请的多个方面提供一种用于生成视频的方法、设备及计算机可读存储介质，能够利用与图像序列相关联的音频的音频轨道作为基准，来实现不同的图像序列的融合，这样的方式可以更精准地对齐图像序列，提升融合质量。

2、本申请的一方面，提供一种用于生成视频的方法，包括：获取第一图像序列、第二图像序列以及与第一图像序列相关联的音频；利用音频的音频轨道对齐第一图像序列和第二图像序列；融合对齐后的第一图像序列和对齐后的第二图像序列，生成融合图像序列；以及基于融合图像序列和音频，生成融合视频。

3、本申请的另一方面，提供用于生成视频的装置，包括：获取模块，被配置为获取第一图像序列、第二图像序列以及与第一图像序列相关联的音频；对齐模块，被配置为利用音频的音频轨道对齐第一图像序列和第二图像序列；融合模块，被配置为融合对齐后的第一图像序列和对齐后的第二图像序列，生成融合图像序列；以及生成模块，被配置为基于融合图像序列和音频，生成融合视频。

4、本申请的另一方面，提供一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行上述的用于生成视频的方法。

5、本申请的另一方面，提供一种计算机可读存储介质，其上存储有计算机程序指令，计算机程序指令可被处理器执行以实现上述的用于生成视频的方法。

6、本申请实施例提供的方案中，获取第一图像序列、第二图像序列以及与第一图像序列相关联的音频；利用音频的音频轨道对齐第一图像序列和第二图像序列；融合对齐后的第一图像序列和对齐后的第二图像序列，生成融合图像序列；以及基于融合图像序列和音频，生成融合视频。由此，能够利用与图像序列相关联的音频的音频轨道作为基准，来实现不同的图像序列的融合，这样的方式可以更精准地对齐图像序列，提升融合质量。

技术特征：

1.一种用于生成视频的方法，包括：

2.根据权利要求1所述的方法，其中生成所述融合图像序列，包括：

3.根据权利要求1所述的方法，其中将所述图像纹理序列添加至未被用于生成所述图像纹理序列的另一项，包括：

4.根据权利要求3所述的方法，其中所述添加位置包括以下至少一项：位于所述被添加图像内部的第一区域、位于所述被添加图像内部的第二区域和位于所述被添加图像外部的第三区域，其中，所述第一区域不包括所述被添加图像中的实体对象，所述第二区域包括所述被添加图像中的至少一个实体对象。

5.根据权利要求1所述的方法，还包括：

6.根据权利要求1所述的方法，还包括：

7.根据权利要求1所述的方法，其中所述第二图像序列由用户提供，所述第二图像序列中的第二图像至少包括所述用户的人脸对象。

8.一种用于生成视频的装置，包括：

9.一种电子设备，所述电子设备包括：

10.一种计算机可读介质，其上存储有计算机程序指令，所述计算机程序指令可被处理器执行以实现如权利要求1至7中任一项所述的方法。

技术总结
本申请提供了一种用于生成视频的方法、装置、设备及计算机可读介质，该申请获取第一图像序列、第二图像序列以及与第一图像序列相关联的音频；利用音频的音频轨道对齐第一图像序列和第二图像序列；融合对齐后的第一图像序列和对齐后的第二图像序列，生成融合图像序列；以及基于融合图像序列和音频，生成融合视频。由此，能够利用与图像序列相关联的音频的音频轨道作为基准，来实现不同的图像序列的融合，这样的方式可以更精准地对齐图像序列，提升融合质量。

技术研发人员：徐进
受保护的技术使用者：上海哔哩哔哩科技有限公司
技术研发日：
技术公布日：2024/1/16