一种视频融合的处理方法、装置及存储介质与流程

本发明涉及图像处理，具体而言，涉及一种视频融合的处理方法、装置及存储介质。

背景技术：

1、随着社会进入互联网时代，越来越多的视频网站和自媒体的逐渐兴起，用户可以实现与其他用户的视频直播网络互动。在虚拟现实直播互动中涉及多方对象的多个视频图像，为了保证视频图像同步性，需要进行视频图像融合，进而保证互动效果。视频融合技术指将一个或多个由视频采集设备采集的关于某场景或模型的图像序列视频与一个与之相关的虚拟场景加以融合，以生成一个新的关于此场景的虚拟场景或模型。

2、现有的视频融合技术一般是通过固定的配置参数进行多帧图像的融合，灵活性不高，且在数据量庞大的情况下容易出现漏帧失真的问题，导致可能出现视频延迟或者卡顿的情况，无法实现精准的视频融合，无法很好的满足用户的直播互动需求。

技术实现思路

1、为了克服上述问题或者至少部分地解决上述问题，本发明提供一种视频融合的处理方法、装置及存储介质，可对各个不同对象的视频图像进行高效精准的融合，进而得到视觉效果更好的视频图像，实现更好的虚拟交互效果。

2、为了解决上述技术问题，本发明采用的技术方案为：

3、第一方面，本发明提供一种视频融合的处理方法，包括以下步骤：

4、录入并根据目标场景下的多个终端信息构建初始融合架构；

5、将多个终端信息导入至预置的协议特征分析模型中，生成分析信息；

6、根据分析信息确定协议解析规则和格式转换规则，并对初始融合架构进行调整，以构建目标融合架构；

7、基于目标融合架构同步抓取各个终端的视频数据，并基于协议解析规则对各个终端的视频数据进行解码，并提取对应的编辑对象；

8、基于目标融合架构对各个编辑对象按照格式转换规则进行统一转换处理，以得到对应的多个待融合视频图像；

9、获取并根据目标场景融合需求对多个待融合视频图像进行融合处理，以得到目标融合视频。

10、本方法结合目标场景下的多个终端对象构建针对性的初始融合架构，为后续提供有效支撑，为了保证对多个视频对象进行高效精准的融合，基于预置的协议特征分析模型，对各个终端协议进行分析，进而确定对应的协议解析规则和格式转换规则，对初始融合架构进行优化调整，以得到一个可以进行高效协议解析和格式转换的目标融合架构；基于目标融合架构实时同步抓取各个终端的视频数据，然后进行视频解析，基于解析后的视频数据，提取对应的多个编辑对象，为了保证后续融合效果，对编辑对象进行格式转化，转化为统一格式的视频图像；结合不同的目标场景融合需求进行视频融合处理，以得到一个效果好的目标融合视频。

11、基于第一方面，进一步地，上述根据目标场景下的多个终端信息构建初始融合架构的方法包括以下步骤：

12、提取并根据目标场景下的多个终端信息中的各个终端id设定抓取节点；

13、提取并根据目标场景下的多个终端信息中的承载数据设定管理节点；

14、基于抓取节点和管理节点构建初始融合架构。

15、基于第一方面，进一步地，上述根据目标场景融合需求对多个待融合视频图像进行融合处理的方法包括以下步骤：

16、提取并根据目标场景融合需求中的特征数据确定融合参数配置信息；

17、提取并根据目标场景融合需求中的场景需求信息在预置的融合模板库中提取对应的融合模板；

18、基于融合参数配置信息和融合模板对多个待融合视频图像进行融合处理。

19、基于第一方面，进一步地，该视频融合的处理方法还包括以下步骤：

20、对抓取的各个终端的视频数据进行预处理，以得到更优视频。

21、第二方面，本发明提供一种视频融合的处理装置包括初始架构构建模块、协议分析模块、架构优化调整模块、解码模块、转化模块以及融合模块，其中：

22、初始架构构建模块，用于录入并根据目标场景下的多个终端信息构建初始融合架构；

23、协议分析模块，用于将多个终端信息导入至预置的协议特征分析模型中，生成分析信息；

24、架构优化调整模块，用于根据分析信息确定协议解析规则和格式转换规则，并对初始融合架构进行调整，以构建目标融合架构；

25、解码模块，用于基于目标融合架构同步抓取各个终端的视频数据，并基于协议解析规则对各个终端的视频数据进行解码，并提取对应的编辑对象；

26、转化模块，用于基于目标融合架构对各个编辑对象按照格式转换规则进行统一转换处理，以得到对应的多个待融合视频图像；

27、融合模块，用于获取并根据目标场景融合需求对多个待融合视频图像进行融合处理，以得到目标融合视频。

28、本系统通过初始架构构建模块、协议分析模块、架构优化调整模块、解码模块、转化模块以及融合模块等多个模块的配合，对各个不同对象的视频图像进行高效精准的融合，进而得到视觉效果更好的视频图像，实现更好的虚拟交互效果。本系统结合目标场景下的多个终端对象构建针对性的初始融合架构，为后续提供有效支撑，为了保证对多个视频对象进行高效精准的融合，基于预置的协议特征分析模型，对各个终端协议进行分析，进而确定对应的协议解析规则和格式转换规则，对初始融合架构进行优化调整，以得到一个可以进行高效协议解析和格式转换的目标融合架构；基于目标融合架构实时同步抓取各个终端的视频数据，然后进行视频解析，基于解析后的视频数据，提取对应的多个编辑对象，为了保证后续融合效果，对编辑对象进行格式转化，转化为统一格式的视频图像；结合不同的目标场景融合需求进行视频融合处理，以得到一个效果好的目标融合视频。

29、基于第二方面，进一步地，上述初始架构构建模块包括抓取节点设定单元、管理节点设定单元以及架构构建单元，其中：

30、抓取节点设定单元，用于提取并根据目标场景下的多个终端信息中的各个终端id设定抓取节点；

31、管理节点设定单元，用于提取并根据目标场景下的多个终端信息中的承载数据设定管理节点；

32、架构构建单元，用于基于抓取节点和管理节点构建初始融合架构。

33、基于第二方面，进一步地，上述融合模块包括参数配置确定单元、模板提取单元以及视频图像融合单元，其中：

34、参数配置确定单元，用于提取并根据目标场景融合需求中的特征数据确定融合参数配置信息；

35、模板提取单元，用于提取并根据目标场景融合需求中的场景需求信息在预置的融合模板库中提取对应的融合模板；

36、视频图像融合单元，用于基于融合参数配置信息和融合模板对多个待融合视频图像进行融合处理。

37、基于第二方面，进一步地，该视频融合的处理装置还包括预处理模块，用于对抓取的各个终端的视频数据进行预处理，以得到更优视频。

38、第三方面，本技术提供一种电子设备，其包括存储器，用于存储一个或多个程序；处理器。当一个或多个程序被处理器执行时，实现如上述第一方面中任一项的方法。

39、第四方面，本技术提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述第一方面中任一项的方法。

40、本发明至少具有如下优点或有益效果：

41、本发明提供一种视频融合的处理方法、装置及存储介质，结合目标场景下的多个终端对象构建针对性的初始融合架构，为后续提供有效支撑，为了保证对多个视频对象进行高效精准的融合，基于预置的协议特征分析模型，对各个终端协议进行分析，进而确定对应的协议解析规则和格式转换规则，对初始融合架构进行优化调整，以得到一个可以进行高效协议解析和格式转换的目标融合架构；基于目标融合架构实时同步抓取各个终端的视频数据，然后进行视频解析，基于解析后的视频数据，提取对应的多个编辑对象，为了保证后续融合效果，对编辑对象进行格式转化，转化为统一格式的视频图像；结合不同的目标场景融合需求进行视频融合处理，以得到一个效果好的目标融合视频。