基于人工智能的集锦视频的生成方法、装置及电子设备与流程

本公开涉及人工智能，尤其涉及深度学习、自然语言处理、计算机视觉、语音技术、大模型等，尤其涉及一种基于人工智能的集锦视频的生成方法、装置及电子设备。

背景技术：

1、目前，集锦视频的生成方法主要为，针对待处理的视频，采用固定的集锦处理流程对该视频进行集锦处理，以得到集锦视频。其中，固定的集锦处理流程由对象基于传统的视频处理框架构建得到，只能适用于特定场景的视频，例如，体育赛事视频等，难以适用于非特定场景的视频，导致非特定场景的视频的处理效率差。

技术实现思路

1、本公开提供了一种基于人工智能的集锦视频的生成方法、装置及电子设备。

2、根据本公开的一方面，提供了一种基于人工智能的集锦视频的生成方法，所述方法包括：获取视频集锦素材；所述视频集锦素材中包括待处理的原始视频；根据所述视频集锦素材，确定与所述视频集锦素材匹配的集锦处理流程；所述集锦处理流程中包括多个节点，每个节点对应一个素材处理子模型；根据所述视频集锦素材以及所述集锦处理流程中各个节点对应的素材处理子模型，确定所述原始视频中的关键视频片段；根据所述关键视频片段，生成所述原始视频对应的集锦视频。

3、根据本公开的另一方面，提供了一种基于人工智能的集锦视频的生成装置，所述装置包括：第一获取模块，用于获取视频集锦素材；所述视频集锦素材中包括待处理的原始视频；第一确定模块，用于根据所述视频集锦素材，确定与所述视频集锦素材匹配的集锦处理流程；所述集锦处理流程中包括多个节点，每个节点对应一个素材处理子模型；第二确定模块，用于根据所述视频集锦素材以及所述集锦处理流程中各个节点对应的素材处理子模型，确定所述原始视频中的关键视频片段；生成模块，用于根据所述关键视频片段，生成所述原始视频对应的集锦视频。

4、根据本公开的另一方面，提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本公开上述提出的基于人工智能的集锦视频的生成方法。

5、根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使计算机执行本公开上述提出的基于人工智能的集锦视频的生成方法。

6、根据本公开的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现本公开上述提出的基于人工智能的集锦视频的生成方法的步骤。

7、应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

技术特征：

1.一种基于人工智能的集锦视频的生成方法，所述方法包括：

2.根据权利要求1所述的方法，其中，所述根据所述视频集锦素材，确定与所述视频集锦素材匹配的集锦处理流程，包括：

3.根据权利要求2所述的方法，其中，所述根据所述视频集锦素材中的素材类型以及所述场景，确定所述集锦处理流程，包括：

4.根据权利要求3所述的方法，其中，所述视频集锦素材中素材类型的数量为多个；所述素材处理分支的数量为多个；

5.根据权利要求4所述的方法，其中，所述视频集锦素材中还包括以下至少一种：所述原始视频对应的音频、所述原始视频对应的文本；

6.根据权利要求1所述的方法，其中，所述素材处理子模型，根据所述原始视频所属的场景下的样本原始视频、所述样本原始视频对应的样本集锦视频、以及用于素材处理的作为教师模型的大模型训练得到；

7.根据权利要求1所述的方法，其中，所述方法还包括：

8.根据权利要求7所述的方法，其中，所述反馈结果中包括以下至少一种：所述原始视频中的候选视频帧、候选音频、候选文本；

9.一种基于人工智能的集锦视频的生成装置，所述装置包括：

10.根据权利要求9所述的装置，其中，所述第一确定模块包括，第一确定单元和第二确定单元；

11.根据权利要求10所述的装置，其中，所述第二确定单元具体用于，

12.根据权利要求11所述的装置，其中，所述视频集锦素材中素材类型的数量为多个；所述素材处理分支的数量为多个；所述第二确定单元，还用于确定多个所述素材处理分支之间的用于素材处理子操作的节点；

13.根据权利要求12所述的装置，其中，所述视频集锦素材中还包括以下至少一种：所述原始视频对应的音频、所述原始视频对应的文本；

14.根据权利要求9所述的装置，其中，所述素材处理子模型，根据所述原始视频所属的场景下的样本原始视频、所述样本原始视频对应的样本集锦视频、以及用于素材处理的作为教师模型的大模型训练得到；

15.根据权利要求9所述的装置，其中，所述装置还包括：第二获取模块和调整处理模块；

16.根据权利要求15所述的装置，其中，所述反馈结果中包括以下至少一种：所述原始视频中的候选视频帧、候选音频、候选文本；所述装置还包括：第三确定模块和忽略处理模块；

17.一种电子设备，包括：

18.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1至8中任一项所述的方法。

19.一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1至8中任一项所述的方法。

技术总结
本公开提供了基于人工智能的集锦视频的生成方法、装置及电子设备，涉及人工智能技术领域，尤其涉及深度学习、自然语言处理、计算机视觉、语音技术、大模型等技术领域。具体实现方案为：获取视频集锦素材，其中包括待处理的原始视频；确定与视频集锦素材匹配的集锦处理流程；集锦处理流程中包括多个节点，每个节点对应一个素材处理子模型；根据视频集锦素材以及集锦处理流程中各个节点对应的素材处理子模型，确定原始视频中的关键视频片段；进而生成原始视频对应的集锦视频；其中，根据视频集锦素材，确定与视频集锦素材匹配的集锦处理流程，从而避免采用仅适用于特定场景的集锦处理流程进行处理，从而提高确定得到的集锦视频的准确度。

技术研发人员：李明路,柯于刚,邢怀飞,曹菲菲
受保护的技术使用者：北京百度网讯科技有限公司
技术研发日：
技术公布日：2024/9/26