数据分析场景的生成方法、装置、设备及存储介质与流程

文档序号:30302055发布日期:2022-06-05 00:48阅读:来源:国知局

技术特征:
1.一种数据分析场景的生成方法,其特征在于,包括:接收待处理的场景需求文件,使用预训练语言模型对所述场景需求文件进行语义分析和数据提取处理,得到与所述场景需求文件对应的数据分析场景信息;基于所述数据分析场景信息,从数据分析场景池中获取与所述场景需求文件匹配的候选场景信息集合;根据所述候选场景信息集合中的候选场景信息,组装与所述场景需求文件对应的数据分析场景的数据查询语句以及前端组件代码。2.根据权利要求1所述的方法,其特征在于,在所述接收待处理的场景需求文件,使用预训练语言模型对所述场景需求文件进行语义分析和数据提取处理,得到与所述场景需求文件对应的数据分析场景信息之前,还包括:从历史需求文件中提取不同数据主题域下的映射关系数据;对所述映射关系数据进行数据清洗和数据抽取操作,并对操作后的映射关系数据进行歧义规避处理;将处理后的映射关系数据作为训练数据,对基于多头注意力机制的预训练语言模型进行模型训练。3.根据权利要求2所述的方法,其特征在于,所述不同数据主题域下的映射关系数据,包括:数据与数据字典描述的映射关系数据;数据分析场景与业务规则的映射关系数据;数据分析场景与数据查询语句的映射关系数据;数据分析场景下的数据查询语句与可视化方式的映射关系数据。4.根据权利要求3所述的方法,其特征在于,所述对所述映射关系数据进行数据清洗和数据抽取操作,并对操作后的映射关系数据进行歧义规避处理,包括:对所述数据分析场景与业务规则的映射关系数据以及所述数据分析场景与数据查询语句的映射关系数据,进行数据清洗和数据抽取操作,得到场景描述信息;将所述数据查询语句中的字段数据字典信息与对应的场景描述信息组合,并将组合生成的二阶特征与所有映射关系数据结合。5.根据权利要求1所述的方法,其特征在于,所述基于所述数据分析场景信息,从数据分析场景池中获取与所述场景需求文件匹配的候选场景信息集合,包括:从所有历史需求文件中,找到与所述场景需求文件拥有相同要素的目标历史需求文件;对于所有目标历史需求文件,从数据分析场景池中查询使用所述目标历史需求文件中的数据进行数据分析的数据分析场景,并加入候选场景信息集合。6.根据权利要求5所述的方法,其特征在于,在所述基于所述数据分析场景信息,从数据分析场景池中获取与所述场景需求文件匹配的候选场景信息集合之后,还包括:在所述候选场景信息集合中,筛选出最大频繁项集小于预设阈值的目标数据查询语句;将所述目标数据查询语句对应的候选场景信息从所述候选场景信息集合中删除。7.根据权利要求1所述的方法,其特征在于,所述根据所述候选场景信息集合中的候选
场景信息,组装与所述场景需求文件对应的数据分析场景的数据查询语句以及前端组件代码,包括:根据所述候选场景信息集合中的字段、描述信息、表名,组装与所述场景需求文件对应的数据查询语句;将所述候选场景信息集合中的字段和表名,发送至前端组件代码作为参数;计算与所述候选场景信息集合中的描述信息的相似度大于第一阈值的历史数据分析场景,将所述历史数据分析场景的使用频次最多的可视化方式发送至前端组件代码作为参数,以进行页面渲染。8.一种数据分析场景的生成装置,其特征在于,包括:接收模块,用于执行接收待处理的场景需求文件,使用预训练语言模型对所述场景需求文件进行语义分析和数据提取处理,得到与所述场景需求文件对应的数据分析场景信息;获取模块,用于执行基于所述数据分析场景信息,从数据分析场景池中获取与所述场景需求文件匹配的候选场景信息集合;组装模块,用于执行根据所述候选场景信息集合中的候选场景信息,组装与所述场景需求文件对应的数据分析场景的数据查询语句以及前端组件代码。9.一种电子设备,其特征在于,所述电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7中任一项所述的数据分析场景的生成方法。10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的数据分析场景的生成方法。

技术总结
本发明公开了一种数据分析场景的生成方法、装置、设备及存储介质。该方法包括:接收待处理的场景需求文件,使用预训练语言模型对所述场景需求文件进行语义分析和数据提取处理,得到与所述场景需求文件对应的数据分析场景信息;基于所述数据分析场景信息,从数据分析场景池中获取与所述场景需求文件匹配的候选场景信息集合;根据所述候选场景信息集合中的候选场景信息,组装与所述场景需求文件对应的数据分析场景的数据查询语句以及前端组件代码。本发明的技术方案,取到了根据场景需求文件自动创建适应的数据分析场景以及前端代码框架的有益效果。框架的有益效果。框架的有益效果。


技术研发人员:李田雨
受保护的技术使用者:中国农业银行股份有限公司
技术研发日:2022.03.04
技术公布日:2022/6/4
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1