大数据价值发现与应用创新平台系统

文档序号:24731983发布日期:2021-04-20 14:52阅读:来源:国知局

技术特征:
1.一种大数据价值发现与应用创新平台系统,其特征在于:包括协作式业务建模模块、数据管理模块、批量任务调度模块、用户管理模块、可视化用户界面模块、活动和通知模块、标签和搜索模块;所述协作式业务建模模块通过将业务建模所需的数据读写、数据预处理、特征工程、模型训练、模型评估和模型应用环节,统一封装为形式一致的可视化算子,以可视化算子的形式提供机器学习算法和数据读写、数据处理工具箱,用户在浏览器上,使用可视化组件和拖拉拽操作来拼装crisp

dm工作流,即可完成海量数据探索、业务建模和模型部署的数据挖掘过程,从而发现数据价值;所述数据管理模块用于供用户通过本地文件系统、oracle、mysql数据库上传数据;所述批量任务调度模块用于供用户将多个工作流设置为顺序执行的批量作业列表,然后一键触发批量任务执行,或让任务在指定时间范围内自动按某一周期运行,任务执行完毕,用户在邮件和通知栏收到执行报告,执行报告包含每个工作流作业的完成状态和完成时间信息;所述用户管理模块用于供管理员对平台用户进行用户管理,所述用户管理包括license管理、创建平台用户、修改管理员及平台用户资料、删除平台用户;所述可视化用户界面模块用于实现模块增减和模块顺序调整,通过拖拽和连线的方式构建业务建模流程;所述活动和通知模块用于实现通知、标注及评论的功能;所述标签和搜索模块用于实现创建标签及搜索资源的功能。2.根据权利要求1所述的大数据价值发现与应用创新平台系统,其特征在于:所述数据管理模块用于对工作流运行时得到的数据进行保存,所述数据通过hdfs文件或hive表的形式持久化保存在平台的存储子系统中,平台向用户呈现hdfs和hive数据视图空间,在hdfs空间下可创建或删除文件夹。3.根据权利要求1所述的大数据价值发现与应用创新平台系统,其特征在于:所述可视化用户界面模块还具有如下功能:在模型逻辑建立好以后,可以将建模逻辑以工作流的形式保存在平台持久化存储系统中,并随时手动或自动运行自己或协作伙伴的工作流以观察建模效果,平台提供了文本、表格、直方图、环图、折线图、roc曲线图、2d/3d词云、树、森林视图,以满足建模过程中不同阶段、不同输出类型数据的预览需求。4.根据权利要求1所述的大数据价值发现与应用创新平台系统,其特征在于:所述活动和通知模块具体功能如下:与用户相关的活动都会得到记录并呈现给用户自己和协作伙伴,协作伙伴将自己执行单个或批量建模工作流任务的完成状态通过通知栏或邮件自动通知给协作伙伴,并实现协作伙伴之间对自己和别人的活动进行标注、评论。5.根据权利要求1所述的大数据价值发现与应用创新平台系统,其特征在于:所述标签和搜索模块具体实现功能如下:用户为平台内的各种实体资源如数据集、工作空间和工作流等创建标签,方便归类和定位,全局搜索功能则让用户一键搜索平台内的各种实体资源。
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1