本发明涉及数据采集共享,具体为一种基于政府数据采集的系统及方法。
背景技术:
1、随着国家大数据战略的实施,数字中国建设步伐的加快,数字政府已成为落实国家网络强国、数字中国、智慧社会等战略行动新的着力点,而构建数据资源体系则是建设数字政府的必由之路,推动数据资源整合利用则是实现智慧社会的内在需求。
2、现有技术中,大数据发展日新月异,我们应该审时度势、精心谋划、超前布局、力争主动,深入了解大数据发展现状和趋势及其对经济社会发展的影响,分析我国大数据发展取得的成绩和存在的问题,推动实施国家大数据战略,加快完善数字基础设施,推进数据资源整合和开放共享,保障数据安全,加快建设数字中国,更好服务我国经济社会发展和人民生活改善。
3、但是,基层政府部门数据采集的效率低,加重了基层工作人员的负担,数据的安全性难以保障。
技术实现思路
1、本发明的目的在于提供一种基于政府数据采集的系统及方法,以解决上述背景技术中提出的问题。
2、为实现上述目的,本发明提供如下技术方案:一种基于政府数据采集的系统,所述系统由数据源配置管理模块、数据模型配置管理模块、采集需求管理模块、采集模板管理模块、采集任务发布管理模块、采集任务填报管理模块、采集任务审核管理模块以及采集任务监控模块构成;
3、数据源配置管理模块,针对每个系统,提供数据源的管理功能;
4、数据模型置管理模块,提供对数据模型的配置;
5、数据采集需求管理模块,包括采集需求提交、采集需求审核、采集需求处理结果确认;
6、采集模板管理模块,基于文件的数据采集系统需要提供标准化模板管理功能;
7、采集任务发布管理模块,数据采集创建管理是按照实际工作需要,使用数据统一采集工具创建数据采集任务;
8、采集任务填报管理模块,利用采集端实现基层工作人员的减负;
9、采集任务监控模块,针对数据采集任务,采集任务监控对每项任务进度情况进行分析统计。
10、优选的,针对每个系统,提供数据源的管理功能,包括配置系统名称、数据库类型、数据库ip地址、实例名称、用户名、密码信息。
11、优选的,数据模型置管理模块提供对数据模型的配置,包括模型名称,对应数据表的名称及描述等信息,此外还提供数据模型字段配置功能。
12、优选的,采集需求提交,各级根据工作需要向本级数据管理机构提出数据采集需求,明确采集需求名称、采集内容、采集理由、采集时间;
13、采集需求审核,各级数据管理机构汇总、审核本级数据采集需求,根据不同的数据来源运用合适的数据采集工具进行采集;
14、采集需求处理结果确认,数据管理机构审核并采集完的数据,提出需求部门需要对处理结果进行确认,已完成整个数据采集需求的闭环操作。
15、优选的,基于文件的数据采集系统需要提供标准化模板管理功能,包括模板上传、模板下载、分类管理功能,文件模板提高文件数据采集的效率,简化数据处理的难度,从而提高数据治理的效率。
16、优选的,数据采集创建管理是按照实际工作需要,使用数据统一采集工具创建数据采集任务;各级根据工作需要向所需数据管理对象提出数据采集需求,明确采集需求名称、采集内容、采集理由、采集时间。
17、优选的,采集任务监控针对数据采集任务,采集任务监控对每项任务进度情况进行分析统计,实现对采集时间、采集时长、采集数据量、采集结果采集过程的可视化展示。
18、一种基于政府数据采集方法,所述方法包括以下步骤:
19、首先由需求部门根据工作需要向本级数据管理机构提出数据采集需求;
20、发起申请后由本级数据管理机构进行审核,审核通过后根据需求部门的需求发起采集任务;
21、基层部门根据采集任务填报数据,完成后提交至上级部门进行审核,审核结束后归档并将数据返回至数据需求部门。
22、优选的,提出数据采集需求时,明确数据来源、采集内容、采集用途、采集时间。
23、与现有技术相比,本发明的有益效果是:
24、本发明提出的基于政府数据采集的系统及方法,通过使用数据采集工具,可个性化设置数据采集表格字段,一键下发采集任务并可将任务进行二次分发,同时依据库表中已有数据实现数据的自动填充和减填写。有助于以推动基层社会治理数字化转型、减轻基层人员工作负担,开启基层工作智慧新模式。促进大数据向基层延伸,实现数据上下流动,为基层提供数据赋能工具为基层减负,构建数据共建、共治、共享体系,全面支撑基层工作数据化,推动基层社会治理数字化转型。
1.一种基于政府数据采集的系统,其特征在于:所述系统由数据源配置管理模块、数据模型配置管理模块、采集需求管理模块、采集模板管理模块、采集任务发布管理模块、采集任务填报管理模块、采集任务审核管理模块以及采集任务监控模块构成;
2.根据权利要求1所述的一种基于政府数据采集的系统,其特征在于:数据源配置管理模块,针对每个系统,提供数据源的管理功能,包括配置系统名称、数据库类型、数据库ip地址、实例名称、用户名、密码信息。
3.根据权利要求1所述的一种基于政府数据采集的系统,其特征在于:数据模型置管理模块提供对数据模型的配置,包括模型名称,对应数据表的名称及描述等信息,此外还提供数据模型字段配置功能。
4.根据权利要求1所述的一种基于政府数据采集的系统,其特征在于:采集需求提交,各级根据工作需要向本级数据管理机构提出数据采集需求,明确采集需求名称、采集内容、采集理由、采集时间;
5.根据权利要求1所述的一种基于政府数据采集的系统,其特征在于:基于文件的数据采集系统需要提供标准化模板管理功能,包括模板上传、模板下载、分类管理功能,文件模板提高文件数据采集的效率,简化数据处理的难度,从而提高数据治理的效率。
6.根据权利要求1所述的一种基于政府数据采集的系统,其特征在于:数据采集创建管理是按照实际工作需要,使用数据统一采集工具创建数据采集任务;各级根据工作需要向所需数据管理对象提出数据采集需求,明确采集需求名称、采集内容、采集理由、采集时间。
7.根据权利要求1所述的一种基于政府数据采集的系统,其特征在于:采集任务监控针对数据采集任务,采集任务监控对每项任务进度情况进行分析统计,实现对采集时间、采集时长、采集数据量、采集结果采集过程的可视化展示。
8.一种如上述权利要求1-7任意一项所述的基于政府数据采集的系统用的基于政府数据采集方法,其特征在于:所述方法包括以下步骤:
9.根据权利要求7所述的一种基于政府数据采集的方法,其特征在于:提出数据采集需求时,明确数据来源、采集内容、采集用途、采集时间。