一种基于大数据处理的政务数据服务系统的制作方法

文档序号:31899755发布日期:2022-10-22 03:38阅读:64来源:国知局
一种基于大数据处理的政务数据服务系统的制作方法

1.本发明涉及政务信息处理技术领域,尤其涉及一种基于大数据处理的政务数据服务系统。


背景技术:

2.随着社会的发展,各行各业的不断发展,政务信息也实现了爆发性增加。目前对政务信息缺乏数据一致性查询检索功能,导致对政务信息查询过程繁琐,影响查询效率。
3.而且目前对政务信息的查询仅仅是通过搜索用户想要的关键词进行检索,无法进行有效的扩展。话务员或者访问者只能用当前关键词去查找信息,造成查找到的信息较为单一,影响话务员或者访问者对政务信息的全方位了解。


技术实现要素:

4.本发明提供一种基于大数据处理的政务数据服务系统,平台实现对政务信息的处理,方便数据查询,提升政务信息查询的方便性。
5.基于大数据处理的政务数据服务系统包括:政务信息处理平台、数据库和多个政务访问终端;多个政务访问终端分别与政务信息处理平台通信连接,政务信息处理平台用于获取各业务部门的政务信息以及接收各个数据源推送的政务信息,并对政务信息进行归集,储存到数据库中;政务信息处理平台接收的政务访问终端发送的政务信息查询请求,确定政务信息查询信息;从预设的政务映射表中,查找匹配的政务信息并以预设显示框进行展示;政务信息处理平台将平台的运行过程以及数据处理过程生成相应的日志文件,并保存至数据库,提供包括数据归集日志查询、服务调用日志查询、服务器运行状态查询、数据库状态查询界面,通过相应的日志信息进行查询;采用元数据对数据库中的政务信息进行描述,形成统一格式的目录内容,通过对目录内容的配置,形成数据信息目录库;用于基于数据信息目录库对数据库中的政务信息进行查询,并进行操作。
6.进一步需要说明的是,政务信息处理平台还用于获取初始政务信息文件;对初始政务信息文件中各初始政务信息进行拆分组合处理,生成包含所设定各政务信息及相关政务分项信息的政务信息匹配信息表。
7.进一步需要说明的是,政务信息处理平台还用于按照设定政务信息类型对初始政务信息文件具有的初始政务信息进行分类处理,获得至少一个政务信息分类集;针对每个政务信息,遍历各政务信息分类集,汇总与政务信息相关的各不同政务信息政务种类的政务信息进行政务信息组合,形成政务信息的政务分项信息;将具有各政务信息及相关政务分项信息的政务信息表记为政务信息匹配信息表。
8.进一步需要说明的是,政务信息处理平台还用于基于接收的政务信息查询请求,
确定政务信息查询信息;从预设的政务映射表中,查找政务信息查询信息匹配的综合政务信息并以预设显示框进行展示;基于用户发送的政务信息进行,对政务信息查询信息进行扩展查询。
9.进一步需要说明的是,政务信息处理平台还用于接收到政务信息辨识触发请求后,向用户展示辨识政务扩展条件配置显示框;接收用户在辨识政务扩展条件配置显示框中编辑的辨识政务扩展条件;按照辨识政务扩展条件,从政务映射表内其他政务信息对应的政务分项信息中获取政务信息查询信息匹配的政务信息,作为扩展查询结果。
10.进一步需要说明的是,政务信息处理平台解析辨识政务扩展条件,确定所述辨识政务扩展条件中包含的政务要件;政务信息处理平台通过各政务要件,从政务映射表内确定与政务信息查询信息相关的扩展政务信息;政务信息处理平台从各扩展政务信息匹配的政务分项信息中,提取与政务信息查询信息相关的政务信息,作为扩展查询结果。
11.进一步需要说明的是,政务信息处理平台支持技术元数据、管理元数据和业务元数据的注册、导入、存储、检索、导出、发布管理功能,同时为用户提供政务信息地图、政务信息字典、政务信息血缘追踪和影响分析、元数据版本管理、元数据统计分析、数据质量报表。
12.进一步需要说明的是,政务信息处理平台包括:元数据管理单元、元数据配置单元、元数据模型管理单元、元数据扫描单元、元数据检索单元、元数据版本管理单元以及元数据导入导出单元;元数据管理单元用于将元数据与数据信息目录库结合,按照预设的标准对政务信息进行梳理、描述、编目、分类、分级管理和可视化展现;元数据配置单元用于对元数据进行配置,通过元数据配置查看所有元数据信息、新增元数据,根据关键字查询元数据,并进行新增任务或者删除对应元数据;同时,查看所有采集任务、根据关键字查询任务、新增任务、开始任务、停止任务、查看日志和删除任务;元数据模型管理单元基于元数据目录树结构管理元数据模型,用户配置元数据模型,并查看元模型关系树,根据对应的数据源建立元数据,创建采集任务;元数据扫描单元支持以手动或定时的方式扫描指定的数据库资源,并提取和解析相关的数据,在比较扫描数据和原有数据的差异后,自动将差异数据维护到指定的元数据目录;元数据检索单元支持全文检索的方式查找和关键字匹配的权限范围内的元数据信息,通过元数据路径信息快速定位到元数据组织树上的节点;元数据版本管理单元用于为元数据对象版本管理和基线版本管理;元数据导入导出单元用于提供元数据的导入和导出功能。
13.进一步需要说明的是,政务信息处理平台还包括:索引模块和查询模块;索引模块用于提供政务信息的数据索引服务,对海量数据资源提取信息、组织信息以供检索;索引模块支持对平台内部的结构化数据、半结构化数据以及非结构化数据建立索引从而为上层应用提供对人、物、时空等的检索服务;支持近实时检索、分布式批量索引、中文智能分词、高亮显示;支持对搜索敏感关键词的管理和屏蔽;支持对资源目录、元数据建立索引;
查询模块提供政务信息的查询接口,以及各类结构化和非结构化数据的多种查询接口,支持精确/模糊、分类、组合、批量等多种查询方式;支持根据md5和文件体长度来查询与输入文件相同的全文数据。
14.进一步需要说明的是,政务信息处理平台还包括:服务注册模块、服务监控模块以及服务管理模块;服务注册模块用于提供政务信息服务注册、注销和查询的相关接口,服务提供者通过调用相关方法注册、注销自己的服务地址,实现服务地址的动态化;服务管理模块用于提供在线服务、脱机服务以及离线服务,还提供服务的删除、下线、上线以及组件服务、数据服务开放的功能;支持对服务目录中注册的组件进行检索和定位;支持对服务目录和服务组件发布的服务进行统计,并展示相应组件的接入状态;服务管理模块支持修改服务目录名称,并对末级目录删除;对服务状态、服务压力进行监控;对平台服务的连接数、一定时间内可访问的数据量、每个ip访问的情况、访问敏感数据的用户进行监控,实时显示监控状态,出现服务运行状态异常时,进行报警;还支持以数据资源清单为依据,对数据资源库、表级粒度的扫描情况进行稽核,能够以图表形式呈现数据资源的整体扫描率;支持针对各业务系统数据资源扫描情况进行排名展现;支持以列表形式和数据资源地图形式呈现数据资源扫描稽核的详细信息;以图表形式呈现敏感数据资源。
15.从以上技术方案可以看出,本发明具有以下优点:本发明提供的基于大数据处理的政务数据服务系统通过查询包含政务信息及政务信息匹配的政务分项信息的政务映射表,可以获得更多与政务信息匹配的综合性信息,用户对政务信息查询获得的信息内容,提高了政务信息查询的完整性,满足用户的查询要求。
16.本发明提供的基于大数据处理的政务数据服务系统增加了基于用户发送的政务信息辨识请求,对政务信息查询信息进行扩展查询。通过设置辨识政务扩展条件可以挖掘出更多与待查询政务信息相匹配的政务信息,实现通过辨识政务扩展条件筛查出更多相匹配的政务信息,满足用户查询需求。
17.本发明提供的基于大数据处理的政务数据服务系统提供政务信息交换、存储、治理、服务能力,为向社会统一提供政务信息开放相关数据服务和产品提供支撑能力。
18.本发明采集汇聚查询统计、按资源分类采集汇聚查询统计、按时间段采集汇聚查询统计、按单位服务调用查询统计、按资源分类服务调用查询统计、按时间段服务调用查询统计等。用户可以查看全局的政务信息,可以在平台查看提供服务的信息。
附图说明
19.为了更清楚地说明本发明的技术方案,下面将对描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
20.图1为基于大数据处理的政务数据服务系统示意图。
具体实施方式
21.下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
22.本发明提供的基于大数据处理的政务数据服务系统中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
23.如图1所示,本发明提供的基于大数据处理的政务数据服务系统包括:政务信息处理平台1、数据库2和多个政务访问终端3;多个政务访问终端3分别与政务信息处理平台1通信连接,政务信息处理平台1用于获取各业务部门的政务信息以及接收各个数据源推送的政务信息,并对政务信息进行归集,储存到数据库2中;政务信息处理平台1接收的政务访问终端3发送的政务信息查询请求,确定政务信息查询信息。
24.用户可以通过政务访问终端3,选择所要查询的政务信息。
25.本发明提供的实施例中,当政务信息处理平台1接收到政务信息查询请求时,政务信息查询请求中携带有要查询信息,政务信息处理平台1根据政务信息查询请求,确定政务信息查询信息。
26.本发明中,政务信息处理平台1从预设的政务映射表中,查找匹配的政务信息并以预设显示框进行展示。
27.其中,政务映射表包含至少一个政务信息,以及政务信息匹配的政务分项信息,政务分项信息中包含政务信息的不同政务种类。政务映射表通过对初始政务信息文件中的政务信息拆分组合处理而成。
28.政务信息具体可以为政务分项信息的主体。某政务映射表中有时间、事件、部门以及备注信息,若以事件为主体,获取与事件相关的政务信息,则事件为政务信息,其它与事件相匹配的全部政务信息共同构成与该事件匹配的政务分项信息。多个政务分项信息构成了政务映射表。
29.政务信息处理平台1根据政务信息查询,从政务映射表中,查询匹配的综合政务信息,查询方式可以是通过带有政务信息查询函数进行。查找与政务信息匹配的综合政务信息并以预设显示框通过政务访问终端3进行展示。预设显示框可以是由管理员或用户自定义设置。
30.本发明的系统还包括,基于接收的政务信息查询请求,确定政务信息查询信息;从预设的政务映射表中,查找政务信息查询信息匹配的综合政务信息并以预设显示框进行展示。
31.政务映射表包含至少一个政务信息,以及政务信息匹配的政务分项信息,政务分
项信息中包含政务信息的不同政务信息政务种类的全部政务信息。本发明通过查询包含政务信息及政务信息匹配的政务分项信息的政务映射表,可以获得更多与政务信息匹配的综合性信息,用户对政务信息查询获得的信息内容,提高了政务信息查询的完整性,满足用户的查询要求。
32.作为本发明的一种实施例,政务信息匹配信息表的构建中,政务信息处理平台1获取初始政务信息文件。
33.其中,初始政务信息文件中包含不同政务信息来源的初始政务信息。初始政务信息文件可以以任何方式导入到该政务信息处理平台1中,作为后续政务信息处理的来源。
34.政务信息处理平台1对初始政务信息文件中各初始政务信息进行拆分组合处理,生成包含所设定各政务信息及相关政务分项信息的政务信息匹配信息表。
35.其中,初始政务信息文件中的初始政务信息按政务种类进行拆分,获得不同政务种类的政务信息,将具有相关性的不同政务种类信息匹配到对应的政务信息中,形成多个政务分项信息,多个政务信息和政务分项信息汇总成政务信息匹配信息表。
36.本发明中,政务信息处理平台1对初始政务信息文件中各初始政务信息进行拆分组合处理,生成具有所设定各政务信息的政务信息匹配信息表。
37.政务信息处理平台1按照设定政务信息类型对初始政务信息文件具有的初始政务信息进行分类处理,获得至少一个政务信息分类集。
38.比如:涉及城市内气体超标排放监控处理,相对于本发明实施例中,时间、事件、部门以及备注相应的就有气体超标排放时间段,气体超标排放企业及位置,气体超标排放的物质,气体超标排放所要处理的部门以及气体超标排放以往是如何处理,处理的过程是什么。以上这些的为具有的初始政务信息的初始政务信息文件,对初始政务信息文件可以进行拆分,拆分成气体超标排放时间段,气体超标排放企业及位置,气体超标排放的物质,气体超标排放所要处理的部门以及气体超标排放以往是如何处理,处理的过程是什么。
39.然后政务信息处理平台1对上述各个属性信息进行分类,比如可以按照时间分类,按照城市污染分类,或者按照所属处理部门进行分类。
40.可以理解的是,政务信息处理平台1中已经预先对属性信息、时间、城市污染以及所属处理部门等等进行分类。系统可以根据需要自动进行分类。
41.政务映射表中所设置的为政务分项信息,可以在政务映射表中预设所需要的政务分项信息,政务分项信息可以设置为气体超标排放时间段,气体超标排放企业及位置,气体超标排放的物质,气体超标排放所要处理的部门以及气体超标排放以往是如何处理,处理的过程是什么等等,作为分项处理事项。
42.政务信息处理平台1针对每个政务信息,遍历各政务信息分类集,汇总与政务信息相关的各不同政务信息政务种类的政务信息进行政务信息组合,形成政务信息的政务分项信息。
43.示例性的,将某初始政务信息文件包含的初始政务信息进行分类处理获得时间、事件、部门以及备注政务信息分类集。若以事件为气体超标排放,则遍历城市地图,匹配到企业在先排放状态,在先排放时间等信息,进行四个其它政务种类政务信息分类集,查询到与政务信息相关的各不同政务信息政务种类的政务信息,并进行组合,形成政务信息的政务分项信息。
44.政务信息处理平台1将具有各政务信息及相关政务分项信息的政务信息表记为政务信息匹配信息表。政务信息匹配信息表作为政务信息查询的政务信息源存储在政务信息处理平台1中。
45.本实施例还提供一种实施方式,具体来讲,基于接收的政务信息查询请求,确定政务信息查询信息。政务信息处理平台1预设的政务映射表中,查找政务信息查询信息匹配的综合政务信息并以预设显示框进行展示。
46.政务信息处理平台1基于用户发送的政务信息进行,对政务信息查询信息进行扩展查询。
47.其中,用户可以通过政务访问终端3发出并选择政务辨识信息,对政务信息进行扩展查询,获取与辨识政务扩展条件对应的政务信息。
48.政务信息处理平台1接收到政务信息辨识触发请求后,向用户展示辨识政务扩展条件配置显示框。
49.其中,辨识政务扩展条件可以是满足政务查询的内容扩展、时间维度的扩展、政务处理部门的扩展以及处理事件的连锁信息扩展等。用户可以根据自身需求,在辨识政务扩展条件配置显示框选择辨识政务扩展条件。
50.政务信息处理平台1接收用户在辨识政务扩展条件配置显示框中编辑的辨识政务扩展条件。
51.政务信息处理平台1按照辨识政务扩展条件,从政务映射表内其他政务信息对应的政务分项信息中获取政务信息查询信息匹配的政务信息,作为扩展查询结果。
52.其中,扩展查询结果可以是查询政务信息与其他政务信息的匹配路径,以及与扩线层级相匹配信息扩展信息。
53.示例性的讲,根据辨识政务扩展条件,解析出辨识政务扩展条件中包含的政务要件,通过政务要件,从政务映射表内其他政务信息对应的政务分项信息中获取政务信息查询信息匹配的政务信息。政务要件可以包括时间、事件、部门以及备注信息的一个或多个。
54.按照辨识政务扩展条件,从政务映射表内其他政务信息对应的政务分项信息中获取政务信息查询信息匹配的政务信息的过程可以表述为:政务信息处理平台1解析辨识政务扩展条件,确定所述辨识政务扩展条件中包含的政务要件。
55.政务信息处理平台1通过各政务要件,从政务映射表内确定与政务信息查询信息相关的扩展政务信息。
56.具体的,通过各政务要件,从政务映射表内找到与政务信息查询信息有共同政务要件的扩展政务信息。
57.示例性的讲,如第一时间段的气体超标排放与第二时间段的气体超标排放通过企业地址信息相匹配,则可以理解为第一时间段的气体超标排放与第二时间段的气体超标排放的共性政务要件是企业地址信息,当政务信息查询信息为第一时间段的气体超标排放时,通过扩展辨识,可以确定第二时间段的气体超标排放为第一时间段的气体超标排放的扩展信息。又如第一时间段的气体超标排放与第二时间段的气体超标排放通过企业地址信息相匹配,第三时间段的气体超标排放与第二时间段的气体超标排放通过物品信息相匹配,则可以理解为第一时间段的气体超标排放与第二时间段的气体超标排放的共性政务要
件是企业地址信息,第三时间段的气体超标排放与第二时间段的气体超标排放的共性政务要件是物品信息,当政务信息查询信息为第二时间段的气体超标排放时,通过扩展辨识,可以确定第一时间段的气体超标排放和第三时间段的气体超标排放为第二时间段的气体超标排放的扩展信息,依次类推,可以确定该企业在何时容易出现气体超标排放,进而进行处理。
58.政务信息处理平台1从各扩展政务信息匹配的政务分项信息中,提取与政务信息查询信息相关的政务信息,作为扩展查询结果。
59.示例性的,如:先匹配到与第一时间段的气体超标排放具有相同时间相同地点信息的第二时间段的气体超标排放;查到与第一时间段的气体超标排放具有相同时间相同地点信息的第二时间段的气体超标排放,并查出与第二时间段的气体超标排放有相同时间相同地点信息的第三时间段的气体超标排放;再查到与第一时间段的气体超标排放具有相同时间相同地点信息的第二时间段的气体超标排放,并查出与第二时间段的气体超标排放有相同时间相同地点信息的第三时间段的气体超标排放,并查出与第三时间段的气体超标排放具有相同企业地址。
60.按照所确定扩展查询结果匹配的展示方式,展示扩展查询结果,以供用户进行查看或使用。
61.本发明提供的基于大数据处理的政务数据服务系统增加了基于用户发送的政务信息辨识请求,对政务信息查询信息进行扩展查询。通过设置辨识政务扩展条件可以挖掘出更多与待查询政务信息相匹配的政务信息,实现通过辨识政务扩展条件筛查出更多相匹配的政务信息,满足用户查询需求。本发明的用户可以是使用公共数据服务平台的操作人员,比如话务员,市民,相关从业者或者平台访问者等等。
62.作为本发明的一种实施例,政务信息处理平台1还用于获取各业务部门的政务信息以及接收各个数据源推送的政务信息,并对政务信息进行归集,储存到数据库2中;数据采集汇聚模块可以从各个业务部门主动获取政务信息,也可以通过被动的方式接收各个数据源推送的政务信息。数据源可以是公共服务部门使用的终端机,定时向数据采集汇聚模块推送政务信息,也可以是预设数据类型,如果属于预设的预设数据类型,则向数据采集汇聚模块推送的政务信息。其中,政务信息的采集可以是对增量数据来进行采集、或对数据变更来进行采集、或对数据进行比较进行采集。
63.政务信息可以包括但不限于人口数据、单位数据、空间地理数据、电子证照、公共信用、宏观经济数据、应急数据、政法综治数据、交通出行数据、生态环境数据、社会保障数据、医疗健康数据、市场监管数据、金融数据、知识产权数据、政务公开数据、执法监督数据、农业农村数据等等,还可以结合办公、人事、财政、机关事务和档案等通用业务信息系统建设平台的数据信息。
64.数据库2采用mpp数据库2,针对数据计算分析负载进行优化,聚合和处理大型数据集,通过将运算分布到各个节点中独立运算后进行结果合并,作为整体提供数据处理服务,使复杂的分析查询可以更快,更有效地处理。支持行列存储、数据压缩、mapreduce、不停机扩容、多级容错等机制,支持数百节点,pb 级数据的稳定运行。mpp数据库2适用于关系型数据的分布式存储及处理, 尤其适用于数据库2表单表数据量适中、数据处理关联库表量大的应用场景,能较好地支持sql查询,实现数据的快速查询处理。
65.政务信息处理平台1将系统的运行过程以及数据处理过程生成相应的日志文件,并保存至数据库2,提供包括数据归集日志查询、服务调用日志查询、服务器运行状态查询、数据库2状态查询界面,通过相应的日志信息进行查询;政务信息处理平台1采用元数据对数据库2中的政务信息进行描述,形成统一格式的目录内容,通过对目录内容的配置,形成数据信息目录库;用于基于数据信息目录库对数据库2中的政务信息进行查询,并进行操作;本发明中的政务信息处理平台1配置每个政务信息的数据特征;数据特征用于对政务信息分类,每个数据特征都有其对应的用于让程序识别的特征规则,特征规则是正则表达式、数据字典、字段字典、复合发现等。支持数据特征对政务信息的查询,并实现对数据特征的添加、修改和删除。
66.数据特征添加是在政务信息配置特征名称、备注,选择识别方法(正则表达式、数据字典、字段字典),并根据选择的识别方法输入或选择对应的规则。
67.可以将数据库2中储存的数据特征配置成一个特征列表:列表中需要显示特征名称、识别方法、规则和备注。可以根据识别方法、特征名称和备注内容查询系统中已存在的数据特征。
68.对于本发明的实施例来讲,政务信息处理平台1支持技术元数据、管理元数据和业务元数据的注册、导入、存储、检索、导出、发布管理功能,同时为用户提供政务信息地图、政务信息字典、政务信息血缘追踪和影响分析、元数据版本管理、元数据统计分析、数据质量报表。
69.元数据管理为数据管理体系的建立提供可靠、便捷的工具支持。元数据是政务信息管理的核心组成部分,贯穿于平台数据的创建、维护管理和使用的各个环节之中,元数据管理帮助数据中心统一数据口径、标明数据方位、分析数据关系、管理模型变更,是平台数据建设和数据资产高效管理的有力保障。同时要以元数据为驱动,构建完整的数据管理和数据服务体系,元数据实现数据生产、服务全链路信息的集中管理和展示,政务信息的作业管控、质量管理需要以元数据为标准,数据服务目录内容也取自元数据系统。
70.进一步需要说明的是,政务信息处理平台1包括:元数据管理单元、元数据配置单元、元数据模型管理单元、元数据扫描单元、元数据检索单元、元数据版本管理单元以及元数据导入导出单元;元数据管理单元用于将元数据与数据信息目录库结合,按照预设的标准对政务信息进行梳理、描述、编目、分类、分级管理和可视化展现;可以依据不同用户对表级、行级、敏感词汇的权限控制,自动筛选、过滤无权限的元数据以及数据。
71.元数据配置单元用于对元数据进行配置,通过元数据配置查看所有元数据信息、新增元数据,根据关键字查询元数据,并进行新增任务或者删除对应元数据;同时,查看所有采集任务、根据关键字查询任务、新增任务、开始任务、停止任务、查看日志和删除任务;元数据模型管理单元基于元数据目录树结构管理元数据模型,用户配置元数据模型,并查看元模型关系树,根据对应的数据源建立元数据,创建采集任务;不同父元模型拥有不同子元模型,运行完采集任务后可以查看子元模型的不同元数据实例信息。元数据模型管理单元根据数据源,在元模型关系树中对应元模型下建立相应的实例,进行元数据采集任务,并可以查看具体的元数据实例信息;可以通过检索,搜索出符合要求的元数据、查
看元数据详细信息、进行元数据分析、版本变更信息查询,进行订阅管理及导出。
72.元数据扫描单元支持以手动或定时的方式扫描指定的数据库2资源,并提取和解析相关的数据,在比较扫描数据和原有数据的差异后,自动将差异数据维护到指定的元数据目录;元数据检索单元支持全文检索的方式查找和关键字匹配的权限范围内的元数据信息,通过元数据路径信息快速定位到元数据组织树上的节点;元数据版本管理单元用于为元数据对象版本管理和基线版本管理;元数据对象版本是对元数据的每次提交形成版本(上一版本形成历史版本),提供历史版本间,历史版本与当前版本对比功能;基线版本,对某一阶段产生的元数据对象形成数据集,提供不同阶段产生的数据集的版本比较。
73.元数据导入导出单元用于提供元数据的导入和导出功能。以保证数据模型、数据对象能够灵活的迁移,支持模型间的检查和比对,以便于数据模型的维护和扩展。
74.本发明涉及的政务信息处理平台1还支持以数据资源清单为依据,对数据资源库、表级粒度的扫描情况进行稽核,能够以图表形式呈现数据资源的整体扫描率;支持针对各业务系统数据资源扫描情况进行排名展现;支持以列表形式和数据资源地图形式呈现数据资源扫描稽核的详细信息;以图表形式呈现敏感数据资源;具体来讲,支持以数据资源清单为依据,对访问数据库2的应用、接口、运维管控终端等在线资源的备案情况进行统计,以图表形式呈现备案率。
75.数据资源地图能够对数据资源的分布情况进行综合呈现。呈现内容包括:数据资源分布、敏感数据分布呈现、敏感数据类型呈现、数据分级呈现。
76.以图表形式呈现数据资源的接入覆盖范围,展现内容至少应包括:数据库2、数据池、业务系统、资源ip;支持按敏感数据分类、敏感数据分级、敏感数据特征等属性进行筛选。
77.以业务系统维度,展示已接入的业务系统、数据资源接入情况,并对接入率、资源类型、认领率、扫描率进行统计。
78.以图表形式呈现敏感数据资源包括:数据库2资源、资源ip、敏感数据分级类型分布、敏感数据级别分布。支持以拓扑图形式呈现敏感数据的分布情况。通过可视化手段实现数据安全策略稽核,实现规范标准落实情况跟踪、策略落实情况跟踪。
79.对于本发明的检索和查询来讲,平台提供了索引模块和查询模块;索引模块对数据库2表中一列或多列的值进行排序,使用索引可快速访问数据库2表中的政务信息。
80.索引模块用于提供政务信息的数据索引服务,对海量数据资源提取信息、组织信息以供检索;索引模块支持对平台内部的结构化数据、半结构化数据以及非结构化数据建立索引从而为上层应用提供对人、物、时空等的检索服务;支持近实时检索、分布式批量索引、中文智能分词、高亮显示;支持对搜索敏感关键词的管理和屏蔽;支持对资源目录、元数据建立索引;提供高效的元数据管理功能服务。支持搜索日志的审计功能。
81.查询模块提供政务信息的查询接口,以及各类结构化和非结构化数据的多种查询接口,支持精确/模糊、分类、组合、批量等多种查询方式;支持根据md5和文件体长度来查询与输入文件相同的全文数据。
82.具体来讲,查询检索可以对平台的各类数据资源情况进行查询。可以进行结构化数据的查询,支持精确匹配、模糊匹配。使用结构化数据查询时,可以根据查询词的类型,通过字段扩展配置,用查询值在多个同类字段进行查询,以保证查全率。支持基于关键词匹配或文本相似度匹配进行查询。
83.本发明提供的平台中,政务信息处理平台1还包括:服务注册模块、服务监控模块以及服务管理模块;服务注册模块用于提供政务信息服务注册、注销和查询的相关接口,服务提供者通过调用相关方法注册、注销自己的服务地址,实现服务地址的动态化;比如服务提供者应用启动后自动注册自己的服务地址、启动停止后注销自己的服务地址。
84.服务管理模块用于提供在线服务、脱机服务以及离线服务,还提供服务的删除、下线、上线以及组件服务、数据服务开放的功能;支持对服务目录中注册的组件进行检索和定位;支持对服务目录和服务组件发布的服务进行统计,并展示相应组件的接入状态;服务管理模块支持修改服务目录名称,并对末级目录删除;对服务状态、服务压力进行监控;根据按照部门、系统、ip和用户进行分类监控,设定阈值,超过阈值,通过锁定用户账号和异常报警模块报警。对平台服务的连接数、一定时间内可访问的数据量、每个ip访问的情况、访问敏感数据的用户进行监控,实时显示监控状态,出现服务运行状态异常时,进行报警。
85.对平台服务的最大允许连接数、当前连接数、服务访问总数和日平均访问次数等进行监控,实时监控访问运行压力,对服务压力设置告警值,超过告警值时进行预警,提醒管理人员及时作出响应。
86.对平台访问的用户按照部门进行分类,对部门用户访问的情况进行监控,并对部门设定一定时间内可访问的数据量,如果超过该数据量,对该部门所有用户进行锁定,并通过异常预警提醒管理员。
87.对平台访问的用户按照系统进行分类,对系统用户访问的情况进行监控,并对系统设定一定时间内可访问的数据量,如果超过该数据量,对该系统所有用户进行锁定,并通过异常预警提醒管理员。
88.对每个ip访问的情况进行监控,并对ip设定一定时间内可访问的数据量,如果超过该数据量,对该ip所有访问进行锁定,并通过异常预警提醒管理员。
89.对访问敏感数据的用户进行监控,对用户访问一定时间内访问数据量进行限定,如果超过数据量上限,锁定用户账号,并通过异常报警模块通知系统管理员。
90.政务信息处理平台1通过数据处理过程的流量监测审计,结合应用系统日志,实现数据处理监测,发现数据处理异常;实现数据越权操作、数据高频访问、敏感数据未脱敏、违规批量数据下载。数据越权操作:支持数据处理过程越权操作行为监测。数据高频访问:支持数据处理过程敏感数据高频访问监测。敏感数据未脱敏:支持数据处理过程敏感数据未脱敏监测。违规批量数据下载:支持数据处理过程大批量数据查询下载监测。通过对数据共享过程的流量监测,实现数据共享监测,发现数据共享异常。数据共享过程监测单元实现敏
感数据未脱敏共享、敏感数据未授权共享。并通过数据水印技术,实现外发数据泄漏追踪。敏感数据未脱敏共享监测:支持对数据共享过程中敏感数据未脱敏进行监测。敏感数据未授权共享监测:支持对敏感数据共享是否审批进行监测。外发数据泄露追踪:支持通过对外发数据加入数据水印,并通过对泄漏数据进行数据水印比对,准确定位数据泄露源。
91.对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1