一种数据管理平台及数据管理方法

文档序号:27102609发布日期:2021-10-27 17:54阅读:215来源:国知局
一种数据管理平台及数据管理方法

1.本发明主要涉及电子数据的技术领域,具体为一种数据管理平台及数据管理方法。


背景技术:

2.电子智能设备的应用越来越广泛,已经成为人们日常不可缺少的工具,如笔记本电脑、手机、平板电脑、智能手表等等。网络技术的发展进一步将电子智能设备的作用扩展至社会生活的方方面面。人们在使用电子智能设备产生了大量的数据,如何存储管理这些数据成为当前的技术热点。目前出现的数据管理平台不能在非网络连接或无信号连接的情况下也能搜索到信息。


技术实现要素:

3.本发明主要提供了一种数据管理平台及数据管理方法,用以解决上述背景技术中提出的技术问题。
4.本发明解决上述技术问题采用的技术方案为:一种数据管理平台,包括爬虫平台,用于抓取互联网数据信息,所述数据管理平台设有大数据服务中心,用于储存抓取到的数据信息,所述数据管理平台设有数据处理单元,用于接收互联网数据信息、分析数据信息、整理数据信息,所述数据管理平台设有数据统计单元,用于储存整理后的数据信息,所述数据管理平台设有数据搜索平台,用于查找搜索数据信息。
5.一种数据管理方法,包括如下步骤:s1:通过爬虫平台抓取数据,并将数据信息发送至大数据服务中心;s2:大数据服务中心接收数据信息,并将数据信息储存备份;s3:大数据服务中心降数据信息发送至数据处理单元,通过数据处理单元分析、整理数据信息;s4:数据处理单元将数据信息发送至数据处理单元,通过数据处理单元储存整理后的数据信息;s5:通过数据搜索平台搜索并提取储存数据储存单元内的数据信息。
6.其中s1操作步骤如下:s1

1:爬虫平台抓取互联网数据信息;s1

2:爬虫平台将数据信息发送至大数据服务中心;其中s2操作步骤如下:s2

1:大数据服务中心接收数据信息;s2

2:大数据服务中心将接收到的数据信息备份储存;s2

3:大数据服务中心将数据发送至数据处理单元;其中s3操作步骤如下:
s3

1:数据处理单元接收数据信息,并储存信息;s3

1:数据分析模块开始分析数据信息,并将分析后的数据信息发送至数据整理模块;s3

2:数据整理模块接收分析后的数据信息,并开始将数据信息整理归类;s3

3:数据发送模块将整理后的数据信息发送至数据储存单元;其中s4操作步骤如下:s4

1:数据接收模块1、数据接收模块2、数据接收模块3接收整理后的数据信息,并向储存器a、储存器b、储存器c、储存器d、储存器e、储存器f发送整理归类好的数据信息;s4

2:储存器a、储存器b、储存器c、储存器d、储存器e、储存器f接收并储存数据信息;其中s5操作步骤如下:s5

1:搜索窗口输入搜索内容;s5

2:数据访问模块向数据提取模块发送指令;s5

3:数据提取模块接收指令,并执行指令;s5

4:数据提取模块提取储存器a或储存器b、储存器c、储存器d、储存器e、储存器f内的数据信息;s5

5:信息展示窗口显示数据信息内容。
7.与现有技术相比,本发明的有益效果为:本发明通过爬虫平台,用于抓取互联网数据信息;通过大数据服务中心,用于储存抓取到的数据信息;通过数据处理单元,用于接收互联网数据信息、分析数据信息、整理数据信息,通过数据统计单元,用于储存整理后的数据信息,通过数据搜索平台,用于查找搜索数据信息。
8.以下将结合附图与具体的实施例对本发明进行详细的解释说明。
附图说明
9.图1为本发明的流程示意图;图2为本发明的数据处理单元流程图;图3为本发明的数据储存单元流程图;图4为本发明的数据搜索平台流程图。
具体实施方式
10.为了便于理解本发明,下面将参照相关附图对本发明进行更加全面的描述,附图中给出了本发明的若干实施例,但是本发明可以通过不同的形式来实现,并不限于文本所描述的实施例,相反的,提供这些实施例是为了使对本发明公开的内容更加透彻全面。
11.需要说明的是,当元件被称为“固设于”另一个元件,它可以直接在另一个元件上也可以存在居中的元件,当一个元件被认为是“连接”另一个元件,它可以是直接连接到另一个元件或者可能同时存在居中元件,本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的。
12.除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的
技术人员通常连接的含义相同,本文中在本发明的说明书中所使用的术语知识为了描述具体的实施例的目的,不是旨在于限制本发明,本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
13.请着重参照附图1

4,一种数据管理平台,包括爬虫平台,用于抓取互联网数据信息,所述数据管理平台设有大数据服务中心,用于储存抓取到的数据信息,所述数据管理平台设有数据处理单元,用于接收互联网数据信息、分析数据信息、整理数据信息,所述数据管理平台设有数据统计单元,用于储存整理后的数据信息,所述数据管理平台设有数据搜索平台,用于查找搜索数据信息。
14.请着重参照附图1

4,一种数据管理方法,包括如下步骤:s1:通过爬虫平台抓取数据,并将数据信息发送至大数据服务中心;s2:大数据服务中心接收数据信息,并将数据信息储存备份;s3:大数据服务中心降数据信息发送至数据处理单元,通过数据处理单元分析、整理数据信息;s4:数据处理单元将数据信息发送至数据处理单元,通过数据处理单元储存整理后的数据信息;s5:通过数据搜索平台搜索并提取储存数据储存单元内的数据信息。
15.其中s1操作步骤如下:s1

1:爬虫平台抓取互联网数据信息;s1

2:爬虫平台将数据信息发送至大数据服务中心;其中s2操作步骤如下:s2

1:大数据服务中心接收数据信息;s2

2:大数据服务中心将接收到的数据信息备份储存;s2

3:大数据服务中心将数据发送至数据处理单元;其中s3操作步骤如下:s3

1:数据处理单元接收数据信息,并储存信息;s3

1:数据分析模块开始分析数据信息,并将分析后的数据信息发送至数据整理模块;s3

2:数据整理模块接收分析后的数据信息,并开始将数据信息整理归类;s3

3:数据发送模块将整理后的数据信息发送至数据储存单元;其中s4操作步骤如下:s4

1:数据接收模块1、数据接收模块2、数据接收模块3接收整理后的数据信息,并向储存器a、储存器b、储存器c、储存器d、储存器e、储存器f发送整理归类好的数据信息;s4

2:储存器a、储存器b、储存器c、储存器d、储存器e、储存器f接收并储存数据信息;其中s5操作步骤如下:s5

1:搜索窗口输入搜索内容;s5

2:数据访问模块向数据提取模块发送指令;s5

3:数据提取模块接收指令,并执行指令;s5

4:数据提取模块提取储存器a或储存器b、储存器c、储存器d、储存器e、储存器f
内的数据信息;s5

5:信息展示窗口显示数据信息内容。
16.上述结合附图对本发明进行了示例性描述,显然本发明具体实现并不受上述方式的限制,只要采用了本发明的方法构思和技术方案进行的这种非实质改进,或未经改进将本发明的构思和技术方案直接应用于其他场合的,均在本发明的保护范围之内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1