一种数据血缘管理方法、装置及电子设备

1.本发明涉及数据血缘管理技术领域，特别涉及一种数据血缘管理方法、装置及电子设备。


背景技术：

2.数据血缘属于数据治理中的一个概念，是在数据溯源的过程中找到相关数据之间的联系，它是一个逻辑概念。血缘分析是保证数据融合的一个手段，通过血缘分析实现数据融合处理的可追溯，其中大数据血缘是指数据产生的链路。
3.现有技术中进行数据血缘管理时，多具有清洗、分析、解析的步骤，使得数据通过来源表、目标表进行存储，其中通过清洗后，提高存储质量；但清洗的标准以及规则可能会根据需求进行改变，当改变后，现有技术中缺少自动清洗存储数据的设定，一般需要重新进行操作，进行筛查。


技术实现要素：

4.本发明的目的旨在至少解决所述技术缺陷之一。
5.为此，本发明的目的在于提出一种数据血缘管理方法、装置及电子设备。
6.为了实现上述目的，本发明的实施例提供一种数据血缘管理方法，包括如下步骤：
7.步骤s1，数据采集：将数据信息输入到数据管理终端中，通过所述数据管理终端进行暂时存储；
8.步骤s2，数据解析：对存储的数据执行解析，进行数据整理，以使得血缘数据以来源表、目标表的形式进行显示；
9.步骤s3，数据清洗：对解析后的数据进行清洗筛选，以去除其中的无用数据；
10.步骤s4，数据分析：对清洗后的数据进行分析，得到数据的内层信息和更高层级的信息；
11.步骤s5，数据存储：对分析后的数据在数据库中进行存储，以等待调用；
12.步骤s6，数据调用：对数据进行调用，通过来源表、目标表及其中的来源字段和目标字段之间的关联关系以分支图形式进行展示；
13.步骤s7，循环筛选：对数据库中存储的数据进行循环筛选，进行清洗。
14.进一步，在所述步骤s1中，在数据采集输入时，根据输入的数据进行分类存储，以使得数据根据输入的个人信息进行排布。
15.进一步，在所述步骤s3中，数据清洗的标准和规则根据设置的内部程序和逻辑进行修改调整。
16.进一步，在所述步骤s7中，对数据库进行循环清洗时，循环清洗的次数根据程序和逻辑设置。
17.本发明实施例还提出一种数据血缘管理装置，包括：输入模块、数据管理终端、存储模块、解析模块、显示模块、清洗模块、操作模块、分析模块和数据库，其中，所述输入模块
与所述数据管理终端连接，所述数据管理终端与所述存储模块、显示模块和操作模块连接，所述解析模块与所述数据管理终端和所述清洗模块连接，所述清洗模块进一步与所述分析模块连接，所述分析模块进一步与数据库连接，所述数据库连接至所述数据管理；所述输入模块将数据信息输入到数据管理终端中，通过数据管理终端中的存储模块进行暂时存储；
18.所述解析模块用于对所述存储模块中存储的数据通过解析模块进行解析，进行数据的整理，使得血缘数据以来源表、目标表的形式进行显示；
19.所述清洗模块用于对解析后的数据进行数据的清洗筛选，去除其中的无用数据；
20.所述分析模块用于对清洗后的数据进行分析出数据的内层信息以及更高层级的信息；
21.所述存储模块内置有数据库，将分析后的数据存储在数据库中，以等待调用；
22.所述显示模块用于对来源表、目标表以及其中的来源字段和目标字段之间的关联关系以分枝图形式进行展示；
23.所述操作模块用于接收用户输入的操作指令。
24.进一步，所述清洗模块内置有可编程逻辑控制器。
25.进一步，所述数据管理终端连接有第一无线收发模块，所述第一无线收发模块进一步与所述输入模块连接。
26.本发明实施例的还提出一种适用于数据血缘管理装置的电子设备，所述电子设备包括：操作面板、处理器、存储器和显示器，所述操作面板连接至所述处理器，所述处理器与所述存储器和所述显示器连接。
27.进一步，所述电子设备还包括：第二无线收发模块，所述第二无线收发模块与所述处理器连接，所述第二无线收发模块与所述第一无线收发模块之间无线连接。
28.本发明实施例还提出一种适用于数据血缘管理装置的存储介质，其特征在于，所述存储介质设置在所述数据管理终端中，所述存储介质中存储有计算机程序，所述存储介质进一步设置有存储传输单元。
29.根据本发明实施例的数据血缘管理方法、装置及电子设备,解决可现有技术中清洗规则改变后，不易进行自动清洗的问题。本发明可用于数据血缘信息数据的管理，其中便于无用、不具有价值信息的清除，其中用于清除数据的清洗模块采用可编辑控制器，其中的清除标准、规则可进行更改，更改后，数据血缘管理装置可自动进行数据库中数据的自动循环清洗、筛查，自动筛除无用信息，提高了使用的效果。
30.本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
31.本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：
32.图1为根据本发明实施例的数据血缘管理方法的流程示意图；
33.图2为根据本发明实施例的数据血缘管理装置的结构示意图以及数据血缘管理装置与电子设备的连接结构示意图；
34.图3为根据本发明实施例的电子设备的结构示意图。
35.附图标记：
36.100、数据血缘管理装置，101、输入模块，102、数据管理终端，103、存储模块，104、解析模块，105、显示模块，106、清洗模块，107、可编辑控制器，108、操作模块，109、分析模块，110、数据库，111、第一无线收放模块，200、电子设备，201、操作面板，202、处理器，203、存储器，204、第二无线收放模块，205、显示器。
具体实施方式
37.下面详细描述本发明的实施例，实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
38.如图1所示，本发明实施例的数据血缘管理方法，包括如下步骤：
39.步骤s1，数据采集：将数据信息输入到数据管理终端中，通过数据管理终端进行暂时存储。
40.在步骤s1中，在数据采集输入时，根据输入的数据进行分类存储，以使得数据根据输入的个人信息进行排布，如个人信息姓名首字母的先后顺序进行排序，可实现数据有序的排序。
41.步骤s2，数据解析：对存储的数据执行解析，进行数据整理，以使得血缘数据以来源表、目标表的形式进行显示。
42.步骤s3，数据清洗：对解析后的数据进行清洗筛选，以去除其中的无用数据。
43.在本发明的实施例中，数据清洗的标准和规则根据设置的内部程序和逻辑进行修改调整,用于改变数据清洗的标准以及规则。
44.步骤s4，数据分析：对清洗后的数据进行分析，得到数据的内层信息和更高层级的信息。
45.步骤s5，数据存储：对分析后的数据在数据库中进行存储，以等待调用。
46.步骤s6，数据调用：对数据进行调用，通过来源表、目标表及其中的来源字段和目标字段之间的关联关系以分支图形式进行展示。
47.步骤s7，循环筛选：对数据库中存储的数据进行循环筛选，进行清洗，避免无用、不具有价值的信息数据留存。
48.在本步骤中，对数据库进行循环清洗时，循环清洗的次数根据程序和逻辑设置。
49.优先的，循环清洗的次数为2～3次。
50.如图2所示，本发明实施例还提供一种数据血缘管理装置100，包括：输入模块101、数据管理终端102、存储模块103、解析模块104、显示模块105、清洗模块106、操作模块108、分析模块109和数据库110，其中，输入模块101与数据管理终端102连接，数据管理终端102与存储模块103、显示模块105和操作模块108连接，解析模块104与数据管理终端102和清洗模块106连接，清洗模块106进一步与分析模块109连接，分析模块109进一步与数据库110连接，数据库110连接至数据管理终端102。
51.具体的，输入模块101将数据信息输入到数据管理终端102中，通过数据管理终端102中的存储模块103进行暂时存储。
52.解析模块104用于对存储模块103中存储的数据通过解析模块104进行解析，进行
数据的整理，使得血缘数据以来源表、目标表的形式进行显示。
53.清洗模块106用于对解析后的数据进行数据的清洗筛选，去除其中的无用数据。
54.分析模块109用于对清洗后的数据进行分析出数据的内层信息以及更高层级的信息。
55.存储模块103内置有数据库110，将分析后的数据存储在数据库110中，以等待调用。
56.显示模块105用于对来源表、目标表以及其中的来源字段和目标字段之间的关联关系以分枝图形式进行展示。
57.操作模块108用于接收用户输入的操作指令。
58.在本发明的实施例中，清洗模块106内置有可编程逻辑控制器107。
59.此外，数据管理终端102连接有第一无线收发模块111，第一无线收发模块111进一步与输入模块101连接，进行信息的交互。
60.如图3所示，本发明还提出一种适用于数据血缘管理装置100的电子设备200，包括：操作面板201、处理器202、存储器203和显示器205，操作面板201连接至处理器202，处理器202与存储器203和显示器205连接，可进行信息的调取，通过电子设备200进行操作以及显示，可用于信息的调用查看。
61.此外，本发明的适用于数据血缘管理装置100的电子设备200，还包括：第二无线收发模块204，第二无线收发模块204与处理器202连接，第二无线收发模块204与第一无线收发模块111之间无线连接，通过无线，实现了信息的交互，进行数据的传递，便于使用调取。
62.另外，本发明实施例还提供一种适用于数据血缘管理装置的存储介质，存储介质设置在数据管理终端中，存储介质中存储有计算机程序，存储介质进一步设置有存储传输单元，，可进行数据库与数据管理终端之间数据的传输，作为介质媒介，通过其中的计算机程序和存储传输单元配合，实现数据的传输。
63.根据本发明实施例的数据血缘管理方法、装置及电子设备,解决可现有技术中清洗规则改变后，不易进行自动清洗的问题。本发明可用于数据血缘信息数据的管理，其中便于无用、不具有价值信息的清除，其中用于清除数据的清洗模块采用可编辑控制器，其中的清除标准、规则可进行更改，更改后，数据血缘管理装置可自动进行数据库中数据的自动循环清洗、筛查，自动筛除无用信息，提高了使用的效果。
64.在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
65.尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在不脱离本发明的原理和宗旨的情况下在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。本发明的范围由所附权利要求及其等同限定。