一种数据管理方法、装置、电子设备及存储介质与流程

文档序号:34175616发布日期:2023-05-17 04:15阅读:44来源:国知局
一种数据管理方法、装置、电子设备及存储介质与流程

本发明涉及计算机软件,尤其涉及一种数据管理方法、装置、电子设备及存储介质。


背景技术:

1、随着大数据时代的到来,各行各业数据产生量以及数据存储量的大幅提升,容易带来数据堆积的问题,在此情况下,如何对堆积的数据进行高效管理,成为当前亟需解决的重要问题。

2、相关技术中,通常根据设定的多个活跃时长,确定每个活跃时长下,针对相关数据集合的处理策略,然而,在同一活跃时长下,数据集合中的待处理数据的数目较多时,基于上述方式,容易产生集合中的数据堆积,影响处理效率,同时,上述方式仅采用活跃时长的单一特征进行管理,而未考虑到不同数据具有的不同特征,导致数据量较多时,无法满足管理人员的实际需求。


技术实现思路

1、本申请实施例提供一种数据管理方法、装置、电子设备及存储介质,用于避免数据堆积并提升数据管理效率。

2、第一方面,本申请实施例提供一种数据管理方法,包括:

3、响应于设定任务的执行时刻,获取数据的监控信息,其中,所述监控信息用于表征所述数据的当前属性。

4、根据所述监控信息判断所述数据是否满足预设的操作条件,其中,所述操作条件关联针对所述数据设置的目标操作。

5、响应于所述数据满足所述操作条件,采用所述目标操作对所述数据进行处理。

6、监控并记录所述数据的处理结果,并根据所述处理结果对所述数据进行生命周期管理。

7、第二方面,本申请实施例提供一种数据管理装置,包括:

8、任务执行模块,用于响应于设定任务的执行时刻,获取数据的监控信息,其中,所述监控信息用于表征所述数据的当前属性。

9、条件判断模块,用于根据所述监控信息判断所述数据是否满足预设的操作条件,其中,所述操作条件关联针对所述数据设置的目标操作。

10、操作处理模块,用于响应于所述数据满足所述操作条件,采用所述目标操作对所述数据进行处理。

11、监控管理模块,用于监控并记录所述数据的处理结果,根据所述处理结果对所述数据进行生命周期管理。

12、在一种可选的实施例中,所述根据所述监控信息判断所述数据是否满足预设的操作条件,所述条件判断模块用于:

13、响应于所述监控信息满足设定的自动触发规则,计算所述数据对应所述目标操作的操作概率,并在所述操作概率不小于预设阈值时,确定所述数据满足预设的操作条件。

14、和/或,

15、响应于所述监控信息满足设定的自定义触发规则,获取对应所述自定义触发规则设置的至少一个自定义触发字段,并在所述监控信息与所述至少一个自定义触发字段匹配时,确定所述数据满足预设的操作条件,其中,所述自定义触发字段用于指示所述数据的目标操作环境。

16、在一种可选的实施例中,所述计算所述数据对应所述目标操作的操作概率,所述条件判断模块用于:

17、根据所述监控信息包含的,所述数据的调用日期,采用第一参数,计算所述数据对应所述目标操作的第一操作概率,其中,所述第一参数表征所述数据的最大存储时间。

18、根据所述监控信息包含的,所述数据的调用次数,采用第二参数,计算所述数据对应所述目标操作的第二操作概率,其中,所述第二参数表征所述数据的调用次数总和。

19、分别采用第一权值以及第二权值,对所述第一操作概率及所述第二操作概率进行加权求和,获得加权和值,并根据所述加权和值,采用预设函数以及第三操作概率,计算所述数据对应所述目标操作的操作概率,其中,所述第一权值与所述第二权值的和值为一,所述第三操作概率根据所述数据的存储条数计算获得。

20、在一种可选的实施例中,所述根据所述加权和值,采用预设函数以及第三操作概率,计算所述数据对应所述目标操作的操作概率,所述条件判断模块用于:

21、根据所述数据的存储条数,采用第三参数,计算所述数据对应所述目标操作的第三操作概率,其中,所述第三参数表征所述数据的最大存储记录量。

22、根据预设函数计算所述加权和值对应的目标函数值,并采用所述第三操作概率,对所述目标函数值进行计算,获得所述数据对应所述目标操作的操作概率。

23、在一种可选的实施例中,所述目标操作为数据归档,则所述采用所述目标操作对所述数据进行处理,所述操作处理模块用于:

24、采用文件归档,以文件形式保存所述数据;

25、或者,

26、采用数据库归档,保存所述数据至指定数据库表。

27、在一种可选的实施例中,所述目标操作为数据销毁,则所述采用所述目标操作对所述数据进行处理,所述操作处理模块用于:

28、采用回收站销毁,将所述数据迁移至目标回收空间。

29、或者,

30、采用永久销毁,直接删除所述数据。

31、在一种可选的实施例中,所述监控并记录所述数据的处理结果后,所述监控管理模块还用于:

32、根据所述处理结果,更新所述数据的当前数据量,并更新所述目标操作对应所述数据的已处理数据量。

33、采用所述当前数据量以及所述已处理数据量分析所述数据的运行状况,并将所述运行状况在预设的展示界面中进行展示。

34、第三方面,提出了一种电子设备,其包括处理器和存储器,其中,所述存储器存储有程序代码,当所述程序代码被所述处理器执行时,使得所述处理器执行上述第一方面所述的数据管理方法的步骤。

35、第四方面,提出一种计算机可读存储介质,其包括程序代码,当所述程序代码在电子设备上运行时,所述程序代码用于使所述电子设备执行上述第一方面所述的数据管理方法的步骤。

36、本申请实施例的技术效果如下:

37、本申请实施例提供了一种数据管理方法、装置、电子设备及存储介质,该方法通过响应于设定任务的执行时刻,获取数据的监控信息,并根据监控信息判断数据是否满足预设的操作条件,以及在数据满足操作条件时,采用操作条件关联的目标操作对数据进行处理,基于上述方式,针对待管理的每个数据,均能在满足对应设置的操作条件时,被其关联的目标操作进行自动处理,有效减少数据堆积,从而提升数据的查询效率,同时,对数据的处理结果进行监控并记录,实现数据的生命周期管理,从而便于管理人员基于记录周期,更清晰直接地了解每个数据的运行状况,并提升数据管理效率。



技术特征:

1.一种数据管理方法,其特征在于,包括:

2.如权利要求1所述的方法,其特征在于,所述根据所述监控信息判断所述数据是否满足预设的操作条件,包括:

3.如权利要求2所述的方法,其特征在于,所述计算所述数据对应所述目标操作的操作概率,包括:

4.如权利要求3所述的方法,其特征在于,所述根据所述加权和值,采用预设函数以及第三操作概率,计算所述数据对应所述目标操作的操作概率,包括:

5.如权利要求1-4任一项所述的方法,其特征在于,所述目标操作为数据归档,则所述采用所述目标操作对所述数据进行处理,包括:

6.如权利要求1-4任一项所述的方法,其特征在于,所述目标操作为数据销毁,则所述采用所述目标操作对所述数据进行处理,包括:

7.如权利要求1-4任一项所述的方法,其特征在于,所述监控并记录所述数据的处理结果后,还包括:

8.一种数据管理装置,其特征在于,包括:

9.一种电子设备,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-7中任一项所述的方法。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-7中任一所述方法的步骤。


技术总结
本申请实施例提供了一种数据管理方法、装置、电子设备及存储介质,该方法通过响应于设定任务的执行时刻,获取数据的监控信息,并根据监控信息判断数据是否满足预设的操作条件,以及在数据满足操作条件时,采用操作条件关联的目标操作对数据进行处理,基于上述方式,针对待管理的每个数据,均能在满足对应设置的操作条件时,被其关联的目标操作进行自动处理,有效减少数据堆积,从而提升数据的查询效率,同时,对数据的处理结果进行监控并记录,实现数据的生命周期管理,从而便于管理人员基于记录周期,更清晰直接地了解每个数据的运行状况,并提升数据管理效率。

技术研发人员:梅俊辉,王煜,林文辉,张研,周辉,程雪建,李瑞祥
受保护的技术使用者:航天信息股份有限公司
技术研发日:
技术公布日:2024/1/12
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1