一种基于智能调度的冷热数据自动迁移方法与流程

本发明涉及数据库，特别是涉及一种基于智能调度的冷热数据自动迁移方法。

背景技术：

1、随着数字化时代的到来，数据量呈爆炸式增长，企业面临着巨大的数据存储和管理挑战。传统数据存储方式往往无法高效应对冷热数据的不同需求,因此针对冷热数据的分区管理则成为了降本增效的有效方式，但现目前的冷热数据迁移方案通常依赖于静态规则或人工干预，对于冷热数据的转换依靠设置的固定阈值进行判断，对于冷热数据的存储策略单一，不适应大数据时代的特性，体现在冷数据未能及时迁移至低成本存储设备，导致不必要的存储费用支出、热数据未能及时回迁至高性能存储设备，影响数据访问速度和系统响应时间。

技术实现思路

1、为解决现有技术中存在的不足，本发明提供了一种基于智能调度的冷热数据自动迁移方法，该基于智能调度的冷热数据自动迁移方法通过智能调度算法和设备性能监控进行动态调整，以动态的迁移策略去适应数据访问模式的变化，实现更加精准的识别冷热数据，提高迁移的准确性和效率，显著降低企业的存储成本，提升数据的访问速度和系统响应时间。

2、为实现上述目的，本发明采用如下技术方案：

3、本发明提供了一种基于智能调度的冷热数据自动迁移方法，包括以下步骤：

4、基于迁移策略，在高性能存储设备和低成本存储设备之间进行冷热数据的迁移；

5、所述迁移策略基于智能调度算法和设备性能监控进行动态调整。

6、本发明的基于智能调度的冷热数据自动迁移方法，首先在日常工作中实时监控存储设备的各种指标，再基于存储设备的性能指标配合智能调度算法，来动态的调整迁移策略，基于这个动态的迁移策略对冷热数据进行迁移，确保了本方法在多样化的数据访问和存储模式下能够保持一定的处理能力，保持对冷热数据准确的识别和高效的迁移。

7、本发明的基于智能调度的冷热数据自动迁移方法通过智能调度算法和设备性能监控进行动态调整，以动态的迁移策略去适应数据访问模式的变化，实现更加精准的识别冷热数据，提高迁移的准确性和效率，显著降低企业的存储成本，提升数据的访问速度和系统响应时间。

8、在进一步的技术方案中，所述设备性能监控包括对高性能存储设备和低成本存储设备的读写速度、延迟、带宽监控。

9、对设备的读写速度、延迟、带宽进行监控，有利于智能调度算法精准进行动态的迁移策略调整，进一步的提升迁移的效率。

10、在进一步的技术方案中，所述设备性能监控还包括基于性能指标评估高性能存储设备和低成本存储设备的负载能力和剩余容量，为数据迁移提供资源分配依据。

11、准确的评估是准确进行资源分配的前置条件，基于性能指标对负载能力和剩余容量进行评估，有利于智能调度算法精准的进行动态的迁移策略调整，进一步的提升迁移的效率。

12、在进一步的技术方案中，所述智能调度算法包括基于迪杰斯特拉算法分析数据迁移的最佳路径。

13、基于迪杰斯特拉算法进行数据迁移路径规划，能够最快的完成数据迁移，进一步的提升数据迁移的效率。

14、在进一步的技术方案中，在冷热数据迁移的前后，通过加密签名的方式对数据进行一致性校验。

15、通过实时监控和错误处理机制，确保迁移过程的数据一致性和完整性，降低数据丢失风险。

16、有益效果在于：

17、1、本发明的基于智能调度的冷热数据自动迁移方法通过智能调度算法和设备性能监控进行动态调整，以动态的迁移策略去适应数据访问模式的变化，实现更加精准的识别冷热数据，提高迁移的准确性和效率，显著降低企业的存储成本，提升数据的访问速度和系统响应时间。

18、2、对设备的读写速度、延迟、带宽进行监控，有利于智能调度算法精准进行动态的迁移策略调整，进一步的提升迁移的效率。

19、3、准确的评估是准确进行资源分配的前置条件，基于性能指标对负载能力和剩余容量进行评估，有利于智能调度算法精准的进行动态的迁移策略调整，进一步的提升迁移的效率。

20、4、基于迪杰斯特拉算法进行数据迁移路径规划，能够最快的完成数据迁移，进一步的提升数据迁移的效率。

21、5、通过实时监控和错误处理机制，确保迁移过程的数据一致性和完整性，降低数据丢失风险。

技术特征：

1.一种基于智能调度的冷热数据自动迁移方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的基于智能调度的冷热数据自动迁移方法，其特征在于，所述设备性能监控包括对高性能存储设备和低成本存储设备的读写速度、延迟、带宽监控。

3.根据权利要求2所述的基于智能调度的冷热数据自动迁移方法，其特征在于，所述设备性能监控还包括基于性能指标评估高性能存储设备和低成本存储设备的负载能力和剩余容量，为数据迁移提供资源分配依据。

4.根据权利要求1所述的基于智能调度的冷热数据自动迁移方法，其特征在于，所述智能调度算法包括基于迪杰斯特拉算法分析数据迁移的最佳路径。

5.根据权利要求1所述的基于智能调度的冷热数据自动迁移方法，其特征在于，在冷热数据迁移的前后，通过加密签名的方式对数据进行一致性校验。

技术总结
本发明公开了一种基于智能调度的冷热数据自动迁移方法，包括以下步骤：基于迁移策略，在高性能存储设备和低成本存储设备之间进行冷热数据的迁移；所述迁移策略基于智能调度算法和设备性能监控进行动态调整，本发明的基于智能调度的冷热数据自动迁移方法通过智能调度算法和设备性能监控进行动态调整，以动态的迁移策略去适应数据访问模式的变化，实现更加精准的识别冷热数据，提高迁移的准确性和效率，显著降低企业的存储成本，提升数据的访问速度和系统响应时间。

技术研发人员：楚镇豪,魏飞,周文明
受保护的技术使用者：四川开物信息技术有限公司
技术研发日：
技术公布日：2025/1/6