存储扩容方法及装置、存储介质和电子设备与流程

文档序号:35625039发布日期:2023-10-05 21:43阅读:20来源:国知局
存储扩容方法及装置、存储介质和电子设备与流程

本申请涉及云存储,尤其涉及一种存储扩容方法及装置、存储介质和电子设备。


背景技术:

1、云存储是一种新兴的存储技术,是指通过分布式存储系统等功能,将网络中各种不同类型的存储设备集合起来,以共同对外提供数据存储和读取服务。目前的云存储系统在容量不足时,通常会新增存储节点来进行扩容。由于新增的存储节点会引起原有数据分布的失衡,为了继续保持数据均衡,云存储系统会触发内部的机制,重新计算数据的分布位置并将数据迁移至计算后的位置。迁移数据需要使用到节点中的中央处理单元、磁盘、网络等资源,而这些资源同时也在提供给存取服务,因此扩容会影响到存取服务,容易引起数据存取的卡顿与延迟,影响用户体验。


技术实现思路

1、本申请的主要目的是提供一种存储扩容方法及装置、存储介质和电子设备,可以有效减少存储扩容对数据存取服务的影响,有利于充分利用存储系统的资源。

2、一种存储扩容方法,应用于存储系统,所述方法包括:

3、当所述存储系统中的存储池新增存储节点时,根据所述存储系统当前正在提供的服务的磁盘空间占用情况,设定所述存储池的扩容目标;

4、按照所述扩容目标对所述存储池进行扩容,并调整所述存储池在不同时段下的扩容参数。

5、优选地,按照所述扩容目标对所述存储池进行扩容,包括:

6、对所述存储池中的各个所述存储节点的权重进行修改,并将所述存储池中原有的所述存储节点存储的待迁移数据迁移至新增的所述存储节点;

7、数据迁移完成后,判断所述存储池是否达到所述扩容目标;

8、若是,则停止数据迁移;

9、若否,则再次修改所述权重,并再次进行数据迁移,直至所述存储池达到所述扩容目标。

10、优选地,所述扩容目标包括所述存储池中的各个所述存储节点的目标权重,其中,目标权重表征所述存储节点在扩容后所要达成的总磁盘容量,和/或表征所述存储节点在扩容过程中的数据迁移量。

11、优选地,所述扩容参数包括数据迁移的速度;

12、所述调整所述存储池在不同时段下的扩容参数,包括以下步骤:

13、根据所述存储系统的服务忙碌状况设定尖峰时段和离峰时段;

14、当所述存储池处于所述尖峰时段时,对数据迁移速度进行限速;

15、当所述存储池处于所述离峰时段时,对数据迁移速度进行加速。

16、更进一步地,所述存储系统的服务忙碌状况根据所述存储池的历史流量和历史单位时间内磁盘的读写次数获得,其中,根据所述存储系统的服务忙碌状况设定尖峰时段和离峰时段,包括:

17、将服务繁忙的时段设定为所述尖峰时段;及

18、将服务空闲的时段设定为所述离峰时段。

19、一种存储扩容装置,包括:

20、扩容目标设定模块,用于在存储系统中的存储池新增存储节点时,根据所述存储系统当前正在提供的服务的磁盘空间占用情况,相应地设定所述存储池的扩容目标;

21、扩容模块,用于按照所述扩容目标对所述存储池进行扩容,直至所述存储池达成对应的扩容目标;

22、调整模块,用于在扩容的过程中调整所述存储池在不同时段下的扩容参数。

23、优选地,所述扩容模块包括:

24、权重修改模块,用于对所述存储池中的各个所述存储节点的权重进行修改;

25、数据迁移模块,用于在权重修改后,将所述存储池中原有的所述存储节点存储的待迁移数据迁移至新增的所述存储节点;

26、判断模块,用于数据迁移完成后,判断所述存储池是否达到所述扩容目标,在达到的情况下停止所述数据迁移模块的数据迁移,在未达到的情况下通过所述权重修改模块再次修改所述权重。

27、优选地,所述调整模块包括:

28、时段设定模块,用于根据所述存储系统的服务忙碌状况设定尖峰时段和离峰时段;

29、限速模块,用于在所述存储池处于所述尖峰时段时,对数据迁移速度进行限速;

30、加速模块,用于在所述存储池处于所述离峰时段时,对数据迁移速度进行加速。

31、一种计算机存储介质,所述计算机存储介质存储多条指令,所述多条指令适于由处理器加载并执行上述存储扩容方法。

32、一种电子设备,所述电子设备包括:处理器和用于存储多条指令的计算机存储介质;其中,所述处理器用于运行所述指令,以执行上述存储扩容方法。

33、与现有技术相比,本申请具有以下优点:

34、1、本申请存储扩容方法能够提供弹性的扩容策略。对于不同的应用或服务,可以相应地调整扩容时的数据迁移量,并且在扩容过程中,还可以基于不同的时段弹性地调整数据迁移的速度,使得存储系统可以在扩容和提供服务之间取得良好的平衡,避免因迁移的数据量过大或迁移速度过快而对服务造成影响,因此可以有效提升用户体验。

35、2、本申请存储扩容方法可以评估存储系统的状况来调整扩容目标和扩容参数,在服务忙碌时也能进行扩容,在服务空闲时可以加速扩容,使得本申请存储扩容方法可适用于存储系统的多种服务场景。

36、3、本申请存储扩容方法可以实现存储系统数据均衡,避免原有的存储节点负载过高而出现性能问题,最终影响到存储节点所存储的数据的可靠性和可用性。

37、4、本申请存储扩容方法可以在尖峰时刻采用舒缓的迁移策略,在离峰时刻采用积极的迁移策略,如此可以充分利用存储系统的资源,提高迁移的效率。



技术特征:

1.一种存储扩容方法,应用于存储系统,其特征在于,所述方法包括:

2.如权利要求1所述的存储扩容方法,其特征在于,按照所述扩容目标对所述存储池进行扩容,包括:

3.如权利要求1所述的存储扩容方法,其特征在于,所述扩容目标包括所述存储池中的各个所述存储节点的目标权重,其中,目标权重表征所述存储节点在扩容后所要达成的总磁盘容量,和/或表征所述存储节点在扩容过程中的数据迁移量。

4.如权利要求1所述的存储扩容方法,其特征在于,所述扩容参数包括数据迁移的速度;

5.如权利要求4所述的存储扩容方法,其特征在于,所述存储系统的服务忙碌状况根据所述存储池的历史流量和历史单位时间内磁盘的读写次数获得,其中,根据所述存储系统的服务忙碌状况设定尖峰时段和离峰时段,包括:

6.一种存储扩容装置,其特征在于,包括:

7.如权利要求6所述的存储扩容装置,其特征在于,所述扩容模块包括:

8.如权利要求6所述的存储扩容装置,其特征在于,所述调整模块包括:

9.一种计算机存储介质,其特征在于,所述计算机存储介质存储多条指令,所述多条指令适于由处理器加载并执行如权利要求1至5任一项所述的存储扩容方法。

10.一种电子设备,其特征在于,所述电子设备包括:处理器和用于存储多条指令的计算机存储介质;其中,所述处理器用于运行所述指令,以执行如权利要求1至5任一项所述的存储扩容方法。


技术总结
本申请公开了一种存储扩容方法及装置、存储介质和电子设备,其中存储扩容方法包括当存储系统中的存储池新增存储节点时,根据存储系统当前正在提供的服务的磁盘空间占用情况,相应地设定存储池的扩容目标,然后按照扩容目标对存储池进行扩容,并在扩容的过程中,弹性地调整存储池在不同时段下的扩容参数。如此可以有效减少存储扩容对服务的影响,有利于充分利用存储系统的资源。

技术研发人员:林俊贤,张简政晟
受保护的技术使用者:深圳富联富桂精密工业有限公司
技术研发日:
技术公布日:2024/1/15
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1