一种集群数据资源成本的评估方法、装置及设备与流程

本申请涉及计算机，具体涉及一种集群数据资源成本的评估方法、装置及设备。

背景技术：

1、在大数据场景下，数据相关的业务快速发展，各种业务场景依靠集群资源实现，例如集群硬件资源。硬件可以用于搭建服务，承担计算任务，满足各种业务场景的需求。

2、集群数据资源成本用于表征集群硬件资源的使用情况，为了确定集群硬件资源的使用是否合理，目前亟需一套集群数据资源成本的评估方法。

技术实现思路

1、有鉴于此，本申请提供一种集群数据资源成本的评估方法、装置及设备，用于评估集群数据资源的使用是否合理。

2、为解决上述问题，本申请提供的技术方案如下：

3、第一方面，本申请提供一种集群数据资源成本的评估方法，所述方法包括：

4、获取用于评估集群数据资源成本的评估维度；所述集群数据资源成本包括数据存储资源成本和数据计算资源成本，所述评估维度包括存储评估维度和计算评估维度；

5、获取所述存储评估维度下的存储评估指标以及所述计算评估维度下的计算评估指标；所述存储评估指标包括无效数据存储资源成本在所述数据存储资源成本中的无效存储占比以及低效数据存储资源成本在所述数据存储资源成本中的低效存储占比，所述计算评估指标包括无效数据计算资源成本在所述数据计算资源成本中的无效计算占比以及低效数据计算资源成本在所述数据计算资源成本中的低效计算占比；

6、获取所述存储评估指标的指标值以及所述计算评估指标的指标值；

7、基于所述存储评估指标的指标值对所述数据存储资源成本进行评估，并基于所述计算评估指标的指标值对所述数据计算资源成本进行评估；

8、其中，所述无效数据存储资源成本为满足第一存储条件的数据存储资源成本，所述低效数据存储资源成本为满足第二存储条件的数据存储资源成本，所述无效数据计算资源成本为满足第一计算条件的数据计算资源成本，所述低效数据计算资源成本为满足第二计算条件的数据计算资源成本。

9、第二方面，本申请提供一种集群数据资源成本的评估装置，所述装置包括：

10、第一获取单元，用于获取用于评估集群数据资源成本的评估维度；所述集群数据资源成本包括数据存储资源成本和数据计算资源成本，所述评估维度包括存储评估维度和计算评估维度；

11、第二获取单元，用于获取所述存储评估维度下的存储评估指标以及所述计算评估维度下的计算评估指标；所述存储评估指标包括无效数据存储资源成本在所述数据存储资源成本中的无效存储占比以及低效数据存储资源成本在所述数据存储资源成本中的低效存储占比，所述计算评估指标包括无效数据计算资源成本在所述数据计算资源成本中的无效计算占比以及低效数据计算资源成本在所述数据计算资源成本中的低效计算占比；

12、第三获取单元，用于获取所述存储评估指标的指标值以及所述计算评估指标的指标值；

13、评估单元，用于基于所述存储评估指标的指标值对所述数据存储资源成本进行评估，并基于所述计算评估指标的指标值对所述数据计算资源成本进行评估；

14、其中，所述无效数据存储资源成本为满足第一存储条件的数据存储资源成本，所述低效数据存储资源成本为满足第二存储条件的数据存储资源成本，所述无效数据计算资源成本为满足第一计算条件的数据计算资源成本，所述低效数据计算资源成本为满足第二计算条件的数据计算资源成本。

15、第三方面，本申请提供一种电子设备，包括：

16、一个或多个处理器；

17、存储装置，其上存储有一个或多个程序，

18、当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现所述的集群数据资源成本的评估方法。

19、第四方面，本申请提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现所述的集群数据资源成本的评估方法。

20、由此可见，本申请具有如下有益效果：

21、本申请提供了一种集群数据资源成本的评估方法、装置及设备，将集群数据资源成本划分为数据存储资源成本和数据计算资源成本，并从存储评估维度来评估数据存储资源的使用情况，以及从计算评估维度来评估数据计算资源的使用情况，以使数据资源成本的评估更加合理化，更贴近实际情况。具体地，获取存储评估维度下的存储评估指标以及计算评估维度下的计算评估指标。其中，存储评估指标包括无效数据存储资源成本在数据存储资源成本中的无效存储占比以及低效数据存储资源成本在数据存储资源成本中的低效存储占比。无效数据存储资源成本为满足第一存储条件的数据存储资源成本，低效数据存储资源成本为满足第二存储条件的数据存储资源成本。计算评估指标包括无效数据计算资源成本在数据计算资源成本中的无效计算占比以及低效数据计算资源成本在数据计算资源成本中的低效计算占比。无效数据计算资源成本为满足第一计算条件的数据计算资源成本，低效数据计算资源成本为满足第二计算条件的数据计算资源成本。

22、基于此，获取存储评估指标的指标值以及计算评估指标的指标值，基于存储评估指标的指标值(即无效存储占比的比值以及低效存储占比的比值)对数据存储资源的使用情况进行评估，即对数据存储资源成本进行评估。同时基于计算评估指标的指标值(即无效计算占比的比值以及低效计算占比的比值)对数据计算资源的使用情况进行评估，即对数据计算资源成本进行评估。如此，在数据存储资源成本中区分无效存储和低效存储，在数据计算资源成本中区分无效计算和低效计算，能够使得数据存储资源成本和数据计算资源成本的评估维度更加完整和丰富，使得集群数据资源成本的评估更加精确，同时也能让用户更直观地感知数据资源的使用情况。

技术特征：

1.一种集群数据资源成本的评估方法，其特征在于，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

3.根据权利要求2所述的方法，其特征在于，所述无效级存储诊断指标包括以下一项或多项：

4.根据权利要求2或3所述的方法，其特征在于，所述基于所述存储诊断指标以及对应的指标值，确定所述存储评估指标的指标值，包括：

5.根据权利要求2或3所述的方法，其特征在于，所述基于所述计算诊断指标以及对应的指标值，确定所述计算评估指标的指标值，包括：

6.根据权利要求1所述的方法，其特征在于，所述方法还包括：

7.根据权利要求6所述的方法，其特征在于，所述存储观察指标包括以下一项或多项：

8.一种集群数据资源成本的评估装置，其特征在于，所述装置包括：

9.一种电子设备，其特征在于，包括：

10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-7中任一所述的集群数据资源成本的评估方法。

技术总结
本申请公开一种集群数据资源成本的评估方法、装置及设备，获取用于评估集群数据资源成本的存储评估维度下的存储评估指标和计算评估维度下的计算评估指标。存储评估指标包括无效数据存储资源成本在数据存储资源成本中的无效存储占比和低效数据存储资源成本在数据存储资源成本中的低效存储占比。计算评估指标包括无效数据计算资源成本在数据计算资源成本中的无效计算占比和低效数据计算资源成本在数据计算资源成本中的低效计算占比。基于存储评估指标的指标值对数据存储资源成本进行评估，基于计算评估指标的指标值对数据计算资源成本进行评估。如此，区分集群数据资源中的无效使用和低效使用，使得集群数据资源成本的评估更加精确。

技术研发人员：张文迟,李耀华,李文杰,崔超,刘宏斌
受保护的技术使用者：北京火山引擎科技有限公司
技术研发日：
技术公布日：2024/1/22