本发明涉及计算机技术领域,具体地说是一种基于mdc的支持异构的数据池化层、系统及其实现方法。
背景技术:
模块化数据中心(moduledatacenter,mdc)是基于云计算的新一代数据中心部署形式,为了应对云计算、虚拟化、集中化、高密化等服务器发展的趋势,其采用模块化设计理念,最大程度的降低基础设施对机房环境的耦合。集成了供配电、制冷、机柜、气流遏制、综合布线、动环监控等子系统,提高数据中心的整体运营效率,实现快速部署、弹性扩展和绿色节能。
mdc动环监控系统首先是一个多系统集成的综合系统,这是由它监控的对象及其特征所决定的。数据中心的监控对象包括:数据中心供配电动力状况及其相关设备、机房环境状况及其相关设备、机房空间物理安全状况及it相关设备。这些在数据中心承担不同功能的设备,类型多,数量多,参数多,连接多;而且它们自身也可以组成一个个相对独立的硬件系统。
图1为当前基础设施管理架构,每个厂家都有每个北向接口,接口类型不同,接口协议解析工作量大,而且设备点位定义也是孤立的,没有形成统一的标准。
从图1可知目前各厂家监控系统兼容性差,没有标准化协议,系统双方对接占用资源大,没有数据模型,不同厂家上报的信号点位、告警格式和名称都不一样。所以需要统一数据模型,提供标准化解决方案,提出数据池化层标准映射解决异构问题。
基于此,本发明提供一种基于mdc的支持异构的数据池化层、系统及其实现方法。
技术实现要素:
本发明的技术任务是针对以上不足之处,提供一种基于mdc的支持异构的数据池化层、系统及其实现方法。
一种基于mdc的支持异构的数据池化层,该数据池化层连接在南向接口与北向接口之间,其中南向接口用于接收监控数据信息,该数据池化层将监控数据进行协议封装后,通过北向接口发送到mdc管理平台中,该数据池化层配置有协议解析层、设备id规则、复杂事件处理模块,其中协议解析层、设备id规则解析监控数据传输采用的协议及id采用的数字排列方式,然后将包括信号信息、告警信息、控制信息、配置信息的监控信息发送到复杂事件处理模块,由复杂事件处理模块将所有的监控信息统一封装并发送给北向接口。
所述协议解析层解析的协议包括ipmi协议、redfish协议、snmp协议、smi-s协议以及数据封装后的传输协议tcp/udp协议、应用协议mqtt/http协议。
所述信号信息为设备监控信息,告警信息为设备发出的告警信息,控制信息为控制设备的信息,配置信息为设备管理配置信息。
所述数据池化层可通过以下方式传输数据,这里的传输数据是指接收并发送监控数据:断点续传方式、数据变化时主动上传、按周期主动上传、消息主动pull模式。
所述信息处理模块具体完成以下功能:
数据采集功能:即通过协议解析层和设备id规则,对各种被监控对象的采集数据,适配器采用的通信协议及通信接口,这里的通信接口包括rs232/422/485、rj45接口;
数据传输功能:通过轮询、主动上报两种数据传输方式,来支持上述南向接口、北向接口;
数据处理功能:即通过上述复杂事件处理模块,对数据采集上传的各种设备数据进行加工、分析和处理。
所述复杂事件处理模块还实现以下功能,数据存储、系统组态、系统告警分析和发送、记录系统日志、设置权限进行管理、提供系统报表、进行系统维护,所述系统组态功能包括:设备组态,即设备模板;页面组态,即页面模板;策略组态。
一种基于mdc的支持异构的数据池化层系统,包括mdc管理平台、数据池化层以及异构监控设备,异构监控设备的监控信息通过南向接口发送到数据池化层中,数据池化层将所有监控信息进行解析后统一封装,再通过北向接口发送到mdc管理平台中,该数据池化层用于将对不同厂家的硬件设备、it设备进行监控的异构信息进行解析适配相应的协议、接口后,封装成统一数据结构。
所述数据池化层配置有协议解析层、设备id规则、复杂事件处理模块,其中协议解析层、设备id规则解析监控数据传输采用的协议及id采用的数字排列方式,然后将包括信号信息、告警信息、控制信息、配置信息的监控信息发送到复杂事件处理模块,由复杂事件处理模块将所有的监控信息统一封装并发送给北向接口。
一种基于mdc的支持异构的数据池化层实现方法,其实现过程为:
首先通过南向接口接收异构监控数据信息,这里的异构监控数据信息是指对不同厂家的硬件设备、it设备进行监控的信息;
通过协议解析层、设备id规则解析监控数据传输采用的协议及id采用的数字排列方式,将包括信号信息、告警信息、控制信息、配置信息的监控信息发送到复杂事件处理模块;
复杂事件处理模块将所有的监控信息统一封装并发送给北向接口;
通过北向接口发送到mdc管理平台中,即模块化数据中心管理平台中。
所述协议解析层解析的协议包括ipmi协议、redfish协议、snmp协议、smi-s协议以及数据封装后的传输协议tcp/udp协议、应用协议mqtt/http协议。
本发明的一种基于mdc的支持异构的数据池化层、系统及其实现方法和现有技术相比,具有以下有益效果:
本发明的一种基于mdc的支持异构的数据池化层、系统及其实现方法,构建支持异构的基础砖块,数据层的相关工作定义了建设智能监控平台的基础砖块,即数据挖掘、控制通路、统一策略;提供标准化数据模型,使得不同厂家上报的信号点位、告警格式和名称均按同一标准执行;构建标准化的数据传输方式,设立标准化协议,系统双方对接,加上用户和厂家对接资源;可对监控异构对象,实用性强,适用范围广泛,具有很好的推广应用价值。
附图说明
附图1为现有技术中监控数据传输示意图。
附图2为本发明中实现示意图。
附图3为本发明监控数据传输示意图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步说明。
本发明设计基于mdc的支持异构的数据池化层,在mdc范畴里,采用融合架构,打造统一有机的生态圈,使动力、环境基础设施与it基础设施动态关联,做到数据中心完整的端到端动态管理,打破常规应用,降低pue。
本发明支持各厂家监控系统兼容性标准化协议,数据模型统一,提出数据池化层标准映射解决异构问题,构建浪潮智能化硬件的基础架构,同时构建了数据池化层,使mdc平台融合it管理,适合mdc模块化扩展,采用标准化接口协议与数据模型,通过建立标准的设备信号it规则,支持异构的不同数据中心基础设施及监控厂家。
如附图2、图3所示,一种基于mdc的支持异构的数据池化层,该数据池化层连接在南向接口与北向接口之间,其中南向接口用于接收监控数据信息,该数据池化层将监控数据进行协议封装后,通过北向接口发送到mdc管理平台中,该数据池化层配置有协议解析层、设备id规则、复杂事件处理模块,其中协议解析层、设备id规则解析监控数据传输采用的协议及id采用的数字排列方式,然后将包括信号信息、告警信息、控制信息、配置信息的监控信息发送到复杂事件处理模块,由复杂事件处理模块将所有的监控信息统一封装并发送给北向接口。
所述协议解析层解析的协议包括ipmi协议、redfish协议、snmp协议、smi-s协议以及数据封装后的传输协议tcp/udp协议、应用协议mqtt/http协议。
所述信号信息为设备监控信息,告警信息为设备发出的告警信息,控制信息为控制设备的信息,配置信息为设备管理配置信息。
所述数据池化层可通过以下方式传输数据,这里的传输数据是指接收并发送监控数据:断点续传方式、数据变化时主动上传、按周期主动上传、消息主动pull模式。
所述信息处理模块具体完成以下功能:
数据采集功能:即通过协议解析层和设备id规则,对各种被监控对象的采集数据,适配器采用的通信协议及通信接口,这里的通信接口包括rs232/422/485、rj45接口;
数据传输功能:通过轮询、主动上报两种数据传输方式,来支持上述南向接口、北向接口;
数据处理功能:即通过上述复杂事件处理模块,对数据采集上传的各种设备数据进行加工、分析和处理。
所述复杂事件处理模块还实现以下功能,数据存储、系统组态、系统告警分析和发送、记录系统日志、设置权限进行管理、提供系统报表、进行系统维护,所述系统组态功能包括:设备组态,即设备模板;页面组态,即页面模板;策略组态。
一种基于mdc的支持异构的数据池化层系统,包括mdc管理平台、数据池化层以及异构监控设备,异构监控设备的监控信息通过南向接口发送到数据池化层中,数据池化层将所有监控信息进行解析后统一封装,再通过北向接口发送到mdc管理平台中,该数据池化层用于将对不同厂家的硬件设备、it设备进行监控的异构信息进行解析适配相应的协议、接口后,封装成统一数据结构。
所述数据池化层配置有协议解析层、设备id规则、复杂事件处理模块,其中协议解析层、设备id规则解析监控数据传输采用的协议及id采用的数字排列方式,然后将包括信号信息、告警信息、控制信息、配置信息的监控信息发送到复杂事件处理模块,由复杂事件处理模块将所有的监控信息统一封装并发送给北向接口。
一种基于mdc的支持异构的数据池化层实现方法,其实现过程为:
首先通过南向接口接收异构监控数据信息,这里的异构监控数据信息是指对不同厂家的硬件设备、it设备进行监控的信息;
通过协议解析层、设备id规则解析监控数据传输采用的协议及id采用的数字排列方式,将包括信号信息、告警信息、控制信息、配置信息的监控信息发送到复杂事件处理模块;
复杂事件处理模块将所有的监控信息统一封装并发送给北向接口;
通过北向接口发送到mdc管理平台中,即模块化数据中心管理平台中。
所述协议解析层解析的协议包括ipmi协议、redfish协议、snmp协议、smi-s协议以及数据封装后的传输协议tcp/udp协议、应用协议mqtt/http协议。
1)在本发明中,数据池化层模型的数据传输机制要求:
断点续传机制;
数据变化主动上传机制cov;
按周期主动上传机制;
上层系统主动pull机制;
混合上传机制。
2)数据的负荷格式:
数据载体jason/自定义报文;
传输层协议tcp/udp;
应用层协议mqtt/http;
跨操作平台支持;
多编程语言支持。
3)该数据池化层可发送以下控制命令:
控制设备的某个部件,比如压缩机启停;
控制命令可靠性保证机制。
4)属性修改命令:
设备属性修改,设备名称、型号等;
属性信息同步的方式。
5)配置命令:
设备的增、删、改;
告警阈值配置;
数据存储方式的更改;
配置信息同步的方式。
6)本发明可监控的异构对象:超过100种动力环境设备,还包括不同的版本;
屏蔽完全不同的数据格式:各个监控、自控厂家有自己的数据格式定义;
屏蔽完全不同的传输协议:c接口、opc,webservice,socket,bacnet;
基本统一的监控对象:linux/服务器;
完全统一的数据格式:开发组自定义(cpu利用率/使用率、硬盘空间/容量);
完全统一的传输协议:开发组自定义(http/socket、jason/xml)。
通过上面具体实施方式,所述技术领域的技术人员可容易的实现本发明。但是应当理解,本发明并不限于上述的具体实施方式。在公开的实施方式的基础上,所述技术领域的技术人员可任意组合不同的技术特征,从而实现不同的技术方案。
除说明书所述的技术特征外,均为本专业技术人员的已知技术。