基于能源数据采集后数据质量检测的方法与流程

文档序号:14155809阅读:1042来源:国知局

本发明涉及一种基于能源数据采集后数据质量检测的方法,可以被所有能源采集平台、系统使用,同时为各能源管理平台、系统所获取和应用。在能源管理解决方案中对能源计量设备的一种数据质量的监测,涉及所有分类能源计量领域,包括各种能源分类分项的设备,含电表、水表、气表、热能表、氧气表等。



背景技术:

在能源相关管理系统中,数据的质量一直是一个比较难解决的问题,主要表现在:设备层数据本身不稳定,设备故障导致的设备数据不按实际值上报的比例相当高;网络环境因素导致的数据上报值错位;设备所测量的环境不稳定,导致环境数据异常等。这些数据如果不进行屏蔽或有效的杜绝,直接影响能源相关管理系统的稳定性和实际使用数据计算的正确性。



技术实现要素:

本发明主要解决的问题是能源相关管理系统中数据采集后数据的质量监测问题,判断数据是否真实、有效、可用,判断所测量的环境是否异常。屏蔽因测量设备损坏、线路接错、通讯线路断链、设备数据跳变等引起的设备数据异常,同时可以监测所监测的环境数据是否正常合理,这些环境数据包含电压、电流等遥测数据,也包含正向有功电能等遥脉数据。

具体技术方案如下:

一种基于能源数据采集后数据质量检测的方法,在数据采集器获取系统设备的原始数据并发送给数据采集服务平台后,数据采集服务平台对获取的原始数据进行质量检测,其特征在于:首先根据系统设备设置数据的正常范围值,然后数据采集服务平台的数据质量检测模块将获取的原始数据与正常范围值进行比较,判断原始数据是否为正常状态;正常则进行入库操作,异常则通过接口供其他模块进行调用和处理。原始数据的类型包括遥脉数据、遥测数据、遥信数据、事件类型数据。数据质量检测模块在从数据采集器获取数据时进行数据质量的判断检测,或者在数据采集服务平台存储数据后进行数据质量的判断检测。

针对遥脉数据进行数据质量检测时,设置遥脉数据的正常范围值,包含最大值和最小值;数据质量检测模块在获取到原始数据后,判断目前遥脉数据为正常或非正常状态,进而判断设备本身功能是否正常或数据已经越限,正常则进行入库操作,异常则通过接口供其他模块进行调用和处理;同时对于正常状态的遥脉数据,计算固定粒度时间的实际使用值,通过与历史数据或预置设定值的对比获取增长比例或下降比例,与设定的增长比例或下降比例进行比较,其中对比的方式有:同比值、环比值、预设使用值。如果在正常范围,则进行入库操作;如果非正常范围,则通过接口供其他模块进行调用和处理。

针对遥测数据进行数据质量检测时,设置遥测数据的正常范围值,包含最大值和最小值;数据质量检测模块在获取到原始数据后,判断目前遥测数据为正常或非正常状态,进而判断设备所检测的环境数据是否超限和不正常,遥测数据正常则进行入库操作,异常则通过接口供其他模块进行调用和处理。

针对遥信数据、事件类型数据进行数据质量检测时,设置数据的正常范围值,数据质量检测模块在获取到原始数据后,判断数据为正常或非正常状态,正常则进行入库操作,异常则通过接口供其他模块进行调用和处理。

本发明的优点是:支持多种能源相关管理系统数据类型的原始数据、统计数据的质量判断,提高能源相关管理系统的数据质量分析手段,通过设备数据质量的监测,很容易找出系统数据问题的真正原因。同时对于各个数据类型的逻辑业务判断进行了程序的模块化处理,在后续增加数据类型的情况下,减少相关代码的重新编写,可以进行有效的复用。

针对遥脉数据,数据质量检测可以有效地监测出设备错误的遥脉示数,在设置设备初始遥脉值和设备最大遥脉值的情况,通过和系统中“告警管理”的联动,可以提供判断设备的质量有效依据;通过设备的不正常值可以判断是否需要更换设备的依据。

针对遥测数据,通过设置参数的范围,数据质量检测可以判断出目前遥测数据为正常或非正常状态,从而判断设备所检测的环境数据是否超限和不正常,如电网的电压、电流。

针对于遥信、事件类型的定义,数据质量检测方法可以有效屏蔽无用的网络数据,为后续的数据存储、数据有用性判断提供依据。

数据质量检测可以在页面上显示异常的数据值,同时给其他模块功能或第三方系统提供异常数据接口,做到异常数据共享。

附图说明

图1为遥测数据质量判断流程。

图2为遥脉数据质量判断流程。

图3为遥信、事件类型数据质量判断流程。

具体实施方式

下面结合附图对本发明内容作说明:

如图1所示,首先设置遥测数据的范围,包括最大值和最小值;获取遥测原始数据后与设置遥测数据范围进行比较,查看是否在设置值范围之内;如果在设置范围之内,这保存入库,如果不在,则调用异常处理接口,实现接口的调用和处理。

如图2所示,首先设置遥脉、统计数据的范围,包括最大值和最小值;获取遥脉原始数据后与设置遥脉数据范围进行比较,查看是否在设置值范围之内;如果在设置范围之内,则保存入库,如果不在,则调用异常处理接口,实现接口的调用和处理。对于符合原始数据范围的遥脉数据,统计固定粒度时间的实际使用值,将实际使用值与同比值、环比值、预设值进行比较获取上升或下降比例,查看这个比例是否在设置范围之内,如果在设置范围之内,实际使用值保存入库,如果不在,则调用异常处理接口,实现实际使用值接口的调用和处理。

如图3所示,首先设置遥信、事件数据的范围,包括最大值和最小值;获取遥信、事件原始数据后与设置遥测数据范围进行比较,查看是否在设置值范围之内;如果在设置范围之内,这保存入库,如果不在,则调用异常处理接口,实现接口的调用和处理。



技术特征:

技术总结
本发明公开了一种基于能源数据采集后数据质量检测的方法,包括以下内容:1)设置遥测的数据值范围,采集遥测后判断此数据是否超出范围,并进行相应处理;2)设置遥脉和实际使用值的范围,采集遥脉值后进行原始数据和实际使用值的判断和处理;3)设置遥信、事件类型的数据值范围,采集遥信、事件类型的数据判断此数据是否超出范围,并进行相应处理;本发明方法的优点是支持多种能源相关管理系统数据类型的原始数据、统计数据的质量判断,提高能源相关管理系统的数据质量分析手段,通过设备数据质量的监测,很容易找出系统数据问题的真正原因。同时对于各个数据类型的逻辑业务判断进行了程序的模块化处理。

技术研发人员:范平新
受保护的技术使用者:南京亚派软件技术有限公司
技术研发日:2017.10.20
技术公布日:2018.04.13
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1