带前端分析的输电线路图像监测设备及分析方法与流程

本发明涉及输电线路智能监拍技术领域；具体涉及一种带前端分析的输电线路图像监测设备及分析方法。

背景技术：

近几年，随着经济的快速发展，高压输电线路越来越多，线路管控任务越来越繁重。当前，输电线路图像监测设备一般功能较单一，只负责线路拍照功能，对采集的数据和图像信息基本不做分析和处理，而是将数据发送到系统平台，由后端系统平台进行分析处理，实时性差。

技术实现要素：

为解决上述技术问题，本发明提供一种带前端分析的输电线路图像监测设备及分析方法，可对监控设备拍摄的现场图片进行实时分析，及时发现隐患信息，实时性高。

本发明所述带前端分析的输电线路图像监测设备，包括功能主板、控制板、接口扩展板及电源，所述电源为控制板供电，控制板与功能主板通信并为功能主板供电，功能主板集成有拍照模块、通信模块和cpu，功能主板内嵌云管理平台，所述云管理平台包括图像分析模块，所述图像分析模块采用基于深度学习的轻量化目标检方法对采集的图像进行隐患分析。

本发明控制板可采用stm8l151系列8位单片机实现，具有功耗低、资源丰富等优点，由控制板控制功能主板上电启动，功能主板由基于高通的soc套片方案实现，功能主板启动后通过通信模块(一般为4g模块)自动进行网络校时，获取当前系统时钟，同时与ftp服务器进行信息交互，获取开关机时间、拍照模块的拍照次数等信息，按照预先设定的工作方式进行定时拍照、传输，工作完成后转入休眠状态。拍照图片一般为jpeg格式，根据不同的客户需求可以设定不同的图片大小、分辨率等。功能主板和控制板之间通过uart传递信息，根据系统时间、设备开启关闭时间等参数，控制板按照预先设计的工作计划，到达设备启动工作时间后，控制功能主板上电，功能主板按照设定的工作方式对现场监测点进行拍照、图像上传。无拍照任务时设备进入低功耗模式，减少电能消耗。当控制板检测到关机时间后，切断功能主板电源。

优选地，所述轻量化目标检测方法步骤为：

s1、构建输电线路通道隐患图片样本集；

s2、在mxnet深度学习框架基础上，搭建轻量化目标检测模型；

s3、修改模型算子精度由32fp为16fp；

s4、根据kmean聚类算法计算anchor值，设计anchor值适配不同尺寸输出(将boundingbox回归损失函数由原来的iouloss计算改为giouloss损失)；

s5、轻量化目标检测模型初始化并利用混合精度进行训练，直至模型收敛；

s6、部署轻量化目标检测模型到云管理平台。

优选地，轻量化目标检测模型的搭建方法为：

在mxnet深度学习框架基础上搭建轻量化特征提取网络层，轻量化特征提取网络层包括卷积层、池化层和特征连接层，所述特征连接层包括一个两路密集层来得到不同尺度的感受野；其中，一路密集层采用一个3×3的卷积核，用于捕捉小尺寸目标，一路密集层采用2个3×3的卷积核的卷积核，用于捕捉大尺寸目标，在实际的图像分析过程中，大尺寸感受野用于分析图像中的目标存在尺寸占比较大的近景大目标，小尺寸感受野用于分析图像中的目标存在尺寸占比较小的远景小目标。特征连接层采用结构级联，对输入图像进行三层降采样特征提取，提取特征后，在进行特征检测前，加入轻量化的残差块(resblock)，以确保特征表达能力。

输电线路通道隐患图片样本集主要包含输电线路内塔吊、吊车、挖掘机等大型施工机械以及异物悬挂、烟火等隐患类型，轻量化目标检测模型部署到云管理平台后，由拍照模块采集图像并进行目标检测，轻量化目标检测模型图像输入尺寸416×416，在输出结果前，通过三层预测输出13×13×512，26×26×256，52×52×128，经过残差模块优化后，最终采用nms非极大值抑制算法过滤，得到最终检测结果，即隐患目标类型以及其所在的矩形框位置。

优选地，所述功能主板连接接口扩展板，由接口扩展板连接多个输电线路参数检测元件，云管理平台还包括状态评估模块，输电线路参数检测元件检测数据发送至状态评估模块，状态评估模块判断各输电线路参数检测元件采集的数据是否处于正常范围内，一旦有一项不在正常范围内，立即上传异常信息并预警。

优选地，所述功能主板连接接口扩展板，接口扩展板上设置多个可扩展硬件接口。

优选地，所述可扩展硬件接口包括无线通信接口、有线通信接口；无线通信接口包括433mhz、蓝牙、wifi或rfid接口中的一种或几种，例如，433mhz短距无线模块具有功耗低，可休眠，能够空中唤醒等优点，用作接收其它433mhz接口的采集设备，有线通信接口包括rs232和/或rs485接口，例如，rs485接口能够接入具有rs485通讯接口及协议的微气象数据并上传服务平台。

所述电源包括太阳能电池板和蓄电池，所述太阳能电池板通过电源转换模块为蓄电池供电，蓄电池通过电源控制电路连接至控制板，通过太阳能+蓄电池的供电方式实现对设备的供电。

优选地，所述可扩展硬件接口连接副机拍照设备，功能主板接收副机拍照设备拍摄的图片，采用深度学习的目标检测算法对副机拍照设备监控区域内的施工机械、山火等进行智能分析，并及时将分析结果推送给运维人员，副机拍照设备通过wifi接口扩展。

本发明还提供一种带前端分析的输电线路图像分析方法，在输电线路前端监控设备的功能主板内嵌分析单元，由分析单元对监控设备采集的图像信息采用基于深度学习的轻量化目标检方法对采集的图像进行隐患分析，基于深度学习的轻量化目标检方法包括以下步骤：

s1、构建输电线路通道隐患图片样本集；

s2、在mxnet深度学习框架基础上，搭建轻量化目标检测模型；

s3、修改模型算子精度由32fp为16fp；

s4、根据kmean聚类算法计算anchor值，设计anchor值适配不同尺寸输出，将boundingbox回归损失函数由原来的iouloss计算改为giouloss损失；

s5、轻量化目标检测模型初始化并利用混合精度进行训练，直至模型收敛；

s6、部署轻量化目标检测模型到云管理平台。

优选地，轻量化目标检测模型的搭建方法为：

在mxnet深度学习框架基础上搭建轻量化特征提取网络层，轻量化特征提取网络层包括卷积层、池化层和特征连接层，所述特征连接层包括一个两路密集层来得到不同尺度的感受野；其中，一路密集层采用一个3×3的卷积核，用于捕捉小尺寸目标，一路密集层采用2个3×3的卷积核的卷积核，用于捕捉大尺寸目标，在实际的图像分析过程中，大尺寸感受野用于分析图像中的目标存在尺寸占比较大的近景大目标，小尺寸感受野用于分析图像中的目标存在尺寸占比较小的远景小目标。

与现有技术相比，本发明具有以下有益效果：

本发明可对监控设备拍摄的现场图片进行实时分析，及时发现隐患信息，实时性高，通过接口扩展板可接入不同的智能设备，实现了对输电线路上不同的智能设备在同一平台的接入。

附图说明

图1实施例1结构框图。

图2基于深度学习的轻量化目标检方法流程图。

图3特征连接层级联结构图。

图4轻量化目标检测模型图。

具体实施方式

实施例1：

如图1所示，本发明所述带前端分析的输电线路图像监测设备，包括功能主板、控制板、接口扩展板及电源，所述电源为控制板供电，控制板与功能主板通信并为功能主板供电，功能主板集成有拍照模块、通信模块和cpu，功能主板内嵌云管理平台，所述云管理平台包括图像分析模块，所述图像分析模块采用基于深度学习的轻量化目标检方法对采集的图像进行隐患分析。

如图2所示，所述轻量化目标检测方法步骤为：

s1、构建输电线路通道隐患图片样本集；

s2、在mxnet深度学习框架基础上，搭建轻量化目标检测模型；

s3、修改模型算子精度由32fp为16fp；

s4、根据kmean聚类算法计算anchor值，设计anchor值适配不同尺寸输出，将boundingbox回归损失函数由原来的iouloss计算改为giouloss损失；

s5、轻量化目标检测模型初始化并利用混合精度进行训练，直至模型收敛；

s6、部署轻量化目标检测模型到云管理平台。

优选地，轻量化目标检测模型的搭建方法为：

在mxnet深度学习框架基础上搭建轻量化特征提取网络层，轻量化特征提取网络层包括卷积层、池化层和特征连接层，如图3-4所示，所述特征连接层包括一个两路密集层来得到不同尺度的感受野；其中，一路密集层采用一个3×3的卷积核，用于捕捉小尺寸目标，一路密集层采用2个3×3的卷积核的卷积核，用于捕捉大尺寸目标，在实际的图像分析过程中，大尺寸感受野用于分析图像中的目标存在尺寸占比较大的近景大目标，小尺寸感受野用于分析图像中的目标存在尺寸占比较小的远景小目标。特征连接层采用结构级联，对输入图像进行三层降采样特征提取，提取特征后，在进行特征检测前，加入轻量化的残差块(resblock)，以确保特征表达能力。

输电线路通道隐患图片样本集主要包含输电线路内塔吊、吊车、挖掘机等大型施工机械以及异物悬挂、烟火等隐患类型，轻量化目标检测模型部署到云管理平台后，由拍照模块采集图像并进行目标检测，轻量化目标检测模型图像输入尺寸416×416，在输出结果前，通过三层预测输出13×13×512，26×26×256，52×52×128，经过残差模块优化后，最终采用nms非极大值抑制算法过滤，得到最终检测结果，即隐患目标类型以及其所在的矩形框位置。功能主板连接接口扩展板，接口扩展板上设置多个可扩展硬件接口，可扩展硬件接口包括无线通信接口、有线通信接口；无线通信接口包括433mhz、蓝牙、wifi或rfid接口中的一种或几种，例如，433mhz短距无线模块具有功耗低，可休眠，能够空中唤醒等优点，用作接收其它433mhz接口的采集设备，有线通信接口包括rs232和/或rs485接口，例如，rs485接口能够接入具有rs485通讯接口及协议的微气象数据并上传服务平台。

电源包括太阳能电池板和蓄电池，所述太阳能电池板通过电源转换模块为蓄电池供电，蓄电池通过电源控制电路连接至控制板，通过太阳能+蓄电池的供电方式实现对设备的供电，其中太阳能板规格为20wdc12v的钢化玻璃板，蓄电池优先选用磷酸铁锂电池选择20ah6.4v，通过dc/dc转换给控制板供电，dc/dc采用ti公司的tps563200，具有3a电流输出。

可扩展硬件接口连接副机拍照设备，功能主板接收副机拍照设备拍摄的图片，采用深度学习的目标检测算法对副机拍照设备监控区域内的施工机械、山火等进行智能分析，并及时将分析结果推送给运维人员，副机拍照设备通过wifi接口扩展。

本发明控制板可采用stm8l151系列8位单片机实现，具有功耗低、资源丰富等优点，由控制板控制功能主板上电启动，功能主板由基于高通的soc套片方案实现，功能主板启动后通过通信模块(一般为4g模块)自动进行网络校时，获取当前系统时钟，同时与ftp服务器进行信息交互，获取开关机时间、拍照模块的拍照次数等信息，按照预先设定的工作方式进行定时拍照、传输，工作完成后转入休眠状态。拍照图片一般为jpeg格式，根据不同的客户需求可以设定不同的图片大小、分辨率等。功能主板和控制板之间通过uart传递信息，根据系统时间、设备开启关闭时间等参数，控制板按照预先设计的工作计划，到达设备启动工作时间后，控制功能主板上电，功能主板按照设定的工作方式对现场监测点进行拍照、图像上传。无拍照任务时设备进入低功耗模式，减少电能消耗。当控制板检测到关机时间后，切断功能主板电源。

实施例2：

本实施例在实施例1的基础上，为云管理平台增设了状态评估模块，功能主板连接接口扩展板，由接口扩展板连接多个输电线路参数检测元件，输电线路参数检测元件检测数据发送至状态评估模块，状态评估模块判断各输电线路参数检测元件采集的数据是否处于正常范围内，一旦有一项不在正常范围内，立即上传异常信息并预警。输电线路参数检测元件包括微气象传感器、杆塔倾斜检测传感器、震动传感器、温度传感器等，根据安装及使用场景的不同，选择合适的参数检测元件进行安装。

实施例3：

本实施例提供一种带前端分析的输电线路图像分析方法，在输电线路前端监控设备的功能主板内嵌分析单元，由分析单元对监控设备采集的图像信息采用基于深度学习的轻量化目标检方法对采集的图像进行隐患分析，基于深度学习的轻量化目标检方法包括以下步骤：

s1、构建输电线路通道隐患图片样本集；

s2、在mxnet深度学习框架基础上，搭建轻量化目标检测模型；

s3、修改模型算子精度由32fp为16fp；

s4、根据kmean聚类算法计算anchor值，设计anchor值适配不同尺寸输出，将boundingbox回归损失函数由原来的iouloss计算改为giouloss损失；

s5、轻量化目标检测模型初始化并利用混合精度进行训练，直至模型收敛；

s6、部署轻量化目标检测模型到云管理平台。

轻量化目标检测模型的搭建方法为：

在mxnet深度学习框架基础上搭建轻量化特征提取网络层，轻量化特征提取网络层包括卷积层、池化层和特征连接层，所述特征连接层包括一个两路密集层来得到不同尺度的感受野；其中，一路密集层采用一个3×3的卷积核，用于捕捉小尺寸目标，一路密集层采用2个3×3的卷积核的卷积核，用于捕捉大尺寸目标在实际的图像分析过程中，大尺寸感受野用于分析图像中的目标存在尺寸占比较大的近景大目标，小尺寸感受野用于分析图像中的目标存在尺寸占比较小的远景小目标。特征连接层采用结构级联，对输入图像进行三层降采样特征提取，提取特征后，在进行特征检测前，加入轻量化的残差块(resblock)，以确保特征表达能力。

输电线路通道隐患图片样本集主要包含输电线路内塔吊、吊车、挖掘机等大型施工机械以及异物悬挂、烟火等隐患类型，轻量化目标检测模型部署到云管理平台后，由拍照模块采集图像并进行目标检测，轻量化目标检测模型图像输入尺寸416×416，在输出结果前，通过三层预测输出13×13×512，26×26×256，52×52×128，经过残差模块优化后，最终采用nms非极大值抑制算法过滤，得到最终检测结果，即隐患目标类型以及其所在的矩形框位置。