警示方法和装置、显示牌设备、计算机可读存储介质与流程

本申请涉及警示技术领域，特别是涉及一种警示方法和装置、显示牌设备、计算机可读存储介质。

背景技术：

随着电网的不断建设和完善，供电设备逐年增多，在人流密集地区的电力风险也随之增加。例如，人员误闯入带电设备的安全距离内或动物对回路电缆的咬食等，会危害人身安全或引起供电设备的短路，造成设备或停电事故等。

警示装置用于在危险地带进行警示作用，但是一般的警示装置仅仅只能通过图画对行人进行警示，警示效果较差。

技术实现要素：

本申请实施例提供一种警示方法、装置、显示牌设备、计算机可读存储介质，可以对行人或动物进行警示驱赶。

一种警示方法，应用于显示牌设备，所述显示牌设备包括红外线装置和毫米波装置，所述方法包括：

利用所述红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用所述毫米波装置采集所述入侵物对应的第二图像；

将所述第一图像和所述第二图像进行图像融合得到目标图像，根据所述目标图像获取所述入侵物的种类；

当所述入侵物的种类为人类时，获取所述入侵物对应的危险行为级别，根据所述危险行为级别确定所述显示牌设备的警示策略。

在其中一个实施例中，所述根据所述危险行为级别确定所述显示牌设备的警示策略，包括：

当所述危险行为级别为轻度危险时，确定的所述警示策略包括：控制所述显示牌设备显示提示信息；

当所述危险行为级别为中度危险时，确定的所述警示策略包括：控制所述显示牌设备显示提示信息并发出语音警告信号；

当所述危险行为级别为重度危险时，确定的所述警示策略包括：控制所述显示牌设备显示提示信息、发出语音警告信号并生成报警信号，所述报警信号用于通知工作人员对所述重度危险行为进行处理。

在其中一个实施例中，所述根据所述目标图像获取所述入侵物的种类，包括：利用第一神经网络识别所述目标图像获取所述入侵物的种类。

在其中一个实施例中，所述显示拍摄设备包括摄像设备，所述获取所述入侵物对应的危险行为级别，包括：

利用所述摄像设备获取所述人类危险行为对应的第三图像，将所述第三图像和所述目标图像进行图像融合得到检测图像；

利用第二神经网络对所述检测图像进行识别，获取所述检测图像中所述入侵物对应的危险行为级别。

在其中一个实施例中，所述入侵物的种类包括动物；所述方法还包括：当所述入侵物的种类为动物时，获取所述入侵物对应的动物类别；根据所述动物类别确定所述显示牌设备的警示策略。

在其中一个实施例中，所述显示设备包括声波发生装置，所述根据所述动物类别确定所述显示牌设备的警示策略，包括：根据所述动物类别控制所述声波发生装置发射与所述动物类别对应频率的驱逐信号，所述驱逐信号用于驱逐所述入侵物远离所述目标区域。

在其中一个实施例中，所述显示牌设备包括雷达装置，所述方法还包括：

当所述雷达装置检测到所述目标区域内出现入侵物时，触发所述红外线装置和所述毫米波装置开启，以使所述红外线装置采集所述第一图像、所述毫米波装置采集所述第二图像。

一种警示装置，应用于显示牌设备，所述显示牌设备包括红外线装置和毫米波装置，所述装置包括：

采集模块，用于利用所述红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用所述毫米波装置采集所述入侵物对应的第二图像；

获取模块，用于将所述第一图像和所述第二图像进行图像融合得到目标图像，根据所述目标图像获取所述入侵物的种类；

确定模块，用于当所述入侵物的种类为人类时，获取所述入侵物对应的危险行为级别，根据所述危险行为级别确定所述显示牌设备的警示策略。

一种显示牌设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如所述的警示方法的步骤。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如所述的方法的步骤。

上述警示方法和装置、显示牌设备、计算机可读存储介质，应用于显示牌设备，所述显示牌设备包括红外线装置和毫米波装置，所述方法包括：利用所述红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用所述毫米波装置采集所述入侵物对应的第二图像；将所述第一图像和所述第二图像进行图像融合得到目标图像，根据所述目标图像获取所述入侵物的种类；当所述入侵物的种类为人类时，获取所述入侵物对应的危险行为级别，根据所述危险行为级别确定所述显示牌设备的警示策略。本申请利用红外线装置和毫米波装置可以不分昼夜地对目标区域进行监测并采集入侵物对应的图像，利用第一图像和第二图像进行融合使得到的目标图像中入侵物的信息更加准确；根据入侵人类的危险行为等级进行自适应的适配警示策略使得警示动作更具备针对性，能够有效地驱逐入侵者停止危险动作并远离目标区域，从而提高警示效率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中警示方法的应用环境图；

图2为一个实施例中警示方法的流程图；

图3为一个实施例中步骤步骤根据危险行为级别确定显示牌设备的警示策略的流程图；

图4为一个实施例中步骤获取入侵物对应的危险行为级别的流程图；

图5为一个实施例中警示装置的结构框图；

图6为一个实施例中显示牌设备的结构框图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一图像称为第二图像，且类似地，可将第二图像称为第一图像。第一图像和第二图像两者都是图像，但其不是同一图像。

图1为一个实施例中警示方法的应用环境示意图。如图1所示，该应用环境包括显示牌设备10，显示牌设备10包括红外线装置110和毫米波装置120，通过利用红外线装置110采集目标线路下方的目标区域内入侵物对应的第一图像，利用毫米波装置120采集入侵物对应的第二图像；将第一图像和第二图像进行图像融合得到目标图像，根据目标图像获取入侵物的种类；当入侵物的种类为人类时，获取入侵物对应的危险行为级别，根据危险行为级别确定显示牌设备的警示策略。本申请利用红外线装置和毫米波装置可以不分昼夜地对目标区域进行监测并采集入侵物对应的图像；利用第一图像和第二图像进行融合，使得到的目标图像中入侵物的信息更加准确；根据入侵人类的危险行为等级进行自适应的适配警示策略使警示动作更具备针对性，能够有效地驱逐入侵者停止危险动作并远离目标区域，从而提高警示效率。

图2为一个实施例中警示方法的流程图。如图2所示，警示方法包括：步骤202至步骤206。其中，步骤202、利用红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用毫米波装置采集入侵物对应的第二图像。步骤204、将第一图像和第二图像进行图像融合得到目标图像，根据目标图像获取入侵物的种类。步骤206、当入侵物的种类为人类时，获取入侵物对应的危险行为级别，根据危险行为级别确定显示牌设备的警示策略。

其中，目标区域可为以警示装置为圆心，预设距离为半径的区域范围。其中，目标区域可以为50米、10米、100米以内的范围等。入侵物可以包括一切可自由活动的动物(例如，小鸟、猫、狗等)、人类(小孩、流浪者等)、车辆等。

具体的，显示牌设备包括红外线装置和毫米波装置。当目标区域内出现入侵物时，红外线装置和毫米波装置分别采集第一图像和第二图像。红外线装置采集第一图像的过程如下：利用红外线装置发射红外线至入侵物，入侵物反射红外线形成红外线回波，红外线装置对红外线回波进行分析、建模得到出入侵物对应的第一图像。毫米波装置采集第二图像的过程如下：利用毫米波装置发射毫米波信号至入侵物，入侵物反射毫米波信号形成毫米波回波，毫米波装置对毫米波回波进行分析、建模得到出入侵物对应的第二图像。将第一图像和第二图像进行特征点提取，并进行图像融合得到高质量的目标图像。目标图像包括入侵物的种类、形态、动作行为等信息。利用神经网络或者图像识别算法对目标图像中的物种进行识别获取入侵物的种类，入侵物的种类可以是人类、动物、植物、车辆等。当检测到入侵物的种类是人类时，根据人类的危险行为的等级确定出对应的警示策略。举例来说，可以根据入侵物的危险行为级别显示不同的提示语、播报不同的提示音或发出不同频率的超声波等。还可以是当入侵物的危险行为级别为轻度危险时，控制显示牌设备显示提示信息；入侵物的危险行为级别为中度危险时，控制显示牌设备显示提示信息并发出语音警告信号；当入侵物的危险行为级别为重度危险时，控制显示牌设备显示提示信息、发出语音警告信号并生成报警信号。

上述警示方法，应用于显示牌设备，显示牌设备包括红外线装置和毫米波装置，警示方法包括：利用红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用毫米波装置采集入侵物对应的第二图像；将第一图像和第二图像进行图像融合得到目标图像，根据目标图像获取入侵物的种类；当入侵物的种类为人类时，获取入侵物对应的危险行为级别，根据危险行为级别确定显示牌设备的警示策略。本申请利用红外线装置和毫米波装置可以不分昼夜地对目标区域进行监测并采集入侵物对应的图像，利用第一图像和第二图像进行融合使得到的目标图像中入侵物的信息更加准确；根据入侵人类的行为等级进行自适应的适配警示策略，使得警示动作更具备针对性，且能够有效地驱逐入侵者停止危险动作并远离目标区域，从而提高警示效率。

在其中一个实施例中，步骤根据危险行为级别确定显示牌设备的警示策略，包括：步骤302至步骤306。其中，步骤302、当危险行为级别为轻度危险时，确定的警示策略包括：控制显示牌设备显示提示信息；步骤304、当危险行为级别为中度危险时，确定的警示策略包括：控制显示牌设备显示提示信息并发出语音警告信号；步骤306、当危险行为级别为重度危险时，确定的警示策略包括：控制显示牌设备显示提示信息、发出语音警告信号并生成报警信号，报警信号用于通知工作人员对重度危险行为进行处理。

具体的，当入侵物的危险行为级别为轻度危险时，控制显示牌设备显示提示信息，如人类出现在目标区域，则显示牌设备显示提示信息如“注意安全，禁止踏入”等安全警示语，以提示入侵者远离该处区域。当危险行为级别为中度危险时，控制显示牌设备显示提示信息并发出语音警告信号，如人类出现在目标区域并靠近带电设备，显示牌设备显示“注意安全，远离设备”，并语音播报安全标语警示人类停止危险行为并远离危险区域。当危险行为级别为重度危险时，控制显示牌设备显示提示信息、发出语音警告信号并生成报警信号，报警信号用于通知工作人员对重度危险行为进行处理，如当人类进入目标区域偷窃设备时，显示牌设备显示提示信息和发出语音警告信号的同时生成报警信号，报警信号用于提示工作人员现出现重度危险行为，需及时查验现场并进行处理。

在其中一个实施例中，步骤根据目标图像获取入侵物的种类，包括：利用第一神经网络识别目标图像获取入侵物的种类。

具体的，第一神经网络能够对图像进行识别得到图像中入侵物的种类，如人类、动物、植物等。将目标图像输入至训练好的第一神经网络中，使得第一神经网络对目标图像进行识别并输出入侵物的种类。

在其中一个实施例中，显示拍摄设备包括摄像设备，步骤获取入侵物对应的危险行为级别包括：步骤402和步骤404。其中，步骤402、利用摄像设备获取人类危险行为对应的第三图像，将第三图像和目标图像进行图像融合得到检测图像。步骤404、利用第二神经网络对检测图像进行识别，获取检测图像中入侵物对应的危险行为级别。

具体的，第一图像和第二图像均为灰度图像，图像融合的目标图像也是灰度图像，对目标图像进行识别获取人类危险行为的效率不高。利用摄像设备获取彩色的第三图像，当夜晚的时候，可以将摄像设备与闪光灯配合使用获取彩色的第三图像。将第三图像和目标图像进行图像融合，获取的检测图像的质量高于目标图像，携带入侵物更多的信息。利用训练好的第二神经网络对检测图像进行识别，能够识别出检测图像中入侵物对应的危险行为，并且能够输出入侵物对应的危险行为的级别。

在其中一个实施例中，入侵物的种类包括动物；警示方法还包括：当入侵物的种类为动物时，获取入侵物对应的动物类别。根据动物类别确定显示牌设备的警示策略。

具体的，利用神经网络或者图像识别算法对目标图像中的物种进行识别获取入侵物的种类，当入侵物为动物时，进一步的可以获取入侵物的物种如飞禽类、猿类、猫科类、鼠类等。根据入侵物的种类确定显示牌设备的警示策略，如当入侵物为飞禽类可以发出鸣笛声驱逐，如猿类类可以提示工作人员进行驱逐等；还可以根据动物类别控制声波发生装置发射与动物类别对应频率的声波驱逐信号。

在其中一个实施例中，显示设备包括声波发生装置，根据动物类别确定显示牌设备的警示策略，包括：根据动物类别控制声波发生装置发射与动物类别对应频率的驱逐信号，驱逐信号用于驱逐入侵物远离目标区域。

具体的，利用动物物种识别模型对目标图像进行识别，该物种识别模型可基于卷积神经网络训练模型而成。基于训练而成的物种识别模型就可对目标图像进行识别，可以对应获取入侵动物的物种类别。每种动物对不同频率的超声波的敏感程度不同。根据动物类别控制声波发生装置发射与动物类别对应频率的驱逐信号，驱逐信号用于驱逐入侵物远离目标区域。入侵动物接收到对应频率的声波信号会感到轻微不适，由于动物趋利避害的本能将自动远离目标区域。

在其中一个实施例中，显示牌设备包括雷达装置，警示方法还包括：当雷达装置检测到目标区域内出现入侵物时，触发红外线装置和毫米波装置开启，以使红外线装置采集第一图像、毫米波装置采集第二图像。

具体的，显示牌设备包括雷达装置，雷达装置能够监测到目标区域，一旦雷达装置检测到目标区域内出现入侵物，则触发红外线装置开启并采集第一图像和毫米波装置开启并采集第二图像。当雷达装置检测到入侵物时才触发红外线装置和毫米波装置开启，而不需要使红外线装置和毫米波装置保持常开状态，能够节约显示牌设备功耗，降低成本。

应该理解的是，虽然图2-4的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2-4中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

图5为一个实施例的警示装置的结构框图。如图5所示，警示装置包括：采集模块502、获取模块504和确定模块506，其中，采集模块502用于利用红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用毫米波装置采集入侵物对应的第二图像。获取模块504，用于将第一图像和第二图像进行图像融合得到目标图像，根据目标图像获取入侵物的种类。确定模块506，用于当入侵物的种类为人类时，获取入侵物对应的危险行为级别，根据危险行为级别确定显示牌设备的警示策略。

具体的，警示装置利用采集模块502当目标区域内出现入侵物时，红外线装置和毫米波装置分别采集第一图像和第二图像。红外线装置采集第一图像的过程如下：利用红外线装置发射红外线至入侵物，入侵物反射红外线形成红外线回波，红外线装置对红外线回波进行分析、建模得到出入侵物对应的第一图像。毫米波装置采集第二图像的过程如下：利用毫米波装置发射毫米波信号至入侵物，入侵物反射毫米波信号形成毫米波回波，毫米波装置对毫米波回波进行分析、建模得到出入侵物对应的第二图像。利用获取模块504将第一图像和第二图像进行特征点提取，并进行图像融合得到高质量的目标图像。目标图像包括入侵物的种类、形态、动作行为等信息。利用神经网络或者图像识别算法对目标图像中的物种进行识别获取入侵物的种类，入侵物的种类可以是人类、动物、植物、车辆等。利用确定模块506当检测到入侵物的种类是人类时，根据人类的危险行为的等级确定出对应的警示策略。举例来说，可以根据入侵物的危险行为级别显示不同的提示语、播报不同的提示音或发出不同频率的超声波等。还可以是当入侵物的危险行为级别为轻度危险时，控制显示牌设备显示提示信息；入侵物的危险行为级别为中度危险时，控制显示牌设备显示提示信息并发出语音警告信号；当入侵物的危险行为级别为重度危险时，控制显示牌设备显示提示信息、发出语音警告信号并生成报警信号。

上述警示装置应用于显示牌设备，显示牌设备包括红外线装置和毫米波装置，警示装置利用红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用毫米波装置采集入侵物对应的第二图像；将第一图像和第二图像进行图像融合得到目标图像，根据目标图像获取入侵物的种类；当入侵物的种类为人类时，获取入侵物对应的危险行为级别，根据危险行为级别确定显示牌设备的警示策略。本申请利用红外线装置和毫米波装置可以不分昼夜地对目标区域进行监测并采集入侵物对应的图像，利用第一图像和第二图像进行融合使得到的目标图像中入侵物的信息更加准确；根据入侵人类的危险行为等级进行自适应的适配警示策略能够使得警示动作更具备针对性，能够有效地驱逐入侵者停止危险动作并远离目标区域，从而提高警示效率。

上述警示装置中各个模块的划分仅用于举例说明，在其他实施例中，可将警示装置按照需要划分为不同的模块，以完成上述警示装置的全部或部分功能。

关于警示装置的具体限定可以参见上文中对于警示方法的限定，在此不再赘述。上述警示装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

图6为一个实施例中显示牌设备的内部结构示意图。如图6所示，该终端包括通过系统总线连接的处理器、存储器和网络接口。其中，该处理器用于提供计算和控制能力，支撑整个显示牌设备的运行。存储器用于存储数据、程序等，存储器上存储至少一个计算机程序，该计算机程序可被处理器执行，以实现本申请实施例中提供的适用于显示牌设备的无线网络通信方法。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种警示方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。网络接口可以是以太网卡或无线网卡等，用于与外部的显示牌设备进行通信。该显示牌设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的警示装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行警示方法的步骤：

利用红外线装置采集目标线路下方的目标区域内入侵物对应的第一图像，利用毫米波装置采集入侵物对应的第二图像；

将第一图像和第二图像进行图像融合得到目标图像，根据目标图像获取入侵物的种类；

当入侵物的种类为人类时，获取入侵物对应的危险行为级别，根据危险行为级别确定显示牌设备的警示策略。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行警示方法。

本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(rom)、可编程rom(prom)、电可编程rom(eprom)、电可擦除可编程rom(eeprom)或闪存。易失性存储器可包括随机存取存储器(ram)，它用作外部高速缓冲存储器。作为说明而非局限，ram以多种形式可得，诸如静态ram(sram)、动态ram(dram)、同步dram(sdram)、双数据率sdram(ddrsdram)、增强型sdram(esdram)、同步链路(synchlink)dram(sldram)、存储器总线(rambus)直接ram(rdram)、直接存储器总线动态ram(drdram)、以及存储器总线动态ram(rdram)。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。