一种设备异常语义识别方法、装置、设备及介质与流程

1.本发明涉及人工智能技术领域，尤其涉及一种设备异常语义识别方法、装置、设备及介质。


背景技术：

2.随着深度学习与自然语言技术在新能源、电力设备中的应用落地，对室外发电设备光伏组串的异常识别具有重要意义。现有技术中，仅考虑到发电设备本身数据异常识别，忽视了发电设备外部环境数据的考虑，并且也没有结合这两项发电设备数据异常识别。现阶段的发电设备本身数据主要通过传感器、智能仪表以及人工抽检进行获取，外部环境数据主要是气象数据和地震数据，在实际应用中，对于发电设备异常识别不仅需要考虑本身数据进行识别，还需要结合其外部环境数据识别。
3.因此，针对所获取内外数据对发电设备异常识别这一解决方案，亟需一种方案，用于获取文本数据的上下文语义信息、如何体现内外数据本身的内部相关性、内外数据间关联性及上下文信息的不同部分权重。


技术实现要素：

4.本发明提供一种设备异常语义识别的方法、装置、设备及介质，用以解决设备异常语义识别的数据单一，识别率不高的技术问题。
5.第一方面，本发明实施例提供一种设备异常语义识别的方法，包括：
6.获取设备的异常数据；
7.基于异常数据，通过预先训练好的神经网络模型得到文本特征；
8.根据文本特征，得到识别结果并展示。
9.在一种可能实施的方式中，本发明实施例提供的方法中，基于异常数据，通过预先训练好的神经网络模型得到文本特征，包括：
10.对异常数据进行句子建模，得到异常数据对应的词向量；
11.将词向量输入到预习训练好的神经网络模型，得到文本特征。
12.在一种可能实施的方式中，本发明实施例提供的方法中，根据文本特征，得到识别结果并展示，包括：
13.对文本特征进行特征融合，得到多模态融合特征，多模态融合特征用于表述单一模态数据的重要性和关联性；
14.基于多模态融合特征得到识别结果，并展示识别结果。
15.在一种可能实施的方式中，本发明实施例提供的方法中，在根据文本特征，得到识别结果并展示之前，包括：
16.通过注意力机制对文本特征进行处理。
17.在一种可能实施的方式中，本发明实施例提供的方法中，通过注意力机制对文本特征进行处理，包括：
18.将文本特征映射到共享语义空间，得到文本特征对应的相关性信息；
19.基于相关性信息，通过注意力机制对文本特征进行处理。
20.在一种可能实施的方式中，本发明实施例提供的方法中，神经网络模型采用以下步骤训练生成：
21.获取多个包含文本特征的样本数据；
22.基于样本数据、以及每个样本数据对应的训练标签，采用深度神经网络训练生成神经网络模型。
23.在一种可能实施的方式中，本发明实施例提供的方法中，得到识别结果并展示，包括：
24.得到识别结果；
25.在触发结果展示时，展示识别结果；
26.其中，触发结果展示的触发方式包括至少以下一种：指示灯提醒、文字提醒、语音提醒、外呼、短信送达、语音唤醒、显示屏展示。
27.第二方面，本发明实施例提供一种设备异常语义识别的装置，该装置包括：
28.获取单元，用于获取设备的异常数据；
29.处理单元，用于基于异常数据，通过预先训练好的神经网络模型得到文本特征；
30.识别单元，用于根据文本特征，得到识别结果并展示。
31.在一种可能实施的方式中，本发明实施例提供的装置中，处理单元具体用于：
32.对异常数据进行句子建模，得到异常数据对应的词向量；
33.将词向量输入到预习训练好的神经网络模型，得到文本特征。
34.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元具体用于：
35.对文本特征进行特征融合，得到多模态融合特征，多模态融合特征用于表述单一模态数据的重要性和关联性；
36.基于多模态融合特征得到识别结果，并展示识别结果。
37.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元具体用于：
38.通过注意力机制对文本特征进行处理。
39.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元具体用于：
40.将文本特征映射到共享语义空间，得到文本特征对应的相关性信息；
41.基于相相关性信息，通过注意力机制对文本特征进行处理。
42.在一种可能实施的方式中，本发明实施例提供的装置中，处理单元采样如下步骤训练神经网络模型：
43.获取多个包含文本特征的样本数据；
44.基于样本数据、以及每个样本数据对应的训练标签，采用深度神经网络训练生成神经网络模型。
45.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元具体用于：
46.得到识别结果；
47.在触发结果展示时，展示识别结果；
48.其中，触发结果展示的触发方式包括至少以下一种：指示灯提醒、文字提醒、语音提醒、外呼、短信送达、语音唤醒、显示屏展示。
49.第三方面，本发明实施例提供一种电子设备，包括：至少一个处理器、至少一个存储器以及存储在存储器中的计算机程序指令，当计算机程序指令被处理器执行时实现如本发明实施例第一方面所提供的方法。
50.第四方面，本发明实施例提供一种计算机可读存储介质，其上存储有计算机程序指令，当计算机程序指令被处理器执行时实现如本发明实施例第一方面所提供的方法。
51.利用本发明提供的设备异常语义的识别的方法、装置、设备及介质，具有以下有益效果：首先获取设备的异常数据，然后基于所述异常数据，通过预先训练好的神经网络模型得到文本特征，再根据所述文本特征，得到识别结果并展示。本发明通过对异常数据的处理，通过构建异构数据的多模态融合模型，提高了设备异常识别率和识别效率，不仅有效降低及减少设备的运营成本，而且避免出现设备异常漏报、误报、预警错报等，为新一代新能源智能运维提供了较好的解决案例。
附图说明
52.图1为本发明实施例提供的一种设备异常语义识别的方法的流程示意图；
53.图2为本发明实施例提供的一种设备异常语义识别的方法的具体流程示意图；
54.图3为本发明实施例提供的一种设备异常语义识别的方法的流程示意图；
55.图4为本发明实施例提供的一种设备异常语义识别的装置的结构示意图；
56.图5为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
57.为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部份实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
58.下面对文中出现的一些词语进行解释：
59.1、本发明实施例中术语“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b，可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
60.2、bilstm(bi-directional long short-term memory，bilstm)，一种神经网络模型，通常用于在自然语言处理任务中建模上下文信息。
61.3、注意力机制(attention mechanism)，源于对人类视觉的研究。在认知科学中，由于信息处理的瓶颈，人类会选择性地关注所有信息的一部分，同时忽略其他可见的信息。上述机制通常被称为注意力机制。
62.4、softmax函数，又称归一化指数函数。它是二分类函数sigmoid在多分类上的推广，目的是将多分类的结果以概率的形式展现出来。
63.随着深度学习与自然语言技术在新能源、电力设备中的应用落地，对室外发电设备光伏组串的异常识别具有重要意义。现有技术中，仅考虑到发电设备本身数据异常识别，忽视了发电设备外部环境数据的考虑，并且也没有结合这两项发电设备数据异常识别。现阶段的发电设备本身数据主要通过传感器、智能仪表以及人工抽检进行获取，外部环境数
据主要是气象数据和地震数据，在实际应用中，对于发电设备异常识别不仅需要考虑本身数据进行识别，还需要结合其外部环境数据识别。
64.因此，针对所获取内外数据对发电设备异常识别这一解决方案，亟需一种方案，用于获取文本数据的上下文语义信息、如何体现内外数据本身的内部相关性、内外数据间关联性及上下文信息的不同部分权重。
65.综合上述，本发明提出了一种设备异常语义识别方法、系统、装置及计算机设备，构建了异构数据的多模态融合模型对发电设备异常识别，提高了设备异常识别率和识别效率。
66.下面结合附图和实施例对本发明提供的设备异常语义的识别的方法、装置、设备及介质进行更详细地说明。
67.本发明实施例提供一种设备异常语义识别的方法，如图1所示，包括：
68.步骤101，获取设备的异常数据。
69.具体实施时，不仅获取设备本身的内部数据，还获取设备外部的环境数据。设备本身内部数据包括实时采集多种来源并进行数据处理，包括清洗及相应的数据解析。设备外部环境数据：实时采集到地震数据、气象数据，并进行数据解析及格式转化。
70.当然，还包括一些其他相关数据，例如光伏组串异常日期最近60天内数据，包括组串电流、电压和组串日异常标签，本发明实施例对此不作限定。
71.步骤102，基于异常数据，通过预先训练好的神经网络模型得到文本特征。
72.具体实施时，先对异常数据进行句子建模，得到异常数据对应的词向量，然后将词向量输入到预习训练好的神经网络模型，得到文本特征。
73.需要说明的是，神经网络模型采用以下步骤训练生成：
74.获取多个包含文本特征的样本数据，然后基于样本数据、以及每个样本数据对应的训练标签，采用深度神经网络训练生成神经网络模型。
75.步骤103，根据文本特征，得到识别结果并展示。
76.具体实施时，首先将文本特征映射到共享语义空间，得到文本特征对应的相关性信息，然后基于相关性信息，其中相关性信息用于体现文本特征的互关性与关联性。通过注意力机制对文本特征进行处理。再对文本特征进行特征融合，得到多模态融合特征，该多模态融合特征用于表述单一模态数据的重要性和关联性，最后基于多模态融合特征得到识别结果，并展示识别结果。
77.需要说明的是，触发方式包括但不限于以下一种或多种：指示灯提醒、文字提醒、语音提醒、外呼、短信送达、语音唤醒、显示屏展示等。
78.下面结合图2和图3，对本发明实施例提供的设备异常语义的识别的具体过程，进行详细说明：
79.步骤201，获取设备的异常数据。
80.具体实施时，不仅获取设备本身的内部数据，还获取设备外部的环境数据。设备本身内部数据包括实时采集多种来源并进行数据处理，包括清洗及相应的数据解析。设备外部环境数据：实时采集到地震数据、气象数据，并进行数据解析及格式转化。
81.当然，还包括一些其他相关数据，例如光伏组串异常日期最近60天内数据，包括组串电流、电压和组串日异常标签，本发明实施例对此不作限定。
82.步骤202，基于异常数据，通过预先训练好的神经网络模型得到文本特征。
83.首先对异构数据进行句子建模得到带有词性和位置的双词向量，便于被计算机处理的二进制向量。
84.再利用bilstm神经网络模型进行异构数据的文本编码得到带有上下文信息的文本特征。当然，这里也可以利用卷积神经网络cnn获得文本的局部和全局特征，也可以使用其他模型获取特征。
85.步骤203，将文本特征映射到共享语义空间，得到文本特征对应的相关性信息。
86.具体实施时，分别对异构数据所得的文本特征映射到共享语义空间，从而够较容易得到单一模态数据文本特征内部的相关性信息，其中相关性信息用于体现文本特征的互关性与关联性。
87.步骤204，通过注意力机制对文本特征进行处理。
88.具体实施时，获得文本交互特征，增加了文本特征的不同部分权重信息。
89.需要说明的是，为了得到异构数据的文本交互特征，通过需求设置不同的权重，经过注意力机制后较易得到带上下文信息和交互特征的不同部分权重信息。
90.步骤205，对文本特征进行特征融合，得到多模态融合特征。
91.在实施时，通过特征融合得到异构数据中单一模态数据文本交互特征和权重信息，用以表明异构数据中单一模态数据的重要性和关联性。
92.步骤206，基于多模态融合特征得到识别结果。
93.对得到多模态融合特征通过softmax函数，通过结果归一化操作还原大小等方式计算设备异常识别得分结果。
94.步骤207，展示识别结果。
95.具体实施时，对所得识别结果进行信息触发，需要说明的是，触发方式包括但不限于以下一种或多种：指示灯提醒、文字提醒、语音提醒、外呼、短信送达、语音唤醒、显示屏展示等。
96.上述步骤的具体实施流程如图3所示。
97.如图4所示，基于设备异常语义的识别的方法同样的发明构思，本发明还提供一种设备异常语义识别的装置，包括：
98.获取单元401，用于获取设备的异常数据；
99.处理单元402，用于基于异常数据，通过预先训练好的神经网络模型得到文本特征；
100.识别单元403，用于根据文本特征，得到识别结果并展示。
101.在一种可能实施的方式中，本发明实施例提供的装置中，处理单元402具体用于：
102.对异常数据进行句子建模，得到异常数据对应的词向量；
103.将词向量输入到预习训练好的神经网络模型，得到文本特征。
104.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元403具体用于：
105.对文本特征进行特征融合，得到多模态融合特征，多模态融合特征用于表述单一模态数据的重要性和关联性；
106.基于多模态融合特征得到识别结果，并展示识别结果。
107.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元403具体用于：
108.通过注意力机制对文本特征进行处理。
109.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元403具体用于：
110.将文本特征映射到共享语义空间，得到文本特征对应的相关性信息；
111.基于相关性信息，通过注意力机制对文本特征进行处理。
112.在一种可能实施的方式中，本发明实施例提供的装置中，处理单元402采样如下步骤训练神经网络模型：
113.获取多个包含文本特征的样本数据；
114.基于样本数据、以及每个样本数据对应的训练标签，采用深度神经网络训练生成神经网络模型。
115.在一种可能实施的方式中，本发明实施例提供的装置中，识别单元403具体用于：
116.得到识别结果；
117.在触发结果展示时，展示识别结果；
118.其中，触发结果展示的触发方式包括至少以下一种：指示灯提醒、文字提醒、语音提醒、外呼、短信送达、语音唤醒、显示屏展示。
119.另外，结合图1-图4描述的本发明实施例的设备异常语义的识别的方法和装置可以由电子设备来实现。图5示出了本发明实施例提供的电子设备的硬件结构示意图。
120.电子设备可以包括处理器501以及存储有计算机程序指令的存储器502。
121.具体地，上述处理器501可以包括中央处理器(cpu)，或者特定集成电路(application specific integrated circuit，asic)，或者可以被配置成实施本发明实施例的一个或多个集成电路。
122.存储器502可以包括用于数据或指令的大容量存储器。举例来说而非限制，存储器502可包括硬盘驱动器(hard disk drive，hdd)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(universal serial bus，usb)驱动器或者两个或更多个以上这些的组合。在合适的情况下，存储器502可包括可移除或不可移除(或固定)的介质。在合适的情况下，存储器502可在数据处理装置的内部或外部。在特定实施例中，存储器502是非易失性固态存储器。在特定实施例中，存储器502包括只读存储器(rom)。在合适的情况下，该rom可以是掩模编程的rom、可编程rom(prom)、可擦除prom(eprom)、电可擦除prom(eeprom)、电可改写rom(earom)或闪存或者两个或更多个以上这些的组合。
123.处理器501通过读取并执行存储器502中存储的计算机程序指令，以实现上述实施例中的任意一种设备异常语义识别的方法。
124.在一个示例中，电子设备还可包括通信接口503和总线510。其中，如图5所示，处理器501、存储器502、通信接口503通过总线510连接并完成相互间的通信。
125.通信接口503，主要用于实现本发明实施例中各模块、装置、单元和/或设备之间的通信。
126.总线510包括硬件、软件或两者，将电子设备的部件彼此耦接在一起。举例来说而非限制，总线可包括加速图形端口(agp)或其他图形总线、增强工业标准架构(eisa)总线、前端总线(fsb)、超传输(ht)互连、工业标准架构(isa)总线、无限带宽互连、低引脚数(lpc)总线、存储器总线、微信道架构(mca)总线、外围组件互连(pci)总线、pci-express(pci-x)总线、串行高级技术附件(sata)总线、视频电子标准协会局部(vlb)总线或其他合适的总线
或者两个或更多个以上这些的组合。在合适的情况下，总线510可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线，但本发明考虑任何合适的总线或互连。
127.该电子设备可以基于接收到的语音信息，执行本发明实施例中的设备异常语义的识别的方法，从而实现结合图1-图4描述的设备异常语义的识别的方法和装置。
128.另外，结合上述实施例中的电子设备，本发明实施例可提供一种计算机可读存储介质来实现。该计算机可读存储介质上存储有计算机程序指令；该计算机程序指令被处理器执行时实现上述实施例中的任意一种设备异常语义识别的方法。
129.利用本发明提供的设备异常语义的识别的方法、装置、设备及介质，具有以下有益效果：
130.首先获取设备的异常数据，然后基于所述异常数据，通过预先训练好的神经网络模型得到文本特征，再根据所述文本特征，得到识别结果并展示。本发明通过对异常数据的处理，通过构建异构数据的多模态融合模型，提高了设备异常识别率和识别效率，不仅有效降低及减少设备的运营成本，而且避免出现设备异常漏报、误报、预警错报等，为新一代新能源智能运维提供了较好的解决案例。
131.本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
132.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
133.这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
134.尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
135.显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。