CN111723580B - 基于语音识别与图像识别的电力调度厂站信息图效验方法 - Google Patents

Abstract

本发明提供了一种基于语音识别与图像识别的电力调度厂站信息图效验方法，包括，通过语音识别符合专用话术的效验语音信息，得到第一识别信息；使用图片识别对所述第一厂站信息设备图进行识别得到第一设备信息集；若所述第一识别信息包括第二设备信息，则检索所述第一设备信息集，得到所述第二设备信息在厂站设备信息图中对应的所述第一状态信息，效验所述第一状态信息与第二状态信息一致与否，使用不同的展示规则对效验结果进行展示。通过专用话术以及语音识别和图片识别，大大提高了调度人员和厂站人员核对效率，给调度员提供了一种更自然，更便捷的操作方式进行电力生产调度的管理，简化大量的繁琐复杂输入过程。

Description

基于语音识别与图像识别的电力调度厂站信息图效验方法

技术领域

本发明涉及电力电网技术领域，尤其涉及一种基于语音识别与图像识别的电力调度厂站信息图效验方法。

背景技术

电力调度，是指电力调度机构为保障电网安全、优质、经济的运行，对电网运行进行的组织、指挥、指导和协调工作。随着经济社会的快速发展，电力电网各个组成部分的技术也随之快速发展。尤其是电网特高压直流密集接入，输送容量占送、受端系统规模的比重不断增大，电力结构的复杂程度越来越大，由此导致各级调度中心的任务负担也越来越重，为了保证调度操作的实时性和安全性，调度人员需要获取及处理的信息越来越多，对电力调度自动化系统的交互方式提出了更高的要求，以便快速准确地对电力调度厂站信息图效验。

现有技术中，电力调度自动化系统虽然已经大大降低了调度人员的工作强度。但是，切换调度管理操作频繁，尤其是调度人员在与厂站人员沟通调度信息内容的同时，还需要将所述调度信息通过键盘和鼠标与电力调度自动化系统进行交互，获取电力调度厂站信息，以查看相关设备的状态等信息。尤其是制定调度规则时，采用键盘和/或鼠输入的操作方式存在如下缺陷：一是操作过程繁琐，耗时长，效率低下；二是该操作方式友好度差，对调度人员的要求较高。这种单一的交互手段已无法满足现有电力调度自动化系统进行管理交互操作的需要。

因此，如何提供一种自然、快捷的电力调度基于语音识别与图像识别的电力调度厂站信息图效验方法，以简化电力调度自动化系统交互操作大量繁琐复杂的输入过程、提高调度效率，日益成为本领域技术人员亟待解决的技术问题之一。

需要说明的是，公开于该发明背景技术部分的信息仅仅旨在加深对本发明一般背景技术的理解，而不应当被视为承认或以任何形式暗示该信息构成已为本领域技术人员所公知的现有技术。

发明内容

本发明的目的在于克服上述现有技术的不足，提供一种基于语音识别与图像识别的电力调度厂站信息图效验方法，为调度人员提供更自然、更便捷的输入方式，工作复杂度，提高调度效率。

为实现上述目的，本发明通过以下技术方案予以实现：一种基于语音识别与图像识别的电力调度厂站信息图效验方法包括以下步骤，

S1：获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别，得到第一识别信息，其中，所述效验语音信息符合专用话术；

S2：若所述第一识别信息为第一厂站信息，则根据所述第一厂站信息获取对应的第一厂站设备信息图，并对所述第一厂站信息设备图进行识别得到第一设备信息集；其中，所述第一设备信息集包括若干个第一设备信息以及每个所述第一设备信息对应的第一状态信息；否则，执行步骤S3；

S3：若所述第一识别信息包括第二设备信息，则检索所述第一设备信息集，得到所述第二设备信息在厂站设备信息图中对应的所述第一状态信息，效验所述第一状态信息与第二状态信息是否一致，

若是，使用第一展示规则展示所述第一识别信息；

若否，使用第二展示规则展示所述第一识别信息；

其中，步骤S3中的所述第一识别信息还包括所述第二状态信息，所述第二状态信息为所述第二设备信息待效验的状态信息。

可选地，步骤S1中，所述效验语音信息包括调度人员的实时调度语音或厂站端与调度端效验通话的实时录音；

所述实时调度语音以及所述实时录音符合所述专用话术，所述专用话术包括效验信息的问答规则。

可选地，所述效验信息的问答规则还包括所述厂站信息、所述设备信息和/或所述状态信息在所述专用话术中出现的先后顺序。

可选地，步骤S1中，所述获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别的方法，包括，

语音识别模块识别所述效验通话的实时录音，得到所述效验文本信息；

根据所述效验语义词库，按照最大匹配规则，语义处理模块对所述效验文本信息进行分词处理得到若干个效验关键词；

根据所述效验信息的问答规则和所述效验关键词，所述语义处理模块对所述效验文本信息进行语义识别，得到所述第一识别信息。

可选地，所述效验语义词库包括若干个厂站信息、若干个效验业务关键词、若干个设备信息以及所述设备信息对应的状态信息。

可选地，所述效验业务关键词包括电力设备名，以及开关、刀闸、保护改跳、联跳、合环、并列和线路之中的一个或多个。

可选地，在步骤S1之前，还包括，从效验日志中收集若干历史效验录音，以及根据所述历史效验录音，使用关键词抽取方法，提取关键词，得到所述效验语义词库；

和/或

根据所述历史效验录音和预设话术模型，得到所述效验信息的问答规则；

其中，所述效验日志包括预设时间段内的厂站月测录音。

可选地，还包括，根据所述厂站信息、所述设备信息、所述效验关键词在所述效验日志中出现的频率高低，设定所述厂站信息、所述设备信息和/或所述效验业务关键词在所述效验语义词库中的优先级。

可选地，步骤S2中，若所述第一识别信息为第一厂站信息，则根据所述第一厂站信息获取对应的厂站设备信息图，并对所述厂站信息设备图进行识别得到第一设备信息集的方法，包括，

根据所述第一厂站信息，在厂站设备信息图库中检索得到所述第一厂站信息对应的所述厂站设备信息图；

根据所述效验语义词库，图片识别模块对所述厂站设备信息图的不同位置进行识别，得到若干个所述第一设备信息及其对应的所述第一状态信息。

可选地，步骤S3中，还包括在显示设备上突出显示所述第二设备信息；

其中，所述第一展示规则包括所述第一状态信息和所述第二状态信息使用相同的显示风格；所述第二展示规则包括所述第一状态信息和所述第二状态信息使用不同的显示风格；

和/或

若所述第一状态信息与所述第二状态信息不一致，还包括，

将所述厂站设备信息图中所述第二设备信息对应的所述第一状态信息更新为所述第二状态信息。

与现有技术相比，本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法具有以下有益效果：

本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法，获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别，得到第一识别信息；通过语音识别和语义处理替换当前重复、繁琐的键盘及鼠标的输入方式将调度人鱼的调度语音信息直接转换为调度操作信息，不仅减轻了调度员的工作负担，而且能够节省调度员人工输入的时间，大大提高了调度效率；进一步地，所述效验语音信息符合专用话术所述专用话术，减少了语音识别的干扰信息，提高了效验工作效率，简化了调用流程；若所述第一识别信息为第一厂站信息，则根据所述第一厂站信息获取对应的第一厂站设备信息图，并对所述第一厂站信息设备图进行识别得到第一设备信息集；其中，所述第一设备信息集包括若干个第一设备信息以及每个所述第一设备信息对应的第一状态信息，通过图片识别能够快速地获得调度厂站信息，能够根据图片识别结果正确提取第一设备信息与状态信息；更进一步地，若所述第一识别信息包括第二设备信息，则检索所述第一设备信息集，得到所述第二设备信息在厂站设备信息图中对应的所述第一状态信息，效验所述第一状态信息与第二状态信息是否一致，若是，使用第一展示规则展示所述第一识别信息；若否，使用第二展示规则展示所述第一识别信息。不同的效验结果不同的展示规则，从而方便调度人员对厂站信息进行更快速便捷地效验。

由此可见，本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法，突破了传统调度系统交互手段的单一化的局限，在程序中配置图片识别，方便设备信息的更换或者厂站信息变化的及时效验。减少调度人员重新查找的频率。给调度人员提供一种更加自然、有效的操作手段。简化了大量的繁琐复杂的输入过程，提高了工作效率，降低了出错几率。

附图说明

图1为本发明其中一个实施例提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法流程图；

图2为本发明另一实施例提供的一种基于语音识别与图像识别的电力调度厂站信息图效验装置结构示意图；

图3为应用本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法的其中一个应用场景示意图；

图4为语音识别在图3所示场景所在项目的使用流程图；

图5为图像识别在图3所示场景所在项目的使用流程图；

其中，附图标记说明如下：

100-效验语音获取单元，110-语音识别模块，120-语义处理模块，200-厂站信息获取单元，210-图片识别模块，300-厂站信息图效验单元；

R-厂站人员，S-调度人员。

具体实施方式

为使本发明的目的、优点和特征更加清楚，以下结合附图对本发明提出的一种基于语音识别与图像识别的电力调度厂站信息图效验方法作进一步详细说明。显然地，本文所述的方法包括一系列步骤，且本文所呈现的这些步骤的顺序并非必须是可执行这些步骤的唯一顺序，且一些所述的步骤可被省略和/或一些本文未描述的其他步骤可被添加到该方法。进一步地，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

为了便于理解本发明，先大致介绍本发明提供的一种厂站信息图效验的整体流程，再对每个步骤分别详细描述。

本实施例提供了一种基于语音识别与图像识别的电力调度厂站信息图效验方法，如附图1所述，包括以下步骤：

S1：获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别，得到第一识别信息，其中，所述效验语音信息符合专用话术。

S2：若所述第一识别信息为第一厂站信息，根据第一识别信息，通过图片识别，获取第一设备信息集。即根据所述第一厂站信息获取对应的第一厂站设备信息图，并对所述第一厂站信息设备图进行识别得到第一设备信息集；其中，所述第一设备信息集包括若干个第一设备信息以及每个所述第一设备信息对应的第一状态信息；否则，执行步骤S3。

S3：若所述第一识别信息包括第二设备信息，即检索所述第一设备信息集，得到所述第二设备信息在厂站设备信息图中对应的所述第一状态信息，效验所述第一状态信息与第二状态信息是否一致，若是，使用第一展示规则展示所述第一识别信息；若否，使用第二展示规则展示所述第一识别信息；其中，步骤S3中的所述第一识别信息还包括所述第二状态信息，所述第二状态信息为所述第二设备信息待效验的状态信息。

优选地，在其中一种示例性实施方式中，步骤S1中，所述效验语音信息包括调度人员的实时调度语音或厂站端与调度端效验通话的实时录音；所述实时调度语音以及所述实时录音符合所述专用话术，所述专用话术包括效验信息的问答规则，比如一个提问，一个回答。具体地，在其中一种示例性实施方式中，所述问答规则包括开场话术、效验内容话术和结束话术，其中，所述开场话术包括效验开始节点标识以及效验开始应答标识；所述效验内容话术包括效验信息标识以及效验应答标识；所述结束话术包括效验结束节点标识以及效验结束应答标识。进一步地，所述问答规则还包括所述开始话术、所述效验内容话术和所述结束话术中的话术关键词均来自所述效验语义词库。再进一步地，所述话术规则还包括所述厂站信息、所述设备信息和/或所述状态信息在所述专用话术中出现的先后顺序。比如，先汇报所述厂站信息，再汇报所述设备信息以及所述状态信息。所述专用话术不仅为所述实时调度语音以及所述厂站端与调度端效验通话提供了通话内容模板，还进一步地对语音内容予以规范；有效剔除了电力调度过程中与厂站信息图效验无关的通话内容，在提高通话效率的同时，能够显著减少后续语音识别中不必要的信息干扰，降低了后续语音识别的难度；更进一步地，所述专用话术规范了效验语音中的话术关键字来自所述效验语义词库。

优选地，在其中一种示例性实施方式中，步骤S1中，所述获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别的方法，包括，语音识别模块识别所述效验通话的实时录音，得到所述效验文本信息；根据所述效验语义词库，按照最大匹配规则，语义处理模块对所述效验文本信息进行分词处理得到若干个效验关键词；根据所述效验信息的问答规则和所述效验关键词，所述语义处理模块对所述效验文本信息进行语义识别，得到所述第一识别信息。

优选地，在其中一种示例性实施方式中，所述效验语义词库包括若干个厂站信息、若干个效验业务关键词、若干个设备信息以及所述设备信息对应的状态信息。较佳地，所述效验业务关键词包括但不限于电力设备名，以及开关、刀闸、保护改跳、联跳、合环、并列和线路之中的一个或多个。所述效验业务关键词还可以为电力专业专用术语，也可以是厂站与终端约定的自定义用语或常用热词。应该可以理解，本发明对所述效验语义词库中的具体内容不作限制，本领域的技术人员应根据实际工况需要设定。

优选地，在其中一种示例性实施方式中，在步骤S1之前，还包括，从效验日志中收集若干历史效验录音，在其中一种方式中，根据所述历史效验录音，使用关键词抽取方法，提取高频关键词，得到所述效验语义词库；进一步地，在又一实施方式中，还进一步地根据所述历史效验录音和预设话术模型，得到所述效验信息的问答规则。所述预设话术模型可以根据厂站信息图效验内容的相似度确定，不同类别的效验内容采用不同的问答规则，比如效验设备是否处于开启状态的采用同一问答规则；效验设备负荷状态的采用另一问答规则等。从调度人员的电话录音中生成专用话术进行程序核验，大大提高了调度人员和厂站人员核对效率，给调度员提供了一种更自然，更便捷的操作方式进行电力生产调度的管理。特别地，本发明不限定关键词抽取的具体方法，比如按照一定的逻辑使用传统的无监督的关键词抽取算法，或者利用训练好的可编码神经网络模型，或者有调度人员根据实际工况要求设定等等。相应地，本发明也不限定所述得到所述效验信息的问答规则的方法，比如，在又一实施方式中，甚至可以根据调度员的调度习惯确定。

较佳地，在其中一种示例性实施方式中，所述效验日志包括预设时间段内的厂站月测录音。其中，所述预设时间段可以为半年、一年等。

优选地，在其中一种示例性实施方式中，还包括根据所述厂站信息、所述设备信息、所述效验关键词在所述效验日志中出现的频率高低，设定所述厂站信息、所述设备信息和/或所述效验业务关键词在所述效验语义词库中的优先级。比如出现频率越多、优先级越高；在另一实施方式中，还可以结合每个调度人员的调度习惯，对所述效验语义词库进行更新维护。

优选地，在其中一种示例性实施方式中，步骤S2中，若所述第一识别信息为第一厂站信息，则根据所述第一厂站信息获取对应的厂站设备信息图，并对所述厂站信息设备图进行识别得到第一设备信息集的方法，包括，根据所述第一厂站信息，在厂站设备信息图库中检索得到所述第一厂站信息对应的所述厂站设备信息图；根据所述效验语义词库，图片识别模块对所述厂站设备信息图的不同位置进行识别，得到若干个所述第一设备信息及其对应的所述第一状态信息。

具体地，在其中一种示例性实施方式中，若所述电力调度自动化系统负责A、B和C三个厂站的电力设备调度，其中A厂站有A1、A2和A3三个电力设备，B厂站有B1、B2、B22和B3四个电力设备，C厂站有C1和C2两个电力设备。若要对所述B厂站中的电力设备进行效验，所述第一识别信息为所述B厂站，所述厂站设备信息图库包括A、B和C三个厂站的设备信息图；得到的述第一厂站设备信息图为所述B厂站对应的设备信息图；若干个第一设备信息分别为B1、B2、B22和B3四个电力设备的信息；若干个第一状态信息分别为电力设备B1的状态B1-1、电力设备B2的状态B2-1、电力设备B22的状态B22-1以及电力设备B3的状态B3-1。所述状态包括开启、关闭或未启用或具体的负荷值等。若所述第一识别信息为B22，则得到所述电力设备B22对应的状态信息B22-1。

优选地，在其中一种示例性实施方式中，步骤S3中，还包括在显示设备上突出显示所述第二设备信息；其中，所述第一展示规则包括所述第一状态信息和所述第二状态信息使用相同的显示风格；所述第二展示规则包括所述第一状态信息和所述第二状态信息使用不同的显示风格。比如，基于前述示例，若在所述厂站设备信息图中所述电力设备B22的状态为B22-1，在所述第一识别信息中所述电力设备B22的状态为B22-2，则在展示所述B厂站的设备信息时，所述电力设备B22使用高亮显示，比如所述电力设备B1、所述电力设备B2和所述电力设备B3使用黑色展示，而所述电力设备B22使用蓝色展示；由于所述B厂站设备信息图中所述电力设备B22的状态B22-1与第一识别信息中所述电力设备B22的状态B22-2不一致，因此，状态B22-1和B22-1在展示是使用不同的颜色比如红色和黄色。显然，使用不同的颜色展示仅是展示风格的一种，在其他的实施方式中也可以使用不同的字体、字号、图片模式等，不再一一赘述，但均在本发明的保护范围之内。本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法，在页面中突出显示设备信息，设备信息在效验过程中，不断更新当前识别过程中的厂站信息图，并使用不同颜色区分语音识别状态与图片识别状态的一致情况。更加直观方便的帮助调度人员的效验。

优选地，在其中一种示例性实施方式中，步骤S3中，若所述第一状态信息与所述第二状态信息不一致，还包括，将所述厂站设备信息图中所述第二设备信息对应的所述第一状态信息更新为所述第二状态信息。若在所述厂站设备信息图中所述电力设备B22的状态为B22-1，在所述第一识别信息中所述电力设备B22的状态为B22-2，则将所述电力设备B22的状态B22-1更新为B22-2。

综上所述，本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法，获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别，得到第一识别信息；通过语音识别和语义处理替换当前重复、繁琐的键盘及鼠标的输入方式将调度人鱼的调度语音信息直接转换为调度操作信息，不仅减轻了调度员的工作负担，而且能够节省调度员人工输入的时间，大大提高了调度效率；进一步地，所述效验语音信息符合专用话术所述专用话术，减少了语音识别的干扰信息，提高了效验工作效率，简化了调用流程；若所述第一识别信息为第一厂站信息，则根据所述第一厂站信息获取对应的第一厂站设备信息图，并对所述第一厂站信息设备图进行识别得到第一设备信息集；其中，所述第一设备信息集包括若干个第一设备信息以及每个所述第一设备信息对应的第一状态信息，通过图片识别能够快速地获得调度厂站信息，能够根据图片识别结果正确提取第一设备信息与状态信息；更进一步地，若所述第一识别信息包括第二设备信息，则检索所述第一设备信息集，得到所述第二设备信息在厂站设备信息图中对应的所述第一状态信息，效验所述第一状态信息与第二状态信息是否一致，若是，使用第一展示规则展示所述第一识别信息；若否，使用第二展示规则展示所述第一识别信息。不同的效验结果使用不同的展示规则，从而方便调度人员对厂站信息进行更加快速和便捷地效验。

由此可见，本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法，突破了传统调度系统交互手段的单一化的局限，在程序中配置图片识别，方便设备信息的更换或者厂站信息变化的及时效验。减少调度人员重新查找的频率。给调度人员提供一种更加自然、有效的操作手段。简化了大量的繁琐复杂的输入过程，提高了工作效率，降低了出错几率。

基于同一发明构思，本发明的又一实施例还提供了一种厂站信息图效验装置，如附图2所示，包括：

效验语音获取单元100：包括语音识别模块110和语义处理模块120，被配置为获取效验语音信息，根据效验语义词库，所语音识别模块用于识别所述效验语音信息得到效验文本信息；所述语义处理模块用于对所述效验文本信息进行语义识别，得到第一识别信息。

厂站设备信息获取单元200，包括图片识别模块210，被配置根据第一厂站信息获取对应的第一厂站设备信息图，所述图片识别模块210用于对所述第一厂站信息设备图进行识别得到第一设备信息集；其中，所述第一设备信息集包括若干个第一设备信息以及每个所述第一设备信息对应的第一状态信息。

厂站信息图效验单元300：被配置使用第二设备信息检索所述第一设备信息集，用于得到所述第二设备信息在厂站设备信息图中对应的所述第一状态信息，还用于效验所述第一状态信息与第二状态信息是否一致，若是，使用第一展示规则展示所述第一识别信息；若否，使用第二展示规则展示所述第一识别信息；其中，所述第二状态信息为所述第二设备信息待效验的状态信息。

进一步地，参见附图3、图4和图5，其中图3为应用本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法的其中一个应用场景示意图。从图中可以看出，厂站人员R请求调度人员S进行厂站设备信息图效验时，所述调度人员S启动本发明提供的一种基于语音识别与图像识别的电力调度厂站信息图效验方法，效验模块获取单元获取效验语音信息，并经由所述语音识别模块110和语义处理模块120对电话通话实时识别，得到第一识别信息，从第一识别信息中获取第一厂站信息；所述厂站信息获取单元200的图片识别模块210从电厂信息设备库中提取信息得到第一设备信息集。较佳地，如果要效验的第一识别信息中含有第二设备信息，在对图片设备模块210识别得到的第一设备信息集进行缓存，以供厂站信息图效验单元300进行效验，并将效验结果展示给所述调度人员S。毫无疑义地，调度人员S所在的调度端需要具备话筒、录音模块等语音获取模块。

在本应用场景所在的项目中，参见附图4所示，语音识别模块的使用流程大致如下：首先，根据历史效验录音，比如厂站月测录音文件，提取高频关键词，得到效验语义词库；根据所述月测录音文件，分析其测试流程，根据预设话术模型，得到专用话术，从而规范效验语音的规则。根据厂站月测录音，提取关键设备标识信息，包括开关、刀闸、保护改跳、联跳、合环、并列、线路、设备名等专业用语，得到所述语义处理模块。根据词出现频率越多、优先级越高的原则，并结合每个调度人员的调度习惯，对所述效验语义词库更新维护。

然后，在具体效验时，根据所述专用话术，所述语音识别模块对效验通话的实时录音进行识别得到效验文本信息；所述语义处理模块根据所述识别文本信息按照最大匹配原则，基于所述效验语义词库得到所述第一识别信息。

进一步地，本应用场景所在的项目中，参见附图5所示，图片识别模块的使用流程。图片识别的目的在于解析厂站设备信息图，在所述厂站设备信息图的不同位置上存在不同的设备信息以及当前设备的状态(如开、关)。因此，需要对厂站信息图进行分析。通过调用所述图片识别模块对所述厂站设备信息图识别，根据返回的识别信息及对所述厂站设备信息图的分析结果，得到厂站设备状态标识，即所述第一设备信息对应的状态信息。再根据实际工况需要对所述状态信息进行状态标识处理，得到图片设备信息提取结果。

进一步地，作为优选，所述语义处理模块将语音识别模块得到的文本最大匹配截取设备信息，将设备信息交于后台进行和图片识别结果对比。再进一步地，在显示页面中突出显示识别得到的设备信息，并使用不同颜色区分语音识别状态与图片识别状态的一致情况。由此更加直观方便的帮助调度人员的效验，可以理解地，若以软件的形式呈现本发明，可以以不同的显示页面呈现本发明语音识别和图片识别执行过程中的状态、中间结果和/或最终结果。

特别地，所述语音识别模块与所述图片识别模块中的识别技术可以基于已经成熟的第三方语音识别程序以及图片识别程序。同时附加自身电厂定义的热词，以缩短开发时间及保证语音识别的正确运行。

显然地，在具体实施时，厂站人员进行汇报设备信息时候，所述语音识别模块在电话沟通中，可以持续对电话录音进行分析识别。在后台程序中将识别到的设备信息与后台保存设备状态进行对比。并在页面展示中突出显示，方便调度人员进行查看。

基于同一发明构思，本发明的再一实施例还进一步提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机可执行的指令，当所述计算机可执行的指令被执行时实现如上文所述的基于语音识别与图像识别的电力调度厂站信息图效验方法的步骤，具体的步骤上文已经详述，此处不再赘述。所述可读存储介质可以是保持和存储由指令执行设备使用的指令的有形设备，例如可以是但不限于电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。

基于同一发明构思，本发明的又一实施例提出了一种计算机设备，包括处理器以及存储设备，所述处理器适于实现各指令，所述存储设备适于存储多条指令，所述指令适于由处理器加载并执行上述任一项所述信息图效验的方法。用于执行本发明操作的计算机程序可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。所述计算机程序可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机程序的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本发明的各个方面。

这里参照根据本发明实施例的方法、装置和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机程序实现。这些计算机程序可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些程序在通过计算机或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机程序存储在可读存储介质中，这些计算机程序使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有该计算机程序的可读存储介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。

由于本发明提供的一种厂站信息图效验装置、存储介质及计算机设备与上述基于语音识别与图像识别的电力调度厂站信息图效验方法属于同一发明构思，因此本发明提供的一种厂站信息图效验装置、存储介质及计算机设备至少具备与所述厂站信息图效验装置相同的有益效果，不再一一赘述。

以上所述仅为本发明的优选实施例而已，并非对本发明范围的任何限定，本发明包括但不局限于上述实施中所列举的构型。对于本领域的技术人员来说，可根据上述实施例的内容举一反三，本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，包括以下步骤，

S1：获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别，得到第一识别信息，其中，所述效验语音信息符合专用话术；

S2：若所述第一识别信息为第一厂站信息，则根据所述第一厂站信息获取对应的第一厂站设备信息图，并对所述第一厂站信息设备图进行识别得到第一设备信息集；其中，所述第一设备信息集包括若干个第一设备信息以及每个所述第一设备信息对应的第一状态信息；否则，执行步骤S3；

S3：若所述第一识别信息包括第二设备信息，则检索所述第一设备信息集，得到所述第二设备信息在厂站设备信息图中对应的所述第一状态信息，效验所述第一状态信息与第二状态信息是否一致，

若是，使用第一展示规则展示所述第一识别信息；

若否，使用第二展示规则展示所述第一识别信息；

其中，步骤S3中的所述第一识别信息还包括所述第二状态信息，所述第二状态信息为所述第二设备信息待效验的状态信息。

2.根据权利要求1所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，步骤S1中，所述效验语音信息包括调度人员的实时调度语音或厂站端与调度端效验通话的实时录音；

所述实时调度语音以及所述实时录音符合所述专用话术，所述专用话术包括效验信息的问答规则。

3.根据权利要求2所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，所述效验信息的问答规则还包括所述厂站信息、所述设备信息和/或所述状态信息在所述专用话术中出现的先后顺序。

4.根据权利要求2所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，步骤S1中，所述获取效验语音信息，根据效验语义词库，识别所述效验语音信息得到效验文本信息，并对所述效验文本信息进行语义识别的方法，包括，

语音识别模块识别所述效验通话的实时录音，得到所述效验文本信息；

根据所述效验语义词库，按照最大匹配规则，语义处理模块对所述效验文本信息进行分词处理得到若干个效验关键词；

根据所述效验信息的问答规则和所述效验关键词，所述语义处理模块对所述效验文本信息进行语义识别，得到所述第一识别信息。

5.根据权利要求2所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，所述效验语义词库包括若干个厂站信息、若干个效验业务关键词、若干个设备信息以及所述设备信息对应的状态信息。

6.根据权利要求5所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，所述效验业务关键词包括电力设备名，以及开关、刀闸、保护改跳、联跳、合环、并列和线路之中的一个或多个。

7.根据权利要求2所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，在步骤S1之前，还包括，从效验日志中收集若干历史效验录音，以及根据所述历史效验录音，使用关键词抽取方法，提取关键词，得到所述效验语义词库；

和/或

根据所述历史效验录音和预设话术模型，得到所述效验信息的问答规则；

其中，所述效验日志包括预设时间段内的厂站月测录音。

8.根据权利要求7所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，还包括，根据所述厂站信息、所述设备信息、所述效验关键词在所述效验日志中出现的频率高低，设定所述厂站信息、所述设备信息和/或所述效验业务关键词在所述效验语义词库中的优先级。

9.根据权利要求1所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，步骤S2中，若所述第一识别信息为第一厂站信息，则根据所述第一厂站信息获取对应的厂站设备信息图，并对所述厂站信息设备图进行识别得到第一设备信息集的方法，包括，

根据所述第一厂站信息，在厂站设备信息图库中检索得到所述第一厂站信息对应的所述厂站设备信息图；

根据所述效验语义词库，图片识别模块对所述厂站设备信息图的不同位置进行识别，得到若干个所述第一设备信息及其对应的所述第一状态信息。

10.根据权利要求1所述的基于语音识别与图像识别的电力调度厂站信息图效验方法，其特征在于，步骤S3中，还包括在显示设备上突出显示所述第二设备信息；

其中，所述第一展示规则包括所述第一状态信息和所述第二状态信息使用相同的显示风格；所述第二展示规则包括所述第一状态信息和所述第二状态信息使用不同的显示风格；

和/或

若所述第一状态信息与所述第二状态信息不一致，还包括，

将所述厂站设备信息图中所述第二设备信息对应的所述第一状态信息更新为所述第二状态信息。

Images