CN110765277A - 一种基于知识图谱的移动端的在线设备故障诊断平台 - Google Patents
一种基于知识图谱的移动端的在线设备故障诊断平台 Download PDFInfo
- Publication number
- CN110765277A CN110765277A CN201911005071.XA CN201911005071A CN110765277A CN 110765277 A CN110765277 A CN 110765277A CN 201911005071 A CN201911005071 A CN 201911005071A CN 110765277 A CN110765277 A CN 110765277A
- Authority
- CN
- China
- Prior art keywords
- question
- user
- establishing
- module
- knowledge
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/36—Creation of semantic tools, e.g. ontology or thesauri
- G06F16/367—Ontology
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B23/00—Testing or monitoring of control systems or parts thereof
- G05B23/02—Electric testing or monitoring
- G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
- G05B23/0218—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults
- G05B23/0243—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults model based detection method, e.g. first-principles knowledge model
- G05B23/0245—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults model based detection method, e.g. first-principles knowledge model based on a qualitative model, e.g. rule based; if-then decisions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/332—Query formulation
- G06F16/3329—Natural language query formulation or dialogue systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/3331—Query processing
- G06F16/334—Query execution
- G06F16/3344—Query execution using natural language analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/35—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- Mathematical Physics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Human Computer Interaction (AREA)
- Automation & Control Theory (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于知识图谱的移动端的在线设备故障诊断平台。包括如下步骤:S1,建立数控机床信息抽取模块;S2,建立数据清洗与知识图谱模块;S3,建立问答延伸模块;S4,建立后台管理模块。本发明会把用户最终采纳的答案作为新的节点纳入知识图谱的关系中,并在机床故障分词词典和问题模板中增添新的记录,使得此系统越用越智能,提升用户的使用体验。
Description
技术领域
本发明涉及一种基于知识图谱的移动端的在线设备故障诊断平台,属于计算机技术领域。
背景技术
随着工业生产自动化、数字化、智能化程度的日益加深,企业对设备的可靠性要求也越来越高。因而对设备故障的诊断和排除的研究具有重大的现实意义。互联网蕴含着大量有价值信息,是大数据的重要数据来源,也是经验交流留存的重要领地。通过对海量的分散的互联网数据进行采集,获取互联网上相关设备故障和维修解决方式,并形成知识图谱,可以提升故障判断的精准度和应用范围。
目前业界设备故障诊断方向数据来源有着源头少,专业性强,实用性低的特点,对机床故障及解决方法的样本数据获取更是难上加难。
发明内容
发明目的:为了能够更好帮助维修人员正确找到相应品牌型号的数控机床的故障情况,本发明力图实现人性化的查询方式,以大量故障实例数据作支撑,达到高精度的查询效果。通过此软件实现自动化、流程化、标准化的运维体系,系统性能稳定,方便使用,易学易用。
本发明的技术方案如下:
一种基于移动端的在线设备故障诊断平台。
技术路径如下:移动端实现阈值设置,即用户输入数控机床相关参数(品牌、型号、故障代码、某个或多个超出阈值参数、故障描述等)或读取设备运行等相关数据,系统自动设置参数预警阈值、通过高速高效的分布式爬虫实现信息抓取、提供两种查询方式,并按置信度高低返回查询结果、在用户不满意的情况下提供在线爬取,并由大量数据构成知识图谱,允许用户收藏感兴趣的问题,并保存用户行为数据且系统也将提供兴趣推荐。
具体包括以下步骤:
S1,建立数控机床信息抽取模块;
S2,建立数据清洗与知识图谱模块;
S3,建立问答延伸模块。
S4,建立后台管理模块。
上述步骤S1中,建立数控机床信息抽取模块,对网页文档结构树的解析,根据源网页的不同形式,提供了对于指定网页信息的精确抽取,对不同网页的自定义模板抽取,和基于机器学习的自动抽取,以及对文档的抽取。基于用户对最后系统的解决方案的不满意情况,提出了二次爬取模块。
上述步骤S2中知识图谱模块的建立具体包括如下:
(3-1)问句分类,对需要转换生成的问句进行分类;
(3-2)问句疑问语素,根据步骤(3-1)提出的问句种类,为每个分类制定疑问;
(3-3)问句生成,使用的问句生成方案是基于NLP分析和一定的深度学习的问句生成,字符短的描述性句子使用NLP的方式生成问句;对字符过长的描述性语句,使用深度学习的方式来完成问题的生成;
(3-4)问句打分,在问句生成完成之后,对问句进行打分,来判断问句的语法通顺情况;
(3-5)Java-Cypher构建节点、关系、属性,使用java-Cypher,嵌入式结构构建、使用存储在neo4j图数据库中的节点、属性、关系;
(3-6)节点与关系的去重,用JAVA调用Cypher语句,在节点和关系的创建上使用“Merge”替代“Create”完成功能;
(3-7)问题模板生成,对用户的提问或陈述进行语义元素抽取;
(3-8)句子分类,对于用户输入的句子,系统对其构建稠密向量,该稠密向量由贝叶斯分类器进行分类,最终返回用户输入的句子所属的类别,即其对应的问题模板。
上述步骤S3中问答延伸模块的建立具体包括如下:
(4-1)端到端神经网络的原理及训练
端到端问答系统能基于用户的问句中的每一个词依次生成答句基于用户的问句中的每一个词依次生成答句;
(4-2)多轮对话的应用
在确保查询精度的前提下,创造性地应用多轮对话,开辟了小助手查询模式。
上述步骤S4中后台管理模块的建立均包括企业级和用户级,具体包括如下:
(5-1)数据挖掘,
(5-2)数据库解析与完善。
本发明所达到的有益效果:
1.从数据源获取角度来看,针对难以获得的机床故障诊断训练用数据,本发明采用基于机器学习自动抽取与自定义模板抽取相结合的策略。在保证信息有效性的同时兼顾了抽取效率。本发明所使用的分布式爬虫scrapy配合高性能proxy 代理服务器,对URL队列进行分布式爬取,形成对应的item管道,并发存入数据库中,用以构建知识图谱。
2.本发明创造性的使用Neo4j创建知识图谱以代替传统的数据存储方式。在机床故障数据及解决方法数据间分别创造了节点与节点之间的关系。知识图谱的建立使得数据结构更为清晰,数据的检索与关系推理速度与准确度大为提升,在 30000个问题节点下的检索速度只有约0.1s,准确度高达98.7%,明显的优于任何传统数据存储与组织形式。
3.针对于机床问题的复杂性与回答的专业性,本次发明使用了两次范围紧缩,首先根据自定义的机床问题分词词典,创立了专业的问题模板,基于问题模板对模板下的候选问题进行句意和词组的余弦相似度匹配来确定答句,使得用户对一次爬去的答案的采纳率有95.3%。在用户不满意的情况下,可以通过点击在线爬取来更新答案,本发明会把用户最终采纳的答案作为新的节点纳入知识图谱的关系中,并在机床故障分词词典和问题模板中增添新的记录,使得此系统越用越智能,提升用户的使用体验。
附图说明
图1是本发明的流程图。
具体实施方式
下面结合附图对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
如图1所示,一种基于移动端的在线设备故障诊断平台。
技术路径如下:移动端实现阈值设置,即用户输入数控机床相关参数(品牌、型号、故障代码、某个或多个超出阈值参数、故障描述等)或读取设备运行等相关数据,系统自动设置参数预警阈值、通过高速高效的分布式爬虫实现信息抓取、提供两种查询方式,并按置信度高低返回查询结果、在用户不满意的情况下提供在线爬取,并由大量数据构成知识图谱,允许用户收藏感兴趣的问题,并保存用户行为数据且系统也将提供兴趣推荐。
具体包括以下步骤:
S1,建立数控机床信息抽取模块;
S2,建立数据清洗与知识图谱模块;
S3,建立问答延伸模块。
S4,建立后台管理模块。
在所述步骤S1中,建立数控机床信息抽取模块,对网页文档结构树的解析,根据源网页的不同形式,提供了对于指定网页信息的精确抽取,对不同网页的自定义模板抽取,和基于机器学习的自动抽取,以及对文档的抽取。基于用户对最后系统的解决方案的不满意情况,提出了二次爬取模块及。
精确抽取:
在固定网页格式下,根据网页特征,对网页的文档结构树进行了解析。在文档结构中,以下信息是想要提取的:数控机床型号,数控机床系统类型,故障的简述及其各自正文部分,其中正文部分包括以下特殊形式:数控机床产生的问题描述,数控机床问题的解决方法。
自定义模板抽取:
精确抽取中,对一系列特定的网页进行了分析,指定出了针对性的定模板。在实际使用中,管理员可根据网页,在系统的引导下,自定义建立模板保存,实现管理员对网页信息抽取模板的自定义。
管路员可在管理员端的模板管理界面中,选择新建模板,并依次输入表格,图片特征等,全部特征输入完毕后,可以将其保存为“新模板”,并使用这个新模板进行自适应的网页信息抽取。
后期还使用了goose-extractor的python包。Goose-extractor可以是一款用python开发的网页抽取外部包,可以对自定义模板抽取起辅助作用。
基于机器学习的自动抽取:
使用了WebCollector的python包。该算法对网页DOM树中的标签和文本分别赋分。一个标签给-3.25分,一个文本给1分。由此可以将网页转换为一个数列。该算法认为,要找出该数列的一个子数列,使得这个子序列中对应的分数总和达到最大,则这个子序列就是网页中的正文。从另一个角度来理解这个规则,即从html源码字符串中找出一个子序列,这个子序列应该尽量包含较多的文本和较少的标签,因为算法中给标签赋予了绝对值较大的负分(-3.25),为文本赋予了较小的正分。
基于python-docx的文档信息抽取:
使用python-docx包对提前下载好的官方故障代码说明文档进行解析,又可以分成两种解析:第一种将文档中所有字读取出后对文本进行解析,提取出需要的机床品牌,型号,故障代码,故障原因,故障解决方案。第二种为对docx文档中表格的解析,例如表1
表1
因为有很多故障信息都是封装在表格中,所以对所有表格进行遍历,读取出需要的故障信息。
二次爬取:
原因说明
当用户搜索问题得到解决方案时,用户觉得解决方案都不如意,便可点击在线爬虫模块进行二次爬取。
爬取方法
从有固定模板的网页中进行抽取,对该网站全网网页进行问题的匹配,匹配到故障解决方案返回给前端。
利用机器学习的自动抽取,通过训练集各大数控机床维修网站进行分析,模糊匹配出故障问题解决正文,再通过语义分析提取出合理的解决方案,反馈给前端显示。
通信方式
利用python socket网络通信技术,在socket服务端建立端口等待前端访问,安卓socket客户端加载数据请求到服务端,服务端通过爬虫进行二次爬取并返回客户端,等待下一次被访问。
抽取方法总结:
在系统中,本发明将基于机器学习的自动抽取作为上述两种抽取方法的辅助方法,以实现抽取的自动化和对抽取效果的优化,最后将数据存入mongoDB中,等待数据清洗。
在所述步骤S2中,步骤S2是功能的核心模块,下面将分为知识图谱构建详解与问答流程解析进行分步阐述。
知识图谱构建详解:
问句分类
首先,对需要转换生成的问句进行分类,查阅了前人做过的研究调查,从论文中,找出了中文问题分类的层次分类体系,含7个大类,每个大类根据实际情况再定义了一些小类,共60小类。如表2所示。
表2
根据对测试数据的研究,发现常见的关于机床描述转换的问句类别主要是原因类,数量类,方式类,描述类。下面通过举例来展示问句类别,如表3所示。
问句种类 | 问句案例 |
原因类 | 发那科0imc型机床进给速度为什么会超出常值 |
方式类 | 西门子机床出现非法的平面选择怎么办 |
描述类 | MITSUBISHI机床,60/60s,运转操作类型重复 |
表3
问句疑问语素
根据上文中提出的问句种类,为每个分类制定了疑问(其中,描述类可以归并到方式类中)。如表4所示。
表4
问句生成
本系统使用的问句生成方案是基于NLP分析和一定的深度学习的问句生成。字符短的描述性句子可以使用NLP的方式生成问句;对字符过长的描述性语句,使用深度学习的方式来完成问题的生成。
采用了基于Hanlp的分词,词性划分和句法依存分析,试图将陈述性语句转为对应上述分类的问题。接着根据问句种类选出疑问语素进行拼接。在拼接的过程中还需要语句中的几个词与疑问语素的组合关系,拼接错误等问题。举例,如:一个描述性语句是:“FANUC机床,18i—MB型号,数控机床通电后,在没有任何操作指令的情况下,Z轴快速向负方向移动”。经分析,将这个描述性语句生成问题的归类到方式类,方式类的疑问语素取“怎么办”,所以最后的问句拼接结果为FANUC机床,18i—MB型号,数控机床通电后,在没有任何操作指令的情况下,Z轴快速向负方向移动怎么办。
对于句子较长的语句,发现使用语义分析有一定的困难,会产生错误语义分析结果,导致生成的问句效果不佳。所以对于长句,使用了神经网络的问句生成。构建了基于seq2seq的神经网络,使用了基于注意力机制的双向LSTM来构建句子级别的编码器和LSTM的句子解码器,使用双线性评分函数和softmax计算注意力。
问句打分
在问句生成完成之后,需要对问句进行打分,来判断问句的语法通顺情况。下载了百度公开的关于百度知道的数据,从其中抽出了约40w条正常问句,同时加入了针对本赛题的特定领域的问题。使用这些数据构建语言模型和基于 word2Vec的CBOW模型的词向量数据集。简单的来说统计语言模型是用来计算一个句子的概率模型,它通常基于一个语料库来构建。
使用生成的语言模型,对生成的问句进行打分。打分的结果是一个概率,一个从0-1的小数。设定打分的分数高于0.6就是一个合格的问句,那么这样的问句就能被保留下来,而低于这个分数的问句会被删除,这样可以提高知识图谱中 QA对的质量。
Java-Cypher构建节点、关系、属性
本系统使用java-Cypher,嵌入式结构构建、使用存储在neo4j图数据库中的节点、属性、关系。考虑到机床故障问答流程的复杂性与多样性(如同一机床品牌下不同型号对同一故障解决办法可能不同;不同机床品牌下不同型号对同一故障解决办法可能相同),机床基本信息,机床故障描述与解决方法并不构成简单的三元组关系。所以选用图存储结构,是数据之间关系一目了然,并且显著增加查询速度。
创建节点:设立了三个不同的节点类型:分别是:
机器信息节点(Mchinetype)
用以存储机器有关的信息,即机器品牌,机器型号。
故障信息节点(Keyid)
用以存储机器所存在的故障描述,故障原因,故障代码。
解决办法节点(Solution)
用以存储对应故障的解决办法。
创建关系:对于每一个QA信息对,在前面已经把它抽象成了三种不同的节点,三种孤立的节点不能完整的表述对应信息,因此下一步定义并创建了三种节点间的关系,使孤立的节点彼此联系,构成图结构。
关系如下:
belongsto和has:机器信息节点Machinetype与故障信息节点Keyid之间的两种关系。这种关系是是双向的,但由于每种方向说法不同,定义了两种关系。其中,故障信息属于(belongsto)机器信息的一部分(每一个QA信息对中,故障信息对应于机器品牌,型号),机器信息包含(has)故障信息。
Generates:故障信息节点Keyid与解决办法节点Solution之间的关系。一个故障对应于它的解决办法,呈现的是基本QA对的关系。
节点与关系的去重
通常的,一个QA信息对所表达的信息应该是独立的,当有一个与其一模一样的QA信息对出现时,可将其视为重复。同理,将重复的节点与其所附加的关系录入数据库中,不仅是无效的,更会在一定程度上影响其性能。在用JAVA调用Cypher语句,在节点和关系的创建上使用“Merge”替代“Create”完成此功能。相对于在由描述性句子生成问句后,对整体QA对数据集进行去重操作,这个方法省去了对原始数据集的操作,有更小的时间开销。
问题模板生成
问题模板对后续解决方法的查询具有重要意义。若不进行此模块对用户的提问进行直接的匹配,在成千上万的QA信息对的数据集下,直接匹配的准确率实在不高,且时间开销巨大。所以先对用户发送的故障问题进行分类,锁定用户提问具体属于某一大类后。这样就把上万条的直接匹配缩小到几十个大类中。直接再对数据库中存储的关于这个大类中所有问题描述进行匹配,返回置信度最高的前五组回答给用户。
利用Hanlp nlp工具对问题描述进行分词,由于机床故障相关问题的专业性和独特性,专业名词较多。原始Hanlp提供的词典不能够很好的满足需求,因此在默认分词字典的基础上,根据分词结果和机床故障领域词频较高的词汇,添加了关于机床故障的自定义词典。
为生成问题模板,对用户的提问或陈述进行语义元素抽取。认为,一个关于机床故障类型的描述性或提问性的句子可以分为三个语义块的结合:机床品牌,机床型号,机床故障关键词。只要抓住了这三个要点,就可以精准的定位到图数据库中相关节点的属性,由属性锁定到其所在的节点,进而通过节点之间的关系,返回出相应问题的Solution。
例如用户提问:“发那科机床0imc型中指定了非法的平面怎么办?”,可抽象为语义块:发那科+0imc+指定了非法的平面。实际上,机床品牌和机床型号数量有限,较为有代表性;而上例中,剩余描述“指定了非法的平面”则因用户提问或描述的不同而不同,不具有普遍性与代表性,因此对于剩余的描述语句块作出基于自定义机床故障词典的分词,结合词频统计,得到几十个有代表性的特征类。将机床品牌定义为“mb”,将机床型号定义为“mt”,则上述例子中最后生成了模式为“mb+mt+特征类”的问题模板。考虑到用户搜索时的不规范性,可能会发生信息缺省的情况(例如只知道机床品牌或机床型号),如果不加处理,对于同一特征类可能生成会生成“mb+mt+特征类”、“mt+特征类”、“mb+特征类”等三种不同的问题模板,冗余的分类不利于训练和测试,所以在这里不对缺省的情况再次单独分类,而是把他们归并在完整的模板(“mb+mt+特征类”)下。在后面查询阶段,问题模板还原实际问句时,如有缺省情况发生,则mb/mt标签相对应的必为空,在此进行查询语句控制,解决了缺省的无效多分类的情况。特征类与问题模板部分如下表5所示。
特征类 | 问题模板 |
激活 | mb mt激活 |
奇偶校验报警 | mb mt奇偶校验报警 |
数字位 | mb mt数字位 |
地址 | mb mt地址 |
非法 | mb mt非法 |
进给速度 | mb mt进给速度 |
轴数 | mb mt轴数 |
半径 | mb mt半径 |
NRC | mb mt NRC |
刀补 | mb mt刀补 |
G31 | mb mt G31 |
干涉 | mb mt干涉 |
CHF/CNR | mb mt CHF/CNR |
程序 | mb mt程序 |
未发现 | mb mt未发现 |
表5
句子分类
基于上述构建的问题模板,进而可以对用户输入的描述性语句或一般性问句进行分类。综合数据量,需求精度以及用户语言习惯(如机床型号机床品牌的顺序经常在日常表达中不分次序)的考虑,这里使用了Spark朴素贝叶斯分类器。
贝叶斯分类器需要总体特征,对数据库中有效的QA信息对的问题描述进行基于机床故障自定义词典的分词和词频统计,择取相关词汇上文提到的典型问句疑问词、问句常见语义助词构建了总体特征表vocabulary.txt。初始化总体向量全部为0。对于每一种特征类,在其下添加一定量的训练语句,包含陈述性句子与标准问句。以训练问句生成稠密向量(训练问句基于自定义机床故障词典分词后,与总体特征表比对,总体特征表与其对应相同的语块的向量矩阵值由0置1,每一个训练句子生成对应当前特征类的稠密向量。所有的稠密向量进行训练,抓取大量数据的总体特征,生成分类范围为所有特征类的贝叶斯分类器。
对于用户输入的句子,系统对其构建稠密向量,该稠密向量由贝叶斯分类器进行分类,最终返回用户输入的句子所属的类别,即其对应的问题模板。
句子还原及答案查询
在对用户输入的描述性语句或者问句模板化之后,查询数据库就变得更加简洁可行。对于问题模板“mb+mt+特征类”的形式。在查询数据库之前,先对问题模板作句子还原。另外的,在对用户输入的描述性语句或者标准型问句进行基于自定义词典的分词时,已经对机器品牌及机器型号语块进行标注,数据库中的机器品牌及型号已经全部纳入自定义分词词典中,它们的分词结果分别是“mb”、“mt”。
在“mb+mt+特征类”的问题模板中,考虑三种情况:
机器品牌、机器型号均存在实际值
机器品牌存在实际值而机器型号不存在实际值
机器型号存在实际值而机器品牌不存在实际值
对于每一种不同的情况,设计了不同查询数据库的cypher语句,分别匹配到数据库中的机器信息节点的品牌、型号属性(缺省情况下,少匹配缺省的属性),故障信息节点的概况属性,通过节点的属性锁定对应节点,以故障信息节点 +generates关系确定到Solution节点,返回节点的解决方法属性和故障原因属性。因此,确保了用户的上述三种实际需求。而对于机器型号和机器品牌同时没有的情况不作考量,只有特征类的句子不符合实际情况,缺少实际价值。
基于相似度返回准确结果
在对用户输入的句子分类,进行模板化之后,获取了用户句子的三个关键语素:机床品牌,机床型号,以及特征类。基于这三个语素可以在数据库中定位到对应品牌、型号、特征类下的相关信息,但这只是一步大幅缩小范围的操作。
实际上,对于模板问句A“mbmt有不在参考点的轴怎么办”和模板问句B “如何解决mbmt参考点返回未完成的问题”假设它们的特征类均为“参考点”,则返回结果是所有数据库中所有特征类为“参考点”下的回答。考虑提取原始 QA信息对中故障描述,计算其与用户输入的句子的余弦相似度,返回前五个得分最高的QA对中的故障描述对应的故障原因和解决办法。
注:考虑到机床问题一般句子不长,去掉特征类后的分词比较可能会出现比较疑问助词、语气词、主语等情况,所以不进行去除特征类的操作。
对于步骤S3,S3所示模块可以更好的对问答系统进行补充和精度提升,从而直观地提升用户使用体验。下面对其模块进行阐释。
端到端神经网络的原理及训练
端到端问答系统能基于用户的问句中的每一个词依次生成答句基于用户的问句中的每一个词依次生成答句。
端到端模型最先在机器翻译方向得到应用,从此一发不可收拾,成为了机器翻译方向的首选方法,后续文章大部分基于此类模型进行优化与改造。由于问答系统的训练输入为问句-答句对,与机器翻译系统的平行语料训练输入格式极为相似,因此将端到端神经网络应用于问答系统上是可行的。
其模型主要有两个循环神经网络(RNN)构成,两个RNN中的一个作为编码器将用户经过分词的输入句子按照输入顺序逐词编码成一个由隐藏层输出定长的向量,这样一个定长的隐藏层向量可以充当输入句子的语义特征向量,其嵌入了句子中各类重要的语义信息,因此可以很有效的表征一个句子的语义。
可以将编码的过程沿着时间轴进行可视化,每一轮前一个词的编码结果将会作为下一轮后一个词的编码过程的输入的一部分,因此最终得到的隐藏层向量包含了整句句子的语义信息。
而在解码过程中,另一个RNN作为解码器,根据输入一个个词输出解码的结果将这些词按序拼接后得到的就是对于用户问句的答句。在这个过程中,每一个RNN单元的输入是上一轮解码的隐藏层向量与前N轮解码出的单词。
因此,在解码过程中的每一轮输出的结果都受到了上下文(也就是编码结果) 以及之前N轮生成的单词的影响,因此此类系统输出的答句既能准确回答用户的问题,又具有较好的语法结构、语序合理,而且答句句式较为新颖。
使用pytorch作为框架构建了如上图所示的神经网络,已事先下载好的问答对为训练集,训练了端到端神经网络,用于尝试生成一些原始QA对,并打算在后续开发中加入更深层次的问答,如多轮对话,意图识别等。
多轮对话的应用——小助手查询方式
与一般的机床故障APP生硬地查询方式不同,考虑到为用户创造出良好的使用体验,在确保查询精度的前提下,创造性地应用多轮对话,开辟了小助手查询模式。
该查询模式为用户提供了清晰快捷的交互,在用户发送机床故障有关信息后,机器人(系统)会正常分析故障原因,提供解决问题的办法,在此基础上,提供三个相似问题(用户还可能感兴趣的问题)供用户以继续提问或参考。达到多轮对话,更好的解决用户在相似问题上的疑问,获得优质的APP使用体验。
在步骤S4所示的后台管理模块中,本发明力图在数据挖掘和纵深解析数据库的方向上进行进一步的扩展。实施方案如下:
数据挖掘
企业级:
后台包含所有对用户问的每一个搜索的问题进行监控,获取较大概率数控机
床出故障的机床品牌,类型,及出故障的原因,在后台对这些资料进行整理,整理成合集反馈给每位用户。
用户级:
1)描述:统计某个用户问过的所有机床故障问题和输入的描述
2)输入数据流:输出数据流JSON:结构化数据存取的数据库:mongodb
3)处理逻辑:while(检测到用户向服务器发送了某个机床故障问题的回答和)
{记录该问答对存入数据库。}
(1)统计用户查询:
1)描述:统计某个用户问的所有机床故障问题中数量最多的特征类。
2)输入数据流:输出数据流JSON:结构化数据存取的数据库:mongodb
3)处理逻辑:对问的所有问题中命中的特征类排序返回最大值存入数据库
数据库中添加对应记录在后台给每位用户的查询建立历史表单,记录用户的每一次提问。
(2)分析用户常见错误:
(3)统计用户查询问题及数量
1)描述:统计某个用户问的所有问题或输入的描述的数量
2)输入数据流:输出数据流JSON:结构化数据存取的数据库:mongodb
3)处理逻辑:while(检测到服务器向用户发送了某个故障的回答和故障原因){问题数量计数器+1;存入数据库数据表中添加对应记录}
(4)生成用户提问报告:
1)描述:每周定时生成查询报告并向用户发送。
2)输入数据流:输出数据流JSON:结构化数据存取的数据库:mongodb
3)处理逻辑:while(每周定时){用户了解自己的查询动态并查看查看自己的历史查询报表可以进一步增加生产,减少数控机床出错的,提高效率。}
数据库解析与完善
企业级:
(1)在推广使用的过程中里通过用户查询的问题逐渐完善知识图谱,并且依靠爬虫再次爬取互联网中的信息,进一步完善知识图谱。
(2)通过自身的知识图谱统计故障类型,故障数控机床机床型号,通过大数据分析,根据用户的搜索方式建立更加优秀,快速的算法,提升用户体验。
用户级:
(1)在mongoDB中为每位用户建立对应的集合,记录用户每一次的搜索,以及浏览回答历史,用户也可以随时抽取出自己的浏览历史,方便查阅。
(2)根据用户的搜索习惯建立用户的专有集合,及带有属于用户的专有属性,使反馈给用户的回答更加合理,置信度更高。
(3)用户也可以对自身的属性进行添加,例:西门子数控机床,NCK报警,通过用户自身来完善用户的数据库优化,进一步提升用户体验。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和变形,这些改进和变形也应视为本发明的保护范围。
Claims (5)
1.一种基于知识图谱的移动端的在线设备故障诊断平台,其特征在于包括如下步骤:
S1,建立数控机床信息抽取模块;
S2,建立数据清洗与知识图谱模块;
S3,建立问答延伸模块;
S4,建立后台管理模块。
2.根据权利要求1所述的一种基于知识图谱的移动端的在线设备故障诊断平台,其特征在于所述步骤S1中信息抽取模块是对网页文档结构树的解析,包括对指定网页信息的精确抽取、对不同网页的自定义模板抽取、基于机器学习的自动抽取、文档的抽取。
3.根据权利要求1所述的一种基于知识图谱的移动端的在线设备故障诊断平台,其特征在于所述步骤S2中知识图谱模块的建立具体包括如下:
(3-1)问句分类,对需要转换生成的问句进行分类;
(3-2)问句疑问语素,根据步骤(3-1)提出的问句种类,为每个分类制定疑问;
(3-3)问句生成,使用的问句生成方案是基于NLP 分析和一定的深度学习的问句生成,字符短的描述性句子使用 NLP 的方式生成问句;对字符过长的描述性语句,使用深度学习的方式来完成问题的生成;
(3-4)问句打分,在问句生成完成之后,对问句进行打分,来判断问句的语法通顺情况;
(3-5)Java-Cypher构建节点、关系、属性,使用java-Cypher,嵌入式结构构建、使用存储在neo4j图数据库中的节点、属性、关系;
(3-6)节点与关系的去重,用JAVA调用Cypher语句,在节点和关系的创建上使用“Merge”替代“Create”完成功能;
(3-7)问题模板生成,对用户的提问或陈述进行语义元素抽取;
(3-8)句子分类,对于用户输入的句子,系统对其构建稠密向量,该稠密向量由贝叶斯分类器进行分类,最终返回用户输入的句子所属的类别,即其对应的问题模板。
4.根据权利要求1所述的一种基于知识图谱的移动端的在线设备故障诊断平台,其特征在于所述步骤S3中问答延伸模块的建立具体包括如下:
(4-1)端到端神经网络的原理及训练
端到端问答系统能基于用户的问句中的每一个词依次生成答句基于用户的问句中的每一个词依次生成答句;
(4-2)多轮对话的应用
在确保查询精度的前提下,创造性地应用多轮对话,开辟了小助手查询模式。
5.根据权利要求1所述的一种基于知识图谱的移动端的在线设备故障诊断平台,其特征在于所述步骤S4中后台管理模块的建立均包括企业级和用户级,具体包括如下:
(5-1)数据挖掘,
(5-2)数据库解析与完善。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911005071.XA CN110765277B (zh) | 2019-10-22 | 2019-10-22 | 一种基于知识图谱的移动端的在线设备故障诊断方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911005071.XA CN110765277B (zh) | 2019-10-22 | 2019-10-22 | 一种基于知识图谱的移动端的在线设备故障诊断方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110765277A true CN110765277A (zh) | 2020-02-07 |
CN110765277B CN110765277B (zh) | 2023-06-09 |
Family
ID=69332522
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911005071.XA Active CN110765277B (zh) | 2019-10-22 | 2019-10-22 | 一种基于知识图谱的移动端的在线设备故障诊断方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110765277B (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112145375A (zh) * | 2020-09-28 | 2020-12-29 | 湘潭大学 | 基于Neo4j与贝叶斯的风机变桨系统故障诊断方法 |
CN112231460A (zh) * | 2020-10-27 | 2021-01-15 | 中国科学院合肥物质科学研究院 | 一种基于农业百科知识图谱的问答系统的构建方法 |
CN112650846A (zh) * | 2021-01-13 | 2021-04-13 | 北京智通云联科技有限公司 | 一种基于问句框架的问答意图知识库构建系统及方法 |
CN113051382A (zh) * | 2021-04-08 | 2021-06-29 | 云南电网有限责任公司电力科学研究院 | 一种基于知识图谱的电力故障智能问答方法及装置 |
CN113486151A (zh) * | 2021-07-13 | 2021-10-08 | 盛景智能科技(嘉兴)有限公司 | 故障维修知识点查询方法、装置、电子设备和存储介质 |
CN114154272A (zh) * | 2021-12-24 | 2022-03-08 | 广州涂涂乐科技有限公司 | 一种应用于喷胶设备的自动清洁控制方法及系统 |
CN116821310A (zh) * | 2023-08-28 | 2023-09-29 | 北京智谱华章科技有限公司 | 一种基于大模型和知识图谱的企业知识库问答系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108287822A (zh) * | 2018-01-23 | 2018-07-17 | 北京容联易通信息技术有限公司 | 一种中文相似问题生成系统与方法 |
CN110033101A (zh) * | 2019-03-07 | 2019-07-19 | 华中科技大学 | 基于融合特征的知识图谱的水电机组故障诊断方法和系统 |
-
2019
- 2019-10-22 CN CN201911005071.XA patent/CN110765277B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108287822A (zh) * | 2018-01-23 | 2018-07-17 | 北京容联易通信息技术有限公司 | 一种中文相似问题生成系统与方法 |
CN110033101A (zh) * | 2019-03-07 | 2019-07-19 | 华中科技大学 | 基于融合特征的知识图谱的水电机组故障诊断方法和系统 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112145375A (zh) * | 2020-09-28 | 2020-12-29 | 湘潭大学 | 基于Neo4j与贝叶斯的风机变桨系统故障诊断方法 |
CN112145375B (zh) * | 2020-09-28 | 2022-03-08 | 湘潭大学 | 基于Neo4j与贝叶斯的风机变桨系统故障诊断方法 |
CN112231460A (zh) * | 2020-10-27 | 2021-01-15 | 中国科学院合肥物质科学研究院 | 一种基于农业百科知识图谱的问答系统的构建方法 |
CN112231460B (zh) * | 2020-10-27 | 2022-07-12 | 中国科学院合肥物质科学研究院 | 一种基于农业百科知识图谱的问答系统的构建方法 |
CN112650846A (zh) * | 2021-01-13 | 2021-04-13 | 北京智通云联科技有限公司 | 一种基于问句框架的问答意图知识库构建系统及方法 |
CN113051382A (zh) * | 2021-04-08 | 2021-06-29 | 云南电网有限责任公司电力科学研究院 | 一种基于知识图谱的电力故障智能问答方法及装置 |
CN113486151A (zh) * | 2021-07-13 | 2021-10-08 | 盛景智能科技(嘉兴)有限公司 | 故障维修知识点查询方法、装置、电子设备和存储介质 |
CN114154272A (zh) * | 2021-12-24 | 2022-03-08 | 广州涂涂乐科技有限公司 | 一种应用于喷胶设备的自动清洁控制方法及系统 |
CN116821310A (zh) * | 2023-08-28 | 2023-09-29 | 北京智谱华章科技有限公司 | 一种基于大模型和知识图谱的企业知识库问答系统 |
CN116821310B (zh) * | 2023-08-28 | 2023-12-08 | 北京智谱华章科技有限公司 | 一种基于大模型和知识图谱的企业知识库问答系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110765277B (zh) | 2023-06-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108804521B (zh) | 一种基于知识图谱的问答方法及农业百科问答系统 | |
CN110765277B (zh) | 一种基于知识图谱的移动端的在线设备故障诊断方法 | |
CN110399457B (zh) | 一种智能问答方法和系统 | |
CN113486667B (zh) | 一种基于实体类型信息的医疗实体关系联合抽取方法 | |
CN109726274B (zh) | 问题生成方法、装置及存储介质 | |
CN110727779A (zh) | 基于多模型融合的问答方法及系统 | |
CN102831184B (zh) | 根据对社会事件的文字描述来预测社会情感的方法及系统 | |
CN109543084A (zh) | 一种建立面向网络社交媒体的隐蔽敏感文本的检测模型的方法 | |
CN113535917A (zh) | 基于旅游知识图谱的智能问答方法及系统 | |
CN112270188B (zh) | 一种提问式的分析路径推荐方法、系统及存储介质 | |
CN111061882A (zh) | 一种知识图谱构建方法 | |
CN113268569B (zh) | 基于语义的关联词查找方法及装置、电子设备、存储介质 | |
CN116628173B (zh) | 一种基于关键字提取的智能客服信息生成系统及生成方法 | |
CN115796181A (zh) | 一种针对化工领域的文本关系抽取方法 | |
CN114090861A (zh) | 一种基于知识图谱的教育领域搜索引擎构建方法 | |
CN109948154B (zh) | 一种基于邮箱名的人物获取及关系推荐系统和方法 | |
CN113360582B (zh) | 基于bert模型融合多元实体信息的关系分类方法及系统 | |
CN109522396B (zh) | 一种面向国防科技领域的知识处理方法及系统 | |
CN115827819A (zh) | 一种智能问答处理方法、装置、电子设备及存储介质 | |
CN112445894A (zh) | 基于人工智能的商务智能系统及其分析方法 | |
CN111241410A (zh) | 一种行业新闻推荐方法及终端 | |
CN111325018A (zh) | 一种基于web检索和新词发现的领域词典构建方法 | |
CN118245564B (zh) | 一种支持语义查重查新的特征比对库构建方法及装置 | |
CN116340530A (zh) | 基于机械知识图谱的智能设计方法 | |
CN118132719A (zh) | 一种基于自然语言处理的智能对话方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |