CN105760414B - 用于维修和检修的语音识别系统和方法 - Google Patents

Abstract

本发明涉及用于捕获关于系统的部件的信息的方法和系统。提供了用于在维护程序期间捕获与系统的部件相关联的信息的方法和系统。在一个实施例中，一种方法包括：基于预定义对话文件经由可穿戴设备来管理与用户的对话，其中，该预定义对话文件是针对部件和程序中的至少一个定义的；基于对话在可穿戴设备处接收语音信号；通过可穿戴设备来处理语音信号以识别部件信息；以及将部件信息从可穿戴设备发送到主机部件以供维护应用程序使用。管理、接收以及发送是在维护程序期间执行的。

Description

用于维修和检修的语音识别系统和方法

技术领域

本公开一般地涉及用于捕获关于系统的部件的信息的方法和系统。

背景技术

在航空航天产品的维修和检修期间，必须记录特定的数据。常规方法要求基于知识和/或经由硬拷贝检查列表来收集大量数据。收集过程通常是写下信息且然后在计算机上将信息输入到信息屏幕中的多步过程。为了确保准确度，在收集大字符串的数据和在许多情况下的纸张和计算机上的多次记录的同时要求多次检查。此类过程在记录、重新记录以及检查数据时是冗余的并浪费动作和时间。

因此，需要用于在维修和检修期间捕获关于部件的信息的改进系统和方法。根据结合附图及前述技术领域和背景技术进行的后续详细描述和所附权利要求，其他期望特征和特性将变得显而易见。

发明内容

提供了用于捕获在维护程序期间与系统的部件相关联的信息的方法和系统。在一个实施例中，一种方法包括：基于预定义对话文件来管理经由可穿戴设备与用户的对话，其中，该预定义对话文件是针对部件和程序中的至少一个定义的；基于对话在可穿戴设备处接收语音信号；通过可穿戴设备来处理语音信号以识别部件信息；以及将部件信息从可穿戴设备发送到主机部件以供维护应用程序使用。管理、接收以及发送是在维护程序期间执行的。

在另一实施例中，一种系统包括：主机计算机的维护应用程序；以及与主机计算机通信的可穿戴设备。该可穿戴设备被配置成：基于预定义对话文件来管理与用户的对话，其中，该预定义对话文件是针对部件和程序中的至少一个定义的；基于对话从可穿戴设备接收语音信号；处理语音信号以识别部件信息；以及将部件信息发送到主机部件以供维护应用程序使用。

此外，根据结合附图及前述背景技术进行的后续详细描述和所附权利要求，方法和系统的其他期望特征和特性将变得显而易见。

附图说明

在下文中将结合以下图来描述本发明，其中，相同的附图标记表示相同元件，并且在所述附图中：

图1是根据示例性实施例的包括移动语音处理系统的维修和检修系统的图示；

图2和3是图示出根据示例性实施例的维修和检修系统的部件的功能框图；

图4是根据各种实施例的维修和检修系统的示例性表格；以及

图5是图示出根据示例性实施例的可由维修和检修系统执行的方法的流程图。

具体实施方式

以下详细描述本质上仅仅是示例性的且并不意图限制本公开或本公开的应用和使用。如本文所使用的单词“示例性”意指“充当示例、实例或举例说明”。因此，在本文中描述为“示例性”的任何实施例不一定被理解为相比于其他实施例是优选或有利的。本文所述的所有实施例是为了使得本领域的技术人员能够进行或使用本发明而不是限制由权利要求定义的本发明的范围而提供的示例性实施例。此外，并不意图受到在先前的技术领域、背景技术、发明内容或以下具体实施方式中提出的任何明示或隐含理论的束缚。

现在参考图1，本公开的示例性实施例涉及一般地在10处示出的维修和检修系统，其包括一般地在12处示出的移动语音处理系统。如可以认识到的，可以针对诸如但不限于车辆部件、航空航天部件以及船舶部件之类的任何部件的维修和检修而实现维修和检修系统10。出于示例性目的，将在用于诸如引擎燃气涡轮机或其他部件之类的飞机部件的维修和检修的维修和检修系统10的背景下讨论本公开。

现在更详细地转到图1，示例性维修和检修系统10一般地包括与主机计算设备14通信的移动语音处理系统12。移动语音处理系统12直接地根据短程无线通信协议（例如，蓝牙或其他协议）或者间接地经由无线网络16并根据远程无线通信协议（例如，Wi-Fi或其他协议）来与主机计算设备14进行无线通信。

移动语音处理系统12一般地包括移动语音处理模块18。移动语音处理模块18从移动记录设备20接收语音信号。例如，移动记录设备20记录由用户22说出的语音，并将记录的语音作为语音信号提供给移动语音处理模块18。移动语音处理模块18经由移动音频设备24而生成音频输出。例如，移动语音处理模块18向移动音频设备24提供音频信号，并且移动音频设备24向用户22播放音频。

在各种实施例中，可将移动语音处理模块18、移动记录设备20以及移动音频设备24实现为单个可穿戴设备26，或者替换地实现为无线地和/或以有线方式进行通信的多个可穿戴设备26、28。（一个或多个）可穿戴设备26、28是移动的，因为其可围绕诸如维修和检修环境之类的环境被自由运输。可将（一个或多个）可穿戴设备26、28实现为但不限于耳机、手表、手镯、戒指、项链、一件衣服、鞋或用户可穿戴的任何其他设备。

在操作中，用户22说出关于当前经历检修和/或维修的部件30（例如，飞机的燃气涡轮机引擎）的信息。移动记录设备20记录用户的语音。移动语音处理模块18基于记录的语音信号而获得关于特定部件30的信息。由移动语音处理模块18提示用户22说出关于部件30的信息。移动语音处理模块18基于预定义对话来选择适当提示。该预定义对话是根据特定部件所特有和/或特定维修或检修程序所特有的过程流程定义的。该提示可以包括从用户22请求特定信息的语音、确认由用户22说出的特定信息的语音以及向用户22建议维修或检修指令的语音。

一旦捕获到信息，则移动语音处理模块18自动地或者在被用户22提示之后将捕获到的信息无线地发送到主机计算设备14。如可以认识到的，可以将信息逐个输入地、作为批量输入或者一起发送，取决于传输如何和何时发生。主机计算设备14接收信息并用该信息来填充主机维修和总体应用程序。

现在转到图2，更详细地示出了移动语音处理模块18。移动语音处理模块18被示为包括处理设备101，其包括一个或多个处理器102、被耦合到存储器控制器106的存储器104以及一个或多个输入/输出控制器112。在各种实施例中，输入/输出控制器112被耦合到移动记录设备20和移动音频设备24。在各种实施例中，处理设备101还可以包括用于耦合一个或多个无线网络16的一个或多个网络接口118。

在各种实施例中，存储器104存储可以由处理器102执行的指令。存储在存储器104中的指令可包括一个或多个单独程序，其中的每一个包括用于实现逻辑功能的可执行指令的有序列表。当处理设备101在操作中时，处理器102被配置成执行存储在存储器104内的指令、向和从存储器104传送数据以及一般地根据指令来控制处理设备101的操作。处理器102可以是任何定制的或市售的处理器、中央处理单元（CPU）、与处理设备101相关联的若干处理器之中的辅助处理器、基于半导体的微处理器（微芯片或芯片组的形式）、宏处理器，或用于执行指令的一般的任何设备。

在图2的示例中，存储在存储器104中的指令包括操作系统（OS）120、语音处理器122、对话管理器124以及通信管理器126。如可以认识到的，可将语音处理器122、对话管理器124以及通信管理器126实现为如所示的组合指令集或单独指令集。

一般地，操作系统120本质上控制计算机程序的性能并提供调度、输入输出控制、文件和数据管理、存储器管理以及通信控制和相关服务。语音处理器122接收记录的语音信号（即，由输入/输出控制器122提供）并根据一个或多个语音处理技术来处理所记录的语音信号以识别由用户说出的信息。语音识别技术可包括但不限于使用用航空航天衍生词汇修饰的标准语言模型的商用成品翻译工具的组合。在各种实施例中，语音处理技术可以是说话者相关的。也就是说，被用来处理语音的技术和校准文件取决于说话者说话。

对话管理器124存储多个预定义对话文件125。每个对话文件包括一个或多个指令和一个或多个音频文件，其存储用于与用户进行对话以便捕获所需信息的提示。所述一个或多个指令和一个或多个音频文件是根据定义过程流程定义的。该过程流程是部件和/或要对部件执行的程序所特有的。例如，在一个实施例中，可将该过程流程定义成遵循将在维护程序期间填写的信息表格的格式，所述信息表格诸如图4中所示的示例性部分表格300。表格300包括要求信息的多个字段。过程流程定义如何以最适合于部件的方式来获得用于各字段的信息。例如，对话提示的顺序可以不一定遵循表格300中的字段的顺序，相反地，可将对话提示的顺序定义成遵循根据正在部件上执行的程序的信息可访问性。

返回参考图2，对话管理器124基于用户选择的部件和/或程序来检索预定义对话文件125中的一个。对话管理器124执行预定义对话文件125的指令，使得适当的提示可以被播放（例如，经由音频文件），并且可以存储来自语音处理器122的所识别信息。

通信管理器126将存储的信息传送至主机计算设备14。通信管理器126基于来自用户的提示而传送存储的信息和/或一旦其确定预定义对话的处理完成就传送该信息。

现在转到图3，更详细地示出了主机计算设备14。示例性主机计算设备14被示为包括计算机201。如可以认识到的，计算机201可以是任何计算设备，包括但不限于台式计算机、膝上型计算机、服务器、便携式手持设备或任何其他电子设备或许多联网设备。出于示例性目的，将在计算机是单个服务器的背景下讨论本公开。

计算机201被示为包括一个或多个处理器202、被耦合到存储器控制器206的存储器204、经由本地输入/输出控制器212被通信耦合的一个或多个输入和/或输出（I/O）设备208、210（或外围设备）以及被耦合到显示器216的显示器控制器214。在示例性实施例中，可以将常规键盘222和鼠标224以及任何其他输入设备耦合到输入/输出控制器212。在示例性实施例中，主机计算设备14还可以包括用于耦合到一个或多个无线网络16的一个或多个网络接口218。

在各种实施例中，存储器204存储可以由处理器202执行的指令。存储在存储器204中的指令可包括一个或多个单独程序，其中的每一个包括用于实现逻辑功能的可执行指令的有序列表。当计算机201在操作中时，处理器202被配置成执行存储在存储器204内的指令、向和从存储器204传送数据以及一般地根据指令来控制计算机201的操作。处理器202可以是任何定制的或市售的处理器、中央处理单元（CPU）、与计算机201相关联的若干处理器之中的辅助处理器、基于半导体的微处理器（微芯片或芯片组的形式）、宏处理器，或用于执行指令的一般的任何设备。

在图3的示例中，存储在存储器204中的指令包括操作系统（OS）226、维护应用程序228以及输入管理器230。如可以认识到的，在各种其他实施例中，可以在单独存储介质（未示出）或其他计算设备（未示出）（诸如另一服务器或其他计算设备）上面实现维护应用程序228的全部或一部分，并且其可以与计算机201通信。出于示例性目的，将在系统全部是完全在计算机201上实现的背景下讨论本公开。

一般地，操作系统226控制计算机程序的性能并提供调度、输入输出控制、文件和数据管理、存储器管理以及通信控制和相关服务。输入管理器230接收由移动语音处理模块18（图2）发送的信息，处理该信息，并将该信息提供给维护应用程序228。特别地，输入管理器230接收信息并将该信息提供给维护应用程序228，使得可以将该信息与维护表格（例如，图4中所示的示例性表格300）的特定字段相关联。例如，可以用维护表格字段标识来标记信息，使得可以将该信息返回到维护表格字段。

维护应用程序228接收信息并用适当信息来填充适当字段。维护应用程序228可管理用户接口239以便由显示器216或远程系统（未示出）的显示器显示。用户接口239显示所捕获信息。例如，用户接口239显示在适当字段中包括所捕获信息的表格。

现在参考图5并继续参考图1-4，所图示的流程图描绘了根据各种实施例的可以由维修和检修系统10执行的方法。如根据本公开可以认识到的，方法内的操作顺序不限于如图5中所图示的连续执行，而是可在适用时且根据本公开按照一个或多个不同的顺序执行。

在一个示例中，方法可在400处开始。在410处接收用于维修或检修的部件30。在420处对移动语音处理系统12进行初始化（例如，开启并执行任何其他启动程序）。在430处由用户选择部件和/或程序，例如通过用户说出部件名称或号码和/或与维修或检修程序相关联的名称或号码，移动记录设备20记录语音，以及移动语音处理模块18根据一个或多个语音识别技术来处理所记录的语音。移动语音处理模块18在440处基于所选部件和/或程序来检索预定义对话（例如，从多个预先存储对话中检索）。

其后，移动语音处理模块18在450-460处执行预定义对话的指令。特别地，移动语音处理模块18生成音频信号以从用户22请求特定信息，确认由用户22说出的特定信息和/或向用户22命令维修或检修的指令，响应于音频信号而处理语音信号以识别信息，并存储所识别信息。

一旦在460处对话完成，在470处将存储信息无线地发送到主机计算设备14（例如，自动地或基于用以进行发送的用户提示）。输入管理器230接收发送的信息，处理发送的信息并将该信息提供给维护应用程序228以用于适当字段的填充。在490处，维护应用程序228将信息存储在适当字段中。其后，该方法可在500处结束。

本领域的技术人员将认识到的是可将结合在本文中公开的实施例所述的各种说明性逻辑块、模块以及算法步骤实现为电子硬件、计算机软件或两者的组合。上文根据功能和/或逻辑块部件（或模块）和各种处理步骤描述了一些实施例和实施方式。然而，应认识到的是可用被配置成执行指定功能的任何数目的硬件、软件和/或固件部件来实现此类块部件（或模块）。为了清楚地举例说明硬件和软件的可互换性，上文已经一般地根据其功能描述了各种说明性部件、块、模块、电路以及步骤。此类功能被实现为硬件还是软件取决于施加于整个系统的特定应用和设计约束。技术人员可针对每个特定应用以不同的方式实现所述功能，但不应将此类实现决策解释为引起对本发明的范围的背离。例如，系统或部件的实施例可采用各种集成电路部件，例如存储元件、数字信号处理元件、逻辑元件、查找表等，其可在一个或多个微处理器或其他控制设备的控制下执行多种功能。另外，本领域的技术人员将认识到的是本文所述的实施例仅仅是示例性实施方式。

结合在本文中公开的实施例描述的各种说明性逻辑块、模块以及电路可用通用处理器、数字信号处理器（DSP）、专用集成电路（ASIC）、现场可编程门阵列（FPGA）或其他可编程逻辑器件、分立门或晶体管逻辑、分立硬件部件或被设计成执行本文所述功能的其任何组合来实现或执行。通用处理器可以是微处理器，但是作为替换，处理器可以是任何常规处理器、控制器、微控制器或状态机。还可将处理器实现为计算设备的组合，例如DSP和微处理器的组合、多个微处理器、与DSP核相结合的一个或多个微处理器或任何其他此类配置。

可直接地用硬件、用由处理器执行的软件模块或者用两者的组合来体现结合在本文中公开的实施例所述的方法或算法的步骤。软件模块可驻留于RAM存储器、闪速存储器、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或在本领域中已知的任何其他形式的存储介质中。示例性存储介质被耦合到处理器，使得处理器可以从存储介质读取信息以及向存储介质写入信息。作为替换，存储介质可与处理器成一整体。处理器和存储介质可驻留于ASIC中。ASIC可驻留于用户终端中。作为替换，处理器和存储介质和作为分立部件驻留于用户终端中。

在本文中，诸如第一和第二等关系术语可仅仅被用来将一个实体或动作与另一实体或动作区别开而不一定要求或暗示此类实体或动作之间的任何实际的此类关系或顺序。诸如“第一”、“第二”、“第三”等数值序数仅仅表示多个中的不同的个体，而不暗示任何顺序或序列，除非由权利要求语言具体地定义。任何权利要求中的文本序列并不暗示必须根据此类序列按照时间或逻辑顺序来执行过程步骤，除非其由权利要求的语言具体地定义。在不脱离本发明的范围的情况下可将过程步骤按照任何顺序交换，只要此类交换并不违背权利要求语言且并非在逻辑上无意义即可。

虽然在本发明的先前详细描述中已经提出了至少一个示例性实施例，但应认识到的是存在许多变化。还应认识到的是一个或多个示例性实施例仅仅是示例，并不意图以任何方式限制本发明的范围、适用性或配置。相反地，先前的详细描述将为本领域的技术人员提供用于实现本发明的示例性实施例的方便指南。应理解的是在不脱离如在所附权利要求中阐述的本发明的范围的情况下可对示例性实施例中所述的元件的功能和布置进行各种改变。

Claims (8)

1.一种在维护程序期间识别与系统的一个或多个部件相关联的信息的方法，包括：

由用户使用可穿戴设备来管理对话，其中基于已从多个存储的预定义对话文件中选择的预定义对话文件来管理对话，其中通过识别在由用户使用可穿戴设备执行的维护程序中处理的信息对预定义对话文件进行选择，其中在第一和第二预定义文件过程流程中配置选择的预定义对话文件，

其中第一预定义文件过程流程根据用以识别与系统的一个或多个部件相关联的信息的信息表格的信息的填写的维护程序，以及

其中第二预定义文件过程流程根据与维护程序的系统的一个或多个部件相关联的在部件中的每个上执行的信息的可访问性，所述对话的管理进一步包括：

从所述用户的对话接收所述可穿戴设备处的语音信号，所述语音信号包括：所述维护程序的与所述一个或多个部件相关联的信息；

通过在可穿戴设备处的语音识别技术来处理所述对话的语音信号以识别与所述系统的一个或多个部件相关联的信息，包括：

基于部件系统信息从多个存储的预定义对话文件中检索预定义对话文件；执行预定义对话文件的指令集以生成和处理音频信号包括以下步骤：

从用户请求维护信息，

确认用户说出的维护信息，

向用户命令指令，以及

响应于指令命令维护信息请求处理用户说出的维护信息；

将维护信息从所述可穿戴设备发送到主机计算机以供维护应用程序使用；

在所述主机计算机处接收维护信息；

将所述维护信息提供给所述维护应用程序；以及

用所提供的维护信息填充维护应用程序的信息表格的字段。

2.根据权利要求1所述的方法，其中，所述发送是自动地执行的。

3.根据权利要求1所述的方法，其中，所述发送是在对话完成时执行的。

4.根据权利要求1所述的方法，其中，所述发送是在接收到用以进行发送的信号请求时执行的。

5.一种在维护程序期间识别与系统的部件相关联的信息的系统，包括：

主机计算机的维护应用程序；

与主机计算机通信的可穿戴设备，其中，所述可穿戴设备被配置成：

管理对话，其中基于已从多个存储的预定义对话文件中选择的预定义对话文件来管理对话，其中通过识别在由用户使用可穿戴设备执行的维护程序中处理的信息对预定义对话文件进行选择，其中在第一和第二预定义文件过程流程中配置选择的预定义对话文件，

其中第一预定义文件过程流程根据用以识别部件系统信息的在维护程序期间信息表格的信息的填写的维护程序，以及

其中第二预定义文件过程流程根据与根据维护程序部件相关联的在系统的部件上执行的信息的可访问性，用于管理对话的所述可穿戴设备进一步配置成：

从所述用户的对话接收所述可穿戴设备处的语音信号，所述语音信号包括：所述维护程序的所述与系统的部件相关联的信息；

基于与系统的部件相关联的信息通过在可穿戴设备处的语音识别技术来处理所述对话的语音信号包括以下步骤：

基于部件系统信息从多个存储的预定义对话文件中检索预定义对话文件，以及

执行预定义对话文件的指令集以生成和处理音频信号包括以下步骤：

从用户请求维护信息，

确认用户说出的维护信息，

向用户命令指令，以及

响应于指令命令维护信息请求处理说出的维护信息；以及

将维护信息发送到主机计算机以供维护应用程序使用，

其中所述维护应用程序被配置成：

接收维护信息；以及

用所述维护信息填充所述维护应用程序的信息表格的字段。

6.根据权利要求5所述的系统，其中所述可穿戴设备自动地发送所述维护信息。

7.根据权利要求5所述的系统，所述可穿戴设备在所述对话完成时发送所述维护信息。

8.根据权利要求5所述的系统，所述可穿戴设备在接收到用以进行发送的信号请求时发送所述维护信息。

Images