CN107765838A - 人机交互辅助方法及装置 - Google Patents

人机交互辅助方法及装置 Download PDF

Info

Publication number
CN107765838A
CN107765838A CN201610682959.7A CN201610682959A CN107765838A CN 107765838 A CN107765838 A CN 107765838A CN 201610682959 A CN201610682959 A CN 201610682959A CN 107765838 A CN107765838 A CN 107765838A
Authority
CN
China
Prior art keywords
control instruction
equipment
man
machine interaction
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610682959.7A
Other languages
English (en)
Inventor
林皓
钟力
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing VRV Software Corp Ltd
Original Assignee
Beijing VRV Software Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing VRV Software Corp Ltd filed Critical Beijing VRV Software Corp Ltd
Priority to CN201610682959.7A priority Critical patent/CN107765838A/zh
Priority to PCT/CN2016/000512 priority patent/WO2018032126A1/zh
Priority to EP16912890.7A priority patent/EP3502807B1/en
Publication of CN107765838A publication Critical patent/CN107765838A/zh
Priority to US16/243,303 priority patent/US20190147877A1/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/205—Parsing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1822—Parsing for meaning understanding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Abstract

本发明一种人机交互辅助方法及装置，应用于与执行设备连接的人机交互辅助设备，所述方法包括：获取第一控制指令，其中，所述第一控制指令包括语音控制指令和/或文本控制指令；解析所述第一控制指令；根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设能被至少一所述执行设备解析的控制指令；根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备，向所述第一控制指令对应的目标执行设备发送所述第二控制指令。如此，在不投入额外成本改进所述执行设备的信息接收接口或智能化水平的前提下，达到了辅助所述执行设备解析用户下达的指令的效果。

Description

人机交互辅助方法及装置
技术领域
本发明涉及信息技术和物联网领域，具体而言，涉及一种人机交互辅助方法及装置。
背景技术
随着移动互联网、物联网及人工智能技术的飞速发展，越来越多智能化的执行设备具备了接收数字化的控制信息的功能，通过接收用户发送的语音或发送文字等信息，解析出用户的指令来完成相应的动作。
目前执行设备的只能理解一些标准形式的控制指令，在用户下达的控制指令是非标准形式指令(如“有点热，空调开到26度吧”)或非标准发音的语音指令(如用方言下达的语音指令)时，执行设备无法解析用户下达的指令，不能及时执行用户需要的动作。
现有解决方案中，或依靠用户下达标准形式的指令，以便执行设备解析，如此，用户需要记住不同指令的形式使用标准发音，使用十分不便，降低了用户体验；或依靠设备厂家提高执行设备的智能化水平，提高执行设备对非标准形式控制指令的理解能力，如此需增加大量的资本投入对执行设备进行改进。
所以，如何提供一种经济且有效的方法来辅助执行设备解析用户下达的控制指令，成为本领域技术人员亟待解决的问题。
发明内容
为了克服现有技术中的上述不足，本发明所要解决的技术问题是提供一种独立于执行设备且能辅助执行设备解析用户发出的控制指令的人机交互辅助方法和装置。
就方法而言，本发明提供了一种人机交互辅助方法，应用于与执行设备连接的人机交互辅助设备，所述方法包括：
获取第一控制指令，其中，所述第一控制指令包括语音控制指令和/或文本控制指令。
解析所述第一控制指令。
根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设的能被至少一所述执行设备解析的控制指令。
根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备，向所述第一控制指令对应的目标执行设备发送所述第二控制指令。
进一步地，在上述人机交互辅助方法中，所述获取第一控制指令的步骤包括：
接收所述执行设备在解析所述第一控制指令失败时发送的协助解析请求。
获取所述执行设备发送的解析失败的所述第一控制指令。
进一步地，在上述人机交互辅助方法中，所述方法还包括：
在所述人机交互辅助设备解析所述第一控制指令失败时，发送解释失败通知。
进一步地，在上述人机交互辅助方法中，所述获取第一控制指令的步骤包括：
获取不同用户间，或用户与所述执行设备之间，或不同所述执行设备间的交互信息。
解析并提取所述交互信息中包含的所述第一控制指令。
进一步地，在上述人机交互辅助方法中，所述根据所述第一控制指令生成相应的第二控制指令的步骤包括：
获取所述第一控制指令中的关键字段，所述关键字段包括目标执行设备、执行动作、执行参数。
根据所述关键字段生成所述第二控制指令。
本发明还提供一种人机交互辅助方法，应用于相互连接的执行设备和人机交互辅助设备，所述方法包括：
所述人机交互辅助设备获取第一控制指令，其中，所述第一控制指令包括语言形式的语音控制指令或文本控制指令。
解析所述第一控制指令。
根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设能被至少一所述执行设备解析的控制指令。
根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备，向所述第一控制指令对应的目标执行设备发送所述第二控制指令。
所述执行设备响应所述第二控制指令，并执行与所述第二控制指令相应的动作。
进一步地，在上述人机交互辅助方法中，所述人机交互辅助设备获取第一控制指令的步骤包括：
所述执行设备获得用户发送的所述第一控制指令。
当解析所述第一控制指令不成功时向所述人机交互辅助设备发送协助解析请求。
接收所述执行设备在解析所述第一控制指令失败时发送的协助解析请求。
获取所述执行设备发送的解析失败的所述第一控制指令。
进一步地，在上述人机交互辅助方法中，所述方法还包括：
在所述人机交互辅助设备解析所述第一控制指令失败时，向用户及所述执行设备发送解释失败通知。
进一步地，在上述人机交互辅助方法中，所述人机交互辅助设备获取第一控制指令的步骤包括：
所述人机交互辅助设备获取不同用户间，或用户与所述执行设备之间，或不同所述执行设备间的交互信息。
解析并提取所述交互信息中包含的所述第一控制指令。
就装置而言，本发明提供一种人机交互辅助装置，应用于与执行设备连接的人机交互辅助设备，所述装置包括：
第一控制指令获取模块，用于获取第一控制指令，其中，所述第一控制指令包括语音控制指令和/或文本控制指令。
解析模块，用于解析所述第一控制指令。
第二控制指令生成模块，用于根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设能被至少一所述执行设备解析的控制指令。
第二控制指令发送模块，用于根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备，向所述第一控制指令对应的目标执行设备发送所述第二控制指令。
相对于现有技术而言，本发明具有以下有益效果：
本发明提供的一种人机交互辅助方法和装置，通过设置独立于所述执行设备的人机交互辅助设备，由所述人机交互辅助设备解析所述执行设备不能理解的所述第一控制指令，并生成可以被所述执行设备理解的第二控制指令发送给所述执行设备。如此，在不投入额外成本改进所述执行设备的信息接收接口或智能化水平的前提下，达到了辅助所述执行设备解析用户下达的指令的效果。本发明提供的方法简单易行，有效节约了成本，且提高了用户体验。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为本发明实施例提供的应用环境示意图；
图2为本发明实施例提供的人机交互辅助设备结构框图；
图3为本发明实施例提供的人机交互辅助方法流程示意图之一；
图4为本发明步骤S110的子步骤流程示意图之一；
图5为本发明步骤S110的子步骤流程示意图之二；
图6为本发明实施例提供的人机交互辅助方法流程示意图之二；
图7为本发明步骤S140的子步骤流程示意图；
图8为本发明实施例提供的人机交互辅助方法流程示意图之三；
图9为本发明步骤S210的子步骤流程示意图之一；
图10为本发明步骤S210的子步骤流程示意图之二；
图11为本发明实施例提供的人机交互辅助方法流程示意图之四；
图12为本发明实施例提供的人机交互辅助装置结构框图。
上述附图中，各附图标记对应的名称为：
人机交互辅助设备 100
人机交互辅助装置 110
第一控制指令获取模块 111
解析模块 112
第二控制指令生成模块 113
第二控制指令发送模块 114
存储器 120
处理器 130
通信单元 140
执行设备 200
网络 300
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
在本发明的描述中，需要说明的是，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
在本发明的描述中，还需要说明的是，除非另有明确的规定和限定，术语“设置”、“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
如图1所示，是本发明较佳实施例提供的人机交互辅助设备100与至少一执行设备200通信的交互示意图。所述人机交互辅助设备100可通过网络300与所述执行设备200进行通信，以实现人机交互辅助设备100与执行设备200之间的数据通信或交互。所述网络300可以是，但不限于，有线网络或无线网络。所述网络300可以是，但不限于，局域网或互联网。
如图2所示，是图1所示的人机交互辅助设备100的方框示意图。所述人机交互辅助设备100包括人机交互辅助装置110、存储器120、处理器130、通信单元140。
所述存储器120、处理器130以及通信单元140各元件相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述人机交互辅助装置110包括至少一个可以软件或固件(firmware)的形式存储于所述存储器120中或固化在所述人机交互辅助设备100的操作系统(operating system，OS)中的软件功能模块。所述处理器130用于执行所述存储器120中存储的可执行模块，例如所述人机交互辅助装置110所包括的软件功能模块及计算机程序等。
其中，所述存储器120可以是，但不限于，随机存取存储器(Random AccessMemory，RAM)，只读存储器(Read Only Memory，ROM)，可编程只读存储器(ProgrammableRead-Only Memory，PROM)，可擦除只读存储器(Erasable Programmable Read-OnlyMemory，EPROM)，电可擦除只读存储器(Electric Erasable Programmable Read-OnlyMemory，EEPROM)等。其中，存储器120用于存储程序，所述处理器130在接收到执行指令后，执行所述程序。所述通信单元140用于通过所述网络300建立所述人机交互辅助设备100与执行设备200之间的通信连接，并用于通过所述网络300收发数据。
如图3所示，是应用于图1所示的人机交互辅助设备100的一种人机交互辅助方法的流程示意图，所述方法包括以下步骤。
步骤S110，所述人机交互辅助设备100获取第一控制指令，其中，所述第一控制指令包括语音控制指令和/或文本控制指令。
具体地，请参照图4，在本实施例的第一实施方式中，步骤S110，可以包括以下子步骤：
子步骤S111，接收所述执行设备200在解析所述第一控制指令失败时发送的协助解析请求。
在本实施方式中，所述执行设备200接收用户发送的所述第一控制指令，其中，用户发送所述第一控制指令方式为可以为直接向所述执行设备200发送语音指令，也可以为通过用户终端向所述执行设备200发送语音或文字指令。当所述执行设备200解析该第一控制失败时，向所述人机交互辅助设备100发送协助解析请求。
子步骤S112，获取所述执行设备200发送的解析失败的所述第一控制指令。
所述人机交互辅助设备100接收到所述协助解析请求后，从所述执行设备200处获取其解析失败的第一控制指令。
具体地，请参照图5，在本实施例的第二实施方式中，步骤S110可以包括以下子步骤：
子步骤S113，获取不同用户间，或用户与所述执行设备之间，或不同所述执行设备间的交互信息。
在本实施方式中，不同用户间，和/或用户与所述执行设备之间，和/或不同所述执行设备间通过网络300组成一即时通信组群，所述人机交互辅助设备100获取该组群中的交互信息。其中，所述交互信息可以为，但不仅限于语音信息或文字信息。
子步骤S114，解析并提取所述交互信息中包含的所述第一控制指令。
所述人机交互辅助设备100在所述交互信息中筛选提取出其中包含的所述第一控制指令。
步骤S120，解析所述第一控制指令。
具体地，在本实施例中，所述人机交互辅助设备100通过语音识别模型和/或语义分析模型解析所述第一控制指令。其中，所述语音识别模型包括，但不限于隐马尔科夫(HMM)模型和人工神经网络模型；所述语义分析模型包括，但不限于词法依存(WD)模型、概念依存(CD)模型与核心依存(KD)模型。
在本实施例的第一实施方式中，请参照图6，所述方法还可以包括步骤S130。
步骤S130，在所述人机交互辅助设备100解析所述第一控制指令失败时，发送解析失败通知。
当所述人机交互辅助设备100解析所述第一控制指令失败时，向用户或用户终端发送解析失败的通知，提示用户重新下达指令。
步骤S140，根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设的能被至少一所述执行设备200解析的控制指令。
具体地，请参照图7，步骤S140可以包括以下子步骤。
子步骤S141，获取所述第一控制指令中的关键字段，所述关键字段可以包括，但不仅限于目标执行设备、执行动作、执行参数。
在本实施例中，所述人机交互辅助设备100可以针对与之连接的不同的执行设备的类型(如智能家电类、智能穿戴设备类以及远程监控摄像类等)，设定不同的关键字段提取的种类。
子步骤S142，根据所述关键字段生成所述第二控制指令。
所述人机交互辅助设备100根据所述关键字段中指定的目标执行设备类型，采用对应的指令格式，生成与所述关键字段中信息匹配的所述第二控制指令。
步骤S150，根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备200，向所述第一控制指令对应的目标执行设备200发送所述第二控制指令。
所述人机交互辅助设备100根据所述第一控制指令中执行设备200，将解析后的所述第二控制指令发送给该执行设备200。
请参照图8，本实施例还提供一种人机交互辅助方法，所述方法包括以下步骤。
步骤S210，所述人机交互辅助设备100获取第一控制指令，其中，所述第一控制指令包括语言形式的语音控制指令或文本控制指令。
请参照图9，在本实施例的第三实施方式中，步骤S210可以包括以下子步骤。
子步骤S211，所述执行设备200获得用户发送的所述第一控制指令.
子步骤S212，当解析所述第一控制指令不成功时向所述人机交互辅助设备100发送协助解析请求。
子步骤S213，接收所述执行设备200在解析所述第一控制指令失败时发送的协助解析请求。
子步骤S214，获取所述执行设备200发送的解析失败的所述第一控制指令。
请参照图10，在本实施例的第四实施方式中，步骤S210可以包括以下子步骤。
子步骤S215，所述人机交互辅助设备100获取不同用户间，或用户与所述执行设备200之间，或不同所述执行设备200间的交互信息；
子步骤S216，解析并提取所述交互信息中包含的所述第一控制指令。
步骤S220，解析所述第一控制指令。
请参照图11，在本实施例的第三实施方式中，所述方法还包括步骤S230。
步骤S230，在所述人机交互辅助设备100解析所述第一控制指令失败时，向用户及所述执行设备200发送解释失败通知。
步骤S240，根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设的能被至少一所述执行设备200解析的控制指令。
步骤S250，根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备200，向所述第一控制指令对应的目标执行设备200发送所述第二控制指令。
步骤S260，所述执行设备200响应所述第二控制指令，并执行与所述第二控制指令相应的动作。
请参照图12，本实施例还提供一种人机交互辅助装置110，应用于与至少一执行设备200连接的人机交互辅助设备100，所述装置包括：
第一控制指令获取模块111，用于获取第一控制指令，其中，所述第一控制指令包括语音控制指令和/或文本控制指令。
解析模块112，用于解析所述第一控制指令。
第二控制指令生成模块113，用于根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设能被至少一所述执行设备200解析的控制指令。
第二控制指令发送模块114，用于根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备200，向所述第一控制指令对应的目标执行设备200发送所述第二控制指令。
综上所述，本发明提供的一种人机交互辅助方法和装置，通过设置独立于所述执行设备200的所述人机交互辅助设备100，由所述人机交互辅助设备100解析所述执行设备200不能理解的所述第一控制指令，并生成可以被所述执行设备200理解的第二控制指令发送给所述执行设备200。如此，在不投入额外成本改进所述执行设备200的信息接收接口或智能化水平的前提下，达到了辅助所述执行设备200解析用户下达的指令的效果。本发明提供的方法简单易行，有效节约了成本，且提高了用户体验。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种人机交互辅助方法，应用于与执行设备连接的人机交互辅助设备，其特征在于，所述方法包括：
获取第一控制指令，其中，所述第一控制指令包括语音控制指令和/或文本控制指令；
解析所述第一控制指令；
根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设的能被至少一所述执行设备解析的控制指令；
根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备，向所述第一控制指令对应的目标执行设备发送所述第二控制指令。
2.根据权利要求1所述的人机交互辅助方法，其特征在于，所述获取第一控制指令的步骤包括：
接收所述执行设备在解析所述第一控制指令失败时发送的协助解析请求；
获取所述执行设备发送的解析失败的所述第一控制指令。
3.根据权利要求2所述的人机交互辅助方法，其特征在于，所述方法还包括：
在所述人机交互辅助设备解析所述第一控制指令失败时，发送解释失败通知。
4.根据权利要求1所述的人机交互辅助方法，其特征在于，所述获取第一控制指令的步骤包括：
获取不同用户间，或用户与所述执行设备之间，或不同所述执行设备间的交互信息；
解析并提取所述交互信息中包含的所述第一控制指令。
5.根据权利要求1所述人机交互辅助方法，其特征在于，所述根据所述第一控制指令生成相应的第二控制指令的步骤包括：
获取所述第一控制指令中的关键字段，所述关键字段包括目标执行设备、执行动作及执行参数；
根据所述关键字段生成所述第二控制指令。
6.一种人机交互辅助方法，应用于相互连接的执行设备和人机交互辅助设备，其特征在于，所述方法包括：
所述人机交互辅助设备获取第一控制指令，其中，所述第一控制指令包括语言形式的语音控制指令或文本控制指令；
解析所述第一控制指令；
根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设的能被至少一所述执行设备解析的控制指令；
根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备，向所述第一控制指令对应的目标执行设备发送所述第二控制指令；
所述执行设备响应所述第二控制指令，并执行与所述第二控制指令相应的动作。
7.根据权利要求6所述的人机交互辅助方法，其特征在于，所述人机交互辅助设备获取第一控制指令的步骤包括：
所述执行设备获得用户发送的所述第一控制指令；
当解析所述第一控制指令不成功时向所述人机交互辅助设备发送协助解析请求；
接收所述执行设备在解析所述第一控制指令失败时发送的协助解析请求；
获取所述执行设备发送的解析失败的所述第一控制指令。
8.根据权利要求7所述的人机交互辅助方法，其特征在于，所述方法还包括：
在所述人机交互辅助设备解析所述第一控制指令失败时，向用户及所述执行设备发送解释失败通知。
9.根据权利要求6所述的人机交互辅助方法，其特征在于，所述人机交互辅助设备获取第一控制指令的步骤包括：
所述人机交互辅助设备获取不同用户间，或用户与所述执行设备之间，或不同所述执行设备间的交互信息；
解析并提取所述交互信息中包含的所述第一控制指令。
10.一种人机交互辅助装置，应用于与执行设备连接的人机交互辅助设备，其特征在于，所述装置包括：
第一控制指令获取模块，用于获取第一控制指令，其中，所述第一控制指令包括语音控制指令和/或文本控制指令；
解析模块，用于解析所述第一控制指令；
第二控制指令生成模块，用于根据所述第一控制指令生成相应的第二控制指令，其中，所述第二控制指令为预设能被至少一所述执行设备解析的控制指令；
第二控制指令发送模块，用于根据所述第一控制指令查找与所述第一控制指令对应的目标执行设备，向所述第一控制指令对应的目标执行设备发送所述第二控制指令。
CN201610682959.7A 2016-08-18 2016-08-18 人机交互辅助方法及装置 Pending CN107765838A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201610682959.7A CN107765838A (zh) 2016-08-18 2016-08-18 人机交互辅助方法及装置
PCT/CN2016/000512 WO2018032126A1 (zh) 2016-08-18 2016-09-07 人机交互辅助方法及装置
EP16912890.7A EP3502807B1 (en) 2016-08-18 2016-09-07 Method and apparatus for assisting human-computer interaction
US16/243,303 US20190147877A1 (en) 2016-08-18 2019-01-09 Method for assisting human-computer interaction and computer-readable medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610682959.7A CN107765838A (zh) 2016-08-18 2016-08-18 人机交互辅助方法及装置

Publications (1)

Publication Number Publication Date
CN107765838A true CN107765838A (zh) 2018-03-06

Family

ID=61195911

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610682959.7A Pending CN107765838A (zh) 2016-08-18 2016-08-18 人机交互辅助方法及装置

Country Status (4)

Country Link
US (1) US20190147877A1 (zh)
EP (1) EP3502807B1 (zh)
CN (1) CN107765838A (zh)
WO (1) WO2018032126A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110837227A (zh) * 2018-08-15 2020-02-25 格力电器（武汉）有限公司 电器控制方法及装置
CN113299285A (zh) * 2020-02-22 2021-08-24 北京声智科技有限公司 设备控制方法、装置、电子设备及计算机可读存储介质
CN114578720A (zh) * 2020-12-01 2022-06-03 合肥欣奕华智能机器股份有限公司 控制方法及控制系统

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10102855B1 (en) * 2017-03-30 2018-10-16 Amazon Technologies, Inc. Embedded instructions for voice user interface
JP6928842B2 (ja) * 2018-02-14 2021-09-01 パナソニックＩｐマネジメント株式会社 制御情報取得システム、及び、制御情報取得方法
CN111049905A (zh) * 2019-12-12 2020-04-21 广州大彩光电科技有限公司 基于串口屏的设备远程管控方法及装置
CN111724785B (zh) * 2020-06-29 2023-07-04 百度在线网络技术（北京）有限公司 小程序的语音控制方法、设备及存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103197571A (zh) * 2013-03-15 2013-07-10 张春鹏 一种控制方法及装置、系统
CN103578472A (zh) * 2012-08-10 2014-02-12 海尔集团公司 电器设备的控制方法和控制装置
US20140330435A1 (en) * 2013-05-01 2014-11-06 Honeywell International Inc. Devices and methods for interacting with a control system that is connected to a network
US20150162006A1 (en) * 2013-12-11 2015-06-11 Echostar Technologies L.L.C. Voice-recognition home automation system for speaker-dependent commands
US20150362998A1 (en) * 2014-06-17 2015-12-17 Amazon Technologies, Inc. Motion control for managing content
CN105202706A (zh) * 2015-10-19 2015-12-30 广东美的制冷设备有限公司 空调器控制装置、控制系统及其控制方法
CN105511287A (zh) * 2016-01-27 2016-04-20 珠海格力电器股份有限公司 智能家电控制方法和装置及系统
CN105632494A (zh) * 2015-12-29 2016-06-01 青岛海尔智能家电科技有限公司 智能家电设备的控制方法及装置
CN105872691A (zh) * 2015-12-14 2016-08-17 乐视致新电子科技（天津）有限公司 浏览器控制方法及装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6513006B2 (en) * 1999-08-26 2003-01-28 Matsushita Electronic Industrial Co., Ltd. Automatic control of household activity using speech recognition and natural language
US10333731B2 (en) * 2005-06-09 2019-06-25 Whirlpool Corporation Methods and apparatus for communicatively coupling internal components within appliances, and appliances with external components and accessories
US9712486B2 (en) * 2006-09-25 2017-07-18 Weaved, Inc. Techniques for the deployment and management of network connected devices
US20160112262A1 (en) * 2014-10-18 2016-04-21 Weaved, Inc. Installation and configuration of connected devices
US8527278B2 (en) * 2009-06-29 2013-09-03 Abraham Ben David Intelligent home automation
US8793136B2 (en) * 2012-02-17 2014-07-29 Lg Electronics Inc. Method and apparatus for smart voice recognition
US9462663B2 (en) * 2013-05-28 2016-10-04 Abl Ip Holding Llc Interactive user interface functionality for lighting devices or system
JP6360484B2 (ja) * 2013-09-03 2018-07-18 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 音声対話制御方法
KR102188090B1 (ko) * 2013-12-11 2020-12-04 엘지전자 주식회사 스마트 가전제품, 그 작동방법 및 스마트 가전제품을 이용한 음성인식 시스템
US20150228281A1 (en) * 2014-02-07 2015-08-13 First Principles,Inc. Device, system, and method for active listening
RU2014111971A (ru) * 2014-03-28 2015-10-10 Юрий Михайлович Буров Способ и система голосового интерфейса
JP6482911B2 (ja) * 2014-07-01 2019-03-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 機器制御方法および電気機器
US9680646B2 (en) * 2015-02-05 2017-06-13 Apple Inc. Relay service for communication between controllers and accessories
US10274911B2 (en) * 2015-06-25 2019-04-30 Intel Corporation Conversational interface for matching text of spoken input based on context model
US10365620B1 (en) * 2015-06-30 2019-07-30 Amazon Technologies, Inc. Interoperability of secondary-device hubs
US10091545B1 (en) * 2016-06-27 2018-10-02 Amazon Technologies, Inc. Methods and systems for detecting audio output of associated device

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103578472A (zh) * 2012-08-10 2014-02-12 海尔集团公司 电器设备的控制方法和控制装置
CN103197571A (zh) * 2013-03-15 2013-07-10 张春鹏 一种控制方法及装置、系统
US20140330435A1 (en) * 2013-05-01 2014-11-06 Honeywell International Inc. Devices and methods for interacting with a control system that is connected to a network
US20150162006A1 (en) * 2013-12-11 2015-06-11 Echostar Technologies L.L.C. Voice-recognition home automation system for speaker-dependent commands
US20150362998A1 (en) * 2014-06-17 2015-12-17 Amazon Technologies, Inc. Motion control for managing content
CN105202706A (zh) * 2015-10-19 2015-12-30 广东美的制冷设备有限公司 空调器控制装置、控制系统及其控制方法
CN105872691A (zh) * 2015-12-14 2016-08-17 乐视致新电子科技（天津）有限公司 浏览器控制方法及装置
CN105632494A (zh) * 2015-12-29 2016-06-01 青岛海尔智能家电科技有限公司 智能家电设备的控制方法及装置
CN105511287A (zh) * 2016-01-27 2016-04-20 珠海格力电器股份有限公司 智能家电控制方法和装置及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110837227A (zh) * 2018-08-15 2020-02-25 格力电器（武汉）有限公司 电器控制方法及装置
CN113299285A (zh) * 2020-02-22 2021-08-24 北京声智科技有限公司 设备控制方法、装置、电子设备及计算机可读存储介质
CN114578720A (zh) * 2020-12-01 2022-06-03 合肥欣奕华智能机器股份有限公司 控制方法及控制系统
CN114578720B (zh) * 2020-12-01 2023-11-07 合肥欣奕华智能机器股份有限公司 控制方法及控制系统

Also Published As

Publication number Publication date
EP3502807A4 (en) 2019-08-14
US20190147877A1 (en) 2019-05-16
EP3502807A1 (en) 2019-06-26
EP3502807B1 (en) 2021-12-01
WO2018032126A1 (zh) 2018-02-22

Similar Documents

Publication Publication Date Title
CN107765838A (zh) 人机交互辅助方法及装置
US11848008B2 (en) Artificial intelligence-based wakeup word detection method and apparatus, device, and medium
WO2020182153A1 (zh) 基于自适应语种进行语音识别的方法及相关装置
CN107644638B (zh) 语音识别方法、装置、终端和计算机可读存储介质
CN108010523B (zh) 信息处理方法以及记录介质
KR101768509B1 (ko) 온라인 음성 번역 방법 및 장치
US11417331B2 (en) Method and device for controlling terminal, and computer readable storage medium
KR20170033722A (ko) 사용자의 발화 처리 장치 및 방법과, 음성 대화 관리 장치
WO2015014122A1 (zh) 语音交互的方法、系统以及交互终端
CN104185868A (zh) 话音认证和语音识别系统及方法
EP2455936A1 (en) Speech translation system, dictionary server device, and program
CN104575499B (zh) 移动终端的声控方法及移动终端
JP6675078B2 (ja) 誤認識訂正方法、誤認識訂正装置及び誤認識訂正プログラム
CN116737908A (zh) 知识问答方法、装置、设备和存储介质
JP2018120202A (ja) 情報処理方法及びプログラム
CN109243427A (zh) 一种车辆故障诊断方法及装置
CN112099890A (zh) 远程协助移动终端的方法及系统、设备及存储介质
CN111128175B (zh) 口语对话管理方法及系统
CN107622769B (zh) 号码修改方法及装置、存储介质、电子设备
CN112765981A (zh) 一种文本信息的生成方法和装置
CN111552630A (zh) 技能调试的方法、装置及存储介质
CN111598138A (zh) 一种神经网络学习图像识别方法及装置
CN111128127A (zh) 一种语音识别处理方法及装置
CN112002325B (zh) 多语种语音交互方法和装置
CN114238606A (zh) 一种智能语音客服机器人对话管理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180306