CN109545209A - 操作执行方法、装置及存储介质 - Google Patents

Abstract

本公开是关于一种操作执行方法、装置及存储介质，属于信息技术领域。所述方法包括：对采集的语音信息进行识别，得到该语音信息对应的文本信息；对该文本信息进行解析，当确定该文本信息中缺少满足至少一个预设属性的信息时，根据该文本信息和设备状态信息确定满足每个预设属性的信息，该预设属性是指生成操作指令时所需的操作元素对应的属性；将满足每个预设属性的信息转化为对应的操作元素，按照转化得到的操作元素生成操作指令，并执行操作指令。本公开在语音信息缺少满足预设属性的信息时，可以将设备状态信息作为补充，对语音信息中缺少的信息进行补全，尽可能地减少了向用户询问的次数，简化了用户的操作，提高了操作执行的效率。

Description

操作执行方法、装置及存储介质

技术领域

本公开涉及信息技术领域，尤其涉及一种操作控制方法、装置及存储介质。

背景技术

随着语音识别技术的准确率逐步提高，通过语音信息控制电子设备的方式更加便捷高效，已逐步成为最实用最热门的一种交互方式。例如，当用户的双手被占用，但需要使用电子设备执行一些操作时，可以通过语音信息来控制电子设备执行相应的操作。

相关技术中，通常当电子设备采集到语音信息时，对该语音信息进行识别，得到该语音信息对应的文本信息，对该文本信息进行解析，得到文本信息中每部分信息的属性，按照确定的属性将每部分信息转化为对应的操作元素，按照这些操作元素生成可执行的操作指令，并执行该操作指令以完成相应的操作。

发明内容

本公开提供一种操作执行方法、装置及存储介质，可以解决相关技术中存在的问题。

根据本公开实施例的第一方面，提供一种操作执行方法，所述方法包括：

对采集的语音信息进行识别，得到所述语音信息对应的文本信息；

对所述文本信息进行解析，当确定所述文本信息中缺少满足至少一个预设属性的信息时，根据所述文本信息和设备状态信息确定满足每个预设属性的信息，所述预设属性是指生成操作指令时所需的操作元素对应的属性；

将满足所述每个预设属性的信息转化为对应的操作元素，按照转化得到的操作元素生成操作指令，并执行所述操作指令。

一种可能的实现方式中，所述对所述文本信息进行解析，当确定所述文本信息中缺少满足至少一个预设属性的信息时，根据所述文本信息和设备状态信息确定满足每个预设属性的信息，包括：

对所述文本信息进行解析，提取所述文本信息中已满足第一预设属性的信息；

将所述第一预设属性与每个预设属性进行比较；

当确定所述文本信息中缺少满足第二预设属性的信息时，从所述设备状态信息中提取满足所述第二预设属性的信息。

一种可能的实现方式中，所述设备状态信息包括当前页面信息，所述根据所述文本信息和设备状态信息确定满足所述每个预设属性的信息之前，所述方法还包括：

获取当前显示的页面，将所述页面的显示内容确定为所述当前页面信息。

一种可能的实现方式中，所述设备状态信息还包括当前的可操作对象；所述从所述设备状态信息中提取满足所述第二预设属性的信息，包括：

当从所述当前页面信息中未提取到满足所述第二预设属性的信息时，从所述可操作对象中提取满足所述第二预设属性的信息。

一种可能的实现方式中，所述根据所述文本信息和设备状态信息确定满足所述每个预设属性的信息之前，所述方法还包括：

获取处于前台运行状态的应用的应用标识；

获取当前成功连接的外接设备的设备标识；

将所述应用标识和所述设备标识确定为所述可操作对象。

一种可能的实现方式中，所述方法还包括：

当从所述文本信息和所述设备状态信息中提取的信息仍缺少满足第三预设属性的信息时，播放语音提示信息，所述语音提示信息用于提示用户输入满足所述第三预设属性的语音信息。

根据本公开实施例的第二方面，提供一种操作执行装置，所述装置包括：

识别模块，用于对采集的语音信息进行识别，得到所述语音信息对应的文本信息；

第一确定模块，用于对所述文本信息进行解析，当确定所述文本信息中缺少满足至少一个预设属性的信息时，根据所述文本信息和设备状态信息确定满足每个预设属性的信息，所述预设属性是指生成操作指令时所需的操作元素对应的属性；

生成模块，用于将满足所述每个预设属性的信息转化为对应的操作元素，按照转化得到的操作元素生成操作指令，并执行所述操作指令。

一种可能的实现方式中，所述第一确定模块包括：

第一提取子模块，用于对所述文本信息进行解析，提取所述文本信息已满足第一预设属性的信息；

比较子模块，用于将所述第一预设属性与每个预设属性进行比较；

第二提取子模块，用于当确定所述文本信息中缺少满足第二预设属性的信息时，从所述设备状态信息中提取满足所述第二预设属性的信息。

一种可能的实现方式中，所述设备状态信息包括当前页面信息，所述装置还包括：

第二确定模块，用于获取当前显示的页面，将所述页面的显示内容确定为所述当前页面信息。

一种可能的实现方式中，所述设备状态信息还包括当前的可操作对象；所述第二提取子模块包括：

当从所述当前页面信息中未提取到满足所述第二预设属性的信息时，从所述可操作对象中提取满足所述第二预设属性的信息。

一种可能的实现方式中，所述装置还包括：

第一获取模块，用于获取处于前台运行状态的应用的应用标识；

第二获取模块，用于获取当前成功连接的外接设备的设备标识；

第三确定模块，用于将所述应用标识和所述设备标识确定为所述可操作对象。

一种可能的实现方式中，所述装置还包括：

播放模块，用于当从所述文本信息和所述设备状态信息中提取的信息仍缺少满足第三预设属性的信息时，播放语音提示信息，所述语音提示信息用于提示采集满足所述第三预设属性的语音信息。

根据本公开实施例的第三方面，提供一种操作执行装置，所述装置包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为执行上述第一方面所述的任一项方法的步骤。

根据本公开实施例的第四方面，提供一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，所述指令被处理器执行时实现上述第一方面所述的任一项方法的步骤。

根据本公开实施例的第五方面，提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述第一方面所述的任一项方法的步骤。

本公开的实施例提供的技术方案可以包括以下有益效果：通过对语音信息进行识别，以得到语音信息对应的文本信息。之后对该文本信息进行解析，若确定该文本信息中缺少满足至少一个预设属性的信息时，根据该文本信息和设备状态信息确定满足每个预设属性的信息，并将其转化成对应的操作元素，快速生成操作指令并执行。这样，可以将设备状态信息作为补充，对语音信息中缺少的信息进行补全，尽可能地减少向用户询问的次数，也不需要频繁采集语音信息，提高了操作执行的效率。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是本公开实施例示出的一种操作执行方法的流程图。

图2是本公开实施例示出的另一种操作执行方法的流程图。

图3是本公开实施例示出的一种电子设备的结构示意图。

图4是本公开实施例示出的一种操作执行装置的结构示意图。

图5是本公开实施例示出的一种电子设备的结构示意图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

为了便于理解，在对本公开实施例进行详细地解释说明之前，先对本公开实施例涉及的应用场景进行介绍。

本公开实施例应用于通过语音信息来控制电子设备的应用场景，通常在用户的双手被占用，但需要使用电子设备执行一些操作时，可以通过语音信息来控制电子设备执行相应的操作。

例如，当用户正在开车，但需要回复好友的微信时，可以向手机输入语音信息，如“向XX回复我在开车，待会儿聊”，以控制手机通过微信向“XX”发送文本消息“我在开车，待会儿聊”。

再例如，当用户的双手被占用，想要查询当前位置的天气时，可以向手机输入语音消息，如“查下北京的天气”，以控制手机查询北京的天气。

当然，本公开实施例不仅可以应用于上述两种应用场景中，实际应用中，还可以应用于其他的应用场景中，在此本公开实施例对其他应用场景不再一一列举。

相关技术中，通常是直接根据采集的语音信息进行识别和解析来生成操作指令，由于用户的惯性思维，往往会认为电子设备已经理解自身所看到的场景，因此采集的语音信息中可能会省略掉部分重要信息，那么识别出的文本信息中就会缺少部分重要信息，这种情况下，将文本信息中每部分信息转化成操作元素后，会由于缺少必要操作元素而无法生成操作指令。此时需要向用户进行询问以获知这些必要信息，需要用户频繁输入语音信息，操作繁琐，效率较低。而本公开提供了一种操作执行方法、装置及存储介质，可以解决相关技术中的问题。

图1是本公开实施例示出的一种操作执行方法的流程图，如图1所示，该方法应用于电子设备中，包括以下步骤：

在步骤101中，对采集的语音信息进行识别，得到该语音信息对应的文本信息。

在步骤102中，对该文本信息进行解析，当确定该文本信息中缺少满足至少一个预设属性的信息时，根据该文本信息和设备状态信息确定满足每个预设属性的信息，该预设属性是指生成操作指令时所需的操作元素对应的属性。

在步骤103中，将满足每个预设属性的信息转化为对应的操作元素，按照转化得到的操作元素生成操作指令，并执行操作指令。

一种可能的实现方式中，对该文本信息进行解析，当确定该文本信息中缺少满足至少一个预设属性的信息时，根据该文本信息和设备状态信息确定满足每个预设属性的信息，包括：

对该文本信息进行解析，提取该文本信息中已满足第一预设属性的信息；

将第一预设属性与每个预设属性进行比较；

当确定该文本信息中缺少满足第二预设属性的信息时，从该设备状态信息中提取满足第二预设属性的信息。

一种可能的实现方式中，该设备状态信息包括当前页面信息，根据该文本信息和设备状态信息确定满足每个预设属性的信息之前，该方法还包括：

获取当前显示的页面，将该页面的显示内容确定为当前页面信息。

一种可能的实现方式中，该设备状态信息还包括当前的可操作对象；从该设备状态信息中提取满足第二预设属性的信息，包括：

当从当前页面信息中未提取到满足第二预设属性的信息时，从该可操作对象中提取满足第二预设属性的信息。

一种可能的实现方式中，根据该文本信息和设备状态信息确定满足每个预设属性的信息之前，该方法还包括：

获取处于前台运行状态的应用的应用标识；

获取当前成功连接的外接设备的设备标识；

将该应用标识和该设备标识确定为该可操作对象。

一种可能的实现方式中，该方法还包括：

当从该文本信息和该设备状态信息中提取的信息仍缺少满足第三预设属性的信息时，播放语音提示信息，该语音提示信息用于提示用户输入满足第三预设属性的语音信息。

上述所有可选技术方案，均可按照任意结合形成本公开的可选实施例，本公开实施例对此不再一一赘述。

综上所述，本公开实施例通过对语音信息进行识别，得到语音信息对应的文本信息，对该文本信息进行解析，若确定该文本信息中缺少满足至少一个预设属性的信息时，根据文本信息和设备状态信息确定满足每个预设属性的信息，并转化为对应的操作元素，快速生成操作指令并执行。这样，可以将设备状态信息作为补充，对语音信息中缺少的信息进行补全，尽可能地减少了向用户询问的次数，也不需要用户频繁输入语音信息，简化了用户的操作，提高了操作执行的效率。

下面本公开实施例将对图1所示的实施例进行展开说明，图2是根据本公开实施例示出的另一种操作执行方法的流程图，如图2所示，该方法应用于电子设备中，包括以下步骤：

在步骤201中，对采集的语音信息进行识别，得到语音信息对应的文本信息。

其中，该电子设备可以为移动终端、计算机等，当然也可以为其他设备，对此本公开实施例不予限定。且该电子设备中配置有麦克风，通过麦克风能够采集用户输入的语音信息。

电子设备采集到语音信息时，通过语音识别技术对该语音信息进行识别，以将语音信息转化为相对应的文本信息，语音信息与文本信息表达的内容相同，因此根据文本信息可以确定用户的意图。

该语音信息可以由用户输入，也可以由其他设备对语音消息进行采集，然后发送给该电子设备，电子设备在接收到其他设备发送的语音信息时，对该语音信息进行识别。

在用户输入语音消息的情况下，通常用户需要使用语音信息控制电子设备执行操作时，用户的双手处于被占用的状态。那么用户在输入语音信息时，可以先输入预设语音信息，电子设备的麦克风可以实时采集语音信息。当电子设备采集并识别出该预设语音信息时，启动电子设备中的语音控制功能。之后，用户再输入想要执行的操作对应的语音信息，电子设备通过麦克风采集到该语音信息时，即可根据该语音信息进行相应的操作。

其中，该预设语音信息可以为电子设备默认设置的语音信息，也可以为用户预先设置的语音信息，或者也可以为包含某些特定内容的语音信息。该预设语音信息的内容可以包括某一特定名称，如电子设备为语音控制功能设置的名称等，当然也可以为其他，对此本公开实施例不予限定。

在一种可能实现方式中，进行语音识别时，从采集的语音信息中提取声音特征，并对该声音特征进行预处理，尽可能消除噪声，降低该声音特征中的环境噪声、信道等因素的影响。之后将预处理后的声音特征与声学模型数据库中的声音特征进行匹配，根据声学模型数据库中的声音特征与文本语言数据库中的文本内容之间的对应关系，确定处理后的声音特征对应的文本内容，然后按照规定语法将文本内容断句排列，从而得到文本信息。

在另一种可能实现方式中，如图3所示，电子设备可以包括语音识别模块301、解析模块302和执行模块303。语音识别模块301与解析模块302相连接，解析模块302与执行模块303相连接。语音识别模块301用于识别采集的语音信息，得到对应的文本信息，解析模块302用于对该文本信息进行解析，向执行模块303发送解析结果，执行模块303用于根据解析结果生成操作指令并执行。上述步骤201可以由语音识别模块301执行，在语音识别模块301得到该文本信息时，将该文本信息发送给解析模块302，由解析模块302进行解析。

在步骤202中，对该文本信息进行解析，提取该文本信息中已满足第一预设属性的信息。

在通过步骤201得到语音信息对应的文本信息后，为了根据该文本信息生成操作指令以执行用户所希望的操作，需要对该文本信息进行解析，在该文本信息中缺少满足至少一个预设属性的信息时，根据该文本信息和设备状态信息确定满足每个预设属性的信息，以便后续过程中可以生成操作指令。

其中，操作指令由一个或多个操作元素组成，生成操作指令时需要先确定操作元素，而操作元素实际上就是满足某种属性的信息，确定操作元素的过程实际上就是从文本信息中解析出某种属性的信息的过程。

为此，电子设备可以设置至少一个预设属性，后续从文本信息中提取到满足任一预设属性的信息时，即可将该信息转换为对应的操作元素。

预设属性是指生成操作指令时所需的必要的操作元素对应的属性，包括操作事件、操作事件的内容、操作对象、消息接收方、消息发送方等。操作事件包括发送消息、拨打电话、调整温度等事件；操作事件的内容是指操作事件的具体内容，如操作事件为发送消息，操作事件的内容即为所发送消息的内容，如“我今天不回家”、“给我发张照片”等；操作对象是指电子设备执行操作时所需要控制的对象，如电子设备中的某一应用或者电子设备连接的某一智能设备等。

相应地，操作元素可以表示满足预设属性的具体信息，如操作事件具体是什么、操作事件的具体内容是什么、操作对象是谁等等。例如操作元素可以包括“操作事件为发送消息、发送消息的内容为‘我在开车，待会儿聊’、操作对象为‘XX应用’和消息接收方为小李”等。

一种可能的实现方式，在识别得到该文本信息后，电子设备可以对该文本信息进行解析，理解该文本信息中各部分信息所表达的含义，可以确定各部分信息的属性，进而将该文本信息中已有的属性作为第一预设属性，并提取出满足第一预设属性的信息。

例如，当得到的文本信息为“向妈妈回复消息：我今天晚点回家”。那么，对该文本信息进行解析后，可以理解用户的意图是想要回复消息，且是向妈妈回复，而回复内容为“我今天晚点回家”。那么，电子设备从该文本信息中提取出的信息包括“操作事件：发送消息”；消息接收方：妈妈；发送消息的内容：我今天晚点回家”。

在步骤203中，将第一预设属性与每个预设属性进行比较。

电子设备可以设置至少一个预设属性，并且可以从文本信息中提取到满足至少一个第一预设属性的信息，将该至少一个第一预设属性与至少一个预设属性进行比较，即可确定文本信息所缺少的第二预设属性。

需要说明的是，操作指令由多个操作元素生成，不同的操作元素对应不同的预设属性。由于电子设备执行不同类型的操作事件时，所需的操作元素可能不同，相应地，对应的预设属性也不同。因此，可以预先设置操作事件与预设属性集合之间的对应关系，该预设属性集合包括在执行该操作事件时必需的多个预设属性。在执行步骤203之前，可以先从满足第一预设属性的信息中提取出操作事件，再根据该操作事件，从操作事件与预设属性集合之间的对应关系中，确定该操作事件对应的预设属性集合。之后再将第一预设属性与预设属性集合进行比较，以确定该文本信息不满足的第二预设属性。

例如，上述操作事件和预设属性集合之间的对应关系可以如下表1所示。假设通过上述步骤202确定出该文本信息所指示的操作事件为“发送消息”，则根据表1所示的对应关系可以确定“发送消息”对应的预设属性为“操作对象”、“消息接收方”和“发送消息的内容”。

表1

需要说明的是，本公开实施例仅以上述表1所示的操作事件和预设属性集合之间的对应关系为例进行说明，上述表1并不对本公开实施例构成限定。

在步骤204中，当确定该文本信息中缺少满足第二预设属性的信息时，从设备状态信息中提取满足第二预设属性的信息。

在确定文本信息中缺少满足第二预设属性的信息时，可以从当前获取的电子设备的设备状态信息中，提取满足第二预设属性的信息，获取该文本信息中所缺失的信息。

其中，该设备状态信息是指电子设备当前的运行状态信息，可以表示电子设备当前的运行状态。

一种可能实现方式中，电子设备可以获取当前前台运行的应用、后台运行的应用或者当前与电子设备连接的智能设备，作为设备状态信息。

由于用户通过语音信息来控制电子设备执行操作时，通常会认为电子设备已经理解自身所看到的场景，因此采集的语音信息中可能会省略掉部分重要信息，此时，可以根据设备状态信息来对文本信息进行补充，从设备状态信息中来提取文本信息中所缺少的第二属性的信息。

在一种可能的实现方式中，电子设备还可以包括设备状态获取模块，该设备状态获取模块与解析模块302连接，上述步骤204可以由设备状态获取模块执行。

其中，从设备状态信息中提取满足第二预设属性的信息，可以通过如下步骤的2041-2043中的至少一项来实现。

步骤2041：当确定该文本信息中缺少满足第二预设属性的信息时，若当设备状态信息包括当前页面信息时，从当前页面信息中提取满足第二预设属性的信息。

其中，电子设备获取当前页面信息时，可以获取当前显示的页面，将该页面的显示内容作为当前页面信息。

需要说明的是，当从当前页面信息中提取到满足第二预设属性的信息后，从该文本信息中提取的信息和从当前页面信息中不缺少满足任一预设属性的信息时，可以直接执行步骤205生成操作指令，并执行操作指令。这样，在该文本信息缺少满足第二预设属性的信息时，可以直接从当前页面信息中提取，不需要向用户询问满足第二预设属性的信息，减少了一次操作执行过程中用户输入语音信息的次数，提高了操作执行的效率。

例如，当该文本信息为“回复我正在开车，待会儿聊”，那么可以知道用户当前是希望执行回复消息的操作。通常而言，使用电子设备回复消息时，电子设备必须要了解的信息包括：操作对象、消息接收方和回复内容，而该文本信息中已经包括的第一预设属性有回复内容，缺少的第二预设属性为操作对象和消息接收方。若当前页面的显示内容为XX应用中用户与李某的聊天页面，那么电子设备可以直接从当前页面信息中提取到当前的显示的应用“XX应用”和当前的联系人“李某”，将“XX应用”作为操作对象，将“李某”作为消息接收方，而从该文本信息中可以提取出发送消息的内容为“我正在开车，待会儿聊”。那么，电子设备生成的操作指令为“通过XX应用向李某发送‘我正在开车，待会儿聊’的消息”。

在一种可能的实现方式中，当前页面为电子设备的主界面，但是导航栏显示有接收到李某通过即时通信应用发送的消息的提示，那么电子设备从当前页面信息中也可以获取到操作对象和消息接收方，以进行后续生成操作指令的步骤。

步骤2042：设备状态信息还包括当前的可操作对象；当从当前页面信息中未提取到满足第二预设属性的信息时，从该可操作对象中提取满足第二预设属性的信息。

电子设备获取该可操作对象时，可以获取处于前台运行状态的应用的应用标识，并获取当前成功连接的外接设备的设备标识，之后将该应用标识和该设备标识作为该可操作对象。

其中，该可操作对象为电子设备当前能够控制的对象，可操作对象可以包括电子设备中处于前台运行的应用和电子设备成功连接的外接设备等，例如即时通信息应用、社交应用、空调、智能台灯、加湿器等。

该应用标识用于唯一标识该应用，且该应用标识可以为应用名称、应用编号等，当然也可以为其他标识，对此本公开实施例不予限定。该设备标识用于唯一标识该外接设备，该设备标识可以为外接设备的IP地址、设备名称、设备编号等，如带有特定前缀的SSID(Service Set Identifier，服务集标识)，当然也可以为其他标识，对此本公开实施例不予限定。

需要说明的是，当从该可操作对象中提取到满足第二预设属性的信息后，从该文本信息和当前页面信息中提取的信息不缺少满足任一预设属性的信息时，可以直接执行步骤205。这样，在该文本信息缺少满足第二预设属性的信息时，可以直接从该可操作对象中提取，不需要向用户询问满足第二预设属性的信息，减少了在一次操作执行过程中，用户输入语音信息的频率，提高了操作执行的效率，简化了用户的操作，节省了时间。

例如，当该文本信息为“将温度调高2度”，那么可以理解用户当前是希望通过电子设备调整温度。通常而言，使用电子设备调整温度时，电子设备必须要了解的信息包括调整对象(即操作对象)，以及调整幅度(即操作事件的内容)，而该文本信息中已经包括的第一预设属性有调整幅度“2度”，缺少的第二预设属性为调整对象。假设从电子设备的可操作对象中提取到“空调”作为操作对象，而从该文本信息中可以提取出调整范围为“调高2度”，那么电子设备生成的操作指令为“通过智能家居应用将空调的温度调高2度”。

由于可操作对象通常包括多个，那么从可操作对象中提取满足操作对象这一预设属性的信息时，实际上是从多个可操作对象中选取一个作为操作对象。电子设备可以根据该文本信息来进行选取，从该可操作对象中选取能够执行该文本信息所表示的操作事件的一个可操作对象，将该可操作对象作为操作对象。

例如，若可操作对象包括数字电视、空调、台灯、某一视频播放应用等，那么根据文本信息“将温度调高2度”可知操作事件为调整温度，而在该多个可操作对象中，能够调整温度的只有空调。因此，从该多个可操作对象中提取“空调”作为操作对象。

步骤2043：当从该文本信息和设备状态信息中提取的信息仍缺少满足第三预设属性的信息时，播放语音提示信息，该语音提示信息用于提示用户输入满足该第三预设属性的语音信息，该第三预设属性为至少一个预设属性中除第二预设属性之外的其他预设属性。

电子设备从该文本信息和设备状态信息中提取信息后，提取的信息可能仍缺少满足第三预设属性的信息，导致无法生成操作指令。比如，一种情况是当前页面信息和当前的可操作对象中包括满足同一第三预设属性的不同信息，导致无法准确确定提取哪一个信息，另一种情况是当前页面信息和当前的可操作对象中不存在满足第三预设属性的信息，导致无法提取到该信息。

此时，可以播放语音提示消息，来向用户询问，提醒用户输入满足第三预设属性的语音信息。当电子设备接收到用户反馈的语音信息时，重新执行上述步骤201-202，以获取用户反馈的语音信息中满足第三预设属性的信息。然后执行步骤205以生成操作指令并执行。这样，能够保证获取到满足每个预设属性的信息，以生成操作指令，防止无法生成操作指令或者生成错误的操作指令的情况。

当电子设备从当前页面信息中未提取到操作对象，接着从当前的可操作对象中提取操作对象时，若存在至少两个能够执行文本信息中所指示的操作事件的可操作对象，电子设备无法确定提取哪一个可操作对象，此时，需要播放语音提示消息，以提醒用户输入能够指示操作对象是谁的语音信息。

例如，若该文本信息为“将温度调高2度”，那么电子设备确定操作事件为调整温度，必须要了解的信息包括调整对象(即操作对象)，以及调整幅度(即操作事件的内容)，而该文本信息中已经包括的第一预设属性有调整幅度“2度”，缺少的第二预设属性为调整对象。假设可操作对象包括数字电视、空调、冰箱、某一视频播放应用等，而在该多个可操作对象中，能够调整温度的有“空调”和“冰箱”这两个可操作对象。那么电子设备就无法确定操作对象是“空调”和“冰箱”中的哪一个。因此，需要播放语音提示消息，向用户询问操作对象是谁。

例如，当该文本信息为“回复我正在开车，待会儿聊”，那么可以知道用户当前是希望执行回复消息的操作。通常而言，使用电子设备回复消息时，电子设备必须要了解的信息包括：操作事件、操作对象、消息接收方和回复内容，而该文本信息中已经包括的第一预设属性有操作事件，缺少的第二预设属性为操作对象和消息接收方。若当前页面的显示内容为某一社交应用的非聊天页面，那么电子设备可以直接从当前页面信息中提取到当前显示的应用为“XX社交应用”，将“XX社交应用”作为操作对象，但是仍然无法提取到满足消息接收方这一预设属性的信息，并且从可操作对象中也只能提取到操作对象为“XX社交应用”。此时，可以播放语音提示消息，以提醒用户反馈能够指示消息接收方是谁的语音信息。

在本公开实施例中，上述步骤可以202-204可以由图3中的解析模块302来执行，在确定了满足每个预设属性的信息时，将这些信息发送给执行模块303，由执行模块303进行后续处理。

在步骤205中，将满足每个预设属性的信息转化为对应的操作元素，按照操作元素生成操作指令，并执行操作指令。

将满足每个预设属性的信息转化为对应的操作元素，即为将其转化为电子设备能够识别的操作元素，按照操作元素生成用于控制电子设备执行相应操作的操作指令，并执行该操作指令，即可完成该操作指令所指示的操作。

由于相关技术中，在文本信息中缺少满足预设属性的信息时，直接会询问用户，若缺少满足多个预设属性的信息时，需要用户多次输入语音信息，才能得到生成操作指令所需的所有信息，然后生成操作指令并执行，操作繁琐，花费时间长。

而本公开是在确定文本信息中缺少满足至少一个预设属性的信息时，先从设备状态信息中提取满足该至少一个预设属性的信息，在成功提取到该文本信息中缺少的所有信息时，不需要再向用户询问，也不需要再进行多次语音输入或者进行一次过长的语音输入，简化了用户的操作，同时还可以避免识别过长语音信息时识别结果不准确的情况，提高了准确率。并且，若本公开通过设备状态信息只提取到了部分有用信息，只需要向用户询问未提取到的文本信息中缺少的预设属性的信息，相比于相关技术中的方案，尽可能的减少了向用户询问的询问次数以及用户输入的语音信息的长度，从而能够简化用户的操作，节省了时间。

需要说明的是，在本公开实施例中，上述步骤205可以由图3中的执行模块303来执行，由执行模块303将满足每个预设属性的信息转化为操作元素，按照转化得到的操作元素生成操作指令并执行。这样，可以实现通过语音消息对电子设备的控制，使得用户在双手被占用时，能够按照用户的意愿更加方便、快捷地控制电子设备执行相应的操作。

另外，在本公开实施例中，上述步骤201-205是以电子设备来执行为例进行的详细说明。在另一种可能实现的方式中，也可以由电子设备和服务器交互实现，电子设备获取到采集的语音信息时，将语音信息发送给服务器，由服务器通过步骤201对语音信息进行识别，以得到该语音消息对应的文本信息。之后服务器通过步骤202-204对该文本信息进行解析，并在确定该文本信息中缺少满足至少一个预设属性的信息时，根据该文本信息和接收到的电子设备发送的设备状态信息，来确定满足每个预设属性的信息，之后通过步骤205将满足每个预设属性的信息转化为对应的操作元素，按照操作元素生成操作指令，并执行操作指令，或者将操作指令发送给电子设备，由电子设备执行操作指令。

综上所述，本公开实施例通过对语音信息进行识别，以得到语音信息对应的文本信息。之后对该文本信息进行解析，提取该文本信息中已满足第一预设属性的信息，再将第一预设属性与每个预设属性进行比较，以确定该文本信息中的已有信息不满足的预设属性。当确定该文本信息中缺少满足第二预设属性的信息时，从设备状态信息中提取满足第二预设属性的信息，从而获取到该文本信息满足第一预设属性信息和该文本信息不满足的第二预设属性信息，以确定满足每个预设属性的信息，然后能够直接将满足每个预设属性的信息转化成生成操作指令时所需的操作元素，快速生成操作指令并执行。这样，可以将设备状态信息作为补充，对语音信息中缺少的信息进行补全，从而尽可能的减少向用户询问的次数，也不需要用户频繁输入语音信息，简化了用户的操作，提高了操作执行的效率。

图4是本公开实施例示出的一种操作执行装置结构示意图。参照图4，该装置包括识别模块401，第一确定模块402和生成模块403。

识别模块401，用于对采集的语音信息进行识别，得到该语音信息对应的文本信息；

第一确定模块402，用于对该文本信息进行解析，当确定该文本信息中缺少满足至少一个预设属性的信息时，根据该文本信息和设备状态信息确定满足每个预设属性的信息，该预设属性是指生成操作指令时所需的操作元素对应的属性；

生成模块403，用于将满足每个预设属性的信息转化为对应的操作元素，按照转化得到的操作元素生成操作指令，并执行操作指令。

一种可能的实现方式中，第一确定模块402包括：

第一提取子模块，用于对该文本信息进行解析，提取该文本信息已满足第一预设属性的信息；

比较子模块，用于将该第一预设属性与每个预设属性进行比较；

第二提取子模块，用于当确定该文本信息中缺少满足第二预设属性的信息时，从该设备状态信息中提取满足第二预设属性的信息。

一种可能的实现方式中，该设备状态信息包括当前页面信息，该装置还包括：

第二确定模块，用于获取当前显示的页面，将该页面的显示内容确定为当前页面信息。

一种可能的实现方式中，该设备状态信息还包括当前的可操作对象；第二提取子模块包括：

当从当前页面信息中未提取到满足第二预设属性的信息时，从该可操作对象中提取满足第二预设属性的信息。

一种可能的实现方式中，该装置还包括：

第一获取模块，用于获取处于前台运行状态的应用的应用标识；

第二获取模块，用于获取当前成功连接的外接设备的设备标识；

第三确定模块，用于将该应用标识和该设备标识确定为该可操作对象。

一种可能的实现方式中，该装置还包括：

播放模块，用于当从该文本信息和该设备状态信息中提取的信息仍缺少满足第三预设属性的信息时，播放语音提示信息，该语音提示信息用于提示用户输入满足第三预设属性的语音信息。

综上所述，本公开实施例通过对语音信息进行识别，得到语音信息对应的文本信息，对该文本信息进行解析，若确定该文本信息中缺少满足至少一个预设属性的信息时，根据文本信息和设备状态信息确定满足每个预设属性的信息，并转化为对应的操作元素，快速生成操作指令并执行。这样，可以将设备状态信息作为补充，对语音信息中缺少的信息进行补全，尽可能地减少了向用户询问的次数，也不需要用户频繁输入语音信息，简化了用户的操作，提高了操作执行的效率。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图5是本公开实施例示出的一种操作执行装置的结构示意图。例如，该装置500可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图5，该装置500可以包括以下一个或多个组件：处理组件502，存储器504，电源组件506，多媒体组件508，音频组件510，输入/输出(I/O)的接口512，传感器组件514，以及通信组件516。

处理组件502通常控制该装置500的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件502可以包括一个或多个模块，便于处理组件502和其他组件之间的交互。例如，处理组件502可以包括多媒体模块，以方便多媒体组件508和处理组件502之间的交互。

存储器504被配置为存储各种类型的数据以支持在该装置500的操作。这些数据的示例包括用于在该装置500上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件506为该装置500的各种组件提供电源。电源组件506可以包括电源管理系统，一个或多个电源，及其他与为该装置500生成、管理和分配电源相关联的组件。

多媒体组件508包括在该装置500和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。该触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与该触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件508包括一个前置摄像头和/或后置摄像头。当该装置500处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件510被配置为输出和/或输入音频信号。例如，音频组件510包括一个麦克风(MIC)，当该装置500处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中，音频组件510还包括一个扬声器，用于输出音频信号。

I/O接口512为处理组件502和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件515包括一个或多个传感器，用于为该装置500提供各个方面的状态评估。例如，传感器组件514可以检测到该装置500的打开/关闭状态，组件的相对定位，例如该组件为该装置500的显示器和小键盘，传感器组件514还可以检测该装置500或该装置500一个组件的位置改变，用户与该装置500接触的存在或不存在，该装置500方位或加速/减速和该装置500的温度变化。传感器组件514可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件514还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件516被配置为便于该装置500和其他设备之间有线或无线方式的通信。该装置500可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，该通信组件516还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，该装置500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述图1或图2所示实施例提供的方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器504，上述指令可由该装置500的处理器520执行以完成上述方法。例如，该非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

一种非临时性计算机可读存储介质，当该存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行上述图1或图2的操作执行方法。

一种包含指令的计算机程序产品，当该计算机程序产品中的指令由电子设备的处理器执行时，使得电子设备能够执行上述图1或图2中操作执行方法。

本领域技术人员在考虑说明书及实践这里公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (14)

1.一种操作执行方法，其特征在于，所述方法包括：

对采集的语音信息进行识别，得到所述语音信息对应的文本信息；

对所述文本信息进行解析，当确定所述文本信息中缺少满足至少一个预设属性的信息时，根据所述文本信息和设备状态信息确定满足每个预设属性的信息，所述预设属性是指生成操作指令时所需的操作元素对应的属性；

将满足所述每个预设属性的信息转化为对应的操作元素，按照转化得到的操作元素生成操作指令，并执行所述操作指令。

2.如权利要求1所述的方法，其特征在于，所述对所述文本信息进行解析，当确定所述文本信息中缺少满足至少一个预设属性的信息时，根据所述文本信息和设备状态信息确定满足每个预设属性的信息，包括：

对所述文本信息进行解析，提取所述文本信息中已满足第一预设属性的信息；

将所述第一预设属性与每个预设属性进行比较；

当确定所述文本信息中缺少满足第二预设属性的信息时，从所述设备状态信息中提取满足所述第二预设属性的信息。

3.如权利要求2所述的方法，其特征在于，所述设备状态信息包括当前页面信息，所述根据所述文本信息和设备状态信息确定满足所述每个预设属性的信息之前，所述方法还包括：

获取当前显示的页面，将所述页面的显示内容确定为所述当前页面信息。

4.如权利要求2所述的方法，其特征在于，所述设备状态信息还包括当前的可操作对象；所述从所述设备状态信息中提取满足所述第二预设属性的信息，包括：

当从所述当前页面信息中未提取到满足所述第二预设属性的信息时，从所述可操作对象中提取满足所述第二预设属性的信息。

5.如权利要求1所述的方法，其特征在于，所述根据所述文本信息和设备状态信息确定满足所述每个预设属性的信息之前，所述方法还包括：

获取处于前台运行状态的应用的应用标识；

获取当前成功连接的外接设备的设备标识；

将所述应用标识和所述设备标识确定为所述可操作对象。

6.如权利要求2所述的方法，其特征在于，所述方法还包括：

当从所述文本信息和所述设备状态信息中提取的信息仍缺少满足第三预设属性的信息时，播放语音提示信息，所述语音提示信息用于提示用户输入满足所述第三预设属性的语音信息。

7.一种操作执行装置，其特征在于，所述装置包括：

识别模块，用于对采集的语音信息进行识别，得到所述语音信息对应的文本信息；

第一确定模块，用于对所述文本信息进行解析，当确定所述文本信息中缺少满足至少一个预设属性的信息时，根据所述文本信息和设备状态信息确定满足每个预设属性的信息，所述预设属性是指生成操作指令时所需的操作元素对应的属性；

生成模块，用于将满足所述每个预设属性的信息转化为对应的操作元素，按照转化得到的操作元素生成操作指令，并执行所述操作指令。

8.如权利要求7所述的装置，其特征在于，所述第一确定模块包括：

第一提取子模块，用于对所述文本信息进行解析，提取所述文本信息已满足第一预设属性的信息；

比较子模块，用于将所述第一预设属性与每个预设属性进行比较；

第二提取子模块，用于当确定所述文本信息中缺少满足第二预设属性的信息时，从所述设备状态信息中提取满足所述第二预设属性的信息。

9.如权利要求8所述的装置，其特征在于，所述设备状态信息包括当前页面信息，所述装置还包括：

第二确定模块，用于获取当前显示的页面，将所述页面的显示内容确定为所述当前页面信息。

10.如权利要求8所述的装置，其特征在于，所述设备状态信息还包括当前的可操作对象；所述第二提取子模块包括：

当从所述当前页面信息中未提取到满足所述第二预设属性的信息时，从所述可操作对象中提取满足所述第二预设属性的信息。

11.如权利要求7所述的装置，其特征在于，所述装置还包括：

第一获取模块，用于获取处于前台运行状态的应用的应用标识；

第二获取模块，用于获取当前成功连接的外接设备的设备标识；

第三确定模块，用于将所述应用标识和所述设备标识确定为所述可操作对象。

12.如权利要求8所述的装置，其特征在于，所述装置还包括：

播放模块，用于当从所述文本信息和所述设备状态信息中提取的信息仍缺少满足第三预设属性的信息时，播放语音提示信息，所述语音提示信息用于提示用户输入满足所述第三预设属性的语音信息。

13.一种电子设备，其特征在于，所述电子设备包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为执行权利要求1-6所述的任一项方法的步骤。

14.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现权利要求1-6所述的任一项方法的步骤。