CN115914453A - 一种操作应用程序的方法、终端及服务器 - Google Patents

Abstract

本申请提供一种用于操作应用程序的方法、终端和服务器，方法包括：接收用户命令，所述用户命令包含操作指令信息和被控终端信息；根据所述被控终端信息，从数据库中获取与所述被控终端关联的第一应用程序信息；其中，所述数据库用于存储终端信息与应用程序信息的对应关系数据；拉起所述第一应用程序，将所述操作指令信息传入所述第一应用程序，避免了用户直接对应用程序进行操作，使得用户对于不同的应用程序只需要发出相对统一的命令，而无需对各个应用程序分别进行操作，降低了应用程序操作的复杂度，提高了用户使用体验。

Description

一种操作应用程序的方法、终端及服务器

技术领域

本申请涉及信息处理技术领域，特别涉及一种操作应用程序的方法、终端及服务器。

背景技术

通过应用程序(Application，简称APP)控制的终端如空调、热水器、冰箱等有较多品牌。不同品牌的终端一般由不同的APP控制。假如一个用户家里既有小米的空气净化器，又有美的的空调，还有海尔的冰箱，以及其它品牌的家电，则该用户的手机中需要分别安装米家APP、美的APP和海尔APP等等。当要打开小米的空气净化器时，用户需要在手机中点击米家APP进行操作；当用户需要打开美的空调时，则要在手机中点击美的APP进行操作；当用户需要控制冰箱时，则要在手机中点击海尔APP进行操作，等等。控制不同的终端时，用户需要点击不同的APP进行操作，增加了操作的复杂度和出错率，降低了用户的体验。

发明内容

本申请提供的操作应用程序的方法通过将用户命令中的操作指令信息传入被控终端的APP，使得用户无需对每个被控终端的APP分别进行针对性地操作，降低了APP的操作复杂度，提高了用户体验。

第一方面，本申请提供的操作应用程序APP的方法，通过终端或服务器接收包含操作指令信息和被控终端信息的用户命令，并根据所述被控终端信息，从数据库中获取与该被控终端关联的第一APP信息，然后由终端拉起该第一APP，将上述操作指令信息传入该第一APP，使得用户无需针对某一APP进行操作，只需要给出要控制的终端信息及操作指令信息即可。避免了用户直接对APP进行操作，使得用户对于不同的APP只需要发出相对统一的命令，而无需对各个APP分别进行操作，降低了APP操作的复杂度，提高了用户使用体验。其中，上述数据库可用于存储终端信息与APP信息的对应关系数据。

在一种可能的实现方式中，上述终端或服务器接收的用户命令可为语音命令；上述终端或服务器在根据上述被控终端信息，从数据库中获取与上述被控终端关联的第一APP信息之前，还可进一步对该语音命令进行识别，得到上述操作指令信息和被控终端信息。

在一种可能的实现方式中，上述终端将上述操作指令信息传入第一APP，可包括：

将上述语音命令或文本命令传入上述第一APP；其中，该文本命令通过识别上述语音命令得到，该语音命令或文本命令均包含有上述操作指令信息。

在一种可能的实现方式中，上述语音命令或文本命令中可包含有语音前缀，上述终端将上述语音命令或文本命令传入上述第一APP，可包括：将不包含该唤醒前缀的语音命令或文本命令传入上述第一APP。

在一种可能的实现方式中，将不包含上述唤醒前缀的语音命令或文本命令传入上述第一APP，可包括：在不包含上述唤醒前缀的语音命令或文本命令中，加入上述第一APP的唤醒前缀；之后将语音命令或文本命令传入上述第一APP。

在一种可能的实现方式中，终端接收用户命令之前，还可包括：接收用户指令，呈现被控终端列表；其中，接收用户命令，可包括：接收用户通过从该被控终端列表中选择被控终端，输入的包含有该被控终端信息的命令，并呈现操作按钮；接收用户通过点击该操作按钮，输入的包含有上述操作指令信息的命令。

在一种可能的实现方式中，终端或服务器在终端将上述操作指令信息传入上述第一APP之前，还可包括：生成包含上述操作指令信息的文本命令。

终端将上述操作指令信息传入上述第一APP，可包括：将包含有上述操作指令信息的文本命令传入上述第一APP。

在一种可能的实现方式中，上述终端或服务器根据上述被控终端信息，从数据库中获取与上述被控终端关联的第一APP信息之前，还可包括：接收上述被控终端信息。

在一种可能的实现方式中，上述数据库中的终端信息与APP的对应关系数据可通过以下步骤得到：监测APP运行时接收用户输入的终端信息的步骤；对应存储用户输入的终端信息与运行的APP信息的步骤。

在一种可能的实现方式中，上述监测APP运行时接收用户输入的终端信息的步骤，可包括：监测到上述被控终端组网运行APP时，提示用户输入被控终端信息；然后接收用户输入的终端信息。

在一种可能的实现方式中，上述数据库中的终端信息与APP的对应关系数据可通过以下步骤得到：通过APP的应用程序编程接口API读取被控终端信息的步骤；对应存储读取的被控终端信息与该API所属的APP信息的步骤。

在一种可能的实现方式中，上述数据库中的终端信息与APP的对应关系数据可通过以下步骤得到：监测到APP运行时，拉起设备管理软件的步骤；该设备管理软件弹出对话框，提示用户输入终端信息的步骤；对应存储运行的APP信息与用户输入的终端信息的步骤。

在一种可能的实现方式中，上述数据库中的终端信息与APP的对应关系数据可通过以下步骤得到：接收并存储可信终端发送的终端信息与APP的对应关系数据。

在一种可能的实现方式中，上述终端或服务器根据上述被控终端信息，从数据库中获取与上述被控终端关联的第一APP信息，可包括：当上述数据库中的数据显示上述被控终端有多个时，提示用户进行选择并发出第二次用户命令；其中，该第二次用户命令中包含有唯一标识被控终端的信息；根据该唯一标识被控终端的信息，从数据库中获取与上述被控终端关联的第一APP信息。

第二方面，本申请提供的一种终端，用于执行上述第一方面中的任一项方法。

第三方面，本申请提供的一种服务器，可包括：接收模块、识别模块、确定模块和发送模块。该接收模块用于接收语音命令，该语音命令包含操作指令信息和被控终端信息；该识别模块用于识别该语音命令，得到文本命令以及该操作指令信息和被控终端信息；该确定模块用于根据该被控终端信息，从数据库中获取与该被控终端关联的第一APP信息；其中，该数据库用于存储终端信息与APP信息的对应关系数据；该发送模块用于向终端发送该语音命令和/或文本命令，以及向该终端发送该第一APP信息。

在一种可能的实现方式中，上述接收模块接收的语音命令中可包含唤醒前缀；上述发送模块向上述终端发送的语音命令和/或文本命令中可不包含该唤醒前缀。

在一种可能的实现方式中，上述服务器还可包括：拼接模块。该拼接模块用于在上述语音命令和/或文本命令中，加入上述第一APP的唤醒前缀；上述发送模块向上述终端发送的语音命令和/或文本命令中，加入了上述第一APP的唤醒前缀。

第四方面，本申请提供的一种服务器，可包括：接收模块、识别模块和发送模块。该接收模块用于接收语音命令，该语音命令可包含操作指令信息和被控终端信息；该识别模块用于识别该语音命令，得到文本命令以及该操作指令信息和被控终端信息；该发送模块用于向终端发送该语音命令和/或文本命令，以及向该终端发送该被控终端信息。

第五方面，本申请提供的一种第一终端，可包括：接收模块、识别模块和发送模块。该接收模块用于接收语音命令，该语音命令包含操作指令信息和被控终端信息；该识别模块用于识别该语音命令，得到文本命令以及该操作指令信息和被控终端信息；该发送模块用于向第二终端发送该语音命令和/或文本命令以及向该终端发送该被控终端信息；其中，该第二终端为第一终端的可信设备。

第七方面，本申请提供的一种计算机程序，当计算机程序被计算机执行时，用于执行第一方面中任一项的方法。

在一种可能的设计中，第七方面中的程序可以全部或者部分存储在与处理器封装在一起的存储介质上，也可以部分或者全部存储在不与处理器封装在一起的存储器上。

附图说明

图1为本申请实施例中的一种场景中操作APP的方法示意图；

图2为本申请实施例中拉起APP的一种示意图；

图3为本申请实施例中拉起APP的另一种示意图；

图4为本申请实施例中拉起APP的又一种示意图；

图5为本申请实施例中向APP传入语音命令的一种示意图；

图6为本申请实施例中向APP传入文本命令的一种示意图；

图7为本申请实施例中两个终端协作操作APP的示意图；

图8为本申请实施例中另一种操作APP的方法示意图；

图9为本申请实施例中又一种操作APP的方法示意图；

图10为本申请实施例中的一种操作APP的方法示意图；

图11为本申请实施例中一种终端的示意图；

图12为本申请实施例中一种服务器的示意图。

具体实施方式

本申请的实施方式部分使用的术语仅用于对本申请的具体实施例进行解释，而非旨在限定本申请。

所示实施例中的应用程序可为控制类应用程序如“我的华为”APP。控制类应用程序可以用于对终端(为便于描述，这里称为被控终端)进行操作控制。该被控终端不限于冰箱、空调、扫地机器人、空气净化器、新风机、电视、音箱、热水器等设备。应用程序一般安装于一个终端(为便于描述，这里称为控制终端)，该控制终端不限于手机、平板电脑、平板手机、电脑、智慧屏等。当上述被控终端中的多个被控终端的APP被安装在控制终端中时，所示实施例的实施方案可使得用户更加便捷地通过控制终端对该多个被控终端进行控制，而无需对该多个被控终端中每个被控终端的APP进行针对性地操作，从而提高用户体验。这里，一个APP可能控制一个或多个被控终端。其中，上述被控终端的操作系统可不同于控制终端的操作系统。例如，被控终端的操作系统为安卓系统或苹果操作系统IOS，控制终端的操作系统为鸿蒙系统。

上述控制终端安装上述多个用于控制被控终端的APP之外，还可以进一步安装有语音助手如“小艺”，或者，可以进一步安装有设备管理软件。该设备管理软件可与上述多个用于控制被控终端的APP进行关联。或者，上述控制终端与语音接收装置和服务器被配置为一个系统，其中，语音接收装置可以是音箱，可接收语音命令，上述控制终端与云端服务器之间可进行无线通信，云端服务器与音箱之间可进行无线通信。或者，上述控制终端与另一终端(为便于描述，以下称为第一终端)互为可信设备，例如二者可以协同操作，实现资源共享。

示例性地，对于上述多个被控终端中的任意一个被控终端的APP，用户可以对上述控制终端或音箱或上述第一终端发出语音命令，以使控制终端在后台根据用户的语音命令操作与被控终端关联的APP。例如用户发出“小艺小艺，打开空调”的语音命令来使控制终端在后台操作该空调的APP，而无需在上述控制终端上找到并点击与空调关联的APP，并进行操作。示例性地，对于上述多个被控终端中的任意一个被控终端的APP，用户都可以打开上述控制终端上的设备管理软件，通过设备管理软件选择被控终端并输入控制指令，与选择的被控终端关联的APP在后台执行该控制指令。

当用户对上述控制终端发出语音命令时，控制终端安装的语音助手接收该用户的语音命令，即上述控制终端接收的用户命令为语音命令。当用户对音箱发出语音命令，音箱接收语音命令并发送到云端服务器，云端服务器将接收的语音命令发送给上述控制终端，上述控制终端接收的命令为语音命令；或者，云端服务器识别语音命令，得到文本命令及被控终端信息，将语音命令和/或文本命令，以及被控终端信息发送到上述控制终端，上述控制终端接收的用户命令为语音命令和/或文本命令。当用户通过控制终端上的设备管理软件发出命令时，控制终端接收的用户命令为用户通过交互界面输入的命令。当用户对上述第一终端发出语音命令时，上述第一终端将语音命令发送给上述控制终端，上述控制终端接收的用户命令为语音命令。

示例性地，上述用户命令可包含操作指令信息例如”打开”和被控终端信息。被控终端信息不限于设备名称、品牌、厂家、标识符(Identifier，简称ID)和位置等。如果接收的是语音命令，可以通过语音识别及分词、实体识别等自然语音处理技术解析或识别出命令中的终端信息如位置、品牌、名称和设备编号等，还可以解析出操作指令信息，还可以将语音命令转换为文本命令。相应地，文本命令中也可包含有上述操作指令信息和被控终端信息。当上述控制终端接收的用户命令为用户通过交互界面输入的命令时，控制终端可直接得到操作指令信息和被控终端信息。示例性地，用户打开控制终端上的设备管理软件，设备管理软件的用户交互界面上可呈现被控终端列表。用户通过点击被控终端列表中的某一被控终端进行选择后，也即向控制终端输入了被控终端信息，控制终端接收用户输入的包含有所述被控终端信息的命令，并呈现操作按钮如在界面显示“打开”或“关闭”按钮。用户点击操作按钮，即向控制终端输入操作指令，控制终端接收用户输入的包含有所述操作指令信息的命令。

当上述控制终端接收的用户命令为语音命令时，可进一步从语音命令中解析出上述操作指令信息和被控终端信息，然后从数据库中获取与上述被控终端关联的第一APP信息。其中，该数据库可存储终端信息与APP信息的对应关系数据。该数据库中，被控终端的信息可与APP信息对应存储，例如，格力空调信息与华为智选APP存储在同一行数据中，小米空调信息与米家APP信息存储在同一行数据中，等等。当在关系数据库中找到接收的被控终端信息时，也就相应找到了要操作的APP。APP信息不限于APP名称。

当上述云端服务器向上述控制终端发送被控终端信息时，上述控制终端接收后，可直接根据该被控终端信息获取上述第一APP信息，而无需对语音命令进行解析。

上述数据库也可存储在云端服务器。当云端服务器接收到语音接收装置发送的语音命令时，服务器可以对语音命令进行识别，得到文本命令及被控终端信息。服务器还可进一步从数据库中获取与被控终端关联的APP(为便于描述，以下称为第一APP)信息，并将语音命令和/或文本命令，以及上述第一APP信息发送给上述控制终端，上述控制终端接收语音命令和/或文本命令，以及接收上述第一APP信息。

示例性地，上述数据库中的终端信息与APP的对应关系数据可以通过监测APP运行时接收用户输入的终端信息，以及对应存储用户输入的终端信息与运行的APP信息得到。例如，被控终端配网后，用户在控制终端打开该被控终端的APP，主动录入该被控终端信息。控制终端监测到APP的运行时接收用户输入的被控终端信息，并保存被控终端信息与打开的APP信息的对应关系数据。

其中，监测APP运行时接收用户输入的终端信息可通过以下方式执行：监测到所述被控终端组网运行APP时，提示用户输入被控终端信息；

接收用户输入的终端信息。如被控终端通过蓝牙或者wifi配网运行APP时，控制终端系统检测到新设备连接，提示用户是否导入新设备信息。用户选择导入时，输入被控终端品牌、设备类型、设备位置等信息。控制终端保存被控终端信息与配网所运行的APP信息的对应关系数据，即生成了关系数据。从而得到数据库中的终端信息与APP的对应关系数据。

或者，示例性地，上述被控终端可通过APP的应用程序编程接口(ApplicationProgramming Interface,简称API)读取被控终端信息的，然后，对应存储读取的被控终端信息与所述API所属的APP信息，生成被控终端信息与该APP的对应关系数据。从而得到数据库中的终端信息与APP的对应关系数据。

或者，示例性地，上述控制终端监测到APP运行时，拉起设备管理软件，例如被控终端通过wifi或蓝牙配网运行APP时，被控制终端检测到后，后台拉起控制终端中的设备管理软件。该设备管理软件弹出对话框，为用户提供输入设备信息的界面，提示用户输入终端信息。用户输入设备信息后，上述控制终端对应存储运行的APP信息与用户输入的终端信息，生成被控终端信息与APP的对应关系数据。从而得到数据库中的终端信息与APP的对应关系数据。该设备管理软件不限于智慧生活。

或者，示例性地，上述控制终端可接收并存储可信终端如上述第一终端发送的终端信息与APP的对应关系数据。从而得到数据库中的终端信息与APP的对应关系数据。

当有多个被控终端信息被录入后，控制终端将生成多个对应关系数据进行组织、管理和存储，建立关系数据库。该关系数据库中，一个APP信息可对应多个被控终端信息，即一个APP可控制操作多个被控终端。

该关系数据库的更新，除上述方式以外，不限于以下方式：

方式一.互为可信的上述控制终端和第一终端安装有同一个APP。上述控制终端中，该APP控制的被控终端，不同于上述第一终端中该APP控制的被控终端。如上述控制终端中，该APP可控制两个被控终端，而上述第一终端中，该APP可控制五个被控终端。上述控制终端和第一终端可定期向对方发送被控终端信息，同步更新该APP与被控终端的关系数据。或者，上述控制终端和第一终端中的任一个终端中，该APP控制的被控终端信息发生了更新，则发生更新的终端向另一终端发送更新信息。

方式二.控制终端可通过一APP的API接口，定期读取与该APP关联的被控终端信息。

当上述控制终端或服务器获取与被控终端信息关联的第一APP信息时，假如数据库中的数据显示所述被控终端有多个时，如，被控终端信息为空调时，数据库中的多行数据都为空调信息，如卧室空调、客厅空调等，或者如小米空调、美的空调等，则控制终端或服务器提示用户进行选择并发出第二次用户命令。其中，所述第二次用户命令中包含有唯一标识被控终端的信息；例如发出语音提示“某某终端有两个，请重新选择”或者如在终端用户界面弹出多个终端如空调列表，每个终端同时显示编号如空调001、空调002等等，供用户选择。或者，服务器向语音输入装置发送语音提示如“空调有卧室空调和客厅空调，请重新选择”，语音输入装置进行播放。用户再次发出命令时，命令中便携带有用于唯一标识终端的信息，从而保证APP进行准确操作。上述控制终端或服务器接收到用户再次发出的命令后，根据所述唯一标识被控终端的信息，从数据库中获取与被控终端关联的第一APP信息。

当上述控制终端从数据库获取到上述第一APP信息后，或者当云端服务器从数据库获取到上述第一APP信息，并发送给上述控制终端后，上述控制终端可拉起该第一APP，将上述操作指令信息传入该第一APP。之后，该第一APP根据传入的操作指令信息执行操作指令，对被控终端进行控制。

其中，操作指令信息不限于直接传入上述第一APP，也可以是包含在语音命令或文本命令中传入第一APP。当操作指令信息直接传入第一APP时，需要第一APP的开发者开放更大的权限。将操作指令信息包含在语音命令或文本命令中传入第一APP，则更加便捷。如果语音命令或文本命令中包含有唤醒前缀，该唤醒前缀可为控制终端语音助手的唤醒前缀(为便于描述，以下称为第一唤醒前缀)，则需要裁剪第一唤醒前缀后，即将不含有第一唤醒前缀的语音命令或文本命令，传入第一APP。如果拉起的第一APP需要唤醒前缀，则在语音命令或文本命令中加入该第一APP的唤醒前缀(为便于描述，称为第二唤醒前缀)后，再传入第一APP。

示例性地，控制终端可以静默的形式将操作指令信息传入第一APP，例如控制终端可在后台执行将操作指令信息传入第一APP的操作，屏幕上可不显示该传入的操作信息，扬声器可不播放有关的声音。

示例性地，上述控制终端通过语音助手接收的语音命令中还可包含有唤醒前缀。如控制终端语音助手接收语音命令“小艺小艺，打开空调”中，“小艺小艺”为控制终端语音助手的唤醒前缀。

示例性地，操作APP的方法可以由控制终端执行，但不限于由一个终端执行，还可以是两个终端协作执行，三个硬件实体协作执行等等。

在一个终端(控制终端)执行上述方法的实施例中，控制终端中还安装有设备管理软件。设备管理软件为用户提供操作被控终端的界面。

用户点击设备管理软件，设备管理软件呈现被控终端信息列表。用户选择点击其中一个被控终端，设备管理软件弹出操作界面。操作界面中显示有操作按钮，不限于“打开”和“关闭”等按钮。假设用户点击“打开”按钮，相当于用户在控制终端输入了用户命令。该用户命令包含有被控终端信息和操作指令信息。相应地，控制终端接收用户命令。然后控制终端根据被控终端信息查找关系数据库，得到与该被控终端信息关联的第一APP信息。之后，控制终端拉起第一APP。并且，控制终端生成包含有操作指令信息的文本命令，并传入第一APP。如果上述第一APP需要语音唤醒前缀，则控制终端生成包含有上述第二唤醒前缀和操作指令信息的语音命令，传入上述第一APP。

例如，安装有智慧生活软件的华为终端(不限于手机、平板、智慧屏等)，用户点击智慧生活后，界面中呈现第三方设备列表如美的空调、小米空调、小米空气净化器等等，用户选择点击小米空调后，弹出一个操作界面，包含打开按钮和关闭按钮，用户点击打开按钮后，华为终端拉起小米APP，生成包含打开操作指令信息的文本命令并传入小米APP。小米APP执行文本命令，打开小米空调。

在另一个单个控制终端执行上述方法的实施例中，控制终端中安装有语音助手。用户对控制终端发出语音命令，该语音命令中除包含有被控制终端信息和操作指令信息外，还包含有唤醒前缀，用于唤醒语音助手。之后控制终端根据语音命令中的终端信息，从关系数据库中找到关联的第一APP信息，拉起该第一APP。控制终端裁剪语音命令中的唤醒前缀，将包含有操作指令信息的剩余语音命令传入该第一APP。或者，将语音命令翻译成文本命令，将文本命令中的唤醒前缀裁剪后，将剩余的文本命令传入该第一APP。如果该第一APP需要唤醒前缀，则在传入语音命令或文本命令之前，在语音命令或文本命令中加入该第一APP的唤醒前缀。之后再传入该第一APP。

例如，华为终端如手机或平板电脑中安装有语音助手小艺，还安装有米家APP、美的APP和超级终端华为智选APP，以分别对小米空调、美的空调和格力空调进行控制。其中，小米空调和美的空调为非鸿蒙OS设备，分别位于卧室和书房；华为终端和格力空调属于鸿蒙OS设备，位于客厅。

小米空调组网运行米家APP时，华为终端提示用户导入小米空调信息如名称、品牌、位置和设备编号等，待用户输入后，生成小米空调和米家APP的对应关系数据。或者，小米空调组网后，用户主动在华为终端输入小米空调信息，或者华为终端通过米家APP的API读取小米空调信息，生成小米空调和米家APP的对应关系数据。类似地，华为终端生成美的空调和美的APP的对应关系数据。最后得到如图1中所示的家电设备和APP的对应关系数据库。

通过语音助手小艺打开小米空调时，用户对华为终端说出“小艺小艺，打开卧室空调”。华为终端执行如图1所示的步骤：

步骤11.通过小艺语音助手接收语音命令“小艺小艺，打开卧室空调”。之后通过语音识别后对语音命令进行解析，通过自然语言相关技术，识别出语音命令中的指令、终端信息，如：

步骤12.从家电设备和APP的对应关系数据库中查找小米空调信息，得到对应APP名称米家APP，确定小米空调对应米家APP。并且根据数据库中的小米空调信息，还可以确定小米空调为非鸿蒙系统设备。如果查找结果为小米空调有多个，例如卧室里有两个小米空调，编号分别为A和B，由一个APP控制，则华为终端可以提示用户进行二次语音选择，或者弹出终端列表供用户二次选择。这种情况下用户发出的命令或者进行的选择便是对唯一确定的终端进行操作的命令。

步骤13.华为终端拉起米家APP。拉起方式不限于以下方式：

方式一.如图2所示，直接通过包名拉起米家APP；

方式二.如图3所示，通过自定义行为(Action)拉起米家APP；

方式三.如图4所示，通过系统广播拉起米家APP。

步骤14.向米家APP传入命令，以控制小米空调。实现方法不限于以下方法：

方法一.如图5所示，原始语音命令为“小艺小艺，打开卧室空调”。其中，“小艺小艺”对米家APP不起作用，因此可以将其裁减掉。通过小艺语音助手把原始的语音命令进行裁剪，去掉“小艺小艺”部分后的语音命令，通过系统模拟麦克风输入的形式传入米家APP的语音控制入口。这种方法的优点是：第三方APP无需做任何接口适配，只需拉起、传入语音命令即可。如果还需要添加小米的“小爱同学”前缀，就需要完成语音命令的拼接，在裁剪后的原始语音命令中加入“小爱同学”，然后传入米家APP。

方法二.如图6所示，先通过小艺语音助手翻译成文本命令，对文本命令中的“小艺小艺”进行裁剪，去掉“小艺小艺”，再拼接上米家APP的唤醒前缀“小爱同学”，通过调用米家APP的开放接口传入文本命令。例如以静默的形式去唤醒米家APP，这种方法的优点是：文本命令裁剪、拼接处理简单，统一了语音翻译。

类似地，通过对华为终端说出“小艺小艺，打开书房空调”，华为终端可通过上述方法打开美的空调。这样，用户不用分别操作各个APP来控制其它品牌的家电设备，只需要通过华为终端的语音助手就可以控制不同品牌的设备，给用户带来统一便捷的良好体验。

示例性地，操作APP的方法由两个终端协作执行时，两个终端互为可信任终端。如图7所示，终端A中未安装被控终端的APP，终端B中安装有被控终端的APP。用户可以通过对终端A发出语音命令，终端A接收语音命令，识别出语音命令中的被控终端信息后，将被控终端信息以及语音命令发送给终端B。

终端B接收被控终端信息及语音命令，从数据库中找到与终端信息对应的APP信息，根据该APP信息拉起相应的APP。将语音命令传入拉起的APP。假如语音命令中有唤醒前缀，则将唤醒前缀裁剪后的语音命令传入APP。假如APP需要唤醒前缀，则在裁剪后的语音命令中加入APP的唤醒前缀后传入APP。或者将语音命令翻译成文本命令后传入APP。或者进一步地，将文本命令中的唤醒前缀裁剪后传入APP，或者进一步地，在裁剪后的文本命令中加入APP的唤醒前缀，再传入APP。

APP执行传入的语音命令或文本命令，控制被控终端打开或关闭。

示例性地，操作APP的方法由三个硬件实体协作执行时，不限于由语音接收装置、服务器和终端协作完成。其中，语音接收装置不限于音箱。

以控制图1所示场景中的小米空调为例，如图8所示，音箱、云端服务器和手机协作实现操作米家APP，达到控制小米空调的目的。音箱安装有语音助手小艺，手机安装有米家APP，并且云端服务器存储有终端与APP的关系数据库。该关系数据库可由手机上传给云端服务器。用户对音箱说出“小艺小艺，打开卧室空调”后，各硬件实体执行的操作包括：

步骤81.音箱接收“小艺小艺，打开卧室空调”，并上传。上传数据中还包含音箱的ID，以便云端服务器识别信息来源。

步骤82.云端服务器接收音箱上传的数据，对其中的语音命令进行语音识别。

步骤83.云端服务器对语音识别结果进行意图识别，得到操作指令信息“打开”以及终端信息“卧室”和“空调”。

步骤84.云端服务器读取终端与APP的关系数据库，确定“卧室空调”为“小米空调”以及相应的APP为米家APP。

步骤85.云端服务器裁剪语音命令中的“小艺小艺”，将APP信息和裁剪后的语音命令发送给手机。或者，将语音识别得到文本命令裁去“小艺小艺”后和APP信息发送给手机。或者进一步地，将APP的唤醒前缀加入裁剪后的语音命令或文本命令，发送给手机。

步骤86.手机接收语音命令和文本命令中的至少一个，以及APP信息，拉起APP信息指向的米家APP。拉起方式可以为系统广播方式、直接包名拉起和自定义Action中的一种方式。

步骤87.手机将语音命令或文本命令传入拉起的米家APP。米家APP执行传入的命令，打开卧室中的小米空调。

仍以控制图1所示场景中的小米空调为例，如图9所示，音箱、云端服务器和手机之间通过另外一种协作方式实现操作米家APP，达到控制小米空调的目的。音箱安装有语音助手小艺，手机安装有米家APP。用户对音箱说出“小艺小艺，打开卧室空调”后，各硬件实体执行的操作包括：

步骤91.音箱接收用户的语音命令“小艺小艺，打开空调”，并将语音命令和自身ID向云端服务器上传。

步骤92.云端服务器接收音箱上传的数据，对其中的语音命令进行语音识别。

步骤93.云端服务器对语音识别结果进行意图识别，得到操作指令信息“打开”以及终端信息“卧室”和“空调”。

步骤94.云端服务器将语音命令及终端信息发送给手机。或者进一步地，云端服务器将语音识别得到的文本命令发送给手机。或者，云端服务器将语音识别得到的文本命令和终端信息发送给手机。

步骤95.手机接收语音命令和文本命令中的至少一个，以及终端信息。

步骤96.手机根据终端信息读取关系数据库，确定“卧室空调”为“小米空调”，确定相应的APP为米家APP。

步骤97.手机通过系统广播方式、直接包名拉起和自定义Action中的任一种方式拉起米家APP。

步骤98.手机裁剪语音命令或文本命令中的唤醒前缀“小艺小艺”后，将语音命令或文本命令传入米家APP，或者进一步地，裁剪“小艺小艺”后，在语音命令或文本命令中加入米家唤醒前缀“小爱同学”，之后传入米家APP。米家APP执行传入的命令，打开卧室中的小米空调。

通过上述实施例可以概括出如图10所示的方法。图10中，操作APP的方法包括：

步骤101.接收用户命令，该用户命令包含操作指令信息和被控终端信息；

步骤102.根据上述被控终端信息，从数据库中获取与上述被控终端关联的第一APP信息；其中，该数据库用于存储终端信息与APP信息的对应关系数据；

步骤103.拉起上述第一APP，将操作指令信息传入上述第一APP。

示例性地，一种用于执行上述方法的终端的内部示意如图11所示，包括：接收模块111、确定模块112和操作模块113。

接收模块111用于接收用户命令，该用户命令包含操作指令信息和被控终端信息。确定模块112用于根据该被控终端信息，从数据库中获取与该被控终端关联的第一APP信息；其中，该数据库用于存储终端信息与APP信息的对应关系数据。操作模块113用于拉起第一APP，将该操作指令信息传入该第一APP。

其中，上述接收模块111可用于接收用户的语音命令。

上述终端还可包括：识别模块，用于在上述确定模块112根据该被控终端信息，从数据库中获取与该被控终端关联的第一APP信息之前，对该语音命令进行识别，得到该操作指令信息和被控终端信息。

上述操作模块113还可用于：将该语音命令或文本命令传入该第一APP；其中，该文本命令通过识别该语音命令得到，该语音命令或文本命令均包含有该操作指令信息。

示例性地，该语音命令中还可包含有唤醒前缀，上述操作模块113还可用于：

将不包含该唤醒前缀的语音命令或文本命令传入该第一APP。

示例性地，上述操作模块113还可用于：

在不包含该唤醒前缀后的语音命令或文本命令中，加入该第一APP的唤醒前缀；

之后将语音命令或文本命令传入该第一APP。

上述接收模块111在接收用户命令之前，还用于：

接收用户指令，呈现被控终端列表；

该接收模块还用于：

接收用户通过从该被控终端列表中选择被控终端，输入的包含有该被控终端信息的命令，并呈现操作按钮；

接收用户通过点击该操作按钮，输入的包含有该操作指令信息的命令。

上述终端还可包括：生成模块，用于将该操作指令信息传入该第一APP之前，生成包含该操作指令信息的文本命令；

上述操作模块113还可用于：

将包含有该操作指令信息的文本命令传入该第一APP。

上述终端中，接收模块111还可用于在操作模块113根据上述被控终端信息，从数据库中获取与该被控终端关联的第一APP信息之前，接收上述被控终端信息。这种情况下，本终端接收的用户命令和被控终端信息来自于另一个可信终端，或者来自于云端服务器。

上述终端还可包括：第一维护模块，用于通过以下步骤得到该数据库中的终端信息与APP的对应关系数据：

监测APP运行时接收用户输入的终端信息的步骤；

对应存储用户输入的终端信息与运行的APP信息的步骤。

上述第一维护模块还可用于：

监测到该被控终端组网运行APP时，提示用户输入被控终端信息；

接收用户输入的终端信息。

上述终端还可包括：第二维护模块，用于通过以下步骤得到该数据库中的终端信息与APP的对应关系数据：

通过APP的应用程序编程接口(Application Programming Interface,简称API)读取被控终端信息的步骤；

对应存储读取的被控终端信息与该API所属的APP信息的步骤。

上述终端还可包括：第三维护模块，用于通过以下步骤得到该数据库中的终端信息与APP的对应关系数据：

监测到APP运行时，拉起设备管理软件的步骤；

该设备管理软件弹出对话框，提示用户输入终端信息的步骤；

对应存储运行的APP信息与用户输入的终端信息的步骤。

上述终端还可包括：第四维护模块，用于通过以下步骤得到该数据库中的终端信息与APP的对应关系数据：

接收并存储可信终端发送的终端信息与APP的对应关系数据。

示例性地，一种用于执行上述方法的服务器的内部示意如图12所示，包括：接收模块121、识别模块122、确定模块123和发送模块124。

接收模块121用于接收语音命令，该语音命令包含操作指令信息和被控终端信息。例如接收模块121接收语音接收装置不限于音箱发送的语音命令。识别模块122用于识别该语音命令，得到文本命令以及该操作指令信息和被控终端信息。确定模块123用于根据该被控终端信息，从数据库中获取与该被控终端关联的第一APP信息；其中，该数据库用于存储终端信息与APP信息的对应关系数据。发送模块124用于向终端发送该语音命令和/或文本命令以及该第一APP信息。

上述接收模块121接收的语音命令中可包含唤醒前缀；

上述发送模块124可向该终端发送不包含上述第一唤醒前缀的语音命令和/或文本命令。

上述服务器还可包括：拼接模块，用于在该语音命令和/或文本命令中，加入该第一APP的唤醒前缀；

上述发送模块124向该终端发送的语音命令和/或文本命令中，加入了该第一APP的唤醒前缀。

相应地，一种与上述图12所示服务器协作执行上述方法地终端，可包括：接收模块和操作模块。

接收模块用于接收服务器发送的语音命令和/或文本命令以及第一APP信息；其中，该语音命令和文本命令中包含操作指令信息和被控终端信息。操作模块用于拉起该第一APP，并将该语音命令或文本命令传入该第一APP。

一种用于协作执行上述方法的服务器可包括：接收模块、识别模块和发送模块。

接收模块用于接收语音命令，该语音命令包含操作指令信息和被控终端信息。识别模块用于识别该语音命令，得到文本命令以及该操作指令信息和被控终端信息。发送模块用于向终端发送该语音命令和/或文本命令以及该被控终端信息。接收该服务器发送的数据的终端执行上述实施例中的方法完成APP的操作。

一种用于协作执行上述方法的第一终端可包括：接收模块、识别模块和发送模块。

接收模块用于接收语音命令，该语音命令包含操作指令信息和被控终端信息。识别模块用于识别该语音命令，得到文本命令以及该操作指令信息和被控终端信息。发送模块用于向第二终端发送该语音命令和/或文本命令以及该被控终端信息；其中，第二终端为第一终端的可信设备。该第二终端执行上述实施例中的方法完成APP的操作。

可以理解的是，上述实施例中的部分或全部步骤或操作仅是示例，本申请实施例还可以执行其它操作或者各种操作的变形。此外，各个步骤可以按照上述实施例呈现的不同的顺序来执行，并且有可能并非要执行上述实施例中的全部操作。

本申请实施例还提供一种电子设备，包括：一个或多个处理器；存储器；以及一个或多个计算机程序，其中该一个或多个计算机程序被存储在该存储器中，该一个或多个计算机程序包括指令，当该指令被该设备执行时，使得该设备执行图1至图10所示的方法。

本申请实施例还提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行本申请图1至图10所示实施例提供的方法。

本申请实施例还提供一种计算机程序产品，该计算机程序产品包括计算机程序，当其在计算机上运行时，使得计算机执行本申请图1至图10所示实施例提供的方法。

本申请实施例中，“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示单独存在A、同时存在A和B、单独存在B的情况。其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项”及其类似表达，是指的这些项中的任意组合，包括单项或复数项的任意组合。例如，a，b和c中的至少一项可以表示：a，b，c，a和b，a和c，b和c或a和b和c，其中a，b，c可以是单个，也可以是多个。

本领域普通技术人员可以意识到，本文中公开的实施例中描述的各单元及算法步骤，能够以电子硬件、计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，任一功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory；以下简称：ROM)、随机存取存储器(Random Access Memory；以下简称：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本申请的具体实施方式，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。本申请的保护范围应以所述权利要求的保护范围为准。

Claims (21)

1.一种操作应用程序的方法，其特征在于，包括：

接收用户命令，所述用户命令包含操作指令信息和被控终端信息；

根据所述被控终端信息，从数据库中获取与所述被控终端关联的第一应用程序信息；其中，所述数据库用于存储终端信息与应用程序信息的对应关系数据；

拉起所述第一应用程序，将所述操作指令信息传入所述第一应用程序。

2.根据权利要求1所述的方法，其特征在于，所述接收用户命令，包括：接收用户的语音命令；

根据所述被控终端信息，从数据库中获取与所述被控终端关联的第一应用程序信息之前，还包括：对所述语音命令进行识别，得到所述操作指令信息和被控终端信息。

3.根据权利要求2所述的方法，其特征在于，将所述操作指令信息传入所述第一应用程序，包括：

将所述语音命令或文本命令传入所述第一应用程序；其中，所述文本命令通过识别所述语音命令得到，所述语音命令或文本命令均包含有所述操作指令信息。

4.根据权利要求3所述的方法，其特征在于，所述语音命令中还包含有唤醒前缀，将所述语音命令或文本命令传入所述第一应用程序，包括：

将不包含所述唤醒前缀的语音命令或文本命令传入所述第一应用程序。

5.根据权利要求4所述的方法，其特征在于，将不包含所述唤醒前缀的语音命令或文本命令传入所述第一应用程序，包括：

在不包含所述唤醒前缀的语音命令或文本命令中，加入所述第一应用程序的唤醒前缀后，传入所述第一应用程序。

6.根据权利要求1所述的方法，其特征在于，接收用户命令之前，还包括：

接收用户指令，呈现被控终端列表；

所述接收用户命令，包括：

接收用户通过从所述被控终端列表中选择被控终端，输入的包含有所述被控终端信息的命令，并呈现操作按钮；

接收用户通过点击所述操作按钮，输入的包含有所述操作指令信息的命令。

7.根据权利要求6所述的方法，其特征在于，将所述操作指令信息传入所述第一应用程序之前，还包括：

生成包含所述操作指令信息的文本命令；

将所述操作指令信息传入所述第一应用程序，包括：

将包含有所述操作指令信息的文本命令传入所述第一应用程序。

8.根据权利要求1-5任一项所述的方法，其特征在于，所述根据所述被控终端信息，从数据库中获取与所述被控终端关联的第一应用程序信息之前，还包括：

接收所述被控终端信息。

9.根据权利要求1-8任一项所述的方法，其特征在于，所述数据库中的终端信息与应用程序的对应关系数据通过以下步骤得到：

监测应用程序运行时接收用户输入的终端信息的步骤；

对应存储用户输入的终端信息与运行的应用程序信息的步骤。

10.根据权利要求9所述的方法，其特征在于，所述监测应用程序运行时接收用户输入的终端信息的步骤，包括：

监测到所述被控终端组网运行应用程序时，提示用户输入被控终端信息；

接收用户输入的终端信息。

11.根据权利要求1-8任一项所述的方法，其特征在于，所述数据库中的终端信息与应用程序的对应关系数据通过以下步骤得到：

通过应用程序的应用程序编程接口API读取被控终端信息的步骤；

对应存储读取的被控终端信息与所述API所属的应用程序信息的步骤。

12.根据权利要求1-8任一项所述的方法，其特征在于，所述数据库中的终端信息与应用程序的对应关系数据通过以下步骤得到：

监测到应用程序运行时，拉起设备管理软件的步骤；

所述设备管理软件弹出对话框，提示用户输入终端信息的步骤；

对应存储运行的应用程序信息与用户输入的终端信息的步骤。

13.根据权利要求1-8任一项所述的方法，其特征在于，所述数据库中的终端信息与应用程序的对应关系数据通过以下步骤得到：

接收并存储可信终端发送的终端信息与应用程序的对应关系数据。

14.根据权利要求1-13任一项所述的方法，其特征在于，所述根据所述被控终端信息，从数据库中获取与所述被控终端关联的第一应用程序信息，包括：

当所述数据库中的数据显示所述被控终端有多个时，提示用户进行选择并发出第二次用户命令；其中，所述第二次用户命令中包含有唯一标识被控终端的信息；

根据所述唯一标识被控终端的信息，从数据库中获取与所述被控终端关联的第一应用程序信息。

15.一种终端，其特征在于，用于执行上述权利要求1-14任一项所述的操作应用程序的方法。

16.一种服务器，其特征在于，包括：

接收模块，用于接收语音命令，所述语音命令包含操作指令信息和被控终端信息；

识别模块，用于识别所述语音命令，得到文本命令以及所述操作指令信息和被控终端信息；

确定模块，用于根据所述被控终端信息，从数据库中获取与所述被控终端关联的第一应用程序信息；其中，所述数据库用于存储终端信息与应用程序信息的对应关系数据；

发送模块，用于向终端发送所述语音命令和/或文本命令以及所述第一应用程序信息。

17.根据权利要求16所述的服务器，其特征在于，所述接收模块接收的语音命令中包含唤醒前缀；

所述发送模块向所述终端发送的语音命令和/或文本命令中不包含所述唤醒前缀。

18.根据权利要求16或17所述的服务器，其特征在于，还包括：拼接模块，用于在所述语音命令和/或文本命令中，加入所述第一应用程序的唤醒前缀；

所述发送模块向所述终端发送的语音命令和/或文本命令中，加入了所述第一应用程序的唤醒前缀。

19.一种服务器，其特征在于，包括：

接收模块，用于接收语音命令，所述语音命令包含操作指令信息和被控终端信息；

识别模块，用于识别所述语音命令，得到文本命令以及所述操作指令信息和被控终端信息；

发送模块，用于向终端发送所述语音命令和/或文本命令以及所述被控终端信息。

20.一种第一终端，其特征在于，包括

接收模块，用于接收语音命令，所述语音命令包含操作指令信息和被控终端信息；

识别模块，用于识别所述语音命令，得到文本命令以及所述操作指令信息和被控终端信息；

发送模块，用于向第二终端发送所述语音命令和/或文本命令以及所述被控终端信息；其中，所述第二终端为第一终端的可信设备。

21.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行权利要求1至14任一项所述的方法。

Images