CN116540557A - 视听结合的智能家电终端控制方法、装置及存储介质 - Google Patents

Abstract

本申请公开了一种视听结合的智能家电终端控制方法、装置及存储介质，涉及智能家居/智慧家庭技术领域，方法包括：获取控制指令，获取控制指令对应的控制信息，并将控制信息发送至服务器，以使服务器对控制信息进行意图识别，得到识别结果，并根据识别结果确定第一待使用信息，接收服务器发送的第一待使用信息，在第一待使用信息包括第一待显示信息和第一待播放信息情况下，对第一待显示信息和第一待播放信息进行处理，其中，第一待显示信息和第一待播放信息存在第一对应关系。这样，用户可以通过视觉和听觉两个方面直观地获知控制指令对应的信息，能够提供用户的使用体验。

Description

视听结合的智能家电终端控制方法、装置及存储介质

技术领域

本申请涉及智能家居/智慧家庭技术领域，尤其涉及一种视听结合的智能家电终端控制方法、装置及存储介质。

背景技术

目前，智能家电终端在人们日常生活中的比重越来越高，用户可以对智能家电终端进行控制，从而智能家电终端可以响应用户的指令，从而满足用户的使用需求。

但是，目前的智能家电终端并不能将响应用户的指令的控制结果清晰地展示给用户，导致用户无法直观地获知控制结果，降低了用户的使用体验。

发明内容

本申请提供一种视听结合的智能家电终端控制方法、装置及存储介质，用以解决现有技术中不能将响应用户的指令的控制结果清晰地展示给用户，导致用户无法直观地获知控制结果，降低了用户的使用体验的缺陷，实现提高用户的使用体验。

本申请提供一种视听结合的智能家电终端控制方法，方法应用于智能家电终端，方法包括：

获取控制指令；

获取所述控制指令对应的控制信息，并将所述控制信息发送至服务器，以使所述服务器对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

接收所述服务器发送的所述第一待使用信息；

在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

根据本申请提供的一种视听结合的智能家电终端控制方法，在所述接收所述服务器发送的所述第一待使用信息的步骤之后，所述方法还包括：

在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成返回值；

将所述返回值发送至所述服务器，以使所述服务器基于所述返回值确定第二待使用信息；

接收所述服务器发送的所述第二待使用信息；

在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理，其中，所述第二待显示信息和所述第二待播放信息存在第二对应关系。

根据本申请提供的一种视听结合的智能家电终端控制方法，所述对所述第一待显示信息和所述第一待播放信息进行处理的步骤，包括：

根据所述第一对应关系的类型，确定对应的第一显示方式；

在对所述第一待播放信息进行播放处理的情况下，采用所述第一显示方式对所述第一待显示信息进行显示处理；

所述对所述第二待显示信息和所述第二待播放信息进行处理的步骤，包括：

根据所述第二对应关系的类型，确定对应的第二显示方式；

在对所述第二待播放信息进行播放处理的情况下，采用所述第二显示方式对所述第二待显示信息进行显示处理。

根据本申请提供的一种视听结合的智能家电终端控制方法，所述第一待显示信息包括第一地址信息，所述第二待显示信息包括第二地址信息；

所述采用所述第一显示方式对所述第一待显示信息进行显示处理的步骤，包括：

根据所述第一地址信息，从预先存储的视频中，获取对应的第一视频；

采用所述第一显示方式显示所述第一视频；

所述采用所述第二显示方式对所述第二待显示信息进行显示处理的步骤，包括：

根据所述第二地址信息，从预先存储的视频中，获取对应的第二视频；

采用所述第二显示方式显示所述第二视频。

根据本申请提供的一种视听结合的智能家电终端控制方法，在所述获取所述控制指令对应的控制信息的步骤之后，所述方法还包括：

根据所述控制指令对应的控制信息，和预先存储的控制信息与使用信息的对应关系，确定对应的使用信息，并将对应的使用信息作为第三待使用信息，其中，所述第三待使用信息包括第三待显示信息和第三待播放信息，所述第三待显示信息和所述第三待播放信息存在对应关系；

对所述第三待显示信息和所述第三待播放信息进行处理。

本申请还提供一种视听结合的智能家电终端控制方法，方法应用于服务器，方法包括：

接收智能家电终端发送的控制信息，其中，所述控制信息为所述智能家电终端在获取到控制指令之后，获取的所述控制指令对应的信息；

对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

将所述第一待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

根据本申请提供的一种视听结合的智能家电终端控制方法，在上述将所述第一待使用信息发送至所述智能家电终端的步骤之后，所述方法还包括：

接收所述智能家电终端发送的返回值，其中，所述返回值为所述智能家电终端在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成的值。

基于所述返回值确定第二待使用信息，并将所述第二待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理，其中，所述第二待显示信息和所述第二待播放信息存在第二对应关系。

本申请还提供一种视听结合的智能家电终端控制装置，装置应用于智能家电终端，装置包括：

第一获取模块，用于获取控制指令；

第二获取模块，用于获取所述控制指令对应的控制信息，并将所述控制信息发送至服务器，以使所述服务器对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

第一接收模块，用于接收所述服务器发送的所述第一待使用信息；

第一处理模块，用于在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

本申请还提供一种视听结合的智能家电终端控制装置，装置应用于服务器，装置包括：

第二接收模块，用于接收智能家电终端发送的控制信息，其中，所述控制信息为所述智能家电终端在获取控制指令之后，获取的所述控制指令对应的信息；

识别模块，用于对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

发送模块，用于将所述第一待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

本申请还提供一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行实现如上述任一种所述视听结合的智能家电终端控制方法。

本申请还提供一种计算机可读的存储介质，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行实现如上述任一种所述视听结合的智能家电终端控制方法。

本申请提供的视听结合的智能家电终端控制方法、装置及存储介质，通过获取控制指令，获取控制指令对应的控制信息，并将控制信息发送至服务器，以使服务器对控制信息进行意图识别，得到识别结果，并根据识别结果确定第一待使用信息，接收服务器发送的第一待使用信息，在第一待使用信息包括第一待显示信息和第一待播放信息情况下，对第一待显示信息和第一待播放信息进行处理，其中，第一待显示信息和第一待播放信息存在第一对应关系。

通过这样的方式，智能家电终端可以对第一待显示信息和第一待播放信息进行处理。对于用户来说，可以在发出控制指令后，看到第一待显示信息显示于智能家电终端，以及听到第一待播放信息，即用户可以看到控制指令对应的视觉信息显示于智能家电终端，以及可以听到智能家电中断播放的控制指令对应的听觉信息。用户可以通过视觉和听觉两个方面直观地获知控制指令对应的信息，能够提供用户的使用体验。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是根据本申请实施例的一种视听结合的智能家电终端控制方法的硬件环境示意图；

图2是本申请提供的视听结合的智能家电终端控制方法的流程示意图之一；

图3是本申请提供的视听结合的智能家电终端控制方法的流程示意图之二；

图4是本申请提供的视听结合的智能家电终端控制方法的流程示意图之三；

图5是本申请提供的视听结合的智能家电终端控制装置的结构示意图之一；

图6是本申请提供的视听结合的智能家电终端控制装置的结构示意图之二；

图7是本申请提供的电子装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。

需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

根据本申请实施例的一个方面，提供了一种视听结合的智能家电终端控制方法。该视听结合的智能家电终端控制方法广泛应用于智慧家庭(Smart Home)、智能家居、智能家用设备生态、智慧住宅(Intelligence House)生态等全屋智能数字化控制应用场景。可选地，在本实施例中，上述视听结合的智能家电终端控制方法可以应用于如图1所示的由终端设备102和服务器104所构成的硬件环境中。如图1所示，服务器104通过网络与终端设备102进行连接，可用于为终端或终端上安装的客户端提供服务(如应用服务等)，可在服务器上或独立于服务器设置数据库，用于为服务器104提供数据存储服务，可在服务器上或独立于服务器配置云计算和/或边缘计算服务，用于为服务器104提供数据运算服务。

上述网络可以包括但不限于以下至少之一：有线网络，无线网络。上述有线网络可以包括但不限于以下至少之一：广域网，城域网，局域网，上述无线网络可以包括但不限于以下至少之一：WIFI(Wireless Fidelity，无线保真)，蓝牙。终端设备102可以为智能家电终端，还可以为应用终端，在终端设备102为应用终端的情况下，终端设备102可以并不限定于为PC、手机、平板电脑等，在终端设备102为智能家电终端的情况下，终端设备102可以并不限定于为智能空调、智能烟机、智能冰箱、智能烤箱、智能炉灶、智能洗衣机、智能热水器、智能洗涤设备、智能洗碗机、智能投影设备、智能电视、智能晾衣架、智能窗帘、智能影音、智能插座、智能音响、智能音箱、智能新风设备、智能厨卫设备、智能卫浴设备、智能扫地机器人、智能擦窗机器人、智能拖地机器人、智能空气净化设备、智能蒸箱、智能微波炉、智能厨宝、智能净化器、智能饮水机、智能门锁等。

为了能够将指令对应的控制结果直观地展示给用户，从而提高用户的使用体验，本申请实施例提供了一种视听结合的智能家电终端控制方法、装置、计算机可读的存储介质、电子装置及计算机程序产品。下面结合图2对本申请实施例提供的第一种视听结合的智能家电终端控制方法。

如图2所示，本申请实施例提供了第一种视听结合的智能家电终端控制方法，方法应用于智能家电终端，方法包括：

S201，获取控制指令。

在用户需要对智能家电终端进行设置的情况下，可以向智能家电在终端发出控制指令，这样，智能家电终端便可以获取到用户想要对智能家电终端进行控制的控制指令。

在一种实施方式中，智能家电终端可以通过音频采集设备采集用户发出的语音控制指令，也就是说，控制指令可以为语音控制指令。在另一种实施方式中，智能家电终端可以通过图像采集设备采集手势控制指令，也就是说，控制指令可以为手势控制指令。在又一种实施方式中，智能家电终端可以接收应用终端发送的控制指令，也就是说，控制指令可以为用户通过应用终端发出的控制指令。

S202，获取所述控制指令对应的控制信息，并将所述控制信息发送至服务器，以使所述服务器对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息。

在获取到控制指令后，可以获取控制指令对应的控制信息，获取控制信息的方式存在多种，下面对获取控制信息的方式进行介绍。

第一种获取方式，在控制指令为语音控制指令的情况下，智能家电终端可以将语音控制指令对应的音频作为控制信息，从而将控制信息发送至服务器。服务器在接收到语音控制指令对应的音频(控制信息)后，可以将控制信息转换为文本信息，从而对文本信息进行意图识别，得到识别结果，进而可以根据识别结果确定第一待使用信息。并将第一待使用信息发送至智能家电终端。

第二种获取方式，在控制指令为语音控制指令的情况下，智能家电终端可以将语音控制指令转换为文本信息，将文本信息作为控制指令对应的控制信息。将文本信息(控制信息)发送至服务器，服务器可以对接收到的文本信息(控制信息)进行意图识别，得到识别结果。进而可以根据识别结果确定第一待使用信息。并将第一待使用信息发送至智能家电终端。

用户会在智能家电终端的预设范围内发出语音控制指令，采用第二种获取方式，也就是通过智能家电终端将语音控制指令转换为文本信息的方式，能够获取到更加精确的文本信息，以便提高后续进行意图识别的准确率。

第三种获取方式，在控制指令为手势控制指令的情况下，智能家电终端可以将手势控制指令对应的视频作为控制信息，从而将控制信息发送至服务器。服务器在接收到手势控制指令对应的视频(控制信息)后，可以对手势控制指令对应的视频进行意图识别，得到识别结果，进而可以根据识别结果确定第一待使用信息。并将第一待使用信息发送至智能家电终端。

第四种获取方式，在控制指令为手势控制指令的情况下，智能家电终端可以从手势控制指令对应的视频中，获取多帧手势关键帧，作为控制信息。从而将手势关键帧(控制信息)发送至服务器。服务器在接收到手势关键帧(控制信息)后，可以按照各个手势关键帧对应的采集时间对手势关键帧进行排序，从而对排序后的手势关键帧进行意图识别，得到识别结果，进而可以根据识别结果确定第一待使用信息。并将第一待使用信息发送至智能家电终端。

第四种获取方式相较于第三种获取方式能够节省网络资源，从而使服务器能够更加快速地获取到控制信息，以便后续能够更加快速地实现采用视听结合的方式对智能家电终端进行控制。

第五种获取方式，在控制指令为应用终端发送的控制指令的情况下，智能家电终端可以将控制指令对应的参数信息作为控制信息，从而将参数信息(控制信息)发送至服务器。服务器在接收到参数信息(控制信息)后，可以对参数信息进行意图识别，得到识别结果，进而可以根据识别结果确定第一待使用信息。并将第一待使用信息发送至智能家电终端。

作为一种实施方式，服务器可以根据识别结果确定第一待使用信息，在识别结果指示能够识别出控制指令对应的意图的情况下，可以根据识别结果确定对应的第一待使用信息，从而将第一待使用信息发送至智能家电终端。

在识别结果指示不能够识别出控制指令对应的意图的情况下，可以根据识别结果确定对应的控制指令不可执行的话术和控制指令不可执行的显示信息，将话术和显示信息作为第一待使用信息，从而将第一待使用信息发送至智能家电终端。

S203，接收所述服务器发送的所述第一待使用信息。

S204，在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理。

智能家电终端可以接收服务器发送的第一待使用信息，其中，第一待使用信息可以包括第一待显示信息和第一待播放信息。其中，第一待显示信息和第一待播放信息存在第一对应关系。

在第一待使用信息包括第一待显示信息和第一待播放信息的情况下，可以对第一待显示信息和第一待播放信息进行处理。具体来说，可以根据实际使用需求先播放第一待播放信息，再显示第一待显示信息。

第一待显示信息可以携带播放标识信息，智能家电终端在播放第一待播放信息的过程中，如果播放到播放标识信息对应的位置，可以对应显示第一待显示信息。

同理，还可以先显示第一待显示信息，再播放第一待播放信息。第一待播放信息可以携带显示标识信息，智能家电终端在显示第一待显示信息的过程中，如果显示到显示标识信息对应的位置，可以对应显示第一待播放信息。

还可以同步显示第一待播放信息和第一待显示信息，还可以根据用户预先设置的播放和显示顺序对第一待显示信息和第一待播放信息进行处理。这都是合理的。

在识别结果指示能够识别出控制指令对应的意图的情况下，第一待显示信息可以包括控制指令的类型对应的需要进行显示的信息(第一待显示信息)，和控制指令类型对应的需要进行播放的信息(第一待播放信息)。控制指令的类型可以为查询类指令、调节类指令、调用类指令等。具体可以根据实际情况进行设置。

例如，在控制指令为查询天气的情况下，第一待显示信息可以为用户所查询的时段对应的天气卡片式信息，第一待播放信息可以为用户所查询的时段对应的天气的语音信息。控制指令还可以为查询菜谱、查询歌曲等指令。

又例如，在控制指令为智能问答的情况下，第一待显示信息可以为答案对应文本，第一待播放信息可以为答案对应的语音。控制指令可以为通过互联网查询网络信息的指令，还可以为查询智能家电终端的状态对应的指令。

在识别结果指示不能够识别出控制指令对应的意图的情况下，第一待显示信息可以为表征控制指令不可执行的显示信息，第一待播放信息可以为表征控制指令不可执行的文字信息。例如，第一待显示信息可以为控制指令不可执行对应的视频，第一待播放信息可以为“控制指令执行失败”。

可见，在本实施例中，智能家电终端可以对第一待显示信息和第一待播放信息进行处理。对于用户来说，可以在发出控制指令后，看到第一待显示信息显示于智能家电终端，以及听到第一待播放信息，即用户可以看到控制指令对应的视觉信息显示于智能家电终端，以及可以听到智能家电中断播放的控制指令对应的听觉信息。用户可以通过视觉和听觉两个方面直观地获知控制指令对应的信息，能够提供用户的使用体验。

作为本申请实施例的一种实施方式，在上述接收所述服务器发送的所述第一待使用信息的步骤之后，上述步骤还可以包括：

在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成返回值。将所述返回值发送至所述服务器，以使所述服务器基于所述返回值确定第二待使用信息。

在控制指令为调节类指令的情况下，也就是控制指令为对智能家电终端的状态进行调节的指令的情况下，智能家电终端所接收到的第一待使用信息可以包括控制参数。

在第一待使用信息包括控制参数的情况下，智能家电终端可以执行控制参数，并根据执行控制参数的情况生成返回值。也就是说，返回值为能够表征执行情况的值。

接收所述服务器发送的所述第二待使用信息。在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理。

智能家电终端可以将返回值发送至服务器，服务器在接收到返回值的情况下，可以根据返回值确定第二待使用信息。其中，第二待使用信息可以包括第二待显示信息和第二待播放信息，第二待显示信息和第二待播放信息存在对应关系。

在第二待使用信息包括第二待显示信息和第二待播放信息的情况下，可以对第二待显示信息和第二待播放信息进行处理。具体的处理方式可以参见上述对第一待显示信息和第一待播放信息进行处理的说明，在此不做赘述。

这样，智能家电终端可以对第二待显示信息第二待播放信息进行处理。对于用户来说，可以在发出控制指令后，看到第二待显示信息显示于智能家电终端，以及听到第二待播放信息，即用户可以看到控制指令对应的视觉信息显示于智能家电终端，以及可以听到智能家电中断播放的控制指令对应的听觉信息。用户可以通过视觉和听觉两个方面直观地获知控制指令对应的信息，能够提供用户的使用体验。

为了更加方便理解本申请实施例提供的听结合的智能家电终端控制方法，下面对第一待使用信息和第二待使用信息对应的多种情况进行说明。

第一种情况，在第一待使用信息不包括控制参数的情况下，第二待使用信息不存在。在这种情况下，第一待使用信息可以包括第一待显示信息和第一待播放信息。

其中，第一待显示信息可以为卡片式的图片，还可以为视频，还可以为需要进行显示的文字。第一待播放信息可以为音频，还可以为需要进行播放的文字。

第二种情况，第一待使用信息仅包括控制参数，第二待使用信息可以包括第二待显示信息和第二待播放信息。其中，第二待显示信息可以为卡片式的图片，还可以为视频，还可以为需要进行显示的文字。第二待播放信息可以为音频，还可以为需要进行播放的文字。

在第二待播放信息为需要进行播放的文字的情况下，可以根据文字生成对应的语音，从而播放第二待播放信息对应的语音。第二待播放信息为文字的情况相较于第二待播放信息为音频的情况，能够减少网络资源的使用，并且服务器能够更加快速地将第二待播放信息发送至智能家电终端。

第三种情况，第一待使用信息包括控制参数，以及第一待播放信息和/或第一待显示信息。在这种情况下，第一待播放信息可以为“正在调节中”、“X模式设置中”等信息。第一待显示信息可以为表征正在调节中的图片或视频。这都是合理的。第二待使用信息可以包括第二待显示信息和第二待播放信息。

在本申请实施例中，第一待使用信息可以包括第一待显示信息和/或第一待播放信息。第二待使用信息也可以包括第二待显示信息和/或第二待播放信息。

作为本申请实施例的一种实施方式，上述对所述第一待显示信息和所述第一待播放信息进行处理的步骤，可以包括：

根据所述第一对应关系的类型，确定对应的第一显示方式。在对所述第一待播放信息进行播放处理的情况下，采用所述第一显示方式对所述第一待显示信息进行显示处理。

第一对应关系的类型可以为补充型、说明型和简化型。其中，补充型的含义为第一待播放信息和第一待显示信息可以相互补充，以方便用户能够清楚地获知对应的信息。

说明型的含义为第一待播放信息和第一待显示信息可以相互说明，在这种类型中，第一待显示信息可以将第一待播放信息无法明确说明的内容采用图片或视频等形式显示，以方便用户理解。

简化型的含义为第一待显示信息为第一待播放信息的简化，第一待显示信息可以是第一待播放信息中的关键信息，从而方便用户能够更加直观地获知关键信息。

在第一对应的关系的类型为补充型的情况下，对应的第一显示方式可以为补充显示方式。具体地，在第一显示方式为补充显示方式的情况下，在一种实施方式中，在播放第一待播放信息的情况下，可以在第一待播放信息播放完毕后，显示第一待显示信息。

在另一种实施方式中，第一待播放信息可以包括多个，第一待显示信息对应包括多个，第一待播放信息可以按照顺序进行播放，针对每个第一待播放信息，在该第一待播放信息播放完毕后，可以显示该第一待播放信息对应的第一待显示信息。在对应的第一待显示信息显示完毕后，可以按照顺序播放下一个第一待播放信息，并在下一个第一待播放信息播放完毕后，显示下一个第一待播放信息对应的第一待显示信息，直到顺序位于最后的第一待显示信息显示完毕。

在第一对应关系的类型为说明型的情况下，对应的第一显示方式可以为说明显示方式，在第一显示方式为说明显示方式的情况下，在一种实施方式中，在播放第一待播放信息的情况下，可以同步显示第一待显示信息。

在另一种实施方式中，第一待播放信息可以包括多个，第一待显示信息对应包括多个。第一待播放信息可以按照顺序进行播放，针对每个第一待播放信息，在该第一待播放信息播放的情况下，可以同步显示该第一待播放信息对应的第一待显示信息。在对应的第一待显示信息显示完毕以及该第一待播放信息播放完毕后，可以按照顺序播放下一个第一待播放信息，并在下一个第一待播放信息播放的情况下，同步显示下一个第一待播放信息对应的第一待显示信息，直到顺序位于最后的第一待显示信息显示完毕，以及顺序位于最后的第一待播放信息播放完毕。

其中，针对每个第一待播放信息，播放第一待播放信息的时长与显示对应的第一待显示信息的时长可以一致，也可以不一致。具体可以根据实际使用情况进行设置。

在第一对应关系的类型为简化型的情况下，对应的第一显示方式可以为简化显示方式。这种情况下，第一待显示信息为文字。在一种实施方式中，在播放第一待播放信息的情况下，可以将第一待显示信息包括的全部文字均显示，在第一待播放信息播放到属于第一待显示信息的文字的情况下，可以将该文字突出显示。其中，突出显示的方式可以为放大显示，还可以为高亮显示。

在另一种实施方式中，在播放第一待播放信息的情况下，针对待播放信息包括的每句话，可以在播放到该句话的情况下，对应显示该句话中包括的关键信息(第一待显示信息包括的文字)。

上述对所述第二待显示信息和所述第二待播放信息进行处理的步骤，可以包括：

根据所述第二对应关系的类型，确定对应的第二显示方式；在对所述第二待播放信息进行播放处理的情况下，采用所述第二显示方式对所述第二待显示信息进行显示处理。

第二对应关系的类型可以为补充型、说明型和简化型。其中，补充型的含义为第二待播放信息和第二待显示信息可以相互补充，以方便用户能够清楚地获知对应的信息。

说明型的含义为第二待播放信息和第二待显示信息可以相互说明，在这种类型中，第二待显示信息可以将第二待播放信息无法明确说明的内容采用图片或视频等形式显示，以方便用户理解。

简化型的含义为第二待显示信息为第二待播放信息的简化，第二待显示信息可以是第二待播放信息中的关键信息，从而方便用户能够更加直观地获知关键信息。

在第二对应的关系的类型为补充型的情况下，对应的第二显示方式可以为补充显示方式。具体地，在第二显示方式为补充显示方式的情况下，在一种实施方式中，在播放第二待播放信息的情况下，可以在第二待播放信息播放完毕后，显示第二待显示信息。

在另一种实施方式中，第二待播放信息可以包括多个，第二待显示信息对应包括多个，第二待播放信息可以按照顺序进行播放，针对每个第二待播放信息，在该第二待播放信息播放完毕后，可以显示该第二待播放信息对应的第二待显示信息。在对应的第二待显示信息显示完毕后，可以按照顺序播放下一个第二待播放信息，并在下一个第二待播放信息播放完毕后，显示下一个第二待播放信息对应的第二待显示信息，直到顺序位于最后的第二待显示信息显示完毕。

在第二对应关系的类型为说明型的情况下，对应的第二显示方式可以为说明显示方式，在第二显示方式为补充显示方式的情况下，在一种实施方式中，在播放第二待播放信息的情况下，可以同步显示第二待显示信息。

在另一种实施方式中，第二待播放信息可以包括多个，第二待显示信息对应包括多个。第二待播放信息可以按照顺序进行播放，针对每个第二待播放信息，在该第二待播放信息播放的情况下，可以同步显示该第二待播放信息对应的第二待显示信息。在对应的第二待显示信息显示完毕以及该第二待播放信息播放完毕后，可以按照顺序播放下一个第二待播放信息，并在下一个第二待播放信息播放的情况下，同步显示下一个第二待播放信息对应的第二待显示信息，直到顺序位于最后的第二待显示信息显示完毕，以及顺序位于最后的第二待播放信息播放完毕。

其中，针对每个第二待播放信息，播放第二待播放信息的时长与显示对应的第二待显示信息的时长可以一致，也可以不一致。具体可以根据实际使用情况进行设置。

在第二对应关系的类型为简化型的情况下，对应的第二显示方式可以为简化显示方式。这种情况下，第二待显示信息为文字。在一种实施方式中，在播放第二待播放信息的情况下，可以将第二待显示信息包括的全部文字均显示，在第二待播放信息播放到属于第二待显示信息的文字的情况下，可以将该文字突出显示。其中，突出显示的方式可以为放大显示，还可以为高亮显示。

在另一种实施方式中，在播放第二待播放信息的情况下，针对待播放信息包括的每句话，可以在播放到该句话的情况下，对应显示该句话中包括的关键信息(第二待显示信息包括的文字)。

可见，在本实施例中，可以在对待播放信息进行播放处理的情况下，采用对应的显示方式对待显示信息进行显示处理，这样，用户可以听见待播放信息对应的内容，并看见待显示信息对应的内容，提高了用户的使用体验。

并且，由于待显示信息和待播放信息存在对应关系，二者可以分别从视觉和听觉上使用户获知对应的信息，可以相互配合，共同完成用户的交互需求。相较于仅播放语音的方式，待显示信息能够提供的内容更加丰富，相应地，待播放信息可以进行一定程度上的简化，对于用户来说，能够在待播放信息较为精简的情况下，结合待显示信息的视觉效果，更加直观、明确地获知对应的信息。

作为本申请实施例的一种实施方式，上述第一待显示信息可以包括第一地址信息，上述第二待显示信息可以包括第二地址信息。其中，第一地址信息可以为需要显示的内容在智能家电终端的存储地址的信息。第二地址信息可以为需要显示的内容在智能家电终端的存储地址的信息。

上述采用所述第一显示方式对所述第一待显示信息进行显示处理的步骤，可以包括：

根据所述第一地址信息，从预先存储的视频中，获取对应的第一视频，采用所述第一显示方式显示所述第一视频。

上述采用所述第二显示方式对所述第二待显示信息进行显示处理的步骤，可以包括：

根据所述第二地址信息，从预先存储的视频中，获取对应的第二视频，采用所述第二显示方式显示所述第二视频。

预先存储的视频可以为用户根据自己的实际使用需求，预先上传的视频(可见可说素材)。还可以为开发人员预先根据预先指令预先设置的视频，进而智能家电终端可以从服务器获取开发人员设置的视频，并存储。

可见，在本实施例中，相较于待显示信息为视频的方式，服务器能够更加快速地将待显示信息发送至智能家电终端，并且能够节省网络资源。

作为本申请实施例的一种实施方式，在上述获取所述控制指令对应的控制信息的步骤之后，上述方法还可以包括：

根据所述控制指令对应的控制信息，和预先存储的控制信息与使用信息的对应关系，确定对应的使用信息，作为第三待使用信息，其中，所述第三待使用信息包括第三待显示信息和第三待播放信息，所述第三待显示信息和所述第三待播放信息存在对应关系；

对所述第三待显示信息和所述第三待播放信息进行处理。

对于一些常用的控制指令，可以在智能家电终端预先存储控制信息和使用信息的对应关系。例如，智能家电终端可以存储调节音量的手势的图像、音量调节的动画和音量调节的语音的对应关系。

上述对对所述第三待显示信息和所述第三待播放信息进行处理的步骤与上述对所述第一待显示信息和所述第一待播放信息进行处理的步骤一致，具体可以参见对所述第一待显示信息和所述第一待播放信息进行处理的步骤的说明，在此不再赘述。

可见，在本实施例中，智能家电终端在离线的情况下，可以根据预先存储的控制信息和使用信息的对应关系，确定第三待使用信息，以便后续对第三待显示信息和第三待播放信息进行处理。这样，用户可以通过视觉和听觉两个方面直观地获知控制指令对应的信息，能够提供用户的使用体验。

作为本申请实施例的一种实施方式，智能家电终端的显示屏可以采用多种不同的形式显示待显示信息，其中，待显示信息可以包括第一待显示信息、第二待显示信息、第三待显示信息。

第一种形式，智能家电终端可以采用助手对话框的形式显示待显示信息，用户可以通过触摸，点击等方式拖动助手对话框，可以通过语音控制指令唤醒助手对话框，还可以通过语音控制指令关闭助手对话框。待显示信息可以为图片、视频、文字中的任意一种。

第二种形式，智能家电终端可以采用手势显示窗口显示手势控制指令对应的视频或图像。手势显示窗口可以位于显示于显示屏的其他应用之上。

第三种形式，在待显示信息为动画的情况下，智能家电终端可以采用动画中心窗口显示动画。动画中心窗口可以位于显示于显示屏的其他应用之上。

第四种形式，在待显示信息为卡片式图片的情况下，智能家电终端可以采用弹窗的形式显示卡片式图片。

可见，在本实施例中，可以采用不同的形式显示待显示信息，提高了用户的视觉体验。

作为本申请实施例的一种实施方式，智能家电终端可以存储有第一多模态交互框架，和/或，服务器可以存储有第二多模态交互框架。其中，第一多模态交互框架可以设置有一些常用的控制指令对应的控制信息。

第二多模态交互框架可以包括智能家电终端对应的全部功能的信息。例如，第二多模态交互框架可以包括安装于智能家电终端和应用终端的应用程序对应的选项。具体而言，可以将不同触发按钮对应的触发信息设置于第二多模态交互框架。

对于智能家电终端来说，可以确定控制信息是否命中第一多模态交互框架，在控制信息命中第一多模态交互框架的情况下，可以执行根据所述控制指令对应的控制信息，和预先存储的控制信息与使用信息的对应关系，确定对应的使用信息，并将对应的使用信息作为第三待使用信息的步骤。

在控制信息未命中第一多模态交互框架的情况下，可以播放预先存储的控制指令执行失败的语音信息和显示信息。在智能家电终端在线的情况下，还可以将控制信息发送至服务器，从而进行后续确定待使用信息的步骤。

对于服务器来说，在识别结果包括的意图信息命中第二多模态交互框架的情况下，可以对应确定第一待使用信息。再将第一待使用信息发送至智能家电终端后，智能家电终端可以对第一待显示信息和第一待播放信息进行处理。

在第一待使用信息包括控制参数的情况下，可以执行控制参数，并根据执行情况生成返回值，将返回值发送至服务器。服务器在接收到返回值的情况下，且返回值命中第二多模态交互框架的情况下，可以确定第二待使用信息，并将第二待使用信息发送至智能家电终端，智能家电终端便可以对第二待显示信息和第二待播放信息进行处理。

为了更加方便理解本申请实施例提供的一种视听结合的智能家电终端控制方法，下面结合图3对本申请实施例提供的一种视听结合的智能家电终端控制方法进行介绍。

如图3所示，用户可以发出上传可见可说素材的语音，智能家电终端可以对上传可见可说素材的语音进行识别，得到位置信息，智能家电终端可以根据位置信息，下载并存储可见可说素材。

进而，用户可以发出语音控制指令，智能家电终端(图中未示出)在接收到语音控制指令后，可以将语音控制指令转换为文本信息，并将文本信息发送至服务器(图中未示出)，服务器可以对文本信息进行意图识别。

具体来说，可以将文本信息加入意图识别队列，从而实现意图识别，得到识别结果，根据识别结果确定第一待使用信息，并将第一待使用信息发送至智能家电终端。

在第一待使用信息包括第一待显示信息和第一待播放信息情况下，智能家电终端可以对第一待显示信息和第一待播放信息进行处理。

下面对本申请提供的第二种视听结合的智能家电终端控制方法进行描述，下文描述的第二种视听结合的智能家电终端控制方法与上文描述的第一种视听结合的智能家电终端控制方法可相互对应参照。

如图4所示，本申请实施例提供了第二种视听结合的智能家电终端控制方法，方法应用于服务器，方法包括：

S401，接收智能家电终端发送的控制信息。

其中，所述控制信息为所述智能家电终端在获取到控制指令之后，获取的所述控制指令对应的信息。

S402，对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息。

S403，将所述第一待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理。

其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

可见，在本实施例中，智能家电终端可以对第一待显示信息和第一待播放信息进行处理。对于用户来说，可以在发出控制指令后，看到第一待显示信息显示于智能家电终端，以及听到第一待播放信息，即用户可以看到控制指令对应的视觉信息显示于智能家电终端，以及可以听到智能家电中断播放的控制指令对应的听觉信息。用户可以通过视觉和听觉两个方面直观地获知控制指令对应的信息，能够提供用户的使用体验。

作为本申请实施例的一种实施方式，在将所述第一待使用信息发送至所述智能家电终端的步骤之后，所述方法还包括：

接收所述智能家电终端发送的返回值，其中，所述返回值为所述智能家电终端在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成的值。

基于所述返回值确定第二待使用信息，并将所述第二待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理，其中，所述第二待显示信息和所述第二待播放信息存在第二对应关系。

下面对本申请提供的第一种视听结合的智能家电终端控制装置进行描述，下文描述的第一种视听结合的智能家电终端控制装置与上文描述的第一种视听结合的智能家电终端控制方法可相互对应参照。

如图5所示，本申请实施例提供了第一种视听结合的智能家电终端控制装置，装置应用于智能家电终端，装置包括：

第一获取模块510，用于获取控制指令。

第二获取模块520，用于获取所述控制指令对应的控制信息，并将所述控制信息发送至服务器，以使所述服务器对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息。

第一接收模块530，用于接收所述服务器发送的所述第一待使用信息。

第一处理模块540，用于在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理。

其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

作为本申请实施例的一种实施方式，上述装置还可以包括：

执行模块，用于在接收所述服务器发送的所述第一待使用信息之后，在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成返回值。

返回值发送模块，用于将所述返回值发送至所述服务器，以使所述服务器基于所述返回值确定第二待使用信息。

第三接收模块，用于接收所述服务器发送的所述第二待使用信息。

第二处理模块，用于在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理。

其中，所述第二待显示信息和所述第二待播放信息存在第二对应关系。

作为本申请实施例的一种实施方式，上述第一处理模块540可以包括：

第一确定单元，用于根据所述第一对应关系的类型，确定对应的第一显示方式。

第一处理单元，用于在对所述第一待播放信息进行播放处理的情况下，采用所述第一显示方式对所述第一待显示信息进行显示处理。

上述第二处理模块可以包括：

第二确定单元，用于根据所述第二对应关系的类型，确定对应的第二显示方式。

第二处理单元，用于在对所述第二待播放信息进行播放处理的情况下，采用所述第二显示方式对所述第二待显示信息进行显示处理。

作为本申请实施例的一种实施方式，上述第一待显示信息可以包括第一地址信息，上述第二待显示信息可以包括第二地址信息。

上述第一处理单元，具体用于根据所述第一地址信息，从预先存储的视频中，获取对应的第一视频，采用所述第一显示方式显示所述第一视频。

上述第二处理单元，具体用于根据所述第二地址信息，从预先存储的视频中，获取对应的第二视频，采用所述第二显示方式显示所述第二视频。

作为本申请实施例的一种实施方式，上述装置还可以包括：

确定模块，用于在获取所述控制指令对应的控制信息之后，根据所述控制指令对应的控制信息，和预先存储的控制信息与使用信息的对应关系，确定对应的使用信息，并将对应的使用信息作为第三待使用信息。

其中，所述第三待使用信息包括第三待显示信息和第三待播放信息，所述第三待显示信息和所述第三待播放信息存在对应关系。

第三处理模块，用于对所述第三待显示信息和所述第三待播放信息进行处理。

下面对本申请提供的第二种视听结合的智能家电终端控制装置进行描述，下文描述的第二种视听结合的智能家电终端控制装置与上文描述的第二种视听结合的智能家电终端控制方法可相互对应参照。

如图6所示，本申请实施例提供了第二种视听结合的智能家电终端控制装置，装置应用于服务器，装置包括：

第二接收模块610，用于接收智能家电终端发送的控制信息。

其中，所述控制信息为所述智能家电终端在获取控制指令之后，获取的所述控制指令对应的信息；

识别模块620，用于对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

发送模块630，用于将所述第一待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理。

其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

作为本申请实施例的一种实施方式，上述装置还可以包括：

第四接收模块，用于在将所述第一待使用信息发送至所述智能家电终端之后，接收所述智能家电终端发送的返回值。

其中，所述返回值为所述智能家电终端在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成的值。

信息发送模块，用于基于所述返回值确定第二待使用信息，并将所述第二待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理。

其中，所述第二待显示信息和所述第二待播放信息存在第二对应关系。

图7示例了一种电子装置的实体结构示意图，如图7所示，电子装置可以为智能家电终端，还可以为服务器。该电子装置可以包括：处理器(processor)710、通信接口(Communications Interface)720、存储器(memory)730和通信总线740，其中，处理器710，通信接口720，存储器730通过通信总线740完成相互间的通信。处理器710可以调用存储器730中的逻辑指令，以执行视听结合的智能家电终端控制方法。

此外，上述的存储器730中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

另一方面，本申请还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，计算机程序可存储在计算机可读的存储介质上，所述计算机程序被处理器执行时，计算机能够执行上述各方法所提供的，以执行视听结合的智能家电终端控制方法。

又一方面，本申请还提供一种计算机可读的存储介质，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行上述各方法提供的，以执行视听结合的智能家电终端控制方法。

以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (11)

1.一种视听结合的智能家电终端控制方法，其特征在于，所述方法应用于智能家电终端，所述方法包括：

获取控制指令；

获取所述控制指令对应的控制信息，并将所述控制信息发送至服务器，以使所述服务器对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

接收所述服务器发送的所述第一待使用信息；

在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

2.根据权利要求1所述的视听结合的智能家电终端控制方法，其特征在于，在所述接收所述服务器发送的所述第一待使用信息的步骤之后，所述方法还包括：

在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成返回值；

将所述返回值发送至所述服务器，以使所述服务器基于所述返回值确定第二待使用信息；

接收所述服务器发送的所述第二待使用信息；

在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理，其中，所述第二待显示信息和所述第二待播放信息存在第二对应关系。

3.根据权利要求2所述的视听结合的智能家电终端控制方法，其特征在于，所述对所述第一待显示信息和所述第一待播放信息进行处理的步骤，包括：

根据所述第一对应关系的类型，确定对应的第一显示方式；

在对所述第一待播放信息进行播放处理的情况下，采用所述第一显示方式对所述第一待显示信息进行显示处理；

所述对所述第二待显示信息和所述第二待播放信息进行处理的步骤，包括：

根据所述第二对应关系的类型，确定对应的第二显示方式；

在对所述第二待播放信息进行播放处理的情况下，采用所述第二显示方式对所述第二待显示信息进行显示处理。

4.根据权利要求3所述的视听结合的智能家电终端控制方法，其特征在于，所述第一待显示信息包括第一地址信息，所述第二待显示信息包括第二地址信息；

所述采用所述第一显示方式对所述第一待显示信息进行显示处理的步骤，包括：

根据所述第一地址信息，从预先存储的视频中，获取对应的第一视频；

采用所述第一显示方式显示所述第一视频；

所述采用所述第二显示方式对所述第二待显示信息进行显示处理的步骤，包括：

根据所述第二地址信息，从预先存储的视频中，获取对应的第二视频；

采用所述第二显示方式显示所述第二视频。

5.根据权利要求1-4任一项所述的视听结合的智能家电终端控制方法，其特征在于，在所述获取所述控制指令对应的控制信息的步骤之后，所述方法还包括：

根据所述控制指令对应的控制信息，和预先存储的控制信息与使用信息的对应关系，确定对应的使用信息，并将对应的使用信息作为第三待使用信息，其中，所述第三待使用信息包括第三待显示信息和第三待播放信息，所述第三待显示信息和所述第三待播放信息存在对应关系；

对所述第三待显示信息和所述第三待播放信息进行处理。

6.一种视听结合的智能家电终端控制方法，其特征在于，所述方法应用于服务器，所述方法包括：

接收智能家电终端发送的控制信息，其中，所述控制信息为所述智能家电终端在获取到控制指令之后，获取的所述控制指令对应的信息；

对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

将所述第一待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

7.根据权利要求6所述的视听结合的智能家电终端控制方法，其特征在于，在上述将所述第一待使用信息发送至所述智能家电终端的步骤之后，所述方法还包括：

接收所述智能家电终端发送的返回值，其中，所述返回值为所述智能家电终端在所述第一待使用信息包括控制参数的情况下，执行所述控制参数，并根据执行情况生成的值。

基于所述返回值确定第二待使用信息，并将所述第二待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第二待使用信息包括第二待显示信息和第二待播放信息情况下，对所述第二待显示信息和所述第二待播放信息进行处理，其中，所述第二待显示信息和所述第二待播放信息存在第二对应关系。

8.一种视听结合的智能家电终端控制装置，其特征在于，所述装置应用于智能家电终端，所述装置包括：

第一获取模块，用于获取控制指令；

第二获取模块，用于获取所述控制指令对应的控制信息，并将所述控制信息发送至服务器，以使所述服务器对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

第一接收模块，用于接收所述服务器发送的所述第一待使用信息；

第一处理模块，用于在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

9.一种视听结合的智能家电终端控制装置，其特征在于，所述装置应用于服务器，所述装置包括：

第二接收模块，用于接收智能家电终端发送的控制信息，其中，所述控制信息为所述智能家电终端在获取控制指令之后，获取的所述控制指令对应的信息；

识别模块，用于对所述控制信息进行意图识别，得到识别结果，并根据所述识别结果确定第一待使用信息；

发送模块，用于将所述第一待使用信息发送至所述智能家电终端，以使所述智能家电终端在所述第一待使用信息包括第一待显示信息和第一待播放信息情况下，对所述第一待显示信息和所述第一待播放信息进行处理，其中，所述第一待显示信息和所述第一待播放信息存在第一对应关系。

10.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行权利要求1至5中任一项所述的方法，或所述程序运行时执行权利要求6或7所述的方法。

11.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行权利要求1至5中任一项所述的方法，或所述处理器被设置为通过所述计算机程序执行权利要求6或7所述的方法。