CN116301557A - 一种显示方法及电子设备 - Google Patents

Abstract

本申请实施例提供一种显示方法及电子设备，包括：第一设备显示第一界面，第一界面包括第一信息，第一信息和第一业务相关；第一设备接收第一用户操作，响应于第一用户操作，识别第一界面以确定意图信息，意图信息指示执行第一指令，第一指令用于实现第一业务；第一设备向第二设备发送意图信息，意图信息用于第二设备执行第一指令并生成第二信息，第二信息用于第二设备显示第二界面，或者，第一设备向第二设备发送第二信息，第二信息是第一设备执行第一指令生成的，第二信息用于第二设备显示第二界面。本申请实施例能够在多设备互联的场景下简化交互方式，减少用户操作，提升效率。

Description

一种显示方法及电子设备

技术领域

本申请涉及计算机技术领域，尤其涉及一种显示方法及电子设备。

背景技术

多个设备之间互相连接和通信的场景(例如分布式场景)下，用户不仅可以独立地使用其中任意一个设备，而且可以同时使用多个设备(这多个设备的业务可以有联系，例如将智能手机上的视频投屏到智能电视上播放)。但是，这种场景下的电子设备缺乏简单高效的交互方式，用户操作繁琐复杂，例如，智能手机和车载电脑连接的场景下，若用户通过智能手机接收到包括位置信息的通讯消息，用户需要打开车载电脑上的地图应用，将目的地设置为该位置信息指示的地点，以实现针对该位置信息进行导航，操作繁琐，若用户处于行车过程还会影响驾驶的安全性，用户体验不佳。

发明内容

本申请实施例公开了一种显示方法及电子设备，能够在多设备互联的场景下简化交互方式，减少用户操作，提升效率。

第一方面，本申请实施例提供了一种显示方法，应用于第一设备，上述第一设备和第二设备连接，该方法包括：显示第一界面，上述第一界面包括第一信息，上述第一信息和第一业务相关；接收第一用户操作；响应于第一用户操作，识别上述第一界面以确定意图信息，上述意图信息指示执行第一指令，上述第一指令用于实现上述第一业务；向上述第二设备发送上述意图信息，上述意图信息用于上述第二设备执行上述第一指令并生成第二信息，上述第二信息用于上述第二设备显示第二界面。

在一些实施例中，上述第一指令是根据上述意图信息解析得到的指令，在另一些实施例中，上述第一指令是上述意图信息包括的指令。

在一些实施例中，上述第二信息用于上述第二设备显示上述第二界面和播放第一音频。在另一些实施例中，上述第二信息用于上述第二设备播放上述第一音频，上述第二设备不显示上述第二界面。

在上述方法中，第一设备接收到第一用户操作时，可以基于当前显示的第一界面进行用户意图的识别，并通过第二设备执行第一指令，第一指令用于实现识别出的意图信息对应的第一业务，无需用户手动操作第一设备或第二设备来触发实现第一业务，减少用户操作，让多设备互联的场景下的交互方式更加高效便捷。

在一种可能的实现方式中，上述第一界面还包括第三信息，上述第三信息和第二业务相关；上述识别上述第一界面以确定意图信息，包括：识别上述第一信息以确定上述第四信息，识别上述第三信息以确定上述第五信息，上述第四信息指示执行上述第一指令，上述第五信息指示执行第二指令，上述第二指令用于实现上述第二业务；基于第一预设规则，从上述第四信息和上述第五信息中确定上述意图信息为上述第四信息，上述第一预设规则包括以下至少一项：上述第二设备的设备类型为预设设备类型、上述第二设备支持的业务包括上述第一业务、上述第一业务的优先级高于上述第二业务的优先级。

在一些实施例中，上述第一信息和上述第三信息为即时通讯消息，上述第一预设规则包括上述第一信息的接收时间晚于上述第三信息的接收时间。

在上述方法中，第一设备还可以使用第一预设规则来确定当前场景下更符合用户需求的意图信息，进一步提升交互的准确性，用户体验感更好。

在一种可能的实现方式中，上述第一信息为位置信息，上述第一业务为导航业务，上述第二业务和上述第一业务不同，上述第一预设规则包括上述第二设备的设备类型为上述预设设备类型，上述预设设备类型为车载设备。

在一种可能的实现方式中，上述第一信息为视频信息，上述第一业务为视频播放业务，上述第二业务和上述第一业务不同，上述第一预设规则包括上述第二设备的设备类型为上述预设设备类型，上述预设设备类型包括智能电视、智慧屏。

在一种可能的实现方式中，上述第一信息为指示第一位置的信息，上述第一业务为导航业务，上述第二信息是执行针对上述第一位置的导航操作生成的显示信息。

在一些实施例中，上述第一设备为智能手机，上述第二设备为车载设备。

在上述方法中，第一设备显示包括位置信息的第一界面时，若接收到第一用户操作，可以通过第二设备实现针对上述位置信息的导航业务，无需用户手动在第二设备上输入上述位置信息和手动触发上述导航操作，让多设备互联的场景下的交互方式更加高效便捷。

在一种可能的实现方式中，上述第一信息为指示第一视频的信息，上述第一业务为视频播放业务，上述第二信息是播放上述第一视频生成的显示信息。

在一些实施例中，上述第一设备为智能手机，上述第二设备为智能电视。

在上述方法中，第一设备显示包括视频信息的第一界面时，若接收到第一用户操作，可以通过第二设备实现播放上述视频信息的业务，无需用户手动在第二设备上查找上述视频信息和手动触发视频播放业务，让多设备互联的场景下的交互方式更加高效便捷。

在一种可能的实现方式中，上述第一信息为指示第一菜谱的信息，上述第一业务为烹饪业务，上述第二信息是实现上述第一菜谱对应的烹饪业务生成的显示信息。

在一些实施例中，上述第一设备为智能手机，上述第二设备为智能料理机。

在上述方法中，第一设备显示包括菜谱信息的第一界面时，若接收到第一用户操作，可以通过第二设备实现该菜谱信息对应的烹饪业务，无需用户手动在第二设备上查找上述菜谱信息和手动触发烹饪业务，让多设备互联的场景下的交互方式更加高效便捷。

在一种可能的实现方式中，上述第一信息为指示第一题目和上述第一题目的答案的信息，上述第一业务是试卷生成业务，上述第二界面包括上述第一题目，不包括上述第一题目的答案。

在一些实施例中，上述第一设备为智能手机，上述第二设备为平板电脑或学习机。

在上述方法中，第一设备显示包括题目和答案的第一界面时，若接收到第一用户操作，可以通过第二设备显示题目但不显示答案，让孩子可以使用第二设备练习题目，无需家长手动在第二设备上查找上述题目和手动触发试卷生成业务，交互方式便捷精准，能够很好地满足家长和孩子的需求。

在一种可能的实现方式中，上述第一用户操作为摇一摇操作、甩动操作、指关节敲击操作、指关节滑动操作、多指敲击操作或多指滑动操作等。

在上述方法中，第一用户操作简单方便，用户不再需要执行繁琐的操作才能触发实现第一业务，交互门槛低，用户使用更加方便。

第二方面，本申请提供了又一种显示方法，应用于第一设备，上述第一设备和第二设备连接，该方法包括：显示第一界面，上述第一界面包括第一信息，上述第一信息和第一业务相关；接收第一用户操作；响应于第一用户操作，识别上述第一界面以确定意图信息；根据上述意图信息执行第一指令，生成第二信息，上述第一指令用于实现上述第一业务；向上述第二设备发送上述第二信息，上述第二信息用于上述第二设备显示第二界面。

在一些实施例中，上述第一指令是根据上述意图信息解析得到的指令，在另一些实施例中，上述第一指令是上述意图信息包括的指令。

在一些实施例中，上述第二信息用于上述第二设备显示上述第二界面和播放第一音频。在另一些实施例中，上述第二信息用于上述第二设备播放上述第一音频，上述第二设备不显示上述第二界面。

在上述方法中，第一设备接收到第一用户操作时，可以基于当前显示的第一界面进行用户意图的识别，以及执行识别出的意图信息指示的第一指令，并且通过第二设备输出执行第一指令生成的多媒体数据，可以理解为是通过第二设备实现第一指令对应的第一业务，无需用户手动操作第一设备或第二设备来触发实现第一业务，减少用户操作，让多设备互联的场景下的交互方式更加高效便捷。

在一种可能的实现方式中，上述第一界面还包括第三信息，上述第三信息和第二业务相关；上述识别上述第一界面以确定意图信息，包括：识别上述第一信息以确定上述第四信息，识别上述第三信息以确定上述第五信息，上述第四信息指示执行上述第一指令，上述第五信息指示执行第二指令，上述第二指令用于实现上述第二业务；基于第一预设规则，从上述第四信息和上述第五信息中确定上述意图信息为上述第四信息，上述第一预设规则包括上述第二设备的设备类型为预设设备类型，和/或上述第一业务的优先级高于上述第二业务的优先级。

在一些实施例中，上述第一信息和上述第三信息为即时通讯消息，上述第一预设规则包括上述第一信息的接收时间晚于上述第三信息的接收时间。

在上述方法中，第一设备还可以使用第一预设规则来确定当前场景下更符合用户需求的意图信息，进一步提升交互的准确性，用户体验感更好。

在一种可能的实现方式中，上述第一信息为位置信息，上述第一业务为导航业务，上述第二业务和上述第一业务不同，上述第一预设规则包括上述第二设备的设备类型为上述预设设备类型，上述预设设备类型为车载设备。

在一种可能的实现方式中，上述第一信息为指示第一位置的信息，上述第一业务为导航业务，上述第二信息是执行针对上述第一位置的导航操作生成的显示信息。

在一种可能的实现方式中，上述第一信息为指示第一视频的信息，上述第一业务为视频播放业务，上述第二信息是播放上述第一视频生成的显示信息。

在一种可能的实现方式中，上述第一信息为指示第一菜谱的信息，上述第一业务为烹饪业务，上述第二信息是实现上述第一菜谱对应的烹饪业务生成的显示信息。

在一种可能的实现方式中，上述第一信息为指示第一题目和上述第一题目的答案的信息，上述第一业务是试卷生成业务，上述第二界面包括上述第一题目，不包括上述第一题目的答案。

在一种可能的实现方式中，上述第一用户操作为摇一摇操作、甩动操作、指关节敲击操作、指关节滑动操作、多指敲击操作或多指滑动操作等。

第三方面，本申请提供了又一种显示方法，应用于第二设备，上述第二设备和第一设备连接，该方法包括：接收上述第一设备发送的意图信息，上述意图信息是上述第一设备接收到第一用户操作的情况下识别显示的第一界面确定的，上述第一界面包括第一信息，上述第一信息和第一业务相关；根据上述意图信息执行第一指令，生成第二信息，上述第一指令用于实现上述第一业务；根据上述第二信息显示第二界面。

在一些实施例中，上述第一指令是根据上述意图信息解析得到的指令，在另一些实施例中，上述第一指令是上述意图信息包括的指令。

在一些实施例中，上述第二信息用于上述第二设备显示上述第二界面和播放第一音频。在另一些实施例中，上述第二信息用于上述第二设备播放上述第一音频，上述第二设备不显示上述第二界面。

在上述方法中，第一设备接收到第一用户操作时，可以基于当前显示的第一界面进行用户意图的识别，并向第二设备发送识别出的意图信息。第二设备可以执行意图信息指示的第一指令以实现第一业务，无需用户手动操作第一设备或第二设备来触发实现第一业务，减少用户操作，让多设备互联的场景下的交互方式更加高效便捷。

在一种可能的实现方式中，上述第一信息为指示第一位置的信息，上述第一业务为导航业务，上述第二信息是执行针对上述第一位置的导航操作生成的显示信息。

在一种可能的实现方式中，上述第一信息为指示第一视频的信息，上述第一业务为视频播放业务，上述第二信息是播放上述第一视频生成的显示信息。

在一种可能的实现方式中，上述第一信息为指示第一菜谱的信息，上述第一业务为烹饪业务，上述第二信息是实现上述第一菜谱对应的烹饪业务生成的显示信息。

在一种可能的实现方式中，上述第一信息为指示第一题目和上述第一题目的答案的信息，上述第一业务是试卷生成业务，上述第二界面包括上述第一题目，不包括上述第一题目的答案。

在一种可能的实现方式中，上述第一用户操作为摇一摇操作、甩动操作、指关节敲击操作、指关节滑动操作、多指敲击操作或多指滑动操作等。

第四方面，本申请提供了又一种显示方法，应用于第二设备，上述第二设备和第一设备连接，该方法包括：接收上述第一设备发送的第一信息，上述第一信息是执行第一指令生成的信息，上述第一指令用于实现第一业务，上述第一指令是意图信息指示执行的指令，上述意图信息是上述第一设备接收到第一用户操作的情况下识别显示的第一界面确定的，上述第一界面包括第二信息，上述第二信息和上述第一业务相关；根据上述第一信息显示第二界面。

在一些实施例中，上述第一指令是根据上述意图信息解析得到的指令，在另一些实施例中，上述第一指令是上述意图信息包括的指令。

在一些实施例中，上述第二信息用于上述第二设备显示上述第二界面和播放第一音频。在另一些实施例中，上述第二信息用于上述第二设备播放上述第一音频，上述第二设备不显示上述第二界面。

在上述方法中，第一设备接收到第一用户操作时，可以基于当前显示的第一界面进行用户意图的识别，以及执行识别出的意图信息指示的第一指令，并且通过第二设备输出执行第一指令生成的多媒体数据，可以理解为是通过第二设备实现第一指令对应的第一业务，无需用户手动操作第一设备或第二设备来触发实现第一业务，减少用户操作，让多设备互联的场景下的交互方式更加高效便捷。

在一种可能的实现方式中，上述第二信息为指示第一位置的信息，上述第一业务为导航业务，上述第一信息是执行针对上述第一位置的导航操作生成的显示信息。

在一种可能的实现方式中，上述第二信息为指示第一视频的信息，上述第一业务为视频播放业务，上述第一信息是播放上述第一视频生成的显示信息。

在一种可能的实现方式中，上述第二信息为指示第一菜谱的信息，上述第一业务为烹饪业务，上述第一信息是实现上述第一菜谱对应的烹饪业务生成的显示信息。

在一种可能的实现方式中，上述第二信息为指示第一题目和上述第一题目的答案的信息，上述第一业务是试卷生成业务，上述第二界面包括上述第一题目，不包括上述第一题目的答案。

在一种可能的实现方式中，上述第一用户操作为摇一摇操作、甩动操作、指关节敲击操作、指关节滑动操作、多指敲击操作或多指滑动操作等。

第五方面，本申请实施例提供了一种电子设备，包括一个或多个处理器和一个或多个存储器。该一个或多个存储器与一个或多个处理器耦合，一个或多个存储器用于存储计算机程序代码，计算机程序代码包括计算机指令，当一个或多个处理器执行计算机指令时，使得通信装置执行上述任一方面任一项可能的实现方式中的显示方法。

第六方面，本申请实施例提供了一种计算机存储介质，该计算机存储介质存储有计算机程序，该计算机程序被处理器执行时，实现执行上述任一方面任一项可能的实现方式中的显示方法。

第七方面，本申请实施例提供了一种计算机程序产品，当该计算机程序产品在电子设备上运行时，使得该电子设备执行上述任一方面任一项可能的实现方式中的显示方法。

第八方面，本申请实施例提供一种电子设备，该电子设备包括执行本申请任一实施例所介绍的方法或装置。上述电子设备例如为芯片。

应当理解的是，本申请中对技术特征、技术方案、有益效果或类似语言的描述并不是暗示在任意的单个实施例中可以实现所有的特点和优点。相反，可以理解的是对于特征或有益效果的描述意味着在至少一个实施例中包括特定的技术特征、技术方案或有益效果。因此，本说明书中对于技术特征、技术方案或有益效果的描述并不一定是指相同的实施例。进而，还可以任何适当的方式组合本实施例中所描述的技术特征、技术方案和有益效果。本领域技术人员将会理解，无需特定实施例的一个或多个特定的技术特征、技术方案或有益效果即可实现实施例。在其他实施例中，还可在没有体现所有实施例的特定实施例中识别出额外的技术特征和有益效果。

附图说明

以下对本申请实施例用到的附图进行介绍。

图1A是本申请实施例提供的一种通信系统10的架构示意图；

图1B是本申请实施例提供的又一种通信系统10的架构示意图；

图1C是本申请实施例提供的又一种通信系统10的架构示意图；

图2A是本申请实施例提供的一种电子设备100的硬件结构示意图；

图2B是本申请实施例提供的一种电子设备200的硬件结构示意图；

图2C是本申请实施例提供的一种网络设备300的硬件结构示意图；

图2D是本申请实施例提供的一种电子设备100的软件架构示意图；

图3A-图3C是本申请实施例提供的一些用户界面实施例的示意图；

图4A-图4B是本申请实施例提供的又一些用户界面实施例的示意图；

图4C是本申请实施例提供的又一种用户界面实施例的示意图；

图5是本申请实施例提供的又一种用户界面实施例的示意图；

图6是本申请实施例提供的又一种用户界面实施例的示意图；

图7A是本申请实施例提供的又一种用户界面实施例的示意图；

图7B是本申请实施例提供的又一种用户界面实施例的示意图；

图8是本申请实施例提供的一种用户操作的示意图；

图9是本申请实施例提供的一种显示方法的流程示意图；

图10是本申请实施例提供的又一种显示方法的流程示意图；

图11是本申请实施例提供的又一种显示方法的流程示意图。

具体实施方式

下面将结合附图对本申请实施例中的技术方案进行清楚、详尽地描述。其中，在本申请实施例的描述中，除非另有说明，“/”表示或的意思，例如，A/B可以表示A或B；文本中的“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况，另外，在本申请实施例的描述中，“多个”是指两个或多于两个。

以下，术语“第一”、“第二”仅用于描述目的，而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征，在本申请实施例的描述中，除非另有说明，“多个”的含义是两个或两个以上。

本申请实施例可以应用于多个设备之间互相连接和通信的场景，例如分布式场景。在这种场景下，用户可以同时使用多个设备，此时这多个设备的业务可以有联系，例如将智能手机上的视频投屏到智能电视上播放。但是，这种场景下的电子设备缺乏简单高效的交互方式，用户操作繁琐复杂，具体示例如下所示：

示例一：智能手机和车载电脑连接的场景下，若用户通过智能手机接收到包括位置信息的通讯消息，用户需要打开车载电脑上的地图应用，将目的地设置为该位置信息指示的地点，以实现针对该位置信息进行导航，操作繁琐，若用户处于行车过程还会影响驾驶的安全性，用户体验不佳。

示例二：智能手机和智能电视连接的场景下，若用户在智能手机上看到某个影片的信息(例如简介、影评等)，想要在智能电视上观看该影片，用户需要在智能电视上搜索该影片以进行播放，或者用户需要先打开智能手机上的视频应用和该影片的播放界面，然后操作投屏控件，并选择要投屏的设备(即智能电视)，以实现将该影片投屏到智能电视上观看，操作繁琐，交互效率低。

示例三：智能手机和智能料理机连接的场景下，若用户在智能手机上看到某个菜谱的信息，想要使用智能料理机制作相应的料理，用户需要在智能料理机上搜索该菜谱以进行烹饪，操作繁琐，交互效率低。

示例四：智能手机和平板电脑连接的场景下，孩子可以使用平板电脑或学习机进行学习，家长可以使用智能手机查找相关习题，若家长在智能手机上查找到想让孩子解答的习题，需要在平板电脑或学习机上重新查找习题，操作繁琐，交互效率低。

本申请实施例提供了一种显示方法，第一设备可以响应于用户操作，识别当前显示的第一界面，并确定出意图信息，第一设备可以通过第二设备实现该意图信息指示的业务。无需用户手动触发第二设备实现该意图信息指示的业务，提供了一种应用在多设备互联的场景下的高效便捷的交互方式，减少用户操作，提升用户体验感。

例如，智能手机(第一设备)可以响应于摇一摇操作(用户操作)，识别包括位置卡片(以卡片形式展示地理位置的消息)的聊天界面(第一界面)，并确定出意图信息，该意图信息指示针对该位置卡片表征的地点进行导航的导航业务，该意图信息可以是基于位置卡片得到的。智能手机可以基于该意图信息指示车载电脑执行该导航业务，可选地执行操作：在地图应用中将该位置卡片表征的地点设置为目的地并进行导航。

下面介绍本申请实施例涉及的一种通信系统10。

图1A示例性示出了本申请实施例提供的一种通信系统10的架构示意图。

如图1A所示，通信系统10可以包括电子设备100、电子设备200和网络设备300，其中：

在一些实施例中，电子设备100可以通过有线方式和/或无线方式连接至少一个电子设备200，有线方式例如包括高清多媒体接口(high definition multimediainterface，HDMI)、通用串行总线(universal serial bus，USB)、同轴电缆、光纤等，无线方式例如包括蓝牙、无线保真(wireless fidelity，Wi-Fi)、近距离无线通信技术(nearfield communication，NFC)、超宽带(ultra wide band，UWB)等。电子设备100和电子设备200可以通过连接线路(例如蓝牙、Wi-Fi)进行通信，这种情况下，电子设备100和电子设备200之间传输信息的速率较快，可传输的信息较多。

在另一些实施例中，电子设备100可以通过有线方式和/或无线方式连接网络设备300，网络设备300可以通过有线方式和/或无线方式连接至少一个电子设备200。电子设备100可以通过网络设备300和电子设备200进行通信，例如，电子设备100为智能手机，电子设备200为汽车，网络设备300为提供HUAWEIHiCar功能的云服务器，电子设备100和电子设备200可以通过HUAWEIHiCar功能连接和投屏。

在另一些实施例中，电子设备100虽然未连接电子设备200，但可以和电子设备200建立连接再通信，可以理解为是电子设备200为电子设备100未连接但可通信的电子设备，可选地，电子设备100可以存储有至少一个电子设备200的连接信息(例如蓝牙地址和密码、Wi-Fi名称和密码等)，通过连接信息连接至少一个电子设备200(例如向蓝牙地址对应的电子设备200发送包括密码的信息，以请求建立连接)，可选地，电子设备200的连接信息可以是电子设备100之前连接电子设备200时获取的，可选地，电子设备200的连接信息可以是电子设备100通过网络设备300获取的，例如电子设备100登录某个账号后，可以获取到之前登录过该账号的电子设备200的连接信息，本申请对电子设备100获取电子设备200的连接信息的方式不作限定。

图1A所示的电子设备和网络设备仅为示例，具体设备形态不作限定。

本申请中，电子设备100可以是手机、平板电脑、手持计算机、个人数字助理(Personal Digital Assistant，PDA)等移动终端，智能电视、智能摄像头、智能料理机等智能家居设备，智能手环、智能手表、智能眼镜等可穿戴设备，或其他桌面型、膝上型、笔记本电脑、超级移动个人计算机(Ultra-mobile Personal Computer，UMPC)、上网本、智慧屏、学习机等设备。电子设备200的描述类似，不再赘述。本申请实施例对电子设备100和电子设备200的具体类型不作特殊限制。

本申请中，网络设备300可以包括至少一个服务器，在一些实施例中，任意一个服务器可以为硬件服务器，在一些实施例中，任意一个服务器可以为云服务器。

图1B示例性示出了本申请实施例提供的又一种通信系统10的架构示意图。

如图1B所示，通信系统10中的电子设备100可以包括界面解析模块、意图解析模块和意图触发模块，通信系统10中的电子设备200可以包括输出模块，其中：

当电子设备100检测到用户操作时，例如通过下图2A所示的传感器模块180检测用户操作时，可以向界面解析模块上报该用户操作对应的事件(可称为触发事件)。

电子设备100的界面解析模块接收到触发事件时，可以识别电子设备100显示的用户界面，并得到界面识别结果，在一些实施例中，界面解析模块可以通过关键词提取、自然语言理解(natural language understanding，NLU)等手段，对当前界面的图层结构、文本进行识别解析。界面识别结果例如包括文本信息，表征用户界面中的结构的结构信息。界面识别结果例如是xml格式的数据、json格式的数据或其他已有格式的数据，不限于此，还可以是自定义格式的数据等。界面解析模块可以向意图解析模块发送界面识别结果。

在一些实施例中，界面解析模块可以识别显示的用户界面中的部分页面，并得到界面识别结果。例如，电子设备100显示的用户界面为分屏界面，假设该分屏界面包括第一应用的页面和第二应用的页面，假设用户最近一次操作的应用为第一应用，界面解析模块可以识别第一应用的页面并得到对应的界面识别结果。不限于此，界面解析模块可以识别用户选择的应用的页面等，本申请对确定用户界面中需识别的信息的方式不作限定。

电子设备100的意图解析模块可以基于界面识别结果进行意图识别，并得到意图信息，其中，意图信息可以是对电子设备100显示的用户界面进行界面识别和意图识别得到的特定的数据，意图信息例如是xml格式的数据、json格式的数据或其他已有格式的数据，不限于此，还可以是自定义格式的数据等。在一些实施例中，从用户角度而言，意图信息指示的是需达成的目标，可选地，意图信息指示实现的业务对应电子设备100显示的用户界面中的部分业务信息。在一些实施例中，界面识别结果包括第一结构信息和第一文本信息，意图解析模块可以识别第一结构信息并确定第一结构信息指示的界面结构，然后基于第一文本信息和确定的界面结构得到意图信息。例如，意图解析模块识别出位置卡片的界面结构和文本框的界面结构，基于位置卡片的界面结构确定位置卡片包括的文本信息“北京站”的类型为地址信息，基于文本框的界面结构确定文本框包括的文本信息“这里见”的类型为聊天信息，基于地址信息“北京站”和聊天信息“这里见”得到指示导航至地理位置“北京站”的意图信息。意图解析模块可以向意图触发模块发送意图信息。

在一些实施例中，意图解析模块可以进一步判断意图信息是否有效，在确认意图信息有效的情况下，意图解析模块才会向意图触发模块发送意图信息。例如，意图信息指示导航至地理位置“北京站”时，判断意图信息中的地址信息“北京站”是否对应地图中真实有效的地理位置，若判断结果为是意图解析模块才会向意图触发模块发送该意图信息。又例如，意图信息指示播放名称为“影片1”的影片时，判断意图信息中的视频信息“影片1”是否对应真实可被播放的视频，若判断结果为是意图解析模块才会向意图触发模块发送该意图信息。

电子设备100的意图触发模块可以基于意图信息执行意图操作，在一些实施例中，意图触发模块可以对意图信息进行解析得到特定的指令，并调用该指令来执行意图操作。在一些实施例中，从用户角度而言，意图信息指示的是需达成的目标，意图操作可以对应用户需达成该目标所需执行的用户操作，也就是说，用户执行多个用户操作才能控制电子设备100执行意图操作。在一些实施例中，意图触发模块可以调用相应的业务模块来执行意图操作，例如，意图信息指示导航至地理位置“北京站”时，意图触发模块可以调用地图应用的导航模块来执行意图操作：将目的地设置为地理位置“北京站”并进行导航。意图触发模块执行意图操作后可以将对应的多媒体数据(例如导航业务对应的音频流和视频流)发送给电子设备200的输出模块。

电子设备200的输出模块接收到电子设备100的意图触发模块发送的多媒体数据后，可以输出该多媒体数据，例如播放导航业务对应的音频流，显示导航业务对应的视频流。

在一些实施例中，电子设备100的界面解析模块可以包括界面解析模型，通过界面解析模型来识别显示的用户界面并得到界面识别结果。可选地，界面解析模块可以将电子设备100显示的用户界面的内容作为界面解析模型的输入，得到输出的界面识别结果，例如，将包括文本形式的地址信息的界面内容作为输入，得到输出的文本结构和/或该地址信息，或者将包括卡片形式的地址信息(例如上述位置卡片)的界面内容作为输入，得到输出的卡片结构和/或该地址信息。

在一些实施例中，电子设备100的意图解析模块可以包括意图解析模型，通过意图解析模块进行意图识别。可选地，意图解析模块可以将界面识别结果作为意图解析模型的输入，得到输出的意图信息。

不限于上述示例的情况，电子设备100的界面解析模块和意图解析模块可以设置于同一个融合模块中，融合模块可以包括融合模型，通过融合模型来基于显示的用户界面确定出意图信息。可选地，融合模块可以将显示的界面内容作为融合模型的输入，得到输出的意图信息。例如，将包括地址信息的界面内容作为融合模型的输入，得到输出的意图信息，该意图信息指示针对该地址信息表征的地点进行导航。

在一些实施例中，电子设备100可以自行训练界面解析模型和/或意图解析模型，或者电子设备100可以自行训练融合模型。在另一些实施例中，通信系统10中的网络设备300可以训练界面解析模块和/或意图解析模型并发送给电子设备100，或者网络设备300可以训练融合模型并发送给电子设备100。本申请对网络设备300向电子设备100发送界面解析模块和/或意图解析模型，或者融合模型的方式不作限定，例如，电子设备100可以在接收到用户操作后，向网络设备300发送请求消息，以请求获取上述模型，又例如，网络设备300可以每隔预设时长向电子设备100发送上述模型，如每周发送一次，又例如，模型的版本更新时网络设备300可以向电子设备100发送版本更新后的模型。

在一些实施例中，电子设备100或者网络设备300可以将用户界面的内容作为输入，将该用户界面包括的结构和文本作为输入，来训练界面解析模型，输入和输出的示例和上述通过界面解析模型来识别显示的用户界面的示例类似，不再赘述。

在一些实施例中，电子设备100或者网络设备300可以将界面识别结果作为输入，将对应的意图操作和/或意图信息作为输出，来训练意图解析模型。

在一些实施例中，电子设备100或者网络设备300可以将用户界面的内容作为输入，将对应的意图操作和/或意图信息作为输出，来训练融合模型。例如，将包括地址信息的用户界面的内容作为输入，将意图操作(即将该地址信息表征的地点设置为目的地并进行导航)作为输出，来训练融合模型。将不包括地址信息的用户界面的内容作为输入，将对应的用户操作(如电子设备100显示该用户界面时用户执行的操作)作为输出，来训练融合模型，不限于此，也可以将不包括地址信息的用户界面的内容作为输入，将指示无导航意图的信息作为输出，来训练融合模型。

不限于此图1B示例的情况，在另一些实施例中，界面解析模块、意图解析模块和意图触发模块中至少一个模块可以不是电子设备100包括的模块，而是电子设备200包括的模块，例如，意图触发模块是电子设备200包括的模块，具体示例可参见图1C，如图1C所示，电子设备200的意图触发模块接收到电子设备100的意图解析模块发送的意图信息后，可以基于意图信息执行意图操作，并且将执行意图操作对应的多媒体数据发送至输出模块，由输出模块输出该多媒体数据，其他描述和图1B类似，不再赘述。

下面介绍本申请实施例涉及的电子设备100、电子设备200和网络设备300。

图2A示例性示出了电子设备100的硬件结构示意图。

下面以电子设备100为例对实施例进行具体说明。应该理解的是，图2A所示的电子设备100仅是一个范例，并且电子设备100可以具有比图2A中所示的更多的或者更少的部件，可以组合两个或多个的部件，或者可以具有不同的部件配置。图2A中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

如图2A所示，电子设备100可以包括处理器110，外部存储器接口120，内部存储器121，通用串行总线(universal serial bus，USB)接口130，充电管理模块140，电源管理模块141，电池142，天线1，天线2，移动通信模块150，无线通信模块160，音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，传感器模块180，按键190，马达191，指示器192，摄像头193，显示屏194，以及用户标识模块(subscriber identification module，SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A，陀螺仪传感器180B，气压传感器180C，磁传感器180D，加速度传感器180E，距离传感器180F，接近光传感器180G，指纹传感器180H，温度传感器180J，触摸传感器180K，环境光传感器180L，骨传导传感器180M等。

可以理解的是，本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中，电子设备100可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。

处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。

控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。

处理器110中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器110的等待时间，因而提高了系统的效率。

在一些实施例中，处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit，I2C)接口，集成电路内置音频(inter-integrated circuitsound，I2S)接口，脉冲编码调制(pulse code modulation，PCM)接口，通用异步收发传输器(universal asynchronous receiver/transmitter，UART)接口，移动产业处理器接口(mobile industry processor interface，MIPI)，通用输入输出(general-purposeinput/output，GPIO)接口，用户标识模块(subscriber identity module，SIM)接口，和/或通用串行总线(universal serial bus，USB)接口等。

I2C接口是一种双向同步串行总线，包括一根串行数据线(serial data line，SDA)和一根串行时钟线(derail clock line，SCL)。在一些实施例中，处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K，充电器，闪光灯，摄像头193等。例如：处理器110可以通过I2C接口耦合触摸传感器180K，使处理器110与触摸传感器180K通过I2C总线接口通信，实现电子设备100的触摸功能。

MIPI接口可以被用于连接处理器110与显示屏194，摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface，CSI)，显示屏串行接口(displayserial interface，DSI)等。在一些实施例中，处理器110和摄像头193通过CSI接口通信，实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信，实现电子设备100的显示功能。

可以理解的是，本发明实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对电子设备100的结构限定。在本申请另一些实施例中，电子设备100也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。

充电管理模块140用于从充电器接收充电输入。

电源管理模块141用于连接电池142，充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入，为处理器110，内部存储器121，显示屏194，摄像头193，和无线通信模块160等供电。

电子设备100的无线通信功能可以通过天线1，天线2，移动通信模块150，无线通信模块160，调制解调处理器以及基带处理器等实现。

天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。

移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(low noise amplifier，LNA)等。移动通信模块150可以由天线1接收电磁波，并对接收的电磁波进行滤波，放大等处理，传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。在一些实施例中，移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中，移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。

调制解调处理器可以包括调制器和解调器。其中，调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后，被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A，受话器170B等)输出声音信号，或通过显示屏194显示图像或视频。在一些实施例中，调制解调处理器可以是独立的器件。在另一些实施例中，调制解调处理器可以独立于处理器110，与移动通信模块150或其他功能模块设置在同一个器件中。

无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks，WLAN)(如无线保真(wireless fidelity，Wi-Fi)网络)，蓝牙(bluetooth，BT)，全球导航卫星系统(global navigation satellite system，GNSS)，调频(frequency modulation，FM)，近距离无线通信技术(near field communication，NFC)，红外技术(infrared，IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。

在一些实施例中，电子设备100的天线1和移动通信模块150耦合，天线2和无线通信模块160耦合，使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications，GSM)，通用分组无线服务(general packet radio service，GPRS)，码分多址接入(codedivision multiple access，CDMA)，宽带码分多址(wideband code division multipleaccess，WCDMA)，时分码分多址(time-division code division multiple access，TD-SCDMA)，长期演进(long term evolution，LTE)，BT，GNSS，WLAN，NFC，FM，和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system，GPS)，全球导航卫星系统(global navigation satellite system，GLONASS)，北斗卫星导航系统(beidounavigation satellite system，BDS)，准天顶卫星系统(quasi-zenith satellitesystem，QZSS)和/或星基增强系统(satellite based augmentation systems，SBAS)。

电子设备100通过GPU，显示屏194，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏194和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器110可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。

显示屏194用于显示图像，视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display，LCD)，有机发光二极管(organic light-emittingdiode，OLED)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的，AMOLED)，柔性发光二极管(flex light-emittingdiode，FLED)，Miniled，MicroLed，Micro-oLed，量子点发光二极管(quantum dot lightemitting diodes，QLED)等。在一些实施例中，电子设备100可以包括1个或N个显示屏194，N为大于1的正整数。

电子设备100可以通过ISP，摄像头193，视频编解码器，GPU，显示屏194以及应用处理器等实现拍摄功能。

ISP用于处理摄像头193反馈的数据。例如，拍照时，打开快门，光线通过镜头被传递到摄像头感光元件上，光信号转换为电信号，摄像头感光元件将所述电信号传递给ISP处理，转化为肉眼可见的图像。ISP还可以对图像的噪点，亮度，肤色进行算法优化。ISP还可以对拍摄场景的曝光，色温等参数优化。在一些实施例中，ISP可以设置在摄像头193中。

摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB，YUV等格式的图像信号。在一些实施例中，电子设备100可以包括1个或N个摄像头193，N为大于1的正整数。

数字信号处理器用于处理数字信号，除了可以处理数字图像信号，还可以处理其他数字信号。

视频编解码器用于对数字视频压缩或解压缩。

NPU为神经网络(neural-network，NN)计算处理器，通过借鉴生物神经网络结构，例如借鉴人脑神经元之间传递模式，对输入信息快速处理，还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用，例如：图像识别，人脸识别，语音识别，文本理解等。

外部存储器接口120可以用于连接外部存储卡，例如Micro SD卡，实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。

内部存储器121可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器121可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flash storage，UFS)等。处理器110通过运行存储在内部存储器121的指令，和/或存储在设置于处理器中的存储器的指令，执行电子设备100的各种功能应用以及数据处理。

电子设备100可以通过音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，以及应用处理器等实现音频功能。例如音乐播放，录音等。

音频模块170用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。

扬声器170A，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐，或收听免提通话。

受话器170B，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时，可以通过将受话器170B靠近人耳接听语音。

麦克风170C，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风170C发声，将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。

耳机接口170D用于连接有线耳机。

压力传感器180A用于感受压力信号，可以将压力信号转换成电信号。在一些实施例中，压力传感器180A可以设置于显示屏194。当有触摸操作作用于显示屏194，电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。

陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中，可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即，x，y和z轴)的角速度。陀螺仪传感器180B还可以用于拍摄防抖、导航，体感游戏场景。

气压传感器180C用于测量气压。在一些实施例中，电子设备100通过气压传感器180C测得的气压值计算海拔高度，辅助定位和导航。

磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。

加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态，应用于横竖屏切换，计步器等应用。

距离传感器180F，用于测量距离。电子设备100可以通过红外或激光测量距离。

环境光传感器180L用于感知环境光亮度。

指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁，访问应用锁，指纹拍照，指纹接听来电等。

温度传感器180J用于检测温度。

触摸传感器180K，也称“触控器件”。触摸传感器180K可以设置于显示屏194，由触摸传感器180K与显示屏194组成触摸屏，也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器，以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中，触摸传感器180K也可以设置于电子设备100的表面，与显示屏194所处的位置不同。

骨传导传感器180M可以获取振动信号。

按键190包括开机键，音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入，产生与电子设备100的用户设置以及功能控制有关的键信号输入。

马达191可以产生振动提示。

指示器192可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示消息，未接来电，通知等。

SIM卡接口195用于连接SIM卡。

在一些实施例中，电子设备100可以通过传感器模块180检测用户操作，处理器110可以响应于该用户操作，基于显示屏194显示的用户界面进行意图识别，基于识别出的意图信息通过移动通信模块150和/或无线通信模块向电子设备200发送指示信息，电子设备200接收到指示信息后可以输出意图信息对应的多媒体数据，例如显示导航意图对应的导航界面。

例如，电子设备100通过压力传感器180A和/或触摸传感器180K检测用户作用于电子设备100的触摸操作，如指关节敲击显示屏194，指关节、双指或三指在显示屏194上滑动等。又例如，电子设备100通过陀螺仪传感器180B和/或加速度传感器180E检测用户的摇一摇操作、甩手操作。又例如，电子设备100通过摄像头193检测用户的手势操作，本申请对检测用户操作的模块不作限定。

图2B示例性示出了电子设备200的硬件结构示意图。

下面以电子设备200为例对实施例进行具体说明。应该理解的是，图2B所示的电子设备200仅是一个范例，并且电子设备200可以具有比图2B中所示的更多或更少的部件，可以组合两个或多个的部件，或者可以具有不同的部件配置。

如图2B所示，电子设备200可以包括处理器201、存储器202、无线通信模块203、天线204和显示屏205。可选地，电子设备200还可以包括有线通信模块(未示出)。其中：

处理器201可用于读取和执行计算机可读指令。具体实现中，处理器201可主要包括控制器、运算器和寄存器。其中，控制器主要负责指令译码，并为指令对应的操作发出控制信号。运算器主要负责保存指令执行过程中临时存放的寄存器操作数和中间操作结果等。具体实现中，处理器201的硬件架构可以是专用集成电路(ASIC)架构、MIPS架构、ARM架构或者NP架构等等。在一些实施例中，处理器201还可用于生成无线通信模块203向外发送的信号，如蓝牙广播信号、信标信号。

存储器202与处理器201耦合，用于存储各种软件程序和/或多组指令。具体实现中，存储器202可包括高速随机存取的存储器，并且也可包括非易失性存储器，例如一个或多个磁盘存储设备、闪存设备或其他非易失性固态存储设备。存储器202可以存储操作系统，例如uCOS，VxWorks、RTLinux等嵌入式操作系统。存储器202还可以存储通信程序，该通信程序可用于与电子设备100，或其他设备进行通信。

无线通信模块203可以包括WLAN通信模块203A、蓝牙通信模块203B中的一项或多项。可选地，蓝牙通信模块203B可以与其他通信模块(例如，WLAN通信模块203A)集成为一体。

在一些实施例中，WLAN通信模块203A、蓝牙通信模块203B中的一项或多项可以监听到其他设备发射的信号，如测量信号、扫描信号等等，并可以发送响应信号，如测量响应、扫描响应等，使得其他设备可以发现电子设备200，并通过蓝牙、WLAN中的一种或多种或其他近距离无线通信技术与其他设备建立无线通信连接，来进行数据传输。

在另一些实施例中，WLAN通信模块203A中可以发射信号，如广播探测信号、信标信号，使得路由器可以发现电子设备200，并通过WLAN与路由器建立无线通信连接，来连接上电子设备100、网络设备300。

有线通信模块(未示出)，可用用于通过网线与路由器等设备建立连接，并通过路由器连接上电子设备100、网络设备300。

天线204可用于发射和接收电磁波信号。不同通信模块的天线可以复用，也可以相互独立，以提高天线的利用率。例如：可以将蓝牙通信模块203B的天线复用为WLAN通信模块203A的天线。

显示屏205可用于显示图像、视频等。显示屏205包括显示面板。显示面板可以采用液晶显示屏，有机发光二极管，有源矩阵有机发光二极体或主动矩阵有机发光二极体，柔性发光二极管，量子点发光二极管等。在一些实施例中，电子设备200可以包括1个或N个显示屏205，N为大于1的正整数。

在一些实施例中，电子设备200还可以包括传感器，具体示例可参见上图2A所示的传感器模块180，不再赘述。

在一些实施例中，电子设备200可以通过无线通信模块203和/或有线通信模块(未示出)接收电子设备100发送的指示信息，处理器201可以基于该指示信息通过显示屏205显示意图信息对应的用户界面，例如显示导航意图对应的导航界面。

图2C示例性示出了网络设备300的硬件结构示意图。

如图2C所示，网络设备300可以包括一个或多个处理器301、通信接口302、存储器303，其中处理器301、通信接口302、存储器303可通过总线或者其它方式连接，本申请实施例以通过总线304连接为例。其中：

处理器301可以由一个或者多个通用处理器构成，例如CPU。处理器301可用于运行设备控制方法的相关的程序代码。

通信接口302可以为有线接口(例如以太网接口)或无线接口(例如蜂窝网络接口或使用无线局域网接口)，用于与其他节点进行通信。本申请实施例中，通信接口302具体可用于与电子设备100、电子设备200进行通信。

存储器303可以包括易失性存储器(volatile memory)，例如RAM；存储器也可以包括非易失性存储器(non-vlatile memory)，例如ROM、快闪存储器(flash memory)、HDD或固态硬盘SSD。存储器303还可以包括上述种类的存储器的组合。存储器303可用于存储一组程序代码，以便于处理器301调用存储器303中存储的程序代码以实现本申请实施例的在服务器的实现方法。在本申请实施例中，存储器303还可以是存储阵列，等等。

在一些实施例中，网络设备300可以包括多个服务器，例如，网页服务器、后台服务器、下载服务器等，这多个服务器的硬件结构都可参照图2C所示的网络设备300的硬件结构。

需要说明的，图2C所示的网络设备300仅仅是本申请实施例的一种实现方式，实际应用中，网络设备300还可以包括更多或更少的部件，这里不作限制。

电子设备100的软件系统可以采用分层架构，事件驱动架构，微核架构，微服务架构，或云架构。例如，分层架构的软件系统可以是安卓(Android)系统，也可以是华为移动服务(huawei mobile services，HMS)系统，或其它软件系统。本申请实施例以分层架构的Android系统为例，示例性说明电子设备100的软件结构。

图2D示例性示出一种电子设备100的软件架构示意图。

分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Android系统分为四层，从上至下分别为应用程序层，应用程序框架层，安卓运行时(Android runtime)和系统库，以及内核层。

应用程序层可以包括一系列应用程序包。

如图2D所示，应用程序包可以包括相机、地图、HiCar、音乐、聊天应用、娱乐应用、家居应用、学习应用等应用程序。

应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。

如图2D所示，应用程序框架层可以包括窗口管理器，内容提供器，视图系统，电话管理器，资源管理器，通知管理器，意图流转服务等。

窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕等。

内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。所述数据可以包括视频，图像，音频，拨打和接听的电话，浏览历史和书签，电话簿等。

视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。

电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通，挂断等)。

资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。

通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。

意图流转服务可以基于应用程序层的应用程序进行意图识别，在一些实施例中，意图流转服务可以基于电子设备100显示的应用程序的用户界面进行意图识别。电子设备100可以通过电子设备200实现识别出的意图，在一种情况下，可以将电子设备100上用于实现意图的业务流转到电子设备200上，在另一种情况下，电子设备100可以将识别出的意图发送到电子设备200上，由电子设备200实现。

在一些实施例中，意图流转服务可以为应用程序层的系统应用提供服务，以实现对应用程序层的第三方应用进行意图识别。例如，系统应用为HiCar应用，第三方应用为地图应用、聊天应用、娱乐应用、家居应用、学习应用等。

不限于此，在另一些实施例中，意图流转服务可以为应用程序层的应用内置的服务，例如该应用对应的服务器(简称应用服务器)可以为该应用提供意图流转服务。电子设备100接收到用户操作时可以向上述应用服务器发送当前显示的用户界面的内容，应用服务器基于界面内容进行意图识别，并将识别出的意图信息发送给电子设备100，电子设备100通过电子设备200实现该意图信息。

在一些实施例中，意图流转服务可以对应图1B所示的意图解析模块，可选地以及页面解析模块，可选地以及意图触发模块，具体可参见图1B的描述，不再赘述。

在一些实施例中，应用程序层的应用程序可以对应图1B所示的意图触发模块。在一些实施例中，应用程序层的应用程序可以对应图1B所示的显示模块。

Android runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。

核心库包含两部分：一部分是java语言需要调用的功能函数，另一部分是安卓的核心库。

应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理，堆栈管理，线程管理，安全和异常的管理，以及垃圾回收等功能。

系统库可以包括多个功能模块。例如：表面管理器(surface manager)，媒体库(Media Libraries)，三维图形处理库(例如：OpenGL ES)，2D图形引擎(例如：SGL)等。

表面管理器用于对显示子系统进行管理，并且为多个应用程序提供了2D和3D图层的融合。

媒体库支持多种常用的音频，视频格式回放和录制，以及静态图像文件等。媒体库可以支持多种音视频编码格式，例如:MPEG4，H.264，MP3，AAC，AMR，JPG，PNG等。

三维图形处理库用于实现三维图形绘图，图像渲染，合成，和图层处理等。

2D图形引擎是2D绘图的绘图引擎。

内核层是硬件和软件之间的层。内核层至少包含显示驱动，摄像头驱动，音频驱动，传感器驱动。在一些实施例中，传感器驱动可以对应图1B所示的检测模块。

下面结合导航场景，示例性说明电子设备100软件以及硬件的工作流程。

假设显示屏194显示聊天应用的用户界面，且该用户界面用于显示地点1的地址信息。当触摸传感器180K接收到触摸操作，相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标，触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件，识别该输入事件所对应的控件。以该触摸操作是触摸单击操作，该单击操作所对应的控件为导航控件为例，地图应用调用应用框架层的接口，启动地图应用，进而通过调用内核层启动显示驱动，通过显示屏194显示导航界面，该导航界面中的目的地为上述地点1。

电子设备200的软件架构和电子设备100的软件架构类似，具体示例可参见图2D。

下面结合应用场景介绍本申请实施例中涉及的显示方法。

场景1：电子设备100为智能手机，电子设备200为车载电脑。电子设备100显示包括地址信息的用户界面时，若接收到用户操作(如摇一摇操作)，可以执行意图操作：将该地址信息表征的地点设置为目的地并进行导航，并将执行意图操作对应的音频流和视频流(简称音视频流)发送给电子设备200输出。这样，用户无需手动在电子设备200上的地图应用中输入该地址信息并操作导航控件，即无需用户手动触发执行意图操作，交互更加高效便捷。

图3A-图3C示例性示出了一种应用场景(如上述场景1)下的用户界面实施例。

如图3A的上图所示，电子设备100可以显示聊天应用的用户界面310，用户界面310可以包括会话名称311和聊天窗口312。假设当前会话为双人对话，则会话名称311可以包括聊天对象的名称“小王”，不限于此，若当前会话为多人会话时，会话名称311可以包括当前会话的名称，例如群名。聊天窗口312可以用于显示当前会话的聊天记录，例如聊天对象发送的消息3121和消息3122，消息3121包括文本“这里见”，消息3122包括地点名称3122A(包括文本“北京站”)，以及“北京站”的位置信息3122B(包括文本“北京市东城区毛家湾胡同甲13号”)，消息3122为表征地理位置“北京站”的位置卡片。

如图3A的上图所示，电子设备100可以和电子设备200连接，例如通过HUAWEIHiCar功能连接。电子设备200可以显示桌面320，桌面320可以包括一个或多个应用图标，例如，地图应用图标、通话应用图标、音乐应用图标、收音机应用图标、行车记录仪应用图标和设置应用图标等。桌面320还可以包括主菜单控件，主菜单控件可以用于返回到桌面320。

如图3A的上图所示，电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面310，在一些实施例中，电子设备100识别消息3122得到地理位置“北京站”的位置信息，并基于此确定意图信息：针对地理位置“北京站”进行导航，可选地，电子设备100还可以结合消息3121确定用户想要前往地理位置“北京站”，并基于此确定上述意图信息。可选地，可以理解为是该意图信息对应导航业务，也可以理解为是该意图信息对应消息3122(位置卡片)。电子设备100可以基于得到的意图信息执行该意图信息对应的意图操作：将目的地设置为地理位置“北京站”的位置信息并进行导航，然后将执行该意图操作对应的音视频流发送给电子设备200输出，具体可参见图3A的下图。可选地，可以理解为是该意图操作用于实现导航业务，也可以理解为是该意图操作对应消息3122(位置卡片)。

如图3A的下图所示，电子设备200可以显示地图应用的用户界面330，用户界面330用于显示导航业务的相关信息。用户界面330可以包括地图窗口331、路线窗口332和提示框333。其中：

地图窗口331用于在地图上展示被选择的导航线路的示意图。

路线窗口332包括导航信息332A、线路332B、线路332C和导航控件332D。导航信息332A包括文本“去北京市东城区毛家…”，用于表征导航的目的地的位置信息，导航信息332A仅示出目的地的部分位置信息，电子设备200可以响应于作用于导航信息332A的触摸操作(例如点击操作)，显示目的地的全部位置信息。线路332B和线路332C可以表征两条导航线路，相比线路332C，线路332B被突出显示(例如线路332B的文本加粗、高亮，但线路332C的文本未加粗、未高亮等)，表征当前选择的导航线路为线路332B指示的导航线路，此时地图窗口331用于在地图上展示线路332B指示的导航线路的示意图。电子设备200可以响应于作用于线路332C的触摸操作(例如点击操作)，取消突出显示线路332B，突出显示线路332C，此时选择的导航线路为线路332C指示的导航线路，地图窗口331会在地图上展示线路332C指示的导航线路的示意图。导航控件332D可以用于开启导航功能，电子设备200可以响应于作用于导航控件332D的触摸操作(例如点击操作)，基于当前选择的线路(用户界面330中是线路332B指示的导航线路)进行导航。

提示框333用于提示当前进行的导航业务的信息。提示框333包括文本“正在为您导航到与小王的聊天中的北京市东城区毛家湾胡同甲13号”，可以指示：该导航业务的目的地的详细位置信息，该导航业务是在聊天应用中和聊天对象“小王”的聊天会话触发的，该目的地的详细位置信息是从该聊天会话获取到的。

图3A所示示例中，电子设备100显示的用户界面310包括的地址信息(即消息3122)为卡片形式的，不限于此，在另一些示例中，还可以是文本形式的地址信息，具体示例可参见下图3B，本申请对此不作限定。

如图3B所示，电子设备100可以显示聊天应用的用户界面340，用户界面340和图3A的上图所示的用户界面310类似，区别在于当前会话的聊天记录不同，用户界面340可以包括消息341和消息342，消息341包括文本“在哪里见”，消息342包括文本“到北京站见”。电子设备100可以和电子设备200连接，电子设备200可以显示图3A的上图所示的桌面320。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面340，在一些实施例中，电子设备100识别消息342得到用户想要前往地理位置“北京站”，并基于此确定意图信息：针对地理位置“北京站”进行导航。可选地，可以理解为是该意图信息对应消息342。电子设备100可以基于得到的意图信息执行该意图信息对应的意图操作：将目的地设置为地理位置“北京站”的位置信息并进行导航，然后将执行该意图操作对应的音视频流发送给电子设备200输出，具体可参见图3A的下图，可选地，可以理解为是该意图操作对应消息342。

以上示例中，电子设备100显示的地址信息为聊天消息形式的(即用户界面310中的消息3122，用户界面340中的消息342)，不限于此，在另一些示例中，还可以显示在地点介绍中，具体示例可参见下图3C，本申请对此不作限定。

如图3C所示，电子设备100可以显示娱乐应用的用户界面350。用户界面350包括地点名称351和位置控件352。地点名称351包括文本“首都博物馆”，为用户界面350显示的地点的名称，位置控件352包括文本“西城区复兴门外大街16号”，为用户界面350显示的地点的位置信息，可以表征地点“首都博物馆”的地址信息。电子设备100可以和电子设备200连接，电子设备200可以显示图3A的上图所示的桌面320。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面350得到名称为“首都博物馆”的地点的位置信息，并基于此确定意图信息：针对地点“首都博物馆”进行导航。可选地，可以理解为是该意图信息对应位置控件352。电子设备100可以基于得到的意图信息向电子设备200发送指示信息，电子设备200可以基于指示信息执行该意图信息对应的意图操作：将目的地设置为地点“首都博物馆”的位置信息并进行导航，具体示例和图3A的下图类似，区别在于目的地不同，因此导航线路也不同，可选地，可以理解为是该意图操作对应位置控件352。

图3A-图3B所示实施例中，电子设备100自行执行意图信息对应的意图操作，然后将执行该意图操作对应的音视频流发送给电子设备200输出，可以理解为是将电子设备100的内容投屏到电子设备200上输出，实际触发的是电子设备100上的业务。图3C所示实施例中，电子设备100指示电子设备200执行意图信息对应的意图操作，实际触发的是电子设备200上的业务。不限于此，在具体实现中，图3A-图3B所示实施例触发的也可以是电子设备200上的业务，图3C所示实施例触发的也可以是电子设备100上的业务。以下实施例以触发电子设备200上的业务为例进行说明，但具体实现中不作限定。

在一种可能的实现方式中，电子设备100确定的意图信息对应的业务类型，和电子设备100连接的电子设备200的设备类型有关。

场景2：电子设备100为智能手机，电子设备100显示包括地址信息和视频信息的用户界面时，接收到用户操作(如摇一摇操作)。若电子设备100连接的电子设备200为车载电脑，则电子设备100响应于该用户操作，向电子设备200发送指示信息，电子设备200可以基于该指示信息执行导航业务对应的意图操作：将上述地址信息表征的地点设置为目的地并进行导航，具体示例可参见图4A。若电子设备100连接的电子设备200为智能电视，则电子设备100响应于该用户操作，向电子设备200发送指示信息，电子设备200可以基于该指示信息执行视频业务对应的意图操作：播放上述视频信息表征的视频，具体示例可参见图4B。这样更加符合实际应用场景下用户的需求，进一步提升交互的精准性。

图4A-图4B示例性示出又一种应用场景(如上述场景2)下的用户界面实施例。

如图4A的上图所示，电子设备100可以显示聊天应用的用户界面410，用户界面410和图3A的上图所示的用户界面310类似，区别在于当前会话的聊天记录不同，用户界面410可以包括消息411、消息412、消息413和消息414。其中，消息411和消息412分别为图3A的上图所示的用户界面310中的消息3121和消息3122，不再赘述。消息413包括文本“看这个”，消息414为以卡片形式展示视频的消息，消息414包括文本“我的一天”，为展示的视频的名称。电子设备100可以和电子设备200(车载电脑)连接，电子设备200(车载电脑)可以显示图3A的上图所示的桌面320。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面410，在一些实施例中，电子设备100识别用户界面410得到消息412对应导航业务和消息414对应视频业务，电子设备100可以根据连接设备的设备类型(车载电脑)确定对应的导航业务，例如预设有车载电脑和导航业务的对应关系，因此电子设备100识别消息412并确定出导航业务对应的意图信息：针对地理位置“北京站”进行导航。电子设备100可以基于得到的意图信息向电子设备200(车载电脑)发送指示信息，电子设备200(车载电脑)可以基于指示信息执行该意图信息对应的意图操作：将目的地设置为地理位置“北京站”的位置信息并进行导航，具体可参见图4A的下图，图4A的下图中电子设备200显示的用户界面和图3A的下图中电子设备200显示的用户界面一致。

如图4B的上图所示，电子设备100可以显示图4A的上图所示的用户界面410。电子设备100可以和电子设备200(智能电视)连接，电子设备200(智能电视)可以显示桌面420，桌面420可以包括一个或多个分类，例如电视剧分类、电影分类、动画分类、少儿分类和游戏分类等。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面410，在一些实施例中，电子设备100识别用户界面410得到消息412对应导航业务和消息414对应视频业务，电子设备100可以根据连接设备的设备类型(智能电视)确定对应的视频业务，例如预设有智能电视和视频业务的对应关系，因此电子设备100识别消息414并确定出视频业务对应的意图信息：播放名称为“我的一天”的视频。电子设备100可以基于得到的意图信息向电子设备200(智能电视)发送指示信息，电子设备200(智能电视)可以基于指示信息执行该意图信息对应的意图操作：播放名称为“我的一天”的视频，具体可参见图4B的下图。如图4B的下图所示，电子设备200可以显示用户界面430，用户界面430包括标题431，标题431包括文本“我的一天”，为当前播放视频的名称。

不限于上述示例的情况，在另一些示例场景中，可以由用户自行选择待识别的业务信息，根据用户选择确定意图信息对应的业务类型，具体示例可参见下图4C。

如图4C的左图所示，电子设备100可以显示图4A的上图所示的用户界面410。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，显示图4C的右图所示的用户界面440。

如图4C的右图所示，用户界面440可以包括提示信息441、提示框442和提示框443，提示信息441包括文本“请选择需流转的业务”，用于提示用户选择待识别的业务信息。

提示框442包括业务名称442A和业务信息442B，业务名称442A包括文本“地图导航”，业务信息442B为图4C的左图所示的用户界面410中的消息412。电子设备100可以响应于作用于提示框442的触摸操作(如点击操作)，确定待识别的业务信息为用户界面410中的消息412，并识别消息412以得到导航业务对应的意图信息：针对地理位置“北京站”进行导航。电子设备100可以基于得到的意图信息向连接的电子设备200发送指示信息，电子设备200可以基于指示信息执行该意图信息对应的意图操作，电子设备200接收到指示信息前后的界面示例分别可参见图4A的上图所示的用户界面320、图4A的下图所示的用户界面330。

提示框443包括业务名称443A和业务信息443B，业务名称443A包括文本“播放视频”，业务信息443B为图4C的左图所示的用户界面410中的消息414。电子设备100可以响应于作用于提示框443的触摸操作(如点击操作)，确定待识别的业务信息为用户界面410中的消息414，并识别消息414以得到视频业务对应的意图信息：播放名称为“我的一天”的视频。电子设备100可以基于得到的意图信息向连接的电子设备200发送指示信息，电子设备200可以基于指示信息执行该意图信息对应的意图操作，电子设备200接收到指示信息前后的界面示例可参见图4B的上图所示的用户界面420、图4B的下图所示的用户界面430。

场景3：电子设备100为智能手机，电子设备200为智能电视。电子设备100显示包括视频信息的用户界面时，若接收到用户操作(如摇一摇操作)，可以向电子设备200发送指示信息。电子设备200可以基于该指示信息执行意图操作：播放该视频信息表征的视频。这样无需用户手动触发执行意图操作，交互更加高效便捷。

图5示例性示出又一种应用场景(如上述场景3)下的用户界面实施例。

如图5的上图所示，电子设备100可以显示娱乐应用的用户界面510，用户界面510包括名称521，名称521包括文本“影片1”，为用户界面510显示的影片的名称，用户界面510用于显示“影片1”的详细信息，例如相关视频、剧照和影评等。电子设备100可以和电子设备200连接，电子设备200可以显示图4B的上图所示的桌面420，桌面420还包括查找控件421，查找控件421用于实现查找功能，用户可以基于查找功能输入想要查看的视频并进行播放。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面510得到名称为“影片1”的影片的信息，并基于此确定意图信息：播放名称为“影片1”的影片。电子设备100可以基于得到的意图信息向电子设备200发送指示信息，电子设备200可以基于指示信息执行该意图信息对应的意图操作：播放名称为“影片1”的影片，具体可参见图5的下图。

如图5的下图所示，电子设备200可以显示用户界面520，用户界面520包括标题521，标题521包括文本“影片1”，为当前播放视频的名称。在一种情况下，电子设备100可以通过视频应用获取到“影片1”的视频流，并将视频流持续发送给电子设备200进行播放，可以理解为是将电子设备100上的视频投屏到电子设备200上播放，这样，用户无需打开电子设备100(智能手机)上的视频应用和该视频的播放界面，操作投屏控件以及选择要投屏的设备(智能电视)。在另一种情况下，电子设备200接收到指示信息后，查找该视频并进行播放，可以理解为是播放电子设备200上的视频，这样，用户无需在电子设备200(智能电视)上查找该视频(例如通过图5的上图所示的用户界面420中的查找控件421实现)。因此简化了用户操作，交互效率大大提升。

图5所示示例中，电子设备100显示的视频信息显示在影片介绍中，不限于此，在另一些示例中，视频信息还可以为聊天消息形式的，例如图4B所示的用户界面410中的消息414，具体场景示例可参见图4B，本申请对此不作限定。

场景4：电子设备100为智能手机，电子设备200为智能料理机。电子设备100显示包括菜谱信息的用户界面时，若接收到用户操作(如摇一摇操作)，可以向电子设备200发送指示信息。电子设备200可以基于该指示信息执行意图操作：按照该菜谱信息进行工作。这样，用户无需在智能料理机上搜索该菜谱以进行烹饪，即无需用户手动触发执行意图操作，交互更加高效便捷。

图6示例性示出又一种应用场景(如上述场景4)下的用户界面实施例。

如图6的上图所示，电子设备100可以显示家居应用的用户界面610，用户界面610包括标题611，标题611包括文本“脆皮五花肉”，为用户界面610显示的菜谱的名称。用户界面610用于显示名称为“脆皮五花肉”的菜谱的详细信息，例如食材信息612和制作步骤613。电子设备100可以和电子设备200连接，电子设备200可以显示首页620，首页620可以包括一个或多个分类，例如每日菜谱分类、中式分类和西式分类等。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面610得到名称为“脆皮五花肉”的菜谱的信息，并基于此确定意图信息：烹饪该菜谱对应的菜肴。电子设备100可以基于得到的意图信息向电子设备200发送指示信息，电子设备200可以基于指示信息执行该意图信息对应的意图操作：按照该菜谱进行工作，具体可参见图6的下图。

如图6的下图所示，电子设备200可以显示用户界面630，用户界面630包括标题631和步骤信息632。标题631包括文本“脆皮五花肉”，为当前正在使用的菜谱的名称。步骤信息632为当前正在使用的菜谱的制作步骤，对应图6的上图所示的用户界面610中的制作步骤613。用户界面630可以表征电子设备200当前正在按照名称为“脆皮五花肉”的菜谱进行工作。

不限于上述示例的情况，在另一些示例中，电子设备100识别当前显示的用户界面610时可以仅识别菜谱上的菜名“脆皮五花肉”，并基于此确定意图信息：烹饪菜名为“脆皮五花肉”的菜肴。电子设备200接收到指示信息后，可以执行该意图信息对应的意图操作：搜索该菜名得到对应的菜谱，按照搜索得到的菜谱进行工作。

场景5：电子设备100为智能手机，用于家长使用，电子设备200为平板电脑，用于孩子进行学习。电子设备100显示包括学习信息的用户界面时，若接收到用户操作(如摇一摇操作)，可以向电子设备200发送指示信息。电子设备200可以基于该指示信息执行意图操作：显示全部或部分的学习信息。这样，家长无需在平板电脑上搜索该学习信息用于孩子学习使用，即无需用户手动触发执行意图操作，交互更加高效便捷。

图7A示例性示出又一种应用场景(如上述场景5)下的用户界面实施例。

如图7A的上图所示，电子设备100可以显示学习应用的用户界面710，用户界面710包括标题711，标题711包括文本“英语试卷”，表征用户界面710用于显示名称为“英语试卷”的试卷的详细信息。用户界面710还包括多个习题的详细信息，例如习题712和习题713，习题712包括题目712A和答案712B，习题713包括题目713A和答案713B。用户界面710还包括考试控件714，考试控件714用于提供针对当前试卷的模拟考试的功能。电子设备100可以和电子设备200连接，电子设备200可以显示桌面720，桌面720可以包括一个或多个应用图标，例如时钟应用图标、日历应用图标、图库应用图标和设置应用图标等。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，识别当前显示的用户界面720得到名称为“英语试卷”的试卷的信息，并基于此确定意图信息：针对该试卷进行模拟考试。电子设备100可以基于得到的意图信息向电子设备200发送指示信息，电子设备200可以基于指示信息执行该意图信息对应的意图操作：开启该试卷的模拟考试的功能，具体可参见图7A的下图。

如图7A的下图所示，电子设备200可以显示用户界面730，用户界面730包括标题731、提交控件732、题目信息733和切换控件734。标题731包括文本“英语试卷”，为当前正在进行的模拟考试的试卷的名称。提交控件732用于结束当前进行的模拟考试，并展示模拟考试的结果。题目信息733展示当前正在查看的题目的信息，切换控件734用于切换当前正在查看的题目的信息。用户界面730可以表征当前已开启名称为“英语试卷”的试卷的模拟考试的功能。

在一些实施例中，电子设备200可以响应于作用于提交控件732的触摸操作(如点击操作)，显示模拟考试的结果，并将模拟考试的结果发送给至电子设备100，让家长可以高效便捷地掌握到孩子的学习情况。

上图7A所示示例中，电子设备100显示的用户界面710包括题目和答案，但电子设备200接收到指示信息后显示的用户界面730仅包括题目，不包括答案，家长不仅无需到电子设备200上查找对应的习题，而且无需手动开启模拟考试的功能，进一步减少用户操作，提高交互的高效性。

不限于上图7A所示的示例，在另一些示例中，电子设备100可以响应于摇一摇电子设备100的操作，识别当前显示的用户界面710中的习题712和/或习题713，并基于此确定意图信息：练习习题712和/或习题713。此时电子设备200接收到电子设备100基于该意图信息发送的指示信息后，可以执行对应的意图操作：显示习题712中的题目712A和/或习题713中的题目713A，以用于孩子进行练习，具体示例和图7A的下图所示的用户界面730类似。

不限于上述示例的情况，在另一些示例场景中，可以由用户自行选择待识别的业务信息，根据用户选择确定意图信息对应的业务内容，具体示例可参见下图7B。

如图7B的左图所示，电子设备100可以显示图7A的上图所示的用户界面710。电子设备100可以接收用户操作(例如摇一摇电子设备100)，响应于该用户操作，显示图7B的右图所示的用户界面740。

如图7B的右图所示，用户界面740可以包括提示信息741、提示框742和提示框743，提示信息741包括文本“请选择需流转的内容”，用于提示用户选择待识别的业务信息。

提示框742为图7B的左图所示的用户界面740中的习题712的题目712A。电子设备100可以响应于作用于提示框742的触摸操作(如点击操作)，确定待识别的业务信息为用户界面740中的习题712，并识别习题712以得到意图信息：练习习题712。此时电子设备200接收到电子设备100基于该意图信息发送的指示信息后，可以执行对应的意图操作：显示习题712中的题目712A，具体示例和图7A的下图所示的用户界面730类似。

提示框743为图7B的左图所示的用户界面740中的习题713的题目713A。电子设备100可以响应于作用于提示框743的触摸操作(如点击操作)，确定待识别的业务信息为用户界面740中的习题713，并识别习题713以得到意图信息：练习习题713。此时电子设备200接收到电子设备100基于该意图信息发送的指示信息后，可以执行对应的意图操作：显示习题713中的题目713A，具体示例和图7A的下图所示的用户界面730类似。

不限于此，在上述场景5中电子设备200也可以是学习机等设备。

以上示例的触发意图流转的用户操作(简称触发操作)为摇一摇操作，在另一些示例中，触发操作也可以为指关节滑动的操作，具体示例可参见图8的(A)，在另一些示例中，触发操作也可以为双指滑动的操作，具体示例可参见图8的(B)，在另一些示例中，触发操作也可以为手势操作，具体示例可参见图8的(C)，不限于此，还可以是指关节敲击、甩手等，本申请对触发操作的具体类型不作限定。

下面介绍本申请实施例中提供的一种显示方法。

图9示例性的示出了本申请实施例中提供的一种显示方法的流程示意图。

该显示方法可应用于上述通信系统10，上述通信系统10可以包括电子设备100、电子设备200和网络设备300。

如图9所示，该显示方法可以包括但不限于如下步骤：

S101：电子设备100和电子设备200建立连接。

在一些实施例中，电子设备100和电子设备200可以通过有线和/或无线方式直接连接，例如通过蓝牙、Wi-Fi连接，在另一些实施例中，电子设备100和电子设备200可以通过网络设备300连接，具体可参见图1A中电子设备100和电子设备200连接的说明。

S102：电子设备100显示包括第一业务信息的第一界面。

在一些实施例中，第一业务信息对应第一业务，不同的业务信息对应的业务不同，具体示例如下所示。

例如，第一业务信息为对应导航业务的地址信息。图3A所示的用户界面310中的消息3122、图3B所示的用户界面340中的消息342或图3C所示的用户界面350中的位置控件352为第一业务信息。

例如，第一业务信息为对应视频业务(如播放视频)的视频信息。图4A所示的用户界面410中的消息414或图5所示的用户界面510包括的信息(如名称521)为第一业务信息。

例如，第一业务信息为对应烹饪业务(如按照菜谱进行烹饪)的菜谱信息。图6所示的用户界面610包括的信息(如标题611)为第一业务信息。

例如，第一业务信息为对应学习业务(如练习题目)的学习信息。图7A所示的用户界面710包括的信息(如习题712、习题713)为第一业务信息。

S103：电子设备100接收第一用户操作。

其中，第一用户操作的形式可以但不限于包括作用于显示屏的触摸操作、语音、运动姿态(如手势)、脑电波等。例如，第一用户操作为摇一摇电子设备100的操作。又例如，第一用户操作为图8的(A)所示的指关节滑动的操作。又例如，第一用户操作为图8的(B)所示的双指滑动的操作。又例如，第一用户操作为图8的(C)所示的手势操作。本申请对第一用户操作的具体类型不作限定。

在一些实施例中，电子设备100可以通过图1B所示的检测模块检测第一用户操作。

在一些实施例中，电子设备100可以通过图2A所示的传感器模块180检测第一用户操作，具体示例可参见图2A中电子设备100可以通过传感器模块180检测用户操作的说明。

在一些实施例中，电子设备100可以自行训练融合模型，融合模型用于识别用户意图，例如用于执行S107。

在另一些实施例中，由网络设备300训练融合模型。其中，训练融合模型的说明可参见图1B中训练融合模型、训练界面解析模型和/或意图解析模型的说明，不再赘述。

在一种情况下，电子设备100在S103之前已接收到网络设备300发送的融合模型，则S103之后，该显示方法还可以包括但不限于如下三个步骤：

S104：电子设备100向网络设备300发送第一请求消息。

在一些实施例中，第一请求消息用于请求获取融合模型的配置信息。

S105：网络设备300向电子设备100发送第一配置消息。

在一些实施例中，第一配置消息包括融合模型的配置信息。

S106：电子设备100基于第一配置消息更新融合模型。

在另一种情况下，电子设备100在S103之前未接收到网络设备300发送的融合模型，电子设备100可以向网络设备请求获取融合模型，具体过程和上述步骤S104-S106类似，不再赘述。

S107：电子设备100基于融合模型识别第一界面，并确定第一业务信息对应的意图信息。

在一些实施例中，电子设备100可以将第一界面的界面内容作为融合模型的输入，以得到输出：意图信息。接下来示例性示出一些意图信息：

例如，第一界面为图3A所示的用户界面310或图3B所示的用户界面340，其中用户界面310中的消息3122或用户界面340中的消息342为第一业务信息，第一业务信息是表征名称为“北京站”的地理位置的地址信息。第一业务信息对应的意图信息为：针对地理位置“北京站”进行导航。

例如，第一界面为图3C所示的用户界面350，其中用户界面350中的位置控件352为第一业务信息，第一业务信息是表征名称为“首都博物馆”的地点的地址信息。第一业务信息对应的意图信息为：针对地点“首都博物馆”进行导航。

例如，第一界面为图4A所示的用户界面410，其中用户界面410中的消息414为第一业务信息，第一业务信息可以表征名称为“我的一天”的视频。第一业务信息对应的意图信息为：播放名称为“我的一天”的视频。

例如，第一界面为图5所示的用户界面510，其中用户界面510包括的信息(如名称521)为第一业务信息，第一业务信息可以表征名称为“影片1”的影片。第一业务信息对应的意图信息为：播放名称为“影片1”的影片。

例如，第一界面为图6所示的用户界面610，其中用户界面610包括的信息(如标题611)为第一业务信息，第一业务信息可以表征名称为“脆皮五花肉的”菜谱。第一业务信息对应的意图信息为：烹饪该菜谱对应的菜肴。

例如，第一界面为图7A所示的用户界面710，其中用户界面710包括的信息(如习题712、习题713)为第一业务信息，第一业务信息可以表征一个或多个习题(名称为“英语试卷”的试卷包括的至少一个习题，如习题712、习题713)。第一业务信息对应的意图信息为：练习这一个或多个习题。

S108：电子设备100基于意图信息向电子设备200发送指示信息。

在一些实施例中，电子设备100可以基于意图信息执行意图操作，并将执行意图操作对应的多媒体数据发送给电子设备200，该指示信息可以指示电子设备200输出该多媒体数据。例如，图1B中，电子设备100的意图解析模块向意图触发模块发送意图信息，意图触发模块基于意图信息执行意图操作，并将执行意图操作对应的音视频流发送给电子设备200的显示模块输出。

在另一些实施例中，电子设备100向电子设备200发送的指示信息包括意图信息，该指示信息可以指示电子设备200实现该意图信息，例如，图1C中，电子设备100的意图解析模块向电子设备200的意图触发模块发送意图信息。

S109：电子设备200输出多媒体数据。

在一些实施例中，电子设备200接收到电子设备100发送的多媒体数据和指示信息时，可以按照指示信息输出多媒体数据，例如图1B所示实施例。

在另一些实施例中，电子设备200接收到电子设备100发送的指示信息，该指示信息包括意图信息，可以基于该意图信息执行意图操作，并输出执行意图操作对应的多媒体数据，例如图1C所示实施例。在一些实施例中，上述意图操作对应第一界面中的第一业务信息。在一些实施例中，电子设备200输出执行意图操作对应的多媒体数据，也可称为输出第一业务信息对应的多媒体数据。

接下来示例性示出一些意图操作：

例如，第一界面为图3A所示的用户界面310或图3B所示的用户界面340，其中用户界面310中的消息3122或用户界面340中的消息342为第一业务信息，第一业务信息是表征名称为“北京站”的地理位置的地址信息。第一业务信息对应的意图操作为：将目的地设置为地理位置“北京站”的位置信息并进行导航，电子设备200输出该意图操作对应的多媒体数据可参见图3A的下图所示的用户界面330，具体场景说明可参见图3A或图3B的说明。

例如，第一界面为图3C所示的用户界面350，其中用户界面350中的位置控件352为第一业务信息，第一业务信息是表征名称为“首都博物馆”的地点的地址信息。第一业务信息对应的意图操作为：将目的地设置为地点“首都博物馆”的位置信息并进行导航，电子设备200输出该意图操作对应的多媒体数据和图3A的下图所示的用户界面330类似，区别在于导航的目的地不同，具体场景说明可参见图3C的说明。

例如，第一界面为图4A所示的用户界面410，其中用户界面410中的消息414为第一业务信息，第一业务信息可以表征名称为“我的一天”的视频。第一业务信息对应的意图操作为：播放名称为“我的一天”的视频，电子设备200输出该意图操作对应的多媒体数据可参见图4B的下图所示的用户界面430，具体场景说明可参见图4B的说明。

例如，第一界面为图5所示的用户界面510，其中用户界面510包括的信息(如名称521)为第一业务信息，第一业务信息可以表征名称为“影片1”的影片。第一业务信息对应的意图操作为：播放名称为“影片1”的影片，电子设备200输出该意图操作对应的多媒体数据可参见图5的下图所示的用户界面520，具体场景说明可参见图5的说明。

例如，第一界面为图6所示的用户界面610，其中用户界面610包括的信息(如标题611)为第一业务信息，第一业务信息可以表征名称为“脆皮五花肉”菜谱。第一业务信息对应的意图操作为：按照该菜谱进行工作，电子设备200输出该意图操作对应的多媒体数据可参见图6的下图所示的用户界面630，具体场景说明可参见图6的说明。

例如，第一界面为图7A所示的用户界面710，其中用户界面710包括的信息(如习题712、习题713)为第一业务信息，第一业务信息可以表征一个或多个习题(名称为“英语试卷”的试卷包括的至少一个习题，如习题712、习题713)。第一业务信息对应的意图操作为：显示这一个或多个习题中的题目(不显示答案)，电子设备200输出该意图操作对应的多媒体数据可参见图7A的下图所示的用户界面730，具体场景说明可参见图7A的说明。

不限于上述示例的情况，在另一些实施例中，若第一界面不包括第一业务信息，则电子设备100无法识别出第一业务信息对应的意图信息，因此不会向电子设备200发送指示信息，电子设备200也不会执行第一业务信息对应的意图操作，例如电子设备100和电子设备200保持显示当前界面不变，不限于此，电子设备100还可以显示提示信息，例如当前无可流转的业务等。例如，图4A所示的用户界面410(第一界面)仅包括消息411和消息413，不包括消息412(地址信息)和消息414(视频信息)，则电子设备100和电子设备200可以保持显示当前界面不变。

图9所示的显示方法的示例可参见图3A-图3C、图4A-图4C、图5-图6和图7A-图7B。

在图9所示的方法中，电子设备100接收到第一用户操作时，可以基于当前显示的用户界面进行意图识别，并通过电子设备200实现识别出的意图，无需用户手动触发实现意图，减少用户操作，交互更加高效便捷。

不限于图9示例的情况，在另一些实施例中，S107中，电子设备100可以识别第一界面得到界面识别结果，可选地，电子设备100可以基于界面解析模型得到界面识别结果，具体可参见图1B中的界面解析模块的说明，可选地，电子设备100获取界面解析模型的方式和图9所示的获取融合模型的方式类似。电子设备100可以基于界面识别结果进行意图识别并得到意图信息，可选地，电子设备100可以基于意图解析模型得到意图信息，具体可参见图1B中的意图解析模块的说明，可选地，电子设备100获取意图解析模型的方式和图9所示的获取融合模型的方式类似。

不限于图9示例的情况，在另一些实施例中，电子设备100可以不执行S107-S108，电子设备100接收第一用户操作后，可以识别第一界面得到界面识别结果，并向电子设备200发送界面识别结果和指示信息，该指示信息可以指示电子设备200实现该界面识别结果对应的意图信息。电子设备200可以基于界面识别结果进行意图识别并得到意图信息，然后基于该意图信息执行意图操作，并输出执行意图操作对应的多媒体数据。例如，电子设备100包括图1B所示的检测模块和界面解析模块，电子设备200包括图1B所示的意图解析模块和意图触发模块。可选地，电子设备200可以基于意图解析模型得到意图信息，可选地，电子设备200获取意图解析模型的方式和图9所示的电子设备100获取融合模型的方式类似。

不限于图9示例的情况，在另一些实施例中，电子设备100可以不执行S107-S108，电子设备100接收第一用户操作后，可以向电子设备200发送电子设备100显示的界面内容和指示信息，该指示信息可以指示电子设备200实现该界面内容对应的意图信息。电子设备200可以执行图9的S107得到意图信息，然后基于该意图信息执行意图操作，并输出执行意图操作对应的多媒体数据。例如，电子设备100包括图1B所示的检测模块，电子设备200包括图1B所示的界面解析模块、意图解析模块和意图触发模块。可选地，电子设备200可以基于界面解析模型得到界面识别结果，可选地，电子设备200可以基于意图解析模型得到意图信息，可选地，电子设备200获取界面解析模型和/或意图解析模型的方式和图9所示的电子设备100获取融合模型的方式类似。可选地，电子设备200可以基于融合模型根据界面内容得到意图信息，可选地，电子设备200获取融合模型的方式和图9所示的电子设备100获取融合模型的方式类似。

请参见图10，图10是本申请实施例提供的又一种显示方法的流程示意图。该方法中的第一设备可以是上述电子设备100，该方法中的第二设备可以是上述电子设备200。该方法可以包括但不限于如下步骤：

S201：第一设备显示第一界面。

在一些实施例中，第一界面包括第一信息，第一信息和第一业务相关，第一信息的示例可参见图9的S102中的第一业务信息的示例。

S202：第一设备接收第一用户操作。

在一些实施例中，S202和图9的S103类似，具体可参见图9的S103的说明。

S203：第一设备响应于第一用户操作，识别第一界面以确定意图信息。

在一些实施例中，意图信息指示执行第一指令，第一指令用于实现第一业务。

在一些实施例中，第一指令是根据意图信息解析得到的指令，在另一些实施例中，第一指令是意图信息包括的指令。

在一些实施例中，意图信息包括第一信息，例如第一信息为指示第一位置的信息，意图信息指示针对第一位置进行导航。在一些实施例中，意图信息包括第一信息相关的信息，例如第一信息为指示第一视频的信息，可以根据第一信息获取到播放第一视频的方式(如第一视频的播放源)，意图信息指示通过上述获取到的播放第一视频的方式播放第一视频。

在一些实施例中，第一设备识别第一信息以确定意图信息的说明可参见图9的S107的说明。

S204：第一设备向第二设备发送意图信息。

S205：第二设备根据意图信息执行第一指令，生成第二信息。

在一些实施例中，第二设备执行第一指令可以对应上述执行意图操作，意图操作的示例可参见上图9示出的意图操作。

在一些实施例中，第二信息是执行第一指令生成的多媒体数据，例如音频数据、视频数据、图像数据等。

S206：第二设备根据第二信息显示第二界面。

在一些实施例中，第二设备可以输出第二信息，例如播放第二信息包括的音频数据，又例如显示第二信息包括的图像数据，又例如播放第二信息包括的视频数据。

在一些实施例中，第二设备显示第二界面的示例可参见上图9示例的意图操作的说明中，电子设备200输出意图操作对应的多媒体数据的示例。

在一些实施例中，第一信息为指示第一位置的信息，例如为图3A所示的用户界面310中的消息3122，消息3122指示的第一位置为地理位置“北京站”，或者为图3B所示的用户界面340中的消息342，又例如图3C所示的用户界面350中的位置控件352，位置控件352指示的第一位置为地点“首都博物馆”。第一业务为导航业务。第二信息是执行针对第一位置的导航操作生成的显示信息，例如将目的地设置为地理位置“北京站”的位置信息并进行导航时生成的多媒体数据，第二设备根据该第二信息显示的第二界面为图3A的下图所示的用户界面330，又例如将目的地设置为地点“首都博物馆”的位置信息并进行导航时生成的多媒体数据。具体场景说明可参见图3A、图3B或图3C的说明。

在另一些实施例中，第一信息为指示第一视频的信息，例如为图4A所示的用户界面410中的消息414，消息414指示的第一视频的名称为“我的一天”，又例如图5所示的用户界面510包括的信息(如名称521)，指示的第一视频的名称为“影片1”。第一业务为视频播放业务。第二信息是播放第一视频生成的显示信息，例如播放视频“我的一天”生成的多媒体数据，第二设备根据该第二信息显示的第二界面为图4B的下图所示的用户界面430，又例如播放视频“影片1”生成的多媒体数据，第二设备根据该第二信息显示的第二界面为图5的下图所示的用户界面520。具体场景说明可参见图4B或图5的说明。

在另一些实施例中，第一信息为指示第一菜谱的信息，例如为图6所示的用户界面610包括的信息(如标题611)，指示的第一菜谱的名称为“脆皮五花肉”。第一业务为烹饪业务。第二信息是实现第一菜谱对应的烹饪业务生成的显示信息，例如按照菜谱“脆皮五花肉”进行工作而生成的多媒体数据，第二设备根据该第二信息显示的第二界面为图6的下图所示的用户界面630。具体场景说明可参见图6的说明。

在另一些实施例中，第一信息为指示第一题目和第一题目的答案的信息，例如图7A所示的用户界面710中的习题712，习题712包括题目712A和答案712B。第一业务为试卷生成业务，本申请以试卷是包括至少一个题目且不包括答案的信息为例进行说明。第二界面包括第一题目，不包括第一题目的答案，第二界面例如为图7A的下图所示的用户界面730，用户界面730包括上述题目712A(用户界面730中的题目信息733)，但不包括上述答案712B。具体场景说明可参见图7A的说明。

在一些实施例中，第一界面还包括第三信息，第三信息和第二业务相关，第三信息和第二业务的说明与上述第一信息和第一业务的说明类似。S203可以具体为：第一设备识别第一信息以确定第四信息，识别第三信息以确定第五信息，基于第一预设规则从第四信息和第五信息中确定上述意图信息为第四信息。其中，第四信息指示执行上述第一指令，第五信息指示执行第二指令，第二指令用于实现第二业务，第二指令的说明和上述第一指令的说明类似。

可选地，第一预设规则可以包括：第二设备的设备类型为预设设备类型，可以理解为是第一设备可以根据连接的第二设备的设备类型确定所要实现的意图信息。例如，上述场景2中，第一界面为聊天界面，第一信息、第三信息分别为图4A的上图所示的用户界面410中的消息412、消息414，第一信息为位置信息，第三信息为视频信息。第一信息对应的第一业务为导航业务，第四信息指示针对地理位置“北京站”进行导航，第三信息对应的第二业务为视频播放业务，第五信息指示播放名称为“我的一天”的视频。第一设备为电子设备100(智能手机)，第二设备为电子设备200，若第二设备为车载电脑，第一设备可以确定意图信息为上述第四信息，场景示例可参见图4A，若第二设备为智能电视，可以确定意图信息为上述第五信息，场景示例可参见图4B。

可选地，第一预设规则可以包括：第二设备支持的业务包括第一业务，例如，第一业务为导航业务，若第二设备为安装有地图应用，能基于地图应用执行导航业务的设备，第一设备可以确定上述意图信息为第一信息。

可选地，第一预设规则可以包括：第一业务的优先级高于第二业务的优先级。

可选地，第一信息和第三信息为即时通讯消息，第一预设规则可以包括：第一信息的接收时间晚于第三信息的接收时间。例如，上述场景2中，第一界面为聊天界面，第一信息、第三信息分别为图4A的上图所示的用户界面410中的消息412、消息414，由于消息414的接收时间更晚，因此第一设备可以确定意图信息为消息414对应的第五信息，第五信息指示播放名称为“我的一天”的视频，场景示例可参见图4B。

图10所示的方法例如应用图1C所示的通信系统10，第一设备为电子设备100，第二设备为电子设备200，具体可参见图1C的说明。

请参见图11，图11是本申请实施例提供的又一种显示方法的流程示意图。该方法中的第一设备可以是上述电子设备100，该方法中的第二设备可以是上述电子设备200。该方法可以包括但不限于如下步骤：

S301：第一设备显示第一界面。

S302：第一设备接收第一用户操作。

S303：第一设备响应于第一用户操作，识别第一界面以确定意图信息。

S301-S303和图10的S201-S203一致，具体可参见图10的S201-S203的说明。

S304：第一设备根据意图信息执行第一指令，生成第二信息。

S304和图10的S205类似，区别在于，S304中的执行设备为第一设备，而非第二设备。

S305：第一设备向第二设备发送第二信息。

S306：第二设备根据第二信息显示第二界面。

S306和图10的S206一致，具体可参见图10的S206的说明。

图11的示例和图10的示例类似，区别在于，图11中执行第一指令和生成第二信息的不是第二设备，而是第一设备，具体可参见图10的示例。

图11所示的方法例如应用图1B所示的通信系统10，第一设备为电子设备100，第二设备为电子设备200，具体可参见图1B的说明。

不限于上图10和图11所示的情况，在另一些实施例中，识别第一界面以确定意图信息的设备可以不是第一设备，而是第二设备，例如第一设备响应于第一用户操作向第二设备发送第一界面相关的多媒体数据(如图像数据)，第二设备基于接收到的数据进行意图识别，具体过程和上述第一设备识别第一界面以确定意图信息的过程类似，不再赘述。

当以上任一模块或单元以软件实现的时候，所述软件以计算机程序指令的方式存在，并被存储在存储器中，处理器可以用于执行所述程序指令以实现以上方法流程。所述处理器可以包括但不限于以下至少一种：中央处理单元(central processing unit，CPU)、微处理器、数字信号处理器(DSP)、微控制器(microcontroller unit，MCU)、或人工智能处理器等各类运行软件的计算设备，每种计算设备可包括一个或多个用于执行软件指令以进行运算或处理的核。该处理器可以是个单独的半导体芯片，也可以跟其他电路一起集成为一个半导体芯片，例如，可以跟其他电路(如编解码电路、硬件加速电路或各种总线和接口电路)构成一个SoC(片上系统)，或者也可以作为一个ASIC的内置处理器集成在所述ASIC当中，该集成了处理器的ASIC可以单独封装或者也可以跟其他电路封装在一起。该处理器除了包括用于执行软件指令以进行运算或处理的核外，还可进一步包括必要的硬件加速器，如现场可编程门阵列(field programmable gate array，FPGA)、PLD(可编程逻辑器件)、或者实现专用逻辑运算的逻辑电路。

当以上模块或单元以硬件实现的时候，该硬件可以是CPU、微处理器、DSP、MCU、人工智能处理器、ASIC、SoC、FPGA、PLD、专用数字电路、硬件加速器或非集成的分立器件中的任一个或任一组合，其可以运行必要的软件或不依赖于软件以执行以上方法流程。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，该流程可以由计算机程序来计算机程序相关的硬件完成，该计算机程序可存储于计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法实施例的流程。而前述的存储介质包括：只读存储器(read-only memory，ROM)或随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可存储计算机程序代码的介质。

Claims (13)

1.一种显示方法，其特征在于，应用于第一设备，所述第一设备和第二设备连接，所述方法包括：

显示第一界面，所述第一界面包括第一信息，所述第一信息和第一业务相关；

接收第一用户操作；

响应于第一用户操作，识别所述第一界面以确定意图信息，所述意图信息指示执行第一指令，所述第一指令用于实现所述第一业务；

向所述第二设备发送所述意图信息，所述意图信息用于所述第二设备执行所述第一指令并生成第二信息，所述第二信息用于所述第二设备显示第二界面。

2.如权利要求1所述的方法，其特征在于，所述第一界面还包括第三信息，所述第三信息和第二业务相关；

所述识别所述第一界面以确定意图信息，包括：

识别所述第一信息以确定所述第四信息，识别所述第三信息以确定所述第五信息，所述第四信息指示执行所述第一指令，所述第五信息指示执行第二指令，所述第二指令用于实现所述第二业务；

基于第一预设规则，从所述第四信息和所述第五信息中确定所述意图信息为所述第四信息，所述第一预设规则包括以下至少一项：所述第二设备的设备类型为预设设备类型、所述第二设备支持的业务包括所述第一业务、所述第一业务的优先级高于所述第二业务的优先级。

3.如权利要求2所述的方法，所述第一信息为位置信息，所述第一业务为导航业务，所述第二业务和所述第一业务不同，所述第一预设规则包括所述第二设备的设备类型为所述预设设备类型，所述预设设备类型为车载设备。

4.如权利要求1-3任一项所述的方法，其特征在于，所述第一信息为指示第一位置的信息，所述第一业务为导航业务，所述第二信息是执行针对所述第一位置的导航操作生成的显示信息。

5.如权利要求1或2所述的方法，其特征在于，所述第一信息为指示第一视频的信息，所述第一业务为视频播放业务，所述第二信息是播放所述第一视频生成的显示信息。

6.如权利要求1或2所述的方法，其特征在于，所述第一信息为指示第一菜谱的信息，所述第一业务为烹饪业务，所述第二信息是实现所述第一菜谱对应的烹饪业务生成的显示信息。

7.如权利要求1或2所述的方法，其特征在于，所述第一信息为指示第一题目和所述第一题目的答案的信息，所述第一业务是试卷生成业务，所述第二界面包括所述第一题目，不包括所述第一题目的答案。

8.一种显示方法，其特征在于，应用于第一设备，所述第一设备和第二设备连接，所述方法包括：

显示第一界面，所述第一界面包括第一信息，所述第一信息和第一业务相关；

接收第一用户操作；

响应于第一用户操作，识别所述第一界面以确定意图信息；

根据所述意图信息执行第一指令，生成第二信息，所述第一指令用于实现所述第一业务；

向所述第二设备发送所述第二信息，所述第二信息用于所述第二设备显示第二界面。

9.如权利要求8所述的方法，其特征在于，所述第一界面还包括第三信息，所述第三信息和第二业务相关；

所述识别所述第一界面以确定意图信息，包括：

识别所述第一信息以确定所述第四信息，识别所述第三信息以确定所述第五信息，所述第四信息指示执行所述第一指令，所述第五信息指示执行第二指令，所述第二指令用于实现所述第二业务；

基于第一预设规则，从所述第四信息和所述第五信息中确定所述意图信息为所述第四信息，所述第一预设规则包括所述第二设备的设备类型为预设设备类型，和/或所述第一业务的优先级高于所述第二业务的优先级。

10.一种显示方法，其特征在于，应用于第二设备，所述第二设备和第一设备连接，所述方法包括：

接收所述第一设备发送的意图信息，所述意图信息是所述第一设备接收到第一用户操作的情况下识别显示的第一界面确定的，所述第一界面包括第一信息，所述第一信息和第一业务相关；

根据所述意图信息执行第一指令，生成第二信息，所述第一指令用于实现所述第一业务；

根据所述第二信息显示第二界面。

11.一种显示方法，其特征在于，应用于第二设备，所述第二设备和第一设备连接，所述方法包括：

接收所述第一设备发送的第一信息，所述第一信息是执行第一指令生成的信息，所述第一指令用于实现第一业务，所述第一指令是意图信息指示执行的指令，所述意图信息是所述第一设备接收到第一用户操作的情况下识别显示的第一界面确定的，所述第一界面包括第二信息，所述第二信息和所述第一业务相关；

根据所述第一信息显示第二界面。

12.一种电子设备，其特征在于，包括收发器、处理器和存储器，所述存储器用于存储计算机程序，所述处理器调用所述计算机程序，用于执行如权利要求1-11任一项所述的方法。

13.一种计算机存储介质，其特征在于，所述计算机存储介质存储有计算机程序，所述计算机程序被处理器执行时，实现权利要求1-11任一项所述的方法。

Images