CN115361248A - 多屏交互方法、多屏交互装置及多屏交互系统 - Google Patents

Abstract

本发明公开了一种多屏交互方法、多屏交互装置及多屏交互系统，所述多屏交互方法包括：接收第一终端发送的交互信息，确定交互数据；基于确定的交互数据向第二终端推送提示信息，其中，所述提示信息用于提示用户对第一终端发送的交互信息进行反馈；接收第二终端发送的反馈信息，确定反馈数据；基于确定的反馈数据向第一终端和/或第二终端下发运行指令。本发明中，通过解析第一终端发送的交互信息，向第二终端推送提示信息，提升终端设备之间的信息交互能力，特别是具有智慧屏的终端设备，而通过解析第二终端发送的反馈信息，控制第一终端和/或第二终端运行，特别是远距离智能控制第一终端，实现多屏互动。

Description

多屏交互方法、多屏交互装置及多屏交互系统

技术领域

本发明属于信息处理技术领域，具体地说，涉及一种多屏交互方法、多屏交互装置及多屏交互系统。

背景技术

随着信息化技术的逐步发展、网络技术的日益完善、可应用网络载体的日益丰富和大带宽室内网络入户战略的逐步推广，智慧化信息服务进家入户成为可能，其中，智慧家庭系统是结合了物联网、云计算、移动互联网和大数据技术，能够完成家居环境的自动控制，并智能地为用户提供各种所需服务的家居智能空间，使智慧化信息服务更加人性化。

通过物联网产生、收集来自不同维度的、海量的数据存储于云端、边缘端，再通过大数据分析，以及更高形式的人工智能，实现万物数据化、万物智联化，同时，随着AIOT的发展，显示技术的升级，可视化交互智慧屏将成为未来智慧家庭系统进行信息交互的主要方式。

目前，越来越多的终端设备都设置有智慧屏，以实时显示终端设备的运行状态，满足用户随时、快捷获取终端设备的需求，但是，第一终端的运行状态只能在第一终端的智慧屏上对应显示，不能择一或同时在多个第二终端的智慧屏上显示，尤其是用户不在目标范围内时，用户无法及时获取第一终端的运行状态，各终端设备之间无法真正地互联互动，用户体验差。

有鉴于此特提出本发明。

发明内容

本发明要解决的技术问题在于克服现有技术的不足，提供一种多屏交互方法，以实现第一终端和第二终端之间进行信息交互、提高用户与终端设备之间的互动效果的目的。

为解决上述技术问题，本发明采用技术方案的基本构思是：

一种多屏交互方法，包括：

接收第一终端发送的交互信息，确定交互数据；

基于确定的交互数据向第二终端推送提示信息，其中，所述提示信息用于提示用户对第一终端发送的交互信息进行反馈；

接收第二终端发送的反馈信息，确定反馈数据；

基于确定的反馈数据向第一终端和/或第二终端下发运行指令。

进一步，所述接收第一终端发送的交互信息，确定交互数据包括：

解析第一终端发送的交互信息，确定本次交互对应的第一终端标识、用户标识、与用户关联的第二终端标识、交互信息类型、交互信息标识、交互信息内容中的至少一种第一终端属性信息；

基于确定的第一终端属性信息，确定与第一终端属性信息匹配的交互数据。

在上述方案中，解析第一终端发送的交互信息，将确定的交互数据封装成与第二终端相匹配的提示信息，用户能够通过第二终端及时掌握第一终端的运行状态，并基于提示信息控制第一终端和/或第二终端运行，特别是远距离智能控制第一终端，实现终端设备之间的信息互联。

进一步，所述接收第一终端发送的交互信息，确定交互数据包括：

解析第一终端发送的交互信息，确定本次交互对应的第一终端标识、用户标识、与用户关联的第二终端标识、交互信息类型、交互信息标识、交互信息内容中的至少一种第一终端属性信息；

基于确定的第一终端属性信息，确定与第一终端属性信息匹配的交互数据。

在上述方案中，通过第一终端标识追溯用户标识，以确定与用户关联的第二终端，即用户名下绑定的所有第二终端，进而确定与第二终端相匹配的交互数据，便于通过第二终端显示第一终端需要交互的信息，使用户能够及时获取第一终端的运行状态。

进一步，所述交互数据至少包括本次推送对应的第二终端标识、提示信息类型、提示信息标识和提示信息内容。

在上述方案中，基于接收到的第一终端发送的交互信息，确定显示提示信息的第二终端，并将交互信息转化为与所述第二终端相匹配的提示信息，所述提示信息可以为语音信息、视频信息、文字信息、图片信息、机械操控信息等，其中，用户名下至少绑定一个第二终端，或者用户名下同时绑定多个第二终端，第二终端与多屏交互装置通信连接。

进一步，所述确定本次推送对应的第二终端标识包括：

获取第一终端与第二终端的关联关系；

基于获取到的第一终端与第二终端的关联关系，确定向一个或多个第二终端推送提示信息。

在上述方案中，所述关联关系可以是第一终端或者多屏交互装置预设的第二终端显示第一终端的交互信息的优先级，例如：基于第二终端的显示效果、第二终端的音频效果等确定优先级，其中，第一终端与多屏交互装置通信连接；也可以是多屏交互装置接收并存储由外部写入第二终端显示第一终端的交互信息的优先级，例如：用户通过手机App写入优先级，其中，手机终端与多屏交互装置通信连接；或者是以上几种方式的任意组合。

进一步，所述确定本次推送对应的第二终端标识包括：

检测用户与第二终端的距离；

基于检测到的用户与第二终端的距离，确定向一个或多个第二终端推送提示信息。

在上述方案中，基于用户与第二终端的距离，决策出显示第一终端的交互信息的第二终端，使多屏交互过程更加智能化、精准化、人性化，极大提升用户的使用体验，例如：第一终端正在播放视频，当用户远离第一终端时，第一终端可以将播放视频的交互信息发送至多屏交互装置上，以使多屏交互装置将所述交互信息以提示信息的形式推送至距离用户较近的第二终端。

进一步，所述接收第二终端发送的反馈信息，确定反馈数据包括：

接收第二终端发送的反馈信息，所述反馈信息包括语音信息、视频信息、文字信息、图片信息、机械操控信息中的一种或多种；

解析第二终端发送的反馈信息，确定本次反馈对应的第二终端标识、与第二终端关联的第一终端标识、反馈信息类型、反馈信息标识、反馈信息内容中的至少一种第二终端属性信息；

基于确定的第二终端属性信息，确定与第二终端属性信息匹配的反馈数据。

在上述方案中，解析接收第二终端发送的反馈信息，确定与第二终端属性信息匹配的反馈数据，以控制第一终端和/或第二终端基于反馈数据执行相应的操作，实现第一终端与第二终端之间的互通互联，特别是用户远离第一终端时，用户也能及时获取第一终端的运行状态。

进一步，所述解析第二终端发送的反馈信息，确定反馈数据具体包括：

解析第二终端发送的语音信息，确定本次反馈对应的第二终端标识和反馈信息内容，以向第一终端和/或第二终端下发基于确定的反馈信息内容形成的控制指令。

在上述方案中，第二终端具有拾音功能，用户可以对着第二终端说出唤醒词，服务SDK获取第二终端的麦克风权限，用户可以对着第二终端说出语音操控指令，同时麦克风进行拾音，服务SDK将包括拾取的语音信息的反馈信息发送给多屏交互装置，多屏交互装置的解析模块解析第二终端发送的语音信息，获取用户的操控指令，进而控制第一终端和/或第二终端运行，实现远距离无人操控智能控制。

进一步，所述确定本次反馈对应的反馈信息内容具体包括：

对接收到的第二终端发送的语音信息进行噪音处理、语义解析和泛化词匹配，确定反馈信息内容。

在上述方案中，基于语音信息和噪声能量值，调整信噪比，对噪声信号进行缩放，得到不同的噪声语音信息，然后对不同的噪声语音信息进行语义解析形成以获取用户的真实意图，再基于语义内容进行泛化词匹配以形成控制指令，降低语音信息中的噪声干扰，提高语义解析和泛化词匹配的准确率，真实地反映用户的操控指令，更加智能地控制第一终端和第二终端的运行。

本发明还提供一种多屏交互装置，包括：

接收模块，与第一终端和第二终端通信连接，用于接收第一终端发送的交互信息和第二终端发送的反馈信息；

解析模块，与接收模块连接，用于解析接收模块接收到的第一终端发送的交互信息和第二终端发送的反馈信息，确定交互数据和反馈数据；

生成模块，与解析模块连接，用于基于确定的交互数据生成提示信息和基于确定的反馈数据生成运行指令；

传输模块，与生成模块连接，用于向第二终端推送提示信息和向第一终端和/或第二终端下发运行指令。

在上述方案中，使得第一终端的交互信息通过多屏交互装置在第二终端的智慧屏上显示，大大减少交互信息传输时间，提升传输效率，同时通过在多屏交互装置对投屏内容进行处理后，提升信息交互的速度，减少等待时间，更好地实现信息传输的时效性，便于用户控制第一终端和第二终端。

本发明还提供一种多屏交互系统，包括第一终端、第二终端和上述所述的多屏交互装置，多屏交互装置与第一终端、第二终端通信连接。

在上述方案中，多屏交互装置与第一终端、第二终端通信连接，第一终端和第二终端通过多屏交互装置实现信息交互，形成多屏交互系统，特别是通过第二终端的智慧屏显示提示信息，有利于用户及时获取第一终端的运行状态，并远距离操控第一终端。

采用上述技术方案后，本发明与现有技术相比具有以下有益效果。

1、本发明中，通过解析第一终端发送的交互信息，向第二终端推送提示信息，提升终端设备之间的信息交互能力，特别是具有智慧屏的终端设备，而通过解析第二终端发送的反馈信息，控制第一终端和/或第二终端运行，特别是远距离智能控制第一终端，实现多屏互动。

2、本发明中，解析第二终端发送的语音信息，基于语音信息和噪声能量值，调整信噪比，对噪声信号进行缩放，得到不同的噪声语音信息，然后对不同的噪声语音信息进行语义解析形成以获取用户的真实意图，再基于语义内容进行泛化词匹配以形成控制指令，降低语音信息中的噪声干扰，提高语义解析和泛化词匹配的准确率，真实地反映用户的操控指令，更加智能地控制第一终端和第二终端的运行。

3、本发明中，通过多屏交互装置将第一终端发送的交互信息以提示信息的形式在用户名下绑定的第二终端的智慧屏上显示，大大减少交互信息传输时间，提升传输效率，同时通过在多屏交互装置对投屏内容进行处理后，提升信息交互的速度，减少等待时间，更好地实现信息传输的时效性，便于用户控制第一终端和第二终端，实现万物数据化、万物智联化。

4、本发明中，多屏交互装置与第一终端、第二终端通信连接，第一终端和第二终端通过多屏交互装置实现信息交互，形成多屏交互系统，特别是通过第二终端的智慧屏显示提示信息，有利于用户及时获取第一终端的运行状态，并且远距离智能操控第一终端。

下面结合附图对本发明的具体实施方式作进一步详细的描述。

附图说明

附图作为本发明的一部分，用来提供对本发明的进一步的理解，本发明的示意性实施例及其说明用于解释本发明，但不构成对本发明的不当限定。显然，下面描述中的附图仅仅是一些实施例，对于本领域普通技术人员来说，在不付出创造性劳动的前提下，还可以根据这些附图获得其他附图。在附图中：

图1是本发明实施例中的一种多屏交互方法的流程示意图；

图2是本发明实施例中的第一终端、第二终端和多屏交互装置的连接框图；

图3是本发明实施例中的一种多屏交互装置的结构示意图。

图中：

100、第一终端；

200、第二终端；

300、多屏交互装置；301、接收模块；302、解析模块；303、生成模块；304、传输模块。

需要说明的是，这些附图和文字描述并不旨在以任何方式限制本发明的构思范围，而是通过参考特定实施例为本领域技术人员说明本发明的概念。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对实施例中的技术方案进行清楚、完整地描述，以下实施例用于说明本发明，但不用来限制本发明的范围。

在本发明的描述中，需要说明的是，术语“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。

在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

实施例一

如图1所示，本实施例中提供了一种多屏交互方法，包括以下步骤：

步骤S1，接收第一终端100发送的交互信息，确定交互数据；

步骤S2，基于确定的交互数据向第二终端200推送提示信息，以使第二终端200显示所述提示信息，其中，所述提示信息用于提示用户对第一终端100发送的交互信息进行反馈；

步骤S3，接收第二终端200发送的反馈信息，确定反馈数据；

步骤S4，基于确定的反馈数据向第一终端100和/或第二终端200下发运行指令。

本实施例中，解析第一终端100发送的交互信息，将确定的交互数据封装成与第二终端200相匹配的提示信息，用户能够通过第二终端200及时掌握第一终端100的运行状态，并基于提示信息控制第一终端100和/或第二终端200运行，实现终端设备之间的信息互联。

本实施例中，所述交互信息可以为语音信息、视频信息、文字信息、图片信息、机械操控信息中的一种或多种，第一终端100将交互信息进行封装，然后上报给多屏交互装置300，其中，所述多屏交互装置300可以为云端服务器、移动终端或其他交互平台，优选的，多屏交互装置300为云端服务器，云端服务器拥有较快的数据处理速度和访问速度，同时云端服务器的安全性和稳定性好，各种数据都可以在云端服务器上备份，数据也不会丢失。

如图1所示，本实施例中，步骤S1，所述接收第一终端100发送的交互信息，确定交互数据包括：

步骤S11，解析第一终端100发送的交互信息，确定本次交互对应的第一终端100标识、用户标识、与用户关联的第二终端200标识、交互信息类型、交互信息标识、交互信息内容中的至少一种第一终端100属性信息；

步骤S12，基于确定的第一终端100属性信息，确定与第一终端100属性信息匹配的交互数据。

本实施例中，通过第一终端100标识追溯用户标识，以确定与用户关联的第二终端200，即用户名下绑定的所有第二终端200，进而确定与第二终端200相匹配的交互数据，便于通过第二终端200显示第一终端100需要交互的信息，使用户能够及时获取第一终端100的运行状态。

本实施例中，第一终端100与多屏交互装置300通信连接，第一终端100内预置有推送软件开发工具包SDK，生成交互消息的推送应用程序APP，对需要推送的交互信息进行封装，然后上报给与第一终端100通信连接的多屏交互装置300，多屏交互装置300包括用于接收第一终端100发送的交互信息的接收模块301和用于解析接收模块301接收到的第一终端100发送的交互信息的解析模块302，解析模块301能够基于第一终端100发送的交互信息确定交互数据，即确定本次交互对应的第一终端100标识和/或用户标识和/或与用户关联的第二终端200标识和/或交互信息类型和/或交互信息标识和/或交互信息内容，此外，多屏交互装置300还具有用于基于确定的交互数据生成提示信息的生成模块303和用于向第二终端200推送提示信息的传输模块304，以使多屏交互装置300将所述交互消息以提示信息的形式推送至第二终端200，例如：推送应用程序APP为音视频APP，在电视、手机、IPD等具有智慧屏的终端设备需要进行视频通话时，特别是用户不在目标范围内时，发送视频信息到多屏交互装置300。

本实施例中，所述推送软件开发工具包SDK包括第一终端100的交互消息推送功能对应的应用程序接口API的配置信息，通过所述推送软件开发工具包SDK，基于第一终端100的交互消息推送功能对应的API的配置信息，调用第一终端100的交互消息推送功能对应的API，生成推送应用程序APP，在所述推送应用程序APP中设置每个第二终端200的标识信息。

本实施例中，所述交互数据至少包括本次推送对应的第二终端200标识、提示信息类型、提示信息标识和提示信息内容。

本实施例中，基于接收到的第一终端100发送的交互信息，确定显示提示信息的第二终端200，并将交互信息转化为与所述第二终端200相匹配的提示信息，所述提示信息可以为语音信息、视频信息、文字信息、图片信息、机械操控信息等，其中，用户名下至少绑定一个第二终端200，或者用户名下同时绑定多个第二终端200，第二终端200与多屏交互装置300通信连接。

本实施例中，步骤S11，所述确定本次推送对应的第二终端200标识包括：

步骤S111a，获取第一终端100与第二终端200的关联关系；

步骤S111b，基于获取到的第一终端100与第二终端200的关联关系，确定向一个或多个第二终端200推送提示信息。

本实施例中，所述关联关系可以是第一终端100或者多屏交互装置300预设的第二终端200显示第一终端100的交互信息的优先级，例如：基于第二终端200的显示效果、第二终端200的音频效果等确定优先级，其中，第一终端100与多屏交互装置300通信连接；也可以是多屏交互装置300接收并存储由外部写入第二终端200显示第一终端100的交互信息的优先级，例如：用户通过手机App写入优先级，其中，手机终端与多屏交互装置300通信连接；或者是以上几种方式的任意组合。

本实施例中，步骤S11，所述确定本次推送对应的第二终端200标识包括：

步骤S112a，检测用户与第二终端200的距离；

步骤S112b，基于检测到的用户与第二终端200的距离，确定向一个或多个第二终端200推送提示信息。

本实施例中，基于用户与第二终端200的距离，决策出显示第一终端100的交互信息的第二终端200，使多屏交互过程更加智能化、精准化、人性化，极大提升用户的使用体验，例如：第一终端100正在播放视频，当用户远离第一终端100时，第一终端100可以将播放视频的交互信息发送至多屏交互装置300上，以使多屏交互装置300将所述交互信息以提示信息的形式推送至距离用户较近的第二终端200。

如图1所示，本实施例中，步骤S2，所述基于确定的交互数据向第二终端200推送提示信息，其中，用户名下至少绑定一个第二终端200，或者用户名下同时绑定多个第二终端200，多屏交互装置300基于确定的交互数据向一个或多个第二终端200推送提示信息，以使第二终端200接收到、并通过其智慧屏显示所述提示信息，所述提示消息包括第一终端100标识、一个或多个第二终端200标识、用户标识、提示信息类型、提示信息标识、提示消息内容、APP访问路径等，例如：洗衣机机壳外部设有外置投放装置，外置投放装置具有放置腔，放置腔内设有可抽拉的储液模块，储液模块用于存储添加剂，储液模块内设有液位传感器，当储液模块的添加剂体积小于预设值时，外置投放装置向多屏交互装置300发送添加剂体积不足的交互信息，多屏交互装置300基于所述交互信息向第二终端200推送提示信息，所述提示信息可以包括添加剂体积不足的语音提醒或文字提醒，也可以包括添加剂的购买链接或购买添加剂的应用程序APP的下载链接，以方便用户及时购买相应添加剂，使用户在第二终端200上购买所需的耗材，并支付购买费用，简化用户操作，优化用户体验。

本实施例中，第二终端200上安装有互动卡片APP，并预置有服务SDK，通过服务SDK获取到提示消息，解析提示信息的内容，并通过提示消息中的APP访问路径，进行静默安装，拉起互动卡片APP，互动卡片APP根据解析的内容渲染消息模板内容，并以卡片的形式展示在第二终端200的智慧屏上，例如：视频通话，卡片显示来电、接听/挂断操作、唤醒词，第二终端200还具有拾音功能，用户可以对着第二终端200说出唤醒词，例如：用户可以通过“小海小海，接听电话”唤醒第二终端200的拾音功能，第二终端200将拾取的语音信息形成的反馈信息上传至多屏交互装置300，无需用户手动触屏或通过遥控器进行操作，提升用户使用体验，增强终端设备的智能性，实现万物数据化、万物智联化。

如图1所示，本实施例中，步骤S3，所述接收第二终端200发送的反馈信息，确定反馈数据包括：

步骤S31，接收第二终端200发送的反馈信息，所述反馈信息包括语音信息、视频信息、文字信息、图片信息、机械操控信息中的一种或多种；

步骤S32，解析第二终端200发送的反馈信息，确定本次反馈对应的第二终端200标识、与第二终端200关联的第一终端100标识、反馈信息类型、反馈信息标识、反馈信息内容中的至少一种第二终端200属性信息；

步骤S33，基于确定的第二终端200属性信息，确定与第二终端200属性信息匹配的反馈数据。

本实施例中，解析接收第二终端200发送的反馈信息，确定与第二终端200属性信息匹配的反馈数据，以控制第一终端100和/或第二终端200基于反馈数据执行相应的操作，实现第一终端100与第二终端200之间的互通互联，特别是用户远离第一终端100时，用户也能及时获取第一终端100的运行状态。

本实施例中，多屏交互装置300的接收模块301接收第二终端200发送的反馈信息，解析模块302解析接收模块301接收到的第二终端200发送的反馈信息，解析模块302能够基于第二终端200发送的反馈信息确定反馈数据，以使生成模块303基于确定的反馈数据生成运行指令，并使传输模块304向第一终端100和/或第二终端200下发运行指令。

本实施例中，步骤S32，所述解析第二终端200发送的反馈信息，确定反馈数据具体包括：

步骤S32a，解析第二终端200发送的语音信息，确定本次反馈对应的第二终端200标识和反馈信息内容，以向第一终端100和/或第二终端200下发基于确定的反馈信息内容形成的控制指令。

本实施例中，第二终端200具有拾音功能，用户可以对着第二终端200说出唤醒词，服务SDK获取第二终端200的麦克风权限，用户可以对着第二终端200说出语音操控指令，同时麦克风进行拾音，服务SDK将包括拾取的语音信息的反馈信息发送给多屏交互装置300，多屏交互装置300的解析模块302解析第二终端200发送的语音信息，获取用户的操控指令，进而控制第一终端100和/或第二终端200运行，实现远距离无人操控智能控制。

本实施例中，步骤S32a，所述确定本次反馈对应的反馈信息内容具体包括：

步骤S32a1，对接收到的第二终端200发送的语音信息进行噪音处理、语义解析和泛化词匹配，确定反馈信息内容。

本实施例中，多屏交互装置300的解析模块302对获取到的用户的语音信息进行语音识别，即对语音信息进行噪音处理、语义解析和泛化词匹配，其中，解析第二终端200发送的语音信息，基于语音信息和噪声能量值，调整信噪比，对噪声信号进行缩放，得到不同的噪声语音信息，然后对不同的噪声语音信息进行语义解析形成以获取用户的真实意图，再基于语义内容进行泛化词匹配以形成控制指令，降低语音信息中的噪声干扰，提高语义解析和泛化词匹配的准确率，真实地反映用户的操控指令，更加智能地控制第一终端100和第二终端200的运行。

具体的，基于确定的反馈数据向第一终端100下发运行指令和/或第二终端200下发运行指令，例如：第一终端100为洗衣机，第二终端200为电视、手机、IPD等具有智慧屏的终端设备，洗衣机的机壳内设有内置投放装置，洗衣机机壳外部设有外置投放装置，不仅使普通洗衣机具有自动投放功能，还能丰富洗衣机可投放添加剂的种类，满足用户不断细化的衣物处理需求，尤其是针对不同面料需要采用不同的添加剂进行洗涤和养护，其中，内置投放装置具有用于投放添加剂的投放腔，外置投放装置具有放置腔，放置腔内设有可抽拉的储液模块，储液模块用于存储添加剂，储液模块内设有液位传感器，在外置投放装置向洗衣机自动投放添加剂的过程中，若储液模块的添加剂体积小于预设值时，外置投放装置向多屏交互装置300发送添加剂体积不足的交互信息和/或是否启动内置投放装置向洗衣机自动投放添加剂的交互信息，多屏交互装置300基于所述交互信息向第二终端200推送提示信息，所述提示信息可以包括添加剂的购买链接和/或启动内置投放装置的语音提醒，用户可以对着第二终端200说出语音操控指令以便于第二终端200获取语音信息，多屏交互装置300接收第二终端200获取的语音信息、并确定用户的反馈数据，若用户选择购买添加剂，则控制第二终端200自动跳转至添加剂的购买界面，使用户在第二终端200上购买所需的耗材，并支付购买费用，简化用户操作，优化用户体验；若用户选择启动内置投放装置，则向多屏交互装置300向洗衣机下发启动内置投放装置的控制指令，保证衣物洗衣程序正常进行。

通过上述的多屏交互方法，解析第一终端100发送的交互信息，向第二终端200推送提示信息，提升终端设备之间的信息交互能力，特别是具有智慧屏的终端设备，而通过解析第二终端200发送的反馈信息，控制第一终端100和/或第二终端200运行，特别是远距离智能控制第一终端100，实现多屏互动。

实施例二

如图3所示，本发明实施例中还提供了一种多屏交互装置300，包括：

接收模块301，与第一终端100和第二终端200通信连接，用于接收第一终端100发送的交互信息和第二终端200发送的反馈信息，实现多屏交互装置300与第一终端100和第二终端200互通互联；

解析模块302，与接收模块301连接，用于解析接收模块301接收到的第一终端100发送的交互信息和第二终端200发送的反馈信息，确定交互数据和反馈数据，保证多屏交互装置300的数据处理速度，获取用户的真实意图；

生成模块303，与解析模块302连接，用于基于确定的交互数据生成提示信息和基于确定的反馈数据生成运行指令，以通过多屏交互装置300向第二终端200推送提示信息和向第一终端100和/或第二终端200下发运行指令；

传输模块304，与生成模块303连接，用于向第二终端200推送提示信息和向第一终端100和/或第二终端200下发运行指令，实现通过多屏交互装置300控制第一终端100和/或第二终端200运行，便于用户远距离操控第一终端100。

通过上述的多屏交互装置300，使得第一终端100的交互信息通过多屏交互装置300在第二终端200的智慧屏上显示，大大减少交互信息传输时间，提升传输效率，同时通过在多屏交互装置300对投屏内容进行处理后，提升信息交互的速度，减少等待时间，更好地实现信息传输的时效性，便于用户控制第一终端100和第二终端200。

实施例三

如图2所示，本发明实施例中还提供了一种多屏交互系统，包括第一终端100、第二终端200和实施例二所述的多屏交互装置300，多屏交互装置300与第一终端100、第二终端200通信连接。

本实施例中，多屏交互装置300接收第一终端100发送的交互信息，解析第一终端100发送的交互信息，确定交互数据，并基于确定的交互数据生成提示信息，向第二终端200推送提示信息，第二终端200显示提示信息，用户基于提示信息进行反馈，第二终端200获取反馈信息，并发送至多屏交互装置300，多屏交互装置300基于反馈信息确定反馈数据，并基于确定的反馈数据向第一终端100和/或第二终端200下发运行指令。

本实施例中，多屏交互装置300与一个或多个第一终端100和第二终端200通信连接，用户名下绑定一个或多个第一终端100和第二终端200，基于第一终端100与第二终端200的关联关系或用户与第二终端200的距离向一个或多个第二终端200下发提示信息。

通过上述的多屏交互系统，多屏交互装置300与第一终端100、第二终端200通信连接，第一终端100和第二终端200通过多屏交互装置300实现信息交互，提升了终端设备的信息交互，特别是通过第二终端200的智慧屏显示提示信息，有利于用户及时获取第一终端100的运行状态，并且远距离智能操控第一终端100。

以上所述仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制，虽然本发明已以较佳实施例揭露如上，然而并非用以限定本发明，任何熟悉本专利的技术人员在不脱离本发明技术方案范围内，当可利用上述提示的技术内容作出些许更动或修饰为等同变化的等效实施例，但凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属于本发明方案的范围内。

Claims (10)

1.一种多屏交互方法，其特征在于，包括：

接收第一终端发送的交互信息，确定交互数据；

基于确定的交互数据向第二终端推送提示信息，其中，所述提示信息用于提示用户对第一终端发送的交互信息进行反馈；

接收第二终端发送的反馈信息，确定反馈数据；

基于确定的反馈数据向第一终端和/或第二终端下发运行指令。

2.根据权利要求1所述的一种多屏交互方法，其特征在于，所述接收第一终端发送的交互信息，确定交互数据包括：

解析第一终端发送的交互信息，确定本次交互对应的第一终端标识、用户标识、与用户关联的第二终端标识、交互信息类型、交互信息标识、交互信息内容中的至少一种第一终端属性信息；

基于确定的第一终端属性信息，确定与第一终端属性信息匹配的交互数据。

3.根据权利要求2所述的一种多屏交互方法，其特征在于，所述交互数据至少包括本次推送对应的第二终端标识、提示信息类型、提示信息标识和提示信息内容。

4.根据权利要求3所述的一种多屏交互方法，其特征在于，所述确定本次推送对应的第二终端标识包括：

获取第一终端与第二终端的关联关系；

基于获取到的第一终端与第二终端的关联关系，确定向一个或多个第二终端推送提示信息。

5.根据权利要求3所述的一种多屏交互方法，其特征在于，所述确定本次推送对应的第二终端标识包括：

检测用户与第二终端的距离；

基于检测到的用户与第二终端的距离，确定向一个或多个第二终端推送提示信息。

6.根据权利要求1所述的一种多屏交互方法，其特征在于，所述接收第二终端发送的反馈信息，确定反馈数据包括：

接收第二终端发送的反馈信息，所述反馈信息包括语音信息、视频信息、文字信息、图片信息、机械操控信息中的一种或多种；

解析第二终端发送的反馈信息，确定本次反馈对应的第二终端标识、与第二终端关联的第一终端标识、反馈信息类型、反馈信息标识、反馈信息内容中的至少一种第二终端属性信息；

基于确定的第二终端属性信息，确定与第二终端属性信息匹配的反馈数据。

7.根据权利要求6所述的一种多屏交互方法，其特征在于，所述解析第二终端发送的反馈信息，确定反馈数据具体包括：

解析第二终端发送的语音信息，确定本次反馈对应的第二终端标识和反馈信息内容，以向第一终端和/或第二终端下发基于确定的反馈信息内容形成的控制指令。

8.根据权利要求7所述的一种多屏交互方法，其特征在于，所述确定本次反馈对应的反馈信息内容具体包括：

对接收到的第二终端发送的语音信息进行噪音处理、语义解析和泛化词匹配，确定反馈信息内容。

9.一种多屏交互装置，其特征在于，包括：

接收模块，与第一终端和第二终端通信连接，用于接收第一终端发送的交互信息和第二终端发送的反馈信息；

解析模块，与接收模块连接，用于解析接收模块接收到的第一终端发送的交互信息和第二终端发送的反馈信息，确定交互数据和反馈数据；

生成模块，与解析模块连接，用于基于确定的交互数据生成提示信息和基于确定的反馈数据生成运行指令；

传输模块，与生成模块连接，用于向第二终端推送提示信息和向第一终端和/或第二终端下发运行指令。

10.一种多屏交互系统，其特征在于，包括第一终端、第二终端和权利要求9所述的多屏交互装置，多屏交互装置与第一终端、第二终端通信连接。

Images