CN115442777A - 无线终端中的投屏方法、装置、无线终端及存储介质 - Google Patents

Abstract

本申请实施例公开了一种无线终端中的投屏方法、装置、无线终端及存储介质，属于投屏技术领域。方法包括：响应于投屏指令，与投屏设备建立数据通信链路；在音频输出终端与无线终端建立有蓝牙链路的情况下，通过蓝牙链路向音频输出终端传输投屏数据中的音频数据，以便音频输出终端基于音频数据输出声音；通过数据通信链路向投屏设备传输投屏数据中的图像数据，以便投屏设备基于图像数据输出画面。采用本申请实施例提供的方案，投屏过程中可以继续使用投屏设备以外的音频输出终端进行音频播放，比如，投屏过程中可以继续通过投屏前与终端连接的蓝牙耳机进行音频播放，提高了投屏过程中音频播放的自由度，避免投屏过程中因音频播放源切换造成的影响。

Description

无线终端中的投屏方法、装置、无线终端及存储介质

技术领域

本申请实施例涉及投屏技术领域，特别涉及一种无线终端中的投屏方法、装置、无线终端及存储介质。

背景技术

投屏是一种将终端侧音画数据传输至投屏设备，以此通过投屏设备展示终端画面并播放终端声音的技术。

比如，当手机与电视接入同一无线网络时，用户可以开启手机的投屏功能，由手机通过无线网络将音画数据传输至电视，从而在电视侧显示手机侧画面，并播放手机侧声音。

发明内容

本申请实施例提供了一种无线终端中的投屏方法、装置、无线终端及存储介质。所述技术方案如下：

一方面，本申请实施例提供了一种无线终端中的投屏方法，所述方法包括：

响应于投屏指令，与投屏设备建立数据通信链路；

在音频输出终端与无线终端建立有蓝牙链路的情况下，通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据，以便所述音频输出终端基于所述音频数据输出声音；

通过所述数据通信链路向所述投屏设备传输投屏数据中的图像数据，以便所述投屏设备基于所述图像数据输出画面。

另一方面，本申请实施例提供了一种投屏装置，所述装置包括：

数据链路建立模块，用于响应于投屏指令，与投屏设备建立数据通信链路；

第一传输模块，用于在音频输出终端与无线终端建立有蓝牙链路的情况下，通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据，以便所述音频输出终端基于所述音频数据输出声音；

第二传输模块，用于通过所述数据通信链路向所述投屏设备传输投屏数据中的图像数据，以便所述投屏设备基于所述图像数据输出画面。

另一方面，本申请实施例提供了一种无线终端，所述无线终端包括处理器和存储器，所述存储器中存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上述方面所述的投屏方法。

另一方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条程序代码，所述程序代码由处理器加载并执行以实现如上述方面所述的投屏方法。

另一方面，本申请实施例提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。电子设备的蓝牙芯片从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该电子设备执行上述方面的各种可选实现方式中提供的无线终端的投屏方法。

本申请实施例提供的技术方案可以带来如下有益效果：

本申请实施例中，无线终端向投屏设备进行投屏过程中，若无线终端与音频输出终端建立有蓝牙链路，无线终端对投屏数据中的图像数据和音频数据进行分离，并通过蓝牙链路向音频输出终端传输音频数据，通过与投屏设备之间的数据通信链路传输图像数据，从而实现投屏过程中画面显示和声音播放的设备分离；采用本申请实施例提供的方案，投屏过程中可以继续使用投屏设备以外的音频输出终端进行音频播放，比如，投屏过程中可以继续通过投屏前与无线终端连接的蓝牙耳机进行音频播放，提高了投屏过程中音频播放的自由度，避免投屏过程中因音频播放源切换造成的影响。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了本申请一个示例性实施例提供的实施环境的示意图；

图2示出了本申请一个示例性实施例提供的投屏方法的流程图；

图3是本申请一个示例性实施例示出的投屏过程的实施示意图；

图4是本申请一个示例性实施例示出的音频数据传输过程的流程图；

图5是本申请另一个示例性实施例示出的投屏过程的实施示意图；

图6是本申请一个示例性实施例示出的切换过程的实施示意图；

图7是本申请一个示例性实施例示出的图像数据和音频数据传输同步过程的流程图；

图8示出了本申请一个实施例提供的投屏过程的交互流程图；

图9示出了本申请一个实施例提供的投屏装置的结构框图；

图10示出了本申请一个示例性实施例提供的无线终端的结构方框图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。

请参考图1，其示出了本申请一个示例性实施例提供的实施环境的示意图，该实施环境中包括无线终端110、音频输出终端120以及投屏设备130。

无线终端110是具有蓝牙以及投屏功能的电子设备，该电子设备可以是智能手机、平板电脑、个人计算机等等，图1中以无线终端110为智能手机为例进行说明，但并不对此构成限定。

音频输出终端120是具有蓝牙以及音频输出功能的电子设备，该电子设备可以是蓝牙耳机、蓝牙音箱等等，图1中以音频输出终端120为蓝牙耳机为例进行说明，单并不对此构成限定。

当无线终端110与音频输出终端120建立蓝牙链路后，无线终端110即通过第一蓝牙链路将音频数据传输至音频输出终端120，由音频输出终端120基于音频数据输出声音。

投屏设备130是具有显示功能的电子设备，该电子设备可以是智能电视、显示器、个人计算机或投影仪等等，图1中以投屏设备130为智能电视为例进行说明。

在一种可能的实施方式中，无线终端110与投屏设备130位于同一无线网络中，当接收到投屏指令时，无线终端110和投屏设备130通过无线网络建立数据通信链路，投屏过程中，无线终端110即通过该数据通信链路向投屏设备130传输投屏数据(画面数据和音频数据)，由投屏设备130输出画面，并通过自身的扬声器输出频。

当然，在其他可能的实施方式中，无线终端110和投屏设备130也可以基于有线连接建立数据通信链路，比如，无线终端110与投屏设备130之间通过数据线相连，当接收到投屏指令时，无线终端110和投屏设备130即通过数据线建立数据通信链路，本实施例对此不作限定。

本申请实施例中，投屏过程中，若无线终端110与音频输出终端120之间建立有蓝牙链路，无线终端110即对接收到投屏数据进行音画数据分离，一方面通过数据通信链路将图像数据传输至投屏设备130，供投屏设备130输出画面，另一方面通过蓝牙链路将音频数据传输至音频输出终端120，供音频输出终端120输出声音，即投屏过程中无线终端的音画可以通过不同设备显示播放。

可选的，投屏过程中，无线终端110还提供音频通路切换功能，通过该功能，用户可以根据需求将音频通路由音频输出终端120切换至投屏设备130，从而通过投屏设备130输出声音。

相关技术中，投屏过程中，无线终端将投屏数据(包括图像数据和音频数据)发送至投屏设备，由投屏设备进行画面显示以及声音播放，即便此时终端与音频输出终端之间存在蓝牙连接，也不会通过音频输出终端播放终端声音。

而本申请实施例提供的方案中，若在无线终端与音频输出终端间存在蓝牙连接的情况下进行投屏，终端通过对投屏数据进行音画数据分离，并通过数据通信链路和蓝牙链路分别向投屏设备和音频输出终端传输图像数据和音频数据，使投屏过程中能够通过音频输出终端播放声音，避免音频播放源由音频输出终端切换为投屏设备所造成的影响。

在一种可能的应用场景下，智能手机与蓝牙耳机建立有蓝牙连接，用户使用智能手机观看视频时，智能手机将音频数据传输至蓝牙耳机，由蓝牙耳机进行音频播放，避免对他人造成干扰。当用户要通过智能电视继续观看视频时，可以通过触发智能手机的投屏功能，使智能手机与智能电视建立数据通信链路。

采用相关技术提供的方案，投屏过程中，智能手机的声音将通过智能电视进行播放，而智能电视外放声音会对他人造成干扰。

而采用本申请实施例提供的方案，在建立数据通信链路后，智能手机将图像数据传输至智能电视，将音频数据传输至蓝牙耳机，使智能电视基于接收到的图像数据显示手机画面，蓝牙耳机基于接收到的音频数据播放手机声音，避免投屏时智能电视外放声音对他人造成干扰。

请参考图2，其示出了本申请一个示例性实施例提供的无线终端中的投屏方法的流程图，本实施例以该方法用于图1所示实施环境中的无线终端110为例进行说明，该方法包括：

步骤201，响应于投屏指令，与投屏设备建立数据通信链路。

可选的，响应于投屏指令，无线终端与投屏设备通过无线网络建立无线数据通信链路，或者，无线终端与投屏设备通过有线连接建立有线数据通信链路。为了方便表述，下述各个实施例以无线数据通信链路为例进行说明。

在一些实施例中，当无线网络中存在多个候选投屏设备时，接收到投屏指令时，无线终端显示各个候选投屏设备的设备标识，并在接收到设备选择操作时，与选中的投屏设备建立数据通信链路。

投屏过程中，无线终端将自身显示画面的图像数据以及自身声音的音频数据作为投屏数据，而数据通信链路则用于传输该投屏数据(全部或部分投屏数据)。

步骤202，在音频输出终端与无线终端建立有蓝牙链路的情况下，通过蓝牙链路向音频输出终端传输投屏数据中的音频数据，以便音频输出终端基于音频数据输出声音。

在一种可能的实施方式中，当无线终端与投屏设备之间建立有数据通信链路时，检测是否与音频输出终端建立有蓝牙链路，若未建立蓝牙链路，无线终端则采用常规投屏流程，将包含音画数据的投屏数据传输至投屏设备；若建立有蓝牙链路，无线终端则对投屏数据进行音画数据分离。

其中，无线终端与音频输出终端之间的蓝牙链路可以在投屏之前建立，也可以在投屏过程中建立(投屏过程中若未建立蓝牙链路，投屏设备则显示无线终端画面并播放终端声音)。

进一步的，对于分离得到的音频数据，无线终端通过蓝牙链路将音频数据传输至音频输出终端，使投屏过程中能够继续通过音频输出终端播放终端声音。

示意性的，如图3所示，投屏前，手机31通过与蓝牙耳机32之间的蓝牙链路，向蓝牙耳机32传输音频数据；而在投屏后，手机31将投屏数据音画分离，并继续通过与蓝牙耳机32之间的蓝牙链路，向蓝牙耳机32传输音频数据。

步骤203，通过数据通信链路向投屏设备传输投屏数据中的图像数据，以便投屏设备基于图像数据输出画面。

无线终端向音频输出终端传输音频数据的同时，通过建立的数据通信链路向投屏设备传输图像数据，由投屏设备对图像数据进行解析，显示终端画面。

需要说明的是，上述步骤202和203同步执行，从而保证音频输出终端输出声音与投屏设备输出画面保持同步。

示意性的，如图3所示，投屏过程中，手机31将图像数据传输至智能电视33，由智能电视33与手机31同步显示手机画面。

可见，采用本申请实施例提供的方案，投屏前后无线终端声音均通过音频输出终端播放，避免投屏过程中因直接通过投屏设备外放终端声音，导致投屏过程对他人造成干扰。

综上所述，本申请实施例中，无线终端向投屏设备进行投屏过程中，若无线终端与音频输出终端建立有蓝牙链路，无线终端对投屏数据中的图像数据和音频数据进行分离，并通过蓝牙链路向音频输出终端传输音频数据，通过与投屏设备之间的数据通信链路传输图像数据，从而实现投屏过程中画面显示和声音播放的设备分离；采用本申请实施例提供的方案，投屏过程中可以继续使用投屏设备以外的音频输出终端进行音频播放，比如，投屏过程中可以继续通过投屏前与无线终端连接的蓝牙耳机进行音频播放，提高了投屏过程中音频播放的自由度，避免投屏过程中因音频播放源切换造成的影响。

在一种可能的应用场景中，在进行投屏前，无线终端已经与音频输出终端建立蓝牙链路(即蓝牙链路在接收到投屏指令之前建立)，并通过蓝牙链路向音频输出终端传输音频数据。当用户在这种情况下触发无线终端进行投屏时，响应于投屏指令，无线终端对投屏数据进行音画数据分离传输，使音频输出终端能够在投屏过程中继续播放终端声音。

这种应用场景下，虽然无线终端与音频输出终端建立蓝牙连接，但用户可能并未使用音频输出终端，为了避免在这种情况下继续通过音频输出终端播放终端声音，在一种可能的实施方式中，在无线终端与音频输出终端建立有蓝牙链路的情况下，终端获取音频输出终端的设备状态，并在音频输出终端处于使用状态时，通过蓝牙链路向音频输出终端传输音频数据。若音频输出终端处于未使用状态，终端则通过数据通信链路向投屏设备传输包含音画数据的投屏数据。

可选的，该设备状态由音频输出终端通过自身的传感器进行检测，并通过蓝牙链路上报至无线终端。比如，当音频输出终端为蓝牙耳机时，蓝牙耳机通过内置传感器确定耳机姿态，并在耳机姿态为入耳状态时，确定处于使用状态。

本实施例中，无线终端基于音频输出终端的设备状态，确定是否对音频数据和图像数据进行分离传输，避免在音频输出终端处于未使用状态时通过音频输出终端播放终端声音，导致需要再次手动切换音频播放源(手动切换至投屏设备)的问题。

在另一种可能的应用场景下，在进行投屏前，无线终端并未与音频输出终端建立蓝牙链路，若在此时进行投屏，图像数据和音频数据都被传输至投屏设备，相应的，投屏设备显示终端画面并播放终端声音。若无线终端在投屏过程中音频输出终端建立蓝牙连接，终端可以根据用户需求，确定是否进行通过音频输出终端播放终端声音。如图4所示，上述步骤202可以包括如下步骤。

步骤202A，与音频输出终端建立蓝牙链路。

可选的，投屏过程中，当接收到蓝牙连接指令时，无线终端与音频输出终端建立蓝牙链路。其中，该音频输出终端可以是与无线终端首次配对的蓝牙设备，或者，是与无线终端进行过历史配对的蓝牙设备。

步骤202B，显示第一切换提示，第一切换提示用于确认是否通过音频输出终端输出声音。

当检测到在投屏过程中与音频输出终端建立蓝牙连接，为了确定是否需要将音频由投屏设备切换至音频输出终端，无线终端显示第一切换提示，以提示用户确认是否通过音频输出终端播放终端声音。

若接收到确认指令，无线终端确定需要切换播放终端声音的设备，并执行步骤202C；若接收到取消指令，无线终端确定继续通过投屏设备播放终端声音。

示意性的，如图5所示，投屏过程中，手机31向电视33传输投屏数据，电视33即根据其中的图像数据显示手机画面，根据其中的音频数据播放手机声音。当手机31与蓝牙耳机32建立蓝牙连接时，手机31显示第一切换提示311，提示是否需要切换蓝牙耳机32播放手机声音。

步骤202C，响应于确认指令，通过蓝牙链路向音频输出终端传输音频数据。

当接收到确认指令时，终端即对投屏数据进行音画数据分离，并通过蓝牙链路向音频输出终端传输音频数据，供音频输出终端进行播放。其中，该确认指令由确认操作触发，该确认操作通过无线终端(比如点击确认选项)接收，或者，通过音频输出终端(比如敲击蓝牙耳机)接收。

示意性的，如图5所示，用户点击确认选项后，手机31即通过该蓝牙链路将音频数据发送至蓝牙耳机32，从而通过蓝牙耳机32播放手机声音。

可选的，响应于取消指令，无线终端继续通过数据通信链路向投屏设备传输图像数据和音频数据。

为了进一步提高投屏过程中音频播放的自由度，投屏过程中用户可以根据需要切换手机声音的音频播放源。在一种可能的实施方式中，响应于切换指令，无线终端通过数据通信链路向投屏设备传输图像数据和音频数据，使投屏设备在显示终端画面的同时，同步播放终端声音。

在一种可能的实施方式中，投屏过程中终端显示音频通路切换界面，当接收到对音频通路切换界面内的音频通路切换操作时，触发切换指令，并通过数据通信链路向投屏设备传输图像数据和音频数据。

示意性的，如图6所示，投屏过程中，电视33首先显示手机画面，并通过蓝牙耳机32播放手机声音；当接收到切换指令时，手机31停止向蓝牙耳机32传输音频数据，并将包含图像数据和音频数据的投屏数据传输至电视33，从而通过电视33的内置扬声器播放手机声音。

可选的，当接收到再次触发的切换指令，终端则重新通过蓝牙链路向音频输出终端传输音频数据。

投屏过程中，若无线终端与音频输出终端之间蓝牙链路的链路质量变差(比如终端距离音频输出终端过远，或者蓝牙链路受到干扰)时，音频数据的传输会受到影响，进而影响音频输出终端侧终端声音的播放。这种情况下，为了提高投屏过程中音画同步性，无线终端可以提示用户将音频切换至投屏设备。

在一种可能的实施方式中，投屏过程中，无线终端确定蓝牙链路的链路质量。其中，该链路质量可以通过测量蓝牙信号的接收信号强度指示(Received Signal StrengthIndication，RSSI)、传输速率、传输时延或丢包率等方式确定，本实施例对链路质量的衡量标准不作限定。

进一步的，无线终端检测蓝牙链路的链路质量是否满足传输需求，若满足传输需求，则继续通过蓝牙链路传输音频数据，若不满足传输需求，则显示第二切换提示，该第二切换提示用于确认是否通过投屏设备播放终端声音。响应于对第二切换提示的确认操作，无线终端触发切换指令，并通过数据通信链路向投屏设备传输图像数据和音频数据。

可选的，该传输需求可以包括如下至少一种：RSSI需求、传输速率需求、传输时延需求以及丢包率需求。本申请实施例对传输需求的具体内容不作限定。

在一个示意性的例子中，当无线终端检测到与音频输出终端之间蓝牙链路的丢包率大于丢包率阈值(比如5％)时，确定蓝牙链路的链路质量不满足传输需求，从而显示第二切换提示，提示用户将终端音频切换至投屏设备。

在一些实施例中，将音频数据的传输通路由蓝牙链路切换至数据通信链路后，无线终端继续监测蓝牙链路的链路质量。当链路质量满足传输需求时，无线终端显示第三切换提示，供用户确认是否将音频数据的传输通路切换至蓝牙链路，从而再次通过音频输出终端播放终端声音。

在一个示意性的例子中，无线终端因蓝牙链路的RSSI低于RSSI阈值，将音频数据切换传输至投屏设备，当后续蓝牙链路的RSSI大于RSSI阈值时，无线终端显示第三切换提示，提示用户可以重新通过音频输出终端播放终端声音。

响应于对第三切换提示的确认操作，无线终端通过蓝牙链路向音频输出终端传输音频数据，从而恢复音频输出终端处终端声音的播放。

本实施例中，投屏过程中，当接收到切换指令时，无线终端切换音频数据的传输链路，从而在投屏设备以及音频输出终端之间实现声音播放切换，进一步提高了投屏过程中声音播放的自由度。

此外，本实施例中，无线终端通过监测蓝牙链路的链路质量，从而基于链路质量进行切换提示，在链路质量较差的情况下，提示切换使用投屏设备播放终端声音，在链路质量恢复的情况下，提供切换回音频输出终端播放终端声音，提高了投屏过程中的音频播放质量。

当终端画面和终端声音均通过投屏设备显示和播放时，由于图像数据和音频数据通过同一链路传输至投屏设备，因此投屏设备处的终端画面与终端声音保持同步；而当终端画面由投屏设备显示，终端声音由音频输出终端播放时，由于终端图像数据和音频数据通过不同链路传输，而不同链路之间传输延时可能不同，因此可能会出现音画不同步的问题。

为了提高投屏过程中的音画同步性，在一种可能的实施方式中，投屏过程中，当通过音频输出终端播放终端声音时，无线终端基于数据通信链路和蓝牙链路的链路状态，对图像数据和音频数据进行传输同步，保证同一时间戳下的投屏数据中，图像数据的显示时刻与音频数据的播放时刻同步。

如图7所示，无线终端对图像数据和音频数据进行传输同步可以包括如下步骤：

步骤701，确定数据通信链路的第一传输时延以及蓝牙链路的第二传输时延。

关于确定链路对应传输时延的具体方式，在一种可能的实施方式中，无线终端通过数据通信链路向投屏设备发送第一时延测量指令，投屏设备接收到第一时延测量指令后，通过数据通信链路发送第一响应指令。无线终端基于第一时延测量指令以及第一响应指令之间的时间间隔，确定数据通信链路的第一传输时延。

类似的，无线终端通过蓝牙链路向音频输出终端发送第二时延测量指令，音频输出终端接收到第二时延测量指令后，通过蓝牙链路发送第二响应指令。无线终端基于第二时延测量指令以及第二响应指令之间的时间间隔，确定蓝牙链路的第二传输时延。

示意性的，当第一时延测量指令的发送时刻为t1，第一响应指令的接收时刻为t2时，数据通信链路的第一传输时延即为(t2-t1)/2；当第二时延测量指令的发送时刻为t1’，第二响应指令的接收时刻为t2’时，蓝牙链路的第二传输时延即为(t2’-t1’)/2。

步骤702，基于第一传输时延和第二传输时延，确定传输时间差。

进一步的，无线终端将第一传输时延与第二传输时延的差值确定为传输时间差。

结合上述步骤中的示例，该传输时间差即为(t2-t1)/2-(t2’-t1’)/2。

步骤703，基于传输时间差对图像数据和音频数据进行传输同步。

在一种可能的实施方式中，无线终端可以基于传输时间差对图像数据或音频进行延迟传输处理，从而利用该延迟抵消音画数据在不同链路中传输所造成的先后时序差异，保证投屏设备中图像解码与音频输出终端中音频解码的同步性。比如，当传输时间差为20ms时(数据通信链路的传输时延高于蓝牙链路的传输时延)，无线终端即延后20ms向音频输出终端发送音频数据。

本实施例中，当通过投屏设备显示终端画面，通过音频输出终端播放终端声音时，无线终端基于数据通信链路以及蓝牙链路之间的传输时间差，对图像数据和音频数据进行传输同步，提高了投屏过程中音画的同步性。

在一个示例性的实施例中，如图8所示，无线终端通过投屏设备和音频输出终端实现投屏时包括如下步骤。

步骤801，无线终端与音频输出终端建立蓝牙链路。

步骤802，无线终端通过蓝牙链路向音频输出终端传输音频数据。

步骤803，音频输出终端基于音频数据输出声音。

步骤804，响应于投屏指令，无线终端与投屏设备建立数据通信链路。

步骤805，无线终端基于数据通信链路和蓝牙链路的链路状态，对投屏数据中的图像数据和音频数据进行传输同步。

步骤806，无线终端通过蓝牙链路向音频输出终端传输投屏数据中的音频数据。

步骤807，音频输出终端基于音频数据输出声音。

步骤808，无线终端通过数据通信链路向投屏设备传输投屏数据中的图像数据。

步骤809，投屏设备基于图像数据输出画面。

步骤810，响应于切换指令，无线终端通过数据通信链路向投屏设备传输图像数据和音频数据。

步骤811，投屏设备基于图像数据输出画面，并基于音频数据输出声音。

上述各个实施例中，投屏设备与音频输出终端之间相互独立，并不存在数据通信。在一种可能的实施方式中，当投屏设备不具备蓝牙功能时，无线终端可以采用上述实施例提供的方案实现投屏；当投屏设备具有蓝牙功能时，在无线终端与音频输出终端建立有蓝牙链路的情况下，无线终端向投屏设备发送蓝牙链路建立请求，以便投屏设备基于蓝牙链路建立请求与音频输出终端建立蓝牙链路。投屏过程中，无线终端通过数据通信链路向投屏设备传输投屏数据，投屏设备则基于图像数据显示终端画面，并通过与音频输出终端之间的蓝牙链路向音频输出终端传输音频数据，由音频输出终端基于音频数据播放终端声音。

相应的，当通过投屏设备向音频输出终端传输音频数据时，投屏设备需要确定与音频输出终端间蓝牙链路的传输时延，从而基于传输时延对图像数据和音频数据进行传输同步。其中，确定传输时延以及基于传输时延进行传输同步的过程可以参考上述步骤701至703，本实施例在此不再赘述。

可选的，投屏过程中，响应于切换指令，无线终端向投屏设备发送切换请求，以便投屏设备停止通过第二蓝牙链路向音频输出终端传输音频数据，并基于音频数据输出声音。

可选的，响应于投屏结束指令，无线终端向投屏设备发送投屏结束请求，以便投屏设备基于投屏结束请求断开数据通信链路以及与音频输出终端之间的第二蓝牙链路。

同时，在音频输出终端支持单蓝牙链路的情况下，投屏设备接收到投屏结束请求后，还会向无线终端发送音频输出终端的蓝牙信息，以便无线终端基于蓝牙信息与音频输出终端重新建立蓝牙链路，保证投屏结束前后音频输出终端处音频播放的连续性。

需要说明的是，上述各个实施例中，以无线终端为执行主体的步骤可以单独实现成为无线终端侧的投屏方法，以投屏设备为执行主体的步骤可以单独实现成为投屏设备侧的投屏方法，本实施例在此不做赘述。

下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。

请参考图9，其示出了本申请一个实施例提供的投屏装置的结构框图。该装置可以包括：

数据链路建立模块901，用于响应于投屏指令，与投屏设备建立数据通信链路；

第一传输模块902，用于在音频输出终端与无线终端建立有蓝牙链路的情况下，通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据，以便所述音频输出终端基于所述音频数据输出声音；

第二传输模块903，用于通过所述数据通信链路向所述投屏设备传输投屏数据中的图像数据，以便所述投屏设备基于所述图像数据输出画面。

可选的，所述装置还包括：

同步模块，用于基于所述数据通信链路和所述蓝牙链路的链路状态，对所述图像数据和所述音频数据进行传输同步。

可选的，所述同步模块，具体用于：

确定所述数据通信链路的第一传输时延以及所述蓝牙链路的第二传输时延；

基于所述第一传输时延和所述第二传输时延，确定传输时间差；

基于所述传输时间差对所述图像数据和所述音频数据进行传输同步。

可选的，所述第一传输模块902，包括：

蓝牙链路建立单元，用于与所述音频输出终端建立所述蓝牙链路；

第一显示单元，用于显示第一切换提示，所述第一切换提示用于确认是否通过所述音频输出终端输出声音；

传输单元，用于响应于确认指令，通过所述蓝牙链路向所述音频输出终端传输所述音频数据。

可选的，所述装置还包括：

第三传输模块，用于响应于取消指令，通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

可选的，所述蓝牙链路在接收到所述投屏指令之前建立；

所述第一传输模块902，包括：

状态获取单元，用于在所述音频输出终端与所述无线终端建立有所述蓝牙链路的情况下，获取所述音频输出终端的设备状态；

传输单元，用于响应于所述音频输出终端处于使用状态，通过所述蓝牙链路向所述音频输出终端传输所述音频数据。

可选的，所述装置包括：

第四传输模块，用于响应于切换指令，通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

可选的，所述第四传输模块，包括：

第一显示单元，用于显示音频通路切换界面；

切换传输单元，用于响应于所述音频通路切换界面内的音频通路切换操作，触发所述切换指令，并通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

可选的，所述第四传输模块，包括：

链路质量确定单元，用于确定所述蓝牙链路的链路质量；

第二显示单元，用于响应于所述链路质量不满足传输需求，显示第二切换提示，所述第二切换提示用于确认是否通过所述投屏设备输出声音；

切换传输单元，用于响应于对所述第二切换提示的确认操作，触发所述切换指令，并通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

可选的，所述装置还包括：

提示模块，用于响应于所述链路质量满足传输需求，显示第三切换提示，所述第三切换提示用于确认是否通过所述音频输出终端输出声音；

第五传输模块，用于响应于对所述第三切换提示的确认操作，通过所述蓝牙链路向所述音频输出终端传输所述音频数据。

综上所述，本申请实施例中，无线终端向投屏设备进行投屏过程中，若无线终端与音频输出终端建立有蓝牙链路，无线终端对投屏数据中的图像数据和音频数据进行分离，并通过蓝牙链路向音频输出终端传输音频数据，通过与投屏设备之间的数据通信链路传输图像数据，从而实现投屏过程中画面显示和声音播放的设备分离；采用本申请实施例提供的方案，投屏过程中可以继续使用投屏设备以外的音频输出终端进行音频播放，比如，投屏过程中可以继续通过投屏前与无线终端连接的蓝牙耳机进行音频播放，提高了投屏过程中音频播放的自由度，避免投屏过程中因音频播放源切换造成的影响。

请参考图10，其示出了本申请一个示例性实施例提供的无线终端的结构方框图。本申请中的无线终端1000可以包括一个或多个如下部件：处理器1010、存储器1020和蓝牙芯片1030。

处理器1010可以包括一个或者多个处理核心。处理器1010利用各种接口和线路连接整个无线终端1000内的各个部分，通过运行或执行存储在存储器1020内的指令、程序、代码集或指令集，以及调用存储在存储器1020内的数据，执行无线终端1000的各种功能和处理数据。可选地，处理器1010可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable Logic Array，PLA)中的至少一种硬件形式来实现。处理器1010可集成中央处理器(Central Processing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)、神经网络处理器(Neural-network Processing Unit，NPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示屏所需要显示的内容的渲染和绘制；NPU用于实现人工智能(Artificial Intelligence，AI)功能；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器1010中，单独通过一块芯片进行实现。

存储器1020可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory，ROM)。可选地，该存储器1020包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器1020可用于存储指令、程序、代码、代码集或指令集。存储器1020可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等；存储数据区可存储根据无线终端1000的使用所创建的数据(比如音频数据、电话本)等。

蓝牙芯片1030是用于实现蓝牙功能的组件。其中，蓝牙芯片1030包含Host和Controller两部分(对应不同蓝牙协议栈)，Host和Controller可以运行在同一芯片上(单芯片架构)，也可以运行在不同芯片上(双芯片架构)。比如，Host运行在处理器上，而Controller运行在蓝牙模块上；或者，Host和Controller均运行在蓝牙芯片1030上。

除此之外，本领域技术人员可以理解，上述附图所示出的无线终端1000的结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。比如，无线终端1000中还包括显示屏、传感器、扬声器、麦克风、电源、WiFi组件等部件，在此不再赘述。

本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质存储有至少一条程序代码，所述程序代码由处理器加载并执行以实现如上各个实施例所述的无线终端中的投屏方法。

本申请实施例还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。电子设备的蓝牙芯片从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该电子设备执行上述方面的各种可选实现方式中提供的无线终端中的投屏方法。

应当理解的是，在本文中提及的“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。另外，本文中描述的步骤编号，仅示例性示出了步骤间的一种可能的执行先后顺序，在一些其它实施例中，上述步骤也可以不按照编号顺序来执行，如两个不同编号的步骤同时执行，或者两个不同编号的步骤按照与图示相反的顺序执行，本申请实施例对此不作限定。

以上所述仅为本申请的可选实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (13)

1.一种无线终端中的投屏方法，其特征在于，所述方法包括：

响应于投屏指令，与投屏设备建立数据通信链路；

在音频输出终端与无线终端建立有蓝牙链路的情况下，通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据，以便所述音频输出终端基于所述音频数据输出声音；

通过所述数据通信链路向所述投屏设备传输投屏数据中的图像数据，以便所述投屏设备基于所述图像数据输出画面。

2.根据权利要求1所述的方法，其特征在于，所述通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据之前，所述方法包括：

基于所述数据通信链路和所述蓝牙链路的链路状态，对所述图像数据和所述音频数据进行传输同步。

3.根据权利要求2所述的方法，其特征在于，所述基于所述数据通信链路和所述蓝牙链路的链路状态，对所述图像数据和所述音频数据进行传输同步，包括：

确定所述数据通信链路的第一传输时延以及所述蓝牙链路的第二传输时延；

基于所述第一传输时延和所述第二传输时延，确定传输时间差；

基于所述传输时间差对所述图像数据和所述音频数据进行传输同步。

4.根据权利要求1至3任一所述的方法，其特征在于，所述在音频输出终端与无线终端建立有蓝牙链路的情况下，通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据，包括：

与所述音频输出终端建立所述蓝牙链路；

显示第一切换提示，所述第一切换提示用于确认是否通过所述音频输出终端输出声音；

响应于确认指令，通过所述蓝牙链路向所述音频输出终端传输所述音频数据。

5.根据权利要求4所述的方法，其特征在于，所述显示音频通路切换提示之后，所述方法还包括：

响应于取消指令，通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

6.根据权利要求1至3任一所述的方法，其特征在于，所述蓝牙链路在接收到所述投屏指令之前建立；

所述在音频输出终端与无线终端建立有蓝牙链路的情况下，通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据，包括：

在所述音频输出终端与所述无线终端建立有所述蓝牙链路的情况下，获取所述音频输出终端的设备状态；

响应于所述音频输出终端处于使用状态，通过所述蓝牙链路向所述音频输出终端传输所述音频数据。

7.根据权利要求1至3任一所述的方法，其特征在于，所述方法还包括：

响应于切换指令，通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

8.根据权利要求7所述的方法，其特征在于，所述响应于切换指令，通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据，包括：

显示音频通路切换界面；

响应于所述音频通路切换界面内的音频通路切换操作，触发所述切换指令，并通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

9.根据权利要求7所述的方法，其特征在于，所述响应于切换指令，通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据，包括：

确定所述蓝牙链路的链路质量；

响应于所述链路质量不满足传输需求，显示第二切换提示，所述第二切换提示用于确认是否通过所述投屏设备输出声音；

响应于对所述第二切换提示的确认操作，触发所述切换指令，并通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据。

10.根据权利要求9所述的方法，其特征在于，所述响应于对所述第二切换提示的确认操作，触发所述音频通路切换指令，并通过所述数据通信链路向所述投屏设备传输所述图像数据和所述音频数据之后，所述方法还包括：

响应于所述链路质量满足传输需求，显示第三切换提示，所述第三切换提示用于确认是否通过所述音频输出终端输出声音；

响应于对所述第三切换提示的确认操作，通过所述蓝牙链路向所述音频输出终端传输所述音频数据。

11.一种投屏装置，其特征在于，所述装置包括：

数据链路建立模块，用于响应于投屏指令，与投屏设备建立数据通信链路；

第一传输模块，用于在音频输出终端与无线终端建立有蓝牙链路的情况下，通过所述蓝牙链路向所述音频输出终端传输投屏数据中的音频数据，以便所述音频输出终端基于所述音频数据输出声音；

第二传输模块，用于通过所述数据通信链路向所述投屏设备传输投屏数据中的图像数据，以便所述投屏设备基于所述图像数据输出画面。

12.一种无线终端，其特征在于，所述无线终端包括处理器和存储器，所述存储器中存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如权利要求1至10任一所述的投屏方法。

13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一条程序代码，所述程序代码由处理器加载并执行以实现如权利要求1至10任一所述的投屏方法。

Images