CN115686401A - 一种投屏方法、电子设备及系统 - Google Patents

Abstract

本申请提供了一种投屏方法、电子设备及系统，所述方法包括：所述第一电子设备获取第二电子设备的物理方向；所述第一电子设备基于所述物理方向确定虚拟显示器的显示方向；所述第一电子设备将所述虚拟显示器的显示方向确定为所述虚拟显示器上显示的应用窗口的显示方向；所述第一电子设备向所述第二电子设备发送所述虚拟显示器的显示数据。实施本申请实施例，可以在投屏过程中实现被投屏设备上投屏窗口的显示方向的切换，提高用户的使用体验感。

Description

一种投屏方法、电子设备及系统

技术领域

本申请实施例涉及无线显示技术，尤其涉及一种投屏方法、电子设备及系统。

背景技术

投屏技术使得手机、平板等电子设备上显示的图像资源可以共享到电视、智慧屏等电子设备上。两个电子设备之间进行投屏时，可以通过不同的投屏技术，其中，投屏技术包括异源投屏技术和同源投屏技术。

目前，在异源投屏的过程中，被投屏设备上投屏窗口的显示方向不支持跟随被投屏设备的转屏而变化。以平板为被投屏设备为例，在用户将平板由竖屏旋转至横屏时，平板上的投屏窗口的显示方向仍为竖屏显示，平板上的投屏窗口无法跟随平板的转屏而切换至横屏显示，不符合用户的观看角度，用户的转屏体验差。

如何在投屏过程中实现被投屏设备上投屏窗口的显示方向的切换，提高用户的使用体验感，是当前及未来的研究方向。

发明内容

本申请提供了一种投屏方法、电子设备及系统，可以在投屏过程中实现被投屏设备投屏窗口的显示方向的切换，提高用户的使用体验感。

第一方面，本申请实施例提供了一种投屏方法，应用于第一电子设备，该方法包括：

第一电子设备获取第二电子设备的物理方向；

第一电子设备基于物理方向确定虚拟显示器的显示方向；

第一电子设备将虚拟显示器的显示方向确定为虚拟显示器上显示的应用窗口的显示方向；

第一电子设备向第二电子设备发送虚拟显示器的显示数据。

上述物理方向可以包括横屏方向、反横屏方向、竖屏方向和反竖屏方向。

实施第一方面的方法，第一电子设备向第二电子设备的投屏过程中，第一电子设备可以基于第二电子设备的物理方向调整虚拟显示器的显示方向，进而，将虚拟显示器上的应用窗口的显示方法调整为虚拟显示器的显示方向。因此，第二电子设备在显示上述虚拟显示器的显示数据时，该显示数据渲染显示的投屏窗口的显示方向是基于第二电子设备的物理方向确定的，符合用户的观看习惯，极大提高了用户的使用体验感。

结合第一方面，在一种可能的实现方式中，第一电子设备基于物理方向确定虚拟显示器的显示方向，包括：

第一电子设备将物理方向确定为虚拟显示器的显示方向。

实施本申请实施例，由于第一电子设备将第二电子设备的物理方向确定为虚拟显示器的显示方向，因而第二电子设备上显示的虚拟显示器的显示数据的显示方向是第二电子设备的物理方向，符合用户的观看习惯，可以提高用户的使用体验感。

结合第一方面，在一种可能的实现方式中，第一电子设备基于物理方向确定虚拟显示器的显示方向，包括：

第一电子设备获取应用窗口支持的显示方向；

第一电子设备在应用窗口支持物理方向时，将物理方向确定为虚拟显示器的显示方向。

结合第一方面，在一种可能的实现方式中，第一电子设备在应用窗口支持物理方向时，将物理方向确定为虚拟显示器的显示方向，包括：

第一电子设备在应用窗口支持的方向包括横屏方向且物理方向为横屏方向时，将虚拟显示器的显示方向确定为横屏方向；或者，

第一电子设备在应用窗口支持的方向包括反横屏方向且物理方向为反横屏方向时，将虚拟显示器的显示方向确定为反横屏方向；或者，

第一电子设备在应用窗口支持的方向包括竖屏方向且物理方向为竖屏方向时，将虚拟显示器的显示方向确定为竖屏方向；或者，

第一电子设备在应用窗口支持的方向包括反竖屏方向且物理方向为反竖屏方向时，将虚拟显示器的显示方向确定为反竖屏方向。

结合第一方面，在一种可能的实现方式中，应用窗口为第一应用窗口，第一电子设备基于物理方向确定虚拟显示器的显示方向，包括：

第一电子设备接收第二电子设备发送的第一用户操作，第一用户操作用于触发显示第一应用窗口；

第一电子设备基于第一用户操作获取第一应用窗口支持的显示方向；

第一电子设备在第一应用窗口支持物理方向且物理方向与当前虚拟显示器的显示方向不一致时，将当前虚拟显示器的显示方向调整为物理方向；或者，

第一电子设备在第一应用窗口支持物理方向且物理方向与当前虚拟显示器的显示方向一致时，不调整当前虚拟显示器的显示方向。

实施本申请实施例，用户可以在第二电子设备上打开第一应用窗口，相应的，第二电子设备可以在感应到用户打开第一应用窗口时，将用户触发显示第一应用窗口的用户操作发送至第一电子设备，进而，第一电子设备可以基于第一应用窗口支持的显示方向和当前第二电子设备的物理方向来确定虚拟显示器的显示方向。实施本实施例，可以在投屏界面上的应用窗口发生改变时调整投屏窗口的显示方向，提高用户体验感。

结合第一方面，在一种可能的实现方式中，方法还包括：

第一电子设备在应用窗口不支持虚拟显示器的显示方向时，在虚拟显示器上非全屏显示应用窗口。

实施本申请实施例，第二电子设备可以非全屏显示投屏的应用窗口，可以避免第二电子设备上显示的投屏内容的扭曲变形。可以理解的，在上述应用窗口不支持虚拟显示器的显示方向时全屏显示上述应用窗口，则需要对该应用窗口的显示内容进行拉伸等操作，可能造成显示内容的变形，影响用户的观感。

第二方面，本申请实施例提供了一种投屏方法，其特征在于，应用于第二电子设备，方法包括：

第二电子设备向第一电子设备发送第二电子设备的物理方向，物理方向用于确定第一电子设备的虚拟显示器的显示方向；

第二电子设备接收第一电子设备发送的显示数据，显示数据是虚拟显示器的显示数据，虚拟显示器上显示的应用窗口的显示方向与虚拟显示器的显示方向相同；

第二电子设备显示显示数据。

结合第二方面，在一种可能的实现方式中，第二电子设备向第一电子设备发送第二电子设备的物理方向包括：

第二电子设备通过传感器获取第二电子设备的物理方向；

第二电子设备在物理方向改变时，向第一电子设备发送物理方向。

结合第二方面，在一种可能的实现方式中，第二电子设备的物理方向发生改变包括第二电子设备在横屏方向、反横屏方向、竖屏方向和反竖屏方向四个方向中任两个方向之间的切换和/或第二电子设备的物理角度变化。

结合第二方面，在一种可能的实现方式中，第二电子设备向第一电子设备发送第二电子设备的物理方向，包括：

第二电子设备在与第一电子设备建立通信连接后，显示提示信息和第一控件，提示信息用于提示用户是否使用异源投屏来进行投屏；

第二电子设备接收针对第一控件输入的用户操作，用户操作用于指示第一电子设备向第二电子设备进行异源投屏；

第二电子设备响应于用户操作向第一电子设备发送物理方向。

结合第二方面，在一种可能的实现方式中，虚拟显示器的显示方向为物理方向。

结合第二方面，在一种可能的实现方式中，在应用窗口支持物理方向时虚拟显示器的显示方向为物理方向；或者，在应用窗口的显示方向不包括物理方向时虚拟显示器的显示方向为应用窗口支持的显示方向。

第三方面，本申请提供一种电子设备。该电子设备可包括存储器和处理器。其中，存储器可用于存储计算机程序。处理器可用于调用计算机程序，使得电子设备执行如第一方面或第一方面中任一可能的实现方式。

第四方面，本申请提供一种电子设备。该电子设备可包括存储器和处理器。其中，存储器可用于存储计算机程序。处理器可用于调用计算机程序，使得电子设备执行如第二方面或第二方面中任一可能的实现方式。

第五方面，本申请提供一种包含指令的计算机程序产品，其特征在于，当上述计算机程序产品在电子设备上运行时，使得该电子设备执行如第一方面或第一方面中任一可能的实现方式。

第六方面，本申请提供一种包含指令的计算机程序产品，其特征在于，当上述计算机程序产品在电子设备上运行时，使得该电子设备执行如第二方面或第二方面中任一可能的实现方式。

第七方面，本申请提供一种计算机可读存储介质，包括指令，其特征在于，当上述指令在电子设备上运行时，使得该电子设备执行如第一方面或第一方面中任一可能的实现方式。

第八方面，本申请提供一种计算机可读存储介质，包括指令，其特征在于，当上述指令在电子设备上运行时，使得该电子设备执行如第二方面或第二方面中任一可能的实现方式。

第九方面，本申请实施例提供了一种投屏系统，该投屏系统包括第一电子设备和第二电子设备，该第一电子设备为第三方面描述的电子设备，该第二电子设备为第四方面描述的电子设备。

可以理解地，上述第三方面和第四方面提供的电子设备、第五方面和第六方面提供的计算机程序产品、第七方面和第八方面提供的计算机可读存储介质均用于执行本申请实施例所提供的方法。因此，其所能达到的有益效果可参考对应方法中的有益效果，此处不再赘述。

附图说明

图1是本申请实施例提供的一种第一电子设备和第二电子设备显示图像资源的示意图；

图2是本申请实施例提供的一种异源投屏技术的原理示意图；

图3是本申请实施例提供的一种电子设备的物理方向的示意图；

图4A和图4B是本申请实施例提供的窗口的显示方向的示意图；

图5是本申请实施例提供的一种第二电子设备转屏时显示图像资源的示意图；

图6是本申请实施例提供的一种投屏系统的架构示意图；

图7A是本申请实施例提供的一种第一电子设备100的硬件结构示意图；

图7B是本申请实施例提供的第一电子设备100的软件结构框图；

图7C是本申请实施例提供的一种第二电子设备200的硬件结构示意图；

图8是本申请实施例提供的一种投屏方法的流程示意图；

图9A-图9E是本申请实施例提供的第一电子设备与第二电子设备建立通信连接的用户界面；

图10是本申请实施例提供的一种创建虚拟显示器的示意图；

图11是本申请实施例提供的一种全屏显示的示意图；

图12是本申请实施例提供的一种应用窗口的示意图；

图13A是本申请实施例提供的一种第二电子设备转屏的场景示意图；

图13B是本申请实施例提供的一种调整虚拟显示器的显示方向的示意图；

图13C是本申请实施例提供的一种虚拟显示器的显示界面示意图；

图13D是本申请实施例提供的一种第二电子设备的显示界面示意图；

图14A是本申请实施例提供的一种用户打开新窗口的场景示意图；

图14B是本申请实施例提供的另一种第二电子设备的显示界面示意图。

具体实施方式

下面将结合附图对本申请实施例中的技术方案进行清楚、详尽地描述。其中，在本申请实施例的描述中，除非另有说明，“/”表示或的意思，例如，A/B可以表示A或B；文本中的“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况，另外，在本申请实施例的描述中，“多个”是指两个或多于两个。

以下，术语“第一”、“第二”仅用于描述目的，而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征，在本申请实施例的描述中，除非另有说明，“多个”的含义是两个或两个以上。

本申请以下实施例中的术语“用户界面(user interface，UI)”，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面是通过java、可扩展标记语言(extensible markuplanguage，XML)等特定计算机语言编写的源代码，界面源代码在电子设备上经过解析，渲染，最终呈现为用户可以识别的内容。用户界面常用的表现形式是图形用户界面(graphicuser interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的文本、图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。

两个电子设备之间进行投屏时，可以通过不同的投屏技术，其中，投屏技术包括异源投屏技术和同源投屏技术。

在一些实施例中，第一电子设备也被称之为源设备或投屏设备，第二电子设备也被称之为目标设备或被投屏设备。为方便描述，在本申请实施例中，将向其他设备发送投屏内容的电子设备称为第一电子设备，将接收并显示投屏内容的设备称为第二电子设备。

下面结合图1和图2，对异源投屏技术和同源投屏技术进行介绍。图1示例示出上述两种投屏技术中，第一电子设备和第二电子设备显示图像资源的示意图。

1、同源投屏技术

如图1中的(A)所示，第一电子设备可以将其显示画面投屏到第二电子设备上，第二电子设备上会有一个投屏窗口来显示第一电子设备的投屏内容。当用户在第一电子设备上操作触发第一电子设备显示内容刷新时，第二电子设备上投屏窗口的投屏画面也会跟着刷新变化。同理，当用户在第二电子设备的投屏窗口上操作时，第一电子设备上的画面也会和第二电子设备投屏的窗口同步变化刷新，此为同源投屏。简单来说，同源投屏指的是目标设备(即第二电子设备)上投屏窗口的显示内容与源设备(即第一电子设备)上显示的画面内容永远是一致的，是同步变化的。

2、异源投屏技术

异源投屏指的是第一电子设备上的显示内容与第二电子设备的投屏窗口的显示内容不一致。

如图1中的(B)所示，第二电子设备上显示的内容是从第一电子设备上投屏过来的，而第一电子设备上显示的是另外的内容，即第一电子设备的显示内容与第二电子设备上投屏窗口的显示内容是不一致的，是相互独立的，第一电子设备上操作显示内容时不会触发第二电子设备上投屏窗口内容的刷新，同理，第二电子设备上投屏窗口的内容被触发刷新时，第一电子设备上显示内容不会变化。

图2示例性示出了异源投屏技术的原理示意图。

如图2所示，第一电子设备存在两个显示器(display)，分别为主显示器和虚拟显示器。其中，主显示器的画面在第一电子设备上可见，虚拟显示器显示的画面对第一电子设备的用户是不可见的。在异源投屏时，第一电子设备会针对第二电子设备创建一个虚拟显示器，进而将虚拟显示器的显示内容镜像投屏到第二电子设备上，也即是，虚拟显示器的显示内容会通过跨设备传输到第二电子设备上进行显示。需要说明的是，本申请实施例中的虚拟显示器为显示内容将镜像投屏到第二电子设备上的虚拟显示器。

如图2所示，第一电子设备可以创建两个显示器，分别为第一电子设备对应的主显示器和虚拟显示器。其中，主显示器的显示内容在第一电子设备的显示屏上显示，虚拟显示器的显示内容在第二电子设备的显示屏上显示，也即是，虚拟显示器对第一电子设备的用户不可见，主显示器才对第一电子设备用户可见。其中，主显示器和虚拟显示器可独立运行两个任务，也即是说，主显示器和虚拟显示器可分别运行两个独立的应用。具体的，第一电子设备将虚拟显示器中应用运行时的显示数据以数据流的形式通过跨设备通道实时传输给第二电子设备，相应的，第二电子设备上的投屏应用在接收该数据流后将其在第二电子设备的显示屏中的投屏窗口中显示出来，因此，用户在第二电子设备上的投屏窗口看到的内容即是第一电子设备上虚拟显示器的应用显示内容，可见，应用其实是运行在第一电子设备上的。

本申请的发明人发现，在第一电子设备向第二电子设备进行异源投屏的过程中，第二电子设备上的投屏内容不支持跟随第二电子设备的转屏而变化，转屏体验差，降低了用户体验感。

首先，下面先对本申请实施例中涉及的技术术语进行描述。

1、电子设备的物理方向

电子设备的物理方向(又可以称为物理状态或传感器方向)是一个物理属性值，具体是用户对电子设备的持握状态。具体的，电子设备的物理方向是指电子设备的显示屏的物理方向，本申请实施例中将电子设备的显示屏的物理方向统称为电子设备的物理方向。

在一些实施例中，电子设备的物理方向可以分为横屏方向和竖屏方向。

在用户使用电子设备时，电子设备的显示屏与水平方向基本平行(或夹角较小)的一边，可以称为电子设备的宽；电子设备的显示屏与竖直方向基本平行(或夹角较小)的一边，可以称为电子设备的高。横屏方向是指，电子设备的宽大于高的状态；竖屏方向是指，电子设备的高大于宽的状态。

具体来说，用户在使用电子设备时，电子设备可以为横屏方向，也可以为竖屏方向。在横屏方向下，电子设备的显示屏基本呈横条形。在竖屏方向下，电子设备的显示屏基本成竖条形。具体的，在横屏方向下和在竖屏方向下，电子设备的显示屏的高宽比是不同的。显示屏的高宽比又可以称之为显示屏的纵横比，为显示屏的高度与宽度的比值。在横屏方向下，显示屏的高度为显示屏的短边的长度，显示屏的宽度为显示屏的长边的长度。在竖屏方向下，显示屏的高度为显示屏的长边的长度，显示屏的宽度为显示屏的短边的长度。其中，显示屏的长边为显示屏的四条边中相互平行且相等的两条长一点的边，显示屏的短边为显示屏的四条边中相互平行且相等的两条短一点的边。

请参见图3，图3是本申请实施例提供的一种电子设备的物理方向的示意图。例如，电子设备在如图3中的(a)所示横屏方向下，显示屏的高度为Y，显示屏的宽度为X，则显示屏的高宽比为Y/X，其中Y/X<1。需要说明的是，当电子设备在如图3中(a)所示的横屏方向下倾斜或旋转一个较小的角度(例如该角度不大于第一预设阈值，比如20°、15°、5°等)，电子设备仍然视为处于横屏方向。例如，电子设备在图3中(a)所示的横屏方向下，顺时针旋转的角度为α，使得电子设备处于图3中(b)所示的状态，α不大于第一预设阈值时，电子设备将图3中(b)所示的状态视为横屏方向。再例如，电子设备在图3中(c)所示的竖屏方向下，显示屏的高度为X，显示屏的宽度为Y，则显示屏的高宽比为X/Y，其中，X/Y＞1。还需要说明的是，当电子设备在如图3中(c)所示的竖屏方向下倾斜或旋转一个较小的角度(例如该角度不大于第二预设阈值，比如20°、15°、5°等)，电子设备仍然视为处于竖屏方向。例如，电子设备在图3中(c)所示的竖屏方向下，逆时针旋转的角度为β，使得电子设备处于图3中(d)所示的状态，β不大于第二预设阈值时，电子设备将图3中(d)所示的状态视为竖屏方向。可以理解的是，第一预设阈值和第二预设阈值可以相同，也可以不同，可以是根据实际需要进行设定的，对此不作限定。

在另一些实施例中，电子设备的物理方向也可以分为四个物理方向，分别是横屏方向、反横屏方向、竖屏方向和反竖屏方向。例如，若确定图3中的(c)所示的电子设备的物理方向为竖屏方向，则竖屏方向的电子设备顺时针旋转90度后的物理方向可以为横屏方向，竖屏方向的电子设备顺时针旋转180度后的物理方向可以为反竖屏方向，竖屏方向的电子设备顺时针旋转360度后的物理方向可以为反横屏方向。其中，如何确定何种状态为横屏方向和反横屏方向可以根据用户习惯或摄像头的位置等来确定，此处不做限定。例如，图3中的(c)所示的电子设备的下方有按键，故将图3中的(c)所示的电子设备的物理方向确定为竖屏方向。

需要说明的是，电子设备的物理方向的改变可以是指电子设备从横屏方向或竖屏方向之间进行切换，也可以是指电子设备在横屏或竖屏方向下旋转了一定角度，具体参见以下相关实施例，此处不作限定。

2、窗口的显示方向

在实际应用过程中，电子设备的屏幕显示模式包括横屏显示模式和竖屏显示模式。屏幕显示时，内容显示在屏幕内，当竖直摆放电子设备时，当前的屏幕显示模式为竖屏显示模式，当前屏幕内容的显示方向与电子设备的长边竖直的方向一致，屏幕上显示的字符、用户界面等内容的显示方向也是竖直的。当横向摆放电子设备时，当前的屏幕显示模式为横屏显示模式，当前屏幕内容显示方向与电子设备的短边竖直的方向一致，屏幕上显示的字体、用户界面等内容的显示方向也是竖直的。

当用户将电子设备翻转至横屏方向时，电子设备还可以配合横屏方向采用横屏方向显示界面；当用户将电子设备翻转至竖屏方向时，电子设备还可以配合竖屏方向采用竖屏方向显示界面。

与上述屏幕的显示方向相同，窗口的显示方向是指窗口内显示内容的显示方向。如图4A中的(A)所示，窗口的显示方向与电子设备显示屏的长边竖直的方向一致，此时，窗口的显示方向为竖屏方向；如图4A中的(B)所示，窗口的显示内容的显示方向与电子设备显示屏的短边竖直的方向一致，此时，窗口的显示方向为横屏方向。

进一步的，窗口的显示方向还可以分为横屏方向、反横屏方向、竖屏方向和反竖屏方向。例如，若确定图4B中的(A)所示的电子设备的显示方向为竖屏方向，则该竖屏显示方向顺时针旋转180度可以得到图4B中的(B)中所示的反竖屏方向；若确定图4B中的(C)所示的电子设备的显示方向为横屏方向，则该竖屏显示方向顺时针旋转180度可以得到图4B中的(B)中所示的反横屏方向。需要说明的是，竖屏方向可以包括如图4B中的(A)所示的竖屏方向和如图4B中的(B)所示的反竖屏方向，横屏方向可以包括如图4B中的(C)所示的横屏方向和如图4B中的(D)所示的反横屏方向。

基于以上内容，图5示例性示出现有的异源投屏技术中，在第二电子设备转屏时，第二电子设备显示图像资源的示意图。如图5所示，第二电子设备在物理方向为横屏方向时，第二电子设备的显示内容为横屏显示，符合用户的观看角度，此时，用户手持横屏方向的第二电子设备时可以正常观看第二电子设备的显示内容。当第二电子设备从物理横屏旋转为物理竖屏时，第二电子设备中显示内容并没有跟随第二电子设备的旋转发生改变，第二电子设备的显示内容仍为横屏显示，不符合用户的观看角度，用户的视觉体验较差。

为了解决上述问题，本申请以下实施例提供了一种投屏方法，在该方法中，手机、平板等第一电子设备和第二电子设备使用异源投屏技术共享图像资源的过程中，第二电子设备通过将第二电子设备的物理方向发送至第一电子设备，以使第一电子设备基于所述第二电子设备的物理方向调整第二电子设备上的投屏窗口的显示方向，具体实现可参考后续实施例的相关描述，在此不赘述。

实施本申请实施例提供的方法，可以自动调整投屏过程中第二电子设备上投屏窗口的显示方向，从而提高用户投屏过程中的视觉体验感。

在本申请以下实施例中，投屏是指第一电子设备(如手机、平板等)通过和第二电子设备(如电视、智慧屏等)之间建立的通信连接，直接点对点地向第二电子设备传输图像资源，由第二电子设备显示该图像资源的投屏技术。其中，第一电子设备也可以被称为发送端/源端(source端)，第二电子设备也可以被称为接收端(sink端)。

第一电子设备和第二电子设备之间建立的通信连接可包括但不限于：无线保真直连(wireless fidelity direct，Wi-Fi direct)(又称为无线保真点对点(wirelessfidelity peer-to-peer，Wi-Fi P2P))通信连接、蓝牙通信连接、近场通信(near fieldcommunication，NFC)连接等等。

可理解的，投屏技术只是本实施例中所使用的一个词语，其代表的含义在本实施例中已经记载，其名称并不能对本实施例构成任何限制。另外，在本申请其他一些实施例中，投屏技术也可以被称为例如多屏互动、全分享投屏、无线显示等其他名词。

在本申请以下实施例中，第一电子设备和第二电子设备之间共享的图像资源可包括以下任意一项或多项的组合：视频、文字、图片、照片、音频或表格等等。例如，图像资源可以是电影、电视剧、短视频、音乐剧等等。

在本申请以下实施例中，第一电子设备和第二电子设备之间共享的图像资源可以是网络图像资源，也可以是本地图像资源，还可以是网络图像资源和本地图像资源的组合。其中，网络图像资源是指第一电子设备从网络中获取到的图像资源，例如第一电子设备运行视频类应用程序时从提供视频服务的服务器处获取到的视频。本地图像资源是指第一电子设备本地存储或生成的图像资源，例如第一电子设备本地存储的图片或表格等。

为了更加清楚、详细地介绍本申请实施例提供的投屏方法，下面先介绍本申请实施例提供的投屏系统10。

如图6所示，该投屏系统10可以包括第一电子设备100和第二电子设备200。其中，第一电子设备100可以通过无线通信方式(例如，无线保真(wireless fidelity，Wi-Fi)，蓝牙等)和第二电子设备200建立无线连接。第一电子设备100可以通过无线连接向第二电子设备200传输文件数据，或者，第一电子设备100可以将应用界面投屏至第二电子设备200上显示等。在投屏系统10中，可以使用实时流传输协议(Real Time Streaming Protocol，RTSP)控制实时数据的传输。RTSP是用来控制声音或影像的多媒体串流协议，并允许同时多个串流需求控制。第一电子设备100可以通过RTSP控制数据流的传输。

例如，在利用在Wi-Fi点对点(peer to peer，P2P)技术进行投屏业务时，第一电子设备100可以将压缩之后的H.264格式的视频或高级音频编码(advanced audio coding，AAC)格式的音频混合成传输流(transport stream，TS)文件，并使用RTSP协议将该TS文件通过Wi-Fi P2P发送给第二电子设备200，第二电子设备200通过RTSP协议接收来自第一电子设备100的TS文件并解码播放。其中，H.264是视频编解码协议，ACC是音频编解码协议。

其中，在本申请实施例中，第一电子设备100可以是手机、平板电脑、桌面型计算机、膝上型计算机、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobilepersonal computer，UMPC)、上网本，以及蜂窝电话、个人数字助理(personal digitalassistant，PDA)、增强现实(augmented reality，AR)设备、虚拟现实(virtual reality，VR)设备、人工智能(artificial intelligence,AI)设备、可穿戴式设备、车载设备、智能家居设备和/或智慧城市设备等等。

第二电子设备200可以是平板、显示器、电视机、桌面型计算机、膝上型计算机、手持计算机、笔记本电脑、超级移动个人计算机、上网本，增强现实设备、虚拟现实设备、人工智能设备、车载设备、智能家居设备等等。

本申请提供的实施例中，第一电子设备100和第二电子设备200使用投屏共享图像资源的过程的具体实现，可参考后续实施例的相关描述，在此不赘述。

在本申请的一些实施例中，投屏系统10还可包括：Wi-Fi接入点300，和服务器400。第一电子设备100可以接入Wi-Fi接入点300。服务器400可以提供网络音视频服务。示例性地，服务器400可以为存储有多种多样的图像资源的服务器，例如可以是提供音视频服务的华为视频服务器。服务器400的数量可以为一个，也可以为多个。当第一电子设备100使用投屏技术向第二电子设备200共享图像资源时，示例性地，该图像资源可以是第一电子设备100运行视频类应用程序时通过Wi-Fi接入点300向服务器400获取的网络视频。

图7A示出了第一电子设备100的硬件结构示意图。

下面以电子设备100为例对实施例进行具体说明。应该理解的是，电子设备100可以具有比图中所示的更多的或者更少的部件，可以组合两个或多个的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

电子设备100可以包括：处理器110，外部存储器接口120，内部存储器121，通用串行总线(universal serial bus，USB)接口130，充电管理模块140，电源管理模块141，电池142，天线1，天线2，移动通信模块150，无线通信模块160，音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，传感器模块180，按键190，马达191，指示器192，摄像头193，显示屏194以及用户标识模块(subscriber identification module，SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A，陀螺仪传感器180B，气压传感器180C，磁传感器180D，加速度传感器180E，距离传感器180F，接近光传感器180G，指纹传感器180H，温度传感器180J，触摸传感器180K，环境光传感器180L，骨传导传感器180M等。

可以理解的是，本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中，电子设备100可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。

处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，存储器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。

其中，控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。

处理器110中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器110的等待时间，因而提高了系统的效率。

在一些实施例中，处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit，I2C)接口，集成电路内置音频(inter-integrated circuitsound，I2S)接口，脉冲编码调制(pulse code modulation，PCM)接口，通用异步收发传输器(universal asynchronous receiver/transmitter，UART)接口，移动产业处理器接口(mobile industry processor interface，MIPI)，通用输入输出(general-purposeinput/output，GPIO)接口，用户标识模块(subscriber identity module，SIM)接口，和/或通用串行总线(universal serial bus，USB)接口等。

I2C接口是一种双向同步串行总线，包括一根串行数据线(serial data line，SDA)和一根串行时钟线(derail clock line，SCL)。在一些实施例中，处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K，充电器，闪光灯，摄像头193等。例如：处理器110可以通过I2C接口耦合触摸传感器180K，使处理器110与触摸传感器180K通过I2C总线接口通信，实现电子设备100的触摸功能。

I2S接口可以用于音频通信。在一些实施例中，处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合，实现处理器110与音频模块170之间的通信。在一些实施例中，音频模块170可以通过I2S接口向无线通信模块160传递音频信号，实现通过蓝牙耳机接听电话的功能。

PCM接口也可以用于音频通信，将模拟信号抽样，量化和编码。在一些实施例中，音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中，音频模块170也可以通过PCM接口向无线通信模块160传递音频信号，实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。

UART接口是一种通用串行数据总线，用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中，UART接口通常被用于连接处理器110与无线通信模块160。例如：处理器110通过UART接口与无线通信模块160中的蓝牙模块通信，实现蓝牙功能。在一些实施例中，音频模块170可以通过UART接口向无线通信模块160传递音频信号，实现通过蓝牙耳机播放音乐的功能。

MIPI接口可以被用于连接处理器110与显示屏194，摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface，CSI)，显示屏串行接口(displayserial interface，DSI)等。在一些实施例中，处理器110和摄像头193通过CSI接口通信，实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信，实现电子设备100的显示功能。

GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号，也可被配置为数据信号。在一些实施例中，GPIO接口可以用于连接处理器110与摄像头193，显示屏194，无线通信模块160，音频模块170，传感器模块180等。GPIO接口还可以被配置为I2C接口，I2S接口，UART接口，MIPI接口等。

SIM接口可以被用于与SIM卡接口195通信，实现传送数据到SIM卡或读取SIM卡中数据的功能。

USB接口130是符合USB标准规范的接口，具体可以是Mini USB接口，Micro USB接口，USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电，也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机，通过耳机播放音频。该接口还可以用于连接其他电子设备，例如AR设备等。

可以理解的是，本申请实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对电子设备100的结构限定。在本申请另一些实施例中，电子设备100也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。

充电管理模块140用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。

电源管理模块141用于连接电池142，充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入，为处理器110，内部存储器121，外部存储器，显示屏194，摄像头193，和无线通信模块160等供电。

电子设备100的无线通信功能可以通过天线1，天线2，移动通信模块150，无线通信模块160，调制解调处理器以及基带处理器等实现。

天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。

移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(low noise amplifier，LNA)等。移动通信模块150可以由天线1接收电磁波，并对接收的电磁波进行滤波，放大等处理，传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。在一些实施例中，移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中，移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。

调制解调处理器可以包括调制器和解调器。其中，调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后，被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A，受话器170B等)输出声音信号，或通过显示屏194显示图像或视频。在一些实施例中，调制解调处理器可以是独立的器件。在另一些实施例中，调制解调处理器可以独立于处理器110，与移动通信模块150或其他功能模块设置在同一个器件中。

无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks，WLAN)(如无线保真(wireless fidelity，Wi-Fi)网络)，蓝牙(bluetooth，BT)，全球导航卫星系统(global navigation satellite system，GNSS)，调频(frequency modulation，FM)，近距离无线通信技术(near field communication，NFC)，红外技术(infrared，IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。

在一些实施例中，电子设备100的天线1和移动通信模块150耦合，天线2和无线通信模块160耦合，使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications，GSM)，通用分组无线服务(general packet radio service，GPRS)，码分多址接入(codedivision multiple access，CDMA)，宽带码分多址(wideband code division multipleaccess，WCDMA)，时分码分多址(time-division code division multiple access，TD-SCDMA)，长期演进(long term evolution，LTE)，BT，GNSS，WLAN，NFC，FM，和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system，GPS)，全球导航卫星系统(global navigation satellite system，GLONASS)，北斗卫星导航系统(beidounavigation satellite system，BDS)，准天顶卫星系统(quasi-zenith satellitesystem，QZSS)和/或星基增强系统(satellite based augmentation systems，SBAS)。

电子设备100通过GPU，显示屏194，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏194和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器110可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。

显示屏194用于显示图像，视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display，LCD)，有机发光二极管(organic light-emittingdiode，OLED)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode，AMOLED)，柔性发光二极管(flex light-emittingdiode，FLED)，Miniled，MicroLed，Micro-oLed，量子点发光二极管(quantum dot lightemitting diodes，QLED)等。在一些实施例中，电子设备100可以包括1个或N个显示屏194，N为大于1的正整数。

电子设备100可以通过ISP，摄像头193，视频编解码器，GPU，显示屏194以及应用处理器等实现拍摄功能。

ISP用于处理摄像头193反馈的数据。例如，拍照时，打开快门，光线通过镜头被传递到摄像头感光元件上，光信号转换为电信号，摄像头感光元件将所述电信号传递给ISP处理，转化为肉眼可见的图像。ISP还可以对图像的噪点，亮度，肤色进行算法优化。ISP还可以对拍摄场景的曝光，色温等参数优化。在一些实施例中，ISP可以设置在摄像头193中。

摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB，YUV等格式的图像信号。在一些实施例中，电子设备100可以包括1个或N个摄像头193，N为大于1的正整数。

数字信号处理器用于处理数字信号，除了可以处理数字图像信号，还可以处理其他数字信号。例如，当电子设备100在频点选择时，数字信号处理器用于对频点能量进行傅里叶变换等。

视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样，电子设备100可以播放或录制多种编码格式的视频，例如：动态图像专家组(moving picture experts group，MPEG)1，MPEG2，MPEG3，MPEG4等。

NPU为神经网络(neural-network，NN)计算处理器，通过借鉴生物神经网络结构，例如借鉴人脑神经元之间传递模式，对输入信息快速处理，还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用，例如：图像识别，人脸识别，语音识别，文本理解等。

外部存储器接口120可以用于连接外部存储卡，例如Micro SD卡，实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。

内部存储器121可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令，从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用(比如人脸识别功能，指纹识别功能、移动支付功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如人脸信息模板数据，指纹信息模板等)等。此外，内部存储器121可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universalflash storage，UFS)等。

电子设备100可以通过音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，以及应用处理器等实现音频功能。例如音乐播放，录音等。

音频模块170用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中，音频模块170可以设置于处理器110中，或将音频模块170的部分功能模块设置于处理器110中。

扬声器170A，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐，或收听免提通话。

受话器170B，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时，可以通过将受话器170B靠近人耳接听语音。

麦克风170C，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风170C发声，将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中，电子设备100可以设置两个麦克风170C，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，电子设备100还可以设置三个，四个或更多麦克风170C，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。

耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130，也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform，OMTP)标准接口，美国蜂窝电信工业协会(cellular telecommunications industry association of the USA，CTIA)标准接口。

压力传感器180A用于感受压力信号，可以将压力信号转换成电信号。在一些实施例中，压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多，如电阻式压力传感器，电感式压力传感器，电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A，电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194，电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中，作用于相同触摸位置，但不同触摸操作强度的触摸操作，可以对应不同的操作指令。例如：当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时，执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时，执行新建短消息的指令。

陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中，可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即，x，y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的，当按下快门，陀螺仪传感器180B检测电子设备100抖动的角度，根据角度计算出镜头模组需要补偿的距离，让镜头通过反向运动抵消电子设备100的抖动，实现防抖。陀螺仪传感器180B还可以用于导航，体感游戏场景。

气压传感器180C用于测量气压。在一些实施例中，电子设备100通过气压传感器180C测得的气压值计算海拔高度，辅助定位和导航。

磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中，当电子设备100是翻盖机时，电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态，设置翻盖自动解锁等特性。

加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态，应用于横竖屏切换，计步器等应用。

距离传感器180F，用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中，拍摄场景，电子设备100可以利用距离传感器180F测距以实现快速对焦。

接近光传感器180G可以包括例如发光二极管(LED)和光检测器，例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时，可以确定电子设备100附近有物体。当检测到不充分的反射光时，电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话，以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式，口袋模式自动解锁与锁屏。

环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合，检测电子设备100是否在口袋里，以防误触。

指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁，访问应用锁，指纹拍照，指纹接听来电等。

温度传感器180J用于检测温度。在一些实施例中，电子设备100利用温度传感器180J检测的温度，执行温度处理策略。例如，当温度传感器180J上报的温度超过阈值，电子设备100执行降低位于温度传感器180J附近的处理器的性能，以便降低功耗实施热保护。在另一些实施例中，当温度低于另一阈值时，电子设备100对电池142加热，以避免低温导致电子设备100异常关机。在其他一些实施例中，当温度低于又一阈值时，电子设备100对电池142的输出电压执行升压，以避免低温导致的异常关机。

触摸传感器180K，也称“触控面板”。触摸传感器180K可以设置于显示屏194，由触摸传感器180K与显示屏194组成触摸屏，也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器，以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中，触摸传感器180K也可以设置于电子设备100的表面，与显示屏194所处的位置不同。

按键190包括开机键，音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入，产生与电子设备100的用户设置以及功能控制有关的键信号输入。

马达191可以产生振动提示。马达191可以用于来电振动提示，也可以用于触摸振动反馈。例如，作用于不同应用(例如拍照，音频播放等)的触摸操作，可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作，马达191也可对应不同的振动反馈效果。不同的应用场景(例如：时间提醒，接收信息，闹钟，游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。

指示器192可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示消息，未接来电，通知等。

SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195，或从SIM卡接口195拔出，实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口，N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡，Micro SIM卡，SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同，也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互，实现通话以及数据通信等功能。

本实施例中，电子设备100可以通过处理器110执行所述投屏方法。

图7B是本申请实施例提供的第一电子设备100的软件结构框图。

分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Android系统分为四层，从上至下分别为应用程序层，应用程序框架层，安卓运行时(Android runtime)和系统库，以及内核层。

应用程序层可以包括一系列应用程序包。

如图7B所示，应用程序包可以包括相机，图库，日历，通话，地图，导航，WLAN，蓝牙，音乐，视频，短信息和投屏管理等应用程序。

在一些实施例中，用户可以通过投屏管理与其他设备进行通信连接，进而将图像资源投屏在建立通信连接的设备界面。

应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。

如图7B所示，应用程序框架层可以包括显示(display)管理器，传感器(sensor)管理器，跨设备连接管理器，事件管理器，任务(activity)管理器，窗口管理器，内容提供器，视图系统，资源管理器，通知管理器等。

显示管理器用于系统的显示管理，负责所有显示相关事务的管理，包括创建、销毁、方向切换、大小和状态变化等。一般来说，单设备上只会有一个默认显示模块，即主显示模块。

在处于投屏场景时，第一电子设备100可创建多个虚拟显示模块，异源投屏就是创建了一个虚拟的显示模块承载应用的显示并用于投屏。

本申请实施例中，第一电子设备可以通过显示管理器执行将虚拟显示器上的应用窗口的显示方向调整为虚拟显示器的显示方向，具体调整过程可以参见下文中的相关内容。

传感器管理器负责传感器的状态管理，并管理应用向其监听传感器事件，将事件实时上报给应用。

跨设备连接管理器用于和第二电子设备200建立通信连接，基于该通信连接向第二电子设备200发送图像资源。

事件管理器用于系统的事件管理服务，负责接收底层上传的事件并分发给各窗口，完成事件的接收和分发等工作。

任务管理器用于任务(Activity)组件的管理，包括启动管理、生命周期管理、任务方向管理等。

窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕等。窗口管理器还用于负责窗口显示管理，包括窗口显示方式、显示大小、显示坐标位置、显示层级等相关的管理。

在一些实施例中，传感器管理器将第二电子设备的物理方向发送至显示管理器，管理管理器将虚拟显示器的显示方向调整为第二电子设备的物理方向，最后，窗口管理器将虚拟显示器上的应用窗口的显示方向调整为虚拟显示器的显示方向。

在另一些实施例中，传感器管理器将第二电子设备的物理方向发送至显示管理器，显示管理器从任务管理器获取虚拟显示器上应用窗口支持的显示方向，显示管理器再基于第二电子设备的物理方向和应用窗口支持的显示方向确定虚拟显示器的显示方向，最后，窗口管理器将虚拟显示器上应用窗口的显示方向调整为虚拟显示器的显示方向。

在另一些实施例中，任务管理器在接收到用户打开新的应用窗口的用户指令时，通知窗口管理器，窗口管理器将该应用窗口的显示方向调整为当前虚拟显示器的显示方向。

在另一些实施例中，任务管理器在确定用户打开新的应用窗口不支持当前虚拟显示器的显示方向时，通知显示管理器将虚拟显示器的显示方向调整为该应用窗口支持的显示方向，进而，窗口管理器再将虚拟显示器上应用窗口的显示方向调整为虚拟显示器的显示方向。

在另一些实施例中，应用程序可以向任务管理器动态申请横屏或竖屏显示方向；进而，任务管理器可以通知显示管理器调整虚拟显示器的显示方向；显示管理器在确定当前虚拟显示器的显示方向不是应用程序动态申请的显示方向时，将虚拟显示器的显示方向调整为应用程序申请的显示方向；最后，窗口管理器将虚拟显示器上的显示窗口的显示方向调整为虚拟显示器的显示方向。

以上各个实施例的具体执行过程可以参见下文中投屏方法的相关内容。

内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。所述数据可以包括视频，图像，音频，拨打和接听的电话，浏览历史和书签，电话簿等。

视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。

资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。

通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。比如通知管理器被用于告知下载完成，消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知，例如后台运行的应用程序的通知，还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息，发出提示音，电子设备振动，指示灯闪烁等。

Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。

核心库包含两部分：一部分是java语言需要调用的功能函数，另一部分是安卓的核心库。

应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理，堆栈管理，线程管理，安全和异常的管理，以及垃圾回收等功能。

系统库(也可称为数据管理层)可以包括多个功能模块。例如：表面管理器(surface manager)，媒体库(Media Libraries)，三维图形处理库(例如：OpenGL ES)，2D图形引擎(例如：SGL)和事件数据等。

表面管理器用于对显示子系统进行管理，并且为多个应用程序提供了2D和3D图层的融合。

在本申请实施例中，系统库具体用于跨设备场景下数据管理。第一电子设备100将系统库中的图层数据、音视频等数据发送至第二电子设备200，第二电子设备200将事件数据发送至第一电子设备100完成事件流程，同时互相传输的还有一些其它的数据。例如，本申请实施例中的传感器数据，第二电子设备200将传感器数据状态实时传输给第一电子设备100，第一电子设备100中虚拟显示模块的显示才能正确根据第二电子设备200的传感器状态来控制显示。

媒体库支持多种常用的音频，视频格式回放和录制，以及静态图像文件等。媒体库可以支持多种音视频编码格式，例如：MPEG4，H.264，MP3，AAC，AMR，JPG，PNG等。

三维图形处理库用于实现三维图形绘图，图像渲染，合成，和图层处理等。

2D图形引擎是2D绘图的绘图引擎。

内核层是硬件和软件之间的层。内核层至少包含显示驱动，摄像头驱动，音频驱动，传感器驱动。

在本申请实施例中，内核层提供设备的发现、设备的认证、设备的连接等能力，并向上上报设备发现离开等事件。

接下来介绍本申请实施例提供的一种第二电子设备200的硬件结构示意图。

如图7C所示，第二电子设备200可包括：处理器222、存储器223、无线通信模块224、电源开关225、显示屏229、音频模块230。在一些实施例中，第二电子设备200还可以包括有线LAN通信处理模块226、高清晰度多媒体接口(high definition multimedia interface，HDMI)通信处理模块227、USB通信处理模块228等。上述各个模块可通过总线连接。其中：

处理器222可用于读取和执行计算机可读指令。具体实现中，处理器222可主要包括控制器、运算器和寄存器。其中，控制器主要负责指令译码，并为指令对应的操作发出控制信号。运算器主要负责执行定点或浮点算数运算操作、移位操作以及逻辑操作等，也可以执行地址运算和转换。寄存器主要负责保存指令执行过程中临时存放的寄存器操作数和中间操作结果等。具体实现中，处理器222的硬件架构可以是专用集成电路(ASIC)架构、MIPS架构、ARM架构或者NP架构等等。

在本申请实施例中，处理器222可以用于解析无线通信模块224接收到的信号，如第一电子设备100发送的新URL，根据该新的URL获取播放列表中的多个视频和关联视频。

无线通信模块224可以包括WLAN通信处理模块。可选的，无线通信模块224还可包括蓝牙(BT)通信处理模块、NFC处理模块、蜂窝移动通信处理模块(未示出)等等。

在本申请实施例中，无线通信模块224可用于和第一电子设备100建立通信连接。无线通信模块224和第一电子设备100建立的通信连接可以为多种。例如，WLAN通信处理模块可用于和第一电子设备100建立Wi-Fi直连通信连接，蓝牙(BT)通信处理模块可用于和第一电子设备100建立蓝牙通信连接，NFC处理模块可用于和第一电子设备100建立NFC连接等等。

在本申请实施例中，无线通信模块224还可以用于和第一电子设备100建立通信连接，并基于该通信连接接收第一电子设备100发送的视频流。无线通信模块224和第一电子设备100建立的通信连接可以基于HTTP协议进行数据传输，本申请对设备间的通信连接类型、数据传输协议不作任何限制。

存储器223与处理器222耦合，用于存储各种软件程序和/或多组指令。具体实现中，存储器223可包括高速随机存取的存储器，并且也可包括非易失性存储器，例如一个或多个磁盘存储设备、闪存设备或其他非易失性固态存储设备。存储器223可以存储操作系统，例如uCOS、VxWorks、RTLinux等嵌入式操作系统。存储器223还可以存储通信程序，该通信程序可用于与第一电子设备100，一个或多个服务器，或附加设备进行通信。

电源开关225可用于控制电源向第二电子设备200的供电。

有线LAN通信处理模块226可用于通过有线LAN和同一个LAN中的其他设备进行通信，还可用于通过有线LAN连接到WAN，可与WAN中的设备通信。

HDMI通信处理模块227可用于通过HDMI接口(未示出)与其他设备进行通信。

USB通信处理模块228可用于通过USB接口(未示出)与其他设备进行通信。

显示屏229可用于投屏页面，视频等。显示屏229可以采用LCD、OLED、AMOLED、FLED、QLED等显示屏。显示屏229所显示的内容可参考后续方法实施例的相关描述。

在本申请实施例中，显示屏229可以根据无线通信模块224接收到服务器300发送的播放列表和关联视频等多个视频的视频流，来实现连续播放多个视频。

音频模块230。音频模块230可用于通过音频输出接口输出音频信号，这样可使得大屏显示设备200支持音频播放。音频模块230还可用于通过音频输入接口接收音频数据。音频模块230可包括但不限于：麦克风、扬声器、受话器等等。

在一些实施例中，第二电子设备200还可以包括RS-232接口等串行接口。该串行接口可连接至其他设备，如音箱等音频外放设备，使得显示器和音频外放设备协作播放音视频。

可以理解的是图3示意的结构并不构成对第二电子设备200的具体限定。在本申请另一些实施例中，第二电子设备200可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。

在一些实施例中，第二电子设备200可以包括上述图1中所示的第一电子设备100包括的硬件。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

第二电子设备200的软件系统可以采用分层架构，事件驱动架构，微核架构，微服务架构，或云架构等等。示例性地，第二电子设备200的软件系统可以包括但不限于

Linux或者其它操作系统。

为华为的鸿蒙系统。

在一些实施例中，第二电子设备200为Android系统，分为四层，从上至下分别为应用程序层，应用程序框架层，安卓运行时(Android runtime)和系统库，以及内核层。其中，应用程序层可以包括投屏管理的应用用于设备连接和投屏显示，应用程序框架层可以包括跨设备连接管理器，事件管理器，窗口管理器和显示管理器等，系统库可以包括媒体库和事件数据等，内核层用于设备发现，设备认证和设备连接等，其中各部分内容具体可以参见图7B中的相关描述，此处不再赘述。

下面基于图6所示的投屏系统10的示意图、图7A和图7B所示的第一电子设备的硬件和软件结构示意图、图7C所示的第二电子设备的硬件结构示意图，结合本申请实施例提供的在第一电子设备和第二电子设备上实现投屏的方法流程以及用户界面，来详细描述本申请实施例提供的投屏方法。

图8示例性示出了本申请实施例提供的投屏方法流程。该投屏方法可以包括以下部分或全部步骤：

S101、第一电子设备与第二电子设备建立通信连接。

第一电子设备和第二电子设备之间建立的通信连接可包括但不限于：Wi-Fi P2P通信连接、蓝牙通信连接、NFC连接等等。

图9A-图9E示例性示出了第一电子设备与第二电子设备建立通信连接的用户界面。

图9A示例性示出了第一电子设备上的用于展示第一电子设备安装的应用程序的用户界面910。

如图9A所示，用户界面910可包括：状态栏911、页面指示符912、具有常用应用程序图标的托盘913，导航栏914，以及多个其他应用程序图标。其中：

状态栏911可包括：移动通信信号(又可称为蜂窝信号)的一个或多个信号强度指示符(例如信号强度指示符911A、信号强度指示符911B)、无线高保真(wireless fidelity，Wi-Fi)信号的一个或多个信号强度指示符911C，电池状态指示符911E、时间指示符911F。

当第一电子设备打开蓝牙后，状态栏911中还可以显示指示符911D，显示符911D可用于指示第一电子设备成功开启蓝牙。

页面指示符912可用于指示当前显示的页面与其他页面的位置关系。

具有常用应用程序图标的托盘913可以包括多个托盘图标(例如相机应用图标、通讯录应用图标、电话应用图标、信息应用图标)，托盘图标在页面切换时保持显示。上述托盘图标是可选的，本申请实施例对此不做限定。

其他应用程序图标可以是多个应用图标，例如，图库应用图标915、华为视频应用图标、华为钱包应用图标、录音机应用图标、设置应用图标等。其他应用程序图标可分布在多个页面，页面指示符912还可以用于指示用户当前浏览的是哪一个页面中的应用程序。用户可以左右滑动其他应用程序图标的区域，来浏览其他页面中的应用程序图标。

导航栏914可包括返回键、主屏幕键、多任务键等系统导航键。

在一些实施例中，图9A所示的用户界面910可以为主屏幕界面(home screen)。可以理解的是，图9A仅仅示例性示出了第一电子设备的一个用户界面，不应构成对本申请实施例的限定。

如图9A及图9B所示，当第一电子设备检测到在显示屏上的向下滑动手势时，响应于该滑动手势，第一电子设备可以在用户界面910上显示窗口916。如图9B所示，窗口916中可以显示有控件916A，控件916A可接收开启/关闭电子设备的投屏功能的操作(例如触摸操作、点击操作)。控件916A的表现形式可以包括图标和/或文本(例如文本“无线投屏”、“投屏”、“多屏互动”等)。窗口916中还可以显示有其他功能例如Wi-Fi、蓝牙、手电筒等等的开关控件。

如图9B所示，第一电子设备可以检测到作用于控件916A的用于开启投屏功能的用户操作。在一些实施例中，第一电子设备检测到作用于控件916A的用户操作后，可以更改控件916A的显示形式，例如增加显示控件916A时的阴影等。

不限于在图9A所示的主界面上，用户还可以在其他界面上输入向下滑动的手势，触发第一电子设备显示窗口916。

不限于图9A及图9B示出的用户在窗口916中作用于控件916A的用户操作，在本申请实施例中，用于开启投屏功能的用户操作还可以实现为其他形式，本申请实施例不做限制。

例如，第一电子设备还可以显示设置(settings)应用提供的设置界面，该设置界面中可包括提供给用户的用于开启/关闭第一电子设备的投屏功能的控件，用户可通过在该控件上输入用户操作来开启第一电子设备的投屏功能。

如图9C所示，第一电子设备响应于图9B中检测到的用于开启投屏功能的用户操作，开启无线通信模块160中的WLAN、蓝牙或NFC中的一项或多项，并可以通过Wi-Fi直连、蓝牙、NFC中一项或多项无线通信技术发现该第一电子设备附近的可投屏的电子设备。例如，第一电子设备可以通过Wi-Fi直连技术扫描附近其他设备广播的探测请求(如proberequest帧)，并发现附近的第二电子设备以及其他电子设备。如图9C所示，第一电子设备显示的用户界面910中包括窗口917。窗口917中可以显示有：界面指示符917A、图标917B、电子设备发现的电子设备的图像917C和标识917D。

其中，界面指示符917A用于指示该窗口917中显示的内容是开启投屏功能后发现的电子设备的信息。图标917B用于指示第一电子设备还在持续发现周围的其他电子设备。在第一电子设备还未发现附近的电子设备时，窗口917中显示的电子设备的数量为0。电子设备的图像917C和标识917D均可以被携带在电子设备广播的探测请求(如probe request帧)中。图像917C和/或标识917D可接收用户操作(例如触摸操作)，响应于该用户操作，第一电子设备可以向该图像917C和/或标识917D对应的电子设备发起建立通信连接的请求。

图9D示例性示出了第二电子设备接收到第一电子设备发来的建立通信连接的请求后，在显示屏上显示的用户界面920。该用户界面920包括窗口921。窗口921用于提示用户第一电子设备请求建立通信连接。第二电子设备可以检测到确定与第一电子设备建立投屏的通信连接的操作，例如图9D所示的用户通过遥控器点击控件921A这一操作，响应于该操作，第二电子设备与第一电子设备建立了投屏的通信连接。或者，第二电子设备检测到拒绝与第一电子设备建立投屏的通信连接的操作，例如图9D所示的用户通过遥控器点击控件921B这一操作，响应于该操作，第二电子设备拒绝与第一电子设备建立投屏的通信连接。

不限于上述图9A-图9D示出的第一电子设备和第二电子设备之间建立通信连接的方式，在其他实施例中，还可以通过其他方式建立该通信连接，这里不做限制。例如，第二电子设备可以提供NFC标签，该NFC标签中携带有该第二电子设备的标识(例如MAC地址)，当用户将第一电子设备靠近第二电子设备时，第一电子设备可以读取该NFC标签中的标识，并直接和该标识对应的该第二电子设备建立通信连接。该通信连接也可以为Wi-Fi P2P连接、蓝牙连接、NFC连接等等。

在一些实施例中，第一电子设备与第二电子设备建立投屏连接之后，第一电子设备还可以显示如图9E所示的用户界面910。用户界面910中包括窗口918。该窗口918包括提示信息918A、控件918B，以及，控件918C。其中，提示信息918A用于提示用户异源投屏进行投屏。第一电子设备可以检测到用户选择采用异源投屏进行投屏的操作，例如图9E所示的用户点击控件918B这一操作，响应于该操作，第一电子设备将执行后续的步骤S102-S109，具体参考下文的详细描述。或者，第一电子设备可以检测到用户不选择异源投屏进行投屏的操作，例如图9E所示的用户点击控件918A这一操作，响应于该操作，第一电子设备将继续采用同源投屏的方式与第二电子设备共享图像资源。

为了便于用户理解窗口918所示的提示信息918A，该提示信息918A还可以以其他形式表示。例如，提示信息918A可以进一步解释异源投屏时设备上显示的界面与被投界面上的投屏窗口显示的内容可以不一致等内容。因此，对于图9E所示的窗口918中的提示信息918A，本申请实施例不做任何限制。

通过图9E所示的提示用户的方式，可以让用户根据需要自主选择是否要使用异源投屏来进行投屏，可以提升用户体验。

S102、第二电子设备获取第二电子设备的传感器数据。

具体的，第二电子设备可以通过陀螺仪传感器或者是重力传感器等得到传感器数据。第二电子设备可以在接收到用户操作时采集第二电子设备的传感器数据，也可以是实时采集第二电子设备的传感器数据。

S103、第二电子设备基于通信连接向第一电子设备发送第一消息，第一消息包括第二电子设备的传感器数据。

在一种实现中，第二电子设备可以基于用户操作，向第一电子设备发送第二电子设备的传感器数据或第二电子设备的物理方向。例如，在步骤S101后，用户可以触碰例如图9D中用户界面920的窗口921A，第二电子设备响应该用户操作，获取第二电子设备的传感器数据，基于该传感器数据生成第一消息，进而，将该第一消息发送至第一电子设备。相应的，第一电子设备接收来自第二电子设备的第一消息。

在另一种实现中，第二电子设备在确定第二电子设备的物理方向发生改变时，向第一电子设备发送第二电子设备的传感器数据或第二电子设备的物理方向。具体的，第二电子设备可以实时获取自身的传感器数据，基于该传感器数据确定第二电子设备的物理方向，在确定自身的物理方向发生改变时，生成第一消息，该第一消息包括第二电子设备的传感器数据。例如，用户在使用第二电子设备时将第二电子设备从横屏方向旋转至竖屏方向，第二电子设备在感知自身的物理方向发生改变时，向第一电子设备发送第二电子设备的传感器数据。

在另一些实施例中，第一消息包括第二电子设备的物理方向，也即是说，第二电子设备可以根据第二电子设备的传感器数据确定物理方向，进而，将其物理方向发送至第一电子设备。

S104、第一电子设备基于第二电子设备的传感器数据，确定第二电子设备的物理方向。

具体的，第一电子设备可以根据第二电子设备的传感器数据确定第二电子设备的物理方向。

S105、第一电子设备基于第二电子设备的物理方向，确定虚拟显示器的显示方向。

具体的，第一电子设备可以实时更新虚拟显示器的显示方向，也可以在满足目标条件时更新虚拟显示器的显示方向，该虚拟显示器的显示内容用于镜像投屏到第二电子设备的投屏窗口。例如，第一电子设备可以实时接收第二电子设备的物理方向，并在接收到第二电子设备时实时确定虚拟显示器的显示方向；又例如，第一电子设备可以在确定第二电子设备的物理方向发生改变时，再重新确定虚拟显示器的显示方向；又例如，用户可以通过用户操作打开新的应用窗口或用户通过用户操作更改窗口方向，则第一电子设备可以在虚拟显示器上的应用窗口发生改变时，基于第二电子设备的物理方向和应用窗口的显示方向，确定虚拟显示器的显示方向。

在一种实现中，第一电子设备可以将第二电子设备的物理方向确定为虚拟显示器的显示方向。

例如，第一电子设备在确定第二电子设备的物理方向为横屏方向时，第一电子设备将虚拟显示器的显示方向确定为横屏方向；在确定第二电子设备的物理方向为反横屏方向时，第一电子设备将虚拟显示器的显示方向确定为反横屏方向；在确定第二电子设备的物理方向为竖屏方向时，第一电子设备将虚拟显示器的显示方向确定为竖屏方向；在确定第二电子设备的物理方向为反竖屏方向时，第一电子设备将虚拟显示器的显示方向确定为反竖屏方向。

以用户将第二电子设备的物理方向由横屏方向改变为竖屏方向为例，第二电子设备将竖屏方向发送至第一电子设备，第一电子设备在接收第二电子设备的物理方向为竖屏方向后将虚拟显示器的显示方向调整为竖屏方向。

在另一种实现中，第一电子设备可以基于第二电子设备的物理方向和应用窗口的显示方向，确定虚拟显示器的显示方向。

例如，第一电子设备可以在应用窗口支持横屏显示和竖屏显示时，将第二电子设备的物理方向确定为虚拟显示器的显示方向；在应用窗口的支持的显示方向不包括第二电子设备的显示方向时，将应用窗口的显示方向确定为虚拟显示器的显示方向。具体的，第一电子设备可以在应用窗口支持横屏显示和竖屏显示时，在第二电子设备为横屏方向时将虚拟显示器的显示方向确定为横屏方向，在第二电子设备为竖屏方向时将虚拟显示器的显示方向确定为竖屏方向；在应用窗口仅支持横屏显示时，将虚拟显示器的显示方向确定为横屏方向；在应用窗口仅支持竖屏显示时，将虚拟显示器的显示方向确定为竖屏方向。

具体的，以用户将第二电子设备的物理方向由横屏方向改变为竖屏方向为例，第二电子设备将竖屏方向发送至第一电子设备，第一电子设备在接收第二电子设备的物理方向为竖屏方向后获取虚拟显示器上应用窗口支持的显示方向，若该应用窗口支持竖屏方向显示，则第一电子设备将虚拟显示器的显示方向调整为竖屏方向；若该应用窗口仅支持横屏方向显示，则第一电子设备将该虚拟显示器的显示方向确定为横屏显示。

具体的，以用户打开新应用窗口为例，

其中，应用窗口支持的显示方向可以是应用所预设的显示方向，也可以是用户对该应用设置的显示方向。例如，第一新闻应用仅支持竖屏显示方向，则第一新闻应用支持的显示方向为竖屏方向；又例如，用户通过设置应用或投屏应用对第一新闻应用进行设置，将第一新闻应用的显示方向设置为横屏方向，则第一新闻应用支持的显示方向为横屏方向。

S106、第一电子设备基于虚拟显示器的显示方向，创建虚拟显示器。

在一些实施例中，第一电子设备可以虚拟显示器的高和宽确定虚拟显示器的显示方向。其中，虚拟显示器的宽(width)为虚拟显示器的边中与显示方向垂直的边，虚拟显示器的高(height)为虚拟显示器的边中与显示方向平行的边。

请参见图10，如图10中的(A)所示，第一电子设备在确定虚拟显示器的显示方向为竖屏方向和/或反竖屏方向时，可以创建宽小于高的虚拟显示器，则虚拟显示器的显示方向为竖屏方向，以使虚拟显示器的显示数据传输至第二电子设备时在投屏窗口以竖屏方向显示；如图10中的(B)所示，第二电子设备在确定虚拟显示器的显示方向为横屏方向和/或反橫屏方向时，可以创建宽大于高的虚拟显示器，以使虚拟显示器的显示数据传输至第二电子设备时在投屏窗口以橫屏方向显示。

在另一些实施例中，第一电子设备在确定虚拟显示器的显示方向为横屏方向后，还可以设置虚拟显示器的显示方向是横屏方向或反横屏方向；在确定虚拟显示器的显示方向为竖屏方向后，还可以设置虚拟显示器的显示方向是竖屏方向或反竖屏方向。

其中，虚拟显示器的高宽比可以是根据第一电子设备在第二电子设备上的投屏窗口确定的，例如，第二电子设备为全屏显示投屏内容时虚拟显示器的高宽比为第二电子设备的显示屏的高宽比。

需要说明的是，第一电子设备基于第二电子设备的物理方向创建虚拟显示器后，第二电子设备的物理方向发生改变时不需要重新创建虚拟显示器，在执行步骤S105后直接执行步骤S107。

S107、第一电子设备在虚拟显示器的显示方向与应用窗口的显示方向不一致时，调整应用窗口的显示方向为虚拟显示器的显示方向；应用窗口为虚拟显示器上当前显示的应用的界面。

具体的，第一电子设备将应用窗口的显示方向调整为虚拟显示器的显示方向，其中，虚拟显示器可以显示不同应用程序的应用窗口，应用窗口用于显示该应用程序的界面。例如，在虚拟显示器横屏显示华为商城的应用窗口时，第一电子设备在确定虚拟显示器的显示方向为竖屏显示，则第一电子设备对该应用窗口的显示方向进行调整，将应用窗口的显示方向调整为竖屏显示方向。

在一种实施例中，第一电子设备在调整虚拟显示器的显示方向后，将应用窗口的显示方向调整为调整后的虚拟显示器的显示方向。例如，第一电子设备在确定第二电子设备的物理方向由横屏方向改变为竖屏方向时，将虚拟显示器的显示方向由横屏方向调整为竖屏方向，则第一电子设备可以将虚拟显示器当前应用窗口的显示方向调整为竖屏方向。

在另一种实施例中，第一电子设备在应用窗口的显示方向发生改变后，调整应用窗口的显示方向。例如，当前虚拟显示器的显示方向为横屏方向，第二电子设备接收到来自用户的用户操作，该用户操作用户打开一个预置为竖屏方向显示的应用窗口，则第一电子设备确定该应用窗口与当前的虚拟显示器的窗口不一致，将该应用窗口的显示方向调整为横屏方向。

S108、第一电子设备可以在应用窗口不支持虚拟显示器的显示方向时，在虚拟显示器上非全屏显示该应用窗口。

具体的，在第一电子设备将第二电子设备的物理方向确定为虚拟显示器的显示方向后，虚拟显示器上的应用窗口的显示方向在调整为虚拟显示器的显示方向的过程中，第一电子设备可以将应用窗口的窗口从全屏显示调整为非全屏显示。需要说明的是，由于第一电子设备将第二电子设备的物理方向确定为虚拟显示器的显示方向，将应用窗口的显示方向调整为虚拟显示器的方向，可能会出现应用窗口不支持虚拟显示器的显示方向的情况，此时可以以非全屏的方式在虚拟显示器中显示该应用窗口。

其中，全屏显示可以是指如图11中的(A)所示的应用窗口的四条边的边长分别等于第二电子设备的显示屏四条边的边长的情况；也可以是指如图11中的(B)所示的应用窗口上显示标题栏的情况，其中，应用窗口存在一条边的边长等于第二电子设备的显示屏的一条边的边长。

请参见图12，图12示例性的示出第二电子设备的物理方向由横屏方向旋转为竖屏方向时应用窗口的显示情况。图12中的(A)所示的应用窗口的显示方向支持横屏方向和竖屏方向，因此该应用窗口可以全屏显示在虚拟显示器上(也即是第二电子设备的显示屏上)；图12中的(B)所示的应用窗口的显示方向仅支持竖屏方向，因此该应用窗口在该应用窗口的显示方向为横屏方向时可以非全屏显示，在该应用窗口的显示方向为竖屏方向时可以全屏显示；图12中的(C)所示的应用窗口的显示方向仅支持橫屏方向，因此该应用窗口在该应用窗口的显示方向为横屏方向时可以全屏显示，在该应用窗口的显示方向为竖屏方向时可以非全屏显示。

S109、第一电子设备向第二电子设备发送虚拟显示器的显示数据。

在一种实现中，第一电子设备在确定虚拟显示器的显示方向后，将应用窗口按照虚拟显示器的显示方向显示在该虚拟显示器上，得到虚拟显示器的显示数据，进而，将该虚拟显示器的显示数据发送至第二电子设备，以使第二电子设备渲染显示该虚拟显示器的显示数据。可以理解的，第二电子设备将虚拟显示器的显示数据渲染显示在投屏窗口上，该投屏窗口显示的投屏内容与第一电子设备的虚拟显示器的显示内容一致。

其中，虚拟显示器的显示数据可以为主界面数据、视频应用界面数据和备忘录应用界面数据等。例如，第二电子设备请求显示第一应用的界面，第一电子设备可以获取第一应用的界面数据，将第一应用的界面数据处理为与虚拟显示器的显示方向一致的显示数据，虚拟显示器可以以全屏或非全屏的方式显示该处理后的应用窗口，从而，得到虚拟显示器的显示数据。

S110、第二电子设备显示该显示数据。

在一种实现中，第二电子设备接收到来自第一电子设备的数据流文件，第二电子解析该数据流文件，得到投屏数据，进而，再基于该投屏数据得到以调整后的显示方向绘制的投屏图像，第二电子设备显示该投屏图像。

下面以图13A所示的用户将第二电子设备从横屏方向旋转为竖屏方向的场景为例，具体介绍上述投屏方法。该场景中，第一电子设备向第二电子设备异源投屏，如图13A所示，第二电子设备全屏显示来自第一电子设备的显示数据，在投屏过程中，用户将第二电子设备由横屏方向旋转至竖屏方向。

该投屏方法可以包括以下步骤。

S201、第二电子设备在确定第二电子设备的物理方向从横屏方向旋转为竖屏方向时，将第二电子设备的传感器数据发送至第一电子设备。

具体的，第二电子设备可以实时采集第二电子设备的传感器数据，根据第二电子设备的传感器数据得到第二电子设备的物理方向，进而，在用户将第二电子设备由横屏方向旋转至竖屏状态，第二电子设备感知自身的物理方向从横屏方向旋转为竖屏方向，将第二电子设备的传感器数据发送至第一电子设备。

S202、第一电子设备在接收到第二电子设备的传感器数据后，基于第二电子设备的传感器数据确定第二电子设备的物理方向。

具体的，第一电子设备可以根据第二电子设备的传感器数据确定第二电子设备当前的物理方向为竖屏方向。

S203、第一电子设备将所述第二电子设备的物理方向确定为虚拟显示器的显示方向。

由于第一电子设备虚拟显示器的显示方向为横屏方向，第一电子设备在确定第二电子设备的物理方向为竖屏方向后，可以将虚拟显示器的显示方向调整为竖屏方向。

具体的，第一电子设备可以将虚拟显示器的宽和高的长度互换，从而实现将虚拟显示器的显示方向由横屏方向调整为竖屏方向。请参见图13B，原先的虚拟显示器如图13B中的(A)所示，该虚拟显示器的显示方向为横屏方向，宽大于高；第一电子设备将如图13B中的(A)所示的虚拟显示器的高和宽长度互换之后，可以得到如图13B中的(B)所示的虚拟显示器，此时，调整后的虚拟显示器的高大于宽，调整后的虚拟显示器的显示方向为竖屏方向。

S204、第一电子设备将虚拟显示器上的应用窗口的显示方向均调整为虚拟显示器的显示方向。

具体的，在第一电子设备将虚拟显示器的显示方向确定为竖屏方向后，将应用窗口按照竖屏方向显示虚拟显示器上。

在一些实施例中，若该应用窗口不支持竖屏显示方向，则第一电子设备可以非全屏显示该应用窗口。请参见图13C，假设原先的应用窗口如图13C中的(A)所示，第一电子设备可以将应用窗口按照横屏方向进行绘制，得到如图13C中的(B)所示的应用窗口。

S205、第一电子设备向第二电子设备发送虚拟显示器的显示数据。

可以理解的，由于虚拟显示器上显示该应用窗口，虚拟显示器的显示数据包括应用窗口的显示数据。

S206、第二电子设备显示该显示数据。

第二电子设备接收来自第一电子设备的显示数据，显示该显示数据。请参见图13D，图13D示例性的示出了用户将第二电子设备从横屏方向旋转为竖屏方向，第二电子设备上投屏窗口的显示界面情况。

以下以图14A所示的用户打开新窗口的场景，介绍上述投屏方法。如图14A所示，在该场景中，第二电子设备为竖屏方向，第二电子设备上投屏窗口的显示方向为竖屏方向，也即是第一电子设备上虚拟显示器的显示方向为竖屏方向，第一用户通过第一用户操作打开第一应用窗口。

S301、第二电子设备接收第一用户操作，该第一用户操作用于打开第一应用窗口。

如图14A所示，用户通过点击投屏窗口上的控件，退出当前应用窗口，也即是打开第一应用窗口。

S302、第二电子设备响应于第一用户操作，向第一电子设备发送第一用户操作。

S303、第一电子设备在接收到第一用户操作后，获取第一用户操作对应的第一应用窗口。

具体的，第一电子设备获取第一应用窗口对应的显示数据，例如第一应用窗口的显示内容和第一应用窗口支持的显示方向等。

S304、第一电子设备基于第一应用窗口支持的显示方向调整虚拟显示器的显示方向。

具体的，第一电子设备在第一应用窗口支持竖屏方向时，不调整虚拟显示器的显示方向；在第一应用窗口不支持竖屏方向时，将虚拟显示器的显示方向调整为第一应用窗口支持的显示方向。例如，第一应用窗口仅支持横屏方向，则第一电子设备可以将虚拟显示器的显示方向调整为横屏方向。

S305、第一电子设备在调整显示方向后的虚拟显示器上显示第一应用窗口，得到第一显示数据。将所述虚拟显示器的显示方向确定为所述虚拟显示器上显示的应用窗口的显示方向

其中，第一应用窗口的显示方向为当前虚拟显示器的显示方向，第一显示数据为虚拟显示器的显示数据。

具体的，假设虚拟显示器调整后的显示方向为第一方向，则将第一应用窗口以第一方向显示在虚拟显示器上，将虚拟显示器的显示内容确定为第一显示数据。

例如，第一应用窗口仅支持横屏方向，则第一方向为横屏方向，第一电子设备可以将虚拟显示器的显示方向调整为横屏方向后，将第一应用窗口以横屏方向显示在虚拟显示器上，将虚拟显示器的显示内容确定为第一显示数据，该第一显示数据经渲染显示为虚拟显示器上的显示内容。

S306、第一电子设备向第二电子设备发送第一显示数据。

S307、第二电子设备显示该第一显示数据。

请参见图14B，若第一应用窗口支持横屏方向，则第二电子设备显示的界面可以如图14B中的(A)所示；若第一应用窗口支持竖屏方向，则第二电子设备显示的界面可以如图14B中的(B)所示。

本申请实施例还提供了一种电子设备，电子设备包括一个或多个处理器和一个或多个存储器；其中，一个或多个存储器与一个或多个处理器耦合，一个或多个存储器用于存储计算机程序代码，计算机程序代码包括计算机指令，当一个或多个处理器执行计算机指令时，使得电子设备执行上述实施例描述的方法。

本申请实施例还提供了一种包含指令的计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备执行上述实施例描述的方法。

本申请实施例还提供了一种计算机可读存储介质，包括指令，当指令在电子设备上运行时，使得电子设备执行上述实施例描述的方法。

可以理解的是，本申请的各实施方式可以任意进行组合，以实现不同的技术效果。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid StateDisk)等。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，该流程可以由计算机程序来指令相关的硬件完成，该程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。而前述的存储介质包括：ROM或随机存储记忆体RAM、磁碟或者光盘等各种可存储程序代码的介质。

总之，以上所述仅为本申请技术方案的实施例而已，并非用于限定本申请的保护范围。凡根据本申请的揭露，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (16)

1.一种投屏方法，其特征在于，应用于第一电子设备，所述方法包括：

所述第一电子设备获取第二电子设备的物理方向；

所述第一电子设备基于所述物理方向确定虚拟显示器的显示方向；

所述第一电子设备将所述虚拟显示器的显示方向确定为所述虚拟显示器上显示的应用窗口的显示方向；

所述第一电子设备向所述第二电子设备发送所述虚拟显示器的显示数据。

2.根据权利要求1所述的方法，其特征在于，所述第一电子设备基于所述物理方向确定虚拟显示器的显示方向，包括：

所述第一电子设备将所述物理方向确定为所述虚拟显示器的显示方向。

3.根据权利要求1所述的方法，其特征在于，所述第一电子设备基于所述物理方向确定虚拟显示器的显示方向，包括：

所述第一电子设备获取所述应用窗口支持的显示方向；

所述第一电子设备在所述应用窗口支持所述物理方向时，将所述物理方向确定为所述虚拟显示器的显示方向。

4.根据权利要求3所述的方法，其特征在于，所述第一电子设备在所述应用窗口支持所述物理方向时，将所述物理方向确定为所述虚拟显示器的显示方向，包括：

所述第一电子设备在所述应用窗口支持的方向包括横屏方向且所述物理方向为所述横屏方向时，将所述虚拟显示器的显示方向确定为所述横屏方向；或者，

所述第一电子设备在所述应用窗口支持的方向包括反横屏方向且所述物理方向为所述反横屏方向时，将所述虚拟显示器的显示方向确定为所述反横屏方向；或者，

所述第一电子设备在所述应用窗口支持的方向包括竖屏方向且所述物理方向为所述竖屏方向时，将所述虚拟显示器的显示方向确定为所述竖屏方向；或者，

所述第一电子设备在所述应用窗口支持的方向包括反竖屏方向且所述物理方向为所述反竖屏方向时，将所述虚拟显示器的显示方向确定为所述反竖屏方向。

5.根据权利要求1所述的方法，其特征在于，所述应用窗口为第一应用窗口，所述第一电子设备基于所述物理方向确定虚拟显示器的显示方向，包括：

所述第一电子设备接收所述第二电子设备发送的第一用户操作，所述第一用户操作用于触发显示所述第一应用窗口；

所述第一电子设备基于所述第一用户操作获取第一应用窗口支持的显示方向；

所述第一电子设备在所述第一应用窗口支持所述物理方向且所述物理方向与当前虚拟显示器的显示方向不一致时，将当前虚拟显示器的显示方向调整为所述物理方向；或者，

所述第一电子设备在所述第一应用窗口支持所述物理方向且所述物理方向与当前虚拟显示器的显示方向一致时，不调整当前虚拟显示器的显示方向。

6.根据权利要求1-5中任一项所述的方法，其特征在于，所述方法还包括：

所述第一电子设备在所述应用窗口不支持所述虚拟显示器的显示方向时，在所述虚拟显示器上非全屏显示所述应用窗口。

7.一种投屏方法，其特征在于，应用于第二电子设备，所述方法包括：

所述第二电子设备向第一电子设备发送所述第二电子设备的物理方向，所述物理方向用于确定所述第一电子设备的虚拟显示器的显示方向；

所述第二电子设备接收所述第一电子设备发送的显示数据，所述显示数据是所述虚拟显示器的显示数据，所述虚拟显示器上显示的应用窗口的显示方向与所述虚拟显示器的显示方向相同；

所述第二电子设备显示所述显示数据。

8.根据权利要求7所述的方法，其特征在于，所述第二电子设备向第一电子设备发送所述第二电子设备的物理方向包括：

所述第二电子设备通过传感器获取所述第二电子设备的物理方向；

所述第二电子设备在所述物理方向改变时，向所述第一电子设备发送所述物理方向。

9.根据权利要求8所述的方法，其特征在于，所述第二电子设备的物理方向发生改变包括所述第二电子设备在横屏方向、反横屏方向、竖屏方向和反竖屏方向四个方向中任两个方向之间的切换和/或所述第二电子设备的物理角度变化。

10.根据权利要求9所述的方法，其特征在于，所述第二电子设备向第一电子设备发送所述第二电子设备的物理方向，包括：

所述第二电子设备在与所述第一电子设备建立通信连接后，显示提示信息和第一控件，所述提示信息用于提示用户是否使用异源投屏来进行投屏；

所述第二电子设备接收针对所述第一控件输入的用户操作，所述用户操作用于指示所述第一电子设备向所述第二电子设备进行异源投屏；

所述第二电子设备响应于所述用户操作向所述第一电子设备发送所述物理方向。

11.根据权利要求7-10任一项所述的方法，其特征在于，所述虚拟显示器的显示方向为所述物理方向。

12.根据权利要求7-10任一项所述的方法，其特征在于，在所述应用窗口支持所述物理方向时所述虚拟显示器的显示方向为所述物理方向；或者，在所述应用窗口的显示方向不包括所述物理方向时所述虚拟显示器的显示方向为所述应用窗口支持的显示方向。

13.一种电子设备，其特征在于，所述电子设备包括一个或多个处理器和一个或多个存储器；其中，所述一个或多个存储器与所述一个或多个处理器耦合，所述一个或多个存储器用于存储计算机程序代码，所述计算机程序代码包括计算机指令，当所述一个或多个处理器执行所述计算机指令时，使得所述电子设备执行如权利要求1-12中任一项所述的方法。

14.一种包含指令的计算机程序产品，其特征在于，当所述计算机程序产品在电子设备上运行时，使得所述电子设备执行如权利要求1-12中任一项所述的方法。

15.一种计算机可读存储介质，包括指令，其特征在于，当所述指令在电子设备上运行时，使得所述电子设备执行如权利要求1-12中任一项所述的方法。

16.一种投屏系统，其特征在于，所述投屏系统包括第一电子设备和第二电子设备，所述第一电子设备用于执行如权利要求1-6中任一项所述的方法，所述第二电子设备用于执行如权利要求7-12中任一项所述的方法。

Images