CN114286152A - 显示设备、通信终端及投屏画面动态显示方法 - Google Patents

Abstract

本申请提供一种显示设备、通信终端以及投屏画面动态显示方法，所述方法可以在用户触发连接显示设备的通信终端数量改变时，通过检测通信终端的连接数量，规划投屏画面的布局方式。再向通信终端发送包含投屏画面显示参数的通知消息，以使通信终端可以按照显示参数生成符合布局方式的投屏数据，在显示设备中进行显示。所述方法可以使显示设备支持多路投屏，并且动态的调整投屏画面的显示布局，并通知通信终端进行录屏调整，使显示的投屏画面布局更加合理。

Description

显示设备、通信终端及投屏画面动态显示方法

技术领域

本申请涉及显示设备技术领域，尤其涉及一种显示设备、通信终端及投屏画面动态显示方法。

背景技术

显示设备是指能够输出具体显示画面的终端设备，可以是智能电视、通信终端、智能广告屏、投影仪等终端设备。以智能电视为例，智能电视是基于Internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体的电视产品，用于满足用户多样化和个性化需求。

显示设备还可以通过无线局域网等通信方式与通信终端建立投屏连接关系，即显示设备可以接收通信终端共享的投屏数据，并实时显示接收到的投屏数据，即显示通信终端的当前画面或者在通信终端上播放的媒资画面。但是，受限于显示设备的音视频输出方式，同一个显示设备通常不能同时与多个通信终端建立投屏连接，无法满足多用户的投屏需求。

发明内容

本申请提供了一种显示设备、通信终端及投屏画面动态显示方法，以解决传统显示设备不能同时与多个通信终端建立投屏连接的问题。

第一方面，本申请提供一种显示设备，包括：显示器、通信器和控制器。其中，所述显示器被配置为显示投屏界面；所述通信器被配置为与通信终端建立投屏连接；所述控制器被配置为执行以下程序步骤：

检测通信终端的连接数量；

根据所述连接数量规划投屏画面的布局方式，以获得所述投屏画面的显示参数；

向所述投屏画面对应的通信终端发送通知消息，所述通知消息包括所述显示参数，所述通知消息用于使所述通信终端按照所述显示参数生成投屏数据；

接收所述通信终端反馈的所述投屏数据，以及按照所述布局方式显示所述投屏数据。

第二方面，本申请还提供通信终端，包括：显示单元、通信单元和处理器。所述显示单元被配置为显示终端界面；所述通信单元被配置为与显示设备建立投屏连接；所述处理器被配置为执行以下程序步骤：

接收所述显示设备发送的通知消息，所述通知消息包括投屏画面的显示参数，所述显示参数为所述显示设备根据当前通信终端连接数量规划投屏画面布局方式时获得；

按照所述显示参数生成投屏数据；

向所述显示设备反馈所述投屏数据。

第三方面，本申请还提供一种投屏画面动态显示方法，包括：

显示设备检测通信终端的连接数量，并根据所述连接数量规划投屏画面的布局方式，以获得所述投屏画面的显示参数；

所述显示设备向所述投屏画面对应的通信终端发送通知消息，所述通知消息包括所述显示参数；

通信终端接收所述显示设备发送的通知消息，并按照所述显示参数生成投屏数据；

所述通信终端向所述显示设备反馈所述投屏数据；

所述显示设备按照所述布局方式显示所述投屏数据。

由以上技术方案可知，本申请提供的显示设备、通信终端以及投屏画面动态显示方法可以在用户触发连接显示设备的通信终端数量改变时，通过检测通信终端的连接数量，规划投屏画面的布局方式。再向通信终端发送包含投屏画面显示参数的通知消息，以使通信终端可以按照显示参数生成符合布局方式的投屏数据，在显示设备中进行显示。所述方法可以使显示设备支持多路投屏，并且动态的调整投屏画面的显示布局，并通知通信终端进行录屏调整，使显示的投屏画面布局更加合理。

附图说明

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例中显示设备与控制装置之间操作场景的示意图；

图2为本申请实施例中显示设备的硬件配置框图；

图3为本申请实施例中显示设备软件配置示意图；

图4为本申请实施例中显示设备应用程序的图标控件界面显示示意图；

图5为本申请实施例中通信终端的结构示意图；

图6为本申请实施例中通信终端的软件架构示意图；

图7为本申请实施例中通信终端的用户界面示意图；

图8为本申请实施例中投屏效果示意图；

图9为本申请实施例中投屏操作流程示意图；

图10为本申请实施例中多通信终端投屏连接示意图；

图11为本申请实施例中划分两个显示区域的效果示意图；

图12为本申请实施例中投屏画面动态显示方法流程示意图；

图13为本申请实施例中划分三个显示区域的效果示意图；

图14为本申请实施例中响应连接指令检测连接数量的流程示意图；

图15为本申请实施例中响应退出指令检测连接数量的流程示意图；

图16为本申请实施例中匹配布局模板的流程示意图；

图17为本申请实施例中发送提示消息的流程示意图；

图18为本申请实施例中通信终端生成投屏数据流程示意图。

具体实施方式

为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示，用户可通过智能设备300或控制装置100操作显示设备200。

在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制显示设备200。

在一些实施例中，也可以使用智能设备300(如通信终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。

在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。

在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。

图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。

图3示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中控制器包括处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。

在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。

在一些实施例中，显示器260可为液晶显示器、OLED显示器、以及投影显示器，还可以为一种投影装置和投影屏幕。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。

在一些实施例中，用户接口，可用于接收控制装置100(如：红外遥控器等)的控制信号。

在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。

在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。

在一些实施例中，调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。

在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中，所述对象可以是可选对象中的任何一个，例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。

在一些实施例中控制器包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM Random AccessMemory，RAM)，ROM(Read-Only Memory,ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。

CPU处理器。用于执行存储在存储器中操作系统和应用程序指令，以及根据接收外部输入的各种交互指令，来执行各种应用程序、数据和内容，以便最终显示和播放各种音视频内容。CPU处理器，可以包括多个处理器。如，包括一个主处理器以及一个或多个子处理器。

在一些实施例中，图形处理器，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等。图形处理器包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象；还包括渲染器，对基于运算器得到的各种对象，进行渲染，上述渲染后的对象用于显示在显示器上。

在一些实施例中，视频处理器，用于将接收外部视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频处理，可得到直接可显示设备200上显示或播放的信号。

在一些实施例中，视频处理器，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。其中，解复用模块，用于对输入音视频数据流进行解复用处理。视频解码模块，用于对解复用后的视频信号进行处理，包括解码和缩放处理等。图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。帧率转换模块，用于对转换输入视频帧率。显示格式化模块，用于将接收帧率转换后视频输出信号，改变信号以符合显示格式的信号，如输出RGB数据信号。

在一些实施例中，音频处理器，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理，得到可以在扬声器中播放的声音信号。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。

在一些实施例中，“用户界面”，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。

在一些实施例中，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。

参见图4，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称“应用层”)，应用程序框架(Appl icat ion Framework)层(简称“框架层”)，安卓运行时(Android runtime)和系统库层(简称“系统运行库层”)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的应用程序。在具体实施时，应用程序层中的应用程序包不限于以上举例。

框架层为应用程序提供应用编程接口(application programming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口，可在执行中访问系统中的资源和取得系统的服务。

如图4所示，本申请实施例中应用程序框架层包括管理器(Managers)，内容提供者(Content Provider)等，其中管理器包括以下模块中的至少一个：活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互；位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(NotificationManager)用于控制通知消息的显示和清除；窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能，比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。

图5示出了通信终端300的结构示意图。

下面以通信终端300为例对实施例进行具体说明。应该理解的是，图5所示通信终端300仅是一个范例，并且通信终端300可以具有比图5中所示的更多的或者更少的部件，可以组合两个或多个的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

如图5所示，通信终端300包括：射频(radio frequency，RF)电路310、存储器320、显示单元330、摄像头340、传感器350、音频电路360、无线保真(Wireless Fidelity，Wi-Fi)电路370、处理器380、蓝牙电路381、以及电源390等部件。

RF电路310可用于在收发信息或通话过程中信号的接收和发送，可以接收基站的下行数据后交给处理器380处理；可以将上行数据发送给基站。通常，RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。

存储器320可用于存储软件程序及数据。处理器380通过运行存储在存储器320的软件程序或数据，从而执行通信终端300的各种功能以及数据处理。存储器320可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器320存储有使得通信终端300能运行的操作系统。本申请中存储器320可以存储操作系统及各种应用程序，还可以存储执行本申请实施例所述方法的代码。

显示单元330可用于接收输入的数字或字符信息，产生与通信终端300的用户设置以及功能控制有关的信号输入，具体地，显示单元330可以包括设置在通信终端300正面的触摸屏331，可收集用户在其上或附近的触摸操作，例如点击按钮，拖动滚动框等。

显示单元330还可用于显示由用户输入的信息或提供给用户的信息以及通信终端300的各种菜单的图形用户界面(graphical user interface，GUI)。具体地，显示单元330可以包括设置在通信终端300正面的显示屏332。其中，显示屏332可以采用液晶显示器、发光二极管等形式来配置。显示单元330可以用于显示本申请中所述的各种图形用户界面。

其中，触摸屏331可以覆盖在显示屏332之上，也可以将触摸屏331与显示屏332集成而实现通信终端300的输入和输出功能，集成后可以简称触摸显示屏。本申请中显示单元330可以显示应用程序以及对应的操作步骤。

摄像头340可用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给处理器380转换成数字图像信号。

通信终端300还可以包括至少一种传感器350，比如加速度传感器351、距离传感器352、指纹传感器353、温度传感器354。通信终端300还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。

音频电路360、扬声器361、麦克风362可提供用户与通信终端300之间的音频接口。音频电路360可将接收到的音频数据转换后的电信号，传输到扬声器361，由扬声器361转换为声音信号输出。通信终端300还可配置音量按钮，用于调节声音信号的音量。另一方面，麦克风362将收集的声音信号转换为电信号，由音频电路360接收后转换为音频数据，再将音频数据输出至RF电路310以发送给比如另一终端，或者将音频数据输出至存储器320以便进一步处理。本申请中麦克风362可以获取用户的语音。

Wi-Fi属于短距离无线传输技术，通信终端300可以通过Wi-Fi电路370帮助用户收发电子邮件、浏览网页和访问流媒体等，它为用户提供了无线的宽带互联网访问。

处理器380是通信终端300的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器320内的软件程序，以及调用存储在存储器320内的数据，执行通信终端300的各种功能和处理数据。在一些实施例中，处理器380可包括一个或多个处理单元；处理器380还可以集成应用处理器和基带处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，基带处理器主要处理无线通信。可以理解的是，上述基带处理器也可以不集成到处理器380中。本申请中处理器380可以运行操作系统、应用程序、用户界面显示及触控响应，以及本申请实施例所述的处理方法。另外，处理器380与输入单元330和显示单元340耦接。

蓝牙电路381，用于通过蓝牙协议来与其他具有蓝牙电路的蓝牙设备进行信息交互。例如，通信终端300可以通过蓝牙电路381与同样具备蓝牙电路的可穿戴电子设备(例如智能手表)建立蓝牙连接，从而进行数据交互。

通信终端300还包括给各个部件供电的电源390(比如电池)。电源可以通过电源管理系统与处理器380逻辑相连，从而通过电源管理系统实现管理充电、放电以及功耗等功能。通信终端300还可配置有电源按钮，用于终端的开机和关机，以及锁屏等功能。

图6是本发明实施例的通信终端300的软件结构框图。

分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Android系统分为四层，从上至下分别为应用程序层，应用程序框架层，安卓运行时(Android runt ime)和系统库，以及内核层。

应用程序层可以包括一系列应用程序包。

如图6所示，应用程序包可以包括相机，图库，日历，通话，地图，导航，WLAN，蓝牙，音乐，视频，短信息等应用程序。

应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。

如图6所示，应用程序框架层可以包括窗口管理器，内容提供器，视图系统，电话管理器，资源管理器，通知管理器等。

窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕等。

内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。所述数据可以包括视频，图像，音频，拨打和接听的电话，浏览历史和书签，电话簿等。

视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。

电话管理器用于提供通信终端300的通信功能。例如通话状态的管理(包括接通，挂断等)。

资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。

通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。比如通知管理器被用于告知下载完成，消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知，例如后台运行的应用程序的通知，还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息，发出提示音，通信终端振动，指示灯闪烁等。

Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。

核心库包含两部分：一部分是java语言需要调用的功能函数，另一部分是安卓的核心库。

应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理，堆栈管理，线程管理，安全和异常的管理，以及垃圾回收等功能。

系统库可以包括多个功能模块。例如：表面管理器(surface manager)，媒体库(Media Libraries)，三维图形处理库(例如：OpenGL ES)，2D图形引擎(例如：SGL)等。

表面管理器用于对显示子系统进行管理，并且为多个应用程序提供了2D和3D图层的融合。

媒体库支持多种常用的音频，视频格式回放和录制，以及静态图像文件等。媒体库可以支持多种音视频编码格式，例如:MPEG4，H.264，MP3，AAC，AMR，JPG，PNG等。

三维图形处理库用于实现三维图形绘图，图像渲染，合成，和图层处理等。

2D图形引擎是2D绘图的绘图引擎。

内核层是硬件和软件之间的层。内核层至少包含显示驱动，摄像头驱动，音频驱动，传感器驱动。

下面结合捕获拍照场景，示例性说明通信终端300软件以及硬件的工作流程。

当触摸屏331接收到触摸操作，相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标，触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件，识别该输入事件所对应的控件。以该触摸操作是触摸单击操作，该单击操作所对应的控件为相机应用图标的控件为例，相机应用调用应用框架层的接口，启动相机应用，进而通过调用内核层启动摄像头驱动，通过摄像头340捕获静态图像或视频。

在一些具体实施中，如图7所示，用户通过触摸用户界面上的应用图标可以打开相应的应用程序，或者通过触摸用户界面上的文件夹图标可以打开相应的文件夹。

基于上述显示设备200和通信终端300，可以通过建立投屏连接，使显示设备200播放显示通信终端300中的内容，如图8所示。在一些实施例中，如图9所示，为了建立投屏连接关系，用户可以通过通信终端300发出投屏连接请求，并通过WiFi网络将投屏连接请求发送给显示设备200。显示设备200再根据投屏连接请求完成传输协议配置，从而与通信终端300之间建立投屏数据的传输通道。

显示设备200还可以通过不同连接方式实现与通信终端300之间的投屏连接。例如，在显示设备200和通信终端300接入同一个无线局域网时，可以基于WiFi网络建立投屏连接。又例如，在显示设备200和通信终端300上均设有NFC(Near Field Communication，近场通信)组件时，可以通过NFC组件建立投屏连接关系。显然，显示设备200与通信终端300之间还可以采用其他有线或无线连接方式，从而建立投屏连接关系，例如RF射频连接、红外连接、蜂窝网络以及本领域技术人员在上述实施例提供的连接方式基础上所能够联想到的其他连接方式。

在建立投屏连接后，显示设备200可以通过投屏数据通道接收通信终端300的相关数据，从而在显示设备200中播放相关内容。在不同的投屏数据传输协议下，显示设备200获取的投屏数据形式不同。例如，在DLNA(Digital Living Network Alliance，数字生活网络联盟)协议下，显示设备200可以通过投屏数据通道获取通信终端300中某一资源的链接地址，并通过访问该链接地址获取媒资内容数据，从而播放该媒资数据。同时显示设备200还可以在播放媒资数据时，通过投屏数据通道获取通信终端300发送的控制指令，如快进、暂停、停止投屏等。例如，通过通讯协议建立好连接后，手机等通信终端300与显示设备200会进行设备功能与网络条件的协商，以选择适合的影音传输格式。建立影音串流的联机协议(Session)后，再通过一连串的实时串流协议(RTSP)控制命令，以控制影音串流的播放及终止。

而在Miracast投屏、Airplay投屏、NFC镜像投屏、乐播投屏等其他投屏连接协议下，显示设备200可以直接从通信终端300获取视频数据流。该视频数据流可以是通信终端300的显示单元310最终显示画面对应的视频数据流，即该视频数据流中包括通信终端300中的媒资内容画面、UI界面以及其他可在显示单元310中显示的视频画面内容。视频数据流也可以仅为通信终端300中可被获取视频数据，如正在播放的媒资视频数据等。此时，通信终端300可以作为显示设备200的一个信号源，显示设备200可以通过投屏数据通道不断获取视频数据，并实时显示在显示器275中，实现与通信终端300同步显示的效果。

通信终端300根据不同的投屏协议能够获取不同的投屏数据。例如，对于系统应用或直接在系统层级进行投屏，通信终端300可以采用Miracast投屏、Airplay投屏或WiDi投屏协议建立投屏数据通道。

其中，Miracast投屏是由Wi-Fi联盟制定，以Wi-Fi直连为基础的无线显示标准。Miracast投屏可适用于Android设备，即Android设备可通过Miracast投屏的方式分享视频画面。通常，Android5.0以上的智能设备内置Miracast协议，因此可以在无需安装任何软件的情况下直接通过投屏设备与接收端设备WiFi网卡间的WiFiP2P功能进行直接无线投屏。此外，Miracast投屏还支持音视频同步传输。但是，由于Android设备太多太杂，Miracast不能完全兼容所有Android设备，并且基于Miracast的投屏没有投屏码功能，不能阻止恶意或者误投屏。

Airplay投屏是由苹果公司推出的一种无线播放技术，适用于iOS和Mac系统的无线投屏。苹果系列设备内置Airplay投屏功能，配合支持AirPlay server服务的投屏器使用，效果清晰稳定，协议自带投屏码功能。但是，需保证苹果设备与投屏器在同一个局域网下(同网段)使用，不能跨网段、跨VLAN使用。

WiDi投屏是Intel主导的一种无线播放技术，也基于WiFi Direct直连技术。Windows8/10笔记本电脑原生支持WiDi投屏，可以无需安装任何软件直接投屏，并且支持USB反向控制功能。

上述三种投屏协议不仅能够获取通信终端300中的视频数据流，而且能够获取通信终端300中的音频数据流，从而可以将视频数据和音频数据同步发送给显示设备200，使显示设备200能够同步播放视频和音频。由于上述Miracast投屏协议和Airplay投屏协议需要系统级应用权限，因此Miracast投屏协议和Airplay投屏协议通常仅适用于系统应用，或者同一厂商的显示设备200和通信终端300通过操作系统内置规则直接建立投屏连接。

显示设备200可以基于上述实施例中提供的任一种投屏方式，与通信终端300建立投屏连接。在一些实施例中，显示设备200还可以通过上述投屏方式中的一种或多种，与多个通信终端建立投屏连接关系。例如，显示设备200可以同时与两个通信终端300建立投屏连接，并在显示画面中划分出显示区域，用于分别显示两个通信终端300共享的投屏画面。即如图10所示，可以在显示设备200所显示用户界面的左侧显示终端A共享的投屏画面，在用户界面的右侧显示终端B共享的投屏画面。

为了能够在显示设备200上显示多个通信终端300共享的投屏画面，在一些实施例中，当显示设备200与多个通信终端300建立投屏连接时，显示设备200可以对用于投屏显示的用户界面进行区域划分，如二等分、三等分、四等分等。通过区域划分所获得多个显示区域后，显示设备200再分别将投屏画面显示在每个划分区域中。

另外，通信终端300可以按照使用方式的不同，可能处于不同的放置状态，如对于智能手机等通信终端300，其在使用中可能处于竖屏状态和横屏状态。其中，竖屏状态是指所显示画面的宽度小于高度的状态，横屏状态是指所显示画面的宽度大于高度的状态。在不同的放置状态下，通信终端300可以呈现不同的画面布局方式。基于此，当显示设备200通过区域划分方式显示多个通信终端300的投屏画面时，各显示区域会因为通信终端300所处放置状态的不同，而呈现为不同的画面比例。

例如，如图11所示，对于显示分辨率为4096×2160的显示设备200，在用户界面中心位置竖向二等分获得两个显示区域的过程中，区域划分可以获得两个宽度为2048、高度为2160的显示区域，即获得宽度小于高度的竖向形状区域，这种形式的显示区域更适合显示竖屏状态的投屏画面。因此，当该区域对应的通信终端300处于横屏状态时，会导致投屏画面不能充满大部分显示区域，造成显示区域的浪费。

另外，在多个通信终端300所处的放置状态不相同时，显示设备200往往通过拉伸填充的方式，使每个投屏画面都能够充满显示区域。这种显示方式会使投屏画面发生较大变形，影响用户的观影体验。

为了充分利用显示区域、减小画面拉伸变形情况，本申请的部分实施例中还提供一种投屏画面动态显示方法，应用于显示设备200，用于提高用户的观影体验。其中，能够应用所述投屏画面动态显示方法的显示设备200包括：显示器260、通信器220以及控制器250。所述显示器260被配置为显示投屏界面。所述通信器220被配置为与通信终端300建立投屏连接。所述控制器250则被配置为执行上述投屏画面动态显示方法，如图12所示，具体包括以下内容：

检测通信终端300的连接数量。显示设备200可以在运行过程中实时检测运行状态，并在确定需要触发显示投屏画面的过程中，检测与显示设备200建立投屏连接的通信终端300的数量。通信终端300的连接数量，可以通过对显示设备200所在无线局域网络中各通信终端进行分别检测判断获得。例如，在需要检测通信终端300的连接数量时，显示设备200的控制器250可以通过通信器220，调用当前无线网络中接入的所有通信终端300，再通过抓取每个通信终端的传输数据，并从中识别投屏数据标志，以检测当前通信终端300是否与显示设备200建立通信连接。

连接数量还可以通过显示设备200实时维护的数据表进行检测获得。例如，在显示设备200的数据库中，可以随着投屏连接过程实时维护一个连接设备列表，在连接设备列表中的各通信终端300可以根据是否在线并建立投屏连接关系，设置不同的状态值，即通信终端300在线且连接可用时，状态值“devices online＝1”；而通信终端300离线或者连接不可用时，状态值“devices online＝0”。基于此，显示设备200可以在需要对连接数量进行检测时，遍历状态值“devices onl ine＝1”的通信终端300的数量。

显示设备200可以在判断当前投屏界面布局需要改变时执行对通信终端300数量的检测。例如，显示设备200可以实时监听每个通信终端300在投屏连接中的接入状态，当检测到任一通信终端300新接入或退出连接时，显示设备200可以执行检测通信终端300的连接数量的步骤。

在一些实施例中，显示设备200还可以周期性检测通信终端300的连接数量。例如，显示设备200可以在开始建立投屏连接后，通过各通信终端300的心跳命令对通信终端300连接数量进行检测。通过检测通信终端300的连接数量，显示设备200可以及时对通信终端300进行投屏连接状态进行检测，从而在通信终端因超出网络范围或其他硬件故障原因离线时，可以对投屏界面的进行调整。

在一些实施例中，显示设备200还可以通过对用户的控制指令进行检测，并针对部分控制指令做出响应，检测通信终端300的连接数量。例如，当显示设备200检测到用户输入了用于对页面布局方式进行调整的控制指令时，显示设备200可以执行检测通信终端300的连接数量的步骤，以触发显示设备200后续对投屏数据获取方式的调整。

在检测到通信终端300的连接数量后，显示设备200可以根据检测到的连接数量规划投屏画面的布局方式，以获得投屏画面的显示参数。显示设备200中可以内置多种布局方式模板，在获取连接数量后，显示设备200可以根据连接数量匹配响应的模板。

对于不同的显示设备200形式，以及不同的投屏连接用户，内置的布局方式模板也可以不同。例如，对于分享手机主界面演示操作的投屏连接，由于手机主界面操作多处于竖屏状态，因此布局方式模板可以是通过竖直方向等距离划分方式获得的布局模板，即在显示设备200的屏幕上划分三个宽度小于高度的竖向区域；而对于分享游戏界面操作的投屏连接，由于游戏界面多处于横屏状态，因此布局方式模板可以是通过水平方向等距离划分方式获得布局模板，即在显示设备200的屏幕上划分三个宽度大于高度的横向区域，用于显示手机共享的游戏画面。

在一些实施例中，当显示设备200没有明确设置投屏连接通途时，为了能够充分利用显示区域，显示设备200可以按照最大化显示的原则规划画面布局。例如，在显示3个投屏画面区域时，可以保持一个竖向区域和两个横向区域。如此，可以每个显示区域都保持为16：9或9:16的形状，以适应通信终端300的画面比例。

在一些实施例中，显示设备200还可以在检测到通信终端300的连接数量后，可以通过向用户界面中添加显示窗口的方式，以基于连接数量规划布局方式。例如，当检测到当前显示设备200建立投屏连接的通信终端300数量为2个时，可以向用户界面添加2个显示窗口，用于分别显示每个通信终端300共享的投屏画面。每个显示窗口可以具有固定的形状和比例，并且可以要求显示设备200按照该比例提供显示画面。

在一些实施例中，当使用多个显示窗口显示多个投屏画面时，如果与显示设备200建立投屏连接的通信终端300的数量较多时，多个显示窗口之间还可以保持在特定的层级关系。例如，可以按照与显示设备200建立投屏连接的顺序，设置显示窗口的层级关系，即最后建立投屏连接的通信终端300所共享的投屏画面显示在最上层。

在显示设备200规划投屏画面的布局方式后，显示设备200还可以根据规划的布局方式确定投屏画面的显示参数。显示参数用于表示显示设备200所规划的布局方式中，每个显示区域的画面比例、尺寸等内容，以及根据每个显示区域的比例、尺寸所计算获得的投屏数据要求，如码率、分辨率等。

根据确定的显示参数，显示设备200可以向投屏画面对应的通信终端300发送通知消息。其中，所述通知消息包括显示参数，所述通知消息用于使通信终端300按照显示参数生成投屏数据。例如，如图13所示，显示设备200在检测到当前通信终端300的连接数量为3个时，可以通过规划布局方式确定三个投屏画面的显示区域，即：区域一为分辨率“1080×1920”的竖向区域；区域二和区域三为分辨率“1280×720”的横向区域。基于上述显示参数，显示设备200可以生成通知消息，并将生成的通知消息发送给通信终端300，以使通信终端300可以按照上述分辨率生成投屏数据。

为了生成投屏数据，通信终端300可以内置录屏程序，并在收到显示设备200发送的通知消息后，启动录屏程序对通知消息进行解析，提取出显示参数。再根据显示参数设置录屏程序中的画面参数。如显示参数为竖向、1080×1920时，通信终端300可以控制录屏程序的录屏过程，使生成的录屏视频画面的分辨率为1080×1920。

需要说明的是，如果通信终端300的显示分辨率与通知消息中设定的分辨率不相符时，通信终端300可以通过填充或裁切的方式，对画面进行处理以使生成的投屏数据符合显示参数中规定的形式。例如，显示设备200中设置的每个显示区域的画面比例为9:16，但通信终端300的屏幕比例为9:18时，为了能够显示完全，通信终端300可以对显示画面执行缩小处理，使投屏画面可以在高度上显示完全，此时，生成的投屏数据所对应画面中，将会在两侧填充黑色区域，以使整体画面维持在9:16的画面比例。

在通信终端300生成投屏数据以后，可以将生成的投屏数据反馈给显示设备200，显示设备200则可以对接收到的投屏数据进行显示，即按照布局方式显示投屏数据中的画面。例如，在显示设备200分别将包含显示参数“竖向，1080×1920”、“横向，1280×720”、“横向，1280×720”的通知消息发送给三个通信终端时，三个通信终端300可以分别反馈分辨率为1080×1920、1280×720和1280×720的三个投屏数据流，显示设备200再分别对接收到的三个投屏数据流，进行解析、渲染，以最终形成投屏画面。

需要说明的是，为了能够在显示设备200上同时显示多个投屏画面，显示设备200可以在接收到多个投屏数据流时，对每个通信终端300各创建一个数据缓存区，用于存放其各自发送过来的投屏数据，显示设备200上布局的各显示控件从对应的数据缓存区获取视频数据进行显示，当某个通信终端300断开连接时，显示设备200还可以对其对应的数据缓存区进行销毁释放。

由以上技术方案可知，上述实施例提供的投屏画面动态显示方法可以通过检测通信终端300的连接数量规划多个投屏画面在投屏界面中的布局方式，并向每个通信终端300发送包含每个区域显示参数的通知消息，使通信终端300可以按照与布局方式相匹配的方式生成投屏数据。这样的显示方式可以保证最终显示设备200所呈现的画面能够适应布局要求，缓解画面的变形，提高用户观影体验。

在一些实施例中，显示设备200可以在通信终端300接入时，启动检测通信终端300的连接数量。即如图14所示，显示设备200可以获取用户输入的用于建立投屏连接的连接指令，并响应于所述连接指令，向所述通信终端300发起投屏连接。

其中，连接指令可以通过不同的方式完成输入。例如，对于首次与显示设备200建立投屏连接的通信终端300。用户可以先通过网络设置连接显示设备200所在的无线网络，再通过通信终端300上执行交互操作，如点击“投屏”按钮，发起投屏连接。显示设备200则可以在接收到投屏连接后，显示投屏连接配对界面，此时用户需要再基于该投屏连接的配对界面，再次执行交互操作，如在投屏设备列表中选中对应的通信终端300，使显示设备200与通信终端300可以建立投屏连接。可见，对于首次连接的通信终端300，所述连接指令为上述基于显示设备200和通信终端300的一系列交互动作组合。

又例如，对于不是首次与显示设备200建立投屏连接的通信终端300，由于显示设备200和通信终端300中可以相互存储对方的设备信息，因此用户可以直接在通信终端300上点击“投屏”按钮发起投屏操作，此时显示设备200同样可以接收到投屏连接指令，并自动响应于该连接指令实现与通信终端300的相互握手，以完成投屏连接。

在投屏连接配置完成后，显示设备200还可以遍历通信终端300的连接数量。例如，在一个通信终端300发起建立投屏连接后，显示设备200可以先等待投屏连接的配置过程。当投屏连接的配置完成后，再遍历当前连接的通信终端300总数量。即检测的通信终端300的连接数量中，包括新建立投屏连接的通信终端300。

在一些实施例中，显示设备200还可以在检测到通信终端300停止投屏连接时，执行对连接数量的检测，即如图15所示，显示设备200可以在检测通信终端300的连接数量的步骤中，获取用户输入的用于断开投屏连接的退出指令，并响应于该退出指令，断开通信终端300的投屏连接，并在断开投屏连接后，遍历剩余通信终端300的连接数量。

例如，当3个通信终端300同时与显示设备200建立投屏连接时，用户可以在其中一个通信终端300上点击“停止投屏”按钮，控制通信终端300不再执行录屏程序。此时，显示设备200可以在检测到通信终端300不再发送投屏数据时，自动断开与通信终端300建立的投屏连接。并在断开投屏连接后，检测剩余通信终端300的连接数量为2个。从而按照2个通信终端300的使用状态，重新规划投屏界面中的布局方式。

可见，在上述实施例中，由于在新的通信终端300建立投屏连接，或者任一通信终端300退出投屏时，显示设备200所呈现的投屏界面中投屏画面的数量发生变化，相应的布局方式也将发生变化。因此，上述连接数量检测方式可以自动适应显示设备200上画面的布局方式，及时调整显示内容，提高用户体验。

在一些实施例中，当显示设备200与通信终端300建立投屏连接后，显示设备200还可以在向通信终端300发起投屏连接时，建立投屏数据通道，并在投屏数据通道建立成功后，创建显示控件，以通过显示控件显示通过投屏数据通道接收的投屏数据。

其中，显示控件是一种内置在显示设备200中的显示控制程序，如surface View或Texture View等。显示控件可以添加数量，呈现为不同的显示方式。例如，当显示设备200中包含1个显示控件时，显示控件可以按照全屏的方式进行显示。当显示设备200包含2个显示控件时，两个显示控件为左右两个竖式布局的窗口形式。

如图16所示，在一些实施例中，为了可以确定显示参数，显示设备200可以在根据连接数量规划投屏画面的布局方式时，先检测显示器260的屏幕尺寸信息，再以连接数量和屏幕尺寸信息为索引，在数据库中匹配布局模板，从而在布局模板中提取显示参数。

对于不同类型的显示设备200，其显示器260的屏幕尺寸信息不同，因此符合其屏幕规格的布局方式也不同。例如，对于常规显示比例的智能电视，为了充分利用显示空间，在显示3个投屏画面时，可以适配一个竖向、两个横向的显示区域布局方式；而对于超宽屏的电影类播放设备，其在显示3个投屏画面时，可以采用竖向三等分的显示区域布局方式。

此外，在显示设备200或者服务器400中，可以运行维护一个数据库，数据库中可以存储各种屏幕尺寸规格和连接数量对应的布局模板。因此，显示设备200可以根据屏幕尺寸信息和连接数量，确定与当前显示状态相适应的最佳布局方式。

在一些实施例中，显示设备200还可以根据布局模板的匹配结果，确定最终采用的布局方式。即在数据库中匹配布局模板的步骤中，如果在数据库中未匹配到布局模板，则可以直接利用匹配获得的布局模板确定布局方式；而如果在数据库中未匹配到布局模板，则可以对显示区域执行区域划分，确定合适的布局方式。即显示设备200可以获取通信终端300的设备参数，并根据设备参数，在显示区域中划分与连接数量相同的子区域，再通过遍历每个子区域的图形参数，以生成显示参数。

例如，在数据库中未匹配到布局模板时，显示设备200可以先检测当前已建立投屏连接的通信终端300的设备参数，如型号、屏幕尺寸规格等。显示设备200再根据所连接的所有通信终端300的屏幕尺寸规格确定相对应的显示区域形状。显然，为了获得更好的显示效果，显示区域形状可以与通信终端300的屏幕形状相似。显示设备200再根据确定的显示区域形状执行显示区域的划分，从而在保证显示内容完整的前提下，最大化利用显示空间。

在一些实施例中，显示设备200还可以在向投屏画面对应的通信终端300发送通知消息的步骤中，提取显示参数，并根据显示参数生成通知消息。其中，所述显示参数包括每个显示窗口的显示方向。所述显示方向用于指示所述通信终端按照设定的方向生成投屏数据。为了适应通信终端300的放置状态，显示设备200在确定布局方式后，可以优先按照每个显示区域的形状匹配相适应的通信终端300。例如，当显示窗口的显示方向为竖向时，可以在此窗口中优先显示处于竖屏状态的通信终端300的投屏画面；当显示窗口的显示方向为横向时，可以在此窗口中优先显示处于横屏状态的通信终端300的投屏画面。

由于在用户界面中所包含的投屏画面数量越多，则每个显示区域所占有的面积越小，在每个显示区域中所呈现的最终画面效果越差，而当显示区域较小时，显示区域无法针对高画质的显示内容获得相应的效果，因此为了减少总的数据传输量，在检测到通信终端300的连接数量后，显示设备200还可以根据连接数量确定投屏数据的画面质量。即所述显示参数还包括每个显示窗口的码率和分辨率，以使通信终端300可以参照设置的码率和分辨率生成投屏数据。

显然，当与显示设备200建立投屏连接的通信终端300的数量越多时，相应的每个显示区域的范围越小，则可以设置码率和分辨率越小，以使投屏数据的传输数据量越小，反之亦然。其中，码率可以与连接数量之间保持一一对应，或者多对一的对应关系。如显示设备200同时连接1个通信终端300或2个通信终端300时，可以设置传输码率为5Mb/s；如显示设备200同时连接3个通信终端300或4个通信终端300时，可以设置传输码率为3Mb/s。

分辨率可以与划分显示区域后，每个显示区域在宽度和高度方向所占的像素数量相同。例如，第一显示区域所占像素数量为1080×1920时，对应投屏数据的分辨率也可以为1080×1920。第二显示区域和第三显示区域所占像素数量为1280×720时，对应投屏数据的分辨率也可以为1280×720。

在确定显示参数后，根据显示参数生成的通知消息中也需要包括上述参数内容，即通知消息中包括所述显示方向、码率和分辨率，以使通信终端300可以在接收到通知消息后，可以从通知消息中解析出显示方向、码率和分辨率，并按照上述参数生成投屏数据，保证投屏画面与各显示区域的一致性。

需要说明的是，由于布局方式的限制，即使在生成投屏数据的过程中，通信终端300的放置状态与显示区域对应的显示方向不匹配时，通信终端300仍按照显示区域的形状生成投屏数据。例如，当显示区域为竖向形状，而对应通信终端300为横屏状态时，通信终端300依然按照竖向形状生成投屏画面，但在生成投屏数据的过程中，可以在显示画面的顶部和底部分别添加黑色区域，使整体画面呈现为宽度小于高度的竖向画面，以使投屏画面可以在不拉伸变形的状态下显示在竖向形状的显示区域内。

但由于显示区域与放置状态不匹配时，容易造成显示区域的大部分画面显示为纯色填充的背景，因此，在一些实施例中，显示设备200可以在检测到显示区域与放置状态不匹配时，通过提示信息提示用户调整通信终端300的放置状态。即如图17所示，显示设备200可以先检测投屏界面中每个投屏画面的有效画面范围，再计算有效画面范围占显示窗口总范围的显示比例，如果显示比例小于或等于比例阈值，即可以确定显示区域与放置状态不匹配，因此可以向通信终端300发送提示消息，以提示用户手动或通过通信终端300内部机构自动旋转方向。

例如，在当显示区域为竖向形状，而对应通信终端300为横屏状态时，显示设备200可以检测到显示比例小于或等于比例阈值，因此可以向通信终端300发送提示消息，如“当前显示方向不匹配，请转动手机至竖屏状态”，提示用户将通信终端300调整至树屏状态，增大投屏数据中有效画面的显示比例。

基于上述显示设备200，在本申请的部分实施例中还提供一种通信终端300，包括：显示单元330、通信单元以及处理器380。其中，所述显示单元330被配置为显示终端界面，所述通信单元被配置为与显示设备200建立投屏连接；如图18所示，所述处理器380被配置为执行以下程序步骤：

接收所述显示设备发送的通知消息，所述通知消息包括投屏画面的显示参数，所述显示参数为所述显示设备根据当前通信终端连接数量规划投屏画面布局方式时获得；

按照所述显示参数生成投屏数据；

向所述显示设备反馈所述投屏数据。

基于上述显示设备200和通信终端300，本申请的部分实施例中还提供一种投屏画面动态显示方法，包括以下步骤：

显示设备200检测通信终端300的连接数量，并根据所述连接数量规划投屏画面的布局方式，以获得所述投屏画面的显示参数；

所述显示设备200向所述投屏画面对应的通信终端300发送通知消息，所述通知消息包括所述显示参数；

通信终端300接收所述显示设备200发送的通知消息，并按照所述显示参数生成投屏数据；

所述通信终端300向所述显示设备200反馈所述投屏数据；

所述显示设备200按照所述布局方式显示所述投屏数据。

由以上技术方案可知，上述实施例提供的投屏画面动态显示方法可以在用户触发连接显示设备200的通信终端300数量改变时，通过检测通信终端300的连接数量，规划投屏画面的布局方式。再向通信终端300发送包含投屏画面显示参数的通知消息，以使通信终端300可以按照显示参数生成符合布局方式的投屏数据，在显示设备200中进行显示。所述方法可以使显示设备200支持多路投屏，并且动态的调整投屏画面的显示布局，并通知通信终端300进行录屏调整，使显示的投屏画面布局更加合理。

本申请提供的实施例之间的相似部分相互参见即可，以上提供的具体实施方式只是本申请总的构思下的几个示例，并不构成本申请保护范围的限定。对于本领域的技术人员而言，在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种显示设备，其特征在于，包括：

显示器，被配置为显示投屏界面；

通信器，被配置为与通信终端建立投屏连接；

控制器，被配置为：

检测通信终端的连接数量；

根据所述连接数量规划投屏画面的布局方式，以获得所述投屏画面的显示参数；

向所述投屏画面对应的通信终端发送通知消息，所述通知消息包括所述显示参数，所述通知消息用于使所述通信终端按照所述显示参数生成投屏数据；

接收所述通信终端反馈的所述投屏数据，以及按照所述布局方式显示所述投屏数据。

2.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在检测通信终端的连接数量的步骤中，获取用户输入的用于建立投屏连接的连接指令；

响应于所述连接指令，向所述通信终端发起投屏连接；

在完成所述投屏连接后，遍历所述通信终端的连接数量。

3.根据权利要求2所述的显示设备，其特征在于，所述控制器被进一步配置为：

在向所述通信终端发起投屏连接的步骤中，建立投屏数据通道；

在所述投屏数据通道建立成功后，创建显示控件，所述显示控件用于显示通过所述投屏数据通道接收的投屏数据。

4.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在检测通信终端的连接数量的步骤中，获取用户输入的用于断开投屏连接的退出指令；

响应于所述退出指令，断开所述通信终端对应的投屏连接；

遍历剩余通信终端的连接数量。

5.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在根据所述连接数量规划投屏画面的布局方式的步骤中，检测所述显示器的屏幕尺寸信息；

以所述连接数量和所述屏幕尺寸信息为索引，在数据库中匹配布局模板；

在所述布局模板中提取所述显示参数。

6.根据权利要求5所述的显示设备，其特征在于，所述控制器被进一步配置为：

在数据库中匹配布局模板的步骤中，如果在所述数据库中未匹配到所述布局模板，获取所述通信终端的设备参数；

根据所述设备参数，在显示区域中划分与所述连接数量相同的子区域；

遍历每个子区域的图形参数，以生成所述显示参数。

7.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在向所述投屏画面对应的通信终端发送通知消息的步骤中，提取所述显示参数，所述显示参数包括每个显示窗口的显示方向、码率和分辨率，所述显示方向用于指示所述通信终端按照设定的方向生成投屏数据；

根据所述显示参数生成通知消息，所述通知消息中包括所述显示方向、码率和分辨率。

8.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

检测所述投屏界面中每个投屏画面的有效画面范围；

计算所述有效画面范围占显示窗口总范围的显示比例；

如果所述显示比例小于或等于比例阈值，向所述通信终端发送提示消息，所述提示消息用于提示所述通信终端旋转方向。

9.一种通信终端，其特征在于，包括：

显示单元，被配置为显示终端界面；

通信单元，被配置为与显示设备建立投屏连接；

处理器，被配置为：

接收所述显示设备发送的通知消息，所述通知消息包括投屏画面的显示参数，所述显示参数为所述显示设备根据当前通信终端连接数量规划投屏画面布局方式时获得；

按照所述显示参数生成投屏数据；

向所述显示设备反馈所述投屏数据。

10.一种投屏画面动态显示方法，其特征在于，包括：

显示设备检测通信终端的连接数量，并根据所述连接数量规划投屏画面的布局方式，以获得所述投屏画面的显示参数；

所述显示设备向所述投屏画面对应的通信终端发送通知消息，所述通知消息包括所述显示参数；

通信终端接收所述显示设备发送的通知消息，并按照所述显示参数生成投屏数据；

所述通信终端向所述显示设备反馈所述投屏数据；

所述显示设备按照所述布局方式显示所述投屏数据。

Images