CN115904290A - 显示设备、通信终端及投屏控制方法 - Google Patents

Abstract

本申请提供一种显示设备、通信终端及投屏控制方法，所述方法可以在接收到通信终端发送的投屏请求时，通过检测显示设备的屏端状态，判定当前显示设备是否可以进行投屏。再向通信终端发送包含屏端状态的通知消息，如果屏端状态为忙碌状态，通信终端可以在接收到通知消息后显示提示信息，如果屏端状态为空闲状态，通信终端可以在接收到通知消息后与所述显示设备建立投屏连接。所述方法可以在单路投屏或多路投屏时，通过多设备之间的交互，进行投屏展示处理，提高用户体验。

Description

显示设备、通信终端及投屏控制方法

技术领域

本申请涉及显示设备技术领域，尤其涉及一种显示设备、通信终端及投屏控制方法。

背景技术

显示设备是指能够输出具体显示画面的终端设备，可以是智能电视、通信终端、智能广告屏、投影仪等终端设备。以智能电视为例，智能电视是基于Internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体的电视产品，用于满足用户多样化和个性化需求。

显示设备还可以通过无线局域网等通信方式与通信终端建立投屏连接关系，即显示设备可以接收通信终端共享的投屏数据，并实时显示接收到的投屏数据，即显示通信终端的当前画面或者在通信终端上播放的媒资画面。但是，在投屏中会遇到单路、多路对应的多个设备或多协议投屏交互的场景，例如，单路或多路投屏下，当前已经有通信终端投屏到显示设备上，此时显示设备接收到其他通信终端的投屏请求应如何进行投屏处理。

发明内容

本申请提供了一种显示设备、通信终端及投屏控制方法，以解决传统显示设备与通信终端交互的问题。

第一方面，本申请提供一种显示设备，包括：显示器、通信器和控制器。其中，所述显示器被配置为显示投屏界面；所述通信器被配置为与通信终端建立投屏连接；所述控制器被配置为执行以下程序步骤：

接收目标通信终端发送的投屏请求；

响应于所述投屏请求，检测显示设备的屏端状态，所述屏端状态为空闲状态或忙碌状态；所述空闲状态用于表示所述显示设备的当前最大可投屏数量大于或等于1，且目标显示位置可用；所述忙碌状态用于表示所述显示设备的当前最大可投屏数量小于1，和/或目标显示位置不可用；

如果所述屏端状态为空闲状态，与所述目标通信终端建立投屏连接；

如果所述屏端状态为忙碌状态，向所述目标通信终端发送通知消息，所述通知消息用于使所述目标通信终端显示第一提示信息。

第二方面，本申请还提供通信终端，包括：显示单元、通信单元和处理器。所述显示单元被配置为显示终端界面；所述通信单元被配置为与显示设备建立投屏连接；所述处理器被配置为执行以下程序步骤：

向显示设备发送投屏请求，以及接收所述显示设备反馈的通知消息，所述通知消息包括所述显示设备的屏端状态；所述屏端状态为空闲状态或忙碌状态；所述空闲状态用于表示所述显示设备的当前最大可投屏数量大于或等于1，且目标显示位置可用；所述忙碌状态用于表示所述显示设备的当前最大可投屏数量小于1，和/或目标显示位置不可用；

如果所述屏端状态为空闲状态，与所述显示设备建立投屏连接；

如果所述屏端状态为忙碌状态，接收所述显示设备反馈的提示信息，以及控制显示单元显示所述提示信息。

第三方面，本申请还提供一种投屏控制方法，包括：

显示设备响应于目标通信终端发送的投屏请求，检测所述显示设备的屏端状态，所述屏端状态为空闲状态或忙碌状态；

所述显示设备向所述目标通信终端发送通知消息，所述通知消息包括所述屏端状态；

如果所述屏端状态为忙碌状态，所述目标通信终端接收所述显示设备发送的通知消息，显示提示信息；

如果所述屏端状态为空闲状态，所述目标通信终端接收所述显示设备发送的通知消息，与所述显示设备建立投屏连接。

由以上技术方案可知，本申请提供的显示设备、通信终端及投屏控制方法可以在接收到通信终端发送的投屏请求时，通过检测显示设备的屏端状态，判定当前显示设备是否可以进行投屏。再向通信终端发送包含屏端状态的通知消息，如果屏端状态为忙碌状态，通信终端可以在接收到通知消息后显示提示信息，如果屏端状态为空闲状态，通信终端可以在接收到通知消息后与所述显示设备建立投屏连接。所述方法可以在单路投屏或多路投屏时，通过多设备之间的交互，进行投屏展示处理，提高用户体验。

附图说明

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例中显示设备与控制装置之间操作场景的示意图；

图2为本申请实施例中显示设备的硬件配置框图；

图3为本申请实施例中显示设备软件配置示意图；

图4为本申请实施例中显示设备应用程序的图标控件界面显示示意图；

图5为本申请实施例中通信终端的结构示意图；

图6为本申请实施例中通信终端的软件架构示意图；

图7为本申请实施例中投屏操作流程示意图；

图8为本申请实施例中投屏效果示意图；

图9为本申请实施例中多通信终端投屏连接示意图；

图10为本申请实施例中投屏控制方法流程示意图；

图11为本申请实施例中确定当前最大可投屏数量的流程示意图；

图12为本申请实施例中检测目标显示位置界面状态的流程示意图；

图13为本申请实施例中创建投屏窗口的示意图；

图14为本申请实施例中两个通信终端的显示效果示意图；

图15为本申请实施例中三个通信终端的显示效果示意图；

图16为本申请实施例中检测目标显示位置对应通信终端的示意图；

图17为本申请实施例中三个通信终端的显示效果示意图；

图18为本申请实施例中通信终端显示第一提示信息界面示意图；

图19为本申请实施例中替换通信终端后的示意图；

图20为本申请实施例中通信终端获取屏端状态的示意图。

具体实施方式

为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示，用户可通过智能设备300或控制装置100操作显示设备200。

在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制显示设备200。

在一些实施例中，也可以使用智能设备300(如通信终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。

在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。

在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。

图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。

图3示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中控制器包括处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。

在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。

在一些实施例中，显示器260可为液晶显示器、OLED显示器、以及投影显示器，还可以为一种投影装置和投影屏幕。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。

在一些实施例中，用户接口，可用于接收控制装置100(如：红外遥控器等)的控制信号。

在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。

在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。

在一些实施例中，调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。

在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中，所述对象可以是可选对象中的任何一个，例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。

在一些实施例中控制器包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM Random AccessMemory，RAM)，ROM(Read-Only Memory，ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。

CPU处理器。用于执行存储在存储器中操作系统和应用程序指令，以及根据接收外部输入的各种交互指令，来执行各种应用程序、数据和内容，以便最终显示和播放各种音视频内容。CPU处理器，可以包括多个处理器。如，包括一个主处理器以及一个或多个子处理器。

在一些实施例中，图形处理器，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等。图形处理器包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象；还包括渲染器，对基于运算器得到的各种对象，进行渲染，上述渲染后的对象用于显示在显示器上。

在一些实施例中，视频处理器，用于将接收外部视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频处理，可得到直接可显示设备200上显示或播放的信号。

在一些实施例中，视频处理器，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。其中，解复用模块，用于对输入音视频数据流进行解复用处理。视频解码模块，用于对解复用后的视频信号进行处理，包括解码和缩放处理等。图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。帧率转换模块，用于对转换输入视频帧率。显示格式化模块，用于将接收帧率转换后视频输出信号，改变信号以符合显示格式的信号，如输出RGB数据信号。

在一些实施例中，音频处理器，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理，得到可以在扬声器中播放的声音信号。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。

在一些实施例中，“用户界面”，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。

在一些实施例中，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。

参见图4，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称“应用层”)，应用程序框架(Application Framework)层(简称“框架层”)，安卓运行时(Android runtime)和系统库层(简称“系统运行库层”)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的应用程序。在具体实施时，应用程序层中的应用程序包不限于以上举例。

框架层为应用程序提供应用编程接口(application programming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口，可在执行中访问系统中的资源和取得系统的服务。

如图4所示，本申请实施例中应用程序框架层包括管理器(Managers)，内容提供者(Content Provider)等，其中管理器包括以下模块中的至少一个：活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互；位置管理器(Locat ion Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(NotificationManager)用于控制通知消息的显示和清除；窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能，比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。

图5示出了通信终端300的结构示意图。

下面以通信终端300为例对实施例进行具体说明。应该理解的是，图5所示通信终端300仅是一个范例，并且通信终端300可以具有比图5中所示的更多的或者更少的部件，可以组合两个或多个的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

如图5所示，通信终端300包括：射频(radio frequency，RF)电路310、存储器320、显示单元330、摄像头340、传感器350、音频电路360、无线保真(Wireless Fidelity，Wi-Fi)电路370、处理器380、蓝牙电路381、以及电源390等部件。

RF电路310可用于在收发信息或通话过程中信号的接收和发送，可以接收基站的下行数据后交给处理器380处理；可以将上行数据发送给基站。通常，RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。

存储器320可用于存储软件程序及数据。处理器380通过运行存储在存储器320的软件程序或数据，从而执行通信终端300的各种功能以及数据处理。存储器320可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器320存储有使得通信终端300能运行的操作系统。本申请中存储器320可以存储操作系统及各种应用程序，还可以存储执行本申请实施例所述方法的代码。

显示单元330可用于接收输入的数字或字符信息，产生与通信终端300的用户设置以及功能控制有关的信号输入，具体地，显示单元330可以包括设置在通信终端300正面的触摸屏331，可收集用户在其上或附近的触摸操作，例如点击按钮，拖动滚动框等。

显示单元330还可用于显示由用户输入的信息或提供给用户的信息以及通信终端300的各种菜单的图形用户界面(graphical user interface，GUI)。具体地，显示单元330可以包括设置在通信终端300正面的显示屏332。其中，显示屏332可以采用液晶显示器、发光二极管等形式来配置。显示单元330可以用于显示本申请中所述的各种图形用户界面。

其中，触摸屏331可以覆盖在显示屏332之上，也可以将触摸屏331与显示屏332集成而实现通信终端300的输入和输出功能，集成后可以简称触摸显示屏。本申请中显示单元330可以显示应用程序以及对应的操作步骤。

摄像头340可用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给处理器380转换成数字图像信号。

通信终端300还可以包括至少一种传感器350，比如加速度传感器351、距离传感器352、指纹传感器353、温度传感器354。通信终端300还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。

音频电路360、扬声器361、麦克风362可提供用户与通信终端300之间的音频接口。音频电路360可将接收到的音频数据转换后的电信号，传输到扬声器361，由扬声器361转换为声音信号输出。通信终端300还可配置音量按钮，用于调节声音信号的音量。另一方面，麦克风362将收集的声音信号转换为电信号，由音频电路360接收后转换为音频数据，再将音频数据输出至RF电路310以发送给比如另一终端，或者将音频数据输出至存储器320以便进一步处理。本申请中麦克风362可以获取用户的语音。

Wi-Fi属于短距离无线传输技术，通信终端300可以通过Wi-Fi电路370帮助用户收发电子邮件、浏览网页和访问流媒体等，它为用户提供了无线的宽带互联网访问。

处理器380是通信终端300的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器320内的软件程序，以及调用存储在存储器320内的数据，执行通信终端300的各种功能和处理数据。在一些实施例中，处理器380可包括一个或多个处理单元；处理器380还可以集成应用处理器和基带处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，基带处理器主要处理无线通信。可以理解的是，上述基带处理器也可以不集成到处理器380中。本申请中处理器380可以运行操作系统、应用程序、用户界面显示及触控响应，以及本申请实施例所述的处理方法。另外，处理器380与输入单元330和显示单元340耦接。

蓝牙电路381，用于通过蓝牙协议来与其他具有蓝牙电路的蓝牙设备进行信息交互。例如，通信终端300可以通过蓝牙电路381与同样具备蓝牙电路的可穿戴电子设备(例如智能手表)建立蓝牙连接，从而进行数据交互。

通信终端300还包括给各个部件供电的电源390(比如电池)。电源可以通过电源管理系统与处理器380逻辑相连，从而通过电源管理系统实现管理充电、放电以及功耗等功能。通信终端300还可配置有电源按钮，用于终端的开机和关机，以及锁屏等功能。

图6是本发明实施例的通信终端300的软件结构框图。

分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Android系统分为四层，从上至下分别为应用程序层，应用程序框架层，安卓运行时(Android runtime)和系统库，以及内核层。

应用程序层可以包括一系列应用程序包。

如图6所示，应用程序包可以包括相机，图库，日历，通话，地图，导航，WLAN，蓝牙，音乐，视频，短信息等应用程序。

应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogram ming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。

如图6所示，应用程序框架层可以包括窗口管理器，内容提供器，视图系统，电话管理器，资源管理器，通知管理器等。

窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕等。

内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。所述数据可以包括视频，图像，音频，拨打和接听的电话，浏览历史和书签，电话簿等。

视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。

电话管理器用于提供通信终端300的通信功能。例如通话状态的管理(包括接通，挂断等)。

资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。

通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。比如通知管理器被用于告知下载完成，消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知，例如后台运行的应用程序的通知，还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息，发出提示音，通信终端振动，指示灯闪烁等。

Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。

核心库包含两部分：一部分是java语言需要调用的功能函数，另一部分是安卓的核心库。

应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理，堆栈管理，线程管理，安全和异常的管理，以及垃圾回收等功能。

系统库可以包括多个功能模块。例如：表面管理器(surface manager)，媒体库(Media Libraries)，三维图形处理库(例如：OpenGL ES)，2D图形引擎(例如：SGL)等。

表面管理器用于对显示子系统进行管理，并且为多个应用程序提供了2D和3D图层的融合。

媒体库支持多种常用的音频，视频格式回放和录制，以及静态图像文件等。媒体库可以支持多种音视频编码格式，例如：MPEG4，H.264，MP3，AAC，AMR，JPG，PNG等。

三维图形处理库用于实现三维图形绘图，图像渲染，合成，和图层处理等。

2D图形引擎是2D绘图的绘图引擎。

内核层是硬件和软件之间的层。内核层至少包含显示驱动，摄像头驱动，音频驱动，传感器驱动。

下面结合捕获拍照场景，示例性说明通信终端300软件以及硬件的工作流程。

当触摸屏331接收到触摸操作，相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标，触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件，识别该输入事件所对应的控件。以该触摸操作是触摸单击操作，该单击操作所对应的控件为相机应用图标的控件为例，相机应用调用应用框架层的接口，启动相机应用，进而通过调用内核层启动摄像头驱动，通过摄像头340捕获静态图像或视频。

基于上述显示设备200和通信终端300，可以通过建立投屏连接，使显示设备200播放显示通信终端300中的内容，例如用户通过某些具备投屏功能的应用程序，将感兴趣的视频投射到显示设备200上进行大屏播放。在一些实施例中，如图7所示，为了建立投屏连接关系，用户可以通过通信终端300发出投屏连接请求，并通过WiFi网络将投屏连接请求发送给显示设备200。显示设备200再根据投屏连接请求完成传输协议配置，从而与通信终端300之间建立投屏数据的传输通道。

在一些实施例中，显示设备200中设置有针对不同投屏协议的不同设备投屏应用，能够满足用户利用不同投屏协议的投屏设备来进行投屏显示。可以基于同一投屏协议或不同投屏协议让多个通信终端300向同一显示设备200进行投屏，同步在同一用户界面上展示多个通信终端300的投屏界面。

在一些实施例中，控制器250被配置为执行多设备投屏显示的控制过程。可以通过一种投屏协议与多个通信终端300建立投屏连接，还可以通过多种投屏协议分别与多个通信终端300建立投屏连接。例如，控制器250利用多个投屏服务分别与多个支持不同投屏协议的通信终端300建立投屏连接，以使显示设备200接收多个投屏设备的投屏内容。显示设备200通过不同投屏服务分别接收多个通信终端300的投屏请求，通信终端A、通信终端B通过不同投屏协议与显示设备200建立相关的协议连接，进行投屏相关操作。通过协议层约定，通讯过程中携带相关的协议信息，通信终端300能够拿到显示设备200的设备信息、网络信息等。

在一些实施例中，显示设备200响应于投屏请求，通过不同投屏协议的投屏服务接收监听支持不同投屏协议的通信终端300的投屏请求，利用投屏服务监听通信终端300连接，搭建指令通道和数据通道，其中，指令通道用于通信终端300和显示设备200之间的指令交互，所述数据通道用于通信终端300和显示设备200之间的数据交互。如，显示设备200中的投屏服务A接收通信终端A的投屏请求，投屏服务B接收通信终端B的投屏请求，投屏服务负责监听通信终端连接，与通信终端建立指令通道和数据通道。通过指令通道，显示设备200能够接收用户通过通信终端发送的请求，并且通过数据通道，显示设备200能够接收到通信终端所发送的相关视频数据等。待指令通道及数据通道建立完成后，通信终端300与显示设备200建立投屏连接。

在一些实施例中，显示设备200通过不同投屏协议的投屏服务进行通信终端300的发现，发现通信终端300后，进行投屏连接。例如，存在多个分别支持NFC(Near FieldCommunication，进场通信)、Airplay(无线投屏技术)及DLNA(Digital Living NetworkAlliance，数字生活网络联盟)投屏协议的通信终端300时，控制器250利用NFC协议服务接收支持NFC协议的通信终端300的投屏请求，并利用NFC协议服务监听通信终端300连接。又如，控制器250利用Airplay协议服务接收支持Airplay协议的通信终端300的投屏请求，并利用Airplay协议服务监听通信终端300连接。再如控制器250利用DLNA协议服务接收支持DLNA协议的通信终端300的投屏请求，并利用DLNA协议服务监听通信终端300连接。其中，NFC投屏是基于NFC协议双向进行设备的发现以及连接，Airplay投屏是基于Airplay协议双向进行设备的发现以及连接，DLNA推送是通过DLNA协议进行设备的发现及连接，其他协议也如此，均是通过各自协议的约定进行设备的发现及连接。

显示设备200可以基于上述实施例中提供的任一种投屏方式，与通信终端300建立投屏连接。即显示设备200仅与一个通信终端300建立投屏连接，如图8所示，投屏数据可独占屏幕显示。在一些实施例中，显示设备200还可以通过上述投屏方式中的一种或多种，与多个通信终端建立投屏连接关系。例如，显示设备200可以同时与两个通信终端300建立投屏连接，并在显示画面中划分出显示区域，用于分别显示两个通信终端300共享的投屏画面。即如图9所示，可以在显示设备200所显示用户界面的左侧显示通信终端A共享的投屏画面，在用户界面的右侧显示通信终端B共享的投屏画面。

为了能够在显示设备200上显示多个通信终端300共享的投屏画面，在一些实施例中，当显示设备200与多个通信终端300建立投屏连接时，显示设备200可以对用于投屏显示的用户界面进行区域划分，如二等分、三等分、四等分等。通过区域划分所获得多个显示区域后，显示设备200再分别将投屏画面显示在每个划分区域中。

另外，通信终端300可以按照使用方式的不同，可能处于不同的放置状态，如对于智能手机等通信终端300，其在使用中可能处于竖屏状态和横屏状态。其中，竖屏状态是指所显示画面的宽度小于高度的状态，横屏状态是指所显示画面的宽度大于高度的状态。在不同的放置状态下，通信终端300可以呈现不同的画面布局方式。基于此，当显示设备200通过区域划分方式显示多个通信终端300的投屏画面时，各显示区域会因为通信终端300所处放置状态的不同，而呈现为不同的画面比例。

对于显示设备接入单路投屏或多路投屏的应用场景，屏幕界面上可以显示一个投屏窗口或多个投屏窗口，每个投屏窗口对应于一个投屏连接成功的通信终端300，并显示通信终端300发送的投屏数据，用户可以将通信终端300上的内容投屏到显示设备200上，通过显示设备200观看投屏内容。然而，当显示设备200已经与多个通信终端连接且已经达到显示设备200的投屏连接数量阈值时，其他通信终端同样希望和显示设备200连接，可能会出现显示设备200切断已经连接的通信终端，在显示界面上显示最新与显示设备200连接的通信终端上的内容。这样将已经连接的通信终端突然断开，显示设备200上的显示内容突然发生变化，降低用户体验，或者显示设备200不响应其他通信终端的投屏连接请求，导致用户无法确定投屏连接是否建立成功，无法进行后续操作。

因此，本申请的部分实施例中还提供一种投屏控制方法，应用于显示设备200，在单路投屏或多路投屏时，通过多设备之间的交互，进行投屏展示处理，提高用户的观影体验。其中，能够应用所述投屏控制方法的显示设备200包括：显示器260、通信器220以及控制器250。所述显示器260被配置为显示投屏界面。所述通信器220被配置为与通信终端300建立投屏连接。所述控制器250则被配置为执行上述投屏控制方法对应的程序步骤，如图10所示，具体包括以下内容：

S100，接收目标通信终端发送的投屏请求。

所述目标通信终端为没有与显示设备200建立投屏连接的通信终端300。为了实现与支持不同投屏协议的通信终端300建立投屏连接，显示设备200配置多个投屏服务，通过不同投屏服务监听支持不同投屏协议的通信终端300发送的投屏请求，在建立投屏连接后可与通信终端300进行协议交互。

相应的，用户可以通过通信终端300向显示设备200发送投屏请求，其中，通信终端200的处理器380可以在用户使用过程中接收用户输入的各种控制指令，不同的控制指令对应具有不同的功能。其中，部分控制指令可以用于与显示设备200建立投屏连接。处理器380可以先获取用户通过不同交互方式输入的控制指令，并解析控制指令，以获得控制指令中的投屏信息，再根据投屏信息生成投屏请求，并发送至显示设备200。

例如，通过用户对通信终端300显示屏的触控操作，控制通信终端300的显示界面显示投屏菜单页面，投屏菜单界面中包括搜索到的投屏设备，投屏设备以列表形式显示在投屏页面中，用户通过按压所选择的目标投屏设备的选项，向通信终端300输入用于与目标投屏设备建立投屏连接的控制指令，触发通信终端300的投屏连接动作，向目标投屏设备发送投屏请求。

S200，响应于所述投屏请求，检测显示设备的屏端状态，所述屏端状态为空闲状态或忙碌状态；所述空闲状态用于表示所述显示设备的当前最大可投屏数量大于或等于1，且目标显示位置可用；所述忙碌状态用于表示所述显示设备的当前最大可投屏数量小于1，和/或目标显示位置不可用。

在获取到目标通信终端发送的投屏请求后，控制器250可以通过检测当前最大可投屏数量和目标显示位置的界面状态，确定显示设备200的屏端状态，根据屏端状态确定显示设备200是否可以进行投屏。如果屏端状态为空闲状态，表示显示设备200可投屏，如果屏端状态为忙碌状态，表示显示设备200不可投屏。

在一些实施例中，可以通过检测当前通信终端300的连接数量。将连接数量与显示设备200的投屏连接数量阈值进行对比，确定显示设备200的当前最大可投屏数量。如图11所示，控制器250还被配置为执行如下程序步骤：

获取所述显示设备的投屏连接数量阈值。所述投屏连接数量阈值为显示设备200允许连接的最大通信终端数量，也即显示设备200的投屏路数。显示设备200执行单路投屏，其投屏路数为1，显示设备200的投屏连接数量阈值为1，显示设备200执行多路投屏，其投屏路数为多个，例如，显示设备200执行N路投屏，显示设备200的投屏连接数量阈值为N。

检测当前通信终端的连接数量。由于通信终端的连接数量会随着投屏连接的接入和断开而动态变化，因此显示设备200可以在运行过程中实时检测与显示设备200建立投屏连接的通信终端300的数量，通信终端300的连接数量，可以通过对显示设备200所在无线局域网络中各通信终端进行分别检测判断获得。例如，在需要检测通信终端300的连接数量时，显示设备200的控制器250可以通过通信器220，调用当前无线网络中接入的所有通信终端300，再通过抓取每个通信终端的传输数据，并从中识别投屏数据标志，以检测当前通信终端300是否与显示设备200建立通信连接。

在一些实施例中，通信终端300的连接数量可以通过形成连接设备列表，存储在显示设备200中，该连接设备列表中记录有连接的通信终端300的信息，并记录所有连接通信终端300的连接数量，当检测到显示设备200与一个通信终端300建立投屏连接时，更新连接设备列表，将通信终端300的连接数量加一，当检测到显示设备200与一个通信终端300的投屏连接断开时，更新连接设备列表，将通信终端300的连接数量减一。在本实施例中，获取当前通信终端300的连接数量，可以通过调用该连接设备列表，并查找列表中记录的连接数量实现。

获取到投屏连接数量阈值和当前通信终端300的连接数量后，如果所述连接数量小于所述投屏连接数量阈值，确定所述显示设备的当前最大可投屏数量大于或等于1。如果所述连接数量等于所述投屏连接数量阈值，确定所述显示设备的当前最大可投屏数量小于1。也就是说，如果当前通信终端300的连接数量达到投屏连接数量阈值，说明显示设备200不可投屏，即显示设备200的屏端状态为忙碌状态。如果当前通信终端300的连接数量未达到投屏连接数量阈值，可以进一步检测目标显示位置是否可用，如果目标显示位置可用，说明显示设备200可投屏，即显示设备200的屏端状态为空闲状态。

例如，显示设备200的投屏连接数量阈值为5，如果检测到当前通信终端300的连接数量为5，则显示设备200的当前最大可投屏数量为0，确定显示设备200的屏端状态为忙碌状态。如果检测到当前通信终端300的连接数量为3，则显示设备200的当前最大可投屏数量为2，进一步检测目标显示位置是否可用，如果目标显示位置可用，确定显示设备200的屏端状态为空闲状态。

在一些实施例中，显示设备200可执行单路投屏或多路投屏，因此，显示设备200的投屏模式包括单路投屏模式和多路投屏模式，用户可通过设置显示设备200的投屏模式，使显示设备200执行单路投屏或多路投屏。在显示设备200的投屏模式为单路投屏模式时，控制器250还被配置为执行如下程序步骤：

检测当前通信终端的连接数量。

如果所述连接数量为0，确定所述显示设备的当前最大可投屏数量等于1。

如果所述连接数量为1，确定所述显示设备的当前最大可投屏数量等于0。

本实施例中，显示设备200的投屏模式为单路投屏模式时，其投屏连接数量阈值为1。也就是说，通信终端300的连接数量只有两个取值，显示设备200已经与通信终端300建立投屏连接，通信终端300的连接数量为1，或者，显示设备200没有与通信终端300建立投屏连接，通信终端300的连接数量为0。因此，为了提高响应速度，可以通过检测到的当前通信终端300的连接数量，直接判断显示设备200的当前最大可投屏数量。

例如，在显示设备200的投屏模式为单路投屏模式时，检测到当前通信终端的连接数量为1，确定显示设备200的屏端状态为忙碌状态。如果检测到当前通信终端300的连接数量为1，进一步检测目标显示位置是否可用，如果目标显示位置可用，确定显示设备200的屏端状态为空闲状态。

在一些实施例中，目标显示位置可以为显示设备200的用户界面，也可以为用户指定的显示设备200用户界面中的某一显示区域。用户在使用显示设备200的过程中能够对用户界面进行分屏处理，即显示设备200可以对用于投屏显示的用户界面进行区域划分，如二等分、三等分、四等分等。通过区域划分获得多个显示区域，显示设备200可以分别将投屏画面显示在每个划分的显示区域中，每个窗口可以独立的显示不同内容，使得用户可以同时观看到不同的节目画面。控制器250还被配置为执行如下程序步骤：

检测所述投屏界面中所述目标显示位置的界面状态，所述界面状态包括投屏状态和非投屏状态。

如果所述界面状态为投屏状态，确定所述目标显示位置不可用。

如果所述界面状态为非投屏状态，确定所述目标显示位置可用。

判定目标显示位置是否可用时，检测显示设备200的投屏界面中目标显示位置的界面状态。如图12所示，显示设备200对用于投屏显示的用户界面进行四等分区域划分，划分为四个显示区域，分别为区域一，区域二，区域三和区域四。如果接收到的投屏请求中目标显示位置为区域二，需要检测区域二的界面状态，如果界面状态为投屏状态，确定目标显示位置不可用。如果界面状态为非投屏状态，确定目标显示位置可用。

可以理解的是，若用户未指定目标显示位置，检测显示设备200的屏端状态时，空闲状态用于表示显示设备200的当前最大可投屏数量大于或等于1，忙碌状态用于表示显示设备200的当前最大可投屏数量小于1。

S300，如果所述屏端状态为空闲状态，与所述目标通信终端建立投屏连接。在检测到显示设备200的屏端状态为空闲状态时，说明显示设备200可投屏，显示设备200可直接与目标通信终端建立投屏连接，投屏建立成功后，即可将媒体数据由目标通信终端投射到显示设备200进行播放。

在一些实施例中，控制器250执行与目标通信终端建立投屏连接时，与目标通信终端建立投屏数据通道，在投屏数据通道建立成功后，在目标显示位置创建投屏窗口，所述投屏窗口用于显示通过所述投屏数据通道接收的投屏数据。例如，如图12所示，显示设备200的当前最大可投屏数量大于或等于1，且检测到目标显示位置可用，即显示界面中区域二可用，显示设备200与目标通信终端建立投屏数据通道之后，控制器250可在区域二创建投屏窗口，通过投屏窗口显示目标通信终端的投屏画面。

在一些实施例中，检测到显示设备200的屏端状态为空闲状态时，可将显示设备200的屏端状态发送至目标通信终端，目标通信终端接收到显示设备200的屏端状态可控制显示单元显示提示信息，所述提示信息用于提示用户显示设备200可投屏，可使用户进行投屏数据的准备。

例如，显示设备200的投屏连接数量阈值为3，以用户未指定目标显示位置为例，显示设备200与通信终端A1已经建立投屏连接，通过显示设备200的显示器260显示通信终端A1发送的投屏数据，如图13所示。此时，接收到通信终端A2发送携带有终端设备名称，终端ip等终端信息的投屏请求，所述投屏请求可以通过定义消息字段表示具体的请求内容，即投屏请求可以包括如下内容：″cmd″用于表示请求命令内容，如″cmd″：″CAST_CONNECT_REQUEST″表示当前请求为投屏连接请求；″mobile″用于表示通信终端名称，如″mobile″：″A2″；″ip″表示网络地址；″status″表示投屏连接状态。

显示设备200接收到通信终端A2发送的投屏请求，检测显示设备200的屏端状态，检测到显示设备200当前通信终端300的连接数量为1，未达到显示设备200的投屏连接数量阈值，确定显示设备200的屏端状态为空闲状态，说明显示设备200当前可投屏，显示设备200与通信终端A2建立投屏连接，并将包含屏端状态的回复信息发送至通信终端A2，所述回复信息也可以通过定义消息字段表示具体的信息内容，即回复信息可以包括如下内容：″cmd″用于表示回复请求内容，如″cmd″：″CAST_CONNECT_ACK″表示当前回复请求内容为回复投屏连接请求；″mobile″用于表示通信终端名称，如″mobile″：″A2″；″ip″表示网络地址；″status″表示投屏连接状态，如″status″：″idle″表示空闲状态。

通信终端A2接收到显示设备200发送的回复消息，显示提示信息，用于提示用户显示设备200可投屏，可进行投屏数据的准备。

同时，显示设备200在确定当前的屏端状态为空闲状态时，可以采用通信终端A2支持的投屏协议与通信终端A2建立投屏数据通道，并在投屏数据通道建立成功后，创建投屏窗口，如图14所示，以通过投屏窗口显示通过投屏数据通道接收的投屏数据，实现与通信终端A2同步显示的效果。

当显示设备200中包含1个投屏窗口时，显示控件可以按照全屏的方式进行显示。当显示设备200包含2个投屏窗口时，两个投屏窗口为左右两个竖式布局的窗口形式。如图14所示，通信终端A1的投屏数据显示在右边的投屏窗口中，通信终端A2的投屏数据显示在左边的投屏窗口中。当通信终端300的连接数量变更时，显示设备200可以动态的调整投屏画面的显示布局，因此，控制器250还被配置为执行如下步骤：

在建立所述投屏数据通道后，更新当前通信终端的连接数量。

获取所述目标通信终端的媒体配置信息，所述媒体配置信息包括所述目标通信终端投屏画面的宽高比例。即显示视频时横向宽度与纵向高度的比值。在一些实施例中，通过宽高比例可以识别显示屏向，当宽高比例大于或等于1时，即宽度大于或等于高度，则呈现为横屏显示模式；当宽高比例小于1时，即宽度小于高度时，则呈现为竖屏显示模式。可按照媒体配置信息中指示的宽高比例和屏向，来约束投屏窗口的创建，使投屏窗口与对应的通信终端300保持一致的宽高比例和显示屏向，可以避免投屏后媒体相关配置的错乱问题。

根据更新后的所述连接数量和所述媒体配置信息，规划投屏窗口的布局方式以及创建与所述媒体配置信息匹配的投屏窗口。

对于不同类型的显示设备200，其显示器260的屏幕尺寸信息不同，符合其屏幕规格的布局方式也不同。因此，在显示设备200或者服务器400中，可以运行维护一个数据库，数据库中可以存储该显示设备200屏幕尺寸规格和不同连接数量对应的布局模板。因此，显示设备200可以在根据连接数量和媒体配置信息规划投屏窗口的布局方式时，根据连接数量和媒体配置信息，在数据库中匹配布局模板，确定与当前显示状态相适应的最佳布局方式。

例如，如图14所示，显示设备200当前有两个投屏窗口，分别用于显示通信终端A1和通信终端A2的投屏数据，此时，显示设备200与通信终端A3建立投屏连接，当前通信终端的连接数量更新为3，获取到通信终端A3的媒体配置信息，根据媒体配置信息中指示的宽高比例和屏向和连接数量，规划布局方式，如图15所示，可以适配一个竖向、两个横向的显示区域布局方式，并按照媒体配置信息在显示区域内创建投屏窗口。

S400，如果所述屏端状态为忙碌状态，向所述目标通信终端发送通知消息，所述通知消息用于使所述目标通信终端显示第一提示信息。在检测到显示设备200的屏端状态为忙碌状态时，说明显示设备200不可投屏，显示设备200可将显示设备200的屏端状态通知到目标通信终端，目标通信终端接收到包括屏端状态的通知消息，可控制显示单元显示第一提示信息，用于提示用户显示设备200当前不可投屏。

例如，显示设备200与通信终端A1、通信终端A2、通信终端A3已经建立投屏连接，达到显示设备200的投屏连接数量阈值，若此时接收到通信终端A4的投屏请求，检测到显示设备200的屏端状态为忙碌状态，显示设备200可将屏端状态通知到通信终端A4，通知消息可以通过定义消息字段表示具体的请求内容，即通知消息可以包括如下内容：″cmd″用于表示回复通知消息内容，如″cmd″：″CAST_CONNECT_ACK″表示当前通知消息为投屏连接通知内容；″mobile″用于表示通信终端名称，如″mobile″：″A4″；″ip″表示网络地址；″status″表示投屏连接状态，如″status″：″busy″表示屏端状态为忙碌状态。

通信终端A4接收到包括屏端状态的通知消息，可控制显示单元显示第一提示信息，用于提示用户显示设备200当前不可投屏。

在一些实施例中，用户在通过通信终端300向显示设备200发送投屏请求之前，可以先通过通信终端300向搜索到的显示设备200发送搜索请求，根据收到显示设备200的回复确定显示设备200的屏端状态，当确定显示设备200的屏端状态为空闲状态时，再发送投屏请求，相应的，控制器250还被配置为执行如下程序步骤：

接收所述目标通信终端发送的搜索请求。

响应于所述搜索请求，检测显示设备的屏端状态。

将所述显示设备的屏端状态发送至所述目标通信终端，以使所述目标通信终端显示第三提示信息。

本实施例中，显示设备200接收到目标通信终端发送的搜索请求后，可以将包含屏端状态的设备信息发送至目标通信终端，设备信息可以包括显示设备200的设备名称，设备id，功能名称，ip，显示设备端状态等，设备信息可以通过定义消息字段表示具体的请求内容，即设备信息可以包括如下内容：″devicename″用于表示设备名称，如″dev icename″：″客厅电视″表示当前设备为客厅电视；″deviceid″用于表示设备id；″featur eid″用于表示属性id；″featurename″表示功能名称，如″featurename″：″投屏″；″ip″表示网络地址；″status″表示投屏连接状态。如″status″：″idle″表示空闲状态。

目标通信终端获取到显示设备200的屏端状态为空闲状态，可显示第三提示信息，用于询问用户是否进行投屏，在用户确认后，与显示设备200建立投屏连接。

在一些实施例中，用户可以根据自身意愿，将不希望继续播放在显示界面中的投屏内容替换，即用户可以指定显示界面中的目标显示位置，将目标显示位置中投屏数据对应的通信终端300替换成其他通信终端300，因此，如图16所示，控制器250还被配置为执行如下程序步骤：

如果所述屏端状态为忙碌状态，检测所述目标显示位置对应的通信终端。

向所述目标显示位置对应的通信终端发送退出指令，以及接收所述目标显示位置对应的通信终端反馈的应答消息，所述应答消息包括同意退出和不同意退出。

如果所述应答消息为同意退出，与所述目标显示位置对应的通信终端断开投屏连接，以及在断开投屏连接后，与所述目标通信终端建立投屏连接。

如果所述应答消息为不同意退出，向所述目标通信终端发送所述应答消息，以使所述目标通信终端显示第二提示信息。

如图17所示，显示设备200的投屏连接数量阈值为4，显示设备200与通信终端A1、通信终端A2、通信终端A3、通信终端A4已经建立投屏连接，此时，接收到通信终端A5发送的投屏请求，显示设备200将包含屏端状态的通知信息发送至通信终端A5，通信终端A5显示第一提示信息，用于提示用户显示设备200当前不可投屏。

如图18所示，通信终端A5接收到显示设备200发送的包含屏端状态的通知信息，显示第一提示信息，所述第一提示信息还可以包括替换选项，替换选项中包括显示设备200的显示区域，分别为区域一、区域二、区域三、区域四，每个显示区域分别对应通信终端A1、通信终端A2、通信终端A3和通信终端A4，用户可通过通信终端A5输入替换指令，替换指令包括所要替换的目标显示区域。

当用户选中替换区域二时，即将通信终端A2替换为通信终端A5，显示设备200接收到通信终端A5发送的替换指令，向通信终端A2发送退出指令，所述退出指令通过定义消息字段表示具体的请求内容，即退出指令可以包括如下内容：″cmd″用于表示指令内容，如″cmd″：″CAST_FINISH″表示当前指令为退出指令；″mobile″用于表示通信终端名称，如″mobile″：″A2″；″ip″表示网络地址。

通信终端A2接收到显示设备200发送的退出指令，并向显示设备200发送应答消息，如果应答消息为同意退出，与通信终端A2断开投屏连接，并撤销通信终端A2的投屏窗口，在断开投屏连接后，与通信终端A5建立投屏连接，如图19所示，在区域二新建投屏窗口，将通信终端A5的投屏内容显示在新建的投屏窗口中。

如果应答消息为不同意退出，向通信终端A5发送应答消息，通信终端A5接收应答消息，显示第二提示信息，用于提示用户不可替换。

基于上述显示设备200，在本申请的部分实施例中还提供一种通信终端300，包括：显示单元330、通信单元以及处理器380。其中，所述显示单元330被配置为显示终端界面，所述通信单元被配置为与显示设备200建立投屏连接；如图20所示，所述处理器380被配置为执行以下程序步骤：

向显示设备发送投屏请求，以及接收所述显示设备反馈的通知消息，所述通知消息包括所述显示设备的屏端状态；所述屏端状态为空闲状态或忙碌状态；所述空闲状态用于表示所述显示设备的当前最大可投屏数量大于或等于1，且目标显示位置可用；所述忙碌状态用于表示所述显示设备的当前最大可投屏数量小于1，和/或目标显示位置不可用；

如果所述屏端状态为空闲状态，与所述显示设备建立投屏连接；

如果所述屏端状态为忙碌状态，接收所述显示设备反馈的提示信息，以及控制显示单元显示所述提示信息。

基于上述显示设备200和通信终端300，本申请的部分实施例中还提供一种投屏控制方法，包括以下步骤：

显示设备响应于目标通信终端发送的投屏请求，检测所述显示设备的屏端状态，所述屏端状态为空闲状态或忙碌状态；

所述显示设备向所述目标通信终端发送通知消息，所述通知消息包括所述屏端状态；

如果所述屏端状态为忙碌状态，所述目标通信终端接收所述显示设备发送的通知消息，显示提示信息。

如果所述屏端状态为空闲状态，所述目标通信终端接收所述显示设备发送的通知消息，与所述显示设备建立投屏连接。

由以上技术方案可知，上述实施例提供的投屏控制方法可以在接收到通信终端发送的投屏请求时，通过检测显示设备的屏端状态，判定当前显示设备是否可以进行投屏。再向通信终端发送包含屏端状态的通知消息，如果屏端状态为忙碌状态，通信终端可以在接收到通知消息后显示提示信息，如果屏端状态为空闲状态，通信终端可以在接收到通知消息后与所述显示设备建立投屏连接。所述方法可以在单路投屏或多路投屏时，通过多设备之间的交互，进行投屏展示处理，提高用户体验。

本申请提供的实施例之间的相似部分相互参见即可，以上提供的具体实施方式只是本申请总的构思下的几个示例，并不构成本申请保护范围的限定。对于本领域的技术人员而言，在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种显示设备，其特征在于，包括：

显示器，被配置为显示投屏界面；

通信器，被配置为与通信终端建立投屏连接；

控制器，被配置为：

接收目标通信终端发送的投屏请求；

响应于所述投屏请求，检测显示设备的屏端状态，所述屏端状态为空闲状态或忙碌状态；所述空闲状态用于表示所述显示设备的当前最大可投屏数量大于或等于1，且目标显示位置可用；所述忙碌状态用于表示所述显示设备的当前最大可投屏数量小于1，和/或目标显示位置不可用；

如果所述屏端状态为空闲状态，与所述目标通信终端建立投屏连接；

如果所述屏端状态为忙碌状态，向所述目标通信终端发送通知消息，所述通知消息用于使所述目标通信终端显示第一提示信息。

2.根据权利要求1所述的显示设备，其特征在于，所述控制器执行检测显示设备的屏端状态，被进一步配置为：

获取所述显示设备的投屏连接数量阈值；

检测当前通信终端的连接数量；

如果所述连接数量小于所述投屏连接数量阈值，确定所述显示设备的当前最大可投屏数量大于或等于1；

如果所述连接数量等于所述投屏连接数量阈值，确定所述显示设备的当前最大可投屏数量小于1。

3.根据权利要求1所述的显示设备，其特征在于，所述显示设备的投屏模式包括单路投屏模式和多路投屏模式，在所述显示设备的投屏模式为单路投屏模式时，所述控制器被进一步配置为：

检测当前通信终端的连接数量；

如果所述连接数量为0，确定所述显示设备的当前最大可投屏数量等于1；

如果所述连接数量为1，确定所述显示设备的当前最大可投屏数量等于0。

4.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

检测所述投屏界面中所述目标显示位置的界面状态，所述界面状态包括投屏状态和非投屏状态；

如果所述界面状态为投屏状态，确定所述目标显示位置不可用；

如果所述界面状态为非投屏状态，确定所述目标显示位置可用。

5.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

如果所述屏端状态为忙碌状态，检测所述目标显示位置对应的通信终端；

向所述目标显示位置对应的通信终端发送退出指令，以及接收所述目标显示位置对应的通信终端反馈的应答消息，所述应答消息包括同意退出和不同意退出；

如果所述应答消息为同意退出，与所述目标显示位置对应的通信终端断开投屏连接，以及在断开投屏连接后，与所述目标通信终端建立投屏连接；

如果所述应答消息为不同意退出，向所述目标通信终端发送所述应答消息，以使所述目标通信终端显示第二提示信息。

6.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

接收所述目标通信终端发送的搜索请求；

响应于所述搜索请求，检测显示设备的屏端状态；

将所述显示设备的屏端状态发送至所述目标通信终端，以使所述目标通信终端显示第三提示信息。

7.根据权利要求1所述的显示设备，其特征在于，所述控制器执行与所述目标通信终端建立投屏连接，被进一步配置为：

与所述目标通信终端建立投屏数据通道；

在所述投屏数据通道建立成功后，在所述目标显示位置创建投屏窗口，所述投屏窗口用于显示通过所述投屏数据通道接收的投屏数据。

8.根据权利要求7所述的显示设备，其特征在于，所述控制器被进一步配置为：

在建立所述投屏数据通道后，更新当前通信终端的连接数量；

获取所述目标通信终端的媒体配置信息，所述媒体配置信息包括所述目标通信终端投屏画面的宽高比例；

根据更新后的所述连接数量和所述媒体配置信息，规划投屏窗口的布局方式以及创建与所述媒体配置信息匹配的投屏窗口。

9.一种通信终端，其特征在于，包括：

显示单元，被配置为显示终端界面；

通信单元，被配置为与显示设备建立投屏连接；

处理器，被配置为：

向显示设备发送投屏请求，以及接收所述显示设备反馈的通知消息，所述通知消息包括所述显示设备的屏端状态；所述屏端状态为空闲状态或忙碌状态；所述空闲状态用于表示所述显示设备的当前最大可投屏数量大于或等于1，且目标显示位置可用；所述忙碌状态用于表示所述显示设备的当前最大可投屏数量小于1，和/或目标显示位置不可用；

如果所述屏端状态为空闲状态，与所述显示设备建立投屏连接；

如果所述屏端状态为忙碌状态，接收所述显示设备反馈的提示信息，以及控制显示单元显示所述提示信息。

10.一种投屏控制方法，其特征在于，包括：

显示设备响应于目标通信终端发送的投屏请求，检测所述显示设备的屏端状态，所述屏端状态为空闲状态或忙碌状态；

所述显示设备向所述目标通信终端发送通知消息，所述通知消息包括所述屏端状态；

如果所述屏端状态为忙碌状态，所述目标通信终端接收所述显示设备发送的通知消息，显示提示信息；

如果所述屏端状态为空闲状态，所述目标通信终端接收所述显示设备发送的通知消息，与所述显示设备建立投屏连接。

Images