CN113703706A - 一种多路投屏的显示方法、显示设备及终端 - Google Patents

Abstract

本申请公开了在上述实施例中，一种多路投屏的显示方法、显示设备及终端，本申请一些实施例用户根据需要，选择投屏内容在显示设备上的显示方式，提高用户的使用体验。该方法包括：接收第一终端的连接指令，获取第二终端数量，其中所述第二终端为已经与显示设备连接的终端；发送指示信息，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件，所述交互窗口上的控件根据所述第二终端数量确定；接收第一终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示第一终端的投屏内容。

Description

一种多路投屏的显示方法、显示设备及终端

技术领域

本申请涉及多路投屏的技术领域，尤其涉及一种多路投屏的显示方法、显示设备及终端。

背景技术

当前用户可以将其他终端上的内容投屏到显示设备上，通过显示设备观看投屏内容。由于显示设备为大屏设备，可以为用户提供更好的观看体验。但是，当显示设备已经与一个终端连接后，另一个终端同样希望和显示设备连接时，相关技术中通过切断与已经连接的终端，在显示界面上显示最新与显示设备连接的终端上的内容实现。这样将已经连接的终端突然断开，显示设备上的显示内容突然发生变化，给用户带来不好的使用感受。

发明内容

本申请一些实施例提供一种多路投屏的显示方法、显示设备及终端，在终端上为用户提供可以选择显示方式的控件，以使用户根据需要，选择投屏内容在显示设备上的显示方式。

第一方面，提供一种显示设备，包括：

显示器，用于显示第一用户界面；

用户接口，用于接收输入信号；

分别与显示器和用户接口连接的控制器，用于执行：接收第一终端的连接指令，获取第二终端数量，其中所述第二终端为已经与显示设备连接的终端；发送指示信息，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件，所述交互窗口上的控件根据所述第二终端数量确定；接收第一终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示第一终端的投屏内容。

在一些实施例中，所述指令包括新增窗口指令，所述控制器被配置为按照下述步骤执行控制显示器根据所述指令显示第一终端的投屏内容：在第一用户界面上新增播放窗口，在新增的播放窗口中显示第一终端的投屏内容。

在一些实施例中，所述第一用户界面上至少包括一个播放窗口，在所述播放窗口内播放第二终端的投屏内容；

所述指令包括替换指令，所述替换指令包括替换信息，所述替换信息用于指示被替换投屏内容对应的第二终端的播放窗口信息；所述控制器被配置为按照下述步骤执行控制显示器根据所述指令显示第一终端的投屏内容：断开与所述替换信息对应的第二终端的连接，撤销第二终端的播放窗口，在第二终端的播放窗口处新建播放窗口，将第一终端的投屏内容显示在新建的播放窗口中。

在一些实施例中，所述指令包括不再投屏指令，所述控制器被配置为按照下述步骤执行控制显示器显示根据所述指令显示第一终端的投屏内容：拒绝与所述第一终端连接，维持用户界面的显示状态不变。

在一些实施例中，所述控制器，还用于执行：

判断是否符合不发送指示信息的条件；

如果符合所述条件，则不发送指示信息；

如果不符合所述条件，则发送指示信息。

在一些实施例中，所述不发送指示信息的条件包括第一用户界面上播放窗口数量的上限值为特定值。

第二方面，提供一种终端，用于执行：接收连接显示设备的用户输入，发送连接指令到显示设备，所述终端包括第一终端；

接收显示设备发送的指示信息，其中，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口；根据所述第二终端数量，确定控件，并将所述控件以交互窗口形式显示在第二用户界面上，所述第二用户界面为第一第二用户界面；

接收选中所述交互窗口上控件的用户输入，发送根据所述控件生成的指令到显示设备。

在一些实施例中，所述终端被配置为按照下述步骤执行根据所述第二终端数量确定交互界面上的控件：

当所述第二终端数量为第一预设数量时，确定所述控件包括新增窗口控件；

当所述第二终端数量大于第一预设数量，且小于第二预设数量时，确定所述控件包括新增窗口控件，以及与某一第二终端对应的替换控件；

当所述第二终端数量为第二预设数量时，确定所述控件包括不再投屏控件，以及与第二终端对应的替换控件，所述第二预设数量为第一用户界面上播放窗口数量的上限值。

第三方面，提供一种多路投屏的显示方法，应用于所述的显示设备，包括：接收第一终端的连接指令，获取第二终端数量，其中所述第二终端为已经与显示设备连接的终端；发送指示信息，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件，所述交互窗口上的控件根据所述第二终端数量确定；接收第一终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示第一终端的投屏内容。

第四方面，提供一种多路投屏的显示方法，应用于所述的终端，包括：

接收连接显示设备的用户输入，发送连接指令到显示设备，所述终端包括第一终端；

接收显示设备发送的指示信息，其中，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口；根据所述第二终端数量，确定控件，并将所述控件以交互窗口形式显示在第二用户界面上，所述第二用户界面为第一第二用户界面；

接收选中所述交互窗口上控件的用户输入，发送根据所述控件生成的指令到显示设备。

在上述实施例中，一种多路投屏的显示方法、显示设备及终端，本申请一些实施例用户根据需要，选择投屏内容在显示设备上的显示方式，提高用户的使用体验。该方法包括：接收第一终端的连接指令，获取第二终端数量，其中所述第二终端为已经与显示设备连接的终端；发送指示信息，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件，所述交互窗口上的控件根据所述第二终端数量确定；接收第一终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示第一终端的投屏内容。

附图说明

图1示出了根据一些实施例的显示设备的使用场景；

图2示出了根据一些实施例的控制装置100的硬件配置框图；

图3中示例性示出了根据一些实施例的一种播放数据的方法的流程图；

图4中示例性示出了根据一些实施例的用户界面示意图；

图5中示例性示出了根据一些实施例的一种多路投屏的显示方法的流程图；

图6中示例性示出了根据一些实施例的一种第一用户界面的示意图；

图7中示例性示出了根据一些实施例的一种第二用户界面的示意图；

图8中示例性示出了根据一些实施例的又一种第一用户界面的示意图；

图9中示例性示出了根据一些实施例的又一种第二用户界面的示意图；

图10中示例性示出了根据一些实施例的又一种第一用户界面的示意图；

图11中示例性示出了根据一些实施例的又一种第二用户界面的示意图；

图12中示例性示出了根据一些实施例的又一种第一用户界面的示意图；

图13中示例性示出了根据一些实施例的又一种第一用户界面的示意图；

图14中示例性示出了根据一些实施例的又一种第二用户界面的示意图；

图15中示例性示出了根据一些实施例的又一种第一用户界面的示意图；

图16中示例性示出了根据一些实施例的又一种第一用户界面的示意图；

图17中示例性示出了根据一些实施例的又一种第一用户界面的示意图；

图18中示例性示出了根据一些实施例的另一种第二用户界面的示意图；

图19中示例性示出了根据一些实施例的另一种第一用户界面的示意图；

图20中示例性示出了根据一些实施例的另一种第二用户界面的示意图。

具体实施方式

为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语″包括″和″具有″以及他们的任何变形，意图在于替换但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语″模块″是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示，用户可通过智能设备300或控制装置100操作显示设备200。

在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制显示设备200。

在一些实施例中，也可以使用智能设备300(如移动终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。

在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。

在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。

图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。

图3示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中控制器包括处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。

在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。

在一些实施例中，显示器260可为液晶显示器、OLED显示器、以及投影显示器，还可以为一种投影装置和投影屏幕。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。

在一些实施例中，用户接口，可用于接收控制装置100(如：红外遥控器等)的控制信号。

在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。

在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。

在一些实施例中，调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。

在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中，所述对象可以是可选对象中的任何一个，例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。

在一些实施例中控制器包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM Random AccessMemory，RAM)，ROM(Read-Only Memory，ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。

CPU处理器。用于执行存储在存储器中操作系统和应用程序指令，以及根据接收外部输入的各种交互指令，来执行各种应用程序、数据和内容，以便最终显示和播放各种音视频内容。CPU处理器，可以包括多个处理器。如，包括一个主处理器以及一个或多个子处理器。

在一些实施例中，图形处理器，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等。图形处理器包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象；还包括渲染器，对基于运算器得到的各种对象，进行渲染，上述渲染后的对象用于显示在显示器上。

在一些实施例中，视频处理器，用于将接收外部视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频处理，可得到直接可显示设备200上显示或播放的信号。

在一些实施例中，视频处理器，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。其中，解复用模块，用于对输入音视频数据流进行解复用处理。视频解码模块，用于对解复用后的视频信号进行处理，包括解码和缩放处理等。图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。帧率转换模块，用于对转换输入视频帧率。显示格式化模块，用于将接收帧率转换后视频输出信号，改变信号以符合显示格式的信号，如输出RGB数据信号。

在一些实施例中，音频处理器，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理，得到可以在扬声器中播放的声音信号。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。

在一些实施例中，″用户界面″，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。

在一些实施例中，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shelI和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。

参见图4，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称″应用层″)，应用程序框架(Application Framework)层(简称″框架层″)，安卓运行时(Android runtime)和系统库层(简称″系统运行库层″)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的应用程序。在具体实施时，应用程序层中的应用程序包不限于以上举例。

框架层为应用程序提供应用编程接口(application programming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口，可在执行中访问系统中的资源和取得系统的服务。

如图4所示，本申请实施例中应用程序框架层包括管理器(Managers)，内容提供者(Content Provider)等，其中管理器包括以下模块中的至少一个：活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互；位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(NotificationManager)用于控制通知消息的显示和清除；窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能，比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制播放窗口变化(例如将播放窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。

当前用户可以将终端上的内容投屏到显示设备上，通过显示设备观看投屏内容。由于显示设备为大屏设备，可以为用户提供更好的观看体验。但是，当显示设备已经与一个终端连接后，另一个终端同样希望和显示设备连接时，相关技术中通过切断与已经连接的终端，在显示界面上显示最新与显示设备连接的终端上的内容实现。这样将已经连接的终端突然断开，显示设备上的显示内容突然发生变化，给用户带来不好的使用感受。

为了便于说明，本申请实施例中，提到的显示设备的用户界面为第一用户界面，第一终端的用户界面为第二用户界面，第一终端为与显示设备新连接的终端，第二终端为已经与显示设备连接的终端。

为了解决上述技术问题，本申请实施例提供一种多路投屏的显示方法，在第二用户界面上为用户提供可以选择的控件，以使用户根据需要，选择与所述控件对应的显示方式，根据该显示方式将第一终端的投屏内容显示在第一用户界面上。具体的，显示方式可以包括添加画面显示，或者替换某一路第二终端画面显示等。

所述方法，如图5所示，图5中示例性示出了根据一些实施例的一种多路投屏的显示方法的流程图，包括：

本申请实施例中，所述终端可以为智能手机、平板电脑、智能穿戴设备(如智能手环等)、笔记本电脑等移动终端，也可是台式电脑、智能电视等具有投屏及显示功能的设备。

终端接收连接显示设备的用户输入，发送连接指令到显示设备。

本申请实施例中，所述第一终端和显示设备投屏可以指显示设备上显示第一终端上实时播放的画面。所述投屏还可以指当第一终端播放某一音视频时，将该音视频的内容显示在显示设备上，第一终端将播放的音视频的媒资地址发送到显示设备上，显示设备根据媒资地址播放该音视频。一些实施例中，所述投屏包括将第一终端上实时播放的画面进行录屏，第一终端将录屏后的数据发送到显示设备中，显示设备播放该数据。

在一示例中，当第一终端播放音视频时，通过用户操作调出投屏控件，用户通过触摸屏按压投屏控件。第一终端搜索得到可投屏设备，将可投屏设备以列表形式显示在第二用户界面，用户按压可投屏设备控件，如果该可投屏设备控件与所述显示设备对应，则此时手机端触发连接动作，向显示设备发送连接指令。

在一示例中，用户可以按压手机端的用户界面上的镜像投屏控件，显示设备上显示有可以与该手机端进行镜像投屏的设备，用户按压设备控件，如果该设备控件与所述显示设备对应，则此时手机端触发连接动作，向显示设备发送连接指令。

一些实施例中，用户通过相关操作可以控制第二用户界面上显示投屏控件。在一示例性中，终端上全屏播放媒资数据时，用户可以触摸显示屏，此时界面上会显示功能控件，所述功能控件可以包括暂停/播放控件，投屏控件，和/或，关闭/开启弹幕控件等。用户可以通过触摸用户界面上设置的投屏控件，页面跳转显示待选连接终端列表，该列表包括可以与显示设备投屏设备对应的设备控件，选中某一设备控件，此时发送连接指令到设备控件对应的设备。一些实施例中，设备可以为显示设备。在另一个示例性中，用户通过下滑/上滑屏幕，调出终端的功能菜单，该功能菜单上显示有屏幕镜像控件，即投屏控件等，选中所述屏幕镜像控件，发送连接指令到显示设备。

显示设备当接收到第一终端发送的连接指令时，获取当前显示设备已经连接的第二终端数量。一些实施例中，所述第二终端数量可以为多个，多个终端的投屏内容可以同时显示在显示设备的显示器上。一些实施例中，所述第二终端数量可以通过列表形式存储在显示设备中，该列表中记录有连接的第二终端的信息，并记录所有连接第二终端的第二终端数量，当所述显示设备每连接一个终端时，将统计的第二终端数量增加一个，当显示设备断开与第二终端的连接时，显示设备上第二终端对应的投屏内容不再显示，更新列表的同时将第二终端数量减少一个。当第二终端进程异常退出或者被杀死(kill)时，显示设备断开对应的第二终端的连接，显示设备上该第二终端对应的投屏内容不再显示，更新列表的同时将第二终端数量减少一个。在本实施例中，获取第二终端数量，可以通过调用该列表，并查找列表中记录的第二终端数量实现。

显示设备发送指示信息到终端，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件。一些实施例中，假设所述第二终端数量为n，则指示信息可以定义为MIRROR_PEERNUM：n。

终端接收显示设备发送的指示信息，根据所述第二终端数量，确定控件，并将所述控件以交互窗口形式显示在第二用户界面上。

本申请实施例中，所述第二终端数量可以确定显示在第一终端的交互窗口中的控件，用户可以通过选中不同的控件，实现第一终端的投屏内容在显示设备中不同的显示方式，可以包括添加画面显示，或者替换某一路终端画面显示等。

当所述第二终端数量为第一预设数量时，第一终端确定所述控件包括新增窗口控件。示例性的，当第一预设数量为0时，所述第二终端数量为0，此时没有与显示设备连接的第二终端，为了使第一终端的投屏内容可以显示在第一用户界面上，此时所述控件包括新增窗口控件。

如图6所示，第一用户界面上并未显示第二终端的投屏内容，显示设备发送指示信息到第一终端，第一终端接收显示设备发送的指示信息，所述指示信息包括第二终端数量，此时第一终端根据所述第二终端数量确定的控件为新增窗口控件，一些实施例中，选中新增窗口控件，可以使第一用户界面上新增播放窗口，用于显示第一终端的投屏内容。如图7所示，在图7中，第二用户界面第二用户界面上的控件包括新增窗口控件701，用户选中新增窗口控件701可以实现将第一终端实时显示的画面，投屏到显示设备上，如图8所示，用户可以看到与第一终端界面上显示的全部内容。在另一示例中，如图9所示，第二用户界面上的控件包括新增窗口控件901，用户选中新增窗口控件901后，将第一终端当前播放的媒资数据的链接地址发送到显示设备，显示设备根据该链接地址查找到媒资数据，并播放该媒资数据，如图10所示，图10中显示有与第一终端播放的相同的媒资数据。

一些实施例中，当显示设备播放本地数据资源或者直接从服务器中获取的数据资源时，该数据资源并不是第二终端发送的投屏内容，当所述第二终端数量为第一预设数量时，确定控件包括新增窗口控件和替换控件。当选中新增窗口控件时，在第一用户界面上新增窗口，将显示设备原有播放的资源对应的播放窗口，与新增的播放窗口同时显示在第一用户界面上，此时用户界面上存在两个播放窗口，原有播放的资源和第一终端的投屏内容同时显示在第一用户界面上。当选中替换控件时，将第一用户界面上显示原有播放的资源处，显示第一终端的投屏内容，可以通过以下方式实现，示例性的，将第一用户界面上原有播放的资源对应的播放窗口撤销，在撤销的播放窗口处，显示第一终端的投屏内容，或者，保留原有播放的资源对应的播放窗口，将第一终端的投屏内容显示在该播放窗口中。

当所述第二终端数量大于第一预设数量，且小于第二预设数量时，第一终端确定所述控件包括新增窗口控件，以及与第二终端对应的替换控件。本申请实施例中，为了避免造成显示设备的运行压力过大或者为了用户可以看到清晰画面，提高用户体验，所述显示设备可以限制与其连接的终端的数量，所述第二预设数量为用户界面上播放窗口数量的上限值，示例性的，第二预设数量可以为四个。

本申请实施例中，当显示设备播放本地数据资源或者直接从服务器中获取的数据资源时，所述替换控件还可以将第一用户界面上原有播放的资源替换。一些实施例中，在保证第一用户界面上的播放窗口不大于第二预设数量时，可以在在新增窗口显示第一终端的投屏内容的同时，将原有播放的资源同时显示在第一用户界面上。

一些实施例中，当存在至少一个第二终端与显示设备连接时，第一用户界面上显示有第二终端的投屏内容，此时可以为用户提供第一终端的投屏内容在显示设备上的多种显示方式，一种可以为在显示界面上新增窗口，在新增的窗口中显示第一终端的投屏内容；另一种方式可以采用替换的方式显示第一终端的投屏内容，具体的，用户可以根据自身意愿，将不希望继续播放在用户界面中的投屏内容替换，一些实施例中，标识可替换的投屏内容时，可以通过将终端与显示设备连接顺序进行标识。所述替换控件在命名时可以标注为替换第一路、替换第二路、以及替换第三路等。当选中替换第一路时，此时将替换第一个与显示设备连接终端的投屏内容为第一终端的投屏内容。一些实施例中，选中替换控件，显示设备不再显示该替换控件对应终端的投屏内容，在显示原有连接终端的投屏内容的位置上，显示第一终端的投屏内容。

显示设备发送指示信息到第一终端，第一终端接收该指示信息，如果显示设备已经有1个第二终端连接，如图10所示，该第二终端的投屏内容显示在第一用户界面上，此时第一终端根据所述第二终端数量确定的控件，如图11所示，第二用户界面上显示有新增窗口控件1101和替换第一路控件1102。用户选中新增控件1101，则在第一用户界面上新增播放窗口，该新增的播放窗口用于播放投屏内容，如图12所示，在新增播放窗口后，当前第一用户界面上存在两个播放窗口，两个播放窗口分布在用户界面上，两个播放窗口的尺寸可以设置为相同尺寸，原有的播放窗口的播放内容不发生变化。

一些实施例中，可以将播放窗口的尺寸可以通过用户操控控制装置手动调节，这样当用户对某一个播放窗口中的投屏内容更有兴趣时，可以将该播放窗口放大，相应的播放窗口中的播放内容可以占据更大的显示界面，方便用户观看。

一些实施例中，用户选中替换第一路控件1102，则第一用户界面上不再播放原有连接终端的投屏内容，而是播放第一终端的投屏内容，示例性的，如图13所示。原有的终端与显示设备的连接断开。

显示设备发送指示信息到第一终端，第一终端接收该指示信息，如果显示设备已经有2个第二终端连接，如图12所示，两个第二终端的投屏内容均显示在第一用户界面上，此时根据所述第二终端数量确定的控件，如图14所示，第二用户界面上显示有新增窗口控件1401、替换第一路控件1402和替换第二路控件1403。选中新增窗口控件1401，则第一用户界面新增播放窗口，如图15所示，图15中当前存在三个播放窗口。选中替换第一路控件1402，则第一用户界面，如图16所示。选中替换第二路控件1403，则第一用户界面，如图17所示。本申请实施例中，用户可以通过选择不同的替换控件，将原有连接的不同第二终端与显示设备断开，在显示原有投屏内容的位置显示第一终端的投屏内容。

显示设备发送指示信息到第一终端，第一终端接收该指示信息，如果显示设备已经有3个第二终端连接，如图15所示，三个第二终端的投屏内容均显示在第一用户界面上，此时根据所述第二终端数量确定的控件，如图18所示，第二用户界面上显示有新增窗口控件1801、替换第一路控件1802、替换第二路控件1803和替换第三路控件1804。选中上述控件之后，第一用户界面可参考有两个第二终端连接时的界面变化，在此不再详细描述。

显示设备发送指示信息到第一终端，第一终端接收该指示信息，当所述第二终端数量为第二预设数量时，确定所述控件包括不再投屏控件，以及与已经连接的终端对应的替换控件。示例性的，所述第二预设数量为4个。如果显示设备已经有4个第二终端连接，如图19所示，四个第二终端的投屏内容均显示在第一用户界面上，此时根据所述第二终端数量确定的控件，如图20所示，第二用户界面上显示有不再投屏控件2001，替换第一路控件2002、替换第二路控件2003、替换第三路控件2004和替换第四路控件2005。选中替换控件之后，第一用户界面可参考有两个第二终端连接时的界面变化，再次不再详细描述。当用户选中不再投屏控件2001时，第一用户界面不发生变化，第一终端与显示设备不执行投屏操作。

本申请实施例中，当显示设备连接多个终端时，多个终端的投屏内容在第一显示界面上的排布不做限制，示例性的，多个投屏内容可以全部横向显示，多个投屏内容也可以全部竖向显示，还可以部分投屏内容横向显示，部分投屏内容纵向显示。

一些实施例中，可以根据投屏内容的显示方向，确定该投屏内容在第一显示设备的显示界面的排布方向，示例性的，当投屏内容为电影，此时可以将该投屏内容在第一显示界面上横向显示，这样可以便于用户在显示设备的显示界面观看该电影。

第一终端接收选中所述交互窗口上控件的用户输入，发送根据所述控件生成的指令到显示设备。本申请实施例中，当选中新增窗口控件时对应的生成新增窗口指令，当选中替换控件时对应的生成替换指令，当选中不再投屏控件时对应生成不再投屏指令。

第一接收终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示投屏内容。本申请实施例中，第一终端只要保证在显示设备显示投屏内容之前，将投屏内容发送到显示设备即可，本申请不对发送投屏内容的时机作限制。

显示设备接收到第一终端的根据控件形成对应的指令后，根据用户的选择，适配显示第一用户界面，如果用户选中的是新增窗口控件，在第一用户界面上和第二终端画面布局中新创建一个播放窗口；如果用户选中的是选择的替换某一路控件，替换某一路控件对应的投屏内容不再显示，在显示原有连接第二终端的投屏内容的位置上，显示第一终端的投屏内容。如果用户选中的是不再投屏控件，则第一终端的投屏内容不会显示在第一用户界面上。

一些实施例中，选中控件可以为用户按压第一终端的触摸屏上控件对应的位置实现，另一些实施例中，选中控件可以为用户按压第一终端的触摸屏上控件对应的位置后，再按压第一终端的触摸屏上确定控件对应的位置实现，如图7所示，选中新增窗口控件可以为用户按压触摸屏上新增窗口控件对应的位置后，在按压确定控件对应的位置实现。

一些实施例中，所述指令包括新增窗口指令，所述控制显示器根据所述指令显示投屏内容的步骤包括：在当前用户界面上新增播放窗口，在新增的播放窗口中显示投屏内容。第一用户界面上的其他播放窗口中的播放内容不变，为了保证屏幕区域分配的合理性，其他播放窗口的位置可能会发生变化，以使在新增播放窗口时使所有的播放窗口在用户界面上的布局更加合理。

一些实施例中，所述第一用户界面上至少包括一个播放窗口，在所述播放窗口内播放与显示设备连接终端的投屏内容；

所述指令包括替换指令，所述替换指令包括替换信息，所述替换信息用于指示被替换第二终端对应的播放窗口信息，播放窗口信息可以为所有播放窗口中该播放窗口的排列次序，替换信息是通过用户选中的替换控件确定的，示例性的，当用户选中替换第一路控件，此时替换信息为位于所有播放窗口中排列为第一个的播放窗口。所述控制显示器根据所述指令显示投屏内容的步骤包括：断开与所述替换信息对应的第二终端的连接，在播放原有的投屏内容的播放窗口处新建播放窗口，将第一终端的投屏内容显示在新建的播放窗口中。

一些实施例中，所述指令包括不再投屏指令，所述控制显示器显示根据所述指令显示投屏内容的步骤包括：拒绝与所述第一终端连接，维持用户界面的显示状态不变。

一些实施例中，所述方法还包括：判断是否符合不发送指示信息的条件；如果符合所述条件，则不发送指示信息；如果不符合所述条件，则发送指示信息。

一些实施例中，所述不发送指示信息的条件包括第一用户界面上播放窗口数量的上限值为特定值。示例性的，所述特定值为0。在一示例中，当所述特定值为0时，显示设备只接收一路终端连接，此时默认为将原有连接的第二终端替换，即原有连接的第二终端的内容不再显示，在显示原有连接第二终端的投屏内容的位置上，显示第一终端的投屏内容，此时不需要发送指示信息。另外，如果显示设备当前没有与其连接的第二终端，则直接在第一用户界面上新建窗口，在新建的窗口中显示投屏内容，在这一方案中同样也不发送指示信息。

本申请实施例中，在显示原有连接第二终端的投屏内容的位置上，显示第一终端的投屏内容，可以通过多种方式实现。一些实施例中，把显示设备当前对应的第二终端的连接断开，在其位置新建一个播放窗口用于播放第一终端的投屏内容。一些实施例中，可以利用原有连接第二终端的投屏内容的播放窗口，显示第一终端的投屏内容。

一些实施例中，终端将用户选择的控件生成的指令发送到显示设备，该命令可以定义如下：″MIRROR_INDEX：m″，m表示用户所选择的控件对应的替换信息。m为-1与表示不再投屏控件，m为0表示新增窗口控件，m为1表示替换第一路控件，m为2表示替换第二路控件，m为3表示替换第三路控件，m为4表示替换第四路控件。

以上内容为以第一终端为主体的角度描述的方案，现以显示设备的角度简单描述本方案。显示设备接收第一终端的连接指令，获取第二终端数量，生成并发送指示信息，该指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，接收用户选中交互窗口中根据第二终端数量生成的控件对应的指令，根据该指令执行控制显示器显示第一终端的投屏内容。

上述实施例中，一种多路投屏的显示方法、显示设备及终端，本申请一些实施例用户根据需要，选择投屏内容在显示设备上的显示方式，提高用户的使用体验。该方法包括：接收第一终端的连接指令，获取第二终端数量，其中所述第二终端为已经与显示设备连接的终端；发送指示信息，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件，所述交互窗口上的控件根据所述第二终端数量确定；接收第一终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示第一终端的投屏内容。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种显示设备，其特征在于，包括：

显示器，用于显示第一用户界面；

用户接口，用于接收输入信号；

分别与显示器和用户接口连接的控制器，用于执行：接收第一终端的连接指令，获取第二终端数量，其中所述第二终端为已经与显示设备连接的终端；发送指示信息，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件，所述交互窗口上的控件根据所述第二终端数量确定；接收第一终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示第一终端的投屏内容。

2.根据权利要求1所述的显示设备，其特征在于，所述指令包括新增窗口指令，所述控制器被配置为按照下述步骤执行控制显示器根据所述指令显示第一终端的投屏内容：在第一用户界面上新增播放窗口，在新增的播放窗口中显示第一终端的投屏内容。

3.根据权利要求1所述的显示设备，其特征在于，所述第一用户界面上至少包括一个播放窗口，在所述播放窗口内播放第二终端的投屏内容；

所述指令包括替换指令，所述替换指令包括替换信息，所述替换信息用于指示被替换投屏内容对应的第二终端的播放窗口信息；所述控制器被配置为按照下述步骤执行控制显示器根据所述指令显示第一终端的投屏内容：断开与所述替换信息对应的第二终端的连接，撤销第二终端的播放窗口，在第二终端的播放窗口处新建播放窗口，将第一终端的投屏内容显示在新建的播放窗口中。

4.根据权利要求1所述的显示设备，其特征在于，所述指令包括不再投屏指令，所述控制器被配置为按照下述步骤执行控制显示器显示根据所述指令显示第一终端的投屏内容：拒绝与所述第一终端连接，维持用户界面的显示状态不变。

5.根据权利要求1所述的显示设备，其特征在于，所述控制器，还用于执行：

判断是否符合不发送指示信息的条件；

如果符合所述条件，则不发送指示信息；

如果不符合所述条件，则发送指示信息。

6.根据权利要求5所述的显示设备，其特征在于，所述不发送指示信息的条件包括第一用户界面上播放窗口数量的上限值为特定值。

7.一种终端，其特征在于，用于执行：接收连接显示设备的用户输入，发送连接指令到显示设备，所述终端包括第一终端；

接收显示设备发送的指示信息，其中，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口；根据所述第二终端数量，确定控件，并将所述控件以交互窗口形式显示在第二用户界面上，所述第二用户界面为第一第二用户界面；

接收选中所述交互窗口上控件的用户输入，发送根据所述控件生成的指令到显示设备。

8.根据权利要求7所述的终端，其特征在于，所述终端被配置为按照下述步骤执行根据所述第二终端数量确定交互界面上的控件：

当所述第二终端数量为第一预设数量时，确定所述控件包括新增窗口控件；

当所述第二终端数量大于第一预设数量，且小于第二预设数量时，确定所述控件包括新增窗口控件，以及与某一第二终端对应的替换控件；

当所述第二终端数量为第二预设数量时，确定所述控件包括不再投屏控件，以及与第二终端对应的替换控件，所述第二预设数量为第一用户界面上播放窗口数量的上限值。

9.一种多路投屏的显示方法，其特征在于，应用于权利要求1-6任一项所述的显示设备，包括：接收第一终端的连接指令，获取第二终端数量，其中所述第二终端为已经与显示设备连接的终端；发送指示信息，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口，所述交互窗口包括控件，所述交互窗口上的控件根据所述第二终端数量确定；接收第一终端发送的根据选中所述交互窗口中控件生成的指令，控制显示器根据所述指令显示第一终端的投屏内容。

10.一种多路投屏的显示方法，其特征在于，应用于权利要求7-8任一项所述的终端，包括：

接收连接显示设备的用户输入，发送连接指令到显示设备，所述终端包括第一终端；

接收显示设备发送的指示信息，其中，所述指示信息用于向第一终端指示第二终端数量，并触发第一终端根据第二终端数量生成交互窗口；根据所述第二终端数量，确定控件，并将所述控件以交互窗口形式显示在第二用户界面上，所述第二用户界面为第一第二用户界面；

接收选中所述交互窗口上控件的用户输入，发送根据所述控件生成的指令到显示设备。

Images