CN115623255A - 一种显示设备、终端设备及镜像投屏反控方法 - Google Patents

一种显示设备、终端设备及镜像投屏反控方法 Download PDF

Info

Publication number
CN115623255A
CN115623255A CN202211204019.9A CN202211204019A CN115623255A CN 115623255 A CN115623255 A CN 115623255A CN 202211204019 A CN202211204019 A CN 202211204019A CN 115623255 A CN115623255 A CN 115623255A
Authority
CN
China
Prior art keywords
screen
display
screen projection
operation event
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211204019.9A
Other languages
English (en)
Inventor
宋子全
肖成创
刘美玉
庞秀娟
马晓燕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202211204019.9A priority Critical patent/CN115623255A/zh
Publication of CN115623255A publication Critical patent/CN115623255A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请一些实施例提供了一种显示设备、终端设备及镜像投屏反控方法，所述方法可以响应于投屏连接指令，使显示设备与终端设备建立投屏连接，然后监听显示设备的反控操作事件。其中，反控操作事件包括用户基于显示设备输入的操作事件，和/或用户基于外接设备输入的操作事件。通过将反控操作事件发送至终端设备的投屏服务应用，以使投屏服务应用实时监听浏览器应用接收的反控操作事件并调用模拟接口响应反控操作事件。所述方法可解决显示设备无法进行镜像投屏反控的问题，提高用户体验。

Description

一种显示设备、终端设备及镜像投屏反控方法
技术领域
本申请涉及显示设备技术领域，尤其涉及一种显示设备、终端设备及镜像投屏反控方法。
背景技术
显示设备是指能够输出具体显示画面的电子设备，可以是智能电视、通信终端、智能广告屏、投影仪等电子设备。以智能电视为例，智能电视是基于Internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体的电视产品，用于满足用户多样化和个性化需求。
显示设备还可以与其他终端设备建立镜像投屏连接关系，即显示设备可以接收其他终端设备共享的投屏数据，并实时显示接收到的投屏数据。终端设备可以通过浏览器应用的屏幕录制功能对自身的屏幕画面及声音进行录制，并将录制的投屏数据发送至显示设备，以使显示设备显示播放终端设备的屏幕画面。然而，由于浏览器应用不具有操控显示设备的功能，如果用户在显示设备端进行了操作，终端设备则受浏览器应用的限制无法响应用户在显示设备端的操作。从而导致显示设备不能进行镜像投屏反控，降低用户体验。
发明内容
本申请提供了一种显示设备、终端设备及镜像投屏反控方法，以解决显示设备无法进行镜像投屏反控的问题。
第一方面，本申请提供一种显示设备，包括：显示器、通信器、外部装置接口与控制器。其中，所述通信器被配置为与终端设备建立通信连接，所述外部装置接口被配置为连接外接设备，以接收通过所述外接设备输入的针对所述显示设备的操作事件；所述控制器被配置为执行以下程序步骤：
响应于投屏连接指令，与终端设备建立投屏连接通道，所述终端设备上运行浏览器应用；
通过所述投屏连接通道获取投屏数据，以及控制所述显示器显示所述投屏数据，所述投屏数据为所述终端设备基于浏览器应用的录屏功能对终端设备当前显示画面执行录屏而生成的视频数据；
监听反控操作事件，所述反控操作事件包括用户基于所述显示设备输入的操作事件，和/或用户基于所述外接设备输入的操作事件；
通过所述投屏连接通道将所述反控操作事件发送至所述终端设备，所述终端设备上还运行投屏服务应用，所述投屏服务应用用于实时监听浏览器应用接收的反控操作事件，以及调用模拟接口响应所述反控操作事件。
第二方面，本申请还提供一种终端设备，包括：显示模块、通信模块与控制模块。其中，所述通信模块被配置为与显示设备建立通信连接，所述控制模块被配置为执行以下程序步骤：
响应于投屏连接指令，与显示设备建立投屏连接通道，以及基于浏览器应用的录屏功能对当前显示画面执行录屏以生成投屏数据；
通过所述投屏连接通道向所述显示设备发送所述投屏数据；
调用投屏服务应用通过监听所述浏览器应用接收的反控操作事件，所述反控操作事件包括用户基于所述显示设备输入的操作事件，和/或用户基于所述显示设备连接的外接设备输入的操作事件；
通过所述投屏服务应用调用模拟接口响应所述反控操作事件。
第三方面，本申请还提供一种镜像投屏反控方法，包括：
响应于投屏连接指令，与终端设备建立投屏连接通道，所述终端设备上运行浏览器应用；
通过所述投屏连接通道获取投屏数据，以及控制显示器显示所述投屏数据，所述投屏数据为所述终端设备基于浏览器应用的录屏功能对终端设备当前显示画面执行录屏而生成的视频数据；
监听反控操作事件，所述反控操作事件包括用户基于显示设备输入的操作事件，和/或用户基于外接设备输入的操作事件；
通过所述投屏连接通道将所述反控操作事件发送至所述终端设备，所述终端设备上还运行投屏服务应用，所述投屏服务应用用于实时监听浏览器应用接收的反控操作事件，以及调用模拟接口响应所述反控操作事件。
由以上技术方案可知，本申请提供的显示设备、终端设备及镜像投屏反控方法可以响应于投屏连接指令，使显示设备与终端设备建立投屏连接，然后监听显示设备的反控操作事件。其中，反控操作事件包括用户基于显示设备输入的操作事件，和/或用户基于外接设备输入的操作事件。通过将反控操作事件发送至终端设备的投屏服务应用，以使投屏服务应用实时监听浏览器应用接收的反控操作事件并调用模拟接口响应反控操作事件。所述方法可解决显示设备无法进行镜像投屏反控的问题，提高用户体验。
附图说明
为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请一些实施例提供的显示设备与控制装置之间操作场景的示意图；
图2为本申请一些实施例提供的显示设备的硬件配置示意图；
图3为本申请一些实施例提供的控制装置的硬件配置示意图；
图4为本申请一些实施例提供的显示设备的软件配置示意图；
图5为本申请一些实施例提供的终端设备的结构示意图；
图6为本申请一些实施例提供的投屏效果示意图；
图7为本申请一些实施例提供的投屏连接的时序关系示意图；
图8为本申请一些实施例提供的引导页面示意图；
图9为本申请一些实施例提供的屏幕录制功能的判断流程示意图；
图10为本申请一些实施例提供的不支持屏幕录制功能的提示窗口示意图；
图11为本申请一些实施例提供的在终端设备端控制投屏画面的效果示意图；
图12为本申请一些实施例提供的终端设备与显示设备交互关系示意图；
图13为本申请一些实施例提供的显示设备与终端设备交互关系示意图；
图14为本申请一些实施例提供的终端设备响应反控操作事件的流程示意图；
图15为本申请一些实施例提供的显示设备发送反控操作事件的流程示意图。
具体实施方式
为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。
需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请实施方式提供的显示设备可以具有多种实施形式，例如，可以是电视、激光投影设备、显示器(monitor)、电子白板(electronic bulletin board)、电子桌面(electronic table)等。
图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示，用户可通过终端设备300或控制装置100操作显示设备200。
在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制显示设备200。
在一些实施例中，也可以使用终端设备300(如移动电话、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如，使用在终端设备300上运行的应用程序控制显示设备200。
在一些实施例中，显示设备200可以不使用上述的终端设备300或控制装置100接收指令，而是通过触摸或者手势等接收用户的控制。
在一些实施例中，显示设备200还可以采用除了控制装置100和终端设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音终端设备来接收用户的语音指令控制。
在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。
如图2所示，显示设备200可以包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
在一些实施例中，控制器250可以包括处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。
显示器260可以包括以下组件，即：用于呈现画面的显示屏组件；驱动图像显示的驱动组件；用于接收源自控制器250输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面的组件等。
显示器260可为液晶显示器、OLED显示器、以及投影显示器，还可以为一种投影装置和投影屏幕。
通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。
用户接口，可用于接收控制装置100(如：红外遥控器等)的控制信号。
检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。
外部装置接口240可以包括但不限于如下：高清多媒体接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。
调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。
控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中，控制器250包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM RandomAccess Memory，RAM)，ROM(Read-Only Memory,ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。
图3示出了根据一些实施例的控制装置100的硬件配置框图。如图3所示，控制装置100包括控制处理器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起到用户与显示设备200之间交互中介作用。
如图4所示，本申请一些实施例中应用程序框架层包括管理器(Managers)、内容提供者(Content Provider)和视图系统(View System)等。
在一些实施例中，活动管理器用于：管理各个应用程序的生命周期以及通常的导航回退功能。
在一些实施例中，窗口管理器用于管理所有的窗口程序。
在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被访问时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。
在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，触摸传感器、压力传感器等)等。
在一些实施例中，内核层还包括用于进行电源管理的电源驱动模块。
在一些实施例中，图4中的软件架构对应的软件程序和/或模块存储在图2或图3所示的第一存储器或第二存储器中。
图5示出了终端设备300的结构示意图。
下面以终端设备300为例对实施例进行具体说明。应该理解的是，图5所示终端设备300仅是一个范例，并且终端设备300可以具有比图5中所示的更多的或者更少的部件，可以组合两个或多个的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
如图5所示，终端设备300包括：射频(radio frequency，RF)电路310、存储器320、显示模块330、摄像头340、传感器350、音频电路360、无线保真(Wireless Fidelity，Wi-Fi)电路370、控制模块380、蓝牙电路381、以及电源390等部件。
RF电路310可用于在收发信息或通话过程中信号的接收和发送，可以接收基站的下行数据后交给控制模块380处理；可以将上行数据发送给基站。通常，RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。
存储器320可用于存储软件程序及数据。控制模块380通过运行存储在存储器320的软件程序或数据，从而执行终端设备300的各种功能以及数据处理。存储器320可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器320存储有使得终端设备300能运行的操作系统。本申请中存储器320可以存储操作系统及各种应用程序，还可以存储执行本申请实施例所述方法的代码。
显示模块330可用于接收输入的数字或字符信息，产生与终端设备300的用户设置以及功能控制有关的信号输入，具体地，显示模块330可以包括设置在终端设备300正面的触摸屏331，可收集用户在其上或附近的触摸操作，例如点击按钮，拖动滚动框等。
显示模块330还可用于显示由用户输入的信息或提供给用户的信息以及终端设备300的各种菜单的图形用户界面(graphical user interface，GUI)。具体地，显示模块330可以包括设置在终端设备300正面的显示屏332。其中，显示屏332可以采用液晶显示器、发光二极管等形式来配置。显示模块330可以用于显示本申请中所述的各种图形用户界面。
其中，触摸屏331可以覆盖在显示屏332之上，也可以将触摸屏331与显示屏332集成而实现终端设备300的输入和输出功能，集成后可以简称触摸显示屏。本申请中显示模块330可以显示应用程序以及对应的操作步骤。
摄像头340可用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给控制模块380转换成数字图像信号。
终端设备300还可以包括至少一种传感器350，比如加速度传感器351、距离传感器352、指纹传感器353、温度传感器354。终端设备300还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。
音频电路360、扬声器361、麦克风362可提供用户与终端设备300之间的音频接口。音频电路360可将接收到的音频数据转换后的电信号，传输到扬声器361，由扬声器361转换为声音信号输出。终端设备300还可配置音量按钮，用于调节声音信号的音量。另一方面，麦克风362将收集的声音信号转换为电信号，由音频电路360接收后转换为音频数据，再将音频数据输出至RF电路310以发送给比如另一终端，或者将音频数据输出至存储器320以便进一步处理。本申请中麦克风362可以获取用户的语音。
Wi-Fi属于短距离无线传输技术，终端设备300可以通过Wi-Fi电路370帮助用户收发电子邮件、浏览网页和访问流媒体等，它为用户提供了无线的宽带互联网访问。
控制模块380是终端设备300的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器320内的软件程序，以及调用存储在存储器320内的数据，执行终端设备300的各种功能和处理数据。在一些实施例中，控制模块380可包括一个或多个处理模块；控制模块380还可以集成应用控制模块和基带控制模块，其中，应用控制模块主要处理操作系统、用户界面和应用程序等，基带控制模块主要处理无线通信。可以理解的是，上述基带控制模块也可以不集成到控制模块380中。本申请中控制模块380可以运行操作系统、应用程序、用户界面显示及触控响应，以及本申请实施例所述的处理方法。另外，控制模块380与输入模块和显示模块330耦接。
蓝牙电路381，用于通过蓝牙协议来与其他具有蓝牙电路的蓝牙设备进行信息交互。例如，终端设备300可以通过蓝牙电路381与同样具备蓝牙电路的可穿戴电子设备(例如智能手表)建立蓝牙连接，从而进行数据交互。
终端设备300还包括给各个部件供电的电源390(比如电池)。电源可以通过电源管理系统与控制模块380逻辑相连，从而通过电源管理系统实现管理充电、放电以及功耗等功能。终端设备300还可配置有电源按钮，用于终端设备300的开机和关机，以及锁屏等功能。
基于以上显示设备200与终端设备300，如图6所示，显示设备200可以与终端设备300建立镜像投屏连接，使显示设备200播放终端设备300显示的内容。在建立投屏连接时，显示设备200需要与终端设备300完成传输协议配置，从而与终端设备300之间建立投屏数据的传输通道。通常，显示设备200基于Miracast投屏与Airplay投屏连接协议与终端设备300建立投屏连接。其中，Miracast投屏是由Wi-Fi联盟制定，以Wi-Fi直连为基础的无线显示标准。Miracast投屏可适用于Windows系统设备，即Windows系统设备可通过Miracast投屏的方式分享视频画面；Airplay投屏是由苹果公司推出的一种无线播放技术，配合支持AirPlay server服务的投屏器使用，协议自带投屏码功能，适用于MAC OS系统的终端设备300。然而，以上两种协议对终端设备300的系统及硬件具有一定的要求，导致部分终端设备300无法支持以上协议功能，不能与显示设备200建立投屏连接。
因此，在本申请一些实施例中，如图7所示，显示设备200在与终端设备300建立投屏连接时，首先启动第一协议服务与第二协议服务，然后控制显示器260显示引导页面。其中，引导页面包括基于第一协议服务生成的访问网页地址；第一协议服务为Https服务，第二协议服务为WebSocket服务。Https为超文本传输安全协议，是一种通过计算机网络进行安全通信的传输协议；WebSocket协议是基于TCP的一种新的网络协议，实现了浏览器与服务器全双工(full-duplex)通信，即允许服务器主动发送信息给客户端。
例如：如图8所示，图8为显示器260显示的引导页面，图8中显示提示用户输入第一协议服务访问网页地址：http://192.×××.×××.100:18080，可以引导用户在终端设备300的浏览器应用中输入http://192.×××.×××.100:18080，以使终端设备300向显示设备200发送连接请求。
显示设备200接收终端设备300发送的连接请求，连接请求即为用户在终端设备300的浏览器应用应用中输入访问网页地址后生成的请求。即如图8所示的引导页面，用户首先打开终端设备300的浏览器应用，然后在浏览器应用中输入http://192.168.137.100:18080后，终端设备300则自动生成连接请求并将连接请求发送至显示设备200。显示设备200响应于连接请求，基于第二协议服务与终端设备300建立第二协议连接通道，即WebSocket连接通道。
在一些实施例中，如图9所示，用户在打开终端设备300的浏览器应用时，获取浏览器的版本信息。然后根据版本信息，检测浏览器应用是否支持屏幕录制功能。如果浏览器不支持屏幕录制功能，则生成不支持所述功能的引导信息以及支持所述功能的浏览器类型、版本的提示信息，然后控制显示模块330显示引导信息和提示信息。
例如：如图10所示，在浏览器应用页面打开后，可以通过浏览器应用中的H5软件检测“navigator.mediaDevices.getDisplayMedia”方法是否存在。浏览器应用不存在“avigator.mediaDevices.getDisplayMedia”方法时，则控制显示模块330显示图10中的引导信息以及提示信息。用户可以根据提示信息在终端设备300中选择支持屏幕录制功能的浏览器应用，比如图10中提示的Axx6.4版本的浏览器应用，在Axx6.4版本浏览器应用中输入显示设备200中显示的访问网页地址，即可以生成连接请求，并将连接请求发送至显示设备200。
基于上述应用场景，显示设备200与终端设备300建立投屏后，终端设备300可以基于浏览器应用中内置的屏幕录制功能，对终端设备300的屏幕进行实时录制。然后将录制的音视频数据传输至显示设备200，以使显示设备200显示播放终端设备300的屏幕画面。但由于浏览器应用不具有操控终端设备300的接口，比如，以个人计算机为例，终端设备300不具备系统全局的模拟键盘及鼠标等外设事件能力，从而导致终端设备300不能响应显示设备200端用户进行的操作。所以显示设备200无法实现镜像投屏反控的功能，降低用户体验感。
为了提升用户的体验感，改善显示设备200无法进行镜像投屏反控的问题，本申请一些实施例提供了一种镜像投屏反控方法。所述方法具体包括如下内容：
S100：响应于投屏连接指令，与终端设备建立投屏连接通道。
其中，所述终端设备300上运行浏览器应用。显示设备200可以获取用户输入的多种控制指令，其中，部分控制指令用于控制显示设备200进行投屏连接，被称为投屏连接指令。用户可以通过不同的交互方式或基于不同的用户界面在显示设备200端输入投屏连接指令。在一些实施例中，显示设备200可以显示投屏连接设置界面，以供用户在投屏连接设置界面中选择投屏连接的控制选项。其中，用户可以通过输入用于展示投屏连接设置界面的控制指令，控制显示设备200显示投屏连接设置界面。用于展示投屏连接设置界面的控制指令可以通过多种方式完成输入。
例如，用户可以通过显示设备200上的按键或显示设备200配套的控制装置100上的按键，调出投屏连接设置界面。或者用户可以通过显示设备200配套的控制装置100输入开机指令，控制显示设备200开机，显示设备200在接收到开机指令后可以运行操作系统的启动程序呈现首页界面。首页界面中可以包括投屏连接的控制选项，即首页界面也为一种投屏连接设置界面。用户可以通过在投屏连接设置界面中点击投屏连接的控制选项生成投屏连接指令。又或者，当显示设备200内置智能语音系统时，用户可以通过输入语音进行交互。即用户可以通过输入“打开投屏连接”的语音指令，完成投屏连接的输入。
或者，在一些实施例中，用户还可以在终端设备300端输入投屏连接指令，然后由终端设备300通过局域网将投屏连接指令传输至显示设备200中。例如：终端设备300与显示设备200连接在同一局域网中，用户通过控制与终端设备300连接的鼠标，在终端设备300的用户界面中点击投屏连接的控制选项。终端设备300响应于鼠标的点击操作信息生成投屏连接指令，并通过局域网将投屏连接指令传递给显示设备200。
显示设备200在接收到上述实施例中的投屏连接指令后，响应于投屏连接指令，与终端设备300建立投屏连接通道。其中，投屏连接通道可以为WebSocket连接通道。显示设备200与终端设备300之间可以通过WebSocket连接通道进行数据的传输。
S200：通过投屏连接通道获取投屏数据，以及控制显示器显示投屏数据。
在投屏连接通道建立后，显示设备200则可以通过投屏连接通道接收终端设备300发送的投屏数据。其中，投屏数据为终端设备300基于浏览器应用的录屏功能对终端设备300当前显示画面执行录屏而生成的视频数据。然后终端设备300将投屏数据的数据流通过投屏连接通道发送至显示设备200，显示设备200对数据流进行解码，并控制显示器260显示播放解码后的数据流画面。
例如：在建立WebSocket连接通道后，终端设备300的浏览器应用在开始屏幕录制后会返回Stream(流数据)流。创建MediaRecorder(媒体记录器)，然后设置MediaRecorder的ondataavailable回调(编码封装后的视频流数据回调)，并将数据流通过已建立好的WebSocket连接通道发送到显示设备200。通过mediaRecorder.start(1)开始录制编码，此时投屏数据就可以不断的发送到显示设备200中。显示设备200对接收的数据流进行解码，并控制显示器260显示播放解码后的数据流画面。
此外，由于显示器260的尺寸大小与终端设备300的尺寸大小不相同，在控制显示器260显示投屏数据的画面前，还需要在显示器260的投屏界面中划分投屏区域。即在一些实施例中，控制显示器260显示投屏数据时，首先读取投屏数据中的画面尺寸，以及获取显示器260的屏幕尺寸。然后根据屏幕尺寸和画面尺寸，对投屏数据执行缩放，进行解析、渲染，以最终形成投屏画面。例如，若显示器260的长度尺寸为W1(像素)，终端设备300的长度尺寸为W2(像素)，则可以设置缩放比例A＝W1/W2。然后以显示器260的中心点为投屏画面的中心，将终端设备300投屏数据根据缩放比例A调整到对应画面大小并投放到显示器260的投屏界面上。最后在显示器260中查找投屏画面的边界坐标，并根据边界坐标划定投屏区域。
同时，显示设备200还可以在显示播放投屏数据时，通过投屏连接通道获取终端设备300发送的控制指令，如快进、暂停、停止投屏等。例如，通过通讯协议建立好连接后，终端设备300与显示设备200会进行设备功能与网络条件的协商，以选择适合的影音传输格式。建立影音串流的联机协议(Session)后，再通过一连串的实时串流协议(Real TimeStreaming Protocol，RTSP)控制命令，以控制影音串流的播放及终止。
可见，在投屏过程中，用户可以操作终端设备300控制投屏画面的播放内容。即在一些实施例中，用户可以在终端设备300端输入操作事件，以控制投屏画面的播放内容。用户可以通过外接设备(比如鼠标、键盘等)，或者终端设备300内置的控制组件(比如触摸板、触控组件等)的方式对终端设备300进行操控。用户在输入操作事件后，终端设备300可以根据输入方式对应的接口配置直接响应操作事件。
例如：以个人计算机为例，如图11所示，终端设备300正在播放视频片段A，显示设备200通过显示器260同步显示终端设备300的播放内容。用户在终端设备300的触摸板上做出右滑的动作，进而直接触发了视频片段A的快进操作。显示设备200与终端设备300之间传输的录屏数据流，也同步显示终端设备300中的快进画面。
同理，用户也可以在显示设备200端输入操作事件。用户可以通过外接设备(比如鼠标、键盘、遥控器等)，或者显示设备200内置的控制组件(比如触控组件等)的方式对显示设备200进行操控。由于在投屏过程中，显示设备200显示的画面为终端设备300的屏幕录制画面，所以用户对显示设备200输入的操作事件实际所执行的设备为终端设备300。因此，需要将用户在显示设备200端输入的操作事件也通过投屏连接通道传输至终端设备300，以使终端设备300响应该操作事件。
S300：监听反控操作事件。
为了使终端设备300可以及时响应用户输入的操作事件，实时监听显示设备200的反控操作事件。其中，反控操作事件包括用户基于显示设备200输入的操作事件，和/或用户基于外接设备输入的操作事件。
S400：通过投屏连接通道将反控操作事件发送至终端设备。
其中，所述终端设备300上还运行投屏服务应用，所述投屏服务应用用于实时监听浏览器应用接收的反控操作事件，以及调用模拟接口响应所述反控操作事件。显然，在监听到显示设备200的反控操作事件后，需要将反控操作事件发送至终端设备300，以使终端设备300可以响应反控操作事件。但由于终端设备300是基于浏览器应用与显示设备200建立的投屏连接，而浏览器应用自身并不具备对终端设备300进行操控的接口。因此，通过终端设备300的投屏服务应用监听反控操作事件。其中，投屏服务应用用于实时监听浏览器应用接收的反控操作事件，以及调用模拟接口响应反控操作事件。例如，投屏服务应用可以是名为httpserver的应用。投屏服务应用可以配置为用户手动开启的方式，也可以配置为自动开启的方式，比如在建立投屏连接通道时自动开启投屏服务应用，对此本申请不做限制。
基于上述实施例，用户可以通过多种方式输入反控操作事件，所以不同的反控操作事件中包括不同的操作信息。显示设备200通过投屏连接通道发送反控操作事件时，终端设备300的投屏服务应用需要对反控操作事件进行识别，从而调用其对应的模拟接口响应反控操作事件。
为了方便投屏服务应用监听反控操作事件以及调用模拟接口，在一些实施例中，显示设备200还检测反控操作事件的操作信息，操作信息包括反控操作事件生成的具体操作数据，比如操作类型、操作事件发生时的坐标、操作按键的键值等。然后按照操作信息将反控操作事件封装为消息指令。其中，消息指令的格式根据投屏服务应用的配置信息进行设置。在消息指令封装完毕后，通过投屏连接通道将消息指令发送至终端设备300的投屏服务应用，投屏服务应用根据消息指令的格式调用其对应的模拟接口，以响应反控操作事件。也就是说，投屏服务应用可以根据消息指令的格式选择合适的模拟接口，即如果消息指令的格式为固定按键操作，则调用键盘模拟接口；如果消息指令的格式为移动按键操作，则调用鼠标模拟接口。键盘模拟接口与鼠标模拟接口均为终端设备300系统中内置的功能。
另外，由于显示设备200与终端设备300是基于终端设备300的浏览器应用建立的投屏连接通道。所以，显示设备200通过投屏连接通道发送消息指令，只能发送到浏览器应用，不能直接发送到投屏服务应用。因此，在一些实施例中，终端设备300首先调用浏览器应用的消息接口将反控操作事件转发至投屏服务应用。然后根据投屏服务应用的配置信息解析反控操作事件中的操作信息，以及通过投屏服务应用调用模拟接口。通过模拟接口写入操作信息，从而生成操作信息对应的目标操作事件，以响应所述目标操作事件。
例如：显示设备200通过WebSocket连接通道向终端设备300发送消息指令P1，P1的格式为mouse_action:actiontype:x,y。终端设备300通过浏览器应用网页的jQuery.post接口将P1转发给终端设备300的投屏服务应用，调用方法jQuery.post("http://127.×.×.1:8083/"+mouse_action:actiontype:x,y)。投屏服务应用解析P1中的操作信息，其中的参数http://127.×.×.1表示连接本机的投屏服务应用；8083表示投屏服务应用的端口号，可以自由设置；mouse_action表示操作类型为鼠标时间；actiontype:x,y表示鼠标按键类型及鼠标按键动作发生时的坐标。投屏服务应用根据解析出的操作信息，调用鼠标模拟接口将操作信息写入，生成对应的目标操作事件，终端设备300则根据鼠标模拟接口响应目标操作事件。
然而，用户在显示设备200端输入反控操作事件的方式不只包括鼠标操作以及键盘操作这两种类型，还可以为遥控器操作、触控操作等。而个人计算机等终端设备300的系统中仅具备键盘模拟接口与鼠标模拟接口，无法响应其他的操作类型。
因此，在一些实施例中，显示设备200还获取所述操作信息中的操作类型。如果所述操作类型为固定按键操作，则将固定按键动作及固定按键动作发生时的键值封装为所述消息指令。其中，固定按键动作包括按下动作与弹起动作。固定按键操作即为键盘操作、遥控器操作等固定的按键操作方式，在封装消息指令时，可以将格式统一设置为键盘操作的格式，比如“keyboard_action:actiontype:keycode”。其中，keyboad_action:表示键盘操作事件；actiontype:表示按下动作或弹起动作；keycode:表示按键的键值。
例如：用户通过遥控器在显示设备200中输入了反控操作事件A2，显示设备200检测A2的操作信息并获取操作信息中的操作类型以及按键动作发生时的键值。操作类型为遥控器操作，即固定按键操作，则将A2封装为键盘操作的格式。A2的格式为“keyboard_action:01:8989”。其中，01表示按下动作；8989表示遥控器被按下的按钮键值。根据以上格式将A2封装为消息指令P2，P2的格式为keyboard_action:01:8989，通过浏览器接口转发给终端设备300的投屏服务应用,调用方法jQuery.post("http://127.×.×.1:8083/"+keyboard_action:01:8989)。
同理，如果操作类型为移动按键操作，即鼠标等移动按键方式，则将格式统一设置为鼠标操作的格式。即在一些实施例中，如果所述操作类型为移动按键操作，则将移动按键动作及移动按键动作发生时的坐标封装为消息指令。其中，移动按键动作包括按下动作与弹起动作。鼠标操作的格式可以为“mouse_action:actiontype:x,y”。mouse_action表示鼠标操作事件；actiontype:表示鼠标移动、鼠标左键按下、鼠标左键弹起、鼠标右键按下、鼠标右键弹起操作；x表示鼠标事件发生时，鼠标的x轴坐标；y表示鼠标事件发生时，鼠标的y轴坐标。
例如：用户通过鼠标在显示设备200中输入了反控操作事件A3，显示设备200检测A3的操作信息并获取操作信息中的操作类型以及鼠标按键动作发生时的坐标。操作类型为鼠标操作，即移动按键操作，则将A3封装为鼠标操作的格式。A3的格式为“mouse_action:0301:086,024”。其中，0301表示鼠标左键按下动作；086,024表示鼠标左键按下的坐标。根据以上格式将A3封装为消息指令P3，P3的格式为mouse_action:0301:086,024，通过浏览器接口转发给终端设备300的投屏服务应用,调用方法jQuery.post("http://127.×.×.1:8083/"+mouse_action:0301:086,024)。
另外，在本申请一些实施例中，显示设备200还设置有触控组件，即显示设备200也支持触控操作。触控组件为设置在显示器260屏幕上的一个触控面板，可以实时检测用户在显示器260上的触摸操作。例如，可以根据显示设备200的实际应用场景不同，采用电容式触摸屏、电阻式触摸屏、红外线式触摸屏、表面声波式触摸屏等。用户可以通过触控组件与显示设备200进行触控交互，具体的触摸感应原理可以根据实际的交互动作要求进行确定。例如：触控组件可以包括设置在显示器260上的感应单元以及设置在显示设备200中的信号处理单元。其中，感应单元可以用于感知用户的触摸操作，并将触摸操作转化为电信号；信号处理单元可以针对产生的电信号进行处理，包括特征提取、降噪、放大等。
用户在触摸屏上实施的交互动作可以包括点击、长按、滑动等操作，进而控制显示器260显示相应的界面。为了能够支持更多的交互方式，触摸屏还可以支持多点触控。触摸屏支持触控的点数越多，相应可以实施的交互动作越多。例如，可以实现多指点击、多指长按、多指滑动等。针对不同的交互动作，可以针对产生的触控信号获取触控信号的特点，例如触摸点位置，触摸点数量等。根据触摸点所产生的信号特点判断触控信号的种类，从而生成触控指令。其中，根据触摸点的位置，可以检测出用户的触摸位置即执行交出操作的位置；通过触摸点的数量可以确定用户触摸交互操作中所使用的手指数量；通过判断触摸信号的持续时间，可以确定用户是执行点击操作还是长按操作；通过触摸点的位置变化情况，可以确定用户执行的滑动操作。为了能够支持更多的交互方式，触控组件还可以支持多点触控。触控组件支持触控的点数越多，相应可以实施的交互动作越多。例如，可以实现多指点击、多指长按、多指滑动等。
因此，在一些实施例中，如果所述操作类型为触控操作，则将触控动作及触控动作的坐标转化为移动按键动作及移动按键动作的坐标。然后将移动按键动作及移动按键动作的坐标封装为所述消息指令。也就是说，如果操作类型为触控操作，在封装消息指令时，可以设置为鼠标操作的格式“mouse_action:actiontype:x,y”，将actiontype:默认设置为鼠标左键动作，即鼠标左键按下与鼠标左键弹起动作。
例如：用户通过鼠标在显示设备200中输入了反控操作事件A4，显示设备200检测A4的操作信息并获取操作信息中的操作类型以及触控动作发生时的坐标。操作类型为触控操作，则将A4的操作信息转化为移动按键动作及移动按键动作的坐标，并将A4封装为鼠标操作的格式。A4的格式为“mouse_action:0301:099,026”。其中，0301表示触控操作按下动作，即手指按下的动作；099,026表示触控操作按下的坐标。根据以上格式将A4封装为消息指令P4，P4的格式为mouse_action:0301:099,026，通过浏览器接口转发给终端设备300的投屏服务应用,调用方法jQuery.post("http://127.×.×.1:8083/"+mouse_action:0301:086,024)。
显示设备200可以基于以上实施例中的格式将反控操作事件封装为消息指令，并通过投屏连接通道将消息指令转发至终端设备300。终端设备300的投屏服务应用对消息指令进行解析后，可以根据消息指令的格式调用对应的键盘模拟接口或鼠标模拟接口，从而响应消息指令中表征的操作事件。
基于上述镜像投屏反控方法，在本申请的部分实施例中还提供一种终端设备300，如图12所示，包括：显示模块330、通信模块以及控制模块380。其中，所述通信模块被配置为与显示设备200建立通信连接。如图14所示，所述控制模块380被配置为执行以下程序步骤：
S110：响应于投屏连接指令，与显示设备建立投屏连接通道，以及基于浏览器应用的录屏功能对当前显示画面执行录屏以生成投屏数据；
S120：通过所述投屏连接通道向所述显示设备发送所述投屏数据；
S130：调用投屏服务应用通过监听所述浏览器应用接收的反控操作事件，所述反控操作事件包括用户基于所述显示设备输入的操作事件，和/或用户基于所述显示设备连接的外接设备输入的操作事件；
S140：通过所述投屏服务应用调用模拟接口响应所述反控操作事件。
基于上述镜像投屏反控方法与终端设备300，本申请的部分实施例中还提供一种显示设备200，如图13所示，包括：显示器260、通信器220、外部装置接口240以及控制器250。其中，所述通信器220被配置为与终端设备300建立通信连接。所述外部装置接口240被配置为连接外接设备，以接收通过所述外接设备输入的针对所述显示设备的操作事件。如图15所示，所述控制器250被配置为执行以下程序步骤：
S100：响应于投屏连接指令，与终端设备建立投屏连接通道，所述终端设备上运行浏览器应用；
S200：通过所述投屏连接通道获取投屏数据，以及控制所述显示器显示所述投屏数据，所述投屏数据为所述终端设备基于浏览器应用的录屏功能对终端设备当前显示画面执行录屏而生成的视频数据；
S300：监听反控操作事件，所述反控操作事件包括用户基于所述显示设备输入的操作事件，和/或用户基于所述外接设备输入的操作事件；
S400：通过所述投屏连接通道将所述反控操作事件发送至所述终端设备，所述终端设备上还运行投屏服务应用，所述投屏服务应用用于实时监听浏览器应用接收的反控操作事件，以及调用模拟接口响应所述反控操作事件。
由以上技术方案可知，本申请提供的显示设备、终端设备及镜像投屏反控方法可以响应于投屏连接指令，使显示设备200与终端设备300建立投屏连接，然后监听显示设备200的反控操作事件。其中，反控操作事件包括用户基于显示设备200输入的操作事件，和/或用户基于外接设备输入的操作事件。通过将反控操作事件发送至终端设备300的投屏服务应用，以使投屏服务应用实时监听浏览器应用接收的反控操作事件并调用模拟接口响应反控操作事件。所述方法可解决显示设备200无法进行镜像投屏反控的问题，提高用户体验。
本申请提供的实施例之间的相似部分相互参见即可，以上提供的具体实施方式只是本申请总的构思下的几个示例，并不构成本申请保护范围的限定。对于本领域的技术人员而言，在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种显示设备，其特征在于，包括：
显示器；
通信器，被配置为与终端设备建立通信连接；
外部装置接口，被配置为连接外接设备，以接收通过所述外接设备输入的针对所述显示设备的操作事件；
控制器，被配置为：
响应于投屏连接指令，与终端设备建立投屏连接通道，所述终端设备上运行浏览器应用；
通过所述投屏连接通道获取投屏数据，以及控制所述显示器显示所述投屏数据，所述投屏数据为所述终端设备基于浏览器应用的录屏功能对终端设备当前显示画面执行录屏而生成的视频数据；
监听反控操作事件，所述反控操作事件包括用户基于所述显示设备输入的操作事件，和/或用户基于所述外接设备输入的操作事件；
通过所述投屏连接通道将所述反控操作事件发送至所述终端设备，所述终端设备上还运行投屏服务应用，所述投屏服务应用用于实时监听浏览器应用接收的反控操作事件，以及调用模拟接口响应所述反控操作事件。
2.根据权利要求1所述的显示设备，其特征在于，所述控制器执行与终端设备建立投屏连接通道，还被配置为：
启动第一协议服务与第二协议服务；
控制所述显示器显示引导页面，所述引导页面包括基于第一协议服务生成的访问网页地址；
接收终端设备发送的连接请求，所述连接请求为用户在所述终端设备的浏览器应用应用中输入所述访问网页地址后生成的请求；
响应于所述连接请求，基于所述第二协议服务与所述终端设备建立第二协议连接通道。
3.根据权利要求1所述的显示设备，其特征在于，所述控制器还被配置为：
检测所述反控操作事件的操作信息；
按照所述操作信息将所述反控操作事件封装为消息指令，所述消息指令的格式根据所述投屏服务应用的配置信息设置；
通过所述投屏连接通道将所述消息指令发送至所述终端设备的投屏服务应用。
4.根据权利要求3所述的显示设备，其特征在于，所述控制器执行检测所述反控操作事件的操作信息，还被配置为：
获取所述操作信息中的操作类型；
如果所述操作类型为固定按键操作，则将固定按键动作及固定按键动作发生时的键值封装为所述消息指令，所述固定按键动作包括按下动作与弹起动作。
5.根据权利要求4所述的显示设备，其特征在于，所述控制器执行获取所述操作信息中的操作类型后，还被配置为：
如果所述操作类型为移动按键操作，则将移动按键动作及所述移动按键动作发生时的坐标封装为所述消息指令，所述移动按键动作包括按下动作与弹起动作。
6.根据权利要求5所述的显示设备，其特征在于，所述控制器执行获取所述操作信息中的操作类型后，还被配置为：
如果所述操作类型为触控操作，则将所述触控动作及触控动作的坐标转化为移动按键动作及移动按键动作的坐标；
将所述移动按键动作及移动按键动作的坐标封装为所述消息指令。
7.一种终端设备，其特征在于，包括：
显示模块；
通信模块，被配置为与显示设备建立通信连接；
控制模块，被配置为：
响应于投屏连接指令，与显示设备建立投屏连接通道，以及基于浏览器应用的录屏功能对当前显示画面执行录屏以生成投屏数据；
通过所述投屏连接通道向所述显示设备发送所述投屏数据；
调用投屏服务应用通过监听所述浏览器应用接收的反控操作事件，所述反控操作事件包括用户基于所述显示设备输入的操作事件，和/或用户基于所述显示设备连接的外接设备输入的操作事件；
通过所述投屏服务应用调用模拟接口响应所述反控操作事件。
8.根据权利要求7所述的终端设备，其特征在于，所述控制模块还被配置为：
获取所述浏览器应用的版本信息；
根据所述版本信息，检测所述浏览器应用是否支持屏幕录制功能；
如果所述浏览器应用不支持屏幕录制功能，则生成不支持所述功能的引导信息以及支持所述功能的浏览器应用类型、版本的提示信息；
控制所述显示模块显示所述引导信息和所述提示信息。
9.根据权利要求7所述的终端设备，其特征在于，所述控制模块还被配置为：
调用所述浏览器应用的消息接口将所述反控操作事件转发至所述投屏服务应用；
根据所述投屏服务应用的配置信息解析所述反控操作事件中的操作信息，以及通过所述投屏服务应用调用所述模拟接口；
通过所述模拟接口写入所述操作信息，以生成所述操作信息对应的目标操作事件；
响应所述目标操作事件。
10.一种镜像投屏反控方法，其特征在于，包括：
响应于投屏连接指令，与终端设备建立投屏连接通道，所述终端设备上运行浏览器应用；
通过所述投屏连接通道获取投屏数据，以及控制显示器显示所述投屏数据，所述投屏数据为所述终端设备基于浏览器应用的录屏功能对终端设备当前显示画面执行录屏而生成的视频数据；
监听反控操作事件，所述反控操作事件包括用户基于显示设备输入的操作事件，和/或用户基于外接设备输入的操作事件；
通过所述投屏连接通道将所述反控操作事件发送至所述终端设备，所述终端设备上还运行投屏服务应用，所述投屏服务应用用于实时监听浏览器应用接收的反控操作事件，以及调用模拟接口响应所述反控操作事件。
CN202211204019.9A 2022-09-29 2022-09-29 一种显示设备、终端设备及镜像投屏反控方法 Pending CN115623255A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211204019.9A CN115623255A (zh) 2022-09-29 2022-09-29 一种显示设备、终端设备及镜像投屏反控方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211204019.9A CN115623255A (zh) 2022-09-29 2022-09-29 一种显示设备、终端设备及镜像投屏反控方法

Publications (1)

Publication Number Publication Date
CN115623255A true CN115623255A (zh) 2023-01-17

Family

ID=84860587

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211204019.9A Pending CN115623255A (zh) 2022-09-29 2022-09-29 一种显示设备、终端设备及镜像投屏反控方法

Country Status (1)

Country Link
CN (1) CN115623255A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118012683A (zh) * 2024-04-08 2024-05-10 建信金融科技有限责任公司 一种投屏测试方法及投屏测试系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118012683A (zh) * 2024-04-08 2024-05-10 建信金融科技有限责任公司 一种投屏测试方法及投屏测试系统

Similar Documents

Publication Publication Date Title
CN111741372B (zh) 一种视频通话的投屏方法、显示设备及终端设备
WO2020244266A1 (zh) 智能电视的远程控制方法、移动终端和智能电视
US20180375987A1 (en) Method, apparatus and mobile terminal for device control based on a mobile terminal
CN111277884B (zh) 视频播放方法及设备
CN114339332B (zh) 一种移动终端、显示设备及跨网投屏方法
CN114286165A (zh) 一种显示设备、移动终端及投屏数据传输方法
CN111970548B (zh) 显示设备及调整摄像头角度的方法
US11960674B2 (en) Display method and display apparatus for operation prompt information of input control
CN114286152A (zh) 显示设备、通信终端及投屏画面动态显示方法
CN113784200A (zh) 通信终端、显示设备及投屏连接方法
CN112653906A (zh) 显示设备上视频热点播放方法及显示设备
CN113453057B (zh) 一种显示设备及播放进度控制方法
WO2022028060A1 (zh) 一种显示设备及显示方法
CN115623255A (zh) 一种显示设备、终端设备及镜像投屏反控方法
WO2024098974A1 (zh) 一种显示设备及外接设备的控制方法
CN112799576A (zh) 一种虚拟鼠标移动的方法及显示设备
CN116233522A (zh) 一种显示设备及连续投屏的方法
CN115437542A (zh) 一种显示设备及投屏反控方法
CN114040341B (zh) 一种蓝牙广播包上报处理方法及显示设备
CN112367550A (zh) 一种媒资列表多标题动态展示的实现方法及显示设备
CN114390190A (zh) 显示设备及监测应用启动摄像头的方法
CN111787350A (zh) 显示设备及视频通话中的截图方法
CN111782606A (zh) 显示设备、服务器和文件管理方法
CN112087651B (zh) 显示询问信息的方法及智能电视
CN115145526B (zh) 一种语音控制方法及显示终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination