CN116489438A - 显示设备和镜像投屏数据显示方法 - Google Patents

显示设备和镜像投屏数据显示方法 Download PDF

Info

Publication number
CN116489438A
CN116489438A CN202310377533.0A CN202310377533A CN116489438A CN 116489438 A CN116489438 A CN 116489438A CN 202310377533 A CN202310377533 A CN 202310377533A CN 116489438 A CN116489438 A CN 116489438A
Authority
CN
China
Prior art keywords
screen
display
throwing
data
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310377533.0A
Other languages
English (en)
Inventor
庞秀娟
宋子全
肖成创
马晓燕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202310377533.0A priority Critical patent/CN116489438A/zh
Publication of CN116489438A publication Critical patent/CN116489438A/zh
Priority to PCT/CN2023/142362 priority patent/WO2024169421A1/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请一些实施例提供一种显示设备和镜像投屏数据显示方法。终端设备向显示设备发送镜像投屏数据后,显示设备基于镜像投屏数据获取弹幕状态。显示设备基于弹幕状态设置投屏模式。如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为第二帧率。显示设备基于投屏数据显示帧率,显示镜像投屏数据。显示设备可以根据终端设备画面中是否包含弹幕,设置不同的显示帧率,从而缓解弹幕抖动的问题,提高用户的观看体验。

Description

显示设备和镜像投屏数据显示方法
技术领域
本申请涉及显示设备技术领域,尤其涉及一种显示设备和镜像投屏数据显示方法。
背景技术
显示设备是指能够输出具体显示画面的终端设备,随着显示设备的快速发展,显示设备的功能将越来越丰富,性能也越来越强大,可实现双向人机交互功能,集影音、娱乐、数据等多种功能于一体,用于满足用户多样化和个性化需求。
用户不仅可以控制显示设备播放网络中的各种媒资,还可以控制显示设备播放终端设备中播放的内容,例如显示设备可以设置有投屏功能。当电视和终端设备同处于同一网络下,用户可以控制终端设备将播放的媒资传送到电视,从而利用电视显示该媒资,实现投屏显示。终端设备还可以将屏幕当前显示内容镜像投屏至显示设备,终端设备可以通过录屏,将屏幕当前显示内容录制并压缩为视频流传输至显示设备。
终端设备和显示设备进行镜像投屏时,终端设备会以一个固定帧率向显示设备发送投屏数据。显示设备接收到投屏数据后,会按照该固定帧率显示相应的画面。然而,终端设备中的画面可能存在弹幕内容,显示设备显示弹幕内容时,可能出现弹幕抖动的问题,导致画面效果较差,严重影响用户的使用体验。
发明内容
本申请提供一种显示设备和镜像投屏数据显示方法,以解决相关技术中,显示设备显示弹幕内容时,出现弹幕抖动的问题,导致画面效果较差,严重影响用户的使用体验的问题。
第一方面,本申请一些实施例提供一种显示设备,包括显示器、通信器和控制器。
其中,通信器被配置为接收终端设备发送的数据;控制器被配置为:
响应于终端设备发送的镜像投屏数据,基于所述镜像投屏数据获取弹幕状态;
基于所述弹幕状态设置显示设备的投屏模式;
如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于所述镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为所述第二帧率;
基于所述投屏数据显示帧率,控制所述显示器显示所述镜像投屏数据。
第二方面,本申请一些实施例提供一种镜像投屏数据显示方法,应用于显示设备,方法包括:
响应于终端设备发送的镜像投屏数据,基于所述镜像投屏数据获取弹幕状态;
基于所述弹幕状态设置显示设备的投屏模式;
如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于所述镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为所述第二帧率;
基于所述投屏数据显示帧率,控制所述显示器显示所述镜像投屏数据。
由以上技术方案可以看出,本申请一些实施例提供了一种显示设备和镜像投屏数据显示方法。终端设备向显示设备发送镜像投屏数据后,显示设备基于镜像投屏数据获取弹幕状态。显示设备基于弹幕状态设置投屏模式。如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为第二帧率。显示设备基于投屏数据显示帧率,显示镜像投屏数据。显示设备可以根据终端设备画面中是否包含弹幕,设置不同的显示帧率,从而缓解弹幕抖动的问题,提高用户的观看体验。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1示出了根据一些实施例的显示设备的使用场景;
图2示出了根据一些实施例的控制装置100的硬件配置框图;
图3示出了根据一些实施例的显示设备200的硬件配置框图;
图4示出了根据一些实施例的显示设备200中软件配置图;
图5示出了一些实施例中用户界面的示意图;
图6示出了一些实施例中应用面板的示意图;
图7示出了一些实施例中投屏连接提示界面的示意图;
图8示出了一些实施例中媒资播放界面的示意图;
图9示出了一些实施例中投屏设备界面的示意图;
图10示出了一些实施例中终端设备的用户界面示意图;
图11示出了一些实施例中投屏弹幕适应模式确认信息的示意图;
图12示出了一些实施例中显示设备各部件的交互流程图;
图13示出了一些实施例中投屏控制模式设置界面的示意图;
图14示出了一些实施例中投屏模式界面的示意图。
具体实施方式
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请实施方式提供的显示设备可以具有多种实施形式,例如,可以是电视、智能电视、激光投影设备、显示器(monitor)、电子白板(electronic bulletin board)、电子桌面(electronic table)等。图1和图2为本申请的显示设备的一种具体实施方式。
图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过智能设备300或控制装置100操作显示设备200。
在一些实施例中,控制装置100可以是遥控器,遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信,及其他短距离通信方式,通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。
在一些实施例中,也可以使用智能设备300(如移动终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。
在一些实施例中,显示设备可以不使用上述的智能设备或控制设备接收指令,而是通过触摸或者手势等接收用户的控制。
在一些实施例中,显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制,例如,可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制,也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。
在一些实施例中,显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。
图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。
如图3,显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
在一些实施例中控制器包括处理器,视频处理器,音频处理器,图形处理器,RAM,ROM,用于输入/输出的第一接口至第n接口。
显示器260包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件,用于接收源自控制器输出的图像信号,进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。
显示器260可为液晶显示器、OLED显示器、以及投影显示器,还可以为一种投影装置和投影屏幕。
通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如:通信器可以包括Wifi模块,蓝牙模块,有线以太网模块等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。
用户接口,可用于接收控制装置100(如:红外遥控器等)的控制信号。
检测器230用于采集外部环境或与外部交互的信号。例如,检测器230包括光接收器,用于采集环境光线强度的传感器;或者,检测器230包括图像采集器,如摄像头,可以用于采集外部环境场景、用户的属性或用户交互手势,再或者,检测器230包括声音采集器,如麦克风等,用于接收外部声音。
外部装置接口240可以包括但不限于如下:高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。
调谐解调器210通过有线或无线接收方式接收广播电视信号,以及从多个无线或有线广播电视信号中解调出音视频信号,如以及EPG数据信号。
在一些实施例中,控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。
控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器260上显示UI对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中控制器包括中央处理器(Central Processing Unit,CPU),视频处理器,音频处理器,图形处理器(Graphics Processing Unit,GPU),RAM(Random AccessMemory,RAM),ROM(Read-Only Memory,ROM),用于输入/输出的第一接口至第n接口,通信总线(Bus)等中的至少一种。
用户可在显示器260上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
如图4所示,将显示设备的系统分为三层,从上至下分别为应用层、中间件层和硬件层。
应用层主要包含电视上的常用应用,以及应用框架(Application Framework),其中,常用应用主要是基于浏览器Browser开发的应用,例如:HTML5 APPs;以及原生应用(Native APPs);
应用框架(Application Framework)是一个完整的程序模型,具备标准应用软件所需的一切基本功能,例如:文件存取、资料交换...,以及这些功能的使用接口(工具栏、状态列、菜单、对话框)。
原生应用(Native APPs)可以支持在线或离线,消息推送或本地资源访问。
中间件层包括各种电视协议、多媒体协议以及系统组件等中间件。中间件可以使用系统软件所提供的基础服务(功能),衔接网络上应用系统的各个部分或不同的应用,能够达到资源共享、功能共享的目的。
硬件层主要包括HAL接口、硬件以及驱动,其中,HAL接口为所有电视芯片对接的统一接口,具体逻辑由各个芯片来实现。驱动主要包含:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器,温度传感器,压力传感器等)、以及电源驱动等。
本申请一些实施例中,显示器260中可以显示用户界面。用户界面中可以是具体的目标图像,例如从网络信号源中获取到的各种媒资,包括视频、图片等内容。用户界面也可以是显示设备的一些UI界面,例如系统推荐页等。
显示设备可以具有多种功能,例如浏览网页、播放媒资、娱乐游戏、投屏等功能,从而向用户提供多种多样的服务。用户可以控制显示设备启动某个相关的应用程序,从而开启相应的功能。
在一些实施例中,当用户控制显示设备开机后,控制器250可以控制显示器260显示用户界面。图5示出了一些实施例中用户界面的示意图。如图5所示,用户界面包括第一导航栏500、第二导航栏510、功能栏520和内容显示区530,功能栏520包括多个功能控件如“观看记录”、“我的收藏”和“我的应用”等。其中,内容显示区530中显示的内容会随第一导航栏500和第二导航栏510中被选中控件的变化而变化。在应用面板页面时,用户可以通过点击“我的应用”控件,以输入针对应用面板页面的显示指令,来触发进入对应的应用面板。需要说明的是,用户也可以通过其他方式来输入对功能控件的选中操作,以触发进入应用面板。例如,利用语音控制功能或者搜索功能等,控制进入到应用面板页面。
用户可以通过应用面板查看到显示设备已经安装的应用程序,即显示设备所支持的功能。用户可以选择其中一个应用程序并进行打开,以实现该应用的功能。需要说明的是,显示设备安装的应用可以是系统应用,也可以是第三方应用。用户通过开启某个应用程序,从而控制显示设备实现该应用程序相应的功能。图6示出了一些实施例中应用面板的示意图。如图6所示,应用面板中包括“播放器”、“有线电视”以及“投屏”三个控件。其中,用户可以通过点击“播放器”控件,从而控制显示设备打开播放器应用。用户可以在播放器中进行相应操作,例如搜索媒资等。用户可以点击“有线电视”控件,从而利用显示设备观看一些媒资频道,包括由有线电视供应商提供的各种媒资节目。用户可以点击“投屏”控件,从而利用显示设备和终端设备进行投屏。
在一些实施例中,用户可以控制显示设备和终端设备进行投屏连接。当用户点击图6所示的应用面板中的“投屏”控件后,控制器可以控制显示器显示投屏连接提示界面。图7示出了一些实施例中投屏连接提示界面的示意图。如图7所示,投屏连接提示界面中可以包括投屏连接提示信息和投屏连接控件。其中,投屏连接提示信息可以是文本“请使用手机扫码连接”,投屏连接控件可以是用于连接显示设备的二维码。
用户可以使用终端设备,例如手机,扫描投屏连接提示界面中的二维码,从而建立终端设备和显示设备的通信连接。此时,用户可以将终端设备中的内容投屏至显示设备进行显示。
在一些实施例中,用户也可以控制终端设备和显示设备进行投屏连接。用户可以直接控制终端设备,将目标内容发送至显示设备,以控制显示设备进行投屏。
需要说明的是,显示设备和投屏设备进行投屏过程是,可以包括媒资投屏和镜像投屏。其中,媒资投屏指的是将终端设备正在播放的网络媒资推送至显示设备进行播放。镜像投屏指的是将终端设备屏幕中显示的内容实时推送至显示设备进行播放。
对于媒资投屏过程,需要终端设备和显示设备连接到同一个网络下,从而进行投屏。在使用终端设备进行投屏时,用户可以先使用终端设备播放网络媒资,例如通过播放器应用程序或者浏览器搜索网络媒资以进行观看。图8示出了一些实施例中媒资播放界面的示意图。如图8所示,用户使用终端设备播放网络媒资时,媒资播放界面包括播放区域和功能区域。播放区域中可以显示网络媒资,功能区域中包括网络媒资的媒资信息以及功能控件,例如投屏控件。当用户点击投屏控件后,终端设备可以将网络媒资投屏到显示设备中进行显示。
考虑到当前网络中,可能连接有多个显示设备可供终端设备进行投屏控制。当用户点击投屏控件后,终端设备可以显示投屏设备界面,以供用户选择待控制的投屏设备。图9示出了一些实施例中投屏设备界面的示意图。如图9所示,投屏设备界面中显示有可以选择的投屏设备对应的设备控件,可以包括投屏设备A对应的设备控件901、投屏设备B对应的设备控件902和投屏设备C对应的设备控件903。用户可以点击希望显示终端设备的投屏内容的设备控件,例如,用户可以点击设备控件901。当用户触碰某一设备控件后,终端设备可以确定该设备控件对应的投屏设备,并对该投屏设备进行投屏控制,以使该投屏设备显示网络媒资。
对于网络媒资的投屏,终端设备可以获取当前播放的网络媒资的播放地址,可以是获取网络媒资的统一资源定位符(Uniform Resource Locator,URL),统一资源定位符是可以从互联网上得到的资源的位置和访问方法的一种简洁的表示,是互联网上标准资源的地址。终端设备可以将统一资源定位符发送至显示设备,显示设备可以通过该统一资源定位符访问互联网中相应的网址,从而获取到网络媒资并进行显示。
对于镜像投屏过程,是指实时地将终端设备屏幕内容投屏到显示设备,即终端设备中显示什么内容,便控制显示设备中显示什么内容。因此,终端设备可以实时将自身显示的内容发送至显示设备,以使显示设备进行显示。终端设备中可以安装有录屏应用程序,录屏应用程序通过对终端设备显示的内容实时进行录屏,得到录屏数据,并可以将录屏数据传输至显示设备,控制显示设备播放录屏数据,从而实现镜像投屏过程。
终端设备中可以安装有镜像投屏应用程序,用户可以通过镜像投屏应用程序,控制终端设备和显示设备之间的镜像投屏过程。图10示出了一些实施例中终端设备的用户界面示意图。如图10所示,终端设备的用户界面中包括若干个控件,每个控件表征一种应用程序。其中,控件1001为镜像投屏控件。当用户点击该控件后,终端设备启动镜像投屏应用程序。考虑到存在多个显示设备可供终端设备进行投屏控制,终端设备可以显示如图9所示的投屏设备界面,以供用户选择投屏设备进行镜像投屏。
在一些实施例中,在进行镜像投屏时,需要终端设备实时进行录屏,本申请实施例中将终端设备录屏产生的数据称为镜像投屏数据,终端设备可以将镜像投屏数据发送至显示设备。因此,显示设备和终端设备之间会建立通信连接。
显示设备中包括通信器,通信器可以使显示设备能够和其他的电子设备进行通信连接,实现数据交互等操作。通信器中可以包括蓝牙模块,用于控制显示设备开启和关闭蓝牙功能。通信器中还可以包括用于WiFi连接的Wifi模块和接收红外信号的红外接收模块等。基于通信器,显示设备可以和终端设备进行多种形式的通信连接,包括蓝牙通信连接、红外连接和WiFi连接等。
基于通信器,显示设备与终端设备可以通过网络协议建立连接,可以是通过蓝牙A2DP(Advanced Audio Distribution Profile,蓝牙音频传输模型协定)协议与终端设备进行连接。
用户指示终端设备进行镜像投屏后,终端设备可以生成镜像投屏指令并发送至显示设备。响应于该指令,显示设备可以和终端设备建立通信连接。建立连接后,终端设备可以实时录屏,得到镜像投屏数据并传输至显示设备。控制器可以控制显示器显示镜像投屏数据,实现镜像投屏。
在一些实施例中,终端设备和显示设备均可下载同一投屏应用,终端设备和显示设备基于投屏应用建立连接关系,终端设备通过投屏应用向显示设备发送镜像投屏数据。在终端设备的投屏应用中,可以设置“开始投屏”控件,在终端设备接收到用户对“开始投屏”控件的点击时,触发录制屏幕功能,在实时录制屏幕的同时,将镜像投屏数据传输至显示设备。
在一些实施例中,终端设备在对显示的内容进行录屏时,会以一个固定帧率生成镜像投屏数据,例如30帧,即终端设备生成的录屏画面为30帧的视频流数据。终端设备将镜像投屏数据发送至显示设备后,显示设备可以按照镜像投屏数据的帧率进行显示,即显示设备显示30帧的投屏画面。
需要说明的是,由于镜像投屏数据为终端设备实时显示的屏幕画面,因此可能会对应多种播放场景,例如媒资播放场景、游戏场景以及终端设备UI界面场景等。对于游戏场景,可能期望显示设备能够实时显示投屏数据,已达到低延时的效果。但对于一些媒资播放场景,可能希望显示设备能够展示出高画质的画面,以提高用户的观看体验。
例如,对于终端设备播放的媒资,可能带有弹幕文本,包括直播视频以及一些短视频,用户可以在观看视频时发送一些文本,这些文本会以弹幕的形式在视频画面中滚动播放。显示设备设备在显示这种携带有弹幕的投屏画面时,如果按照镜像投屏数据的帧率进行播放,可能由于帧率较低,导致弹幕文本出现抖动,从而使得显示的画面效果较差,严重影响用户的使用体验。
为此,显示设备可以具有投屏弹幕适应功能。显示设备可以自适应终端设备发送的不同镜像投屏数据,使用不同的帧率显示投屏画面,以缓解弹幕抖动的问题。显示设备接收到镜像投屏数据后,可以检测是否包含弹幕文本,从而设定显示设备显示画面的帧率,例如将携带弹幕的画面帧率设置的较高,从而使得弹幕稳定,提高画面效果。为此,显示设备可以设置有投屏弹幕适应模式。当显示设备进入投屏弹幕适应模式时,显示设备可以开启投屏弹幕适应功能,以调节显示设备显示画面的帧率。
在一些实施例中,用户可以通过操作遥控器的指定按键,向显示设备发送投屏弹幕适应模式指令。在实际应用的过程中预先绑定投屏弹幕适应模式指令与遥控器按键之间的对应关系。例如,在遥控器上设置一个投屏弹幕适应模式按键,当用户触控该按键时,遥控器发送投屏弹幕适应模式指令至控制器250,此时控制器250控制显示设备进入投屏弹幕适应模式。当用户再次触控该按键时,控制器250可以控制显示设备退出投屏弹幕适应模式。
在一些实施例中,用户可以使用显示设备的声音采集器,例如麦克风,通过语音输入的方式,向显示设备发送投屏弹幕适应模式指令,以控制显示设备进入投屏弹幕适应模式。显示设备中可以设置有智能语音系统,智能语音系统可以对用户的语音进行识别,以提取用户输入的指令内容。
在一些实施例中,当用户使用智能设备控制显示设备时,例如使用手机时,也可以向显示设备发送投屏弹幕适应模式指令。在实际应用的过程中可以在手机中设置一个控件,可以通过该控件选择是否进入投屏弹幕适应模式,从而发送投屏弹幕适应模式指令至控制器250,此时控制器250可以控制显示设备进入投屏弹幕适应模式。
还可以在显示设备的UI界面中设置投屏弹幕适应模式选项,当用户点击该选项时,可以控制显示设备进入或退出投屏弹幕适应模式。
在一些实施例中,为防止用户误触发投屏弹幕适应模式,当控制器250接收到投屏弹幕适应模式指令时,可以控制显示器260显示投屏弹幕适应模式确认信息,从而使得用户进行二次确认,是否要控制显示设备进入投屏弹幕适应模式。图11示出了一些实施例中投屏弹幕适应模式确认信息的示意图。
图12示出了一些实施例中显示设备各部件的交互流程图,包括以下步骤:
S101、响应于终端设备发送的镜像投屏数据,基于所述镜像投屏数据获取弹幕状态。
S102、基于所述弹幕状态设置显示设备的投屏模式。
S103、如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于所述镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为所述第二帧率。
S104、基于所述投屏数据显示帧率,控制所述显示器显示所述镜像投屏数据。
在一些实施例中,用户可以使用终端设备控制显示设备进行镜像投屏过程。终端设备可以实时录制显示画面,生成镜像投屏数据。同时,终端设备可以生成镜像投屏指令,并将镜像投屏数据和镜像投屏指令一同发送至显示设备。
接收到镜像投屏指令时,显示设备可以准备进行镜像投屏过程。显示设备可以对镜像投屏数据进行处理,以显示投屏画面。
在一些实施例中,在接收到终端设备发送的镜像投屏数据后,控制器可以基于镜像投屏数据获取弹幕状态,以确定终端设备中显示的画面,即显示设备中待显示的画面中是否存在弹幕文本。本申请实施例中,弹幕状态用于表征画面中是否存在弹幕的状态情况。如果画面中包含弹幕文本,则此时的弹幕状态称为第一状态,如果画面中不包含弹幕文本,则此时的弹幕状态称为第二状态。
控制器可以根据不同的弹幕状态进行不同的投屏处理,以展示不同的图像效果。
在一些实施例中,在获取弹幕状态时,考虑到镜像投屏数据是终端设备进行录屏生成的数据,即使存在弹幕文本,弹幕也是作为图像的一部分,即弹幕文本可能存在于视频数据中,而不是单独的文本数据。可以令显示设备先显示当前的镜像投屏数据,从而根据显示器中的显示画面以确定是否包含弹幕。
控制器可以先对镜像投屏数据进行解码,得到初始视频数据。控制器可以控制显示器显示初始视频数据,使得显示器中显示终端设备录制的画面,以确定是否包含弹幕文本。
控制器可以对显示器显示的初始画面进行截图处理,得到初始镜像投屏图像。控制器可以对初始镜像投屏图像进行弹幕识别处理,以识别图像中是否包含弹幕。
在识别弹幕时,控制器可以先对初始镜像投屏图像进行文本检测,以确定初始镜像投屏图像中是否包含文本。
控制器在对图像进行文本检测时,可以利用OCR(Optical CharacterRecognition,光学字符识别)技术对图像进行检测,从而在图像中生成文本检测框,以确定截图图像中包含的文本区域。例如,控制器可以利用OCR文字模型对图像进行文本检测,可以得到相应的若干个文本检测框。其中,OCR方法可以通过检测暗、亮的模式确定文本区域的形状,然后生成相应的文本检测框。
由于终端设备可能处于媒资播放的场景,导致画面中存在媒资对应的字幕,因此文本检测得到的文本区域中可能是弹幕文本,也可能是字幕文本。
考虑到媒资的字幕文本会处于画面的最下方,因此可以通过文本检测得到的文本区域的位置确定文本的类型。在进行文本检测时,可以一并获取到每个文本区域的位置信息。可以预先设定为:显示器画面的截图图像中,第一区域中包含的文本为弹幕文本,第二区域中包含的文本为字幕文本。其中,由于字幕处于画面最下方,因此可以将图像最下方的五分之一区域作为第二区域。弹幕可以在画面中滚动显示,可以处于图像的上半部分,也可以处于图像的中间部分,可以将图像上方的三分之二区域作为第一区域。需要说明的是,本申请实施例中的第一区域和第二区域仅仅作为示例说明,并不限定具体的范围,可根据需要改变第一区域和第二区域的设定范围。
控制器可以检测文本区域处于第一区域或第二区域中。如果存在文本区域处于第一区域,则说明该文本区域对应的文本是弹幕文本,即初始镜像投屏图像中包含弹幕。如果所有的文本区域都处于第二区域,则说明初始镜像投屏图像中不包含弹幕。
在确定初始镜像投屏图像中的弹幕情况后,如果初始镜像投屏图像中包括弹幕,则将弹幕状态确定为第一状态;如果初始镜像投屏图像中不包括弹幕,则将弹幕状态确定为第二状态。
在一些实施例中,控制器可以基于弹幕状态设置显示设备的投屏模式。
本申请实施例中设定显示设备可以包含两种投屏模式:处理有弹幕图像的投屏模式,也称为第一投屏模式;处理无弹幕图像的投屏模式,也称为第二投屏模式。
两种投屏模式下,控制器可以进行不同的投屏处理过程。其中,对于有弹幕图像,由于存在弹幕,为避免造成弹幕抖动的情况,可以将显示设备的显示帧率设置的较高一些,以实现高画质的效果,提高用户的观看体验。对于无弹幕图像,不需要考虑弹幕抖动问题,可以令画面尽可能实时显示,缓解卡顿,实现低延时的效果,以提高用户的观看体验。
控制器可以根据弹幕状态,设置显示设备的投屏模式。
如果弹幕状态为第一状态,则将显示设备的投屏模式设置为第一投屏模式;如果弹幕状态为第二状态,则将显示设备的投屏模式设置为第二投屏模式。
不同的投屏模式,控制器可以进行不同的处理。
在一些实施例中,当显示设备处于第一投屏模式下,则控制器需要考虑弹幕抖动的情况。
由于镜像投屏过程中,终端设备是以录屏的形式生成投屏数据,会以一个较低的帧率生成数据,例如生成30帧的镜像投屏数据。这种数据的帧率较低,如果显示设备直接显示,由于弹幕文本会在画面中进行滚动,便可能出现弹幕抖动的情况。因此,可以预先设置一个较高的帧率,例如将显示设备的显示帧率设置为60帧。当接收到终端设备的镜像投屏数据时,可以按照显示设备当前的显示帧率对图片数据进行处理,使得显示设备显示较高帧率的画面,不受投屏数据本身的低帧率影响,从而提高高质,保证弹幕不会出现抖动的情况。
因此,如果显示设备处于第一投屏模式,控制器可以将显示设备的投屏数据显示帧率设置为预设的第一帧率,第一帧率可以是60帧。
在一些实施例中,当显示设备处于第二投屏模式下,控制器不需要考虑弹幕抖动的情况。此时,可以令投屏画面尽可能实时显示,实现低延时效果。可以令显示设备按照镜像投屏数据的帧率进行显示。
如果显示设备处于第二投屏模式,则控制器可以基于镜像投屏数据获取镜像投屏数据的帧率,本申请实施例中称为第二帧率。
同时,控制器可以将显示设备的投屏数据显示帧率设置为第二帧率。
对于终端设备发送的镜像投屏数据,控制器可以获取其帧率。例如,控制器可以获取两帧相邻的镜像投屏数据的时间戳,并根据两个时间戳做差,差值即为每帧数据的显示时长。根据每帧数据的显示时长可以得到镜像投屏数据的帧率。例如,每一帧数据的显示时长为50毫秒,则镜像投屏数据的帧率即为每秒20帧。
在一些实施例中,每种投屏模式会设置各自的投屏数据显示帧率。控制器可以基于投屏数据显示帧率,控制显示器显示镜像投屏数据。其中,对于不同的投屏模式,显示投屏数据的过程也并不相同。
对于第一投屏模式,显示设备可以按照预设的第一帧率显示画面。考虑到镜像投屏数据的帧率较低,而第一帧率较高,导致一帧镜像投屏数据初始设定的显示时长大于显示设备中一帧画面的实际显示时长。因此,如果按照第一帧率依次显示每一帧镜像投屏数据,可能导致镜像投屏数据出现不够用的情况,即显示器显示完一帧镜像投屏数据后,显示设备还无法显示下一帧镜像投屏数据,使得画面出现卡顿的情况,影响用户的观看体验。为此,控制器可以对镜像投屏数据进行预设的插帧处理,使得显示设备可以按照第一帧率连续播放画面,而不会出现卡顿情况。
在控制显示器显示镜像投屏数据时,控制器可以先基于投屏数据显示帧率获取视频数据显示时间。例如,当投屏数据显示帧率为60帧时,每一帧画面的显示时长为1/60秒。
控制器可以对镜像投屏数据进行解码。需要说明的是,终端设备在进行录屏的过程中,会逐帧发送镜像投屏数据,终端设备生成一帧镜像投屏数据后,即可将该帧数据发送至显示设备。控制器可以对镜像投屏数据实时进行解码,即当显示设备接收到一帧镜像投屏数据后,即可对这一帧镜像投屏数据进行解码。
镜像投屏数据中可以包含视频数据和音频数据,在对镜像投屏数据进行解码后,控制器可以控制显示器显示解码后得到的视频数据。本申请实施例中,可以设定为:当控制器解码前两帧镜像投屏数据,得到前两帧视频数据后,控制器控制显示器开始显示第一帧视频数据。
需要说明的是,显示器中显示每一帧视频数据的时长是相同的,均为前述获取的视频数据显示时间。同时,显示器在显示镜像投屏数据时会按照镜像投屏数据的顺序显示,不会出现跳帧显示的情况。因此,控制器在控制显示器显示视频数据时,会在显示器将这一帧视频数据显示完毕后,即显示器显示这一帧视频数据的时长达到视频数据显示时间时,再去显示下一帧视频数据。
本申请实施例将显示设备中正在进行解码过程的一帧镜像投屏数据称为解码帧镜像投屏数据。控制器可以根据解码帧镜像投屏数据的解码状态,即解码帧镜像投屏数据是否解码完成,来控制视频数据的显示过程。
对于解码帧帧镜像投屏数据,如果解码帧镜像投屏数据已经完成解码,则说明该帧解码帧镜像投屏数据已经解码得到了新的视频数据,本申请实施例中称为解码帧视频数据。此时,解码帧视频数据是可用状态,即显示器能够显示解码帧视频数据。因此,当前可显示的视频数据处于足够用的状态,控制器可以不对镜像投屏数据进行插帧处理。
控制器可以基于解码帧视频数据更新预设的缓存区域中的缓存帧视频数据。其中,显示设备预先设置有一块缓存区域,该缓存区域中可以存储数据,例如存储解码后的视频数据等。本申请实施例中将待显示的视频数据存储在缓存区域中,缓存区域中存储的视频数据称为缓存帧视频数据。
在更新缓存帧视频数据时,控制器可以先获取在缓存区域中,显示器已经显示完毕的历史视频数据。本申请实施例中,显示完毕指的是显示时长达到视频数据显示时间。
控制器可以将历史视频数据从预设的缓存区域中删除,并将解码帧视频数据存储至预设的缓存区域中,实现对缓存帧视频数据的更新。例如,缓存区域中存储有第一帧视频数据和第二帧视频数据,此时第三帧镜像投屏数据解码完毕,得到第三帧视频数据,控制器可以检测第一帧视频数据和第二帧视频数据是否显示完毕。假设第一帧视频数据显示完毕,第二帧视频数据还未显示完毕,控制器可以将第一帧视频数据删除,并添加第三帧视频数据至缓存区域中。此时,缓存区域中包括第二帧视频数据和第三帧视频数据。
控制器可以基于视频数据显示时间,控制显示器显示缓存帧视频数据。每一帧缓存帧视频数据的显示时长均为视频数据显示时间。即控制器可以控制显示器,按照缓存帧视频数据的顺序依次显示每一帧视频数据。
在一些实施例中,如果解码帧镜像投屏数据没有完成解码,什么该帧解码帧镜像投屏数据对应的解码帧视频数据还未获取到,即解码帧视频数据处于不可用状态,显示器不能够显示解码帧视频数据。因此,当前可显示的视频数据可能处于不足够用的状态,此时控制器可以对镜像投屏数据进行插帧处理。
控制器可以基于缓存帧视频数据获取中间帧视频数据。中间帧视频数据可以认为是两帧缓存帧视频数据的平均数据。控制器可以获取两帧缓存帧视频数据的每个像素点的像素值。以视频数据的分辨率为1920×1080为例,表示视频数据横向存在1920列像素点,纵向存在1080行像素点。同时,两帧缓存帧视频数据的像素点数量一致,每个像素点存在对应关系,即1920×1080组像素点。对于每组像素点,控制器可以获取像素点的像素值平均值,作为中间像素点的像素值。控制器可以获取到1920×1080个中间像素点,从而生成中间帧视频数据。中间帧视频数据即为两帧缓存帧视频数据的插帧处理结果。
控制器可以基于视频数据显示时间,控制显示器显示中间帧视频数据和缓存帧视频数据。其中,中间帧视频数据的显示顺序处于两帧缓存帧视频数据之间。即显示器按照:第一帧缓存帧视频数据-中间帧视频数据-第二帧缓存帧视频数据的顺序,依次显示。
需要说明的是,中间帧视频数据需要由两帧缓存帧视频数据得到,为了获取到中间帧视频数据,可以令缓存区域中存在两帧缓存帧视频数据。
为此,控制器解码前两帧镜像投屏数据,得到前两帧视频数据后,可以将这两帧视频数据存储至缓存区域中,再控制显示器开始显示第一帧视频数据。此时,控制器可以显示解码帧视频数据。第三帧镜像投屏数据即为解码帧镜像投屏数据。由于解码帧镜像投屏数据刚开始进行解码,还未解码完成,因此控制器可以根据前两帧视频数据生成中间帧视频数据,并控制显示器依次显示第一帧视频数据、中间帧视频数据和第二帧视频数据。
在一些实施例中,当显示设备处于第二投屏模式,显示设备会将显示帧率设置为镜像投屏数据的帧率,即第二帧率。此时,显示设备会实时显示终端设备发送的镜像投屏数据。
控制器可以基于投屏数据显示帧率获取视频数据显示时间,投屏数据显示帧率即为第二帧率。
控制器可以对镜像投屏数据进行解码。终端设备会逐帧发送镜像投屏数据,每接收到终端设备发送的一帧镜像投屏数据,控制器便可以进行解码并控制显示器显示。
本申请实施例中将终端设备发送的最新一帧镜像投屏数据称为当前帧镜像投屏数据。在接收到终端设备发送的当前帧镜像投屏数据后,控制器可以对当前帧镜像投屏数据进行解码,得到当前帧视频数据。
控制器可以基于视频数据显示时间,控制显示器显示当前帧视频数据,即当前帧视频数据的显示时长为视频数据显示时间。
在一些实施例中,考虑到在镜像投屏过程中,用户可能控制终端设备跳转到不同的场景。例如,用户先使用终端设备打游戏,此时终端设备的画面中不存在弹幕文本,弹幕状态为第二状态。显示设备为显示游戏画面,可设置投屏模式为第二投屏模式。
用户可以控制终端设备切换播放直播视频,直播视频中存在弹幕文本。即终端设备显示的画面从无弹幕变为有弹幕,导致镜像投屏数据的弹幕状态从第二状态变为第一状态。如果继续使用第二投屏模式,会出现弹幕抖动的情况。
因此,控制器可以实时检测终端设备画面的弹幕情况,以实时更新显示设备的投屏模式。
控制器可以基于预设周期对显示器显示的画面进行截图处理,得到目标镜像投屏图像。预设周期可以是30秒。
控制器可以对目标镜像投屏图像进行弹幕识别处理,得到弹幕识别结果。控制器基于弹幕识别结果可以更新镜像投屏数据对应的弹幕状态。
基于更新后的弹幕状态,控制器可以重新设置显示设备的投屏模式。因此,显示设备每隔30秒可以重新设置投屏模式,以适应终端设备画面,缓解弹幕抖动问题。
在一些实施例中,当终端设备和显示设备刚开始进行镜像投屏时,控制器可以将显示设备的投屏模式默认设置为一种投屏模式。例如,可以默认设置为第二投屏模式,以使得显示设备快速响应投屏过程。在显示画面后,控制器可以检测弹幕状态,以实时调节投屏模式。
在一些实施例中,在进行镜像投屏过程时,显示设备能够自行设置投屏模式,也可以是有用户手动设置投屏模式。为此,显示设备中设置有不同的投屏控制模式。
投屏控制模式可以包括自动控制模式和手动控制模式。显示设备处于自动控制模式时,控制器可以实时检测弹幕状态,从而实时设置显示设备的投屏模式。显示设备处于手动控制模式时,则根据用户的指令设置显示设备的投屏模式。
用户可以自行设置显示设备的投屏控制模式。
用户可以向显示设备输入指示查询投屏控制模式的指令,控制器可以控制显示器显示投屏控制模式设置界面。图13示出了一些实施例中投屏控制模式设置界面的示意图。如图13所示,投屏控制模式设置界面中包括自动控制模式控件和手动控制模式控件。
响应于用户对自动控制模式控件的选中操作,显示设备可以自行调节投屏模式。控制器可以根据镜像投屏数据获取弹幕状态,以设置显示设备的投屏模式。
响应于用户对手动控制模式控件的选中操作,控制器可以按照用户设置的投屏模式设置显示设备的投屏模式。
在一些实施例中,当用户控制显示设备进入手动控制模式后,用户可以自行设置显示设备的投屏模式。
当终端设备发起镜像投屏过程时,控制器可以先默认设置显示设备的投屏模式。
控制器可以获取用户设置的历史投屏模式。
控制器可以将历史投屏模式设置为显示设备当前的投屏模式。
用户可以随时查看显示设备当前的投屏模式并进行修改。
响应于用户输入的指示查询投屏模式的指令,控制器可以控制显示器显示投屏模式界面。图14示出了一些实施例中投屏模式界面的示意图。如图14所示,投屏模式界面中包括第一投屏模式控件和第二投屏模式控件。
响应于用户对第一投屏模式控件的选中操作,控制器可以将显示设备的投屏模式设置为第一投屏模式。响应于用户对第二投屏模式控件的选中操作,控制器可以将显示设备的投屏模式设置为第二投屏模式。
本申请实施例还提供了一种镜像投屏数据显示方法,该方法包括:
步骤1501、响应于终端设备发送的镜像投屏数据,基于镜像投屏数据获取弹幕状态;
步骤1502、基于弹幕状态设置显示设备的投屏模式;
步骤1503、如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为第二帧率;
步骤1504、基于投屏数据显示帧率,控制显示器显示镜像投屏数据。
在一些实施例中,基于镜像投屏数据获取弹幕状态,还包括:
对镜像投屏数据进行解码,得到初始视频数据,并控制显示器显示初始视频数据。在显示器显示的初始画面截图,得到初始镜像投屏图像。对初始镜像投屏图像进行弹幕识别处理。
如果初始镜像投屏图像中包括弹幕,则将弹幕状态确定为第一状态;如果初始镜像投屏图像中不包括弹幕,则将弹幕状态确定为第二状态。
在一些实施例中,基于弹幕状态设置显示设备的投屏模式,还包括:
如果弹幕状态为第一状态,则将显示设备的投屏模式设置为第一投屏模式;如果弹幕状态为第二状态,则将显示设备的投屏模式设置为第二投屏模式。
在一些实施例中,在显示设备处于第一投屏模式时,基于投屏数据显示帧率,控制显示器显示镜像投屏数据,还包括:
基于投屏数据显示帧率获取视频数据显示时间,对镜像投屏数据进行解码。
如果解码帧镜像投屏数据已经完成解码,基于解码帧视频数据更新预设的缓存区域中的缓存帧视频数据;基于视频数据显示时间,控制显示器显示缓存帧视频数据;解码帧镜像投屏数据为显示设备中正在进行解码的一帧镜像投屏数据,解码帧视频数据为对解码帧镜像投屏数据进行解码后得到的视频数据。
如果解码帧镜像投屏数据没有完成解码,则基于缓存帧视频数据获取中间帧视频数据,并基于视频数据显示时间,控制显示器显示中间帧视频数据和缓存帧视频数据。
在一些实施例中,在显示设备处于第二投屏模式时,基于投屏数据显示帧率,控制显示器显示镜像投屏数据,还包括:
基于投屏数据显示帧率获取视频数据显示时间。对终端设备发送的当前帧镜像投屏数据进行解码,得到当前帧视频数据。基于视频数据显示时间,控制显示器显示当前帧视频数据。
在一些实施例中,基于解码帧视频数据更新预设的缓存区域中的缓存帧视频数据,还包括:
获取缓存区域中,显示器已经显示完毕的历史视频数据。将历史视频数据从预设的缓存区域中删除,并将解码帧视频数据存储至预设的缓存区域中。
在一些实施例中,控制显示器显示镜像投屏数据后,还包括:
基于预设周期在显示器显示的画面截图,得到目标镜像投屏图像。识别目标镜像投屏图像中的弹幕,得到弹幕识别结果,并基于弹幕识别结果更新弹幕状态。基于更新后的弹幕状态,执行基于弹幕状态设置显示设备的投屏模式的步骤。
在一些实施例中,还包括:
响应于用户输入的指示查询投屏控制模式的指令,控制显示器显示投屏控制模式设置界面,投屏控制模式设置界面中包括自动控制模式控件和手动控制模式控件。
响应于用户对自动控制模式控件的选中操作,执行基于镜像投屏数据获取弹幕状态的步骤。响应于用户对手动控制模式控件的选中操作,按照用户设置的投屏模式设置显示设备的投屏模式。
在一些实施例中,获取用户设置的投屏模式,还包括:
获取用户设置的历史投屏模式。根据历史投屏模式设置显示设备的投屏模式;
响应于用户输入的指示查询投屏模式的指令,控制显示器显示投屏模式界面,投屏模式界面中包括第一投屏模式控件和第二投屏模式控件。
响应于用户对第一投屏模式控件的选中操作,将显示设备的投屏模式设置为第一投屏模式。响应于用户对第二投屏模式控件的选中操作,将显示设备的投屏模式设置为第二投屏模式。
本说明书中各个实施例之间相同相似的部分互相参照即可,在此不再赘述。
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分的方法。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种显示设备,其特征在于,包括:
显示器;
通信器,被配置为接收终端设备发送的数据;
控制器,被配置为:
响应于终端设备发送的镜像投屏数据,基于所述镜像投屏数据获取弹幕状态;
基于所述弹幕状态设置显示设备的投屏模式;
如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于所述镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为所述第二帧率;
基于所述投屏数据显示帧率,控制所述显示器显示所述镜像投屏数据。
2.根据权利要求1所述的显示设备,其特征在于,所述控制器执行基于所述镜像投屏数据获取弹幕状态,还被配置为:
对所述镜像投屏数据进行解码,得到初始视频数据,并控制所述显示器显示所述初始视频数据;
在所述显示器显示的初始画面截图,得到初始镜像投屏图像;
对所述初始镜像投屏图像进行弹幕识别处理;
如果所述初始镜像投屏图像中包括弹幕,则将弹幕状态确定为第一状态;如果所述初始镜像投屏图像中不包括弹幕,则将弹幕状态确定为第二状态。
3.根据权利要求2所述的显示设备,其特征在于,所述控制器执行基于所述弹幕状态设置显示设备的投屏模式,还被配置为:
如果所述弹幕状态为第一状态,则将显示设备的投屏模式设置为第一投屏模式;
如果所述弹幕状态为第二状态,则将显示设备的投屏模式设置为第二投屏模式。
4.根据权利要求1所述的显示设备,其特征在于,在显示设备处于第一投屏模式时,所述控制器执行基于所述投屏数据显示帧率,控制所述显示器显示所述镜像投屏数据,还被配置为:
基于所述投屏数据显示帧率获取视频数据显示时间;
对所述镜像投屏数据进行解码;
如果解码帧镜像投屏数据已经完成解码,基于解码帧视频数据更新预设的缓存区域中的缓存帧视频数据;基于所述视频数据显示时间,控制所述显示器显示所述缓存帧视频数据;所述解码帧镜像投屏数据为显示设备中正在进行解码的一帧镜像投屏数据,所述解码帧视频数据为对所述解码帧镜像投屏数据进行解码后得到的视频数据;
如果解码帧镜像投屏数据没有完成解码,则基于所述缓存帧视频数据获取中间帧视频数据,并基于所述视频数据显示时间,控制所述显示器显示所述中间帧视频数据和所述缓存帧视频数据。
5.根据权利要求1所述的显示设备,其特征在于,在显示设备处于第二投屏模式时,所述控制器执行基于所述投屏数据显示帧率,控制所述显示器显示所述镜像投屏数据,还被配置为:
基于所述投屏数据显示帧率获取视频数据显示时间;
对所述终端设备发送的当前帧镜像投屏数据进行解码,得到当前帧视频数据;
基于所述视频数据显示时间,控制所述显示器显示所述当前帧视频数据。
6.根据权利要求4所述的显示设备,其特征在于,所述控制器执行基于解码帧视频数据更新预设的缓存区域中的缓存帧视频数据,还被配置为:
获取所述缓存区域中,所述显示器已经显示完毕的历史视频数据;
将所述历史视频数据从所述预设的缓存区域中删除,并将所述解码帧视频数据存储至所述预设的缓存区域中。
7.根据权利要求1所述的显示设备,其特征在于,所述控制器执行控制显示器显示所述镜像投屏数据后,还被配置为:
基于预设周期在所述显示器显示的画面截图,得到目标镜像投屏图像;
识别所述目标镜像投屏图像中的弹幕,得到弹幕识别结果,并基于所述弹幕识别结果更新所述弹幕状态;
基于更新后的弹幕状态,执行基于所述弹幕状态设置显示设备的投屏模式的步骤。
8.根据权利要求1所述的显示设备,其特征在于,所述控制器还被配置为:
响应于用户输入的指示查询投屏控制模式的指令,控制所述显示器显示投屏控制模式设置界面;所述投屏控制模式设置界面中包括自动控制模式控件和手动控制模式控件;
响应于用户对所述自动控制模式控件的选中操作,执行基于所述镜像投屏数据获取弹幕状态的步骤;
响应于用户对所述手动控制模式控件的选中操作,按照用户设置的投屏模式设置显示设备的投屏模式。
9.根据权利要求8所述的显示设备,其特征在于,所述控制器执行获取用户设置的投屏模式,还被配置为:
获取用户设置的历史投屏模式;
根据所述历史投屏模式设置显示设备的投屏模式;
响应于用户输入的指示查询投屏模式的指令,控制所述显示器显示投屏模式界面;所述投屏模式界面中包括第一投屏模式控件和第二投屏模式控件;
响应于用户对所述第一投屏模式控件的选中操作,将显示设备的投屏模式设置为第一投屏模式;响应于用户对所述第二投屏模式控件的选中操作,将显示设备的投屏模式设置为第二投屏模式。
10.一种镜像投屏数据显示方法,应用于显示设备,其特征在于,所述方法包括:
响应于终端设备发送的镜像投屏数据,基于所述镜像投屏数据获取弹幕状态;
基于所述弹幕状态设置显示设备的投屏模式;
如果显示设备处于第一投屏模式,则将显示设备的投屏数据显示帧率设置为预设的第一帧率;如果显示设备处于第二投屏模式,则基于所述镜像投屏数据获取第二帧率,并将显示设备的投屏数据显示帧率设置为所述第二帧率;
基于所述投屏数据显示帧率,控制所述显示器显示所述镜像投屏数据。
CN202310377533.0A 2023-02-17 2023-04-10 显示设备和镜像投屏数据显示方法 Pending CN116489438A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202310377533.0A CN116489438A (zh) 2023-04-10 2023-04-10 显示设备和镜像投屏数据显示方法
PCT/CN2023/142362 WO2024169421A1 (zh) 2023-02-17 2023-12-27 显示设备和显示处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310377533.0A CN116489438A (zh) 2023-04-10 2023-04-10 显示设备和镜像投屏数据显示方法

Publications (1)

Publication Number Publication Date
CN116489438A true CN116489438A (zh) 2023-07-25

Family

ID=87214785

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310377533.0A Pending CN116489438A (zh) 2023-02-17 2023-04-10 显示设备和镜像投屏数据显示方法

Country Status (1)

Country Link
CN (1) CN116489438A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024169421A1 (zh) * 2023-02-17 2024-08-22 海信视像科技股份有限公司 显示设备和显示处理方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024169421A1 (zh) * 2023-02-17 2024-08-22 海信视像科技股份有限公司 显示设备和显示处理方法

Similar Documents

Publication Publication Date Title
CN114302190B (zh) 一种显示设备及画质调整方法
CN111464844A (zh) 一种投屏显示方法及显示设备
CN111787388B (zh) 一种显示设备
CN113535019B (zh) 显示设备及应用图标的显示方法
CN111866569B (zh) 一种显示设备
CN111669634A (zh) 一种视频文件预览方法及显示设备
CN111866590A (zh) 一种显示设备
CN114285985B (zh) 一种摄像头预览方向的确定方法及显示设备
CN116489438A (zh) 显示设备和镜像投屏数据显示方法
CN113613047B (zh) 一种媒体文件播放控制方法及显示设备
CN114285986A (zh) 一种摄像头拍摄图像的方法及显示设备
CN113490032A (zh) 显示设备及媒资显示方法
CN118575163A (zh) 显示设备和数据显示方法
CN112367550A (zh) 一种媒资列表多标题动态展示的实现方法及显示设备
WO2024169421A1 (zh) 显示设备和显示处理方法
CN115086722B (zh) 一种副屏内容的展示方法及显示设备
CN118828078A (zh) 显示设备、服务器和音乐媒资播放方法
CN117750113A (zh) 显示设备和媒资节目展示方法
CN115550701A (zh) 一种显示设备及接收投屏内容的方法
CN117793424A (zh) 显示设备和分辨率设置方法
CN117812416A (zh) 一种节目回放方法及显示设备
CN115314757A (zh) 一种显示设备及引导窗口显示方法
CN116301525A (zh) 显示设备和图像模式设置方法
CN118828121A (zh) 显示设备、服务器和媒资随机播放方法
CN113645492A (zh) 显示设备及历史播放记录的同步方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination