CN116801027A - 显示设备和投屏方法 - Google Patents

显示设备和投屏方法 Download PDF

Info

Publication number
CN116801027A
CN116801027A CN202210743842.0A CN202210743842A CN116801027A CN 116801027 A CN116801027 A CN 116801027A CN 202210743842 A CN202210743842 A CN 202210743842A CN 116801027 A CN116801027 A CN 116801027A
Authority
CN
China
Prior art keywords
video
video stream
window
size
playing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210743842.0A
Other languages
English (en)
Inventor
陈效总
佘祥顺
赖园园
薛梅
庞秀娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Juhaokan Technology Co Ltd
Original Assignee
Juhaokan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Juhaokan Technology Co Ltd filed Critical Juhaokan Technology Co Ltd
Priority to CN202210743842.0A priority Critical patent/CN116801027A/zh
Priority to PCT/CN2022/140843 priority patent/WO2023240973A1/zh
Priority to PCT/CN2022/141210 priority patent/WO2023185129A1/zh
Publication of CN116801027A publication Critical patent/CN116801027A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows

Abstract

本申请实施例提供了一种显示设备和投屏方法,涉及语音识别技术领域。该显示设备包括显示器;控制器,被配置为:响应于接收到的触发指令,在显示器显示跟练界面,其中,跟练界面包括第一视频播放窗口和第二视频播放窗口,第二视频窗口用于播放从服务器获取的健身视频;接收终端设备发送的第一视频流,根据标识信息、视频播放参数以及第一视频流的尺寸获取缩放比例,根据缩放比例对第一视频流进行缩放获取第二视频流,以及根据视频播放参数和第二视频流的尺寸获取布局偏移参数;视频播放参数包括第一视频播放窗口的尺寸和/或预设视频流尺寸;其中,第一视频流为终端设备的视频录制装置采集得到的视频流,且携带有用于标识终端设备录制第一视频流对应的视频时的姿态的标识信息;基于布局偏移参数对第二视频流进行偏移,并控制显示器在第一视频窗口播放偏移后的第二视频流。本申请实施例用于投屏显示。

Description

显示设备和投屏方法
技术领域
本申请实施例涉及显示技术领域。更具体地讲,涉及一种显示设备和投屏方法。
背景技术
目前,越来越多的电视应用需要电视支持摄像头相关功能,但因种种原因大部分电视出厂时并不附带摄像头。因此,如何在用户电视没有摄像头的情况下,借用其他设备的摄像头,在电视端实现同等的摄像头功能已成为相关领域的研究热点之一。
相关领域在电视端实现同等的摄像头功能的方案为:通过手机与电视互联,并通过具有手机的摄像头进行视频的采集,以及将采集的图像投屏到电视上显示。然而,电视与手机屏幕的长宽比普遍存在很大差异,且手机可以以横屏录制、竖屏录制等多种姿态进行视频的采集,因此手机发送的投影视频往往与电视上用于播放投屏视频的视频播放窗口不匹配,进而导致出现视频画面不完整、比例失调等问题,严重影响用户的使用体验。因此在电视接收到手机发送的投屏视频流时,如何对调整投屏视频流以使投屏视频流能够适配视频播放窗口是一个亟待解决的问题。
发明内容
本申请示例性的实施方式提供一种显示设备和投屏方法,用于解决手机发送的投影视频可能会与电视上用于播放投屏视频的视频播放窗口不匹配的问题。
本申请实施例提供技术方案如下:
第一方面,本申请实施例提供了一种显示设备,包括:
显示器;
控制器,被配置为:
响应于接收到的触发指令,在所述显示器显示跟练界面,其中,所述跟练界面包括第一视频播放窗口和第二视频播放窗口,所述第二视频窗口用于播放从服务器获取的健身视频;
接收终端设备发送的第一视频流,其中,所述第一视频流为所述终端设备的视频录制装置采集得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态的标识信息;
根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例,根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,以及根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数;所述视频播放参数包括所述第一视频播放窗口的尺寸和/或预设视频流尺寸;
基于所述布局偏移参数对所述第二视频流进行偏移,并控制所述显示器在所述第一视频窗口播放偏移后的所述第二视频流。
第二方面,本申请实施例提供了一种投屏方法,包括:
响应于接收到的触发指令,在所述显示器显示跟练界面,其中,所述跟练界面包括第一视频播放窗口和第二视频播放窗口,所述第二视频窗口用于播放从服务器获取的健身视频;
接收终端设备发送的第一视频流,其中,所述第一视频流为所述终端设备的视频录制装置采集得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态的标识信息;
根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例,根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,以及根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数;所述视频播放参数包括所述第一视频播放窗口的尺寸和/或预设视频流尺寸;
基于所述布局偏移参数对所述第二视频流进行偏移,并控制所述显示器在所述第一视频窗口播放偏移后的所述第二视频流。
第三方面,本申请实施例提供了一种电子设备,包括:存储器和处理器,所述存储器用于存储计算机程序;所述处理器用于在执行计算机程序时,使得所述电子设备实现第二方面所述的投屏方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,当所述计算机程序被计算设备执行时,使得所述计算设备实现第二方面所述的投屏方法。
第五方面,本申请实施例提供了一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机实现第二方面所述的投屏方法。
由以上技术方案可知,本申请实施例提供的显示设备和投屏方法,响应于接收到的触发指令,会在显示器显示跟练界面,并接收终端设备发送的第一视频流,然后根据标识信息、视频播放参数以及第一视频流的尺寸获取缩放比例,根据缩放比例对第一视频流进行缩放获取第二视频流,以及根据视频播放参数和第二视频流的尺寸获取布局偏移参数;视频播放参数包括第一视频播放窗口的尺寸和/或预设视频流尺寸;最后基于布局偏移参数对第二视频流进行偏移,并控制显示器在第一视频窗口播放偏移后的第二视频流。其中,跟练界面包括第一视频播放窗口和第二视频播放窗口,第二视频窗口用于播放从服务器获取的健身视频;第一视频流为终端设备的视频录制装置采集得到的视频流,且携带有用于标识终端设备录制第一视频流对应的视频时的姿态的标识信息。由于所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态,且所述视频播放参数包括用于播放所述第一视频流的第一视频播放窗口的尺寸和/或预设视频流尺寸,因此本发明实施例可以根据终端设备录制所述第一视频流对应的视频时的姿态,对第一视频流缩放以使缩放,使得到的第二视频流在横向或纵向上与视频播放参数相适应;由于因为本发明实施例还会根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,以及在进行视频播放时基于所述布局偏移参数对所述第二视频流进行偏移,因此本发明实施例可以使第二视频流在另一个方向上也与视频播放参数相适应。综上,本发明实例在跟练界面中可以在横向和纵向使投屏视频流的尺寸与用于播放投屏视频流的视频播放窗口和/或预设视频流尺寸相适应。
附图说明
为了更清楚地说明本申请实施例或相关技术中的实施方式,下面将对实施例或相关技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1示出了一些实施例中的投屏方法的场景架构图;
图2示出了一些实施例中的控制设备的硬件配置框图;
图3示出了一些实施例中的显示设备的硬件配置框图;
图4示出了一些实施例中的显示设备中软件配置图;
图5示出了一些实施例中的投屏方法的步骤流程图;
图6示出了另一些实施例中的投屏方法的步骤流程图;
图7示出了图6所示投屏方法的场景示意图;
图8示出了图6所示投屏方法的原理图;
图9示出了另一些实施例中的投屏方法的步骤流程图;
图10示出了图9所示投屏方法的原理图;
图11示出了另一些实施例中的投屏方法的步骤流程图;
图12示出了图11所示投屏方法的场景示意图;
图13示出了图11所示投屏方法的原理图;
图14示出了另一些实施例中的投屏方法的步骤流程图;
图15示出了图14所示投屏方法的原理图;
图16示出了另一些实施例中的投屏方法的步骤流程图;
图17示出了图16所示投屏方法的场景示意图;
图18示出了图16所示投屏方法的原理图;
图19示出了一些实施例中所示投屏方法的场景架构图。
具体实施方式
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
图1为本申请实施例提供的投屏方法的场景架构示意图。如图1所示,本申请实施例提供的场景架构,包括:控制装置100、显示设备200、终端设备300以及服务器400。
用户可通过终端设备300或控制装置100操作显示设备200,且可以通过终端设备300向显示设备200发送视频流,以控制显示设备200执行相应的操作,以及根据所述显示设备200发送视频流进行视频播放。本申请实施例提供的显示设备可以具有多种实施形式,例如,可以电视、具有显示功能的智能音箱冰箱、具有显示功能的窗帘、个人计算机(PersonalComputer,PC)、激光投影设备、显示器(monitor)、电子白板(electronic bulletinboard)、可穿戴设备、车载设备、电子桌面(electronic table)等。
在一些实施例中,控制装置100可以是遥控器,遥控器和显示设备200的通信包括红外协议通信或蓝牙协议通信,及其他短距离通信方式,通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。
在一些实施例中,也可以使用终端设备300(如移动终端、平板电脑、计算机、笔记本电脑等)控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。
在一些实施例中,显示设备200还可以采用除了控制装置100和终端设备300之外的方式进行控制,例如,可以通过显示设备200内部配置的获取语音指令的模块直接接收用户的语音指令控制。
在一些实施例中,显示设备200还可以与服务器400进行数据通信,以从服务器获取相关媒体资源。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)与服务器400进行通信连接。服务器400可以向显示设备200提供媒体资源服务和各种内容和互动。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。
图2示例性示出了图1所示实施例中的控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户输入的操作指令,且将操作指令转换为显示设备200可识别和响应的指令,以及操作指令或转换语音指令得到的指令转发至显示设备200,起到用户与显示设备200之间交互中介作用。
如图3,显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
在一些实施例中控制器250包括处理器,视频处理器,音频处理器,图形处理器,RAM,ROM,用于输入/输出的第一接口至第n接口。
显示器260包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件,用于接收源自控制器输出的图像信号,进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。
显示器260可为液晶显示器、OLED显示器、以及投影显示器,还可以为一种投影装置和投影屏幕。
通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如:通信器可以包括Wifi模块,蓝牙模块,有线以太网模块等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。
用户接口,可用于接收用户通过控制装置100(如:红外遥控器等)或触摸或者手势等输入的控制信号。
检测器230用于采集外部环境或与外部交互的信号。例如,检测器230包括光接收器,用于采集环境光线强度的传感器;或者,检测器230包括图像采集器,如摄像头,可以用于采集外部环境场景、用户的属性或用户交互手势,再或者,检测器230包括声音采集器,如麦克风等,用于接收外部声音。
外部装置接口240可以包括但不限于如下:高清多媒体接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。
调谐解调器210通过有线或无线接收方式接收广播电视信号,以及从多个无线或有线广播电视信号中解调出音视频信号,如以及EPG数据信号。
在一些实施例中,控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。
控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器260上显示UI对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中控制器包括中央处理器(Central Processing Unit,CPU),视频处理器,音频处理器,图形处理器(Graphics Processing Unit,GPU),RAM Random AccessMemory,RAM),ROM(Read-Only Memory,ROM),用于输入/输出的第一接口至第n接口,通信总线(Bus)等中的至少一种。
用户可在显示器260上显示的图形用户界面(GUI)输入用户命令,则用户接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户接口通过传感器识别出声音或手势,来接收用户输入命令。
“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
参见图4,在一些实施例中,将显示设备200的操作系统分为四层,从上至下分别为应用程序(Applications)层(简称“应用层”),应用程序框架(Application Framework)层(简称“框架层”),安卓运行时(Android runtime)和系统库层(简称“系统运行库层”),以及内核层。
在一些实施例中,应用程序层中运行有至少一个应用程序,这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等;也可以是第三方开发者所开发的应用程序。在具体实施时,应用程序层中的应用程序包不限于以上举例。
框架层为应用程序提供应用编程接口(application programming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心,这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口,可在执行中访问系统中的资源和取得系统的服务。
如图4所示,本申请实施例中应用程序框架层包括管理器(Managers),内容提供者(Content Provider)等,其中管理器包括以下模块中的至少一个:活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互;位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问;文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序相关的各种信息;通知管理器(Notification Manager)用于控制通知消息的显示和清除;窗口管理器(Window Manager)用于管理用户界面上的图标、窗口、工具栏、壁纸和桌面部件。
在一些实施例中,活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能,比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序,比如获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕,控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。
在一些实施例中,系统运行库层为上层即框架层提供支撑,当框架层被使用时,安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。
在一些实施例中,内核层是硬件和软件之间的层。如图4所示,内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器,温度传感器,压力传感器等)、以及电源驱动等。
在一些实施例中,控制器250响应于接收到的触发指令,在所述显示器260显示跟练界面,其中,所述跟练界面包括第一视频播放窗口和第二视频播放窗口,所述第二视频窗口用于播放从服务器获取的健身视频;
在一些实施例中,当控制器250通过通信器220接收终端设备发送的所述终端设备基于其视频录制装置生成的第一视频流时,通过控制器250根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例,根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,以及根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数;基于所述布局偏移参数对所述第二视频流进行偏移,并控制所述显示器260在所述第一视频窗口播放偏移后的所述第二视频流。
在一些实施例中,所述标识信息包括:第一姿态标识或第二姿态标识;当所述标识信息包括第一姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态;当所述标识信息包括第二姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态。其中,所述第一姿态标识对应的视频播放参数和所述第二姿态标识对应的视频播放参数不同。
在一些实施例中,当所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态时,所述控制器250根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,以及根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,包括,所述控制器250根据所述第一视频流的宽度和目标宽度获取第一缩放比例;所述目标宽度为所述第一视频播放窗口的宽度或者所述预设视频流尺寸中的宽度;
使用所述第一缩放比例对所述第一视频流进行缩放获取所述第二视频流;根据所述第二视频流的高度和所述第一视频播放窗口的高度,获取第一布局偏移参数;
所述控制器250基于所述布局偏移参数对所述第二视频流进行偏移包括,所述控制器基于所述第一布局偏移参数在高度方向上对所述第二视频流进行偏移。
其中,所述第一缩放比例为所述目标宽度与所述第一视频流的宽度的比值;所述第一布局偏移参数为所述第二视频流的高度与所述第一视频播放窗口的高度的差值的二分之一。
在一些实施例中,当所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态时,
所述控制器250根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例,根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,包括:
控制器250根据所述第一视频流的高度和目标高度,获取第二缩放比例;所述目标高度为所述第一视频播放窗口的高度或者所述预设视频流尺寸中的高度;使用所述第二缩放比例对所述第一视频流进行缩放,获取所述第二视频流;
所述控制器250根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,包括:控制器250根据所述第二视频流的宽度和所述第一视频播放窗口的宽度,获取第二布局偏移参数;基于所述第二布局偏移参数在宽度方向上对所述第二视频流进行偏移。其中,所述第二缩放比例为所述目标高度与所述第一视频流的高度的比值;所述第二布局偏移参数为所述第二视频流的宽度与所述第一视频播放窗口的宽度的差值的二分之一。
在一些实施例中所述通信器250基于所述布局偏移参数对所述第二视频流进行偏移,并控制所述显示器在所述第一视频窗口播放偏移后的所述第二视频流之后,所述控制器250还被配置为:
响应于接收到的剪裁播放指令,根据所述选定区域的尺寸和所述第一视频播放窗口的尺寸,获取第三缩放比例;所述剪裁播放指令携带有选定区域的尺寸和所述选定区域的位置信息,用于指示基于所述选定区域内所述第一视频流的视频内容进行视频播放;所述第三缩放比例为第一比值与第二比值中较小的一个比值,所述第一比值为所述第一视频播放窗口的高度与所述选定区域的高度的比值,所述第二比值为所述第一视频播放窗口的宽度与所述选定区域的宽度的比值;
使用所述第三缩放比例对所述第一视频流进行缩放获取第三视频流;根据所述第三缩放比例、所述第一视频播放窗口的宽度、所述选定区域的位置信息以及所述选定区域的宽度获取第三布局偏移参数;根据所述第三缩放比例、所述第一视频播放窗口的高度、所述选定区域的位置信息以及所述选定区域的高度获取第四布局偏移参数;
基于所述第三视频流在所述第一视频播放窗口中进行视频播放,并基于所述第三布局偏移参数在宽度方向上对所述第三视频流进行偏移,基于所述第四布局偏移参数在高度方向上对所述第三视频流进行偏移,并控制所述显示器在所述第一视频窗口播放偏移后的所述第三视频流。
在一些实施例中,所述控制器250根据所述第三缩放比例、所述第一视频播放窗口的宽度、所述选定区域的位置信息以及所述选定区域的宽度获取第三布局偏移参数,包括:
所述控制器250通过如下公式一计算所述第三布局偏移参数:
所述公式一为:CLIP3=(X+select_w/2)*R3-WL/2;
所述控制器250根据所述第三缩放比例、所述第一视频播放窗口的高度、所述选定区域的位置信息以及所述选定区域的高度获取第四布局偏移参数,包括:所述控制器250通过如下公式一计算所述第三布局偏移参数:
所述公式二为:CLIP4=(Y+select_h/2)*R3-HL/2;
其中,CLIP3为所述第三布局偏移参数,CLIP4为所述第四布局偏移参数,X为所述选定区域的左侧边缘到所述第一视频流的左侧边缘的距离,Y为所述选定区域的顶侧边缘到所述第一视频流的顶侧边缘的距离,select_w/2和select_h/2分别为所述选定区域的宽度和高度,R3为所述第三缩放比例,WL和HL分别为所述第一视频播放窗口的宽度和高度。
图5中示例性的示出了本申请实施例提供的投屏方法的流程示意图,如图5所示,本申请实施例提供的投屏方法包括如下步骤:
S51、接收终端设备发送的第一视频流。
其中,所述第一视频流为通过所述终端设备的视频录制装置进行视频采集得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态的标识信息。
在一些实施例中,所述第一视频流可以为终端设备通过视频录制装置实时进行视频录制并发送到显示设备的视频流。在另一些实施例中,所述第一视频流也可以为终端设备对预先录制的视频进行投屏显示时向显示设备发送的视频流。
在一些实施例中,本申请实施例中的所述终端设备可以为手机,所述终端设备的视频录制装置可以为手机的前置/后置摄像头。
需要说明的是,在接收终端设备发送的第一视频流之前,可以先接收触发指令,在显示器显示跟练界面,其中,跟练界面包括第一视频播放窗口和第二视频播放窗口,第二视频窗口用于播放从服务器获取的健身视频。
其中,该触发指令可以是用户在终端设备上进行触发显示跟练界面的操作之后触发的。
可选的,该触发指令也可以是显示设备接收的其他控制设备触发显示跟练界面的指令。
S52、根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例。
其中,所述视频播放参数包括用于播放所述第一视频流的第一视频播放窗口的尺寸和/或预设视频流尺寸。
在一些实施例中,可以仅根据所述标识信息、第一视频播放窗口的尺寸以及所述第一视频流的尺寸获取缩放比例,从而使缩放后的第一视频流的尺寸与第一视频播放窗口的尺寸相适应。
在一些实施例中,可以仅根据所述标识信息、预设视频流尺寸以及所述第一视频流的尺寸获取缩放比例,从而将第一视频流缩放为预设视频流尺寸的视频流。
在一些实施例中,可以根据所述标识信息、第一视频播放窗口的尺寸、预设视频流尺寸以及所述第一视频流的尺寸获取缩放比例,从而使缩放后的第一视频流的尺寸在与第一视频播放窗口的尺寸相适应的同时,更加符合原始视频的长宽比。例如:第一视频播放窗口的尺寸为629×629,为了使投屏视频的长宽比更加符合手机在竖屏状态下的长宽比,则可以将预设视频流尺寸设置为450×629。再例如:第一视频播放窗口的尺寸为629×629,为了使投屏视频的长宽比更加符合手机在横屏状态下的长宽比,则可以将预设视频流尺寸设置为629×450。
在一些实施例中,所述标识信息包括:第一姿态标识或第二姿态标识。
当所述标识信息包括第一姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态;
当所述标识信息包括第二姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态。
第一姿态标识对应的视频播放参数和所述第二姿态标识对应的视频播放参数不同。
视频播放参数包括用于播放第一视频流的第一视频播放窗口的尺寸和/或预设视频流尺寸,本公开实施例的一些实施例中,可以为不同姿态标识设置不同的视频播放参数,也就是说针对所述终端设备录制所述第一视频流对应的视频时的不同姿态,可以对应到不同的第一视频播放窗口的尺寸和/或预设视频流尺寸。
示例性的,当所述标识信息包括第一姿态标识时,表示终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态,该情况下对应的视频播放参数可以为:第一视频流的尺寸为1920×1080,所述第一视频播放窗口的尺寸为626x629。
示例性的,当所述标识信息包括第二姿态标识时,表示终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态,该情况下对应的视频播放参数可以为:第一视频流的尺寸为1080×1920、所述第一视频播放窗口的尺寸为626x629。
S53、根据所述缩放比例对所述第一视频流进行缩放获取第二视频流。
示例性的,所述第一视频流的尺寸为1080×1920,所述缩放比例为R,则所述第二视频流的尺寸为1080*R×1920*R。
通过上述步骤S53中的缩放操作可以使第一视频流的长度或宽度与视频播放参数相适应。
S54、根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数。
通过上述步骤S53中可以使第二视频流的长度或宽度与视频播放参数相适应,但还需对第二视频流的长度和宽度中的另一个进行调整才能使第二视频流的长度和宽度均与视频播放参数相适应。本发明实施例中使第二视频流的长度和宽度中的另一个与视频播放参数相适应的方式为在根据所述第二视频流进行视频播放时,将所述第二视频流在长度和宽度中的另一个的方向上偏移,因此本发明实施例中需要首先根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,以便后续播放根据所述第二视频流进行视频播放时进行布局偏移。
S55、基于所述布局偏移参数对所述第二视频流进行偏移,并在所述第一视频播放窗口中播放偏移后的所述第二视频流。
在一些实施例中,基于所述布局偏移参数对所述第二视频流进行偏移可以包括:基于布局参数调整所述第二视频流的坐标系原点,以对所述第二视频流进行偏移。在另一些实施例中,基于所述布局偏移参数对所述第二视频流进行偏移也可以包括:基于布局参数调整计算所述第二视频流的各个边缘(上边缘、下边缘、左边缘以及右边缘)对应的第一视频播放窗口的边缘的距离,然后根据第二视频流的各个边缘对应的第一视频播放窗口的边缘的距离对所述第二视频流进行偏移。
本申请实施例提供的投屏方法,在接收到接收终端设备发送的基于所述终端设备的视频录制装置生成的第一视频流时,会先根据所述第一视频流携带的标识信息视频播放参数以及所述第一视频流的尺寸获取缩放比例,然后根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,并根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,最终基于所述第二视频流在所述第一视频播放窗口中进行视频播放,并基于所述布局偏移参数对所述第二视频流进行偏移。由于所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态,且所述视频播放参数包括用于播放所述第一视频流的第一视频播放窗口的尺寸和/或预设视频流尺寸,因此本发明实施例可以根据终端设备录制所述第一视频流对应的视频时的姿态,对第一视频流缩放以使缩放,使得到的第二视频流在横向或纵向上与视频播放参数相适应;由于因为本发明实施例还会根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,以及在进行视频播放时基于所述布局偏移参数对所述第二视频流进行偏移,因此本发明实施例可以使第二视频流在另一个方向上也与视频播放参数相适应。综上,本发明实例可以在横向和纵向使投屏视频流的尺寸与用于播放投屏视频流的视频播放窗口和/或预设视频流尺寸相适应。
作为对上述实施例的扩展和细化,参照图6所示,本发明实施例提供的另一种投屏方法,包括:
S601、接收终端设备发送的第一视频流。
其中,所述第一视频流为通过所述终端设备的视频录制装置进行视频录制得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态的标识信息;
示例性的,参照图7所示,图7中以显示设备71为电视、终端设备72为手机为例示出。终端设备72录制所述第一视频流对应的视频时的姿态为竖屏姿态。
S602、根据所述第一视频流的宽度和第一视频播放窗口的宽度获取第一缩放比例。
本发明实施例中的宽度是指像素行(横向)内包含的像素点的数量,高度是指像素列(纵向)内包含的像素点的数量。
由于本发明实施例中的第一视频流为基于所述终端设备的视频录制装置生成的视频流,因此所述第一视频流的尺寸与终端设备的屏幕的分辨率相同,例如:终端设备屏幕分辨率为1080×1920,则第一视频流的尺寸为1080×1920。
在一些实施例中,所述第一缩放比例为所述第一视频播放窗口的宽度与所述第一视频流的宽度的比值。
设:所述第一缩放比例为R1,所述第一视频流的尺寸为W1×H1,所述第一视频播放窗口的尺寸为WL×HL,则有:
R1=WL/W1
示例性的,当所述第一视频流的尺寸为1080×1920,所述第一视频播放窗口的尺寸为626x629时,所述第一缩放比例R1=629/1080。
S603、使用所述第一缩放比例对所述第一视频流进行缩放获取所述第二视频流。
承上示例所述,所述第一视频流的尺寸为1080×1920,所述第一视频播放窗口的尺寸为626x629,所述第一缩放比例R1=629/1080,则使用所述第一缩放比例对所述第一视频流进行缩放得到的第二视频流的尺寸为629×1118。
至此,所述第二视频流的宽度已与所述第一视频播放窗口相适应。
S604、根据所述第二视频流的高度和所述第一视频播放窗口的高度,获取第一布局偏移参数。
在一些实施例中,所述第一布局偏移参数为所述第二视频流的高度与所述第一视频播放窗口的高度的差值的二分之一。
设:所述第一布局偏移参数为CLIP1,所述第二视频流的尺寸为W2×H2,所述第一视频播放窗口的尺寸为WL×HL,则有:
CLIP1=1/2(H2-HL)
示例性的,当所述第二视频流的尺寸为629x1118,所述第一视频播放窗口的尺寸为629×629时,所述第一布局偏移参数CLIP1=1/2(1118-629)。
S605、基于所述第一布局偏移参数在高度方向上对所述第二视频流进行偏移,并在所述第一视频播放窗口中播放偏移后的所述第二视频流。
示例性的,参照图8所示,图8中以所述第一视频流的尺寸为1080×1920、所述第一视频播放窗口800的尺寸为629×629为例对上述实施例提供的投屏方法进行说明。参照图8所示,根据所述第一视频流81的宽度1080和第一视频播放窗口的宽度629获取第一缩放比例629/1080,然后根据第一缩放比例629/1080对所述第一视频流81进行缩放获取第二视频流82,第二视频流82的尺寸为629×1118,再根据所述第二视频流82的高度1118和所述第一视频播放窗口800的高度,获取第一布局偏移参数1/2(1118-629)≈244;最后基于所述第二视频流82在所述第一视频播放窗口800中进行视频播放,并将所述第二视频流向上偏移第一布局偏移参数244,以实现图8所示的显示效果。
作为对上述实施例的扩展和细化,参照图9所示,本发明实施例提供的另一种投屏方法,包括:
S901、接收终端设备发送的第一视频流。
其中,所述第一视频流为通过所述终端设备的视频录制装置进行视频录制得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态的标识信息;
S902、根据所述第一视频流的宽度和预设视频流尺寸中的宽度获取第一缩放比例。
在一些实施例中,所述第一缩放比例为所述预设视频流尺寸中的宽度与所述第一视频流的宽度的比值。
设:所述第一缩放比例为R1,所述第一视频流的尺寸为W1×H1,所述预设视频流尺寸为WS×HS,则有:
R1=WS/W1
示例性的,当所述第一视频流的尺寸为1080×1920,所述预设视频流尺寸为450x629时,所述第一缩放比例R1=450/1080。
S903、使用所述第一缩放比例对所述第一视频流进行缩放获取所述第二视频流。
承上示例所述,所述第一视频流的尺寸为1080×1920,所述预设视频流尺寸为450x629,所述第一缩放比例R1=450/1080,则使用所述第一缩放比例对所述第一视频流进行缩放得到的第二视频流的尺寸为450×800。
至此,所述第二视频流的宽度已与所述预设视频播放流中的宽度相同。
S904、根据所述第二视频流的高度和所述第一视频播放窗口的高度,获取第一布局偏移参数。
在一些实施例中,所述第一布局偏移参数为所述第二视频流的高度与所述第一视频播放窗口的高度的差值的二分之一。
设:所述第一布局偏移参数为CLIP1,所述第二视频流的尺寸为W2×H2,所述第一视频播放窗口的尺寸为WL×HL,则有:
CLIP1=1/2(H2-HL)
示例性的,当所述第二视频流的尺寸为629×800,所述第一视频播放窗口的尺寸为629×629时,所述第一布局偏移参数CLIP1=1/2(800-629)。
S905、基于所述第一布局偏移参数在高度方向上对所述第二视频流进行偏移,并在所述第一视频播放窗口中播放偏移后的所述第二视频流。
示例性的,参照图10所示,图10中以所述第一视频流的尺寸为1080×1920、所述第一视频播放窗口1000的尺寸为629×629、所述预设视频流尺寸为450×629为例对上述实施例提供的投屏方法进行说明。参照图10所示,根据所述第一视频流101的宽度1080和第一视频播放窗口的宽度450获取第一缩放比例450/1080,然后根据第一缩放比例450/1080对所述第一视频流81进行缩放获取第二视频流82,第二视频流82的尺寸为450×800,再根据所述第二视频流82的高度800和所述第一视频播放窗口1000的高度,获取第一布局偏移参数1/2(800-629)≈85;最后基于所述第二视频流82在所述第一视频播放窗口1000中进行视频播放,并将所述第二视频流向上偏移第一布局偏移参数85,以实现图10所示的显示效果。
图9所示投屏方法中最终显示的视频的长宽比更加接近竖屏状态下终端设备的屏幕的长宽比,因此可以更好的展示终端设备的投屏画面。
作为对上述实施例的扩展和细化,参照图11所示,本发明实施例提供的另一种投屏方法,包括:
S111、接收终端设备发送的第一视频流。
其中,所述第一视频流为通过所述终端设备的视频录制装置进行视频录制得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态的标识信息;
示例性的,参照图12所示,图12中以显示设备121为电视、终端设备122为手机为例示出。终端设备122录制所述第一视频流对应的视频时的姿态为横屏姿态。
S112、根据所述第一视频流的高度和第一视频播放窗口的高度获取第二缩放比例。
同样,此处的宽度是指像素行(横向)内包含的像素点的数量,高度是指像素列(纵向)内包含的像素点的数量。
在一些实施例中,所述第一缩放比例为所述第一视频播放窗口的高度与所述第一视频流的高度的比值。
设:所述第二缩放比例为R2,所述第一视频流的尺寸为W1×H1,所述第一视频播放窗口的尺寸为WL×HL,则有:
R2=HL/H1
示例性的,当所述第一视频流的尺寸为1920×1080,所述第一视频播放窗口的尺寸为626x629时,所述第一缩放比例R2=629/1080。
S113、使用所述第一缩放比例对所述第一视频流进行缩放获取所述第二视频流。
承上示例所述,所述第一视频流的尺寸为1920×1080,所述第一视频播放窗口的尺寸为626x629,所述第二缩放比例R2=629/1080,则使用所述第一缩放比例对所述第一视频流进行缩放得到的第二视频流的尺寸为1118×629。
至此,所述第二视频流的高度已与所述第一视频播放窗口相适应。
S114、根据所述第二视频流的宽度和所述第一视频播放窗口的宽度,获取第二布局偏移参数。
在一些实施例中,所述第二布局偏移参数为所述第二视频流的宽度与所述第一视频播放窗口的宽度的差值的二分之一。
设:所述第二布局偏移参数为CLIP2,所述第二视频流的尺寸为W2×H2,所述第一视频播放窗口的尺寸为WL×HL,则有:
CLIP2=1/2(W2-WL)
示例性的,当所述第二视频流的尺寸为1118×629,所述第一视频播放窗口的尺寸为629×629时,所述第二布局偏移参数CLIP2=1/2(1118-629)。
S115、基于所述第一布局偏移参数在宽度方向上对所述第二视频流进行偏移,并在所述第一视频播放窗口中播放偏移后的所述第二视频流。
示例性的,参照图13所示,图13中以所述第一视频流的尺寸为1920×1080、所述第一视频播放窗口1300的尺寸为629×629为例对上述实施例提供的投屏方法进行说明。参照图13所示,根据所述第一视频流131的高度1080和第一视频播放窗口的宽度629获取第一缩放比例629/1080,然后根据第一缩放比例629/1080对所述第一视频流131进行缩放获取第二视频流132,第二视频流132的尺寸为1118×629,再根据所述第二视频流132的宽度1118和所述第一视频播放窗口800的高度,获取第二布局偏移参数1/2(1118-629)≈244;最后基于所述第二视频流132在所述第一视频播放窗口1300中进行视频播放,并将所述第二视频流向左偏移第一布局偏移参数244,以实现图13所示的显示效果。
作为对上述实施例的扩展和细化,参照图14所示,本发明实施例提供的另一种投屏方法,包括:
S141、接收终端设备发送的第一视频流。
其中,所述第一视频流为通过所述终端设备的视频录制装置进行视频录制得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态的标识信息;
S142、根据所述第一视频流的高度和预设视频流尺寸中的高度获取第二缩放比例。
在一些实施例中,所述第二缩放比例为所述预设视频流尺寸中的高度与所述第一视频流的高度的比值。
设:所述第二缩放比例为R2,所述第一视频流的尺寸为W1×H1,所述预设视频流尺寸为WS×HS,则有:
R1=HS/H1
示例性的,当所述第一视频流的尺寸为1920×1080,所述预设视频流尺寸为450x629时,所述第一缩放比例R1=450/1080。
S143、使用所述第一缩放比例对所述第一视频流进行缩放获取所述第二视频流。
承上示例所述,所述第一视频流的尺寸为1920×1080,所述预设视频流尺寸为450x629,所述第二缩放比例R2=450/1080,则使用所述第二缩放比例对所述第一视频流进行缩放得到的第二视频流的尺寸为800×450。
至此,所述第二视频流的高度已与所述预设视频播放流中的高度相同。
S144、根据所述第二视频流的宽度和所述第一视频播放窗口的宽度,获取第二布局偏移参数。
在一些实施例中,所述第二布局偏移参数为所述第二视频流的宽度与所述第一视频播放窗口的宽度的差值的二分之一。
设:所述第二布局偏移参数为CLIP2,所述第二视频流的尺寸为W2×H2,所述第一视频播放窗口的尺寸为WL×HL,则有:
CLIP2=1/2(W2-WL)
示例性的,当所述第二视频流的尺寸为800×629,所述第一视频播放窗口的尺寸为629×629时,所述第二布局偏移参数CLIP2=1/2(800-629)。
S145、基于所述第一布局偏移参数在宽度方向上对所述第二视频流进行偏移,并在所述第一视频播放窗口中播放偏移后的所述第二视频流。
示例性的,参照图15所示,图15中以所述第一视频流的尺寸为1920×1080、所述第一视频播放窗口1500的尺寸为629×629、所述预设视频流尺寸为450×629为例对上述实施例提供的投屏方法进行说明。参照图15所示,根据所述第一视频流151的高度1080和第一视频播放窗口的高度450获取第一缩放比例450/1080,然后根据第一缩放比例450/1080对所述第一视频流151进行缩放获取第二视频流152,第二视频流82的尺寸为800×450,再根据所述第二视频流152的宽度800和所述第一视频播放窗口1500的宽度,获取第二布局偏移参数1/2(800-629)≈85;最后基于所述第二视频流152在所述第一视频播放窗口1500中进行视频播放,并将所述第二视频流向左偏移第一布局偏移参数85,以实现图15所示的显示效果。
图16所示投屏方法中最终显示的视频的长宽比更加接近横屏状态下终端设备的屏幕的长宽比,因此可以更好的展示终端设备的投屏画面。
参照图16所示,本发明另一实施例提供的投屏方法,包括:
S161、接收终端设备发送的第一视频流。
其中,所述第一视频流为通过所述终端设备的视频录制装置进行视频录制得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态的标识信息。
需要说明的是,在上述图5、图6、图9、图11、图14中任一投屏方法之后,针对后续接收到的终端设备发送的第一视频流还可以按照图16所示的方式进行处理和显示。
S162、接收剪裁播放指令。
其中,所述剪裁播放指令携带有选定区域的尺寸和所述选定区域的位置信息,用于指示基于所述选定区域内所述第一视频流的视频内容进行视频播放。
示例性的,参照图17所示,图17中以显示设备171为电视、终端设备172为手机为例示出。终端设备172响应于用户操作确定选定区域1700,并向显示设备171发送用于指示基于选定区域内所述第一视频流的视频内容进行视频播放的剪裁播放指令。
在一些实施例中,可以通过选定区域右上侧顶点的位置坐标(x1,y1)和选定区域左下侧顶点的位置坐标(x2,y2)表征所述选定区域的尺寸和所述选定区域的位置信息。
S163、响应于剪裁播放指令,根据所述选定区域的尺寸和所述第一视频播放窗口的尺寸,获取第三缩放比例。
其中,所述第三缩放比例为第一比值与第二比值中较小的一个比值,所述第一比值为所述第一视频播放窗口的高度与所述选定区域的高度的比值,所述第二比值为所述第一视频播放窗口的宽度与所述选定区域的宽度的比值。
设:选定区域的尺寸为select_w×select_h、第一视频播放窗口的尺寸629×629、所述第三缩放比例为R3,则有:
R3=min(629/select_w,692/select_h)
示例性的,当所述选定区域的尺寸为265×360,所述第一视频播放窗口的尺寸为629x629时,所述第三缩放比例R3=629/360。
示例性的,当所述选定区域的尺寸为256×128,所述第一视频播放窗口的尺寸为629x629时,所述第三缩放比例R3=629/256。
S164、使用所述第三缩放比例对所述第一视频流进行缩放,获取第三视频流。
示例性的,所述第一视频流的尺寸为1920×1080,所述第一视频播放窗口的尺寸为629×629,所述选定区域的尺寸为480×270,则所述第三缩放比例R3=629/480,所述使用所述第三缩放比例对所述第一视频流进行缩放得到的第三视频流尺寸为2516×1415。
S165、根据所述第三缩放比例、所述第一视频播放窗口的宽度、所述选定区域的位置信息以及所述选定区域的宽度获取第三布局偏移参数。
在一些实施例中,所述控制器,具体被配置为通过如下公式一计算所述第三布局偏移参数,所述公式一为:
CLIP3=(X+select_w/2)*R3-WL/2
其中,CLIP3为所述第三布局偏移参数,X为所述选定区域的左侧边缘到所述第一视频流的左侧边缘的距离,select_w/2为所述选定区域的宽度,R3为所述第三缩放比例,WL为所述第一视频播放窗口的宽度。
示例性的,当所述第一视频播放窗口的尺寸为629x629,所述选定区域的左侧边缘到所述第一视频流的左侧边缘的距离为1000,所述选定区域的尺寸为480×270时,所述第三布局偏移参数CLIP3=1310。
S166、根据所述第三缩放比例、所述第一视频播放窗口的高度、所述选定区域的位置信息以及所述选定区域的高度获取第四布局偏移参数。
在一些实施例中,所述控制器,具体被配置为通过如下公式二计算所述第四布局偏移参数:
设:所述第四布局偏移参数为CLIP4,所述第三视频流的尺寸为W3×H3,所述第一视频播放窗口的尺寸为WL×HL,则所述公式二为:
CLIP4=(Y+select_h/2)*R3-HL/2
其中,CLIP4为所述第四布局偏移参数,Y为所述选定区域的顶侧边缘到所述第一视频流的顶侧边缘的距离,select_h/2为所述选定区域的高度,R3为所述第三缩放比例,HL为所述第一视频播放窗口的高度。
示例性的,当所述第一视频播放窗口的尺寸为629x629,所述选定区域的左侧边缘到所述第一视频流的左侧边缘的距离为400,所述选定区域的尺寸为480×270时,所述第四布局偏移参数CLIP4=386。
S167、基于所述第三布局偏移参数在宽度方向上对所述第三视频流进行偏移,基于所述第四布局偏移参数在高度方向上对所述第三视频流进行偏移,并在所述第一视频窗口播放偏移后的所述第三视频流。
在一些实施例中,基于所述第三布局偏移参数在宽度方向上对所述第二视频流进行偏移,基于所述第四布局偏移参数在高度方向上对所述第三视频流进行偏移可以包括:基于第三布局偏移参数和所述第四布局偏移参数调整所述第三视频流的坐标系原点,以对所述第三视频流进行偏移。在另一些实施例中,基于所述布局偏移参数对所述第二视频流进行偏移也可以包括:基于布局参数调整计算所述第三视频流的各个边缘(上边缘、下边缘、左边缘以及右边缘)对应的第一视频播放窗口的边缘的距离,然后根据第二视频流的各个边缘对应的第一视频播放窗口的边缘的距离对所述第三视频流进行偏移。
示例性的,参照图18所示,图18中以所述第一视频流的尺寸为1920×1080、所述第一视频播放窗口的尺寸为629×629、所述选定区域的尺寸为480×270、所述选定区域的左侧边缘到所述第一视频流的左侧边缘的距离为1000,所述选定区域的顶侧边缘到所述第一视频流的顶侧边缘的距离400为例对上述实施例提供的投屏方法进行说明。参照图18所示,首先,由于629/480<629/270,因此确定第三缩放比例为629/480。其次,根据第三缩放比例对所述第一视频流181进行缩放获取第三视频流182,第三视频流的尺寸为2516×1415,再根据所述第三缩放比例、所述第一视频播放窗口的宽度、所述选定区域的位置信息以及所述选定区域的宽度获取第三布局偏移参数1310,以及根据所述第三缩放比例、所述第一视频播放窗口的高度、所述选定区域的位置信息以及所述选定区域的高度获取第四布局偏移参数386,最后基于所述第三视频流182在所述第一视频播放窗口1800中进行视频播放,并将所述第三视频流分别向左偏移第三布局偏移参数1310、向上偏移第四布局偏移参数386,以实现图18所示的显示效果。
在上述任一实施例的基础上,本发明实施例提供的投屏方法还包括:接收服务器发送的第二视频流;以及基于所述第二视频流在第二视频播放窗口中进行视频播放。
示例性的,以下以视频健身场景为例对上述实施例进行说明,如图19所示,场景建构中包括健身视频服务器191、显示设备192以及终端设备193。显示设备192可以从健身视频服务器191获取健身视频并在第二视频播放窗口1922中播放;用户可以观看显示设备192所播放的健身视频,并跟随健身视频进行健身训练;终端设备193可以通过视频录制装置进行视频录制得到的第一视频流,并将第一视频流发送至显示设备192,显示设备接收到终端设备193发送的第一视频流后,通过本发明实施例提供的投屏方法在第一视频播放窗口1921中进行投屏视频的播放。
在一些实施例中,本申请实施例还提供了一种电子设备,包括:存储器和处理器,所述存储器用于存储计算机程序;所述处理器用于在执行计算机程序时,使得所述电子设备实现上述任一实施例所述的投屏方法。
在一些实施例中,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,当所述计算机程序被计算设备执行时,使得所述计算设备实现上述任一实施例所述的投屏方法。
在一些实施例中,本申请实施例提供了一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机实现第二方面或第二方面任一实施例所述的投屏方法。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种显示设备,其特征在于,包括:
显示器;
控制器,被配置为:
响应于接收到的触发指令,在所述显示器显示跟练界面,其中,所述跟练界面包括第一视频播放窗口和第二视频播放窗口,所述第二视频窗口用于播放从服务器获取的健身视频;
接收终端设备发送的第一视频流,其中,所述第一视频流为所述终端设备的视频录制装置采集得到的视频流,且携带有用于标识所述终端设备采集所述第一视频流对应的视频时的姿态的标识信息;
根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例,根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,以及根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数;所述视频播放参数包括所述第一视频播放窗口的尺寸和/或预设视频流尺寸;
基于所述布局偏移参数对所述第二视频流进行偏移,并控制所述显示器在所述第一视频窗口播放偏移后的所述第二视频流。
2.根据权利要求1所述的显示设备,其特征在于,所述标识信息包括:第一姿态标识或第二姿态标识;
当所述标识信息包括第一姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态;
当所述标识信息包括第二姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态;
其中,所述第一姿态标识对应的视频播放参数和所述第二姿态标识对应的视频播放参数不同。
3.根据权利要求2所述的显示设备,其特征在于,当所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态时,
所述控制器根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,以及根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,包括,所述控制器根据所述第一视频流的宽度和目标宽度获取第一缩放比例;所述目标宽度为所述第一视频播放窗口的宽度或者所述预设视频流尺寸中的宽度;使用所述第一缩放比例对所述第一视频流进行缩放获取所述第二视频流;根据所述第二视频流的高度和所述第一视频播放窗口的高度,获取第一布局偏移参数;
所述控制器基于所述布局偏移参数对所述第二视频流进行偏移包括,所述控制器基于所述第一布局偏移参数在高度方向上对所述第二视频流进行偏移。
4.根据权利要求3所述的显示设备,其特征在于,
所述第一缩放比例为所述目标宽度与所述第一视频流的宽度的比值;
所述第一布局偏移参数为所述第二视频流的高度与所述第一视频播放窗口的高度的差值的二分之一。
5.根据权利要求2所述的显示设备,其特征在于,当所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态时,
所述控制器根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例,根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,包括:
所述控制器根据所述第一视频流的高度和目标高度,获取第二缩放比例;所述目标高度为所述第一视频播放窗口的高度或者所述预设视频流尺寸中的高度;使用所述第二缩放比例对所述第一视频流进行缩放,获取所述第二视频流;
所述控制器根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数,包括:所述控制器根据所述第二视频流的宽度和所述第一视频播放窗口的宽度,获取第二布局偏移参数;
所述控制器基于所述布局偏移参数对所述第二视频流进行偏移,包括:
所述控制器基于所述第二布局偏移参数在宽度方向上对所述第二视频流进行偏移。
6.根据权利要求5所述的显示设备,其特征在于,
所述第二缩放比例为所述目标高度与所述第一视频流的高度的比值;
所述第二布局偏移参数为所述第二视频流的宽度与所述第一视频播放窗口的宽度的差值的二分之一。
7.根据权利要求1-6任一项所述的显示设备,其特征在于,所述控制器基于所述布局偏移参数对所述第二视频流进行偏移,并控制所述显示器在所述第一视频窗口播放偏移后的所述第二视频流之后,所述控制器还被配置为:
响应于接收到的剪裁播放指令,根据所述选定区域的尺寸和所述第一视频播放窗口的尺寸,获取第三缩放比例;所述剪裁播放指令携带有选定区域的尺寸和所述选定区域的位置信息,用于指示基于所述选定区域内所述第一视频流的视频内容进行视频播放;所述第三缩放比例为第一比值与第二比值中较小的一个比值,所述第一比值为所述第一视频播放窗口的高度与所述选定区域的高度的比值,所述第二比值为所述第一视频播放窗口的宽度与所述选定区域的宽度的比值;
使用所述第三缩放比例对所述第一视频流进行缩放获取第三视频流;根据所述第三缩放比例、所述第一视频播放窗口的宽度、所述选定区域的位置信息以及所述选定区域的宽度获取第三布局偏移参数;根据所述第三缩放比例、所述第一视频播放窗口的高度、所述选定区域的位置信息以及所述选定区域的高度获取第四布局偏移参数;
基于所述第三视频流在所述第一视频播放窗口中进行视频播放,并基于所述第三布局偏移参数在宽度方向上对所述第三视频流进行偏移,基于所述第四布局偏移参数在高度方向上对所述第三视频流进行偏移,并控制所述显示器在所述第一视频窗口播放偏移后的所述第三视频流。
8.根据权利要求7所述的显示设备,其特征在于,所述控制器根据所述第三缩放比例、所述第一视频播放窗口的宽度、所述选定区域的位置信息以及所述选定区域的宽度获取第三布局偏移参数,包括:
所述控制器通过如下公式一计算所述第三布局偏移参数:
所述公式一为:CLIP3=(X+select_w/2)*R3-WL/2;
所述控制器根据所述第三缩放比例、所述第一视频播放窗口的高度、所述选定区域的位置信息以及所述选定区域的高度获取第四布局偏移参数,包括:所述控制器通过如下公式一计算所述第三布局偏移参数:
所述公式二为:CLIP4=(Y+select_h/2)*R3-HL/2;
其中,CLIP3为所述第三布局偏移参数,CLIP4为所述第四布局偏移参数,X为所述选定区域的左侧边缘到所述第一视频流的左侧边缘的距离,Y为所述选定区域的顶侧边缘到所述第一视频流的顶侧边缘的距离,select_w/2和select_h/2分别为所述选定区域的宽度和高度,R3为所述第三缩放比例,WL和HL分别为所述第一视频播放窗口的宽度和高度。
9.一种投屏方法,其特征在于,包括:
响应于接收到的触发指令,显示跟练界面,其中,所述跟练界面包括第一视频播放窗口和第二视频播放窗口,所述第二视频窗口用于播放从服务器获取的健身视频;
接收终端设备发送的第一视频流,其中,所述第一视频流为所述终端设备的视频录制装置采集得到的视频流,且携带有用于标识所述终端设备录制所述第一视频流对应的视频时的姿态的标识信息;
根据所述标识信息、视频播放参数以及所述第一视频流的尺寸获取缩放比例,根据所述缩放比例对所述第一视频流进行缩放获取第二视频流,以及根据所述视频播放参数和所述第二视频流的尺寸获取布局偏移参数;所述视频播放参数包括所述第一视频播放窗口的尺寸和/或预设视频流尺寸;
基于所述布局偏移参数对所述第二视频流进行偏移,并在所述第一视频窗口播放偏移后的所述第二视频流。
10.根据权利要求9所述的方法,其特征在于,所述标识信息包括:第一姿态标识或第二姿态标识;
当所述标识信息包括第一姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为竖屏姿态;
当所述标识信息包括第二姿态标识时,所述标识信息用于标识所述终端设备录制所述第一视频流对应的视频时的姿态为横屏姿态;
其中,所述第一姿态标识对应的视频播放参数和所述第二姿态标识对应的视频播放参数不同。
CN202210743842.0A 2022-03-30 2022-06-27 显示设备和投屏方法 Pending CN116801027A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202210743842.0A CN116801027A (zh) 2022-06-27 2022-06-27 显示设备和投屏方法
PCT/CN2022/140843 WO2023240973A1 (zh) 2022-06-16 2022-12-21 显示设备及投屏方法
PCT/CN2022/141210 WO2023185129A1 (zh) 2022-03-30 2022-12-23 显示设备、服务器、媒资连播方法及投屏方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210743842.0A CN116801027A (zh) 2022-06-27 2022-06-27 显示设备和投屏方法

Publications (1)

Publication Number Publication Date
CN116801027A true CN116801027A (zh) 2023-09-22

Family

ID=88033315

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210743842.0A Pending CN116801027A (zh) 2022-03-30 2022-06-27 显示设备和投屏方法

Country Status (1)

Country Link
CN (1) CN116801027A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117459662A (zh) * 2023-10-11 2024-01-26 书行科技(北京)有限公司 一种视频播放方法、识别方法、装置、设备及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117459662A (zh) * 2023-10-11 2024-01-26 书行科技(北京)有限公司 一种视频播放方法、识别方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN113613072B (zh) 一种多路投屏显示方法及显示设备
CN111787388B (zh) 一种显示设备
CN113051432B (zh) 显示设备及媒资播放方法
CN113645494B (zh) 一种屏幕融合方法、显示设备、终端设备及服务器
US11425466B2 (en) Data transmission method and device
US11917329B2 (en) Display device and video communication data processing method
CN113825002A (zh) 显示设备及焦距控制方法
CN116801027A (zh) 显示设备和投屏方法
US11429339B2 (en) Electronic apparatus and control method thereof
CN115836528A (zh) 一种显示设备及投屏方法
CN114285985A (zh) 一种摄像头预览方向的确定方法及显示设备
CN113556593B (zh) 一种显示设备及投屏方法
CN113076031B (zh) 显示设备、触摸定位方法及装置
CN111939561B (zh) 显示设备及交互方法
CN112367550A (zh) 一种媒资列表多标题动态展示的实现方法及显示设备
CN111949179A (zh) 一种控件放大方法及显示设备
CN113825001B (zh) 全景图片浏览方法及显示设备
WO2021248671A1 (zh) 一种显示设备
CN115086722B (zh) 一种副屏内容的展示方法及显示设备
WO2023240973A1 (zh) 显示设备及投屏方法
CN113766164B (zh) 显示设备及信号源界面显示方法
CN113542824B (zh) 一种显示设备及应用界面的显示方法
CN117608426A (zh) 显示设备及多应用同屏显示方法
CN117793424A (zh) 显示设备和分辨率设置方法
CN116347143A (zh) 显示设备及双应用同屏显示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination