CN112672093A - 视频显示方法、装置、电子设备及计算机存储介质 - Google Patents

视频显示方法、装置、电子设备及计算机存储介质 Download PDF

Info

Publication number
CN112672093A
CN112672093A CN202011540327.XA CN202011540327A CN112672093A CN 112672093 A CN112672093 A CN 112672093A CN 202011540327 A CN202011540327 A CN 202011540327A CN 112672093 A CN112672093 A CN 112672093A
Authority
CN
China
Prior art keywords
video
display
specific
transparent display
initial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011540327.XA
Other languages
English (en)
Inventor
刘畅
马辉
程松
栾青
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Priority to CN202011540327.XA priority Critical patent/CN112672093A/zh
Publication of CN112672093A publication Critical patent/CN112672093A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)

Abstract

本公开公开了一种视频显示方法,其中,该方法包括:获取初始视频;基于所述初始视频,确定包括特定对象的视频帧;提取所述视频帧中包括所述特定对象的前景部分,得到特定视频;向透明显示器输出所述特定视频,以使所述透明显示器显示所述特定视频。本公开还公开了一种控制装置、显示装置、电子设备以及计算机存储介质。

Description

视频显示方法、装置、电子设备及计算机存储介质
技术领域
本公开实施例涉及但不限于显示技术领域,尤其涉及一种视频显示方法、装置、电子设备及计算机存储介质。
背景技术
在例如远程会议或远程演讲等远程视频场景中,需要通过视频播放设备来播放正在录制的视频或者已经录制完成的视频,然而这种播放方式会使得看视频的人与视频中的人之间存在距离感,无法让看视频的人身临其境。
因此,在远程视频场景中,如何拉近看视频的人与视频中的人之间的距离感,且在拉近距离感的同时避免用户体验怪异,是亟待解决的问题。
发明内容
本公开实施例提供一种视频显示方法、装置、电子设备及计算机存储介质。
第一方面,提供一种视频显示方法,应用于控制设备,包括:
获取初始视频;基于所述初始视频,确定包括特定对象的视频帧;提取所述视频帧中包括所述特定对象的前景部分,得到特定视频;向透明显示器输出所述特定视频,以使所述透明显示器显示所述特定视频。
这样,控制设备能够基于具有背景的初始视频,通过对初始视频进行背景分割提取出仅包括特定对象的前景部分的特定视频,从而在控制设备向透明显示器输出特定视频之后,透明显示器能够显示特定对象的前景部分,进而使特定视频在透明显示器上的播放具有较强的真实感,而通过这种真实感的视觉效果,拉近了特定对象与观众之间的距离,且观众不会体验怪异。
在一些实施例中,所述基于所述初始视频,确定包括特定对象的视频帧,包括:获取所述初始视频的显示参数和所述透明显示器的显示参数;基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频;确定所述目标视频中的所述包括特定对象的视频帧。
这样,控制设备可以先根据初始视频的显示参数和透明显示器的显示参数,对初始视频进行处理得到目标视频,然后再从目标视频中确定包括特定对象的视频帧,从而控制设备能够先将初始视频转换为与透明显示器的显示参数匹配的目标视频,使得能够从与透明显示器的显示参数匹配的目标视频中提取包括特定对象的视频帧,进而使得特定对象的显示能够与透明显示器的显示参数相匹配,提高了观众观看特定视频的视觉舒适度。
在一些实施例中,所述显示参数包括:宽高比;所述基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频,包括:基于所述初始视频的宽高比和所述透明显示器的显示尺寸的宽高比,对所述初始视频进行处理,得到与所述显示尺寸的宽高比相同的目标视频;其中,对所述初始视频进行处理,包括以下至少之一:在宽度方向上减少所述初始视频的像素数量或像素间距;在宽度方向上增加所述初始视频的像素数量或像素间距;在高度方向上减少所述初始视频的像素数量或像素间距;在高度方向上增加所述初始视频的像素数量或像素间距。
这样,控制设备可以在初始视频的宽高比与显示尺寸的宽高比不一致的情况下,通过对初始视频的像素数量和/或像素间距进行调整,使得到的目标视频的宽高比能够与显示尺寸的宽高比一致,从而使得透明显示器能够充分地显示特定对象。
在一些实施例中,所述初始视频的显示参数包括:单位区域内的第一像素数量;所述透明显示器的显示参数包括:单位区域内的第二像素数量;所述基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频,包括:在所述第一像素数量和所述第二像素数量不一致的情况下,通过增加像素和/或减少像素的方式调整所述初始视频的所述第一像素数量为所述第二像素数量,得到所述目标视频。
这样,控制设备可以在初始视频的单位区域内的第一像素数量与透明显示器的单位区域内的第二像素数量不同的情况下,可以调整初始视频的像素数量,使得调整后的单位区域内像素数量能够与第二像素数量一致,从而使得透明显示器能够更加清楚和清晰的显示特定视频。
在一些实施例中,所述初始视频的显示参数包括:第一显示帧率;所述透明显示器的显示参数包括:第二显示帧率;所述基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频,包括:在所述第一显示帧率大于所述第二显示帧率的情况下,降低所述初始视频的帧率至所述第二显示帧率,得到所述目标视频;在所述第一显示帧率小于所述第二显示帧率的情况下,升高所述初始视频的帧率至所述第二显示帧率,得到所述目标视频。
这样,控制设备可以在初始视频的显示帧率和透明显示器的显示帧率不一致的情况下,将初始视频的帧率调整到显示帧率,从而在初始视频的帧率提高的情况下,透明显示器能够以更高的帧率显示特定视频,进而提高了特定视频在显示时的流畅度,在初始视频的帧率降低的情况下,得到的目标视频的数据量减少,进而能够降低后续提取特定对象的前景部分时的计算量。
在一些实施例中,所述方法还包括:监测所述控制设备与所述透明显示器之间的当前通信链路质量;获取所述控制设备中存储的第一对应关系,所述第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系;基于所述当前通信链路质量和所述第一对应关系,确定所述透明显示器的当前显示分辨率和/或当前显示帧率;所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:提取所述视频帧中包括所述特定对象的前景部分,得到前景视频;调整所述前景视频的分辨率为所述当前显示分辨率和/或所述前景视频的显示帧率为所述当前显示帧率,得到所述特定视频。
这样,控制设备可以根据控制设备与所述透明显示器之间的当前通信链路质量,动态调整透明显示器的当前显示分辨率和/或当前显示帧率,从而使得特定视频的显示参数能够基于当前通信链路质量动态调整,进而在当前的通信链路质量差的时候,透明显示器还能够流畅的播放视频,使得观众依旧能够具有真实的视觉效果。
在一些实施例中,所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:提取所述视频帧中包括所述特定对象的前景部分,得到前景视频;获取当前环境光亮度;所述当前环境光亮度为所述控制设备中的环境光传感器当前检测的光亮度,或者,所述当前环境光亮度为所述控制设备接收所述透明显示器发送的当前检测的光亮度;基于所述当前环境光亮度,对所述前景视频的显示参数进行调整,得到所述特定视频。
这样,控制设备可以根据当前环境光亮度对前景视频的显示参数进行调整,使得特定视频的显示能够根据环境光亮度自动的调节,从而使得无论当前环境光亮度如何变化,使用者都能够清晰的观看到特定视频。
在一些实施例中,所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:提取所述视频帧中包括所述特定对象的前景部分,获得前景视频;提取所述初始视频中的第一声音信息;接收所述透明显示器发送的所述透明显示器中至少两个播放器的位置信息;基于所述位置信息,调整所述第一声音信息为第二声音信息;融合所述前景视频和所述第二声音信息,得到所述特定视频。
这样,控制设备可以根据透明显示器中至少两个播放器的位置信息,对初始视频中的声音进行调整,使得调整后的声音能够与至少两个播放器的位置信息相匹配,进而使得使用者能够听到立体声,从而使用者能够身临其境。
在一些实施例中,所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:提取所述视频帧中包括所述特定对象的前景部分,获得前景视频;对所述前景视频的每一帧图像中的所述特定对象进行美化处理,得到所述特定视频;其中,所述美化处理包括以下至少之一:添加滤镜处理、美颜处理、添加贴纸处理、添加涂鸦处理。
这样,控制设备可以自动的对特定对象进行美化处理,从而能够满足对特定对象进行美化的美化需求。
在一些实施例中,所述方法还包括:对所述初始视频或所述特定视频中所述特定对象的运动行为进行分析,得到所述特定对象的运动轨迹信息;基于所述运动轨迹信息,控制所述透明显示器的透明显示屏相对所述透明显示器的底座移动。
这样,控制设备可以根据特定对象的运动行为确定特定对象的运动轨迹信息,从而基于运动轨迹信息控制透明显示器的透明显示屏移动,从而使得透明显示屏上显示的特定视频更加逼真。
第二方面,提供一种视频显示方法,应用于透明显示器,包括:
接收控制设备发送的特定视频,所述特定视频包括特定对象的画面,所述特定视频由包括所述特定对象的视频帧中提取的包括所述特定对象的前景部分而得到;显示所述特定视频。
在一些实施例中,所述方法还包括:接收所述控制设备发送的对所述特定对象的运动行为进行分析而得到的所述特定对象的运动轨迹信息;基于所述运动轨迹信息,控制所述透明显示器的透明显示屏相对所述透明显示器的底座移动。
在一些实施例中,所述方法还包括:获取所述透明显示器中的环境光传感器检测的当前环境光亮度;获取所述透明显示器中存储的第二对应关系,所述第二对应关系包括:显示亮度和/或显示模式与环境光亮度的数值范围之间的对应关系;基于所述当前环境光亮度和所述第二对应关系,确定所述透明显示器的当前显示亮度和/或当前显示模式;所述显示所述特定视频,包括:以所述当前显示亮度和/或所述当前显示模式显示所述特定视频。
这样,透明显示器能够通过检测的当前环境光亮度,确定当前显示亮度和/或当前显示模式,从而透明显示器可以自行根据当前的光亮度,调节对特定视频的显示,不仅使得无论当前环境光亮度如何变化,使用者都能够清晰的观看到特定视频,而且透明显示器自行调整显示的参数,扩展了透明显示器的功能且调整显示参数的方式简单。
在一些实施例中,所述方法还包括:监测所述控制设备与所述透明显示器之间的当前通信链路质量;获取所述透明显示器中存储的第一对应关系,所述第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系;基于所述当前通信链路质量和所述第一对应关系,确定所述透明显示器的当前显示分辨率和/或当前显示帧率;所述显示所述特定视频,包括:以所述当前显示分辨率和/或当前显示帧率显示所述特定视频。
这样,通过给透明显示器来监测控制设备与所述透明显示器之间的当前通信链路质量,从而透明显示器能够根据当前通信链路质量调节当前能够显示的分辨率和/或当前能够显示的帧率,避免了显示卡顿造成观众观感不佳的情况发生,提高了用户观看特定视频的流畅度。
在一些实施例中,所述方法还包括:检测作用于所述透明显示器中的目标位置的触发指令,确定与所述触发指令匹配的特效图像;在所述特定视频上显示所述特效图像。
这样,透明显示器能够显示与用户作用在透明显示器的目标位置的触发指令对应的特效图像,从而不仅能够提高使用者的兴趣度,还能够使得透明显示器具有多样化的显示效果,丰富了显示内容。
第三方面,提供一种控制装置,包括:
获取单元,用于获取初始视频;确定单元,用于基于所述初始视频,确定包括特定对象的视频帧;提取单元,用于提取所述视频帧中包括所述特定对象的前景部分,得到特定视频;输出单元,用于向透明显示器输出所述特定视频,以使所述透明显示器显示所述特定视频。
第四方面,提供一种显示装置,包括:接收单元,用于接收控制设备发送的特定视频,所述特定视频包括特定对象的画面,所述特定视频由包括所述特定对象的视频帧中提取的包括所述特定对象的前景部分而得到;显示单元,用于显示所述特定视频。
第五方面,提供一种电子设备,所述电子设备包括:存储器和处理器,所述存储器存储有可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述方法中的步骤。
第六方面,提供一种计算机存储介质,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现上述方法中的步骤。
附图说明
图1为本公开实施例提供的一种视频显示方法的实现流程示意图;
图2为本公开实施例提供的另一种视频显示方法的实现流程示意图;
图3为本公开实施例提供的又一种视频显示方法的实现流程示意图;
图4为本公开实施例提供的再一种视频显示方法的实现流程示意图;
图5为本公开另一实施例提供的一种视频显示方法的实现流程示意图;
图6为本公开又一实施例提供的一种视频显示方法的实现流程示意图;
图7为本公开再一实施例提供的一种视频显示方法的实现流程示意图;
图8为本公开另一实施例提供的另一种视频显示方法的实现流程示意图;
图9为本公开另一实施例提供的又一种视频显示方法的实现流程示意图;
图10为本公开另一实施例提供的再一种视频显示方法的实现流程示意图;
图11为本公开实施例提供的一种控制装置的组成结构示意图;
图12为本公开实施例提供的一种显示装置的组成结构示意图;
图13为本公开实施例提供的一种电子设备的硬件实体示意图。
具体实施方式
下面将通过实施例并结合附图具体地对本公开的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。
需要说明的是:在本公开实例中,“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
另外,本公开实施例所记载的技术方案之间,在不冲突的情况下,可以任意组合。
图1为本公开实施例提供的一种视频显示方法的实现流程示意图,如图1所示,该方法应用于控制设备,该方法包括:
S101、获取初始视频。
在一些实施例中,控制设备可以从自身的存储介质中获取初始视频。例如,控制设备可以包括摄像头,摄像头拍摄初始视频,并将拍摄的初始视频存储在自身的存储介质中。再例如,控制设备可以从云端或其它设备处下载初始视频,并将下载的初始视频存储在存储介质中,其它设备例如是服务器或视频存储设备等。
在另一些实施例中,视频采集设备可以采集初始视频,然后将初始视频向控制设备发送,从而控制设备得到初始视频。视频采集设备可以为任一能够进行拍摄的设备,例如,视频采集设备可以包括以下之一:手机、电脑、摄像机或者任一包括摄像模组的设备等。
在一些实施例中,视频采集设备可以将拍摄得到的视频作为初始视频,并向控制设备发送该初始视频。在另一些实施例中,视频采集设备可以对拍摄的视频进行例如亮度调整、清晰度调整等视频处理方法进行处理,以得到初始视频,并向控制设备发送该初始视频。
在控制设备得到初始视频之后,可以对初始视频进行处理得到特定视频,然后控制设备向透明显示器发送该特定视频,以使透明显示器显示该特定视频。
视频采集设备与控制设备之间的连接,和/或,控制设备与透明显示器之间的连接,可以是例如长期演进(Long Term Evolution,LTE)连接、新空口(NewRadio,NR)连接、后续演进的6G连接等无线连接,和/或,可以是例如光纤连接、网线连接等有线连接。
在一些实施例中,如果控制设备从自身的存储介质中获取初始视频,系统包括控制设备和透明显示器两者;如果控制设备从视频采集设备接收初始视频,系统包括控制设备、视频采集设备以及透明显示器三者。控制设备和透明显示器两者,或者,控制设备、视频采集设备以及透明显示器三者可以分别为独立的设备,可以独立出售。在另一些实施例中,控制设备和视频采集设备可以集成在一起或者绑定在一起出售。在又一些实施例中,控制设备和透明显示器可以集成在一起或者绑定在一起出售。
控制设备可以为任一能够进行对数据进行控制的设备,例如,控制设备可以包括:中控主机或服务器等。在一些实施例中,控制设备可以与视频采集设备在同一个场所布置。在另一些实施例中,控制设备可以与透明显示器在同一个场所布置。在又一些实施例中,控制设备可以布置在云端。
本公开实施例中的透明显示器可以包括:有机发光二极管(Organic Light-Emitting Diode,OLED)屏幕或发光二极管(Light Emitting Diode,LED)屏幕。
本公开实施例中的初始视频可以是直播视频或者录播视频。
视频采集设备在拍摄视频时,可以针对特定对象进行拍摄,特定对象可以是人、动物、机器等具有动作的对象,从而得到的初始视频可以是针对特定对象的视频。
S102、基于初始视频,确定包括特定对象的视频帧。
在一些实施例中,初始视频中的每一视频帧可以均包括特定对象。在另一些实施例中,初始视频中可以有部分视频帧中包括特定对象。
在一些实施例中,控制设备可以从初始视频中提取包括特定对象的视频帧。在另一些实施例中,控制设备可以先对初始视频进行视频处理后,再基于处理后的视频得到包括特定对象的视频帧。
S103、提取视频帧中包括特定对象的前景部分,得到特定视频。
控制设备可以对视频帧进行背景分割,确定视频帧中包括特定对象的前景部分和背景部分,然后提取视频帧中的前景部分,进而得到特定视频。
一个视频帧可以相当于一个图像,对图像进行背景分割的方式有很多。例如,以一个视频帧为目标图像为例,在一种实施方式中,控制设备可以获取目标图像的第一分割结果,第一分割结果表征修正前目标图像中各像素点属于各类别的概率;获取至少一个修正点以及与至少一个修正点对应的待修正类别;根据至少一个修正点以及待修正类别对第一分割结果进行修正,得到第二分割结果。在另一种实施方式中,控制设备可以将目标图像输入至控制设备中存储的神经网络系统,通过神经网络系统对目标图像进行前背景分割处理;获取进行前背景分割处理之后的目标图像的背景部分和前景部分。需要注意的是,任一种提取视频帧中包括特定对象的前景部分的方法,都应该在本公开的保护范围之内。
在特定对象没有被其它物体遮挡的情况下,包括特定对象的前景部分可以仅有特定对象;在特定对象被其它物体遮挡的情况下,包括特定对象的前景部分可以不仅有特定对象,还有遮挡特定对象的其它物体。例如,在演讲者站在演讲台后面演讲时,包括特定对象的前景部分可以包括特定对象和演讲台。通过这种方式,观众更具有真实感。
在一些实施例中,控制设备可以直接将提取的前景部分作为特定视频。在另一些实施例中,控制设备可以对前景部分进行处理,得到特定视频。
S104、向透明显示器输出特定视频,以使透明显示器显示特定视频。
控制设备可以通过有线和/或无线的方式向透明显示器输出特定视频。特定视频中的特定对象可以始终保持同一个大小范围内,从而透明显示器在显示特定视频时,可以使得特定对象始终保持一个固定的大小范围内,进而使使用者可以毫无违和感的观看特定视频。
体现在透明显示器这一侧,透明显示器可以接收控制设备发送的特定视频,特定视频包括特定对象的画面,特定视频由包括特定对象的视频帧中提取的包括特定对象的前景部分而得到;显示特定视频。
透明显示器在显示特定视频时,可以在透明显示器的显示区域中居中显示、以任意比例显示或者全屏显示,或者,可以在透明显示器中的显示区域的目标位置处显示。目标位置和特定视频所占的区域大小可以是特定对象自行选取。例如,直播场景中,特定视频可以显示在透明显示器中的显示区域的右下角的位置处。
本公开实施例中的视频显示方法可以应用于多个场景中,例如:
由于人们在日常生活和工作中接触的信息量越来越大,因此人们之间的信息交流和沟通也就变的越来越频繁,越来越重要,越来越多的人使用视频会议进行交流,在视频会议场景中,如果某一个人无法到达会议现场,则参会者可以通过视频采集设备录取视频,并采用本公开实施例中的视频显示方法进行会议,从而现场的人可以通过透明显示器看到未到场的参会者,且与未到场的参会者之间可以保持较近的距离感。
如果演讲者想要在多个演讲厅进行实时演讲,也可以采用本公开实施例中的视频显示方法,在演讲场景中,观众可以在透明显示器上观看演讲者的演讲视频,从而无需演讲者本人到场,也能够身临其境地感受到演讲者,就像演讲者亲临一样。
展厅展览也需要对特定的展示对象进行展示,在展厅场景中,观众可以通过观看透明显示器,使得观众能够较为真实的感受到展示对象。
另外,本公开实施例中的视频显示方法,在舞台场景或者在线问诊场景中,均能够使得观众产生身临其境的技术效果,此处不再一一赘述。
在本公开实施例中,控制设备能够基于具有背景的初始视频,通过对初始视频进行背景分割提取出仅包括特定对象的前景部分的特定视频,从而在控制设备向透明显示器输出特定视频之后,透明显示器能够显示特定对象的前景部分,进而使特定视频在透明显示器上的播放具有较强的真实感,而通过这种真实感的视觉效果,拉近了特定对象与观众之间的距离,且观众不会体验怪异。
图2为本公开实施例提供的另一种视频显示方法的实现流程示意图,如图2所示,该方法应用于控制设备,该方法包括:
S201、获取初始视频。
S202、获取初始视频的显示参数和透明显示器的显示参数。
初始视频的显示参数可以包括以下至少之一:初始视频的宽高比、单位区域内的第一像素数量、初始视频的显示帧率等。透明显示器的显示参数可以包括以下至少之一:透明显示器的显示尺寸的宽高比、单位区域内的第二像素数量、透明显示器的显示帧率。
显示尺寸的宽高比可以等于或不等于透明显示器的有效显示区域的宽高比。在显示尺寸的宽高比等于透明显示器的有效显示区域的宽高比时,视频在透明显示器上满屏或全屏播放。
在一些实施方式中,在初始视频是视频采集设备发送的情况下,初始视频的显示参数可以与视频采集设备的摄像参数相同。
S203、基于初始视频的显示参数和透明显示器的显示参数,对初始视频进行处理,得到目标视频。
在一些实施例中,显示参数包括:宽高比;控制设备可以基于初始视频的宽高比和透明显示器的显示尺寸的宽高比,对初始视频进行处理,得到与显示尺寸的宽高比相同的目标视频;
其中,对初始视频进行处理,包括以下至少之一:
在宽度方向上减少初始视频的像素数量;在宽度方向上减小初始视频的像素间距;在宽度方向上增加初始视频的像素数量;在宽度方向上增大初始视频的像素间距;在高度方向上减少初始视频的像素数量;在高度方向上减小初始视频的像素间距;在高度方向上增加初始视频的像素数量;在高度方向上增大初始视频的像素间距。
例如,在初始视频的宽高比与显示尺寸的宽高比之差大于零的情况下,可以选择执行以下至少之一:在宽度方向上减少初始视频的像素数量;在宽度方向上减小初始视频的像素间距;在高度方向上增加初始视频的像素数量;在高度方向上增大初始视频的像素间距。
在初始视频的宽高比与显示尺寸的宽高比之差小于零的情况下,可以选择执行以下至少之一:在宽度方向上增加初始视频的像素数量;在宽度方向上增大初始视频的像素间距;在高度方向上减少初始视频的像素数量;在高度方向上减小初始视频的像素间距。
在一些实施例中,在宽度/高度方向上减少初始视频的像素数量,可以是在宽度/高度方向上减少初始视频中的一个连续区域或两个连续区域的像素数量,例如,减少初始视频的左侧和/或右侧区域,或者,减少初始视频的上侧和/或下侧区域的像素数量。减少初始视频的左侧和/或右侧区域的像素数量的一种实现方式可以包括:从初始视频中提取特定宽度的视频,特定宽度小于初始视频的宽度。减少初始视频的左侧和/或右侧区域的像素数量可以包括:从初始视频中提取特定高度的视频,特定高度小于初始视频的高度。在另一些实施例中,在宽度方向上减少初始视频的像素数量,可以包括删除每N列像素中的至少一列像素,N为大于或等于2的整数,在高度方向上减少初始视频的像素数量,可以包括删除每N行像素中的至少一行像素。减少初始视频的像素数量后的像素间距可以与减少初始视频的像素数量前的像素间距相同或不同。
在一些实施方式中,在高度/宽度方向上增加初始视频的像素数量可以通过在高度/宽度方向上进行像素插值的方式实现,像素插值采用的算法可以包括以下之一:最近像素插值算法、双线性插值算法、双三次插值算法和分形算法。在某一个方向上降低初始视频的像素数量可以通过抛弃在这个方向上的某一些像素来实现。
在一些实施方式中,控制设备可以根据初始视频的宽高比与显示尺寸的宽高比的差异程度,确定使用提取特定宽度或特定高度的视频的方案,或者,确定使用提高或降低像素间距的方案。例如,控制设备在初始视频的宽高比与显示尺寸的宽高比之差大于零且小于或等于第一阈值的情况下,表示两者的宽高比之间的差异较小,则可以使用提高或降低像素间距的方案,从而尽可能多的保留初始视频中的细节;在初始视频的宽高比与显示尺寸的宽高比之差大于第一阈值的情况下,表示两者的宽高比之间的差异较大,则可以使用提取特定宽度或特定高度的视频的方案,从而避免较大程度的在高度方向上或宽度方向上拉伸或收缩视频尺寸导致特定对象变形。
在又一些实施例中,初始视频的显示参数可以包括:单位区域内的第一像素数量;透明显示器的显示参数包括:单位区域内的第二像素数量;在第一像素数量和第二像素数量不一致的情况下,通过增加像素和/或减少像素的方式调整初始视频的第一像素数量为第二像素数量,得到目标视频。
一般情况下,如果初始视频是视频采集设备采集的视频,由于视频采集设备的镜头的像素很高,即第一像素数量通常大于第二像素数量,从而控制设备可以通过降低初始视频中的像素数量,从而减少了后续的计算量。
在这种实施方式中,控制设备可以在第一像素数量与第二像素数量不同的情况下,可以调整初始视频的第一像素数量,使得调整后的单位区域内像素数量能够与第二像素数量一致,从而使得透明显示器能够更加清楚和清晰的显示特定视频。
增加像素和减少像素可以分别通过像素插值或像素抛弃的方法来实现。
在本申请实施过程中,像素插值和/或像素抛弃可以是均匀或非均匀的像素插值和/或均匀或非均匀的像素抛弃。
在再一些实施例中,初始视频的显示参数可以包括:第一显示帧率;透明显示器的显示参数包括:第二显示帧率;在第一显示帧率大于第二显示帧率的情况下,降低初始视频的帧率至第二显示帧率,得到目标视频;在第一显示帧率小于第二显示帧率的情况下,升高初始视频的帧率至第二显示帧率,得到目标视频。
在这种实施方式中,控制设备可以在初始视频的第一显示帧率和透明显示器的第二显示帧率不一致的情况下,将初始视频的帧率调整到第二显示帧率,从而在初始视频的帧率提高的情况下,透明显示器能够以更高的帧率显示特定视频,进而提高了特定视频在显示时的流畅度,在初始视频的帧率降低的情况下,得到的目标视频的数据量减少,进而能够降低后续提取特定对象的前景部分时的计算量。
提高帧率可以采用均匀插帧或非均匀插帧的方式实现,降低帧率可以采用均匀或非均匀丢帧的方式实现。
需要注意的是,本公开实施例中的显示尺寸的宽高比、单位区域内的第二像素数量以及第二显示帧率中的至少一个,可以是固定设置的显示参数,或者,可以是根据实际情况或用户需求动态调整的显示参数。
S204、确定目标视频中的包括特定对象的视频帧。
在一些实施例中,每一视频帧中均包括特定对象。如果初始视频中某一帧图像不包括特定对象,则不提取该帧。
S205、提取视频帧中包括特定对象的前景部分,得到特定视频。
S206、向透明显示器输出特定视频,以使透明显示器显示特定视频。
在本公开实施方式中,控制设备可以在初始视频的宽高比与显示尺寸的宽高比不一致的情况下,提取初始视频中特定宽度或者特定高度的视频,或者,在高度方向上或宽度方向上对初始视频的像素间距和/或像素数量进行调整,从而使得到的目标视频的宽高比能够与显示尺寸的宽高比一致,从而使得透明显示器能够充分地显示特定对象。
图3为本公开实施例提供的又一种视频显示方法的实现流程示意图,如图3所示,该方法包括:
S301、控制设备获取初始视频。
S302、控制设备基于初始视频,确定包括特定对象的视频帧。
S303、控制设备监测控制设备与透明显示器之间的当前通信链路质量。
当前通信链路质量的确定,可以根据控制设备与透明显示器之间交互的数据中的某些参考信号和/或根据信息传输时延来确定。
S304、控制设备获取控制设备中存储的第一对应关系。
第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系。显示分辨率可以与通信链路质量的数值范围一一对应,显示帧率可以与通信链路质量的数值范围一一对应。
S305、控制设备基于当前通信链路质量和第一对应关系,确定透明显示器的当前显示分辨率和/或当前显示帧率。
本公开实施例中,控制设备可以为透明显示器提供一个合理的当前显示分辨率和/或当前显示帧率。
S306、控制设备提取视频帧中包括特定对象的前景部分,得到前景视频。
S307、控制设备调整前景视频的分辨率为当前显示分辨率和/或前景视频的显示帧率为当前显示帧率,得到特定视频。
S308、控制设备向透明显示器输出特定视频,透明显示器接收控制设备发送的特定视频。
S309、透明显示器显示特定视频。
在一些实施例中,控制设备还可以向透明显示器发送当前显示分辨率和/或当前显示帧率,使得透明显示器在显示特定视频时,可以以当前显示分辨率和/或当前显示帧率显示特定视频。
在本公开实施例中,控制设备可以根据控制设备与透明显示器之间的当前通信链路质量,动态调整透明显示器的当前显示分辨率和/或当前显示帧率,从而使得特定视频的显示参数能够基于当前通信链路质量动态调整,进而在当前的通信链路质量差的时候,透明显示器还能够流畅的播放视频,使得观众依旧能够具有真实的视觉效果。
图4为本公开实施例提供的再一种视频显示方法的实现流程示意图,如图4所示,该方法包括:
S401、控制设备获取初始视频。
S402、控制设备基于初始视频,确定包括特定对象的视频帧。
S403、控制设备提取视频帧中包括特定对象的前景部分,得到前景视频。
S404、控制设备获取当前环境光亮度。
其中,当前环境光亮度为控制设备中的环境光传感器当前检测的光亮度,或者,当前环境光亮度为控制设备接收透明显示器发送的当前检测的光亮度。
在控制设备与透明显示器布置在一个区域的情况下,当前环境光亮度为控制设备接收透明显示器发送的当前检测的光亮度。通过这种方式,能够减少在透明显示器上布置的元器件,进而满足透明显示器的精简化设计。
S405、控制设备基于当前环境光亮度,对前景视频的显示参数进行调整,得到特定视频。
显示参数可以包括以下至少之一:亮度、对比度、色调、饱和度、分辨率、单位区域内的像素值、帧率等。
在一些实施例中,控制设备在确定到当前环境光亮度小于或等于第二阈值的情况下,表明当前的环境光亮度较暗,控制设备可以将特定视频的亮度调整的低一些,从而使得观众并不会对透明显示器上显示的特定视频感到刺眼;在确定到当前环境光亮度大于第二阈值的情况下,表明当前的环境光亮度较亮,控制设备可以将特定视频的亮度调整的高一些,从而使得观众能够清楚地在透明显示器上看到特定对象。
在另一些实施例中,控制设备中可以存储有包括多个环境光亮度范围与多个显示参数之间的对应关系的列表,从而控制设备可以基于该列表和当前的环境光亮度,对前景视频的显示参数进行调整。其中,环境光亮度范围可以与显示参数一一对应。
S406、控制设备向透明显示器输出特定视频,透明显示器接收控制设备发送的特定视频。
S407、透明显示器显示特定视频。
在本公开实施例中,控制设备可以根据当前环境光亮度对前景视频的显示参数进行调整,使得特定视频的显示能够根据环境光亮度自动的调节,从而使得无论当前环境光亮度如何变化,使用者都能够清晰的观看到特定视频。
图5为本公开另一实施例提供的一种视频显示方法的实现流程示意图,如图5所示,该方法包括:
S501、控制设备获取初始视频。
S502、控制设备基于初始视频,确定包括特定对象的视频帧。
S503、控制设备提取视频帧中包括特定对象的前景部分,获得前景视频。
S504、控制设备提取初始视频中的第一声音信息。
第一声音信息可以是单声道的声音信息、双声道的声音信息或者多声道的声音信息。
S505、透明显示器向控制设备发送透明显示器中至少两个播放器的位置信息;控制设备接收透明显示器发送的至少两个播放器的位置信息。
在其它实施例中,S505的步骤可以在S501的步骤之前执行。
S506、控制设备基于位置信息,调整第一声音信息为第二声音信息。
第二声音信息可以是双声道的声音信息或者多声道的声音信息。第二声音信息的声道数可以与透明显示器的播放器的个数相同。
在透明显示器包括两个或两个以上的播放器的情况下,播放器的位置和播放器播放声音的参数,都会对观众的听觉产生影响。本公开实施例中由于第二声音信息是根据至少两个播放器的位置信息确定的,从而使得第二声音信息通过至少两个播放器的播放,以使用户感受到更好的环绕立体声效果。
S507、控制设备融合前景视频和第二声音信息,得到特定视频。
S508、控制设备向透明显示器输出特定视频,透明显示器接收控制设备发送的特定视频。
S509、透明显示器显示特定视频。
在本公开实施例中,控制设备可以根据透明显示器中至少两个播放器的位置信息,对初始视频中的声音进行调整,使得调整后的声音能够与至少两个播放器的位置信息相匹配,进而使得使用者能够听到立体声,从而使用者能够身临其境。
图6为本公开又一实施例提供的一种视频显示方法的实现流程示意图,如图6所示,该方法包括:
S601、控制设备获取初始视频。
S602、控制设备基于初始视频,确定包括特定对象的视频帧。
S603、控制设备提取视频帧中包括特定对象的前景部分,获得前景视频。
S604、控制设备对前景视频的每一帧图像中的特定对象进行美化处理,得到特定视频。
其中,美化处理包括以下至少之一:添加滤镜处理、美颜处理、添加贴纸处理、添加涂鸦处理。
在一些实施例中,控制设备对特定对象是否进行美化处理,可以根据特定对象的选择来确定,例如,特定对象在视频采集设备中对美化按钮进行了触发的情况下,视频采集设备可以向控制设备发送美化处理的指示,从而控制设备可以基于该指示对特定对象进行美化。指示中可以包括美化处理的内容,例如,指示进行以下至少之一:添加滤镜处理、美颜处理、添加贴纸处理、添加涂鸦处理。
在一些实施例中,控制设备在对特定对象进行美化处理得到特定视频之后,控制设备可以向视频采集设备发送该特定视频,使得视频采集设备端的用户能够看到美化后的特定对象。
S605、控制设备向透明显示器输出特定视频,透明显示器接收控制设备发送的特定视频。
S606、透明显示器显示特定视频。
在本公开实施例中,控制设备可以自动的对特定对象进行美化处理,从而能够满足对特定对象进行美化的美化需求。
图7为本公开再一实施例提供的一种视频显示方法的实现流程示意图,如图7所示,该方法包括:
S701、控制设备获取初始视频。
S702、控制设备基于初始视频,确定包括特定对象的视频帧。
S703、控制设备提取视频帧中包括特定对象的前景部分,得到特定视频。
S704、控制设备对初始视频或特定视频中特定对象的运动行为进行分析,得到特定对象的运动轨迹信息。
在一些实施例中,运动轨迹信息可以是二维的轨迹信息。在另一些实施例中,运动轨迹信息可以是一维的轨迹信息。在一些实施例中,一维的轨迹信息可以是二维的轨迹信息映射在一维上得到的轨迹信息。
S705、控制设备基于运动轨迹信息,控制透明显示器的透明显示屏相对透明显示器的底座移动。
在一些实施方式中,控制设备可以基于运动轨迹信息,向透明显示器发送控制指令,控制指令中可以包括移动方向、移动距离以及目标位置等至少一者,移动方向、移动距离以及目标位置等至少一者可以是基于运动轨迹信息分析的,透明显示器可以基于控制指令控制透明显示屏相对透明显示器的底座移动。
在另一些实施方式中,控制设备可以向透明显示器发送运动轨迹信息,透明显示器可以基于运动轨迹信息,控制透明显示器的透明显示屏相对透明显示器的底座移动。例如,透明显示器可以基于运动轨迹信息分析得到移动方向、移动距离以及目标位置等至少一者,然后基于移动方向、移动距离以及目标位置等至少一者控制透明显示屏相对透明显示器的底座移动。
在一些实施例中,控制设备或透明显示器可以基于二维的轨迹信息,控制透明显示屏相对透明显示器的底座在二维方向上移动。在另一些实施例中,控制设备或透明显示器可以将二维的轨迹信息映射在一维上得到一维的轨迹信息,基于一维的轨迹信息,控制透明显示器的透明显示屏相对透明显示器的底座在一维方向上移动。在又一些实施例中,控制设备或透明显示器获取或接收的轨迹信息即为一维的轨迹信息,基于一维的轨迹信息,控制透明显示器的透明显示屏相对透明显示器的底座在一维方向上移动。
透明显示屏可以相对底座以运动轨迹信息移动,或者,透明显示屏可以相对底座左右移动和/或前后移动和/或斜向移动。
在本公开实施例中,控制设备可以根据特定对象的运动行为确定特定对象的运动轨迹信息,从而基于运动轨迹信息控制透明显示器的透明显示屏移动,从而使得透明显示屏上显示的特定视频更加逼真。
图8为本公开另一实施例提供的另一种视频显示方法的实现流程示意图,如图8所示,该方法包括:
S801、控制设备获取初始视频。
S802、控制设备基于初始视频,确定包括特定对象的视频帧。
S803、控制设备提取视频帧中包括特定对象的前景部分,得到特定视频。
S804、控制设备向透明显示器输出特定视频,透明显示器接收控制设备发送的特定视频。
S805、透明显示器获取透明显示器中的环境光传感器检测的当前环境光亮度。
S806、透明显示器获取透明显示器中存储的第二对应关系。
第二对应关系包括:显示亮度和/或显示模式与环境光亮度的数值范围之间的对应关系。显示亮度可以与环境光亮度的数值范围一一对应,显示模式可以与环境光亮度的数值范围一一对应。
显示模式可以是黑夜模式,白天模式、黑白模式、彩色模式或电影模式等。
S807、透明显示器基于当前环境光亮度和第二对应关系,确定透明显示器的当前显示亮度和/或当前显示模式。
S808、透明显示器以当前显示亮度和/或当前显示模式显示特定视频。
在本公开实施例中,透明显示器能够通过检测的当前环境光亮度,确定当前显示亮度和/或当前显示模式,从而透明显示器可以自行根据当前的光亮度,调节对特定视频的显示,不仅使得无论当前环境光亮度如何变化,使用者都能够清晰的观看到特定视频,而且透明显示器自行调整显示的参数,扩展了透明显示器的功能且调整显示参数的方式简单。
图9为本公开另一实施例提供的又一种视频显示方法的实现流程示意图,如图9所示,该方法包括:
S901、控制设备获取初始视频。
S902、控制设备基于初始视频,确定包括特定对象的视频帧。
S903、控制设备提取视频帧中包括特定对象的前景部分,得到特定视频。
S904、控制设备向透明显示器输出特定视频,透明显示器接收控制设备发送的特定视频。
S905、透明显示器监测控制设备与透明显示器之间的当前通信链路质量。
S906、透明显示器获取透明显示器中存储的第一对应关系。
第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系。透明显示器中存储的第一对应关系,可以与控制设备中存储的第一对应关系是同一个对应关系。
S907、透明显示器基于当前通信链路质量和第一对应关系,确定透明显示器的当前显示分辨率和/或当前显示帧率。
在一些实施例中,透明显示器可以向控制设备发送当前显示分辨率和/或当前显示帧率,从而使得控制设备向透明显示器发送特定视频时,能够发送分辨率为当前显示分辨率和/或帧率为当前显示帧率的特定视频。通过这种方式,能够降低控制设备向透明显示器传输的数据量,从而透明显示器在较低的数据量下也能够流畅的看到特定视频。
S908、以当前显示分辨率和/或当前显示帧率显示特定视频。
在本公开实施例中,通过给透明显示器来监测控制设备与透明显示器之间的当前通信链路质量,从而透明显示器能够根据当前通信链路质量调节当前能够显示的分辨率和/或当前能够显示的帧率,避免了显示卡顿造成观众观感不佳的情况发生,提高了用户观看特定视频的流畅度。
图10为本公开另一实施例提供的再一种视频显示方法的实现流程示意图,如图10所示,该方法包括:
S1001、控制设备获取初始视频。
S1002、控制设备基于初始视频,确定包括特定对象的视频帧。
S1003、控制设备提取视频帧中包括特定对象的前景部分,得到特定视频。
S1004、控制设备向透明显示器输出特定视频,透明显示器接收控制设备发送的特定视频。
S1005、透明显示器显示特定视频。
S1006、透明显示器检测作用于透明显示器中的目标位置的触发指令,确定与触发指令匹配的特效图像。
在这种实施方式中,使用者可以对透明显示器的目标位置进行触发,从而透明显示器基于该触发生成触发指令。透明显示器的目标位置可以是一个点的位置或线的位置或面的位置等。触发目标位置的触发动作可以包括点击触发、滑动触发、滚动触发等中的至少一个。
与触发指令匹配的特效图像可以包括:与目标位置和/或触发动作和/或特定对象匹配的特效图像。例如,目标位置不同,确定的特效图像可以不同;触发动作不同,确定的特效图像可以不同;特定对象不同,确定的特效图像可以不同。在另一些实施例中,特效图像可以与使用场景和/或用户的特征信息相关。使用场景不同,确定的特效图像可以不同,例如,在会议场景和演讲场景时,针对用户在相同位置以相同动作触发而生成的触发指令,确定的特效图像可以不同。再例如,在用户为小孩和老人时,针对用户在相同位置以相同动作触发而生成的触发指令,确定的特效图像可以不同。特效图像可以是动态图,动态图可以与显示的特定视频中的人物和/或在显示特定视频的情况下的环境场景相匹配。
在一些实施例中,透明显示器中可以预存有目标位置、触发动作、特定对象、使用场景、用户的特征信息中的至少一者与特效图像之间的对应关系的列表,从而透明显示器可以基于该列表根据当前触发确定需要显示的特效图像。在另一些实施例中,透明显示器可以向控制设备发送目标位置、触发动作、特定对象、使用场景、用户的特征信息中的至少一者,从而控制设备根据该目标位置、触发动作、特定对象、使用场景、用户的特征信息中的至少一者并根据当前触发确定一个特效图像,然后将特效图像与特定视频进行合成,并将合成后的视频向透明显示器发送,使得透明显示器可以播放合成后的视频。
S1007、透明显示器在特定视频上显示特效图像。
本公开实施例可以适用于舞台场景或者展厅等场景,在这些场景中,通常需要使用者能够与透明显示器之间实时交互,从而通过使用者对透明显示器的触发,使得透明显示器能够显示相关的特效图像,提高了使用者的兴趣度。
在申请实施例中,透明显示器能够显示与用户作用在透明显示器的目标位置的触发指令对应的特效图像,从而不仅能够提高使用者的兴趣度,还能够使得透明显示器具有多样化的显示效果,丰富了显示内容。
本公开实施例基于OLED透明屏,实现视频会议/演讲的全息影像播放,结合视频流背景分割技术,使视频会议/演讲的全息影像播放具有较强真实感和科技感,通过逼真的视觉效果,拉近参会者/演讲者与观众的沟通距离。通过较低的成本和设备复杂度,解决了目前视频会议/演讲存在的距离感问题。
在本公开实施例中,通过视频采集设备对参会人/演讲人进行视频录制,获取到的视频通过视频流背景分割技术抠掉背景部分,提取人物部分,然后通过OLED透明屏进行播放。可用于直播和录播两种形式,并可通过麦克风和参会人进行远程语音互动。本公开实施例中的特定对象可以是参会人/演讲人。
基于前述的实施例,本公开实施例提供一种控制装置和显示装置,该装置包括所包括的各单元、以及各单元所包括的各模块,可以通过控制设备/透明显示器中的处理器来实现;当然也可通过具体的逻辑电路实现。
图11为本公开实施例提供的一种控制装置的组成结构示意图,如图11所示,控制装置1100包括:
获取单元1101,用于获取初始视频;
确定单元1102,用于基于初始视频,确定包括特定对象的视频帧;
提取单元1103,用于提取视频帧中包括特定对象的前景部分,得到特定视频;
输出单元1104,用于向透明显示器输出特定视频,以使透明显示器显示特定视频。
在一些实施例中,确定单元1102,还用于获取初始视频的显示参数和透明显示器的显示参数;基于初始视频的显示参数和透明显示器的显示参数,对初始视频进行处理,得到目标视频;确定目标视频中的包括特定对象的视频帧。
在一些实施例中,显示参数包括:宽高比;确定单元1102,还用于基于初始视频的宽高比和透明显示器的显示尺寸的宽高比,对初始视频进行处理,得到与显示尺寸的宽高比相同的目标视频;其中,对初始视频进行处理,包括以下至少之一:在宽度方向上减少初始视频的像素数量或像素间距;在宽度方向上增加初始视频的像素数量或像素间距;在高度方向上减少初始视频的像素数量或像素间距;在高度方向上增加初始视频的像素数量或像素间距。
在一些实施例中,初始视频的显示参数包括:单位区域内的第一像素数量;透明显示器的显示参数包括:单位区域内的第二像素数量;确定单元1102,还用于在第一像素数量和第二像素数量不一致的情况下,通过增加像素和/或减少像素的方式调整初始视频的第一像素数量为第二像素数量,得到目标视频。
在一些实施例中,初始视频的显示参数包括:第一显示帧率;透明显示器的显示参数包括:第二显示帧率;确定单元1102,还用于在第一显示帧率大于第二显示帧率的情况下,降低初始视频的帧率至第二显示帧率,得到目标视频;在第一显示帧率小于第二显示帧率的情况下,升高初始视频的帧率至第二显示帧率,得到目标视频。
在一些实施例中,确定单元1102,还用于监测控制设备与透明显示器之间的当前通信链路质量;获取控制设备中存储的第一对应关系,第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系;基于当前通信链路质量和第一对应关系,确定透明显示器的当前显示分辨率和/或当前显示帧率;提取单元1103,还用于提取视频帧中包括特定对象的前景部分,得到前景视频;调整前景视频的分辨率为当前显示分辨率和/或前景视频的显示帧率为当前显示帧率,得到特定视频。
在一些实施例中,提取单元1103,还用于提取视频帧中包括特定对象的前景部分,得到前景视频;获取当前环境光亮度;当前环境光亮度为控制设备中的环境光传感器当前检测的光亮度,或者,当前环境光亮度为控制设备接收透明显示器发送的当前检测的光亮度;基于当前环境光亮度,对前景视频的显示参数进行调整,得到特定视频。
在一些实施例中,提取单元1103,还用于提取视频帧中包括特定对象的前景部分,获得前景视频;提取初始视频中的第一声音信息;接收透明显示器发送的透明显示器中至少两个播放器的位置信息;基于位置信息,调整第一声音信息为第二声音信息;融合前景视频和第二声音信息,得到特定视频。
在一些实施例中,提取单元1103,还用于提取视频帧中包括特定对象的前景部分,获得前景视频;对前景视频的每一帧图像中的特定对象进行美化处理,得到特定视频;其中,美化处理包括以下至少之一:添加滤镜处理、美颜处理、添加贴纸处理、添加涂鸦处理。
在一些实施例中,确定单元1102,还用于对初始视频或特定视频中特定对象的运动行为进行分析,得到特定对象的运动轨迹信息;
在一些实施例中,控制装置1100还包括:控制单元1105,用于基于运动轨迹信息,控制透明显示器的透明显示屏相对透明显示器的底座移动。
图12为本公开实施例提供的一种显示装置的组成结构示意图,如图11所示,显示装置1200包括:
接收单元1201,用于接收控制设备发送的特定视频,特定视频包括特定对象的画面,特定视频由包括特定对象的视频帧中提取的包括特定对象的前景部分而得到;显示单元1202,用于显示特定视频。
在一些实施例中,接收单元1201,还用于接收控制设备发送的对特定对象的运动行为进行分析而得到的特定对象的运动轨迹信息;显示装置1200还包括:控制单元1203,用于基于运动轨迹信息,控制透明显示器的透明显示屏相对透明显示器的底座移动。
在一些实施例中,显示装置1200还包括:确定单元1204,用于获取透明显示器中的环境光传感器检测的当前环境光亮度;获取透明显示器中存储的第二对应关系,第二对应关系包括:显示亮度和/或显示模式与环境光亮度的数值范围之间的对应关系;基于当前环境光亮度和第二对应关系,确定透明显示器的当前显示亮度和/或当前显示模式;显示单元1202,还用于以当前显示亮度和/或当前显示模式显示特定视频。
在一些实施例中,确定单元1204,还用于监测控制设备与透明显示器之间的当前通信链路质量;获取透明显示器中存储的第一对应关系,第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系;基于当前通信链路质量和第一对应关系,确定透明显示器的当前显示分辨率和/或当前显示帧率;显示单元1202,还用于以当前显示分辨率和/或当前显示帧率显示特定视频。
在一些实施例中,确定单元1204,还用于检测作用于透明显示器中的目标位置的触发指令,确定与触发指令匹配的特效图像;显示单元1202,还用于在特定视频上显示特效图像。
以上装置实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本公开装置实施例中未披露的技术细节,请参照本公开方法实施例的描述而理解。
需要说明的是,本公开实施例中,如果以软件功能模块的形式实现上述的视频显示方法,并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本公开实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台控制装置/透明显示器执行本公开各个实施例方法的全部或部分。
图13为本公开实施例提供的一种电子设备的硬件实体示意图,如图13所示,该控制设备1300的硬件实体包括:处理器1301和存储器1302,其中,存储器1302存储有可在处理器1301上运行的计算机程序,处理器1301执行程序时实现上述任一实施例的方法中的步骤。
电子设备可以包括上述任一实施例中的控制设备或透明显示器。
在一些实施例中,透明显示器可以包透明显示屏(图未示出)和底座(图未示出)。处理器1401和存储器1402可以设置在透明显示屏或底座中。
上述的存储器1302可以存储有可在处理器1301上运行的计算机程序,存储器1302配置为存储由处理器1301可执行的指令和应用,还可以缓存待处理器1301以及控制设备/透明显示器中各模块待处理或已经处理的数据(例如,图像数据、音频数据、语音通信数据和视频通信数据),可以通过闪存(FLASH)或随机访问存储器(Random Access Memory,RAM)实现。
处理器1301执行程序时实现上述任一项的视频显示方法的步骤。处理器1301通常控制本公开实施例中的控制设备/透明显示器的总体操作。
本公开实施例提供一种计算机可读存储介质,计算机可读存储介质存储有一个或者多个程序,该一个或者多个程序可被一个或者多个处理器执行,以实现如上任一实施例的视频显示方法的步骤。
这里需要指出的是:以上存储介质和设备实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本公开存储介质和设备实施例中未披露的技术细节,请参照本公开方法实施例的描述而理解。
上述处理器可以为特定用途集成电路(Application Specific IntegratedCircuit,ASIC)、数字信号处理器(Digital Signal Processor,DSP)、数字信号处理装置(Digital Signal Processing Device,DSPD)、可编程逻辑装置(Programmable LogicDevice,PLD)、现场可编程门阵列(Field Programmable Gate Array,FPGA)、中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器中的至少一种。可以理解地,实现上述处理器功能的电子器件还可以为其它,本公开实施例不作具体限定。
上述计算机存储介质/存储器/存储介质可以是只读存储器(Read Only Memory,ROM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性随机存取存储器(Ferromagnetic Random Access Memory,FRAM)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(Compact Disc Read-Only Memory,CD-ROM)等存储器;也可以是包括上述存储器之一或任意组合的各种设备,如移动电话、计算机、平板设备、个人数字助理等。
应理解,说明书通篇中提到的“一个实施例”或”一些实施例”或“本公开实施例”或“前述实施例”意味着与实施例有关的特定特征、结构或特性包括在本公开的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一些实施例中”或“本公开实施例”或“前述实施例”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本公开的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本公开实施例的实施过程构成任何限定。上述本公开实施例序号仅仅为了描述,不代表实施例的优劣。
在未做特殊说明的情况下,控制设备/透明显示器执行本公开实施例中的任一步骤,可以是控制设备/透明显示器的处理器执行该步骤。除非特殊说明,本公开实施例并不限定控制设备/透明显示器执行上述步骤的先后顺序。还需说明的是,本公开实施例中的任一步骤是控制设备/透明显示器可以独立执行的,即控制设备/透明显示器执行上述实施例中的任一步骤时,可以不依赖于其它步骤的执行。
在本公开所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本公开各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本公开所提供的几个方法实施例中所揭露的方法,在不冲突的情况下可以任意组合,得到新的方法实施例。本公开所提供的几个产品实施例中所揭露的特征,在不冲突的情况下可以任意组合,得到新的产品实施例。本公开所提供的几个方法或设备实施例中所揭露的特征,在不冲突的情况下可以任意组合,得到新的方法实施例或设备实施例。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本公开上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本公开实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本公开各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
在本公开实施例中,不同实施例中相同步骤和相同内容的说明,可以互相参照。在本公开实施例中,术语“并”不对步骤的先后顺序造成影响,例如,控制设备/透明显示器执行A,并执行B,可以是控制设备/透明显示器先执行A,再执行B,或者是控制设备/透明显示器先执行B,再执行A,或者是控制设备/透明显示器执行A的同时执行B。
以上所述,仅为本公开的实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以所述权利要求的保护范围为准。

Claims (19)

1.一种视频显示方法,其特征在于,应用于控制设备,包括:
获取初始视频;
基于所述初始视频,确定包括特定对象的视频帧;
提取所述视频帧中包括所述特定对象的前景部分,得到特定视频;
向透明显示器输出所述特定视频,以使所述透明显示器显示所述特定视频。
2.根据权利要求1所述的方法,其特征在于,所述基于所述初始视频,确定包括特定对象的视频帧,包括:
获取所述初始视频的显示参数和所述透明显示器的显示参数;
基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频;
确定所述目标视频中的所述包括特定对象的视频帧。
3.根据权利要求2所述的方法,其特征在于,所述显示参数包括:宽高比;
所述基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频,包括:基于所述初始视频的宽高比和所述透明显示器的显示尺寸的宽高比,对所述初始视频进行处理,得到与所述显示尺寸的宽高比相同的目标视频;
其中,对所述初始视频进行处理,包括以下至少之一:
在宽度方向上减少所述初始视频的像素数量或像素间距;
在宽度方向上增加所述初始视频的像素数量或像素间距;
在高度方向上减少所述初始视频的像素数量或像素间距;
在高度方向上增加所述初始视频的像素数量或像素间距。
4.根据权利要求2或3所述的方法,其特征在于,所述初始视频的显示参数包括:单位区域内的第一像素数量;所述透明显示器的显示参数包括:单位区域内的第二像素数量;
所述基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频,包括:
在所述第一像素数量和所述第二像素数量不一致的情况下,通过增加像素和/或减少像素的方式调整所述初始视频的所述第一像素数量为所述第二像素数量,得到所述目标视频。
5.根据权利要求2至4任一所述的方法,其特征在于,所述初始视频的显示参数包括:第一显示帧率;所述透明显示器的显示参数包括:第二显示帧率;
所述基于所述初始视频的显示参数和所述透明显示器的显示参数,对所述初始视频进行处理,得到目标视频,包括:
在所述第一显示帧率大于所述第二显示帧率的情况下,降低所述初始视频的帧率至所述第二显示帧率,得到所述目标视频;
在所述第一显示帧率小于所述第二显示帧率的情况下,升高所述初始视频的帧率至所述第二显示帧率,得到所述目标视频。
6.根据权利要求1至5任一项所述的方法,其特征在于,所述方法还包括:
监测所述控制设备与所述透明显示器之间的当前通信链路质量;
获取所述控制设备中存储的第一对应关系,所述第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系;
基于所述当前通信链路质量和所述第一对应关系,确定所述透明显示器的当前显示分辨率和/或当前显示帧率;
所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:
提取所述视频帧中包括所述特定对象的前景部分,得到前景视频;
调整所述前景视频的分辨率为所述当前显示分辨率和/或所述前景视频的显示帧率为所述当前显示帧率,得到所述特定视频。
7.根据权利要求1至6任一项所述的方法,其特征在于,所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:
提取所述视频帧中包括所述特定对象的前景部分,得到前景视频;
获取当前环境光亮度;所述当前环境光亮度为所述控制设备中的环境光传感器当前检测的光亮度,或者,所述当前环境光亮度为所述控制设备接收所述透明显示器发送的当前检测的光亮度;
基于所述当前环境光亮度,对所述前景视频的显示参数进行调整,得到所述特定视频。
8.根据权利要求1至7任一项所述的方法,其特征在于,所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:
提取所述视频帧中包括所述特定对象的前景部分,获得前景视频;
提取所述初始视频中的第一声音信息;
接收所述透明显示器发送的所述透明显示器中至少两个播放器的位置信息;
基于所述位置信息,调整所述第一声音信息为第二声音信息;
融合所述前景视频和所述第二声音信息,得到所述特定视频。
9.根据权利要求1至8任一项所述的方法,其特征在于,所述提取所述视频帧中包括所述特定对象的前景部分,得到特定视频,包括:
提取所述视频帧中包括所述特定对象的前景部分,获得前景视频;
对所述前景视频的每一帧图像中的所述特定对象进行美化处理,得到所述特定视频;其中,所述美化处理包括以下至少之一:添加滤镜处理、美颜处理、添加贴纸处理、添加涂鸦处理。
10.根据权利要求1至9任一项所述的方法,其特征在于,所述方法还包括:
对所述初始视频或所述特定视频中所述特定对象的运动行为进行分析,得到所述特定对象的运动轨迹信息;
基于所述运动轨迹信息,控制所述透明显示器的透明显示屏相对所述透明显示器的底座移动。
11.一种视频显示方法,其特征在于,应用于透明显示器,包括:
接收控制设备发送的特定视频,所述特定视频包括特定对象的画面,所述特定视频由包括所述特定对象的视频帧中提取的包括所述特定对象的前景部分而得到;
显示所述特定视频。
12.根据权利要求11所述的方法,其特征在于,所述方法还包括:
接收所述控制设备发送的对所述特定对象的运动行为进行分析而得到的所述特定对象的运动轨迹信息;
基于所述运动轨迹信息,控制所述透明显示器的透明显示屏相对所述透明显示器的底座移动。
13.根据权利要求11或12所述的方法,其特征在于,所述方法还包括:
获取所述透明显示器中的环境光传感器检测的当前环境光亮度;
获取所述透明显示器中存储的第二对应关系,所述第二对应关系包括:显示亮度和/或显示模式与环境光亮度的数值范围之间的对应关系;
基于所述当前环境光亮度和所述第二对应关系,确定所述透明显示器的当前显示亮度和/或当前显示模式;
所述显示所述特定视频,包括:以所述当前显示亮度和/或所述当前显示模式显示所述特定视频。
14.根据权利要求11或12所述的方法,其特征在于,所述方法还包括:
监测所述控制设备与所述透明显示器之间的当前通信链路质量;
获取所述透明显示器中存储的第一对应关系,所述第一对应关系包括:显示分辨率和/或显示帧率与通信链路质量的数值范围之间的对应关系;
基于所述当前通信链路质量和所述第一对应关系,确定所述透明显示器的当前显示分辨率和/或当前显示帧率;
所述显示所述特定视频,包括:以所述当前显示分辨率和/或当前显示帧率显示所述特定视频。
15.根据权利要求11至14任一项所述的方法,其特征在于,所述方法还包括:
检测作用于所述透明显示器中的目标位置的触发指令,确定与所述触发指令匹配的特效图像;
在所述特定视频上显示所述特效图像。
16.一种控制装置,其特征在于,包括:
获取单元,用于获取初始视频;
确定单元,用于基于所述初始视频,确定包括特定对象的视频帧;
提取单元,用于提取所述视频帧中包括所述特定对象的前景部分,得到特定视频;
输出单元,用于向透明显示器输出所述特定视频,以使所述透明显示器显示所述特定视频。
17.一种显示装置,其特征在于,包括:
接收单元,用于接收控制设备发送的特定视频,所述特定视频包括特定对象的画面,所述特定视频由包括所述特定对象的视频帧中提取的包括所述特定对象的前景部分而得到;
显示单元,用于显示所述特定视频。
18.一种电子设备,其特征在于,所述电子设备包括:存储器和处理器,
所述存储器存储有可在处理器上运行的计算机程序,
所述处理器执行所述程序时实现权利要求1至10任一项所述方法中的步骤,或者,所述处理器执行所述程序时实现权利要求11至15任一项所述方法中的步骤。
19.一种计算机存储介质,其特征在于,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现权利要求1至10任一项所述方法中的步骤,或者,以实现权利要求11至15所述方法中的步骤。
CN202011540327.XA 2020-12-23 2020-12-23 视频显示方法、装置、电子设备及计算机存储介质 Pending CN112672093A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011540327.XA CN112672093A (zh) 2020-12-23 2020-12-23 视频显示方法、装置、电子设备及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011540327.XA CN112672093A (zh) 2020-12-23 2020-12-23 视频显示方法、装置、电子设备及计算机存储介质

Publications (1)

Publication Number Publication Date
CN112672093A true CN112672093A (zh) 2021-04-16

Family

ID=75409135

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011540327.XA Pending CN112672093A (zh) 2020-12-23 2020-12-23 视频显示方法、装置、电子设备及计算机存储介质

Country Status (1)

Country Link
CN (1) CN112672093A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104521227A (zh) * 2012-08-03 2015-04-15 三星电子株式会社 图像处理方法和设备
US20150363003A1 (en) * 2013-01-22 2015-12-17 Crunchfish Ab Scalable input from tracked object
CN105898186A (zh) * 2015-02-16 2016-08-24 联发科技股份有限公司 用于视频会议的显示方法及视频会议系统
CN106992974A (zh) * 2017-03-17 2017-07-28 腾讯科技(深圳)有限公司 一种直播视频信息监控方法、装置和设备
CN107609490A (zh) * 2017-08-21 2018-01-19 美的集团股份有限公司 控制方法、控制装置、智能镜子和计算机可读存储介质
CN111182349A (zh) * 2019-12-30 2020-05-19 星络智能科技有限公司 存储介质、交互设备及其视频播放方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104521227A (zh) * 2012-08-03 2015-04-15 三星电子株式会社 图像处理方法和设备
US20150363003A1 (en) * 2013-01-22 2015-12-17 Crunchfish Ab Scalable input from tracked object
CN105898186A (zh) * 2015-02-16 2016-08-24 联发科技股份有限公司 用于视频会议的显示方法及视频会议系统
CN106992974A (zh) * 2017-03-17 2017-07-28 腾讯科技(深圳)有限公司 一种直播视频信息监控方法、装置和设备
CN107609490A (zh) * 2017-08-21 2018-01-19 美的集团股份有限公司 控制方法、控制装置、智能镜子和计算机可读存储介质
CN111182349A (zh) * 2019-12-30 2020-05-19 星络智能科技有限公司 存储介质、交互设备及其视频播放方法

Similar Documents

Publication Publication Date Title
CN106789991B (zh) 一种基于虚拟场景的多人互动网络直播方法及系统
JP7368886B2 (ja) 情報処理システム、情報処理方法、および情報処理プログラム
CN108986199B (zh) 虚拟模型处理方法、装置、电子设备及存储介质
US9930270B2 (en) Methods and apparatuses for controlling video content displayed to a viewer
US9774896B2 (en) Network synchronized camera settings
CN106730815B (zh) 一种易实现的体感互动方法及系统
US10785513B2 (en) Methods and systems for using 2D captured imagery of a scene to provide media content
JP2016537903A (ja) バーチャルリアリティコンテンツのつなぎ合わせおよび認識
WO2009112967A1 (en) Method and apparatus for modifying a digital image
CN111757137A (zh) 一种基于单镜头直播视频的多路特写播放方法及装置
CN114296949A (zh) 一种虚拟现实设备及高清晰度截屏方法
CN108986117B (zh) 视频图像分割方法及装置
CN110730340B (zh) 基于镜头变换的虚拟观众席展示方法、系统及存储介质
CN114531564A (zh) 处理方法及电子设备
CN113365130B (zh) 直播显示方法、直播视频获取方法及相关装置
JP6559375B1 (ja) コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム
CN110198457B (zh) 视频播放方法及其设备、系统、存储介质、终端、服务器
CN112672093A (zh) 视频显示方法、装置、电子设备及计算机存储介质
CN114625468A (zh) 增强现实画面的展示方法、装置、计算机设备及存储介质
CN114915798A (zh) 实时视频生成方法、多摄像头直播方法及装置
TWI836141B (zh) 即時三維影像顯示的直播方法
TWI774063B (zh) 三維直播影像的橫向縱向控制裝置
CN114827477B (zh) 延时摄影的方法、装置、电子设备及介质
JP2024051665A (ja) 動画合成システム、動画合成方法およびプログラム
Woo et al. Enhancing Viewer Experience: Combining TV and Projector Technologies for a New Era of Entertainment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210416