CN111901581A - 基于2d视频转3d效果的视频像素处理系统及方法 - Google Patents

基于2d视频转3d效果的视频像素处理系统及方法 Download PDF

Info

Publication number
CN111901581A
CN111901581A CN202010886056.7A CN202010886056A CN111901581A CN 111901581 A CN111901581 A CN 111901581A CN 202010886056 A CN202010886056 A CN 202010886056A CN 111901581 A CN111901581 A CN 111901581A
Authority
CN
China
Prior art keywords
video
module
pixel
yuv
format
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010886056.7A
Other languages
English (en)
Inventor
骆泽坡
孙雷
孙向华
高建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Staryea Network Technology Co ltd
Original Assignee
Nanjing Staryea Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Staryea Network Technology Co ltd filed Critical Nanjing Staryea Network Technology Co ltd
Priority to CN202010886056.7A priority Critical patent/CN111901581A/zh
Publication of CN111901581A publication Critical patent/CN111901581A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/261Image signal generators with monoscopic-to-stereoscopic image conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/275Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明实施例公开了视频处理技术领域的基于2D视频转3D效果的视频像素处理系统及方法。本发明的基于2D视频转3D效果的视频像素处理系统,包括视频载入模块、视频播放模块、视频解码模块、YUV数据流获取模块、视频像素处理模块和终端显示模块;所述视频载入模块,用于载入任意格式的原始视频文件;所述视频播放模块,用于对载入的原始视频文件进行播放;所述视频解码模块,用于将所述视频播放模块中播放的原始视频文件进行格式转换。本发明通过对特定效果视频文件执行像素处理技术,将其中单一的背景像素提取并替换,使原2D视频播放融入背景,呈现透明,立体,进而实现视频浮层现象,达到3D效果。

Description

基于2D视频转3D效果的视频像素处理系统及方法
技术领域
本发明实施例涉及视频处理技术领域,尤其涉及基于2D视频转3D效果的视频像素处理系统及方法。
背景技术
2D又叫平面图形。2D图形内容只有水平的X轴向与垂直的Y轴向,传统手工漫画、插画等都属于2D类。它的立体感,光影都是人工绘制模拟出来的,二维绘制软件有photoshop、CorelDraw、Painter等FLASH是平面动画软件;而三维视频是利用3D技术制作成的视频数据文件。
现有的在进行2D视频在终端设备播放器播放时,只能实现单一的2D效果播放,不便于实现2D视频对3D效果的转化,降低了视频播放时的视觉冲击效果。
基于此,本发明设计了基于2D视频转3D效果的视频像素处理系统及方法,以解决上述问题。
发明内容
本发明实施例提供基于2D视频转3D效果的视频像素处理系统及方法,以解决背景技术中提及的技术问题。
本发明实施例提供基于2D视频转3D效果的视频像素处理系统。在一种可行的方案中,包括视频载入模块、视频播放模块、视频解码模块、YUV数据流获取模块、视频像素处理模块和终端显示模块;
所述视频载入模块,用于载入任意格式的原始视频文件;
所述视频播放模块,用于对载入的原始视频文件进行播放;
所述视频解码模块,用于将所述视频播放模块中播放的原始视频文件进行格式转换;
所述YUV数据流获取模块,用于获取所述视频解码模块格式转换后的视频像素数据;
所述视频像素处理模块,用于提取视频像素点的RGB值,并将待替换像素替换为透明像素后,再将视频码流重新整合;
所述终端显示模块,用于将重新整合的视频码流进行终端显示。
本发明实施例提供基于2D视频转3D效果的视频像素处理系统。在一种可行的方案中,所述视频解码模块包括解协议模块和解封装模块;
所述解协议模块,用于将流媒体协议数据解析为标准的相应封装格式数据;
所述解封装模块,用于将输入的封装格式的数据分解为音频流压缩编码数据和视频流压缩编码数据。
本发明实施例提供基于2D视频转3D效果的视频像素处理系统。在一种可行的方案中,所述视频像素处理模块包括视频像素解析模块、视频像素提取模块和视频像素替换模块;
所述视频像素解析模块,用于对YUV码流进行编码和解析,且根据采样格式从码流中还原每个像素点的YUV值;
所述视频像素提取模块,用于根据YUV与RGB转换公式提取每一个像素的RGB值;
所述视频像素替换模块,用于将要替换的像素全部替换成透明像素,再将替换像素后的视频码流重新整合。
本发明实施例还提供基于2D视频转3D效果的视频像素处理方法。在一种可行的方案中,包括如下步骤:
S1、制作并输入任意格式的单个视频文件,且在无画面位置填充为单一颜色;
S2、将该文件在播放过程中,进行解协议和解封装,并通过视频解码将原始视频格式文件转换后获取YUV数据流;
S3、对YUV码流进行编码和解析,通过采样格式从码流中还原每个像素的YUV值,并根据YUV和RGB转换公司提取每个像素点的RGB值;
S4、提取视频像素点的RGB值后,根据要替换的像素,将其全部替换成透明像素,后将视频码流重新整合,输出至显示终端。
本发明实施例还提供基于2D视频转3D效果的视频像素处理方法。在一种可行的方案中,所述S3中采样的方式包括YUV4:4:4、YUV4:2:2或YUV4:2:0中的其中一种。
基于上述方案可知,本发明的有益效果为:
1、本发明通过对特定效果视频文件执行像素处理技术,将其中单一的背景像素提取并替换,使原2D视频播放融入背景,呈现透明,立体,进而实现视频浮层现象,达到3D效果;
2、本发明通过对终端设备播放器适当改造,不影响整体播放流程,对资源消耗要求低,且可以让普通2D视频呈现出3D效果,让视频效果更直观,视觉冲击效果强。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明视频像素处理系统的系统框架图;
图2为本发明视频解码模块的系统分图;
图3为本发明视频像素处理方法的流程框架图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,也可以是成一体;可以是机械连接,也可以是电连接,也可以是通讯连接;可以是直接连接,也可以通过中间媒介的间接连接,可以是两个元件内部的连通或两个元件的相互作用关系,除非另有明确的限定。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
下面以具体地实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
图1-2为本发明实施例一中的基于2D视频转3D效果的视频像素处理系统,本实施例的基于2D视频转3D效果的视频像素处理系统;包括视频载入模块、视频播放模块、视频解码模块、YUV数据流获取模块、视频像素处理模块和终端显示模块;
所述视频载入模块,用于载入任意格式的原始视频文件;
所述视频播放模块,用于对载入的原始视频文件进行播放;
所述视频解码模块,用于将所述视频播放模块中播放的原始视频文件进行格式转换;
所述YUV数据流获取模块,用于获取所述视频解码模块格式转换后的视频像素数据;
所述视频像素处理模块,用于提取视频像素点的RGB值,并将待替换像素替换为透明像素后,再将视频码流重新整合;
所述终端显示模块,用于将重新整合的视频码流进行终端显示。
通过上述内容不难发现,在利用本发明的基于2D视频转3D效果的视频像素处理系统将2D原始视频文件对3D效果进行转换时,通过利用视频载入模块输入一个任意格式的2D视频文件,且此视频文件的格式可以为mp4、avi等,通过利用视频播放模块对载入2D视频进行系统内的播放工作,并且在播放时,通过利用视频解码模块将原始视频格式的文件转换成另一种视频格式文件,从而通过YUV数据流获取模块获取到视频像素数据,即为YUV数据流,再利用视频像素处理模块根据YUV和RGB转换公式,查找每个像素点的RGB值,再将要替换像素例如黑色像素转换成透明像素,再进行重新整合后进行显示终端的播放显示工作。
需要补充的是,YUV是一种颜色编码方法。常使用在各个视频处理组件中。YUV在对照片或视频编码时,考虑到人类的感知能力,允许降低色度的带宽。YUV是编译true-color颜色空间的种类,Y'UV,YUV,YCbCr,YPbPr等专有名词都可以称为YUV,彼此有重叠。“Y”表示明亮度,“U”和“V”则是色度、浓度。
可选地,在本实施例中,所述视频解码模块包括解协议模块和解封装模块;
所述解协议模块,用于将流媒体协议数据解析为标准的相应封装格式数据;
所述解封装模块,用于将输入的封装格式的数据分解为音频流压缩编码数据和视频流压缩编码数据。值得说明的是,在本实施例中,视音频在网络上传播的时候,常常采用各种流媒体协议,例如HTTP,RTMP,或是MMS等等。这些协议在传输视音频数据的同时,也会传输一些信令数据。这些信令数据包括对播放的控制(播放,暂停,停止),或者对网络状态的描述等。解协议的过程中会去除掉信令数据而只保留视音频数据。例如,采用RTMP协议传输的数据,经过解协议操作后,输出FLV格式的数据;封装格式种类很多,例如MP4,MKV,RMVB,TS,FLV,AVI等等,它的作用就是将已经压缩编码的视频数据和音频数据按照一定的格式放到一起。例如,FLV格式的数据,经过解封装操作后,输出H.264编码的视频码流和AAC编码的音频码流。
此外,所述视频像素处理模块包括视频像素解析模块、视频像素提取模块和视频像素替换模块;
所述视频像素解析模块,用于对YUV码流进行编码和解析,且根据采样格式从码流中还原每个像素点的YUV值;
所述视频像素提取模块,用于根据YUV与RGB转换公式提取每一个像素的RGB值;
所述视频像素替换模块,用于将要替换的像素全部替换成透明像素,再将替换像素后的视频码流重新整合;在视频像素处理过程中,通过利用YUV与RGB之间的转换公式可以实现对每一个像素点的RGB值提取工作,从而便于实现将待替换的像素替换为透明像素,进行终端显示。
图3为本发明实施例二中的基于2D视频转3D效果的视频像素处理方法,实施例二是基于实施例一的改进方案,包括如下步骤:
S1、制作并输入任意格式的单个视频文件,且在无画面位置填充为单一颜色;
S2、将该文件在播放过程中,进行解协议和解封装,并通过视频解码将原始视频格式文件转换后获取YUV数据流;
S3、对YUV码流进行编码和解析,通过采样格式从码流中还原每个像素的YUV值,并根据YUV和RGB转换公司提取每个像素点的RGB值;
S4、提取视频像素点的RGB值后,根据要替换的像素,将其全部替换成透明像素,后将视频码流重新整合,输出至显示终端。
在利用本发明的基于2D视频转3D效果的视频像素处理方法对视频像素处理工作时,将输入的视频文件进行数据的解协议,并且对封装格式数据的解封装,从而获取到视频码流数据,再对视频进行解码处理,进而得到视频像素数据,即为YUV数据流,再通过对视频像素处理,将视频像素进行替换工作,后再重新整合,实现3D效果的2D视频终端显示。
进一步的,所述S3中采样的方式包括YUV4:4:4、YUV4:2:2或YUV4:2:0中的其中一种;在对YUV码流进行解码和解析时,YUV码流的存储格式与其采样的方式密切相关,且YUV4:4:4、YUV4:2:2或YUV4:2:0均为主流的采样方式。
在本发明中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一特征和第二特征直接接触,或第一特征和第二特征通过中间媒介间接接触。
而且,第一特征在第二特征“之上”、“上方”和“上面”可以是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度低于第二特征。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”或“一些示例”等的描述,意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任意一个或者多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (5)

1.基于2D视频转3D效果的视频像素处理系统,其特征在于,包括视频载入模块、视频播放模块、视频解码模块、YUV数据流获取模块、视频像素处理模块和终端显示模块;
所述视频载入模块,用于载入任意格式的原始视频文件;
所述视频播放模块,用于对载入的原始视频文件进行播放;
所述视频解码模块,用于将所述视频播放模块中播放的原始视频文件进行格式转换;
所述YUV数据流获取模块,用于获取所述视频解码模块格式转换后的视频像素数据;
所述视频像素处理模块,用于提取视频像素点的RGB值,并将待替换像素替换为透明像素后,再将视频码流重新整合;
所述终端显示模块,用于将重新整合的视频码流进行终端显示。
2.根据权利要求1所述的基于2D视频转3D效果的视频像素处理系统,其特征在于,所述视频解码模块包括解协议模块和解封装模块;
所述解协议模块,用于将流媒体协议数据解析为标准的相应封装格式数据;
所述解封装模块,用于将输入的封装格式的数据分解为音频流压缩编码数据和视频流压缩编码数据。
3.根据权利要求1所述的基于2D视频转3D效果的视频像素处理系统,其特征在于,所述视频像素处理模块包括视频像素解析模块、视频像素提取模块和视频像素替换模块;
所述视频像素解析模块,用于对YUV码流进行编码和解析,且根据采样格式从码流中还原每个像素点的YUV值;
所述视频像素提取模块,用于根据YUV与RGB转换公式提取每一个像素的RGB值;
所述视频像素替换模块,用于将要替换的像素全部替换成透明像素,再将替换像素后的视频码流重新整合。
4.基于2D视频转3D效果的视频像素处理方法,其特征在于,包括如下步骤:
S1、制作并输入任意格式的单个视频文件,且在无画面位置填充为单一颜色;
S2、将该文件在播放过程中,进行解协议和解封装,并通过视频解码将原始视频格式文件转换后获取YUV数据流;
S3、对YUV码流进行编码和解析,通过采样格式从码流中还原每个像素的YUV值,并根据YUV和RGB转换公司提取每个像素点的RGB值;
S4、提取视频像素点的RGB值后,根据要替换的像素,将其全部替换成透明像素,后将视频码流重新整合,输出至显示终端。
5.根据权利要求4所述的基于2D视频转3D效果的视频像素处理方法,其特征在于,所述S3中采样的方式包括YUV4:4:4、YUV4:2:2或YUV4:2:0中的其中一种。
CN202010886056.7A 2020-08-28 2020-08-28 基于2d视频转3d效果的视频像素处理系统及方法 Pending CN111901581A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010886056.7A CN111901581A (zh) 2020-08-28 2020-08-28 基于2d视频转3d效果的视频像素处理系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010886056.7A CN111901581A (zh) 2020-08-28 2020-08-28 基于2d视频转3d效果的视频像素处理系统及方法

Publications (1)

Publication Number Publication Date
CN111901581A true CN111901581A (zh) 2020-11-06

Family

ID=73226108

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010886056.7A Pending CN111901581A (zh) 2020-08-28 2020-08-28 基于2d视频转3d效果的视频像素处理系统及方法

Country Status (1)

Country Link
CN (1) CN111901581A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105051791A (zh) * 2013-03-25 2015-11-11 株式会社吉奥技术研究所 三维图像输出装置和背景图像生成装置
WO2017222258A1 (ko) * 2016-06-21 2017-12-28 (주)해든브릿지 3d 깊이 카메라를 이용한 다자간 영상 대화 시스템 및 방법
CN107644399A (zh) * 2016-07-21 2018-01-30 中电科海洋信息技术研究院有限公司 遥感影像处理方法
CN109272565A (zh) * 2017-07-18 2019-01-25 腾讯科技(深圳)有限公司 动画播放方法、装置、存储介质以及终端
CN109729417A (zh) * 2019-03-28 2019-05-07 深圳市酷开网络科技有限公司 一种视频透明播放处理方法、智能电视及存储介质
CN109819182A (zh) * 2018-12-18 2019-05-28 深圳市潮流网络技术有限公司 一种视频背景替换方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105051791A (zh) * 2013-03-25 2015-11-11 株式会社吉奥技术研究所 三维图像输出装置和背景图像生成装置
WO2017222258A1 (ko) * 2016-06-21 2017-12-28 (주)해든브릿지 3d 깊이 카메라를 이용한 다자간 영상 대화 시스템 및 방법
CN107644399A (zh) * 2016-07-21 2018-01-30 中电科海洋信息技术研究院有限公司 遥感影像处理方法
CN109272565A (zh) * 2017-07-18 2019-01-25 腾讯科技(深圳)有限公司 动画播放方法、装置、存储介质以及终端
CN109819182A (zh) * 2018-12-18 2019-05-28 深圳市潮流网络技术有限公司 一种视频背景替换方法
CN109729417A (zh) * 2019-03-28 2019-05-07 深圳市酷开网络科技有限公司 一种视频透明播放处理方法、智能电视及存储介质

Similar Documents

Publication Publication Date Title
US11170556B2 (en) Apparatus for transmitting point cloud data, a method for transmitting point cloud data, an apparatus for receiving point cloud data and a method for receiving point cloud data
US11758187B2 (en) Methods, devices and stream for encoding and decoding volumetric video
EP3926959A1 (en) Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method
CN109348226B (zh) 一种图片文件处理方法及智能终端
TWI728633B (zh) 用於處理包括以360度虛擬實境投影佈局封裝的至少一個投影面和至少一個填充區域的基於投影的幀的方法
US9811753B2 (en) Systems and methods for encoding light field image files
JP5180374B2 (ja) 色域スケーラビリティ技術
EP3707891B1 (en) Method and device for generating a second image from a first image
CN109831668B (zh) 数据压缩方法及装置、数据编码/解码方法及装置
CN102484734A (zh) 根据三维输入格式转换视频数据
CN102474662A (zh) 根据无线显示协议制备视频数据
EP3383017A1 (en) Method and device for color gamut mapping
CN102761738A (zh) 基于混合色度采样率的图像压缩方法和装置
EP4072132A1 (en) Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method
CN111193928A (zh) 用于传递视频中的感兴趣区域信息的方法和设备
CN111246208B (zh) 视频处理方法、装置及电子设备
CN111406404B (zh) 获得视频文件的压缩方法、解压缩方法、系统及存储介质
EP2526689B1 (en) Method for transporting information and/or application data inside a digital video stream, and relative devices for generating and playing such video stream
CN111901581A (zh) 基于2d视频转3d效果的视频像素处理系统及方法
CN113938572A (zh) 图片传输方法、显示方法、装置、电子设备及存储介质
KR20160058153A (ko) 압축된 및 압축해제된 디지털 이미지들 및 비디오의 디스플레이에서 가시적 결함들을 감소시키기 위한 시스템 및 방법
CN113037947B (zh) 一种连续动态图像中空间信息的编码方法
WO2023138491A1 (zh) 一种图像采集方法、图像显示方法及装置
CN115002468A (zh) 视频处理方法、装置、系统以及客户端
ITMI971930A1 (it) Scorrimento di immagine su set top box

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20201106