CN113450293A - 视频信息处理方法、装置、系统、电子设备及存储介质 - Google Patents
视频信息处理方法、装置、系统、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113450293A CN113450293A CN202010161205.3A CN202010161205A CN113450293A CN 113450293 A CN113450293 A CN 113450293A CN 202010161205 A CN202010161205 A CN 202010161205A CN 113450293 A CN113450293 A CN 113450293A
- Authority
- CN
- China
- Prior art keywords
- image frame
- original image
- video
- target video
- fused image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 153
- 238000003672 processing method Methods 0.000 title claims abstract description 49
- 238000012545 processing Methods 0.000 claims abstract description 127
- 238000006243 chemical reaction Methods 0.000 claims abstract description 93
- 238000000034 method Methods 0.000 claims abstract description 65
- 230000004927 fusion Effects 0.000 claims abstract description 22
- 230000008569 process Effects 0.000 claims description 34
- 230000001960 triggered effect Effects 0.000 claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 11
- 238000013507 mapping Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 description 15
- 230000006854 communication Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 13
- 230000000694 effects Effects 0.000 description 12
- 238000003491 array Methods 0.000 description 4
- 235000019800 disodium phosphate Nutrition 0.000 description 4
- 239000003086 colorant Substances 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- HWWIYXKSCZCMFV-ZETCQYMHSA-N 2-[[(2s)-1-acetylpyrrolidine-2-carbonyl]-nitrosoamino]acetic acid Chemical compound CC(=O)N1CCC[C@H]1C(=O)N(CC(O)=O)N=O HWWIYXKSCZCMFV-ZETCQYMHSA-N 0.000 description 2
- 101150075622 UL80 gene Proteins 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供了一种视频信息处理方法,装置、系统、电子设备及存储介质包括:获取目标视频的原始图像帧,以及相应的原始图像帧序列;根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。本发明能够有效减少动画的存储所需空间,并且解码时间更短,提升用户使用的流畅度,从而有效提升用户的使用体验。
Description
技术领域
本发明涉及信息处理技术,尤其涉及视频信息处理方法、装置、系统、电子设备及存储介质。
背景技术
相关技术中,在进行动画播放时,不仅播放样式越来越丰富,且视觉效果也越来越丰富。尤其是针对带有社交信息交互的软件,在通信双方进行沟通交流的过程中,如果能够适宜地播放一段具有透明效果的动画,则可以在不影响通信双方查看聊天框中交流内容的基础上,大幅增加用户的视觉体验,因此时下通常采用透明效果的播放样式来对动画进行播放。为了实现透明效果的动画,通常采用带有透明度信息的图像文件存储格式(PNGPortable Network Graphic Format),序列来实现。其中,PNG序列本质上为由多张图片组成的动画资源包,这个动画资源包中的每一张图片均带有透明度信息,通过对这个动画资源包进行解码处理并播放,实现透明动画。但这种方式由多张图片组成的动画资源包通常很大,因此解码时间会很久,所以会占用大量内存,导致该种动画播放方式的效率较差,影响用户的使用体验。
发明内容
有鉴于此,本发明实施例提供一种视频信息处理方法、装置、系统、电子设备及存储介质,本发明实施例的技术方案是这样实现的:
本发明实施例提供了一种视频信息处理方法,所述方法包括:
获取目标视频的原始图像帧,以及相应的原始图像帧序列;
根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
本发明实施例还提供了一种视频信息处理方法,所述方法包括:
当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的目标视频。
本发明实施例还提供了一种视频信息处理方法,其特征在于,所述方法包括:
获取目标视频的原始图像帧,以及相应的原始图像帧序列;
根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息;
当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的透明度的视频流信息。
本发明实施例还提供了一种视频信息处理装置,所述装置包括:
第一信息传输模块,用于获取目标视频的原始图像帧,以及相应的原始图像帧序列;
第一信息处理模块,用于根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
所述第一信息处理模块,用于基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
所述第一信息处理模块,用于根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
上述方案中,
所述第一信息处理模块,用于根据所述目标视频的初始化参数,确定对所述目标视频进行切片的起始位置和结束位置;
所述第一信息处理模块,用于根据所述起始位置和所述结束位置对所述目标视频进行切片处理,形成所述目标视频的切片;
所述第一信息处理模块,用于根据所述目标视频的切片确定所述目标视频的原始图像帧,并根据所述目标视频的原始图像帧的参数信息确定相应的原始图像帧序列。
上述方案中,
所述第一信息处理模块,用于根据所述目标视频的原始图像帧序列,将所述目标视频的原始图像帧由三原色编码方式转化为灰阶值编码方式;
所述第一信息处理模块,用于确定所述灰阶值编码方式的原始图像帧中每一个像素点的色度值参数;
所述第一信息处理模块,用于基于所述目标视频的原始图像帧序列,确定原始图像帧的像素阵列中相邻的像素点,并基于所述原始图像帧中每一个像素点的色度值参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数。
上述方案中,
所述第一信息处理模块,用于基于所述原始图像帧中每一个像素点的色度值参数中的色彩参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色彩参数;
所述第一信息处理模块,用于基于所述原始图像帧中每一个像素点的色度值参数中的饱和度参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用饱和度参数。
上述方案中,
所述第一信息处理模块,用于基于与所述目标视频相匹配的映射关系,通过所述融合图像帧的像素阵列中的相邻像素点的公用色彩参数替换所述原始图像帧中每一个像素点的色度值参数中的色彩参数;
所述第一信息处理模块,用于基于与所述目标视频相匹配的映射关系,通过所述融合图像帧的像素阵列中的相邻像素点的公用饱和度参数替换所述原始图像帧中每一个像素点的色度值参数中的饱和度参数;
所述第一信息处理模块,用于将与所述目标视频的原始图像帧相匹配的透明通道信息填充至所述像素阵列中,形成携带有透明通道信息融合图像帧。
本发明实施例还提供了一种视频信息处理装置,所述装置包括:
第二信息传输模块,用于当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
第二信息处理模块,用于对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
第二信息处理模块,用于基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
第二信息处理模块,用于基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的目标视频。
上述方案中,
所述第二信息处理模块,用于根据所述融合图像帧的序列,基于所述融合图像帧中的相邻像素点的公用色度值参数,确定所述原始图像帧中每一个像素点的色度值参数中的色彩参数;
所述第二信息处理模块,用于根据所述融合图像帧的序列,基于所述融合图像帧中的相邻像素点的公用饱和度参数,确定所述原始图像帧中每一个像素点的色度值参数中的饱和度参数。
上述方案中,
所述第二信息处理模块,用于基于所述原始图像帧中每一个像素点的色度值参数中的色彩参数和饱和度参数,将所述融合图像帧的第三转化处理结果由灰阶值编码方式转化为三原色编码方式,形成相应的原始图像帧。
上述方案中,
所述第二信息处理模块,用于显示用户界面,所述用户界面中包括与不同应用进程相匹配的进程展示界面;
所述第二信息处理模块,用于当接收到对所述存储视频流信息的播放进程触发操作时,在所述用户界面上显示相应透明度的视频流信息。
本发明实施例还提供了一种视频信息处理系统,所述系统包括:
第三信息传输模块,用于获取目标视频的原始图像帧,以及相应的原始图像帧序列;
第三信息处理模块,用于根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
所述第三信息处理模块,用于基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
所述第三信息处理模块,用于根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息;
所述第三信息处理模块,用于当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的透明度的视频流信息。
本发明实施例还提供了一种电子设备,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于运行所述存储器存储的可执行指令时,实现前序的视频信息处理方法。
本发明实施例还提供了一种计算机可读存储介质,存储有可执行指令,其所述可执行指令被处理器执行时实现前序的视频信息处理方法。
本发明实施例具有以下有益效果:
本发明实施例通过获取目标视频的原始图像帧,以及相应的原始图像帧序列;根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。由此,由于以待存储视频流信息作为编码结果的载体,相较于采用PNG序列进行透明动画播放的方式,不但能够有效减少动画的存储所需空间,并且解码时间更短,提升用户使用的流畅度,从而有效提升用户的使用体验。
附图说明
图1为本发明实施例提供的视频信息处理方法的使用场景示意图;
图2为本发明实施例提供的视频信息处理装置的组成结构示意图;
图3为本发明实施例提供的视频信息处理方法一个可选的流程示意图;
图4为本发明实施例提供的视频信息处理装置的组成结构示意图;
图5为本发明实施例提供的视频信息处理方法一个可选的流程示意图;
图6为本发明实施例提供的视频信息处理方法一个可选的流程示意图;
图7为本发明实施例提供的视频信息处理方法一个可选的流程示意图;
图8为本发明实施例提供的视频信息处理方法对原始图像帧进行视频编码示意图;
图9为本发明实施例提供的视频信息处理方法的编码效果示意图;
图10为本发明实施例提供的视频信息处理方法的编码效果示意图;
图11为本发明实施例提供的视频信息处理方法对原始图像帧进行视频解码示意图;
图12为本发明实施例提供的视频信息处理方法的解码效果示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,所描述的实施例不应视为对本发明的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
对本发明实施例进行进一步详细说明之前,对本发明实施例中涉及的名词和术语进行说明,本发明实施例中涉及的名词和术语适用于如下的解释。
1)响应于,用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
2)终端,包括但不限于:普通终端、专用终端,其中所述普通终端与发送通道保持长连接和/或短连接,所述专用终端与所述发送通道保持长连接。
3)客户端,终端中实现特定功能的载体,例如移动客户端(APP)是移动终端中特定功能的载体,例如执行支付消费功能或者是购买理财产品的功能。
4)YUV,灰阶值编码方法,是一种颜色编码方法,其中“Y”表示亮度(Luminance或Luma),也就是灰阶值,“U”和“V”表示的色度(Chrominance或Chroma),作用是描述影像色彩及饱和度,用于指定像素的颜色。
5)RGB,三原色编码方法,又可以称作RGB色彩模式,是工业界的一种颜色标准,是通过对红(R)、绿(G)、蓝(B)三个颜色通道的变化以及它们相互之间的叠加来得到各式各样的颜色的,RGB即是代表红、绿、蓝三个通道的颜色,这个标准几乎包括了人类视力所能感知的所有颜色,是目前运用最广的颜色系统之一。
6)视频:一个较为宽泛的定义是:采用逐帧进行拍摄或者绘制,并通过连续播放而形成的动态影像技术。即,不论拍摄或者绘制对象是什么,仅需保证拍摄或者绘制方式是采用逐帧方式(形成不同的图像帧),且在观看时采用连续播放进而形成了活动影像,这便可称之为视频。例如:动画视频、人像视频。
下面说明实现本公开实施例的装置的示例性应用,本公开实施例提供的装置可以实施为平板电脑、笔记本电脑、中央处理器等各种类型的带有图形处理器GPU的电子设备。
图1为本发明实施例提供的视频信息处理方法的使用场景示意图,参见图1,终端(包括终端10-1和终端10-2)上设置有能够显示不同动画信息的软件的客户端,例如不同的短动画或者长动画的客户端或插件,用户通过相应的客户端可以获取相应的动画信息并进行展示,终端通过网络300连接服务器200,网络300可以是广域网或者局域网,又或者是二者的组合,使用无线链路实现数据传输。在本发明的一些实施例中,以即时通讯客户端为例,即时通讯客户端的聊天界面在播放动画内容(例如背景动画或者动态表情等内容)时不遮挡用户界面中其他对象(例如,聊天内容、文字输入框等等),用户界面需要呈现具有透明度通道信息的动画内容。
作为一个示例,服务器200用于布设所述视频信息处理装置以实现本发明所提供的视频信息处理方法,以通过获取目标视频的原始图像帧,以及相应的原始图像帧序列;根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
下面对本发明实施例的视频信息处理装置的结构做详细说明,视频信息处理装置可以各种形式来实施,如带有视频信息处理装置处理功能的专用终端,也可以为设置有视频信息处理装置处理功能的服务器,例如前序图1中的服务器200。图2为本发明实施例提供的视频信息处理装置的组成结构示意图,可以理解,图2仅仅示出了视频信息处理装置的示例性结构而非全部结构,根据需要可以实施图2示出的部分结构或全部结构。
本发明实施例提供的视频信息处理装置包括:至少一个处理器201、存储器202、用户接口203和至少一个网络接口204。视频信息处理装置中的各个组件通过总线系统205耦合在一起。可以理解,总线系统205用于实现这些组件之间的连接通信。总线系统205除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图2中将各种总线都标为总线系统205。
其中,用户接口203可以包括显示器、键盘、鼠标、轨迹球、点击轮、按键、按钮、触感板或者触摸屏等。
可以理解,存储器202可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。本发明实施例中的存储器202能够存储数据以支持终端(如10-1)的操作。这些数据的示例包括:用于在终端(如10-1)上操作的任何计算机程序,如操作系统和应用程序。其中,操作系统包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序。
在一些实施例中,本发明实施例提供的视频信息处理装置可以采用软硬件结合的方式实现,作为示例,本发明实施例提供的视频信息处理装置可以是采用硬件译码处理器形式的处理器,其被编程以执行本发明实施例提供的视频信息处理方法。例如,硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC,Application SpecificIntegrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,Co mplex Programmable Logic Device)、现场可编程门阵列(FPGA,Field-Progra mmable Gate Array)或其他电子元件。
作为本发明实施例提供的视频信息处理装置采用软硬件结合实施的示例,本发明实施例所提供的视频信息处理装置可以直接体现为由处理器201执行的软件模块组合,软件模块可以位于存储介质中,存储介质位于存储器202,处理器201读取存储器202中软件模块包括的可执行指令,结合必要的硬件(例如,包括处理器201以及连接到总线205的其他组件)完成本发明实施例提供的视频信息处理方法。
作为示例,处理器201可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
作为本发明实施例提供的视频信息处理装置采用硬件实施的示例,本发明实施例所提供的装置可以直接采用硬件译码处理器形式的处理器201来执行完成,例如,被一个或多个应用专用集成电路(ASIC,Application Specific Integr ated Circuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,ComplexProgrammable Logic Device)、现场可编程门阵列(FPGA,Field-Programmable GateArray)或其他电子元件执行实现本发明实施例提供的视频信息处理方法。
本发明实施例中的存储器202用于存储各种类型的数据以支持视频信息处理装置的操作。这些数据的示例包括:用于在视频信息处理装置上操作的任何可执行指令,如可执行指令,实现本发明实施例的从视频信息处理方法的程序可以包含在可执行指令中。
在另一些实施例中,本发明实施例提供的视频信息处理装置可以采用软件方式实现,图2示出了存储在存储器202中的视频信息处理装置,其可以是程序和插件等形式的软件,并包括一系列的模块,作为存储器202中存储的程序的示例,可以包括视频信息处理装置,视频信息处理装置中包括以下的软件模块:第一信息传输模块2081和第一信息处理模块2082。当视频信息处理装置中的软件模块被处理器201读取到RAM中并执行时,将实现本发明实施例提供的视频信息处理方法,其中,视频信息处理装置中各个软件模块的功能,包括:
第一信息传输模块2081,用于获取目标视频的原始图像帧,以及相应的原始图像帧序列;
第一信息处理模块2082,用于根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
所述第一信息处理模块2082,用于基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
所述第一信息处理模块2082,用于根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
结合图2示出的服务器20说明本发明实施例提供的视频信息处理方法,参见图3,图3为本发明实施例提供的视频信息处理方法一个可选的流程示意图,可以理解地,图3所示的步骤可以由运行视频信息处理装置的各种服务器执行,例如可以是如带有视频信息处理功能的专用终端、服务器、云服务器或者服务器集群。下面针对图3示出的步骤进行说明。
步骤301:视频信息处理装置获取目标视频的原始图像帧,以及相应的原始图像帧序列。
在本发明的一些实施例中,获取目标视频的原始图像帧,以及相应的原始图像帧序列,可以通过以下方式实现:
根据所述目标视频的初始化参数,确定对所述目标视频进行切片的起始位置和结束位置;根据所述起始位置和所述结束位置对所述目标视频进行切片处理,形成所述目标视频的切片;根据所述目标视频的切片确定所述目标视频的原始图像帧,并根据所述目标视频的原始图像帧的参数信息确定相应的原始图像帧序列。进一步地,当然根据不同的使用场景,还可以将所述目标视频信号的码流、以及所述目标视频信号的码流,封装为新的多媒体信息,形成待点播的多媒体信息;或者,将所形成的多媒体信息通过所述网络40,向所述终端10进行推流。
在本发明的一些实施例中,其中,当对所述目标视频进行处理时,首先对所述目标视频进行初始化,通过所述图像处理器GPU的处理队列,从所述目标视频中提取连续的两帧图像,即为第一帧图像T-1和第二帧图像T,由于在暗光条件下所拍摄的目标视频中的每一帧图像的噪声通常都满足高斯分布,因此,在去除图像帧的噪声时首先对所提取的第一帧图像T-1和第二帧图像T进行高斯模糊处理,以提高图像处理器GPU的运行效率。
步骤302:视频信息处理装置根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数。
在本发明的一些实施例中,根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数,可以通过以下方式实现:
根据所述目标视频的原始图像帧序列,将所述目标视频的原始图像帧由三原色编码方式转化为灰阶值编码方式;确定所述灰阶值编码方式的原始图像帧中每一个像素点的色度值参数;基于所述目标视频的原始图像帧序列,确定原始图像帧的像素阵列中相邻的像素点,并基于所述原始图像帧中每一个像素点的色度值参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数。其中,本发明所提供的视频信息处理方法可以应用到各种场景下,尤其是针对带有社交信息交互功能的使用环境来说,在通信双方沟通交流的过程中,在契合的时机下进行视频播放可显著提升用户体验。视频播放可通过一定的条件来触发。其中,视频播放的触发条件可为通信双方在沟通交流时发出的交流信息中包括某一可触发动画效果的关键词;或者,用户启用了软件应用中某一具有动画播放效果的功能,比如送礼物功能启用后,可播放关于礼物赠送流程的动画效果,本发明实施例对上述触发条件的形式不进行具体限定。此外,时下为了不影响通信双方查看聊天框中交流内容,播放的通常均是透明效果的动画视频。而为了解决时下播放透明动画时内存消耗大以及播放性能较差的问题,本发明实施例提出了一种采用具有特定格式的视频文件作为动画的载体,并通过原生播放器进行动画播放的方法。其中,特定格式可为动态图像专家组第四版(MP4 Moving Pictures Experts Group 4th)、或者流媒体格式(FLV Flash Video),等,本发明实施例对此不进行具体限定。
在本发明的一些实施例中,基于所述原始图像帧中每一个像素点的色度值参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数,可以通过以下方式实现:
基于所述原始图像帧中每一个像素点的色度值参数中的色彩参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色彩参数;基于所述原始图像帧中每一个像素点的色度值参数中的饱和度参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用饱和度参数。
在本发明的一些实施例中,基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,可以通过以下方式实现:
基于与所述目标视频相匹配的映射关系,通过所述融合图像帧的像素阵列中的相邻像素点的公用色彩参数替换所述原始图像帧中每一个像素点的色度值参数中的色彩参数;基于与所述目标视频相匹配的映射关系,通过所述融合图像帧的像素阵列中的相邻像素点的公用饱和度参数替换所述原始图像帧中每一个像素点的色度值参数中的饱和度参数;将与所述目标视频的原始图像帧相匹配的透明通道信息填充至所述像素阵列中,形成携带有透明通道信息融合图像帧。其中,由于通过所述融合图像帧的像素阵列中的相邻像素点的公用色彩参数替换所述原始图像帧中每一个像素点的色度值参数中的色彩参数,使得融合图像帧的像素阵列的体积明显小于原始图像帧的体积,实现了最大程度地将与所述目标视频的原始图像帧相匹配的透明通道信息填充至所述像素阵列中,形成携带有透明通道信息融合图像帧,由此,通过压缩融合图像帧的体积,也能够有效地压缩目标视频的体积。
步骤303:视频信息处理装置基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧。
其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息。
步骤304:视频信息处理装置根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
下面对本发明实施例的视频信息处理装置的结构做详细说明,视频信息处理装置可以各种形式来实施,如带有视频信息处理装置处理功能的专用终端,也可以为设置有视频信息处理装置处理功能的服务器,例如前序图1中的终端10-1或者10-2。图4为本发明实施例提供的视频信息处理装置的组成结构示意图,可以理解,图4仅仅示出了视频信息处理装置的示例性结构而非全部结构,根据需要可以实施图4示出的部分结构或全部结构。
本发明实施例提供的视频信息处理装置包括:至少一个处理器401、存储器402、用户接口403和至少一个网络接口404。视频信息处理装置中的各个组件通过总线系统405耦合在一起。可以理解,总线系统405用于实现这些组件之间的连接通信。总线系统405除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图4中将各种总线都标为总线系统405。
其中,用户接口403可以包括显示器、键盘、鼠标、轨迹球、点击轮、按键、按钮、触感板或者触摸屏等。
可以理解,存储器402可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。本发明实施例中的存储器402能够存储数据以支持终端(如10-1)的操作。这些数据的示例包括:用于在终端(如10-1)上操作的任何计算机程序,如操作系统和应用程序。其中,操作系统包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序。
在一些实施例中,本发明实施例提供的视频信息处理装置可以采用软硬件结合的方式实现,作为示例,本发明实施例提供的视频信息处理装置可以是采用硬件译码处理器形式的处理器,其被编程以执行本发明实施例提供的视频信息处理方法。例如,硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC,Application SpecificIntegrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,Co mplex Programmable Logic Device)、现场可编程门阵列(FPGA,Field-Progra mmable Gate Array)或其他电子元件。
作为本发明实施例提供的视频信息处理装置采用软硬件结合实施的示例,本发明实施例所提供的视频信息处理装置可以直接体现为由处理器401执行的软件模块组合,软件模块可以位于存储介质中,存储介质位于存储器402,处理器401读取存储器402中软件模块包括的可执行指令,结合必要的硬件(例如,包括处理器401以及连接到总线405的其他组件)完成本发明实施例提供的视频信息处理方法。
作为示例,处理器401可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
作为本发明实施例提供的视频信息处理装置采用硬件实施的示例,本发明实施例所提供的装置可以直接采用硬件译码处理器形式的处理器401来执行完成,例如,被一个或多个应用专用集成电路(ASIC,Application Specific Integr ated Circuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,ComplexProgrammable Logic Device)、现场可编程门阵列(FPGA,Field-Programmable GateArray)或其他电子元件执行实现本发明实施例提供的视频信息处理方法。
本发明实施例中的存储器402用于存储各种类型的数据以支持视频信息处理装置的操作。这些数据的示例包括:用于在视频信息处理装置上操作的任何可执行指令,如可执行指令,实现本发明实施例的从视频信息处理方法的程序可以包含在可执行指令中。
在另一些实施例中,本发明实施例提供的视频信息处理装置可以采用软件方式实现,图4示出了存储在存储器402中的视频信息处理装置,其可以是程序和插件等形式的软件,并包括一系列的模块,作为存储器402中存储的程序的示例,可以包括视频信息处理装置,视频信息处理装置中包括以下的软件模块:第二信息传输模块4081和第二信息处理模块4082。当视频信息处理装置中的软件模块被处理器401读取到RAM中并执行时,将实现本发明实施例提供的视频信息处理方法,其中,视频信息处理装置中各个软件模块的功能,包括:
第二信息传输模块4081,用于用于当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
第二信息处理模块4082,用于对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
第二信息处理模块4082,用于基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
第二信息处理模块4082,用于基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的目标视频。
结合图2示出的终端10-1说明本发明实施例提供的视频信息处理方法,参见图5,图5为本发明实施例提供的视频信息处理方法一个可选的流程示意图,可以理解地,图5所示的步骤可以由运行视频信息处理装置的各种电子设备执行,例如可以是如带有视频信息处理功能的专用终端、视频播放器。下面针对图5示出的步骤进行说明。
步骤501:当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧。
其中,所述融合图像帧携带有相应的透明通道信息。
步骤502:对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数。
在本发明的一些实施例中,对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数,可以通过以下方式实现:
根据所述融合图像帧的序列,基于所述融合图像帧中的相邻像素点的公用色度值参数,确定所述原始图像帧中每一个像素点的色度值参数中的色彩参数;根据所述融合图像帧的序列,基于所述融合图像帧中的相邻像素点的公用饱和度参数,确定所述原始图像帧中每一个像素点的色度值参数中的饱和度参数。
步骤503:基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧。
在本发明的一些实施例中,基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧,可以通过以下方式实现:
基于所述原始图像帧中每一个像素点的色度值参数中的色彩参数和饱和度参数,将所述融合图像帧的第三转化处理结果由灰阶值编码方式转化为三原色编码方式,形成相应的原始图像帧。
步骤504:基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的目标视频。
结合图2示出的终端10-1和服务器200,说明本发明实施例提供的视频信息处理方法,参见图6,图6为本发明实施例提供的视频信息处理方法一个可选的流程示意图,可以理解地,图6所示的步骤可以由运行视频信息处理系统的各种电子设备执行,例如可以是如带有视频信息处理功能的专用终端、视频播放器(既能够存储经过编码的目标视频,有能够对视频信息进行解码)。下面针对图6示出的步骤进行说明。
步骤601:获取目标视频的原始图像帧,以及相应的原始图像帧序列。
步骤602:根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数。
其中。对于PNG序列中的每一张图片来说,均包含Alpha通道,其中,Alpha通道是一个用于记录透明度信息的特殊图层。例如,一个使用16bit存储的图片,可能5bit表示红色(R),5bit表示绿色(G),5bit表示蓝色(B),1bit表示透明度。在这种情况下,图片要么完全透明要么完全不透明。而对于一个使用32bit存储的图片,可以每8bit表示红绿蓝和透明度。在这种情况下,除了可表示完全透明和完全不透明之外,Alpha通道还可以表示256级的半透明度。Alpha值的取值介于0~1之间。其中,1表示完全不透明,0表示完全透明。在本发明实施例中,透明度参数便指代上述Alpha值。其中,色彩参数值除了可为RGB值外,进一步地,还可以为YUV值进行表示。
步骤603:基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息。
步骤604:根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
步骤605:当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息。
步骤606:对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数。
步骤607:基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧。
步骤608:基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的透明度的视频流信息。
下面以目标视频为动画为例,对本申请所提供的视频信息处理方法进行改说明。其中,参考图1所示的使用环境,画信息的播放过程中,对于动画的播放,可以采用如PNG序列、APNG图片、GIF图片和MP4等方式实现透明动画。其中,对于PNG序列和APNG,由于其原始体积较大,解码成位图消耗的性能较大,播放时内存占用也较大,因此不适合作为分辨率大和时间长的动画播放。GIF动画由于其透明度信息只有0和1,而且压缩后清晰度和帧率偏低,因此也不能满足大动画的播放。透明MP4虽然能够实现透明动画的播放,但是,需要将动画宽度或高度扩大为原来图像的两倍,一半存RGB信息,另一半存透明度信息或者将动画宽度或高度扩大为原来图像的4/3倍,扩大的1/3用于存放透明度信息,这也意味着用户在观看过程中需要扩大动画区域。扩大动画区域就意味着动画文件的体积、手机解码过程中的内存和CPU占用都会变大。在一些需要播放全屏动画的场景下,内存占用过大,影响终端的其他业务进程。
参考图7,图7为本发明实施例提供的视频信息处理方法一个可选的流程示意图,为了解决上述问题,本发明实施例提了一种的视频信息处理方法,包括以下步骤:
步骤701:获取目标视频的图像帧序列。
其中,传统的动画格式(如MP4等格式)本身不能支持透明显示,动画解码之后得到的图像数据只包含了三元组通道RGB,为了让动画能够支持透明播放,因此需要在每帧的图像信息中保存阿尔法通道信息(αChannel或Alpha Channel)。现有方式中,数据源(PNG序列)中每张图片是带有alpha通道的,但是合成动画之后alpha信息会出现丢失。
步骤702:对所述目标视频的图像帧进行处理,以形成相邻两个像素点公用一对UV值。
其中,参考图8,图8为本发明实施例提供的视频信息处理方法对原始图像帧进行视频编码示意图,其中,图像帧RGB转成YUV的过程中,可以让相邻两个像素点公用一对UV值,每个像素点恰好可以节省了1/3空间,所节省的空间正好可以用来存放该像素点所对应的阿尔法通道信息。
参考图9和图10,图9为本发明实施例提供的视频信息处理方法的编码效果示意图,图10为本发明实施例提供的视频信息处理方法的编码效果示意图,其中,由于通过所述融合图像帧的像素阵列中的相邻像素点的公用色彩参数替换所述原始图像帧中每一个像素点的色度值参数中的色彩参数,使得融合图像帧的像素阵列的体积明显小于原始图像帧的体积,实现了最大程度地将与所述目标动画的原始图像帧相匹配的透明通道信息填充至所述像素阵列中,形成携带有透明通道信息融合图像帧,由此,通过压缩融合图像帧的体积,也能够有效地压缩目标动画的体积。
步骤703:触发ffmpeg进程将经过处理的图像帧序列转换为相应的mp4格式文件。
步骤704:目标视频处于播放状态时,对相应的mp4格式文件进行转换,形成透明动画。
其中,参考图11和图12,图11为本发明实施例提供的视频信息处理方法对原始图像帧进行视频解码示意图,图12为本发明实施例提供的视频信息处理方法的解码效果示意图,其中,动画播放过程中,可以对前序步骤所生成的动画文件进行播放,在进行播放之前,需要对从动画中获取到的图像进行还原,将图像帧由YUV格式转换为RGB格式,形成透明动画。
进一步地,前序步骤可以由终端的CPU或者GPU处理,这一过程中,优选使用GPU处理,以减低终端CPU的负荷。
相比于传统技术所使用的透明视频方案,参考表1,
表1
本申请所提供的技术方案不但能够有效减少动画的存储所需空间,并且解码时间更短,提升用户使用的流畅度,从而有效提升用户的使用体验。
有益技术效果:
本发明实施例通过获取目标视频的原始图像帧,以及相应的原始图像帧序列;根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。由此,由于以待存储视频流信息作为编码结果的载体,相较于采用PNG序列进行透明动画播放的方式,不但能够有效减少动画的存储所需空间,并且解码时间更短,提升用户使用的流畅度,从而有效提升用户的使用体验。
以上所述,仅为本发明的实施例而已,并非用于限定本发明的保护范围,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (15)
1.一种视频信息处理方法,其特征在于,所述方法包括:
获取目标视频的原始图像帧,以及相应的原始图像帧序列;
根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
2.根据权利要求1所述的方法,其特征在于,所述获取目标视频的原始图像帧,以及相应的原始图像帧序列,包括:
根据所述目标视频的初始化参数,确定对所述目标视频进行切片的起始位置和结束位置;
根据所述起始位置和所述结束位置对所述目标视频进行切片处理,形成所述目标视频的切片;
根据所述目标视频的切片确定所述目标视频的原始图像帧,并根据所述目标视频的原始图像帧的参数信息确定相应的原始图像帧序列。
3.根据权利要求1所述的方法,其特征在于,所述根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数,包括:
根据所述目标视频的原始图像帧序列,将所述目标视频的原始图像帧由三原色编码方式转化为灰阶值编码方式;
确定所述灰阶值编码方式的原始图像帧中每一个像素点的色度值参数;
基于所述目标视频的原始图像帧序列,确定原始图像帧的像素阵列中相邻的像素点,并基于所述原始图像帧中每一个像素点的色度值参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数。
4.根据权利要求3所述的方法,其特征在于,所述基于所述原始图像帧中每一个像素点的色度值参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数,包括:
基于所述原始图像帧中每一个像素点的色度值参数中的色彩参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用色彩参数;
基于所述原始图像帧中每一个像素点的色度值参数中的饱和度参数,确定相应的融合图像帧的像素阵列中的相邻像素点的公用饱和度参数。
5.根据权利要求4所述的方法,其特征在于,所述基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,包括:
基于与所述目标视频相匹配的映射关系,通过所述融合图像帧的像素阵列中的相邻像素点的公用色彩参数替换所述原始图像帧中每一个像素点的色度值参数中的色彩参数;
基于与所述目标视频相匹配的映射关系,通过所述融合图像帧的像素阵列中的相邻像素点的公用饱和度参数替换所述原始图像帧中每一个像素点的色度值参数中的饱和度参数;
将与所述目标视频的原始图像帧相匹配的透明通道信息填充至所述像素阵列中,形成携带有透明通道信息融合图像帧。
6.一种视频信息处理方法,其特征在于,所述方法包括:
当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的目标视频。
7.根据权利要求6所述的方法,其特征在于,所述对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数,包括:
根据所述融合图像帧的序列,基于所述融合图像帧中的相邻像素点的公用色度值参数,确定所述原始图像帧中每一个像素点的色度值参数中的色彩参数;
根据所述融合图像帧的序列,基于所述融合图像帧中的相邻像素点的公用饱和度参数,确定所述原始图像帧中每一个像素点的色度值参数中的饱和度参数。
8.根据权利要求7所述的方法,其特征在于,所述基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧,包括:
基于所述原始图像帧中每一个像素点的色度值参数中的色彩参数和饱和度参数,将所述融合图像帧的第三转化处理结果由灰阶值编码方式转化为三原色编码方式,形成相应的原始图像帧。
9.根据权利要求6所述的方法,其特征在于,所述方法还包括:
显示用户界面,所述用户界面中包括与不同应用进程相匹配的进程展示界面;
当接收到对所述存储视频流信息的播放进程触发操作时,在所述用户界面上显示相应透明度的视频流信息。
10.一种视频信息处理方法,其特征在于,所述方法包括:
获取目标视频的原始图像帧,以及相应的原始图像帧序列;
根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息;
当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的透明度的视频流信息。
11.一种视频信息处理装置,其特征在于,所述装置包括:
第一信息传输模块,用于获取目标视频的原始图像帧,以及相应的原始图像帧序列;
第一信息处理模块,用于根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
所述第一信息处理模块,用于基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
所述第一信息处理模块,用于根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息。
12.一种视频信息处理装置,其特征在于,所述装置包括:
第二信息传输模块,用于当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
第二信息处理模块,用于对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
第二信息处理模块,用于基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
第二信息处理模块,用于基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的目标视频。
13.一种视频信息处理系统,其特征在于,所述系统包括:
第三信息传输模块,用于获取目标视频的原始图像帧,以及相应的原始图像帧序列;
第三信息处理模块,用于根据所述目标视频的原始图像帧序列,对所述目标视频的原始图像帧进行第一转化处理,并确定相应的融合图像帧的像素阵列中的相邻像素点的公用色度值参数;
所述第三信息处理模块,用于基于所述相邻像素点的公用色度值参数,对所述目标视频的原始图像帧的第一转化处理结果进行第二转化处理,形成融合图像帧,其中,所述融合图像帧携带有与所述目标视频的原始图像帧相匹配的透明通道信息;
所述第三信息处理模块,用于根据所述原始图像帧序列,对所述融合图像帧进行视频编码处理,形成相应的待存储视频流信息;
所述第三信息处理模块,用于当存储视频流信息对应的播放进程被触发时,获取视频流信息,并对所述视频流信息进行解码,确定相应的融合图像帧,其中,所述融合图像帧携带有相应的透明通道信息;
对所述融合图像帧进行第三转化处理,确定所述融合图像帧中的每一个像素点的色度值参数;
基于所述融合图像帧中的相每一个素点的色度值参数,对所述融合图像帧的第三转化处理结果进行第四转化处理,形成相应的原始图像帧;
基于所述透明通道信息,对所述原始图像帧的透明度进行调整,并对所述原始图像帧进行视频编码处理,形成相应的透明度的视频流信息。
14.一种电子设备,其特征在于,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于运行所述存储器存储的可执行指令时,实现权利要求1至5任一项所述的视频信息处理方法,或者,权利要求6至9任一项所述的视频信息处理方法,或者权利要求10所述的视频信息处理方法。
15.一种计算机可读存储介质,存储有可执行指令,其特征在于,所述可执行指令被处理器执行时实现权利要求1至5任一项所述的视频信息处理方法,或者,权利要求6至9任一项所述的视频信息处理方法,或者权利要求10所述的视频信息处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010161205.3A CN113450293A (zh) | 2020-03-10 | 2020-03-10 | 视频信息处理方法、装置、系统、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010161205.3A CN113450293A (zh) | 2020-03-10 | 2020-03-10 | 视频信息处理方法、装置、系统、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113450293A true CN113450293A (zh) | 2021-09-28 |
Family
ID=77806295
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010161205.3A Pending CN113450293A (zh) | 2020-03-10 | 2020-03-10 | 视频信息处理方法、装置、系统、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113450293A (zh) |
-
2020
- 2020-03-10 CN CN202010161205.3A patent/CN113450293A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109983757B (zh) | 全景视频回放期间的视图相关操作 | |
CN106611435B (zh) | 动画处理方法和装置 | |
US20220014819A1 (en) | Video image processing | |
EP3920131A1 (en) | Re-projecting flat projections of pictures of panoramic video for rendering by application | |
CN109640167B (zh) | 视频处理方法、装置、电子设备及存储介质 | |
US10720091B2 (en) | Content mastering with an energy-preserving bloom operator during playback of high dynamic range video | |
CN103841389B (zh) | 一种视频播放方法及播放器 | |
CN106937113B (zh) | 基于混合色度采样率的图像压缩方法和装置 | |
CN111327959A (zh) | 视频插帧方法及相关装置 | |
KR102617258B1 (ko) | 이미지 프로세싱 방법 및 장치 | |
US11882297B2 (en) | Image rendering and coding method and related apparatus | |
CN108235055B (zh) | Ar场景中透明视频实现方法及设备 | |
CN111899322A (zh) | 视频处理方法、动画渲染sdk和设备及计算机存储介质 | |
US11528538B2 (en) | Streaming volumetric and non-volumetric video | |
CN112087648B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN102231836B (zh) | 一种gif文件在数字电视系统中的处理方法和装置 | |
CN110049347B (zh) | 在直播界面配置图像的方法、系统、终端和装置 | |
US20120218292A1 (en) | System and method for multistage optimized jpeg output | |
CN109587561B (zh) | 视频处理方法、装置、电子设备及存储介质 | |
CN111193928A (zh) | 用于传递视频中的感兴趣区域信息的方法和设备 | |
CN110769241B (zh) | 视频帧处理方法、装置、用户端及存储介质 | |
CN110377773B (zh) | 图片处理方法、装置、移动终端以及存储介质 | |
CN114245027B (zh) | 一种视频数据混合处理方法、系统、电子设备和存储介质 | |
US11967345B2 (en) | System and method for rendering key and fill video streams for video processing | |
US11638040B2 (en) | Eco-friendly codec-based system for low latency transmission |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40051765 Country of ref document: HK |
|
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |