CN108668169A - 图像信息处理方法及装置、存储介质 - Google Patents

图像信息处理方法及装置、存储介质 Download PDF

Info

Publication number
CN108668169A
CN108668169A CN201810559099.7A CN201810559099A CN108668169A CN 108668169 A CN108668169 A CN 108668169A CN 201810559099 A CN201810559099 A CN 201810559099A CN 108668169 A CN108668169 A CN 108668169A
Authority
CN
China
Prior art keywords
component
image
yuva
blank
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810559099.7A
Other languages
English (en)
Other versions
CN108668169B (zh
Inventor
荆锐
任军
赵代平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Priority to CN201810559099.7A priority Critical patent/CN108668169B/zh
Priority to CN202111165241.8A priority patent/CN113766319A/zh
Publication of CN108668169A publication Critical patent/CN108668169A/zh
Application granted granted Critical
Publication of CN108668169B publication Critical patent/CN108668169B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)
  • Color Image Communication Systems (AREA)

Abstract

本发明实施例提供一种图像信息处理方法及装置、存储介质。所述图像信息处理方法包括:确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像;其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件。

Description

图像信息处理方法及装置、存储介质
技术领域
本发明涉及信息技术领域,尤其涉及一种图像信息处理方法及装置、存储介质。
背景技术
序列帧是指由若干张图像按序组成的图像序列;序列帧动画是指按序逐一播放各图像的播放技术。
序列帧动画的文件通常包括多张图像。若直接传输这多张图像,会导致的传输数据量大,占用的传输带宽大等问题。
为了减少数据量,通常会对图像文件进行压缩,但是这种压缩之后数据量依然很大,压缩率很低。
发明内容
有鉴于此,本发明实施例期望提供一种图像信息处理方法及装置、存储介质。
本发明的技术方案是这样实现的:
第一方面,本发明实施例提供一种图像信息处理方法,包括:
确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像;其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件。
可选地,所述确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像,包括:
确定计算分量,其中,所述计算分量为:所述Y分量、所述V分量和所述U分量中的一个或多个,或者,所述计算分量为:所述Y分量、所述V分量和所述U分量的转换分量中的一个或多个;
根据所述A分量确定差分计算权值;
基于提取的色差分量及所述计算权值得到第n个所述YUVA图像的第n计算值及第n+1个所述YUVA图像的第n+1计算值,其中,所述n为正整数;
对所述第n计算值及所述第n+1计算值进行差分计算;
根据所述差分计算的结果确定关键图像及所述普通图像。
可选地,所述根据所述差分计算的结果确定关键图像及所述普通图像,包括:
若第n+1计算值相较于所述第n计算值的差分计算的结果位于预设范围外,则所述第n+1个所述YUVA图像为所述关键图像;
和/或,
若第n+1计算值相较于所述第n计算值的差分计算的结果位于所述预设范围内,则所述第n+1个所述YUVA图像为所述普通图像。
可选地,所述根据所述A分量确定差分计算权值,包括:
对所述A分量进行归一化处理,获得与所述差分计算权值。
可选地,所述方法还包括:
将原始的RGBA图像转换为所述YUVA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
其中,所述YUVA图像被压缩后数据量小于所述RGBA图像被压缩后的数据量。
可选地,所述确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像,包括:
提取所述RGBA图像中的一个色彩分量,其中,所述色彩分量包括:所述R分量、所述G分量及所述B分量;
根据所述A分量确定差分计算权值;
基于提取的色差分量及所述计算权值得到第n个所述RGBA图像的第n计算值及所述n+1个所述RGBA图像的第n+1计算值,其中,所述n为正整数;
对所述第n计算值及所述第n+1计算值进行差分计算;
根据所述差分计算的结果确定关键图像及所述普通图像。
可选地,多张所述YUVA图像为序列帧动画的图像帧。
可选地,所述根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件,包括:
根据所述关键图像和所述普通图像,采用VP9编码方式对所述YUVA图像进行视频压缩。
第二方面,本发明实施提供一种图像信息处理方法,包括:
接收基于关键图像和普通图像对YUVA图像进行视频压缩后的压缩文件,其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
还原所述压缩文件中携带的所述YUVA图像;
按照所述YUVA图像的播放次序,播放序列帧动画。
可选地,所述方法还包括:
将所述YUVA图像转换为RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量。
可选地,所述还原所述压缩文件中携带的所述YUVA图像,包括:
在播放所述序列帧动画之前,还原所述压缩文件中的YUVA图像;
存储图像数据,其中,所述图像数据为所述YUVA图像或所述YUVA图像转换后的RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
所述按照所述YUVA图像的播放次序,播放序列帧动画,包括:
在播放所述序列帧动画时,读取所述图像数据;
根据所述YUVA图像的播放次序依次播放序列帧动画。
可选地,所述方法还包括:
在存储所述图像数据之前,删除所述YUVA图像中的所述第一空白分量和所述第二空白分量。
可选地,所述方法还包括:
若当前负载率小于预设负载率,压缩所述YUVA图像或去除了所述第一空白分量和所述第二空白分量的图像数据以获得压缩数据;
所述存储图像数据包括:
存储所述压缩数据。
可选地,所述若当前负载率小于预设负载率,压缩所述YUVA图像或去除了所述第一空白分量和所述第二空白分量的图像数据以获得压缩数据,包括:
若所述当前负载率小于所述预设负载率,利用JPEG压缩技术压缩所述YUVA图像或去除了所述第一空白分量或所述第二空白分量的图像数据。
可选地,所述按照所述YUVA图像的播放次序,播放序列帧动画,包括:
确定是否有所述YUVA图像的压缩数据;
若有所述压缩数据,对所述压缩数据解压缩还原所述YUVA图像;
或者,
若无所述压缩数据,读取所述YUVA图像或者还原去除了所述第一空白分量和所述第二空白分量的所述图像数据。
第三方面,本发明实施例提供一种图像信息压缩装置,包括:
确定模块,用于确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像;其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
第一压缩模块,用于根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件。
可选地,所述确定模块,包括:
第一确定单元,用于确定计算分量,其中,所述计算分量为:所述Y分量、所述V分量和所述U分量中的一个或多个,或者,所述计算分量为:所述Y分量、所述V分量和所述U分量的转换分量中的一个或多个;
第二确定单元,用于根据所述A分量确定差分计算权值;
第一计算单元,用于基于提取的色差分量及所述计算权值得到第n个所述YUVA图像的第n计算值及第n+1个所述YUVA图像的第n+1计算值,其中,所述n为正整数;
第二计算单元,用于对所述第n计算值及所述第n+1计算值进行差分计算;
第三确定单元,用于根据所述差分计算的结果确定关键图像及所述普通图像。
可选地,所述第三确定单元,具体若第n+1计算值相较于所述第n计算值的差分计算的结果位于预设范围外,则所述第n+1个所述YUVA图像为所述关键图像;和/或,若第n+1计算值相较于所述第n计算值的差分计算的结果位于所述预设范围内,则所述第n+1个所述YUVA图像为所述普通图像。
可选地,所述第二确定单元,具体用于对所述A分量进行归一化处理,获得与所述差分计算权值。
可选地,所述装置还包括:
第一转换模块,用于将原始的RGBA图像转换为所述YUVA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
其中,所述YUVA图像被压缩后数据量小于所述RGBA图像被压缩后的数据量。
可选地,所述确定模块,具体用于提取所述RGBA图像中的一个色彩分量,其中,所述色彩分量包括:所述R分量、所述G分量及所述B分量;根据所述A分量确定差分计算权值;基于提取的色差分量及所述计算权值得到第n个所述RGBA图像的第n计算值及所述n+1个所述RGBA图像的第n+1计算值,其中,所述n为正整数;对所述第n计算值及所述第n+1计算值进行差分计算;根据所述差分计算的结果确定关键图像及所述普通图像。
可选地,多张所述YUVA图像为序列帧动画的图像帧。
可选地,所述第一压缩模块,具体用于根据所述关键图像和所述普通图像,采用VP9编码方式对所述YUVA图像进行视频压缩。
第四方面,本发明实施例提供一种图像信息处理装置,包括:
接收模块,用于接收基于关键图像和普通图像对YUVA图像进行视频压缩后的压缩文件,其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
还原模块,用于还原所述压缩文件中携带的所述YUVA图像;
播放模块,用于按照所述YUVA图像的播放次序,播放序列帧动画。
可选地,所述装置还包括:
第二转换模块,用于将所述YUVA图像转换为RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量。
可选地,所述还原模块,具体用于在播放序列帧动画之前,还原所述压缩文件中的YUVA图像;存储图像数据,其中,所述图像数据为所述YUVA图像或所述YUVA图像转换后的RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
所述播放模块,具体用于在播放所述序列帧动画时,读取所述图像数据;根据所述YUVA图像的播放次序依次播放序列帧动画。
可选地,所述装置还包括:
删除模块,用于在存储所述图像数据之前,删除所述YUVA图像中的所述第一空白分量和所述第二空白分量。
可选地,所述装置,还包括:
第二压缩模块,具体用于若当前负载率小于预设负载率,压缩所述YUVA图像或去除了所述第一空白分量和所述第二空白分量的图像数据以获得压缩数据;
存储模块,具体用于存储所述压缩数据。
可选地,所述第二压缩模块,具体用于若所述当前负载率小于所述预设负载率,利用JPEG压缩技术压缩所述YUVA图像或去除了所述第一空白分量或所述第二空白分量的图像数据。
可选地,所述播放模块,具体用于确定是否有所述YUVA图像的压缩数据;若有所述压缩数据,对所述压缩数据解压缩还原所述YUVA图像;或者,若无所述压缩数据,读取所述YUVA图像或者还原去除了所述第一空白分量和所述第二空白分量的所述图像数据。
第五方面,本发明实施例提供一种计算机存储介质,所述计算机存储介质存储有计算机可执行指令;所述计算机可执行指令被执行后,能够实现第一方面或第二方面任一项技术方案提供的方法。
第六方面,本发明实施例提供一种计算机程序产品,所述计算机程序产品包括计算机可执行指令;所述计算机可执行指令被执行后,能够实现第一方面或第二方面任一项技术方案提供的方法。
第七方面,本发明实施例提供一种电子设备,其特征在于,包括:
存储器;
处理器,与所述存储器连接,用于通过执行位于所述存储器上的计算机可执行指令,能够实现第一方面或第二方面任一项技术方案提供的方法。
本发明实施例提供了一种多张YUVA图像的压缩及解压缩等处理方法。该YUVA图像是一种携带有透明度分量的图像(即可以局部透明的图像)。
第一方面,在利用视频压缩技术进行多张YUVA图像的压缩,实现的是多个YUVA图像之间的图像间压缩,现对于独立图像文件的图像内压缩,压缩量可以大大减小。
第二方面,在压缩过程中有会确定关键图像和普通图像,如此,不仅局限于将所有待压缩的YUVA图像找出共同部分进行压缩,可以基于不同关键图像的进行不同组的图像之间最大压缩,从而再次降低了数据量。
第三方面,在本实施例中通过空白分量的引入,可以使得U分量和V分量加上对应的空白分量之后可以与Y分量和A分量对齐,一方面可以视频压缩,另一方面可以实现解压端可以正常解压出该YUVA图像,从而实现了带透明度的图像压缩,从而解决了现有技术中若序列帧动画包含有带有透明度的图像帧时时压缩率低的问题,减少图像信息传输过程中所消耗的网络资源,减少存储过程中所占用的存储资源。
附图说明
图1为本发明实施例提供的第一种图像信息处理方法的流程示意图;
图2为本发明实施例提供的一种YUVA图像的各分量的等效示意图;
图3为本发明实施例提供的一种确定关键图像及普通图像的流程示意图;
图4为本发明实施例提供的第二种图像信息处理方法的流程示意图;
图5为本发明实施例提供的一种图像信息处理装置的结构示意图;
图6为本发明实施例提供的第三种图像信息处理方法的流程示意图;
图7为本发明实施例提供的另一种图像信息处理装置的结构示意图;
图8为本发明实施例提供的第四种图像信息处理方法的流程示意图;
图9为本发明实施例提供的第五种图像信息处理方法的流程示意图;
图10为本发明实施例提供的第六种图像信息处理方法的流程示意图;
图11为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
以下结合说明书附图及具体实施例对本发明的技术方案做进一步的详细阐述。
如图1所示,本实施例提供一种图像信息处理方法,包括:
步骤S110:确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像;其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
步骤S120:根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件。
在一些实施例提供的图像信息处理方法可应用于压缩端中,该压缩端同时还可为发送端,该方法可为提供所述图像信息的服务器或终端设备。所述服务器可为运用于网络中的云服务器或者服务器组。所述终端设备可为各种电子设备,例如,手机、可穿戴设备、虚拟现实设备或增强现实设备等。
在步骤S110中待压缩的YUVA图像可为多张具有内容关联性的独立的YUVA图像。在本实施中由于YUVA图像具有内容关联性,这种内容关联性可以体现在:前后播放的两个YUVA图像之间具有相似性,这种相似性可以用相似度或差异度来描述相似程度。在本实施中利用这种相似性需要进行视频压缩,如此,将多个独立的YUVA图像文件转换为视频进行压缩,可以利用视频压缩技术尽可能减少数据量,从而达到存储该压缩文件所需的存储资源少及传输该压缩文件所消耗的流量小及占用带宽小的特点。
在本实施例中利用视频压缩技术,一方面,可以实现相邻YUVA图像之间的图像间压缩,例如,如此,可以实现YUVA图像之间的相同部分的冗余数据去除。与此同时,在本实施中确定关键图像和普通图像,所述普通图像为所述关键图像以外的一个图像;此处的关键图像可为前一个图像的差异度大于预设值的图像,例如,第s+1个图像与第s个图像之间差异度大于预设值(即相似度小于特定值),则可认为第s+1个图像为关键图像;与关键图像之间的差异度小于预设值的图像可称之为该关键图像的普通图像。在本实施例中通过关键图像和普通图像的区分,另一方面可以将多张YUVA图像按照相似度分为多组待压缩的图像;相对于将所有YUVA图像视为一组进行相同部分的数据压缩而言,如此实现每一个组的冗余数据去除的最大化;如此,不仅可以图像间压缩进行数据量压缩,与此同时通过关键图像及普通图像的区分,可以尽可能的提升图像间压缩的压缩效率。
在本实施例中所述YUVA图像是一种全新的图像,该YUVA图像除了包括原有的Y分量、U分量、V分量,还引入了A分量及第一空白分量和第二空白分量。
在本实施例中所述Y分量和所述A分量可包括:W*H个像素的分量值,所述W为一个所述YUVA图像中像素的列数;所述H为一个所述YUVA图像中像素的行数。例如,所述Y分量可包括:W*H个像素的亮度值;所述A分量可包括:W*H个像素的透明度值。
在本实施例中,所述U分量和V分量均包括:W*H/4个像素的色度值。当然所述U分量和V分量对应的像素行数不同。
在进行图像处理时,所述Y分量和所述A分量将,一个分量归属一个第一通道的,如此,一个所述第一通道对应的数据量为:W*H个像素的分量值。
所述U分量和V分量可视为第二通道的分量,若该第二通道仅包括U分量和Y分量显然会导致这个通道对应的数据量为:W*H/2个像素的分量值,少于第一通道的数据量,如此在进行图像展示时会由于第一通道和第二通道的数据量的不匹配导致图像播放错误。故在本实施例中还引入了第一空白分量和第二空白分量;所述第一空白分量和第二空白分量均可为取值为“0”的分量。所述U分量与所述第一空白分量的数据量之和为W*H/2个像素的分量值;所述V分量和所述第二空白分量的数据量之和为W*H/2个像素的分量值。如此,U分量、V分量、第一空白分量及第二空白分量之和等于W*H个像素的分量值。此时,若第二通道的分量包括U分量、V分量、第一空白分量及第二空白分量,就解决了第一通道和第二通道包含的数据量不同导致的图像播出错误的问题。如此,一个YUVA图像不仅可以包括亮度分量和色度分量,同时包含了透明度分量,如解码显示该YUVA图像则直接就可以输出一个自带透明度的图像,而无需如现有技术一般可能需要额外的一张灰度图像来体现透明度,从而减少了图像数量,并减少了因为图像数量产生的数据量。
图2为一个所述YUVA图像的各个分量的一个效果示意图,具体实现时有很多种,不局限于上述任意一种。
可选地,如图3所示,所述步骤S110可包括:
步骤S111:确定计算分量,其中,所述计算分量为:所述Y分量、所述V分量和所述U分量中的一个或多个,或者,所述计算分量为:所述Y分量、所述V分量和所述U分量的转换分量中的一个或多个;
步骤S112:根据所述A分量确定差分计算权值;
步骤S113:基于提取的色差分量及所述计算权值得到第n个所述YUVA图像的第n计算值及第n+1个所述YUVA图像的第n+1计算值,其中,所述n为正整数;
步骤S114:对所述第n计算值及所述第n+1计算值进行差分计算;
步骤S115:根据所述差分计算的结果确定关键图像及所述普通图像。
在本实施例中首先会确定计算分量,该计算分量可以为YUVA图像中Y分量、U分量及V分量中的一个或多个;也可以是所述Y分量、U分量及V分量中的转换分量中的一个或多个,该转换分量可为与所述Y分量、U分量及V分量中的R分量、B分量及G分量中的一个或多个。
对于m个比特的通道而言,若A分量的取值为“0”表示全透明;若取值为“2m-1”表示不透明;若取值在“0”到“2m-1”之间表示半透明。例如,对于8比特的通道而言,若A分量的取值为“0”表示全透明;若取值为“255”表示不透明;若取值在“0”到“255”之间表示半透明。
即值得注意的是,本发明实施例中引入了所述A分量来确定权值,由于A分量的存在,对于8比特的通道而言,若A分量的分量值“0”时表示全透明,则此时对应的像素的有色彩,也不会有呈现该色彩,故本实施例中基于A分量来设置差分计算权值,如此,可以结合A分量对色彩分量的影像来确定两个图像最终呈现给用户的效果层面计算相似度或差异度,从而尽可能的进行图像的差异。
在本实施例中若仅选择一个分量作为计算分量时,可以选择所述Y分量;Y分量相对于U分量和/或V分量可以更加细致的表征图像的特点,若选择Y分量作为单一计算分量的话,可以精确的反应图像的特点,且由于仅引入了一个分量参与计算,可以减少计算量,尤其是包括大量的像素的计算,计算量大大的节省了。
在一些实施例中,在选择图像数据中的一个还是多个作为所述计算分量时,可以对两个图像进行差异度的大致预估。例如,通过降采样或预估算法获得两个图像的预估差异。所述预估差异可包括:预估透明度差异及色彩差异中的至少一个。例如,所述降采样可包括:对像素的各个分量值进行1/2采样、1/5采样或者1/10采样。所述预估算法可包括:均值算法、中值算法及极值算法。
例如,所述方法可包括:
获取图像之间的透明度差异,若透明度差异度大于透明度差异阈值,则需要选择一个以上的分量作为所述计算分量。
在一些实施例中,在确定两个图像的色彩差异之前,可以先匹配两个图像的A分量,根据两个图像的A分量的透明度差异大于透明度差异阈值,则可以直接认为两个图像至少有一个可为关键图像,若两个图像A分量的透明度差异阈值小于透明度差异阈值,在进行两个色彩差异的比较。若两个图像的A分量不同,则可能会向用户呈现的透明区域不同,呈现效果差异很大,故在本实施例中可以优先基于A分量的比较,来确定是选择一个图像数据中的一个分量还是多个分量进行后续的关键图像帧和普通图像的区分,如此,可以大大的减少计算量。
所述预估透明度差异大于预估透明度差异阈值可包括以下至少之一:
若两个图像重叠,两个图像的全透明区域之间的距离大于预设距离;
若两个图像重叠,两个图像的全透明区域之间间隔了一个至少一个半透明或不透明图像子区域。
为了实现快速比对A分量,可以通过降采样的方式从两种图像的各个图像子区域抽取部分像素的A为代表进行比对,来预估两个图像之间的透明度差异。
当然在还有一些实施例中,可以先比对两个图像的色彩差异度以获得所述预估色彩差异,若预估色彩差异小,才根据所述A分量确定两个图像的预估透明度差异度。
在一些实施例中,所述方法还包括:
若所述图像之间的预估透明度差异小于所述透明差异阈值,则进入到基于两个图像的预估色彩差异选择一个或多个分量作为计算分量的步骤。
所述基于两个图像的色彩差异选择一个或多个分量作为计算分量,可包括:
获取图像之间的预估色彩差异,若预估色彩差异大于色彩差异阈值则可以选择两个分量或三个分量作为计算分量参与差分计算;若小于色彩差异阈值则可以仅选择一个分量作为计算分量进行差分计算。此处的图像可为YUVA图像或者YUVA图像对应的RGBA图像等
此处确定所述预估色彩差异可包括以下至少之一;
比较两个图像的像素值的均值,
比较两个图像的像素值的中值;
比较两个图像的极大像素值;
比较两个图像的极小像素值;
根据上述均值、中值、极大像素值及极小像素值的比较结果中的一个或多个,对应的两个图像的色差差异度是否足够大。例如,两个均值的差大于均值预定值,则认为两个图像的预估色彩差异大,否则认为两个图像的预估色彩差异小。再例如,两个中值的差大于中值预定值,则认为两个图像的预估色彩差异大,否则认为两个图像的预估色彩差异小。在必比如,结合极小像素值和极大像素值的比较,确定图像的色差差异度是否足够大;例如,极小像素值的比较直和极大像素值的比较值均大于对应的预定值,可认为图像的色差差异度是否足够大,否则可认为图像的色差差异度是否足够不够大。若图像的预估色彩差异大,则两个图像中的至少一个图像为关键图像。
在本实施例中所述差分计算可为将两个图像中对应坐标的像素逐一进行比较来获得所述差分计算的结果。例如,第n个YUVA图像的第x行第y个坐标的像素的Y分量和该像素的A分量对应的权值进行计算得到该像素的一个比较值,该比较值为前述的第n计算值的一个。第n+1个YUVA图像的第x行第y个坐标的像素的Y分量和该像素的A分量对应的权值进行计算得到该像素的比较值,该比较值为前述的第n+1计算值的一个,将这两个比较值的差值较小,例如,在给定的区间内,则认为这两个像素的像素值等同,如此,统计两个YUVA图像中像素值等同的像素个数,将该像素个数可作为表明两个YUVA图像的差异度的参数,或则计算出像素值等同的像素个数与一个YUVA图像中总像素的比值,利用该比值可以反映出两个YUVA的相似性。
在一些实施例中,为了降低计算量可通过降采样的方式来确定所述关键图像和普通图像。在计算所述计算值时的采样频率可高于进行预估差异度的采样频率。
可选地,所述步骤S115可包括:
若第n+1计算值相较于所述第n计算值的差分计算的结果位于预设范围外,则所述第n+1个所述YUVA图像为所述关键图像;
和/或,
若第n+1计算值相较于所述第n计算值的差分计算的结果位于所述预设范围内,则所述第n+1个所述YUVA图像为所述普通图像。
此处的差分计算的结果可为前述的除去所述像素值等同的像素个数以外的像素个数,也可以一个YUVA图像的总像素个数减去所述像素值等同的像素个数得到的像素个数与总像素个数的比值。例如,可以通过参与计算的所有像素的比较值,然后对这些比较值求均值,若均值位于均值范围内,则可认为这两个图像相似度很高,若均值位于均值范围外则认为这两个图像差异度很大,其中有一个为关键图像。总之,该差分计算的结果位于预设范围内,说明这两个YUVA图像的差异度大,则第n+1个YUVA图像是与前面YUVA图像差异大的关键图像,否则可为普通图像。
可选地,所述A分量的取值范围为:0到2m,其中,所述m为色彩通道的位数;所述步骤S112可包括:对所述A分量进行归一化处理,获得与所述差分计算权值。
在进行所述归一化处理时,归一化的分母可为2m,如此,计算得到的A分量对应的差分计算权值的取值范围为:0到1。
在一些实施例中,可以直接将A分量作为差分计算权值进行计算,指示若将A分量直接作为差分计算权值进行计算,由于涉及的数据比较大,会导致计算难度增大,故在上述实施例中进行了A分量的归一化处理之后得到的归一化值作为所述差分计算权值。
可选地,如图4所示,所述方法还包括:
步骤S100:将原始的RGBA图像转换为YUVA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
其中,所述YUVA图像被压缩后数据量小于所述RGBA图像被压缩后的数据量。
在本实施例中,所述YUVA图像是由RGBA图像转换而来的,即所述RGBA图像是原始图像;而所述YUVA图像是转换后的图像。
在进行YUVA图像到RGBA图像的转换时,RGBA图像中的R分量、B分量及G分量用于转换为YUVA图像中的Y分量、U分量及V分量;而所述RGBA图像中的A分量直接赋值给所述YUVA图像中的A分量。R分量、B分量及G分量用于转换为YUVA图像中的Y分量、U分量及V分量的可以参见相关技术的RGB图像到YUV图像的转换。
将RGBA图像转换YUVA图像之后进行图像压缩,相对于直接压缩RGBA得到的压缩后的数据量更小,从而压缩幅度更大,故再一次减少了压缩文件的数据量。
在本实施例中所述YUVA图像是由所述RGBA图像转化而来的,为了提升处理效率,在将所述RGBA图像转换YUVA图像的同时,直接对RGBA图像进行差分计算,再根据RGBA图像与YUVA图像的对应关系,确定出YUVA图像中的关键图像和普通图像。如此,可以同步实现图像类型的转换,并同步确定出关键图像和普通图像,减少压缩延时。例如,利用第一线程进行RGBA图像到YUVA图像的转换,利用第二线程进行关键图像和普通图像的区分;所述第一线程和第二线程都可以包括一个或多个线程;但是第一线程和第二线程不同,从而通过并行计算可以提升压缩文件的快速压缩。
故在一些实施例中,所述步骤S111可包括:提取所述RGBA图像中所述R分量、所述G分量及所述B分量中的一个或多个;
所述步骤S112可包括:根据所述A分量确定差分计算权值;
所述步骤S113可包括:基于提取的色差分量及所述计算权值得到第n个所述RGBA图像的第n计算值及所述n+1个所述RGBA图像的第n+1计算值,其中,所述n为正整数;
所述步骤S114可包括:对所述第n计算值及所述第n+1计算值进行差分计算;
所述步骤S115可包括:根据所述差分计算的结果确定关键图像及所述普通图像。
在本实施例中,具体是选择所述R分量、G分量及B分量的一个还是多个,可以根据前述的色彩差异来确定。若色差差异度小,可以选择仅用一个色彩分量进行差分计算。
中的色彩分量的一个来差分计算,从而减少计算量。在本实施在进行差分计算时还会A分量,结合一个色差分量和A分量进行差分计算,从而不仅考虑了色彩分量及A分量。
在步骤S114中进行差分计算可包括:将所述第n计算值和第n+1计算值做减法,从而达到差分计算的结果。将所述差分计算的结果与
且进一步地,所述多张所述YUVA图像为序列帧动画的YUVA图像,或者,所述RGBA图像为序列帧动画的YUVA图像。若是一个序列动画的YUVA图像,则YUVA图像之间有较大的内容关联性,如此利用前述压缩技术,可以大大的压缩数据量,减少数据量占用的存储资源和/或带宽资源。
此外,在本发明实施例中,所述YUVA图像和所述RGBA图像可为至少部分透明的透明图像,如此,利用上述压缩方法可以最大限度的压缩数据量,减少不必要的存储资源及传输资源的浪费。
可选地,所述步骤S120可包括:
根据所述关键图像和所述普通图像,采用VP9编码方式对所述YUVA图像进行视频压缩。
在本实施例中采用VP9编码方式对所述YUVA图像记性能够视频压缩,可以获得Webm视频压缩文件,该压缩文件可以很好的平衡文件的数据量和压缩所需的时间,确保数据量尽可能减小的同时,提升编码速率。
如图5所示,本实施例提供一种图像信息压缩装置,可应用于压缩端,可包括:
确定模块110,用于确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像;其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
第一压缩模块120,用于根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件。
所述确定模块110及所述第一压缩模块120均可为程序模块,被处理器执行后能够实现前述一个或多个实施提供搞得图像信息处理方法。
可选地,所述确定模块110,包括:
第一确定单元,用于确定计算分量,其中,所述计算分量为:所述Y分量、所述V分量和所述U分量中的一个或多个,或者,所述计算分量为:所述Y分量、所述V分量和所述U分量的转换分量中的一个或多个;
第二确定单元,用于根据所述A分量确定差分计算权值;
第一计算单元,用于基于提取的色差分量及所述计算权值得到第n个所述YUVA图像的第n计算值及第n+1个所述YUVA图像的第n+1计算值,其中,所述n为正整数;
第二计算单元,用于对所述第n计算值及所述第n+1计算值进行差分计算;
第三确定单元,用于根据所述差分计算的结果确定关键图像及所述普通图像。
在本实施例中会结合A分量会影响具有不同色彩值的像素的相似度计算,故在本实施例中需要根据A确定差分计算权值。
在另一些实施中,所述第三确定单元,具体若第n+1计算值相较于所述第n计算值的差分计算的结果位于预设范围外,则所述第n+1个所述YUVA图像为所述关键图像;和/或,若第n+1计算值相较于所述第n计算值的差分计算的结果位于所述预设范围内,则所述第n+1个所述YUVA图像为所述普通图像。
可选地,所述第二确定单元,具体用于对所述A分量进行归一化处理,获得与所述差分计算权值。
进一步地,所述装置还包括:
第一转换模块,用于将原始的RGBA图像转换为所述YUVA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
其中,所述YUVA图像被压缩后数据量小于所述RGBA图像被压缩后的数据量。
可选地,所述确定模块110,具体用于提取所述RGBA图像中的一个色彩分量,其中,所述色彩分量包括:所述R分量、所述G分量及所述B分量;根据所述A分量确定差分计算权值;基于提取的色差分量及所述计算权值得到第n个所述RGBA图像的第n计算值及所述n+1个所述RGBA图像的第n+1计算值,其中,所述n为正整数;对所述第n计算值及所述第n+1计算值进行差分计算;根据所述差分计算的结果确定关键图像及所述普通图像。
进一步地,可选地,多张所述YUVA图像为序列帧动画的图像帧。
在另一些实施例中,所述第一压缩模块,具体用于根据所述关键图像和所述普通图像,采用VP9编码方式对所述YUVA图像进行视频压缩。
如图6所示,本实施例提供一种图像信息处理方法,包括:
步骤S210:接收基于关键图像和普通图像对YUVA图像进行视频压缩后的压缩文件,其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
步骤S220:还原所述压缩文件中携带的所述YUVA图像;
步骤S230:按照所述YUVA图像的播放次序,播放序列帧动画。
本实施提供的方法可应用于解压端,该解压端可为该压缩文件的接收端,但是不限于接收端,在特定的情况下,该解压端还可为该压缩文件的压缩端。
本实施例的压缩文件是对YUVA图像进行的压缩,此处的YUVA图像可以参见前述的实施例,此处就不再重复了。
此外,在本实施中接收到的压缩文件是基于关键图像和普通图像的进行的视频压缩。如此接收到的数据量小,若接收端进行数据存储则存储占用的空间小。
在本实施例中将还原压缩文件中携带的YUVA图像,同时还可以基于视频文件的头部等信息,获得各个YUVA图像的播放次序,基于该播放次序可以直接播放所述YUVA图像或所述YUVA图像的转换图像,从而实现序列帧动画的播放效果。
可选地,所述方法还包括:
将所述YUVA图像转换为RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量。
在本实施例中,序列帧动画的原始图像可能是RGBA图像,为了减少传输的数据量,RGBA图像被转换为了YUVA图像,为了实现进一步还原,所述方法还可包括:将所述YUVA图像转换为RGBA图像。
同样地,将YUVA图像中的Y分量、V分量及U分量转换为R分量、G分量及B分量,将YUVA图像中的A分量转换为RGBA图像中A分量。如此,YUVA图像和RGBA图像是一一对应的。
可选地,所述步骤S220可包括:
在播放序列帧动画之前,还原所述压缩文件中的YUVA图像;
存储图像数据,其中,所述图像数据为所述YUVA图像或所述YUVA图像转换后的RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
所述步骤S230可包括:
在播放所述序列帧动画时,读取所述图像数据;
根据所述YUVA图像的播放次序依次播放序列帧动画。
在本实施例中,在播放序列帧动画之前,就完成YUVA图像的还原,如此,不用等到在播放时再还原所述YUVA图像,导致的CPU等处理器的过载的问题。尤其是当存在多个序列帧动画的压缩文件需要被解压并被播放时,通过提前还原所述YUVA图像,可以大大降低CPU播放所述序列帧动画时的负载量,降低播放过程中的卡顿现象,提升播放效果。
在本实施例中所述图像数据可为所述YUVA图像的图像数据,还可以是所述RGBA图像的图像数据。
在本实施例中所述图像数据可存在所述解压端的硬盘上,例如,存在解压端的硬盘的预定空间内,所述步骤S230中播放序列帧动画时,从所述预定空间读取数据后直接播放,不需要边播放边还原图像。
在另一些实施例中,若所述解压端的内容空间大或者所述图像数据的数据量小于特定值,还可以将所述图像数据存储在内存空间内,如此,在播放时直接从内存空间内读取所述数据,从而可以再次减少播放延时,提升播放效果。
可选地,所述方法
在存储所述图像数据之前,删除所述YUVA图像中的所述第一空白分量和所述第二空白分量。
在本实施例中所述第一空白分量和所述第二空白分量实质上是为了显示图像是用的,但是第一空白分量和第二空白分量本身没有数据值,例如,均为“0”,如此,可以删除所述第一空白分量和所述第二空白分量,可以减少图像数据存储时所消耗的存储空间。
在一些实施例中,所述方法还包括:
若当前负载率小于预设负载率,压缩所述YUVA图像或去除了所述第一空白分量和所述第二空白分量的图像数据以获得压缩数据;
所述存储图像数据包括:
存储所述压缩数据。
如此,在解压端的比较空闲时,可以将所述YUVA图像或去除了第一空白分量和第二空白分量的YUVA图像的图像数据进行压缩,以进一步减少存储时所消耗的存储资源。
可选地,所述若当前负载率小于预设负载率,压缩所述YUVA图像或去除了所述第一空白分量和所述第二空白分量的图像数据以获得压缩数据,包括:
若所述当前负载率小于所述预设负载率,利用JPEG压缩技术压缩所述YUVA图像或去除了所述第一空白分量或所述第二空白分量的图像数据。
在本实施例中采用JPEG压缩计算压缩所述YUVA图像或者去除了第一空白分量和第二空白分量的图像数据,可以获得较高的压缩率,从而以尽可能减少数据量。
在一些实施中,所述步骤S230可包括:
确定是否有所述YUVA图像的压缩数据;
若有所述压缩数据,对所述压缩数据解压缩还原所述YUVA图像。
在一些实施中,所述步骤S230还可包括:
若无所述压缩数据,读取所述YUVA图像或者还原去除了所述第一空白分量和所述第二空白分量的所述图像数据。
如图7所示,本实施例提供一种图像信息处理装置,包括:
接收模块210,用于接收基于关键图像和普通图像对YUVA图像进行视频压缩后的压缩文件,其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
还原模块220,用于还原所述压缩文件中携带的所述YUVA图像;
播放模块230,用于按照所述YUVA图像的播放次序,播放序列帧动画。
该图像信息处理装置可应用于解压端,例如,压缩文件的接收端等。
所述接收模块210、还原模块220及所述播放模块230均可对应于程序模块,该程序模块被处理器执行后可以接受所述压缩文件、还原所述YUVA图像,并播放序列帧动画。
可选地,所述装置还包括:
第二转换模块,用于将所述YUVA图像转换为RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量。
可选地,所述还原模块220,具体用于在播放序列帧动画之前,还原所述压缩文件中的YUVA图像;存储图像数据,其中,所述图像数据为所述YUVA图像或所述YUVA图像转换后的RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
所述播放模块230,具体用于在播放所述序列帧动画时,读取所述图像数据;根据所述YUVA图像的播放次序依次播放序列帧动画。
可选地,所述装置还包括:
删除模块,用于在存储所述图像数据之前,删除所述YUVA图像中的所述第一空白分量和所述第二空白分量。
可选地,所述第一压缩模块,具体用于若当前负载率小于预设负载率,压缩所述YUVA图像或去除了所述第一空白分量和所述第二空白分量的图像数据以获得压缩数据;
所述存储模块,具体用于存储所述压缩数据。
可选地,所述第二压缩模块,具体用于若所述当前负载率小于所述预设负载率,利用JPEG压缩技术压缩所述YUVA图像或去除了所述第一空白分量或所述第二空白分量的图像数据。
可选地,所述播放模块230,具体用于确定是否有所述YUVA图像的压缩数据;若有所述压缩数据,对所述压缩数据解压缩还原所述YUVA图像;或者,若无所述压缩数据,读取所述YUVA图像或者还原去除了所述第一空白分量和所述第二空白分量的所述图像数据。
如图11所示,本实施例提供了一种电子设备,包括:
存储器;
处理器,与所述存储器连接,用于通过执行位于所述存储器上的计算机可执行指令,能够实现前述一个或多个应用于第二私有网络、数据库、第一私有网络中一个或多个技术方案提供的信息处理方法,例如,图1、图3及图4所示信息处理方法中的一个或多个。
该存储器可为各种类型的存储器,可为随机存储器、只读存储器、闪存等。所述存储器可用于信息存储,例如,存储计算机可执行指令等。所述计算机可执行指令可为各种程序指令,例如,目标程序指令和/或源程序指令等。
所述处理器可为各种类型的处理器,例如,中央处理器、微处理器、数字信号处理器、可编程阵列、数字信号处理器、专用集成电路或图像处理器等。
所述处理器可以通过总线与所述存储器连接。所述总线可为集成电路总线等。
在一些实施例中,所述终端设备还可包括:通信接口,该通信接口可包括:网络接口、例如,局域网接口、收发天线等。所述通信接口同样与所述处理器连接,能够用于信息收发。
在一些实施例中,所述终端设备还包括人机交互接口,例如,所述人机交互接口可包括各种输入输出设备,例如,键盘、触摸屏等。
本实施例提供一种计算机存储介质,所述计算机存储介质存储有计算机可执行指令;所述计算机可执行指令被执行后,能够实现一个或多个技术方案提供的图像信息处理方法,例如,图1、图3、图4、图6及图8至图10所示方法中的一个或多个。
所述计算机存储介质可为包括具有记录功能的各种记录介质,例如,CD、软盘、硬盘、磁带、光盘、U盘或移动硬盘等各种存储介质。可选的所述计算机存储介质可为非瞬间存储介质,该计算机存储介质可被处理器读取,从而使得存储在计算机存储机制上的计算机可执行指令被处理器获取并执行后,能够实现前述任意一个技术方案提供的信息处理方法,例如,执行应用于终端设备中的信息处理方法或应用服务器中的信息处理方法。
本实施例还提供一种计算机程序产品,所述计算机程序产品包括计算机可执行指令;所述计算机可执行指令被执行后,能够实现前述一个或多个技术方案提供的图像信息处理方法,例如,例如,,图1、图3、图4、图6及图8至图10所示方法中的一个或多个。
所述包括有形地包含在计算机存储介质上的计算机程序,计算机程序包含用于执行流程图所示的方法的程序代码,程序代码可包括对应执行本发明实施例提供的方法步骤对应的指令。该程序产品可为各种应用程序或者软件开发工具包等。
以下结合的上述任意实施例提供几个具体示例:
示例1:
如图8所示,本示例提供一种图像信息处理方法,包括:解压、图像转换、编码、缓存及压缩等多个步骤。在一些应用场景下,所述解压是非必要的。
所述解压可包括:
读取压缩文件,例如,前述实施例中利用视频压缩技术压缩的压缩文件;
解压缩,此处,为解压缩读取的压缩文件,从而得到多个图像,在图8中显示有图像1、图像2及图像3等。
若需要将上述文件进行视频压缩,则进入到后续步骤,编码、缓存及压缩等。在一些实施例中所述图像转换可为非必要步骤,例如,原始存储的就是YUVA图像,则无需进行图像转换。
所述图像转换、编码及缓存及压缩可包括:
读取文件,此处读取的文件可为读取的图像文件,具体可如图8所示,读取的RBGA图像;
复制RGBA进行差分计算,此处的差分计算为基于像素粒度的,例如,对两张图像中对应位置像素逐一进行差分计算(也可以是基于降采样的差分计算)差分计算均值大于阈值,若是(Y),则认为关键图像,若否(N)则表示是非关键图像;
将RBGA图像转换为YUVA图像,YUVA图像的分量可如图8中所示,其中“0”表示空白分量,前述的第一空白分量和第二空白分量都可以统称为空白分量。
编码过程中,首先编码初始化。编码图像帧可为:根据关键图像和普通图像进行视频编码,此处的关键图像编码可对应于视频中的关键帧,普通图像可对应于视频中的普通帧。
在编码初始化之后编码得到视频头部,该视频头部可包括:视频参数,例如,视频中包括的视频的图像帧个数,图像帧的宽、高、视频格式以及美秒传输帧率(Frames PerSecond,FPS)等视频参数。
编码图像帧时,会形成帧头及缓存数据,帧头可包括:图像帧的参数,例如,指示该图像帧是否为对应于关键图像的关键帧,对应于普通图像的普通帧等。所述缓存数据可包括图像数据,例如,YUVA图像的图像数据,该图像数据可包括:Y分量、A分量、U分量、V分量、第一空白分量及第二空白分量的分量值。
若完成了所有图像的编码,则编码视频文件的尾,同样可包括:帧头+视频数据。
最后进行视频压缩。该压缩过程可包括:压缩初始化、压缩,写入压缩文件,例如,将压缩文件写入到硬盘中,从而减少存储所消耗的存储资源。在一些情况下还包括:发送所述压缩文件。该压缩文件可以携带在图像应用的应用程序的安装包中下发到接收端,也还可以是存在服务器中,基于终端设备中的应用程序的请求下发所述压缩文件。在另一些情况下,所述方法还可包括:定期将更新后的压缩文件传输给应用程序所在的终端设备。
使用场景:需要同时播放多个视频,每个人脸序列帧动画都需要配套的视频解码;编码:使用Webm编码优点:占用空间小,减轻服务器负荷。
解码:
方式一:实时视频解码压缩文件或编码视频压缩文件。
方式二:存储原始图像数据到硬盘上。多线程解码多个压缩文件。
CPU空闲时段,将原始图像数据编码为小文件。例如,在CPU的利用率低于特定阈值时,编码原始图像数据,例如,JPEG压缩所述原始图像数据,节省存储资源的消耗。
图像编码:为了实像包括透明度分量的图像编码,例如WebP编码采用YUV+Alpha(A)的方式,权衡编码时间和文件大小,使用jpg压缩。
示例2:
如图9所示,本示例提供一种图像信息处理方法,该图像信息可包括:各种图像的图像数据。所述方法可包括:
读取压缩文件;
解压压缩文件,得到解压文件1、解压文件2及解压文件3,在具体实现时不局限于3个解压文件。
缓存操作可包括:视频文件头、图像帧头及缓存数据(该缓存数据可包括:原始的图像数据)。
编码操作可包括:
编码初始化;
编码图像帧;
判断是否是最后一张图像,若不是返回缓存操作。
图像转换可包括:
通过编码图像帧得到了YUVA图像;
将YUVA图像去除空白分量,得到灰度图;
存储原始图像数据,或者,JPEG压缩保存JPEG格式压缩数据。
若当前CPU占用率比较小,从硬盘读取原始图像数据进行JPEG压缩。
示例3:
本示例提供一种序列帧动画的播放示意图,包括:
请求图像文件序列,由于序列帧动画是按照先后顺序切换图像,从而形成动画效果的,故在一些情况下,图像是按照序列形式存储在设备中的,故形成了所述图像文件序列;
从硬盘读取图像文件;
判断是否存在JPEG图像,若是(Y)读取JPEG图像文件,若否(N)读取原始图像文件,该原始图像文件可能是去除了空白分量的YUVA图像。
将YUVA图像转换为RGBA图像;
进行文件映射结果,例如,将YUVA图像映射为RGBA图像,如此,就可以知晓RGBA图像的播放次序了。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理模块中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种图像信息处理方法,其特征在于,包括:
确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像;其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件。
2.根据权利要求1所述的方法,其特征在于,
所述确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像,包括:
确定计算分量,其中,所述计算分量为:所述Y分量、所述V分量和所述U分量中的一个或多个,或者,所述计算分量为:所述Y分量、所述V分量和所述U分量的转换分量中的一个或多个;
根据所述A分量确定差分计算权值;
基于提取的色差分量及所述计算权值得到第n个所述YUVA图像的第n计算值及第n+1个所述YUVA图像的第n+1计算值,其中,所述n为正整数;
对所述第n计算值及所述第n+1计算值进行差分计算;
根据所述差分计算的结果确定关键图像及所述普通图像。
3.根据权利要求2所述的方法,其特征在于,
所述根据所述差分计算的结果确定关键图像及所述普通图像,包括:
若第n+1计算值相较于所述第n计算值的差分计算的结果位于预设范围外,则所述第n+1个所述YUVA图像为所述关键图像;
和/或,
若第n+1计算值相较于所述第n计算值的差分计算的结果位于所述预设范围内,则所述第n+1个所述YUVA图像为所述普通图像。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将原始的RGBA图像转换为所述YUVA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
其中,所述YUVA图像被压缩后数据量小于所述RGBA图像被压缩后的数据量。
5.根据权利要求4所述的方法,其特征在于,所述确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像,包括:
提取所述RGBA图像中的一个色彩分量,其中,所述色彩分量包括:所述R分量、所述G分量及所述B分量;
根据所述A分量确定差分计算权值;
基于提取的色差分量及所述计算权值得到第n个所述RGBA图像的第n计算值及所述n+1个所述RGBA图像的第n+1计算值,其中,所述n为正整数;
对所述第n计算值及所述第n+1计算值进行差分计算;
根据所述差分计算的结果确定关键图像及所述普通图像。
6.一种图像信息处理方法,其特征在于,包括:
接收基于关键图像和普通图像对YUVA图像进行视频压缩后的压缩文件,其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
还原所述压缩文件中携带的所述YUVA图像;
按照所述YUVA图像的播放次序,播放序列帧动画。
7.根据权利要求6所述的方法,其特征在于,
所述还原所述压缩文件中携带的所述YUVA图像,包括:
在播放所述序列帧动画之前,还原所述压缩文件中的YUVA图像;
存储图像数据,其中,所述图像数据为所述YUVA图像或所述YUVA图像转换后的RGBA图像,其中,所述RGBA图像包括:红色R分量、绿色G分量、蓝色B分量及透明度A分量;
所述按照所述YUVA图像的播放次序,播放序列帧动画,包括:
在播放所述序列帧动画时,读取所述图像数据;
根据所述YUVA图像的播放次序依次播放序列帧动画。
8.一种图像信息处理装置,其特征在于,包括:
确定模块,用于确定待压缩的YUVA图像中的关键图像和所述关键图像以外的普通图像;其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
第一压缩模块,用于根据关键图像和所述普通图像,对所述YUVA图像进行视频压缩并获得所述YUVA图像的压缩文件。
9.一种图像信息处理装置,其特征在于,包括:
接收模块,用于接收基于关键图像和普通图像对YUVA图像进行视频压缩后的压缩文件,其中,所述YUVA图像包括:亮度Y分量、第一色差U分量、第二色差V分量及透明度A分量、第一空白分量及第二空白分量;所述Y分量的数据量等于所述A分量;所述U分量和所述第一空白分量的数据量之和等于1/2所述A分量的数据量;所述V分量和所述第二空白分量的数据量之和等于1/2所述A分量的数据量;
还原模块,用于还原所述压缩文件中携带的所述YUVA图像;
播放模块,用于按照所述YUVA图像的播放次序,播放序列帧动画。
10.一种计算机存储介质,所述计算机存储介质存储有计算机可执行指令;所述计算机可执行指令被执行后,能够实现权利要求1至5或6至7任一项提供的方法。
CN201810559099.7A 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质 Active CN108668169B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810559099.7A CN108668169B (zh) 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质
CN202111165241.8A CN113766319A (zh) 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810559099.7A CN108668169B (zh) 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202111165241.8A Division CN113766319A (zh) 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质

Publications (2)

Publication Number Publication Date
CN108668169A true CN108668169A (zh) 2018-10-16
CN108668169B CN108668169B (zh) 2021-10-29

Family

ID=63775285

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202111165241.8A Withdrawn CN113766319A (zh) 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质
CN201810559099.7A Active CN108668169B (zh) 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202111165241.8A Withdrawn CN113766319A (zh) 2018-06-01 2018-06-01 图像信息处理方法及装置、存储介质

Country Status (1)

Country Link
CN (2) CN113766319A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115016921A (zh) * 2021-10-22 2022-09-06 荣耀终端有限公司 资源调度方法、装置及存储介质
CN115550661A (zh) * 2022-11-25 2022-12-30 统信软件技术有限公司 一种图像压缩方法、复原方法、计算设备及可读存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1361630A (zh) * 2002-01-25 2002-07-31 安凯(广州)软件技术有限公司 用于无线网络和无线手持式设备的动画压缩方法
CN1781314A (zh) * 2003-04-30 2006-05-31 诺基亚有限公司 图像编码方法
CN1902938A (zh) * 2004-01-05 2007-01-24 皇家飞利浦电子股份有限公司 使用场景变化检测的处理方法和设备
CN101594537A (zh) * 2009-06-04 2009-12-02 京北方科技股份有限公司 海量图像数据压缩方法
CN101742317A (zh) * 2009-12-31 2010-06-16 北京中科大洋科技发展股份有限公司 一种带阿尔法透明通道的视频压缩编码方法
CN101820545A (zh) * 2010-05-04 2010-09-01 北京数码视讯科技股份有限公司 视频帧插入区宏块的编码方法
US20130120616A1 (en) * 2011-11-14 2013-05-16 Casio Computer Co., Ltd. Image synthesizing apparatus, image recording method, and recording medium
US20140355665A1 (en) * 2013-05-31 2014-12-04 Altera Corporation Adaptive Video Reference Frame Compression with Control Elements
CN104935832A (zh) * 2015-03-31 2015-09-23 浙江工商大学 针对带深度信息的视频抠像方法
CN105913096A (zh) * 2016-06-29 2016-08-31 广西大学 一种无序图像关键帧的提取方法
CN106375759A (zh) * 2016-08-31 2017-02-01 深圳超多维科技有限公司 一种视频图像数据的编、解码方法及装置
CN107005715A (zh) * 2014-10-14 2017-08-01 诺基亚技术有限公司 图像序列编码和解码的装置、方法和计算机程序

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1361630A (zh) * 2002-01-25 2002-07-31 安凯(广州)软件技术有限公司 用于无线网络和无线手持式设备的动画压缩方法
CN1781314A (zh) * 2003-04-30 2006-05-31 诺基亚有限公司 图像编码方法
CN1902938A (zh) * 2004-01-05 2007-01-24 皇家飞利浦电子股份有限公司 使用场景变化检测的处理方法和设备
CN101594537A (zh) * 2009-06-04 2009-12-02 京北方科技股份有限公司 海量图像数据压缩方法
CN101742317A (zh) * 2009-12-31 2010-06-16 北京中科大洋科技发展股份有限公司 一种带阿尔法透明通道的视频压缩编码方法
CN101820545A (zh) * 2010-05-04 2010-09-01 北京数码视讯科技股份有限公司 视频帧插入区宏块的编码方法
US20130120616A1 (en) * 2011-11-14 2013-05-16 Casio Computer Co., Ltd. Image synthesizing apparatus, image recording method, and recording medium
US20140355665A1 (en) * 2013-05-31 2014-12-04 Altera Corporation Adaptive Video Reference Frame Compression with Control Elements
CN107005715A (zh) * 2014-10-14 2017-08-01 诺基亚技术有限公司 图像序列编码和解码的装置、方法和计算机程序
CN104935832A (zh) * 2015-03-31 2015-09-23 浙江工商大学 针对带深度信息的视频抠像方法
CN105913096A (zh) * 2016-06-29 2016-08-31 广西大学 一种无序图像关键帧的提取方法
CN106375759A (zh) * 2016-08-31 2017-02-01 深圳超多维科技有限公司 一种视频图像数据的编、解码方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
贺祥: "基于图像相似度的关键帧提取算法", 《福建电脑》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115016921A (zh) * 2021-10-22 2022-09-06 荣耀终端有限公司 资源调度方法、装置及存储介质
CN115016921B (zh) * 2021-10-22 2023-10-13 荣耀终端有限公司 资源调度方法、装置及存储介质
CN115550661A (zh) * 2022-11-25 2022-12-30 统信软件技术有限公司 一种图像压缩方法、复原方法、计算设备及可读存储介质

Also Published As

Publication number Publication date
CN108668169B (zh) 2021-10-29
CN113766319A (zh) 2021-12-07

Similar Documents

Publication Publication Date Title
JP2020174374A (ja) デジタルイメージ再圧縮
US9547916B2 (en) Segment-based encoding system including segment-specific metadata
WO2021068598A1 (zh) 共享屏幕的编码方法、装置、存储介质及电子设备
US7050503B2 (en) Segment-based encoding system using residue coding by basis function coefficients
US9609338B2 (en) Layered video encoding and decoding
CN113454691A (zh) 自适应点云属性编解码的方法和装置
US6888894B2 (en) Segmenting encoding system with image segmentation performed at a decoder and encoding scheme for generating encoded data relying on decoder segmentation
CN112188197B (zh) 通道间点云属性解码方法、装置以及可读存储介质
CN111131828B (zh) 一种图像压缩方法、装置、电子设备和存储介质
US8760366B2 (en) Method and system for remote computing
US8682091B2 (en) Real-time image compression
US20070064275A1 (en) Apparatus and method for compressing images
CN108668169B (zh) 图像信息处理方法及装置、存储介质
CN108668170B (zh) 图像信息处理方法及装置、存储介质
EP2843954B1 (en) Lossy color compression using adaptive quantization
KR20230173695A (ko) 엔트로피 인코딩, 디코딩 방법 및 장치
US10250892B2 (en) Techniques for nonlinear chrominance upsampling
US7103103B2 (en) Segmenting encoding system encoding video data using segment-by-segment kinetic data including change information in addition to translation information
KR20240006667A (ko) 점군 속성 정보 부호화 방법, 복호화 방법, 장치 및 관련 기기
CN111526366B (zh) 图像处理方法、装置、摄像设备和存储介质
CN101065760B (zh) 处理图像数据的系统和方法
US12095981B2 (en) Visual lossless image/video fixed-rate compression
US6829390B2 (en) Method and apparatus for transmitting image updates employing high compression encoding
CN116708793B (zh) 视频的传输方法、装置、设备及存储介质
WO2024119420A1 (zh) 编解码方法、码流、编码器、解码器以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant