CN101860753A - 一种基于分形的视频压缩与解压缩方法 - Google Patents

一种基于分形的视频压缩与解压缩方法 Download PDF

Info

Publication number
CN101860753A
CN101860753A CN 201010167243 CN201010167243A CN101860753A CN 101860753 A CN101860753 A CN 101860753A CN 201010167243 CN201010167243 CN 201010167243 CN 201010167243 A CN201010167243 A CN 201010167243A CN 101860753 A CN101860753 A CN 101860753A
Authority
CN
China
Prior art keywords
piece
frame
sub
father
fractal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201010167243
Other languages
English (en)
Other versions
CN101860753B (zh
Inventor
祝世平
候仰拴
王再阔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beihang University
Original Assignee
Beihang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beihang University filed Critical Beihang University
Priority to CN 201010167243 priority Critical patent/CN101860753B/zh
Publication of CN101860753A publication Critical patent/CN101860753A/zh
Application granted granted Critical
Publication of CN101860753B publication Critical patent/CN101860753B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提出了一种基于分形的视频压缩与解压缩方法,压缩方法是利用分形迭代原理进行视频编码的一种新型视频压缩编码方法,首先对起始帧采用块DCT变换编码,对非I帧进行块运动估计/补偿编码,首先计算与子块域和父块域相关子块的像素和与像素平方和,然后在前一帧搜索窗中利用全搜索方法寻找最相似的匹配块,最后利用Huffman编码方法压缩迭代函数系统系数。对应的解压缩过程为:对I帧采用反DCT变换的方式解码,对非I帧进行Huffman解码获得迭代函数系统系数,然后进行基于宏块的解码,首先计算父块域相关子块的像素和与像素平方和,然后依次对当前帧中的每一个宏块进行解码。本方法改进了传统分形视频压缩方法,不但大大提高了压缩比和峰值信噪比,而且提高了编码速度,进一步提高了分形视频压缩编码的性能,使其更加具有实用性。

Description

一种基于分形的视频压缩与解压缩方法
技术领域
本发明属于信号处理中的视频压缩编码领域,特别针对新一代视频编码领域提出一种新的分形视频压缩编码方法,在保证图像质量的前提下,大大加快了分形视频编码的速度和压缩比。
背景技术
分形理论最初由Mandelbrot于上世纪70年代提出(参见
Figure GSA00000110098100011
B.Mandelbrot.TheFractal Geometry of Nature[M].New York:W.H.Freeman and Company,1982.)。分形编码的数学基础是迭代函数系统(IFS)理论。Barnsley首先将分形编码用于交互式图像压缩(参见Michael F.Barnsley,Alan D.Sloan.A better way to compressimage[J].Byte Magazine,1988,13(1):215-233.)。Jacqain提出了全自动的分形图像压缩方法(参见Arnaud E.Jacquin.A novel fractal blocking-coding techniquefor digital image[C].IEEE International Conference on Acoustics,Speech andSignal Processing,1990,4:2225-2228.),(参见Arnaud E.Jacquin.Fractal imagecoding:a review[J].Proceeding of the IEEE,1993,81(10):1451-1465.),该方法采用基于图像分块的方式以局部的仿射变换代替全局的仿射变换。之后,Fisher利用四叉树改进了这一方法(参见Y.Fisher.Fractal Image Compression[J].Fractals,1994,2(3):347-361.),(参见Y.Fisher,E.W.Jacobs.Image compression:A studythe iterated transform method[J].Signal Processing,1992,29(3),251-263.),(参见Y.Fisher.Fractal Image Compression:Theory and application to digitalimages[M].New York:Spring-Verlag,1995,55-77.),大大提高了编码效率,并成为目前分形图像编码中的主流方法。
在此基础之上,一些学者和研究人员把分形图像压缩的方法应用到视频序列的压缩上。Meiqing Wang等提出了综合基于数据立方体和基于帧的分形视频压缩方法(参见Meiqing Wang,Choi-Hong Lai.A hybrid fractal video compression method[J].Computers & Mathematics with Applications,2005,50(3-4):611-621.),(参见Meiqing Wang,Zhehuang Huang,Choi-Hong Lai.Matching search in fractal videocompression and its parallel implementation in distributed computingenvironments[J].Applied Mathematical Modeling,2006,30(8):677-687.),(参见Meiqing Wang,Rong Liu,Choi-Hong Lai.Adaptive partition and hybrid methodin fractal video compression[J].Computers & Mathematics with Applications,2006,51(11):1715-1726.)。其中最为经典和影响较大的参见(C.S.Kim,R.C.Kim,S.U.Lee.Fractal coding of video sequence using circular prediction mapping andnoncontractive interframe mapping[J].IEEE Transactions on Image Processing,1998,7(4):601-605.)。该方法采用类似于标准视频编码方法所采用的运动估计/补偿技术,该方法利用了相邻帧之间的时间强相关性,对视频序列压缩取得了较好的效果。在CPM和NCIM中,子块域中的每个图像块都由来自相邻帧相同大小的父块域通过运动补偿得到。CPM和NCIM两者间最大的不同在于CPM在解码的过程中需要具备收敛性,而NCIM不需要。但是在循环预测编码(CPM)方法中,为了保证起始帧经过自身的循环解码能够近似收敛到原来的图像,压缩过程需要经过复杂变换、搜索和迭代等,压缩时间和图像质量难以达到要求。目前典型的分形图像和视频压缩方法的运算量很大,编码速度较慢,并且解码的质量有待提高,使得分形图像和视频压缩方法还需要进一步的改进和提高。
发明内容
本发明提出了一种基于分形的视频压缩与解压缩方法,压缩方法是利用分形迭代原理进行视频编码的一种新型视频压缩编码方法,首先对起始帧采用块DCT变换编码,对非I帧进行块运动估计/补偿编码,首先计算与子块域和父块域相关子块的像素和与像素平方和,然后在前一帧搜索窗中利用全搜索方法寻找最相似的匹配块,最后利用Huffman编码方法压缩迭代函数系统系数。对应的解压缩过程为:对I帧采用反DCT变换的方式解码,对非I帧进行Huffman解码获得迭代函数系统系数,然后进行基于宏块的解码,首先计算父块域相关子块的像素和与像素平方和,然后依次对当前帧中的每一个宏块进行解码。本方法改进了传统分形视频压缩方法,不但大大提高了压缩比和峰值信噪比,而且提高了编码速度,进一步提高了分形视频压缩编码的性能,使其更加具有实用性。
一种基于分形的视频压缩编码方法,包括以下步骤:
步骤一:对于I帧,首先对该帧进行互不重叠的固定大小的块划分,对每一个图像块分别采用基于块DCT变换的I帧帧内图像压缩方法,对该帧图像进行单独编码和解码,转到步骤四;所述I帧为视频序列起始帧或者视频序列中只进行帧内编码的图像帧;所述将当前帧划分为固定大小的互不重叠的图像块称为宏块;所述将当前宏块进行树状划分得到的块称为小块;所述参考帧为当前帧的已经编码并重建的前一帧;所述块DCT变换中的块采用固定大小模式;
步骤二:若当前帧为非I帧,在进行块匹配之前,首先对当前帧进行互不重叠的宏块划分,然后计算这些宏块以及经树状划分得到的小块的像素和、像素平方和,以及前一帧重建图像即参考帧中,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,以减少块匹配过程中的重复计算;转到步骤三;所述当前帧为正在进行压缩的帧;所述当前帧所有块的集合称为子块域;所述前一帧的所有块的集合称为父块域;
步骤三:依次对当前帧的所有宏块进行编码,在父块域中的搜索窗内首先对该宏块进行块匹配;在进行子块与父块的匹配过程中,子块的位置作为父块的起始搜索点,父块的大小与子块的大小相同;如果匹配误差RMS小于开始设定的阈值γ,保存当前的迭代函数系统系数即IFS系数,转入步骤三编码下一宏块;否则,依次按照树状结构对该块进行划分,并对各个划分得到的小块分别计算匹配误差RMS,如果RMS小于设定阈值γ,停止划分并记录该小块IFS系数,转入步骤三编码下一宏块;否则继续划分,直到将当前块划分为预先设定的最小块,记录IFS系数;转入步骤三编码下一宏块;所述搜索窗为在参考帧中的矩形搜索区域;所述IFS系数包括父块位置(x,y)和比例因子s、偏移因子o;如果当前帧所有的宏块都已编码完毕,则转到步骤四;
步骤四:对所有IFS系数进行Huffman编码,降低IFS系数数据的统计冗余;判断当前帧是否为最后一帧,如果是最后一帧结束编码;否则,返回步骤一继续处理下一帧图像。
所述一种基于分形的视频压缩编码方法,处理的视频序列为YUV格式,分别对3个分量中的每个采用上述四个步骤进行处理。
所述步骤四中对宏块采用树状划分,块匹配采用匹配误差准则;子块与父块的匹配误差RMS为:
RMS = 1 N [ Σ i = 1 N r i 2 + s ( s Σ i = 1 N d i 2 - 2 Σ i = 1 N r i d i + 2 o Σ i = 1 N d i 2 ) + o ( N · o - 2 Σ i = 1 N r i ) ] - - - ( 1 )
其中参数s和o分别为:
s = [ N Σ i = 1 N r i d i - Σ i = 1 N r i Σ i = 1 N d i ] [ N Σ i = 1 N d i 2 - ( Σ i = 1 N d i ) 2 ] - - - ( 2 )
o = 1 N [ Σ i = 1 N r i - s Σ i = 1 N d i ] - - - ( 3 )
其中,N为子块和父块像素的个数,ri为子块的像素值,di为父块的像素值;
计算当前宏块在参考帧中的块匹配误差RMS,其中ri是子块的像素值,di是父块的像素值;如果RMS小于预先设定的阈值γ,记录IFS系数,IFS系数包括匹配块的位移矢量(x,y)和公式2,3中的s和o,处理下一宏块;否则,对当前宏块进行树状划分,计算划分后小块的RMS,如果小于阈值γ,则停止划分,否则继续划分,直到子块达到预先设定的最小块为止。
一种基于分形的视频解压缩方法,其特征在于包含以下步骤:
步骤I:首先从压缩文件中读入压缩信息,包括压缩帧数,每帧图像的宽和高,I帧压缩质量,插入I帧数量和搜索范围;
步骤II:由读入压缩信息和当前待解码帧号判断该待解码帧是否为I帧,若是I帧转入步骤III,否则转入步骤IV;
步骤III:对于I帧,从压缩文件中读入解码该帧所需码流,采用基于块DCT变换的I帧帧内图像解压缩方法进行解码,帧数加一转入步骤V;
步骤IV:对于非I帧,首先计算参考帧中按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,然后从压缩文件中读入块的划分信息和Huffman码流,并根据块划分信息和Huffman码流得到该帧所有宏块的划分方式和每一个小块的迭代函数系统系数,按照每一宏块进行解码;
步骤V:判断此时所有帧是否都已解码,若都已解码完毕,则结束解码过程,否则转入步骤II。
对于每一个宏块进行解码时,首先判断该宏块在编码时的划分方式,对于每一个子块,首先在父块域找到与该子块相对应的区域,然后利用下面的公式获得该子块的像素值:
ri=s*di+o
其中ri为待解码子块的像素值,di为父块域中的像素值,s为比例因子,o为偏移因子。
处理的视频序列为YUV格式,分别对3个分量中的每个采用上述五个步骤进行处理。
本发明所提出的分形视频压缩方法的优点在于:
(1)本方法中对起始帧采用帧内块DCT变换编码,相对于CPM/NCIM编码方案,不但大幅度减少了压缩时间和块效应,而且提高了峰值信噪比。
(2)本方法先将一帧图像划分为互不重叠的、由若干固定大小尺寸的宏块组成的棋盘格式,然后根据匹配准则与设定阈值的关系,对宏块进行树状结构划分,相对于四叉树划分准则,大大降低了计算复杂度,提高了编码速度。
(3)本方法在进行子块与父块的匹配过程中,子块的位置作为父块的起始搜索点,父块的大小与子块的大小相同,并且将搜索区域限定在一个矩形区域内,取代了传统分形图像编码过程中对子块和父块进行分类和翻转的方法,极大提升了计算速度,且解码图像质量无明显下降。
(4)本方法在进行子块的块匹配之前,计算当前帧互不重叠的宏块及其经树状划分之后得到的小块的像素和与像素平方和。在参考帧中,按照匹配步长分别计算各宏块以及经树状划分以后得到的小块的像素和与像素平方和。这样就避免了在块匹配过程中出现重复计算的弊端,大大节约了子块的匹配时间。
附图说明
图1a为本发明一种基于分形的视频压缩与解压缩方法的压缩流程图;
图1b为本发明一种基于分形的视频压缩与解压缩方法的解压缩流程图;
图2a为标准测试视频序列“mother-daughter.cif”的第1帧;
图2b为本发明一种基于分形的视频压缩与解压缩方法单独解码经本发明方法压缩编码以后的标准测试视频序列“mother-daughter.cif”的第1帧结果图像;
图3a为本发明一种基于分形的视频压缩与解压缩方法对宏块的四种划分模式图;
图3b为本发明一种基于分形的视频压缩与解压缩方法对宏块的划分模式四进一步进行划分的四种划分模式图;
图4a为本发明一种基于分形的视频压缩与解压缩方法与传统的CPM/NCIM方法对标准测试视频序列“mother-daughter.cif”的前15帧进行压缩的峰值信噪比的对比图;
图4b为本发明一种基于分形的视频压缩与解压缩方法与传统的CPM/NCIM方法对标准测试视频序列“mother-daughter.cif”的前15帧进行压缩的压缩比的对比图;
图4c为本发明一种基于分形的视频压缩与解压缩方法与传统的CPM/NCIM方法对标准测试视频序列“mother-daughter.cif”的前15帧进行压缩的压缩时间的对比图。
图4d为本发明一种基于分形的视频压缩与解压缩方法与传统的CPM/NCIM方法对标准测试视频序列“mother-daughter.cif”的前15帧进行解压缩的时间对比图。
具体实施方式
下面将结合附图对本发明方法作进一步的详细说明,仅以亮度分量Y为例,色差分量U和V的压缩步骤与亮度分量相同。
本发明提出了一种基于分形的视频压缩与解压缩方法,压缩方法是利用分形迭代原理进行视频编码的一种新型视频压缩编码方法,首先对起始帧采用块DCT变换编码,对非I帧进行块运动估计/补偿编码,首先计算与子块域和父块域相关子块的像素和与像素平方和,然后在前一帧搜索窗中利用全搜索方法寻找最相似的匹配块,最后利用Huffman编码方法压缩迭代函数系统系数。对应的解压缩过程为:对I帧采用反DCT变换的方式解码,对非I帧进行Huffman反编码获得迭代函数系统系数,然后进行基于宏块的解码,首先计算父块域相关子块的像素和与像素平方和,然后依次对当前帧中的每一个宏块进行解码。本方法改进了传统分形视频压缩方法,不但大大提高了压缩比和峰值信噪比,而且提高了编码速度,进一步提高了分形视频压缩编码的性能,使其更加具有实用性。
如附图1a所示,一种基于分形的视频压缩编码方法,包括以下步骤:
步骤一:以标准测试视频序列“mother-daughter.cif”的前15帧为例。所述I帧为视频序列起始帧或者视频序列中只进行帧内编码的图像帧;所述将当前帧划分为固定大小的互不重叠的图像块称为宏块;所述将当前宏块进行树状划分得到的块称为小块;所述当前帧为正在进行压缩的帧,所述参考帧为当前帧的已经编码并重建的前一帧;所述当前帧所有块的集合称为子块域;所述前一帧的所有块的集合称为父块域;所述块DCT变换中的块采用固定大小模式。对视频序列“mother-daughter.cif”起始帧采用基于块DCT变换的I帧帧内图像压缩方法,将起始帧划分为8×8的互不重叠的子块,对每一子块分别进行DCT变换。离散余弦变换将8×8的图像样本X,变换成8×8的系数矩阵Y。变换过程(包括反变换)可以用变换矩阵A来表示。
8×8样本块的正向DCT(FDCT)变换如下:
Y=AXAT                                    (4)
反向DCT(IDCT)如下:
X=ATYA                                    (5)
其中A是8×8的变换矩阵。A中的各个元素如下:
A ij = C i cos ( 2 j + 1 ) iπ 16 ( i > 0 ) - - - ( 6 )
其中
C i = 1 8 ( i = 0 ) C i = 1 2 ( i ≠ 0 ) - - - ( 7 )
i,j分别为矩阵A的行和列。
对变换系数进行量化和编码。附图2a为标准测试视频序列“mother-daughter.cif”的起始帧,利用本方法解压缩DCT变换编码之后的解压缩图像为附图2b。转入步骤四。
步骤二:对当前非I帧图像进行互不重叠的16×16宏块划分,分别计算当前帧互不重叠的16×16,16×8,8×16,8×8,8×4,4×8,4×4的小块的像素和与像素的平方和。然后分别计算参考帧也就是前一帧的解压缩图像中以1为步长的大小分别为16×16,16×8,8×16,8×8,8×4,4×8,4×4的小块的像素和与像素的平方和,以减少块匹配过程中的重复计算。从第一个宏块开始处理,依次对当前帧的所有16×16宏块进行编码,转入步骤三;
步骤三:依次对当前帧的所有16×16宏块进行编码,在父块域中的搜索窗内对整个宏块进行块运动估计/补偿。匹配的依据是分形迭代函数系统原理,简要介绍一下分形图像压缩的数学基础-迭代函数系统(IFS:Iterative Function System)理论。设D是Rn欧氏空间的子集,ω为D→D的映射,如果存在一个实数C,0≤C<1,使得对于Rn上的度量d,满足对任意x,y∈D,有d(ω(x),ω(y))≤C(d(x,y)),则称ω为压缩映射,实数C称为ω的压缩因子。完备的度量空间(X,d)以及n个压缩映射ωi:X→X(其压缩因子分别为C1,C2,…Cn)一起,就组成一个迭代函数系统(Iterated Function System),简称IFS,记作{X:ω1,ω2,…,ωn}。C=max(C1,C2,…,Cn)称为IFS的压缩因子。因此{R2:ω1,ω2,ω3}就是一个IFS。
分形图像压缩中,一般的匹配准则是RMS,即:
RMS = 1 N [ Σ i = 1 N r i 2 + s ( s Σ i = 1 N d i 2 - 2 Σ i = 1 N r i d i + 2 o Σ i = 1 N d i 2 ) + o ( N · o - 2 Σ i = 1 N r i ) ]
其中s,o分别为:
s = [ N Σ i = 1 N r i d i - Σ i = 1 N r i Σ i = 1 N d i ] [ N Σ i = 1 N d i 2 - ( Σ i = 1 N d i ) 2 ]
o = 1 N [ Σ i = 1 N r i - s Σ i = 1 N d i ]
其中,N为子块和父块像素的个数,ri为子块的像素值,di为父块的像素值。
首先设定子块的匹配误差阈值γ=tol×tol×no,其中tol根据不同的子块大小而改变,大的子块tol就越大,小的子块tol就小。在本例中,我们取16×16宏块的tol为10.0,8×8子块的tol为8.0,4×4子块的tol为6.0,no为当前子块属于该视频对象区域的像素个数。
首先设定16×16宏块的匹配误差阈值γ16=10.0×10.0×no,在参考帧的父块域中以当前子块的位置开始在15×15的搜索窗内对整个宏块进行块匹配,如果匹配误差RMS小于开始设定的阈值γ16,保存当前的IFS系数包括比例因子s,偏移o,父块相对于当前子块的坐标偏移x,y,返回步骤三,继续下一宏块的匹配。
否则,按照树状结构对该宏块进行划分,对宏块的划分有四种模式,如附图3a,模式一为一个16×16小块,模式二为两个8×16的小块,模式三为两个16×8的小块,模式四为四个8×8的小块。
1、首先按模式二的划分计算,若模式二中两个小块都满足RMS<γ16,保存当前的IFS系数包括比例因子s,偏移o,以及父块相对于当前子块的坐标偏移x,y,并停止块的划分,转到5;
2、否则按模式三划分,若模式三中两个小块都满足RMS<γ16,保存当前的IFS系数包括比例因子s,偏移o,以及父块相对于当前子块的坐标偏移x,y,并停止块的划分,转到5;
3、否则按照模式四对当前宏块进行划分,此时匹配误差阈值设置为γ8=8.0×8.0×no,如果模式四中的4个小块都满足RMS<γ8,保存当前的IFS系数包括比例因子s,偏移o,以及父块相对于当前子块的坐标偏移x,y,并停止块的划分,转到5;
4、否则对模式四中的每一个小块按照附图3b中的模式划分顺序进行划分,可依次划分为1个8×8的小块,2个4×8的小块,2个8×4的小块,4个4×4的小块。这里只对第一个8×8小块的匹配过程进行阐述,其它3个8×8小块的匹配过程与第一个相同,不再赘述。首先按照2个4×8的小块划分,进行块匹配,如果两个子块的匹配误差RMS全部小于γ8时,保存当前的IFS系数包括比例因子s,偏移o,以及父块相对于当前子块的坐标偏移x,y,并停止块的划分。否则,按照2个8×4的划分方式进行块的划分,对这两个子块进行块匹配,如果两个子块的匹配误差RMS全部小于γ8时,保存当前的IFS系数包括比例因子s,偏移o,以及父块相对于当前子块的坐标偏移x,y,并停止块的划分。否则,对该子块划分为4个4×4的小块,同时匹配误差阈值设为γ4=6.0×6.0×no,对四个小块分别进行块匹配,并分别记录每个子块的IFS系数包括比例因子s,偏移o,以及父块相对于当前子块的坐标偏移x,y,并停止块的划分,转到5;
5、返回步骤三,继续下一宏块的编码。
如果所有的宏块都已编码完毕,则转到步骤四;
步骤四:对所有IFS系数进行huffman编码,huffman编码是根据出现的概率将每个符号映射到一个变长码字的集合(VLC)上,降低IFS系数数据的统计冗余。判断当前帧是否为最后一帧,如果是最后一帧结束编码,否则,转入步骤一继续处理下一帧图像。
如附图1b所示,一种基于分形的视频解压缩方法,包括以下步骤:
步骤I:首先从压缩文件中读入压缩信息,包括压缩帧数,每帧图像的宽和高,I帧压缩质量,插入I帧数量和搜索范围;
步骤II:由读入压缩信息和当前待解码帧号判断该待解码帧是否为I帧,若是I帧转入步骤III,否则转入步骤IV;
步骤III:对于I帧,从压缩文件中读入解码该帧所需码流,采用基于块DCT变换的I帧帧内图像解压缩方法进行解码,进行反DCT变换,得到每一个8×8的块的像素值,帧数加一转入步骤V;
步骤IV:对于非I帧,首先计算参考帧中按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,然后从压缩文件中读入块的划分信息和Huffman码流,并根据块划分信息和Huffman码流得到该帧所有宏块的划分方式和每一个小块的迭代函数系统系数,按照每一宏块进行解码。对于每一个宏块进行解压缩时,首先判断该宏块在编码时的划分方式,对于每一个子块,首先在父块域找到与该子块相对应的区域,然后利用下面的公式获得该子块的像素值,
ri=s*di+o
其中ri为待解码子块的像素值,di为父块域中的像素值,s为比例因子,o为偏移因子。
步骤V:判断此时所有帧是否都已解码,若都已解码完毕,则结束解码过程,否则转入步骤II。
处理的视频序列为YUV格式,分别对3个分量中的每个采用上述五个步骤进行处理。
本方法选择Visual C++6.0作为所述方法的实现语言,CPU为Intel
Figure GSA00000110098100091
CoreTM 2 DuoT8300,2.4GHz主频,内存大小为2G,对标准测试视频序列“mother-daughter.cif”进行了基于分形的视频编码实验。
表1为在同等条件下,利用本发明方法与CPM/NCIM方法对标准测试视频序列“mother-daughter.cif”的起始帧的对比实验结果。
  峰值信噪比(dB)   压缩比  压缩时间(s)   解压缩时间(s)
  CPM/NCIM方法   30.580   14.98   7.28   0.062
  本发明方法   40.792   15.18   0.031   0.016
表1CPM/NCIM方法和本发明方法的起始帧压缩结果对比
分别采用传统的CPM/NCIM方法和本发明方法对“mother-daughter.cif”的前15帧进行压缩编码的峰值信噪比的对比图如附图4a所示;分别采用传统的CPM/NCIM方法和本发明方法对“mother-daughter.cif”的前15帧进行压缩编码的压缩比的对比图如附图4b所示;分别采用传统的CPM/NCIM方法和本发明方法对“mother-daughter.cif”的前15帧进行压缩编码的压缩时间的对比图如附图4c所示;分别采用传统的CPM/NCIM方法和本发明方法对“mother-daughter.cif”的前15帧进行解压缩时间的对比图如附图4d所示;从附图4可以看出,本发明方法与传统的CPM/NCIM方法相比,不但增加了峰值信噪比和压缩比,而且减少了压缩时间。
对5个典型的视频序列:“highway.cif”,“flower.cif”,“foreman.cif”,“paris.cif”,“bus.cif”(图像尺寸为352×288像素的CIF格式,取15帧图像),宏块尺寸为16×16像素,最小分块尺寸为4×4像素。采用的对比方法如下,CPM/NCIM方法中CPM帧数取为2。压缩和解压缩性能对比结果如表2所示,各项指标均为15帧的均值。本发明提出的方法明显好于传统的CPM/NCIM方法,如PSNR值提高了3-5dB,压缩比提高了近4倍,压缩时间却减少为原来的1/10。这是因为本发明方法利用了编码帧和参考帧之间的强互相似性,能够准确快速地找到最佳匹配块,结果表现为解压缩图像质量高、压缩比高以及压缩所用时间少等。
本方法可以根据应用目的的不同来选择匹配误差阈值,在低比特率的条件下,可以选择大的匹配阈值,使分块的数目减少,从而增加压缩比。在对解压缩视频图像要求较高的情况下,可以减小匹配误差阈值,增加分块的数目,使块的匹配更加准确,从而保证视频质量。
Figure GSA00000110098100111
表2CPM/NCIM方法和本发明方法对5个视频序列压缩和解压缩性能均值对比。

Claims (6)

1.一种基于分形的视频压缩编码方法,其特征在于:用宏块的树状划分规则替代传统的四叉树划分规则;采用相同大小的子块和父块进行匹配,取代传统分形图像压缩中对子块和父块进行分类和翻转的方法,简化了块的搜索策略和范围,并将搜索范围限定在固定个数像素之间,极大的提高了计算速度;使用了H.264标准中的I帧方法;减少重复计算;该基于分形的视频压缩编码方法的具体步骤如下:
步骤一:对于I帧,首先对该帧进行互不重叠的固定大小的块划分,对每一个图像块分别采用基于块DCT变换的I帧帧内图像压缩方法,对该帧图像进行单独编码和解码,转到步骤四;所述I帧为视频序列起始帧或者视频序列中只进行帧内编码的图像帧;所述将当前帧划分为固定大小的互不重叠的图像块称为宏块;所述将当前宏块进行树状划分得到的块称为小块;所述块DCT变换中的块采用固定大小模式;
步骤二:若当前帧为非I帧,在进行块匹配之前,首先对当前帧进行互不重叠的宏块划分,然后计算这些宏块以及经树状划分得到的小块的像素和、像素平方和,以及前一帧重建图像即参考帧中,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,以减少块匹配过程中的重复计算;转到步骤三;所述当前帧为正在进行压缩的帧;所述参考帧为当前帧的已经编码并重建的前一帧;所述当前帧所有块的集合称为子块域;所述前一帧的所有块的集合称为父块域;
步骤三:依次对当前帧的所有宏块进行编码,在父块域中的搜索窗内首先对该宏块进行块匹配;在进行子块与父块的匹配过程中,子块的位置作为父块的起始搜索点,父块的大小与子块的大小相同;如果匹配误差RMS小于开始设定的阈值γ,保存当前的迭代函数系统系数即IFS系数,转入步骤三编码下一宏块;否则,依次按照树状结构对该块进行划分,并对各个划分得到的小块分别计算匹配误差RMS,如果RMS小于设定阈值γ,停止划分并记录该小块IFS系数,转入步骤三编码下一宏块;否则继续划分,直到将当前块划分为预先设定的最小块,记录IFS系数;转入步骤三编码下一宏块;所述搜索窗为在参考帧中的矩形搜索区域;所述IFS系数包括父块位置(x,y)和比例因子s、偏移因子o;如果当前帧所有的宏块都已编码完毕,则转到步骤四;
步骤四:对所有IFS系数进行Huffman编码,降低IFS系数数据的统计冗余;判断当前帧是否为最后一帧,如果是最后一帧结束编码;否则,返回步骤一继续处理下一帧图像。
2.根据权利要求1所述一种基于分形的视频压缩编码方法,其特征在于:处理的视频序列为YUV格式,分别对3个分量中的每个采用上述四个步骤进行处理。
3.根据权利要求1所述一种基于分形的视频压缩编码方法,其特征在于:所述步骤四中对宏块采用树状划分,块匹配采用匹配误差准则;子块与父块的匹配误差RMS为:
PMS = 1 N [ Σ i = 1 N r i 2 + s ( s Σ i = 1 N d i 2 - 2 Σ i = 1 N r i d i + 2 o Σ i = 1 N d i 2 ) + o ( N · o - 2 Σ i = 1 N r i ) ] - - - ( 1 )
其中参数s和o分别为:
s = [ N Σ i = 1 N r i d i - Σ i = 1 N r i Σ i = 1 N d i ] [ N Σ i = 1 N d i 2 - ( Σ i = 1 N d i ) 2 ] - - - ( 2 )
o = 1 N [ Σ i = 1 N r i - s Σ i = 1 N d i ] - - - ( 3 )
其中,N为子块和父块像素的个数,ri为子块的像素值,di为父块的像素值;
计算当前宏块在参考帧中的块匹配误差RMS,其中ri是子块的像素值,di是父块的像素值;如果RMS小于预先设定的阈值γ,记录IFS系数,IFS系数包括匹配块的位移矢量(x,y)和公式2,3中的s和o,处理下一宏块;否则,对当前宏块进行树状划分,计算划分后小块的RMS,如果小于阈值γ,则停止划分,否则继续划分,直到子块达到预先设定的最小块为止。
4.一种基于分形的视频解压缩方法,其特征在于包含以下步骤:
步骤I:首先从压缩文件中读入压缩信息,包括压缩帧数,每帧图像的宽和高,I帧压缩质量,插入I帧数量和搜索范围;
步骤II:由读入压缩信息和当前待解码帧号判断该待解码帧是否为I帧,若是I帧转入步骤III,否则转入步骤IV;
步骤III:对于I帧,从压缩文件中读入解码该帧所需码流,采用基于块DCT变换的I帧帧内图像解压缩方法进行解码,帧数加一转入步骤V;
步骤IV:对于非I帧,首先计算参考帧中按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,然后从压缩文件中读入块的划分信息和Huffman码流,并根据块划分信息和Huffman码流得到该帧所有宏块的划分方式和每一个小块的迭代函数系统系数,按照每一宏块进行解码;
步骤V:判断此时所有帧是否都已解码,若都已解码完毕,则结束解码过程,否则转入步骤II。
5.根据权利要求4所述一种基于分形的视频解压缩方法,其特征在于:对于每一个宏块进行解码时,首先判断该宏块在编码时的划分方式,对于每一个子块,首先在父块域找到与该子块相对应的区域,然后利用下面的公式获得该子块的像素值,ri=s*di+o
其中ri为待解码子块的像素值,di为父块域中的像素值,s为比例因子,o为偏移因子。
6.根据权利要求4所述一种基于分形的视频解压缩方法,其特征在于:处理的视频序列为YUV格式,分别对3个分量中的每个采用上述五个步骤进行处理。
CN 201010167243 2010-04-30 2010-04-30 一种基于分形的视频压缩与解压缩方法 Expired - Fee Related CN101860753B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010167243 CN101860753B (zh) 2010-04-30 2010-04-30 一种基于分形的视频压缩与解压缩方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010167243 CN101860753B (zh) 2010-04-30 2010-04-30 一种基于分形的视频压缩与解压缩方法

Publications (2)

Publication Number Publication Date
CN101860753A true CN101860753A (zh) 2010-10-13
CN101860753B CN101860753B (zh) 2012-10-03

Family

ID=42946353

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010167243 Expired - Fee Related CN101860753B (zh) 2010-04-30 2010-04-30 一种基于分形的视频压缩与解压缩方法

Country Status (1)

Country Link
CN (1) CN101860753B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263951A (zh) * 2011-07-06 2011-11-30 北京航空航天大学 一种快速的分形视频压缩与解压缩方法
CN102595141A (zh) * 2012-03-13 2012-07-18 中国科学院上海应用物理研究所 一种基于四叉树与邻域搜索相结合的分形图像压缩方法
CN103037219A (zh) * 2012-10-22 2013-04-10 北京航空航天大学 一种基于分形和h.264的视频压缩与解压缩方法
CN107027035A (zh) * 2016-02-02 2017-08-08 意法半导体(格勒诺布尔2)公司 编码多维数字信号的方法和设备及解码的相应方法和设备
CN107465919A (zh) * 2011-11-07 2017-12-12 佳能株式会社 用于针对图像的重建样本的集合提供补偿偏移的方法和装置
CN108322746A (zh) * 2017-01-17 2018-07-24 意法半导体(格勒诺布尔2)公司 动态地监测数字多维信号的编码的方法和装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
19980430 Chang-Su Kim, Rin-Chul Kim, and Sang-Uk Lee Fractal Coding of Video Sequence using circular prediction mapping and noncontractive interframe mapping 全文 1-5 第7卷, 第4期 2 *
20100314 Shiping Zhu et al A Hybrid Video Coding Scheme Joint Fractal and Object-based Function 参见摘要,第III-VI部分 1-5 第1卷, 2 *
20100317 Shiping Zhu ; Zaikuo Wang ; Belloulata, K. A Novel Fractal Monocular and Stereo Video Codec based on MCP and DCP I-III部分 1-5 , 2 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263951A (zh) * 2011-07-06 2011-11-30 北京航空航天大学 一种快速的分形视频压缩与解压缩方法
CN107465919B (zh) * 2011-11-07 2020-05-01 佳能株式会社 用于针对图像的重建样本的集合提供补偿偏移的方法和装置
US11076173B2 (en) 2011-11-07 2021-07-27 Canon Kabushiki Kaisha Method and device for providing compensation offsets for a set of reconstructed samples of an image
US10771819B2 (en) 2011-11-07 2020-09-08 Canon Kabushiki Kaisha Sample adaptive offset filtering
CN107465919A (zh) * 2011-11-07 2017-12-12 佳能株式会社 用于针对图像的重建样本的集合提供补偿偏移的方法和装置
US10743033B2 (en) 2011-11-07 2020-08-11 Canon Kabushiki Kaisha Method and device for optimizing encoding/decoding of compensation offsets for a set of reconstructed samples of an image
US10462493B2 (en) 2011-11-07 2019-10-29 Canon Kabushiki Kaisha Method and device for optimizing encoding/decoding of compensation offsets for a set of reconstructed samples of an image
US10575020B2 (en) 2011-11-07 2020-02-25 Canon Kabushiki Kaisha Method and device for providing compensation offsets for a set of reconstructed samples of an image
CN102595141A (zh) * 2012-03-13 2012-07-18 中国科学院上海应用物理研究所 一种基于四叉树与邻域搜索相结合的分形图像压缩方法
CN103037219B (zh) * 2012-10-22 2016-08-10 北京航空航天大学 一种基于分形和h.264的视频压缩与解压缩方法
CN103037219A (zh) * 2012-10-22 2013-04-10 北京航空航天大学 一种基于分形和h.264的视频压缩与解压缩方法
CN107027035B (zh) * 2016-02-02 2020-06-16 意法半导体(格勒诺布尔2)公司 将初始数字信号编码为编码信号的方法、设备及介质
CN107027035A (zh) * 2016-02-02 2017-08-08 意法半导体(格勒诺布尔2)公司 编码多维数字信号的方法和设备及解码的相应方法和设备
CN108322746A (zh) * 2017-01-17 2018-07-24 意法半导体(格勒诺布尔2)公司 动态地监测数字多维信号的编码的方法和装置
CN108322746B (zh) * 2017-01-17 2022-05-03 意法半导体(格勒诺布尔2)公司 动态地监测数字多维信号的编码的方法和装置

Also Published As

Publication number Publication date
CN101860753B (zh) 2012-10-03

Similar Documents

Publication Publication Date Title
US11216985B2 (en) Point cloud attribute compression method based on deleting 0 elements in quantisation matrix
CN102263951B (zh) 一种快速的分形视频压缩与解压缩方法
US10939123B2 (en) Multi-angle adaptive intra-frame prediction-based point cloud attribute compression method
CN101980537B (zh) 一种基于对象和分形的双目立体视频压缩编解码方法
CN101860753B (zh) 一种基于分形的视频压缩与解压缩方法
CN102026000B (zh) 像素域-变换域联合的分布式视频编码系统
CN101827268B (zh) 一种基于对象的分形视频压缩与解压缩方法
CN103281527B (zh) 图像编解码方法及相关装置
CN103037219B (zh) 一种基于分形和h.264的视频压缩与解压缩方法
CN101980538B (zh) 一种基于分形的双目立体视频压缩编解码方法
CN101496412A (zh) 具有域变换的基于网络的视频压缩
CN106170093B (zh) 一种帧内预测性能提升编码方法
CN103037218B (zh) 一种基于分形和h.264的多目立体视频压缩与解压缩方法
CN101009835A (zh) 基于背景的运动估计编码方法
CN103051894B (zh) 一种基于分形和h.264的双目立体视频压缩与解压缩方法
CN104159117A (zh) 一种hevc视频的信息隐藏方法
CN103546758A (zh) 一种快速深度图序列帧间模式选择分形编码方法
CN101980536B (zh) 一种基于对象和分形的多目立体视频压缩编解码方法
CN102316323B (zh) 一种快速的双目立体视频分形压缩与解压缩方法
CN107343202B (zh) 基于附加码率的无反馈分布式视频编解码方法
CN101980539B (zh) 一种基于分形的多目立体视频压缩编解码方法
JP2012231505A (ja) H.264および他の変換符号化情報の高能率部分復号化を可能にする映像符号化法
CN102263954B (zh) 一种基于对象的快速分形视频压缩与解压缩方法
CN103299638B (zh) 自适应扫描装置及其扫描方法
CN103647969B (zh) 一种基于对象的快速分形视频压缩与解压缩方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20121003

Termination date: 20140430