CN101835044A - 一种频率域分布式视频编码中的分类组合方法 - Google Patents

一种频率域分布式视频编码中的分类组合方法 Download PDF

Info

Publication number
CN101835044A
CN101835044A CN 201010155921 CN201010155921A CN101835044A CN 101835044 A CN101835044 A CN 101835044A CN 201010155921 CN201010155921 CN 201010155921 CN 201010155921 A CN201010155921 A CN 201010155921A CN 101835044 A CN101835044 A CN 101835044A
Authority
CN
China
Prior art keywords
coding
side information
frame
interpolation
video coding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201010155921
Other languages
English (en)
Other versions
CN101835044B (zh
Inventor
刘峰
肖艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong XunTong Technology Co., Ltd.
Original Assignee
Nanjing Post and Telecommunication University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Post and Telecommunication University filed Critical Nanjing Post and Telecommunication University
Priority to CN 201010155921 priority Critical patent/CN101835044B/zh
Publication of CN101835044A publication Critical patent/CN101835044A/zh
Application granted granted Critical
Publication of CN101835044B publication Critical patent/CN101835044B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种频率域分布式视频编码中的分类组合方法依据无线传感网络终端设备编码复杂度低、存储容量有限、要求能在信道质量差的网络中传输等特性及Wyner-Ziv视频编码特点,针对国外研究学者斯坦福大学教授Bernd Girod的频域Wyner-Ziv视频编码方案提出改进。本发明提出在编码端将图像帧划分三种编码模式,分别为Skip(跳过)模式、低频模式和全频模式,在解码端根据相应的编码模式分别选择平均插值、自适应搜索运动估计插值和自适应搜索精细运动估计插值的边信息估算方法联合解码。本文算法既能通过消除大量的帧间预测与熵编码实现低码率传输,又能以很小的解码代价获得更精确的边信息,从而有效地避免图像解码质量下降。

Description

一种频率域分布式视频编码中的分类组合方法
技术领域
本发明涉及到一种视频编码压缩方法,尤其涉及频域Wyner-Ziv视频编码方法。
背景技术
随着无线多媒体通信及无线视频传感网络等新技术的出现,一种新的视频压缩编解码技术——Wyner-Ziv视频编码引起人们广泛关注。它主要满足一些无线终端设备编码复杂度低、存储容量有限、要求能在信道质量差的网络中传输等特性。该方法有别于传统的视频编解码技术,具有编码简单,解码复杂,高压缩率,抗误码性强等特点。然而,压缩率低下、重构图像质量不高是当前Wyner-Ziv视频编解码技术所面临的难题。其主要原因在于:与传统视频编码方法在编码端进行运动估计有所不同Wyner-Ziv视频编码方法在解码端实施运动估计,由于解码端的运动估计中不可能得到当前帧的原始帧,因而运动估计的准确性受到影响,使得其后的仅仅通过运动估计插值获得的边信息与原始帧相差较大,解码端不得不请求编码端发送大量的校验比特,从而造成Wyner-Ziv视频编码方法的率失真性能不高。
而无线传感网络中移动终端设备有着以下不同于传统网络视频压缩编码与传输的特点:
1、由于无线网络中的终端设备如手机、无线PC相机等数据处理能力和存储能力、功耗等资源受限的特点,难以完成复杂度高的帧间预测等编码技术。
2、考虑到无线传感网络中带宽受限,通信能力不强,传输速率限制,要求编码器最大程度的挖掘数据相关性,具有较高的压缩编码效率。
3、在Wyner-Ziv视频编码中,为了保证图像重构质量,必须估计出最接近真实图像的边信息,保证边信息的准确性。
针对以上无线传感网络终端设备和网络特性,本发明对频域Wyner-Ziv视频编码算法进行改进,在保证重建图像质量情况下,既能实现高效压缩,又不增加编码端的存储负担,更适合无线传感网络中的终端设备。
发明内容
技术问题:本发明要解决的技术问题是在Bernd Girod提出的频域Wyner-Ziv视频编码方案基础上提出一种频率域分布式视频编码中的分类组合方法,使其更适应无线传感网络及其终端的特点。本发明主要解决两部分的技术问题:提高边信息生成图像精确的同时和增大压缩效率。
技术方案:本发明解决上述技术问题所采用的方法如下:
该方法在编码器添加模块分类功能,将图像分为跳过编码模式、低频模式和全频模式三个编码模式;在解码端对应不同的编码模式提出三个相应的边信息估算方法获得边信息辅助分布式解码器解码,该方法处理包括以下步骤:
步骤1:将输入图像视频偶数序列视为W帧,奇数帧视为关键帧;关键帧采用传统视频编码中的帧内编码方式编码,其解码重建帧有两个用途,一是还原视频流,一是用于边信息插值估计出边信息,
步骤2:对于W帧,首先做进行离散余弦变换DCT,采用绝对值差MAD准则判断该W帧每一宏块的编码模式后进行预处理,其编码为Skip模式、低频模式或全频模式中的一种,
步骤3:对图像宏块预处理后依次经过量化、Turbo编码器编码,编码后的校验位传送至解码端,其传至解码端的校验位数量视边信息的准确度而定,
步骤4:在解码端,通过解码重建后的关键帧估算边信息,分别对应Skip模式、低频模式和全频模式的编码方法采用平均插值、自适应搜索运动估计插值和自适应搜索运动估计精细插值边信息的估算方法获得准确的边信息,
步骤5:Turbo解码端的校验位联合步骤4获得的边信息,经过反量化,反离散余弦变换DCT变换重构W帧,
步骤6:将W帧和关键帧合并输出即得到解码码流。
W帧编码方法是依据图像内容的运动特征划分为Skip模式、低频模式和全频模式三种编码模式。
MAD准则是利用视频序列相邻帧中运动缓和区以及背景相似区的离散余弦变换DCT高频系数基本相同这一特性进行加权获得。
Skip模式是指当前宏块判断为背景块,在编码端丢弃当前宏块,在解码端通过其相邻关键帧相同位置的宏块进行平均插值获得边信息,此时边信息即为解码端当前需要解码宏块的重建宏块。
低频模式是指当前宏块判断为运动缓和块时,编码端抽取其DCT低频系数进行量化后送入Turbo编码器,解码端采用自适应搜索运动估计插值法生成边信息辅助Turbo解码器解码。
全频模式是指当前宏块判断为运动剧烈块时,编码端对当前宏块所有DCT系数编码,解码端采用自适应搜索精细运动估计插值法生成边信息辅助Turbo解码器解码。
自适应搜索运动估计插值方法是指在当前W帧的相邻关键帧中根据图像运动特性进行自适应搜索范围的运动估计寻找当前宏块的最佳匹配块的运动矢量,进行非线性插值。
自适应搜索运动估计精细插值方法是指将当前W帧的相邻关键帧中根据图像运动特性进行自适应搜索范围的运动估计搜索出当前宏块的运动矢量作为初始运动矢量,然后在相邻关键帧中进一步进行小范围运动估计匹配搜索,寻找最佳匹配块的运动矢量后进行非线性插值。
1、系统压缩率的改进方法
由于视频序列相邻帧中运动缓和区以及背景相似区的DCT高频系数基本相同,因此,本发明利用这一特性挖掘Wyner-Ziv编码系统的冗余信息,对系统压缩效率提出改进,满足无线传感网络终端存储能力受限的特点。其改进方案是:①通过MAD准则判断编码端相邻关键帧与Wyner-Ziv帧基于块的运动剧烈程度,分别采用三种不同的编码模式进行Wyner-Ziv编码传输。②当运动剧烈程度判断编码块为Skip模式时,Flag编码模式判断参数置0,编码端舍弃不传,解码端相应的重建块用相邻关键帧帧相同位置块平均插值生成的边信息填补。③当运动剧烈程序判断编码块为低频模式,Flag=1,编码该类图像块时只抽取少量低频分量进行Wyner-Ziv编码,解码端根据下文边信息生成方法步骤③获得的边带信息的低频分量重构解码,利用生成边信息的高频分量和已解码的Wyner-Ziv帧低频分量进行DCT反变换生成解码Wyner-Ziv帧。④当运动剧烈程度判断编码块为全频模式时,Flag=2,编码端将该类块的全部频域信息进行Wyner-Ziv编码,传输解码端,然后根据下文边信息生成方法步骤④估算的边信息联合解码重构图像。
2、边信息生成方法
Wyner-Ziv帧的压缩效率主要来自于解码端对边信息的估计和联合解码重建。由于K帧的编码一般采用帧内编码(也有学者采用帧间预测编码,以降低K帧编码码率),因此,准确的边信息估值方法直接影响Wyner-Ziv视点或Wyner-Ziv帧的图像质量。本发明在分析变换域边信息生成的基础上,在不明显增加编码复杂度的同时得到更加准确的边信息,其技术方案如下:边信息生成方法技术关键在于根据图像运动剧烈程度采用三种不同的边信息生成模式。①基于编码端传至解码端的Flag参数判断当前块采用何种边信息的估算方法。②对于Flag=0的待解码图像块,其边信息通过采用平均插值,即相邻关键帧相应位置图像像素值加权平均获得。③对于Flag=1的待解码图像块,通过对相邻关键块计算运动剧烈程度获取可取的搜索窗口尺寸,在此范围内进行运动估计,得到最佳匹配块,并进行非线性内插估算边信息。④对于Flag=2的待解码图像块,在步骤③获得最佳匹配块的基础上,在第一次运动匹配的附近进行小范围的精细运动估计,最终获得更接近真实图像目标运动轨迹的边信息。
上述的Flag参数通过对相邻的Wyner-Ziv帧和关键帧相应位置块的DCT系数作简单地比较运算并经过阈值判断获得。
上述搜索窗口尺寸是当前关键块的全局运动矢量和其左、上、右上块的运动矢量滤波后获得的的运动矢量作为窗口尺寸大小,其全局运动矢量是指全局运动矢量简化为由于镜头移动或者场景转移运动矢量。
上述非线性内插估算法是利用前后相邻关键帧各块所得到的运动矢量来推算当前帧的运动矢量。该运动矢量获得的前提是假定当前帧中各块与前后相邻帧位置相同各块的运动矢量是相同的。显然,这一假设在背景块和运动缓慢和图像采样频率较高的情况下是适用的。
上述精细运动估计是以内插块的真实前后向运动矢量的对称性作为前提,首先以非线性内插估算法得到的运动矢量作为初始运动矢量,然后在前后关健帧相应位置进行小范围搜索。
上述三种不同的编码模式判断是首先根据Flag参数判断编码块采用何种编码模式,然后通过相应的编码模式编码,解码端根据相应的编码模式采用不同的解码方法重构解码图像。
有益效果:本发明针对无线传感网及其终端存储能力受限,功耗低,信道质量不稳定等特性,提出了基于频率Wyner-Ziv视频编码方案的改进方法。本发明通过对图像块合理的分类组合,在实现低码率传输的同时,又能以最小的解码代价获得更精确的边信息,从而有效地避免图像解码质量下降。
附图说明
图1Bernd Girod提出的频域Wyner-Ziv视频编码系统框图,
图2本发明提出的频率域Wyner-Ziv视频编码系统图,
图3频域Wyner-Ziv视频编码分类组合算法流程图,
图4平均插值算法,
图5自适应搜索运动估计插值估计算法,
图6自适应搜索精细运动估计插值算法,
图7基于频域Wyner-Ziv视频编码分类组合算法的mother_daughter率失真曲线,
图8基于频域Wyner-Ziv视频编码分类组合算法的foreman率失真曲线图。
具体实施方式
步骤1:将输入图像视频偶数序列视为W帧,奇数帧视为关键帧;关键帧采用传统视频编码中的帧内编码方式编码,其解码重建帧有两个用途,一是还原视频流,一是用于边信息插值估计出边信息,
步骤2:对于W帧,首先做进行离散余弦变换DCT,采用绝对值差MAD准则判断该W帧每一宏块的编码模式后进行预处理,其编码为Skip模式、低频模式或全频模式中的一种,
步骤3:对图像宏块预处理后依次经过量化、Turbo编码器编码,编码后的校验位传送至解码端,其传至解码端的校验位数量视边信息的准确度而定,
步骤4:在解码端,通过解码重建后的关键帧估算边信息,分别对应Skip模式、低频模式和全频模式的编码方法采用平均插值、自适应搜索运动估计插值和自适应搜索运动估计精细插值边信息的估算方法获得准确的边信息,
步骤5:Turbo解码端的校验位联合步骤4获得的边信息,经过反量化,反离散余弦变换DCT变换重构W帧,
步骤6:将W帧和关键帧合并输出即得到解码码流。
W帧编码方法是依据图像内容的运动特征划分为Skip模式、低频模式和全频模式三种编码模式。
MAD准则是利用视频序列相邻帧中运动缓和区以及背景相似区的离散余弦变换DCT高频系数基本相同这一特性进行加权获得。
Skip模式是指当前宏块判断为背景块,在编码端丢弃当前宏块,在解码端通过其相邻关键帧相同位置的宏块进行平均插值获得边信息,此时边信息即为解码端当前需要解码宏块的重建宏块。
低频模式是指当前宏块判断为运动缓和块时,编码端抽取其DCT低频系数进行量化后送入Turbo编码器,解码端采用自适应搜索运动估计插值法生成边信息辅助Turbo解码器解码。
全频模式是指当前宏块判断为运动剧烈块时,编码端对当前宏块所有DCT系数编码,解码端采用自适应搜索精细运动估计插值法生成边信息辅助Turbo解码器解码。
自适应搜索运动估计插值方法是指在当前W帧的相邻关键帧中根据图像运动特性进行自适应搜索范围的运动估计寻找当前宏块的最佳匹配块的运动矢量,进行非线性插值。
自适应搜索运动估计精细插值方法是指将当前W帧的相邻关键帧中根据图像运动特性进行自适应搜索范围的运动估计搜索出当前宏块的运动矢量作为初始运动矢量,然后在相邻关键帧中进一步进行小范围运动估计匹配搜索,寻找最佳匹配块的运动矢量后进行非线性插值。
图1为Bernd Girod提出的频域Wyner-Ziv视频编码方案,该方案采用两种编码方式:一种是关键帧(K帧),采用传统视频编码中的帧内编码方式(H.263)编码;另一种是Wyner-Ziv帧(W帧),采用基于Turbo码的Wyner-Ziv编码器进行编解码。在Wyner-Ziv编码端首先对图像进行DCT变换,将DCT低频分量(通常DCT8×8变换的低频分量取前16个系数,DCT4×4变换的低频分量取前4个系数)量化(量化系数为2、4、8、16)后通过基于Turbo码的Wyner-Ziv编码器编码,将Turbo编码器输出端的校验位保存到缓存中传至解码端;DCT高频分量(DCT4×4变换后12个系数、DCT8×8变换后48个系数均视为高频分量)通过与关键帧K的编码系数进行类似帧间预测,对其熵编码并传输至解码端。在解码端利用帧间相关性,对相邻关键帧进行运动估计,获得运动矢量并进行插值生成相应Wyner-Ziv帧的边信息。依据Wyner-Ziv帧与边信息符合拉普拉斯信道这已先验条件,Turbo解码器联合编码端缓存中的校验位和经过DCT变换后的边信息进行Turbo解码,反量化,反DCT变换,继而重构出Wyner-Ziv帧。
图2中是本发明提出的频率域Wyner-Ziv视频编码系统图。由于图1中编码端的运算复杂度和对编码端的存储空间均有很高的要求。另外考虑到无线传感网络中带宽受限,需要较高码率压缩率的特点,本发明针对图1中的编码方案进行改进,采用分类组合的编码方法,提出基于宏块的SKIP编码模式、低频编码模式和全频编码模式,并根据块的运动剧烈程度进行模式选择。解码端相应选择平均插值、自适应搜索运动估计、自适应搜索精细运动估计获取边信息辅助Wyner-Ziv解码器解码。
图3为频域Wyner-Ziv视频编码分类组合算法流程图。其算法步骤为:
(1)首先对Wyner-Ziv帧的当前宏块进行DCT变换,然后与其相邻K帧相同位置块的DCT高频系数作简单地比较运算,其比较方法采用图中所示MAD准则:
D = Σ i = n N | W i - K i | N - n - - - ( 1 )
其中Wi,Ki分别表示W帧和K帧宏块DCT系数,i∈(n,N),当采用8×8DCT变换时,N=64,n=17,当采用4×4DCT变换时,N=16,n=4。
(2)通过MAD准则得出的D与阈值T0和T1比较,如果D<阈值T0,则该宏块为背景块,采用SKIP编码MSkip模式,将FLAG标志位置0,丢弃不编码不传输,解码端相应的重建块用相邻K帧相同位置块平均插值生成的边信息填补。
(3)如果T0<D<T1,则判断为低频M1模式,FLAG标志位置1,抽取DCT变换的低频系数进行Wyner-Ziv编码,由于此类块一般为运动缓和区或只是场景的缓慢移动的区域,因此,解码端采用自适应搜索运动估计插值获得准确边信息;
(4)如果D>T1,则判断为全频M2模式,FLAG标志位置2,将该图像块的全部DCT系数通过基于Turbo码的Slepian-Wolf编码器编码,解码端利用边信息联合解码进行反量化反DCT变换解码W块。由于全频模式块与参考块的相关性小,运动幅度大,采用自适应搜索的精细运动估计法获取更精确的边信息。
(5)其中对FLAG标志位采用熵编码的方式传输至解码端。
图4是平均插值算法。为了减少码率,对编码端已判断为MSkip模式的Wyner-Ziv块,其边信息采用相邻关键帧相同位置块的像素值加权平均获得:
W ( 2 n , M skip ) = K ( 2 n - 1 , M skip ) + K ( 2 n + 1 , M skip ) 2 - - - ( 2 )
其中W(2n,MSkip)为2n时刻Wyner-Ziv帧相应位置块MSkip的像素值。
图5是自适应搜索运动估计算法。对于判断为M1低频模式的Wyner-Ziv块,其边信息获取的步骤为:
(1)确定搜索起点。取与当前块相邻(包括左、上、右上位置)的块运动矢量经过中值滤波(即取中间值)作为当前块的搜索起始点。当前块为左边界时,左边相邻块运动矢量置零;当前块为上边界,上边相邻块的运动矢量置零;当前块为右边界时,右上相邻块的运动矢量置零。
(2)确定搜索范围。设相邻关键帧的全局运动矢量为(GM_x,GM_y),当前块左边、上边和右上宏块进行一维x和y方向的中值滤波作为搜索起始点,记为(Ini_MVx,Ini_MVy),其搜索范围:
L=max(16,GMV>MV?GMV:MV+1)          (3)
其中:
GMV=max(GM_x,GM_y)
MV=max(MV_x,MV_y)                     (4)
MV_x=max(MV_xi-Ini_MVx)
MV_y=max(MV_yi-Ini_MVy)
(3)获取最佳匹配运动矢量。以步骤(1)获得的搜索起始点为搜索中心,根据式(3)、(4)获得搜索范围L,(x,y)为宏块M1中像素坐标,以SAD为评价准则获取M1块最佳运动矢量:
MV 0 = arg min ( MV x , MV y ) [ Σ ( x , y ) ∈ M 1 | K ( 2 n + 1 , M 1 ) ( x , y ) - K ( 2 n - 1 , M 1 ) ( x + MV x , y + MV y ) | ] , MV x ∈ L , MV y ∈ L - - - ( 5 )
(4)生成M1边信息。利用步骤(3)获得的矢量MV0进行插值生成边信息块:
W ( 2 n , M 1 ) side ( M 1 ( x , y ) ) = K ( 2 n - 1 , M 1 ) ( M 1 ( x , y ) + MV 0 2 ) / 2 + K ( 2 n + 1 , M 1 ) ( M 1 ( x , y ) - MV 0 2 ) / 2 - - - ( 6 )
其中,M1(x,y)为边信息帧宏块M1中各像素的坐标。
图6为自适应搜索精细运动估计差值算法。若Wyner-Ziv宏块判断为M2全频模式块,则表示该宏块运动剧烈,为了更接近实际运动,在边信息估计过程中,需要在自适应搜索运动估计的基础上进一步的精细运动匹配。
(1)以图4中获得的MV0为精细估计的初始运动矢量,在相邻关键帧之间以T为第二次搜索范围的对称性精细运动估计:
MV ^ = arg min MV i [ Σ ( x , y ) ∈ M 2 | K ( 2 n - 1 , M 2 ) ( ( x , y ) - MV i ) - K ( 2 n + 1 , M 2 ) ( ( x , y ) + MV i ) | ] , MV i ∈ ( MV 0 ± T ) - - - ( 7 )
(2)通过非线性运动估计内插估算出编码模式M2的边信息块:
W ( 2 n , M 2 ) side ( M 2 ( x , y ) ) = K ( 2 n - 1 , M 2 ) ( M 2 ( x , y ) + MV ^ 2 ) / 2 + K ( 2 n + 1 , M 2 ) ( M 2 ( x , y ) - MV ^ 2 ) / 2 - - - ( 8 )
其中,M2(x,y)为边信息帧宏块M2中各像素的坐标。
图7、8为采用本发明提出的分类组合视频编码方法的率失真曲线图。其中H.263+IBI为采用传统视频编码方法得到的试验结果。原始频域Wyner-Ziv视频编码方法为Bernd Girod提出的频域Wyner-Ziv视频编码方案的试验结果。基于DCT帧内编码为视频流采用帧内DCT量化编码的试验结果。本发明提出的频域Wyner-Ziv视频编码分类组合算法中分别采用DCT8×8和DCT4×4的DCT变换尺度,将其与上述三种实验方法进行参照比较。从mother_daughter和foreman的率失真曲线图中可以看出,在PSNR相同的情况下,与原始频域Wyner-Ziv视频编码方法相比,本发明提出的基于8×8DCT域变换的分类组合算法中大大降低了码率,在低码率时效果非常明显。由于mother_dughter序列运动缓慢,全频模式块占比重较小,大量背景块和平缓块的冗余信息被消除,且解码端对运动块采用更精确的自适应搜索窗的边信息精细估计技术,因此在降低码率的同时,重构图像质量也具有很好的恢复效果。而foreman序列由于镜头移动,运动剧烈,压缩率比mother_daughter序列略低,但是原始频域Wyner-Ziv视频编码算法相比,码率降低时,并未影响重构图像质量。
本文提出的频域改进算法分别采用大尺度(8×8)和小尺度(4×4)的DCT域变换,从图7中可看出,当采用相同量化系数时,小尺度域变换的码率比大尺度有很大提高,且图像质量也相应提高0.71dB,这是因为小尺度域变换中4×4块相关性大造成全频模块大量增加,使得码率上升,从而引起图像质量随之上升。而图8中,小尺度域变换下码率虽然增加,但由于图像运动比较剧烈,边信息生成相对不精确,所以图像信噪比未能显著提高。整体而言,在运动平缓的视频流中,本文提出的改进算法采用小尺度域变换能取得较好的效果,但是以耗费更多解码时间时间为代价。但对两幅序列而言,根据图像的运动情况来自适应的选择编码模式,都具有更好的率失真曲线图
综上所述,本发明针对Bernd Girod提出的频域Wyner-Ziv视频编码方案进行扩展和改进,在此基础上发明了一种分类组合的视频编码算法。本发明利用频域相似性和运动剧烈程度,从实际应用角度考虑,消除了编码端大量冗余数据,并根据运动剧烈程度采用不同的方法获得准确的边信息,不仅大大降低图像压缩率,也使得在同一码率下,图像解码质量得到提高。

Claims (8)

1.一种频率域分布式视频编码中的分类组合方法,其特征在于该方法在编码器添加模块分类功能,将图像分为跳过编码模式、低频模式和全频模式三个编码模式;在解码端对应不同的编码模式提出三个相应的边信息估算方法获得边信息辅助分布式解码器解码,该方法处理包括以下步骤:
步骤1:将输入图像视频偶数序列视为W帧,奇数帧视为关键帧;关键帧采用传统视频编码中的帧内编码方式编码,其解码重建帧有两个用途,一是还原视频流,一是用于边信息插值估计出边信息,
步骤2:对于W帧,首先做进行离散余弦变换DCT,采用绝对值差MAD准则判断该W帧每一宏块的编码模式后进行预处理,其编码为Skip模式、低频模式或全频模式中的一种,
步骤3:对图像宏块预处理后依次经过量化、Turbo编码器编码,编码后的校验位传送至解码端,其传至解码端的校验位数量视边信息的准确度而定,
步骤4:在解码端,通过解码重建后的关键帧估算边信息,分别对应Skip模式、低频模式和全频模式的编码方法采用平均插值、自适应搜索运动估计插值和自适应搜索运动估计精细插值边信息的估算方法获得准确的边信息,
步骤5:Turbo解码端的校验位联合步骤4获得的边信息,经过反量化,反离散余弦变换DCT变换重构W帧,
步骤6:将W帧和关键帧合并输出即得到解码码流。
2.如权利要求1所述频率域分布式视频编码中的分类组合方法,其特征在于W帧编码方法是依据图像内容的运动特征划分为Skip模式、低频模式和全频模式三种编码模式。
3.如权利要求1所述频率域分布式视频编码中的分类组合方法,其特征在于MAD准则是利用视频序列相邻帧中运动缓和区以及背景相似区的离散余弦变换DCT高频系数基本相同这一特性进行加权获得。
4.如权利要求1所述频率域分布式视频编码中的分类组合方法,其特征在于Skip模式是指当前宏块判断为背景块,在编码端丢弃当前宏块,在解码端通过其相邻关键帧相同位置的宏块进行平均插值获得边信息,此时边信息即为解码端当前需要解码宏块的重建宏块。
5.如权利要求1所述频率域分布式视频编码中的分类组合方法,其特征在于低频模式是指当前宏块判断为运动缓和块时,编码端抽取其DCT低频系数进行量化后送入Turbo编码器,解码端采用自适应搜索运动估计插值法生成边信息辅助Turbo解码器解码。
6.如权利要求1所述频率域分布式视频编码中的分类组合方法,其特征在于全频模式是指当前宏块判断为运动剧烈块时,编码端对当前宏块所有DCT系数编码,解码端采用自适应搜索精细运动估计插值法生成边信息辅助Turbo解码器解码。
7.如权利要求1所述频率域分布式视频编码中的分类组合方法,其特征在于自适应搜索运动估计插值方法是指在当前W帧的相邻关键帧中根据图像运动特性进行自适应搜索范围的运动估计寻找当前宏块的最佳匹配块的运动矢量,进行非线性插值。
8.如权利要求1所述频率域分布式视频编码中的分类组合方法,其特征在于自适应搜索运动估计精细插值方法是指将当前W帧的相邻关键帧中根据图像运动特性进行自适应搜索范围的运动估计搜索出当前宏块的运动矢量作为初始运动矢量,然后在相邻关键帧中进一步进行小范围运动估计匹配搜索,寻找最佳匹配块的运动矢量后进行非线性插值。
CN 201010155921 2010-04-23 2010-04-23 一种频率域分布式视频编码中的分类组合方法 Expired - Fee Related CN101835044B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010155921 CN101835044B (zh) 2010-04-23 2010-04-23 一种频率域分布式视频编码中的分类组合方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010155921 CN101835044B (zh) 2010-04-23 2010-04-23 一种频率域分布式视频编码中的分类组合方法

Publications (2)

Publication Number Publication Date
CN101835044A true CN101835044A (zh) 2010-09-15
CN101835044B CN101835044B (zh) 2012-04-11

Family

ID=42718947

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010155921 Expired - Fee Related CN101835044B (zh) 2010-04-23 2010-04-23 一种频率域分布式视频编码中的分类组合方法

Country Status (1)

Country Link
CN (1) CN101835044B (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101977327A (zh) * 2010-11-16 2011-02-16 上海交通大学 基于嵌入式分布式视频编码描述的视频抗差错编解码方法
CN102137263A (zh) * 2011-05-09 2011-07-27 松日数码发展(深圳)有限公司 基于cnm关键帧分类的分布式视频编码及解码方法
CN102256133A (zh) * 2011-08-26 2011-11-23 北京邮电大学 一种基于边信息精化的分布式视频编码及解码方法
CN102271256A (zh) * 2011-09-16 2011-12-07 河海大学常州校区 基于模式决策的自适应帧组分布式视频编码和解码方法
CN102547264A (zh) * 2010-12-28 2012-07-04 深圳市融创天下科技股份有限公司 一种帧间编码的运动预测方法和系统
WO2012088806A1 (zh) * 2010-12-28 2012-07-05 深圳市融创天下科技股份有限公司 一种帧间编码的运动预测方法和系统
CN102595132A (zh) * 2012-02-17 2012-07-18 南京邮电大学 一种应用于无线传感器网络的分布式视频编解码方法
CN102630010A (zh) * 2012-03-30 2012-08-08 西安烽火电子科技有限责任公司 一种无线视频传输系统及其传输方法
CN103475879A (zh) * 2013-09-10 2013-12-25 南京邮电大学 一种分布式视频编码中边信息生成方法
CN104243991A (zh) * 2014-10-11 2014-12-24 中国矿业大学 一种边信息生成方法及装置
CN105791827A (zh) * 2016-02-26 2016-07-20 北京计算机技术及应用研究所 一种无线信道的视频编码方法
CN105847830A (zh) * 2010-11-23 2016-08-10 Lg电子株式会社 编码和解码图像的方法及使用该方法的设备
CN106851320A (zh) * 2010-11-04 2017-06-13 Ge视频压缩有限责任公司 支持区块合并和跳过模式的图像编码
CN115103194A (zh) * 2022-06-16 2022-09-23 慧之安信息技术股份有限公司 基于多解码模式的视频解码方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1314053A (zh) * 1999-06-14 2001-09-19 株式会社尼康 压缩编码方法,记录压缩编码程序的记录媒体,以及照相装置
CN1658673A (zh) * 2005-03-23 2005-08-24 南京大学 视频压缩编解码方法
CN1925331A (zh) * 2005-09-01 2007-03-07 三星电子株式会社 用于数据压缩和解压缩的装置和方法
CN101026756A (zh) * 2007-03-23 2007-08-29 武汉大学 视频转码中帧间模式的快速选择方法
CN101039418A (zh) * 2007-04-26 2007-09-19 武汉大学 一种视频转码中帧间模式的快速选择方法
CN101056408A (zh) * 2006-04-13 2007-10-17 汤姆森许可贸易公司 用于确定视频编码中跳跃模式的阈值的方法和装置
CN101060626A (zh) * 2007-05-10 2007-10-24 武汉大学 一种视频转码中帧内模式的快速选择方法
CN101083767A (zh) * 2006-05-30 2007-12-05 华为技术有限公司 一种视频编解码方法
CN101155302A (zh) * 2006-09-25 2008-04-02 张燕生 一种基于对图像块数据旋转及变换的视频编解码装置及方法
CN101485206A (zh) * 2006-04-30 2009-07-15 惠普开发有限公司 提供编码/压缩和解码/解压缩之间的计算复杂度的可调节分配的鲁棒且高效的压缩/解压缩

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1314053A (zh) * 1999-06-14 2001-09-19 株式会社尼康 压缩编码方法,记录压缩编码程序的记录媒体,以及照相装置
CN1658673A (zh) * 2005-03-23 2005-08-24 南京大学 视频压缩编解码方法
CN1925331A (zh) * 2005-09-01 2007-03-07 三星电子株式会社 用于数据压缩和解压缩的装置和方法
CN101056408A (zh) * 2006-04-13 2007-10-17 汤姆森许可贸易公司 用于确定视频编码中跳跃模式的阈值的方法和装置
CN101485206A (zh) * 2006-04-30 2009-07-15 惠普开发有限公司 提供编码/压缩和解码/解压缩之间的计算复杂度的可调节分配的鲁棒且高效的压缩/解压缩
CN101083767A (zh) * 2006-05-30 2007-12-05 华为技术有限公司 一种视频编解码方法
CN101155302A (zh) * 2006-09-25 2008-04-02 张燕生 一种基于对图像块数据旋转及变换的视频编解码装置及方法
CN101026756A (zh) * 2007-03-23 2007-08-29 武汉大学 视频转码中帧间模式的快速选择方法
CN101039418A (zh) * 2007-04-26 2007-09-19 武汉大学 一种视频转码中帧间模式的快速选择方法
CN101060626A (zh) * 2007-05-10 2007-10-24 武汉大学 一种视频转码中帧内模式的快速选择方法

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11785246B2 (en) 2010-11-04 2023-10-10 Ge Video Compression, Llc Picture coding supporting block merging and skip mode
US10382776B2 (en) 2010-11-04 2019-08-13 Ge Video Compression, Llc Picture coding supporting block merging and skip mode
US10382777B2 (en) 2010-11-04 2019-08-13 Ge Video Compression, Llc Picture coding supporting block merging and skip mode
US10841608B2 (en) 2010-11-04 2020-11-17 Ge Video Compression, Llc Picture coding supporting block merging and skip mode
US10602182B2 (en) 2010-11-04 2020-03-24 Ge Video Compression, Llc Picture coding supporting block merging and skip mode
US10785500B2 (en) 2010-11-04 2020-09-22 Ge Video Compression, Llc Picture coding supporting block merging and skip mode
CN106851320A (zh) * 2010-11-04 2017-06-13 Ge视频压缩有限责任公司 支持区块合并和跳过模式的图像编码
CN101977327B (zh) * 2010-11-16 2012-04-25 上海交通大学 基于嵌入式分布式视频编码描述的视频抗差错编解码方法
CN101977327A (zh) * 2010-11-16 2011-02-16 上海交通大学 基于嵌入式分布式视频编码描述的视频抗差错编解码方法
CN105847830B (zh) * 2010-11-23 2019-07-12 Lg电子株式会社 由编码装置和解码装置执行的间预测方法
US10757436B2 (en) 2010-11-23 2020-08-25 Lg Electronics Inc. Method for encoding and decoding images, and device using same
US11627332B2 (en) 2010-11-23 2023-04-11 Lg Electronics Inc. Method for encoding and decoding images, and device using same
CN105847830A (zh) * 2010-11-23 2016-08-10 Lg电子株式会社 编码和解码图像的方法及使用该方法的设备
US10440381B2 (en) 2010-11-23 2019-10-08 Lg Electronics Inc. Method for encoding and decoding images, and device using same
US11234013B2 (en) 2010-11-23 2022-01-25 Lg Electronics Inc. Method for encoding and decoding images, and device using same
WO2012088806A1 (zh) * 2010-12-28 2012-07-05 深圳市融创天下科技股份有限公司 一种帧间编码的运动预测方法和系统
CN102572418B (zh) * 2010-12-28 2014-09-03 深圳市云宙多媒体技术有限公司 一种帧间编码的运动预测方法和系统
CN102547264B (zh) * 2010-12-28 2014-09-03 深圳市云宙多媒体技术有限公司 一种帧间编码的运动预测方法和系统
CN102572418A (zh) * 2010-12-28 2012-07-11 深圳市融创天下科技股份有限公司 一种帧间编码的运动预测方法和系统
CN102547264A (zh) * 2010-12-28 2012-07-04 深圳市融创天下科技股份有限公司 一种帧间编码的运动预测方法和系统
CN102137263A (zh) * 2011-05-09 2011-07-27 松日数码发展(深圳)有限公司 基于cnm关键帧分类的分布式视频编码及解码方法
CN102256133B (zh) * 2011-08-26 2013-11-06 北京邮电大学 一种基于边信息精化的分布式视频编码及解码方法
CN102256133A (zh) * 2011-08-26 2011-11-23 北京邮电大学 一种基于边信息精化的分布式视频编码及解码方法
CN102271256A (zh) * 2011-09-16 2011-12-07 河海大学常州校区 基于模式决策的自适应帧组分布式视频编码和解码方法
CN102595132A (zh) * 2012-02-17 2012-07-18 南京邮电大学 一种应用于无线传感器网络的分布式视频编解码方法
CN102630010A (zh) * 2012-03-30 2012-08-08 西安烽火电子科技有限责任公司 一种无线视频传输系统及其传输方法
CN103475879B (zh) * 2013-09-10 2016-06-01 南京邮电大学 一种分布式视频编码中边信息生成方法
CN103475879A (zh) * 2013-09-10 2013-12-25 南京邮电大学 一种分布式视频编码中边信息生成方法
CN104243991B (zh) * 2014-10-11 2018-06-12 中国矿业大学 一种边信息生成方法及装置
CN104243991A (zh) * 2014-10-11 2014-12-24 中国矿业大学 一种边信息生成方法及装置
CN105791827B (zh) * 2016-02-26 2018-07-24 北京计算机技术及应用研究所 一种无线信道的视频编码方法
CN105791827A (zh) * 2016-02-26 2016-07-20 北京计算机技术及应用研究所 一种无线信道的视频编码方法
CN115103194A (zh) * 2022-06-16 2022-09-23 慧之安信息技术股份有限公司 基于多解码模式的视频解码方法
CN115103194B (zh) * 2022-06-16 2023-03-24 慧之安信息技术股份有限公司 基于多解码模式的视频解码方法

Also Published As

Publication number Publication date
CN101835044B (zh) 2012-04-11

Similar Documents

Publication Publication Date Title
CN101835044B (zh) 一种频率域分布式视频编码中的分类组合方法
JP4755095B2 (ja) 映像符号化の符号化側/復号化側に使用される双方向予測方法
CN102137263B (zh) 基于cnm关键帧分类的分布式视频编码及解码方法
CN101835042B (zh) 基于无反馈速率控制的Wyner-Ziv视频编码系统及方法
CN101860748B (zh) 基于分布式视频编码的边信息生成系统及方法
CN100512443C (zh) 基于自适应哈什和格型矢量量化的分布式视频编码方法
CN102256133B (zh) 一种基于边信息精化的分布式视频编码及解码方法
CN102291582B (zh) 一种基于运动补偿精化的分布式视频编码方法
CN101257630B (zh) 结合三维滤波的视频编码方法和装置
CN101621690B (zh) 基于Wyner-Ziv理论的两描述视频编码方法
CN103475879B (zh) 一种分布式视频编码中边信息生成方法
CN101335892A (zh) 基于帧内模式决策的混合分布式视频编码方法
CN104301730A (zh) 基于视频移动设备的双向视频编解码系统及其方法
CN103002280A (zh) 基于hvs&roi的分布式编解码方法及系统
CN102595132A (zh) 一种应用于无线传感器网络的分布式视频编解码方法
CN102026001B (zh) 基于运动信息的视频帧重要性评估方法
CN111726614A (zh) 一种基于空域下采样与深度学习重建的hevc编码优化方法
CN102271256A (zh) 基于模式决策的自适应帧组分布式视频编码和解码方法
Zhang et al. Adaptive distributed compressed video sensing.
CN102572428B (zh) 面向多媒体传感网分布式编解码的边信息估计方法
CN105611301A (zh) 基于小波域残差的分布式视频编解码方法
CN100493194C (zh) 用于视频感兴趣区域编解码的泄漏运动补偿方法
Cen et al. Joint decoding of independently encoded compressive multi-view video streams
CN102790881B (zh) 基于帧级编码端速率控制的变换域分布式视频编解码器
CN102695053B (zh) 一种基于图像平滑度的自适应视频无损压缩方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160720

Address after: 510000, No. 80, 12 Middle Road, martyrs martyrs Road, Guangzhou, Guangdong, Yuexiu District

Patentee after: Guangdong XunTong Technology Co., Ltd.

Address before: 210003 Nanjing City, Jiangsu Province, the new model road No. 66

Patentee before: Nanjing Post & Telecommunication Univ.

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120411

Termination date: 20190423