CN102026000B - 像素域-变换域联合的分布式视频编码系统 - Google Patents
像素域-变换域联合的分布式视频编码系统 Download PDFInfo
- Publication number
- CN102026000B CN102026000B CN 201110001537 CN201110001537A CN102026000B CN 102026000 B CN102026000 B CN 102026000B CN 201110001537 CN201110001537 CN 201110001537 CN 201110001537 A CN201110001537 A CN 201110001537A CN 102026000 B CN102026000 B CN 102026000B
- Authority
- CN
- China
- Prior art keywords
- bit
- pixel
- information
- domain
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种像素域-变换域联合的分布式视频编码系统,它属于视频编码技术领域,主要解决变换域分布式视频编码系统存在量化损失及边信息预测精度较低的问题。该系统主要由三部分组成:编码端,反馈信道和解码端。编码端用于对输入视频帧进行独立编码,并将Wyner-Ziv帧分为像素域信息和变换域信息分别进行编码;解码端对接受到的码流作联合解码,并在解码像素域信息的过程中对边信息进行更新并解码后面的变换域信息;反馈信道为解码端向编码端请求校验比特提供信息通道。本发明降低了Wyner-Ziv帧有用信息的损失,提高了边信息的预测精度,进一步提高了系统的整体性能及压缩效率,可用于编码设备简单的视频通信系统。
Description
技术领域
本发明属于视频编码技术领域,特别涉及一种像素域-变换域联合的分布式视频编码系统,用于减小系统存在的量化损失并提高边信息的预测精度,从而提高系统的率失真性能及压缩效率。
背景技术
随着信息技术和互联网的飞速发展,多媒体已成为人们获取信息最主要的载体,无线环境下的多媒体通信将成为一种新的趋势。为了适应无线网络的日益发展,越来越多的移动视频终端应用于多媒体通信中,如无线多媒体传感器网络WMSNs中低功耗的视频传感器,无线PC照相机及无线视频监控等。这些设备通常采用电池驱动、需要对视频进行实时编码,并将码流传送到一个中心节点,如控制室的中央处理器进行解码。在这种情况下,编码设备的处理能力、信息存储能力及功耗都受到了严重的限制,因此要求编码器简单易实现,且具有良好的抗误码性能和压缩效率。然而传统的视频压缩标准如MPEG系列和H.26x系列,其编码端由于利用输入视频帧之间的相似性进行压缩编码,运算复杂度一般比解码端要高出5至10倍。这种不对称的视频编码框架因编码端过于复杂而不便应用到实际中去。
分布式视频编码系统DVC作为一种全新的非对称的视频压缩框架,其理论基础是20世纪70年代Slepian和Wolf提出的分布式无损编码理论,以及Wyner和Ziv提出的基于边信息的有损编码理论。它采用一种单独编码和联合解码的方案,其中在解码端对原始信号进行独立编码,不进行运动估计;解码端则利用视频序列的时域、空域等相关性进行联合解码,将复杂的运动估计、补偿技术从编码端移到了解码端,即将编码端运算复杂度转移到解码端。同时它采用了信道编码技术,很好地解决了无线信道中传输的抗误码性的问题。分布式视频编码适用于需要多次编码,一次解码的情况,因此,在需要编码复杂度较低的无线视频场合能得到较广泛的应用。
在分布式视频编码系统中,边信息SI作为主信息解码的辅助是极其重要的。边信息的正确性对分布式视频编码系统的率失真性能与压缩效率有显著影响。边信息构造得越准确,解码端需要提供越少的校验比特进行解码,压缩效率就越高。如何准确的构造边信息是分布式视频编码的难点之一。
目前,变换域分布式视频编码系统由于具有更高的压缩效率和性能表现而成为研究的主要对象,在这种系统中,DCT和按系数子带量化的组合操作往往会带来比较多的有用信息的损失,使系统的整体性能难以得到很大的提高。而在边信息构建方面,目前常用的边信息构造方法是通过前后两关键帧进行插值得到的,但即使内插的边信息已经估计的足够精确,其与原始图像之间仍然存在着一定的差异,尤其当图像序列运动较剧烈时,这种差异将非常明显。
发明内容
本发明的目的在于针对上述已有技术的不足,提出一种像素域与变换域联合的分布式视频编码系统,通过对编码端像素域和解码端进行像素域处理,减少系统的量化损失并提高边信息的预测精度,从而提高系统的率失真性能及压缩效率。
为实现上述目的,本发明提供的像素域与变换域联合的分布式视频编码系统包括编码端、解码端和反馈信道:其中
编码端,采用像素域与变换域联合处理的结构,包括:
H.264/AVC帧内编码器:用于根据质量要求选择相应的量化因子对关键帧进行编码,并将得到的压缩码流发送至解码端;
编码端像素域处理器:用于对输入的视频原始Wyner-Ziv帧进行处理,将该视频原始Wyner-Ziv帧分为低错误率的像素域信息和高相关性的变换域信息两类,并分别将像素域信息和变换域信息直接发送至LDPC编码器和DCT变换模块;
变换模块:用于对变换域信息进行基于块的n×n的离散余弦变换DCT,并将得到的频率系数按其在n×n块中所处的位置划分构成变换系数子带,再将各系数子带发送至量化模块;
量化模块:用于对变换模块传送的变换系数子带进行量化得到量化系数,对该量化系数提取比特平面,并将比特平面传送给LDPC编码模块;
LDPC编码模块:用于对接收到的像素域信息和变换域信息提取的比特平面,分别进行独立的LDPC编码,并将校验比特保存在缓存区中等待解码端请求;
解码端,采用像素域与变换域联合处理的结构,包括:
H.264/AVC帧内解码器:用于对接收到的关键帧压缩码流进行帧内解码,并将解码得到的数据发送至边信息生成模块;
边信息生成模块:用于对已解码的前后两关键帧采用基于帧内插的方式产生边信息,并将其发送至解码端像素域处理器;
解码端像素域处理器:用于对输入的边信息作与编码端像素域处理器类似的处理,同时,在解码像素域信息的过程中,每解码一个比特平面,对边信息进行一次更新,然后利用更新后的边信息继续解码后面的信息;
相关噪声模型:用于估计原始视频帧与边信息之间的相关性,分别对像素域信息和变换域信息建立各自独立的虚拟信道噪声模型;
LDPC解码模块:用于在边信息的辅助下,利用接收到的校验比特根据相关噪声模型提供的参数解码像素域信息和变换域信息,解码后的像素域信息分别发送至解码端像素域处理器和重建模块II,解码后的变换域信息发送至重建模块I;
第一重建模块:用于将输入的已解码的变换域信息按照比特平面合成为系数子带,再将各子带中的系数还原到各个块中得到变换域帧数据,并将该帧数据发送至反变换模块;
反变换模块:用于对输入的变换域帧数据按块进行反离散预选变换IDCT,得到像素域帧数据;
第二重建模块:用于接收由LDPC解码器送出的像素域数据和反变换模块送出的像素域帧数据,将这两种像素域帧数据按照比特平面合成为恢复的Wyner-Ziv帧视频图像。
为实现上述目的,本发明提供的编码端像素域处理方法,包括如下步骤:
(1)提取原始Wyner-Ziv帧第i像素值8比特中的前两个比特bi1及bi2,其中,i∈[1,176×144],将该像素值去掉前两个比特后构成的数值记为pi,并设定一个新的数值pi′,令pi′=pi/2;
(2)将Wyner-Ziv帧中所有的bi1及bi2分别集合起来,构成两个比特平面B1x及B2x;
(3)定义一个符号比特平面MBx,如果pi′≥16,则第i像素对应的MBxi=1,并设一新的像素值pi″,令pi″=pi′-16,反之若pi′<16,则MBxi=0,且pi″=16-pi′;
(4)由所述的B1x、B2x及MBx构成编码端像素域数据流EPDS,将该数据流直接进行LDPC编码获取校验比特,并将获得的校验比特储存在缓存区中等待解码器的请求,同时将像素值pi″组合构成变换域信息TPic送入变换模块,获得编码端变换域数据流ETD。
为实现上述目的,本发明提供的解码端像素域处理方法包括如下步骤:
(1)提取初始边信息Y(0)第i像素值8比特中的第一个比特ci1,其中,i∈[1,176×144],将ci1集合起来构成比特平面C1y;
(2)利用初始边信息Y(0)对编码端像素域数据流中首比特平面B1x进行解码,得到比特平面B1x′,查询比特平面C1y中的第i个值ci1,如果ci1等于比特平面B1x′中对应的第i个比特值B1xi′,则初始边信息Y(0)中对应的第i个像素pyi不进行更新;
(3)如果比特值ci1不等于B1xi′,则在以像素pyi为中心的n×n的像素范围内搜索首比特等于B1xi′的像素值,若存在这类像素值,则将这些像素值的平均值设为像素pyi的更新后的值,反之若在该范围内不存在符合要求的像素值,则在所有首比特是B1xi′的像素值中选择最接近像素pyi的值作为更新后的像素值;
(4)当初始边信息Y(0)中所有像素均完成更新后,得到第一步更新边信息Y(1),提取Y(1)第i像素值8比特中的第二个比特ci2,将ci2集合起来构成比特平面C2y;
(5)利用第一步更新边信息Y(1)对编码端像素域数据流中第二个比特平面B2x进行解码,得到比特平面B2x′,查询比特平面C2y中的第i个值ci2,如果ci2等于比特平面B2x′中对应的第i比特值B2xi′,则第一步更新边信息Y(1)中对应的第i个像素pyi不进行更新,反之若比特值ci2不等于B2xi′,则重复步骤(3),但此时搜寻的对象为前两个比特是B1xi′和B2xi′的像素值,当Y(1)中所有像素均完成更新后,得到第二步更新边信息Y(2);
(6)将第二步更新边信息Y(2)中的像素pyi去掉前两个比特后的数值记为pyi′,并设定一个新的数值pyi″,令pyi″=pyi′/2;
(7)定义一个符号比特平面MBy,如果pyi′≥16,则第i像素对应的MByi=1,反之,若pyi″<16,则MByi=0;
(8)利用第二步更新边信息Y(2)解码符号比特平面MBx,得到比特平面MBx′,查询符号比特平面MBy中的第i个值MByi,如果MByi等于符号比特平面MBx′中对应的第i比特值MBxi,则第二步更新边信息Y(2)中对应的第i个像素pyi不进行更新,反之若比特值MByi不等于MBxi,则重复步骤(3),但此时搜寻的对象为前三个比特是B1xi′、B2xi′和MBxi的像素值,当Y(2)中的所有像素更新完之后得到最终边信息Y(3);
(9)设Vali为最终边信息Y(3)中第i个像素pyi去掉前两个比特后的值,令Vali′=|Val/2-16|,将所有的Vali′组成的信息UTPic经过DCT和量化后发送至LDPC解码器辅助变换域的解码。
本发明与现有技术相比具有如下优点:
1)本发明由于使用了编码端像素域处理器,减少了传统变换域分布式视频编码中进行变换及量化带来的有用信息的损失,能够提高系统的率失真性能。
2)本发明由于使用了解码端像素域处理器,对基于帧内插方法产生的边信息进行了更新,使其更加接近当前欲解码Wyner-Ziv帧图像的真实值,用其辅助解码Wyner-Ziv帧,能有效提高系统的率失真性能及压缩效率。
附图说明
图1是本发明的像素域与变换域联合的分布式视频编码系统框图;
图2是本发明的编码端像素域处理方法流程图;
图3是本发明的解码端像素域处理方法流程图;
图4是本发明像素域与变换域联合的分布式视频编码系统的率失真性能对比图。
具体实施方式
参照图1,本发明的像素域与变换域联合的分布式视频编码系统,由编码端,解码端与反馈信道三部分组成,其中:
编码端:用于将输入视频帧分为关键帧和Wyner-Ziv帧,并分别对关键帧和Wyner-Ziv帧进行H.264/AVC帧内编码和Wyner-Ziv编码。它主要由H.264/AVC帧内编码器、编码端像素域处理器、变换模块、量化模块及LDPC编码模块组成。其中H.264/AVC帧内编码器,根据质量要求选择量化因子将关键帧送入进行编码,并将得到的压缩码流发送至解码端;编码端像素域处理器,将Wyner-Ziv帧分为低错误率的像素域信息和高相关性的变换域信息两类,并分别将像素域信息和变换域信息发送至LDPC编码模块和变换模块;变换模块,对变换域信息进行基于块的n×n的离散余弦变换DCT,并将得到的频率系数按其在n×n块中所处的位置划分构成变换系数子带,该子带按其位置的不同,分别成为DC子带和AC子带,并将各系数子带发送至量化模块;该量化模块由量化子模块与提取子模块组成,量化子模块按照质量需求选择输入各系数子带的量化级,对每一个接收到的系数子带按照对应的量化级求量化步长,对整个子带进行均匀量化得到量化系数子带,将该子带发送至提取子模块,提取子模块将量化系数子带按照比特平面从高到低进行提取并发送至LDPC编码模块;LDPC编码模块对接收到的像素域信息和变换域信息按比特平面从高到低,分别进行独立的LDPC编码,并将校验比特保存在缓存区中等待解码端请求。
解码端:用于对Wyner-Ziv帧进行联合解码,得到恢复视频帧。它主要由H.264/AVC帧内解码器、边信息生成模块、解码端像素域处理器、相关噪声模型、LDPC解码模块、第一重建模块、反变换模块及第二重建模块组成。其中:H.264/AVC帧内解码器,用于对已编码关键帧进行帧内解码,并将已解码的前后相邻关键帧发送至边信息生成模块;边信息生成模块,由前向运动估计、双向运动估计、空域运动平滑及双向运动补偿四个子模块组成,前向运动估计子模块将输入的已解码的后一关键帧划分成若干大小相同、互不重叠的子块,对每个子块在已解码的前一关键帧中按一定匹配准则进行搜索,找到最优匹配块,建立初始运动矢量,将该运动矢量发送至双向运动估计子模块,双向运动估计子模块在每个子块周围较小范围内以同一匹配准则搜索最优匹配块,修正初始运动矢量,获得双向运动矢量,将该运动矢量发送至空域运动平滑子模块,空域运动平滑子模块使用权重中值滤波器对每个子块的双向运动矢量进行平滑,修正双向运动矢量的不一致性,获取每个子块的最终运动矢量,将最终运动矢量发送至双向运动补偿子模块,双向运动补偿子模块获取最终运动矢量后,使用双向运动补偿构建初始边信息,并将其发送至解码端像素域处理器;解码端像素域处理器,对初始边信息作与编码端像素域处理器类似的处理,同时,在解码像素域信息的过程中,每解码一个比特平面,对边信息进行一次更新,然后利用更新后的边信息继续解码后面的信息;相关噪声模型,估计原始视频帧与边信息之间的相关性,分别对像素域信息和变换域信息建立各自独立的虚拟信道噪声模型;LDPC解码模块,用于在边信息的辅助下,利用接收到的校验比特根据相关噪声模型提供的参数解码像素域信息和变换域信息,解码后的像素域信息分别发送至解码端像素域处理器和第二重建模块,解码后的变换域信息发送至第一重建模块;第一重建模块,将输入的已解码的变换域信息按照比特平面合成为系数子带,再将各子带中的系数还原到各个块中得到变换域帧数据,并将该帧数据发送至反变换模块;反变换模块,对输入的变换域帧数据按块进行反离散预选变换IDCT,得到像素域帧数据;第二重建模块,接收由LDPC解码器送出的像素域数据和反变换模块送出的像素域帧数据,将这两种像素域帧数据按照比特平面合成为恢复的Wyner-Ziv帧视频图像。
反馈信道:用于为解码端向编码端请求解码Wyner-Ziv帧所需的校验比特提供信息通道。
参照图2,本发明的编码端像素域处理步骤如下:
步骤1,提取原始Wyner-Ziv帧第i像素值8比特中的前两个比特bi1及bi2,其中,i∈[1,176×144],将该像素值去掉前两个比特后构成的数值记为pi,并设定一个新的数值pi′,令pi′=pi/2。
步骤2,将Wyner-Ziv帧中所有的比特bi1及bi2分别集合起来,构成两个比特平面B1x及B2x。
步骤3,定义一个符号比特平面MBx,如果pi′≥16,则第i像素对应的MBxi=1,并设一新的像素值pi″,令pi″=pi′-16,反之若pi′<16,则MBxi=0,且pi″=16-pi′。
步骤4,由所述的B1x、B2x及MBx构成编码端像素域数据流EPDS,将该数据流直接进行低密度校验LDPC编码获取校验比特,并将获得的校验比特储存在缓存区中等待解码器的请求,同时将像素值pi″组合构成变换域信息TPic送入变换模块,获得编码端变换域数据流ETD。
参照图3,本发明的解码端像素域处理步骤如下:
步骤1,提取初始边信息Y(0)第i像素值8比特中的第一个比特ci1,其中,i∈[1,176×144],将ci1集合起来构成比特平面C1y。
步骤2,利用初始边信息Y(0)对编码端像素域数据流中首比特平面B1x进行解码,得到比特平面B1x′,查询比特平面C1y中的第i个值ci1,如果ci1等于比特平面B1x′中对应的第i个比特值B1xi′,则初始边信息Y(0)中对应的第i个像素pyi不进行更新。
步骤3,如果比特值ci1不等于B1xi′,则在以像素pyi为中心的n×n的像素范围内搜索首比特等于B1xi′的像素值,若存在这类像素值,则将这些像素值的平均值设为像素pyi的更新后的值,反之若在该范围内不存在符合要求的像素值,则在所有首比特是B1xi′的像素值中选择最接近像素pyi的值作为更新后的像素值。
步骤4,当初始边信息Y(0)中所有像素均完成更新后,得到第一步更新边信息Y(1),提取Y(1)第i像素值8比特中的第二个比特ci2,将ci2集合起来构成比特平面C2y。
步骤5,利用第一步更新边信息Y(1)对编码端像素域数据流中第二个比特平面B2x进行解码,得到比特平面B2x′,查询比特平面C2y中的第i个值ci2,如果ci2等于比特平面B2x′中对应的第i比特值B2xi′,则第一步更新边信息Y(1)中对应的第i个像素pyi不进行更新,反之若比特值ci2不等于B2xi′,则重复步骤三,但此时搜寻的对象为前两个比特是B1xi′和B2xi′的像素值,当Y(1)中所有像素均完成更新后,得到第二步更新边信息Y(2)。
步骤6,将第二步更新边信息Y(2)中的像素pyi去掉前两个比特后的数值记为pyi′,并设定一个新的数值pyi″,令pyi″=pyi′/2。
步骤7,定义一个符号比特平面MBy,如果pyi′≥16,则第i像素对应的MByi=1,反之,若pyi″<16,则MByi=0。
步骤8,利用第二步更新边信息Y(2)解码符号比特平面MBx,得到比特平面MBx′,查询符号比特平面MBy中的第i个值MByi,如果MByi等于符号比特平面MBx′中对应的第i比特值MBxi,则第二步更新边信息Y(2)中对应的第i个像素pyi不进行更新,反之若比特值MByi不等于MBxi,则重复步骤三,但此时搜寻的对象为前三个比特是B1xi′、B2xi′和MBxi的像素值,当Y(2)中的所有像素更新完之后得到最终边信息Y(3)。
步骤9,设Vali为最终边信息Y(3)中第i个像素pyi去掉前两个比特后的值,令Vali′=|Val/2-16|,将所有的Vali′组成的信息UTPic经过DCT变换和量化后发送至LDPC解码器辅助变换域的解码。
本发明的效果可以通过以下仿真进一步说明:
一.仿真条件:
(1)软件环境:Visual Studio 2008;
(2)GOP尺寸:奇数帧为WZ帧,偶数帧为关键帧;
(3)块尺寸:4×4像素;
(4)参考序列:Foreman(中高速运动)序列,Hall(低速运动)序列;
(5)分辨率:176×144;
二.仿直内容与结果:
(1)在上述仿真条件下,对本发明中解码端像素域处理方法中边信息更新的结果进行了仿真,在整个实验中,仅考虑图像的亮度分量,系统性能采用峰值信噪比PSNR进行衡量。设定解码端像素域处理方法中像素的搜索搜索范围为3×3,仿真结果如表1所示,其中PSNR值的单位为dB。
表1边信息更新性能
从表1中可以看出,运用本发明提出的解码端像素域处理方法每一步更新后的边信息与利用帧内插生成的初始边信息相比,“Foreman”序列最终更新边信息的PSNR值增加了0.68dB,“Hall”序列最终更新边信息的PSNR值增加了0.13dB。这意味着边信息的预测精确度有了提高,由其辅助解码Wyner-Ziv帧将获得更好的率失真性能及压缩效率。
(2)在上述仿真条件下,对本发明和传统变换域分布式视频编码系统的率失真性能进行了仿真,仿真结果如图4所示,其中,图4(a)为“Foreman”序列仿真结果,图4(b)为“Hall”序列仿真结果,图4中线‘□‘表示传统变换域分布式视频编码系统的率失真性能,线‘o‘表示本发明得到的系统率失真性能,横坐标表示编码速率,纵坐标表示峰值信噪比PSNR。
从图4(a)可以看出,对于“Foreman”序列,本发明系统与传统变换域分布式视频编码系统相比,率失真性能增长约1.8dB;从图4(b)可以看出,对于“Hall”序列,本发明系统与传统变换域分布式视频编码系统相比,率失真性能增长约2.4dB。
本发明提出的像素域-变换域联合分布式视频编码系统与传统的变换域分布式视频编码系统相比,率失真性能有明显提高。
Claims (5)
1.一种像素域与变换域联合的分布式视频编码系统,包括编码端、解码端和反馈信道,其特征在于:
编码端,采用像素域与变换域联合处理的结构,它包括:
H.264/AVC帧内编码器:用于根据质量要求选择相应的量化因子对关键帧进行编码,并将得到的压缩码流发送至解码端;
编码端像素域处理器:用于对输入的视频原始Wyner-Ziv帧进行处理,将该视频原始Wyner-Ziv帧分为低错误率的像素域信息和高相关性的变换域信息两类,并分别将像素域信息和变换域信息直接发送至LDPC编码模块以及DCT变换模块;
DCT变换模块:用于对变换域信息进行基于块的n×n的离散余弦变换,并将得到的频率系数按其在n×n块中所处的位置划分构成变换系数子带,再将各系数子带发送至量化模块;
量化模块:用于对DCT变换模块传送的变换系数子带进行量化得到量化系数,对该量化系数提取比特平面,并将比特平面传送给LDPC编码模块;
LDPC编码模块:用于对接收到的像素域信息和变换域信息按比特平面从高到低,分别进行独立的LDPC编码,并将校验比特保存在缓存区中等待解码端请求;
解码端,采用像素域与变换域联合处理的结构,它包括:
H.264/AVC帧内解码器:用于对接收到的关键帧压缩码流进行帧内解码,并将解码得到的数据发送至边信息生成模块;
边信息生成模块:用于对已解码的前后两关键帧采用基于帧内插的方式产生边信息,并将其发送至解码端像素域处理器;
解码端像素域处理器:用于对输入的边信息作与编码端像素域处理器类似的处理,同时,在解码像素域信息的过程中,每解码一个比特平面,对边信息进行一次更新,然后利用更新后的边信息继续解码后面的信息;
相关噪声模型:用于估计原始视频帧与边信息之间的相关性,分别对像素域信息和变换域信息建立各自独立的虚拟信道噪声模型;
反馈信道:用于为解码端向编码端请求解码Wyner-Ziv帧所需的校验比特提供信 息通道;
LDPC解码模块:用于在边信息的辅助下,利用接收到的校验比特根据相关噪声模型提供的参数解码像素域信息和变换域信息,解码后的像素域信息分别发送至解码端像素域处理器和第二重建模块,解码后的变换域信息发送至第一重建模块;
第一重建模块:用于将输入的已解码的变换域信息按照比特平面合成为系数子带,再将各子带中的系数还原到各个块中得到变换域帧数据,并将该帧数据发送至反变换模块;
反变换模块:用于对输入的变换域帧数据按块进行反离散余弦变换IDCT,得到像素域帧数据;
第二重建模块:用于接收由LDPC解码模块送出的像素域数据和反变换模块送出的像素域帧数据,将这两种像素域帧数据按照比特平面合成为恢复的Wyner-Ziv帧视频图像。
2.根据权利要求1所述的像素域与变换域联合的分布式视频编码系统,其中量化模块包括:
量化子模块:用于按照质量需求选择各系数子带的量化级,对每一个接收到的系数子带按照对应的量化级求量化步长,对整个子带进行均匀量化得到量化系数子带,将该子带发送至提取子模块;
提取子模块:用于将量化系数子带按照比特平面从高到低进行提取并发送至LDPC编码模块。
3.根据权利要求1所述的像素域与变换域联合的分布式视频编码系统,其中边信息生成模块包括:
前向运动估计子模块:用于将已解码的后一关键帧划分成若干大小相同、互不重叠的子块,对每个子块在已解码的前一关键帧中按一定匹配准则进行搜索,找到最优匹配块,建立初始运动矢量,将该运动矢量发送至双向运动估计子模块;
双向运动估计子模块:用于在每个子块周围较小范围内以一定的匹配准则搜索最优匹配块,修正初始运动矢量,获得双向运动矢量,将该运动矢量发送至空域运动平滑子模块;
空域运动平滑子模块:用于使用权重中值滤波器对每个子块的双向运动矢量进行 平滑,修正双向运动矢量的不一致性,获取每个子块的最终运动矢量,将最终运动矢量发送至双向运动补偿子模块;
双向运动补偿子模块:用于在获取最终运动矢量后,使用双向运动补偿来构建初始边信息。
4.一种编码端像素域处理方法,包括如下步骤:
1)提取原始Wyner-Ziv帧第i像素值8比特中的前两个比特bi1及bi2,其中,i∈[1,176×144],将该像素值去掉前两个比特后构成的数值记为pi,并设定一个新的数值p′i,令p′i=pi/2;
2)将Wyner-Ziv帧中所有的bi1及bi2分别集合起来,构成两个比特平面B1x及B2x;
3)定义一个符号比特平面MBx,如果p′i≥16,则第i像素对应的MBxi=1,并设一新的像素值p″i,令p″i=p′i-16,反之若p′i<16,则MBxi=0,且p″i=16-p′i;
4)由所述的B1x、B2x及MBx构成编码端像素域数据流EPDS,将该数据流直接进行LDPC编码获取校验比特,并将获得的校验比特储存在缓存区中等待解码器的请求,同时将像素值p″i组合构成变换域信息TPic送入DCT变换模块,获得编码端变换域数据流ETD。
5.一种解码端像素域处理方法,包括如下步骤:
(1)提取初始边信息Y(0)第i像素值8比特中的第一个比特cil,其中,i∈[1,176×144],将ci1集合起来构成比特平面C1y,该初始边信息Y(0)是对已解码的前后两关键帧采用基于帧内插的方式产生的边信息;
(2)利用初始边信息Y(0)对编码端像素域数据流中首比特平面B1x进行解码,得到比特平面B1x′,查询比特平面C1y中的第i个值ci1,如果ci1等于比特平面B1x′中对应的第i个比特值B1xi′,则初始边信息Y(0)中对应的第i个像素pyi不进行更新;
(3)如果比特值ci1不等于B1xi′,则在以像素pyi为中心的n×n的像素范围内搜索首比特等于B1xi′的像素值,若存在这类像素值,则将这些像素值的平均值设为像素pyi的更新后的值,反之若在该范围内不存在符合要求的像素值,则在所有首比特是B1xi′的像素值中选择最接近像素pyi的值作为更新后的像素值;
(4)当初始边信息Y(0)中所有像素均完成更新后,得到第一步更新边信息Y(1), 提取Y(1)第i像素值8比特中的第二个比特ci2,将ci2集合起来构成比特平面C2y;
(5)利用第一步更新边信息Y(1)对编码端像素域数据流中第二个比特平面B2x进行解码,得到比特平面B2x′,查询比特平面C2y中的第i个值ci2,如果ci2等于比特平面B2x′中对应的第i比特值B2xi′,则第一步更新边信息Y(1)中对应的第i个像素pyi不进行更新,反之若比特值ci2不等于B2xi′,则重复步骤(3),但此时搜寻的对象为前两个比特是B1xi′和B2xi′的像素值,当Y(1)中所有像素均完成更新后,得到第二步更新边信息Y(2);
(6)将第二步更新边信息Y(2)中的像素pyi去掉前两个比特后的数值记为pyi′,并设定一个新的数值pyi″,令pyi″=pyi′/2;
(7)定义一个符号比特平面MBy,如果pyi′≥16,则第i像素对应的MByi=1,反之,若pyi″<16,则MByi=0;
(8)利用第二步更新边信息Y(2)解码符号比特平面MBx,得到比特平面MB′x,查询符号比特平面MBy中的第i个值MByi,如果MByi等于符号比特平面MB′x中对应的第i比特值MBxi,则第二步更新边信息Y(2)中对应的第i个像素pyi不进行更新,反之若比特值MByi不等于MBxi,则重复步骤(3),但此时搜寻的对象为前三个比特是B1xi′、B2xi′和MBxi的像素值,当Y(2)中的所有像素更新完之后得到最终边信息Y(3);
(9)设Vali为最终边信息Y(3)中第i个像素pyi去掉前两个比特后的值,令Vali′=|Val/2-16|,将所有的Vali′组成的信息UTPic经过DCT和量化后发送至LDPC解码器辅助变换域的解码。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201110001537 CN102026000B (zh) | 2011-01-06 | 2011-01-06 | 像素域-变换域联合的分布式视频编码系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201110001537 CN102026000B (zh) | 2011-01-06 | 2011-01-06 | 像素域-变换域联合的分布式视频编码系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102026000A CN102026000A (zh) | 2011-04-20 |
CN102026000B true CN102026000B (zh) | 2012-07-04 |
Family
ID=43866768
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 201110001537 Expired - Fee Related CN102026000B (zh) | 2011-01-06 | 2011-01-06 | 像素域-变换域联合的分布式视频编码系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102026000B (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102158703B (zh) * | 2011-05-04 | 2013-01-23 | 西安电子科技大学 | 基于分布式视频编码自适应相关噪声模型构造系统及方法 |
CN102186077B (zh) * | 2011-05-04 | 2012-12-26 | 西安电子科技大学 | 基于Wyner-Ziv视频编码的Wyner-Ziv帧码率控制系统和方法 |
CN102137263B (zh) * | 2011-05-09 | 2013-07-03 | 松日数码发展(深圳)有限公司 | 基于cnm关键帧分类的分布式视频编码及解码方法 |
CN102986156B (zh) * | 2011-05-11 | 2016-01-20 | 华为技术有限公司 | 编码方法及设备、解码方法及设备、编解码系统 |
CN102223536B (zh) * | 2011-06-10 | 2012-10-24 | 清华大学 | 基于压缩感知的分布式视频编解码系统及其方法 |
CN102223537B (zh) * | 2011-06-10 | 2012-10-24 | 清华大学 | 基于压缩感知的多视角分布式视频编解码系统及其方法 |
CN102790881B (zh) * | 2012-07-18 | 2015-01-28 | 西安电子科技大学 | 基于帧级编码端速率控制的变换域分布式视频编解码器 |
CN102811349B (zh) * | 2012-07-20 | 2014-10-29 | 西安电子科技大学 | 调节冗余的无反馈多描述分布式视频编解码器及编码方法 |
CN102833536A (zh) * | 2012-07-24 | 2012-12-19 | 南京邮电大学 | 一种面向无线传感器网络的分布式视频编解码方法 |
CN103581688B (zh) * | 2012-08-02 | 2017-09-12 | 北京大学 | 一种视频图像的编码和解码方法及装置 |
CN102905129B (zh) * | 2012-09-29 | 2015-03-18 | 湖北工业大学 | 静止图像的分布式编码方法 |
CN104144342B (zh) * | 2013-05-08 | 2018-07-17 | 厦门趣店科技有限公司 | 一种以值域中值对称的变换域系数量化方法 |
CN103517078A (zh) * | 2013-09-29 | 2014-01-15 | 清华大学深圳研究生院 | 分布式视频编码中边信息生成方法 |
CN105024795B (zh) * | 2015-08-12 | 2018-03-06 | 西安电子科技大学 | 长期演进lte上行链路边信息间接传输方法 |
CN106534873B (zh) * | 2016-11-29 | 2019-05-03 | 四川大学 | 基于小波域的分布式视频编码关键帧丢失错误保护方法 |
WO2018117895A1 (en) * | 2016-12-23 | 2018-06-28 | Huawei Technologies Co., Ltd | Mixed domain collaborative in-loop filter for lossy video coding |
CN107481293B (zh) * | 2017-06-16 | 2020-12-25 | 西安电子科技大学 | 基于多假设加权的差分图像压缩感知重构方法及智能终端 |
CN108600751A (zh) * | 2018-05-03 | 2018-09-28 | 山东师范大学 | 基于jnd的多边信息分布式视频编码、解码的方法及系统 |
CN112188217B (zh) * | 2019-07-01 | 2022-03-04 | 四川大学 | 结合dct域和像素域学习的jpeg压缩图像去压缩效应方法 |
CN115767108B (zh) * | 2022-10-20 | 2023-11-07 | 哈尔滨工业大学(深圳) | 一种基于特征域匹配的分布式图像压缩方法、系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101005621A (zh) * | 2007-01-11 | 2007-07-25 | 北京交通大学 | 基于自适应哈什和格型矢量量化的分布式视频编码方法 |
CN101335892A (zh) * | 2008-04-25 | 2008-12-31 | 太原科技大学 | 基于帧内模式决策的混合分布式视频编码方法 |
CN101835042A (zh) * | 2010-03-19 | 2010-09-15 | 西安电子科技大学 | 基于无反馈速率控制的Wyner-Ziv视频编码系统及方法 |
-
2011
- 2011-01-06 CN CN 201110001537 patent/CN102026000B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101005621A (zh) * | 2007-01-11 | 2007-07-25 | 北京交通大学 | 基于自适应哈什和格型矢量量化的分布式视频编码方法 |
CN101335892A (zh) * | 2008-04-25 | 2008-12-31 | 太原科技大学 | 基于帧内模式决策的混合分布式视频编码方法 |
CN101835042A (zh) * | 2010-03-19 | 2010-09-15 | 西安电子科技大学 | 基于无反馈速率控制的Wyner-Ziv视频编码系统及方法 |
Non-Patent Citations (3)
Title |
---|
WANG Feng-qin.Efficient reconstruction scheme for transform domain Wyner-Ziv video coding.《The Journal of China Universities of Posts and Telecommunications》.2010,全文. * |
宋彬.Wyner-Ziv视频编码中边信息生成算法研究.《通信学报》.2010,(第12期),全文. * |
王尊亮.使用联合比特面译码的分布式视频编码.《北京邮电大学学报》.2010,(第3期),全文. * |
Also Published As
Publication number | Publication date |
---|---|
CN102026000A (zh) | 2011-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102026000B (zh) | 像素域-变换域联合的分布式视频编码系统 | |
CN101015215B (zh) | 用于在视频编码解码器中实施快速模式决策的方法及设备 | |
EP3571841B1 (en) | Dc coefficient sign coding scheme | |
CN101835044B (zh) | 一种频率域分布式视频编码中的分类组合方法 | |
CN107027033B (zh) | 一种用于使用贴片拷贝的视频编解码方法 | |
CN103339938A (zh) | 执行视频译码的运动向量预测 | |
CN104937936A (zh) | 用于帧内预测的模式决策简化 | |
CN101946516A (zh) | 快速宏块增量量化参数的决定 | |
CN103238322A (zh) | 在视频译码中单独地译码视频块的最后有效系数的位置 | |
CN102291582B (zh) | 一种基于运动补偿精化的分布式视频编码方法 | |
CN102263951B (zh) | 一种快速的分形视频压缩与解压缩方法 | |
CN103442228B (zh) | 从h.264/avc标准到hevc标准的快速帧内转码方法及其转码器 | |
CN107071422B (zh) | 基于图像相关模型的低复杂度hevc码率适配转换编码方法 | |
CN101014129B (zh) | 一种视频数据压缩方法 | |
US9369732B2 (en) | Lossless intra-prediction video coding | |
US20180302643A1 (en) | Video coding with degradation of residuals | |
CN102572428B (zh) | 面向多媒体传感网分布式编解码的边信息估计方法 | |
CN101663895B (zh) | 使用所估计译码成本的视频译码模式选择 | |
CN107302701B (zh) | 译码插值滤波器类型 | |
CN101883284A (zh) | 基于背景建模和可选差分模式的视频编/解码方法及系统 | |
CN111726614A (zh) | 一种基于空域下采样与深度学习重建的hevc编码优化方法 | |
CN107343202B (zh) | 基于附加码率的无反馈分布式视频编解码方法 | |
CN102857760B (zh) | 一种无反馈的优化码率的分布式视频编解码方法及其系统 | |
CN101115200B (zh) | 一种有效的运动矢量可伸缩编码方法 | |
Wang et al. | A low complexity compressed sensing-based codec for consumer depth video sensors |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120704 Termination date: 20160106 |