CN104093030B - 分布式视频编码边信息生成方法 - Google Patents
分布式视频编码边信息生成方法 Download PDFInfo
- Publication number
- CN104093030B CN104093030B CN201410326002.XA CN201410326002A CN104093030B CN 104093030 B CN104093030 B CN 104093030B CN 201410326002 A CN201410326002 A CN 201410326002A CN 104093030 B CN104093030 B CN 104093030B
- Authority
- CN
- China
- Prior art keywords
- side information
- frame
- global
- key frame
- video coding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 239000013598 vector Substances 0.000 claims abstract description 32
- 238000000605 extraction Methods 0.000 claims abstract description 5
- 230000004907 flux Effects 0.000 claims abstract description 5
- 230000033001 locomotion Effects 0.000 claims description 43
- 238000009499 grossing Methods 0.000 claims description 4
- 230000026058 directional locomotion Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000004927 fusion Effects 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明属于分布式视频编码技术领域,为一种新型的分布式视频编码边信息生成方法。为此,本发明采取的技术方案是,分布式视频编码边信息生成方法,包括如下步骤:全局边信息生成步骤是,首先,在编码端将前、后两个关键帧作为前、后参考帧,并与当前的非关键帧进行SURF算法特征点提取,计算出特征点的主方向,从而生成特征描述向量,接着根据最邻向量匹配法进行匹配,然后将全局参数通过信道传递到解码端,解码端根据接收到的全局参数与已解码的前、后参考帧进行变换,得到两个当前非关键帧的边信息,最后将两个边信息取平均,获得全局边信息。本发明主要应用于分布式视频编码。
Description
技术领域
本发明属于分布式视频编码技术领域,尤其涉及一种新型的分布式视频编码边信息生成方法。
技术背景
分布式视频编码是一种新兴的视频编码技术,它能够使运动估计与运动补偿预测从编码端转移到解码端,有效地降低了编码端复杂度,适用于低复杂度、低功耗的视频系统,如无线监控系统、无线视频系统等。
分布式视频编码的解码端依靠校验信息辅助边信息对非关键帧进行解码,边信息的质量对于重构非关键帧至关重要。通常的边信息是在解码端由关键帧通过一定的算法生成的,不具有编码端帧信息,因此不具有全局性。如果能够将全局信息与局部信息融合,生成的边信息质量较高,解码帧质量也相应较高。
发明内容
为了克服现有技术的不足,提出一种新型的分布式视频编码边信息生成方法。为此,本发明采取的技术方案是,分布式视频编码边信息生成方法,包括如下步骤:两种边信息,分别是全局边信息和局部边信息;全局边信息是在编码端,根据前后两个关键帧分别与当前帧经过快速鲁棒特征SURF(Speeded Up Robust Feature)算法进行特征点匹配,将匹配参数传递到解码端,与已解码的关键帧共同解码得到全局边信息;局部边信息是在解码端由已解码关键帧通过运动补偿内插法获得的边信息;全局边信息生成步骤是,首先,在编码端将前、后两个关键帧作为前、后参考帧,并与当前的非关键帧进行SURF算法特征点提取,计算出特征点的主方向,从而生成特征描述向量,接着根据最邻向量匹配法进行匹配,然后将全局参数通过信道传递到解码端,解码端根据接收到的全局参数与已解码的前、后参考帧进行变换,得到两个当前非关键帧的边信息,最后将两个边信息取平均,获得全局边信息。
局部边信息生成步骤是,首先,使用块匹配法在下一个和前一个关键帧中执行前向运动估计,前向运动估计的方法是对于前一关键帧中的每个块,在后一关键帧定义一个搜索范围,在此搜索范围中找到一个块,两者之间的平均绝对差分MAD(Mean Absolutedifference)值最小,则该块被定义为与当前块最匹配的块,计算两个块之间的运动矢量,把前一关键帧中的每个块像素值按1/2的运动矢量复制到欲解码帧中即可;然后将获得的运动矢量进行双向运动估计;获得双向运动矢量场后,使用空间平滑算法提高运动矢量的空间一致性;最后使用标准视频编码模式中所定义的双向运动补偿插值出当前欲解码的帧。
与已有技术相比,本发明的技术特点与效果:
本发明通过分布式视频编码边信息的生成方法,不仅考虑到解码端的相关性,还考虑到编码端相关性,极大提高了边信息的质量,从而提高了非关键帧的重构质量。
附图说明
图1本发明的分布式视频编码边信息生成方法框图。
图2本发明的分布式视频编码全局边信息生成框图。
图3本发明的分布式视频编码局部边信息生成框图。
具体实施方式
所提的分布式视频编码的边信息生成方法,包括两种边信息,然后经过融合,得到融合的边信息,再经过重构解码出非关键帧。两种边信息,分别是全局边信息和局部边信息。全局边信息是在编码端,根据前后两个关键帧分别与当前帧经过SURF算法进行特征点匹配,将匹配参数传递到解码端,与已解码的关键帧共同解码得到全局边信息。局部边信息是在解码端由已解码关键帧通过运动补偿内插法获得的边信息。
本发明所提的全局边信息生成方法,首先,在编码端将前、后两个关键帧作为前、后参考帧,并与当前的非关键帧进行SURF算法特征点提取,计算出特征点的主方向,从而生成特征描述向量,接着根据最邻向量匹配法进行匹配,然后将全局参数通过信道传递到解码端,解码端根据接收到的全局参数与已解码的前、后参考帧进行变换,得到两个当前非关键帧的边信息,最后将两个边信息取平均,获得全局边信息。
本发明所提的局部边信息生成方法,首先,使用块匹配法在下一个和前一个关键帧中执行前向运动估计,前向运动估计的方法是对于前一关键帧中的每个块,在后一关键帧定义一个搜索范围,在此搜索范围中找到一个块,两者之间的MAD值最小,则该块被定义为与当前块最匹配的块,计算两个块之间的运动矢量,把前一关键帧中的每个块像素值按1/2的运动矢量复制到欲解码帧中即可;然后将获得的运动矢量进行双向运动估计,双向运动估计模型精化了在上一步所求得的运动矢量;获得双向运动矢量场后,可以观察到运动矢量有时会有低的空间一致性,这样有可能会导致插值出来的帧产生块效应,为了减少错误的运动矢量的数目,可以使用空间平滑算法提高运动矢量的空间一致性;最后使用标准视频编码模式中所定义的双向运动补偿插值出当前欲解码的帧。
下面结合附图对本发明作更详细的说明。
如图1所示,所述的分布式视频编码边信息生成方法中,所有帧分为关键帧和非关键帧。关键帧通过H.264进行编码和解码,得到关键帧的重构帧。非关键帧在编码端,分为两方面进行。首先是通过前后两个参考帧进行SURF算法特征点提取,然后进行特征匹配,将全局参数传递到解码端;另一方面,非关键帧分别进行DCT(Discrete Cosine Transform,离散余弦变换)变换、量化、信道编码,将校验信息传递到解码端。在解码端,编码端传递过来的全局参数与已解码的关键帧进行变换,获得全局边信息;由已解码的关键帧通过运动补偿内插法获得局部边信息。两个边信息通过线性融合算法获得融合后的边信息,再经过反量化、IDCT变换,获得重构非关键帧。
如图2所示,所述的分布式视频编码全局边信息生成方法中,首先,在编码端将前、后两个关键帧作为前、后参考帧,并与当前的非关键帧进行SURF算法特征点提取,计算出特征点的主方向,从而生成特征描述向量,接着根据最邻向量匹配法进行匹配,然后将全局参数Tb,Tf(其中,Tb,Tf是经过SURF算法中的匹配算法,当前帧分别与前一帧、后一帧的匹配参数)通过信道传递到解码端,解码端根据接收到的全局参数与已解码的前、后参考帧进行变换,得到两个当前非关键帧的边信息,最后将两个边信息取平均,获得全局边信息。
如图3所示,所述的分布式视频编码局部边信息生成方法中,首先,使用块匹配法在下一个和前一个关键帧中执行前向运动估计,前向运动估计的方法是对于前一关键帧中的每个块,在后一关键帧定义一个搜索范围,在此搜索范围中找到一个块,两者之间的MAD值最小,则该块被定义为与当前块最匹配的块,计算两个块之间的运动矢量,把前一关键帧中的每个块像素值按1/2的运动矢量复制到欲解码帧中即可;然后将获得的运动矢量进行双向运动估计,双向运动估计模型精化了在上一步所求得的运动矢量;获得双向运动矢量场后,可以观察到运动矢量有时会有低的空间一致性,这样有可能会导致插值出来的帧产生块效应为了减少不真实运动矢量(相比于真实运动场的不正确运动矢量)的数目,可以使用空间平滑算法提高运动矢量的空间一致性;最后使用标准视频编码模式中所定义的双向运动补偿插值出当前欲解码的帧。
Claims (1)
1.一种分布式视频编码边信息生成方法,其特征是,两种边信息,分别是全局边信息和局部边信息;全局边信息是在编码端,根据前后两个关键帧分别与当前帧经过快速鲁棒特征SURF(Speeded Up Robust Feature)算法进行特征点匹配,将匹配参数传递到解码端,与已解码的关键帧共同解码得到全局边信息;局部边信息是在解码端由已解码关键帧通过运动补偿内插法获得的边信息;全局边信息生成步骤是,首先,在编码端将前、后两个关键帧作为前、后参考帧,并与当前的非关键帧进行SURF算法特征点提取,计算出特征点的主方向,从而生成特征描述向量,接着根据最邻向量匹配法进行匹配,然后将全局参数通过信道传递到解码端,解码端根据接收到的全局参数与已解码的前、后参考帧进行变换,得到两个当前非关键帧的边信息,最后将两个边信息取平均,获得全局边信息;其中,局部边信息生成步骤是,首先,使用块匹配法在下一个和前一个关键帧中执行前向运动估计,前向运动估计的方法是对于前一关键帧中的每个块,在后一关键帧定义一个搜索范围,在此搜索范围中找到一个块,两者之间的平均绝对差分MAD(Mean Absolute difference)值最小,则该块被定义为与当前块最匹配的块,计算两个块之间的运动矢量,把前一关键帧中的每个块像素值按1/2的运动矢量复制到欲解码帧中即可;然后将获得的运动矢量进行双向运动估计;获得双向运动矢量场后,使用空间平滑算法提高运动矢量的空间一致性;最后使用标准视频编码模式中所定义的双向运动补偿插值出当前欲解码的帧,即生成局部边信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410326002.XA CN104093030B (zh) | 2014-07-09 | 2014-07-09 | 分布式视频编码边信息生成方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410326002.XA CN104093030B (zh) | 2014-07-09 | 2014-07-09 | 分布式视频编码边信息生成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104093030A CN104093030A (zh) | 2014-10-08 |
CN104093030B true CN104093030B (zh) | 2017-12-12 |
Family
ID=51640705
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410326002.XA Expired - Fee Related CN104093030B (zh) | 2014-07-09 | 2014-07-09 | 分布式视频编码边信息生成方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104093030B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104767998B (zh) * | 2015-03-25 | 2017-12-08 | 北京大学 | 一种面向视频的视觉特征编码方法及装置 |
CN105430406B (zh) * | 2015-12-04 | 2018-06-12 | 中国矿业大学 | 一种分布式视频编码框架 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101860748A (zh) * | 2010-04-02 | 2010-10-13 | 西安电子科技大学 | 基于分布式视频编码的边信息生成系统及方法 |
CN102291582A (zh) * | 2011-09-21 | 2011-12-21 | 北京邮电大学 | 一种基于运动补偿精化的分布式视频编码方法 |
CN103475879A (zh) * | 2013-09-10 | 2013-12-25 | 南京邮电大学 | 一种分布式视频编码中边信息生成方法 |
CN103517078A (zh) * | 2013-09-29 | 2014-01-15 | 清华大学深圳研究生院 | 分布式视频编码中边信息生成方法 |
CN103596014A (zh) * | 2013-11-26 | 2014-02-19 | 天津大学 | 多视点分布式视频编码中视点间边信息的生成方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8340193B2 (en) * | 2006-08-04 | 2012-12-25 | Microsoft Corporation | Wyner-Ziv and wavelet video coding |
JP5971010B2 (ja) * | 2012-07-30 | 2016-08-17 | 沖電気工業株式会社 | 動画像復号装置及びプログラム、並びに、動画像符号化システム |
-
2014
- 2014-07-09 CN CN201410326002.XA patent/CN104093030B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101860748A (zh) * | 2010-04-02 | 2010-10-13 | 西安电子科技大学 | 基于分布式视频编码的边信息生成系统及方法 |
CN102291582A (zh) * | 2011-09-21 | 2011-12-21 | 北京邮电大学 | 一种基于运动补偿精化的分布式视频编码方法 |
CN103475879A (zh) * | 2013-09-10 | 2013-12-25 | 南京邮电大学 | 一种分布式视频编码中边信息生成方法 |
CN103517078A (zh) * | 2013-09-29 | 2014-01-15 | 清华大学深圳研究生院 | 分布式视频编码中边信息生成方法 |
CN103596014A (zh) * | 2013-11-26 | 2014-02-19 | 天津大学 | 多视点分布式视频编码中视点间边信息的生成方法 |
Non-Patent Citations (1)
Title |
---|
Wyner-Ziv视频编码中边信息生成算法研究;宋彬 等;《通信学报》;20101231;第31卷(第12期);97-103 * |
Also Published As
Publication number | Publication date |
---|---|
CN104093030A (zh) | 2014-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10863194B2 (en) | Methods and systems for motion vector derivation at a video decoder | |
CN103329522B (zh) | 用于使用字典编码视频的方法 | |
CN101860748B (zh) | 基于分布式视频编码的边信息生成系统及方法 | |
CN103475879B (zh) | 一种分布式视频编码中边信息生成方法 | |
CN101835044B (zh) | 一种频率域分布式视频编码中的分类组合方法 | |
CN101335892B (zh) | 基于帧内模式决策的混合分布式视频编码方法 | |
CN102215389B (zh) | 一种局部亮度补偿的视频编解码方法及装置 | |
CN102137263A (zh) | 基于cnm关键帧分类的分布式视频编码及解码方法 | |
CN102291582B (zh) | 一种基于运动补偿精化的分布式视频编码方法 | |
CN101478678B (zh) | 基于感兴趣区域运动补偿时域滤波方法 | |
CN103002280A (zh) | 基于hvs&roi的分布式编解码方法及系统 | |
CN105338357A (zh) | 一种分布式视频压缩感知编码技术方法 | |
CN104602028A (zh) | 一种立体视频b帧整帧丢失错误隐藏方法 | |
CN102752588A (zh) | 使用空间缩放预测的视频编解码方法 | |
Zhang et al. | Adaptive distributed compressed video sensing. | |
CN103763567B (zh) | 一种应用于监控视频隐私保护的压缩域失真漂移补偿方法 | |
CN104093030B (zh) | 分布式视频编码边信息生成方法 | |
CN104333757A (zh) | 基于cs测量值多描述的视频编解码方法 | |
CN102595132A (zh) | 一种应用于无线传感器网络的分布式视频编解码方法 | |
CN104243994A (zh) | 一种实时运动感知图像增强的方法 | |
CN107343202A (zh) | 基于附加码率的无反馈分布式视频编解码方法及移动终端 | |
CN105430406A (zh) | 一种分布式视频编码框架 | |
CN104243991B (zh) | 一种边信息生成方法及装置 | |
CN102790881B (zh) | 基于帧级编码端速率控制的变换域分布式视频编解码器 | |
CN102088612B (zh) | 具有鲁棒性的无反馈Wyner-Ziv视频解码器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20171212 |