CN103763570B - 一种基于satd的hevc快速帧内预测方法 - Google Patents
一种基于satd的hevc快速帧内预测方法 Download PDFInfo
- Publication number
- CN103763570B CN103763570B CN201410024635.5A CN201410024635A CN103763570B CN 103763570 B CN103763570 B CN 103763570B CN 201410024635 A CN201410024635 A CN 201410024635A CN 103763570 B CN103763570 B CN 103763570B
- Authority
- CN
- China
- Prior art keywords
- current coded
- coded unit
- satd
- size
- minsatd
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供了一种基于SATD的HEVC快速帧内预测方法,首先统计出一组健壮的阈值使其能够适用于不同尺寸的编码单元CU块以及不同的QP,当当前编码单元CU最小的SATD值小于给定的阈值条件下,即结束当前编码单元CU的分割过程;本发明可准确地定位出HEVC帧内编码单元CU需要分割的深度,能够极大地降低HEVC的编码复杂度,有助于实现HEVC编码器的实时应用。
Description
技术领域
本发明属于数字视频通信领域中的视频信息处理领域,具体涉及一种基于SATD的视频编码标准(HEVC)快速帧内预测方法。
技术背景
随着科技的不断进步,人们对视觉和听觉质量的要求越来越高,高清视频和超高清视频开始被普遍关注。10年之前创立的第二代视频编码标准H.264/AVC已不能满足人们对于实际应用的要求,工业界和学术界对新一代视频编码标准的渴望越来越强烈。在这一形势下,VCEG和MPEG两大标准组织开始进行合作开发,在2010年1月成立了称为JCT-VC(Joint Collaborative Team on Video Coding)的联合组织,开始统一制定下一代视频编码标准并取名为-High Efficiency Video Coding。在2013年1月26号HEVC正式成为国际视频编码标准。
HEVC虽然跟以往的视频编码标准一样采用基于块的编码框架,但HEVC做了大量的技术创新。首次提出三个编码单元概念:CU(编码单元),PU(预测单元),TU(变换单元)。对于编码单元CU创新性地采用基于四叉树的块尺寸递归分割结构,最大尺寸可达64×64。对于预测单元PU,其帧内预测模式多达35种。对于变换单元TU采用一种称为RQT(ResidualQuad-tree Transform)分割结构,其变换块的大小可根据残差的特性进行自适应的调整。上述所列的技术只是HEVC引进的众多技术中最为突出的部分。引进的这些创新技术使得HEVC跟H.264相比在保证相同视频质量的同时,码率可减少50%左右。可见,随着对未来高清以及超高清视频的不断需求,以及移动设备的大力发展,在可用带宽限制的前提下,HEVC展现出了巨大的市场应用潜力。但在取得高增益的同时,HEVC也面临着一个巨大的问题,跟H.264相比,HEVC的编码复杂度至少是其4倍,不利于实时应用。而HEVC中的模式选择又占到整个编码时间的80%以上,可见研究一种高效的快速模式选择算法对于降低HEVC的编码复杂度显得尤为重要。
对于帧间编码单元CU的快速决策,已提出了众多的提案。如基于SKIP模式的子树提前修剪算法,该算法先检查当前编码单元CU是否为SKIP模式,若是则提前结束其分割过程,该算法简单有效,已被HEVC标准采纳。但该算法不适用于帧内,对于帧内的编码单元CU快速划分目前还没有较为有效的算法。
发明内容
本发明的目的在于提供一种基于SATD的视频编码标准(HEVC)快速帧内预测方法,可以极大地降低HEVC的编码复杂度,有助于实现一种能够实时应用的编码器,不会引入额外的计算复杂度,而且对HEVC的编码效率几乎没有影响,可以灵活控制编码效率与编码时间之间的折中。
本发明一种基于SATD的HEVC快速帧内预测方法,具体包括如下步骤:
步骤1、首先分别统计出64×64,32×32以及16×16尺寸块的编码单元CU在不同量化参数QP下其35个帧内预测模式中最小的SATD(Sum of Absolute TransformedDifference)值需要满足的阈值条件,使得其不分割的概率达到95%左右,得出如下3组阈值分别对应于64×64,32×32以及16×16尺寸块:
thr64×64=139.3×QP-1971.4 (1)
thr32×32=107.9×QP-1154.3 (2)
thr16×16=96.4×QP-1290.5 (3)
步骤2、读入一个当前最大的编码单元块CTU,开始进行帧内预测,并设一个新的分割标志位earlyprune,初始化其为true;
步骤3、判断当前编码单元CU的尺寸,若当前编码单元CU尺寸为8×8,转到步骤9,否则转到步骤4;
步骤4、对当前编码单元CU在粗略模式选择处理过程中保存下35个不同预测模式的SATD值,同时找出最小的SATD值,记为minSATD;
步骤5、判断当前编码单元CU的尺寸,若当前编码单元CU尺寸为64×64,转到步骤6,若当前编码单元CU尺寸为32×32,转到步骤7,若当前编码单元CU尺寸为16×16,转到步骤8;
步骤6、由式(1)计算出thr64×64,若minSATD<thr64×64,结束其分割过程,转到步骤9;
步骤7、由式(2)计算出thr32×32,若minSATD<thr32×32,结束其分割过程,转到步骤9;
步骤8、由式(3)计算出thr16×16,若minSATD<thr16×16,结束其分割过程,转到步骤9;
步骤9、对当前编码单元CU经粗略模式选择处理后的预测模式进行率失真优化计算,从中选出最优的预测模式,转到步骤10;
步骤10、若当前编码单元CU尺寸大于8×8,判断分割标志位earlyprune是否为false,若是,则结束当前编码单元CU的分割过程,转到步骤2;否则将当前编码单元CU划分为4个相等尺寸的子编码单元CU,对每个子编码单元CU,转到步骤3。
本发明适用于采用HEVC标准的编码系统中,对图像进行帧内预测处理时,提供一种帧内预测的快速CU划分决策算法,避免做不必要的RDO计算。本发明具有以下的主要特点和优点:
1、本发明利用SATD跟每一帧图像编码单元CU块平坦度之间紧密的依赖关系,提前结束当前编码单元CU块不必要的分割过程。
2、本发明简单有效,不会带来额外的计算复杂度,可精确的终止当前编码单元CU块不必要的划分,而且可灵活控制所选阈值,使其适用于不同的应用场景,同时本发明非常利于硬件和软件的实现。
3.本发明不会改变HEVC原有的码流结构,与HEVC标准完全兼容。
附图说明
图1为本发明HEVC帧内编码单元CU的递归划分过程示意图;
图2为本发明HEVC35种可用的帧内预测模式示意图。
以下结合附图和具体实施例对本发明做进一步详述。
具体实施方式
本发明一种基于SATD的HEVC快速帧内预测方法,如图1所示,其中最大的编码单元CU称为CTU(Coding Tree Unit),首先进行CTU的分割,其四叉树的划分过程如下:当其不划分时,尺寸为64×64的编码单元CU,此时深度为0;接着对其进行预测编码,得其率失真代价,然后对该编码单元CU进行分割,分为四个子编码单元CU,每个子编码单元CU的尺寸为32×32,此时深度为1,接着对这四个子CU分别进行预测编码,同样得其RDO(Rate-DistortionOptimization)代价,如此递归地划分下去;当子编码单元CU的尺寸为8×8时,即此时深度为3时,结束其分割过程;接着对分割的编码单元CU进行修剪,即依此比较求得的各个编码单元CU的代价,从而决定当前LCU最优的编码分割选择:首先比较4个8×8子编码单元CU的代价和是否小于其对应的16×16的编码单元CU的代价,如果小于,则选择8×8的编码单元CU的分割类型,否则选择16×16的编码单元CU分割类型,如此比较下去,直到当前编码单元CU的深度为0。
对于HEVC的帧内预测,当前尺寸为2N×2N的编码单元CU对应预测单元PU的尺寸只允许为2N×2N或者N×N,而N×N尺寸的预测单元PU只在编码单元CU的尺寸为8×8时才被允许。
如图2所示,HEVC中每个预测单元PU的最优预测模式需在包括模式2-34之间的33种角度预测模式以及planar和DC模式共35种预测模式之间进行RDO计算,比较其RDO代价后选取最小代价对应的模式作为最终的预测模式,可见其计算复杂度相当巨大。因此,为了缓解编码器的计算复杂度,HEVC首先进行RMD(rough mode decision)处理,即对35种预测模式分别求其对应的Hadamard代价,从中选出N个代价最小的预测模式,并考虑了当前编码单元CU的MPM(most probable mode),接着对这可能的N到N+2个候选模式进行率失真计算从中选出最优的预测模式。
本发明的一种基于SATD的HEVC快速帧内预测方法,具体包括如下步骤:
步骤1、首先分别统计出64×64,32×32以及16×16尺寸块的编码单元CU在不同量化参数QP下其35个帧内预测模式中最小的SATD(Sum of Absolute TransformedDifference)值需要满足的阈值条件,使得其不分割的概率达到95%左右,得出如下3组阈值分别对应于64×64,32×32以及16×16尺寸块:
thr64×64=139.3×QP-1971.4 (1)
thr32×32=107.9×QP-1154.3 (2)
thr16×16=96.4×QP-1290.5 (3)
步骤2、读入一个当前最大的编码单元块CTU,开始进行帧内预测,并设一个新的分割标志位earlyprune,初始化其为true;
步骤3、判断当前编码单元CU的尺寸,若当前编码单元CU尺寸为8×8,转到步骤9,否则转到步骤4;
步骤4、对当前编码单元CU在粗略模式选择处理过程中保存下35个不同预测模式的SATD值,同时找出最小的SATD值,记为minSATD;
步骤5、判断当前编码单元CU的尺寸,若当前编码单元CU尺寸为64×64,转到步骤6,若当前编码单元CU尺寸为32×32,转到步骤7,若当前编码单元CU尺寸为16×16,转到步骤8;
步骤6、由式(1)计算出thr64×64,若minSATD<thr64×64,结束其分割过程,转到步骤9;
步骤7、由式(2)计算出thr32×32,若minSATD<thr32×32,结束其分割过程,转到步骤9;
步骤8、由式(3)计算出thr16×16,若minSATD<thr16×16,结束其分割过程,转到步骤9;
步骤9、对当前编码单元CU经粗略模式选择处理后的预测模式进行率失真优化计算,从中选出最优的预测模式,转到步骤10;
步骤10、若当前编码单元CU尺寸大于8×8,判断分割标志位earlyprune是否为false,若是,则结束当前编码单元CU的分割过程,转到步骤2;否则将当前编码单元CU划分为4个相等尺寸的子编码单元CU,对每个子编码单元CU,转到步骤3。
本发明的核心思想为:利用SATD值与当前编码单元CU平滑度之间存在的紧密关系,提前决策当前编码单元CU是否需要进一步的分割,过滤掉一些不必要的分割过程,节省编码时间。
采用新一代的视频编码标准HEVC提供的参考软件HM10.1来衡量本发明方法的效果。对HEVC建议的5个分辨率等级的18个测试序列进行全部测试。编码器参数为:全帧内编码模式,分别选取QP=22,27,32,37,其余为默认设置。本发明与原始HM10.1比较的实验结果如下表所示。表中的BDBR与BDPSNR为VCEG建议采用的评价准则,分别表示在同样的客观质量下,两种方法的码率节省情况以及在给定的同等码率下,两种方法的Y-PSNR的差异。
从表中可看出,本发明效果良好,几乎不会影响其PSNR与码率。而同时在QP=37条件下平均能减少30.7%的编码时间。从表中还可进一步看出本发明方法随着QP不断的增大,编码时间减少的幅度也不断的增大,具有一定的实际应用意义。需要指出的是,表中所列数据是在预测精度满足95%条件下所求出的阈值,对于不同的应用场合,本发明可灵活的控制所选阈值,使其适用于不同应用场合。而且本发明硬件与软件的实现简单。
以上所述,仅是本发明较佳实施例而已,并非对本发明的技术范围作任何限制,故凡是依据本发明的技术实质对以上实施例所作的任何细微修改、等同变化与修饰,均仍属于本发明技术方案的范围内。
Claims (1)
1.一种基于SATD的HEVC快速帧内预测方法,其特征在于包括如下步骤:
步骤1、首先分别统计出64×64,32×32以及16×16尺寸块的编码单元CU在不同量化参数QP下其35个帧内预测模式中最小的SATD(Sum of Absolute Transformed Difference绝对变换差值和)值需要满足的阈值条件,使得其不分割的概率达到95%,得出如下3组阈值分别对应于64×64,32×32以及16×16尺寸块:
thr64×64=139.3×QP-1971.4 (1)
thr32×32=107.9×QP-1154.3 (2)
thr16×16=96.4×QP-1290.5 (3)
步骤2、读入一个当前最大的编码单元块CTU,开始进行帧内预测,并设一个新的分割标志位earlyprune,初始化其为true;
步骤3、判断当前编码单元CU的尺寸,若当前编码单元CU尺寸为8×8,转到步骤9,否则转到步骤4;
步骤4、对当前编码单元CU在粗略模式选择处理过程中保存下35个不同预测模式的SATD值,同时找出最小的SATD值,记为minSATD;
步骤5、判断当前编码单元CU的尺寸,若当前编码单元CU尺寸为64×64,转到步骤6,若当前编码单元CU尺寸为32×32,转到步骤7,若当前编码单元CU尺寸为16×16,转到步骤8;
步骤6、由式(1)计算出thr64×64,若minSATD<thr64×64,置分割标志位earlyprune为false,结束其分割过程,转到步骤9,若minSATD>=thr64×64,直接转到步骤9;
步骤7、由式(2)计算出thr32×32,若minSATD<thr32×32,置分割标志位earlyprune为false,结束其分割过程,转到步骤9,若minSATD>=thr32×32,直接转到步骤9;
步骤8、由式(3)计算出thr16×16,若minSATD<thr16×16,置分割标志位earlyprune为false,结束其分割过程,转到步骤9,若minSATD>=thr16×16,直接转到步骤9;
步骤9、对当前编码单元CU经粗略模式选择处理后的预测模式进行率失真优化计算,从中选出最优的预测模式,转到步骤10;
步骤10、若当前编码单元CU尺寸大于8×8,判断分割标志位earlyprune是否为false,若是,则结束当前编码单元CU的分割过程,转到步骤2;否则将当前编码单元CU划分为4个相等尺寸的子编码单元CU,对每个子编码单元CU,转到步骤3。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410024635.5A CN103763570B (zh) | 2014-01-20 | 2014-01-20 | 一种基于satd的hevc快速帧内预测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410024635.5A CN103763570B (zh) | 2014-01-20 | 2014-01-20 | 一种基于satd的hevc快速帧内预测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103763570A CN103763570A (zh) | 2014-04-30 |
CN103763570B true CN103763570B (zh) | 2017-02-01 |
Family
ID=50530718
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410024635.5A Active CN103763570B (zh) | 2014-01-20 | 2014-01-20 | 一种基于satd的hevc快速帧内预测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103763570B (zh) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10003792B2 (en) | 2013-05-27 | 2018-06-19 | Microsoft Technology Licensing, Llc | Video encoder for images |
US10136140B2 (en) | 2014-03-17 | 2018-11-20 | Microsoft Technology Licensing, Llc | Encoder-side decisions for screen content encoding |
KR101982829B1 (ko) | 2014-05-23 | 2019-05-28 | 에이치에프아이 이노베이션 인크. | 팔레트 테이블 예측 및 시그널링을 위한 방법과 장치 |
CN104023241B (zh) * | 2014-05-29 | 2017-08-04 | 华为技术有限公司 | 帧内预测编码的视频编码方法及视频编码装置 |
CN104038760B (zh) * | 2014-06-13 | 2017-03-15 | 南京理工大学 | 一种3d视频深度图像帧内楔形分割模式选择方法及系统 |
CN104023234B (zh) * | 2014-06-24 | 2017-02-22 | 华侨大学 | 一种适用于hevc的快速帧间预测方法 |
CN104125469B (zh) * | 2014-07-10 | 2017-06-06 | 中山大学 | 一种用于hevc的快速编码方法 |
CN104469360B (zh) * | 2014-12-16 | 2018-03-30 | 北京金山云网络技术有限公司 | 一种视频编码的快速模式选择方法 |
US10924743B2 (en) | 2015-02-06 | 2021-02-16 | Microsoft Technology Licensing, Llc | Skipping evaluation stages during media encoding |
US10038917B2 (en) | 2015-06-12 | 2018-07-31 | Microsoft Technology Licensing, Llc | Search strategies for intra-picture prediction modes |
US10136132B2 (en) | 2015-07-21 | 2018-11-20 | Microsoft Technology Licensing, Llc | Adaptive skip or zero block detection combined with transform size decision |
CN105208387B (zh) * | 2015-10-16 | 2018-03-13 | 浙江工业大学 | 一种hevc帧内预测模式快速选择方法 |
CN105812796B (zh) * | 2016-03-21 | 2018-10-26 | 同济大学 | 一种scc帧间编码单元备选预测模式缩减方法 |
CN106899850B (zh) * | 2017-03-02 | 2020-08-14 | 北方工业大学 | 基于satd的hevc帧内预测的方法和装置 |
CN107071474B (zh) * | 2017-04-13 | 2019-10-11 | 西安电子科技大学 | 基于satd复用的hevc帧内预测方法 |
CN109429064B (zh) * | 2017-08-22 | 2021-03-30 | 华为技术有限公司 | 一种视频数据的编解码方法、装置和介质 |
CN110446052B (zh) * | 2019-09-03 | 2021-02-12 | 南华大学 | 一种3d-hevc帧内深度图快速cu深度选择方法 |
CN110896481B (zh) * | 2019-12-31 | 2022-03-08 | 杭州当虹科技股份有限公司 | 一种适用于hevc的快速帧内模式编码方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006304107A (ja) * | 2005-04-22 | 2006-11-02 | Ntt Electornics Corp | 符号化装置、及び、この符号化装置に適用されるプログラム |
EP1832259A1 (en) * | 2005-08-31 | 2007-09-12 | Alcon, Inc | Pulse amplitude manipulation for controlling a phacoemulsification surgical system |
JP2009272701A (ja) * | 2008-04-30 | 2009-11-19 | Canon Inc | 動きベクトル探索装置及びその制御方法 |
CN102740077A (zh) * | 2012-07-04 | 2012-10-17 | 西安电子科技大学 | 基于h.264/avc标准的帧内预测模式选择方法 |
CN102843559A (zh) * | 2012-09-12 | 2012-12-26 | 清华大学 | 基于纹理特性的hevc帧内预测模式的快速选择方法及装置 |
CN102917233A (zh) * | 2012-11-14 | 2013-02-06 | 中航华东光电有限公司 | 空间遥操作环境下立体视频编码优化方法 |
CN103327325A (zh) * | 2013-05-13 | 2013-09-25 | 西安电子科技大学 | 基于hevc标准的帧内预测模式快速自适应选择方法 |
-
2014
- 2014-01-20 CN CN201410024635.5A patent/CN103763570B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006304107A (ja) * | 2005-04-22 | 2006-11-02 | Ntt Electornics Corp | 符号化装置、及び、この符号化装置に適用されるプログラム |
EP1832259A1 (en) * | 2005-08-31 | 2007-09-12 | Alcon, Inc | Pulse amplitude manipulation for controlling a phacoemulsification surgical system |
JP2009272701A (ja) * | 2008-04-30 | 2009-11-19 | Canon Inc | 動きベクトル探索装置及びその制御方法 |
CN102740077A (zh) * | 2012-07-04 | 2012-10-17 | 西安电子科技大学 | 基于h.264/avc标准的帧内预测模式选择方法 |
CN102843559A (zh) * | 2012-09-12 | 2012-12-26 | 清华大学 | 基于纹理特性的hevc帧内预测模式的快速选择方法及装置 |
CN102917233A (zh) * | 2012-11-14 | 2013-02-06 | 中航华东光电有限公司 | 空间遥操作环境下立体视频编码优化方法 |
CN103327325A (zh) * | 2013-05-13 | 2013-09-25 | 西安电子科技大学 | 基于hevc标准的帧内预测模式快速自适应选择方法 |
Non-Patent Citations (2)
Title |
---|
《Fast Block Size and Mode Decision Algorithm》;Kyungmin Lim, Seongwan Kim, Jaeho Lee, Daehyun Pak and Sangyoun;《IEEE Transactions on Consumer Electronics》;20120531;第58卷(第2期);654-660 * |
Fast CU Splitting and Pruning for Suboptimal CU Partitioning in HEVC intra Coding;Seunghyun Cho and Munchurl Kim;《IEEE transactions on circuits and systems for video technology》;20130930;第23卷(第9期);1555-1564 * |
Also Published As
Publication number | Publication date |
---|---|
CN103763570A (zh) | 2014-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103763570B (zh) | 一种基于satd的hevc快速帧内预测方法 | |
CN104081774B (zh) | 利用解码装置对视频信号进行解码的方法 | |
CN103561263B (zh) | 基于运动矢量约束和加权运动矢量的运动补偿预测方法 | |
CN103999465B (zh) | 自适应性重叠块运动补偿 | |
CN104023233B (zh) | 一种hevc快速帧间预测方法 | |
CN103004197B (zh) | 用于对图像编码的设备和方法 | |
CN104023234B (zh) | 一种适用于hevc的快速帧间预测方法 | |
CN105532007A (zh) | 在视频译码中用于非亮度分量的自适应解块滤波 | |
CN106105203A (zh) | 块自适应颜色空间转换译码 | |
CN104247434A (zh) | 在视频译码中在切片边界或平铺块边界周围的环路滤波 | |
US20190335173A1 (en) | Image encoding method/device, image decoding method/device and recording medium having bitstream stored therein | |
CN106688238A (zh) | 改进后的深度图帧内编码的参考像素点选择和滤波 | |
CN105681808A (zh) | 一种scc帧间编码单元模式的快速决策方法 | |
CN110351552B (zh) | 视频编码中一种快速编码方法 | |
CN109302616A (zh) | 一种基于rc预测的hevc帧间预测快速算法 | |
CN110365975A (zh) | 一种avs2视频编解码标准优化方案 | |
KR102575576B1 (ko) | 비디오 부호화/복호화 방법 및 장치 | |
CN103442229A (zh) | 适用于hevc标准的编码器中sao模式判决的比特率估计方法 | |
CN101895755A (zh) | 一种快速4x4块帧内预测模式选择方法 | |
CN109040756B (zh) | 一种基于hevc图像内容复杂度的快速运动估计方法 | |
CN105141953A (zh) | 一种适用于hevc的快速帧间模式选择方法 | |
CN104539954A (zh) | 一种加速hevc编码速度的级联方法 | |
Jianhua et al. | A fast intramode decision algorithm for H. 264/AVC | |
KR20130019736A (ko) | 모드 디펜던트 인트라 예측 스무딩 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |