CN105791863A - 基于层的3d-hevc深度图帧内预测编码方法 - Google Patents

基于层的3d-hevc深度图帧内预测编码方法 Download PDF

Info

Publication number
CN105791863A
CN105791863A CN201610172216.5A CN201610172216A CN105791863A CN 105791863 A CN105791863 A CN 105791863A CN 201610172216 A CN201610172216 A CN 201610172216A CN 105791863 A CN105791863 A CN 105791863A
Authority
CN
China
Prior art keywords
mode
predicting unit
frame
pattern
thresholding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610172216.5A
Other languages
English (en)
Other versions
CN105791863B (zh
Inventor
王柯俨
郭瑞雪
何刚
李云松
胡静
刘培坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidian University
Original Assignee
Xidian University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xidian University filed Critical Xidian University
Priority to CN201610172216.5A priority Critical patent/CN105791863B/zh
Publication of CN105791863A publication Critical patent/CN105791863A/zh
Application granted granted Critical
Publication of CN105791863B publication Critical patent/CN105791863B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种基于层的3D‑HEVC深度图帧内预测编码的方法,主要解决现有的技术对深度图帧内预测编码处理复杂度较高的问题。其技术方案为:1)初始化文件和门限;2)记录测试码流每个编码周期的第一帧数据;3)通过计算编码周期第一帧的命中率得到门限;4)根据门限,选择性跳过当前预测单元的粗选阶段深度模式、细选阶段或全部粗选细选阶段,完成一帧视频视频编码;5)重复步骤2)到4)遍历每帧视频,直到编码结束。本发明具有编码复杂度低、方法多样性的优点,可用于视频编码。

Description

基于层的3D-HEVC深度图帧内预测编码方法
技术领域
本发明属于高效视频压缩编码技术领域,特别涉及一种帧内预测编码方法,可用于3D视频预测编码。
背景技术
高效视频编码HEVC作为新一代的视频编码标准,在2013年由视频编码(JCT-VC,Joint Collaborative Team on Video Coding)联合制定。HEVC标准主要针对高清和超高清分辨率视频的压缩,相比于H.264/AVC标准具有优异性能,编码效率提高了一倍。预测过程在HEVC中占据着极其重要的作用。HEVC分为帧内编码和帧间编码两种。对于帧内编码,它采用的是四叉树划分结构来编码视频。最大的编码单元大小是64x64,每一个64x64的编码单元可以划分为4个32x32的编码单元,然后递归划分直至最小尺寸为8x8。对于预测单元来说,它的大小等于编码单元大小。只有当编码单元划分至8x8时,预测单元大小可以是8x8或者4x4。对于每一个预测单元,他有35种帧内模式进行预测。其中模式0是Planar,适用于均匀光滑的区域。模式1是DC,适用于渐变平滑的区域。模式2到模式34是33种角度模式。
随着3D视频技术的进步,3D行业迅速兴起。基于HEVC的3D视频编码作为HEVC标准的扩展部分,其标准已于2015年2月最终确定。3D-HEVC采用的是多视点加深度图的格式来进行3D视频编码。这仅需编码2到3个视点以及相应的深度图就可以编码3D视频。深度图的特点与普通视图截然不同,它具有光滑的大片区域和锐利的边界。3D-HEVC作为HEVC的扩展版本,其帧内编码仍延续使用HEVC的四叉树划分结构。与HEVC不同的是,3D-HEVC中深度图的预测单元是NxN,其中N最大等于32,最小等于4。为了满足深度图的特点,在原有的35种帧内模式的基础上,新加入了两种深度模式DMMs。一种是楔形划分模式DMM1,它通过边界上的像素点来确定明确的起点和终点。另外一种是廓形划分模式DMM4,它将普通视图四个角的像素平均值设置为门限,大于门限的像素点划分为一块,小于门限的像素点划分为一块,形成廓形划分。
3D-HEVC深度图每个预测单元的帧内预测编码过程分为两部分:粗选和细选。其中:
粗选计算流程:先计算每个预测单元在35种普通帧内模式下的代价值,得到粗选代价值最小的3到8种模式,将其加入最佳模式候选列表中。若当前预测单元最佳模式候选列表中最小代价值对应的模式不是模式0或该预测单元的像素值方差大于阈值,则计算当前预测单元的两种深度模式的代价值,并将其加入最佳模式候选列表中;否则跳过深度模式的计算。
细选计算流程:计算当前预测单元最佳模式候选列表中的所有模式,得到代价值最小的一种模式作为最佳模式,该代价值将作为当前预测单元的最终代价,并用以进行层级划分比较。
3D-HEVC对于层级划分采用的是递归四叉树划分结构,如图1所示。最大预测单元为32x32,允许其在编码中不断的递归划分为四个等大小的子预测单元,直到划分到最小预测单元4x4为止。其具体过程可以理解为一个深度优先搜索的迭代过程。首先对NxN(N=32)大小的预测单元进行预测编码,再确定其最佳预测模式和最终代价;其次,划分其为四个子预测单元,将N更新为N/2,并进行依次处理。在处理中,对每个子预测单元,进行预测编码和再次划分及处理,直到N等于4时停止划分。需要说明的是,每次处理完四个子模块后,需要进行比较其未划分情况下模块的最终代价和划分情况下四个子模块的最终代价,以选择最佳划分情况。
由于3D-HEVC采用的是递归四叉树划分,每个预测单元遍历37种模式,这使得预测编码复杂度很大。目前已有的降低HEVC帧内预测编码复杂度的方法大致分为两类,一类是基于层的方法,另一类是基于模式的方法。而3D-HEVC深度图预测编码不能直接使用这些方法来降低预测编码复杂度。已有的基于3D-HEVC深度图帧内预测编码的方法都是从模式的角度出发,如减少DMMs模式的计算量或者直接跳过DMMs等。这类方法降低的预测编码复杂度少,不能满足实际应用的要求。
发明内容
本发明的目的在于提出一种基于层的3D-HEVC深度图帧内预测编码的方法,以减少预测编码的复杂度,提高编码速度。
本发明的技术方案是这样实现的:
在3D-HEVC现有的参考软件HTM13.0上进行修改,以实现基于层的快速编码,即根据帧内预测编码的粗选过程中,普通帧内模式计算得到的最小代价值来判断当前层的深度模式和细选过程是否执行;根据帧内预测编码的粗选过程中,普通帧内模式计算得到的最小代价值和楔形划分模式计算得到的最小代价值来判断当前层的细选过程是否执行。根据判断粗选结果得到的最佳模式候选列表中,代价值最小的模式是否为模式0,来确定细选过程是否只计算模式0。根据细选得到的最佳代价值来判断是否做后续的几层粗选和细选。
根据上述思路,本发明的实现步骤包括如下:
(1)初始化:
创建六个空的txt文件;
创建18个门限,即帧内模式门限TEi、深度模式门限TDi、跳过深度模式门限TSi、细选门限TRi、01模式门限T0i、其他模式门限TLi;i=1、2、3,其中i=1表示大小为32x32的预测单元、i=2表示大小为16x16的预测单元、i=3表示大小为8x8的预测单元;
(2)统计测试序列的一个编码周期中第一帧视频的数据结果,该数据结果包括每个预测单元经过粗选得到的最佳模式候选列表中代价值最小的模式MI及其相应代价值JSATD,每个预测单元在楔形划分模式DMM1下的代价值JSSE,每个预测单元经过细选得到的最佳预测模式MR及其相应代价值JRD
(3)把统计得到的数据根据当前预测单元划分结果及当前预测单元的大小,分类存放在已创建的6个txt文件中;
(4)根据第一帧视频中同一大小预测单元的最佳模式候选列表中最小代价值JSATD,计算第一帧视频的粗选帧内命中率HN,当HN=75%时分别得到帧内模式门限TEi,当HN=90%时分别得到跳过深度模式门限TSi
(5)根据第一帧视频中同一大小预测单元的楔形划分模式DMM1下的代价值JSSE,计算第一帧视频的粗选深度模式命中率HD,当HD=85%时分别得到深度模式门限TDi
(6)根据第一帧视频中同一大小预测单元的细选最佳代价JRD值,计算出第一帧视频的细选命中率HR;当HR=80%时得到细选门限TR1,当HR=90%时得到细选门限TR2,当HR=99%时得到细选门限TR3
(7)根据细选的最佳模式MR的类型,设置01模式门限T01i和其他细选门限TLi:若细选的最佳模式MR为模式0或模式1时,则设01模式门限T01i为细选门限TRi,即T01i=TRi
若细选的最佳模式MR为模式2到模式38时,则根据这些模式下的同一大小预测单元细选的最佳代价JRD计算出其他模式命中率HL;HL=80%时得到其他模式门限TL1,HL=90%时得到其他模式门限TL2,HL=99%时得到其他模式门限TL3
(8)对预测单元进行粗选:
(8a)计算当前预测单元35种普通帧内预测模式的代价值,找到普通帧内预测模式的最小代价值JSATD,执行步骤(8b);
(8b)当预测单元普通帧内预测模式的最小代价JSATD大于相同大小预测单元的跳过深度模式门限TSi时,跳出当前预测单元,进入其子预测单元,返回步骤(8a);否则将35种普通帧内预测模式中代价值最小的3或8种模式加入最佳模式候选列表中,计算当前预测单元的深度模式的代价值,并记录深度模式中楔形划分模式DMM1的代价值JSSE,执行步骤(8c);
(8c)当楔形划分模式DMM1的代价值JSSE大于相同大小预测单元的深度模式门限TDi或深度预测模式不计算时,且预测单元普通帧内预测模式的最小代价JSATD大于相同大小预测单元的帧内模式门限TEi时,跳出当前预测单元,进入其子预测单元,返回步骤(8a);否则,将两个深度模式加入最佳模式候选列表中,执行步骤(9);
(9)对预测单元进行细选:
(9a)当最佳模式候选列表中代价值最小的模式MI为模式0,且没有计算当前预测单元的深度预测模式,则细选时只计算模式0作为最佳模式MR,并把其代价值作为细选最小代价JRD;否则计算最佳模式候选列表中的全部模式的代价,选出细选最小代价JRD,其对应模式为最佳模式MR,执行步骤(9b);
(9b)当细选最佳模式MR是模式0或模式1且细选最佳代价JRD小于相同大小预测单元01模式门限时,或MR>=2且JRD小于相同大小预测单元其他模式门限时,跳过其所有子预测单元的计算过程,执行步骤(9c);否则进入当前预测单元的子预测单元,返回步骤(8);
(9c)判断当前最大预测单元是否完成所有预测处理。若有,则进入下一个预测单元,返回步骤(8),若无,则进入步骤(9d);
(9d)判断当前编码帧中是否还有未编码的预测单元,若有,则设N=32并返回步骤(8a),若无,则进入步骤(10)。
(10)更新编码周期
(10a)判断编码帧周期中是否存在待编码帧,若本编码帧周期中还有待编码帧,则返回步骤8,对下一帧进行预测编码,否则执行步骤(10b);
(10b)判断所有编码帧是否全部预测编码结束,若仍有待编码帧,则返回步骤(2),进入下一个编码周期;否则结束编码。
本发明主要从预测单元提前划分和预测单元提前终止的层角度来降低编码复杂度,并同时结合了细选跳过最佳模式候选列表中的所有模式的模式角度,有效降低了编码的复杂度。仿真结果表明,本发明平均降低复杂度50%左右,且性能变化在可接受范围内,而已有的大部分方法只能降低30%左右的方法复杂度,可见本发明在复杂度的降低方面明显优于其他方法。
附图说明
图1是3D-HEVC深度图预测单元的四叉树划分结构
图2是本发明的实现流程图。
具体实施方式
参照图2,本发明的实现步骤如下:
步骤1:初始化:
创建六个空的txt文件,分别命名为s32.txt、u32.txt、s16.txt、u16.txt、s8.txt、u8.txt;
创建18个门限,即帧内模式门限TEi、深度模式门限TDi、跳过深度模式门限TSi、细选门限TRi、01模式门限T0i、其他模式门限TLi;i=1、2、3,其中i=1表示大小为32x32的预测单元、i=2表示大小为16x16的预测单元、i=3表示大小为8x8的预测单元。
步骤2:统计测试序列相关数据。
对HTM13.0代码配置allintra.cfg文件,并运行测试序列一个编码周期中第一帧视频,得到最佳模式候选列表中代价最小的模式MI及普通帧内模式最小代价值JSATD,楔形划分代价值JSSE,最佳预测模式MR,细选最小代价值JRD及最优划分;
将这些得到的数据进行如下分类存储:
把当前预测单元大小为32x32,但得到最优划分不是32x32的数据存放在第一个空文件s32.txt中;
把当前预测单元大小为32x32,且得到最优划分仍为32x32的数据存放在第二个空文件u32.txt中;
把当前预测单元大小为16x16,但得到最优划分不是16x16的数据存放在第三个空文件s16.txt中;
把当前预测单元大小为16x16,且得到最优代价的划分仍为16x16的数据存放在第四个空文件u16.txt中;
把当前预测单元大小为8x8,但得到最优划分不是8x8的数据存放在第五个空文件s8.txt中;
把当前预测单元大小为8x8,且得到最优划分仍为8x8的数据存放在第六个空文件u8.txt中。
以上这些数据用来计算本编码周期的门限,并应用于本编码周期中。
步骤3:计算粗选需要用到的门限。
3a)读取同一预测单元大小的两个txt文件,得到每个预测单元划分的普通帧内模式最小代价值JSATD和每个预测单元不划分的普通帧内模式最小代价值JSATD,计算粗选帧内命中率HE
H N = N 1 ( J S A T D > T ) N 1 ( J S A T D > T ) + N 2 ( J S A T D > T ) &times; 100 % - - - < 1 >
其中N1是指当普通帧内模式最小代价JSATD大于阈值时,一帧视频中同一大小预测单元划分的个数;N2是指当普通帧内模式最小代价JSATD大于阈值时,一帧视频中同一大小预测单元不划分的个数;
3b)读取文件s32.txt和u32.txt,根据公式<1>计算32x32粗选帧内命中率HE1;当HE1=90%时,得到预测单元大小为32x32的跳过深度模式门限TS1;当HE1=75%时,得到预测单元大小为32x32的帧内模式门限TE1
3c)读取文件s16.txt和u16.txt,根据公式<1>计算16x16粗选帧内命中率HE2;当HE2=90%时,得到预测单元大小为16x16的跳过深度模式门限TS2;当HE2=75%时,得到预测单元大小为16x16的帧内模式门限TE2
3d)读取文件s8.txt和u8.txt,根据公式<1>计算8x8粗选帧内命中率HE3;当HE3=90%时,得到预测单元大小为8x8的跳过深度模式门限TS3;当HE3=75%时,得到预测单元大小为8x8帧内模式门限TE3
3e)读取第一帧视频中同一预测单元大小的两个txt文件,得到每个预测单元划分的楔形划分代价值JSSE和每个预测单元不划分的楔形划分代价值JSSE,计算粗选深度模式命中率HD
H D = N 3 ( J S S E > T ) N 3 ( J S S E > T ) + N 4 ( J S S E > T ) &times; 100 % - - - < 2 >
其中N3是指当楔形划分代价值JSSE大于阈值时,一帧视频中同一大小预测单元划分的个数,N4是指当楔形划分代价值JSSE大于阈值时,一帧视频中同一大小预测单元不划分的个数;
3f)读取文件s32.txt和u32.txt,根据公式<2>计算32x32粗选深度模式命中率HD1;当HD1=85%时,得到预测单元大小为32x32的深度模式门限TD1
3g)读取文件s16.txt和u16.txt,根据公式<2>计算16x16粗选深度模式命中率HD2;当HD2=85%时,得到预测单元大小为16x16的深度模式门限TD2
3h)读取文件s8.txt和u8.txt,根据公式<2>计算8x8粗选深度模式命中率HD3;当HD3=85%时,得到预测单元大小为8x8的深度模式门限TD3
步骤4:计算细选门限TRi
4a)读取统一预测单元大小的两个txt文件,得到每个预测单元划分的细选最佳代价值JRD和每个预测单元不划分的细选最佳代价值JRD,计算出细选命中率HR
H R = N 6 ( J R D < T ) N 5 ( J R D < T ) + N 6 ( J R D < T ) &times; 100 % - - - < 3 >
其中N5是指当细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元划分的个数;N6是指当细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元不划分的个数;
4b)读取文件s32.txt和u32.txt,根据公式<3>计算32x32细选命中率HR1;当HR1=80%时,得到预测单元大小为32x32的细选门限TR1
4c)读取文件s16.txt和u16.txt,根据公式<3>计算16x16细选命中率HR2;当HR2=90%时,得到预测单元大小为16x16的细选门限TR2
4d)读取文件s8.txt和u8.txt,根据公式<3>计算8x8细选命中率HR3;当HR3=99%时,得到预测单元大小为8x8的细选门限TR3
步骤5:计算01模式门限T01i和其他模式门限TLi
5a)若最佳预测模式MR为模式0或模式1时,则设01模式门限T01i的值等于细选门限TRi,即T01i=TRi
5b)若最佳预测模式MR为模式2到模式38时,读取统一预测单元大小的两个txt文件,得到每个预测单元划分的细选最佳代价值JRD和每个预测单元不划分的细选最佳代价值JRD,计算其他模式命中率HL
H L = N 8 ( J R D < T ) N 7 ( J R D < T ) + N 8 ( J R D < T ) &times; 100 % - - - < 4 >
其中N7是指预测单元细选最佳模式为2到38模式时且细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元划分的个数;N8是指预测单元细选最佳模式为2到38模式时且细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元不划分的个数;
5c)读取文件s32.txt和u32.txt,根据公式<4>计算32x32其他模式命中率HL1;当HL1=80%时,得到预测单元大小为32x32的其他模式门限TL1
5d)读取文件s16.txt和u16.txt,根据公式<4>计算16x16其他模式命中率HL2;当HL2=90%时,得到预测单元大小为16x16的其他模式门限TL2
5e)读取文件s8.txt和u8.txt,根据公式<4>计算8x8其他模式命中率HL3;当HL3=99%时,得到预测单元大小为8x8的其他模式门限TL3
步骤6:对预测单元进行粗选。
6a)初始预测模块为一个编码帧周期中首个编码帧的首个最大预测单元NxN,其中N值为32。
6b)计算当前大小为NxN预测单元的35种普通帧内预测模式的代价值,将35种普通帧内预测模式中代价值最小的3或8种模式加入最佳模式候选列表中,找到普通帧内预测模式的最小代价值JSATD;若N等于4,则将预测单元在两个深度模式下的划分结果加入最佳模式候选列表中,执行步骤7;否则,执行步骤6c);
6c)当预测单元普通帧内模式最小代价JSATD大于NxN预测单元的跳过深度模式门限TSi时,跳出当前预测单元,进入其子预测单元,其子预测单元NxN,此时N变为N/2,返回步骤6b);否则计算当前预测单元的深度模式的代价值,并记录深度模式中楔形划分模式DMM1的代价值JSSE,执行步骤6d);
6d)当楔形划分模式DMM1的代价值JSSE大于NxN预测单元的深度模式门限TDi或深度预测模式不计算,且预测单元普通帧内预测模式的最小代价JSATD大于相同大小预测单元的帧内模式门限TEi时,跳出当前预测单元,进入其子预测单元,N变为N/2,返回步骤6b);否则,将两个深度模式加入最佳模式候选列表中,执行步骤7。
步骤7:对预测单元进行细选。
预测单元的细选是对最佳模式候选列表中的所有模式帧内预测后的残差计算代价,选出代价值最小的一个模式作为最佳模式,其代价值为细选最小代价,即将每个大预测单元的细选最小代价值与其四个子预测单元的细选最小代价和进行比较,选取最小的代价值作为最终代价值,对应的预测单元确定为最终划分结果:
7a)若当前预测单元最佳模式候选列表中代价值最小的模式MI为模式0,且没有计算当前预测单元的深度预测模式,则细选时只计算模式0作为最佳模式MR,并把其代价值作为细选最小代价JRD;否则计算最佳模式候选列表中的全部模式的代价,选出细选最小代价JRD,其对应模式为最佳模式MR,若N=4,执行步骤7c);否则,执行步骤7b);
7b)若当前预测单元细选最佳模式MR是模式0或模式1且细选最佳代价JRD小于相同大小预测单元01模式门限T0i时,或MR>=2且JRD小于相同大小预测单元其他模式门限TLi时,则跳过其所有子预测单元的计算过程,执行步骤7c);否则进入当前预测单元的子预测单元NxN,此时N变为N/2,返回步骤6a);
7c)判断当前大小为32x32的最大预测单元是否完成所有预测处理。若有,则下个预测单元的大小根据HTM中递归编码流程来确定,返回步骤6b),若无,则进入步骤7d)。
7d)判断当前编码帧中是否还有未编码的预测单元,若有,则设N=32并返回步骤6b),若无,则进入步骤8。
步骤8:更新编码周期。
8a)判断编码帧周期中是否存在待编码帧,若本编码帧周期中还有待编码帧,则返回步骤6,对下一帧进行预测编码,否则执行步骤8b);
8b)判断所有编码帧是否全部预测编码结束,若仍有待编码帧,则返回步骤2,进入下一个编码周期;否则结束编码。
本发明的效果可以用以下实验结果进一步说明:
1.测试条件
选择主机处理器为Intel Core 2Duo CPU,内存为4GB,系统类型为64位操作系统,测试平台是HTM13.0。
2.测试内容
在测试平台HTM13.0上,用本发明方法和现有的标准方法对多个测试序列的四组量化参数QP进行测试并进行比较,得到比较后的测试结果。其中普通视图QP=25时深度图QP=35,普通视图QP=30时深度图QP=39,普通视图的QP=35时深度图QP=42,普通视图QP=40时深度图QP=45,测试结果如表1:
表1本发明与标准方法比较后的测试结果
从表1可以看出,本发明比标准方法的深度图编码时间减少了56.32%,比总编码时间减少了50.12%,合成视频的平均性能变化BD-rate为1.42%。
测试结果表明:本发明在大幅降低了编码复杂度的同时,其性能变化能在可接受的范围内。

Claims (5)

1.基于层的3D-HEVC深度图帧内预测编码方法,是在已有的3D-HEVC软件测试平台HTM13.0的基础上修改实现,其步骤包括如下
(1)初始化:
创建六个空的txt文件;
创建18个门限,即帧内模式门限TEi、深度模式门限TDi、跳过深度模式门限TSi、细选门限TRi、01模式门限T0i、其他模式门限TLi;i=1、2、3,其中i=1表示大小为32x32的预测单元、i=2表示大小为16x16的预测单元、i=3表示大小为8x8的预测单元;
(2)统计测试序列的一个编码周期中第一帧视频的数据结果,该数据结果包括每个预测单元经过粗选得到的最佳模式候选列表中代价值最小的模式MI及其相应代价值JSATD,每个预测单元在楔形划分模式DMM1下的代价值JSSE,每个预测单元经过细选得到的最佳预测模式MR及其相应代价值JRD
(3)把统计得到的数据根据当前预测单元划分结果及当前预测单元的大小,分类存放在已创建的6个txt文件中;
(4)根据第一帧视频中同一大小预测单元的最佳模式候选列表中最小代价值JSATD,计算第一帧视频的粗选帧内命中率HN,当HN=75%时分别得到帧内模式门限TEi,当HN=90%时分别得到跳过深度模式门限TSi
(5)根据第一帧视频中同一大小预测单元的楔形划分模式DMM1下的代价值JSSE,计算第一帧视频的粗选深度模式命中率HD,当HD=85%时分别得到深度模式门限TDi
(6)根据第一帧视频中同一大小预测单元的细选最佳代价JRD值,计算出第一帧视频的细选命中率HR;当HR=80%时得到细选门限TR1,当HR=90%时得到细选门限TR2,当HR=99%时得到细选门限TR3
(7)根据细选的最佳模式MR的类型,设置01模式门限T01i和其他细选门限TLi
若细选的最佳模式MR为模式0或模式1时,则设01模式门限T01i为细选门限TRi,即T01i=TRi
若细选的最佳模式MR为模式2到模式38时,则根据这些模式下的同一大小预测单元细选的最佳代价JRD计算出其他模式命中率HL;HL=80%时得到其他模式门限TL1,HL=90%时得到其他模式门限TL2,HL=99%时得到其他模式门限TL3
(8)对预测单元进行粗选:
(8a)计算当前预测单元35种普通帧内预测模式的代价值,找到普通帧内预测模式的最小代价值JSATD,执行步骤(8b);
(8b)当预测单元普通帧内预测模式的最小代价JSATD大于相同大小预测单元的跳过深度模式门限TSi时,跳出当前预测单元,进入其子预测单元,返回步骤(8a);否则将35种普通帧内预测模式中代价值最小的3或8种模式加入最佳模式候选列表中,计算当前预测单元的深度模式的代价值,并记录深度模式中楔形划分模式DMM1的代价值JSSE,执行步骤(8c);
(8c)当楔形划分模式DMM1的代价值JSSE大于相同大小预测单元的深度模式门限TDi或深度预测模式不计算时,且预测单元普通帧内预测模式的最小代价JSATD大于相同大小预测单元的帧内模式门限TEi时,跳出当前预测单元,进入其子预测单元,返回步骤(8a);否则,将两个深度模式加入最佳模式候选列表中,执行步骤(9);
(9)对预测单元进行细选:
(9a)当最佳模式候选列表中代价值最小的模式MI为模式0,且没有计算当前预测单元的深度预测模式,则细选时只计算模式0作为最佳模式MR,并把其代价值作为细选最小代价JRD;否则计算最佳模式候选列表中的全部模式的代价,选出细选最小代价JRD,其对应模式为最佳模式MR,执行步骤(9b);
(9b)当细选最佳模式MR是模式0或模式1且细选最佳代价JRD小于相同大小预测单元01模式门限时,或MR>=2且JRD小于相同大小预测单元其他模式门限时,跳过其所有子预测单元的计算过程,执行步骤(9c);否则进入当前预测单元的子预测单元,返回步骤(8);
(9c)判断当前最大预测单元是否完成所有预测处理。若有,则进入下一个预测单元,返回步骤(8),若无,则进入步骤(9d);
(9d)判断当前编码帧中是否还有未编码的预测单元,若有,则设N=32并返回步骤(8a),若无,则进入步骤(10)。
(10)更新编码周期
(10a)判断编码帧周期中是否存在待编码帧,若本编码帧周期中还有待编码帧,则返回步骤8,对下一帧进行预测编码,否则执行步骤(10b);
(10b)判断所有编码帧是否全部预测编码结束,若仍有待编码帧,则返回步骤(2),进入下一个编码周期;否则结束编码。
2.根据权利要求1所述的基于层的3D-HEVC深度图帧内预测编码方法,其中步骤(4)中粗选帧内命中率HN,按如下公式计算:
H N = N 1 ( J S A T D > T ) N 1 ( J S A T D > T ) + N 2 ( J S A T D > T ) &times; 100 % ,
N1是指当粗选最小代价JSATD大于阈值时,一帧视频中同一大小预测单元划分的个数;N2是指当粗选最小代价JSATD大于阈值时,一帧视频中同一大小预测单元不划分的个数。
3.根据权利要求1所述的基于层的3D-HEVC深度图帧内预测编码方法,其中步骤(5)中粗选深度模式命中率HD,按如下公式计算:
H D = N 3 ( J S S E > T ) N 3 ( J S S E > T ) + N 4 ( J S S E > T ) &times; 100 % ,
N3是指当楔形划分模式代价JSSE大于阈值时,一帧视频中同一大小预测单元划分的个数;N4是指当楔形划分模式代价JSSE大于阈值时,一帧视频中同一大小预测单元不划分的个数。
4.根据权利要求1所述的基于层的3D-HEVC深度图帧内预测编码方法,其中步骤(6)中细选命中率HR,按如下公式计算:
H R = N 6 ( J R D < T ) N 5 ( J R D < T ) + N 6 ( J R D < T ) &times; 100 % ,
N5是指当细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元划分的个数;
N6是指当细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元不划分的个数。
5.根据权利要求1所述的基于层的3D-HEVC深度图帧内预测编码方法,
其中步骤(7)中其他模式命中率HL,按如下公式计算:
H L = N 8 ( J R D < T ) N 7 ( J R D < T ) + N 8 ( J R D < T ) &times; 100 % ,
N7是指预测单元细选最佳模式为2到38模式时且细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元划分的个数;N8是指预测单元细选最佳模式为2到38模式时且细选最小代价JRD小于阈值时,一帧视频中同一大小预测单元不划分的个数。
CN201610172216.5A 2016-03-24 2016-03-24 基于层的3d-hevc深度图帧内预测编码方法 Active CN105791863B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610172216.5A CN105791863B (zh) 2016-03-24 2016-03-24 基于层的3d-hevc深度图帧内预测编码方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610172216.5A CN105791863B (zh) 2016-03-24 2016-03-24 基于层的3d-hevc深度图帧内预测编码方法

Publications (2)

Publication Number Publication Date
CN105791863A true CN105791863A (zh) 2016-07-20
CN105791863B CN105791863B (zh) 2018-11-30

Family

ID=56391399

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610172216.5A Active CN105791863B (zh) 2016-03-24 2016-03-24 基于层的3d-hevc深度图帧内预测编码方法

Country Status (1)

Country Link
CN (1) CN105791863B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109600600A (zh) * 2018-10-31 2019-04-09 万维科研有限公司 涉及深度图转换的编码器、编码方法以及三层表达式的存储方法和格式
WO2019210760A1 (zh) * 2018-05-03 2019-11-07 腾讯科技(深圳)有限公司 视频编码方法、视频编码装置、电子设备及存储介质
WO2021168624A1 (zh) * 2020-02-24 2021-09-02 深圳市大疆创新科技有限公司 视频图像编码方法、设备及可移动平台

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103281541A (zh) * 2013-05-10 2013-09-04 北方工业大学 基于深度图像的帧内预测楔形分块方法
CN103686165A (zh) * 2012-09-05 2014-03-26 乐金电子(中国)研究开发中心有限公司 深度图像帧内编解码方法及视频编解码器
CN104113760A (zh) * 2013-04-19 2014-10-22 中兴通讯股份有限公司 视频编码、解码方法、视频编码、解码器及电子设备
CN104378643A (zh) * 2014-12-04 2015-02-25 南京理工大学 一种3d视频深度图像帧内预测模式选择方法及系统
US20150245061A1 (en) * 2012-07-02 2015-08-27 Qualcomm Incorporated Intra-coding of depth maps for 3d video coding

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150245061A1 (en) * 2012-07-02 2015-08-27 Qualcomm Incorporated Intra-coding of depth maps for 3d video coding
CN103686165A (zh) * 2012-09-05 2014-03-26 乐金电子(中国)研究开发中心有限公司 深度图像帧内编解码方法及视频编解码器
CN104113760A (zh) * 2013-04-19 2014-10-22 中兴通讯股份有限公司 视频编码、解码方法、视频编码、解码器及电子设备
CN103281541A (zh) * 2013-05-10 2013-09-04 北方工业大学 基于深度图像的帧内预测楔形分块方法
CN104378643A (zh) * 2014-12-04 2015-02-25 南京理工大学 一种3d视频深度图像帧内预测模式选择方法及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019210760A1 (zh) * 2018-05-03 2019-11-07 腾讯科技(深圳)有限公司 视频编码方法、视频编码装置、电子设备及存储介质
US11032552B2 (en) 2018-05-03 2021-06-08 Tencent Technology (Shenzhen) Company Limited Video encoding method, video encoding apparatus, electronic device, and storage medium
CN109600600A (zh) * 2018-10-31 2019-04-09 万维科研有限公司 涉及深度图转换的编码器、编码方法以及三层表达式的存储方法和格式
WO2021168624A1 (zh) * 2020-02-24 2021-09-02 深圳市大疆创新科技有限公司 视频图像编码方法、设备及可移动平台

Also Published As

Publication number Publication date
CN105791863B (zh) 2018-11-30

Similar Documents

Publication Publication Date Title
Tang et al. Adaptive CU split decision with pooling-variable CNN for VVC intra encoding
CN104754357B (zh) 基于卷积神经网络的帧内编码优化方法及装置
CN103873861B (zh) 一种用于hevc的编码模式选择方法
CN100551075C (zh) 一种低复杂度的帧内预测模式选择方法
CN106131546B (zh) 一种提前确定hevc合并和跳过编码模式的方法
CN101583036B (zh) 像素域视频转码中确定运动特征和高效编码模式关系的方法
CN102917225B (zh) Hevc帧内编码单元快速选择方法
CN104702958B (zh) 一种基于空间相关性的hevc帧内编码方法及系统
Hu et al. Fast HEVC intra mode decision based on logistic regression classification
CN105959699B (zh) 一种基于运动估计和时空域相关性的快速帧间预测方法
CN101969561B (zh) 一种帧内模式选取方法、装置及一种编码器
CN105120290B (zh) 一种深度视频快速编码方法
CN105898332B (zh) 针对3d-hevc编码标准的快速深度图帧内模式判决方法
CN111741297B (zh) 帧间预测方法、视频编码方法及其相关装置
Zhang et al. Fast CU decision-making algorithm based on DenseNet network for VVC
CN105791863A (zh) 基于层的3d-hevc深度图帧内预测编码方法
CN106028047A (zh) 一种基于Hadamard变换的帧内预测的快速模式选择和PU划分的方法
Mu et al. Fast coding unit depth decision for HEVC
CN103702131B (zh) 一种基于模式预处理的帧内编码优化方法和系统
CN107690069A (zh) 一种数据驱动的级联视频编码方法
CN110225339A (zh) 一种hevc视频序列编解码加速方法
CN106060555A (zh) 一种基于多核处理器的编码器
CN107547902B (zh) 面向监控视频编码的自适应率失真优化方法
CN116320436B (zh) 一种基于决策树的vvc快速编码方法
CN105282557A (zh) 一种预测运动矢量的h264快速运动估计方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant