CN104704824B - 分层去块参数适配 - Google Patents
分层去块参数适配 Download PDFInfo
- Publication number
- CN104704824B CN104704824B CN201380052309.9A CN201380052309A CN104704824B CN 104704824 B CN104704824 B CN 104704824B CN 201380052309 A CN201380052309 A CN 201380052309A CN 104704824 B CN104704824 B CN 104704824B
- Authority
- CN
- China
- Prior art keywords
- picture
- value
- depth
- parameter
- deblocking parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
基于视频序列(1)中多个图片(40)的图片在分层编码结构中(40)的深度,确定图片(40)的去块参数的值。对所确定的值编码,以形成编码值,向解码器(85,95,400,500,600,800)发送编码值以供解码期间在解码器中使用。由此实施例通过基于图片在分层编码结构中深度来确定去块参数值,降低了块伪影,否则块伪影将会在具有分层编码结构的视频序列(例如QP轮转和多层/观看视频)中发生。
Description
技术领域
本实施例一般涉及视频序列图片的编码和解码,并且具体地涉及确定与图片的编码和解码相关的去块(deblocking)参数。
背景技术
在视频编码标准中使用去块滤波来对抗块伪影(blocking artifact)。块伪影因为原始视频被分为相对独立地处理的块而出现。块伪影会出现是由于块的不同帧内预测、量化作用和运动补偿。以下描述了去块的两个特定变型。
这些说明假设垂直的块边界或边缘。对于水平的块边界也以同样的方式实现该过程。
H.264去块
在视频编码(例如H.264)的现有技术中,在预测和残余重建之后,但在存储该重建以用作对后续帧编码和解码时的后续参考之前,存在自适应去块滤波/环路滤波。去块滤波由若干步骤组成,例如滤波判定、滤波操作、剪切(clipping)功能和改变像素值。基于对若干情况的评估来做出是否对边缘进行滤波的判定,滤波判定取决于宏块(MB)类型、相邻块之间的运动矢量(MV)差异、相邻块是否具有编码残余,以及取决于当前块和/或相邻块的本地结构。
像素的滤波量取决于该像素相对于块边界的位置,且取决于用于残余编码的量化参数(QP)值。以下a到h表示跨垂直块边界的像素值。
a b c d|e f g h
滤波判定基于比较与三个阈值的三个像素差。该阈值适于QP。
如果满足了以下条件,则进行滤波:
abs(d-e)<thr1,
abs(c-d)<thr2,以及
abs(e-f)<thr2
其中thr1和thr2是QP的函数。
在H.264中存在两种滤波模式。在第一滤波模式(正常滤波)中,可用delta值来描述滤波,滤波用该delta值来改变当前像素值。对于离块边界最近的像素的滤波是:
d’=d+delta且e’=e-delta
其中,delta已经被剪切为阈值±thr3,剪切到由QP限制的值。这里d’是滤波之后的位置d处的像素值,以及e’是在位置e处滤波之后的像素值。与低QP相比,高QP支持更多的滤波。
剪切可被描述为:
delta_clipped=max(-thr3,min(thr3,delta))
其中thr3控制滤波强度。较大的thr3值意味着滤波更强,其进而意味着将发生更强的低通滤波效应。
如果还满足以下两个条件,则滤波强度可提高:
abs(b-d)<thr2且abs(e-g)<thr2
通过较少地对delta剪切(例如以支持更多的变化)来适应滤波强度。
当满足以下条件时,第二滤波模式(强滤波)仅应用于帧内宏块边界:
abs(d-e)<thr1/4.
使用QP作为索引,根据查表导出阈值thr1、thr2和thr3。每个片可包含:使用slice_beta_offset_div2对thr2和thr3的修改以及使用slice_alpha_c0_offset_div2对thr1的修改。分别在thr2/thr3和thr1的查表之前向当前QP索引添加片参数2×slice_beta_offset_div2和2×slice_alpha_c0_offset_div2。
HEVC草案中的去块
这里以下,p0至p3和q0至q3表示跨垂直块边界的像素值。
p3 p2 p1 p0|q0 q1 q2 q3
在草案HEVC规范中,去块滤波与H.264不同地工作。如果边缘侧上的至少一个块在帧内、或具有非零系数、或块的运动矢量分量之差大于或等于一个完整像素,则执行滤波。例如,如果正在对以下块A和B之间的边缘滤波,则针对要被滤波的块边界,应当满足以下条件:
dp0=|p20-2×p10+p00| (1)
dp3=|p23-2×p13+p03|
dq0=|q20-2×q10+q00|
dq3=|q23-2×q13+q03|
dpq0=dp0+dq0
dpq3=dp3+dq3
dp=dp0+dp3
dq=dq0+dq3
如下导出变量d:
d=dpq0+dpq3 (2)
如果保持以下条件,则在线i=0..3的块边界上执行去块滤波:
d<β (3)
其中β取决于量化参数。在草案HEVC规范中,存在使用Q作为表格索引来查找β的值的表(参见以下表1)。β随增加的量化参数而增加。
如果满足了以上式子(3)中的条件并且在块A和B之间完成了滤波,则执行两种类型的滤波(弱或强滤波)之一。针对每条线,根据以下条件作出强和弱滤波之间的选择。针对线i=0,3,如果以下条件为真则执行强滤波,否则执行弱滤波:
2×dpqi<(β>>2) (4)
以及(|p3i-p0i|+|q0i-q3i|)<(β>>3) (5)
以及|p0i-q0i|<((5*tC+1)>>1), (6)
其中tC和β取决于参数qP。它们的关系在表1中示出并进一步在下文示出。
表1-根据输入Q导出阈值变量β’和tC’
Q | 0 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 | 13 | 14 | 15 | 16 | 17 | 18 |
β’ | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 6 | 7 | 8 |
tC’ | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 0 | 1 |
Q | 19 | 20 | 21 | 22 | 23 | 24 | 25 | 26 | 27 | 28 | 29 | 30 | 31 | 32 | 33 | 34 | 35 | 36 | 37 |
β’ | 9 | 10 | 11 | 12 | 13 | 14 | 15 | 16 | 17 | 18 | 20 | 22 | 24 | 26 | 28 | 30 | 32 | 34 | 36 |
tC’ | 1 | 1 | 1 | 1 | 1 | 1 | 1 | 1 | 2 | 2 | 2 | 2 | 3 | 3 | 3 | 3 | 4 | 4 | 4 |
Q | 38 | 39 | 40 | 41 | 42 | 43 | 44 | 45 | 46 | 47 | 48 | 49 | 50 | 51 | 52 | 53 | 54 | 55 | 55 |
β’ | 38 | 40 | 42 | 44 | 46 | 48 | 50 | 52 | 54 | 56 | 58 | 60 | 62 | 64 | 64 | 64 | 64 | 64 | 64 |
tC’ | 5 | 5 | 6 | 6 | 7 | 8 | 9 | 9 | 10 | 10 | 11 | 11 | 12 | 12 | 13 | 13 | 14 | 14 | 14 |
基于如下导出的参数Q如表1中所规定的来确定变量β’的值:
Q=Clip3(0,51,qP+(beta_offset_div2<<1))
其中qP是平均量化参数(QP)并且beta_offset_div2是包含样本q00的片的变量beta_offset_div2的值。
如下导出变量β:
β=β’×(1<<(BitDepth-8))
基于如下导出的参数Q如表1中所规定来确定变量tc’的值:
Q=Clip3(0,53,qP+2×(bS-1)+(tc_offset_div2<<1))
其中qP是平均量化参数(QP)以及tc_offset_div2是包含样本q00的片的变量tc_offset_div2的值。参数bS是块边界的边界强度,当相邻块之一被帧内预测时参数bS取值2,以及在通过去块滤波来处理块边界的其他情况下时参数bS取值1(当bS等于值0时,不通过去块滤波处理块边界)。
如下导出变量tc:
tc=tc’×(1<<(BitDepth-8))
如以下所示,在片头或图片参数集(PPS)中发送参数beta_offset_div2和tc_offset_div2。
序列参数集RBSP语法
图片参数集RBSP语法
一般片头语法
slice_qp_delta规定要用于片中编码块的QP初始值,直至在编码单元层中由CuQpDelta的值修改。如下计算片的初始QP量化参数:SliceQP=26+pic_init_qp_minus26+slice_qp_delta
应将slice_qp_delta的值限制为使得SliceQP在-QpBdOffset至+51的范围内(包含端点)。
HEVC草案的两种滤波模式(弱滤波和强滤波)看起来像以下这样:
弱滤波
基于以上条件来执行弱滤波。实际滤波通过计算已被选择用于弱滤波的线i中的每一条的偏移(Δ)来工作。在已经被选择的条件下,针对每条线应用以下弱滤波过程。在以下算法中,为变量p0...p2和q0...q2分配以下值(从行/列i)其中p0=p0i,p1=p1i,p2=p2i,q0=q0i,q1=q1i,q2=q2i。可看出,如果执行弱滤波,则在块边界的每一侧修改1至2个像素。
其中Clip被定义为:
x’=Clip3(A,B,x),x’=x或如果x<A则x’=A或如果x>B则x’=B
以及
Clip1Y(x)=Clip3(0,(1<<BitDepthY)-1,x)
其中BitDepthY是比特深度,例如8或10。
在去块中使用剪切操作,以避免过度滤波。剪切参数tC是从表1中导出的,并取决于两个相邻块的量化参数QP的平均值,量化参数QP确定量化的粒度。剪切参数tC确定对样本值所允许的最大修改。因此,较大的tC值具有允许通过去块滤波来对样本值进行较强修改的作用,而较低的tC值降低了通过去块对所允许的样本的修改,并且因此导致了较弱的滤波。
强滤波
通过以下操作的集合来针对像素的线i执行强滤波模式,其中p0=p0i,p1=p1i,p2=p2i,q0=q0i,q1=q1i,q2=q2i:
p0’=Clip3(p0-2×tc,p0+2×tc,(p2+2×p1+2×p0+2×q0+q1+4)>>3)
p1’=Clip3(p1-2×tc,p1+2×tc,(p2+p1+p0+q0+2)>>2)
p2’=Clip3(p2-2×tc,p2+2×tc,(2×p3+3×p2+p1+p0+q0+4)>>3)
q0’=Clip3(q0-2×tc,q0+2×tc,(p1+2×p0+2×q0+2×q1+q2+4)>>3)
q1’=Clip3(q1-2×tc,q1+2×tc,(p0+q0+q1+q2+2)>>2)
q2’=Clip3(q2-2×tc,q2+2×tc,(p0+q0+q1+3×q2+2×q3+4)>>3)
量化参数(QP)控制视频信号的比特率和保真度。在混合编解码器中,QP用于量化和去量化包含预测之后的残余数据的变换系数。低QP值将得到低编码失真,但是同时将导致将耗费多个比特的多个系数。高QP将导致较少的系数,其将导致高的编码失真但是将不耗费许多比特来进行编码。
片QP规定针对片中的宏块/编码单元(CU)要使用的QP初始值。片QP用于片中的第一宏块/CU。然后,在每个宏块/CU之间发送delta QP语法元素,以改变QP值。通常,仅针对包含变换系数的宏块/CU发送delta QP。不针对不包含系数的块发送delta QP,原因在于,QP值在此时对像素重建过程没有影响。
可能发生所有delta QP值都是0的情况。在这种情况下,针对整个片中的所有块使用片QP。
众所周知,通过使用所谓的自适应QP可实现主观(subjective)视频压缩增益,在自适应QP中,量化参数(QP)在图片内改变。在区域中应用低QP与较高的QP相比将生成更多比特,但是解码失真将将更低。可在具有平滑纹理的区域使用较低QP,并且可在空间活跃性较高之处使用较高的QP。这是一个好办法,原因在于人类视觉系统将容易检测到平滑区域中的失真,而不容易注意到高纹理区域中的相同量的失真。然而,片中QP适配的范围是有限的的,并且取决于片/图片QP的初始值。
在视频编码中,通常使用分层的编码结构。分层QP编码通常使用较高的QP值来对编码层级中较高的图片/片进行编码,并且可以将分层QP编码与解码图片顺序重排一起使用或不一起使用。分层QP编码(即QP轮转(toggling))通常将导致编码视频的较高的客观和主观的质量。可通过使用较高值的QP初始值以及使用对在速率失真优化中使用的拉格朗日乘数λ的调整,来进行质量的调整。
分层编码结构的问题之一在于:以较低的质量来编码位于层级中较高层的图片/片。由于这些图片通常用初始图片QP和/或片QP的较高值来编码,因为在编码层级中深度较高的情况下使用较高的QP值并且阈值是取决于QP的,则去块阈值自动地适配于该编码结构。然而,由于降低了层级中较高层中的图片的质量,一些块伪影会仍然可见,尤其是在大变换尺寸网格上。此外,当编码在编码层级中具有较大深度的图片时在速率失真优化中使用较高的拉格朗日乘数λ值,可进一步降低这些图片的质量,并使进行去块以减弱块伪影更加困难。
发明内容
主要目的是提供视频序列的图片的有效编码和解码。
通过这里公开的实施例来满足该目的和其它目的。
实施例的一方面涉及一种由视频序列的编码器执行的方法,视频序列包括在分层编码结构中具有各自深度的多个图片。所述方法包括:针对所述视频序列的图片,基于图片在分层编码结构中的深度来确定去块参数的值。所述方法还包括:对去块参数的值编码,以形成去块参数的编码值;以及向解码器发送编码值。
实施例的相关方面定义了一种编码器,用于:针对包括多个图片的视频序列的图片,基于所述图片在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片在所述分层编码结构中具有各自的深度。编码器还用于:对所述去块参数的所述值编码,以形成所述去块参数的编码值;和向解码器发送所述编码值。
实施例的另一相关方面定义了一种编码器,包括:值确定模块,用于针对包括多个图片的视频序列的图片,基于所述图片在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片在所述分层编码结构中具有各自的深度。所述编码器还包括:值编码模块,用于对所述去块参数的所述值编码,以形成所述去块参数的编码值。所述编码器还包括:输出模块,用于向解码器发送所述编码值。
实施例的另一相关方面定义了一种包括编码装置的计算机程序,编码装置由处理器执行时使处理器:针对包括多个图片的视频序列的图片,基于所述图片在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片在所述分层编码结构中具有各自的深度。所述计算机还使处理器:对去块参数的值编码,以形成所述去块参数的编码值;以及向解码器发送编码值。
实施例的又一相关方面定义了一种计算机程序产品,包括:计算机可读代码装置和在所述计算机可读代码装置中存储的根据以上所述的计算机程序。
实施例的另一方面涉及一种由视频序列的解码器执行的方法,视频序列包括在分层编码结构中具有各自深度的多个图片。方法包括:接收去块参数的编码值;对编码值解码,以形成所述去块参数的值。所述方法还包括:针对视频序列的图片,基于去块参数的值来确定阈值参数的值,其中去块参数的值是基于图片在分层编码结构中的深度确定的。
实施例的相关方面涉及一种解码器,用于:接收去块参数的编码值,以及对编码值解码,以形成去块参数的值。解码器用于:针对包括多个图片视频序列的图片,基于所述去块参数的所述值来确定阈值参数的值,其中,所述多个图片在分层编码结构中具有各自的深度。去块参数的值是基于图片在分层编码结构中的深度来确定的。
实施例的另一相关方面涉及一种解码器,包括:输入模块,用于接收去块参数的编码值;以及值解码模块,用于对编码值解码,以形成去块参数的值。所述解码器还包括:值确定模块,用于针对包括多个图片视频序列的图片,基于所述去块参数的所述值来确定阈值参数的值,其中,所述多个图片在分层编码结构中具有各自的深度。去块参数的值是基于图片在分层编码结构中的深度来确定的。
实施例的另一相关方面包括一种包括上述编码器和/或上述解码器的用户终端,和一种在通信网络中作为网络节点或属于网络节点的网络设备。网络设备包括上述编码器和/或上述解码器。
附图说明
通过结合附图参照以下说明可最佳理解实施例,以及其的进一步的目的和优势,其中:
图1是具有分层层结构的视频序列的示例;
图2是具有分层层结构的视频序列的另一示例;
图3是视频序列的图片的示意规范;
图4是根据实施例由编码器执行的方法的流程图;
图5是示出图4中确定值的实施例的流程图;
图6是示出图4中确定值的另一实施例的流程图;
图7是根据实施例由解码器执行的方法的流程图;
图8是根据实施例的编码器的示意框图;
图9是根据另一实施例的编码器的示意框图;
图10是根据另一实施例的编码器的示意框图;
图11是根据实施例的解码器的示意框图;
图12是根据另一实施例的解码器的示意框图;
图13是根据另一实施例的解码器的示意框图;
图14是根据实施例的计算机的示意框图;
图15是根据又另一实施例的编码器的示意框图;
图16是根据又另一实施例的解码器的示意框图;
图17是根据实施例的用户终端的示意框图;以及
图18是根据实施例的网络设备的示意框图。
具体实施方式
贯穿整个附图,相同的附图标记用于相似或对应的单元。
本实施例大体上涉及对视频序列的图片的编码和解码,并且更具体地涉及确定与图片的编码和解码相关的去块参数。
根据实施例,使用分层编码结构可明显减少如现有技术中所见的块伪影。一般而言,基于图片在分层编码结构中的深度来确定图片的去块参数的值。这意味着在分层编码结构中具有不同深度的图片可以具有不同值的的其各自的去块参数。实施例的去块参数有时也称为去块偏移参数或去块参数偏移。
实施例的一方面涉及一种由视频序列的编码器执行的方法,视频序列包括在分层编码结构中具有各自的深度的多个图片。图4是示出这种方法的实施例的流程图。步骤S1包括:针对视频序列的图片,基于图片在分层编码结构中的深度来确定去块参数的值。下一步骤S2包括:对去块参数的值编码,以形成去块参数的编码值。最后,步骤S3包括向解码器发送编码值。
在分层编码结构中组织或以其他方式定义视频序列中的多个图片。如表达式指示的,分层编码结构意味着:在视频序列的图片如何编码方面存在着关系,或者图片的编码参数之间存在着关系。
典型的而非限制性的示例是根据高效率视频编码(HEVC)(也称为H.265)主简档(main profile)的视频序列。在这种示例中,通常认为视频序列的所有图片属于单个层,通常表示为层0或基础层。可在HEVC主简档中使用具有多个不同深度(这里也称为深度级)的分层编码结构。这意味着,即便认为视频序列的图片属于同一层(层0),然而图片可以具有不同的深度,并且由此属于不同的深度层。结果,视频序列中的一个或更多个图片的第一集合属于第一深度层,视频序列中的一个或更多个图片的第二集合属于第二深度层,第二深度层与第一深度层相比在分层编码结构中具有不同的深度,等等。
另一个非限制性示例是编码的视频序列的图片被组织成多个层。因此,视频序列因而是所谓的多层视频序列。图片组织为多个层可能是出于多种目的,例如实现时间可缩放性(scalability)、多视角视频(multi-view video)等。在时间可缩放性的情况下,多层视频序列通常包括所谓的基础层和一个或更多个附加层或所谓的增强层。在多视角视频(包括立体视频)中采用类似的方法,具有所谓的基本视图或层和一个或更多个具有图片的附加视图或层。可缩放视频编码可以例如根据可缩放高效视频编码(SHVC),以及多视角视频编码可以例如根据多视角高效视频编码(MV-HEVC)。
分层编码结构意味着:基于在基础层或视图中呈现的数据(例如参考图片)对基层或视图中的图片编码和解码。然而,可基于分层结构内的当前增强层或附加视图中或者较低层或视图中呈现的参考图片,来对增强层或附加视图中的图片编码和解码。
分层编码结构中的每层具有各自的深度,在图1和图2中表示为深度0至深度2。通常,基础层或视图在分层编码结构中具有最低的深度,随着在分层编码结构向上移动,增强层或附加视图具有增加的深度。
这意味着优选地,每个层在分层编码结构中具有各自的深度级。深度级可以是层数与深度级的数目之间的一一对应关系,意味着编码视频序列中的每一层具有各自的深度级,该各自的深度级具有与编码视频序列中的另一层的深度不同的相关联的深度。备选地,编码视频序列中的至少两层可以具有相同的深度,并且可以因此被视为属于分层编码结构中的相同深度层。
有时,表达式分层预测结构用于表示多层视频中的分层编码结构,以指示:基于如何能够根据分层编码结构中的相同层或较低层中的参考图片中的像素值来预测图片中的像素值,至少部分地规定或定义层级。
因此,在这些实施例中,视频序列是包括在分层编码结构中具有不同深度的多个层的多层视频序列。优选地,图4的步骤S1包括:针对多层视频序列的图片,基于多个层中该图片所属层在分层编码结构中的深度来确定去块参数的值。
分层编码结构的另一个示例是所谓的分层量化参数(QP)编码结构。因此,可以针对视频序列中的图片使用分层QP编码(在现有技术中也称为QP轮转)。这种QP轮转可与具有单层图片的视频序列或与多层视频序列一起使用。
图1表示低延迟分层结构的示例。较高深度层中的图片使用较高的初始量化参数,即QP2>QP1>QP0(或有时QP2≥QP1≥QP0)。图2示出了具有时间层和解码顺序重置的“分层B”编码结构。较高深度层中的图片使用较高的QP初始值,即QP2>QP1>QP0(或有时QP2≥QP1≥QP0)。该示例中,不同的深度还与不同的时间层相对应,例如深度0-时间层0,深度1-时间层1,以及深度2与时间层2。图1和2用箭头指示图片之间的编码和解码关系。
然而,QP轮转可单独使用,即无需分层预测结构或扁平预测结构。分层QP编码结构于是可以被视为变化的QP编码结构,其中基于图片各自的QP初始值,图片在分层QP编码结构中具有不同的“位置”或深度。因此,图片属于分层(QP)编码结构中的不同的深度级。这意味着,可向例如HEVC主简档以及向SHVC和MV-HEVC应用QP轮转。
因此,在这些实施例中,分层编码结构是分层QP编码结构。在分层QP编码结构中,视频序列的多个图片具有各自的QP初始值。图4的步骤S1于是包括:针对视频序列的图片,基于分层QP编码结构中图片的QP初始值来确定去块参数的值。
因此,在这些实施例中,图片的QP初始值与分层QP编码结构中图片的深度之间存在一一对应的关系。一般而言,分层QP编码使用较高的QP初始值来编码在编码层级中较高的图片。
在一个实施例中,利用先前提及的参数或语法元素slice_qp_delta来表示QP初始值。该语法元素规定针对图片的片中的像素块(通常称为编码单元或块)要使用的QP初始值,直至由编码单元层中的CuQpDelta值修改。图片的片的QP量化参数的初始值被计算为:SliceQP=26+pic_init_qp_minus26+slice_qp_delta。
在另一个实施例中,利用参数或语法元素pic_init_qp_minus26(有时也称为init_qp_minus26)来表示QP初始值。另一个备选是使用参数SliceQP作为初始QP值。
分层编码结构的另外的示例是所谓的分层图片质量编码结构。该示例中,以不同的图片质量来对视频序列的图片编码。通常,用较低的质量来编码层级中较高的图片。由此可以认为视频序列的图片被划分或组织为与图片质量有关的不同的组。
因此,在这些实施例中,分层编码结构是分层图片质量编码结构。多个图片具有各自的图片质量,该各自的图片质量取决于在分层图片质量编码结构中的图片组中的图片位置。于是在示例实施例中,图4的步骤S1包括:针对视频序列的图片,基于分层图片质量编码结构中图片的初始值来确定去块参数的值。
可通过使用较高的QP初始值来进行图片的图片质量的调整。因此,与具有较低初始QP的图片相比,具有较高的QP的图片通常具有较低的图片质量。备选地或附加地,可使用对在速率失真优化中使用的参数lambda(即拉格朗日乘数λ)的调整来执行图片质量的调整。因此,针对在编码层级中具有较大深度的图片使用较高的拉格朗日乘数λ值还可进一步降低这些图片的质量。
在另一个示例实施例中,图4的步骤1因此包括:针对视频序列的图片,基于分层图片质量编码结构中图片的lambda参数值(即拉格朗日乘数λ的值)来确定去块参数的值。
在这些示例实施例中,图片的QP初始值或lambda参数值(即拉格朗日乘数值λ)与分层图片质量结构编码结构中该图片的深度之间存在一一对应关系。一般而言,分层图片编码使用较高的QP初始值和/或较高的lambda参数值(即拉格朗日乘数λ的值)来编码在编码层级中具有较高值的图片。
在特定实施例中,可选地但是优选地,图4的步骤S1包括:与在分层编码结构中具有较低(即较浅或较小)深度的另一图片相比,将在分层编码结构中具有较高(或较深或较大)深度的图片的去块参数的值确定为较高。这意味着:与具有相对较低的QP初始值、较低的lambda参数值(较低的拉格朗日乘数值λ)、较低的编码层级深度和/或较低层数的图片相比,具有较高的QP初始值、较高的lambda参数值(较高的拉格朗日乘数值λ)、较高的编码层级深度和/或较高层数的图片将具有较高的去块参数值。
在另一特定实施例中,优选地,与在分层编码结构中具有较低深度的图片的去块参数值相比,在分层编码结构中具有较高深度的图片具有较高或相等的去块参数值。在该实施例的优选实现示例中,不是分层编码结构中的所有图片都具有相同的去块参数值。
因此,在该特定实施例中,可选地但是优选地,步骤S1包括:与分层编码结构中具有较低深度的另一图片相比,对于在分层编码结构中具有较高深度的图片,将去块参数的值确定为相等或较高,使得分层编码结构中不是所有图片都具有相同的去块参数值。
在实施例中,视频序列的图片不仅与一个去块参数相关联,还与第一去块参数和第二去块参相关联。图5和6是示出使用第一去块参数和第二去块参数的图4中的步骤S1的不同可选实施例的流程图。
图5的步骤S10包括:针对视频序列的图片,基于图片在分层编码结构中的深度来确定第一去块参数的值。步骤S11包括:针对图片,将第二去块参数的值确定为等于与图片在分层编码结构中的深度无关的定义值。
图6中的步骤S20与图5中的步骤S10基本相同,并且包括:针对视频序列的图片,基于图片在分层编码结构中深度来确定第一去块参数的值。然而,步骤S21与步骤S11不同,并且包括:针对图片,基于图片在分层编码结构中的深度来确定第二去块参数的值。
因此,图5中示出的实施例对于图片使用两个去块参数,其中,它们之一(即第一去块参数)是基于图片在分层编码结构中的深度来确定的。然而,另一个(即第二)去块参数不是基于图片的深度来确定的,而是等于与深度无关的定义值。第二去块参数可以例如根据参数tc_offset_div2和/或beta_offset_div2的现有技术来确定。例如,对于特定序列,第二去块参数可以(例如取决于图片的内容和/或所选主观特征)被设置为0(默认)或者设置为某一恒定值。
作为替代,图6中所示的实施例使用图片的深度来确定第一去块参数值和第二去块参数值二者。
在实施例中,可选地但是优选地,使用去块参数(该去块参数的值在图4的步骤S1中(或实际上在图5的步骤S10或图6的步骤S20或S21中)确定)来定义阈值参数的值,该阈值参数用于确定是否向图片40中的像素52的块50(见图3)应用去块滤波。备选地或附加地,去块参数可选地或优选地用于定义阈值参数的值,该阈值参数用于确定是向像素块50中的像素52、62的线44应用强去块滤波还是应用弱去块滤波。
在可应用于HEVC的实现示例中,用于确定是否向图片中的像素块应用去块滤波的阈值参数是β,参见背景技术部分中的式子(3)。因此,在该实施例中β=函数(去块参数),且其中,基于图片的深度来确定去块参数的值,以及函数()指示至少部分基于去块参数来确定阈值参数β。
在特定实施例中,阈值参数β=β’×(1<<(BitDepth-8)),其中β’是使用Q作为表格输入从表1获得的。该参数Q进而优选地定义为Q=Clip3(0,51,qP+(beta_offset_div2<<1))。因此,在该特定实施例中,去块参数优选地是变量beta_offset_div2。这意味着去块参数(beta_offset_div2)定义了阈值参数β,优选地与平均量化参数qP和比特深度参数BitDepth一起来定义。
在可应用于HEVC的实现示例中,用于确定向图片中的像素块中的像素的行应用强去块滤波还是弱去块滤波的阈值参数是β和/或tC,参见背景技术部分的式子(4)-(6)。因此,这些式子使用阈值β>>2(式子(4))、β>>3(式子(5))和(5*tC+1)>>1(式子(6))来确定应用强去块滤波还是弱去块滤波。
因此,在一个实施例中,去块参数用于定义阈值参数β的值。这基本上是如前述针对用于确定是否向像素块应用去块滤波的阈值参数一样来执行的。
在另一个实施例中,去块参数用于定义阈值参数tC的值。因此,在该实施例中tC=函数(去块参数),且其中,基于图片的深度来定义去块参数的值,以及函数()指示至少部分基于去块参数确定阈值参数tC。
在特定实施例中,阈值参数tc=tc’×(1<<(BitDepth-8)),其中tC’是使用Q作为表格输入从表1中获得的。该参数Q进而优选地定义为Q=Clip3(0,53,qP+2×(bS-1)+(tc_offset_div2<<1))。因此,在该特定实施例中,去块参数优选地是变量tc_offset_div2。这意味着去块参数(tc_offset_div2)定义了阈值参数tC,优选地与平均量化参数qP和边界强度bS一起来定义。
在另一实施例中,可选地但是优选地,其值在图4的步骤S1中(或实际上在图5的步骤S10或图6的步骤S20或S21中)确定的去块参数被用于定义剪切阈值参数的值,该剪切阈值参数被用于定义根据弱去块滤波或强去块滤波来滤波的像素值的像素值界限。。
在可应用于HEVC的实现示例中,剪切阈值参数是tC,参见背景技术中讨论弱滤波和强滤波的部分。因此,弱滤波使用剪切阈值tC且tC>>1,然而强滤波使用剪切阈值pN-2×tC和qN-2×tC,其中N=0,1,2,并且pN表示像素52的当前块50中的像素52、62的行44中的像素52(在本领域中也称为在样本)的像素值,并且qN表示像素62的相邻块60中的像素52、62的行44中的像素62的像素值。在图片40中通过水平的或者如图3所示的垂直的块边界42使像素52的块50和像素60的相邻块60彼此分离。
因此,在实施例中,去块参数用于定义剪切阈值参数tC的值。这基本上是如前述针对用于确定是应用强去块滤波还是应用弱去块滤波的阈值参数tC一样来执行的。
因此,在实施例中,图4的步骤S1中优选地包括:针对视频序列的图片,基于图片在分层编码结构中的深度来确定tc_offset_div2的值。在另一实施例中,步骤S1优选地包括:针对视频序列的图片,基于图片在分层编码结构中的深度来确定beta_offset_div2的值。
在图5的流程图中,步骤S10可以包括:针对视频序列的图片,基于图片在分层编码结构中的深度来确定beta_offset_div2的值,而步骤S11则包括:针对图片,将tc_offset_div2的值确定为等于与深度无关的定义值。
在备选方法中,步骤S10可以包括:针对视频序列的图片,基于图片在分层编码结构中的深度来确定tc_offset_div2的值,而步骤S11则包括:针对图片,将beta_offset_div2的值确定为等于与深度无关的定义值。
在图6的流程图中,步骤S20可以包括:针对视频序列的图片,基于图片在分层编码结构中的深度来确定beta_offset_div2的值,以及步骤S21则包括:针对图片,基于图片在分层编码结构中的深度来确定tc_offset_div2的值。
在特定实施例中,编码器访问去块参数的值的预定列表或表格,该预定列表或表格适合于图片在分层编码结构中的各种深度和/或深度级。在这种情况下,图4的步骤S1、图5的步骤S10和图6的步骤20和21中去块参数值的确定优选地包括:基于图片在分层编码结构中的深度或深度级,从列表或表格中识别要用于当前图片的值。
替代使用值的列表或表格,编码器可访问使用图片的深度或深度级作为输入来输出去块参数的合适值的函数。
优选地,通过生成规定去块参数值的语法元素的来执行步骤S2中的对去块参数值的编码。
这种语法元素的示例是beta_offset_div2,用有符号整数第零阶Exp-Golomb-code码来对beta_offset_div2编码。另一个示例是tc_offset_div2的语法元素,也用有符号整数第零阶Exp-Golomb-code码来对tc_offset_div2编码。
可以向图片的片头插入语法元素。备选地或附加地,可以向与图片相关联的参数集插入语法元素。
一般而言,当编码器对视频序列的图片编码时,编码器将图片划分为一个或多个(即至少两个)片。片是图片的可以独立编码和解码的部分。编码器对片编码以获得片头和编码的片数据(即视频有效载荷),片头和编码的片数据一起形成片的编码表示。编码表示通常作为所谓的网络适配层(NAL)单元从编码过程输出。备选地,NAL单元可以承载提供控制数据的参数集,该控制数据可应用于图片的所有片、序列内的所有图片或实际上完整的视频序列。这种参数集的示例包括图片参数集(PPS)、序列参数集(SPS)和视频参数集(VPS)。在这种情况下,片头包括支持识别与片相关联的参数集的信息,并且还包括可应用于片的控制数据。例如,片头可以包括标识PPS的PPS标识符。PPS进而可以包括允许标识SPS的SPS标识符,SPS标识符可以包括标识VPS的VPS标识符。
图8和图11示意性地示出了(例如以NAL单元的形式)具有片和图片的编码表示2的比特流的该概念。编码表示2包括具有PPS标识符4的片头3和视频有效载荷数据5。
在实施例中,上述语法元素可被插入图片的片头中。如果图片包括多个片,则语法元素被优选地插入多个片的每个片头中。备选地,仅在图片的第一片的片头中包括语法数据可以是足够的。
该实施例中,语法元素可以被表示为slice_beta_offset_div2和slice_tc_offset_div2,以指示在片头中存在去块参数。
在备选实施例中,语法元素可以被插入到与图片相关联和可应用于图片的参数集中,以及更确切地图片的片的参数集中。参数集可以是PPS、SPS或VPS。在前一情况下,图片的片头包括识别PPS的相应PPS标识符,PPS包括语法元素。在后一情况下,图片的片头包括识别PPS的相应PPS标识符,PPS标识符包括允许标识SPS的SPS标识符,SPS包括语法元素,或者包括允许标识SPS的SPS标识符,SPS标识符进而包括允许标识VPS的VPS标识符,VPS包括语法元素。
在这些实施例中,语法元素可以被表示为pps_beta_offset_div2和pps_tc_offset_div2,以指示在PPS中存在去块参数。
这意味着图4的步骤S3优选地包括:在片头中或参数集(优选地PPS)中向解码器发送去块参数的编码值。
在一个实施例中,提出了编码器控制,以降低分层QP编码中的伪影可见性。如下文所述,提出发送具有较高深度的图片/片的去块参数的偏移。具有较高初始图片QP/片QP值的图片/片使用去块参数值偏移,该去块参数值偏移的值大于或等于在编码层级中较低的图片/片的去块参数值。QP层级中的一些(不是全部)等级可具有相同的去块参数偏移值。
根据所描述的实施例,对用于去块的阈值参数进行调整。阈值参数考虑了由QP初始值确定的深度。阈值参数通过tc_offset_div2来例示。
根据实施例的一个方面,提供了由编码器执行的方法。在方法中,阈值参数被编码,并向解码器发送。编码器基于深度来设置阈值参数。可在PPS中或片头中发送阈值参数。
因此,提出使用较大的偏移,所述较大的偏移用在导出具有较高QP值的图片/片的去块参数中。当移动至下一QP等级时,可以改变一个或更多个去块参数的值。一个备选是一个偏移在下一初始QP等级处或者在编码层级中的较高的等级处取较高的值,而另一偏移对于所有层级等级取相同值。
另一备选是,与取低层级等级的去块参数偏移相比,针对较高层级等级处的图片或片发送的两个(或全部)去块参数取较高或相等的值。
去块参数还可以可交替地(interchangeale)增加它们的值,随着移动至下一QP等级一次一个。
一些具有不同初始图片QP值的深度层可以具有相同的一个或更多个(所全部)去块参数值。
可使用现有标准的方法来发信号通知去块参数。例如,在HEVC中,去块参数tc_offset_div2和/或beta_offset_div2用于进一步增加较高深度级和/或编码层级处的相对去块强度。
以下将进一步讨论各种示例实施方式。
示例实施例1
使用4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2。参数tc_offset_div2取决于图片在层级中的深度,取以下值。深度由初始量化参数(QP)来确定,即QP的值越高意味着深度越高,和/或可能由编码结构确定。
深度0(QP0)::tc_offset_div2=0
深度1(QP1):tc_offset_div2=2
深度2(QP2):tc_offset_div2=3
深度3(QP3):tc_offset_div2=4
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例2
使用4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2。它取决于图片在层级中的深度,取以下值。深度由初始量化参数(QP)来确定,即QP的值越高意味着深度越高,和/或可能由编码结构确定。
深度0(QP0):tc_offset_div2=0
深度1(QP1):tc_offset_div2=2
深度2(QP2):tc_offset_div2=2
深度3(QP3):tc_offset_div2=5
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例3
使用了4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2,并且参数tc_offset_div2取决于图片在层级中的深度取以下值。参数beta_offset_div2的值对于所有层级等级而言是相同的。深度由初始图片量化参数(QP)来确定,即QP的值越高对应于更高的深度,且可能由编码结构确定。
深度0(QP0):tc_offset_div2=0
beta_offset_div2=0
深度1(QP1):tc_offset_div2=2
beta_offset_div2=0
深度2(QP2):tc_offset_div2=3
beta_offset_div2=0
深度3(QP3):tc_offset_div2=4
beta_offset_div2=0
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例4
使用了4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2和beta_offset_div2,并且tc_offset_div2和beta_offset_div2取决于图片在层级中的深度取以下值。深度由初始量化参数(QP)来确定,即QP的值越高意味着深度越高,且可能由编码结构确定。
深度0(QP0):tc_offset_div2=0
beta_offset_div2=1
深度1(QP1):tc_offset_div2=2
beta_offset_div2=1
深度2(QP2):tc_offset_div2=3
beta_offset_div2=2
深度3(QP3):tc_offset_div2=4
beta_offset_div2=2
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例5
使用了4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2和beta_offset_div2,并且tc_offset_div2和beta_offset_div2取决于图片在层级中的深度取以下值。深度由初始量化参数(QP)来确定,即QP的值越高意味着深度越高,且可能由编码结构确定。
深度0:tc_offset_div2=0
beta_offset_div2=0
深度1:tc_offset_div2=3
beta_offset_div2=0
深度2:tc_offset_div2=5
beta_offset_div2=2
深度3:tc_offset_div2=6
beta_offset_div2=2
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例6
使用了4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2和beta_offset_div2,并且tc_offset_div2和beta_offset_div2取决于图片在层级中的深度取以下值。深度由初始量化参数(QP)来确定,即QP的值越高意味着深度越高,且可能由编码结构确定。
深度0:tc_offset_div2=0
beta_offset_div2=0
深度1:tc_offset_div2=3
beta_offset_div2=0
深度2:tc_offset_div2=3
beta_offset_div2=2
深度3:tc_offset_div2=4
beta_offset_div2=3
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例7
使用4个深度层,并且由编码器向解码器发信号通知参数beta_offset_div2,并且beta_offset_div2取决于图片在层级中的深度取以下值。深度由初始量化参数(QP)来确定,即QP的值越高对应于更高的深度,且可能由编码结构确定。
深度0(QP0):beta_offset_div2=0
tc_offset_div2=0
深度1(QP1):beta_offset_div2=2
tc_offset_div2=0
深度2(QP2):beta_offset_div2=3
tc_offset_div2=0
深度3(QP3):beta_offset_div2=4
tc_offset_div2=0
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例8
使用了3个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2。它取决于图片在层级中的深度,取以下值。深度由QP偏移来确定,即QP偏移的值越高意味着深度越高。参数beta_offset_div2的值对于所有层级等级而言是相同的。
深度0(QP偏移1):tc_offset_div2=1
beta_offset_div2=0
深度1(QP偏移2):tc_offset_div2=3
beta_offset_div2=0
深度2(QP偏移3):tc_offset_div2=5
beta_offset_div2=0
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例9
使用了4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2。它取决于图片在层级中的深度,取以下值。深度由QP偏移来确定,即QP偏移的值越高意味着越高的深度。参数beta_offset_div2的值对于所有层级等级而言是相同的。
深度0(QP偏移1):tc_offset_div2=1
beta_offset_div2=0
深度1(QP偏移2):tc_offset_div2=3
beta_offset_div2=0
深度2(QP偏移3):tc_offset_div2=4
beta_offset_div2=0
深度3(QP偏移4):tc_offset_div2=6
beta_offset_div2=0
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
示例实施例10
使用了4个深度层,并且由编码器向解码器发信号通知参数tc_offset_div2和beta_offset_div2。它取决于图片在层级中的深度取以下值。
深度0:tc_offset_div2=1
beta_offset_div2=0
深度1:tc_offset_div2=3
beta_offset_div2=0
深度2:tc_offset_div2=4
beta_offset_div2=1
深度3:tc_offset_div2=6
beta_offset_div2=2
可在图片参数集(PPS)中或者在与图片相对应的片的片头中发送去块参数。
上面提供的示例实施例是大致的。所提出的参数的实现可以使用不同数量的深度级,包括不同的初始图片/片QP值,和/或不同的QP偏移值。beta_offset_div2和tc_offset_div2的值还可以取决于QP值的等级,并且还可根据在速率失真优化中使用的参数lambda导出。
根据实施例的一方面,提供了由解码器执行的方法。在方法中,接收阈值参数并对阈值参数解码,并且解码器的去块滤波器使用该参数来进行去块。可在PPS中或者在片头中接收阈值参数。
图7是示出由视频序列的解码器执行的方法的流程图,视频序列包括在分层编码结构中具有各自深度的多个图片。该方法包括:在步骤S30中接收去块参数的编码值。下一步骤S31包括对编码值解码,以形成去块参数的值。以下步骤S32包括:针对视频序列的图片,基于去块参数的值确定阈值参数的值。根据该方面,基于图片在分层结构中的深度来确定去块参数的值。
这意味着不同的图片在分层编码结构中具有不同深度,优选地具有不同的去块参数值。
在一个实施例中,步骤S30包括:接收作为图片的片的编码表示中的片头的一部分的编码值。备选地,可以在步骤S30中接收作为可应用于当前图片的参数集(例如PPS)的一部分的编码值。
步骤31中对编码值的解码优选地包括:解析片头,并且对表示去块参数的语法元素进行识别和解码,以获得值。备选地,基于在片头中存在的参数集标识符来识别参数集,并对参数集中存在的语法元素进行解析和解码,以获得值。
在一个实施例中,其值在步骤S32中确定的阈值参数是用于确定是否向图片中的像素块应用去块滤波的阈值。因此,在该实施例中,如本文先前公开的,阈值参数是β。
备选地或附加地,其值在步骤S32中确定的阈值参数用于确定向像素块中的像素的行应用强去块滤波还是弱去块滤波。因此,在该实施例中,如本文先前公开的,阈值参数是β或tc。
在另一备选中,阈值参数是剪切阈值参数tC,剪切阈值参数tC用于确定如本文先前描述的根据被弱去块滤波或强去块滤波来滤波的像素值的像素值界限。
至少一个实施例的优点在于:提高了编码视频的主观和/或客观的质量。
以上所规范的步骤、功能、过程、模块和/或框可利用常规技术(例如分立电路或集合成电路技术)实现为硬件,包括通用电子电路和专用电路二者。
具体示例包括一个或多个合理配置的数字信号处理器和其他已知电子电路,例如用于执行专用功能的互连分立逻辑门或者专用集合成电路(ASIC)。
备选地,以上规范的步骤、功能、过程、模块和/或框可实现为软件,例如由包括一个或多个处理单元的适当处理电路执行的计算机程序。
处理器可执行在存储于计算机程序产品(例如存储器形式)中的计算机程序中包含的软件指令。各计算机程序产品可以是作为读写存储器(RAM)和只读存储器(ROM)的任意组合的存储器。各存储器包括永久存储器,例如可以是磁存储器、光存储器、固态存储器或者甚至远程安装存储器中的任一个或组合。
因此,上文提出示出的流程图可认为是一个或多个处理器执行时的计算机流程图。对应的装置可定义为功能模块的组,其中由处理器执行的每一个步骤对应于一个功能模块。在这种情形中,功能模块实现为在处理器上运行的计算机程序。
处理电路的示例包括但不限于,一个或多个微处理器、一个或多个数字信号处理器(DSP)、一个或多个中央处理单元(CPU)、视频加速硬件、和/或任意合适的可编程逻辑电路,例如一个或多个现场可编程门阵列(FPGA)或者一个或多个可编程逻辑控制器(PLC)。
应当理解,可重用实现了所提出技术的任意常规设备或单元的通用处理能力。还可重用已有软件,例如通过重编程已有软件或通过增加新的软件组件。
根据实施例的一方面,提供了编码器。编码器被配置为:设置阈值参数(即去块参数),基于深度来对阈值参数(即,去块参数)编码,以及发送阈值参数(即去块参数)。
因此,实施例的一方面涉及编码器。编码器用于:针对包括多个图片的视频序列的图片,基于图片在分层编码结构中的深度来确定去块参数的值,其中,该多个图片在分层编码结构中具有各自的深度。编码器还用于:对去块参数的值编码,以形成去块参数的编码值。编码器还用于:向解码器发送编码值。
在一个实施例中,编码器100包括处理器110,处理器110被配置为执行这里先前面描述的方法步骤,参见图8。编码器100还可以包括与处理器110相连的存储器120。
因此,在实现示例中,编码器100包括处理器110和存储器120。处理器110于是可用于或配置为或适于:针对图片,基于图片在分层编码结构中的深度来确定去块参数的值。处理器110还用于对去块参数的值编码,以形成去块参数的编码值。处理器110还用于向解码器发送编码值。
图8中,编码器100被示为包括处理器110。该处理器110可实现为例如处理电路形式的单个处理器或多个处理器。
因而,图8示出了编码器100的计算机实现。在这个特定示例中,上述步骤、功能、过程、模块和/或框的至少一部分实现在计算机程序中,计算机程序加载到存储器120中用于由处理器110执行。处理器110和存储器120彼此互联,实现常规软件执行。可选的输入/输出(未示出)还可与处理器110和/或存储器120互连,实现相关数据的输入和输出。
术语“计算机”应当在一般意义上解释为可执行程序代码或计算机程序指令以执行特定处理、确定或计算任务的任意系统或设备。
在一个实施例中,分层编码结构是分层QP编码结构。因此,多个图片在分层QP编码结构中具有各自的QP初始值。处理器110于是用于:针对视频序列的图片,基于图片在分层QP编码结构中的QP初始值来确定去块参数的值。
在一个实施例中,视频序列是包括在分层编码结构中具有不同深度的多个层的多层视频序列。处理器110于是用于:针对多层视频序列的图片,基于多个层中图片所属层在分层编码结构中的深度来确定去块参数的值。
在一个实施例中,分层编码结构是分层图片质量编码结构。多个图片在分层图片质量编码结构中具有各自的图片质量,所述图片质量取决于在一组图片中的图片位置。处理器110于是用于:针对视频序列的图片,基于图片在分层图片质量编码结构中的QP初始值或参数lambda(拉格朗日乘数λ)来确定去块参数的值。
在特定实施例中,处理器110优选地用于:与在分层编码结构中具有较低深度的另一图片相比,对于在分层编码结构中具有较高深度的图片,将去块参数的值确定为较高。
备选地,在另一特定实施例中,处理器110用于:与分层编码结构中具有较低深度的另一图片相比,对于在分层编码结构中具有较高深度的图片,将去块参数的值确定为相等或较高,使得分层编码结构中不是所有图片的去块参数都具有相同值。
如果图片如先前描述与第一去块参数和第二去块参数相关联,则处理器110优选地用于:针对图片,基于图片在分层编码结构中的深度来确定第一去块参数的值。处理器还用于:针对图片,将第二去块参数的值确定为等于与深度无关的定义值(例如0)。备选地,处理器110用于:针对图片,基于图片在分层编码结构中的深度来确定第二去块参数的值。
在一个实施例中,处理器110用于:针对图片,基于图片在分层编码结构中的深度来确定tc_offset_div2、slice_tc_offset_div2和pps_tc_offset_div2中至少一个的值。在另一实施例中,处理器110用于:针对图片,基于图片在分层编码结构中的深度来确定beta_offset_div2、slice_beta_offset_div2和pps_beta_offset_div2中至少一个的值。在又一实施例中,处理器110用于:针对图片,基于图片在分层编码结构中的深度来确定tc_offset_div2、slice_tc_offset_div2和pps_tc_offset_div2中至少一个的值以及beta_offset_div2、slice_beta_offset_div2和pps_beta_offset_div2中至少一个的值。
处理器110还优选地用于:向解码器发送编码值,例如片头的一部分或参数(优选地PPS)的一部分。处理器110然后用于:向输出单元(未示出)转发包括片头或PPS的NAL单元,输出单元向解码器发送具有去块参数的编码值的NAL单元。
图9是编码器200的另一实现示例的示意框图。该示例对于编码器200的硬件实现尤其合适。编码器200于是包括值确定单元210,值确定单元210用于:针对视频序列的图片,基于图片在分层编码结构中的深度来确定去块参数的值。编码器200还包括与值确定单元210相连的值编码器220。该值编码器220用于:对去块参数的值编码,以形成去块参数的编码值。输出单元230优选地与值编码器220相连,并且用于:向解码器发送去块参数的编码值。
在一个实施例中,值确定单元210输出所确定的、输入到值编码器220的去块参数。值编码器220进而输出向输出单元230输入的去块参数的编码值。
如上述规定的,编码器可以备选地被定义为功能模块组,其中功能模块被实现为在处理器上运行的计算机程序。
图8是示出包括处理器110和相关联的存储器120在内的编码器100的示例的示意框图。
因而,驻留在存储器120中的计算机程序可被组织为合适的功能模块,这些功能模块被配置为当由处理器110执行时,执行上述步骤和/或任务的至少一部分。图10示出了这些功能模块的示例。由此,图10是示出包括功能模块310、320、330的组的编码器300的示例的示意框图。这些模块包括,值确定单元310用于:针对包括多个图片的视频序列的图片,基于图片在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片在分层编码结构中具有各自的深度。编码器300还包括值编码模块320,其用于对去块参数的值编码,以形成去块参数的编码值。编码器300还包括输出模块330,用于向解码器发送编码值。
在一个实施例中,值确定模块310输出所确定的、向值编码模块320输入的去块参数。值编码模块320进而输出向输出模块330输入的去块参数的编码值。
以下,将参照附图14描述计算机实现的示例。计算机70包括处理器72和在附图中通过计算机程序产品73表示的计算机程序产品。处理器72与计算机程序产品73彼此互联,以支持正常的软件运行。可选的输入/输出(I/O)单元71可以与处理器72互联。
特定实施例中,计算机程序74包括程序代码,程序代码当由处理器或计算机70执行时使处理器72或计算机70:针对包括多个图片的视频序列的图片,基于图片在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片在分层编码结构中具有各自的深度。处理器72或计算机70还对去块参数的值编码,以形成去块参数的编码值,并向解码器发送编码值。
软件或计算机程序74可实现为计算机程序产品73,其通常携带于或存储在计算机可读介质上。计算机可读介质可包括一个或多个可移除或不可移除的存储设备,包括但不限于ROM、RAM、紧致盘(CD)、数字多用途盘(DVD)、通用串行总线存储器(USB)、硬盘驱动(HDD)存储设备、闪存、或者任意其他常规存储设备。因而,计算机程序74可加载到计算机70或等效的处理设备的操作存储器中,由其处理器72来执行。
计算机70或处理器72不必专用于仅执行上述步骤、功能、过程和/或块,还可以执行其他任务。
根据实施例的方面,提供了解码器。解码器被配置为接收阈值参数,和对阈值参数解码。因此,在实施例中,解码器用于:接收去块参数的编码值。解码器还用于对编码值解码,以形成去块参数的值。解码器还用于:针对包括多个图片视频序列的图片,基于去块参数的值来确定阈值参数的值,其中,所述多个图片在分层编码结构中具有各自的深度,去块参数的值是基于图片在分层编码结构中的深度来确定的。
解码器400可被实现为被配置为执行方法步骤的处理器410,参见图11。解码器400还可以包括存储器420。处理器410然后用于接收去块参数的编码值,并对编码值进行解码,以形成去块参数的值。处理器410还用于:针对视频序列的图片,基于去块参数的值来确定阈值参数的值。
图12是解码器500的硬件实现的示意框图。解码器500于是包括输入单元510,其用于接收去块参数的编码值。值解码器520与输入单元510相连,并用于对编码值解码,以形成去块参数的值。解码器500还包括与值解码器520相连的值确定单元530。值确定单元530用于:针对视频序列的图片,基于去块参数的值来确定阈值参数的值。
在实施例中,输入单元510输出向值解码器520输入的编码值。值解码器520进而输出向值确定530单元输入的去块参数的值。
图13是编码器600的另一实现示例的示意框图。解码器600包括用于接收去块参数的编码值的输入模块610。解码器600还包括用于对编码值解码以形成去块参数的值的解码模块620。解码器600附加地包括值确定模块630,值确定模块630用于:针对包括多个图片视频序列的图片,基于去块参数的值来确定阈值参数的值,其中,多个图片在分层编码结构中具有各自的深度。去块参数的值是基于图片在分层编码结构中的深度来确定的。
在实施例中,输入模块610输出向值解码模块620输入的编码值。值解码模块620进而输出向值确定模块630输入的去块参数的值。
图15是根据实施例的用于对视频序列的图片编码的编码器700的示意框图。
通过根据在同一图片或前一已编码且解码的图片中已经提供的像素块来执行运动估计711,预测当前的像素块,其中,该前一已编码且解码的图片是从解码图片缓冲器(DPB)709中获得的。在帧间预测的情况下,运动估计的结果是与参考块相关联的运动矢量。在运动补偿711中使用运动矢量,以输出像素块的帧间预测。
帧内预测710计算当前像素块的帧内预测。运动估计器/补偿711和帧内预测710的输出被输入到选择器712中,选择器712针对当前像素块选择帧内预测或者帧间预测。选择器712通常选择将导致与速率失真度量有关的最佳结果的预测:J=D+λR,其中D表示失真并且表示帧内预测或帧间预测与原始像素块的的偏差。偏差通常被测量为帧内预测或帧间预测的像素值与原始像素块的像素值之间的均方误差。λ是拉格朗日乘数,并且R表示对具有帧内预测或帧间预测的像素块进行表示的比特成本。
选择器712的输出被以加法器701的形式输入到误差计算器中,加法器701还接收当前像素块的像素值。加法器41计算并输出残差,作为像素块与它所选预测之间的像素值差。
对误差进行变换702(例如通过离散余弦变换)和量化703,然后在熵编码器704中编码。在帧间编码中,也将所估计的运动矢量引入熵编码器704,以生成当前像素块的编码表示。
还对当前像素块的已变换的和已量化的残差进行反量化705和反变换706,以获得原始残差。通过加法器707将该误差与选择器712的预测输出相加,以创建可在下一个像素块的预测和编码中使用的参考像素块。该新参考块首先经受去块滤波708以对抗块伪影。然后在DPB 709中临时存储滤波后的参考块,在DPB 709中,该滤波后的参考块可用于以后像素块的帧内预测710和运动估计/补偿。
去块滤波708使用如这里公开的基于图片在分层编码结构中的深度来确定的去块滤波偏移。
图16是解码器800的对应示意框图。解码器800包括熵解码器801,用于对像素块的编码表示进行解码,以得到一组量化的和变换后的残差。这些残差被进行反量化802和反变换803,以得到一组残差。
这些残差在加法器804中与参考像素块的像素值相加。该参考块是取决于执行帧内预测还是帧间预测,在运动估计/补偿808或帧间预测807中确定的。选择器809因此与加法器804和运动估计/补偿808和帧间预测807互联。来自加法器804的所得到的像素块经受去块滤波805,以对抗任意的块伪影。
去块滤波805使用如这里所使用的基于图片在分层编码结构中深度来定义的去块滤波偏移。
滤波后的像素块从解码器800输出,并且此外优选地临时地提供给DPB 806,并且可用作要解码的后续像素块的参考像素块。因此连接DPB 806,以使所存储的像素块可用于运动估计/补偿808。
加法器804的输出可选地还向帧内预测807输入,以用作未滤波的参考像素块。备选地,DPB 806可以与帧间预测807相连。
在图15和图16中公开的实施例中,去块滤波是所谓的环内路(in-loop)滤波形式。在备选实现中,在解码器800处根据所谓的后处理滤波来执行去块滤波。在这种情况下,对在由加法器804、DPB 806、帧内预测807、运动估计/补偿808和选择器809形成的环路之外的输出图片进行去块滤波操作。
编码器和解码器可以是例如在移动终端中实现的HEVC编码器和解码器。然而,应当注意的是,实施例不限于HEVC,还可以应用于HEVC的任何扩展,例如可缩放扩展或多视角扩展,或应用于不同的视频编解码器,例如SHVC或MV-HEVC。
例如,编码器可以位于例如移动设备或任何用于对视频流转码的设备中的摄像机中的发射机中。例如,解码器可以位于摄像机或任何其他用于显示视频流的设备中的接收机中。
图17是用户终端80的示意框图,根据实施例表示为移动设备或电话。
用户终端80可以是具有视频编码和/或解码功能的任意设备。这种用户终端的非限制性示例包括:移动电话和其他便携媒体播放器、平板电脑、台式计算机、笔记本电脑、个人录像机、多媒体播放器、视频流服务器、机顶盒、电视、计算机、解码器、游戏控制杆、摄像机等。用户终端80包括存储器82,存储器82被配置为存储视频序列的图片和/或编码的视频序列的图片。这些编码图片可能已经有用户终端80本身生成,例如通过与存储器82相连的编码器84。备选地,利用一些其他设备生成编码图片,并向用户终端80无线地或有线地传输。用户终端80于是包括收发机(发射机和接收机)或输入和输出单元81,以实现数据传送。
图17中,用户终端80被示为包括解码器85和媒体播放器83,其中解码器85被实现为媒体播放器83的一部分。然而,应当认为,这仅是用户终端80的实现实施例的说明性而非限制性示例。还可以有分布式的实现,其中解码器85和媒体播放器83可提供在物理上分离的设备之中,并且都在本文使用的用户终端80的范围之内。用于显示解码的视频数据的显示器86还可以被提供为与用户终端30相连或实际上构建用户终端80的一部分的单独设备。
图17的用户终端80已经被示出为包括编码器84和解码器85二者。然而,这应当仅被视为说明性示例。在其他实施例中,用户终端80不包括任何编码器84,或者不包括任何解码器85。在后一情况下,还可以省略用户用户终端80的显示器86和媒体播放器83。
因此,实施例涉及用户终端80的方面包括:根据实施例所述的编码器84和/或根据实施例所述的解码器85。
实施例应用于在比特流上操作的编码器、解码器和任何单元,例如包括编码器和/或解码器的网络节点或媒体感知网络单元。
图18示出了是通信网络96中的网络节点91或属于通信网络96中的网络节点91的网络设备,例如无线、基于无线电的通信网络。网络设备90包括根据实施例所述的编码器94和/或根据实施例的解码器95。
网络设备90可以是将根据一个视频编码标准的设备转换为另一视频编码标准的设备,例如,如果已经建立了接收用户终端93仅支持另一种视频编码标准或与从发送用户终端94发送的视频编码标准相比优选另一视频编码标准。网络设备90可以采用或者包括在通信网络96(例如基于无线电的网络)中的无线电基站、节点B或任何其他网络节点。
上述实施例将理解为本发明的一些规范性示例。本领域的技术人员将要理解的是,可对实施例做出各种修改、组合和改变,而不脱离本发明的范围。具体来说,在技术上可行时,不同实施例的不同部分方案可用其他配置来组合。然而,本发明的范围由随附权利要求界定。
Claims (33)
1.一种由用于视频序列(1)的编码器(84,94,100,200,300,700)执行的方法,所述视频序列(1)包括在分层编码结构中具有各自深度的多个图片(40),所述方法包括:
针对所述视频序列(1)的图片(40),基于所述图片(40)在所述分层编码结构中的深度来确定(S1)去块参数的值;
对所述去块参数的所述值进行编码(S2),以形成所述去块参数的编码值;以及
向解码器(85,95,400,500,600,800)发送(S3)所述编码值。
2.根据权利要求1所述的方法,其中
所述分层编码结构是分层量化参数“QP”编码结构,所述多个图片(40)在所述分层QP编码结构中具有各自的QP初始值,以及
确定(S1)所述值包括:针对所述视频序列(1)的所述图片(40),基于所述图片(40)在所述分层QP编码结构中的QP初始值来确定(S1)所述去块参数的所述值。
3.根据权利要求1所述的方法,其中
所述视频序列(1)是包括在所述分层编码结构中具有不同深度的多个层的多层视频序列,以及
确定(S1)所述值包括:针对所述多层视频序列(1)的所述图片(40),基于所述多个层中所述图片(40)所属的层在所述分层编码结构中的深度来确定(S1)所述去块参数的所述值。
4.根据权利要求1所述的方法,其中
所述分层编码结构是分层图片质量编码结构,所述多个图片(40)在所述分层图片质量编码结构中具有各自的图片质量,所述图片质量取决于在一组图片中的图片位置,以及
确定(S1)所述值包括:针对所述视频序列(1)的所述图片(40),基于所述图片(40)在所述分层图片质量编码结构中的QP初始值或拉格朗日乘数λ来确定(S1)所述去块参数的所述值。
5.根据权利要求1至4中任一项所述的方法,其中,确定(S1)所述值包括:与在所述分层编码结构中具有较低深度的另一图片相比,对于在所述分层编码结构中具有较高深度的图片(40),将所述去块参数的所述值确定(S1)为较高。
6.根据权利要求1至4中任一项所述的方法,其中,确定(S1)所述值包括:与在所述分层编码结构中具有较低深度的另一图片相比,对于在所述分层编码结构中具有较高深度的图片(40),将所述去块参数的所述值确定(S1)为相等或较高,使得所述分层编码结构中不是所有图片(40)的所述去块参数都具有相同值。
7.根据权利要求1至4中任一项所述的方法,其中,所述图片(40)与第一去块参数和第二去块参数相关联,以及确定(S1)所述值包括:
针对所述图片(40),基于所述深度来确定(S10)所述第一去块参数的值;以及
针对所述图片(40),将所述第二去块参数的值确定(S11)为等于与所述深度无关的定义值。
8.根据权利要求1至4中任一项所述的方法,其中,所述图片(40)与第一去块参数和第二去块参数相关联,以及确定(S1)所述值包括:
针对所述图片(40),基于所述深度来确定(S20)所述第一去块参数的值;以及
针对所述图片(40),基于所述深度来确定(S20)所述第二去块参数的值。
9.根据权利要求1至4中任一项所述的方法,其中,所述去块参数的所述值被用于定义阈值参数的值,所述阈值参数被用于确定:是否向所述图片(40)中的像素(52)的块(50)应用去块滤波,和/或是向在所述像素(52)的所述块(50)中的像素(52,62)的线(44)应用强去块滤波还是弱去块滤波。
10.根据权利要求1至4中任一项所述的方法,其中,所述去块参数的所述值被用于定义剪切阈值参数的值,所述剪切阈值参数被用于定义根据弱去块滤波或强去块滤波来滤波的像素值的像素值界限。
11.根据权利要求1至4中任一项所述的方法,其中,确定(S1)所述值包括:针对所述图片(40),基于所述深度来确定(S1)tc_offset_div2、slice_tc_offset_div2和pps_tc_offset_div2中至少一个的值。
12.根据权利要求1至4中任一项所述的方法,其中,确定(S1)所述值包括:针对所述图片(40),基于所述深度来确定(S1)beta_offset_div2、slice_beta_offset_div2和pps_beta_offset_div2中至少一个的值。
13.根据权利要求1至4中任一项所述的方法,其中,发送(S3)所述编码值包括:在图片参数集(4)或片头(3)中向所述解码器发送(S3)所述编码值。
14.一种由用于视频序列(1)的解码器(85,95,400,500,600,800)执行的方法,视频序列(1)包括在分层编码结构中具有各自深度的多个图片(40),所述方法包括:
接收(S30)去块参数的编码值;
对所述编码值进行解码(S31),以形成所述去块参数的值;以及
针对所述视频序列(1)的图片(40),基于所述去块参数的所述值来确定(S32)阈值参数的值,其中所述去块参数的所述值是基于所述图片(40)在所述分层编码结构中的深度确定的。
15.一种编码器(100,200),用于:
针对包括多个图片(40)的视频序列(1)的图片(40),基于所述图片(40)在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片(40)在所述分层编码结构中具有各自的深度;
对所述去块参数的所述值进行编码,以形成所述去块参数的编码值;以及
向解码器(85,95,400,500,600,800)发送所述编码值。
16.根据权利要求15所述的编码器,还包括:
处理器(110);以及
存储器(120),其中,所述处理器(110)用于:
针对所述视频序列(1)的所述图片(40),基于所述图片(40)在所述分层编码结构中的所述深度来确定所述去块参数的值;
对所述去块参数的所述值进行编码,以形成所述去块参数的所述编码值;以及
向所述解码器(85,95,400,500,600,800)发送所述编码值。
17.根据权利要求16所述的编码器,其中
所述分层编码结构是分层量化参数“QP”编码结构,所述多个图片(40)在所述分层QP编码结构中具有各自的QP初始值,以及
所述处理器(110)用于:针对所述视频序列(1)的所述图片(40),基于所述图片(40)在所述分层QP编码结构中的QP初始值来确定所述去块参数的所述值。
18.根据权利要求16所述的编码器,其中
所述视频序列(1)是包括在所述分层编码结构中具有不同深度的多个层的多层视频序列,以及
所述处理器(110)用于:针对所述多层视频序列(1)的所述图片(40),基于所述多个层中所述图片(40)所属的层在所述分层编码结构中的深度来确定所述去块参数的所述值。
19.根据权利要求16所述的编码器,其中
所述分层编码结构是分层图片质量编码结构,所述多个图片(40)在所述分层图片质量编码结构中具有各自的图片质量,所述图片质量取决于在一组图片中的图片位置,以及
所述处理器(110)用于:针对所述视频序列(1)的所述图片(40),基于所述图片(40)在所述分层图片质量编码结构中的QP初始值或拉格朗日乘数λ来确定所述去块参数的所述值。
20.根据权利要求16至19中任一项所述的编码器,其中,所述处理器(110)用于:与在所述分层编码结构中具有较低深度的另一图片相比,对于在所述分层编码结构中具有较高深度的图片(40),将所述去块参数的所述值确定为较高。
21.根据权利要求16至19中任一项所述的编码器,其中,所述处理器(110)用于:与所述分层编码结构中具有较低深度的另一图片相比,对于在所述分层编码结构中具有较高深度的图片(40),将所述去块参数的所述值确定为相等或较高,使得所述分层编码结构中不是所有图片(40)的所述去块参数都具有相同值。
22.根据权利要求16至19中任一项所述的编码器,其中,所述图片(40)与第一去块参数和第二去块参数相关联,以及所述处理器(110)用于:
针对所述图片(40),基于所述深度来确定所述第一去块参数的值;以及
针对所述图片(40),将所述第二去块参数的值确定为等于与所述深度无关的定义值。
23.根据权利要求16至19中任一项所述的编码器,其中,所述图片(40)与第一去块参数和第二去块参数相关联,以及所述处理器(110)用于:
针对所述图片(40),基于所述深度来确定所述第一去块参数的值;以及
针对所述图片(40),基于所述深度来确定所述第二去块参数的值。
24.根据权利要求16至19中任一项所述编码器,其中,所述处理器(110)用于:针对所述图片(40),基于所述深度来确定tc_offset_div2、slice_tc_offset_div2和pps_tc_offset_div2中至少一个的值。
25.根据权利要求16至19中任一项所述的编码器,其中,所述处理器(110)用于:针对所述图片(40),基于所述深度来确定beta_offset_div2、slice_beta_offset_div2和pps_beta_offset_div2中至少一个的值。
26.根据权利要求16至19中任一项所述的编码器,其中,所述处理器(110)用于:在图片参数集(4)或片头(3)中向所述解码器发送所述编码值。
27.根据权利要求15所述的编码器,还包括:
值确定单元(210),所述值确定单元(210)用于:针对所述视频序列(1)的所述图片(40),基于所述图片(40)在所述分层编码结构中的所述深度来确定所述去块参数的所述值;
值编码器(220),所述值编码器(220)与所述值确定单元(210)相连,并且用于对所述去块参数的所述值进行编码,以形成所述去块参数的所述编码值;以及
输出单元(230),所述输出单元(230)与所述值编码器(220)相连,并且用于向所述解码器(85,95,400,500,600,800)发送所述编码值。
28.一种编码器(300),包括:
值确定模块(310),所述值确定模块(310)用于:针对包括多个图片(40)的视频序列(1)的图片(40),基于所述图片(40)在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片(40)在所述分层编码结构中具有各自的深度;
值编码模块(320),所述值编码模块(320)用于对所述去块参数的所述值进行编码,以形成所述去块参数的编码值;以及
输出模块(330),所述输出模块(330)用于向解码器(85,95,400,500,600,800)发送所述编码值。
29.一种解码器(85,95,400,500),用于:
接收去块参数的编码值;
对所述编码值进行解码,以形成所述去块参数的值;以及
针对包括多个图片(40)视频序列(1)的图片(40),基于所述去块参数的所述值来确定阈值参数的值,其中,所述多个图片(40)在分层编码结构中具有各自的深度,所述去块参数的所述值是基于所述图片(40)在所述分层编码结构中的深度来确定的。
30.一种解码器(600),包括:
输入模块(610),所述输入模块(610)用于接收去块参数的编码值;
值解码模块(620),所述值解码模块(620)用于对所述编码值进行解码,以形成所述去块参数的值;以及
值确定模块(630),所述值确定模块(630)用于:针对包括多个图片(40)视频序列(1)的图片(40),基于所述去块参数的所述值来确定阈值参数的值,其中,所述多个图片(40)在分层编码结构中具有各自的深度,所述去块参数的所述值是基于所述图片(40)在所述分层编码结构中的深度来确定的。
31.一种用户终端(80),包括:根据权利要求15至28中任一项所述的编码器(84)和/或根据权利要求29或30所述的解码器(85)。
32.一种网络设备(90),所述网络设备(90)作为或属于通信网络(96)中的网络节点(91),所述网络设备(90)包括根据权利要求15至28中任一项所述的编码器(94)和/或根据权利要求29或30所述的解码器(95)。
33.一种计算机可读介质,所述计算机可读介质存储有计算机程序,所述计算机程序在由处理器执行时使所述处理器:
针对包括多个图片(40)的视频序列(1)的图片(40),基于所述图片(40)在分层编码结构中的深度来确定去块参数的值,其中,所述多个图片(40)在所述分层编码结构中具有各自的深度;
对所述去块参数的所述值进行编码,以形成所述去块参数的编码值;以及
向解码器(85,95,400,500,600,800)发送所述编码值。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261709542P | 2012-10-04 | 2012-10-04 | |
US61/709,542 | 2012-10-04 | ||
PCT/SE2013/051147 WO2014055020A1 (en) | 2012-10-04 | 2013-10-02 | Hierarchical deblocking parameter adaptation |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104704824A CN104704824A (zh) | 2015-06-10 |
CN104704824B true CN104704824B (zh) | 2018-05-11 |
Family
ID=49447789
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380052309.9A Expired - Fee Related CN104704824B (zh) | 2012-10-04 | 2013-10-02 | 分层去块参数适配 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10244265B2 (zh) |
EP (1) | EP2904792B1 (zh) |
CN (1) | CN104704824B (zh) |
WO (1) | WO2014055020A1 (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10284840B2 (en) * | 2013-06-28 | 2019-05-07 | Electronics And Telecommunications Research Institute | Apparatus and method for reproducing 3D image |
WO2016172361A1 (en) * | 2015-04-21 | 2016-10-27 | Vid Scale, Inc. | High dynamic range video coding |
CN108141599B (zh) * | 2015-09-23 | 2022-01-18 | 杜比实验室特许公司 | 在视频编解码器中保留纹理/噪声一致性 |
US10602111B2 (en) | 2016-09-06 | 2020-03-24 | Apple Inc. | Auto white balance control algorithm based upon flicker frequency detection |
US20180091812A1 (en) * | 2016-09-23 | 2018-03-29 | Apple Inc. | Video compression system providing selection of deblocking filters parameters based on bit-depth of video data |
US20200120359A1 (en) * | 2017-04-11 | 2020-04-16 | Vid Scale, Inc. | 360-degree video coding using face continuities |
US10623787B1 (en) * | 2017-11-01 | 2020-04-14 | Amazon Technologies, Inc. | Optimizing adaptive bit rate streaming for content delivery |
US10659512B1 (en) | 2017-12-05 | 2020-05-19 | Amazon Technologies, Inc. | Optimizing adaptive bit rate streaming at edge locations |
EP3777145A1 (en) * | 2018-03-28 | 2021-02-17 | Huawei Technologies Co., Ltd. | An image processing device and method for performing efficient deblocking |
WO2020084929A1 (ja) * | 2018-10-23 | 2020-04-30 | 日本電気株式会社 | 映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体 |
US10886943B2 (en) * | 2019-03-18 | 2021-01-05 | Samsung Electronics Co., Ltd | Method and apparatus for variable rate compression with a conditional autoencoder |
US11057623B2 (en) * | 2019-07-03 | 2021-07-06 | Qualcomm Incorporated | Deblock filtering for video coding |
WO2021101356A1 (ko) * | 2019-11-22 | 2021-05-27 | 한국전자통신연구원 | 참조 픽처의 해상도를 이용하는 비디오 처리 방법, 장치 및 기록 매체 |
AU2021215741A1 (en) * | 2020-02-04 | 2022-09-08 | Huawei Technologies Co., Ltd. | An encoder, a decoder and corresponding methods about signaling high level syntax |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102457723A (zh) * | 2010-10-26 | 2012-05-16 | 王佳 | Mpeg_4解码器去块效应滤波vlsi装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7929610B2 (en) * | 2001-03-26 | 2011-04-19 | Sharp Kabushiki Kaisha | Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding |
US9445128B2 (en) * | 2006-12-08 | 2016-09-13 | Freescale Semiconductor, Inc. | System and method of determining deblocking control flag of scalable video system for indicating presentation of deblocking parameters for multiple layers |
BRPI0817767A2 (pt) * | 2007-10-16 | 2020-01-28 | Thomson Licensing | métodos e aparelhos para remoção de artefato para capacidade de escalonamento de profundidade de bit |
KR101457396B1 (ko) * | 2010-01-14 | 2014-11-03 | 삼성전자주식회사 | 디블로킹 필터링을 이용한 비디오 부호화 방법과 그 장치, 및 디블로킹 필터링을 이용한 비디오 복호화 방법 및 그 장치 |
US9565436B2 (en) | 2011-01-14 | 2017-02-07 | Telefonaktiebolaget Lm Ericsson (Publ) | Method for filter control and a filtering control device |
WO2012165095A1 (ja) * | 2011-05-27 | 2012-12-06 | ソニー株式会社 | 画像処理装置および方法 |
-
2013
- 2013-10-02 WO PCT/SE2013/051147 patent/WO2014055020A1/en active Application Filing
- 2013-10-02 US US14/431,894 patent/US10244265B2/en active Active
- 2013-10-02 CN CN201380052309.9A patent/CN104704824B/zh not_active Expired - Fee Related
- 2013-10-02 EP EP13779645.4A patent/EP2904792B1/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102457723A (zh) * | 2010-10-26 | 2012-05-16 | 王佳 | Mpeg_4解码器去块效应滤波vlsi装置 |
Also Published As
Publication number | Publication date |
---|---|
US10244265B2 (en) | 2019-03-26 |
US20150249842A1 (en) | 2015-09-03 |
WO2014055020A1 (en) | 2014-04-10 |
EP2904792B1 (en) | 2021-08-25 |
CN104704824A (zh) | 2015-06-10 |
EP2904792A1 (en) | 2015-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104704824B (zh) | 分层去块参数适配 | |
US11375234B2 (en) | Method and apparatus for decoding video signal | |
CN103430537B (zh) | 去块滤波控制 | |
CN102724496B (zh) | 用于对使用多个层的多媒体数据进行可缩放编码及解码的系统及方法 | |
JP5752809B2 (ja) | 平滑化演算を適応的に実行すること | |
CN102860005B (zh) | 去块滤波控制 | |
CN106101707A (zh) | 去块滤波 | |
WO2014106746A1 (en) | Method and device for processing prediction information for encoding an image | |
EP2870758B1 (en) | Controlling deblocking filtering | |
KR20120034780A (ko) | 영역 기반 필터에 대해서 협력적 분할 부호화하는 방법 및 장치 | |
KR20140043743A (ko) | 코딩된 이미지 파티션들을 필터링하기 위한 방법 및 디바이스 | |
EP3878185A1 (en) | Asymmetric deblocking in a video encoder and/or video decoder | |
Song et al. | Unified depth intra coding for 3D video extension of HEVC | |
KR102242723B1 (ko) | 비디오 신호의 디코딩 방법 및 장치 | |
KR20230162801A (ko) | 비디오 코딩을 위한 외부적으로 향상된 예측 | |
WO2019233999A1 (en) | Video coding and decoding | |
TW202005398A (zh) | 視訊編碼及解碼 | |
CN113906763B (zh) | 用于视频编解码的色度去方块协调 | |
Joan et al. | Data Embedding with Dynamic Slice Quantisation in Versatile Video Coding | |
WO2019234001A1 (en) | Video coding and decoding | |
WO2019234002A1 (en) | Video coding and decoding |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180511 Termination date: 20211002 |
|
CF01 | Termination of patent right due to non-payment of annual fee |