CN108028920A - 视频编解码中高级去块滤波的方法以及装置 - Google Patents

视频编解码中高级去块滤波的方法以及装置 Download PDF

Info

Publication number
CN108028920A
CN108028920A CN201680053241.XA CN201680053241A CN108028920A CN 108028920 A CN108028920 A CN 108028920A CN 201680053241 A CN201680053241 A CN 201680053241A CN 108028920 A CN108028920 A CN 108028920A
Authority
CN
China
Prior art keywords
parameters
block
video
image
reconstructed image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680053241.XA
Other languages
English (en)
Other versions
CN108028920B (zh
Inventor
张凯
安基程
黄晗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Singapore Pte Ltd
Original Assignee
MediaTek Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Singapore Pte Ltd filed Critical MediaTek Singapore Pte Ltd
Publication of CN108028920A publication Critical patent/CN108028920A/zh
Application granted granted Critical
Publication of CN108028920B publication Critical patent/CN108028920B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

本发明公开了一种自适应去块滤波器的方法以及装置。决定与去块滤波器有关的一个或多个参数,使用所导出的参数然后将所述去块滤波器应用于多个重构的块,参数的每一集合用于每一图像、切片、编码树单元(CTU)或CU(编码单元)。可以在视频比特流的VPS(视频参数集)、SPS(序列参数集)、PPS(图像参数集)、切片数据头、CTU(编码树单元)或CU(编码单元)中发信所述参数。所述参数对应于一个或多个用作为阈值的值、限幅边界或者用于所述去块滤波器的所述阈值以及所述限幅边界两者。在一个实施例中,利用使用当前编码的图像或先前编码的图像作为训练数据的训练进程决定用于所述当前图像的所述参数。

Description

视频编解码中高级去块滤波的方法以及装置
相关引用
本发明要求递交于2015年9月14日,号码为PCT/CN2015/089523的PCT专利申请的优先权,该PCT专利申请全文通过引用纳入其中。
技术领域
本发明涉及视频以及图像数据的编解码,特别地,本发明涉及通过在重构视频或图像上使用去块滤波(de-blocking(deblocking)filtering)以提高视频质量的技术。
背景技术
视频数据需要大量存储空间以存储该视频数据或需要宽带宽(bandwidth)以传输该视频数据。随着高分辨率以及更高的帧率的发展,如果视频数据以未压缩格式进行存储或传输,那么存储或传输带宽的需求将是非常可怕的。因此,视频数据通常使用视频编解码技术来以压缩格式进行存储或传输,使用诸如H.264/AVC以及新兴的HEVC(HighEfficiency Video Coding)标准的新的视频压缩格式,编解码效率已经得到大幅度的提高。
在高效视频编码(HEVC)系统中,H.264/AVC中的固定尺寸的宏块(macroblock)被灵活的块所代替,称为编码单元(coding unit,CU),CU中的像素共享相同的编解码参数以提高编解码效率。CU可以开始于最大的CU(LCU),在HEVC中也被称为编码树单元(codedtree unit,CTU),除了编码单元的概念,HEVC中也引入了预测单元(prediction unit,PU)的概念。一旦完成CU分层树(hierarchical tree)的拆分,根据预测类型以及PU分割,每一叶CU进一步被拆分成一个或多个预测单元(prediction unit,PU)。此外,用于转换编解码的基本单元是正方形尺寸,叫做转换单元(Transform Unit,TU)。
在H.265/HEVC编码标准中,在图像被重构后应用去块滤波器(de-blockingfilter)。对多个编码单元、多个预测单元或者多个转换单元之间的多个边界进行滤波,以减轻由基于块的编解码所导致的阻塞的伪影(blocking artefacts)。边界可以是垂直或者水平的边界。去块滤波器所涉及的用于垂直边界(110)以及水平边界(120)的多个边界像素分别如图1A以及图1B所示。
在HEVC中,亮度像素以及色度像素以不同的方式在去块进程中被处理,根据两个相邻块P以及Q的编解码模式,对用于每一边界的边界强度(boundary strength,BS)值进行计算如表1所示:
表1
对于亮度像素,当BS大于0时,在每4行上执行去块,对于每4行,几种变量(variant)计算如下,其中pij以及qij,且0≤i,j≤3如图1A以及图1B所示:
dp0=|2*p01-p02-p00|
dq0=|2*q01-q02-q00|
dp3=|2*p31-p32-p30|
dq3=|2*q31-q32-q30|
dp=dp0+dp3 (1)
dq=dq0+dq3 (2)
d0=dp+dq.
图3示出了根据HEVC用于滤波图2所示的所述4行的每一行的示例性流程图。在图2中,在边界210的一侧上的4个像素,从离边界最近的像素至离边界最远的像素被标记为p0、p1、p2以及p3,在边界210的另一侧上的4个像素,从离边界最近的像素至离边界最远的像素被标记为q0、q1、q2以及q3。在图3中,执行基于上述所导出的边界强度以及边界像素特性的各种测试(312、314、316、318、324以及326)来确定是否有强滤波(320)、弱滤波(322、328以及330)或者对4行无滤波(332),或者对1行(334)是否无滤波。在图3中,beta0、beta1以及beta2是阈值,其从视频比特流中发信的B_Table或T_Table中确定。在图3中,TcS、Tc0、Tc1对应于限幅边界值(clipping boundary values)或者限幅边界,其从视频比特流中发信的T_Table确定。
对于强去块滤波,所述去块滤波被执行如下,其中p0′、p1′、p2′、q0′、q1′以及q2′是滤波的像素:
p0′=(p2+2*p1+2*p0+2*q0+q1+4)>>3
p1′=(p2+p1+p0+q0+2)>>2
p2′=(2*p3+3*p2+p1+p0+q0+4)>>3
q0′=(p1+2*p0+2*q0+2*q1+q2+4)>>3
q1′=(p0+q0+q1+q2+2)>>2
q2′=(p0+q0+q1+3*q2+2*q3+4)>>3.
对于弱去块滤波,所述去块滤波被执行如下,其中p0′、p1′、p2′、q0′、q1′以及q2′是滤波的像素:
p0′=p0
q0′=q0
p1′=p1+Δp
q1′=q1+Δq,其中
Δ=(9*(q0-p0)-3*(q1-p1)+8)>>4 (3)
Δp=(((p2+p0+1)>>1)-p1+Δ)>>1
Δq=(((q2+q0+1)>>1)-q1-Δ)>>1.
方程式(3)中Δ的绝对差被称为d1(也就是d1=|Δ|)。为了方便起见,d1被称为第一边界活动测量(first boundary activity measure),上述所提到的dp以及dq在本发明中分别被称为第二边界活动测量(second boundary activity measure)以及第三边界活动测量(third boundary activity measure)。
对4行中用于色度分量的单个行滤波如图2所示,滤波流程图如图4所示。该流程图比亮度分量更简单,在步骤410中,检查边界强度(BS)是否大于1,如果该结果是“Y”(也就是,是),在步骤420中,执行去块滤波。否则,(也就是“N”的路径)没有滤波被应用于这一行。在图4中,TcC是限幅边界,其从视频比特流中发信的T_Table确定。
对于色度分量的去块滤波,所述去块滤波被执行如下,其中p0′以及q0′是滤波的像素:
p0′=Clip1C(p0+Δc)
q0′=Clip1C(q0-Δc),其中
Δc=((((q0-p0)<<2)+p1-q1+4)>>3).
阈值以及限幅边界被设置如下:
QP=(QP_P+QP_Q)/2
B=B_Table[QP],T=T_Table[QP][BS]
Beta0=B,Beta1=10*T,Beta2=3*B/16 (4)
TcS=2*T,Tc0=T,Tc1=T/2,TcC=T. (5)
在上述阈值和限幅边界中,B_Table以及T_Table是标准中预定义的两个固定的表,并且应当保持在编码器以及解码器两者中。B_Table对应于阈值并在视频比特流中被发信用于各种QP(quantization parameters,量化参数)。T_Table对应于限幅边界并且在视频比特流中被发信用于各种QP以及BS值,所述阈值以及限幅边界被用于确定用于滤波器决定的参数。
当前的去块滤波方法不能总是实现用于各种序列的最佳主观和客观性能。因此,需要发展可以将去块滤波器适用于底层图像(underlying picture)或部分图像的技术来提高性能。
发明内容
本发明公开了一种自适应去块滤波器的方法以及装置。根据本发明,决定与去块滤波器有关的一个或多个参数。使用所导出的参数将所述去块滤波器应用于多个重构的块。参数的每一集合用于每一图像、切片、编码树单元(CTU)或CU(编码单元)。可以在视频比特流的VPS(视频参数集)、SPS(序列参数集)、PPS(图像参数集)、切片数据头、CTU(编码树单元)或CU(编码单元)中发信所述参数。所述参数对应于用作为阈值、限幅边界或者用于所述去块滤波器的所述阈值以及所述限幅边界两者的一个或多个值。例如,所述阈值可以对应于Beta0、Beta1以及Beta2,以及所述限幅边界对应于TcS、Tc0、Tc1以及TcC。
不同的参数可以用于不同的边界方向(也就是垂直或水平)、不同的边界强度或不同的量化参数。对于限幅边界TcC,不同的TcC可以用于U分量以及V分量。
可以在所述视频比特流中发信旗标来指示所述参数是否在所述视频比特流中发信。例如,可以发信所述旗标来指示用于特定边界强度、特定边界方向(也就是垂直或水平)或者特定色彩分量(例如亮度分量或色度分量)的所述参数是否在所述视频比特流中发信。
为了提高编解码效率,使用预测对所述参数进行编码。例如,用于第一边界方向(例如垂直或水平)的所述参数由用于第二边界方向(例如水平或垂直)的所述参数进行预测。在另一个示例中,用于第一边界强度的所述参数由用于第二边界强度的所述参数进行预测,其中所述第一边界强度可以大于或小于所述第二边界强度。所述参数也可以由一组预定义的参数进行预测。用于当前图像的所述参数可以由用于先前图像的所述一个或多个参数进行预测。在另一个实施例中,一个阈值可以由另一个阈值进行预测,或者一个限幅边界值可以由另一个限幅边界值进行预测。
为了减小与去块滤波有关的复制度,决定步骤“d1<Beta1”可以被跳过,其中d1与跨越选择的边界的多个相邻样本的第一不连续边界活动测量有关。此外,额外的决定步骤“dp<Beta2”以及“dq<Beta2”也可被跳过,其中dp以及dq与跨越所述选择的边界的多个相邻样本的第二边界活动测量以及第三边界活动测量有关。
本发明的另一方面公开了一种使用训练进程导出所述参数的方法。特别地,通过将当前编码的图像或先前编码的图像作为训练数据,一个或多个表用于将与所述去块滤波器有关的目标值制成表。对于阈值,所述表将用于各种候选阈值的失真制成表,以及从达到最小失真值的候选阈值中决定所述阈值。对于限幅边界,所述表将用于各种候选限幅边界的失真制成表,以及从达到最小失真值的所述候选限幅边界中决定所述限幅边界。
附图说明
图1A示出了用于去块滤波的垂直边界以及所述垂直边界的两侧上两个块(P和Q)的相关样本的示例。
图1B示出了用于去块滤波的水平边界以及所述水平边界的两侧上两个块(P和Q)的相关样本的示例。
图2示出了用于去块滤波的垂直边界以及所述垂直边界的两侧上一行的相关样本的示例。
图3示出了用于亮度分量的去块滤波单个行的示例性流程图。
图4示出了用于色度分量的去块滤波单个行的示例性流程图。
图5示出了将与去块滤波器有关的信息从编码器传输至解码器的示例。
图6示出了通过移除对应于“d1<beta1”的一个测试步骤来简化用于亮度分量的单个行的去块滤波的示例。
图7示出了通过移除对应于“dp<beta2”以及“dp<beta2”额外的测试步骤来简化用于亮度分量的单个行的去块滤波的示例。
图8示出了基于使用表的训练进程(training process)导出最佳阈值T的示例。
图9示出了基于使用表的训练进程导出最佳限幅边界值的示例。
图10示出了根据本发明的实施例的使用自适应去块滤波器(adaptive de-blocking filter)的示例性视频解码器的流程图。
图11示出了根据本发明的实施例的使用自适应去块滤波器的示例性视频编码器的流程图。
具体实施方式
下文的描述是实施本发明的最佳实施方式,所做之描述是为了说明书本发明的基本原理,因此不应该做限制性的理解。本发明的范围由参考所附权利要求最佳确定。
在下文的描述中,Y分量与亮度分量相同,U分量与Cb分量相同以及V分量与Cr分量相同,一个色度分量可以是U分量或者V分量。
为了进一步提高去块滤波的性能,本发明公开了一种高级的方法。在传统的去块滤波进程中,用于所有序列的参数通常是固定的而不管底层图像数据的局部特性。根据本发明,参数是局部地适应于底层图像数据。例如,可以特别地决定用于每一图像、切片(slice)、编码树单元(CTU)或者CU的去块滤波器。参数可以对应于阈值的值(例如Beta0、Beta1以及Beta2)、限幅边界(例如TcS、Tc0、Tc1以及TcC)或者两者。
在一个实施例中,适用于去块滤波的参数(例如阈值的值以及限幅边界,如Beta0、Beta1和Beta2,以及TcS、Tc0、Tc1和TcC)被从编码器发信到解码器。图5示出了信息从编码器510被传输到解码器520的示例,其中传输的信息可以对应于用于BS等于1且边界方向等于垂直边界532的参数、用于BS等于2且边界方向等于垂直边界534的参数、用于BS等于1且边界方向等于水平边界536的参数以及用于BS等于2且边界方向等于水平边界538的参数。可以在选择的语法层级中发信阈值以及限幅边界的参数,例如视频参数集(videoparameter set,VPS)、序列参数集(sequence parameter set,SPS)、图像参数集(pictureparameter set,PPS)、切片数据头(slice header,SH)、编码树单元(CTU)或者CU(编码单元)。
旗标(flag)可以用于指示所述阈值以及限幅边界的参数是否被发信。如果所述参数没有被发信,可以应用预定义的参数,例如HEVC标准中定义的参数。
可以发信旗标来指示用于特定情况的阈值以及限幅边界的参数是否被发信。例如,可以发信旗标来指示用于特定BS的阈值以及限幅边界的参数是否被发信。如果所述参数没有被发信,将预定义的参数应用于这一BS,例如HEVC标准中定义的参数。同样地,可以发信旗标来指示用于特定边界方向的阈值以及限幅边界的参数是否被发信,例如垂直方向或者水平方向。如果所述参数没有被发信,预定义的参数可以被应用于这一特定边界方向的去块滤波,例如HEVC标准中定义的参数。
可以发信旗标来指示用于特定分量的阈值以及限幅边界的参数是否被发信,例如亮度分量或色度分量。如果所述参数没有被发信,将预定义的参数应用于用于这一特定分量的去块滤波,例如HEVC标准中定义的参数。在另一个示例中,旗标被发信来指示阈值以及限幅边界的参数是否被发信,例如用于一个或多个特定分量(如U、V或者UV分量)的TcC。如果所述参数没有被发信,将预定义的参数应用于这一特定的一个或多个分量的去块滤波,例如HEVC标准中定义的参数。
在又一实施例中,阈值以及限幅边界的参数对于不同的垂直以及水平去块滤波是不同的,例如Beta0、Beta1以及Beta2,TcS、Tc0、Tc1,以及TcC。用于不同边界强度的阈值以及限幅边界的参数也可以不同。同样,用于不同的QP(量化参数)的阈值以及限幅边界的参数可以不同。
阈值以及限幅边界的参数可以由任何已知的编解码方法所发信,例如HEVC标准中定义的定长编码(fixed length coding)或者VLC(variable length coding,变长编码)。
可以在通过使用预测以预测性的方式发信阈值以及限幅边界的参数,例如,用于水平去块滤波的参数可以由用于垂直去块滤波的参数进行预测。同样地,用于垂直去块滤波的参数可以由用于水平去块滤波的参数进行预测。在又一示例中,用于BS等于X的参数可以由用于BS等于Y的参数进行预测,其中X和Y属于{0,1,2}以及X大于或小于Y。
阈值以及限幅边界的参数也可以由一些预定的值所预测,例如,所述参数可以由在HEVC标准中使用的预定的值进行预测。或者,阈值以及限幅边界的参数可以由用于先前图像的对应的参数进行预测。
阈值以及限幅边界的参数也可以以一个接一个方式进行预测,例如Beta0、Beta1以及Beta2,以及TcS、Tc0、Tc1以及TcC。例如,Beta2可以由Beta1进行预测,以及Beta1可以由Beta0进行预测。在另一个示例中,Tcs由Tc0进行预测,以及Tc0由Tc1进行预测,在另一个实施例中,TcC由TcC进行预测。
用于分量U以及V的阈值以及限幅边界的参数可以是不同的,例如TcC,分别标记为TcCU以及TcCV。此外,当从编码器发信到解码器的时候,TcCV可以由TcCU进行预测。同样地,当从编码器发信到解码器的时候,TcCU可以由TcCV进行预测。
为了简化进程、提高性能或者两者,本发明的一方面公开了改进的去块决定。在一个实施例中,可以移除d1<beta1的测试条件。用于这一实施例的去块滤波的一个示例性流程图如图6所示,其中所述流程图与图3中的流程图是大致相同的,除了图6省略了测试“d1<beta1”(318)。
在一个是实施例中,d1<beta1,dp<beta2以及dq<beta2的测试条件可以被移除。用于这一实施例的去块滤波的示例性流程图如图7所示,其中所述流程图与图6中的流程图是大致相同的,除了图7也省略了测试“dp<beta2”(324)以及“d1<beta2”(326)。
请注意如前述实施例所描述的跨越选择的边界(也就是,d1、dp以及dq)的相邻样本的边界活动测量仅用于说明性的目的,以及本发明的应用并不仅限于此。也就是,如果使用了其他边界活动测量,也可以应用本发明所公开的方法。
本发明另一方面公开了参数的导出,特别地,通过在编码器中的训练进程获得去块滤波中使用的参数。在训练进程中,应用基于表的算法来获得训练的参数(trainedparameter),其中所述表用于存储与参数的导出有关的目标值(target value)。例如,值(本发明中叫做目标值)可以对应于原始数据与处理的数据之间的失真(distortion)。所述算法也可以被认为是基于直方图的。
关于如何找到最佳阈值的问题陈述的描述如下:
●对于每一测试条件,计算d(例如,HEVC中的d0)。
●如果d<T,滤波这一行,否则不滤波这一行。
●如何找到可以在去块滤波后使总失真最小化的最佳T(也就是阈值)。
根据本发明实施例的解决上述问题的算法描述如下:
●建立所有条目初始化为0的表S。
●对于每一测试条件,计算d。
●在非滤波(non-filtering)以及滤波情况下分别地获得该边界的失真D0以及D1。
●对于所有K<=d,S[k]+=D0;对于所有K>d,S[k]+=D1。
●在训练中处理用于所有边界的去块滤波后,找到最小的S[p],其中p是最佳的T。
根据上述进程,表S[d]用于存储用于所有候选阈值d的失真。具有最小失真的候选阈值p被选择为最佳的阈值。图8示出了找到最佳的阈值T的示例。在这一简化的示例中,总共有3个将要被滤波的边界行。如图8所示,通过训练建立用于3个边界行的表S。对于行0,d=5,以D0=120填充表中从索引0到索引5的值,以D1=100填充索引6以及之外的值。对于行1,d=7,由D0=50添加从索引0到索引7的值,以及由D1=60添加其他的值。对于行2,d=6,进一步由D0=30添加从索引0到索引6的值,以及进一步由D1=20添加其他的值。在训练进程以后,S(7)具有最小值(也就是100+50+20=170)。因此,7的值被选择为最佳的T。
关于如何找到最佳的限幅边界的问题陈述的描述如下:
●对于具有值X的样本(原始样本值是X0),所述样本值在没有限幅的去块滤波后计算为X’;
●输出的滤波的值是Clip3(X-Tc,X+Tc,X’);
●如何在去块滤波后找到可以使总失真最小化的最佳的Tc?
根据本发明实施例的解决上述问题的算法描述如下:
●建立所有条目被初始化为0的表S。
●对于每一样本,计算d=|X-X’|;
●对于所有k>=d,S[k]+=(X’-X0)2
●如果X<=X’,对于所有k<d,S[k]+=(X+k-X0)2;如果X>X’,对于所有k<d,S[k]+=(X-k-X0)2
●在处理所有样本后,找到最小的S[p],其中p是最佳的Tc;
图9示出了查找最佳的Tc的示例,在这一简化的示例中,总共有三个样本将要被滤波。如图9所示,由训练创建用于三个样本的S表。在训练进程以后,S(1)具有最小的值(也就是42+72+22=69)。因此,1的值被选择为最佳的Tc。
在去块进程中有许多彼此影响的参数,因此,可用将迭代的策略(iterativestrategy)应用于训练进程,如下所示:
步骤1:初始化:首先获得滤波进程中具有原始参数(例如在HEVC中定义的参数)的训练的参数;
步骤2:训练周期:获得滤波进程中具有旧参数(其是上一个训练周期中的训练的参数)的新的训练的参数;
步骤3:结束:重复步骤2直到不能再降低图像率失真(Rate-Distortion,RD)成本或总失真。
可以通过在当前编码的图像上使用训练进程获得用于去块滤波的参数。然而,由于需要等待基于所述当前编码的图像的训练进程的结果,其可能会导致处理延迟。因此,在另一个实施中,由在先前编码的图像上的训练进程获得用于去块滤波的参数,例如,通过帧K-1上的训练进程获得用于在帧K去块滤波所发信的参数。
在一个实施例中,可以通过解码器的训练进程获得用于去块滤波的参数。这样,参数不从编码器被发信到解码器,然而,在这种情况下,参数需要在编码器和解码器两者以相同的方式获得。
图10示出了根据本发明实施例的使用自适应去块滤波器的示例性视频解码器的流程图。根据这一方法,在步骤1010中,接收用于当前图像的包括编码的数据的视频比特流;在步骤1020中,从所述视频比特流中导出用于所述当前图像的多个重构的块;在步骤1030中,从所述视频比特流中确定与去块滤波器有关的一个或多个参数;在步骤1040中,使用所述一个或多个参数将所述去块滤波器应用于所述多个重构的块的多个边界,以生成多个去块的块;在步骤1050中,基于所述多个去块的块,生成解码的图像。如本领域技术人员所公知的,可以在去块滤波器后应用额外的环内处理,例如SAO(sample adaptive offset,样本自适应偏移),以生成最终解码的图像。这一解码的图像可以用作为输出图像或者存储于参考图像缓冲器中。
图11示出了根据本发明实施例的使用自适应去块滤波器的示例性视频编码器的流程图。根据这一方法,在步骤1110中,接收对应于当前图像的输入数据;在步骤1120中,将所述当前图像编码成包括当前图像的编码的数据的视频比特流;在步骤1130中,导出用于所述当前图像的多个重构的块;在步骤1140中,确定与去块滤波器有关的一个或多个参数;在步骤1150中,使用所述一个或多个参数将所述去块滤波应用于所述多个重构的块的多个边界,以生成多个去块的块作为输出或者用于其他图像的预测的参考数据;在步骤1160中,在所述视频比特流中发信所述一个或多个参数。
这些流程图旨在说明根据本发明的视频编解码的示例。本领域技术人员可以在背离本发明精神的情况下,修改每个步骤、重新排列这些步骤、拆分一个步骤或者组合这些步骤以实施本发明。在本发明中,已经用于特定的语法和语义是说明实施本发明实施例的示例,本领域技术人员可以在不背离本发明精神的情况下,用相等的语法以及语义替代这些语法和语义。
上述描述可以使本领域普通技术人员实现如本发明上下文中所提供的具体应用以及需求。对所描述实施例的各种修正对本领域技术人员而言将是显然意见的,以及这里所定义的基本原理也可以应用于其他实施例。因此,本发明不旨在限制于所示和所描述的具体实施例,而是与这里所公开的原理以及新颖性特征一致的最宽的范围。在上述细节描述中,示出的各种具体的细节是为了提供本发明透彻的理解,然而,本领域技术人员能够可理解,可以实施本发明。
上述所描述的本发明的实施例可以以各种硬件、软件或两者的组合来实施,例如,本发明的实施例可以是集成到视频压缩芯片上的一个或多个电子电路或者集成到视频压缩软件以执行这里所描述进程的软件代码。本发明的一实施例也可以是在DSP(数字信号处理器)上执行的程序代码,以执行这里所描述的进程。本发明也可以涉及许多由计算机处理器、数字信号处理器、微处理器或者场可编程门阵列(FPGA)执行的功能。这些处理器可以用于执行根据本发明的具体的任务,通过执行定义由本发明所实施的特定方法的机器可读软件代码或固件代码。这些软件代码或固件代码可以以不同的程序语言以及不同的格式或风格进行开发,这些软件代码也可以由不同的目标平台所编译。然而,软件代码不同的代码格式、风格以及语言以及配置代码去执行与本发明一致的任务的其他方法将不背离本发明的精神以及范围。
本发明可以以其他特定的形式实施而不背离本发明的精神以及基本特征,所描述的示例的各个发面被认为是说明性的而非限制性的。因此,本发明的范围由所附权利要求而非前述的描述所指示,在权利要求的等同误的含义以及范围的所有变化都包括在本发明的范围内。

Claims (25)

1.一种视频解码器中重构图像的去块滤波的方法,其特征在于,所述方法包括:
接收包括用于当前图像的编码的数据的视频比特流;
从所述视频比特流中导出用于所述当前图像的多个重构的块;
从所述视频比特流中决定与去块滤波器有关的一个或多个参数;
使用所述一个或多个参数将所述去块滤波器应用于所述多个重构的块的多个边界,以生成多个去块的块;以及
基于所述多个去块的块生成解码的图像。
2.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中所述一个或多个参数的每一集合用于每一图像、切片、编码树单元(CTU)或CU(编码单元)。
3.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中从所述视频比特流的VPS(视频参数集)、SPS(序列参数集)、PPS(图像参数集)、切片数据头、CTU(编码树单元)或CU(编码单元)中导出所述一个或多个参数。
4.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中所述一个或多个参数对应于用作所述去块滤波器的阈值、限幅边界或者所述阈值以及所述限幅边界两者的一个或多个值。
5.如权利要求4所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中所述阈值对于与Beta0、Beta1以及Beta2,以及所述限幅边界对应于TcS、Tc0、Tc1以及TcC。
6.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中用于不同边界方向、不同边界强度或者量化参数的所述一个或多个参数是不同的,其中所述不同边界方向对应于垂直边界以及水平边界。
7.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中所述一个或多个参数包括限幅边界TcC,以及其中用于第一色度分量以及第二色度分量的所述限幅边界TcC是不同的。
8.如权利要求7所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中用于所述第一色度分量以及所述第二色度分量中一个的限幅边界TcC由用于所述第一色度分量以及所述第二色度分量中另一个的限幅边界TcC进行预测。
9.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中从所述视频比特流中决定一旗标来指示所述一个或多个参数是否在所述视频比特流中发信。
10.如权利要求9所述的视频解码器中重构图像的去块滤波的方法,其特征在于,从所述视频比特流中决定所述旗标来指示用于特定边界强度、特定边界方向或者特定色彩分量的所述一个或多个参数是否在所述视频比特流中发信,其中所述特定边界方向对应于垂直边界或水平边界,以及所述特定色彩分量对应于亮度分量或色度分量。
11.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中使用预测对所述一个或多个参数进行编码。
12.如权利要求11所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中用于第一边界方向的所述一个或多个参数由用于第二边界方向的所述一个或多个参数进行预测,以及其中从包括垂直边界以及水平边界的组中选择所述第一边界方向和所述第二边界方向,并且所述第一边界方向以及所述第二边界方向是不同的边界方向。
13.如权利要求11所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中用于第一边界强度的所述一个或多个参数由用于第二边界强度的所述一个或多个参数进行预测,以及其中所述第一边界强度大于或小于所述第二边界强度。
14.如权利要求11所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中所述一个或多个参数由一组预定义的参数进行预测。
15.如权利要求11所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中用于当前图像的所述一个或多个参数由用于先前图像的所述一个或多个参数进行预测。
16.如权利要求11所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中所述一个或多个参数对应于用作所述去块滤波器的阈值、限幅边界或者所述阈值以及所述限幅边界两者的一个或多个值,以及一个阈值由另一个阈值进行预测,或者一个限幅边界值由另一个限幅边界值进行预测。
17.如权利要求1所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中所述一个或多个参数包括一个或多个用作为阈值的值,包括Beta0、Beta1以及Beta2,以及其中第一测试对应于“d1<Beta1”被跳过,以及所述d1与跨越选择的边界的多个相邻样本的第一边界活动测量有关。
18.如权利要求17所述的视频解码器中重构图像的去块滤波的方法,其特征在于,其中第二测试对应于“dp<Beta2”被跳过以及第三测试对应于“dq<beta2”被跳过,以及所述dp以及dq与跨越所述选择的边界的多个相邻样本的第二边界活动测量以及第三边界活动测量有关。
19.一种用于视频解码器中重构的图像的去块滤波的装置,其特征在于,所述装置包括一个或多个电子或处理器用于:
接收包括用于当前图像的编码的数据的视频比特流;
从所述视频比特流中导出用于所述当前图像的多个重构的块;
从所述视频比特流中决定与去块滤波器有关的一个或多个参数;
使用所述一个或多个参数将所述去块滤波器应用于所述多个重构的块的多个边界,以生成多个去块的块;以及
基于所述多个去块的块生成解码的图像。
20.一种视频编码系统中重构图像的去块滤波方法,其特征在于,所述方法包括:
接收对应于当前图像的输入数据;
将所述当前图像编码至包括所述当前图像的编码的数据的视频比特流中;
导出用于所述当前图像的多个重构的块;
决定与去块滤波器有关的一个或多个参数;
使用所述一个或多个参数将所述去块滤波器应用于所述多个重构的块的多个边界,以生成多个去块的块作为用于其他图像预测的输出或参数数据;以及
在所述视频比特流中发信所述一个或多个参数。
21.如权利要求20所述的视频编解码系统中重构图像的去块滤波方法,其特征在于,其中在所述视频比特流中的VPS(视频参数集)、SPS(序列参数集)、PPS(图像参数集)、切片数据头、CTU(编码树单元)或CU(编码单元)中发信所述一个或多个参数。
22.如权利要求20所述的视频编解码系统中重构图像的去块滤波方法,其特征在于,使用训练进程决定用于所述当前图像的所述一个或多个参数。
23.如权利要求22所述的视频编解码系统中重构图像的去块滤波方法,其特征在于,通过使用当前编码的图像或先前编码的图像作为训练数据,一个或多个表用于将与去块滤波器有关的多个目标值制成表。
24.如权利要求23所述的视频编解码系统中重构图像的去块滤波方法,其特征在于,其中所述一个或多个参数对应于一个或多个阈值,以及所述一个或多个表将用于各种候选阈值的失真制成表,以及其中从达到最小失真值的所述候选阈值中决定所述一个或多个阈值。
25.如权利要求23所述的视频编解码系统中重构图像的去块滤波方法,其特征在于,其中所述一个或多个参数对应于一个或多个限幅边界,以及所述一个或多个表将用于各种限幅边界的失真制成表,以及其中从达到最小失真值的候选限幅边界中决定所述一个或多个限幅边界。
CN201680053241.XA 2015-09-14 2016-09-13 视频编解码中高级去块滤波的方法以及装置 Active CN108028920B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
PCT/CN2015/089523 WO2017045101A1 (en) 2015-09-14 2015-09-14 Advanced deblocking filter in video coding
CNPCT/CN2015/089523 2015-09-14
PCT/CN2016/098834 WO2017045580A1 (en) 2015-09-14 2016-09-13 Method and apparatus of advanced de-blocking filter in video coding

Publications (2)

Publication Number Publication Date
CN108028920A true CN108028920A (zh) 2018-05-11
CN108028920B CN108028920B (zh) 2020-08-21

Family

ID=58288147

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680053241.XA Active CN108028920B (zh) 2015-09-14 2016-09-13 视频编解码中高级去块滤波的方法以及装置

Country Status (6)

Country Link
US (1) US11153562B2 (zh)
EP (1) EP3342163B1 (zh)
JP (1) JP2018532318A (zh)
CN (1) CN108028920B (zh)
CA (1) CA2997837C (zh)
WO (2) WO2017045101A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110662076A (zh) * 2018-06-29 2020-01-07 北京字节跳动网络技术有限公司 子块的边界增强
WO2020177664A1 (en) * 2019-03-02 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Restrictions on in-loop filtering
CN113632490A (zh) * 2019-03-24 2021-11-09 北京字节跳动网络技术有限公司 视频处理中的非线性自适应环路滤波
CN113678462A (zh) * 2019-04-15 2021-11-19 北京字节跳动网络技术有限公司 自适应环路滤波器中的裁剪参数推导
CN114501035A (zh) * 2022-01-26 2022-05-13 百果园技术(新加坡)有限公司 视频编解码滤波处理方法、系统、设备及存储介质

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013111593A1 (ja) 2012-01-27 2013-08-01 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置及び画像符号化復号装置
CN116170585A (zh) * 2017-01-16 2023-05-26 世宗大学校产学协力团 影像编码/解码方法
CA3059870A1 (en) * 2017-04-11 2018-10-18 Vid Scale, Inc. 360-degree video coding using face continuities
WO2019234612A1 (en) 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Partition tree with four sub-blocks symmetric or asymmetric
KR20240005239A (ko) 2018-06-29 2024-01-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut와 amvp 사이의 상호작용
CN114885173A (zh) 2018-06-29 2022-08-09 抖音视界(北京)有限公司 Lut中的运动候选的检查顺序
CN114845108A (zh) 2018-06-29 2022-08-02 抖音视界(北京)有限公司 查找表的更新:fifo、约束的fifo
CN110662056B (zh) 2018-06-29 2022-06-07 北京字节跳动网络技术有限公司 哪个查找表需要更新或不更新
TWI744661B (zh) 2018-06-29 2021-11-01 大陸商北京字節跳動網絡技術有限公司 要根據模式檢查的查找表中的運動候選的數量
BR112020024142A2 (pt) 2018-06-29 2021-03-02 Beijing Bytedance Network Technology Co., Ltd. método para processamento de vídeo, aparelho para codificação de dados de vídeo, meio de armazenamento e meio de gravação legíveis por computador não transitório
TWI731364B (zh) 2018-07-02 2021-06-21 大陸商北京字節跳動網絡技術有限公司 Hmvp+非相鄰運動
TWI729477B (zh) * 2018-08-31 2021-06-01 聯發科技股份有限公司 視訊編解碼中的子塊去塊及裝置
GB2590310B (en) 2018-09-12 2023-03-22 Beijing Bytedance Network Tech Co Ltd Conditions for starting checking HMVP candidates depend on total number minus K
WO2020058955A1 (en) 2018-09-23 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. Multiple-hypothesis affine mode
CN111083487A (zh) 2018-10-22 2020-04-28 北京字节跳动网络技术有限公司 仿射模式的运动信息的存储
WO2020085278A1 (ja) * 2018-10-22 2020-04-30 日本放送協会 符号化装置、復号装置、及びプログラム
KR102625986B1 (ko) 2019-01-10 2024-01-16 후아웨이 테크놀러지 컴퍼니 리미티드 인트라 서브파티션 코딩 툴로 인한 서브파티션 경계를 위한 디블로킹 필터
KR20240010576A (ko) 2019-01-10 2024-01-23 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut 업데이트의 호출
WO2020143824A1 (en) 2019-01-13 2020-07-16 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and shared merge list
WO2020147773A1 (en) 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Inserting order of motion candidates in lut
CN113615193A (zh) 2019-03-22 2021-11-05 北京字节跳动网络技术有限公司 Merge列表构建和其他工具之间的交互
WO2020219733A1 (en) 2019-04-24 2020-10-29 Bytedance Inc. Quantized residual differential pulse code modulation representation of coded video
JP7311627B2 (ja) 2019-05-01 2023-07-19 バイトダンス インコーポレイテッド 量子化残差差分パルス符号変調符号化を使用したイントラ符号化映像
WO2020223615A1 (en) 2019-05-02 2020-11-05 Bytedance Inc. Coding mode based on a coding tree structure type
CN113785573A (zh) 2019-05-04 2021-12-10 华为技术有限公司 编码器、解码器和使用自适应环路滤波器的对应方法
CN113994671A (zh) 2019-06-14 2022-01-28 北京字节跳动网络技术有限公司 基于颜色格式处理视频单元边界和虚拟边界
CN117579830A (zh) 2019-06-21 2024-02-20 北京字节跳动网络技术有限公司 自适应环内颜色空间转换和其他编解码工具的选择性使用
CN111742552B (zh) * 2019-06-25 2021-08-31 北京大学 环路滤波的方法与装置
CN117041572A (zh) * 2019-07-09 2023-11-10 Lg电子株式会社 视频编码/解码方法、数字存储介质及数据发送方法
MX2022000123A (es) * 2019-07-11 2022-02-16 Beijing Bytedance Network Tech Co Ltd Relleno de muestras en filtrado de bucle adaptativo.
WO2021036980A1 (en) 2019-08-23 2021-03-04 Beijing Bytedance Network Technology Co., Ltd. Using boundary strength in deblocking filtering
KR20220058899A (ko) 2019-09-18 2022-05-10 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩에서 적응형 루프 필터의 2-파트 시그널링
EP4018652A4 (en) 2019-09-22 2022-11-02 Beijing Bytedance Network Technology Co., Ltd. FILLING METHOD IN AN ADAPTIVE LOOP FILTER
EP4022910A4 (en) 2019-09-27 2022-11-16 Beijing Bytedance Network Technology Co., Ltd. ADAPTIVE LOOP FILTERING BETWEEN DIFFERENT VIDEO UNITS
CN114556939A (zh) 2019-10-10 2022-05-27 北京字节跳动网络技术有限公司 自适应环路滤波中不可用样点位置处的填充处理
JP7389252B2 (ja) 2019-10-29 2023-11-29 北京字節跳動網絡技術有限公司 クロスコンポーネント適応ループフィルタ
CN117336478A (zh) * 2019-11-07 2024-01-02 抖音视界有限公司 视频编解码的自适应环内颜色空间变换的量化特性
CN115104302A (zh) 2019-12-11 2022-09-23 抖音视界有限公司 跨分量适应性回路滤波的样点填充
US11729381B2 (en) * 2020-07-23 2023-08-15 Qualcomm Incorporated Deblocking filter parameter signaling
CN113038144B (zh) * 2021-05-24 2021-09-14 浙江大华技术股份有限公司 一种去除块效应的方法、装置和计算机可读存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1562384A2 (en) * 2001-09-14 2005-08-10 Sharp Kabushiki Kaisha Adaptive filtering based upon boundary strength
CN101098395A (zh) * 2006-06-30 2008-01-02 株式会社东芝 实现边缘平滑的视频数据处理装置及处理视频数据的方法
EP1919222A1 (en) * 2006-10-20 2008-05-07 Samsung Electronics Co., Ltd. De-blocking filtering method of image data and de-blocking filter
CN101841722A (zh) * 2010-06-08 2010-09-22 上海交通大学 滤波边界强度的检测装置及其检测方法
CN102081795A (zh) * 2011-01-14 2011-06-01 天津大学 基于稀疏表示的自动去块效应方法
US8711950B2 (en) * 2008-02-14 2014-04-29 Sony Corporation Apparatus and method for adapted deblocking filtering strength
CN103957425A (zh) * 2014-04-23 2014-07-30 华为技术有限公司 图像处理方法及系统
US20140341271A1 (en) * 2013-05-20 2014-11-20 Texas Instruments Incorporated Method and apparatus of hevc de-blocking filter
CN104205836A (zh) * 2012-04-03 2014-12-10 高通股份有限公司 色度切片层级量化参数偏移及解块
WO2015053001A1 (ja) * 2013-10-11 2015-04-16 ソニー株式会社 画像処理装置及び画像処理方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101409833B (zh) * 2007-10-12 2012-10-03 昆山杰得微电子有限公司 去块效应滤波装置及方法
KR101591825B1 (ko) 2008-03-27 2016-02-18 엘지전자 주식회사 비디오 신호의 인코딩 또는 디코딩 방법 및 장치
KR101457396B1 (ko) 2010-01-14 2014-11-03 삼성전자주식회사 디블로킹 필터링을 이용한 비디오 부호화 방법과 그 장치, 및 디블로킹 필터링을 이용한 비디오 복호화 방법 및 그 장치
CN101854548B (zh) * 2010-05-25 2011-09-07 南京邮电大学 一种面向无线多媒体传感器网络的视频压缩方法
CN103141096A (zh) 2010-09-28 2013-06-05 三星电子株式会社 自适应滤波方法和设备
US9445126B2 (en) * 2011-01-05 2016-09-13 Qualcomm Incorporated Video filtering using a combination of one-dimensional switched filter and one-dimensional adaptive filter
US9025660B2 (en) 2011-03-04 2015-05-05 Vixs Systems, Inc. Video decoder with general video decoding device and methods for use therewith
EP2737704B1 (en) * 2011-09-13 2020-02-19 HFI Innovation Inc. Method and apparatus for reduction of deblocking filter
US9185404B2 (en) * 2011-10-07 2015-11-10 Qualcomm Incorporated Performing transform dependent de-blocking filtering
US9167269B2 (en) * 2011-10-25 2015-10-20 Qualcomm Incorporated Determining boundary strength values for deblocking filtering for video coding
US9161046B2 (en) * 2011-10-25 2015-10-13 Qualcomm Incorporated Determining quantization parameters for deblocking filtering for video coding
TWI652941B (zh) * 2011-11-03 2019-03-01 太陽專利信託 用於解區塊之有效修整技術(二)
US9363516B2 (en) * 2012-01-19 2016-06-07 Qualcomm Incorporated Deblocking chroma data for video coding
US9538200B2 (en) * 2012-01-19 2017-01-03 Qualcomm Incorporated Signaling of deblocking filter parameters in video coding
CN104284199B (zh) * 2013-07-11 2019-02-01 Nxp股份有限公司 用降低复杂度的去块效应操作进行视频解码方法和装置
CN103402101A (zh) * 2013-08-08 2013-11-20 张新安 基于边界平滑度的avs环路滤波快速算法
US9667996B2 (en) * 2013-09-26 2017-05-30 Qualcomm Incorporated Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC
WO2015052979A1 (ja) 2013-10-11 2015-04-16 ソニー株式会社 画像処理装置及び画像処理方法
US10142642B2 (en) * 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
US10616577B2 (en) * 2017-10-16 2020-04-07 Intel Corporation Adaptive video deblocking

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1562384A2 (en) * 2001-09-14 2005-08-10 Sharp Kabushiki Kaisha Adaptive filtering based upon boundary strength
CN101098395A (zh) * 2006-06-30 2008-01-02 株式会社东芝 实现边缘平滑的视频数据处理装置及处理视频数据的方法
EP1919222A1 (en) * 2006-10-20 2008-05-07 Samsung Electronics Co., Ltd. De-blocking filtering method of image data and de-blocking filter
US8711950B2 (en) * 2008-02-14 2014-04-29 Sony Corporation Apparatus and method for adapted deblocking filtering strength
CN101841722A (zh) * 2010-06-08 2010-09-22 上海交通大学 滤波边界强度的检测装置及其检测方法
CN102081795A (zh) * 2011-01-14 2011-06-01 天津大学 基于稀疏表示的自动去块效应方法
CN104205836A (zh) * 2012-04-03 2014-12-10 高通股份有限公司 色度切片层级量化参数偏移及解块
JP2015512600A (ja) * 2012-04-03 2015-04-27 クゥアルコム・インコーポレイテッドQualcomm Incorporated クロマスライスレベルqpオフセットおよびデブロッキング
US20140341271A1 (en) * 2013-05-20 2014-11-20 Texas Instruments Incorporated Method and apparatus of hevc de-blocking filter
WO2015053001A1 (ja) * 2013-10-11 2015-04-16 ソニー株式会社 画像処理装置及び画像処理方法
CN103957425A (zh) * 2014-04-23 2014-07-30 华为技术有限公司 图像处理方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ANDREY NORKIN 等: "《HEVC Deblocking Filter》", 《IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY》 *
BENJAMIN BROSS 等: "《High efficiency video coding (HEVC) text specification draft 8》", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11 10TH MEETING: STOCKHOLM, SE, 11–20 JULY 2012,JCTVC-J1003_D7》 *
JIANLE CHEN等: "《Description of scalable video coding technology proposal by Qualcomm (configuration 2)》", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11 11TH MEETING: SHANGHAI, CN, 10-19 OCT., 2012,JCTVC-K0036》 *

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110662076B (zh) * 2018-06-29 2022-10-04 北京字节跳动网络技术有限公司 子块的边界增强
CN110662076A (zh) * 2018-06-29 2020-01-07 北京字节跳动网络技术有限公司 子块的边界增强
WO2020177664A1 (en) * 2019-03-02 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Restrictions on in-loop filtering
CN113545036A (zh) * 2019-03-02 2021-10-22 北京字节跳动网络技术有限公司 对环路内滤波的限制
CN113545036B (zh) * 2019-03-02 2023-11-28 北京字节跳动网络技术有限公司 对环路内滤波的限制
US11558644B2 (en) 2019-03-02 2023-01-17 Beijing Bytedance Network Technology Co., Ltd. Restrictions on in-loop filtering
CN113632490A (zh) * 2019-03-24 2021-11-09 北京字节跳动网络技术有限公司 视频处理中的非线性自适应环路滤波
US11509941B2 (en) 2019-03-24 2022-11-22 Beijing Bytedance Network Technology Co., Ltd. Multi-parameter adaptive loop filtering in video processing
US11523140B2 (en) 2019-03-24 2022-12-06 Beijing Bytedance Network Technology Co., Ltd. Nonlinear adaptive loop filtering in video processing
CN113678462B (zh) * 2019-04-15 2023-01-10 北京字节跳动网络技术有限公司 自适应环路滤波器中的裁剪参数推导
US11729382B2 (en) 2019-04-15 2023-08-15 Beijing Bytedance Network Technology Co., Ltd Temporal prediction of parameters in non-linear adaptive loop filter
CN113678462A (zh) * 2019-04-15 2021-11-19 北京字节跳动网络技术有限公司 自适应环路滤波器中的裁剪参数推导
CN114501035A (zh) * 2022-01-26 2022-05-13 百果园技术(新加坡)有限公司 视频编解码滤波处理方法、系统、设备及存储介质
CN114501035B (zh) * 2022-01-26 2024-02-13 百果园技术(新加坡)有限公司 视频编解码滤波处理方法、系统、设备及存储介质

Also Published As

Publication number Publication date
CA2997837A1 (en) 2017-03-23
JP2018532318A (ja) 2018-11-01
EP3342163A1 (en) 2018-07-04
US11153562B2 (en) 2021-10-19
WO2017045580A8 (en) 2017-04-13
EP3342163A4 (en) 2019-05-08
US20200236353A1 (en) 2020-07-23
CA2997837C (en) 2020-06-16
WO2017045580A1 (en) 2017-03-23
WO2017045101A1 (en) 2017-03-23
EP3342163B1 (en) 2020-10-28
CN108028920B (zh) 2020-08-21

Similar Documents

Publication Publication Date Title
CN108028920A (zh) 视频编解码中高级去块滤波的方法以及装置
KR102296826B1 (ko) 영상 부호화 및 복호화 장치 및 그 방법
KR101752612B1 (ko) 비디오 코딩을 위한 샘플 적응적 오프셋 프로세싱의 방법
US10448015B2 (en) Method and device for performing adaptive filtering according to block boundary
Wang et al. Attention-based dual-scale CNN in-loop filter for versatile video coding
US9819966B2 (en) Filter description signaling for multi-filter adaptive filtering
CN107682698B (zh) 用于编码和解码图像信息的方法、装置以及解码器可读存储介质
CN107277525B (zh) 用于视频解码的方法、装置、设备及计算机可读存储介质
US9247265B2 (en) Multi-input adaptive filter based on combination of sum-modified Laplacian filter indexing and quadtree partitioning
TWI702827B (zh) 視訊編解碼方法/裝置和相應地非易失性計算機可讀介質
US10469876B2 (en) Non-local adaptive loop filter combining multiple denoising technologies and grouping image patches in parallel
US20110069752A1 (en) Moving image encoding/decoding method and apparatus with filtering function considering edges
US10499061B2 (en) Method and device for processing video signal by using separable graph-based transform
CN113785569A (zh) 视频编码的非线性适应性环路滤波方法和装置
US20120044992A1 (en) Low complexity adaptive filter
KR20210021580A (ko) 비디오 코딩에서의 필터링을 위한 장치 및 방법
Rediess et al. High throughput hardware design for the Adaptive Loop Filter of the emerging HEVC video coding
Zhao et al. Content adaptive image de-blocking
Li et al. Complexity Reduction of an Adaptive Loop Filter Based on Local Homogeneity
US20100002147A1 (en) Method for improving the deringing filter
JP2015080115A (ja) 画像符号化装置、画像符号化方法、及びプログラム
JP7386883B2 (ja) サブペル動きベクトルしきい値を使用するデブロッキング
KR20130070195A (ko) 문맥 기반의 샘플 적응적 오프셋 필터 방향 추론 및 적응적 선택에 대한 비디오 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant