CN112637610A - 去块滤波器的系数获取装置、方法以及图像编解码装置 - Google Patents
去块滤波器的系数获取装置、方法以及图像编解码装置 Download PDFInfo
- Publication number
- CN112637610A CN112637610A CN201910903816.8A CN201910903816A CN112637610A CN 112637610 A CN112637610 A CN 112637610A CN 201910903816 A CN201910903816 A CN 201910903816A CN 112637610 A CN112637610 A CN 112637610A
- Authority
- CN
- China
- Prior art keywords
- deblocking filter
- coefficients
- pixel values
- coefficient
- present application
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 25
- 238000012549 training Methods 0.000 claims abstract description 25
- 230000000903 blocking effect Effects 0.000 claims abstract description 19
- 241000023320 Luma <angiosperm> Species 0.000 claims description 3
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 4
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请实施例提供一种去块滤波器的系数获取装置、方法以及图像编解码装置。所述系数获取方法包括:根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;根据多个输入像素值以及多个系数计算一个或多个输出像素值;以及将样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得去块滤波器的系数。由此,去块滤波器的系数更加准确;使用通过训练获得系数的去块滤波器,既可以消除块效应又可以提高编码增益。
Description
技术领域
本申请实施例涉及视频编解码技术领域。
背景技术
在视频编解码中,有损图像和视频压缩算法会导致伪像,包括块效应、模糊、振铃以及样本失真等。当前视频压缩算法基于块级压缩,由于变换和量化是在块级别上执行的,因此很容易发现阻塞大部分发生在块边界上。
去块(de-blocking)滤波器(也可称为去阻塞滤波器)是一系列图像处理滤波器,可以消除块效应(blocking)。在视频压缩软件(例如VTM)中,去块滤波器可以用于提高视频编解码器的环路滤波器(in-loop filter)的图像质量。
应该注意,上面对技术背景的介绍只是为了方便对本申请的技术方案进行清楚、完整的说明,并方便本领域技术人员的理解而阐述的。不能仅仅因为这些方案在本申请的背景技术部分进行了阐述而认为上述技术方案为本领域技术人员所公知。
发明内容
发明人发现,目前的去块滤波器的系数一般按照经验值被预先确定,用于消除块效应,而本申请实施例通过训练得到去块滤波器的系数,既可以消除块效应又可在原有基础上提高编码增益。
针对上述技术问题的至少之一,本申请实施例提供一种去块滤波器的系数获取装置、方法以及图像编解码装置。
根据本申请实施例的一个方面,提供一种去块滤波器的系数获取装置,包括:
输入单元,其根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;
输出单元,其根据所述多个输入像素值以及多个系数计算一个或多个输出像素值;以及
训练单元,其将所述样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得所述去块滤波器的系数。
根据本申请实施例的另一个方面,提供一种去块滤波器的系数获取方法,包括:
根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;
根据所述多个输入像素值以及多个系数计算一个或多个输出像素值;以及
将所述样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得所述去块滤波器的系数。
根据本申请实施例的又一个方面,提供一种图像编解码装置,包括:
编解码器,其重构图像;
去块滤波器,其对所述图像进行去块滤波,去除帧内预测块之间的块效应;其中所述去块滤波器的系数通过如前所述的系数获取装置训练而获得。
本申请实施例的有益效果之一在于:基于样本图像进行训练来获得去块滤波器的系数,由此去块滤波器的系数更加准确;使用通过训练获得系数的去块滤波器,既可以消除块效应又可以提高编码增益。
参照后文的说明和附图,详细公开了本申请实施例的特定实施方式,指明了本申请实施例的原理可以被采用的方式。应该理解,本申请的实施方式在范围上并不因而受到限制。在所附权利要求的精神和条款的范围内,本申请的实施方式包括许多改变、修改和等同。
针对一种实施方式描述和/或示出的特征可以以相同或类似的方式在一个或更多个其它实施方式中使用,与其它实施方式中的特征相组合,或替代其它实施方式中的特征。
应该强调,术语“包括/包含”在本文使用时指特征、整件、步骤或组件的存在,但并不排除一个或更多个其它特征、整件、步骤或组件的存在或附加。
附图说明
所包括的附图用来提供对本申请实施例的进一步的理解,其构成了说明书的一部分,用于例示本申请的实施方式,并与文字描述一起来阐释本申请的原理。显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1是本申请实施例的去块滤波器的系数获取方法的一示意图;
图2是本申请实施例的去块滤波器的类型的一示例图;
图3是本申请实施例的计算输出像素值的一示例图;
图4是关闭去块滤波器的图像编解码后的一示例图;
图5是开启去块滤波器的图像编解码后的一示例图;
图6是开启去块滤波器的图像编解码后的另一示例图;
图7是本申请实施例的去块滤波器的系数获取装置的一示意图;
图8是本申请实施例的图像编解码装置的一示意图;
图9是本申请实施例的电子设备的一示意图。
具体实施方式
参照附图,通过下面的说明书,本申请实施例的前述以及其它特征将变得明显。在说明书和附图中,具体公开了本申请的特定实施方式,其表明了其中可以采用本申请实施例的原则的部分实施方式,应了解的是,本申请不限于所描述的实施方式,相反,本申请实施例包括落入所附权利要求的范围内的全部修改、变型以及等同物。
在本申请实施例中,术语“第一”、“第二”等用于对不同元素从称谓上进行区分,但并不表示这些元素的空间排列或时间顺序等,这些元素不应被这些术语所限制。术语“和/或”包括相关联列出的术语的一种或多个中的任何一个和所有组合。术语“包含”、“包括”、“具有”等是指所陈述的特征、元素、元件或组件的存在,但并不排除存在或添加一个或多个其他特征、元素、元件或组件。
在本申请实施例中,单数形式“一”、“该”等包括复数形式,应广义地理解为“一种”或“一类”而并不是限定为“一个”的含义;此外术语“所述”应理解为既包括单数形式也包括复数形式,除非上下文另外明确指出。此外术语“根据”应理解为“至少部分根据……”,术语“基于”应理解为“至少部分基于……”,除非上下文另外明确指出。
在视频压缩中,视频帧被定义为帧内帧(intra-frame)和帧间帧(inter-frame),intra-frame是不参考其他帧而被压缩的帧,inter-frame是参考其他帧被压缩的帧。本申请实施例的去块滤波器主要针对帧内帧以及帧内预测的块。
本申请实施例中的编解码包括编码和/或解码,即本申请实施例的去块滤波器可以单独应用到编码器侧,也可以单独应用到解码器侧,还可以应用到编码器侧和解码器侧。下面结合附图对本申请实施例的各种实施方式进行说明。这些实施方式只是示例性的,不是对本申请的限制。
第一方面的实施例
本申请实施例提供一种去块滤波器的系数获取方法。图1是本申请实施例的去块滤波器的系数获取方法的一示意图,如图1所示,该系数获取方法包括:
101,根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;
102,根据所述多个输入像素值以及多个系数计算一个或多个输出像素值;以及
103,将所述样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得所述去块滤波器的系数。
在本申请实施例中,可以使用多个样本图像对去块滤波器的系数进行训练。图1示出了使用一个样本图像的情况,通过基于更多的样本图像的训练,去块滤波器的系数能够更加准确。
值得注意的是,以上附图1仅示意性地对本申请实施例进行了说明,但本申请不限于此。例如可以适当地调整各个操作之间的执行顺序,此外还可以增加其他的一些操作或者减少其中的某些操作。本领域的技术人员可以根据上述内容进行适当地变型,而不仅限于上述附图1的记载。
在一些实施例中,去块滤波器用于去除帧内预测块之间的块效应。
在一些实施例中,去块滤波器的类型包括长抽头滤波器(long tap filter)、强滤波器(strong filter)和弱滤波器(weak filter)。以当前H.266测试模型VTM为例,可以包括8个长抽头滤波器、1个强滤波器和3个弱滤波器。
图2是本申请实施例的去块滤波器的类型的示例图,示出了去块滤波器的不同形状。如图2所示,直线A表示块边界上的块效应,sideP和sideQ表示该直线A两边的两个区域。
如图2所示,从1到8表示长抽头滤波器,9表示强滤波器,10到12表示弱滤波器。在每个滤波器中,实线框表示此滤波器使用的像素(即输入像素),虚线框表示需要滤波的像素(即输出像素)。
例如,以第1个滤波器为例,输入像素的个数为14个,输出像素的个数也为14个;以第9个滤波器为例,输入像素的个数为8个,输出像素的个数为6个;以第10个滤波器为例,输入像素的个数为4个,输出像素的个数为2个。
再例如,以第11个滤波器为例,输入像素的个数为5个,输出像素的个数为1个,并且该输出像素为直线A左边的像素;以第12个滤波器为例,输入像素的个数为5个,输出像素的个数为1个,并且该输出像素为直线A右边的像素。
在本申请实施例中,图2所示的12个滤波器均可以用于亮度分量;此外第9个滤波器和第10个滤波器可以用于色度分量。
以上对于去块滤波器进行了示例性说明,以下再对系数的训练进行说明。其中,针对不同的去块滤波器的类型,可以分别对所述系数进行训练,和/或,针对亮度分量和色度分量,可以分别对所述系数进行训练。
在一些实施例中,输入像素值和输出像素值之间为全连接关系,即可以使用全连接层对系数进行训练。在此情况下,所述系数的个数为所述输入像素值的个数和所述输出像素值的乘积。
例如,所述输出像素值根据如下公式计算:
其中,bi为所述输出像素值,aj为所述输入像素值,wij为所述系数;i、j为大于或等于1的正整数,J为所述输入像素值的个数。
图3是本申请实施例的计算输出像素值的示例图,以图2中的第10个滤波器为例进行说明。如图3所示,可以从样本图像中块效应存在的位置(如图2中第10个滤波器对应的直线A两侧的4个像素)获取4个输入像素值a1、a2、a3、a4,相应的去块滤波器的系数为w11、w12、w13、w14、w21、w22、w23、w24;这些去块滤波器的系数的初始值可以预先确定,例如可以根据经验值确定。
如图3所示,2个输出像素值被计算如下:
b1=a1×w11+a2×w12+a3×w13+a4×w14;
b2=a1×w21+a2×w22+a3×w23+a4×w24;
可以将样本图像中对应的一个或多个像素值(即对应的原始像素值,例如图2中第10个滤波器对应的直线A两侧的原始样本图像中的4个像素值)作为目标值,使用目标值与计算出来的像素值(上述的b1和b2)之间的代价函数对系数进行训练。例如,可以通过均方误差(MSE,Mean Square Error),在误差最小的情况下获得多个系数的值,并使用获得的值对这些系数进行更新,由此能够对所述系数进行训练。
以上以全连接层和MSE为例进行了说明,但本申请不限于此,例如也可以采用其他的训练模型,例如卷积神经网络(CNN,Convolutional Neural Networks)等;或者还可以采用其他的代价函数等。
以下对本申请实施例的效果进行示例性说明,其中通过峰值信噪比(PSNR,PeakSignal to Noise Ratio)表征编码增益。
图4是关闭去块滤波器的图像编解码后的一示例图;如图4所示,在马腿上可以很容易地观察到阻塞;与原始图像相比,该图的PSNR为33.1508dB。
图5是开启去块滤波器的图像编解码后的一示例图;该去块滤波器的系数仍使用传统方法获得。如图5所示,在马腿上的阻塞被消除,主观质量(subjective quality)得到改善;但是,该图的PSNR为33.1282dB。即与图4相比,图5的编码增益被降低。
图6是开启去块滤波器的图像编解码后的另一示例图;该去块滤波器的系数使用本申请实施例的训练而获得。如图6所示,在马腿上的阻塞被消除,主观质量(subjectivequality)得到改善;并且,该图的PSNR为33.1618dB。即与图4、5相比,图6的编码增益被提高。
以上仅对与本申请相关的各步骤或过程进行了说明,但本申请不限于此。系数获取方法或图像编解码方法还可以包括其他步骤或者过程,关于这些步骤或者过程的具体内容,可以参考现有技术。此外,以上仅以上述特征信息为例对本申请实施例进行了示例性说明,但本申请不限于这些信息,还可以对这些信息进行适当的变型,这些变型的实施方式均应包含在本申请实施例的范围之内。
以上各个实施例仅对本申请实施例进行了示例性说明,但本申请不限于此,还可以在以上各个实施例的基础上进行适当的变型。例如,可以单独使用上述各个实施例,也可以将以上各个实施例中的一种或多种结合起来。
由上述实施例可知,基于样本图像进行训练来获得去块滤波器的系数,由此去块滤波器的系数更加准确;使用通过训练获得系数的去块滤波器,既可以消除块效应又可以提高编码增益。
第二方面的实施例
本申请实施例提供一种去块滤波器的系数获取装置,与第一方面的实施例相同的内容不再赘述。
图7是本申请实施例的去块滤波器的系数获取装置的一示意图。如图7所示,去块滤波器的系数获取装置700包括:
输入单元701,其根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;
输出单元702,其根据所述多个输入像素值以及多个系数计算一个或多个输出像素值;以及
训练单元703,其将所述样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得所述去块滤波器的系数。
在一些实施例中,所述去块滤波器用于去除帧内预测块之间的块效应。
在一些实施例中,所述输入像素值和所述输出像素值之间为全连接关系;所述系数的个数为所述输入像素值的个数和所述输出像素值的乘积。
在一些实施例中,所述输出像素值根据如下公式计算:
其中,bi为所述输出像素值,aj为所述输入像素值,wij为所述系数;i、j为大于或等于1的正整数,J为所述输入像素值的个数。
在一些实施例中,训练单元703通过均方误差对所述多个系数进行训练。
在一些实施例中,所述去块滤波器的类型包括长抽头滤波器、强滤波器和弱滤波器。
在一些实施例中,针对不同的去块滤波器的类型分别对所述系数进行训练,和/或,针对亮度分量和色度分量分别对所述系数进行训练。
值得注意的是,以上仅对与本申请相关的各部件进行了说明,但本申请不限于此。去块滤波器的系数获取装置700还可以包括其他部件或者模块,关于这些部件或者模块的具体内容,可以参考现有技术。
为了简单起见,图7中仅示例性示出了各个部件或模块之间的连接关系或信号走向,但是本领域技术人员应该清楚的是,可以采用总线连接等各种相关技术。上述各个部件或模块可以通过例如处理器、存储器等硬件设施来实现;本申请实施例并不对此进行限制。
本申请实施例还提供一种图像编解码装置。
图8是本申请实施例的图像编解码装置的一示意图。如图8所示,图像编解码装置800包括:
编解码器801,其重构图像;
去块滤波器802,其对所述图像进行去块滤波,去除帧内预测块之间的块效应;其中去块滤波器802的系数通过如前所述的系数获取装置700训练而获得。
图8以编解码器801和去块滤波器802为相互独立的部件为例进行说明,但本申请不限于此。例如编解码器801和去块滤波器802可以集成在一起,即去块滤波器802可以作为编解码器801的一部分部件或者一部分功能。
值得注意的是,以上仅对与本申请相关的各部件进行了说明,但本申请不限于此。图像编解码装置800还可以包括其他部件或者模块,关于这些部件或者模块的具体内容,可以参考现有技术。
为了简单起见,图8中仅示例性示出了各个部件或模块之间的连接关系或信号走向,但是本领域技术人员应该清楚的是,可以采用总线连接等各种相关技术。上述各个部件或模块可以通过例如处理器、存储器等硬件设施来实现;本申请实施例并不对此进行限制。
以上各个实施例仅对本申请实施例进行了示例性说明,但本申请不限于此,还可以在以上各个实施例的基础上进行适当的变型。例如,可以单独使用上述各个实施例,也可以将以上各个实施例中的一种或多种结合起来。
由上述实施例可知,基于样本图像进行训练来获得去块滤波器的系数,由此去块滤波器的系数更加准确;使用通过训练获得系数的去块滤波器,既可以消除块效应又可以提高编码增益。
第三方面的实施例
本申请实施例提供一种电子设备,包括如第二方面的实施例所述的去块滤波器的系数获取装置和/或图像编解码装置,其内容被合并于此。该电子设备例如可以是计算机、服务器、工作站、膝上型计算机、智能手机,等等;也可以是这些设备中的一个或一些部件;但本申请实施例不限于此。
图9是本申请实施例的电子设备的示意图。如图9所示,电子设备900可以包括:处理器(例如中央处理器CPU)910和存储器920;存储器920耦合到中央处理器910。其中该存储器920可存储各种数据;此外还存储信息处理的程序921,并且在处理器910的控制下执行该程序921。
在一些实施例中,去块滤波器的系数获取装置700的功能被集成到处理器910中实现。其中,处理器910被配置为实现如第一方面的实施例所述的去块滤波器的系数获取方法。
例如,处理器910被配置为实现如下控制:根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;根据所述多个输入像素值以及多个系数计算一个或多个输出像素值;以及将所述样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得所述去块滤波器的系数。
在一些实施例中,图像编解码装置800的功能被集成到处理器910中实现。例如,处理器910被配置为实现如下控制:重构图像;对所述图像进行去块滤波,去除帧内预测块之间的块效应;其中去块滤波器的系数通过如第一方面的实施例所述的去块滤波器的系数获取方法而获得。
此外,如图9所示,电子设备900还可以包括:输入输出(I/O)设备930和显示器940等;其中,上述部件的功能与现有技术类似,此处不再赘述。值得注意的是,电子设备900也并不是必须要包括图9中所示的所有部件;此外,电子设备900还可以包括图9中没有示出的部件,可以参考相关技术。
本申请实施例还提供一种计算机可读程序,其中当在电子设备中执行所述程序时,所述程序使得计算机在所述电子设备中执行如第一方面的实施例所述的去块滤波器的系数获取方法。
本申请实施例还提供一种存储有计算机可读程序的存储介质,其中所述计算机可读程序使得计算机在电子设备中执行如第一方面的实施例所述的去块滤波器的系数获取方法。
本申请以上的装置和方法可以由硬件实现,也可以由硬件结合软件实现。本申请涉及这样的计算机可读程序,当该程序被逻辑部件所执行时,能够使该逻辑部件实现上文所述的装置或构成部件,或使该逻辑部件实现上文所述的各种方法或步骤。本申请还涉及用于存储以上程序的存储介质,如硬盘、磁盘、光盘、DVD、flash存储器等。
结合本申请实施例描述的方法/装置可直接体现为硬件、由处理器执行的软件模块或二者组合。例如,图中所示的功能框图中的一个或多个和/或功能框图的一个或多个组合,既可以对应于计算机程序流程的各个软件模块,亦可以对应于各个硬件模块。这些软件模块,可以分别对应于图中所示的各个步骤。这些硬件模块例如可利用现场可编程门阵列(FPGA)将这些软件模块固化而实现。
软件模块可以位于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、移动磁盘、CD-ROM或者本领域已知的任何其它形式的存储介质。可以将一种存储介质耦接至处理器,从而使处理器能够从该存储介质读取信息,且可向该存储介质写入信息;或者该存储介质可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。该软件模块可以存储在移动终端的存储器中,也可以存储在可插入移动终端的存储卡中。例如,若设备(如移动终端)采用的是较大容量的MEGA-SIM卡或者大容量的闪存装置,则该软件模块可存储在该MEGA-SIM卡或者大容量的闪存装置中。
针对附图中描述的功能方框中的一个或多个和/或功能方框的一个或多个组合,可以实现为用于执行本申请所描述功能的通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件或者其任意适当组合。针对附图描述的功能方框中的一个或多个和/或功能方框的一个或多个组合,还可以实现为计算设备的组合,例如,DSP和微处理器的组合、多个微处理器、与DSP通信结合的一个或多个微处理器或者任何其它这种配置。
以上结合具体的实施方式对本申请进行了描述,但本领域技术人员应该清楚,这些描述都是示例性的,并不是对本申请保护范围的限制。本领域技术人员可以根据本申请原理对本申请做出各种变型和修改,这些变型和修改也在本申请的范围内。
Claims (10)
1.一种去块滤波器的系数获取装置,其特征在于,所述系数获取装置包括:
输入单元,其根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;
输出单元,其根据所述多个输入像素值以及多个系数计算一个或多个输出像素值;以及
训练单元,其将所述样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得所述去块滤波器的系数。
2.根据权利要求1所述的系数获取装置,其中,所述去块滤波器用于去除帧内预测块之间的块效应。
3.根据权利要求1所述的系数获取装置,其中,所述输入像素值和所述输出像素值之间为全连接关系;所述系数的个数为所述输入像素值的个数和所述输出像素值的乘积。
5.根据权利要求1所述的系数获取装置,其中,所述训练单元通过均方误差对所述多个系数进行训练。
6.根据权利要求1所述的系数获取装置,其中,所述去块滤波器的类型包括长抽头滤波器、强滤波器和弱滤波器。
7.根据权利要求1所述的系数获取装置,其中,针对不同的去块滤波器的类型分别对所述系数进行训练,和/或,针对亮度分量和色度分量分别对所述系数进行训练。
8.一种去块滤波器的系数获取方法,其特征在于,所述系数获取方法包括:
根据去块滤波器的类型从编解码器重构的样本图像中获取块效应存在位置的多个输入像素值;
根据所述多个输入像素值以及多个系数计算一个或多个输出像素值;以及
将所述样本图像中对应的一个或多个像素值作为目标值,对所述多个系数进行训练以获得所述去块滤波器的系数。
9.根据权利要求8所述的系数获取方法,其中,所述去块滤波器用于去除帧内预测块之间的块效应。
10.一种图像编解码装置,其特征在于,所述图像编解码装置包括:
编解码器,其重构图像;
去块滤波器,其对所述图像进行去块滤波,去除帧内预测块之间的块效应;其中所述去块滤波器的系数通过如权利要求1至7任一项所述的系数获取装置训练而获得。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910903816.8A CN112637610A (zh) | 2019-09-24 | 2019-09-24 | 去块滤波器的系数获取装置、方法以及图像编解码装置 |
JP2020139487A JP2021052388A (ja) | 2019-09-24 | 2020-08-20 | デブロッキングフィルタの係数取得装置、方法及び画像符号化復号装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910903816.8A CN112637610A (zh) | 2019-09-24 | 2019-09-24 | 去块滤波器的系数获取装置、方法以及图像编解码装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112637610A true CN112637610A (zh) | 2021-04-09 |
Family
ID=75158319
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910903816.8A Pending CN112637610A (zh) | 2019-09-24 | 2019-09-24 | 去块滤波器的系数获取装置、方法以及图像编解码装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2021052388A (zh) |
CN (1) | CN112637610A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120257681A1 (en) * | 2009-12-28 | 2012-10-11 | Sony Corporation | Image processing device and method and program |
CN103813176A (zh) * | 2012-11-14 | 2014-05-21 | 北京三星通信技术研究有限公司 | 视频编解码中的去块效应滤波方法和自适应环路滤波方法 |
CN103828366A (zh) * | 2011-07-21 | 2014-05-28 | 黑莓有限公司 | 基于图样信息的自适应滤波 |
CN104735450A (zh) * | 2015-02-26 | 2015-06-24 | 北京大学 | 一种在视频编解码中进行自适应环路滤波的方法及装置 |
CN105872554A (zh) * | 2010-03-09 | 2016-08-17 | 汤姆森特许公司 | 基于分类环路滤波器的方法和装置 |
CN107820677A (zh) * | 2017-09-18 | 2018-03-20 | 深圳市汇顶科技股份有限公司 | 确定滤波器系数的方法及其装置、终端 |
-
2019
- 2019-09-24 CN CN201910903816.8A patent/CN112637610A/zh active Pending
-
2020
- 2020-08-20 JP JP2020139487A patent/JP2021052388A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120257681A1 (en) * | 2009-12-28 | 2012-10-11 | Sony Corporation | Image processing device and method and program |
CN105872554A (zh) * | 2010-03-09 | 2016-08-17 | 汤姆森特许公司 | 基于分类环路滤波器的方法和装置 |
CN103828366A (zh) * | 2011-07-21 | 2014-05-28 | 黑莓有限公司 | 基于图样信息的自适应滤波 |
CN103813176A (zh) * | 2012-11-14 | 2014-05-21 | 北京三星通信技术研究有限公司 | 视频编解码中的去块效应滤波方法和自适应环路滤波方法 |
CN104735450A (zh) * | 2015-02-26 | 2015-06-24 | 北京大学 | 一种在视频编解码中进行自适应环路滤波的方法及装置 |
CN107820677A (zh) * | 2017-09-18 | 2018-03-20 | 深圳市汇顶科技股份有限公司 | 确定滤波器系数的方法及其装置、终端 |
Also Published As
Publication number | Publication date |
---|---|
JP2021052388A (ja) | 2021-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11102515B2 (en) | In loop chroma deblocking filter | |
US20220014794A1 (en) | Deblocking filtering control | |
CN108028920B (zh) | 视频编解码中高级去块滤波的方法以及装置 | |
US9942574B2 (en) | Deblocking filtering | |
CN111630857B (zh) | 视频编解码方法/装置和相应非易失性计算机可读介质 | |
EP1747676B1 (en) | Method and apparatus for image enhancement for low bit rate video compression | |
CN112218097A (zh) | 环路滤波装置和图像解码装置 | |
US20110194614A1 (en) | De-Blocking Filtering Control | |
EP1246131A2 (en) | Method and apparatus for the reduction of artifact in decompressed images using post-filtering | |
CN112997504B (zh) | 基于分量的环路滤波器 | |
CN105472205A (zh) | 编码过程中的实时视频降噪方法和装置 | |
CN112544081A (zh) | 环路滤波的方法与装置 | |
EP2870759B1 (en) | Strong deblocking filtering decisions | |
CN112637610A (zh) | 去块滤波器的系数获取装置、方法以及图像编解码装置 | |
US20210258615A1 (en) | Deblocking between block boundaries and sub-block boundaries in a video encoder and/or video decoder | |
JP7386883B2 (ja) | サブペル動きベクトルしきい値を使用するデブロッキング | |
JP7387878B2 (ja) | ビデオまたは画像コーディングにおけるデブロッキングフィルタ選択 | |
CN118525512A (zh) | 用于图像编码和解码的滤波 | |
WO2023059235A1 (en) | Combining deblock filtering and another filtering for video encoding and/or decoding | |
Kesireddy et al. | Adaptive Trilateral Filter For HEVC Standard |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20210409 |