CN101742290A - 视频编、解码降噪方法和视频编、解码降噪装置 - Google Patents
视频编、解码降噪方法和视频编、解码降噪装置 Download PDFInfo
- Publication number
- CN101742290A CN101742290A CN 200810226482 CN200810226482A CN101742290A CN 101742290 A CN101742290 A CN 101742290A CN 200810226482 CN200810226482 CN 200810226482 CN 200810226482 A CN200810226482 A CN 200810226482A CN 101742290 A CN101742290 A CN 101742290A
- Authority
- CN
- China
- Prior art keywords
- noise reduction
- reconstructed image
- pixel
- mean square
- reduction process
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 68
- 230000008569 process Effects 0.000 claims abstract description 37
- 238000011946 reduction process Methods 0.000 claims description 92
- 238000001914 filtration Methods 0.000 claims description 56
- 230000009467 reduction Effects 0.000 claims description 40
- 230000003068 static effect Effects 0.000 claims description 29
- 238000012545 processing Methods 0.000 claims description 28
- 230000000052 comparative effect Effects 0.000 claims description 13
- 238000012163 sequencing technique Methods 0.000 claims description 10
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 16
- 230000009466 transformation Effects 0.000 description 16
- 238000006243 chemical reaction Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 12
- 238000007906 compression Methods 0.000 description 6
- 230000006835 compression Effects 0.000 description 6
- 238000013139 quantization Methods 0.000 description 6
- 238000011002 quantification Methods 0.000 description 5
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 239000012467 final product Substances 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000012958 reprocessing Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Abstract
本发明公开了一种视频编、解码降噪方法和视频编、解码降噪装置。其中，视频编码降噪方法包括：在视频编码过程中，对当前编码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它编码图像的参考图像。视频解码降噪方法包括：在视频解码过程中，对当前解码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它解码图像的参考图像及最终重建图像。本发明所公开的技术方案，能够抑制采集的视频图像中的噪声，提高运动估计过程中块匹配结果的精度。
Description
技术领域
本发明涉及视频编解码技术，尤其涉及一种噪声环境下的视频编码降噪方法、视频解码降噪方法和视频编码降噪装置、视频解码降噪装置。
背景技术
视频编码技术是将数字视频信息压缩，以便实现更有效地被传送和存储；视频解码技术则是对已编码视频信息进行解析重建，得到视频图像。
目前，视频压缩编码标准主要由活动图像专家组(MPEG)、ITU-T SG16Q6视频编码专家组(VCEG)及VCEG与MPEG联合专家组(JVT)制定，这些标准包括：H.263、MPEG2、MPEG4-Part2及最新的H.264/AVC(MPEG4-Part10)。其它的视频编码标准还有VC-1和中国音视频标准组(AVS)制定的视频编码标准AVS1.0-P2等。上述视频编码标准均采用基于块的运动补偿和变换编码的混合编码架构，包括帧内预测、帧间预测、变换、量化和熵编码等。相应地，在解码时，包括熵解码、反量化、反变换以及预测补偿等一系列解码重建过程。
以H.264标准为例，视频编解码时，按时间、空间由高到低分成序列、图像组、图像(也称帧)、条带组、条带、宏块、子宏块等不同层次。其中，编解码的基本处理单元是宏块，一个宏块通常包括一个16×16的亮度样值块和对应的色度样值块，宏块又进一步可分为子宏块，在H.264标准中，子宏块的大小有16*8、8*16、8*8、8*4、4*8、4*4等。帧内、帧间预测和变换常常对子宏块进行。
参见图1，图1为H.264/AVC(MPEG4-Part10)标准的视频编码流程框架图。如图1所示，对当前图像Fn编码过程中，可选择采用帧内预测，也可选择采用帧间预测。若采用帧内预测，则在对一给定块编码时，可以使用空间预测模式，根据周围的块对该给定块进行帧内预测，得到预测值P，用给定块的实际值减去预测值P得到残差值Dn；若采用帧间预测，则在对一给定块编码时，首先在参考图像F′n-1中进行运动估计，找到最优匹配块，得到运动矢量(MV)，然后对参考图像按照运动矢量进行运动补偿(MC)，得到预测值P，用给定块的实际值减去预测值P得到残差值Dn。其中，为了提高预测精度，从而提高压缩比，实际的参考图像可在过去或未来(指显示次序上)已编码解码重建和滤波的帧中进行选择。之后，对残差值Dn经变换、量化后产生一组量化后的变换系数X，再经熵编码，与解码所需的一些边信息(如预测模式量化参数、运动矢量等)一起组成一个压缩后的码流。
其中，编码过程中的参考图像为已编码图像的重建图像，对残差图像进行反量化、反变换后得到D′n，将得到的D′n与预测值P相加，得到uF′n(未经滤波的帧)。为了去除编解码环路中产生的噪声，提高参考帧的图像质量，从而提高压缩图像性能，设置了一个环路滤波器，用于对每个编码块的边界像素进行滤波，经环路滤波后的输出即为重建图像F′n，可用作参考图像。其中，若为帧内预测，则预测值P根据相邻块帧内预测得到；若为帧间预测，则预测值P由解码已重建图像(即该重建图像编码时的参考图像)运动补偿(MC)得到。
参见图2，图2为H.264/AVC(MPEG4-Part10)标准的视频解码流程框架图。解码过程与编码时的重建过程类似，首先对压缩码流进行熵解码，解析出所有语法元素符号及系数符号，对系数符号进行反扫描排序后，得到残差图像，之后对残差图像进行反量化、反变换、运动补偿或帧内预测、与预测值相加以及环路滤波等重建过程，得到重建图像。
实际编解码过程中，对于新一代标准H.264/AVC(MPEG4-Part10)、VC-1、AVS1.0-P2而言，参考图像可有多个，帧间图像(P帧)除了有帧间宏块(P宏块)，还可以有帧内宏块(I宏块)，环路滤波是必须的环节；而在MPEG2、H.263、MPEG4-Part2标准中，参考图像只有一个，帧间图像只有P宏块，环路滤波仅是解码过程中可选的一个后处理环节。
从上述过程可以看出，编解码过程中只有环路滤波涉及到去噪声处理，但该去噪声处理也只是用于去除编解码环路中引入的噪声，具体进行时只对每个编码块的边界进行滤波。然而，在实际应用中的很多情况下，尤其是视频监控场景，因为各种原因，例如光线不够充足等，采集时视频图像时，视频图像中会包含大量的噪声，这些噪声从频谱分布上分析一般范围都较广，而且没有固定规律。噪声的存在，会削弱视频图像的空间相关性和时间相关性，使得运动估计过程中的块匹配结果不够准确，另外也会使残差中包含大量噪声的成份，不利于视频压缩。
发明内容
有鉴于此，本发明中一方面提供一种视频编码降噪方法和视频解码降噪方法，另一方面提供一种视频编码降噪装置和视频解码降噪装置，以抑制采集的视频图像中的噪声，提高运动估计过程中块匹配结果的精度。
本发明所提供的视频编码降噪方法，包括：
在视频编码过程中，对当前编码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它编码图像的参考图像。
较佳地，所述全像素降噪处理包括帧内全像素降噪处理或帧间全像素降噪处理。
较佳地，所述帧内全像素降噪处理包括：
分别计算所述重建图像中每个设定大小的区域内的像素均方差；
将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域；
对所确定的平坦区域进行低通滤波和/或中值滤波的降噪处理。
较佳地，所述帧间全像素降噪处理包括：
将在时间顺序上离所述重建图像最近的参考图像作为对比图像；
设定比较区域大小，将所述重建图像中的各个比较区域与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
较佳地，所述将重建图像中的各个比较区域与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域包括：
计算所述重建图像中的当前比较区域与所述对比图像中位置对应的比较区域内各像素的差值，并计算各像素差值的均方差；
将所述均方差与设定的阈值进行比较，在所述均方差小于所述阈值时，确定所述比较区域为处于静止的比较区域。
本发明所提供的视频解码降噪方法，包括：
在视频解码过程中，对当前解码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它解码图像的参考图像及最终重建图像。
较佳地，所述全像素降噪处理包括帧内全像素降噪处理或帧间全像素降噪处理。
较佳地，所述帧内全像素降噪处理包括：
分别计算所述重建图像中每个设定大小的区域内的像素均方差；
将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域和复杂区域；
对所确定的平坦区域进行低通滤波和/或中值滤波的降噪处理。
较佳地，所述帧间全像素降噪处理包括：
将在时间顺序上离所述重建图像最近的参考图像作为对比图像；
设定比较区域大小，将所述重建图像与所述对比图像中位置对应的各个区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
较佳地，所述将重建图像中的各个比较区域与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域包括：
计算所述重建图像中的当前比较区域与所述对比图像中位置对应的比较区域内各像素的差值，并计算各像素差值的均方差；
将所述均方差与设定的阈值进行比较，在所述均方差小于所述阈值时，确定所述比较区域为处于静止的比较区域。
本发明所提供的视频编码降噪装置，包括：编码器和降噪处理单元，所述降噪处理单元用于对来自编码器的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为编码器对其它编码图像进行编码所需的参考图像。
较佳地，所述降噪处理单元包括：
帧内降噪子单元，用于分别计算所述重建图像中每个设定大小的区域内的像素均方差，将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域，并对所述平坦区域进行低通滤波和/或中值滤波的降噪处理；
和/或，
帧间降噪子单元用于将在时间顺序上离所述重建图像最近的参考图像作为对比图像，并设定比较区域大小，将所述重建图像与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
本发明所提供的视频解码降噪装置，包括：解码器和降噪处理单元，所述降噪处理单元用于对来自解码器的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为解码器对其它解码图像进行解码所需的参考图像及解码输出的最终重建图像。
较佳地，所述降噪处理单元包括：
帧内降噪子单元，用于分别计算所述重建图像中每个设定大小的区域内的像素均方差，将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域，并对所述平坦区域进行低通滤波和/或中值滤波的降噪处理；
和/或，
帧间降噪子单元用于将在时间顺序上离所述重建图像最近的参考图像作为对比图像，并设定比较区域大小，将所述重建图像与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
从上述方案可以看出，本发明中通过在视频编码过程中，对当前编码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它编码图像(如下一帧编码图像)的参考图像；并在视频解码过程中，对当前解码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它解码图像(如下一帧解码图像)的参考图像，从而对采集视频图像时引入的噪声进行了抑制，保证了视频图像的空间相关性和时间相关性，提高了运动估计过程中的块匹配结果精度，另外也会使残差中的噪声成份得到降低，利于视频压缩。
附图说明
图1为H.264/AVC(MPEG4-Part10)标准的视频编码流程框架图；
图2为H.264/AVC(MPEG4-Part10)标准的视频解码流程框架图；
图3为本发明实施例中基于H.264/AVC(MPEG4-Part10)标准的视频编码降噪流程框架图；
图4为本发明实施例中基于H.264/AVC(MPEG4-Part10)标准的视频解码降噪流程框架图；
图5为本发明实施例中视频编码降噪装置的示例性结构图；
图6为本发明实施例中视频解码降噪装置的示例性结构图；
图7为本发明实施例中视频监控测试效果图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白，下面结合实施例和附图，对本发明进一步详细说明。
图3为本发明实施例中基于H.264/AVC(MPEG4-Part10)标准的视频编码降噪流程框架图。如图3所示，本发明实施例中，在视频编码过程中添加了降噪处理环节，该降噪处理环节设置在环路滤波环节之后，具体实现时，也可设置在了环路滤波环节之前。此外，对于不包含环路滤波的视频编码过程，该降噪处理环节只需要设置在重建图像之后即可。降噪处理环节用于对当前编码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它编码图像(如下一帧编码图像)的参考图像。
具体实现时，其中的全像素降噪处理可以是帧内全像素降噪处理，也可以是帧间全像素降噪处理。
其中，帧内全像素降噪处理可包括：预先设置区域像素均方差阈值，并设定区域大小，如3×3或4×4等。之后计算重建图像中每个设定大小的区域内的像素均方差，将对应每个区域的计算结果分别与设置的区域像素均方差阈值进行比较，如果计算结果大于预先设置的区域像素均方差阈值，则确定该区域为复杂区域，如果小于预先设置的区域像素均方差阈值，则确定该区域为平坦区域，之后对该平坦区域进行低通滤波和/或中值滤波等降噪处理。例如，对于3×3大小的平坦区域，可将该区域内的像素均值作为该区域中心位置处的像素值。
帧间全像素降噪处理可包括：将在时间顺序上离当前重建图像最近的参考图像(有可能是上一帧图像的重建图像，也有可能是下一帧图像的重建图像等)作为对比图像，并设定比较区域大小，如3×3或4×4等。之后，将当前重建图像中的各个比较区域与所述对比图像中位置对应的各个设定大小的比较区域分别进行比较，确定处于静止状态的区域。例如，可计算对应区域的各像素差值的均方差；若得到的均方差大于预先设定的阈值，则认为该比较区域为发生了运动的区域，若得到的均方差小于预先设定的阈值，则认为该比较区域为处于静止状态的区域。之后，对该处于静止状态的两(或多)帧中的对应区域进行低通滤波和/或中值滤波的降噪处理。例如，对两帧图像中该区域内对应的像素求平均值，将得到的平均值作为重建图像中该区域内对应的像素值。对于发生了运动的区域，则保留重建图像中该区域内的原像素值不变。
图4为本发明实施例中基于H.264/AVC(MPEG4-Part10)标准的视频解码降噪流程框架图。如图4所示，本发明实施例中，为了与图3所示的视频编码过程相对应，在视频解码过程中也加入了降噪处理环节。同样，该降噪处理环节设置在了环路滤波环节之后，具体实现时，也可设置在环路滤波环节之前。此外，对于不包含环路滤波的视频编码过程，该降噪处理环节只需要设置在重建图像之后即可。降噪处理环节用于对当前解码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它解码图像(如下一帧解码图像)的参考图像及用于显示或播放等的最终重建图像。
具体实现时，与图3所示的视频编码过程相对应，图4中的全像素降噪处理同样可以是帧内全像素降噪处理，也可以是帧间全像素降噪处理。此处不再一一赘述。
以上对本发明实施例中的视频编、解码降噪方法进行了详细描述，下面再对本发明实施例中的视频编、解码降噪装置进行详细描述。
图5为本发明实施例中视频编码降噪装置的示例性结构图。如图5所示，该装置包括：编码器和降噪处理单元。
其中，编码器用于对当前待编码图像进行编码处理。
降噪处理单元用于对来自编码器的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为编码器对其它编码图像进行编码所需的参考图像。
其中，编码器可以为现有技术中已有的编码器，也可以为其它改进后的编码器，本发明中不作限定。例如，图5中示出了编码器的一种实现结构，包括：预测单元、变换单元、编码单元、反变换单元和重建单元。
此时，编码流程为：当前待编码图像→预测单元→变换单元→编码单元→码流；重建时流程为：反变换单元→重建单元→当前图像的重建图像→降噪处理单元。
其中，预测单元用于在进行帧内编码时，对当前待编码图像以宏块或块为单位，根据周围的块对该给定块进行帧内预测，得到残差块及对应的运动矢量；在进行帧间编码时从重建单元中读取参考图像，对当前待编码图像以宏块或块为单位，对当前待编码块从参考图像中选取最佳匹配块，用所选取的最佳匹配块对当前待编码块进行预测，得到残差块及对应的运动矢量。之后，将残差块输出给变换单元，将运动矢量输出给编码单元，同时对该运动矢量进行存储，供重建单元使用。
变换单元用于接收来自预测单元的残差块，并对所接收的残差块进行变换及量化，进一步压缩图像码率，并将变换及量化后的变换系数阵输出给编码单元及反变换单元。
编码单元可以包括重排序及熵编码等编码过程，用于接收来自变换单元的变换系数阵，连同来自预测单元的运动矢量一起进行熵编码，写入码流中。
上述预测单元中用到的参考图像为已编码图像的重建图像，而且在对当前待编码图像进行编码时，为了为后续编码图像提供参考图像，也需要对当前待编码图像的已编码图像进行重建，因此本解码器中包括前面所说的反变换单元和重建单元。
其中，反变换单元用于接收来自变换单元的变换、量化后的变换系数阵，并对所接收的变换系数阵进行反量化和反变换，得到当前编码图像的残差块，输出给重建单元。
重建单元用于接收来自反变换单元的残差块，并读取预测单元所存储的运动矢量，根据所读取的运动矢量，在当前解码图像(对应帧内编码)或编码时的参考图像(对应帧间编码)中进行运动补偿，得到重建图像块，并将该重建图像块进行存储。若当前编码图像所有的残差块都重建结束，则根据所存储的当前编码图像的所有重建图像块得到当前编码图像的重建图像。
具体实现时，若参考图像不只一帧，例如参考图像为前五帧图像，则下一个待编码图像进行预测所需的五帧图像可以为前四帧图像加上本次重建得到的图像，最前面的一帧图像此时可以被删除。
降噪处理单元用于对来自重建单元的当前编码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为预测单元进行其它预测以及重建单元进行其它重建所需的参考图像，即作为其它编码图像的参考图像。例如，作为下一帧编码图像的参考图像。具体实现时，降噪处理单元中也可包括一个环路滤波处理子单元，用于对重建图像进行宏块边界像素的降噪处理，此处不再详述。
其中对第一个图像进行编码时，参考图像可以为空，即对第一个图像进行编码时，可不经过预测，而直接进行后续编码处理。
图6为本发明实施例中视频解码降噪装置的示例性结构图。如图6所示，该装置包括：解码器和降噪处理单元。
其中，解码器用于对当前待解码图像进行解码处理。
降噪处理单元用于对来自解码器的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为解码器对其它解码图像进行解码所需的参考图像及解码输出的最终重建图像。
其中，解码器可以为现有技术中已有的解码器，也可以为其它改进后的解码器，本发明中不作限定。例如，图6中示出了编码器的一种实现结构，包括：解码单元、反变换单元和重建单元。
此时，解码流程为：解码单元→反变换单元→重建单元→当前图像的重建图像→降噪处理单元。
其中，解码单元用于对压缩码流进行熵解码、重排序等，得到当前待解码图像中当前待解码块的运动矢量以及残差块变换系数阵等，并将残差块变换系数阵输出给反变换单元，将运动矢量输出给重建单元。
反变换单元用于接收来自解码单元的残差块变换系数阵，并对所接收的残差块变换系数阵进行反量化及反变换等，得到残差块，输出给重建单元。
重建单元用于接收来自解码单元的运动矢量和来自反变换单元的残差块，并根据所接收的运动矢量，对残差块在当前解码图像(对应帧内编码)或编码时的参考图像(对应帧间编码)中进行运动补偿，得到重建图像块，并对该重建图像块进行保存。
若当前待解码图像所有的残差块都重建结束，则根据所存储的当前待解码图像的所有重建图像块，得到当前解码图像的重建图像。
降噪处理单元用于对当前解码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为重建单元进行其它重建所需的参考图像(即作为其它待解码图像的参考图像)及用于显示或播放等的最终重建图像(即解码输出的最终重建图像)。
具体实现时，降噪处理单元中也可包括一个环路滤波处理子单元，用于对重建图像进行宏块边界像素的降噪处理，此处不再详述。
其中，图5和图6所示装置中的降噪处理单元在具体实现时，可具体包括：帧内降噪子单元和/或帧间降噪子单元。
其中，帧内降噪子单元用于分别计算所述重建图像中每个设定大小的区域内的像素均方差，将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域，并对所述平坦区域进行低通滤波和/或中值滤波的降噪处理。
帧间降噪子单元用于将在时间顺序上离所述重建图像最近的参考图像作为对比图像，并设定比较区域大小，将所述重建图像与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
利用本发明实施例中的技术方案，可以提高运动估计过程中的块匹配结果精度，另外也会使残差中的噪声成份得到降低，利于视频压缩。如图7所示，图7为在某个视频监控测试序列中，场景基本不动，但是噪声较大的情况下得到的试验测试结果。图7中，横坐标表示码率，纵坐标表示峰值信噪比(PSNR)，最下面的那条线为未进行降噪处理时所得出的码率与PSNR的对应关系图，最上面的那条线为进行降噪处理后所得出的码率与PSNR的对应关系图。可见，采用本发明所描述的噪声抑制技术后，不仅在画面质量上得到了大幅提升(即相同码率的情况下PSNR较高)，而且码率也得到大幅节省(即相同PSNR的情况下码率较低)。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (14)
1.一种视频编码降噪方法，其特征在于，该方法包括：
在视频编码过程中，对当前编码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它编码图像的参考图像。
2.如权利要求1所述的方法，其特征在于，所述全像素降噪处理包括帧内全像素降噪处理或帧间全像素降噪处理。
3.如权利要求2所述的方法，其特征在于，所述帧内全像素降噪处理包括：
分别计算所述重建图像中每个设定大小的区域内的像素均方差；
将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域；
对所确定的平坦区域进行低通滤波和/或中值滤波的降噪处理。
4.如权利要求2所述的方法，其特征在于，所述帧间全像素降噪处理包括：
将在时间顺序上离所述重建图像最近的参考图像作为对比图像；
设定比较区域大小，将所述重建图像中的各个比较区域与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
5.如权利要求4所述的方法，其特征在于，所述将重建图像中的各个比较区域与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域包括：
计算所述重建图像中的当前比较区域与所述对比图像中位置对应的比较区域内各像素的差值，并计算各像素差值的均方差；
将所述均方差与设定的阈值进行比较，在所述均方差小于所述阈值时，确定所述比较区域为处于静止的比较区域。
6.一种视频解码降噪方法，其特征在于，该方法包括：
在视频解码过程中，对当前解码图像的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为其它解码图像的参考图像及最终重建图像。
7.如权利要求6所述的方法，其特征在于，所述全像素降噪处理包括帧内全像素降噪处理或帧间全像素降噪处理。
8.如权利要求7所述的方法，其特征在于，所述帧内全像素降噪处理包括：
分别计算所述重建图像中每个设定大小的区域内的像素均方差；
将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域和复杂区域；
对所确定的平坦区域进行低通滤波和/或中值滤波的降噪处理。
9.如权利要求7所述的方法，其特征在于，所述帧间全像素降噪处理包括：
将在时间顺序上离所述重建图像最近的参考图像作为对比图像；
设定比较区域大小，将所述重建图像与所述对比图像中位置对应的各个区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
10.如权利要求9所述的方法，其特征在于，所述将重建图像中的各个比较区域与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域包括：
计算所述重建图像中的当前比较区域与所述对比图像中位置对应的比较区域内各像素的差值，并计算各像素差值的均方差；
将所述均方差与设定的阈值进行比较，在所述均方差小于所述阈值时，确定所述比较区域为处于静止的比较区域。
11.一种视频编码降噪装置，包括：编码器，其特征在于，该装置还包括：降噪处理单元；
所述降噪处理单元用于对来自编码器的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为编码器对其它编码图像进行编码所需的参考图像。
12.如权利要求11所述的装置，其特征在于，所述降噪处理单元包括：
帧内降噪子单元，用于分别计算所述重建图像中每个设定大小的区域内的像素均方差，将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域，并对所述平坦区域进行低通滤波和/或中值滤波的降噪处理；
和/或，
帧间降噪子单元用于将在时间顺序上离所述重建图像最近的参考图像作为对比图像，并设定比较区域大小，将所述重建图像与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
13.一种视频解码降噪装置，包括：解码器，其特征在于，该装置还包括：降噪处理单元；
所述降噪处理单元用于对来自解码器的重建图像进行全像素降噪处理，将降噪处理后的重建图像作为解码器对其它解码图像进行解码所需的参考图像及解码输出的最终重建图像。
14.如权利要求13所述的装置，其特征在于，所述降噪处理单元包括：
帧内降噪子单元，用于分别计算所述重建图像中每个设定大小的区域内的像素均方差，将计算得到的各区域的像素均方差分别与设定的区域像素均方差阈值进行比较，将像素均方差小于所述区域像素均方差阈值的区域确定为所述重建图像中的平坦区域，并对所述平坦区域进行低通滤波和/或中值滤波的降噪处理；
和/或，
帧间降噪子单元用于将在时间顺序上离所述重建图像最近的参考图像作为对比图像，并设定比较区域大小，将所述重建图像与所述对比图像中位置对应的各个比较区域分别进行比较，根据比较结果确定处于静止的比较区域，并对所述处于静止的比较区域进行低通滤波和/或中值滤波的降噪处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200810226482 CN101742290B (zh) | 2008-11-12 | 2008-11-12 | 视频编、解码降噪方法和视频编、解码降噪装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200810226482 CN101742290B (zh) | 2008-11-12 | 2008-11-12 | 视频编、解码降噪方法和视频编、解码降噪装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101742290A true CN101742290A (zh) | 2010-06-16 |
| CN101742290B CN101742290B (zh) | 2013-03-27 |
Family
ID=42465070
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 200810226482 Active CN101742290B (zh) | 2008-11-12 | 2008-11-12 | 视频编、解码降噪方法和视频编、解码降噪装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101742290B (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102202164A (zh) * | 2011-05-20 | 2011-09-28 | 长安大学 | 基于运动估计的道路视频稳定方法 |
| CN105049846A (zh) * | 2015-08-14 | 2015-11-11 | 广东中星电子有限公司 | 图像和视频编解码的方法和设备 |
| CN105635791A (zh) * | 2015-12-30 | 2016-06-01 | 北京奇艺世纪科技有限公司 | 一种模糊视频图像的检测方法和装置 |
| CN102957844B (zh) * | 2011-08-12 | 2017-03-01 | 索尼公司 | 图像处理设备和图像处理方法 |
| CN106469192A (zh) * | 2016-08-30 | 2017-03-01 | 北京奇艺世纪科技有限公司 | 一种文本相关性的确定方法及装置 |
| CN107197271A (zh) * | 2011-11-07 | 2017-09-22 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| CN111010495A (zh) * | 2019-12-09 | 2020-04-14 | 腾讯科技（深圳）有限公司 | 一种视频降噪处理方法及装置 |
| CN111784613A (zh) * | 2020-07-10 | 2020-10-16 | 深圳市中江天华科技有限公司 | 一种视频图像的降噪处理方法 |
-
2008
- 2008-11-12 CN CN 200810226482 patent/CN101742290B/zh active Active
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102202164B (zh) * | 2011-05-20 | 2013-03-20 | 长安大学 | 基于运动估计的道路视频稳定方法 |
| CN102202164A (zh) * | 2011-05-20 | 2011-09-28 | 长安大学 | 基于运动估计的道路视频稳定方法 |
| CN102957844B (zh) * | 2011-08-12 | 2017-03-01 | 索尼公司 | 图像处理设备和图像处理方法 |
| CN107347156A (zh) * | 2011-11-07 | 2017-11-14 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| US10575020B2 (en) | 2011-11-07 | 2020-02-25 | Canon Kabushiki Kaisha | Method and device for providing compensation offsets for a set of reconstructed samples of an image |
| US10771819B2 (en) | 2011-11-07 | 2020-09-08 | Canon Kabushiki Kaisha | Sample adaptive offset filtering |
| CN107197271A (zh) * | 2011-11-07 | 2017-09-22 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| CN107295337A (zh) * | 2011-11-07 | 2017-10-24 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| CN111405278A (zh) * | 2011-11-07 | 2020-07-10 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| CN107396105A (zh) * | 2011-11-07 | 2017-11-24 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| US10743033B2 (en) | 2011-11-07 | 2020-08-11 | Canon Kabushiki Kaisha | Method and device for optimizing encoding/decoding of compensation offsets for a set of reconstructed samples of an image |
| CN107295337B (zh) * | 2011-11-07 | 2020-03-31 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| US10462493B2 (en) | 2011-11-07 | 2019-10-29 | Canon Kabushiki Kaisha | Method and device for optimizing encoding/decoding of compensation offsets for a set of reconstructed samples of an image |
| CN111405278B (zh) * | 2011-11-07 | 2022-05-24 | 佳能株式会社 | 使针对图像的一组重建样本的补偿偏移的编码/解码最优化的方法和装置 |
| CN107396105B (zh) * | 2011-11-07 | 2020-03-31 | 佳能株式会社 | 图像编解码方法和装置、以及计算机可读介质 |
| CN105049846B (zh) * | 2015-08-14 | 2019-05-21 | 广东中星微电子有限公司 | 图像和视频编解码的方法和设备 |
| CN105049846A (zh) * | 2015-08-14 | 2015-11-11 | 广东中星电子有限公司 | 图像和视频编解码的方法和设备 |
| CN105635791B (zh) * | 2015-12-30 | 2019-03-12 | 北京奇艺世纪科技有限公司 | 一种模糊视频图像的检测方法和装置 |
| CN105635791A (zh) * | 2015-12-30 | 2016-06-01 | 北京奇艺世纪科技有限公司 | 一种模糊视频图像的检测方法和装置 |
| CN106469192A (zh) * | 2016-08-30 | 2017-03-01 | 北京奇艺世纪科技有限公司 | 一种文本相关性的确定方法及装置 |
| CN111010495A (zh) * | 2019-12-09 | 2020-04-14 | 腾讯科技（深圳）有限公司 | 一种视频降噪处理方法及装置 |
| CN111784613A (zh) * | 2020-07-10 | 2020-10-16 | 深圳市中江天华科技有限公司 | 一种视频图像的降噪处理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101742290B (zh) | 2013-03-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101742290B (zh) | 视频编、解码降噪方法和视频编、解码降噪装置 | |
| CN101662682B (zh) | 视频编码技术 | |
| CN101742288B (zh) | 视频降噪编码方法和视频降噪编码装置 | |
| CN101252686B (zh) | 基于交织预测的视频帧内无损编解码方法及系统 | |
| CN102150427B (zh) | 用于使用自适应环路滤波器进行视频编码的系统和方法 | |
| CN103248893B (zh) | 从h.264/avc标准到hevc标准的快速帧间转码方法及其转码器 | |
| CN105379284B (zh) | 动态图像编码装置及其动作方法 | |
| CN102648627B (zh) | 率失真优化量化的加速技术 | |
| KR102024516B1 (ko) | 화상 부호화 장치, 화상 복호 장치, 화상 부호화 방법, 화상 복호 방법 및 기억 매체 | |
| CN103209324B (zh) | 一种施加边缘补偿的方法 | |
| EP1773071A2 (en) | Method of and apparatus for lossless video encoding and decoding | |
| CN101984665A (zh) | 一种视频传输质量评测的方法与系统 | |
| CN104685884A (zh) | 用于混合视频编解码器的改进架构 | |
| CN103442228A (zh) | 从h.264/avc标准到hevc标准的快速帧内转码方法及其转码器 | |
| CN101742301B (zh) | 一种块模式编码方法及装置 | |
| CN100493191C (zh) | 具有低复杂度噪声消减的视频编码器及视频编码方法 | |
| KR100697516B1 (ko) | 3차원 웨이블릿 변환 기반의 동영상 코딩 방법 | |
| KR100711025B1 (ko) | 동영상 표준 부호화 방식의 성능 향상을 위한 잔여신호 필터링 방법 | |
| CN102196258B (zh) | 一种i帧编码方法及装置 | |
| Prasantha et al. | Performance evaluation of H. 264 decoder on different processors | |
| CN104602001A (zh) | 一种基于帧差图像的低码率视频编码方法 | |
| Hou et al. | Video Compression Based on Wavelet Transform and DBMA with Motion Compensation. | |
| CN115209141A (zh) | 视频编解码方法、装置、计算机可读介质及电子设备 | |
| KR20080051207A (ko) | 블록화 현상 제거 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20171220 Address after: 100083 Haidian District, Xueyuan Road, No. 35, the world building, the second floor of the building on the ground floor, No. 16 Co-patentee after: Vimicro Electronics Co., Ltd. Patentee after: Zhongxing Technology Co., Ltd. Address before: 100083, Haidian District, Xueyuan Road, Beijing No. 35, Nanjing Ning building, 15 Floor Co-patentee before: Vimicro Electronics Co., Ltd. Patentee before: Beijing Vimicro Corporation |
|
| CP01 | Change in the name or title of a patent holder | ||
| CP01 | Change in the name or title of a patent holder |
Address after: 100083 Haidian District, Xueyuan Road, No. 35, the world building, the second floor of the building on the ground floor, No. 16 Co-patentee after: Vimicro Electronics Co., Ltd. Patentee after: Mid Star Technology Limited by Share Ltd Address before: 100083 Haidian District, Xueyuan Road, No. 35, the world building, the second floor of the building on the ground floor, No. 16 Co-patentee before: Vimicro Electronics Co., Ltd. Patentee before: Zhongxing Technology Co., Ltd. |