CN1151662A - 用于消除dct编码的振铃现象的后滤波器 - Google Patents

用于消除dct编码的振铃现象的后滤波器 Download PDF

Info

Publication number
CN1151662A
CN1151662A CN96120377A CN96120377A CN1151662A CN 1151662 A CN1151662 A CN 1151662A CN 96120377 A CN96120377 A CN 96120377A CN 96120377 A CN96120377 A CN 96120377A CN 1151662 A CN1151662 A CN 1151662A
Authority
CN
China
Prior art keywords
value
pixel
amplitude
picture element
gradient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN96120377A
Other languages
English (en)
Other versions
CN1110961C (zh
Inventor
帕屈立克·威廉姆·德维尼
丹尼尔·查德瑞恩·格那那普瑞克塞姆
汤姆斯·詹姆斯·李科克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1151662A publication Critical patent/CN1151662A/zh
Application granted granted Critical
Publication of CN1110961C publication Critical patent/CN1110961C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/527Global motion vector estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Picture Signal Circuits (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Image Processing (AREA)

Abstract

一种视频信号编码/解码系统,通过采用后滤波器对解码数据进行各向异性扩散来减小振铃噪音,系统的实施例采用一种由动画专家协会(MPEG)开发的编码/解码技术。该后滤波器对单个的象素块进行处理,为每一个象素块指定单个边缘有效性门限值。如果边缘强度低于该门限值,则进行噪音消除,如果边缘强度高于所述门限值,则不进行噪音消除。

Description

用于消除DCT编码的振铃现象的后滤波器
本发明涉及一种高质量视频编码/解码系统,包括一个用于消除噪音现象的滤波器,更具体地说涉及一种各向异性扩散滤波器,它能够消除任何基于离散余弦变换(DCT)的视频解码系统中的振铃噪音。
众所周知,基于象素块离散余弦变换(象素块DCT)的图像压缩算法在一定的情况下会产生需要消除的噪音。根据整个编码系统的具体细节,上述产生噪音的情况会有所不同,在所述编码系统中,DCT仅仅是其中的一个部分。
一种近年来受到人们关注的视频压缩系统是由动画专家协会(MPEG)所建议的系统,该协会是属于国际标准组织(ISO)下的一个委员会。MPEG-2系统是由仿真模式编辑协会发表的题为“ MPEG-2视频”的论文所提出的,登载在ISO的文件ISO-IEC/13818-2:1995(E)上,本申请采用其有关MPEG-2视频信号编码和解码方法的教导作为背景技术。这一系统类似于名称为“三维图像压缩视频信号编码”的美国专利4,999,705号所述的条件移动压缩插值(CMCI)视频信号编码系统,本申请采用其有关视频编码技术作为背景技术。
MPEG在单个的系统中采用了若干熟知的数据压缩技术。这些技术包括移动压缩的预测编码、离散余弦编码(DCT)、自适应量化和可变长度编码(VLC)。在这些系统中,根据对取自输入图像的64个象素所组成的象素块进行离散余弦变换而获得的系数值来进行自适应量化步骤。
DCT系数是采用变化的分辨率来予以量化的,所述分辨率是由编码操作所产生的数据量的函数。在采用固定带宽频道的系统中,如果单个的图像帧产生了相对大量的编码数据,则有可能需要增大对连续图像帧所施加的量化步长(使之粗化),以便减小用于代表这些帧的编码数据量。这样,就能够通过固定带宽频道来传输在若干帧间隔中产生的平均数据量。当量化器对DCT系数进行粗化量化时,如果被编码的图像包括具有相对较少轮廓的对象,该对象的再现图像有可能产生不希望的量化畸变。这种畸变表现为对象轮廓的失真。
美国专利5,294,974和5,325,125中披露了MPEG编码器,本申请以其有关MPEG编码器的教导作为背景技术。
目前,MPEG-2解码器已经在市场上出售。1994年7月和1994年6月在SGS-Thomson Microelectronics(SGS汤姆森微电子)上刊登的“MPEG-2/CCIR601视频解码器”一文以及“IBM MPEG-2解码器芯片用户指南”一文分别介绍了两种这样的解码器。本申请以其有关MPEG-2解码器的教导作为背景技术。
一般说来,有两种需要消除的噪音现象,即阻塞和振铃(见Yuen M.和Wu H.,“数字视频信号压缩中的再现现象”,Proc.of SPIE,Vol.2419,1995年,pp.455-465,本申请以其关于阻塞和振铃噪音现象的教导作为背景技术)。阻塞仅仅发生在设定DC系数(亦即平均强度值)时,在非常低的数据率情况下最有可能发生。振铃发生在DCT系数,尤其是高频AC系数,的粗量化带来噪音的情况下。振铃与强边缘附近出现的噪音相关。在高质量系统(亦即采用低压缩比的系统)中,振铃是最容易发生的现象。由于逐帧之间的细微变化,振铃噪音在动画画面中以靠近边缘的局部闪烁形式被人们所察觉。这种类型的噪音被称为“蚊式噪音”。
高质量系统比低质量系统更为昂贵,但能够产生较少的噪音。在低质量系统中产生的占主导地位的噪音是阻塞噪音,而振铃噪音则主要出现在高质量系统中。在低质量系统中,人们已经作了大量的工作来减小阻塞效应,然而这些措施无法用来在高质量压缩系统中减小振铃噪音。
振铃现象出现在接近强边缘的平淡背景上。所述现象强于背景,但弱于边缘。因此,如果知道了局部边缘强度,就能够采用它来定义一个等级,凡是低于该等级的变化就被认为是不显著的。
可以采用被称为各向异性扩散的技术(见Perona P.和Malik J.,“采用各向异性扩散技术的尺度空间和边缘检测”,IEEE Trans.on PatternAnalasis and Machine Intellegence,Vol.12,1990,pp.629-639,本申请以其有关各向异性扩散的教导作为背景技术)来减小这种类型的噪音现象。各向异性扩散可以有选择性地平滑低于等级门限值K的变化,与此同时保持或者甚至增强高于该门限值的变化。
KDD R&D Labs已经开发了一种后滤波器,用于在卡拉OK设备上改善MPEG-1图像(参见Nakajima Y.,“用于抑制MPEG编码视频信号噪音的后处理算法”,日本IEICE技术报告,IE94-7,DSP94-7,1994mpp.45-51,本申请以其有关后滤波器的教导作为背景技术)。这种系统为了计算最佳局部噪音清除滤波器的线性最小平方评估而计算局部均方差。该滤波器是边缘保持型的,然而以一种明确而复杂的形式来处理边缘依赖性。KDD系统是高度面向MPEG的。它采用该编码方式的许多复杂细节以及由该方式予以处理的图像的统计数据。KDD系统的硬件成本十分昂贵。
已经发表了许多有关使图像更为清晰和增强图像的各向异性扩散算法的论文(见Saint-Marc P.,Chen J.,Medioni,“自适应平滑:一种用于早期版本的通用工具”,IEEE Trans.on PAMI,Vol.13,1990,pp.514-529;Alvarez L.,Lions P.,Morel J.,“采用非线性扩散II的图像选择性平滑和边缘检测”,SIAM J.数字分析,Vol.29,1990,pp.845-866;本申请采用其有关使图像更为清晰和增强图像的各向异性扩散算法的教导作为背景技术),然而其中几乎没有文献考虑将其技术应用于象素块DCT系统。EL-Fallah声称采用了各向异性扩散技术作为前滤波器,用于在进行压缩之前消除噪音(见El-Fallah A.,Ford G.,Algazi V.,Estes R,“采用图像平均曲率扩散的边缘和角部保持”,Proc.of SPIE,Vol.2421,1995,本申请以其有关各向异性前滤波器的教导作为背景技术)。它不是用作一个后滤波器。Osher和Rubin开发了一种与之紧密相关的“冲击滤波器”,但是没有在任何地方提及象素块DCT系统(见Osher S.,Rubin L.,“采用冲击滤波器的面向图形的图像增强”,SIAM J.数字分析,Vol.27,1990,pp.919-940,本申请以其有关冲击滤波器的教导作为背景技术)。
在各向异性扩散中,如果边缘强度高于小心定义的临界门限值K,就会禁止越过边缘进行噪音消除平均。这种禁止的平均的结果是一种边缘保留平滑,当区域边界被识别为高于上述门限值边缘时,就会消除区域内部的噪音并同时保持该区域。
上面所引用的Perona和Malik一文建议,对于具有静止图形的图像来说,将临界门限值设定为等于总梯度的90%,但是他们没有提供用于局部改变非静止图形的门限值的具体技术。上述所引用的El-Fallah等人的论文事实上表明,他们所采用的方案根本就不具有可调节的参数。
上面所述的已知技术表明,在噪音消除系统中存在一些困难。因此很明显,有必要提供一种各向异性后滤波器振铃噪音消除系统,它能够消除MPEG解码信号中的振铃噪音现象。
本发明提供了一种在视频信号编码/解码系统中采用的滤波系统,包括用于对输入视频信号进行编码、传输经过编码的数据、以及对数据进行解码和滤波的装置。该滤波系统接受由解码器产生的采用光栅扫描格式的解码数据块,并对它进行各向异性扩散,以便抑制振铃噪音现象。
通过结合附图对本发明进行详细说明,本发明的上述以及其他方面将变得更为清楚。
图1是采用本发明一种实施例的系统的方框图;
图2(a)(已知技术)是一种视频信号编码系统的方框图;
图2(b)(已知技术)是显示宏象素块结构的示意图;
图2(c)(已知技术)是显示图形段的示意图;
图2(d)(已知技术)是象素图,它显示了图2(a)所示编码器所采用的折线式扫描方式;
图3(已知技术)是一种示例视频信号解码系统的方框图;
图4是本发明的各向异性扩散滤波器的一种实施例的方框图;
图5(a)和5(b)是适合用于图4所示的本发明实施例的电路方框图;
图6(a)显示了图像的扫描行,它示出了图形元素(象素)在行中的相对位置;
图6(b)是电路方框图,该电路用于确定如图4、5(a)、5(b)所示电路的门限值;
图7(a)、7(b)是导率参数相对于梯度的曲线图,它们对高斯导率曲线与针对临界门限值分别为10和100的限幅直线近似曲线进行了比较;
图8是适合用于如图5(a)、5(b)所示电路中的导率常数的电路方框图;
图9是适合用于在图5(a)、5(b)所示电路中进行亮度处理的电路方框图;
附图10是适合用于在图5(a)、5(b)所示电路中进行色度处理的电路方框图。
一般说来,本发明的后滤波器是对经过编码、传输、和最终解码之后所获得的数据进行处理以生成象素块。在处理这些以光栅扫描格式提供的象素块时,后滤波器对每一象素块确定一个边缘有效性门限值,确定一个导率值,对象素块进行各向异性扩散以便平滑变量,从而消除低于门限值的振铃噪音现象,但同时保留或增强高于所述门限值的图形。换句话说,如果边缘强度大于门限值,边缘就不会受到噪音消除的影响。
尽管本发明是结合MPEG解码系统予以说明的,但是它适合于任何视频解码系统,只要这样的系统是对量化空间频率系数表示的数据进行解码。
图1是本发明一种实施例的系统方框图。其中,将高质量视频信号数据送到编码器1,该编码器采用一种MPEG编码算法对上述数据进行编码,以便对数据进行压缩。编码器1产生图像帧,将数据变换成块格式,并进行离散余弦变换(DCT)压缩。将经过压缩之后的MPEG数据流通过一个传输通道5送到一个接受装置。上述传输系统和通道5可以是地面或卫星传播通道,也可以是电缆传输通道。当接受装置接收到上述数据流时,采用一个MPEG解码器9进行解码。该解码器9采用一个反离散余弦变换(IDCT)处理器和一个移动补偿处理器来获得用于显示的象素块。然而,在显示之前,需要首先将这些象素块转换成为光栅扫描数据,并将该光栅扫描数据送到一个各向异性扩散滤波器13。该滤波器13能够消除图形中的振铃噪音现象。当光栅扫描数据经过上述各向异性扩散滤波器13之后,将作为高质量数字视频信号予以显示。
在图2(a)中显示了已知编码器的实例。在这样的系统中,由摄像机(图中未示)或者其他视频信号源以光栅扫描顺序提供用于表述一个图像的红色(R)、绿色(G)、和蓝色(B)信号。这些信号由一个已知彩色矩阵电路104予以处理,产生一个亮度信号(Y)和两个色差信号(B-Y)和(R-Y)。上述色差信号(B-Y)和(R-Y)由相应的低通滤波器106和108予以处理。示例的滤波器106和108对相应的色差信号进行空间滤波,以便产生一个信号,该信号在水平和垂直方向上各具有亮度信号的一半的空间分辨率。
上述亮度信号Y和两个经过空间滤波的色差信号B-Y’和R-Y’被送到象素块转换器110。该转换器110可以包括诸如一个已知的双端口存储器,将信号Y、(B-Y)’、和(R-Y)’由光栅扫描格式转换为块格式。
在块格式下,每一帧图像由一系列象素块来表示,其中每一象素块包括64个象素,这些象素以每行8个象素和每列8个象素排列成为一个矩阵。象素块转换器110将若干个连续的象素块组合成为一个被称为宏象素块的数据结构。图2(b)显示了一个宏象素块330,这些象素值用8位数字值来表示。象素块转换器110每一次将一个块的象素值送到减法器112。
减法器112从象素块转换器110所提供的宏象素块的相应象素块中减去由移动补偿电路134所提供的宏象素块的相应象素块。减法器112产生的象素块代表了经过动画预测性差分编码的宏象素块。将产生的象素块送到DCT处理器114。DCT处理器114对6个具有差分象素值的块中的每一个进行离散余弦变换,将它们转换成为6个相应的DCT系数块。然后,采用如附图2(d)所示的折线扫描,将这些块重新排列成为一个由64个系数组成的直线数据串。
对于任何块来说,上述系数中的第一个代表象素块中象素的直流(DC)空间频率分量,其余的系数代表空间频率的逐个高次分量。
将DCT处理器114提供的系数值送到量化器116,该量化器将每一个系数值转换成为具有指定位数的二进制值。一般说来,由于人眼对具有较低空间频率的图像成分比具有较高空间频率的图像成分更为敏感,因此较之高阶系数而言,对于低阶系数采用更多的位数。例如,可以通过采用相应的不同值来分解经过线性化之后的象素块中的每一个系数值实现上述操作,该不同值与系数的频率成正比。包含这些数值的阵列可以与信号一起传输,以便在信号的传输终点解除对信号的量化。
此外,也可以根据下面将要介绍的量化控制电路122所提供的数值来改变为每一个系数所指定的位数。可以对每一个宏象素块施加上述数值中的一个,以便在通过与频率有关的数值阵列来分解系数之前或之后,采用这些数值来分解宏象素块中每一个系数值。量化器116产生了一个数字值串,它被送到可变长度编码器118和反向量化器124。
上述可变长度编码器118采用例如幅值扫描宽度Huffman型编码对数据进行编码。可变长度编码器118产生的信号被送到一个先进先出(FIFO)缓冲器120,该缓冲器存储该数值,以预定的速率传送该数值作为信号输出。
在固定带宽频道应用场合中,量化控制电路122通过控制量化器116施加的量化步长来补偿产生被编码信息的变化速率。根据各个有关缓冲器存满程度的信号,上述量化控制电路122使得量化器116有条件地为DCT处理器114提供的系数值提供不同的量化分辨率。当缓冲器存储了更多的数据时,控制电路122就让量化器116对系数值提供不断粗化的量化分辨率。
这样,当FIFO缓冲器120存储了不断增多的数据时,量化器116通过更为粗化地量化代表被接受图像的DCT系数来产生较少位的编码数据。当数据最终被解码并准备予以显示时,上述粗化就会导致在数据中产生振铃噪音现象。
在传输数值之后,将它们接受并进行解码。图3显示了一种典型的解码器。将捕获的数据送到可变长度解码器(VLD)123,它进行与附图2(a)所示的可变长度编码器118相反的可变长度编码操作。此外,VLD123提取出经过编码的移动向量信息,并将它送到图形补偿处理器134。固定长度编码数据块被送到一个反向量化器124,它进行与量化器116相反的操作,以便产生代表被编码图像的每一象素块的近似DCT系数。
对应于DCT象素块8行(一个象素块)高度的一列,将与DCT块边界垂直对齐的8行定义为一个图像片段。每一图像片段的象素块数目等于图片宽度与DCT块宽度的比值。这样,例如480行的MPEG编码图片包括60图像片段,每一个图像片段的高度为8行。附图2(c)显示了对应于图片350和DCT宏象素块360的图像片段370。
将反向量化器124产生的系数值块送到反离散余弦变换(IDCT)处理器126。该处理器进行反向离散余弦变换操作,以便形成图像象素的再现块或者经过差分移动补偿的编码象素值。
这一再现块代表了移动补偿的象素,通过IDCT电路126,与移动补偿单元134产生的预测块一起送到加法器128。该移动补偿单元134根据从VLD处理器123所接受到的信息,提供需要与多帧存储器130提供的解码IDCT块相组合的数据。该加法器128对上述数值进行相加,产生经过解码的象素值,将这样的象素值存储在帧存储器130中,以便进行后处理或显示。象素值的没有经过移动补偿的象素块被存储在存储器130中,不作改变。从存储器130中以光栅扫描顺序提供图像数据。
附图4显示了本发明一种实施例的各向异性扩散滤波器的方框图。将以光栅扫描顺序排列的MPEG解码数据送到该滤波器。对光栅扫描中的象素计算出各个边缘有效性门限值20,它对应于由MPEG解码器所处理的每一个象素数据块。在确定边缘有效性门限值20之后,滤波器进行扩散处理30。对于给定的某个象素来说,采用其4个相邻的象素来实现扩散,每一个相邻象素提供自己的导率值。所述导率值是根据ΔI(相邻象素与中心象素之间的强度差值)和K(包含中心象素的象素块的边缘有效性门限值)来计算的。在进行扩散之后,滤波器送出所获得的象素值,以便予以显示。
图5(a)和5(b)显示了适合于附图4所示本发明实施例使用的电路方框图。每一个输入帧由一个亮度帧Y和两个色度帧Cr和Cb组成。对所述亮度帧与所述色度帧彼此独立地进行处理。附图5(a)是适合用于进行单次各向异性扩散操作的电路,而附图5(b)是适合用于进行多次操作的电路。
本发明的滤波器对需要处理的数据进行多次处理。在对数据进行第一次滤波之后,将数据送回到滤波器,使之第二次通过滤波器,因而能够进一步地消除噪音。
一般说来,象素块的梯度是选取边缘有效性门限值K的基础。如果象素块包含一个高对比度边缘,那么沿着该边缘的梯度值就较大。较强的边缘在通过一个基于DCT的压缩系统之后产生振铃,而且振铃的幅度会远小于边缘的幅度。因此,根据实际边缘强度来设定边缘有效性门限值将导致各向异性扩散,以消除振铃。然而,简单地将临界边缘有效性门限值K设定为等于一个象素块之内的最大梯度将会导致过份的平滑化。已发现最大梯度值的0.5倍能够提供适度的平滑化。因此,应当根据下面的公式1来确定K值:
   K(块)=α×(0.5×实际最大梯度值)                  (1)
   其中α=0.75
系数0.75是实验系数,用于改善导率函数(下面将予以讨论)与梯度值之间的匹配。
上述规则适合用于黑白图像,采用下述方法能够将它扩展到彩色图像。
彩色图像系统将彩色视频信号当做正交信号(例如R、G、B或者Y、Cr、Cb)的组合来予以处理。采用彩色矩阵来实现在这些正交坐标系统中的变换。彩色图像作为梯度的边缘的直接扩展将导致按照公式(2)将梯度视作三色梯度的欧氏幅值:
梯度(彩色)=平方根[(R梯度)2+(G梯度)2+(B梯度)2]      (2)
这一规则由于彩色次采样而变得更为复杂,上述彩色次采样在电视图像技术中经常采用。YUV(Y、Cr、Cb)彩色坐标系统在电视系统中是最为常见的。每一帧图像由一个亮度帧Y和两个色度帧Cr、Cb组成。试验表明,U和V可以采用因子2来水平地予以采样而不至于产生会被察觉的现象。采用这种次采样的图像被称为YUV422图像。
为了计算YUV422图像的彩色梯度,理想的方式是通过直接补充采样或者插值方式来重新建立失去的采样。然后对经过补充采样的图像进行各向异性扩散滤波(两倍于U和V的YUV 422硬件费用)。否则,U和V的尺度门限值就会按照全尺度来予以计算,然而却错误地用于半尺度U和V数据。本发明以彼此独立的方式来处理Y、U、V数据,因而不需要进行补充采样。在每一种情况下,都将积累临界门限值K的统计值,然后在具有适当大小的DCT象素块中予以使用。
绝大多数文献都采用熟知的Sobel边缘算子对来计算梯度的大小。这种计算方法采用8个最为接近的相邻象素的数据来计算梯度的X分量和Y分量。然后通过计算其平方和的平方根将上述分量组合起来。然而,采用这种梯度计算方法显得过于昂贵了。
本发明采用较为经济的形态梯度。如图6(b)所示,形态梯度采用中心象素及4个与之最为靠近的相邻象素,仅仅需要进行6次比较和一次减法,这一点将在下面结合图6(b)予以说明。在通常情况下,形态梯度的缺点是将一个象素宽度的边缘扩展为两个象素宽度。然而,对于各向异性扩散来说,上述缺点相反成了优点。位于一个边缘两侧的象素被标志为具有较高梯度。这就增强了禁止扩散跨过边缘的所需效果,当边缘跨过DCT象素块边缘时尤其如此。
扩散的各向异性由一个局部变量来予以控制,该变量类似于热导率或电导。这一参数g是一个单调递减函数。上述所引用的Perona和Malik一文和其他文献提供了两个这样的函数:高斯指数函数和拉普拉斯函数。上述文献指出,高斯指数函数对于保持高对比度边缘来说具有更好的效果。El-Fallah认为,梯度的倒数应当视作导率(见El-Fallah A.和FordG.,“基于非均匀扩散和微分几何的非线性自适应图像滤波”,Proc.ofSPIE,Vol.2182,1994,PP.49-63,本申请引用该文中关于导率计算的论述作为背景技术。)
本发明采用高斯函数,因为该函数经过很少次数的迭代(例如两次),就能够提供有效的扩散。高斯导率的公式如下:
对于每一次迭代来说,针对每一个象素相邻的4个象素中的每一个来计算导率G。通过查表或多项式近似法来进行精确计算会过于昂贵,因为K和梯度都是变量(然而,在本发明的第二中实施例中采用了查表方法,下面将结合图9和10进行说明)。因此,本发明采用限幅直线近似法来取代高斯函数。通过弯曲点的该直线在弯曲点上具有与高斯函数相同的斜率。对高直线的限幅使得G保持在如下的范围之内,即:0≤g≤1。可以采用下面的公式4,根据K计算出g:
g(梯度)=C1+(C2/K)×梯度    (4)
图7(a)和7(b)所给出的曲线表明,这是一种良好的逼近。此外,这种方法将用于计算g的硬件简化为:第一,将梯度与每象素块的一个参数相乘;第二,与一个常数相加;以及第三,对所获得的结果进行限幅。
为了说明这一多次滤波器的工作原理,首先是结合附图5(a)对单次滤波器的工作原理进行说明,然后再结合附图5(b)来说明怎样将一个单次滤波器改变成为一个多次滤波器。在附图5(a)中,亮度帧由延迟部件207延迟一行时间间隔(1H),然后由(1H)延迟部件209进行第二次延迟。将延迟部件207和209提供的信号以及原始Y信号送到梯度计算器210,以便计算出边缘有效性门限值K。此后,由CaLcC2/k单元215计算出导率值C2/k。
将该数据送到一个亮度处理器220进行处理。送到上述处理器220的输入信号包括由CaLcC2/k单元215产生的导率常数C2/k,FIFO缓冲器206所产生的输出信号,由上述FIFO缓冲器206产生并经过延迟部件212延迟一行时间间隔(1H)的输出信号,以及由上述FIFO缓冲器206产生并由延迟部件214延迟第二个一行时间间隔(1H)的输出信号。
色度帧Cr和Cb由多路调制器260混合在一起。多路调制器260的输出信号由延迟部件267延迟一个水平行时间间隔(H/2),然后再由延迟元件269第二次延迟一个水平行时间间隔(H/2)。应当注意的是,色度信号每一行的采样数目为亮度信号采样数目的一半。因此,采用H/2延迟部件的延迟行将使得色度信号延迟一个水平行时间间隔。多路调制器260也存储在一个FIFO缓冲器补偿延迟部件266中,以便进行进一步处理。由两个延迟部件267和269所提供的信号以及多路调制器265所提供的原始输出信号被送到一个梯度计算器270,以便计算出边缘有效性门限值。此后,由CaLcC2/k计算器275计算出导率常数C2/k。
随后,将数据送到一个色度处理器280进行处理。送到处理器280的输入信号包括由CaLcC2/k单元275产生的导率常数C2/k,FIFO缓冲器266所产生的输出信号,由上述FIFO缓冲器266产生并经过延迟元件272延迟一行时间间隔(1H)的输出信号,以及由上述FIFO缓冲器266产生并由延迟部件274第二次延迟一行时间间隔(1H)的输出信号。
适当地选取FIFO缓冲器和多路调制器能够使得电路以两倍象素时钟频率运行,以便进行两次各向异性扩散。如果后滤波电路以两倍时钟频率予以驱动,那么只要增加适当的循环电路,就有时间进行两次后滤波。这种再循环电路如附图5(b)所示。对于亮度帧来说,它包括一个速率变换电路(由一次象素时钟变换到两次象素时钟),该变换电路包括一个FIFO缓冲器200;一个再循环通路(将Y处理输出送到多路调制器205);一个多路调制器205,用于选择第一次通过的数据或第二次通过的数据;以及由FIFO缓冲器225构成的最终频率变换器,用于收集第二通道的输出并将它转换回一次象素时钟。对于色度帧来说,再循环电路包括频率变换和FIFO缓冲器250和255;一个再循环通路(将Cr和Cb处理输出送到多路调制器265);一个多路调制器265,用于选择第一次通过的数据或第二次通过的数据;由FIFO缓冲器285和290构成的最终频率变换器,用于收集第二通道的输出并将它转换回一次象素时钟;以及多路调制器295,用于将上述Cr和Cb信号合并成为一个输出信号。
图6(b)显示了一种梯度电路的方框图,该电路适合用于确定如图5(a)、5(b)所示电路中的边缘有效性门限值。如图6(a)所示的图像扫描行的象素由图6(b)所示的电路进行处理。在图6(a)中,OH行中的象素S代表比当前行(1H)低一个水平行的象素,2H行中的象素N代表比当前行(1H)高一个水平行的象素。当前行1H中的当前象素用标记X来表示。象素E和W分别是紧邻当前行1H中的当前象素X之前和之后的象素。
象素S和N分别存储在锁存器609和611中,然后由比较器610进行比较。具有较大幅值的象素由多路调制器615提供,具有较小幅值的象素由多路调制器620提供。同时,采用一对延迟器604和605来分离象素E和W,它们在1H行中分别紧邻当前象素X之前和之后。由比较器625对这两个象素进行比较,具有较大幅值的象素由多路调制器630提供,具有较小幅值的象素由多路调制器635提供。比较器640对多路调制器615提供的较大象素幅值和多路调制器630提供的较大象素幅值进行比较,这两个幅值中的较大者由多路调制器645提供。比较器650对多路调制器615提供的较小象素幅值和多路调制器635提供的较小象素幅值进行比较,这两个幅值中的较小者由多路调制器655提供。一个补偿延迟部件663以适当的定时将当前象素X送到比较器660和670,以便与其周围的相应最大象素值和最小象素值相匹配。由多路调制器645提供的最大周围象素幅值在比较器660中与与当前象素的幅值进行比较,具有更大幅值的象素由多路调制器665提供。由多路调制器655提供的最小象素幅值在比较器670中与当前象素X进行比较,具有更小幅值的象素由多路调制器675提供。这样,在5个被比较的象素(S、X、N、E、W)中,最大的幅值由多路调制器665提供,最小的幅值由多路调制器675提供。这两个数值在减法器680中相减,从而提供了最终的结果,它就是当前象素的形态梯度。图8显示了怎样来利用上述结果:在图6中计算出来的梯度(在图8中用标记802表示)被送到max部件808的一个输入端,其余的输入端用于接受DCT块的运行最大值。在确定该象素块中所有象素的最大梯度之后,将最后锁存的最大值(在寄存器810中)除以2(亦即朝着加权小的方向移动一位),以便为这一象素块产生边缘有效性门限值k。
本申请的发明人确定了公式(4)中所述的常数C1和C2分别为1.21和0.85576。这样,上述公式(4)就简化成了下述公式(5):
      g(梯度)=1.21-(0.85576/K)×梯度        (5)
对于每一个被转换成为光栅扫描数据并随后予以处理的象素块来说,C1和C2的数值保持不变。然而,对于各个象素块来说,K值是变化的。图7(a)和7(b)显示了高斯导率曲线以及分别在K=10和K=100处以限幅直线表示的近似曲线。
图8显示了确定如图5(a)和5(b)所示电路中的导率常数C2/k的电路方框图。在max模块801中,由图6所示的梯度计算器802确定的当前象素的梯度被送到max比较器808。将当前象素块的当前象素列的最大梯度通过用于存储runmax(列)的runmax存储器送到max比较器808。max比较器808对当前象素的梯度与runmax(列)进行比较,并提供较大的值。在时钟脉冲0-6处,将比较的结果送到多路调制器804。
一个地址发生和定时电路850控制在电路中的寻址、读出、和写入。在象素块的一列中有8个时钟脉冲(0-7)。
由比较器808进行比较的结果在经过一个时钟脉冲的延迟部件810之后也被送到多路调制器812,该多路调制器每经过8个象素列就将runmax(列)置零。多路调制器812在0时钟脉冲处要么提供0,要么提供存储在静态RAM 820中的runmax(列)。在每8列象素的时钟脉冲1,比较器808的比较结果也被存储在RAM 820中。这一数值是象素块的最大梯度Kmax(块)。
所示的RAM 820是单端口型的,因此采用延迟来实现读出和写入。在时钟脉冲0和1将数据写入RAM 820,而在时钟脉冲6和7将数据读出RAM820。对于宽度为W个象素的图像来说,RAM820具有2×(W/8)字节的存储位置,其中,W/8的存储位置用于存储runmax(列),另一个W/8的存储位置用于存储Kmax(块)。地址发生器850使得多路调制器812在开始一个新的象素块之前将0置于runmax中。它也使得寄存器816在每个象素块的终点将Kmax值随着时钟脉冲送出。采用这种方式,即使处理是是以光栅扫描次序来进行的,但是通过将部分结果加入到正确的象素块并将正确的K值施加到每一个象素块以便进行滤波,就能够精确地记录所蕴涵的象素块结构。RAM820具有足够数目的存储位置,以便记录一个片段中的所有DCT象素块。
在时钟脉冲6,将runmax(列)从RAM820中读出并在延迟一个时钟脉冲之后送到多路调制器804,以便腾出runmax存储区域806。在时钟脉冲7,将Kmax(块)送到检查模块830。该检查模块830接受Kmax(块),并将它送到ROM834,以便确定导率常数C2/k。该数值用于随后的亮度和色度处理,对此下面将作说明。
各向异性扩散的实质是一种迭代处理。经过每一次迭代,使边缘得到细微的锐化,使平坦区域得到细微的平滑。守\恒规律对这一过程施加了一个自然限制,即在一次迭代中扩散给一个象素周围的4个象素的强度总和不可能超过其自身的强度。因此平均而言,提供给任何一个周围象素的强度不可能超过其自身强度的四分之一。这就是下述公式(6)的总体扩散公式中给出λmax=1/4的数字稳定性条件的由来:
   I(t1)=I(t0)+{∑(Gi×ΔIi)                 (6)
     其中:ΔIi=(Ii-Icenter)    i=4
在这一限制中,扩散速率可以通过设定K来予以控制。从本质上说,在强的边缘附近允许实现更多的扩散(平滑)。
对于图像段来说,已知文献的最大兴趣在于朝着其稳定终点的各向异性扩散过程。上述所引用的Alvarez等人的报告得出的结论是采用较少次数的迭代。在本发明中,已经确定对于λ=1/4来说,各向异性扩散的两次迭代能够实现全部有用的噪音消除。上述所引用的Saint-Marc等人的论文指出,最为有用的边缘增强出现在几次迭代中,而噪音消除则需要更多的迭代。在本发明中,K的局部自适应使得某些噪音消除能够在少数几次迭代中实现。
本发明发现,在第二次迭代中将K缩小一个因子2,亦即使K2=0.5K1,那么两次迭代就能够获得最好的结果。保持K不变或者增大K将会导致过份的模糊。在自适应K值时,采用大于0.5的因子会有效地消除进一步的扩散,使得进行第二次滤波变得无意义。因此,在本发明的一个实施例中,在进行第一次扩散迭代之后(例如图5(a)和5(b)中的部件205-220),将第二次扩散迭代中的K值减小一个因子2。
图9是适合在附图5(a)、5(b)所示电路中用于进行亮度处理的电路方框图。这一电路包括用于计算导率值G的硬件。对4组不同的输入数据N、E、E、和S进行相同的处理,它们分别是紧邻当前象素X上方的象素、紧邻当前象素X右侧的象素、紧邻当前象素X左侧的象素、以及紧邻当前橡树X下方的象素。对象素S、E、W、和N的处理分别如图中方框910、930、940、和950所示。
为了处理象素S,在OH(象素S或者紧邻当前象素X下方的象素)存储在锁存器911中之后,将它送到减法器913,该减法器从象素S中减去锁存在锁存器912中的当前象素X。这样就获得了公式(6)中所述的ΔIi项。由一个绝对值电路914来确定上述ΔIi的绝对值,并将它存储在FIFO缓冲器917中。将附图8所示电路所获得的导率常数C2/k与ΔIi的绝对值相乘,然后采用减法器920从导率常数C1中减去上述相乘后的乘积,从而获得公式(6)中所述的gi项。在电路922中对上述结果进行限制,使g值保持在0≤g≤1的范围之内。这一操作是根据公式(4)取g的近似值。乘法器924将上述经过限幅的数值与存储在FIFO缓冲器917中的ΔIi相乘。
在本发明的第二实施例中,采用ROM915来取代部件917、918、920、922、和924。发明人发现,将C2/k表示为一个4比特数值,将AIi的绝对值表示为一个8比特数值所获得的噪音消除结果在公式(3)给出的计算的0.1dB之内。这样,总地说来需要12比特,因而采用一个4K的ROM。根据公式(6)来对ROM915的值进行编程。在本发明的这一实施例中,可以根据公式(3)来确定gi的数值。在这种情况下,送到ROM915的C2/k输入值可以由经过近似量化的输入值K来取代。
对象素E、W、N的处理与上述处理相同。
在获得对4个周围象素的任何一个的gi×ΔIi项之后,在加法电路960中对所有的gi×ΔIi项相加。其中加法器962对象素N和E的gi×ΔIi项进行相加,加法器964对象素W和S的Gi×ΔIi项进行相加。采用加法器966来加入中心象素X,它代表了公式(6)中的I(t0)项。所有上述各项由加法器968进行相加,然后予以输出。
附图10是适合于在附图5(a)、5(b)所示的电路中进行色度处理的电路方框图。这一电路进行的处理与附图9所示电路的处理相似。时钟控制器994控制该电路的定时。
当前象素X被存储在FIFO缓冲器992中,位于当前象素X周围的4个象素(亦即紧邻当前象素X上、下、右、左的象素)被送到多路调制器980。由减法器982从中减去当前象素。这一减法获得了公式(6)所述的ΔIi项。由一个绝对值电路983来计算ΔIi项的绝对值,并存储在FIFO缓冲器984中。由附图8所示查看模块获得的导率常数C2/k与上述ΔIi项的绝对值相乘,然后由减法器987从导率常数C1中减去上述相乘的乘积,获得公式(6)中的gi项。这一结果然后由电路983限幅。限幅后的值由乘法器989与存在FIFO缓存器984中的ΔIi相乘。然后将gi×ΔIi项由加法器与存在FIFO缓存器992中的当前象素X(代表等式(6)中的I(t0)项)相加并输出。在本发明的实施例中,ROM985代替了部件984、986、987、988、和989。
虽然本发明已应用于MPEG和DVC压缩,由于它以光栅扫描格式在解码数据上操作,所以仍可用于对采用量化空间频率系数编码的视频数据进行解码的任何系统。
本发明是结合上述实施例和附图进行叙述的,但是,本发明技术领域内的一般技术人员可根据本发明的原理对本发明的实施例进行修改和变型,因此,本发明的内容享受权利要求的保护。

Claims (23)

1.一种用于视频信号解码系统的装置,该系统能够以数字方式对采用量化空间频率分量进行压缩之后的数据值进行解码,该系统包括能够在图像重现后抑制噪音的范围的滤波部件,该装置的特征在于包括:
用于接受经过解码后的数据值的装置,该数据值表征了图像帧的一部分;以及
各向异性扩散滤波装置,用于对接受的数据值进行滤波,以便有选择性地压缩其数值小于一个门限值的信号边缘分量。
2.根据权利要求1所述的装置,其中所述门限值是所述图像帧的所述部分中的最大梯度值的一个预定部分。
3.根据权利要求2所述的装置,其中所述的各向异性扩散滤波装置进一步包括一个根据导率值对所述各向异性扩散滤波装置进行控制的装置,该导率值是由图像帧的所述部分中的最大梯度值来确定的。
4.根据权利要求3所述的装置,其中所述导率值是通过一个限幅直线近似来确定的。
5.根据权利要求4所述的装置,其中所述导率值是采用下述公式来确定的:
                g(梯度)=C1+(C2/K)×梯度
其中“g”为导率值,“梯度”为最大梯度值,“K”为门限值,“C1”和“C2”为常数。
6.根据权利要求5所述的装置,其中C1等于1.21,C2等于-0.85576。
7.根据权利要求2所述的装置,进一步包括:
比较器,用于对当前象素的幅值与4个紧邻象素的相应幅值进行比较,以便确定最大幅值和最小幅值;以及
减法器,用于从所述最大幅值中减去所述最小幅值,以便确定所述最大梯度值。
8.根据权利要求1所述的装置,其中所述的各向异性扩散滤波装置包括第一各向异性扩散滤波器和第二各向异性扩散滤波器。
9.根据权利要求8所述的装置,其中所述滤波装置进一步包括用于将所述门限值减小一个因子2,以便供第二各向异性扩散滤波器使用的装置。
10.根据权利要求1所述的装置,其中滤波是根据下面的公式进行计算的:
               I(t1)=I(t0)+{∑(gi×ΔIi)}
其中“I(t1)是经过滤波后的数值,“λ”是数字稳定性条件,“gi”是当前象素的导率值,“ΔIi”是当前象素与周围象素之间的幅值差,“I(t0)”是当前象素的幅值。
11.根据权利要求1所述的装置,其中滤波是采用只读存储器(ROM)实现的,该ROM依据下述公式来编程:
                 I(t1)=I(t0)+{∑(gi×ΔIi)}
其中“I(t1)是经过滤波后的数值,“λ”是数字稳定性条件,“gi”是当前象素的导率值,“ΔIi”是当前象素与周围象素之间的幅值差,“I(t0)”是当前象素的幅值。
12.一种在以数字方式对采用量化空间频率分量予以压缩的数据值进行解码的视频信号解码系统中对图像再现之后抑制噪音范围的方法,
所述方法包括:
a).接受经过解码后的数据值,该数据值表征了图像帧的一部分;以及
b).对接受的数据值进行各向异性扩散滤波,以便有选择性地压缩其数值小于一个门限值的信号边缘分量。
13.根据权利要求12所述的方法,其中所述门限值是图像帧的所述部分中的最大梯度值的一个预定部分。
14.根据权利要求13所述的方法,其中所述的步骤b)进一步包括一个根据导率值对所述各向异性扩散滤波装置进行控制的步骤,该导率值是由图像帧的所述部分中的最大梯度值来确定的。
15.根据权利要求14所述的方法,其中所述导率值是通过一个限幅直线近似确定的。
16.根据权利要求15所述的方法,其中所述导率值是采用下述公式来确定的:
               g(梯度)=C1+(C2/K)×梯度
其中“g”为导率值,“梯度”为最大梯度值,“K”为门限值,“C1”和“C2”为常数。
17.根据权利要求16所述的方法,其中C1等于1.21,C2等于-0.85576。
18.根据权利要求13所述的方法,其中所述的最大梯度值是根据如下步骤确定的:
对当前象素的幅值与4个紧邻象素的相应幅值进行比较,以便确定最大幅值和最小幅值;
从所述最大幅值中减去所述最小幅值,以便确定所述最大梯度值。
19.根据权利要求12所述的方法,其中所述的步骤b)进一步包括采用第一各向异性扩散滤波器和第二各向异性扩散滤波器对所接受的数据值进行滤波的步骤。
20.根据权利要求19所述的方法,其中所述步骤b)进一步包括将所述门限值减小一个因子2,以便供第二各向异性扩散滤波器使用的步骤。
21.根据权利要求12所述的方法,其中滤波是根据下面的公式来进行计算的:
               I(t1)=I(t0)+{∑(gi×ΔIi)}
其中“I(t1)是经过滤波后的数值,“λ”是数字稳定性条件,“gi”是当前象素的导率值,“ΔIi”是当前象素与周围象素之间的幅值差,“I(t0)”是当前象素的幅值。
22.根据权利要求1所述的装置,其中所述的各向异性扩散滤波是采用只读存储器(ROM)来实现的。
23.根据权利要求22所述的方法,其中所述ROM依据下述公式来编程:
               I(t1)=I(t0)+{∑(gi×ΔIi)}
其中“I(t1)是经过滤波后的数值,“λ”是数字稳定性条件,“gi”是当前象素的导率值,“ΔIi”是当前象素与周围象素之间的幅值差,“I(t0)”是当前象素的幅值。
CN96120377A 1995-10-20 1996-10-21 用于消除dct编码的振铃现象的滤波装置和方法 Expired - Fee Related CN1110961C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US08/546,049 US5819035A (en) 1995-10-20 1995-10-20 Post-filter for removing ringing artifacts of DCT coding
US546049 1995-10-20
US546,049 1995-10-20

Publications (2)

Publication Number Publication Date
CN1151662A true CN1151662A (zh) 1997-06-11
CN1110961C CN1110961C (zh) 2003-06-04

Family

ID=24178647

Family Applications (1)

Application Number Title Priority Date Filing Date
CN96120377A Expired - Fee Related CN1110961C (zh) 1995-10-20 1996-10-21 用于消除dct编码的振铃现象的滤波装置和方法

Country Status (6)

Country Link
US (1) US5819035A (zh)
EP (1) EP0769878B1 (zh)
JP (1) JP4004089B2 (zh)
KR (1) KR100249407B1 (zh)
CN (1) CN1110961C (zh)
DE (1) DE69631108T2 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1324528C (zh) * 1997-07-16 2007-07-04 三星电子株式会社 用于对图像数据进行滤波的方法
CN1330187C (zh) * 2002-07-24 2007-08-01 皇家飞利浦电子股份有限公司 用于减少图像中块状假像的数字滤波器
CN100342398C (zh) * 2003-06-06 2007-10-10 Ge医疗系统环球技术有限公司 图像处理方法和设备
CN100394767C (zh) * 2003-10-24 2008-06-11 松下电器产业株式会社 像素排列装置、固态图像感应装置以及照相机
CN101123682B (zh) * 2006-08-11 2011-06-22 松下电器产业株式会社 可减少图像振铃噪声的方法、装置及集成电路
CN101438594B (zh) * 2006-04-21 2011-09-28 史诺有限公司 图像分析

Families Citing this family (116)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6389177B1 (en) 1996-07-02 2002-05-14 Apple Computer, Inc. System and method using edge processing to remove blocking artifacts from decompressed images
US6496605B1 (en) * 1996-08-02 2002-12-17 United Module Corporation Block deformation removing filter, image processing apparatus using the same, method of filtering image signal, and storage medium for storing software therefor
JP3800704B2 (ja) * 1997-02-13 2006-07-26 ソニー株式会社 映像信号処理装置及び方法
KR100219628B1 (ko) * 1997-02-15 1999-09-01 윤종용 루프필터링 방법 및 루프필터
MY129589A (en) * 1997-02-28 2007-04-30 Matsushita Electric Ind Co Ltd Motion picture converting apparatus
DE69720192T2 (de) * 1997-05-30 2003-12-04 Stmicroelectronics S.R.L., Agrate Brianza Nachverarbeitungsmethode zur Verringerung von Artefakten in blockweise kodierten digitalen Bildern, und Vorrichtung zur Verwendung der Methode
US6072591A (en) * 1997-06-30 2000-06-06 Xerox Corporation Sum and difference error diffusion
US6370632B1 (en) 1997-11-18 2002-04-09 Intrinsity, Inc. Method and apparatus that enforces a regional memory model in hierarchical memory systems
US6260131B1 (en) * 1997-11-18 2001-07-10 Intrinsity, Inc. Method and apparatus for TLB memory ordering
JP4186242B2 (ja) * 1997-12-26 2008-11-26 ソニー株式会社 画像信号処理装置及び画像信号処理方法
JPH11234668A (ja) * 1998-02-13 1999-08-27 Sony Corp 映像符号化装置
US6014233A (en) * 1998-06-09 2000-01-11 Xerox Corporation Error diffusion for color images with semi-vector quantization
US6463102B1 (en) * 1998-09-11 2002-10-08 Harmonic, Inc. Digital video compressor with border processor
WO2000042778A1 (en) * 1999-01-15 2000-07-20 Koninklijke Philips Electronics N.V. Sharpness enhancement
US6574374B1 (en) * 1999-04-14 2003-06-03 Intel Corporation Enhancing image compression performance by morphological processing
KR100296596B1 (ko) * 1999-07-14 2001-07-12 윤종용 4방향 일차원 고역 통과 필터링에 의한 윤곽선 강조 방법
JP2001045336A (ja) 1999-07-29 2001-02-16 Matsushita Electric Ind Co Ltd ノイズ検出装置、ノイズ検出方法、信号処理装置および信号処理方法
US6721457B1 (en) * 1999-08-27 2004-04-13 Hewlett-Packard Development Company, L.P. Method for enhancing digital images
KR100675498B1 (ko) * 1999-09-28 2007-02-05 코닌클리케 필립스 일렉트로닉스 엔.브이. 필터링 장치 및 방법
US6714992B1 (en) * 2000-02-25 2004-03-30 Navic Systems, Inc. Method and system for embedded network device installation
US7392281B1 (en) 2000-02-25 2008-06-24 Navic Systems, Inc. System and method for providing guaranteed delivery of messages to embedded devices over a data network
US7203234B1 (en) 2000-03-31 2007-04-10 Sharp Laboratories Of America, Inc. Method of directional filtering for post-processing compressed video
US6707940B1 (en) 2000-03-31 2004-03-16 Intel Corporation Method and apparatus for image segmentation
US6707952B1 (en) 2000-05-30 2004-03-16 Sharp Laboratories Of America, Inc. Method for removing ringing artifacts from locations near dominant edges of an image reconstructed after compression
US7440635B2 (en) * 2000-05-30 2008-10-21 Sharp Laboratories Of America, Inc. Method for removing ringing artifacts from locations near dominant edges of an image reconstructed after compression
WO2002023915A1 (fr) * 2000-09-12 2002-03-21 Matsushita Electric Industrial Co., Ltd. Procede de reduction du bruit, dispositif de reduction du bruit, support et programme
JP4688279B2 (ja) * 2000-11-21 2011-05-25 富士通株式会社 動画像の空間解像度自動設定方法及び装置
US7047273B2 (en) 2000-11-28 2006-05-16 Navic Systems, Inc. Load balancing in set top cable box environment
US7136538B2 (en) * 2000-12-21 2006-11-14 Matsushita Electric Industrial Co., Ltd. Noise reducing apparatus and noise reducing method
US6845180B2 (en) * 2001-03-16 2005-01-18 Sharp Laboratories Of America, Inc. Predicting ringing artifacts in digital images
US7006255B2 (en) * 2001-03-29 2006-02-28 Sharp Laboratories Of America Adaptive image filtering based on a distance transform
US20020191699A1 (en) * 2001-06-12 2002-12-19 O'brien Royal Detection system and method for enhancing digital video
US7003173B2 (en) * 2001-06-12 2006-02-21 Sharp Laboratories Of America, Inc. Filter for combined de-ringing and edge sharpening
US7003174B2 (en) * 2001-07-02 2006-02-21 Corel Corporation Removal of block encoding artifacts
US6822675B2 (en) * 2001-07-03 2004-11-23 Koninklijke Philips Electronics N.V. Method of measuring digital video quality
US7050649B2 (en) * 2001-07-23 2006-05-23 Micron Technology, Inc. Suppression of ringing artifacts during image resizing
EP1303143A3 (fr) * 2001-10-16 2004-01-14 Koninklijke Philips Electronics N.V. Procédé de détection d'artefacts de bloc
ATE419713T1 (de) 2001-11-29 2009-01-15 Panasonic Corp Verfahren zur beseitigung von kodierungsverzerrung und verfahren zur videokodierung und -dekodierung
US6873741B2 (en) * 2002-01-10 2005-03-29 Sharp Laboratories Of America Nonlinear edge-enhancement filter
US7031552B2 (en) * 2002-04-05 2006-04-18 Seiko Epson Corporation Adaptive post-filtering for reducing noise in highly compressed image/video coding
US7239754B2 (en) * 2002-07-16 2007-07-03 Hiroshi Akimoto Method, apparatus and system for compressing still images in multipurpose compression systems
US7379609B2 (en) * 2002-07-19 2008-05-27 Samsung Electronics Co., Ltd. Image processing apparatus and method for conversion between raster and block formats
US6807317B2 (en) 2002-10-25 2004-10-19 Motorola, Inc. Method and decoder system for reducing quantization effects of a decoded image
KR100502413B1 (ko) * 2002-11-07 2005-07-19 삼성전자주식회사 라스터 스캔 순서 화상 데이터와 블록 스캔 순서 화상데이터 사이의 변환을 위한 화상 처리 장치 및 방법
EP1565875A1 (en) * 2002-11-25 2005-08-24 Sarnoff Corporation Method and apparatus for measuring quality of compressed video sequences without references
US7254277B2 (en) * 2002-12-30 2007-08-07 Texas Instruments Incorporated Image processing with minimization of ringing artifacts and noise
US7212571B2 (en) * 2003-01-31 2007-05-01 Seiko Epson Corporation Method and apparatus for DCT domain filtering for block based encoding
US7738554B2 (en) 2003-07-18 2010-06-15 Microsoft Corporation DC coefficient signaling at small quantization step sizes
US8218624B2 (en) 2003-07-18 2012-07-10 Microsoft Corporation Fractional quantization step sizes for high bit rates
US7602851B2 (en) 2003-07-18 2009-10-13 Microsoft Corporation Intelligent differential quantization of video coding
US10554985B2 (en) 2003-07-18 2020-02-04 Microsoft Technology Licensing, Llc DC coefficient signaling at small quantization step sizes
US7580584B2 (en) 2003-07-18 2009-08-25 Microsoft Corporation Adaptive multiple quantization
US7430335B2 (en) * 2003-08-13 2008-09-30 Apple Inc Pre-processing method and system for data reduction of video sequences and bit rate reduction of compressed video sequences using spatial filtering
US7403568B2 (en) * 2003-08-13 2008-07-22 Apple Inc. Pre-processing method and system for data reduction of video sequences and bit rate reduction of compressed video sequences using temporal filtering
KR100575733B1 (ko) * 2003-08-26 2006-05-03 엘지전자 주식회사 압축 동영상의 움직임 객체 분할 방법
US7355639B2 (en) * 2003-11-06 2008-04-08 Omnivision Technologies, Inc. Lens correction using processed YUV data
JP4066367B2 (ja) * 2003-11-28 2008-03-26 ノーリツ鋼機株式会社 画像ノイズ除去方法
US7346226B2 (en) * 2003-12-16 2008-03-18 Genesis Microchip Inc. Method and apparatus for MPEG artifacts reduction
US7457438B2 (en) 2003-12-23 2008-11-25 Genesis Microchip Inc. Robust camera pan vector estimation using iterative center of mass
US7480334B2 (en) * 2003-12-23 2009-01-20 Genesis Microchip Inc. Temporal motion vector filtering
US7499494B2 (en) * 2003-12-23 2009-03-03 Genesis Microchip Inc. Vector selection decision for pixel interpolation
US7471845B2 (en) * 2004-01-06 2008-12-30 Sharp Laboratories Of America, Inc. De-ringing filter
US8503542B2 (en) * 2004-03-18 2013-08-06 Sony Corporation Methods and apparatus to reduce blocking noise and contouring effect in motion compensated compressed video
US7315661B2 (en) * 2004-04-01 2008-01-01 Mediatek Inc. Directional interpolation method using DCT information and related device
US7801383B2 (en) 2004-05-15 2010-09-21 Microsoft Corporation Embedded scalar quantizers with arbitrary dead-zone ratios
WO2005124664A2 (en) * 2004-06-14 2005-12-29 Precoad, Inc. Image clean-up and pre-coding
KR100557660B1 (ko) 2004-07-29 2006-03-10 매그나칩 반도체 유한회사 영상 신호에서의 플리커 검출 방법
US7697782B2 (en) 2004-09-16 2010-04-13 Sharp Laboratories Of America, Inc. System for reducing ringing artifacts
JP4724124B2 (ja) * 2004-10-08 2011-07-13 パナソニック株式会社 画像処理装置および画像処理プログラム
US7136536B2 (en) * 2004-12-22 2006-11-14 Telefonaktiebolaget L M Ericsson (Publ) Adaptive filter
WO2006127129A2 (en) * 2005-04-19 2006-11-30 University Of Georgia Research Foundation, Inc. Image edge detection systems and methods
TWI295140B (en) * 2005-05-20 2008-03-21 Univ Nat Chiao Tung A dual-mode high throughput de-blocking filter
US8422546B2 (en) 2005-05-25 2013-04-16 Microsoft Corporation Adaptive video encoding using a perceptual model
JP2006340005A (ja) * 2005-06-01 2006-12-14 Sony Corp ディジタル信号処理装置とディジタル信号処理方法およびプログラム。
US7747082B2 (en) * 2005-10-03 2010-06-29 Xerox Corporation JPEG detectors and JPEG image history estimators
US8218080B2 (en) * 2005-12-05 2012-07-10 Samsung Electronics Co., Ltd. Personal settings, parental control, and energy saving control of television with digital video camera
US8848057B2 (en) * 2005-12-05 2014-09-30 Samsung Electronics Co., Ltd. Home security applications for television with digital video cameras
JP4943721B2 (ja) * 2006-03-20 2012-05-30 株式会社リコー 画像データのカラーノイズ除去方法及びこの方法を用いた撮像装置
US7995649B2 (en) * 2006-04-07 2011-08-09 Microsoft Corporation Quantization adjustment based on texture level
US8503536B2 (en) 2006-04-07 2013-08-06 Microsoft Corporation Quantization adjustments for DC shift artifacts
US7974340B2 (en) 2006-04-07 2011-07-05 Microsoft Corporation Adaptive B-picture quantization control
US8130828B2 (en) 2006-04-07 2012-03-06 Microsoft Corporation Adjusting quantization to preserve non-zero AC coefficients
US8059721B2 (en) 2006-04-07 2011-11-15 Microsoft Corporation Estimating sample-domain distortion in the transform domain with rounding compensation
US8711925B2 (en) 2006-05-05 2014-04-29 Microsoft Corporation Flexible quantization
US8831111B2 (en) * 2006-05-19 2014-09-09 The Hong Kong University Of Science And Technology Decoding with embedded denoising
US8369417B2 (en) * 2006-05-19 2013-02-05 The Hong Kong University Of Science And Technology Optimal denoising for video coding
US20070280552A1 (en) * 2006-06-06 2007-12-06 Samsung Electronics Co., Ltd. Method and device for measuring MPEG noise strength of compressed digital image
US7747045B2 (en) * 2006-06-30 2010-06-29 Fujifilm Corporation Method and apparatus for diffusion based illumination normalization
US7295716B1 (en) * 2006-06-30 2007-11-13 Fujifilm Corporation Method and apparatus for diffusion based image relighting
US7860341B2 (en) * 2006-07-21 2010-12-28 Varian Medical Systems, Inc. System and method for correcting for ring artifacts in an image
EP1909227B1 (en) * 2006-10-03 2018-06-27 Vestel Elektronik Sanayi ve Ticaret A.S. Method of and apparatus for minimizing ringing artifacts in an input image
US7796834B2 (en) * 2006-11-16 2010-09-14 Texas Instruments Incorporated Post-processing technique for noise reduction of DCT-based compressed images
TWI330041B (en) * 2006-11-28 2010-09-01 Realtek Semiconductor Corp Image processing method and device for performing block effect reduction
US7952647B2 (en) * 2006-12-27 2011-05-31 Intel Corporation Method and apparatus of content adaptive detailing filtering for digital pictures
US8238424B2 (en) 2007-02-09 2012-08-07 Microsoft Corporation Complexity-based adaptive preprocessing for multiple-pass video compression
US7538712B2 (en) * 2007-03-22 2009-05-26 Harris Corporation Method and apparatus for decompression of SAR images
US8498335B2 (en) 2007-03-26 2013-07-30 Microsoft Corporation Adaptive deadzone size adjustment in quantization
US8243797B2 (en) 2007-03-30 2012-08-14 Microsoft Corporation Regions of interest for quality adjustments
US8442337B2 (en) 2007-04-18 2013-05-14 Microsoft Corporation Encoding adjustments for animation content
US8331438B2 (en) 2007-06-05 2012-12-11 Microsoft Corporation Adaptive selection of picture-level quantization parameters for predicted video pictures
US8837849B2 (en) * 2007-06-26 2014-09-16 Google Inc. Method for noise-robust color changes in digital images
DE102007058498A1 (de) * 2007-12-05 2009-06-10 Siemens Aktiengesellschaft Verfahren und Vorrichtung zur Rauschunterdrückung in medizinischen Bildern
US8200028B2 (en) * 2007-12-07 2012-06-12 Csr Technology Inc. System and method for detecting edges in a video signal
US8295367B2 (en) * 2008-01-11 2012-10-23 Csr Technology Inc. Method and apparatus for video signal processing
US8189933B2 (en) 2008-03-31 2012-05-29 Microsoft Corporation Classifying and controlling encoding quality for textured, dark smooth and smooth video content
US8897359B2 (en) 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
KR101639434B1 (ko) * 2009-01-09 2016-07-13 성균관대학교산학협력단 와이너-지브 부호화 및 복호화 시스템 및 방법
EP2226760A1 (en) 2009-03-03 2010-09-08 Sony Corporation Method and apparatus for reducing compression artifacts in video signals
US20100245672A1 (en) * 2009-03-03 2010-09-30 Sony Corporation Method and apparatus for image and video processing
JP2011049901A (ja) * 2009-08-27 2011-03-10 Panasonic Corp 固体撮像装置、撮像装置
US8824826B2 (en) * 2011-02-24 2014-09-02 Foveon, Inc. Methods for performing fast detail-preserving image filtering
JP6125215B2 (ja) 2012-09-21 2017-05-10 株式会社東芝 復号装置、及び符号化装置
KR101426610B1 (ko) * 2012-10-31 2014-08-05 연세대학교 산학협력단 영상 노이즈 제거 방법 및 장치
US8831354B1 (en) * 2014-01-08 2014-09-09 Faroudja Enterprises, Inc. System and method for edge-adaptive and recursive non-linear filtering of ringing effect
US9508020B2 (en) 2014-07-16 2016-11-29 Sony Corporation Image processing system with artifact suppression mechanism and method of operation thereof
WO2018105579A1 (ja) 2016-12-09 2018-06-14 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3906712A1 (de) * 1989-03-03 1990-09-06 Thomson Brandt Gmbh Elektronisches bildwiedergabegeraet
US4999705A (en) 1990-05-03 1991-03-12 At&T Bell Laboratories Three dimensional motion compensated video coding
US5598184A (en) * 1992-03-27 1997-01-28 Hewlett-Packard Company Method and apparatus for improved color recovery in a computer graphics system
US5294974A (en) 1992-07-24 1994-03-15 Matsushita Electric Corporation Of America High-definition video encoding system having color-sensitive quantization
US5325125A (en) * 1992-09-24 1994-06-28 Matsushita Electric Corporation Of America Intra-frame filter for video compression systems
US5581371A (en) * 1995-03-07 1996-12-03 Eastman Kodak Company Error diffusion method

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1324528C (zh) * 1997-07-16 2007-07-04 三星电子株式会社 用于对图像数据进行滤波的方法
US7492823B2 (en) 1997-07-16 2009-02-17 Samsung Electronics Co., Ltd. Signal adaptive filtering method, signal adaptive filter and computer readable medium for storing program therefor
US7801216B2 (en) 1997-07-16 2010-09-21 Samsung Electronics Co., Ltd. Signal adaptive filtering method, signal adaptive filter and computer readable medium for storing program therefor
US8295366B2 (en) 1997-07-16 2012-10-23 Samsung Electronics Co., Ltd. Signal adaptive filtering method, signal adaptive filter and computer readable medium for storing program method
US8494048B2 (en) 1997-07-16 2013-07-23 Samsung Electronics Co., Ltd. Signal adaptive filtering method, signal adaptive filter and computer readable medium for storing program therefor
CN1330187C (zh) * 2002-07-24 2007-08-01 皇家飞利浦电子股份有限公司 用于减少图像中块状假像的数字滤波器
US7725515B2 (en) 2002-07-24 2010-05-25 Trident Microsystems (Far East) Ltd. Digital filter for reducting blocking artifacts in images
CN100342398C (zh) * 2003-06-06 2007-10-10 Ge医疗系统环球技术有限公司 图像处理方法和设备
CN100394767C (zh) * 2003-10-24 2008-06-11 松下电器产业株式会社 像素排列装置、固态图像感应装置以及照相机
CN101438594B (zh) * 2006-04-21 2011-09-28 史诺有限公司 图像分析
CN101123682B (zh) * 2006-08-11 2011-06-22 松下电器产业株式会社 可减少图像振铃噪声的方法、装置及集成电路

Also Published As

Publication number Publication date
KR970025165A (ko) 1997-05-30
EP0769878A2 (en) 1997-04-23
DE69631108D1 (de) 2004-01-29
US5819035A (en) 1998-10-06
EP0769878B1 (en) 2003-12-17
DE69631108T2 (de) 2004-06-09
JP4004089B2 (ja) 2007-11-07
KR100249407B1 (ko) 2000-03-15
EP0769878A3 (en) 1999-12-29
JPH09200759A (ja) 1997-07-31
CN1110961C (zh) 2003-06-04

Similar Documents

Publication Publication Date Title
CN1110961C (zh) 用于消除dct编码的振铃现象的滤波装置和方法
CN1198466C (zh) 产生量化矩阵的方法
JP5107495B2 (ja) 品質ベースのイメージ圧縮
JP5633584B2 (ja) Hevc規格のための量子化マトリクス設計
CN1301370A (zh) 用于减少压缩的视频中的喘息污迹的方法和设备
CN1695381A (zh) 在数字视频信号的后处理中使用编码信息和局部空间特征的清晰度增强
JP2003244702A (ja) ブロッキング効果を除去するためのフィルタリング方法及びその装置
CN1421102A (zh) 基于方差的自适应块大小dct图像压缩
CN1960495A (zh) 图像编码装置、方法及程序
CN1302419A (zh) 缩放压缩的图象
CN1723711A (zh) 用于数字视频处理的一元化量度(umdvp)
EP1461771A1 (en) Transform coefficient compression using multiple scans
CN1248487C (zh) 根据编码信息提供效用度量进行视频增强的装置和方法
CN1126926A (zh) 降低图象数据解码处理蚊音噪声的方法及装置
JP2004528791A (ja) インターフレーム符号化方法および装置
CN1650635A (zh) 对低速率应用的数字图像进行处理的方法
CN1164124C (zh) 图像压缩处理方法
CN1379594A (zh) 对被编码的视频信号同时进行格式压缩和解码的方法
CN1246019A (zh) 用于从编码高分辨率视频信号中产生解码低分辨率视频信号的系统
CN1449196A (zh) 低比特率应用的数字图像处理方法
CN1191717C (zh) 在离散余弦变换域中减少块噪声的方法和装置
KR102722957B1 (ko) 프레임 보간 딥러닝 네트워크를 위한 피쳐맵 압축 방법
KR20050085368A (ko) 블록화 아티팩트들을 측정하는 방법
CN1663283A (zh) 检测块假象的方法
GB2559912A (en) Video encoding and decoding using transforms

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C19 Lapse of patent right due to non-payment of the annual fee
CF01 Termination of patent right due to non-payment of annual fee