CN1516973A - 用于处理数字视频信号的方法和译码器 - Google Patents

用于处理数字视频信号的方法和译码器 Download PDF

Info

Publication number
CN1516973A
CN1516973A CNA028121546A CN02812154A CN1516973A CN 1516973 A CN1516973 A CN 1516973A CN A028121546 A CNA028121546 A CN A028121546A CN 02812154 A CN02812154 A CN 02812154A CN 1516973 A CN1516973 A CN 1516973A
Authority
CN
China
Prior art keywords
filtering
pixel
piece
image
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA028121546A
Other languages
English (en)
Other versions
CN1294760C (zh
Inventor
S���¶�
S·德尔科索
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN1516973A publication Critical patent/CN1516973A/zh
Application granted granted Critical
Publication of CN1294760C publication Critical patent/CN1294760C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Picture Signal Circuits (AREA)
  • Color Television Systems (AREA)

Abstract

本发明涉及用于处理数字视频信号的方法和译码器,所述视频信号表示图象序列。它的特征在于,它包括以下步骤:检测当前图象(I(t))中的运动象素,通过空间中值滤波第一组系数(Mcs,Mu,Md)的子步骤和时间中值滤波第二组系数(Mct,Mp,Mn)的子步骤,而中值滤波当前图象的已变换的块(Bc),从已滤波的块计算逆变换的块,以及用所述已检测的运动象素代替在逆变换的块中的象素。

Description

用于处理数字视频信号的方法和译码器
                     发明领域
本发明涉及处理数字视频信号的方法,所述视频信号表示图象序列。本发明也涉及实施所述方法的译码器。
这样的方法可被使用于例如视频通信系统。
                     发明背景
视频通信系统(诸如电视通信系统)典型地包括编码器、传输媒体和译码器。这样的系统接收输入视频信号,藉助于编码器编码所述信号,通过传输媒体传输已编码信号,然后藉助于译码器译码或重建发送的信号,形成输出的视频信号。视频信号表示给定数目的图象,图象与时隙t有关。
在发送视频信号之前,视频通信系统可包括视频压缩处理。这样的视频压缩处理有时以低的比特速率执行,以便发送更多的视频信号。它在视频信号的图象中产生重大的失真,特别是视觉的人工产物,诸如阻挡效应(倾斜效果的样子),环状(重影)或飞蚊噪声(飞舞的蚊群的样子,即,闪烁效果)。正如在以下的文章中描述的:F.X.Coudoux,M.Gazalet和P.Corlay,“Adaptive Postprocessor toreduce Temporal Business in Low Bit Rate Video(减小在低的比特速率的视频中的时间上的麻烦的自适应后处理器)”,PictureCoding Symposium,23-27 April 2001,减小飞蚊噪声的解决方案是把相应于所述发送视频信号的图象内的非边缘块与边缘块分开,所述图象包括被称为DCT块的块,是本领域技术人员熟知的。这个解决方案对非边缘块施加时间DCT中值滤波。所述时间值滤波包括以下步骤:
-分别计算在三个接连的图象的三个DCT块的AC系数之间的时间梯度,以便查找所述图象内的不连续性,
-通过门限值,查找突然时间瞬变,诸如快速运动目标,以及
-如果有本地不连续性和没有突然的瞬变,则对所述块施加时间中值滤波。
这个解决方案的一个问题是,它只减小所述传输的视频信号的图象内非边缘块上的飞蚊噪声,而飞蚊噪声也可能出现在边缘块上。
                    发明目的和概要
因此,本发明的一个目的是提供用于处理数字视频信号的方法和译码器,所述视频信号表示图象序列,它允许更好地减小在相应于所述视频信号的整个图象中的飞蚊噪声。
为此,本发明提供一种方法,包括以下步骤:
-检测当前图象中的运动象素,
-计算对于所述当前图象的块的离散频率变换,以便提供已变换的块,
-中值滤波当前已变换的块,所述滤波包括以下子步骤:
-空间中值滤波属于当前已变换的块和属于相邻块的第一组系数,以及
-时间中值滤波属于当前已变换的块和属于先前的和随后的图象的相应的块的第二组系数,
-计算对于已滤波的已变换的块的逆离散频率变换,以便提供已逆变换的块,以及
-用所述检测的运动象素代替在所述逆变换的块中的象素。
此外,本发明提供译码器,包括:
-运动检测装置,用来检测当前的图象中的运动象素,
-离散频率计算装置,用来计算对于所述当前图象的块的离散频率变换,以便提供已变换的块,
-中值滤波装置,用来滤波已变换的块,所述滤波器包括:
-空间中值子滤波器,用来滤波属于当前已变换的块和属于相邻块的第一组系数,以及
-时间中值子滤波器,用来滤波属于当前已变换的块和属于先前的和随后的图象的相应的块的第二组系数,
-逆频率计算装置,用来计算对于已滤波的已变换的块的逆频率变换,以便提供已逆变换的块,以及
-代替装置,用来用所述检测出的运动象素代替在所述已逆变换的块中的象素。
正如我们将在后面详细地看到的,这样的方法一方面允许有效地减小飞蚊噪声,另一方面,特别是藉助于空间滤波和时间滤波的组合,允许被称为时间一致性的均匀图象。而且,对于相应于视频信号的图象的运动象素不进行滤波,因为这会造成模糊的图象。
                         附图简述
当参照附图阅读以下的详细说明时,将明白本发明的附加目的、特性和优点,其中:
图1表示包括按照本发明的译码器的视频通信系统,
图2是按照本发明的方法的示意图,所述方法在图1的译码器中实施,
图3表示按照本发明图2的方法的运动检测步骤,以及
图4a表示按照本发明图2的方法的空间中值滤波的子步骤。
图4b表示按照本发明图2的方法的时间中值滤波的子步骤。
图5表示按照本发明图2的方法的第一实施例。
图6表示按照本发明图2的方法的第二实施例。
图7是实施按照本发明的方法的处理装置的示意图。
                       发明详细说明
在下面的说明中,本领域技术人员熟知的功能或结构不进行详细地描述,因为它们将以不必要的细节遮蔽本发明。
本发明涉及减小视频信号中的失真的方法,所述视频信号表示图象序列,图象I(t)与时隙t有关。这样的视频信号VS例如被提供到电视机。所述方法具体地在视频通信系统SYS内如图1所示的译码器S_DEC中被使用。
为了通过传输媒体CH有效地传输某些视频信号,所述视频通信系统SYS包括视频压缩处理,它在编码视频信号VS期间通过编码器S_ENC以及在译码期间通过译码器S_DEC被施加。由于压缩系统,在视频信号的图象中出现失真,诸如阻挡效应,环状,或飞蚊噪声等。
为了减小这些失真,特别是飞蚊噪声,如图2所示的译码器S_DEC包括:
-运动检测装置MVT_D,用来检测当前的图象I(t)中的运动象素,
-离散频率计算装置DCT_T,用来计算对于所述当前图象I(t)的块离散频率变换,以便提供已变换的块,
-中值滤波装置DCT_F,用来滤波已变换的块Bc,所述滤波器包括:
-空间中值子滤波器SPATIAL_F,用来滤波属于当前已变换的块Bc和属于相邻块Bu、Bd的第一组系数Mcs、Mu、Md,以及
-时间中值子滤波器TEMP_F,用来滤波属于当前已变换的块Bc和属于先前的和随后的图象的相应的块Bp、Bn的第二组系数Mct、Mp、Mn,
-逆频率计算装置IDCT_T,用来计算对于已滤波的已变换的块逆频率变换,以便提供已逆变换的块,以及
-代替装置REPL_M,用来用所述检测出的运动象素代替在所述已逆变换的块中的象素。
为此,以下的处理在译码后和在屏幕上显示相应的图象之前被施加到视频信号VS的图象上。
应当指出,图象包括一个场或两个场,在后者的情形下,在欧洲电视定义的全格式下,每个场通常包括N=207360个象素,这等于相应于50Hz的720象素/行*576行的一半。
应当指出,在时隙t时的图象I(t)被称为当前的图象。
在时隙t时,执行检测视频信号VS的当前的图象I(t)中的运动象素的第一步骤(1)。这个步骤允许鉴别图象中像素的运动区域与非运动区域。
如图3所示,运动象素的检测基于在两个场之间的图象差别。第一个图象差别是在分别属于当前的图象与先前的图象I(t-1)的当前的场CUR_F(k)(t)与先前的场PREV_F(k)(t-1)之间计算的。这两个图像是接连的。在包括两个场的图象的情形下,当前的和先前的场具有相同的奇偶性k(即,顶部和底部)。第二个图象差别是在分别属于当前的图象与随后的图象I(t+1)的当前的场CUR_F(k)(t)与随后的场NEXT_F(k)(t+1)之间计算的。两个图象是接连的。在包括两个场的图象的情形下,当前的和随后的场具有相同的奇偶性k。
图象差给出运动图象,其象素的特征在于亮度和色度分量。对所述图象差的所述象素分量进行滤波。所述滤波优选地由第一平均滤波与第二低通滤波组成。
因此,在第一非限制性实施例中,第一平均滤波LPF1被施加到所述运动图象上。它优选地分开地施加到运动图象的亮度与色度分量上。所述第一滤波器LPF1优选地对于亮度与色度分量被规定为如下。
亮度
1    1    1
1    1    1
色度
1    0    1
1    0    1
应当指出,第一滤波器LPF1可以只施加到亮度分量上,但它达到较低的性能。
这种第一滤波器LPF1具有达到高的噪声减小的优点。事实上,它减小运动检测装置MVT_D的噪声灵敏度,这种灵敏度会把噪声错误地解读为运动区域。
由于运动检测装置只取决于图象差,所以计算每个亮度与色度分量的绝对值ABS。
(b)随后,为了抑制切换人工产物(它包含只用第一滤波器LPF1不能与运动区分开的噪声),在当前的与先前的或随后的图象之间使用第二低通滤波器LPF2。而且,它保证这些图象之间的平滑的渐没。
它优选地同时施加到运动图象的亮度与色度分量的绝对值ABS上。所述第二滤波优选地对于亮度与色度分量被规定为如下。
1    2    1
1    2    1
应当指出,这种第二滤波器LPF2更具体地可以是平均滤波器。
这两个滤波器允许对于活动图象的一个象素的每个亮度与色度分量得出已滤波的数值VF-PIX。通过门限值TH,区分或鉴别运动与非运动象素:当象素的一个已滤波的数值VF-PIX大于门限值TH时,象素被认为是运动象素MVT_PIX。在另一个情形下,象素被认为是非运动象素NO_MVT_PIX。门限值TH优选地被设置为200,以及可被设置为至少直至250,因为对于这些数值达到同样的性能。
运动MVT_PIX和非运动NO_MVT_PIX象素被存储在运动检测器MVT_D的存储器MEM中,用于进一步处理。
应当指出,上面提到的所有的滤波工作优选地是对先前的场PREV_FIELD(k)(t-1)与随后的场NEXT_FIELD(k)(t+1)计算的两个图象差进行的。如果在两个图象差之一中的一个象素的至少一个已滤波值VF_PX大于门限值TH,则相应的象素被认为是运动象素。
优选地,在8*8块内的运动象素MVT_PIX的数目被计数。如果这个数目大于第二门限值TH2,则这个块是“运动块”,不值得对它进行中值滤波。所以,对于这些“运动块”不进行离散频率变换和中值滤波。第二门限值TH2优选地被设置为5。
应当指出,运动检测MVT_D也允许检测在场景中的突然时间瞬变,场景是接连的图象。在这种情形下,不执行滤波。
在优选的第二非限制性实施例中,低通滤波LPF1和LPF2被接连地施加。因此,它们的系数可被组合,导致仅仅一个二维滤波器。通过这种方法,节省存储器容量与存储器带宽。此后,计算亮度与色度分量的绝对值ABS。通过计算绝对值,最后,它给出降低所有的计算复杂性的优点。
在第二步骤(2)中,对于视频信号VS的所述当前的图象J(t)计算离散频率变换,以提供已变换的块。被称为DCT的所述离散频率变换允许在频域进行。它是本领域技术人员熟知的,所以这里将不作说明。
通常,图象的场被分成块,例如对于MPEG格式的8*8象素的块。对于每个这些块施加离散频率变换。所述变换提供64个系数的已变换的块,一个系数被称为DC系数,另外63个系数称为AC系数,一个系数AC表示一个频率。
应当指出,图象由两个子图象组成:亮度子图象与色度子图象。在优选实施例中,将对于亮度子图象执行第二步骤与随后的步骤,这样,在本实施例中,系数DC表示块的平均亮度。本实施例通过滤波具有更好的性能的优点。
应当指出,在其他实施例中,可对于两个子图象或只对于色度子图象执行第二步骤与随后的步骤。
在第三步骤(3)中,对于所述已变换的块执行中值滤波如下。
滤波步骤包括空间中值滤波的第一子步骤和时间中值滤波的第二子步骤。所述滤波如下地施加到当前的图象I(t)中的当前的场CUR_F(k)(t)和施加到在这个当前的场内被称为当前的块Bc的第一变换的块上。
如图4a所示,属于当前已变换的块Bc和属于相邻块Bu、Bd的第一组系数在空间中值滤波子步骤(3a)中被滤波。从所述第一组系数,首先计算空间中值M1’。
在优选实施例中,三个系数Mcs、Mu、Md被使用来计算空间中值M1’,这些系数分别属于当前已变换的块Bc、当前块Bc的刚好下面的一个块Bd和刚好上面的一个块Bu。达到在性能与花费之间的有效的折衷。
应当指出,相邻的块可以是左面的块B 1和右面的块B r,但这是不太有效的。
还应当指出,可以使用更多的系数和块,但关于这些系数上的计算花费特别增加。
应当指出,在第一组系数中的所有的系数在它们各自的已变换的块中具有相同的位置。
随后,用在当前的已变换的块Bc中的空间中值M1’替换属于当前的块Bc的当前的空间系数Mc s。空间中值滤波具有给出均匀的相邻的块的优点。事实上,不用这种空间滤波,表示图象内的天空的两个相邻的块可能具有两种不同的颜色。所以,天空将是不均匀的。而且,所述空间滤波允许更多地去除影响图象的噪声。
如图4b所示,属于当前已变换的块Bc和属于先前的与随后的图象的相应的块Bp、Bn的第二组系数在第二时间子步骤(3b)中被滤除。从所述第二组系数,首先计算时间中值M1”。
在优选实施例中,三个系数Mct、Mp、Mn被使用来计算时间中值M1”,这些系数分别属于当前已变换的块Bc、先前的已变换的块Bp和随后的已变换的块Bn,这些块Bp和Bn属于刚好先前的图象I(t-1)和刚好随后的图象I(t+1)。
达到在性能与花费之间的有效的折衷。
应当指出,所有的系数在它们各自的已变换的块中具有相同的位置。如果不是这种情形,则图象将变得模糊。
随后,用在当前的已变换的块中的时间中值M1”替换当前的块Bc的当前的时间系数Mct。
时间中值滤波具有避免在两个时隙t内两个接连的块之间的闪烁效应的优点。事实上,不用这种滤波,例如表示图象内的天空的两个相邻的块也可能具有两种不同的颜色。所以,天空将是闪烁的。
在图象I(t)包括两个场的情形下,第一个、先前的和随后的已变换的块分别属于三个场(当前的CUR_F(k)(t),先前的PREV_F(k)(t-1),和随后的NEXT_F(k)(t+1)),它们具有相同的奇偶性k。因此,选择在同一个位置上的象素。例如,滤波从顶部奇偶场开始。在其他情形下,图象将是模糊的。
应当指出,被使用于这种中值滤波的系数M是DC系数和AC系数。
在第一实施例中,在空间中值滤波的子步骤之前执行时间中值滤波的子步骤,以及所述空间子步骤的当前的空间系数Mcs变为在所述时间子步骤中计算的时间中值M1”。在这个第一实施例中,我们具有以下的公式:
M’=median(median(Mct,Mp,Mn),Mu,Md)
如图5所示,例如,我们具有Mu=15,Md=16,以及Mct=19,Mp=12和Mn=17。所以,首先计算时间中值M1”。M1”=median(19,12,17)=17。当前的时间系数Mct变成为时间中值M1”。然后,计算第一中值M1’。M1’=median(17,15,16)=16。
在优选的第二实施例中,在时间中值滤波的子步骤之前执行空间滤波的子步骤,以及所述时间子步骤的当前的时间系数Mct变为在所述空间子步骤中计算的空间中值M1’。因此,我们具有以下的公式:M”=median(median(Mcs,Mu,Md),Mp,Mn)。如图6所示,例如,我们具有Mcs=10,Mu=16,Md=15以及Mp=12和Mn=11。所以,首先计算空间中值M1’。M1’=median(10,16,15)=15。当前的时间系数Mct变成为空间中值M1’。然后,计算时间中值M1”。M1”=median(15,12,11)=12。
第二实施例通过时间滤波比起第一实施例达到更好的性能以及在图象序列内具有更好的时间一致性。
对于已变换的块内的每个系数M,从当前场CUR_F(k)(t)的左侧到右侧和从顶部到顶部执行空间子步骤和时间子步骤。在具有两个场的图象的情形下,先对于顶部场执行,然后对于底部场执行,或反之亦然。
应当指出,当一个接一个的图象(“时间”或“空间”图象)所有的系数M都是相等时,即,即使一个接一个的图象没有不连续性时,也总是计算中值。事实上,在这种情形下,当计算中值时,系数M仍保持不改变。因此,由于没有改变,不需要进行过早的测试查找不连续性。
应当指出,在中值计算后,我们可以测试以查看系数M是否保持不改变,然后,如果是这种情形,我们不进行任何替换,或我们总是进行当前的系数的替换。
应当指出,如前所述,系数M或者是DC系数,或者是AC系数。表示图象的平均亮度的DC系数的滤波具有优点:例如,避免同一个场景的3个时间图象的平均亮度的改变,而AC系数的滤波具有滤除强的尖峰脉冲那样的噪声的优点。
应当指出,按照本发明的方法,对于第二优选实施例在图象使用紧接着是时间滤波子步骤的空间滤波子步骤时,对于每个象素只需要一次读出图象,以及对于第一实施例反过来进行。所以,按照本发明的所述方法比起另一个方法更快,后者包含对于图象的所有的象素施加空间滤波子步骤,然后对于这些象素实施时间滤波子步骤,所述方法需要两次读出图象。
在第四步骤(4)中,计算对于所述已滤波的已变换的块Bc的逆离散频率变换,以便提供逆变换的块。被称为IDCT的逆离散频率变换允许返回到“象素”域。所述IDCT变换对于本领域技术人员是熟知的,所以这里不进行说明。
在第五步骤(5)中,用被存储在存储器MEM中的检测出的运动象素MVT_PIX代替已经受过滤波步骤的、在所述已逆变换的块中的象素。这个后者的步骤允许恢复在相应的图象I(t)中的运动区域。它避免运动象素的时间滤波。事实上,对运动区域执行时间滤波是不利的,因为它导致模糊的效果。
应当指出,避免对运动区域进行滤波的另一个解决方案是只对非运动象素NO_MVT_PIX执行滤波,而不是对图象的所有的象素执行滤波步骤。然而,这个解决方案执行起来复杂得多。
最后,视频信号VS的图象被特别地后处理,以便恢复接近于编码前使用的视频信号的视频信号。在电视应用的情形下,图象的相应的序列被显示在电视屏幕上。
总之,由于滤波步骤,按照本发明的方法具有优点:减小在均匀区域和周围边缘处亮度/色度的起伏,以及不需要区分图象中的边缘区域和非边缘区域。
而且,它对于低的比特速率,诸如MPEG4或MPEG2视频,是特别有效的,但它也可以使用于任何比特速率。
应当指出,按照本发明的方法是基于认识到亮度/色度电平的完全离散频率变换的块是闪烁的,而时间滤波将减小这种闪烁效应。因此,如上所述,将有图象序列的时间一致性。
应当提出,本发明并不限定于上述实施例,并且可以进行变形及修正而不脱离在附属的权利要求中所规定的本发明的精视及范围。
应当指出,本发明并不限于上述的电视应用。它可以在广泛的视频应用范围内使用,诸如对于任何比特速率的,视频电话、通过移动电话或互联网的视频通信。
应当指出,有许多通过硬件或软件项目或二者实施按照本发明的方法的功能的方式,如果单个硬件或软件项目可实现几个功能的话。这不排除硬件或软件项目或二者的组合来执行一种功能。例如,检测运动的步骤可以与滤波步骤相组合,因此,形成单个功能而不用修改按照本发明的译码方法。
所述硬件或软件项目可以以几种方式实施,例如,通过连线的电子电路或通过适当地编程的集成电路。集成电路可能存在于计算机或译码器中。在后者的情形下,译码器包括运动检测装置MVT_D,用来执行运动检测步骤(1),滤波装置DCT_F,用来执行中值滤波步骤(3),所述装置包括空间中值子滤波装置SPATIAL_F,用来执行子步骤(3a),和时间中值子滤波装置TEMP(-F),用来执行按照第一或第二实施例的子步骤(3b),离散频率与逆离散频率变换装置DCT_T、IDCT_T,用来分别执行步骤(2)和(4),以及代替装置REPL_M,用来执行步骤(5),正如前面描述的,所述装置是如上所述的硬件或软件项目。
集成电路包括一组指令。因此,在计算机程序存储器或在译码器存储器中的所述指令组可以使得计算机或译码器实行数字视频信号处理方法的不同的步骤。
指令组可通过读数据载体(诸如软盘)而被装载在程序存储器中。业务提供者可以使得指令成为通过通信网络(诸如互联网)可提供的。
本发明也涉及视频数据处理设备,它使得存储器带宽和实施方案复杂性最小化,以便实时地和以低的花费执行此前描述的处理方法。
图7表示这样的视频处理设备。它包括运动检测模块MD,它对于来自同一个奇偶性的接连的两个场I1和I2的图象差应用两个滤波器,一个用于亮度分量Y,另一个用于色度分量Cr。系统存储器MEM包含三个接连的场I0,I1和I2。为了减少从运动检测模块MD到系统存储器MEM的传送并从而减小存储器的带宽,运动检测模块MD包括用来存储中间数据块的嵌入的存储器。第一BF1和第二BF2嵌入存储器装载数据块I1和I2。减法模块给出在第一BF1和第二BF2嵌入存储器的内容之间的差值,以及把结果存储在第三嵌入存储器BF3。在优选实施例中,二维滤波器被分解为两个一维滤波器。每个一维滤波器分别在水平方向和垂直方向上施加到5和3个亮度样本以及4和3个色度样本。这样,在滤波时涉及到的操作数被减小,以及到嵌入存储器的访问被简化。首先被施加的水平滤波器H_FILT的结果被存储在第四嵌入存储器BF4,并在其上施加垂直滤波器V_FILT。然后在工作时对每个已滤波的象素差值进行绝对值ABS运算,此后,把每个象素与来自门限模块THR的门限值进行比较。比较的结果确定该象素是否为运动象素,以及被存储在第五嵌入存储器MB。
视频数据处理设备还包括中值滤波模块MF,它在DCT变换域中施加空间和时间中值滤波器。首先,对当前的场的三个DCT块对于每个象素施加中值滤波。接着,对三个接连的场的DCT块对于每个象素施加中值滤波。这样,对于要被滤波的每个块计算五个DCT变换。为了使得在中间滤波模块MF与系统存储器之间的存储器带宽最小化,由DCT计算模块从用来存储各个当前的块的和来自当前的场I1的2个空间相邻的块、来自下一个场I2的时间相邻的块、以及来自过去的场I0的时间相邻的块的三个嵌入存储器BP2,BP1和BP3,并行地计算五个DCT变换。中间结果被存储在五个另外的嵌入存储器BC1到BC5。对于被存储在BC2、BC3和BC4中的块执行空间域SPATM的中间滤波,以及在工作时对得出的已滤波的块和BC1与BC5嵌入存储器的内容施加时间中值滤波TEMPM。对于已滤波的数据施加IDCT变换,得出后处理的亮度。代替装置SELECT允许用检测出的运动象素替换在逆变换的块中的象素,最后的结果被存储在系统存储器中。
在以下的权利要求的括号中的任何参考符号不应当看作为限制本权利要求。显然,动词“包括”及其动词变化的应用不排除不同于在权利要求中规定了的任何步骤或元件的存在。在元件或步骤前的冠词“a”或“an”并不排除多个这样的元件或步骤的存在。

Claims (8)

1.处理数字视频信号(VS)的方法,所述视频信号表示图象序列,其特征在于,它包括以下步骤:
-检测当前图象(I(t))中的运动象素,
-计算对于所述当前图象(I(t))的块的离散频率变换,以便提供变换的块,
-中值滤波当前已变换的块(Bc),所述滤波包括以下子步骤:
-空间中值滤波属于当前已变换的块(Bc)和属于相邻块的第一组系数(Mcs,Mu,Md),以及
-时间中值滤波属于当前已变换的块(Bc)和属于先前的和随后的图象的相应的块(Bp,Bn)的第二组系数(Mct,Mp,Mn),
-计算对于已滤波的已变换的块的逆离散频率变换,以便提供已逆变换的块,以及
-用所述检测的运动象素代替在所述逆变换的块中的象素。
2.如权利要求1中要求的处理数字视频信号的方法,其特征在于,空间中值滤波子步骤在时间中值滤波子步骤之前执行。
3.如权利要求1中要求的处理数字视频信号的方法,其特征在于,检测步骤包括以下子步骤:
-对于图象差的象素分量进行滤波,以及
-通过门限值区分运动(MVT_PIX)和非运动(NO_MVT_PIX)象素。
4.用于译码器的计算机程序产品,包括一组指令,它在被装载到所述译码器时使得译码器实行如权利要求1到3中要求的某一方法。
5.用于计算机的计算机程序产品,包括一组指令,它在被装载到所述计算机时使得计算机实行如权利要求1到3中要求的某一方法。
6.用于处理数字视频信号(VS)的译码器,所述视频信号表示图象序列,其特征在于,它包括:
-运动检测装置,用来检测当前的图象(I(t))中的运动象素,
-离散频率计算装置,用来计算对于所述当前图象(I(t))的块的离散频率变换,以便提供已变换的块,
-中值滤波装置,用来滤波已变换的块(Bc),所述滤波器包括:
-空间中值子滤波器,用来滤波属于当前已变换的块(Bc)和属于相邻块的第一组系数(Mcs,Mu,Md),以及
-时间中值子滤波器,用来滤波属于当前已变换的块(Bc)和属于先前的和随后的图象的相应的块(Bp,Bn)的第二组系数(Mct,Mp,Mn),
-逆频率计算装置,用来计算对于已滤波的已变换的块的逆频率变换,以便提供已逆变换的块,以及
-代替装置,用来以所述检测出的运动象素代替在所述已逆变换的块中的象素。
7.如权利要求6中要求的用于处理数字视频信号(VS)的译码器,其特征在于,空间中值滤波装置在时间中值滤波装置之前实施。
8.如权利要求6中要求的用于处理数字视频信号(VS)的译码器,其特征在于,运动检测装置包括:
-滤波装置(LPF1、LPF2),用来对图象差的象素分量进行滤波,以及
-区分装置,用来通过门限值(TH)区分运动(MVT_PIX)和非运动(NO_MVT_PIX)象素。
CNB028121546A 2001-06-19 2002-06-13 用于处理数字视频信号的方法和译码器 Expired - Fee Related CN1294760C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP01401620.8 2001-06-19
EP01401620 2001-06-19

Publications (2)

Publication Number Publication Date
CN1516973A true CN1516973A (zh) 2004-07-28
CN1294760C CN1294760C (zh) 2007-01-10

Family

ID=8182771

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB028121546A Expired - Fee Related CN1294760C (zh) 2001-06-19 2002-06-13 用于处理数字视频信号的方法和译码器

Country Status (8)

Country Link
US (1) US6937662B2 (zh)
EP (1) EP1402736B1 (zh)
JP (1) JP2004531161A (zh)
KR (1) KR20030027044A (zh)
CN (1) CN1294760C (zh)
AT (1) ATE320142T1 (zh)
DE (1) DE60209715T2 (zh)
WO (1) WO2002104038A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7388999B2 (en) * 2003-10-29 2008-06-17 Hewlett-Packard Development Company, L.P. Transformations for denoising images
US7680355B2 (en) * 2005-05-02 2010-03-16 Intel Corporation Detection of artifacts resulting from image signal decompression
US8027383B2 (en) * 2006-06-13 2011-09-27 Lsi Corporation Mosquito noise reduction filter in digital decoders
WO2015167580A1 (en) * 2014-05-02 2015-11-05 Empire Technology Development, Llc Display detection for augmented reality

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2549479B2 (ja) * 1991-12-06 1996-10-30 日本電信電話株式会社 動き補償フレーム間帯域分割符号化処理方法
US5446501A (en) * 1992-10-22 1995-08-29 Accom, Incorporated Three-dimensional median and recursive filtering apparatus and method for video image enhancement
US5512956A (en) * 1994-02-04 1996-04-30 At&T Corp. Adaptive spatial-temporal postprocessing for low bit-rate coded image sequences
US5754699A (en) * 1994-11-24 1998-05-19 Victor Company Of Japan, Ltd. Method of reducing mosquito noise generated during decoding process of image data and device for decoding image data using the same
US5852475A (en) * 1995-06-06 1998-12-22 Compression Labs, Inc. Transform artifact reduction process
US5850294A (en) * 1995-12-18 1998-12-15 Lucent Technologies Inc. Method and apparatus for post-processing images
US6037986A (en) * 1996-07-16 2000-03-14 Divicom Inc. Video preprocessing method and apparatus with selective filtering based on motion detection
KR100265722B1 (ko) * 1997-04-10 2000-09-15 백준기 블럭기반영상처리방법및장치
KR100243225B1 (ko) * 1997-07-16 2000-02-01 윤종용 블록화효과 및 링잉잡음 감소를 위한 신호적응필터링방법 및신호적응필터
US6281942B1 (en) * 1997-08-11 2001-08-28 Microsoft Corporation Spatial and temporal filtering mechanism for digital motion video signals
US6178205B1 (en) * 1997-12-12 2001-01-23 Vtel Corporation Video postfiltering with motion-compensated temporal filtering and/or spatial-adaptive filtering

Also Published As

Publication number Publication date
ATE320142T1 (de) 2006-03-15
DE60209715T2 (de) 2006-09-14
WO2002104038A1 (en) 2002-12-27
CN1294760C (zh) 2007-01-10
KR20030027044A (ko) 2003-04-03
EP1402736A1 (en) 2004-03-31
US20040190621A1 (en) 2004-09-30
US6937662B2 (en) 2005-08-30
EP1402736B1 (en) 2006-03-08
JP2004531161A (ja) 2004-10-07
DE60209715D1 (de) 2006-05-04

Similar Documents

Publication Publication Date Title
US11064209B2 (en) System and method for content adaptive clipping
Jia et al. Spatial-temporal residue network based in-loop filter for video coding
CN1112045C (zh) 用反复误差数据编码方法进行视频压缩
KR100721543B1 (ko) 통계적 정보를 이용하여 노이즈를 제거하는 영상 처리 방법및 시스템
KR101031438B1 (ko) 화상 신호들에 대한 컨텐트 적응형 잡음 감소 필터링
CN1665298A (zh) 从数字运动画面数据中去除噪声的方法
WO2007041326A2 (en) System and method of spatio-temporal edge-preserved filtering techniques to reduce ringing and mosquito noise of digital pictures
CN1761309A (zh) 图像数据的信号处理装置及方法
CN1723711A (zh) 用于数字视频处理的一元化量度(umdvp)
CA2860072A1 (en) Quantization matrix design for hevc standard
CN101080929A (zh) 图像处理装置与图像处理方法
US20080205786A1 (en) Method and system for filtering images in video coding
CN1650328A (zh) 增强编码的数字视频的清晰度的系统和方法
CN1248487C (zh) 根据编码信息提供效用度量进行视频增强的装置和方法
CN1886759A (zh) 对视频信号中的局部视觉时空细节的检测
CN1294760C (zh) 用于处理数字视频信号的方法和译码器
US20100238354A1 (en) Method and system for adaptive noise reduction filtering
CN1723712A (zh) 对编码数字视频信号的联合进行分辨率或锐度增强和伪像减少
CN1607833A (zh) 用于视频信号降噪的设备和方法
EP1524858A2 (en) Image signal processing method and apparatus
JP2005012641A (ja) ブロックノイズ検出装置及びそれを用いたブロックノイズ除去装置
CN1643544A (zh) 视频信号后处理方法
CN1398115A (zh) 无附加帧存储器基于块边界的差和量化因子的去块效应法
Del Corso et al. MNR: A novel approach to correct MPEG temporal distortions
CN101877759B (zh) 影像处理装置以及影像处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: PACE MICRO TECHNOLOGY CO., LTD.

Free format text: FORMER OWNER: ROYAL PHILIPS ELECTRONICS CO., LTD.

Effective date: 20080808

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20080808

Address after: West Yorkshire

Patentee after: Koninkl Philips Electronics NV

Address before: Holland Ian Deho Finn

Patentee before: Koninklike Philips Electronics N. V.

C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20070110