CN1158054A - 用于对被发送的视频信号中的误差进行补偿的方法及装置 - Google Patents

用于对被发送的视频信号中的误差进行补偿的方法及装置 Download PDF

Info

Publication number
CN1158054A
CN1158054A CN96114184A CN96114184A CN1158054A CN 1158054 A CN1158054 A CN 1158054A CN 96114184 A CN96114184 A CN 96114184A CN 96114184 A CN96114184 A CN 96114184A CN 1158054 A CN1158054 A CN 1158054A
Authority
CN
China
Prior art keywords
piece
sigma
motion vector
adjacent
adjacent blocks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN96114184A
Other languages
English (en)
Inventor
金镇宪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WiniaDaewoo Co Ltd
Original Assignee
Daewoo Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daewoo Electronics Co Ltd filed Critical Daewoo Electronics Co Ltd
Publication of CN1158054A publication Critical patent/CN1158054A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Input (AREA)

Abstract

一种误差隐蔽方法,首先检测一重构当前帧中的一损失块,然后抽取对应于该损失块的相邻块的象素值及运动矢量。然后,确定对应于这些相邻块的运动矢量的运动差异并与预定阀值相比较。接着,根据比较结果,基于这些相邻块的运动矢量及象素值生成一块替代该损失块。

Description

用于对被发送的视频信号中的误差进行补偿的方法及装置
本发明涉及一种用于视频信号解码系统的误差隐蔽的方法及装置;且更具体地,涉及一种用于隐蔽在以压缩形式发送的解码后的视频信号中出现的误差的方法及装置。
众所周知,数学化视频信号的传输能获得比模拟信号传输质量高得多的视频图象。当视频信号以数字形式表达时,会生成非常大量的用于传输的数据,特别是在高清晰度电视(HDTV)系统的情况下。然而,由于通常传输信道的可用频宽有限,为了通过其发送这么大量的数字数据,不可避免地要压缩或减少传输数据量。
在通常的传输系统中,通过使用例如DCT(离散余弦变换)及运动补偿技术在逐块基础上压缩视频信号;且压缩后的视频信号通过一噪声传输信道被发送给一接收端,使得在被发送的视频信号中不产生数据损失或破坏。然而,这样的传输系统不提供充足的额外开销机构以恢复所有误差,而是依靠在接收端的误差隐蔽以提供替代数据用于近似未被恢复的数据。
在题为“用于替代运动图象接收系统中损失的块的方法及装置”的于1996年1月30日被授权的美国专利号为5,541,667的美国专利公开了一种通常的误差隐蔽方案。在该专利中,该在逐块基础上接收运动图象的方法包括有以下步骤:检测在接收的视频信号中不能被再现的损失块,计算与该损失块相邻的块的平均值,以该平均值或先前帧中相同位置的块自适应地替代该损失块。且采用该建议的方法的装置包括一损失块检测单元、一块平均值计算单元、一替代控制单元、一相邻块平均值计算单元及一选择器。
然而,以上误差隐蔽方法及装置未考虑到运动图象的运动,尽管在接收的视频信号中出现的误差被补偿到一定程度,因此仍期望开发出一种能考虑到运动图象的运动以改善在接收的视频信号中的损失或破坏的块的误差隐蔽方法。
因此,本发明的主要目的是提供一种通过使用被发送的视频信号的运动矢量而能改善该发送的视频信号中被误差隐蔽的块的质量的误差隐蔽方法及装置。
根据本发明的一方面,提供有一种用于视频信号解码系统中的,用于隐蔽以被压缩的形式发送的视频信号中的误差的方法,其中该视频信号包括一根据当前帧的运动矢量而被恢复的重构当前帧和一重构先前帧,各帧被分成多个块,各块具有N×m个象素,N及M为正整数,该方法包括有以下步骤:检测一包括有误差的损失块;提供该重构当前帧中与该损失块相邻的块的象素值及与其相应的运动矢量;根据这些相邻块的运动矢量生成一补偿块;并提供该补偿块作为用于隐蔽该损失块的替代块。
根据本发明的另一方面,提供有一种用于视频信号解码系统中的,用于隐蔽以被压缩的形式发送的视频信号中的误差的装置,其中该视频信号包括一根据当前帧的运动矢量而被恢复的重构当前帧和一重构先前帧,各帧被分成多个块,各块具有N×M个象素,N及M为正整数,该装置包括有:用于检测一包含有误差的损失块从而产生表示该重构当前帧中该损失块的位置的位置数据的损失块检测器;用于根据该位置数据提供该重构当前帧中损失块的相邻块的象素值及与其相应的运动矢量的相邻块确定电路;用于通过使用这些相邻块的运动矢量计算一平均矢量的平均矢量计算器;及用于使用该平均矢量或位置数据及重构先前帧的象素值产生一基于运动的块,并提供该基于运动的块作为用于修正该损失块的替代块。
以下通过结合附图对优选实施例的描述,本发明以上及其它目的和特征将变得显然,附图中:
图1示出了一误差隐蔽系统的概略方框图;
图2示出了根据本发明的图1中的一误差隐蔽电路300;
图3说明了图2中示出了第一比较单元210的详细方框图;
图4给出了在重构当前帧中一损失块及其相邻块的概略性表示;
图5说明了根据其相邻块的象素值对该损失块进行补偿的示例性过程;及
图6描述了替代该损失块的一块与其相邻块之间的侧匹配过程。
参照图1,通过使用常规解码技术,例如可变长度解码、逆量化和逆DCT在解码电路400对以压缩形式发送的视频信号进行解码并提供给帧存储器300一包括一重构当前帧和一重构先前帧的被解码视频信号,各帧被分成多个块,例如N×M象素块,N及M为正整数。且该被解码的视频信号存储在帧存储器300。
该视频信号还被馈送给块检测器100且该块检测器100检测该视频信号中的一损失块,从而提供表示该损失块位置的位置数据给一线L10,该损失块包含有误差;且根据对应于通过线L40自帧存储器300抽取的重构当前帧及该视频信号的运动矢量提供该损失块的相邻块的块信息,该块信息包括这些相邻块的运动矢量及各相邻块的象素值。在以上中,通过经线L10被传送给帧存储器300的位置数据确定这些相邻块。包括在该块信息中的象素值和运动矢量分别通过线L20和L30被提供经误差隐蔽电路200。
该误差隐蔽电路200生成一替代块以对该重构当前帧中的该损失块进行补偿,该替代块根据线L10上的位置数据、线L20和L30上的块信息及经线L60自帧存储器300抽取的重构先前帧构成。
图2中,提供了图1中示出的误差隐蔽电路200的详细方框图。而且图2中的第一比较单元210在图3中进行了更详细的叙述。参照图2及图3将能理解误差隐蔽电路200的结构及其工作。
首先,参照图3,该第一比较单元210包括一平均值计算区211,一差异确定区212及一比较区213。
该平均值计算区211首先计算线L30上该损失块的相邻块的运动矢量的平均值并提供给差异确定区212且通过线L210提供给图2中的第一补偿单元220,其中如图4所示,该损失块的相邻块表示环绕块0的8个块,即块1至块8,其中该块0被假设为该损失块。
根据本发明的优选实施例,该差异确定区212如下式所示计算来自平均值计算区211的平均值和相邻块的运动矢量之间的运动差异: σ D 2 = 1 8 Σ k = 1 8 ( D MVK - D MV ‾ ) 2 - - - EQ . 1 σ θ 2 = 1 8 Σ k = 1 8 ( θ MVK - θ MV ‾ ) 2 - - - EQ . 2 σ T 2 = σ D 2 + σ θ 2 - - - EQ . 3
其中σD 2表示这些相邻块的运动矢量的幅度差;DMVK表示对应于第K个相邻块的运动矢量的幅度;
Figure A9611418400144
是这些相邻块的运动矢量的幅度的平均值;σQ 2表示这些相邻块的运动矢量的方向差异;QMVK表示对应于第K个相邻块的运动矢量的方向值;
Figure A9611418400145
是这些相邻块的运动矢量的方向值的平均值;及σT 2表示这些运动矢量的运动差异。
另一方面,在本发明的另一优选实施例中,如下式那样计算来自平均值计算区211的平均值与相邻块的运动矢量之间的运动差异。 σ x 2 = 1 8 Σ k = 1 8 ( x k - x ‾ ) 2 - - - EQ . 4 σ y 2 = 1 8 Σ k = 1 8 ( y k - y ‾ ) 2 - - - EQ . 5 σ T 2 = σ x 2 + σ y 2 - - - EQ . 6
其中σX 2表示这些相邻块的运动矢量的X坐标差异;XK表示对应于第K个相邻块的运动矢量的X坐标值; X是这些相邻块的运动矢量的X坐标值的平均值;σY 2表示这些相邻块的运动矢量的Y坐标差异;YK表示对应于第K个相邻块的运动矢量的Y坐标值; Y是这些相邻块的运动矢量的Y坐标值的平均值;及σT 2表示这些运动矢量的运动差异。
由本发明的在前实施例或在后实施例确定的这些运动矢量的运动差异被提供给比较区213。
比较区213将提供给其的运动差异与第一及第二预定阀值进行比较,从而提供比较信号通过线L220给选择单元270。在上述比较过程中,如果该运动差异小于第一预定阀值,生成第一比较信号C1;如果该运动差异大于第二预定阀值产生第二比较信号C2;如果该运动差异大于或等于第一预定值且小于或等于第二预定值,提供第三比较信号C3。
返回参照图2,第一补偿单元220根据来自帧存储器300在线L60上的重构先前帧,及线L10上的表示损失块的位置的位置数据或自第一比较单元210中的平均值计算区211传送的这些相邻块的运动矢量的平均值产生第一替代块。
也就是说,如果根据本发明的优选实施例,在第一补偿单元220的块生成过程中选择该位置数据,第一补偿单元220抽取在与该重构先前帧内的与该位置数据相应的相同位置的一块并提供其作为该损失块的第一替代块。
另一方面,如果根据本发明的另一优选实施例,选择这些运动矢量的平均值,从该重构先前帧的块中选出与这些运动矢量的平均值相应位置的一块作为该损失块的替代块。
在第一补偿单元220确定的该块被提供给补偿值计算单元240及加法器290。
同时,第二补偿单元230通过使用该损失块的相邻块的象素值的空间内插法生成第二替代块。例如,如图5所示,在相邻于该损失块且包括在这些相邻块2、4、5及7中的相邻象素中,位于与该损失块的各象素同一行或列上的这些相邻象素的值被用于计算该替代块的各象素值。通过如下式所示计算位于垂直及水平行上的四个象素值的加权和来确定第二替代块的各象素值:
Sij=W1×U4j+W2×Li4+W3×Ri1+W4×D1j    EQ.7 w h = 1 d h Σ h = 1 4 1 d h
其中Wh表示一加权因子;dh表示该损失块中的一象素和位于与该损失块中该象素对应的垂直及水平行上的各象素之间的距离;U4j、Li4、Ri1、及D1j分别表示上、左、右、下相邻块中的第j4、i4、i1和1j个象素值;sij表示第二替代块中第ij个象素值;及i、j和h分别处于从1至4的范围。
因此,通过将四个象素值U41、D11、L14和R11代入公式7得出象素值S11并且根据象素值U43、D13、L34和R31确定象素值S33。以与这些例子相同的方式计算第二替代块的其余象素值。通过上述过程构成的第二替代块被提供给补偿值计算单元240及多路复用器280。
该补偿值计算单元240首先分别计算第一及第二替代块的所有象素值的第一和第二平均值;并将该两平均值间的差提供给加法器290作为一补偿值,通过从第二平均值中减去第一平均值得到该差。
在加法器290,该补偿值被加至来自第一补偿单元220的第一替代块的各象素值上。通过该相加过程而被补偿的第一替代块被传送给一侧匹配单元250及多路复用器280作为经补偿的第一替代块。
侧匹配单元250首先将该经补偿的第一替代块,例如块10与自块检测器100传送的相邻块,例如块1至8放至一起,如图6所示,并通过对各两配对相邻象素值之间的差的绝对值求和来计算一侧匹配函数值,其中一象素是块10中的一个边界象素而另一配对的相邻象素属于该块10的一相邻块。参照图6,如下式所示计算该侧匹配函数值fsm。 f SM = Σ j = 1 4 | S 1 j - U 4 j | + Σ i = 1 4 | S i 1 - L i 4 | + Σ i = 1 4 | S i 4 - R i 1 | + Σ j = 1 4 | S 4 j - D 1 j | - - - EQ . 8
其中Sij表示该块10的第ij个象素值,Uij、Lij、Rij和Rij表示围绕该块10的上、左、右和下相邻块中的与Sij相邻的象素值。
在第二比较单元260将通过公式8确定的侧匹配函数值fsm与第三预定阀值TH3进行比较。结果,如果该侧匹配函数值fsm小于该第三预定阀值TH3,提供第四比较信号C4给选择单元270;否则,提供第五比较信号C5给单元270。
选择单元270响应于自第一和第二比较单元210和260提供的比较信号,生成第一及第二多路复用器控制信号CM1和CM2。根据本发明的优选实施例,该待被输出的多路复用器控制信号如图1中所示的那样被确定。
               表1    多路复用器控制信号的选择
    比较信号     控制信号
    C1   C2   C3     C4   C5     CM
    1    0    0     1    0     CM1
    0    1    0     1    0     CM2
    0    0    1     1    0     CM1
    1    0    0     0    1     CM1
    0    1    0     0    1     CM2
    0    0    1     0    1     CM2
这些表1中所示的多路复用器控制信号被交替地提供给多路复用器280。
响应于来自选择单元270的多路复用器控制信号,多路复用器280选择来自加法器290的经补偿的第一替代块或来自第二补偿单元230的第二替代块并提供选择的替代块经线L50给帧存储器300用于具有该损失块的重构当前帧的误差隐蔽。也就是说,如果第一多路复用器控制信号CM1被提供给多路复用器280,来自加法器290的经补偿的第一替代块被提供到线L50用于在图1中的帧存储器300上对重构的当前帧进行补偿。另一方面,如果提供第二多路复用器控制信号CM2,来自第二补偿单元230的第二替代块被提供到线L50上。
根据来自块检测器100的线L10上的位置数据,用于帧存储器300中的重构的当前帧中的损失块由线LS0上的选择的块所替换。
尽管仅相对于优选实施例对本发明进行了图示和描述,但对于本领域的熟练技术人员而言,不脱离由所附权利要求定义的本发明的精神和范围,显然可以做出许多变化和改型。

Claims (28)

1.一种用于视频信号解码系统中的用于对以压缩形式发送的视频信号中的误差进行隐蔽的方法,其中该视频信号包括一根据一当前帧的运动矢量而被恢复的经重构的当前帧和一经重构的先前帧,各帧被分成多个块,各块具有N×M个象素,N及M为正整数,该方法包括有以下步骤:
(a)检测一包括有误差的损失块;
(b)提供该经重构的当前帧中该损失块的相邻块的象素值及与其相应的运动矢量;
(c)根据这些相邻块的运动矢量生成一补偿块;及
(d)提供该补偿块作为隐蔽该损失块的替代块。
2.根据权利要求1所述的方法,其中步骤(c)包括有以下步骤:
(c1)通过使用这些相邻块的运动矢量计算一平均矢量并确定该平均矢量与这些相邻块的各运动矢量之间的运动差异;
(c2)将该运动差异与第一及第二预定阀值进行比较;及
(c3)如果该运动差异小于第一预定阀值,通过使用与该经重构的先前帧中的与这些相邻块的运动矢量的平均矢量相应的位置上的一块来产生该补偿块。
3.根据权利要求2所述的方法,其中该运动差异根据下式被确定: σ D 2 = 1 P Σ k = 1 P ( D MVK - D MV ‾ ) 2 σ θ 2 = 1 P Σ k = 1 P ( θ MVK - θ MV ‾ ) 2 σ T 2 = σ D 2 + σ θ 2 其中σD 2表示这些相邻块的运动矢量的幅度差异;DMVK表示对应于第K个相邻块的运动矢量的幅度;
Figure A9611418400031
是这些相邻块的运动矢量的幅度的平均值;σO 2表示这些相邻块的运动矢量的方向差异;QMVK表示对应于第K个相邻块的运动矢量的方向性值;是这些相邻块的运动矢量的方向性值的平均值;σT 2表示这些相邻块的运动矢量的运动差异;及P是一表示相邻块数目的正整数。
4.根据权利要求2所述的方法,其中如下式确定该运动差异 σ x 2 = 1 P Σ k = 1 P ( x k - x ‾ ) 2 σ y 2 = 1 P Σ k = 1 P ( y k - y ‾ ) 2 σ T 2 = σ x 2 + σ y 2
其中σx 2表示这些相邻块的运动矢量的X坐标差异;XK表示对应于第K个相邻块的运动矢量的X坐标值; X是这些相邻块的运动矢量的X坐标值的平均值;σy 2表示这些相邻块的运动矢量的Y坐标差异;YK表示对应于第K个相邻块的运动矢量的Y坐标值; Y是这些相邻块的运动矢量的Y坐标值的平均值;σT 2表示这些相邻块的运动矢量的运动差异;及P是表示这些相邻块数目的一正整数。
5.根据权利要求2所述的方法,其中步骤(C3)包括有以下步骤,如果该运动差异大于第二预定阀值:
(c311)在相邻于该损失块的上、左、右和下相邻块中的相邻象素内,检测位于与该损失块的各象素同一行或列上的四个相邻象素;及
(c312)根据如下式计算的该四个相邻象素值的加权和,生成该补偿块:
Sij=W1×UNj+W2×LiM+W3×Ri1+W4×D1j W h = 1 d h Σ h = 1 4 1 d h
其中Wh表示一加权因子;dh表示该损失块中一象素和与该损失块中该象素相应的垂直及水平行上的各象素之间的距离;Sij表示该补偿块中的第ij个象素值;UNj、LiM、Ri1及D1j分别表示上、左、右和下相邻块中第Nj、iM、i1和1j个象素值;h为LiM、Ri1及D1j分别表示上、左、右和下相邻块中第Nj、iM、i1和1j个象素值;h为从1至4;i的范围大小为从1至N;及j的范围大小为从1至M。
6.根据权利要求2所述的方法,其中步骤(C3)包括有以下步骤,如果该运动差异大于或等于第一预定阀值且小于或等于第二预定阀值:
(c321)通过使用与该经重构的先前帧内的与相邻块的运动矢量的平均矢量相应位置上的一块生成一块;
(c322)以在步骤(c321)中生成的该块侧匹配该损失块的这些相邻块,从而提供一侧匹配函数值;
(c323)将该侧匹配函数值与第三预定阀值相比较;及
(c324)如果该侧匹配函数值小于第三预定阀值,提供在步骤(c321)中生成的该块作为该补偿块,
(c325)如果该侧匹配函数值大于或等于第三预定阀值,根据这些相邻块的象素值产生该补偿块,
且所述步骤(c325)包括有以下步骤:
(P1)在相邻于该损失块的上、左、右和下相邻块中的相邻象素中,检测位于与该损失块的各象素在同一行或列上的四个相邻象素;及
(P2)根据如下式计算的四个相邻象素值的加权和,生成该补偿块:
Sij=W1×UNj+W2×LiM+W3×Ri1+W4×D1j W h = 1 d h Σ h = 1 4 1 d h
其中Wh表示一加权因子;dh表示该损失块中一象素和与该损失块中该象素相应的垂直及水平行上的各象素之间的距离;Sij表示该补偿块中的第ij个象素值;UNj、LiM、Ri1及D1j分别表示上、左、右和下相邻块中的第Nj、iM、i1及1j个象素值;h是从1至4;i的范围大小是从1至N;及j的范围大小是从1至M。
7.根据权利要求6所述的方法,其中根据下式确定侧匹配函数值: f SM = Σ j = 1 M | S 1 j - U Nj | + Σ i = 1 N | S i 1 - L iM | + Σ i = 1 N | S iM - R i 1 | + Σ j = 1 M | S Nj - D 1 j |
其中Sij表示在步骤(c321)中生成的块的第ij个象素值;UNj、Li、Ri1及D1j分别表示上、左、右及下相邻块中的第Nj、iM、i1及1j个象素值;及fsm是该侧匹配函数值。
8.一种用于视频信号解码系统中的用于对以压缩形式发送的视频信号中的误差进行隐蔽的装置,其中该视频信号包括一根据一当前帧的运动矢量而被恢复的经重构的当前帧和一经重构的先前帧,各帧分成多个块,各块具有N×M个象素,N及M为正整数,该装置包括有以下步骤:
用于检测包含有误差的一损失块,从而产生表示视频信号中该损失块的位置的位置数据的装置;
用于根据该位置数据提供该经重构的当前帧中该损失块的相邻块的象素值及与其对应的运动矢量的装置;
用于通过使用这些相邻块的运动矢量计算一平均矢量的装置;及
用于根据该位置数据、平均矢量及该经重构的先前帧的象素值产生一基于运动的块替代该损失块的装置。
9.根据权利要求8所述的装置,其中选择该经重构的先前帧中与位置数据相应的同一位置的块作为该基于运动的块。
10.根据权利要求8所述的装置,其中选择该经重构的先前帧中与该平均矢量相应的一位置的块作为该基于运动的块。
11.根据权利要求8所述的装置,还包括有:
块生成装置,用于根据这些相邻块的象素值产生一空间内插块;及
选择装置,用于选择该基于运动的块或空间内插块作为使用该平均矢量修正该损失块的替代块。
12.根据权利要求11所述的装置,其中该块生成装置包括:
用于在邻近于该损失块的上、左、右及下要邻块中的相邻象素内,检测位于与该损失块的各象素在同一行或列上的四个相邻象素的装置,
用于如下式通过计算这四个相邻象素值的加权和来计算该空间内插块中的各象素值    Sij=W1×UNj+W2×LiM+W3×Ri1+W4×D1j W h = 1 d h Σ h = 1 4 1 d h
其中Wh表示一加权因子;dh表示该损失块中一象素与相应于该损失块中该象素的垂直及水平行上的各象素之间的距离;Sij表示该空间内插块中的第ij个象素值;UNj、LiM、Ri1和D1j分别表示上、左、右、下相邻块中的第Nj、iM、i1、1j个象素值;h是从1至4;i的范围大小为从1至N;及j的范围大小为从1至M。
13.根据权利要求11所述的装置,其中选择装置包括:
用于确定该平均矢量与这些相邻块的运动矢量之间的运动差异的装置;
比较装置,用于将该运动差异与第一及第二预定阀值进行比较,从而产生路径选择信号;及
提供装置,用于响应这些路径选择信号,提供该基于运动的块或该空间内插块作为替代块。
14.根据权利要求13的装置,其中根据下式确定该运动差异: σ D 2 = 1 p Σ k = 1 p ( D MVK - D MV ‾ ) 2 σ θ 2 = 1 P Σ k = 1 P ( θ MVK - θ MV ‾ ) 2 σ T 2 = σ D 2 + σ θ 2 其中σD 2表示这些相邻块的运动矢量的幅度差异;DMVK表示对应于第K个相邻块的一运动矢量的幅度;
Figure A9611418400071
是这些相邻块的运动矢量的幅度的平均值,σQ 2表示这些相邻块的运动矢量的方向差异;QMVK表示对应于第K个相邻块的一运动矢量的方向性值;
Figure A9611418400072
是这些相邻块的运动矢量的方向性值的平均值;σT 2表示这些相邻块的运动矢量的运动差异;及P是一表示这些相邻块的数目的正整数。
15.根据权利要求13的装置,其中根据下式确定该运动差异 σ x 2 = 1 P Σ k = 1 P ( x k - x ‾ ) 2 σ y 2 = 1 P Σ k = 1 P ( y k - y ‾ ) 2 σ T 2 = σ x 2 + σ y 2
其中σx 2表示这些相邻块的运动矢量的X坐标差异;XK表示对应于第K个相邻块的一运动矢量的X坐标值; X是这些相邻块的运动矢量的X坐标值的平均值;σy 2表示这些相邻块的运动矢量的Y坐标值;YK表示对应于第K个相邻块的一运动矢量的Y坐标值; Y是这些相邻块的运动矢量的Y坐标值的平均值;σT 2表示这些相邻块的运动矢量的运动差异;及P是表示这些相邻块的数目的正整数。
16.根据权利要求13所述的装置,其中该提供装置包括有:
用于如果该运动差异小于第一预定阀值,产生第一路径选择信号的装置;及
用于如果该运动差异大于第二预定阀值,产生第二路径选择信号的装置。
17.根据权利要求16所述的装置,其中该提供装置包括有:
用于响应第一路径选择信号,提供该基于运动的块作为替代块的装置;及
用于响应第二路径选择信号,提供该空间内插块作为替代块的装置。
18.根据权利要求17所述的装置,其中该选择装置包括有:
用于如果该运动差异大于或等于第一预定阀值且小于或等于第二预定阀值,生成第三路径选择信号的装置;
用于以该基于运动的块侧匹配该损失块的相邻块,从而生成一侧匹配函数值的装置;
用于如果该侧匹配函数值小于第三预定阀值,产生第一比较信号的装置;
用于如果侧匹配函数值大于或等于第三预定阀值,产生第二比较信号的装置。
用于响应该第三路径选择信号和第一比较信号,提供该基于运动的块作为替代块的装置;及
用于响应该第三路径选择信号及第二比较信号,提供该空间内插块作为替代块的装置。
19.根据权利要求18所述的装置,其中根据下式确定该侧匹配函数值: f SM = Σ j = 1 M | S 1 j - U Nj | + Σ i = 1 N | S i 1 - L iM | + Σ i = 1 N | S iM - R i 1 | + Σ j = 1 M | S Nj - D 1 j |
其中Sij表示该基于运动的块的第ij个象素值;UNj、LiM、Ri1和D1j分别表示上、左、右、下相邻块中第Nj、iM、i1、1j个象素值;及fsm是该侧匹配函数值。
20.根据权利要求8所述的装置,还包括有:
块生成装置,用于根据这些相邻块的象素值产生一空间内插块;
用于计算该基于运动的块的所有象素值的第一平均值的装置;
用于计算该空间内插块的所有象素值的第二平均值的装置;
用于通过从第二平均值中减去第一平均值,计算该第一和第二平均值之间的差的装置;
用于将该差加至该基于运动的块的各象索上,从而提供一经误差补偿的块的装置;及
选择装置,用于选择该经误差补偿的块或该空间内插块作为一替代块,用于根据该运动矢量修正该损失块。
21.根据权利要求20所述的装置,其中该块生成装置包括:
用于在邻近于该损失块的上、左、右、下上邻块中的相邻象素内,检测位于与该损失块的各象素在同一行或列上的四个相邻象素的装置;
用于通过计算这四个相邻象素的加权和,根据下式计算该空间内插块中的各象素值的装置:    Sij=W1×UNj+W2×LiM+W3×Ri1+W4×D1j W h = 1 d h Σ h = 1 4 1 d h
其中Wh表示一加权因子;dh表示该损失块中一象素与相应于该损失块中该象素的垂直及水平行上的各象素之间的距离;Sij表示该空间内插块中第ij个象素值;UNj、LiM、Ri1和D1j分别表示上、左、右、下相邻块中的第Nj、iM、i1、1j个象素值;h是从1至4;i的范围大小为从1至N;及j的范围大小为从1至M。
22.根据权利要求21所述的装置,其中该选择装置包括:
用于确定该运动矢量与这些相邻块的各运动矢量之间的运动差异的装置;
比较装置,用于将该运动差异与第一及第二预定阀值相比较,从而产生路径选择信号;及
提供装置,用于响应该路径选择信号,提供该经误差补偿的块或空间内插块作为替代块。
23.根据权利要求22所述的装置,其中根据下式确定该运动差异: σ D 2 = 1 P Σ k = 1 P ( D MVK - D MV ‾ ) 2 σ θ 2 = 1 P Σ k = 1 P ( θ MVK - θ MV ‾ ) 2 σ T 2 = σ D 2 + σ θ 2 其中σD 2表示这些相邻块的运动矢量的幅度差异;DMVK表示对应于第K个相邻块的运动矢量的幅度;
Figure A9611418400102
是这些相邻块的运动矢量的幅度的平均值;σQ 2表示这些相邻块的运动矢量的方向差异;QMVK表示对应于第K个相邻块的运动矢量的方向性值;σT 2表示这些相邻块的运动矢量的运动差异;及P是表示这些相邻块的数目的一正整数。
24.根据权利要求22所述的装置,其中根据下式确定该运动差异: σ x 2 = 1 P Σ k = 1 P ( x k - x ‾ ) 2 σ y 2 = 1 P Σ k = 1 P ( y k - y ‾ ) 2 σ T 2 = σ x 2 + σ y 2
其中σx 2表示这些相邻块的运动矢量的X坐标差异;XK表示对应于第K个相邻块的运动矢量的X坐标值; X是这些相邻块的运动矢量的X坐标值的平均值;σY 2表示这些相邻块的运动矢量的Y坐标差异;YK表示对于第K个相邻块的运动矢量的Y坐标值; Y是这些相邻块的运动矢量的Y坐标值的平均值;σT 2表示这些相邻块的运动矢量的运动差异;及P是一表示这些相邻块的数目的正整数。
25.根据权利要求22所述的装置,其中该比较装置包括:
用于如果该运动差异小于第一预定阀值,产生第一路径选择信号的装置;及
用于如果该运动差异大于第二预定阀值,生成第二路径选择信号的装置。
26.根据权利要求25所述的装置,其中该提供装置包括:
用于响应第一路径选择信号,提供该经误差补偿的块作为替代块的装置;及
用于响应第二路径选择信号,提供该空间内插块作为替代块的装置。
27.根据权利要求26所述的装置,其中该选择装置包括:
用于如果该运动差异大于或等于第一预定阀值及小于或等于第二预定阀值,生成第三路径选择信号的装置;
用于以该经误差补偿的块侧匹配该损失块的相邻块,从而生成一侧匹配函数值的装置;
用于如果该侧匹配函数值小于第三预定阀值,产生第一比较信号的装置;
用于如果该侧匹配函数值大于或等于第三预定阀值,生成第二比较信号的装置;
用于响应第三路径选择信号及第一侧匹与比较信号,提供该经误差补偿的块作为替代块的装置;及
用于响应第三路径选择信号及第二侧匹配比较信号,提供该空间内插块作为替代块。
28.根据权利要求27所述的装置,其中根据下式确定该侧匹配函数值: f SM = Σ j = 1 M | S 1 j - U Nj | + Σ i = 1 N | S i 1 - L iM | + Σ i = 1 N | S iM - R i 1 | + Σ j = 1 M | S Nj - D 1 j |
其中Sij表示该经误差补偿的块的第ij个象素值;UNj、LiM、Ri1和D1j分别表示上、左、右、下相邻块的第Nj、iM、i1、1j个象素值;及fsm是该侧匹配函数值。
CN96114184A 1995-12-23 1996-12-23 用于对被发送的视频信号中的误差进行补偿的方法及装置 Pending CN1158054A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1019950055653A KR100197368B1 (ko) 1995-12-23 1995-12-23 영상 에러 복구 장치
KR55653/95 1995-12-23

Publications (1)

Publication Number Publication Date
CN1158054A true CN1158054A (zh) 1997-08-27

Family

ID=19443878

Family Applications (1)

Application Number Title Priority Date Filing Date
CN96114184A Pending CN1158054A (zh) 1995-12-23 1996-12-23 用于对被发送的视频信号中的误差进行补偿的方法及装置

Country Status (5)

Country Link
US (1) US5912707A (zh)
JP (1) JPH09187016A (zh)
KR (1) KR100197368B1 (zh)
CN (1) CN1158054A (zh)
GB (1) GB2308766B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100348053C (zh) * 2002-02-28 2007-11-07 株式会社精密技术 利用运动图像的电子水印的错误隐蔽方法
CN100405854C (zh) * 2003-10-16 2008-07-23 Lg电子株式会社 用于在视频处理系统中判断丢失模块的特性的装置和方法
CN115909961A (zh) * 2021-09-30 2023-04-04 乐金显示有限公司 显示装置以及处理和应用该显示装置的补偿数据的方法

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3157101B2 (ja) * 1996-03-08 2001-04-16 沖電気工業株式会社 画像符号化方法及び画像符号化装置
AUPO918597A0 (en) * 1997-09-12 1997-10-09 Commonwealth Scientific And Industrial Research Organisation Error concealment for video services
CN1117480C (zh) 1997-12-01 2003-08-06 三星电子株式会社 运动向量预测方法
JP3576402B2 (ja) * 1998-10-23 2004-10-13 三菱電機株式会社 画像復号化装置
US6282322B1 (en) * 1998-12-03 2001-08-28 Philips Electronics North America Corp. System and method for compressing and decompressing images
KR100587280B1 (ko) * 1999-01-12 2006-06-08 엘지전자 주식회사 오류 은폐방법
JP2001218210A (ja) * 2000-02-02 2001-08-10 Sony Corp ノイズ検出方法、ノイズ検出装置、画像データ処理装置、記録媒体
JP2004532540A (ja) * 2001-03-05 2004-10-21 インタービデオインコーポレイテッド 誤り耐性のある符号化のためのシステム及び方法
EP1659802B1 (en) * 2001-10-05 2008-07-23 Mitsubishi Electric Information Technology Centre Europe B.V. Method and apparatus for compensating for motion vector errors in image data
US7120308B2 (en) 2001-11-26 2006-10-10 Seiko Epson Corporation Iterated de-noising for image recovery
US7903179B2 (en) * 2002-06-25 2011-03-08 Panasonic Corporation Motion detection device and noise reduction device using that
EP1395061A1 (en) * 2002-08-27 2004-03-03 Mitsubishi Electric Information Technology Centre Europe B.V. Method and apparatus for compensation of erroneous motion vectors in video data
US7260269B2 (en) * 2002-08-28 2007-08-21 Seiko Epson Corporation Image recovery using thresholding and direct linear solvers
US7027515B2 (en) * 2002-10-15 2006-04-11 Red Rock Semiconductor Ltd. Sum-of-absolute-difference checking of macroblock borders for error detection in a corrupted MPEG-4 bitstream
US8824553B2 (en) 2003-05-12 2014-09-02 Google Inc. Video compression method
US7352909B2 (en) * 2003-06-02 2008-04-01 Seiko Epson Corporation Weighted overcomplete de-noising
US20050105817A1 (en) * 2003-11-17 2005-05-19 Guleryuz Onur G. Inter and intra band prediction of singularity coefficients using estimates based on nonlinear approximants
US7394855B2 (en) * 2003-11-20 2008-07-01 Mitsubishi Electric Research Laboratories, Inc. Error concealing decoding method of intra-frames of compressed videos
US7324698B2 (en) * 2003-11-20 2008-01-29 Mitsubishi Electric Research Laboratories, Inc. Error resilient encoding method for inter-frames of compressed videos
KR100621005B1 (ko) * 2003-12-24 2006-09-08 엘지전자 주식회사 영상 오류 복구장치 및 방법
EP1592259B1 (en) * 2004-04-30 2011-10-05 Panasonic Corporation Processing auxiliary data of video sequences
US7953152B1 (en) 2004-06-28 2011-05-31 Google Inc. Video compression and encoding method
US20060062304A1 (en) * 2004-09-17 2006-03-23 Shih-Chang Hsia Apparatus and method for error concealment
US7466361B2 (en) * 2004-10-08 2008-12-16 Wyman Richard H Method and system for supporting motion in a motion adaptive deinterlacer with 3:2 pulldown (MAD32)
JP4531058B2 (ja) * 2004-10-29 2010-08-25 シャープ株式会社 動画像復号装置
JP2008519480A (ja) * 2004-11-04 2008-06-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビデオデコード処理においてエラーを隠蔽する方法及び装置
US20060285598A1 (en) * 2005-06-17 2006-12-21 Jarno Tulkki Apparatuses, computer program product and method for digital image quality improvement
JP4799330B2 (ja) * 2006-09-08 2011-10-26 株式会社東芝 フレーム補間回路、フレーム補間方法、表示装置
US8243805B2 (en) * 2006-11-14 2012-08-14 Microsoft Corporation Video completion by motion field transfer
WO2009017105A1 (ja) * 2007-07-30 2009-02-05 Nec Corporation 通信端末、配信システム、変換方法、及びプログラム
US8326075B2 (en) 2008-09-11 2012-12-04 Google Inc. System and method for video encoding using adaptive loop filter
US20100091859A1 (en) * 2008-10-09 2010-04-15 Shao-Yi Chien Motion compensation apparatus and a motion compensation method
TWI566586B (zh) * 2009-10-20 2017-01-11 湯姆生特許公司 一序列形象的現時區塊之寫碼方法和重建方法
US8780971B1 (en) 2011-04-07 2014-07-15 Google, Inc. System and method of encoding using selectable loop filters
US8781004B1 (en) 2011-04-07 2014-07-15 Google Inc. System and method for encoding video using variable loop filter
US8780996B2 (en) 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US10102613B2 (en) 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
US10582195B2 (en) * 2017-06-02 2020-03-03 Futurewei Technologies, Inc. Intra prediction using unequal weight planar prediction

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5243428A (en) * 1991-01-29 1993-09-07 North American Philips Corporation Method and apparatus for concealing errors in a digital television
US5455629A (en) * 1991-02-27 1995-10-03 Rca Thomson Licensing Corporation Apparatus for concealing errors in a digital video processing system
JP2997355B2 (ja) * 1991-12-04 2000-01-11 シャープ株式会社 復号装置
JPH05244468A (ja) * 1992-02-28 1993-09-21 Mitsubishi Electric Corp 画像受信装置
US5247363A (en) * 1992-03-02 1993-09-21 Rca Thomson Licensing Corporation Error concealment apparatus for hdtv receivers
US5278647A (en) * 1992-08-05 1994-01-11 At&T Bell Laboratories Video decoder using adaptive macroblock leak signals
US5737022A (en) * 1993-02-26 1998-04-07 Kabushiki Kaisha Toshiba Motion picture error concealment using simplified motion compensation
US5442400A (en) * 1993-04-29 1995-08-15 Rca Thomson Licensing Corporation Error concealment apparatus for MPEG-like video data
KR100261072B1 (ko) * 1993-04-30 2000-07-01 윤종용 디지털 신호처리시스템
WO1995003674A1 (en) * 1993-07-19 1995-02-02 British Telecommunications Public Limited Company Detecting errors in video images
US5621467A (en) * 1995-02-16 1997-04-15 Thomson Multimedia S.A. Temporal-spatial error concealment apparatus and method for video signal processors

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100348053C (zh) * 2002-02-28 2007-11-07 株式会社精密技术 利用运动图像的电子水印的错误隐蔽方法
CN100405854C (zh) * 2003-10-16 2008-07-23 Lg电子株式会社 用于在视频处理系统中判断丢失模块的特性的装置和方法
CN115909961A (zh) * 2021-09-30 2023-04-04 乐金显示有限公司 显示装置以及处理和应用该显示装置的补偿数据的方法

Also Published As

Publication number Publication date
JPH09187016A (ja) 1997-07-15
GB2308766B (en) 1999-10-20
GB2308766A (en) 1997-07-02
US5912707A (en) 1999-06-15
KR100197368B1 (ko) 1999-06-15
KR970057887A (ko) 1997-07-31
GB9626689D0 (en) 1997-02-12

Similar Documents

Publication Publication Date Title
CN1158054A (zh) 用于对被发送的视频信号中的误差进行补偿的方法及装置
US5751361A (en) Method and apparatus for correcting errors in a transmitted video signal
EP0877530B1 (en) Digital image encoding and decoding method
US5936674A (en) Method and apparatus for concealing errors in a transmitted video signal
US4727422A (en) Method and apparatus for efficiently communicating image sequence having improved motion compensation
US8265158B2 (en) Motion estimation with an adaptive search range
US4703350A (en) Method and apparatus for efficiently communicating image sequences
CN1166255A (zh) 基于宏块的视频编码译码器隐藏和包含错误的方法和装置
EP0782347B1 (en) Error concealment for block-based image encoder
CN1190292A (zh) 差错隐蔽方法和装置
CN1142731A (zh) 基于分级运动估算检测运动矢量的方法及装置
PL322302A1 (en) Method of and apparatus for encoding video signals while employing the motion assessment based on image detail points
JPH09130812A (ja) 重複ビデオフィールドの検出方法及び装置、画像エンコーダ
GB2286310A (en) Method and apparatus for transmssion of image data
CN1135146A (zh) 利用基于特征点的运动估算编码视频信号的装置
CN1149852C (zh) 规模可变的轮廓间编码方法及装置
US6317460B1 (en) Motion vector generation by temporal interpolation
CN100562124C (zh) 用于恢复图像处理系统的丢失块的装置和方法
US6930728B2 (en) Scan conversion apparatus
CN1103164C (zh) 利用逐个像素的运动估算和跳帧方法的图像处理系统
JP2001516185A (ja) サブサンプリング技法を採用する動き推定方法及び装置
US6046784A (en) Method and apparatus for concealing errors in a bit stream
GB2320989A (en) Padding image blocks using substitute pixels for shape adaptive discrete cosine transform
KR19980051713A (ko) 전송되는 비디오 신호의 에러 은폐 방법 및 장치
KR100198986B1 (ko) 블록킹 현상방지용 움직임 보상장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication