CN1064207C - 图象重播装置 - Google Patents

图象重播装置 Download PDF

Info

Publication number
CN1064207C
CN1064207C CN94117943A CN94117943A CN1064207C CN 1064207 C CN1064207 C CN 1064207C CN 94117943 A CN94117943 A CN 94117943A CN 94117943 A CN94117943 A CN 94117943A CN 1064207 C CN1064207 C CN 1064207C
Authority
CN
China
Prior art keywords
picture
circuit
mobile vector
picture intelligence
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
CN94117943A
Other languages
English (en)
Other versions
CN1111881A (zh
Inventor
大西慎二
下郡山信
清水哲也
新井田光央
浜中章佳
山本行则
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP5241495A external-priority patent/JPH0799650A/ja
Priority claimed from JP5241494A external-priority patent/JPH0799649A/ja
Priority claimed from JP5241493A external-priority patent/JPH0799648A/ja
Priority claimed from JP24149693A external-priority patent/JP3363541B2/ja
Priority claimed from JP5241492A external-priority patent/JPH0799647A/ja
Priority claimed from JP32436393A external-priority patent/JPH07184203A/ja
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN1111881A publication Critical patent/CN1111881A/zh
Application granted granted Critical
Publication of CN1064207C publication Critical patent/CN1064207C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种图像重播装置重播一个编码的图像信号,通过利用该重播的图像信号检测包含有一个不可解码的图像信号的组的移动矢量,并且甚至当包含有不可解码图像信号的组移动时,通过利用移动矢量为包含有不可解码信号的组构造一个图像信号以便重播在一个视觉上的高质量图像。

Description

图象重播装置
本发明涉及一种利用对压缩的及编码的图象信号的解码来产生图像信号的图象信号重播装置。
一种正交转换编码系统被作为一种高效率的压缩及编码图象信号的技术已被公知。在该技术中,一个图象信号被分成若干组,每组具有预定数目的象素,并且它们由例如离散余弦变换(DCT)被作正交转换及对转换的系数进行量化及平均信息编码。
图1表示作为一种图象记录及重播装置的数字式VTR(磁带录像机)的主要部件的方框图,这个框图用于编码及解码。现在对图1中的图象信号流程作出说明。数字化的图象数据由输入端子1输入,并被一个组形成电路2用m象素×n象素的单元来分组。
被用m×n象素单元分组的图象数据由一个DCT(离散余弦变换)电路3作正交变换,以使它从空间域数据变换成频域数据。已转换成频域数据的数据由一个量化电路4量化,并由可变长度编码电路5作可变长度的编码,以获得所需的数据转换率。由一个误差校正编码电路将奇偶校验数据加到可变长度编码数据上用以对数据作误差校正编码,然后数据被一记录及重播装置7格式化以适应记录媒介并被记录在磁带上。
在重播数据时,由记录及重播装置7从磁带上重播的数据被格式化,以适应在随后一级中的信号处理,利用由误差校正电路(ECC)8在记录时将奇偶校验数据加入来作误差校正,并由可变长度解码电路9作解码。该被解码的数据由一个反量化电路10作反量化,并由反DCT电路11进行反离散余弦转换,使其从频域数据转换到空间域数据及被写入到帧存储器12中。由一个内插电路13与一监视器光栅扫描同步地读出写入在帧存储器12中的图象数据,并插入可不正确的误差数据(以下称为误差数据),及从输出端子14将其输出用于在监视器上显示。
在这样一种编码系统中,因为编码是一组接一组地作出的,当在解码被编码数据的误差校正时出现一个不可校正误差的话,则一组接一组地出现解码误差。此外,因为可变长度码被频繁地使用,解码误差传播到多个组上,它明显地使图象质量变坏。
作为校正包括误差数据的组(以下称为误差组)的内插装置,已公知了一种帧间插值系统,在其中误差帧由一个在先帧的图象取代,如图2中所示。在图2中,当一个帧#N的一个组X为不可解码时,则该组X的数据被在先帧#(N-1)中的同样场位置上的组A的解码数据所取代及内插。
作为当误差组为动态时有效的一种内插系统,已公知了一种场内线性内插系统,它使用同一场中的象素对误差组作内插。在图3中,大写字母A,B及X表示编码组,小写字母a,b及X连同下标1,2,…表示包括在相应编码组A,B及X中的重播图象信号的行。带有奇数下标的行(用点划线表示)表示奇数场,而带有偶数下标的行(用虚线表示)表示偶数场。为了解释起见,假定编码组包括8×8个该帧中的象素(m=n=8)。
假定组X是不可解码的误差组,在显示屏上位于组X上方及下方的组A及B是可解码的。则误差场X的行X1-X8用上组A的各个场的下面行a7及a8和下组B的各个场的上面行b1及b2的场内线性内插值来取代。
例如,在奇数场中:
X1=(4a7+b1)/5
X3=(3a7+2b1)/5
X5=(2a7+3b1)/5
X7=(a7+4b1)/5
及在偶数场中:
X2=(4a8+b2)/5
X4=(3a8+2b2)/5
X6=(2a8+3b2)/5
X8=(a8+4b2)/5
因此,在现有技术图象信号重播装置中,一个误差组的移动状态,即包括误差组的一个图象幅(帧)与紧接着的图象幅之间的相关性被确定了,并有选择地使用这两种内插方法。
但是,在上述的数字式VTR中,对误差组的移动信息是二进制信息,即移动或非移动。对于非移动,可作出精确的内插。但是对于移动,用于场内线性内插处理的图象轮廓不能被重播出来并且不能产生出清晰的图象,所以高等级的视觉图象不会被重播出来。
此外,在检测误差组的移动时,基于包括误差组的帧数据及前一帧的数据来检测帧之间的移动。因此,当移动被检测时,即使误差组的数据及包括误差组的帧后一图象的数据之间的相关性为高及利用下一图象的数据作内插可产生校好的图象,但强制地作出了场内的内插,就不能重播高质量的图象。
另外,当选择了场间场内内插时,分辨率被帧内内插保留,但是误差组及周围象素组之间的边界图象是不连续的,这是由于误差组移动的确定精确度差引起的,因此重播出的图象是不自然的,并且不能播放出高质量的视觉图象。
本发明的一个目的在于解决上述问题。
本发明的另一个目的在于提供一种装置,即使在不可解码的组移动时也能产生出高质量的视觉图象。
为了达到上述目的,本发明提出一种图象重播装置,它包括:(a)重播装置,用于重播一个编码图象信号;(b)解码装置,用于对被所述重播装置的图象信号进行解码;(c)移动矢量检测装置,用于使用被所述重播装置重播的图象信号检测包含不能被所述解码装置解码的图象信号的多个象素组成的组的移动矢量;及(d)构造装置,用于根据所述移动矢量检测装置的输出构成图象信号,它用于包括不可解码图象信号的组的图象信号。
本发明的另一目的在于提出一种装置,它能防止由非相关的图象构成不可解码组的数据,以便提供高质量图象。
为了达到所述目的,本发明提出一种图象重播装置,它包括:(a)重播装置,用于重播一个编码图象信号;(b)解码装置,用于对被所述重播装置重播的图象信号进行解码;(c)移动矢量检测装置,用于检测包含不能被所述解码装置解码的图象信号的多个象素组成的组的移动矢量;(d)发生装置,利用包含不可解码图象信号的组的周围组的移动矢量来产生包含不可解码图象信号的组的移动矢量;(e)构造装置用于根据由所述发生装置产生的移动矢量来构成图象信号,它用于包括不可解码图象信号的组的图象信号;及(f)修改装置,用于修改包含不可解码图象信号的组的周围组的一部分。
本发明的又一目的在于提供一种装置,它在重播图象时,不可解码组及四周组边界处的不连续性是很不显著的。
为了达到上述的目的,本发明提出一种图象处理装置,它包括:(a)输入装置,用于输入编码图象信号;(b)解码装置,用于对由所述输入装置输入的图象信号进行解码;(c)相关性检测装置,用于检测包括不能被所述解码装置解码的图象信号的场图象与和包括不可解码图象信号的场不同的场的图象之间的相关性;(d)比较装置,用于比较包含不可解码图象信号的场图象与包含不可解码图象信号的场的前一场及后一场的图象;及(e)构造装置,用于根据所述比较装置的输出构成一个图象信号,它用于不可解码的图象信号。
本发明的另外目的及特征将由以下结合附图对本发明的详细说明加以阐明。
图1表示一个数字VTR记录及重播装置的结构;
图2表示帧内的内插;
图3表示场内的内插;
图4表示根据本发明一个实施例的数字VTR记录及重播装置的结构;
图5A及5B,组合为图5,表示本发明一个实施例中的内插电路的结构;
图6表示组的显示屏上的布置;
图7表示图5电路的操作;
图8A,8B及8C,组合为图8,表示本发明实施例中内插电路的另一结构;
图9表示本发明该实施例中移动矢量检测电路的结构;
图10表示图9电路中的统计计算电路的结构;
图11表示图9电路的操作;
图12A及12B表示图9电路操作的结果;
图13表示本发明该实施例中移动矢量检测电路的另一结构;
图14表示图13电路的操作;
图15表示说明图13矢量检测电路的操作的流程图;
图16表示使用另一移动矢量检测方法的数字VTR的结构;
图17表示本发明该实施例中移动矢量检测电路的另一结构;
图18表示图17电路的操作;
图19表示说明图17矢量检测电路的操作的流程图;
图20表示使用另一移动矢量检测方法的数字VTR的结构;
图21表示本发明该实施例中移动矢量检测电路的一种结构;
图22表示在本发明一个实施例中数字VTR的一种结构;
图23表示场景的变化;
图24A及24B表示图22装置中场景变化电路的一种结构;
图25表示本发明一个实施例中数字VTR的一种结构;
图26表示本发明一个实施例中数字VTR的一种结构;
图27表示图26装置中相关性检测电路的一种结构;
图28表示本发明一个实施例中数字VTR的一种结构;
图29表示本发明一个实施例中数字VTR的一种结构;
图30表示本发明一个实施例中数字VTR的一种结构;
图31表示图30装置中零插入电路的一种结构;
图32表示图31电路的操作。
现在结合附图来解释本发明的实施例。
图4表示作为本发明一个实施例的数字VTR的重播装置的结构方框图。
在图4中,由一个重播电路101从磁带上重播出的图象信号被送到一个ECC电路102。为了解释起见,假定重播信号是一帧接一帧地被重播及解码的。
在ECC电路102中,在重播信号中的误差码被校正并被输出到一个数据分离电路104。对于不可校正的码误差,ECC输出一个误差标记给误差检测电路103,该误差标记指示不可校正的误差。误差检测电路103基于从ECC电路103来的误差标记产生一个组误差标记,指示是否每个组均可解码。
数据分离电路104接收来自ECC电路102的数据,将它分离为指示组在图象中位置的组地址数据及图象数据,并将它们分别输出到一个存储器控制电路106及一个组解码电路105。组解码电路105施行反量化处理及逆DCT处理以便如上所述地重播图象信号,并对原始格式的图象信号以图象组接着图象组的方式进行解码,及经由一延时电路107输出第一场的图象数据给场存储器109,及输出第二场的图象数据给场存储108,该延时电路107例如为具有相当于以下要描述的内插处理时间的延时的一缓冲存储器。存储器控制电路106基于来自数据分离电路104的组地址数据,确定分别用于场存储器107及108的象素组的解码图象数据的写地址。
场存储器110存储早于待内插的图象(在场存储器109中的图象)一场的图象数据。移动矢量检测电路111基于来自场存储器109及110的图象数据对于每个图象组检测每组场内移动矢量,并将其输出到一个内插电路112。该移动矢量检测的方法将在下面描述。
内插电路112使用由移动矢量检测电路111检测的误差组的周围组移动矢量估算误差组的移动,使用估算的误差组移动矢量,用场存储器110的图象数据修正存储在场存储器109中的误差组的数据,使其内插。
当第一场的内插完成时,场存储器110的数据从一个输出端子113输出到一个外部设备。场存储器109的数据写入到场存储器110中,及场存储器108的数据写入到场存储器109中。在该时间点上,场存储器110存储内插已经完成的第一场的图象数据,而场存储器109存储内插还未被进行的场的数据。如果在场存储器109中图象数据内具有不可解码的数据,则对第二场的图象数据进行同样的内插,场存储器110的数据从输出端子113输出,及场存储器109的数据被写入到场存储器110。下一帧的图象数据被写入到场存储器108及109中并依次地进行内插。
现在参照图SA至7,解释图4的内插电路112的操作。图5A及5B表示图4的内插电路的结构方框图。图7表示图5A及5B的内插电路112的操作。在图6中,每个方块A-H及X表示一个象素组,且在图6中的布置表示一幅图象的布置。在本实施例中,假定象素X是一个误差组,及对组X的移动矢量进行估算以便进行内插。
标号201表示一个移动矢量数据输入端,对该输入端一图象组接一图象组地从以下将要描述的移动矢量检测电路111输入每组的移动矢量数据。标号202表示一个组误差标记输入端,对该输入端一图象组接一图象组地从组误差检测电路103输入组误差标记。DL203-DL218表示延时电路。DL208及DL216的延时被整定为同时地将移动矢量数据及组误差标记输出到图6中的图象组F,DL203,DL204,DL205,DL206,DL207,DL209及DL210的延时整定来分别将移动矢量数据输出到图象组A,B,C,D,E,G及H中,DL211,DL212,DL213,DL214,DL215,DL217及DL218的延时被整定来分别将组误差标记输出到图象组A,B,C,D,E,G及H中。
用于象素组A,B,C,D,E,F,G及H的移动矢量数据及组误差标记分别被输入到鉴别电路219-226,如果相应的象素组为可解码时,则将象素组的移动矢量数据输出,而如果它为不可解码时,则无任何输出。从鉴别电路219-226来的移动矢量数据输入到矢量合成电路227,它对矢量数据的水平分量及垂直分量求和,以求得矢量的和。用于图象组A,B,C,D,E,F,G及H的组误差标记被输入到计数器电路228中,它对可解码的图象组计数。标号229表示一乘法电路,对它输入来自矢量合成电路227的矢量数据求和,并用由计数器电路228计数出的可解码组的数目K除该矢量数据和,以确定出误差组周围的移动矢量数据的平均值。该输出值作为组X的移动矢量数据被输入到一个读地址发生电路231。即,在本实施中,仅是围绕着误差组的可解码组用于确定误差组的移动矢量。
DL230表示具有一个延时的延时电路,它被整定为当乘法电路229输出用于组X的移动矢量数据时,输出用于组X的组误差标记。用于组X的移动矢量数据及组误差标记被输入到读地址发生电路231。当组误差标记指示不可解码状态时,场存储器110的读地址由移动矢量数据确定,且它被输出到输出端子232上。
参照图7来解释本实施例中的内插处理。在图7中,假定在先场的三角形区域301是移动区域并且移动到目前场的区域302上。标号303表示落在目前场图象中的一个组X。
当误差组303的移动矢量使用周围组的移动矢量来确定时,读地址发生电路231产生与图7中区域304相应的区域的地址,并将其输出到输出端232。场存储器110接收该输出并将从这个地址来的区域304的图象数据输出到输入端子235。用于误差组303的误差标记被输入到写地址发生电路233,并当标记指示不可解码状态时,它产生与场存储器109中的误差组303相应的写地址,并将它输出到输出端子234。图象数据输出端子236输出来自数据输出端子235的内插图象数据,并将该图象数据写入到由写地址指定的地址中,进行内插。
以此方式,使用了移动矢量来进行内插,所以对移动组作到了精确的内插。
参照图8A至8C,来解释本实施例的内插电路112的另一种构型及其操作。图8A至8C表示图4的内插电路112另一构型的方框图,并且与图5A及5中相同或相似功能的部件使用同样的标号来表示,并省略了对它们的解释。
在图8A至8C中,标号237-244表示选择电路,它们用于当移动矢量数据从鉴别电路219-224输入时,确定移动矢量的幅值及将它们与一预定阈值相比较,用以分级更大活性的移动数据(以下称为大矢量)以及较小活性的移动数据(以下称为小矢量),并选择数据输出目的地,当输入移动矢量被分级为大矢量时,选择电路将移动矢量数据输出到大矢量合成电路245,及将一个指示大矢量的标记输出到计数器247。当它被分级为小矢量时,选择电路将移动矢量数据输出到小矢量合成电路246,及将一个指示小矢量的标记输出到计数器248。当移动矢量数据未被输入到选择电路时,没有任何输出。
标号245表示大矢量合成电路,它利用对由选择电路237-244输入的大矢量中的水平分量及垂直分量求和来求输入大矢量的和。标号246表示小矢量合成电路,它利用对由选择电路237-244输入的小矢量数据中的水平分量及垂直分量求和来求小矢量的和。标号247及248表示计数器电路。计数器电路247对大矢量计数,而计数器电路248对小矢量计数。
标号249及250表示乘法电路。乘法电路249将从大矢量合成电路245输入的移动矢量数据和除以从计数器电路247输入的大矢量数K1,以确定大矢量的平均矢量。乘法电路250将从小矢量合成电路246输入的移动矢量和除以从计数器电路248输入的小矢量数K2,以确定小矢量的平均矢量。
标号251表示一个比较电路,它将计数器电路247及248的输出K1及K2的幅值进行比较。标号252表示一个选择开关,向它输入来自乘法电路249及250的大矢量及小矢量的平均矢量,并且它受到比较电路251输出的控制。当K1≤K2时,选择大矢量的平均矢量,并当K1≤K2时,选择小矢量的平均矢量,这个被选择的平均矢量作为图6中组X的移动矢量数据被读及被输出到地址发生电路231。随后的操作与以上实施例中的相似。
根据本实施例,当误差组的移动矢量被估算时,待使用的周围组的移动矢量数据根据其幅值被作适应选择,以改进估算移动矢量的精确度。
参照图9至图12B对本实施例的移动矢量检测电路111进行解释。图9表示移动矢量检测电路111的方框图。
在图9中,从场存储器109读到的图象数据被输入到输入端401。用于与输入到输入端401的图象数据相关的一个组(在一搜索窗中)的图象数据从场存储器110输入。输入到输入端401的图象数据与输入到输入端402的图象数据之间的差值由一减法电路405作计算,及该差值被输出到一个绝对值计算电路406,它将减法电路405输出的绝对值输出到一个附加积分电路407上。绝对值计算电路406的输出被称为绝对差值。
附加积分电路407累积相应于搜索窗中一个预定组的绝对差值,并将其输出到一比较电路408。附加积分电路407的输出代表在搜索窗中一个预定象素组的一场中的相关性。比较电路408将存储在ROM409中的预定参考值与由附加积分电路407输出的相关性进行比较,如果该相关性大于参考值,则它确定为相关性并输出一个写许可信号,而如果该相关性小于参考值时,它确定为非相关性,并对地址存储器411输出一个写禁止信号。
另一方面,输入到输入端401及402的象素数据的场存储器的地址通过输入端403及404被输入到一个相关地址计算电路410,它在与每个图象组相应的地点上选择输入地址中的象素地址,并基于两个地址之间的差值,对从输入端401输入的误差组的周围计算从输入端402较早输入的一场中象素的相关地址,作为每个组的移动矢量。相关地址利用水平及垂直划分场来计算。当比较电路408对地址存储器411输出写许可信号时,相关地址便存储到地址存储器411中,而当比较电路408对地址存储器411输出写禁止信号时,相关地址将不存储到地址存储器411中,也即,将用于可能与要检测移动矢量的象素组具有相关性的组的相关地址存储到地址存储器411中。因此,每当比较电路408输出写许可信号时,地址存储器411存储相关地址,且通常多个相关地址是为待检测的组存储的。
一个统计计算电路412确定在地址存储器411中存储的相关地址出现的频率,并将高出现频率的相关地址作为最后检测的移动矢量输出到地址存储器411中。
图10表示图9的统计计算电路412一例的方框图。标号501表示输入端,标号502表示用于控制计数器操作的的控制电路,标号503-506表示用于对CPU的输出信号计数的计数器,标号507表示一个输出端。输入端501与图9的地址存储器411相连接,并向其输入存储在地址存储器411中的相关地址。控制电路502对相关地址进行分级,及使计数503-506对每个级进行计数。控制电路502对所有相关地址执行该操作,以便计算出相关地址的出现频率。然后,控制电路502将那些出现频率中最高出现频率的相关地址从输出端507输出到地址存储器411中。
图11表示图9中所示统计计算电路412的操作。水平线表示相关地址,A-D表示相关地址范围,阈值Th1-Th3表示相关地址范围的边界。阈值Th1,Th2及Th3以此次序增加。范围A-D分别相应于图10中的计数器503-506,当范围A的相关地址被输入到控制电路502时,计数器503计数,当范围B的相关地址被输入到控制电路502时,计数器504计数,当范围C的相关地址被输入到控制电路502时,计数器503计数,并当范围D的相关地址被输入到控制电路502时,计数器506计数。因为预定范围的计数器计上数,相应于范围A-D的相关地址的出现频率能被检测出来。检测出现频率的范围可以用增加图10中计数器的数目被更细微地确定。在图10中,计数器虽然布置在控制电路502的外部,但可利用在控制电路502中设置寄存器并使用那些寄存器,使计数器布置在控制电路502中。
图12A及12B表示被统计计算电路412检测的相关地址出现频率的例子。图为如上所述、地址存储器411在水平方向及垂直方向上存储相关矢量,因此出现频率也应在水平方向及垂直方向上加以确定。图12A表示在水平方向中的出现频率,而图12B表示在垂直方向中的出现频率。在图12A中,横座标代表水平地址,而纵座标代表出现频率。在图12B中,横座标代表垂直地址,而纵座标代表出现频率。标号508及509分别表示水平方向及垂直方向中的出现频率。
如图12A及12B所示,当得到如508所示的出现频率分布时,移动矢量检测电路111从具有最高出现频率的范围C中选出范围C的中心地址作为水平移动矢量,该中心地址由虚线510表示;当得到如509所示的出现频率分布时,该电路从具有最高出现频率的范围B中选出范围B的中心地址,它由虚线511表示。
以此方式,当本实施例的移动矢量检测电路111检测用于每个组的移动矢量时,它基于待检测的每个组的搜索窗中相关地址(移动矢量)的出现频率进行检测,因此移动矢量能被精确地检测出来。
现在来解释移动矢量检测电路111的另一例子。图13表示图4的移动矢量检测电路111的另一构型的方框图。在图13中,具有与图9的电路中同样功能的部件使用相同的标号表示。在图13中,标号414表示一个矢量检测电路,用于执行对存储在地址存储器411中的相关地址的统计处理,并将具有最高出现频率的相关地址作为移动矢量输出。该矢量检测电路414根据存储在地址存储器411中的相对矢量数来改变在比较电路408中的参考值,以使得用于后面将要描述的出现效率内插的相关地址恰当地存储在地址存储器411中。也就是,当存储在地址存储器411中的待检测的组的相关地址数小于预定数时,矢量检测电路411降低输出到比较电路408的阈值,以使得总是恰当数目的相关地址被存储在地址存储器411中。以此方式,甚至当存储在地址存储器411中的相关地址数降低时,移动矢量也能被检测出来。
参照图14来解释矢量检测电路414的操作。该矢量检测电路414首先读存储在地址存储器411中的相关地址,并计算其统计值。
图14表示由矢量检测电路414计算的相关地址出现频率的分布。在图14中,横座标代表水平相关地址,而纵座标代表出现频率,a至d代表由矢量检测电路414的统计处理对于出现频率的测量点,及曲线512代表由基于这些测量点的内插得到的出现频率的分布。在本实施例中,为了简明起见,对四个待检测组的相关地址作了出现频率的检测。
矢量检测电路414累计存储在地址存储器411中的相关地址数来计算a至d的相关地址的出现频率。矢量检测电路414基于相关地址的出现频率,利用内插技术:如样条内插,最小平方内插或拉格朗日内插来确定出现频率的分布512,并将具有高出现频率分布512的相关地址513作为移动矢量输出。
矢量检测电路413的一系列操作表示在图15的流程图中。
以此方式,每个组的移动矢量能被精确地检测出来。
现在来解释检测移动矢量的另一构型。
在本实施例中,当每个组的移动矢量被检测时,使用了三个连续场的图象。
图16表示根据本发明一个实施例的数字VTR重播装置另一构型的方框图。与图4中相同的部件使用相同的标号表示。
在本实施例中,被组解码电路105解码的图象数据一场接一场地输出并被存储到场存储器108中。图象数据从场存储器108,109及110输入到移动矢量检测电路111中,移动矢量检测电路111基于三个连续场的图象数据检测移动矢量。
参照图17及18来解释移动矢量检测电路111。图17表示本实施例移动矢量检测电路111的一个构型的方框图。在图17中,与前面实施例中相同功能的部件用相同的标号表示。
在图17中,晚于包括误差组的图象的一场的图象数据从场存储器108输入到输入端415。类似地,来自于场存储器109的图象数据输入到输入端416,及早于包括误差组的图象的一场的图象数据从场存储器110输入到输入端子417上。
输入选择电路421及422受控制电路424的控制,并从由输入415-417输入的图象数据中每次选择一个图象数据,并将它们输出到减法电路405。对输入端415-417的图象信号的输入受到一个未图示的控制单元的控制,以使得从同一输入端的输入不能被施加到输入选择电路204及205上。
输入到输入端415-417的图象数据的场存储器108-110的地址被输入到输入端418-420,并且它们被输出到地址选择电路423。地址选择电路423也受到控制电路424的控制,并且相应于由输入选择电路421及422选择的图象数据的地址被输出到相关地地址计算电路409。相关地址计算电路409基于以和上述实施例相同方式输入的两个地址计算相关地址,并将其输出到地址存储器411。
在使用三个连续场的图象信号计算相关地址时,对每个组计算不同定时的移动矢量。也即,当输入选择电路421及422从图象输入端415及416选择图象数据时,就获得了在包括误差组的场图象及比包括误差组的场晚一场的场图象之间的相关地址,并当从图象输入端416及417选择图象数据时,就获得了在包括误差组的场图象及比包括误差组的场早一场的场图象之间的相关地址。
由减法电路405,绝对值计算电路406及附加积分电路407计算每个组的输入选择电路421及422的输出的差值绝对值的总和,并将它输出到比较电路408。比较电路408将存储在ROM409中的预定参考值和由附加控制电路407输出的累计值相比较,以便控制对地址存储器411写相对地址。
因此,在本实施例中,对周围误差组的图象具有大相关性的图象的相关地址,作为不固定时的移动矢量存储到地址存储器411中。矢量检测电路425基于存储在地址存储器411中的相关地址检测每个组的移动矢量。
图18表示矢量检测电路425的操作,并表示在同一平面中的不同定时的图象。
在图18中,A代表在时间t1的一个移动物体,它在时间t2移动到位置A',其中t1<t2,并且在时间t3它被移动到位置A′′,其中t2<t3。并且在时间t3它被移动到位置A′′,其中t2<t3。B代表一个与A相似的移动物体,它在时间t3时移动到位置B′′。V1,V2,V3及V4表示由存储在地址存储器411中的相关地址形成的移动矢量。
相应地,V1及V3是由在场存储器108的图象数据及在场存储器109中的图象数据获得的,V2及V4是由在场存储器109中的图象数据及在场存储器110中的图象数据获得的。
BLK0代表在时间t2时的一个误差组,BLK1代表在屏幕上与组BLK0相邻的上方组。BLK1的移动矢量被用来估算BLK0的移动矢量,BLK2,BLK3,BLK4及BLK5表示检测组,对它们进行用于BLK1的移动矢量检测。在时间t1-t2期间对移动矢量V1及V3作检测,而在时间t2-t3期间对移动矢量V2及V4作检测。矢量检测电路425对不同时间的那些移动矢量的方向作出比较。
在本实施例中,对组V1及V2,V1及V4,V3及V2,和V3及V4进行了移动矢量方向的比较。移动矢量方向的比较可以使用其垂直分量与水平分量的比值来进行。矢量检测电路425比较移动矢量的水平分量与垂直分量的比值,选择出最接近比值的组合。在图18中,选择了V1及V2的组合,因为在组合V1及V4,V3及V2,和V3及V4中其方向显著不同。
移动矢量V1及V2中的哪一个被输出作为BLK1的移动矢量依赖于在何时图象数据被用作内插所使用的图象数据。也即,当内插电路112由时间t1的图象内插时,选择移动矢量V1,当内插电路112由时间t3的图象内插时,选择移动矢量V2。在本实施例中,因为内插是使用在先图象的图象数据进行的,故选择移动矢量V1。当待选择的移动矢量被确定时,矢量检测电路425从地址存储器411中读与移动矢量相应的相关地址,并将其由输出端413输出到内插电路112。矢量检测电路425的操作表示在图19的流程图中。
一般地,一个活动的图象具有与在先场和后继场的高相关性,并且极有可能地,在一场中的移动部分在其在先场及后继场中也是移动的部分。因此,在本实施例中,使用包括误差组的场的在先场及后继场的图象对每组移动矢量作出检测,以使得检测移动矢量的精确度得以改善。
内插电路112的操作是与上述实施例中相同的。
在本实施例中,因为内插是使用移动矢量进行的,故可重播出高质量图象。此外,因为使用了多个不同定时场的图象数据来检测移动矢量,可以精确地检测出每组的移动矢量,并且估算每组移动矢量的精确度被改善了。相应地,可利用更高相关性的图象数据来进行内插。
在以上这些实施例中,当每组的移动矢量被检测时,对解码后的图象数据之间的差进行了计算,并在该计算结果的基础上检测每组的场之间的相关性;以便检测移动矢量。其结果是,检测图象数据相关性的计算值是大的,并且检测移动矢量的电路量度也相应地大。在下列将要描述的实施例中,可以不用提高电路量度来检测移动矢量。
图20表示本发明一个实施例的数字VTR重播装置的另一构型。在图20中,具有和图4中相同功能的部件用相同的标号表示。在本实施例中,为了检测帧之间的移动矢量,从组解码电路105输出的图象数据一帧接一帧地输入到帧存储器114中并储存在其中。存储图象也是一帧接一帧地从帧存储器114输出到帧存储器115,在本实施例中内插也是一帧接一帧地执行的。
在图20中,数据分离电路104将来自ECC电路102的输出数据分离成组地址数据及图象数据,并将它们输出到组解码电路105,存储器控制电路106及移动矢量检测电路111。数据分离电路104将每个象素的DCT系数的DC分量输出到移动矢量检测电路111。该移动矢量检测电路111使用由数据分离电路104输入的每个象素组的DC数据检测每组的移动矢量。下面参照图21来解释移动矢量检测电路111。
图21表示移动矢量检测电路111的一个构型的方框图。在图21中,标号601表示输入端,对它提供来自数据分离电路104的DC数据,标号602表示来自存储器控制电路106的组地址的输入端。被输入到输入端601的相应于DC数据的地址被输入其上。由输入端601输入的DC数据通过开关605被存储到DC存储器603或604中。每个DC存储器603及604能存储一帧的DC数据。这就是,当一帧的图象数据被分成m个垂直组×n水平组时,它可存储m×n个DC数据。
存储在DC存储器603及604中的DC数据通过开关606被输出到下一级延时电路。在DC存储器写端的开关605及在读端的开关606受到来自输入端602的地址数据的控制,并根据输入DC数据的帧进行开关。也即,当开关605与DC存储器603相连接及DC数据写入DC存储器603时,开关606与DC存储器604相连接,以使得在DC存储器604中的DC数据受到控制。以此方式,在写端的DC存储器存储与从输入端602输入的DC数据相同帧的DC数据,而在读端的DC存储器存储早一帧的DC数据。
在读端的DC存储器读待检测的移动矢量组周围3个垂直组×3个上水平组的DC数据,并将它们输出到延时电路608-616。
标号607表示一延时电路,延时电路607-616的延时被设定为:当一组的DC数据输入到延时电路607时,延时电路607-616输出围绕着处于和早一帧的一场中一个组相同位置的组的3×3组的DC数据。
矢量检测电路617使用DC数据检测移动矢量。在该检测方法中,对目前帧的DC数据和在先帧的DC数据之间的差值绝对值作计算,并将具有最小差值的组的移动矢量确定为移动矢量。在此情况下,水平地及垂直地围绕着该待测移动矢量组的八个方向上的矢量可被检测出来。
标号618表示一延时电路,它的延时被设定得使待检测移动矢量组的地址由矢量检电路617输出。
由矢量检测电路617检测的移动矢量被经由开关621存储到矢量存储器619及620中。矢量存储器619及620用于存储移动矢量,它们中每个存储一帧的移动矢量。存储在矢量存储器619及629中的移动矢量经由开关622从输出端623输出。矢量存储器619及620的读及写是根据来自延时电路618的地址数据执行的。开关621及622的开关受到地址数据的控制,以致读与写能如上述DC存储器中那样交替地被执行。
由矢量检测电路111检测的移动矢量输出到内插电路112。以下的操作除去处理单元是帧外均和上述实施例中相同。
根据本发明,当使用移动矢量进行内插而对移动矢量检测时,使用解码前的每组DCT系数的DC数据检测移动数据,以使得检测移动矢量的计算量下降。相应地,检测移动矢量电路的电路量度也下降了。
在本实施例中,由于利用DC数据来检测移动矢量,所以检测精度可能低于前述实施例的检测精度,而DC数据代表该组的象素数据的平均值,并且当一组接一组地测量移动矢量时该检测精度是足够的。
在本实施例中,围绕一个组的9个组包括3个垂直组×3个水平组,利用将要被检测移动数据的这一组作为搜索窗来测量移动矢量,这是不受限制的并且根据需要的精度可以改变该数字。
在前述的实施例中,利用包括误差组的场的在先场的图像数据来达到内插。此外仅仅利用在先场的图象来实现内插,如果一个场景在在先场的图像和目前场的图像之间变化和图像在场之间整个变化,那么与在先场的图像的相关性消失,并且在这种情况下利用内插不能达到高质量的图像。
在下面将要描述的一个实施例中,将解释一个数字式VTR,该数字VTR允许当场景变化发生时防止非相关图像的内插以便产生一高质量的重播图像。
图22示出了一个在本发明的一个实施例中的数字VTR重播装置的结构的方框图。在图22中,具有与前述实施例的部件相同作用的部件用相同的符号表示,并省略了对它们的说明。
在图22中,利用重播电路101从磁带上重播的图像数据通过ECC电路102、数据分离电路104和组编码电路105用上面已描述的方式被处理并且输出给帧存储器107。帧存储器107根据每个帧的第一个场和第二个场的输出图像数据给场存储器108。场存储器109相对于在场存储器108中存储的图像数据存储在先场的图像数据,并且相对于存储在场存储器109中的图像数据实现内插。场存储器110存储比在场存储器109中存储的图像数更早的一个场的图像数据,即比该图像数据早一个场的图像数据被内插。
场景变化测量电路116确定是否利用场存储器109和110的图像数据已经发生场景变化或没有化发生场景变化。参考图23来解释场景变化测量电路116的工作。
图23示出了场景变化测量电路116的结构的一个方框图。
在图23中,从场存储器109和110读出的图像数据分别输入给输入端701和702。输入的图像数据被输入给一个减法电路703,该减法电路703对于每个象素确定一个差值,并且输出该差值到一个附加积分电路704。该附加积分电路704累加一个场的差值的绝对值并输出该累加值给一个比较电路706。在一个ROM705中存储的一个预定阀值被输出给比较电路706,它把由附加积分电路704输出的差值与该预定阀值相比较,如果差值的绝对值较大,那么它确定场景变化已经发生并且它通过一个输出端707输出一个说明其变化的信号给开关120、121和122。
延迟电路123、124和125的延迟时间被设置来延迟由各个存储器输出的图像数据直到场景变化测量电路116输出判定为止。开关120接收场景变化测量电路116的输出信号,并且如果场景变化没有发生,它选择在先场(在场存储器110中的图像数据)的图像数据,如果场景变化已经发生,它选择下一个场(在场存储器108中的图像数据)的图像数据。
移动矢量测量电路111从被内插的场的图像数据和由选择开关120选择的场的图像数据(在场被内插之前和之后的场)一个图像组接一个图像组地测量场间移动矢量,并且将测量值输出给内插电路112。在本实施例中利用在图9中所示的移动矢量测量电路。利用在前面实施例中描述的方法可以实现移动矢量测量。
内插电路112通过利用由移动矢量测量电路111测量的误差组的周围组的移动矢量来估算误差组的移动矢量,并此后利用估算的误差组的移动矢量来确定在存储器108和110中存储的将被读出的地址和输出该地址给开关121。开关121和122根据场景变化测量电路116的输出信号来工作。如果场景变化没有发生,选择场存储器110,如果场景变化已发生,那么选择场存储器108。
被选择的场存储器接收从开关121来的地址并输出对应该地址的图像数据给开关122。选择开关122输出该图像数据给内插电路电路112,内插电路把要被内插组的地址数据和被用于内插的图像数据输出给场存储器109。场存储器109接收由内插电路112来的用于内插的地址数据和图像数据,并且把图像数据写入到用于修改该图像数据的地址中。用这种方式来实现内插。
参考图24A和24B,来说明内插的方法。图24A示出了当场景变化没有发生时的内插,而图24B示出了当在在先场和目前场之间发生场景变化时的内插。
正如图24A中所示,当场景变化没有发生时,目前场的图像数据相对于在先场的图像数据的移动矢量被确定,并且通过利用被确定的移动矢量估算误差组的移动矢量。
当场景变化已经发生时,可以认为在在先场的图像和目前场的图像之间实际上不相关并且不可能利用在先场的图像数据来内插。因此,目前场的图像数据相对于下一个场的图像数据的移动矢量被确定,并且由被确定的移动矢量来估算误差组的移动矢量。通过利用误差组的移动矢量,该误差组的图像数据由下一个场的图像数据来内插。
当存储在场存储器109中的图像的内插被完成时,场存储器110的数据从输出端113输出给外部设备。场存储器109的数据被写入到场存储器110中而场存储器108接收下一个从帧存储器107的来的场数据。重复上述的操作,其中误差数据被包括在被存储在场存储器109中的图像数据中,用同样的方法来实现内插。
在本实施例中,测量在包括误差组的场和在先场之间的场景变化,并且适当地选择用于移动矢量测量和内插的图像数据来形成在先场和下一个场,以致于总是重播一个高质量的图像。当在包括误差组的场之前立即发生场景变化时这是特别有效的。
参考图25来说明允许测量场景变化的另一个实施例。
在图25中,由数据分离电路104分离的图像数据被输出给组解码电路105并且也输出给延迟电路123和场景变化测量电路116。
在从频域变换到空间域之前的图像数据从数据分离电路104输入给延迟电路123,并且延迟电路的延迟时间被设置成输出比由数据分离电路104输出的图像数据早一个帧的图像数据。场景变化测量电路116一组接一组地接收从数据分离电路104和延迟电路123来的图像数据并且判定是否在两个帧之间已经有一个场景变化。通过计算在帧之间的组的DC分量的系数之间一个差值的绝对值和判定是否其总和超过一个阀值或没有超过可以进行该判定。也就是说,在本实施例中,仅需要计算DC分量差值的绝对值并且计算量小于第一实施例的计算量和电路规模可以更小。该电路结构类似于在图23中所示的结构,除了输入数据是DC数据之外它的工作也是类似的。
开关120和122以连动的关系来操作并且接收从延迟电路124来的场景变化测量信号,该延迟电路124具有对应于3个场的时间+移动矢量测量时间的一个延迟时间,如果场景变化没有发生,那么选择在先场(在场存储器110中存储的图像数据)的图像数据。如果场景变化已经发生,那么选择下一场(下一个场的图像数据)的图像数据。
移动矢量测量电路111从要被内插的图像数据和由开关122选择的场的图像数据(选择要被内插场的在先场和下一个场中的一个)一个接一个地测量场间移动矢量并且将移动矢量输出给内插电路112,正如前面实施例的移动矢量测量电路111所做的一样。内插电路112根据误差组的周围组的移动矢量来估算误差组的移动矢量,并且根据被确定的移动矢量确定场存储器108和110的要读出的地址并输出该地址给开关120。
当场景变化没有发生时,开关120选择场存储器110。当场景变化发生时,开关120选择场存储器108。
被选择的场存储器接收从选择开关120来的地址数据并将该地址的图像数据输出给选择开关122。开关122输出该图像数据给内插电路112,该内插电路112把要被内插的组的地址数据和内插图像数据输出给场存储器109。场存储器109接收从内插电路112来的地址数据和内插图像数据并且修改误差组的图像数据以便于完成该内插。
在这种方法中,根据在解码之前的图像数据测量场景变化并且适当地选择被用于移动矢量测量和内插的图像数据以致于总是能够重播一个高质量的图像。
在上面的实施例中,在包括误差组的图像和早一个场的图像之间的相关性被确定,并且根据该相关性来确定场景变化的存在或不存在,由此来实现内插。另一方面,在包括误差组的场的图像与早一个场和晚一场的图像之间的相关性可以被测量,其中具有一个较高相关性图像的数据之一可以被用来作移动矢量测量和误差组内插,以致于最相关的图像数据总是能够被用于内插而不受场景变化的影响。图26示出了数字VTR的一个结构的方框图,该数字式VTR提供上述的功能,并作为本发明的一个实施例。
在图26中,符号125代表一个相关性测量电路,该电路125测量在包括误差组的场的图像与在先场和下一个场的图像之间的相关性,并且确定哪一个具有一个较高的相关性。其它的结构类似于图22中所示的结构。参考图27来说明相关性测量电路125。
图27示出了相关性测量电路125的一个结构的方框图。从场存储器109、108和110读出的图像数据分别地输入给输入端801、802和803。从场存储器109输入给输入端801的图像数据输出给一个减法电路804,从场存储器108和110输入给输入端802和803的图像数据输入给一个开关805。
利用一个控制电路811来控制开关805,当在包括误差组的场的图像和其下一个场的图像之间的相关性要被测量时,它被连接到输入端802上,当与在先场的相关性要被确定时,它被连接到输入端803上。在本实施例中,按照场存储器108和110的顺序读出图像数据。因此场存储器109的图像数据被读出两次。通过控制电路811来实现从场存储器中读出图像数据。
从开关805输出的图像数据输出给减法电路804。减法电路804一个象素接一个象素地把两个输入图像数据相减,并把差值输出给一个附加积分电路806,该积分电路806对于一个场累加输入差值的绝对值并将累加的结果输出给开关807。利用控制电路811也控制开关807。当通过开关805选择从场存储器108来的图像数据时,它与延迟电路808连接,而当选择从场存储器110来的图像数据时它与相反端连接。延迟电路808把从附加积分电路806输出的差值的绝对值延迟一段时间,该时间与一个场的差值的绝对值的累加时间相对应,并把经延迟的绝对值输出给一个比较电路809。从开关807输出的差值的绝对值也输出给该比较电路809。
根据从附加积分电路806输出的信号,经过延迟电路808的一个输入信号代表从下一个场来的绝对差值,而没有经过延迟电路808的一个输入信号代表从在先场来的绝对差值。绝对差值表示在存储器109中的图像与在先场和随后场的图像之间的相关性,值越小,相关性越高。比较电路809比较两个绝对差值并且产生一个代表较小值的信号。因此,该信号代表较高相关性的图像。
从相关性测量电路125输出的信号输出给开关120-122,这些开关与存储高相关图像的场存储器相连接。其次的过程类似于在图22中所示装置的过程。
在本实施例中,由于在包括误差组的场的图像与在先场和随后场的图像之间的相关性,较高相关性的图像数据被用于移动矢量测量和内插,以致于利用较高相关性的图像数据来进行内插,和总是能够重播一个高质量的图像。
在本实施例中,在包括误差组的场与它在前场和随后的场之间的相关性被比较。另一方面,包括误差组的场与其几个在先场和几个随后场的相关性也可以被测量,比较各个场的相关性,其中具有最高相关性的场的图像可以被用于内插。
在上面测量误差组的周围组的移动矢量的实施例中,从这些移动矢量来估算误差组的移动矢量,与现有技术的数字式VTR相比能够重播较高质量的图像。
利用在前面实施例中描述的方法能够用相当高的精确度来测量移动矢量,但是当移动矢量的测量精度较低和移动矢量不正确的被测量时,在被内插的误差组和周围的象素组的边缘上的图像中可能出现不连续性(不自然的图像)。
在下面要描述的一个实施例中将说明一个装置,该装置能够重播一个高质量的图像,即使移动矢量不正确的被测量,在被内插的误差组和周围的象素组的边缘上也没有显著的不连续性。
图28示了作为本发明的一个实施例的数字式VTR重播装置的结构的一个方框图。在图28中,与图4中的部分相同的部分用相同的符号来表示。
在图28中,通过移动矢量测量电路111来测量移动矢量,内插电路112从误差组的周围组的移动矢量来估算该误差组的移动矢量并且实现内插,如它们在前面的实施例中所做的。
标号126代表一个两维数字滤波器。在本实施例中,通过供内插用的数字滤波器126来消除存储在场存储器110中的图像数据的高频分量。也就是说,在本实施例中,高频分量被频带限制以便使用于内插的组的轮廓不明显,以致于内插组和其周围组的图像的不连续性由于估算移动矢量的不正确性在视觉上变成更不显著。
现在将说明在本发明的一个实施例中的其它结构,该结构使被内插误差组和其周围组的边缘变得更不显著。
图29示出了数字式VTR重播装置的一种结构的方框图。在本实施例中,两维滤波器126的一个截止频率特性根据误差组的移动矢量的幅值被改变。
在图29中,标号127代表一个存储滤波系数的ROM,该系数确定数字滤波器126的截止频率特性,标号128代表一个系数鉴别电路,它用于确定从移动矢量测量电路111输出的移动矢量的幅值以便选择数字滤波126的截止特性(输出系数ROM的地址)。
下面说明在本实施例中的内插。移动矢量测量电路111一组接一组地从存储在场存储器109和110中的图像数据测量场间移动矢量。移动矢量被输出给内插电路112和系数鉴别电路128。系数鉴别电路128确定从移动矢量测量电路111输出的移动矢量的幅值并且把读出的地址输出给系数ROM127以便选择数字滤波器126的相对应的系数。系数ROM127把对应于读出地址的系数输出给数字滤波器126并且确定数字滤波器126的截止频率特性。
根据移动矢量的幅值来控制被内插组的空间频率特性,当移动矢量的幅值小时,即当误差组的移动几乎是零时,设置数字滤波器126的截止频率来通过大多数的图像信号(包括高频分量)以便维持图像的清晰度。当移动矢量的幅值大时,即当误差组的移动已经发生时,根据移动矢量的幅值截止频率被移动到一个较低侧以便来消除用于内插的组的高频分量(不清晰的轮廓),以致于被内插的组和其周围组的图像的不连续性由于移动矢量的不完全性变为更不显著并且在视觉上能够获得高质量的内插。
在前面的实施例中,被用于内插的组的高频分量被消除使已内插的组和其周围的组的边界变为不显著。另一方面,可以消除误差组的周围组的高频分量。
下面将要说明除了对于内插的组以外消除误差组的周围组的高频分量的一个实施例。
图30示出了作为本发明的一种实施例的数字式VTR重播装置的一种结构的方框图。
在图30中,由重播电路101重播的图像数据输出给一个ID测量电路129,该电路129把输入的图像信号分离成特征数据(以后称为ID数据)和图像数据,特征数据代表在被包括在图像信号中的每个组的场位置,并且对于每个组输出ID数据和图像数据。
从ID测量电路来的ID数据被输入到一个写/读控制电路130,该控制电路130根据ID数据的内容对于每个已经误差校正的组把从ID测量电路129输出的图像数据写入到帧存储器132中。写/读控制电路130进一步控制一个标记存储器134的写入和读出并控制一个零插入电路131。
输入的图像数据是经过DCT处理的数据并且与原始图像中的图像数据的空间频率有关。输入给帧存储器132的图像数据具有根据加到该图像数据上的误差校正码由ECC电路133施加的误差校正,并且被误差校正的图像数据被再次地写入到帧存储器132中。组误差测量电路103响应该误差校正结果来输出一个用于没有被误差校正的数据的一个高电平“1”信号的误差标记和输出一个用于没有误差或已经校正误差的数据的一个低电平“0”信号的误差标记并且将误差标记输入给标记存储器134。
在本实施例中,输出给标记存储器134的误差标记被输入给内插电路112、写/读控制电路113和一个加权电路135。当由标记存储器134来的误差标记是“1”时,写/读控制电路130按照一个预定的顺序从帧存储器132中读出误差组的周围组的数据并且控制零插入电路132以便于用零来代替周围组的一部分数据。通过加权电路135来控制零插入电路131这样以致于:在该场周围组越靠近误差组,由零来代替的频率分量越低。
参考图31和32来说明本实施例的零插入电路131的工作。图31示出了零插入电路131的一种结构的方框图。
图31中,以写/读控制电路130来的控制信号输入给一个端901和从帧存储器132来的图像数据输入给一个端902。在端902上输入数据并且输出64个数据(DCT系数)作为一个单元,其中一个组包括8个象素×8个象素。
当图像数据被输入到端902和通过一个三状态缓冲器904(以后称为TSB)来接收该图像数据时,输入到端901上的控制信号是高电平“1”。TSB904输入到端902上的图像数据输出给一个先进先出(以后称FIFO)寄存器905。在另一方面,TSB911的输出目前是高阻抗的输出并且TSB911与端902隔离。
FIFO寄存器905能够存储一组图像数据,并且当一组或64个图像数据被读到FIFO寄存器中时,写/读控制电路130输出一个低电平“0”控制信号给端901。这时TSB904的输出是高阻抗的输出并且TSB904的输出与FIFO寄存器905的相隔离。TSB911的输出信号被输出给端902。
当输入到端901的控制信号是低电平“0”时,计数器906计算由FIFO寄存器905输出的图像数据数。FIFO寄存器905输出与一个控制电路输出的时钟脉冲的脉冲数一样多的数据,该控制电路没有被示出。计数器906对脉冲计数以便计出由FIFO寄存器905输出的数据数。
利用比较电路909把计数器906的输出与ROM908的输出数据相比较。写/读控制电路130响应由计数器906计数的组的图像数据的计数启动以便把控制信号输出给输入端903。读出控制电路907根据从输入端903来的控制信号读出许多参考值,并且当计数器906的输出值大于ROM908的输出值时输出一个“1”信号,当计数器906的输出值小于ROM908的输出值时它输出一个“0”信号。在端902上的数据按照组中的频率增长顺序被输入。因此,由FIFO寄存器905输出的数据中后面输出的数据是具有相对地高频分量的数据。
参考图32来说明上面的操作。图32示出了在一个场上的组,在每组的顶行中所示的Bi.j',Bi+1.j'…代表组号,在底行中所示的35、42、…代表存储在图31中所示的ROM908中的参考值。周围的阴影部分的组是对它们没有进行零插入的象素组。
在图32中来说明当组Bi,j是一个误差组时的工作情况。当“1”标记从标记存储器被输入到写/读控制电路130中时,写/读控制电路130输出一个控制信号给零插入电路131,以致于组Bi,j的周围组的数据从帧存储器132中被写入。即、象素组的数据按照Bi,j-1、Bi-1,j、Bi+1,j、Bi,j+1、Bi-1,j-1、Bi+1,j-1、Bi-1,j+1、Bi+1,j+1、Bi,j-2、Bj-2,j、Bi+2,j和Bj,j+2的顺序被写入到零插入电路131中,零插入电路131的读出控制电路907根据从写/读控制电路130输出的控制信号来控制ROM908的读出,以致于当组Bi,j-1、Bi-1,j、Bi+1,j和Bi,j+1的数据被读出时,参考值42被输出;当组Bi-1,j-1、Bi+1,j-1、Bj-1,j+1和Bi+1,j+1的数据被读出时,参考值48被输出;当组Bi,j-2、Bi-2.j、Bi+2.j和Bi,j+2的数据被读出时,参考值53被输出。
当比较电路909的输出是“0”时开关910与端a相连接,和当输出是“1”时开关910与端b相连接,以致于小于由ROM908输出的参考值的FIFO寄存器205的图像数据输出的图像数据分量为零。
由零插入电路131处理的数据被输出到移动矢量测量电路111和组解码电路105。移动矢量测量电路可以是图21中所示的一种电路。误差组的周围组的数据可以具有零高频分量,但它不造成问题,因为仅仅DC数据被用于测量移动矢量。由移动矢量测量电路111测量的组的移动矢量被输出给内插电路112和系数鉴别电路128。
接下来的操作类似于前面的实施例中所述的操作,被用于从帧存储器115读出的内插的图像数据具有根据移动矢量的幅值由数字滤波器消除的高频分量。
在本实施例中、由于误差组的数据和误差组的周围组的数据不包括高频分量,因此在一种适度的色调中显示图像,并且误差组和其周围组的图像的不连续性被减小,在视觉上图像质量的变坏是很不显著的。
在本实施例中,对于包括8个象素×8个象素的组能够实现图像信号的解码和移动矢量的测量,但是,也可以使用包括其它数目象素的一个组。

Claims (13)

1.一种图象信号重放装置,包括:重播装置,用于从记录介质重播编码的信号;
解码装置,用于解码由所述重播装置重播的图象信号;
相关检测装置,用于检测包含不能由所述解码装置解码的图象信号的画面的图象,与除包含不可解码图象信号的画面之外的画面图象之间的相关,所述相关检测装置检测包含不可解码图象信号的画面图象与包含不可解码图象信号的画面之前的画面图象之间的第一相关,和包含不可解码图象信号的画面图象与包含不可解码图象信号的画面之后的画面图象之间的第二相关;以及插值装置,根据第一相关和第二相关插值不可解码图象信号。
2.根据权利要求1的装置,其中所述插值装置包括比较装置,用于比较第一相关和第二相关,所述插值装置根据比较结果插值不可解码图象信号。
3.根据权利要求2的装置,其中所述插值装置通过根据比较结果,使用第一和第二相关中较高的图象信号插值不可解码图象信号。
4.根据权利要求1的装置,进一步包括移动矢量检测装置,用于检测由所述重播装置利用所述重播装置重播的图象信号重播的图象信号的移动矢量,所述插值装置使用所述移动矢量检测装置检测的移动矢量插值不可解码图象信号。
5.根据权利要求4的装置,其中所述插值装置根据所述移动矢量检测装置检测的移动矢量估计不可解码图象信号的移动矢量,并根据估计的移动矢量插值不可解码图象信号。
6.根据权利要求1的装置,其中图象信号是组编码的。
7.根据权利要求1的装置,进一步包括误差校正装置,通过使用在图象信号记录时加入图象信号的误差校正校验码,来校正所述重播装置重播的图象信号中的误差。
8.一种图象信号处理装置,包括:
输入装置用于输入编码的图象信号;
解码装置用于解码图象信号;
相关检测装置,用于检测包含不能由所述解码装置解码的图象信号的画面的图象,与除包含不可解码图象信号的画面之外的画面图象之间的相关,所述相关检测装置检测包含不可解码图象信号的画面图象与包含不可解码图象信号的画面之前的画面图象之间的第一相关,和包含不可解码图象信号的画面图象与包含不可解码图象信号的画面之后的画面图象之间的第二相关;以及插值装置,根据第一相关和第二相关插值不可解码图象信号。
9.根据权利要求8的装置,其中所述插值装置包括比较装置,用于比较第一相关和第二相关,所述插值装置根据比较结果插值不可解码图象信号。
10.根据权利要求8的装置,其中所述插值装置通过根据比较结果,使用第一和第二相关中较高的图象信号插值不可解码图象信号。
11.根据权利要求8的装置,进一步包括移动矢量检测装置,用于检测由所述重播装置利用所述重播装置重播的图象信号重播的图象信号的移动矢量,所述插值装置使用所述移动矢量检测装置检测的移动矢量插值不可解码图象信号。
12.根据权利要求11的装置,其中所述插值装置根据所述移动矢量检测装置检测的移动矢量估计不可解码图象信号的移动矢量,并根据估计的移动矢量插值不可解码图象信号。
13.根据权利要求8的装置,其中图象信号是组编码的。
CN94117943A 1993-09-28 1994-09-28 图象重播装置 Expired - Lifetime CN1064207C (zh)

Applications Claiming Priority (18)

Application Number Priority Date Filing Date Title
JP241495/1993 1993-09-28
JP5241495A JPH0799650A (ja) 1993-09-28 1993-09-28 画像信号再生装置
JP5241494A JPH0799649A (ja) 1993-09-28 1993-09-28 画像信号再生装置
JP5241493A JPH0799648A (ja) 1993-09-28 1993-09-28 画像信号再生装置
JP241496/93 1993-09-28
JP241494/93 1993-09-28
JP241494/1993 1993-09-28
JP241492/1993 1993-09-28
JP24149693A JP3363541B2 (ja) 1993-09-28 1993-09-28 画像信号再生装置及び画像処理装置
JP241493/1993 1993-09-28
JP241493/93 1993-09-28
JP241492/93 1993-09-28
JP241496/1993 1993-09-28
JP241495/93 1993-09-28
JP5241492A JPH0799647A (ja) 1993-09-28 1993-09-28 画像信号再生装置
JP324363/1993 1993-12-22
JP324363/93 1993-12-22
JP32436393A JPH07184203A (ja) 1993-12-22 1993-12-22 画像信号再生装置

Publications (2)

Publication Number Publication Date
CN1111881A CN1111881A (zh) 1995-11-15
CN1064207C true CN1064207C (zh) 2001-04-04

Family

ID=27554143

Family Applications (1)

Application Number Title Priority Date Filing Date
CN94117943A Expired - Lifetime CN1064207C (zh) 1993-09-28 1994-09-28 图象重播装置

Country Status (4)

Country Link
US (1) US6327391B1 (zh)
EP (1) EP0645933B1 (zh)
CN (1) CN1064207C (zh)
DE (1) DE69431226T2 (zh)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2735321B1 (fr) * 1995-06-09 1997-09-05 Sgs Thomson Microelectronics Procede et dispositif de masquage d'erreur lors du decodage d'un flux de donnees
DE69828950T2 (de) * 1997-11-07 2006-01-12 Koninklijke Philips Electronics N.V. Kodierung einer bildfolge
US6588867B1 (en) * 1999-02-18 2003-07-08 Arris International, Inc. Reciprocal index lookup for BTSC compatible coefficients
US7397850B2 (en) * 1999-02-18 2008-07-08 Easley Mathew F Reciprocal index lookup for BTSC compatible coefficients
US6535635B1 (en) * 1999-10-25 2003-03-18 Xerox Corporation Error clipping for vector error diffusion
WO2001039190A1 (fr) * 1999-11-25 2001-05-31 Fujitsu Limited Procede de lecture d'un support de donnees, dispositif de stockage de donnees, procede de reproduction de donnees, systeme de reproduction de donnees et support de donnees utilise a cet effet
FR2809267B1 (fr) * 2000-05-19 2002-09-27 Thomson Multimedia Sa Procede de detection de saturation d'un champ de vecteurs mouvement
JP4681723B2 (ja) * 2000-09-25 2011-05-11 キヤノン株式会社 再生装置、制御方法及び記憶媒体
JP4250319B2 (ja) * 2000-09-25 2009-04-08 キヤノン株式会社 再生装置、再生方法及び記憶媒体
EP1301044B1 (en) * 2001-10-05 2006-05-24 Mitsubishi Electric Information Technology Centre Europe B.V. Method and apparatus for compensating for motion vector errors in image data
WO2005027045A1 (en) * 2003-08-29 2005-03-24 Thomson Licensing S.A. Method and apparatus for modeling film grain patterns in the frequency domain
CN1868215B (zh) * 2003-10-14 2012-10-03 汤姆森特许公司 用于位精确的胶片颗粒模拟的技术
JP4198608B2 (ja) * 2004-01-15 2008-12-17 株式会社東芝 補間画像生成方法および装置
JP4375080B2 (ja) 2004-03-29 2009-12-02 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
US7463755B2 (en) * 2004-10-10 2008-12-09 Qisda Corporation Method for correcting motion vector errors caused by camera panning
WO2006044260A1 (en) 2004-10-18 2006-04-27 Thomson Licensing Film grain simulation method
EP2202982A3 (en) 2004-11-12 2012-10-10 Thomson Licensing Film grain simulation for normal play and trick mode play for video playback systems
PT1812904E (pt) 2004-11-16 2012-05-22 Thomson Licensing Método de simulação do grão da película baseado em coeficientes de transformada pré-calculados
EP1813119B1 (en) 2004-11-16 2019-01-09 Thomson Licensing Film grain sei message insertion for bit-accurate simulation in a video system
PT1812905T (pt) * 2004-11-17 2019-08-06 Interdigital Vc Holdings Inc Método de simulação de grãos de película com bits de precisão com base em coeficientes transformados pré-calculados
KR101208158B1 (ko) 2004-11-22 2012-12-05 톰슨 라이센싱 필름 그레인 시뮬레이션을 위한 필름 그레인 캐시 분할방법, 장치 및 시스템
EP1815688B1 (en) * 2004-11-23 2009-07-01 Thomson Licensing Low-complexity film grain simulation technique
JP2007013419A (ja) 2005-06-29 2007-01-18 Canon Inc 画像処理装置、画像処理方法
JP4303748B2 (ja) * 2006-02-28 2009-07-29 シャープ株式会社 画像表示装置及び方法、画像処理装置及び方法
JP4929819B2 (ja) * 2006-04-27 2012-05-09 富士通株式会社 映像信号の変換装置及び方法
US8238442B2 (en) * 2006-08-25 2012-08-07 Sony Computer Entertainment Inc. Methods and apparatus for concealing corrupted blocks of video data
US10715834B2 (en) 2007-05-10 2020-07-14 Interdigital Vc Holdings, Inc. Film grain simulation based on pre-computed transform coefficients
JP4469904B2 (ja) * 2008-05-30 2010-06-02 株式会社東芝 動画像復号装置、動画像復号方法及び動画像復号プログラムを記憶した記憶媒体
JP4564564B2 (ja) * 2008-12-22 2010-10-20 株式会社東芝 動画像再生装置、動画像再生方法および動画像再生プログラム
US9152456B2 (en) * 2009-01-23 2015-10-06 Oracle America, Inc. Efficient per-thread safepoints and local access
CN102317974B (zh) * 2009-02-12 2014-08-06 杜比实验室特许公司 图像序列的质量评估
CN102567381B (zh) * 2010-12-23 2017-02-08 腾讯科技(深圳)有限公司 一种保存图片信息的方法和装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0521529A2 (en) * 1991-07-04 1993-01-07 Fujitsu Limited An image encoding and transmitting system

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4723161A (en) * 1985-03-20 1988-02-02 Nec Corporation Method and arrangement of coding digital image signals utilizing interframe correlation
US4703350A (en) * 1985-06-03 1987-10-27 Picturetel Corporation Method and apparatus for efficiently communicating image sequences
JP2506332B2 (ja) * 1986-03-04 1996-06-12 国際電信電話株式会社 動画像信号の高能率符号化方式
DE3629472A1 (de) * 1986-08-29 1988-03-03 Licentia Gmbh Verfahren zur bewegungskompensierten bild-zu-bild-praediktionscodierung
US4792851A (en) * 1986-09-25 1988-12-20 Nec Corporation Method and apparatus for coding motion image signal
DE4007851A1 (de) * 1989-08-24 1991-02-28 Thomson Brandt Gmbh Verfahren zur bewegungskompensation in einem bewegtbildcoder oder -decoder
JPH0498987A (ja) * 1990-08-16 1992-03-31 Matsushita Electric Ind Co Ltd 誤り修整方法
JPH04177992A (ja) * 1990-11-09 1992-06-25 Victor Co Of Japan Ltd 階層性を有する画像符号化装置
DE69132076T2 (de) 1990-12-28 2000-08-24 Canon K.K., Tokio/Tokyo Vorrichtung zur Bildverarbeitung
JPH0620050A (ja) * 1992-07-03 1994-01-28 Matsushita Electric Ind Co Ltd 動画像信号の復号化装置と推定動きベクトル算出方法
JPH06205386A (ja) * 1992-12-28 1994-07-22 Canon Inc 画像再生装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0521529A2 (en) * 1991-07-04 1993-01-07 Fujitsu Limited An image encoding and transmitting system

Also Published As

Publication number Publication date
EP0645933A2 (en) 1995-03-29
DE69431226T2 (de) 2003-04-17
EP0645933B1 (en) 2002-08-28
DE69431226D1 (de) 2002-10-02
CN1111881A (zh) 1995-11-15
US6327391B1 (en) 2001-12-04
EP0645933A3 (en) 1996-01-17

Similar Documents

Publication Publication Date Title
CN1064207C (zh) 图象重播装置
CN1164116C (zh) 数据块噪声检测装置及数据块噪声消除装置
CN1110198C (zh) 视频格式转换装置和方法
CN1252999C (zh) 用于隔行至渐进式变换的高级边缘自适应插值方法和系统
CN1071978C (zh) 运动矢量检测装置和方法
CN1076932C (zh) 图像信号编码和解码的方法与装置
CN1194550C (zh) 通过直接离散余弦变换映射改变分辨率的设备和方法
CN1178509C (zh) 图像编码器、图像解码器、和图像处理器及其方法
CN1223196C (zh) 解码器、解码方法
CN1208947C (zh) 图像处理装置和方法、噪声量估算装置和方法及存储介质
CN1275194C (zh) 图像处理方法及其装置
CN1180633C (zh) 视频数据处理设备和视频数据处理方法
CN1168052A (zh) 图象数据内插设备
CN1535027A (zh) 一种用于视频编码的帧内预测方法
CN101036391A (zh) 画面编码装置和画面解码装置
CN1138275A (zh) 图形信号编码译码方法和装置及信号记录介质
CN1526241A (zh) 编码失真消除方法、视频编码方法、视频解码方法、装置及其程序
CN1170312A (zh) 取自运动图像的静止图像文件的图像处理和显示方法及装置
CN1703900A (zh) 摄像系统和播放系统
CN1152840A (zh) 用于图象编码及记录/再现的装置及方法
CN1180627C (zh) 图像编码/解码方法,图像编码装置和图像解码装置
CN1678021A (zh) 图像处理设备和方法、记录媒体和程序
CN1728834A (zh) 转换运动图像数据以及再现运动图像数据的方法和设备
CN1726529A (zh) 用于处理图像信号的设备和方法、用于执行该方法的程序、以及用于记录该程序的计算机可读介质
CN1149850C (zh) 对移动图象进行编码的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CX01 Expiry of patent term

Expiration termination date: 20140928

Granted publication date: 20010404