CN1512786A - 用于编码动态图像的设备及其方法 - Google Patents

用于编码动态图像的设备及其方法 Download PDF

Info

Publication number
CN1512786A
CN1512786A CNA2003101147378A CN200310114737A CN1512786A CN 1512786 A CN1512786 A CN 1512786A CN A2003101147378 A CNA2003101147378 A CN A2003101147378A CN 200310114737 A CN200310114737 A CN 200310114737A CN 1512786 A CN1512786 A CN 1512786A
Authority
CN
China
Prior art keywords
frame
encoded
memory
described frame
coefficient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2003101147378A
Other languages
English (en)
Other versions
CN1225916C (zh
Inventor
米田伦子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Innovations Co ltd Hong Kong
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN1512786A publication Critical patent/CN1512786A/zh
Application granted granted Critical
Publication of CN1225916C publication Critical patent/CN1225916C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种用于编码动态数据的设备,该设备根据待编码的数据量来判断输入帧是待编码的帧还是未待编码的帧,并且包括:(a)帧产生器(100),用于将未待编码的多个帧组合成待编码的一个帧,以便形成具有后影像效果的帧,所述未待编码的帧是暂时接连于所述待编码的帧;和(b)编码器(3,4,5,6),用于对所述具有后影像效果的帧进行编码来代替所述待编码的帧。

Description

用于编码动态图像的设备及其方法
技术领域
本发明涉及一种用于编码动态图像的设备,该设备适用于利用其中记录动态图像的照相机的电视电话及蜂窝式电话,并且进一步涉及一种用于编码动态图像的方法。
背景技术
在以低比特率来编码动态图像的设备中,执行各种编码控制以便将所产生的代码量控制到预定比特率范围内,其中所述设备适用于利用其中记录动态图像的照相机的电视电话及蜂窝式电话。所产生的代码量的控制被归结成通过调整量阶大小(size)来执行的控制以及通过跳帧来执行的控制。
在前者的控制中,通过扩大量化阶大小并因此而提高压缩比,来减少在每一帧中所产生的代码量。所以,前者的控制带有一个问题,即每一帧中的图像质量降低了。在后者的控制中,不是通过提高每一帧中的压缩比来减少所产生的代码量的,而是通过减少待编码的帧的数目来减少所产生的代码量。因此,每一帧中的图像质量没有降低,但是由帧定义的运动却不平滑。
每一帧中的图像质量以及运动的平滑性彼此处于折衷关系,而因此通常利用前者与后者的组合来控制所产生的代码量。
图1是用于通过执行用于减少所产生的代码量的上述控制来编码动态图像的常规设备的框图。
所述设备包括:输入部件1,经该部件可将动态图像输入到设备中;帧存储器2;分块(blocking)部件3;离散余弦变换器4;量化器5;代码转换器6;缓冲器7;反量化器8;反离散余弦变换器9;基准帧存储器10;估计图像产生器11;运动检测器12;第一开关13;第二开关14;减法器15;加法器16;和用来控制所产生的代码量的控制器17。
输入部件1包括诸如CMOS照相机或CCD照相机之类的照相机,并且经该照相机来接收连续的帧。将如此接收到的帧经第一开关13传送到帧存储器2,并且将其存储在帧存储器2中。将帧存储器2设计成具有第一和第二存储器,在这两个存储器的其中之一中,存储从输入部件1传送来的帧,在这两个存储器的另一个中,存储分块部件3要访问的帧。利用第一和第二开关13和14,将第一和第二存储器接入触发器。具体来讲,当第二存储器经第一开关13连接于输入部件1时,第一存储器经第一开关14连接于分块部件3。
在下文中解释该设备的操作。
分块部件3将存储在帧存储器2中的帧数据分成m×n块,其中“m”和“n”均为整数,并且将图像数据(分块数据)输出到每一块中。在每一块中对帧数据进行编码。
将从分块部件3输出的图像数据传送到减法器15及运动检测器12中。
运动检测器12连接于基准帧存储器10,在该基准帧存储器中暂时地存储了先前帧,也就是基准帧。运动检测器12检测基准数据与从分块部件3传送来的块数据之间的运动,并计算运动矢量。
将如此计算出的运动矢量传送到估计图像产生器11中。估计图像产生器依据运动矢量以及所接收到的来自基准帧存储器10的基准帧,来产生估计图像。估计图像产生器11将如此估计出的图像传送到减法器15及加法器16中。
减法器15计算从分块部件3所接收到的块数据与从估计图像产生器11所接收到的估计图像之间的块数据之差,并将如此计算出的块数据差传送到离散余弦变换器4。
离散余弦变换器4将离散余弦变换(DCT)应用于微分块数据,由此来计算DCT系数。离散余弦变换器4将如此计算出的DCT系数输出到量化器5。量化器5对所接收到的DCT系数进行量化。量化器将如此量化后的DCT系数输出到代码转换器6和反量化器8中。
反量化器8对量化后的数据进行反量化。反离散余弦变换器9将反离散余弦变换(IDCT)应用于反量化后的数据,并将反量化后的数据传送到加法器6。加法器6从反离散余弦变换器9那里接收反量化后的数据,并从估计图像产生器11那里接收估计图像。加法器16将反量化后的数据与估计图像彼此相加,从而再生基准帧数据。将如此再生的基准帧数据传送到基准帧存储器10,并将其存储在基准帧存储器10中。基准帧数据用作下一帧的基准帧。
代码转换器6将可变长度编码应用于从量化器5传送来的量化后的DCT系数,并将如此编码的数据传送到缓冲器7。例如,周期性地将编码数据以64kbps的速率从缓冲器7传送到通道。
控制器17监视编码数据在缓冲器7中的占用,并控制量化器5以及第二开关14。例如,控制器17预先确定用于改变量化阶的第一阈值以及用于已跳帧的第二阈值,其中第一阈值小于第二阈值。如果编码数据的占用超过第一阈值,则控制器17就将控制信号传送到量化器5,以扩大用于减少代码量的量化阶大小。
如果产生过多代码,那么即使是上述控制也不能抑制代码的增加,但如果编码数据的占用超过第二阈值,则控制器17会将跳帧信号传送到第二开关14。一旦从控制器17那里接收到跳帧信号,第二开关14就会关断,也就是不连接于帧存储器2。因此,不会将存储在帧存储器2中的帧数据引入到分块部件3中,且由此而不对所述帧数据进行编码。其结果是,在那里发生跳帧,将会导致运动上的不连续。
公开号为10-112852的日本专利申请已经提出一种设备及方法,在其中根据图像中的运动量来选择多个帧,这些帧彼此间相互重叠从而形成一幅静止图像,在后影像效果的情况下显示该静止图像,并对该静止图像进行编码。这样一来,就有可能防止图像数据被遗漏,即便是所有的图像数据都没有接收。
公开号为10-42295的日本专利申请已经提出一种传送数字信号的方法,所述数字信号是根据帧间的估计来编码的,该方法包括以下步骤:生成表示帧为普通图像信号的帧信号,以及将所述帧信号插入到位流中。
公开号为10-262242的日本专利申请已经提出一种用于变换压缩信号的系统,在该系统中将已经根据第一编码过程而压缩的图像进行拉伸,并且再根据第二编码过程来压缩该图像。该系统包括:用于检测信号之中的已跳过景物的装置,所述信号包括已经根据第一编码过程而拉伸的图像;以及用于依据所检测到的已跳过景物的先前及后续的景物来产生与所述已跳过景物相对应的图像的装置。将如此产生的图像插入到已经检测到已跳过景物的地方。
在上述现有技术中,如果例如由于对象的剧烈运动而显著增加了代码量,且帧由此而跳过,那么对于观察者而言运动中的不连续性就很明显。
然而,如果为了防止跳帧的发生而仅通过调整量化阶的大小来控制代码量,那么每一帧中图像质量的降低将是不可避免的。
发明内容
考虑到现有技术中存在的上述问题,本发明的目的就是:提供一种用于编码动态图像的设备及方法,即使发生跳帧,所述设备及方法也都能确保平滑的运动,而不会降低每一帧中的图像质量。
在本发明的一个方面,提供了一种用于编码动态图像的设备,其中该设备根据待编码的数据的量来判断输入帧是待编码的帧还是未待编码的帧,其特征在于,包括:(a)帧产生器,用于将未待编码的多个帧组合成待编码的一个帧,以便形成具有后影像效果的帧,所述未待编码的帧暂时接连于所述待编码的帧;和(b)编码器,对所述具有后影像效果的帧进行编码,以代替所述待编码的帧。
在本发明的另一个方面,提供了一种用于编码动态图像的方法,包括:(a)根据待编码的数据量,判断输入帧是待编码的帧还是未待编码的帧;(b)帧产生器,将未待编码的多个帧组合成待编码的一个帧,以便形成具有后影像效果的帧,所述未待编码的帧暂时接连于所述待编码的帧;以及(c)对所述具有后影像效果的帧进行编码,以代替所述待编码的帧。
利用前述本发明所获得的有益效果将在下文作出描述。
在上述本发明中,将暂时接连于所述待编码的帧的未待编码的帧组合成一个待编码的帧,以用来形成具有后影像效果的帧。对如此形成的具有后影像效果的帧进行编码来代替待编码的帧。因此,即使跳过一帧或多帧,也有可能通过后图像效果的优点来减少运动的不连续性。
附图说明
图1是用于编码动态图像的常规设备的框图。
图2是根据本发明第一实施例用于编码动态图像的设备的框图。
图3是帧产生器的框图,该帧产生器是图2中所示设备的一部分。
图4示出将要在图3中所示帧产生器中执行的步骤。
图5示出将要在图3中所示帧产生器中执行的步骤。
图6是根据本发明第二实施例的帧产生器的框图,该帧产生器是用于编码动态图像的设备的一部分。
图7示出将要在图6中所示帧产生器中执行的步骤。
图8A举例说明原始输入帧。
图8B举例说明由常规设备来编码的帧。
图8C举例说明由根据本发明第一实施例的设备来编码的帧。
具体实施方式
[第一实施例]
图2是根据本发明第一实施例用于编码动态图像的设备的框图。
根据本发明第一实施例的设备在结构上不同于图1中所示的常规设备,它还包括帧产生器100,用于产生具有后影像效果的帧,并且进一步的区别在于控制器17并非电连接于第二开关14,而是电连接于帧产生器100。因此,与图1中所示的那些常规设备相应的部分或元件具有相同的参考标记,并且以与常规设备中相应部分或元件的相同的方式进行工作,除非在下文中明确作出解释。
在图2中,用于选择第一和第二存储器之一的第二开关14电连接于帧产生器100,其中所述第一和第二存储器构成帧存储器2。
图3是帧产生器100的框图。
帧产生器100包括:第一开关204、第二开关205、第三开关211、第四开关212、第一帧存储器200、第二帧存储器201、第三帧存储器202、帧存储器管理器203、与第一帧存储器200相关联的第一乘法器206、与第二帧存储器201相关联的第二乘法器207、与第三帧存储器202相关联的第三乘法器208、第四乘法器209、加法器210、以及后影像帧存储器213,在该后影像帧存储器213中存储具有后影像效果的帧。
第一开关204经第四开关212、再进一步经该开关的端子A,把帧存储器2连接到分块部分3上,并且经第二开关、再进一步经该开关的端子B,把帧存储器2连接到第一至第三帧存储器200-202的其中之一上。
第一开关204根据依编码数据在缓冲器7中的占用程度而从控制器17传送来的控制信号,在端子A与B之间进行切换。也就是说,跳帧控制是根据编码数据在缓冲器7中的占用来进行的。
在下文中解释了当编码数据在缓冲器7中的占用等于或大于一个根据其可进行跳帧的阈值时、和当编码数据在缓冲器7中的占用小于该阈值时帧产生器100的操作。类似于常规设备,根据其进行跳帧的阈值也是预先确定的。
当编码数据在缓冲器中的占用等于或大于该阈值时,则帧产生器100按如下来操作。图4示出了将要由帧产生器100来执行的步骤。
帧产生器100跳过输入到其中的帧。已跳过帧存储在第一至第三帧存储器200-202的其中之一中。
帧存储器2经第一开关204的端子B、再进一步经第二开关205,电连接到第一至第三帧存储器200-202的其中之一上(步骤S101)。第三开关121保持断开。第二开关205根据从帧存储器管理器203传送来的控制信号,选择第一至第三帧存储器200-202的其中之一。已跳过帧存储在如此选定的帧存储器中(步骤S102)。
帧存储器管理器203监视哪个帧存储器在其中存储了已跳过帧数据,以及监视已跳过帧数据存储在帧存储器中的暂时顺序。由于将第一实施例中的帧产生器100设计成包括三个帧存储器,因而可以在帧产生器100中存储三个已跳过帧。如果连续地跳过四个或更多个帧,则存储在第一至第三帧存储器200-202的其中之一中的旧的已跳过帧将被新的已跳过帧所改写。
当编码数据在缓冲器7中的占用小于阈值时,帧产生器100按如下来操作。图5示出了将要由帧产生器100来执行的步骤。
帧产生器100对从帧存储器2所接收的帧进行编码。如果就在帧接收以前已经立即跳过了另一帧,则帧产生器100按照如下将这些帧相互进行组合,产生具有后影像效果的帧。
第一开关204选择端子A。帧存储器管理器203存储关于第一至第三帧存储器200-202之中的哪个帧存储器存储已跳过帧的信息,并根据该信息切换第三和第四开关211和212。
例如,当已跳过帧没有存储在第一至第三帧存储器200-202的任何一个中时,第三开关211保持断开,而第四开关212连接于端子C。其结果是,已从帧存储器2那里接收到的帧数据经第一和第四开关204和212被直接传送到分块部件3。
如果已跳过帧仅存储在第一帧存储器200中,帧存储器2经第一开关的端子B、再进一步经第二开关205而电连接于第一帧存储器200(步骤S201)。第三开关211将第一帧存储器200电连接到相关联的第一乘法器206上(步骤S202),而第四开关212连接于端子D。将从帧存储器2接收到的帧经第一和第四开关204和212传送到第四乘法器209上,并且在第四乘法器209中乘以系数k0(步骤S203)。将存储在第一帧存储器200中的已跳过帧经第三开关211传送到第一乘法器206中,并且在第一乘法器206中乘以系数k1(步骤S204)。然后,将这些帧传送到加法器210中,并且在加法器210中彼此相加(步骤S205)。接着,将如此相加后的帧传送到并存储在后影像帧存储器213中(步骤S206)。
具体而言,按下式来计算将要传送到分块部件3中的待编码的帧数据,:
(输入帧数据)×k0+(第一已跳过帧数据)×k1
此处,系数k0和k1均为预定常数,其中k0大于k1(k0>k1)。
如果将已跳过帧存储在第一和第二帧存储器200和201中,则第三开关211将第一帧存储器200电连接到相关联的第一乘法器206上,并且再将第二帧存储器201电连接到相关联的第二乘法器207上。第四开关212连接于端子D。将从帧存储器2接收到的帧经第一和第四开关204和212传送到第四乘法器209中,并且在第四乘法器中乘以系数k2。将存储在第一帧存储器200中的已跳过帧经第三开关211传送到第一乘法器206中,并且在第一乘法器206中乘以系数k3。同样,将存储在第二帧存储器201中的已跳过帧经第三开关211传送到第二乘法器207中,并且在第二乘法器207中乘以系数k4。然后,将这些帧传送到加法器210中,并且在加法器210中彼此相加。接着,将如此相加后的帧传送到并存储在后影像帧存储器213中。
具体而言,按下式来计算将要发送到分块部件3中的待编码的帧数据,:
(输入帧数据)×k2+(第一已跳过帧数据)×k3+(第二已跳过帧数据)×k4
此处,系数k2、k3和k4均为预定常数,其中k2大于k3,k3大于k4(k2>k3>k4)。
如果将已跳过帧存储在第一至第三帧存储器200-202中,则第三开关211分别将第一至第三帧存储器200-202电连接到相关联的第一至第三乘法器206-208中。第四开关212连接于端子D。将从帧存储器2接收的帧经第一和第四开关204和212传送到第四乘法器209中,并且在第四乘法器209中乘以系数k5。将存储在第一帧存储器200中的已跳过帧经第三开关211传送到第一乘法器206,并且在第一乘法器206中乘以系数k6。同样,将存储在第二帧存储器201中的已跳过帧经第三开关211传送到第二乘法器207中,并且在第二乘法器207中乘以系数k7,而将存储在第三帧存储器202中的已跳过帧经第三开关211传送到第三乘法器208,并且在第三乘法器208中乘以系数k8。然后,将这些帧传送到加法器210中,并在加法器210中彼此相加。接着,将如此相加后的帧传送到并存储在后图像帧存储器218中。
具体而言,按下式来计算将要传送到分块部件3中的待编码的帧数据,:
(输入帧数据)×k5+(第一已跳过帧数据)×k6+(第二已跳过帧数据)×k7+(第三已跳过帧数据)×k8
此处,系数k5、k6、k7和k8均为预定常数,其中k5大于k6,k6大于k7,k7大于k8(k5>k6>k7>k8)。
在下文中,已被输入到分块部件3中的帧数据是按与常规方法相同的方式来进行编码的。在已将帧数据传送到分块部件3中以后,将存储在帧存储器管理器203中的与已跳过帧有关的信息重置为初始状态,其中所述已跳过帧是存储在第一至第三帧存储器200-202中的。其结果是,帧存储器管理器203没有存储关于哪个帧存储器在其中存储已跳过帧的信息。
在根据第一实施例的设备中,将未待编码的帧组合成待编码的暂时地后继帧,以便形成具有后影像效果的帧。对如此形成的具有后影像效果的帧进行编码以代替待编码的帧。这样,即使跳过一帧或多帧,也有可能利用后影像效果的优点来减小运动的不连续性。
[第二实施例]
根据第二实施例的用于编码动态图像的设备在结构上不同于跟据第一实施例的设备,其不同之处仅在于帧产生器的结构。
图6是第二实施例中的帧产生器100A的框图。第二实施例中的帧产生器100A在结构上不同于第一实施例中的帧产生器100,它还包括:差分计算器302、系数计算器301、和第五开关303。因此,与图3中所示的那些帧产生器100的相应部分或元件具有相同的参考标记,并且按与帧产生器100中相应部分或元件的相同的方式来工作,除非在下文中明确解释。
差分计算器302从帧存储器2那里接收帧数据,以及从第一至第三帧存储器200-202的其中之一那里接收已跳过帧数据,并且计算帧数据与已跳过帧数据之间的每个像素差。将计算出的差传送到系数计算器301中。
系数计算器301根据从差分计算器302接收的差来计算系数,并将如此计算出的系数传送到第一至第四乘法器206-209中的每一个中。
第三开关303将差分计算器302电连接到第一至第三帧存储器200-202的其中之一上。
类似于第一实施例,第一开关204根据依编码数据在缓冲器7中的占用程度而从控制器传送来的控制信号,在端子A与B之间切换。也就是说,跳帧控制是根据编码数据在缓冲器7中的占用来进行的。
在下文中解释了当编码数据在缓冲器7中的占用等于或大于根据其可进行跳帧的阈值时、以及当编码数据在缓冲器7中的占用小于阈值时帧产生器100A的操作。类似于常规设备,根据其而跳过帧的阈值是预先确定的。
当编码数据在缓冲器7中的占用等于或大于阈值,则帧产生器100A就按如下来操作。
当编码数据在缓冲器7中的占用等于或大于阈值时,帧产生器100A执行与根据第一实施例的设备所执行的操作相同的操作。
当编码数据在缓冲器7中的占用小于阈值时,帧产生器100A按如下来操作。图7示出了将要由帧产生器100A来执行的步骤。
帧产生器100A对从帧存储器2接收到的帧进行编码。如果在一帧接收前已经立即跳过另一帧,则帧产生器100A按照如下将这些帧相互组合,以产生具有后影像效果的帧数据。
第一开关204连接于端子A。帧存储器管理器203存储关于第一至第三帧存储器200-202之中哪个帧存储器存储已跳过帧的信息,并且根据该信息来切换第三和第四开关211和212。
例如,当未在第一至第三帧存储器200-202的其中任意一个当中存储已跳过帧时,第三开关211保持断开,并且第四开关212连接于端子C。其结果是,将已从帧存储器2接收来的帧数据经第一和第四开关204和212直接传送到分块部件3。
如果已跳过帧仅存储在第一帧存储器200中,则第五开关303将第一帧存储器200电连接到差分计算器302上(步骤S301)。差分计算器302计算在从帧存储器2接收来的帧数据与存储在第一帧存储器200中的已跳过帧数据之间的每个像素差(步骤S302),并将如此计算出的差传送到系数计算器301。系数计算器301根据所接收的差来计算系数(步骤S303),并将如此计算出的系数传送到第一和第四乘法器206和209的每一个中。
在每一个像素中将传送到第一乘法器206中的系数乘以存储在第一帧存储器200中的已跳过帧数据,并且在每一个像素中将传送到第四乘法器209中的系数乘以从帧存储器2传送来的帧数据(步骤S304)。每一个都乘以系数后的帧数据和已跳过帧数据在加法器210中彼此相加(步骤S305)。加法器210将如此相加后的数据传送到后影像帧存储器213中。后影像帧存储器213将其中已接收的数据存储作为具有后影像效果的帧数据(步骤S306)。
具体而言,按下式来计算将要传送到分块部件3的待编码的帧数据:
(输入帧数据)×k0+(第一已跳过帧数据)×k1
在此,系数k0和k1都是从系数计算器301传送来的,其中k0大于k1(k0>k1)。
如果已跳过帧数据不仅存储在第一帧存储器200中,而且还存储在第二帧存储器201中,那么第一和第二帧存储器200和201就依次经第五开关303电连接于差分计算器302,并且执行如上所述的相同步骤。
如果已跳过帧数据存储在第一至第三帧存储器200-202中,则第一和第三帧存储器200-202就依次经第五开关303电连接于差分计算器302,并且执行如上所述的相同步骤。
根据第二实施例,由于可以根据每个像素的相关性来定义系数,因而就有可能产生具有后影像效果的有效帧。
第一和第二实施例中的帧产生器100和100A被设计成包括三个帧存储器200-202以便将已跳过帧存储在其中。然而,应当注意到:根据使用所述设备的环境,可将帧产生器100和100A设计成包括任何数目的帧存储器。
图8A至8C示出了本发明与现有技术之间的比较。图8A举例说明了连续的四个输入帧1至4。它假定帧2和3均被跳过。
图8B举例说明了根据现有技术来编码的帧。如图8B所示,由于帧4紧接在帧1后面,因而对观察者而言运动看起来是不连续的。
图8C举例说明了根据本发明来编码的帧。如图8C所示,帧1后面的帧包括帧4,而已跳过帧2和3被合成到所述帧4上,这样就具有了后影像效果。因此,同根据现有技术由帧1和帧4所定义的运动相比,在根据本发明的由帧1和帧(2+3+4)所定义的运动中,能够减少视觉不连续性。

Claims (10)

1.一种用于编码动态图像的设备,其中所述设备根据待编码的数据量来判断输入帧是待编码的帧还是未待编码的帧,其特征在于,包括:
(a)帧产生器,用于将未待编码的多个帧组合成待编码的一个帧,以便形成具有后影像效果的帧,所述未待编码的帧是暂时接连于所述待编码的帧;
(b)编码器,用于对所述具有后影像效果的帧进行编码以代替所述待编码的帧。
2.如权利要求1所述的设备,进一步包括:
(c)存储器,用于在其中存储未待编码的帧;和
(d)管理器,用于监控所述存储器是否在其中存储未待编码的帧。
3.如权利要求1或2所述的设备,其中所述帧产生器将根据所述未待编码的帧的数量所确定的系数乘以所述未待编码的帧及所述待编码的帧,并将所述未待编码的帧与所述待编码的帧彼此相加。
4.如权利要求1或2所述的设备,其中所述帧产生器将根据所述未待编码的帧与所述待编码的帧之间的像素差而确定的系数按逐个像素地乘以所述未待编码的帧及所述待编码的帧,并将所述未待编码的帧与所述待编码的帧彼此相加。
5.如权利要求1所述的设备,其中所述帧产生器包括:
(a)第1至第N存储器,每一个都用于将未待编码的帧存储在其中,其中N为等于或大于2的整数;
(b)管理器,用于监控所述第1至第N存储器的每一个是否都将未待编码的帧存储在其中;
(c)开关,用于根据从所述管理器接收到的指令,选择所述第1至第N存储器的其中之一来将未待编码的帧存储在其中。
(d)第1至第N乘法器,其分别与所述第1至第N存储器相关联,所述第1至第N乘法器用于将根据未待编码的帧的数目而确定的系数乘以存储在所述第1至第N存储器中的未待编码的帧;
(e)乘法器,用于将根据未待编码的帧的数目而确定的系数乘以待编码的帧;和
(f)加法器,用于将已乘以所述系数的所述未待编码的帧与已乘以所述系数的所述待编码的帧彼此相加。
6.如权利要求5所述的设备,其中所述帧产生器进一步包括:
(g)差分计算器,用于计算所述未待编码的帧与所述待编码的帧之间的像素差;和
(h)系数计算器,用于根据由所述差分计算器计算出的所述差来计算系数,并将如此计算出的系数传送到所述第1至第N乘法器的每一个中。
7.一种用于编码动态图像的方法,包括:
(a)根据待编码的数据量,来判断输入帧是待编码的帧还是未待编码的帧;
(b)将未待编码的多个帧组合成待编码的一个帧,以便形成具有后影像效果的帧,所述未待编码的帧暂时接连于所述待编码的帧;以及
(c)对所述具有后影像效果的帧进行编码以代替所述待编码的帧。
8.如权利要求7所述的方法,进一步包括:
(d)将未待编码的帧存储在存储器中;以及
(e)监控所述存储器是否将未待编码的帧存储在其中。
9.如权利要求7或8所述的方法,进一步包括:
(d)将根据所述未待编码的帧的数目所确定的系数乘以所述未待编码的帧及所述待编码的帧;以及
(e)将所述未待编码的帧与所述待编码的帧彼此相加。
10.如权利要求7或8所述的方法,进一步包括:
(d)按逐个像素地将根据在所述未待编码的帧与所述待编码的帧之间的像素差而确定的系数乘以所述未待编码的帧及所述待编码的帧;以及
(e)将所述未待编码的帧与所述待编码的帧彼此相加。
CNB2003101147378A 2002-12-26 2003-12-26 用于编码动态图像的设备及其方法 Expired - Fee Related CN1225916C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2002376563A JP4240200B2 (ja) 2002-12-26 2002-12-26 動画像符号化装置および動画像符号化方法
JP376563/02 2002-12-26
JP376563/2002 2002-12-26

Publications (2)

Publication Number Publication Date
CN1512786A true CN1512786A (zh) 2004-07-14
CN1225916C CN1225916C (zh) 2005-11-02

Family

ID=32463570

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2003101147378A Expired - Fee Related CN1225916C (zh) 2002-12-26 2003-12-26 用于编码动态图像的设备及其方法

Country Status (5)

Country Link
US (1) US20040184527A1 (zh)
EP (1) EP1434443B1 (zh)
JP (1) JP4240200B2 (zh)
CN (1) CN1225916C (zh)
DE (1) DE60324759D1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100714695B1 (ko) * 2005-07-16 2007-05-04 삼성전자주식회사 픽쳐 드롭 및 합성을 통하여 레이트 컨트롤을 수행하는비디오 코딩 방법, 그 방법을 이용한 비디오 인코더, 및트랜스코더
JP4599561B2 (ja) * 2005-08-09 2010-12-15 国立大学法人京都大学 画像処理装置、画像形成装置、画像処理方法、画像処理装置制御プログラム及び、コンピュータ読み取り可能な記録媒体
JP4743007B2 (ja) * 2006-06-16 2011-08-10 ソニー株式会社 画像処理装置および画像処理方法、記録媒体、並びに、プログラム
JP5077003B2 (ja) * 2008-03-25 2012-11-21 ソニー株式会社 画像処理装置、画像処理方法、プログラム
JP5765920B2 (ja) * 2010-11-16 2015-08-19 キヤノン株式会社 送信装置および送信方法
EP2962639A1 (en) * 2014-06-30 2016-01-06 Agfa Healthcare A fluoroscopy system for detection and real-time display of fluoroscopy images

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4214263A (en) * 1978-09-20 1980-07-22 Cbs Inc. Television system for displaying and recording paths of motion
EP0291347B1 (en) * 1987-05-15 1994-01-05 Pioneer Electronic Corporation Image processing method and apparatus
GB2255466B (en) * 1991-04-30 1995-01-25 Sony Broadcast & Communication Digital video effects system for producing moving effects
GB2266025B (en) * 1992-04-10 1995-09-13 Grass Valley Group Auto-translating recursive effects apparatus and method
KR950002658B1 (ko) * 1992-04-11 1995-03-24 주식회사금성사 영상신호의 압축 부호화 및 복호화장치
EP0648400A1 (en) * 1992-06-29 1995-04-19 BRITISH TELECOMMUNICATIONS public limited company Coding and decoding video signals
US5742707A (en) * 1995-06-27 1998-04-21 Motorola, Inc. Method and system for compressing a pixel map signal using a hybrid polynomial coefficient signal
US6148030A (en) * 1996-02-07 2000-11-14 Sharp Kabushiki Kaisha Motion picture coding and decoding apparatus
JP3535672B2 (ja) * 1996-10-04 2004-06-07 日本電信電話株式会社 映像データ伝送装置及び映像データ伝送方法
JP3560217B2 (ja) * 1998-04-30 2004-09-02 ソニー株式会社 データ符号化装置、データ符号化方法及びデータ伝送方法

Also Published As

Publication number Publication date
US20040184527A1 (en) 2004-09-23
EP1434443A1 (en) 2004-06-30
JP2004208146A (ja) 2004-07-22
DE60324759D1 (de) 2009-01-02
JP4240200B2 (ja) 2009-03-18
EP1434443B1 (en) 2008-11-19
CN1225916C (zh) 2005-11-02

Similar Documents

Publication Publication Date Title
JP5415599B2 (ja) レート制御されたビデオ符号化のための適応フレーム・スキップ技術
CN1173572C (zh) Mpeg视频流的无缝切换
CN1225914C (zh) 视频编码器和使用视频编码器的压缩视频信号的方法
CN1233160C (zh) 自适应编码和解码运动图像的方法及其装置
CN1909662A (zh) 采用帧目标比特数不平均分配的视频压缩码率控制方法
CN1206993A (zh) 运动补偿编码器、解码器以及运动补偿编码和解码方法
CN1541482A (zh) 用于数字视频信号的运动自适应降噪预处理
CN1767644A (zh) 用于视频编码的非整数像素共享
CN1678023A (zh) 使用行和列向量的运动向量估计
JP2006287315A (ja) 画像符号化方法および装置、画像復号方法
JPH09271026A (ja) 画像符号化装置
CN1615025A (zh) 可执行区块比对移动补偿与全域移动补偿的装置与方法
CN1399472A (zh) 多信道图像编码装置及其编码方法
CN1668110A (zh) 提高压缩视频比特流中的平均图像刷新速率的方法和设备
CN1232125C (zh) 通过参考离散余弦变换系数来估计运动的方法及其装置
CN1225916C (zh) 用于编码动态图像的设备及其方法
CN1842162A (zh) 一种视频编码中的运动图像处理方法
CN1089983C (zh) 限制运动图象信号频带的方法和装置
JP2009081830A (ja) 動画像圧縮符号化における符号化処理方法及び符号化処理装置
CN1767652A (zh) 码流转换中编码速度和视频质量的自适应联合控制方法
CN1206871C (zh) 具有运动预测的图像块编码、译码方法和系统
CN1263309C (zh) 用于视频编码的运动矢量预测方法
EP2814254A1 (en) Combined parallel and pipelined video encoder
CN101867822B (zh) 用于运动估计的自适应模板图像处理方法
CN1174626C (zh) 图像编码装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: LENOVO INNOVATION CO., LTD. (HONGKONG)

Free format text: FORMER OWNER: NEC CORP.

Effective date: 20141209

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; TO: HONG KONG, CHINA

TR01 Transfer of patent right

Effective date of registration: 20141209

Address after: Hongkong, China

Patentee after: LENOVO INNOVATIONS Co.,Ltd.(HONG KONG)

Address before: Tokyo, Japan

Patentee before: NEC Corp.

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20051102

Termination date: 20171226