CN1198064A - 运动补偿编码装置、方法以及编码记录媒体 - Google Patents

运动补偿编码装置、方法以及编码记录媒体 Download PDF

Info

Publication number
CN1198064A
CN1198064A CN98104314A CN98104314A CN1198064A CN 1198064 A CN1198064 A CN 1198064A CN 98104314 A CN98104314 A CN 98104314A CN 98104314 A CN98104314 A CN 98104314A CN 1198064 A CN1198064 A CN 1198064A
Authority
CN
China
Prior art keywords
mentioned
reference frame
prediction
error
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN98104314A
Other languages
English (en)
Other versions
CN1120631C (zh
Inventor
杉山贤二
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Rakuten Group Inc
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Publication of CN1198064A publication Critical patent/CN1198064A/zh
Application granted granted Critical
Publication of CN1120631C publication Critical patent/CN1120631C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

提供用更少的代码量使图像信息数字信号化的高效率编码,特别将运动图像作为对象进行运动补偿图像间预测处理的装置。具有:运动矢量检测装置用输入图像针对编码对象推测出第1运动矢量;第1误差量检测装置,求出根据第1运动矢量的第1图像间预测误差量;运动矢量预测装置,用编码后的运动矢量预测出第2运动矢量;第2误差量检测装置,求出根据第2运动矢量的第2图像间预测误差量;选择装置,比较第1第2误差量,选择误差量变少的一方。

Description

运动补偿编码装置、方法以及编码记录媒体
本发明涉及为了高效率地传送、存储、显示图像,进行以更少的代码量使图像信息变为数字信号的高效率编码,尤其涉及将运动图像作为对象进行运动补偿图像间预测处理。
在运动图像动高效率编码中,有在进行运动图像间预测时与运动图像吻合地在每块使图像的各部分移动后进行预测的方法。这样的图像空间的移动处理被称作运动补偿,它在MPEG等国际标准方式中也被广泛使用。
当在图像间预测中使用了运动补偿时,由于在译码中也需要进行与编码相同的运动补偿,所以将与图像的动有关的信息(运动矢量)编码后传送到译码端。具体地说,就是在每个8×8象素或16×16象素的块中求出得的运动矢量中,用赫夫曼(Huffman)码等的可变长度代码编码与相邻块的运动矢量的差值。这是因为运动矢量在块间很少有大的变化的缘故。
图5展示了进行上述那样的运动补偿的编码装置的构成例子。
从图像输入端子1输入的图像信号,在减法器2中减去从运动补偿器8供给的图像间预测信号,变为预测误差后传送给DCT(3)。
DCT(3)以8×8象素为单位进行离散余弦变换(DCT)的变换处理,将得到的系数传送给量化器4。量化器4以规定的间隔大小(step size)量化系数,将成为固定长度的代码的系数传送给可变长度编码器5和逆量化器12。
可变长度编码器5,以称为之字形扫编(zigzag scan)的顺序,将2维的8×8个系数排列变换成1维,将系数作为0的连续数和0以外的系数的值以赫夫曼码编码。
这样形成代码列的图像间预测误差在多路化器6中与运动矢量(MV)的代码列多路化,从代码输出端子7输出。
另一方面,在逆量化器12以及逆DCT(11)中进行量化器4以及DCT(3)的逆处理,再生图像间预测误差。得到的再生图像间预测误差在加法器10中加法运算预测信号,成为再生图像,传送给图像存储器51。存储在图像存储器51中的再生图像被传送给运动补偿器8。
动态推测器15,从输入图像中对每个16×16象素大小的块求出半象素精度的运动矢量(MV),将该值传送给运动补偿器8和MV编码器13。
运动补偿器8根据MV使再生图像移动,进而用线性内插插入制作半象素精度的运动补偿预测信号。
另一方面,MV编码器13,对于MV在每个x成分y成分上比较编码结束前的值(通常,是左块的值)和成为编码对象的块的矢量值,应用赫夫曼码编码该差分值后输出到多路器6。得到的代码列在多路器6中与图像预测误差的代码列多路化。
<以往例子的运动图像译码装置>
以下,说明与图5的运动补偿编码装置对应的译码装置。
图6是展示该译码装置构成的图。
从代码输入端子61输入的代码在多路分离器62中被分离为图像间预测误差的代码列和运动矢量的代码列,图像间预测误差的代码列在可变长度译码器63中恢复为固定长度的代码,在逆量化器12、逆DCT(11)中变为再生图像间预测误差,在加法器10中加法运算图像间预测信号后变为再生图像。
如此得到的再生图像信号,在从图像输出端子64输出的同时,传送给图像存储器51。
在运动补偿预测器8中,根据从MV译码器65传送来的MV信息,运动补偿图像存储器51的图像,作为图像间预测信号传送给加法器10。
这里,逆量化器12、逆DCT(11)、加法器10、图像存储器51、运动补偿器8的动作与图5的编码装置的动作相同。
另一方面,在多路分离器62中分离后的运动矢量代码,在MV译码器65中可变长度代码被译码为固定长度代码,得到的运动矢量的差分值与前一块的运动矢量值相加,作为运动矢量信息传送给运动补偿器8。
以往的运动补偿编码装置,直接编码在动态推测中求出得的运动矢量(MV)。
这种情况下,因为选择图像间预测误差量最小的M,所以因微小的误差量的不同,MV在每个块变动,有在MV信息的编码中不需要的代码量增多的情况。
另外,因为运动矢量的生成代码量不被控制,所以运动补偿的信息量过多,还有时抑制了图像间预测误差的信息量。这种问题在运动补偿的块尺寸小,而对其进行高精度的运动补偿的情况下尤其显著。
本发明就是为了解决上述问题而提出的,其目的在于提供这样一种运动补偿编码装置以及编码记录媒体,从已经完成编码的运动矢量预测编码对象块的运动矢量,如果在动态推测中求出得的原本的运动矢量和图像间预测误差量的差别不大,则通过在运动补偿中使用预测产生的运动矢量,就可以使运动矢量的生成代码量少,还可以控制生成代码量。
本发明是这样的运动补偿编码装置,在进行运动补偿,编码此时的运动矢量的运动图像的高效率编码中,根据用输入图像对编码对象块推测的第1运动矢量进行运动补偿图像间预测情况下求出第1图像间预测误差量,根据用编码后的运动矢量对编码对象块预测出的第2运动矢量进行运动补偿图像间预测情况下求出第2图像间预测误差,比较第1图像间预测误差量和第2图像间预测误差量,在第1运动矢量和第2运动矢量中,选择误差量少的一方。
另外,是在上述选择装置的第1图像间预测误差量和第2图像间预测误差量的比较中,修正误差量使得第2图像间预测误差量的值变为比第1图像间预测误差量的值小的运动补偿编码装置。
另外,是在上述误差量的修正中,当生成代码量大的情况下,修正的程度大,当生成代码量小的情况下,修正的程度小的运动补偿编码装置。
再有,是在上述误差量的修正中,当量化间隔大小大的情况下,修正的程度大,当量化间隔大小小的情况下,修正的程度小的运动补偿编码装置。
另一方面,本发明是一种编码记录媒体,即,在进行运动补偿、记录此时编码运动矢量后的运动图像的高效率编码信息的记录媒体中,记录这样的信息:根据用输入图像对编码对象块推测的第1运动矢量进行运动补偿图像间预测情况下求出第1图像间预测误差量,根据用编码后的运动矢量对编码对象块预测出的第2运动矢量进行运动补偿图像间预测情况下求出第2图像间预测误差,比较第1图像间预测误差量和第2图像间预测误差量,在第1运动矢量和第2运动矢量中,选择误差量变少的一方,编码被选择出的运动矢量信息。
在本发明中,从编码后的运动矢量预测编码对象块的运动矢量,如果在动态推测中求出得的原本的运动矢量和图像间预测误差量的差值不大,则将预测的运动矢量用于运动补偿。
这里,由预测产生的运动矢量由于在运动矢量信息的可变长度编码中被分配短代码,所以如果使用由预测产生的运动矢量,则运动矢量的代码量减少。
运动补偿图像间预测的预测误差量,由原来的动态推测得到的运动矢量一般情况下很少,但在由预测产生的运动矢量和由动态推测得到的运动矢量的预测误差量的差值小的情况下,即使使用由预测产生的运动矢量,预测误差的编码量的增加也很少。
另一方面,通过在某处前允许上述图像间预测误差的差,改变选取由预测产生的运动矢量的比例,所以可以控制MV的生成代码量。
图1是展示本发明的第1实施例的运动补偿编码装置的构成例子的图。
图2是展示本发明的实施例的运动矢量的形态的图。
图3是展示本发明的第2实施例的运动补偿编码装置的构成例子的图。
图4是展示本发明的实施例的运动矢量的预测方法的图。
图5是展示以往的运动补偿编码装置的构成例子的图。
图6是展示以往的运动补偿译码装置的构成例子的图。
图7是展示本发明的运运动补偿装置的构成例。
以下,说明有关本发明的运动补偿编码装置的一实施例。
图1展示了其构成,与图5的以往例子相同构成要素标记同样号码。在图1中,与图5比较有误差量检测器16、19,误差量比较器17,误差量修正器18,MV选择开关14,MV预测器20。另外,图像存储器9的动作多少有些不同。
在实施例中,与以往例不同的是运动矢量的判定方法,运动补偿图像间预测编码的主要的处理与以往例相同。
因而,在图1中,图像输入端子1、减法器2、DCT(3)、量化器4、可变长度编码器5、多路化器6、代码输出端子7、逆量化器12、逆DCT(11)、加法器10的动作与以往例相同。
下面说明有关作为本发明的特征的运动矢量判定处理。
用动态推测器15向以往例那样对每个块求出推测运动矢量(MVe),而后传送给误差量检测器16和MV切换开关14。
另一方面,在MV预测器20中,从输入的过去的MV信息预测作为编码处理对象的块的MV,求出预测运动矢量(MVp)。
作为最简单的预测方法,直接将此前得到的相邻的块的MV作为MVp。MVp被传送给误差量检测器19和MV切换开关14。它们的形态如图2所示,但推测MV和预测MV通常是类似的情况多。
误差量检测器16、19根据传送来的MV,实际运动补偿从图像存储器9传送来的参照图像,得到与输入图像之间的图像间预测误差。MVe的图像间预测误差AEe从误差量检测器16传送给比较器17。
另一方面,MVp的图像间预测误差AEp,从误差量检测器19经在修正器18中被放大kp倍后传送给误差量比较器17。kp的值是0.9左右。
误差量比较器17比较AEe和放大kp倍后的AEp的大小,将误差量少的一方的信息传送给MV开关14,MV选择开关14据此选择MV。
如果AEe<kp·AEp,则选择MVe,
如果AEe>kp·AEp,则选择MVp。
这样选择出的MV在用于运动补偿器8的同时,传送给MV编码器13以及MV预测器20。
MV编码器13与MV预测器同样地求出预测MV,取得与被传送来的MV的差分。对差分分配可变长度代码,但在选择预测MV,差分为0的情况下,可以使编码最短。这里,MV的预测在最简单的情况下,MV编码13的动作与以往例相同。
以下,更具体地说明各个构成的动作。
在MV预测器20中的MV预测的方法,除了如图4所示那样直接使用横向相邻块的MV以外,还有使用横向2块部分的MV的倾斜预测的方法。另外,也有从横向相邻块的MV和纵向块的MV中选择适宜的一种的适应预测等的方法。
误差量的修正除了在上述的AEp上乘kp的方法以外,还有平均每个象素减法1至2个的值mp的方法。也可以以乘法和减法两种方法进行。
另外,代替修正AEp,在AEe上乘1.1左右的值,或加上mp也一样。不管使用哪种方法,都将AEp向比AEe少的方向修正。
在误差量检测器16、19中,一般是将运动补偿图像间预测误差绝对值化或平方在1块部分内累积作为误差量。在更高的误差检测中,实际应用中进行与DCT(3)、量化4、可变长度编码5同样的处理,求出块中的生成代码量,将该代码量作为图像间预测误差量用于评价。由代码量评价的一方更正确,但是,处理量相应变大。
<运动补偿编码装置2>
以下说明本发明的第2实施例运动补偿编码装置。
图3展示了其构成,与图1的第1实施例同样的构成要素标记同一号码。在图3中,与图1比较,有量化控制器31、代码量计数器32、34、修正控制器33。另外,误差量修正器35的动作不同。
代码量计数器32观测总体的生成代码量,将该信息传送给量化控制器31。量化控制器31设定与生成代码量对应的量化间隔大小,将该信息传送给量化器4和修正控制器33。
这里,量化间隔大小在生成代码量比目标值多,需要抑制代码量时大,生成代码量少时小。这样的量化控制是一般的控制。
另一方面,MV编码代码计数器32观测MV代码的生成量,将该信息传送给修正控制器33。修正控制器33根据MV代码量变更kp和mp的值,传送给误差量修正器18。如此进行控制,使得在MV代码量多,需要抑制代码量时乘法系数kp小,减法系数mp大。由此,因为在修正中AEp的值变小,所以容易选择MVp,MV的代码量减少。
以下说明由量化间隔大小进行的控制。
图像间预测误差成分(DCT系数)的代码量,根据量化变化。在量化细的情况下,即使是微小的误差量的差也变为大的代码量的差。因而,在量化细的情况下,使kp接近1,使mp小。
进而,当在误差量的评价中使用生成代码量时,通过使求出代码量时的量化间隔大小与实际的量化相匹配,就可以进行这样的控制。
<编码记录媒体>
通过用MPEG系统标准等的方法多路化在图1和图3的编码装置中得到的与图像有关的代码列、声音和控制信息的代码列,在得到的代码列上附加错误修正代码,调制后记录于媒体,就可以得到编码效率改善后的图像信息记录媒体。
进而,在读出专用的编码记录媒体的情况下,可以用自动打印机等高速地记录。
<运动补偿译码装置>
与图1和图3的编码装置对应的译码装置基本上可以是图6的以往例的装置。但是,在使MV编码器13的处理内容与MV预测相匹配变更的情况下,MV译码器65的译码处理需要与此对应。
在运动图像的高效率编码中,有利用图像信号的帧间的相关,用已编码的帧预测被编码的帧,只编码预测误差的帧间预测编码。这种情况下,一般是动态地随着图像移动地进行预测的运动补偿帧间预测。另外,即使在从交插信号变换为非交插信号,或转换为不同的帧频率的图像的图像方式变换装置中,如果运动补偿地进行扫描线插入和帧插入处理,则即使图像活动解像度等的劣化也少。这样的运动补偿的动作,在运动矢量的精度是象素单位和比其小的情况下,只使象素的位置移动就结束,但在假设进行比象素单位大的高精度的运动补偿的情况下,运动补偿信号由再取样处理生成。另一方面,如果用多个帧进行预测和插入则是更适宜的处理。
该实施例的运动补偿装置的构成如图7所示。在对于作为处理对象的基准图像,从前后2个帧进行高精度的运动补偿的运动补偿装置中,从前帧信号输入端子3输入的前帧信号,被输入MV(运动矢量)检测器5以及象素移动器7,从后帧信号输入端子4输入的后帧信号,被输入到MV检测器6以及象素移动器8。另外,从基准图像输入端子2输入的基准帧信号,被输入到MV检测器5以及MV检测器6。在MV检测器5中,前帧信号和基准帧信号之间的运动矢量以比1个象素更高的精度求出。同样地在MV检测器6中,后帧信号和基准帧信号之间的运运动矢量以比1个象素更高的精度求出。运动矢量对于预先设定的各运动矢量,在每个16×16象素块进行模式匹配,将误差最少的作为该块的矢量判定。作为MV检测器5的输出的前运动矢量在通过前MV输出端子11输出的同时,传送给象素移动器7。同样地,作为MV检测器6的输出的后运动矢量在通过后MV输出端子12输出的同时,传送给象素移动器8。
进而,运动矢量的信息是在编码装置中为译码而准备的,而在图像变换装置中可以只得到运动补偿的图像信号,不一定要输出。另外,相反当在译码装置中使用本发明的运动补偿装置时,在得到运动矢量的装置中,不进行运动矢量的检出,而从编码装置或编码数据取得作为运动矢量的信息。
在象素移动器7中,根据前运动矢量使前帧信号的象素以象素精度移动,并传送给微小移动器21~24。微小移动器21~24为了进行再取样处理,在各象素上乘上与比1个象素更大的精度的运动矢量对应的系数进行加法运算。即,在运动矢量的信息中,在小于象素精度时,在象素移动器7中使用,比其精度更大的信息在微小移动器21~24中使用。
这样运动补偿的前帧信号被提供给最适宜信号判定器25。同样地在象素移动器8中,根据后运动矢量使后帧信号的象素以图像精度移动,在微小移动器21~24中,乘上与比象素更大的精度的运动矢量对应的系数进行加法运算,作为运动补偿的后帧信号提供给最适宜信号判定器25。
这种处理对于设置成交插扫描信号的各帧及非交插扫描信号的帧是完全相同的。
因为在本发明的运动补偿装置中进行针对数字运动图像的再抽样处理,所以首先简单地说明再抽样处理。数字图像由离散的象素(抽样值)构成。因而,当进行作为图像移动的运动补偿处理时,如果其移动精度是1个象素单位,则通过替换各象素就可以实现。另一方面,就是根据抽样定理抽样数字图像,原本图像信号是连续的,该移动并不在抽样间隔中产生。总之,运动补偿也应该连续地进行,在更正确的处理的情况下,需要用比象素精度更高的精度进行运动补偿。这里,比象素精度更高的精度的运动补偿,应该具有抽样值的变更,即需要再抽样处理。再抽样处理是抽样点的变更,用变换到不同的象素数(象素尺寸)等就可以更好地使用。但是,在运动补偿的情况下,因为象素数不变化所以只是抽样点的移动,可以在数字相位移位滤波器中实现。该滤波器是极普通的FIR型(横向型),在以后叙述的本实施例中,使用4分支的数字滤波器。另外,众所周知,这样的数字滤波器的分支系数被称作再抽样系数。
保持多个微小移动部分是为了补充MV检测器的准确度(检测出的运动矢量的)的不理想的问题。MV检测器对每帧进行处理,在各微小移动部分中的运动补偿,如针对帧图像的帧图像那样,针对图像密度更高的图像进行,可以检测出更正确的MV。即,各微小移动部分的系数对应于有微小不同的运动矢量。前帧信号、后帧信号、前MV、后MV被输入微小移动部分21~24。
微小移动部分21~24的基本动作相对输入的2个运动矢量有微小的离散,该组合例如设与0和0、0和0.25、0.25和0、0.25和0.25这4种对应的系数。
在此,运动矢量有垂直成分和水平成分,但水平方向直接使用可以在各帧内完全检测出的MV检测器的结果,微小移动部分只与垂直方向对应。各微小移动部分21~24的输出被输入到最适宜信号判定器25。最适宜信号判定器25分别求出从各微小移动部分输出的运动补偿后的信号,和从基准帧信号输入端子2传送来的基准帧信号的匹配值,从这多个匹配值中选择匹配最好(误差少)的信号。选择出的信号作为最终的运动补偿信号,通过运动补偿信号输出端子15输出。
在最适宜信号判定器25中的选择动作与上述的MV检测的情况相同。这里,因为要求出匹配的运动矢量的数大幅度的减少,所以可以进行比MV检测更细致的处理。例如,在MV检测中,与为了处理的高速化而将误差的绝对值(MAD)作为匹配的值相反,这里通过使用运算处理量多的平方误差(MSE),就可以更正确地进行判定。在选择出的微小移动部分中的运动矢量信息,作为运动矢量的修正信息经过修正MV输出端子26输出。
进而,微小移动部分21~24不必须是如图7所示那样的分别构成,例如,也可以用1个运算电路构成微小移动部分21~24。
本发明,从编码后的运动矢量预测编码对象块的运动矢量,如果在运动矢量推测中求出得的原来的运动矢量和图像间预测误差量的差值不大,则通过在运动补偿中使用预测的运动矢量,使在运动矢量信息的可变长度编码中的生成代码量减少。
另一方面,因为只是在各个运动矢量中预测误差量的差值少时才使用预测产生的运动矢量,所以预测误差的代码量的增加很少,因为运动矢量的代码量的削减量多,所以可以削减总的代码量。
另一方面,通过在某处之前允许上述图像间预测误差的差,就可以改变采用由预测产生的运动矢量的比例,控制生成代码量。当运动矢量的代码量增多的情况下,通过在图像间预测误差的差大时也采用预测,就可以抑制运动矢量的生成代码量。

Claims (13)

1、一种运动补偿编码装置,其特征在于:在进行运动补偿,编码此时的运动矢量的运动补偿编码装置中,具有运动矢量检测装置,用输入图像求出针对编码对象块推测的第1运动矢量;第1误差量检测装置,根据上述第1运动矢量求出进行运动补偿图像间预测时的第1图像间预测误差量;运动矢量预测装置,用编码后的运动矢量求出针对编码对象块预测的第2运动矢量;第2误差量检测装置,根据上述第2运动矢量求出进行运动补偿图像间预测时的第2图像间预测误差量;选择装置,比较上述第1图像间预测误差量和第2图像间预测误差量,在上述第1运动矢量和第2运动矢量中,选择误差量变少的一方。
2、权利要求1所述的运动补偿编码装置,其特征在于:当由上述选择装置比较第1图像间预测误差量和第2图像间预测误差量、选择误差量变少的一方时,修正误差量使得第2图像间预测误差量的值比上述第1图像间预测误差量的值小。
3、权利要求2所述的运动补偿编码装置,其特征在于:当修正上述误差量时,使其在生成代码量大的情况下修正的幅度大,在生成代码量小的情况下修正的幅度小。
4、权利要求2所述的运动补偿编码装置,其特征在于:当修正上述误差量时,使得在量化间隔大小大的情况下修正的幅度大,在量化间隔大小小的情况下修正的幅度小。
5、一种编码记录媒体,其特征在于:在记录进行了运动补偿,编码了的此时的运动矢量后的运动图像的高效率编码信息的编码记录媒体中,所记录的信息是这样生成的:求出根据用输入图像针对编码对象块推测的第1运动矢量、进行运动补偿图像间预测情况下的第1图像间预测误差量;求出根据用编码后的运动矢量针对编码对象块预测的第2运动矢量进行运动补偿图像间预测情况下的第2图像间预测误差量;比较上述第1图像间预测误差量和第2图像间预测误差量,在上述第1运动矢量和第2运动矢量中,选择误差量变少的一方,编码选择出的运动矢量信息。
6、一种运动补偿编码方法,其特征在于:在进行运动补偿,编码此时的运动矢量的运动补偿编码方法中,用上述输入图像求出对编码对象块推测出的第1运动矢量,根据上述第1运动矢量求出进行运动补偿图像间预测时的第1图像间预测误差量,用编码后的运动矢量求出针对编码对象块预测的第2运动矢量,求出根据上述第2运动矢量进行运动补偿图像间预测时的第2图像间预测误差量,比较上述第1图像间预测误差量和第2图像间预测误差量,在上述第1运动矢量和第2运动矢量中,选择误差量变少的一方。
7、权利要求6所述的运动补偿编码方法,其特征在于:当比较上述第1图像间预测误差量和第2图像间预测误差量、选择误差量少的一方时,修正误差量使得上述第2图像间预测误差量的值比上述第1图像预测误差量的值小。
8、一种适应型帧间预测编码装置,它是编码由具有连续的象素数据的帧的序列构成的输入视频信号的适应型帧间预测编码装置,其特征在于:包含,编码装置,对各块以上述图像数据值的规定的大小排列构成的、上述视频信号的帧的连续的块进行编码;选择装置,在每N(2以上的规定的整数)帧中选择直接传送到上述编码装置中的帧作为帧内编码的参照帧;适应型预测装置,其对于在上述的帧序列中的前参照帧和后参照帧之间的非参照帧,根据从上述的前以及后的参照帧的多个组合导出的多个预测信号选择出的最适宜的预测信号,对非参照帧的各块的数据值,导出各自的预测误差,执行适应性预测处理。
9、权利要求8所述的适应型帧间预测编码装置,其特征在于:上述适应型预测装置具有预测信号生成装置,分别导出基于上述的前以及后的参照帧的图像数据的组合的第1预测信号、只从前参照帧导出的第2预测信号、只从后参照帧导出的第3预测信号;预测方式选择装置,对于上述的各个块,从4个预测方式中选择1个,上述4个预测方式,在推导对于上述块的各个象素数据的预测误差时分别使用上述第1、第2、第3预测信号和非预测信号,导出的预测误差被送到上述编码装置编码,进而,上述预测方式选择装置,根据上述预测误差的判定选择预测方式,将表示分别对于上述块所选择的预测方式的预测方式数据供给上述编码装置。
10、一种适应型译码装置,其特征在于:它是译码由权利要求8所述的适应型帧间预测编码装置编码后的视频信号的适应型译码装置,包含,译码装置,输入已编码的参照帧、预测误差值、特别指定在编码时为了得到最适宜预测信号使用上述前以及后参照帧的哪个组合的预测方式信号,并将各输入信号译码;预测信号发生装置,应答译码后的预测方式信号,产生上述最适宜预测信号;生成装置,对各非参照帧,合成上述预测误差值和上述最适宜预测信号,生成对应各非参照帧的显示信息;用适当的顺序输出译码后的参照帧、各非参照帧的显示信息,生成视频信号的装置。
11、一种适应型译码装置,其特征在于:它是译码配置成由每隔规定间隔的参照帧和该参照帧之间的非参照帧构成的、并且在编码器中经过编码的视频信号的系统,是将上述参照帧在以从上述编码器经过编码后的状态输出的同时,在编码器中上述参照帧被用于根据各非参照帧、各非参照帧的前和后的参照帧之间的相关关系的相关程度,实施适应性地预测的、对于各非参照帧的显示信息的、多个预测方式中的一个,上述编码器产生各非参照帧的编码帧信号,用于特别指定在生成该编码帧信号中使用的预测方式的预测方式信号并将其输出的适应型译码系统,包含:译码装置,输入编码后的各参照帧、与各非参照帧关联的编码帧信号以及预测方式信号,译码各输入信号;生成装置,应答上述预测方式信号,从各非参照帧的译码帧信号、上述非参照帧的前以及后译码参照帧,生成对于各非参照帧的显示信息;用适当的顺序输出译码后的参照帧、对各非参照帧生成的显示信息,生成视频信号的装置。
12、一种适应型译码方法,其特征在于:它是译码配置成由每隔规定间隔的参照帧和该参照帧间的非参照帧构成的、并在编码器中被编码的视频信号的方法,是将上述参照帧在以从上述编码器中被编码后的状态输出的同时,在编码器中上述参照帧被用于根据各非参照帧、各非参照帧的之前和之后的参照帧之间的相关关系的相关度,实施适应性地预测的、对于各非参照帧的显示信息的多个预测方式中的1个,上述编码器,产生对于各非参照帧的编码帧信号、用于特别指定在生成该编码帧信号中使用的预测方式的预测方式信号并将其输出的适应型译码方法,包含以下步骤:输入编码后的各参照帧、与各非参照帧关联的编码帧信号以及预测方式信号,译码各输入信号;应答上述预测方式信号,从各非参照帧的译码帧信号、上述非参照帧的前以及后译码参照帧,生成对于各非参照帧的显示信息;用适当的顺序输出译码后的参照帧、对各非参照帧生成的显示信息,生成视频信号。
13、一种运动补偿装置,其特征在于:它是对于由连续的图像构成的运动图像信号以比1个象素更高的精度进行运动补偿,加法运算得到的多个图像、得到运动补偿信号的运动补偿装置,包含,对于连续的多个输入图像的各图像,以比1个象素更高的精度得到对于基准图像的运动矢量的信息的装置;图像移动装置,用上述检测出的运动矢量、以象素单位移动各个上述多个输入图像;微小移动装置,其具有以不足1个象素的量变更上述多个运动矢量,用该变更后的运动矢量对上述图像移动装置的多个输出进行运动补偿,加法运算得到的图像的信号并输出加法运算信号的微小移动部分,如果在上述微小移动部分中的运动矢量的变更量相互不同则关闭;最适宜信号判定装置,从上述微小移动装置的多个加法运算信号中选择基准信号和最类似的加法运算信号。
CN98104314A 1997-04-25 1998-01-25 运动补偿编码设备及方法,运动补偿设备 Expired - Lifetime CN1120631C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP123026/97 1997-04-25
JP12302697A JP3351705B2 (ja) 1997-04-25 1997-04-25 動き補償符号化装置、動き補償符号化方法、及び記録媒体への記録方法
JP123026/1997 1997-04-25

Publications (2)

Publication Number Publication Date
CN1198064A true CN1198064A (zh) 1998-11-04
CN1120631C CN1120631C (zh) 2003-09-03

Family

ID=14850388

Family Applications (1)

Application Number Title Priority Date Filing Date
CN98104314A Expired - Lifetime CN1120631C (zh) 1997-04-25 1998-01-25 运动补偿编码设备及方法,运动补偿设备

Country Status (6)

Country Link
US (1) US6141381A (zh)
EP (1) EP0874526B1 (zh)
JP (1) JP3351705B2 (zh)
KR (1) KR100285174B1 (zh)
CN (1) CN1120631C (zh)
DE (1) DE69825811T2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102318344A (zh) * 2008-12-30 2012-01-11 萨基姆通讯宽带公司 视频编码系统和方法
CN101547358B (zh) * 2008-03-27 2014-01-15 瑞萨电子株式会社 图像编码设备

Families Citing this family (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6643402B1 (en) * 1999-03-23 2003-11-04 Sanyo Electric Co., Ltd Image compression device allowing rapid and highly precise encoding while suppressing code amount of image data after compression
DE60003070T2 (de) 1999-08-11 2004-04-01 Nokia Corp. Adaptive bewegungsvektorfeldkodierung
US6735249B1 (en) 1999-08-11 2004-05-11 Nokia Corporation Apparatus, and associated method, for forming a compressed motion vector field utilizing predictive motion coding
US6671319B1 (en) * 1999-12-28 2003-12-30 Sony Corporation Methods and apparatus for motion estimation using neighboring macroblocks
WO2002019721A2 (en) * 2000-08-28 2002-03-07 Thomson Licensing S.A. Method and apparatus for motion compensated temporal interpolation of video sequences
US6873655B2 (en) 2001-01-09 2005-03-29 Thomson Licensing A.A. Codec system and method for spatially scalable video data
GB2374479B (en) * 2001-04-12 2005-05-04 Snell & Wilcox Ltd Video signal processing
CN1606882A (zh) * 2001-12-20 2005-04-13 皇家飞利浦电子股份有限公司 数字图像处理系统中运动矢量的调节
US7003035B2 (en) * 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
US20040001547A1 (en) * 2002-06-26 2004-01-01 Debargha Mukherjee Scalable robust video compression
BR0303336A (pt) * 2002-07-02 2004-04-27 Matsushita Electric Ind Co Ltd Método de derivação do vetor de movimento, método de codificação de imagem animada e método de decodificação de imagem animada
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
NO318167B1 (no) * 2002-11-27 2005-02-14 Tandberg Telecom As Vektorprediksjon
US8824553B2 (en) 2003-05-12 2014-09-02 Google Inc. Video compression method
US7978769B2 (en) 2003-06-30 2011-07-12 Ntt Docomo, Inc. Method and apparatus for coding motion information
KR100585733B1 (ko) * 2003-10-16 2006-06-07 엘지전자 주식회사 영상 처리 시스템의 손실 블록 특성 자동 판단 방법 및 장치
US20050190836A1 (en) * 2004-01-30 2005-09-01 Jiuhuai Lu Process for maximizing the effectiveness of quantization matrices in video codec systems
JP2005348093A (ja) * 2004-06-03 2005-12-15 Sony Corp 画像処理装置、そのプログラムおよびその方法
US7953152B1 (en) 2004-06-28 2011-05-31 Google Inc. Video compression and encoding method
WO2006012515A2 (en) * 2004-07-23 2006-02-02 Southco, Inc. Bi-directionally operating hinge assembly
WO2006061838A2 (en) * 2004-12-08 2006-06-15 Imagine Communications Ltd. Distributed statistical multiplexing of multi-media
KR100694137B1 (ko) 2005-07-08 2007-03-12 삼성전자주식회사 동영상 부호화 장치, 동영상 복호화 장치, 및 그 방법과,이를 구현하기 위한 프로그램이 기록된 기록 매체
WO2008153262A1 (en) 2007-06-15 2008-12-18 Sungkyunkwan University Foundation For Corporate Collaboration Bi-prediction coding method and apparatus, bi-prediction decoding method and apparatus, and recording midium
US8526499B2 (en) * 2007-06-15 2013-09-03 Sungkyunkwan University Foundation For Corporate Collaboration Bi-prediction coding method and apparatus, bi-prediction decoding method and apparatus, and recording medium
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
EP2266318B1 (en) 2008-03-19 2020-04-22 Nokia Technologies Oy Combined motion vector and reference index prediction for video coding
JP4990927B2 (ja) * 2008-03-28 2012-08-01 三星電子株式会社 動きベクトル情報の符号化/復号化方法及び装置
JP4977094B2 (ja) * 2008-06-25 2012-07-18 株式会社東芝 画像符号化方法
US8326075B2 (en) * 2008-09-11 2012-12-04 Google Inc. System and method for video encoding using adaptive loop filter
US8311111B2 (en) 2008-09-11 2012-11-13 Google Inc. System and method for decoding using parallel processing
US8325796B2 (en) * 2008-09-11 2012-12-04 Google Inc. System and method for video coding using adaptive segmentation
TWI398169B (zh) 2008-12-23 2013-06-01 Ind Tech Res Inst 移動向量之編碼模式選擇方法及其相關編碼模式選擇裝置,及其機器可讀取媒體
US8189666B2 (en) 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
JP5257215B2 (ja) * 2009-04-16 2013-08-07 ソニー株式会社 画像符号化装置と画像符号化方法
KR101614767B1 (ko) * 2009-10-28 2016-04-22 에스케이텔레콤 주식회사 벡터 양자화 기반 2차 예측을 통한 동영상 부호화/복호화 장치, 방법 및 기록 매체
TWI423680B (zh) * 2009-11-13 2014-01-11 Nat Cheng Kong University 可重組式移動補償架構之設計空間探索方法
US20110176611A1 (en) * 2010-01-15 2011-07-21 Yu-Wen Huang Methods for decoder-side motion vector derivation
KR102450324B1 (ko) 2011-02-09 2022-10-04 엘지전자 주식회사 영상 부호화 및 복호화 방법과 이를 이용한 장치
US8780996B2 (en) 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US9154799B2 (en) 2011-04-07 2015-10-06 Google Inc. Encoding and decoding motion via image segmentation
US8781004B1 (en) 2011-04-07 2014-07-15 Google Inc. System and method for encoding video using variable loop filter
US8780971B1 (en) 2011-04-07 2014-07-15 Google, Inc. System and method of encoding using selectable loop filters
US8885706B2 (en) 2011-09-16 2014-11-11 Google Inc. Apparatus and methodology for a video codec system with noise reduction capability
JP5485969B2 (ja) * 2011-11-07 2014-05-07 株式会社Nttドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
US9100657B1 (en) 2011-12-07 2015-08-04 Google Inc. Encoding time management in parallel real-time video encoding
US9262670B2 (en) 2012-02-10 2016-02-16 Google Inc. Adaptive region of interest
US9131073B1 (en) 2012-03-02 2015-09-08 Google Inc. Motion estimation aided noise reduction
JP5197864B2 (ja) * 2012-04-12 2013-05-15 株式会社東芝 画像復号化方法及び装置
US9344729B1 (en) 2012-07-11 2016-05-17 Google Inc. Selective prediction signal filtering
US11425395B2 (en) 2013-08-20 2022-08-23 Google Llc Encoding and decoding using tiling
US9392272B1 (en) 2014-06-02 2016-07-12 Google Inc. Video coding using adaptive source variance based partitioning
US9578324B1 (en) 2014-06-27 2017-02-21 Google Inc. Video coding using statistical-based spatially differentiated partitioning
US10102613B2 (en) 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
US9794574B2 (en) 2016-01-11 2017-10-17 Google Inc. Adaptive tile data size coding for video and image compression
US10542258B2 (en) 2016-01-25 2020-01-21 Google Llc Tile copying for video compression

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4101490C1 (zh) * 1991-01-19 1992-02-06 Telenorma Gmbh, 6000 Frankfurt, De
US5412435A (en) * 1992-07-03 1995-05-02 Kokusai Denshin Denwa Kabushiki Kaisha Interlaced video signal motion compensation prediction system
TW283289B (zh) * 1994-04-11 1996-08-11 Gen Instrument Corp
US5963673A (en) * 1995-12-20 1999-10-05 Sanyo Electric Co., Ltd. Method and apparatus for adaptively selecting a coding mode for video encoding

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101547358B (zh) * 2008-03-27 2014-01-15 瑞萨电子株式会社 图像编码设备
CN102318344A (zh) * 2008-12-30 2012-01-11 萨基姆通讯宽带公司 视频编码系统和方法
CN102318344B (zh) * 2008-12-30 2014-10-08 萨基姆通讯宽带公司 视频编码系统和方法

Also Published As

Publication number Publication date
JPH10304383A (ja) 1998-11-13
EP0874526A2 (en) 1998-10-28
US6141381A (en) 2000-10-31
EP0874526A3 (en) 1999-11-03
EP0874526B1 (en) 2004-08-25
CN1120631C (zh) 2003-09-03
JP3351705B2 (ja) 2002-12-03
KR19980081747A (ko) 1998-11-25
DE69825811D1 (de) 2004-09-30
KR100285174B1 (ko) 2001-03-15
DE69825811T2 (de) 2005-09-01

Similar Documents

Publication Publication Date Title
CN1120631C (zh) 运动补偿编码设备及方法,运动补偿设备
CN1144472C (zh) 运动补偿编码器、解码器以及运动补偿编码和解码方法
JP3856262B2 (ja) 動き補償符号化装置、動き補償符号化方法、及び動き補償符号記録媒体
JP2501999B2 (ja) ビデオ画像の符号化装置と方法
CN1290342C (zh) 可执行区块比对移动补偿与全域移动补偿的装置与方法
CN101325714B (zh) 变换数据处理方法和装置以及编码、解码方法和装置
CN1495674A (zh) 运动向量补偿的内插装置和方法
CN1719901A (zh) 基于运动估计多分辨率方法及存储执行其程序的记录介质
WO2002104021A1 (en) A fast video encoder using adaptive hierarchical video processing in a down/sampled domain
CN101039434A (zh) 视频编码装置
CN1144469C (zh) 编码和解码图像中的像素的运动向量的方法
CN1149853C (zh) 带有运动补偿的编码和译码装置
CN1198465C (zh) 代码转换器和代码转换方法
US20100002765A1 (en) Image encoding apparatus and method
CN1320830C (zh) 噪声估计方法和设备、以及利用其编码视频的方法和设备
CN1199307A (zh) 编码/译码的装置和方法以及存贮编码信号的存储介质
CN1520179A (zh) 用于编码/解码隔行扫描视频信号的方法和装置
US20090060039A1 (en) Method and apparatus for compression-encoding moving image
CN104244005B (zh) 图像处理装置、图像处理方法和成像设备
CN1131638C (zh) 采用一种自适应量化技术的视频信号编码方法及设备
CN1232933C (zh) 图像序列的格式转换方法
CN1204747C (zh) 影像转换编码装置
CN1708991A (zh) 利用拉格朗日乘子和视觉掩蔽来控制速率-失真折中的方法和装置
EP3857877B1 (en) Image data encoding and decoding
JP3948442B2 (ja) 動き補償復号化装置

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: RAKUTEN INC.

Free format text: FORMER OWNER: JVC KENWOOD CORPORATION

Effective date: 20131009

Owner name: JVC KENWOOD CORPORATION

Free format text: FORMER OWNER: VICTORY CO. LTD.

Effective date: 20131009

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20131009

Address after: Japan's Tokyo East Shinagawa Shinagawa district four chome 12 No. 3

Patentee after: Rakuten, Inc.

Address before: yokohama

Patentee before: JVC Kenwood Corp.

Effective date of registration: 20131009

Address after: yokohama

Patentee after: JVC KENWOOD Corp.

Address before: yokohama

Patentee before: VICTOR COMPANY OF JAPAN, Ltd.

CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20030903