CN1969559A - 移动图像编码装置和移动图像译码装置、其方法和程序 - Google Patents

Abstract

在时间空间分割滤波中，将某析像度阶层的移动图像信号(10)分割为时间低频信号(11)和时间高频信号(12)。使用时间低频信号(11)和时间高频信号(12)，生成再构成与时间高频信号(12)对应的移动图像信号的移动图像信号(21)。生成对移动图像信号(21)进行缩小处理的缩小图像信号(14)。对时间高频信号(12)进行基于空间阶层化的高频生成处理，生成时间高频空间高频信号(13)。将时间低频信号(11)、缩小图像信号(14)、时间高频空间高频信号(13)作为分割结果。将时间低频信号(11)视为时间析像度更低的移动图像信号，将缩小图像信号(14)视为空间析像度更低的移动图像信号，通过循环地进行时间空间分割滤波，多阶段地将移动图像信号阶层化。

Description

移动图像编码装置和移动图像译码装置、其方法和程序

技术领域

本发明涉及移动图像编码方法、移动图像译码方法、移动图像编码装置、移动图像译码装置和计算机程序。

背景技术

部分波段编码是在频率上分割图像信号，关于各频带的信号(部分波段信号)，进行编码处理的方法。部分波段编码与离散余弦变换等块基正交变换不同，不发生原理上块变形，具有通过循环分割低频成分，能容易实现阶层编码的特征。在静止图像中，对国际标准的编码方法JPEG2000采用使用微波变换的部分波段编码。

对移动图像编码应用部分波段编码时，不仅信号的空间方向的相关，还有必要考虑时间方向的相关。从以往就进行将原信号进行部分波段分割后，对各部分波段区进行移动补偿，去掉时间方向的相关的部分波段MC(Motion Compensation)的研究。可是，部分波段MC中，存在高频部分波段的预测效率差，编码性能低的问题。而开发了对原图像在空间区域进行伴随着移动补偿的时间滤波，去掉时间方向的相关之后，对各帧进行部分波段编码的三维微波编码。

以下，说明代表性的三维微波编码方法的技术(例如，非专利文献1)。

图18～图21是什么非专利文献1中表示的三维微波编码方法的图。图18是表示三维微波编码的编码器的结构的框图。以下，说明使用图18的三维微波编码的处理的流程。

对于由N(N是2的乘方)个连续的帧构成的输入图像信号2000，时间方向滤波201进行伴随着移动补偿的向时间方向的微波变换，生成N/2个时间低频部分波段信号2001和N/2个时间高频部分波段信号2002和移动信息2003。其中对时间低频部分波段信号2001循环地进行时间滤波201。由多级的时间滤波处理生成的一个时间低频部分波段信号2004和N-1个时间高频部分波段信号2002分别在空间方向进行部分波段分割。

空间部分波段分割部202将时间高频部分波段信号2002在水平垂直分别进行部分波段分割为2个，生成一个时间高频空间低频部分波段2005和3个时间高频空间高频部分波段2006。其中，时间高频空间低频部分波段2005由空间部分波段分割部202循环分割。按规定次数在空间方向进行部分波段分割后，时间高频空间低频部分波段2005和时间高频空间高频部分波段2006由量子化部204进行量子化。

关于时间低频部分波段信号2004，由空间部分波段分割203进行空间部分波段分割为多阶段，时间低频空间低频部分波段信号2005和时间低频空间高频部分波段2008由量子化部204进行量子化。量子化的各信号由熵编码部205进行熵编码。

此外，由时间方向滤波201生成的移动信息2003由移动信息编码部206进行编码。分别编码的信号由多路复用部207进行多路复用，作为位流2010输出。

图19是表示三维微波编码的高次的时间方向和空间方向的部分波段分割的概念图。输入信号2011由3级的时间滤波分割为3次的时间低频部分波段信号2015和3次的时间高频部分波段信号2016、2次的时间高频部分波段信号2014、1次的时间高频部分波段信号2016。

3次的时间低频部分波段信号2015由3阶段的空间部分波段分割，分割为3次的时间低频空间低频部分波段信号2017、3次的时间低频空间高频部分波段信号2018、2019、2020、2次的时间低频空间高频部分波段信号2021、2022、2023、1次的时间低频空间高频部分波段信号2024、2025、2026。

时间高频部分波段循环通过3阶段的空间部分波段分割，分割为3次的时间高频空间低频部分波段信号2027、3次的时间高频空间高频部分波段信号2028、2029、2030、2次的时间高频空间高频部分波段信号2031、2032、2033、1次的时间高频空间高频部分波段信号2034、2035、2036。

从位流再构成与输入图像信号不同的空间析像度或帧频的图像信号时，译码器只将位流中包含的多个部分波段信号的编码数据中的一部分译码。

按照图19说明部分波段的编码数据的抽出处理。

再构成帧频为1/2的动画时，译码器将与时间低频部分波段2015和时间高频部分波段2016、2014对应的编码数据译码。再构成析像度为1/2的动画时，译码器将时间低频部分波段信号中除了1次的时间低频空间高频部分波段的部分波段即时间低频空间低频部分波段信号2017和时间低频空间高频部分波段信号2018～2023译码。

此外，将时间高频部分波段信号中除了1次的时间高频空间高频部分波段的部分波段即时间高频空间低频部分波段信号2027和时间高频空间高频部分波段信号2028～2033译码。

图20是表示从由三维微波编码生成的位流抽出相当于缩小图像的编码数据的编码数据抽出装置和移动图像译码装置的结构的框图。

编码数据抽出装置放弃比位流2010低次的空间高频部分波段信号2038，生成由适当的部分波段的编码数据构成的位流2037，发送给移动图像译码装置209。移动图像译码装置209将位流2037中包含的部分波段信号合成，输出译码图像信号2047。

图21是表示移动图像译码装置209的结构的框图。说明使用图21的三维微波编码的译码处理的流程。

逆多路复用部210从位流2037切出部分波段的编码数据，通过熵译码部211和逆量子化部212，生成时间高频空间高频部分波段信号2039、时间高频空间低频部分波段信号2040、时间高频空间高频部分波段信号2041、时间高频空间低频部分波段信号2042。

空间部分波段合成213循环地将时间高频空间高频部分波段信号2039、时间高频空间低频部分波段信号2040进行部分波段合成，生成时间高频部分波段信号2043。

空间部分波段合成214循环地将时间低频空间高频部分波段信号2041、时间低频空间低频部分波段信号2042进行部分波段合成，生成时间低频部分波段信号2044。这里，空间部分波段合成处理的次数比由编码器进行的空间部分波段分割处理的次数少，该数量由编码数据抽出装置放弃的空间高频部分波段信号决定。

此外，移动信息译码部215将逆多路复用部210输出的移动信息的代码译码，生成移动信息2045。向量缩小部216按照将移动信息2045编码时的输入信号和译码器输出的译码图像信号的析像度比，缩小向量的长度。该比率由抽出器208放弃的空间高频部分波段信号的数量决定。例如，放弃最低次的空间高频部分波段信号时，向量的长度缩小到1/2。

然后，时间方向逆滤波217按照向量缩小部216输出的移动信息2046，对时间高频部分波段信号2043和时间低频部分波段信号2044进行编码时的时间滤波的逆变换，生成译码图像信号2047。

非专利文献1：J.-R.Ohm“Three-dimensional subband coding with motioncompensation”，IEEE Trans，Image Processing，vol.3，pp.559-571，Sept.1999

发明内容

在以往技术的三维微波编码中，存在应用空间可量测性取得的缩小析像度的图像质量与输入预先缩小的图像编码时的图像质量差的问题。理由有3个。

第一理由是移动补偿的不匹配。在图18所示的移动图像编码装置的时间方向滤波201、图21所示的移动图像译码装置的时间方向逆滤波中包含根据移动信息的块单位的移动补偿预测处理。移动信息的精度为小数时，用来自相邻像素的内插处理取得预测处理中取得的像素值。关于译码器，生成缩小图像时，根据对于空间低频部分波段信号，缩小的向量，进行移动补偿预测时的内插处理。这时的内插滤波器与在编码时时间滤波201进行的内插处理和空间部分波段分割203的低通滤波器无关地决定。对编码时的输入信号进行内插处理后二次采样的结果与对二次采样的空间低频部分波段信进行内插处理的结果一般不一致。编码装置和译码装置的移动补偿中的预测处理的不一致产生译循信号的变形。将时间方向滤波变为越多级，越积蓄该变形。

图22和图23是为了说明移动补偿的内插处理和二次采样处理不可换，图示一维的像素排列和与各像素相乘的滤波器系数的概念图的具体例。在以下的说明中，对采样处理采用微波，对内插处理使用6分支的滤波器。

在图22和图23中，横轴上的标记p0～p11和p0’～p5’表示像素，从各坐标延伸的纵轴上的标记表示乘的滤波器值。在图22的上方的图中，分别表示从像素p4偏移1/2的位置的像素值q4、从像素p5偏移1/2的位置的像素值q5的计算中使用的滤波器值。如果内插滤波器为B0～B6，则

q4＝B0*p2+B1*p3+B2*p4+B3*p5+B4*p6+B5*p7

q5＝B0*p3+B1*p4+B2*p5+B3*p6+B4*p7+B5*p8

从q4和q5，由二次滤波处理取得的缩小析像度的内插值如图22中下方的图所示，变为

(q4+q5)/2＝B0/2*p2+(B0+B1)/2*p3+(B1+B2)/2*p4+(B2+B3)/2*p5+(B3+B4)/2*p6+(B4+B5)/2*p7+B5/2*p8

在图23的上方的图中，表示对于对p0～p11进行二次采样处理而取得的像素p0’～p5’，从像素p2’偏移1/4的位置的像素值q2’的计算中使用的滤波器值。如果内插滤波器为C0～C6，则

q2’＝C0*p0’+C1*p1’+C2*p2’+C3*p3’+C4*p4’+C5*p5’

这里，进行二次采样处理，从而p2’＝(p4+p5)/2

如图23的下方的图所示，如果使用p0～p11表示p2’，则

q2’＝C0/2*p0+C0/2*p1+C1/2*p2+C1/2*p3+C2/2*p4+C2/2*p5+C3/2*p6+C3/2*p7+C4/2*p8+C4/2*p9+C5/2*p10+C5/2*p11。一般与二次采样处理独立确定内插滤波器，所以(q4+q5)/2与q2’不一致。

第二理由是移动信息的系统开销。在图21的移动图像译码装置中，移动信息有必要与编码时生成的移动信息相同。在缩小析像度上也分配相同的移动信息，所以成为移动补偿处理的单位的编码块的尺寸和移动信息的精度变得必要以上地细致。在图20中，限定从编码数据抽出装置向移动图像译码装置的传送速率时，移动信息所需的编码量占很多，有时无法对系数信息分配最低限度的编码量。

图24是说明移动信息的系统开销的概念图。在图24中，将关于帧B0和C0，进行移动推定而取得的移动信息群称作MV0，将关于对帧B0、C0分别二次采样的帧B1、C1，进行移动推定而取得的移动信息群称作MV1。在移动推定中，决定分配移动信息的块的最小尺寸、移动信息的精度。将移动信息群MV0适合于帧B1、C1地缩小到1/2时，块的最小尺寸变为1/2，移动信息的精度变为2倍。与移动信息群MV1相比，缩小的移动信息群MV0的数量多，并且表示各移动信息所必要的编码量多。

作为第三理由，是可量测性的问题。在三维微波编码中，编码器中使用的参数和处理模块在由可量测性的应用而取得的全部不同的析像度和帧频的位流中相同。如果要高效率地编码，则由这些参数决定的延迟和由处理模块决定的计算量增大。通过可量测性的应用，将这样生成的编码数据的一部分对移动终端发送时，延迟和计算量成为大的制约。相反，如果考虑低速率下的应用，决定参数和处理模块，则高速率下的编码性能大幅度下降。

因此，本发明是鉴于所述课题而提出的，其目的在于，在阶层化的编码数据中，全部阶层中的译码图像信号具有与用单一阶层编码时的译码图像同等的图像质量的移动图像编码装置、移动图像译码装置及其方法和控制程序。

解决所述课题的第一发明是一种移动图像编码装置，其特征在于，具有：使用将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分，生成与所述时间高频成分对应的移动图像信号，输出对该生成结果进行缩小处理的移动图像的缩小图像信号的时间空间分割滤波部。

解决所述课题的第二发明是一种移动图像编码装置，其特征在于，具有：对将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分进行缩小处理，使用缩小处理的结果，生成与所述时间高频成分对应的移动图像的缩小图像信号的时间空间分割滤波部。

解决所述课题的第三发明是一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号编码的信号编码处理部，其特征在于：所述时间空间分割滤波部生成将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、使用所述时间低频成分和所述时间高频成分再构成与所述时间高频成分对应的所述移动图像信号后对所述再构成结果进行缩小处理的缩小图像信号。

解决所述课题的第四发明是一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号编码的信号编码处理部，其特征在于：所述时间空间分割滤波部将所述移动图像信号进行时间阶层化，取得时间低频成分和时间高频成分，将所述时间高频成分进行空间阶层化，取得空间高频成分，使用所述时间低频成分和所述时间高频成分再构成与时间高频成分对应的所述移动图像信号后，生成对所述再构成结果进行缩小处理的缩小图像信号。

解决所述课题的第五发明是一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号编码的信号编码处理部，其特征在于：所述时间空间分割滤波部生成将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、对所述时间低频成分和所述时间高频成分进行缩小处理并且使用缩小处理结果而生成的与所述时间高频成分对应的移动图像信号的缩小图像信号。

解决所述课题的第六发明是一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将阶层化的信号编码的信号编码处理部，其特征在于：所述时间空间分割滤波部具有：将移动图像信号在时间方向滤波，生成时间低频信号、时间高频信号、表示所述图像信号之间的移动的移动信息的时间方向滤波部；使用所述时间高频信号和所述时间低频信号，生成缩小与所述时间高频信号对应的移动图像信号的缩小图像信号的缩小图像生成部；生成对于所述时间高频信号，相当于空间高频成分的时间高频空间高频信号的高频信号生成部；关于所述时间低频信号或所述缩小图像信号，执行所述时间空间分割滤波部，将移动图像信号阶层化后，信号编码处理部将所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息编码。

解决所述课题的第七发明根据所述第六发明，其特征在于：所述缩小图像生成部具有：根据移动信息对时间低频信号进行移动补偿，生成预测图像的移动补偿部；从所述预测图像和时间高频信号生成与所述时间高频信号对应的移动图像信号的时间高频信号逆变换部；对所述时间高频信号逆变换部生成的移动图像信号进行空间滤波，生成空间低频成分即缩缩小译码图像信号的低频信号生成部。

解决所述课题的第八发明根据所述第七发明，其特征在于：具有：比较所述时间高频信号和所述时间低频信号，进行加权处理，或者对所述时间高频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出的加权部。

解决所述课题的第九发明根据所述第六发明，其特征在于：所述缩小图像生成部具有：对时间低频信号和时间高频信号进行空间滤波，分别生成时间低频空间低频信号和时间高频空间低频信号的低频信号生成部；按照所述低频信号生成部的所述空间滤波的析像度变换比，变换移动信息的移动信息变换部；根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿补偿部；使用所述预测图像和所述时间高频空间低频信号，生成缩小图像信号的时间高频信号逆变换部。

解决所述课题的第十发明根据所述第九发明，其特征在于：具有：对所述时间高频空间低频信号进行加权处理，或者对所述时间高频空间低频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出的加权部。

解决所述课题的第十一发明根据所述第十发明，其特征在于：所述高频信号生成部是基于部分波段分割的频率成分抽出。

解决所述课题的第十二发明根据所述第十一发明，其特征在于：所述低频信号生成部是基于部分波段分割的频率成分抽出。

解决所述课题的第十三发明根据所述第六～第十发明，其特征在于：所述低频信号生成部通过第一二次采样滤波器生成缩小图像信号，所述高频信号生成部通过与所述第一二次采样滤波器成对的第二二次采样滤波器生成高频信号。

解决所述课题的第十四发明根据所述第六～第十三发明，其特征在于：所述时间方向滤波部具有：对移动图像信号生成移动信息的移动推定部；使用所述移动信息，对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的第一移动补偿部；使用所述移动图像信号中包含的非参照信号和所述预测信号，生成时间高频信号的时间高频信号生成部；使用所述移动信息对所述时间高频信号进行移动补偿，生成与所述预测信号对应的移动补偿时间高频信号的第二移动补偿部；从所述移动补偿时间高频信号和所述参照信号生成时间低频信号的时间低频信号生成部。

解决所述课题的第十五发明根据所述第六～第十三发明，其特征在于：所述时间方向滤波部具有：对移动图像信号，生成移动信息的移动推定部；使用所述移动信息对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的移动补偿部；生成所述移动图像信号中包含的非参照信号和所述预测信号的差分信号的差分信号生成部；将所述参照信号以无变换作为时间低频信号输出，将所述差分信号作为时间高频信号输出。

解决所述课题的第十六发明是一种移动图像编码装置，由对移动图像信号在时间方向和空间方向进行频率分割并且生成缩小所述移动图像信号的缩小图像信号和时空间高频信号和移动信息的时间空间频率分割部、将所述缩小图像信号编码的缩小画像信号编码部、将所述时空间高频信号编码的时空间高频信号编码部、将所述移动信息编码的移动信息编码部、将所述缩小画像信号编码部和所述时空间高频信号编码部输出的编码数据和所述移动信息编码部输出的移动信息编码数据多路复用并且生成成为输出的位流的多路复用部构成，其特征在于：所述时间空间频率分割部由将移动图像信号分割为时间低频信号、相当于所述时间高频信号的空间方向高频的时间高频空间高频信号、缩小与所述时间高频信号对应的移动图像信号的时间高频缩小图像信号的时间空间分割滤波部、将所述时间低频信号在空间方向进行频率分割生成时间低频空间低频信号和时间低频空间高频信号的空间分割滤波部构成，所述时间空间分割滤波部将所述时间低频信号作为输入，循环地进行处理后，将所述时间低频空间低频信号和所述缩小译码图像信号作为所述时间高频缩小图像信号，将所述时间高频空间高频信号和所述时间低频空间高频信号作为所述时空间高频信号输出。

解决所述课题的第十七发明是一种移动图像译码装置，具有将阶层编码的移动图像信号的编码数据译码并且生成阶层化的信号的信号译码处理部、合成所述阶层化的信号的时间空间合成滤波部，其特征在于：所述时间空间合成滤波部根据某析像度阶层的译码结果即译码图像信号，生成基于时间阶层化的时间高频成分中的基于空间阶层化的空间低频成分后，进行空间方向频率合成和时间方向频率合成，生成更高析像度的析像度阶层的译码图像信号。

解决所述课题的第十八发明是一种移动图像译码装置，具有将编码数据译码并且生成阶层化的信号的信号译码处理部、合成阶层化的信号的时间空间合成滤波部，其特征在于：所述时间空间合成滤波部具有：从时间低频信号、某析像度阶层的合成结果即缩小译码图像信号生成与所述时间低频信号成对的时间高频信号的空间低频成分即时间高频空间低频信号的时间高频空间低频信号再构成部；合成所述时间高频信号的空间高频成分即时间高频空间高频信号、所述时间高频空间低频信号，生成时间高频信号的空间合成滤波部；从所述时间高频信号、所述时间低频信号、移动信息生成译码图像信号的时间方向逆滤波部；所述信号译码处理部从所述编码数据译码所述低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息。

解决所述课题的第十九发明根据所述第十八发明，其特征在于：所述时间高频空间低频信号再构成部具有：根据所述移动信息，对所述时间低频信号进行移动补偿，生成预测图像的移动补偿部；生成所述预测图像的空间低频成分即空间低频预测信号的低频信号生成部；从所述空间低频预测信号和缩小图像信号生成时间高频成分的时间高频信号生成部；将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

解决所述课题的第二十发明根据所述第十九发明，其特征在于：具有：对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理的逆加权部；将所述逆加权部的输出作为时间高频空间低频信号输出。

解决所述课题的第二十一发明根据所述第十八发明，其特征在于：所述时间高频空间低频信号再构成部具有：生成时间低频信号的空间低频成分，作为时间低频空间低频信号输出的低频信号生成部；按照所述低频信号生成部的输入输出图像的析像度变换比，变换移动信息的移动信息变换部；根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿部；从所述预测图像和缩小译码图像信号生成时间高频成分的时间高频信号生成部；将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

解决所述课题的第二十二发明根据所述第二十一发明，其特征在于：具有：对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理的逆加权部；将所述逆加权部的输出作为时间高频空间低频信号输出。

解决所述课题的第二十三发明根据所述第十九～所述第二十二发明，其特征在于：所述低频信号生成部是基于部分波段分割的低通处理。

解决所述课题的第二十四发明根据所述第十九～所述第二十三发明，其特征在于：所述空间合成滤波部是成为所述部分波段分割的逆变换的部分波段合成。

解决所述课题的第二十五发明根据所述第十九～所述第二十四发明，其特征在于：所述低频信号生成部由二次采样滤波器生成缩小图像。

解决所述课题的第二十六发明根据所述第十九～所述第二十五发明，其特征在于：所述空间合成滤波部是由与所述二次采样滤波器成对的第二二次采样滤波器生成的高频信号与由所述二次采样滤波器生成的低频信号的合成。

解决所述课题的第二十七发明根据所述第十八～所述第二十六发明，其特征在于：所述时间方向逆滤波部具有：根据所述移动信息，对所述时间高频信号进行移动补偿，生成移动补偿时间高频信号的第一移动补偿部；从所述移动补偿时间高频信号和所述时间低频信号生成第一译码图像信号的时间低频信号逆变换部；关于所述第一译码图像信号，根据所述移动信息进行移动补偿，生成预测信号的第二移动补偿部；从所述预测信号和所述时间高频信号生成第二译码图像信号的时间高频信号逆变换部；合并所述第一译码图像信号和所述第二译码图像信号，作为成为输出的译码图像信号。

解决所述课题的第二十八发明根据所述第十八～所述第二十七发明，其特征在于：所述时间方向逆变换滤波部对所述时间低频信号进行移动补偿后，与时间高频信号相加，与所述时间低频信号合成，作为译码图像信号输出。

解决所述课题的第二十九发明是一种移动图像译码装置，由将阶层化的位流逆多路复用并且生成最低次编码数据和剩余编码数据和移动信息编码数据的逆多路复用部、将最低次编码数据译码并且生成缩小图像信号的缩小图像信号译码部、将剩余编码数据译码并且生成时空间高频信号的时空间高频信号译码部、将所述移动信息编码数据译码并且生成移动信息的移动信息译码部、从所述缩小图像信号和所述时空间高频信号和所述移动信息生成译码图像信号的时间空间频率合成部构成，其特征在于：所述时间空间频率合成部由以下部分构成：合成所述缩小图像信号中的时间低频空间低频信号和所述时空间高频信号中的时间低频空间高频信号，生成时间低频信号的空间合成滤波部；从所述时间低频信号、所述缩小图像信号、所述时空间高频信号再构成与所述时间低频信号对应的时间高频信号后，通过与所述时间低频信号合成，输出译码图像信号的时间空间合成滤波部。

解决所述课题的第30发明是一种移动图像编码方法，其特征在于：使用将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分，生成与所述时间高频成分对应的移动图像信号，对生成结果进行缩小处理，生成移动图像的缩小画像信号。

解决所述课题的第31发明是一种移动图像编码方法，其特征在于：对将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分进行缩小处理，使用缩小处理结果，生成与所述时间高频成分对应的移动图像的缩小画像信号。

解决所述课题的第32发明是一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将所述阶层化的信号编码的信号编码处理，其特征在于：所述时间空间分割滤波生成将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、使用所述时间低频成分和所述时间高频成分再构成与所述时间高频成分对应的所述移动图像信号后对所述再构成结果进行缩小处理的缩小图像信号。

解决所述课题的第33发明是一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将所述阶层化的信号编码的信号编码处理，其特征在于：所述时间空间分割滤波将所述移动图像信号进行时间阶层化，取得时间低频成分和时间高频成分，将所述时间高频成分进行空间阶层化，取得空间高频成分，使用所述时间低频成分和所述时间高频成分再构成与时间高频成分对应的所述移动图像信号后，生成对所述再构成结果进行缩小处理的缩小图像信号。

解决所述课题的第34发明是一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将所述阶层化的信号编码的信号编码处理，其特征在于：所述时间空间分割滤波生成将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、对所述时间低频成分和所述时间高频成分进行缩小处理并且使用缩小处理结果而生成的与所述时间高频成分对应的移动图像信号的缩小图像信号。

解决所述课题的第35发明是一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将阶层化的信号编码的信号编码处理，其特征在于：所述时间空间分割滤波具有：将移动图像信号在时间方向滤波，生成时间低频信号、时间高频信号、表示所述图像信号之间的移动的移动信息的时间方向滤波步骤；使用所述时间高频信号和所述时间低频信号，生成缩小与所述时间高频信号对应的移动图像信号的缩小图像信号的缩小图像生成步骤；生成对于所述时间高频信号，相当于空间高频成分的时间高频空间高频信号的高频信号生成步骤；关于所述时间低频信号或所述缩小图像信号，执行所述时间空间分割滤波步骤，将移动图像信号阶层化后，在信号编码处理步骤将所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息编码。

解决所述课题的第36发明根据第35发明，其特征在于：所述缩小图像生成步骤具有：根据移动信息对时间低频信号进行移动补偿，生成预测图像的移动补偿步骤；从所述预测图像和时间高频信号生成与所述时间高频信号对应的移动图像信号的时间高频信号逆变换步骤；对所述时间高频信号逆变换步骤生成的移动图像信号进行空间滤波，生成空间低频成分即缩小译码图像信号的低频信号生成步骤。

解决所述课题的第37发明根据第36发明，其特征在于：在所述时间高频信号逆变换步骤之前，比较所述时间高频信号和所述时间低频信号，进行加权处理，或者对所述时间高频信号的某部分进行加权处理。

解决所述课题的第38发明根据第35发明，其特征在于：所述缩小图像生成步骤具有：对时间低频信号和时间高频信号进行空间滤波，分别生成时间低频空间低频信号和时间高频空间低频信号的低频信号生成步骤；按照所述低频信号生成步骤的所述空间滤波的析像度变换比，变换移动信息的移动信息变换步骤；根据由所述移动信息变换步骤变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿补偿步骤；使用所述预测图像和所述时间高频空间低频信号，生成缩小图像信号的时间高频信号逆变换步骤。

解决所述课题的第39发明根据第38发明，其特征在于：在时间高频信号逆变换步骤之前，对所述时间高频空间低频信号进行加权处理，或者对所述时间高频空间低频信号的某部分进行加权处理.。

解决所述课题的第40发明根据第35～第39中的任意一个发明，其特征在于：所述高频信号生成步骤是基于部分波段分割的频率成分抽出。

解决所述课题的第41发明根据第35～第40中的任意一个发明，其特征在于：所述低频信号生成步骤是基于部分波段分割的频率成分抽出。

解决所述课题的第42发明根据第35～第39中的任意一个发明，其特征在于：所述低频信号生成步骤通过第一二次采样滤波器生成缩小图像信号，所述高频信号生成步骤通过与所述第一二次采样滤波器成对的第二二次采样滤波器生成高频信号。

解决所述课题的第43发明根据第35～第42中的任意一个发明，其特征在于：所述时间方向滤波步骤具有：对移动图像信号生成移动信息的移动推定步骤；使用所述移动信息，对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的第一移动补偿步骤；使用所述移动图像信号中包含的非参照信号和所述预测信号，生成时间高频信号的时间高频信号生成步骤；使用所述移动信息对所述时间高频信号进行移动补偿，生成与所述预测信号对应的移动补偿时间高频信号的第二移动补偿步骤；从所述移动补偿时间高频信号和所述参照信号生成时间低频信号的时间低频信号生成步骤。

解决所述课题的第44发明根据第35～第42中的任意一个发明，其特征在于：所述时间方向滤波步骤具有：对移动图像信号，生成移动信息的移动推定步骤；使用所述移动信息对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的移动补偿步骤；生成所述移动图像信号中包含的非参照信号和所述预测信号的差分信号的差分信号生成步骤；将所述参照信号以无变换作为时间低频信号输出，将所述差分信号作为时间高频信号输出。

解决所述课题的第45发明是一种移动图像编码方法，由对移动图像信号在时间方向和空间方向进行频率分割并且生成缩小所述移动图像信号的缩小图像信号和时空间高频信号和移动信息的时间空间频率分割步骤、将所述缩小图像信号编码的缩小画像信号编码步骤、将所述时空间高频信号编码的时空间高频信号编码步骤、将所述移动信息编码的移动信息编码步骤、将所述缩小画像信号编码步骤和所述时空间高频信号编码步骤中生成的编码数据和所述移动信息编码步骤中生成的移动信息编码数据多路复用并且生成成为输出的位流的多路复用步骤构成，其特征在于：所述时间空间频率分割步骤由将移动图像信号分割为时间低频信号、相当于所述时间高频信号的空间方向高频的时间高频空间高频信号、缩小与所述时间高频信号对应的移动图像信号的时间高频缩小图像信号的时间空间分割滤波步骤、将所述时间低频信号在空间方向进行频率分割生成时间低频空间低频信号和时间低频空间高频信号的空间分割滤波步骤构成，所述时间空间分割滤波步骤将所述时间低频信号作为输入，循环地进行处理后，将所述时间低频空间低频信号和所述缩小译码图像信号作为所述时间高频缩小图像信号，将所述时间高频空间高频信号和所述时间低频空间高频信号作为时空间高频信号输出。

解决所述课题的第46发明是一种移动图像译码方法，具有将阶层编码的移动图像信号的编码数据译码并且生成阶层化的信号的信号译码处理步骤、合成所述阶层化的信号的时间空间合成滤波步骤，其特征在于：所述时间空间合成滤波步骤根据某析像度阶层的译码结果即译码图像信号，生成基于时间阶层化的时间高频成分中的基于空间阶层化的空间低频成分后，进行空间方向频率合成和时间方向频率合成，生成更高析像度的析像度阶层的译码图像信号。

解决所述课题的第47发明是一种移动图像译码方法，具有将阶层编码的移动图像信号的编码数据译码并且生成阶层化的信号的信号译码处理步骤、合成阶层化的信号的时间空间合成滤波步骤，其特征在于：所述时间空间合成滤波步骤具有：从时间低频信号、某析像度阶层的合成结果即缩小译码图像信号生成与所述时间低频信号成对的时间高频信号的空间低频成分即时间高频空间低频信号的时间高频空间低频信号再构成步骤；合成所述时间高频信号的空间高频成分即时间高频空间高频信号、所述时间高频空间低频信号，生成时间高频信号的空间合成滤波步骤；从所述时间高频信号、所述时间低频信号、移动信息生成译码图像信号的时间方向逆滤波步骤；所述信号译码处理步骤从所述编码数据译码所述低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息。

解决所述课题的第48发明根据第47发明，其特征在于：所述时间高频空间低频信号再构成步骤具有：根据所述移动信息，对所述时间低频信号进行移动补偿，生成预测图像的移动补偿步骤；生成所述预测图像的空间低频成分即空间低频预测信号的低频信号生成步骤；从所述空间低频预测信号和缩小图像信号生成时间高频成分的时间高频信号生成步骤；将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

解决所述课题的第49发明根据第48发明，其特征在于：对所述时间高频信号生成步骤中生成的时间高频成分进行补偿编码时进行的加权的加权处理，将加权的信号作为时间高频空间低频信号输出。

解决所述课题的第50发明根据第47发明，其特征在于：所述时间高频空间低频信号再构成步骤具有：生成时间低频信号的空间低频成分，作为时间低频空间低频信号输出的低频信号生成步骤；按照所述低频信号生成部的输入输出图像的析像度变换比，变换移动信息的移动信息变换步骤；根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿步骤；从所述预测图像和缩小译码图像信号生成时间高频成分的时间高频信号生成步骤；将所述时间高频信号生成步骤的输出作为时间高频空间低频信号输出。

解决所述课题的第51发明根据第50发明，其特征在于：对所述时间高频信号生成步骤的输出进行补偿编码时进行的加权的加权处理，将它作为时间高频空间低频信号输出。

解决所述课题的第52发明根据所述第47～第51中的任意一个发明，其特征在于：所述低频信号生成步骤是基于部分波段分割的低通处理。

解决所述课题的第53发明根据所述第47～第52中的任意一个发明，其特征在于：所述空间合成滤波步骤是成为所述部分波段分割的逆变换的部分波段合成。

解决所述课题的第54发明根据所述第47～第53中的任意一个发明，其特征在于：所述低频信号生成步骤由二次采样滤波器生成缩小图像。

解决所述课题的第55发明根据第54发明，其特征在于：所述空间合成滤波步骤是由与所述二次采样滤波器成对的第二二次采样滤波器生成的高频信号与由所述二次采样滤波器生成的低频信号的合成。

解决所述课题的第56发明根据所述第47～第55中的任意一个发明，其特征在于：所述时间方向逆滤波步骤具有：根据所述移动信息，对所述时间高频信号进行移动补偿，生成移动补偿时间高频信号的第一移动补偿步骤；从所述移动补偿时间高频信号和所述时间低频信号生成第一译码图像信号的时间低频信号逆变换步骤；关于所述第一译码图像信号，根据所述移动信息进行移动补偿，生成预测信号的第二移动补偿步骤；从所述预测信号和所述时间高频信号生成第二译码图像信号的时间高频信号逆变换步骤；合并所述第一译码图像信号和所述第二译码图像信号，作为成为输出的译码图像信号。

解决所述课题的第57发明根据所述第47～第56中的任意一个发明，其特征在于：所述时间方向逆变换滤波步骤对所述时间低频信号进行移动补偿后，与时间高频信号相加，与所述时间低频信号合成，作为译码图像信号输出。

解决所述课题的第58发明是一种移动图像译码方法，由将阶层化的位流逆多路复用并且生成最低次编码数据和剩余编码数据和移动信息编码数据的逆多路复用步骤、将最低次编码数据译码并且生成缩小图像信号的缩小图像信号译码步骤、将剩余编码数据译码并且生成时空间高频信号的时空间高频信号译码步骤、将所述移动信息编码数据译码并且生成移动信息的移动信息译码步骤、从所述缩小图像信号和所述时空间高频信号和所述移动信息生成译码图像信号的时间空间频率合成步骤构成，其特征在于：所述时间空间频率合成步骤由以下部分构成：合成所述缩小图像信号中的时间低频空间低频信号和所述时空间高频信号中的时间低频空间高频信号，生成时间低频信号的空间合成滤波步骤；从所述时间低频信号、所述缩小图像信号、所述时空间高频信号再构成与所述时间低频信号对应的时间高频信号后，通过与所述时间低频信号合成，输出译码图像信号的时间空间合成滤波步骤。

解决所述课题的第59发明是一种移动图像编码装置的控制程序，其特征在于：使移动图像编码装置作为以下部分起作用：使用将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分，生成与所述时间高频成分对应的移动图像信号，输出对该生成结果进行缩小处理的移动图像的缩小图像信号的时间空间分割滤波部。

解决所述课题的第60发明是一种移动图像编码装置的控制程序，其特征在于：使移动图像编码装置作为以下部分起作用：对将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分进行缩小处理，使用缩小处理的结果，生成与所述时间高频成分对应的移动图像的缩小图像信号的时间空间分割滤波部。

解决所述课题的第61发明是一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号编码的信号编码处理部，其特征在于：使所述时间空间分割滤波部生成将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、使用所述时间低频成分和所述时间高频成分再构成与所述时间高频成分对应的所述移动图像信号后对所述再构成结果进行缩小处理的缩小图像信号。

解决所述课题的第62发明是一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号编码的信号编码处理部，其特征在于：使所述时间空间分割滤波部将所述移动图像信号进行时间阶层化，取得时间低频成分和时间高频成分，将所述时间高频成分进行空间阶层化，取得空间高频成分，使用所述时间低频成分和所述时间高频成分再构成与时间高频成分对应的所述移动图像信号后，生成对所述再构成结果进行缩小处理的缩小图像信号。

解决所述课题的第63发明是一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号编码的信号编码处理部，其特征在于：使所述时间空间分割滤波部生成将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、对所述时间低频成分和所述时间高频成分进行缩小处理并且使用缩小处理结果而生成的与所述时间高频成分对应的移动图像信号的缩小图像信号。

解决所述课题的第64发明是一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号编码的信号编码处理部，其特征在于：使所述时间空间分割滤波部作为以下部分起作用：将移动图像信号在时间方向滤波，生成时间低频信号、时间高频信号、表示所述图像信号之间的移动的移动信息的时间方向滤波部；使用所述时间高频信号和所述时间低频信号，生成缩小与所述时间高频信号对应的移动图像信号的缩小图像信号的缩小图像生成部；生成对于所述时间高频信号，相当于空间高频成分的时间高频空间高频信号的高频信号生成部；关于所述时间低频信号或所述缩小图像信号，执行所述时间空间分割滤波部，将移动图像信号阶层化后，信号编码处理部将所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息编码。

解决所述课题的第65发明根据第64发明，其特征在于：使所述缩小图像生成部作为以下部分起作用：根据移动信息对时间低频信号进行移动补偿，生成预测图像的移动补偿部；从所述预测图像和时间高频信号生成与所述时间高频信号对应的移动图像信号的时间高频信号逆变换部；对所述时间高频信号逆变换部生成的移动图像信号进行空间滤波，生成空间低频成分即缩缩小译码图像信号的低频信号生成部。

解决所述课题的第66发明根据第65发明，其特征在于：使所述移动图像编码装置作为以下部分起作用：比较所述时间高频信号和所述时间低频信号，进行加权处理，或者对所述时间高频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出的加权部。

解决所述课题的第67发明根据第64发明，其特征在于：使所述缩小图像生成部作为以下部分起作用：对时间低频信号和时间高频信号进行空间滤波，分别生成时间低频空间低频信号和时间高频空间低频信号的低频信号生成部；按照所述低频信号生成部的所述空间滤波的析像度变换比，变换移动信息的移动信息变换部；根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿补偿部；使用所述预测图像和所述时间高频空间低频信号，生成缩小图像信号的时间高频信号逆变换部。

解决所述课题的第68发明根据第67发明，其特征在于：使所述移动图像编码装置作为以下部分起作用：对所述时间高频空间低频信号进行加权处理，或者对所述时间高频空间低频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出的加权部。

解决所述课题的第69发明根据所述第64～第67中的任意一个发明，其特征在于：所述高频信号生成部是基于部分波段分割的频率成分抽出。

解决所述课题的第70发明根据所述第64～第69中的任意一个发明，其特征在于：所述低频信号生成部是基于部分波段分割的频率成分抽出。

解决所述课题的第71发明根据所述第64～第68中的任意一个发明，其特征在于：所述低频信号生成部通过第一二次采样滤波器生成缩小图像信号，所述高频信号生成部通过与所述第一二次采样滤波器成对的第二二次采样滤波器生成高频信号。

解决所述课题的第72发明根据所述第64～第71中的任意一个发明，其特征在于：使所述时间方向滤波部作为以下部分起作用：对移动图像信号生成移动信息的移动推定部；使用所述移动信息，对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的第一移动补偿部；使用所述移动图像信号中包含的非参照信号和所述预测信号，生成时间高频信号的时间高频信号生成部；使用所述移动信息对所述时间高频信号进行移动补偿，生成与所述预测信号对应的移动补偿时间高频信号的第二移动补偿部；从所述移动补偿时间高频信号和所述参照信号生成时间低频信号的时间低频信号生成部。

解决所述课题的第73发明根据所述第64～第71中的任意一个发明，其特征在于：使所述时间方向滤波部作为以下部分起作用：对移动图像信号，生成移动信息的移动推定部；使用所述移动信息对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的移动补偿部；生成所述移动图像信号中包含的非参照信号和所述预测信号的差分信号的差分信号生成部；将所述参照信号以无变换作为时间低频信号输出，将所述差分信号作为时间高频信号输出。

解决所述课题的第74发明是一种移动图像编码装置的控制程序，移动图像编码装置由对移动图像信号在时间方向和空间方向进行频率分割并且生成缩小所述移动图像信号的缩小图像信号和时空间高频信号和移动信息的时间空间频率分割部、将所述缩小图像信号编码的缩小画像信号编码部、将所述时空间高频信号编码的时空间高频信号编码部、将所述移动信息编码的移动信息编码部、将所述缩小画像信号编码部和所述时空间高频信号编码部输出的编码数据和所述移动信息编码部输出的移动信息编码数据多路复用并且生成成为输出的位流的多路复用部构成，其特征在于：所述时间空间频率分割部作为以下部分起作用：将移动图像信号分割为时间低频信号、相当于所述时间高频信号的空间方向高频的时间高频空间高频信号、缩小与所述时间高频信号对应的移动图像信号的时间高频缩小图像信号的时间空间分割滤波部；将所述时间低频信号在空间方向进行频率分割生成时间低频空间低频信号和时间低频空间高频信号的空间分割滤波部；所述时间空间分割滤波部将所述时间低频信号作为输入，循环地进行处理后，将所述时间低频空间低频信号和所述缩小译码图像信号作为所述时间高频缩小图像信号，将所述时间高频空间高频信号和所述时间低频空间高频信号作为所述时空间高频信号输出。

解决所述课题的第75发明是一种移动图像译码装置的控制程序，该移动图像译码装置具有将阶层编码的移动图像信号的编码数据译码并且生成阶层化的信号的信号译码处理部、合成所述阶层化的信号的时间空间合成滤波部，其特征在于：使所述时间空间合成滤波部根据某析像度阶层的译码结果即译码图像信号，生成基于时间阶层化的时间高频成分中的基于空间阶层化的空间低频成分后，进行空间方向频率合成和时间方向频率合成，生成更高析像度的析像度阶层的译码图像信号。

解决所述课题的第76发明是一种移动图像译码装置的控制程序，该移动图像译码装置具有将阶层编码的移动图像信号的编码数据译码并且生成阶层化的信号的信号译码处理部、合成所述阶层化的信号的时间空间合成滤波部，其特征在于：使所述时间空间合成滤波部作为以下部分起作用：从时间低频信号、某析像度阶层的合成结果即缩小译码图像信号生成与所述时间低频信号成对的时间高频信号的空间低频成分即时间高频空间低频信号的时间高频空间低频信号再构成部；合成所述时间高频信号的空间高频成分即时间高频空间高频信号、所述时间高频空间低频信号，生成时间高频信号的空间合成滤波部；从所述时间高频信号、所述时间低频信号、移动信息生成译码图像信号的时间方向逆滤波部；所述信号译码处理部从所述编码数据译码所述低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息。

解决所述课题的第77发明根据第76发明，其特征在于：使所述时间高频空间低频信号再构成部作为以下部分起作用：根据所述移动信息，对所述时间低频信号进行移动补偿，生成预测图像的移动补偿部；生成所述预测图像的空间低频成分即空间低频预测信号的低频信号生成部；从所述空间低频预测信号和缩小图像信号生成时间高频成分的时间高频信号生成部；将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

解决所述课题的第78发明根据第77发明，其特征在于：使所述移动图像编码装置作为对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理的逆加权部起作用，将所述逆加权部的输出作为时间高频空间低频信号输出。

解决所述课题的第79发明根据第76发明，其特征在于：使所述时间高频空间低频信号再构成部作为以下部分起作用：生成时间低频信号的空间低频成分，作为时间低频空间低频信号输出的低频信号生成部；按照所述低频信号生成部的输入输出图像的析像度变换比，变换移动信息的移动信息变换部；根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿部；从所述预测图像和缩小译码图像信号生成时间高频成分的时间高频信号生成部；将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

解决所述课题的第80发明根据第79发明，其特征在于：使所述移动图像编码装置作为对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理的逆加权部起作用，将所述逆加权部的输出作为时间高频空间低频信号输出。

解决所述课题的第81发明根据第76～第80中的任意一个发明，其特征在于：所述低频信号生成部是基于部分波段分割的低通处理。

解决所述课题的第82发明根据第76～第81中的任意一个发明，其特征在于：所述空间合成滤波部是成为所述部分波段分割的逆变换的部分波段合成。

解决所述课题的第83发明根据第76～第82中的任意一个发明，其特征在于：所述低频信号生成部由二次采样滤波器生成缩小图像。

解决所述课题的第84发明根据所述第83发明，其特征在于：所述空间合成滤波部是由与所述二次采样滤波器成对的第二二次采样滤波器生成的高频信号与由所述二次采样滤波器生成的低频信号的合成。

解决所述课题的第85发明根据第76～第84中的任意一个发明，其特征在于：使所述时间方向逆滤波部作为以下部分起作用：根据所述移动信息，对所述时间高频信号进行移动补偿，生成移动补偿时间高频信号的第一移动补偿部；从所述移动补偿时间高频信号和所述时间低频信号生成第一译码图像信号的时间低频信号逆变换部；关于所述第一译码图像信号，根据所述移动信息进行移动补偿，生成预测信号的第二移动补偿部；从所述预测信号和所述时间高频信号生成第二译码图像信号的时间高频信号逆变换部；合并所述第一译码图像信号和所述第二译码图像信号，作为成为输出的译码图像信号。

解决所述课题的第86发明根据第76～第85中的任意一个发明，其特征在于：所述时间方向逆变换滤波部对所述时间低频信号进行移动补偿后，与时间高频信号相加，与所述时间低频信号合成，作为译码图像信号输出。

解决所述课题的第87发明是一种移动图像译码装置的控制程序，该移动图像译码装置由将阶层化的位流逆多路复用并且生成最低次编码数据和剩余编码数据和移动信息编码数据的逆多路复用部、将最低次编码数据译码并且生成缩小图像信号的缩小图像信号译码部、将剩余编码数据译码并且生成时空间高频信号的时空间高频信号译码部、将所述移动信息编码数据译码并且生成移动信息的移动信息译码部、从所述缩小图像信号和所述时空间高频信号和所述移动信息生成译码图像信号的时间空间频率合成部构成，其特征在于：使所述时间空间频率合成部作为以下部分起作用：合成所述缩小图像信号中的时间低频空间低频信号和所述时空间高频信号中的时间低频空间高频信号，生成时间低频信号的空间合成滤波部；从所述时间低频信号、所述缩小图像信号、所述时空间高频信号再构成与所述时间低频信号对应的时间高频信号后，通过与所述时间低频信号合成，输出译码图像信号的时间空间合成滤波部。

使用图25说明本发明的特征即移动图像编码的时间空间分割滤波的概要。

在时间空间分割滤波中，最初将某析像度阶层的移动图像信号10时间阶层化，分割为时间低频信号11和时间高频信号12。

接着，使用分割为时间低频信号11和时间高频信号12，生成再构成与时间高频信号12对应的移动图像信号的移动图像信号21。生成对移动图像信号21进行缩小处理的缩小图像信号14。

此外，对时间高频信号12进行基于空间阶层化的高频生成处理，生成时间高频空间高频信号13。

然后，将时间低频信号11、缩小图像信号14和时间高频空间高频信号13作为分割结果输出。将时间低频信号11视为时间析像度更低的移动图像信号，将缩小图像信号14视为空间析像度更低的移动图像信号，循环地进行时间空间分割滤波，将移动图像信号阶层化为多阶段。

下面说明本发明的移动图像译码。

本发明的移动图像译码具有：将阶层编码的移动图像信号的编码数据译码，生成阶层化的信号的信号译码处理；与阶层化的信号合成的时间空间分割滤波。

使用图26，说明时间空间分割滤波的概要。

在时间空间分割滤波中成为合成对象的信号是译码图像信号15、时间低频信号16、时间高频空间高频信号18。这里，译码图像信号15与上述的缩小图像信号14对应。

首先，使用某空间析像度的低频成分即译码图像信号15、时间析像度的低频成分即时间低频信号16，再构成与时间低频信号16对应的时间高频信号12的空间低频成分即时间高频空间低频信号17。

对时间高频空间低频信号17和时间高频空间高频信号18进行空间方向的阶层合成处理，取得时间高频信号19。然后对时间高频信号19和时间低频信号16进行时间方向的阶层合成处理，生成更高析像度阶层的译码图像信号20。

将译码图像信号20视为时间低频信号16或译码图像信号15，循环地进行时间空间合成滤波，实现多阶段的阶层合成。

下面说明本发明的第二移动图像编码的第二时间空间分割滤波。

在上述的时间空间分割滤波中，使用时间低频成分和时间高频成分，再构成与时间高频成分对应的移动图像信号后，通过对再构成结果较小缩小处理，能生成移动图像的缩小图像信号。

因此，使用图43，说明本发明的特征的移动图像编码的第二时间空间分割滤波的概要。

在时间空间分割滤波中，最初将某析像度阶层的移动图像信号10时间阶层化，分割为时间低频信号11和时间高频信号12。到此为止，与上述的时间空间分割滤波同样。

接着通过对时间低频信号11进行低频生成处理，生成时间低频空间低频信号22。

而对时间高频信号12进行低频生成处理，生成时间高频空间低频信号23，并且对时间高频信号12进行高频生成处理，生成时间高频空间高频信号13。然后，通过对时间低频空间低频信号22和时间高频空间低频信号23进行时间阶层合成，生成缩小图像信号14。

然后，将时间低频信号11、缩小图像信号14和时间高频空间高频信号13作为分割结果输出。将时间低频信号11视为时间析像度更低的移动图像信号，将缩小图像信号14视为空间析像度更低的移动图像信号，循环地进行时间空间分割滤波，将移动图像信号阶层化为多阶段。须指出的是，关于译码，与图26所示的译码方法同样。

根据本发明，进行阶层编码时的时空间高频信号与以往技术的三维微波编码方式同等，代替时间高频空间低频信号，将缩小图像信号14的时间方向滤波的结果编码。即与以往同样高效率地将时空间高频信号编码，并且在时空间高频信号之外独立地将缩小图像信号编码。据此，解决了以往技术的课题的移动补偿的不匹配和移动信息的系统开销，缩小图像信号的编码效率大幅度提高。

此外，根据本发明，在阶层化的编码数据中，全部阶层中的译码图像信号能实现与用单一阶层编码时的译码图像同等的图像质量。

此外，根据本发明，在成为输入的析像度下的编码数据和缩小析像度下的编码数据中，能独立决定在延迟和计算量等应用中成为制约的参数和处理模块。即不降低编码效率，能同时对具有不同配送条件的多个终端配送，所以能实现阶层编码。

在译码处理中，在时间空间合成滤波时，再构成时间高频空间低频信号之前，进行加权处理，如果使这时的加权系数与编码处理中生成缩小图像信号时的加权相等，则缩小图像信号的编码时重叠的变形在空间方向合成滤波后也不增大、传播，结果能降低译码图像的恶化。

作为缩小图像信号的编码的前处理，此外作为译码的前处理，如果进行噪声降低等滤波，就能降低译码的缩小图像信号的编码变形在更大析像度的译码图像信号中带来影响。

附图说明

下面简要说明附图。

图1是表示本发明实施例1的移动图像编码装置的结构的框图。

图2是表示时间空间分割滤波部101的结构的框图。

图3是表示时间空间分割滤波部101的时间方向和空间方向的部分波段分割的概念图。

图4是表示时间空间二分割滤波部107的结构的框图。

图5是表示时间方向滤波部109的结构的框图。

图6是表示缩小图像生成部110的结构的框图。

图7是表示实施例2的第二缩小图像生成部110的结构的框图。

图8是表示缩小图像信号编码部102的结构的框图。

图9是表示时空间信号编码部103的结构的框图。

图10是表示本发明实施例1的移动图像译码装置的结构的框图。

图11是表示缩小图像信号译码部151的结构的框图。

图12是表示时空间高频信号译码部152的结构的框图。

图13是表示时间空间频率合成部154的结构的框图。

图14是表示时间空间合成滤波部168的结构的框图。

图15是表示与图6所示的缩小图像生成部对应的时间高频空间低频信号再构成部170的结构的图。

图16是与图7所示的第二缩小图像生成部110对应的时间高频空间低频信号再构成部170的结构图。

图17是表示时间方向逆滤波的结构的框图。

图18是用于说明以往技术的图。

图19是用于说明以往技术的图。

图20是用于说明以往技术的图。

图21是用于说明以往技术的图。

图22是为了说明移动补偿的内插处理和二次采样处理不可换，图示一维的像素排列和与各像素相乘的滤波器系数的概念图。

图23是为了说明移动补偿的内插处理和二次采样处理不可换，图示一维的像素排列和与各像素相乘的滤波器系数的概念图。

图24是说明移动信息的系统开销的概念图。

图25是用于说明本发明的特征的移动图像编码的时间空间分割滤波的概要的图。

图26是用于说明本发明的特征的时间空间合成滤波的概要的图。

图27是说明与各信号重叠的量子化变形如何影响译码图像的概念图。

图28是表示时间空间二分割滤波的处理的程序流程图。

图29是表示实施例3的缩小图像生成部的结构的框图。

图30是表示实施例3的移动图像译码装置的时间高频空间低频信号再构成部的结构的框图。

图31是表示对实施例2中说明的第二缩小图像生成部追加加权部的第二缩小图像生成部的结构的框图。

图32是表示与实施例2的移动图像译码装置对应的第二时间高频空间低频信号再构成部的结构的框图。

图33是表示实施例4的缩小图像生成部的结构的框图。

图34是表示实施例4的时间高频空间低频信号再构成部的结构的框图。

图35是表示实施例4的第二缩小图像生成部的结构的框图。

图36是表示实施例4的第二时间高频空间低频信号再构成部的结构的框图。

图37是表示时间空间合成滤波的处理的程序流程图。

图38是表示实施例5的移动图像编码装置的框图。

图39是表示实施例5的第二缩小图像生成部的结构的框图。

图40是表示实施例5的时间高频空间低频信号再构成部的结构的框图。

图41是表示实施例5的第二时间高频空间低频信号再构成部的结构的框图。

图42是实现本发明的移动图像编码装置的信息处理系统的一般框图。

图43是用于说明本发明的其他特征的移动图像编码的时间空间分割滤波概要的图。

符号的说明。

101—时间空间频率分割部；102—缩小图像信号编码部；103—时空间高频信号编码部；104—移动信息编码部；105—多路复用部；150—逆多路复用部；151—缩小图像信号译码部；152—时空间高频信号译码部；153—移动信息译码部；154—时间空间频率合成部。

具体实施方式

说明实现本发明的特征的移动图像编码中的时间空间二分割滤波的时间空间二分割滤波部的结构。

时间空间二分割滤波部如图4所示，由时间方向滤波部109、缩小图像生成部110、高频信号生成部111构成。这里，将成为向时间空间二分割滤波部107的输入的输入图像信号1000、缩小图像信号1001和时间低频信号1010合并称作分割对象信号1013。须指出的是，输入图像信号1000与图25的移动图像信号10对应，缩小图像信号1001与图25的缩小图像信号14对应，时间低频信号1010与图25的时间低频信号11对应。此外，时间高频空间高频信号1002与图25的时间高频空间高频信号13对应。

使用图28的程序流程图说明这样的结构的时间空间二分割滤波处理。

在分割对象信号1013通过基于时间方向滤波部109的时间阶层化分割为时间低频信号1010和时间高频信号1014的同时，输出移动补偿中使用的移动信息1003(步骤100)。通过缩小图像生成部110，根据时间低频信号1010、时间高频信号1014和移动信息1003，生成缩小图像信号1001(步骤101)。

而通过高频信号生成部111，根据时间高频信号1014，进行高频信号生成处理，生成时间高频空间高频信号1002(步骤102)。

然后，将缩小图像信号1001、时间低频信号1010和时间高频空间高频信号1002作为分割结果输出(步骤103)。

下面，说明实现本发明的特征的移动图像译码的时间空间合成滤波的时间空间合成滤波部的结构。

时间空间合成滤波部如图14所示，由时间高频空间低频信号再构成部170、空间合成滤波部171、时间方向逆滤波部172构成。这里，图14的缩小图像信号1073与图26的缩小图像信号15对应，时空间高频信号1072与图26的时空间高频信号16对应，时空间高频信号1074与图26的时空间高频信号18对应，时间高频空间低频信号1076与图26的时间高频空间低频信号17对应，时间高频信号1077与图26的时间高频信号19对应，译码图像信号1075与图26的译码图像信号20对应。

使用图37的程序流程图说明这样的结构的时间空间合成滤波处理。

将缩小图像信号1073、时间低频信号1072、时空间高频信号1074作为合成对象(步骤200)，通过时间高频空间低频信号再构成部170，根据时间低频信号1072、缩小图像信号1073、移动信息1056，再构成时间高频空间低频信号1076(步骤201)。

接着通过空间合成滤波部171，合成时间高频空间低频信号1076和时空间高频信号1074，生成时间高频信号1077(步骤202)。

然后，通过时间方向逆滤波部172，关于时间高频信号1077和时间低频信号1072，根据移动信息1056，进行图4中的时间方向滤波部109的逆滤波，生成译码图像信号1075(步骤203)。

须指出的是，时间高频空间低频信号再构成部170以与图4的缩小图像生成部110对应的形式实现。

接着，说明本发明的特征的移动图像编码的第二时间空间二分割滤波部的结构。

在上述的实施例中，在缩小图像生成部110中，使用时间低频成分和时间高频成分，再构成与时间高频成分对应的移动图像信号后，通过对再构成结果进行缩小处理，生成移动图像的缩小图像信号。可是，并不局限于该方法，能生成移动图像的缩小图像信号。因此，使用图7说明与上述的实施例不同的第二缩小图像生成部110的结构。须指出的是，其他结构与上述的实施例同样，所以省略详细的说明。

低频信号生成部123和低频信号生成部124生成成为时间低频信号1010以及时间高频信号的低频信号的时间低频空间低频信号1023和时间高频空间低频信号1024。

移动信息变换部125生成按照基于低频信号的生成的析像度比，缩小移动信息1003的移动信息1025。移动补偿部126对时间低频空间低频信号1023，根据移动信息1025，进行移动补偿处理，生成预测信号1026。时间高频信号逆变换部127对时间高频空间低频信号1024和预测信号1026进行时间高频信号生成部114的高频信号生成滤波处理的逆变换，生成缩小图像信号1001。

这里，时间低频信号1010与图43的时间低频信号11对应，时间高频信号1014与图43的时间高频信号12对应，时间低频空间低频信号1023与图43的时间低频空间低频信号22对应，时间高频空间低频信号1024与图43的时间低频空间低频信号23对应。须指出的是，预测信号1026是图43的时间阶层合成时使用的信号。

下面说明与上述的缩小图像生成部110对应的译码装置的时间高频空间低频信号再构成部170。须指出的是，只说明与上述的时间高频空间低频信号再构成部170不同的部分。

在图16中，低频信号生成部176生成时间低频信号1072的空间低频成分即时间低频空间低频信号1082。移动信息变换部177生成按照基于低频信号的生成的析像度比而缩小移动信息1056的移动信息1083。移动补偿部178对时间低频空间低频信号1082，根据移动信息1083进行移动补偿处理，生成预测信号1084。时间高频信号生成部179对缩小图像信号1073和预测信号1084进行与图5的时间高频信号生成部114相同的高频信号生成滤波处理，输出时间高频空间低频信号1076。

下面说明使用本发明的特征的时间空间二分割滤波以及时间空间合成滤波的移动图像编码装置和移动图像译码装置的具体的实施例。

实施例1

使用图1～图9，说明本发明的实施例1的移动图像编码装置的以及循环执行的步骤、信号编码处理的实现方法。

图1是表示本发明实施例1的移动图像编码装置的结构的框图。在图1中，移动图像编码装置由时间空间频率分割部101、缩小图像信号编码部102、时间空间高频信号编码部103、移动信息编码104、多路复用部105构成。使用图1说明成为实施例的编码装置的处理的流程。

首先，时间空间频率分割部101将输入图像信号1000作为输入，生成缩小构成输入图像信号1000的各帧的缩小图像信号1001、对从输入图像信号1000去掉与缩小图像信号1001的相关的高频信号再去掉与时间方向的相关的时空间高频信号1002、移动信息1003。

缩小图像信号1001循环地对时间空间频率分割部101输入，或者对缩小图像信号编码部102输出。从基于本发明技术的空间可量测性的阶层数决定时间空间频率分割部101的循环动作次数。例如，如果空间可量测性的阶层数为3，则对时间空间频率分割部101的循环动作次数变为2。这时，生成缩小图像信号1001、时间高频空间高频信号1002、移动信息1003。

图2是表示时间空间频率分割部101的结构的框图。使用图2说明时间空间频率分割部101的处理的流程。

将输入图像信号1000或时间空间频率分割部101的输出即缩小图像信号1001合并称作处理对象信号1009。从由连续的N个(N为2的乘方)帧构成的处理对象信号1009，时间空间二分割滤波部107生成相当于N/2帧的时空间高频信号1002和缩小图像信号1001、相当于N/2帧的时间低频信号1010。其中将时间低频信号1010视为输入的处理对象信号，进行时间空间二分割滤波。进行反复处理，直到构成时间低频信号1010的帧数变为1个。然后时间低频信号1010由空间分割滤波部108在空间方向进行频率分割，生成时间低频空间低频信号1011、时间低频空间高频信号1012。空间低频信号1011、空间高频信号1012作为时空间高频信号1002输出。

在由空间分割滤波部108进行的低频生成处理中，除了以微波变换为代表的部分波段分割滤波器，还使用缩小析像度的任意滤波器。在前者时，在高频生成处理中使用与低频生成处理对应的部分波段分割滤波器。在后者时，使用从成为输入的信号减去将缩小的信号上采样而取得的信号而得到的差分。

图3是表示时间空间频率分割部101的时间方向和空间方向的部分波段分割的概念图。

输入图像信号2011由时间空间二分割滤波部107进行1次的时间空间二分割滤波，分割为时间低频信号2041、时空间高频信号2042、缩小图像信号2043。时间低频信号2041由时间空间二分割滤波部107进行1次的时间空间二分割滤波，分割为时间低频信号2044、时空间高频信号2045、缩小图像信号2046。时间低频信号2044由1次的时间空间二分割滤波分割为时间低频信号2047、时空间高频信号2048、缩小图像信号2049。时间低频信号2047空间分割滤波108分割为空间低频信号2050、空间高频信号2051。时空间高频信号2042、2045、2048和空间高频信号2051是时间空间频率分割部101的输出即时空间高频信号1002，缩小图像信号2043、2046、2049和空间低频信号2050是时间空间频率分割部101的输出即缩小图像信号1001。

图4是表示时间空间二分割滤波部107的结构的框图。使用图4，说明时间空间二分割滤波部107的处理流程。

将成为向时间空间二分割滤波部107的输入图像信号1000、缩小图像信号1001以及时间低频信号1010合并称为分割对象信号1013。时间方向滤波部109将分割对象信号1013分割为时间低频信号1010和时间高频信号1014的同时，输出移动补偿中使用的移动信息1003。缩小图像生成部110从时间低频信号1010、时间高频信号1014和移动信息1003生成缩小图像信号1001。高频信号生成部111将时间高频信号1014作为输入，生成时间高频空间高频信号1002。高频信号生成部111的高频分割与图2所示的空间分割滤波的高频生成处理同等。须指出的是，图4所示的时间空间二分割滤波部107是图25所示的本发明的特征的时间空间分割滤波实现的电路结构的一个例子。图25的移动图像信号10、时间低频信号11、时间高频信号12、时间高频空间高频信号13、缩小图像信号14分别与图4的分割对象信号1013、时间低频信号1010、时间高频信号1014、时间高频空间高频信号1014、缩小图像信号1001对应。

图5是表示时间方向滤波部109的结构的框图。使用图5说明时间方向滤波的处理流程。

分割对象信号1013在时间方向滤波中，划分为变换为时间低频信号的分割对象信号1015、变换为时间高频信号的分割对象信号1016。移动推定部112生成规定分割对象信号1015和分割对象信号1016的移动补偿的移动信息1003。

移动补偿部113将分割对象信号1015作为参照信号，进行移动补偿预测，生成对于分割对象信号1016的预测信号1017。时间高频信号生成部114关于分割对象信号1016和预测信号1017，按各像素进行高频信号生成滤波处理，生成时间高频信号1014。

移动补偿部115根据移动信息1003对时间高频信号1014进行移动补偿处理，生成与分割对象信号1015上的各像素关联的移动补偿时间高频信号1018。

时间低频信号生成部116关于分割对象信号1015和移动补偿时间高频信号1018，按各像素进行低频信号生成滤波处理，生成时间低频信号1010。作为低频信号生成滤波处理和高频信号生成滤波处理，使用微波或5-3类型的微波变换。或者，作为高频信号生成滤波处理，使用差分生成，作为低频信号生成滤波处理，使用以无变换输出分割对象信号的以往的帧间预测编码处理。

图6是表示缩小图像生成部110的结构的框图。使用图6，说明缩小图像生成部110的处理流程。

移动补偿部120对时间低频信号1010进行与图5的移动补偿部113同等的移动补偿处理，生成预测信号。

时间高频信号逆变换部121从时间高频信号1014和预测信号1021生成移动图像信号1022。时间高频信号逆变换部121的处理是图5的时间高频信号生成部114的高频信号生成滤波处理的逆变换。图5的分割对象信号1015和时间低频信号1010不等时，移动图像信号1022与图5的分割对象信号1016不等。低频信号生成部122对移动图像信号1022下采样，生成缩小图像信号1001。

以上，结束关于图2的时间空间频率分割101的说明，使用图1，继续说明本发明的编码处理的流程。

由时间空间频率分割部101生成的移动信息1003由移动信息编码104编码。如图4和5中说明的那样，移动信息1003对具有不同的析像度的图像信号即输入图像信号1000或缩小图像信号1001的移动补偿。

移动信息编码104将不同析像度的移动信息编码时，使用空间方向相邻的块的移动信息之间的相关性，或使用不同析像度的移动信息之间的相关，减少信息的冗长性。

由时间空间频率分割部101生成的缩小图像信号1001和时间高频信号1002分别由特征信号编码部102、103编码。

移动信息编码104生成的移动信息编码数据1006和特征信号编码部102、103生成的特征信号编码数据1004、1005由多路复用部105多路复用，作为编码数据1007输出。

图8是表示缩小图像信号编码部102的结构的框图。使用图8说明缩小图像信号编码部的处理流程。缩小图像信号1001由时间方向滤波部130变换为去掉时间方向冗长性的特征信号1030。作为时间方向滤波，使用伴随着图5所示的移动补偿的向时间方向的频率变换或者移动补偿帧间预测信号。

特征信号1030由频率变换部131变换，生成频率变换系数1031。作为频率变换部131的处理，列举以离散余弦变换为代表的块单位下的变换处理或以微波变换为代表的部分波段分割处理。频率变换系数1031由量子化部132量子化，生成量子化变换系数1032。作为量子化部132的处理，除了基于单一量子化步骤的量子化，还列举在某量子化步骤中量子化后，用更细致的量子化步骤将与成为输入的频率变换系数的误差量子化的阶层量子化，或者将各频率变换系数双值化，从高位的值向低位的值依次输出的位级编码。量子化变换系数1032由熵编码部133进行熵编码，生成缩小图像信号编码数据1004。作为熵编码，除了按照预先决定的哈夫曼表编码的可变长编码(Variable Length Coding，VLC)，还使用算术编码。须指出的是，可以省略时间方向滤波部130。此外，可以省略频率变换部131、量子化部132。

图9是表示时空间信号编码部103的结构的框图。时空间高频信号1002由频率变换部134变换，生成频率变换系数1033。频率变换系数1033由量子化部135量子化，生成量子化变换系数1034。量子化变换系数1034由熵编码部136进行熵编码，生成缩小图像信号编码数据1005。须指出的是，可以省略频率变换部134、量子化部135。

此外，图9的频率变换部134、量子化部135、熵编码部136可以使用与图8的频率变换部131、量子化部132、熵编码部133不同的。即缩小图像信号编码部102、时空间高频信号编码部103都对频率变换使用离散余弦变换，对量子化部使用进行基于单一量子化步骤的量子化的非可攀登的编码方式。或者，在缩小图像信号编码部102中，可以对频率变换使用离散余弦变换，对量子化部使用基于单一量子化步骤的量子化，在时空间高频信号编码部103，对频率变换使用微波变换，对量子化部使用进行位级编码的可攀登的编码方式。

下面，说明如上所述编码的移动图像的移动图像译码装置。

使用图10～图17说明本发明的实施例1的移动图像译码装置的时间空间合成滤波及其循环的执行步骤、信号译码处理的实现方法。

图10是表示本发明实施例1的移动图像译码装置的结构的框图。在图10中，移动图像译码装置由逆多路复用部150、缩小图像信号译码部151、时空间高频信号译码部152、移动信息译码部153、时间空间频率合成部154构成。使用图10说明实施例1的译码装置的处理流程。

首先，逆多路复用部150将编码数据1050分割为低频信号编码数据1051、高频信号编码数据1052、移动信息编码数据1053。

缩小图像信号译码部151、时空间高频信号译码部152分别将低频信号编码数据1051、高频信号编码数据1052译码，取得缩小图像信号1054和时空间高频信号1055。

移动信息译码部153将移动信息编码数据1053译码，取得移动信息1056。

时间空间频率合成部154对缩小图像信号1054和时空间高频信号1055，组合进行伴随着由移动信息105规定的移动补偿的时间方向的逆滤波和空间方向的频率合成，生成译码图像信号1057。或者将译码图像信号1057视为缩小图像信号，循环地进行对应的时空间高频信号1055和时间空间频率合成154，生成更高析像度的译码图像信号1057。

图11是表示缩小图像信号译码部151的结构的框图。

缩小图像信号编码数据1051由熵译码部160译码为量子化变换系数1060。

量子化变换系数1060由逆量子化部161逆量子化，频率逆变换部162对输出即频率变换系数1061进行频率逆变换，生成特征信号1063。

时间方向逆滤波部163进行图8所示的时间方向滤波部130的逆变换，生成缩小图像信号1054。

熵译码部160、逆量子化部161、频率逆变换部162、时间方向逆滤波部163分别与图8的熵编码部133、量子化部132、频率变换部131、时间方向滤波部130对应。

缩小图像信号编码部102在省略量子化部132、频率变换部131、时间方向滤波部130中的任意一个时，也同样省略图11的逆量子化部161、频率逆变换部162、时间方向逆滤波部163。

图12是表示时空间高频信号译码部152的结构的框图。

时空间高频信号编码数据1052由熵译码部164译码为量子化变换系数1063。量子化变换系数1063由逆量子化部165进行逆量子化，频率逆变换部166将输出的频率变换系数1064进行频率逆变换，生成时空间高频信号1055。熵译码部164、逆量子化部165、频率逆变换部166分别与图9的熵编码部136、量子化部135、频率变换部134对应。

缩小图像信号编码部102省略量子化部135、频率变换部134中的任意一个时，图12的逆量子化部165同样省略频率逆变换部166。

图13是表示时间空间频率合成部154的结构的框图。使用图13说明时间空间频率合成的处理流程。

空间合成滤波部167将连续的N帧的缩小图像信号1054和时空间高频信号1055中在时间方向成为最低频区的1帧的信号分别视为时间低频空间低频信号1070和时间低频空间高频信号1071，进行空间合成滤波。

由伴随着基于移动信息1056的移动补偿的时间空间合成滤波部168将空间合成滤波部167的输出即时间低频信号1072、与时间低频信号1072成对的时间高频信号所对应的缩小图像信号1073和时空间高频信号1074合成，取得2帧的译码图像信号1075。将该译码图像信号视为时间低频信号1072，关于成对的缩小图像信号1073和时空间高频信号1074，循环地进行时间空间合成滤波。

重复以上的处理，直到取得连续的N个译码图像信号1057。须指出的是，空间合成滤波部167的空间合成滤波相当于图2的空间分割滤波部108的空间分割滤波的逆变换。

图14是表示时间空间合成滤波部168的结构的框图。使用图14说明时间空间合成滤波的处理流程。

时间高频空间低频信号再构成部170从时间低频信号1072、缩小图像信号1073、移动信息1056再构成时间高频空间低频信号1076。

空间合成滤波部171将时间高频空间低频信号1076和时空间高频信号1074合成，生成时间高频信号1077。

时间方向逆滤波部172关于时间高频信号1077和时间低频信号1072，根据移动信息1056，进行图4的时间方向滤波部109的逆变换，生成译码图像信号1075。

须指出的是，图14所示的时间空间合成滤波部168是实现图26所示的本发明的特征的时间空间合成滤波的电路结构的一个例子。图26的译码图像信号15、时间低频信号16、时间高频空间低频信号17、时间高频空间高频信号18、时间高频信号19、译码图像信号20分别与图14的缩小图像信号1073、时间低频信号1072、时间高频空间低频信号1076、时空间高频信号1074、时间高频信号1077、译码图像信号1075对应。

时间高频空间低频信号再构成部170由与图4的缩小图像生成部110对应的形式实现。

图15表示与图6所示的缩小图像生成部对应的时间高频空间低频信号再构成部170的结构。按照图15说明时间高频空间低频信号再构成部170的处理流程。

移动补偿部173对时间低频信号1072，根据移动信息1056进行移动补偿处理，生成预测信号1080。低频信号生成部174生成预测信号1080的空间低频成分即空间低频预测信号1081。时间高频信号生成部175对缩小图像信号1073和空间低频预测信号1081进行与图4的时间高频信号逆变换部121相反的变换，生成成为输出的时间高频空间低频信号1076。

图17是表示时间方向逆滤波部172的结构的框图。使用图17说明时间方向逆滤波部172的处理流程。

移动补偿部181根据移动信息1056，对时间高频信号1077进行移动补偿处理，生成移动补偿时间高频信号1081。

时间低频信号逆变换部182关于时间低频信号1072和移动补偿时间高频信号1081，按各像素进行低频信号生成滤波处理的逆变换，生成译码图像信号1082。

移动补偿部183将译码图像信号1082作为参照信号，进行移动补偿预测，生成预测信号1083。

时间高频信号逆变换部184关于时间高频信号1077和预测信号1083，按各像素进行高频信号生成滤波处理的逆变换，生成译码图像信号1084。按显示时刻顺序排列译码图像信号1082、1084的信号是成为输出的译码图像信号1075。

以上，本发明的实施例1的移动图像编码装置和移动图像译码装置的说明结束。

实施例所示的移动图像译码装置将移动图像编码装置生成的编码数据译码，再构成输入图像信号。此外，如图20所示，编码数据抽出装置208去掉编码数据中的一部分时空间高频信号的编码数据后，移动图像译码装置209也能将剩下的编码数据译码。这时，将具有基于剩下的编码数据中包含的缩小图像信号编码数据和时空间高频信号编码数据的空间析像度和帧频的图像信号译码。或者，在剩下的编码数据中完全不包含时空间高频信号编码数据时，移动图像译码装置输出将缩小图像信号编码数据译码的结果。

须指出的是，本发明的特征在于：在具有向空间方向的可量测性的阶层编码中，关于空间高频成分进行时间方向滤波后，进行空间方向的频率分割，生成，关于空间低频成分，关于缩小图像，进行时间方向的滤波。考虑原析像度的时间方向滤波，进行缩小图像的生成，所以不发生以往技术的MC不匹配等原理的变形。如图8和图9中说明的那样，本发明能应用于在缩小图像信号和时空间高频信号的编码时使用不同的频率变换或熵编码的情形。

此外，在本发明中，如图2和图3所示，N个图像信号在1次的时间方向滤波中分割为N/2个时间低频信号和N/2个时间高频信号，对时间低频信号循环地进行时间方向滤波，但是对基于其它参照关系的时间方向滤波也能应用。例如是N个图像信号在1次的时间方向滤波中分割为N/3个时间低频信号和2N/3个时间高频信号的情形。

实施例2

在上述的实施例1中，在缩小图像生成部110中，使用时间低频成分和时间高频成分，再构成与时间高频成分对应的移动图像信号后，通过对再构成结果进行缩小处理，生成移动图像的缩小图像信号。可是，并不局限于该方法，能生成移动图像的缩小图像信号。因此，在实施例2中，说明与实施例1不同的缩小图像生成部110的结构。须指出的是，其它结构与实施例1同样，所以省略详细的说明。

图7是表示实施例2的第二缩小图像生成部110的结构的框图。说明图7所示的缩小图像生成部110的处理流程。

低频信号生成部123和低频信号生成部124生成成为时间低频信号1010以及时间高频信号1014的低频信号的时间低频空间低频信号1023和时间高频空间低频信号1024。

移动信息变换部125生成按照基于低频信号的生成的析像度，缩小移动信息1003的移动信息1025。

移动补偿部126对时间低频空间低频信号1023，根据移动信息1025进行移动补偿处理，生成预测信号1026。

时间高频信号逆变换部127对时间高频空间低频信号1024和预测信号1026，根据图5的时间高频信号生成部114的高频信号生成滤波处理的逆变换，生成缩小图像信号1001。

下面说明与上述的缩小图像生成部110对应的译码装置的时间高频空间低频信号再构成部170。

图16是与图7所示的第二缩小图像生成部110对应的时间高频空间低频信号再构成部170的结构图。

在图16中，低频信号生成部176生成时间低频信号1072的空间低频成分即时间低频空间低频成分1082。

移动信息变换部177生成按照基于低频信号的生成的析像度，缩小移动信息1056的移动信息1083。

移动补偿部178对时间低频空间低频成分1082，根据移动信息1083进行移动补偿处理，生成预测信号1084。

时间高频信号生成部179对缩小图像信号1073和预测信号1084进行与图5的时间高频信号生成部114相同的高频信号生成处理，输出间高频空间低频信号1076。

实施例3

说明本发明的实施例3。

在上述的实施例1和实施例2中，根据图像，有时基于缩小图像信号生成时的加权的编码变形增大。以下列举具体例说明。

本发明的特征在于，如图26所示，从由缩小析像度上的缩小图像信号15、时间低频成分16，通过移动补偿和缩小处理而取得的预测图像信号，再构成时间高频空间低频信号17。

缩小图像信号15再构成对图25所示的移动图像信号21进行缩小处理的缩小图像信号14，时间低频成分16再构成图25的时间低频成分11。译码时，有时在这些信号中产生量子化引起的变形。

图27是说明与各信号重叠的量子化变形如何影响译码图像的概念图。

在缩小图像信号3000、时间低频信号3001、时间高频信号3002分别重叠基于量子化步骤Δ的变形量3004、3005、3006，在移动图像译码装置300内，再构成为缩小图像信号3007、时间低频信号3008、时间高频信号3009。这里，在缩小图像信号3000的生成中，在低频信号生成处理之后，因为正规化处理，所以进行1/α的加权。在图27中，对时间低频信号3008进行移动补偿和低频信号生成处理之后，进行1/α的加权处理301，取得缩小析像度上的预测图像信号3010。为了再构成时间高频空间低频信号3011，在缩小译码图像信号3007和预测图像信号3010之间进行时间方向滤波的逆变换后，有必要通过加权处理301进行α的加权。通过该加权，时间高频空间低频信号3011中包含的变形成为量子化步骤Δ与α相乘的量。

因此，在实施例3中，使用附图说明为了防止上述的编码变形而构成的移动图像编码装置。

首先，说明与实施例1的移动图像编码装置以及移动图像译码装置对应的结构的实施例。

实施例3的移动图像编码装置除了图4所示的缩小图像生成部不同以外，具有与实施例1相同的结构。图29是表示实施例3的缩小图像生成部的结构的框图。图29所示的缩小图像生成部与图6所示的缩小图像生成部相比，不同点在于，时间高频信号1014由加权部159加权后，输出1078对时间高频信号逆变换部121输入。

加权部159对于成为输入的信号，乘以低频信号生成处理中包含的加权的倒数。此外，加权部159按照时间高频信号1014，按各像素或成为的单位的各块调整加权。关于全部像素，相等地进行加权时，对于时间高频信号1014的功率大的像素，成为输出的缩小图像信号1001的恶化变得显著。因此，只关于时间高频信号1014的功率大的像素，减少加权。加权减少的判定信息有必要在编码一侧和译码一侧一致。作为为此的方法，考虑到将基于预先决定的阈值的阈值作为附加信息编码，按各像素或各块将判定信息编码。

下面使用图30说明将由上述的移动图像编码装置编码的移动图像译码的移动图像译码装置。

实施例3的移动图像译码装置除了实施例1的时间高频空间低频信号再构成部170不同以外，具有与实施例1的移动图像译码装置相同的结构。图30是表示实施例3的移动图像译码装置的时间高频空间低频信号再构成部的结构的框图。图30所示的时间高频空间低频信号再构成部与图15所示的时间高频空间低频信号再构成部相比，不同点在于，时间高频信号生成部175的输出1090由加权部190加权后，作为时间高频信号1076输出。在加权部190，图29的加权部159的加权系数的倒数加权。

下面说明实施例2的移动图像编码装置和移动图像译码装置所对应的结构的实施例。图31是表示对实施例2中说明的第二缩小图像生成部追加加权部的第二缩小图像生成部的结构的框图。

图31所示的第二缩小图像生成部与图7所示的缩小图像生成部相比，不同点在于，与图29相同地追加加权部159。加权部159对低频信号生成部124的输出即时间高频空间低频信号124进行加权处理，将结果的时间高频空间低频信号1079对时间高频信号逆变换部127输出。在加权部159，进行与图29的加权部159同等的加权处理。

此外，图32是表示与实施例2的移动图像译码装置对应的第二时间高频空间低频信号再构成部的结构的框图。图32所示的时间高频空间低频信号再构成部与图16所示的时间高频空间低频信号再构成部相比，不同点在于，与图30同样追加加权部190。时间高频信号生成部179的输出1091由加权部190加权后，作为时间高频信号1076输出。在加权部190，图31的加权部159的加权系数的倒数加权。

根据实施例3，在译码处理中，在时间空间合成滤波时，再构成时间高频空间低频信号之前，进行加权处理。该加权处理解决在实施例1和实施例2中，在译码时，由于通过时间空间合成滤波合成时间高频信号时的加权，缩小图像信号的编码变形由时间高频信号强调、传播的课题。据此，能减小译码图像的恶化。

实施例4

说明本发明的实施例4。

在上述的实施例1和2中，根据图像，有时缩小图像信号的编码变形向更大析像度的译码图像传播。例如，具有图1所示的结构的移动图像编码装置通过将缩小图像信号编码数据1004和时空间高频信号编码数据1005之间的编码量分配最优化，能在某种程度上调整译码图像的图像质量。

可是，无法通过时空间高频信号完全减少译码的缩小图像信号中产生的块变形和减幅振荡等编码变形。

因此，说明解决上述的课题的实施例4的移动图像编码装置和移动图像译码装置。

首先，说明与实施例1的移动图像编码装置和移动图像译码装置对应的实施例4的移动图像编码装置和移动图像译码装置。

实施例4的移动图像编码装置除了图4所示的缩小图像生成部不同以外，具有与实施例1的移动图像编码装置相同的结构。

图33是表示实施例4的缩小图像生成部的结构的框图。图33所示的缩小图像生成部与图6所示的缩小图像生成部相比，不同点在于，时间高频信号1014由滤波器200处理后，输出1078对时间高频信号逆变换部121输入。滤波器200对成为输入的信号进行平滑化和噪声除去。

下面说明将由上述的移动图像编码装置编码的移动图像译码的移动图像译码装置。

实施例4的实施例除了图15所示的时间高频空间低频信号再构成部不同以外，具有与实施例1的移动图像译码装置相同的结构。

图34是表示实施例4的时间高频空间低频信号再构成部的结构的框图。图34所示的时间高频空间低频信号再构成部与图15所示的时间高频空间低频信号再构成部相比，不同点在于，时间高频信号生成部的输出1090由滤波器201处理后，作为时间高频信号输出。在滤波器201，进行减幅振荡消除或块变形除去，降低缩小译码图像信号的变形或噪声。

下面，说明与实施例2的移动图像编码装置以及移动图像译码装置对应的实施例4的移动图像编码装置以及移动图像译码装置。

图35是表示实施例4的第二缩小图像生成部的结构的框图。图35所示的缩小图像生成部与图7所示的缩小图像生成部相比，不同点在于，追加滤波器202。滤波器202对低频信号生成部124进行与图33的滤波器200同样的处理，将结果的时间高频空间低频信号1079对时间高频信号逆变换部127输出。

接着，说明将由上述的移动图像编码装置编码的移动图像译码的移动图像译码装置

实施例4的移动图像译码装置除了图16所示的时间高频空间低频信号再构成部不同以外，具有与实施例2的移动图像译码装置相同的结构。

图36是表示实施例4的第二时间高频空间低频信号再构成部的结构的框图。图36所示的时间高频空间低频信号再构成部与图16所示的时间高频空间低频信号再构成部相比，不同点在于，追加滤波器203。时间高频信号生成部179的输出1091由滤波器203处理后，作为时空间高频信号1076输出。在滤波器203中，进行与图34的滤波器201同样的处理。

根据实施例4，作为缩小图像信号的编码的前处理，此外作为译码的前处理，继续噪声降低等滤波。据此，能减少译码的缩小图像信号的编码变形在更大析像度的译码图像信号中产生影响。

实施例5

在移动图像信号的阶层编码中，将图像信号进行频率分割时，使功率集中在低频信号对高效率地编码是重要的。本发明的缩小图像生成部中如果继续同样的频率分割，则缩小图像信号的细致程度提高，所以有时缩小图像信号单体的编码变得困难。相反，在适度调节缩小图像信号的细致程度的低频信号生成滤波中，存在信号全体的编码效率下降的问题。在实施例5中，描述解决该课题的实施例。

使用图38说明实施例5的移动图像编码装置。实施例5的移动图像编码装置除了图4所示的缩小图像生成部不同以外，具有与实施例1相同的结构。图38是表示实施例5的移动图像编码装置的框图。

图38所示的缩小图像生成部与图6所示的缩小图像生成部相比，不同点在于，时间低频信号1010由滤波器300处理后，输出1079对移动补偿部120输入。滤波器300对成为输入的信号进行平滑化或浓淡程度处理。

图39是表示实施例5的第二缩小图像生成部的结构的框图。图39所示的缩小图像生成部与图7所示的缩小图像生成部相比，不同点在于，时间低频信号1010由滤波器300处理后，输出1079对移动补偿部120输入。滤波器300进行与图38的滤波器300同样的处理。

下面使用图40和41说明对于上述移动图像编码装置的移动图像译码装置。

实施例5的移动图像译码装置除了图14所示的时间高频空间低频信号再构成部不同以外，具有与实施例1相同的结构。图40是表示实施例5的时间高频空间低频信号再构成部的结构的框图。图40所示的时间高频空间低频信号再构成部与图15所示的时间高频空间低频信号再构成部相比，不同点在于，时间低频信号1072由滤波器400处理后，对移动补偿部173输入。在滤波器400，进行与图38的滤波器300同样的处理。

图41是表示实施例5的第二时间高频空间低频信号再构成部的结构的框图。图41所示的时间高频空间低频信号再构成部与图16所示的时间高频空间低频信号再构成部相比，不同点在于，与图40同样追加滤波器400。时间低频信号1072由滤波器400处理后，对移动补偿部173输入。在滤波器400，进行与图39的滤波器300同样的处理。

根据这样的结构，在生成缩小图像信号时，对时间低频信号进行平滑化等滤波。据此，不改变时间空间高频信号，能使缩小图像信号自身的编码变得容易。在译码时，在时间高频空间低频信号再构成部中，对时间低频信号也进行同等的滤波。因此，生成的时间高频空间低频信号的精度不下降。

实施例6

说明本发明的实施例6。

本发明的移动图像编码装置和移动图像译码装置从以上的说明可知，能由硬件构成，但是也能由计算机程序实现。

图42是实现本发明的移动图像编码装置的信息处理系统的一般框图。

图42所示的信息处理系统由处理器500、程序存储器501、存储媒体502和503构成。存储媒体502和503可以是不同的记录媒体，可以是由同一存储媒体构成的存储区。作为存储媒体，能使用硬盘等磁存储媒体。

在程序存储器501中，存储使处理器500执行作为上述的实施例1～实施例5的移动图像编码装置的时间空间频率分割部101、缩小图像信号编码部102、时间空间高频信号编码部103、移动信息编码104、多路复用部105的处理的程序，通过该程序，处理器500工作，将结果存储在存储媒体502或503。

此外，在程序存储器501中存储使处理器500执行作为上述的实施例1～实施例5的移动图像译码装置的逆多路复用部150、缩小图像信号译码部151、时空间高频信号译码部152、移动信息译码部153、时间空间频率合成部154的处理，通过该程序，处理器500工作，将结果存储在存储媒体502或503。

从以上的说明可知，能通过计算机程序实现硬件的全部或一部分。

Claims (87)

1.一种移动图像编码装置，

具有时间空间分割滤波部，使用将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分，生成与所述时间高频成分对应的移动图像信号，输出对该生成结果进行缩小处理的移动图像的缩小图像信号。

2.一种移动图像编码装置，

具有时间空间分割滤波部，对将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分进行缩小处理，使用缩小处理的结果，生成与所述时间高频成分对应的移动图像的缩小图像信号。

3.一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号进行编码的信号编码处理部，

所述时间空间分割滤波部生成：将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、使用所述时间低频成分和所述时间高频成分再构成与所述时间高频成分对应的所述移动图像信号后对所述再构成结果进行缩小处理的缩小图像信号。

4.一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号进行编码的信号编码处理部，

所述时间空间分割滤波部将所述移动图像信号进行时间阶层化，取得时间低频成分和时间高频成分，将所述时间高频成分进行空间阶层化，取得空间高频成分，使用所述时间低频成分和所述时间高频成分再构成与时间高频成分对应的所述移动图像信号后，生成对所述再构成结果进行缩小处理的缩小图像信号。

5.一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号进行编码的信号编码处理部，

所述时间空间分割滤波部生成将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、对所述时间低频成分和所述时间高频成分进行缩小处理并且使用该缩小处理结果而生成的与所述时间高频成分对应的移动图像信号的缩小图像信号。

6.一种移动图像编码装置，具有将移动图像信号阶层化的时间空间分割滤波部、将阶层化的信号进行编码的信号编码处理部，

所述时间空间分割滤波部具有：

将移动图像信号在时间方向滤波，生成时间低频信号、时间高频信号、表示所述图像信号之间的移动的移动信息的时间方向滤波部；

使用所述时间高频信号和所述时间低频信号，生成缩小与所述时间高频信号对应的移动图像信号的缩小图像信号的缩小图像生成部；和

生成对于所述时间高频信号，相当于空间高频成分的时间高频空间高频信号的高频信号生成部；

关于所述时间低频信号或所述缩小图像信号，执行所述时间空间分割滤波部，将移动图像信号阶层化后，信号编码处理部将所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息进行编码。

7.根据权利要求6所述的移动图像编码装置，其特征在于：

所述缩小图像生成部具有：

根据移动信息对时间低频信号进行移动补偿，生成预测图像的移动补偿部；

从所述预测图像和时间高频信号生成与所述时间高频信号对应的移动图像信号的时间高频信号逆变换部；和

对所述时间高频信号逆变换部生成的移动图像信号进行空间滤波，生成空间低频成分即缩小译码图像信号的低频信号生成部。

8.根据权利要求7所述的移动图像编码装置，其特征在于：

具有加权部，比较所述时间高频信号和所述时间低频信号，进行加权处理，或者对所述时间高频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出。

9.根据权利要求6所述的移动图像编码装置，其特征在于：

所述缩小图像生成部具有：

对时间低频信号和时间高频信号进行空间滤波，分别生成时间低频空间低频信号和时间高频空间低频信号的低频信号生成部；

按照所述低频信号生成部的所述空间滤波的析像度变换比，变换移动信息的移动信息变换部；

根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿补偿部；和

使用所述预测图像和所述时间高频空间低频信号，生成缩小图像信号的时间高频信号逆变换部。

10.根据权利要求9所述的移动图像编码装置，其特征在于：

具有加权部，对所述时间高频空间低频信号进行加权处理，或者对所述时间高频空间低频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出。

11.根据权利要求6～10中的任意一项所述的移动图像编码装置，其特征在于：

所述高频信号生成部是基于部分波段分割的频率成分抽出。

12.根据权利要求6～11中的任意一项所述的移动图像编码装置，其特征在于：

所述低频信号生成部是基于部分波段分割的频率成分抽出。

13.根据权利要求6～10中的任意一项所述的移动图像编码装置，其特征在于：

所述低频信号生成部通过第一二次采样滤波器生成缩小图像信号；

所述高频信号生成部通过与所述第一二次采样滤波器成对的第二二次采样滤波器生成高频信号。

14.根据权利要求6～13中的任意一项所述的移动图像编码装置，其特征在于：

所述时间方向滤波部具有：

对移动图像信号生成移动信息的移动推定部；

使用所述移动信息，对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的第一移动补偿部；

使用所述移动图像信号中包含的非参照信号和所述预测信号，生成时间高频信号的时间高频信号生成部；

使用所述移动信息对所述时间高频信号进行移动补偿，生成与所述预测信号对应的移动补偿时间高频信号的第二移动补偿部；和

从所述移动补偿时间高频信号和所述参照信号生成时间低频信号的时间低频信号生成部。

15.根据权利要求6～13中的任意一项所述的移动图像编码装置，其特征在于：

所述时间方向滤波部具有：

对移动图像信号生成移动信息的移动推定部；

使用所述移动信息对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的移动补偿部；和

生成所述移动图像信号中包含的非参照信号和所述预测信号的差分信号的差分信号生成部；

将所述参照信号以无变换作为时间低频信号输出，将所述差分信号作为时间高频信号输出。

16.一种移动图像编码装置，由以下构成：对移动图像信号在时间方向和空间方向进行频率分割并且生成缩小所述移动图像信号的缩小图像信号和时空间高频信号和移动信息的时间空间频率分割部、将所述缩小图像信号进行编码的缩小画像信号编码部、将所述时空间高频信号进行编码的时空间高频信号编码部、将所述移动信息进行编码的移动信息编码部、将所述缩小画像信号编码部和所述时空间高频信号编码部输出的编码数据和所述移动信息编码部输出的移动信息编码数据多路复用并且生成成为输出的位流的多路复用部，

所述时间空间频率分割部由以下构成：

将移动图像信号分割为时间低频信号、相当于时间高频信号的空间方向高频的时间高频空间高频信号、缩小与所述时间高频信号对应的移动图像信号的时间高频缩小图像信号的时间空间分割滤波部；和

将所述时间低频信号在空间方向进行频率分割生成时间低频空间低频信号和时间低频空间高频信号的空间分割滤波部；

所述时间空间分割滤波部将所述时间低频信号作为输入，循环地进行处理后，将所述时间低频空间低频信号和所述缩小译码图像信号作为所述时间高频缩小图像信号，将所述时间高频空间高频信号和所述时间低频空间高频信号作为所述时空间高频信号输出。

17.一种移动图像译码装置，具有将阶层编码的移动图像信号的编码数据进行译码并且生成阶层化的信号的信号译码处理部、合成所述阶层化的信号的时间空间合成滤波部，

所述时间空间合成滤波部根据某析像度阶层的译码结果即译码图像信号，生成基于时间阶层化的时间高频成分中的基于空间阶层化的空间低频成分后，进行空间方向频率合成和时间方向频率合成，生成更高析像度的析像度阶层的译码图像信号。

18.一种移动图像译码装置，具有将编码数据进行译码并且生成阶层化的信号的信号译码处理部、合成阶层化的图像信号的时间空间合成滤波部，

所述时间空间合成滤波部具有：

从时间低频信号、某析像度阶层的合成结果即缩小译码图像信号生成与所述时间低频信号成对的时间高频信号的空间低频成分即时间高频空间低频信号的时间高频空间低频信号再构成部；

合成所述时间高频信号的空间高频成分即时间高频空间高频信号、和所述时间高频空间低频信号，生成时间高频信号的空间合成滤波部；和

从所述时间高频信号、所述时间低频信号、移动信息生成译码图像信号的时间方向逆滤波部；

所述信号译码处理部从所述编码数据对所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、和所述移动信息进行译码。

19.根据权利要求18所述的移动图像译码装置，其特征在于：

所述时间高频空间低频信号再构成部具有：

根据所述移动信息，对所述时间低频信号进行移动补偿，生成预测图像的移动补偿部；

生成所述预测图像的空间低频成分即空间低频预测信号的低频信号生成部；

从所述空间低频预测信号和缩小译码图像信号生成时间高频成分的时间高频信号生成部；

将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

20.根据权利要求19所述的移动图像译码装置，其特征在于：

具有逆加权部，对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理；

将所述逆加权部的输出作为时间高频空间低频信号输出。

21.根据权利要求18所述的移动图像译码装置，其特征在于：

所述时间高频空间低频信号再构成部具有：

生成时间低频信号的空间低频成分，作为时间低频空间低频信号输出的低频信号生成部；

按照所述低频信号生成部的输入输出图像的析像度变换比，变换移动信息的移动信息变换部；

根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿部；和

从所述预测图像和缩小译码图像信号生成时间高频成分的时间高频信号生成部；

将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

22.根据权利要求21所述的移动图像译码装置，其特征在于：

具有逆加权部，对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理；

将所述逆加权部的输出作为时间高频空间低频信号输出。

23.根据权利要求19～22中的任意一项所述的移动图像译码装置，其特征在于：

所述低频信号生成部是基于部分波段分割的低通处理。

24.根据权利要求19～23中的任意一项所述的移动图像译码装置，其特征在于：

所述空间合成滤波部是成为所述部分波段分割的逆变换的部分波段合成。

25.根据权利要求19～24中的任意一项所述的移动图像译码装置，其特征在于：

所述低频信号生成部由二次采样滤波器生成缩小图像。

26.根据权利要求19～25中的任意一项所述的移动图像译码装置，其特征在于：

所述空间合成滤波部是由与所述二次采样滤波器成对的第二二次采样滤波器生成的高频信号与由所述二次采样滤波器生成的低频信号的合成。

27.根据权利要求18～26中的任意一项所述的移动图像译码装置，其特征在于：

所述时间方向逆滤波部具有：

根据所述移动信息，对所述时间高频信号进行移动补偿，生成移动补偿时间高频信号的第一移动补偿部；

从所述移动补偿时间高频信号和所述时间低频信号生成第一译码图像信号的时间低频信号逆变换部；

关于所述第一译码图像信号，根据所述移动信息进行移动补偿，生成预测信号的第二移动补偿部；和

从所述预测信号和所述时间高频信号生成第二译码图像信号的时间高频信号逆变换部；

合并所述第一译码图像信号和所述第二译码图像信号，作为成为输出的译码图像信号。

28.根据权利要求18～27中的任意一项所述的移动图像译码装置，其特征在于：

所述时间方向逆变换滤波部对所述时间低频信号进行移动补偿后，与时间高频信号相加，与所述时间低频信号合成，作为译码图像信号输出。

29.一种移动图像译码装置，由以下构成：将阶层化的位流逆多路复用并且生成最低次编码数据和剩余编码数据和移动信息编码数据的逆多路复用部、将最低次编码数据进行译码并且生成缩小图像信号的缩小图像信号译码部、将剩余编码数据进行译码并且生成时空间高频信号的时空间高频信号译码部、将所述移动信息编码数据进行译码并且生成移动信息的移动信息译码部、从所述缩小图像信号和所述时空间高频信号和所述移动信息生成译码图像信号的时间空间频率合成部，

所述时间空间频率合成部由以下部分构成：

合成所述缩小图像信号中的时间低频空间低频信号和所述时空间高频信号中的时间低频空间高频信号，生成时间低频信号的空间合成滤波部；

从所述时间低频信号、所述缩小图像信号、所述时空间高频信号再构成与所述时间低频信号对应的时间高频信号后，通过与所述时间低频信号合成，输出译码图像信号的时间空间合成滤波部。

30.一种移动图像编码方法，

使用将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分，生成与所述时间高频成分对应的移动图像信号，对该生成结果进行缩小处理，生成移动图像的缩小画像信号。

31.一种移动图像编码方法，

对将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分进行缩小处理，使用该缩小处理结果，生成与所述时间高频成分对应的移动图像的缩小画像信号。

32.一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将所述阶层化的信号进行编码的信号编码处理，

所述时间空间分割滤波生成：将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、使用所述时间低频成分和所述时间高频成分再构成与所述时间高频成分对应的所述移动图像信号后对所述再构成结果进行缩小处理的缩小图像信号。

33.一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将所述阶层化的信号进行编码的信号编码处理，

所述时间空间分割滤波将所述移动图像信号进行时间阶层化，取得时间低频成分和时间高频成分，将所述时间高频成分进行空间阶层化，取得空间高频成分，使用所述时间低频成分和所述时间高频成分再构成与时间高频成分对应的所述移动图像信号后，生成对所述再构成结果进行缩小处理的缩小图像信号。

34.一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将所述阶层化的信号进行编码的信号编码处理，

所述时间空间分割滤波生成：将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、对所述时间低频成分和所述时间高频成分进行缩小处理并且使用该缩小处理结果而生成的与所述时间高频成分对应的移动图像信号的缩小图像信号。

35.一种移动图像编码方法，具有将移动图像信号阶层化的时间空间分割滤波、将阶层化的信号进行编码的信号编码处理，

所述时间空间分割滤波具有：

将移动图像信号在时间方向滤波，生成时间低频信号、时间高频信号、表示所述图像信号之间的移动的移动信息的时间方向滤波步骤；

使用所述时间高频信号和所述时间低频信号，生成缩小与所述时间高频信号对应的移动图像信号的缩小图像信号的缩小图像生成步骤；和

生成对于所述时间高频信号，相当于空间高频成分的时间高频空间高频信号的高频信号生成步骤；

关于所述时间低频信号或所述缩小图像信号，执行所述时间空间分割滤波步骤，将移动图像信号阶层化后，在信号编码处理步骤将所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、和所述移动信息进行编码。

36.根据权利要求35所述的移动图像编码方法，其特征在于：

所述缩小图像生成步骤具有：

根据移动信息对时间低频信号进行移动补偿，生成预测图像的移动补偿步骤；

从所述预测图像和时间高频信号生成与所述时间高频信号对应的移动图像信号的时间高频信号逆变换步骤；和

对所述时间高频信号逆变换部生成的移动图像信号进行空间滤波，生成空间低频成分即缩小译码图像信号的低频信号生成步骤。

37.根据权利要求36所述的移动图像编码方法，其特征在于：

在所述时间高频信号逆变换步骤之前，比较所述时间高频信号和所述时间低频信号，进行加权处理，或者对所述时间高频信号的某部分进行加权处理。

38.根据权利要求35所述的移动图像编码方法，其特征在于：

所述缩小图像生成步骤具有：

对时间低频信号和时间高频信号进行空间滤波，分别生成时间低频空间低频信号和时间高频空间低频信号的低频信号生成步骤；

按照所述低频信号生成步骤的所述空间滤波的析像度变换比，变换移动信息的移动信息变换步骤；

根据由所述移动信息变换步骤变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿补偿步骤；和

使用所述预测图像和所述时间高频空间低频信号，生成缩小图像信号的时间高频信号逆变换步骤。

39.根据权利要求38所述的移动图像编码方法，其特征在于：

在时间高频信号逆变换步骤之前，对所述时间高频空间低频信号进行加权处理，或者对所述时间高频空间低频信号的某部分进行加权处理。

40.根据权利要求35～39中的任意一项所述的移动图像编码方法，其特征在于：

所述高频信号生成步骤是基于部分波段分割的频率成分抽出。

41.根据权利要求35～40中的任意一项所述的移动图像编码方法，其特征在于：

所述低频信号生成步骤是基于部分波段分割的频率成分抽出。

42.根据权利要求35～39中的任意一项所述的移动图像编码方法，其特征在于：

所述低频信号生成步骤通过第一二次采样滤波器生成缩小图像信号，

所述高频信号生成步骤通过与所述第一二次采样滤波器成对的第二二次采样滤波器生成高频信号。

43.根据权利要求35～42中的任意一项所述的移动图像编码方法，其特征在于：

所述时间方向滤波步骤具有：

对移动图像信号生成移动信息的移动推定步骤；

使用所述移动信息，对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的第一移动补偿步骤；

使用所述移动图像信号中包含的非参照信号和所述预测信号，生成时间高频信号的时间高频信号生成步骤；

使用所述移动信息对所述时间高频信号进行移动补偿，生成与所述预测信号对应的移动补偿时间高频信号的第二移动补偿步骤；和

从所述移动补偿时间高频信号和所述参照信号生成时间低频信号的时间低频信号生成步骤。

44.根据权利要求35～42中的任意一项所述的移动图像编码方法，其特征在于：

所述时间方向滤波步骤具有：

对移动图像信号生成移动信息的移动推定步骤；

使用所述移动信息对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的移动补偿步骤；和

生成所述移动图像信号中包含的非参照信号和所述预测信号的差分信号的差分信号生成步骤；

将所述参照信号以无变换作为时间低频信号输出，将所述差分信号作为时间高频信号输出。

45.一种移动图像编码方法，由以下构成：对移动图像信号在时间方向和空间方向进行频率分割并且生成缩小所述移动图像信号的缩小图像信号和时空间高频信号和移动信息的时间空间频率分割步骤、将所述缩小图像信号进行编码的缩小画像信号编码步骤、将所述时空间高频信号进行编码的时空间高频信号编码步骤、将所述移动信息进行编码的移动信息编码步骤、将所述缩小画像信号编码步骤和所述时空间高频信号编码步骤中生成的编码数据和所述移动信息编码步骤中生成的移动信息编码数据多路复用并且生成成为输出的位流的多路复用步骤，

所述时间空间频率分割步骤由以下构成：

将移动图像信号分割为时间低频信号、相当于时间高频信号的空间方向高频的时间高频空间高频信号、缩小与所述时间高频信号对应的移动图像信号的时间高频缩小图像信号的时间空间分割滤波步骤；和

将所述时间低频信号在空间方向进行频率分割生成时间低频空间低频信号和时间低频空间高频信号的空间分割滤波步骤；

所述时间空间分割滤波步骤将所述时间低频信号作为输入，循环地进行处理后，将所述时间低频空间低频信号和所述缩小译码图像信号作为所述时间高频缩小图像信号，将所述时间高频空间高频信号和所述时间低频空间高频信号作为时空间高频信号输出。

46.一种移动图像译码方法，具有将阶层编码的移动图像信号的编码数据进行译码并且生成阶层化的信号的信号译码处理步骤、合成所述阶层化的信号的时间空间合成滤波步骤，

所述时间空间合成滤波步骤根据某析像度阶层的译码结果即译码图像信号，生成基于时间阶层化的时间高频成分中的基于空间阶层化的空间低频成分后，进行空间方向频率合成和时间方向频率合成，生成更高析像度的析像度阶层的译码图像信号。

47.一种移动图像译码方法，具有将编码数据进行译码并且生成阶层化的信号的信号译码处理步骤、合成阶层化的图像信号的时间空间合成滤波步骤，

所述时间空间合成滤波步骤具有：

从时间低频信号、某析像度阶层的合成结果即缩小译码图像信号生成与所述时间低频信号成对的时间高频信号的空间低频成分即时间高频空间低频信号的时间高频空间低频信号再构成步骤；

合成所述时间高频信号的空间高频成分即时间高频空间高频信号、和所述时间高频空间低频信号，生成时间高频信号的空间合成滤波步骤；和

从所述时间高频信号、所述时间低频信号、移动信息生成译码图像信号的时间方向逆滤波步骤；

所述信号译码处理步骤从所述编码数据对所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、和所述移动信息进行译码。

48.根据权利要求47所述的移动图像译码方法，其特征在于：

所述时间高频空间低频信号再构成步骤具有：

根据所述移动信息，对所述时间低频信号进行移动补偿，生成预测图像的移动补偿步骤；

生成所述预测图像的空间低频成分即空间低频预测信号的低频信号生成步骤；和

从所述空间低频预测信号和缩小图像信号生成时间高频成分的时间高频信号生成步骤；

将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

49.根据权利要求48所述的移动图像译码方法，其特征在于：

对所述时间高频信号生成步骤中生成的时间高频成分进行补偿编码时进行的加权的加权处理，将该加权的信号作为时间高频空间低频信号输出。

50.根据权利要求47所述的移动图像译码方法，其特征在于：

所述时间高频空间低频信号再构成步骤具有：

生成时间低频信号的空间低频成分，作为时间低频空间低频信号输出的低频信号生成步骤；

按照所述低频信号生成部的输入输出图像的析像度变换比，变换移动信息的移动信息变换步骤；

根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿步骤；和

从所述预测图像和缩小译码图像信号生成时间高频成分的时间高频信号生成步骤；

将所述时间高频信号生成步骤的输出作为时间高频空间低频信号输出。

51.根据权利要求50所述的移动图像译码方法，其特征在于：

对所述时间高频信号生成步骤的输出进行补偿编码时进行的加权的加权处理，将它作为时间高频空间低频信号输出。

52.根据权利要求47～51中的任意一项所述的移动图像译码方法，其特征在于：

所述低频信号生成步骤是基于部分波段分割的低通处理。

53.根据权利要求47～52中的任意一项所述的移动图像译码方法，其特征在于：

所述空间合成滤波步骤是成为所述部分波段分割的逆变换的部分波段合成。

54.根据权利要求47～53中的任意一项所述的移动图像译码方法，其特征在于：

所述低频信号生成步骤由二次采样滤波器生成缩小图像。

55.根据权利要求54所述的移动图像译码方法，其特征在于：

所述空间合成滤波步骤是由与所述二次采样滤波器成对的第二二次采样滤波器生成的高频信号与由所述二次采样滤波器生成的低频信号的合成。

56.根据权利要求47～55中的任意一项所述的移动图像译码方法，其特征在于：

所述时间方向逆滤波步骤具有：

根据所述移动信息，对所述时间高频信号进行移动补偿，生成移动补偿时间高频信号的第一移动补偿步骤；

从所述移动补偿时间高频信号和所述时间低频信号生成第一译码图像信号的时间低频信号逆变换步骤；

关于所述第一译码图像信号，根据所述移动信息进行移动补偿，生成预测信号的第二移动补偿步骤；和

从所述预测信号和所述时间高频信号生成第二译码图像信号的时间高频信号逆变换步骤；

合并所述第一译码图像信号和所述第二译码图像信号，作为成为输出的译码图像信号。

57.根据权利要求47～56中的任意一项所述的移动图像译码方法，其特征在于：

所述时间方向逆变换滤波步骤对所述时间低频信号进行移动补偿后，与时间高频信号相加，与所述时间低频信号合成，作为译码图像信号输出。

58.一种移动图像译码方法，由以下构成：将阶层化的位流逆多路复用并且生成最低次编码数据和剩余编码数据和移动信息编码数据的逆多路复用步骤、将最低次编码数据进行译码并且生成缩小图像信号的缩小图像信号译码步骤、将剩余编码数据进行译码并且生成时空间高频信号的时空间高频信号译码步骤、将所述移动信息编码数据进行译码并且生成移动信息的移动信息译码步骤、从所述缩小图像信号和所述时空间高频信号和所述移动信息生成译码图像信号的时间空间频率合成步骤，

所述时间空间频率合成步骤由以下构成：

合成所述缩小图像信号中的时间低频空间低频信号和所述时空间高频信号中的时间低频空间高频信号，生成时间低频信号的空间合成滤波步骤；和

从所述时间低频信号、所述缩小图像信号、所述时空间高频信号再构成与所述时间低频信号对应的时间高频信号后，通过与所述时间低频信号合成，输出译码图像信号的时间空间合成滤波步骤。

59.一种移动图像编码装置的控制程序，使移动图像编码装置作为以下部分起作用：使用将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分，生成与所述时间高频成分对应的移动图像信号，输出对该生成结果进行缩小处理的移动图像的缩小图像信号的时间空间分割滤波部。

60.一种移动图像编码装置的控制程序，使移动图像编码装置作为以下部分起作用：对将移动图像信号进行时间阶层化而取得的时间低频成分和时间高频成分进行缩小处理，使用该缩小处理的结果，生成与所述时间高频成分对应的移动图像的缩小图像信号的时间空间分割滤波部。

61.一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号进行编码的信号编码处理部，

所述控制程序使所述时间空间分割滤波部生成：将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、使用所述时间低频成分和所述时间高频成分再构成与所述时间高频成分对应的所述移动图像信号后对所述再构成结果进行缩小处理的缩小图像信号。

62.一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号进行编码的信号编码处理部，

所述控制程序使所述时间空间分割滤波部发挥如下的功能：将所述移动图像信号进行时间阶层化，取得时间低频成分和时间高频成分，将所述时间高频成分进行空间阶层化，取得空间高频成分，使用所述时间低频成分和所述时间高频成分再构成与时间高频成分对应的所述移动图像信号后，生成对所述再构成结果进行缩小处理的缩小图像信号。

63.一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号进行编码的信号编码处理部，

所述控制程序使所述时间空间分割滤波部生成：将所述移动图像信号进行时间阶层化而取得的时间低频成分、将对所述移动图像信号进行时间阶层化而取得的时间高频成分进行空间阶层化而取得的空间高频成分、对所述时间低频成分和所述时间高频成分进行缩小处理并且使用该缩小处理结果而生成的与所述时间高频成分对应的移动图像信号的缩小图像信号。

64.一种移动图像编码装置的控制程序，该移动图像编码装置具有将移动图像信号阶层化的时间空间分割滤波部、将所述阶层化的信号进行编码的信号编码处理部，

所述控制程序使所述时间空间分割滤波部作为以下部分起作用：

将移动图像信号在时间方向滤波，生成时间低频信号、时间高频信号、表示所述图像信号之间的移动的移动信息的时间方向滤波部；

使用所述时间高频信号和所述时间低频信号，生成缩小与所述时间高频信号对应的移动图像信号的缩小图像信号的缩小图像生成部；和

生成对于所述时间高频信号，相当于空间高频成分的时间高频空间高频信号的高频信号生成部；

关于所述时间低频信号或所述缩小图像信号，执行所述时间空间分割滤波部，将移动图像信号阶层化后，信号编码处理部将所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、所述移动信息进行编码。

65.根据权利要求64所述的移动图像编码装置的控制程序，其特征在于：

所述控制程序使所述缩小图像生成部作为以下部分起作用：

根据移动信息对时间低频信号进行移动补偿，生成预测图像的移动补偿部；

从所述预测图像和时间高频信号生成与所述时间高频信号对应的移动图像信号的时间高频信号逆变换部；

对所述时间高频信号逆变换部生成的移动图像信号进行空间滤波，生成空间低频成分即缩缩小译码图像信号的低频信号生成部。

66.根据权利要求65所述的移动图像编码装置的控制程序，其特征在于：

所述控制程序使移动图像编码装置作为加权部起作用，比较所述时间高频信号和所述时间低频信号，进行加权处理，或者对所述时间高频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出。

67.根据权利要求64所述的移动图像编码装置的控制程序，其特征在于：

所述控制程序使所述缩小图像生成部作为以下部分起作用：

对时间低频信号和时间高频信号进行空间滤波，分别生成时间低频空间低频信号和时间高频空间低频信号的低频信号生成部；

按照所述低频信号生成部的所述空间滤波的析像度变换比，变换移动信息的移动信息变换部；

根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿补偿部；和

使用所述预测图像和所述时间高频空间低频信号，生成缩小图像信号的时间高频信号逆变换部。

68.根据权利要求67所述的移动图像编码装置的控制程序，其特征在于：

所述控制程序使移动图像编码装置作为加权部起作用，对所述时间高频空间低频信号进行加权处理，或者对所述时间高频空间低频信号的某部分进行加权处理，对所述时间高频信号逆变换部输出。

69.根据权利要求64～68中的任意一项所述的移动图像编码装置的控制程序，其特征在于：

所述高频信号生成部是基于部分波段分割的频率成分抽出。

70.根据权利要求64～69中的任意一项所述的移动图像编码装置的控制程序，其特征在于：

所述低频信号生成部是基于部分波段分割的频率成分抽出。

71.根据权利要求64～68中的任意一项所述的移动图像编码装置的控制程序，其特征在于：

所述低频信号生成部通过第一二次采样滤波器生成缩小图像信号，

所述高频信号生成部通过与所述第一二次采样滤波器成对的第二二次采样滤波器生成高频信号。

72.根据权利要求64～71中的任意一项所述的移动图像编码装置的控制程序，其特征在于：

所述控制程序使所述时间方向滤波部作为以下部分起作用：

对移动图像信号生成移动信息的移动推定部；

使用所述移动信息，对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的第一移动补偿部；

使用所述移动图像信号中包含的非参照信号和所述预测信号，生成时间高频信号的时间高频信号生成部；

使用所述移动信息对所述时间高频信号进行移动补偿，生成与所述预测信号对应的移动补偿时间高频信号的第二移动补偿部；和

从所述移动补偿时间高频信号和所述参照信号生成时间低频信号的时间低频信号生成部。

73.根据权利要求64～71中的任意一项所述的移动图像编码装置的控制程序，其特征在于：

所述控制程序使所述时间方向滤波部作为以下部分起作用：

对移动图像信号，生成移动信息的移动推定部；

使用所述移动信息对所述移动图像信号中包含的参照信号进行移动补偿，生成预测信号的移动补偿部；和

生成所述移动图像信号中包含的非参照信号和所述预测信号的差分信号的差分信号生成部；

将所述参照信号以无变换作为时间低频信号输出，将所述差分信号作为时间高频信号输出。

74.一种移动图像编码装置的控制程序，该移动图像编码装置由以下构成：对移动图像信号在时间方向和空间方向进行频率分割并且生成缩小所述移动图像信号的缩小图像信号和时空间高频信号和移动信息的时间空间频率分割部、将所述缩小图像信号进行编码的缩小画像信号编码部、将所述时空间高频信号进行编码的时空间高频信号编码部、将所述移动信息进行编码的移动信息编码部、将所述缩小画像信号编码部和所述时空间高频信号编码部输出的编码数据和所述移动信息编码部输出的移动信息编码数据多路复用并且生成成为输出的位流的多路复用部；

所述控制程序使所述时间空间频率分割部作为以下部分起作用：

将移动图像信号分割为时间低频信号、相当于所述时间高频信号的空间方向高频的时间高频空间高频信号、缩小与所述时间高频信号对应的移动图像信号的时间高频缩小图像信号的时间空间分割滤波部；和

将所述时间低频信号在空间方向进行频率分割生成时间低频空间低频信号和时间低频空间高频信号的空间分割滤波部；

所述时间空间分割滤波部将所述时间低频信号作为输入，循环地进行处理后，将所述时间低频空间低频信号和所述缩小译码图像信号作为所述时间高频缩小图像信号，将所述时间高频空间高频信号和所述时间低频空间高频信号作为所述时空间高频信号输出。

75.一种移动图像译码装置的控制程序，该移动图像译码装置具有将阶层编码的移动图像信号的编码数据进行译码并且生成阶层化的信号的信号译码处理部、合成所述阶层化的信号的时间空间合成滤波部，

所述控制程序使所述时间空间合成滤波部根据某析像度阶层的译码结果即译码图像信号，生成基于时间阶层化的时间高频成分中的基于空间阶层化的空间低频成分后，进行空间方向频率合成和时间方向频率合成，生成更高析像度的析像度阶层的译码图像信号。

76.一种移动图像译码装置的控制程序，该移动图像译码装置具有将编码数据进行译码并且生成阶层化的信号的信号译码处理部、合成所述阶层化的图像信号的时间空间合成滤波部，

所述控制程序使所述时间空间合成滤波部作为以下部分起作用：

从时间低频信号、某析像度阶层的合成结果即缩小译码图像信号生成与所述时间低频信号成对的时间高频信号的空间低频成分即时间高频空间低频信号的时间高频空间低频信号再构成部；

合成所述时间高频信号的空间高频成分即时间高频空间高频信号、和所述时间高频空间低频信号，生成时间高频信号的空间合成滤波部；和

从所述时间高频信号、所述时间低频信号、移动信息生成译码图像信号的时间方向逆滤波部；

所述信号译码处理部从所述编码数据对所述时间低频信号、所述缩小译码图像信号、所述时间高频空间高频信号、和所述移动信息进行译码。

77.根据权利要求76所述的移动图像译码装置的控制程序，其特征在于：

所述控制程序使所述时间高频空间低频信号再构成部作为以下部分起作用：

根据所述移动信息，对所述时间低频信号进行移动补偿，生成预测图像的移动补偿部；

生成所述预测图像的空间低频成分即空间低频预测信号的低频信号生成部；和

从所述空间低频预测信号和缩小图像信号生成时间高频成分的时间高频信号生成部；

将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

78.根据权利要求77所述的移动图像译码装置的控制程序，其特征在于：

所述控制程序使所述移动图像编码装置作为对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理的逆加权部起作用，将所述逆加权部的输出作为时间高频空间低频信号输出。

79.根据权利要求76所述的移动图像译码装置的控制程序，其特征在于：

所述控制程序使所述时间高频空间低频信号再构成部作为以下部分起作用：

生成时间低频信号的空间低频成分，作为时间低频空间低频信号输出的低频信号生成部；

按照所述低频信号生成部的输入输出图像的析像度变换比，变换移动信息的移动信息变换部；

根据由所述移动信息变换部变换的移动信息，对所述时间低频空间低频信号进行移动补偿，生成预测图像的移动补偿部；和

从所述预测图像和缩小译码图像信号生成时间高频成分的时间高频信号生成部；

将所述时间高频信号生成部的输出作为时间高频空间低频信号输出。

80.根据权利要求79所述的移动图像译码装置的控制程序，其特征在于：

所述控制程序使所述移动图像编码装置作为对所述时间高频信号生成部的输出进行补偿编码时进行的加权的加权处理的逆加权部起作用，将所述逆加权部的输出作为时间高频空间低频信号输出。

81.根据权利要求77～80中的任意一项所述的移动图像译码装置的控制程序，其特征在于：

所述低频信号生成部是基于部分波段分割的低通处理。

82.根据权利要求77～81中的任意一项所述的移动图像译码装置的控制程序，其特征在于：

所述空间合成滤波部是成为所述部分波段分割的逆变换的部分波段合成。

83.根据权利要求77～82中的任意一项所述的移动图像译码装置的控制程序，其特征在于：

所述低频信号生成部由二次采样滤波器生成缩小图像。

84.根据权利要求83所述的移动图像译码装置的控制程序，其特征在于：

所述空间合成滤波部是由与所述二次采样滤波器成对的第二二次采样滤波器生成的高频信号与由所述二次采样滤波器生成的低频信号的合成。

85.根据权利要求76～84中的任意一项所述的移动图像译码装置的控制程序，其特征在于：

所述控制程序使所述时间方向逆滤波部作为以下部分起作用：

根据所述移动信息，对所述时间高频信号进行移动补偿，生成移动补偿时间高频信号的第一移动补偿部；

从所述移动补偿时间高频信号和所述时间低频信号生成第一译码图像信号的时间低频信号逆变换部；

关于所述第一译码图像信号，根据所述移动信息进行移动补偿，生成预测信号的第二移动补偿部；和

从所述预测信号和所述时间高频信号生成第二译码图像信号的时间高频信号逆变换部；

合并所述第一译码图像信号和所述第二译码图像信号，作为成为输出的译码图像信号。

86.根据权利要求76～85中的任意一项所述的移动图像译码装置的控制程序，其特征在于：

所述时间方向逆变换滤波部对所述时间低频信号进行移动补偿后，与时间高频信号相加，与所述时间低频信号合成，作为译码图像信号输出。

87.一种移动图像译码装置的控制程序，该移动图像译码装置由以下构成：将阶层化的位流逆多路复用并且生成最低次编码数据和剩余编码数据和移动信息编码数据的逆多路复用部、将最低次编码数据进行译码并且生成缩小图像信号的缩小图像信号译码部、将剩余编码数据进行译码并且生成时空间高频信号的时空间高频信号译码部、将所述移动信息编码数据进行译码并且生成移动信息的移动信息译码部、从所述缩小图像信号和所述时空间高频信号和所述移动信息生成译码图像信号的时间空间频率合成部；

所述控制程序使所述时间空间频率合成部作为以下部分起作用：

合成所述缩小图像信号中的时间低频空间低频信号和所述时空间高频信号中的时间低频空间高频信号，生成时间低频信号的空间合成滤波部；和

从所述时间低频信号、所述缩小图像信号、所述时空间高频信号再构成与所述时间低频信号对应的时间高频信号后，通过与所述时间低频信号合成，输出译码图像信号的时间空间合成滤波部。

Images