CN101926177A - 运动图像编码/解码装置 - Google Patents

Abstract

具备：生成与输入图像对应的局部解码图像的图像处理部(112)；使用规定的参数将上述局部解码图像分类成多个区域的区域分割部(114)；针对每个所分类的区域设计滤波器系数的滤波器设计部(115)；按照与每个所分类的区域对应的滤波器系数对上述局部解码图像进行滤波处理的滤波处理部(116)；蓄积实施了滤波处理的图像的帧存储器(113)；使用所蓄积的图像生成预测图像的预测器(117)；以及将区域的分类中使用的参数以及每个所分类的区域的滤波器系数的信息作为编码数据而输出的编码器(118)。

Description

运动图像编码/解码装置

技术领域

本发明涉及将用于控制在运动图像解码装置中进行的滤波处理的信息附加到编码数据的运动图像编码装置以及根据附加到编码数据上的用于控制滤波处理的信息对解码图像进行滤波处理的运动图像解码装置。

背景技术

作为输出对解码图像进行了滤波处理而得到的图像的技术，有如下技术：在编码装置中设计滤波器，以使编码对象图像与对解码图像进行了滤波处理而得到的图像的误差最小化，发送滤波器的信息，在解码装置中输出根据该信息对解码图像进行滤波处理而得到的图像(S.Wittmann and T.Wedi，“Post-filter SEI message for 4:4:4coding”，JVT 0f ISO/IEC MPEG&ITU-T VCEG，JVT-S030，April2006(以后设为S.Wittmann et al.))。由此，可以在解码装置中得到与原画的误差少的输出图像。

作为类似的技术，考虑如下技术：将除了与S.Wittmann et al.同样的处理以外，还对解码图像进行滤波处理而得到的图像在生成预测图像时用作参照图像。由此，参照图像与编码对象图像的误差变少，所以可以得到在预测了接下来的帧时削减预测误差的效果。在S.Wittmann et al.中，按照帧单位设计滤波器。在该情况下，无法与根据帧内的区域而不同的图像的性质配合地设计滤波器。对于S.Wittmann et al.的类似技术，如果按照帧单位设计滤波器，则也存在同样的问题。

发明内容

在以往技术中，由于按照帧单位设计滤波器，所以存在无法与根据帧内的区域而不同的图像的性质配合地设计滤波器这样的问题。

本发明的目的在于提供一种运动图像编码/解码装置以及方法，通过规定的基准将图像分类成多个区域，并针对分类后的每个区域进行滤波处理，从而减少编码对象图像与参照图像的误差以及编码对象图像与输出图像的误差。

根据本发明，在运动图像编码时按照预先决定的基准分类并分割帧内的区域，针对被分类了的每个区域，进行针对局部解码图像的滤波处理。另外，除了滤波器的信息以外，还将在区域的分类中使用的参数作为编码数据而输出。

本发明的一个方式提供一种运动图像编码装置，具备：生成与输入图像对应的局部解码图像的图像处理部；使用规定的参数将局部解码图像分类成多个区域的分类部；针对每个所分类的区域设计滤波器系数的设计部；按照与每个所分类的区域对应的滤波器系数对上述局部解码图像进行滤波处理的滤波部；蓄积实施了滤波处理后的图像的蓄积部；使用所蓄积的图像生成预测图像的预测部；以及将区域的分类中使用的参数以及每个所分类的区域的滤波器系数的信息作为编码数据而输出的编码部。

附图说明

图1是第1实施方式的运动图像编码装置的框图。

图2是第1实施方式的运动图像编码装置的信号处理器的框图。

图3是示出通过图2的运动图像编码装置进行的运动图像编码的流程图。

图4是示出帧的分类状态的图。

图5是示出通过第1实施方式的区域分割器进行的区域分割的流程图。

图6是示出第1实施方式的区域信息的例子的图。

图7是示出高通滤波器的滤波器系数的例子的图。

图8是示出成为一维离散余弦变换的对象的像素的图。

图9是示出一维离散余弦变换的系数与分类基准的关系的图。

图10是示出滤波器系数表的图。

图11是示出索引与阈值的表的图。

图12是第1实施方式的滤波器设计器的框图。

图13是第1实施方式的滤波器处理器的框图。

图14是第2实施方式的运动图像解码装置的框图。

图15是第2实施方式的运动图像解码装置的信号处理器的框图。

图16是示出通过第2实施方式的运动图像解码装置进行的运动图像解码的流程图。

图17是第3实施方式的运动图像编码装置的信号处理器的框图。

图18是第4实施方式的运动图像解码装置的框图。

图19是第5实施方式的滤波器设计器的框图。

图20是示出第5实施方式的滤波器应用/非应用信息的例子的图。

图21是第5实施方式的滤波器处理器的框图。

图22是第9实施方式的滤波器设计器的框图。

图23是示出滤波器系数与表示滤波器系数的索引的例子的图。

图24是第9实施方式的滤波器处理器的框图。

图25是第13实施方式的运动图像编码装置的框图。

图26是示出第13实施方式的区域信息的例子的图。

图27是第14实施方式的运动图像解码装置的框图。

图28是第15实施方式的运动图像编码装置的框图。

图29是第16实施方式的运动图像解码装置的框图。

图30是第25实施方式的运动图像编码装置的框图。

图31是示出第25实施方式的区域信息的例子的图。

图32是第26实施方式的运动图像解码装置的框图。

图33是第27实施方式的运动图像编码装置的框图。

图34是第28实施方式的运动图像解码装置的框图。

图35是示出滤波器系数的图。

图36是第38实施方式的运动图像编码装置的框图。

图37是第39实施方式的运动图像解码装置的框图。

图38是第40实施方式的运动图像编码装置的框图。

图39是第41实施方式的运动图像解码装置的框图。

图40是第48实施方式的运动图像编码装置的框图。

图41是第50实施方式的运动图像编码装置的框图。

图42是第60实施方式的运动图像编码装置的框图。

图43是第61实施方式的运动图像解码装置的框图。

图44是第62实施方式的运动图像编码装置的框图。

图45是第63实施方式的运动图像解码装置的框图。

图46是第72实施方式的运动图像编码装置的框图。

图47是第74实施方式的运动图像编码装置的框图。

图48是第84实施方式的运动图像编码装置的框图。

图49是第85实施方式的运动图像解码装置的框图。

图50是第86实施方式的运动图像编码装置的框图。

图51是第87实施方式的运动图像解码装置的框图。

图52是示出区域与分类的对应的信息的图。

具体实施方式

以下，对本发明的实施方式进行说明。

(第1实施方式)

使用图1对本发明的第一实施方式的运动图像编码装置进行说明。对输入图像信号101进行输入的信号处理器112构成为生成输入图像信号101与预测图像信号109的残差信号，对残差信号进行正交变换，并进行量化，从而生成残差信息102，对残差信息102进行逆量化以及逆正交变换，与预测图像信号进行加法计算，从而生成局部解码图像信号103。信号处理器112的残差信息输出端与可变长编码器118连接，局部解码信号输出端与帧存储器113的写入端连接。

帧存储器113的局部解码图像信号读出端与区域分割器114连接。该区域分割器114如后所述按照规定的基准将局部解码图像信号104分类成多个区域，并进行分割，输出表示区域与分类的对应的区域信息105。区域分割器114的区域信息输出端与滤波器设计器115以及滤波器处理器116连接。滤波器设计器115接收输入图像信号101、区域信息105以及帧存储器113的局部解码图像信号104针对每个分类区域设计滤波器系数。滤波器设计器115的输出端与滤波器处理器116连接。

滤波器处理器116接收局部解码图像信号104、区域信息105以及滤波器信息106，针对与区域信息105对应的局部解码图像信号104的图像信号区域，根据滤波器信息106进行滤波处理，生成针对每个分类图像区域进行了滤波处理的图像信号107。滤波器处理器116的图像信号输出端与帧存储器113的写入端连接。帧存储器113存储滤波处理后的图像信号107，作为参照图像信号108而读出到预测器117。预测器117根据参照图像信号108生成预测图像信号109。

参照图2以及图3，对上述结构的图像编码装置进行具体说明。

如图2所示，信号处理器112具有：计算输入图像信号101与预测图像信号109的差分而输出残差信号119的减法器123；对残差信号119进行正交变换，输出正交变换系数(例如，DCT系数)120的正交变换器124；以及对正交变换系数进行量化，输出量化变换系数信号、即残差信息102的量化器125。信号处理器112还具有：对残差信息102进行逆量化而输出变换系数121的逆量化器126；对变换系数121进行逆正交变换而再生残差信号122的逆正交变换器127；以及对再生残差信号122与预测图像信号109进行加法计算而生成局部解码信号103的加法器128。

如图3的流程图所示，如果输入图像信号101被输入到图像信号处理部112(S11)，则在减法器123中，取输入图像信号101与预测图像信号109的差分，从而生成残差信号119(S12)。在正交变换器124中，对残差信号119实施正交变换，生成变换系数(S13)，该变换系数被量化器125量化(S14)。量化后的变换系数一方面作为残差信息102而被输入到可变长编码器，另一方面通过逆量化器126被逆量化后，通过逆正交变换器127进行逆正交变换。在加法器128中，对再生的残差信号122与预测图像信号109进行加法计算，从而生成局部解码图像信号103(S15)。局部解码图像信号103被存储到帧存储器113中(S16)。从帧存储器113中读出的局部解码图像信号104被输入到区域分割器114、滤波器设计器115以及滤波器处理器116。

在区域分割器114中按照预先决定的基准(以下，分类基准)例如图4所示分类所输入的局部解码图像信号104的区域，生成表示区域与分类的对应的区域信息105(S17)。从区域分割器114中输出分类基准的计算以及基于该基准的分类中所需的区域分割参数111以及区域信息105。区域分割参数111被输入到可变长编码器118，区域信息105被输入到滤波器设计器115以及滤波器处理器116。

使用图5的流程图对区域分割器114中的分类处理(S17)进行说明。分类的对象设为解码图像上的位置(x、y)的像素(以下S(x、y))，分类成像素值的变化平滑的平坦部以及像素值的变化剧烈的非平坦部这两个。注意成为分类的对象的区域是各像素。在最细地分类了区域的情况下，区域成为像素单位。在步骤101中，根据局部解码图像信号104计算分类基准C(x、y)。在步骤102中，判定分类基准C(x、y)是否小于阈值T。在分类基准C(x、y)小于预先决定的阈值T的情况下，在步骤103中位置(x、y)被分类成平坦部。否则，在步骤104中位置(x、y)被分类成非平坦部。

通过以上的处理，实现区域与分类的对应。因此，作为表示区域与分类的对应的区域信息，可以构成图6所示的表。从区域分割器114中作为区域分割参数113而输出阈值T，作为区域信息105而输出图6的表的信息。

作为分类基准，可以使用S(x、y)及其周边像素的绝对值差分的平均值、即通过下式(1)计算的平均值。

[式1]

$C_{\mathrm{ave}}(x,y)=\frac{1}{{(2N+1)}^2}\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}\underset{j=-N}{\overset{N}{\mathrm{\Σ}}}|S(x+i,y+j)-S(x,y)|---\left(1\right)$

此处，将N设为任意的自然数。在进行式(1)的运算的情况下，使用预先决定的用于舍入的偏移值R_C通过整数除法用下式(2)来表示式(1)，从而可以回避浮点运算。

[式2]

$C_{\mathrm{ave}}(x,y)=\frac{\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}\underset{j=-N}{\overset{N}{\mathrm{\Σ}}}|S(x+i,y+j)-S(x,y)|+R_C}{{(2N+1)}^2}---\left(2\right)$

另外，可以将S(x、y)及其周边像素的绝对值差分的最大值、即通过下式(3)求出的最大值用作分类基准。

[式3]

$C_{\max }(x,y)=\underset{-N\≤i\≤N,-N\≤j\≤N}{\max }|S(x+i,y+j)-S(x,y)|---\left(3\right)$

另外，可以将高通滤波处理后的值的绝对值、即通过下式(4)求出的绝对值用作分类基准。

[式4]

$C_{\mathrm{HF}}(x,y)=\left|\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}\underset{j=-N}{\overset{N}{\mathrm{\Σ}}}{h}_{\mathrm{HF}}(i,j)S(x+i,y+j)\right|---\left(4\right)$

例如可以如图7所示设为N＝1而通过下式(5)求出高通滤波器的滤波器系数。

[式5]

另外，可以将包括位置(x、y)的信号变换成频率分量，将包含在高频中的频率分量用作分类基准。为便于说明，考虑如图8所示对在包括位置(x、y)的水平方向上排列的8个像素实施一维离散余弦变换的情况。在将变换系数按照从低频到高频的顺序设为X(0)、X(1)、...、X(7)时，如图9所示将第4个以后的系数的总和、即通过下式(6)求出的总和用作分类基准。

[式6]

$C_{\mathrm{DCT}}(x,y)=\underset{i=4}{\overset{7}{\mathrm{\Σ}}}X\left(i\right)---\left(6\right)$

虽然将取系数的总和的范围固定成第4个系数以后，但也可以将取第几个以后的系数的总和的情况与阈值T配合地作为区域分割参数而输出。虽然说明了一维的情况，但对于二维的情况，也可以同样地进行。

另外，可以使用根据对局部解码图像进行滤波处理而得到的图像与局部解码图像的差分得到的图像的像素值的绝对值。可以通过下式(7)求出进行了滤波处理的图像。

[式7]

$S_{\mathrm{LF}}(x,y)=\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}\underset{j=-N}{\overset{N}{\mathrm{\Σ}}}{h}_{\mathrm{LF}}(i,j)S(x+i,y+j)---\left(7\right)$

将滤波器系数可以如图35所示例如设为N＝2。

可以通过下式(8)求出根据差分得到的图像的像素值的绝对值。

[式8]

$C_{\mathrm{DIFF}}(x,y)=|S_{\mathrm{LF}}(x,y)-S(x,y)|$

$=|\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}\underset{j=-N}{\overset{N}{\mathrm{\Σ}}}{h}_{\mathrm{LF}}(i,j)S(x+i,y+j)-S(x,y)|---\left(8\right)$

也可以从预先准备的多个分割基准中选择一个分类基准来进行区域分类。在该情况下，将指定所选择的分类基准的信息附加到区域分割参数。例如，设为准备多个高通滤波器，并选择某一个来进行区域分类。此处，设为如图10所示对高通滤波器分别对应关联了索引。在使用索引1的高通滤波器进行区域分类的情况下，如图11所示将用于指定滤波器的索引与用于进行区域分类的阈值T的信息作为区域分类参数而输出。

如果进行了区域分类，则进行滤波器系数的设计(S18)。即，在滤波器设计器115中，根据区域信息105、输入图像信号101以及局部解码图像信号104，针对与区域对应的每个分类设计滤波器(滤波器系数)。与设计的滤波器相关的滤波器信息106被输入到滤波器处理器116以及可变长编码器118。

使用图12，对滤波器设计器115进行说明。图12示出如区域分割器114的例子那样将区域分类成平坦部与非平坦部的情况下的滤波器设计器的结构。区域信息105被输入到切换控制器131，局部解码图像信号104被输入到局部解码图像信号切换器132，输入图像信号101被输入到输入图像信号切换器133。切换控制器131根据区域信息105对局部解码图像信号切换器132、输入图像信号切换器133、平坦部滤波器设计器134以及非平坦部滤波器设计器135进行控制。根据区域信息105，如果区域是平坦部，则局部解码图像信号104以及输入图像信号101都被输入到平坦部滤波器设计器134，如果是非平坦部，则被输入到非平坦部滤波器设计器135。

在平坦部滤波器设计器134中，根据分类成平坦部的输入图像信号101以及局部解码图像信号104设计滤波器。在非平坦部滤波器设计器135中，根据分类成非平坦部的输入图像信号101以及局部解码图像信号104设计滤波器。在平坦部滤波器设计器134或者非平坦部滤波器设计器135的任意一个中，都根据输入图像信号101与局部解码图像信号104构成Wiener-Hopf方程式并求解，从而可以设计使输入图像信号101与对局部解码图像信号104进行滤波处理而得到的图像信号的平方误差成为最小的滤波器。从平坦部滤波器设计器134以及非平坦部滤波器设计器135中分别输出平坦部的滤波器系数129以及非平坦部的滤波器系数130，两者被输入到滤波器信息复用器136。在滤波器信息复用器136中，对平坦部的滤波器系数129以及非平坦部的滤波器系数130进行复用，作为滤波器信息106而输出。

如上所述设计滤波器系数后，进行滤波处理(S19)。即，在滤波器处理器116中，根据区域信息105依据与区域对应的分类对局部解码图像信号104进行滤波处理，生成图像信号109。

使用图13对滤波器处理器116进行说明。图13示出如区域分割器114的例子那样将区域分类成平坦部与非平坦部的情况下的滤波器处理器116的结构。区域信息105被输入到切换控制器142，局部解码图像信号104被输入到平坦部滤波器处理器143以及非平坦部滤波器处理器144，滤波器信息106被输入到滤波器信息分离器141。滤波器信息分离器141将滤波器信息106分离成平坦部的滤波器系数137以及非平坦部的滤波器系数138。平坦部的滤波器系数137以及非平坦部的滤波器系数138被分别输入到平坦部滤波器处理器143以及非平坦部滤波器处理器144。

切换控制器142根据区域信息105对平坦部滤波器处理器143、非平坦部滤波器处理器144以及信号切换器145进行控制。如果区域信息105表示平坦部区域，则平坦部滤波器处理器143对局部解码图像信号104通过平坦部的滤波器系数137进行滤波处理，生成滤波处理后的图像信号139。从平坦部滤波器处理器143输出滤波处理后的图像信号139，通过信号切换器145输出到滤波器处理器116的外部。如果区域信息105表示非平坦部区域，则非平坦部滤波器处理器144对局部解码图像信号104通过非平坦部的滤波器系数138进行滤波处理，生成滤波处理后的图像信号140。从非平坦部滤波器处理器144输出滤波处理后的图像信号140，通过信号切换器145输出到滤波器处理器116的外部。

对于滤波处理，在位置(x、y)是平坦部的情况下，针对滤波器系数h(i、j)(-N≤i≤N、-N≤j≤N)设定平坦部的滤波器系数137，并通过下式(9)决定即可。

[式9]

$S_{\mathrm{ref}}(x,y)=\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}h(i,j)S(x+i,y+j)---\left(9\right)$

在非平坦部的情况下，针对滤波器系数h(i、j)(-N≤i≤N、-N≤i≤N)设定非平坦部的滤波器系数138，并通过式(6)决定即可。在进行式(6)的运算的情况下，如果作为滤波器系数而准备整数值h_int(i、j)(-N≤i≤N、-N≤j≤N)，并使用预先决定的用于舍入的偏移值R以及整数值D通过整数除法根据下式(10)进行运算，则可以回避浮点运算。

[式10]

$S_{\mathrm{ref}}(x,y)=\frac{\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}\underset{i=-N}{\overset{N}{\mathrm{\Σ}}}{h}_{\mathrm{int}}(i,j)S(x+i,y+j)+R}{D}---\left(10\right)$

图像信号103被蓄积到帧存储器113中。读出蓄积在帧存储器113中的图像信号作为参照图像信号，输入到预测器117。在预测器117中，使用参照图像信号108进行预测，生成预测图像信号109。预测图像信号109被输入到信号处理器112。在可变长编码器118中，对残差信息102、区域分割参数111以及滤波器信息106进行可变长编码，生成包括这些代码的编码数据110。

(第2实施方式)

使用图14对第2实施方式的运动图像解码装置进行说明。该运动图像解码装置具有输入作为解码对象数据的编码数据201的可变长解码器211。该可变长解码器211对编码数据201进行可变长解码，输出残差信息202、区域分割参数209以及滤波器信息210。可变长解码器211的残差信息输出端与根据残差信息202和预测图像信号208生成解码图像信号203的信号处理器212连接，区域分割参数输出端以及滤波器信息输出端与区域分割器214以及滤波器处理器215分别连接，该区域分割器214通过区域分割参数209与第一实施方式的区域分割器114同样地分类解码图像信号204的区域，生成区域信息205，该滤波器处理器215与第一实施方式的滤波器处理器116同样地使用区域信息205、滤波器信息210对解码图像信号204进行滤波处理，生成图像信号206。

信号处理器212的输出端与帧存储器213连接，区域分割器214以及滤波器处理器215的输出端与滤波器处理器215以及帧存储器213连接。帧存储器213的解码图像信号读出端与区域分割器214以及滤波器处理器215连接，该参照图像信号输出端与使用参照图像信号207生成预测图像信号208的预测器216连接。

参照图16的流程图对通过上述结构的运动图像解码装置实施的运动图像解码进行说明。作为解码对象的编码数据201，经由蓄积系统或者传送系统输入从图1的运动图像编码装置中输出的编码数据110(S31)。通过可变长解码器211对包含在解码对象的编码数据201中的残差信息、区域分割参数以及滤波器信息的代码进行解码(S32)，生成残差信息202、区域分割参数209以及滤波器信息210。残差信息202被输入到信号处理器212，区域分割参数209被输入到区域分割器214，滤波器信息210被输入到滤波器处理器215。

在信号处理器212中根据残差信息202再生残差，根据预测图像信号208与再生的残差生成解码图像信号203。即，如图15所示通过逆量化器219对被量化成残差信息202的正交变换系数进行逆量化(S33)。通过逆正交变换器220对逆量化后的正交变换系数进行逆正交变换，从而生成残差信号218(S34)。在加法器221中对残差信号218加上预测图像信号208，从而得到解码图像信号203(S35)。

解码图像信号203被蓄积到帧存储器213中(S36)，从帧存储器213中读出的解码图像信号204被输入到区域分割器214以及滤波器处理器215。在区域分割器214中，通过区域分割参数209与第一实施方式的区域分割器114同样分类解码图像信号204的区域，生成区域信息205(S37)。区域信息205被输入到滤波器处理器215。在滤波器处理器215中，与第一实施方式的滤波器处理器116同样地使用区域信息205以及滤波器信息210对解码图像信号204进行滤波处理，生成图像信号206(S38)。图像信号206被作为输出图像信号而输出(S39)，被蓄积到帧存储器213中(S40)。被蓄积到帧存储器213中的图像信号被作为参照图像信号而读出，并被输入到预测器216。在预测器216中使用参照图像信号207进行预测，生成预测图像信号208(S41)。预测图像信号208为了生成解码图像信号203而被输入到信号处理器212。确认编码数据的输入，如果存在编码数据的输入，则处理返回到步骤S32，如果没有编码数据的输入，则处理结束(S42)。

(第3实施方式)

使用图17对本发明的第3实施方式的运动图像编码装置进行说明。输入图像信号301被输入到信号处理器310。在图像信号处理部310中，生成预测图像信号305与输入图像信号301的残差信号，生成变换了残差信号(例如向DCT系数)的残差信息302，并将其输出。另外，根据预测图像信号305与残差信号302生成局部解码图像信号303并输出。残差信息302被输入到可变长编码器315，局部解码图像信号303被蓄积到帧存储器311中。对于信号处理器310的内部的结构，与使用图2说明的第1实施方式的例子相同即可。

从帧存储器311中读出的局部解码图像信号304被输入到预测器312、区域分割器313以及滤波器设计器314。在预测器312中，使用局部解码图像信号304进行预测，生成预测图像信号305。预测图像信号305被输入到信号处理器310。在区域分割器313中，与第1实施方式的区域分割器114同样地，按照预先决定的分类基准分类所输入的局部解码图像信号304的区域，生成表示区域与分类的对应的区域信息306。从区域分割器313中输出分类基准的计算以及基于该基准的分类中所需的区域分割参数307以及区域信息306。区域分割参数307被输入到可变长编码器315，区域信息306被输入到滤波器设计器314。在滤波器设计器314中，根据区域信息306、输入图像信号301以及局部解码图像信号304针对每个与区域对应的分类设计滤波器(滤波器系数)。与第1实施方式的滤波器设计器115同样地进行滤波器的设计即可。与设计的滤波器相关的滤波器信息308被输入到可变长编码器315。在可变长编码器315中，对残差信息302、区域分割参数307以及滤波器信息308进行可变长编码，生成包括这些代码的编码数据309。

(第4实施方式)

使用图18对本发明的第4实施方式的运动图像解码装置进行说明。作为解码对象的编码数据401，经由蓄积系统或者传送系统输入从图17的运动图像编码装置中输出的编码数据309。在解码对象的编码数据401中，包括残差信息、区域分割参数以及滤波器信息的代码。通过可变长解码器410对这些各代码进行解码，从而输出残差信息402、区域分割参数407以及滤波器信息408。残差信息402被输入到信号处理器411，区域分割参数407被输入到区域分割器414，滤波器信息408被输入到滤波器处理器415。在信号处理器411中根据残差信息402再生残差，根据预测图像信号405与再生的残差生成解码图像信号403。对于信号处理器的内部的结构，与使用图15说明的第2实施方式的例子相同即可。

解码图像信号403被输入到区域分割器414、滤波器处理器415以及帧存储器412。在区域分割器414中，进行与第3实施方式的区域分割器313同样的处理，根据区域分割参数407与解码图像信号403生成区域信息409。区域信息409被输入到滤波器处理器415。滤波器处理器415与第一实施方式的滤波器处理器116同样地使用区域信息409以及滤波器信息408对解码图像信号403进行滤波处理，生成图像信号406。图像信号406被作为输出图像信号而输出。蓄积在帧存储器412中的解码图像信号被作为参照图像而读出，并被输入到预测器413。在预测器413中使用参照图像信号404进行预测，生成预测图像信号405。预测图像信号405被输入到信号处理器411。

(第5实施方式)

对第5实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第1实施方式相同。在本实施方式的滤波器设计器115中，针对每个区域的分类指定是否应用滤波器，通过区域信息105、输入图像信号101以及局部解码图像104，针对应用滤波器的分类设计滤波器。对各分类是否应用滤波器的信息(以下，滤波器应用/非应用信息)与应用的分类的滤波器系数被作为滤波器信息而输出。

使用图19对滤波器设计器115进行说明。图19示出如区域分割器114的例子那样将区域2分类成平坦部与非平坦部，并对它们分别指定是否应用滤波器的情况下的滤波器设计器115的结构。区域信息105被输入到切换控制器149，局部解码图像信号104被输入到用于切换局部解码图像信号的切换器150，输入图像信号101被输入到用于切换输入图像信号的切换器151。

切换控制器149根据区域信息105对切换器150、切换器151、平坦部滤波器设计器152以及非平坦部滤波器设计器153进行控制。另外，切换控制器149对平坦部、非平坦部分别指定是否应用滤波器，输出滤波器应用/非应用信息146。在区域是平坦部，并且指定成在切换控制器149中对平坦部进行滤波处理的情况下，局部解码图像信号104以及输入图像信号101都被输入到平坦部滤波器设计器152。在区域是非平坦部，并且指定成在切换控制器149中对非平坦部进行滤波处理的情况下，局部解码图像信号104以及输入图像信号101都被输入到非平坦部滤波器设计器153。

在平坦部滤波器设计器152中，根据分类成平坦部的输入图像信号101以及局部解码图像信号104设计滤波器，输出平坦部的滤波器系数147。在非平坦部滤波器设计器153中，根据分类成非平坦部的输入图像信号101以及局部解码图像信号104设计滤波器，输出非平坦部的滤波器系数148。在平坦部滤波器设计器152以及非平坦部滤波器设计器153中，都根据输入图像信号101与局部解码图像信号104构成Wiener-Hopf方程式并求解，从而可以设计使输入图像信号101与对局部解码图像信号104进行滤波处理而得到的图像信号的平方误差成为最小的滤波器。

从切换控制器149中输出的滤波器应用/非应用信息146被输入到滤波器信息复用器154。在滤波器信息复用器154中，根据滤波器应用/非应用信息146选择滤波器信息中所需的滤波器系数，生成并输出将滤波器应用/非应用信息146与选择的滤波器系数复用后的滤波器信息106。例如，当指定成在切换控制器149中仅对平坦部应用滤波器的情况下，将图19所示的表的信息作为滤波器应用/非应用信息146而输出到滤波器信息复用器154，在滤波器信息复用器154中，生成并输出将应用了滤波器的平坦部的滤波器系数147与图19的滤波器应用/非应用信息复用后的滤波器信息106。滤波器处理器116根据区域信息105和滤波器信息106，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对局部解码图像信号104进行滤波处理，生成图像信号107。

使用图21对滤波器处理器116进行说明。图21示出如区域分割器114的例子那样将区域分类成平坦部与非平坦部，并对它们分别指定是否应用滤波器的情况下的滤波器处理器116的结构。区域信息105被输入到切换控制器161，局部解码图像信号104被输入到平坦部滤波器处理器162、非平坦部滤波器处理器163以及信号切换器164，滤波器信息106被输入到滤波器信息分离器160。在滤波器信息分离器160中滤波器信息106被分离成滤波器应用/非应用信息155以及滤波器系数。滤波器应用/非应用信息155被输入到切换控制器161。如果在滤波器信息106中存在平坦部的滤波器系数，则平坦部的滤波器系数156被输入到平坦部滤波器处理器162。如果在滤波器信息106中存在非平坦部的滤波器系数，则非平坦部的滤波器系数157被输入到非平坦部滤波器处理器163。

切换控制器161根据区域信息105与滤波器应用/非应用信息155对平坦部滤波器处理器162、非平坦部滤波器处理器163以及信号切换器164进行控制。在根据区域信息105区域是平坦部、并且根据滤波器应用/非应用信息155指定成对平坦部进行滤波处理的情况下，在平坦部滤波器处理器162中对局部解码图像信号104通过平坦部的滤波器系数156进行滤波处理，生成滤波处理后的图像信号158。从平坦部滤波器处理器162中输出滤波处理后的图像信号158，通过信号切换器164被输出到滤波器处理器116的外部。

在区域是非平坦部，并且指定成对非平坦部进行滤波处理的情况下，在非平坦部滤波器处理器163中对局部解码图像信号104通过非平坦部的滤波器系数157进行滤波处理，生成滤波处理后的图像信号159。从非平坦部滤波器处理器163中输出滤波处理后的图像信号159，通过信号切换器164输出到滤波器处理器116的外部。在区域是平坦部，并且指定成不对平坦部进行滤波处理的情况下，局部解码图像信号104通过信号切换器164被输出到滤波器处理器116的外部。区域是非平坦部、并且指定成不对非平坦部进行滤波处理的情况、与区域是平坦部、并且指定成不对平坦部进行滤波处理的情况相同。

(第6实施方式)

对第6实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图14所示的第2实施方式相同。在本实施方式中，滤波器处理器215进行与图21所示的第5实施方式的滤波器处理器116同样的动作。即，滤波器处理器116根据区域信息105和滤波器信息106，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像信号104进行滤波处理，生成图像信号107。

(第7实施方式)

对第7实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图17所示的第3实施方式相同。在本实施方式中，图17的滤波器设计器314进行与图19所示的第5实施方式的滤波器设计器115同样的动作。

(第8实施方式)

对第8实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图18所示的第4实施方式相同。在本实施方式中，滤波器处理器415进行与图21所示的第5实施方式的滤波器处理器116同样的动作。

(第9实施方式)

对第9实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第1实施方式相同。在本实施方式的滤波器设计器115中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类通过区域信息105、输入图像信号101以及局部解码图像104，从预先准备的滤波器中选择所应用的滤波器。指定滤波器应用/非应用信息与应用的分类的滤波器系数的信息被作为滤波器信息106而输出。

对于滤波器设计器115以如区域分割器114的例子那样将区域分类成平坦部与非平坦部的情况为例子，使用图22进行说明。区域信息105被输入到控制器168，局部解码图像信号104被输入到平坦部滤波器设计器169以及非平坦部滤波器设计器170，输入图像信号101被输入到平坦部滤波器设计器169以及非平坦部滤波器设计器170。控制器168根据区域信息105对平坦部滤波器设计器169以及非平坦部滤波器设计器170进行控制。另外，控制器168分别对平坦部以及非平坦部指定是否应用滤波器，输出滤波器应用/非应用信息165。

在区域是平坦部，并且在控制器168中指定成对平坦部进行滤波处理的情况下，在平坦部滤波器设计器169中根据局部解码图像信号104以及输入图像信号101从预先准备的滤波器系数中选择所应用的滤波器系数，输出表示所选择的滤波器系数的索引。例如，在提供了图23所示那样的滤波器系数及其索引的情况下，选择使输入图像信号与对局部解码图像进行滤波处理而得到的图像的误差成为最小的滤波器系数，输出与选择的滤波器系数对应的索引。索引166被输入到滤波器信息复用器171。在区域是非平坦部，并且在控制器168中指定成对非平坦部进行滤波处理的情况下，在非平坦部滤波器设计器170中与平坦部滤波器设计器169同样地选择滤波器系数，输出与其对应的索引。索引167被输入到滤波器信息复用器171。

在滤波器信息复用器171中，根据滤波器应用/非应用信息165选择滤波器信息中所需的索引，生成并输出复用了滤波器应用/非应用信息165以及选择的索引的滤波器信息。例如，在控制器168中指定成仅对平坦部应用滤波器、且在平坦部滤波器设计器169中选择了索引1的滤波器系数的情况下，图20所示的表的信息被作为滤波器应用/非应用信息165而输入到滤波器信息复用器171，在滤波器信息复用器171中，生成并输出复用了平坦部的滤波器系数的索引1与图20的滤波器应用/非应用信息的滤波器信息。

滤波器处理器116根据区域信息105和滤波器信息106，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对于应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对局部解码图像信号104进行滤波处理，生成图像信号107。

对于滤波器处理器116以如区域分割器114的例子那样将区域分类成平坦部与非平坦部的情况为例子，使用图24进行说明。区域信息105被输入到切换控制器178，局部解码图像信号104被输入到平坦部滤波器处理器179、非平坦部滤波器处理器180以及信号切换器181，滤波器信息106被输入到滤波器信息分离器177。在滤波器信息分离器177中滤波器信息106被分离成滤波器应用/非应用信息172以及滤波器系数的索引。滤波器应用/非应用信息172被输入到切换控制器178。如果在滤波器信息106中存在平坦部的滤波器系数的索引，则平坦部的滤波器系数的索引173被输入到平坦部滤波器处理器179。如果在滤波器信息106中存在非平坦部的滤波器系数的索引，则非平坦部的滤波器系数的索引174被输入到非平坦部滤波器处理器180。

切换控制器178根据区域信息105与滤波器应用/非应用信息172对平坦部滤波器处理器179、非平坦部滤波器处理器180以及信号切换器181进行控制。在根据区域信息105区域是平坦部，并且根据滤波器应用/非应用信息172指定成对平坦部进行滤波处理的情况下，在平坦部滤波器处理器179中从平坦部的滤波器系数的索引中选择滤波器系数，通过选择的滤波器系数对局部解码图像信号104进行滤波处理，生成滤波处理后的图像信号175。滤波处理后的图像信号175被从平坦部滤波器处理器179输出，通过信号切换器181被输出到滤波器处理器116的外部。

在区域是非平坦部，并且指定成对非平坦部进行滤波处理的情况下，在非平坦部滤波器处理器180中从非平坦部的滤波器系数的索引中选择滤波器系数，通过选择的滤波器系数对局部解码图像信号104进行滤波处理，生成滤波处理后的图像信号176。从非平坦部滤波器处理器180中输出滤波处理后的图像信号176，通过信号切换器181输出到滤波器处理器116的外部。在区域是平坦部，并且指定成不对平坦部进行滤波处理的情况下，局部解码图像信号104通过信号切换器181被输出到滤波器处理器116的外部。区域是非平坦部并且指定成不对非平坦部进行滤波处理的情况、与区域是平坦部并且指定成不对平坦部进行滤波处理的情况相同。

(第10实施方式)

对第10实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图14所示的第2实施方式相同。在本实施方式中，滤波器处理器215进行与图24所示的第9实施方式的滤波器处理器116同样的动作。

(第11实施方式)

对第11实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图17所示的第3实施方式相同。在本实施方式中，滤波器设计器115进行与图22所示的第9实施方式的滤波器设计器同样的动作。

(第12实施方式)

对第12实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图18所示的第4实施方式相同。在本实施方式中，滤波器处理器415进行与图24所示的第9实施方式的滤波器处理器116同样的动作。

(第13实施方式)

使用图25对第13实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第1实施方式相同。但是，对区域分割器514不输入来自信号处理器512的局部解码图像信号503，而代替地对区域分割器514输入来自预测器517的预测模式信息519的点与第1实施方式不同。在区域分割器514中通过预测模式信息519，生成并输出表示区域与分类的对应的区域信息505。进而，作为分类中所需的区域分割参数511而输出预测模式信息。

例如，设为作为预测模式信息，在块单位中有画面内预测模式以及画面间预测模式这2种。此时在区域分割器514中，通过预测模式信息519，区域被分类成作为画面内预测模式的块(以下，画面内预测块)以及作为画面间预测模式的块(以下，画面间预测块)。通过以上的处理形成区域与分类的对应。因此，作为表示区域与分类的对应的区域信息，可以构成图26所示的表。从区域分割器514，作为区域分割参数511而输出预测模式信息，作为区域信息505而输出图26所示的表。

在预测器517中按照块单位进行了小数像素精度的运动补偿预测的情况下，也可以将预测模式信息519设为各块的运动矢量，并通过运动矢量指示小数像素位置还是指示整数像素位置来分类块。

(第14实施方式)

使用图27对第14实施方式的运动图像解码装置进行说明。与本实施方式有关的运动图像解码装置的基本结构与第2实施方式相同。但是，对区域分割器614不输入来自帧存储器613的解码图像信号604的点与第2实施方式不同。在区域分割器614中，通过区域分割参数609，与第13实施方式的区域分割器514同样地分类图像，生成区域信息605。

(第15实施方式)

使用图28对第15实施方式的运动图像编码装置进行说明。与本实施方式有关的运动图像编码装置的基本结构与第3实施方式相同。但是，对区域分割器713不输入来自信号处理器710的局部解码图像信号703，而代替地输入来自预测器712的预测模式信息716的点与第3实施方式不同。在区域分割器713中通过预测模式信息716，生成并输出表示区域与分类的对应的区域信息706。进而作为分类中所需的区域分割参数707而输出预测模式信息。作为预测模式信息，可以与第13实施方式的例子同样地，使用画面内/画面间预测模式、运动矢量。

(第16实施方式)

使用图29对第16实施方式的运动图像解码装置进行说明。与本实施方式有关的运动图像解码装置的基本结构与第4实施方式相同。但是，对区域分割器814不输入来自帧存储器812的解码图像信号804的点与第4实施方式不同。在区域分割器814中，通过区域分割参数807，与第15实施方式的区域分割器713同样地分类图像，生成区域信息809。

(第17实施方式)

对第17实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图25所示的第13实施方式相同。在本实施方式的滤波器设计器515中，针对每个区域的分类指定是否应用滤波器，通过区域信息505、输入图像信号501以及局部解码图像信号504，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息506而输出。

滤波器处理器516根据区域信息505和滤波器信息506，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对局部解码图像信号504进行滤波处理，生成图像信号507。

(第18实施方式)

对第18实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图27所示的第14实施方式相同。在本实施方式中，滤波器处理器615进行与第17实施方式的滤波器处理器516同样的动作。即，滤波器处理器615根据区域信息605与滤波器信息610，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像信号604进行滤波处理，生成图像信号507。

(第19实施方式)

对第19实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图28所示的第15实施方式相同。在本实施方式中，滤波器设计器714进行与第17实施方式的滤波器设计器515同样的动作。即，在滤波器设计器714中，针对每个区域的分类指定是否应用滤波器，通过区域信息706、输入图像信号701以及局部解码图像信号704，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息708而输出。

(第20实施方式)

对第20实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图29所示的第16实施方式相同。在本实施方式中，滤波器处理器815进行与第17实施方式的滤波器处理器516同样的动作。即，滤波器处理器815根据区域信息809和滤波器信息808，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像信号803进行滤波处理，生成图像信号806。

(第21实施方式)

对第21实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图25所示的第13实施方式相同。在本实施方式的滤波器设计器515中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息505、输入图像信号501、以及局部解码图像504，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息506而输出。

滤波器处理器516根据区域信息505和滤波器信息506，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对局部解码图像信号504进行滤波处理，生成图像信号507。

(第22实施方式)

对第22实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图27所示的第14实施方式相同。在本实施方式中，滤波器处理器615进行与第21实施方式的滤波器处理器516同样的动作。即，滤波器处理器615根据区域信息605和滤波器信息610，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号604进行滤波处理，生成图像信号606。

(第23实施方式)

对第23实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图28所示的第15实施方式相同。本实施方式的滤波器设计器714进行与第21实施方式的滤波器设计器516同样的动作。

(第24实施方式)

对第24实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图29所示的第16实施方式相同。本实施方式的滤波器处理器815进行与第21实施方式的滤波器处理器516同样的动作。

(第25实施方式)

使用图30对第25实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第1实施方式的图2相同。但是，对区域分割器926不输入来自加法器的局部解码图像信号，而代替地输入来自量化器918的量化参数的点与第1实施方式不同。在区域分割器926中通过量化参数929，生成并输出表示区域与分类的对应的区域信息914。进而作为分类中所需的区域分割参数913而输出量化参数。

例如，设为在块单位中存在量化参数。此时在区域分割器926中，可以通过量化参数是否超过预先决定的阈值而将各块分类成被较细得量化的区域以及被较粗得量化的区域。通过以上的处理，形成区域与分类的对应。因此，作为表示区域与分类的对应的区域信息，可以构成图31所示的表。从区域分割器926，作为区域分割参数913输出量化参数与阈值，作为区域信息914输出图31所示的表的信息。

(第26实施方式)

使用图32对第26实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第2实施方式的图15相同。但是，对区域分割器1017不输入来自帧存储器1019的解码图像信号的点不同。在区域分割器1017中，通过区域分割参数，与第25实施方式的区域分割器926同样地进行分类，生成区域信息1007。

(第27实施方式)

使用图33对第27实施方式的运动图像编码装置进行说明。与本实施方式有关的运动图像编码装置的基本结构与信号处理部具有与图2同样的结构的第3实施方式相同。但是，对区域分割器1123不输入来自帧存储器1108的局部解码图像信号，而代替地输入来自量化器1116的量化参数的点与第3实施方式不同。在区域分割器1123中通过预先决定的阈值与量化参数1125，生成并输出表示区域与分类的对应的区域信息1111。进而作为分类中所需的区域分割参数1112而输出量化参数与阈值。

(第28实施方式)

使用图34对第28实施方式的运动图像解码装置进行说明。与本实施方式有关的运动图像解码装置的基本结构与信号处理部具有与图15同样的结构的第4实施方式相同。但是，对区域分割器1218不输入来自帧存储器1216的解码图像信号的点与第4实施方式不同。在区域分割器1218中，通过区域分割参数1209与第27实施方式的区域分割器1123同样地进行分类，生成区域信息1211。

(第29实施方式)

对第29实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图30所示的第25实施方式相同。在本实施方式的滤波器设计器928中，针对每个区域的分类指定是否应用滤波器，通过区域信息914、输入图像信号901以及局部解码图像信号908，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息而输出。

滤波器处理器928根据区域信息914和滤波器信息915，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对局部解码图像信号908进行滤波处理，生成图像信号909。

(第30实施方式)

对第30实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图32所示的第26实施方式相同。本实施方式的滤波器处理器进行与第29实施方式的滤波器处理器928同样的动作。即，滤波器处理器1018根据区域信息1007和滤波器信息1012，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像信号1006进行滤波处理，生成图像信号1008。

(第31实施方式)

对第31实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图33所示的第27实施方式相同。本实施方式的滤波器设计器进行与第29实施方式的滤波器设计器927同样的动作。即，在滤波器设计器1124中，针对每个区域的分类指定是否应用滤波器，通过区域信息1111、输入图像信号1101、以及局部解码图像信号1108，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息1113而输出。

(第32实施方式)

对第32实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图34所示的第28实施方式相同。本实施方式的滤波器处理器进行与第29实施方式的滤波器处理器928同样的动作。即，滤波器处理器1219根据区域信息1211和滤波器信息1210，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像信号1205进行滤波处理，生成图像信号1208。

(第33实施方式)

对第33实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图30所示的第25实施方式相同。在本实施方式的滤波器设计器927中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息914、输入图像信号901以及局部解码图像908，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息915而输出。

滤波器处理器928根据区域信息914和滤波器信息915，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对局部解码图像信号908进行滤波处理，生成图像信号909。

(第34实施方式)

对第34实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图32所示的第26实施方式相同。本实施方式的滤波器处理器进行与第33实施方式的滤波器处理器928同样的动作。即，滤波器处理器1018根据区域信息1007和滤波器信息1012，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号1006进行滤波处理，生成图像信号1008。

(第35实施方式)

对第35实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图33所示的第27实施方式相同。本实施方式的滤波器设计器1124进行与第33实施方式的滤波器设计器927同样的动作。即，在滤波器设计器1124中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息1111、输入图像信号1101以及局部解码图像1108，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息1113而输出。

(第36实施方式)

对第36实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图34所示的第28实施方式相同。本实施方式的滤波器处理器进行与第33实施方式的滤波器处理器928同样的动作。即，滤波器处理器1219根据区域信息1211和滤波器信息1210，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号1205进行滤波处理，生成图像信号1208。

(第37实施方式)

对第37实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图1所示的第1实施方式相同。在本实施方式中，预先与解码装置公共地设定，以使滤波处理中使用的局部解码图像的像素的范围(以下，设为滤波器窗尺寸)针对每个区域成为不同，用针对每个区域不同的滤波器窗尺寸进行滤波处理。

以将区域2分类成平坦部与非平坦部的情况为例子而进行说明。预先针对平坦部设定成较大的滤波器窗尺寸，针对非平坦部设定成较小的滤波器窗尺寸。例如在平坦部的情况下，在式(9)中设为N＝3，在非平坦部的情况下设为N＝1。在滤波器处理器116的平坦部滤波器处理器143以及非平坦部滤波器处理器144中根据预先设定的值来进行滤波处理。

通过针对包括图像的边缘等的非平坦部设定成较小的滤波器窗尺寸，可以抑制滤波器的平滑化效果，提高滤波处理后的图像的边缘的再现性。

对于第2、4、6、8实施方式的解码装置、第5实施方式的编码装置也可以同样地通过针对每个区域不同的预先决定的滤波器窗尺寸来进行滤波处理。

(第38实施方式)

使用图36对第38实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图1所示的第1实施方式相同。但是，追加滤波器窗尺寸设定器1320，从滤波器窗尺寸设定器1320中输出的滤波器窗尺寸的信息1319被输入到滤波器设计器1315、滤波器处理器1316、以及可变长编码器1318的点不同。

在滤波器窗尺寸设定器1320中，针对每个分类的区域设定滤波器窗尺寸，输出所设定的滤波器窗尺寸的信息1319。对于滤波器窗尺寸的设定，既可以由操作编码器的作业者与要编码的映像配合地经验性地设定，或者也可以事先用几个不同的滤波器窗尺寸进行映像的假编码，选择并设定进行滤波处理而得到的图像是高画质的滤波器窗尺寸。

在滤波器设计器1315中，使用输入图像1301、局部解码图像1304、区域信息1305以及滤波器窗尺寸的信息1319，针对每个区域构成Wiener-Hopf方程式并求解，从而可以针对每个区域设计使对局部解码图像信号1304进行滤波处理而得到的图像与输入图像信号1301的平方误差成为最小的滤波器。输出与设计的滤波器系数相关的滤波器信息1306。

在滤波器处理器1316中，使用区域信息1305、局部解码图像1304、滤波器信息1306以及滤波器窗尺寸信息1319进行滤波处理，生成图像信号1307。使用通过滤波器窗尺寸信息1319针对每个区域指定的滤波器窗尺寸来进行滤波处理。图像信号1307被存储在帧存储器1313中。从该帧存储器1313读出的图像信号1308用于在预测器1317中生成预测信号1309。

在可变长编码器1318中，对残差信息1302、区域分割参数1311、滤波器信息1306以及滤波器窗尺寸信息1319进行可变长编码，生成包括这些代码的编码数据。

(第39实施方式)

使用图37对第39实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图14所示的第2实施方式相同。但是，从可变长解码器1411输出的滤波器窗尺寸信息1417被输入到滤波器处理器1415的点与第2实施方式不同。在本实施方式中经由蓄积系统或者传送系统被输入从第38实施方式的运动图像编码装置中输出的编码数据。

在可变长解码器1411中，对编码数据1401进行解码，输出残差信息1402、区域分割参数1409、滤波器信息1410以及滤波器窗尺寸信息1417。

在滤波器处理器1415中，使用区域信息1405、解码图像信号1404、滤波器信息1410以及滤波器窗尺寸信息1417进行滤波处理，生成图像信号1406。使用通过滤波器窗尺寸信息1417针对每个区域指定的滤波器窗尺寸来进行滤波处理。

另外，信号处理器1412、帧存储器1413、区域分割器1414以及预测器1416分别对应于图14的信号处理器212、帧存储器213、区域分割器214以及预测器216。另外，信号1403、1407以及1408分别对应于图14的信号203、207以及208。

(第40实施方式)

使用图38对第40实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图17所示的第3实施方式相同。但是，追加滤波器窗尺寸设定器1517，从滤波器窗尺寸设定器1517输出的滤波器窗尺寸信息1516被输入到滤波器设计器1514以及可变长编码器1515的点不同。

在滤波器窗尺寸设定器1517中，与第38实施方式的滤波器窗尺寸设定器1320同样地设定滤波器窗尺寸，输出所设定的滤波器窗尺寸信息1516。

在滤波器设计器1514中，与第38实施方式的滤波器设计器1315同样地设计每个区域的滤波器，输出滤波器信息1508。

在可变长编码器1515中，与第38实施方式的可变长编码器1318同样地输出编码数据1509。

另外，信号处理器1510、帧存储器1511、预测器1512以及区域分离器1513分别对应于图17的信号处理器310、帧存储器311、预测器312、以及区域分离器313。另外，信号1501、1502、1503、1504、1505、1506以及1507分别对应于图17的信号301、302、303、304、305、306以及307。

(第41实施方式)

使用图39对第41实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图18所示的第4实施方式相同。但是，从可变长解码器1610中输出的滤波器窗尺寸的信息1616被输入到滤波器处理器1615的点与第4实施方式不同。在本实施方式中经由蓄积系统或者传送系统输入从第40实施方式的运动图像编码装置中输出的编码数据。

在可变长解码器1610中，对编码数据1601进行解码，输出残差信息1602、区域分割参数1607、滤波器信息1608以及滤波器窗尺寸信息1616。

在滤波器处理器1615中，使用区域信息1609、解码图像信号1603、滤波器信息1608以及滤波器窗尺寸信息1616进行滤波处理，生成图像信号1606。使用针对每个区域指定的滤波器窗尺寸来进行滤波处理。

另外，信号处理器1611、帧存储器1612、区域分割器1614以及预测器1613分别对应于图18的信号处理器411、帧存储器412、区域分割器414以及预测器413。另外，信号1604以及1605分别对应于图18的信号404以及405。

(第42实施方式)

对第42实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第5实施方式相同。基本结构的图与第38实施方式的图36相同，所以使用图36进行说明。与第5实施方式不同的点在于，追加了滤波器窗尺寸设定器1320，从滤波器窗尺寸设定器1320输出的滤波器窗尺寸的信息1319被输入到滤波器设计器1315、滤波器处理器1316以及可变长编码器1318。在滤波器窗尺寸设定器1320中，针对与第38实施方式同样地分类的每个区域设定滤波器窗尺寸，输出所设定的滤波器窗尺寸信息1319。

在滤波器设计器1315中，使用输入图像1301、局部解码图像1304、区域信息1305以及滤波器窗尺寸信息1319，针对应用了滤波器的区域构成Wiener-Hopf方程式并对其求解，从而可以设计使对局部解码图像信号1304进行滤波处理而得到的图像与输入图像信号1301的平方误差成为最小的滤波器。输出与针对应用滤波器的区域设计的滤波器系数相关的滤波器信息1306。

在滤波器处理器1316中，使用区域信息1305、局部解码图像1304、滤波器信息1306以及滤波器窗尺寸信息1319进行滤波处理，生成图像信号1307。针对通过滤波器信息1306指定成使用滤波器的区域，使用通过滤波器窗尺寸信息1319指定的滤波器窗尺寸来进行滤波处理。

在可变长编码器1318中，对残差信息1302、区域分割参数1311、滤波器信息1306以及滤波器窗尺寸信息1319进行可变长编码，生成包括这些代码的编码数据。但是，对于滤波器窗尺寸的信息1319，仅对针对通过滤波器信息1306指定成使用滤波器的区域的滤波器窗尺寸的信息进行编码。

(第43实施方式)

对第43实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第6实施方式相同。基本结构的图与第39实施方式的图37相同，所以使用图37进行说明。与第6实施方式的不同点在于，从可变长解码器1411中输出的滤波器窗尺寸信息1417被输入到滤波器处理器1415。在本实施方式中从第42实施方式的运动图像编码装置中输出的编码数据经由蓄积系统或者传送系统被输入到运动图像解码装置。在可变长解码器1411中，对编码数据1401进行解码，输出残差信息1402、区域分割参数1409、滤波器信息1410以及滤波器窗尺寸信息1417。

在滤波器处理器1415中，使用区域信息1405、解码图像信号1404、滤波器信息1410以及滤波器窗尺寸信息1417进行滤波处理，生成图像信号1406。针对通过滤波器信息1410指定成应用滤波处理的区域，使用通过滤波器窗尺寸的信息1417指定的滤波器窗尺寸来进行滤波处理。

(第44实施方式)

对第44实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第7实施方式相同。基本结构的图与第40实施方式的图38相同，所以使用图38进行说明。与第7实施方式的不同点在于，追加了滤波器窗尺寸设定器1517，从滤波器窗尺寸设定器1517中输出的滤波器窗尺寸的信息1516被输入到滤波器设计器1514以及可变长编码器1515。在滤波器窗尺寸设定器1517中，与第38实施方式的滤波器窗尺寸设定器1320同样地设定滤波器窗尺寸，输出所设定的滤波器窗尺寸的信息1516。

在滤波器设计器1514中，与第42实施方式的滤波器设计器同样地针对应用滤波器的区域设计滤波器，输出滤波器信息1508。在可变长编码器1515中，与第42实施方式的可变长编码器1318同样地输出编码数据1509。

(第45实施方式)

对第45实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第8实施方式相同。基本结构的图与第41实施方式的图39相同，所以使用图39进行说明。与第8实施方式的不同点在于，从可变长解码器1610中输出的滤波器窗尺寸的信息1616被输入到滤波器处理器1615。在本实施方式中从第44实施方式的运动图像编码装置中输出的编码数据经由蓄积系统或者传送系统被输入到运动图像解码装置。在可变长解码器1610中，对编码数据1601进行解码，输出残差信息1602、区域分割参数1607、滤波器信息1608以及滤波器窗尺寸的信息1616。在滤波器处理器1615中，与第43实施方式的滤波器处理器1415同样地进行滤波处理。

(第46实施方式)

对第46实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图25所示的第13实施方式相同。在本实施方式中，特别从预测器输出的预测模式信息519是表示单向预测/双向预测的信息。

例如，作为预测模式信息519，在块单位中有画面间单向预测模式以及画面间双向预测模式这2种。此时在区域分割器514中，将区域分类成为画面间单向预测模式的块以及为画面间双向预测模式的块。

通过这样分类，可以针对由于画面内双向预测的平滑化效果而图像变得模糊的区域，应用平滑化效果低的滤波器。因此，可以防止由于画面内双向预测的平滑化效果与滤波器的平滑化效果而使图像过度地模糊。

对于第14、16、18、20、22以及24实施方式的解码装置、以及第15、17、19、21以及23实施方式的编码装置，也可以同样地通过表示单向预测以及双向预测的信息而分类区域来进行编码以及解码。

(第47实施方式)

对第47实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图25所示的第13实施方式相同。在本实施方式中，特别设为从预测器输出的预测模式信息519是运动补偿预测中使用的块尺寸的信息。例如，设运动补偿预测中使用的块尺寸是4×4或者8×8。此时从预测器中作为预测模式信息而输出用于运动补偿预测的块尺寸的信息，在区域分割器中使用该信息分类成按照4×4块进行运动补偿预测的区域以及按照8×8块进行运动补偿预测的区域。

对于第14、16、18、20、22以及24实施方式的解码装置、以及第15、17、19、21以及23实施方式的编码装置，也可以同样地通过运动补偿预测中使用的块尺寸的信息而分类区域来进行编码以及解码。

(第48实施方式)

使用图40对第48实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第1实施方式的图2相同。但是，对区域分割器1726不输入来自帧存储器1723的局部解码图像1708，而代替地输入来自正交变换器1717的正交变换的块尺寸的信息1729的点与第1实施方式不同。在区域分割器1726中通过正交变换的块尺寸的信息1729，生成并输出表示区域与分类的对应的区域信息1714。进而作为分类中所需的区域分割参数1713而输出正交变换的块尺寸的信息1729。例如，作为正交变换的块尺寸存在4×4以及8×8这2种。此时，在区域分割器1726中，通过按照4×4块单位进行正交变换、还是按照8×8块单位进行正交变换，将区域分类成两个。由此，可以与根据变换尺寸而性质不同的编码失真相应地进行滤波处理。

(第49实施方式)

使用图32对第49实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第2实施方式的图15相同。但是，对区域分割器1017不输入来自帧存储器1019的解码图像的点与第2实施方式不同。在本实施方式中，从第48实施方式的运动图像编码装置中输出的编码数据被输入到可变长解码器1013。在可变长解码器1013中，对编码数据1001进行解码，输出区域分割参数1011、滤波器信息1012。区域分割参数1011是正交变换的块尺寸的信息。

(第50实施方式)

使用图41对第50实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与具有和第1实施方式的图2同样的结构的信号处理部的第3实施方式相同。但是，对区域分割器1823不输入来自帧存储器1820的局部解码图像，而代替地输入来自正交变换器1815的正交变换的块尺寸的信息1825的点与第3实施方式不同。在区域分割器1823中通过正交变换的块尺寸的信息1825，生成并输出表示区域与分类的对应的区域信息1811。进而作为分类中所需的区域分割参数1812而输出正交变换的块尺寸的信息1825。

另外，减法器1814、量化器1816、逆量化器1817、逆正交变换器1818、加法器1819、预测器1821、可变长编码器1822以及滤波器设计器1824分别对应于图2的减法器123、量化器125、逆量化器126、逆正交变换器127以及加法器128、以及图17的预测器312、可变长编码器315以及滤波器设计器314。另外，信号1801、1802、1803、1804、1805、1806、1807、1808、1809、1810以及1813分别对应于图2的信号101、119、120、102、121以及122、以及图17的信号303、304、305、309以及308。

(第51实施方式)

使用图34对第51实施方式的运动图像解码装置进行说明。与本实施方式有关的运动图像解码装置的基本结构与具有和第2实施方式的图15同样的结构的信号处理部的第4实施方式相同。但是，对区域分割器1218不输入来自帧存储器1216的解码图像的点与第4实施方式不同。在本实施方式中，从第50实施方式的运动图像编码装置中输出的编码数据被输入到可变长解码器1212。在可变长解码器1212中，对编码数据1201进行解码，输出区域分割参数1209、滤波器信息1210。区域分割参数1209是正交变换的块尺寸的信息。

(第52实施方式)

对第52实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图40所示的第48实施方式相同。在本实施方式的滤波器设计器1727中，针对每个区域的分类指定是否应用滤波器，通过区域信息1714、输入图像信号1701以及局部解码图像信号1708，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息1715而输出。

滤波器处理器1728根据区域信息1714和滤波器信息1715，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对局部解码图像信号1708进行滤波处理，生成图像信号1709。

(第53实施方式)

对第53实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图32所示的第49实施方式相同。本实施方式的滤波器处理器1018进行与第52实施方式的滤波器处理器1727同样的动作。即，滤波器处理器1080根据区域信息1011和滤波器信息1012，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像信号1006进行滤波处理，生成图像信号1008。

(第54实施方式)

对第54实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图41所示的第50实施方式相同。本实施方式的滤波器设计器1824进行与第52实施方式的滤波器设计器1727同样的动作。即，在滤波器设计器1824中，针对每个区域的分类指定是否应用滤波器，通过区域信息1811、输入图像信号1801以及局部解码图像信号1808，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息1813而输出。

(第55实施方式)

对第55实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图34所示的第51实施方式相同。本实施方式的滤波器处理器1219进行与第52实施方式的滤波器处理器1728同样的动作。即，滤波器处理器1219根据区域信息1211和滤波器信息1210，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像信号1205进行滤波处理，生成图像信号1208。

(第56实施方式)

对第56实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图40所示的第48实施方式相同。在本实施方式的滤波器设计器1727中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息1714、输入图像信号1701、以及局部解码图像信号1708，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息1715而输出。

滤波器处理器1728根据区域信息1714和滤波器信息1715，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对局部解码图像信号1708进行滤波处理，生成图像信号1709。

(第57实施方式)

对第57实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图32所示的第49实施方式相同。本实施方式的滤波器处理器1018进行与第56实施方式的滤波器处理器1728同样的动作。即，滤波器处理器1018根据区域信息1007和滤波器信息1012，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像1006进行滤波处理，生成图像信号1008。

(第58实施方式)

对第58实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图41所示的第50实施方式相同。本实施方式的滤波器设计器1824进行与第56实施方式的滤波器设计器1727同样的动作。即，在滤波器设计器1824中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息1811、输入图像信号1801以及局部解码图像信号1808，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息作为滤波器信息1813而输出。

(第59实施方式)

对第59实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图34所示的第51实施方式相同。本实施方式的滤波器处理器1219进行与第56实施方式的滤波器处理器1728同样的动作。即，滤波器处理器1219根据区域信息1211和滤波器信息1210，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号1205进行滤波处理，生成图像信号1208。

(第60实施方式)

使用图42对第60实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第1实施方式的图2相同。但是，对区域分割器1926不输入来自帧存储器1923的局部解码图像信号1908，而代替地输入来自逆正交变换器的残差信号1906的点与第1实施方式不同。

在区域分割器1926中成为基本的分类处理与第1实施方式的区域分割器114相同。但是，并非按照像素单位计算分类基准，而在块单位中进行计算的点与第1实施方式不同。在将针对按照光栅扫描顺序处于位置i的块的分类基准设为C(i)时，通过分类基准C(i)是否小于预先决定的阈值T来分类区域。对于阈值T，也可以从图42的对运动图像编码装置进行控制的外部的编码控制器提供值。

作为分类基准，可以使用按照光栅扫描的顺序处于位置i的块的残差信号的绝对值和、即通过下式(11)求出的绝对值和。

[式11]

$C_{\mathrm{SAD}}\left(i\right)=\underset{(x,y)\∈B\left(i\right)}{\mathrm{\Σ}}\left|R(x,y)\right|---\left(11\right)$

此处，设为R(x、y)是位置(x、y)的残差信号，B(i)是按照光栅扫描的顺序处于位置i的块中包含的坐标(x、y)的集合。

另外，可以将按照光栅扫描的顺序处于位置i的块的残差信号的平方和、即通过下式(12)求出的平方和用作分类基准。

[式12]

$C_{\mathrm{SSD}}\left(i\right)=\underset{(x,y)\∈B\left(i\right)}{\mathrm{\Σ}}{\left(R(x,y)\right)}^2---\left(12\right)$

另外，可以将按照光栅扫描的顺序处于位置i的块的残差信号的分散、即通过下式(13)求出的分散用作分类基准。

[数13]

$C_{\mathrm{var}}\left(i\right)=\underset{(x,y)\∈\left(i\right)}{\mathrm{\Σ}}{(R(x,y)-\frac{1}{\left|B\left(i\right)\right|}\underset{(x,y)\∈B\left(i\right)}{\mathrm{\Σ}}R(x,y))}^2---\left(13\right)$

从区域分割器1926输出区域分割参数1913与区域信息1914。此处，作为区域分割参数而输出阈值T。

另外，减法器1916、正交变换器1917、量化器1918、逆量化器1919、逆正交变换器1920、加法器1921、预测器1924、可变长编码器1925、滤波器设计器1927以及滤波器处理器1928分别对应于图2的减法器123、正交变换器124、量化器125、逆量化器126、逆正交变换器127、加法器128、预测器117、可变长编码器118、滤波器设计器115以及滤波器处理器116。另外，信号1901、1902、1903、1904、1905、1907、1909、1910、1911、1912以及1915分别对应于图2的101、119、120、102、121、103、107、108、109、110以及106。

(第61实施方式)

使用图43对第61实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第2实施方式的图15相同。但是，对区域分割器2017不输入来自帧存储器2019的解码图像信号，而输入来自逆正交变换器2015的残差信号2004的点与第2实施方式不同。

在本实施方式中从第60实施方式的编码装置中输出的编码数据被输入到可变长解码器2013。在可变长解码器2013中，对编码数据2001进行解码，输出区域分割参数2011、滤波器信息2012。区域分割参数2011是用于在区域分割器2017中分类区域的阈值。在区域分割器2017中，通过残差信号2004以及区域分割参数2011，与第60实施方式的区域分割器1926同样地分类区域，生成区域信息2007。

另外，逆量化器2014、加法器2016、滤波器处理器2018以及预测器2020分别对应于图15的逆量化器219、加法器221、滤波器处理器215以及预测器216。另外，信号2002、2003、2005、2006、2008、2009以及2010分别对应于图15的信号202、217、203、204、206、207以及208。

(第62实施方式)

使用图44对第62实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与具有和第1实施方式的图2同样的结构的信号处理部的第3实施方式相同。但是，对区域分割器2123不输入来自帧存储器2120的局部解码图像，而代替地输入来自逆正交变换器2118的残差信号2106的点与第3实施方式不同。在区域分割器2123中，通过残差信号2106，与第60实施方式的区域分割器同样地分类区域，输出区域分割参数2112与区域信息2111。此处作为区域分割参数2112而输出的是在区域的分类中使用的阈值。

另外，减法器2114、正交变换器2115、量化器2116、逆量化器2117、逆正交变换器2118、加法器2119、预测器2121、可变长编码器2122、以及滤波器设计器2124分别对应于图2的减法器123、正交变换器124、量化器125、逆量化器126、逆正交变换器127以及加法器128、以及图16的预测器312、可变长编码器315以及滤波器设计器314。另外，信号2101、2102、2103、2104、2105、2107、2108、2109、2110以及2113分别对应于图2的信号101、119、120、102以及121、以及图16的信号303、304、305、309以及308。

(第63实施方式)

使用图45对第63实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与具有和第2实施方式的图15同样的结构的信号处理部的第4实施方式相同。但是，对区域分割器2218不输入来自帧存储器2216的解码图像信号，而输入来自逆正交变换器2214的残差信号2204的点与第4实施方式不同。

在本实施方式中从第62实施方式的编码装置中输出的编码数据被输入到可变长解码器2212。在可变长解码器2212中，对编码数据2201进行解码，输出区域分割参数2209以及滤波器信息2210。区域分割参数2209是用于在区域分割器2218中分类区域的阈值。在区域分割器2218中，通过残差信号2204以及区域分割参数2209，与第60实施方式的区域分割器1926同样地分类区域，生成区域信息2211。

另外，逆量化器2213、加法器2215、预测器2217以及滤波器处理器2219分别对应于图15的逆量化器219以及减法器221、以及图17的预测器413以及滤波器处理器415。另外，信号2202、2203、2205、2206、2207、2208以及2210分别对应于图15的信号202以及217、以及图17的信号403、404、405、406以及408。

(第64实施方式)

对第64实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图42所示的第60实施方式相同。在本实施方式的滤波器设计器1927中，针对每个区域的分类指定是否应用滤波器，通过区域信息1914、输入图像信号1901以及局部解码图像信号1908，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息1915而输出。

滤波器处理器1928根据区域信息1914和滤波器信息1915，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对局部解码图像信号1908进行滤波处理，生成图像信号1909。

(第65实施方式)

对第65实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图43所示的第61实施方式相同。本实施方式的滤波器处理器2018进行与第64实施方式的滤波器处理器1928同样的动作。即，滤波器处理器2018根据区域信息2007和滤波器信息2012，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像2006进行滤波处理，生成图像信号2008。

(第66实施方式)

对第66实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图44所示的第62实施方式相同。本实施方式的滤波器设计器2124进行与第64实施方式的滤波器设计器1927同样的动作。即，在滤波器设计器2124中，针对每个区域的分类指定是否应用滤波器，通过区域信息2111、输入图像信号2101以及局部解码图像2108，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息2113而输出。

(第67实施方式)

对第67实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图45所示的第63实施方式相同。本实施方式的滤波器处理器2219进行与第64实施方式的滤波器处理器1928同样的动作。即，滤波器处理器2219根据区域信息2211和滤波器信息2210，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像2205进行滤波处理，生成图像信号2208。

(第68实施方式)

对第68实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图42所示的第60实施方式相同。在本实施方式的滤波器设计器1927中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息1914、输入图像信号1901、以及局部解码图像1908，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息1915而输出。

滤波器处理器1928根据区域信息1914和滤波器信息1915，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对局部解码图像1908进行滤波处理，生成图像信号1909。

(第69实施方式)

对第69实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图43所示的第61实施方式相同。本实施方式的滤波器处理器2018进行与第68实施方式的滤波器处理器1928同样的动作。即，滤波器处理器2018根据区域信息2007和滤波器信息2012，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号2006进行滤波处理，生成图像信号2008。

(第70实施方式)

对第70实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图44所示的第62实施方式相同。本实施方式的滤波器设计器2124进行与第68实施方式的滤波器设计器1927同样的动作。即，在滤波器设计器2124中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息2111、输入图像信号2101以及局部解码图像信号2108，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息2113而输出。

(第71实施方式)

对第71实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图45所示的第63实施方式相同。本实施方式的滤波器处理器2219进行与第68实施方式的滤波器处理器1928同样的动作。即，滤波器处理器2219根据区域信息2211和滤波器信息2210，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号2205进行滤波处理，生成图像信号2208。

(第72实施方式)

使用图46对第72实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第13实施方式的图25相同。但是，对区域分割器2314不输入来自预测器2317的预测模式信息，而代替地从编码控制器2320中输入与有无残差相关的信息2319的点；以及从编码控制器2320对可变长编码器2318输入与有无残差相关的信息的点；以及不从区域分割器2314向可变长编码器2318输出区域分割参数的点与第13实施方式不同。

区域分割器2314使用从编码控制器2320输入的与有无残差相关的信息，将区域分类成存在残差的区域以及不存在残差的区域。对于输入的与有无残差相关的信息，例如，可以使用与表示在H.264/MPEG-4AVC中以跳越模式对宏块进行了编码的语法元素即mb_skip_flag相当的语法元素、和与表示存在宏块的残差的块的语法元素即coded_block_pattern相当的语法元素。

在可变长编码器2318中，对残差信息2302、滤波器信息2306以及与有无残差相关的信息2319进行编码。

在不存在残差的区域中，在预测图像由于双向预测的平滑化效果、小数像素位置的内插滤波器的平滑化效果而产生了模糊的情况下，将预测图像原样地用作局部解码图像，所以受到预测图像的模糊的影响。通过根据有无残差来分类区域，在不存在易于产生模糊的残差的区域中，可以使用平滑化效果低的滤波器，可以防止图像过度地模糊。

另外，信号处理器2312、帧存储器2313、滤波器设计器2315以及滤波器处理器2316分别对应于图24的信号处理器512、帧存储器513、滤波器设计器515以及滤波器处理器516。另外，信号2301、2303、2304、2305、2307、2308、2309以及2310分别对应于图24的信号501、503、504、505、507、508、509以及510。

(第73实施方式)

对第73实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第14实施方式的图27相同。但是，代替区域分割参数而将与有无残差相关的信息609输入到区域分割器614的点与第14实施方式不同。

在本实施方式中从第72实施方式的编码装置中输出的编码数据被输入到可变长解码器611。在可变长解码器611中，对编码数据601进行解码，输出与有无残差相关的信息609以及滤波器信息610。在区域分割器614中，通过与有无残差相关的信息609，与第72实施方式的区域分割器2316同样地分类区域，生成区域信息605。

(第74实施方式)

使用图47对第74实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第15实施方式的图28相同。但是，对区域分割器2413不输入来自预测器2412的预测模式信息，而代替地从编码控制器2416输入与有无残差相关的信息2407的点；从编码控制器2416对可变长编码器2415输入与有无残差相关的信息2407的点；以及不从区域分割器2413向可变长编码器2415输出区域分割参数的点与第15实施方式不同。在区域分割器2413中，通过与有无残差相关的信息2407，与第72实施方式的区域分割器2314同样地分类区域，输出区域信息2406。在可变长编码器2415中，对残差信息2402、滤波器信息2408、以及与有无残差相关的信息2407进行编码。

另外，信号处理器2410、帧存储器2411以及滤波器设计器2414分别对应于图27的信号处理器710、帧存储器711以及滤波器设计器714。另外，信号2401、2403、2404、2405以及2409分别对应于图27的信号701、703、704、705以及709。

(第75实施方式)

对第75实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第16实施方式的图29相同。但是，对区域分割器814代替区域分割参数而输入了与有无残差相关的信息807的点不同。

在本实施方式中从第74实施方式的编码装置中输出的编码数据被输入到可变长解码器810。在可变长解码810中，对编码数据801进行解码，输出与有无残差相关的信息807以及滤波器信息808。在区域分割器814中，通过与有无残差相关的信息807，与第72实施方式的区域分割器2314同样地分类区域，生成区域信息809。

(第76实施方式)

对第76实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图46所示的第72实施方式相同。在本实施方式的滤波器设计器2315中，针对每个区域的分类指定是否应用滤波器，通过区域信息2305、输入图像信号2301以及局部解码图像信号2304，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息2306而输出。

滤波器处理器2316根据区域信息2305和滤波器信息2306，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对局部解码图像信号2304进行滤波处理，生成图像信号2307。

(第77实施方式)

对第77实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第73实施方式相同。本实施方式的滤波器处理器615进行与第76实施方式的滤波器处理器2316同样的动作。即，滤波器处理器615根据区域信息605和滤波器信息610，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像604进行滤波处理，生成图像信号606。

(第78实施方式)

对第78实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图47所示的第74实施方式相同。本实施方式的滤波器设计器2414进行与第76实施方式的滤波器设计器2315同样的动作。即，在滤波器设计器2414中，针对每个区域的分类指定是否应用滤波器，通过区域信息2406、输入图像信号2401以及局部解码图像2404，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息2408而输出。

(第79实施方式)

对第79实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第75实施方式相同。本实施方式的滤波器处理器815进行与第76实施方式的滤波器处理器2316同样的动作。即，滤波器处理器815根据区域信息809和滤波器信息808，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像803进行滤波处理，生成图像信号806。

(第80实施方式)

对第80实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图46所示的第72实施方式相同。在本实施方式的滤波器设计器2315中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息2305、输入图像信号2301以及局部解码图像2304，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息2306而输出。

滤波器处理器2316根据区域信息2305和滤波器信息2396，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对局部解码图像2304进行滤波处理，生成图像信号2307。

(第81实施方式)

对第81实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第73实施方式相同。本实施方式的滤波器处理器614进行与第80实施方式的滤波器处理器2316同样的动作。即，滤波器处理器614根据区域信息605和滤波器信息610，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号604进行滤波处理，生成图像信号606。

(第82实施方式)

对第82实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图47所示的第74实施方式相同。本实施方式的滤波器设计器2414进行与第80实施方式的滤波器设计器2315同样的动作。即，在滤波器设计器2414中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息2406、输入图像信号2401以及局部解码图像信号2404，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息2408而输出。

(第83实施方式)

对第83实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与第75实施方式相同。本实施方式的滤波器处理器815进行与第80实施方式的滤波器处理器2316同样的动作。即，滤波器处理器815根据区域信息809和滤波器信息808，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号803进行滤波处理，生成图像信号806。

(第84实施方式)

使用图48对第84实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与第1实施方式的图2相同。但是，对区域分割器2714输入输入图像信号2701的点、以及区域信息2705作为区域分割参数而被输入到可变长编码器2718的点与第1实施方式不同。

在区域分割器2714中成为基本的分类处理与第1实施方式的区域分割器114相同。但是，并非按照像素单位计算分类基准而在块单位中进行计算的点、以及通过区域分割器2714根据输入图像信号2701与局部解码图像信号2704计算分类基准的点与第1实施方式不同。在将针对按照光栅扫描的顺序处于位置i的块的分类基准设为C’(i)时，通过分类基准C’(i)是否小于预先决定的阈值T来分类区域。对于阈值T，也可以从图48的对运动图像编码装置进行控制的外部的编码控制器提供。

作为分类基准，可以使用按照光栅扫描的顺序处于位置i的块的编码误差的绝对值和、即通过下式(14)求出的绝对值和。

[式14]

${C^{\′}}_{\mathrm{SAD}}\left(i\right)=\underset{(x,y)\∈B\left(i\right)}{\mathrm{\Σ}}|S(x,y)-S_{\mathrm{ory}}(x,y)|---\left(14\right)$

此处，S_org(x、y)是位置(x、y)的输入图像信号的像素。

另外，可以将按照光栅扫描的顺序处于位置i的块的编码误差的平方和、即通过下式(15)求出的平方和用作分类基准。

[式15]

${C^{\′}}_{\mathrm{SSD}}\left(i\right)=\underset{(x,y)\∈B\left(i\right)}{\mathrm{\Σ}}{(S(x,y)-S_{\mathrm{org}}(x,y))}^2---\left(15\right)$

另外，可以将按照光栅扫描的顺序处于位置i的块的编码误差的分散、即通过下式(16)求出的分散用作分类基准。

[式16]

${C^{\′}}_{\mathrm{var}}\left(i\right)=\underset{(x,y)\∈B\left(i\right)}{\mathrm{\Σ}}{((S(x,y)-S_{\mathrm{org}}(x,y))-\frac{1}{\left|B\left(i\right)\right|}\underset{(x,y)\∈B\left(i\right)}{\mathrm{\Σ}}(S(x,y)-S_{\mathrm{org}}(x,y)))}^2---\left(16\right)$

从区域分割器2714，输出表示区域与分类的对应的区域信息2705。例如在C’_SSD(i)＜T时将区域分类成“编码误差小的块”、在除此以外时将区域分类成“编码误差大的块”的情况下，表示区域与分类的对应的信息如图52所示。输出的区域信息2705被输入到滤波器设计器2715、滤波器处理器2716以及可变长编码器2718。

如果如本实施方式那样作为区域分割参数而将表示区域与分类的对应的区域信息发送到解码装置，则即使在编码装置使用输入图像、编码失真等在解码装置侧不能得到的信息对区域进行分类的情况下，解码装置也可以通过区域信息与编码装置同样地对区域进行分类。

另外，信号处理器2712、帧存储器2713以及预测器2717分别对应于图2的信号处理器112、帧存储器113以及预测器117。另外，信号2702、2703、2706、2707、2708、2709以及2710分别对应于图2的信号102、103、106、107、108、109以及110。

(第85实施方式)

使用图49对第85实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图15的第2实施方式相同。但是，不存在区域分割器，而对滤波器处理器直接输入区域分割参数的点与第2实施方式不同。

在本实施方式中从第84实施方式的编码装置中输出的编码数据被输入到可变长解码器2811。可变长解码器2811对编码数据2801进行解码，输出区域分割参数2809以及滤波器信息2810。在滤波器处理器2815中，使用滤波器系数2810以及区域分割参数2809对解码图像2804进行滤波处理，输出图像信号2806。由于区域分割参数2809是表示区域与分类的对应的区域信息，所以可以与第2实施方式的滤波器处理器214同样地进行滤波处理。

另外，信号处理器2812、帧存储器2813以及预测器2816分别对应于图15的信号处理器212、帧存储器213以及预测器216。另外，信号2802、2803、2804、2807以及2808分别对应于图15的202、203、204、207以及208。

(第86实施方式)

使用图50对第86实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图17的第3实施方式相同。但是，对区域分割器2913输入输入图像信号2901的点、以及对可变长编码器2915输入区域信息2906作为区域分割参数的点与第3实施方式不同。在区域分割器2913中，与第84实施方式的区域分割器2714同样地分类区域，输出区域信息2906。

另外，信号处理器2910、帧存储器2911以及预测器2912分别对应于信号处理器310、帧存储器113以及预测器312。另外，信号2902、2903、2904、2905、2907、2908以及2909分别对应于图16的信号302、303、304、305、307、308以及309。

(第87实施方式)

使用图51对第87实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图18的第4实施方式相同。但是，不存在区域分割器，而对滤波器处理器3015直接输入区域分割参数3007的点与第4实施方式不同。

在本实施方式中从第86实施方式的编码装置中输出的编码数据被输入到可变长解码器3010。可变长解码器3010对编码数据3001进行解码，输出区域分割参数3007以及滤波器信息3008。在滤波器处理器3015中，使用滤波器系数3008以及区域分割参数3007对解码图像3003进行滤波处理，输出图像信号3006。由于区域分割参数3007是表示区域与分类的对应的区域信息，所以可以与第2实施方式的滤波器处理器214同样地进行。

另外，信号处理器3011、帧存储器3012以及预测器3013分别对应于图17的信号处理器411、帧存储器412以及预测器413。另外，信号3002、3003、3004、3005以及3006分别对应于图18的信号402、403、404、405以及406。

(第88实施方式)

对第88实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图48所示的第84实施方式相同。在本实施方式的滤波器设计器2715中，针对每个区域的分类指定是否应用滤波器，通过区域信息2705、输入图像信号2701以及局部解码图像信号2704，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息2706而输出。

滤波器处理器2716根据区域信息2705和滤波器信息2706，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对局部解码图像信号2704进行滤波处理，生成图像信号2716。

(第89实施方式)

对第89实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图49所示的第85实施方式相同。本实施方式的滤波器处理器2815进行与第88实施方式的滤波器处理器2716同样的动作。即，滤波器处理器2815根据作为区域分割参数2809而得到的表示区域与分类的对应的区域信息与滤波器信息2810，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像2804进行滤波处理，生成图像信号2806。

(第90实施方式)

对第90实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图50所示的第86实施方式相同。本实施方式的滤波器设计器2914进行与第88实施方式的滤波器设计器2715同样的动作。即，在滤波器设计器2914中，针对每个区域的分类指定是否应用滤波器，通过区域信息2906、输入图像信号2901以及局部解码图像2904，针对应用滤波器的分类设计了滤波器。滤波器应用/非应用信息与应用的分类的滤波器系数被作为滤波器信息2908而输出。

(第91实施方式)

对第91实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图51所示的第87实施方式相同。本实施方式的滤波器处理器3015进行与第88实施方式的滤波器处理器2715同样的动作。即，滤波器处理器3015根据作为区域分割参数3007而得到的表示区域与分类的对应的区域信息和滤波器信息3008，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，对解码图像3003进行滤波处理，生成图像信号3006。

(第92实施方式)

对第92实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图47所示的第84实施方式相同。在本实施方式的滤波器设计器2715中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息2705、输入图像信号2701以及局部解码图像2704，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息2706而输出。

滤波器处理器2716根据区域信息2705与滤波器信息2706，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对局部解码图像2704进行滤波处理，生成图像信号2716。

(第93实施方式)

对第93实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图49所示的第85实施方式相同。本实施方式的滤波器处理器2815进行与第92实施方式的滤波器处理器2716同样的动作。即，滤波器处理器2815根据作为区域分割参数2809而得到的表示区域与分类的对应的区域信息和滤波器信息2810，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域、从预先准备的滤波器中选择所应用的滤波器而对解码图像信号2804进行滤波处理，生成图像信号2806。

(第94实施方式)

对第94实施方式进行说明。与本实施方式有关的运动图像编码装置的基本结构与图50所示的第86实施方式相同。本实施方式的滤波器设计器2914进行与第92实施方式的滤波器设计器2715同样的动作。即，在滤波器设计器2715中，针对每个区域的分类指定是否应用滤波器，针对应用滤波器的分类，通过区域信息2906、输入图像信号2901以及局部解码图像信号2904，从预先准备的滤波器中选择所应用的滤波器。滤波器应用/非应用信息与指定所应用的分类的滤波器系数的信息被作为滤波器信息2908而输出。

(第95实施方式)

对第95实施方式进行说明。与本实施方式有关的运动图像解码装置的基本结构与图51所示的第87实施方式相同。本实施方式的滤波器处理器3015进行与第92实施方式的滤波器处理器2716同样的动作。即，滤波器处理器2619根据作为区域分割参数3007而得到的表示区域与分类的对应的区域信息和滤波器信息3008，与和区域对应的分类相应地判定应用滤波器的区域以及不应用滤波器的区域，针对应用滤波器的区域，从预先准备的滤波器中选择所应用的滤波器而对解码图像信号3003进行滤波处理，生成图像信号3006。

根据本发明，按照预先决定的基准分类帧内的区域而进行区域分割，针对每个被分类的区域进行滤波器设计，从而可以减少编码对象图像与参照图像的误差以及编码对象图像与输出图像的误差。

本发明的实施方式中记载的本发明的手法还可以通过计算机执行，或者作为可以使计算机执行的程序而存储在磁盘(软盘、硬盘等)、光盘(CD-ROM、DVD等)、以及半导体存储器等记录介质中而分发。

本发明不限于上述各实施方式示出的例子，而可以在实施阶段在不脱离其要旨的范围内实现各种变形。进而，在上述实施方式中包括各种阶段的发明，可以通过公开的多个结构要件的适宜的组合抽出各种发明。例如，即使从实施方式所示的所有结构要件中删除了几个结构要件，也可以解决发明想要解决的课题中的至少一个，在得到了发明的效果的至少一个的情况下，可以将删除了该结构要件的结构抽出作为发明。

产业上的可利用性

本发明的图像编码以及解码方法以及装置被用于通信介质、蓄积介质以及广播介质等中的图像压缩处理。

Claims (52)

1.一种运动图像编码装置，其特征在于，具备：

预测部，生成预测图像；

正交变换部，对预测图像与输入图像的预测残差进行正交变换而生成变换系数；

量化部，对上述变换系数进行量化；

逆量化部，对量化后的变换系数进行逆量化；

逆正交变换部，对逆量化后的变换系数进行逆正交变换，求出与上述预测残差对应的局部解码残差；

加法部，对上述局部解码残差与上述预测图像进行加法计算，生成局部解码图像；

分类部，使用规定的参数将上述局部解码图像分类成多个区域；

设计部，设计每个所分类的区域的滤波器系数；以及

编码部，将上述量化后的变换系数以及每个所分类的区域的上述滤波器系数的信息作为编码数据而输出。

2.根据权利要求1所述的运动图像编码装置，其特征在于：还具备滤波部，该滤波部按照每个所分类的区域的上述滤波器系数，对上述局部解码图像进行滤波处理，

上述预测部使用实施了滤波处理后的图像生成上述预测图像。

3.根据权利要求2所述的运动图像编码装置，其特征在于：上述设计部针对每个所分类的区域指定是否应用滤波处理，并且设计针对应应用滤波器的区域的滤波器，

上述滤波部针对每个所分类的区域切换是否应用滤波处理，对上述局部解码图像进行滤波处理，

上述编码部输出还包括针对每个所分类的区域指定是否应用滤波处理的信息的编码数据。

4.根据权利要求1所述的运动图像编码装置，其特征在于：上述设计部针对每个所分类的区域指定是否应用滤波处理，并且设计针对应应用滤波器的区域的滤波器，

上述编码部将区域的分类中使用的上述参数、针对每个所分类的区域指定是否应用滤波处理的信息以及针对应用了滤波处理的区域的滤波器系数的信息作为编码数据而输出。

5.根据权利要求3所述的运动图像编码装置，其特征在于：上述分类部根据上述局部解码图像的像素值，将上述局部解码图像分类成多个区域。

6.根据权利要求3所述的运动图像编码装置，其特征在于：上述分类部根据编码参数，将上述局部解码图像分类成多个区域。

7.根据权利要求3所述的运动图像编码装置，其特征在于：上述分类部根据与上述预测残差对应的局部解码残差，将上述局部解码图像分类成多个区域。

8.根据权利要求3所述的运动图像编码装置，其特征在于：上述分类部使用预先准备的多个分类基准中的一个分类基准进行区域分类，输出包括指定在区域分类中使用的分类基准的信息的上述参数。

9.根据权利要求6所述的运动图像编码装置，其特征在于：上述分类部使用规定的阈值根据上述编码参数进行区域分类，输出包括上述阈值的信息的编码数据。

10.根据权利要求5所述的运动图像编码装置，其特征在于：上述分类部根据上述局部解码图像的各像素及其周边的像素的绝对值差分的平均值是否超过阈值，将上述局部解码图像分类成平坦部与非平坦部。

11.根据权利要求5所述的运动图像编码装置，其特征在于：上述分类部根据上述局部解码图像的各像素及其周边的像素的绝对值差分的最大值是否超过阈值，将上述局部解码图像分类成平坦部与非平坦部。

12.根据权利要求5所述的运动图像编码装置，其特征在于：上述分类部将上述局部解码图像的各像素的周边的区域的图像信号变换成频率分量，求出表示预先决定的频带中包含的分量的量的值，根据该值是否超过预先决定的值，将上述局部解码图像分类成平坦部与非平坦部。

13.根据权利要求5所述的运动图像编码装置，其特征在于：上述分类部对上述局部解码图像的各像素的周边区域的图像信号实施高通滤波处理，根据处理后的各像素的像素值是否超过阈值，将上述局部解码图像分类成平坦部与非平坦部。

14.根据权利要求5所述的运动图像编码装置，其特征在于：上述分类部根据对上述局部解码图像进行滤波处理而得到的图像、与通过上述局部解码图像的差分得到的图像之间的像素值的绝对值是否超过阈值，将上述局部解码图像分类成平坦部与非平坦部。

15.根据权利要求6所述的运动图像编码装置，其特征在于：上述分类部根据对上述局部解码图像应用的预测是画面内预测还是画面间预测，而分类上述局部解码图像。

16.根据权利要求6所述的运动图像编码装置，其特征在于：上述分类部根据上述局部解码图像的预测中使用的运动矢量指示的像素位置，分类上述局部解码图像。

17.根据权利要求6所述的运动图像编码装置，其特征在于：上述分类部根据与上述局部解码图像对应的量化参数的值，分类上述局部解码图像。

18.根据权利要求3所述的运动图像编码装置，其特征在于：还包括滤波部，该滤波部根据以针对每个所分类的区域不同的方式而预先设定的滤波器窗尺寸，对上述局部解码图像进行滤波处理。

19.根据权利要求3所述的运动图像编码装置，其特征在于，还包括：

设定部，针对每个所分类的区域设定滤波器窗尺寸；

滤波部，根据针对每个所分类的区域设定的上述滤波器窗尺寸，对上述局部解码图像进行滤波处理；以及

编码部，将每个所分类的区域的上述滤波器窗尺寸的信息作为编码数据而输出。

20.根据权利要求6所述的运动图像编码装置，其特征在于：上述分类部根据对上述局部解码图像的各区域应用的预测是单向预测还是双向预测，分类上述局部解码图像。

21.根据权利要求6所述的运动图像编码装置，其特征在于：上述分类部按照运动补偿预测中使用的块尺寸，分类上述局部解码图像。

22.根据权利要求6所述的运动图像编码装置，其特征在于：上述分类部按照正交变换的块尺寸，分类上述局部解码图像。

23.根据权利要求7所述的运动图像编码装置，其特征在于：上述分类部使用规定的阈值根据上述局部解码残差进行区域分类，

上述编码部输出包括上述阈值的信息的编码数据。

24.根据权利要求7所述的运动图像编码装置，其特征在于：上述分类部将存在上述局部解码残差的区域分类成第1区域，将不存在上述残差的区域分类成第2区域。

25.根据权利要求7所述的运动图像编码装置，其特征在于：上述分类部根据上述局部解码残差的分散是否超过阈值来分类区域。

26.根据权利要求7所述的运动图像编码装置，其特征在于：上述分类部根据上述局部解码残差的大小是否超过阈值，分类区域。

27.一种运动图像解码装置，其特征在于，具备：

解码部，对编码数据进行解码，根据解码数据取得被量化的变换系数以及每个区域的滤波器系数的信息；

预测部，生成预测图像；

逆量化部，对量化后的变换系数进行逆量化；

逆正交变换部，对逆量化后的变换系数进行逆正交变换，生成残差；

加法部，对上述残差与上述预测图像进行加法计算而生成解码图像；

分类部，使用规定的参数将上述解码图像分类成多个区域；以及

滤波部，针对每个所分类的区域使用上述滤波器系数的信息，对上述解码图像进行滤波处理。

28.根据权利要求27所述的运动图像解码装置，其特征在于：还具备滤波部，该滤波部针对每个所分类的区域使用上述滤波器系数的信息，对上述解码图像进行滤波处理，

上述预测部使用实施了滤波处理后的图像，生成预测图像。

29.根据权利要求28所述的运动图像解码装置，其特征在于：上述滤波部使用指定对所分类的上述区域是否应用滤波处理的信息、与针对应用了滤波处理的区域的滤波器系数的信息，对上述解码图像进行滤波处理。

30.根据权利要求27所述的运动图像解码装置，其特征在于：上述滤波部使用指定对所分类的区域是否应用滤波处理的信息、以及针对应用了滤波处理的区域的滤波器系数的信息，对上述解码图像进行滤波处理。

31.根据权利要求29所述的运动图像解码装置，其特征在于：上述分类部根据解码图像的像素值，将上述解码图像分类成多个区域。

32.根据权利要求29所述的运动图像解码装置，其特征在于：上述分类部使用区域的分类中使用的编码参数，将解码图像分类成多个区域。

33.根据权利要求29所述的运动图像解码装置，其特征在于：上述分类部使用上述残差将上述解码图像分类成多个区域。

34.根据权利要求29所述的运动图像解码装置，其特征在于：上述分类部根据区域的分类中使用的上述参数中包含的用于指定区域分类中使用的分类基准的信息，选择预先准备的多个分类基准中的一个分类基准，并使用该分类基准分类区域。

35.根据权利要求32所述的运动图像解码装置，其特征在于：上述分类部使用包含在编码数据中的阈值的信息，根据上述编码参数分类区域。

36.根据权利要求31所述的运动图像解码装置，其特征在于：上述分类部根据像素及其周边的像素的绝对值差分的平均值是否超过阈值，将上述局部解码像素分类成平坦部与非平坦部。

37.根据权利要求31所述的运动图像解码装置，其特征在于：上述分类部根据上述局部解码图像的各像素及其周边的像素的绝对值差分的最大值是否超过阈值，将上述局部解码图像分类成平坦部与非平坦部。

38.根据权利要求31所述的运动图像解码装置，其特征在于：上述分类部将上述局部解码图像的各像素的周边区域的图像信号变换成频率分量，求出表示预先决定的频带中包含的分量的量的值，根据该值是否超过预先决定的值，将上述局部解码图像分类成平坦部与非平坦部。

39.根据权利要求31所述的运动图像解码装置，其特征在于：上述分类部对上述局部解码图像的各像素的周边区域的图像信号实施高通滤波处理，根据处理后的各像素的像素值是否超过阈值，将上述局部解码图像分类成平坦部与非平坦部。

40.根据权利要求31所述的运动图像解码装置，其特征在于：上述分类部通过根据对上述局部解码图像进行滤波处理而得到的图像与上述局部解码图像的差分而得到的图像的像素值的绝对值是否超过阈值，将上述局部解码图像分类成平坦部与非平坦部。

41.根据权利要求32所述的运动图像解码装置，其特征在于：上述分类部根据对上述局部解码图像应用的预测是画面内预测还是画面间预测，分类上述局部解码图像。

42.根据权利要求32所述的运动图像解码装置，其特征在于：上述分类部根据上述局部解码图像的预测中使用的运动矢量指示的像素位置，分类上述局部解码图像。

43.根据权利要求32所述的运动图像解码装置，其特征在于：上述分类部根据与上述局部解码图像对应的量化参数的值，分类上述局部解码图像。

44.根据权利要求29所述的运动图像解码装置，其特征在于：还包括滤波部，该滤波部根据以针对每个所分类的区域不同的方式预先设定的滤波器窗尺寸，对上述解码图像进行滤波处理。

45.根据权利要求29所述的运动图像解码装置，其特征在于，还包括：

解码部，对编码数据进行解码，根据解码数据取得每个所分类的区域的滤波器窗尺寸的信息；以及

滤波部，根据上述滤波器窗尺寸的信息，对解码图像进行滤波处理。

46.根据权利要求32所述的运动图像解码装置，其特征在于：上述分类部根据对上述局部解码图像的各区域应用的预测是单向预测还是双向预测，分类上述局部解码图像。

47.根据权利要求32所述的运动图像解码装置，其特征在于：上述分类部按照运动补偿预测中使用的块尺寸，分类上述局部解码图像。

48.根据权利要求32所述的运动图像解码装置，其特征在于：上述分类部按照正交变换的块尺寸，分类上述局部解码图像。

49.根据权利要求33所述的运动图像解码装置，其特征在于：上述分类部使用包含在编码数据中的阈值的信息，根据上述残差分类区域。

50.根据权利要求33所述的运动图像解码装置，其特征在于：上述分类部将存在上述残差的区域分类成第1区域，将不存在上述残差的区域分类成第2区域。

51.根据权利要求33所述的运动图像解码装置，其特征在于：上述分类部根据上述局部解码残差的分散是否超过阈值，分类区域。

52.根据权利要求33所述的运动图像解码装置，其特征在于：上述分类部根据上述局部解码残差的大小是否超过阈值，分类区域。

Images