CN101926175A - 运动图像编码/解码方法以及装置 - Google Patents

运动图像编码/解码方法以及装置 Download PDF

Info

Publication number
CN101926175A
CN101926175A CN2008801257805A CN200880125780A CN101926175A CN 101926175 A CN101926175 A CN 101926175A CN 2008801257805 A CN2008801257805 A CN 2008801257805A CN 200880125780 A CN200880125780 A CN 200880125780A CN 101926175 A CN101926175 A CN 101926175A
Authority
CN
China
Prior art keywords
image
mentioned
filter
information
decoded picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2008801257805A
Other languages
English (en)
Inventor
和田直史
中条健
谷泽昭行
安田豪毅
渡边隆志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN101926175A publication Critical patent/CN101926175A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种运动图像编码方法，将已编码的图像作为参照图像，用于接下来要进行编码的图像的预测，具备：对已编码的图像的局部解码图像应用滤波器而生成还原图像的步骤；设定上述滤波器的滤波器系数信息的步骤；对上述滤波器系数信息进行编码的步骤；对表示用作参照图像的上述局部解码图像或者上述还原图像的确定信息进行编码的步骤；以及根据上述确定信息，将上述局部解码图像或者上述还原图像中的某一个作为参照图像而保存在存储器中的步骤。

Description

运动图像编码/解码方法以及装置
技术领域
本发明涉及运动图像编码/解码方法以及装置，特别涉及通过在编码侧设定环路滤波器的滤波器系数信息来传送，并在解码侧使用，从而得到提高了画质的效果的运动图像编码/解码方法以及装置。
背景技术
在按照像素块单位对图像进行正交变换，并进行变换系数的量化处理的运动图像编码/解码方法中，在解码图像中产生被称为块失真的画质劣化。相对于此，对于G.Bjontegaard，“Deblocking filter for 4×4based coding”，ITU-T Q.15/SG16VCEG document，Q15-J-27，May 2000(以后称为“Deblocking filter for 4×4based coding”)中记载的解块滤波器通过在块边界应用低通滤波器而使上述块失真视觉上不再显著，可以主观上得到良好的图像。图34示出具备“Deblockingfilter for 4×4based coding”中的解块滤波器的编码/解码装置的框图。
上述解块滤波器由于如图34的解块滤波器处理部901那样在编码以及解码装置的环路内使用，所以还被称为环路滤波器。通过设为环路滤波器，具有如下效果：可以降低在预测中使用的参照图像的块失真，特别在易于产生块失真的高压缩比特率带中提高编码效率。
但是，上述解块滤波器执行通过对块边界进行晕映而降低视觉上显著的劣化的处理，与输入图像的误差未必变小，相反地有时损失较细的纹理等而导致画质降低。进而，将滤波处理后的图像作为参照图像而用于接下来编码的图像的预测中，所以存在由于滤波器引起的画质降低的影响传播到预测图像这样的问题。
另一方面，与环路滤波器不同，将仅对由解码器输出的图像作用的滤波器称为后置滤波器。后置滤波器由于不将滤波处理后的图像用作参照图像，所以具有滤波器的影响不会传播到预测图像这样的特征。日本特开2001-275110公报提供了在解码侧动态地切换将解块滤波器用作环路滤波器、或者用作后置滤波器的运动图像解码方法。图35示出具备日本特开2001-275110公报中的环路/后置滤波的切换方法的编码/解码装置的框图。
在日本特开2001-275110公报中的运动图像解码方法中，生成通过图35中的运动图像解码装置内部具备的解块滤波器处理部902应用了解块滤波器的解码图像，作为输出图像而输出。另一方面，在编码参数抽出部904中，从编码数据中抽出量化参数，在切换部903中，根据上述量化参数的值，控制是否将滤波处理后的图像用作参照图像。通过切换部903中的动作，可以实现在解块滤波器的效果高的高压缩比特率带中将解块滤波器用作环路滤波器，在低压缩比特率带中将解块滤波器用作后置滤波器那样的控制。但是，在日本特开2001-275110公报中，在编码侧不进行同样的处理，所以存在产生编码侧与解码侧的不匹配这样的问题。另外，由于在编码侧并未提高参照图像的画质，所以无法得到提高编码效率的效果。
另一方面，在S.Wittmann and T.Wdi，“Post-filter SEImessage for 4:4:4coding”，JVT of ISO/IEC MPEG & ITU-TVCEG，JVT-S030，April 2006(以后称为“Post-filter SEI messagefor 4:4:4coding”)中，记载了在编码侧设定后置滤波器的滤波器系数信息而进行编码，在解码侧使用进行解码而得到的滤波器系数信息来进行后置滤波处理的运动图像编码/解码方法。图36示出“Post-filterSEI message for 4:4:4coding”中的运动图像编码/解码装置的框图。
图36的运动图像编码装置具备的后置滤波器设定部905设定规定的滤波器系数信息，并输出滤波器系数信息90。对滤波器系数信息90进行编码，在解码侧进行解码，在运动图像解码装置具备的后置滤波器处理部906中使用而进行后置滤波器处理。
在“Post-filter SEI message for 4:4:4coding”中的运动图像编码/解码方法中，通过设定滤波器系数信息，以在编码侧使解码图像与输入图像的误差变小，从而可以在解码侧提高应用了后置滤波器的输出图像的画质。但是，在“Post-filter SEI message for 4:4:4coding”的方法中，并非将提高了画质的图像用作参照图像，而无法得到在编码侧提高了编码效率的效果。
发明内容
如上所述，在“Deblocking filter for 4×4based coding”公开的方法中，存在未必提高画质，而由滤波器产生的画质劣化传播到预测图像这样的问题。
另外，在日本特开2001-275110公报公开的方法中，仅在解码侧进行环路/后置滤波的切换，而存在产生编码侧与解码侧的不匹配这样的问题。
另外，“Post-filter SEI message for 4:4:4coding”公开的方法是在解码侧提高所输出的图像的画质的处理，无法得到提高在预测中使用的参照图像的画质来提高编码效率的效果。
本发明的目的在于提供一种运动图像编码/解码方法以及装置，在编码侧对设定的滤波器系数信息进行编码，在解码侧对滤波器系数信息进行解码而使用的运动图像编码/解码中，编码侧与解码侧通过同样的处理切换环路滤波器处理，从而抑制画质劣化的传播，并且提高在预测中使用的参照图像的画质，从而可以提高编码效率。
本发明的一个方式提供一种运动图像编码方法，将已编码的图像作为参照图像，用于接下来要进行编码的图像的预测，其特征在于，具备：对已编码的图像的局部解码图像应用滤波器而生成还原图像的步骤；设定上述滤波器的滤波器系数信息的步骤；对上述滤波器系数信息进行编码的步骤；对表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息进行编码的步骤；以及根据上述确定信息，将上述局部解码图像或者上述还原图像作为参照图像而保存在存储器中的步骤。
本发明的另一个方式提供一种运动图像解码方法，将已解码的图像作为参照图像，用于接下来要进行解码的图像的预测，其特征在于，具备：对解码图像应用滤波器而生成还原图像的步骤；对滤波器的滤波器系数信息进行解码的步骤；对表示用作参照图像的解码图像或者还原图像的确定信息进行解码的步骤；以及根据确定信息，将解码图像或者还原图像作为参照图像而保存在存储器中的步骤。
附图说明
图1是第1实施方式的运动图像编码装置的框图。
图2是第1实施方式的运动图像编码装置中的环路滤波器处理部的框图。
图3是第1实施方式的运动图像编码装置中的切换滤波器处理部的框图。
图4是示出第1实施方式的运动图像编码装置的动作的流程图。
图5是第1实施方式的运动图像解码装置的框图。
图6是第1实施方式的运动图像解码装置中的第1切换滤波器处理部的框图。
图7是示出第1实施方式的运动图像解码装置的动作的流程图。
图8是第1实施方式的运动图像解码装置中的第2切换滤波器处理部的框图。
图9是第1实施方式的运动图像解码装置中的第3切换滤波器处理部的框图。
图10是第1实施方式的运动图像解码装置中的第4切换滤波器处理部的框图。
图11是第2实施方式的第1运动图像编码装置的框图。
图12是第2实施方式的第1运动图像编码装置中的切换信息生成预测部的框图。
图13是第2实施方式的第1运动图像编码装置中的参照切换预测部的框图。
图14是第2实施方式的第1运动图像编码装置中的环路滤波器处理部的框图。
图15是示出第2实施方式的第1运动图像编码装置的动作的流程图。
图16是第2实施方式的第1运动图像解码装置的框图。
图17是第2实施方式的第1运动图像解码装置中的参照切换预测部的框图。
图18是示出第2实施方式的运动图像解码装置的动作的流程图。
图19是第2实施方式的第2运动图像编码装置的框图。
图20是第2实施方式的第2运动图像编码装置中的切换信息生成预测部的框图。
图21是第2实施方式的第2运动图像编码装置中的参照切换预测部的框图。
图22是第2实施方式的第2运动图像解码装置的框图。
图23是第2实施方式的第2运动图像解码装置中的参照切换预测部的框图。
图24是第3实施方式的运动图像编码装置的框图。
图25是第3实施方式的运动图像编码装置中的环路滤波器处理部的框图。
图26是第3实施方式的运动图像编码装置中的切换信息生成滤波器处理部的框图。
图27是示出第3实施方式的运动图像编码装置的动作的流程图。
图28是第3实施方式的运动图像解码装置的框图。
图29是第3实施方式的运动图像解码装置中的切换信息生成滤波器处理部的框图。
图30是示出第3实施方式的运动图像解码装置的动作的流程图。
图31是示出第1、第2、第3实施方式的语法结构的图。
图32是示出第1、第2、第3实施方式的环路滤波器数据语法的图。
图33是针对每个宏块切换了环路滤波器的情况下的参照图像的例子。
图34是非专利文献1中的编码/解码装置的框图。
图35是专利文献1中的编码/解码装置的框图。
图36是非专利文献2中的编码/解码装置的框图。
图37是第4实施方式的运动图像编码装置中的切换滤波器处理部的框图。
图38是第4实施方式的运动图像解码装置中的切换滤波器处理部的框图。
图39是示出第4实施方式的决定块尺寸以及块分割方法的参照表的图。
图40是示出第4实施方式的块分割的例子的图。
图41是第4实施方式的切换了块分割方法的情况下的参照图像的例子。
图42是示出第4实施方式的环路滤波器数据语法的图。
图43是第5实施方式的运动图像编码装置中的环路滤波器处理部的框图。
图44是示出第5实施方式的运动图像编码装置的动作的流程图。
图45是第6实施方式的局部解码图像滤波器处理部的框图。
图46是第7实施方式的运动图像编码装置的框图。
图47是第8实施方式的运动图像解码装置的框图。
图48是第7实施方式的预测图像制作部的一个例子的框图。
图49是第7实施方式的预测图像制作部的另一例子的框图。
图50是示出第9实施方式的阶段性的块分割的例子的图。
图51是示出第9实施方式的分割树以及被进行分割而得到的块的例子的图。
图52是示出第9实施方式的被进行分割而得到的块的例子的图。
图53是示出第9实施方式的各阶段的块尺寸的例子的图。
图54是示出第9实施方式的包括块分割信息的语法的图。
图55是示出第9实施方式的包括块分割信息的另一语法的图。
具体实施方式
以下，参照附图对本发明的实施方式进行说明。
(第1实施方式)
参照图1对第1实施方式的运动图像编码装置进行说明。以下，分别叙述图1的构成要素。
图1所示的运动图像编码装置1000具有预测信号生成部101、减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106、环路滤波器处理部107以及参照图像用缓冲器108，通过编码控制部109进行控制。
预测信号生成部101取得存储在参照图像用缓冲器108中的已编码的参照图像信号19来进行规定的预测处理，输出预测图像信号11。在预测处理中，例如也可以使用利用运动预测/运动补偿的时间方向的预测、或自画面内的已编码的像素起的空间方向的预测等。
减法器102计算所取得的输入图像信号10与预测图像信号11的差分，输出预测误差图像信号12。变换/量化部103首先取得预测误差图像信号12来进行变换处理。此处，变换/量化部103例如使用DCT(离散余弦变换)等来进行预测误差图像信号12的正交变换，生成变换系数。作为其他实施方式，也可以使用小波变换、独立分量解析等方法来生成变换系数。接下来，变换/量化部103根据后述的编码控制部109设定的量化参数，进行所生成的变换系数的量化处理，输出量化后的变换系数13。量化后的变换系数13在被输入到后述的熵编码部104的同时，还输入到逆变换/逆量化部105。
逆变换/逆量化部105按照编码控制部109设定的量化参数，对量化后的变换系数13进行逆量化，对得到的变换系数进行逆变换(例如，逆离散余弦变换等)，输出预测误差图像信号15。加法器106对从逆变换/逆量化部105中取得的预测误差图像信号15、与由预测信号生成部101生成的预测图像信号11进行加法计算，输出局部解码图像信号16。
环路滤波器处理部107取得局部解码图像信号16以及输入图像信号10，输出参照图像信号19、滤波器系数信息17、以及切换信息18，该切换信息18是表示将局部解码图像或者还原图像用作参照图像的确定信息，具体而言，是用于切换局部解码图像或者还原图像的切换信息。在后面详细说明环路滤波器处理部107。参照图像用缓冲器108临时保存从环路滤波器处理部107中取得的参照图像信号19。在通过预测信号生成部101生成预测图像信号11时参照保存在参照图像用缓冲器108中的参照图像信号19。
另一方面，熵编码部104除了量化后的变换系数13以外，还取得滤波器系数信息17、切换信息18以及预测模式信息、块尺寸切换信息、运动矢量、量化参数等编码参数，进行熵编码(例如哈夫曼编码或者算术编码等)并作为编码数据14输出。编码控制部109进行产生代码量的反馈控制以及量化控制、模式控制等，进行编码整体的控制。
接下来，使用图2以及图3详细叙述第1实施方式的运动图像编码装置中的环路滤波器处理部107。以下，分别叙述图2以及图3的构成要素。
图2所示的环路滤波器处理部107具有滤波器设定部110、切换滤波器处理部111以及切换信息生成部112，进而，切换滤波器处理部111如图3所示，具有滤波器处理部113以及环路滤波器切换部114。图3的开关SW切换端子A与端子B的连接。滤波器设定部110取得局部解码图像信号16以及输入图像信号10，设定规定的滤波器系数信息17。在后面详述滤波器系数信息17的设定方法。设定的滤波器系数信息17被输入到后述的切换滤波器处理部111以及熵编码部104。
切换滤波器处理部111在内部具有滤波器处理部113以及环路滤波器切换部114，取得局部解码图像16、滤波器系数信息17以及切换信息18，输出参照图像信号19。切换信息生成部112从切换滤波器处理部111中取得参照图像信号19，并且取得输入图像信号10，按照规定的切换判定方法生成切换信息18。生成的切换信息18被输入到切换滤波器处理部111，并且被输入到熵编码部104。在后面详述切换判定方法。
滤波器处理部113取得局部解码图像信号16以及滤波器系数信息17，按照滤波器系数信息17对局部解码图像信号16进行滤波处理，生成还原图像信号20。生成的还原图像信号20被输入到后述的环路滤波器切换部114。环路滤波器切换部114取得切换信息18，按照切换信息18通过在内部具有的开关SW切换端子A与端子B的连接，将局部解码图像信号16或者还原图像信号20作为参照图像信号19进行输出。
以上是第1实施方式的运动图像编码装置的结构。
接下来，使用图1、图2、图3以及图4，对第1实施方式的运动图像编码装置中的与环路滤波器相关的动作进行详细说明。另外，图4是示出第1实施方式的运动图像编码装置1000中的与环路滤波器相关的动作的流程图。
首先，如果向图1的运动图像编码装置1000输入了输入图像信号10，则减法器102进行输入图像信号10与从预测信号生成部101中取得的预测图像信号11的减法处理，生成预测误差图像信号12。在变换/量化部103中对生成的预测误差图像信号12进行变换、量化，作为量化后的变换系数13而输出，通过熵编码部104进行编码。另一方面，通过在运动图像编码装置1000的内部具备的逆变换/逆量化部105对量化后的变换系数13进行逆变换以及逆量化，并作为预测误差图像信号15输出。通过加法器106对预测误差图像信号15与由预测信号生成部101输出的预测图像信号11进行加法计算，生成局部解码图像信号16。
上述一连串的处理是进行预测处理与变换处理的被称为所谓混合编码的运动图像编码中的一般的编码处理。
此处，使用图2、图3以及图4，对第1实施方式的运动图像编码装置1000中的特征性的处理即与环路滤波器相关的动作进行详细说明。
首先，图2的环路滤波器处理部107的内部中具有的滤波器设定部110接收局部解码图像信号16以及输入图像信号10，进行滤波器系数信息17的设定(步骤S1100)。此处，滤波器设定部110使用在图像还原中通常被使用的二维的Wiener filter，设计滤波器系数，以使对局部解码图像信号16实施滤波处理而得到的图像、与输入图像信号10的均方误差成为最小，将设计的滤波器系数以及表示滤波器尺寸的值设定为滤波器系数信息17。滤波器设定部110将设定的滤波器系数信息17输出到图3的滤波器处理部113，并输出到熵编码部104。
接下来，图2的切换滤波器处理部111接收局部解码图像信号16、滤波器系数信息17以及切换信息18，根据切换信息18，将局部解码图像信号16或者由滤波器处理部113生成的还原图像信号20作为参照图像信号19进行输出(步骤S1101～S1109)。此处，首先，针对将局部解码图像信号16设为参照图像信号19的情况以及将还原图像信号20设为参照图像信号19的情况，切换信息生成部112进行切换判定处理，生成用于决定将局部解码图像信号16或者还原图像信号20中的哪一个设为参照图像信号19的切换信息18。根据生成的切换信息18，切换环路滤波器切换部114的内部的开关SW，输出参照图像信号19。以下详细说明环路滤波器处理部107中的步骤S1101至步骤S1109的动作。
首先，将图3的环路滤波器切换部114中的开关SW连接到端子A，将局部解码图像信号16作为参照图像信号19输入到切换信息生成部112(步骤S1101)。接下来，将开关SW连接到端子B，将还原图像信号20作为参照图像信号19输入到切换信息生成部112(步骤S1102)。此处，在将开关SW连接到端子B时，滤波器处理部113根据滤波器系数信息17对局部解码图像信号16实施滤波处理，生成还原图像信号20。作为例子，如果将局部解码图像上的位置(x、y)的像素设为F(x、y)，将二维滤波器的宽度设为W，将高度设为H，将滤波器系数设为h(i、j)(-w≤i≤w、-h≤j≤h、w＝W/2、h＝H/2)，则用下式表示还原图像G(x、y)。
式(1)
G ( x , y ) = Σ i = - w w Σ j = - h h h ( i , j ) · F ( x + i , y + j )
接下来，图2的切换信息生成部112计算局部解码图像信号16与输入图像信号10的残差平方和SSDA、以及还原图像信号20与输入图像信号10的残差平方和SSDB(步骤S1103)。此处，如果设为针对每个图像的局部区域进行切换判定处理，将局部区域内的像素位置设为i，将所有像素数设为N，将局部解码图像信号16设为Fi，将还原图像信号20设为Gi，将输入图像信号10设为Ii，则用下式来表示SSDA以及SSDB。
式(2)
SSD A = Σ i = 1 N ( F i - I i ) 2
SSD B = Σ i = 1 N ( G i - I i ) 2
接下来，根据SSDA以及SSDB，进行以下的切换判定处理(步骤S1104)。如果SSDA为SSDB以下，则对切换信息18即loop_filter_flag设定0(步骤S1105)。相反，如果SSDA是大于SSDB的值，则对Bloop_filter_flag设定(步骤S1106)。此处，图33示出按照将图像以16×16像素单位分割而得到的被称为宏块的单位进行了上述切换判定处理的情况下的参照图像的例子。在将局部区域设为宏块的情况下，上式(2)的N成为256，按照宏块单位输出切换信息18。作为其他实施方式，在切换判定处理中，也可以按照帧单位或者切片单位或者与宏块不同的尺寸的块单位判定图像信号，在该情况下，也以与判定结果对应的单位输出切换信息18。
接下来，图3的环路滤波器切换部114接收所生成的切换信息18即loop_filter_flag，根据loop_filter_flag的值，切换在内部具备的开关SW(步骤S1107)。在loop_filter_flag是0的情况下，环路滤波器切换部114将开关SW连接到端子A，将局部解码图像信号16作为参照图像信号19临时保存在参照图像用缓冲器108中(步骤S1108)。另一方面，在loop_filter_flag是1的情况下，环路滤波器切换部114将开关SW连接到端子B，将还原图像信号20作为参照图像信号19临时保存在参照图像用缓冲器108中(步骤S1109)。
以上是环路滤波器处理部107中的步骤S1101至步骤S1109的动作。
最后，通过熵编码部104对由滤波器设定部110生成的滤波器系数信息17、以及由切换信息生成部112生成的切换信息18进行编码，与量化后的变换系数13、预测模式信息、块尺寸切换信息、运动矢量、以及量化参数等一起被复用到比特流并发送到后述的运动图像解码装置2000(步骤S1110)。
此处，关于滤波器系数信息17以及切换信息18的编码方法，参照图31详细说明在本实施方式中使用的语法结构的概略。在以下的例子中，设为按照切片单位设定滤波器系数信息17，按照宏块单位设定切换信息18。
语法主要由三个部分构成，在高等级语法(1900)中，填入切片以上的上位层的语法信息。在切片等级语法(1903)中，载明针对每个切片所需的信息，在宏块等级语法(1907)中，载明针对每个宏块所需的变换系数数据、预测模式信息以及运动矢量等。各语法由更详的语法构成，高等级语法(1900)由序列参数组语法(1901)与图片参数组语法(1902)等序列、图片等级的语法构成。切片等级语法(1903)由切片头语法(1904)、切片数据语法(1905)、以及环路滤波器数据语法(1906)等构成。进而，宏块等级语法(1907)由宏块层语法(1908)、以及宏块预计语法(1909)等构成。
在环路滤波器数据语法(1906)中，如图32(a)所示，记述有与本实施方式的环路滤波器相关的参数即滤波器系数信息17以及切换信息18。此处，滤波器系数信息17即图32(a)的filter_coeff[cy][cx]是二维滤波器的系数，filter_size_y以及filter_size_x是决定滤波器尺寸的值。此处将表示滤波器尺寸的值记述在语法中，但作为其他实施方式，也可以不记述在语法中而使用预定的固定值。但是，请注意在将滤波器尺寸设为固定值的情况下，在运动图像编码装置1000以及后述的运动图像解码装置2000中必需使用同样的值。另外，图32(a)的loop_filter_flag是切换信息18，传送切片内的宏块数的合计即NumOfMacroblock量的loop_filter_flag。
以上是关于运动图像编码装置1000中的与环路滤波器相关的动作的说明。
接下来，对与运动图像编码装置1000相对的运动图像解码装置进行说明。
参照图5对第1实施方式的运动图像解码装置进行说明。以下，分别叙述图5的构成要素。
图5所示的运动图像解码装置2000具有熵解码部201、逆变换/逆量化部202、预测信号生成部203、加法器204、切换滤波器处理部205、以及参照图像用缓冲器206，通过解码控制部207进行控制。
熵解码部201按照图31所示的语法结构，针对高等级语法、切片等级语法、以及宏块等级语法，分别依次解码编码数据14的各语法的代码串，还原出量化后的变换系数13、滤波器系数信息17以及切换信息18等。
逆变换/逆量化部202取得量化后的变换系数13并进行逆量化，进行逆正交变换(例如逆离散余弦变换等)，输出预测误差图像信号15。此处，说明了逆正交变换，但在通过运动图像编码装置1000进行小波变换等的情况下，逆变换/逆量化部202执行所对应的逆量化以及逆小波变换等。
预测信号生成部203取得存储在参照图像用缓冲器206中的已解码的参照图像信号19并进行规定的预测处理，输出预测图像信号11。请注意在预测处理中，例如，使用利用运动补偿的时间方向的预测、或自画面内的已解码的像素的空间方向的预测等，但执行与运动图像编码装置1000同样的预测处理。
加法器204对取得的预测误差图像信号15以及预测图像信号11进行加法计算，生成解码图像信号21。
切换滤波器处理部205取得解码图像信号21、滤波器系数信息17以及切换信息18，输出参照图像信号19。在后面详细说明切换滤波器处理部205。
参照图像用缓冲器206临时保存从切换滤波器处理部205中取得的参照图像信号19。在由预测信号生成部203生成预测图像信号11时参照保存在参照图像用缓冲器206中的参照图像信号19。
解码控制部207进行解码定时的控制等，进行解码整体的控制。
接下来，使用图6详述第1实施方式的运动图像解码装置中的切换滤波器处理部205。以下，分别叙述图6的构成要素。
图6所示的切换滤波器处理部205A具有滤波器处理部208以及环路滤波器切换部209。开关SW切换端子A与端子B的连接。
滤波器处理部208接收解码图像信号21以及由熵解码部201还原的滤波器系数信息17，按照滤波器系数信息17对解码图像信号21进行滤波处理，生成还原图像信号20。生成的还原图像20被输入到后述的环路滤波器切换部209，并且作为输出图像信号22按照解码控制部207管理的定时进行输出。
环路滤波器切换部209接收由熵解码部201还原的切换信息18，按照切换信息18通过在内部具有的开关SW切换端子A与端子B的连接，将解码图像信号21或者还原图像信号20作为参照图像信号19而输出。
以上是第1实施方式的运动图像解码装置的结构。
接下来，使用图5、图6以及图7，详细说明第1实施方式的运动图像解码装置中的与环路滤波器相关的动作。另外，图7是示出第1实施方式的运动图像解码装置2000中的与环路滤波器相关的动作的流程图。
首先，如果对图5的运动图像解码装置2000输入了编码数据14，则通过熵解码部201，按照图31的语法结构，除了对变换系数13、滤波器系数信息17以及切换信息18以外，还对预测模式信息、块尺寸切换信息、运动矢量以及量化参数等进行解码。接下来，由熵解码部201解码的变换系数13被输入到逆变换/逆量化部202，按照由解码控制部207设定的量化参数进行逆量化。对逆量化后的变换系数进行逆正交变换(例如离散余弦变换等)，还原出预测误差图像信号15。通过加法器204对预测误差图像信号15与由预测信号生成部203输出的预测图像信号11进行加法计算，生成解码图像信号21。
上述一连串的处理是进行预测处理与变换处理的被称为所谓混合编码的运动图像编码中的一般的解码处理。
此处，使用图6以及图7，对第1实施方式的运动图像解码装置2000中的特征性的处理即与环路滤波器相关的动作进行详细说明。
首先，熵解码部201按照图31的语法结构，对滤波器系数信息17以及切换信息18进行熵解码(步骤S2100)。在图31的语法结构中的属于切片等级语法(1903)的环路滤波器数据语法(1906)中，如图32(a)所示，记述有与本实施方式的环路滤波器相关的参数即滤波器系数信息17以及切换信息18。此处，滤波器系数信息17即图32(a)的filter_coeff[cy][cx]是二维滤波器的系数，filter_size_y以及filter_size_x是决定滤波器尺寸的值。此处将表示滤波器尺寸的值记述在语法中，但作为其他实施方式，也可以不记述在语法中而将预定的固定值用作滤波器尺寸。但是，请注意在将滤波器尺寸设为固定值的情况下，在前述的运动图像编码装置1000与运动图像解码装置2000中必须使用同样的值。另外，图32(a)的loop_filter_flag是切换信息18，对切片内的宏块数的合计即NumOfMacroblock量的loop_filter_flag进行解码。
接下来，图6的滤波器处理部208接收所解码的滤波器系数信息17(步骤S2101)。环路滤波器切换部209如果接收到所解码的切换信息18即loop_filter_flag(步骤S2102)，则根据该loop_filter_flag的值，切换在内部具备的开关SW(步骤S2103)。在loop_filter_flag是0的情况下，环路滤波器切换部209将开关SW连接到端子A，将解码图像信号21作为参照图像信号19临时保存在参照图像用缓冲器206中(步骤S2104)。另一方面，在loop_filter_flag是1的情况下，环路滤波器切换部209将开关SW连接到端子B，将还原图像信号20作为参照图像信号19临时保存在参照图像用缓冲器206中(步骤S2105)。此处，如果开关SW被连接到端子B，则滤波器处理部113根据滤波器系数信息17，对解码图像信号21实施滤波处理，生成还原图像信号20。作为例子，如果将解码图像上的位置(x、y)的像素设为F(x、y)，将二维滤波器的宽度设为W，将高度设为H，将滤波器系数设为h(i、j)(-w≤i≤w、-h≤j≤h、w＝W/2、h＝H/2)，则用式(1)表示还原图像G(x、y)。
此处，环路滤波器切换部209按照图32(a)的语法，以宏块单位接收切换信息18并切换开关SW。作为其他实施方式，在运动图像编码装置1000按照帧单位或者切片单位或者与宏块不同的尺寸的块单位对切换信息18进行编码的情况下，在运动图像解码装置2000中，按照同样的单位执行切换信息18的解码、以及切换部209中的开关SW的切换。
以上是关于运动图像解码装置2000中的与环路滤波器相关的动作的说明。
这样，根据第1实施方式的运动图像编码装置，通过设定环路滤波器的滤波器系数信息以使输入图像与预测信号的误差成为最小而进行滤波处理，可以提高还原图像的画质。另外，通过环路滤波器切换部114针对每个局部区域切换将局部解码图像信号16与还原图像信号20中的哪一个用作参照图像，针对由于滤波器而画质降低的区域，不将还原图像信号20用作参照图像，从而可以防止画质降低的传播，并且针对画质提高的区域，将还原图像信号20用作参照图像，从而可以提高预测精度。
另外，根据第1实施方式的运动图像解码装置2000，通过使用与运动图像编码装置1000同样的滤波器系数信息、切换信息来进行滤波处理以及切换处理，可以保证运动图像编码装置1000中的参照图像与运动图像解码装置2000中的参照图像同步。
另外，在第1实施方式的运动图像解码装置2000中的切换滤波器处理部205A中，作为输出图像信号22输出了参照图像信号19，但也可以如图8的切换滤波器处理部205B那样将解码图像信号21作为输出图像信号22输出，或者也可以如图9的切换滤波器处理部205C那样将还原图像信号20作为输出图像信号22输出。在该情况下，生成表示将解码图像或者还原图像用作输出图像的切换信息。
另外，也可以如图10的切换滤波器处理部205D那样，新具备后置滤波器切换部210，通过切换信息18切换开关SW2，切换输出图像信号22。在该情况下，作为切换输出图像信号22的切换信息18，例如，如图32(d)那样将post_filter_flag按照切片单位记述在语法中，由此切换开关SW2。也可以与loop_filter_flag同样地，按照帧单位或者宏块单位或者与宏块不同的尺寸的块单位记述post_filter_flag。
另外，在第1实施方式的运动图像编码装置1000以及运动图像解码装置2000中，对局部解码图像信号16进行了滤波处理，但对于局部解码图像信号16，也可以使用实施了以往的解块滤波处理后的图像。
另外，该运动图像编码装置1000以及运动图像解码装置2000还可以通过例如将通用的计算机装置用作基本硬件来实现。即，预测信号生成部101、减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106、环路滤波器处理部107、参照图像用缓冲器108、编码控制部109、滤波器设定部110、切换滤波器处理部111、切换信息生成部112、滤波器处理部113、环路滤波器切换部114、熵解码部201、逆变换/逆量化部202、预测信号生成部203、加法器204、环路滤波器处理部205、参照图像用缓冲器206、解码控制部207、滤波器处理部208、环路滤波器切换部209以及后置滤波器切换部210可以通过使搭载于上述计算机装置中的处理器执行程序来实现。此时，运动图像编码装置1000以及运动图像解码装置2000既可以通过将上述程序预先安装到计算机装置而实现，也可以通过存储在CD-ROM等存储介质或者经由网络分发上述程序并将该程序适宜地安装到计算机装置上而实现。另外，参照图像用缓冲器108以及参照图像用缓冲器206可以适宜利用内置或者外装于上述计算机装置的存储器、硬盘或者CD-R、CD-RW、DVD-RAM以及DVD-R等存储介质等来实现。
(第2实施方式)
参照图11，对第2实施方式的运动图像编码装置进行说明。以下，分别叙述图11的构成要素。
图11所示的运动图像编码装置3000具有切换信息生成预测部301A、环路滤波器处理部302、局部解码图像用缓冲器303、还原图像用缓冲器304、减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105以及加法器106，通过编码控制部109进行控制。
此处，减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106以及编码控制部109进行与第1实施方式的图1的运动图像编码装置1000中的相同编号的构成要素同样的动作，所以此处省略说明。
切换信息生成预测部301A如图12所示，在内部具有参照切换预测部305A以及切换信息生成部112。此处，切换信息生成部112进行与第1实施方式的运动图像编码装置中的相同编号的构成要素同样的动作，所以此处省略说明。切换信息生成预测部301A取得局部解码图像信号16、还原图像信号20以及输入图像信号10，输出预测图像信号11以及切换信息18。
环路滤波器处理部302如图14所示，具有滤波器设定部110以及滤波器处理部113。滤波器设定部110以及滤波器处理部113进行与第1实施方式的运动图像编码装置中的相同编号的构成要素同样的动作，所以此处省略说明。环路滤波器处理部302取得局部解码图像信号16以及输入图像信号10，输出还原图像信号20以及滤波器系数信息17。
局部解码图像用缓冲器303取得并临时保存由加法器106生成的局部解码图像信号16。保存在局部解码图像用缓冲器303中的局部解码图像信号16被输入到切换信息生成预测部301A。
还原图像用缓冲器304取得并临时保存由环路滤波器处理部302生成的还原图像信号20。保存在还原图像用缓冲器304中的还原图像信号20被输入到切换信息生成预测部301A。
参照切换预测部305A如图13所示，具有预测信号生成部101以及环路滤波器切换部114。此处，预测信号生成部101以及环路滤波器切换部114分别进行与第1实施方式的运动图像编码装置1000中的相同编号的构成要素同样的动作，所以此处省略说明。参照切换预测部305A取得局部解码图像信号16、还原图像信号20以及切换信息18，根据取得的切换信息18，将局部解码图像信号16或者还原图像信号20中的某一个作为参照图像而进行规定的预测处理，输出预测图像信号11。在预测处理中，例如也可以使用利用运动预测/运动补偿的时间方向的预测、自画面内的已解码的像素的空间方向的预测等。
以上是第2实施方式的运动图像编码装置的结构。
接下来，使用图11、图12、图13、图14以及图15，详细说明第2实施方式的运动图像编码装置的动作。另外，图15是示出第2实施方式的运动图像编码装置3000中的与环路滤波器相关的动作的流程图。
首先，与以往的混合编码、第1实施方式的运动图像编码装置1000同样地，进行预测、变换、量化、以及熵编码，并且在编码装置内部进行局部解码，生成局部解码图像信号16。接下来，将生成的局部解码图像信号16临时保存在局部解码图像用缓冲器303中(步骤S3100)。在环路滤波器处理部302内部的滤波器设定部110中，取得局部解码图像信号16以及输入图像信号10，进行滤波器系数信息17的设定(步骤S3101)。此处，使用在图像还原中通常被使用的二维的Wiener filter，设计滤波器系数，以使对局部解码图像信号16实施滤波处理而得到的图像与输入图像信号10的均方误差成为最小，将设计的滤波器系数以及表示滤波器尺寸的值设定为滤波器系数信息17。设定的滤波器系数信息17同样地被输出到环路滤波器处理部302内部的滤波器处理部113，并且被输出到熵编码部104。
环路滤波器处理部302内部的滤波器处理部113使用从滤波器设定部110中取得的滤波器系数信息17，对局部解码图像信号16进行滤波处理，生成还原图像信号20(步骤S3102)。生成的还原图像信号20被临时保存在还原图像用缓冲器304中(步骤S3103)。
通过熵编码部104对由滤波器设定部110生成的滤波器系数信息17进行编码，与量化后的变换系数13、预测模式信息、块尺寸切换信息、运动矢量、以及量化参数等一起被复用到比特流中，发送到后述的运动图像解码装置4000(步骤S3104)。此时，在图31的语法结构中的属于切片等级语法(1903)的环路滤波器数据语法(1906)中，如图32(b)那样记述滤波器系数信息17。此处，滤波器系数信息17即图32(b)的filter_coeff[cy][cx]是二维滤波器的系数，filter_size_y以及filter_size_x是决定滤波器尺寸的值。此处将表示滤波器尺寸的值记述在语法中，但作为其他实施方式，也可以不记述在语法中而将预定的固定值用作滤波器尺寸。但是，请注意在将滤波器尺寸设为固定值的情况下，在该运动图像编码装置3000与后述的运动图像解码装置4000中必须使用同样的值。
接下来，切换信息生成预测部301A将局部解码图像信号16或者还原图像信号20作为参照图像而进行规定的预测处理，输出预测图像信号11(步骤S3105～3113)。此处，首先，参照切换预测部305A分别取得将局部解码图像设为参照图像的情况下的预测图像、与将还原图像设为参照图像的情况下的预测图像，根据它们，切换信息生成部112进行切换判定处理，生成用于决定将局部解码图像或者还原图像中的哪一个设为参照图像的切换信息18。参照切换预测部305A根据生成的切换信息18，切换图13的环路滤波器切换部114内部的开关SW，输出预测图像信号11。以下详细说明步骤3105至步骤3113的动作。
首先，参照切换预测部305A将图13的环路滤波器切换部114中的开关SW连接到端子A，在预测信号生成部101中将局部解码图像信号16作为参照图像而取得预测图像信号11，输入到图12的切换信息生成部112(步骤S3105)。接下来，参照切换预测部305A将开关SW连接到端子B，在预测信号生成部101中将还原图像信号20作为参照图像而取得预测图像信号11，输入到图12的切换信息生成部112(步骤S3106)。
切换信息生成部112计算从局部解码图像信号16中取得的预测图像与输入图像信号10的残差平方和SSDA、以及从还原图像信号20中取得的预测图像与输入图像信号10的残差平方和SSDB(步骤S3107)。如果将从局部解码图像信号16中取得的预测图像设为Fi，将从还原图像信号20中取得的预测图像设为Gi，则用与式(2)同样的式来表示SSDA以及SSDB。
切换信息生成部112根据SSDA以及SSDB，进行以下的切换判定处理(步骤S3108)。如果SSDA为SSDB以下，则对切换信息18即loop_filter_flag设定0(步骤S3109)。相反，如果SSDA是大于SSDB的值，对loop_filter_flag设定1(步骤S3110)。此处，针对每个宏块进行上述切换判定处理，按照宏块单位输出切换信息18。作为其他实施方式，也可以按照帧单位或者切片单位或者与宏块不同尺寸的块单位进行切换判定处理，在该情况下，也以与判定结果对应的单位输出切换信息18。
另外，在预测信号生成部101中的预测处理是运动预测的情况下，在上述切换判定处理中，也可以将通常的方法用作运动预测处理，例如，也可以针对局部解码图像以及还原图像，分别计算对残差平方和D加入了切换信息、参照图像索引、以及运动矢量等参数信息的代码量R的下式那样的成本J，并使用成本J进行判定。
式(3)
J＝D+λ×R
式(3)的λ是用常数来提供，根据量化宽度、量化参数的值来决定。对提供这样得到的成本J最小的值的切换信息、参照图像索引、以及运动矢量进行编码。另外，在本实施方式中，使用了残差平方和，但作为其他实施方式，既可以使用残差绝对值和，也可以对它们进行Hadamard变换或利用近似而得的值。另外，既可以使用输入图像的活度来制作成本，也可以利用量化宽度、量化参数来制作成本函数。另外，预测处理不限于运动预测，只要是作为预测处理需要某种参数的预测，则也可以将该参数的代码量作为R使用上式而计算成本J。
接下来，图13的环路滤波器切换部114接收所生成的切换信息18即loop_filter_flag，根据loop_filter_flag的值，切换在内部具备的开关SW(步骤S3111)。在loop_filter_flag是0的情况下，环路滤波器切换部114将开关SW连接到端子A，将局部解码图像信号16作为参照图像信号19输出，在预测信号生成部101中生成预测图像信号11(步骤S3112)。另一方面，在loop_filter_flag是1的情况下，环路滤波器切换部114将开关SW连接到端子B，将还原图像信号20作为参照图像信号19输出，在预测信号生成部101中生成预测图像信号11(步骤S3113)。
以上是切换信息生成预测部301A中的步骤3105至步骤3113的动作。
最后，熵编码部104对切换信息18进行编码，与量化后的变换系数13、预测模式信息、块尺寸切换信息、运动矢量、以及量化参数等一起复用到比特流中并发送到后述的运动图像解码装置4000(步骤S3114)。此时，在图31的语法结构中的属于宏块等级语法(1907)的宏块层语法(1908)中，如图32(c)那样记述切换信息18即loop_filter_flag。
以上是关于运动图像编码装置3000中的与环路滤波器相关的动作的说明。
接下来，对相对运动图像编码装置3000的运动图像解码装置进行说明。参照图16对第2实施方式的运动图像解码装置进行说明。以下，分别叙述图16的构成要素。
图16所示的运动图像解码装置4000具有参照切换预测部401A、解码图像用缓冲器402、还原图像用缓冲器403、熵解码部201、逆变换/逆量化部202、加法器204、以及滤波器处理部208，通过解码控制部206进行控制。
此处，熵解码部201、逆变换/逆量化部202、加法器204、滤波器处理部208、以及解码控制部206进行与第1实施方式的运动图像解码装置2000中的相同编号的构成要素同样的动作，所以此处省略说明。
参照切换预测部401A如图17所示，具有预测信号生成部203以及环路滤波器切换部209。预测信号生成部203以及环路滤波器切换部209分别进行与第1实施方式的运动图像解码装置2000中的相同编号的构成要素同样的动作，所以此处省略说明。参照切换预测部401A接收解码图像信号21、还原图像信号20以及由熵解码部201解码的切换信息18，根据接收的切换信息18，将解码图像信号21或者还原图像信号20中的某一个作为参照图像而进行规定的预测处理，输出预测图像信号11。请注意在预测处理中，例如也可以使用利用运动补偿的时间方向的预测、或自画面内的已解码的像素的空间方向的预测等，但执行与运动图像编码装置3000同样的预测处理。
解码图像用缓冲器402取得并临时保存由加法器204生成的解码图像信号21。保存在解码图像用缓冲器402中的解码图像信号21被输入到参照切换预测部401A。还原图像用缓冲器403取得并临时保存由滤波器处理部208生成的还原图像信号20。保存在还原图像用缓冲器403中的还原图像信号20被输入到参照切换预测部401A。
以上是第2实施方式的运动图像解码装置的结构。
接下来，使用图16、图17以及图18，对第2实施方式的运动图像解码装置的动作进行详细说明。另外，图18是示出第2实施方式的运动图像解码装置4000中的与环路滤波器相关的动作的流程图。
首先，如果编码数据14被输入到运动图像解码装置4000，则通过熵解码部201，按照图31的语法结构，除了对滤波器系数信息17、切换信息18以外，还对变换系数13、预测模式信息、块尺寸切换信息、运动矢量、以及量化参数等进行解码(步骤S4100)。
在图31的语法结构中的属于切片等级语法(1903)的环路滤波器数据语法(1906)内，如图32(b)所示，记述有滤波器系数信息17。此处，滤波器系数信息17即图32(b)的filter_coeff[cy][cx]是二维滤波器的系数，filter_size_y以及filter_size_x是决定滤波器尺寸的值。此处将表示滤波器尺寸的值记述在语法中，但作为其他实施方式，也可以不记述在语法中而将预定的固定值用作滤波器尺寸。但是，请注意在将滤波器尺寸设为固定值的情况下，在运动图像编码装置3000与运动图像解码装置4000中必须使用同样的值。
另外，在图31的语法结构中的属于宏块等级语法(1907)的宏块层语法(1908)内，如图32(c)所示，作为切换信息18而记述有loop_filter_flag。
与以往的混合编码、第1实施方式的运动图像解码装置2000同样地，对由熵解码部201解码的变换系数13进行熵解码、逆量化、以及逆变换，与由参照切换预测部401A输出的预测图像信号11进行加法计算，作为解码图像信号21而输出。解码图像信号21被输出到滤波器处理部208，并且临时保存在解码图像用缓冲器402中(步骤S4101)。
滤波器处理部208取得由熵解码部201还原的滤波器系数信息17(步骤S4102)。另外，滤波器处理部208接收解码图像信号21，对解码图像使用滤波器系数信息17进行滤波处理，生成还原图像信号20(步骤S4103)。滤波器处理部208将生成的还原图像信号20作为输出图像信号22输出，并且临时保存在还原图像用缓冲器403(步骤S4104)。
接下来，参照切换预测部401A将解码图像信号21或者还原图像信号20作为参照图像而生成预测图像信号11(步骤4105～4108)。以下，对步骤4105至步骤4108的动作进行说明。
首先，图17的参照切换预测部401A取得所解码的切换信息18即loop_filter_flag(步骤S4105)。接下来，参照切换预测部401A内部的环路滤波器切换部A209根据取得的loop_filter_flag切换开关SW(步骤S4106)。在loop_filter_flag是0的情况下，环路滤波器切换部209将开关SW连接到端子A，将解码图像信号21作为参照图像信号19取得，并发送到预测信号生成部203。预测信号生成部203根据与解码图像信号21对应的参照图像信号19，生成预测图像信号11(步骤S4107)。另一方面，在loop_filter_flag是1的情况下，环路滤波器切换部209将开关SW连接到端子B，将还原图像信号20作为参照图像信号19取得，并发送到预测信号生成部203。预测信号生成部203根据与还原图像信号20对应的参照图像信号19，生成预测图像信号11(步骤S4108)。
以上是参照切换预测部401A中的步骤S4105至步骤S4108的动作。
此处，参照切换预测部401A按照图32(c)的语法，以宏块单位取得切换信息18，并且切换开关SW。作为其他实施方式，在运动图像编码装置3000按照帧单位或者切片单位或者与宏块不同的尺寸的块单位对切换信息18进行编码的情况下，运动图像解码装置4000按照同样的单位执行切换信息18的解码、以及环路滤波器切换部209中的开关SW的切换。
以上是关于运动图像解码装置4000中的与环路滤波器相关的动作的说明。
这样，根据第2实施方式的运动图像编码装置，通过设定使输入图像与预测信号的误差成为最小那样的环路滤波器的滤波器系数信息而进行滤波处理，可以提高参照图像的画质。另外，通过切换信息生成预测部301A的内部具备的环路滤波器切换部114切换将局部解码图像信号16与还原图像信号20中的哪一个作为参照图像来进行预测处理，针对由于滤波器而画质降低的区域，不将还原图像信号20用作参照图像，从而可以防止画质降低的传播，并且针对画质提高的区域，将还原图像信号20用作参照图像，从而可以提高预测精度。
另外，根据第2实施方式的运动图像解码装置4000，通过使用与运动图像编码装置3000同样的滤波器系数信息、切换信息来进行滤波处理以及参照图像的切换，可以保证运动图像编码装置3000中的参照图像与运动图像解码装置4000中的参照图像同步。
另外，在第2实施方式的运动图像解码装置4000中，将由滤波器处理部208生成的还原图像信号20作为输出图像信号22而输出，但作为其他实施方式，也可以将解码图像信号21作为输出图像信号22而输出。另外，在第2实施方式的运动图像编码装置3000以及运动图像解码装置4000中，对局部解码图像信号16进行了滤波处理，但对于局部解码图像信号16，也可以使用实施了以往的解块滤波处理后的图像。
另外，在第2实施方式的运动图像编码/解码装置中，在上述实施方式中，由参照切换预测部401A取得并使用了临时保存在还原图像用缓冲器中的还原图像信号20，但作为其他实施方式，也可以不具备还原图像用缓冲器，而是在参照切换预测部内部具备滤波器处理部，从而在参照图像切换预测部内部生成还原图像。图19～图23示出与这样的实施方式中的运动图像编码装置以及运动图像解码装置相关的图。
图19的运动图像编码装置3001具有切换信息生成预测部301B，图20的切换信息生成预测部301B具有参照切换预测部305B。图21的参照切换预测部305B在内部具备滤波器处理部113，由此，可以通过取得局部解码图像信号16以及滤波器系数信息17而生成还原图像信号20。另外，图22的运动图像解码装置4001具有参照切换预测部401B。图23的参照切换预测部401B在内部具备滤波器处理部208，由此，可以通过取得解码图像信号21以及滤波器系数信息17而生成还原图像信号20。
这样，通过采用运动图像编码装置3001以及运动图像解码装置4001那样的结构，可以削减还原图像用缓冲器中所需的存储器量，并且可以实现与运动图像编码装置3000以及运动图像解码装置4000相同的动作。
另外，该运动图像编码装置3000、3001、以及运动图像解码装置4000、4001还可以通过例如将通用的计算机装置用作基本硬件来实现。即，切换信息生成预测部301、环路滤波器处理部302、局部解码图像用缓冲器303、还原图像用缓冲器304、参照切换预测部305、预测信号生成部101、减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106、编码控制部109、滤波器设定部110、切换信息生成部112、滤波器处理部113、环路滤波器切换部114、参照切换预测部401、解码图像用缓冲器402、还原图像用缓冲器403、熵解码部201、逆变换/逆量化部202、预测信号生成部203、加法器204、解码控制部206、滤波器处理部208、以及环路滤波器切换部209可以通过使搭载于上述计算机装置中的处理器执行程序来实现。此时，运动图像编码装置3000、3001以及运动图像解码装置4000、4001既可以通过将上述程序预先安装到计算机装置中而实现，也可以通过存储在CD-ROM等存储介质或者经由网络分发上述程序而将该程序适宜安装在计算机装置中来实现。另外，局部解码图像用缓冲器303、还原图像用缓冲器304、解码图像用缓冲器402、以及还原图像用缓冲器403可以通过适宜使用内置或者外装在上述计算机装置的存储器、硬盘或者CD-R、CD-RW、DVD-RAM、以及DVD-R等存储介质等来实现。
(第3实施方式)
参照图24对第3实施方式的运动图像编码装置进行说明。以下，分别叙述图24的构成要素。
图24所示的运动图像编码装置5000具有环路滤波器处理部501、预测信号生成部101、减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106、以及参照图像用缓冲器108，通过编码控制部109进行控制。
此处，预测信号生成部101、减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106、参照图像用缓冲器108、以及编码控制部109进行与第1实施方式的图1的运动图像编码装置1000中的相同编号的构成要素同样的动作，所以此处省略说明。
环路滤波器处理部501接收局部解码图像信号16以及输入图像信号10，输出参照图像信号19以及滤波器系数信息17。在后面详细说明环路滤波器处理部501。
接下来，使用图25以及图26，详述第3实施方式的运动图像编码装置中的环路滤波器处理部501。以下，分别叙述图25以及图26的构成要素。
图25所示的环路滤波器处理部501具有滤波器设定部110以及切换信息生成滤波器处理部502，进而，切换信息生成滤波器处理部502如图26所示，具有切换滤波器处理部111以及切换信息生成部503。此处，滤波器设定部110、切换滤波器处理部111进行与第1实施方式的图2的环路滤波器处理部107中的相同编号的构成要素同样的动作，所以此处省略说明。
切换信息生成部503被编码控制部109控制，接收局部解码图像信号16，按照规定的切换判定方法生成切换信息18。生成的切换信息18被输入到切换滤波器处理部111。在后面详述切换判定方法。
以上是第3实施方式的运动图像编码装置的结构。
接下来，使用图25、图26以及图27，对第3实施方式的运动图像编码装置中的环路滤波器的动作进行详细说明。另外，图27是示出第3实施方式的运动图像编码装置5000中的与环路滤波器相关的动作的流程图。
首先，图25所示的滤波器设定部110取得局部解码图像信号16以及输入图像信号10，进行滤波器系数信息17的设定(步骤S5100)。此处，滤波器设定部110使用在图像还原中通常被使用的二维的Wiener filter，设计滤波器系数，以使对局部解码图像信号16实施滤波处理而得到的图像与输入图像信号10的均方误差成为最小，将设计的滤波器系数以及表示滤波器尺寸的值设定为滤波器系数信息17。设定的滤波器系数信息17被输出到图25所示的切换信息生成滤波器处理部502，并且被输出到熵编码部104。
接下来，图26所示的切换信息生成滤波器处理部502内部具备的切换信息生成部503取得局部解码图像信号16(步骤S5101)。切换信息生成部503按照像素单位计算局部解码图像信号16中的注目像素、与其周边的像素的差分绝对值和SAD(步骤S5102)。如果将局部解码图像内的像素的坐标设为x、y，将局部解码图像设为F(x、y)，则用下式来表示SAD。
[数4]
SAD = Σ j = - 1 1 Σ i = - 1 1 | F ( x , y ) - F ( x + i , y + j ) |
接下来，使用SAD与预先对编码控制部109设定的阈值T，进行以下的切换判定处理(步骤S5103)。如果SAD是T以下，则对切换信息18即loop_filter_flag设定0(步骤S5104)。相反，如果SAD是大于T的值，则对loop_filter_flag设定1(步骤S5105)。此处，按照像素单位求出了切换信息18，但作为其他实施方式，也可以按照帧单位或者切片单位或者宏块单位或者与宏块不同的尺寸的块单位进行切换判定处理，在该情况下，也以与其对应的单位输出切换信息18。
另外，此处使用了对象像素与周边像素的差分绝对值和，但作为其他实施方式，也可以使用差分平方和，如果是可以根据局部解码图像计算的指标，则也可以使用活度、空间频率、边缘强度、以及边缘方向等指标。另外，此处，根据局部解码图像计算了上述指标，但也可以取得对局部解码图像进行滤波处理后的还原图像，根据还原图像计算上述指标。
另外，作为其他实施方式，也可以根据作为编码信息的一部分的量化参数、块尺寸、预测模式、运动矢量、以及变换系数等进行切换判定处理。
接下来，图26所示的切换滤波器处理部111除了取得生成的切换信息18以外，还取得局部解码图像信号16以及滤波器系数信息17，进行与第1实施方式的运动图像编码装置1000中的图4的步骤S1107至步骤S1109同样的动作，从而输出参照图像信号19。即，图3的环路滤波器切换部114取得所生成的切换信息18即loop_filter_flag，根据loop_filter_flag的值，切换在内部具备的开关SW(步骤S5106)。在loop_filter_flag是0的情况下，环路滤波器切换部114将开关SW连接到端子A，将局部解码图像信号16作为参照图像信号19而临时保存在参照图像用缓冲器108中(步骤S5107)。另一方面，在loop_filter_flag是1的情况下，环路滤波器切换部114将开关SW连接到端子B，将还原图像信号20作为参照图像信号19而临时保存在参照图像用缓冲器108中(步骤S5108)。
最后，通过熵编码部104对由滤波器设定部110生成的滤波器系数信息17进行编码，与量化后的变换系数13、预测模式信息、块尺寸切换信息、运动矢量、以及量化参数等一起被复用到比特流并发送到后述的运动图像解码装置6000(步骤S5109)。此时，在图31的语法结构中的属于切片等级语法(1903)的环路滤波器数据语法(1906)中，如图32(b)那样记述滤波器系数信息17。滤波器系数信息17即图32(b)的filter_coeff[cy][cx]是二维滤波器的系数，filter_size_y以及filter_size_x是决定滤波器尺寸的值。此处将表示滤波器尺寸的值记述在语法中，但作为其他实施方式，也可以不记述在语法中而将预定的固定值用作滤波器尺寸。但是，请注意在将滤波器尺寸设为固定值的情况下，在运动图像编码装置5000与后述的运动图像解码装置6000中必须使用同样的值。
以上是关于运动图像编码装置5000中的与环路滤波器相关的动作的说明。
接下来，对与运动图像编码装置6000相对的运动图像解码装置进行说明。参照图28对第3实施方式的运动图像解码装置进行说明。以下，分别叙述图28的构成要素。
图28所示的运动图像解码装置6000具有切换信息生成滤波器处理部601、熵解码部201、逆变换/逆量化部202、预测信号生成部203、加法器204、以及参照图像用缓冲器206，通过解码控制部207进行控制。
此处，熵解码部201、逆变换/逆量化部202、预测信号生成部203、加法器204、参照图像用缓冲器206、以及解码控制部207进行与第1实施方式的图5的运动图像解码装置2000中的相同编号的构成要素同样的动作，所以此处省略说明。
切换信息生成滤波器处理部601取得解码图像信号21以及滤波器系数信息17，输出参照图像信号19以及输出图像信号22。在后面详细说明切换信息生成滤波器处理部601。
接下来，使用图29详细叙述第3实施方式的运动图像解码装置中的切换信息生成滤波器处理部601。以下，分别叙述图29的构成要素。
图29所示的切换信息生成滤波器处理部601具有切换信息生成部602以及切换滤波器处理部205。此处，切换滤波器处理部205进行与第1实施方式的图5的运动图像解码装置2000中的相同编号的构成要素同样的动作，所以此处省略说明。
切换信息生成部602被解码控制部207控制，取得解码图像信号21，按照规定的切换判定方法生成切换信息18。生成的切换信息18被输入到切换滤波器处理部205。在后面详述切换判定方法。
以上是第3实施方式的运动图像解码装置的结构。
接下来，使用图28、图29以及图30，对第3实施方式的运动图像解码装置的动作进行详细说明。另外，图30是示出第3实施方式的运动图像解码装置6000中的与环路滤波器相关的动作的流程图。
首先，熵解码部201按照图31的语法结构，对滤波器系数信息17进行解码(步骤S6100)。在图31的语法结构中的属于切片等级语法(1903)的环路滤波器数据语法(1906)内，如图32(b)所示，记述有滤波器系数信息17。此处，滤波器系数信息17即图32(b)的filter_coeff[cy][cx]是二维滤波器的系数，filter_size_y以及filter_size_x是决定滤波器尺寸的值。此处将表示滤波器尺寸的值记述在语法中，但作为其他实施方式，也可以不记述在语法中而使用预定的固定值。但是，请注意在将滤波器尺寸设为固定值的情况下，在运动图像编码装置5000与运动图像解码装置6000中必须使用同样的值。
切换信息生成滤波器处理部601取得所解码的滤波器系数信息17(步骤S6101)。另外，切换信息生成滤波器处理部601取得从加法器204取得的解码图像信号21(步骤S6102)。图29所示的切换信息生成滤波器处理部601的内部具备的切换信息生成部602按照像素单位计算解码图像信号21中的注目像素、与其周边的像素的差分绝对值和SAD(步骤S6103)。如果将解码图像内的像素的坐标设为x、y，将解码图像设为F(x、y)，则用式(4)表示SAD。
使用SAD与预先对解码控制部207设定的阈值T，进行以下的切换判定处理(步骤S6104)。此处，请注意对于阈值T，使用与由运动图像编码装置5000设定的阈值T相同的值。如果SAD是T以下，则对切换信息18即loop_filter_flag设定0(步骤S6105)。相反，如果SAD是大于T的值，则对loop_filter_flag设定1(步骤S6106)。此处，按照像素单位求出了切换信息18，但作为其他实施方式，也可以按照帧单位或者切片单位或者宏块单位或者与宏块不同的尺寸的块单位来判定切换判定处理，在该情况下，还以与其对应的单位对切换信息18进行解码。
另外，此处使用了对象像素与周边像素的差分绝对值，但作为其他实施方式，既可以使用差分平方和，也可以只要是能根据解码图像计算的指标，则也可以使用活度、空间频率、边缘强度、以及边缘方向等指标。另外，此处，根据解码图像计算了上述指标，但也可以取得对解码图像进行滤波处理后的还原图像，根据还原图像计算上述指标。
另外，作为其他实施方式，也可以根据作为编码信息的一部分的量化参数、块尺寸、预测模式、运动矢量、以及变换系数等进行切换判定处理。不论如何，请注意运动图像解码装置6000中的切换信息生成部602必须进行与运动图像编码装置5000中的切换信息生成部503同样的切换判定处理。
图29所示的切换滤波器处理部205除了取得生成的切换信息18以外，还取得解码图像信号21以及滤波器系数信息17，进行与第1实施方式的运动图像解码装置2000中的图7的步骤S2103至步骤S2105同样的动作，从而输出参照图像信号19。即，图6的环路滤波器切换部205A取得所生成的切换信息18即loop_filter_flag，根据loop_filter_flag的值切换在内部具备的开关SW(步骤S6107)。在loop_filter_flag是0的情况下，环路滤波器切换部205A将开关SW连接到端子A，将解码图像信号21作为参照图像信号19而临时保存在参照图像用缓冲器206中(步骤S6108)。另一方面，在loop_filter_flag是1的情况下，环路滤波器切换205A部将开关SW连接到端子B，将还原图像信号20作为参照图像信号19而临时保存在参照图像用缓冲器206中(步骤S6109)。
如上所述，切换信息生成滤波器处理部601使用所取得的解码图像信号21，通过与第3实施方式的运动图像编码装置中的图26的切换信息生成滤波器处理部502同样的动作，生成切换信息18，并且输出参照图像信号19。
以上是关于运动图像解码装置6000中的与环路滤波器相关的动作的说明。
这样，根据第3实施方式的运动图像编码装置，通过设定使输入图像与预测图像的误差成为最小那样的环路滤波器的滤波器系数信息来进行滤波处理，可以提高参照图像的画质。另外，通过环路滤波器切换部114使用根据局部解码图像16计算出的指标，针对每个局部区域切换将局部解码图像信号16与还原图像信号18中的哪一个保持为参照图像，从而可以防止由于滤波器引起的画质降低传播，可以提高编码效率。
另外，根据第3实施方式的运动图像解码装置，通过使用与运动图像编码装置同样的滤波器系数信息来进行滤波处理，并且进行同样的切换判定处理，从而可以保证运动图像编码装置中的参照图像与运动图像解码装置中的参照图像同步。
另外，根据第3实施方式的运动图像编码装置以及运动图像解码装置，通过在编码侧根据可以依据局部解码图像计算的指标来生成切换信息，在解码侧也可以根据解码图像计算同样的切换信息。因此，可以削减对切换信息进行了编码时的代码量。
另外，在第3实施方式的运动图像解码装置6000中，也可以通过与第1实施方式的运动图像解码装置2000同样地，将切换滤波器处理部205设为图8或者图9那样的结构，将解码图像21或者参照图像19作为输出图像信号22而输出。
另外，也可以通过将切换滤波器处理部205设为图10那样的结构，并由切换信息生成部新生成后置滤波器用的切换信息，而切换图10的后置滤波器切换部210具备的开关SW2，来切换输出图像信号22。
另外，在第3实施方式的运动图像编码装置5000以及运动图像解码装置6000中，对局部解码图像信号16进行了滤波处理，但对于局部解码图像信号16，也可以使用实施了以往的解块滤波处理后的图像。
另外，运动图像编码装置5000以及运动图像解码装置6000还可以通过例如将通用的计算机装置用作基本硬件来实现。即，环路滤波器处理部501、切换信息生成滤波器处理部502、切换信息生成部503、预测信号生成部101、减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106、参照图像用缓冲器108、编码控制部109、滤波器设定部110、切换滤波器处理部111、切换信息生成滤波器处理部601、切换信息生成部602、熵解码部201、逆变换/逆量化部202、预测信号生成部203、加法器204、切换滤波器处理部205、参照图像用缓冲器206以及解码控制部207可以通过使搭载于上述计算机装置的处理器执行程序来实现。此时，运动图像编码装置5000以及运动图像解码装置6000既可以将上述程序预先安装在计算机装置中来实现，也可以通过存储在CD-ROM等存储介质中或者经由网络分发上述程序而将该程序适宜安装在计算机装置中来实现。另外，参照图像用缓冲器108以及参照图像用缓冲器206可以适宜利用内置或者外装于上述计算机装置的存储器、硬盘或者CD-R、CD-RW、DVD-RAM、以及DVD-R等存储介质等来实现。
(第4实施方式)
在上述第1实施方式中，示出了按照16×16像素的宏块单位设定切换信息的例子。另一方面，本实施方式中的设定切换信息的单位不限于上述宏块，而可以使用序列、帧、或者对画面内进行分割而得到的切片、像素块等。
在本实施方式中，在上述第1实施方式的编码以及解码方法中，说明将设定切换信息的单位设为每个像素块，适应性地切换像素块的尺寸的方法。
使用图37、图38，对第4实施方式的编码装置以及解码装置中的切换滤波器处理部111进行说明。图37以及图38的切换滤波器处理部111是图3以及图6的切换滤波器处理部111的变形例，成为通过开关SW仅在将还原图像信号20设为参照图像的情况下进行滤波处理的结构。即，在图37中，在滤波器处理部113的前级设置有开关SW，开关SW的端子A被直接导出到参照图像用缓冲器108，将局部解码图像信号16原样地作为参照图像信号而存储在缓冲器108中。开关SW的端子B经由滤波器处理部113被导出到参照图像用缓冲器108，通过滤波器处理部113根据滤波器系数信息17对局部解码图像信号16进行滤波处理后作为参照图像信号而存储在缓冲器108中。另外，在图38中，在滤波器处理部208的前级设置有开关SW，开关SW的端子A被直接导出到输出线，解码图像信号21被原样地输出到输出线。开关SW的端子B经由滤波器处理部208被导出到输出线，通过滤波器处理部208根据滤波器系数信息17对解码图像信号进行了滤波处理后作为参照图像信号19以及输出图像信号22而被输出到输出线。通过这样的结构，仅在切换信息18即loop_folter_flag成为1的情况下，滤波器处理部113或者208进行滤波处理即可，所以与图3以及图6的结构相比，可以削减处理成本。图37以及38的变形例当然还可以适用于第1至第3实施方式。
本实施方式的图37以及图38的切换滤波器处理部111与上述第1实施方式中的切换滤波器处理部111同样地，在内部具有滤波器处理部113以及环路滤波器切换部114，取得局部解码图像信号16或者解码图像信号21、滤波器系数信息17、以及切换信息18，输出参照图像信号19。另外，在本实施方式中同时取得区域设定信息23，输入到环路滤波器切换部114。
此处，区域设定信息23是对根据块尺寸切换开关SW的定时进行控制的信息，表示将画面分割成矩形块的情况下的一个块的大小。区域设定信息23既可以使用块尺寸的值本身，或者也可以是预先准备的决定块尺寸的区域尺寸规定表中的索引。
图39(a)示出上述区域尺寸规定表的一个例子。在图39(a)的区域尺寸规定表中，将作为最小的块尺寸的纵横4像素的正方形块的索引设定为0，使一边的像素数逐次增加2倍而准备直到512×512像素的八个块尺寸。通过在编码以及解码侧保持相同的区域尺寸规定表，从而在编码侧，将由图39(a)的区域尺寸规定表决定的索引作为块信息进行编码，在解码侧根据使用同样的区域尺寸规定表进行解码而得到的块信息来决定块尺寸。另外，区域尺寸规定表(a)设置在编码控制部以及解码控制部中。
接下来，使用图42，对包括本实施方式的区域设定信息23的语法进行说明。例如如图42那样记述本实施方式的图31的语法结构中的环路滤波器数据语法(1906)。图42(a)的filter_block_size表示区域设定信息23，NumOfBlock是由filter_block_size表示的块尺寸决定的1切片内的块总数。例如，在使用了图39(a)的区域尺寸规定表的情况下，如果作为区域设定信息的索引被设定为0，则按照4×4像素块分割切片，针对每4×4像素块对loop_filter_flag进行编码。由此，在切片中，可以在编码侧以及解码侧这双方，针对每4×4像素块切换切换滤波器处理部111中的开关SW。
另外，作为其他实施方式，也可以将针对成为基本的块尺寸的分割方法用作区域设定信息。例如，如图39(b)的区域尺寸规定表那样，准备“无分割”、“横向2分割”、“纵向2分割”、以及“纵横2分割”这四种块分割方法，并分别分配索引编号。由此，在将成为基本的块尺寸设为16×16像素块以及8×8像素块的情况下，可以分别取图40那样的块形状。在与其相关的语法中，如图42(b)所示，在成为基本的块尺寸的环路中记述作为区域设定信息的filter_block_size，对由filter_block_size决定的子块数即NumOfSubblock数量的loop_filter_flag进行编码。作为例子，图41示出将基本块尺寸设为16×16以及8×8的情况下的参照图像例子。另外，区域尺寸规定表(b)设置在编码控制部以及解码控制部中。
这样，根据第4实施方式的运动图像编码以及解码方法，针对用于对画面内进行区域分割的区域设定信息进行设定以及编码，从而可以使画面的块分割具有多样性，对进行分割而得到的各块设定切换信息，从而可以针对每个帧或者帧内的局部区域适应性地控制滤波处理的切换定时。
此处，在适应性地切换了块尺寸的情况下，块尺寸越小即越细致地分割画面，为了对切换信息进行编码而所需的代码量越增加，有可能导致编码效率的降低。因此，也可以准备多个上述区域尺寸规定表，根据对应用环路滤波器的图像的代码量贡献且在编码以及解码侧这双方得到的规定信息来切换使用区域尺寸规定表。例如，可以在编码控制部以及解码控制部中准备图39(c)所示那样的多个区域尺寸规定表，根据图像尺寸、图片类型、以及决定量化的粗细的量化参数来切换区域尺寸规定表。对于图像尺寸，使用图像尺寸相对越大，就准备越大的尺寸的块的区域尺寸规定表。
另外，对于图片类型，在采用通常使用的方法的情况下，代码量具有成为I图片＞P图片＞B图片的倾向，所以在按照少的代码量进行编码的B图片等中，使用准备了大的尺寸的块的区域尺寸规定表。
另外，对于量化参数，量化参数的值越大，变换系数的代码量越小，所以使用准备了相对大的尺寸的块的区域尺寸规定表。
通过如上所述切换块尺寸不同的多个区域尺寸规定表，可以使用被限定的索引编号，来更适应性地选择块尺寸。另外，可以高效地控制变换系数、编码参数的代码量与切换信息中所需的代码量的平衡。
进而，作为其他实施方式，对于块信息，也可以使用与在生成局部解码图像或者解码图像时的编码以及解码中使用的运动补偿块尺寸以及变换块尺寸等同步的块尺寸，在该情况下，无需在环路滤波器数据语法(1906)中记述块信息，而可以变更滤波处理的切换定时，可以削减与块信息相关的代码量。
另外，此处叙述了将画面内分割成矩形块的情况，但只要是在编码装置以及解码装置这双方可以实现相同的区域分割的分割方法，则不限于矩形块。
(第5实施方式)
接下来，参照图43以及图44，对第5实施方式的运动图像编码方法进行说明。
图43的环路滤波器处理部107具有与上述第1实施方式中的图2的环路滤波器处理部107同样的构成要素，在内部具有滤波器设定部110、切换滤波器处理部111以及切换信息生成部112，取得局部解码图像信号16以及输入图像信号10，输出滤波器系数信息17、切换信息18、以及参照图像信号19。
另一方面，在本实施方式中，针对每个对画面内进行分割而得到的局部区域设定切换信息18，并将切换信息18输入到滤波器设定部110，从而根据切换信息18选择性地取得滤波器设定中使用的区域。
使用图44的流程图，对第5实施方式的运动图像编码装置中的与环路滤波器相关的动作进行详细说明。
在图44的流程图中，将R设为滤波器系数信息的设定次数的最大值，将N设为对画面进行分割而得到的局部区域的总数。首先，对滤波器系数信息设定次数r设置0(步骤S7100)，将切换信息即loop_filter_flag在所有区域中设置成1(步骤S7101)。接下来，使r递增1(步骤S7102)。
之后，在图43中的滤波器设定部110中，进行滤波器系数信息的设定(步骤S1100)。此处，与第1实施方式同样地，使用在图像还原中通常被使用的二维的Wiener filter，设计滤波器系数，以使对局部解码图像信号16实施滤波处理而得到的图像(参照图像信号19)与输入图像信号10的均方误差成为最小，将设计的滤波器系数以及表示滤波器尺寸的值设定为滤波器系数信息17。此处，在第5实施方式中的图43的滤波器设定部110中，仅使用输入的切换信息即loop_filter_flag被设定成1的区域来计算均方误差。此处，在成为r＝1的初次的滤波器系数信息的设定中，在步骤S7101中对所有区域的loop_filter_flag设置1，所以与第1实施方式同样地，生成设计成画面整体的均方误差成为最小的滤波器系数信息。
接下来，图43的切换滤波器处理部111针对对画面进行分割而得到的各个局部区域设定切换信息18。即，如果将区域编号设为n，则首先对n设置0(步骤S7103)，然后使n递增1(步骤S7104)。接下来，针对第n个区域进行与第1实施方式同样的步骤S1101～步骤S1109的处理。直到n达到总数N为止反复以上处理(步骤S7105)。
在针对画面内的所有区域设定了loop_filter_flag后，直到滤波器系数信息设定次数r达到预定的滤波器系数信息的设定次数的最大值R为止，反复上述一连串的处理(步骤S7106)。这样，根据第5实施方式的运动图像编码方法，在第2次以后的滤波器系数信息的设定中，可以限定于loop_filter_flag被设定成1的区域而设定使均方误差最小化的滤波器。例如，在通过第1次设定的切换信息得到的参照图像为如图33所示的情况下，在第2次的滤波器系数信息的设定中，可以仅限于“应用了环路滤波器的宏块”而设定使均方误差成为最小化的滤波器。由此，可以针对“应用了环路滤波器的宏块”，设定画质改善效果更大的滤波器。
另外，本发明不限于上述第1至第3实施方式等本身，可以在实施阶段在不脱离其要旨的范围内将构成要素变形而具体化。另外，可以通过上述实施方式公开的多个构成要素的适宜组合，来形成各种发明。例如，也可以从实施方式示出的所有构成要素中删除几个构成要素。进而，也可以适宜组合不同的实施方式的构成要素。
(第6实施方式)
接下来，对第6实施方式的运动图像编码装置以及运动图像解码装置进行说明。图45示出运动图像编码装置以及运动图像解码装置这双方中存在的滤波器处理部，示出与第1和第2实施方式的滤波器处理部113以及第3实施方式和第4实施方式中的滤波器处理部208相当的滤波器处理部。
对图45的局部解码图像滤波器处理部701，在运动图像编码装置的情况下，输入局部解码图像信号、切换信息、滤波器信息以及编码信息，在运动图像解码装置的情况下，输入解码图像信号、切换信息、滤波器信息以及编码信息，生成参照图像信号。滤波器处理部701由滤波器边界判定处理部702、开关703、解块滤波器处理部704、开关705、以及图像还原滤波器处理部706构成。
滤波器边界判定处理部702使用根据局部解码图像信号或者解码像信号得到的编码信息，在变换处理、运动补偿的单位即块的边界部分的像素中判定应进行解块滤波处理的像素，对开关703与开关705进行控制。此时，滤波器边界判定处理部702在判定为输入像素是块边界像素的情况下，将开关703以及开关705连接到端子A，通过解块滤波器处理部704对像素信号进行解块滤波处理，在判定为输入像素并非块边界像素的情况下，将开关703以及开关705连接到端子B，通过图像还原滤波器处理部706对输入像素进行图像还原滤波处理。
解块滤波器处理部704对块边界判定处理部702判定为块边界的像素，使用预先制作的滤波器系数或者从局部解码图像滤波器处理部701的外部提供的滤波器系数信息，进行消除由于变换处理、运动补偿处理产生的块失真那样的滤波处理(例如，像素信号的平均化处理)。
图像还原滤波器处理部706对块边界判定处理部702判定为并非块边界的像素，通过从局部解码图像滤波器处理部701的外部提供的滤波器系数，进行局部解码图像的还原处理。关于图像还原滤波器处理部706，将第1实施方式的图3以及图6以及图8以及图9以及图10的切换滤波器处理部111、205A、205B、205C、205D、第2实施方式的图14以及图16的滤波器处理部113、208、第2实施方式的图21以及图23的参照切换预测部305B、401B、第3实施方式的图26以及图29的切换信息生成滤波器处理部502、601、第4实施方式的图37以及图38的切换滤波器处理部111、205A直接置换而成。
这样根据第6实施方式，对于块边界部分，可以进行考虑了通过由于变换处理、运动补偿处理产生块失真而引起的解码图像信号的性质差异的滤波处理，可以提高图像整体的还原性能。
(第7实施方式)
接下来使用图46至图49，对第7实施方式的运动图像编码装置以及解码装置进行说明。首先，参照图46对第7实施方式的运动图像编码装置进行说明。以下，分别说明图46的构成要素。
图46所示的运动图像编码装置7000具有减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106、解块滤波器部801、滤波器设定/切换信息生成部802、解码图像用缓冲器803、预测图像制作部804、以及运动矢量生成部805，通过编码控制部109进行控制。
此处，减法器102、变换/量化部103、熵编码部104、逆变换/逆量化部105、加法器106以及编码控制部109进行与第2实施方式的图11的运动图像编码装置3000中的相同编号的构成要素同样的动作，所以此处省略说明。
另外，滤波器设定/切换信息生成部802进行与第1实施方式的图2的环路滤波器处理部107内的滤波器设定部110和切换信息生成部112同样的动作。
作为具体的动作，与以往的混合编码、第1实施方式的运动图像编码装置1000、第2实施方式的运动图像编码装置3000同样地，运动图像编码装置7000对预测误差进行变换、量化、以及熵编码，并且通过逆量化、逆变换进行局部解码。针对局部解码信号通过解块滤波器部801进行了去除块边界的失真的滤波处理之后，将该滤波处理后的局部解码信号临时保存在解码图像用缓冲器803中。滤波器设定/切换信息生成部802接收已滤波处理的局部解码图像信号以及输入图像信号，生成滤波器系数以及切换信息。滤波器设定/切换信息生成部802将生成的滤波器系数信息输出到解码图像用缓冲器803，并且输出到熵编码部104。熵编码部104对由滤波器设定/切换信息生成部802生成的滤波器系数、切换信息进行编码，并且，将量化后的变换系数与预测模式信息、块尺寸切换信息、运动矢量信息以及量化参数等一起复用到比特流中，并发送到后述的运动图像解码装置8000。此时，将滤波器系数信息、切换信息作为输入图像的编码信息，按照图32等的语法来发送。
在解码图像用缓冲器803中，积蓄有由预测图像制作部804参照的局部解码图像、与该局部解码图像对应的滤波器系数、以及切换信息。
预测图像制作部804使用由解码图像用缓冲器803管理的局部解码图像、滤波器系数、切换信息以及由运动矢量生成部805生成的运动矢量信息，制作进行了运动补偿的预测图像。减法器102生成所制作的预测图像与输入图像的预测误差信号。另一方面，通过熵编码部104对运动矢量信息进行编码，与其他信息进行复用。
参照图47对第7实施方式的运动图像解码装置进行说明。以下，分别说明图47的构成要素。图47所示的运动图像解码装置8000具有熵解码部201、逆变换/逆量化部202、加法器204、解块滤波器部811、解码图像用缓冲器813、以及预测图像制作部814，通过解码控制部206进行控制。
熵解码部201、逆变换/逆量化部202、加法器204以及解码控制部206进行与第1实施方式的运动图像解码装置2000中的相同编号的构成要素同样的动作，所以此处省略说明。
作为具体的动作，与以往的混合编码的解码、第1实施方式的运动图像解码装置2000、第2实施方式的运动图像解码装置4000同样地，对由熵解码部201解码的信号进行逆量化、逆变换，生成预测误差信号，通过加法器204与预测图像进行加法计算，从而生成解码图像。在对该解码信号通过解块滤波器部811进行了去除块边界的失真的滤波处理之后，输出解码图像并且积蓄在解码图像用缓冲器813中。
在解码图像用缓冲器813中，积蓄有由预测图像制作部814参照的解码图像、由熵解码部201解码的与该解码图像对应的滤波器系数、以及切换信息。在预测图像制作部813中，根据由熵解码部2解码的运动矢量信息与来自解码图像用缓冲器402的解码图像、滤波器系数以及切换信息，制作进行了还原滤波处理与运动补偿的预测图像。
通过图46以及图47那样的运动图像编码装置以及运动图像解码装置那样的结构将适应性的图像还原处理应用到运动补偿预测，从而可以实现编码效率的改善。图48是图46与图47的预测图像制作部814的具体实施的一个实施方式。以下，分别说明图48的构成要素。
图48所示的预测图像制作部804由开关821、还原图像制作部822、以及内插图像制作部823构成。开关821是对于根据运动矢量信息所参照的解码图像切换是否进行还原滤波处理的开关，根据由滤波器设定/切换信息生成部802生成的切换信息进行切换。在开关821被切换到端子A的情况下，还原图像制作部822使用由滤波器设定/切换信息生成部802设定的滤波器系数，对根据运动矢量信息所参照的解码图像进行还原滤波处理。在开关821被切换到端子B的情况下，解码图像原样地成为内插图像制作部823的输入。内插图像制作部823根据运动矢量信息，生成小数点像素位置的内插图像，设为预测图像。通过设为这样的结构，可以实现适应性的图像还原处理与运动补偿预测的组合。
图49是图46与图47的预测图像制作部的具体实施的另一实施方式。以下，分别叙述图49的构成要素。
图49所示的预测图像制作部804由开关831、整数像素滤波器部832、比特扩展部833、内插图像制作部834、开关835、加权预测图像制作部836、以及比特简并部837构成。开关831是对根据运动矢量信息所参照的解码图像切换是否按照整数像素单位进行还原滤波处理的开关，根据由图46的滤波器设定/切换信息生成部802生成的切换信息进行切换。在开关831被切换到端子A的情况下，整数像素滤波器部832使用由滤波器设定/切换信息生成部802设定的滤波器系数，对根据运动矢量信息所参照的解码图像进行还原滤波处理。作为此时的特征，在解码图像的像素比特长是N-bit的情况下，使整数像素滤波器部832的输出的像素比特长成为M-bit，其中M≥N。在开关831被切换到端子B的情况下，解码图像被输入到比特扩展部833，N-bit的解码图像成为M-bit那样地进行扩展，其中M≥N。具体而言，比特扩展部833进行使像素值V向左执行(M-N)比特算术移位的处理。
内插图像制作部834根据运动矢量信息，生成小数点像素位置的内插图像。作为此时的特征，相对输入是M-bit的像素比特长，输出成为L-bit的像素比特长，其中L≥N。开关835是由编码控制部109控制、或者根据编码信息由解码控制部206控制的开关，切换是否进行加权预测。在开关835被切换到端子A的情况下，加权预测图像制作部836根据在H.262/AVC等中进行的加权预测式来制作预测图像。作为此时的特征，以相对L-bit的像素比特长的输入，成为N-bit的像素比特长的输出的方式进行处理。在开关835被切换成单位B的情况下，比特简并部847进行舍入处理，以使L-bit的输入成为N-bit，其中L≥N。
通过这样以成为比解码图像的像素比特长大的像素比特长的方式，构成预测图像制作部804的内部，从而可以减少还原处理、内插处理、以及加权预测处理中的运算的舍入误差，实现编码效率更优良的预测图像制作。
(第8实施方式)
在第4实施方式中，对将设定切换信息的单位设为每个像素块，使用表示像素块的大小或者分割方法的区域设定信息，适应性地切换像素块尺寸的方法进行说明。在本实施方式中，作为在画面内适应性地切换像素块尺寸的方法，使用图50至图55对将规定大小的母块内部阶段性地分割成小的尺寸的子块的方法进行说明。
此处，叙述使用4分树结构将母块阶段性地分割成子块的方法。图50示出通过4分树结构得到的阶段性的块分割。图50中的阶段0的母块B0，0在阶段1中被分割成子块B1，0～B1，3，在阶段2中被分割成子块B2，0～B2，15。
接下来，叙述表现4分树结构的分割树的方法。在图51中，使用用0或者1表示的块分割信息，表现直到阶段3的分割树。在块分割信息是1的情况下，表示分割成下面的阶段的子块，在0的情况下表示没有分割。对于由如图51所示设定的块分割信息表示的块，如图52所示母块被分割成四个子块，该子块被进一步分割成四个子(孙)块，该子(孙)块被进一步分割成四个子(曾孙)块。与这样分割的大小不同的块一一对应地设定切换信息。即，等价于对与图51的分割树中的块分割信息是0的情况对应的块设定切换信息。
由母块尺寸与阶段的深度决定母块内的子块的尺寸。图53是示出使用了4分树结构的情况下的相对母块尺寸的阶段0～4的子块的尺寸的图。在图53中，例如在母块尺寸是32×32的情况下，阶段4的子(曾孙)块尺寸成为2×2。画面内的局部区域即母块的内部被分割成按照阶段的深度依次变小的区域即子块。
接下来，使用图54对本实施方式的包括区域设定信息的语法进行说明。例如如图54所示记述本实施方式的图31的语法结构中的环路滤波器数据语法(1906)。图54的filter_block_size是与第4实施方式同样地决定块尺寸的值，此处表示母块尺寸。
接下来，max_layer_level是表示可取的阶段的深度的最大值的值。在本实施方式中，如图54的语法所示按照切片单位对max_layer_level进行了编码，但作为其他实施方式，也可以按照序列、帧或者母块单位进行编码。图55示出按照母块单位进行编码时的语法。另外，如果在编码装置以及解码装置这双方中使用表示相同阶段的深度的最大值的值，则也可以不将max_layer_level包含在语法中而使用预先设定的值。
另外，在本实施方式中通过filter_block_size表示了母块尺寸，但也可以设为表示最小的子块尺寸的值，在该情况下，使用max_layer_level与filter_block_size通过规定的计算式来导出母块尺寸。作为例子，在4分树结构的情况下，如果将filter_block_size设为B、将max_layer_level设为L，则可以用P＝B×2L来表示母块尺寸P。
接下来，NumOfParentBlock是1切片内的母块的总数，NumOfChildBlock[layer]是一个母块内的由layer表示的阶段的子块的总数。作为例子，在4分树结构的情况下，成为NumOfChildBlock[0]＝1、NumOfChildBlock[1]＝4、NumOfChildBlock[2]＝16、NumOfChildBlock[3]＝64，可以用4layer表示NumOfChildBlock[layer]。
接下来，对valid_block_flag以及block_partitioning_flag进行说明。valid_block_fiag取0或者1的值，valid_block_flag的初始值被设定成0。block_partitioning_flag是块分割信息，在如上所述进行分割的情况下设定成1、在不分割的情况下设定成0。
这样，根据第8实施方式的运动图像编码以及解码方法，通过使用阶段块分割信息作为区域分割信息，可以将成为基准的母块阶段性地分割成子块，通过对分割的各子块设定切换信息，可以针对每个帧内的局部区域适应性地控制滤波处理的切换定时。另外，这样使设定切换信息的单位在画面内成为可变，从而在环路滤波器对画质造成的影响较大的区域中细致地分割区域，在环路滤波器对画质造成的影响较小的区域中较粗地分割区域，从而可以高效地设定切换信息。
另外，此处作为母块的分割方法，叙述了利用4分树结构的分割方法，但只要是在编码装置以及解码装置这双方中可以实现相同的区域分割的分割方法，则不限于4分树结构。
另外，此处叙述了将母块内阶段性地分割成矩形块的情况，但只要是在编码装置以及解码装置这双方中可以实现相同的区域分割的分割方法，则不限于矩形块。
根据本发明，在编码侧对设定的滤波器系数信息进行编码，在解码侧对滤波器系数信息进行解码而使用的运动图像编码/解码中，编码侧与解码侧通过同样的处理切换环路滤波处理，从而可以抑制画质劣化的传播，并且提高在预测中使用的参照图像的画质，提高编码效率。
产业上的可利用性
本发明的图像编码以及解码方法以及装置用于通信介质、积蓄介质以及广播介质等中的图像压缩处理。

Claims (43)

1.一种运动图像编码方法，将已编码的图像作为参照图像，用于接下来要进行编码的图像的预测，其特征在于，具备：
对已编码的图像的局部解码图像应用滤波器而生成还原图像的步骤；
设定上述滤波器的滤波器系数信息的步骤；
对上述滤波器系数信息进行编码的步骤；
对表示将上述局部解码图像或者上述还原图像用作参照图像的的确定信息进行编码的步骤；以及
根据上述确定信息，将上述局部解码图像或者上述还原图像作为参照图像而保存在存储器中的步骤。
2.一种运动图像解码方法，将已解码的图像作为参照图像，用于接下来要进行解码的图像的预测，其特征在于，具备：
对解码图像应用滤波器而生成还原图像的步骤；
对上述滤波器的滤波器系数信息进行解码的步骤；
对表示用作参照图像的上述解码图像或者上述还原图像的确定信息进行解码的步骤；以及
根据上述确定信息，将上述解码图像或者上述还原图像作为参照图像而保存在存储器中的步骤。
3.一种运动图像编码方法，将已编码的图像作为参照图像，用于接下来要进行编码的图像的预测，其特征在于，具备：
对已编码的图像的局部解码图像应用滤波器而生成还原图像的步骤；
设定上述滤波器的滤波器系数信息的步骤；
对上述滤波器系数信息进行编码的步骤；
对表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息进行编码的步骤；以及
根据上述确定信息，将上述局部解码图像或者上述还原图像作为参照图像而用于预测的步骤。
4.一种运动图像解码方法，将已解码的图像作为参照图像，用于接下来要进行解码的图像的预测，其特征在于，具备：
对解码图像应用滤波器而生成还原图像的步骤；
对上述滤波器的滤波器系数信息进行解码的步骤；
对表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息进行解码的步骤；以及
根据上述确定信息，将上述解码图像或者上述还原图像作为参照图像而用于预测的步骤。
5.一种运动图像编码方法，将已编码的图像作为参照图像，用于接下来要进行编码的图像的预测，其特征在于，具备：
对已编码的图像的局部解码图像应用滤波器而生成还原图像的步骤；
设定上述滤波器的滤波器系数信息的步骤；
对上述滤波器系数信息进行编码的步骤；以及
根据表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息，将上述局部解码图像或者上述还原图像作为参照图像而保存在存储器中的步骤。
6.一种运动图像解码方法，将已解码的图像作为参照图像，用于接下来要进行解码的图像的预测，其特征在于，具备：
对解码图像应用滤波器而生成还原图像的步骤；
对上述滤波器的滤波器系数信息进行解码的步骤；以及
根据表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息，将上述解码图像或者上述还原图像作为参照图像而保存在存储器中的步骤。
7.根据权利要求1或3所述的运动图像编码方法，其特征在于，具备如下步骤：在编码侧对表示在解码侧将上述解码图像或者上述还原图像用作输出图像的确定信息进行编码。
8.根据权利要求2或4所述的运动图像解码方法，其特征在于，具备：对表示将上述解码图像或者上述还原图像用作输出图像的确定信息进行解码的步骤；以及
根据上述确定信息，将上述解码图像或者上述还原图像作为输出图像而输出的步骤。
9.根据权利要求6所述的运动图像解码方法，其特征在于，具备：生成表示将上述解码图像或者上述还原图像用作输出图像的确定信息的步骤；以及
根据上述确定信息，将上述解码图像或者上述还原图像作为输出图像而输出的步骤。
10.根据权利要求1、3、7中的任意一项所述的运动图像编码方法，其特征在于：针对每个帧或者帧内的局部区域对上述确定信息进行编码。
11.根据权利要求2、4、8中的任意一项所述的运动图像解码方法，其特征在于：针对每个帧或者帧内的局部区域对上述确定信息进行解码。
12.根据权利要求1、3、7中的任意一项所述的运动图像编码方法，其特征在于，包括：
计算上述局部解码图像以及上述还原图像与输入原图像的误差的步骤；以及
生成表示将误差小的图像设为参照图像的上述确定信息的步骤。
13.根据权利要求5所述的运动图像编码方法，其特征在于，包括如下步骤：使用作为能够根据上述局部解码图像或者上述解码图像取得的指标的与周边像素的差分绝对值和、差分平方和、活度、空间频率、边缘强度、以及边缘方向中的任意一个以上，生成上述确定信息。
14.根据权利要求6或9所述的运动图像解码方法，其特征在于，包括如下步骤：使用作为能够根据上述局部解码图像或者上述解码图像取得的指标的与周边像素的差分绝对值和、差分平方和、活度、空间频率、边缘强度、以及边缘方向中的任意一个以上，生成上述确定信息。
15.根据权利要求5所述的运动图像编码方法，其特征在于，包括如下步骤：使用作为编码信息的一部分的量化参数、块尺寸、预测模式、运动矢量、以及变换系数信息中的任意一个以上，生成上述确定信息。
16.根据权利要求6或9所述的运动图像解码方法，其特征在于，包括如下步骤：使用作为编码信息的一部分的量化参数、块尺寸、预测模式、运动矢量、以及变换系数信息中的任意一个以上，生成上述确定信息。
17.一种运动图像编码装置，将已编码的图像作为参照图像，用于接下来要进行编码的图像的预测，其特征在于，具备：
还原图像生成部，对已编码的图像的局部解码图像应用滤波器而生成还原图像；
设定部，设定上述滤波器的滤波器系数信息；
解码部，对上述滤波器系数信息进行编码；
编码部，对表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息进行编码；以及
保存部，根据上述确定信息，将上述局部解码图像或者上述还原图像作为参照图像而保存在存储器中。
18.一种运动图像解码装置，将已解码的图像作为参照图像，用于接下来要进行解码的图像的预测，其特征在于，具备：
还原图像生成部，对解码图像应用滤波器而生成还原图像；
第1解码部，对上述滤波器的滤波器系数信息进行解码；
第2解码部，对表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息进行解码；以及
保存部，根据上述确定信息，将上述解码图像或者上述还原图像作为参照图像而保存在存储器中。
19.一种运动图像编码方法，将已编码的图像作为参照图像，用于接下来要进行编码的图像的预测，其特征在于，具备：
确定信息编码步骤，对确定信息进行编码，该确定信息表示是将通过对已编码的图像的局部解码图像应用滤波器而生成的还原图像用作上述参照图像、还是将上述局部解码图像用作参照图像；以及
保存步骤，根据上述确定信息，将上述局部解码图像或者上述还原图像作为参照图像而保存在存储器中。
20.根据权利要求19所述的运动图像编码方法，其特征在于，上述确定信息编码步骤包括如下步骤：为了针对每个帧内的局部区域设定并编码上述确定信息，而对决定上述局部区域的大小的区域设定信息进行编码。
21.根据权利要求19所述的运动图像编码方法，其特征在于，上述确定信息编码步骤包括如下步骤：为了针对每个帧内的局部区域对上述确定信息进行编码，而根据上述确定信息设定上述滤波器的滤波器系数信息。
22.根据权利要求19所述的运动图像编码方法，其特征在于：在上述确定信息编码步骤中，针对每个帧或者帧内的局部区域对上述区域设定信息进行编码。
23.根据权利要求20或22所述的运动图像编码方法，其特征在于：上述区域设定信息是表示上述局部区域的大小的值。
24.根据权利要求20或22所述的运动图像编码方法，其特征在于：上述区域设定信息表示用于分割规定大小的局部区域内部的分割方法。
25.根据权利要求24所述的运动图像编码方法，其特征在于：上述区域设定信息表示索引，该索引表示由预先准备的区域尺寸规定表决定的上述局部区域的大小或者上述分割方法。
26.根据权利要求25所述的运动图像编码方法，其特征在于：准备多个上述区域尺寸规定表，根据图像尺寸、图片类型以及规定量化的粗细的量化参数中的一个以上进行切换。
27.一种运动图像解码方法，将已解码的图像作为参照图像，用于接下来要进行解码的图像的预测，其特征在于，包括：
确定信息解码步骤，对确定信息进行解码，该确定信息表示是将通过对解码图像应用滤波器而生成的还原图像用作参照图像、还是将上述解码图像用作参照图像；以及
保存步骤，根据上述确定信息，将上述解码图像或者上述还原图像作为参照图像而保存在存储器中。
28.根据权利要求27所述的运动图像解码方法，其特征在于：上述确定信息解码步骤包括区域设定信息解码步骤，在该区域设定信息解码步骤中，为了对上述确定信息进行解码并针对每个帧内的局部区域进行设定，而对决定上述局部区域的大小的区域设定信息进行解码。
29.根据权利要求27所述的运动图像解码方法，其特征在于：在上述区域设定信息解码步骤中，针对每个帧或者帧内的局部区域对上述区域设定信息进行解码。
30.根据权利要求28或29所述的运动图像解码方法，其特征在于：上述区域设定信息是表示上述局部区域的大小的值。
31.根据权利要求28或29所述的运动图像解码方法，其特征在于：上述区域设定信息表示用于分割规定大小的局部区域内部的分割方法。
32.根据权利要求28或29所述的运动图像解码方法，其特征在于：上述区域设定信息是表示由预先准备的区域尺寸规定表决定的上述区域的大小或者上述分割方法的索引。
33.根据权利要求32所述的运动图像解码方法，其特征在于：准备多个上述区域尺寸规定表，根据图像尺寸、图片类型、以及规定量化的粗细的量化参数中的一个以上进行切换。
34.一种运动图像编码方法，其特征在于，在权利要求1、3、5、13、15、19、20、21、22、以及24中的任意一项所述的对已编码的局部解码图像应用滤波器而生成还原图像的步骤中，进行：
判定局部解码图像是否为块边界的步骤；以及
对将上述局部解码图像判定为块边界的像素，进行去除块失真的滤波处理的步骤。
35.一种运动图像解码方法，其特征在于，在权利要求2、4、6、9、27、28以及29中的任意一项所述的对解码图像应用滤波器而生成还原图像的步骤中，包括：
判定局部解码图像是否为块边界的步骤；以及
对将上述局部解码图像判定为块边界的像素，进行去除块失真的滤波处理的步骤。
36.一种运动图像编码方法，将已编码的图像作为参照图像，用于运动补偿预测，其特征在于，具备：
对已编码的图像的局部解码图像应用滤波器而生成还原图像的步骤；
设定上述滤波器的滤波器系数信息的步骤；
对上述滤波器系数信息进行编码的步骤；
对表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息进行编码的步骤；以及
根据上述确定信息，将上述局部解码图像或者上述还原图像作为参照图像用于运动补偿预测的步骤。
37.一种运动图像解码方法，将已解码的图像作为参照图像，用于运动补偿预测，其特征在于，具备：
对解码图像应用滤波器而生成还原图像的步骤；
对上述滤波器的滤波器系数信息进行解码的步骤；
对表示将上述局部解码图像或者上述还原图像用作参照图像的确定信息进行解码的步骤；以及
根据上述确定信息，将上述解码图像或者上述还原图像作为参照图像用于运动补偿预测的步骤。
38.根据权利要求20或22所述的运动图像编码方法，其特征在于：上述区域设定信息是用于将上述局部区域内部分割成按照阶段的深度依次变小的区域的阶段分割信息。
39.根据权利要求38所述的运动图像编码方法，其特征在于：上述阶段分割信息是表示是否分割各阶段中的各个区域的区域分割信息。
40.根据权利要求38所述的运动图像编码方法，其特征在于：上述阶段分割信息包括表示阶段的深度的最大值的最大阶段信息。
41.根据权利要求28或29所述的运动图像解码方法，其特征在于：上述区域设定信息是用于将上述局部区域分割成按照阶段的深度依次变小的区域的阶段分割信息。
42.根据权利要求41所述的运动图像解码方法，其特征在于：上述阶段分割信息是表示是否分割各阶段中的各个区域的区域分割信息。
43.根据权利要求41所述的运动图像解码方法，其特征在于：上述阶段分割信息包括表示阶段的深度的最大值的最大阶段信息。
CN2008801257805A 2008-03-07 2008-12-25 运动图像编码/解码方法以及装置 Pending CN101926175A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2008-058375 2008-03-07
JP2008058375 2008-03-07
JP2008175694 2008-07-04
JP2008-175694 2008-07-04
PCT/JP2008/073636 WO2009110160A1 (ja) 2008-03-07 2008-12-25 動画像符号化／復号化方法及び装置

Publications (1)

Publication Number Publication Date
CN101926175A true CN101926175A (zh) 2010-12-22

Family

ID=41055730

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008801257805A Pending CN101926175A (zh) 2008-03-07 2008-12-25 运动图像编码/解码方法以及装置

Country Status (12)

Country Link
US (1) US20100322303A1 (zh)
EP (1) EP2249572A4 (zh)
JP (1) JPWO2009110160A1 (zh)
KR (1) KR20100105680A (zh)
CN (1) CN101926175A (zh)
AU (1) AU2008352118A1 (zh)
BR (1) BRPI0822364A2 (zh)
CA (1) CA2715211A1 (zh)
MX (1) MX2010009194A (zh)
RU (1) RU2010132652A (zh)
WO (1) WO2009110160A1 (zh)
ZA (1) ZA201005949B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103392338A (zh) * 2011-01-03 2013-11-13 联发科技股份有限公司 基于滤波单元的回路滤波方法
CN103733628A (zh) * 2011-08-08 2014-04-16 摩托罗拉移动有限责任公司 变换单元分割的残差树结构
CN104604238A (zh) * 2012-09-24 2015-05-06 株式会社Ntt都科摩 动态图像预测编码装置、动态图像预测编码方法、动态图像预测解码装置和动态图像预测解码方法
US9426482B2 (en) 2011-06-28 2016-08-23 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
CN107087202A (zh) * 2012-04-13 2017-08-22 Jvc 建伍株式会社 图像编码装置、图像编码方法、发送装置、发送方法
CN109905707A (zh) * 2012-01-09 2019-06-18 英孚布瑞智有限私人贸易公司 清除解块人为噪声的方法
CN110418133A (zh) * 2018-04-30 2019-11-05 宝视纳股份公司 用于为图像数据编码的方法和装置

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8638852B2 (en) 2008-01-08 2014-01-28 Qualcomm Incorporated Video coding of filter coefficients based on horizontal and vertical symmetry
US8503527B2 (en) 2008-10-03 2013-08-06 Qualcomm Incorporated Video coding with large macroblocks
BRPI0922793A2 (pt) * 2009-01-05 2016-01-05 Toshiba Kk métodos de codificação e de decodificação de imagens em movimento
JP5597968B2 (ja) * 2009-07-01 2014-10-01 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP5359657B2 (ja) 2009-07-31 2013-12-04 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
JP5295053B2 (ja) * 2009-09-16 2013-09-18 日本電信電話株式会社 予測信号生成方法，予測信号生成装置および予測信号生成プログラム
JPWO2011033643A1 (ja) * 2009-09-17 2013-02-07 株式会社東芝 動画像符号化方法及び動画像復号化方法
BR112012008636A2 (pt) * 2009-10-15 2016-04-19 Thomson Licensing métodos e aparelho para filtragem adaptativa eficiente para codificadores e decodificadores de vídeo
CN102939749B (zh) * 2009-10-29 2016-12-28 韦斯特尔电子行业和贸易有限公司 用于处理视频序列的方法和设备
JP5340415B2 (ja) * 2009-12-07 2013-11-13 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法、および画像復号方法
EP2515541A4 (en) * 2009-12-18 2015-08-26 Sharp Kk BILDFILTER, CODING DEVICE, DECODING DEVICE AND DATA STRUCTURE
JP2011139208A (ja) * 2009-12-28 2011-07-14 Sony Corp 画像処理装置および方法
WO2011086836A1 (ja) * 2010-01-12 2011-07-21 シャープ株式会社 符号化装置、復号装置、および、データ構造
JP2013232974A (ja) * 2010-01-13 2013-11-14 Toshiba Corp 動画像符号化装置および復号装置
JP2014060744A (ja) * 2010-01-13 2014-04-03 Toshiba Corp 動画像符号化装置および復号装置
KR101457396B1 (ko) 2010-01-14 2014-11-03 삼성전자주식회사 디블로킹 필터링을 이용한 비디오 부호화 방법과 그 장치, 및 디블로킹 필터링을 이용한 비디오 복호화 방법 및 그 장치
CN102792690B (zh) * 2010-03-09 2016-06-15 汤姆森特许公司 基于分类环路滤波器的方法和装置
WO2011113282A1 (en) * 2010-03-15 2011-09-22 Mediatek Singapore Pte. Ltd. Localized in-loop filtering with multiple filters in hybrid video coding
KR101529992B1 (ko) 2010-04-05 2015-06-18 삼성전자주식회사 픽셀 그룹별 픽셀값 보상을 위한 비디오 부호화 방법과 그 장치, 및 픽셀 그룹별 픽셀값 보상을 위한 비디오 복호화 방법과 그 장치
KR101682147B1 (ko) 2010-04-05 2016-12-05 삼성전자주식회사 변환 및 역변환에 기초한 보간 방법 및 장치
KR101750046B1 (ko) 2010-04-05 2017-06-22 삼성전자주식회사 트리 구조에 따른 부호화 단위에 기반한 인루프 필터링을 수반하는 비디오 부호화 방법과 그 장치 및 복호화 방법과 그 장치
WO2011127961A1 (en) * 2010-04-13 2011-10-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e. V. Adaptive image filtering method and apparatus
CN106131549B (zh) 2010-04-13 2019-04-05 三星电子株式会社 执行去块滤波的对视频进行解码的设备
JPWO2011161823A1 (ja) * 2010-06-25 2013-08-19 株式会社東芝 動画像符号化方法および復号方法
BR112013000556A2 (pt) * 2010-07-09 2019-09-24 Samsung Electronics Co Ltd método para decodificar um vídeo usando um processador de decodificação de vídeo, método para codificar um vídeo usando um processador de codificação de vídeo, aparaleho de decodificação de vídeo em relação a um processador de decodificação de vídeo, aparelho de codificação de vídeo em relação com um processador de codificação de vídeo, e meio de gravação legível por computador
WO2012049876A1 (ja) * 2010-10-12 2012-04-19 株式会社 東芝 動画像符号化方法および復号方法
WO2012081706A1 (ja) * 2010-12-17 2012-06-21 シャープ株式会社 画像フィルタ装置、フィルタ装置、復号装置、符号化装置、および、データ構造
US9445126B2 (en) * 2011-01-05 2016-09-13 Qualcomm Incorporated Video filtering using a combination of one-dimensional switched filter and one-dimensional adaptive filter
WO2012093491A1 (ja) * 2011-01-07 2012-07-12 株式会社 東芝 動画像符号化方法及び装置、動画像復号化方法及び装置
US8898139B1 (en) 2011-06-24 2014-11-25 Google Inc. Systems and methods for dynamic visual search engine
JP5812806B2 (ja) * 2011-10-31 2015-11-17 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
TWI661711B (zh) * 2011-11-08 2019-06-01 三星電子股份有限公司 視訊解碼方法、視訊編碼方法、裝置及非暫態電腦可讀儲存媒體
KR101462052B1 (ko) * 2011-11-09 2014-11-20 에스케이 텔레콤주식회사 변환을 이용한 주파수 도메인 상의 적응적 루프 필터를 이용한 영상 부호화/복호화 방법 및 장치
GB2502047B (en) * 2012-04-04 2019-06-05 Snell Advanced Media Ltd Video sequence processing
CN104221383B (zh) * 2012-04-13 2018-09-11 三菱电机株式会社 图像编码装置、图像解码装置、图像编码方法以及图像解码方法
CN104380744B (zh) 2012-06-19 2018-05-04 Lg电子株式会社 处理视频信号的方法和设备
JP6045222B2 (ja) * 2012-06-28 2016-12-14 株式会社Ｎｔｔドコモ 動画像予測復号装置、方法及びプログラム
US9294766B2 (en) 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
JP2015144423A (ja) 2013-12-25 2015-08-06 三星電子株式会社Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ． 画像符号化装置、画像復号化装置、それらの方法、プログラム及び画像処理システム
EP3516877B1 (en) * 2016-12-01 2020-03-11 Google LLC Restoration in video coding using domain transform recursive filters
JP6292460B2 (ja) * 2017-01-04 2018-03-14 ソニー株式会社 画像処理装置および方法
CN110490213B (zh) * 2017-09-11 2021-10-29 腾讯科技（深圳）有限公司 图像识别方法、装置及存储介质
US10674151B2 (en) * 2018-07-30 2020-06-02 Intel Corporation Adaptive in-loop filtering for video coding
CN112840655B (zh) * 2018-10-08 2023-12-01 寰发股份有限公司 图像与视频编解码中最后有效系数的编解码方法及装置
CN114175639A (zh) * 2019-08-07 2022-03-11 松下电器（美国）知识产权公司 编码装置、解码装置、编码方法和解码方法
JP7479137B2 (ja) * 2019-12-03 2024-05-08 キヤノン株式会社 信号処理装置および信号処理方法、システム並びにプログラム
WO2023238772A1 (ja) * 2022-06-08 2023-12-14 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像符号化装置、画像復号装置、画像符号化方法、及び画像復号方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0556416A (ja) * 1991-08-23 1993-03-05 Nec Corp フレーム間予測符号化装置のループ内フイルタ制御方式
JPH0638197A (ja) * 1992-06-30 1994-02-10 Sony Corp 符号器、復号器、および符号化方法
WO2005034517A1 (en) * 2003-09-17 2005-04-14 Thomson Licensing S.A. Adaptive reference picture generation
WO2008010929A2 (en) * 2006-07-18 2008-01-24 Thomson Licensing Methods and apparatus for adaptive reference filtering

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5325526A (en) * 1992-05-12 1994-06-28 Intel Corporation Task scheduling in a multicomputer system
JPH05336514A (ja) * 1992-05-29 1993-12-17 Sony Corp 画像符号化装置
JP3165296B2 (ja) * 1992-12-25 2001-05-14 三菱電機株式会社 フレーム間符号化処理方式及びフレーム間符号化処理方法及び符号化制御方式
JPH0993578A (ja) * 1995-09-26 1997-04-04 Matsushita Electric Ind Co Ltd 画像送信装置及び画像受信装置、並びに画像送信方法及び画像受信方法
JPH09121354A (ja) * 1995-10-25 1997-05-06 Oki Electric Ind Co Ltd ループフィルタ制御方法、動きベクトル検出方法及びループフィルタ制御回路
US6633611B2 (en) * 1997-04-24 2003-10-14 Mitsubishi Denki Kabushiki Kaisha Method and apparatus for region-based moving image encoding and decoding
JP2001275110A (ja) 2000-03-24 2001-10-05 Matsushita Electric Ind Co Ltd 動的なループ及びポストフィルタリングのための方法及び装置
CA2582665C (en) * 2001-09-12 2012-04-24 Matsushita Electric Industrial Co., Ltd. Picture coding method and picture decoding method
JP3944225B2 (ja) * 2002-04-26 2007-07-11 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像符号化プログラム及び画像復号プログラム
US7580460B2 (en) * 2003-03-28 2009-08-25 Sony Corporation Video encoder with multiple outputs having different attributes
US7574060B2 (en) * 2004-11-22 2009-08-11 Broadcom Corporation Deblocker for postprocess deblocking
JP4987322B2 (ja) * 2006-02-28 2012-07-25 株式会社東芝 動画像復号装置及び動画像復号方法
US7912129B2 (en) * 2006-03-16 2011-03-22 Sony Corporation Uni-modal based fast half-pel and fast quarter-pel refinement for video encoding
EP1841230A1 (en) * 2006-03-27 2007-10-03 Matsushita Electric Industrial Co., Ltd. Adaptive wiener filter for video coding
US8139875B2 (en) * 2007-06-28 2012-03-20 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
JP5215951B2 (ja) * 2009-07-01 2013-06-19 キヤノン株式会社 符号化装置及びその制御方法、コンピュータプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0556416A (ja) * 1991-08-23 1993-03-05 Nec Corp フレーム間予測符号化装置のループ内フイルタ制御方式
JPH0638197A (ja) * 1992-06-30 1994-02-10 Sony Corp 符号器、復号器、および符号化方法
WO2005034517A1 (en) * 2003-09-17 2005-04-14 Thomson Licensing S.A. Adaptive reference picture generation
WO2008010929A2 (en) * 2006-07-18 2008-01-24 Thomson Licensing Methods and apparatus for adaptive reference filtering

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10567751B2 (en) 2011-01-03 2020-02-18 Hfi Innovation Inc. Method of filter-unit based in-loop filtering
CN103392338A (zh) * 2011-01-03 2013-11-13 联发科技股份有限公司 基于滤波单元的回路滤波方法
US9877019B2 (en) 2011-01-03 2018-01-23 Hfi Innovation Inc. Method of filter-unit based in-loop filtering
US10038911B2 (en) 2011-06-28 2018-07-31 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
US9426482B2 (en) 2011-06-28 2016-08-23 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
US9426483B2 (en) 2011-06-28 2016-08-23 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
US9438921B2 (en) 2011-06-28 2016-09-06 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
US9438922B2 (en) 2011-06-28 2016-09-06 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
US9462288B2 (en) 2011-06-28 2016-10-04 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
US10542273B2 (en) 2011-06-28 2020-01-21 Samsung Electronics Co., Ltd. Video encoding method using offset adjustments according to pixel classification and apparatus therefor, video decoding method and apparatus therefor
CN103733628A (zh) * 2011-08-08 2014-04-16 摩托罗拉移动有限责任公司 变换单元分割的残差树结构
CN109905707A (zh) * 2012-01-09 2019-06-18 英孚布瑞智有限私人贸易公司 清除解块人为噪声的方法
CN109905707B (zh) * 2012-01-09 2022-04-19 英孚布瑞智有限私人贸易公司 清除解块人为噪声的方法
CN107087202A (zh) * 2012-04-13 2017-08-22 Jvc 建伍株式会社 图像编码装置、图像编码方法、发送装置、发送方法
CN107087202B (zh) * 2012-04-13 2020-02-11 Jvc 建伍株式会社 图像编码装置、图像编码方法、发送装置、发送方法
CN104604238B (zh) * 2012-09-24 2017-03-22 株式会社Ntt都科摩 动态图像预测编码装置和方法、动态图像预测解码装置和方法
CN104604238A (zh) * 2012-09-24 2015-05-06 株式会社Ntt都科摩 动态图像预测编码装置、动态图像预测编码方法、动态图像预测解码装置和动态图像预测解码方法
CN110418133A (zh) * 2018-04-30 2019-11-05 宝视纳股份公司 用于为图像数据编码的方法和装置
CN110418133B (zh) * 2018-04-30 2022-05-17 宝视纳股份公司 用于为图像数据编码的方法和装置

Also Published As

Publication number Publication date
CA2715211A1 (en) 2009-09-11
JPWO2009110160A1 (ja) 2011-07-14
ZA201005949B (en) 2011-05-25
WO2009110160A1 (ja) 2009-09-11
AU2008352118A1 (en) 2009-09-11
RU2010132652A (ru) 2012-02-10
KR20100105680A (ko) 2010-09-29
EP2249572A1 (en) 2010-11-10
EP2249572A4 (en) 2012-05-23
MX2010009194A (es) 2010-09-10
BRPI0822364A2 (pt) 2015-09-15
US20100322303A1 (en) 2010-12-23

Similar Documents

Publication Publication Date Title
CN101926175A (zh) 运动图像编码/解码方法以及装置
CN106131552B (zh) 采用自适应偏置处理编码视频的方法和装置
RU2696552C1 (ru) Способ и устройство для видеокодирования
KR101677406B1 (ko) 차세대 비디오용 비디오 코덱 아키텍처
JP5792305B2 (ja) 適応ループフィルタリングの方法及び装置
WO2014054267A1 (ja) 画像符号化装置及び画像符号化方法
WO2010021108A1 (ja) 補間フィルタリング方法、画像符号化方法、画像復号方法、補間フィルタリング装置、プログラム、及び集積回路
KR20110001991A (ko) 적응적인 인루프 필터를 이용한 동영상 부호화와 복호화 장치 및 그 방법
JP2015507885A (ja) 変換単位の残差係数のための有意度マップを符号化および復号化する方法、装置およびシステム
CN101502124A (zh) 图像编码和解码的方法以及装置
JP2015507885A5 (zh)
CN112544081B (zh) 环路滤波的方法与装置
JP7439841B2 (ja) ループ内フィルタリングの方法及びループ内フィルタリングの装置
CN109845256A (zh) 影像编码方法/装置、影像解码方法/装置以及保存有比特流的记录介质
CN116389737B (zh) 视频编解码中变换系数的编解码
JP2024125421A (ja) 画像の符号化／復号化方法及び装置
JP7399928B2 (ja) 画像復号装置、画像復号方法及びプログラム
JP5770647B2 (ja) 画像符号化方法，画像符号化装置，画像復号方法，画像復号装置およびそれらのプログラム
KR20200000543A (ko) 지도 학습을 이용한 영상 개선 방법 및 장치
CN114189683A (zh) 增强滤波方法及装置
CN118741110A (zh) 一种视频编码/解码方法及装置
CN102484713A (zh) 运动图像编码方法以及运动图像解码方法
TW200948092A (en) Dynamic image encoding/decoding method and device
RU2817405C1 (ru) Способ, оборудование и устройства для кодирования и декодирования
CN111480343B (zh) 用于编码图片块的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20101222