CN103975599A - 图像编码以及解码方法、装置、程序 - Google Patents

图像编码以及解码方法、装置、程序 Download PDF

Info

Publication number
CN103975599A
CN103975599A CN201280061038.9A CN201280061038A CN103975599A CN 103975599 A CN103975599 A CN 103975599A CN 201280061038 A CN201280061038 A CN 201280061038A CN 103975599 A CN103975599 A CN 103975599A
Authority
CN
China
Prior art keywords
image
coding
cut apart
picture
apart
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280061038.9A
Other languages
English (en)
Other versions
CN103975599B (zh
Inventor
渡边真由子
北原正树
清水淳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Publication of CN103975599A publication Critical patent/CN103975599A/zh
Application granted granted Critical
Publication of CN103975599B publication Critical patent/CN103975599B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Abstract

本发明与现有的分割图像内编码相比，抑制编码效率的降低，同时，削减编码运算量以及解码运算量。分割图像生成部将编码对象的输入图像分割为相同尺寸的块，集中各块内的相对位置相同的像素，生成每一个为相同尺寸的分割图像。分割图像内编码处理部对一部分的分割图像进行分割图像内编码。分割图像间编码处理部将其它的编码完毕分割图像用作参照图像，进行分割图像间编码。在参照图像的候补存在多个的情况下，相关性方向计算部求取编码完毕分割图像和其参照图像的组合中的在原图像上的像素的相关性高的组合，参照图像选择部将相对于编码对象分割图像处于相关性高的方向的编码完毕分割图像选择为在分割图像间编码处理部中使用的参照图像。

Description

图像编码以及解码方法、装置、程序
技术领域
本发明涉及一种图像编码、解码技术，特别是涉及一种相对于现有的帧内预测编码、解码实现抑制编码效率的降低同时使解码运算量减少的编码和解码的图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序。
本申请基于在2011年12月13日向日本申请的日本特愿2011–271841号要求优先权，并将其内容引用于此。
背景技术
在作为视频编码国际标准的H. 264中，为了利用块间的像素相关性来使编码中的压缩率提高，进行帧内预测编码（参照非专利文献1）。该帧内预测以将若干个像素汇总后的块单位进行，对于亮度信号，能利用4×4、8×8、16×16这3种块尺寸。此外，在各块尺寸中，分别能选择多个预测模式。
在该H. 264中，在帧内预测时使用外插预测的方法，但是存在由此造成的预测效率差的问题。为了解决该问题，对全部帧利用去块滤波（deblocking filter）来抑制块失真，运算量变多。
此外，作为使帧内预测中的编码效率提高的手法，已知非专利文献2中所记载的技术。该技术是在帧内预测中对编码对象块从编码完毕区域搜索误差小的块并使用针对其的预测误差来进行编码的手法。
图19是示出利用现有技术进行的帧内预测编码处理的例子的流程图。在非专利文献2的帧内预测编码中，首先，将编码对象的图像分割为相同尺寸的N个块1~N（步骤S801）。接着，对开始的块1进行帧内预测编码（步骤S802）。接着，在块2以后的块的编码中，从编码完毕的区域，将预测误差小的块作为参照图像，进行帧间预测编码，对向该参照图像的运动矢量信息和预测误差进行编码（步骤S803）。在最后的块N之前重复进行该步骤S803的处理。
在该非专利文献2中提出的技术是用于提高编码效率的手法，由于在重复同样的图案的区域中能抑制预测误差的产生，所以量化误差也容易变小。因此，认为能减少去块滤波的处理量。
可是，在上述的方法中，也许在重复同样的图案的这样的图像中是有效的，但是在几乎未出现同样的图案的那样的图像中是无效的，在该情况下不太能削减预测误差，量化误差也不会变小。在该情况下，由于也不能削减去块滤波的处理量，所以认为在解码运算量的削减方面是无效的。进而，需要对解码侧发送表示针对各块的参照块的相对位置的偏移矢量信息，因此，在解码侧也会产生参照块信息的解码用的运算，其结果是存在运算量仍旧多这样的问题。
为了解决该非专利文献2的技术中的课题，本发明者等在非专利文献3中提出了一种抑制编码效率的降低同时削减编码运算量以及解码运算量的技术。
图20是说明在非专利文献3中提出的技术的图。在该提出技术中，在原图像PIC1的帧内编码中，将原图像PIC1分离为与同一位置的像素存在强相关性的4个分割图像PIC10~PIC13。再有，图中的标注了0、1、2、3的数值的方格分别表示像素。即，将输入的编码对象的原图像PIC1分割为2×2像素的块，集中各块内的相对位置相同的像素，设定分割图像PIC10~PIC13。对其中的1个分割图像PIC10进行帧内编码，对剩余的3个分割图像PIC11、PIC12、PIC13分别从编码完毕图像根据分离方法生成参照图像来进行预测编码。
对进行帧内编码的第1个分割图像PIC10施加强的去块滤波，但是在第2~4个分割图像PIC11、PIC12、PIC13中，通过使用预测效率好的帧间编码，从而去块滤波的强度下降。因此，作为整体能实现去块处理中的运算量的削减，能维持编码效率同时削减解码运算量。
该手法的处理顺序如下。
（1）将原图像PIC1如图20所示那样分为4个分割图像PIC10~PIC13。
（2）对第1个分割图像PIC10以帧内编码进行编码。
（3）使用半像素滤波，生成将分割图像PIC10的编码图像向右挪动了半像素后的图像。
（4）将在（3）中生成的图像作为参照图像，将运动矢量设为0，对第2个分割图像PIC11进行帧间编码。
（5）使用半像素滤波，生成将分割图像PIC10的编码图像向下挪动了半像素后的图像。
（6）将在（5）中生成的图像作为参照图像，将运动矢量设为0，对第3个分割图像PIC12进行帧间编码。
（7）使用半像素滤波，生成将分割图像PIC12的编码图像向右挪动了半像素后的图像。
（8）将在（7）中生成的图像作为参照图像，将运动矢量设为0，对第4个分割图像PIC13进行帧间编码。
在该例子中，说明了将输入的编码对象的原图像PIC1分割为2×2像素的块，集中各块内的相对位置相同的像素，设定4个分割图像PIC10~PIC13来进行编码的情况。可是，更加一般化地，也可以将原图像分割为n×m像素的块，对各块中的相对位置相同的多个像素群（在此称为子块）进行重新配置来设定分割图像。子块是n1×m1像素（其中，1≤n1＜n，1≤m1＜m）。
在现有手法中，如以下那样实施编码。首先，从输入图像中以等间隔提取1个或多个像素（子块），集中这些子块，由此，生成多个分割图像，对至少一个分割图像进行只使用该分割图像来编码的分割图像内编码。对其它分割图像的编码，使用编码完毕分割图像来进行分割图像间预测编码。即，将编码完毕分割图像作为参照图像，基于该参照图像，按照编码对象分割图像中所包含的像素和编码完毕分割图像中所包含的像素的相对的位置关系，例如对参照图像应用在生成小数像素精度的插值图像时使用的那样的滤波，由此，生成预测图像，并且，对该预测图像和编码对象分割图像的误差信号进行编码。
图21是现有手法的处理流程图。
首先，在步骤S900中，将图像分割为相同尺寸的块，生成分割图像P0~PN。接着在步骤S901中，对所生成的分割图像P0~PN中的若干个分割图像P0~PM（其中，0≤M＜N）进行分割图像内编码。接着在步骤S902中，针对分割图像P（M+1）~PN，将编码完毕的块作为参照图像，进行分割图像间编码。
现有技术文献
非专利文献
非专利文献1：ITU-T Rec. H.264, “Advanced video coding for generic audiovisual services”, 2005年3月；
非专利文献2：J. Yang, B. Yin, Y. Sun, and N. Zhang, “A block-matching based intra frame prediction for H.264/AVC”, in Proceedings of IEEE International Conference on Multimedia and Expo (ICME’06), pp. 705-708, Toronto, Canada, 2006年7月；
非专利文献3：渡邊真由子、北原正樹、清水淳、如澤裕尚：“画面内符号化における復号演算量削減の検討”，2011年信学会総合大会講演論文集，D-11-39，2011年3月。
发明内容
发明要解决的课题
在作为视频编码国际标准的H. 264等的视频编码中的解码处理中，用于减少块失真的去块滤波的处理量所占有的比例大。如果对于该问题使用在非专利文献3中提出的在以固定的规则提取像素或像素群并重新排列后的分割图像间进行预测编码的方法，能抑制块失真的产生。在该方法中，由于去块滤波的应用位置被减少，所以能减少去块滤波的运算量。
可是，在该方法中针对以下的方面有改善的余地。
（1）首先，在分割图像间编码中使用2个以上的参照图像的情况下，为了能把握在解码时使用哪个参照图像，必须对表示用于预测编码的参照图像的参照图像索引进行编码，增加其编码量。因此，编码效率恶化。另一方面，当固定参照图像的方向时，预测精度下降，编码效率恶化。
（2）此外，在按分割图像内的每个块切换参照图像的情况下，必须按每个块向解码侧发送参照图像索引，并且，对参照图像索引进行编码，由此，编码量增加，因此，存在编码量进一步增加的问题。
本发明的目的在于，谋求上述分割图像间编码的改善，不需要进行分割图像间编码中的参照图像索引的编码，由此，使编码效率提高。
用于解决课题的方案
本发明的最显著的特征在于，在使用将像素（或像素群）重新配置后的分割图像、利用分割图像内编码和分割图像间编码来进行帧内预测编码（解码也是同样的）的处理的图像编码方式中，在分割图像间编码中参照的参照图像的选择时，求取处于与编码对象分割图像的原图像上的像素相关性高的方向的像素所属的编码完毕分割图像，将其作为参照图像。此外，在该参照图像的选择中，通过使用编码器（图像编码装置）和解码器（图像解码装置）中共同的选择逻辑，从而不需要进行表示选择哪个编码完毕分割图像来作为参照图像的参照图像索引的编码。
本发明在对输入图像进行压缩编码时进行以下的处理。
（1）将输入图像分割为n×m像素的块，将分割后的各块分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块，集中块内的相对位置相同的子块，生成每一个为相同尺寸的分割图像。
（2）对分割图像的至少一个以上进行分割图像内编码。此处的分割图像内编码是利用以分割图像为帧单位进行的帧内预测的编码。
（3）为了对进行分割图像内编码后的分割图像以外的分割图像进行编码，关于编码对象分割图像和编码完毕分割图像中的同一位置的像素，选择在原图像上的距离短的编码完毕分割图像来作为在对编码对象分割图像的分割图像间预测编码中使用的参照图像。在参照图像的候补有多个的情况下，求取处于与编码对象分割图像的像素相关性高的方向的像素所属的编码完毕分割图像，选择其作为参照图像。即，将相关性高的编码完毕分割图像用作参照图像。关于相关性是否高，例如根据编码完毕分割图像的预测误差来进行判断。
（4）使用选择出的参照图像，生成对编码对象分割图像的预测图像，并且，进行分割图像间预测编码。在该分割图像间预测编码中，例如，将对参照图像施加了根据编码对象分割图像和参照图像在原图像上的对应像素的相对位置来决定的规定的滤波的图像作为预测图像，进行分割图像间预测编码。此处的分割图像间预测编码是利用以各分割图像为帧单位进行的帧间预测的编码。
（5）对由以上的分割图像内编码和分割图像间预测编码得到的编码结果进行信源编码，输出编码比特流。
将编码对象分割图像分割为n2×m2像素的区域（相当于H. 264的宏块等），在上述处理（3）中的参照图像的选择能够按照该区域的每一个来进行。在此处，将该区域称为分割图像块。即，按编码对象的每个分割图像块，选择相关性高的参照图像，由此，也能切换在一个编码对象分割图像中最适合的参照图像来进行分割图像间预测编码。
作为求取上述处理（3）中的处于相关性高的方向的像素所属的编码完毕分割图像的处理，存在以下两种方法。
在第1方法中，对参照图像的候补的每一个计算成为参照图像的候补的编码完毕分割图像的解码图像和根据该编码完毕分割图像的参照图像制作的预测图像的预测误差的和。然后，求取预测误差的和为最小的编码完毕分割图像和参照图像的组合，将连结这些图像内的对应的像素在原图像上的像素的方向作为相关性高的方向。在编码对象分割图像的编码中使用的参照图像为相对于编码对象分割图像处于相关性高的方向的像素所属的编码完毕参照图像。
在第2方法中，代替如第1方法那样对编码完毕分割图像生成预测图像并计算误差，而是计算已经在分割图像间编码中作为编码数据存在的预测误差的和，根据该预测误差的和来判断相关性，选择参照图像，由此，抑制解码运算量的增加。
在上述第1方法中，为了计算相关性高的方向，计算分割图像间编码完毕图像的解码图像和根据其参照图像制作的预测图像的差分（误差）。可是，当按每个分割图像或分割图像块重新生成预测图像并且取得与分割图像编码完毕图像的解码图像的差分时，其运算量较大地增加。
与此相对地，在第2方法中，使用作为编码数据而预先生成的预测误差来计算该预测误差的和，判断相关性，由此，能保持与第1方法几乎同等的效果，同时，较大地抑制编码/解码运算量的增加。
此外，本发明在对由上述方法编码后的图像的编码数据进行解码时进行以下的处理。
（1）输入编码数据并进行信源解码，所述编码数据是在图像编码装置侧将输入图像分割为n×m像素的块、将分割后的各块分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块、集中块内的相对位置相同的子块来生成每一个为相同尺寸的分割图像并进行编码后的编码数据。
（2）根据解码后的数据，对分割图像的至少一个以上进行分割图像内解码。
（3）在对进行分割图像内解码后的分割图像以外的分割图像进行解码时，关于解码对象分割图像和解码完毕分割图像中的同一位置的像素，选择在原图像上的距离短的解码完毕分割图像来作为在对解码对象分割图像的分割图像间预测解码中使用的参照图像。在参照图像的候补有多个的情况下，求取处于与解码对象分割图像的像素相关性高的方向的像素所属的解码完毕分割图像，选择其作为参照图像。即，对于解码对象分割图像，将相关性高的解码完毕分割图像用作参照图像。关于相关性是否高，例如根据解码完毕分割图像的预测误差来进行判断。
（4）使用选择出的参照图像，生成对解码对象分割图像的预测图像，并且，进行分割图像间预测解码。
（5）从利用分割图像内解码以及分割图像间预测解码而进行了解码的分割图像，将各分割图像中的各像素配置在原图像中的原来的位置，构成解码图像。
将解码对象分割图像分割为n2×m2像素的分割图像块，在上述处理（3）中的参照图像的选择能够按照每个分割图像块来进行。
此外，在求取上述处理（3）中的处于相关性高的方向的像素所属的解码完毕分割图像的处理中，使用与上述的在编码时的第1或第2方法相同的方法。
本发明的作用如下。在现有的分割图像间编码方法中，需要制作表示使用哪个编码完毕分割图像作为参照图像的参照图像索引并且进行编码。在本发明中，代替制作参照图像索引并进行编码，而是通过使用相关性高的分割图像作为参照图像来削减参照图像索引的开销。由此，编码效率提高。
细节如下。在现有技术中，作为参照图像，能选择多个，为了从该参照图像中选择编码效率好的参照图像，需要例如对能从各个参照图像制作的预测图像和编码完毕分割图像的平方误差进行测定，选择平方误差小的参照图像，对其参照图像索引进行编码。特别地，在按每个分割图像块切换参照图像的情况下，按每个分割图像块产生参照图像索引的编码量，编码量变大。
在本手法中，利用在原本为1个原图像的分割图像彼此中存在强的空间相关性，使用与预测图像的误差来推测用作参照图像的分割图像间编码完毕图像和该编码完毕图像的参照图像的相关性。误差变小的方向被推测为相关性最高的方向，使用该方向作为编码对象分割图像中的参照方向。在原图像的附近像素间，根据方向的相关性的强度被认为是固定的，因此，将处于从编码对象分割图像观察的参照方向的图像作为参照图像进行预测误差编码，由此，即使不向解码器侧发送参照图像索引那样的明确指示参照图像的信息，也能抑制编码效率提高的降低。
特别地，在本手法中，因为编码器/解码器双方仅用编码完毕/解码完毕图像的信息，利用同样的处理就能选择同样的参照图像，所以不需要对参照图像索引那样的明确指示参照图像的信息进行编码，能削减由于此造成的编码量。
发明效果
根据本发明，在使用生成分割图像并对其进行分割图像内编码以及分割图像间编码的方法的帧内预测编码中，能选择用于分割图像间编码的适当的参照图像，并且，不需要进行表示参照图像的参照图像索引的编码，所述分割图像是从编码对象图像中提取像素或像素群来进行分割后的图像。因此，能使编码效率提高，此外，能削减伴随着去块滤波处理的运算量。
附图说明
图1是示出图像编码装置的结构例的图。
图2A是示出由分割图像生成部进行的分割图像的生成例的图。
图2B是示出由分割图像生成部进行的分割图像的生成例的图。
图2C是示出由分割图像生成部进行的分割图像的生成例的图。
图2D是示出由分割图像生成部进行的分割图像的生成例的图。
图3是示出由分割图像间编码处理部进行的预测图像的生成例的图。
图4是图像编码处理的流程图。
图5是分割图像间编码处理（例1）的详细的流程图。
图6是示出图像编码装置的详细的结构例（例1）的图。
图7是分割图像间编码处理（例2）的详细的流程图。
图8是示出图像编码装置的详细的结构例（例2）的图。
图9是示出编码对象图像的分割例的图。
图10A是示出参照图像的选择方法的例子的图。
图10B是示出参照图像的选择方法的例子的图。
图10C是示出参照图像的选择方法的例子的图。
图10D是示出参照图像的选择方法的例子的图。
图11是示出图像解码装置的结构例的图。
图12是图像解码处理的流程图。
图13是示出图像解码装置的详细的结构例（例1）的图。
图14是示出图像解码装置的详细的结构例（例2）的图。
图15是示出能应用本发明的活动图像编码装置的例子的图。
图16是示出能应用本发明的活动图像解码装置的例子的图。
图17是示出在使用软件程序来实现图像编码装置的情况下的硬件结构例的图。
图18是示出在使用软件程序来实现图像解码装置的情况下的硬件结构例的图。
图19是示出利用现有技术进行的帧内预测编码处理的例子的流程图。
图20是对利用以固定间隔提取出像素的分割图像进行的现有的图像内预测编码处理的例子进行说明的图。
图21是利用以固定间隔提取出像素的分割图像进行的现有的图像内预测编码处理的流程图。
具体实施方式
以下，对本发明的实施方式一边使用附图一边进行说明。
〔图像编码装置〕
图1是示出图像编码装置的结构例的图。图像编码装置10具备：分割图像生成部11、分割图像内编码处理部12、分割图像间编码处理部13、相关性方向计算部15、参照图像选择部16、信源编码部14。
分割图像生成部11将输入图像分割为n×m像素的块，将分割后的各块分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块，集中块内的相对位置相同的子块，生成每一个为相同尺寸的分割图像。
图2A~图2D是示出由分割图像生成部11进行的分割图像的生成例的图。分割图像生成部11将例如如图2A所示的原图像作为输入图像，将该原图像如图2B所示那样分割成每一个为n×m像素的块Mj（j=0、1、…、J）。接着，分割图像生成部11将各块Mj如图2C所示那样分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块Bjk（k=0、1、…、K）。
接着，分割图像生成部11如图2D所示那样从各块Mj集中块内的相对位置相同的子块Bjk，生成每一个为相同尺寸的分割图像Pk（k=0、1、…、K）。分割图像P0集中了子块B00、B10、…、BJ0，分割图像P1集中了子块B01、B11、…、BJ1，…，分割图像PK集中了子块B0K、B1K、…、BJK。
分割图像内编码处理部12对由分割图像生成部11生成的包含第一个分割图像在内的若干个分割图像（也可以只有第一个分割图像）进行分割图像内编码。在此的分割图像内编码是只使用成为目前的编码对象的分割图像的像素信息来进行编码的编码方法，只要是不参照其它分割图像的编码方法，则使用怎样的编码方法都可以。例如，能使用在H. 264编码方式中的帧内预测编码等方法。
分割图像间编码处理部13对在由分割图像生成部11生成的分割图像中的尚未被编码的分割图像进行分割图像间编码。在该分割图像间编码中，将编码完毕分割图像作为参照图像，对参照图像施加根据成为目前的编码对象的分割图像和参照图像在原图像上的对应像素的相对位置而决定的规定的滤波，由此，生成预测图像。对该预测图像和编码对象分割图像的误差进行编码，将该编码信息发送至信源编码部14。
信源编码部14对作为分割图像内编码处理部12以及分割图像间编码处理部13的输出的编码信息进行熵编码，并输出编码数据。
本实施方式与非专利文献3中所示的那样的现有技术的分割图像间预测编码的不同之处特别在于，具备：在参照图像的候补有多个的情况下检查在原图像上的编码对象图像的像素和编码完毕图像的像素的相关性的相关性方向计算部15、以及选择处于相关性高的方向的像素所属的编码完毕分割图像作为参照图像的参照图像选择部16。
相关性方向计算部15求取在成为参照图像的候补的编码完毕分割图像中预测误差的绝对值和或者平方和最小的分割图像，根据其结果将编码完毕分割图像和其参照图像在原图像中的对应的像素的方向作为相关性高的方向，并且，将该相关性方向通知给参照图像选择部16。
参照图像选择部16对编码对象的分割图像选择处于相关性方向计算部15所计算出的相关性方向的编码完毕分割图像来作为参照图像，并且，将该参照图像通知给分割图像间编码处理部13。
图3是示出分割图像间编码处理部13中的预测图像的生成例的图。以下对在分割图像Pi是成为参照图像的编码完毕分割图像并且分割图像Pk是进行分割图像间预测编码的编码对象分割图像的情况下的预测图像的生成例进行说明。将属于分割图像Pi的子块表示为Bi，将属于分割图像Pk的子块表示为Bk。
当假设分割图像Pi的子块Bi和分割图像Pk的子块Bk在原图像中的位置关系如图3（A）那样时，如图3（B）所示那样，提取位于子块Bk周围的子块Bi。在该例子中，对1个子块Bk提取了2个子块Bi，但是提取的子块的数量不限于2个。接着，如图3（C）所示那样，对提取出的2个子块Bi的像素值应用插值滤波，计算子块Bk’的像素值。关于插值滤波的滤波系数，使用根据在原图像上的子块Bi和子块Bk的相对位置而预先决定的滤波系数。再有，关于利用插值滤波的插值方法，历来已知各种各样的方法，使用怎样的插值方法都可以生成预测图像。
将集中了像这样利用插值而生成的子块Bk’的图像作为在分割图像Pk的分割图像间预测编码中使用的预测图像。
〔图像编码处理的流程〕
图4是图像编码处理的流程图。按照图4，对图像编码处理的流程进行说明。
首先，分割图像生成部11将输入图像分割为相同尺寸的块，集中各块内的相对位置相同的子块（像素或像素群），生成分割图像P0~PN（步骤S101）。
接着，分割图像内编码处理部12对分割图像P0~PN中的若干个分割图像P0~PM（其中，M＜N）进行分割图像内编码（步骤S102）。在此，关于成为分割图像内编码的对象的分割图像，更优选的是，构成分割图像的子块在原图像上的位置以规定的间隔离开。也可以只将排头的分割图像P0作为分割图像内编码的对象。
接着，分割图像间编码处理部13针对分割图像P（M+1）~PL（其中，M＜L＜N）将编码完毕分割图像作为参照图像来进行分割图像间编码（步骤S103）。该分割图像P（M+1）~PL例如是进行了分割图像内编码的分割图像的右邻的未编码分割图像或进行了分割图像内编码的分割图像的正下方的未编码分割图像那样的、在参照图像的候补为单数的情况下的分割图像。在此，关于进行分割图像间编码的分割图像的编号，能预先确定。
接着，分割图像间编码处理部13针对剩余的分割图像P（L+1）~PN，将由相关性方向计算部15以及参照图像选择部16选择出的相对于编码对象的分割图像处于相关性高的方向的像素所属的编码完毕分割图像作为参照图像，进行分割图像间编码（步骤S104）。
〔分割图像间编码处理的详细流程（例1）〕
图5示出了图4所示的步骤S104的详细的处理流程图的第1例。
在步骤S201中，对各分割图像Pi（i为从（L+1）到N）重复从步骤S202到步骤S208的处理。
在步骤S202中，将各分割图像Pi分割为编码单位的分割图像块，对每个分割图像块重复从步骤S203到步骤S207的处理。该分割图像块是例如像16×16像素那样的相当于H. 264编码中的宏块等的分割图像块，但是分割图像块的尺寸可以任意地确定。
在步骤S203中，对编码对象的分割图像块，根据分割图像间编码完毕分割图像的解码图像A及其参照图像制作预测图像B，计算解码图像A和预测图像B的差分即预测误差，求取预测误差的绝对值和或者平方和（以下，将绝对值和或者平方和仅称为“和”）。
在步骤S204中，对在步骤S203中求取出的解码图像A和预测图像B的预测误差的和小的编码完毕分割图像（设为PA）与其参照图像（设为PB）的组合进行求取。
在步骤S205中，针对在步骤S204中求取出的编码完毕分割图像PA和参照图像PB的组合，将连结原图像上的点A（X（PA），Y（PA））、点B（X（PB），Y（PB））这2点的方向作为相关性高的方向。
在步骤S206中，针对编码对象的分割图像块，选择处于相关性高的方向的像素所属的编码完毕分割图像来作为参照图像，根据该参照图像生成预测图像并进行分割图像间编码。
在步骤S207中，判定分割图像Pi内的全部分割图像块的处理是否结束了，如果存在未处理的分割图像块，则对该分割图像块重复步骤S202以后的处理。
在步骤S208中，判定是否对全部分割图像P（L+1）~PN进行了编码，重复步骤S201以后的处理，直到对全部分割图像P（L+1）~PN进行编码。
〔图像编码装置的详细的结构例（例1）〕
图6示出了图1所示的图像编码装置10的详细的结构例。图6所示的图像编码装置10是执行以图5说明了的第1例的处理的装置的结构例。在图6中，由于分割图像生成部11、信源编码部14、参照图像选择部16对应于图1所示的相同附图标记的分割图像生成部11、信源编码部14、参照图像选择部16，所以省略说明。
分割图像内编码部101对分割图像P0~PM进行分割图像内编码。分割图像内解码部102对分割图像内编码部101编码后的分割图像进行解码，并且，将该解码图像储存在解码图像存储器103中。在该解码图像存储器103中还储存有之后进行了分割图像间编码的分割图像的解码图像。
预测图像生成部104为了对在由分割图像生成部11生成的分割图像中尚未被编码的分割图像进行分割图像间预测编码，按该分割图像的每个分割图像块（以下，有时也将分割图像块仅称为分割图像），将解码图像存储器103内的编码完毕分割图像作为参照图像，生成预测图像。在该预测图像的生成中，通过对参照图像施加根据成为目前的编码对象的分割图像和参照图像在原图像上的对应像素的相对位置而决定的规定的滤波，从而生成预测图像。
差分计算部105从成为目前的编码对象的分割图像块的各像素值中减去由预测图像生成部104生成的预测图像的各像素值来计算预测误差。预测误差编码部106对计算出的预测误差施加正交变换、量化处理，对预测误差进行编码。
信源编码部14对分割图像内编码部101和利用分割图像间预测编码来进行编码后的预测误差编码部106的编码信息进行熵编码，并且，输出编码数据。
在第1例中，预测误差解码部107对预测误差编码部106进行编码后的预测误差进行解码。图像解码部108利用加法器109将预测误差解码部107进行解码后的预测误差和预测图像生成部104所生成的预测图像相加，对分割图像间编码图像进行解码。再有，在图像解码部108中，有时在将预测图像和预测误差相加之后还施加去块滤波等后处理滤波。解码后的分割图像的解码图像储存在解码图像存储器103中。
利用减法器110计算编码完毕分割图像的解码图像和预测图像的差分，预测误差计算部111按成为参照图像的候补的每个编码完毕分割图像计算预测误差的和。预测误差比较部112求取预测误差计算部111计算出的预测误差的和最小的分割图像，根据该结果将预测误差的和最小的编码完毕分割图像和其参照图像在原图像中的对应的像素的方向作为相关性高的方向，并且，将该相关性方向通知给参照图像选择部16。
参照图像选择部16对编码对象的分割图像从解码图像存储器103中选择处于由预测误差比较部112计算出的相关性方向的编码完毕分割图像来作为参照图像，并且，将该参照图像通知给预测图像生成部104。
〔分割图像间编码处理的详细流程（例2）〕
图7示出了图4所示的步骤S104的详细的处理流程图的第2例。
在第2例中，步骤S303的处理与第1例不同，其它步骤S301、S302、S304~S308与以图5说明了的第1例的步骤201、S202、S204~S208相同。
在步骤S303中，对编码对象的分割图像块，求取分割图像间编码完毕分割图像的解码图像A和其预测图像B的预测误差的和。即，在步骤S303中，不是按每个分割图像块重新生成预测图像并生成解码图像A来求取预测误差的和，而是直接使用作为编码数据而已经被生成的预测误差来计算该预测误差的和，并且，判断相关性。由此，抑制了解码运算的运算量的增加。
〔图像编码装置的详细的结构例（例2）〕
图8示出了图1所示的图像编码装置10的详细的第2结构例。图8所示的图像编码装置10是执行以图7说明了的第2例的处理的装置的结构例。在图8中，由于附图标记与上述的图6的第1例的图像编码装置10相同的图像编码装置具有与图6所示的图像编码装置10相同的功能，所以省略其详细的说明。
在第2例的情况下，预测误差解码部120通过对预测误差编码部106进行编码后的预测误差施加逆量化处理、逆正交变换，从而对预测误差进行解码。预测误差计算部121按每个分割图像计算预测误差解码部120进行解码后的预测误差的和。预测误差比较部122求取预测误差计算部121所计算出的预测误差的和最小的分割图像，根据其结果将预测误差的和最小的编码完毕分割图像和其参照图像在原图像中的对应的像素的方向作为相关性高的方向，并且，将该相关性方向通知给参照图像选择部16。
参照图像选择部16向图像解码部123通知：对编码对象的分割图像，根据预测误差比较部122的结果，将处于被通知的相关性方向的编码完毕分割图像作为参照图像。图像解码部123将被通知的编码完毕分割图像的解码图像根据其预测图像和预测误差生成，并且，储存在解码图像存储器103中。预测图像生成部104将储存在解码图像存储器103中的解码图像用作参照图像，生成编码对象的分割图像块的编码用的预测图像。
〔编码的具体例〕
在图9中示出编码对象图像的分割例。在以下说明的例子中，假设分割图像生成部11将作为编码对象的输入图像的1个帧如图9所示那样分割为2×2像素的块M0、M1、…、MJ。进而，假设分割图像生成部11将各块M0、M1、…、MJ一像素一像素地分割为子块B0、B1、B2、B3。将从像这样分割出的各M0、M1、…、MJ中集中了左上的子块B0的像素的分割图像设为分割图像P0，将从像这样分割出的各M0、M1、…、MJ中集中了右上的子块B1的像素的分割图像设为分割图像P1，将从像这样分割出的各M0、M1、…、MJ中集中了左下的子块B2的像素的分割图像设为分割图像P2，将从像这样分割出的各M0、M1、…、MJ中集中了右下的子块B3的像素的分割图像设为分割图像P3。
在此，对将2×2像素的块分割为1×1像素的子块的例子进行说明。可是，块以及子块的尺寸并不限于该例子，在块的尺寸或子块的尺寸更大的情况下，也能应用并同样地实施本发明。
〔第1例的处理〕
在上述的第1例中，对如图9那样被分割出的分割图像，如以下那样进行分割图像内编码以及分割图像间编码。
·处理1–1：针对分割图像P0进行分割图像内编码。
·处理1–2：针对分割图像P1，将分割图像的P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间编码。生成进行编码后的分割图像P1的解码图像P1’并进行存储。在图10A中示出该情况。
·处理1–3：针对分割图像P2，将分割图像P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间编码。生成进行编码后的分割图像P2的解码图像P2’并进行存储。在图10B中示出该情况。
·处理1–4：针对分割图像P1、P2，计算各个预测图像和解码图像P1’、P2’的预测误差的和S1、S2（例如预测误差的绝对值和或者平方误差和）并进行比较。
·处理1–5：S1≤S2的情况，
如图10C所示那样，在分割图像P3的分割图像间编码中，将分割图像P2的解码图像用作参照图像。即，对分割图像P2的解码图像施加插值滤波来生成分割图像P3的预测图像，对该预测图像和分割图像P3的预测误差进行编码，由此，进行分割图像P3的分割图像间编码。这是因为S1≤S2，因此，认为在原图像上的水平方向的像素间的相关性比垂直方向的像素间的相关性高。
·处理1–6：S1＞S2的情况，
如图10D所示那样，在分割图像P3的分割图像间编码中，将分割图像P1的解码图像用作参照图像。即，对分割图像P1的解码图像施加插值滤波来生成分割图像P3的预测图像，对该预测图像和分割图像P3的预测误差进行编码，由此，进行分割图像P3的分割图像间编码。这是因为S1＞S2，因此，认为在原图像上的垂直方向的像素间的相关性比水平方向的像素间的相关性高。
〔第2例的处理〕
在上述的第2例中，对如图9那样被分割出的分割图像，如以下那样进行分割图像内编码以及分割图像间编码。
·处理2–1：针对分割图像P0进行分割图像内编码。
·处理2–2：针对分割图像P1，将分割图像P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间编码。存储此时的预测误差的和S1。
·处理2–3：针对分割图像P2，将分割图像P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间编码。存储此时的预测误差的和S2。
·处理2–4：针对分割图像P1、P2，比较各个预测误差的和S1、S2。
·处理2–5：S1≤S2的情况，
在分割图像P3的分割图像间编码中，将分割图像P2的解码图像用作参照图像。即，对分割图像P2的解码图像施加插值滤波来生成分割图像P3的预测图像，对该预测图像和分割图像P3的预测误差进行编码，由此，进行分割图像P3的分割图像间编码。
·处理2–6：S1＞S2的情况，
在分割图像P3的分割图像间编码中，将分割图像P1的解码图像用作参照图像。即，对分割图像P1的解码图像施加插值滤波来生成分割图像P3的预测图像，对该预测图像和分割图像P3的预测误差进行编码，由此，进行分割图像P3的分割图像间编码。
〔图像解码装置〕
图11是示出图像解码装置的结构例的图。图像解码装置20具备：信源解码部21、分割图像内解码处理部22、分割图像间解码处理部23、解码图像合成部24、相关性方向计算部25、参照图像选择部26。
图像解码装置20输入由图1所示的图像编码装置10进行压缩编码后的图像的编码数据。信源解码部21对所输入的编码数据进行熵解码。
分割图像内解码处理部22利用分割图像内预测来对预先确定的至少一个以上的进行了分割图像内编码的分割图像的编码数据进行解码。分割图像间解码处理部23将解码完毕分割图像作为参照图像，利用分割图像间预测来对解码对象的分割图像进行解码。由分割图像内解码处理部22以及分割图像间解码处理部23解码后的分割图像被输入至解码图像合成部24。解码图像合成部24将进行解码后的分割图像的各子块配置在原图像上的原来的位置，由此，生成解码图像。
在参照图像的候补只有1个的情况下，例如，在与解码对象分割图像在原图像上的像素位置最接近的像素所属的解码完毕分割图像为1个的情况下，分割图像间解码处理部23将该解码完毕分割图像作为参照图像进行分割图像间解码。
在参照图像的候补为多个的情况下，例如，在与解码对象分割图像在原图像上的像素位置最接近的像素所属的解码完毕分割图像存在多个的情况下，相关性方向计算部25求取在成为参照图像的候补的解码完毕分割图像中预测误差的绝对值和或者平方和最小的分割图像，根据其结果将解码完毕分割图像和其参照图像在原图像中的对应的像素的方向作为相关性高的方向，并且，将该相关性方向通知给参照图像选择部26。该相关性方向计算部25进行的处理与图像编码装置10中的相关性方向计算部15进行的处理完全相同。
参照图像选择部26对解码对象的分割图像，选择处于相关性方向计算部25计算出的相关性方向的解码完毕分割图像作为参照图像，并且，将该参照图像通知给分割图像间解码处理部23。
〔图像解码处理的流程〕
图12是图像解码处理的流程图。按照图12，对图像解码处理的流程进行说明。
首先，信源解码部21对输入的解码对象的编码数据进行熵解码（步骤S401）。接着，分割图像内解码处理部22基于输入的编码数据，对预先确定的分割图像P0~PN中的若干个分割图像P0~PM（其中，M＜N），使用H. 264中进行的那样的现有的帧内预测解码方法等来进行分割图像内解码（步骤S402）。
接着，分割图像间解码处理部23对预先确定的分割图像P（M+1）~PL，分别将预先确定的解码完毕分割图像作为参照图像，进行分割图像间解码（步骤S403）。
接着，分割图像间解码处理部23对未解码的分割图像P（L+1）~PN，将参照图像选择部26基于解码完毕分割图像的预测误差而选择出的处于空间相关性高的方向的解码完毕分割图像作为参照图像，进行分割图像间解码（步骤S404）。
最后，解码图像合成部24对由分割图像内解码处理部22和分割图像间解码处理部23进行解码后的分割图像的像素（子块）进行合成，并且，作为解码图像输出（步骤S405）。
〔图像解码装置的详细的结构例（例1）〕
图13示出了图11所示的图像解码装置20的详细的第1结构例。在图13所示的图像解码装置20中，由于信源解码部21、解码图像合成部24、参照图像选择部26对应于图11所示的相同附图标记的信源解码部21、解码图像合成部24、参照图像选择部26，所以省略说明。
分割图像内解码部201根据由信源解码部21进行解码后的分割图像P0~PM的解码信息，对这些分割图像P0~PM进行分割图像内解码，并且，将该解码图像储存在解码图像存储器202中。在该解码图像存储器202中还储存有之后进行了分割图像间解码的分割图像的解码图像。
预测图像生成部203为了对尚未被解码的分割图像进行分割图像间预测解码，按该分割图像的每个分割图像块（以下，有时也仅称为分割图像），将解码图像存储器202内的解码完毕分割图像作为参照图像，生成预测图像。在该预测图像的生成中，对参照图像施加根据成为目前的解码对象的分割图像和参照图像在原图像上的对应像素的相对位置而决定的规定的滤波，由此，生成预测图像。
预测误差解码部204对成为分割图像间解码的对象的分割图像的预测误差进行解码。图像解码部205利用加法器206将预测图像生成部203所生成的预测图像和预测误差解码部204进行解码后的预测误差相加，生成解码图像。再有，在图像解码部205中，有时在将预测图像和预测误差相加之后还施加去块滤波等后处理滤波。将该解码图像发送到解码图像合成部24，并且，储存在解码图像存储器202中。
减法器207从由图像解码部205进行解码后的分割图像块的各像素值中减去由预测图像生成部203生成的预测图像的各像素值，并且，将该减法结果通知给预测误差计算部208。预测误差计算部208按成为参照图像的候补的每个解码完毕分割图像计算预测误差的和。预测误差比较部209求取预测误差计算部208所计算出的预测误差的和最小的分割图像，根据其结果将预测误差的和最小的解码完毕分割图像和其参照图像在原图像中的对应的像素的方向作为相关性高的方向，并且，将该相关性方向通知给参照图像选择部26。
参照图像选择部26对解码对象的分割图像从解码图像存储器202中选择处于由预测误差比较部209所计算出的相关性方向的解码完毕分割图像作为参照图像，并且，将该参照图像通知给预测图像生成部203。
〔图像解码装置的详细的结构例（例2）〕
图14示出了图11所示的图像解码装置20的详细的第2结构例。在图14所示的图像解码装置20中，由于附图标记与上述的图13的第1例相同的结构具有与图13所示的结构相同的功能，所以省略其详细的说明。
在第2例的情况下，预测误差计算部221按成为参照图像的候补的每个解码完毕分割图像（块）计算预测误差解码部204进行解码后的预测误差的和。预测误差比较部222求取预测误差计算部221所计算出的预测误差的和最小的分割图像，根据其结果将预测误差的和最小的解码完毕分割图像和其参照图像在原图像中的对应的像素的方向作为相关性高的方向，并且，将该相关性方向通知给参照图像选择部26。参照图像选择部26对解码对象的分割图像，从解码图像存储器202中选择处于由预测误差比较部222计算出的相关性方向的解码完毕分割图像作为参照图像，并且，将该参照图像通知给预测图像生成部203。
〔第1例的解码处理的具体例〕
作为第1例的解码处理的具体例，说明对如上述的图9那样将2×2像素块的像素重新配置后的4个分割图像P0~P3进行分割图像内解码以及分割图像间解码的例子。
·处理1–1：针对分割图像P0进行分割图像内解码。
·处理1–2：针对分割图像P1，将分割图像P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间解码。存储被解码后的分割图像P1的解码图像P1’。
·处理1–3：针对分割图像P2，将分割图像P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间解码。存储被解码后的分割图像P2的解码图像P2’。
·处理1–4：针对分割图像P1、P2，计算各个预测图像和解码图像P1’、P2’的预测误差的和S1、S2（例如预测误差的绝对值和或者平方误差和）并进行比较。
·处理1–5：S1≤S2的情况，
在分割图像P3的分割图像间解码中，将分割图像P2的解码图像用作参照图像。即，对分割图像P2的解码图像施加插值滤波来生成分割图像P3的预测图像，将该预测图像和分割图像P3的预测误差相加，由此，进行分割图像P3的分割图像间解码。这是因为S1≤S2，因此，认为在原图像上的水平方向的像素间的相关性比垂直方向的像素间的相关性高。
·处理1–6：S1＞S2的情况，
在分割图像P3的分割图像间解码中，将分割图像P1的解码图像用作参照图像。即，对分割图像P1的解码图像施加插值滤波来生成分割图像P3的预测图像，将该预测图像和分割图像P3的预测误差相加，由此，进行分割图像P3的分割图像间解码。这是因为S1＞S2，因此，认为在原图像上的垂直方向的像素间的相关性比水平方向的像素间的相关性高。
〔第2例的处理〕
在上述的第2例中，对如图9那样被分割出的分割图像，如以下这样进行分割图像内解码以及分割图像间解码。
·处理2–1：针对分割图像P0进行分割图像内解码。
·处理2–2：针对分割图像P1，将分割图像P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间解码。存储此时的预测误差的和S1。
·处理2–3：针对分割图像P2，将分割图像P0的解码图像作为参照图像，对其应用插值滤波，由此，生成预测图像，进行分割图像间解码。存储此时的预测误差的和S2。
·处理2–4：对分割图像P1、P2，比较各个预测误差的和S1、S2。
·处理2–5：S1≤S2的情况，
在分割图像P3的分割图像间解码中，将分割图像P2的解码图像用作参照图像。即，对分割图像P2的解码图像施加插值滤波来生成分割图像P3的预测图像，将该预测图像和分割图像P3的预测误差相加，由此，进行分割图像P3的分割图像间解码。
·处理2–6：S1＞S2的情况，
在分割图像P3的分割图像间解码中，将分割图像P1的解码图像用作参照图像。即，对分割图像P1的解码图像施加插值滤波来生成分割图像P3的预测图像，将该预测图像和分割图像P3的预测误差相加，由此，进行分割图像P3的分割图像间解码。
再有，在以上说明了的实施方式中，对于1帧而言，成为分割图像内编码（解码也是同样的）的对象的分割图像可以是1个，也可以是多个，此外，也可以以将分割图像分割为小区域后的分割图像块为单位进行在分割图像内编码以及分割图像间编码中的编码处理。在以分割图像块为单位进行分割图像间编码的处理的情况下，也可以以分割图像块为单位利用预测误差的和的比较来切换参照图像。
〔应用了图像编码装置的活动图像编码装置的例子〕
图15示出了能应用本发明的活动图像编码装置的例子。在活动图像编码装置300中，本发明特别是能应用于与帧内预测部301相关联的编码处理。关于其它的部分，与作为H. 264等的编码器使用的现有的一般的活动图像编码装置的结构相同。
活动图像编码装置300输入编码对象的视频信号，将输入视频信号的帧分割为块并按每个块进行编码，并且，将其比特流作为编码流而输出。为了该编码，预测残差信号生成部303求取输入视频信号和作为帧内预测部301或帧间预测部302的输出的预测信号的差分，并且，将其作为预测残差信号输出。变换处理部304对预测残差信号进行离散余弦变换（DCT）等正交变换，并且，输出变换系数。量化处理部305对变换系数进行量化，并且，输出该量化后的变换系数。信源编码部311对量化后的变换系数进行熵编码，并且，作为编码流输出。
另一方面，量化后的变换系数也被输入至逆量化处理部306，在此被逆量化。逆变换处理部307对作为逆量化处理部306的输出的变换系数进行逆正交变换，并且，输出预测残差解码信号。
在解码信号生成部308中，将该预测残差解码信号和作为帧内预测部301或帧间预测部302的输出的预测信号相加，生成编码后的编码对象块的解码信号。该解码信号为了在帧内预测部301或帧间预测部302中作为参照图像来使用而被储存在帧存储器309中。再有，在帧间预测部302中对参照图像进行参照的情况下，在环路滤波处理部310中，输入储存在帧存储器309中的图像，进行减少编码失真的滤波处理，并且，将该滤波处理后的图像用作参照图像。
在帧内预测部301中，进行以本发明的实施方式说明了的分割图像内编码以及分割图像间编码的编码处理。在帧内预测部301或帧间预测部302中设定的预测模式、运动矢量等信息由信源编码部311进行熵编码，并且，被作为编码流而输出。
〔应用了图像解码装置的活动图像解码装置的例子〕
图16示出了能应用本发明的活动图像解码装置的例子。在活动图像解码装置400中，本发明特别是能应用于与帧内预测部402相关联的解码处理。关于其它的部分，与作为H. 264等的解码器使用的现有的一般的活动图像解码装置的结构相同。
活动图像解码装置400通过输入由以图15说明了的活动图像编码装置300进行编码后的编码流并进行解码，从而输出解码图像的视频信号。为了该解码，信源解码部401输入编码流，对解码对象块的量化变换系数进行熵解码，并且，对关于帧内预测的信息以及关于帧间预测的信息进行解码。在帧内预测部402中，进行以本发明的实施方式说明了的分割图像内解码以及分割图像间解码的解码处理。
逆量化处理部404输入量化变换系数，对其进行逆量化并输出解码变换系数。逆变换处理部405对解码变换系数施加逆正交变换，并且，输出预测残差解码信号。解码信号生成部406将该预测残差解码信号和作为帧内预测部402或帧间预测部403的输出的预测信号相加，生成解码对象块的解码信号。该解码信号为了在帧内预测部402或帧间预测部403中作为参照图像来使用而被储存在帧存储器407中。再有，在帧间预测部403中对参照图像进行参照的情况下，在环路滤波处理部408中，输入储存在帧存储器407中的图像，进行减少编码失真的滤波处理，并且，将该滤波处理后的图像用作参照图像。
〔计算机的结构例〕
在图17中示出了在利用计算机和软件程序来构成图1的图像编码装置10的情况下的硬件结构例。本系统是以总线连接有以下各部分的结构：执行程序的CPU（Central Processing Unit，中央处理单元）50、CPU50访问的储存有程序和数据的RAM（Random Access Memory，随机存取存储器）等存储器51、输入来自照相机等的编码对象的图像信号的图像信号输入部52（也可以是利用磁盘装置等的存储图像信号的存储部）、储存有使CPU50执行利用本手法来对输入图像进行编码的处理的软件程序即图像编码程序54的程序存储装置53、以及例如经由网络输出CPU50通过执行被加载到存储器51中的图像编码程序54而生成的编码数据的编码数据输出部55（也可以是利用磁盘装置等的存储编码数据的存储部）。
在图18中示出了在利用计算机和软件程序来构成图11的图像解码装置20的情况下的硬件结构例。本系统是以总线连接有以下各部分的结构：执行程序的CPU60、CPU60访问的储存有程序和数据的RAM等存储器61、输入图1的图像编码装置10利用本手法来进行编码后的编码数据并进行存储的编码数据存储部62（也可以是经由网络等的输入部）、储存有作为使CPU60执行利用本手法来对编码数据进行解码的处理的软件程序即图像解码程序64的程序存储装置63、将通过CPU60执行被加载到存储器61中的图像解码程序64来对编码数据进行解码而获得的解码图像输出到再生装置等中的解码图像输出部65。
以上，参照附图说明了本发明的实施方式，但是上述实施方式只不过是本发明的例示，明显的是本发明并不限定于上述实施方式。因此，也可以进行在不偏离本发明的精神以及技术范围的范围内的结构要素的追加、省略、置换、其它变更。
产业上的可利用性
本发明例如能应用于帧内预测编码、解码。根据本发明，能使编码效率提高，此外，能削减伴随着去块滤波处理的运算量。
附图标记的说明：
10 图像编码装置
11 分割图像生成部
12 分割图像内编码处理部
13 分割图像间编码处理部
14 信源编码部
15，25 相关性方向计算部
16，26 参照图像选择部
20 图像解码装置
21 信源解码部
22 分割图像内解码处理部
23 分割图像间解码处理部
24 解码图像合成部。

Claims (18)

1.一种图像编码方法，对输入图像进行压缩编码，其中，具有：
分割图像生成过程，在将所述输入图像分割为n×m像素的块、将分割后的各块分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块时，对由所述块内的相对位置相同的子块的像素的集合组成的每一个为相同尺寸的分割图像进行设定；
分割图像内编码过程，对所述分割图像的至少一个以上进行分割图像内编码；
分割图像间编码过程，使用从编码完毕分割图像中选择出的参照图像，生成对编码对象分割图像的预测图像，并且，进行分割图像间编码；
相关性方向计算过程，在所述参照图像的候补存在多个的情况下，基于所述编码完毕分割图像的分割图像间预测中的预测误差，关于在编码完毕分割图像和所述编码完毕分割图像的参照图像中的同一位置的像素，计算与原图像上的像素的相关性最高的方向；
参照图像选择过程，在所述参照图像的候补存在多个的情况下，将相对于所述编码对象分割图像处于所述相关性高的方向的编码完毕分割图像选择为所述参照图像；以及
信源编码过程，对由所述分割图像内编码过程和所述分割图像间编码过程得到的编码结果进行信源编码。
2.根据权利要求1所述的图像编码方法，其中，
在所述相关性方向计算过程中，从成为所述参照图像的候补的各编码完毕分割图像的解码图像和各编码完毕分割图像的参照图像生成预测图像，计算所述预测图像相对于各编码完毕分割图像的所述解码图像的预测误差的和，计算将在所述预测误差的和最小的编码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
3.根据权利要求1所述的图像编码方法，其中，
在所述相关性方向计算过程中，对成为所述参照图像的候补的各编码完毕分割图像，计算在所述分割图像间编码中所计算出的预测误差的和，计算将在所述预测误差的和最小的编码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
4.根据权利要求1、权利要求2或权利要求3所述的图像编码方法，其中，
至少在所述分割图像间编码过程、所述相关性方向计算过程以及所述参照图像选择过程中，按照对所述分割图像进行分割后的每个图像块进行所述分割图像的编码处理、相关性方向的计算处理以及所述参照图像的选择处理，并且，按每个所述图像块切换所述分割图像间编码中的参照图像。
5.一种图像解码方法，对图像的编码数据进行解码，所述图像是通过在将输入图像分割为n×m像素的块、将分割后的各块分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块时，对由所述块内的相对位置相同的子块的像素的集合组成的每一个为相同尺寸的分割图像进行设定并对每个所述分割图像进行编码而进行压缩编码后的图像，其中，所述图像解码方法具有：
信源解码过程，输入所述进行压缩编码后的图像的编码数据，进行信源解码；
分割图像内解码过程，根据在所述信源解码过程中进行解码后的数据，对所述分割图像的至少一个以上进行分割图像内解码；
分割图像间解码过程，使用从解码完毕分割图像中选择出的参照图像，生成对解码对象分割图像的预测图像，并且，进行分割图像间解码；
相关性方向计算过程，在所述参照图像的候补存在多个的情况下，基于所述解码完毕分割图像的分割图像间预测中的预测误差，关于在解码完毕分割图像和所述解码完毕分割图像的参照图像中的同一位置的像素，计算原图像上的像素的相关性最高的方向；
参照图像选择过程，在所述参照图像的候补存在多个的情况下，将相对于所述解码对象分割图像处于所述相关性高的方向的解码完毕分割图像选择为所述参照图像；以及
解码图像合成过程，根据由所述分割图像内解码过程和所述分割图像间解码过程进行解码后的分割图像，合成解码图像。
6.根据权利要求5所述的图像解码方法，其中，
在所述相关性方向计算过程中，从成为所述参照图像的候补的各解码完毕分割图像和各解码完毕分割图像的参照图像生成预测图像，计算所述预测图像相对于各解码完毕分割图像的预测误差的和，计算将在所述预测误差的和最小的解码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
7.根据权利要求5所述的图像解码方法，其中，
在所述相关性方向计算过程中，对成为所述参照图像的候补的各解码完毕分割图像，计算在所述分割图像间解码中所计算出的预测误差的和，计算将在所述预测误差的和最小的解码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
8.根据权利要求5、权利要求6或权利要求7所述的图像解码方法，其中，
至少在所述分割图像间解码过程、所述相关性方向计算过程以及所述参照图像选择过程中，按照对所述分割图像进行分割后的每个图像块进行所述分割图像的解码处理、相关性方向的计算处理以及所述参照图像的选择处理，并且，按每个所述图像块切换所述分割图像间解码中的参照图像。
9.一种图像编码装置，对输入图像进行压缩编码，其中，具备：
分割图像生成部，在将所述输入图像分割为n×m像素的块、将分割后的各块分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块时，对由所述块内的相对位置相同的子块的像素的集合组成的每一个为相同尺寸的分割图像进行设定；
分割图像内编码部，对所述分割图像的至少一个以上进行分割图像内编码；
分割图像间编码部，使用从编码完毕分割图像中选择出的参照图像，生成对编码对象分割图像的预测图像，并且，进行分割图像间编码；
相关性方向计算部，在所述参照图像的候补存在多个的情况下，基于所述编码完毕分割图像的分割图像间预测中的预测误差，关于在编码完毕分割图像和所述编码完毕分割图像的参照图像中的同一位置的像素，计算原图像上的像素的相关性最高的方向；
参照图像选择部，在所述参照图像的候补存在多个的情况下，将相对于所述编码对象分割图像处于所述相关性高的方向的编码完毕分割图像选择为所述参照图像；以及
信源编码部，对由所述分割图像内编码部和所述分割图像间编码部得到的编码结果进行信源编码。
10.根据权利要求9所述的图像编码装置，其中，
所述相关性方向计算部从成为所述参照图像的候补的各编码完毕分割图像的解码图像和各编码完毕分割图像的参照图像生成预测图像，计算所述预测图像相对于各编码完毕分割图像的所述解码图像的预测误差的和，计算将在所述预测误差的和最小的编码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
11.根据权利要求9所述的图像编码装置，其中，
所述相关性方向计算部对成为所述参照图像的候补的各编码完毕分割图像，计算在所述分割图像间编码中所计算出的预测误差的和，计算将在所述预测误差的和最小的编码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
12.根据权利要求9、权利要求10或权利要求11所述的图像编码装置，其中，
至少所述分割图像间编码部、所述相关性方向计算部以及所述参照图像选择部按照对所述分割图像进行分割后的每个图像块进行所述分割图像的编码处理、相关性方向的计算处理以及所述参照图像的选择处理，并且，按每个所述图像块切换所述分割图像间编码中的参照图像。
13.一种图像解码装置，对图像的编码数据进行解码，所述图像是通过在将输入图像分割为n×m像素的块、将分割后的各块分割为n1×m1像素（其中，1≤n1＜n，1≤m1＜m）的子块时，对由所述块内的相对位置相同的子块的像素的集合组成的每一个为相同尺寸的分割图像进行设定并对每个所述分割图像进行编码而进行压缩编码后的图像，其中，所述图像解码装置具备：
信源解码部，输入所述进行压缩编码后的图像的编码数据，进行信源解码；
分割图像内解码部，根据在所述信源解码部中进行解码后的数据，对所述分割图像的至少一个以上进行分割图像内解码；
分割图像间编码部，使用从解码完毕分割图像中选择出的参照图像，生成对解码对象分割图像的预测图像，并且，进行分割图像间解码；
相关性方向计算部，在所述参照图像的候补存在多个的情况下，基于所述解码完毕分割图像的分割图像间预测中的预测误差，关于在解码完毕分割图像和所述解码完毕分割图像的参照图像中的同一位置的像素，计算原图像上的像素的相关性最高的方向；
参照图像选择部，在所述参照图像的候补存在多个的情况下，将相对于所述解码对象分割图像处于所述相关性高的方向的解码完毕分割图像选择为所述参照图像；以及
解码图像合成部，根据由所述分割图像内解码部以及所述分割图像间解码部进行解码后的分割图像，合成解码图像。
14.根据权利要求13所述的图像解码装置，其中，
所述相关性方向计算部从成为所述参照图像的候补的各解码完毕分割图像和各解码完毕分割图像的参照图像生成预测图像，计算所述预测图像相对于各解码完毕分割图像的预测误差的和，计算将在所述预测误差的和最小的解码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
15.根据权利要求13所述的图像解码装置，其中，
所述相关性方向计算部对成为所述参照图像的候补的各解码完毕分割图像，计算在所述分割图像间解码中所计算出的预测误差的和，计算将在所述预测误差的和最小的解码完毕分割图像和参照图像的组合中的同一位置的像素所对应的在原图像上的像素进行连结的方向来作为所述相关性高的方向。
16.根据权利要求13、权利要求14或权利要求15所述的图像解码装置，其中，
至少所述分割图像间解码部、所述相关性方向计算部以及所述参照图像选择部按照对所述分割图像进行分割后的每个图像块进行所述分割图像的解码处理、相关性方向的计算处理以及所述参照图像的选择处理，并且，按每个所述图像块切换所述分割图像间解码中的参照图像。
17.一种图像编码程序，用于使计算机执行从权利要求1至权利要求4的任一项所述的图像编码方法。
18.一种图像解码程序，用于使计算机执行从权利要求5至权利要求8的任一项所述的图像解码方法。
CN201280061038.9A 2011-12-13 2012-12-12 图像编码以及解码方法、装置、程序 Active CN103975599B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-271841 2011-12-13
JP2011271841A JP5795525B2 (ja) 2011-12-13 2011-12-13 画像符号化方法，画像復号方法，画像符号化装置，画像復号装置，画像符号化プログラムおよび画像復号プログラム
PCT/JP2012/082174 WO2013089129A1 (ja) 2011-12-13 2012-12-12 画像符号化及び復号方法、装置、プログラム

Publications (2)

Publication Number Publication Date
CN103975599A true CN103975599A (zh) 2014-08-06
CN103975599B CN103975599B (zh) 2017-05-03

Family

ID=48612573

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280061038.9A Active CN103975599B (zh) 2011-12-13 2012-12-12 图像编码以及解码方法、装置、程序

Country Status (11)

Country Link
US (1) US9332275B2 (zh)
EP (1) EP2775718B1 (zh)
JP (1) JP5795525B2 (zh)
KR (1) KR101614828B1 (zh)
CN (1) CN103975599B (zh)
BR (1) BR112014014322A2 (zh)
CA (1) CA2858693A1 (zh)
PL (1) PL2775718T3 (zh)
RU (1) RU2014123658A (zh)
TW (1) TWI477107B (zh)
WO (1) WO2013089129A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109845257A (zh) * 2016-12-06 2019-06-04 Jvc 建伍株式会社 图像编码装置、图像编码方法和图像编码程序、图像解码装置、图像解码方法和图像解码程序
CN114071189A (zh) * 2020-08-03 2022-02-18 纬创资通股份有限公司 视频处理装置及视频串流的处理方法

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6130267B2 (ja) * 2013-08-13 2017-05-17 日本電信電話株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム
JP6428518B2 (ja) 2014-09-05 2018-11-28 株式会社ニューフレアテクノロジー データ生成装置、エネルギービーム描画装置、及びエネルギービーム描画方法
US10382792B2 (en) * 2015-02-13 2019-08-13 Lg Electronics Inc. Method and apparatus for encoding and decoding video signal by means of transform-domain prediction
WO2017133660A1 (en) * 2016-02-04 2017-08-10 Mediatek Inc. Method and apparatus of non-local adaptive in-loop filters in video coding
US10958807B1 (en) * 2018-02-08 2021-03-23 Digimarc Corporation Methods and arrangements for configuring retail scanning systems
US10880451B2 (en) 2018-06-08 2020-12-29 Digimarc Corporation Aggregating detectability metrics to determine signal robustness
TWI749676B (zh) 2020-08-03 2021-12-11 緯創資通股份有限公司 影像品質評估裝置及其影像品質評估方法
CN116708933B (zh) * 2023-05-16 2024-04-16 深圳东方凤鸣科技有限公司 一种视频编码方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1929612A (zh) * 2005-09-06 2007-03-14 三星电子株式会社 用于视频内预测编码和解码的方法和装置
US20070206872A1 (en) * 2006-03-03 2007-09-06 Samsung Electronics Co., Ltd. Method of and apparatus for video intraprediction encoding/decoding
EP2352296A1 (en) * 2008-11-14 2011-08-03 Mitsubishi Electric Corporation Moving image encoding apparatus and moving image decoding apparatus

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2905756A (en) 1956-11-30 1959-09-22 Bell Telephone Labor Inc Method and apparatus for reducing television bandwidth
JPS647854A (en) * 1987-06-30 1989-01-11 Toshiba Corp Encoding device
JPH03187694A (ja) * 1989-12-18 1991-08-15 Canon Inc 符号化装置
JPH0678294A (ja) * 1992-08-21 1994-03-18 Sony Corp 符号化方法、符号化装置、および復号化装置
JP2000299866A (ja) * 1999-04-12 2000-10-24 Ntt Software Corp 画像符号化方法
JP4130783B2 (ja) * 2002-04-23 2008-08-06 松下電器産業株式会社 動きベクトル符号化方法および動きベクトル復号化方法
CN101668215A (zh) * 2003-02-18 2010-03-10 诺基亚有限公司 图像解码方法
TW200603614A (en) * 2004-06-02 2006-01-16 Matsushita Electric Ind Co Ltd Seamless switching between random access units multiplexed in a multi angle view multimedia stream
JP4148228B2 (ja) 2005-02-10 2008-09-10 ソニー株式会社 画像記録装置、画像再生制御装置、画像記録再生制御装置、これらの装置の処理方法およびその方法をコンピュータに実行させるプログラム
KR100727970B1 (ko) * 2005-08-30 2007-06-13 삼성전자주식회사 영상의 부호화 및 복호화 장치와, 그 방법, 및 이를수행하기 위한 프로그램이 기록된 기록 매체
TWI415478B (zh) 2007-10-15 2013-11-11 Nippon Telegraph & Telephone 影像編碼裝置及解碼裝置、影像編碼方法及解碼方法，其程式與記錄有程式的記錄媒體

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1929612A (zh) * 2005-09-06 2007-03-14 三星电子株式会社 用于视频内预测编码和解码的方法和装置
US20070206872A1 (en) * 2006-03-03 2007-09-06 Samsung Electronics Co., Ltd. Method of and apparatus for video intraprediction encoding/decoding
EP2352296A1 (en) * 2008-11-14 2011-08-03 Mitsubishi Electric Corporation Moving image encoding apparatus and moving image decoding apparatus

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
LI-LI WANG等: "Improved lossless coding algorithm in H.264/AVC based on hieralchical intraprediction and coding-mode selection", 《JOURNAL OF ELECTRONIC IMAGING》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109845257A (zh) * 2016-12-06 2019-06-04 Jvc 建伍株式会社 图像编码装置、图像编码方法和图像编码程序、图像解码装置、图像解码方法和图像解码程序
CN109845257B (zh) * 2016-12-06 2023-12-12 Jvc 建伍株式会社 图像编码装置和方法、图像解码装置和方法、及存储介质
CN114071189A (zh) * 2020-08-03 2022-02-18 纬创资通股份有限公司 视频处理装置及视频串流的处理方法

Also Published As

Publication number Publication date
EP2775718A4 (en) 2015-07-29
RU2014123658A (ru) 2017-01-20
KR101614828B1 (ko) 2016-04-22
US9332275B2 (en) 2016-05-03
PL2775718T3 (pl) 2020-01-31
TW201338552A (zh) 2013-09-16
CA2858693A1 (en) 2013-06-20
JP2013125973A (ja) 2013-06-24
EP2775718B1 (en) 2019-07-10
EP2775718A1 (en) 2014-09-10
TWI477107B (zh) 2015-03-11
WO2013089129A1 (ja) 2013-06-20
US20140355678A1 (en) 2014-12-04
JP5795525B2 (ja) 2015-10-14
KR20140092374A (ko) 2014-07-23
BR112014014322A2 (pt) 2017-06-13
CN103975599B (zh) 2017-05-03

Similar Documents

Publication Publication Date Title
CN103975599A (zh) 图像编码以及解码方法、装置、程序
RU2490815C1 (ru) Способ и устройство для кодирования и декодирования блока кодирования границы картинки
RU2654129C2 (ru) Функциональные возможности режима внутреннего предсказания с блочным копированием для кодирования и декодирования видео и изображений
KR101684038B1 (ko) 동화상 복호 장치, 동화상 부호화 장치, 동화상 복호 방법, 및 동화상 부호화 방법
CN103283238B (zh) 利用按照编码单元的并行帧内预测进行编码和解码的方法和装置
KR20180019688A (ko) 픽처 예측 방법 및 픽처 예측 장치
KR20110081304A (ko) 화상 예측 부호화 장치, 화상 예측 복호 장치, 화상 예측 부호화 방법, 화상 예측 복호 방법, 화상 예측 부호화 프로그램, 및 화상 예측 복호 프로그램
CN109510987B (zh) 编码树节点划分方式的确定方法、装置及编码设备
CN105245896A (zh) Hevc并行运动补偿方法及装置
CN106134192B (zh) 图像解码装置、图像解码方法及集成电路
JPWO2016194380A1 (ja) 動画像符号化装置、動画像符号化方法および動画像符号化プログラムを記憶する記録媒体
US9491455B2 (en) Picture encoding method, picture decoding method, picture encoding apparatus, picture decoding apparatus, picture encoding program, and picture decoding program
JP2012175332A (ja) 画像符号化装置，画像復号装置，画像符号化方法，画像復号方法，画像符号化プログラムおよび画像復号プログラム
WO2014084674A2 (ko) 잔차 변환을 이용한 인트라 예측 방법 및 장치
EP3941043A1 (en) Image decoding device, image decoding method, and program
JP2017028372A (ja) 符号化方式変換装置、方法及びプログラム
US10743009B2 (en) Image processing apparatus and image processing method
JP4719650B2 (ja) 画像符号化装置
CN109672889A (zh) 约束的序列数据头的方法及装置
US11184608B2 (en) Image processing apparatus and method
JP6253564B2 (ja) 画像符号化装置，画像復号装置，画像符号化方法，画像復号方法，画像符号化プログラムおよび画像復号プログラム
WO2016017338A1 (ja) 動画像符号化装置及び動画像復号装置並びに動画像符号化・復号方法及びプログラム
KR20130107611A (ko) 상향식 예측 모드 방법을 사용한 영상 부복호화 방법 및 이러한 방법을 사용하는 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant