CN112954320A - 图像编码装置和方法、以及图像解码装置和方法 - Google Patents

图像编码装置和方法、以及图像解码装置和方法 Download PDF

Info

Publication number
CN112954320A
CN112954320A CN202110121826.3A CN202110121826A CN112954320A CN 112954320 A CN112954320 A CN 112954320A CN 202110121826 A CN202110121826 A CN 202110121826A CN 112954320 A CN112954320 A CN 112954320A
Authority
CN
China
Prior art keywords
block
signal
sub
image
blocks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110121826.3A
Other languages
English (en)
Other versions
CN112954320B (zh
Inventor
福岛茂
中村博哉
熊仓彻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Godo Kaisha IP Bridge 1
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to CN202110121826.3A priority Critical patent/CN112954320B/zh
Publication of CN112954320A publication Critical patent/CN112954320A/zh
Application granted granted Critical
Publication of CN112954320B publication Critical patent/CN112954320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及图像编码装置和方法、以及图像解码装置和方法。提供一种图像编码装置，将图像分割成块，以分割后的块为单位进行编码。主信号块分割部(101)将图像的主信号分割为规定尺寸的矩形而生成主信号块。副信号块分割部(101)将图像的副信号分割为规定尺寸的矩形而生成副信号块。主信号预测部(102)预测主信号，副信号预测部(102)预测副信号。副信号预测部(102)能够进行根据编码后的主信号来预测副信号的分量间预测，基于主信号块的尺寸和副信号块的尺寸中的至少一者来限制分量间预测。

Description

图像编码装置和方法、以及图像解码装置和方法
本申请是基于申请号为201880020202.9、申请日为2018年03月26日、申请人为JVC建伍株式会社、发明名称为“图像编码装置、图像编码方法和图像编码程序、图像解码装置、图像解码方法和图像解码程序”的发明专利提出的分案申请。
技术领域
本发明涉及将图像分割成块并以分割后的块为单位进行编码和解码的技术。
背景技术
在图像编码和解码中，将图像分割为作为规定数量的像素的集合的块，以块为单位进行编码和解码。通过进行适当的块的分割，画面内预测(帧内预测)及画面间预测(帧间预测)的编码效率得以提高。另外，在帧内预测中，从主信号的解码图像预测副信号，由此提高编码效率。
现有技术文献
专利文献
专利文献1：日本特开2013-90015号公报。
发明内容
发明所要解决的问题
但是，当从主信号的解码图像预测副信号时，处理量会增大，同时会产生对主信号的处理与对副信号的处理之间的依赖关系，并行处理变得困难。
本发明是鉴于这样的状况而完成的，其目的在于提供一种通过进行适于图像编码及解码的块分割来提高编码效率的技术。
为了解决上述问题，本发明的某种方式提供一种图像编码装置，将图像分割成块，以分割后的块为单位进行编码，所述图像编码装置包括：主信号块分割部(101)，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；副信号块分割部(101)，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；主信号预测部(102)，预测主信号；以及副信号预测部(102)，预测副信号。所述副信号预测部(102)能够进行从编码后的主信号预测副信号的分量间预测，基于所述主信号块的尺寸和所述副信号块的尺寸中的至少一者来限制所述分量间预测。
本发明的另一方式是图像编码方法。该方法将图像分割成块，以分割后的块为单位进行编码，所述图像编码方法包括：主信号块分割步骤，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；副信号块分割步骤，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；主信号预测步骤，预测主信号；以及副信号预测步骤，预测副信号。所述副信号预测步骤能够进行从编码后的主信号来预测副信号的分量间预测，基于所述主信号块的尺寸和所述副信号块的尺寸中的至少一者来限制所述分量间预测。
本发明的又一方式是图像解码装置。该装置将图像分割成块，以分割后的块为单位进行解码，所述图像解码装置包括：主信号块分割部(202)，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；副信号块分割部(202)，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；主信号预测部(204)，预测主信号；以及副信号预测部(204)，预测副信号。所述副信号预测部(204)能够进行从解码后的主信号来预测副信号的分量间预测，基于所述主信号块的尺寸和所述副信号块的尺寸中的至少一者来限制所述分量间预测。
本发明的其他方式是图像解码方法。该方法将图像分割成块，以分割后的块为单位进行解码，所述图像解码方法包括：主信号块分割步骤，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；副信号块分割步骤，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；主信号预测步骤，预测主信号；以及副信号预测步骤，预测副信号。所述副信号预测步骤能够进行从解码后的主信号来预测副信号的分量间预测，基于所述主信号块的尺寸和所述副信号块的尺寸中的至少一者来限制所述分量间预测。
另外，将以上的构成要素的任意组合、本发明的表现在方法、装置、系统、记录介质、计算机程序等之间进行变换的方式作为本发明的方式也是有效的。
根据本发明，能够提供可进行适于图像编码和解码的块分割、提高编码效率、处理量少的图像编码和解码。
附图说明
图1是第一实施方式涉及的图像编码装置的结构图；
图2是第一实施方式涉及的图像解码装置的结构图；
图3是说明向树块的分割及树块内部的分割的流程图；
图4是表示将输入的图像分割为树块的情况的图；
图5是说明z-扫描的图；
图6是对树块在水平且垂直方向上进行4分割的图；
图7是对树块在水平方向上进行2分割的图；
图8是对树块在垂直方向上进行2分割的图；
图9是说明对树块在水平方向及垂直方向上进行4分割时的被分割后的各块的处理的流程图；
图10是说明对树块在水平方向上进行2分割时的被分割后的各块的处理的流程图；
图11是表示在树块的分割是在水平方向上进行2分割时的被分割后的块的再次分割的情况的图；
图12是说明对树块在垂直方向上进行2分割时的被分割后的各块的处理的流程图；
图13是表示在树块的分割是在垂直方向上进行2分割时的被分割后的块的再次分割的情况的图；
图14是表示与第一实施方式的块分割相关的句法的例子的图；
图15的(a)～(d)是说明帧内预测的图；
图16是说明帧间预测的图；
图17的(a)～(c)是说明色差格式的图；
图18是说明亮度色差帧内预测的图；
图19是说明亮度色差帧内预测的流程图；
图20的(a)和(b)是说明色差块的尺寸比亮度块的尺寸大的情况的图；
图21的(a)和(b)是说明色差块的尺寸比亮度块的尺寸小的情况的图；
图22是说明帧内色差预测模式的句法的例子的图；
图23是说明替换周边像素来限制帧内色差预测的例子的图；
图24的(a)～(c)是说明基于亮度块的尺寸的不同的亮度色差帧内预测的图。
具体实施方式
本发明的实施方式提供一种图像编码技术，其将图像分割为矩形块，并对被分割后的块进行编码、解码。
(第一实施方式)
对本发明实施方式1涉及的图像编码装置100和图像解码装置200进行说明。
图1是第一实施方式涉及的图像编码装置100的结构图。在此，在图1中仅表示与图像信号相关的数据流，对于运动矢量或预测模式等图像信号以外的附加信息，各构成要素被提供给编码比特串生成部105而生成对应的编码数据，但关于附加信息的数据流未图示。
块分割部101将图像分割为作为编码的处理单位的编码对象块，并将编码对象块内的图像信号提供给残差信号生成部103。另外，块分割部101为了评价预测图像的一致度而将编码对象块的图像信号提供给预测图像生成部102。
块分割部101将图像递归地分割为规定尺寸的矩形，来生成编码对象块。块分割部101包括：4分割部，将递归分割中的对象块在水平方向且垂直方向上进行4分割而生成4个块；以及2分割部，将递归分割中的对象块在水平方向或垂直方向上进行2分割而生成2个块。后面将描述块分割部101的详细动作。
预测图像生成部102根据从解码图像存储器108提供的解码图像信号并基于预测模式进行图片内预测(帧内预测)或图片间预测(帧间预测)，生成预测图像信号。从块分割部101提供的编码对象块内的图像信号用于帧内预测和帧间预测的评价。在帧内预测中，使用从块分割部101提供的编码对象块的图像信号和与从解码图像存储器108提供的编码对象的块存在于同一图片内的、与编码对象的块接近的周围的已编码块的图像信号来生成预测图像信号。在帧间预测中，对于从块分割部101提供的编码对象块的图像信号，将在包含编码对象块的图片(编码图片)的时间序列上位于前或后的、解码图像存储器108中存储的已编码图片作为参照图片，在编码图片和参照图片之间进行块匹配等的块一致度评价，求出表示运动量的运动矢量，基于该运动量从参照图片进行运动补偿，生成预测图像信号。预测图像生成部102将这样生成的预测图像信号提供给残差信号生成部103。
残差信号生成部103对编码的图像信号与由预测图像生成部102生成的预测信号进行减法运算，生成残差信号，并提供给正交变换/量化部104。
正交变换/量化部104对从残差信号生成部103提供的残差信号进行正交变换/量化，并将经正交变换和量化的残差信号提供给编码比特串生成部105和逆量化/逆正交变换部106。
编码比特串生成部105生成对于从正交变换/量化部104提供的正交变换/量化后的残差信号的编码比特串。另外，编码比特串生成部105针对运动矢量、预测模式、块分割信息等附加信息，生成对应的编码比特串。
逆量化/逆正交变换部106对从正交变换/量化部104提供的正交变换、量化后的残差信号进行逆量化、逆正交变换，并将经逆量化、逆正交变换的残差信号提供给解码图像信号重叠部107。
解码图像信号重叠部107将由预测图像生成部102生成的预测图像信号与由逆量化/逆正交变换部106进行了逆量化和逆正交变换的残差信号重叠而生成解码图像，存储在解码图像存储器108中。另外，也有时对解码图像实施使编码引起的块失真等减少的滤波处理，并存储在解码图像存储器108中。
图2是实施方式1涉及的图像解码装置200的结构图。在此，在图2中仅表示与图像信号相关的数据流，比特串解码部201将运动矢量、预测模式等图像信号以外的附加信息提供给各构成要素并用于对应的处理，关于附加信息的数据流未图示。
比特串解码部201对所提供的编码比特串进行解码，并将正交变换/量化后的残差信号提供给块分割部202。
块分割部202根据解码后的块分割信息来决定解码对象块的形状，将所决定的解码对象块的正交变换/量化后的残差信号提供给逆量化/逆正交变换部203。
块分割部202基于被解码后的块分割信息对图像递归地分割为规定尺寸的矩形，生成解码对象块。块分割部202包括：4分割部，将递归分割中的对象块在水平方向且垂直方向上进行4分割而生成4个块；以及2分割部，将递归分割中的对象块在水平方向或垂直方向上进行2分割而生成2个块。后面将描述块分割部202的详细动作。
逆量化/逆正交变换部203对所提供的正交变换、量化后的残差信号进行逆正交变换和逆量化，以获得经逆正交变换和逆量化的残差信号。
预测图像生成部204根据从解码图像存储器206提供的解码图像信号生成预测图像信号，并将预测图像信号提供给解码图像信号重叠部205。
解码图像信号重叠部205通过将由预测图像生成部204生成的预测图像信号和由逆量化/逆正交变换部203进行了逆正交变换/逆量化的残差信号重叠，来生成解码图像信号并输出，并且存储在解码图像存储器206中。另外，有时对解码图像实施使编码引起的块失真等减少的滤波处理，并存储在解码图像存储器206中。
对图像编码装置100的块分割部101的动作进行详细说明。图3是说明向树块的分割及树块内部的分割的流程图。
首先，将输入的图像分割为规定尺寸的树块(S1000)。例如，假设树块是128像素×128像素。但是，树块不限于128像素×128像素，只要是矩形，则可以使用任何大小和形状。另外，树块的大小和形状可以预先在编码装置和解码装置之间确定固定值，也可以构成为编码装置决定并记录在编码比特流内，解码装置使用所记录的块尺寸。图4表示将输入的图像分割为树块的情况。树块被按照从左到右、从上到下即光栅扫描顺序进行编码和解码。
对树块的内部进一步分割成矩形的块。树块内部按照z-扫描顺序进行编码、解码。图5表示z-扫描的顺序。在z-扫描中，按照左上、右上、左下、右下的顺序进行编码和解码。树块内部的分割可以进行4分割和2分割，4分割在水平方向和垂直方向上进行分割。2分割在水平方向或垂直方向上分割。图6是对树块在水平且垂直方向上进行4分割的图。图7是对树块在水平方向上进行2分割的图。图8是对树块在垂直方向上进行2分割的图。
再次参照图3。判断是否对树块内部在水平及垂直方向上进行4分割(S1001)。
在判断为对树块内部进行4分割的情况下(S1001：是)，对树块内部进行4分割(S1002)，并进行在水平和垂直方向上进行了4分割的块的各处理(S1003)。关于4分割后的块的再次分割处理在后面叙述(图9)。
在判断为不对树块内部进行4分割的情况下(S1001：否)，判断是否对树块内部进行2分割(S1004)。
在判断为对树块内部进行2分割的情况下(S1004：是)，判断是否将2分割的方向设为水平方向(S1005)。
在将2分割的方向判断为水平方向的情况下(S1005：是)，在水平方向上对树块内部进行2分割(S1006)，并进行在水平方向上进行了2分割的块的各处理(S1007)。关于在水平方向上被2分割后的块的再次分割处理在后面叙述(图10)。
在将2分割的方向判断为不是水平方向而是垂直方向的情况下(S1005：否)，在垂直方向上对树块内部进行2分割(S1008)，并进行在垂直方向上进行了2分割的块的各处理(S1009)。关于在水平方向上被2分割后的块的再次分割处理在后面叙述(图11)。
在判断为不对树块内部进行2分割的情况下(S1004：否)，不对树块的内部进行块分割而结束块分割处理(S1010)。
接着，使用图9的流程图说明对树块在水平方向和垂直方向上进行4分割时的分割后的各块的处理。
判断是否对块内部在水平和垂直方向上再次进行4分割(S1101)。
在判断为再次对块内部进行4分割的情况下(S1101：是)，再次对块内部进行4分割(S1102)，并进行在水平和垂直方向上进行了4分割的块的各处理(S1103)。
在判断为不再次对块内部进行4分割的情况下(S1101：否)，判断是否对块内部进行2分割(S1104)。
在判断为对块内部进行2分割的情况下(S1104：是)，判断是否将2分割的方向设为水平方向(S1105)。
在将2分割的方向判断为水平方向的情况下(S1105：是)，对块内部在水平方向上进行2分割(S1106)，并进行在水平方向上进行了2分割的块的各处理(S1107)。
在判断为2分割的方向不是水平方向而是垂直方向的情况下(S1105：否)，在垂直方向上对块内部进行2分割(S1108)，并进行在垂直方向上进行2分割后的块的各处理(S1109)。
在判断为不对块内部进行2分割的情况下(S1104：否)，不对块的内部进行块分割而结束块分割处理(S1110)。
对被4分割后的各块执行图9的流程图所示的处理。被4分割后的块的内部也按照z-扫描顺序进行编码和解码。
接着，使用图10的流程图来说明对树块在水平方向上进行2分割时的分割后的各块的处理。
在对树块在水平方向上进行了2分割的情况下，首先判断是否对被2分割后的各块的块内部在水平及垂直方向上进行4分割(S1201)。
在判断为对块内部进行4分割的情况下(S1201：是)，对块内部进行4分割(S1202)，并进行在水平方向和垂直方向上进行了4分割的块的各处理(S1203)。
在判断为不对块内部进行4分割的情况下(S1201：否)，判断是否再次对块内部进行2分割(S1204)。
在判断为再次进行2分割的情况下(S1204：是)，在垂直方向上分割块内部(S1205)，进行在垂直方向上进行了2分割的块的各处理(S1206)。
在判断为不再次进行2分割的情况下(S1204：否)，不对块的内部进行再次分割而结束块分割处理(S1207)。
图11表示对树块的分割在水平方向上进行了2分割时的分割后的块的再次分割的情况。在此，在作为母块的树块在水平方向上进行了2分割的情况下，在分割后的块的再次2分割中，仅允许垂直方向的2分割，自动地在垂直方向上进行2分割。另外，在作为母块的树块进行了2分割的情况下，在子块中也可以完全禁止4分割。由此，能够禁止在与母块相同的方向上分割块，因此能够防止在横向上成为更细长的长方形的块分割，编码、解码的处理变得容易。
图10的流程图所示的处理针对在水平方向上被2分割后的各块执行。被2分割后的块的内部也按照上、下的顺序进行编码和解码。
接着，使用图12的流程图来说明对树块在垂直方向上进行2分割时的分割后的各块的处理。
在对树块在垂直方向上进行了2分割的情况下，首先判断是否对2分割后的各块的块内部在水平及垂直方向上进行4分割(S1301)。
在判断为对块内部进行4分割的情况下(S1301：是)，对块内部进行4分割(S1302)，并进行在水平和垂直方向上进行了4分割的块的各处理(S1303)。
在判断为不对块内部进行4分割的情况下(S1301：否)，判断是否再次对块内部进行2分割(S1304)。
在判断为再次进行2分割的情况下(S1304：是)，在水平方向上对块内部进行分割(S1305)，并进行在水平方向上进行了2分割的块的各处理(S1306)。
在判断为不再次进行2分割的情况下(S1304：否)，不对块的内部进行再次分割而结束块分割处理(S1307)。
图13表示在对树块的分割在垂直方向上进行2分割时的分割后的块的再次分割的情况。在此，在作为母块的树块在垂直方向上被进行了2分割的情况下，在分割后的块的再次2分割中，仅允许水平方向的2分割，自动地在水平方向上进行2分割。另外，在作为母块的树块被进行了2分割的情况下，在子块中也可以完全禁止4分割。由此，能够禁止在与母块相同的方向上分割块，因此能够防止成为在纵向上更细长的长方形的块分割，编码、解码的处理变得容易。
图12的流程图所示的处理针对在垂直方向上被进行2分割的各块被执行。被2分割后的块的内部也按照左、右的顺序进行编码和解码。
另外，对分割树块时的被分割的块的再次分割进行了说明，但母块也可以不是树块。例如，在对树块(128×128)进行4分割、对4分割后的块(64×64)进一步进行4分割或2分割的情况下，在再次分割后的块的分割中也应用上述处理。
接着，对图像解码装置200的块分割部202的动作进行说明。以与图像编码装置100的块分割部101相同的处理顺序分割块，在图像编码装置100的块分割部101中，选择块分割的模式，并输出所选择的块分割信息，与此相对，图像解码装置的块分割部202存在以下不同：使用从编码比特流解码的块分割信息来分割块，另外在从编码比特流对块分割信息进行解码时在禁止向同一方向的再次分割的状况下，为无选择项的信息在比特流内不传输的句法构造。
图14表示与第一实施方式的块分割相关的句法(编码比特流的句法规则)的例子。关于树块内部的分割，首先收发是否进行4分割的标志(4_division_flag)。在进行4分割的情况下(4_division_flag为1)，对树块内进行4分割而结束处理。然后，对于4分割后的块，再次以图14所示的句法对内部进行再次分割。在不进行4分割的情况下(4_division_flag为0)，收发是否进行2分割的标志(2_division_flag)。在2分割的情况下(2_division_flag为1)，还收发表示2分割的方向的标志(2_division_direction)。在2_division_direction为1的情况下，表示向垂直方向的分割，在2_division_direction为0的情况下，表示向水平方向的分割。然后，对于2分割后的块，再次以图14所示的句法对块内部进行再次分割。在不进行2分割的情况下(2_division_flag为0)，不分割树块而结束处理。
在此，关于对4分割或2分割后的块的内部进行再次分割的处理进行说明。再次分割块内部的处理也使用图14所示的句法，但与分割树块的情况相比存在以下不同：在2分割时的分割方向上存在限制。即，在对树块进行了2分割时，在对2分割后的块的内部再次分割的情况下，禁止在与对树块进行2分割的分割方向相同的方向上进行分割。由此，能够防止分割后的块成为更细长的长方形，能够防止帧内预测、帧间预测所需要的存储器频带的增加。关于防止存储器频带的增加的详细内容在后面叙述。
另外，当然也可以对在同一方向上进行2分割的数量进行计数，在超过规定次数的情况下限制在同一方向上分割。例如，允许向同一方向的2分割至2次为止，但从第三次开始禁止向同一方向的2分割。
在图14中，成为优先选择4分割，与是否进行2分割的信息相比先收发是否进行4分割的信息的句法。另一方面，在优先选择2分割的情况下，也可以成为与是否进行4分割的信息相比先收发是否进行2分割的信息的句法。这是因为，先收发在概率上更容易发生的事件，作为比特流传送的编码量变少。即，也可以成为预先估计4分割和2分割中的哪一个容易发生、先收发更容易发生的分割信息的句法。例如，也可以通过收发在图像的头信息中使4分割优先还是使2分割优先，编码装置自适应地决定编码效率高的优先分割数，在解码装置中以基于所选择的优先分割数的句法来分割树块内部。
在图像编码装置100和图像解码装置200中，使用分割后的块进行帧内预测和帧间预测。帧内预测、帧间预测都伴随来自存储器的像素的复制。
图15的(a)～图15的(d)表示帧内预测的一例。图15的(a)及图15的(b)表示帧内预测的预测方向和模式编号。如图15的(c)和图15的(d)所示，在帧内预测中，通过从与编码/解码对象块接近的已编码、解码的像素复制像素，生成编码/解码对象块的预测图像。在帧内预测中，由于以块为单位从预测图像生成开始重复编码/解码像素生成，所以处理顺序以块为单位成为序列，对块内部分割得越小，整体的处理负荷就越大。另外，块的形状越是细长的长方形，来自存储器的像素复制的处理越大。另外，由于在编码、解码中进行残差信号的正交变换，所以长方形的尺寸的种类越多，所需的正交变换的种类越多，其结果导致电路规模的增大。因此，在对块内部进行2分割的情况下，通过限制在与母块的分割方向相同的方向上进行2分割，能够防止帧内预测所需的存储器频带的增加。
图16表示帧间预测的一例。帧间预测通过从已编码、解码的图像所包含的像素以块为单位复制像素来生成编码/解码对象块的预测图像。在帧间预测中，在从参照图像以块为单位复制像素时，大多成为获取以包含必要的像素的存储器的管理单位所需的装置的结构。因此，将块分割得越小，另外，块的形状越成为细长的长方形，整体的处理负荷越大。另外，在对参照图像进行使用了插值滤波器的小数精度的运动补偿的情况下，需要对块内包含的像素加上几像素后的像素的复制，块的大小越小，所追加的几像素的相对比率越大，整体的处理负荷越大。因此，在对块内部进行2分割的情况下，通过限制在与母块的分割方向相同的方向上进行2分割，能够防止帧间预测所需要的存储器频带的增加。
接下来，对帧内预测中的亮度信号和色差信号之间的关系进行说明。作为亮度信号和色差信号间的格式，以往已知有4:2:0、4:2:2、4:4:4等。图17的(a)所示的4:2:0格式是对亮度信号在水平/垂直方向上都采样两个像素，与此相对，对色差信号在水平/垂直方向上都采样一个像素。由于人眼能够相比色差信号更敏感地感知亮度信号，因此与亮度信号相比，减少了色差信号的信息量。图17的(b)所示的4:2:2格式是对亮度信号在水平方向上采样两个像素，与此相对，对色差信号在水平方向上采样一个像素。在垂直方向上，对亮度信号在垂直方向上采样两个像素，与此相对，对色差信号在垂直方向上采样两个像素。图17的(c)所示的4:4:4格式是对亮度信号在水平/垂直方向上采样两个像素，与此相对，对色差信号在水平/垂直方向上都采样两个像素。
以图像编码中最广泛使用的4:2:0格式为例说明本实施方式。块分割部101、202包括：亮度块分割部，对图像的亮度信号进行分割而生成亮度块；以及色差块分割部，对图像的色差信号进行分割而生成色差块，在帧内预测中，分别独立地对亮度信号和色差信号进行块分割。也就是说，在帧内预测中，独立地决定亮度块的大小和色差块的大小。在帧内预测中，由于亮度信号和色差信号分别从周边像素复制像素值，所以如果将亮度信号和色差信号独立地进行块分割，则预测效率提高。与此相对，关于帧间预测，将亮度信号和色差信号一起处理来进行块分割。即，在帧间预测中，亮度块的大小和色差块的大小相同。这是因为，在帧间预测中不需要在运动补偿中区分亮度和色差。
预测图像生成部102、204包括预测亮度信号的亮度信号预测部和预测色差信号的色差信号预测部，色差信号预测部为了提高帧内预测中的色差信号的预测效率，进行根据亮度信号的已编码、解码像素来预测色差信号的亮度色差帧内预测。在亮度色差帧内预测中，相比副信号先对主信号进行编码/解码，使用已编码、解码的主信号来预测副信号。在此，在4:2:0格式、4:2:2格式中，亮度信号的信息量比色差信号多，因此将亮度信号作为主信号，将色差信号作为副信号。在4:4:4格式中，亮度信号和色差信号的信息量相同，但根据其他格式，通常将亮度信号作为主信号，将色差信号作为副信号。
图18是说明亮度色差帧内预测的图，图19是说明亮度色差帧内预测的流程图。
如图18所示，亮度色差帧内预测基于亮度块10的已编码、解码的周边像素12a、12b与色差块14的已编码、解码的周边像素16a、16b之间的相关程度进行。由于亮度色差帧内预测预测色差信号，所以作为计算相关程度的对象的周边像素以编码/解码对象的色差块的周边像素为基准进行规定。即，位于与针对色差块确定的周边像素相同位置的亮度块的周边像素成为相关程度的计算对象。
首先，计算已编码、解码的亮度信号的周边像素和色差信号的周边像素之间的相关程度(S1901)。接着，对编码/解码对象块的已编码、解码亮度信号进行下采样(S1902)。这里，也可以准备多个下采样的滤波器类型来选择滤波器类型。例如，可以准备强度不同的滤波器来选择多个滤波器类型，或者准备滤波器的抽头数不同的滤波器来选择多个滤波器类型。可以使用周边像素之间的相关程度来自动选择滤波器类型，也可以将滤波器类型在比特流中编码、解码并发送。另外，如果不是使用周边像素间的相关程度来决定编码/解码对象块的亮度信号的下采样滤波器，则步骤S1901和步骤S1902的处理顺序不同，步骤S1901和步骤S1902能够并行处理。
最后，基于周边像素间的相关程度根据下采样后的亮度信号来预测色差信号(S1903)。在4:2:0格式的情况下，下采样在水平/垂直方向上成为1/2。在4：2：2格式的情况下，下采样在水平方向上成为1/2，在垂直方向上不进行下采样。在4∶4∶4格式的情况下，在水平/垂直方向都不进行下采样。
在亮度色差帧内预测中，在编码/解码对象块的亮度信号的编码/解码完成后，能够开始色差信号的预测处理。因此，能够开始色差块的预测处理的定时依赖于亮度块的尺寸和色差块的尺寸。
图20的(a)及图20的(b)是说明色差块的尺寸比亮度块的尺寸大时的亮度色差帧内预测的图。图20的(a)所示的4分割后的第一～第四亮度块20a、20b、20c、20d的像素数为16×16，图20的(b)所示的色差块20e的像素数为16×16。
这里，亮度块和色差块的尺寸的比较不是以块内的像素数进行的比较，而是以考虑了色差格式的面积进行的比较。即，在4:2:0格式中，由于亮度块所占的面积是色差块所占的面积的1/2，因此在亮度块的像素数为16×16、色差块的像素数为16×16的情况下，亮度块的尺寸较小。在4:2:0格式中，在亮度块的像素数为16×16、色差块的像素数为8×8的情况下，两者的块所占的面积相同，亮度块和色差块具有相同尺寸。
为了通过块内的像素数的比较而不是通过块的面积的比较来比较亮度块和色差块的尺寸，以色差格式中的亮度信号与色差信号的比率将色差块的像素数换算为亮度块的像素数即可。在4:2:0格式的情况下，由于亮度信号的像素数是色差信号的像素数的2倍，因此将色差块的纵横的像素数乘以2而换算为亮度块的纵横的像素数。例如，在4:2:0格式中，在亮度块尺寸为16×16、色差块的尺寸为16×16的情况下，可知换算为亮度块的像素数的色差块的换算尺寸为32×32，色差块的尺寸大。
帧内预测在以块为单位完成解码处理后，能够进行后续的块的预测处理。即，在第一亮度块20a的解码完成后，可以进行第二亮度块20b的解码，在第二亮度块20b的解码完成后，可以进行第三亮度块20c的解码，在第三亮度块20c的解码完成后，可以进行第四亮度块20d的解码。
在色差块的尺寸比亮度块的尺寸大的情况下，色差块20e的预测处理所需的周边像素与亮度像素、色差像素一起存在于4个亮度块20a、20b、20c、20d的解码之前，不等待4个亮度块20a、20b、20c、20d的解码，能够计算图19的步骤S1901的亮度信号的周边像素与色差信号的周边像素之间的相关程度。
接着，在第一亮度块20a的解码完成后，执行图19的步骤S1902的亮度信号的下采样。不等待第二亮度块20b的解码完成，能够预测与第一亮度块20a的位置对应的色差块20e的像素。同样地，在第二亮度块20b的解码完成后，执行亮度信号的下采样，不等待第三亮度块20c的解码完成，预测与第二亮度块20b的位置对应的色差块20e的像素。并且，在第三亮度块20c的解码完成后，执行亮度信号的下采样，不等待第四亮度块20d的解码完成，预测与第三亮度块20c的位置对应的色差块20e的像素。最后，在第四亮度块20d的解码完成后，执行亮度信号的下采样，预测与第四亮度块20d的位置对应的色差块20e的像素。
图21的(a)及图21的(b)是说明色差块的尺寸比亮度块的尺寸小时的亮度色差帧内预测的图。图21的(a)所示的亮度块21a的像素数为16×16，图21的(b)所示的4分割后的第一～第四色差块21b、21c、21d、21e的像素数为4×4。
在4:2:0格式中，由于亮度块所占的面积是色差块所占的面积的1/2，因此在亮度块的像素数为16×16，色差块的像素数为4×4的情况下，色差块的尺寸较小。为了通过块内的像素数的比较而不是通过块的面积的比较来比较亮度块和色差块的尺寸，在4:2:0格式的情况下，将色差块的纵横的像素数乘以2而换算为亮度块的纵横的像素数。在4:2:0格式中，在亮度块的尺寸为16×16、色差块的尺寸为4×4的情况下，可知换算为亮度块的像素数的色差块的换算尺寸为8×8，色差块的尺寸较小。
在色差块的尺寸比亮度块的尺寸小的情况下，第一色差块21b的周边像素与亮度像素、色差像素一起可以从亮度块21a解码前开始利用，但第二～第四色差块21c、21d、21e的周边像素如果亮度块21a的解码未完成则无法利用。即，如果亮度块21a的解码完成、第一色差块21b的解码未完成，则对于第二色差块21c，无法计算图19的步骤S1901的亮度信号的周边像素与色差信号的周边像素之间的相关程度。同样地，对于第三色差块21d，如果亮度块21a的解码完成、第一、第二色差块21b、21c的解码未完成，则对于第三色差块21d，无法计算亮度信号的周边像素与色差信号的周边像素之间的相关程度。同样地，对于第四色差块21e，如果亮度块21a的解码完成、第一～第三色差块21b、21c、21d的解码未完成，则对于第四色差块21e，无法计算亮度信号的周边像素与色差信号的周边像素之间的相关程度。
这样，在色差块的尺寸比亮度块的尺寸小的情况下，如果进行亮度色差帧内预测，则在色差块的预测处理中，在亮度块和色差块之间以及在色差块之间存在处理的依赖关系，不适合并行处理。因此，在色差块的尺寸比亮度块的尺寸小的情况下，限制亮度色差帧内预测。作为限制亮度色差帧内预测的方法有(1)以句法进行限制、(2)置换帧内色差模式、(3)置换周边像素等。
图22表示帧内色差预测模式的句法的例子。在色差预测模式的编号为0的情况下，将与亮度预测模式相同的帧内预测模式用于色差预测模式。例如，当亮度预测模式是水平预测模式时，色差预测模式也是水平预测模式。在色差预测模式的编号为1的情况下，使用平均值模式(DC模式)。DC模式用周边像素的平均值进行帧内预测。在色差预测模式的编号为2的情况下，使用亮度色差帧内预测模式。
作为限制亮度色差帧内预测的方法，在(1)以句法进行限制的情况下，模式2由于表示亮度色差帧内预测，因此禁止使用。即，模式2不被传送，帧内色差模式从模式0和模式1中选择。
作为限制亮度色差帧内预测的方法，在(2)置换帧内色差模式的情况下，在将色差预测模式的编号指定为模式2的情况下，使用垂直预测模式代替亮度色差帧内预测模式。但是，置换的预测模式不限于垂直预测模式，也可以是其他预测模式。另外，更优选模式0的亮度预测模式与在模式2中要置换的模式相同、要使用的模式不重复。
作为限制亮度色差帧内预测的方法，在(3)置换周边像素的情况下，置换用于计算图19的步骤S1901的亮度信号的周边像素与色差信号的周边像素之间的相关程度的周边像素。在图21的第二～第四色差块21c、21d、21e中也能够不等待亮度块21a的解码而计算周边像素的相关程度。
图23表示周边像素的置换的例子。作为第二色差块21c的左边的周边像素，通常使用第一色差块21b内的像素，但使用第一色差块21b内的像素，需要等待亮度块21a及第一色差块21b的解码完成。因此，不等待亮度块21a的解码完成而将可使用的区域21f用作第二色差块21c的周边像素。同样地，对于第三色差块21d，也是不等待亮度块21a的解码完成而将可使用的区域21f用作第三色差块21d的周边像素。同样，对于第四色差块21e，也是不等待亮度块21a的解码完成而将可使用的区域21f用作第四色差块21e的周边像素。
这样，在第一实施方式中，在进行亮度色差帧内预测时，在色差块的尺寸比亮度块的尺寸小的情况下，通过限制亮度色差帧内预测，能够在亮度块和色差块之间减小处理的依赖关系。由此，能够进行亮度块和色差块的并行处理，能够削减编码/解码的处理量。
(第二实施方式)
对本发明第二实施方式进行说明。在第二实施方式中，不是亮度块和色差块的尺寸的大小关系，而是分别独立地评价亮度块的尺寸和色差块的尺寸的每个来限制亮度色差帧内预测，这与第一实施方式不同，除此以外的结构和动作与第一实施方式相同。
首先，对基于亮度块的尺寸的限制进行说明。图24的(a)～图24的(c)表示基于亮度块的尺寸的不同的亮度色差帧内预测。如图24的(a)、图24的(b)所示，第一亮度块24a对应于第一色差块24e的位置，第二亮度块24b对应于第二色差块24f的位置，第三亮度块24c对应于第三色差块24g的位置，第四亮度块24d对应于第四色差块24h的位置。另外，图24的(c)的亮度块24i与图24的(b)的第一～第四色差块24e、24f、24g、24h的位置对应。
对亮度块和色差块之间的依赖关系进行说明。如图24的(a)所示，在亮度块的尺寸小的情况下，如果第一亮度块24a的解码完成，则能够进行第一色差块24e的解码。如果第二亮度块24b的解码完成，则能够进行第二色差块24f的解码。如果第三亮度块24c的解码完成，则能够进行第三色差块24g的解码。如果第四亮度块24d的解码完成，则能够进行第四色差块24h的解码。
另一方面，如图24的(c)所示，在亮度块的尺寸大的情况下，如果亮度块24i的解码未完成，则第一～第四色差块24e、24f、24g、24h的解码都是不可能的。
在独立地决定亮度块的分割和色差块的分割的情况下，如果亮度块的绝对尺寸大，则色差块的尺寸小于亮度块的尺寸的可能性增加。因此，在亮度块的绝对尺寸为规定尺寸以上的情况下，限制对应的色差块的亮度色差帧内预测。
同样地，如果色差块的绝对尺寸小，则色差块的尺寸小于亮度块的尺寸的可能性增加。因此，在色差块的绝对尺寸为规定尺寸以下的情况下，限制色差块的亮度色差帧内预测。
亮度色差帧内预测的限制方法与第一实施方式相同。
这样，在第二实施方式中，在亮度块的绝对尺寸大于阈值的情况下、或者色差块的绝对尺寸小于阈值的情况下，限制亮度色差帧内预测。由此，能够预测色差块的尺寸比亮度块的尺寸小的情况，限制亮度色差帧内预测，在亮度块和色差块之间概率性地减小处理的依赖关系。
(第三实施方式)
对本发明的第三实施方式进行说明。在第三实施方式中，在块分割部101中，以色差块的尺寸不小于亮度块的尺寸的方式对色差块进行分割，这与第一实施方式不同，除此以外的结构和动作与第一实施方式相同。在对色差块进行分割时，块分割部101禁止使色差块的尺寸小于亮度块的尺寸的分割。由此，在亮度色差帧内预测中，避免了色差块的尺寸比亮度块的尺寸小的情况，总是能够进行亮度块和色差块的并行处理。
以上所述的实施方式的图像编码装置输出的图像的编码比特流具有特定的数据格式，以能够根据在实施方式中使用的编码方法进行解码，与图像编码装置对应的图像解码装置能够对该特定的数据格式的编码比特流进行解码。
为了在图像编码装置和图像解码装置之间交换编码比特流而使用有线或无线网络的情况下，也可以将编码比特流变换为适合于通信路径的传输方式的数据形式来进行传输。在此情况下，设置有：发送装置，将图像编码装置输出的编码比特流变换为适于通信路径的传输方式的数据形式的编码数据并发送给网络；以及接收装置，从网络接收编码数据，恢复为编码比特流，并提供给图像解码装置。
发送装置包括：存储器，对图像编码装置输出的编码比特流进行缓存；分组处理部，对编码比特流进行分组；以及发送部，经由网络发送被分组后的编码数据。接收装置包括：接收部，经由网络接收被分组后的编码数据；存储器，对接收到的编码数据进行缓存；以及分组处理部，对编码数据进行分组处理而生成编码比特流，并提供给图像解码装置。
另外，也通过在结构中追加显示由图像解码装置解码后的图像的显示部，能够作为显示装置。在这种情况下，显示部读出由解码图像信号重叠部205生成并存储在解码图像存储器206中的解码图像信号，并显示在画面上。
另外，也可以通过将拍摄部追加到结构中，并将拍摄到的图像输入到图像编码装置中，来作为拍摄装置。在该情况下，拍摄部将拍摄到的图像信号输入到块分割部101。
与以上的编码及解码相关的处理当然能够作为使用了硬件的传输、存储、接收装置来实现，也可以通过存储在ROM(只读存储器)或闪速存储器等中的固件或计算机等软件来实现。可以将该固件程序、软件程序记录在计算机等可读取的记录介质中来提供，也可以通过有线或无线网络从服务器提供，也可以作为地面波或卫星数字广播的数据广播来提供。
以上，基于实施方式对本发明进行了说明。实施方式是例示，能够对这些各构成要素和各处理过程的组合进行各种变形，本领域技术人员应当理解这样的变形例也在本发明的范围内。
符号说明
100图像编码装置、101块分割部、102预测图像生成部、103残差信号生成部、104正交变换/量化部、105编码比特串生成部、106逆量化/逆正交变换部、107解码图像信号重叠部、108解码图像存储器、200图像解码装置、201比特串解码部、202块分割部、203逆量化/逆正交变换部、204预测图像生成部、205解码图像信号重叠部、206解码图像存储器。
产业上的可利用性
本发明能够利用于将图像分割为块并以分割后的块为单位进行编码及解码的技术。

Claims (4)

1.一种图像编码装置，将图像分割成块，以分割后的块为单位进行编码，所述图像编码装置的特征在于，包括：
主信号块分割部，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；
副信号块分割部，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；
主信号预测部，预测主信号；以及
副信号预测部，预测副信号；
所述主信号块和所述副信号块分别独立地被分割，
所述副信号预测部能够进行从编码后的主信号预测副信号的分量间预测，在所述主信号块的尺寸是预定尺寸以上时，禁止使用所述分量间预测。
2.一种图像编码方法，将图像分割成块，以分割后的块为单位进行编码，所述图像编码方法的特征在于，包括：
主信号块分割步骤，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；
副信号块分割步骤，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；
主信号预测步骤，预测主信号；以及
副信号预测步骤，预测副信号；
所述主信号块和所述副信号块分别独立地被分割，
所述副信号预测部能够进行从编码后的主信号预测副信号的分量间预测，在所述主信号块的尺寸是预定尺寸以上时，禁止使用所述分量间预测。
3.一种图像解码装置，以将图像分割而得的块为单位进行解码，所述图像解码装置的特征在于，包括：
主信号块分割部，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；
副信号块分割部，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；
主信号预测部，预测主信号；以及
副信号预测部，预测副信号；
所述主信号块和所述副信号块分别独立地被分割，
所述副信号预测部能够进行从解码后的主信号预测副信号的分量间预测，在所述主信号块的尺寸是预定尺寸以上时，禁止使用所述分量间预测。
4.一种图像解码方法，以将图像分割而得的块为单位进行解码，所述图像解码方法的特征在于，包括：
主信号块分割步骤，将所述图像的主信号分割为规定尺寸的矩形而生成主信号块；
副信号块分割步骤，将所述图像的副信号分割为规定尺寸的矩形而生成副信号块；
主信号预测步骤，预测主信号；以及
副信号预测步骤，预测副信号；
所述主信号块和所述副信号块分别独立地被分割，
所述副信号预测步骤能够进行从解码后的主信号预测副信号的分量间预测，在所述主信号块的尺寸是预定尺寸以上时，禁止使用所述分量间预测。
CN202110121826.3A 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法 Active CN112954320B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110121826.3A CN112954320B (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2017-089252 2017-04-28
JP2017089252A JP6680260B2 (ja) 2017-04-28 2017-04-28 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム
CN202110121826.3A CN112954320B (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
PCT/JP2018/011953 WO2018198626A1 (ja) 2017-04-28 2018-03-26 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム
CN201880020202.9A CN110476422B (zh) 2017-04-28 2018-03-26 图像编码装置和方法、图像解码装置和方法以及记录介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880020202.9A Division CN110476422B (zh) 2017-04-28 2018-03-26 图像编码装置和方法、图像解码装置和方法以及记录介质

Publications (2)

Publication Number Publication Date
CN112954320A true CN112954320A (zh) 2021-06-11
CN112954320B CN112954320B (zh) 2023-07-04

Family

ID=63918195

Family Applications (6)

Application Number Title Priority Date Filing Date
CN202110121826.3A Active CN112954320B (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
CN202311602254.6A Pending CN117395414A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
CN202311616718.9A Pending CN117395416A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
CN202311623703.5A Pending CN117395417A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
CN201880020202.9A Active CN110476422B (zh) 2017-04-28 2018-03-26 图像编码装置和方法、图像解码装置和方法以及记录介质
CN202311599570.2A Pending CN117395413A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法

Family Applications After (5)

Application Number Title Priority Date Filing Date
CN202311602254.6A Pending CN117395414A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
CN202311616718.9A Pending CN117395416A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
CN202311623703.5A Pending CN117395417A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法
CN201880020202.9A Active CN110476422B (zh) 2017-04-28 2018-03-26 图像编码装置和方法、图像解码装置和方法以及记录介质
CN202311599570.2A Pending CN117395413A (zh) 2017-04-28 2018-03-26 图像编码装置和方法、以及图像解码装置和方法

Country Status (10)

Country Link
US (4) US10979710B2 (zh)
EP (1) EP3618437A4 (zh)
JP (1) JP6680260B2 (zh)
KR (4) KR102522615B1 (zh)
CN (6) CN112954320B (zh)
BR (1) BR112019022270B1 (zh)
MX (2) MX2019012838A (zh)
PH (1) PH12019550213A1 (zh)
SG (2) SG11201909569YA (zh)
WO (1) WO2018198626A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6680260B2 (ja) * 2017-04-28 2020-04-15 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム
JP7510443B2 (ja) 2019-06-21 2024-07-03 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ ビデオコーディングシステムおよびビデオコーディング方法
JP6879401B2 (ja) * 2020-02-27 2021-06-02 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1784015A (zh) * 2004-12-02 2006-06-07 中国科学院计算技术研究所 一种帧内图像预测编码方法
CN101917621A (zh) * 2003-08-26 2010-12-15 汤姆森特许公司 用于编码混合内部-相互编码块的方法和装置
CN102648630A (zh) * 2009-08-12 2012-08-22 索尼公司 图像处理设备和方法
CN103583045A (zh) * 2011-06-03 2014-02-12 索尼公司 图像处理装置以及图像处理方法
CN105103547A (zh) * 2013-04-05 2015-11-25 三菱电机株式会社 彩色图像编码装置、彩色图像解码装置、彩色图像编码方法以及彩色图像解码方法
US20160219283A1 (en) * 2015-01-27 2016-07-28 Qualcomm Incorporated Adaptive cross component residual prediction

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106454371B (zh) * 2010-04-13 2020-03-20 Ge视频压缩有限责任公司 解码器、数组重建方法、编码器、编码方法及存储介质
KR101584480B1 (ko) * 2010-04-13 2016-01-14 지이 비디오 컴프레션, 엘엘씨 평면 간 예측
JP5898452B2 (ja) 2011-10-13 2016-04-06 日本放送協会 イントラ予測装置、符号化装置、復号装置、及びプログラム
IN2014CN03712A (zh) * 2011-10-31 2015-09-04 Mitsubishi Electric Corp
JP2013110576A (ja) * 2011-11-21 2013-06-06 Jvc Kenwood Corp 動画像復号装置、動画像復号方法及び動画像復号プログラム
JP2015080004A (ja) * 2012-01-30 2015-04-23 三菱電機株式会社 カラー動画像符号化装置、カラー動画像復号装置、カラー動画像符号化方法及びカラー動画像復号方法
US9077943B2 (en) * 2012-05-31 2015-07-07 Apple Inc. Local image statistics collection
AU2012232992A1 (en) * 2012-09-28 2014-04-17 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
AU2013200051B2 (en) * 2013-01-04 2016-02-11 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking video data
JP6005572B2 (ja) * 2013-03-28 2016-10-12 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、およびプログラム
AU2013202653A1 (en) * 2013-04-05 2014-10-23 Canon Kabushiki Kaisha Method, apparatus and system for generating intra-predicted samples
WO2015005418A1 (ja) * 2013-07-10 2015-01-15 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像システム、動画像符号化方法、動画像復号方法、およびプログラム
US9648330B2 (en) * 2013-07-15 2017-05-09 Qualcomm Incorporated Inter-color component residual prediction
CN111526359B (zh) * 2013-10-18 2023-01-06 Ge视频压缩有限责任公司 多分量图片或视频编码概念
US10397607B2 (en) * 2013-11-01 2019-08-27 Qualcomm Incorporated Color residual prediction for video coding
US9591325B2 (en) * 2015-01-27 2017-03-07 Microsoft Technology Licensing, Llc Special case handling for merged chroma blocks in intra block copy prediction mode
US9936201B2 (en) * 2015-01-27 2018-04-03 Qualcomm Incorporated Contexts for large coding tree units
EP3270593A4 (en) * 2015-03-13 2018-11-07 LG Electronics Inc. Method of processing video signal and device for same
CN107409208B (zh) * 2015-03-27 2021-04-20 索尼公司 图像处理装置、图像处理方法以及计算机可读存储介质
JP5991399B2 (ja) * 2015-03-31 2016-09-14 株式会社Ｊｖｃケンウッド 受信装置、受信方法、及び受信プログラム
WO2016154963A1 (en) * 2015-04-01 2016-10-06 Mediatek Inc. Methods for chroma coding in video codec
WO2017008263A1 (en) 2015-07-15 2017-01-19 Mediatek Singapore Pte. Ltd. Conditional binary tree block partitioning structure
US10547860B2 (en) * 2015-09-09 2020-01-28 Avago Technologies International Sales Pte. Limited Video coding with trade-off between frame rate and chroma fidelity
US20170105014A1 (en) * 2015-10-08 2017-04-13 Qualcomm Incorporated Luma-driven chroma scaling for high dynamic range and wide color gamut contents
US10200719B2 (en) * 2015-11-25 2019-02-05 Qualcomm Incorporated Modification of transform coefficients for non-square transform units in video coding
CN118660159A (zh) * 2016-10-04 2024-09-17 Lx 半导体科技有限公司 图像编码/解码方法和图像数据的发送方法
US20190260992A1 (en) * 2016-10-10 2019-08-22 Samsung Electronics Co., Ltd. Method and device for encoding or decoding luma block and chroma block
US11095893B2 (en) * 2016-10-12 2021-08-17 Qualcomm Incorporated Primary transform and secondary transform in video coding
JP6680260B2 (ja) * 2017-04-28 2020-04-15 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101917621A (zh) * 2003-08-26 2010-12-15 汤姆森特许公司 用于编码混合内部-相互编码块的方法和装置
CN1784015A (zh) * 2004-12-02 2006-06-07 中国科学院计算技术研究所 一种帧内图像预测编码方法
CN102648630A (zh) * 2009-08-12 2012-08-22 索尼公司 图像处理设备和方法
CN103583045A (zh) * 2011-06-03 2014-02-12 索尼公司 图像处理装置以及图像处理方法
CN105103547A (zh) * 2013-04-05 2015-11-25 三菱电机株式会社 彩色图像编码装置、彩色图像解码装置、彩色图像编码方法以及彩色图像解码方法
US20160219283A1 (en) * 2015-01-27 2016-07-28 Qualcomm Incorporated Adaptive cross component residual prediction

Also Published As

Publication number Publication date
CN117395417A (zh) 2024-01-12
CN117395414A (zh) 2024-01-12
SG10202013237VA (en) 2021-02-25
US20230042714A1 (en) 2023-02-09
BR112019022270B1 (pt) 2022-05-31
US11973946B2 (en) 2024-04-30
BR112019022270A2 (pt) 2020-05-19
KR102437314B1 (ko) 2022-08-29
KR102602361B1 (ko) 2023-11-14
CN117395413A (zh) 2024-01-12
KR20220121916A (ko) 2022-09-01
KR20230054748A (ko) 2023-04-25
PH12019550213A1 (en) 2020-09-21
CN117395416A (zh) 2024-01-12
JP2018191036A (ja) 2018-11-29
MX2023009319A (es) 2023-08-16
US20210203932A1 (en) 2021-07-01
US11523114B2 (en) 2022-12-06
KR102522615B1 (ko) 2023-04-14
US20240205400A1 (en) 2024-06-20
RU2749503C2 (ru) 2021-06-11
JP6680260B2 (ja) 2020-04-15
SG11201909569YA (en) 2019-11-28
RU2019138508A3 (zh) 2021-05-28
CN112954320B (zh) 2023-07-04
US10979710B2 (en) 2021-04-13
WO2018198626A1 (ja) 2018-11-01
CN110476422A (zh) 2019-11-19
EP3618437A1 (en) 2020-03-04
MX2019012838A (es) 2020-02-10
RU2019138508A (ru) 2021-05-28
KR102302932B1 (ko) 2021-09-15
EP3618437A4 (en) 2020-08-12
US20200059645A1 (en) 2020-02-20
KR20200002030A (ko) 2020-01-07
KR20210114559A (ko) 2021-09-23
CN110476422B (zh) 2023-12-22

Similar Documents

Publication Publication Date Title
CN112954319B (zh) 图像编码装置、图像编码方法、图像解码装置和图像解码方法
CN112954320B (zh) 图像编码装置和方法、以及图像解码装置和方法
JP7183334B2 (ja) 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム
JP7550373B2 (ja) 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム
RU2749503C9 (ru) Устройство кодирования изображения, способ кодирования изображения и считываемый компьютером носитель записи с программой кодирования изображения, а также устройство декодирования изображения, способ декодирования изображения и считываемый компьютером носитель записи с программой декодирования изображения
RU2773145C1 (ru) Устройство кодирования изображения, способ кодирования изображения, устройство декодирования изображения и способ декодирования изображения
RU2773145C9 (ru) Устройство кодирования изображения, способ кодирования изображения, устройство декодирования изображения и способ декодирования изображения
JP7276549B2 (ja) 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム
JP2022019711A (ja) 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号化装置、画像復号化方法及び画像復号化プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220616

Address after: Tokyo

Applicant after: Godo Kaisha IP Bridge 1

Address before: Kanagawa

Applicant before: JVC KENWOOD Corp.

GR01 Patent grant
GR01 Patent grant