CN116567236A - 图像解码方法 - Google Patents

图像解码方法 Download PDF

Info

Publication number
CN116567236A
CN116567236A CN202310674074.2A CN202310674074A CN116567236A CN 116567236 A CN116567236 A CN 116567236A CN 202310674074 A CN202310674074 A CN 202310674074A CN 116567236 A CN116567236 A CN 116567236A
Authority
CN
China
Prior art keywords
division
flag
block
split
information decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310674074.2A
Other languages
English (en)
Inventor
八杉将伸
青野友子
猪饲知宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
FG Innovation Co Ltd
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by FG Innovation Co Ltd, Sharp Corp filed Critical FG Innovation Co Ltd
Publication of CN116567236A publication Critical patent/CN116567236A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Abstract

本发明提供一种图像解码方法。降低运动图像的编码/解码的复杂度。图像解码装置(31)具备通过二叉树分割以及三叉树分割中的至少任一种分阶层地分割编码节点的CN信息解码部(10),CN信息解码部参照比对象节点更上一级的节点即直接上级节点的分割方式来限制该对象节点的分割方式。

Description

图像解码方法
本发明是申请日为2017年12月13日、申请号为201780077762.3发明名称为“图像解码装置以及图像编码装置”的发明专利申请的分案申请。
技术领域
本发明的实施方式涉及预测图像生成装置、运动图像解码装置、以及运动图像编码装置。
背景技术
为了高效地传输或记录运动图像,利用了通过编码运动图像来生成编码数据的运动图像编码装置、以及通过解码该编码数据来生成解码图像的运动图像解码装置。
作为具体的运动图像编码方式,例如可列举H.264/AVC、HEVC(High-EfficiencyVideo Coding,高效视频编码)中提出的方式等。
在这样的运动图像编码方式中,构成运动图像的图像(图片)根据由通过分割图像而得到的切片、通过分割切片而得到的编码单位(编码单元(也有时称为Coding Unit:CU))、以及作为通过分割编码单位而得到的块的预测单元(PU:Prediction Unit)、变换单元(TU:Transform Unit)构成的阶层构造来管理,按每个CU被编码/解码。
此外,在这样的运动图像编码方式中,通常,基于通过对输入图像进行编码/解码而得到的局部解码图像来生成预测图像,并对从输入图像(原图像)减去该预测图像而得到的预测残差(也有时称为“差分图像”或“残差图像”)进行编码。作为预测图像的生成方法,可列举画面间预测(帧间预测)以及画面内预测(帧内预测)。
此外,作为近年来的运动图像编码以及解码的技术,可列举非专利文献1以及2。
在先技术文献
非专利文献
非专利文献1:″Algorithm Description of Joint Exploration Test Model4″,JVET-D1001,Joint Video Exploration Team(JVET)of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,15-21October 2016
非专利文献2:″Multi-Type-Tree″,JVET-D0117,Joint Video Exploration Team(JVET)of ITU-T SG 16WP 3and ISO/IEC JTC 1/SC 29/WG 11,15-21October 2016
发明内容
发明要解决的课题
作为编码节点(CN:Coding Node)的分割形式,在非专利文献2中,除了QT(QuadTree,四叉树)分割之外,还导入了BT(Binary Tree,二叉树)分割以及TT(Triple Tree,三叉树)分割,从而CU的分割图案增大,编码/解码变得复杂。此外,实现复杂的分割图案依然是不容易的,从提高编码效率的方面要求更进一步的改善。
因此,本发明正是鉴于上述的课题而完成的,其目的在于,提供一种能够降低运动图像的编码/解码的复杂度的图像解码装置以及图像编码装置。此外,提供一种能够以更少的分割深度实现更复杂的分割图案的图像解码装置以及图像编码装置。
用于解决课题的手段
本发明的一形态涉及的图像解码装置为了解决上述的课题,在按每个编码树单元来对图片进行解码的图像解码装置中,具备通过二叉树分割以及三叉树分割中的至少任一种分阶层地分割上述编码树单元的编码节点的分割部,上述分割部参照比对象节点更上一级的节点即直接上级节点的分割方式来限制该对象节点的分割方式。
此外,本发明的一形态涉及的图像解码装置在按每个编码树单元来对图片进行解码的图像解码装置中,具备分阶层地分割上述编码树单元的编码节点的分割部,在对象节点是纵横比成为给定的值以上的矩形状的情况下,上述分割部限制通过沿着该对象节点的长边方向产生边界的三叉树分割来分割该对象节点。
此外,本发明的一形态涉及的图像解码装置在按每个编码树单元来对图片进行解码的图像解码装置中,具备通过二叉树分割以及三叉树分割中的至少任一种分阶层地分割上述编码树单元的编码节点的分割部,上述分割部参照二叉树分割以及三叉树分割中共同的深度变量来限制对象节点的分割。
此外,本发明的一形态涉及的图像编码装置在将图片分割为编码树单元来进行编码的图像编码装置中,具备通过二叉树分割以及三叉树分割中的至少任一种分阶层地分割上述编码树单元的编码节点的分割部,上述分割部参照比对象节点更上一级的节点即直接上级节点的分割方式来限制该对象节点的分割方式。
此外,本发明的一形态涉及的图像编码装置在将图片分割为编码树单元来进行编码的图像编码装置中,具备分阶层地分割上述编码树单元的编码节点的分割部,在对象节点是纵横比成为给定的值以上的矩形状的情况下,上述分割部限制通过沿着该对象节点的长边方向产生边界的三叉树分割来分割该对象节点。
此外,本发明的一形态涉及的图像编码装置在将图片分割为编码树单元来进行编码的图像编码装置中,具备通过二叉树分割以及三叉树分割中的至少任一种分阶层地分割上述编码树单元的编码节点的分割部,上述分割部参照二叉树分割以及三叉树分割中共同的深度变量来限制对象节点的分割。
此外,本发明的一形态涉及的图像编码装置在按每个编码树单元来对图片进行解码的图像解码装置中,具备分割上述编码树单元的编码节点的分割部,上述分割部参照第1标记、第2标记和第3标记,在上述第1标记表示进行包含通过在第1方向上分割为1∶1∶1∶1的节点而将对象节点分割为四个节点的分割类型和四叉树分割的第1分割类型组中的分割、且上述第2标记表示进行分割为上述四个节点的分割类型下的分割的情况下,上述分割部将上述第3标记所表示的方向作为上述第1方向,将上述对象节点分割为上述四个节点。
发明效果
根据本发明的一形态,能够降低运动图像的编码/解码的复杂度。此外,能够提供能以更少的分割深度实现更复杂的分割图案的图像解码装置以及图像编码装置。
附图说明
图1是表示本实施方式涉及的编码流的数据的阶层构造的图。
图2是表示PU分割模式的图案的图。(a)~(h)分别表示PU分割模式为2Nx2N、2NxN、2NxnU、2NxnD、Nx2N、nLx2N、nRx2N、以及NxN的情况下的分区形状。
图3是表示参照图片以及参照图片列表的一例的概念图。
图4是表示本实施方式涉及的图像编码装置的结构的框图。
图5是表示本实施方式涉及的图像解码装置的结构的概略图。
图6是表示本实施方式涉及的图像编码装置的帧间预测图像生成部的结构的概略图。
图7的(a)~(f)是表示本实施方式涉及的图像解码装置中的编码节点的分割的图。
图8是表示本实施方式涉及的图像解码装置进行的叉树类型的信令的图。
图9是表示通过块的分割过程得到相同的分割图案的例子的图。
图10是表示本实施方式涉及的图像解码装置的结构的框图。
图11是说明本实施方式涉及的解码处理的流程图。
图12是表示本实施方式涉及的QT信息的语法表的结构例的图。
图13的(a)~(f)是表示本实施方式涉及的图像解码装置的分割图案的一例的图。
图14的(a)~(h)是表示本实施方式涉及的图像解码装置的分割图案的一例的图。
图15的(a)~(d)是表示本实施方式涉及的图像解码装置的分割图案的一例的图。
图16是说明本实施方式涉及的解码处理的流程图。
图17的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图18的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图19的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图20是本实施方式涉及的伪代码的结构图。
图21是本实施方式涉及的伪代码的结构图。
图22是本实施方式涉及的伪代码的结构图。
图23是本实施方式涉及的伪代码的结构图。
图24是本实施方式涉及的伪代码的结构图。
图25是本实施方式涉及的伪代码的结构图。
图26是本实施方式涉及的伪代码的结构图。
图27的(a)~(c)是本实施方式涉及的伪代码的结构图。
图28是本实施方式涉及的伪代码的结构图。
图29是本实施方式涉及的伪代码的结构图。
图30是本实施方式涉及的伪代码的结构图。
图31是本实施方式涉及的伪代码的结构图。
图32是本实施方式涉及的伪代码的结构图。
图33的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图34的(a)~(d)是本实施方式涉及的伪代码的结构图。
图35的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图36的(a)~(d)是本实施方式涉及的伪代码的结构图。
图37的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图38的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图39的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图40是表示块的分割图案的图。
图41的(a)~(c)是表示本实施方式涉及的图像解码装置的分割图案的一例的图。
图42是本实施方式涉及的伪代码的结构图。
图43是本实施方式涉及的伪代码的结构图。
图44是本实施方式涉及的伪代码的结构图。
图45的(a)以及(b)是本实施方式涉及的伪代码的结构图。(c)是表示本实施方式涉及的块分割的图。
图46的(a)是本实施方式涉及的伪代码的结构图。(b)是表示本实施方式涉及的块分割的图。
图47的(a)~(l)是表示本实施方式涉及的图像解码装置的分割图案的一例的图。
图48是本实施方式涉及的伪代码的结构图。
图49是表示本实施方式涉及的图像解码装置的分割图案的一例的图。
图50是说明本实施方式涉及的解码处理的流程图。
图51是本实施方式涉及的伪代码的结构图。
图52是本实施方式涉及的伪代码的结构图。
图53的(a)~(g)是表示本实施方式涉及的图像解码装置中的编码节点的分割的另一例的图。
图54的(a)~(d)是表示本实施方式涉及的图像解码装置中的编码节点的分割的又一例的图。
图55是说明本实施方式涉及的解码处理的流程图。
图56的(a)以及(b)是本实施方式涉及的伪代码的结构图。
图57是说明本实施方式涉及的解码处理的流程图。
图58的(a)~(c)是本实施方式涉及的伪代码的结构图。
图59是表示本实施方式涉及的标记和编码节点的形状的例子的图。
图60的(a)~(c)是本实施方式涉及的伪代码的结构图。
图61是表示本实施方式涉及的标记和编码节点的形状的例子的图。
图62的(a)~(c)是本实施方式涉及的伪代码的结构图。
图63是表示本实施方式涉及的标记和编码节点的形状的例子的图。
图64是说明本实施方式涉及的解码处理的流程图。
图65的(a)~(c)是本实施方式涉及的伪代码的结构图。
图66是表示本实施方式涉及的标记和编码节点的形状的例子的图。
图67是说明本实施方式涉及的解码处理的流程图。
图68的(a)~(c)是本实施方式涉及的伪代码的结构图。
图69是表示本实施方式涉及的标记和编码节点的形状的例子的图。
图70的(a)~(c)是本实施方式涉及的伪代码的结构图。
图71是表示本实施方式涉及的标记和编码节点的形状的例子的图。
图72是说明本实施方式涉及的解码处理的流程图。
图73的(a)~(c)是本实施方式涉及的伪代码的结构图。
图74是表示本实施方式涉及的标记和编码节点的形状的例子的图。
图75是表示搭载了本实施方式涉及的图像编码装置的发送装置、以及搭载了图像解码装置的接收装置的结构的图。(a)表示搭载了图像编码装置的发送装置,(b)表示搭载了图像解码装置的接收装置。
图76是表示搭载了本实施方式涉及的图像编码装置的记录装置、以及搭载了图像解码装置的再生装置的结构的图。(a)表示搭载了图像编码装置的记录装置,(b)表示搭载了图像解码装置的再生装置。
图77是表示本实施方式涉及的图像传输系统的结构的概略图。
符号说明
10CN信息解码部;
11图像编码装置;
20CU解码部;
31图像解码装置;
41图像显示装置。
具体实施方式
(第1实施方式)
以下,边参照附图边说明本发明的实施方式。
图77是表示本实施方式涉及的图像传输系统1的结构的概略图。
图像传输系统1是传输对编码对象图像进行编码而得到的码,对被传输的码进行解码并显示图像的系统。图像传输系统1构成为包含图像编码装置(运动图像编码装置)11、网络21、图像解码装置(运动图像解码装置)31以及图像显示装置41。
在图像编码装置11,被输入表示单个层或多个层的图像的图像T。层是在构成某个时间的图片有一个以上的情况下,用于区分多个图片的概念。例如,若用画质、分辨率不同的多个层对同一图片进行编码,则成为可扩展编码,若用多个层对不同的视点的图片进行编码,则成为视图可扩展编码。在多个层的图片间进行预测(帧间层预测、帧间视图预测)的情况下,编码效率大幅提高。此外,在不进行预测(联播)的情况下,也能够汇集编码数据。
网络21将图像编码装置11生成的编码流Te传输至图像解码装置31。网络21是因特网(internet)、广域网(WAN:Wide Area Network)、小规模网络(LAN:Local Area Network)或它们的组合。网络21不一定限于双向的通信网,也可以是地面数字广播、卫星广播等的传输广播波的单向的通信网。此外,网络21也可以被DVD(Digital Versatile Disc,数字多功能盘)、BD(Blue-ray Disc,蓝光盘)等记录了编码流Te的存储介质代替。
图像解码装置31分别对网络21传输的编码流Te进行解码,并生成分别解码出的一个或多个解码图像Td。
图像显示装置41显示图像解码装置31生成的一个或多个解码图像Td的全部或一部分。图像显示装置41例如具备液晶显示器、有机EL(Electro-luminescence,电致发光)显示器等的显示用显示器。此外,在空间可扩展编码、SNR可扩展编码中,在图像解码装置31具有高的处理能力的情况下,显示画质高的扩展层图像。在图像解码装置31只具有更低的处理能力的情况下,显示无需如扩展层那样高的处理能力、显示能力的基底层图像。
<运算符>
下面记载本说明书中利用的运算符。
>>为右移位,<<为左移位,&为逐位与,|为逐位或,|=为与其他条件的或运算(OR)。
关于x?y:z,在x为真(0以外)的情况下,是取y的3项运算符,在x为伪(0)的情况下,是取z的3项运算符。
Clip3(a,b,c)是将c剪裁为a以上且b以下的值的函数,是在c<a的情况下返回a,在c>b的情况下返回b,在其他情况下返回c的函数(其中,a≤b)。
<编码流Te的构造>
在本实施方式涉及的图像编码装置11以及图像解码装置31的详细说明之前,先说明由图像编码装置11生成并由图像解码装置31解码的编码流Te的数据构造。
图1是表示编码流Te中的数据的阶层构造的图。编码流Te例示性地包含序列、以及构成序列的多个图片。图1的(a)~(f)分别是表示规定序列SEQ的编码视频序列、规定图片PICT的编码图片、规定切片S的编码切片、规定切片数据的编码切片数据、编码切片数据中包含的编码树单元、编码树单元中包含的编码单元(Coding Unit;CU)的图。
(编码视频序列)
在编码视频序列中,规定了图像解码装置31为了解码出处理对象的序列SEQ而参照的数据的集合。如图1的(a)所示,序列SEQ包含视频参数集(Video Parameter Set)、序列参数集SPS(Sequence Parameter Set)、图片参数集PPS(Picture Parameter Set)、图片PICT、以及附加扩展信息SEI(Supplemental Enhancement Information)。在此,#之后示出的值表示层ID。在图1中,示出存在#0和#1即层0和层1的编码数据的例子,但层的种类以及层数并不限于此。
视频参数集VPS在由多个层构成的运动图像中规定了多个运动图像中共同的编码参数的集合以及运动图像中包含的多个层以及与各个层关联的编码参数的集合。
在序列参数集SPS中,规定了图像解码装置31为了解码出对象序列而参照的编码参数的集合。例如,规定图片的宽度、高度。另外,SPS也可以存在多个。在该情况下,根据PPS选择多个SPS的任一个。
在图片参数集PPS中,规定了图像解码装置31为了解码出对象序列内的各图片而参照的编码参数的集合。例如,包含用于解码图片的量化宽度的基准值(pic_init_qp_minus26)、表示加权预测的应用的标记(weighted_pred_flag)。另外,也可以存在多个PPS。在该情况下,根据对象序列内的各图片选择多个PPS的任一个。
(编码图片)
在编码图片中,规定了图像解码装置31为了解码出处理对象的图片PICT而参照的数据的集合。如图1的(b)所示,图片PICT包含切片S0~SNS-1(NS为图片PICT中包含的切片的总数)。
另外,以下,在无需分别区分切片S0~SNS-1的情况下,省略记述符号的后缀。此外,关于以下说明的编码流Te中包含的标注后缀的其他数据也是同样。
(编码切片)
在编码切片中,规定了图像解码装置31为了解码出处理对象的切片S而参照的数据的集合。如图1的(c)所示,切片S包含切片报头SH、以及切片数据SDATA。
在切片报头SH,包含图像解码装置31为了决定对象切片的解码方法而参照的编码参数组。指定切片类型的切片类型指定信息(slice_type)是切片报头SH中包含的编码参数的一例。
作为能够由切片类型指定信息指定的切片类型,可列举(1)在编码时仅利用帧内预测的I切片、(2)在编码时利用单向预测或帧内预测的P切片、(3)在编码时利用单向预测、双向预测或帧内预测的B切片等。
另外,在切片报头SH,也可以包含上述编码视频序列中包含的向图片参数集PPS的参照(pic_parameter_set_id)。
(编码切片数据)
在编码切片数据中,规定了图像解码装置31为了解码出处理对象的切片数据SDATA而参照的数据的集合。如图1的(d)所示,切片数据SDATA包含编码树单元(CTU:CodingTree Unit)。CTU是构成切片的固定尺寸(例如64x64)的块,也有时称为最大编码单位(LCU:Largest Coding Unit)。
(编码树单元)
如图1的(e)所示,规定了图像解码装置31为了解码出处理对象的编码树单元而参照的数据的集合。编码树单元通过递归型四叉树分割被分割。将通过递归型四叉树分割得到的树构造的节点称为编码节点(CN:Coding Node)。四叉树的中间节点为编码节点,编码树单元自身也作为最上级的编码节点来规定。CTU包含分割标记(cu_split_flag),在cu_split_flag为1的情况下,被分割为四个编码节点CN。在cu_split_flag为0的情况下,编码节点CN不被分割,将一个编码单元(CU:CodingUnit)作为节点来具有。编码单元CU为编码节点的末端节点,不被进行更进一步的分割。编码单元CU成为编码处理的基本单位。
此外,在编码树单元CTU的尺寸为64x64像素的情况下,编码单元的尺寸可取64x64像素、32x32像素、16x16像素、以及8x8像素的任一种。
(编码单元)
如图1的(f)所示,规定了图像解码装置31为了解码出处理对象的编码单元而参照的数据的集合。具体而言,编码单元由预测树、变换树、CU报头CUH构成。在CU报头中,规定预测模式、分割方法(PU分割模式)等。
在预测树中,规定将编码单元分割为一个或多个的各预测单元(PU)的预测信息(参照图片索引、运动矢量等)。如果用其他表现来说,则预测单元是构成编码单元的一个或多个不重复的区域。此外,预测树包含通过上述分割而得到的一个或多个预测单元。另外,以下,将对预测单元进一步分割后的预测单位称为“子块”。子块由多个像素构成。在预测单元和子块的尺寸相等的情况下,预测单元中的子块为一个。在预测单元比子块的尺寸大的情况下,预测单元被分割为子块。例如,在预测单元为8x8且子块为4x4的情况下,预测单元被分割为由水平分割为两个且垂直分割为两个构成的四个子块。
预测处理也可以按该预测单元(子块)的每个进行。
预测树中的分割的种类大致来说具有帧内预测的情况和帧间预测的情况这两种。帧内预测是指同一图片内的预测,帧间预测是指在彼此不同的图片间(例如,显示时刻间、层图像间)进行的预测处理。
在帧内预测的情况下,分割方法有2Nx2N(与编码单元同一尺寸)和NxN。
此外,在帧间预测的情况下,通过编码数据的PU分割模式(part_mode)被编码,分割方法有2Nx2N(与编码单元同一尺寸)、2NxN、2NxnU、2NxnD、Nx2N、nLx2N、nRx2N、以及NxN等。另外,2NxN、Nx2N表示1∶1的对称分割,2NxnU、2NxnD以及nLx2N、nRx2N表示1∶3、3∶1的非对称分割。将CU中包含的PU依次表现为PU0、PU1、PU2、PU3。
在图2的(a)~(h)中,具体地图示了各个PU分割模式中的分区的形状(PU分割的边界的位置)。图2的(a)表示2Nx2N的分区,(b)、(c)、(d)分别表示2NxN、2NxnU、以及2NxnD的分区(横长分区)。(e)、(f)、(g)分别表示为Nx2N、nLx2N、nRx2N的情况下的分区(纵长分区),(h)表示NxN的分区。另外,将横长分区和纵长分区总称为长方形分区,将2Nx2N、NxN总称为正方形分区。
此外,在变换树中,编码单元被分割为一个或多个变换单元,规定各变换单元的位置和尺寸。若用其他表现来说,则变换单元是构成编码单元的一个或多个不重复的区域。此外,变换树包含通过上述分割而得到的一个或多个变换单元。
变换树中的分割有将与编码单元同一尺寸的区域作为变换单元来分配的分割、和与上述的CU的分割同样地通过递归型四叉树分割的分割。
变换处理按该变换单元的每个来进行。
(图像解码装置的结构)
接下来,对本实施方式涉及的图像解码装置31的结构进行说明。图5是表示本实施方式涉及的图像解码装置31的结构的概略图。图像解码装置31构成为包含:熵解码部301、预测参数解码部(预测图像解码装置)302、环路滤波器305、参照图片存储器306、预测参数存储器307、预测图像生成部(预测图像生成装置)308、逆量化/逆DCT部311、以及加法运算部312。
此外,预测参数解码部302构成为包含帧间预测参数解码部303以及帧内预测参数解码部304。预测图像生成部308构成为包含帧间预测图像生成部309以及帧内预测图像生成部310。
熵解码部301对从外部输入的编码流Te进行熵解码,将各个码(语法要素)分离来解码。被分离后的码有用于生成预测图像的预测信息以及用于生成差分图像的残差信息等。
熵解码部301将分离后的码的一部分输出至预测参数解码部302。分离后的码的一部分例如为预测模式predMode、PU分割模式part_mode、合并标记merge_flag、合并索引merge_idx、帧间预测识别符inter_pred_idc、参照图片索引refIdxLX、预测矢量索引mvp_LX_idx、差分矢量mvdLX。解码哪个码的控制基于预测参数解码部302的指示来进行。熵解码部301将量化系数输出至逆量化/逆DCT部311。该量化系数是在编码处理中对残差信号进行DCT(Discrete Cosine Transform,离散余弦变换)并进行量化而得到的系数。
帧间预测参数解码部303基于从熵解码部301输入的码,参照预测参数存储器307中存储的预测参数来对帧间预测参数进行解码。
帧间预测参数解码部303将解码出的帧间预测参数输出至预测图像生成部308,此外,存储至预测参数存储器307。关于帧间预测参数解码部303的详细将后述。
帧内预测参数解码部304基于从熵解码部301输入的码,参照预测参数存储器307中存储的预测参数来对帧内预测参数进行解码。帧内预测参数是在一个图片内预测CU的处理中利用的参数,例如为帧内预测模式IntraPredMode。帧内预测参数解码部304将解码出的帧内预测参数输出至预测图像生成部308,此外,存储至预测参数存储器307。
帧内预测参数解码部304也可以导出亮度和色差不同的帧内预测模式。在该情况下,帧内预测参数解码部304作为亮度的预测参数而解码亮度预测模式IntraPredModeY,作为色差的预测参数而解码色差预测模式IntraPredModeC。亮度预测模式IntraPredModeY为35模式,对应平面预测(0)、DC预测(1)、方向预测(2~34)。色差预测模式IntraPredModeC利用平面预测(0)、DC预测(1)、方向预测(2~34)、LM模式(35)的任一种。帧内预测参数解码部304解码表示IntraPredModeC是否为与亮度模式相同的模式的标记,如果标记表示为与亮度模式相同的模式,则对IntraPredModeC分配IntraPredModeY,如果标记表示为与亮度模式不同的模式,则作为IntraPredModeC也可以解码平面预测(0)、DC预测(1)、方向预测(2~34)、LM模式(35)。
环路滤波器305对加法运算部312生成的CU的解码图像施加去块滤波器、样本自适应偏移(SAO)、自适应环路滤波器(ALF)等的滤波器。
参照图片存储器306按解码对象的每个图片以及CU,将加法运算部312生成的CU的解码图像存储至预先规定的位置。
预测参数存储器307按解码对象的每个图片以及预测单元(或子块、固定尺寸块、像素),将预测参数存储至预先规定的位置。具体而言,预测参数存储器307存储帧间预测参数解码部303解码出的帧间预测参数、帧内预测参数解码部304解码出的帧内预测参数以及熵解码部301分离出的预测模式predMode。被存储的帧间预测参数例如有预测列表利用标记predFlagLX(帧间预测识别符inter_pred_idc)、参照图片索引refIdxLX、运动矢量mvLX。
在预测图像生成部308,被输入从熵解码部301输入的预测模式predMode,此外,从预测参数解码部302被输入预测参数。此外,预测图像生成部308从参照图片存储器306读出参照图片。预测图像生成部308以预测模式predMode所表示的预测模式,利用输入的预测参数和读出的参照图片来生成PU的预测图像。
在此,在预测模式predMode表示帧间预测模式的情况下,帧间预测图像生成部309利用从帧间预测参数解码部303输入的帧间预测参数和读出的参照图片,通过帧间预测来生成PU的预测图像。
帧间预测图像生成部309针对预测列表利用标记predFlagLX为1的参照图片列表(L0列表或L1列表),根据由参照图片索引refIdxLX表示的参照图片,以解码对象PU为基准将处于运动矢量mvLX所表示的位置的参照图片块从参照图片存储器306读出。帧间预测图像生成部309基于读出的参照图片块进行预测并生成PU的预测图像。帧间预测图像生成部309将生成的PU的预测图像输出至加法运算部312。
在预测模式predMode表示帧内预测模式的情况下,帧内预测图像生成部310利用从帧内预测参数解码部304输入的帧内预测参数和读出的参照图片进行帧内预测。具体而言,帧内预测图像生成部310将解码对象的图片中的已被解码的PU之中距解码对象PU在预先规定的范围的相邻PU从参照图片存储器306读出。所谓预先规定的范围,在解码对象PU以所谓的光栅扫描的顺序依次移动的情况下,例如是指左、左上、上、右上的相邻PU中的任一者,根据帧内预测模式而不同。所谓光栅扫描的顺序,是指在各图片中从上端到下端对于各行依次从左端到右端移动的顺序。
帧内预测图像生成部310关于读出的相邻PU以帧内预测模式IntraPredMode所表示的预测模式进行预测并生成PU的预测图像。帧内预测图像生成部310将生成的PU的预测图像输出至加法运算部312。
在帧内预测参数解码部304中导出亮度和色差不同的帧内预测模式的情况下,帧内预测图像生成部310根据亮度预测模式IntraPredModeY而通过平面预测(0)、DC预测(1)、方向预测(2~34)的任一种来生成亮度的PU的预测图像,根据色差预测模式IntraPredModeC而通过平面预测(0)、DC预测(1)、方向预测(2~34)、LM模式(35)的任一种来生成色差的PU的预测图像。
逆量化/逆DCT部311对从熵解码部301输入的量化系数进行逆量化,求出DCT系数。逆量化/逆DCT部311对求出的DCT系数进行逆DCT(Inverse Discrete Cosine Transform,逆离散余弦变换),计算残差信号。逆量化/逆DCT部311将计算出的残差信号输出至加法运算部312。
加法运算部312按每个像素对从帧间预测图像生成部309或帧内预测图像生成部310输入的PU的预测图像和从逆量化/逆DCT部311输入的残差信号进行加法运算,生成PU的解码图像。加法运算部312将生成的PU的解码图像存储至参照图片存储器306,将生成的PU的解码图像按每个图片综合后的解码图像Td输出至外部。
(图像编码装置的结构)
接下来,对本实施方式涉及的图像编码装置11的结构进行说明。图4是表示本实施方式涉及的图像编码装置11的结构的框图。图像编码装置11构成为包含:预测图像生成部101、减法运算部102、DCT/量化部103、熵编码部104、逆量化/逆DCT部105、加法运算部106、环路滤波器107、预测参数存储器(预测参数存储部、帧存储器)108、参照图片存储器(参照图像存储部、帧存储器)109、编码参数决定部110、和预测参数编码部111。预测参数编码部111构成为包含帧间预测参数编码部112以及帧内预测参数编码部113。
预测图像生成部101关于图像T的各图片,按作为对该图片进行分割而得到的区域的每个编码单元CU,生成预测单元PU的预测图像P。在此,预测图像生成部101基于从预测参数编码部111输入的预测参数,从参照图片存储器109读出解码完毕的块。所谓从预测参数编码部111输入的预测参数,例如在帧间预测的情况下是指运动矢量。预测图像生成部101读出以对象PU为起点处于运动矢量所表示的参照图像上的位置的块。此外,在帧内预测的情况下,所谓预测参数例如是指帧内预测模式。从参照图片存储器109读出在帧内预测模式下使用的相邻PU的像素值,生成PU的预测图像P。预测图像生成部101关于读出的参照图片块,利用多个预测方式中的一个预测方式来生成PU的预测图像P。预测图像生成部101将生成的PU的预测图像P输出至减法运算部102。
另外,预测图像生成部101是与已经说明过的预测图像生成部308相同的动作。例如,图6是表示预测图像生成部101中包含的帧间预测图像生成部1011的结构的概略图。帧间预测图像生成部1011构成为包含运动补偿部10111和权重预测部10112。关于运动补偿部10111以及权重预测部10112,由于是分别与上述的运动补偿部3091和权重预测部3094同样的结构,因此省略在此的说明。
预测图像生成部101利用从预测参数编码部输入的参数,基于从参照图片存储器读出的参照块的像素值来生成PU的预测图像P。由预测图像生成部101生成的预测图像被输出至减法运算部102、加法运算部106。
减法运算部102从图像T的对应的PU的像素值减去自预测图像生成部101输入的PU的预测图像P的信号值,生成残差信号。减法运算部102将生成的残差信号输出至DCT/量化部103。
DCT/量化部103对从减法运算部102输入的残差信号进行DCT,计算DCT系数。DCT/量化部103将计算出的DCT系数量化,求出量化系数。DCT/量化部103将求出的量化系数输出至熵编码部104以及逆量化/逆DCT部105。
在熵编码部104,从DCT/量化部103被输入量化系数,从预测参数编码部111被输入编码参数。被输入的编码参数例如有参照图片索引refIdxLX、预测矢量索引mvp_LX_idx、差分矢量mvdLX、预测模式predMode、以及合并索引merge_idx等的码。
熵编码部104对被输入的量化系数和编码参数进行熵编码,生成编码流Te,并将生成的编码流Te输出至外部。
逆量化/逆DCT部105将从DCT/量化部103输入的量化系数进行逆量化,求出DCT系数。逆量化/逆DCT部105对求出的DCT系数进行逆DCT,计算残差信号。逆量化/逆DCT部105将计算出的残差信号输出至加法运算部106。
加法运算部106按每个像素相加从预测图像生成部101输入的PU的预测图像P的信号值和从逆量化/逆DCT部105输入的残差信号的信号值,生成解码图像。加法运算部106将生成的解码图像存储至参照图片存储器109。
环路滤波器107对加法运算部106生成的解码图像施加去块滤波器、样本自适应偏移(SAO)、自适应环路滤波器(ALF)。
预测参数存储器108按编码对象的每个图片以及CU,将编码参数决定部110生成的预测参数存储至预先规定的位置。
参照图片存储器109按编码对象的每个图片以及CU,将环路滤波器107生成的解码图像存储至预先规定的位置。
编码参数决定部110选择编码参数的多个集合中的一个集合。所谓编码参数,是指上述的预测参数、与该预测参数关联地生成的成为编码的对象的参数。预测图像生成部101利用这些编码参数的各个集合来生成PU的预测图像P。
编码参数决定部110关于多个集合分别计算表示信息量的大小和编码误差的成本值。成本值例如是码量与平方误差乘以系数λ后的值的和。码量是对量化误差和编码参数进行熵编码而得到的编码流Te的信息量。平方误差是关于在减法运算部102中计算出的残差信号的残差值的平方值的像素间的总和。系数λ可以是比预先设定的零大的实数。编码参数决定部110选择计算出的成本值成为最小的编码参数的集合。由此,熵编码部104将选择出的编码参数的集合作为编码流Te输出至外部,不输出未被选择的编码参数的集合。编码参数决定部110将决定出的编码参数存储至预测参数存储器108。
预测参数编码部111根据从编码参数决定部110输入的参数导出用于进行编码的形式,并输出至熵编码部104。所谓导出用于进行编码的形式,例如是指从运动矢量和预测矢量导出差分矢量。此外,预测参数编码部111根据从编码参数决定部110输入的参数导出为了生成预测图像而需要的参数,并输出至预测图像生成部101。所谓为了生成预测图像而需要的参数,例如是指子块单位的运动矢量。
帧间预测参数编码部112基于从编码参数决定部110输入的预测参数,导出如差分矢量的帧间预测参数。帧间预测参数编码部112作为导出向预测图像生成部101输出的预测图像的生成所需的参数的结构,包含一部分与帧间预测参数解码部303(参照图5等)导出帧间预测参数的结构相同的结构。关于帧间预测参数编码部112的结构将后述。
帧内预测参数编码部113根据从编码参数决定部110输入的帧内预测模式IntraPredMode导出用于进行编码的形式(例如,MPM idx、rem_intra_luma_pred_mode等)。
(第2实施方式)
(块分割的种类)
首先,对本实施方式涉及的编码节点(CN:Coding Node)的分割进行说明。图7是表示图像解码装置31中的编码节点(CN、块)的分割的图。在本实施方式中,图像解码装置31通过四叉树分割(QT分割)、二叉树分割(BT分割)或三叉树分割(TT分割)对编码树单元或CN进行分割,分割为作为编码处理的基本单位的编码单元(CU:Coding Unit)。图7的(a)表示块的QT分割。此外,图7的(b)表示在水平方向(HOR)上将块进行BT分割的例子。此外,图7的(c)表示在垂直方向(VER)上将块进行BT分割的例子。如图7的(b)以及(c)所示,BT分割将块的被分割的边分割为1∶1。此外,图7的(d)表示不分割块的例子。图7的(e)表示在水平方向(HOR)上将块进行TT分割的例子。图7的(f)表示在垂直方向(VER)上将块进行TT分割的例子。TT分割将块的被分割的边分割为1∶2∶1。
另外,在本说明书中,关于分割,“水平”以及“垂直”这样的用语是指分割线的方向。因此,“水平分割”、“水平方向(HOR)的分割”、“水平地分割”意味着基于水平的边界线的分割,即,分割为上和下的两个块。此外,“垂直分割”、“垂直方向(VER)的分割”、垂直地分割”意味着基于垂直的边界线的分割,即,分割为左和右的两个块。
另外,在本说明书中虽未例示,但也存在其他用语。即,由于某个块被分割为在垂直方向上排列的两个以上的块,因此也有时将本说明书的水平分割称为垂直地分割(splitvertically)。此外,由于某个块被分割为在水平方向上排列的两个以上的块,因此也有时将本说明书的垂直分割称为水平地分割(splithorizontally)。由于上述其他用语中的垂直分割的记载有时意味着说明书的水平分割(或者相反),因此需要注意。在该情况下,在该用语示意的地方适当改称。
图8是表示图像解码装置31进行的叉树类型的信令的图。如图8所示,图像解码装置31通过对CTU或CN反复进行四叉树(Quad-tree)分割,由此进行RT(region-tree,区域树)分割。然后,图像解码装置31在有PT(Partition Tree,划分树)分割(BT分割或TT分割)的标记时,判断是将块水平地分割还是垂直地分割。然后,图像解码装置31判断该分割是BT分割还是TT分割,将块进行分割。
图53以及图54是表示图像解码装置31中的编码节点(CN、块)的分割的另一例的图。在本实施方式中,图像解码装置31作为一例通过多九叉树分割(Multi Nine Tree分割(MNT分割))、多五叉树分割(Multi Five Tree分割(MFT分割))、方向性四叉树分割(Derectional Quad Tree分割(DQT分割))、方向性五叉树分割(Directional Five Tree分割(DFT分割))、或者、方向性非对称四叉树分割(Directional Asymmetric Quad Tree(DAQT分割))将编码树单元或CN进行分割,由此分割为作为编码处理的基本单位的编码单元(CU:Coding Unit)。
图53的(a)表示对块的MNT分割。此外,图53的(b)表示对块的MFT分割的一例,图53的(c)表示对块的MFT分割的另一例。此外,图53的(d)表示对块的DQT分割的一例,图53的(e)表示对块的DQT分割的另一例。此外,图53的(f)表示对块的DFT分割的一例,图53的(g)表示对块的DFT分割的另一例。
图54的(a)表示对块的DAQT分割的第1例,图54的(b)表示对块的DAQT分割的第2例,图54的(c)表示对块的DAQT分割的第3例,图54的(d)表示对块的DAQT分割的第4例。
(MT分割模式组和PT分割模式组)
在本实施方式中,将上述的各种分割模式分类为MT分割模式组(MT分割)和PT分割模式组(PT分割)。
在此,MT分割至少包含QT分割,PT分割至少包含BT分割。
在本实施方式中,将分区数成为4个以上的分割分类为MT分割,将分区数成为3个以下的分割分类为PT分割。
更具体而言,在本实施方式中,MT分割除了QT分割之外,还包含MNT分割、MFT分割、DQT分割、DFT分割、以及DAQT分割的至少任一种,PT分割包含BT分割。此外,PT分割也可以包含TT分割。
即,在本实施方式中,是如下结构,即,将分区数为4个以上的分割具备两个以上,进而,上述分区数为4个以上的分割之一为QT分割。
换言之,本发明的一形态涉及的图像解码装置在按每个编码树单元来对图片进行解码的图像解码装置中,具备对上述编码树单元的编码节点进行分割的分割部,上述分割部作为将对象节点分割为4个以上的节点的分割方法,(在对象节点为正方形的情况下)包含分割为正方形的节点的分割模式、和分割为包括长方形的节点的节点的分割模式。此外,上述分割部将对象节点分割为包括长方形的节点的4个以上的节点。
另外,所谓上述分割为正方形的节点,在直接上级的节点为正方形的情况下,是指被分割为仅是正方形的节点。例如,QT分割成为该情况。此外,由于正方形无方向性,因此有时将QT分割称为不具有方向性的分割。所谓上述分割为包括长方形的节点的节点,在直接上级的节点为正方形的情况下,是指被分割为包括长方形的节点的节点。在分割出的节点中包含长方形的节点即可,也可以包含正方形的节点。例如,MNT分割、MFT分割、DQT分割、DFT分割、以及DAQT分割为该例。此外,由于长方形的长边的方向全部相等,因此DQT分割、DFT分割、DAQT分割称为具有方向性的分割。
图像解码装置31通过解码表示MT分割的MT信息、以及表示PT分割的PT信息,由此确定应该对分割对象的CN应用哪种分割模式。
(冗余分割的例子)
如本实施方式那样,在能够进行TT分割的结构中,由于分割的组合而得到的块的分割图案增加。因而,图像编码装置11中的、决定块的分割图案所需的时间增加。例如,为了获得相同的分割图案,可能产生多个分割过程。图9表示通过不同的分割过程而得到相同的分割图案的例子(冗余分割的例子)。如图9所示,将块(例如CTU)在水平方向上进行TT分割进一步将通过该TT分割得到的中央块在水平方向上进行BT分割而得到的分割图案、和将块在水平方向上进行BT分割进一步将通过该BT分割得到的两个块在水平方向上进行BT分割而得到的分割图案成为相同的分割图案。
本实施方式涉及的图像编码装置11以及图像解码装置31限制块的冗余分割。根据上述的结构,图像编码装置11无需多次评价相同的分割图案。此外,由于冗余分割被禁止,因此无需该分割涉及的标记等的编码数据。因而,图像编码装置11的编码效率提高。
(图像解码装置的结构)
在图10中示出表示本实施方式涉及的图像解码装置31的结构的框图。在本图中,为了简化图,省略了图10所示的框图中包含的一部分的构件的图示。此外,便于说明起见,关于具有与图5所示的构件相同的功能的构件,标记相同的符号,并省略其说明。
如图10所示,图像解码装置31具备解码模块9、CN信息解码部10(分割信息解码部、分割部)、预测图像生成部308、逆量化/逆DCT部311、参照图片存储器306、加法运算部312、环路滤波器305、报头解码部19、以及CU解码部20。CU解码部20还具备PU信息解码部12以及TT(Transform Tree,变换树)信息解码部13,TT信息解码部13还具备TU解码部22。
(解码模块)
以下,对各模块的概略动作进行说明。解码模块9根据二进制数据进行解码语法值的解码处理。更具体而言,解码模块9基于从供给源供给的编码数据以及语法类别,对通过CABAC等的熵编码方式编码的语法值进行解码,并将解码后的语法值返回至供给源。
在以下所示的例子中,编码数据以及语法类别的供给源为CN信息解码部10、CU解码部20(PU信息解码部12以及TT信息解码部13)。
(报头解码部)
报头解码部19对从图像编码装置11输入的编码数据的VPS(video parameterset,视频参数集)、SPS、PPS、切片报头进行解码。
(CN信息解码部)
CN信息解码部10利用解码模块9对从图像编码装置11输入的编码数据进行编码树单元(每个编码树单元)以及编码节点的解码处理。具体而言,CN信息解码部10通过以下的过程根据编码数据对CTU信息以及CN信息进行解码。
首先,CN信息解码部10利用解码模块9根据CTU中包含的CTU信息对树单元报头CTUH进行解码。其次,CN信息解码部10根据CN中包含的CN信息来解码表示是否将对象CN进行QT分割的QT分割标记、表示是否将对象CN进行BT分割或TT分割的PT分割标记、表示BT分割或TT分割的分割方向的分割方向标记、表示PT分割的分割方法(BT分割或TT分割)的分割模式选择标记,递归性地分割并解码对象CN,直到QT分割标记以及PT分割标记不通知进一步的分割为止。或者,取代QT分割标记而解码表示是否将对象CN进行MT分割的MT分割标记、表示是否将对象CN进行PT分割的PT分割标记、表示MT分割或PT分割的分割方向的分割方向标记,递归性地分割并解码对象CN,直到MT分割标记以及PT分割标记不通知进一步的分割为止。最后,根据CTU信息对树单元尾部CTUF进行解码。
在树单元报头CTUH以及树单元尾部CTUF中,包含图像解码装置31为了决定对象编码树单元的解码方法而参照的编码参数。此外,在CN信息中,除了QT分割标记、PT分割标记、分割方向标记以及表示PT分割的分割方法(BT分割或TT分割)的分割模式选择标记、表示MT分割的分割方法的MT分割模式选择标记之外,还可以包含对象CN以及下级或上级的编码节点处被应用的参数。
(CU解码部)
CU解码部20由PU信息解码部12以及TT信息解码部13构成,对最下级的编码节点CN(即CU)的PUI信息以及TTI信息进行解码。
(PU信息解码部)
在PU信息解码部12中,利用解码模块9解码各PU的PU信息(合并标记(merge_flag)、合并索引(merge_idx)、预测运动矢量索引(mvp_idx)、参照图像索引(ref_idx)、帧间预测识别符(inter_pred_flag)、以及差分矢量(mvd)等)。
(TT信息解码部)
TT信息解码部13利用解码模块9解码各TTI(TU分割标记SP_TU(split_transform_flag)、CU残差标记CBP_TU(cbf_cb、cbf_cr、cbf_luma)等、以及TU)。
此外,TT信息解码部13具备TU解码部22。TU解码部22在TU包含残差的情况下,对QP更新信息(量化修正值)进行解码。另外,QP更新信息为表示与量化参数QP的预测值即量化参数预测值qPpred的差分值的值。此外,TU解码部22对量化预测残差(residual_coding)进行解码。
(QT信息解码处理)
关于基于CN信息解码部10的CN信息解码的动作,参照图11以及图12来说明。图11是说明本发明的一实施方式涉及的CN信息解码部10的QT信息解码处理的流程图。此外,图12是表示本发明的一实施方式涉及的QT信息的语法表的结构例的图。
在基于CN信息解码部10的CN信息解码S1400中,进行QT信息解码和BT信息或TT信息(BT/TT信息)解码。以下,依次说明基于CN信息解码部10的QT信息解码。
首先,CN信息解码部10根据编码数据来对CN信息进行解码,递归性地对编码节点(CN:Coding Node)进行解码。具体而言,CN信息解码部10对QT信息进行解码,将对象编码树coding_quadtree(x0,y0,log2CbSize,cqtDepth)进行解码。另外,x0,y0是对象编码节点的左上坐标,log2CbSize是编码节点的尺寸即CN尺寸的2为底的对数即对数CN尺寸(例如,如果CN尺寸为64,128,256,则是6,7,8)。将尺寸X的2为底的对数称为“对数X尺寸”。cqtDepth是表示编码节点的阶层的CN阶层(QT深度)。
(S1411)CN信息解码部10判定在解码后的CN信息中是否有QT分割标记。具体而言,CN信息解码部10判定对数CN尺寸log2CbSize是否大于给定的最小CN尺寸的对数值MinCbLog2SizeY。在对数CN尺寸log2CbSize大于MinCbLog2SizeY的情况下,判定为有QT分割标记,转移至S1421。在除此以外的情况下,转移至S1422。
(S1421)CN信息解码部10在判定为对数CN尺寸log2CbSize大于MinCbLog2SizeY的情况下,解码作为语法要素的QT分割标记(split_cu_flag)。
(S1422)CN信息解码部10在除此以外的情况下(对数CN尺寸log2CbSize为MinCbLog2SizeY以下),即,在编码数据中未出现QT分割标记split_cu_flag的情况下,省略来自编码数据的QT分割标记split_cu_flag的解码,将QT分割标记split_cu_flag作为0来导出。
(S1431)CN信息解码部10在QT分割标记split_cu_flag为0以外(=1)的情况下,实施后述的(S1441),移行至下一阶层(S1411),反复进行以后的处理。在除此以外的情况下(QT分割标记split_cu_flag为0的情况下),转移至BT/TT信息解码处理。
(S1441)CN信息解码部10进行QT分割。具体而言,CN信息解码部10在CN阶层cqtDepth+1的位置(x0,y0)、(x1,y0)、(x0,y1)、(x1,y1),解码对数CN尺寸log2CbSize-1的四个编码节点CN。
coding_quadtree(x0,y0,log2CbSize-1,cqtDepth+1)
coding_quadtree(x1,y0,log2CbSize-1,cqtDepth+1)
coding_quadtree(x0,y1,log2CbSize-1,cqtDepth+1)
coding_quadtree(x1,y1,log2CbSize-1,cqtDepth+1)
在此,x0,y0为对象编码节点的左上坐标,x1,y1如以下的式子那样在(x0,y0)加上CN尺寸(1<<log2CbSize)的1/2来导出。
x1=x0+(1<<(log2CbSize-1))
y1=y0+(1<<(log2CbSize-1))
另外,<<表示左移位。1<<N是与2的N次方相同的值(以下同样)。同样,>>表示右移位。
而且,CN信息解码部10对表示编码节点的阶层的CN阶层cqtDepth加1,将编码单元尺寸的对数值即对数CN尺寸log2CbSize减1(使CN尺寸为1/2)来更新。
cqtDepth=cqtDepth+1
log2CbSize=log2CbSize-1
CN信息解码部10在下级的编码节点中,也利用被更新的左上坐标、对数CN尺寸、CN阶层继续进行从S1411开始的QT信息解码。
(被限制的分割图案的例子)
在此,关于本实施方式涉及的CN信息解码部10限制的CN的分割图案的例子,利用图13~图15来进行说明。
CN信息解码部10参照比对象节点更上一级的节点即直接上级节点的分割方式来限制该对象节点的分割方式。
另外,在以后的说明中,将成为分割对象的块(CN)称为分割对象块或对象块,将分割对象块的直接上级块称为上级块。此外,在下述的说明中,示出参照上级块限制成为分割对象的块的分割图案的例子,但CN信息解码部10也可以参照分割对象块限制直接下级的下级块的分割图案。图13~图15表示CN信息解码部10限制的分割图案的一例。另外,图13~图15中的实线表示通过分割上级的编码节点或编码树单元(上级块)而产生的编码节点(块)的边界。此外,○记号表示在分割对象块中能够进行点线的直线所表示的分割。此外,×记号表示在分割对象块中点线的直线所表示的分割被限制(禁止)。
(被限制的分割图案:A-a1)
在图13的(a)以及(b)所示的例子中,CN信息解码部10对于通过将上级块进行TT分割而产生的中央的分割对象块,限制(禁止)在与上级块的分割方向相同的方向上BT分割。
换言之,在对象块是通过对上级块的三叉树分割而得到的三个块之中的中央的块的情况下,CN信息解码部10限制在与对上级块的三叉树分割相同的方向上将对象块二叉树分割。
(被限制的分割图案:A-a2)
此外,在图13的(c)以及(d)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上BT分割通过将上级块进行BT分割而产生的块的两者。换言之,限于通过上级块的分割而产生的块的一者,能够在与上级块的分割方向相同的方向上进行BT分割。
在先处理的块的处理的时间点不应用上述限制。因而,CN信息解码部10在后处理的块的处理的时间点,参照先处理的块的分割方向,判定后处理的块的分割是否被限制。
关于上述的限制,也能够如下那样表现。在对象块是通过对上级对象块的二叉树分割而得到的两个块中的一个、且该两个块之中的另一块在与对上级块的二叉树分割相同的方向上被二叉树分割的情况下,CN信息解码部10限制在与对上级块的二叉树分割相同的方向上将对象块二叉树分割。
(被限制的分割图案:A-a2’)
此外,在图13的(e)以及(f)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上BT分割通过将上级块进行BT分割而产生的块的任一个。受到分割限制的块例如也可以作为通过上级块的分割而产生的两个块之中后被分割处理的块,但没有特别限定。
换言之,在对象块是通过对上级块的二叉树分割而得到的两个块中的一个的情况下,CN信息解码部10限制在与对上级块的二叉树分割相同的方向上将对象块二叉树分割。
(被限制的分割图案:A-b1)
此外,在图14的(a)以及(b)所示的例子中,CN信息解码部10限制(禁止)在与上级块不同的方向上BT分割通过将上级块进行TT分割而产生的全部块。换言之,关于通过上级块的分割而产生的三个块之中的两个块,能够在与上级块的分割方向不同的方向上进行BT分割。在本例中,在通过最后被分割处理的上级块的分割而产生的块的分割处理的时间点,参照通过其他上级块的分割而产生的块的分割方向,判定最后被分割处理的块的分割是否被限制。
关于本限制,也能够如下那样表现。在对象块是通过对上级块的三叉树分割而得到的三个块中的一个、且该三个块之中的另两个块在与对上级块的三叉树分割不同的方向上被二叉树分割的情况下,CN信息解码部10限制在与对上级块的三叉树分割不同的方向上将对象块二叉树分割。
(被限制的分割图案:A-b1’)
此外,在图14的(c)以及(d)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上BT分割通过将上级块进行TT分割而产生的块的任一个块。受到分割限制的块例如可以作为通过上级块的分割而产生的块之中的最后被分割处理的块,但没有特别限定。
换言之,在对象块为通过对上级块的三叉树分割而得到的三个块中的一个的情况下,CN信息解码部10限制在与对上级块的三叉树分割不同的方向上将对象块二叉树分割。
此外,在图14的(e)以及(f)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行BT分割而产生的块的两者。换言之,限于通过上级块的分割而产生的一个块,能够在与上级块的分割方向不同的方向上进行TT分割。
本限制也能够如下那样表现。在对象块是通过对上级块的二叉树分割而得到的两个块中的一个、且该两个块之中的另一个块在与对上级块的二叉树分割不同的方向上被三叉树分割的情况下,CN信息解码部10限制在与对上级块的二叉树分割不同的方向上将对象块三叉树分割。
(被限制的分割图案:A-b2’)
此外,在图14的(g)以及(h)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行BT分割而产生的块的任一个。受到分割限制的块例如可以作为通过上级块的分割而产生的两个块之中的后被分割处理的块,但没有特别限定。
换言之,在对象块是通过对上级块的二叉树分割而得到的两个块中的一个的情况下,CN信息解码部10限制在与对上级块的二叉树分割不同的方向上将对象块三叉树分割。
(被限制的分割图案:A-c)
此外,在图15的(a)以及(b)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行TT分割而产生的全部块。换言之,关于通过上级块的分割而产生的三个块之中的两个块,能够在与上级块的分割方向不同的方向上进行TT分割。
另外,在本例中,若限制(禁止)通过上级块的分割而产生的块的水平方向以及垂直方向的两方的TT分割,则不会制作9分割的分割图案。因而,CN信息解码部10也可以仅在水平方向或垂直方向的任一方限制(禁止)该分割。
本限制也能够如下那样表现。在对象块是通过对上级块的三叉树分割而得到的三个块中的一个、且该三个块之中的另两个块在与对上级块的三叉树分割不同的方向上被三叉树分割的情况下,CN信息解码部10限制在与对上级块的三叉树分割不同的方向上将对象块三叉树分割。
(被限制的分割图案:A-c’)
此外,在图15的(c)以及(d)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行TT分割而产生的块的任一个块。受到分割限制的块例如可以作为通过上级块的分割而产生的块之中的最后被分割处理的块,但没有特别限定。
换言之,在对象块是通过对上级块的三叉树分割而得到的三个块中的一个的情况下,CN信息解码部10限制在与对上级块的三叉树分割不同的方向上将对象块三叉树分割。
(BT/TT信息解码处理的流程的概要)
接下来,关于基于CN信息解码部10的BT/TT信息解码处理的概要,参照图16来进行说明。图16是表示CN信息解码部10的BT/TT信息解码处理的流程的一例的概要的流程图。
在上述的S1431中QT分割标记split_cu_flag为0的情况下,CN信息解码部10根据对象块的尺寸等判定对象块是否能够进行PT分割,判定PT分割标记的解码的需要与否(S1501:PT分割标记判定)。在PT分割标记的解码为“需要”的情况下(S1501中是),CN信息解码部10解码PT分割标记(S1502)。接下来,CN信息解码部10判定解码后的PT分割标记是否为0(S1503)。在PT分割标记为0的情况下(S1503中否),处理结束。在PT分割标记为0以外的情况下(S1503中是),CN信息解码部10判定由于设定了分割对象块的分割方向的块的分割的限制等是否唯一地决定分割方向,进行分割方向标记的解码的需要与否的判定(S1504:分割方向标记判定)。在分割方向标记的解码为“需要”的情况下(不唯一地决定分割方向的情况等)(S1504中是),CN信息解码部10解码分割方向标记(S1505),决定分割方向,处理接续S1506。在分割方向标记的解码为“不需要”的情况下(唯一地决定分割方向的情况等)(S1504中否),CN信息解码部10不解码分割方向标记,处理接续S1506。在S1506中,CN信息解码部10判定由于设定了分割对象块的分割模式(TT分割、BT分割)的块的分割的限制等是否唯一地决定分割模式等,进行分割模式选择标记的解码的需要与否的判定(S1506:分割模式选择标记判定)。在分割模式选择标记的解码为“需要”的情况下(不唯一地决定分割模式的情况等)(S1506中是),CN信息解码部10解码分割模式选择标记(S1507),决定分割模式,处理接续S1508。在分割模式选择标记的解码为“不需要”的情况下(唯一地决定分割模式的情况等)(S1506中否),CN信息解码部10不解码分割模式选择标记,处理接续S1508。接下来,在S1508中,CN信息解码部10通过决定的方向和决定的分割模式将分割对象块进行分割(S1508)。接下来,对通过该分割而产生的块进行反复执行BT/TT信息解码处理的循环处理(S1509、S1510、S1511)。若该循环处理结束,则处理结束。
(BT/TT信息解码处理的详细)
接下来,关于BT/TT信息解码处理中包含的各处理的详细,利用图17~图39来进行说明。
(PT分割标记判定、PT分割标记的解码、基于PT分割标记的分割的需要与否判定)
首先,利用图17来说明PT分割标记判定处理的详细。图17的(a)是示出表示PT分割标记判定处理的伪代码的一例的图,(b)是示出表示PT分割标记的解码处理的伪代码的一例的图。如图17的(a)所示,如果能够以BT分割或TT分割的任一种进行分割,则CN信息解码部10判定为能PT分割,将PT分割标记split_pt_flag的解码判断为“需要”(TRUE)。接下来,如图17的(b)所示,CN信息解码部10解码PT分割标记split_pt_flag,根据split_pt_flag来判断PT分割的需要与否。此外,如果在BT分割或TT分割的任一种中均不能分割,则CN信息解码部10将PT分割标记split_pt_flag的解码判断为“不需要”(FALSE)。关于BT分割可能判定以及TT分割可能判定的详细将后述。另外,在本处理中,被设定的BTAvailable以及TTAvailable也可还被BT/TT分割信息解码处理中的其他子程序调用,能够参照。
(BT分割可能判定)
其次,关于图17(a)的BT分割可能判定处理的详细,利用图18来进行说明。图18的(a)是示出不具有上述的被限制的分割图案的情况下的、表示BT分割可能判定处理的伪代码的一例的图。如图18的(a)所示,CN信息解码部10导出表示CU的尺寸的最小值的minPTSize(单位尺寸)。CN信息解码部10利用以下的条件1~条件3来进行BT分割可能判定。
条件1:成为分割的对象的块的高度为minPTSize×2以上、或成为分割的对象的块的宽度为minPTSize×2以上(height>=minPTSize*2||width>=minPTSize*2)。
条件2:分割对象块的宽度以及高度为表示CU的尺寸的最大值的maxPTSize以下(width<==maxPTSize&&height<=maxPTSize)。
条件3:表示分割对象块的阶层的cptDepth小于maxPTDepth(cptDepth<maxPTDepth)。另外,各块中的Depth的值也可以基于块的面积比设为d=log2((maxPTSize^2)/(width*height))。或者,作为另一方法,也可以对上级块的Depth的值加1。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为能够BT分割(TRUE)。此外,在不满足上述条件1~3的全部的情况下,CN信息解码部10判定为不能BT分割(FALSE)。
其次,对具有上述的被限制的分割图案的情况下的BT分割可能判定处理进行说明。图18的(b)是示出具有上述的被限制的分割图案的情况下的、表示BT分割可能判定处理的伪代码的一例的图。如图18的(b)所示,在具有被限制的分割图案的情况下,除了上述条件1~3之外还满足BT分割可能判定追加条件时,CN信息解码部10判定为能够BT分割(TRUE)。BT分割可能判定追加条件根据被限制的分割图案而不同。关于BT分割可能判定_追加条件的详细将后述。
(TT分割可能判定)
下面,关于TT分割可能判定处理的详细,利用图19来进行说明。图19的(a)是示出不具有上述的被限制的分割图案的情况下的、表示TT分割可能判定处理的伪代码的一例的图。CN信息解码部10导出表示CU的尺寸的最小值的minPTSize(单位尺寸)。CN信息解码部10利用以下的条件1~条件3来进行TT分割可能判定。
条件1:TT分割将分割对象块的边分割为1∶2∶1。因而,成为分割的对象的块的高度为minPTSize×4以上、或成为分割的对象的块的宽度为minPTSize×4以上((height>=minPTSize*4||width>=minPTSize*4)。
条件2:成为分割的对象的块的宽度以及高度为表示CU的尺寸的最大值的maxPTSize以下(width<=maxPTSize&&height<=maxPTSize)。
条件3:表示成为分割的对象的块的阶层的cptDepth小于maxPTDepth(cptDepth<maxPTDepth)。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为能够TT分割(TRUE)。此外,在不满足上述条件1~3的全部的情况下,CN信息解码部10判定为不能TT分割(FALSE)。
其次,对具有上述的被限制的分割图案的情况下的TT分割可能判定处理进行说明。图19的(b)是示出具有上述的被限制的分割图案的情况下的、表示TT分割可能判定处理的伪代码的一例的图。如图19的(b)所示,在具有被限制的分割图案的情况下,除了上述条件1~3之外还满足TT分割可能判定追加条件时,CN信息解码部10判定为能够TT分割(TRUE)。TT分割可能判定追加条件根据被限制的分割图案而不同。关于BT分割可能判定追加条件的详细将后述。
另外,CN信息解码部10也可以将用于判定能否BT分割的最小尺寸(=minPTSize*2)的值的2倍的值作为minPTSize*4来利用,判定能否TT分割。
换言之,CN信息解码部10参照为了判定能否将对象块二叉树分割而参照的最小尺寸的2倍的尺寸,判定该对象块能否三叉树分割。
根据上述的结构,在通过TT分割而产生的块成为不能预测或变换的尺寸的情况下,即,不能使用TT分割的情况下,能够减少PT分割标记、分割模式选择标记的码量。因而,编码效率提高。进而,在TT分割的判定中,通过利用在BT分割的判定中利用的值的2倍的尺寸,从而能够使分割后的块的最小尺寸在BT分割和TT分割中为相同的尺寸。因而,能够在BT分割和TT分割中使处理共用化。
(cptDepth的导出方法的例1)
此外,如上述,CN信息解码部10是通过BT分割可能判定以及TT分割可能判定利用共同的深度变量cptDepth(临时变量)来限制成为能够分割的块的阶层的结构。即,CN信息解码部10在能否PT(BT或TT)分割的判定中,利用共同深度是否小于阈值maxPTDepth来进行判定。
换言之,CN信息解码部10参照二叉树分割以及三叉树分割中共同的深度变量来限制对象块的分割。根据上述结构,通过限制成为能够分割的块的阶层,从而能够减少BT分割和TT分割的组合。因而,能够降低编码、解码的复杂度。即,能够解决由于BT分割与TT分割的大量组合而编码、解码变得复杂的问题点。cptDepth也可以通过BT分割的分割深度btDepth与TT分割的分割深度ttDepth之和来导出。即,成为
cptDepth=btDepth+ttDepth。
作为cptDepth的导出,例如,也可以将cptDepth的初始值设定为0,在将块进行BT分割或TT分割时,将通过上级块的分割而产生的块的cptDepth的值设为{上级块的cptDepth的值}+1。而且,也可以递归性地继续进行下一个阶层的块的CU信息解码处理。
在导出BT分割的分割深度btDepth和TT分割的分割深度ttDepth的情况下,也同样可以将btDepth的初始值设定为0,将块进行BT分割时,将通过上级块的分割而产生的块的btDepth的值设为{上级块的btDepth的值}+1。此外,也可以将ttDepth的初始值设定为0,将块进行TT分割时,将通过上级块的分割而产生的块的ttDepth的值设为{上级块的btDepth的值}+1。
(cptDepth的导出方法的例2)
对其他cptDepth的导出方法进行说明。例如,将深度cptDepth的初始值设定为0,将块进行BT分割时,将通过该分割而产生的块的cptDepth的值设为cptDepth+1。此外,将块进行TT分割时,如果通过该分割而产生的块为TT分割的中央部,则(partIdx==1),将cptDepth的值设为{上级块的cptDepth的值}+1。此外,也可将块进行TT分割时,如果通过该分割而产生的块为TT分割的中央部以外,则(partIdx==0 or partIdx==2),将cptDepth的值设为{上级块的cptDepth的值}+2。而且,也可以递归性地继续进行下一个阶层的块的CU信息解码处理。
在导出BT分割的分割深度btDepth与TT分割的分割深度ttDepth的情况下,也同样地可以将btDepth的初始值设定为0,将块进行BT分割时,将通过上级块的分割而产生的块的btDepth的值设为{上级块的btDepth的值}+1。此外,将ttDepth的初始值设定为0,将块进行TT分割时,如果通过该分割而产生的块为TT分割的中央部,则(partIdx==1),将ttDepth的值设为{上级块的tttDepth的值}+1。此外,也可以将块进行TT分割时,如果通过该分割而产生的块为TT分割的中央部以外,则(partIdx==0or partIdx==2),将ttDepth的值设为{上级块的ttDepth的值}+2。
(BT/TT分割可能判定(A-a1的追加条件))
其次,关于对图13的(a)以及(b)所示的、被限制的分割图案(A-a1:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上BT分割通过将上级块进行TT分割而产生的中央的块)的BT分割可能判定的追加条件,利用图20来进行说明。
图20~图25是表示BT/TT分割可能判定的追加条件的例子的图。如图20所示,在上级块的分割模式不是TT分割、或分割对象块不是TT分割的中央块(parentSplitMode!=MODE_TT||partIdx!=1)的情况下,CN信息解码部10判定为能够BT分割(TRUE)。例如,也可以设为MODE_TT=1,MODE_BT=0。
此外,在上级块的分割方向为水平且分割对象块的宽度小于minPTSize×2(parentSplitDir==0&&width<minPTSize*2)的情况、或上级块的分割方向为垂直且分割对象块的高度小于minPTSize×2(parentSplitDir==1&&height<minPTSize*2)的情况下,CN信息解码部10判定为不能BT分割(FALSE)。
另外,在被限制的分割图案(A-a1)中,不需要TT分割可能判定_追加条件()的子程序。因而,CN信息解码部10也可以设为如下结构,即,不调用TT分割可能判定追加条件,或对于TT分割可能判定追加条件而始终返回TRUE。
(BT/TT分割可能判定(A-a2的追加条件))
其次,关于对图13的(c)以及(f)所示的、被限制的分割图案(A-a2:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上BT分割通过将上级块进行BT分割而产生的块的两者(禁止在与上级块的分割方向相同的方向上BT分割在BT分割的最后处理的块))的BT分割可能判定的追加条件,利用图21来进行说明。
如图21所示,在上级块的分割模式不是BT分割、或对象块的partIdx不是1(parentSplitMode!=MODE_BT||partIdx!=1)的情况下,CN信息解码部10判定为能够BT分割(TRUE)。
此外,在对分割对象块的分割模式为BT分割、且分割对象块的partIdx为1(MODE_BT&&partIdx==1)的情况下,如下所述。
在上级块的分割方向为水平方向的情况下(parentSplitDir==0),CN信息解码部10导出在从同一上级块分割产生的块中表示使用水平方向的BT分割的次数的siblingHorBTCount。在水平方向上BT分割从上级块分割产生的其他块、且分割对象块的宽度小于minPTSize×2(siblingHorBTCount==1&&width<minPTSize*2))的情况下,CN信息解码部10判定为不能将分割对象块进行BT分割(FALSE)。
此外,在上级块的分割方向为垂直方向的情况下(parentSplitDir==1),CN信息解码部10导出在从同一上级块分割产生的块中表示使用了垂直方向的BT分割的次数的siblingVerBTCount。在垂直方向上BT分割从上级块分割产生的其他块、且分割对象块的高度小于minPTSize×2(siblingVerBTCount==1&&height<minPTSize*2)的情况下,CN信息解码部10判定为不能将分割对象块进行BT分割(FALSE)。
CN信息解码部10在分割对象块不满足上述的不能BT分割的条件的情况下,判定为能够BT分割(TRUE)。另外,在被限制的分割图案(A-a2)中,不需要TT分割可能判定追加条件()的子程序。
此外,被限制的分割图案(A-a2’:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上BT分割通过将上级块进行BT分割而产生的块的任一个)中的BT分割可能判定追加条件通过变更被限制的分割图案(A-a2)的BT分割可能判定追加条件的一部分来实现。具体而言,CN信息解码部10不导出siblingHorBTCount/siblingVerBTCount。此外,CN信息解码部10关于利用siblingHorBTCount/siblingVerBTCount的条件不进行判定(设为TRUE)。此外,在将分割被限制的块设为分割处理成为最后的块以外的情况下,能够通过将追加条件中的partIdx的值变更为表示成为限制的对象的块的值来实现。
(BT/TT分割可能判定(A-b1的追加条件))
其次,关于对图14的(a)~(d)所示的、被限制的分割图案(A-b1:CN信息解码部10限制(禁止)在与上级块不同的方向上BT分割通过将上级块进行TT分割而产生的全部块)的BT分割可能判定的追加条件,利用图22来进行说明。在本限制中,CN信息解码部10对通过TT分割而产生的块之中的最后被分割处理的块进行限制。
如图22所示,在上级块的分割模式不是TT分割、或对象块的partIdx不是2(parentSplitMode!=MODE_TT||partIdx!=2)的情况下,CN信息解码部10判定为能够BT分割(TRUE)。
此外,在上级块的分割模式为TT分割、且分割对象块的partIdx是2(MODE_TT&&partIdx==2)的情况下,如下所述。
在上级块的分割方向为水平方向的情况下(parentSplitDir==0),CN信息解码部10导出siblingVerBTCount。在垂直方向上BT分割从上级块分割产生的其他两个块(即,垂直方向的BT分割被限制,不能进行)、且由于分割对象块的高度小于minPTSize×2(siblingVerBTCount==2&&height<minPTSize*2)而水平方向的BT分割也不能进行的情况下,CN信息解码部10判定为不能将分割对象块进行BT分割(FALSE)。
此外,在上级块的分割方向为垂直方向的情况下(parentSplitDir==1),CN信息解码部10导出siblingHorBTCount。在水平方向上BT分割从上级块分割产生的其他两个块(即,水平方向的BT分割被限制,不能进行)、且由于分割对象块的宽度小于minPTSize×2(siblingHorBTCount==2&&width<minPTSize*2)而垂直方向的BT分割也不能进行的情况下,CN信息解码部10判定为不能将分割对象块进行BT分割(FALSE)。
CN信息解码部10在分割对象块不满足上述的不能BT分割的条件的情况下,判定为能够BT分割(TRUE)。另外,在被限制的分割图案(A-b1)中,不需要TT分割可能判定追加条件()的子程序。
此外,被限制的分割图案(A-b1’:CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上BT分割通过将上级块进行TT分割而产生的块的任一个块)中的BT分割可能判定追加条件,通过变更被限制的分割图案(A-b1)的BT分割可能判定追加条件的一部分来实现。具体而言,CN信息解码部10不导出siblingHorBTCount/siblingVerBTCount。此外,CN信息解码部10关于利用siblingHorBTCount/siblingVerBTCount的条件不进行判定(设为TRUE)。此外,在将分割被限制的块设为分割处理成为最后的块以外的情况下,能够通过变更追加条件中的partIdx的值来实现。
(BT/TT分割可能判定(A-b2的追加条件))
其次,关于对图14的(e)~(h)所示的、被限制的分割图案(A-b2:CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行BT分割而产生的块的两者)的TT分割可能判定的追加条件,利用图24来进行说明。在本限制中,CN信息解码部10对通过BT分割而产生的块之中最后被分割处理的块进行限制。
如图24所示,在上级块的分割模式不能BT分割、或对象块的partIdx不是1的情况下,(parentSplitMode!=MODE_BT||partIdx!=1)时,CN信息解码部10判定为能够TT分割(TRUE)。
此外,在上级块的分割模式为BT分割、且分割对象块的partIdx为1(MODE_BT&&partIdx==1)的情况下,如下所述。
在上级块的分割方向为水平方向的情况下(parentSplitDir==0),CN信息解码部10导出在从同一上级块分割产生的块中表示使用了垂直方向的TT分割的次数的siblingVerTTCount。在垂直方向上TT分割通过上级块的分割而产生的其他块(即,分割对象块中的垂直方向的TT分割被制约,不能进行)、且由于分割对象块的高度小于minPTSize×4(siblingVerTTCount==1&&height<minPTSize*4)而水平方向的TT分割也不能进行的情况下,CN信息解码部10判定为不能将分割对象块TT分割(FALSE)。
此外,在上级块的分割方向为垂直方向的情况下(parentSplitDir==1),CN信息解码部10导出在从同一上级块分割产生的块中表示使用了水平方向的TT分割的次数的siblingHorTTCount。在水平方向上TT分割通过上级块的分割而产生的其他块(即,分割对象块中的水平方向的TT分割被制约,不能进行)、且由于分割对象块的宽度小于minPTSize×4(siblingHorTTCount==1&&width<minPTSize*4)而垂直方向的TT分割也不能进行的情况下,CN信息解码部10判定为不能将分割对象块TT分割(FALSE)。
CN信息解码部10在分割对象块不满足上述的不能TT分割的条件的情况下,判定为能够TT分割(TRUE)。另外,在被限制的分割图案(A-b2)中,不需要BT分割可能判定追加条件()的子程序。
此外,被限制的分割图案(A-b2’:CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行BT分割而产生的块的任一个)中的TT分割可能判定追加条件,通过变更被限制的分割图案(A-b2)的TT分割可能判定追加条件的一部分来实现。具体而言,CN信息解码部10不导出siblingHorBTCount/siblingVerBTCount。此外,CN信息解码部10关于利用siblingHorBTCount/siblingVerBTCount的条件不进行判定(设为TRUE)。此外,在将分割被限制的块设为分割处理成为最后的块以外的情况下,能够通过将追加条件中的partIdx的值变更为表示成为制约的对象的块的值来实现。
(BT/TT分割可能判定(A-c的追加条件))
其次,关于对图15的(a)~(d)所示的、被限制的分割图案(A-c:CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行TT分割而产生的全部块)的TT分割可能判定的追加条件,利用图25来进行说明。在本限制中,CN信息解码部10对通过将上级块进行TT分割而产生的块之中的最后被分割处理的块进行限制。
如图25所示,在上级块的分割模式不是TT分割、上级块的分割方向不是水平方向、或partIdx不是2(parentSplitMode!=MODE_TT||parentSplitDir!=0||partIdx!=2)的情况下,CN信息解码部10判定为能够TT分割(TRUE)。
此外,在上级块的分割模式为TT分割、该分割的方向为水平方向、且分割对象块的partIdx为2的情况下,如下所述。
CN信息解码部10导出siblingVerTTCount。在垂直方向上TT分割通过上级块的分割而产生的其他两个块(即,分割对象块中的垂直方向的TT分割由于制约而不能进行)、且由于分割对象块的高度小于minPTSize×4(siblingVerTTCount==2&&height<minPTSize*4)而水平方向的TT分割也不能进行的情况下,CN信息解码部10判定为不能将分割对象块TT分割(FALSE)。
另外,如前述,在该情况下,如果关于上级块的分割模式为TT分割、且该分割的方向为垂直方向的情况不进行限制,则能够利用使用2阶层的TT分割成为9分割的分割的图案。
CN信息解码部10在分割对象块不满足上述的不能TT分割的条件的情况下,判定为能够TT分割(TRUE)。另外,在被限制的分割图案(A-c)中,不需要BT分割可能判定追加条件()的子程序。
此外,被限制的分割图案(A-c’:CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行TT分割而产生的块的任一个块)中的TT分割可能判定_追加条件,通过变更被限制的分割图案(A-c)的TT分割可能判定_追加条件的一部分来实现。具体而言,CN信息解码部10不导出siblingVerBTCount。此外,CN信息解码部10关于利用siblingVerBTCount的条件不进行判定(设为TRUE)。此外,在将分割被限制的块设为分割处理成为最后的块以外的情况下,能够通过将追加条件中的partIdx的值变更为表示成为制约的对象的块的值来实现。
图23是表示基于CN信息解码部10的TT分割可能判定处理的另一伪代码。
如图23所示,在上级块的分割模式parentSplitMode不是TT分割、或对象块的分割索引partIdx不是2的情况下(if(parentSplitMode!=MODE_TT||partIdx!=2)),CN信息解码部10判定为能够TT分割(TRUE)。
此外,在对分割对象块的分割模式为TT分割、且分割对象块的partIdx是2(MODE_TT&&partIdx==2)的情况下,如下所述。
在上级块的分割方向parentSplitDir为水平方向的情况下(if(parentSplitDir==HOR)),CN信息解码部10导出在从同一上级块分割产生的块中表示使用了垂直方向的TT分割的次数的siblingVerTTCount。在垂直方向上TT分割通过上级块的分割而产生的其他两个块、且分割对象块的高度小于minPTSize×4(siblingVerTTCount==2&&height<minPTSize*4)的情况下,CN信息解码部10判定为不能将分割对象块TT分割(FALSE)。
换言之,上级块在水平方向上被TT分割的情况下,若分割对象的最初的两个块(partIdx=0,1的块)均在垂直方向中被TT分割,则最后的块(partIdx=2的块)限制在垂直方向上TT分割。此时,进而,在水平方向上也不具有能够TT分割的高度的情况下,判断为不能进行TT分割自身。
此外,在上级块的分割方向为垂直方向的情况下(if(parentSplitDir==VER)),CN信息解码部10导出在从同一上级块分割产生的块中表示使用了水平方向的TT分割的次数的siblingHorTTCount。在水平方向上TT分割通过上级块的分割而产生的其他两个块、且分割对象块的高度小于minPTSize×4(siblingHorTTCount==2&&width<minPTSize*4)的情况下,CN信息解码部10判定为不能将分割对象块TT分割(FALSE)。
换言之,上级块在垂直方向上被TT分割的情况下,若分割对象的其他两个块均在水平方向上被TT分割,则partIdx=2的块限制在水平方向上TT分割。进而,在垂直方向上也不具有能够TT分割的宽度的情况下,判定为不能TT分割。
另外,在不符合FALSE的条件的情况下,返回TRUE。
接下来,参照图26来说明CN信息解码部10对块分割的限制的另一例。在图26的例子中,CN信息解码部10在上级块的分割模式为TT分割的情况下,当对象块为中央的块(partIdx==1)时,限制通过与上级的块不同的方向的TT分割进行分割。换言之,通过TT分割来禁止发生与MFT分割相同的分割。也就是说,在MT信息解码处理例2中,CN信息解码部10在对象节点是通过对比对象节点更上一级的节点即直接上级节点的TT分割而得到的三个节点中的一个的情况下,该三个节点之中的中央的节点(partIdx==1)限制在与对直接上级节点的TT分割不同的方向上TT分割对象节点。例如,禁止TT分割后的TT分割,尤其是,禁止TT分割的中央块中的TT分割。
如图26所示,CN信息解码部10在上级块的分割模式不是TT分割、或对象块的partIdx不是1的情况下(if(parentSplitMode!=MODE_TT||partIdx!=1)),CN信息解码部10判定为能够TT分割(TRUE)。
在否则的情况下,即,对分割对象块的分割模式为TT分割、且分割对象块的partIdx为1(MODE_TT&&partIdx==1)的情况下,如下所述。
CN信息解码部10在上级块的分割方向为水平方向(HOR)且成为分割的对象的块的高度小于minPTSize×4、或上级块的分割方向parentSplitDir为垂直方向(VER)且成为分割的对象的块的宽度小于minPTSize×4(parentSplitDir==HOR&&height<minPTSize*4)||(parentSplitDir==VER&&width<minPTSize*4)的情况下,CN信息解码部10判定为不能将分割对象块TT分割(FALSE)。
换言之,CN信息解码部10在TT分割不被禁止的边小于能够TT分割的长度的情况下,判定为不能TT分割。
另外,在不符合FALSE的条件的情况下,返回TRUE。
(分割方向标记判定)
其次,关于分割方向标记判定处理的详细,利用图27来进行说明。图27的(a)是示出不具有上述的被限制的分割图案的情况下的表示分割方向标记判定处理的伪代码的一例的图。如图27的(a)所示,CN信息解码部10导出表示CU的尺寸的最小值的minPTSize(单位尺寸)。在分割对象块的宽度为最小尺寸(width==minPTSize)的情况下,不能将该块进行垂直分割。因而,设定表示分割对象块的分割方向为水平方向的split_dir_flag[x0][y0](split_dir_flag[x0][y0]=0)。而且,判定为不需要分割方向标记的解码(FALSE)。在此,(x0,y0)设为分割对象块的左上坐标。
此外,在分割对象块的高度为最小尺寸(height==minPTSize)的情况下,不能将该块进行水平分割。因而,CN信息解码部10设定表示分割方向为垂直方向的split_dir_flag[x0][y0]。(split_dir_flag[x0][y0]=1)。而且,CN信息解码部10判定为不需要分割方向标记的解码(FALSE)。
此外,在分割对象块的宽度以及高度的双方不是最小尺寸的情况下,在水平和垂直的任一方向上均能够分割,因此CN信息解码部10判定为需要分割方向标记的解码(TRUE)。
其次,对具有上述的被限制的分割图案的情况下的分割方向标记判定处理进行说明。图27的(b)是示出具有上述的被限制的分割图案的情况下的、表示分割方向标记判定处理的伪代码的一例的图。如图27的(b)所示,通过根据上述的被限制的分割图案而不同的追加条件,CN信息解码部10判定为分割方向确定、或者需要分割方向标记的解码。关于根据分割图案而不同的追加条件,利用图28~图31而后述。
CN信息解码部10在判定为需要分割方向标记的解码时解码分割方向标记。图27的(c)是示出表示分割方向标记的解码处理的伪代码的一例的图。
其次,对分割方向标记判定处理的详细进行说明。图28~图31是示出表示对被限制的分割图案的分割方向标记判定的追加条件的伪代码的一例的图。
(分割方向标记判定(A-a1的追加条件))
首先,关于对图13的(a)以及(b)所示的、被限制的分割图案(A-al:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上BT分割通过将上级块进行TT分割而产生的中央的块)的分割方向标记判定的追加条件,利用图28来进行说明。
如图28所示,CN信息解码部10将horSplitAvailable以及verSplitAvailable的初始值设置为TRUE。
在上级块的分割不是TT分割、或分割对象块不是通过TT分割而产生的中央块(parentSplitMode!=MODE_TT||partIdx!=1)的情况下,CN信息解码部10判定为需要分割方向标记的解码。
在上级块的分割为TT分割、且分割对象块是通过TT分割而产生的中央块(parentSplitMode==MODE_TT&&partIdx==1)的情况下,通过(A-a1)的限制来禁止分割对象块的水平方向上的BT分割。并且,在分割对象块的高度小于minPTSize*4(height<minPTSize*4)的情况下,水平方向的TT分割也不能进行,因此关于水平方向,BT分割以及TT分割均不能使用。因此,判定为不能进行分割对象块的水平方向的分割(horSplitAvailable=FALSE)。
同样地,上级块在垂直方向上TT分割的情况下,分割对象块的垂直方向上的BT分割被禁止。并且,在分割块的宽度小于minPTSize*4(width<minPTSize*4)的情况下,垂直方向的TT分割也不能进行,因此关于垂直方向,BT分割以及TT分割均不能使用。因此,分割对象块的垂直分割变得不能进行(verSplitAvailable=FALSE)。
(后处理)
CN信息解码部10在horSplitAvailable且verSplitAvailable的情况下,判定为需要分割方向标记split_dir_flag的解码。在horSplitAvailable以及verSplitAvailable之中的一者为TRUE的情况下,CN信息解码部10设定split_dir_flag,判定为不需要split_dir_flag的解码(FALSE)。
(分割方向标记判定(A-a2的追加条件))
其次,关于对图13的(c)以及(d)所示的、被限制的分割图案(A-a2:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上BT分割通过将上级块进行BT分割而产生的块的两者)的分割方向标记判定的追加条件,利用图29来进行说明。
如图29所示,CN信息解码部10将horSplitAvailable以及verSplitAvailable的初始值设置为TRUE。
在上级块的分割不是BT分割、或分割对象块不是通过上级块的分割而产生的块之中的最后被分割处理的块(parentSplitMode!=MODE_BT||partIdx!=1)的情况下,CN信息解码部10判定为需要分割方向标记的解码。
在上级块的分割为水平方向的BT分割、且分割对象块的partIdx==1(parentSplitMode==MODE—BT&&partIdx==1&&parentSplitDir==0)的情况下,CN信息解码部10导出siblingHorBTCount。在与partIdx=0对应的块通过水平方向的BT分割被分割的情况下,分割对象块的水平方向的BT分割被禁止。并且,在分割对象块的高度小于minPTSize*4(siblingVerBTCount==1&&height<minPTSize*4)的情况下,由于水平方向的TT分割也变得不能进行,因此关于水平方向,BT分割和TT分割均不能进行。因此,判定为不能进行分割对象块的水平方向的分割(horSplitAvailable=FALSE)。
在上级块的分割为垂直方向的BT分割、且分割对象块的partIDx==1(parentSplitMode==MODE—BT&&partIdx==1&&parentSplitDir==1)的情况下,CN信息解码部10导出siblingVerBTCount。在与partIdx=0对应的块通过垂直方向的BT分割被分割的情况下,分割对象块的垂直方向的BT分割被禁止。并且,在分割块的宽度小于minPTSize*4(siblingVerBTCount==1&&width<minPTSize*4)的情况下,由于垂直方向的TT分割也变得不能进行,因此关于垂直方向,BT分割和TT分割均不能进行。因此,分割对象块的垂直分割变得不能进行(verSplitAvailable=FALSE)。其后的CN信息解码部10的处理与上述的(后处理)相同,因此省略在此的说明。
由于解码部10的处理与上述的(后处理)相同,因此省略在此的说明。
(分割方向标记判定(A-b1的追加条件))
其次,关于对图14的(a)~(d)所示的、被限制的分割图案(A-b1:CN信息解码部10限制(禁止)在与上级块不同的方向上BT分割通过将上级块进行TT分割而产生的全部块)的分割方向标记判定的追加条件,利用图30来进行说明。
如图30所示,CN信息解码部10将horSplitAvailable以及verSplitAvailable的初始值设置为TRUE。
在上级块的分割不是TT分割、或分割对象块不是通过上级块的分割而产生的块之中的最后被分割处理的块(parentSplitMode!=MODE_TT||partIdx!=2)的情况下,CN信息解码部10判定为需要分割方向标记的解码。
在上级块的分割为水平方向的TT分割、且分割对象块的partIdx==2(parentSplitMode==MODE_TT&&partIdx==2&&parentSplitDir==0)的情况下,CN信息解码部10导出siblingVerBTCount。在通过上级块的分割而产生的其他两个块通过垂直方向的BT分割被分割的情况下,分割对象块的垂直方向的BT分割被禁止。并且,在分割对象块的宽度小于minPTSize*4(siblingVerBTCount==2&&width<minPTSize*4)的情况下,判定为不能进行分割对象块的垂直方向的分割(verSplitAvailable=FALSE)。
在上级块的分割为垂直方向的TT分割、且分割对象块的partIdx==2(parentSplitMode==MODE_TT&&partIdx==2&&parentSplitDir==1)的情况下,CN信息解码部10导出siblingHorBTCount。在通过上级块的分割而产生的其他两个块通过水平方向的BT分割被分割的情况下,分割对象块的水平方向的BT分割被禁止。并且,分割块的高度小于minPTSize*4(siblingHorBTCount==2&&height<minPTSize*4)的情况下,CN信息解码部10判定为不能进行分割对象块的水平分割(horSplitAvailable=FALSE)。由于其后的CN信息解码部10的处理与上述的(后处理)相同,因此省略在此的说明。
(分割方向标记判定(A-b2以及A-c的追加条件))
在对图14的(e)~(h)所示的、被限制的分割图案(A-b2:CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行BT分割而产生的块的两者)、以及、图15的(a)~(d)所示的、被限制的分割图案(A-c:CN信息解码部10限制(禁止)在与上级块的分割方向不同的方向上TT分割通过将上级块进行TT分割而产生的全部块)的TT分割可能判定的追加条件中,CN信息解码部10如图31所示不做任何动作返回TRUE。调用该子程序的情况是分割对象块的宽度以及高度的两者均不是minPTSize的情况。因此,纵使分割对象块的TT分割被限制,也依然能够进行BT分割,因此分割方向的选择项不会变窄。另外,A-b2’以及A-c’中的分割方向标记判定的追加条件也同样。
在图32中示出表示分割方向标记判定处理的另一伪代码的一例。
在不是TT分割的中央的块的情况下,是分割方向的制约的对象外。在上级块的分割模式不是TT分割、或partIdx不是1的情况下(if(parentSplitMode!=MODE_TT||partIdx!=1)),CN信息解码部10判定为能够TT分割(TRUE)。
在是TT分割的中央的块的情况下,限制为只能在与上级块相同的方向上分割。具体而言,TT分割的中央的块的分割方向为与上级块相同的方向。在上级块的分割模式为TT分割、且partIdx为1的情况下(if(parentSplitMode==MODE_TT&&partIdx==1)),CN信息解码部10将分割对象块的分割方向设定为与上级块的分割方向相同的方向(split_dir_flag[x0][y0]=parentSplitDir)。
(分割模式选择标记判定)
其次,关于分割模式选择标记判定处理的详细,利用图33来进行说明。图33的(a)是示出表示分割模式选择标记处理的伪代码的一例的图。如图33所示,CN信息解码部10导出BTAvailable以及TTAvailable。BTAvailable以及TTAvailable在PT分割标记判定处理中被导出,因此也可以在本处理中参照它们来再利用。此外,在该子程序以后变更BTAvailable以及TTAvailable的值会给PT分割标记判定的结果带来影响,因此不被允许。
在BTAvailable且TTAvailable的情况下,CN信息解码部10通过分割模式选择标记判定追加条件进行分割模式选择标记的解码的需要与否的判定。在只能BT分割以及TT分割的任一种的情况下,CN信息解码部10设定分割模式选择标记的值,判定为不需要解码。
另外,分割模式选择标记判定处理以及分割模式选择标记解码处理仅依赖于PT分割标记判定处理。因而,也可以在PT分割标记的值为真而分支为“是”侧之后,在分割方向标记判定处理之前执行分割模式选择标记判定处理以及分割模式选择标记解码处理。
此外,CN信息解码部10在TT分割可能的判定中通过给定的阈值Th_TT(=minPTSize*4)进行最小值判定而导出的TT分割可能、和在BT分割可能的判定中通过给定的阈值Th_BT(=minPTSize*2)进行最小值判定而导出的BT分割可能当中的任一者为真的情况下(PT分割标记判定),解码表示BT分割和TT分割的PT分割标记(共同标记)。
此外,CN信息解码部10在BT分割可能以及TT分割可能的两者为真的情况下(分割模式选择标记判定),解码表示BT分割以及TT分割的任一者的分割模式选择标记。CN信息解码部10在分割模式选择标记不是present的情况下,将TT分割可能设为分割模式选择标记的值。
换言之,CN信息解码部10在判定为对于对象块的二叉树分割以及对于对象块的三叉树分割的任一种能够进行的情况下,解码表示二叉树分割和三叉树分割的共同的标记。
此外,CN信息解码部10在判定为对于对象块的二叉树分割以及对于对象块的三叉树分割的双方能够进行的情况下,解码表示二叉树分割和三叉树分割的任一种的分割模式选择标记。
根据上述的结构,在通过TT分割产生的块成为不能进行预测或变换的尺寸的情况下,即,不能使用TT分割的情况下,不解码PT分割标记、分割模式选择标记,因此能够减少这些标记的码量。
(第4实施方式)
在上述的图18以及图19中,CN信息解码部10参照二叉树分割以及三叉树分割中共同的深度变量限制了对象块的分割,但也可以单独地导出二叉树分割的分割深度变量btDepth以及三叉树分割的分割深度变量ttDepth,限制对象块的分割。
(BT/TT信息解码处理的详细)
关于BT/TT信息解码处理中包含的各处理的详细,利用图34~图38来进行说明。
首先,关于单独地限制二叉树分割的分割深度变量btDepth以及三叉树分割的分割深度变量ttDepth的情况下的各处理的详细,利用图34~35来进行说明。
(判定例1)
(PT分割标记判定)
首先,利用图34的(a)来说明PT分割标记判定处理的详细。图34的(a)是示出表示PT分割标记判定处理的伪代码的一例的图。如图34的(a)所示,如果能够通过BT分割或TT分割的任一种进行分割,则CN信息解码部10判定为能够PT分割,判断为需要PT分割标记split_pt_flag的解码(TRUE)。
(BT分割可能判定)
其次,关于BT分割可能判定处理的详细,利用图34的(b)来进行说明。图34的(b)是示出不具有上述利用图13~图15说明过的被限制的分割图案的情况下的、表示BT分割可能判定处理的伪代码的一例的图。CN信息解码部10利用以下的条件1~条件3来进行BT分割可能判定。
条件1:成为分割的对象的块的高度为表示CU的尺寸的最小值的minPTSize(单位尺寸)×2以上、或成为分割的对象的块的宽度为minPTSize×2以上(height>=minPTSize*2||width>=minPTSize*2)。
条件2:分割对象块的宽度以及高度为表示CU的尺寸的最大值的maxPTSize以下(width<=maxPTSize&&height<=maxPTSize)。
条件3:表示分割对象块的阶层的btDepth小于maxBTDepth(btDepth<maxBTDepth)。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为能够BT分割(TRUE)。此外,在不满足上述条件1~3的全部的情况下,CN信息解码部10判定为不能BT分割(FALSE)。
(TT分割可能判定)
其次,关于TT分割可能判定处理的详细,利用图34的(c)来进行说明。图34的(c)是示出不具有上述利用图13~图15说明过的被限制的分割图案的情况下的、表示TT分割可能判定处理的伪代码的一例的图。CN信息解码部10利用以下的条件1~条件3进行TT分割可能判定。
条件1:成为分割的对象的块的高度为表示CU的尺寸的最小值的minPTSize(单位尺寸)×4以上、或成为分割的对象的块的宽度为minPTSize×4以上(height>=minPTSize*4||width>=minPTSize*4)。
条件2:分割对象块的宽度以及高度为表示CU的尺寸的最大值的maxPTSize以下(width<=maxPTSize&&height<=maxPTSize)。
条件3:表示分割对象块的阶层的ttDepth小于maxTTDepth(ttDepth<maxTTDepth)。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为能够TT分割(TRUE)。此外,在不满足上述条件1~3的全部的情况下,CN信息解码部10判定为不能TT分割(FALSE)。
图34的(d)所示的判定与图34的(a)~(c)所示的判定相同。若将图34的(a)~(c)所示的3个判定进行总结,则成为图34的(d)所示的判定。
(分割模式选择标记判定)
其次,关于分割模式选择标记判定处理的详细,利用图35来进行说明。图35的(a)是示出表示分割模式选择标记判定处理的伪代码的一例的图。BTAvailable以及TTAvailable在PT分割标记判定处理中被导出,因此也可以在本处理中参照它们来再利用。此外,在该子程序以后变更BTAvailable以及TTAvailable的值会给PT分割标记判定的结果带来影响,因此不被允许。
在BTAvailable且TTAvailable的情况下,CN信息解码部10判定为TRUE。
此外,图35的(b)是示出表示PT分割模式选择标记判定处理的伪代码的一例的图。CN信息解码部10利用以下的条件1~条件3来进行PT分割模式选择标记判定。
条件1:成为分割的对象的块的高度为表示CU的尺寸的最小值的minPTSize(单位尺寸)×4以上、或成为分割的对象的块的宽度为minPTSize×4以上(height>=minPTSize*4||width>=minPTSize*4)。
条件2:分割对象块的宽度以及高度为表示CU的尺寸的最大值的maxPTSize以下(width<=maxPTSize&&height<=maxPTSize)。
条件3:表示分割对象块的阶层的btDepth小于maxBTDepth、且表示分割对象块的阶层的ttDepth小于maxTTDepth(btDepth<maxBTDepth&&ttDepth<maxTTDepth)。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为TRUE。此外,在不满足上述条件1~3的全部的情况下,CN信息解码部10判定为FALSE。
进而,在单独地限制二叉树分割的分割深度变量btDepth以及三叉树分割的分割深度变量ttDepth的情况下,也可以如下设定最大分割深度maxBTDepth、maxTTDepth的设定。列举最大分割深度的三种限制例。
(最大分割深度的限制例a)
通过对最大二叉树分割深度maxBTDepth以及最大三叉树分割深度maxTTDepth设定给定的值(上限次数),从而能够独立地限制二叉树分割的次数、三叉树分割的次数。例如,在将二叉树分割的次数限制为两次的情况下,只要将maxBTDepth设定为2即可。此外,在将三叉树分割的次数限制为一次的情况下,只要对maxTTDepth设定1即可。也就是说,设为
maxBTDepth=2,maxTTDepth=1。
此外,也可以如下设定其他的上限次数。
maxBTDepth=4,maxTTDepth=2
若将二叉树分割和三叉树分割进行比较,则施加相同的处理时间的情况下的效率有差异。通过如上述那样单独地设定各最大分割深度,从而能够利用如使二叉树分割变深而使三叉树分割变浅的效率高的情况。
(最大分割深度的限制例b)
通过设定最大二叉树分割深度maxBTDepth与最大三叉树分割深度maxTTDepth的关系,从而能够确保二叉树分割的次数与三叉树分割的次数的关系。例如,在要使三叉树分割的次数比二叉树分割的次数少的情况下,只要设定maxBTDepth>maxTTDepth即可。
另外,可以设定为maxBTDepth>=maxTTDepth,也可以设定为maxBTDepth>=maxTTDepth*2。
若将二叉树分割和三叉树分割进行比较,则使二叉树分割变深而使三叉树分割变浅的情况下的编码效率高。根据上述,能够避免如与二叉树分割有关的最大二叉树分割深度maxBTDepth变小、与三叉树分割有关的最大三叉树分割深度maxTTDepth变大的效率不高的情况。
(最大分割深度的限制例c)
通过设定最大二叉树分割深度maxBTDepth与最大三叉树分割深度maxTTDepth之和的上限,从而能够根据是否使三叉树分割有效(在变为有效的情况下,使有效至何种程度的最大三叉树深度)来限制二叉树分割的上限次数。
maxBTDepth+maxTTDepth<sumMaxPTDepth
例如,若将最大二叉树分割深度与最大三叉树分割深度之和限制为3以下(sumMaxPTDepth=3)(maxBTDepth+maxTTDepth<=3),则在三叉树分割并非有效的情况下(maxTTDepth=0),能够将二叉树分割的上限次数maxTTDepth设定为3,在三叉树分割有效的情况下(maxTTDepth>0),能够将二叉树分割的上限次数maxTTDepth设定为小于3的值。也就是说,
能够设定为maxBTDepth=3、maxTTDepth=0(三叉树分割并非有效的情况)
maxBTDepth=2、maxTTDepth=2(三叉树分割有效的情况)。
在该情况下,因为最大的二叉树分割深度被限制为2以下,所以在存在三叉树分割的情况下,能够禁止连续三次二叉树分割。在使三叉树分割有效的情况下,能够进一步将二叉树分割的上限次数设定得小,所以能够避免如二叉树分割和三叉树分割的两者多数使用的复杂度高的组合,因此禁止二叉树分割继续关系到运动图像的编码/解码的复杂度的降低。另一方面,在无三叉树分割的情况下,能够设定为maxBTDepth=3、maxTTDepth=0,能够连续三次二叉树分割。
TT分割标记的发生频度高。判定例1,通过单独地限制二叉树分割的分割深度变量btDepth以及三叉树分割的分割深度变量ttDepth,从而能够抑制TT分割标记的发生,抑制TT分割标记的编码。
(判定例2)
其次,说明对使二叉树分割的分割深度变量btDepth和三叉树分割的分割深度变量ttDepth合起来的变量进行限制的情况下的各处理的详细。
判定例2的PT分割标记判定进行与上述判定例1相同的判定。
判定例2的BT分割可能判定的条件3与上述判定例1不同。在判定例2中,利用以下的条件3来进行BT分割可能判定。
BT分割可能判定的条件3:表示分割对象块的阶层的(btDepth+ttDepth)小于maxPTDepth((btDepth+ttDepth)<maxPTDepth)。
判定例2的TT分割可能判定的条件3与上述判定例1不同。在判定例2中,利用以下的条件3来进行TT分割可能判定。
TT分割可能判定的条件3:表示分割对象块的阶层的(btDepth+ttDepth)小于maxPTDepth((btDepth+ttDepth)<maxPTDepth)。
判定例2的分割模式选择标记判定的条件3与上述判定例1不同。在判定例2中,利用以下的条件3来进行分割模式选择标记判定。
分割模式选择标记判定的条件3:表示分割对象块的阶层的(btDepth+ttDepth)小于maxPTDepth(btDepth+ttDepth)<maxPTDepth。
另外,如在cptDepth的导出方法的例1、cptDepth的导出方法的例2中已经说明的那样,可以用一个临时变量cptDepth来表现btDepth+ttDepth。
(判定例3)
其次,关于单独地限制二叉树分割的分割深度变量btDepth以及三叉树分割的分割深度变量ttDepth、且对使二叉树分割的分割深度变量btDepth和三叉树分割的分割深度变量ttDepth合起来的变量进行限制的情况下的各处理的详细,利用图36~37来进行说明。
另外,在判定例3中,也如在cptDepth的导出方法的例1、cptDepth的导出方法的例2中已经说明过的那样,可以用一个临时变量cptDepth来表现btDepth+ttDepth。
判定例3的PT分割标记判定如在图36中(a)所示那样与上述判定例1同样,能够根据BT分割可能判定与TT分割可能判定之和(OR)导出。BT分割可能判定和TT分割可能判定如在图36中(b)以及(c)那样,作为之和的PT分割标记判定能够如图36的(d)那样记载。即,在(表示分割对象块的阶层的btDepth小于maxBTDepth、或ttDepth为maxTTDepth)、且(btDepth+ttDepth)<maxPTDepth的情况下,判定为存在PT分割标记(TRUE),解码表示是否进行BT分割或TT分割的标记即PT分割标记。另外,如图36的(d)所示,除了与阶层有关的限制之外,还可以进一步施加与对象块的width和height有关的限制。
判定例3的BT分割可能判定如图36的(b)所示,条件3与上述判定例1不同。在判定例3中,利用以下的条件3来进行BT分割可能判定。
BT分割可能判定的条件3:表示分割对象块的阶层的btDepth小于maxBTDepth、且表示分割对象块的阶层的(btDepth+ttDepth)小于maxPTDepth(btDepth<maxBTDepth&&(btDepth+ttDepth)<maxPTDepth)。
判定例3的TT分割可能判定如图36的(c)所示,条件3与上述判定例1不同。在判定例3中,利用以下的条件3来进行TT分割可能判定。
TT分割可能判定的条件3:表示分割对象块的阶层的ttDepth小于maxTTDepth、且表示分割对象块的阶层的(btDepth+ttDepth)小于maxPTDepth(ttDepth<maxTTDepth&&(btDepth+ttDepth)<maxPTDepth)。
进而,如图37的(a)所示,判定例3的分割模式选择标记判定与上述判定例1同样,能够根据BT分割可能判定与TT分割可能判定的逻辑与(AND)导出。BT分割可能判定和TT分割可能判定如图36的(b)以及(c)那样,作为逻辑与的分割模式选择标记判定能够如图37的(b)那样记载。即,在表示分割对象块的阶层的btDepth小于maxBTDepth、且ttDepth为maxTTDepth、且(btDepth+ttDepth)<maxPTDepth的情况下,判定为存在分割模式选择标记(TRUE),解码表示BT分割和TT分割的任一种的标记即分割模式选择标记。另外,如图37的(b)所示,除了与阶层有关的限制之外,还可以进一步施加与对象块的width和height有关的限制。
若进一步进行说明,则判定例3的分割模式选择标记判定相对于上述判定例1的条件,条件4不同。在判定例3中,利用以下的条件4来进行分割模式选择标记判定。
分割模式选择标记判定的条件4:表示分割对象块的阶层的(btDepth+ttDepth)小于maxPTDepth((btDepth+ttDepth)<maxPTDepth)。
在满足判定例1的条件1~3以及上述条件4的全部的情况下,CN信息解码部10判定为TRUE。此外,在不满足上述条件1~4的全部的情况下,CN信息解码部10判定为FALSE。
例如,能够将二叉树分割和三叉树分割均限制为三次以下(只要分别为btDepth<3、ttDepth<3就能够分割),进而将二叉树分割和三叉树分割相加的次数也能够限制为三次以下(只要为(btDepth+ttDepth)<3就足够)。此外,还能够将二叉树分割和三叉树分割相加的次数限制为三次以下(只要为btDepth+ttDepth<3就能够分割),三叉树分割能够限制为两次以下(只要BT分割和TT分割分别为btDepth<3、ttDepth<2就能够使用)。
判定例3中,通过单独地限制二叉树分割的分割深度变量btDepth以及三叉树分割的分割深度变量ttDepth,且对将二叉树分割的分割深度变量btDepth和三叉树分割的分割深度变量ttDepth合起来的变量进行限制,从而能够进行冗余控制,尤其是能够抑制在三叉树分割时二叉树分割增加必要以上。
(判定例4)
其次,说明对三叉树分割之后的二叉树分割进行限制的分割模式选择标记判定处理的详细。图38的(a)是示出表示对三叉树分割之后的二叉树分割进行限制的分割模式选择标记判定处理的伪代码的一例的图。如图38的(a)所示,如果已经进行了TT分割,则CN信息解码部10判定为不能BT分割。即,在TT分割的分割深度ttDepth大于0(0以外)的情况下,判定为不能BT分割。此外,在分割模式选择标记判定中,如果BT分割以及TT分割能够分割,则CN信息解码部10判定为解码分割模式选择标记(TRUE)。
(判定例5)
其次,说明对二叉树分割之后的三叉树分割进行限制的分割模式选择标记判定处理的详细。图38的(b)是示出表示对二叉树分割之后的三叉树分割进行限制的分割模式选择标记判定处理的伪代码的一例的图。如图38的(b)所示,如果为BT分割,则CN信息解码部10判定为不能TT分割。即,在BT分割的分割深度btDepth大于0(0以外)的情况下,判定为不能TT分割。此外,在分割模式选择标记判定中,如果BT分割以及TT分割能够分割,则CN信息解码部10判定为解码分割模式选择标记(TRUE)。
上述判定例4以及判定例5虽然控制简单,但运动图像的编码/解码的复杂度的降低的效果明显。
(BB/TT分割处理)
其次,关于CN信息解码部10的BB/TT分割处理,利用图39来进行说明。图39的(a)以及(b)是示出表示BB/TT分割处理的伪代码的一例的图。如图39的(a)以及(b)所示,CN信息解码部10基于分割方向标记和分割模式选择标记将分割对象块进行分割。此外,CN信息解码部10还设定分割对象的块是通过上级块的哪种分割而产生的信息(parent...)。partIdx为块的索引,每当循环时被设定。取代parent...,关于各块在调用侧预先导出并设定限制的有无或限制应用的可否等的信息。
(第3实施方式)
(利用机会少的分割图案)
在没有特别限定的情况下,本实施方式涉及的图像解码装置31是与第2实施方式同样的结构。由此,图像解码装置31与第2实施方式的图像解码装置31同样是能够TT分割的结构。因而,通过分割的组合而得到的块的分割图案增加。由此,图像编码装置11中的、块的分割图案的决定所需的时间增加。本实施方式涉及的图像解码装置31限制(禁止)利用机会少的分割图案。例如,在与特定的分割图案不同但类似的分割图案中,认为该类似的分割图案的编码效率与特定的分割图案的编码效率无大的差异的情况下,禁止该类似的分割图案。
关于利用机会少的分割图案的例子,利用图40来进行说明。图40是表示利用机会少的分割图案的例子的图。在图40中,示出在水平方向TT分割块(CN)进一步将通过该TT分割得到的块在水平方向上TT分割而得到的分割图案1、和在水平方向上TT分割块进一步将通过该TT分割得到的块在水平方向上BT分割而得到的分割图案2。分割图案1中的通过两次的TT分割而产生的块是过于细长的形状,利用机会少。因此,图像解码装置31限制(禁止)分割图案1。
根据上述的结构,图像编码装置11无需评价利用机会少的分割图案。此外,由于利用机会少的分割图案被禁止,因此不需要该分割涉及的标记等的编码数据。因而,图像编码装置11的编码效率提高。
(被限制的分割图案)
在此,关于本实施方式涉及的CN信息解码部10限制的CN的分割图案的例子,利用图41来进行说明。图41的(a)~(c)表示CN信息解码部10限制的分割图案的一例。图41的(a)~(c)中的实线表示通过分割上级的编码节点或编码树单元(上级块)而产生的编码节点(块)的边界。此外,○记号表示在分割对象块中点线所表示的分割能够进行。此外,×记号表示在分割对象块中点线所表示的分割被限制(禁止)。
(被限制的分割图案:B-d)
例如,CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上分割通过将上级块进行TT分割而产生的分割对象块。
换言之,在对象块是通过对上级块的三叉树分割而得到的三个块中的一个的情况下,CN信息解码部10限制在与对上级块的三叉树分割相同的方向上分割上述对象块。
(被限制的分割图案:B-d1)
此外,在图41的(a)所示的例子中,CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上分割通过将上级块进行TT分割而产生的块之中的中央块。
换言之,在对象块是通过对上级块的三叉树分割而得到的三个节点之中的中央的块的情况下,CN信息解码部10限制在与对上级块的三叉树分割相同的方向上分割对象块。
(被限制的分割图案:B-d1’)
此外,在图41的(b)所示的例子中,CN信息解码部10限制(禁止)用与上级块的分割方向不同的方向的TT分割以外分割通过将上级块进行TT分割而产生的块之中的中央块。
换言之,在对象块是通过对上级块的三叉树分割而得到的三个块之中的中央的块的情况下,CN信息解码部10限制用与对上级块的三叉树分割不同的方向的三叉树分割以外分割对象块。
(被限制的分割图案:B-d2)
此外,在图41的(c)所示的例子中,CN信息解码部10限制(禁止)在与上级块相同的方向上分割通过将上级块进行TT分割而产生的块之中的中央块以外的块。
换言之,在对象块是通过对上级块的三叉树分割而得到的三个块之中的中央的块以外的块的情况下,CN信息解码部10限制在与对上级块的三叉树分割相同的方向上分割上述对象块。
(被限制的分割图案:B-d3)
此外,作为未图示的另一例,CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上TT分割通过将上级块进行TT分割而产生的块。
此外,在上述对象节点是通过对上述直接上级节点的三叉树分割而得到的三个节点中的一个的情况下,上述分割部限制在与对上述直接上级节点的三叉树分割相同的方向上三叉树分割上述对象节点。
(BT/TT信息解码处理的详细)
其次,关于对本实施方式涉及的被限制的分割图案的分割方向标记判定的追加条件,利用图42~图46来进行说明。图42~图46是示出表示被限制的分割图案中的分割方向标记判定的追加条件的伪代码的一例的图。
(分割方向标记判定)
(分割方向标记判定(B-d的追加条件))
关于对被限制的分割图案(B-d:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上分割通过将上级块进行TT分割而产生的分割对象块)的分割方向标记判定的追加条件,利用图42来进行说明。
如图42所示,在上级块被TT分割的情况下(parentSplitMode==MODETT),CN信息解码部10禁止在与上级块的分割方向相同的方向上将分割对象块进行分割。因而,将分割对象块的分割方向设定为与上级块的分割方向不同的方向,判断为不需要分割方向标记的解码(FALSE)。
上级块的分割方向(parentSplitDir)为0或1。因而,如图42所示,通过1减去parentSplitDir,从而能够导出与上级块不同的方向。
另外,在本限制的分割图案中,第2实施方式中说明过的“BT/TT分割可能判定”中的追加条件没有特别设定。在以下记载的被限制的分割图案中,关于没有特别记载追加条件的,视为追加条件没有特别设定。
(分割方向标记判定(B-d1的追加条件))
其次,关于对被限制的分割图案(B-d1:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上分割通过将上级块进行TT分割而产生的块之中的中央块)的分割方向标记判定的追加条件,利用图43来进行说明。在上级块被TT分割、且分割对象块是通过该TT分割而产生的块之中的中央块(parentSplitMode==MODE_TT&&partIdx==1)的情况下,将分割对象块的分割方向设定为与上级块的分割方向不同的方向,判断为不需要分割方向标记的解码(FALSE)。
(分割方向标记判定(B-d2的追加条件))
其次,关于对被限制的分割图案(B-d2:CN信息解码部10限制(禁止)在与上级块相同的方向上分割通过将上级块进行TT分割而产生的块之中的中央块以外的块)的分割方向标记判定的追加条件,利用图44来进行说明。在上级块被TT分割、且分割对象块是通过该TT分割而产生的块之中的中央块以外的块(parentSplitMode==MODE_TT&&partIdx!=1)的情况下,将分割对象块的分割方向设定为与上级块的分割方向不同的方向,判断为不需要分割方向标记的解码(FALSE)。
(分割方向标记判定(B-d1’的追加条件))
其次,关于对被限制的分割图案(B-d1’:CN信息解码部10限制(禁止)用与上级块的分割方向不同的方向的TT分割以外分割通过将上级块进行TT分割而产生的块之中的中央块)的分割方向标记判定的追加条件,利用图45来进行说明。如图45的(a)所示,在块被TT分割、且分割对象块是通过该TT分割而产生的块之中的中央块(parentSplitMode==MODE_TT&&partIdx==1)的情况下,将分割对象块的分割方向设定为与上级块的分割方向不同的方向,判断为不需要分割方向标记的解码(FALSE)。
另外,在本限制的分割图案中,有第2实施方式中说明过的“BT/TT分割可能判定”中的追加条件。关于该追加条件,利用图45的(b)来进行说明。图45的(b)是示出具有上述的被限制的分割图案的情况下的、表示BT分割可能判定处理的伪代码的一例的图。
如图45的(b)所示,在上级块的分割模式为TT分割、且对象块是通过TT分割而产生的块的中央块(parentSplitMode==MODE_TT&&partIdx==1)的情况下,CN信息解码部10判定为不能BT分割(FALSE)。图45的(c)是表示本限制中的能够进行的分割的图。如图45的(c)所示,CN信息解码部10限制通过TT分割而产生的中央块的BT分割。此外,将该块的分割方向限制为与上级块的分割方向相同的方向。
(分割方向标记判定(B-d3的追加条件))
其次,关于对被限制的分割图案(B-d3:CN信息解码部10限制(禁止)在与上级块的分割方向相同的方向上TT分割通过将上级块进行TT分割而产生的块)的CN信息解码部10的处理的流程进行说明。
图50是表示进行本限制的CN信息解码部10的处理的流程的一例的概要的图。如图50所示,在第2实施方式中说明过的CN信息解码部10的处理的流程的一例(参照图16)和本处理的流程中不同的点在于,在本处理中,使分割模式的决定(分割模式选择标记判定S1506、分割模式选择标记判定S1507)比分割方向的决定(分割方向标记判定S1504、分割方向标记解码S1505)先执行。
其次,关于分割方向标记判定的追加条件,利用图46来进行说明。如图46的(a)所示,在上级块被TT分割、且将分割对象块进行TT分割(parentSplitMode==MODE_TT&&split_sel_flag[x0][y0]==MODE_TT)的情况下,将分割对象块的分割方向设定为与上级块的分割方向不同的方向,判断为不需要分割方向标记的解码(FALSE)。
图46的(b)是表示本限制中的能够进行的分割的图。如图46的(b)所示,CN信息解码部10仅在对象块的分割被选择为TT分割时,分割方向仅被限定于与上级块的分割方向不同的方向。
(其他被限制的分割图案)
其次,关于本实施方式涉及的CN信息解码部10限制的CN的分割图案的其他例,利用图47来进行说明。图47的(a)~(1)表示CN信息解码部10限制的分割图案的一例。
(被限制的分割图案:B-e)
在图47的(a)~(d)、(g)~(1)所示的例子中,CN信息解码部10限制(禁止)如图中的点线那样在与上级块的分割方向相同的方向上分割通过将上级块进行TT分割而产生的块之中的、如(a)~(d)所示的长方形的分割对象块。
换言之,在分割对象块的形状是如(g)~(1)所示的正方形的情况下,CN信息解码部10不限制对象块的分割方式。
另外,如图47的(e)以及(f)所示,即便分割对象的块为正方形,CN信息解码部10也可以限制(禁止)在第2实施方式中说明过的冗余的分割图案的分割。
(分割方向标记判定(B-e的追加条件))
其次,关于对被限制的分割图案(B-e)的分割方向标记判定的追加条件,利用图48来进行说明。图48是示出表示对被限制的分割图案(B-e)的分割方向标记判定的追加条件的伪代码的一例的图。
如图48所示,在上级块被TT分割、且分割对象块的宽度与高度不同(parentSplitMode==MODE_TT&&width!=height)的情况下,CN信息解码部10将分割对象块的分割方向设定为与上级块的分割方向不同的方向(split_dir_flag[x0][y0]=1-parentSplitDir),判断为不需要分割方向标记的解码(FALSE)。
(其他被限制的分割图案:纵横比TT分割限制)
其次,关于本实施方式涉及的CN信息解码部10限制的CN的分割图案的又一例,利用图49来进行说明。图49的(a)以及(b)表示CN信息解码部10限制的分割图案的一例。
在图49的(a)以及(b)所示的例子中,在对象块是如纵横比成为给定的值以上的矩形状的情况下,CN信息解码部10限制通过沿着对象块的长边方向产生边界的三叉树分割将对象块进行分割。
所谓本说明书中的块的纵横比,在该块的宽度与高度为width、height的情况下,意味着宽度与高度之比的最大值。即,是max(width/height,height/width)。所谓纵横比TT分割限制,是指禁止通过TT分割使得width与height之比成为给定的值以上,例如,1∶8(4×32、8×64)、8∶1(32×4、64×8)。换言之,在对象块为某种程度以上横长的情况下,禁止进行水平分割,在对象块为某种程度以上纵长的情况下,禁止进行垂直分割。
例如,在图49的(a)中示出由于对象块为横长而CN信息解码部10禁止水平分割的例子。此外,在图49的(b)中示出由于对象块为纵长而CN信息解码部10禁止垂直分割的例子。
(分割模式选择标记判定(纵横比TT分割限制的追加条件))
其次,关于分割模式选择标记判定(纵横比TT分割限制)的追加条件,利用图51来进行说明。图51是示出表示被限制的分割图案中的分割方向标记判定的追加条件的伪代码的一例的图。如图51所示,在分割对象块的宽度的值大于分割对象块的高度的值的M倍、且分割对象块的分割方向为水平方向(width>M*height&&split_dir_flag[x0][y0]==0)的情况下,将分割对象块的分割设定为BT分割(split_sel_flag[x0][y0]=MODE_BT),判断为不需要分割模式选择标记的解码(FALSE)。
此外,在分割对象块的高度的值大于分割对象块的宽度的值的M倍、且分割对象块的分割方向为垂直方向(height>M*width&&split_dir_flag[x0][y0]==1)的情况下,将分割对象块的分割设定为BT分割(split_sel_flag[x0][y0]=MODE_BT),判断为不需要分割模式选择标记的解码(FALSE)。
另外,虽然存在TT分割被限制的情形,但在此由于不会对PT分割标记判定的结果带来影响,因此TTAVailable的值不设定。此外,TTAvailable的值也不会改变。该子程序与BTAVailable/TTAVailable一起仅在TRUE的情况下调用,即便在符合上述的条件、短边方向仅限制为BT分割的情况下,在长边方向上也依然能够进行TT分割。因而,不影响TTAvailable的值。
(分割方向标记判定(纵横比TT分割限制的追加条件))
此外,对本限制的分割图案(纵横比TT分割限制)的CN信息解码部10的处理的流程也可以与图50所示的被限制的分割图案(B-d3)相同。关于图50所示的处理的流程已经在上文叙述,因此省略在此的说明。关于图50所示的处理的流程中的、分割方向标记判定(纵横比TT分割限制)的追加条件,利用图52来进行说明。图52是示出表示被限制的分割图案中的分割方向标记判定的追加条件的伪代码的一例的图。如图52所示,在分割对象块的宽度的值大于分割对象块的高度的值的M倍、且分割对象块的分割为TT分割(width>M*height&&split_sel_flag[x0][y0]==MODE_TT)的情况下,将分割对象块的分割方向设定为垂直方向(split_dir_flag[x0][y0]=1),判断为不需要分割方向标记的解码(FALSE)。
此外,在分割对象块的高度的值大于分割对象块的宽度的值的M倍、且分割对象块的分割为TT分割(height>M*width&&split_sel_flag[x0][y0]==MODE_TT)的情况下,将分割对象块的分割方向设定为水平方向(split_dir_flag[x0][y0]=0),判断为不需要分割方向标记的解码(FALSE)。
(MT信息解码处理)
关于基于CN信息解码部10的CN信息解码的各动作例,参照图55~图66来进行说明。
(MT信息解码处理例1)
图55是说明本发明的一实施方式涉及的CN信息解码部10的MT信息解码处理的第1例的流程图。图55是说明MT分割包含MNT分割以及QT分割的情况下的MT解码处理的流程图。
(S1101)
CN信息解码部10首先在S1101中判定是否解码MT分割标记(MT分割标记判定)。CN信息解码部10在判定为解码MT分割标记的情况下(MT分割标记判定为是/TRUE),进入步骤S1102,在判定为不解码MT分割标记的情况下(MT分割标记判定为否/FALSE),结束MT信息解码处理。
(S1102)
在S1102中,CN信息解码部10进行MT分割标记mt_split_flag的解码。在此,mt_split_flag=0表示不分割对象块,mt_split_flag=1表示分割对象块。
(S1103)
接下来,CN信息解码部10判定与MT分割标记mt_split_flag有关的判别式
MT分割标记!=0(式1101)
的真伪。在(式1101)为真的情况下,进入步骤S1104,在(式1101)为伪的情况下,结束MT信息解码处理。
(S1104)
在S1104中,CN信息解码部10判定是否解码MT分割模式选择标记(MT分割模式选择标记判定)。CN信息解码部10在判定为解码MT分割模式选择标记的情况下(MT分割模式选择标记判定为是ES/TRUE),进入步骤S1105。CN信息解码部10在判定为不解码MT分割模式选择标记的情况下(MT分割分割模式选择标记判定为否O/FALSE),设置为mt_sel_flag=0,进入步骤S1106。
(S1105)
在S1105中,CN信息解码部10解码MT分割模式选择标记mt_sel_flag。在此,mt_sel_flag=0表示将对象块进行QT分割,mt_sel_flag=1表示将对象块进行MNT分割。
(S1106)
在S1106中,CN信息解码部10通过MT分割模式选择标记mt_sel_flag所表示的分割模式将分割对象块进行分割。
更具体而言,在MT分割模式选择标记mt_sel_flag表示MNT分割的情况下,如图53的(a)所示,CN信息解码部10通过将对象块(对象节点)在水平方向上分割为1∶2∶1,在垂直方向上分割为1∶2∶1,由此分割为9个节点(块)。即,通过将对象节点在第1方向上分割为1∶2∶1,在与上述第1方向垂直(正交)的第2方向上分割为1∶2∶1,由此分割为9个节点。
另一方面,在MT分割模式选择标记mt_sel_flag表示QT分割的情况下,如图7的(a)所示,CN信息解码部10将对象块进行四叉树分割。
另外,MNT分割所表示的分割方式,通过将分割方向正交的两次的TT分割连续地应用于对象节点,也能够实现。然而,在上述的例子中,在mt_selflag表示MNT分割的情况下,CN信息解码部10通过一次的分割处理将对象节点分割为4个以上(在此为9个)的节点。因此,能够在抑制分割深度(分割次数)的增大的同时实现复杂的分割。
(S1107~S1109)
接下来,对通过该分割而产生的块进行反复执行MT信息解码处理的循环处理(S1107、S1108、S1109)。在该循环处理结束时,处理结束。
利用图56来说明MT分割标记判定、MT分割模式选择标记判定的详细。图56的(a)是示出表示MT分割标记判定处理的伪代码的一例的图,图56的(b)是示出表示MT分割模式选择标记判定处理的伪代码的一例的图。
(MT分割标记判定)
CN信息解码部10利用以下的条件1~条件3来进行MT分割标记判定。
条件1:成为分割的对象的块的高度height为minPTSize×2以上、或成为分割的对象的块的宽度width为minPTSize×2以上(height>=minPTSize*2||width>=minPTSize*2)。在此,minPTSize为PT分割时的块尺寸的最小值。
条件2:分割对象块的宽度以及高度为表示块尺寸的最大值的maxMTSize以下(width<=maxMTSize&&height<=maxMTSize)。在此,maxMTSize为MT分割时的块尺寸的最大值。
条件3:表示分割对象块的阶层的qtDepth小于maxQTDepth、或表示分割对象块的阶层的mntDepth小于maxMNTDepth(qtDepth<maxQTDepth||mntDepth<maxMNTDepth)。在此,maxQTSize为QT分割时的深度(阶层)的最大值,maxMNTSize为MNT分割时的深度(阶层)的最大值。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为能够MT分割(TRUE)。此外,在上述条件1~3的任一者不满足的情况下,CN信息解码部10判定为不能MT分割(FALSE)。
(MT分割模式选择标记判定)
CN信息解码部10利用以下的条件1~条件3来进行MT分割模式选择标记判定。
条件1:成为分割的对象的块的高度以及宽度为minPTSize×4以上(height>=minPTSize*4&&width>=minPTSize*4)。
条件2:分割对象块的宽度以及高度为表示块尺寸的最大值的maxMTSize以下(width<=maxPTSize&&height<=maxPTSize)。
条件3:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的mntDepth小于maxMNTDepth(qtDepth<maxQTDepth&&mntDepth<maxMNTDepth)。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为需要MT分割模式选择标记的解码(TRUE)。此外,在上述条件1~3的任一者不满足的情况下,CN信息解码部10判定为不需要MT分割模式选择标记的解码(FALSE)。
(MT信息解码处理例2)
图57是说明本发明的一实施方式涉及的CN信息解码部10的MT信息解码处理的第2例的流程图。在本例中,在进行MT分割的情况下,与上述MT信息解码处理例1不同点在于,识别分割方向是水平方向还是垂直方向的标记(MT分割方向标记mt_dir_flag)的解码处理。
S1401~S1405对应于上述MT信息解码处理例1的S1101~S1105,S1409~S1411对应于上述MT信息解码处理例1的S1107~S1109。
在S1404中,CN信息解码部10判定为不解码MT分割模式选择标记的情况下,或者继S1405之后,进入S1406。
(S1406)
CN信息解码部10在S1406中判定是否解码MT分割方向标记。CN信息解码部10在判定为解码MT分割方向标记的情况下,进入S1407,在判定为不解码MT分割方向标记的情况下,进入S1408。
(S1407)
在S1407中,CN信息解码部10进行MT分割方向标记mt_dir_flag的解码。在此,mt_dir_flag=0表示对象块(对象节点)的分割方向为水平方向,mt_dir_flag=1表示对象块(对象节点)的分割方向为垂直方向。
另外,MT分割模式选择标记mt_sel_flag的解码处理(S1404以及S1405)与MT分割方向标记mt_dir_flag的解码处理(S1406以及S1407)的次序可以相反。
(S1408)
在S1408中,CN信息解码部10基于MT分割方向标记mt_dir_flag和MT分割模式选择标记mt_sel_flag将分割对象块进行分割。
更具体而言,CN信息解码部10在MT分割方向标记为0(mt_dir_flag=0)、MT分割模式选择标记为1(mt_sel_flag=1)的情况下,如图53的(b)所示,将对象块(对象节点)在水平方向上分割为1∶2∶1的三个节点,将该三个节点之中的中央的节点在垂直方向上分割为1∶2∶1,由此分割为5个节点(块)。
此外,CN信息解码部10在MT分割方向标记为1(mt_dir_flag=1)、且MT分割模式选择标记为1(mt_sel_flag=1)的情况下,如图53的(c)所示,将对象块(对象节点)在垂直方向上分割为1∶2∶1的三个节点,将该三个节点之中的中央的节点在水平方向上分割为1∶2∶1,由此分割为5个节点(块)。
接下来,利用图58来说明MT信息解码处理例2的MT分割标记判定、MT分割模式选择标记判定、MT分割方向标记判定的详细。图58的(a)是示出表示MT分割标记判定处理的伪代码的一例的图,图58的(b)是示出表示MT分割模式选择标记判定处理的伪代码的一例的图,图58的(c)是示出表示MT分割方向标记判定处理的伪代码的一例的图。
(MT分割标记判定)
MT信息解码处理例2的MT分割标记判定的条件3与MT信息解码处理例1不同。MT信息解码处理例2的MT分割标记判定的条件3如下所述。
条件3:表示分割对象块的阶层的qtDepth小于maxQTDepth、或表示分割对象块的阶层的mftDepth小于maxMFTDepth(qtDepth<maxQTDepth||mftDepth<maxMFTDepth)。在此,maxMFTDepth为MFT分割时的深度(阶层)的最大值。
(MT分割模式选择标记判定)
MT信息解码处理例2的MT分割模式选择标记判定的条件3与MT信息解码处理例1不同。MT信息解码处理例2的MT分割模式选择标记判定的条件3如下所述。
条件3:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的mftDepth小于maxMFTDepth(qtDepth<maxQTDepth&&mftDepth<maxMFTDepth)。
(MT分割方向标记判定)
CN信息解码部10利用以下的条件1~条件4来进行MT分割方向标记判定。
条件1:MT分割模式选择标记表示MFT分割(mt_sel_flag==MODE_MFT)。
条件2:成为分割的对象的块的高度以及宽度为minPTSize×4以上(height>=minPTSize*4&&width>=minPTSize*4)。
条件3:分割对象块的宽度以及高度为表示块尺寸的最大值的maxMTSize以下(width<=maxPTSize&&height<=maxPTSize)。
条件4:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的mftDepth小于maxMFTDepth(qtDepth<maxQTDepth&&mftDepth<maxMFTDepth)。
在满足上述条件1~4全部的情况下,CN信息解码部10判定为需要MT分割方向标记的解码(TRUE)。此外,在上述条件1~4的任一者不满足的情况下,CN信息解码部10判定为不需要MT分割方向标记的解码(FALSE)。
此外,在MT信息解码处理例2中,CN信息解码部10在对于比对象节点上级的节点而通过BT分割以及TT分割的至少任一种进行了节点的分割的情况下,对于对象节点,不进行包含分割为5个节点的分割类型(MFT)和QT分割的第1分割类型组中的分割。例如,在进行了一次的PT分割(BT分割、TT分割)之后,不进行MT分割(QT分割、MFT分割)。
图59是表示MT分割标记mt_split_flag、MT分割模式选择标记mt_sel_flag、以及MT分割方向标记mt_dir_flag各自的值与形状的关系的表。
在MT分割标记为1(mt_split_flag==1)、且MT分割模式选择标记为0(mt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(a)所示的QT那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示MT分割的1(mt_sel_flag==1)、MT分割方向标记为0(mt_dir_flag==0)的情况下,CN信息解码部10如成为图53的(b)所示的MFT HOR(在图59中简记为“MFTH”)那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示MT分割的1(mt_sel_flag==1)、MT分割方向标记为1(mt_dir_flag==1)的情况下,CN信息解码部10如成为图53的(c)所示的MFT VER(在图59中简记为“MFTV”)那样进行分割。
也就是说,在MT分割标记表示进行包含分割为5个节点的分割类型(MFT)和QT分割的第1分割类型组中的分割(mt_split_flag==1)、且MT分割模式选择标记表示进行分割为5个节点的分割类型下的分割(MFT)(mt_sel_flag==1)的情况下,CN信息解码部10将MT分割方向标记mt_dir_flag所表示的方向作为第1方向,将对象节点分割为5个节点。
(MT信息解码处理例3)
MT信息解码处理例3的CN信息解码部10的MT信息解码处理的流程与MT信息解码处理例2相同。
利用图60来说明MT信息解码处理例3的MT分割标记判定、MT分割模式选择标记判定、MT分割方向标记判定的详细。图60的(a)是示出表示MT分割标记判定处理的伪代码的一例的图,图60的(b)是示出表示MT分割模式选择标记判定处理的伪代码的一例的图,图60的(c)是示出表示MT分割方向标记判定处理的伪代码的一例的图。
(MT分割标记判定)
MT信息解码处理例3的MT分割标记判定的条件3与MT信息解码处理例1不同。MT信息解码处理例3的MT分割标记判定的条件3如下所述。
条件3:表示分割对象块的阶层的qtDepth小于maxQTDepth、或表示分割对象块的阶层的dqtDepth小于maxDQTDepth(qtDepth<maxQTDepth||dqtDepth<maxDQTDepth)。
(MT分割模式选择标记判定)
MT信息解码处理例3的MT分割模式选择标记判定的条件3与MT信息解码处理例1不同。MT信息解码处理例3的MT分割模式选择标记判定的条件3如下所述。
条件3:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的dqtDepth小于maxDQTDepth(qtDepth<maxQTDepth&&dqtDepth<maxDQTDepth)。在此,maxDQTDepth为DQT分割时的深度(阶层)的最大值。
(MT分割方向标记判定)
MT信息解码处理例3的MT分割方向标记判定的条件1、2、4与MT信息解码处理例2不同。MT信息解码处理例3的MT分割方向标记判定的条件1、2、4如下所述。
条件1:MT分割模式选择标记表示DQT分割(mt_sel_flag==MODE_DQT)。
条件2:成为分割的对象的块的高度为minPTSize×4以上、或成为分割的对象的块的宽度为minPTSize×4以上(height>=minPTSize*4||width>=minPTSize*4)。
条件4:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的dqtDepth小于maxDQTDepth(qtDepth<maxQTDepth&&dqtDepth<maxDQTDepth)。
此外,在MT信息解码处理例3中,CN信息解码部10在对于比对象节点上级的节点而通过分割为四个节点的分割类型(DQT)进行了节点的分割的情况下,对于对象节点,不进行分割为包含长方形的节点的4个以上的节点的分割类型下的分割。例如,哪怕进行一次的DQT分割之后,也不进行MT分割(QT分割)。
图61是表示MT分割标记mt_split_flag、MT分割模式选择标记mt_sel_flag、以及MT分割方向标记mt_dir_flag各自的值与形状的关系的表。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为0(mt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(a)所示的QT那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示DQT分割的1(mt_sel_flag==1)、MT分割方向标记为0(mt_dir_flag==0)的情况下,CN信息解码部10如成为图53的(e)所示的DQT HOR(在图61中简记为“DQTH”)那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示DQT分割的1(mt_sel_flag==1)、MT分割方向标记为1(mt_dir_flag==1)的情况下,CN信息解码部10如成为图53的(d)所示的DQT VER(在图61中简记为“DQTV”)那样进行分割。
也就是说,在MT分割标记表示进行包含分割为四个节点的分割类型(DQT)和QT分割的第1分割类型组中的分割(mt_split_flag==1)、且MT分割模式选择标记表示进行分割为四个节点的分割类型(DQT)下的分割的情况下,CN信息解码部10将MT分割方向标记所表示的方向作为第1方向,将对象节点分割为四个节点。
(MT信息解码处理例4)
MT信息解码处理例4的CN信息解码部10的MT信息解码处理的流程与MT信息解码处理例2相同。
利用图62来说明MT信息解码处理例4的MT分割标记判定、MT分割模式选择标记判定、MT分割方向标记判定的详细。图62的(a)是示出表示MT分割标记判定处理的伪代码的一例的图,图62的(b)是示出表示MT分割模式选择标记判定处理的伪代码的一例的图,图62的(c)是示出表示MT分割方向标记判定处理的伪代码的一例的图。
(MT分割标记判定)
MT信息解码处理例4的MT分割标记判定的条件3与MT信息解码处理例1不同。MT信息解码处理例4的MT分割标记判定的条件3如下所述。
条件3:表示分割对象块的阶层的qtDepth小于maxQTDepth、或表示分割对象块的阶层的dftDepth小于maxDFTDepth(qtDepth<maxQTDepth||dftDepth<maxDFTDepth)。在此,maxDFTDepth为DFT分割时的深度(阶层)的最大值。
(MT分割模式选择标记判定)
MT信息解码处理例4的MT分割模式选择标记判定的条件1、3与MT信息解码处理例1不同。MT信息解码处理例4的MT分割模式选择标记判定的条件1、3如下所述。
条件1:成为分割的对象的块的高度为minPTSize×8以上、或成为分割的对象的块的宽度为minPTSize×8以上(height>=minPTSize*8&&width>=minPTSize*8)。
条件3:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的dftDepth小于maxDFTDepth(qtDepth<maxQTDepth&&dftDepth<maxDFTDepth)。
(MT分割方向标记判定)
MT信息解码处理例4的MT分割方向标记判定的条件2、4与MT信息解码处理例3不同。MT信息解码处理例4的MT分割方向标记判定的条件2、4如下所述。
条件2:成为分割的对象的块的高度为minPTSize×8以上、或成为分割的对象的块的宽度为minPTSize×8以上(height>=minPTSize*8||width>=minPTSize*8)。
条件4:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的dftDepth小于maxDFTDepth(qtDepth<maxQTDepth&&dftDepth<maxDFTDepth)。
此外,在MT信息解码处理例4中,CN信息解码部10在对于比对象节点上级的节点而通过分割为5个节点的分割类型(DFT)进行了节点的分割的情况下,对于对象节点,不进行分割为包含长方形的节点的4个以上的节点的分割类型下的分割。例如,在进行了一次的PT分割(DFT分割)之后,不进行MT分割(QT分割)。
图63是表示MT分割标记mt_split_flag、MT分割模式选择标记mt_sel_flag、以及MT分割方向标记mt_dir_flag各自的值与形状的关系的表。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为0(mt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(a)所示的QT那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示DQT分割的1(mt_sel_flag==1)、MT分割方向标记为0(mt_dir_flag==0)的情况下,CN信息解码部10如成为图53的(g)所示的DFT HOR(在图63中简记为“DFTH”)那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示DQT分割的1(mt_sel_flag==1)、MT分割方向标记为1(mt_dir_flag==1)的情况下,CN信息解码部10如成为图53的(f)所示的DFT VER(在图63中简记为“DFTV”)那样进行分割。
也就是说,在MT分割标记表示进行包含分割为5个节点的分割类型(DFT)和QT分割的第1分割类型组中的分割(mt_split_flag==1)、且MT分割模式选择标记表示进行分割为5个节点的分割类型(DFT)下的分割(mt_sel_flag==1)的情况下,CN信息解码部10将MT分割方向标记所表示的方向作为第1方向,将对象节点分割为5个节点。
(MT信息解码处理例5)
图64是说明本发明的一实施方式涉及的CN信息解码部10的MT信息解码处理的流程图。在本实施方式中,在进行MT分割的情况下,与上述MT信息解码处理例2不同点在于,进行识别非对称的图案的标记(MT非对称标记mt_amt_flag)的解码处理。
S2201~S1407对应于上述MT信息解码处理例2的S1401~S1407,S2211~S2013对应于上述MT信息解码处理例2的S1409~S1411。
在S2206中,CN信息解码部10在判定为解码MT分割方向标记的情况下,或继S2207之后,进入S2208。
(S2208)
CN信息解码部10在S2208中判定是否解码MT非对称标记。CN信息解码部10在判定为解码MT非对称标记的情况下,进入S2209,在判定为不解码MT分割MMT标记的情况下,进入S2210。
(S2209)
在S2209中,CN信息解码部10进行MT非对称标记mt_amt_flag的解码。在此,mtamt_flag=0表示在对象块(对象节点)的分割方向为水平方向的情况下从上到下依次成为1∶4∶2∶1地进行分割,在对象块(对象节点)的分割方向为垂直方向的情况下从左到右依次成为1∶4∶2∶1地进行分割,mt_amt_flag=1表示在对象块(对象节点)的分割方向为水平方向的情况下从上到下依次成为1∶2∶4∶1地进行分割,在对象块(对象节点)的分割方向为垂直方向的情况下从左到右依次成为1∶2∶4∶1地进行分割。
(S2210)
在S2210中,CN信息解码部10基于MT分割模式选择标记mt_sel_flag、MT分割方向标记mt_dir_flag、以及MT非对称标记mt_amt_flag将分割对象块进行分割。
接下来,利用图65来说明MT信息解码处理例5的MT分割标记判定、MT分割模式选择标记判定、MT分割方向标记判定的详细。图65的(a)是示出表示MT分割标记判定处理的伪代码的一例的图,图65的(b)是示出表示MT分割模式选择标记判定处理的伪代码的一例的图,图65的(c)是示出表示MT分割方向标记判定处理的伪代码的一例的图。
(MT分割标记判定)
MT信息解码处理例5的MT分割标记判定的条件3与MT信息解码处理例1不同。MT信息解码处理例5的MT分割标记判定的条件3如下所述。
条件3:表示分割对象块的阶层的qtDepth小于maxQTDepth、或表示分割对象块的阶层的daqtDepth小于maxDAQTDepth(qtDepth<maxQTDepth||daqtDepth<maxDAQTDepth)。在此,maxDAQTDepth为DAQT分割时的深度(阶层)的最大值。
(MT分割模式选择标记判定)
MT信息解码处理例5的MT分割模式选择标记判定的条件3与MT信息解码处理例4不同。MT信息解码处理例5的MT分割模式选择标记判定的条件3如下所述。
条件3:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的daqtDepth小于maxDAQTDepth(qtDepth<maxQTDepth&&daqtDepth<maxDAQTDepth)。
(MT分割方向标记判定)
MT信息解码处理例5的MT分割方向标记判定的条件1、4与MT信息解码处理例4不同。MT信息解码处理例5的MT分割方向标记判定的条件4如下所述。
条件4:表示成为分割的对象的块的阶层的qtDepth小于maxQTDepth、且表示成为分割的对象的块的阶层的daqtDepth小于maxDAQTDepth(qtDepth<maxQTDepth&&daqtDepth<maxDAQTDepth)。
此外,在MT信息解码处理例5中,CN信息解码部10在对于比对象节点上级的节点而通过分割为四个节点的分割类型(DAQT)进行了节点的分割的情况下,对于对象节点,不进行分割为包含长方形的节点的4个以上的节点的分割类型下的分割。例如,哪怕一次进行了DAQT分割之后,也不进行MT分割(QT分割)。
图66是表示MT分割标记mt_split_flag、MT分割模式选择标记mt_sel_flag、MT分割方向标记mt_dir_flag、以及MT非对称标记mt_amt_flag各自的值与形状的关系的表。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为0(mt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(a)所示的QT那样进行分割。
在MT分割标记为1(mtsplit_flag==1)、MT分割模式选择标记为表示MT分割的1(mt_sel_flag==1)、MT分割方向标记为0(mt_dir_flag==0)、MT非对称标记为0(mt_amt_flag==0)的情况下,CN信息解码部10如成为图54的(c)所示的DAQTHOR0(在图66中简记为“DAQTH0”)那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示MT分割的1(mt_selflag==1)、MT分割方向标记为0(mt_dir_flag==0)、MT非对称标记为1(mt_amt_flag==1)的情况下,CN信息解码部10如成为图54的(d)所示的DAQT HOR 1(在图66中简记为“DAQTH1”)那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示MT分割的1(mt_sel_flag==1)、MT分割方向标记为1(mt_dir_flag==1)、MT非对称标记为0(mt_amt_flag==0)的情况下,CN信息解码部10如成为图54的(a)所示的DAQT VER 0(在图66中简记为“DAQTV0”)那样进行分割。
在MT分割标记为1(mt_split_flag==1)、MT分割模式选择标记为表示MT分割的1(mt_sel_flag==1)、MT分割方向标记为1(mt_dir_flag==1)、MT非对称标记为1(mt_amt_flag==1)的情况下,CN信息解码部10如成为图54的(b)所示的DAQT VER 1(在图66中简记为“DAQTV1”)那样进行分割。
也就是说,在MT分割标记表示进行包含分割为非对称且具有方向性的四个节点的分割类型(DAQT)和分割为不具有方向性的四个节点的QT分割的第1分割类型组中的分割(mt_sel_flag==1)、且表示进行非对称且具有方向性的分割(mt_sel_flag==1)的情况下,CN信息解码部10将MT分割方向标记所表示的方向作为第1方向,按照MT非对称标记mt_amt_flag(上述第4标记)所表示的1∶4∶2∶1的比或1∶2∶4∶1的比,将对象节点分割为四个节点。
(第3实施方式)
(MT分割模式组与PT分割模式组)
在本实施方式中,上述的各种分割模式也分类为MT分割模式组(MT分割)和PT分割模式组(PT分割)。在此,MT分割至少包含QT分割,PT分割至少包含BT分割。
在本实施方式中,将不具有方向性的分割分类为MT分割,将具有方向性的分割分类为PT分割。
更具体而言,在本实施方式中,MT分割具备QT分割,PT分割除了BT分割之外还包含DQT分割、DFT分割以及DAQT分割。此外,PT分割也可以包含TT分割。
第3实施方式中,作为分割模式组而具有第1模式组(MT分割)和第2模式组(PT分割),作为第2模式组,(在直接上级的节点为正方形的情况下)至少包含分割为长方形的两个节点的BT分割和分割为包含长方形的节点的4个以上的节点的分割。
(PT信息解码处理)
(PT信息解码处理例1)
图67是说明本发明的一实施方式涉及的CN信息解码部10的PT信息解码处理的流程图。是说明PT分割包含BT分割、TT分割、以及DQT分割的情况下的PT信息解码处理的流程图。PT解码处理在MT信息解码处理的后级进行。
(S2701)
CN信息解码部10首先在S2701中判定是否解码PT分割标记。CN信息解码部10在判定为解码PT分割标记的情况下,进入步骤S2702,在判定为不解码PT分割标记的情况下,结束PT信息解码处理。
(S2702)
在S2702中,CN信息解码部10进行PT分割标记pt_split_flag的解码。在此,pt_split_flag=0表示不进行对象块分割,pt_split_flag=1表示进行对象块分割。
(S2703)
接下来,CN信息解码部10判定与PT分割标记pt_split_flag有关的判别式
PT分割标记!=0(式2701)
的真伪。在(式2701)为真的情况下,进入步骤S2704,在(式2701)为伪的情况下,结束PT信息解码处理。
(S2704)
在S2704中,CN信息解码部10判定是否解码PT分割方向标记(PT分割标记判定)。CN信息解码部10在判定为解码PT分割方向标记的情况下(PT分割标记判定为是/TRUE),进入步骤S2705,在判定为不解码PT分割方向标记的情况下(PT分割标记判定为否/FALSE),进入步骤S2706。
(S2705)
在S2705中,CN信息解码部10解码PT分割方向标记pt_dir_flag。在此,pt_dir_flag=0表示在水平方向上分割对象块,pt_dir_flag=1表示在垂直方向上分割对象块。
(S2706)
在S2706中,CN信息解码部10判定是否解码PT分割模式选择标记(PT分割模式选择标记判定)。CN信息解码部10在判定为解码PT分割模式选择标记的情况下(PT分割模式选择标记判定为是/TRUE),进入步骤S2707,在判定为不解码PT分割模式选择标记的情况下(PT分割模式选择标记判定为否/FALSE),进入步骤S2708。
(S2707)
在S2707中,CN信息解码部10解码PT分割模式选择标记pt_sel_flag。在此,pt_sel_flag=0表示将对象块进行BT分割,pt_sel_flag=1表示将对象块进行TT分割。
(S2708)
在S2708中,CN信息解码部10通过PT分割方向标记pt_dir_flag所表示的分割方向、以及PT分割模式选择标记pt_sel_flag所表示的分割模式将分割对象块进行分割。
(S2709~S2711)
接下来,对通过该分割而产生的块来进行反复执行PT信息解码处理的循环处理(S2709、S2710、S2711)。在该循环处理结束时,处理结束。
利用图68来说明PT信息解码处理例1的PT分割标记判定、PT分割模式选择标记判定、PT分割方向标记判定的详细。图68的(a)是示出表示PT分割标记判定处理的伪代码的一例的图,图68的(b)是示出表示PT分割模式选择标记判定处理的伪代码的一例的图,图68的(c)是示出表示PT分割方向标记判定处理的伪代码的一例的图。
(PT分割标记判定)
CN信息解码部10利用以下的条件1~条件3来进行PT分割标记判定。
条件1:成为分割的对象的块的高度为minPTSize×2以上、或成为分割的对象的块的宽度为minPTSize×2以上(height>=minPTSize*2||width>=minPTSize*2)。
条件2:分割对象块的宽度以及高度为表示PT尺寸的最大值的maxMTSize以下(width<=maxPTSize&&height<=maxPTSize)。
条件3:表示分割对象块的阶层的ptDepth小于maxPTDepth、或表示分割对象块的阶层的dqtDepth小于maxDQTDepth(ptDepth<maxPTDepth||dqtDepth<maxDQTDepth)。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为存在PT分割标记(TRUE)。此外,在上述条件1~3的任一者不满足的情况下,CN信息解码部10判定为不能PT分割(FALSE)。
(PT分割模式选择标记判定)
CN信息解码部10利用以下的条件1~条件3来进行PT分割模式选择标记判定。
条件1:成为分割的对象的块的高度为minPTSize×4以上、或成为分割的对象的块的宽度为minPTSize×4以上(height>=minPTSize*4||width>=minPTSize*4)。
条件2:分割对象块的宽度以及高度为表示MT尺寸的最大值的maxMTSize以下(width<=maxMTSize&&height<=maxMTSize)。
条件3:表示成为分割的对象的块的阶层的ptDepth小于maxPTDepth、且表示成为分割的对象的块的阶层的dqtDepth小于maxDQTDepth(ptDepth<maxPTDepth&&dqtDepth<maxDQTDepth)。
在满足上述条件1~3的全部的情况下,CN信息解码部10判定为需要PT分割模式选择标记的解码(TRUE)。此外,在不满足上述条件1~3的全部的情况下,CN信息解码部10判定为不需要PT分割模式选择标记的解码(FALSE)。
(PT分割方向标记判定)
CN信息解码部10利用以下的条件1~条件4来进行PT分割方向标记判定。
条件1:PT分割模式选择标记表示DQT分割(pt_sel_flag==MODE—DQT)。
条件2:成为分割的对象的块的高度为minPTSize×4以上、或成为分割的对象的块的宽度为minPTSize×4以上(height>=minPTSize*4||width>=minPTSize*4)。
条件3:分割对象块的宽度以及高度为表示MT尺寸的最大值的maxMTSize以下(width<=maxMTSize&&height<=maxMTSize)。
条件4:表示成为分割的对象的块的阶层的ptDepth小于maxPTDepth、且表示成为分割的对象的块的阶层的dqtDepth小于maxDQTDepth(ptDepth<maxPTDepth&&dqtDepth<maxDQTDepth)。
在满足上述条件1~4全部的情况下,CN信息解码部10判定为需要PT分割方向标记的解码(TRUE)。此外,在上述条件1~4的任一者不满足的情况下,CN信息解码部10判定为不需要PT分割方向标记的解码(FALSE)。
在PT信息解码处理例1中,哪怕一次进行了PT分割(DQT分割)之后,也限制(禁止)MT分割(QT分割)。此外,限制(禁止)TT分割的中心块的BT分割。此外,限制(禁止)BT分割的块中的相同方向的BT分割。
图69是表示PT分割标记pt_split_flag、PT分割方向标记pt_dir_flag、以及PT分割模式选择标记pt_sel_flag各自的值与形状的关系的表。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为0(pt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(b)所示的BT HOR(在图69中简记为“BTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为1(pt_sel_flag==1)的情况下,CN信息解码部10如成为图7的(e)所示的TT HOR(在图69中简记为“TTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为2(pt_sel_flag==2)的情况下,CN信息解码部10如成为图53的(e)所示的DQT HOR(在图69中简记为“DQTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==1)、PT分割模式选择标记为0(pt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(c)所示的BT VER(在图69中简记为“BTV”)那样进行分割。
在PT分割标记为1(βt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==0)、PT分割模式选择标记为1(pt_sel_flag==1)的情况下,CN信息解码部10如成为图7的(f)所示的TT VER(在图69中简记为“TTV”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==0)、PT分割模式选择标记为2(pt_sel_flag==2)的情况下,CN信息解码部10如成为图53的(d)所示的DQT VER(在图69中简记为“DQTV”)那样进行分割。
(PT信息解码处理例2)
利用图70来说明PT分割标记判定、PT分割模式选择标记判定、PT分割方向标记判定的详细。图70的(a)是示出表示PT分割标记判定处理的伪代码的一例的图,图70的(b)是示出表示PT分割模式选择标记判定处理的伪代码的一例的图,图70的(c)是示出表示PT分割方向标记判定处理的伪代码的一例的图。
(PT分割标记判定)
PT信息解码处理例2的PT分割标记判定的条件3与PT信息解码处理例1不同。PT信息解码处理例2的PT分割标记判定的条件3如下所述。
条件3:表示分割对象块的阶层的ptDepth小于maxPTDepth、或表示分割对象块的阶层的dftDepth小于maxDFTDepth(ptDepth<maxPTDepth||dftDepth<maxDFTDepth)。
(PT分割模式选择标记判定)
PT信息解码处理例2的PT分割模式选择标记判定的条件1、3与PT信息解码处理例1不同。PT信息解码处理例2的PT分割模式选择标记判定的条件1、3如下所述。
条件1:成为分割的对象的块的高度为minPTSize×8以上、或成为分割的对象的块的宽度为minPTSize×8以上(height>=minPTSize*8||width>=minPTSize*8)。
条件3:表示成为分割的对象的块的阶层的ptDepth小于maxPTDepth、且表示成为分割的对象的块的阶层的dftDepth小于maxDFTDepth(ptDepth<maxPTDepth&&dftDepth<maxDFTDepth)。
(PT分割方向标记判定)
PT信息解码处理例2的PT分割方向标记判定的条件1、2、4与PT信息解码处理例1不同。PT信息解码处理例2的PT分割方向标记判定的条件1、2、4如下所述。
条件1:PT分割模式选择标记表示DFT分割(pt_sel_flag==MODE—DFT)。
条件2:成为分割的对象的块的高度为minPTSize×8以上、或成为分割的对象的块的宽度为minPTSize×8以上(height>=minPTSize*8||width>=minPTSize*8)。
条件4:表示成为分割的对象的块的阶层的ptDepth小于maxPTDepth、且表示成为分割的对象的块的阶层的dftDepth小于maxDFTDepth(ptDepth<maxPTDepth&&dftDepth<maxDFTDepth)。
在PT信息解码处理例2中,哪怕一次进行了PT分割(DFT分割)之后,也限制(禁止)MT分割(QT分割)。
图71是表示PT分割标记pt_split_flag、PT分割方向标记pt_dir_flag、以及PT分割模式选择标记pt_sel_flag各自的值与形状的关系的表。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为0(pt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(b)所示的BT HOR(在图71中简记为“BTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为1(pt_sel_flag==1)的情况下,CN信息解码部10如成为图7的(e)所示的TT HOR(在图71中简记为“TTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为2(pt_sel_flag==2)的情况下,CN信息解码部10如成为图53的(g)所示的DFT HOR(在图71中简记为“DFTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==1)、PT分割模式选择标记为0(pt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(c)所示的BT VER(在图71中简记为“BTV”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==0)、PT分割模式选择标记为1(pt_sel_flag==1)的情况下,CN信息解码部10如成为图7的(f)所示的TT VER(在图71中简记为“TTV”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==0)、PT分割模式选择标记为2(pt_sel_flag==2)的情况下,CN信息解码部10如成为图53的(f)所示的DFT VER(在图71中简记为“DFTV”)那样进行分割。
(PT信息解码处理例3)
图72是说明本发明的一实施方式涉及的CN信息解码部10的PT信息解码处理的流程图。在本实施方式中,在为PT分割的情况下,与上述PT信息解码处理例1不同点在于,进行识别非对称的图案的标记(PT非对称标记pt_amt_flag)的解码处理。
S3201~S3207对应于上述PT信息解码处理例1的S2701~S2707,S3210~S3213对应于上述PT信息解码处理例1的S2708~S2711。
在S3206中,CN信息解码部10判定为解码PT分割模式选择标记的情况下,或继S3207之后,进入S3208。
(S3208)
CN信息解码部10在S3208中判定是否解码PT非对称标记。CN信息解码部10在判定为解码PT非对称标记的情况下,进入S3209,在判定为不解码PT非对称标记的情况下,记入S3210。
(S3209)
在S3209中,CN信息解码部10进行PT非对称标记pt_amt_flag的解码。在此,pt_amt_flag=0表示在对象块(对象节点)的分割方向为水平方向的情况下从上到下依次成为1∶4∶2∶1地分割,在对象块(对象节点)的分割方向为垂直方向的情况下从左到右依次成为1∶4∶2∶1地进行分割,mt_amt_flag=1表示在对象块(对象节点)的分割方向为水平方向的情况下从上到下依次成为1∶2∶4∶1地进行分割,在对象块(对象节点)的分割方向为垂直方向的情况下从左到右依次成为1∶2∶4∶1地进行分割。
利用图73来说明PT分割标记判定、PT分割模式选择标记判定、PT分割方向标记判定的详细。图73的(a)是示出表示PT分割标记判定处理的伪代码的一例的图,图73的(b)是示出表示PT分割模式选择标记判定处理的伪代码的一例的图,图73的(c)是示出表示PT分割方向标记判定处理的伪代码的一例的图。
(PT分割标记判定)
PT信息解码处理例3的PT分割标记判定的条件3与PT信息解码处理例1不同。PT信息解码处理例3的PT分割标记判定的条件3如下所述。
条件3:表示分割对象块的阶层的ptDepth小于maxPTDepth、或表示分割对象块的阶层的daptDepth小于maxDAQTDepth(ptDepth<maxPTDepth||daqtDepth<maxDAQTDepth)。
(PT分割模式选择标记判定)
PT信息解码处理例3的PT分割模式选择标记判定的条件3与PT信息解码处理例2不同。PT信息解码处理例3的PT分割模式选择标记判定的条件3如下所述。
条件3:表示成为分割的对象的块的阶层的ptDepth小于maxPTDepth、且表示成为分割的对象的块的阶层的daqtDepth小于maxDAQTDepth(ptDepth<maxPTDepth&&daqtDepth<maxDAQTDepth)。
(PT分割方向标记判定)
PT信息解码处理例3的PT分割方向标记判定的条件1、4与PT信息解码处理例2不同。PT信息解码处理例3的PT分割方向标记判定的条件1、4如下所述。
条件1:PT分割模式选择标记表示DAQT分割(pt_sel_flag==MODE_DAQT)。
条件4:表示成为分割的对象的块的阶层的ptDepth小于maxPTDepth、且表示成为分割的对象的块的阶层的dftDepth小于maxDFTDepth(ptDepth<maxPTDepth&&daqtDepth<maxDAQTDepth)。
在PT信息解码处理例3中,哪怕一次进行了PT分割(DAQT分割)之后,也限制(禁止)MT分割(QT分割)。
图74是表示PT分割标记pt_split_flag、PT分割方向标记pt_dir_flag、PT分割模式选择标记pt_sel_flag、以及PT非对称标记pt_amt_flag各自的值与形状的关系的表。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为0(pt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(b)所示的BT HOR(在图74中简记为“BTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为1(pt_sel_flag==1)的情况下,CN信息解码部10如成为图7的(e)所示的TT HOR(在图74中简记为“TTH”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为2(pt_sel_flag==2)、PT非对称标记为0(pt_amt_flag==0)的情况下,CN信息解码部10如成为图54的(c)所示的DAQTHOR 0(在图74中简记为“DAQTH0”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为0(pt_dir_flag==0)、PT分割模式选择标记为2(pt_sel_flag==2)、PT非对称标记为1(pt_amt_flag==1)的情况下,CN信息解码部10如成为图
54的(d)所示的DAQT HOR 1(在图74中简记为“DAQTH1”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==1)、PT分割模式选择标记为0(pt_sel_flag==0)的情况下,CN信息解码部10如成为图7的(c)所示的BT VER(在图74中简记为“BTV”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==1)、PT分割模式选择标记为1(pt_sel_flag==1)的情况下,CN信息解码部10如成为图7的(f)所示的TTVER(在图74中简记为“TTV”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==1)、PT分割模式选择标记为2(pt_sel_flag==2)、PT非对称标记为0(pt_amt_flag==0)的情况下,CN信息解码部10如成为图54的(a)所示的DAQT VER 0(在图74中简记为“DAQTV0”)那样进行分割。
在PT分割标记为1(pt_split_flag==1)、PT分割方向标记为1(pt_dir_flag==1)、PT分割模式选择标记为2(pt_sel_flag==2)、PT非对称标记为1(pt_amt_flag==1)的情况下,CN信息解码部10如成为图54的(b)所示的DAQT VER 1(在图74中简记为“DAQTV1”)那样进行分割。
(基于软件的实现例)
另外,可以通过计算机实现上述的实施方式中的图像编码装置11、图像解码装置31的一部分,例如,熵解码部301、预测参数解码部302、环路滤波器305、预测图像生成部308、逆量化/逆DCT部311、加法运算部312、预测图像生成部101、减法运算部102、DCT/量化部103、熵编码部104、逆量化/逆DCT部105、环路滤波器107、编码参数决定部110、预测参数编码部111。在该情况下,可以通过将用于实现该控制功能的程序记录至计算机可读取的记录介质,并使计算机系统读入并执行在该记录介质中记录的程序,由此来实现。另外,这里提及的“计算机系统”是在图像编码装置11、图像解码装置31的任一者中内置的计算机系统,包含OS、外围设备等的硬件。此外,“计算机可读取的记录介质”是指,软盘、磁光盘、ROM、CD-ROM等的可移动介质、内置于计算机系统的硬盘等的存储装置。进而,“计算机可读取的记录介质”也可以包含:如经由因特网等网络、电话线路等通信线路来发送程序的情况下的通信线那样,短时间动态地保持程序的介质;如成为该情况下的服务器、客户端的计算机系统内部的易失性存储器那样,将程序保持一定时间的介质。此外,上述程序可以是用于实现前述的功能的一部分的程序,也可以是能够通过进一步与已经记录至计算机系统的程序的组合来实现前述的功能的程序。
此外,也可以将上述的实施方式中的图像编码装置11、图像解码装置31的一部分或者全部作为LSI(Large ScaleIntegration,大规模集成电路)等集成电路来实现。图像编码装置11、图像解码装置31的各功能块可以单独进行处理器化,也可以将一部分或者全部集成进行处理器化。此外,集成电路化的方法并不限于LSI,也可以通过专用电路或者通用处理器来实现。此外,在由于半导体技术的进步而出现了代替LSI的集成电路化的技术的情况下,也可以利用基于该技术的集成电路。
以上,参照附图而详细地说明了本发明的一实施方式,但具体结构并不限于上述的结构,能够在不脱离本发明主旨的范围内进行各种设计变更等。
〔应用例〕
上述的图像编码装置11以及图像解码装置31能够搭载于进行运动图像的发送、接收、记录、再生的各种装置来利用。另外,运动图像既可以是通过摄像机等摄像到的自然运动图像,也可以是通过计算机等生成的人工运动图像(包含CG以及GUI)。
首先,参照图75来说明能够将上述的图像编码装置11以及图像解码装置31利用于运动图像的发送以及接收的情况。
图75的(a)是表示搭载了图像编码装置11的发送装置PROD_A的结构的框图。如图75的(a)所示,发送装置PROD_A具备:通过编码运动图像来获得编码数据的编码部PROD_A1、以编码部PROD_A1获得的编码数据来调制载波由此获得调制信号的调制部PROD_A2、和发送调制部PROD_A2获得的调制信号的发送部PROD_A3。上述的图像编码装置11作为该编码部PROD_A1被利用。
发送装置PROD_A作为输入至编码部PROD_A1的运动图像的供给源,也可以进一步具备摄像运动图像的摄像机PROD_A4、记录了运动图像的记录介质PROD_A5、用于从外部输入运动图像的输入端子PROD_A6、以及、生成或者加工图像的图像处理部A7。在图75的(a)中,虽然例示了发送装置PROD_A具备这些部件的全部的结构,但也可以省略一部分。
另外,记录介质PROD_A5既可以是记录了未被编码的运动图像的介质,也可以是记录了以与传输用的编码方式不同的记录用的编码方式被编码的运动图像的介质。在后者的情况下,使按照记录用的编码方式对从记录介质PROD_A5读出的编码数据进行解码的解码部(未图示)介于记录介质PROD_A5与编码部PROD_A1之间为宜。
图75的(b)是表示搭载了图像解码装置31的接收装置PROD_B的结构的框图。如图75的(b)所示,接收装置PROD_B具备接收调制信号的接收部PROD_B1、对接收部PROD_B1接收到的调制信号进行解调由此获得编码数据的解调部PROD_B2、和对解调部PROD_B2获得的编码数据进行解码由此获得运动图像的解码部PROD_B3。上述的图像解码装置31作为该解码部PROD_B3被利用。
接收装置PROD_B作为解码部PROD_B3输出的运动图像的供给目的地,也可以进一步具备显示运动图像的显示器PROD_B4、用于记录运动图像的记录介质PROD_B5、以及用于将运动图像输出至外部的输出端子PROD_B6。在图75的(b)中,虽然例示了接收装置PROD_B具备这些部件的全部的结构,但也可以省略一部分。
另外,记录介质PROD_B5既可以是用于记录未被编码的运动图像的介质,也可以是用于记录以与传输用的编码方式不同的记录用的编码方式被编码的数据。在后者的情况下,使按记录用的编码方式对从解码部PROD_B3获取到的运动图像进行编码的编码部(未图示)介于解码部PROD_B3与记录介质PROD_B5之间为宜。
另外,传输调制信号的传输介质既可以为无线,也可以为有线。此外,传输调制信号的传输形态既可以为广播(在此,是指发送目的地未预先确定的发送形态),也可以是通信(在此,是指发送目的地预先被确定的发送形态)。即,调制信号的传输可以通过无线广播、有线广播、无线通信、以及有线通信的任一种来实现。
例如,地面数字广播的广播站(广播设备等)/接收站(电视接收机等)是以无线广播收发调制信号的发送装置PRODA/接收装置PROD_B的一例。此外,有线电视广播的广播站(广播设备等)/接收站(电视接收机等)是以有线广播收发调制信号的发送装置PRODA/接收装置PROD_B的一例。
此外,利用了因特网的VOD(Video On Demand,视频点播)服务、运动图像共享服务等的服务器(工作站等)/客户端(电视接收机、个人计算机、智能手机等)是以通信来收发调制信号的发送装置PRODA/接收装置PROD_B的一例(通常,在LAN中作为传输介质可利用无线或者有线的任一种,在WAN中作为传输介质可利用有线)。在此,个人计算机包含台式PC、笔记本式PC、以及平板式PC。此外,智能手机也包含多功能便携电话终端。
另外,运动图像共享服务的客户端除了将从服务器下载的编码数据解码并显示于显示器的功能之外,还具有将由摄像机摄像到的运动图像进行编码并上传至服务器的功能。即,运动图像共享服务的客户端作为发送装置PROD_A以及接收装置PROD_B的双方发挥功能。
接下来,参照图76来说明能够将上述的图像编码装置11以及图像解码装置31利用于运动图像的记录以及再生。
图76的(a)是表示搭载了上述的图像编码装置11的记录装置PROD_C的结构的框图。如图76的(a)所示,记录装置PROD_C具备通过编码运动图像来获得编码数据的编码部PROD_C1、和将编码部PROD_C1获得的编码数据写入至记录介质PROD_M的写入部PROD_C2。上述的图像编码装置11作为该编码部PROD_C1被利用。
另外,记录介质PROD_M既可以是(1)如HDD(Hard Disk Drive,硬盘驱动器)、SSD(Solid_State Drive,固态驱动器)等那样内置于记录装置PROD_C的类型的介质,也可以是(2)如SD存储卡、USB(Universal Serial Bus,通用串行总线)闪存等那样连接于记录装置PROD_C的类型的介质,还可以是(3)如DVD(Digital Versatile Disc,数字多功能盘)、BD(Blu-ray_Disc(蓝光盘):注册商标)等那样装填到内置于记录装置PROD_C的驱动装置(未图示)的介质。
此外,记录装置PROD_C作为输入至编码部PROD_C1的运动图像的供给源,可以进一步具备摄像运动图像的摄像机PROD_C3、用于从外部输入运动图像的输入端子PROD_C4、用于接收运动图像的接收部PROD_C5、以及、生成或者加工图像的图像处理部PROD_C6。在图76的(a)中,虽然例示了记录装置PROD_C具备这些部件的全部的结构,但也可以省略一部分。
另外,接收部PROD_C5既可以接收未被编码的运动图像,也可以接收以与记录用的编码方式不同的传输用的编码方式被编码的编码数据。在后者的情况下,使对以传输用的编码方式被编码的编码数据进行解码的传输用解码部(未图示)介于接收部PROD_C5与编码部PROD_C1之间为宜。
作为这样的记录装置PROD_C,例如可列举DVD记录机、BD记录机、HDD(Hard DiskDrive,硬盘驱动器)记录机等(在该情况下,输入端子PROD_C4或者接收部PROD_C5成为运动图像的主供给源)。此外,摄影机(在该情况下,摄像机PROD_C3成为运动图像的主供给源)、个人计算机(在该情况下,接收部PROD_C5或者图像处理部C6成为运动图像的主供给源)、智能手机(在该情况下,摄像机PROD_C3或者接收部PROD_C5成为运动图像的主供给源)等也是这样的记录装置PROD_C的一例。
图76的(b)是表示搭载了上述的图像解码装置31的再生装置PROD_D的结构的框图。如图76的(b)所示,再生装置PROD_D具备将写入至记录介质PROD_M的编码数据读出的读出部PROD_D1、和通过将读出部PROD_D1读出的编码数据进行解码来获得运动图像的解码部PROD_D2。上述的图像解码装置31作为该解码部PROD_D2被利用。
另外,记录介质PROD_M既可以是(1)如HDD、SSD等那样内置于再生装置PROD_D的类型的介质,也可以是(2)如SD存储卡、USB闪存等那样连接于再生装置PROD_D的类型的介质,还可以是(3)如DVD、BD等那样装填到内置于再生装置PROD_D的驱动装置(未图示)的介质。
此外,再生装置PROD_D作为解码部PROD_D2输出的运动图像的供给目的地,也可以进一步具备显示运动图像的显示器PROD_D3、用于将运动图像输出至外部的输出端子PROD_D4、以及发送运动图像的发送部PROD_D5。在图76的(b)中,虽然例示了再生装置PROD_D具备这些部件的全部的结构,但也可以省略一部分。
另外,发送部PROD_D5既可以发送未被编码的运动图像,也可以发送以与记录用的编码方式不同的传输用的编码方式被编码的编码数据。在后者的情况下,使以传输用的编码方式将运动图像进行编码的编码部(未图示)介于解码部PROD_D2与发送部PROD_D5之间为宜。
作为这样的再生装置PROD_D,例如可列举DVD播放机、BD播放机、HDD播放机等(在该情况下,电视接收机等连接的输出端子PROD_D4成为运动图像的主供给目的地)。此外,电视接收机(在该情况下,显示器PROD_D3成为运动图像的主供给目的地)、数字标牌(也称为电子招牌、电子公告板等,显示器PROD_D3或者发送部PROD_D5成为运动图像的主供给目的地)、台式PC(在该情况下,输出端子PROD_D4或者发送部PROD_D5成为运动图像的主供给目的地)、笔记本式或者平板式PC(在该情况下,显示器PROD_D3或者发送部PROD_D5成为运动图像的主供给目的地)、智能手机(在该情况下,显示器PROD_D3或者发送部PROD_D5成为运动图像的主供给目的地)等也是这样的再生装置PROD_D的一例。
(硬件的实现以及软件的实现)
此外,上述的图像解码装置31以及图像编码装置11的各块既可以通过形成在集成电路(IC芯片)上的逻辑电路以硬件的方式实现,也可以利用CPU(Central ProcessingUnit,中央处理单元)以软件的方式实现。
在后者的情况下,上述各装置具备执行实现各功能的程序的命令的CPU、保存了上述程序的ROM(Read Only Memory,只读存储器)、展开上述程序的RAM(RandomAccessMemory,随机存取存储器)、保存上述程序以及各种数据的存储器等的存储装置(记录介质)等。而且,本发明的实施方式的目的,通过将以计算机可读取的方式记录了作为实现上述的功能的软件的上述各装置的控制程序的程序代码(执行形式程序、中间代码程序、源程序)的记录介质供给至上述各装置,并由该计算机(或者CPU、MPU)读出并执行在记录介质中记录的程序代码,由此也能够实现。
作为上述记录介质,例如,能够使用磁带、盒式磁带等的带类、软盘(注册商标)/硬盘等的磁盘、包含CD-ROM(Compact Disc Read-Only Memory,光盘只读存储器)/MO盘(Magneto-Optical disc,磁光盘)/MD(Mini Disc,迷你盘)/DVD(DigitalVersatile Disc,数字多功能盘)/CD-R(CD Recordable)/蓝光盘(Blu-ray Disc:注册商标)等的光盘的盘类、IC卡(包含存储卡)/光卡等的卡类、掩模ROM/EPROM(Erasable Programmable Read-OnlyMemory,可擦除可编程只读存储器)/EEPROM(Electrically Erasable andProgrammable Read-OnlyMemory(电可擦除可编程只读存储器):注册商标)/闪速ROM等的半导体存储器类、或PLD(Programmable logic device,可编程逻辑器件)、FPGA(FieldProgrammable Gate Array,现场可编程门阵列)等的逻辑电路类等。
此外,可以将上述各装置构成为能够与通信网络连接,并经由通信网络供给上述程序代码。该通信网络只要能够传输程序代码即可,没有特别限定。例如,能够利用因特网、内部网、外部网、LAN(Local Area Network,局域网)、ISDN(Integrated ServicesDigitalNetwork,综合业务数字网)、VAN(Value-Added Network,增值网络)、CATV(CommunityAntenna television/CableTelevision,公用天线电视/有线电视)通信网、虚拟专用网(Virtual Private Network)、电话线路网、移动体通信网、卫星通信网等。此外,构成该通信网络的传输介质也只要是能够传输程序代码的介质即可,并不限定于特定的结构或者种类。例如,既能够以IEEE(Instituteof ElectricalandElectronic Engineers,电气与电子工程师学会)1394、USB、电力线输送、有线TV线路、电话线、ADSL(AsymmetricDigitalSubscriberLine,非对称数字用户线)线路等的有线来利用,也能够以如IrDA(Infrared DataAssociation,红外数据协会)、遥控器那样的红外线、BlueTooth(注册商标)、IEEE802.11无线、HDR(High Data Rate,高数据速率)、NFC(Near FieldCommunication,近场通信)、DLNA(Digital Living Network Alliance(数字生活网络联盟):注册商标)、便携电话网、卫星线路、地面数字广播网等的无线来利用。另外,本发明的实施方式也能够以上述程序代码通过电子传输来具体化的、埋入到载波的计算机数据信号的方式来实现。
本发明的实施方式并不限定于上述的实施方式,能够在权利要求所示的范围内进行各种变更。即,关于组合在权利要求所示的范围内适当变更的技术手段而得到的实施方式,也包含于本发明的技术范围。
(关联申请的相互参照)
本申请对于在2016年12月16日提出申请的日本专利申请:特愿2016-244902以及在2016年12月22日提出申请的日本专利申请:特愿2016-249778要求享有优先权,通过参照它们而将其全部内容包含于本申请中。
产业上的可利用性
本发明的实施方式能够适当地应用于将图像数据被编码的编码数据进行解码的图像解码装置、以及生成图像数据被编码的编码数据的图像编码装置。此外,能够适当地应用于由图像编码装置生成并由图像解码装置参照的编码数据的数据构造。

Claims (1)

1.一种图像解码方法,按每个编码树单元来对图片进行解码,其特征在于,
基于对象块的宽度、上述对象块的高度、编码单元的最小尺寸、编码单元的最大尺寸和上述对象块的阶层,进行BT分割可能判定;
基于上述对象块的宽度、上述对象块的高度、编码单元的最小尺寸、编码单元的最大尺寸和上述对象块的阶层,进行TT分割可能判定;
判定是否需要对PT分割标记进行解码,该PT分割标记表示是否对上述对象块进行二叉树分割即BT分割或三叉树分割即TT分割,在需要解码的情况下对PT分割标记进行解码;
在上述PT分割标记表示对上述对象块进行二叉树分割或三叉树分割的情况下,判定是否需要对表示上述对象块的分割方向的分割方向标记进行解码,在需要解码的情况下对上述分割方向标记进行解码;
判定是否需要对表示二叉树分割或三叉树分割的分割模式选择标记进行解码,在需要解码的情况下对上述分割模式选择标记进行解码;以及
基于上述分割方向标记和上述分割模式选择标记,对上述对象块进行二叉树分割或三叉树分割,
在所述图像解码方法中,
判定上述BT分割可能判定的追加条件,在上述对象块是通过对直接上级块进行三叉树分割而得到的三个块之中的中央块、且在水平方向上对上述直接上级块进行三叉树分割的情况下,禁止在水平方向上对上述对象块进行二叉树分割。
CN202310674074.2A 2016-12-16 2017-12-13 图像解码方法 Pending CN116567236A (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2016244902 2016-12-16
JP2016-244902 2016-12-16
JP2016249778 2016-12-22
JP2016-249778 2016-12-22
PCT/JP2017/044732 WO2018110600A1 (ja) 2016-12-16 2017-12-13 画像復号装置、および画像符号化装置
CN201780077762.3A CN110178372B (zh) 2016-12-16 2017-12-13 图像解码装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201780077762.3A Division CN110178372B (zh) 2016-12-16 2017-12-13 图像解码装置

Publications (1)

Publication Number Publication Date
CN116567236A true CN116567236A (zh) 2023-08-08

Family

ID=62558871

Family Applications (4)

Application Number Title Priority Date Filing Date
CN202310674074.2A Pending CN116567236A (zh) 2016-12-16 2017-12-13 图像解码方法
CN202310670982.4A Pending CN116567235A (zh) 2016-12-16 2017-12-13 图像解码装置
CN201780077762.3A Active CN110178372B (zh) 2016-12-16 2017-12-13 图像解码装置
CN202310673272.7A Pending CN116866575A (zh) 2016-12-16 2017-12-13 图像解码装置

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN202310670982.4A Pending CN116567235A (zh) 2016-12-16 2017-12-13 图像解码装置
CN201780077762.3A Active CN110178372B (zh) 2016-12-16 2017-12-13 图像解码装置
CN202310673272.7A Pending CN116866575A (zh) 2016-12-16 2017-12-13 图像解码装置

Country Status (6)

Country Link
US (3) US11070801B2 (zh)
EP (1) EP3557870A4 (zh)
JP (2) JP7012025B2 (zh)
CN (4) CN116567236A (zh)
AU (2) AU2017377490B2 (zh)
WO (1) WO2018110600A1 (zh)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109479131B (zh) * 2016-06-24 2023-09-01 世宗大学校产学协力团 视频信号处理方法及装置
MX2019002383A (es) 2017-02-06 2019-07-08 Huawei Tech Co Ltd Metodo y aparato de codificacion y metodo y aparato de decodificacion.
CN116684604A (zh) * 2017-03-31 2023-09-01 松下电器(美国)知识产权公司 图像编码装置、图像解码装置及存储介质
CN108965894B (zh) * 2017-05-27 2021-12-21 华为技术有限公司 一种视频图像的编解码方法及装置
CN112601083A (zh) 2017-06-28 2021-04-02 华为技术有限公司 一种图像数据的编码、解码方法及装置
WO2019009502A1 (ko) * 2017-07-06 2019-01-10 삼성전자 주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
CN117336509A (zh) * 2017-07-06 2024-01-02 Lx 半导体科技有限公司 图像编码/解码方法、发送方法和数字存储介质
CN116489353A (zh) 2017-09-28 2023-07-25 Lg 电子株式会社 图像编译系统中根据块分离结构的图像解码方法和设备
SG11202003817WA (en) * 2017-11-01 2020-05-28 Vid Scale Inc Multi-type tree coding
WO2019141012A1 (en) * 2018-01-18 2019-07-25 Mediatek Inc. Video processing methods and apparatuses for processing video data coded in large size coding units
CA3113521C (en) * 2018-03-05 2024-01-16 Panasonic Intellectual Property Corporation Of America Video coding in which a block is split into multiple sub-blocks in a first direction, whereby interior sub-blocks are prohibited from splitting in the first direction
CN111819857A (zh) * 2018-03-14 2020-10-23 联发科技股份有限公司 用于视频编解码的优化分割结构的方法和装置
CN111869215B (zh) * 2018-05-31 2023-06-06 华为技术有限公司 受限长距离运动矢量预测方法及装置
WO2019234612A1 (en) * 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Partition tree with four sub-blocks symmetric or asymmetric
EP3863286A4 (en) * 2018-10-02 2021-12-01 Sony Group Corporation IMAGE PROCESSING DEVICE, METHOD AND PROGRAM
JP2022505470A (ja) * 2018-11-08 2022-01-14 インターデジタル ヴイシー ホールディングス, インコーポレイテッド ブロックの面に基づくビデオの符号化又は復号のための量子化
WO2020111240A1 (ja) * 2018-11-30 2020-06-04 株式会社Jvcケンウッド 画像復号化装置、画像復号化方法及び画像復号化プログラム
JP6835177B2 (ja) * 2018-11-30 2021-02-24 株式会社Jvcケンウッド 画像復号化装置、画像復号化方法及び画像復号化プログラム
JP2022024208A (ja) * 2018-12-07 2022-02-09 シャープ株式会社 動画像復号装置および動画像符号化装置
CN113396589A (zh) * 2019-02-11 2021-09-14 北京字节跳动网络技术有限公司 基于五叉树的视频块分割
WO2020182182A1 (en) * 2019-03-12 2020-09-17 Beijing Bytedance Network Technology Co., Ltd. Compound triple tree in video coding
US11363299B2 (en) 2019-12-12 2022-06-14 Panasonic Intellectual Property Corporation Of America Encoding and decoding with merge mode and block partition index
JP7453581B2 (ja) * 2020-02-25 2024-03-21 日本電信電話株式会社 符号化方法、符号化装置及びプログラム
WO2021180163A1 (en) * 2020-03-11 2021-09-16 Beijing Bytedance Network Technology Co., Ltd. Adaptation parameter set signaling based on color format
WO2021252545A1 (en) 2020-06-09 2021-12-16 Bytedance Inc. Signaling constraints in non-scalable nested video syntax elements
US11688113B1 (en) * 2021-07-06 2023-06-27 Wells Fargo Bank, N.A. Systems and methods for generating a single-index model tree

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2837186B1 (en) * 2012-04-12 2018-08-22 HFI Innovation Inc. Method and apparatus for block partition of chroma subsampling formats
US9912944B2 (en) * 2012-04-16 2018-03-06 Qualcomm Incorporated Simplified non-square quadtree transforms for video coding
CN104704827B (zh) 2012-11-13 2019-04-12 英特尔公司 用于下一代视频的内容自适应变换译码
WO2014120368A1 (en) * 2013-01-30 2014-08-07 Intel Corporation Content adaptive entropy coding for next generation video
WO2015099488A1 (ko) * 2013-12-26 2015-07-02 삼성전자 주식회사 뎁스 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
JP2018535607A (ja) * 2015-11-24 2018-11-29 サムスン エレクトロニクス カンパニー リミテッド 映像を符号化/復号する方法、及びその装置
US10212444B2 (en) * 2016-01-15 2019-02-19 Qualcomm Incorporated Multi-type-tree framework for video coding
US10284845B2 (en) * 2016-05-25 2019-05-07 Arris Enterprises Llc JVET quadtree plus binary tree (QTBT) structure with multiple asymmetrical partitioning
MX2018014493A (es) * 2016-05-25 2019-08-12 Arris Entpr Llc Particionamiento binario, ternario, cuaternario para jvet.
US10326989B2 (en) * 2016-05-25 2019-06-18 Arris Enterprises Llc General block partitioning method
CN112689147B (zh) * 2016-05-28 2023-10-13 寰发股份有限公司 视频数据处理方法以及装置
US10609423B2 (en) * 2016-09-07 2020-03-31 Qualcomm Incorporated Tree-type coding for video coding
GB2557430B (en) * 2016-10-12 2020-01-15 Mediatek Inc Methods and apparatuses of constrained multi-type-tree block partition for video coding
US10779004B2 (en) * 2016-10-12 2020-09-15 Mediatek Inc. Methods and apparatuses of constrained multi-type-tree block partition for video coding
CN116684604A (zh) * 2017-03-31 2023-09-01 松下电器(美国)知识产权公司 图像编码装置、图像解码装置及存储介质

Also Published As

Publication number Publication date
EP3557870A1 (en) 2019-10-23
US11070801B2 (en) 2021-07-20
US20210352286A1 (en) 2021-11-11
JP7223886B2 (ja) 2023-02-16
AU2017377490A1 (en) 2019-07-25
JPWO2018110600A1 (ja) 2019-10-24
CN116866575A (zh) 2023-10-10
JP2022068147A (ja) 2022-05-09
JP7012025B2 (ja) 2022-01-27
WO2018110600A1 (ja) 2018-06-21
AU2022206736B2 (en) 2023-09-14
CN110178372B (zh) 2023-06-27
US20230319274A1 (en) 2023-10-05
US11722664B2 (en) 2023-08-08
EP3557870A4 (en) 2020-05-13
AU2017377490B2 (en) 2022-04-21
US20190364279A1 (en) 2019-11-28
CN110178372A (zh) 2019-08-27
AU2022206736A1 (en) 2022-08-11
CN116567235A (zh) 2023-08-08

Similar Documents

Publication Publication Date Title
CN110178372B (zh) 图像解码装置
US11503319B2 (en) Image coding apparatus and image decoding apparatus
CN110089115B (zh) 图像解码装置、图像编码装置
US10863186B2 (en) Image decoding apparatus and image coding apparatus
WO2018116925A1 (ja) イントラ予測画像生成装置、画像復号装置、および画像符号化装置
WO2018116802A1 (ja) 画像復号装置、画像符号化装置、及び画像予測装置
WO2018110203A1 (ja) 動画像復号装置、および動画像符号化装置
CN110169067B (zh) 图像解码装置以及图像编码装置
US11863764B2 (en) Video encoding device and video decoding device
JP7241153B2 (ja) 画像復号装置
CN113545051A (zh) 使用块大小限制的视频数据块的重构
CN112204978B (zh) 图像解码装置以及图像编码装置
WO2020184366A1 (ja) 画像復号装置
WO2019131349A1 (ja) 画像復号装置、画像符号化装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20231219

Address after: Japan's Osaka City. Sakai Sakai district town 1 times

Applicant after: Sharp Corp.

Address before: Japan's Osaka City. Sakai Sakai district town 1 times

Applicant before: Sharp Corp.

Applicant before: FG Innovation Co.,Ltd.

TA01 Transfer of patent application right