CN117795962A - 图像解码装置、图像解码方法及程序 - Google Patents

图像解码装置、图像解码方法及程序 Download PDF

Info

Publication number
CN117795962A
CN117795962A CN202280055357.2A CN202280055357A CN117795962A CN 117795962 A CN117795962 A CN 117795962A CN 202280055357 A CN202280055357 A CN 202280055357A CN 117795962 A CN117795962 A CN 117795962A
Authority
CN
China
Prior art keywords
syntax
decoding
value
prediction mode
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280055357.2A
Other languages
English (en)
Inventor
木谷佳隆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Publication of CN117795962A publication Critical patent/CN117795962A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

解码部(210)在第一内部参数有效且第二语法的值为1的情况下,当特定解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法有效时,不对特定解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法进行解码,在所述解码目标块所属的切片类型为B切片的情况下,对所述第四语法进行解码,在所述解码目标块所属的切片类型不为B切片的情况下,不对所述第四语法进行解码,在不满足第一内部参数有效且第二语法的值为1的条件的情况下,不对第四语法进行解码。

Description

图像解码装置、图像解码方法及程序
技术领域
本发明涉及一种图像解码装置、图像解码方法及程序。
背景技术
在非专利文献1中,公开一种GPM(Geometric Partitioning Mode:几何划分模式)。
GPM将矩形块倾斜地一分为二,分别对其进行运动补偿。具体而言,在GPM中,分割而成的两个区域分别利用融合模式的运动矢量进行运动补偿,并通过加权平均进行合成。作为倾斜的分割图案,根据角度和位置而准备有64种图案。
现有技术文献
专利文献
非专利文献1:ITU-T H.266/VVC
非专利文献2:JVET-W0024、“EE2:Summary Report on Enhanced Compressionbeyond VVC capability”
发明内容
发明要解决的课题
然而,非专利文献1中公开的GPM限定于融合模式,因此具有编码性能存在改善余地的问题点。
因此,本发明是鉴于上述的课题而作出的,其目的在于,提供一种在对GPM追加帧内预测模式的情况下,通过禁止由选择率低的不同的两个帧内预测模式构成的GPM,与由GPM实现的客观图像质量改善相比,使所需的代码量减少,因此能够期待进一步改善由GPM实现的编码性能的图像解码装置、图像解码方法及程序。
用于解决课题的手段
本发明的第一特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,在控制能否应用所述解码目标块的几何分割模式的第一内部参数有效,且所述第二语法的值为1的情况下,当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法有效时,不对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法进行解码,当所述第三语法不有效时,在所述解码目标块所属的切片类型为B切片的情况下,对所述第四语法进行解码,在所述解码目标块所属的切片类型不为B切片的情况下,不对所述第四语法进行解码,在不满足所述第一内部参数有效,且所述第二语法的值为1的条件的情况下,不对所述第四语法进行解码。
本发明的第二特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,在能够应用于所述解码目标块的几何分割模式的帧内预测模式为两种以上的情况下,当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值为1时,对控制向所述解码目标块的几何分割模式追加的帧内预测模式的种类的索引进行解码,特定所述分割区域0的帧内预测模式,当所述第三语法的值不为1时,在表示所述解码目标块的融合候补的最大数的第二内部参数的值大于1的情况下,解码相对于所述分割区域0的融合索引,特定所述分割区域0的融合候补,在所述第二内部参数的值为1以下的情况下,不解码相对于所述分割区域0的融合索引而特定所述分割区域0的融合候补。
本发明的第三特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,在能够应用于所述解码目标块的几何分割模式的帧内预测模式为两种以上的情况下,当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值为1时,解码相对于所述解码目标块的几何分割模式分割的分割区域1的融合索引,特定所述分割区域1的融合候补,当所述第三语法的值不为1时,在特定所述分割区域1的预测模式是否为帧内预测模式的第四语法的值为1的情况下,对控制向所述解码目标块的几何分割模式追加的帧内预测模式的种类的索引进行解码,特定所述分割区域1的帧内预测模式,在所述第四语法的值不为1的情况下,当表示所述解码目标块的融合候补的最大数的第二内部参数的值大于2时,解码相对于所述分割区域1的融合索引,特定所述分割区域1的融合候补,当所述第二内部参数的值为2以下时,解码相对于所述分割区域1的融合索引,特定所述分割区域1的融合候补。
本发明的第四特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值,对特定是否对所述分割区域0应用融合运动矢量差的第五语法的解码进行控制。
本发明的第五特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法的值,对特定是否对所述分割区域1应用融合运动矢量差的第六语法的解码进行控制。
本发明的第六特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据对能否应用所述解码目标块的几何分割模式进行控制的第一内部参数的值,对特定是否对所述解码目标块的几何分割模式分割的分割区域0应用融合运动矢量差的第五语法的解码进行控制,所述解码部构成为,根据所述第一内部参数的值,对特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的解码进行控制。
本发明的第七特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据所述第二语法的值和特定是否对所述解码目标块的几何分割模式分割的分割区域0应用融合运动矢量差的第五语法的值,对特定是否对所述分割区域0应用帧内预测模式的第三语法的解码进行控制。
本发明的第八特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据所述第二语法的值、特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的值和特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值,对特定是否对所述分割区域1应用帧内预测模式的第四语法的解码进行控制。
本发明的第九特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据特定是否对所述解码目标块的几何分割模式分割的分割区域0应用融合运动矢量差的第五语法的值和特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的值,对特定有无应用对所述分割区域0和所述分割区域1应用的模板匹配的第十一语法的解码进行控制。
本发明的第十特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值,对特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的解码进行控制。
本发明的第十一特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据控制能否应用所述解码目标块的几何分割模式的第一内部参数的值、所述第二语法的值、特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值和特定是否对所述分割区域0应用融合运动矢量差的第五语法的值,对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法的解码进行控制。
本发明的第十二特征是一种图像解码装置,其主旨在于,具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值和特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法的值或特定能否对所述分割区域0应用融合运动矢量差的第五语法的值和特定是否对所述分割区域1应用融合运动矢量差的第六语法的值,对特定有无应用对所述分割区域0和所述分割区域1应用的模板匹配的第十一语法的解码进行控制。
本发明的第十三特征是一种图像解码方法,其主旨在于,具有:对控制能否应用解码目标序列的几何分割模式的第一语法进行解码的工序;根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制的工序;在控制能否应用所述解码目标块的几何分割模式的第一内部参数有效,且所述第二语法的值为1的情况下,当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法有效时,不对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法进行解码的工序;当所述第三语法不有效时,在所述解码目标块所属的切片类型为B切片的情况下,对所述第四语法进行解码的工序;在所述解码目标块所属的切片类型不为B切片的情况下,不对所述第四语法进行解码的工序;以及在不满足所述第一内部参数有效,且所述第二语法的值为1的条件的情况下,不对所述第四语法进行解码的工序。
本发明的第十四特征是一种程序,其主旨在于,其使计算机作为图像解码装置发挥功能,其中,所述图像解码装置具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,所述解码部构成为,在控制能否应用所述解码目标块的几何分割模式的第一内部参数有效,且所述第二语法的值为1的情况下,当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法有效时,不对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法进行解码,当所述第三语法不有效时,在所述解码目标块所属的切片类型为B切片的情况下,对所述第四语法进行解码,在所述解码目标块所属的切片类型不为B切片的情况下,不对所述第四语法进行解码,在不满足所述第一内部参数有效,且所述第二语法的值为1的条件的情况下,不对所述第四语法进行解码。
发明效果
根据本发明,能够提供在对GPM追加帧内预测模式的情况下,通过禁止由选择率低的不同的两个帧内预测模式构成的GPM,与由GPM实现的客观图像质量改善相比,使所需的代码量减少,因此能够期待进一步改善由GPM实现的编码性能的图像解码装置、图像解码方法及程序。
附图的简单说明
图1是表示一实施方式所涉及的图像处理系统1的结构的一例的图。
图2是表示一实施方式所涉及的图像编码装置100的功能块的一例的图。
图3是表示一实施方式所涉及的图像解码装置200的功能块的一例的图。
图4是表示通过非专利文献1所公开的几何分割模式,矩形的解码目标块由几何分割模式的分割线一分为二呈几何形状的分割区域0和分割区域1的情况的一例的图。
图5是表示相对于本实施方式所涉及的GPM应用帧内预测模式的一例的图。
图6是表示由非专利文献1所公开的解码部210接收的编码数据的结构的一例的图。
图7是表示解码部210根据SPS单元的GPM相关标志来特定能否应用GPM和能否相对于GPM应用帧内预测模式的方法的一例的流程图。
图8是表示由解码部210判定解码目标块有无应用GPM的方法的一例的流程图。
图9是表示由解码部210判定解码目标块的块单元的GPM分割模式(分割线的种类)的方法的一例的流程图。
图10是表示由解码部210进行的分割区域0有无应用帧内预测模式的判定方法的流程图。
图11是表示由解码部210进行的分割区域1有无应用帧内预测模式的判定方法的流程图。
图12是表示由解码部210进行的在应用GPM的帧内预测模式为一种的情况下特定分割区域0的预测模式的方法的一例的流程图。
图13是表示由解码部210进行的在应用GPM的帧内预测模式为一种的情况下特定分割区域1的预测模式的方法的一例的流程图。
图14是表示由解码部210进行的在应用GPM的帧内预测模式为两种以上的情况下特定分割区域0的预测模式的方法的一例的流程图。
图15是表示由解码部210进行的在应用GPM的帧内预测模式为两种以上的情况下特定分割区域1的预测模式的方法的一例的流程图。
图16是表示由解码部210进行的根据分割区域0有无应用帧内预测模式来判定分割区域0有无应用融合运动矢量差的判定方法的流程图。
图17是表示由解码部210进行的根据分割区域1有无应用帧内预测模式来判定分割区域1有无应用融合运动矢量差的判定方法的流程图。图18表示由解码部210进行的根据有无应用几何分割模式来判定分割区域0和分割区域1有无应用融合运动矢量差的判定方法的流程图。
图19是表示由解码部210进行的根据分割区域0有无应用融合运动矢量差来判定分割区域0有无应用帧内预测模式的判定方法的流程图。
图20是表示由解码部210进行的根据分割区域1有无应用融合运动矢量差和分割区域0有无应用帧内预测模式来判定分割区域1有无应用帧内预测模式的判定方法的流程图。
图21是表示由解码部210进行的根据分割区域0有无应用融合运动矢量差来判定分割区域0的融合运动矢量差的距离和方向的判定方法的流程图。
图22是表示由解码部210进行的根据分割区域1有无应用融合运动矢量差来判定分割区域1的融合运动矢量差的距离和方向的判定方法的流程图。
图23是表示由解码部210进行的根据分割区域0和分割区域1有无应用融合运动矢量差来判定有无应用模板匹配的判定方法的流程图。
图24是表示由解码部210进行的根据分割区域0有无应用帧内预测模式来判定分割区域1有无应用融合运动矢量差的判定方法的流程图。
图25是表示由解码部210进行的根据分割区域0有无应用帧内预测模式和分割区域0有无应用融合运动矢量差来判定分割区域1有无应用融合运动矢量差的判定方法的流程图。
图26是表示由解码部210进行的根据分割区域0和分割区域1有无应用融合运动矢量差或由解码部210进行的根据分割区域0和分割区域1有无应用帧内预测模式来判定有无应用模板匹配的判定方法的流程图。
符号说明
10:图像处理系统;100:图像编码装置;111、241:帧间预测部;112、242:帧内预测部;113、243:合成部;121:减法器;122、230:加法器;131:变换/量化部;132、220:反向变换/反向量化部;140:编码部;150、250:环路滤波处理部;160、260:帧缓冲器;200:图像解码装置;210:解码部。
具体实施方式
以下,一边参考附图一边说明本发明的实施方式。此外,以下的实施方式中的构成要素能够适当地与现有的构成要素等进行替换,并且能够进行包括与其他现有的构成要素的组合的各种变形。因此,不依据以下的实施方式的记载来限定权利要求书中记载的技术方案的内容。
<第一实施方式>
以下,参考图1~图26,对本发明的第一实施方式所涉及的图像处理系统10进行说明。图1是表示本实施方式所涉及的图像处理系统10的图。
(图像处理系统10)
如图1所示,本实施方式所涉及的图像处理系统10具有图像编码装置100和图像解码装置200。
图像编码装置100构成为通过对输入图像信号(画面)进行编码来生成编码数据。图像解码装置200构成为通过对编码数据进行解码来生成输出图像信号。
在此,所述编码数据可以从图像编码装置100经由传输路径发送到图像解码装置200。另外,编码数据也可以在被存储于存储介质后,从图像编码装置100提供给图像解码装置200。
(图像编码装置100)
以下,参考图2,对本实施方式所涉及的图像编码装置100进行说明。图2是表示本实施方式所涉及的图像编码装置100的功能块的一例的图。
如图2所示,图像编码装置100具有帧间预测部111、帧内预测部112、合成部113、减法器121、加法器122、变换/量化部131、反向变换/反向量化部132、编码部140、环路滤波处理部150和帧缓冲器160。
帧间预测部111构成为通过帧间预测(inter-frame prediction)来生成帧间预测信号。
具体而言,帧间预测部111构成为通过对编码目标帧(目标帧)与存储于帧缓冲器160的参考帧进行比较来特定参考帧所含的参考块,并对特定的参考块确定运动矢量(MV:Motion Vector)。在此,参考帧是与目标帧不同的帧。
另外,帧间预测部111构成为根据参考块和运动矢量,按目标块生成编码目标块(以下,目标块)所含的帧间预测信号。
另外,帧间预测部111构成为将帧间预测信号输出到合成部113。
另外,虽然在图2中未图示,但帧间预测部111构成为将帧间预测的控制有关的信息(具体而言,帧间预测模式、运动矢量、参考帧列表、参考帧编号等信息)输出到编码部140。
帧内预测部112构成为通过帧内预测(intra-frame prediction)来生成帧内预测信号。
具体而言,帧内预测部112构成为特定目标帧所含的参考块,并根据所特定的参考块按目标块生成帧内预测信号。在此,参考块是参考目标块的块。例如,参考块是与目标块相邻的块。
另外,帧内预测部112构成为将帧内预测信号输出到合成部113。
另外,虽然在图2中未图示,但帧内预测部112构成为将帧内预测的控制有关的信息(具体而言,帧内预测模式等信息)输出到编码部140。
合成部113构成为将从帧间预测部111输入的帧间预测信号或/和从帧内预测部112输入的帧内预测信号使用预先设定的权重系数进行合成,并将所合成的预测信号(以下,统称为预测信号)输出到减法器121和加法器122。
在此,关于合成部113的帧间预测信号或/和帧内预测信号的合成处理,由于也能够在本实施方式中采用与非专利文献1相同的结构,因此省略说明。
减法器121构成为从输入图像信号减去预测信号,将预测残差信号输出到变换/量化部131。在此,减法器121构成为生成预测残差信号,其是由帧内预测或帧间预测生成的预测信号与输入图像信号的差。
加法器122构成为将从合成部113输出的预测信号与从反向变换/反向量化部132输出的预测残差信号相加来生成滤波处理前解码信号,并将所述滤波处理前解码信号输出到帧内预测部112和环路滤波处理部150。
在此,滤波处理前解码信号构成由帧内预测部112使用的参考块。
变换/量化部131构成为进行预测残差信号的变换处理并且取得系数层次值。而且,变换/量化部131也可以构成为进行系数层次值的量化。
在此,变换处理是将预测残差信号变换为频率分量信号的处理。作为所述变换处理,可以使用与离散余弦变换(Discrete Cosine Transform,以下记为DCT)对应的基底图案(变换矩阵),也可以使用与离散正弦变换(Discrete Sine Transform,以下记为DST)对应的基底图案(变换矩阵)。
另外,作为变换处理,也可以使用非专利文献1所公开的能够从多个变换基底按水平/垂直方向选择适于预测残差信号的系数的偏差的MTS(Multiple TransformSelection:多核变换选择)、通过使一次变换后的变换系数集中于频率更低区域来改善编码性能的LFNST(Low Frequecny Non-Separable Transform:低频不可分变换)。
反向变换/反向量化部132构成为进行从变换/量化部131输出的系数层次值的反向变换处理。在此,反向变换/反向量化部132也可以构成为在反向变换处理之前进行系数层次值的反向量化。
在此,反向变换处理和反向量化进行与由变换/量化部131进行的变换处理和量化相反的步骤。
编码部140构成为对从变换/量化部131输出的系数层次值进行编码,并输出编码数据。
在此,例如,编码是根据系数层次值的发生概率分配不同的长度的代码的熵编码。
另外,编码部140构成为除了系数层次值以外,还对由解码处理使用的控制数据进行编码。
在此,控制数据可以包含编码块尺寸、预测块尺寸、变换块尺寸等块尺寸有关的信息(标志或索引)。
另外,控制数据也可以包含后述的图像解码装置200中的反向变换/反向量化部220的反向变换/反向量化处理、帧间预测部241的帧间预测信号生成处理、帧内预测部242的帧内预测信号生成处理、合成部243的帧间预测信号或/和帧内预测信号的合成处理、环路滤波处理部250的滤波处理等控制所需的信息(标志或索引)。
此外,在非专利文献1中,这些控制数据被称为语法,其定义被称为语义。
另外,控制数据也可以包含后述的序列参数集(SPS:Sequence Parameter Set)、画面参数集(PPS:Picutre Parameter Set)、画面报头(PH:Picture Header)、切片报头(SH:Slice Header)等报头信息。
环路滤波处理部150构成为对从加法器122输出的滤波处理前解码信号进行滤波处理并且将滤波处理后解码信号输出到帧缓冲器160。
在此,例如,滤波处理是减少在块(编码块、预测块或变换块)的边界部分产生的失真的去块滤波器处理或根据从图像编码装置100传输的滤波系数、滤波选择信息、图像的图形的局部的性质等切换滤波的自适应循环滤波处理。
帧缓冲器160构成为累积由帧间预测部111使用的参考帧。
在此,滤波处理后解码信号构成由帧间预测部111使用的参考帧。
(图像解码装置200)
以下,参考图3对本实施方式所涉及的图像解码装置200进行说明。图3是表示本实施方式所涉及的图像解码装置200的功能块的一例的图。
如图3所示,图像解码装置200具有解码部210、反向变换/反向量化部220、加法器230、帧间预测部241、帧内预测部242、合成部243、环路滤波处理部250和帧缓冲器260。
解码部210构成为对由图像编码装置100生成的编码数据进行解码,并对系数层次值进行解码。
在此,解码例如是步骤与由编码部140进行的熵编码的步骤相反的熵解码。
另外,解码部210也可以构成为通过编码数据的解码处理取得控制数据。
在此,控制数据可以包含上述的解码块(与上述的图像编码装置100的编码目标块的意思相同。以下,统称为目标块)的块尺寸有关的信息。
另外,控制数据也可以包含反向变换/反向量化部220的反向变换/反向量化处理、帧间预测部241、帧内预测部242的预测像素生成处理、环路滤波处理部250滤波处理等控制所需的信息(标志或索引)。
另外,控制数据也可以包含上述的序列参数集(SPS:Sequence Parameter Set)、画面参数集(PPS:Picutre Parameter Set)、画面报头(PH:Picture Header)、切片报头(SH:Slice Header)等报头信息。
反向变换/反向量化部220构成为进行从解码部210输出的系数层次值的反向变换处理。在此,反向变换/反向量化部220也可以构成为在反向变换处理之前进行系数层次值的反向量化。
在此,反向变换处理和反向量化进行与由变换/量化部131进行的变换处理和量化相反的步骤。
加法器230构成为将预测信号与从反向变换/反向量化部220输出的预测残差信号相加来生成滤波处理前解码信号,并将滤波处理前解码信号输出到帧内预测部242和环路滤波处理部250。
在此,滤波处理前解码信号构成由帧内预测部242使用的参考块。
与帧间预测部111同样地,帧间预测部241构成为通过帧间预测(inter-frameprediction)来生成帧间预测信号。
具体而言,帧间预测部241构成为根据从编码数据解码而成的运动矢量和参考帧所含的参考信号来生成帧间预测信号。帧间预测部241构成为将帧间预测信号输出到合成部243。
与帧内预测部112同样地,帧内预测部242构成为通过帧内预测(intra-frameprediction)来生成帧内预测信号。
具体而言,帧内预测部242构成为特定目标帧所含的参考块,并根据所特定的参考块按预测块生成帧内预测信号。帧内预测部242构成为将帧内预测信号输出到合成部243。
与合成部113同样地,合成部243构成为将从帧间预测部111输入的帧间预测信号或/和从帧内预测部112输入的帧内预测信号使用预先设定的权重系数进行合成,并将所合成的预测信号(以下,统称为预测信号)输出到加法器122。
在此,关于合成部243的帧间预测信号或/和帧内预测信号的合成处理,由于也能够采用与非专利文献1等相同的结构,因此省略说明。
加法器122构成为将从合成部243输出的预测信号与从反向变换/反向量化部220输出的预测残差信号相加来生成滤波处理前解码信号,并将所述滤波处理前解码信号输出到环路滤波处理部250。
与环路滤波处理部150同样地,环路滤波处理部250构成为对从加法器230输出的滤波处理前解码信号进行滤波处理,并且将滤波处理后解码信号输出到帧缓冲器260。
在此,例如,滤波处理是减少在块(编码块、预测块、变换块或将这些分割而成的子块)的边界部分产生的失真的去块滤波器处理或根据从图像编码装置100传输的滤波系数、滤波选择信息、图像的图形的局部的性质等切换滤波的自适应循环滤波处理。
与帧缓冲器160同样地,帧缓冲器260构成为累积由帧间预测部241使用的参考帧。
在此,滤波处理后解码信号构成由帧间预测部241使用的参考帧。
(几何分割模式)
以下,使用图4和图5,对解码部210、帧间预测部241和帧内预测部242所涉及的非专利文献1所公开的几何分割模式和相对于本实施方式所涉及的第一几何分割模式(GPM)进行的帧内预测模式的应用进行说明。
图4表示通过非专利文献1所公开的几何分割模式,矩形的解码目标块由几何分割模式的分割线L1一分为二呈几何形状的分割区域0和分割区域1的情况的一例。
在此,非专利文献1所公开的几何分割模式的分割线L1根据角度和位置而准备有64种图案。
另外,非专利文献1所涉及的GPM分别对分割区域0和分割区域1应用作为帧间预测的一种的通常融合模式,并生成帧间预测(运动补偿)像素。
具体而言,在所述GPM中,构建非专利文献1所公开的融合候补列表,根据所述融合候补列表和从图像编码装置100传输的融合索引,导出各分割区域0/1的运动矢量和参考帧,生成参考块,即帧间预测(或运动补偿)块,最终各分割区域0/1的帧间预测像素通过预先设定的权重被加权平均来合成。
所述融合候补列表的构建方法由于能够将非专利文献1所公开的方法应用于本专利,因此省略详细的说明。
图5表示相对于本实施方式所涉及的GPM应用帧内预测模式的一例。
非专利文献1所涉及的GPM的生成预测像素的方法限定于作为帧间预测(运动补偿)的一种的通常融合模式,因此存在编码性能的改善余地。
相对于此,在GPM的生成预测像素的第一方法和第二方法中,提出通过除了在GPM的预测像素生成中应用通常融合模式以外,还应用帧内预测模式,由此来改善编码性能。
在此,在第一方法和第二方法中,可以对各分割区域0/1应用通常融合模式或帧内预测模式中的任一模式,而且根据解码目标块的分割形状(分割线)来限定帧内预测模式的种类。
另外,在第一方法中,可以分别对由GPM分割的两个分割区域0/1应用不同的两个帧内预测模式。
另外,在第二方法中,提出能否应用追加应用了解码目标块的帧内预测模式的GPM和GPM应用时的各分割区域0/1的预测模式种类的特定方法。然而,所述特定方法的前提是能够提供GPM不同的两个帧内预测模式。
在本实施方式中,关于能否应用追加应用了解码目标块的帧内预测模式的GPM和GPM应用时的各分割区域0/1的预测模式种类的特定方法,提出将由不同的两个帧间预测构成的GPM与由帧间预测和帧内预测构成的GPM相比,禁止由选择率低的不同的两个帧内预测模式构成的GPM。
由此,通过追加应用了帧内预测模式的GPM被适当地应用于解码目标块,并且特定最优的预测模式,结果能够实现编码性能的进一步的改善余地。
之后,针对能否应用本实施方式提出的GPM和GPM应用时的各分割区域0/1的预测模式种类的特定方法(或通常所谓的信令方法),从基于解码部210解码的编码数据(编码位流)本身和解码部210的编码数据所含的控制数据(语法)的特定方法的两个观点进行说明。
(解码部210解码的编码数据)
以下,使用图6来说明由解码部210解码的编码数据。图6是表示由非专利文献1所公开的解码部210接收的编码数据的结构的一例的图。
如图6所示,编码数据可以在流的开头包含SPS211。SPS211是以序列(画面的集合)单元控制的控制数据的集合。各SPS211至少包含在存在多个SPS的情况下用于识别每一个的SPS id信息。
如图6所示,编码数据可以在SPS211之后包含PPS212。在此,PPS212是以画面(切片的集合)单元控制的控制数据的集合。各PPS212至少包含在存在多个PPS212的情况下用于识别每一个的PPS id信息。另外,至少包含用于指定与各PPS212对应的SPS211的SPS id信息。
如图6所示,编码数据可以在PPS212之后包含画面报头213。画面报头213也是以画面(切片的集合)单元控制的控制数据的集合。PPS212能够针对多个画面共享单一的PPS212。另一方面,画面报头213一定针对每个画面进行传输。画面报头213至少包含用于指定与各画面对应的PPS212的PPS id信息。
如图6所示,编码数据可以在画面报头213之后包含切片报头214A。切片报头214A是以切片单元控制的控制数据的集合。切片报头214A可以包含上述的画面报头213的信息作为切片报头的一部分。
如图6所示,编码数据可以在切片报头214A之后包含切片数据215A。切片数据215A可以包含上述的系数层次值、尺寸数据等。
如上所述,成为切片报头、画面报头、PPS、SPS分别与各切片数据215A/215B对应的结构。如上所述,在画面报头213中,用PPS id指定参考哪个PPS212,而且,所述PPS212用SPSid指定参考哪个SPS211,因此能够对多个切片数据215A/215B使用共同的SPS211和PPS212。
换言之,SPS211和PPS212不一定需要对每个画面和每个切片进行传输。例如,如图6所示,也可以设为在切片报头214A/214B之前不对SPS211和PPS212进行编码这样的流结构。
此外,图6所示的结构仅仅为一例。只要成为由切片报头214A/214B、画面报头213、PPS212、SPS211所指定的控制数据与各切片数据215A/215B对应的结构,则也可以追加上述以外的要素作为流的构成要素。另外,同样地,也可以在传输时整形为与图6不同的结构。
(能否应用序列单元的GPM的特定方法)
以下,使用图7,对根据解码部210的解码目标序列层次的控制数据能否应用GPM和能否相对于GPM应用帧内预测模式的特定方法进行说明。
图7是表示解码部210根据SPS单元的GPM相关标志来特定能否应用GPM和能否相对于GPM应用帧内预测模式的方法的一例的流程图。
如图7所示,在步骤S200-HLS-01中,解码部210判定sps_gpm_enabled_flag的值是否为1。
在sps_gpm_enabled_flag的值为1的情况下,解码部210进入步骤S200-HLS-02,在sps_gpm_enabled_flag的值不为1的情况下,解码部210进入步骤S200-HLS-03。
在此,sps_gpm_enabled_flag是控制能否应用解码目标序列的几何分割模式的语法(第一语法),在sps_gpm_enabled_flag的值为1的情况下,表示GPM有效,在sps_gpm_enabled_flag的值为0的情况下,表示GPM无效。
此外,解码部210通过将sps_gpm_enabled_flag在步骤S200-HLS-01之前解码,能够在步骤S200-HLS-01中判定sps_gpm_enabled_flag的值。
另外,解码部210在不存在sps_gpm_enabled_flag的情况下,可以将sps_gpm_enabled_flag的值推定为0。
在步骤S200-HLS-02中,解码部210对sps_gpm_intra_enabled_flag进行解码,结束该处理。
另一方面,在步骤S200-HLS-03中,解码部210不对sps_gpm_intra_enabled_flag进行解码而结束该处理。
在此,sps_gpm_intra_enabled_flag是控制能否相对于解码序列的几何分割模式应用帧内预测模式的语法(第二语法),在sps_gpm_intra_enabled_flag的值为1的情况下,表示能够对GPM应用帧内预测模式,在sps_gpm_intra_enabled_flag的值为0的情况下,表示不能对GPM应用帧内预测模式。
此外,解码部210在不存在sps_gpm_intra_enabled_flag的情况下,可以将sps_gpm_intra_enabled_flag的值推定为0。
在步骤S200-HLS-03中解码部210不对sps_gpm_intra_enabled_flag进行解码的原因在于,由于能够在前级特定sps_gpm_enabled_flag的值为0,即,不能在解码目标序列中应用GPM,因此没有对sps_gpm_intra_enabled_flag进行解码的意义,通过采用该方法,能够避免sps_gpm_intra_enabled_flag的多余的解码(编码)。
对GPM应用的帧内预测模式的种类由与第一方法和第二方法中的分割线(例如,图4所示的分割线L1)对应的帧内预测模式构成。
例如,对GPM应用的帧内预测模式的种类可以包含相对于GPM的分割线L1平行的Angular模式或/和垂直的Angular模式。或者,对GPM应用的帧内预测模式的种类也可以包含这些Angular模式附近的Angular模式。
此外,在相对于分割线L1平行的Angular模式或垂直的Angular模式存在两个以上的情况(例如,分割线L1为与正方形块的对角线相同的角度的情况)下,可以将对GPM应用的帧内预测模式的种类限定为其中一方。
例如,通过采用从解码目标块的角度,以相邻的解码完毕块的处理顺序进行限定,即,限定为从相对于解码目标块的比右或下的相邻块靠左或上的相邻块取得参考像素的方向的方法,能够减轻预测像素生成时的块间的解码处理的依赖关系。
除此以外,对GPM应用的帧内预测模式的种类除了Angular模式以外,还可以包含不依赖于第一方法和第二方法中的分割线L1的帧内预测模式,例如,Planar模式或/和DC模式等。
此外,在上述中,关于控制能否相对于几何分割模式应用帧内预测模式的语法,说明了对是否需要以序列层次解码进行判定,但为了以更细的粒度进行控制,例如也可以以PPS、画面报头或切片报头的层次解码。
但是,当细化控制单元时,解码(编码)的语法的代码量增大,因此可以按照设计者的意思评价、设计因控制单元的细化实现的预测性能的改善和语法的代码量增大的权衡。
(块单元有无应用GPM的判定方法)
以下,使用图8来说明由解码部210进行的解码目标块有无应用GPM。图8是表示由解码部210判定解码目标块有无应用GPM的方法的一例的流程图。
如图8所示,在步骤S200-01中,解码部210判定sps_gpm_intra_enabled_flag的值是否为1,在sps_gpm_intra_enabled_flag的值为1的情况下,进入步骤S200-2,在sps_gpm_intra_enabled_flag的值为0的情况下,进入步骤S200-03。
在步骤S200-03中,解码部210判定是否满足规定条件一(或,第一规定条件),在满足规定条件一的情况下,进入步骤S200-06,在不满足规定条件一的情况下,进入步骤S200-07。规定条件一的细节将在后面说明。
在步骤S200-06中,解码部210将GpmFlag的值特定为1,并结束该处理。在步骤S200-07中,解码部210将GpmFlag的值特定为0,并结束该处理。
在此,GpmFlag是特定(控制)解码目标块有无应用GPM的内部参数(第一内部参数),在GpmFlag的值为1的情况下,表示对解码目标块应用GPM(GPM有效),在GpmFlag的值为0的情况下,表示不对解码目标块应用GPM(GPM无效)。
规定条件一是用于判定有无应用对帧内预测模式没有进行应用的GPM的条件,因此可以使用非专利文献1所公开的相同条件。具体而言,满足以下的所有条件。
·sps_gpm_enabled_flag的值为1。
·sh_slice_type为B。
·general_merge_flag的值为1。
·解码目标块的宽度为8像素以上。
·解码目标块的高度为8像素以上。
·解码目标块的宽度不足解码目标块的高度的8倍。
·解码目标块的高度不足解码目标块的宽度的8倍。
·regular_merge_flag的值为1。
·merge_subblock_flag的值为0。
·clip_flag的值为0。
在此,sh_slice_type是表示解码目标的切片的种类的内部参数,在非专利文献1中,由于将相对于GPM应用块不同的两个融合矢量用于各分割区域的预测像素生成,因此仅能够应用于运动矢量在切片整体中明确有两个的B切片(相反,表示GPM不能应用于运动矢量在切片整体中明确仅有一个的P切片)。
在此,关于与general_merge_flag、regular_merge_flag、merge_subblock_flag和clip_flag有关的各条件,由于能够采用与非专利文献1相同的结构,因此省略说明。
另外,解码目标块的宽度和高度为8像素以上的条件用于削减运动补偿所需的参考像素数(存储器带宽)的最差情况,在非专利文献1中导入了该条件。具体而言,在非专利文献1中,具有一个运动矢量的单向预测块的块尺寸的下限值设定为4×8/8×4像素,具有两个运动矢量的双向预测块的块尺寸的下限值设定为8×8像素。因此,作为双向预测块的一种的GPM应用块也考虑相同的下限值作为应用条件。
解码目标块的宽度(或高度)不足解码目标块的高度(或宽度)的8倍的条件用于削减对图像编码装置100中有无应用GPM进行评价的临时编码处理的次数,进而削减编码处理量,从对GPM的应用率低的块不能应用GPM的观点来看受到限制。
相对于上述的步骤S200-03,在步骤S200-02中,解码部210判定是否满足规定条件二,在满足规定条件二的情况下,进入步骤S200-04,在不满足规定条件一的情况下,进入步骤S200-05。规定条件二的细节将在后面说明。
解码部210在步骤S200-04中,将GpmFlag的值特定为1,并结束该处理,在步骤S200-05中,将GpmFlag的值特定为0,并结束该处理。
在此,规定条件二是用于判定有无应用对帧内预测模式进行应用的GPM的条件,因此可以撤回或变更规定条件一所含的以下的条件。
·sh_slice_type为B。
·解码目标块的宽度为8像素以上。
·解码目标块的高度为8像素以上。
·解码目标块的宽度不足解码目标块的高度的8倍。
·解码目标块的高度不足解码目标块的宽度的8倍。
第一,针对与sh_slice_type有关的条件,能够变更为sh_slice_type为B切片或P切片。其原因在于,通过相对于GPM应用的帧内预测模式,使P切片(限制双向预测)也能够应用GPM,因此作为结果GPM的应用块数增大,能够期待编码性能的改善。
例如,相对于P切片,分割区域中的一个区域能够应用融合模式,另一个分割区域能够应用对帧内预测模式进行应用的GPM。
第二,关于所述解码目标块的宽度和高度为8像素以上的条件的撤回,在对GPM的分割区域的至少一个区域应用帧内预测模式的情况下,能够将考虑双向预测块的最差情况的存储器带宽设定的块尺寸的下限值(8×8像素)放宽到单向预测块的块尺寸的下限值(4×8/8×4像素)。由此,能够对在非专利文献1中不能应用GPM的小尺寸块应用GPM,因此GPM的应用块数增大,能够期待编码性能的改善。
第三,关于与所述解码目标块的长宽比有关的条件的撤回(=解码目标块的宽度(或高度)不足解码目标块的高度(或宽度)的8倍的条件的撤回),通过相对于GPM导入帧内预测模式,如果帧内预测模式的预测性能限定放宽到比较高的小尺寸块,则GPM的应用块数增大,能够期待编码性能的改善。
例如,在非专利文献1中,可以对不能应用GPM的4×16/16×4像素块和/或4×32/32×4像素块和/或8×64/64×8像素块撤回限制。
(块单元的GPM分割模式(分割线L1的种类)的判定方法)
以下,使用图9来说明由解码部210进行的块单元的GPM分割模式(分割线L1的种类)的判定方法。图9是表示由解码部210判定解码目标块的块单元的GPM分割模式(分割线L1的种类)的方法的一例的流程图。
如图9所示,在步骤S200-08中,解码部210判定上述的GpmFlag的值是否为1,在GpmFlag的值为1的情况下,进入步骤S200-09,在GpmFlag的值为0的情况下,进入步骤S200-10。
在步骤S200-09中,解码部210对控制数据所含的gpm_partition_idx进行解码,特定gpm_partition_idx的值并结束该处理。
在步骤S200-10中,解码部210不对控制数据所含的gpm_partition_idx进行解码而将gpm_partition_idx的值推定为0并结束该处理。
在此,gpm_partition_idx是特定解码目标块的几何分割模式的分割形状(分割线L1的方向)的语法。
在非专利文献1中,由于该gpm_partition_idx的0~63的值与上述的64种分割线L1的方向对应,因此通过解码部210特定(推定)gpm_partition_idx的值,能够特定解码目标块的几何分割模式的分割形状(分割线L1的方向)。
此外,在步骤S200-10中,解码部210不对控制数据所含的gpm_partition_idx进行解码而结束该处理,但是目标在于由于通过在步骤S200-08中关于GpmFlag的判定能够特定不对解码目标块应用GPM,因此避免gpm_partition_idx的多余的解码(削减传输代码量)。
(分割区域0有无应用帧内预测模式的判定方法)
以下,使用图10来说明由解码部210进行的分割区域0有无应用帧内预测模式的判定方法。图10是表示由解码部210进行的分割区域0有无应用帧内预测模式的判定方法的流程图。
如图10所示,在步骤S200-11中,解码部210判定上述的GpmFlag的值是否为1,且sps_gpm_intra_flag是否为1。解码部210在满足所述条件的情况下,进入步骤S200-12,在不满足所述条件的情况下,进入步骤S200-13。
在步骤S200-12中,解码部210对控制数据所含的gpm_r0_intra_flag进行解码,特定gpm_r0_intra_flag的值并结束该处理。
在步骤S200-13中,解码部210不对控制数据所含的gpm_r0_intra_flag进行解码而将gpm_r0_intra_flag的值推定为0并结束该处理。
在此,gpm_r0_intra_flag是特定解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的语法(第三语法)。
解码部210在gpm_r0_intra_flag的值为1的情况下,能够特定为相对于分割区域0应用帧内预测模式(有效),在gpm_r0_intra_flag的值为0的情况下,能够特定为相对于分割区域0不应用帧内预测模式(无效)。
此外,解码部210在不存在gpm_r0_intra_flag的情况下,可以将gpm_r0_intra_flag的值推定为0。
在步骤S200-13中,解码部210不对控制数据所含的gpm_r0_intra_flag进行解码而结束该处理,但是目标在于由于通过在步骤S200-11的判定能够特定不对解码目标块应用GPM或即使应用GPM,帧内预测模式也不被应用于GPM,因此避免gpm_r0_intra_flag的多余的解码(削减传输代码量)。
(分割区域1有无应用帧内预测模式的判定方法)
以下,使用图11来说明由解码部210进行的分割区域1有无应用帧内预测模式的判定方法。图11是表示由解码部210进行的分割区域1有无应用帧内预测模式的判定方法的流程图。
如图11所示,在步骤S200-11中,解码部210判定上述的GpmFlag的值是否为1,且sps_gpm_intra_flag是否为1。解码部210在满足所述条件的情况下,进入步骤S200-14,在不满足所述条件的情况下,进入步骤S200-15。
在步骤S200-14中,解码部210判定gpm_r0_intra_flag是否为1。解码部210在满足所述条件的情况下,进入步骤S200-16,在不满足所述条件的情况下,进入步骤S200-17。
解码部210在步骤S200-15中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理,在步骤S200-16中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理。
在步骤S200-17中,解码部210判定sh_slice_type是否为B。解码部210在满足所述条件的情况下,进入步骤S200-18,在不满足所述条件的情况下,进入步骤S200-19。
解码部210在步骤S200-18中,对控制数据所含的gpm_r1_intra_flag进行解码,特定gpm_r1_intra_flag的值并结束该处理,在步骤S200-19中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理。
在此,gpm_r1_intra_flag是特定解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的语法(第四语法)。
解码部210在gpm_r1_intra_flag的值为1的情况下,能够特定为相对于分割区域1应用帧内预测模式(有效),在gpm_r1_intra_flag的值为0的情况下,能够特定为相对于分割区域1不应用帧内预测模式(无效)。
此外,解码部210在不存在gpm_r1_intra_flag的情况下,可以将gpm_r1_intra_flag的值推定为0。
在步骤S200-15和S200-16中,解码部210不对控制数据所含的gpm_r1_intra_flag进行解码而结束该处理,但是目标在于由于通过在步骤S200-11和S200-16的判定能够特定不对解码目标块应用GPM或即使应用GPM,分割区域1中帧内预测模式也不被应用于GPM,因此避免gpm_r1_intra_flag的多余的解码(削减传输代码量)。
(GPM应用帧内预测模式为一种的情况下的分割区域0的预测模式的特定方法)
以下,使用图12来说明由解码部210进行的在应用GPM的帧内预测模式为一种的情况下的分割区域0的预测模式的特定方法。图12是表示由解码部210进行的在应用GPM的帧内预测模式为一种的情况下特定分割区域0的预测模式的方法的一例的流程图。
如图12所示,在步骤SR0-01中,解码部210判定上述的gpm_r0_intra_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤SR0-02,在不满足所述条件的情况下,进入步骤SR0-03。
在步骤SR0-02中,解码部210将分割区域0的帧内预测模式特定为能够应用于GPM的一种帧内预测模式,并结束该处理。
在步骤SR0-03中,解码部210判定MaxNumMergeCand的值是否大于1。解码部210在满足所述条件的情况下,进入步骤SR0-04,在不满足所述条件的情况下,进入步骤SR0-05。
在此,MaxNumMergeCand是表示通常融合模式中融合候补的最大数的内部参数(第二内部参数)。所述最大数在本实施方式中也可以采用与非专利文献1所公开的设定方法相同的结构,因此省略详细的说明。
在步骤SR0-04中,解码部210对merge_gpm_idx0进行解码,特定相对于分割区域0的融合候补,并结束该处理。
在步骤SR0-05中,解码部210不对merge_gpm_idx0进行解码而特定相对于分割区域0的融合候补,并结束该处理。
在此,merge_gpm_idx0是特定相对于分割区域0的融合候补的语法(融合索引)。
此外,解码部210在不存在merge_gpm_idx0的情况下,可以将merge_gpm_idx0的值推定为0。
在此,在步骤SR0-05中,解码部210不对merge_gpm_idx0进行解码而结束该处理,但是目标在于由于在步骤SR0-03中能够特定MaxNumMergeCand为1,即,相对于分割区域0的融合候补能够特定为0,因此避免merge_gpm_idx0的多余的解码(削减传输代码量)。
(应用GPM的帧内预测模式为一种的情况下的分割区域1的预测模式的特定方法)
以下,使用图13来说明由解码部210进行的在应用GPM的帧内预测模式为一种的情况下的分割区域1的预测模式的特定方法。图13是表示由解码部210进行的在应用GPM的帧内预测模式为一种的情况下特定分割区域1的预测模式的方法的一例的流程图。
如图13所示,在步骤SR1-01中,解码部210判定上述的gpm_r0_intra_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤SR1-02,在不满足所述条件的情况下,进入步骤SR1-03。
在步骤SR1-02中,解码部210对merge_gpm_idx1进行解码,特定相对于分割区域1的融合候补,并结束该处理。
在步骤SR1-03中,解码部210判定gpm_r1_intra_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤SR1-04,在不满足所述条件的情况下,进入步骤SR1-05。
在步骤SR1-04中,解码部210将分割区域1的帧内预测模式特定为能够应用于GPM的一种帧内预测模式,并结束该处理。
在步骤SR1-05中,解码部210判定MaxNumMergeCand的值是否大于2。解码部210在满足所述条件的情况下,进入步骤SR1-06,在不满足所述条件的情况下,进入步骤SR1-07。
在步骤SR1-06中,解码部210对merge_gpm_idx1进行解码,特定相对于分割区域1的融合候补,并结束该处理。
在步骤SR1-07中,解码部210不对merge_gpm_idx1进行解码,特定相对于分割区域1的融合候补,并结束该处理。
在此,merge_gpm_idx1是特定相对于分割区域1的融合候补的索引(融合索引)。
此外,解码部210在不存在merge_gpm_idx1的情况下,可以将merge_gpm_idx1的值推定为0。
在此,在步骤SR1-07中,解码部210不对merge_gpm_idx1进行解码而结束该处理,但是目标在于由于在步骤SR1-05中能够特定MaxNumMergeCand的值为2,即,相对于分割区域1的融合候补能够特定为融合候补两个中与根据merge_gpm_idx0特定的相对于分割区域0的融合候补不同的融合候补,因此避免merge_gpm_idx1的多余的解码(削减传输代码量)。
(应用GPM的帧内预测模式为两种以上的情况下的分割区域0的预测模式的特定方法)
以下,使用图12和图14来说明由解码部210进行的在应用GPM的帧内预测模式为两种以上的情况下的分割区域0的预测模式的特定方法。图14是表示由解码部210进行的在应用GPM的帧内预测模式为两种以上的情况下特定分割区域0的预测模式的方法的一例的流程图。
在此,图14所示的流程图与图12所示的流程图的不同仅仅为步骤SR0-02和步骤SR0-02A,因此仅针对这两个步骤的不同进行说明。
在图12所示的流程图中,以应用GPM的帧内预测模式为一种作为前提,因此在步骤SR0-02中,解码部210在步骤SR001中特定分割区域0的预测模式为帧内预测模式的情况下,可以唯一地特定该帧内预测模式的种类为一种应用GPM的帧内预测模式。
另一方面,在图14所示的流程图中,以应用GPM的帧内预测模式为两种以上作为前提,因此在步骤SR0-02A中,解码部210即使在步骤SR0-01中特定分割区域0的预测模式为帧内预测模式的情况下,如果不对intra_gpm_idx进行解码,则无法特定分割区域0的帧内预测模式的种类,因此采用对intra_gpm_idx进行解码的结构。
在此,intra_gpm_idx是用于特定(控制)分割区域0的帧内预测模式的种类的语法。
intra_gpm_idx的值的变形可以根据能够应用于GPM的帧内预测模式的种类数进行设定。
另外,可以根据GPM的帧内预测模式的选择率设定与intra_gpm_idx的值对应的帧内预测模式的种类。
例如,在帧内预测模式的种类具有相对于GPM的分割线L1的平行Angular模式和相对于GPM的分割线L1的垂直Angular模式的两种的情况下,可以将其中选择率高的平行Angular模式设定为intra_gpm_idx的值的0,将选择率低的垂直Angular模式设定为intra_gpm_idx的值的1。
作为其他例,在帧内预测模式的种类具有相对于GPM的分割线L1的平行Angular模式、相对于GPM的分割线L1的垂直Angular模式和Planar模式的三种的情况下,可以按照其中选择率从高到低的顺序,将平行Angular模式设定为intra_gpm_idx的值的0,将Planar模式设定为intra_gpm_idx的值的1,将垂直Angular模式设定为intra_gpm_idx的值的2。
而且,可以将上述的与平行Angular模式对应的intra_gpm_idx的值的0、与Planar模式对应的intra_gpm_idx的值的1、与垂直Angular模式对应的intra_gpm_idx的值的2解码为长度可根据发生概率变化的代码,例如一元代码,而不是2位固定长度的代码。
此外,关于上述的选择率,设计者可以将通过与发明者等实施的非专利文献1所公开的技术对应的使用了参考软件的模拟实验确认到的值作为参考,根据使用的软件、模拟条件或目标影像序列进行变更。
(应用GPM的帧内预测模式为两种以上的情况下的分割区域1的预测模式的特定方法)
以下,使用图13和图15来说明由解码部210进行的在应用GPM的帧内预测模式为两种以上的情况下的分割区域1的预测模式的特定方法。图15是表示由解码部210进行的在应用GPM的帧内预测模式为两种以上的情况下特定分割区域1的预测模式的方法的一例的流程图。
在此,图15所示的流程图与图13所示的流程图的不同点在于,图13所示的流程图的步骤SR1-04被替换为图15所示的流程图中的步骤SR1-04。仅仅针对该不同点进行说明。
在图13所示的流程图中,以应用GPM的帧内预测模式为一种作为前提,因此在步骤SR1-04中,解码部210在步骤SR1-01中特定分割区域0的预测模式为帧内预测模式的情况下,可以明确特定分割区域1未应用帧内预测模式,因此通过merge_gpm_idx1特定融合候补。
另一方面,在图15所示的流程图中,以应用GPM的帧内预测模式为两种以上作为前提,因此在步骤SR1-03中,解码部210即使在特定分割区域1的预测模式为帧内预测模式的情况下,如果不对intra_gpm_idx进行解码,则也不能特定分割区域1的预测模式是否为帧内预测模式。
在步骤SR1-4’中,解码部210对intra_gpm_idx进行解码,特定相对于分割区域1的帧内预测模式的种类并结束该处理。
解码部210通过将由上述的图7~图15所说明的方法特定的解码目标序列和解码目标块中的以下的信息发送给帧间预测部241、帧内预测部242和合成部243,在图像解码装置200中以禁止由不同的两个帧内预测模式构成的GPM为前提,适当地特定解码目标块能否应用GPM和应用GPM时的每个分割区域的预测模式的种类,从而能够期待进一步改善GPM的编码性能。
·与能否应用序列单元的GPM有关的信息
·与块单元有无应用GPM有关的信息
·与块单元的GPM分割模式(分割线L1的种类)有关的信息
·与分割区域0有无应用帧内预测模式有关的信息
·与分割区域1有无应用帧内预测模式有关的信息
·应用GPM的帧内预测模式为一种的情况下的分割区域0的预测模式
·应用GPM的帧内预测模式为一种的情况下的分割区域1的预测模式
·应用GPM的帧内预测模式为两种以上的情况下的分割区域0的预测模式
·应用GPM的帧内预测模式为两种以上的情况下的分割区域1的预测模式
(相对于GPM的帧内预测、相对于GPM的融合运动矢量差及相对于GPM的模板匹配的组合使用)
以下,使用图16~图23来说明由解码部210进行的考虑了相对于GPM的帧内预测(以下,GPM+Intra)、相对于GPM的融合运动矢量差(MMVD:Merge with Motion VectorDifference)(以下,GPM+MMVD)及相对于GPM的模板匹配(TM:Template Matching)(以下,GPM+TM)的组合使用的情况下的控制方法。
在此,GPM+MMVD和GPM+TM是非专利文献2所公开的技术,均是对GPM在分割区域的运动补偿中使用的MV修正后进行运动补偿。
即,GPM+MMVD和GPM+TM被应用于GPM的帧间预测(运动补偿)的分割区域,因此GPM+Intra不被应用于有效的分割区域。在非专利文献2中,由于没有规定相对于该GPM+MMVD或GPM+TM组合使用GPM+Intra进行应用的情况下的控制方法,因此之后对该控制方法进行说明。
图16是表示由解码部210进行的根据分割区域0能否应用GPM+Intra来特定分割区域0能否应用GPM+MMVD的方法的一例的流程图。
如图16所示,在步骤S200-20中,解码部210判定上述的gpm_r0_intra_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-21,在不满足所述条件的情况下,进入步骤S200-22。
解码部210在步骤S200-21中,不对控制数据所含的gpm_r0_mmvd_flag进行解码而将gpm_r0_mmvd_flag的值推定为0并结束该处理,在步骤S200-22中,对控制数据所含的gpm_r0_mmvd_flag进行解码,特定gpm_r0_mmvd_flag的值并结束该处理。
在此,gpm_r0_mmvd_flag是特定在解码目标块的几何分割模式分割的分割区域0中MMVD是否有效的语法(第五语法)。
解码部210在gpm_r0_mmvd_flag的值为1的情况下,能够特定为相对于分割区域0应用MMVD(有效),在gpm_r0_mmvd_flag的值为0的情况下,能够特定为相对于分割区域0不应用MMVD(无效)。
此外,解码部210在不存在gpm_r0_mmvd_flag的情况下,可以将gpm_r0_mmvd_flag的值推定为0。
图17是表示由解码部210进行的根据分割区域1能否应用GPM+Intra来特定分割区域1能否应用GPM+MMVD的方法的一例的流程图。
如图17所示,在步骤S200-20’中,解码部210判定上述的gpm_r1_intra_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-21’,在不满足所述条件的情况下,进入步骤S200-22’。
解码部210在步骤S200-21’中,不对控制数据所含的gpm_r1_mmvd_flag进行解码而将gpm_r0_mmvd_flag的值推定为0并结束该处理,在步骤S200-22’中,对控制数据所含的gpm_r1_mmvd_flag进行解码,特定gpm_r1_mmvd_flag的值并结束该处理。
在此,gpm_r1_mmvd_flag是特定在解码目标块的几何分割模式分割的分割区域1中MMVD是否有效的语法(第六语法)。
解码部210在gpm_r1_mmvd_flag的值为1的情况下,能够特定为相对于分割区域1应用MMVD(有效),在gpm_r1_mmvd_flag的值为0的情况下,能够特定为相对于分割区域1不应用MMVD(无效)。
此外,解码部210在不存在gpm_r1_mmvd_flag的情况下,可以将gpm_r1_mmvd_flag的值推定为0。
图18~图20是表示将上述的图10、图11、图16及图17能够实现的GPM+MMVD与GPM+Intra组合使用进行应用时的控制方法的变更例的流程图的一例。
图18是根据GpmFlag的值来判定gpm_r0_mmvd_flag和gpm_r1_mmvd_flag的值的流程图的一例。
如图18所示,在步骤S200-31中,解码部210判定上述的GpmFlag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-32,在不满足所述条件的情况下,进入步骤S200-33。
解码部210在步骤S200-32中,对控制数据所含的gpm_r0_mmvd_flag和gpm_r1_mmvd_flag进行解码,特定gpm_r0_mmvd_flag和gpm_r1_mmvd_flag的值并结束该处理,在步骤S200-33中,不对控制数据所含的gpm_r0_mmvd_flag和gpm_r1_mmvd_flag进行解码而将gpm_r0_mmvd_flag和gpm_r1_mmvd_flag的值推定为0,并结束该处理。
图19是表示由解码部210进行的根据分割区域0能否应用GPM+MMVD来特定分割区域0能否应用GPM+Intra的方法的一例的流程图。与图16所示的流程图的不同点在于控制方法和控制目标颠倒。即,构成为在gpm_r0_intra_flag和gpm_r1_intra_flag之前,对gpm_r0_mmvd_flag和gpm_r1_mmvd_flag进行解码。
如图19所示,在步骤S200-41中,解码部210判定上述的sps_gpm_intra_flag的值是否为1,且gpm_r0_mmvd_flag的值是否为0。解码部210在满足所述条件的情况下,进入步骤S200-42,在不满足所述条件的情况下,进入步骤S200-43。
解码部210在步骤S200-42中,对控制数据所含的gpm_r0_intra_flag进行解码,特定gpm_r0_intra_flag的值并结束该处理,在步骤S200-43中,不对控制数据所含的gpm_r0_intra_flag进行解码而将gpm_r0_intra_flag的值推定为0并结束该处理。
图20是表示由解码部210进行的根据分割区域1能否应用GPM+MMVD来特定分割区域1能否应用GPM+Intra的方法的一例的流程图。与图17所示的流程图的不同点在于控制方法和控制目标颠倒。即,构成为在gpm_r0_intra_flag和gpm_r1_intra_flag之前,对gpm_r0_mmvd_flag和gpm_r1_mmvd_flag进行解码。
如图20所示,在步骤S200-41中,解码部210判定上述的sps_gpm_intra_flag的值是否为1,且gpm_r0_mmvd_flag的值是否为0。解码部210在满足所述条件的情况下,进入步骤S200-44,在不满足所述条件的情况下,进入步骤S200-45。
在步骤S200-44中,解码部210判定gpm_r0_mmvd_flag是否为1。解码部210在满足所述条件的情况下,进入步骤S200-46,在不满足所述条件的情况下,进入步骤S200-47。
解码部210在步骤S200-45中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理,在步骤S200-46中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理。
在步骤S200-47中,解码部210判定sh_slice_type是否为B。解码部210在满足所述条件的情况下,进入步骤S200-48,在不满足所述条件的情况下,进入步骤S200-49。
解码部210在步骤S200-48中,对控制数据所含的gpm_r1_intra_flag进行解码,特定gpm_r1_intra_flag的值并结束该处理,在步骤S200-49中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理。
图21是表示根据分割区域0能否应用GPM+MMVD来特定作为对由GPM+MMVD修正的MV的方向和距离进行指定的语法的gpm_r0_mmvd_direction_idx和gpm_r0_mmvd_distance_idx的方法的一例的流程图。
如图21所示,在步骤S200-51中,解码部210判定上述的gpm_r0_mmvd_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-52,在不满足所述条件的情况下,进入步骤S200-53。
解码部210在步骤S200-52中,对控制数据所含的gpm_r0_mmvd_direction_idx和gpm_r0_mmvd_distance_idx进行解码,特定gpm_r0_mmvd_direction_idx和gpm_r0_mmvd_distance_idx的值并结束该处理,在步骤S200-53中,不对控制数据所含的gpm_r0_mmvd_direction_idx和gpm_r0_mmvd_distance_idx进行解码而将gpm_r0_mmvd_direction_idx和gpm_r0_mmvd_distance_idx的值推定为0并结束该处理。
在此,如上所述,gpm_r0_mmvd_direction_idx和gpm_r0_mmvd_distance_id分别是对由GPM+MMVD修正的MV的方向和距离进行指定的语法(第七语法和第八语法)。关于各个0以外的值所表示的含义,由于能够采用与非专利文献2相同的结构,因此省略详细的说明。
图22是表示根据分割区域1能否应用GPM+MMVD来特定作为对由GPM+MMVD修正的MV的方向和距离进行指定的语法的gpm_r1_mmvd_direction_idx和gpm_r1_mmvd_distance_idx的方法的一例的流程图。
如图21所示,在步骤S200-51’中,解码部210判定上述的gpm_r1_mmvd_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-52’,在不满足所述条件的情况下,进入步骤S200-53’。
解码部210在步骤S200-52’中,对控制数据所含的gpm_r1_mmvd_direction_idx和gpm_r1_mmvd_distance_idx进行解码,特定gpm_r0_mmvd_direction_idx和gpm_r1_mmvd_distance_idx的值并结束该处理,在步骤S200-53’中,不对控制数据所含的gpm_r1_mmvd_direction_idx和gpm_r1_mmvd_distance_idx进行解码而将gpm_r1_mmvd_direction_idx和gpm_r1_mmvd_distance_idx的值推定为0并结束该处理。
在此,如上所述,gpm_r1_mmvd_direction_idx和gpm_r1_mmvd_distance_id分别是对由GPM+MMVD修正的MV的方向和距离进行指定的语法(第九语法和第十语法)。关于各个0以外的值所表示的含义,由于能够采用与非专利文献2相同的结构,因此省略详细的说明。
图23是表示根据分割区域0和分割区域1能否应用GPM+MMVD来特定分割区域0和分割区域1能否应用GPM+TM的方法的一例的流程图。
如图23所示,在步骤S200-61中,解码部210判定上述的gpm_r0_mmvd_flag的值是否为0,且gpm_r1_mmvd_flag的值是否为0。解码部210在满足所述条件的情况下,进入步骤S200-62,在不满足所述条件的情况下,进入步骤S200-63。
解码部210在步骤S200-62中,对控制数据所含的gpm_tm_flag进行解码,特定gpm_tm_flag的值并结束该处理,在步骤S200-63中,不对控制数据所含的gpm_tm_flag进行解码而将gpm_tm_flag的值推定为0并结束该处理。
在此,gpm_tm_flag是特定解码目标块的几何分割模式分割的分割区域0和分割区域1中TM是否有效的语法(第十一语法)。
解码部210在gpm_tm_flag的值为1的情况下,能够特定为相对于分割区域0和分割区域1应用TM(有效),在gpm_tm_flag的值为0的情况下,能够特定为相对于分割区域0和分割区域1不应用TM(无效)。
此外,解码部210在不存在gpm_tm_flag的情况下,可以将gpm_tm_flag的值推定为0。
通过采用考虑了以上所示的GPM+Intra和GPM+MMVD或GPM+Intra与GPM+MMVD与GPM+TM的组合使用的各自能否应用的控制方法,提高由GPM+Intra、GPM+MMVD、GPM+TM实现的协同的预测性能,作为结果能够期待编码性能的提高。
(相对于GPM的融合运动矢量差与模板匹配的异或利用)
以下,使用图24~图26来说明由解码部210进行的考虑了GPM+Intra与GPM+MMVD及GPM+TM的异或利用的情况下的控制方法。
GPM+Intra与GPM+MMVD及GPM+TM的异或利用是指,相对于所述的组合使用,GPM+MMVD和GPM+TM的双方不应用于对GPM+Intra进行应用的解码目标块的结构。
同样地,还具有在应用GPM+MMVD和GPM+TM的任一方的解码目标块中不应用GPM+Intra的结构。因此,以组合使用作为前提,上述的gpm_r1_intra_flag、gpm_r1_mmvd_flag和gpm_tm_flag的解码方法可以通过采用如以下这样修正的结构来实现。
图24是表示根据分割区域0能否应用GPM+Intra来特定分割区域1能否应用GPM+MMDV的方法的一例的流程图。
如图24所示,在步骤S200-71中,解码部210判定上述的gpm_r0_Intra_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-72,在不满足所述条件的情况下,进入步骤S200-73。
解码部210在步骤S200-72中,对控制数据所含的gpm_r1_mmvd_flag进行解码,特定gpm_r1_mmvd_flag的值并结束该处理,在步骤S200-73中,不对控制数据所含的gpm_r1_mmvd_flag进行解码而将gpm_r1_mmvd_flag的值推定为0并结束该处理。
图25是表示根据分割区域0能否应用GPM+Intra和分割区域0的GPM+MMVD来特定分割区域1能否应用GPM+Intra的方法的一例的流程图。
如图25所示,在步骤S200-81中,解码部210判定上述的GpmFlag的值是否为1且sps_gpm_intra_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-82,在不满足所述条件的情况下,进入步骤S200-83。
在步骤S200-82中,解码部210判定gpm_r0_mmvd_flag是否为1。解码部210在满足所述条件的情况下,进入步骤S200-84,在不满足所述条件的情况下,进入步骤S200-85。
解码部210在步骤S200-83中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理,在步骤S200-84中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理。
在步骤S200-85中,解码部210判定gpm_r0_mmvd_flag的值是否为1。解码部210在满足所述条件的情况下,进入步骤S200-86,在不满足所述条件的情况下,进入步骤S200-87。
解码部210在步骤S200-86中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理。
解码部210在步骤S200-87中,判定sh_slice_type是否为B。解码部210在满足所述条件的情况下,进入步骤S200-88,在不满足所述条件的情况下,进入步骤S200-89。
解码部210在步骤S200-48中,对控制数据所含的gpm_r1_intra_flag进行解码,特定gpm_r1_intra_flag的值并结束该处理,在步骤S200-49中,不对控制数据所含的gpm_r1_intra_flag进行解码而将gpm_r1_intra_flag的值推定为0并结束该处理。
图26是表示根据分割区域0和分割区域1能否应用GPM+MMVD或分割区域0和分割区域1能否应用GPM+Intra来特定分割区域0和分割区域1能否应用GPM+TM的方法的一例的流程图。
如图26所示,在步骤S200-91中,解码部210判定上述的gpm_r0_mmvd_flag的值是否为0,且gpm_r1_mmvd_flag的值是否为0或上述的gpm_r0_Intra_flag的值是否为0,且gpm_r1_mmvd_flag的值是否为0。解码部210在满足所述条件的情况下,进入步骤S200-92,在不满足所述条件的情况下,进入步骤S200-93。
解码部210在步骤S200-92中,对控制数据所含的gpm_tm_flag进行解码,特定gpm_tm_flag的值并结束该处理,在步骤S200-93中,不对控制数据所含的gpm_tm_flag进行解码而将gpm_tm_flag的值推定为0并结束该处理。
通过采用考虑了以上所示的GPM+Intra和GPM+MMVD或GPM+Intra与GPM+MMVD与GPM+TM的异或利用的各自能否应用的控制方法,提高由GPM+Intra、GPM+MMVD、GPM+TM实现的协同的预测性能,作为结果能够期待编码性能的提高。此外,在上述中,参考通过GPM将矩形块一分为二呈几何形状的事例,说明了在该情况下相对于GPM应用帧内预测模式时的信令方法,但在通过GPM将矩形块分为三部分以上的几何形状的事例中,也能够以相同的概念应用本实施方式中说明的信令方法。
上述的图像编码装置100和图像解码装置200可以通过使计算机执行各功能(各工序)的程序来实现。
此外,在上述的各实施方式中,以将本发明应用于图像编码装置100和图像解码装置200为例进行了说明,但本发明并不仅限定于此,也可以同样应用于具有图像编码装置100和图像解码装置200的各功能的图像编码系统和图像解码系统。
工业上的可利用性
此外,根据本实施方式,例如由于能够在动态图像通信中实现综合服务质量的提高,因此能够有助于联合国主导的可持续发展目标(SDGs)的目标9“建设具有适应力的基础设施,促进可持续的工业化,并且实现扩大创新”。

Claims (16)

1.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,
在控制能否应用所述解码目标块的几何分割模式的第一内部参数有效,且所述第二语法的值为1的情况下,
当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法有效时,不对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法进行解码,
当所述第三语法不有效时,
在所述解码目标块所属的切片类型为B切片的情况下,对所述第四语法进行解码,
在所述解码目标块所属的切片类型不为B切片的情况下,不对所述第四语法进行解码,
在不满足所述第一内部参数有效,且所述第二语法的值为1的条件的情况下,不对所述第四语法进行解码。
2.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,
在能够应用于所述解码目标块的几何分割模式的帧内预测模式为两种以上的情况下,
当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值为1时,对控制向所述解码目标块的几何分割模式追加的帧内预测模式的种类的索引进行解码,特定所述分割区域0的帧内预测模式,
当所述第三语法的值不为1时,
在表示所述解码目标块的融合候补的最大数的第二内部参数的值大于1的情况下,解码相对于所述分割区域0的融合索引,特定所述分割区域0的融合候补,
在所述第二内部参数的值为1以下的情况下,不解码相对于所述分割区域0的融合索引而特定所述分割区域0的融合候补。
3.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,
在能够应用于所述解码目标块的几何分割模式的帧内预测模式为两种以上的情况下,
当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值为1时,解码相对于所述解码目标块的几何分割模式分割的分割区域1的融合索引,特定所述分割区域1的融合候补,
当所述第三语法的值不为1时,
在特定所述分割区域1的预测模式是否为帧内预测模式的第四语法的值为1的情况下,对控制向所述解码目标块的几何分割模式追加的帧内预测模式的种类的索引进行解码,特定所述分割区域1的帧内预测模式,
在所述第四语法的值不为1的情况下,
当表示所述解码目标块的融合候补的最大数的第二内部参数的值大于2时,解码相对于所述分割区域1的融合索引,特定所述分割区域1的融合候补,
当所述第二内部参数的值为2以下时,解码相对于所述分割区域1的融合索引,特定所述分割区域1的融合候补。
4.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值,对特定是否对所述分割区域0应用融合运动矢量差的第五语法的解码进行控制。
5.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法的值,对特定是否对所述分割区域1应用融合运动矢量差的第六语法的解码进行控制。
6.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据对能否应用所述解码目标块的几何分割模式进行控制的第一内部参数的值,对特定是否对所述解码目标块的几何分割模式分割的分割区域0应用融合运动矢量差的第五语法的解码进行控制,
所述解码部构成为,根据所述第一内部参数的值,对特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的解码进行控制。
7.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据所述第二语法的值和特定是否对所述解码目标块的几何分割模式分割的分割区域0应用融合运动矢量差的第五语法的值,对特定是否对所述分割区域0应用帧内预测模式的第三语法的解码进行控制。
8.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据所述第二语法的值、特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的值和特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值,对特定是否对所述分割区域1应用帧内预测模式的第四语法的解码进行控制。
9.根据权利要求4或6所述的图像解码装置,其特征在于,
所述解码部构成为,根据所述第五语法的值,对分别特定对所述分割区域0应用的融合运动矢量差的方向和距离的第七语法和第八语法的解码进行控制。
10.根据权利要求5或6所述的图像解码装置,其特征在于,
所述解码部构成为,根据所述第六语法的值,对分别特定对所述解码目标块的几何分割模式分割的分割区域1应用的融合运动矢量差的方向和距离的第九语法和第十语法的解码进行控制。
11.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据特定是否对所述解码目标块的几何分割模式分割的分割区域0应用融合运动矢量差的第五语法的值和特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的值,对特定有无应用对所述分割区域0和所述分割区域1应用的模板匹配的第十一语法的解码进行控制。
12.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值,对特定是否对所述解码目标块的几何分割模式分割的分割区域1应用融合运动矢量差的第六语法的解码进行控制。
13.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据控制能否应用所述解码目标块的几何分割模式的第一内部参数的值、所述第二语法的值、特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值和特定是否对所述分割区域0应用融合运动矢量差的第五语法的值,对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法的解码进行控制。
14.一种图像解码装置,其特征在于,
具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,根据特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法的值和特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法的值或特定能否对所述分割区域0应用融合运动矢量差的第五语法的值和特定是否对所述分割区域1应用融合运动矢量差的第六语法的值,对特定有无应用对所述分割区域0和所述分割区域1应用的模板匹配的第十一语法的解码进行控制。
15.一种图像解码方法,其特征在于,
具有:对控制能否应用解码目标序列的几何分割模式的第一语法进行解码的工序;
根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制的工序;
在控制能否应用所述解码目标块的几何分割模式的第一内部参数有效,且所述第二语法的值为1的情况下,
当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法有效时,不对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法进行解码的工序;
当所述第三语法不有效时,
在所述解码目标块所属的切片类型为B切片的情况下,对所述第四语法进行解码的工序;
在所述解码目标块所属的切片类型不为B切片的情况下,不对所述第四语法进行解码的工序;以及
在不满足所述第一内部参数有效,且所述第二语法的值为1的条件的情况下,不对所述第四语法进行解码的工序。
16.一种程序,其使计算机作为图像解码装置发挥功能,其特征在于,
所述图像解码装置具有:解码部,其构成为对控制能否应用解码目标序列的几何分割模式的第一语法进行解码,根据所述第一语法的值,对有无控制能否相对于所述解码目标序列的几何分割模式应用帧内预测模式的第二语法的解码进行控制,
所述解码部构成为,
在控制能否应用所述解码目标块的几何分割模式的第一内部参数有效,且所述第二语法的值为1的情况下,
当特定所述解码目标块的几何分割模式分割的分割区域0的预测模式是否为帧内预测模式的第三语法有效时,不对特定所述解码目标块的几何分割模式分割的分割区域1的预测模式是否为帧内预测模式的第四语法进行解码,
当所述第三语法不有效时,
在所述解码目标块所属的切片类型为B切片的情况下,对所述第四语法进行解码,
在所述解码目标块所属的切片类型不为B切片的情况下,不对所述第四语法进行解码,
在不满足所述第一内部参数有效,且所述第二语法的值为1的条件的情况下,不对所述第四语法进行解码。
CN202280055357.2A 2021-08-19 2022-08-03 图像解码装置、图像解码方法及程序 Pending CN117795962A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021134433A JP2023028611A (ja) 2021-08-19 2021-08-19 画像復号装置、画像復号方法及びプログラム
JP2021-134433 2021-08-19
PCT/JP2022/029749 WO2023021988A1 (ja) 2021-08-19 2022-08-03 画像復号装置、画像復号方法及びプログラム

Publications (1)

Publication Number Publication Date
CN117795962A true CN117795962A (zh) 2024-03-29

Family

ID=85240575

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280055357.2A Pending CN117795962A (zh) 2021-08-19 2022-08-03 图像解码装置、图像解码方法及程序

Country Status (4)

Country Link
US (1) US20240187606A1 (zh)
JP (1) JP2023028611A (zh)
CN (1) CN117795962A (zh)
WO (1) WO2023021988A1 (zh)

Also Published As

Publication number Publication date
WO2023021988A1 (ja) 2023-02-23
US20240187606A1 (en) 2024-06-06
JP2023028611A (ja) 2023-03-03

Similar Documents

Publication Publication Date Title
US8509551B2 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recording with image encoding program and computer readable recording medium recorded with image decoding program
US8488889B2 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US11665337B2 (en) Method and apparatus for encoding/decoding an image signal
US20160073107A1 (en) Method and apparatus for video encoding/decoding using intra prediction
US20080123947A1 (en) Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein
US20080137744A1 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080165849A1 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20090123066A1 (en) Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein,
US20080123977A1 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080130989A1 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080130990A1 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080130988A1 (en) Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
WO2019069602A1 (ja) 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、プログラムおよび映像システム
WO2019069601A1 (ja) 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法およびプログラム
CN114827623A (zh) 用于视频编解码的边界扩展
CN117795962A (zh) 图像解码装置、图像解码方法及程序
CN114007082B (zh) 一种解码、编码、编解码方法、装置及其设备
CN117581546A (zh) 图像解码装置、图像解码方法及程序
US20240129482A1 (en) Video encoding device, video decoding device, and video encoding method
JP7387806B2 (ja) 画像復号装置、画像復号方法及びプログラム
JP7516333B2 (ja) 画像復号装置、画像復号方法及びプログラム
US20240214579A1 (en) Image decoding device, image decoding method, and program
CN117941348A (zh) 图像解码装置、图像解码方法及程序
CN111247804B (zh) 图像处理的方法与装置
CN117795955A (zh) 图像解码装置、图像解码方法及程序

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination