CN105850126A - 用于对多层视频信号进行编码/解码的方法和装置 - Google Patents

用于对多层视频信号进行编码/解码的方法和装置 Download PDF

Info

Publication number
CN105850126A
CN105850126A CN201480071018.9A CN201480071018A CN105850126A CN 105850126 A CN105850126 A CN 105850126A CN 201480071018 A CN201480071018 A CN 201480071018A CN 105850126 A CN105850126 A CN 105850126A
Authority
CN
China
Prior art keywords
layer
photo current
picture
reference picture
prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480071018.9A
Other languages
English (en)
Other versions
CN105850126B (zh
Inventor
李培根
金柱英
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KT Corp
Original Assignee
KT Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KT Corp filed Critical KT Corp
Publication of CN105850126A publication Critical patent/CN105850126A/zh
Application granted granted Critical
Publication of CN105850126B publication Critical patent/CN105850126B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/39Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/58Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种根据本发明的用于对多层视频信号进行解码的方法的特征在于:考虑当前层中的当前图片的有效参考图片的最大数目是否有限来导出当前图片的有效参考数目;基于有效参考数目来获得参考层标识符;使用参考层标识符来确定当前图片的有效参考图片;生成包括有效参考图片的参考图片列表;以及使用参考图片列表对当前图片执行层间预测。

Description

用于对多层视频信号进行编码/解码的方法和装置
技术领域
本发明涉及用于对多层视频信号进行编码/解码的方法和装置。
背景技术
近来,在各应用领域中对高分辨率、高品质图像如高清晰度(HD)图像和超高清晰度(UHD)图像的需求已经增长。随着视频数据具有较高分辨率和较高品质,视频数据在量上大于传统视频数据。因此,如果视频数据通过现有介质如有线/无线宽带电路进行传输或者被存储在现有存储介质中,则传输成本和存储成本增大。为了避免较高分辨率、较高品质的视频数据遇到这些问题,可以使用高效的视频压缩技术。
存在如下各种视频压缩技术:该技术包括其中根据当前图片(picture)的先前图片或后续图片对包括在当前图片中的像素值进行预测的图片间预测、其中使用当前图片中的像素信息对包括在当前图片中的像素值进行预测的图片内预测、以及其中将短码分配给较频繁的值和将长码分配给较不频繁的值的熵编码。使用这样的视频压缩技术可以对视频数据进行高效地压缩以及传输或存储。
随着对高分辨率视频的日益增长的需求,对三维(3D)视频内容的需求也作为新的视频服务而增长。对用于高效地提供HD和3D UHD视频内容的视频压缩技术进行讨论。
发明内容
技术问题
本发明的目的是提供一种用于在对多层视频信号进行编码/解码中确定参考层的相应图片以用于对当前图片进行层间预测的方法和装置。
本发明的另一目的是提供一种用于在对多层视频信号进行编码/解码中对参考层的相应图片进行上采样的方法和装置。
本发明的另一目的是提供一种用于在对多层视频信号进行编码/解码中用层间参考图片构成参考图片列表的方法和装置。
本发明的另一目的是提供一种用于在对多层视频信号进行编码/解码中通过层间预测高效地导出与当前层有关的纹理信息或运动信息的方法和装置。
技术方案
在根据本发明的用于对多层视频信号进行解码的方法和装置中,考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定当前图片的有效参考数目;基于所确定的有效参考数目来获取参考层标识符(ID);使用参考层ID来确定当前图片的有效参考图片;生成包括有效参考图片的参考图片列表;以及基于参考图片列表对当前图片执行层间预测。
在根据本发明的用于对多层视频信号进行解码的方法和装置中,如果当前图片的有效参考图片的最大数目没有限制,则可以使用从比特流获取的与用于当前图片的参考图片的数目有关的信息来确定当前图片的有效参考数目;如果当前图片的有效参考图片的最大数目是有限的,则可以根据有效参考图片的有限最大数目来确定当前图片的有效参考数目。
在根据本发明的对多层视频信号进行解码的方法和装置中,可以基于最大有效参考标记来确定当前图片的有效参考图片的最大数目是否有限。
在根据本发明的用于对多层视频信号进行解码的方法和装置中,如果根据最大有效参考标记将针对视频序列的每个图片的有效参考图片的最大数目限制为1,则可以将当前图片的有效参考数目设置为1。
在根据本发明的对多层视频信号进行解码的方法和装置中,可以根据当前图片的直接依赖关系类型针对当前图片执行层间纹理预测和层间运动预测中的至少一者。
在根据本发明的用于对多层视频信号进行解码的方法和装置中,直接依赖关系类型可以包括以下中的至少一者:第一类型,其中针对当前图片仅参考与参考层有关的纹理信息;第二类型,其中针对当前图片仅参考与参考层有关的运动信息;以及第三类型,其中针对当前图片参考与参考层有关的纹理信息和运动信息二者。
在根据本发明的用于对多层视频信号进行编码的方法和装置中,考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定当前图片的有效参考数目;基于所确定的有效参考数目来获取参考层ID;使用参考层ID来确定当前图片的有效参考图片;生成包括有效参考图片的参考图片列表;以及基于参考图片列表对当前图片执行层间预测。
在根据本发明的用于对多层视频信号进行编码的方法和装置中,如果当前图片的有效参考图片的最大数目没有限制,则可以使用从比特流获取的与用于当前图片的参考图片的数目有关的信息来确定当前图片的有效参考数目;如果当前图片的有效参考图片的最大数目是有限的,则可以根据有效参考图片的有限最大数目来确定当前图片的有效参考数目。
在根据本发明的对多层视频信号进行编码的方法和装置中,可以基于最大有效参考标记来确定当前图片的有效参考图片的最大数目是否有限。
在根据本发明的用于对多层视频信号进行编码的方法和装置中,如果根据最大有效参考标记将针对视频序列的每个图片的有效参考图片的最大数目限制为1,则可以将当前图片的有效参考数目设置为1。
在根据本发明的对多层视频信号进行编码的方法和装置中,可以根据当前图片的直接依赖关系类型针对当前图片执行层间纹理预测和层间运动预测中的至少一者。
在根据本发明的用于对多层视频信号进行编码的方法和装置中,直接依赖关系类型可以包括以下中的至少一者:第一类型,其中针对当前图片仅参考与参考层有关的纹理信息;第二类型,其中针对当前图片仅参考与参考层有关的运动信息;以及第三类型,其中针对当前图片参考与参考层有关的纹理信息和运动信息二者。
有益效果
根据本发明,可以有效地确定参考层的相应图片以用于对当前层中的当前图片进行层间预测。
根据本发明,可以有效地对参考层的图片进行上采样。
根据本发明,可以有效地构成包括层间参考图片的参考图片列表。
根据本发明,可以通过层间预测来有效地导出与当前层有关的纹理信息和运动信息。
附图说明
图1是示出了根据本发明的实施例的编码装置的框图。
图2是示出了根据本发明的实施例的解码装置的框图。
图3是示出了在应用本发明的实施例中、用于使用参考层的相应图片来对当前层执行层间预测的操作的流程图。
图4是示出了在应用本发明的实施例中、用于考虑有效参考图片的最大数目是否有限来确定有效参考数目NumActiveRefLayerPics的方法的流程图。
图5是示出了在应用本发明的实施例中、用于使用关于子层数目的信息和最大时间指示符来确定当前图片的有效参考数目NumActiveRefLayerPics的方法的流程图。
图6是示出了在应用本发明的实施例中、用于基于所有的有效标记all_ref_layers_active_flag来确定当前图片的有效参考数目NumActiveRefLayerPics的方法的流程图。
图7示出了在应用本发明的实施例中、关于子层的数目的信息的语法表。
图8示出了在应用本发明的实施例中、基于最大时间级存在标记获取最大时间指示符的方法。
图9示出了在应用本发明的实施例中、用于考虑直接依赖关系获取最大时间指示符的方法。
图10是示出了在应用本发明的实施例中、用于对参考层的有效参考图片进行上采样的方法的流程图。
图11示出了在应用本发明的实施例中、用于确定存储在解码图片缓冲器中的短期参考图片的方法。
图12示出了在应用本发明的实施例中、用于确定长期参考图片的方法。
图13示出了在应用本发明的实施例中、用于使用短期参考图片和长期参考图片来构成参考图片列表的方法。
图14、图15及图16示出了在应用本发明的实施例中、用于构成多层结构中的参考图片列表的方法。
图17示出了在应用本发明的实施例中用于基于直接依赖关系类型信息direct_dependency_type来确定当前图片的直接依赖关系类型的方法。
图18示出了在应用本发明的实施例中用于基于缺省的直接依赖关系存在标记来确定当前图片的直接依赖关系类型的方法。
本发明的最优实施方式
根据本发明的用于对多层视频信号进行解码的方法和装置的特征在于:考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定当前图片的有效参考数目;基于所确定的有效参考数目来获取参考层标识符(ID);使用参考层ID来确定当前图片的有效参考图片;生成包括有效参考图片的参考图片列表;以及基于参考图片列表对当前图片执行层间预测。
根据本发明的用于对多层视频信号进行解码的方法和装置的特征在于:如果当前图片的有效参考图片的最大数目没有限制,则使用从比特流获取的与用于当前图片的参考图片的数目有关的信息来确定当前图片的有效参考数目;如果当前图片的有效参考图片的最大数目是有限的,则根据有效参考图片的有限最大数目来确定当前图片的有效参考数目。
根据本发明的用于对多层视频信号进行解码的方法和装置的特征在于:基于最大有效参考标记来确定当前图片的有效参考图片的最大数目是否有限。
根据本发明的用于对多层视频信号进行解码的方法和装置的特征在于:如果根据最大有效参考标记将针对视频序列的每个图片的有效参考图片的最大数目限制为1,则将当前图片的有效参考数目设置为1。
根据本发明的用于对多层视频信号进行解码的方法和装置的特征在于:根据当前图片的直接依赖关系类型针对当前图片执行层间纹理预测和层间运动预测中的至少一者。
根据本发明的用于对多层视频信号进行解码的方法和装置的特征在于,直接依赖关系类型包括以下中的至少一者:第一类型,其中针对当前图片仅参考与参考层有关的纹理信息;第二类型,其中针对当前图片仅参考与参考层有关的运动信息;以及第三类型,其中针对当前图片参考与参考层有关的纹理信息和运动信息二者。
根据本发明的用于对多层视频信号进行编码的方法和装置的特征在于:考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定当前图片的有效参考数目;基于所确定的有效参考数目来获取参考层ID;使用参考层ID来确定当前图片的有效参考图片;生成包括有效参考图片的参考图片列表;以及基于参考图片列表对当前图片执行层间预测。
根据本发明的用于对多层视频信号进行编码的方法和装置的特征在于:如果当前图片的有效参考图片的最大数目没有限制,则使用从比特流获取的与用于当前图片的参考图片的数目有关的信息来确定当前图片的有效参考数目;如果当前图片的有效参考图片的最大数目是有限的,则根据有效参考图片的有限最大数目来确定当前图片的有效参考数目。
根据本发明的用于对多层视频信号进行编码的方法和装置的特征在于:基于最大有效参考标记来确定当前图片的有效参考图片的最大数目是否有限。
根据本发明的用于对多层视频信号进行编码的方法和装置的特征在于:如果根据最大有效参考标记将针对视频序列的每个图片的有效参考图片的最大数目限制为1,则将当前图片的有效参考数目设置为1。
根据本发明的用于对多层视频信号进行编码的方法和装置的特征在于:根据当前图片的直接依赖关系类型针对当前图片执行层间纹理预测和层间运动预测中的至少一者。
根据本发明的用于对多层视频信号进行编码的方法和装置的特征在于,直接依赖关系类型包括以下中的至少一者:第一类型,其中针对当前图片仅参考与参考层有关的纹理信息;第二类型,其中针对当前图片仅参考与参考层有关的运动信息;以及第三类型,其中针对当前图片参考与参考层有关的纹理信息和运动信息二者。
具体实施方式
参照附图将在下面详细描述本发明的优选实施例。在详细描述之前,应理解,如在本公开内容和权利要求中所使用的术语或词汇不应当解释为其常用或字典意义,而应当基于发明人以最佳方式合适地定义术语的概念的原则来解释为匹配本发明的范围和精神的意义和概念。因此,如下所述的实施例和在附图中示出的配置仅是本发明的优选实施例,并不表示本发明的所有技术主题。因此,应理解,在提交本发明时本发明的实施例可以替换为各种等同物和修改示例。
当部件被称为“与……耦接/耦接到”或“连接到”另一部件时,应当理解为一个部件直接或者通过部件之间的任何其他部件耦接或连接到其他部件。在本公开内容中,术语“包括”并不排除存在除了特定部件以外的任何其他部件,这意指附加部件可以包括在本发明的范围或本发明的实施例中。
如在本公开内容中所使用的术语,第一或第二可以用来描述各种部件而不是限制部件。这些表达用于将一个部件与另一部件区分开。例如,在不脱离本公开的范围的前提下,第一部件可以被称为第二部件,反之,第二部件可以被称为第一部件。
此外,本发明的实施例中的部件被独立地示出以说明不同的特性功能,并不意指每个部件被配置在单独的硬件单元或者一个软件单元中。也就是说,为了方便描述,单独列举每个部件。因此,两个或更多个部件可以结合成一个部件或者一个部件可以被分成多个部件。部件被集成的实施例和部件被分离的实施例落入本发明的范围中。
一些部件可以是用于提高性能的可选部件,而不是针对本发明的主要功能的基本部件。本发明可以仅使用对于本发明的主题而言的基本的部件而不只是用来提高性能的部件来实现,其落入本发明的范围内。
支持比特流的多个层的视频编码和解码被称为可伸缩视频编码。因为多个层之间存在强关联,所以可以通过基于所述关联执行预测来去除数据的冗余分量以及增加视频编码性能。使用关于另一层的信息进行的当前层的预测被称为层间预测。
多个层可以具有不同的分辨率。分辨率可以意指空间分辨率、时间分辨率和图像品质中的至少一个。为了在层间预测期间控制分辨率,可以执行对层的重采样如上采样或下采样。
图1是示意性地示出根据本发明的实施例的编码装置的框图。
根据本发明的编码装置100包括针对上层的编码单元100a和针对下层的编码单元100b。
上层可以被称为当前层或增强层,以及下层可以被称为与上层、基本层或参考层相比具有较低分辨率的增强层。上层与下层之间可以在下述至少之一方面不同:空间分辨率、基于帧速率的时间分辨率、颜色格式以及基于量化步长的图像品质。当针对层间预测需要改变分辨率时,可以对层执行上采样或下采样。
针对上层的编码单元100a可以包括划分单元110、预测单元120、变换单元130、量化单元140、重排单元150、熵编码单元160、逆量化单元170、逆变换单元180、滤波器单元190以及存储器195。
针对下层的编码单元100b可以包括划分单元111、预测单元125、变换单元131、量化单元141、重排单元151、熵编码单元161、逆量化单元171、逆变换单元181、滤波器单元191以及存储器196。
可以通过以下描述的本发明的实施例中所描述的视频编码方法来实现编码单元,但是可以不执行一些部分的操作以降低编码装置的复杂度或能够进行快速实时编码。例如,针对在预测单元执行帧内预测时的实时编码,不执行其中所有的帧内预测模式方法用来选择最佳帧内编码方法的方法,而是可以执行其中从有限数量的帧内预测模式中选择一个帧内预测模式并且将所选择的一个帧内预测模式设置为最终帧内预测模式的方法。在另一示例中,用于帧间预测或帧内预测的预测块可以具有有限的形状。
在编码装置中处理的块单元可以是用于执行编码的编码单元、用于执行预测的预测单元或者用于执行变换的变换单元。编码单元、预测单元以及变换单元可以分别被称为CU、PU以及TU。
划分单元110和划分单元111各自可以通过将层图片划分成编码块、预测块和变换块的多个组合并且通过基于预定基准(例如成本函数)选择编码块、预测块和变换块的一个组合来划分层。例如,为了将层图片划分成编码单元,可以使用递归树结构如四叉树结构。在下文中,在本发明的实施例中,编码块不仅可以意指用于编码的块而且可以意指用于解码的块。
预测块可以是用于执行预测如帧内预测或帧间预测的单元。针对帧内预测的块可以是具有方形形式如2N×2N或N×N的块。对于针对帧间预测的块,存在方形形式如2N×2N和N×N的块、矩形形式如2N×N和N×2N的块、以及具有通过使用不对称运动划分(AMP)的预测块划分方法获得的不对称形式的块。变换单元115可以根据预测块的形式使用不同的变换方法。
编码单元100a和编码单元100b的预测单元120和预测单元125各自可以包括用于执行帧内预测的帧内预测单元121或帧内预测单元126以及用于执行帧间预测的帧间预测单元122或帧间预测单元127。针对上层的编码单元110a的预测单元120还可以包括用于使用与下层有关的信息来对上层执行预测的层间预测单元123。
预测单元120和预测单元125各自可以确定是对预测块执行帧间预测还是帧内预测。在执行帧内预测时,基于预测块确定帧内预测模式,并且可以基于变换块执行用于基于所确定的帧内预测模式处理帧内预测的处理。可以将所生成的预测块与原始块之间的残差(残差块)输入至变换单元130和变换单元131。此外,可以通过熵编码单元130连同残差一起对用于预测的预测模式信息、运动信息等进行编码并且将其传输至解码装置。
在使用脉冲编码调制(PCM)模式的情况下,在不使用预测单元120和预测单元125执行预测的情况下,原始块在不改变的情况下被编码并且被传输至解码单元。
帧内预测单元121和帧内预测单元126各自可以基于位于当前块(预测目标块)周围的参考像素来生成帧内预测块。在帧内预测方法中,帧内预测模式可以包括根据预测方向来使用参考像素的方向预测模式和不考虑预测方向的非方向预测模式。用于预测亮度信息的模式可以不同于用于预测色度信息的模式。可以使用通过预测亮度信息而获得的帧内预测模式或者所预测的亮度信息来预测色度信息。同时,如果参考像素不可用,则可以通过采用其他像素来替换不可用的参考像素来生成预测块。
预测块可以包括多个变换块。如果在执行帧内预测时预测块的大小和变换块的大小相同,则可以基于预测块中的左侧像素、左上侧像素和上侧像素来对预测块执行帧内预测。然而,在帧内预测时,当预测块和变换块的大小不同并且多个变换块被包括在预测块内时,使用与变换块相邻的邻近像素作为参考像素以执行帧内预测。此处,与变换块相邻的邻近像素可以包括与预测块相邻的邻近像素和预测块中的被先前解码像素中的至少之一。
帧内预测方法可以根据帧内预测模式在将依赖于模式的帧内平滑(MDIS)滤波器应用于参考像素之后生成预测块。应用于参考像素的MDIS滤波器的类型可以不同。MDIS滤波器是应用于通过执行帧内预测而生成的帧内预测块的附加滤波器,以及MDIS滤波器可以用于减小参考像素与执行预测之后所生成的帧内预测块之间的残差。在执行MDIS滤波时,根据帧内预测模式的方向性,可以对参考像素和包括在帧内预测块中的一些列执行不同的滤波。
帧间预测单元122和帧间预测单元127各自可以通过参照关于包括在当前图片的先前图片或后续图片中的至少之一中的块的信息来执行预测。帧间预测单元122和帧间预测单元127各自可以包括参考图片插值单元、运动预测单元和运动补偿单元。
参考图片插值单元可以从存储器195和存储器196接收参考图片信息并且可以根据参考图片生成小于整数像素的关于像素的信息。对于亮度像素可以使用基于DCT的8抽头插值滤波器,基于DCT的8抽头插值滤波器有区别地设置滤波器系数以1/4像素为单位生成小于整数像素的关于像素的信息。对于色度信号,可以使用基于DCT的4抽头插值滤波器,基于DCT的4抽头插值滤波器有区别地设置滤波器系数以1/8像素为单位生成小于整数像素的关于像素的信息。
帧间预测单元122和帧间预测单元127各自可以基于通过参考图片插值单元进行插值的参考图片来执行运动预测。对于用于计算运动矢量的方法,可以使用各种方法如基于全搜索的块匹配算法(FBMA)、三步搜索(TSS)算法以及新三步搜索(NTS)算法。运动矢量可以具有与1/2或1/4的插值像素对应的运动矢量值。帧间预测单元122和帧间预测单元127各自可以使用各种帧间预测方法中的任一方法对当前块执行预测。
作为帧间预测方法,可以使用各种方法如跳过方法、合并方法和运动矢量预测(MVP)方法。
在帧间预测中,对运动信息即关于参考索引、运动矢量和残差信号的信息进行熵编码并且将其递送至解码单元。在应用跳过模式的情况下,由于不生成残差信息,因此可以省略用于对残差信号进行变换和量化的过程。
层间预测单元123执行层间预测以用于使用关于下层的信息来预测上层。层间预测单元123可以使用下层的纹理信息、运动信息等来执行层间预测。
可以通过将下层的图片设置为参考图片并且使用下层(参考层)的图片中的运动信息对上层的当前块执行预测来执行层间预测。用作层间预测中的参考图片的参考层的图片可以是被采样以匹配当前层的分辨率的图片。此外,运动信息可以包括运动矢量和参考索引。在这种情况下,用于参考层的图片的运动矢量值可以被设置成(0,0)。
作为层间预测的示例,描述了使用下层的图片作为参考图片的预测方法,但本发明不限于此。层间预测单元123可以附加地执行层间纹理预测、层间运动预测、层间语法预测和层间残差预测等。
层间纹理预测可以基于参考层的纹理来得到当前层的纹理。可以对参考层的纹理进行采样以匹配当前层的分辨率,并且层间预测单元123可以基于经采样的参考层的纹理来预测当前层的纹理。
层间运动预测可以基于参考层的运动矢量来得到当前层的运动矢量。在这种情况下,可以按比例调节参考层的运动矢量以匹配当前层的分辨率。层间语法预测可以基于参考层的语法来预测当前层的语法。例如,层间预测单元123可以使用参考层的语法作为当前层的语法。此外,层间残差预测可以使用参考层的复原图片与当前层的复原图片之间的残差来重构当前层的图片。
生成包括残差信息的残差块并且将残差块输入至相应的变换单元130或变换单元131,其中残差信息是通过预测单元120和预测单元125各自生成的预测块与预测块的重构块之间的差值。
变换单元130和变换单元131各自可以使用变换方法如离散余弦变换(DCT)或离散正弦变换(DST)来对残差块进行变换。可以基于用于生成残差块的预测块的帧内预测模式信息和预测块的大小信息来确定是应用DCT还是应用DST对残差块进行变换。也就是说,变换单元130和变换单元131各自可以根据预测块的大小和预测方法使用不同的变换方法。
量化单元140和量化单元141各自可以对通过相应的变换单元130或变换单元131在频域中变换的值进行量化。量化系数可以根据块的类型或图片的重要性而变化。可以将通过量化单元140或量化单元141计算的值提供至逆量化单元170或逆量化单元171以及重排单元150或重排单元151。
重排单元150和重排单元151各自可以对经量化的残差值的系数值进行重排。重排单元150或重排单元151可以使用系数扫描方法将2D块格式系数变成1D矢量格式系数。例如,重排单元150或重排单元151可以通过使用Z形扫描方法对从DC系数到高频带系数范围的系数进行扫描以将2D块格式系数变成1D矢量格式系数。替代Z形扫描方法,根据变换块的大小和帧内预测模式,可以使用用于以列方向扫描2D块格式系数的竖直扫描方法和用于以行方向扫描2D块格式系数的水平扫描方法。也就是说,根据变换块的大小和帧内预测模式,可以确定使用Z形扫描方法、竖直扫描方法和水平扫描方法中的哪种方法。
熵编码单元160和熵编码单元161各自可以基于通过重排单元150或重排单元151计算的值来执行熵编码。例如,可以使用各种编码方法如指数哥伦布码(Golomb)、上下文自适应可变长度编码(CAVLC)和上下文自适应二进制算术编码(CABAC)来实现熵编码。
熵编码单元160和熵编码单元161可以通过从重排单元150和重排单元151以及预测单元120和预测单元125接收各种信息如编码块的块类型信息和残差系数信息、预测模式信息、划分单元信息、预测块信息和传输单元信息、运动矢量信息、参考帧信息、块的插值信息、滤波信息等基于预定编码方法来执行熵编码。此外,熵编码单元160和熵编码单元161可以对从重排单元150和重排单元151输入的编码单元的系数值进行熵编码。
熵编码单元160和熵编码单元161各自可以通过对帧内预测模式信息执行二进制编码来对当前块的帧内预测模式信息进行编码。熵编码单元160和熵编码单元161可以包括用于二进制编码的码字映射单元,并且可以根据用于帧内预测的预测块的大小来以不同的方式执行二进制编码。码字映射单元可以通过二进制编码操作来自适应地生成码字映射表或者可以具有先前生成的映射表。在另一实施例中,熵编码单元160和熵编码单元161可以使用用于执行码号映射的码号映射单元和用于执行码字映射的码字映射单元来表示关于当前块的帧内预测模式信息。码号映射单元和码字映射单元可以分别生成码号映射表和码字映射表或者可以分别具有先前生成的码号映射表和码字映射表。
逆量化单元170和逆量化单元171各自以及逆变换单元180或逆变换单元181可以对通过量化单元140或量化单元141量化的值进行逆量化以及对通过变换单元130或变换单元131变换的值进行逆变换。将通过逆量化单元170或逆量化单元171以及逆变换单元180或逆变换单元181生成的残差值与通过包括在预测单元120或预测单元125中的运动估计单元、运动补偿单元和帧内预测单元进行预测的预测块结合,并且因此生成重构块。
滤波器单元190和滤波器单元191各自可以包括去块滤波器和偏移校正单元中的至少之一。
去块滤波器可以去除由于重构图片中的块之间的边界而生成的块扭曲(block distortion)。可以基于包括在块的一些列或行中的像素来确定是否执行去块,即是否将去块滤波器应用于当前块。在将去块滤波器应用于块时,可以根据所需的去块滤波的强度来应用强滤波器或弱滤波器。此外,在去块滤波器的应用中,当进行竖直滤波和水平滤波时,可以并行地处理竖直滤波和水平滤波。
偏移校正单元可以以像素单位针对对其执行去块的图片与源图片之间的偏移进行校正。为了对特定图片执行偏移校正,可以使用以下方法:将包括在图片中的像素分成某些区域、确定要施加偏移的区域以及将偏移施加于区域的方法;或者在考虑关于每个像素的边缘的信息的情况下施加偏移的方法。
滤波器单元190和滤波器单元191各自可以使用仅去块滤波器、或者使用去块滤波器和偏移校正二者而不是使用所有的去块滤波器和偏移校正来实现。
存储器195和存储器196各自可以存储通过滤波器单元190或滤波器单元191计算的重构块或图片,以及可以在执行帧内预测时将存储在存储器中的重构块和图片提供至预测单元120或预测单元125。
从下层的熵编码单元100b输出的信息和从上层的熵编码单元100a输出的信息可以通过MUX 197被复用并且以比特流的形式被输出。
MUX 197可以包括在上层的编码单元100a或下层的编码单元100b中,或者有别于编码单元100可以被实现为独立的装置或模块。
图2是示意性地示出根据本发明的实施例的解码装置的框图。
如图2所示,解码装置200包括上层的解码单元200a和下层的解码单元200b。
上层的解码单元200a可以包括熵解码单元210、重排单元220、逆量化单元230、逆变换单元240、预测单元250、滤波器单元260以及存储器270。
下层的解码单元200b可以包括熵解码单元211、重排单元221、逆量化单元231、逆变换单元241、预测单元251、滤波器单元261以及存储器271。
当从编码装置传输包括多个层的比特流时,解复用器(DEMUX)280可以对与每个层对应的信息进行解复用并且将结果传输至每个层的解码单元200a或解码单元200b。可以以与编码装置的处理相逆的处理来对输入的比特流进行解码。
熵解码单元210和熵解码单元211各自可以以与通过编码装置的熵编码单元执行的熵编码处理相逆的逆处理来执行熵解码。在由熵解码单元210和熵解码单元211解码的信息中,将生成预测块所需的信息提供至预测单元250和预测单元251,并且可以将通过熵解码单元执行熵解码的残差输入至重排单元220和重排单元221。
像熵编码单元160和熵编码单元161一样,熵解码单元210和熵解码单元211各自可以使用CABAC和CAVLC中的至少之一。
熵解码单元210和熵解码单元211各自可以对与通过编码装置执行的帧内预测和帧间预测有关的信息进行解码。熵解码单元210和熵解码单元211各自包括码字映射单元,码字映射单元具有用于根据所接收的码字生成帧内预测模式号的码字映射表。码字映射表可以被预先存储或可以被自适应地生成。当使用码号映射表时,可以附加地排列用于执行码号映射的码号映射单元。
重排单元220和重排单元221各自可以基于编码单元所使用的重排方法来对通过熵解码单元210或熵解码单元211进行熵解码的比特流进行重排。以一维矢量形式表示的系数可以通过被重构而被重排成2维块类型系数。重排单元220和重排单元221各自可以接收与通过编码单元执行的系数扫描方法有关的信息并且可以使用其中基于由编码单元执行的扫描的顺序以执行逆扫描的方法来对系数进行重排。
逆量化单元230和逆量化单元231各自可以基于由编码装置提供的量化参数和块的重排系数来执行逆量化。
逆变换单元240和逆变换单元241各自可以对由编码装置执行的量化结果执行逆DCT或逆DST,逆DCT或逆DST与由相应的变换单元130或变换单元131执行的DCT和DST对应。可以以由编码装置确定的传输单元来执行逆变换。在编码装置的变换单元中,可以根据多条信息如预测方法、当前块的大小、预测方向等来选择性地执行DCT和DST。解码装置的逆变换单元240或逆变换单元241可以基于关于由编码装置的变换单元所执行的变换的信息来执行逆变换。可以基于编码块来执行变换而不是基于变换块来执行变换。
预测单元250和预测单元251各自可以基于由熵解码单元210和熵解码单元211提供的预测块的生成的相关信息以及从相应的存储器270或存储器271提供的先前解码的块或图片的相关信息来生成预测块。
预测单元250和预测单元251各自可以包括预测单元确定单元、帧间预测单元和帧内预测单元。
预测单元确定单元接收各种信息、区分预测块与当前编码块并且确定预测块是执行帧间预测还是帧内预测,所述信息包括从熵解码单元输入的预测单元信息、关于帧内预测方法的预测模式信息、关于帧间预测方法的运动预测信息等。
帧间预测单元可以基于包括在当前图片的先前图片和后续图片中的至少之一中的信息、使用对于由编码装置所提供的当前预测块的帧间预测所需的信息来执行对当前预测块的帧间预测,其中该当前图片包括当前预测块。为了执行帧间预测,可以基于相应编码块来确定用作被包括在编码块中的预测块的运动预测方法的方法是否是跳过模式、合并模式或使用运动矢量预测器(MVP)的模式(AMVP模式)。
帧内预测单元可以基于关于当前图片中的重构像素的信息来生成预测块。当预测块是对其执行帧内预测的预测块时,可以基于由编码装置提供的关于预测块的帧内预测模式信息来执行帧内预测。帧内预测单元可以包括:用于对当前块的参考像素执行滤波的MDIS滤波器、用于通过对参考像素进行插值来以小于单个像素为单位生成参考像素的参考像素插值单元以及用于在当前块的预测模式是DC模式的情况下通过滤波来生成预测块的DC滤波器。
上层的解码单元200a的预测单元250还可以包括用于执行层间预测的层间预测单元,其中使用关于下层的信息来预测上层。
层间预测单元可以通过使用帧内预测模式信息、运动信息等来执行层间预测。
实施层间预测以使得可以通过采用下层图片作为参考图片并且使用与下层(参考层)的图片有关的运动信息来对上层的当前块执行预测。
在层间预测中,可以针对当前层的分辨率来对用作参考图片的参考层的图片进行适当地采样。此外,运动信息可以包括运动矢量和参考索引。在这一点上,用于参考层图片的运动矢量值可以被设置为(0,0)。
作为层间预测的示例,描述了用于使用下层图片作为参考图片的预测方法,但不限于此。层间预测单元123可以附加地执行层间纹理预测、层间运动预测、层间语法预测和层间残差预测等。
层间纹理预测可以基于参考层的纹理来得到当前层的纹理。可以针对当前层的分辨率来对参考层纹理进行适当地采样,并且层间预测单元可以基于所采样的纹理来预测当前层纹理。层间运动预测可以基于参考层的运动矢量来得到当前层的运动矢量。文中,可以针对当前层的分辨率来适当地按比例调节参考层的运动矢量。在层间语法预测中,可以基于参考层语法来预测当前层语法。例如,层间预测单元123可以使用参考层语法作为当前层语法。此外,在层间残差预测中,可以通过使用参考层的重构图像与当前层的重构图像之间的差值来重构当前层的图片。
可以将重构块或图片提供至各滤波器单元260和滤波器单元261。滤波器单元260和滤波器单元261各自可以包括去块滤波器和偏移校正单元。
可以从编码装置接收关于是否将去块滤波器应用于相应块或图片的信息以及关于在应用去块滤波器时是应用强滤波器还是应用弱滤波器的信息。解码装置的去块滤波器可以接收从编码装置提供的去块滤波器相关信息并且解码装置可以对相应块执行去块滤波。
偏移校正单元可以基于在编码时的施加于图像的偏移值信息和偏移校正的类型来对重构图像执行偏移校正。
存储器270和存储器271各自可以存储重构图片或块以使其能够用作参考图片或参考块,并且存储器270和存储器271还可以输出重构图片。
编码装置和解码装置可以对三个层或更多个层执行编码,而不是对两个层执行编码,并且在这种情况下,可以提供与上层的数量对应的针对上层的多个编码单元和解码单元。
在用于支持多层结构的可伸缩视频编码(SVC)中,存在多个层之间的关联。当通过使用该关联来执行预测时,可以去除数据重复元素并且可以改进图像编码性能。
因此,当对要被编码/解码的当前层(即增强层)的图片(即图像)进行预测时,可以执行通过使用另一层的信息的层间预测以及使用当前层的信息的帧间预测或帧内预测。
当执行层间预测时,可以通过使用用于层间预测的参考层的解码图片作为参考图片来生成用于当前层的预测样本。
在这种情况下,由于当前层与参考层之间可以在以下方面中的至少一个方面中不同:空间分辨率、时间分辨率和图像品质(由于层之间的可伸缩性的差异而引起的),所以对参考层的解码图片进行重采用以适于当前层的可伸缩性,以及然后将其用作用于当前层的层间预测的参考图片。“重采样”是指对参考层图片的样本进行上采样或下采样以匹配当前层图片的图片大小。
在本说明书中,当前层是对其执行编码或解码的层,并且当前层可以是增强层或上层。参考层是被参考以用于当前层的层间预测的层,并且参考层可以是基本层或下层。用于当前层的层间预测的参考层的图片(即参考图片)可以被称为层间参考图片或者层之间的参考图片。
图3是示出了在应用本发明的实施例中、使用参考层的相应图片对当前层执行层间预测的操作的流程图。
参照图3,可以确定针对当前层的当前图片的有效参考数目NumActiveRefLayerPics(S300)。
可以将一个或多个参考层的相应图片用于当前层的当前图片的层间预测。将参考层的相应图片中的用于当前层的当前图片的层间预测的相应图片的数目称为有效参考数目NumActiveRefLayerPics。下文中,将当前图片的用于层间预测的相应图片称为有效参考图片。
当前层可以指与参考层具有直接依赖关系的层。参考层可以意指包括当前层的至少一张有效参考图片的层。相应地,用于当前层的层间预测的参考层的数目NumDirectRefLayers可以等于或大于有效参考数目NumActiveRefLayerPics。
相应图片可以指与当前层的当前图片位于相同时刻的图片。例如,相应图片可以为与当前层的当前图片具有相同的图片顺序计数(POD)信息的图片。相应图片可以与当前层的当前图片属于相同的访问单元(AU)。相应图片可以与当前层的当前图片具有相同的时间ID TemporalID。该时间ID TemporalID可以指用于根据时间分辨率识别被可伸缩编码的多个层中的每个层的ID。
可以考虑有效参考图片的最大数目是否有限来确定有效参考数目NumActiveRefLayerPics。或者可以基于关于子层的数目的信息和最大时间指示符来确定有效参考数目NumActiveRefLayerPics。这将参照图4至图9详细描述。
可以基于在步骤S300中确定的有效参考数目NumActiveRefLayerPics来获取参考层ID(S310)。
参考层ID可以意指包括当前图片的有效参考图片的层的层IDnuh_layer_id。
具体地,可以将许多参考层ID作为有效参考数目来获取NumActiveRefLayerPics。仅在有效参考数目NumActiveRefLayerPics不同于当前层的直接层的数目NumDirectRefLayers时,可以获取参考层ID。如果有效参考数目NumActiveRefLayerPics等于当前层的直接层的数目NumDirectRefLayers,这意味着与当前层具有直接依赖关系的所有参考层具有当前图片的有效参考图片。因此,没必要以信号的形式分别发出参考层ID以识别包括当前图片的有效参考图片的层。
可以使用在步骤S310中获取的参考层ID确定当前图片的有效参考图片(S320)。
具体地,可以将与通过参考层ID识别的参考层中的当前图片对应的图片确定为当前图片的有效参考图片。如前所述,相应图片可以指与当前图片处于相同时刻的图片或与当前图片具有相同的POC信息的图片。或者相应图片可以指与当前图片属于相同的AU的图片。
可以通过对在步骤S320中确定的有效参考图片进行上采样来生成层间参考图片(S330)。
具体地,层间参考图片可以包括第一层间参考图片和第二层间参考图片中的至少一个。第一层间参考图片可以指通过对整数位置进行滤波获得的参考图片,以及第二层间参考图片可以指没有在整数位置进行滤波的参考图片。
整数位置可以意指在经上采样的有效参考图片中的整数单元的像素。或者如果以等于或小于整数个像素为单位执行插值,即在上采样期间的1/n像素单位中,则产生n个相位以及整数位置可以指具有相位0的位置(即在插值后整数的像素位置为n倍)。可以使用相邻的整数位置执行整数位置的滤波。相邻的整数位置可以与当前经滤波的整数位置位于相同的行或列中。相邻的整数位置可以指在上述相同行或列中的多个整数位置。在此,多个整数位置按次序地位于相同行或列中。将参照图10描述具体的上采样方法。
然而,如果当前层和参考层具有相同的分辨率,则可以省略上述上采样过程。在这种情况下,可以仍然将所确定的有效参考图片用作层间参考图片。
可以使用时间参考图片和在步骤S330中生成的层间参考图片来生成参考图片列表(S340)。
具体地,当前图片的参考图片列表可以包括与当前图片属于相同层的参考图片(以下被称为时间参考图片)。时间参考图片可以指与当前图片具有不同输出顺序(例如不同的POC)的图片。将参照图11、图12及图13描述用于使用时间参考图片生成参考图片列表的方法。
同时,参考图片列表还可以包括用于当前图片的层间预测的层间参考图片。也就是说,可以将不同层的图片以及相同层的图片称为多层结构(例如可伸缩视频编码或多视图视频编码)。将参照图14、图15及图16描述用于使用层间参考图片构建参考图片列表的方法。
如参照步骤S330之前描述的,层间参考图片可以包括第一层间参考图片和第二层间参考图片中的至少一个。因此,可以配置参考图片列表以包括第一层间参考图片和第二层间参考图片之一,或者可以配置参考图片列表以包括第一层间参考图片和第二层间参考图片二者。
针对第一层间参考图片和第二层间参考图片的选择使用,可以确定使用第一层间参考图片和第二层间参考图片二者还是使用第一层间参考图片和第二层间参考图片之一。另外,如果选择使用了第一层间参考图片和第二层间参考图片之一,则可以确定第一层间参考图片和第二层间参考图片中待使用的层间参考图片。为此,编码设备可以以信号的形式发出指示第一层间参考图片和第二层间参考图片中待使用的层间参考图片的信息。
或者为了选择使用第一层间参考图片和第二层间参考图片,可以使用参考索引。具体地,可以通过参考索引基于预测块选择第一层间参考图片和第二参考图片中的仅一者或二者。
如果将层间参考图片添加至参考图片列表,则需要改变在参考图片列表中列举的参考图片的数目或为每个参考图片所分配的参考索引的数目的范围。
在此假设指示在不执行层间预测的基本层的参考图片列表中的最大参考索引值的片头部的语法num_ref_idx_10_active_minus1和num_ref_idx_11_active_minus1从0变化至14。
如果使用了第一层间参考图片和第二层间参考图片之一,则可以将表示当前层的参考图片列表中的最大参考索引值的语法num_ref_idx_10_active_minus1和num_ref_idx_11_active_minus1限定为从0变化至15。
即使使用第一层间参考图片和第二层间参考图片二者,如果将两个层间参考图片添加至不同的参考图片列表,则可以将num_ref_idx_10_active_minus1和num_ref_idx_11_active_minus1限定为从0变化至15。
例如,如果参考图片列表L0中的时间参考图片的数目为15,则将第一层间参考图片或第二层间参考图片添加至参考图片列表L0导致总共存在16张参考图片,从而num_ref_idx_10_active_minus1的值变为15。
或者在使用第一层间参考图片和第二层间参考图片二者的情况下,如果将两张层间参考图片添加至同一参考图片列表,则可以限定表示当前层的参考图片列表的最大参考索引值的语法num_ref_idx_10_active_minus1和num_ref_idx_11_active_minus1从0变化至16。
例如,如果参考图片列表L0中的时间参考图片的数目为15,则将第一层间参考图片和第二层间参考图片添加至参考图片列表L0导致总共存在17张参考图片,从而num_ref_idx_10_active_minus1的值变为16。
可以基于在步骤S340中生成的参考图片列表对当前图片执行帧间预测(S350)。
具体地,选择与当前块的参考索引对应的参考图片。所选择的参考图片可以为与当前块位于相同层中的时间参考图片,或层间参考图片(即经上采样的有效参考图片或有效参考图片)。
可以基于当前块的运动矢量确定参考图片中的参考块,以及可以使用所确定的参考块的复原的采样值或纹理信息来预测当前块的采样值或纹理信息。
如果与当前块的参考索引对应的参考图片是层间参考图片,则参考块可以为与当前块位于相同位置的块(下文中被称为呼应(call)块)。为此,如果当前块的参考图片是层间参考图片,则可以将当前块的运动矢量设置为(0,0)。
可以根据直接依赖关系类型使用层间参考图片来对当前图片执行层间纹理预测或层间运动预测中的至少一个。
此处,直接依赖关系类型包括以下中的至少一个:1)第一类型,其中当前图片仅参考参考层的纹理信息,2)第二类型,其中当前图片仅参考参考层的运动信息,或者3)第三类型,其中当前图片参考参考层的纹理信息和运动信息二者。
当前图片可以选择性地使用以上提及的第一类型、第二类型和第三类型中的一个。将参照图17和图18来详细描述用于确定当前图片的直接依赖关系类型的方法。
图4示出了在应用本发明的实施例中、用于考虑有效参考图片的最大数目是否有限来确定有效参考数目NumActiveRefLayerPics的方法。
参照图4,可以确定当前图片的有效参考图片的最大数目是否有限(S400)。
具体地,可以基于最大有效参考标记max_one_active_ref_layer_flag确定当前图片的有效参考图片的最大数目是否有限。
最大有效参考标记可以指示视频序列中的每个图片的有效参考图片的最大数目是否为1。例如,如果最大有效参考标记的值为1,则可以将对于视频序列的每个图片的层间预测可用的有效参考图片的数目限制为1。另一方面,如果最大有效参考标记的值为0,则对于视频序列的每个图片的层间预测而言多个有效参考图片可用。可以从通常应用于比特流的视频参数设置,特别是包括在所接收的视频序列中的图片获取最大有效参考标记。
如果在步骤S400中确定当前图片的有效参考图片的最大数目不是有限的,则可以从比特流获取关于层间参考的数目的信息num_inter_layer_ref_pics_minus1。
关于层间参考的数目的信息是用于确定有效参考图片的数目的经编码的信息。例如,为了编码效率,可以将关于层间参考的数目的信息编码为等于(用于当前图片的层间预测的有效参考图片的数目-1)的值。
可以使用在步骤S410中获取的关于层间参考的数目的信息确定当前图片的有效参考数目NumActiveRefLayerPics(S420)。
例如,如果将关于层间参考的数目的信息编码为等于(用于当前图片的层间预测的有效参考图片的数目-1)的值,则可以通过将关于层间参考的数目的信息加1来计算当前图片的有效参考数目NumActiveRefLayerPics。
相反,如果在步骤S400中确定当前图片的有效参考图片的最大数目有限,则可以根据当前图片的有效参考图片的有限最大数目来确定当前图片的有效参考数目NumActiveRefLayerPics(S430)。
例如,如果根据最大有效参考标记max_one_active_ref_layer_flag将当前图片的有效参考图片的最大数目限制为1,则可以将当前图片的有效参考数目NumActiveRefLayerPics设置为1。
图5示出了在应用本发明的实施例中、用于使用子层数目信息和最大时间指示符来确定有效参考数目NumActiveRefLayerPics的方法。
参照图5,可以从比特流获取关于参考层的子层数目的信息以及当前层的最大时间指示符。
一个层可以包括具有不同时间分辨率的多个可伸缩编码的子层。为了提高编码效率,可以将关于包括在一个层中的时间子层的最大数目的信息编码为等于(时间子层的最大数目-1)的值。将该信息称为子层数目信息。相应地,可以将子层数目信息定义为用于确定包括在参考层中的时间子层的最大数目的信息。将参照图7详细描述用于获取子层数目信息的方法。
同时,如果在当前层中经编码的当前图片的时间分辨率较低(即,当前图片的时间ID TemporalID具有较小值),则当前图片与当前层的已经解码的图片之间的显示顺序差较大。在这种情况下,当前图片与已经解码的图片之间存在较高的可能具有不同的视频特性。因此,代替当前层的已经解码的图片,参考层的对应的图片很大可能被用作参考图片。
反之,如果在当前层中经编码的当前图片的时间分辨率较高(即,当前图片的时间ID TemporalID具有较大值),则当前图片与当前层的已经解码的图片之间的显示顺序差不大。在这种情况下,当前图片与已经解码的图片之间存在较高的可能具有类似的视频特性。因此,代替参考层的对应的图片,很可能将当前层的已经解码的图片用作参考图片。
如上所述,考虑参考层的特定时间ID TemporalID,由于层间预测在当前图片的时间分辨率较低时是高效的,则需要确定是否允许层间预测。为此,可以以信号的形式发出允许用于当前层的帧间预测的参考层的时间ID的最大值。时间ID的最大值被称为最大时间指示符。将参照图8和图9来描述用于获取最大时间指示符的方法。
可以使用针对当前层的关于参考层的子层数目信息和最大时间指示符来确定针对当前图片的候选参考图片(S510)。
特别地,可以考虑参考层的对应的图片是否满足之后的第一条件和第二条件来确定针对当前图片的候选参考图片。在此,候选参考图片指的是可用于当前图片的层间预测的候选者,并且候选参考图片与用于当前图片的层间预测的有效参考图片不同。
[第一条件]子层数目信息>=对应图片的时间ID,TemporalID
[第二条件]最大时间指示符>对应图片的时间ID
如果参考层的对应图片满足第一条件和第二条件(即,对应图片的时间ID小于或等于子层数目信息,并且小于最大时间指示符),则可以将对应图片确定为可用于当前图片的层间预测的候选参考图片。
这是因为如果最大时间指示符限定为等于(允许用于当前层的层间预测的参考层的时间ID的最大值+1)的值,则允许仅使用来自参考层的图片中的具有比最大时间指示符小的时间ID的图片来执行层间预测。
另一方面,如果参考层的对应图片不满足第一条件和第二条件中的至少一个(即,对应图片的时间ID大于子层数目信息,或者等于或大于最大时间指示符),则可以将对应图片确定为被限制在当前图片的层间预测中使用的图片。
这是因为对应图片的时间ID不能大于现有的值(包括在参考层中的时间子层的最大数-1)。此外,因为如果参考层的最大时间ID被限定为现有的值(允许用于当前层的层间预测的参考层的时间ID的最大值+1),则具有比参考层中的图片的时间ID的最大值大的时间ID的对应图片被限制在当前层的层间预测中使用。
如上所述,满足第一条件和第二条件的对应图片可以选自对当前层有直接依赖关系的所有参考层中,并且可以被确定为针对当前图片的候选参考图片。
此外,可以对满足第一条件和第二条件的对应图片(即,候选参考图片)进行计数,并且计数可以被设置为候选参考数目numRefLayerPics。可能发生对应图片都不满足第一条件和第二条件。在这种情况下,可以将候选参考数目numRefLayerPics设置为0。
参考图5,可以确定在步骤S510中确定的候选参考图片数目(即,候选参考数目numRefLayerPics)是否是0(S520)。
如果在步骤S520中候选参考数目numRefLayerPics是0,则可以将针对当前图片的有效参考数目NumActiveRefLayerPics设置为0(S530)。
反之,如果候选参考数目numRefLayerPics不是0,则针对当前图片的所有候选参考图片或候选参考图片的一部分可以用作针对当前图片的有效参考图片。可以基于用于选择性使用如上所述的候选参考图片的所有有效标记all_ref_layers_active_flag来确定针对当前图片的有效参考数目NumActiveRefLayerPics(S540)。这将在以下参考图6来描述。
图6示出了在应用本发明的实施例中基于所有有效标记all_ref_layers_active_flag来确定针对当前图片的有效参考数目NumActiveRefLayerPics的方法。
参照图6,可以确定是否应用下述约束:当前图片的所有候选参考图片用于当前层中的当前图片的层间预测(S600)。
具体地,可以基于所有有效标记all_ref_layers_active_flag来确定是否应用下述约束:所有候选参考图片用于当前图片的层间预测。
所有有效标记all_ref_layers_active_flag可以指示由来自与当前层具有直接依赖关系的参考层的对应图片的子层数目信息和最大时间指示符所指示的候选参考图片是否用于当前图片的层间预测。
例如,如果所有有效标记all_ref_layers_active_flag是1,则针对当前图片的所有参考图片用于当前图片的层间预测。反之,如果所有有效标记all_ref_layers_active_flag是0,则不应用当前图片的所有候选参考图片用于当前图片的层间预测的约束。也就是说,由子层数目信息和最大时间指示符表示的所有候选参考图片和候选参考图片的仅一部分用于当前图片的层间预测。
如果在步骤S600中应用当前图片的所有候选参考图片用于当前图片的层间预测的约束,则可以基于候选参考图片的确定的数目来确定针对当前图片的有效参考数目NumActiveRefLayerPics(S610)。
具体地,可以将针对当前图片的有效参考数目NumActiveRefLayerPics设置为等于通过对当前图片的候选参考图片数目进行计数确定的候选参考数目NumRefLayerPics。
如果在步骤S600中不应用当前图片的所有候选参考图片用于当前图片的层间预测的约束,则可以确定针对当前图片的有效参考图片的最大数目是否有限(S620)。
具体地,可以基于最大有效参考标记max_one_active_ref_layer_flag来确定针对当前图片的有效参考图片的最大数目是否有限。
最大有效参考标记可以指示针对视频序列的每个图片的有效参考图片的最大数目是否是1。例如,如果最大有效参考标记是1,则可以将针对视频序列的每个图片的有效参考图片的最大数目限制为1。反之,如果最大有效参考标记是0,则可以使用多个有效参考图片针对视频序列中的每个图片来执行层间预测。可以从通常应用至比特流的视频参数集、特别地从包括在所接收的视频序列中的图片获取最大有效参考标记。
如果在步骤S620中确定针对当前图片的有效参考图片的最大数目不受限制,则可以从比特流中获取关于层间参考的数目num_inter_layer_ref_pics_minus1的信息(S630)。
关于层间参考的数目的信息是指示有效参考图片的数目的经编码的信息。例如,可以将关于层间参考的数目的信息编码为针对编码效率的等于(用于在当前图片的层间预测中使用的有效参考图片的数目-1)的值。
可以使用在步骤S630中获取的关于层间参考的数目的信息来确定针对当前图片的有效参考数目NumActiveRefLayerPics(S640)。
例如,如果关于层间参考的数目的信息被编码为等于(用于在当前图片的层间预测中使用的有效参考图片的数目-1)的值,则可以通过向关于层间参考的数目的信息加1来计算针对当前图片的有效参考数目NumActiveRefLayerPics。
反之,如果在步骤S620中确定针对当前图片的有效参考图片的最大数目有限,则可以根据针对当前图片的有效参考图片的有限最大数目来确定针对当前图片的有效参考数目NumActiveRefLayerPics(S650)。
例如,如果根据最大有效参考标记max_one_active_ref_layer_flag将针对当前图片的有效参考图片的最大数目限制为1,则可以将针对当前图片的有效参考数目NumActiveRefLayerPics设置为1。
图7示出了在应用本发明的实施例中的子层数目信息的语法表。
参照图7,可以从比特流获取子层存在标记sub_layer_vps_max_minus1_present_flag(S700)。
子层存在标记可以指示是否将以信号的形式发出子层数目信息sub_layer_vps_max_minus1[i]。例如,如果子层存在标记的值是1,则以信号的形式发出子层数目信息,以及如果子层存在标记的值是0,则不以信号的形式发出子层数目信息。
参照图7,如果子层存在标记的值是1,则可以从比特流获取子层数目信息sub_layer_vps_max_minus1[i](S710)。
子层数目信息sub_layer_vps_max_minus1[i]可以指示等于(包括在第i层中的时间子层的最大数目-1)的值。因此,子层数目信息sub_layer_vps_max_minus1[i]可以指示分配至包括在第i层中的时间子层的时间Id的最大值。
同时,可以针对包括在视频序列中的每个层来获取子层数目信息。尽管在图7中示出的子层数目信息为从视频参数集获取,但是本发明不限于此。可以从序列参数集中获取子层数目信息。
图8示出了在应用本发明的实施例中基于最大时间存在标记获取最大时间指示符的方法。
参照图8,可以从比特流获取最大时间存在标记max_tid_ref_present_flag(S800)。
最大时间存在标记max_tid_ref_present_flag可以指示是否将以信号的形式发出最大时间指示符max_tid_il_ref_pics_plus[i]。例如,如果最大时间存在标记的值是1,则以信号的形式发出最大时间指示符,以及如果最大时间存在标记的值max_tid_ref_present_flag是0,则不以信号的形式发出最大时间指示符。
参照图8,如果最大时间存在标记的值max_tid_ref_present_flag是1,则可以从比特流获取最大时间指示符max_tid_il_ref_pics_plus[i]。
最大时间指示符max_tid_il_ref_pics_plus[i]可以意为通过向在第i层的层间预测中使用的时间ID的最大值加1计算的值。
例如,如果最大时间指示符的值max_tid_il_ref_pics_plus[i]是0,则在视频序列的多个层中的第i层的图片不用作层间预测的参考图片。在此,第i层的图片可以不是随机访问图片而是非随机访问图片。
反之,如果最大时间指示符的值max_tid_il_ref_pics_plus[i]大于0,则立即属于视频序列的多个层中的第i层并且具有比最大时间ID大的时间ID的图片不用作层间预测的参考图片。
因此,只有当最大时间指示符的值大于0并且属于视频数目中的多个层中的第i层的图片具有等于或小于最大时间ID的时间ID时,属于第i层的图片才可以用作层间预测的参考图片。从最大时间指示符中得到最大时间ID。例如,可以将最大时间ID确定为通过从最大时间指示符的值中减去1而计算的值。
同时,在步骤S810中获取的最大时间指示符可以具有在预定范围(例如,0至7)内的值。如果在步骤S810中获取的最大时间指示符具有在预定范围内的值的最大值时,则无论参考层的对应图片的时间ID,TemporalID如何,参考层的对应图片可以用作针对当前层的层间参考图片。
然而,如果如在上面的实施例中在图8中针对每一层以信号的形式发出最大时间指示符,则与该层具有直接依赖关系的所有层会具有相同的最大时间指示符,从而降低了层间预测的效率。为了解决该问题,可以基于具有依赖关系的成对层来针对用于在参考的层中的层间预测的图片设置不同的最大时间ID,这将在下面参照图9来描述。
图9示出了在应用本发明的实施例中用于考虑了直接依赖关系获取最大时间指示符的方法。
参照图9,可以从比特流获取最大时间存在标记max_tid_ref_present_flag(S900)。
最大时间级存在标记max_tid_ref_present_flag是指示最大时间指示符的存在或不存在的信息,这已经参照图8详细地描述了,因此在此将不详细地描述。
参照图9,如果最大时间级存在标记的值是1,则可以确定第j层是否与第i层具有直接依赖关系(S910)。
例如,可以基于直接依赖关系标记direct_dependency_flag[j][i]来确定第j层是否与第i层具有直接依赖关系。也就是说,如果直接依赖关系标记的值是1,则第i层可以用于第j层的层间预测。反之,如果直接依赖关系标记的值是0,则第i层可以不用于第j层的层间预测。
只有在步骤是S900中确定第j层与第i层具有直接依赖关系时,才可以从比特流获取最大时间指示符max_tid_il_ref_pics_plus1[i][j](S920)。
换言之,可以针对具有直接依赖关系的每个成对的层即每对参考层和被参考层来获取最大时间指示符max_tid_il_ref_pics_plus1[i][j]。
在此,最大时间指示符max_tid_il_ref_pics_plus1[i][j]可以意为通过向允许用于第j层的层间预测的第i层的时间ID的最大值加1来计算的值。
例如,如果最大时间指示符的值是0,则视频序列的多个层中的第i层的图片不用作第j层的图片的层间预测的参考图片。在此,第i层的图片可以不是随机访问图片而是非随机访问图片。
反之,如果最大时间指示符的值大于0,则立即属于视频序列的多个层中的第i层并且具有比最大时间ID大的时间ID的图片不用作属于第j层的图片的层间预测的参考图片。
因此,只有在最大时间指示符的值大于0并且属于视频序列的多个层中的第i层的图片具有等于或小于最大时间ID的时间ID时,第i层的图片才可以用作在第j层的图片的层间预测的参考图片。从最大时间指示符中得到最大时间ID。例如,可以将最大时间ID确定为通过从最大时间指示符中减去1而计算的值。
同时,在步骤S920中获取的最大时间指示符可以具有在预定范围(例如,0至7)内的值。如果在步骤S920中获取的最大时间指示符具有在预定范围内的值的最大值,则无论参考层的对应图片的时间ID TemporalID如何,参考层的对应图片都可以用作针对当前层的层间参考图片。
如果如上所述针对具有直接依赖关系的每对层设置不同的最大时间ID,则与针对具有直接依赖关系的所有层设置相同最大时间ID的情况相比,可以增加层间预测的效率。
图10是根据应用本发明的实施例的用于对参考层的有效参考图片进行上采样的方法的流程图。
参照图10,可以得到与当前层的当前样本位置对应的参考层的参考样本位置(S1000)。
由于当前层和参考层可以在分辨率上彼此不同,则可以考虑层间的分辨率的不同来得到与当前样本位置对应的参考样本位置。也就是说,可以考虑当前层的图片与参考层的图片之间的宽高比。此外,由于参考层的经上采样的图片的尺寸可以与当前层的图片的尺寸不匹配,则可以要求为了校正这样的差而需要的偏移。
例如,可以考虑比例因子和经上采样的参考层的偏移来得到参考样本位置。
在此,可以基于当前层的当前图片与参考层的有效参考图片之间的宽长比来计算比例因子。
经上采样的参考层偏移可以意为关于位于当前图片的边缘处的任一样本的位置与位于层间参考图片的边缘处的任一样本的位置之间的差的信息。例如,经上采样的参考层偏移可以包括关于当前图片的左上样本的水平/垂直位置与层间参考图片的左上样本的水平/垂直位置之间的差的信息以及关于当前图片的右下样本的水平/垂直位置与层间参考图片的右下样本的水平/垂直位置之间的差的信息。
经上采样的参考层偏移可以从比特流中获得。例如,经上采样的参考图片偏移可以从视频参数集、序列参数集、图片参数集以及片头部中至少一个来获得。
可以考虑在步骤S1000处得到的参考样本位置处的相位来确定上采样滤波器的滤波器系数(S1010)。
在此,可以使用固定上采样滤波器或自适应上采样滤波器作为上采样滤波器。
1.固定上采样滤波器
固定上采样滤波器可以具有在不考虑视频的特征的情况下的预设滤波器系数。抽头滤波器可以用作固定上采样滤波器,可以相对于亮度(luma)分量和色度(chroma)分量中的每个来限定固定上采样滤波器。将参照表1和表2来描述具有1/16样本单元的精确度的上采样滤波器。
表1
表1限定了用于亮度分量的固定上采样滤波器的滤波器系数。
如在表1中所示,在对亮度分量进行上采样的情况下,应用8抽头滤波器。换言之,可以通过使用与当前层的当前样本对应的参考层的参考样本以及与参考样本相邻的邻近样本来执行插值。在此,邻近样本可以根据插值的方向来指定。例如,当在水平方向上执行插值时,邻近样本可以包括相对于参考样本在左边的3个连续的样本以及相对于参考样本在右边的4个连续的样本。可替选地,当在垂直方向上执行插值时,邻近样本可以包括相对于参考样本向上端的3个连续的样本以及相对于参考样本向下端的4个连续的样本。
此外,因为在具有1/16样本单位的精确度的情况下执行插值,所以存在总计16个相位。这是用于支持2倍和1.5倍的各种放大倍数的分辨率。
此外,固定上采样滤波器可以针对每个相位p使用具有不同系数的滤波器。除了相位p为0的情况以外,可以将每个滤波器系数的大小限定为在0至63的范围内。这意指在具有6比特精度的情况下执行滤波。此处,在以1/n样本单位执行插值的情况下,相位p为0意指为n的倍数的整数样本的位置。
表2
表2针对色度分量对固定上采样滤波器的滤波器系数进行限定。
如表2所示,在对色度分量进行上采样的情况下,与亮度分量的情况不同,可以应用4抽头滤波器。也就是说,可以通过使用参考层的与当前样本对应的参考样本以及与参考样本相邻的邻近样本来执行插值。此处,可以根据插值方向来指定邻近样本。例如,在沿水平方向执行插值的情况下,邻近样本可以包括相对于参考样本在左边的一个样本以及在右边的两个连续样本。或者,在沿竖直方向执行插值的情况下,邻近样本可以包括相对于参考样本朝向顶端的一个样本以及朝向底端的两个连续样本。
另外,类似于亮度分量的情况,因为在具有1/16样本单位的精确度的情况下执行插值,所以存在总计16个相位,并且可以针对每个相位p使用不同的系数。除了相位p为0的情况以外,可以将每个滤波器系数的大小限定为在0至62的范围内。这意指在具有6比特精度的情况下执行滤波。
在上面,例示了将8抽头滤波器应用于亮度分量和将4抽头滤波器应用于色度分量的情况,但是本发明不限于此,而是可以在考虑编码效率的情况下可变地确定抽头滤波器的阶数。
2.自适应上采样滤波器
在编码器中,在不使用固定滤波器系数的情况下通过考虑图像的特征来确定最佳滤波器系数,并且将所确定的最佳滤波器系数以信号的形式发出至解码器。以此方式,自适应上采样滤波器使用被自适应地确定的滤波器系数。因为图像的特征以图片为单位而变化,所以在使用能够很好地表示图像的特征的自适应上采样滤波器而非对于所有情况均使用固定上采样滤波器时可以改进编码效率。
可以通过将步骤S1010中确定的滤波器系数应用于参考层的有效参考图片来生成层间参考图片(S1020)。
具体地,可以通过将所确定的上采样滤波器的滤波器系数应用于有效参考图片的样本来执行插值。此处,首先沿水平方向执行插值,然后其次沿竖直方向对在水平插值之后所生成的样本执行插值。
图11是示出了用于指定存储在解码图片缓冲器中的短期参考图片的方法的图。
可以在解码图片缓冲器(DPB)中存储时间参考图片,并且当对于当前图片的帧间预测需要时间参考图片时,可以将时间参考图片用作为参考图片。存储在解码图片缓冲器中的时间参考图片可以包括短期参考图片。这样的短期参考图片表示其POC值与当前图片的POC值不具有大的差异的图片。
用于指定待存储在当前视图中的解码图片缓冲器中的短期参考图片的信息由参考图片的输出顺序(POC)以及指示相应图片是否直接地被当前图片引用的标记(例如,used_by_curr_pic_s0_flag,used_by_curr_pic_s1_flag)组成,其被统称为参考图片集。具体地,当used_by_curr_pic_s0_flag[i]的值为0时,如果短期参考图片集中的第i个短期参考图片的输出顺序(POC)值小于当前图片的输出顺序(POC)值,则其意指第i个短期参考图片不被用作为当前图片的参考图片。另外,当used_by_curr_pic_s1_flag[i]的值为0时,如果短期参考图片集中的第i个短期参考图片的输出顺序(POC)值大于当前图片的输出顺序(POC)值,则其意指第i个短期参考图片不被用作为当前图片的参考图片。
参照图11,在POC值为26的图片的情况下,可以使用总计三个图片(即,POC值为25、24、20的图片)作为用于帧间预测的短期参考图片。然而,由于POC为25的图片的used_by_curr_pic_s0_flag的值为0,所以POC值为25的图片不被直接用于POC值为26的图片的帧间预测。
以此方式,可以基于参考图片的输出顺序(POC)以及指示相应图片是否被当前图片用作为参考图片的标记二者来指定短期参考图片。
同时,可以用指示图片未被用作为参考图片(例如,“未被用于参考”)的指示符来标记没有出现在当前图片的参考图片集中的图片,并且接着可以将该图片从解码图片缓冲器中移除。
图12示出用于指定根据应用本发明的实施例的长期参考图片的方法。
由于长期参考图片的POC与当前图片具有大的差异,所以其可以使用POC值的最低有效位(LSB)和最高有效位(MSB)来表示。
因此,可以使用参考图片的POC值的LSB、当前图片的POC值、以及当前图片的POC值的MSB与参考图片的POC值的MSB之间的差来得到长期参考图片的POC值。
例如,假设当前图片的POC为331,并且可以由LSB表示的最大值为32,并且假设POC值为308的图片被用作为长期参考图片。
在这种情况下,当前图片的POC值、即331可以由32*10+11表示,其中10是MSB值,并且11是LSB值。长期参考图片的POC值、即308可以由32*9+20表示,其中9是MSB值,并且20是LSB值。此处,可以使用图12中所示的等式来得到长期参考图片的POC值。
图13示出用于使用根据应用本发明的实施例的短期参考图片和长期参考图片来构建参考图片列表的方法。
参照图13,可以考虑关于时间参考图片是否是短期参考图片以及短期参考图片的POC值的信息来生成包括时间参考图片的参考图片列表。此处,参考图片列表可以包括用于L0预测的参考图片列表0和用于L1预测的参考图片列表1中的至少一个。
更具体地,参考图片列表0可以按照以下顺序布置:其POC值小于当前图片的POC值的短期参考图片(RefPicSetCurr0)、其POC值大于当前图片的POC值的短期参考图片(RefPicSetCurr1)、以及长期参考图片(RefPicSetLtCurr)。
同时,参考图片列表1可以按照以下顺序布置:其POC值大于当前图片的POC值的短期参考图片(RefPicSetCurr1)、其POC值小于当前图片的POC值的短期参考图片(RefPicSetCurr0)、以及长期参考图片(RefPicSet LtCurr)。
另外,为了提高时间参考图片的参考索引的编码效率,可以重新布置(修改)包括在参考图片列表中的多个时间参考图片。这可以基于列表修改标记(list_modification_present_flag)来适应性地执行。此处,列表修改标记表示用于指定是否修改参考图片列表中的参考图片的信息。可以针对参考图片列表0以及针对参考图片类表1分别以信号形式发出列表修改标记。
例如,当列表修改标记(list_modification_present_flag)的值为0时,不对参考图片列表中的参考图片进行修改,并且仅当列表修改标记(list_modification_present_flag)的值为1时,可以对参考图片列表中的参考图片进行修改。
当列表修改标记(list_modification_present_flag)的值为1时,可以使用列表条目信息(list_entry[i])来对参考图片列表中的参考图片进行修改。此处,‘列表条目信息(list_entry[i])’可以指定位于参考图片列表中的当前位置处(即,第i个条目)的参考图片的参考索引。
更具体地,指定与在所生成的参考图片列表中的列表条目信息(list_entry[i])对应的参考图片,并且可以在参考图片列表中的第i个条目中重新布置所指定的参考图片。
可以获得与包括在参考图片列表中的参考图片的数量或者与参考图片列表的参考索引的最大值一样多的列表条目信息。另外,可以考虑当前图片的片类型来获得列表条目信息。也就是说,在当前图片的片类型为P片时,可以获得用于参考图片列表0的列表条目信息(list_entry_l0[i]),然而当当前图片的片类型为B片时,可以额外地获得用于参考图片列表1的列表条目信息(list_entry_l1[i])。
图14至图16示出用于根据应用本发明的实施例构建多层结构的参考图片列表的方法。
参照图14,可以按照下面的顺序构建多层结构的参考图片列表0:其POC值小于当前图片的POC值的短期参考图片(下文中被称为“第一短期参考图片”)、其POC值大于当前图片的POC值的短期参考图片(下文中被称为“第二短期参考图片”)、以及长期参考图片。参考图片列表1可以按照第二短期参考图片、第一短期参考图片、以及长期参考图片的顺序构建。另外,可以在参考图片列表0和参考图片列表1各自中向长期参考图片后的位置添加层间参考图片。
然而,在多层结构中,当增强层中的图片与基本层中的图片彼此类似时,增强层可以频繁地使用基本层的层间参考图片。在这种情况下,当层间参考图片被添加至参考图片列表的最后的位置时,可以使参考图片列表的编码性能劣化。因此,如图15和图16中所示,可以通过向长期参考图片之前的位置添加层间参考图片来提高参考图片列表的编码性能。
参照图15,可以在参考图片列表中的短期参考图片之间布置层间参考图片。在多层结构中,可以按照第一短期参考图片、层间参考图片、第二短期参考图片、和长期参考图片的顺序来构建参考图片列表0。可以按照第二短期参考图片、层间参考图片、第一短期参考图片、和长期参考图片的顺序来构建参考图片列表1。
或者,可以在参考图片列表中的短期参考图片与长期参考图片之间布置层间参考图片。参照图16,可以按照第一短期参考图片、第二短期参考图片、层间参考图片、以及长期参考图片的顺序构建多层结构的参考图片列表0。可以按照第二短期参考图片、第一短期参考图片、层间参考图片、以及长期参考图片的顺序来构建参考图片列表1。
同时,在图14至图16中,作为构建参考图片列表的示例,示出了以下实例:分别存在其POC值小于当前图片的POC值的单个短期参考图片、其POC值大于当前图片的POC值的单个短期参考图片、单个长期参考图片、以及单个层间参考图片。然而,该示例仅仅示出了布置参考图片的顺序,并且明显的是,可以使用多个短期参考图片(即,短期参考图片集)、长期参考图片(即,长期参考图片集)、以及层间参考图片(即,层间参考图片集)。
另外,当使用多个层间参考图片时,可以将多个层间参考图片分成第一层间参考图片集和第二层间参考图片集,并且由此可以构建参考图片列表。
更具体地,可以在第一短期参考图片与第二短期参考图片之间布置第一层间参考图片集,并且可以在长期参考图片之后布置第二层间参考图片集。然而,本发明不限于这些示例,而是可以包括可以由图14至图16中所示的实施例的组合中得到的所有可能的实施例。
此处,第一层间参考图片集可以指具有比当前层的层标识符(CurrlayerId)小的参考层标识符(RefPiclayerId)的参考层的参考图片,并且第二层间参考图片集可以指具有比当前层的层标识符(CurrlayerId)大的参考层标识符(RefPiclayerId)的参考层的参考图片。
图17示出了在应用本发明的实施例中用于基于直接依赖关系类型信息direct_dependency_type来确定当前图片的直接依赖关系类型的方法。
参照图17,可以从比特流获取直接依赖关系类型信息direct_dependency_type[i][j](S1700)。
直接依赖关系类型信息可以表示当前层的层间预测的直接依赖关系类型。可以针对用于当前层的层间预测的每个参考层获取直接依赖关系类型信息。
具体地,如果直接依赖关系类型信息的值为0,则只有与第j层有关的纹理信息可以被参考用于第i层。如果直接依赖关系类型信息的值为1,则只有与第j层有关的运动信息可以被参考用于第i层。如果直接依赖关系类型信息的值为2,则与第j层有关的纹理信息和运动信息均可以被参考用于第i层。
以此方式,可以根据直接依赖关系类型信息来确定在与每个参考层的关系中当前层的直接依赖关系类型,并且可以根据所确定的直接依赖关系类型针对当前图片执行层间纹理预测和层间运动预测中的至少一个。
图18示出了在应用本发明的实施例中用于基于缺省直接依赖关系存在标记来确定当前图片的直接依赖关系类型的方法。
参照图18,可以从比特流获取缺省的直接依赖关系存在标记default_direct_dependency_present_flag(S1800)。
缺省直接依赖关系存在标记可以表示针对整个视频序列是否使用相同的直接依赖关系类型。例如,如果缺省直接依赖关系存在标记的值为1,则这意味着针对整个视频序列使用相同的直接依赖关系类型,而如果缺省的直接依赖存在标记的值为0,这意味着针对整个视频序列没有使用相同的直接依赖关系类型。也就是说,如果缺省直接依赖存在标记的值为0,则可以在当前层的每个参考层中使用不同的直接依赖关系类型。
如果在步骤S1800中缺省直接依赖关系存在标记的值为1,则可以获取缺省直接依赖关系类型信息default_direct_dependency_type(S1810)。
这里,缺省直接依赖关系类型信息可以表示用于整个视频序列的直接依赖关系类型。具体地,如果缺省直接依赖关系类型信息的值为0,则这可以表示视频序列的每个层间预测是通过仅参考与参考层有关的纹理信息来执行的。如果缺省直接依赖关系类型信息的值为1,则这可以表明视频序列的每个层间预测是通过仅参考与参考层有关的运动信息来执行的。如果缺省直接依赖关系类型信息的值为2,则这可以表示视频序列的每个层间预测是通过参考与参考层有关的参考纹理信息和运动信息二者来执行的。
因此,可以根据施加于整个视频序列的缺省直接依赖关系类型信息的值来确定当前图片的直接依赖关系类型。
另一方面,如果在步骤S1800中缺省直接依赖存在标记的值为0,则可以获取直接依赖关系类型信息direct_dependency_type[i][j](S1820)。
可以针对用于对第i层(即当前层)进行层间预测的每个第j层(即参考层)获取直接依赖关系类型信息direct_dependency_type[i][j],该直接依赖关系类型信息表示在与第j层的关系中用于第i层的层间预测的直接依赖关系类型。已经参照图17描述了直接依赖关系类型信息,因此在此将不作详细描述。
工业实用性
本发明可以用于对多层结构的视频信号进行编码。

Claims (15)

1.一种用于对多层视频信号进行解码的方法,所述方法包括:
考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定所述当前图片的有效参考数目;
基于所确定的有效参考数目来获取参考层标识符ID;
使用所述参考层标识符来确定所述当前图片的有效参考图片;
生成包括所述有效参考图片的参考图片列表;以及
基于所述参考图片列表对所述当前图片执行层间预测。
2.根据权利要求1所述的方法,其中,如果所述当前图片的所述有效参考图片的最大数目没有限制,则使用从比特流获取的与用于所述当前图片的参考图片的数目有关的信息来确定所述当前图片的所述有效参考数目;如果所述当前图片的所述有效参考图片的最大数目是有限的,则根据所述有效参考图片的有限最大数目来确定所述当前图片的所述有效参考数目。
3.根据权利要求2所述的方法,其中,基于最大有效参考标记来确定所述当前图片的所述有效参考图片的最大数目是否是有限的,并且如果根据所述最大有效参考标记将针对视频序列的每个图片的有效参考图片的最大数目限制为1,则将所述当前图片的所述有效参考数目设置为1。
4.根据权利要求3所述的方法,其中,针对所述当前图片执行层间预测包括根据所述当前图片的直接依赖关系类型来执行层间纹理预测和层间运动预测中的至少一者,并且所述直接依赖关系类型包括以下中的至少一者:第一类型,其中针对当前图片仅参考与参考层有关的纹理信息;第二类型,其中针对当前图片仅参考与参考层有关的运动信息;以及第三类型,其中针对当前图片参考与参考层有关的纹理信息和运动信息二者。
5.一种用于对多层视频信号进行解码的装置,所述装置包括预测器,所述预测器用于:
考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定所述当前图片的所述有效参考数目;基于所确定的有效参考数目来获取参考层标识符ID;使用所述参考层标识符来确定所述当前图片的所述有效参考图片;生成包括所述有效参考图片的参考图片列表;以及基于所述参考图片列表对所述当前图片执行层间预测。
6.根据权利要求5所述的装置,其中,如果所述当前图片的所述有效参考图片的最大数目没有限制,则所述预测器使用从比特流获取的与用于所述当前图片的参考图片的数目有关的信息来确定所述当前图片的所述有效参考数目;如果所述当前图片的所述有效参考图片的最大数目是有限的,则所述预测器根据所述有效参考图片的有限最大数目来确定所述当前图片的所述有效参考数目。
7.根据权利要求6所述的装置,其中,基于最大有效参考标记来确定所述当前图片的所述有效参考图片的最大数目是否是有限的,并且如果根据所述最大有效参考标记将针对视频序列的每个图片的有效参考图片的最大数目限制为1,则将所述当前图片的所述有效参考数目设置为1。
8.根据权利要求7所述的装置,其中,所述预测器根据所述当前图片的直接依赖关系类型来执行层间纹理预测和层间运动预测中的至少一者,并且所述直接依赖关系类型包括以下中的至少一者:第一类型,其中针对当前图片仅参考与参考层有关的纹理信息;第二类型,其中针对当前图片仅参考与参考层有关的运动信息;以及第三类型,其中针对当前图片参考与参考层有关的纹理信息和运动信息二者。
9.一种用于对多层视频信号进行编码的方法,所述方法包括:
考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定所述当前图片的所述有效参考数目;
基于所确定的有效参考数目来获取参考层标识符ID;
使用所述参考层标识符来确定所述当前图片的有效参考图片;
生成包括所述有效参考图片的参考图片列表;以及
基于所述参考图片列表对所述当前图片执行层间预测。
10.根据权利要求9所述的方法,其中,如果所述当前图片的所述有效参考图片的最大数目没有限制,则使用从比特流获取的与用于所述当前图片的参考图片的数目有关的信息来确定所述当前图片的所述有效参考数目;如果所述当前图片的所述有效参考图片的最大数目是有限的,则根据所述有效参考图片的有限最大数目来确定所述当前图片的所述有效参考数目。
11.根据权利要求10所述的方法,其中,基于最大有效参考标记来确定所述当前图片的所述有效参考图片的最大数目是否是有限的,并且如果根据所述最大有效参考标记针对视频序列的每个图片将所述有效参考图片的最大数目限制为1,则将所述当前图片的所述有效参考数目设置为1。
12.根据权利要求11所述的方法,其中,针对所述当前图片执行层间预测包括根据所述当前图片的直接依赖关系类型来执行层间纹理预测和层间运动预测中的至少一者,并且所述直接依赖关系类型包括以下中的至少一者:第一类型,其中针对当前图片仅参考与参考层有关的纹理信息;第二类型,其中针对当前图片仅参考与参考层有关的运动信息;以及第三类型,其中针对当前图片参考与参考层有关的纹理信息和运动信息二者。
13.一种用于对多层视频信号进行编码的装置,所述装置包括预测器,所述预测器用于:
考虑当前层的当前图片的有效参考图片的最大数目是否有限来确定所述当前图片的所述有效参考数目;基于所确定的有效参考数目来获取参考层标识符ID;使用所述参考层标识符来确定所述当前图片的所述有效参考图片;生成包括所述有效参考图片的参考图片列表;以及基于所述参考图片列表对所述当前图片执行层间预测。
14.根据权利要求13所述的装置,其中,如果所述当前图片的所述有效参考图片的最大数目没有限制,则所述预测器使用从比特流获取的与用于所述当前图片的参考图片的数目有关的信息来确定所述当前图片的所述有效参考数目;如果所述当前图片的所述有效参考图片的最大数目是有限的,则所述预测器根据所述有效参考图片的有限最大数目来确定所述当前图片的所述有效参考数目。
15.根据权利要求14所述的装置,其中,基于最大有效参考标记来确定所述当前图片的所述有效参考图片的最大数目是否是有限的,并且如果根据所述最大有效参考标记针对视频序列的每个图片将所述有效参考图片的最大数目限制为1,则将所述当前图片的所述有效参考数目设置为1。
CN201480071018.9A 2013-12-24 2014-12-23 用于对多层视频信号进行编码/解码的方法和装置 Active CN105850126B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2013-0162247 2013-12-24
KR20130162247 2013-12-24
KR10-2014-0004474 2014-01-14
KR20140004474 2014-01-14
PCT/KR2014/012702 WO2015099401A1 (ko) 2013-12-24 2014-12-23 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치

Publications (2)

Publication Number Publication Date
CN105850126A true CN105850126A (zh) 2016-08-10
CN105850126B CN105850126B (zh) 2019-03-26

Family

ID=53479177

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201480071018.9A Active CN105850126B (zh) 2013-12-24 2014-12-23 用于对多层视频信号进行编码/解码的方法和装置
CN201480071079.5A Active CN105850127B (zh) 2013-12-24 2014-12-23 用于对多层视频信号进行编码/解码的方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201480071079.5A Active CN105850127B (zh) 2013-12-24 2014-12-23 用于对多层视频信号进行编码/解码的方法和装置

Country Status (4)

Country Link
US (2) US10187641B2 (zh)
KR (3) KR20150075042A (zh)
CN (2) CN105850126B (zh)
WO (3) WO2015099401A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102658290B1 (ko) * 2015-06-08 2024-04-16 브이아이디 스케일, 인크. 스크린 콘텐츠 코딩을 위한 인트라 블록 카피 모드
KR102393736B1 (ko) * 2017-04-04 2022-05-04 한국전자통신연구원 영상 부호화 및 복호화 장치
CN117336486A (zh) * 2019-03-11 2024-01-02 腾讯美国有限责任公司 对源视频序列进行编码的方法、装置、存储介质和设备
US11190781B2 (en) * 2019-06-24 2021-11-30 Alibaba Group Holding Limited Adaptive resolution change in video processing
US11317090B2 (en) * 2019-08-12 2022-04-26 Tencent America LLC Method and apparatus for video coding
WO2021045128A1 (en) * 2019-09-06 2021-03-11 Sharp Kabushiki Kaisha Systems and methods for signaling temporal sub-layer information in video coding

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012148139A3 (ko) * 2011-04-26 2013-03-21 엘지전자 주식회사 참조 픽쳐 리스트 관리 방법 및 이러한 방법을 사용하는 장치
CN103024397A (zh) * 2013-01-07 2013-04-03 华为技术有限公司 确定时域运动矢量预测值的方法和装置
CN103281531A (zh) * 2013-05-10 2013-09-04 北方工业大学 面向hevc的质量可伸缩层间预测编码
WO2013129878A1 (ko) * 2012-02-29 2013-09-06 엘지전자 주식회사 인터 레이어 예측 방법 및 이를 이용하는 장치
KR20130116209A (ko) * 2012-04-15 2013-10-23 삼성전자주식회사 참조픽처리스트 변경이 가능한 인터 예측 방법과 그 장치
KR20130119379A (ko) * 2012-04-23 2013-10-31 삼성전자주식회사 다시점 비디오 예측을 위한 참조리스트를 이용하는 다시점 비디오 부호화 방법 및 그 장치, 다시점 비디오 예측을 위한 참조리스트를 이용하는 다시점 비디오 복호화 방법 및 그 장치

Family Cites Families (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003299103A (ja) * 2002-03-29 2003-10-17 Toshiba Corp 動画像符号化方法と装置及び動画像復号化方法と装置
CN101288311B (zh) 2005-10-12 2011-05-11 汤姆森特许公司 用于可分级视频编码和解码中的加权预测的方法和装置
WO2007080223A1 (en) 2006-01-10 2007-07-19 Nokia Corporation Buffering of decoded reference pictures
EP1982290B1 (en) * 2006-01-27 2013-10-23 Spyder Lynk, LLC Encoding and decoding data in an image
EP2060122A4 (en) 2006-09-07 2016-04-27 Lg Electronics Inc METHOD AND DEVICE FOR CODING AND DECODING A VIDEO SIGNAL
EP2080382B1 (en) * 2006-10-20 2016-07-20 Nokia Technologies Oy System and method for implementing low-complexity multi-view video coding
AU2007318376B2 (en) 2006-11-09 2010-07-01 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal
KR101349836B1 (ko) 2006-11-17 2014-01-10 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
EP2206349B1 (en) 2007-10-15 2015-03-11 Thomson Licensing Methods and apparatus for inter-layer residue prediction for scalable video
US8432968B2 (en) 2007-10-15 2013-04-30 Qualcomm Incorporated Scalable video coding techniques for scalable bitdepths
KR20110139304A (ko) * 2009-04-22 2011-12-28 엘지전자 주식회사 다시점 영상의 참조 픽쳐 리스트 변경 방법
US8665959B2 (en) 2010-04-12 2014-03-04 Qualcomm Incorporated Block and partition signaling techniques for video coding
US20120075436A1 (en) 2010-09-24 2012-03-29 Qualcomm Incorporated Coding stereo video data
WO2012052968A1 (en) * 2010-10-20 2012-04-26 Nokia Corporation Method and device for video coding and decoding
KR20120068743A (ko) 2010-12-17 2012-06-27 한국전자통신연구원 인터 예측 방법 및 그 장치
AU2012205813B2 (en) * 2011-01-14 2016-07-07 Vidyo, Inc. High layer syntax for temporal scalability
US9008181B2 (en) 2011-01-24 2015-04-14 Qualcomm Incorporated Single reference picture list utilization for interprediction video coding
WO2012111331A1 (ja) 2011-02-16 2012-08-23 パナソニック株式会社 映像符号化方法および映像復号方法
US20120230409A1 (en) * 2011-03-07 2012-09-13 Qualcomm Incorporated Decoded picture buffer management
CN103797797B (zh) * 2011-06-30 2016-07-13 瑞典爱立信有限公司 参考画面信号通知
EP2750387B1 (en) * 2011-09-22 2019-06-19 LG Electronics Inc. Video decoding method and video decoding apparatus
US9106927B2 (en) * 2011-09-23 2015-08-11 Qualcomm Incorporated Video coding with subsets of a reference picture set
KR20130037161A (ko) * 2011-10-05 2013-04-15 한국전자통신연구원 스케일러블 비디오 코딩을 위한 향상된 계층간 움직임 정보 예측 방법 및 그 장치
US9571833B2 (en) 2011-11-04 2017-02-14 Nokia Technologies Oy Method for coding and an apparatus
ES2898887T3 (es) * 2011-11-08 2022-03-09 Nokia Technologies Oy Manejo de imágenes de referencia
TWI616087B (zh) 2012-01-31 2018-02-21 Vid衡器股份有限公司 可縮放高效率視訊編碼(hevc)參考圖集(rps)傳訊
US9369710B2 (en) 2012-02-06 2016-06-14 Qualcomm Incorporated Reference picture list modification for video coding
US10205961B2 (en) 2012-04-23 2019-02-12 Qualcomm Incorporated View dependency in multi-view coding and 3D coding
WO2014008402A1 (en) * 2012-07-05 2014-01-09 Vid Scale, Inc. Layer dependency and priority signaling design for scalable video coding
WO2014007590A1 (ko) 2012-07-06 2014-01-09 삼성전자 주식회사 랜덤 억세스를 위한 멀티 레이어 비디오 부호화 방법 및 그 장치, 랜덤 억세스를 위한 멀티 레이어 비디오 복호화 방법 및 그 장치
KR20140008503A (ko) 2012-07-10 2014-01-21 한국전자통신연구원 영상 부호화/복호화 방법 및 장치
KR20140034053A (ko) 2012-08-21 2014-03-19 삼성전자주식회사 트리 구조의 부호화 단위에 기초한 예측 정보의 인터-레이어 비디오 부호화 방법 및 그 장치, 트리 구조의 부호화 단위에 기초한 예측 정보의 인터-레이어 비디오 복호화 방법 및 그 장치
EP2876882A4 (en) 2012-09-09 2016-03-09 Lg Electronics Inc IMAGE DECODING METHOD AND APPARATUS USING THE SAME
US9369728B2 (en) 2012-09-28 2016-06-14 Sharp Kabushiki Kaisha Image decoding device and image encoding device
EP2920966B1 (en) 2012-11-15 2019-12-18 MediaTek Inc. Inter-layer texture coding with adaptive transform and multiple inter-layer motion candidates
WO2014107709A2 (en) 2013-01-07 2014-07-10 Vid Scale, Inc. Enhanced deblocking filters for video coding
US20140218473A1 (en) 2013-01-07 2014-08-07 Nokia Corporation Method and apparatus for video coding and decoding
JP6139701B2 (ja) * 2013-01-07 2017-05-31 ヴィド スケール インコーポレイテッド スケーラブルビデオ符号化のための動き情報シグナリング
US20140254681A1 (en) * 2013-03-08 2014-09-11 Nokia Corporation Apparatus, a method and a computer program for video coding and decoding
US9648353B2 (en) 2013-04-04 2017-05-09 Qualcomm Incorporated Multiple base layer reference pictures for SHVC
KR20140122202A (ko) * 2013-04-05 2014-10-17 삼성전자주식회사 계층 식별자 확장에 따른 비디오 스트림 부호화 방법 및 그 장치, 계층 식별자 확장에 따른 따른 비디오 스트림 복호화 방법 및 그 장치
US9351009B2 (en) 2013-04-05 2016-05-24 Sharp Kabushiki Kaisha Marking pictures for inter-layer prediction
US9532067B2 (en) 2013-04-05 2016-12-27 Sharp Kabushiki Kaisha Decoding of inter-layer reference picture set and reference picture list construction
US20140301463A1 (en) 2013-04-05 2014-10-09 Nokia Corporation Method and apparatus for video coding and decoding
US9509999B2 (en) * 2013-06-11 2016-11-29 Qualcomm Incorporated Inter-layer prediction types in multi-layer video coding
JP6352383B2 (ja) * 2013-07-14 2018-07-04 シャープ株式会社 復号方法及び復号装置
US9912943B2 (en) * 2013-07-15 2018-03-06 Qualcomm Incorporated Signaling of bit rate information and picture rate information in VPS
US9578328B2 (en) * 2013-07-15 2017-02-21 Qualcomm Incorporated Cross-layer parallel processing and offset delay parameters for video coding
US10212437B2 (en) 2013-07-18 2019-02-19 Qualcomm Incorporated Device and method for scalable coding of video information
US9648333B2 (en) * 2013-10-11 2017-05-09 Vid Scale, Inc. High level syntax for HEVC extensions

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012148139A3 (ko) * 2011-04-26 2013-03-21 엘지전자 주식회사 참조 픽쳐 리스트 관리 방법 및 이러한 방법을 사용하는 장치
WO2013129878A1 (ko) * 2012-02-29 2013-09-06 엘지전자 주식회사 인터 레이어 예측 방법 및 이를 이용하는 장치
KR20130116209A (ko) * 2012-04-15 2013-10-23 삼성전자주식회사 참조픽처리스트 변경이 가능한 인터 예측 방법과 그 장치
KR20130119379A (ko) * 2012-04-23 2013-10-31 삼성전자주식회사 다시점 비디오 예측을 위한 참조리스트를 이용하는 다시점 비디오 부호화 방법 및 그 장치, 다시점 비디오 예측을 위한 참조리스트를 이용하는 다시점 비디오 복호화 방법 및 그 장치
CN103024397A (zh) * 2013-01-07 2013-04-03 华为技术有限公司 确定时域运动矢量预测值的方法和装置
CN103281531A (zh) * 2013-05-10 2013-09-04 北方工业大学 面向hevc的质量可伸缩层间预测编码

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
MISKA M. HANNUKSELA ET AL.: "MV-HEVC/SHVC HLS: On inter-layer sample and syntax prediction indications (combining aspects of JCTVC-M0205 and JCTVC-M0046)(JCTVC-M0457)", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *

Also Published As

Publication number Publication date
KR20150075040A (ko) 2015-07-02
CN105850127B (zh) 2019-03-26
WO2015099398A1 (ko) 2015-07-02
WO2015099401A1 (ko) 2015-07-02
KR20150075042A (ko) 2015-07-02
CN105850127A (zh) 2016-08-10
KR20150075041A (ko) 2015-07-02
US10178392B2 (en) 2019-01-08
CN105850126B (zh) 2019-03-26
WO2015099400A1 (ko) 2015-07-02
US20170041615A1 (en) 2017-02-09
US20170041601A1 (en) 2017-02-09
US10187641B2 (en) 2019-01-22

Similar Documents

Publication Publication Date Title
CN105453568B (zh) 可扩展视频信号编码/解码方法及装置
CN105850126A (zh) 用于对多层视频信号进行编码/解码的方法和装置
US10425650B2 (en) Multi-layer video signal encoding/decoding method and apparatus
KR20140138538A (ko) 복수의 레이어를 지원하는 비디오 코딩 방법 및 장치
CN105379276A (zh) 可伸缩视频信号编码/解码方法和装置
CN104255032A (zh) 层间预测方法和使用其的编码设备和解码设备
CN105659597A (zh) 用于对多层视频信号进行编码/解码的方法和装置
CN105379277A (zh) 用于编码/解码可伸缩视频信号的方法和装置
CN105684446A (zh) 多层视频信号编码/解码方法和装置
CN106105213B (zh) 多层视频信号编码/解码方法和装置
CN105247869A (zh) 用于在多层结构中引出运动信息的方法以及使用该方法的设备
KR20150064677A (ko) 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
CN105379275A (zh) 用于对可伸缩视频信号进行编码/解码的方法和装置
CN106134195B (zh) 多层视频信号编码/解码方法和装置
CN105659596A (zh) 用于对多层视频信号进行编码/解码的方法和装置
KR20150009412A (ko) 복수의 레이어를 지원하는 영상의 부호화 및 복호화 방법 및 이를 이용하는 장치
KR20150133685A (ko) 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
KR20150044394A (ko) 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
KR20150014872A (ko) 스케일러블 비디오 신호 인코딩/디코딩 방법 및 장치
KR20150064676A (ko) 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
KR20150075031A (ko) 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
KR20140145559A (ko) 스케일러블 비디오 신호 인코딩/디코딩 방법 및 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant