CN115280773A - 获得量化参数的视频解码方法和装置以及发送量化参数的视频编码方法和装置 - Google Patents

获得量化参数的视频解码方法和装置以及发送量化参数的视频编码方法和装置 Download PDF

Info

Publication number
CN115280773A
CN115280773A CN202180020581.3A CN202180020581A CN115280773A CN 115280773 A CN115280773 A CN 115280773A CN 202180020581 A CN202180020581 A CN 202180020581A CN 115280773 A CN115280773 A CN 115280773A
Authority
CN
China
Prior art keywords
codec
current
picture
codec unit
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180020581.3A
Other languages
English (en)
Inventor
朴慜祐
朴缗茱
崔棋镐
朴银姬
金赞烈
孙有美
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=76788193&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN115280773(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN115280773A publication Critical patent/CN115280773A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

提供了一种视频解码方法,包括:从图片参数集获得要应用于当前图片的量化参数(QP)初始值和图片标头QP差值信息;当图片标头QP差值信息指示当前图片的图片标头中存在QP差值信息时,从图片标头获得当前图片的第一QP差值;通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP;通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数;以及通过使用变换系数来重构编解码单元。

Description

获得量化参数的视频解码方法和装置以及发送量化参数的视 频编码方法和装置
技术领域
本公开涉及视频解码方法和装置以及视频编码方法和装置,并且更具体地,涉及通过有效地执行量化参数(QP)来编码和解码视频的方法和装置。
背景技术
在一般的压缩方法中,通过递归划分过程来确定正方形编解码单元,在递归划分过程中,在确定编解码单元的尺寸的同时,确定是否划分包括在图片中的编解码单元,并且然后将编解码单元均匀地划分成相同尺寸的四个编解码单元。然而,近来,由于对高分辨率图像使用具有均匀正方形形状的编解码单元而导致的重构图像的图像质量恶化已经成为一个问题。因此,已经提出了用于将高分辨率图像划分成多种形状的编解码单元的方法和装置。
发明内容
技术问题
本公开涉及视频解码方法和装置以及视频编码方法和装置,并且其目的是提供一种通过其视频编码装置有效地发送量化参数(QP)差值的方法和一种通过其视频解码装置有效地获得QP差值的方法。
技术方案
根据本公开实施例提供的一种视频解码方法,可以包括:从图片参数集获得要应用于当前图片的量化参数(QP)初始值,并从图片参数集获得指示当前图片的图片标头中是否存在QP差值信息的图片标头QP差值信息;当图片标头QP差值信息指示QP差值信息存在于当前图片的图片标头中时,从图片标头获得当前图片的第一QP差值;通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP;通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数;以及通过使用变换系数来重构编解码单元。
有益效果
根据实施例的视频编码方法和视频解码方法,可以根据数据传输效率或图片的特性来确定发送量化参数(QP)的差值的方法,并且可以根据该方法来信令通知QP的差值。
附图说明
提供每个附图的简要描述是为了更好地理解本文引用的附图。
图1是根据实施例的图像解码装置的示意框图。
图2是根据实施例的图像解码方法的流程图。
图3示出了根据实施例的由图像解码装置执行的通过划分当前编解码单元来确定至少一个编解码单元的过程。
图4示出了根据实施例的由图像解码装置执行的通过划分非正方形编解码单元来确定至少一个编解码单元的过程。
图5示出了根据实施例的由图像解码装置执行的基于块形状信息或划分形状模式信息中的至少一个划分编解码单元的过程。
图6示出了根据实施例的由图像解码装置执行的从奇数个编解码单元当中确定特定编解码单元的方法。
图7示出了根据实施例的当图像解码装置通过划分当前编解码单元来确定多个编解码单元时处理多个编解码单元的顺序。
图8示出了根据实施例的当编解码单元不能以特定顺序处理时,由图像解码装置执行的确定当前编解码单元将被分成奇数个编解码单元的过程。
图9示出了根据实施例的由图像解码装置执行的通过划分第一编解码单元来确定至少一个编解码单元的过程。
图10示出了根据实施例的当具有非正方形形状的第二编解码单元满足特定条件时,第二编解码单元可划分成的形状受到限制,该非正方形形状是在图像解码装置划分第一编解码单元时确定的。
图11示出了根据实施例的当划分形状模式信息不能指示正方形编解码单元被划分成四个正方形编解码单元时,由图像解码装置执行的划分正方形编解码单元的过程。
图12示出了根据实施例的多个编解码单元之间的处理顺序可以取决于划分编解码单元的过程而改变。
图13示出了根据实施例的当编解码单元被递归地划分以确定多个编解码单元时,随着编解码单元的形状和尺寸改变而确定编解码单元的深度的过程。
图14示出了根据实施例的基于编解码单元的形状和尺寸以及用于区分编解码单元的部分索引(PID)可以确定的深度。
图15示出了根据实施例的基于包括在图片中的多个特定数据单元来确定多个编解码单元。
图16是图像编码和解码系统的框图。
图17是根据实施例的视频解码装置的框图。
图18是根据实施例的视频解码方法的流程图。
图19是根据实施例的视频编码装置的框图。
图20是根据实施例的视频编码方法的流程图。
图21是根据实施例的用于在图片级或条带级中引入量化参数(QP)的概图。
图22示出了根据实施例的包括图片标头QP差值信息的图片参数集。
图23示出了根据实施例的包括当前图片的QP差值的图片标头。
图24示出了根据实施例的包括当前条带的QP差值的条带标头。
图25示出了根据实施例的包括指示图片标头是否包括去方块滤波器相关参数的信息的图片参数集。
图26示出了根据实施例的包括当前图片的去方块滤波器相关参数的图片标头。
图27示出了根据实施例的包括当前条带的去方块滤波器相关参数的条带标头。
图28示出了根据实施例的包括指示图片标头是否包括多种工具相关参数的信息的图片参数集。
图29示出了根据实施例的包括当前图片的加权预测相关参数、样本自适应偏移(SAO)相关参数和参考图片列表相关参数的图片标头。
图30示出了根据实施例的包括当前图片的自适应环路滤波器(ALF)相关参数的图片标头。
图31示出了根据实施例的包括当前条带的参考图片列表相关参数、加权预测相关参数和SAO相关参数的条带标头。
图32示出了根据实施例的包括当前条带的ALF相关参数的条带标头。
最佳模式
根据本公开提供的实施例的一种视频解码方法,包括:从图片参数集获得要应用于当前图片的量化参数(QP)初始值,并从图片参数集获得指示当前图片的图片标头中是否存在QP差值信息的图片标头QP差值信息;当图片标头QP差值信息指示QP差值信息存在于当前图片的图片标头中时,从图片标头获得当前图片的第一QP差值;通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP;通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数;以及通过使用变换系数来重构编解码单元。
根据实施例,该视频解码方法还可以包括:当图片标头QP差值信息指示图片标头中不存在QP差值信息时,从当前条带的条带标头获得当前图片中包括的当前条带的第二QP差值;通过使用QP初始值和第二QP差值来确定包括在当前条带中的编解码单元的QP;通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数;以及通过使用变换系数来重构编解码单元。
根据实施例,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数可以包括:从图片标头获得当前图片的亮度分量的QP差值;通过将QP初始值和亮度分量的第一QP差值相加来确定包括在当前图片中的条带的亮度分量的QP;以及通过使用条带的亮度分量的QP来确定包括在当前图片中并包括在条带中的编解码单元的QP。
根据实施例,确定编解码单元的QP可以包括:从比特流获得编解码单元的QP差值;以及通过使用条带的亮度分量的QP和编解码单元的QP差值来确定编解码单元的亮度分量的QP。
根据实施例,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数可以包括:从条带标头获得当前片的亮度分量的第二QP差值;通过将QP初始值和亮度分量的第二QP差值相加来确定当前条带的亮度分量的QP;以及通过使用当前条带的亮度分量的QP来确定包括在当前条带中的编解码单元的QP。
根据实施例,确定编解码单元的QP可以包括:从比特流获得编解码单元的QP差值;以及通过使用当前条带的亮度分量的QP和编解码单元的QP差值来确定编解码单元的亮度分量的QP。
根据实施例,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数可以包括:从条带标头获得当前条带的Cb色度分量的Cb QP差值和当前片的Cr色度分量的Cr QP差值;通过使用当前条带的Cb色度分量的Cb QP差值来更新当前编解码单元的Cb色度分量的QP,以确定包括在当前条带中的当前编解码单元的Cb色度分量的Cb QP;以及通过使用当前条带的Cr色度分量的Cr QP差值来更新当前编解码单元的Cr色度分量的QP,以确定当前编解码单元的Cr色度分量的Cr QP。
根据本公开提供的实施例的一种视频解码装置包括:获得器,被配置为从图片参数集获得要应用于当前图片的QP初始值,从图片参数集获得指示QP差值信息是否包括在当前图片的图片标头中的图片标头QP差值信息,以及当图片标头QP差值信息指示QP差值信息包括在图片标头中时,从图片标头获得当前图片的第一QP差值;以及解码器,被配置为当图片标头QP差值信息指示QP差值信息被包括在图片标头中时,通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数,以及通过使用编解码单元的变换系数来重构编解码单元。
根据本公开实施例提供的一种视频编码方法包括:确定要应用于当前图片的QP初始值;当针对每个图片确定QP初始值时,确定QP初始值和当前图片中使用的QP之间的第一QP差值,并为当前图片生成图片标头,该图片标头包括第一QP差值;以及生成包括QP初始值和指示QP差值信息是否存在于当前图片的图片标头中的图片标头QP差值信息的图片参数集。
根据实施例,该视频编码方法还可以包括:当针对每个条带确定QP初始值时,确定QP初始值和在包括在当前图片中的当前条带中使用的QP之间的第二QP差值,并生成当前条带的条带标头,该条带标头包括第二QP差值。
根据实施例,生成当前图片的图片标头,该图片标头包括第一QP差值,可以包括:确定当前图片中包括的条带的亮度分量的QP;以及通过使用QP初始值和包括在当前图片中的条带的亮度分量的QP之间的差值来确定当前图片的亮度分量的第一QP差值。
根据实施例,确定第一QP差值可以包括:通过使用编解码单元的亮度分量的QP和条带的亮度分量的QP之间的差值来确定编解码单元的QP差值;以及对编解码单元的QP差值进行编码。
根据实施例,生成当前条带的条带标头,该条带标头包括第二QP差值,可以包括:确定当前条带的亮度分量的QP;以及通过使用当前条带的亮度分量的QP和QP初始值之间的差值来确定当前条带的亮度分量的第二QP差值。
根据实施例,确定第二QP差值可以包括:通过从编解码单元的亮度分量的QP中减去当前条带的亮度分量的QP来确定编解码单元的QP差值;以及对编解码单元的QP差值进行编码。
根据实施例,确定第二QP差值可以包括:确定包括在当前条带中的当前编解码单元的Cb色度分量的Cb QP差值,该Cb QP差值用于确定当前编解码单元的Cb色度分量的QP;确定当前编解码单元的Cr色度分量的Cr QP差值,该Cr QP差值用于确定当前编解码单元的Cr色度分量的QP;以及对当前条带的Cb色度分量的Cb QP差值和当前条带的Cr色度分量的Cr QP差值进行编码,并生成当前条带的条带标头,该条带标头包括Cb QP差值和Cr QP差值。
一种计算机可读记录介质,其上记录有用于在计算机上执行根据本公开实施例的视频解码方法的程序。
一种计算机可读记录介质,其上记录有用于在计算机上执行根据本公开实施例的视频编码方法的程序。
具体实施方式
由于本公开允许各种变化和众多示例,特定实施例将在附图中示出并在书面描述中详细描述。然而,这并不旨在将本公开限制于特定的实践模式,并且将理解,不脱离本公开的精神和技术范围的所有变化、等同物和替代物都包含在本公开中。
在实施例的描述中,当认为相关技术的某些详细解释可能不必要地模糊了本公开的本质时,这些解释被省略。此外,在说明书的描述中使用的数字(例如,第一、第二等)仅仅是用于将一个元素与另一个元素区分开的标识符码。
此外,在本说明书中,应当理解,当元素彼此“连接”或“耦合”时,元素可以直接彼此连接或耦合,但是可以可选地通过其间的中间元素彼此连接或耦合,除非另有说明。
在本说明书中,关于表示为“单元”或“模块”的元素,根据细分的功能,两个或更多个元素可以组合成一个元素,或者一个元素可以分成两个或更多个元素。此外,下文描述的每个元素除了其自身的主要功能之外,还可以执行由另一个元素执行的部分或全部功能,并且每个元素的一些主要功能可以完全由另一个组件执行。
此外,在本说明书中,“图像”或“图片”可以表示视频的静止图像或运动图像,即视频本身。
此外,在本说明书中,“样本”表示指派给图像的采样位置的数据,即要处理的数据。例如,空间域中图像的像素值和变换区域上的变换系数可以是样本。包括至少一个这样的样本的单元可以被定义为一个块。
此外,在本说明书中,“当前块”可表示将被编码或解码的当前图像的最大编解码单元、编解码单元、预测单元或变换单元的块。
在本说明书中,列表0方向上的运动矢量可表示用于指示列表0中包括的参考图片中的块的运动矢量,并且列表1方向上的运动矢量可以表示用于指示列表1中包括的参考图片中的块的运动矢量。此外,单向运动矢量可以表示用于指示包括在列表0或列表1中的参考图片中的块的运动矢量,并且双向运动矢量可以表示运动矢量包括列表0方向的运动矢量和列表1方向的运动矢量。
此外,在本说明书中,块的“二叉划分”表示用于生成两个子块的划分,这两个子块的宽度或高度是块的宽度或高度的一半。详细地,当对当前块执行“二叉垂直划分”时,在垂直方向(纵向)上以当前块的一半宽度执行划分,并因此可以生成具有宽度是当前块宽度的一半和与当前块相同高度的两个子块。当对当前块执行“二叉水平划分”时,在当前块的一半高度的水平方向(横向)上执行划分,并因此可以生成具有高度是当前块高度的一半高度和与当前块相同宽度的两个子块。
此外,在本说明书中,块的“三叉划分”表示用于生成三个子块的划分,这三个子块的宽度或高度是块的宽度或高度的1:2:1。详细地说,当对当前块执行“三叉垂直划分”时,在当前块宽度的1:2:1的点上在垂直方向(纵向)上执行划分,并因此可以生成具有宽度为当前块宽度的1/4和与当前块相同高度的两个子块,以及具有宽度为当前块宽度的2/4和与当前块相同高度的一个子块。当对当前块执行“三叉水平划分”时,在当前块高度的1:2:1的点上在水平方向(横向方向)上执行划分,并因此可以生成具有高度为当前块高度的1/4和与当前块相同宽度的两个子块,以及具有高度为当前块高度的2/4和与当前块相同宽度的一个子块。
此外,在本说明书中,块的“四叉划分”表示用于生成四个子块的划分,这四个子块的宽度和高度是块的宽度和高度的1∶1。具体而言,当对当前块执行“四叉划分”时,在垂直方向(纵向)上以当前块的一半宽度执行划分,在水平方向(横向)上以当前块的一半高度执行划分,并因此可以生成具有宽度为当前块宽度的1/2和高度为当前块高度的1/2的四个子块。
在下文中,将参照图1至图16描述根据实施例的图像编码装置和图像解码装置以及图像编码方法和图像解码方法。将参照图3至图16描述根据实施例的确定图像的数据单元的方法,并且将参照图17至图40描述使用确定的数据单元的根据实施例的视频编码/解码方法。
在下文中,将参照图1和图2描述根据本公开的实施例的用于基于编解码单元的多种形状的自适应选择的方法和装置。
图1是根据实施例的图像解码装置的示意框图。
图像解码装置100可以包括接收器110和解码器120。接收器110和解码器120可以包括至少一个处理器。此外,接收器110和解码器120可以包括存储将由至少一个处理器执行的指令的存储器。
接收器110可以接收比特流。比特流包括由稍后描述的图像编码装置2200编码的图像的信息。此外,可以从图像编码装置2200发送比特流。图像编码装置2200和图像解码装置100可以经由有线或无线连接,并且接收器110可以经由有线或无线接收比特流。接收器110可以从如光学介质或硬盘的存储介质接收比特流。解码器120可以基于从接收的比特流获得的信息重构图像。解码器120可以从比特流获得用于重构图像的语法元素。解码器120可以基于语法元素重构图像。
将参照图2详细描述图像解码装置100的操作。
图2是根据实施例的图像解码方法的流程图。
根据本公开的实施例,接收器110接收比特流。
图像解码装置100从比特流获得与编解码单元的划分形状模式对应的二进制串(操作210)。图像解码装置100确定编解码单元的划分规则(操作220)。此外,图像解码装置100基于与划分形状模式或划分规则对应的二进制串中的至少一个,将编解码单元划分成多个编解码单元(操作230)。图像解码装置100可以根据编解码单元的高宽比来确定编解码单元的尺寸的可允许的第一范围,从而确定划分规则。图像解码装置100可以根据编解码单元的划分形状模式来确定编解码单元的尺寸的可允许的第二范围,从而确定划分规则。
在下文中,将根据本公开的实施例详细描述编解码单元的划分。
首先,一个图片可以被划分成一个或多个条带或者一个或多个片。一个条带或一个片可以是一个或多个最大编解码单元(编码树单元(CTU))的序列。与最大的编解码单元(CTU)相比,在概念上存在最大的编解码块(编解码树块(CTB))。
最大编解码单元(CTB)表示包括NxN个样本的NxN个块(N是整数)。每个颜色分量可以被分成一个或多个最大的编解码块。
当图片包括三个样本阵列(Y、Cr和Cb分量的样本阵列)时,最大编解码单元(CTU)包括亮度样本的最大编解码块、色度样本的两个对应的最大编解码块以及用于编码亮度样本和色度样本的语法结构。当图片是单色图片时,最大编解码单元包括单色样本的最大编解码块和用于编码单色样本的语法结构。当图片是在根据颜色分量分离的颜色平面中编码的图片时,最大的编解码单元包括图片和用于编码图片样本的语法结构。
一个最大的编解码块(CTB)可以划分成包括M×N个样本的M×N个编解码块(M和N是整数)。
当图片具有用于Y、Cr和Cb分量的样本阵列时,编解码单元(CU)包括亮度样本的编解码块、色度样本的两个对应编解码块和用于编码亮度样本和色度样本的语法结构。当图片是单色图片时,编解码单元包括单色样本的编解码块和用于编码单色样本的语法结构。当图片是在根据颜色分量分离的颜色平面中编码的图片时,编解码单元包括图片和用于编码图片样本的语法结构。
如上所述,最大编解码块和最大编解码单元在概念上彼此不同,并且编解码块和编解码单元在概念上彼此不同。即,(最大)编解码单元指的是包括(最大)编解码块的数据结构,该(最大)编解码块包括对应的样本和对应于(最大)编解码块的语法结构。然而,因为本领域普通技术人员理解,(最大)编解码单元或(最大)编解码块是指包括特定数量样本的特定尺寸块,所以除非另有描述,否则在以下说明书中不进行区分地提及最大编解码块和最大编解码单元或者编解码块和编解码单元。
图像可以划分成最大的编解码单元(CTU)。可以基于从比特流获得的信息来确定每个最大编解码单元的尺寸。每个最大编解码单元的形状可以是相同尺寸的正方形。然而,本公开不限于此。
例如,关于亮度编解码块的最大尺寸的信息可以从比特流获得。例如,由关于亮度编解码块的最大尺寸的信息指示的亮度编解码块的最大尺寸可以是4×4、8×8、16×16、32×32、64×64、128×128和256×256中的一个。
例如,可以从比特流获得关于亮度块尺寸差和可划分为两个的亮度编解码块的最大尺寸的信息。关于亮度块尺寸差的信息可以指亮度最大编解码单元与可划分为两个的最大亮度编解码块之间的尺寸差。因此,当关于可划分为两个的亮度编解码块的最大尺寸的信息和关于从比特流获得的亮度块尺寸差的信息彼此组合时,可以确定亮度最大编解码单元的尺寸。可以通过使用亮度最大编解码单元的尺寸来确定色度最大编解码单元的尺寸。例如,当根据颜色格式,Y:Cb:Cr的比率为4:2:0时,色度块的尺寸可以是亮度块的尺寸的一半,并且色度最大编解码单元的尺寸可以是亮度最大编解码单元的尺寸的一半。
根据实施例,因为从比特流获得关于可二叉划分的亮度编解码块的最大尺寸的信息,所以可二叉划分的亮度编解码块的最大尺寸可以可变地确定。相反,可三叉划分的亮度编解码块的最大尺寸可以是固定的。例如,在I图片中可三叉划分的亮度编解码块的最大尺寸可以是32×32,而在P图片或B图片中可三叉划分的亮度编解码块的最大尺寸可以是64×64。
此外,可以基于从比特流获得的划分形状模式信息将最大编解码单元分层划分成编解码单元。指示是否执行四叉划分的信息、指示是否执行多划分的信息、划分方向信息或划分类型信息中的至少一个可以作为划分形状模式信息从比特流获得。
例如,指示是否执行四叉划分的信息可以指示当前编解码单元是否将被四叉划分(QUAD_SPLIT)。
当当前编解码单元不是四叉划分时,指示是否执行多划分的信息可以指示当前编解码单元是不再划分(NO_SPLIT)还是二叉/三叉划分。
当当前编解码单元是二叉划分或三叉划分时,划分方向信息指示当前编解码单元在水平方向和垂直方向之一上划分。
当当前编解码单元在水平方向或垂直方向上被划分时,划分类型信息指示当前编解码单元是二叉划分还是三叉划分。
可以根据划分方向信息和划分类型信息来确定当前编解码单元的划分模式。当前编解码单元在水平方向上被二叉划分时的划分模式可以被确定为二叉水平划分模式(SPLIT_BT_HOR),当前编解码单元在水平方向上被三叉划分时的划分模式可以被确定为三叉水平划分模式(SPLIT_TT_HOR),当前编解码单元在垂直方向上被二叉划分时的划分模式可以被确定为二叉垂直划分模式(SPLIT_BT_VER),以及当前编解码单元在垂直方向上被三叉划分时的划分模式可以被确定为三叉垂直划分模式SPLIT_BT_VER。
图像解码装置100可以从比特流获得划分形状模式信息的二进制串。由图像解码装置100接收的比特流的形式可以包括固定长度二进制码、一元码、截断一元码、预定二进制码等。二进制串是二进制数中的信息。二进制串可以包括至少一个比特。图像解码装置100可以基于划分规则获得对应于二进制串的划分形状模式信息。图像解码装置100可以基于一个二进制串确定是否四叉划分编解码单元、是否划分编解码单元、划分方向和划分类型。
编解码单元可以小于或等于最大编解码单元。例如,因为最大编解码单元是具有最大尺寸的编解码单元,所以最大编解码单元是编解码单元之一。当关于最大编解码单元的划分形状模式信息指示不执行划分时,在最大编解码单元中确定的编解码单元具有与最大编解码单元相同的尺寸。当关于最大编解码单元的划分形状模式信息指示划分被执行时,最大编解码单元可以划分成编解码单元。此外,当关于编解码单元的划分形状模式信息指示划分被执行时,编解码单元可以划分成更小的编解码单元。然而,图像的划分不限于此,并且可以不区分最大编解码单元和编解码单元。将参照图3至图16详细描述编解码单元的划分。
此外,可以从编解码单元确定用于预测的一个或多个预测块。预测块可以与编解码单元相同或小于编解码单元。此外,可以从编解码单元中确定用于变换的一个或多个变换块。变换块可以与编解码单元相同或小于编解码单元。
变换块和预测块的形状和尺寸可以彼此不相关。
在另一实施例中,可以通过使用编解码单元作为预测单元来执行预测。此外,可以通过使用编解码单元作为变换块来执行变换。
将参照图3至图16详细描述编解码单元的划分。本公开的当前块和相邻块可以指示最大编解码单元、编解码单元、预测块和变换块之一。此外,当前编解码单元的当前块是当前正被解码或编码的块或者当前正被划分的块。相邻块可以是在当前块之前重构的块。相邻块可以在空间上或时间上与当前块邻近。相邻块可以位于当前块的左下、左侧、左上、顶部、右上、右侧、右下之一。
图3示出了根据实施例的由图像解码装置执行的通过划分当前编解码单元来确定至少一个编解码单元的过程。
块形状可以包括4Nx4N、4Nx2N、2Nx4N、4NxN、Nx4N、32NxN、Nx32N、16NxN、Nx16N、8NxN或Nx8N。此处,N可以是正整数。块形状信息是指示编解码单元的形状、方向、高宽比或尺寸中的至少一个的信息。
编解码单元的形状可以包括正方形和非正方形。当编解码单元的宽度和高度的长度相同时(即,当编解码单元的块形状是4Nx4N时),图像解码装置100可以将编解码单元的块形状信息确定为正方形。图像解码装置100可以将编解码单元的形状确定为非正方形。
当编解码单元的宽度和高度彼此不同时(即,当编解码单元的块形状是4Nx2N、2Nx4N、4NxN、Nx4N、32NxN、Nx32N、16NxN、Nx16N、8NxN或Nx8N时),图像解码装置100可以将编解码单元的块形状信息确定为非正方形形状。当编解码单元的形状是非正方形时,图像解码装置100可以将编解码单元的块形状信息中的高宽比确定为1:2、2:1、1:4、4:1、1:8、8:1、1:16、16:1、1:32或32:1中的至少一个。此外,图像解码装置100可以基于编解码单元的宽度长度和高度长度来确定编解码单元是在水平方向还是在垂直方向。此外,图像解码装置100可以基于编解码单元的宽度长度、高度长度或面积中的至少一个来确定编解码单元的尺寸。
根据实施例,图像解码装置100可以通过使用块形状信息来确定编解码单元的形状,并可以通过使用划分形状模式信息来确定编解码单元的划分方法。即,由划分形状模式信息指示的编解码单元划分方法可以基于由图像解码装置100使用的块形状信息指示的块形状来确定。
图像解码装置100可以从比特流获得划分形状模式信息。然而,实施例不限于此,并且图像解码装置100和图像编码装置2200可以基于块形状信息来确定预先约定的划分形状模式信息。图像解码装置100可以确定关于最大编解码单元或最小编解码单元的预先约定的划分形状模式信息。例如,图像解码装置100可以将关于最大编解码单元的划分形状模式信息确定为四叉划分。此外,图像解码装置100可以将关于最小编解码单元的划分形状模式信息确定为“不划分”。具体地,图像解码装置100可以将最大编解码单元的尺寸确定为256×256。图像解码装置100可以将预先约定的划分形状模式信息确定为四叉划分。四叉划分是一种划分形状模式,其中编解码单元的宽度和高度都被平分。基于划分形状模式信息,图像解码装置100可以从256×256尺寸的最大编解码单元获得128×128尺寸的编解码单元。此外,图像解码装置100可以将最小编解码单元的尺寸确定为4×4。图像解码装置100可以获得指示关于最小编解码单元的“不划分”的划分形状模式信息。
根据实施例,图像解码装置100可以使用指示当前编解码单元具有正方形形状的块形状信息。例如,图像解码装置100可以基于划分形状模式信息来确定是否划分正方形编解码单元、是否垂直划分正方形编解码单元、是否水平划分正方形编解码单元或者是否将正方形编解码单元划分成四个编解码单元。参照图3,当当前编解码单元300的块形状信息指示正方形形状时,解码器120可以基于指示不划分的划分形状模式信息来确定具有与当前编解码单元300相同尺寸的编解码单元310a没有被划分,或者可以基于指示特定划分方法的划分形状模式信息来确定编解码单元310b、310c、310d、310e或310f被划分。
参照图3,根据实施例,图像解码装置100可以基于指示在垂直方向上执行划分的划分形状模式信息,确定通过在垂直方向上划分当前编解码单元300获得的两个编解码单元310b。图像解码装置100可以基于指示在水平方向上执行划分的划分形状模式信息,确定通过在水平方向上划分当前编解码单元300而获得的两个编解码单元310c。图像解码装置100可以基于指示在垂直和水平方向上执行划分的划分形状模式信息,确定通过在垂直和水平方向上划分当前编解码单元300而获得的四个编解码单元310d。根据实施例,图像解码装置100可以基于指示在垂直方向上执行三叉划分的划分形状模式信息,确定通过在垂直方向上划分当前编解码单元300而获得的三个编解码单元310e。图像解码装置100可以基于指示在水平方向上执行三叉划分的划分形状模式信息,确定通过在水平方向上划分当前编解码单元300而获得的三个编解码单元310f。然而,正方形编解码单元的划分方法不限于上述方法,并且划分形状模式信息可以指示各种方法。下文将结合各种实施例详细描述划分正方形编解码单元的某些划分方法。
图4示出了根据实施例的由图像解码装置执行的通过划分非正方形编解码单元来确定至少一个编解码单元的过程。
根据实施例,图像解码装置100可以使用指示当前编解码单元具有非正方形形状的块形状信息。图像解码装置100可以基于划分形状模式信息来确定是否划分非正方形当前编解码单元或者是否通过使用特定划分方法来划分非正方形当前编解码单元。参照图4,当当前编解码单元400或450的块形状信息指示非正方形形状时,图像解码装置100可以基于指示不划分的划分形状模式信息来确定具有与当前编解码单元400或450相同尺寸的编解码单元410或460没有被划分,或者基于指示特定划分方法的划分形状模式信息来确定编解码单元420a和420b、430a至430c、470a和470b或480a至480c被划分。下文将结合各种实施例详细描述划分非正方形编解码单元的某些划分方法。
根据实施例,图像解码装置100可以通过使用划分形状模式信息来确定编解码单元的划分方法,在这种情况下,划分形状模式信息可以指示通过划分编解码单元生成的一个或多个编解码单元的数量。参照图4,当划分形状模式信息指示将当前编解码单元400或450划分成两个编解码单元时,图像解码装置100可以通过基于划分形状模式信息划分当前编解码单元400或450来确定包括在当前编解码单元400或450中的两个编解码单元420a和420b或470a和470b。
根据实施例,当图像解码装置100基于划分形状模式信息划分非正方形当前编解码单元400或450时,图像解码装置100可以考虑非正方形当前编解码单元400或450的长边的位置来划分当前编解码单元。例如,考虑到当前编解码单元400或450的形状,图像解码装置100可以通过划分当前编解码单元400或450的长边来确定多个编解码单元。
根据实施例,当划分形状模式信息指示将编解码单元划分(三叉划分)成奇数个块时,图像解码装置100可以确定包括在当前编解码单元400或450中的奇数个编解码单元。例如,当划分形状模式信息指示将当前编解码单元400或450划分成三个编解码单元时,图像解码装置100可以将当前编解码单元400或450划分成三个编解码单元430a、430b和430c或480a、480b和480c。
根据实施例,当前编解码单元400或450的高宽比可以是4:1或1:4。当高宽比是4:1时,块形状信息可以是水平方向,因为宽度的长度比高度的长度长。当高宽比是1:4时,块形状信息可以是垂直方向,因为宽度的长度比高度的长度短。图像解码装置100可以基于划分形状模式信息确定将当前编解码单元划分成奇数个块。此外,图像解码装置100可以基于当前编解码单元400或450的块形状信息来确定当前编解码单元400或450的划分方向。例如,当当前编解码单元400在垂直方向上时,图像解码装置100可以通过在水平方向上划分当前编解码单元400来确定编解码单元430a至430c。此外,当当前编解码单元450在水平方向上时,图像解码装置100可以通过在垂直方向上划分当前编解码单元450来确定编解码单元480a至480c。
根据实施例,图像解码装置100可以确定包括在当前编解码单元400或450中的奇数个编解码单元,并且不是所有确定的编解码单元可以具有相同的尺寸。例如,所确定的奇数个编解码单元430a、430b和430c或480a、480b和480c当中的特定编解码单元430b或480b可以具有不同于其他编解码单元430a和430c或480a和480c的尺寸。即,可以通过划分当前编解码单元400或450来确定的编解码单元可以具有多种尺寸,并且在一些情况下,所有奇数个编解码单元430a、430b和430c或480a、480b和480c可以具有不同的尺寸。
根据实施例,当划分形状模式信息指示将编解码单元划分成奇数个块时,图像解码装置100可以确定包括在当前编解码单元400或450中的奇数个编解码单元,并且此外,可以对通过划分当前编解码单元400或450生成的奇数个编解码单元当中的至少一个编解码单元施加特定限制。参照图4,图像解码装置100可以设置关于当当前编解码单元400或450被划分为不同于其他编解码单元430a和430c、480a或480c时生成的三个编解码单元430a、430b和430c或480a、480b和480c当中位于中心的编解码单元430b或480b的解码过程。例如,与其他编解码单元430a和430c或480a和480c不同,图像解码装置100可以将位于中心位置的编解码单元430b或480b限制为不再被划分或仅被划分特定次数。
图5示出了根据实施例的由图像解码装置执行的基于块形状信息或划分形状模式信息中的至少一个划分编解码单元的过程。
根据实施例,基于块形状信息或划分形状模式信息中的至少一个,图像解码装置100可以确定将正方形的第一编解码单元500划分或不划分成编解码单元。根据实施例,当划分形状模式信息指示在水平方向上划分第一编解码单元500时,图像解码装置100可以通过在水平方向上划分第一编解码单元500来确定第二编解码单元510。根据实施例使用的第一编解码单元、第二编解码单元和第三编解码单元是用于理解划分编解码单元之前和之后的关系的术语。例如,可以通过划分第一编解码单元来确定第二编解码单元,并且可以通过划分第二编解码单元来确定第三编解码单元。应当理解,第一编解码单元、第二编解码单元和第三编解码单元的结构遵循以上描述。
根据实施例,基于划分形状模式信息,图像解码装置100可以确定将确定的第二编解码单元510划分或不划分成编解码单元。参照图5,图像解码装置100可以基于划分的形状模式信息将通过划分第一编解码单元500确定的非正方形的第二编解码单元510划分成一个或多个第三编解码单元520a或520b、520c和520d,或者可以不划分。图像解码装置100可以获得划分形状模式信息,并可以基于获得的划分形状模式信息通过划分第一编解码单元500来获得多个各种形状的第二编解码单元(例如,第二编解码单元510),并且可以基于划分形状模式信息通过使用第一编解码单元500的划分方法来划分第二编解码单元510。根据实施例,当基于第一编解码单元500的划分形状模式信息将第一编解码单元500划分成第二编解码单元510时,也可以基于第二编解码单元510的划分形状模式信息将第二编解码单元510划分成第三编解码单元520a或520b、520c和520d。即,可以基于每个编解码单元的划分形状模式信息递归划分编解码单元。因此,正方形编解码单元可以通过划分非正方形编解码单元来确定,并且非正方形编解码单元可以通过递归划分正方形编解码单元来确定。
参照图5,通过划分非正方形的第二编解码单元510而确定的奇数个第三编解码单元520b、520c和520d当中的特定编解码单元(例如,位于中心位置的编解码单元或正方形编解码单元)可以被递归地划分。根据实施例,奇数个第三编解码单元520b、520c和520d当中的正方形第三编解码单元520b可以在水平方向上被划分为多个第四编解码单元。多个第四编解码单元530a、530b、530c和530d当中的非正方形的第四编解码单元530b或530d可以被再次划分成多个编解码单元。例如,非正方形的第四编解码单元530b或530d可以被再次划分成奇数个编解码单元。下文将结合各种实施例描述可以用于递归划分编解码单元的方法。
根据实施例,图像解码装置100可以基于划分的形状模式信息将第三编解码单元520a或520b、520c和520d中的每一个划分成编解码单元。此外,图像解码装置100可以基于划分形状模式信息确定不划分第二编解码单元510。根据实施例,图像解码装置100可以将非正方形的第二编解码单元510划分为奇数个第三编解码单元520b、520c和520d。图像解码装置100可以对奇数个第三编解码单元520b、520c和520d当中的特定第三编解码单元施加特定限制。例如,图像解码装置100可以将奇数个第三编解码单元520b、520c和520d当中位于中心位置的第三编解码单元520c限制为不再被划分或者被划分可以设置的次数。
参照图5,图像解码装置100可以限制第三编解码单元520c(其位于包括在非正方形的第二编解码单元510中的奇数个第三编解码单元520b、520c和520d当中的中心位置)不再划分、通过使用特定划分方法来划分(例如,仅划分成四个编解码单元或通过使用第二编解码单元510的划分方法来划分)、或仅被划分特定次数(例如,仅划分n次(其中n>0))。然而,对位于中心位置的第三编解码单元520c的限制不限于上述示例,并且可以包括用于与其他第三编解码单元520b和520d不同地解码位于中心位置的第三编解码单元520c的各种限制。
根据实施例,图像解码装置100可以从当前编解码单元中的特定位置获得用于划分当前编解码单元的划分形状模式信息。
图6示出了根据实施例的由图像解码装置执行的从奇数个编解码单元当中确定特定编解码单元的方法。
参照图6,可以从包括在当前编解码单元600或650中的多个样本当中的特定位置的样本(例如,中心位置的样本640或690)获得当前编解码单元600或650的划分形状模式信息。然而,可以从其获得至少一条划分形状模式信息的当前编解码单元600中的特定位置不限于图6中的中心位置,并且可以包括当前编解码单元600中包括的各种位置(例如,顶部、底部、左侧、右侧、左上、左下、右上和右下位置)。图像解码装置100可以从特定位置获得划分形状模式信息,并可以确定将当前编解码单元划分或不划分成各种形状和各种尺寸的编解码单元。
根据实施例,当当前编解码单元被划分成特定数量的编解码单元时,图像解码装置100可以选择编解码单元之一。各种方法可以用于选择多个编解码单元中的一个,如将在下文中关于各种实施例描述的。
根据实施例,图像解码装置100可以将当前编解码单元划分为多个编解码单元,并可以在特定位置确定编解码单元。
根据实施例,图像解码装置100可以使用指示奇数个编解码单元的位置的信息来从奇数个编解码单元当中确定位于中心位置的编解码单元。参照图6,图像解码装置100可以通过划分当前编解码单元600或当前编解码单元650来确定奇数个编解码单元620a、620b和620c或奇数个编解码单元660a、660b和660c。图像解码装置100可以通过使用关于奇数个编解码单元620a、620b和620c或奇数个编解码单元660a、660b和660c的位置的信息来确定中间编解码单元620b或中间编解码单元660b。例如,图像解码装置100可以通过基于指示包括在编解码单元620a、620b和620c中的特定样本的位置的信息确定编解码单元620a、620b和620c的位置,来确定中心位置的编解码单元620b。详细地,图像解码装置100可以通过基于指示编解码单元620a、620b和620c的左上样本630a、630b和630c的位置的信息确定编解码单元620a、620b和620c的位置,来确定位于中心位置的编解码单元620b。
根据实施例,分别包括在编解码单元620a、620b和620c中的指示左上样本630a、630b和630c的位置的信息可以包括关于编解码单元620a、620b和620c在图片中的位置或坐标的信息。根据实施例,分别包括在编解码单元620a、620b和620c中的指示左上样本630a、630b和630c的位置的信息可以包括指示包括在当前编解码单元600中的编解码单元620a、620b和620c的宽度或高度的信息,并且宽度或高度可以对应于指示图片中编解码单元620a、620b和620c的坐标之间的差的信息。即,图像解码装置100可以通过直接使用关于图片中的编解码单元620a、620b和620c的位置或坐标的信息,或者通过使用关于与坐标之间的差值对应的编解码单元的宽度或高度的信息,来确定位于中心位置的编解码单元620b。
根据实施例,指示上编解码单元620a的左上样本630a的位置的信息可以包括坐标(xa,ya),指示中间编解码单元620b的左上样本630b的位置的信息可以包括坐标(xb,yb),以及指示下编解码单元620c的左上样本630c的位置的信息可以包括坐标(xc,yc)。图像解码装置100可以通过使用分别包括在编解码单元620a、620b和620c中的左上样本630a、630b和630c的坐标来确定中间编解码单元620b。例如,当左上样本630a、630b和630c的坐标以升序或降序排序时,包括在中心位置的样本630b的坐标(xb,yb)的编解码单元620b可以被确定为通过划分当前编解码单元600确定的编解码单元620a、620b和620c当中的在中心位置的编解码单元。然而,指示左上样本630a、630b和630c的位置的坐标可以包括指示图片中的绝对位置的坐标,或者可以使用指示中间编解码单元620b的左上样本630b的相对位置的坐标(dxb,dyb)和指示下编解码单元620c的左上样本630c相对于上编解码单元620a的左上样本630a的位置的坐标(dxc,dyc)。通过使用包括在编解码单元中的样本的坐标作为指示样本位置的信息来确定特定位置处的编解码单元的方法不限于上述方法,并且可以包括能够使用样本坐标的各种算术方法。
根据实施例,图像解码装置100可以将当前编解码单元600划分为多个编解码单元620a、620b和620c,并可以基于特定标准选择编解码单元620a、620b和620c之一。例如,图像解码装置100可以从编解码单元620a、620b和620c当中选择尺寸不同于其他编解码单元的编解码单元620b。
根据实施例,图像解码装置100可以通过使用作为指示上编解码单元620a的左上样本630a的位置的信息的坐标(xa,ya)、作为指示中间编解码单元620b的左上样本630b的位置的信息的坐标(xb,yb)以及作为指示下编解码单元的左上样本630c的位置的信息的坐标(xc,yc)来确定编解码单元620a、620b和620c中的每一个的宽度或高度。图像解码装置100可以通过使用指示编解码单元620a、620b和620c的位置的坐标(xa,ya)、(xb,yb)和(xc,yc)来确定编解码单元620a、620b和620c的相应尺寸。根据实施例,图像解码装置100可以将上编解码单元620a的宽度确定为当前编解码单元600的宽度。图像解码装置100可以将上编解码单元620a的高度确定为yb-ya。根据实施例,图像解码装置100可以将中间编解码单元620b的宽度确定为当前编解码单元600的宽度。图像解码装置100可以将中间编解码单元620b的高度确定为yc-yb。根据实施例,图像解码装置100可以通过使用当前编解码单元600的宽度或高度或者上编解码单元620a和中编解码单元620b的宽度或高度来确定下编解码单元620c的宽度或高度。图像解码装置100可以基于确定的编解码单元620a至620c的宽度和高度来确定具有不同于其他编解码单元的尺寸的编解码单元。参照图6,图像解码装置100可以将具有不同于上编解码单元620a和下编解码单元620c的尺寸的中间编解码单元620b确定为特定位置的编解码单元。然而,由图像解码装置100执行的确定具有与其他编解码单元的尺寸不同的尺寸的编解码单元的上述方法仅对应于通过使用基于样本的坐标确定的编解码单元的尺寸来确定特定位置的编解码单元的示例,并因此可以使用通过比较基于特定样本的坐标确定的编解码单元的尺寸来确定特定位置的编解码单元的各种方法。
图像解码装置100可以通过使用作为指示左编解码单元660a的左上样本670a的位置的信息的坐标(xd,yd)、作为指示中间编解码单元660b的左上样本670b的位置的信息的坐标(xe,ye)以及作为指示右编解码单元660c的左上样本670c的位置的信息的坐标(xf,yf)来确定编解码单元660a、660b和660c中的每一个的宽度或高度。图像解码装置100可以通过使用指示编解码单元660a、660b和660c的位置的坐标(xd,yd)、(xe,ye)和(xf,yf)来确定编解码单元660a、660b和660c的相应尺寸。
根据实施例,图像解码装置100可以将左编解码单元660a的宽度确定为xe-xd。图像解码装置100可以将左编解码单元660a的高度确定为当前编解码单元650的高度。根据实施例,图像解码装置100可以将中间编解码单元660b的宽度确定为xf-xe。图像解码装置100可以将中间编解码单元660b的高度确定为当前编解码单元600的高度。根据实施例,图像解码装置100可以通过使用当前编解码单元650的宽度或高度或者左编解码单元660a和中间编解码单元660b的宽度或高度来确定右编解码单元660c的宽度或高度。图像解码装置100可以基于确定的编解码单元660a至660c的宽度和高度来确定具有不同于其他编解码单元的尺寸的编解码单元。参照图6,图像解码装置100可以将具有不同于左编解码单元660a和右编解码单元660c的尺寸的中间编解码单元660b确定为特定位置的编解码单元。然而,由图像解码装置100执行的确定具有与其他编解码单元的尺寸不同的尺寸的编解码单元的上述方法仅对应于通过使用基于样本的坐标确定的编解码单元的尺寸来确定特定位置的编解码单元的示例,并因此可以使用通过比较基于特定样本的坐标确定的编解码单元的尺寸来确定特定位置的编解码单元的各种方法。
然而,被考虑来确定编解码单元的位置的样本的位置不限于上述左上位置,并且可以使用关于编解码单元中包括的样本的任意位置的信息。
根据实施例,考虑到当前编解码单元的形状,图像解码装置100可以从通过划分当前编解码单元确定的奇数个编解码单元当中选择特定位置的编解码单元。例如,当当前编解码单元具有宽度大于高度的非正方形形状时,图像解码装置100可以在水平方向上的特定位置确定编解码单元。即,图像解码装置100可以确定在水平方向上具有不同位置的编解码单元之一,并对该编解码单元施加限制。当当前编解码单元具有高度大于宽度的非正方形形状时,图像解码装置100可以在垂直方向上的特定位置确定编解码单元。即,图像解码装置100可以确定在垂直方向上具有不同位置的编解码单元之一,并对该编解码单元施加限制。
根据实施例,图像解码装置100可以使用指示偶数个编解码单元的相应位置的信息来从偶数个编解码单元当中确定特定位置处的编解码单元。图像解码装置100可以通过划分(二叉划分)当前编解码单元来确定偶数个编解码单元,并可以通过使用关于偶数个编解码单元的位置的信息来确定特定位置处的编解码单元。与其相关的操作可以对应于从奇数个编解码单元当中确定特定位置(例如,中心位置)的编解码单元的操作,这已经在上面关于图6进行了详细描述,并因此这里不提供其详细描述。
根据实施例,当非正方形的当前编解码单元被划分成多个编解码单元时,关于特定位置处的编解码单元的特定信息可以在划分操作中使用,以从多个编解码单元当中确定特定位置处的编解码单元。例如,图像解码装置100可以在划分操作中使用存储在包括在中间编解码单元中的样本中的块形状信息或划分形状模式信息中的至少一个,以从通过划分当前编解码单元确定的多个编解码单元当中确定位于中心位置的编解码单元。
参照图6,图像解码装置100可以基于划分的形状模式信息将当前编解码单元600划分成多个编解码单元620a、620b和620c,并可以从多个编解码单元620a、620b和620c当中确定在中心位置的编解码单元620b。此外,图像解码装置100可以考虑从其获得划分形状模式信息的位置来确定在中心位置的编解码单元620b。即,可以从位于当前编解码单元600的中心位置的样本640获得当前编解码单元600的划分形状模式信息,并且当基于划分形状模式信息将当前编解码单元600划分成多个编解码单元620a、620b和620c时,包括样本640的编解码单元620b可以被确定为位于中心位置的编解码单元。然而,用于确定中心位置处的编解码单元的信息不限于划分形状模式信息,并且各种类型的信息可以用于确定中心位置处的编解码单元。
根据实施例,用于标识特定位置处的编解码单元的特定信息可以从包括在要确定的编解码单元中的特定样本获得。参照图6,图像解码装置100可以使用从当前编解码单元600中的特定位置处的样本(例如,当前编解码单元600的中心位置处的样本)获得的划分形状模式信息来从通过划分当前编解码单元600确定的多个编解码单元620a、620b和620c当中确定特定位置处的编解码单元(例如,多个划分编解码单元当中的中心位置处的编解码单元)。即,图像解码装置100可以通过考虑当前编解码单元600的块形状来确定特定位置处的样本,从通过划分当前编解码单元600确定的多个编解码单元620a、620b和620c中确定包括可以从其获得特定信息(例如,划分形状模式信息)的样本的编解码单元620b,并且可以对编解码单元620b施加特定限制。参照图6,根据实施例,在解码操作中,图像解码装置100可以将当前编解码单元600的中心位置处的样本640确定为可以从其获得特定信息的样本,并且可以对包括样本640的编解码单元620b施加特定限制。然而,可以从其获得特定信息的样本的位置不限于上述位置,并且可以包括编解码单元620b中包括的要被确定用于限制的样本的任意位置。
根据实施例,可以基于当前编解码单元600的形状来确定可以从其获得特定信息的样本的位置。根据实施例,块形状信息可以指示当前编解码单元是正方形还是非正方形,并可以基于形状确定可以从其获得特定信息的样本的位置。例如,图像解码装置100可以通过使用关于当前编解码单元的宽度的信息或关于当前编解码单元的高度的信息中的至少一个,将位于用于将当前编解码单元的宽度或高度中的至少一个划分成两半的边界上的样本确定为可以从其获得特定信息的样本。作为另一示例,当当前编解码单元的块形状信息指示非正方形形状时,图像解码装置100可以将包括用于将当前编解码单元的长边划分成两半的边界的样本之一确定为可以从其获得预定信息的样本。
根据实施例,当当前编解码单元被划分为多个编解码单元时,图像解码装置100可以使用划分形状模式信息来从多个编解码单元当中确定在特定位置的编解码单元。根据实施例,图像解码装置100可以从编解码单元中的特定位置处的样本获得划分形状模式信息,并通过使用从多个编解码单元的每一个中的特定位置处的样本获得的划分形状模式信息来划分通过划分当前编解码单元生成的多个编解码单元。即,可以基于从每个编解码单元中的特定位置处的样本获得的划分形状模式信息来递归划分编解码单元。上面已经关于图5描述了递归划分编解码单元的操作,并因此这里将不提供其详细描述。
根据实施例,图像解码装置100可以通过划分当前编解码单元来确定一个或多个编解码单元,并可以基于特定块(例如,当前编解码单元)来确定解码一个或多个编解码单元的顺序。
图7示出了根据实施例的当图像解码装置通过划分当前编解码单元来确定多个编解码单元时处理多个编解码单元的顺序。
根据实施例,基于划分形状模式信息,图像解码装置100可以通过在垂直方向上划分第一编解码单元700来确定第二编解码单元710a和710b,通过在水平方向上划分第一编解码单元700来确定第二编解码单元730a和730b,或者通过在垂直和水平方向上划分第一编解码单元700来确定第二编解码单元750a至750d。
参照图7,图像解码装置100可以确定以水平方向顺序710c处理通过在垂直方向上划分第一编解码单元700而确定的第二编解码单元710a和710b。图像解码装置100可以确定以垂直方向顺序730c处理通过在水平方向上划分第一编解码单元700而确定的第二编解码单元730a和730b。图像解码装置100可以确定以处理一行中的编解码单元然后处理下一行中的编解码单元的特定顺序(例如,以光栅扫描顺序或Z扫描顺序750e)处理通过在垂直和水平方向上划分第一编解码单元700而确定的第二编解码单元750a至750d。
根据实施例,图像解码装置100可以递归地划分编解码单元。参照图7,图像解码装置100可以通过划分第一编解码单元700来确定多个编解码单元710a和710b、730a和730b或750a至750d,并递归地划分确定的多个编解码单元710b、730a和730b或750a至750d中的每一个。多个编解码单元710b、730a和730b或750a至750d的划分方法可以对应于第一编解码单元700的划分方法。这样,多个编解码单元710b、730a和730b或750a至750d中的每一个可以独立地分成多个编解码单元。参照图7,图像解码装置100可以通过在垂直方向上划分第一编解码单元700来确定第二编解码单元710a和710b,并可以确定独立地划分或不划分第二编解码单元710a和710b中的每一个。
根据实施例,图像解码装置100可以通过在水平方向上划分左第二编解码单元710a来确定第三编解码单元720a和720b,并且可以不划分右第二编解码单元710b。
根据实施例,可以基于划分编解码单元的操作来确定编解码单元的处理顺序。换句话说,可以基于紧接在划分之前的编解码单元的处理顺序来确定划分编解码单元的处理顺序。图像解码装置100可以独立于右第二编解码单元710b,确定通过划分左第二编解码单元710a确定的第三编解码单元720a和720b的处理顺序。因为通过在水平方向上划分左第二编解码单元710a来确定第三编解码单元720a和720b,所以第三编解码单元720a和720b可以在垂直方向顺序720c上被处理。因为以水平方向顺序710c处理左和右第二编解码单元710a和710b,所以可以在以垂直方向顺序720c处理包括在左第二编解码单元710a中的第三编解码单元720a和720b之后处理右第二编解码单元710b。基于划分前的编解码单元确定编解码单元的处理顺序的操作不限于上述示例,并且各种方法可以用于以特定顺序独立地处理被划分并被确定为各种形状的编解码单元。
图8示出了根据实施例的当编解码单元不能以预定顺序处理时,由图像解码装置执行的确定当前编解码单元将被分成奇数个编解码单元的过程。
根据实施例,图像解码装置100可以基于获得的划分形状模式信息确定当前编解码单元是否被划分成奇数个编解码单元。参照图8,正方形的第一编解码单元800可以被划分成非正方形的第二编解码单元810a和810b,而第二编解码单元810a和810b可以被独立地划分成第三编解码单元820a和820b以及820c至820e。根据实施例,图像解码装置100可以通过在水平方向上划分左第二编解码单元810a来确定多个第三编解码单元820a和820b,并可以将右第二编解码单元810b划分成奇数个第三编解码单元820c至820e。
根据实施例,图像解码装置100可以通过确定第三编解码单元820a和820b以及820c至820e是否可按特定顺序处理来确定任何编解码单元是否被划分成奇数个编解码单元。参照图8,图像解码装置100可以通过递归划分第一编解码单元800来确定第三编解码单元820a和820b以及820c至820e。图像解码装置100可以基于块形状信息或划分形状模式信息中的至少一个来确定第一编解码单元800、第二编解码单元810a和810b、和第三编解码单元820a和820b以及820c至820e中的任何一个是否被划分成奇数个编解码单元。例如,第二编解码单元810a和810b当中的右第二编解码单元810b可以被划分成奇数个第三编解码单元820c、820d和820e。包括在第一编解码单元800中的多个编解码单元的处理顺序可以是特定顺序(例如,Z扫描顺序830),并且图像解码装置100可以确定通过将右第二编解码单元810b划分为奇数个编解码单元而确定的第三编解码单元820c、820d和820e是否满足以特定顺序处理的条件。
根据实施例,图像解码装置100可以确定包括在第一编解码单元800中的第三编解码单元820a和820b以及820c至820e是否满足用于以特定顺序处理的条件,并且该条件涉及第二编解码单元810a和810b的宽度或高度中的至少一个是否沿着第三编解码单元820a和820b以及820c至820e的边界被分成两半。例如,当非正方形的左第二编解码单元810a的高度被分成两半时确定的第三编解码单元820a和820b可以满足条件。可以确定第三编解码单元820c至820e不满足条件,因为当右第二编解码单元810b被划分成三个编解码单元时确定的第三编解码单元820c至820e的边界不能将右第二编解码单元810b的宽度或高度划分成一半。当如上所述不满足条件时,图像解码装置100可以确定扫描顺序的断开,并可以基于确定的结果确定右第二编解码单元810b被划分成奇数个编解码单元。根据实施例,当编解码单元被划分成奇数个编解码单元时,图像解码装置100可以对划分的编解码单元当中的特定位置处的编解码单元施加特定限制。上文已经关于各种实施例描述了限制或特定位置,并因此不再提供其详细描述。
图9示出了根据实施例的由图像解码装置执行的通过划分第一编解码单元来确定至少一个编解码单元的过程。
根据实施例,图像解码装置100可以基于通过接收器110获得的划分形状模式信息来划分第一编解码单元900。正方形第一编解码单元900可以被分成四个正方形编解码单元,或者可以被划分成多个非正方形编解码单元。例如,参照图9,当划分形状模式信息指示将第一编解码单元900划分成非正方形编解码单元时,图像解码装置100可以将第一编解码单元900划分成多个非正方形编解码单元。详细地,当划分形状模式信息指示通过在水平方向或垂直方向上划分第一编解码单元900来确定奇数个编解码单元时,图像解码装置100可以将正方形第一编解码单元900划分成奇数个编解码单元,例如,通过在垂直方向上划分正方形第一编解码单元900来确定的第二编解码单元910a、910b和910c,或者通过在水平方向上划分正方形第一编解码单元900来确定的第二编解码单元920a、920b和920c。
根据实施例,图像解码装置100可以确定包括在第一编解码单元900中的第二编解码单元910a、910b、910c、920a、920b和920c是否满足以特定顺序处理的条件,并且该条件涉及第一编解码单元900的宽度或高度中的至少一个是否沿着第二编解码单元910a、910b、910c、920a、920b和920c的边界被分成两半。参照图9,因为通过在垂直方向上划分正方形的第一编解码单元900而确定的第二编解码单元910a、910b和910c的边界没有将第一编解码单元900的宽度划分成一半,所以可以确定第一编解码单元900不满足以特定顺序处理的条件。另外,因为通过在水平方向上划分正方形的第一编解码单元900而确定的第二编解码单元920a、920b和920c的边界没有将第一编解码单元900的宽度划分成一半,所以可以确定第一编解码单元900不满足以预定顺序处理的条件。当如上所述不满足条件时,图像解码装置100可以决定扫描顺序的断开,并可以基于决定的结果确定第一编解码单元900被划分成奇数个编解码单元。根据实施例,当编解码单元被划分成奇数个编解码单元时,图像解码装置100可以对划分的编解码单元当中的特定位置处的编解码单元施加特定限制。上文已经关于各种实施例描述了限制或特定位置,并因此不再提供其详细描述。
根据实施例,图像解码装置100可以通过划分第一编解码单元来确定各种形状的编解码单元。
参照图9,图像解码装置100可以将正方形的第一编解码单元900或非正方形的第一编解码单元930或950划分成各种形状的编解码单元。
图10示出了根据实施例,当具有非正方形形状的第二编解码单元满足特定条件时,第二编解码单元可划分成的形状受到限制,该非正方形形状是在图像解码装置划分第一编解码单元时确定的。
根据实施例,基于由接收器110获得的划分形状模式信息,图像解码装置100可以确定将正方形的第一编解码单元1000划分成非正方形的第二编解码单元1010a和1010b或1020a和1020b。第二编解码单元1010a和1010b或者1020a和1020b可以被独立地划分。这样,图像解码装置100可以基于第二编解码单元1010a和1010b或1020a和1020b中的每一个的划分形状模式信息,确定将第二编解码单元1010a和1010b或1020a和1020b中的每一个划分或不划分成多个编解码单元。根据实施例,图像解码装置100可以通过在水平方向上划分通过在垂直方向上划分第一编解码单元1000来确定的非正方形的左第二编解码单元1010a来确定第三编解码单元1012a和1012b。然而,当左第二编解码单元1010a在水平方向上被划分时,图像解码装置100可以限制右第二编解码单元1010b不在左第二编解码单元1010a被划分的水平方向上被划分。当通过在相同方向上划分右第二编解码单元1010b来确定第三编解码单元1014a和1014b时,因为左第二编解码单元1010a和右第二编解码单元1010b在水平方向上被独立地划分,所以可以确定第三编解码单元1012a和1012b或者1014a和1014b。然而,这种情况等同于图像解码装置100基于划分形状模式信息将第一编解码单元1000划分成四个正方形的第二编解码单元1030a、1030b、1030c和1030d的情况,并且在图像解码方面可能是低效的。
根据实施例,图像解码装置100可以通过在垂直方向上划分通过在水平方向上划分第一编解码单元1000来确定的非正方形的第二编解码单元1020a或1020b来确定第三编解码单元1022a和1022b或1024a和1024b。然而,当第二编解码单元(例如,上第二编解码单元1020a)在垂直方向上被划分时,由于上述原因,图像解码装置100可以限制另一个第二编解码单元(例如,下第二编解码单元1020b)不在上第二编解码单元1020a被划分的垂直方向上被划分。
图11示出了根据实施例的当划分形状模式信息不能指示正方形编解码单元被划分成四个正方形编解码单元时,由图像解码装置执行的划分正方形编解码单元的过程。
根据实施例,图像解码装置100可以通过基于划分形状模式信息划分第一编解码单元1100来确定第二编解码单元1110a和1110b或1120a和1120b等。划分形状模式信息可以包括关于划分编解码单元的各种方法的信息,但是,关于各种划分方法的信息可以不包括用于将编解码单元划分成四个正方形编解码单元的信息。根据这种划分形状模式信息,图像解码装置100可以不将正方形第一编解码单元1100划分成四个正方形第二编解码单元1130a、1130b、1130c和1130d。图像解码装置100可以基于划分形状模式信息确定非正方形的第二编解码单元1110a和1110b或1120a和1120b等。
根据实施例,图像解码装置100可以独立地划分非正方形的第二编解码单元1110a和1110b或1120a和1120b等。第二编解码单元1110a和1110b或1120a和1120b等中的每一个可以以特定顺序递归地划分,并且该划分方法可以对应于基于划分形状模式信息划分第一编解码单元1100的方法。
例如,图像解码装置100可以通过在水平方向上划分左第二编解码单元1110a来确定正方形的第三编解码单元1112a和1112b,并可以通过在水平方向上划分右第二编解码单元1110b来确定正方形的第三编解码单元1114a和1114b。此外,图像解码装置100可以通过在水平方向上划分左第二编解码单元1110a和右第二编解码单元1110b来确定正方形的第三编解码单元1116a、1116b、1116c和1116d。在这种情况下,可以确定与从第一编解码单元1100划分的四个正方形第二编解码单元1130a、1130b、1130c和1130d具有相同形状的编解码单元。
作为另一示例,图像解码装置100可以通过在垂直方向上划分上第二编解码单元1120a来确定正方形的第三编解码单元1122a和1122b,并可以通过在垂直方向上划分下第二编解码单元1120b来确定正方形的第三编解码单元1124a和1124b。此外,图像解码装置100可以通过在垂直方向上划分上第二编解码单元1120a和下第二编解码单元1120b来确定正方形的第三编解码单元1126a、1126b、1126c和1126d。在这种情况下,可以确定与从第一编解码单元1100划分的四个正方形第二编解码单元1130a、1130b、1130c和1130d具有相同形状的编解码单元。
图12示出了根据实施例的多个编解码单元之间的处理顺序可以根据划分编解码单元的过程而改变。
根据实施例,图像解码装置100可以基于划分形状模式信息来划分第一编解码单元1200。当块形状指示正方形并且划分形状模式信息指示在水平方向或垂直方向中的至少一个方向上划分第一编解码单元1200时,图像解码装置100可以通过划分第一编解码单元1200来确定第二编解码单元1210a和1210b或1220a和1220b等。参照图12,通过仅在水平方向或垂直方向上划分第一编解码单元1200而确定的非正方形的第二编解码单元1210a和1210b或1220a和1220b可以基于每个编解码单元的划分形状模式信息被独立地划分。例如,图像解码装置100可以通过在水平方向上划分通过在垂直方向上划分第一编解码单元1200生成的第二编解码单元1210a和1210b来确定第三编解码单元1216a、1216b、1216c和1216d,并可以通过在水平方向上划分通过在水平方向上划分第一编解码单元1200生成的第二编解码单元1220a和1220b来确定第三编解码单元1226a、1226b、1226c和1226d。上面已经关于图11描述了划分第二编解码单元1210a和1210b或1220a和1220b的操作,并因此这里将不提供其详细描述。
根据实施例,图像解码装置100可以以特定顺序处理编解码单元。上面已经关于图7描述了以预定顺序处理编解码单元的操作,并因此这里将不提供其详细描述。参照图12,图像解码装置100可以通过划分正方形第一编解码单元1200来确定四个正方形第三编解码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d。根据实施例,图像解码装置100可以基于第一编解码单元1200的划分方法确定第三编解码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d的处理顺序。
根据实施例,图像解码装置100可以通过在水平方向上划分通过在垂直方向上划分第一编解码单元1200而生成的第二编解码单元1210a和1210b来确定第三编解码单元1216a、1216b、1216c和1216d,并且可以在垂直方向上按照用于初始处理包括在左第二编解码单元1210a中的第三编解码单元1216a和1216c的处理顺序1217来处理第三编解码单元1216a、1216b、1216c和1216d,并然后在垂直方向上处理包括在右第二编解码单元1210b中的第三编解码单元1216b和1216d。
根据实施例,图像解码装置100可以通过在垂直方向上划分通过在水平方向上划分第一编解码单元1200而生成的第二编解码单元1220a和1220b来确定第三编解码单元1226a、1226b、1226c和1226d,并且可以在水平方向上按照用于初始处理包括在上第二编解码单元1220a中的第三编解码单元1226a和1226b的处理顺序1227来处理第三编解码单元1226a、1226b、1226c和1226d,并然后在水平方向上处理包括在下第二编解码单元1220b中的第三编解码单元1226c和1226d。
参照图12,正方形的第三编解码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d可以通过分别划分第二编解码单元1210a和1210b以及1220a和1220b来确定。尽管通过在垂直方向上划分第一编解码单元1200来确定第二编解码单元1210a和1210b不同于通过在水平方向上划分第一编解码单元1200来确定的第二编解码单元1220a和1220b,但是从其划分的第三编解码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d最终示出了从第一编解码单元1200划分的相同形状的编解码单元。这样,通过基于划分形状模式信息以不同方式递归划分编解码单元,即使当编解码单元最终被确定为相同形状时,图像解码装置100也可以以不同顺序处理多个编解码单元。
图13示出了根据实施例的当编解码单元被递归地划分以确定多个编解码单元时,随着编解码单元的形状和尺寸改变而确定编解码单元的深度的过程。
根据实施例,图像解码装置100可以基于特定标准确定编解码单元的深度。例如,特定标准可以是编解码单元的长边的长度。当划分前的编解码单元的长边的长度是划分的当前编解码单元的长边的长度的2n倍(n>0)时,图像解码装置100可以确定当前编解码单元的深度从划分前的编解码单元的深度增加了n。在以下描述中,具有增加的深度的编解码单元被表示为更深深度的编解码单元。
参照图13,根据实施例,图像解码装置100可以通过基于指示正方形形状的块形状信息(例如,块形状信息可以被表示为“0:SQUARE”)划分正方形的第一编解码单元1300来确定更深深度的第二编解码单元1302和第三编解码单元1304。假设正方形的第一编解码单元1300的尺寸是2N×2N,通过将第一编解码单元1300的宽度和高度划分成1/2而确定的第二编解码单元1302的尺寸可以是N×N。此外,通过将第二编解码单元1302的宽度和高度划分成1/2而确定的第三编解码单元1304的尺寸可以是N/2×N/2。在这种情况下,第三编解码单元1304的宽度和高度是第一编解码单元1300的1/4倍。当第一编解码单元1300的深度是D时,宽度和高度是第一编解码单元1300的1/2倍的第二编解码单元1302的深度可以是D+1,并且宽度和高度是第一编解码单元1300的1/4倍的第三编解码单元1304的深度可以是D+2。
根据实施例,图像解码装置100可以通过基于指示非正方形形状的块形状信息划分非正方形的第一编解码单元1310或1320来确定深度更深的第二编解码单元1312或1322和第三编解码单元1314或1324(例如,块形状信息可以被表示为指示非正方形形状的“1:NS_VER”,其高度比宽度长,或者被表示为指示非正方形形状的“2:NS_HOR”,其宽度比高度长)。
图像解码装置100可以通过划分具有N×2N尺寸的第一编解码单元1310的宽度或高度中的至少一个来确定第二编解码单元1302、1312或1322。即,图像解码装置100可以通过在水平方向上划分第一编解码单元1310来确定具有N×N尺寸的第二编解码单元1302或具有N×N/2尺寸的第二编解码单元1322,或者可以通过在水平和垂直方向上划分第一编解码单元1310来确定具有N/2×N尺寸的第二编解码单元1312。
根据实施例,图像解码装置100可以通过划分具有2N×N尺寸的第一编解码单元1320的宽度或高度中的至少一个来确定第二编解码单元1302、1312或1322。即,图像解码装置100可以通过在垂直方向上划分第一编解码单元1320来确定具有N×N尺寸的第二编解码单元1302或具有N/2×N尺寸的第二编解码单元1312,或者可以通过在水平和垂直方向上划分第一编解码单元1320来确定具有N×N/2尺寸的第二编解码单元1322。
根据实施例,图像解码装置100可以通过划分尺寸为N×N的第二编解码单元1302的宽度或高度中的至少一个来确定第三编解码单元1304、1314或1324。即,图像解码装置100可以通过在垂直和水平方向上划分第二编解码单元1302确定尺寸为N/2×N/2的第三编解码单元1304、尺寸为N/4×N/2的第三编解码单元1314或尺寸为N/2×N/4的第三编解码单元1324。
根据实施例,图像解码装置100可以通过划分尺寸为N/2×N的第二编解码单元1312的宽度或高度中的至少一个来确定第三编解码单元1304、1314或1324。即,图像解码装置100可以通过在水平方向上划分第二编解码单元1312来确定尺寸为N/2×N/2的第三编解码单元1304或尺寸为N/2×N/4的第三编解码单元1324或者可以通过在垂直和水平方向上划分第二编解码单元1312来确定尺寸为N/4×N/2的第三编解码单元1314。
根据实施例,图像解码装置100可以通过划分尺寸为N×N/2的第二编解码单元1322的宽度或高度中的至少一个来确定第三编解码单元1304、1314或1324。即,图像解码装置100可以通过在垂直方向上划分第二编解码单元1322来确定尺寸为N/2×N/2的第三编解码单元1304或尺寸为N/4×N/2的第三编解码单元1314,或者可以通过在垂直和水平方向上划分第二编解码单元1322来确定尺寸为N/2×N/4的第三编解码单元1324。
根据实施例,图像解码装置100可以在水平或垂直方向上划分正方形编解码单元1300、1302或1304。例如,图像解码装置100可以通过在垂直方向上划分尺寸为2N×2N的第一编解码单元1300来确定尺寸为N×2N的第一编解码单元1310,或者可以通过在水平方向上划分第一编解码单元1300来确定尺寸为2N×N的第一编解码单元1320。根据实施例,当基于编解码单元的最长边的长度确定深度时,通过在水平或垂直方向上划分尺寸为2N×2N的第一编解码单元1300确定的编解码单元的深度可以与第一编解码单元1300的深度相同。
根据实施例,第三编解码单元1314或1324的宽度和高度可以是第一编解码单元1310或1320的1/4倍。当第一编解码单元1310或1320的深度是D时,宽度和高度是第一编解码单元1310或1320的1/2倍的第二编解码单元1312或1322的深度可以是D+1,并且宽度和高度是第一编解码单元1310或1320的1/4倍的第三编解码单元1314或1324的深度可以是D+2。
图14示出根据实施例的基于编解码单元的形状和尺寸以及用于区分编解码单元的部分索引(PID)可以确定的深度。
根据实施例,图像解码装置100可以通过划分正方形的第一编解码单元1400来确定各种形状的第二编解码单元。参照图14,图像解码装置100可以通过基于划分形状模式信息在垂直方向或水平方向中的至少一个方向上划分第一编解码单元1400来确定第二编解码单元1402a和1402b、1404a和1404b以及1406a、1406b、1406c和1406d。即,图像解码装置100可以基于第一编解码单元1400的划分形状模式信息来确定第二编解码单元1402a和1402b、1404a和1404b以及1406a、1406b、1406c和1406d。
根据实施例,基于正方形第一编解码单元1400的划分形状模式信息确定的第二编解码单元1402a和1402b、1404a和1404b以及1406a、1406b、1406c和1406d的深度可以基于其长边的长度来确定。例如,因为正方形的第一编解码单元1400的边长等于非正方形的第二编解码单元1402a和1402b以及1404a和1404b的长边的长度,所以第一编解码单元2100和非正方形的第二编解码单元1402a和1402b以及1404a和1404b可以具有相同的深度,例如D。然而,因为正方形的第二编解码单元1406a、1406b、1406c和1406d的边长是第一编解码单元1400的边长的1/2倍,所以第二编解码单元1406a、1406b、1406c和1406d的深度可以是比第一编解码单元1400的深度D深1的D+1。
根据实施例,图像解码装置100可以通过基于划分形状模式信息在水平方向上划分高度比宽度长的第一编解码单元1410来确定多个第二编解码单元1412a和1412b以及1414a、1414b和1414c。根据实施例,图像解码装置100可以通过基于划分的形状模式信息在垂直方向上划分宽度比高度长的第一编解码单元1420来确定多个第二编解码单元1422a和1422b以及1424a、1424b和1424c。
根据实施例,基于非正方形第一编解码单元1410或1420的划分形状模式信息确定的第二编解码单元1412a和1412b以及1414a、1414b和1414c或者1422a和1422b以及1424a、1424b和1424c的深度可以基于其长边的长度来确定。例如,因为正方形的第二编解码单元1412a和1412b的边长是具有非正方形形状的高度比宽度长的第一编解码单元1410的长边的长度的1/2倍,所以正方形的第二编解码单元1412a和1412b的深度是比非正方形的第一编解码单元1410的深度D深1的D+1。
此外,图像解码装置100可以基于划分形状模式信息将非正方形的第一编解码单元1410划分成奇数个第二编解码单元1414a、1414b和1414c。奇数个第二编解码单元1414a、1414b和1414c可以包括非正方形的第二编解码单元1414a和1414c以及正方形的第二编解码单元1414b。在这种情况下,因为非正方形的第二编解码单元1414a和1414c的长边的长度和正方形的第二编解码单元1414b的边长是第一编解码单元1410的长边的长度的1/2倍,所以第二编解码单元1414a、1414b和1414c的深度可以是比非正方形的第一编解码单元1410的深度D深1的D+1。图像解码装置100可以通过使用上述确定从第一编解码单元1410划分的编解码单元的深度的方法来确定从具有非正方形形状的宽度比高度长的第一编解码单元1420划分的编解码单元的深度。
根据实施例,当奇数个划分编解码单元不具有相等的尺寸时,图像解码装置100可以基于编解码单元之间的尺寸比来确定用于标识划分编解码单元的PID。参照图14,奇数个划分编解码单元1414a、1414b和1414c当中的中心位置的编解码单元1414b可以具有与其他编解码单元1414a和1414c相等的宽度和两倍于其他编解码单元1414a和1414c的高度。即,在这种情况下,在中心位置处的编解码单元1414b可以包括两个其他编解码单元1414a或1414c。因此,当基于扫描顺序在中心位置处的编解码单元1414b的PID是1时,位于编解码单元1414b旁边的编解码单元1414c的PID可以增加2,并因此可以是3。即,可能存在PID值的不连续性。根据实施例,图像解码装置100可以基于用于标识划分编解码单元的PID中是否存在不连续性来确定奇数个划分编解码单元是否不具有相等的尺寸。
根据实施例,图像解码装置100可以基于通过划分当前编解码单元确定的用于标识多个编解码单元的PID值来确定是否使用特定划分方法。参照图14,图像解码装置100可以通过划分具有矩形形状的高度比宽度长的第一编解码单元1410来确定偶数个编解码单元1412a和1412b或奇数个编解码单元1414a、1414b和1414c。图像解码装置100可以使用指示相应编解码单元的PID来标识相应编解码单元。根据实施例,可以从每个编解码单元的特定位置的样本(例如,左上样本)获得PID。
根据实施例,通过使用用于区分编解码单元的PID,图像解码装置100可以从划分的编解码单元当中确定特定位置处的编解码单元。根据实施例,当具有矩形形状的高度比宽度长的第一编解码单元1410的划分形状模式信息指示将编解码单元划分成三个编解码单元时,图像解码装置100可以将第一编解码单元1410划分成三个编解码单元1414a、1414b和1414c。图像解码装置100可以将PID指派给三个编解码单元1414a、1414b和1414c中的每一个。图像解码装置100可以比较奇数个划分编解码单元的PID,以从编解码单元当中确定位于中心位置的编解码单元。图像解码装置100可以从通过划分第一编解码单元1410确定的编解码单元当中,将具有与编解码单元的PID当中的中间值对应的PID的编解码单元1414b确定为在中心位置处的编解码单元。根据实施例,当划分编解码单元不具有相等的尺寸时,图像解码装置100可以基于编解码单元之间的尺寸比来确定用于区分划分编解码单元的PID。参照图14,通过划分第一编解码单元1410生成的编解码单元1414b可以具有与其他编解码单元1414a和1414c相等的宽度和两倍于其他编解码单元1414a和1414c的高度。在这种情况下,当位于中心位置的编解码单元1414b的PID是1时,位于编解码单元1414b旁边的编解码单元1414c的PID可以增加2,并因此可以是3。当PID没有如上所述均匀增加时,图像解码装置100可以确定编解码单元被划分成多个编解码单元,包括具有与其他编解码单元的尺寸不同的尺寸的编解码单元。根据实施例,当划分形状模式信息指示将编解码单元划分成奇数个编解码单元时,图像解码装置100可以以奇数个编解码单元当中的特定位置的编解码单元(例如,中心位置的编解码单元)具有与其他编解码单元不同的尺寸的方式划分当前编解码单元。在这种情况下,图像解码装置100可以通过使用编解码单元的PID来确定具有不同尺寸的中心位置的编解码单元。然而,PID和特定位置的编解码单元的尺寸或位置不限于上述示例,并且可以使用各种PID和编解码单元的各种位置和尺寸。
根据实施例,图像解码装置100可以使用编解码单元开始被递归划分的特定数据单元。
图15示出了根据实施例的基于包括在图片中的多个特定数据单元来确定多个编解码单元。
根据实施例,特定数据单元可以被定义为通过使用划分形状模式信息开始递归划分编解码单元的数据单元。即,该特定数据单元可以对应于最高深度的编解码单元,其用于确定从当前图片划分的多个编解码单元。在以下描述中,为了便于解释,特定数据单元被称为参考数据单元。
根据实施例,参考数据单元可以具有特定尺寸和特定尺寸形状。根据实施例,参考数据单元可以包括M×N个样本。此处,M和N可以彼此相等,并且可以是表示为2的幂的整数。即,参考数据单元可以具有正方形或非正方形的形状,并且可以被划分成整数个编解码单元。
根据实施例,图像解码装置100可以将当前图片划分成多个参考数据单元。根据实施例,图像解码装置100可以通过使用每个参考数据单元的划分形状模式信息来划分从当前图片划分的多个参考数据单元。划分参考数据单元的操作可以对应于使用四叉树结构的划分操作。
根据实施例,图像解码装置100可以预先确定当前图片中包括的、参考数据单元允许的最小尺寸。因此,图像解码装置100可以确定尺寸等于或大于最小尺寸的各种参考数据单元,并且可以参照确定的参考数据单元通过使用划分形状模式信息来确定一个或多个编解码单元。
参照图15,图像解码装置100可以使用正方形参考编解码单元1500或非正方形参考编解码单元1502。根据实施例,参考编解码单元的形状和尺寸可以基于能够包括一个或多个参考编解码单元的各种数据单元(例如,序列、图片、条带、条带段、片、片组、最大编解码单元等)来确定。
根据实施例,图像解码装置100的接收器110可以从比特流获得关于各种数据单元中的每一个的参考编解码单元形状信息或参考编解码单元尺寸信息中的至少一个。将正方形参考编解码单元1500划分成一个或多个编解码单元的操作已经在上面关于划分图3的当前编解码单元300的操作进行了描述,并且将非正方形参考编解码单元1502划分成一个或多个编解码单元的操作已经在上面关于划分图4的当前编解码单元400或450的操作进行了描述。因此,不再提供其详细描述。
根据实施例,图像解码装置100可以使用用于标识参考编解码单元的尺寸和形状的PID,以根据基于特定条件预先确定的部分数据单元来确定参考编解码单元的尺寸和形状。即,接收器110可以从比特流中仅获得用于标识相对于每个条带、条带段、片、片组或最大编解码单元(其是各种数据单元(例如,序列、图片、条带、条带段、片、片组、最大编解码单元等)当中满足预定条件(例如,具有等于或小于条带的尺寸的数据单元)的数据单元)的参考编解码单元的尺寸和形状的PID。图像解码装置100可以通过使用PID来确定相对于满足特定条件的每个数据单元的参考数据单元的尺寸和形状。当根据具有相对小尺寸的每个数据单元从比特流获得并使用参考编解码单元形状信息和参考编解码单元尺寸信息时,使用比特流的效率可能不高,并因此,可以仅获得并使用PID,而不是直接获得参考编解码单元形状信息和参考编解码单元尺寸信息。在这种情况下,可以预先确定与用于标识参考编解码单元的尺寸和形状的PID对应的参考编解码单元的尺寸和形状中的至少一个。即,图像解码装置100可以通过基于PID选择先前确定的参考编解码单元的尺寸或形状中的至少一个,来确定用作获得PID的单元的数据单元中包括的参考编解码单元的尺寸或形状中的至少一个。
根据实施例,图像解码装置100可以使用包括在最大编解码单元中的一个或多个参考编解码单元。即,从图片划分的最大编解码单元可以包括一个或多个参考编解码单元,并且可以通过递归划分每个参考编解码单元来确定编解码单元。根据实施例,最大编解码单元的宽度或高度中的至少一个可以是参考编解码单元的宽度或高度中的至少一个的整数倍。根据实施例,可以通过基于四叉树结构将最大编解码单元划分n次来获得参考编解码单元的尺寸。即,根据各种实施例,图像解码装置100可以通过基于四叉树结构将最大编解码单元划分n次来确定参考编解码单元,并可以基于块形状信息或划分形状模式信息中的至少一个来划分参考编解码单元。
根据实施例,图像解码装置100可以从比特流获得指示当前编解码单元的形状的块形状信息或指示当前编解码单元的划分方法的划分形状模式信息,并可以使用获得的信息。划分形状模式信息可以被包括在与各种数据单元相关的比特流中。例如,图像解码装置100可以使用包括在序列参数集、图片参数集、视频参数集、条带标头、条带段标头、片标头或片组标头中的划分形状模式信息。此外,图像解码装置100可以根据每个最大编解码单元、每个参考编解码单元或每个处理块从比特流获得与块形状信息或划分形状模式信息对应的语法元素,并可以使用获得的语法元素。
在下文中,将详细描述根据本公开的实施例的确定划分规则的方法。
图像解码装置100可以确定图像的划分规则。划分规则可以在图像解码装置100和图像编码装置2200之间预先确定。图像解码装置100可以基于从比特流获得的信息来确定图像的划分规则。图像解码装置100可以基于从序列参数集、图片参数集、视频参数集、条带标头、条带段标头、片标头或片组标头中的至少一个获得的信息来确定划分规则。图像解码装置100可以根据帧、条带、片、时间层、最大编解码单元或编解码单元来不同地确定划分规则。
图像解码装置100可以基于编解码单元的块形状来确定划分规则。块形状可以包括编解码单元的尺寸、形状、高宽比和方向。图像解码装置100可以基于编解码单元的块形状信息预先确定以确定划分规则。然而,本公开不限于此。图像解码装置100可以基于从接收的比特流获得的信息来确定图像的划分规则。
编解码单元的形状可以包括正方形和非正方形。当编解码单元的宽度和高度的长度相同时,图像解码装置100可以将编解码单元的形状确定为正方形。此外,当编解码单元的宽度和高度的长度不相同时,图像解码装置100可以将编解码单元的形状确定为非正方形。
编解码单元的尺寸可以包含各种尺寸,如4×4、8×4、4×8、8×8、16×4、16×8、...、256x256。编解码单元的尺寸可以基于编解码单元的长边的长度、短边的长度或面积来分类。图像解码装置100可以将相同的划分规则应用于被分类为相同组的编解码单元。例如,图像解码装置100可以将具有相同长边长度的编解码单元分类为具有相同尺寸。此外,图像解码装置100可以将相同的划分规则应用于具有相同长边长度的编解码单元。
编解码单元的高宽比可以包括1:2、2:1、1:4、4:1、1:8、8:1、1:16、16:1、32:1、1:32等。此外,编解码单元的方向可以包括水平方向和垂直方向。水平方向可以指示编解码单元的宽度长度大于其高度长度的情况。垂直方向可以指示编解码单元的宽度长度短于其高度长度的情况。
图像解码装置100可以基于编解码单元的尺寸来自适应地确定划分规则。图像解码装置100可以基于编解码单元的尺寸不同地确定可允许的划分形状模式。例如,图像解码装置100可以基于编解码单元的尺寸来确定是否允许划分。图像解码装置100可以根据编解码单元的尺寸确定划分方向。图像解码装置100可以根据编解码单元的尺寸确定可允许的划分类型。
基于编解码单元的尺寸确定的划分规则可以是在图像解码装置100中预先确定的划分规则。此外,图像解码装置100可以基于从比特流获得的信息来确定划分规则。
图像解码装置100可以基于编解码单元的位置来自适应地确定划分规则。图像解码装置100可以基于编解码单元在图像中的位置来自适应地确定划分规则。
此外,图像解码装置100可以确定划分规则,使得经由不同划分路径生成的编解码单元不具有相同的块形状。然而,本公开不限于此,并且经由不同划分路径生成的编解码单元具有相同的块形状。经由不同划分路径生成的编解码单元可以具有不同的解码处理顺序。因为上面已经参考图12描述了解码处理顺序,所以不再提供其细节。
图16是图像编码和解码系统的框图。
图像编码和解码系统(1600)的编码设备1610发送图像的编码比特流,并且解码设备1650通过接收和解码比特流来输出重构的图像。这里,解码设备1650可以具有与图像解码装置100类似的配置。
在编码端1610,当当前块的预测模式是帧间预测模式时,帧间预测编码器1605生成当前块的运动信息,该运动信息指示在时间上与当前图片邻近的参考图片的参考块。帧间预测编码器1605可以通过使用参考块的样本来确定当前块的预测样本。帧内预测编码器1610可以确定帧内预测信息,该帧内预测信息指示确定预测样本的方法或与当前块相似的相邻样本所位于的方向,使得通过使用与当前块在空间上邻近的相邻样本来确定当前块的预测样本。帧间预测编码器1605可以从存储在解码图片缓冲器(DPB)1648中的先前重构的样本当中确定将用于预测当前块的参考样本。
变换器1620通过对通过从当前块的原始样本中减去由帧间预测编码器1605或帧内预测编码器1610生成的预测样本而获得的残差样本值执行变换来输出变换系数。量化器1625量化从变换器1620输出的变换系数,并输出量化的变换系数。熵编码器1630可以利用包括级值(level value)的残差语法元素对量化的变换系数进行编码,并以比特流的形式将其输出。
从量化器1625输出的量化的变换系数可以经由逆量化器1633和逆变换器1635被逆量化和逆变换,并因此可以再次生成残差样本值。
残差样本值和预测样本值在加法器1615处相加,并因此输出重构的样本值。后重构滤波器1640对重构的样本执行后重构滤波,并且经由后重构滤波更新的重构的样本值可以用作参考样本值,用于将由帧内预测编码器1610执行的帧内预测。后重构滤波器1640可以对重构的样本值执行哈达玛变换域滤波或双边滤波。
环路滤波器1645可以对经由重构后滤波更新的重构的样本执行去方块滤波或自适应环路滤波中的至少一种。经由环路滤波器1645的滤波更新的重构的样本值可以存储在DPB 1648中,并且可以用作将由帧间预测编码器1605执行的帧间预测的参考样本值。
解码设备1650的熵解码器1655可以对接收的比特流执行熵解码,以解析包括级值的残差语法元素。可以从残差语法元素重构量化的变换系数。逆量化器1660可以通过对量化的变换系数执行逆量化来输出变换系数,并且逆变换器1665可以通过对变换系数执行逆变换来输出残差样本值。
解码设备1650的帧间预测编码器1670可以通过使用熵解码器1655解析的当前块的运动信息来确定时间上与当前图片邻近的参考图片,并确定参考图片中的参考块。帧间预测编码器1670可以通过使用参考块的样本来确定当前块的预测样本。解码设备1650的帧内预测编码器1675可以通过使用帧内预测信息、通过使用熵解码器1655解析的当前块的运动信息来确定空间上与当前块邻近的参考样本,并通过使用确定的相邻样本来确定当前块的预测样本。帧间预测编码器1670可以从存储在DPB 1690中的先前重构的样本当中确定将用于预测当前块的参考样本。
残差样本值和预测样本值在解码设备1650的加法器1695处相加,并因此输出当前块的重构的样本值。解码设备1650的后重构滤波器1680可以对重构的样本值执行哈达玛变换域滤波或双边滤波。经由后重构滤波器1680的滤波更新的重构的样本值可以用作参考样本值,用于将由帧内预测编码器1675执行的帧内预测。
解码设备1650的环路滤波器1685可以对经由重构后滤波更新的重构的样本执行去方块滤波或自适应环路滤波中的至少一个。经由环路滤波器1685的滤波更新的重构的样本值可以存储在DPB 1690中,并且可以用作将由帧间预测编码器1670执行的帧间预测的参考样本值。
根据实施例的视频编码和解码方法以及视频编码和解码装置提出了一种基于由以上参照图1至图16描述的视频编码装置和视频解码装置确定的数据单元来执行量化或逆量化的方法。在下文中,将参照图17至图40描述根据本公开的实施例的通过确定量化参数(QP)用于执行量化或逆量化的视频编码方法和装置或视频解码方法和装置。
图17是根据实施例的视频解码装置的框图。
根据实施例的视频解码装置1700包括获得器1710和解码器1720。视频解码装置1700可以获得作为对图像编码的结果而生成的比特流,基于包括在比特流中的信息确定从图片划分的块的位置,并对块(如最大编解码单元和编解码单元)进行解码。
视频解码装置1700可以包括存储获得器1710和解码器1720的输入和输出数据的至少一个数据储存器(未示出)。视频解码装置1700可以包括用于控制数据储存器的数据输入和输出的存储器控制器(未示出)。
视频解码装置1700可以通过与内部视频解码处理器或外部视频解码处理器连接地操作来执行包括预测的图像解码操作,以便经由图像解码来重构图像。根据实施例的视频解码装置1700的内部视频解码处理器可以作为分离的处理器执行基本图像解码操作,或者包括图像解码处理模块的中央处理装置或图形处理装置可以执行基本图像解码操作。
视频解码装置1700可以包括在上述图像解码装置100中。例如,获得器1710和解码器1720可以对应于图像解码装置100的解码器120。视频解码装置1700可以对应于上面参照图16描述的图像编码和解码系统的解码设备1650。例如,解码器1720可以包括解码设备1650的逆量化器1633的功能。
视频解码装置1700接收作为编码图像的结果而生成的比特流。比特流可以包括关于当前图片的信息。图片可以包括一个或多个最大的编解码单元。视频解码装置1700可以基于从比特流获得的信息来确定图片中当前块的位置。当前块是当根据树结构划分图片时生成的块,并且例如可以对应于最大编解码单元或编解码单元。视频解码装置1700确定是否进一步将当前块划分成更低深度的子块,并可以确定当前块的树结构。可以通过将从当前块到子块的划分数量加到当前块的当前深度来确定较低深度。在形成包括在当前图片中的树结构的块当中,位于树叶处的块是不再被划分的块。因此,视频解码装置1700可以通过对块执行逆量化、逆变换和预测来解码不再被划分的一个或多个块。
视频解码装置1700可以通过对当前块执行预测来生成当前块的预测样本。视频解码装置1700可以通过对当前块执行逆变换来生成当前块的残差样本。重构器1730可以通过使用当前块的预测样本和当前块的残差样本来生成当前块的重构的样本。视频解码装置1700可以通过重构每个块的样本来重构当前图片。
例如,当当前块的预测模式是帧内模式时,视频解码装置1700可以通过使用当前块的帧内预测信息来确定位于帧内预测方向上的空间相邻块的样本当中的参考样本,并通过使用参考样本来确定对应于当前块的预测样本。
例如,当当前块的预测模式是帧间模式时,视频解码装置1700可以通过使用当前块的运动矢量来重构当前块。视频解码装置1700可以通过使用当前块的运动矢量来确定参考图片中的参考块,并从包括在参考块中的参考样本中确定与当前块对应的预测样本。视频解码装置1700可以通过使用从比特流获得的变换系数级来重构变换系数,并通过对变换系数执行逆量化和逆变换来重构残差样本。视频解码装置1700可以通过组合对应于当前块的预测样本和残差样本来确定当前块的重构的样本。
当以跳过模式预测当前块时,视频解码装置1700可以不需要从比特流解析当前块的变换系数。视频解码装置1700可以通过原样使用当前块的预测样本来确定当前块的重构的样本。
根据实施例的视频解码装置1700使用量化参数(QP)来执行逆量化。为每个编解码单元设置QP,并且可以将一个QP应用于编解码单元中包括的变换系数。图片可以包括一个或多个条带,并且一个条带可以包括一个或多个编解码单元。为了确定每个编解码单元的QP,视频解码装置1700可以从比特流获得确定每个编解码单元、每个条带或每个图片的QP所需的多条信息。
根据实施例的获得器1710可以从编解码单元相关的比特流语法获得确定每个编解码单元的QP所需的信息。获得器1710可以从条带标头语法获得确定每个条带的QP所需的信息。获得器1710可以从图片标头语法获得确定每个图片的QP所需的信息。
首先,视频解码装置1700可以在图片参数设置级中确定是获得每个图片的QP差值还是获得每个条带的QP差值。
根据实施例的获得器1710可以从图片参数集获得要应用于当前图片的QP初始值。此外,获得器1710可以从图片参数集合获得指示当前图片的图片标头中是否存在QP差值信息的图片标头QP差值信息。当图片标头QP差值信息指示图片标头中存在QP差值信息时,获得器1710可以从图片标头获得当前图片的第一QP差值。当图片标头QP差值信息指示图片标头中不存在QP差值信息时,获得器1710可以从当前图片中包括的当前条带的条带标头获得当前条带的第二QP差值。
当图片标头QP差值信息指示图片标头中存在QP差值信息时,根据实施例的解码器1720可以通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP。解码器1720可以通过使用通过使用第一QP差值确定的QP对包括在当前图片中的编解码单元执行逆量化。
当图片标头QP差值信息指示图片标头中不存在QP差值信息时,解码器1720可以通过使用QP初始值和第二QP差值来确定包括在当前条带中的编解码单元的QP。解码器1720可以通过使用通过使用第二QP差值确定的QP对包括在当前片中的编解码单元执行逆量化。
在下文中,将参考图18描述视频解码装置1700通过获得每个图片或每个条带的QP差值信息来对每个编解码单元执行逆量化的过程。
图18是根据实施例的视频解码方法的流程图。
在操作1810中,获得器1710可以从图片参数集获得要应用于当前图片的图片标头QP差值信息和QP初始值。根据实施例的图片标头QP差值信息可以指示当前图片的图片标头中是否存在QP差值信息。
在操作1820中,当图片标头QP差值信息指示当前图片的图片标头中存在QP差值信息时,获得器1810可以从图片标头获得当前图片的第一QP差值。
在操作1830中,解码器1820可以通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP。
在操作1840中,解码器1820可以通过使用通过使用第一QP差值确定的QP对编解码单元执行逆量化来获得编解码单元的变换系数。换句话说,通过使用通过使用第一QP差值确定的QP,可以对包括在当前图片中的编解码单元执行逆量化。
在操作1850中,解码器1820可以通过使用在操作1840获得的编解码单元的变换系数来重构编解码单元。解码器1820可以通过对变换系数执行逆变换来获得残差样本,并通过使用残差样本来确定编解码单元的重构的样本。
根据实施例,当图片标头QP差值信息指示图片标头中不存在QP差值信息时,获得器1710可以从当前图片中包括的当前条带的条带标头获得当前条带的第二QP差值。解码器1720可以通过使用QP初始值和第二QP差值来确定包括在当前片中的编解码单元的QP。解码器1720可以通过使用通过使用第二QP差值确定的QP对编解码单元执行逆量化来获得编解码单元的变换系数。解码器1720可以通过使用变换系数来重构编解码单元。换句话说,通过使用通过使用第二QP差值确定的QP,可以对包括在当前条带中的编解码单元执行逆量化。
在操作1820中,当图片标头QP差值信息指示当前图片的图片标头中存在QP差值信息时,获得器1810可以从图片标头获得当前图片的亮度分量的第一QP差值。解码器1820可以通过将QP初始值和亮度分量的第一QP差值相加来确定当前图片中包括的条带的亮度分量的QP。解码器1820可以通过使用条带的亮度分量的QP来确定包括在当前图片中的条带中包括的编解码单元的QP。
在操作1820中,获得器1710可以从比特流获得编解码单元的QP差值。解码器1820可以通过使用条带的亮度分量的QP和编解码单元的QP差值来确定编解码单元的亮度分量的QP。解码器1820可以通过使用编解码单元的QP,对编解码单元中包括的变换系数执行逆量化。编解码单元的残差样本可以通过对逆量化的变换系数执行逆变换来解码。
根据另一实施例的获得器1710可以不从比特流获得编解码单元的QP差值。在这种情况下,解码器1810可以通过使用为编解码单元预测的QP预测值来确定编解码单元的亮度分量的QP。
根据实施例,当图片标头QP差值信息指示当前图片的图片标头中不存在QP差值信息时,获得器1810可以从条带标头获得当前条带的亮度分量的第二QP差值。解码器1820可以通过将QP初始值和亮度分量的第二QP差值相加来确定当前条带的亮度分量的QP。解码器1820可以通过使用当前条带的亮度分量的QP来确定包括在当前条带中的编解码单元的QP。解码器1820可以通过使用编解码单元的QP,对编解码单元中包括的变换系数执行逆量化。编解码单元的残差样本可以通过对逆量化的变换系数执行逆变换来解码。当图片标头QP差值信息指示当前图片的图片标头中不存在QP差值信息时,获得器1810可以从比特流获得当前条带中包括的编解码单元的QP差值。解码器1820可以通过使用编解码单元的QP差值来确定包括在当前片中的当前编解码单元的亮度分量的QP。
当图片标头QP差值信息指示当前图片的图片标头中不存在QP差值信息时,获得器1810可以从条带标头获得当前条带的Cb色度分量的Cb QP差值和当前条带的Cr色度分量的Cr QP差值。解码器1820可以通过使用当前条带的Cb色度分量的Cb QP差值来更新当前编解码单元的Cb色度分量的QP,从而确定包括在当前条带中的当前编解码单元的Cb色度分量的Cb QP。解码器1820可以通过使用当前条带的Cb色度分量的Cr QP差值来更新当前编解码单元的Cr色度分量的QP,从而确定包括在当前条带中的当前编解码单元的Cr色度分量的CrQP。
图19是根据实施例的视频编码装置的框图。
参照图19,根据实施例的视频编码装置1900可以包括量化器1910和信息编码器1920。
根据实施例的视频编码装置1900可以包括用于控制量化器1910和信息编码器1920的中央处理器(未示出)。可选地,量化器1910和信息编码器1920可以分别通过它们自己的处理器(未示出)操作,并且处理器可以系统地操作,使得视频编码装置1900作为整体操作。可选地,量化器1910和信息编码器1920可以在视频编码装置1900的外部处理器(未示出)的控制下被控制。
视频编码装置1900可以包括存储量化器1910和信息编码器1920的输入和输出数据的至少一个数据储存器(未示出)。视频编码装置1900可以包括用于控制数据储存器的数据输入和输出的存储器控制器(未示出)。
视频编码装置1900可以通过与内部视频编码处理器或外部视频编码处理器连接地操作来执行包括预测的图像编码操作,以便对图像进行编码。根据实施例的视频编码装置1900的内部视频编码处理器作为分离的处理器执行基本图像编码操作,或者包括图像编码处理模块的中央处理装置或图形处理装置可以执行基本图像解码操作。
视频编码装置1900可以对应于以上参照图16描述的图像编码和解码系统的编码设备1600。例如,信息编码器1920可以对应于编码设备1600的熵编码器1630。量化器1910可以对应于编码设备1600的量化器1625。
根据实施例的视频编码装置1900可以将图片划分成多个最大编解码单元,并将每个最大编解码单元划分成用于编码的具有各种尺寸和各种形状的块。
例如,当当前块的预测模式是帧内模式时,视频编码装置1900可以通过使用当前块的帧内预测信息来确定位于帧内预测方向的空间相邻块的样本当中的参考样本,并通过使用参考样本来确定当前块的预测样本。可以确定作为预测样本和当前块的样本之间的差的残差样本,可以通过基于变换块转换残差样本来生成变换系数,并且可以通过对变换系数执行量化来生成量化的变换系数。
例如,当以跳过模式预测当前块时,视频编码装置1900可以确定用于预测当前块的运动矢量。视频编码装置1900可以从参考图片确定当前块的参考块,并从当前块确定指示参考块的运动矢量。在跳过模式中,残差块可能不需要被编码。
例如,当当前块的预测模式是帧间模式时,视频编码装置1900可以确定运动矢量来预测当前块。视频编码装置1900可以从参考图片确定当前块的参考块,并从当前块确定指示参考块的运动矢量。视频编码装置1900可以通过使用包括在参考块中的参考样本来确定当前块的预测样本,确定作为预测样本和当前块的样本之间的差的残差样本,并通过基于变换块对残差样本执行变换和量化来生成量化的变换系数。
当前块是当根据树结构划分图像时生成的块,并且例如,可以对应于最大编解码单元、编解码单元或变换单位。视频编码装置1900可以根据编码顺序对图片中包括的块进行编码。
根据实施例的视频编码装置1900使用QP来执行量化。为每个编解码单元设置QP,并且可以将一个QP应用于编解码单元中包括的变换系数。图片可以包括一个或多个条带,并且一个条带可以包括一个或多个编解码单元。视频编码装置1900可以确定每个编解码单元的QP,并对确定每个编解码单元、每个条带或每个图片的QP所需的多条信息进行编码以用于信令。
根据实施例的信息编码器1920可以对确定每个编解码单元的QP所需的信息进行编码,并以编解码单元相关的比特流语法的形式将其输出。信息编码器1920可以对确定每个条带的QP所需的信息进行编码,并以条带标头语法的形式将其输出。信息编码器1920可以对确定每个图片的QP所需的信息进行编码,并以图片标头语法的形式将其输出。
首先,视频编码装置1900可以在图片参数集级中确定是发送每个图片的QP差值还是发送每个条带的QP差值。
根据实施例的量化器1910可以确定要应用于当前图片的QP初始值。
当针对每个图片确定QP差值时,信息编码器1920可以确定QP初始值和当前图片中使用的QP之间的第一QP差值。信息编码器1920可以生成包括第一QP差值的当前图片的图片标头。
当针对每个条带确定QP差值时,信息编码器1920可以确定QP初始值和包括在当前图片中的当前条带中使用的QP之间的第二QP差值。信息编码器1920可以生成当前条带的条带标头,该条带标头包括第二QP差值。
根据实施例的信息编码器1920可以生成包括QP初始值和指示QP差值信息是否存在于当前图片的图片标头中的图片标头QP差值信息的图片参数集。
在下文中,将参考图20描述视频编码装置1900信令通知每个图片或每个条带的QP差值信息的过程。
图20是根据实施例的视频编码方法的流程图。
在操作2010中,量化器1910可以确定要应用于当前图片的QP初始值。
在操作2020中,当针对每个图片确定QP差值时,信息编码器1920可以确定QP初始值和当前图片中使用的QP之间的第一QP差值,并生成当前图片的图片标头,该图片标头包括第一QP差值。
在操作2030中,信息编码器1920可以生成包括QP初始值和指示QP差值信息是否存在于当前图片的图片标头中的图片标头QP差值信息的图片参数集。
根据实施例,当针对每个条带确定QP差值时,信息编码器1920可以确定QP初始值和包括在当前图片中的当前条带中使用的QP之间的第二QP差值,并生成当前条带的条带标头,该条带标头包括第二QP差值。
在操作2020中,当针对每个图片确定QP差值时,量化器1910可以确定当前图片中包括的条带的亮度分量的QP。信息编码器1920可以通过使用QP初始值和当前图片中包括的条带的亮度分量的QP之间的差值来确定当前图片的亮度分量的第一QP差值。信息编码器1920可以通过使用条带的亮度分量的QP和编解码单元的亮度分量的QP之间的差值来确定编解码单元的QP差值。信息编码器1920可以对编解码单元的QP差值进行编码。
在操作2030中,当针对每个条带确定QP差值时,量化器1910可以确定当前条带的亮度分量的QP。信息编码器1920可以通过使用QP初始值和当前条带的亮度分量的QP之间的差值来确定当前条带的亮度分量的第二QP差值。信息编码器1920可以通过从编解码单元的亮度分量的QP中减去当前条带的亮度分量的QP来确定编解码单元的QP差值。信息编码器1920可以对编解码单元的QP差值进行编码。
根据另一实施例的量化器1910可以通过使用为编解码单元预测的QP预测值来确定编解码单元的亮度分量的QP,并通过使用QP对编解码单元执行量化。在这种情况下,信息编码器1920可以不对编解码单元的QP差值进行编码。
在操作2030中,当对每个条带编码QP差值时,信息编码器1920可以确定当前条带的Cb色度分量的Cb QP差值,该Cb QP差值用于确定包括在当前条带中的编解码单元的Cb色度分量的QP。此外,信息编码器1920可以确定当前条带的Cr色度分量的Cr QP差值,该Cr QP差值用于确定包括在当前条带中的编解码单元的Cr色度分量的QP。信息编码器1920可以对当前条带的Cb QP差值和Cr色度分量的Cr QP差值进行编码,并生成包括Cb QP差值和Cr QP差值的当前条带的条带标头。
量化器1910可以通过使用QP对编解码单元的变换系数执行量化来生成编解码单元的量化的变换系数。信息编码器1920可以通过对关于量化的变换系数的多条信息执行熵编码来生成比特流。
根据实施例的视频解码装置1700和根据实施例的视频编码装置1900可以选择性地信令通知每个图片或每个条带的QP差值。因此,根据实施例的视频编码装置1900可以根据数据传输效率或数据图片的特性来确定是信令通知每个图片的QP差值还是信令通知每个条带的QP差值,并根据具有高传输效率的方法信令通知QP差值。根据实施例的视频解码装置1700可以基于从图片参数集获得的信息,确定是获得每个图片的QP差值还是获得每个条带的QP差值,并确定每个图片的QP或每个条带的QP。因此,当针对每个图片信令通知QP差值时,不需要为图片中包括的每个条带信令通知QP差值,并因此可以减少用于信令通知QP的数据量。
图21是根据实施例的用于在图片级或条带级中引入QP的概图。
在一般的视频编解码器中,通常在图片参数集(PPS)中配置QP初始值,并且通过条带标头发送条带的QP初始值的差值,并因此针对每个条带配置QP。
另一方面,根据实施例的视频解码装置1700可以获得每个图片的图片标头和来自图片标头的关于QP的信令信息。在本公开中,在视频解码装置1700和视频编码装置1900之间选择是信令通知每个图片的QP差值还是信令通知每个条带的QP差值,并因此可以简化QP的信令结构。
首先,在操作2100中,视频解码装置1700可以从其为图片标头的更高级的序列参数集(SPS)或PPS获得QP初始值。此外,在操作2110中,视频解码装置1700可以从PPS或SPS获得图片标头QP差值(dQP)信息。视频解码装置1700可以根据图片标头dQP信息确定是在图片级确定QP还是在条带级确定QP。
详细地,当图片标头dQP信息不为0时(例如,当图片标头dQP信息为1时),即,当图片标头中存在QP差值(增量(delta)值)时,在操作2120中,视频解码装置1700可以从图片标头获得QP差值。视频解码装置1700可以通过使用从图片标头获得的QP差值和从PPS或SPS获得的QP初始值来确定每个图片的QP。
当图片标头dQP信息为0时,即,当图片标头中不存在QP差值时,在操作2130中,视频解码装置1700可以从条带标头获得QP差值。视频解码装置1700可以通过使用从条带标头获得的QP差值和从PPS或SPS获得的QP初始值来确定每个条带的QP。
对于视频解码装置1700的操作2100至2130,视频编码装置1900可以确定是在图片级还是在条带级确定QP。此外,视频编码装置1900可以对指示是在图片级确定QP还是在条带级确定QP的图片标头dQP信息进行编码。
详细地,当针对每个图片确定QP时,视频编码装置1900可以对每个图片的QP差值进行编码。因此,视频编码装置1900可以生成包括当前图片的QP差值的当前图片的图片标头。在这种情况下,图片标头dQP信息可以被编码以指示1,从而指示QP差值存在于当前图片的图片标头中。
当针对每个条带确定QP时,视频编码装置1900可以对每个条带的QP差值进行编码。因此,视频编码装置1900可以生成包括当前条带的QP差值的当前条带的条带标头。在这种情况下,图片标头dQP信息可以被编码以指示0,从而指示QP差值不存在于图片标头中。
根据实施例的视频编码装置1900可以生成包括QP初始值和图片标头dQP信息的PPS或SPS。
如上所述,当在图片级中为包括在当前图片中的编解码单元配置相同的QP时,仅从图片标头信令通知QP,并因此可以减少用于信令通知QP的比特数。换句话说,可以仅从当前图片的图片标头信令通知QP差值一次,而不必通过当前图片中包括的每个条带的条带标头信令通知QP。当包括在当前图片中的条带的特性彼此不同时,可以针对每个条带分离配置QP,以更详细地配置QP,并且可以针对每个条带标头将QP差值信令通知给每个条带。
在下文中,将参考图22至图24描述信令图片标头dQP信息的语法结构。
图22示出了根据实施例的包括图片标头dQP信息的图片参数集。
视频编码装置1900可以包括图片参数集语法2200的语法元素pps_init_qp_minus26 2210和pps_qp_delta_info_in_ph_flag 2220。语法元素pps_qp_delta_info_in_ph_flag 2220可以指示当前图片的QP差值是否存在于当前图片的图片标头中。
视频解码装置1700可以从图片参数集语法2200解析语法元素pps_init_qp_minus26 2210和pps_qp_delta_info_in_ph_flag 2220。视频解码装置1700可以从语法元素pps_init_qp_minus26 2210获得可应用于当前图片或当前图片中包括的条带的QP初始值。视频解码装置1700可以从语法元素pps_qp_delta_info_in_ph_flag 2220中识别当前图片的QP差值是否存在于当前图片的图片标头中。
语法元素pps_init_qp_minus26 2210可以指示可应用于当前图片或当前图片中包括的条带的QP SliceQpY的初始值。当图片的QP差值ph_qp_delta被解码为图片标头中不为0的值时,可以通过使用图片级中的QP差值来调整SliceQpY的初始值。当条带的QP差值sh_qp_delta被解码为条带标头中不为0的值时,可以通过使用条带级中的QP差值来调整SliceQpY的初始值。pps_init_qp_minus26 2210的值可以在从-(26+QpBdOffset)到+37的范围内。QpBdOffset可以根据比特深度来确定。取决于解码的是ph_qp_delta还是sh_qp_delta,可以根据以下等式来确定SliceQpY。
SliceQpY=26+pps_init_qp_minus26+ph_qp_delta
SliceQpY=26+pps_init_qp_minus26+sh_qp_delta
因此,可以在从-QpBdOffset到+63的范围内确定条带的亮度分量的QP SliceQpY。
图23示出了根据实施例的包括当前图片的QP差值的图片标头。
视频编码装置1900可以包括图片标头语法2300的语法元素ph_qp_delta 2320。语法元素ph_qp_delta 2320可以指示适用于当前图片的QP差值。详细地,当包括在PPS 2200中的pps_qp_delta_info_in_ph_flag 2220指示1(2310)时,语法元素ph_qp_delta 2320可以包括在图片标头语法2300中。
视频解码装置1700可以从图片标头语法2300获得语法元素ph_qp_delta2320。详细地,当从PPS 2200获得的pps_qp_delta_info_in_ph_flag 2220指示1(2310)时,可以从图片标头语法2300获得语法元素ph_qp_delta 2320。在这种情况下,可以通过添加对应于图片标头语法2300的当前图片的语法元素pps_init_qp_minus26 2210和ph_qp_delta2320来确定图片的QP。图片的QP可以应用于当前图片中包括的所有编解码单元。当从对应于每个编解码单元的语法结构获得编解码单元的QP差值时,可以通过将编解码单元的QP差值和图片的QP相加来确定编解码单元的QP。视频解码装置1700可以通过使用每个编解码单元的QP,对编解码单元的变换样本执行逆量化。
图24示出了根据实施例的包括当前条带的QP差值的条带标头。
视频编码装置1900可以包括对于条带标头语法2400的语法元素sh_qp_delta2420。语法元素sh_qp_delta 2420可以指示可应用于当前条带的亮度分量的QP差值。详细地,当包括在PPS 2200中的pps_qp_delta_info_in_ph_flag 2220指示0(2410)时,语法元素sh_qp_delta 2420可以包括在条带标头语法2400中。此外,视频编码装置1900可以将语法元素sh_cb_qp_offset和sh_cr_qp_offset 2430包括到条带标头语法2400中。语法元素sh_cb_qp_offset和sh_cr_qp_offset 2430分别指示色度Cb分量的QP差值和色度Cr分量的QP差值。
视频解码装置1700可以从条带标头语法2400获得语法元素sh_qp_delta 2420。详细地,当从PPS 2200获得的pps_qp_delta_info_in_ph_flag 2220指示0(2410)时,可以从条带标头语法2400获得语法元素sh_qp_delta 2420。在这种情况下,条带的亮度分量的QP可以通过将对应于条带标头语法2400的当前条带的语法元素pps_init_qp_minus26 2210和sh_qp_delta 2420相加来确定。条带的亮度分量的QP可以应用于当前条带中包含的所有编解码单元。当从对应于每个编解码单元的语法结构获得编解码单元的亮度分量的QP差值时,可以通过将编解码单元的亮度分量的QP差值和条带的亮度分量的QP相加来确定编解码单元的亮度分量的QP。
此外,视频解码装置1700可以从条带标头语法2400解析语法元素sh_cb_qp_offset和sh_cr_qp_offset 2430。色度Cb分量的QP差值和色度Cr分量的QP差值可以分别从语法元素sh_cb_qp_offset和sh_cr_qp_offset 2430获得。因此,视频解码装置1700可以通过使用色度Cb分量的QP差值来确定包括在当前条带中的编解码单元的色度Cb分量的QP,并通过使用色度Cr分量的QP差值来确定包括在当前条带中的编解码单元的色度Cr分量的QP。视频解码装置1700可以通过使用每个编解码单元的QP,对编解码单元的变换样本执行逆量化。
sh_cb_qp_offset和sh_cr_qp_offset 2430可以每个具有范围在-12和12之间的值。
可以通过pps_cb_qp_offset+sh_cb_qp_offset来确定条带中Cb分量的QP的偏移,并且可以在从-12到+12的范围内确定pps_cb_qp_offset+sh_cb_qp_offset的值。类似地,条带中Cr分量的QP偏移可以由pps_cr_qp_offset+sh_cr_qp_offset来确定,并且pps_cr_qp_offset+sh_cr_qp_offset的值可以在从-12到+12的范围内确定。
此外,当在编解码单元级中信令通知QP差值(增量QP)时,在片的开始、条带的开始、图片标头或条带标头中确定的QP可以用作QP初始值。例如,当在图片标头中确定QP并且图片中存在条带或片时,在条带或片开始时在图片标头中确定的QP可以用作QP初始值。因此,编解码单元的QP可以通过将在编解码单元级中信令通知的编解码单元的QP差值和在片或条带的开始时确定的QP初始值相加来确定。
作为另一个示例,当信令通知图片顺序计数器(POC)时,POC信息可以仅包括在图片标头中,而不包括在条带标头中。在这种情况下,可能难以识别特定条带属于哪个图片。然而,条带所属的图片的索引是通过使用要在系统级信令通知的时间戳或序列号来标识的。此外,可以通过从编解码器的外部系统接收通知来确定关于特定条带或图片标头的信息的丢失。
根据实施例的视频编码方法和视频解码方法,可以根据数据传输效率或图片的特性来确定发送QP的差值的方法,并且可以根据该方法来信令通知QP的差值。
在下文中,将参照图25至图32描述用于在图片级或条带级选择性地信令通知各种工具中可用的参数的语法结构。可以通过从图片序列集信令通知的标志来确定工具相关参数是从图片标头还是从条带标头信令通知。
图25示出了根据实施例的包括指示图片标头是否包括去方块滤波器相关参数的信息的图片参数集。
视频编码装置1900可以将pps_dbf_info_in_ph_flag 2510包括到图片参数集语法2500。语法元素pps_dbf_info_in_ph_flag 2510可以指示当前图片的去方块滤波器相关参数差值是否存在于当前图片的图片标头中。
视频解码装置1700可以从图片参数集语法2500解析pps_dbf_info_in_ph_flag2510。视频解码装置1700可以从语法元素pps_dbf_info_in_ph_flag 2510中识别当前图片的去方块滤波器相关参数是否存在于当前图片标头中。
图26示出了根据实施例的包括当前图片的去方块滤波器相关参数的图片标头。
视频编码装置1900可以包括对于图片标头语法2600的语法元素ph_luma_beta_offset_div2、ph_luma_tc_offset_div2、ph_cb_beta_offset_div2、ph_cb_tc_offset_div2、ph_cr_beta_offset_div2和ph_cr_tc_offset_div2 2620。详细地,当包括在PPS2500中的pps_dbf_info_in_ph_flag 2510指示1(2610)时,语法元素ph_luma_beta_offset_div2、ph_luma_tc_offset_div2、ph_cb_beta_offset_div2、ph_cb_tc_offset_div2、ph_cr_beta_offset_div2和ph_cr_tc_offset_div2 2620可以包括在图片标头语法2600中。
视频解码装置1700可以从图片标头语法2600获得语法元素ph_luma_beta_offset_div2、ph_luma_tc_offset_div2、ph_cb_beta_offset_div2、ph_cb_tc_offset_div2、ph_cr_beta_offset_div2和ph_cr_tc_offset_div2 2620。详细地,当包括在PPS2500中的pps_dbf_info_in_ph_flag 2510指示1(2610)时,可以从图片标头语法2600获得语法元素ph_luma_beta_offset_div2、ph_luma_tc_offset_div2、ph_cb_beta_offset_div2、ph_cb_tc_offset_div2、ph_cr_beta_offset_div2和ph_cr_tc_offset_div2 2620。
语法元素ph_luma_beta_offset_div2可以指示应用于当前图片中的条带的亮度分量的去方块参数β的偏移。语法元素ph_luma_tC_offset_div2可以指示应用于当前图片中的条带的亮度分量的去方块参数tC的偏移。语法元素ph_cb_beta_offset_div2可以指示应用于当前图片中的条带的Cb分量的去方块参数β的偏移。语法元素ph_cb_tC_offset_div2可以指示应用于当前图片中的条带的Cb分量的去方块参数tC的偏移。语法元素ph_cr_beta_offset_div2可以指示应用于当前图片中的条带的Cr分量的去方块参数β的偏移。语法元素ph_cr_tC_offset_div2可以指示应用于当前图片中的条带的Cr分量的去方块参数tC的偏移。视频解码装置1700可以通过使用从图片标头获得的去方块滤波相关参数对包括在当前图片中的编解码单元的边界执行去方块滤波。
图27示出了根据实施例的包括当前条带的去方块滤波器相关参数的条带标头。
视频编码装置1900可以包括对于条带标头语法2700的语法元素sh_luma_beta_offset_div2、sh_luma_tc_offset_div2、sh_cb_beta_offset_div2、sh_cb_tc_offset_div2、sh_cr_beta_offset_div2和sh_cr_tc_offset_div2 2720。详细地,当包括在PPS2500中的pps_dbf_info_in_ph_flag 2510指示0(2710)时,语法元素sh_luma_beta_offset_div2、sh_luma_tc_offset_div2、sh_cb_beta_offset_div2、sh_cb_tc_offset_div2、sh_cr_beta_offset_div2和sh_cr_tc_offset_div2 2720可以包括在条带标头语法2700中。
视频解码装置1700可以从条带标头语法2700获得语法元素sh_luma_beta_offset_div2、sh_luma_tc_offset_div2、sh_cb_beta_offset_div2、sh_cb_tc_offset_div2、sh_cr_beta_offset_div2和sh_cr_tc_offset_div2 2720。详细地,当包括在PPS2500中的pps_dbf_info_in_ph_flag 2510指示0(2710)时,语法元素sh_luma_beta_offset_div2、sh_luma_tc_offset_div2、sh_cb_beta_offset_div2、sh_cb_tc_offset_div2、sh_cr_beta_offset_div2和sh_cr_tc_offset_div2 2720可以从条带标头语法2700获得。
语法元素sh_luma_beta_offset_div2可以指示应用于当前条带的亮度分量的去方块参数β的偏移。语法元素sh_luma_tC_offset_div2可以指示应用于当前条带的亮度分量的去方块参数tC的偏移。语法元素sh_cb_beta_offset_div2可以指示应用于当前条带的Cb分量的去方块参数β的偏移。语法元素sh_cb_tC_offset_div2可以指示应用于当前条带的Cb分量的去方块参数tC的偏移。语法元素sh_cr_beta_offset_div2可以指示应用于当前条带的Cr分量的去方块参数β的偏移。语法元素sh_cr_tC_offset_div2可以指示应用于当前条带的Cr分量的去方块参数tC的偏移。视频解码装置1700可以通过使用从条带标头获得的去方块滤波相关参数对包括在当前条带中的编解码单元的边界执行去方块滤波。
图28示出了根据实施例的包括指示图片标头是否包括各种工具相关参数的信息的图片参数集。
视频编码装置1900可以包括对于图片参数集语法2800的pps_rpl_info_in_ph_flag 2810、pps_sao_info_in_ph_flag 2820、pps_alf_info_in_ph_flag 2830和pps_wp_info_in_ph_flag 2840。语法元素pps_rpl_info_in_ph_flag 2810可以指示当前图片的参考图片列表相关参数是否存在于当前图片的图片标头中。语法元素pps_sao_info_in_ph_flag 2820可以指示当前图片的样本自适应偏移(SAO)相关参数是否存在于当前图片的图片标头中。语法元素pps_alf_info_in_ph_flag 2830可以指示当前图片的自适应环路滤波(ALF)相关参数是否存在于当前图片的图片标头中。语法元素pps_wp_info_in_ph_flag2840可以指示当前图片的加权预测相关参数是否存在于当前图片的图片标头中。
视频解码装置1700可以从图片参数集语法2800解析pps_rpl_info_in_ph_flag2810、pps_sao_info_in_ph_flag 2820、pps_alf_info_in_ph_flag 2830和pps_wp_info_in_ph_flag 2840。视频解码装置1700可以从语法元素pps_rpl_info_in_ph_flag 2810中识别当前图片的参考图片列表相关参数是否存在于当前图片的图片标头中。视频解码装置1700可以从语法元素pps_sao_info_in_ph_flag 2820中识别当前图片的SAO相关参数是否存在于当前图片的图片标头中。视频解码装置1700可以从语法元素pps_alf_info_in_ph_flag 2830中识别当前图片的ALF相关参数是否存在于当前图片的图片标头中。视频解码装置1700可以从语法元素pps_wp_info_in_ph_flag 2840中识别当前图片的加权预测相关参数是否存在于当前图片的图片标头中。
图29示出了根据实施例的包括当前图片的加权预测相关参数、SAO相关参数和参考图片列表相关参数的图片标头。
视频编码装置1900可以包括加权预测语法pred_weight_table()2920至图片标头语法2900。详细地,当包括在PPS 2800中的pps_wp_info_in_ph_flag 2840指示1(2910)时,加权预测语法pred_weight_table()2920可以包括在图片标头语法2900中。
视频解码装置1700可以从图片标头语法2900调用加权预测语法pred_weight_table()2920。详细地,当包括在PPS 2800中的pps_wp_info_in_ph_flag 2840指示1(2910)时,可以从图片标头语法2900调用加权预测语法pred_weight_table()2920。
视频解码装置1700可以从加权预测语法pred_weight_table()2920获得用于确定执行加权预测所需的亮度分量的权重和色度分量的权重的参数。视频解码装置1700可以通过使用亮度分量的权重和色度分量的权重对包括在当前图片中的块执行加权预测。
视频编码装置1900可以包括图片标头语法2900的语法元素ph_sao_luma_enabled_flag和ph_sao_chroma_enabled_flag 2940。详细地,当包括在PPS 2800中的pps_sao_info_in_ph_flag 2820指示1(2930)时,语法元素ph_sao_luma_enabled_flag和ph_sao_chroma_enabled_flag 2940可以包括在图片标头语法2900中。
视频解码装置1700可以从图片标头语法2900获得语法元素ph_sao_luma_enabled_flag和ph_sao_chroma_enabled_flag 2940。详细地,当包括在PPS 2800中的pps_sao_info_in_ph_flag 2820指示1(2930)时,可以从图片标头语法2900获得语法元素ph_sao_luma_enabled_flag和ph_sao_chroma_enabled_flag 2940。
视频解码装置1700可以从语法元素ph_sao_luma_enabled_flag中识别是否对当前图片的亮度分量执行SAO。视频解码装置1700可以从语法元素ph_sao_chroma_enabled_flag中识别是否对当前图片的色度分量执行SAO。视频解码装置1700可以基于语法元素ph_sao_luma_enabled_flag和ph_sao_chroma_enabled_flag 2940对包括在当前图片中的最大编解码单元的亮度分量和色度分量中的每一个执行SAO。
视频编码装置1900可以包括参考图片列表语法ref_pic_lists()2960至图片标头语法2900。详细地,当包括在PPS 2800中的pps_rpl_info_in_ph_flag 2810指示1(2950)时,参考图片列表语法ref_pic_lists()2960可以包括在图片标头语法2900中。
视频解码装置1700可以从图片标头语法2900调用参考图片列表语法ref_pic_lists()2960。详细地,当包括在PPS 2800中的pps_rpl_info_in_ph_flag 2810指示1(2950)时,可以从图片标头语法2900调用参考图片列表语法ref_pic_lists()2960。
视频解码装置1700可以从参考图片列表语法ref_pic_lists()2960获得用于从当前图片的块确定参考图片列表的参数。视频解码装置1700可以通过使用从参考图片列表语法ref_pic_lists()2960获得的参数来确定当前图片中包括的块的参考图片列表,并使用每个块的参考图片列表来执行帧间预测。
图30示出根据实施例的包括当前图片的ALF相关参数的图片标头。
视频编码装置1900可以包括对于图片标头语法3000的语法元素ph_num_alf_aps_ids_luma、ph_alf_aps_id_luma[i]、ph_alf_cb_enabled_flag、ph_alf_cr_enabled_flag、ph_alf_aps_id_chroma、ph_alf_cc_cb_enabled_flag、ph_alf_cc_cb_aps_id、ph_alf_cc_cr_enabled_flag和ph_alf_cc_cr_aps_id 3020。详细地,当包括在PPS 2800中的pps_alf_info_in_ph_flag 2830指示1(3010)时,语法元素ph_num_alf_aps_ids_luma、ph_alf_aps_id_luma[i]、ph_alf_cb_enabled_flag、ph_alf_cr_enabled_flag、ph_alf_aps_id_chroma、ph_alf_cc_cb_enabled_flag、ph_alf_cc_cb_aps_id、ph_alf_cc_cr_enabled_flag和ph_alf_cc_cr_aps_id 3020可以包括在图片标头语法3000中。
视频编码装置1900可以从图片标头语法3000获得语法元素ph_num_alf_aps_ids_luma、ph_alf_aps_id_luma[i]、ph_alf_cb_enabled_flag、ph_alf_cr_enabled_flag、ph_alf_aps_id_chroma、ph_alf_cc_cb_enabled_flag、ph_alf_cc_cb_aps_id、ph_alf_cc_cr_enabled_flag和ph_alf_cc_cr_aps_id 3020。详细地,当包括在PPS 2800中的pps_alf_info_in_ph_flag 2830指示1(3010)时,可以从图片标头语法3000获得语法元素ph_num_alf_aps_ids_luma、ph_alf_aps_id_luma[i]、ph_alf_cb_enabled_flag、ph_alf_cr_enabled_flag、ph_alf_aps_id_chroma、ph_alf_cc_cb_enabled_flag、ph_alf_cc_cb_aps_id、ph_alf_cc_cr_enabled_flag和ph_alf_cc_cr_aps_id 3020。
语法元素ph_num_alf_aps_ids_luma指示当前图片中包括的条带参考的ALF APS的数量。语法元素ph_alf_aps_id_luma[i]指示由当前图片中包括的条带的亮度分量参考的第i个ALF APS的aps_adaptation_parameter_set_id。语法元素ph_alf_cb_enabled_flag指示ALF是否被允许用于当前图片的Cb分量。语法元素ph_alf_cr_enabled_flag指示ALF是否被允许用于当前图片的Cr分量。语法元素ph_alf_aps_id_chroma指示由包括在当前图片中的条带的色度分量参考的ALF APS的aps_adaptation_parameter_set_id。语法元素ph_alf_cc_cb_enabled_flag指示对于当前图片的Cb分量是否允许跨分量ALF。语法元素ph_alf_cc_cb_aps_id指示由当前图片中包括的条带的Cb分量参考的ALF APS的aps_adaptation_parameter_set_id。语法元素ph_alf_cc_cr_enabled_flag指示对于当前图片的Cr分量是否允许跨分量ALF。语法元素ph_alf_cc_cr_aps_id指示由当前图片中包括的条带的Cr分量参考的ALF APS的aps_adaptation_parameter_set_id。
视频解码装置1700可以通过使用获得的语法元素ph_num_alf_aps_ids_luma、ph_alf_aps_id_luma[i]、ph_alf_cb_enabled_flag、ph_alf_cr_enabled_flag、ph_alf_aps_id_chroma、ph_alf_cc_cb_enabled_flag、ph_alf_cc_cb_aps_id、ph_alf_cc_cr_enabled_flag和ph_alf_cc_cr_aps_id 3020来对当前图片的每个最大编解码单元的亮度分量和色度分量执行ALF
图31示出了根据实施例的包括当前条带的参考图片列表相关参数、加权预测相关参数和SAO相关参数的条带标头。
视频编码装置1900可以包括对于条带标头语法3100的参考图片列表语法ref_pic_lists()3120。详细地,当包括在PPS 2800中的pps_rpl_info_in_ph_flag2810指示0(3110)时,参考图片列表语法ref_pic_lists()3120可以包括在条带标头语法3100中。
视频解码装置1700可以从条带标头语法3100调用参考图片列表语法ref_pic_lists()3120。详细地,当包括在PPS 2800中的pps_rpl_info_in_ph_flag 2810指示0(3110)时,可以从条带标头语法3100调用参考图片列表语法ref_pic_lists()3120。
视频解码装置1700可以从参考图片列表语法ref_pic_lists()3120获得用于从当前条带的块确定参考图片列表的参数。视频解码装置1700可以通过使用从参考图片列表语法ref_pic_lists()3120获得的参数来确定当前条带中包括的块的参考图片列表,并使用每个块的参考图片列表来执行帧间预测。
视频编码装置1900可以包括加权预测语法pred_weight_table()3140至条带标头语法3100。详细地,当包括在PPS 2800中的pps_wp_info_in_ph_flag 2840指示0(3130)时,加权预测语法pred_weight_table()3140可以包括在条带标头语法3100中。
视频解码装置1700可以从条带标头语法3100调用加权预测语法pred_weight_table()3140。详细地,当包括在PPS 2800中的pps_wp_info_in_ph_flag 2840指示0(3130)时,可以从条带标头语法3100调用加权预测语法pred_weight_table()3140。
视频解码装置1700可以从加权预测语法pred_weight_table()3140获得用于确定执行加权预测所需的亮度分量的权重和色度分量的权重的参数。视频解码装置1700可以通过使用亮度分量的权重和色度分量的权重对包括在当前条带中的块执行加权预测。
视频编码装置1900可以包括语法元素sh_sao_luma_used_flag和sh_sao_chroma_used_flag 3160至条带标头语法3100。详细地,当包括在PPS 2800中的pps_sao_info_in_ph_flag 2820指示0(3150)时,语法元素sh_sao_luma_used_flag和sh_sao_chroma_used_flag 3160可以包括在条带标头语法3100中。
视频解码装置1700可以从条带标头语法3100获得语法元素sh_sao_luma_used_flag和sh_sao_chroma_used_flag 3160。详细地,当包括在PPS 2800中的pps_sao_info_in_ph_flag 2820指示0(3150)时,可以从条带标头语法3100获得语法元素sh_sao_luma_used_flag和sh_sao_chroma_used_flag 3160。
视频解码装置1700可以从语法元素sh_sao_luma_used_flag识别SAO是否用于当前条带的亮度分量。视频解码装置1700可以从语法元素sh_sao_chroma_used_flag识别SAO是否用于当前条带的色度分量。视频解码装置1700可以基于语法元素sh_sao_luma_used_flag和sh_sao_chroma_used_flag 3160对包括在当前条带中的最大编解码单元的亮度分量和色度分量中的每一个执行SAO。
图32示出了根据实施例的包括当前条带的ALF相关参数的条带标头。
视频编码装置1900可以包括对于条带标头语法3200的语法元素sh_num_alf_aps_ids_luma、sh_alf_aps_id_luma[i]、sh_alf_cb_enabled_flag、sh_alf_cr_enabled_flag、sh_alf_aps_id_chroma、sh_alf_cc_cb_enabled_flag、sh_alf_cc_cb_aps_id、sh_alf_cc_cr_enabled_flag和sh_alf_cc_cr_aps_id 3220。详细地,当包括在PPS 2800中的pps_alf_info_in_ph_flag 2830指示0(3210)时,语法元素sh_num_alf_aps_ids_luma、sh_alf_aps_id_luma[i]、sh_alf_cb_enabled_flag、sh_alf_cr_enabled_flag、sh_alf_aps_id_chroma、sh_alf_cc_cb_enabled_flag、sh_alf_cc_cb_aps_id、sh_alf_cc_cr_enabled_flag和sh_alf_cc_cr_aps_id 3220可以包括在条带标头语法3200中。
视频编码装置1900可以从条带标头语法3200获得语法元素sh_num_alf_aps_ids_luma、sh_alf_aps_id_luma[i]、sh_alf_cb_enabled_flag、sh_alf_cr_enabled_flag、sh_alf_aps_id_chroma、sh_alf_cc_cb_enabled_flag、sh_alf_cc_cb_aps_id、sh_alf_cc_cr_enabled_flag和sh_alf_cc_cr_aps_id 3220。详细地,当包括在PPS 2800中的pps_alf_info_in_ph_flag 2830指示0(3210)时,可以从条带标头语法3200获得语法元素sh_num_alf_aps_ids_luma、sh_alf_aps_id_luma[i]、sh_alf_cb_enabled_flag、sh_alf_cr_enabled_flag、sh_alf_aps_id_chroma、sh_alf_cc_cb_enabled_flag、sh_alf_cc_cb_aps_id、sh_alf_cc_cr_enabled_flag和sh_alf_cc_cr_aps_id 3220。
语法元素sh_num_alf_aps_ids_luma指示由当前条带参考的ALF APS的数量。语法元素sh_alf_aps_id_luma[i]指示由当前条带的亮度分量参考的第i个ALF APS的aps_adaptation_parameter_set_id。语法元素sh_alf_cb_enabled_flag指示ALF是否被允许用于当前条带的Cb分量。语法元素sh_alf_cr_enabled_flag指示ALF是否被允许用于当前条带的Cr分量。语法元素sh_alf_aps_id_chroma指示由当前条带的色度分量参考的ALF APS的aps_adaptation_parameter_set_id。语法元素sh_alf_cc_cb_enabled_flag指示对于当前条带的Cb分量是否允许跨分量ALF。语法元素sh_alf_cc_cb_aps_id指示由当前条带的Cb分量参考的ALF APS的aps_adaptation_parameter_set_id。语法元素sh_alf_cc_cr_enabled_flag指示对于当前条带的Cr分量是否允许跨分量ALF。语法元素sh_alf_cc_cr_aps_id指示由当前条带的Cr分量参考的ALF APS的aps_adaptation_parameter_set_id。
视频解码装置1700可以通过使用获得的语法元素sh_num_alf_aps_ids_luma、sh_alf_aps_id_luma[i]、sh_alf_cb_enabled_flag、sh_alf_cr_enabled_flag、sh_alf_aps_id_chroma、sh_alf_cc_cb_enabled_flag、sh_alf_cc_cb_aps_id、sh_alf_cc_cr_enabled_flag和sh_alf_cc_cr_aps_id 3220,对当前条带的每个最大编解码单元的亮度分量和色度分量执行ALF。
根据实施例的视频解码装置1700和根据实施例的视频编码装置1900可以针对每个图片或每个条带选择性地信令通知去方块滤波器相关参数、参考图片列表相关参数、加权预测相关参数、SAO相关参数和ALF相关参数。因此,根据实施例的视频编码装置1900可以根据数据传输效率或数据图片的特性来确定是信令通知每个图片的工具相关参数还是信令通知每个条带的工具相关参数,并根据具有高传输效率的方法信令通知工具相关参数。根据实施例的视频解码装置1700可以基于从图片参数集获得的信息来确定是获得每个图片的工具相关参数还是获得每个条带的工具相关参数,并获得每个图片或每个条带的工具相关参数。因此,当针对每个图片信令通知工具相关参数时,则不需要针对图片中包括的每个条带信令通知工具相关参数,并因此可以减少用于信令通知工具相关参数的数据。
同时,上述公开的实施例可以被写成可以存储在介质中的计算机可运行程序。
该介质可以连续存储计算机可运行程序,或者临时存储计算机可运行程序或指令用于运行或下载。此外,介质可以是各种记录介质或存储介质中的任何一种,其中单片或多片硬件被组合,并且介质不限于直接连接到计算机系统的介质,而是可以分布在网络上。介质的示例包括被配置为存储程序指令的如硬盘、软盘和磁带的磁介质,如CD-ROM和DVD的光记录介质,如光软盘的磁光介质,以及ROM、RAM和闪存。可以以非暂时性存储介质的形式提供机器可读存储介质。这里,“非暂时性存储介质”仅表示有形设备,不包含信号(例如,电磁波)。该术语不区分数据半永久地存储在存储介质中的情况和数据临时存储在存储介质中的情况。例如,“非暂时性存储介质”可以包括临时存储数据的缓冲器。
介质的其他示例包括由分发应用的应用商店或者由提供或分发其他各种类型软件的网站、服务器等管理的记录介质和存储介质。
根据实施例,根据本说明书中公开的各种实施例的方法可以通过被包括在计算机程序产品中来提供。计算机程序产品是可以在卖方和买方之间交易的产品。计算机程序产品可以以机器可读存储介质(例如,光盘只读存储器(CD-ROM))的形式分发,或者通过应用商店(例如,Play StoreTM)或者直接或在线在两个用户设备(例如,智能电话)之间分发(例如,下载或上传)。在在线分发的情况下,计算机程序产品的至少一部分(例如,可下载的应用)可以至少临时生成或临时存储在机器可读存储介质中,如制造商的服务器、应用商店的服务器或中继服务器的存储器。
虽然已经参照附图描述了本公开的一个或多个实施例,但是本领域普通技术人员将理解,在不脱离由所附权利要求限定的精神和范围的情况下,可以在形式和细节上进行各种改变。
权利要求书(按照条约第19条的修改)
1.一种视频解码方法,包括:
从图片参数集获得要应用于当前图片的量化参数(QP)初始值;
从图片参数集获得指示当前图片的图片标头中是否存在QP差值标志;
当QP差值标志指示当前图片的图片标头中存在QP差值时,从图片标头获得当前图片的第一QP差值;
当QP差值标志指示图片标头中不存在QP差值时,从当前条带的条带标头获得当前图片中包括的当前条带的第二QP差值;以及
通过使用QP初始值以及第一QP差值和第二QP差值之一来确定包括在当前图片中的编解码单元的QP。
2.根据权利要求1所述的视频解码方法,还包括:
通过使用QP对编解码单元中包括的一个或多个变换单元执行逆量化来获得变换系数;以及
通过使用变换系数来重构当前图片。
3.根据权利要求2所述的视频解码方法,其中,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数包括:
当QP差值标志指示当前图片的图片标头中存在QP差值时,从图片标头获得当前图片的亮度分量的QP差值;
通过将QP初始值和亮度分量的第一QP差值相加,确定当前图片中包括的条带的亮度分量的QP;以及
通过使用条带的亮度分量的QP来确定包括在当前图片中并包括在条带中的编解码单元的QP。
4.根据权利要求3所述的视频解码方法,其中,确定编解码单元的QP包括:
从比特流获得编解码单元的QP差值;以及
通过使用条带的亮度分量的QP和编解码单元的QP差值来确定编解码单元的亮度分量的QP。
5.根据权利要求2所述的视频解码方法,其中,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数包括:
当QP差值标志指示图片标头中不存在QP差值时,从条带标头获得当前条带的亮度分量的第二QP差值;
通过将QP初始值和亮度分量的第二QP差值相加来确定当前条带的亮度分量的QP;以及
通过使用当前条带的亮度分量的QP来确定包括在当前条带中的编解码单元的QP。
6.根据权利要求5所述的视频解码方法,其中,确定编解码单元的QP包括:
从比特流获得编解码单元的QP差值;以及
通过使用当前条带的亮度分量的QP和编解码单元的QP差值来确定编解码单元的亮度分量的QP。
7.根据权利要求2所述的视频解码方法,其中,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数包括:
当QP差值标志指示图片标头中不存在QP差值时,从条带标头获得当前条带的Cb色度分量的Cb QP差值和当前条带的Cr色度分量的Cr QP差值;
通过使用当前条带的Cb色度分量的Cb QP差值来更新当前编解码单元的Cb色度分量的QP,来确定包括在当前条带中的当前编解码单元的Cb色度分量的Cb QP;以及
通过使用当前条带的Cr色度分量的Cr QP差值来更新当前编解码单元的Cr色度分量的QP,来确定当前编解码单元的Cr色度分量的Cr QP。
8.一种视频解码装置,包括:
获得器,被配置为从图片参数集获得要应用于当前图片的量化参数(QP)初始值,从图片参数集获得指示QP差值是否存在于当前图片的图片标头中的QP差值标志,当QP差值标志指示QP差值存在于图片标头中时,从图片标头获得当前图片的第一QP差值,并且当QP差值标志指示QP差值不存在于图片标头中时,从当前条带的条带标头获得包括在当前图片中的当前条带的第二QP差值;以及
解码器,被配置为通过使用QP初始值以及第一QP差值和第二QP差值之一来确定包括在当前图片中的编解码单元的QP。
9.一种视频编码方法,包括:
确定要应用于当前图片的QP初始值;
当针对每个图片确定QP初始值时,确定QP初始值和当前图片中使用的QP之间的第一QP差值,并为当前图片生成图片标头,所述图片标头包括第一QP差值;
当针对每个条带确定QP初始值时,确定QP初始值和包括在当前图片中的当前条带中使用的QP之间的第二QP差值,并生成当前条带的条带标头,所述条带标头包括第二QP差值;以及
生成包括QP初始值和QP差值标志的图片参数集,所述QP差值标志指示QP差值是否存在于当前图片的图片标头中。
10.根据权利要求9所述的视频编码方法,其中,生成当前图片的图片标头,所述图片标头包括第一QP差值,包括:
确定包括在当前图片中的条带的亮度分量的QP;以及
通过使用QP初始值和当前图片中包括的条带的亮度分量的QP之间的差值,来确定当前图片的亮度分量的第一QP差值。
11.根据权利要求10所述的视频编码方法,其中,确定第一QP差值包括:
通过使用编解码单元的亮度分量的QP和条带的亮度分量的QP之间的差值来确定编解码单元的QP差值;以及
对编解码单元的QP差值进行编码。
12.根据权利要求9所述的视频编码方法,其中,生成当前条带的条带标头,所述条带标头包括第二QP差值,包括:
确定当前条带的亮度分量的QP;以及
通过使用当前条带的亮度分量的QP和QP初始值之间的差值来确定当前条带的亮度分量的第二QP差值。
13.根据权利要求12所述的视频编码方法,其中,确定第二QP差值包括:
通过从编解码单元的亮度分量的QP中减去当前条带的亮度分量的QP来确定编解码单元的QP差值;以及
对编解码单元的QP差值进行编码。
14.根据权利要求12所述的视频编码方法,其中,确定第二QP差值包括:
确定包括在当前条带中的当前编解码单元的Cb色度分量的Cb QP差值,所述Cb QP差值用于确定当前编解码单元的Cb色度分量的QP;
确定当前编解码单元的Cr色度分量的Cr QP差值,所述Cr QP差值用于确定当前编解码单元的Cr色度分量的QP;以及
对当前条带的Cb色度分量的Cb QP差值和当前条带的Cr色度分量的Cr QP差值进行编码,并生成当前条带的条带标头,所述条带标头包括Cb QP差值和Cr QP差值。
说明或声明(按照条约第19条的修改)
以下所附内容是根据PCT条约第19条修改的内容:
国际局收到于2021年04月21日寄出的有关权利要求书修改。
以一份新的权利要求第1-14项替换原始的权利要求第1-15项。
根据第19条第1款作出的说明
根据第19条,如下修改原始权利要求。
-修改权利要求1至3、5、7至9、以及11至14。
-删除权利要求10。
关于修改基础的事项如下。
-本修改中权利要求1另外记载的特征“当QP差值标志指示图片标头中不存在QP差值时,从当前条带的条带标头获得当前图片中包括的当前条带的第二QP差值;以及通过使用QP初始值以及第一QP差值和第二QP差值之一来确定包括在当前图片中的编解码单元的QP”是修改前的权利要求2中已经记载的特征。即,上述修改是为了将修改前的权利要求2中已经记载的特征并入权利要求1中。
-将权利要求2修改为包括修改前从权利要求1中已经删除的特征“通过使用QP对编解码单元中包括的一个或多个变换单元执行逆量化来获得变换系数;以及通过使用变换系数来重构当前图片”。
-修改前的权利要求中已经包括的词“图片标头QP差值”被替换为“QP差值标志”,以澄清其含义。这些修改由说明书的第87页中的描述“图22示出了根据实施例的包括图片标头dQP信息的图片参数集。视频编码装置1900可以包括图片参数集语法2200的语法元素pps_init_qp_minus26 2210和pps_qp_delta_info_in_ph_flag 2220。语法元素pps_qp_delta_info_in_ph_flag 2220可以指示当前图片的QP差值是否存在于当前图片的图片标头中”来支持。
-由于权利要求8中记载的发明在类别方面不同于权利要求1中记载的发明并且共享技术特征,因此在权利要求8中也做出了与上述相同的修改。由于权利要求9中记载的发明针对的是与权利要求1中记载的视频解码方法相反的视频编码方法,因此在权利要求9中也做出了与上述相同的修改。
-由于删除了权利要求10,因此修改前的权利要求11至15分别成为权利要求10至14。
因此,认为对权利要求的上述修改是在本申请的说明书中所描述的范围内做出的合理修改。
如上所述,认为申请人对权利要求做出的修改是符合《专利合作条约》第19条要求的合理修改,因此申请人请求审查员基于修改后的权利要求进行审查。

Claims (15)

1.一种视频解码方法,包括:
从图片参数集获得要应用于当前图片的量化参数(QP)初始值,并且从图片参数集获得指示QP差值信息是否存在于当前图片的图片标头中的图片标头QP差值信息;
当图片标头QP差值信息指示当前图片的图片标头中存在QP差值信息时,从图片标头获得当前图片的第一QP差值;
通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP;
通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数;以及
通过使用变换系数来重构编解码单元。
2.根据权利要求1所述的视频解码方法,还包括:
当图片标头QP差值信息指示图片标头中不存在QP差值信息时,从当前条带的条带标头获得当前图片中包括的当前条带的第二QP差值;
通过使用QP初始值和第二QP差值来确定包括在当前条带中的编解码单元的QP;
通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数;以及
通过使用变换系数来重构编解码单元。
3.根据权利要求1所述的视频解码方法,其中,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数包括:
从图片标头获得当前图片的亮度分量的QP差值;
通过将QP初始值和亮度分量的第一QP差值相加,确定当前图片中包括的条带的亮度分量的QP;以及
通过使用条带的亮度分量的QP来确定包括在当前图片中并包括在条带中的编解码单元的QP。
4.根据权利要求3所述的视频解码方法,其中,确定编解码单元的QP包括:
从比特流获得编解码单元的QP差值;以及
通过使用条带的亮度分量的QP和编解码单元的QP差值来确定编解码单元的亮度分量的QP。
5.根据权利要求2所述的视频解码方法,其中,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数包括:
从条带标头获得当前条带的亮度分量的第二QP差值;
通过将QP初始值和亮度分量的第二QP差值相加来确定当前条带的亮度分量的QP;以及
通过使用当前条带的亮度分量的QP来确定包括在当前条带中的编解码单元的QP。
6.根据权利要求5所述的视频解码方法,其中,确定编解码单元的QP包括:
从比特流获得编解码单元的QP差值;以及
通过使用当前条带的亮度分量的QP和编解码单元的QP差值来确定编解码单元的亮度分量的QP。
7.根据权利要求1所述的视频解码方法,其中,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数包括:
从条带标头获得当前条带的Cb色度分量的Cb QP差值和当前条带的Cr色度分量的CrQP差值;
通过使用当前条带的Cb色度分量的Cb QP差值来更新当前编解码单元的Cb色度分量的QP,来确定包括在当前条带中的当前编解码单元的Cb色度分量的Cb QP;以及
通过使用当前条带的Cr色度分量的Cr QP差值来更新当前编解码单元的Cr色度分量的QP,来确定当前编解码单元的Cr色度分量的Cr QP。
8.一种视频解码装置,包括:
获得器,被配置为从图片参数集获得要应用于当前图片的QP初始值,从图片参数集获得指示QP差值信息是否包括在当前图片的图片标头中的图片标头QP差值信息,以及当图片标头QP差值信息指示QP差值信息包括在图片标头中时,从图片标头获得当前图片的第一QP差值;以及
解码器,被配置为当图片标头QP差值信息指示QP差值信息被包括在图片标头中时,通过使用QP初始值和第一QP差值来确定包括在当前图片中的编解码单元的QP,通过使用QP对编解码单元执行逆量化来获得编解码单元的变换系数,以及通过使用编解码单元的变换系数来重构编解码单元。
9.一种视频编码方法,包括:
确定要应用于当前图片的QP初始值;
当针对每个图片确定QP初始值时,确定QP初始值和当前图片中使用的QP之间的第一QP差值,并为当前图片生成图片标头,所述图片标头包括第一QP差值;以及
生成包括QP初始值和图片标头QP差值信息的图片参数集,所述图片标头差值信息指示QP差值信息是否存在于当前图片的图片标头中。
10.根据权利要求9所述的视频编码方法,还包括:当针对每个条带确定QP初始值时,确定QP初始值和包括在当前图片中的当前条带中使用的QP之间的第二QP差值,并生成当前条带的条带标头,所述条带标头包括第二QP差值。
11.根据权利要求9所述的视频编码方法,其中,生成当前图片的图片标头,所述图片标头包括第一QP差值,包括:
确定包括在当前图片中的条带的亮度分量的QP;以及
通过使用QP初始值和当前图片中包括的条带的亮度分量的QP之间的差值,来确定当前图片的亮度分量的第一QP差值。
12.根据权利要求11所述的视频编码方法,其中,确定第一QP差值包括:
通过使用编解码单元的亮度分量的QP和条带的亮度分量的QP之间的差值来确定编解码单元的QP差值;以及
对编解码单元的QP差值进行编码。
13.根据权利要求10所述的视频编码方法,其中,生成当前条带的条带标头,所述条带标头包括第二QP差值,包括:
确定当前条带的亮度分量的QP;以及
通过使用当前条带的亮度分量的QP和QP初始值之间的差值来确定当前条带的亮度分量的第二QP差值。
14.根据权利要求13所述的视频编码方法,其中,确定第二QP差值包括:
通过从编解码单元的亮度分量的QP中减去当前条带的亮度分量的QP来确定编解码单元的QP差值;以及
对编解码单元的QP差值进行编码。
15.根据权利要求13所述的视频编码方法,其中,确定第二QP差值包括:
确定包括在当前条带中的当前编解码单元的Cb色度分量的Cb QP差值,所述Cb QP差值用于确定当前编解码单元的Cb色度分量的QP;
确定当前编解码单元的Cr色度分量的Cr QP差值,所述Cr QP差值用于确定当前编解码单元的Cr色度分量的QP;以及
对当前条带的Cb色度分量的Cb QP差值和当前条带的Cr色度分量的Cr QP差值进行编码,并生成当前条带的条带标头,所述条带标头包括Cb QP差值和Cr QP差值。
CN202180020581.3A 2020-01-10 2021-01-08 获得量化参数的视频解码方法和装置以及发送量化参数的视频编码方法和装置 Pending CN115280773A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202062959452P 2020-01-10 2020-01-10
US62/959,452 2020-01-10
PCT/KR2021/000275 WO2021141451A1 (ko) 2020-01-10 2021-01-08 양자화 파라미터를 획득하기 위한 비디오 복호화 방법 및 장치, 양자화 파라미터를 전송하기 위한 비디오 부호화 방법 및 장치

Publications (1)

Publication Number Publication Date
CN115280773A true CN115280773A (zh) 2022-11-01

Family

ID=76788193

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180020581.3A Pending CN115280773A (zh) 2020-01-10 2021-01-08 获得量化参数的视频解码方法和装置以及发送量化参数的视频编码方法和装置

Country Status (11)

Country Link
US (1) US20220368909A1 (zh)
EP (1) EP4090020A4 (zh)
JP (1) JP2023510535A (zh)
KR (2) KR102304703B1 (zh)
CN (1) CN115280773A (zh)
AU (1) AU2021206074A1 (zh)
BR (1) BR112022013662A2 (zh)
CA (1) CA3164388A1 (zh)
IL (1) IL294576A (zh)
MX (1) MX2022008502A (zh)
WO (1) WO2021141451A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115152221A (zh) * 2020-02-05 2022-10-04 抖音视界有限公司 用于色度分量的去方块参数
CN115176460A (zh) 2020-02-05 2022-10-11 抖音视界有限公司 局部双树的调色板模式
AR121126A1 (es) * 2020-02-29 2022-04-20 Beijing Bytedance Network Tech Co Ltd Señalización de elementos de sintaxis para indicación de imagen de referencia
KR20220161412A (ko) * 2020-04-02 2022-12-06 엘지전자 주식회사 비디오 또는 영상 코딩 시스템에서의 흑백 영상에 대한 크로마 디블록킹 파라미터 정보에 기반한 영상 코딩 방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL2811745T4 (pl) * 2012-01-30 2021-01-11 Samsung Electronics Co., Ltd. Sposób i urządzenie do kodowania i dekodowania wideo, w oparciu o hierarchiczne jednostki danych, z uwzględnieniem predykcji parametru kwantyzacji
US9521410B2 (en) * 2012-04-26 2016-12-13 Qualcomm Incorporated Quantization parameter (QP) coding in video coding
KR102242675B1 (ko) * 2017-11-13 2021-04-22 한국전자통신연구원 양자화 방법 및 장치
KR102390733B1 (ko) * 2018-06-11 2022-04-25 한화테크윈 주식회사 양자화 파라미터 기반의 잔차 블록 부호화/복호화 방법 및 장치

Also Published As

Publication number Publication date
KR102304703B9 (ko) 2022-05-02
WO2021141451A1 (ko) 2021-07-15
KR102657549B1 (ko) 2024-04-15
MX2022008502A (es) 2022-08-08
KR20210090559A (ko) 2021-07-20
US20220368909A1 (en) 2022-11-17
EP4090020A4 (en) 2024-01-17
BR112022013662A2 (pt) 2022-09-13
KR102304703B1 (ko) 2021-09-28
AU2021206074A1 (en) 2022-08-18
JP2023510535A (ja) 2023-03-14
IL294576A (en) 2022-09-01
EP4090020A1 (en) 2022-11-16
KR20210118377A (ko) 2021-09-30
CA3164388A1 (en) 2021-07-15

Similar Documents

Publication Publication Date Title
CN115280773A (zh) 获得量化参数的视频解码方法和装置以及发送量化参数的视频编码方法和装置
CN112889278A (zh) 用于编码和解码运动信息的方法及用于编码和解码运动信息的装置
CN113545059A (zh) 一种用于预测色度分量的视频编码和解码的方法及其装置
EP3657797A2 (en) Method for encoding and decoding motion information, and apparatus for encoding and decoding motion information
EP3902253A1 (en) Image encoding device and image decoding device using triangular prediction mode, and image encoding method and image decoding method performed thereby
KR20210012038A (ko) 타일 및 타일 그룹을 이용하는 비디오 부호화 및 복호화 방법, 타일 및 타일 그룹을 이용하는 비디오 부호화 및 복호화 장치
EP3989586A1 (en) Video encoding method and device for performing post-reconstruction filtering in constrained prediction mode, and video decoding method and device
CN113056919A (zh) 使用双向预测的图像编码和解码方法以及图像编码和解码设备
EP3893503A1 (en) Video encoding method and decoding method using tiles and slices, and video encoding device and decoding device using tiles and slices
CN113994667A (zh) 通过使用邻近运动信息对运动信息进行编码和解码的设备和方法
EP3944622A1 (en) Video encoding method for performing affine model-based prediction by considering encoding order, and device therefor, and video decoding method for performing affine model-based prediction by considering decoding order, and device therefor
EP3934252A1 (en) Apparatuses for encoding and decoding image, and methods for encoding and decoding image thereby
EP4054192A1 (en) Video decoding method and apparatus, and video encoding method and apparatus for performing inter prediction according to affine model
EP3979640A1 (en) Video encoding method and apparatus, and video decoding method and apparatus for preventing small-sized intra block
CN114501008B (zh) 视频解码方法和视频编码方法
KR20240052922A (ko) 양자화 파라미터를 획득하기 위한 비디오 복호화 방법 및 장치, 양자화 파라미터를 전송하기 위한 비디오 부호화 방법 및 장치
EP3920534A1 (en) Video encoding method and apparatus, and video decoding method and apparatus using blocks partitioned in various forms from images
EP4135327A1 (en) Device and method for encoding motion vector, and device and method for decoding motion vector

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40082890

Country of ref document: HK