CN102986213A - 视频编码/解码设备和方法 - Google Patents

视频编码/解码设备和方法 Download PDF

Info

Publication number
CN102986213A
CN102986213A CN201180029802XA CN201180029802A CN102986213A CN 102986213 A CN102986213 A CN 102986213A CN 201180029802X A CN201180029802X A CN 201180029802XA CN 201180029802 A CN201180029802 A CN 201180029802A CN 102986213 A CN102986213 A CN 102986213A
Authority
CN
China
Prior art keywords
block
information
encoded
piece
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201180029802XA
Other languages
English (en)
Other versions
CN102986213B (zh
Inventor
宋振翰
林晶娟
文柱禧
李英烈
金海光
全炳宇
韩钟基
朴亨美
李柱玉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SK Telecom Co Ltd
Original Assignee
SK Telecom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SK Telecom Co Ltd filed Critical SK Telecom Co Ltd
Priority to CN201510629964.7A priority Critical patent/CN105306935B/zh
Priority to CN201510455161.4A priority patent/CN104967853B/zh
Priority claimed from PCT/KR2011/002761 external-priority patent/WO2011129671A2/ko
Publication of CN102986213A publication Critical patent/CN102986213A/zh
Application granted granted Critical
Publication of CN102986213B publication Critical patent/CN102986213B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/112Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种视频编码/解码设备,该视频编码/解码设备包括:视频编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,根据所述块模式信息和所述分割模式信息对所述块的变换类型信息、CBP信息和差量量化参数信息中的至少一个进行编码,并且基于所述块的所述编码信息对所述块的系数信息进行编码;以及视频解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息而编码的变换类型信息,并且基于所重构的信息或者通过对所述比特流进行解码来重构所述块。

Description

视频编码/解码设备和方法
技术领域
本发明涉及视频编码/解码设备和方法。更具体地说,本发明涉及一种能够通过以下处理改进视频压缩效率和视频重构效率的视频编码/解码设备和方法:对用于编码视频的编码信息进行有效编码;通过选择性使用各种编码方案来编码视频;以及根据经编码的编码信息和编码方案来自适应地对视频进行解码。
背景技术
本部分的说明仅提供与本发明有关的背景信息,并不构成现有技术。
视频数据压缩技术的示例包括H.261、H.263、MPEG-2和MPEG-4。根据视频压缩技术,在将各个图像分割为由亮度分量的矩形16×16像素区域和色度分量的矩形8×8像素区域组成的固定大小宏块之后,对各个图像进行编码。对各个宏块的所有亮度分量和色度分量进行空间或时间预测,并且在传输之前对所得的预测残留进行变换、量化和熵编码。
现有的视频编码设备中使用的块模式对表明当前编码目标块使用预测运动向量并且没有要编码的变换系数的标记进行编码,并且不对任何其它信息进行编码。在不使用预测运动向量或者具有要编码的变换系数的块的情况下,对块的类型信息和块的预测信息(相对于预测运动向量的差向量和基准图片数)进行编码并且对变换系数进行编码。
然而,在这种典型的视频压缩技术中,难以有效地对仅具有作为要编码的数据的差运动向量而没有要编码的变换系数的块或者没有差运动向量而仅具有要编码的变换系数的块进行编码,并且难以有效地对用于编码视频的各种信息进行编码。
此外,对视频进行编码和解码时的联合操作使得难以从视频编码的已经下降的压缩效率预期高效的视频解码。
发明内容
技术问题
因此,为了解决上述问题,本发明试图通过对用于编码视频的编码信息进行有效编码以及选择性地利用各种编码方案和解码方案对视频进行编码来改进视频压缩效率。
概述
本发明的实施方式提供了一种视频编码/解码设备,该视频编码/解码设备包括:视频编码器,其对表明宏块中的要编码的块的块模式是否为跳过(skip)模式的分割模式信息进行编码,根据所述块模式信息和所述分割模式信息对所述块的变换类型信息、编码块模式(CBP)信息和差量量化参数信息中的至少一个进行编码,并且基于所述块的编码信息对所述块的系数信息进行编码;以及视频解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的变换类型信息,并且基于所重构的信息或者通过对所述比特流进行解码来重构所述块。
本发明的另一实施方式提供了一种视频编码设备,该视频编码设备包括:编码信息编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码并且根据所述块模式信息和所述分割模式信息的组合对所述块的变换类型信息进行编码;以及视频解码器,其基于所述块的所述变换类型信息对所述块的系数信息进行编码。
这里,所述编码信息编码器可以基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
此外,编码信息编码器可以按照16×16像素块为单位来选择所述宏块的变换类型,并且使用与按照16×16像素块为单位选择的变换类型相同的16×16像素块中的子块的变换类型。
此外,所述编码信息编码器可以按照块为单位来选择所述宏块中的块(其大小等于或大于16×16像素块)的变换类型,并且按照16×16像素块为单位来选择宏块中的子块的变换类型,该子块被划分为小于16×16像素块的块。
此外,所述编码信息编码器在没有变换系数的情况下可以跳过对块的变换类型进行编码。
此外,如果所述块的块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码器可以跳过对变换类型进行编码。
本发明的另一实施方式提供了一种视频编码设备,该视频编码设备包括:编码信息编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的编码块模式(CBP)信息进行编码;以及视频编码器,其基于所述块的所述CBP信息对所述块的系数信息进行编码。
这里,所述块的所述CBP信息是表明所述块中是否存在非零变换系数的1比特标记。
此外,如果预发送模式值或标记包括表明当前块中不存在要编码的变换系数的信息,则所述编码信息编码器跳过生成所述当前块的节点值。
此外,如果所述块包括非零变换系数,则所述编码信息编码器对所述CBP信息进行编码。
此外,如果所述块的亮度分量经4×4变换或8×8变换,则所述编码信息编码器根据8×8像素块中是否存在非零变换系数来生成节点值。
此外,如果所述块的亮度分量经8×16变换或16×8变换,则所述编码信息编码器根据8×16像素块或16×8像素块中是否存在非零变换系数来生成节点值。
此外,如果所述块的所述块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码器跳过生成节点值而对CBP信息进行编码。
此外,所述编码信息编码器基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
本发明的另一实施方式提供了一种视频编码设备,该视频编码设备包括:编码信息编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的差量量化参数信息进行编码;以及视频编码器,其基于所述块的所述差量量化参数信息对所述块的系数信息进行编码。
这里,所述编码信息编码器基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
此外,所述编码信息编码器仅对所述宏块的所述差量量化参数信息或所述宏块中的具有非零变换系数的16×16像素块进行编码。
此外,所述编码信息编码器将所述差量量化参数信息变换为预定码数(codenumber),接着通过树结构对所述预定码数进行编码。
此外,所述编码信息编码器对所述差量量化参数信息的绝对值进行编码,接着仅对非零差量量化参数信息进行编码。
本发明的另一实施方式提供了一种视频解码设备,该视频解码设备包括:编码信息解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的变换类型信息;以及视频解码器,其基于来自所述编码信息解码器的所述重构信息或者通过对所述比特流进行解码来重构所述块。
本发明的另一实施方式提供了一种视频解码设备,该视频解码设备包括:编码信息解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的编码块模式(CBP)信息;以及视频解码器,其基于来自所述编码信息解码器的所述重构信息或者通过对所述比特流进行解码来重构所述块。
本发明的另一实施方式提供了一种视频解码设备,该视频解码设备包括:编码信息解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的差量量化参数信息;以及视频解码器,其基于来自所述编码信息解码器的所述重构信息或者通过对所述比特流进行解码来重构所述块。
本发明的另一实施方式提供了一种视频编码/解码方法,该视频编码/解码方法包括以下处理:对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,根据所述块模式信息和所述分割模式信息的组合对所述块的变换类型信息、编码块模式(CBP)信息和差量量化参数信息中的至少一个进行编码,并且基于所述块的经编码信息对所述块的系数信息进行编码;以及对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的变换类型信息,并且基于所重构的信息或者通过对所述比特流进行解码来重构所述块。
本发明的另一实施方式提供了一种视频编码方法,该视频编码方法包括以下处理:编码信息编码处理,对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码并且根据所述块模式信息和所述分割模式信息的组合对所述块的变换类型信息进行编码;以及视频编码处理,基于所述块的所述变换类型信息对所述块的系数信息进行编码。
这里,所述编码信息编码处理基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
此外,所述编码信息编码处理按照16×16像素块为单位来选择所述宏块的变换类型,并且使用与按照16×16像素块为单位选择的变换类型相同的16×16像素块中的子块的变换类型。
此外,所述编码信息编码处理按照块为单位来选择所述宏块中的块(其大小等于或大于16×16像素块)的变换类型,并且按照16×16像素块为单位来选择宏块中的子块的变换类型,该子块被划分为小于16×16像素块的块。
此外,所述编码信息编码处理在没有变换系数的情况下跳过对块的变换类型进行编码。
此外,如果所述块的块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码处理跳过对变换类型进行编码。
本发明的另一实施方式提供了一种视频编码方法,该视频编码方法包括以下处理:编码信息编码处理,对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的编码块模式(CBP)信息进行编码;以及视频编码处理,基于所述块的所述CBP信息对所述块的系数信息进行编码。
这里,所述块的所述CBP信息是表明所述块中是否存在非零变换系数的1比特标记。
此外,如果预发送的模式值或标记包括表明当前块中不存在要编码的变换系数的信息,则所述编码信息编码处理跳过生成当前块的节点值。
此外,如果所述块包括非零变换系数,则所述编码信息编码处理对所述CBP信息进行编码。
此外,如果所述块的亮度分量经4×4变换或8×8变换,则所述编码信息编码处理根据8×8像素块中是否存在非零变换系数来生成节点值。
此外,如果所述块的亮度分量经8×16变换或16×8变换,则所述编码信息编码处理根据8×16像素块或16×8像素块中是否存在非零变换系数来生成节点值。
此外,如果所述块的所述块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码处理跳过生成节点值而对CBP信息进行编码。
此外,所述编码信息编码处理基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
本发明的另一实施方式提供了一种视频编码方法,该视频编码方法包括以下处理:编码信息编码处理,对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的差量量化参数信息进行编码;以及视频编码处理,基于所述块的所述差量量化参数信息对所述块的系数信息进行编码。
这里,所述编码信息编码处理基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
此外,所述编码信息编码处理仅对所述宏块的所述差量量化参数信息或所述宏块中的具有非零变换系数的16×16像素块进行编码。
此外,所述编码信息编码处理将所述差量量化参数信息变换为预定码数,接着通过树结构对所述预定码数进行编码。
此外,所述编码信息编码处理对所述差量量化参数信息的绝对值进行编码,接着仅对非零差量量化参数信息进行编码。
本发明的另一实施方式提供了一种视频解码方法,该视频解码方法包括以下处理:编码信息解码处理,对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的变换类型信息;以及视频解码处理,基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
本发明的另一实施方式提供了一种视频解码方法,该视频解码方法包括以下处理:编码信息解码处理,对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的编码块模式(CBP)信息;以及视频解码处理,基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
本发明的另一实施方式提供了一种视频解码方法,该视频解码方法包括以下处理:编码信息解码处理,对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的差量量化参数信息;以及视频解码处理,基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
有益效果
根据本发明的实施方式,可以通过对用于编码视频的编码信息进行有效编码以及通过选择性使用各种编码方案和解码方案对视频进行编码来提高视频压缩效率。
此外,可以通过根据所述视频编码自适应地对视频进行解码来提高视频重构效率。
附图说明
图1是例示了根据本发明的实施方式的视频编码设备的示意性构造的框图;
图2是例示了图1中的视频编码器的示意性构造的图;
图3是例示了根据本发明的实施方式的针对帧内预测编码和帧间预测编码的宏块和各种大小的子块的图;
图4是例示了根据本发明的实施方式的各个分割类型的编号的图;
图5是例示了根据本发明的实施方式的视频编码方法的流程图;
图6是例示了根据本发明的实施方式而编码的比特流的句法结构的例示图;
图7和图8是例示了根据本发明的实施方式利用树结构来编码分割类型信息的处理的例示图;
图9和图10是例示了根据本发明的实施方式的树结构的示例的图;
图11和图12是例示了根据本发明的实施方式的变换类型编码和解码的图;
图13是例示了针对要编码的变换类型值的最低节点值的示例的图;
图14是例示了图13中的最高节点值的示例的图;
图15是例示了图11中的宏块编号1的树结构的示例的图;
图16是例示了图11中的宏块编号4的树结构的示例的图;
图17是例示了图11中的宏块编号7的树结构的示例的图;
图18是例示了要编码的变换类型值的最低节点值的另一示例的图;
图19是图18中的宏块编号4的树结构的示例的图;
图20是图18中的宏块编号7的树结构的示例的图;
图21是例示了CBPX标记和CBP的编码/解码顺序的流程图;
图22是例示了编码器中所选择的变换类型和所选择的块模式的示例的图;
图23是例示了CBP比特值的最低节点值的示例和CBP比特的发送单位的图;
图24是例示了图23中的与16×16区域对应的块被用作最高块的情况下的最高节点值的示例的图;
图25是例示了差量量化参数编码的示例的图;
图26是例示了图25中的差量量化参数被变换为排列码数的情况的示例的图;
图27是例示了图26中的树结构生成的示例的图;
图28是例示了图26中的树结构生成的另一示例的图;
图29是例示了差量量化参数编码的另一示例的图;
图30是例示了采用图29中的差量量化参数的绝对值的情况的图;
图31是例示了对图29中的码进行编码的方法的图;
图32是例示了根据本发明的实施方式的视频解码设备的示意性构造的框图;
图33是例示了图32中的视频解码器的示意性构造的图;
图34是例示了根据本发明的实施方式的视频解码方法的流程图;
图35是例示了根据本发明的另一实施方式的视频编码设备的示意性构造的框图;
图36是例示了根据本发明的另一实施方式的视频编码方法的流程图;
图37是例示了根据本发明的另一实施方式的视频解码设备的示意性构造的框图;
图38是例示了根据本发明的实施方式的视频解码方法的流程图;
图39是例示了根据本发明的第二实施方式的变换信息编码的示例的图;
图40是例示了利用树结构对图39中的子块B的变换信息进行编码的示例的图;
图41是例示了利用树结构对图39中的子块C的变换信息进行编码的示例的图;
图42是例示了利用树结构对图39中的子块C的变换信息进行编码的另一示例的图;
图43是例示了利用树结构对图39中的子块D的变换信息进行编码的示例的图。
具体实施方式
根据本发明的实施方式的视频编码设备和视频解码设备可以是个人计算机(PC)、笔记本或膝上型计算机、个人数字助理(PDA)、便携式多媒体播放器(PMP)、便携式游戏机(PSP)或移动通信终端、智能电话等,并且可以表示配备有例如诸如用于在各种装置或有线/无线通信网络之间进行通信的调制解调器的通信装置、用于存储用于对视频和相关数据进行编码或解码的各种程序的存储器以及用于执行这些程序以进行操作和控制的微处理器的各种设备。
此外,由视频编码设备编码为比特流的视频可以实时或非实时地发送给用于在经由有线/无线通信网络发送视频之后对该视频进行解码以将其重构和再现为视频的视频解码设备,其中,所述有线/无线通信网络包括互联网、短距离无线通信网络、无线LAN网络、也称为WiMax网络的WiBro(无线宽带)以及移动通信网络或诸如电缆或USB(通用串行总线)的通信接口。
尽管以下将描述输入视频在编码和解码之前被以宏块为单位进行划分,但是本发明的实施方式不限于此。例如,输入视频可以不被划分为诸如宏块的规则的块,而是可以划分为诸如圆、梯形和六边形的各种不规则的块,接着按照所划分的区域进行编码和解码。
图1是例示了根据本发明的实施方式的视频编码设备的示意性构造的框图。
根据本发明的实施方式的视频编码设备100可以包括编码信息编码器110和视频编码器200。
视频信息编码器110对表明要编码的视频的块的块模式是否为跳过模式的块模式信息以及表明块是否被划分为子块的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对块的跳过运动信息或包括块的块类型信息和预测信息的预测编码信息进行编码。
在本发明的实施方式中,编码信息不是按照块为单位编码的视频的像素信息,而是用于对像素信息进行编码的附加信息。编码信息的示例可以包括块的块模式信息、分割模式信息、跳过运动信息、块类型信息、预测信息、预测编码信息、变换类型信息、编码块模式(CBP)信息、差量量化参数信息以及跳过类型信息。
块模式信息是表明块的块模式是否为跳过模式的信息。块模式可以包括表明块是要在不编码的情况下跳过还是要在不跳过的情况下进行编码的跳过模式和非跳过模式。块模式信息可以例如通过表明块的块模式是跳过模式或非跳过模式的1比特跳过块标记来具体实现,但是不限于此,而是可以按照各种其它方法来具体实现。
跳过模式是不对诸如块类型信息、运动信息或变换系数信息的特定信息进行编码的模式。
例如,如果当前要编码的输入视频中的块的块模式是跳过模式,则视频编码设备100会仅对表明跳过模式的信息进行编码,而不对诸如块类型信息、运动信息或变换系数信息的其它信息进行编码。
作为另一示例,跳过模式可以是仅对块的运动信息进行编码而不对诸如类型信息和变换系数信息的其它信息进行编码的模式。
作为另一示例,跳过模式可以是仅对块的变换类型信息和变换系数信息进行编码而不对类型信息和运动信息进行编码的模式。
作为另一示例实施方式,非发送信息可以根据跳过模式而在各个块大小之间不同。例如,如果64×64块是跳过模式,则仅变换系数信息可以被编码;如果16×16块是跳过模式,则仅运动信息可以被编码。
分割模式信息是表明块是否被划分为更小的子块的信息。
例如,如果当前要由视频编码设备100进行编码的输入视频中的块是64×64像素宏块,则64×64像素宏块可以划分为各种大小和数量的子块,诸如两个64×32像素子块、一个64×32像素子块、两个32×32像素子块和四个32×32像素子块,并且可以按照子块为单位进行编码。在该情况下,分割模式信息表明宏块是否在编码之前被划分为子块。分割模式信息可以具体实现为例如表明块被划分为子块的1比特分割标记,但是不限于此,而是可以按照各种其它方法具体实现。
作为另一示例,分割模式信息是表明块被划分为预定大小的更小子块的信息。
例如,如果当前要由视频编码设备100编码的输入视频中的块是64×64像素宏块,则64×64像素宏块可以通过表明其是否被划分为16×16块子块的1比特标记被划分为16个16×16块。此外,各个16×16块可以被划分为更小子块,并且可以通过表明子块的形状的信息(分割类型信息)进行编码。
如果要编码的块的块模式是跳过模式,则跳过运动信息是通过对块、块的运动向量与块的预测运动向量之间的差向量和/或基准图片索引进行运动估计而确定的运动向量。具体地说,如果块的块模式是跳过模式,则视频编码设备100仅对块的跳过运动信息进行编码而不对块的系数信息进行编码。在该情况下,稍后描述的视频解码设备重构跳过运动信息并通过利用重构的跳过运动信息对块的运动进行补偿来重构该块。
作为跳过模式的另一示例性实施方式,仅当要编码的基准图片索引为0时才应用跳过模式,并且如果块的块模式是跳过模式,则视频编码设备100仅对通过对块或者块的运动向量与块的预测运动向量之间的差向量进行运动估计而确定的运动向量进行编码,而不对基准图片索引和块的运动信息进行编码。稍后描述的视频解码设备仅重构所确定的运动向量或块的运动向量与预测运动向量之间的差向量,并且通过将基准图片索引设置为0(即,上一个重构图片用作基准图片)对块进行运动补偿来重构块。
作为跳过模式的另一示例性实施方式,在确定要编码的块的预测运动向量时,如果当前要编码的块的上部块和左部块的一个或更多个运动向量是零向量(即,{0,0})则零向量可用作预测运动向量。在其它情况下,上部块、左部块和右上部块的运动向量的中间值被用作预测运动向量。如果当前要编码的块是跳过模式,则当在确定预测运动向量中上部块或左部块的运动向量是{0,0}时,稍后描述的视频解码设备使用{0,0}作为预测运动向量,并通过重构重构差向量并执行运动补偿来重构块。
作为另一示例性实施方式,不同的预测运动向量可以根据各个块大小而不同。例如,对于大于16×16的块,中间向量被用作预测运动向量,而与当前要编码的块的上部块和左部块的向量值无关。对于16×16块,如果当前要编码的块的上部块和左部块的向量是(0,0),则零向量被用作预测向量。在其它情况下,左部块、上部块和左上部块的三个运动向量的中间向量被用作预测运动向量(反之亦然)。
如果要编码的块的块模式不是跳过模式,则块类型信息表明块是帧间块还是帧内块以及块的子块的分割类型。
作为示例,块类型信息可以按照宏块为单位进行编码,并且可以包括表明宏块是帧间宏块还是帧内宏块的1比特块类型标记以及表明块的子块的分割类型的分割类型信息。例如,可以用表明块是帧间宏块还是帧内宏块的1或0二进制比特来表示块类型标记。分割类型信息可以用子块的各个分割类型编号来表示。作为另一示例,分割类型信息可以按照16×16像素大小为单位进行编码,并且如果当前16×16块是帧内块,则表明当前块中的子块是帧内模式。
作为另一示例,块类型信息可以包括表明块是帧间宏块还是帧内宏块的1比特块类型标记、表明块的子块的分割类型的分割类型信息以及表明子块的块模式是否为跳过模式的1比特跳过子块标记。这里,跳过子块标记表明块的各个子块是否为跳过模式,并且如果子块为跳过模式,则表明子块被跳过而不进行编码。即,如果块的多个子块当中的要编码的子块是跳过模式,则不对该子块的运动信息和系数信息进行编码。
作为另一示例,块类型信息可以通过根据块是帧间块还是帧内块以及块的子块的分割类型而分配给多个可用块类型的块类型编号来具体实现。
此外,块类型信息可以表明根据分割模式信息要进行编码的块的块类型,或者可以表明要编码的块的各个子块的块类型。例如,如果分割模式信息表明要编码的块没有划分为子块,则分割模式信息表明要编码的块是帧间块还是帧内块以及块的分割类型(即,没有划分的宏块的类型);并且如果分割模式信息表明要编码的块被划分为子块,则分割类型信息表明要编码的块的各个子块是帧间块还是帧内块以及块的子块的分割类型。
预测信息是用于对要编码的块或该块的各个子块进行预测编码的信息。预测信息可以是关于针对帧内预测编码的帧内预测模式的信息,并且可以是关于针对帧间预测编码的运动向量的信息和关于基准图片索引的信息。
变换类型信息是关于用来对要编码的块或者该块的各个子块进行变换和量化的变换单位的信息。例如,如果64×64像素块在没有被进一步划分的情况下被编码,并且16×16变换被确定为足够,则可以将表明使用16×16变换的信息编码为变换类型信息。
CBP信息是表明要编码的块或者该块的各个子块全部为0的信息,并且差量量化参数信息是表明要编码的块或者该块的各个子块的量化参数的信息。
可以通过经由编码信息编码器110分析输入视频或者通过经由视频编码器200分析输入视频来确定上述块模式信息、分割模式信息、块类型信息、预测信息、分割类型信息、CBP信息和差量量化参数信息。
视频编码器200基于块的块类型信息和预测信息对块的系数信息进行编码。例如,如果块模式信息表明要编码的块的块模式不是跳过模式并且块类型信息表明该块被划分为各种形状和大小的子块,则视频编码器200通过根据各个子块预测信息对各个子块进行帧内预测编码或帧间预测编码来对块的系数信息进行编码。这里,系数信息是关于通过预测要编码的视频的块的亮度分量和/或色度分量以及对其残留块进行变换/量化而生成的量化变换系数的信息。系数信息被编码并且被包括在比特流中作为纹理数据。
图2是例示了根据本发明的实施方式的视频编码器200的示意性构造的图。参照图2,视频编码器200可以包括预测器210、减法器220、变换器/量化器230、编码器240、逆变换器/逆量化器250、加法器260、滤波器270和图片缓冲器280。
预测器210可以包括帧内预测器212和帧间预测器214。帧间预测器214可以包括运动估计器216和运动补偿器218。
由一个图片或运动图片的帧构成的输入图片被划分为N×N像素的宏块(N:等于或大于16的整数),并且这些宏块被输入到图1的视频编码设备100。如果输入视频是4:2:0格式的视频,则宏块包括具有N×N像素的亮度块和具有两个(M/2)×(N/2)像素的色度块。这里,宏块不仅包括16×16像素块而且还包括32×32像素块和64×64像素块。大于16×16像素块的宏块还被称为扩展宏块。
如图3所示,各个宏块可以在帧内预测编码或帧间预测编码之前被划分为更小的子块。
图3是例示了根据本发明的实施方式的针对帧内预测编码和帧间预测编码的宏块和各种大小的子块的图。
图3例示了当N是等于或大于16的整数并且最小块大小是4×4像素时的宏块和子块。如果宏块是64×64像素块,则作为子块的64×64像素块、64×32像素块、32×64像素块和32×32像素块可以属于宏块层0,并且作为子块的32×32像素块、32×16像素块、16×32像素块和16×16像素块可以属于宏块层1。这里,宏块层K+1的子块可以仅当宏块层K((0≤K≤log2(N/4)))的子块当中的最大子块被划分为四个块时才被使用。
视频编码设备100可以在将宏块划分为子块的情况下计算各个子块的编码效率,并且将具有最高编码效率的子块确定为最终帧内预测块或帧间预测块。编码效率可以基于率失真优化(RDO)技术来测量。
最小块大小可以根据作为最大可用层值的最大层值(MaxLayer)来确定。例如,在NxN像素宏块的情况下,最小块大小可以确定为N/(2MaxLayer)。
图4是例示了根据本发明的实施方式的各个分割类型的编号的图。
参照图4,如果宏块层K的N/2KxN/2K像素块没有再被划分,则分割类型编号0被分配给宏块层K的N/2KxN/2K像素块。如果宏块层K的N/2KxN/2K像素块被划分为两个N/2KxN/2K+1像素块,则分割类型编号1被分配给宏块层K的N/2KxN/2K像素块。如果宏块层K的N/2KxN/2K像素块被划分为两个N/2K+1xN/2K像素块,则分割类型编号2被分配给宏块层K的N/2KxN/2K像素块。如果宏块层K的N/2KxN/2K像素块被划分为四个N/2K+1xN/2K+1像素块,则分割类型编号3被分配给宏块层K的N/2KxN/2K像素块。在图3中,宏块层K的N/2KxN/2K像素块中的各个子块上标记的编号0、1、2和3是用于标识各个子块的分割编号。
图5是例示了根据本发明的实施方式的视频编码方法的流程图。
在根据本发明的实施方式的视频编码方法中,视频编码设备100对表明要编码的视频的块的块模式的块模式信息进行编码(S510)。具体地说,视频编码设备100确定是对要编码的块的系数信息进行编码还是仅对块的运动信息进行编码而不对块的系数信息进行编码。如果仅对块的运动信息进行编码,则视频编码设备100对表明块模式是跳过模式的块模式信息进行编码;如果不仅对块的运动信息进行编码而且对块的系数信息进行编码,则视频编码设备100对表明块模式不是跳过模式的块模式信息进行编码。
视频编码设备100对表明块是否被划分为子块的分割模式信息进行编码(S520)。具体地说,视频编码设备100确定是将要编码的块划分为更小子块并且按照子块为单位对该块进行编码还是在不将该块划分为更小子块的情况下对该块进行编码。如果在不将该块划分为更小子块的情况下对该块进行编码,则视频编码设备100对表明该块没有划分为子块的分割模式信息进行编码;并且如果该块在编码之前被划分为更小子块,则视频编码设备100对表明该块被划分为子块的分割模式信息进行编码。例如,如果要编码的块是64x64像素宏块,则视频编码设备100确定是在编码之前将64x64像素宏块划分为16x16像素子块还是在不将该64x64像素宏块划分为16x16像素子块的情况下对该宏块进行编码,并且相应地对分割模式信息进行编码。如果64x64像素宏块在编码之前被划分为16x16像素子块,则各个16x16像素子块可以被划分为更小子块,并且块类型被编码并发送给解码器。
视频编码设备100根据块模式信息和分割模式信息的组合对块的跳过运动信息或者包括块的块类型信息和块的预测信息的预测编码信息进行编码(S530),并且基于块类型信息和预测信息对块的系数信息进行编码(S540)。具体地说,视频编码设备100根据与块模式信息是否表明要编码的块的块模式是跳过模式以及分割模式信息是否表明块被划分为子块的组合对应的各种情况来按照不同方式对块进行编码。
此后,将假设要编码的块是64x64像素宏块并且被划分为16x16像素子块来描述视频编码设备100执行步骤S530和步骤S540的处理。
在步骤S530中,如果块模式信息表明块的块模式是跳过模式并且分割模式信息表明块没有被划分为子块,则视频编码设备100可以对块的跳过运动向量进行编码。具体地说,视频编码设备100以64x64像素为单位对要编码的块进行运动估计,以检测基准图片中的最类似于要编码的块的基准块,将表明基准块和要编码的块的相对位置的运动向量确定为跳过运动向量,将表明包括基准块的基准图片的基准图片索引确定为跳过基准图片索引,并且对包括跳过运动向量和跳过基准图片索引的跳过运动信息进行编码。
在步骤S530中,如果块模式信息表明块的块模式是跳过模式并且分割模式信息表明块被划分为子块,则视频编码设备100可以对要编码的块的跳过运动向量进行编码。具体地说,视频编码设备100以64x64像素为单位对要编码的块的各个子块进行运动估计,以检测基准图片中的最类似于要编码的块的各个子块的基准子块,将表明基准子块和要编码的块的各个子块的相对位置的运动向量确定为跳过运动向量,将表明包括基准子块的基准图片的基准图片索引确定为跳过基准图片索引,并且对包括跳过运动向量和跳过基准图片索引的跳过运动信息进行编码。因而,如果块模式信息表明块的块模式是跳过模式并且分割模式信息表明块被划分为子块,则跳过运动信息被编码为与各个子块的数量一样多。
在步骤S530和步骤S540中,如果块模式信息表明块的块模式不是跳过模式并且分割模式信息表明块没有被划分为子块,则视频编码设备100可以对包括块的块类型信息和预测信息的预测编码信息进行编码。具体地说,视频编码设备100以64x64像素为单位对要编码的块进行运动估计,以检测基准图片中最类似于要编码的块的基准块,确定表明基准块和要编码的块的相对位置的运动向量,确定表明包括基准块的基准图片的基准图片索引,对通过对要编码的块和预测块之间的残留块进行变换/量化而获得的系数信息进行编码,其中通过基于所确定的运动向量对要编码的块的运动进行补偿来生成预测块,并且还对预测编码时使用的块类型信息和预测信息进行编码。
在步骤S530和步骤S540中,如果块模式信息表明块的块模式不是跳过模式并且分割模式信息表明块被划分为子块,则视频编码设备100可以对包括块的各个子块的块类型信息和预测信息的预测编码信息进行编码。具体地说,如果要编码的块的子块的块类型是帧间块,则要编码的块的各个子块可以被划分为16x16,16x8,8x16或8x8像素子块。如果16x16块被划分为四个8x8像素子块,则各个8x8块可以被划分为更小的8x8,8x4,4x8或4x4子块。具体地说,视频编码设备100以子块大小为单位执行运动估计,以检测基准图片中最类似于要编码的块的各个子块的基准子块,确定表明基准子块和要编码的块的各个子块的相对位置的运动向量,确定表明包括基准子块的基准图片的基准图片索引,对通过对要编码的块的各个子块和预测子块之间的残留块进行变换/量化而获得的系数信息进行编码,其中通过基于所确定的各个子块的运动向量对要编码的块的各个子块的运动进行补偿来生成预测子块,并且还对用于预测编码的块类型信息和预测信息进行编码。
如果要编码的块的子块的块类型是帧内块,则视频编码设备100确定子块的帧内预测模式,并且通过基于所确定的帧内预测模式执行预测编码来对系数信息和预测编码信息进行编码。因而,如果块模式信息表明块的块模式不是跳过模式并且分割模式信息表明块没有被划分为子块,则系数信息和预测编码信息被编码为与各个子块的数量一样多。
这里,块类型信息可以是基于块的子块的分割类型以及块是帧间宏块还是帧内宏块分配给多个可用块类型的块类型编号。预测编码信息还可以包括子块的变换类型信息、子块的CBP信息以及子块的差量量化参数信息中的一个或更多个。块类型信息可以包括表明块是帧间宏块还是帧内宏块的块类型标记以及表明子块的分割类型的分割类型信息。
此外,如果块模式信息表明要编码的块的块模式不是跳过模式并且分割模式信息表明该块被划分为子块,则除了表明块是帧间宏块还是帧内宏块的块类型标记以及表明块的子块的分割类型的分割类型信息以外,块类型信息还可以包括表明子块的块模式是否为跳过模式的跳过子块标记。具体地说,如果要编码的块的块模式不是跳过模式,并且块被划分为子块,则视频编码设备100可以不必对各个子块的系数信息和预测编码信息进行编码。如果子块的块模式是跳过模式,则视频编码设备100可以仅对跳过子块标记进行编码。
在步骤S530中,视频编码设备100可以在对块类型信息进行编码时对分割类型信息进行编码。例如,视频编码设备100可以按照预定区域为单位将多个子块分组,以层为单位重复将包括在分组区域中的子块的分割类型值的最小值分配为分组区域的分割类型值的处理,直到最高层为止,并且通过对以层为单位分组的分割类型值和上层的分组区域的分割类型值之间的差值进行编码来对分割类型信息进行编码。下文将参照图7和图8来详细描述视频编码设备100对分割类型信息进行编码的方法。
图6是例示了根据本发明的实施方式而编码的比特流的句法结构的例示图。
当视频编码设备100对要通过根据本发明的实施方式的上述视频编码方法进行编码的输入视频的块进行编码时,可以生成具有图6所示句法结构的比特流。图6中例示了了要编码的块的比特流。
图6A例示了在块模式是跳过模式的情况下比特流的句法结构。如果要编码的块的块模式是跳过模式,则通过对块进行编码而生成的比特流可以包括块模式信息字段、分割模式信息字段和跳过运动信息字段。通过对块模式信息进行编码而生成的数据被分配给块模式信息字段,通过对分割模式信息进行编码而生成的数据被分配给分割模式信息字段,并且通过对跳过运动信息进行编码而生成的数据被分配给跳过运动信息字段。
如果块模式是跳过模式,则当由分割模式信息标识的块的分割模式被划分为子块以及当分割模式没有被划分为子块时,不对块的系数信息进行编码,而仅对与由对块进行运动估计确定的运动相关的信息对应的跳过运动信息进行编码,并且将结果分配给跳过运动信息字段。在该情况下,如果分割模式信息表明块没有被划分为子块,则通过对块进行运动估计而确定的运动信息被编码为跳过运动信息;如果分割模式表明块被划分为子块,则通过对块的各个子块进行运动估计而确定的各个子块的运动信息被编码为跳过运动信息;并且该结果被分配给跳过运动信息字段。
图6B例示了在块模式不是跳过模式的情况下比特流的句法结构。如果要编码的块的块模式不是跳过模式,则通过对块进行编码而生成的比特流可以包括块模式信息字段、分割模式信息字段、块类型信息字段、预测信息字段、CBP子块标记字段、变换类型信息字段、CBP字段、差量QP字段和系数信息字段。这里,CBP子块标记字段、变换类型信息字段、CBP字段和差量QP字段不必包括在比特流中,并且一些或者所有字段可以根据实施方式选择性地包括在比特流中。
通过对块模式信息进行编码而生成的数据被分配给块模式信息字段,通过对分割模式信息进行编码而生成的数据被分配给分割模式信息字段。如果块模式不是跳过模式,则当由分割模式信息标识的块的分割模式被划分为子块以及当分割模式没有被划分为子块时,对块的系数信息进行编码。因而,在该情况下,不仅通过对系数信息进行编码而生成的数据而且通过对用于编码系数信息的预测编码信息进行编码而生成的数据都被包括在比特流中。预测编码信息可以包括块类型信息和预测信息,还可以包括CBP子块标记、变换类型信息、CBP和差量QP。
如果分割模式信息表明块没有被划分为子块,则仅该块的预测编码信息被编码并分配给各个字段;并且如果分割模式信息表明该块被划分为子块,则该块的各个子块的预测编码信息被编码并分配给各个字段。通过对块或块的子块的系数信息进行编码而生成的数据被分配给系数信息字段。
图7和图8是例示了根据本发明的实施方式利用树结构来编码分割类型信息的处理的例示图。
图7中,以预定区域为单位对要编码的块的各个子块的分割类型值进行分组,以便利用树结构对分割类型信息进行编码,并且该分割类型值被表示为逐层分割类型值。
图7A例示了要编码的块中的各个子块以及各个子块的分割类型值。在图7A中,Mx(a,b)表示要编码的块中的与位置(a,b)对应的子块的分割类型值。具体地说,Mx(0,0)表示与要编码的块中的位置(0,0)对应的子块(即,块中的光栅扫描方向的第一子块)的分割类型值,Mx(0,1)表示与要编码的块中的位置(0,1)对应的子块(即,块中的光栅扫描方向的第二子块)的分割类型值。
图7A所示的子块的分割类型值按照预定区域为单位(例如,按照包括两个或更多个子块的区域为单位)进行分组,并且分组区域中的分割类型值的最小值被选择并分配作为针对分组区域的分割类型值。
图7B例示了对图7A所示的子块的分割类型值进行分组并分配最小值作为分组区域的分割类型值的结果。例如,图7A所示的包括子块(0,0),(0,1),(1,0)和(1,1)的区域按照预定区域为单位进行设置并分组,包括在该分组区域中的各个子块的分组类型值Mx(0,0),Mx(0,1),Mx(1,0)和Mx(1,1)当中的最小值被选择并分配作为分组区域Mx-1(0,0)的分割类型值。此外,包括子块(0,2),(0,3),(1,2)和(1,3)的区域按照预定区域为单位进行设置并分组,包括在该分组区域中的各个子块的分组类型值Mx(0,2),Mx(0,1),Mx(1,2)和Mx(1,3)当中的最小值被选择并分配作为分组区域Mx-1(0,1)的分割类型值。这样,对剩余的子块进行相同的处理。当直到层Mx-2,Mx-3…M1为止重复将图7A所示的子块的分割类型值分配作为图7B所示的分组区域的分割类型值的处理时,分组区域的分割类型值可以如图7C所示进行分配。当直到层M0为止再次重复该处理时,可以进行分组,以具有图7D所示的一个分组区域的分割类型值。
尽管图7例示了预定区域被设置为包括四个相邻子块的区域,但是本发明不限于此。例如,分割类型值可以在按照各种方式对子块进行分组(诸如包括八个相邻子块的区域和包括六个不相邻子块的区域)之后被分配。
将要编码的块的子块的分割类型值分配为图7所示的分组区域的分割类型值的过程可以用如图8所示的树结构来表示。
图8例示了了树结构的逐层分组区域的分割类型值。如果逐层分组区域的分割类型值是节点值,则可以通过对相对于上级节点的节点值的差进行编码来对图8所示的树结构中的节点值进行编码。
对这些节点值和上级节点的节点值的差值进行编码的方法对与差值相对应的二进制比特0进行编码并且编码最后的二进制比特1。如果上级节点的节点值和要编码的节点的节点值之差为0,则编码二进制比特1。例如,可以使用算术编码方法来解码二进制比特0和1。在该情况下,在各个层中可以使用不同的上下文。
这样,当树结构被用于对分割类型值(即,节点值)进行编码时,最上级节点的节点值(下文称为“最上级节点值”)可以按照以下三个示例进行编码。作为示例,可以如上所述利用二进制比特0和1来对0与最上级节点值之间的差值进行编码。作为另一示例,如果各个分割类型编号被设置为分割类型值,并且按照分割类型的出现频率的降序设置大分割类型编号,则可以利用二进制比特0和1来对最上级节点值与最大分割类型编号之间的差值进行编码。作为另一示例,如果各个分割类型编号被设置为分割类型值,并且按照分割类型的出现频率的降序设置小分割类型编号,则可以利用二进制比特0和1来对最上级节点值与最小分割类型编号之间的差值进行编码。
在保持除了最上级节点值以外的剩余节点值的情况下,可以利用二进制比特0和1来对要编码的节点的节点值与该节点的上级节点的节点值之间的差值进行编码。即,可以通过编码与差值一样多的二进制比特0并且编码最后的二进制比特1来对各个节点值进行编码。在该情况下,如果要编码的节点的节点值与该节点的上级节点的节点值之间的差值为0,则编码二进制比特1。此外,相反,可以通过编码与差值一样多的二进制比特1并且编码最后的二进制比特0来对各个节点值进行编码。在该情况下,如果要编码的节点的节点值与该节点的上级节点的节点值之间的差值为0,则编码二进制比特0。
然而,当各个节点值被编码时,如果上级节点值是对于分割类型编号可用的最大值,则相关上级节点的下级节点的节点值不被编码。例如,如果节点M1(0,0)的节点值是3,则作为该节点M1(0,0)的下级节点的节点的节点值M2(0,0),M2(0,1),M2(1,0)和M2(1,1)不被编码。即,由于M1(0,0)是M2(0,0),M2(0,1),M2(1,0)和M2(1,1)的最小值,所以M2(0,0),M2(0,1),M2(1,0)和M2(1,1)全部具有大于或等于3的值。然而,在图4中,由于分割类型值的最大值是3,所以M2(0,0),M2(0,1),M2(1,0)和M2(1,1)不必被编码,因为它们不可能具有除3以外的值。
此外,当要编码的节点与该节点的上级节点之间的差值,如果要编码的节点的节点值是对于分割类型编号可用的最大值,则仅编码与该差值一样多的二进制比特0,并且不编码最后的二进制比特1。例如,如果要编码的节点的上级节点的节点值M1(0,0)和要编码的节点的节点值M2(0,0),M2(0,1),M2(1,0)和M2(1,1)分别是1,2,3,3和2,则节点值M2(0,0)和M2(1,1)编码二进制比特01,并且节点值M2(0,1)和M2(1,0)编码二进制比特00,而不是二进制比特001。
此外,当具有相同上级节点的节点当中的最后节点的节点值被编码时,如果除最后节点以外的这些节点的全部节点值大于上级节点的节点值,则最后节点的节点值不被编码。例如,如果要编码的节点的上级节点的节点值M1(0,0)和要编码的节点的节点值M2(0,0),M2(0,1),M2(1,0)和M2(1,1)分别是1,2,3,3和1,则由于节点值M2(0,0),M2(0,1)和M2(1,0)全部大于节点值M1(0,0),所以最后节点的节点值M2(1,1)不被编码。
如上所述,可以通过利用二进制比特0和1对要编码的节点的节点值与该节点的上级节点的节点值之间的差值进行编码来对除最上级节点以外的剩余节点的节点值进行编码。然而,与此不同,可以通过对各个节点的节点值与就分割类型的出现频率而言最高的分割类型值之间的差值进行编码来对除最上级节点以外的剩余节点的节点值进行编码。这里,就出现频率而言最高的分割类型值可以是固定值也可以不是固定值。如果就出现频率而言最高的分割类型值不是固定值,则可以在编码之后将其发送到相关解码器也可以不发送。如果就出现频率而言最高的分割类型值没有被发送给解码器,则在当前块之前编码的块的统计可以累积,并且可以使用到目前为止就出现频率而言最高的模式。在利用树结构对分割类型信息进行编码的另一实施方式中,当图7A所示的分割类型值被分组以确定图7B所示的分组区域的分割类型值时,如果按照出现频率的降序来分配大的分割类型编号,则分组区域的值当中的最大值可以用作分组区域的分割类型值。
图9和图10是例示了根据本发明的实施方式的树结构的示例的图。如果要编码的块中与位置(a,b)对应的子块的分割类型值是图9A所示的沿光栅方向的{0,2,1,2,1,2,2,0,1,0,0,1,2,1,1},则这些子块各自的分割类型值可以按照四个相邻子块为单位进行分组。在该情况下,即使不是四个子块,最左剩余者和最低剩余者也可以在这些剩余者之间分组。这样,如果图9A所示的子块的分割类型值以组为单位进行表示,则第一组、第二组、第三组、第四组、第五组和第六组在光栅扫描方向可以分别是{0,2,2,2},{1,2,0,1},{1,0},{0,1},{2,1}和{1}。当包括在各个组中的子块的分割类型值的最小值被选择,并且分组区域的分割类型值,则如图9B所示在光栅扫描方向可以是{0,0,1,0,1,1}。与图9A的情况相同,这些分割类型值可以分组为四个相邻分割类型值。当从针对图9B所示的分割类型值的各个组中选择最小值,并且将其分配为分组区域的分割类型值时,其可以是按照图9C所示的光栅扫描方向的{0,1}。当最终选择最小值并分配为分割类型值时,如图9D所示,其可以为0。该处理可以按照图10所示的树结构进行表示。
下文将描述编码/解码变换类型信息的方法。
在编码变换类型时,首先根据块模式来生成最低节点。在该情况下,如果块模式是跳过模式,则该节点可以不生成。接着,根据变换类型的选择来生成最低节点。在该情况下,可以在发送之前对选择变换类型的单位或方法进行编码,使得编码器和解码器以相同方式工作。
在编码变换类型时,宏块的变换类型可以按照16x16像素块为单位进行选择并编码。在该情况下,16x16像素块中的子块可以使用相同的变换类型。即,即使在块大于16x16像素块的情况下,也可以按照16x16块为单位来选择变换类型,并且可以针对具有非零CBP 16标记的各个16x16像素块来发送变换类型。这里,即使16x16像素块被划分为小于8x8像素块的块,也可以选择并编码变换类型;并且当16x16像素块被划分为小于8x8像素块的块时,可以利用固定变换(例如,4x4像素块)而不对变换类型进行编码。
另选地,在块大于16x16像素块的情况下,可以按照块为单位来选择变换类型,并且如果块被划分为小于16x16像素块的块,则可以按照16x16块为单位来选择并编码变换类型。
在该情况下,变换类型的编码可以使用独立于针对各个变换类型可选择的变换数量而固定的表1,并且可以选择根据可选择的变换的数量的表2。
[表1]
变换类型 各个变换类型(码数)
4x4变换 0
8x8变换 1
8x16,16x8或16x16变换 2
[表2]
Figure BDA00002600018100221
图11和图12是例示了根据本发明的实施方式的变换类型编码和解码的图。图11例示了了在相对于比16x16像素块大的块以相关块为单位选择变换类型并且如果块被划分为比16x16像素块小的块则以16x16像素块为单位选择变换类型的情况下的宏块编号。图12例示了了关于图11的各个块模式和选择的变换类型。这里,假设如果16x16像素块中的子块被划分为比8x8像素块小的块,则使用4x4变换,并且根据独立于针对各个变换类型可选的变换数量而固定的表1对变换类型进行编码。
参照图11和图12,宏块编号0是跳过模式。此外,宏块编号1包括具有CBP16标记0的块和使用8x8变换的块,并且宏块编号2包括具有CBP16标记0的块和使用4x4变换的块。宏块编号3具有CBP32标记1并且使用16x16变换,宏块编号4包括使用16x8变换的块、使用16x16变换的块以及使用8x16变换的块。在该情况下,由于宏块编号4的剩余块被划分为小于8x8像素块的块,所以使用固定的4x4变换并且可以不对变换类型进行编码。此外,宏块编号5包括使用4x4变换的块以及被划分为小于8x8像素块的块的块。在该情况下,由于被划分为小于8x8像素块的块的块使用4x4变换,所以可以不对变换类型进行编码。宏块编号6具有CBP32标记1并且使用4x4变换,宏块编号7包括使用8x8变换的块、使用4x4变换的块以及处于跳过模式的块。此外,宏块编号8包括使用4x4变换的块以及被划分为小于8x8像素块并且使用4x4变换的块的块。在图2中,区别地表示不对变换类型进行编码的块。具体地说,斜线表示的块是跳过块或具有CBPX标记0的块,其没有变换系数。十字条纹表示的块是使用固定变换的块,其不必发送变换类型,因为解码器能够获知相关的变换类型。
当表1应用于针对图12的各个块而选择的变换类型时,最低节点值可以表示为如图13所示。当从图13所示的各个块的节点值中选择最小值并且将其分配为节点值时,可以如图14所示获得上级节点。例如,在图12中,宏块编号0不具有变换类型的编码比特。关于宏块编号1,由于如图15所示其具有最低节点值{1,1,1},所以最小值1被分配为最高节点值,表明最高节点值1和0之间的差值的比特01被编码,并且表明最低比特和最高节点值1之间的差值的编码比特111被编码。关于宏块编号2,由于其具有一个节点,所以0和宏块中的第二16x16像素块的变换类型值0之间的差值被编码。在该情况下,可以用1表示编码比特。关于宏块编号3,由于其具有32x32像素块的节点类型,所以0和32x32块的变换类型值2之间的差值被编码。在该情况下,可以用00表示编码比特。关于宏块编号4,由于宏块中的第三16x16块被划分为小于8x8像素块的子块,所以使用固定变换类型(例如,4x4变换),进而可以不对变换类型进行编码。因此,不生成与第三16x16块对应的节点,仅针对其它三个16x16像素块生成节点,并且仅对最高节点值2和0之间的差值进行编码。即,如图16所示,从最低节点值{2,2,2}选择作为最小值的最高节点值,并且与最高节点值2和0之间的差值对应的编码比特00被编码。关于宏块编号5,由于宏块中的第二16x16块被划分为小于8x8像素块的子块,所以使用固定变换类型(例如,4x4变换),可以不对变换类型进行编码。因此,不生成与第二16x16块对应的节点。在该情况下,由于仅存在一个节点,所以对0和第一16x16像素块的变换类型值0之间的差值进行编码。在该情况下,可以用1表示编码比特。关于宏块编号6,由于其具有一个节点,所以对0和宏块中的第二16x16像素块的变换类型值0之间的差值进行编码。在该情况下,可以用1表示编码比特。关于宏块编号7,不针对宏块中的第一16x16像素块和第三16x16像素块生成节点。如图17所示,由于最低节点值是{1,0},所以表明0和最高节点值0之间的差值的编码比特1被编码,并且表明最高节点值和第二16x16像素块的变换类型值1之间的差值的编码比特01被编码。此外,关于第四16x16像素块的变换类型值,由于其具有CBP16标记1并且使用4x4变换,所以可以不对变换类型值进行编码。关于宏块编号8,由于其具有一个节点,所以表明0和第一16x16像素块的变换类型值0之间的差值的编码比特1被编码。
当表2应用于针对图12的各个块选择的变换类型时,最低节点值可以表示为如图18所示。并且在该情况下,区别地表示不对变换类型进行编码的块。
关于此,宏块编号0没有变换类型的编码比特。关于宏块编号1,由于如图15所示其具有最低节点值{2,2,2},所以最小值2被分配为最高节点值,并且表明最高节点值2和0之间的差值的比特00被编码。关于宏块编号2,由于其具有一个节点,所以0和宏块中的第二16x16像素块的变换类型值0之间的差值被编码。在该情况下,可以用1表示编码比特。关于宏块编号3,由于其具有32x32像素块的节点类型,所以0和32x32块的变换类型值1之间的差值被编码。在该情况下,可以用01表示编码比特。关于宏块编号4,由于宏块中的第三16x16块被划分为小于8x8像素块的子块,所以使用固定变换类型(例如,4x4变换),进而可以不对变换类型进行编码。因此,不生成与第三16x16块对应的节点,仅针对其它三个16x16像素块生成节点,并且仅对最高节点值1和0之间的差值进行编码。即,如图19所示,从最低节点值{1,1,1}选择作为最小值的最高节点值,并且与最高节点值1和0之间的差值对应的编码比特01被编码。在该情况下,表明最低节点值的编码比特111可以被编码。关于宏块编号5,由于宏块中的第二16x16块被划分为小于8x8像素块的子块,所以使用固定变换类型(例如,4x4变换),可以不对变换类型进行编码。因此,不生成与第二16x16块对应的节点。在该情况下,由于仅存在一个节点,所以对表明0和第一16x16像素块的变换类型值0之间的差值的编码比特1进行编码。关于宏块编号6,由于其具有一个节点,所以对表明0和宏块中的第二16x16像素块的变换类型值0之间的差值的编码比特1进行编码。关于宏块编号7,不针对宏块中的第一16x16像素块和第三16x16像素块生成节点。如图20所示,由于最低节点值是{2,0},所以表明0和最高节点值0之间的差值的编码比特1被编码,并且表明最高节点值和第二16x16像素块的变换类型值2之间的差值的编码比特00被编码。此外,关于第四16x16像素块的变换类型值,由于CBP16标记为1并且使用4x4变换,所以可以不对变换类型值进行编码。关于宏块编号8,由于其具有一个节点,所以表明0和第一16x16像素块的变换类型值0之间的差值的编码比特1被编码。
下文将描述编码/解码CBP信息的方法。
图21是例示了根据本发明的实施方式的CBPX标记和CBP的编码处理的示例的流程图。图21例示了在扩展宏块是64x64像素块的情况下帧内宏块的CBPX标记和CBP的编码处理的示例。编码信息编码器110确定宏块的子块的大小是否是64x64,64x32和32x64中的一个(S2110)。如果宏块的子块的大小不是64x64,64x32和32x64中的一个,则编码信息编码器110确定子块的大小是否为32x32,32x16和16x32中的一个(S2120)。这里,如果宏块以16x16像素为单位被划分以执行帧内预测编码,则编码信息编码器110可以在步骤S2110中确定子块的大小是否为64x64像素块,即,是否以宏块为单位执行帧内预测编码。如果子块的大小不是64x64像素块,则编码信息编码器110可以在步骤S2120中确定子块的大小是否为32x32像素块。如果在步骤S2120中确定子块的大小是32x32,32x16和16x32中的一个,或者32x32像素块,则编码信息编码器110确定子块中是否存在非零变换系数(S2130)。如果子块中存在非零变换系数,则编码信息编码器110对表明子块中存在非零变换系数的CBP32标记(例如用诸如“1”的1比特表示)进行编码(S2140),并且以16x16像素块为单位对子块中的CBP进行编码(S2150)。如果子块中不存在非零变换系数,则编码信息编码器110对表明子块中不存在非零变换系数的CBP32标记(其用例如诸如“0”的1比特表示)进行编码(S2160)。
这里,CBP64标记表明64x64像素块中是否存在非零编码系数。类似地,CBP32标记表明32x32像素块中是否存在非零编码系数。如果亮度分量的残留块不具有非零变换系数,则由于不必发送变换类型,所以这种CBPX标记(X:32,64等)用来表明亮度分量是否具有非零变换系数。CBP以16x16像素块为单位进行编码。在该情况下,每8x8像素块使用1比特来表明16x16像素块中是否每8x8像素块存在非零变换系数。关于色度分量,使用1比特来表明两个2x2色度分量DC块中是否存在非零变换系数,并且使用1比特来表明两个8x8色度分量AC块中是否存在非零变换系数。
另一方面,如果在步骤S2120中确定子块的大小不是32x32,32x16和16x32中的一个,或者32x32像素块,则编码信息编码器110进行到步骤S2150,并且对CBP进行编码。这里,如果子块的大小不是32x32,32x16和16x32中的一个,或者16x32像素块,则编码信息编码器110可以确定子块的大小是否为16x16,16x8或8x16像素块。如果子块的大小是16x16,16x8或8x16像素块,并且如果相关子块中存在非零编码系数,则编码信息编码器110可以编码CBP16标记(其用例如诸如“1”的1比特表示)。如果不是,则编码信息编码器110可以在不使用CBP标记的情况下以16x16像素块为单位对CBP进行编码。
此外,如果在步骤S2110中确定子块的大小是64x64,64x32和32x64中的一个,或者64x64像素块,则编码信息编码器110确定子块中是否存在非零变换系数(S2170)。如果子块中存在非零变换系数,则编码信息编码器110对表明子块中存在非零变换系数的CBP64标记(例如用诸如“1”的1比特表示)进行编码(S2180),如果子块中不存在非零变换系数,则编码信息编码器110对表明子块中不存在非零变换系数的CBP64标记(其用例如诸如“0”的1比特表示)进行编码(S2190)。这里,CBP64标记表明64x64像素块中是否存在非零量化变换系数。
如果CBP标记被编码,并且如果CBP标记不为0,则变换类型被编码。特殊的是,如果16x16像素块被划分为四个8x8像素块,并且如果编码的CBP不是0,则以16x16像素块为单位应用的变换类型被编码。
在变换类型被编码之后,根据变换类型对CBP编码。如果使用16x16变换,则仅色度分量的两个CBP比特被编码;并且如果使用8x16变换或16x8变换,则表明16x16像素块中的两个8x16或16x8像素块是否具有非零变换系数的两个CBP比特被编码。然而,特殊的是,如果两个分割块当中的第一分割块的CBP比特是0,则第二分割块的CBP比特可以不被编码。
图22是例示了编码信息编码器110中所选择的块类型和所选择的块模式的示例的图。CBP是表明块中是否存在非零变换系数的1比特标记。这里,编码/解码CBP比特的块的单位根据所选择的变换的类型而变化。在图22中,用斜线表示没有要编码的变换系数的块(例如,处于跳过模式的块以及CBPX标记为0的块),并且用十字条纹表示不必编码CBP的块(例如,使用16x16变换的块)。
关于生成最低节点的方法,如果存在表明在已经发送的节点值和标记当中不存在当前块中要编码的变换系数的数据,则不针对没有编码变换系数的块生成节点。例如,如果没有通过图21所示的方法编码/解码数据,则不针对跳过块生成节点,并且不针对具有CBPX标记0的XxX(X:表明块大小的像素数)块生成节点。此外,在16x16变换的情况下,由于其能够从CBP16标记获知,所以不生成针对CBP的节点。
此外,针对具有非零变换系数的块来编码CBP。根据变换类型,关于节点数,如果针对亮度分量执行4x4变换或8x8变换,则用0或1表示8x8块中是否存在非零变换系数(即,每8x8像素块生成节点)。如果针对亮度分量执行8x16变换或16x8变换,则用0或1表示16x8或8x16块中是否存在非零变换系数(即,每16x8或8x16块生成节点)。关于色度分量,以8x8块为单位针对AC分量和DC分量生成节点(即,在AC分量中发送1比特,并且在DC分量中发送1比特)。
此外,下级节点的最小值用作用于生成上级节点的上级节点值,并且可以将表示16x16区域的节点定义为最高节点(或者可以不同地指定最高节点的大小)。
此外,如果上级节点值为1,则下级节点的值可以不被编码/解码;并且如果上级节点值为0,则下级节点值可以被编码。
如果如图22所示选择编码模式和变换类型,则CBP的传输单位可以如图23所示。在图23中,如果与16x16区域对应的块被用作最高块,则可以如图24所示分配最高节点值。
尽管上文已经说明根据块中是否存在变换系数分配CBP,但是CBP编码方法不限于此,而是可以改变,如使用CBP模式。
图25是例示了差量量化参数编码/解码的示例的图。在本发明的示例性实施方式中,可以仅发送宏块或具有要编码的非零变换系数的16x16像素块的差量量化参数。例如,发送具有非零CBP的帧内16x16像素块或帧间16x16像素块的差量量化参数。
作为一种编码差量量化参数的方法,各个差量量化参数可以通过将其变换为排列的码数或对码数进行树编码来进行编码。例如,如果各个16x16像素块的差量量化参数与图25所示相同,并且与差量量化参数对应排列的码数与表3相同,则图25的各个差量量化参数可以变换为表3的排列码数。
[表3]
Delta_qp值 码数 编码比特
0 0 0
1 1 10
-1 2 110
2 3 1110
-2 4 11110
3 5 111110
-3 6 1111110
... ... ...
具体地说,差量量化参数0可以变换为码数0,差量量化参数1可以变换为码数1,差量量化参数-1可以变换为码数2,差量量化参数2可以变换为码数3,差量量化参数-2可以变换为码数4,差量量化参数3可以变换为码数5,差量量化参数-3可以变换为码数6。类似地,还可以将其它差量量化参数变换为排列码数。当图25的差量量化参数被变换为以上的码数时,其可以表示为如图26所示。这样,可以基于被变换为码数的各个16x16像素块的节点值来生成树。作为第一示例,当从如图26所示被变换为码数并且分配为上级节点值的16x16像素块的节点值中选择了最小值时,其可以表示为如图27所示。
在图27A中,0和上级节点M0的节点值0之间的差值可以通过编码比特1来进行编码,并且下级节点M1(0,0),M1(0,1),M1(1,0)和M1(1,1)的节点值0与上级节点M0的节点值0之间的差值0也可以通过编码比特1来进行编码。
在图27B中,0和上级节点M0的节点值0之间的差值可以通过编码比特1来进行编码,下级节点M1(0,0)的节点值0和上级节点M0的节点值0之间的差值0可以通过编码比特1来进行编码,下级节点M1(0,1)的节点值2和上级节点M0的节点值0之间的差值2可以通过编码比特001来进行编码,下级节点M1(1,0)的节点值1和上级节点M0的节点值0之间的差值1可以通过编码比特01来进行编码,并且下级节点M1(1,1)的节点值3和上级节点M0的节点值0之间的差值3可以通过编码比特0001来进行编码。
在图27C中,0和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码,下级节点M1(0,0)和M1(0,1)的节点值1和上级节点M0的节点值1之间的差值0可以通过编码比特1来进行编码,下级节点M1(1,0)的节点值3和上级节点M0的节点值1之间的差值2可以通过编码比特001来进行编码,并且下级节点M1(1,1)的节点值2和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码。
在图27D中,0和上级节点M0的节点值2之间的差值2可以通过编码比特001来进行编码,下级节点M1(0,0),M1(0,1),M1(1,0)和M1(1,1)的节点值2和上级节点M0的节点值2之间的差值0可以通过编码比特1来进行编码。
在图27E中,0和上级节点M0的节点值2之间的差值2可以通过编码比特001来进行编码,下级节点M1(0,0),M1(0,1)和M1(1,0)的节点值2和上级节点M0的节点值2之间的差值0可以通过编码比特1来进行编码,并且下级节点M1(1,1)的节点值5和上级节点M0的节点值2之间的差值3可以通过编码比特0001来进行编码。
在图27F中,0和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码,下级节点M1(0,0)的节点值5和上级节点M0的节点值1之间的差值4可以通过编码比特00001来进行编码,下级节点M1(1,0)和M1(0,1)的节点值3和上级节点M0的节点值1之间的差值2可以通过编码比特001来进行编码,并且下级节点M1(1,1)的节点值1和上级节点M0的节点值1之间的差值0可以通过编码比特1来进行编码。
从下级节点分配上级节点的节点值的方法不限于以上方法,并且最大值可以从下级节点的节点值当中选择,并被分配为上级节点的节点值。作为第二方法的示例,当从如图26所示被变换为码数并且被分配为上级节点值的16x16像素块的节点值中选择了最小值时,其可以表示为如图28所示。
在图28A中,0和上级节点M0的节点值0之间的差值可以通过编码比特1来进行编码,并且针对下级节点M1(0,0),M1(0,1),M1(1,0)和M1(1,1)的节点值0与上级节点M0的节点值0之间的差值,可以跳过对比特进行编码。
在图28B中,0和上级节点M0的节点值3之间的差值3可以通过编码比特0001来进行编码,下级节点M1(0,0)的节点值0和上级节点M0的节点值3之间的差值1可以通过编码比特0001来进行编码,下级节点M1(0,1)的节点值2和上级节点M0的节点值3之间的差值1可以通过编码比特01来进行编码,下级节点M1(1,0)的节点值1和上级节点M0的节点值3之间的差值2可以通过编码比特001来进行编码,并且下级节点M1(1,1)的节点值3和上级节点M0的节点值3之间的差值0可以通过编码比特1来进行编码。
在图28C中,0和上级节点M0的节点值3之间的差值可以通过编码比特0001来进行编码,下级节点M1(0,0)和M1(0,1)的节点值1和上级节点M0的节点值3之间的差值2可以通过编码比特001来进行编码,下级节点M1(1,0)的节点值3和上级节点M0的节点值3之间的差值0可以通过编码比特1来进行编码,并且下级节点M1(1,1)的节点值2和上级节点M0的节点值3之间的差值1可以通过编码比特01来进行编码。
在图28D中,0和上级节点M0的节点值2之间的差值可以通过编码比特001来进行编码,下级节点M1(0,0),M1(0,1),M1(1,0)和M1(1,1)的节点值2和上级节点M0的节点值2之间的差值0可以通过编码比特1来进行编码。
在图28E中,0和上级节点M0的节点值5之间的差值可以通过编码比特000001来进行编码,下级节点M1(0,0),M1(0,1)和M1(1,0)的节点值2和上级节点M0的节点值5之间的差值3可以通过编码比特0001来进行编码,并且下级节点M1(1,1)的节点值5和上级节点M0的节点值5之间的差值0可以通过编码比特1来进行编码。
在图28F中,0和上级节点M0的节点值5之间的差值可以通过编码比特000001来进行编码,下级节点M1(0,0)的节点值5和上级节点M0的节点值5之间的差值0可以通过编码比特00001来进行编码,下级节点M1(1,0)和M1(0,1)的节点值3和上级节点M0的节点值5之间的差值2可以通过编码比特001来进行编码,并且下级节点M1(1,1)的节点值1和上级节点M0的节点值5之间的差值4可以通过编码比特00001来进行编码。
在将下级节点值当中的最小值分配为最高节点值的方法中,为了编码最高节点值而对与0的差值进行编码。然而,可以对具有高出现频率的特定值与最高节点值之间的差值进行编码。这里,可以对所使用的特定值进行编码并将其通知给解码器。另选的是,可以使用排列值,并且编码器和解码器可以按照相同的方式工作来计算排列值。
此外,作为树生成的第三方法,如果下级节点值当中的最小值被分配为上级节点值,则可以对最大值进行编码并将其通知给解码器;并且如果下级节点值当中的最大值被分配为上级节点值,则可以对最小值进行编码并将其范围通知给解码器。例如,关于对应于下级节点值当中的最小值被分配为上级节点值的情况的图27B的对比特进行编码,0和上级节点M0的节点值0之间的差值可以通过编码比特1来进行编码,下级节点M1(0,0)的节点值0和上级节点M0的节点值0之间的差值0可以通过编码比特1来进行编码,下级节点M1(0,1)的节点值2和上级节点M0的节点值0之间的差值2可以通过编码比特001来进行编码,下级节点M1(1,0)的节点值1和上级节点M0的节点值0之间的差值1可以通过编码比特01来进行编码,并且针对下级节点M1(1,1)的节点值3和上级节点M0的节点值0之间的差值3,可以跳过对比特进行编码。此外,例如,关于对应于下级节点值当中的最大值被分配为上级节点值的情况的图28D的对比特进行编码,0和上级节点M0的节点值2之间的差值2可以通过编码比特001来进行编码,下级节点M1(0,0),M1(0,1),M1(1,0)和M1(1,1)的节点值2和上级节点M0的节点值2之间的差值0可以通过编码比特1来进行编码。
此外,作为对差量量化参数进行编码的另一方法,可以对差量量化参数的绝对值进行编码,于是可以仅对非零差量参数进行编码。例如,当针对图25的差量量化参数采用绝对值时,其可以表示为如图29所示,并且在该情况下也可以应用上述的树生成方法。
当使用第一树生成方法并且在传输之前对最大值进行编码时,如图30所示,最小值可以从下级节点值当中选择并被分配为上级节点值,并且可以利用表3来对绝对值进行编码。
在图30A中,可以通过0来对最大值0的编码比特进行编码,并且针对0和上级节点M0的节点值0之间的差值0以及下级节点M1(0,0),M1(0,1),M1(1,0)和M1(1,1)的节点值0与上级节点M0的节点值0之间的差值,可以跳过对编码比特进行编码。
在图30B中,可以通过编码比特001来对最大值2进行编码,0和上级节点M0的节点值0之间的差值0可以通过编码比特1来进行编码,下级节点M1(0,0)的节点值0和上级节点M0的节点值0之间的差值0可以通过编码比特1来进行编码,下级节点M1(0,1)和M1(1,0)的节点值1和上级节点M0的节点值0之间的差值1可以通过编码比特001来进行编码,并且下级节点M1(1,1)的节点值2和上级节点M0的节点值0之间的差值2可以通过编码比特001来进行编码。
在图30C中,可以通过编码比特001来对最大值2进行编码,0和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码,下级节点M1(0,0)和M1(1,0)的节点值1和上级节点M0的节点值1之间的差值0可以通过编码比特1来进行编码,下级节点M1(1,0)的节点值2和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码,并且下级节点M1(1,1)的节点值1和上级节点M0的节点值1之间的差值0可以通过编码比特1来进行编码。
在图30C中,可以通过编码比特1来对最大值1进行编码,并且针对0和上级节点M0的节点值1之间的差值1以及下级节点M1(0,0),M1(0,1),M1(1,0)和M1(1,1)的节点值1与上级节点M0的节点值1之间的差值0,可以跳过对编码比特进行编码。
在图30E中,可以通过编码比特0001来对最大值3进行编码,0和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码,下级节点M1(0,0),M1(1,0)和M1(1,0)的节点值1和上级节点M0的节点值1之间的差值0可以通过编码比特1来进行编码,并且下级节点M1(1,1)的节点值3和上级节点M0的节点值1之间的差值2可以通过编码比特001来进行编码。
在图30F中,可以通过编码比特0001来对最大值3进行编码,0和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码,下级节点M1(0,0)的节点值3和上级节点M0的节点值1之间的差值2可以通过编码比特001来进行编码,下级节点M1(1,0)和M1(1,0)的节点值2和上级节点M0的节点值1之间的差值1可以通过编码比特01来进行编码,并且针对下级节点M1(1,1)的节点值1和上级节点M0的节点值1之间的差值0,可以跳过对编码比特进行编码。
接着,针对符号进行编码。例如,如果符号是+,则可以使用0;如果符号是-,则可以使用1。还可以分配相反的编码比特。在该情况下,上级节点可以使用下级节点的最小值,也可以使用最大值。在图30中,除了差量量化参数的绝对值是0的情况以外,针对差量量化参数的符号的编码,0被分配给+,1被分配给-。当从各个下级节点值当中选择最小值并将其分配为上级节点值时,其可以表示为如图31所示。在图30A中,绝对值全部为0,不存在要编码的数据。
在图31B中,0和上级节点值0之间的差值0可以通过编码比特1来进行编码。由于M1(0,0)的节点值为0,所以可以跳过对编码比特进行编码。M1(0,1)的节点值1和上级节点值0之间的差值1可以通过编码比特0来进行编码,并且M1(1,0)和M1(1,1)的节点值0和上级节点值0之间的差值0可以通过编码比特1来进行编码。
在图31C中,0和上级节点值0之间的差值0可以通过编码比特1来进行编码,M1(0,0)、M1(0,1)和M1(1,0)的节点值0和上级节点值0之间的差值0可以通过编码比特1来进行编码,并且M1(1,1)的节点值1和上级节点值0之间的差值1可以通过编码比特0来进行编码。
在图31D中,0和上级节点值1之间的差值1可以通过编码比特0来进行编码,针对M1(0,0)、M1(0,1)、M1(1,0)和M1(1,1)的节点值1和上级节点值1之间的差值0,可以跳过对编码比特进行编码。
在图31E中,0和上级节点值1之间的差值1可以通过编码比特0来进行编码,针对M1(0,0)、M1(0,1)、M1(1,0)和M1(1,1)的节点值1和上级节点值1之间的差值0,可以跳过对编码比特进行编码。
在图31F中,0和上级节点值0之间的差值0可以通过编码比特1来进行编码,M1(0,0)、M1(0,1)、M1(1,0)和M1(1,1)的节点值0和上级节点值0之间的差值0可以通过编码比特1来进行编码。
图32是例示了根据本发明的实施方式的视频解码设备的示意性构造的框图。
根据本发明的实施方式的视频解码设备3200可以包括编码信息解码器3210和视频解码器3300。
编码信息解码器3210对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息以及表明块是否被划分为子块的分割模式信息,并且根据块模式信息和分割模式信息的组合对比特流进行解码,以重构块的跳过运动信息或包括块的块类型信息和预测信息的预测编码信息。
例如,编码信息解码器3210对具有如图6所示的句法结构的比特流进行解码。首先,编码信息解码器3210通过从比特流中提取分配给块模式信息字段的数据和分配给分割模式信息字段的数据并对其进行解码来重构块模式信息和分割模式信息。如图6A所示,编码信息解码器3210通过根据重构的块模式信息和分割模式信息的组合从比特流中提取分配给跳过运动信息字段的数据并对其进行解码来重构跳过运动信息。如图6B所示,编码信息解码器3210通过从比特流中提取分配给块类型信息字段、预测信息字段、CBP子块标记字段、变换类型信息字段、CBP字段以及差量QP字段的数据并对其进行解码来重构包括块类型信息、预测信息、CBP子块信息、变换类型信息、CBP信息以及差量QP信息的预测编码信息。这里,在预测编码信息当中,CBP子块标记字段、变换类型信息字段、CBP字段和差量QP字段不必被重构,但是可以仅当它们排列在视频编码设备100和视频解码设备3200之间时才进行重构。
视频解码器3300基于跳过运动信息来重构块或者通过对通过基于预测编码信息解码比特流而重构的系数信息进行解码来重构块。
例如,当通过编码信息解码器3210来重构跳过运动信息时,视频解码器3300通过经由对要解码的块进行运动补偿来生成块或者利用所重构的跳过运动信息生成块的各个子块来重构要解码的块。当通过编码信息解码器3210来重构预测编码信息时,视频解码器3300通过利用所重构的预测编码信息对对要解码的块或者该块的各个子块进行帧内预测或帧间预测来生成预测块,通过对比特流进行解码来重构系数信息,并且通过将预测块与通过所重构的系数信息而生成的残留块相加来重构要解码的块。
图33是例示了视频解码器3300的示意性构造的图。参照图33,视频编码器3300可以包括解码器、逆量化器/逆变换器、预测器、加法器、滤波器和图片缓冲器。预测器可以包括运动补偿器。
图34是例示了根据本发明的实施方式的视频解码方法的流程图。
在根据本发明的实施方式的视频解码方法中,视频解码设备3200对比特流进行解码,以重构表明要解码的块是否为跳过模式的块模式信息和表明块是否被划分为子块的分割模式信息(S3410)。具体地说,视频解码设备3200通过从针对要解码的块的比特流中提取通过对块模式信息进行编码而生成的数据以及通过对分割模式信息进行编码而生成的数据并对其进行解码来重构块模式信息和分割模式信息。
视频解码设备3200通过根据块模式信息和划分模式信息的组合对比特流进行解码来重构块的跳过运动信息或包括块的块类型信息和块的预测信息的预测编码信息(S3420)。视频解码设备3200基于跳过运动信息或者通过对通过基于预测编码信息对比特流进行解码而重构的系数信息进行解码来重构块(S3430)。具体地说,视频解码设备3200根据与块模式信息是否表明要编码的块的块模式是跳过模式以及分割模式信息是否表明块被划分为子块的组合对应的各种情况按照不同的方式对块进行编码。
下文中,假设要编码的块是64x64像素宏块并且块被划分为16x16像素子块来描述由视频解码设备3200执行步骤S3420和步骤S3430的处理的示例。
在步骤S3420中,如果块模式信息表明块的块模式是跳过模式并且分割模式信息表明块没有被划分为子块,则视频解码设备3200可以通过解码比特流来重构块的跳过运动信息。具体地说,视频解码设备3200通过从比特流中提取通过对跳过运动信息进行编码而生成的数据并对其进行解码来重构跳过运动信息,其中,跳过运动信息被重构为要解码的块的一条运动信息。在该情况下,在步骤S3430中,视频解码设备3200通过利用所重构的跳过运动信息对要解码的块进行运动补偿生成块来重构要解码的块。
在步骤S3420中,如果块模式信息表明块的块模式是跳过模式并且分割模式信息表明块被划分为子块,则视频解码设备3200可以通过对比特流进行解码来重构块的各个块的跳过运动信息。具体地说,视频解码设备3200通过从比特流中提取通过编码跳过运动信息而生成的数据并对其进行解码来重构跳过运动信息,其中,跳过运动信息被重构为要解码的块的各个子块的多个运动信息。在该情况下,在步骤S3430中,视频解码设备3200通过利用各个子块的重构的跳过运动信息对要解码的块的各个子块进行运动补偿生成子块来重构要解码的块的各个子块,并且通过所重构的子块来重构要解码的块。
在步骤S3420中,如果块模式信息表明块的块模式不是跳过模式并且分割模式信息表明块没有被划分为子块,则视频解码设备3200可以通过对比特流进行解码来重构预测编码信息。具体地说,视频解码设备3200通过从比特流中提取通过对预测编码信息进行编码而生成的数据并对其进行解码来重构预测编码信息,其中,预测编码信息被重构为要解码的块的一条预测编码信息。在该情况下,在步骤S3430中,视频解码设备3200通过基于预测编码信息的预测信息和块类型信息从比特流中提取通过编码系数信息而生成的数据并对其进行解码来重构系数信息,通过对所重构的系数信息进行逆量化和逆变换来重构残留块,通过基于块类型信息和预测信息对要解码的块进行预测来生成预测块,并且通过将残留块和预测块相加来重构要解码的块。
在步骤S3420中,如果块模式信息表明块的块模式不是跳过模式,并且分割模式信息表明块被划分为子块,则视频解码设备3200可以通过对比特流进行解码来重构块的子块的预测编码信息。具体地说,视频解码设备3200通过从比特流中提取通过对预测编码信息进行编码而生成的数据并对其进行解码来重构预测编码信息,其中,预测编码信息被重构为要解码的块的各个子块的多个预测编码信息。在该情况下,在步骤S3430中,视频解码设备3200通过基于预测编码信息的预测信息和块类型信息从比特流中提取通过编码系数信息而生成的数据并对其进行解码来重构各个子块的系数信息,通过对所重构的各个子块的系数信息进行逆量化和逆变换来重构残留块,通过基于块类型信息和预测信息对各个子块进行预测来生成预测子块,并且通过将残留子块和预测子块相加来重构各个子块,从而重构要解码的块。
这里,块类型信息可以是基于块的子块的分割类型以及块是帧间宏块还是帧内宏块而分配给多个可用块类型的块类型编号。预测编码信息还可以包括子块的一个或更多个变换类型信息、子块的CBP信息以及子块的差量量化参数信息。块类型信息可以包括表明块是帧间宏块还是帧内宏块的块类型标记以及表明子块的分割类型的分割类型信息。
此外,如果所重构的块模式信息表明要解码的块的块模式不是跳过模式,并且所重构的分割模式信息表明块被划分为子块,则除了表明块是帧间宏块还是帧内宏块的块类型标记以及表明块的子块的分割类型的分割类型信息以外,块类型信息还可以包括表明子块的块模式是跳过模式的跳过子块标记。具体地说,如果要解码的块的块模式不是跳过模式并且块被划分为子块,则视频解码设备3200可以不必从比特流中提取通过对预测编码信息进行编码而生成的数据以及通过针对各个子块对系数信息进行编码而生成的数据并且对其进行解码。如果通过仅对来自比特流的跳过子块标记进行解码确定了特定子块的跳过模式是跳过模式,则视频解码设备3200可以跳过对相关子块进行解码。
在步骤S3420中,视频解码设备3200可以使用树结构在解码比特流时重构分割类型信息,以重构块类型信息。
下文中,参照图7和图8,将给出对根据本发明的实施方式在对比特流进行解码时利用树结构重构分割类型信息以重构块类型信息的处理的描述。
当由视频编码设备100对最高节点值进行编码时,分割类型编号被设置为分割类型值,按照分割类型的出现频率的降序设置大的分割类型编号,并且利用二进制比特0和1对相对于最大分割类型编号的差值进行编码。在该情况下,视频解码设备3200从比特流中提取通过对分割类型信息进行编码而生成的数据,通过对所提取的数据的二进制比特0和1进行解码来重构差值,并且通过从最大分割类型编号中减去所重构的差值来重构最高节点值。这里,为了重构差值,视频解码设备3200读入通过对分割类型信息进行编码而生成的数据的一个比特,并对其进行解码,重构该二进制比特,并且如果所重构的二进制比特为0则读入下一个比特。这样,视频解码设备3200继续重构二进制比特0,直到重构了二进制比特1为止,并且如果所重构的比特是1,则不再读入二进制比特,其中,差值是所重构的二进制比特0的系数。然而,如果读入比特的数量对应于分割类型编号的最大值和最小值之间的差值,则不读入下一个比特,其中,差值是所重构的二进制比特0的系数(在该情况下,差值是分割类型编号的最大值和最小值之间的差值)。
另一方面,当由视频编码设备100对最高节点值进行编码时,分割类型编号被设置为分割类型值,按照分割类型的出现频率的升序设置大分割类型编号,并且利用二进制比特0和1对相对于最小分割类型编号的差值进行编码。在该情况下,视频解码设备3200从比特流中提取通过对分割类型信息进行编码而生成的数据,通过对所提取的数据的二进制比特0和1进行解码来重构差值,并且通过从最小分割类型编号中减去所重构的差值来重构最高节点值。这里,由视频解码设备3200重构差值的方法与以上所述相同。
此外,当由视频编码设备100对最高节点值进行编码时,如上所述利用二进制比特0和1对差值0进行编码。在该情况下,视频解码设备3200从比特流中提取通过对分割类型信息进行编码而生成的数据,通过对所提取的数据的二进制比特0和1进行解码来重构差值,并且重构所重构的差值作为最高节点值。这里,由视频解码设备3200重构差值的方法与以上所述相同。
下文中,视频解码设备3200对最高节点的下级节点的节点值进行解码。视频编码设备100通过对与要编码的节点的节点值和上级节点的节点值之间的差值一样多的二进制比特0进行编码来编码节点值。在该情况下,当对各个节点的节点值进行解码时,视频解码设备3200读入从比特流中提取并读入的比特的下一个比特并对其进行解码,以重构最高节点值,并且如果所重构的二进制比特为0,则读入下一个比特并对其进行解码。如果上级节点的重构的节点值是分割类型编号的最大可能值,则二进制比特不被重构,并且分割类型编号的最大可能值被重构为要解码的节点值。如果所重构的比特值是1,则不再读入比特,二进制比特0的数量被重构为差值,通过将节点的节点值与所重构的差值相加来重构要解码的节点的节点值。如果视频编码设备100通过对与要编码的节点的节点值和上级节点的节点值之间的差值一样多的二进制比特0进行编码来编码节点值,则通过逐个比特解码来重构二进制比特,直到上述方法中重构的二进制比特为0为止。
然而,在重构要解码的节点值时,如果与目前为止重构的二进制比特0的数量对应的差值和相关节点的上级节点的节点值的和是分割类型编号的最大可能值,则不再读入比特,并且分割类型编号的最大可能值被重构为该相关节点值。此外,当具有相同上级节点的节点当中的最后节点的节点值被重构时,如果除最后节点以外的节点的节点值大于上级节点的节点值,则不再读入比特,并且上级节点的节点值被重构为最后节点的节点值。
作为利用树结构对分割类型信息进行解码的另一实施方式,如果图7A所示的子块的分割类型值被分组,并且在确定图7B的分组区域的分割类型值时按照出现频率的降序设置各个分割类型编号,则通过从上级节点的节点值中减去节点值来重构当前节点的节点值。
如上所述,根据本发明的实施方式,由于可以根据要编码的视频的块的分割模式和块模式的组合来有效地编码/解码相关块,所以可以提高视频压缩效率。
以上已经通过本发明的实施方式描述了根据要编码的块的分割模式信息和块模式信息的组合对相关块编码的方法以及通过编码生成的比特流的句法结构。下文中,将通过本发明的另一实施方式来描述通过根据要编码的块的跳过类型信息选择性地使用针对相关块的编码方案来对视频进行编码的方法。
图35是例示了根据本发明的另一实施方式的视频编码设备的示意性构造的框图。
根据本发明的另一实施方式的视频编码设备3500可以包括编码信息编码器3510和视频编码器3520。
编码信息编码器3520对表明要编码的视频的块的跳过类型的跳过类型新信息进行编码,并且根据该跳过类型信息对块的跳过运动信息进行编码。具体地说,如果要编码的块的块模式是跳过模式,则编码信息编码器3510对表明块的跳过类型的跳过类型信息进行编码,并且基于该跳过类型信息对块的跳过运动信息进行编码。例如,如果块的跳过类型表明块的跳过运动信息被编码,则编码信息编码器3510对块的跳过运动信息进行编码。
视频编码器3520根据块的跳过类型信息对块的系数信息进行编码。具体地说,如果要编码的块的块模式是跳过模式,则视频编码器3520基于跳过类型信息对块的系数信息进行编码。例如,如果块的跳过类型表明块的系数信息被编码,则编码信息编码器3520对块的跳过运动信息进行编码。与参照图1描述的根据本发明的实施方式的视频编码器200类似,视频编码器3520可以包括预测器、减法器、变换器/量化器、编码器、逆量化器/逆变换器、加法器、滤波器和图片缓冲器。
如果块的跳过类型信息表明跳过了对块的编码,则仅对跳过类型信息进行编码,而无需对相关块的跳过运动信息和系数信息进行编码。
图36是例示了根据本发明的另一实施方式的视频编码方法的流程图。
在根据本发明的另一实施方式的视频编码方法中,视频编码设备3500对表明要编码的视频的块的跳过类型的跳过类型信息进行编码(S3610)。这里,跳过类型表明如何在块的块模式是跳过模式时对跳过模式块进行编码。具体地说,如果要编码的块的块模式是跳过模式,则在对块的跳过模式进行编码时,视频编码设备3500对表明是否仅对块的系数信息进行编码、仅对块的运动信息进行编码或者跳过对块的编码的跳过类型信息进行编码。
跳过类型信息可以通过1比特跳过类型标记实现,并且跳过类型可以通过1比特跳过类型标记来表示,如以下三种情况。例如,如果跳过类型标记是0,则表明跳过模式跳过对块的编码;如果跳过类型标记是1,则表明跳过模式对跳过运动向量进行编码,而无需对块的系数信息进行编码。作为另一示例,如果跳过类型标记是0,则表明跳过模式跳过对块的编码;如果跳过类型标记是1,则表明跳过模式对块的系数信息进行编码,而无需对跳过运动向量进行编码。作为另一示例,如果跳过类型标记为0,则表明跳过模式对跳过运动向量进行编码,而无需对块的系数信息进行编码;如果跳过类型标记为1,则表明跳过模式对块的系数信息进行编码,而无需对跳过运动向量进行编码。
根据跳过类型信息,视频编码设备3500跳过对块的编码,对块的跳过运动信息进行编码,或者对块的系数信息进行编码(S3620)。
这里,跳过类型信息可以表明跳过对块的编码或者可以表明块的跳过运动信息被编码。另选地,跳过类型信息可以表明跳过对块的编码或者可以表明块的系数信息被编码。另选地,跳过类型信息可以表明块的跳过运动信息被编码或者可以表明块的系数信息被编码。
因而,在步骤3620中,如果跳过类型信息表明块的跳过类型跳过对块的编码,则视频编码设备3500跳过对块的编码。
此外,在步骤3620中,如果跳过类型信息表明块的跳过类型对块的跳过运动信息进行编码,则视频编码设备3500对要编码的块的跳过运动信息进行编码,而无需对相关块的系数信息进行编码。
此外,在步骤3620中,如果跳过类型信息表明块的跳过类型对块的系数信息进行编码,则视频编码设备3500对要编码的块的系数信息进行编码,而无需对相关块的跳过运动信息进行编码。在该情况下,可以利用基于相关块的相邻块的运动信息而确定的运动信息对要编码的块的系数信息进行预测编码。
图37是例示了根据本发明的另一实施方式的视频解码设备3700的示意性构造的框图。
根据本发明的另一实施方式的视频解码设备3700可以包括编码信息解码器3710和视频解码器3720。
编码信息解码器3710通过对比特流进行解码来重构表明要编码的视频的块的跳过类型的跳过类型信息,并且通过根据该跳过类型信息对比特流进行解码来重构块的跳过运动信息。
根据跳过类型信息,视频解码器3720基于根据预定方案而确定的运动信息、跳过运动信息或者通过解码比特流重构的系数信息来重构块。
具体地说,如果由编码信息解码器3710重构的跳过类型信息表明块的跳过类型对跳过运动向量进行编码,则视频编码器3720利用由编码信息解码器3710重构的跳过运动信息来重构通过对要解码的块的运动进行补偿而生成的块,作为要解码的块。此外,如果由编码信息解码器3710重构的跳过类型信息表明块的系数信息被编码,则视频编码器3720通过对比特流进行解码来重构系数信息,通过对系数信息进行逆量化和逆变换来重构残留块,并且通过将残留块与通过利用根据预定方案而确定的运动信息执行运动补偿所生成的预测块相加来重构要解码的块。如果由编码信息解码器3710重构的跳过类型信息表明跳过了对块的编码,则视频编码器3720利用根据预定方案而确定的运动信息来重构通过对要解码的块进行运动补偿所生成的块,作为要解码的块。
这里,根据预定方案而确定的运动信息可以是利用相邻块的运动信息而确定的运动信息,但是不限于此,可以是根据各种其它方案确定的运动信息。
图38是例示了根据本发明的实施方式的视频解码方法的流程图。
在根据本发明的实施方式的视频解码方法中,视频解码设备3700通过对比特流进行解码来重构表明要解码的块的跳过类型的跳过类型信息(S3810),并且根据跳过类型信息、基于根据预定方案确定的运动信息、通过对比特流进行解码重构的块的跳过运动信息或者通过对比特流进行解码重构的系数信息来重构块(S3820)。
在步骤S3810中,视频解码设备3700可以仅当块的块模式是跳过模式时重构跳过类型信息。具体地说,仅当要解码的块的块模式是跳过模式时,通过对跳过类型信息进行编码而生成的数据才被包括在比特流中。因此,仅当块的块模式是跳过模式时,通过对跳过类型信息进行编码而生成的数据被提取并解码,以重构跳过类型信息。
在步骤3820中,如果所重构的跳过类型信息表明跳过了对块的编码,则视频解码设备3700可以基于根据预定方案而确定的运动信息来重构块。具体地说,如果跳过类型信息表明跳过了对块的编码,则视频编码设备3500跳过对块的编码,并且比特流不包括通过对系数信息进行编码而生成的块或数据的编码信息。因此,视频解码设备3700不从比特流中提取数据,根据利用视频编码设备3500安排的预定方案来确定块的运动信息(即,运动向量和基准图片索引),并且重构通过利用确定的运动信息对块的运动进行补偿而生成的块,作为要解码的块。
在步骤3820中,如果跳过类型信息表明块的跳过运动信息被编码,则视频解码设备3700可以基于通过对比特流进行解码而重构的块的跳过运动信息来重构块。具体地说,如果跳过类型信息表明块的跳过运动信息被编码,则视频编码设备3500不对块的系数信息而是对块的跳过运动信息进行编码,并且比特流不包括通过对系数信息进行编码而生成的数据。因此,视频解码设备3700通过从比特流中提取通过对跳过运动信息进行编码而生成的数据并对其进行解码来重构跳过运动信息,并且重构通过利用所重构的跳过运动信息对块的运动进行补偿而生成的块,作为要解码的块。
在步骤S3820中,如果跳过类型信息表明块的系数信息被编码,则视频解码设备3700可以基于通过对比特流进行解码而重构的系数信息来重构块。具体地说,如果跳过类型信息表明块的系数信息被编码,则视频编码设备3500不对块的跳过运动信息而是对块的系数信息进行编码,并且比特流不包括通过对系数信息进行编码而生成的数据。因此,视频解码设备3700通过从比特流中提取通过对系数信息进行编码而生成的数据并对其进行解码来重构系数信息,通过对所重构的系数信息进行逆量化和逆变换来重构残留块,根据利用视频编码设备3500安排的预定方案来确定块的运动信息(即,运动向量和基准图片索引),并且通过将所重构的残留块与通过利用所确定的运动信息对块的运动进行补偿而生成的预测块相加来重构要解码的块。
第二实施方式
下文将描述本发明的第二实施方式。具体地说,将在本发明的第二实施方式中描述对与变换子块相关的变换信息(例如,变换类型、变换子块分割标记和CBP标记)的树结构进行编码的另一实施方式。
根据第二实施方式,可以通过将各个宏块或子块划分为可变大小的块来生成变换子块。此外,可以根据变换子块来确定变换类型。另选地,可以根据预测模式来确定变换类型。
在该情况下,关于可用变换子块的大小和类型的信息可以包括在各个头中。头的示例可以包括片头、图片头和序列头。此外,最大变换子块大小和最小变换子块大小可以被编码,并且最小变换子块大小可以随帧内预测和帧间预测而不同。例如,如果最大变换子块大小是64x64并且最小变换子块大小是4x4,则帧内预测块的最小变换子块大小可以被编码为16x16。在该情况下,对于帧内预测块的变换可用的变换子块大小可以是64x64,32x32和16x16,并且对于帧间预测块的变换可用的变换子块大小可以是64x64,32x32,16x16,8x8和4x4。
图39是例示了根据本发明的第二实施方式的变换信息编码的示例的图。
图39A例示了当前宏块被划分为子块的情况。具体地说,当前宏块被划分为四个子块A、B、C和D。
图39B例示了当前宏块中的子块的预测子块。具体地说,子块A是跳过模式,子块B被划分为四个16x16像素帧内预测子块,子块C被划分为两个8x16帧间预测子块,子块D被划分为两个16x8帧间预测子块。
图39C例示了当前宏块中的子块的变换子块的大小。具体地说,子块A因为其为跳过模式而没有被变换。子块B被变换并被量化为8x8像素变换子块,子块C被变换并被量化为16x16像素变换子块。
图39D、图39E和图39F例示了一个亮度分量和两个色度分量的CBP标记。
图39G例示了当前宏块中的子块的块编号。
图40是例示了利用树结构对图39中的子块B的变换信息进行编码的示例的图。
参照图39和图40,表明当前子块B中是否存在亮度分量和色度分量的非零变换系数的Sub_block_CBP_flag被编码,接着表明当前子块是否被划分为变换子块的split_flag被编码。此后,针对各个变换子块对色度分量(Cr,Cb)和亮度分量(Y)的CBP_flag和split_flag进行编码。参照图39G,按照Cb_CBP_flag,Cr_CBP_flag和split_flag的顺序将被划分为P1、P2、P3和P4的变换子块的split_flag和cbp_flag编码为1/1/1,并且按照Cb_CBP_flag,Cr_CBP_flag,split_flag和Y_CBP_flag的顺序对各个变换子块的被划分的变换子块P1、P2、P3和P4进行编码。按照相同的顺序和句法对其它变换子块进行编码。
这里,可以利用根据周边情况的不同的上下文通过上下文自适应二进制算术编码(CABAC)对各个句法进行编码,或者可以无需使用句法将句法值变换为1比特。
图41是例示了利用树结构对图39中的子块C的变换信息进行编码的示例的图。
参照图39和图41,当前子块C是没有被划分为变换子块的帧间预测块。因而,当前子块C的Sub_block_CBP_flag被编码为1,split_flag被编码为0,并且Cb_CBP_flag,Cr_CBP_flag和Y_CBP_flag被顺序地编码。
图42是例示了利用树结构对图39中的子块C的变换信息进行编码的另一示例的图。
参照图39和图42,表明当前子块是否被划分为变换子块的split_flag被编码,接着CBP标记(Cb,Cr,Y)被编码。在该情况下,sub_block_CBP_flag可以不被编码。此外,最高节点的sub_block_CBP_flag和split_flag的序列可以在所有子块的各个树结构中改变。
图43是例示了利用树结构对图39中的子块D的变换信息进行编码的示例的图。
参照图39和图43,当前子块D是被划分为变换子块的帧间预测块。因而,当前子块D的sub_block_CBP_flag和split_flag被编码为1。此后,参照图39G,按照split_flag,Cb_CBP_flag,Cr_CBP_flag和Y_CBP_flag的顺序对按照P15,P16,P17和P18的顺序划分的各个变换子块的split_flag和cbp_flag进行编码。
以上句法和句法的顺序仅是示例性的且并不限于以上示例。根据本发明的实施方式的变换信息的编码数据可以包括变换信息sub_block_CBP_flag,split flag和cbp_flag(针对各个分量)当中的一个或更多个句法和变换信息。具体地说,其包括表明各个子块的色度分量和亮度分量中是否存在非零变换系数的sub_block_CBP_flag被编码为最高节点值的情况。
由于根据本发明的实施方式的变换信息解码对应于变换信息编码的逆处理,所以本领域技术人员可以从以上变换信息编码处理来理解变换信息解码处理。
如上所述,根据本发明的实施方式,按照各种模式定义了块的跳过模式。由于可以根据视频特性和/或实施模式选择性地使用各种模式来对视频进行编码/解码,所以可以提高视频压缩效率。
尽管已经针对例示了性目的描述了本发明的示例性方面,但是本领域技术人员将理解,无需脱离本发明的实质特性,可以进行各种修改、添加和替换。因此,本发明的示例性方面不是针对限制目的而描述的。因此,本发明的范围不由以上方面而由权利要求及其等同物限定。
工业实用性
如上所述,本发明的实施方式对于由视频编码/解码进行视频压缩的领域的应用非常有用,因为它们能够通过对用于视频编码的编码信息进行有效编码并且通过选择性使用各种编码方案和解码方案进行视频编码来提高视频压缩效率。
相关申请的交叉引用
如果适用,本申请要求在韩国于2010年4月16提交的专利申请No.10-2010-0035533以及于2011年4月16日提交的专利申请No.10-2011-0035424在35U.S.C§119(a)下的优先权,通过引用将其全部内容并入本文。此外,该非临时申请以基于韩国专利申请相同的原因要求在除美国以外的国家的优先权,并且通过引用将其全部内容并入本文。

Claims (48)

1.一种视频编码/解码设备,该视频编码/解码设备包括:
视频编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,根据所述块模式信息和所述分割模式信息的组合对所述块的变换类型信息、编码块模式(CBP)信息和差量量化参数信息中的至少一个进行编码,并且基于所述块的经编码信息对所述块的系数信息进行编码;以及
视频解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息而编码的变换类型信息,并且基于所重构的信息或者通过对所述比特流进行解码来重构所述块。
2.一种视频编码设备,该视频编码设备包括:
编码信息编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码并且根据所述块模式信息和所述分割模式信息的组合对所述块的变换类型信息进行编码;以及
视频解码器,其基于所述块的所述变换类型信息对所述块的系数信息进行编码。
3.根据权利要求2所述的视频编码设备,其中,
所述编码信息编码器基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的所述最低节点值来生成树结构的最高节点值。
4.根据权利要求2所述的视频编码设备,其中,
所述编码信息编码器按照16×16像素块为单位来选择所述宏块的变换类型,并且使用与按照16×16像素块为单位选择的变换类型相同的16×16像素块中的子块的变换类型。
5.根据权利要求2所述的视频编码设备,其中,
所述编码信息编码器按照块为单位来选择所述宏块中的大小等于或大于16×16像素块的块的变换类型,并且按照16×16像素块为单位来选择所述宏块中的被划分为小于16×16像素块的块的子块的变换类型。
6.根据权利要求2所述的视频编码设备,其中,
所述编码信息编码器在没有变换系数的情况下跳过对块的变换类型进行编码的操作。
7.根据权利要求2所述的视频编码设备,其中,
如果所述块的块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码器跳过对变换类型进行编码的操作。
8.一种视频编码设备,该视频编码设备包括:
编码信息编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的编码块模式(CBP)信息进行编码;以及
视频编码器,其基于所述块的所述CBP信息对所述块的系数信息进行编码。
9.根据权利要求8所述的视频编码设备,其中,
所述块的所述CBP信息是表明所述块中是否存在非零变换系数的1比特标记。
10.根据权利要求8所述的视频编码设备,其中,
如果预发送的模式值或标记包括表明当前块中不存在要编码的变换系数的信息,则所述编码信息编码器跳过生成所述当前块的节点值的操作。
11.根据权利要求8所述的视频编码设备,其中,
如果所述块包括非零变换系数,则所述编码信息编码器对所述CBP信息进行编码。
12.根据权利要求11所述的视频编码设备,其中,
如果所述块的亮度分量经4×4变换或8×8变换,则所述编码信息编码器根据8×8像素块中是否存在非零变换系数来生成节点值。
13.根据权利要求11所述的视频编码设备,其中,
如果所述块的亮度分量经8×16变换或16×8变换,则所述编码信息编码器根据8×16像素块或16×8像素块中是否存在非零变换系数来生成节点值。
14.根据权利要求8所述的视频编码设备,其中,
如果所述块的块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码器跳过生成用于对CBP信息进行编码的节点值的操作。
15.根据权利要求8所述的视频编码设备,其中,
所述编码信息编码器基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
16.一种视频编码设备,该视频编码设备包括:
编码信息编码器,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的差量量化参数信息进行编码;以及
视频编码器,其基于所述块的所述差量量化参数信息对所述块的系数信息进行编码。
17.根据权利要求16所述的视频编码设备,其中,
所述编码信息编码器基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
18.根据权利要求16所述的视频编码设备,其中,
所述编码信息编码器仅对所述宏块或所述宏块中的具有非零变换系数的16×16像素块的所述差量量化参数信息进行编码。
19.根据权利要求16所述的视频编码设备,其中,
所述编码信息编码器将所述差量量化参数信息变换为预定码数,接着通过树结构对所述预定码数进行编码。
20.根据权利要求16所述的视频编码设备,其中,
所述编码信息编码器对所述差量量化参数信息的绝对值进行编码,接着仅对非零差量量化参数信息进行编码。
21.一种视频解码设备,该视频解码设备包括:
编码信息解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的变换类型信息;以及
视频解码器,其基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
22.一种视频解码设备,该视频解码设备包括:
编码信息解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的编码块模式(CBP)信息;以及
视频解码器,其基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
23.一种视频解码设备,该视频解码设备包括:
编码信息解码器,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的差量量化参数信息;以及
视频解码器,其基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
24.一种视频编码/解码方法,该视频编码/解码方法包括以下处理:
对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,根据所述块模式信息和所述分割模式信息对所述块的变换类型信息、编码块模式(CBP)信息和差量量化参数信息中的至少一个进行编码,并且基于所述块的经编码信息对所述块的系数信息进行编码;以及
对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息而编码的变换类型信息,并且基于所重构的信息或者通过对所述比特流进行解码来重构所述块。
25.一种视频编码方法,该视频编码方法包括以下处理:
编码信息编码处理,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码并且根据所述块模式信息和所述分割模式信息的组合对所述块的变换类型信息进行编码;以及
视频编码处理,其基于所述块的所述变换类型信息对所述块的系数信息进行编码。
26.根据权利要求25所述的视频编码方法,其中,
所述编码信息编码处理基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
27.根据权利要求25所述的视频编码方法,其中,
所述编码信息编码处理按照16×16像素块为单位来选择所述宏块的变换类型,并且使用与按照16×16像素块为单位选择的变换类型相同的16×16像素块中的子块的变换类型。
28.根据权利要求25所述的视频编码方法,其中,
所述编码信息编码处理按照块为单位来选择所述宏块中的大小等于或大于16×16像素块的块的变换类型,并且按照16×16像素块为单位来选择所述宏块中的被划分为小于16×16像素块的块的子块的变换类型。
29.根据权利要求25所述的视频编码方法,其中,
所述编码信息编码处理在没有变换系数的情况下跳过对块的变换类型进行编码的操作。
30.根据权利要求25所述的视频编码方法,其中,
如果所述块的块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码处理跳过对变换类型进行编码的操作。
31.一种视频编码方法,该视频编码方法包括以下处理:
编码信息编码处理,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的编码块模式(CBP)信息进行编码;以及
视频编码处理,其基于所述块的所述CBP信息对所述块的系数信息进行编码。
32.根据权利要求31所述的视频编码方法,其中,
所述块的所述CBP信息是表明所述块中是否存在非零变换系数的1比特标记。
33.根据权利要求31所述的视频编码方法,其中,
如果预发送的模式值或标记包括表明当前块中不存在要编码的变换系数的信息,则所述编码信息编码处理跳过生成所述当前块的节点值的操作。
34.根据权利要求33所述的视频编码方法,其中,
如果所述块包括非零变换系数,则所述编码信息编码处理对所述CBP信息进行编码。
35.根据权利要求33所述的视频编码方法,其中,
如果所述块的亮度分量经4×4变换或8×8变换,则所述编码信息编码处理根据8×8像素块中是否存在非零变换系数来生成节点值。
36.根据权利要求33所述的视频编码方法,其中,
如果所述块的亮度分量经8×16变换或16×8变换,则所述编码信息编码处理根据8×16像素块或16×8像素块中是否存在非零变换系数来生成节点值。
37.根据权利要求31所述的视频编码方法,其中,
如果所述块的所述块模式是跳过模式或者如果CBPX标记是0,则所述编码信息编码器跳过生成用于对CBP信息进行编码的节点值的操作。
38.根据权利要求31所述的视频编码方法,其中,
所述编码信息编码处理基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
39.一种视频编码方法,该视频编码方法包括以下处理:
编码信息编码处理,其对表明宏块中的要编码的块的块模式是否为跳过模式的分割模式信息进行编码,并且根据所述块模式信息和所述分割模式信息的组合对所述块的差量量化参数信息进行编码;以及
视频编码处理,其基于所述块的所述差量量化参数信息对所述块的系数信息进行编码。
40.根据权利要求39所述的视频编码方法,其中,
所述编码信息编码处理基于所述块模式信息和所述分割模式信息来生成所述宏块中的最低节点值,并且基于生成的最低节点值来生成树结构的最高节点值。
41.根据权利要求39所述的视频编码方法,其中,
所述编码信息编码处理仅对所述宏块或所述宏块中的具有非零变换系数的16×16像素块的所述差量量化参数信息进行编码。
42.根据权利要求39所述的视频编码方法,其中,
所述编码信息编码处理将所述差量量化参数信息变换为预定码数,接着通过树结构对所述预定码数进行编码。
43.根据权利要求39所述的视频编码方法,其中,
所述编码信息编码处理对所述差量量化参数信息的绝对值进行编码,接着仅对非零差量量化参数信息进行编码。
44.一种视频解码方法,该视频解码方法包括以下处理:
编码信息解码处理,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的变换类型信息;以及
视频解码处理,其基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
45.一种视频解码方法,该视频解码方法包括以下处理:
编码信息解码处理,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的编码块模式(CBP)信息;以及
视频解码处理,其基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
46.一种视频解码方法,该视频解码方法包括以下处理:
编码信息解码处理,其对比特流进行解码,以重构表明要解码的块的块模式是否为跳过模式的块模式信息、表明所述块是否被划分为子块的分割模式信息以及根据所述块模式信息和所述分割模式信息的组合而编码的差量量化参数信息;以及
视频解码处理,其基于来自所述编码信息解码器的所重构的信息或者通过对所述比特流进行解码来重构所述块。
47.一种视频编码方法,该视频编码方法包括以下处理:
对表明宏块中的要编码的块的块模式是否为跳过模式的信息进行编码的处理;以及
变换信息编码处理,其在要编码的块的所述块模式是分割模式的情况下根据帧内预测和帧间预测对最大变换子块的大小和最小变换子块的大小进行编码。
48.根据权利要求47所述的视频编码方法,其中,
所述变换信息编码处理对表明要编码的块中是否存在亮度分量和色度分量的非零变换系数的信息进行编码,对表明要编码的块是否被划分为变换子块的信息进行编码,并且针对各个变换子块对与色度分量和亮度分量有关的信息进行编码。
CN201180029802.XA 2010-04-16 2011-04-18 视频编码/解码设备和方法 Active CN102986213B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510629964.7A CN105306935B (zh) 2010-04-16 2011-04-18 视频解码设备
CN201510455161.4A CN104967853B (zh) 2010-04-16 2011-04-18 视频编码/解码设备和方法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR20100035533 2010-04-16
KR10-2010-0035533 2010-04-16
KR1020110035424A KR101813189B1 (ko) 2010-04-16 2011-04-16 영상 부호화/복호화 장치 및 방법
KR10-2011-0035424 2011-04-16
PCT/KR2011/002761 WO2011129671A2 (ko) 2010-04-16 2011-04-18 영상 부호화/복호화 장치 및 방법

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201510629964.7A Division CN105306935B (zh) 2010-04-16 2011-04-18 视频解码设备
CN201510455161.4A Division CN104967853B (zh) 2010-04-16 2011-04-18 视频编码/解码设备和方法

Publications (2)

Publication Number Publication Date
CN102986213A true CN102986213A (zh) 2013-03-20
CN102986213B CN102986213B (zh) 2016-03-23

Family

ID=45030486

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201510629964.7A Active CN105306935B (zh) 2010-04-16 2011-04-18 视频解码设备
CN201180029802.XA Active CN102986213B (zh) 2010-04-16 2011-04-18 视频编码/解码设备和方法
CN201510455161.4A Active CN104967853B (zh) 2010-04-16 2011-04-18 视频编码/解码设备和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201510629964.7A Active CN105306935B (zh) 2010-04-16 2011-04-18 视频解码设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510455161.4A Active CN104967853B (zh) 2010-04-16 2011-04-18 视频编码/解码设备和方法

Country Status (3)

Country Link
US (3) US10015512B2 (zh)
KR (2) KR101813189B1 (zh)
CN (3) CN105306935B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107005719A (zh) * 2014-11-27 2017-08-01 奥兰治 分割方法以及用于对编码树单元进行信令分割的方法
CN108702507A (zh) * 2016-12-26 2018-10-23 日本电气株式会社 视频编码方法、视频解码方法、视频编码设备、视频解码设备以及程序
CN111264059A (zh) * 2017-10-25 2020-06-09 株式会社索思未来 编码方法、解码方法、编码装置、解码装置、编码程序以及解码程序
CN111263146A (zh) * 2016-10-04 2020-06-09 金起佰 用于划分图像的方法
CN111869219A (zh) * 2018-01-05 2020-10-30 Sk电信有限公司 对图像进行编码或解码的方法和装置
WO2020253829A1 (zh) * 2019-06-21 2020-12-24 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及存储介质
US11812061B2 (en) 2018-01-05 2023-11-07 Sk Telecom Co., Ltd. Method and device for encoding or decoding video

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102771125B (zh) * 2009-12-10 2015-12-09 Sk电信有限公司 使用树形结构的编码/解码方法和装置
KR101813189B1 (ko) * 2010-04-16 2018-01-31 에스케이 텔레콤주식회사 영상 부호화/복호화 장치 및 방법
CN107071460B (zh) * 2010-12-14 2020-03-06 M&K控股株式会社 用于编码运动画面的设备
US9380319B2 (en) * 2011-02-04 2016-06-28 Google Technology Holdings LLC Implicit transform unit representation
US11245902B2 (en) 2011-06-30 2022-02-08 Sony Corporation Binarization of DQP using separate absolute value and sign (SAVS) in CABAC
US9112526B2 (en) 2011-06-15 2015-08-18 Sony Corporation Binarization of DQP using separate absolute value and sign (SAVS) in CABAC
US9948938B2 (en) * 2011-07-21 2018-04-17 Texas Instruments Incorporated Methods and systems for chroma residual data prediction
KR102277121B1 (ko) * 2011-11-08 2021-07-15 한국과학기술원 영상 부호화/복호화 방법 및 장치
US9426466B2 (en) 2012-06-22 2016-08-23 Qualcomm Incorporated Transform skip mode
CN115065823A (zh) * 2012-07-02 2022-09-16 韩国电子通信研究院 视频编码/解码方法和非暂时性计算机可读记录介质
US20140079135A1 (en) * 2012-09-14 2014-03-20 Qualcomm Incoporated Performing quantization to facilitate deblocking filtering
US9219915B1 (en) 2013-01-17 2015-12-22 Google Inc. Selection of transform size in video coding
US9967559B1 (en) 2013-02-11 2018-05-08 Google Llc Motion vector dependent spatial transformation in video coding
US9544597B1 (en) 2013-02-11 2017-01-10 Google Inc. Hybrid transform in video encoding and decoding
KR20140122673A (ko) 2013-04-05 2014-10-20 삼성전자주식회사 휘도차를 보상하기 위한 인터 레이어 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
US9674530B1 (en) 2013-04-30 2017-06-06 Google Inc. Hybrid transforms in video coding
JP6731574B2 (ja) * 2014-03-06 2020-07-29 パナソニックIpマネジメント株式会社 動画像符号化装置および動画像符号化方法
US9924175B2 (en) 2014-06-11 2018-03-20 Qualcomm Incorporated Determining application of deblocking filtering to palette coded blocks in video coding
US10136141B2 (en) * 2014-06-11 2018-11-20 Qualcomm Incorporated Determining quantization parameter (QP) values and delta QP values for palette coded blocks in video coding
US9565451B1 (en) 2014-10-31 2017-02-07 Google Inc. Prediction dependent transform coding
KR102365685B1 (ko) 2015-01-05 2022-02-21 삼성전자주식회사 인코더의 작동 방법과 상기 인코더를 포함하는 장치들
US10148981B2 (en) 2015-03-20 2018-12-04 Mediatek Singapore Pte. Ltd. Methods of palette coding with inter-prediction in video coding
US10003807B2 (en) * 2015-06-22 2018-06-19 Cisco Technology, Inc. Block-based video coding using a mixture of square and rectangular blocks
US9769499B2 (en) 2015-08-11 2017-09-19 Google Inc. Super-transform video coding
US10277905B2 (en) 2015-09-14 2019-04-30 Google Llc Transform selection for non-baseband signal coding
US10362310B2 (en) * 2015-10-21 2019-07-23 Qualcomm Incorporated Entropy coding techniques for display stream compression (DSC) of non-4:4:4 chroma sub-sampling
US9807423B1 (en) 2015-11-24 2017-10-31 Google Inc. Hybrid transform scheme for video coding
US9942548B2 (en) * 2016-02-16 2018-04-10 Google Llc Entropy coding transform partitioning information
ES2786077B2 (es) * 2016-07-05 2023-01-09 Kt Corp Metodo y aparato para procesar una senal de video
WO2018026028A1 (ko) * 2016-08-02 2018-02-08 엘지전자(주) 서브 계수 그룹을 이용하여 레지듀얼 신호를 인코딩, 디코딩하는 방법 및 장치
KR20180021942A (ko) 2016-08-22 2018-03-06 광운대학교 산학협력단 보안 카메라용 영상 코덱에서 블록 분할 정보 전송 방법 및 장치
CN107566846B (zh) * 2017-09-20 2020-04-14 北京字节跳动网络技术有限公司 视频编码跳过模式决策方法、装置、设备及存储介质
EP3806476B1 (en) * 2018-06-03 2023-05-24 LG Electronics Inc. Method and device for processing video signal by using reduced transform
KR20230125338A (ko) * 2018-06-18 2023-08-29 엘지전자 주식회사 어파인 모션 예측을 사용하여 비디오 신호를 처리하기위한 방법 및 장치
CN117041575A (zh) 2018-09-21 2023-11-10 Lg电子株式会社 视频解码和编码方法、存储介质及数据的发送方法
KR20200108798A (ko) * 2019-03-11 2020-09-21 한국전자통신연구원 화면 내 블록 복사 기반 부호화/복호화 방법, 장치 및 비트스트림 저장매체
US11122297B2 (en) 2019-05-03 2021-09-14 Google Llc Using border-aligned block functions for image compression
CN110300302B (zh) * 2019-06-05 2021-11-12 锐捷网络股份有限公司 一种视频编码方法、装置和存储介质
WO2020252270A1 (en) * 2019-06-13 2020-12-17 Beijing Dajia Internet Information Technology Co., Ltd. Methods and system of subblock transform for video coding
CN117376551B (zh) * 2023-12-04 2024-02-23 淘宝(中国)软件有限公司 视频编码加速方法及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1358031A (zh) * 2000-12-08 2002-07-10 三星电子株式会社 译码方法以及使用该方法的设备
CN101389016A (zh) * 2007-09-13 2009-03-18 华为技术有限公司 获得块边界强度和去除块效应的方法和装置
WO2009151232A2 (ko) * 2008-06-13 2009-12-17 삼성전자 주식회사 영상 부호화 방법 및 그 장치, 영상 복호화 방법 및 그 장치
KR20100018191A (ko) * 2008-08-06 2010-02-17 에스케이 텔레콤주식회사 부호화 모드 결정 방법 및 장치와 그를 이용한 영상 부호화장치

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6563953B2 (en) * 1998-11-30 2003-05-13 Microsoft Corporation Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
US8175159B2 (en) * 2002-01-24 2012-05-08 Hitachi, Ltd. Moving picture signal coding method, decoding method, coding apparatus, and decoding apparatus
CN101218830B (zh) 2005-07-22 2011-10-12 三菱电机株式会社 图像编码装置和方法、以及图像解码装置和方法
WO2007148909A1 (en) * 2006-06-19 2007-12-27 Lg Electronics, Inc. Method and apparatus for processing a vedeo signal
WO2008027249A2 (en) * 2006-08-28 2008-03-06 Thomson Licensing Method and apparatus for determining expected distortion in decoded video blocks
CN101669367A (zh) * 2007-03-02 2010-03-10 Lg电子株式会社 用于解码/编码视频信号的方法及设备
JP5303556B2 (ja) * 2007-08-06 2013-10-02 トムソン ライセンシング 複数のインタービュー参照ピクチャを用いたモーションスキップモードのための方法及び装置
JP5526032B2 (ja) * 2007-10-16 2014-06-18 トムソン ライセンシング ジオメトリック分割されたスーパブロックをビデオ符号化およびビデオ復号する方法および装置
KR101946376B1 (ko) * 2007-10-16 2019-02-11 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US8582652B2 (en) * 2007-10-30 2013-11-12 General Instrument Corporation Method and apparatus for selecting a coding mode
US8503527B2 (en) * 2008-10-03 2013-08-06 Qualcomm Incorporated Video coding with large macroblocks
US8619856B2 (en) * 2008-10-03 2013-12-31 Qualcomm Incorporated Video coding with large macroblocks
US20100086051A1 (en) * 2008-10-06 2010-04-08 Lg Electronics Inc. Method and an apparatus for processing a video signal
WO2010043811A1 (fr) * 2008-10-15 2010-04-22 France Telecom Procede et dispositif de codage d'une sequence d'image mettant en oeuvre des blocs de taille differente, signal, support de donnees, procede et dispositif de decodage, et programmes d'ordinateur correspondants
KR101483750B1 (ko) * 2009-07-24 2015-01-19 삼성전자주식회사 영상의 부호화 방법 및 장치, 영상 복호화 방법 및 장치
JP5556996B2 (ja) * 2010-01-06 2014-07-23 ソニー株式会社 画像処理装置および方法
KR101813189B1 (ko) * 2010-04-16 2018-01-31 에스케이 텔레콤주식회사 영상 부호화/복호화 장치 및 방법
WO2012005520A2 (en) * 2010-07-09 2012-01-12 Samsung Electronics Co., Ltd. Method and apparatus for encoding video by using block merging, and method and apparatus for decoding video by using block merging

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1358031A (zh) * 2000-12-08 2002-07-10 三星电子株式会社 译码方法以及使用该方法的设备
CN101389016A (zh) * 2007-09-13 2009-03-18 华为技术有限公司 获得块边界强度和去除块效应的方法和装置
WO2009151232A2 (ko) * 2008-06-13 2009-12-17 삼성전자 주식회사 영상 부호화 방법 및 그 장치, 영상 복호화 방법 및 그 장치
KR20100018191A (ko) * 2008-08-06 2010-02-17 에스케이 텔레콤주식회사 부호화 모드 결정 방법 및 장치와 그를 이용한 영상 부호화장치

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107005719B (zh) * 2014-11-27 2021-04-20 奥兰治 分割方法以及用于对编码树单元进行信令分割的方法
CN107005719A (zh) * 2014-11-27 2017-08-01 奥兰治 分割方法以及用于对编码树单元进行信令分割的方法
CN111263146A (zh) * 2016-10-04 2020-06-09 金起佰 用于划分图像的方法
US11863732B1 (en) 2016-10-04 2024-01-02 B1 Institute Of Image Technology, Inc. Image data encoding/decoding method and apparatus
US11991339B2 (en) 2016-10-04 2024-05-21 B1 Institute Of Image Technology, Inc. Image data encoding/decoding method and apparatus
US11962744B2 (en) 2016-10-04 2024-04-16 B1 Institute Of Image Technology, Inc. Image data encoding/decoding method and apparatus
US11949846B1 (en) 2016-10-04 2024-04-02 B1 Institute Of Image Technology, Inc. Image data encoding/decoding method and apparatus
US11677926B1 (en) 2016-10-04 2023-06-13 B1 Institute Of Image Technology, Inc. Image data encoding/decoding method and apparatus
US11778158B2 (en) 2016-10-04 2023-10-03 B1 Institute Of Image Technology, Inc. Image data encoding/decoding method and apparatus
US11936841B2 (en) 2016-10-04 2024-03-19 B1 Institute Of Image Technology, Inc. Image data encoding/decoding method and apparatus
CN108702507A (zh) * 2016-12-26 2018-10-23 日本电气株式会社 视频编码方法、视频解码方法、视频编码设备、视频解码设备以及程序
CN111264059A (zh) * 2017-10-25 2020-06-09 株式会社索思未来 编码方法、解码方法、编码装置、解码装置、编码程序以及解码程序
CN111264059B (zh) * 2017-10-25 2021-11-12 株式会社索思未来 编码方法、解码方法、编码装置、解码装置以及计算机可读取的记录介质
US11368722B2 (en) 2018-01-05 2022-06-21 Sk Telecom Co., Ltd. Method and device for encoding or decoding video
US11924473B2 (en) 2018-01-05 2024-03-05 Sk Telecom Co., Ltd. Method and device for encoding or decoding video
US11812061B2 (en) 2018-01-05 2023-11-07 Sk Telecom Co., Ltd. Method and device for encoding or decoding video
CN111869219B (zh) * 2018-01-05 2022-08-09 Sk电信有限公司 对图像进行编码或解码的方法和装置
CN111869219A (zh) * 2018-01-05 2020-10-30 Sk电信有限公司 对图像进行编码或解码的方法和装置
WO2020253829A1 (zh) * 2019-06-21 2020-12-24 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及存储介质

Also Published As

Publication number Publication date
US20130034152A1 (en) 2013-02-07
US9967588B2 (en) 2018-05-08
KR101813189B1 (ko) 2018-01-31
KR20180000336A (ko) 2018-01-02
US20150296216A1 (en) 2015-10-15
CN105306935A (zh) 2016-02-03
US9967587B2 (en) 2018-05-08
US20150296217A1 (en) 2015-10-15
KR20110115985A (ko) 2011-10-24
CN102986213B (zh) 2016-03-23
CN104967853B (zh) 2018-06-12
US10015512B2 (en) 2018-07-03
CN105306935B (zh) 2018-08-07
KR101874840B1 (ko) 2018-08-02
CN104967853A (zh) 2015-10-07

Similar Documents

Publication Publication Date Title
CN102986213B (zh) 视频编码/解码设备和方法
CN102939756B (zh) 视频编码/解码设备和方法
CN102948149B (zh) 视频编码/解码设备和方法
KR101479141B1 (ko) 트리 구조를 이용한 부호화/복호화 방법 및 장치
CN103004194B (zh) 图像编码/解码设备和方法
CN103238333B (zh) 进行图像编码/解码以使帧内预测模式的冗余最小化的方法和设备
DK2996340T3 (en) Method and apparatus for encoding and decoding image using large transform unit.
KR101918958B1 (ko) 계층적 가변 블록 변환이 가능한 부호화 방법 및 장치 그리고 복호화 방법 및 장치
KR20160003593A (ko) 영상 부호화/복호화 방법 및 장치
CN103283238B (zh) 利用按照编码单元的并行帧内预测进行编码和解码的方法和装置
CN102918840A (zh) 使用分割层进行图像编码/解码的方法和装置
CN105704490B (zh) 视频编码设备
CN103636213A (zh) 对最后有效变换系数进行译码

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant