CN112425176A - 运动模型指示 - Google Patents

运动模型指示 Download PDF

Info

Publication number
CN112425176A
CN112425176A CN201980047786.3A CN201980047786A CN112425176A CN 112425176 A CN112425176 A CN 112425176A CN 201980047786 A CN201980047786 A CN 201980047786A CN 112425176 A CN112425176 A CN 112425176A
Authority
CN
China
Prior art keywords
affine
value
flag
inter
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980047786.3A
Other languages
English (en)
Other versions
CN112425176B (zh
Inventor
马祥
杨海涛
陈焕浜
陈建乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN112425176A publication Critical patent/CN112425176A/zh
Application granted granted Critical
Publication of CN112425176B publication Critical patent/CN112425176B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/537Motion estimation other than block-based
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Steroid Compounds (AREA)
  • Optical Communication System (AREA)

Abstract

本发明公开了一种确定一个或多个候选预测模式的方法。所述方法包括:处理器通过解析码流获得第一指示符,所述第一指示符指示对于预设区域中的图像块,任一仿射模型是否为候选运动模型;所述处理器确定所述第一指示符设置为1;所述处理器根据确定所述第一指示符设置为1,通过解析所述码流获得第二指示符,所述第二指示符指示对于所述预设区域中的图像块,6参数仿射模型是否为候选运动模型;所述处理器根据所述第一指示符和所述第二指示符,为所述图像块确定一个或多个候选预测模式。

Description

运动模型指示
相关申请交叉引用
本申请要求Futurewei技术公司于2018年7月17日提交的申请号为62/699,554、发明名称为“仿射模式指示(Affine Mode Signaling)”的美国临时专利申请的优先权,要求Futurewei技术公司于2018年8月31日提交的申请号62/725,684、发明名称为“仿射模式指示(Affine Mode Signaling)”的美国临时专利申请的优先权,要求Futurewei技术公司于2018年9月17日提交的申请号62/732,343、发明名称为“仿射模式指示(Affine ModeSignaling)”的美国临时专利申请的优先权。
技术领域
所公开的实施例大体上涉及视频译码,尤其涉及运动模型指示。
背景技术
由于视频使用的数据量较大,因此视频通信占用了较大的带宽。然而,许多网络的运行带宽等于或接近于它们的带宽容量。另外,客户对视频质量要求高,所以需要使用更多数据。因此,一方面希望减少视频使用的数据量,另一方面希望提高视频质量。一种技术方案是在编码过程中压缩视频,在解码过程中解压缩视频。
发明内容
第一方面涉及一种确定一个或多个候选预测模式的方法。所述方法包括:处理器通过解析码流获得第一指示符,所述第一指示符指示对于预设区域中的图像块,任一仿射模型是否为候选运动模型;所述处理器确定所述第一指示符设置为1;根据确定所述第一指示符设置为1,所述处理器通过解析所述码流获得第二指示符,所述第二指示符指示对于预设区域中的图像块,6参数仿射模型是否为候选运动模型;所述处理器根据所述第一指示符和所述第二指示符,为所述图像块确定一个或多个候选预测模式。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
根据所述第一方面,在所述方法的第一种实现方式中,在所述获得第二指示符之前,所述方法还包括确定仿射模型为所述候选运动模型;所述方法还包括:如果确定所述仿射模型为所述候选运动模型,则获得所述第二指示符。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第二种实现方式中,所述获得第一指示符包括解析所述码流相关的序列的SPS,所述预设区域包括所述序列、所述序列中的任一条带或所述序列中的任一CU,所述获得第二指示符包括解析所述SPS。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第三种实现方式中,所述方法还包括:如果仿射模型为所述候选运动模型,则通过解析所述序列中的条带的条带头获得第六指示符,所述第六指示符指示对于所述包括图像块的条带,任一仿射模型是否为候选运动模型。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第四种实现方式中,所述方法还包括:如果所述6参数仿射模型为所述候选运动模型,则通过解析所述序列中的条带的条带头获得第七指示符,所述第七指示符指示对于所述包括图像块的条带,所述6参数仿射模型是否为候选预测模型。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第五种实现方式中,所述方法还包括:通过解析所述码流相关的条带的条带头进一步获得所述第一指示符,所述预设区域包括所述条带或所述条带中的任一编码单元,通过解析所述条带头进一步获得所述第二指示符。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第六种实现方式中,所述方法还包括:如果仿射模型为所述候选运动模型,则通过解析所述码流获得第三指示符,所述第三指示符指示所述图像块的预测模式是否为仿射融合模式。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第七种实现方式中,如果仿射模型为所述候选运动模型,则所述方法还包括:通过解析所述码流获得第四指示符;如果所述第四指示符为第一值,则确定所述图像块的预测模式不是仿射帧间模式;如果所述第四指示符为第二值,则确定所述预测模式为仿射帧间模式,所述仿射帧间模式为6参数仿射模型模式或4参数仿射模型模式。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第八种实现方式中,如果所述预测模式为所述仿射帧间模式,则所述方法还包括:通过解析所述码流获得第五指示符;如果所述第五指示符为第三值,则确定所述预测模式为所述6参数仿射模型模式;如果所述第五指示符为第四值,则确定所述预测模式为所述4参数仿射模型模式。
根据所述第一方面或所述第一方面的任一上述实现方式,在所述方法的第九种实现方式中,如果所述第一值为1,所述第二值为0,所述第三值为0,所述第四值为1,则所述方法还包括:通过将所述第四指示符和所述第五指示符的值相加,获得和值;如果所述和值大于0,则通过解析所述码流获得第一组MVD信息;如果所述和值大于1,则通过解析所述码流获得第二组MVD信息。
第二方面涉及一种确定一个或多个候选预测模式的装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第一方面或所述第一方面的任一上述实现方式中的任一种。
第三方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第一方面或所述第一方面的任一上述实现方式中的任一种。
第四方面涉及一种方法。所述方法包括:确定SPS仿射帧间标志的第一值,所述第一值指示仿射帧间标志是否存在于编码单元级语法中;将所述SPS仿射帧间标志的第一值编码到码流中;确定SPS仿射类型标志的第二值,所述第二值指示仿射类型标志是否存在于所述编码单元级语法中;将所述SPS仿射类型标志的第二值编码到所述码流中。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
根据所述第四方面,在所述方法的第一种实现方式中,根据所述第一值,条件性地指示所述SPS仿射类型标志。
根据所述第四方面或所述第四方面的任一上述实现方式,在所述方法的第二种实现方式中,所述方法还包括:确定仿射帧间标志的第三值,所述第三值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;将所述仿射帧间标志的第三值编码到所述码流中;确定仿射类型标志的第四值,所述第四值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;将所述仿射类型标志的第四值编码到所述码流中。
根据所述第四方面或所述第四方面的任一上述实现方式,在所述方法的第三种实现方式中,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。
第五方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第四方面或所述第四方面的任一上述实现方式中的任一种。
第六方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第四方面或所述第四方面的任一上述实现方式中的任一种。
第七方面涉及一种方法。所述方法包括:接收包括SPS仿射帧间标志和SPS仿射类型标志的码流;根据所述SPS仿射帧间标志的第一值,判断仿射帧间标志是否存在于编码单元级语法中;根据所述SPS仿射类型标志的第二值,判断仿射类型标志是否存在于所述编码单元级语法中。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
根据所述第七方面,在所述方法的第一种实现方式中,根据所述第一值,条件性地指示所述SPS仿射类型标志。
根据所述第七方面或所述第一方面的任一上述实现方式,在所述方法的第二种实现方式中,所述码流还包括仿射帧间标志和仿射类型标志;所述方法还包括:根据所述仿射帧间标志的第三值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的第四值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
根据所述第七方面或所述第一方面的任一上述实现方式,在所述方法的第三种实现方式中,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。
第八方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第七方面或所述第七方面的任一上述实现方式中的任一种。
第九方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第七方面或所述第七方面的任一上述实现方式中的任一种。
第十方面涉及一种方法。所述方法包括:确定条带仿射帧间标志的第一值,所述第一值指示约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;将所述条带仿射帧间标志的第一值编码到码流中;确定条带仿射类型标志的第二值,所述第二值指示约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式;将所述条带仿射类型标志的第二值编码到所述码流中。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
根据所述第十方面,在所述方法的第一种实现方式中,根据所述第一值,条件性地指示所述条带仿射类型标志。
根据所述第十方面或所述第十方面的任一上述实现方式,在所述方法的第二种实现方式中,所述方法还包括:确定仿射帧间标志的第三值,所述第三值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;将所述仿射帧间标志的第三值编码到所述码流中;确定仿射类型标志的第四值,所述第四值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;将所述仿射类型标志的第四值编码到所述码流中。
根据所述第十方面或所述第十方面的任一上述实现方式,在所述方法的第三种实现方式中,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。
第十一方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第十方面或所述第十方面的任一上述实现方式中的任一种。
第十二方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第十方面或所述第十方面的任一上述实现方式中的任一种。
第十三方面涉及一种方法。所述方法包括:接收包括条带仿射帧间标志和条带仿射类型标志的码流;根据所述条带仿射帧间标志的第一值,判断约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;根据所述条带仿射类型标志的第二值,判断约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
根据所述第十三方面,在所述方法的第一种实现方式中,根据所述第一值,条件性地指示所述条带仿射类型标志。
根据所述第十三方面或所述第十三方面的任一上述实现方式,在所述方法的第二种实现方式中,所述码流还包括仿射帧间标志和仿射类型标志;所述方法还包括:根据所述仿射帧间标志的第三值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的第四值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
根据所述第十三方面或所述第十三方面的任一上述实现方式,在所述方法的第三种实现方式中,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。
第十四方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第十三方面或所述第十三方面的任一上述实现方式中的任一种。
第十二方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第十三方面或所述第十三方面的任一上述实现方式中的任一种。
第十六方面涉及一种方法。所述方法包括:确定SPS仿射帧间标志的第一值,所述第一值指示条带仿射帧间标志是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码所述视频序列时使用仿射帧间模式;将所述SPS仿射帧间标志的第一值编码到码流中;确定SPS仿射类型标志的第二值,所述第二值指示条带仿射类型标志是否存在于所述条带段头级语法中,约束所述视频序列的语法元素是否在解码所述视频序列时使用6参数仿射模式;将所述SPS仿射类型标志的第二值编码到所述码流中。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
根据所述第十六方面,在所述方法的第一种实现方式中,根据所述第一值,条件性地指示所述SPS仿射类型标志。
根据所述第十六方面或所述第十六方面的任一上述实现方式,在所述方法的第二种实现方式中,所述方法还包括:确定条带仿射帧间标志的第三值,所述第三值指示约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;将所述条带仿射帧间标志的第三值编码到所述码流中;确定条带仿射类型标志的第四值,所述第四值指示约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式;将所述条带仿射类型标志的第二值编码到所述码流中。
根据所述第十六方面或所述第十六方面的任一上述实现方式,在所述方法的第三种实现方式中,根据所述第一值,条件性地指示所述条带仿射帧间标志;根据所述第二值,条件性地指示所述条带仿射类型标志。
根据所述第十六方面或所述第十六方面的任一上述实现方式,在所述方法的第四种实现方式中,所述方法还包括:确定仿射帧间标志的第五值,所述第五值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;将所述仿射帧间标志的第五值编码到所述码流中;确定仿射类型标志的第六值,所述第六值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;将所述仿射类型标志的第六值编码到所述码流中。
根据所述第十六方面或所述第十六方面的任一上述实现方式,在所述方法的第五种实现方式中,根据所述第三值,条件性地指示所述仿射帧间标志;根据所述第四值,条件性地指示所述仿射类型标志。
第十七方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第一方面或所述第十六方面的任一上述实现方式中的任一种。
第十八方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第一方面或所述第十六方面的任一上述实现方式中的任一种。
第十九方面涉及一种方法。所述方法包括:接收包括SPS仿射帧间标志和SPS仿射类型标志的码流;根据所述SPS仿射帧间标志的第一值,判断条带仿射帧间标志是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码所述视频序列时使用仿射帧间模式;根据所述SPS仿射类型标志的第二值,判断条带仿射类型标志是否存在于所述条带段头级语法中,约束所述视频序列的语法元素是否在解码所述视频序列时使用6参数仿射模式。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
根据所述第十九方面,在所述方法的第一种实现方式中,根据所述第一值,条件性地指示所述SPS仿射类型标志。
根据所述第十九方面或所述第十九方面的任一上述实现方式,在所述方法的第二种实现方式中,所述码流还包括条带仿射帧间标志和条带仿射类型标志;所述方法还包括:根据所述条带仿射帧间标志的第三值,判断约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;根据所述条带仿射类型标志的第四值,判断约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式。
根据所述第十九方面或所述第十九方面的任一上述实现方式,在所述方法的第三种实现方式中,根据所述第一值,条件性地指示所述条带仿射帧间标志;根据所述第二值,条件性地指示所述条带仿射类型标志。
根据所述第十九方面或所述第十九方面的任一上述实现方式,在所述方法的第四种实现方式中,所述码流还包括仿射帧间标志和仿射类型标志;所述方法还包括:根据所述仿射帧间标志的第五值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的第六值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
根据所述第十九方面或所述第十九方面的任一上述实现方式,在所述方法的第五种实现方式中,根据所述第三值,条件性地指示所述仿射帧间标志;根据所述第四值,条件性地指示所述仿射类型标志。
第二十方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第十九方面或所述第十九方面的任一上述实现方式中的任一种。
第二十一方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第十九方面或所述第十九方面的任一上述实现方式中的任一种。
第二十二方面涉及一种方法。所述方法包括:确定运动模型指示变量的第一值,所述第一值指示生成当前编码单元的预测像素所使用的运动模型,所述运动模型为平动模型、4参数仿射模型或6参数仿射模型中的一种;根据所述第一值,确定仿射帧间标志的第二值;将所述仿射帧间标志的第二值编码到码流中;根据所述第一值,确定仿射类型标志的第三值;将所述仿射类型标志的第三值编码到所述码流中。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
第二十三方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第二十二方面或所述第二十二方面的任一上述实现方式中的任一种。
第二十四方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第二十二方面或所述第二十二方面的任一上述实现方式中的任一种。
第二十五方面涉及一种方法。所述方法包括:接收包括仿射帧间标志和仿射类型标志的码流;根据所述仿射帧间标志的第一值和所述仿射类型标志的第二值,确定运动模型指示变量的第三值;根据所述第三值,判断运动模型是平动模型、4参数仿射模型或6参数仿射模型。所述方法能够更高效地对仿射模型进行译码以及对平动模型进行译码。
第二十六方面涉及一种装置。所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行所述第二十五方面或所述第二十五方面的任一上述实现方式中的任一种。
第二十四方面涉及一种计算机程序产品。所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行所述第二十五方面或所述第二十五方面的任一上述实现方式中的任一种。
上述任一实施例可以与上述其它任一实施例组合,产生新的实施例。通过以下结合附图和权利要求书进行的详细描述,将更清楚地理解这些和其它特征。
附图说明
为了更全面地理解本发明,现在参考下文结合附图和具体实施方式进行的简要描述,其中,相似的参考数字代表相似的部件。
图1为译码系统的示意图。
图2A是演示4参数仿射模型的当前块的示意图。
图2B是演示6参数仿射模型的当前块的示意图。
图3为视频码流的示意图。
图4A为本发明一个实施例提供的SPS语法。
图4B为本发明另一个实施例提供的SPS语法。
图4C为本发明一个实施例提供的编码单元语法。
图5A为本发明一个实施例提供的条带段头语法。
图5B为本发明另一个实施例提供的条带段头语法。
图5C为本发明一个实施例提供的编码单元语法。
图6A为本发明一个实施例提供的SPS语法。
图6B为本发明另一个实施例提供的SPS语法。
图6C为本发明一个实施例提供的条带段头语法。
图6D为本发明一个实施例提供的编码单元语法。
图7为本发明一个实施例提供的编码单元语法。
图8为本发明一个实施例提供的确定一个或多个候选预测模式的方法的流程图。
图9为本发明一个实施例提供的对码流进行编码的方法的流程图。
图10为本发明一个实施例提供的对码流进行解码的方法的流程图。
图11为本发明一个实施例提供的对码流进行编码的方法的流程图。
图12为本发明一个实施例提供的对码流进行解码的方法的流程图。
图13为本发明一个实施例提供的对码流进行编码的方法的流程图。
图14为本发明一个实施例提供的对码流进行解码的方法的流程图。
图15为本发明一个实施例提供的对码流进行编码的方法的流程图。
图16为本发明一个实施例提供的对码流进行解码的方法的流程图。
图17为本发明一个实施例提供的装置的示意图。
图18为译码模块的示意图。
具体实施方式
首先应理解,尽管下文提供一个或多个实施例的说明性实现方式,但所公开的系统和/或方法可以使用任何数目的技术来实施,无论该技术是当前已知还是现有的。本发明决不应限于下文所说明的说明性实现方式、附图和技术,包括本文所说明并描述的示例性设计和实现方式,而是可以在所附权利要求书的范围以及其等效物的完整范围内修改。
使用以下缩略语:
ASIC:专用集成电路(electrical-to-optical)
CPU:中央处理器(central processing unit)
DSP:数字信号处理器(digital signal processor)
EO:电光(electrical-to-optical)
FPGA:现场可编程门阵列(field-programmable gate array)
MVD:运动矢量差值(motion vector difference)
OE:光电(optical-to-electrical)
PPS:图像参数集(picture parameter set)
RAM:随机存储器(random-access memory)
RF:射频(radio frequency)
ROM:只读存储器(read-only memory)
RX:接收单元(receiver unit)
SPS:序列参数集(sequence parameter set)
SRAM:静态RAM(static RAM)
TCAM:三态内容寻址存储器(ternary content-addressable memory)
TX:发送单元(transmitter unit)
VPS:视频参数集(video parameter set)
图1为译码系统100的示意图。译码系统100包括源设备110、介质150和目的地设备160。源设备110和目的地设备160为手机、平板电脑、台式电脑、笔记本电脑或其它设备。介质150为本地网络、无线电网络、互联网或其它通信介质。
源设备110包括视频发生器120、编码器130和输出接口140。视频发生器120是相机或者生成视频的其它设备。编码器130可以称为编解码器。编码器130按照一组规则将视频和其它数据编码到码流中。输出接口140是向目的地设备160发送所述码流的天线或其它组件。或者,视频发生器120、编码器130和输出接口140为设备的组合。
目的地设备160包括输入接口170、解码器180和显示器190。输入接口170是从源设备110接收所述码流的天线或其它组件。解码器180也可以称为编解码器。解码器180按照一组规则从所述码流中解码视频和其它数据。编码和解码一起称为译码。显示器190显示所述视频。或者,输入接口170、解码器180和显示器190为设备的组合。
所述码流包括各级别定义的数据,这些级别包括条带(slice)和块。一个条带是视频帧的空间上不同的区域,该区域与同一视频帧中的任何其它区域分开进行译码。一个块是排列为矩形的一组像素,块是最小编码单元。一个条带内的各块可以相互依赖地进行译码。虽然描述的是视频,但视频是一系列单个帧,所以相同的概念适用于单个帧。
对象在帧之间移动,因此这些对象的块以相应的方式移动。帧内预测和帧间预测是表示这种运动的两种主要方式。帧内预测根据当前帧中的当前块与当前帧中的参考块的关系表示当前块。帧间预测根据当前帧中的当前块与参考帧中的参考块的关系表示当前块。运动矢量描述了这种关系。确定这些运动矢量的过程称为运动估计,而在译码时使用这些运动矢量的过程称为运动补偿。参考帧可以是前一帧或前向帧。P条带使用前几个帧进行译码,而B条带既使用前几个帧又使用前向帧进行译码。
当对象从一个位置简单地移动到另一个位置时,使用平动帧间预测或传统帧间预测。平动模型实现的是平动帧间预测。仿射帧间预测在对象由于相机变焦、旋转、透视运动或其它不规则运动而在帧之间改变形状时使用。各种仿射模型实现的是仿射帧间预测。平动模型和仿射模型是各种类型的运动模型。
预测模式是一种使用帧内预测或帧间预测对编码单元进行译码的译码模式。帧内模式是一种使用帧内预测的译码模式,帧间模式是一种使用帧间预测的译码模式。仿射融合模式或仿射帧间模式是一种使用仿射模型来实现仿射帧间预测的融合模式。
图2A为显示4参数仿射模型的当前块210的示意图。当前块210包括位于左上角的对应于运动矢量
Figure BDA0002901716900000081
的第0控制点和位于右上角的对应于运动矢量
Figure BDA0002901716900000082
的第一控制点。
Figure BDA0002901716900000083
Figure BDA0002901716900000084
具有x和y位置,因此可以分别表示为(v0x,v0y)和(v1x,v1y)。4参数仿射模型是一个运动矢量场,表示如下:
Figure BDA0002901716900000085
其中,w是当前块210的宽度,以像素为单位;v0x、v0y、v1x和v1y是组成4参数仿射模型的4个参数。类似地,当前块210内的子块都可以具有运动矢量。
图2B为显示6参数仿射模型的当前块220的示意图。当前块220包括位于左上角的对应于运动矢量mv0的第0控制点、位于右上角的对应于运动矢量mv1的第一控制点和位于左上角的对应于运动矢量mv2的第二控制点。mv0、mv1和mv2具有x和y位置,因此可以分别表示为
Figure BDA0002901716900000091
Figure BDA0002901716900000092
6参数仿射模型是一个运动矢量场,表示如下:
Figure BDA0002901716900000093
其中,w为当前块220的宽度,以像素为单位;h为当前块220的高度,以像素为单位;
Figure BDA0002901716900000094
Figure BDA0002901716900000095
为组成6参数仿射模型的6个参数。类似地,当前块220内的子块都可以具有运动矢量。
图2A和图2B示出了使用运动矢量场(1)和(2)中的多个运动矢量的仿射模型。然而,平动模型使用单个运动矢量。因此,平动模型可以简单地为
Figure BDA0002901716900000096
Figure BDA0002901716900000097
图3为视频码流300的示意图。视频码流300包括VPS 305、SPS 310、PPS 315和至少四个条带320、325、330和335。条带320包括头340和数据345。条带325、330、335与条带320类似。数据345包括至少三个块350、355和360。尽管示出了四个条带320、325、330和335,但视频码流300包括任何合适数量的条带。尽管示出了三个块350、355和360,但数据345包括任何合适数量的块。另外,剩余的每个条带325、330、335也包括块。因此,虽然视频码流300包括大量块,但视频码流300包括一个SPS 310,而且包括的条带头比块少得多。
一种方法是始终将两个标志译码到每个块350、355和360中。第一标志指示块350、355和360是否使用仿射模型。第二标志指示仿射模型是4参数仿射模型或6参数仿射模型。然而,由于存在大量块,而且并非所有块都使用仿射模型,所以将第一标志和第二标志始终携带在每个块350、355和360中需要过多比特。因此,期望更高效地对仿射模型进行译码,也期望对平动模型进行译码。
本文公开了用于运动模型指示的实施例。运动模型包括平动模型、4参数仿射模型和6参数仿射模型。在视频码流的高级别处指示运动模型,高级别包括SPS和条带头。当高级别指示表示不使用运动模型时,低级别指示不需要表示运动模型。通过减少低级别指示,视频码流需要较少比特来指示或不指示运动模型。因此,视频码流的通信需要较少带宽。虽然描述了SPS和条带头,但同样的概念适用于视频码流的其它高级别。虽然对平动模型、4参数仿射模型和6参数仿射模型进行了描述,但同样的概念适用于其它具体运动模型和其它一般上下文模型。
图4A为本发明一个实施例提供的SPS语法410。编码器130和解码器180使用SPS语法410对SPS 310分别进行编码和解码。SPS语法410包括SPS仿射帧间标志Sps_affine_inter_flag和SPS仿射类型标志Sps_affine_type_flag。
Sps_affine_inter_flag指示仿射帧间标志affine_inter_flag是否存在于编码单元级语法中。Sps_affine_inter_flag为0指示affine_inter_flag不存在于编码单元级语法中。Sps_affine_inter_flag为1指示affine_inter_flag存在于编码单元级语法中。
Sps_affine_type_flag指示仿射类型标志affine_type_flag是否存在于编码单元级语法中。Sps_affine_type_flag为0指示affine_type_flag不存在于编码单元级语法中。Sps_affine_type_flag为1指示affine_type_flag存在于编码单元级语法中。条件性地指示Sps_affine_type_flag,使得当Sps_affine_inter_flag为0时,不指示Sps_affine_type_flag;当Sps_affine_inter_flag为1时,指示Sps_affine_type_flag。
图4B为本发明另一个实施例提供的SPS语法420。SPS语法420与图4A中的SPS语法410类似。然而,不同于SPS语法410中的Sps_affine_type_flag,SPS语法420中的Sps_affine_type_flag不是条件性地指示。相反,即使当Sps_affine_inter_flag为0时,也始终指示Sps_affine_type_flag。
图4C为本发明一个实施例提供的编码单元语法430。编码器130和解码器180使用编码单元语法430对块350、355和360分别进行编码和解码。编码单元语法430包括仿射帧间标志affine_inter_flag和仿射类型标志affine_type_flag。
affine_inter_flag指示对于当前编码单元,在解码P条带或B条带时,是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_inter_flag为0,指示对于当前编码单元,在解码P条带或B条带时,不使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_inter_flag为1,指示对于当前编码单元,在解码P条带或B条带时,使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。条件性地指示affine_inter_flag,使得当SPS语法410或SPS语法420中的Sps_affine_inter_flag为0时,不指示affine_inter_flag;当SPS语法410或SPS语法420中的Sps_affine_inter_flag为1时,指示affine_inter_flag。
affine_type_flag指示对于当前编码单元,在解码P条带或B条带时,是否使用基于6参数仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_type_flag为0,指示对于当前编码单元,在解码P条带或B条带时,使用基于4参数仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_type_flag为1,指示对于当前编码单元,在解码P条带或B条带时,使用基于6参数仿射模型的运动补偿来生成当前编码单元的预测像素。条件性地指示affine_type_flag,使得当SPS语法410或SPS语法420中的Sps_affine_type_flag为0时或者当编码单元语法430中的affine_inter_flag为0时,不指示affine_type_flag;当SPS语法410或SPS语法420中的Sps_affine_inter_flag为1时且当编码单元语法430中的affine_inter_flag为1时,指示affine_type_flag。
图5A为本发明一个实施例提供的条带段头语法510。编码器130和解码器180使用条带段头语法510对头340分别进行编码和解码。条带段头语法510包括条带仿射帧间标志Slice_affine_inter_flag和条带仿射类型标志Slice_affine_type_flag。
Slice_affine_inter_flag指示约束当前图像的语法元素是否在解码当前图像时使用仿射帧间模式。Slice_affine_inter_flag为0指示约束当前图像的语法元素在解码当前图像时不使用仿射帧间模式。Slice_affine_inter_flag为1指示约束当前图像的语法元素在解码当前图像时使用仿射帧间模式。
Slice_affine_type_flag指示约束当前图像的语法元素是否在解码当前图像时使用6参数仿射模式。Slice_affine_type_flag为0指示约束当前图像的语法元素在解码当前图像时不使用6参数仿射模式。Slice_affine_type_flag为1指示约束当前图像的语法元素在解码当前图像时使用6参数仿射模式。条件性地指示Slice_affine_type_flag,使得当Slice_affine_inter_flag为0时,不指示Slice_affine_type_flag;当Slice_affine_inter_flag为1时,指示Slice_affine_type_flag。
图5B为本发明另一个实施例提供的条带段头语法520。条带段头语法520与图5A中的条带段头语法510类似。然而,不同于条带段头语法510中的Slice_affine_type_flag,条带段头语法520中的Slice_affine_type_flag不是条件性地指示。相反,即使当Slice_affine_inter_flag为0时,也始终指示Slice_affine_type_flag。
图5C为根据本发明一个实施例的编码单元语法530。编码器130和解码器180使用编码单元语法530对块350、355和360分别进行编码和解码。编码单元语法530包括仿射帧间标志affine_inter_flag和仿射类型标志affine_type_flag。
affine_inter_flag指示对于当前编码单元,在解码P条带或B条带时,是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_inter_flag为0,指示对于当前编码单元,在解码P条带或B条带时,不使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_inter_flag为1,指示对于当前编码单元,在解码P条带或B条带时,使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。条件性地指示affine_inter_flag,使得当条带段头语法510或条带段头语法520中的Slice_affine_inter_flag为0时,不指示affine_inter_flag;当条带段头语法510或条带段头语法520中的Slice_affine_inter_flag为1时,指示affine_inter_flag。
affine_type_flag指示对于当前编码单元,在解码P条带或B条带时,是否使用基于6参数仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_type_flag为0,指示对于当前编码单元,在解码P条带或B条带时,使用基于4参数仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_type_flag为1,指示对于当前编码单元,在解码P条带或B条带时,使用基于6参数仿射模型的运动补偿来生成当前编码单元的预测像素。条件性地指示affine_type_flag,使得当条带段头语法510或条带段头语法520中的Slice_affine_affine_type_flag为0时或当编码单元语法530中的affine_inter_flag为0时,不指示affine_type_flag;当条带段头语法510或条带段头语法520中的Slice_affine_type_flag为1时且当编码单元语法530中的affine_inter_flag为1时,指示affine_type_flag。
图6A至图6D示出了图4A至图4C以及图5A至图5C的一部分。图6A为本发明一个实施例提供的SPS语法610。编码器130和解码器180使用SPS语法610对SPS 310分别进行编码和解码。SPS语法610包括SPS仿射帧间标志Sps_affine_inter_flag和SPS仿射类型标志Sps_affine_type_flag。
Sps_affine_inter_flag指示条带仿射帧间标志Slice_affine_inter_flag是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码视频序列时使用仿射帧间模式。Sps_affine_inter_flag为0指示Slice_affine_inter_flag不存在于条带段头级语法中,且约束视频序列的语法元素在解码视频序列时不使用仿射帧间模式。Sps_affine_inter_flag为1指示Slice_affine_inter_flag存在于条带段头级语法中,且约束视频序列的语法元素在解码视频序列时使用仿射帧间模式。
Sps_affine_type_flag指示条带仿射类型标志Slice_affine_type_flag是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码视频序列时使用6参数仿射模式。Sps_affine_type_flag为0指示Slice_affine_type_flag不存在于条带段头级语法中,且约束视频序列的语法元素在解码视频序列时不使用6参数仿射模式。Sps_affine_type_flag为1指示Slice_affine_type_flag存在于条带段头级语法中,且约束视频序列的语法元素在解码视频序列时使用6参数仿射模式。条件性地指示Sps_affine_type_flag,使得当Sps_affine_inter_flag为0时,不指示Sps_affine_type_flag;当Sps_affine_inter_flag为1时,指示Sps_affine_type_flag。
图6B为本发明一个实施例提供的SPS语法620。SPS语法620与图6A中的SPS语法610类似。然而,不同于SPS语法610中的Sps_affine_type_flag,SPS语法620中的Sps_affine_type_flag不是条件性地指示。相反,即使当Sps_affine_inter_flag为0时,也始终指示Sps_affine_type_flag。
图6C是根据本发明一个实施例的条带段头语法630。编码器130和解码器180使用条带段头语法630对头340分别进行编码和解码。条带段头语法630包括条带仿射帧间标志Slice_affine_inter_flag和条带仿射类型标志Slice_affine_type_flag。
Slice_affine_inter_flag指示约束当前图像的语法元素是否在解码当前图像时使用仿射帧间模式。Slice_affine_inter_flag为0指示约束当前图像的语法元素在解码当前图像时不使用仿射帧间模式。Slice_affine_inter_flag为1指示约束当前图像的语法元素在解码当前图像时使用仿射帧间模式。条件性地指示Slice_affine_inter_flag,使得当SPS语法610或SPS语法620中的Sps_affine_inter_flag为0时,不指示Slice_affine_inter_flag;当SPS语法610或SPS语法620为1时,指示Slice_affine_inter_flag。
Slice_affine_type_flag指示约束当前图像的语法元素是否在解码当前图像时使用6参数仿射模式。Slice_affine_type_flag为0指示约束当前图像的语法元素在解码当前图像时不使用6参数仿射模式。Slice_affine_type_flag为1指示约束当前图像的语法元素在解码当前图像时使用6参数仿射模式。条件性地指示Slice_affine_type_flag,使得当SPS语法610或SPS语法620中的Sps_affine_type_flag为0时,不指示Slice_affine_type_flag,当SPS语法610或SPS语法620中的Sps_affine_type_flag为1时,指示Slice_affine_type_flag。
图6D为本发明一个实施例提供的编码单元语法640。编码器130和解码器180使用编码单元语法640对块350、355和360分别进行编码和解码。编码单元语法640包括仿射帧间标志affine_inter_flag和仿射类型标志affine_type_flag。
affine_inter_flag指示对于当前编码单元,在解码P条带或B条带时,是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_inter_flag为0,指示对于当前编码单元,在解码P条带或B条带时,不使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_inter_flag为1,指示对于当前编码单元,在解码P条带或B条带时,使用基于仿射模型的运动补偿来生成当前编码单元的预测像素。条件性地指示affine_inter_flag,使得当条带段头语法630中的Slice_affine_inter_flag为0时,不指示affine_inter_flag;当条带段头语法630中的Slice_affine_inter_flag为1时,指示affine_inter_flag。
affine_type_flag指示对于当前编码单元,在解码P条带或B条带时,是否使用基于6参数仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_type_flag为0,指示对于当前编码单元,在解码P条带或B条带时,使用基于4参数仿射模型的运动补偿来生成当前编码单元的预测像素。如果affine_type_flag为1,指示对于当前编码单元,在解码P条带或B条带时,使用基于6参数仿射模型的运动补偿来生成当前编码单元的预测像素。条件性地指示affine_type_flag,使得当条带段头语法630中的Slice_affine_type_flag为0时或当编码单元语法640中的affine_inter_flag为0时,不指示affine_type_flag;当条带段头语法630中的Slice_affine_type_flag为1时且当编码单元语法640中的Slice_affine_type_flag为1时,指示affine_type_flag。
图7为本发明一个实施例提供的编码单元语法700。编码器130和解码器180使用编码单元语法700对块350、355和360分别进行编码和解码。编码单元语法700包括运动模型指示变量motion_model_indicator[x0][y0]和MVD译码指令mvd_coding(x0,y0,refList,cpIdx)。
motion_model_indicator[x0][y0]指示生成当前编码单元的预测像素所使用的运动模型。语法700设置motion_model_indicator[x0][y0]等于仿射帧间标志affine_inter_flag与仿射类型标志affine_type_flag之和。affine_inter_flag和affine_type_flag可以来自编码单元语法430、530、640或其它地方。如表1所示,motion_model_indicator[x0][y0]的值为0、1或2。值为0指示平动运动模型,值为1指示4参数仿射模式,值为2指示6参数仿射模型。
表1:motion_model_indicator[x0][y0]的值
affine_inter_flag affine_type_flag motion_model_indicator[x0][y0] 运动模型
0 0 0 平动运动模型
0 1 1 4参数仿射模式
1 0 1 4参数仿射模式
1 1 2 6参数仿射模式
或者,motion_model_indicator[x0][y0]的值以其它合适的方式指示平动运动模型、4参数仿射模型和6参数仿射模型。
mvd_coding(x0,y0,refList,cpIdx)指示对当前编码单元的MVD进行译码的方式。MVD是预测后的运动矢量与当前运动矢量的差值。因此,编码器130和解码器180对MVD而不对运动矢量场(1)和(2)等完整运动矢量场分别进行编码和解码。x0和y0指示当前编码单元的位置。refList指示参考图像列表List0或List1。由于能够使用List0和List1,所以能够通过List0中的第一参考块和List1中的第二参考块进行双向预测。cpIdx表示控制点索引,指示一个控制点,例如图2A或图2B中的其中一个控制点。在编码单元语法700中,mvd_coding(x0,y0,refList,cpIdx)的形式有:mvd_coding(x0,y0,0,1),指示List0的MVD译码指令和控制点1;mvd_coding(x0,y0,0,2),指示List0的MVD译码指令和控制点2;mvd_coding(x0,y0,1,1),指示List1的MVD译码指令和控制点1;mvd_coding(x0,y0,1,2),指示List1的MVD译码指令和控制点2。
图8为本发明一个实施例提供的确定一个或多个候选预测模式的方法800的流程图。编码器130或解码器180执行方法800。编码器130或解码器180可以位于下文所述的处理器中。在步骤810中,通过解析码流获得第一指示符。所述第一指示符指示对于预设区域中的图像块,任一仿射模型是否为候选运动模型。例如,所述第一指示符为SPS语法410、420、610或620中的Sps_affine_inter_flag,编码单元语法430、530、640或700中的affine_inter_flag,或者条带段头语法510、520或630中的Slice_affine_inter_flag。在步骤820中,确定是否存在所述第一指示符。例如,SPS语法410、420、610或620中的Sps_affine_inter_flag,编码单元语法430、530、640或700中的affine_inter_flag,或者条带段头语法510、520或630中的Slice_affine_inter_flag设置为1。在步骤830中,如果确定存在所述第一指示符,则通过解析所述码流获得第二指示符。所述第二指示符指示对于所述预设区域中的图像块,6参数仿射模型是否为候选运动模型。例如,所述第二指示符为SPS语法410、420、610或620中的Sps_affine_type_flag,编码单元语法430、530、640或700中的affine_type_flag,或者条带段头语法510、520或630中的Slice_affine_type_flag。最后,在步骤840中,根据所述第一指示符和所述第二指示符,为所述图像块确定一个或多个候选运动模型。例如,编码器130或解码器180确定平动模型、4参数仿射模型或6参数仿射模型。方法800可以包括以下额外步骤。
在获得所述第二指示符之前,方法800还包括确定仿射模型为所述候选运动模型。方法800还包括:如果确定仿射模型为所述候选运动模型,则获得所述第二指示符。
在方法800中,所述获得第一指示符包括解析所述码流中的序列的SPS。所述预设区域包括所述序列、所述序列中的任一条带或所述序列中的任一编码单元。所述获得第二指示符包括解析所述SPS。可选地,方法800还包括:如果仿射模型为所述候选运动模型,则通过解析所述序列中的条带的条带头获得第六指示符。所述第六指示符指示对于所述包括图像块的条带,任一仿射模型是否为候选运动模型。可选地,方法800还包括:如果所述6参数仿射模型为所述候选运动模型,则通过解析所述序列中的条带的条带头获得第七指示符。所述第七指示符指示对于所述包括图像块的条带,所述6参数仿射模型是否为候选预测模型。
所述方法800还包括通过解析所述码流的条带的条带头获得所述第一指示符。所述预设区域包括所述条带或所述条带中的任一编码单元。方法800还包括通过解析所述条带头获得所述第二指示符。
所述方法800还包括:如果仿射模型为所述候选运动模型,则通过解析所述码流获得第三指示符。所述第三指示符指示所述图像块的预测模式是否为仿射融合模式。
如果仿射模型为所述候选运动模型,则所述方法800还包括:通过解析所述码流获得第四指示符;如果所述第四指示符为第一值,则确定所述图像块的预测模式不是仿射帧间模式;如果所述第四指示符为第二值,则确定所述预测模式为仿射帧间模式。所述仿射帧间模式为6参数仿射模型模式和4参数仿射模型模式。如果所述预测模式为仿射帧间模式,则所述方法800还包括:通过解析所述码流获得第五指示符;如果所述第五指示符为第三值,则确定所述预测模式为所述6参数仿射模型模式;如果所述第五指示符为第四值,则确定所述预测模式为所述4参数仿射模型模式。如果所述第一值为1,所述第二值为0,所述第三值为0,所述第四值为1,则所述方法还包括:通过将所述第四指示符和所述第五指示符的值相加,获得和值;如果所述和值大于0,则通过解析所述码流获得第一组MVD信息;如果所述和值大于1,则通过解析所述码流获得第二组MVD信息。
图9为本发明一个实施例提供的对码流进行编码的方法900的流程图。编码器130执行方法900。在步骤910中,确定SPS仿射帧间标志的第一值,所述第一值指示仿射帧间标志是否存在于编码单元级语法中。例如,所述SPS仿射帧间标志为SPS语法410或420中的Sps_affine_inter_flag。在步骤920中,将所述SPS仿射帧间标志的第一值编码到码流中。在步骤930中,确定SPS仿射类型标志的第二值,所述第二值指示仿射类型标志是否存在于所述编码单元级语法中。例如,所述SPS仿射类型标志为SPS语法410或420中的Sps_affine_type_flag。最后,在步骤940中,将所述SPS仿射类型标志的第二值编码到所述码流中。
图10为本发明一个实施例提供的对码流进行解码的方法1000的流程图。解码器180执行方法1000。在步骤1010中,接收包括SPS仿射帧间标志和SPS仿射类型标志的码流。例如,所述SPS仿射帧间标志为SPS语法410或420中的Sps_affine_inter_flag,所述SPS仿射类型标志为SPS语法410或420中的Sps_affine_type_flag。在步骤1020中,根据所述SPS仿射帧间标志的第一值,判断仿射帧间标志是否存在于编码单元级语法中。最后,在步骤1030中,根据所述SPS仿射类型标志的第二值,判断仿射类型标志是否存在于所述编码单元级语法中。
图11为本发明一个实施例提供的对码流进行编码的方法1100的流程图。编码器130执行方法1100。在步骤1110中,确定条带仿射帧间标志的第一值,所述第一值指示约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式。例如,所述条带仿射帧间标志是条带段头语法510或520中的Slice_affine_inter_flag。在步骤1120中,将所述条带仿射帧间标志的第一值编码到码流中。在步骤1130中,确定条带仿射类型标志的第二值,所述第二值指示约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式。例如,所述条带仿射类型标志为条带段头语法510或520中的Slice_affine_type_flag。最后,在步骤1140中,将所述条带仿射类型标志的第二值编码到所述码流中。
图12为本发明一个实施例提供的对码流进行解码的方法1200的流程图。解码器180执行方法1200。在步骤1210中,接收包括条带仿射帧间标志和条带仿射类型标志的码流。例如,所述条带仿射帧间标志为条带段头语法510或520中的Slice_affine_inter_flag,所述条带仿射类型标志为条带段头语法510或520中的Slice_affine_type_flag。在步骤1220中,根据所述条带仿射帧间标志的第一值,判断约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式。最后,在步骤1230中,根据所述条带仿射类型标志的第二值,判断约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式。
图13为本发明一个实施例提供的对码流进行编码的方法1300的流程图。编码器130执行方法1300。在步骤1310中,确定SPS仿射帧间标志的第一值,所述第一值指示条带仿射帧间标志是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码所述视频序列时使用仿射帧间模式。例如,所述SPS仿射帧间标志为SPS语法610或620中的Sps_affine_inter_flag。在步骤1320中,将所述SPS仿射帧间标志的第一值编码到码流中。在步骤1330中,确定SPS仿射类型标志的第二值,所述第二值指示条带仿射类型标志是否存在于条带段头级语法中,约束所述视频序列的语法元素是否在解码所述视频序列时使用6参数仿射模式。例如,所述SPS仿射类型标志为SPS语法610或620中的Sps_affine_type_flag。最后,在步骤1340中,将所述SPS仿射类型标志的第二值编码到所述码流中。
图14为本发明一个实施例提供的对码流进行解码的方法1400的流程图。解码器180执行方法1400。在步骤1410中,接收包括SPS仿射帧间标志和SPS仿射类型标志的码流。例如,所述SPS仿射帧间标志为SPS语法610或620中的Sps_affine_inter_flag,所述SPS仿射类型标志为SPS语法610或620中的Sps_affine_type_flag。在步骤1420中,根据所述SPS仿射帧间标志的第一值,判断条带仿射帧间标志是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码所述视频序列中使用仿射帧间模式。最后,在步骤1430中,根据所述SPS仿射类型标志的第二值,判断条带仿射类型标志是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码所述视频序列时使用6参数仿射模式。
图15为本发明一个实施例提供的对码流进行编码的方法1500的流程图。编码器130执行方法1500。在步骤1510中,确定运动模型指示变量的第一值,所述第一值指示生成当前编码单元的预测像素所使用的运动模型。所述运动模型为平动模型、4参数仿射模型或6参数仿射模型中的一种。例如,所述运动模型指示变量为编码单元语法700中的motion_model_indicator[x0][y0]。在步骤1520中,根据所述第一值,确定仿射帧间标志的第二值。例如,所述仿射帧间标志为编码单元语法700中的affine_inter_flag。在步骤1530中,将所述仿射帧间标志的第二值编码到码流中。在步骤1540中,根据所述第一值,确定仿射类型标志的第三值。例如,所述仿射类型标志为编码单元语法700中的affine_type_flag。最后,在步骤1550中,将所述仿射类型标志的第三值编码到所述码流中。
图16为本发明一个实施例提供的对码流进行解码的方法1600的流程图。解码器180执行方法1600。在步骤1610中,接收包括仿射帧间标志和仿射类型标志的码流。例如,所述仿射帧间标志为编码单元语法700中的affine_inter_flag,所述仿射类型标志为编码单元语法700中的affine_type_flag。在步骤1620中,根据所述仿射帧间标志的第一值和所述仿射类型标志的第二值,确定运动模型指示变量的第三值。例如,所述运动模型指示变量为编码单元语法700中的motion_model_indicator[x0][y0]。最后,在步骤1630中,根据所述第三值,判断运动模型是平动模型、4参数仿射模型或6参数仿射模型。
图17为本发明一个实施例提供的装置1700的示意图。装置1700可以实现所公开的实施例。装置1700包括:入端口1710和接收单元1720,用于接收数据;处理器、逻辑单元、基带单元或CPU 1730,用于处理所述数据;发送单元1740和出端口1750,用于发送所述数据;存储器1760,用于存储所述数据。装置1700还可以包括耦合到入端口1710、接收单元1720、发送单元1740和出端口1750的OE组件、EO组件或RF组件,以提供光信号、电信号或RF信号的入口或出口。
处理器1730可以是硬件、中间件、固件和软件的任一组合。处理器1730包括一个或多个CPU芯片、核、FPGA、ASIC或DSP的任一组合。处理器1730与入端口1710、接收单元1720、发送单元1740、出端口1750和存储器1760通信。处理器1730包括实现所公开实施例的运动模型指示组件1770。因此,将运动模型指示组件1770包括在内为装置1700的功能提供了实质性的改进,并且影响了装置1700到不同状态的转换。或者,存储器1760将运动模型指示组件1770作为指令进行存储,并且处理器1730执行这些指令。
存储器1760可以包括磁盘、磁带机或及固态硬盘的任一组合。装置1700可以使用存储器1760作为溢出数据存储设备,以在装置1700选择程序来执行时存储这些程序,存储装置1700在执行这些程序过程中读取的指令和数据。存储器1760可以是易失性或非易失性,可以是ROM、RAM、TCAM或SRAM的任一组合。
图18为译码模块1800的示意图。译码模块1800在视频译码设备1802(例如编码器130或解码器180)中实现。视频译码设备1802包括接收模块1801。接收模块1801用于接收图像进行编码或者接收码流进行解码。视频译码设备1802包括与接收模块1801耦合的发送模块1807。发送模块1807用于将所述码流发送到解码器或者将经解码的图像发送到显示模块(例如显示器190)。
视频译码设备1802包括存储模块1803。存储模块1803耦合到接收模块1801或发送模块1807中的至少一个。存储模块1803用于存储指令。视频译码设备1802还包括处理模块1805。处理模块1805与存储模块1803耦合。处理模块1805用于执行存储在存储模块1803中的指令,以执行所公开的实施例。
一种装置包括:存储元件;处理元件,与所述存储元件耦合,并用于执行以下确定一个或多个候选预测模式的方法:通过解析码流获得第一指示符,所述第一指示符指示对于预设区域中的图像块,任一仿射模型是否为候选运动模型;通过解析所述码流获得第二指示符,所述第二指示符指示对于所述预设区域中的图像块,6参数仿射模型是否为候选运动模型;根据所述第一指示符和所述第二指示符,为所述图像块确定一个或多个候选预测模式。
1.一种确定一个或多个候选预测模式的方法,其特征在于,所述方法包括:处理器通过解析码流获得第一指示符,所述第一指示符指示对于预设区域中的图像块,任一仿射模型是否为候选运动模型;所述处理器确定所述第一指示符设置为1;根据确定所述第一指示符设置为1,所述处理器通过解析所述码流获得第二指示符,所述第二指示符指示对于所述预设区域中的图像块,6参数仿射模型是否为候选运动模型;所述处理器根据所述第一指示符和所述第二指示符,为所述图像块确定一个或多个候选预测模式。2.根据权利要求1所述的方法,其特征在于,在所述获得第二指示符之前,所述方法还包括确定仿射模型为所述候选运动模型;所述方法还包括:如果所述仿射模型为所述候选运动模型,则获得所述第二指示符。3.根据权利要求1或2所述的方法,其特征在于,所述获得第一指示符包括解析所述码流相关的序列的SPS,所述预设区域包括所述序列、所述序列中的任一条带或所述序列中的任一CU,所述获得第二指示符包括解析所述SPS。4.根据权利要求1至3中任一项所述的方法,其特征在于,所述方法还包括:如果仿射模型为所述候选运动模型,则通过解析所述序列中的条带的条带头获得第六指示符,所述第六指示符指示对于所述包括图像块的条带,任一仿射模型是否为候选运动模型。5.根据权利要求1至4中任一项所述的方法,其特征在于,所述方法还包括:如果所述6参数仿射模型为所述候选运动模型,则通过解析所述序列中的条带的条带头获得第七指示符,所述第七指示符指示对于所述包括图像块的条带,所述6参数仿射模型是否为候选预测模型。6.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:通过解析所述码流中的条带的条带头进一步获得所述第一指示符,所述预设区域包括所述条带或所述条带中的任一编码单元,通过解析所述条带头进一步获得所述第二指示符。7.根据权利要求1至6中任一项所述的方法,其特征在于,所述方法还包括:如果仿射模型为所述候选运动模型,则通过解析所述码流获得第三指示符,所述第三指示符指示所述图像块的预测模式是否为仿射融合模式。8.根据权利要求1至7中任一项所述的方法,其特征在于,如果仿射模型为所述候选运动模型,则所述方法还包括:通过解析所述码流获得第四指示符;如果所述第四指示符为第一值,则确定所述图像块的预测模式不是仿射帧间模式;如果所述第四指示符为第二值,则确定所述预测模式为仿射帧间模式,所述仿射帧间模式为6参数仿射模型模式或4参数仿射模型模式。9.根据权利要求1至9中任一项所述的方法,其特征在于,如果所述预测模式为所述仿射帧间模式,则所述方法还包括:通过解析所述码流获得第五指示符;如果所述第五指示符为第三值,则确定所述预测模式为所述6参数仿射模型模式;如果所述第五指示符为第四值,则确定所述预测模式为所述4参数仿射模型模式。10.根据权利要求1至9中任一项所述的方法,其特征在于,如果所述第一值为1,所述第二值为0,所述第三值为0,所述第四值为1,则所述方法还包括:通过将所述第四指示符和所述第五指示符的值相加,获得和值;如果所述和值大于0,则通过解析所述码流获得第一组MVD信息;如果所述和值大于1,则通过解析所述码流获得第二组MVD信息。11.一种确定一个或多个候选预测模式的装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求1至10中的任一项权利要求。12.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求1至10中的任一项权利要求。
13.一种方法,其特征在于,所述方法包括:确定SPS仿射帧间标志的第一值,所述第一值指示仿射帧间标志是否存在于编码单元级语法中;将所述SPS仿射帧间标志的第一值编码到码流中;确定SPS仿射类型标志的第二值,所述第二值指示仿射类型标志是否存在于所述编码单元级语法中;将所述SPS仿射类型标志的第二值编码到所述码流中。14.根据权利要求13所述的方法,其特征在于,根据所述第一值,条件性地指示所述SPS仿射类型标志。15.根据权利要求13或14所述的方法,其特征在于,所述方法还包括:确定仿射帧间标志的第三值,所述第三值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;将所述仿射帧间标志的第三值编码到所述码流中;确定仿射类型标志的第四值,所述第四值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;将所述仿射类型标志的第四值编码到所述码流中。16.根据权利要求13至15中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。17.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求13至16中的任一项权利要求。18.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求13至16中的任一项权利要求。
19.一种方法,其特征在于,所述包括:接收包括SPS仿射帧间标志和SPS仿射类型标志的码流;根据所述SPS仿射帧间标志的第一值,判断仿射帧间标志是否存在于编码单元级语法中;根据所述SPS仿射类型标志的第二值,判断仿射类型标志是否存在于所述编码单元级语法中。20.根据权利要求19所述的方法,其特征在于,根据所述第一值,条件性地指示所述SPS仿射类型标志。21.根据权利要求19或20所述的方法,其特征在于,所述码流还包括仿射帧间标志和仿射类型标志;所述方法还包括:根据所述仿射帧间标志的第三值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的第四值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。22.根据权利要求19至21中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。23.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求19至22中的任一项权利要求。24.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求19至22中的任一项权利要求。
25.一种方法,其特征在于,所述方法包括:确定条带仿射帧间标志的第一值,所述第一值指示约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;将所述条带仿射帧间标志的第一值编码到码流中;确定条带仿射类型标志的第二值,所述第二值指示约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式;将所述条带仿射类型标志的第二值编码到所述码流中。26.根据权利要求24所述的方法,其特征在于,根据所述第一值,条件性地指示所述条带仿射类型标志。27.根据权利要求25或26所述的方法,其特征在于,所述方法还包括:确定仿射帧间标志的第三值,所述第三值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;将所述仿射帧间标志的第三值编码到所述码流中;确定仿射类型标志的第四值,所述第四值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;将所述仿射类型标志的第四值编码到所述码流中。28.根据权利要求25至27中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。29.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求25至28中的任一项权利要求。30.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求25至28中的任一项权利要求。
31.一种方法,其特征在于,所述方法包括:接收包括条带仿射帧间标志和条带仿射类型标志的码流;根据所述条带仿射帧间标志的第一值,判断约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;根据所述条带仿射类型标志的第二值,判断约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式。32.根据权利要求30所述的方法,其特征在于,根据所述第一值,条件性地指示所述条带仿射类型标志。33.根据权利要求31或32所述的方法,其特征在于,所述码流还包括仿射帧间标志和仿射类型标志;所述方法还包括:根据所述仿射帧间标志的第三值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的第四值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。34.根据权利要求31至33中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。35.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求31至34中的任一项权利要求。36.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求31至34中的任一项权利要求。
37.一种方法,其特征在于,所述方法包括:确定SPS仿射帧间标志的第一值,所述第一值指示条带仿射帧间标志是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码所述视频序列时使用仿射帧间模式;将所述SPS仿射帧间标志的第一值编码到码流中;确定SPS仿射类型标志的第二值,所述第二值指示条带仿射类型标志是否存在于所述条带段头级语法中,约束所述视频序列的语法元素是否在解码所述视频序列时使用6参数仿射模式;将所述SPS仿射类型标志的第二值编码到所述码流中。38.根据权利要求37所述的方法,其特征在于,根据所述第一值,条件性地指示所述SPS仿射类型标志。39.根据权利要求37或38所述的方法,其特征在于,所述方法还包括:确定条带仿射帧间标志的第三值,所述第三值指示约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;将所述条带仿射帧间标志的第三值编码到所述码流中;确定条带仿射类型标志的第四值,所述第四值指示约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式;将所述条带仿射类型标志的第二值编码到所述码流中。40.根据权利要求37至39中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述条带仿射帧间标志;根据所述第二值,条件性地指示所述条带仿射类型标志。41.根据权利要求37至40中任一项所述的方法,其特征在于,所述方法还包括:确定仿射帧间标志的第五值,所述第五值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;将所述仿射帧间标志的第五值编码到所述码流中;确定仿射类型标志的第六值,所述第六值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;将所述仿射类型标志的第六值编码到所述码流中。42.根据权利要求37至41中任一项所述的方法,其特征在于,根据所述第三值,条件性地指示所述仿射帧间标志;根据所述第四值,条件性地指示所述仿射类型标志。43.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求37至42中的任一项权利要求。44.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求37至42中的任一项权利要求。
45.一种方法,其特征在于,所述方法包括:接收包括SPS仿射帧间标志和SPS仿射类型标志的码流;根据所述SPS仿射帧间标志的第一值,判断条带仿射帧间标志是否存在于条带段头级语法中,约束视频序列的语法元素是否在解码所述视频序列时使用仿射帧间模式;根据所述SPS仿射类型标志的第二值,判断条带仿射类型标志是否存在于所述条带段头级语法中,约束所述视频序列的语法元素是否在解码所述视频序列时使用6参数仿射模式。46.根据权利要求44所述的方法,其特征在于,根据所述第一值,条件性地指示所述SPS仿射类型标志。47.根据权利要求45或46所述的方法,其特征在于,所述码流还包括条带仿射帧间标志和条带仿射类型标志;所述方法还包括:根据所述条带仿射帧间标志的第三值,判断约束当前图像的语法元素是否在解码所述当前图像时使用仿射帧间模式;根据所述条带仿射类型标志的第四值,判断约束所述当前图像的语法元素是否在解码所述当前图像时使用6参数仿射模式。48.根据权利要求45至47中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述条带仿射帧间标志;根据所述第二值,条件性地指示所述条带仿射类型标志。49.根据权利要求45至48中任一项所述的方法,其特征在于,所述码流还包括仿射帧间标志和仿射类型标志;所述方法还包括:根据所述仿射帧间标志的第五值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的第六值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。50.根据权利要求45至49中任一项所述的方法,其特征在于,根据所述第三值,条件性地指示所述仿射帧间标志;根据所述第四值,条件性地指示所述仿射类型标志。51.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求45至50中的任一项权利要求。52.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求45至50中的任一项权利要求。
53.一种方法,其特征在于,所述方法包括:确定运动模型指示变量的第一值,所述第一值指示生成当前编码单元的预测像素所使用的运动模型,所述运动模型为平动模型、4参数仿射模型或6参数仿射模型中的一种;根据所述第一值,确定仿射帧间标志的第二值;将所述仿射帧间标志的第二值编码到码流中;根据所述第一值,确定仿射类型标志的第三值;将所述仿射类型标志的第三值编码到所述码流中。54.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求53。55.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求53。
56.一种方法,其特征在于,所述方法包括:接收包括仿射帧间标志和仿射类型标志的码流;根据所述仿射帧间标志的第一值和所述仿射类型标志的第二值,确定运动模型指示变量的第三值;根据所述第三值,判断运动模型是平动模型、4参数仿射模型或6参数仿射模型。
57.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求56。58.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求56。
1.一种确定一个或多个候选预测模式的方法,其特征在于,所述方法包括:处理器通过解析码流获得第一指示符,所述第一指示符指示对于预设区域中的图像块,是否允许任一仿射模型为候选运动模型;当所述第一指示符为第一值时,所述第一值指示允许仿射模型为候选运动模型,所述处理器通过解析所述码流获得第二指示符,所述第二指示符指示对于所述预设区域中的图像块,是否允许6参数仿射模型为候选运动模型;所述处理器根据所述第一指示符和所述第二指示符,为所述图像块确定一个或多个候选预测模式。2.根据权利要求1所述的方法,其特征在于,所述获得第一指示符包括解析所述码流中的序列的SPS,所述预设区域包括所述序列、所述序列中的任一条带或所述序列中的任一CU,所述获得第二指示符包括解析所述SPS以获得所述第二指示符。3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:如果允许仿射模型为所述候选运动模型,则通过解析所述序列中的图像块组的图像头/分块头/分块组头获得第六指示符,所述第六指示符指示对于所述包括图像块的图像块组,是否允许任一仿射模型为候选运动模型。4.根据权利要求1至3中任一项所述的方法,其特征在于,所述方法还包括:如果允许所述6参数仿射模型为所述候选运动模型,则通过解析所述序列中的图像块组的图像头/分块头/分块组头获得第七指示符,所述第七指示符指示对于所述包括图像块的图像块组,是否允许所述6参数仿射模型为候选预测模型。5.根据权利要求1至4中任一项所述的方法,其特征在于,所述第一指示符和/或所述第二指示符携带在图像块组的图像头中。6.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:如果允许仿射模型为所述候选运动模型,则通过解析所述码流获得第三指示符,所述第三指示符指示所述图像块的预测模式是否为仿射融合模式。7.根据权利要求1至6中任一项所述的方法,其特征在于,如果允许仿射模型为所述候选运动模型,则所述方法还包括:通过解析所述码流获得第四指示符;如果所述第四指示符为第二值,则确定所述图像块的预测模式不是仿射帧间模式;如果所述第四指示符为第一值,则确定所述预测模式为仿射帧间模式,如果所述第二指示符为第一值,则所述仿射帧间模式为6参数仿射模型模式或4参数仿射模型模式;或者,如果所述第二指示符为第二值,则所述仿射帧间模式为4参数仿射模型模式。8.根据权利要求1至7中任一项所述的方法,其特征在于,如果所述预测模式为所述仿射帧间模式,且所述第二指示符指示对于所述预设区域中的图像块,允许所述6参数仿射模型为候选运动模型,则所述方法还包括:通过解析所述码流获得第五指示符;如果所述第五指示符为第一值,则确定所述预测模式为所述6参数仿射模型模式;如果所述第五指示符为第二值,则确定所述预测模式为所述4参数仿射模型模式。9.根据权利要求1至8中任一项所述的方法,其特征在于,所述方法还包括:如果和值大于0,则通过解析所述码流获得第一组MVD信息,所述和值为所述第四指示符的值与所述第五指示符的值之和。10.根据权利要求1至9中任一项所述的方法,其特征在于,所述方法还包括:如果所述和值大于1,则通过解析所述码流获得第二组MVD信息,所述和值为所述第四指示符的值与所述第五指示符的值之和。11.一种确定一个或多个候选预测模式的装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求1至10中的任一项权利要求。12.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求1至10中的任一项权利要求。
13.一种方法,其特征在于,所述方法包括:将SPS中的仿射帧间标志的值编码到码流中,所述SPS中的仿射帧间标志的值指示仿射帧间标志是否存在于编码单元级语法中;将SPS仿射类型标志的值编码到所述码流中,所述仿射类型标志的值指示仿射类型标志是否存在于编码单元级语法中。14.根据权利要求13所述的方法,其特征在于,根据所述SPS仿射类型标志的值为第一值或第二值,条件性地指示/编码所述SPS仿射类型标志。15.根据权利要求13或14所述的方法,其特征在于,所述方法还包括:对仿射帧间标志的值进行编码,所述仿射帧间标志的值指示是否允许使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;对仿射类型标志的值进行编码,所述仿射类型标志的值指示是否允许使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。16.根据权利要求15所述的方法,其特征在于,根据所述仿射帧间标志的值为第一值或第二值,条件性地指示所述仿射帧间标志;根据所述仿射类型标志的值为第一值或第二值,条件性地指示所述仿射类型标志。17.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求13至16中的任一项权利要求。18.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求13至16中的任一项权利要求。
19.一种方法,其特征在于,所述方法包括:从码流中检索SPS仿射帧间标志和SPS仿射类型标志;根据所述SPS仿射帧间标志的值,判断仿射帧间标志是否存在于编码单元级语法中;根据所述SPS仿射类型标志的值和所述编码单元级语法中的所述仿射帧间标志,判断仿射类型标志是否存在于所述编码单元级语法中。20.根据权利要求19所述的方法,其特征在于,如果所述SPS仿射类型标志未能从所述码流中成功检索,则推断所述SPS仿射类型标志为第二值。21.根据权利要求19或20所述的方法,其特征在于,所述方法还包括:从所述码流中检索仿射帧间标志和仿射类型标志;根据所述仿射帧间标志的值,判断是否允许使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的值,判断是否允许使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。22.根据权利要求19至21中任一项所述的方法,其特征在于,如果所述仿射帧间标志未从所述码流中成功检索,则推断所述仿射帧间标志为第二值;如果所述仿射类型标志未从所述码流中成功检索,则推断所述仿射类型标志为第二值。23.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求19至22中的任一项权利要求。24.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求19至22中的任一项权利要求。
25.一种方法,其特征在于,所述方法包括:确定条带仿射帧间标志的第一值,所述第一值指示约束当前图像中的当前条带的语法元素是否在解码与所述条带仿射帧间标志关联的所述条带时使用仿射帧间模式;将所述条带仿射帧间标志的第一值编码到码流中;确定条带仿射类型标志的第二值,所述第二值指示约束所述当前图像中的当前条带的语法元素是否在解码与所述条带仿射类型标志关联的所述条带时使用6参数仿射模式;将所述条带仿射类型标志的第二值编码到所述码流中。26.根据权利要求25所述的方法,其特征在于,根据所述第一值,条件性地指示/编码所述条带仿射类型标志。27.根据权利要求25或26所述的方法,其特征在于,所述方法还包括:确定仿射帧间标志的第三值,所述第三值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;将所述仿射帧间标志的第三值编码到所述码流中;确定仿射类型标志的第四值,所述第四值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;将所述仿射类型标志的第四值编码到所述码流中。28.根据权利要求25至27中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。29.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求26至29中的任一项权利要求。30.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求26至28中的任一项权利要求。
31.一种方法,其特征在于,所述方法包括:从码流中检索条带仿射帧间标志和条带仿射类型标志;根据所述条带仿射帧间标志的值,判断是否允许在解码当前图像时使用仿射帧间模式;根据所述条带仿射类型标志的值,判断是否允许在解码所述当前图像时使用6参数仿射模式。32.根据权利要求31所述的方法,其特征在于,当所述条带仿射类型标志未从所述码流中成功检索时,推断所述条带仿射类型标志为第二值。33.根据权利要求31或32所述的方法,其特征在于,所述方法还包括:从码流中检索仿射帧间标志和仿射类型标志;根据所述仿射帧间标志的值,判断是否允许使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;根据所述仿射类型标志的值,判断是否允许使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。34.根据权利要求31至33中任一项所述的方法,其特征在于,如果所述仿射帧间标志未从所述码流中成功检索,则推断所述仿射帧间标志为第二值;如果所述仿射类型标志未从所述码流中成功检索,则推断所述仿射类型标志为第二值。35.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求32至34中的任一项权利要求。36.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求32至34中的任一项权利要求。
37.一种方法,其特征在于,所述方法包括:在SPS中指示仿射帧间标志的值,所述仿射帧间标志的值指示是否允许在解码视频序列时使用仿射帧间模式,或者约束视频序列的语法元素是否在解码所述视频序列时使用仿射帧间模式;如果所述仿射帧间标志的值指示允许在解码视频序列时使用仿射帧间模式,则指示SPS仿射类型标志的值,所述SPS仿射类型标志的值指示允许在解码视频序列时使用6参数仿射模式,或者约束视频序列的语法元素在解码所述视频序列时不使用6参数仿射模式。38.根据权利要求37所述的方法,其特征在于,根据所述SPS中的仿射帧间标志的值为第一值或第二值,条件性地指示所述SPS仿射类型标志,所述第一值不同于所述第二值。39.根据权利要求37或38所述的方法,其特征在于,所述方法还包括:在条带头中指示条带仿射帧间标志的值,所述条带仿射帧间标志的值指示是否允许在解码与所述条带仿射帧间标志关联的条带时使用仿射帧间模式,或者约束视频序列的语法元素是否在解码所述条带时不使用仿射帧间模式;如果所述条带仿射帧间标志指示允许在解码所述条带时使用仿射帧间模式,则指示条带仿射类型标志的值,所述条带仿射类型标志的值指示允许在解码所述条带时使用6参数仿射模式,或者约束视频序列的语法元素在解码所述条带时不使用6参数仿射模式。40.根据权利要求37至39中任一项所述的方法,其特征在于,根据所述SPS中的条带仿射帧间标志的值为第三值或第四值,条件性地指示所述条带仿射帧间标志,所述第三值与所述第四值不同;根据所述SPS中的条带仿射类型标志的值为第五值或第六值,条件性地指示所述条带仿射类型标志,所述第五值与所述第六值不同。41.根据权利要求37至40中任一项所述的方法,其特征在于,所述方法还包括:指示仿射帧间标志的值,所述仿射帧间标志的值指示是否使用基于仿射模型的运动补偿,通过将所述仿射帧间标志的值编码到所述码流中,生成当前编码单元的预测像素;指示仿射类型标志的值,所述仿射类型标志的值指示是否使用基于6参数仿射模型的运动补偿,通过将所述仿射类型标志的值编码到所述码流中,生成所述当前编码单元的预测像素。42.根据权利要求37至41中任一项所述的方法,其特征在于,根据所述仿射帧间标志的值为第一值或第二值,条件性地指示所述仿射帧间标志;根据所述仿射类型标志的值为第一值或第二值,条件性地指示所述仿射类型标志。43.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求37至42中的任一项权利要求。44.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求37至42中的任一项权利要求。
45.一种方法,其特征在于,所述方法包括:从码流中检索SPS仿射帧间标志;根据所述SPS仿射帧间标志的值,判断是否允许在解码视频序列时使用仿射帧间模式,或者约束视频序列的语法元素是否在解码所述视频序列时不使用仿射帧间模式;从所述码流中检索SPS仿射类型标志;根据所述SPS仿射类型标志的值,判断是否在解码所述视频序列时使用6参数仿射模式,或者约束视频序列的语法元素是否在解码所述视频序列时不使用6参数仿射模式。46.根据权利要求45所述的方法,其特征在于,根据所述SPS仿射类型标志的值为第一值或第二值,条件性地指示所述SPS仿射类型标志。47.根据权利要求45或46所述的方法,其特征在于,所述方法还包括:从所述码流中检索条带仿射帧间标志;根据所述条带仿射帧间标志的值,判断是否允许在解码与所述条带仿射帧间标志关联的条带时使用仿射帧间模式,或者约束所述条带的语法元素是否在解码所述条带时不使用仿射帧间模式;检索从所述码流中检索条带仿射类型标志;根据所述条带仿射类型标志的值,判断是否在解码所述条带时使用6参数仿射模式,或者约束所述条带的语法元素是否在解码所述条带时不使用6参数仿射模式。48.根据权利要求45或46所述的方法,其特征在于,根据所述条带仿射帧间标志的值为第三值或第四值,条件性地指示所述条带仿射帧间标志;根据所述条带仿射类型标志的值为第五值或第六值,条件性地指示所述条带仿射类型标志。49.根据权利要求45或46所述的方法,其特征在于,所述方法还包括:从所述码流中检索仿射帧间标志;根据所述仿射帧间标志的值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;如果使用基于仿射模型的运动补偿来生成所述当前编码单元的预测像素,则从所述码流中检索仿射类型标志;根据所述仿射类型标志的值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。50.根据权利要求45至49中任一项所述的方法,其特征在于,如果所述仿射帧间标志未成功检索,则推断所述仿射帧间标志为第二值;如果所述仿射类型标志未成功检索,则推断所述仿射类型标志为第二值。51.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求45至50中的任一项权利要求。52.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求45至50中的任一项权利要求。
53.一种方法,其特征在于,所述方法包括:确定仿射帧间标志的第二值;将所述仿射帧间标志的第二值编码到码流中;确定仿射类型标志的第三值;将所述仿射类型标志的第三值编码到所述码流中;确定运动模型指示变量的第一值,所述第一值指示生成当前编码单元的预测像素所使用的运动模型,所述运动模型为平动模型、4参数仿射模型或6参数仿射模型中的一种;所述运动模型指示变量的第一值根据所述仿射帧间标志的第二值与所述仿射类型标志的第三值之和确定。54.一种装置,其特征在于,所述装置包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求53。55.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求53。
56.一种方法,其特征在于,所述方法包括:接收包括仿射帧间标志和仿射类型标志的码流;根据所述仿射帧间标志的第一值和所述仿射类型标志的第二值,确定运动模型指示变量的第三值;根据所述第三值,判断运动模型是平动模型、4参数仿射模型或6参数仿射模型。57.根据权利要求56所述的方法,其特征在于,所述根据所述仿射帧间标志的第一值和所述仿射类型标志的第二值,确定运动模型指示变量的第三值包括:根据所述仿射帧间标志的第一值与所述仿射类型标志的第二值之和,确定所述运动模型指示变量的第三值。58.一种装置,其特征在于,包括:存储器;处理器,与所述存储器耦合,并用于执行权利要求56或57。59.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求56或57。
虽然本发明提供了几个实施例,但应理解,在不脱离本发明的精神或范围的情况下,所公开的系统和方法可能通过其它多种具体形式体现。本发明的示例应被视为说明性而非限制性的,且本发明并不限于本文中所给出的细节。例如,各种元件或组件可以组合或集成在另一系统中,或者某些特征可以省略或不实施。
另外,在不脱离本发明范围的情况下,各种实施例中描述和说明为离散或单独的技术、系统、子系统和方法可以与其它系统、组件、技术或方法组合或集成。展示或论述为耦合的其它项也可以采用电方式、机械方式或其它方式经由某一接口、设备或中间组件间接地耦合或通信。其它变更、替换、更改示例对本领域技术人员而言是显而易见的,均不脱离本文中公开的精神和范围。

Claims (59)

1.一种确定一个或多个候选预测模式的方法,其特征在于,所述方法包括:
处理器通过解析码流获得第一指示符,所述第一指示符指示对于预设区域中的图像块,是否允许任一仿射模型为候选运动模型;
当所述第一指示符为第一值时,所述第一值指示对于所述预设区域中的图像块,允许仿射模型为候选运动模型,所述处理器通过解析所述码流获得第二指示符,所述第二指示符指示对于所述预设区域中的图像块,是否允许6参数仿射模型为候选运动模型;
所述处理器根据所述第一指示符和所述第二指示符,为所述图像块确定一个或多个候选预测模式。
2.根据权利要求1所述的方法,其特征在于,所述获得第一指示符包括解析所述码流相关的序列的序列参数集(sequence parameter set,SPS),所述预设区域包括所述序列、所述序列中的任一条带或所述序列中的任一编码单元(coding unit,CU),所述获得第二指示符包括解析所述SPS以获得所述第二指示符。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:如果允许仿射模型为所述候选运动模型,则通过解析所述序列中的图像块组的图像头/分块头/分块组头获得第六指示符,所述第六指示符指示对于所述包括图像块的图像块组,是否允许任一仿射模型为候选运动模型。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述方法还包括:如果允许所述6参数仿射模型为所述候选运动模型,则通过解析所述序列中的图像块组的图像头/分块头/分块组头获得第七指示符,所述第七指示符指示对于所述包括图像块的图像块组,是否允许所述6参数仿射模型为候选预测模型。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述第一指示符和/或所述第二指示符携带在图像块组的图像头中。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:如果允许仿射模型为所述候选运动模型,则通过解析所述码流获得第三指示符,所述第三指示符指示所述图像块的预测模式是否为仿射融合模式。
7.根据权利要求1至6中任一项所述的方法,其特征在于,如果允许仿射模型为所述候选运动模型,则所述方法还包括:
通过解析所述码流获得第四指示符;
如果所述第四指示符为第二值,则确定所述图像块的预测模式不是仿射帧间模式;
如果所述第四指示符为第一值,则确定所述预测模式为仿射帧间模式,
其中,如果所述第二指示符为第一值,则所述仿射帧间模式为6参数仿射模型模式或4参数仿射模型模式;或者,如果所述第二指示符为第二值,则所述仿射帧间模式为4参数仿射模型模式。
8.根据权利要求1至7中任一项所述的方法,其特征在于,如果所述预测模式为所述仿射帧间模式,且所述第二指示符指示对于所述预设区域中的图像块,允许所述6参数仿射模型为候选运动模型,则所述方法还包括:
通过解析所述码流获得第五指示符;
如果所述第五指示符为第一值,则确定所述预测模式为所述6参数仿射模型模式;
如果所述第五指示符为第二值,则确定所述预测模式为所述4参数仿射模型模式。
9.根据权利要求1至8中任一项所述的方法,其特征在于,所述方法还包括:如果和值大于0,则通过解析所述码流获得第一组运动矢量差(motion vector difference,MVD)信息,其中,所述和值为所述第四指示符的值与所述第五指示符的值之和。
10.根据权利要求1至9中任一项所述的方法,其特征在于,所述方法还包括:如果所述和值大于1,则通过解析所述码流获得第二组MVD信息,其中,所述和值为所述第四指示符的值与所述第五指示符的值之和。
11.一种确定一个或多个候选预测模式的装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求1至10中的任一项权利要求。
12.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求1至10中的任一项权利要求。
13.一种方法,其特征在于,所述方法包括:
将序列参数集(sequence parameter set,SPS)中的仿射帧间标志的值编码到码流中,其中,所述SPS中的仿射帧间标志的值指示仿射帧间标志是否存在于编码单元级语法中;
将SPS仿射类型标志的值编码到所述码流中,其中,所述SPS仿射类型标志的值指示仿射类型标志是否存在于所述编码单元级语法中。
14.根据权利要求13所述的方法,其特征在于,根据所述SPS仿射类型标志的值为第一值或第二值,条件性地指示/编码所述SPS仿射类型标志。
15.根据权利要求13或14所述的方法,其特征在于,所述方法还包括:
对仿射帧间标志的值进行编码,所述仿射帧间标志的值指示是否允许使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;
对仿射类型标志的值进行编码,所述仿射类型标志的值指示是否允许使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
16.根据权利要求15所述的方法,其特征在于,根据所述仿射帧间标志的值为第一值或第二值,条件性地指示所述仿射帧间标志;根据所述仿射类型标志的值为第一值或第二值,条件性地指示所述仿射类型标志。
17.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求13至16中的任一项权利要求。
18.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求13至16中的任一项权利要求。
19.一种方法,其特征在于,所述方法包括:
从码流中检索序列参数集(sequence parameter set,SPS)仿射帧间标志和SPS仿射类型标志;
根据所述SPS仿射帧间标志的值,判断仿射帧间标志是否存在于编码单元级语法;
根据所述SPS仿射类型标志的值和所述编码单元级语法中的仿射帧间标志,判断仿射类型标志是否存在于所述编码单元级语法中。
20.根据权利要求19所述的方法,其特征在于,如果所述SPS仿射类型标志未能从所述码流中成功检索,则推断所述SPS仿射类型标志为第二值。
21.根据权利要求19或20所述的方法,其特征在于,所述方法还包括:
从所述码流中检索仿射帧间标志和仿射类型标志;
根据所述仿射帧间标志的值,判断是否允许使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;
根据所述仿射类型标志的值,判断是否允许使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
22.根据权利要求19至21中任一项所述的方法,其特征在于,如果所述仿射帧间标志未从所述码流中成功检索,则推断所述仿射帧间标志为第二值;如果所述仿射类型标志未从所述码流中成功检索,则推断所述仿射类型标志为第二值。
23.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求19至22中的任一项权利要求。
24.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求19至22中的任一项权利要求。
25.一种方法,其特征在于,所述方法包括:
确定条带仿射帧间标志的第一值,所述第一值指示约束当前图像中的当前条带的语法元素是否在解码与所述条带仿射帧间标志关联的条带时使用仿射帧间模式;
将所述条带仿射帧间标志的第一值编码到码流中;
确定条带仿射类型标志的第二值,其中,所述第二值指示约束所述当前图像中的当前条带的语法元素是否在解码与所述条带仿射类型标志关联的条带时使用6参数仿射模式;
将所述条带仿射类型标志的第二值编码到所述码流中。
26.根据权利要求25所述的方法,其特征在于,根据所述第一值,条件性地指示/编码所述条带仿射类型标志。
27.根据权利要求25或26所述的方法,其特征在于,所述方法还包括:
确定仿射帧间标志的第三值,其中,所述第三值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;
将所述仿射帧间标志的第三值编码到所述码流中;
确定仿射类型标志的第四值,其中,所述第四值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素;
将所述仿射类型标志的第四值编码到所述码流中。
28.根据权利要求25至27中任一项所述的方法,其特征在于,根据所述第一值,条件性地指示所述仿射帧间标志;根据所述第二值,条件性地指示所述仿射类型标志。
29.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求26至29中的任一项权利要求。
30.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求26至28中的任一项权利要求。
31.一种方法,其特征在于,所述方法包括:
从码流中检索条带仿射帧间标志和条带仿射类型标志;
根据所述条带仿射帧间标志的值,判断是否允许在解码当前图像时使用仿射帧间模式;
根据所述条带仿射类型标志的值,判断是否允许在解码所述当前图像时使用6参数仿射模式。
32.根据权利要求31所述的方法,其特征在于,当所述条带仿射类型标志未从所述码流中成功检索时,推断所述条带仿射类型标志为第二值。
33.根据权利要求31或32所述的方法,其特征在于,所述方法还包括:
从所述码流中检索仿射帧间标志和仿射类型标志;
根据所述仿射帧间标志的值,判断是否允许使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;
根据所述仿射类型标志的值,判断是否允许使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
34.根据权利要求31至33中任一项所述的方法,其特征在于,如果所述仿射帧间标志未从所述码流中成功检索,则推断所述仿射帧间标志为第二值;如果所述仿射类型标志未从所述码流中成功检索,则推断所述仿射类型标志为第二值。
35.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求32至34中的任一项权利要求。
36.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求32至34中的任一项权利要求。
37.一种方法,其特征在于,所述方法包括:
在序列参数集(sequence parameter set,SPS)中指示仿射帧间标志的值,所述仿射帧间标志的值指示是否允许在解码视频序列时使用仿射帧间模式,或者约束视频序列的语法元素是否在解码所述视频序列时不使用仿射帧间模式;
如果所述仿射帧间标志的值指示允许在解码视频序列时使用仿射帧间模式,则指示SPS仿射类型标志的值,所述SPS仿射类型标志的值指示允许在解码所述视频序列时使用6参数仿射模式,或者约束视频序列的语法元素在解码所述视频序列时不使用6参数仿射模式。
38.根据权利要求37所述的方法,其特征在于,根据所述SPS中的仿射帧间标志的值为第一值或第二值,条件性地指示所述SPS仿射类型标志,所述第一值不同于所述第二值。
39.根据权利要求37或38所述的方法,其特征在于,所述方法还包括:
在条带头中指示条带仿射帧间标志的值,其中,所述条带仿射帧间标志的值指示是否允许在解码与所述条带仿射帧间标志关联的条带时使用仿射帧间模式,或者约束视频序列的语法元素是否在解码条带时不使用仿射帧间模式;
如果所述条带仿射帧间标志的值指示允许在解码所述条带时使用仿射帧间模式,则指示条带仿射类型标志的值,所述条带仿射类型标志的值指示允许在解码所述条带时使用6参数仿射模式,或者约束视频序列的语法元素在解码所述条带时不使用6参数仿射模式。
40.根据权利要求37至39中任一项所述的方法,其特征在于,根据所述SPS中的条带仿射帧间标志的值为第三值或第四值,条件性地指示所述条带仿射帧间标志,其中,所述第三值与所述第四值不同;根据所述SPS中的条带仿射类型标志的值为第五值或第六值,条件性地指示所述条带仿射类型标志,其中,所述第五值与所述第六值不同。
41.根据权利要求37至40中任一项所述的方法,其特征在于,所述方法还包括:
通过将仿射帧间标志的值编码到码流中,指示所述仿射帧间标志的值,其中,所述仿射帧间标志的值指示是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;
通过将仿射类型标志的值编码到所述码流中,指示所述仿射类型标志的值,其中,所述仿射类型标志的值指示是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
42.根据权利要求37至41中任一项所述的方法,其特征在于,根据所述仿射帧间标志的值为第一值或第二值,条件性地指示所述仿射帧间标志;根据所述仿射类型标志的值为第一值或第二值,条件性地指示所述仿射类型标志。
43.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求37至42中的任一项权利要求。
44.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求37至42中的任一项权利要求。
45.一种方法,其特征在于,所述方法包括:
从码流中检索序列参数集(sequence parameter set,SPS)仿射帧间标志;
根据所述SPS仿射帧间标志的值,判断是否允许在解码视频序列时使用仿射帧间模式,或者约束视频序列的语法元素是否在解码所述视频序列时不使用仿射帧间模式;
从所述码流中检索SPS仿射类型标志;
根据所述SPS仿射类型标志的值,判断是否在解码所述视频序列时使用6参数仿射模式,或者约束所述视频序列的语法元素是否在解码所述视频序列时不使用6参数仿射模式。
46.根据权利要求45所述的方法,其特征在于,根据所述SPS仿射类型标志的值为第一值或第二值,条件性地指示所述SPS仿射类型标志。
47.根据权利要求45或46所述的方法,其特征在于,所述方法还包括:
从所述码流中检索条带仿射帧间标志;
根据所述条带仿射帧间标志的值,判断是否允许在解码与所述条带仿射帧间标志关联的条带时使用仿射帧间模式,或者约束条带的语法元素是否在解码所述条带时不使用仿射帧间模式;
从所述码流中检索条带仿射类型标志;
根据所述条带仿射类型标志的值,判断是否在解码所述条带时使用6参数仿射模式,或者约束所述条带的语法元素是否在解码所述条带时不使用6参数仿射模式。
48.根据权利要求45或46所述的方法,其特征在于,根据所述条带仿射帧间标志的值为第三值或第四值,条件性地指示所述条带仿射帧间标志;根据所述条带仿射类型标志的值为第五值或第六值,条件性地指示所述条带仿射类型标志。
49.根据权利要求45或46所述的方法,其特征在于,所述方法还包括:
从所述码流中检索仿射帧间标志;
根据所述仿射帧间标志的值,判断是否使用基于仿射模型的运动补偿来生成当前编码单元的预测像素;
如果使用基于仿射模型的运动补偿来生成所述当前编码单元的预测像素,则从所述码流中检索仿射类型标志;
根据所述仿射类型标志的值,判断是否使用基于6参数仿射模型的运动补偿来生成所述当前编码单元的预测像素。
50.根据权利要求45至49中任一项所述的方法,其特征在于,如果所述仿射帧间标志未成功检索,则推断所述仿射帧间标志为第二值;如果所述仿射类型标志未成功检索,则推断所述仿射类型标志为第二值。
51.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求45至50中的任一项权利要求。
52.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求45至50中的任一项权利要求。
53.一种方法,其特征在于,所述方法包括:
确定仿射帧间标志的第二值;
将所述仿射帧间标志的第二值编码到码流中;
确定仿射类型标志的第三值;
将所述仿射类型标志的第三值编码到所述码流中;
确定运动模型指示变量的第一值,所述第一值指示生成当前编码单元的预测像素所使用的运动模型,所述运动模型为平动模型、4参数仿射模型或6参数仿射模型中的一种,所述运动模型指示变量的第一值通过所述仿射帧间标志的第二值与所述仿射类型标志的第三值之和确定。
54.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求至53。
55.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求53。
56.一种方法,其特征在于,所述方法包括:
接收包括仿射帧间标志和仿射类型标志的码流;
根据所述仿射帧间标志的第一值和所述仿射类型标志的第二值,确定运动模型指示变量的第三值;
根据所述第三值,判断运动模型是平动模型、4参数仿射模型或6参数仿射模型。
57.根据权利要求56所述的方法,其特征在于,所述根据所述仿射帧间标志的第一值和所述仿射类型标志的第二值,确定运动模型指示变量的第三值包括:
根据所述仿射帧间标志的第一值与所述仿射类型标志的第二值之和,确定所述运动模型指示变量的第三值。
58.一种装置,其特征在于,所述装置包括:
存储器;
处理器,与所述存储器耦合,并用于执行权利要求56或57。
59.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非瞬时性介质中的计算机可执行指令;当处理器执行所述计算机可执行指令时,使得一种装置执行权利要求56或57。
CN201980047786.3A 2018-07-17 2019-03-05 基于运动模型指示的解码方法、装置和可读存储介质 Active CN112425176B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201862699554P 2018-07-17 2018-07-17
US62/699,554 2018-07-17
US201862725684P 2018-08-31 2018-08-31
US62/725,684 2018-08-31
US201862732343P 2018-09-17 2018-09-17
US62/732,343 2018-09-17
PCT/US2019/020743 WO2020018152A1 (en) 2018-07-17 2019-03-05 Motion model signaling

Publications (2)

Publication Number Publication Date
CN112425176A true CN112425176A (zh) 2021-02-26
CN112425176B CN112425176B (zh) 2022-05-24

Family

ID=65818095

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980047786.3A Active CN112425176B (zh) 2018-07-17 2019-03-05 基于运动模型指示的解码方法、装置和可读存储介质

Country Status (9)

Country Link
US (2) US11277629B2 (zh)
EP (1) EP3815379A1 (zh)
JP (2) JP7214829B2 (zh)
KR (2) KR102617280B1 (zh)
CN (1) CN112425176B (zh)
BR (1) BR112021000762A2 (zh)
MX (1) MX2021000615A (zh)
SG (1) SG11202100434TA (zh)
WO (1) WO2020018152A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024074134A1 (en) * 2022-10-04 2024-04-11 Mediatek Inc. Affine motion based prediction in video coding

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017087751A1 (en) * 2015-11-20 2017-05-26 Mediatek Inc. Method and apparatus for global motion compensation in video coding system
WO2017118409A1 (en) * 2016-01-07 2017-07-13 Mediatek Inc. Method and apparatus for affine merge mode prediction for video coding system
US20170332095A1 (en) * 2016-05-16 2017-11-16 Qualcomm Incorporated Affine motion prediction for video coding
CN107979756A (zh) * 2016-09-14 2018-05-01 联发科技股份有限公司 一种视频编码系统所使用的视频编码方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018061563A1 (ja) * 2016-09-27 2018-04-05 シャープ株式会社 アフィン動きベクトル導出装置、予測画像生成装置、動画像復号装置、および動画像符号化装置
US10448010B2 (en) 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
US10555006B2 (en) * 2016-12-22 2020-02-04 Qualcomm Incorporated Deriving bilateral filter information based on a prediction mode in video coding
US10873744B2 (en) 2017-01-03 2020-12-22 Lg Electronics Inc. Method and device for processing video signal by means of affine prediction
US11877001B2 (en) * 2017-10-10 2024-01-16 Qualcomm Incorporated Affine prediction in video coding
JP7104186B2 (ja) * 2018-06-05 2022-07-20 北京字節跳動網絡技術有限公司 Ibcとatmvpとの間でのインタラクション

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017087751A1 (en) * 2015-11-20 2017-05-26 Mediatek Inc. Method and apparatus for global motion compensation in video coding system
WO2017118409A1 (en) * 2016-01-07 2017-07-13 Mediatek Inc. Method and apparatus for affine merge mode prediction for video coding system
US20170332095A1 (en) * 2016-05-16 2017-11-16 Qualcomm Incorporated Affine motion prediction for video coding
CN107979756A (zh) * 2016-09-14 2018-05-01 联发科技股份有限公司 一种视频编码系统所使用的视频编码方法及装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
JIANLE CHEN: "Algorithm Description of Joint Exploration Test Model 7", 《JVET》 *
YU HAN: "CE4.1.3: Affine motion compensation prediction", 《JVET》 *
沈秋: "基于仿射模型的无人机视频实时压缩算法", 《电子与信息学报》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024074134A1 (en) * 2022-10-04 2024-04-11 Mediatek Inc. Affine motion based prediction in video coding

Also Published As

Publication number Publication date
SG11202100434TA (en) 2021-02-25
EP3815379A1 (en) 2021-05-05
KR20240005126A (ko) 2024-01-11
US20220264135A1 (en) 2022-08-18
US20210168391A1 (en) 2021-06-03
CN112425176B (zh) 2022-05-24
KR102617280B1 (ko) 2023-12-27
JP2021530920A (ja) 2021-11-11
US11277629B2 (en) 2022-03-15
US11895313B2 (en) 2024-02-06
KR20210028720A (ko) 2021-03-12
JP7214829B2 (ja) 2023-01-30
JP2023052485A (ja) 2023-04-11
WO2020018152A1 (en) 2020-01-23
BR112021000762A2 (pt) 2021-04-13
MX2021000615A (es) 2021-07-02

Similar Documents

Publication Publication Date Title
US11398058B2 (en) Prediction type signaling and temporal order signaling in point cloud coding (PCC)
CN110291790B (zh) 视频编码中的运动矢量(mv)约束和变换约束
US11831878B2 (en) Video decoding and encoding
CN112823518A (zh) 用于译码块的三角划分块的帧间预测的装置及方法
US11843800B2 (en) Selection and signaling of motion vector (MV) precisions
US20240089469A1 (en) Video encoding device and video decoding device
KR102593525B1 (ko) 비디오 픽처 디코딩 및 인코딩 방법 및 장치
CN111937389B (zh) 用于视频编解码的设备和方法
US11895313B2 (en) Motion model signaling
CN115842920A (zh) 图像处理方法、装置、设备、存储介质及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant