CN113170202A - 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 - Google Patents
用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 Download PDFInfo
- Publication number
- CN113170202A CN113170202A CN201980079104.7A CN201980079104A CN113170202A CN 113170202 A CN113170202 A CN 113170202A CN 201980079104 A CN201980079104 A CN 201980079104A CN 113170202 A CN113170202 A CN 113170202A
- Authority
- CN
- China
- Prior art keywords
- block
- mode
- mpm list
- intra prediction
- intra
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 292
- 238000012545 processing Methods 0.000 claims abstract description 65
- 230000006854 communication Effects 0.000 claims description 35
- 238000004891 communication Methods 0.000 claims description 35
- 238000004590 computer program Methods 0.000 claims description 5
- 230000002708 enhancing effect Effects 0.000 abstract 1
- 238000013139 quantization Methods 0.000 description 81
- 239000013598 vector Substances 0.000 description 23
- 230000008569 process Effects 0.000 description 22
- 239000000872 buffer Substances 0.000 description 21
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 18
- 230000006870 function Effects 0.000 description 17
- 230000005540 biological transmission Effects 0.000 description 16
- 238000010276 construction Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 14
- 238000003491 array Methods 0.000 description 12
- 238000005192 partition Methods 0.000 description 12
- 238000001914 filtration Methods 0.000 description 11
- 239000013307 optical fiber Substances 0.000 description 10
- 230000011218 segmentation Effects 0.000 description 10
- 238000000638 solvent extraction Methods 0.000 description 9
- 241000023320 Luma <angiosperm> Species 0.000 description 7
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 7
- QEDQZYNGDXULGO-UHFFFAOYSA-N 3-methyl-2-(3-methylphenyl)morpholine Chemical compound CC1NCCOC1C1=CC=CC(C)=C1 QEDQZYNGDXULGO-UHFFFAOYSA-N 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 6
- 230000009466 transformation Effects 0.000 description 6
- FZEIVUHEODGHML-UHFFFAOYSA-N 2-phenyl-3,6-dimethylmorpholine Chemical compound O1C(C)CNC(C)C1C1=CC=CC=C1 FZEIVUHEODGHML-UHFFFAOYSA-N 0.000 description 5
- 230000003044 adaptive effect Effects 0.000 description 5
- 238000007781 pre-processing Methods 0.000 description 5
- 238000003709 image segmentation Methods 0.000 description 4
- 230000002123 temporal effect Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 2
- 230000002146 bilateral effect Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000009795 derivation Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000012952 Resampling Methods 0.000 description 1
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000013138 pruning Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Abstract
本发明涉及图像处理领域。本发明尤其涉及在解码或编码时提升图像块的预测。一种用于解码图像块的方法，包括：获取当前编码块的指示参数。所述指示参数表示所述当前编码块是否应用多假设预测。当所述指示参数表示所述当前编码块应用多假设预测时，根据平面模式解码所述当前编码块。
Description
相关申请案交叉申请
本申请要求于2018年11月29日提交的第62/773,149号、发明名称为“用于构建应用多假设预测的块的MPM列表的编码器、解码器及相应方法(AN ENCODER,A DECODER ANDCORRESPONDING METHODS OF MPM LIST CONSTRUCTION FOR BLOCKS WITH MULTI-HYPOTHESIS PREDICTION)”，以及2018年12月20日提交的第62/783,149号、发明名称为“用于构建应用多假设预测的块的MPM列表的编码器、解码器及相应方法(AN ENCODER,ADECODER AND CORRESPONDING METHODS OF MPM LIST CONSTRUCTION FOR BLOCKS WITHMULTI-HYPOTHESIS PREDICTION)”美国临时申请的权益，其全部内容以引用的方式并入本文中。
技术领域
本申请(本发明)实施例大体上涉及图像处理领域，更具体地，涉及构建最可能模式列表。
背景技术
视频译码(视频编码和解码)广泛用于数字视频应用，例如广播数字TV、通过互联网和移动网络传输视频、实时会话应用(如视频聊天)、视频会议、DVD和蓝光光盘、视频内容采集和编辑系统，以及安全应用的摄像机。
即使在视频较短的情况下也需要对大量的视频数据进行描述，当数据要在带宽容量受限的通信网络中发送或以其它方式发送时，这样会造成困难。因此，视频数据通常要先压缩然后在现代电信网络中发送。由于内存资源有限，当在设备中视频时，视频的大小也成为问题。视频压缩设备通常在源侧使用软件和/或硬件，以在发送或存储之前对视频数据进行编码，从而减少用来表示数字视频图像所需的数据量。然后，压缩数据在目的侧由用于对视频数据进行解码的视频解压缩设备接收。在有限的网络资源以及对更高视频质量的需求不断增长的情况下，需要改进压缩和解压缩技术，这些改进的技术在几乎不影响图像质量的情况下能够提高压缩比。
发明内容
本发明的目的是提供一种改进的方法和装置，降低解码复杂度，提高视频解码效率。
上述和其它目的通过独立权利要求请求保护的主题实现。其它实现方式从从属权利要求、说明书和附图中是显而易见的。
第一方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：平面模式、DC模式、垂直模式和水平模式；根据所述当前编码块的帧内预测模式解码所述当前编码块。
第二方面，本发明涉及一种由解码设备实现的用于图像(或帧)块的方法，包括：根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：平面模式、DC模式和垂直模式；根据所述当前编码块的帧内预测模式解码所述当前编码块。
第三方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，
根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：平面模式和DC模式；
根据所述当前编码块的帧内预测模式解码所述当前编码块。
第四方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，
根据平面模式解码所述当前编码块。
第五方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，
根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：DC模式、平面模式、垂直模式和水平模式；
根据所述当前编码块的帧内预测模式解码所述当前编码块。
第六方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，
根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：DC模式、平面模式和垂直模式；
根据所述当前编码块的帧内预测模式解码所述当前编码块。
第七方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，
根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：DC模式和平面模式；
根据所述当前编码块的帧内预测模式解码所述当前编码块。
第八方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，
根据DC模式解码所述当前编码块。
第九方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将水平模式添加到MPM列表中。
第十方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将垂直模式添加到MPM列表中。
第十一方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将水平模式添加到MPM列表中；
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将另一个水平模式添加到MPM列表中。
第十二方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将水平模式添加到MPM列表中；
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将平面模式、DC模式和垂直模式添加到MPM列表中。
第十三方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将水平模式添加到MPM列表中；
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将垂直模式添加到MPM列表中。
第十四方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将垂直模式添加到MPM列表中；
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将另一个垂直模式添加到MPM列表中。
第十五方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将垂直模式添加到MPM列表中；
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将平面模式、DC模式和水平模式添加到MPM列表中。
第十六方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将垂直模式添加到MPM列表中；
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将水平模式添加到MPM列表中。
第十七方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块不可用，且所述当前编码块的上块不可用时，
将平面模式和DC模式添加到MPM列表中。
第十八方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块不可用，所述当前编码块的上块可用，且所述上块的帧内预测模式为平面模式时，
将平面模式和DC模式添加到MPM列表中。
第十九方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块不可用，所述当前编码块的上块可用，且所述上块的帧内预测模式为DC模式时，
将DC模式和平面模式添加到MPM列表中。
第二十方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块不可用，所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，
将垂直模式、DC模式和平面模式添加到MPM列表中。
第二十一方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块不可用，所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，
将水平模式和DC模式添加到MPM列表中。
第二十二方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为平面模式，且所述当前编码块的上块不可用时，
将平面模式和DC模式添加到MPM列表中。
第二十三方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为平面模式，所述当前编码块的上块可用，且所述上块的帧内预测模式为平面模式时，
将平面模式和DC模式添加到MPM列表中。
第二十四方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为平面模式，所述当前编码块的上块可用，且所述上块的帧内预测模式为DC模式时，
将平面模式和DC模式添加到MPM列表中。
第二十五方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为平面模式，所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，
将平面模式和垂直模式添加到MPM列表中。
第二十六方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为平面模式，所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，
将平面模式和水平模式添加到MPM列表中。
第二十七方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为DC模式，且所述当前编码块的上块不可用时，
将DC模式和平面模式添加到MPM列表中。
第二十八方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为DC模式，所述当前编码块的上块可用，且所述上块的帧内预测模式为平面模式时，
将DC模式和平面模式添加到MPM列表中。
第二十九方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为DC模式，所述当前编码块的上块可用，且所述上块的帧内预测模式为DC模式时，
将DC模式和平面模式添加到MPM列表中。
第三十方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为DC模式，所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，
将DC模式和垂直模式添加到MPM列表中。
第三十一方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式为DC模式，所述当前编码块的上块可用，所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，
将DC模式和水平模式添加到MPM列表中。
第三十二方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)，且所述当前编码块的上块不可用时，将垂直模式和平面模式添加到MPM列表中。
第三十三方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)，所述当前编码块的上块可用，且所述上块的帧内预测模式为平面模式时，将垂直模式和平面模式添加到MPM列表中。
第三十四方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)，所述当前编码块的上块可用，且所述上块的帧内预测模式为DC模式时，将垂直模式和DC模式添加到MPM列表中。
第三十五方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)，且所述当前编码块的上块不可用时，
将水平模式和平面模式添加到MPM列表中。
第三十六方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)，所述当前编码块的上块可用，且所述上块的帧内预测模式为平面模式时，
将水平模式和平面模式添加到MPM列表中。
第三十七方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
确定当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
确定当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的左块可用，所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)，所述当前编码块的上块可用，且所述上块的帧内预测模式为DC模式时，
将水平模式和DC模式添加到MPM列表中。
第三十八方面，本发明涉及一种根据最可能模式(most probable mode，MPM)列表处理块的方法，所述方法包括：
根据当前块的邻块的帧内预测模式，构建所述当前块的第一MPM列表(在一个示例中，所述当前块的MPM列表包括6种帧内预测模式)。在一个示例中，一个MPM列表包括一种或多种帧内预测模式是指MPM列表包括一种或多种帧内预测模式对应的一个或多个值，一个值对应一种帧内预测模式；
根据所述当前块的第一MPM列表中的一种或多种帧内预测模式，构建所述当前块的第二MPM列表；
根据码流获取所述当前块的指示参数，所述指示参数表示所述当前块是否应用多假设预测；
根据所述指示参数的值，使用第一MPM列表或第二MPM列表处理所述当前块(例如，所述MPM列表可以用于所述当前块的帧内预测)。
结合第一方面或第三十八方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：所述根据所述当前块的第一MPM列表中的一种或多种帧内预测模式，构建所述当前块的第二MPM列表，包括：
当所述当前块的第二MPM列表包括一种帧内预测模式时，根据所述当前块的第一MPM列表中的第一种帧内预测模式构建所述当前块的第二MPM列表。
结合第一方面或第三十八方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：根据所述当前块的第一MPM列表中的一种或多种帧内预测模式，构建所述当前块的第二MPM列表，包括：
当所述当前块的第二MPM列表包括两种帧内预测模式时，根据所述当前块的第一MPM列表中的第一种帧内预测模式和第二种帧内预测模式构建所述当前块的第二MPM列表。
结合第一方面或第三十七方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：所述根据所述当前块的第一MPM列表中的一种或多种帧内预测模式，构建所述当前块的第二MPM列表，包括：
当所述当前块的第二MPM列表包括三种帧内预测模式时，根据所述当前块的第一MPM列表中的第一种帧内预测模式、第二种帧内预测模式和第三种帧内预测模式构建所述当前块的第二MPM列表。
结合第一方面或第三十八方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：根据所述当前块的第一MPM列表中的一种或多种帧内预测模式，构建所述当前块的第二MPM列表，包括：
当所述当前块的第二MPM列表包括四种帧内预测模式时，根据所述当前块的第一MPM列表中的第一种帧内预测模式、第二种帧内预测模式、第三种帧内预测模式和第四种帧内预测模式构建所述当前块的第二MPM列表。
结合第一方面或第三十八方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的所述第一MPM列表中的第一种帧内预测模式为平面模式时，将平面模式添加到第二MPM列表中(在一个示例中，平面模式为所述当前块的MPM列表中的第一种帧内预测模式)。
结合第一方面或第三十八方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的所述第一MPM列表中的第一种帧内预测模式为DC模式时，将DC模式添加到第二MPM列表中(例如，DC模式为所述当前块的第二MPM列表中的第一种帧内预测模式)。
结合第一方面或第三十八方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的所述第一MPM列表中第一种帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)，将水平模式添加到所述当前块的第二MPM列表中(在一个示例中，水平模式为所述当前块的第二MPM列表中的第一种帧内预测模式)。
结合第一方面或第三十八方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：所述当前块的所述第一MPM列表中第一种帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)，将垂直模式添加到所述当前块的第二MPM列表中(在一个示例中，垂直模式为所述当前块的第二MPM列表中的第一种帧内预测模式)。
第三十九方面，本发明涉及一种构建用于帧内预测的最可能模式(most probablemode，MPM)列表的方法，所述方法包括：
根据码流获取当前块的指示参数，其中，所述指示参数表示当前编码块是否应用多假设预测；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，
确定所述当前编码块的左块(例如，图6中的块L)是否可用(例如，如果左块没有帧内预测模式，左块不可用；如果左块有帧内预测模式，左块可用)；
当所述当前编码块的左块不可用时，将平面模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表可以为空列表)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的左块可用，且所述左块的帧内预测模式为平面模式时，将平面模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表可以为空列表)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的左块可用，且所述左块的帧内预测模式为DC模式时，将DC模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表可以为空列表)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将水平模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表可以为空列表)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的左块可用，且所述左块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将垂直模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表可以为空列表)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
确定所述当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的上块不可用时，将平面模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，0)、(1，0)、(50，0)或(18，0)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
确定所述当前编码块的上块(例如，图6中的块A)是否可用(例如，如果上块没有帧内预测模式，上块不可用；如果上块有帧内预测模式，上块可用)；
当所述当前编码块的上块不可用，且所述当前编码块的MPM列表中不包括平面模式(在一个示例中，当左块的帧内预测模式为DC模式或角度模式时，在将第一种帧内预测模式添加到MPM列表后，MPM列表中不包括平面模式)时，将平面模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(1，0)、(50，0)或(18，0)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，且所述上块的帧内预测模式为平面模式时，将平面模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，0)、(1，0)、(50，0)或(18，0)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，所述上块的帧内预测模式为平面模式，且所述当前编码块的MPM列表中不包括平面模式(在一个示例中，当左块的帧内预测模式为DC模式或角度模式)时，在将第一种帧内预测模式添加到MPM列表后，MPM列表中不包括平面模式)时，将平面模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(1，0)、(50，0)或(18，0)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，且所述上块的帧内预测模式为DC模式时，将DC模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，1)、(1，1)、(50，1)或(18，1)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，所述上块的帧内预测模式为DC模式，且所述当前编码块的MPM列表中不包括DC模式(在一个示例中，当左块的帧内预测模式不是DC模式时，在将第一种帧内预测模式添加到MPM列表后，MPM列表中不包括DC模式)时，将DC模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，1)、(50，1)或(18，1)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)时，将水平模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，18)、(1，18)、(50，18)或(18，18)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，所述上块的帧内预测模式的值在第一预定义范围内(在一个示例中，所述范围可以为2至34，包括端值)，且所述当前编码块的MPM列表中不包括水平模式(在一个示例中，当左块的帧内预测模式为DC模式或平面模式时，或者当左块的帧内预测模式的值不在第一预定义范围内时，在将第一种帧内预测模式添加到MPM列表后，MPM列表中不包括水平模式)时，将水平模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，18)、(1，18)或(50，18)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，且所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)时，将垂直模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，50)、(1，50)、(50，50)或(18，50)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的上块可用，所述上块的帧内预测模式的值在第二预定义范围内(在一个示例中，所述范围可以为35至66，包括端值)，且所述当前编码块的MPM列表中不包括垂直模式(在一个示例中，当左块的帧内预测模式为DC模式或平面模式时，或者当左块的帧内预测模式的值不在第二预定义范围内时，在将第一种帧内预测模式添加到MPM列表后，MPM列表中不包括垂直模式)时，将垂直模式添加到所述当前编码块的MPM列表中(在一个示例中，在添加步骤之前，所述当前编码块的MPM列表包括一种帧内预测模式)。在添加步骤之后，所述MPM列表包括两种帧内预测模式，例如，所述MPM列表可以包括(0，50)、(1，50)或(18，50)。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的MPM列表中的一种或多种帧内预测模式的数量小于预定义值(例如，所述值可以为2、3或4)，且所述当前编码块的MPM列表中不包括平面模式时，将平面模式添加到所述当前编码块的MPM列表中。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的MPM列表中的一种或多种帧内预测模式的数量小于预定义值(例如，所述值可以为2、3或4)，且所述当前编码块的MPM列表中不包括DC模式时，将DC模式添加到所述当前编码块的MPM列表中。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的MPM列表中的一种或多种帧内预测模式的数量小于预定义值(例如，所述值可以为2、3或4)，且所述当前编码块的MPM列表中不包括垂直模式时，将垂直模式添加到所述当前编码块的MPM列表中。
结合第三十九方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
当所述当前编码块的MPM列表中的一种或多种帧内预测模式的数量小于预定义值(例如，所述值可以为2、3或4)，且所述当前编码块的MPM列表中不包括水平模式时，将水平模式添加到所述当前编码块的MPM列表中。
第四十方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据当前块的邻块的帧内预测模式构建所述当前块的最可能模式(mostprobable mode，MPM)列表(在一个示例中，所述当前块的MPM列表包括六种帧内预测模式)。在一个示例中，一个MPM列表包括一种或多种帧内预测模式是指MPM列表包括一种或多种帧内预测模式对应的一个或多个值，一个值对应一种帧内预测模式，其中，所述MPM列表包括一种或多种角度模式；
根据码流获取所述当前块的指示参数，所述指示参数表示所述当前块是否应用多假设预测；
根据所述码流获取所述当前块的索引参数；
根据所述指示参数的值，当所述当前块应用多假设预测时，
根据所述索引参数和所述MPM列表获取所述当前块的帧内预测模式；
当所述当前块的帧内预测模式的值在预定义范围内(例如，所述范围可以为2至34，包括端值；或者所述范围可以为35至66，包括端值)时，根据预定义模式解码所述当前块(例如，所述预定义模式可以为水平模式或垂直模式)。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式的值在范围2至34(包括端值)内时，所述预定义模式为水平模式，或者当所述当前块的帧内预测模式的值在范围2至33(包括端值)内时，所述预定义模式为水平模式。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式的值在范围35至66(包括端值)内时，所述预定义模式为垂直模式，或者当所述当前块的帧内预测模式的值在范围34至66(包括端值)内时，所述预定义模式为垂直模式。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式为角度模式(例如，所述当前块的帧内预测模式的值在范围2至66(包括端值)内时，所述预定义模式为平面模式。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式为角度模式(例如，所述当前块的帧内预测模式的值在范围2至66(包括端值)内时，所述预定义模式为DC模式。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式的值在范围2至66(包括端值)内时，所述预定义模式为垂直模式。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式的值在范围2至66(包括端值)内时，所述预定义模式为水平模式。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式为平面模式时，根据平面模式解码所述当前块。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式为DC模式时，根据DC模式解码所述当前块。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：当所述当前块的帧内预测模式为DC模式时，根据平面模式解码所述当前块。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括索引参数，所述索引参数具有最大值N，其中，N小于MPM列表的大小，N为正整数。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：N等于1(所述索引参数的值可以为0或1)。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：N等于3(所述索引参数的值可以为0、1、2或3)。
结合第四十方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：预定义所述索引参数为0，表示MPM列表中的第一个候选。
第四十一方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据所述指示参数的值，当所述当前编码块应用多假设预测时，根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：平面模式、水平模式和垂直模式；
根据所述当前编码块的帧内预测模式解码所述当前编码块。
第四十二方面，本发明涉及一种由解码设备实现的用于解码图像(或帧)块的方法，包括：
根据码流获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
根据所述码流获取所述当前编码块的索引参数；
根据指示参数的值，当所述当前编码块应用多假设预测时，根据所述索引参数和预定义列表获取所述当前编码块的帧内预测模式，其中，所述预定义列表按顺序包括以下帧内预测模式：平面模式、垂直模式和水平模式；
根据所述当前编码块的帧内预测模式解码所述当前编码块。
第四十三方面，本发明涉及一种用于解码图像块的方法，包括：
获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
当所述指示参数表示所述当前编码块应用多假设预测时，根据平面模式解码所述当前编码块。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述多假设预测是帧间帧内联合预测(combined inter and intra prediction，CIIP)。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述指示参数是CIIP标志。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，合并数据语法携带所述指示参数。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：根据最可能模式(most probable mode，MPM)列表获取所述当前编码块的平面模式，其中，所述MPM列表中的每个帧内预测模式都用对应的MPM列表索引值索引。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
从码流中解析出MPM列表索引，其中，所述MPM列表索引的值在0至N-1之间，N为所述MPM列表中的帧内预测模式的表项；根据所述MPM列表索引的值，从所述MPM列表中获取所述当前编码块的帧内预测模式。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表至少包括平面模式。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表包括平面模式以及DC模式、垂直模式和水平模式中的至少一种。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表由平面模式组成。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表由预定义的默认列表构建。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表索引被编码为十进制或二进制表示。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，解码器包括处理电路，用于执行第四十三方面的任意一种上述实现方式所述的方法。
结合第四十三方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，解码器包括：存储器，所述存储器包括指令；
一个或多个处理器，与所述存储器通信，其中，所述一个或多个处理器执行所述指令以执行第四十三方面的任意一种上述实现方式所述的方法。
第四十四方面，本发明涉及一种解码装置，所述装置包括：确定单元，用于获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；帧内预测处理单元，用于：当所述指示参数表示所述当前编码块应用多假设预测时，根据平面模式对所述当前编码块执行帧内预测。
结合第四十四方面的任意一种上述实现方式，在所述装置的一种可能的实现方式中，所述装置还包括解析单元，用于从视频信号的码流中解析多个语法元素；所述确定单元还用于根据所述多个语法元素中的语法元素确定所述平面模式。
第四十五方面，本发明涉及一种用于编码图像块的方法，包括：获取当前块的指示参数，所述指示参数表示所述当前块是否应用多假设预测；当所述指示参数表示所述当前块应用多假设预测时，根据平面模式编码所述当前块。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述多假设预测是帧间帧内联合预测(combined inter and intra prediction，CIIP)。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述指示参数是CIIP标志。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，合并数据语法携带所述指示参数。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：
根据最可能模式(most probable mode，MPM)列表获取所述当前编码块的平面模式，其中，所述MPM列表中的每个帧内预测模式都用对应的MPM列表索引值索引。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述方法还包括：使用对应的MPM列表索引值索引所述MPM列表中的每个帧内预测模式；从码流中解析所述MPM列表索引，其中，所述MPM列表索引的值在0至N–1之间，N为所述MPM列表中的帧内预测模式的表项；根据所述MPM列表索引的值，从所述MPM列表中获取所述当前编码块的帧内预测模式。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表至少包括平面模式。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表包括平面模式以及DC模式、垂直模式和水平模式中的至少一种。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表由平面模式组成。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表由预定义的默认列表构建。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，所述MPM列表索引被编码为十进制或二进制表示。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，编码器包括处理电路，用于执行第四十五方面的任意一种上述实现方式所述的方法。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，编码器包括：存储器，所述存储器包括指令；
一个或多个处理器，与所述存储器通信，其中，所述一个或多个处理器执行所述指令以执行第四十五方面的任意一种上述实现方式所述的方法。
结合第四十五方面的任意一种上述实现方式，在所述方法的一种可能的实现方式中，一种计算机程序产品，包括程序代码，用于在计算机或处理器中执行时，执行第四十五方面的任意一种上述实现方式所述的方法。
第四十六方面，本发明涉及一种用于编码图像块的装置，所述装置包括：确定单元，用于获取当前块的指示参数，所述指示参数表示所述当前块是否应用多假设预测；帧内预测处理单元，用于：当所述指示参数表示所述当前块应用多假设预测时，根据平面模式编码所述当前块。
以下附图和说明中将详细阐述了一个或多个实施例。其它特征、目标和优点在说明书、附图以及权利要求书中是显而易见的。
附图说明
下面参照所附的附图和示意图对本发明实施例进行更加详细的描述，其中：
图1A为用于实现本发明实施例的示例性视频译码系统的框图；
图1B为用于实现本发明实施例的另一示例性视频译码系统的框图；
图2为用于实现本发明实施例的示例性视频编码器的框图；
图3为用于实现本发明实施例的视频解码器的示例性结构的框图；
图4为示例性编码装置或解码装置的框图；
图5为另一示例性编码装置或解码装置的框图；
图6为当前编码块或编码单元的邻块的示例；
图7为多个帧内预测模式的示例；
图8为一种用于解码图像块的方法的示例；
图9为实现内容分发服务的内容提供系统3100的示例性结构的框图；
图10为终端设备的示例性结构的框图。
下文中，除非明确地另外指定，否则相同的附图标记指代相同或至少功能等同的特征。
具体实施方式
以下描述中，参考构成本发明的一部分的附图，这些附图通过说明的方式示出本发明实施例的特定方面或可以使用本发明实施例的特定方面。应理解，本发明的实施例可以用于其它方面，并且包括在附图中未描绘的结构上或逻辑上的变化。因此，以下详细描述不作为限制意义，并且本发明的范围由所附权利要求限定。
例如，应理解，参考所描述的方法公开的内容对于用于执行该方法的对应的设备或系统也可以成立，反之亦然。例如，如果描述一个或多个具体方法步骤，则对应的设备可以包括如功能单元等一个或多个单元，以执行所描述的一个或多个方法步骤(例如，一个单元执行一个或多个步骤，或多个单元中的每一个单元都执行多个步骤中的一个或多个步骤)，即使附图中未显式描述或说明此一个或多个单元。另一方面，例如，如果基于如功能单元等一个或多个单元来描述具体装置，则对应的方法可以包括一个步骤，以执行一个或多个单元的功能(例如，一个步骤执行一个或多个单元的功能，或多个步骤中的每一个步骤执行多个单元中的一个或多个单元的功能)，即使附图中未显式描述或说明此一个或多个步骤。此外，应理解，除非特别指出，否则本文描述的各种示例性实施例和/或方面的特征可以彼此组合。
视频译码通常是指处理形成视频或视频序列的图像序列。在视频译码领域，术语“帧(frame)”与“图像(picture/image)”可以用作同义词。视频译码(或通常称为译码)包括视频编码和视频解码两部分。视频编码在源端执行，通常包括处理(例如，压缩)原始视频图像，以减少表示该视频图像所需的数据量(以便更高效地进行存储和/或传输)。视频解码在目的端执行，并且通常包括相对于编码器的逆处理以重建视频图像。实施例涉及的视频图像(或通常称为图像)的“译码”应理解为视频图像或各自视频序列的“编码”或“解码”。编码部分和解码部分也合称为编解码器(编码和解码，codec)。
在无损视频译码的情况下，可以对原始视频图像进行重建，即重建的视频图像与原始视频图像具有相同的质量(假设存储或传输期间没有传输损耗或其它数据损失)。在有损视频译码的情况下，通过量化等进行进一步压缩，来减少表示视频图像所需的数据量。此时解码器侧无法完全重建视频图像，即重建的视频图像的质量低于或劣于原始视频图像的质量。
若干个视频译码标准属于“有损混合视频编解码器”组(即，将样本域中的空间和时间预测与2D变换译码相结合，以在变换域中进行量化)。视频序列中的每个图像通常分割成不重叠块的集合，通常进行块级别的译码。换句话说，在编码器侧，通常在块(视频块)级处对视频进行处理(即编码)，例如，通过空间(帧内)预测和/或时间(帧间)预测来生成预测块；从当前块(当前处理的块/待处理块)中减去预测块，得到残差块；在变换域中变换残差块并量化残差块，以减少待发送(压缩)的数据量，而在解码器侧，对经编码或压缩的块进行相对于编码器的逆处理，以重建当前块进行表示。此外，编码器和解码器的处理步骤相同，使得编码器和解码器生成相同的预测(例如，帧内预测和帧间预测)和/或重建，用于进行处理，即对后续块进行译码。
在以下视频译码系统10的实施例中，视频编码器20和视频解码器30根据图1至图3进行描述。
图1A为示例性译码系统10的示意性框图，例如可以利用本申请技术的视频译码系统10(或简称为译码系统10)。视频译码系统10中的视频编码器20(或简称为编码器20)和视频解码器30(或简称为解码器30)代表可用于根据本申请中描述的各种示例执行各技术的设备的示例。
如图1A所示，所述译码系统10包括源设备12，源设备12用于将经编码图像数据21提供给用于对经编码图像数据13进行解码的目的地设备14。
源设备12包括编码器20，另外即可选地，包括图像源16、预处理器(或预处理单元)18(如图像预处理器18)、通信接口或通信单元22。
图像源16可以包括或可以为任何类型的图像捕获设备、和/或任何类型的图像生成设备或任何类型的其它设备，其中，图像捕获设备为用于捕获现实世界图像的相机等，图像生成设备为用于生成计算机动画图像的计算机图形处理器等，或用于获取和/或提供现实世界的图像、计算机生成图像(例如，屏幕内容、虚拟现实(virtual reality，VR)图像)和/或其任意组合(例如，增强现实(augmented reality，AR)图像)任何类型的其它设备。图像源可以为存储上述图像中的任意图像的任何类型的存储器(memory/storage)。
为了与预处理单元18和由预处理单元18执行的处理进行区分，图像或图像数据17也可以称为原始图像或原始图像数据17。
预处理器18用于接收(原始)图像数据17，并对图像数据17进行预处理，以获得预处理图像19或预处理图像数据19。预处理器18执行的预处理可以包括例如修剪(trimming)、颜色格式转换(例如从RGB转换为YCbCr)、颜色校正或去噪。可以理解的是，预处理单元18可以为可选部件。
视频编码器20用于接收经预处理的图像数据19并提供经编码的图像数据21(下文将根据图2等进行详细描述)。
源设备12中的通信接口22可用于：接收经编码的图像数据21并通过通信信道13向目的地设备14等另一设备或任何其它设备发送经编码的图像数据21(或其它任意处理后的版本)，以供存储或直接重建。
目的地设备14包括解码器30(例如视频解码器30)，另外即可选地，可包括通信接口或通信单元28、后处理器32(或后处理单元32)以及显示设备34。
目的地设备14中的通信接口28用于直接从源设备12或从存储设备等任意其它源设备接收经编码的图像数据21(或其它任意处理后的版本)，例如，存储设备为存储经编码的图像数据的存储设备，并将经编码的图像数据21提供给解码器30。
通信接口22和通信接口28可用于通过源设备12与目的地设备14之间的直接通信链路，例如直接有线或无线连接等，或者通过任何类型的网络，例如有线网络、无线网络或其任意组合、任何类型的私网和公网或其任何类型的组合，发送或接收经编码的图像数据21或经编码的数据13。
例如，通信接口22可用于将经编码的图像数据21封装为报文等合适的格式，和/或使用任何类型的传输编码或处理来处理所述经编码的图像数据，以便在通信链路或通信网络上进行传输。
通信接口28与通信接口22对应，例如，可用于接收传输数据，并使用任何类型的对应传输解码或处理和/或解封装过程对传输数据进行处理，以获得经编码的图像数据21。
通信接口22和通信接口28均可配置为如图1A中从源设备12指向目的地设备14的对应通信信道13的箭头所指示的单向通信接口，或配置为双向通信接口，并且可用于发送和接收消息等，以建立连接，确认并交换与通信链路和/或例如编码后的图像数据传输等数据传输相关的任何其它信息，等等。
解码器30用于接收经编码的图像数据21并提供经解码的图像数据31或经解码的图像31(下文将根据图3或图5进行详细描述)。
目的地设备14中的后处理器32用于对经解码的图像数据31(也称为经重建的图像数据)，例如，经解码的图像31进行后处理，以获得经后处理的图像数据33，例如，经后处理的图像33。后处理单元32执行的后处理可以包括例如颜色格式转换(例如从YCbCr转换为RGB)、调色、修剪或重采样，或者用于产生供显示设备34等显示的经解码的图像数据31等任何其它处理。
目的地设备14中的显示设备34用于接收经后处理的图像数据33，以向用户或观看者等显示图像。显示设备34可以为或可以包括任何类型的用于呈现经重建的图像的显示器，例如，集成或外部显示屏或显示器。例如，显示器可以包括液晶显示器(liquid crystaldisplay，LCD)、有机发光二极管(organic light emitting diode，OLED)显示器、等离子显示器、投影仪、微型LED显示器、硅基液晶显示器(liquid crystal on silicon，LCoS)、数字光处理器(digital light processor，DLP)或任何类型的其它显示器。
尽管图1A示出了将源设备12和目的地设备14作为独立的设备，但设备实施例也可以同时包括源设备12和目的地设备14或同时包括源设备12和目的地设备14的功能，即同时包括源设备12或对应功能和目的地设备14或对应功能。在此类实施例中，源设备12或对应的功能与14或对应的功能可以通过相同的硬件和/或软件、通过单独的硬件和/或软件或其任何组合来实现。
根据描述，图1A所示的源设备12和/或目的地设备14中的不同单元或功能的存在和(准确)划分可能根据实际设备和应用而有所不同，这对技术人员来说是显而易见的。
所述编码器20(例如视频编码器20)或所述解码器30(例如视频解码器30)，或所述编码器20和所述解码器30两者都可通过如图1B所示的处理电路实现，如一个或多个微处理器、数字信号处理器(digital signal processor，DSP)、专用集成电路(application-specific integrated circuit，ASIC)、现场可编程门阵列(field-programmable gatearray，FPGA)、离散逻辑、硬件、视频编码专用处理器或其任意组合。所述编码器20可以通过处理电路46实现，以支持如图2所示的编码器20的各种模块和/或本文描述的任何其它编码器系统或子系统。所述解码器30可以通过处理电路46实现，以支持如图3所示的解码器30的各种模块和/或本文描述的任何其它解码器系统或子系统。处理电路可以用于执行下文描述的各种操作。如图5所示，如果部分技术通过软件实施，则设备可以将该软件的指令存储在合适的非瞬时性计算机可读存储介质中，通过一个或多个处理器在硬件中执行所述指令，从而执行本发明的技术。视频编码器20和视频解码器30中的任一个可作为组合编解码器(encoder/decoder，CODEC)的一部分集成在单个设备中，如图1B所示。
源设备12和目的地设备14可以包括多种设备中的任一种，包括任何类型的手持设备或固定设备，例如，笔记本电脑或膝上型电脑、手机、智能手机、平板或平板电脑、相机、台式计算机、机顶盒、电视机、显示设备、数字媒体播放器、视频游戏控制台、视频流设备(如内容业务服务器或内容分发服务器)、广播接收设备、广播发射设备等，且可以使用或不使用任何类型的操作系统。在一些情况下，源设备12和目的地设备14可以用于无线通信。因此，源设备12和目的地设备14可以是无线通信设备。
在某些情况下，图1A所示的视频译码系统10仅仅是示例，本申请的技术可适用于在编码设备与解码设备之间不一定包括任何数据通信的视频译码设置(例如，视频编码或视频解码)。在其它示例中，数据可以从本地存储器检索、通过网络流式传输等。视频编码设备可以对数据进行编码并将数据存储到存储器，和/或视频解码设备可以从存储器检索和解码数据。在一些示例中，编码和解码由不彼此通信但简单地将数据编码到存储器和/或从存储器检索和解码数据的设备执行。
为便于描述，例如，参考由ITU-T视频编码专家组(Video Coding Experts Group，VCEG)和ISO/IEC运动图像专家组(Motion Picture Experts Group，MPEG)的视频编码联合协作团队(Joint Collaboration Team on Video Coding，JCT-VC)开发的高效视频编码(High-Efficiency Video Coding，HEVC)、通用视频编码(Versatile video coding，VVC)参考软件、下一代视频编码标准来描述本发明实施例。本领域普通技术人员应理解本发明的实施例不限于HEVC或VVC。
编码器和编码方法
图2为用于实现本申请技术的示例性视频编码器20的示意性框图。在图2的示例中，视频编码器20包括输入单元201(或输入接口201)、残差计算单元204、变换处理单元206、量化单元208、反量化单元210、逆变换处理单元212、重建单元214、环路滤波器220、解码图像缓冲区(decoded picture buffer，DPB)230、模式选择单元260、熵编码单元270和输出单元272(或输出接口272)。模式选择单元260可以包括帧间预测单元244、帧内预测单元254和分割单元262。帧间预测单元244可以包括运动估计单元和运动补偿单元(图中未示出)。图2所示的视频编码器20也可以称为混合型视频编码器或基于混合型视频编解码器的视频编码器。
残差计算单元204、变换处理单元206、量化单元208和模式选择单元260组成编码器20的前向信号路径；反量化单元210、逆变换处理单元212、重建单元214、缓冲区216、环路滤波器220、解码图像缓冲区(decoded picture buffer，DPB)230、帧间预测单元244和帧内预测单元254组成视频编码器20的后向信号路径。其中，视频编码器20的后向信号路径对应于解码器(参见图3所示的解码器30)的信号路径。反量化单元210、逆变换处理单元212、重建单元214、环路滤波器220、解码图像缓冲区230、帧间预测单元244和帧内预测单元254还组成视频编码器20的“内置解码器”。
图像和图像分割(图像和块)
编码器20可用于通过输入单元201等接收图像17(或图像数据17)，例如，形成视频或视频序列的图像序列中的图像。接收到的图像或图像数据还可以是预处理图像19(或预处理图像数据19)。为简单起见，以下描述中称为图像17。图像17还可以称为当前图像或待译码图像(尤其在视频译码中，为区分当前图像和其它图像，其它图像例如为同一视频序列中，即同时包括当前图像的视频序列中，的先前经编码的图像和/或先前经解码的图像)。
(数字)图像是或可以看作具有强度值的二维样本阵列或矩阵。阵列中的样本也可以称为像素(pixel/pel)(像元的简称)。阵列或图像在水平方向和垂直方向(或轴线)上的样本的数量决定了该图像的大小和/或分辨率。通常使用三个颜色分量来表示颜色，即，可以通过三个样本阵列来表示图像或图像可以包括三个样本阵列。在RBG格式或色彩空间中，图像包括对应的红、绿、蓝样本阵列。然而，在视频译码中，每个像素通常以亮度和色度格式或颜色空间表示，例如，YCbCr格式，其包括Y表示的亮度分量(有时也用L表示)和Cb和Cr表示的两个色度分量。亮度(或简称luma)分量Y表示亮度或灰度级强度(例如，在灰度级图像中)，而两个色度(或简称chroma)分量Cb和Cr表示色度或颜色信息分量。对应地，YCbCr格式的图像包括亮度样本值的亮度样本阵列(Y)和色度值的两个色度样本阵列(Cb和Cr)。RGB格式的图像可以转换或变换为YCbCr格式，反之亦然，该过程也称为颜色变换或转换。如果图像是单色的，则该图像可以只包括亮度样本阵列。因此，图像可以为例如单色格式的亮度样本阵列或4:2:0、4:2:2和4:4:4彩色格式的亮度样本阵列和两个对应的色度样本阵列。
在视频编码器20的实施例中，视频编码器20可以包括图像分割单元(图2中未示出)，用于将所述图像17分割成多个(通常不重叠)图像块203。这些块也可以称为根块或宏块(H.264/AVC标准)或称为编码树块(coding tree block，CTB)或编码树单元(codingtree unit，CTU)(H.265/HEVC和VVC标准)。图像分割单元可以用于对视频序列中的所有图像和定义块大小的对应的网格使用相同的块大小，或者改变图像或子集或图像组之间的块大小，并将每个图像的块。
在其它实施例中，视频编码器可用于直接接收所述图像17的图像块203，例如，组成所述图像17的一个、若干个或所有图像块。图像块203也可以称为当前图像块或待译码图像块。
与图像17一样，图像块203同样是或可以认为是具有强度值(样本值)的样本组成的二维阵列或矩阵，但是图像块203的尺寸要比图像17的尺寸小。换句话说，图像块203可以包括一个样本阵列(例如，图像17是黑白图像时，图像块203包括一个亮度阵列；图像17是彩色图像时，图像块203包括一个亮度阵列或一个色度阵列)，或者包括三个样本阵列(例如，图像17是彩色图像时，图像块203包括一个亮度阵列和两个色度阵列)，或者包括由所使用的颜色格式决定的任何其它数量和/或类型的阵列。块203在水平和垂直方向(或轴线)上的多个样本定义块203的大小。因此，块可以为M×N(M列×N行)的样本阵列，或M×N的变换系数阵列等。
在图2所示的视频编码器20的实施例中，视频编码器20可用于对图像17进行逐块编码，例如，对每个图像块203进行编码和预测。
残差计算
残差计算单元204可以用于根据图像块203和预测块265(下文将详细描述预测块265)通过如下方式计算残差块205(也称为残差205)，例如，逐个样本(逐个像素)从图像块203的样本值中减去预测块265的样本值，得到样本域中的残差块205。
变换
变换处理单元206可以用于对残差块205的样本值执行离散余弦变换(discretecosine transform，DCT)或离散正弦变换(discrete sine transform，DST)等变换，以获得变换域中的变换系数207。变换系数207也可以称为变换残差系数，并且表示变换域中的残差块205。
变换处理单元206可以用于应用DCT/DST的整数近似，例如针对H.265/HEVC指定的变换。与正交DCT变换相比，该整数近似法通常通过某一因子按比例缩放(scale)。为了维持经过正变换和逆变换处理的残差块的范数，使用其它缩放因子作为变换过程的一部分。缩放因子通常是基于某些约束条件来选择的，例如缩放因子是用于移位运算的2的幂、变换系数的位深度、准确性与实施成本之间的折衷等。例如，在编码器20侧通过逆变换处理单元212等为逆变换(在视频解码器30侧通过逆变换处理单元312等为对应的逆变换)指定具体的缩放因子，并且相应地，可以在编码器20侧通过变换处理单元206等为前向变换指定对应的缩放因子。
在视频编码器20的实施例中，视频编码器20(对应地，变换处理单元206)可用于，例如，直接输出或经熵编码单元270进行编码或压缩后输出一种或多种变换类型的变换参数，使得视频解码器30可以接收并使用变换参数进行解码。
量化
量化单元208用于通过执行标量量化或矢量量化等对变换系数207进行量化，以获得量化系数209。量化系数209也可以称为量化变换系数209或量化残差系数209。
量化过程可以减小与部分或全部变换系数207相关的位深度。例如，可以在量化期间将n位变换系数向下舍入到m位变换系数，其中n大于m，可以通过调整量化参数(quantization parameter，QP)修改量化程度。例如，对于标量量化，可以执行不同的缩放来实现更精细或更粗略的量化。量化步长大小越小，量化越精细；量化步长大小越大，量化越粗略。合适的量化步长大小可以通过量化参数(quantization parameter，QP)来表示。例如，量化参数可以是适用于的一组合适的量化步长大小的索引。例如，小的量化参数可以对应精细的量化(小量化步长大小)，而大的量化参数可以对应粗略的量化(大量化步长大小)，反之亦然。量化操作可以包括除以量化步长，而反量化单元210等执行的相应解量化或逆解量化操作可以包括乘以量化步长。在一些实施例中，根据如HEVC等一些标准，可以使用量化参数来确定量化步长。通常，可以通过包括除法的方程的定点近似、量化参数计算量化步长大小。可以将缩放因子引入量化和解量化，用于恢复残差块的范数，因为量化步长大小和量化参数的方程的定点近似中使用缩放，所以可以修改该范数。在一种示例性实现方式中，可以合并逆变换和解量化中的缩放。或者，可以使用自定义的量化表并由编码器通过码流等方式向解码器指示(signal)。量化为有损操作，损耗随量化步长大小的增加而增加。
在视频编码器20的实施例中，视频编码器20(对应地，量化单元208)可用于，例如，直接输出或经熵编码单元270进行编码后输出量化参数(quantization parameter，QP)，使得视频解码器30可以接收并使用量化参数进行解码。
反量化
反量化单元210用于对量化系数执行与量化单元208所执行的量化相反的反量化，以获得解量化系数211，例如，根据或使用与量化单元208相同的量化步长执行与量化单元208所执行的量化方案相反的反量化方案。解量化系数211也可以称为解量化残差系数211，其对应于变换系数207，但是由于量化造成损耗，解量化系数211通常与变换系数不完全相等。
逆变换
逆变换处理单元212用于执行变换处理单元206所执行的变换的逆变换，例如，逆离散余弦变换(discrete cosine transform，DCT)或逆离散正弦变换(discrete sinetransform，DST)，以获得像素点域中的重建残差块213(或对应的解量化系数213)。重建残差块213也可以称为变换块213。
重建
重建单元214(例如，加法器或求和器214)用于将变换块213(即重建残差块213)与预测块265相加，例如，将重建残差块213的样本值和预测块265的样本值逐个样本进行相加，得到样本域中的重建块215。
滤波
环路滤波器单元220(或简称为“环路滤波器”220)用于对重建块215进行滤波，得到滤波块221，或通常用于对重建样本进行滤波，得到滤波样本值。例如，环路滤波单元用于平滑像素的突变或者提高视频质量。环路滤波器单元220可以包括一个或多个环路滤波器，如去块效应滤波器、样本自适应偏移(sample-adaptive offset，SAO)滤波器或一个或多个其它滤波器，例如双边滤波器、自适应环路滤波器(adaptive loop filter，ALF)、锐化滤波器、平滑滤波器、协作滤波器或其任意组合。尽管在图2中环路滤波器单元220示出为环内滤波器，但在其它配置中，环路滤波器单元220可以实现为后环路滤波器。滤波块221也可以称为滤波重建块221。
在实施例中，所述视频编码器20(对应地，环路滤波器单元220)可以用于输出环路滤波器参数(例如样本自适应偏移信息)，例如直接输出或由熵编码单元270进行编码后输出，使得(例如)解码器30可以接收并使用相同的环路滤波器参数或相应的环路滤波器进行解码。
解码图像缓冲区
解码图像缓冲区(decoded picture buffer，DPB)230可以是存储参考图像或通常存储参考图像数据的存储器，以在视频编码器20对视频数据进行编码时使用。DPB 230可以由各种存储器设备中的任一种构成，例如动态随机存取存储器(dynamic random accessmemory，DRAM)(包括同步DRAM(synchronous DRAM，SDRAM))、磁阻RAM(magneto resistiveRAM，MRAM)、电阻RAM(resistive RAM，RRAM)或其它类型的存储器设备。解码图像缓冲区(decoded picture buffer，DPB)230可用于存储一个或多个滤波块221。解码图像缓冲器230还可以用于存储同一当前图像的或如先前重建图像等的不同图像的其它先前滤波块如先前重建和滤波的块221，且可提供完整的先前重建图像即经解码的图像(以及对应的参考块和像素点)和/或部分重建的当前图像(以及对应的参考块和像素点)，例如，以进行帧间预测。解码图像缓冲区230还可以用于存储一个或多个未经滤波的重建块215，或通常存储未经滤波的重建样本，例如，未经环路滤波单元220滤波的重建块215，或未进行任何其它处理的重建块或重建样本。
模式选择(分割和预测)
模式选择单元260包括分割单元262、帧间预测单元244和帧内预测单元254，并且用于从解码图像缓冲区230或其它缓冲区(例如行缓冲区，图中未显示)接收或获取原始块203(当前图像17的当前块203)和重建图像数据等原始图像数据(例如同一个(当前)图像和/或一个或多个先前经解码图像的经过滤波和/或未经滤波的重建样本或重建块。重建图像数据用作帧间预测或帧内预测等预测所需的参考图像数据，用于获得预测块265或预测值265。
模式选择单元260可以用于为当前块预测模式(包括不分割模式)和预测模式(例如帧内预测模式或帧间预测模式)确定或选择分割模式，并生成对应的预测块265，所述预测块用于残差块205的计算以及重建块215的重建。
在模式选择单元260的实施例中，模式选择单元260可以用于选择分割和预测模式(例如，从模式选择单元260支持或可用的模式中选择)。分割和预测模式提供最佳匹配，即最小残差(最小残差意味着更好的压缩性能，以便进行发送或存储)，或提供最小指示开销(最小指示开销意味着更好的压缩性能，以便进行发送或存储)，或者同时考虑以上两者或在以上两者中取得平衡。模式选择单元260可以用于根据率失真优化(rate distortionoptimization，RDO)确定分割和预测模式，即选择提供最小率失真的预测模式。本文中，术语“最佳”、“最小”、“最优”等不一定指总体上“最佳”、“最小”、“最优”等，也可以指满足终止或选择标准的情况，例如，某个值超过或低于阈值或其它限制，可能导致“次优选择”，但会降低复杂度和处理时间。
分割单元262可以用于将块203分割成更小的块部分或子块(子块再次形成块)，例如，通过迭代地使用四叉树分割(quad-tree partitioning，QT)、二叉树分割(binary-treepartitioning，BT)或三叉树分割(triple-tree partitioning，TT)或其任何组合，并用于例如对每个块部分或子块进行预测。其中，模式选择包括选择经分割的块203的树结构以及选择应用于每个块部分或子块的预测模式。
下文将详细地描述由视频编码器20执行的分割(例如，由分割单元260执行)处理和预测处理(例如，由帧间预测单元244和帧内预测单元254执行)。
分割模块
分割单元262可以将当前块203分割(或划分)为较小的部分，例如方形或矩形小块。这些较小的块(也可以称为子块)可以进一步更小的。这也称为树分割或分层树分割，其中，在根树层级0(分层0、深度0)等的根块可以递归地分割为至少两个下一较低树层级的块，例如树层级1(分层1、深度1)的节点。这些块又可以分割为至少两个下一较低层级的块，例如树层级2(分层2、深度2)等，直到由于满足结束标准而结束分割，例如达到最大树深度或最小块大小。未进一步分割的块也称为树的叶块或叶节点。分成两个的树称为二叉树(binary-tree，BT)，分成三个的树称为三叉树(ternary-tree，TT)，分成四个的树称为四叉树(quad-tree，QT)。
如上所述，本文中使用的术语“块”可以是图像的一部分，特别是正方形或矩形部分。例如，参照HEVC和VVC，块可以为或可以对应于编码树单元(coding tree unit，CTU)、编码单元(coding unit，CU)、预测单元(prediction unit，PU)和变换单元(transform unit，TU)，和/或对应于对应的块，例如，编码树块(coding tree block，CTB)、编码块(codingblock，CB)、变换块(transform block，TB)或预测块(prediction block，PB)。
例如，编码树单元(coding tree unit，CTU)可以为或可以包括具有3个样本阵列的图像中的亮度样本的一个CTB、该图像中的色度样本的两个对应CTB、或黑白图像中的或使用3个独立颜色平面和语法结构进行译码的图像中的样本的一个CTB。这些语法结构用于对样本进行译码。相应地，编码树块(coding tree block，CTB)可以为N×N个样本块，其中，N可以设为某个值，使得一个分量被划分为CTB，这就是分割。编码单元(coding unit，CU)可以为或可以包括具有3个样本阵列的图像中的亮度样本的一个编码块、该图像中的色度样本的两个对应编码块，或者黑白图像中的或使用3个单独颜色平面和语法结构进行译码的图像中的样本的一个编码块。这些语法结构用于对样本进行译码。相应地，编码块(codingblock，CB)可以为M×N个样本块，其中，M、N可以设为某个值，使得一个CTB被划分为编码块，这就是分割。
在一些实施例中，例如根据HEVC，可以通过表示为编码树的四叉树结构将编码树单元(coding tree unit，CTU)划分为多个CU。在CU级作出是否使用帧间(时间)预测或帧内(空间)预测对图像区域进行译码的决定。每个CU还可以PU类型1个、2个或4个PU。在一个PU内，进行相同的预测过程，并且以PU为单位将相关信息发送到解码器。在根据PU划分类型执行预测过程得到残差块之后，可以根据类似于用于CU的编码树类似的另一种四叉树结构将CU分割成变换单元(transform unit，TU)。
在实施例中，例如根据当前开发的最新视频编码标准(称为通用视频编码(Versatile Video Coding，VVC))，使用四叉树结合二叉树(quad-tree and binary-tree，QTBT)分割来分割编码块。在QTBT块结构中，CU可以是正方形或矩形。例如，编码树单元(coding tree unit，CTU)首先通过四叉树结构进行分割。进一步通过二叉树或三叉树结构对四叉树叶节点进行分割。分割树叶节点称为编码单元(coding unit，CU)，这样的分段用于预测和变换处理，无需任何进一步的分割。这表示在QTBT编码块结构中，CU、PU和TU的块大小相同。与此同时，还提出将三叉树分割等多重分割与QTBT块结构一起使用。
在一个示例中，视频编码器20中的模式选择单元260可用于执行上文描述的分割技术的任意组合。
如上所述，视频编码器20用于从一组(例如，预定的)预测模式中确定或选择最佳或最优预测模式。该预测模式集合可以包括例如帧内预测模式和/或帧间预测模式等。
帧内预测
帧内预测模式集合可以包括35种不同的帧内预测模式，例如像DC(直流)(或均值)模式和平面(planar)模式的非方向性模式或如HEVC中定义的方向性模式，或者可以包括67种不同的帧内预测模式，例如像DC(或均值)模式和平面模式的非方向性模式或如VVC中定义的方向性模式。
帧内预测单元254用于帧内预测模式集合中的帧内预测模式使用同一当前图像的邻块的重建样本来生成帧内预测块265。
帧内预测单元254(或通常为模式选择单元260)还用于输出帧内预测参数(或通常为表示块的所选帧内预测模式的信息)以语法元素266的形式发送到熵编码单元270，以包括到经编码的图像数据21中，从而视频解码器30可执行操作，例如接收并使用用于解码的预测参数。
帧间预测
(可能的)帧间预测模式集合取决于可用参考图像(即上述存储在DPB 230等中的至少部分经解码图像)和其它帧间预测参数，例如取决于是否使用整个参考图像或只使用参考图像的一部分(例如当前块的区域周围的搜索窗口区域)来搜索最佳匹配参考块，和/或例如取决于是否进行像素插值(例如二分之一/半像素插值和/或四分之一像素插值)。
除了上述预测模式之外，还可以使用跳过模式和/或直接模式。
帧间预测单元244可以包括运动估计(motion estimation，ME)单元和运动补偿(motion compensation，MC)单元(两者均未在图2中示出)。运动估计单元可用于接收或获取图像块203(当前图像17的当前图像块203)和经解码的图像231，或至少一个或多个先前重建的块，例如，一个或多个其它/不同的先前解码的图像231的重建块，来进行运动估计。例如，一个视频序列可以包括当前图像和先前解码的图像231，或者，换句话说，当前图像和先前解码的图像231可以为组成视频序列的图像序列的一部分或形成该图像序列。
例如，编码器20可以用于从多个其它图像中的同一个或不同图像的多个参考块中选择一个参考块，并将参考图像(或参考图像索引)和/或参考块的位置(x坐标、y坐标)与当前块的位置之间的偏移(空间偏移)作为帧间预测参数提供给运动估计单元。这个偏移也称为运动矢量(motion vector，MV)。
运动补偿单元用于获取如接收帧间预测参数，并根据或使用帧间预测参数进行帧间预测，得到帧间预测块265。运动补偿单元所执行的运动补偿可以包括通过运动估计确定的运动/块矢量提取或生成预测块(执行插值以提高精度)。进行插值滤波时，可以根据已知像素样本生成其它像素样本，从而可能增加可用于对图像块进行译码的候选预测块的数量。接收到当前图像块的PU对应的运动矢量后，运动补偿单元可以在其中一个参考图像列表中定位所述运动矢量所指向的预测块。
运动补偿单元246还可生成与块和视频条带(slice)相关的语法元素该语法元素由视频解码器30用来解码视频条带的图像块。
熵译码
熵编码单元270用于将熵编码算法或方案(例如可变长度编码(variable lengthcoding，VLC)方案、上下文自适应VLC(context adaptive VLC scheme，CAVLC)方案、算术编码方案、二值化，上下文自适应二进制算术编码(context adaptive binary arithmeticcoding，CABAC)、基于语法的上下文自适应二进制算术编码(syntax-based context-adaptive binary arithmetic coding，SBAC)、概率区间分割熵(probability intervalpartitioning entropy，PIPE)编码或其它熵编码方法或技术)等应用于或不应用于(无压缩)量化系数209、帧间预测参数、帧内预测参数、环路滤波器参数和/或其它语法元素，得到可以通过输出端272以经编码码流21等形式输出的经编码的图像数据21，使得视频解码器30等可以接收并使用这些参数进行解码。可以将编码码流21发送到视频解码器30，或者将其存储在存储器汇总，以便随后由视频解码器30发送或检索。
视频编码器20的其它结构变化可以用于编码视频流。例如，对于某些块或帧，非变换的编码器20可以在没有变换处理单元206的情况下直接量化残差信号。在另一种实现方式中，编码器20可以将量化单元208和反量化单元210组合成单个单元。
解码器及解码方法
图3示出了用于实现本申请技术的示例性视频解码器30。视频解码器30用于接收例如由编码器20编码的经编码的图像数据21(例如，经编码的码流21)，得到经解码的图像331。经编码的图像数据或码流包括用于对经编码的图像数据进行解码的信息，例如，表示经编码的视频条带的图像块的数据以及相关的语法元素。
在图3的示例中，解码器30包括熵解码单元304、反量化单元310、逆变换处理单元312、重建单元314(例如求和器314)、环路滤波器320，解码图像缓冲区(decoded picturebuffer，DBP)330、帧间预测单元344和帧内预测单元354。帧间预测单元344可以是或包括运动补偿单元。在一些示例中，视频解码器30可执行大体上与图2所示视频编码器100所执行的编码过程相反的解码过程。
如编码器20所述，反量化单元210、逆变换处理单元212、重建单元214、环路滤波器220、解码图像缓冲区(decoded picture buffer，DPB)230、帧间预测单元344和帧内预测单元354还组成视频编码器20的“内置解码器”。因此，反量化单元310可以与反量化单元110具有相同的功能，逆变换处理单元312可以与逆变换处理单元212具有相同的功能，重建单元314可以与重建单元214具有相同的功能，环路滤波器320可以与环路滤波器220具有相同的功能，解码图像缓冲区330可以与解码图像缓冲区230具有相同的功能。因此，对视频编码器20的相应单元和功能的解释相应地适用于视频解码器30的相应单元和功能。
熵解码
熵解码单元304用于解析码流21(或一般为经编码的图像数据21)并对经编码的图像数据21执行熵解码等，得到量化系数309和/或经解码的译码参数(图3中未示出)等，例如帧间预测参数(例如参考图像索引和运动矢量)、帧内预测参数(例如帧内预测模式或索引)、变换参数、量化参数、环路滤波器参数和/或其它语法元素中的任一个或全部。熵解码单元304可以用于进行对应于编码器20的熵编码单元270所描述的编码方案的解码算法或方案。熵解码单元304还可以用于向模式选择单元360提供帧间预测参数、帧内预测参数和/或其它语法元素，并向解码器30的其它单元提供其它参数。视频解码器30可以接收视频条带级和/或视频块级的语法元素。
反量化
反量化单元310可用于从经编码的图像数据21(例如，通过熵解码单元304等解析和/或解码)接收量化参数(quantization parameter，QP)(或通常为与反量化相关的信息)和量化系数，并基于所述量化参数对经解码的量化系数309进行反量化，以获得解量化系数311，所述解量化系数311也可以称为变换系数311。反量化过程可以包括：使用视频编码器20确定的视频条带中的每个视频块的量化参数，以确定应应用的量化程度以及反量化程度。
逆变换
逆变换处理单元312可以用于接收解量化系数311(也称为变换系数311)，并对解量化系数311进行变换，以获得样本域中的重建残差块213。重建残差块213也可以称为变换块313。所述变换可以为逆变换，例如逆DCT、逆DST、逆整数变换或概念上类似的逆变换过程。逆变换处理单元312还可以用于从经编码的图像数据21(例如通过熵解码单元304解析和/或解码)接收变换参数或相应信息，以确定将对解量化系数311执行的变换。
重建
重建单元314(例如加法器或求和器314)可以用于通过如下方式将重建残差块313添加到预测块365，例如，将重建残差块313的样本值和预测块365的样本值相加，以得到样本域中的重建块315。
滤波
环路滤波器单元320(在译码环路中或在译码环路之后)用于对重建块315进行滤波，得到滤波块321，从而平滑像素的突变或以其它方式提高视频质量等。环路滤波器单元320可以包括一个或多个环路滤波器，如去块效应滤波器、样本自适应偏移(sample-adaptive offset，SAO)滤波器或一个或多个其它滤波器，例如双边滤波器、自适应环路滤波器(adaptive loop filter，ALF)、锐化滤波器、平滑滤波器、协作滤波器或其任意组合。尽管在图3中环路滤波器单元320示出为环内滤波器，但在其它配置中，环路滤波器单元320可以实现为后环路滤波器。
解码图像缓冲区
之后，将一个图像的解码视频块321存储在解码图像缓冲区330中。解码图像331作为参考图像存储在解码图像缓冲区330中，用于后续对其它图像进行运动补偿和/或后续相应输出以进行显示。
解码器30用于通过输出单元312等输出经解码的图像311，以向用户呈现或供用户查看。
预测
帧间预测单元344的功能可以与帧间预测单元244(特别是运动补偿单元)相同；帧内预测单元354的功能可以与帧间预测单元254相同，并根据从经编码的图像数据21接收到的分割和/或预测参数或相应信息(例如通过熵解码单元304等解析和/或解码)决策划分或分割模式并执行预测。模式选择单元360可以用于根据重建图像、块或相应的样本(经过滤波或未经滤波)按块执行预测(帧内预测或帧间预测)，以得到预测块365。
当将视频条带译码为经帧内译码(intra coded)(I)条带时，模式应用单元360中的帧内预测单元354用于根据指示的帧内预测模式和来自当前图像的先前经解码块的数据为当前视频条带的图像块生成预测块365。当视频图像译码为经帧间译码(inter coded)的(B或P)条带时，模式应用单元360中的帧间预测单元344(例如运动补偿单元)用于根据运动矢量和从熵解码单元304接收到的其它语法元素为当前视频条带的视频块生成预测块365。对于帧间预测，预测块可以从一个参考图像列表中的一个参考图像中生成。视频解码器30可以DPB 330中存储的参考图像通过默认构建技术构建参考帧列表，列表0和列表1。
模式选择单元360用于通过解析运动矢量和其它语法元素，确定当前视频条带的视频块的预测信息，并使用预测信息产生用于正被解码的当前视频块的预测块。例如，模式应用单元360使用接收到的部分语法元素确定译码视频条带的视频块的预测模式(例如帧内预测或帧间预测)、帧间预测条带类型(例如B条带、P条带或GPB条带)、条带的一个或多个参考图像列表的构建信息、条带的每一帧间编码视频块的运动矢量、条带的每一帧间译码视频块的帧间预测状态以及其它信息，以解码当前视频条带的视频块。
可以使用其它形式的视频解码器30对经编码的图像数据21进行解码。例如，解码器30能够在没有环路滤波器单元320的情况下产生输出视频流。例如，基于非变换的解码器30能够在没有逆变换处理单元312的情况下直接反量化某些块或帧的残差信号。在另一种实现方式中，视频解码器30可以具有组合成单个单元的反量化单元310和逆变换处理单元312。
应理解，在编码器20和解码器30中，可以针对当前环节的处理结果进行进一步处理，然后输出到下一环节。例如，在插值滤波、运动矢量推导或环路滤波之后，可以针对插值滤波、运动矢量推导或环路滤波的处理结果进一步进行如修正(clip)或移位(shift)等操作。
需要说明的是，可以对当前块的推导运动矢量(包括但不限于仿射模式下的控制点运动矢量、仿射、平面、ATMVP模式下的子块运动矢量、时间运动矢量等)进行进一步操作。例如，根据运动矢量的表示位将该运动矢量的值限制在预定义范围内。如果运动矢量的表示位为bitDepth，则该范围为–2^(bitDepth–1)至2^(bitDepth–1)–1，其中“^”符号表示幂次方。例如，如果bitDepth设置为16，则该范围为–32768至32767；如果bitDepth设置为18，则该范围为–131072至131071。例如，推导到的运动矢量的值(例如一个8×8块中的4个4×4子块的MV)被限制，使得所述4个4×4子块MV的整数部分之间的最大差值不超过N个像素，例如不超过1个像素。
这里提供了两种根据bitDepth限制运动矢量的方法。
方法1：通过流操作来去除溢出的最高有效位(most significant bit，MSB)。
ux＝(mvx+2bitDepth)％2bitDepth (1)
mvx＝(ux>＝2bitDepth-1)？(ux-2bitDepth):ux (2)
uy＝(mvy+2bitDepth)％2bitDepth (3)
mvy＝(uy>＝2bitDepth-1)？(uy-2bitDepth):uy (4)
其中，mvx为图像块或子块的运动矢量的水平分量，mvy为图像块或子块的运动矢量的垂直分量，ux和uy表示中间值；
例如，如果mvx的值为–32769，则使用公式(1)和(2)之后得到的值为32767。在计算机系统中，十进制数以二的补码的形式存储。–32769的二进制补码为1,0111,1111,1111,1111(17位)。这时丢弃MSB，那么得到的二进制补码为0111,1111,1111,1111(十进数为32767)，这与使用公式(1)和(2)之后得到的输出结果相同。
ux＝(mvpx+mvdx+2bitDepth)％2bitDepth (5)
mvx＝(ux>＝2bitDepth-1)？(ux-2bitDepth):ux (6)
uy＝(mvpy+mvdy+2bitDepth)％2bitDepth (7)
mvy＝(uy>＝2bitDepth-1)？(uy-2bitDepth):uy (8)
如公式(5)至(8)所示，在求mvp与mvd之和期间，可以应用这些运算。
方法2：通过对值进行修正来去除溢出的MSB。
vx＝Clip3(-2bitDepth-1,2bitDepth-1-1,vx)
vy＝Clip3(-2bitDepth-1,2bitDepth-1-1,vy)
其中，vx为图像块或子块的运动矢量的水平分量，vy为图像块或子块的运动矢量的垂直分量；x、y和z分别对应MV修正过程的三个输入值，函数Clip3的定义如下：
图4为本发明实施例提供的视频译码设备400的示意图。视频译码设备400适用于实现本文描述的公开实施例。在一个实施例中，视频译码设备400可以是解码器(例如图1A中的视频解码器30)或编码器(例如图1A中的视频编码器20)。
视频译码设备400包括：入端口410(或输入端口410)和接收单元(receiver unit，Rx)420，用于接收数据；处理器、逻辑单元或中央处理单元(central processing unit，CPU)430，用于处理数据；发送单元(transmitter unit，Tx)440和出端口450(或输出端口450)，用于发送数据；存储器460，用于存储数据。视频译码设备400还可以包括与入端口410、接收单元420、发送单元440和出端口450耦合的光电(optical-to-electrical，OE)组件和电光(electrical-to-optical，EO)组件，用作光信号或电信号的出口或入口。
处理器430通过硬件和软件实现。处理器430可以实现为一个或多个CPU芯片、核(例如，多核处理器)、FPGA、ASIC以及DSP。处理器430与入端口410、接收单元420、发送器单元440、出端口450和存储器460通信。处理器430包括译码模块470。译码模块470实现上述描述的公开实施例。例如，译码模块470执行、处理、准备或提供各种译码操作。因此，将译码模块470包括在内，这为视频译码设备400的功能提供了实质性的改进，并且影响了视频译码设备400到不同状态的转换。或者，以存储在存储器460中并由处理器430执行的指令来实现译码模块470。
器460可以包括一个或多个磁盘、磁带机和固态硬盘，并且可以用作溢出数据设备，以在选择此类程序用于执行时程序，以及在程序执行期间读取的指令和数据。例如，存储器460可以是易失性和/或非易失性的，并且可以是只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、三态内容寻址存储器(ternarycontent-addressable memory，TCAM)和/或静态随机存取存储器(static random-accessmemory，SRAM)。
图5为示例性实施例提供的装置500的简化框图，其中，装置500可用作图1中的源设备12和目的地设备14中的任一者或两者。
装置500中的处理器502可以是中央处理器。或者，处理器502可以是能够操纵或处理现在存在或以后开发的信息的任何其它类型的设备或多个设备。虽然可以使用如图所示的处理器502等单个处理器来实现所公开的实现方式，但使用多于1个处理器实现时可以提高速度和效率。
装置500中的存储器504在一种实现方式中可以是只读存储器(read onlymemory，ROM)设备或随机存取存储器(random access memory，RAM)设备。可以使用任何其它合适类型的设备作为器504。存储器504可以包括处理器502通过总线512访问的代码和数据506。存储器504还可以包括操作系统508和应用程序510，应用程序510包括使处理器502执行本文描述的方法的至少一个程序。例如，应用程序510可以包括应用1至N，还可以包括执行本文所述方法的视频译码应用。
装置500还可以包括一个或多个输出设备，例如显示器518。在一个示例中，显示器518可以是触摸敏感显示器，触摸敏感显示器将显示器与可操作以感测触摸输入的触摸敏感元件相结合。显示器518可以通过总线512耦合到处理器502。
尽管在这里描述为单个总线，但装置500的总线512可以由多个总线组成。此外，辅助器514可以直接耦合到装置500的其它组件，或者可以通过网络访问，并且可以包括单个集成单元(例如卡)或多个单元(例如多个卡)。因此，装置500可以具有各种各样的配置。
帧内预测模式
根据HEVC/H.265标准，帧内预测模式有35种。如图6所示，该集合包含以下模式：平面模式(帧内预测模式索引为0)、DC模式(帧内预测模式索引为1)，以及覆盖180度范围且帧内预测模式索引值范围为2至34(如图6中的黑色箭头所示)的方向(角度)模式。为了捕获自然视频中出现的任意边缘方向，方向帧内预测模式的数量从HEVC中使用的33个扩展到65个。其它方向模式在图6中被描述为虚线箭头，平面模式和DC模式保持不变。值得注意的是，帧内预测模式覆盖的范围可以大于180度。特别地，索引值为3至64的62种方向模式覆盖了大概230度的范围，即，几对模式具有相反的方向性。如图6所示，在HEVC参考模型(HEVCReference Model，HM)和JEM平台的情况下，只有一对角度模式(即，模式2和66)具有相反的方向性。为了构建一个预测值，传统的角度模式取参考样本并且(如果需要的话)它们以获得样本预测值。构建预测器所需参考像素点的数量取决于用于插值的滤波器的长度(例如，双线性滤波器和立方滤波器的长度分别为2和4)。
图4示出了67种帧内预测模式的示例，例如，VVC中提出的67种帧内预测模式中的多种帧内预测模式包括：平面模式(索引为0)、DC模式(索引为1)和索引为2至66的角度模式。图6左下方的角度模式索引为2，索引编号递增，直到索引66指图6最右上方的角度模式。
最可能模式列表构建
将最可能模式(most probable mode，MPM)列表用于帧内模式译码，以提高译码效率。由于帧内预测模式数量较多(例如，在ITU H.265中有35种，在VVC中有67种)，根据多个相邻CU(coding unit，编码单元)或相邻CB(coding block，编码块)的帧内预测模式来构建当前CU或当前CB的最可能模式列表。由于当前CU或当前CB的帧内预测模式与其相邻CU或相邻CB的帧内预测模式相关，MPM列表通常提供良好预测。MPM列表很大概率包括了当前CU或当前CB的帧内预测模式。因此，仅指示MPM列表的索引来推导当前CU或当前CB的帧内预测模式。与所有帧内预测模式的数量相比，MPM列表的长度小得多(例如，在HEVC中使用3-MPM列表，在VVC中使用6-MPM列表)。因此，对帧内预测模式进行译码所需的比特数较少。使用标志(例如，mpm_flag)表示当前CU或当前CB的帧内预测模式是否在MPM列表中。如果为真(true)(例如，值为1)，则当前CU或当前CB的帧内预测模式在MPM列表中。如果为假(false)(例如，值为0)，则当前CU或当前CB的帧内预测模式不在MPM列表中，使用二值化码来指示当前CU或当前CB的帧内预测模式。
VVC和ITU H.265中的MPM列表构建
在VVC和ITU H.265中，MPM列表是根据当前块的相邻左块和顶部块构建的。当当前块的左块和顶部块不可用于帧内预测时，使用模式列表。
在6-MPM列表构建的一个示例中，模式列表可以按顺序包括以下帧内预测模式：(1)平面模式，(2)DC模式，(3)垂直模式，(4)水平模式，(5)V-4模式(即帧内预测模式46)，(6)V+4模式(即帧内预测模式54)。在3-MPM列表构建的另一个示例中，默认模式列表可以按顺序包括以下帧内预测模式：(1)平面模式，(2)DC模式。
当当前块的帧内预测模式在MPM列表中时，对当前块的索引进行二值化。
二值化用于将十进制转换为二进制表示。ITU-T H.265和VVC中使用了许多二值化方法，如固定长度码、截断一元码和截断二进制码。截断一元码用于对6-MPM列表对应的索引进行编码。截断一元二值化表示mpm idx(假设为n，n的值在范围0至5之间，包括端值)，n1之后为0，所有n位都为1的最大值除外；或者，n 0之后为1，所有n位都为0的最大值除外。最大值为5的mpm索引的二值化码如表1所示。
表1
| 十进制值 | 二进制表示替代值1 | 二进制表示替代值2 |
| 0 | 0 | 1 |
| 1 | 10 | 01 |
| 2 | 110 | 001 |
| 3 | 1110 | 0001 |
| 4 | 11110 | 00001 |
| 5 | 11111 | 00000 |
在上述示例中，每个十进制值根据二进制表示中比前一个十进制值(十进制值少1位)多1位的比特位进行编码，但对应索引的最大值的最后一个十进制值除外。
多假设预测
编码块可以进行帧内预测(即，使用同一图像中的参考样本)或者进行帧间预测(即，使用其它图像中的参考样本)。多假设预测结合了这两种预测方法。因此，多假设预测有时也称为帧间帧内联合预测。当启用帧间帧内联合预测时，按权重应用帧内预测样本和帧间预测样本，编码块的最终预测推导为加权平均样本。
在VTM 3.0中，如果启用了多假设(multi-hypothesis，MH)预测，则使用基于块形状的4种或3种帧内预测模式。在4种帧内预测模式下，使用平面、DC、垂直(对应值50)和水平模式(对应值18)。在3种帧内预测模式情况下，当CU或CB的宽度大于CU或CB的高度的两倍时，帧内预测模式列表不包括水平模式；当CU或CB的高度大于CU或CB的宽度的两倍时，从帧内预测模式列表中删除垂直模式。对于3和4种帧内预测模式的情况，仅允许这四种帧内预测模式(即，平面、DC、垂直和水平)，并定义了3-MPM列表。
MH块：亮度分量的编码块，所述编码块通过多假设预测进行预测。
帧内块：通过帧内预测进行预测而不通过多假设预测进行预测的编码块。MH块的MPM列表构建与VTM3.0中的帧内块MPM列表构建不同。在一个示例中，构建6-MPM列表，67种帧内预测模式可用于帧内预测。帧内块的MPM列表构建是根据左块和上块的帧内预测模式构建的。如果左块的帧内预测模式和上块的帧内预测模式不可用，则使用包括六个表项的默认模式列表(平面、DC、垂直、水平、垂直-4和垂直+4)。
在另一方面，MH块的mpm列表索引的二值化不同于帧内块的mpm列表索引的二值化。对于MH块，首先定义一个3-MPM列表，mpm列表索引的最大值为2，而对于帧内块，定义一个6-MPM列表，mpm列表索引的最大值为5。然后，在3种或4种帧内预测模式下，MH块的索引二值化与mpm_flag的指示结合。在3种帧内预测模式下，因为帧内预测模式在排除水平或垂直模式后必须属于3-MPM列表，不指示mpm_flag但可以推断为true。在4种帧内预测模式的下，指示mpm_flag。如果mpm_flag的值为true(例如，mpm_flag的值为1)，则mpm_idx用截断一元码进行编码，截断一元码的最大值为2；如果mpm_flag的值为false(例如，mpm_flag的值为0)，从4种模式(平面、DC、垂直和水平)中排除3-MPM列表中的3种帧内预测模式，获得帧内预测模式。
MH块的MPM列表索引的二值化，以及3种和4种帧内预测模式情况的mpm_flag指示如表2所示。
表2
VTM中基于块的方法针对MH块区分3种或4种MPM，这样增加了解码复杂度，并且这种方法对于应用多假设预测(即，帧间帧内联合预测)的块来说可能不是必要的。
本申请实施例提供了几种通过MH预测降低图像块解码复杂度的备选方案，有利于简化MH块的MPM列表构建。
实施例1
确定编码块是否应用多假设预测；
如果应用多假设预测来预测所述编码块，
●使用第一MPM列表，第一MPM列表包括预定义的默认帧内预测模式列表，所述列表的大小为N(N大于0)。
●根据第一MPM列表的表项之一预测所述块。
如果不应用多假设预测来预测所述编码块，并且如果应用帧内预测来预测所述块，
●根据第二MPM列表的表项之一预测所述块(在一个示例中，第二MPM列表根据JVET-L1001中公开的方法构建)。
在一种实现方式中，默认模式列表的长度为4，列表按照指定顺序由以下表项组成：平面模式、DC模式、垂直模式和水平模式。
在一种实现方式中，默认模式列表的长度为3，列表按照指定顺序由以下表项组成：平面模式、DC模式和垂直模式。
在一种实现方式中，默认模式列表的长度为2，列表按照指定顺序由以下表项组成：平面模式和DC模式。
在一种实现方式中，默认模式列表的长度为1，列表仅由平面模式组成。
在一种实现方式中，mpm列表索引的二值化使用截断一元码，当第一MPM列表包括4种帧内预测模式时，截断一元码的最大值为3，mpm_flag始终设置为true(mpm_flag的值为1)。
在另一种实现方式中，默认模式列表中的前4个候选用于构建包括4种帧内预测模式的第一MPM列表。默认模式列表中的4个候选的顺序与第一MPM列表中的候选的顺序相同。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则所述第一MPM列表按顺序包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式。
在一种实现方式中，默认模式列表中的前3个候选用于构建包括3种帧内预测模式的第一MPM列表。
在一种实现方式中，mpm列表索引的二值化使用截断一元码，当第一MPM列表包括3种帧内预测模式时，截断一元码的最大值为2，mpm_flag始终设置为true(mpm_flag的值为1)。
在另一种实现方式中，默认模式列表中的前3个候选用于构建包括3种帧内预测模式的第一MPM列表。默认模式列表中的3个候选的顺序与第一MPM列表中的候选的顺序相同。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则所述第一MPM列表按顺序包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式。
在一种实现方式中，默认模式列表中的前2个候选用于构建包括2种帧内预测模式的第一MPM列表。
在一种实现方式中，当第一MPM列表包括2种帧内预测模式时，mpm列表索引的二值化使用最大值为1的截断一元码，mpm_flag始终设置为true(mpm_flag的值为1)。
在另一种实现方式中，默认模式列表中的前2个候选用于构建包括2种帧内预测模式的第一MPM列表。默认模式列表中的2个候选的顺序与第一MPM列表中的候选的顺序相同。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则所述第一MPM列表按顺序包括以下帧内预测模式：
1.平面模式，
2.DC模式。
在一种实现方式中，默认模式列表中的第一个候选用于构建包括一种帧内预测模式的第一MPM列表。在一个示例中，插入第一MPM列表中的模式是平面模式。
在一种实现方式中，如果第一MPM列表包括一种帧内预测模式，且用固定的帧内预测模式进行编码，则不指示mpm_idx，mpm_flag始终设置为true(mpm_flag的值为1)。
在另一种实现方式中，默认模式列表中的第一个候选用于构建包括一种帧内预测模式的第一MPM列表。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则所述第一MPM列表按顺序包括以下帧内预测模式：
平面模式。
第二列表可以根据ITU-T H.265和VVC中的方法构建，参见上述H.265和VVC中关于MPM列表构建过程的示例和描述。
实施例2
构建第一MPM列表(在一个示例中，第一MPM列表根据JVET-L1001中公开的方法构建)。
确定编码块是否应用多假设预测；
●如果应用多假设预测来预测所述编码块，
根据第一MPM列表的表项之一预测所述块。
●如果不应用多假设预测来预测所述编码块，并且如果应用帧内预测来预测所述块，
根据第一MPM列表的表项之一预测所述块。
在一种实现方式中，根据第一MPM列表的表项之一进行帧内预测如下：
●步骤1：构建第一MPM列表的所有表项。
●步骤2：确定块是否应用多假设预测。
●步骤3：
○如果应用多假设预测来预测编码块，
■从码流中解析索引指示，其最大值为(N–1)，N大于或等于1。当N为1时，索引指示 可以推断(但不需要解析)为0。
■根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
■如果推导出的帧内预测模式是模式索引(帧内预测模式的对应值)在2至34(包括端值)之间的角度模式，则推导出的帧内预测模式改为水平模式。
■否则，如果推导出的帧内预测模式是模式索引在35至66(包括端值)之间的角度模式，则推导出的帧内预测模式改为垂直模式。
○如果不应用多假设预测来预测所述块，且如果应用帧内预测来预测所述块，
■从码流中解析索引指示，其最大值为(M–1)，M等于或大于1。
■根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
●步骤4：根据推导出的帧内预测模式预测所述块。
在一种实现方式中，根据第一MPM列表的表项之一进行帧内预测如下：
●步骤1：构建第一MPM列表的所有表项。
●步骤2：确定块是否应用多假设预测。
●步骤3：
○如果应用多假设预测来预测编码块，
■从码流中解析索引指示，其最大值为(N–1)，N等于或大于1。当N为1时，索引指示可以推断(但不需要解析)为0。
■根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
■如果推导出的帧内预测模式是模式索引(帧内预测模式的对应值)在2至33(包括端值)之间的角度模式，则推导出的帧内预测模式改为水平模式。
■否则，如果推导出的帧内预测是模式索引在34至66(包括端值)之间的角度模式，则推导出的帧内预测模式改为垂直模式。
○如果不应用多假设预测来预测所述块，且如果应用帧内预测来预测所述块，
■从码流中解析索引指示，其最大值为(M–1)，M等于或大于1。
■根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
●步骤4：根据推导出的帧内预测模式预测所述块。
在一种实现方式中，根据第一MPM列表的表项之一进行帧内预测如下：
●步骤1：构建第一MPM列表的所有表项。
●步骤2：确定块是否应用多假设预测。
●步骤3：
○如果应用多假设预测来预测编码块，
■从码流中解析索引指示，其最大值为(N–1)，N等于或大于1。当N为1时，索引指示可以推断(但不需要解析)为0。
■根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
■如果推导出的帧内预测模式是模式索引(帧内预测模式的对应值)在2至66(包括端值)之间的角度模式，则推导出的帧内预测模式改为平面模式。
■根据推导出的帧内预测模式预测所述块。
○如果不应用多假设预测来预测所述块，且如果应用帧内预测来预测所述块，
■从码流中解析索引指示，其最大值为(M–1)，M等于或大于1。
■根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
●步骤4：根据推导出的帧内预测模式预测所述块。
实施例3
确定块是否应用多假设预测；
如果应用多假设预测来预测所述块，
●构建第一MPM列表的前N个表项(在一个示例中，第一MPM列表根据JVET-L1001中公开的方法构建)。
●根据第一MPM列表的表项之一预测所述块。
如果不应用多假设预测来预测所述块，且如果应用帧内预测来预测所述块，
●构建第一MPM列表的所有表项(在一个示例中，第一MPM列表根据JVET-L1001中公开的方法构建)。
●根据第一MPM列表的表项之一预测所述块。
在一种实现方式中，第一MPM列表仅包括平面、DC、垂直和水平帧内预测模式。
在一种实现方式中，根据第一MPM列表的表项之一进行帧内预测如下：
●步骤1：确定块是否应用多假设预测。
●步骤2：
●如果应用多假设预测来预测编码块，
○构建第一MPM列表中的前N个表项，即，根据第一MPM列表的构建规则构建第一MPM列表的前N个表项。当确定所述前N个表项时，停止构建第一MPM列表中的其它表项。
○从码流中解析索引指示，其最大值为(N–1)，N等于或大于1。当N为1时，索引指示可以推断(但不需要解析)为0。
○根据所述第一MPM列表的前N个表项和推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表的前N个表项中的表项。
○如果推导出的帧内预测模式是模式索引(帧内预测模式的对应值)在2至33(包括端值)之间的角度模式，则推导出的帧内预测模式改为水平模式(对应值18)。
○否则，如果推导出的帧内预测是模式索引在34至66(包括端值)之间的角度模式，则推导出的帧内预测模式改为垂直模式(对应值50)。
●如果不应用多假设预测来预测所述块，且如果应用帧内预测来预测所述块，
○构建第一MPM列表的所有M个表项。
○从码流中解析索引指示，其最大值为(M–1)，M等于或大于1。
○根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
●步骤3：根据推导出的帧内预测模式预测所述块。
在一种实现方式中，根据第一MPM列表的表项之一进行帧内预测如下：
●步骤1：确定块是否应用多假设预测。
●步骤2：
●如果应用多假设预测来预测编码块，
○构建第一MPM列表的前N个表项，即，根据第一MPM列表的构建规则构建第一MPM列表的前N个表项。当确定前N个表项时，停止构建第一MPM列表的其它表项。
○从码流中解析索引指示，其最大值为(N–1)，N等于或大于1。当N为1时，索引指示可以推断(但不需要解析)为0。
○根据所述第一MPM列表的前N个表项和推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表的前N个表项中的表项。
○如果推导出的帧内预测模式是模式索引(帧内预测模式的对应值)在2至34(包括端值)之间的角度模式，则推导出的帧内预测模式改为水平模式(对应值18)。
○否则，如果推导出的帧内预测是模式索引在35至66(包括端值)之间的角度模式，则推导出的帧内预测模式改为垂直模式(对应值50)。
●如果不应用多假设预测来预测所述块，且如果应用帧内预测来预测所述块，
○构建第一MPM列表的所有M个表项。
○从码流中解析索引指示，其最大值为(M–1)，M等于或大于1。
○根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
●步骤3：根据推导出的帧内预测模式预测所述块。
在一种实现方式中，根据第一MPM列表的表项之一进行帧内预测如下：
●步骤1：确定块是否应用多假设预测。
●步骤2：
●如果应用多假设预测来预测编码块，
○构建第一MPM列表中的前N个表项，即，根据第一MPM列表的构建规则构建第一MPM列表的前N个表项。当确定前N个表项时，停止构建第一MPM列表的其它表项。
○从码流中解析索引指示，其最大值为(N–1)，N等于或大于1。当N为1时，索引指示可以推断(但不需要解析)为0。
○根据所述第一MPM列表的前N个表项和推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表的前N个表项中的表项。
○如果推导出的帧内预测模式是模式索引(帧内预测模式的对应值)在2至66(包括端值)之间的角度模式，则推导出的帧内预测模式改为平面模式(对应值0)。
●如果不应用多假设预测来预测所述块，且如果应用帧内预测来预测所述块，
○构建第一MPM列表的所有M个表项。
○从码流中解析索引指示，其最大值为(M–1)，M等于或大于1。
○根据所述第一MPM列表和所述推导出的索引指示推导帧内预测模式。所述推导出的帧内预测模式是由索引指示索引的第一MPM列表中的表项。
●步骤3：根据推导出的帧内预测模式预测所述块。
在一种实现方式中，根据第二MPM列表的前N个表项构建第一MPM列表如下：
●步骤1：转到第二MPM列表的第一个表项。
●步骤2.1：如果表项是平面模式或DC模式，则将表项插入第一MPM列表。
●步骤2.2：否则，如果表项是模式索引在2至33(包括端值)之间的角度模式，则在第一MPM列表中插入水平模式。
●步骤2.3：否则，如果表项是模式索引在34至66(包括端值)之间的角度模式，则在第一MPM列表中插入垂直模式。
●步骤3：转到第二MPM列表中的下一个表项，重新执行步骤2.1，直到第一MPM列表中的表项数等于指定的最大值。
在一种实现方式中，根据第二MPM列表的前N个表项构建第一MPM列表如下：
●步骤1：转到第二MPM列表的第一个表项。
●步骤2.1：如果表项是平面模式或DC模式，则将表项插入第一MPM列表。
●步骤2.2：否则，如果表项是模式索引在2至34(包括端值)之间的角度模式，且未插入水平模式，则在第一MPM列表中插入水平模式。
●步骤2.3：否则，如果表项是模式索引在35至66(包括端值)之间的角度模式，且未插入垂直模式，则在第一MPM列表中插入垂直模式。
●步骤3：转到第二MPM列表中的下一个表项，重新执行步骤2.1，直到第一MPM列表中的表项数等于指定的最大值或第二MPM列表的前N个表项全部迭代。
●步骤4：填写一个或多个未插入第一MPM列表的默认模式。
在一种实现方式中，根据第二MPM列表的前N个表项构建第一MPM列表如下：
●步骤1：转到第二MPM列表的第一个表项。
●步骤2.1：如果表项是平面模式或DC模式，则将表项插入第一MPM列表。
●步骤2.2：否则，如果表项是模式索引在2至33(包括端值)之间的角度模式，且未插入水平模式，则在第一MPM列表中插入水平模式。
●步骤2.3：否则，如果表项是模式索引在34至66(包括端值)之间的角度模式，且未插入垂直模式，则在第一MPM列表中插入垂直模式。
●步骤3：转到第二MPM列表中的下一个表项，重新执行步骤2.1，直到第一MPM列表中的表项数等于指定的最大值或第二MPM列表的前N个表项全部迭代。
●步骤4：填写一个或多个未插入第一MPM列表的默认模式。
在一种实现方式中，根据第二MPM列表的前N个表项构建第一MPM列表如下：
●步骤1：转到第二MPM列表的第一个表项。
●步骤2.1：如果表项是平面模式或DC模式，则将表项插入第一MPM列表。
●步骤2.2：否则，如果表项是模式索引在2至66(包括端值)之间的角度模式，且未插入默认模式，则在第一MPM列表中插入默认模式。
●步骤3：转到第二MPM列表的下一个表项，重新执行步骤2.1，填写不同的默认模式，直到第一MPM列表中的表项数等于指定的最大值。
实施例4
确定编码块是否应用多假设预测；
如果应用多假设预测来预测所述编码块，
●使用第一MPM列表，第一MPM列表包括预定义的默认帧内预测模式列表(例如，default_list[N])，所述列表的大小为N(N大于0)。
●将mpm_flag设置为true，即mpm_flag推断为1。mpm_flag表示当前块的帧内预测模式是否在MPM列表中。当mpm_flag等于1时，当前块的帧内预测模式在MPM列表中；当mpm_flag等于0时，当前块的帧内预测模式不在MPM列表中。
●解析mpm_idx，所述mpm_idx的值在0至N–1之间(包括端值)。如果N为1，则不解析mpm_idx，而是推断mpm_idx为0。
●使用default_list[mpm_idx]获取当前块的帧内预测模式。
●根据获取的帧内预测模式预测所述块。
在一个示例中，本实施例中没有基于块的二值化和MPM列表构建。
在一种实现方式中，默认模式列表的长度为4，列表按照指定顺序由以下表项组成：平面模式、DC模式、垂直模式和水平模式。
在一种实现方式中，默认模式列表的长度为3，列表按照指定顺序由以下表项组成：平面模式、DC模式和垂直模式。
在一种实现方式中，默认模式列表的长度为3，列表按照指定顺序由以下表项组成：平面模式、水平模式(即，18)和垂直模式(即，50)。
在一种实现方式中，默认模式列表的长度为3，列表按照指定顺序由以下表项组成：平面模式、垂直模式和水平模式。
在一种实现方式中，默认模式列表的长度为2，列表按照指定顺序由以下表项组成：平面模式和DC模式。
在一种实现方式中，默认模式列表的长度为1，列表仅由平面模式组成。
在一种实现方式中，mpm列表索引的二值化使用截断一元码，当第一MPM列表包括4种帧内预测模式时，截断一元码的最大值为3，mpm_flag始终设置为true(mpm_flag的值为1)。
在一种实现方式中，mpm_flag始终设置为true(mpm_flag的值为1)。mpm列表索引的二值化使用截断一元码，所有二元符号(bin)都是CABAC旁路编码的。默认MPM列表的大小为3，截断一元码的最大值为2，当第一MPM列表有3种帧内预测模式，按顺序包括以下模式：平面模式、水平模式(即，18)和垂直模式(即，50)。
在一种实现方式中，mpm_flag始终设置为true(mpm_flag的值为1)。mpm列表索引的二值化使用截断一元码，所有二元符号(bin)都是CABAC旁路编码的。默认MPM列表的大小为3，截断一元码的最大值为2，当第一MPM列表有3种帧内预测模式，按顺序包括以下模式：平面模式、垂直模式(即，50)和水平模式(即，18)。
第二列表可以根据ITU-T H.265和VVC中的方法构建，参见上述H.265和VVC中关于MPM列表构建过程的示例和描述。
实施例5
如图8所示，一种用于解码图像块的方法，包括：
步骤801：获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测。
步骤802：当所述指示参数表示所述当前编码块应用多假设预测时，
步骤803：根据平面模式解码所述当前编码块。
在一种实现方式中，所述多假设预测是帧间帧内联合预测(combined inter andintra prediction，CIIP)。
在一种实现方式中，所述指示参数是CIIP标志。
在一种实现方式中，合并数据语法携带所述指示参数。即，所述指示参数是根据所述合并数据语法推导的。
在一种实现方式中，根据所述指示参数的值将多假设预测应用于当前编码块后，所述方法还包括：根据最可能模式(most probable mode，MPM)列表和MPM列表索引获取所述当前编码块的帧内预测模式。可选地，通过以下步骤根据MPM列表和MPM列表索引获取所述当前编码块的帧内预测模式：使用对应的MPM列表索引值索引所述MPM列表中的每个帧内预测模式；从码流中解析所述MPM列表索引，其中，所述MPM列表索引的值在0至N–1之间；根据MPM列表索引的值，从MPM列表中获取所述当前块的帧内预测模式。
在一种实现方式中，所述MPM列表至少包括平面模式。
在另一种实现方式中，所述MPM列表包括平面模式以及DC模式、垂直模式和水平模式中的至少一种。
在另一种实现方式中，所述MPM列表由平面模式组成。
在一种实现方式中，所述方法还包括：根据所述MPM列表索引值从所述MPM列表中选择所述当前编码块的平面模式。
在一种实现方式中，所述MPM列表是根据预定义的默认帧内预测模式列表(例如，默认模式列表)构建的，所述列表的大小大于N。
在一种实现方式中，所述MPM列表索引被编码为十进制或二进制表示。
在一种实现方式中，所述MPM列表索引的二值化使用截断一元码。
在一种实现方式中，默认模式列表中的前4个候选用于构建包括4种帧内预测模式的MPM列表。默认模式列表中的4个候选的顺序与MPM列表中的候选的顺序相同。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则所述MPM列表按顺序包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式。
在一种实现方式中，默认模式列表中的前3个候选用于构建包括3种帧内预测模式的MPM列表。
在一种实现方式中，mpm列表索引的二值化使用截断一元码，当MPM列表包括3种帧内预测模式时，截断一元码的最大值为2，mpm_flag始终设置为true(mpm_flag的值为1)。
在另一种实现方式中，默认模式列表中的前3个候选用于构建包括3种帧内预测模式的MPM列表。默认模式列表中的3个候选的顺序与MPM列表中的候选的顺序相同。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则所述MPM列表按顺序包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式。
在一种实现方式中，默认模式列表中的前2个候选用于构建包括2种帧内预测模式的MPM列表。
在一种实现方式中，mpm列表索引的二值化使用截断一元码，当MPM列表包括2种帧内预测模式时，截断一元码的最大值为1，mpm_flag始终设置为true(mpm_flag的值为1)。
在另一种实现方式中，默认模式列表中的前2个候选用于构建包括2种帧内预测模式的MPM列表。默认模式列表中的2个候选的顺序与MPM列表中的候选的顺序相同。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则所述MPM列表按顺序包括以下帧内预测模式：
1.平面模式，
2.DC模式。
在一种实现方式中，默认模式列表中的第一个候选用于构建包括一种帧内预测模式的MPM列表。在一个示例中，插入到MPM列表中的模式是平面模式。
在另一种实现方式中，默认模式列表中的第一个候选用于构建包括一种帧内预测模式的MPM列表。例如，如果默认模式列表包括以下帧内预测模式：
1.平面模式，
2.DC模式，
3.垂直模式，
4.水平模式，
5.V-4模式，
6.V+4模式。
则MPM列表包括以下帧内预测模式：
平面模式。
上述实施例也适用于一种用于编码图像块的方法。
在一种实现方式中，mpm列表索引的二值化使用截断一元码，当第一MPM列表包括N种帧内预测模式时，截断一元码的最大值为N–1，mpm_flag始终设置为true。如果N等于1，则不指示mpm_idx。
尽管本发明实施例主要根据视频译码进行了描述，但需要说明的是，译码系统10、编码器20和解码器30(相应地，系统10)的实施例以及本文描述的其它实施例也可以用于静态图像处理或译码，即，对视频译码中独立于任何先前或连续图像的单个图像进行处理或译码。一般情况下，如果图像处理编码仅限于单个图像17，帧间预测单元244(编码器)和344(解码器)可能不可用。视频编码器20和视频解码器30的所有其它功能(也称为工具或技术)同样可用于静态图像处理，例如残差计算204/304、变换206、量化208、反量化210/310、(逆)变换212/312、分割262/362、帧内预测254/354和/或环路滤波220/320、熵编码270和熵解码304。
编码器20和解码器30等的实施例，以及本文描述的与编码器20和解码器30等有关的功能可以以硬件、软件、固件或其任意组合来实现。如果通过软件实现，则这些功能可以作为一个或多个指令或代码存储在计算机可读介质中或通过通信介质发送，且由基于硬件的处理单元执行。计算机可读介质可以包括计算机可读存储介质，其对应于有形介质(例如数据存储介质)，或者包括任何根据通信协议等有利于将计算机程序从一个地方传递到另一个地方的通信介质。在这种方式中，计算机可读介质通常可以对应(1)非瞬时性的有形计算机可读介质或(2)通信介质，例如信号或载波。数据存储介质可以是通过一个或多个计算机或一个或多个处理器访问的任何可用介质，以检索用于实施本发明所描述的技术的指令、代码和/或数据结构。计算机程序产品可以包括计算机可读介质。
作为示例而非限制，这类计算机可读存储介质可以包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储器、磁盘存储器或其它磁性存储设备、闪存或可用于存储指令或数据结构形式的所需程序代码并且可由计算机访问的任何其它介质。此外，任何连接都可以称为计算机可读介质。例如，如果指令是从网站、服务器或其它远程源通过同轴电缆、光纤电缆、双绞线、数字用户线(digital subscriber line，DSL)或无线技术(例如红外、无线电、微波等)发送的，则介质的定义包括同轴电缆、光纤电缆、双绞线、DSL或无线技术(例如红外、无线电和微波等)。但是，应理解，计算机可读介质和数据介质不包括连接、载波、信号或其它瞬时介质，而是指非瞬时有形介质。本文所使用的磁盘和光盘包括压缩光盘(compactdisc，CD)、激光光盘、光学光盘、数字多功能光盘(digital versatile disc，DVD)、软盘和蓝光光盘，其中，磁盘通常以磁性方式再现数据，而光盘则通过激光以光学方式再现数据。上述的组合也应包括在计算机可读介质的范围内。
指令可以由一个或多个处理器执行，例如一个或多个数字信号处理器(digitalsignal processor，DSP)、通用微处理器、专用集成电路(application-specificintegrated circuit，ASIC)、现场可编程逻辑阵列(field programmable logic array，FPGA)或其它等效的集成或分立逻辑电路。因此，本文使用的术语“处理器”可以指任何上述结构或任何适合于实现本文所描述的技术的任何其它结构。另外，在一些方面中，本文所描述的各种功能可以提供在用于编码和解码的专用硬件和/或软件模块内，或者并入在组合的编解码器中。另外，这些技术可以在一个或多个电路或逻辑元件中完全实现。
本发明技术可以在多种设备或装置中实现，这些设备或装置包括无线手机、集成电路(integrated circuit，IC)或一组IC(例如芯片组)。本发明描述各种组件、模块或单元以强调用于执行所公开技术的设备的功能方面，但这些组件、模块或单元不一定要求通过不同的硬件单元实现。相反，如上所述，各种单元可以结合合适的软件和/或固件组合在编解码器硬件单元中，或者通过包括如上所述的一个或多个处理器的互操作硬件单元的集合来提供。
下面解释上述实施例中所示的编码方法和解码方法以及使用这些方法的系统的应用。
图9为用于实现内容分发业务的内容提供系统3100的框图。该内容提供系统3100包括捕获设备3102、终端设备3106，并且可选地包括显示器3126。捕获设备3102与终端设备3106通过通信链路3104进行通信。该通信链路可以包括上述通信信道13。通信链路3104包括但不限于WIFI、以太网、电缆、无线(3G/4G/5G)、USB或者其任意组合等。
捕获设备3102生成数据，并且可以通过如上述实施例所示的编码方法对数据进行编码。或者，捕获设备3102可以将数据分发给流服务器(图中未示出)，服务器对数据进行编码并将编码数据发送给终端设备3106。捕获设备3102包括但不限于摄像机、智能手机或平板电脑、计算机或笔记本电脑、视频会议系统、PDA、车载设备，或它们的任何组合等。例如，捕获设备3102可以包括如上所述的源设备12。当所述数据包括视频时，所述捕获设备3102中的视频编码器20实际上可以执行视频编码处理。当所述数据包括音频(即声音)时，所述捕获设备3102中包括的音频编码器实际上可以执行音频编码处理。对于一些实际场景，捕获设备3102通过将编码视频和音频数据复用在一起来进行分发。对于其它实用场景，例如在视频会议系统中，不复用编码音频数据和编码视频数据。捕获设备3102将编码音频数据和编码视频数据分别分发给终端设备3106。
在内容提供系统3100中，终端设备310接收并再现编码数据。终端设备3106可以是具有数据接收和恢复能力的设备，例如智能手机或平板电脑3108、计算机或笔记本电脑3110、网络录像机(network video recorder，NVR)/数字录像机(digital videorecorder，DVR)3112、TV 3114、机顶盒(set top box，STB)3116、视频会议系统3118、视频监控系统3120、个人数字助理(personal digital assistant，PDA)3122、车载设备3124或其任何组合，或者能够解码上述编码数据的设备。例如，终端设备3106可以包括如上所述的目的地设备14。当编码数据包括视频时，终端设备中包括的视频解码器30优先进行视频解码。当编码数据包括音频时，终端设备中包括的音频解码器优先进行音频解码处理。
对于带有显示器的终端设备，例如智能手机或平板电脑3108、计算机或笔记本电脑3110、网络录像机(network video recorder，NVR)/数字录像机(digital videorecorder，DVR)3112、TV 3114、个人数字助理(personal digital assistant，PDA)3122或车载设备3124，终端设备可以将解码数据馈送到该终端设备的显示器。对于没有显示器的终端设备(例如STB 3116、视频会议系统3118或视频监控系统3120)，连接外部显示器3126以接收并显示解码数据。
该系统中的每个设备在进行编码或解码时，可以使用如上述实施例中所示的图像编码设备或图像解码设备。
图10为终端设备3106的示例性结构图。在终端设备3106从捕获设备3102接收流之后，协议处理单元(protocol proceeding unit)3202分析流的传输协议。协议包括但不限于实时流协议(Real Time Streaming Protocol，RTSP)、超文本传输协议(Hyper TextTransfer Protocol，HTTP)、HTTP直播协议(HTTP Live streaming protocol，HLS)、MPEG-DASH、实时传输协议(Real-time Transport protocol，RTP)、实时消息协议(Real TimeMessaging Protocol，RTMP)或其任何组合等。
协议处理单元3202对流进行处理后，生成流文件。将文件输出到解复用单元3204。解复用单元3204可以将复用数据分为编码音频数据和编码视频数据。如上所述，对于一些实际场景，例如在视频会议系统中，不复用编码音频数据和编码视频数据。在这种情况下，将编码数据发送到视频解码器3206和音频解码器3208，无需经过解复用单元3204。
通过解复用处理，生成视频基本流(elementary stream，ES)、音频ES和可选的字幕。视频解码器3206包括如上述实施例中所说明的视频解码器30，通过如上述实施例中所示的解码方法对视频ES进行解码以生成视频帧，并将该数据馈送到同步单元3212。音频解码器3208，解码音频ES以生成音频帧，并将该数据馈送到同步单元3212。或者，所述视频帧在发送至同步单元3212之前可以存储在缓冲区中(图10中未示出)。类似地，所述音频帧在发送至同步单元3212之前可以存储在缓冲区中(图10中未示出)。
同步单元3212同步视频帧和音频帧，并(可选地，通过图形处理单元(graphicsprocessing unit，GPU))将视频/音频提供给视频/音频显示器3214。例如，同步单元3212同步视频信息和音频信息的呈现，同时确保解码器中的数据缓冲区不会上溢或下溢。可以使用与经译码的音频和可视数据的呈现相关的时间戳和与数据码流的分发相关的时间戳，将信息译码到语法中。时间戳通常以90kHz为单位，但系统时钟参考(system clockreference，SCR)、节目时钟参考(program clock reference，PCR)和可选的基本码流时钟参考(elementary stream clock reference，ESCR)可以扩展为频率27MHz。
如果流中包括字幕，则字幕解码器3210解码字幕，并使字幕与视频帧和音频帧同步，并(可选地，通过GPU)将视频/音频/字幕提供给视频/音频/字幕显示器3216。
本发明并不限于上述系统，上述实施例中的图像编码设备或图像解码设备都可以结合到其它系统，例如汽车系统。
Claims (29)
1.一种用于解码图像块的方法，其特征在于，包括：
获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
当所述指示参数表示所述当前编码块应用多假设预测时，根据平面模式解码所述当前编码块。
2.根据权利要求1所述的方法，其特征在于，所述多假设预测是帧间帧内联合预测(combined inter and intra prediction，CIIP)。
3.根据权利要求2所述的方法，其特征在于，所述指示参数是CIIP标志。
4.根据权利要求1至3中任一项所述的方法，其特征在于，合并数据语法携带所述指示参数。
5.根据权利要求1至4中任一项所述的方法，其特征在于，所述方法还包括：
根据最可能模式(most probable mode，MPM)列表获取所述当前编码块的平面模式，其中，所述MPM列表中的每个帧内预测模式都用对应的MPM列表索引值索引。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
从码流中解析出MPM列表索引，其中，所述MPM列表索引的值在0至N-1之间，N为所述MPM列表中的帧内预测模式的表项；
根据所述MPM列表索引的值，从所述MPM列表中获取所述当前编码块的帧内预测模式。
7.根据权利要求5或6所述的方法，其特征在于，所述MPM列表至少包括平面模式。
8.根据权利要求5或6所述的方法，其特征在于，所述MPM列表包括平面模式以及DC模式、垂直模式和水平模式中的至少一种。
9.根据权利要求5或6所述的方法，其特征在于，所述MPM列表由平面模式组成。
10.根据权利要求5至9中任一项所述的方法，其特征在于，所述MPM列表由预定义的默认列表构建。
11.根据权利要求6所述的方法，其特征在于，所述MPM列表索引被编码为十进制或二进制表示。
12.一种解码器，其特征在于，包括处理电路，用于执行根据权利要求1至11中任一项所述的方法。
13.一种解码器，包括：
存储器，所述存储器包括指令；
一个或多个处理器，与所述存储器通信，其中，所述一个或多个处理器执行所述指令以执行根据权利要求1至11中任一项所述的方法。
14.一种用于解码图像块的装置，所述装置包括：
确定单元，用于获取当前编码块的指示参数，其中，所述指示参数表示所述当前编码块是否应用多假设预测；
帧内预测处理单元，用于：当所述指示参数表示所述当前编码块应用多假设预测时，根据平面模式对所述当前编码块执行帧内预测。
15.根据权利要求14所述的装置，其特征在于，所述装置还包括解析单元，用于从视频信号的码流中解析多个语法元素；
所述确定单元还用于根据所述多个语法元素中的语法元素确定所述平面模式。
16.一种用于编码图像块的方法，包括：
获取当前块的指示参数，所述指示参数表示所述当前块是否应用多假设预测；
当所述指示参数表示所述当前块应用多假设预测时，根据平面模式编码所述当前块。
17.根据权利要求16所述的方法，其特征在于，所述多假设预测是帧间帧内联合预测(combined inter and intra prediction，CIIP)。
18.根据权利要求17所述的方法，其特征在于，所述指示参数是CIIP标志。
19.根据权利要求16至18中任一项所述的方法，其特征在于，合并数据语法携带所述指示参数。
20.根据权利要求16至19中任一项所述的方法，其特征在于，所述方法还包括：
根据最可能模式(most probable mode，MPM)列表获取所述当前编码块的平面模式，其中，所述MPM列表中的每个帧内预测模式都用对应的MPM列表索引值索引。
21.根据权利要求20所述的方法，其特征在于，所述MPM列表至少包括平面模式。
22.根据权利要求20所述的方法，其特征在于，所述MPM列表包括平面模式以及DC模式、垂直模式和水平模式中的至少一种。
23.根据权利要求20所述的方法，其特征在于，所述MPM列表由平面模式组成。
24.根据权利要求20至23所述的方法，其特征在于，所述MPM列表由预定义的默认列表构建。
25.根据权利要求20至24所述的方法，其特征在于，所述MPM列表索引被编码为十进制或二进制表示。
26.一种编码器，其特征在于，包括处理电路，用于执行根据权利要求16至25中任一项所述的方法。
27.一种编码器，包括：
存储器，所述存储器包括指令；
一个或多个处理器，与所述存储器通信，其中，所述一个或多个处理器执行所述指令以执行根据权利要求16至25中任一项所述的方法。
28.一种计算机程序产品，其特征在于，包括程序代码，用于在计算机或处理器中执行时，执行根据权利要求16至25所述的方法。
29.一种用于编码图像块的装置，其特征在于，所述装置包括：
确定单元，用于获取当前块的指示参数，所述指示参数表示所述当前块是否应用多假设预测；
帧内预测处理单元，用于：当所述指示参数表示所述当前块应用多假设预测时，根据平面模式编码所述当前块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311448728.6A CN117478915A (zh) | 2018-11-29 | 2019-11-29 | 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 |
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201862773149P | 2018-11-29 | 2018-11-29 | |
| US62/773,149 | 2018-11-29 | ||
| US201862783149P | 2018-12-20 | 2018-12-20 | |
| US62/783,149 | 2018-12-20 | ||
| PCT/CN2019/122153 WO2020108640A1 (en) | 2018-11-29 | 2019-11-29 | Encoder, decoder and corresponding methods of most probable mode list construction for blocks with multi-hypothesis prediction |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311448728.6A Division CN117478915A (zh) | 2018-11-29 | 2019-11-29 | 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113170202A true CN113170202A (zh) | 2021-07-23 |
| CN113170202B CN113170202B (zh) | 2023-11-10 |
Family
ID=70852648
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311448728.6A Pending CN117478915A (zh) | 2018-11-29 | 2019-11-29 | 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 |
| CN201980079104.7A Active CN113170202B (zh) | 2018-11-29 | 2019-11-29 | 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311448728.6A Pending CN117478915A (zh) | 2018-11-29 | 2019-11-29 | 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 |
Country Status (11)
| Country | Link |
|---|---|
| US (2) | US11876997B2 (zh) |
| JP (2) | JP7358473B2 (zh) |
| KR (1) | KR20210094056A (zh) |
| CN (2) | CN117478915A (zh) |
| AU (2) | AU2019386917B2 (zh) |
| BR (1) | BR112021010286A2 (zh) |
| CA (1) | CA3121409A1 (zh) |
| CL (1) | CL2021001408A1 (zh) |
| IL (1) | IL283571A (zh) |
| MX (1) | MX2021006390A (zh) |
| WO (1) | WO2020108640A1 (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020015706A1 (en) * | 2018-07-18 | 2020-01-23 | Mediatek Inc. | Method and apparatus of motion compensation bandwidth reduction for video coding system utilizing multi-hypothesis |
| WO2023280311A1 (en) * | 2021-07-08 | 2023-01-12 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
| WO2023177752A1 (en) * | 2022-03-15 | 2023-09-21 | Beijing Dajia Internet Information Technology Co., Ltd. | Methods and devices on probability calculation for context-based adaptive binary arithmetic coding |
| KR20230147901A (ko) * | 2022-04-15 | 2023-10-24 | 삼성전자주식회사 | 영상 부호화/복호화 방법 및 장치 |
| WO2024072194A1 (ko) * | 2022-09-29 | 2024-04-04 | 엘지전자 주식회사 | 영상 인코딩/디코딩 방법 및 장치, 그리고 비트스트림을 저장한 기록 매체 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1925619A (zh) * | 2005-08-30 | 2007-03-07 | 三星电子株式会社 | 视频编码和解码的装置和方法及其记录介质 |
| CN104584549A (zh) * | 2012-06-22 | 2015-04-29 | 诺基亚公司 | 用于视频编码的方法和装置 |
| CN107750455A (zh) * | 2015-06-18 | 2018-03-02 | 高通股份有限公司 | 帧内预测及帧内模式译码 |
| CN107771393A (zh) * | 2015-06-18 | 2018-03-06 | 高通股份有限公司 | 帧内预测及帧内模式译码 |
| CN107925759A (zh) * | 2015-06-05 | 2018-04-17 | 英迪股份有限公司 | 用于编码和解码帧内预测的方法和设备 |
| CN107925773A (zh) * | 2015-06-11 | 2018-04-17 | 英迪股份有限公司 | 使用自适应去块滤波编码和解码图像的方法及其装置 |
| CN108141604A (zh) * | 2015-06-05 | 2018-06-08 | 英迪股份有限公司 | 图像编码和解码方法和图像解码设备 |
| CN108702515A (zh) * | 2016-02-25 | 2018-10-23 | 联发科技股份有限公司 | 视频编解码的方法与装置 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8619857B2 (en) * | 2010-04-09 | 2013-12-31 | Sharp Laboratories Of America, Inc. | Methods and systems for intra prediction |
| US20130176390A1 (en) * | 2012-01-06 | 2013-07-11 | Qualcomm Incorporated | Multi-hypothesis disparity vector construction in 3d video coding with depth |
| US9635356B2 (en) | 2012-08-07 | 2017-04-25 | Qualcomm Incorporated | Multi-hypothesis motion compensation for scalable video coding and 3D video coding |
| EP3364656A1 (en) * | 2017-02-15 | 2018-08-22 | Thomson Licensing | Method for sample adaptive offset coding |
| EP3866468A4 (en) * | 2018-10-12 | 2022-07-27 | Wilus Institute of Standards and Technology Inc. | VIDEO SIGNAL PROCESSING METHOD AND APPARATUS USING MULTI-ASSUMPTION PREDICTION |
| CN112970250B (zh) * | 2018-11-12 | 2022-08-23 | 寰发股份有限公司 | 视频编码的多重假设方法和装置 |
| US10848763B2 (en) * | 2018-11-14 | 2020-11-24 | Tencent America LLC | Method and apparatus for improved context design for prediction mode and coded block flag (CBF) |
-
2019
- 2019-11-29 BR BR112021010286-8A patent/BR112021010286A2/pt unknown
- 2019-11-29 KR KR1020217020039A patent/KR20210094056A/ko not_active Application Discontinuation
- 2019-11-29 CA CA3121409A patent/CA3121409A1/en active Pending
- 2019-11-29 CN CN202311448728.6A patent/CN117478915A/zh active Pending
- 2019-11-29 JP JP2021531212A patent/JP7358473B2/ja active Active
- 2019-11-29 CN CN201980079104.7A patent/CN113170202B/zh active Active
- 2019-11-29 AU AU2019386917A patent/AU2019386917B2/en active Active
- 2019-11-29 WO PCT/CN2019/122153 patent/WO2020108640A1/en active Application Filing
- 2019-11-29 MX MX2021006390A patent/MX2021006390A/es unknown
-
2021
- 2021-05-28 US US17/333,351 patent/US11876997B2/en active Active
- 2021-05-28 CL CL2021001408A patent/CL2021001408A1/es unknown
- 2021-05-30 IL IL283571A patent/IL283571A/en unknown
-
2023
- 2023-09-26 JP JP2023163749A patent/JP2023174705A/ja active Pending
- 2023-10-25 US US18/494,045 patent/US20240056596A1/en active Pending
- 2023-10-26 AU AU2023254981A patent/AU2023254981A1/en active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1925619A (zh) * | 2005-08-30 | 2007-03-07 | 三星电子株式会社 | 视频编码和解码的装置和方法及其记录介质 |
| CN104584549A (zh) * | 2012-06-22 | 2015-04-29 | 诺基亚公司 | 用于视频编码的方法和装置 |
| CN107925759A (zh) * | 2015-06-05 | 2018-04-17 | 英迪股份有限公司 | 用于编码和解码帧内预测的方法和设备 |
| CN108141604A (zh) * | 2015-06-05 | 2018-06-08 | 英迪股份有限公司 | 图像编码和解码方法和图像解码设备 |
| CN107925773A (zh) * | 2015-06-11 | 2018-04-17 | 英迪股份有限公司 | 使用自适应去块滤波编码和解码图像的方法及其装置 |
| CN107750455A (zh) * | 2015-06-18 | 2018-03-02 | 高通股份有限公司 | 帧内预测及帧内模式译码 |
| CN107771393A (zh) * | 2015-06-18 | 2018-03-06 | 高通股份有限公司 | 帧内预测及帧内模式译码 |
| CN108702515A (zh) * | 2016-02-25 | 2018-10-23 | 联发科技股份有限公司 | 视频编解码的方法与装置 |
Non-Patent Citations (2)
| Title |
|---|
| CHIH-WEI HSU 等: "Description of Core Experiment 10: Combined and multi-hypothesis prediction", 《JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 * |
| CHIH-WEI HSU 等: "Description of Core Experiment 10: Combined and multi-hypothesis prediction", 《JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》, 3 November 2018 (2018-11-03), pages 1 - 12 * |
Also Published As
| Publication number | Publication date |
|---|---|
| AU2023254981A1 (en) | 2023-11-16 |
| WO2020108640A1 (en) | 2020-06-04 |
| EP3881551A1 (en) | 2021-09-22 |
| CN117478915A (zh) | 2024-01-30 |
| MX2021006390A (es) | 2021-09-10 |
| CL2021001408A1 (es) | 2021-11-05 |
| JP2023174705A (ja) | 2023-12-08 |
| AU2019386917A1 (en) | 2021-06-24 |
| CN113170202B (zh) | 2023-11-10 |
| US11876997B2 (en) | 2024-01-16 |
| JP7358473B2 (ja) | 2023-10-10 |
| KR20210094056A (ko) | 2021-07-28 |
| JP2022513174A (ja) | 2022-02-07 |
| US20210289222A1 (en) | 2021-09-16 |
| AU2019386917B2 (en) | 2023-07-27 |
| IL283571A (en) | 2021-07-29 |
| BR112021010286A2 (pt) | 2021-08-17 |
| US20240056596A1 (en) | 2024-02-15 |
| CA3121409A1 (en) | 2020-06-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113748677A (zh) | 编码器、解码器及对应的帧内预测方法 | |
| CN112673633B (zh) | 合并模式的编码器、解码器及对应方法 | |
| CN113170202B (zh) | 用于构建应用多假设预测的块的mpm列表的编码器、解码器及相应方法 | |
| CN114449265B (zh) | 用于帧内平滑的方法和装置 | |
| CN113924780A (zh) | 用于色度子块的仿射帧间预测的方法及装置 | |
| CN113508592A (zh) | 编码器、解码器及相应的帧间预测方法 | |
| JP2023090864A (ja) | エンコーダ、デコーダ、及びデブロッキングフィルタの境界強度導出の対応する方法 | |
| CN113545063A (zh) | 使用线性模型进行帧内预测的方法及装置 | |
| KR20210151248A (ko) | 적응 루프 필터를 사용하는 인코더, 디코더 및 대응하는 방법들 | |
| CN113796078A (zh) | 帧内预测模式相关的编码器、解码器及对应方法 | |
| CN113597761A (zh) | 帧内预测方法和装置 | |
| CN115039406A (zh) | 编码器、解码器和用于在序列参数集中指示子图像的对应方法 | |
| CN113660489A (zh) | 用于帧内子划分译码模式的方法和装置 | |
| CN113473134A (zh) | 子块融合候选的单独融合列表和视频编码的帧内和帧间预测技术协调 | |
| CN115665407B (zh) | 用于帧内预测的分量间线性建模方法和装置 | |
| CN113348665A (zh) | 编码器、解码器及色度帧内模式推导的对应方法 | |
| CN113170118A (zh) | 视频译码中进行色度帧内预测的方法及装置 | |
| CN114007068B (zh) | 编码器、解码器及其实现的对当前块进行预测译码的方法 | |
| CN113891084B (zh) | 帧内预测模式相关的编码器、解码器、对应方法及计算机可读介质 | |
| CN114900702B (zh) | 降低平面模式的帧内预测的复杂度的编解码器和对应方法 | |
| CN114830652A (zh) | 用于方向性帧内预测的参考样本插值滤波的方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |