CN106416243A - 利用基于帧内图像区块复制预测的视频编码方法 - Google Patents
利用基于帧内图像区块复制预测的视频编码方法 Download PDFInfo
- Publication number
- CN106416243A CN106416243A CN201580005168.4A CN201580005168A CN106416243A CN 106416243 A CN106416243 A CN 106416243A CN 201580005168 A CN201580005168 A CN 201580005168A CN 106416243 A CN106416243 A CN 106416243A
- Authority
- CN
- China
- Prior art keywords
- block
- frame
- motion vector
- reference picture
- mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 239000013598 vector Substances 0.000 claims abstract description 161
- 230000010076 replication Effects 0.000 claims description 38
- 241000208340 Araliaceae Species 0.000 claims description 3
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims description 3
- 235000003140 Panax quinquefolius Nutrition 0.000 claims description 3
- 230000006978 adaptation Effects 0.000 claims description 3
- 235000008434 ginseng Nutrition 0.000 claims description 3
- 230000003362 replicative effect Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- VBRBNWWNRIMAII-WYMLVPIESA-N 3-[(e)-5-(4-ethylphenoxy)-3-methylpent-3-enyl]-2,2-dimethyloxirane Chemical compound C1=CC(CC)=CC=C1OC\C=C(/C)CCC1C(C)(C)O1 VBRBNWWNRIMAII-WYMLVPIESA-N 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000004148 unit process Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000005194 fractionation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供一种包括帧内区块复制模式的视频编码方法。在一个实施方式中,参考图像列表包括对应于当前和部分已重建图像的帧内区块复制参考图像。若帧内区块复制模式被选择以用于当前编码单元,当前编码单元利用基于自参考图像列表选择的帧内区块复制图像得到的帧内区块复制预测子而被编码。在当前编码单元被编码之后,已重建的区块被产生并被使用以用于更新帧内区块复制参考图像。在另一实施方式中,基于相邻区块的运动向量,运动向量预测子或合并/跳过候选被确定。基于运动向量预测子或合并/跳过候选,与帧内区块复制模式相关的当前运动向量被编码。
Description
交叉引用
本发明主张在2014年2月21日提出的申请号为61/942,819的美国临时专利申请的优先权;主张在2014年3月17日提出的申请号为61/954,181的美国临时专利申请的优先权。因此在全文中合并参考该些专利申请案。
技术领域
本发明是有关于利用帧内区块复制(Intra-block copy,IntraBC)模式的视频编码,特别是有关于用于屏幕内容编码或视频编码的帧内区块复制编码模式的相关改善性能或简化过程的技术。
背景技术
高效视频编码(High Efficiency Video Coding,以下简称为HEVC)是近年来开发的新的编码标准。在HEVC系统中,H.264/AVC中固定尺寸的宏块由灵活的区块来代替,并将其命名为编码单元(coding unit,CU)。在编码单元中像素共享相同的编码参数,以改善编码效率。编码单元可开始于最大编码单元(largestCU,LCU),其在HEVC中也被称为编码树单元。除编码单元的概念之外,预测单元的概念也被引入HEVC中。一旦编码单元分层树的分割完成,根据预测类型和预测单元分割,每一个叶编码单元被进一步分割为一个或多个预测单元。
在高效率视频编码(HEVC)标准的屏幕内容编码或扩展版本(rangeextension,RExt)的当前发展中,已采用一些工具,这些工具能够改善用于屏幕内容的编码效率。对于帧内区块,根据现有技术的帧内预测基于自相邻区块的已重建像素利用预测而执行。帧内预测可自帧内模式的集合中选择帧内模式,帧内模式的集合包括垂直模式、水平模式和各种角度预测模式。对于HEVC范围扩展和屏幕内容编码来说,已使用新的帧内编码模式,也称为帧内区块复制。帧内区块复制技术最初由Budagavi在AHG8中提出(Video coding using Intramotion compensation,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-TSG 16WP 3and ISO/IEC JTC 1/SC 29/WG 11,13th Meeting:Incheon,KR,18–26Apr.2013,Document:JCTVC-M0350(在下文中记做JCTVC-M0350))。根据JCTVC-M0350的示例如图1所示,其中当前编码单元(CU,110)利用帧内运动补偿(Intra motion compensation,Intra MC)而编码。预测区块(120)自当前编码单元和位移向量(112)而定位。在此示例中,搜索区块被限制为当前编码树单元、左侧编码树单元、左侧的第二个编码树单元。预测区块自已重建区域而得到。然后,位移向量,也称为运动向量(motion vector,MV),和用于当前编码单元的残差被编码。已知HEVC采用编码树单元和编码单元区块结构作为用于编码视频数据的基本单元。每一个图片被分割为多个编码树单元,以及每一个编码树单元被分割为多个编码单元。在预测期间,每一个编码单元可被分割为多个区块,该多个区块被称为预测单元,以用于执行预测处理。在预测残差形成而用于每一个编码单元之后,与每一个编码单元相关的残差被分割为多个区块,称为变换单元,以应用变换(例如离散余弦变换(discrete cosine transform,DCT))。
在JCTVC-M0350中,至少在如下方面,帧内运动补偿不同于用于帧间预测的运动补偿。
·运动向量被限制为1维(即水平或垂直)以用于帧内运动补偿,而帧间预测使用2维运动估计。
·二值化(Binarization)为固定长度以用于帧内运动补偿,而帧间预测使用指数哥伦布(exponential-Golomb)。
·帧内运动补偿引入新的语法元素以发信号指示运动向量为水平还是垂直。
基于JCTVC-M0350,Pang等在Non-RCE3中做了一些修改(Intra MotionCompensation with 2-D MVs,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16WP 3and ISO/IEC JTC 1/SC 29/WG 11,14th Meeting:Vienna,AT,25July–2Aug.2013,Document:JCTVC-N0256(在下文中记做JCTVC-N0256))。首先,帧内运动补偿被扩展以支持2维运动向量,以使得运动向量组分可以同时为0。对于帧内运动补偿来说,这将比原来的方式提供更大的灵活性,其中原来的方式中运动向量被限制为严格地水平或垂直。
在JCTVC-N0256中,揭示两种运动向量编码方法:
·方法1-运动向量预测。左侧或上方的运动向量被选择作为运动向量预测子,以及结果运动向量差值(motion vector difference,MVD)被编码。一个标志用于指示运动向量差值是否为0。当运动向量差值不为0,则指数哥伦布编码的第三位指数被使用以编码运动向量差值的剩余绝对水平。另一个标志被使用以编码这个迹象。
·方法2:无运动向量预测。使用用于HEVC中的运动向量差值的指数哥伦布码,编码运动向量。
在JCTVC-N0256中揭示的其他差异是,2维帧内运动补偿被进一步与管线(pipeline)友好的方式结合:
1.不使用插值滤波器,
2.运动向量搜索区域被限制。分两种情况进行讨论:
a搜索区域为当前编码树单元和左侧编码树单元或者
b搜索区域为当前编码树单元和左侧编码树单元的最右边4列采样。
在JCTVC-N0256中提出的各种方法之间,2维帧内运动补偿,移除插值滤波器、以及搜索区域被限制为当前编码树单元和左侧编码树单元,已在新版本标准草案中被采用。对应于JCTVC-N0256的编码单元级语法已包含于高效视频编码范围扩展文本规范:草案4(RExt Draft 4)中(Flynn,et al.,Joint CollaborativeTeam on Video Coding(JCT-VC)of ITU-T SG 16WP 3and ISO/IEC JTC 1/SC29/WG 11,14th Meeting:Vienna,AT,25July–2Aug.2013,Document:JCTVC-N1005)。
需要进一步改善帧内区块复制模式的性能。此外,需要维持在现有的HEVC标准的相同框架中的任意新的开发。
发明内容
本发明揭示了一种包括帧内区块复制模式的视频编码方法。在一个实施方式中,参考图像列表包括对应于当前图像的帧内区块复制参考图像。在编码或重建顺序中先于当前区块的(例如,编码单元或编码区块)的此图像一部分被填充了已重建像素,而在编码或重建顺序中在当前区块之后的此图像的其他部分在一个实施方式中为空,或通常填充其他值。若帧内区块复制模式被选择以用于当前编码单元,则基于自参考图像列选择的帧内区块复制参考图像得到的帧内区块复制预测子,当前编码单元被编码或被解码。参考图像列表包括帧内区块复制参考图像,也可包括对应于一个或多个先前已重建的帧内编码的图像的一个或多个帧内参考图像。有可能参考列表仅包括帧内区块复制参考图像。在编码或解码应用于当前编码单元之后,第一已重建当前区块被产生并被用于更新帧内区块复制参考图像。参考图像列表可对应于参考图像列表l0或参考图像列表l1。此外,当当前帧内预测模式被选择以用于当前编码单元时,利用基于自参考图像列表选择的至少一个帧间参考图像得到的帧内预测子,当前编码单元被编码或被解码。在编码或解码被用于当前编码单元之后,第二已重建当前区块被产生并被使用以用于更新帧内区块复制参考图像。
通过代替一个存在的帧内参考图像或作为新的参考图像包括于参考图像列表中,帧内区块复制参考图像可包括于参考图像列表中。帧内区块复制参考图像可被放置于参考图像列表中最后的参考图像处或选择的位置中。选择的位置在序列级、图像级、或条带级被发送,或选择的位置被推断。当帧内区块复制参考图像被包括于该参考图像列表中作为新的参考图像时,帧内区块复制参考图像被初始化为空图像。当帧内区块复制参考图像通过代替一个存在的帧间参考图像而包括于该参考图像列表中时,该帧内区块复制参考图像被初始化为该个存在的帧间参考图像。在第一已重建的当前区块被用于更新帧内区块复制参考图像之前,该第一已重建的当前区块利用滤波器而被滤波,例如样本自适应偏移。
在另一实施方式中,揭示了一种用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法。若当前预测单元为帧内区块复制模式,则基于与该当前区块的一个或多个第一相邻区块相关的一个或多个第一运动向量,确定第一运动向量预测子,或基于与该当前区块的一个或多个第二相邻区块相关的一个或多个第二运动向量,确定一个或多个第一合并/跳过候选。基于该第一运动向量预测子或该一个或多个第一合并/跳过候选,编码或解码与该帧内区块复制模式相关的当前运动向量。
在一个示例中,仅当一个相邻区块被编码于帧内区块复制模式时,与该个相邻区块相关的运动向量被视为有效的第一运动向量预测子候选或有效的第一合并/跳过候选。在另一示例中,仅当一个相邻区块被编码于该帧间模式时,与该个相邻区块相关的该运动向量被视为有效的第二运动向量预测子候选或有效的第二合并/跳过候选。可选地,当一个相邻区块被编码于帧间模式时,与该个相邻区块相关的运动向量被视为有效的第二运动向量预测子候选或有效的第二合并/跳过候选。相似地,当一个相邻区块被编码于帧内区块复制模式时,与该个相邻区块相关的运动向量为有效的第一运动向量预测子候选或有效的第一合并/跳过候选。
当前区块的相邻区块包括五个空间相邻区块、该五个空间相邻区块包括右上区块、右对齐顶部区块、左上区块、左下区块以及下对齐左侧区块。一个或多个第一合并/跳过候选对应于当前帧内区块复制运动向量预测子,一个最后编码的帧内区块复制运动向量,或当前区块的左侧相邻区块或上方相邻区块的该运动向量。第一运动向量预测子或一个或多个第一合并/跳过候选被限制为整数。
附图说明
图1描述了根据帧内区块复制模式的帧内运动补偿的示例,其中使用水平位移向量。
图2描述了得到用于帧内区块复制模式的运动向量预测子的相邻区块配置的示例。
图3描述了包括本发明实施方式的示范性编码系统的流程图,其中参考图片列表包括帧内区块复制参考图像。
图4描述了包括本发明实施方式的示范性编码系统的流程图,其中运动向量预测子或一个或多个合并/跳过候选用于在帧内区块复制模式中编码的当前区块的运动向量。
具体实施方式
在上述提到的当前帧内图像区块复制技术中,对于帧内和帧间预测来说,帧内区块复制是不同的、附加的模式。对于已被用于HEVC编码系统的帧内和帧间预测子来说,帧内区块复制预测子为附加的预测子。此外,区块匹配搜索需要确定帧内区块复制的“区块向量”,其对应于需要得到用于帧间预测的运动向量的运动搜索的附加的计算。在本发明中,揭示了一种帧内图像区块复制(即,帧内区块复制)技术的方法,将其与帧间区块预测相匹配(align),以使得不需要对现有的HEVC的编解码器的主要配置文件的做出区块级改变,而有可能实现帧内区块复制。
帧内区块复制预测单元的表示和发送。在本发明中,“帧内区块复制参考图像”(在下文中被称为ibc_ref_pic)被以与帧间参考图像相同的方式来对待。在当前HEVC中,存在帧间预测的两个参考列表,即,对应于列表0和列表1的参考列表l0和参考列表l1。举例来说,ibc_ref_pic可被插入两个参考列表(参考列表l0或参考列表l1)中的一个,作为帧间参考图像的附加的参考图像。若仅存在一个参考列表,则ibc_ref_pic被插入至此参考列表中。在另一实施方式中,ibc_ref_pic被插入至参考列表l0和参考列表l1中,作为帧间参考图像的附加的参考图像。ibc_ref_pic可被放置于参考列表中最后的位置中,即,在最后帧间参考图像之后。然而,ibc_ref_pic也可被插入至参考列表并被放置于特定的位置。此位置可在条带、图像、或序列级中被明确地发送;或此位置可被推断。
在另一实施方式中,ibc_ref_pic被放入参考列表(若存在两个参考列表的话,则l0或l1中),以代替存在的帧间参考图像中的一个。举例来说,ibc_ref_pic可被放入参考列表中,以代替最后帧间参考图像。在另一示例中,ibc_ref_pic被插入至参考列表中,以在特定位置中代替一个帧间参考图像。此位置可在条带、图像、或序列级中被明确地发送;或此位置可被推断。
根据另一实施方式,帧内区块复制预测单元处理可与HEVC帧间预测单元处理相匹配(align),包括运动向量的表示和编码、发送等。换句话说,除来自“帧内区块复制参考图像”的预测子代替“帧间参考图像”的预测子之外,帧内区块复制的已编码区块(即,预测单元)以与帧间已预测的区块(即,预测单元)同样的方式而被处理。此外,帧内区块复制处理可被使能或禁能于预测单元级。换句话说,各种类型的预测单元,例如,帧内区块复制预测单元、帧间预测单元、以及帧内预测单元可在同一编码单元中存在。
帧内区块复制参考图像的结构。若ibc_ref_pic被添加或被插入至参考列表,作为帧间参考图像的一种附加,以及对应的参考图像可被初始化为空(NULL)图像。通过编解码(编码或解码)处理,空参考图像被逐渐地由当前已编码的图像的已重建像素填满,当前已编码的图像为帧内区块复制参考图像。像素值逐区块地被更新,以及区块尺寸依赖于实现的平台,例如,4x4,8x8,编码单元或最大编码单元。在编码器侧,此参考图像的运动向量(或区块向量)的搜索范围可被限制于利用有效已重建像素值更新的区域。
若ibc_ref_pic被插入至参考列表作为一个帧间参考图像的替代,首先,ibc_ref_pic等于现有的帧间参考图像。通过编解码(编码或解码)处理,此帧间参考图像的像素值逐渐地由当前的已编码图像的已重建像素来代替。像素值逐区块地被更新,以及区块尺寸依赖于实现的平台,例如,4x4,8x8,编码单元或最大编码单元。在编码器侧,此参考图像的搜索范围可被限制于利用新的已重建像素值更新的区域。然而,在编码器侧,此参考图像的搜索区块可与其他普通的帧间参考图片相同。
利用AMVP的帧内区块复制的向量预测。在另一实施方式中,在HEVC中使用的先进的运动向量预测(advanced motion vector prediction,AMVP)方法被用于预测帧内区块复制预测单元的区块向量。用于帧内区块复制的区块的区块向量与帧间已编码区块的运动向量的处理相似。相应地,在本申请中,术语“运动向量”也可被称为“区块向量”。与在HEVC中用于运动向量预测的五个空间先进的运动向量预测相同的五个相邻候选的位置,可被用于区块向量(如图2所示)。然而,其他相邻区块配置也可被用于区块向量预测。在一个实施方式中,对于在帧内区块复制模式中已编码的当前区块,只有在相邻区块被编码于帧内区块复制模式时,相邻区块的运动向量(区块向量)可被视为有效的候选运动向量(区块向量)预测子。相似地,对于在帧间模式中编码的当前区块,只有当相邻区块被编码于帧间模式时,相邻区块的运动向量可被视为有效的候选运动向量预测子。
在以上示例中,只有当如当前区块一样相邻区块被编码于相同的预测模式(即,帧间或帧内区块复制模式)时,与相邻区块相关的运动向量可被视为有效。然而,帧间已编码的相邻预测单元的运动向量也可被视为有效的运动向量预测子以用于当前帧内区块复制预测单元。相似地,帧内区块复制已编码的相邻预测单元的运动向量也可被视为有效的运动向量预测子以用于当前帧间预测单元。自帧内区块复制已编码的预测单元至当前帧间预测单元的运动向量的预测、或自帧间已编码的预测单元至当前帧内区块复制预测单元的预测可为直接地预测、或在适当修改之后预测,例如移位。在一个实施方式中,当帧内区块复制已编码的预测单元的运动向量被用作帧间预测单元的预测子时,帧内区块复制已编码的预测单元的运动向量需要被左移两位;当帧间已编码的预测单元的运动向量被用作帧内区块复制预测单元的预测子时,帧间已编码的预测单元的运动向量需要被右移两位。
帧内区块复制预测单元的合并/跳过模式。在此实施方式中,在HEVC中使用的合并/跳过模式被应用以编码在帧内区块复制模式中编码的预测单元。当在合并模式或跳过模式中被编码时,当前运动向量与合并或跳过候选中的一个相同。选择的合并/跳过候选通过明确地发送或推断而被识别。当区块编码于合并模式时,预测残差被传送。当区块编码于跳过模式时,预测残差不被传送。合并/跳过相邻候选可与在HEVC合并/跳过模式中使用的相邻候选相同。合并/跳过相邻候选也可与在HEVC合并/跳过模式中使用的相邻候选不相同。举例来说,合并/跳过相邻候选可对应于当前帧内区块复制运动向量预测子、一个或多个最后编码的帧内区块复制运动向量、或自顶部或左侧预测单元的运动向量。
对于利用帧内区块复制模式编码的区块的合并/跳过模式中的运动向量候选的资格来说,用于帧内区块复制的区块向量使用相似的考虑。在一个实施方式中,对于在帧内区块复制模式中编码的当前区块(即,预测单元)来说,仅当在帧内区块复制模式中编码相邻区块时,相邻区块的运动向量(区块向量)可被视为合并/跳过模式的有效候选。相似地,对于在帧间模式中编码的当前区块来说,仅当在帧间模式中编码相邻区块时,相邻区块的运动向量可被视为合并/跳过模式的有效候选。
在合并/跳过候选推导的上述示例中,仅当如当前区块一样相邻区块在相同的预测模式(即,帧间或帧内区块复制模式)中被编码时,与相邻区块相关的运动向量被视为有效。然而,帧间已编码的相邻预测单元的运动向量也可被视为有效的运动向量预测子以用于当前帧内区块复制预测单元。相似地,帧间区块复制已编码的相邻区块预测单元的运动向量也可被视为有效的运动向量预测子以用于当前帧间预测单元。
帧内区块复制的区块的运动(区块)向量的表示。在HEVC标准中采用的帧内区块复制技术仅允许整数的区块向量。在本发明中,ibc_ref_pic以与帧间参考图像相同的方式来对待。相应地,区块向量的表示和编码机制可与在帧间预测中的运动向量的表示和编码机制相同。如此一来,子像素区块向量以与子像素运动向量相同的方式而被允许、处理、和发送。插值滤波器和其他滤波器(例如,样本自适应偏移)可被应用于在ibc_ref_pic中的帧间区域和帧内区域中。
在又一实施方式中,ibc_ref_pic的帧内区域可被限制为仅允许整数的区块向量。同时,应用于帧间预测的插值滤波和其他滤波不应用于ibc_ref_pic的帧内区域。
在一个实施方式中,ibc_ref_picture的帧内和帧间区域的分离不被发送。反而,ibc_ref_picture的帧内和帧间区域的分离通过当前被预测或被编码的区块的位置来推断。在此实施方式中,以编码顺序在当前区块之前的所有区块或区域被视为帧内区域,以编码顺序在当前区块之后的所有区块或区域被视为帧间区域。
在各种系统配置下(即,所有帧内(All Intra)、随机存取(Random Access)、以及低延迟B图像(Low Delay B Picture)),根据本发明实施方式的包括帧内区块复制预测模式的视频编码系统的性能与现有的系统的性能进行比较,如表1和表2所示。现有的系统对应于基于HEVC屏幕内容编码测试模型2(SCM 2)的系统。表1中包括本发明实施方式的系统对应于利用参考图像列表的、对帧内区块复制已编码区块应用先进的运动向量预测、运动向量差值、合并/跳过模式的系统,参考图像列表包括帧内区块复制参考图像。表2中包括本发明实施方式的系统对应于利用参考图像列表的、对帧内区块复制已编码区块应用区块向量预测子(block vector predictor,BVP)、区块向量差值(block vector difference,BVD)、合并/跳过模式的系统,参考图像列表包括帧内区块复制参考图像。其中,区块向量预测子和区块向量差值不同于先进的运动向量预测和运动向量差值。区块向量预测子和区块向量差值被指定用于帧内区块复制已编码预测单元。性能比较是基于如第一列所示的测试数据做出的。BD率中的负值意味着本发明具有更佳的性能。如表1所示,本发明可高达6.8%。如表2所示,本发明可高达5.2%。
表1
表2
图3描述了包括本发明实施方式的示范性编码系统的流程图,其中,参考图像列表包括帧内区块复制参考图像。如步骤310所示,在当前图像中,系统接收与当前预测单元相关的输入数据。对于编码端来说,输入数据对应于将被编码的像素数据。对于解码端来说,输入数据对应于将被解码的已编码像素数据。自存储器(例如,计算机存储器、缓冲器(RAM或DRAM)、或其他媒体)或自处理器提取输入数据。如步骤320所示,检查帧内区块复制模式是否被选择用于当前预测单元。若结果为“是”,则执行步骤330、340、和350。若结果为“否”,则跳过步骤330、340、和350。在步骤330中,利用基于自参考图像列表选择的帧内区块复制参考图像得到的帧内区块复制预测子,当前预测单元被编码或解码。参考图像列表包括帧内区块复制参考图像和零个、一个或多个帧间参考图像,帧内区块复制参考图像包括一个或多个先前已重建的帧内区块复制的区块以及零个、一个或多个帧间参考图像对应于零个、一个或多个先前已重建的帧间已编码图像。在步骤340中,在编码或解码当前预测单元之后,第一已重建的当前区块被产生。在步骤350中,根据第一已重建的当前区块,帧内区块复制参考图像被更新。
图4描述了包括本发明实施方式的示范性编码系统的流程图,其中用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选被编码于帧内区块复制模式中。在步骤410中,用于当前区块的当前预测模式被确定。在步骤420中,与当前区块的相邻区块相关的运动向量被接收。在步骤430中,检查帧内区块复制模式是否被选择以用于当前编码单元。若结果为“是”,则执行步骤440、和450。若结果为“否”,则跳过步骤440、和450。在步骤440中,基于与当前区块的一个或多个第一相邻区块相关的一个或多个第一运动向量,确定第一运动向量预测子,或基于与当前区块的一个或多个第二相邻区块相关的一个或多个第二运动向量,确定一个或多个第一合并/跳过候选。在步骤450中,基于第一运动向量预测子或一个或多个第一合并/跳过候选,与帧内区块复制模式相关的当前运动向量被编码或被解码。
上述的流程图用于描述根据本发明实施方式的帧内区块复制编码的示例。本领域技术人员可在不脱离本发明精神的前提下,修改、重排列、拆分、或组合各个步骤,以实现本发明。在本申请中,具体的语法和语义已被用来说明实施方式。本领域技术人员可以用等效的语法和语义在不脱离本发明的精神的前提下而代替本申请中提到的语法和语义来实现本发明。
在提供特定应用和其需求的情况下,以上描述使得本领域技术人员能够实现本发明。对本领域技术人员来说,各种修饰是清楚的,以及在此定义的基本原理可以应用与其他实施方式。因此,本发明并不限于描述的特定实施方式,而应与在此公开的原则和新颖性特征相一致的最广范围相符合。在上述详细描述中,为全面理解本发明,描述了各种特定细节。然而,本领域技术人员能够理解本发明可以实现。
以上描述的本发明的实施方式可在各种硬件、软件编码或两者组合中进行实施。例如,本发明的实施方式可为集成入视频压缩芯片的电路或集成入视频压缩软件以执行上述过程的程序代码。本发明的实施方式也可为在数据信号处理器(Digital Signal Processor,DSP)中执行上述程序的程序代码。本发明也可涉及计算机处理器、数字信号处理器、微处理器或现场可编程门阵列(FieldProgrammable Gate Array,FPGA)执行的多种功能。可根据本发明配置上述处理器执行特定任务,其通过执行定义了本发明揭示的特定方法的机器可读软件代码或固件代码来完成。可将软件代码或固件代码发展为不同的程序语言与不同的格式或形式。也可为了不同的目标平台编译软件代码。然而,根据本发明执行任务的软件代码与其他类型配置代码的不同代码样式、类型与语言不脱离本发明的精神与范围。
在不脱离本发明精神或本质特征的情况下,可以其他特定形式实施本发明。描述示例被认为仅在所有方面进行说明并且不是限制性的。因此,本发明的范围由权利要求书指示,而非前面描述。所有在权利要求等同的方法与范围中的变化都属于本发明的涵盖范围。
Claims (20)
1.一种用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,该图像被分割为多个编码单元,该方法包括:
在当前图像中接收与当前预测单元相关的输入数据;
若帧内区块复制模式被选择以用于该当前预测单元;
利用基于自参考图像列表选择的帧内区块复制参考图像得到的帧内区块复制预测子,编码或解码该当前预测单元,其中该参考图像列表包括该帧内区块复制参考图像和零个、一个或多个帧间参考图像,该帧内区块复制参考图像包括一个或多个先前已重建的帧内区块复制的区块,该零个、一个或多个帧间参考图像对应于零个、一个或多个先前已重建的帧间已编码的图像;
在编码或解码该当前预测单元之后,产生第一已重建的当前区块;以及
根据该第一已重建的当前区块,更新该帧内区块复制参考图像。
2.根据权利要求1所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,通过代替一个存在的帧间参考图像,该帧内区块复制参考图像被包括于该参考图像列表中;或该帧内区块复制参考图像被包括于该参考图像列表中作为新的参考图像。
3.根据权利要求2所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,当该帧内区块复制参考图像被放置于该参考图像列表中的最后参考图像处,或选择的位置中。
4.根据权利要求3所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,该选择的位置在序列级、图像级、或条带级被发送,或该选择的位置被推断。
5.根据权利要求2所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,当该帧内区块复制参考图像被包括于该参考图像列表中作为新的参考图像时,该帧内区块复制参考图像被初始化为空图像。
6.根据权利要求2所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,当该帧内区块复制参考图像通过代替一个存在的帧间参考图像而包括于该参考图像列表中时,该帧内区块复制参考图像被初始化为该个存在的帧间参考图像。
7.根据权利要求1所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,该参考图像列表对应于参考图像列表l0或参考图像列表l1。
8.根据权利要求1所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,在该第一已重建的当前区块被用于更新该帧内区块复制参考图像之前,该第一已重建的当前区块利用滤波器而被滤波。
9.根据权利要求8所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,该滤波器对应于样本自适应偏移。
10.根据权利要求1所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,基于该帧内区块复制参考图像,利用子像素精度的运动向量,该帧内区块复制预测子被得到。
11.根据权利要求1所述的用于图像的包括帧内区块复制模式和帧间预测模式的编码模式的发送方法,其特征在于,若该帧间预测模式被选择以用于该当前预测单元,则进一步包括:
利用基于自该参考图像列表选择的至少一个帧间参考图像得到的帧间预测子,编码或解码该当前预测单元;
在该编码或解码该当前预测单元之后,产生第二已重建当前区块;以及
根据该第二已重建当前区块,更新该一个或多个帧间参考图像。
12.一种用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,该方法包括:
确定用于该当前区块的当前预测模式,其中该当前预测模式选自包括帧间模式和帧内区块复制模式的组;
接收与该当前区块的相邻区块相关的运动向量;
若该当前预测模式为该帧内区块复制模式:
则基于与该当前区块的一个或多个第一相邻区块相关的一个或多个第一运动向量,确定第一运动向量预测子;或基于与该当前区块的一个或多个第二相邻区块相关的一个或多个第二运动向量,确定一个或多个第一合并/跳过候选;以及
基于该第一运动向量预测子或该一个或多个第一合并/跳过候选,编码或解码与该帧内区块复制模式相关的当前运动向量。
13.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,
仅当一个相邻区块被编码于该帧内区块复制模式时,与该个相邻区块相关的该运动向量为有效的第一运动向量预测子候选或有效的第一合并/跳过候选。
14.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,
仅当一个相邻区块被编码于该帧间模式时,与该个相邻区块相关的该运动向量为有效的第二运动向量预测子候选或有效的第二合并/跳过候选。
15.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,
当一个相邻区块被编码于该帧间模式时,与该个相邻区块相关的该运动向量为有效的第二运动向量预测子候选或有效的第二合并/跳过候选。
16.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,
当一个相邻区块被编码于该帧内区块复制模式时,与该个相邻区块相关的该运动向量为有效的第一运动向量预测子候选或有效的第一合并/跳过候选。
17.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,
该当前区块的该相邻区块包括五个空间相邻区块、该五个空间相邻区块包括右上区块、右对齐顶部区块、左上区块、左下区块以及下对齐左侧区块。
18.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,该一个或多个第一合并/跳过候选对应于当前帧内区块复制运动向量预测子,一个或多个最后编码的帧内区块复制运动向量,或该当前区块的左侧相邻区块或上方相邻区块的该运动向量。
19.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,该第一运动向量预测子或该一个或多个第一合并/跳过候选被限制为整数。
20.根据权利要求12所述的用于当前区块的运动向量的运动向量预测子或一个或多个合并/跳过候选的获取方法,其特征在于,若该当前预测模式为该帧间模式,则
基于与该当前区块的第三相邻区块相关的第三运动向量,确定第二运动向量预测子或一个或多个第二合并/跳过候选;以及
基于该第二运动向量预测子或该一个或多个第二合并/跳过候选,编码或解码于该帧间模式相关的当前运动向量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910202687.XA CN109889850A (zh) | 2014-02-21 | 2015-02-17 | 视频编解码方法 |
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201461942819P | 2014-02-21 | 2014-02-21 | |
US61/942,819 | 2014-02-21 | ||
US201461954181P | 2014-03-17 | 2014-03-17 | |
US61/954,181 | 2014-03-17 | ||
PCT/CN2015/073225 WO2015124110A1 (en) | 2014-02-21 | 2015-02-17 | Method of video coding using prediction based on intra picture block copy |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910202687.XA Division CN109889850A (zh) | 2014-02-21 | 2015-02-17 | 视频编解码方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106416243A true CN106416243A (zh) | 2017-02-15 |
CN106416243B CN106416243B (zh) | 2019-05-03 |
Family
ID=53877643
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580005168.4A Active CN106416243B (zh) | 2014-02-21 | 2015-02-17 | 利用基于帧内图像区块复制预测的视频编码方法 |
CN201910202687.XA Pending CN109889850A (zh) | 2014-02-21 | 2015-02-17 | 视频编解码方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910202687.XA Pending CN109889850A (zh) | 2014-02-21 | 2015-02-17 | 视频编解码方法 |
Country Status (5)
Country | Link |
---|---|
US (2) | US10555001B2 (zh) |
EP (1) | EP3078192B1 (zh) |
KR (1) | KR101908205B1 (zh) |
CN (2) | CN106416243B (zh) |
WO (1) | WO2015124110A1 (zh) |
Cited By (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107105240A (zh) * | 2017-03-22 | 2017-08-29 | 中南大学 | 一种hevc‑scc复杂度控制方法及其系统 |
CN108924551A (zh) * | 2018-08-29 | 2018-11-30 | 腾讯科技(深圳)有限公司 | 视频图像编码模式的预测方法及相关设备 |
CN109413420A (zh) * | 2018-10-26 | 2019-03-01 | 西安科锐盛创新科技有限公司 | 带宽压缩中复杂纹理的双模式选择预测方法 |
CN109743576A (zh) * | 2018-12-28 | 2019-05-10 | 杭州海康威视数字技术股份有限公司 | 编码方法、解码方法及装置 |
CN110072111A (zh) * | 2018-01-23 | 2019-07-30 | 富士通株式会社 | 用于视频图像编码和视频图像解码的装置和方法 |
CN111225205A (zh) * | 2018-11-27 | 2020-06-02 | 半导体元件工业有限责任公司 | 用于执行区块内预测的方法和装置 |
WO2020135465A1 (en) * | 2018-12-28 | 2020-07-02 | Beijing Bytedance Network Technology Co., Ltd. | Modified history based motion prediction |
WO2020156546A1 (en) * | 2019-02-02 | 2020-08-06 | Beijing Bytedance Network Technology Co., Ltd. | Prediction using extra-buffer samples for intra block copy in video coding |
CN111630860A (zh) * | 2019-01-03 | 2020-09-04 | 深圳市大疆创新科技有限公司 | 视频处理方法和装置 |
WO2020192726A1 (en) * | 2019-03-27 | 2020-10-01 | Beijing Bytedance Network Technology Co., Ltd. | History-based motion vector prediction |
CN113016187A (zh) * | 2018-11-07 | 2021-06-22 | 联发科技股份有限公司 | 利用当前画面参照编码方式的视频区块编码或解码方法和装置 |
CN113228636A (zh) * | 2018-12-12 | 2021-08-06 | 韦勒斯标准与技术协会公司 | 使用当前图片参考的视频信号处理方法和设备 |
CN113784145A (zh) * | 2018-09-07 | 2021-12-10 | 华为技术有限公司 | 用于视频译码中帧内预测和帧间预测的插值滤波方法和装置 |
CN113796070A (zh) * | 2019-06-10 | 2021-12-14 | Oppo广东移动通信有限公司 | 预测值的确定方法、编码器以及计算机存储介质 |
US11228775B2 (en) | 2019-02-02 | 2022-01-18 | Beijing Bytedance Network Technology Co., Ltd. | Data storage in buffers for intra block copy in video coding |
CN114710675A (zh) * | 2018-09-21 | 2022-07-05 | 腾讯美国有限责任公司 | 视频解码的方法、装置及可读介质 |
CN114979630A (zh) * | 2019-08-26 | 2022-08-30 | 腾讯科技(深圳)有限公司 | 数据解码方法、装置和数据编码方法、装置 |
US11523107B2 (en) | 2019-07-11 | 2022-12-06 | Beijing Bytedance Network Technology Co., Ltd. | Bitstream conformance constraints for intra block copy in video coding |
US11528476B2 (en) | 2019-07-10 | 2022-12-13 | Beijing Bytedance Network Technology Co., Ltd. | Sample identification for intra block copy in video coding |
US11546581B2 (en) | 2019-03-04 | 2023-01-03 | Beijing Bytedance Network Technology Co., Ltd. | Implementation aspects in intra block copy in video coding |
US11575888B2 (en) | 2019-07-06 | 2023-02-07 | Beijing Bytedance Network Technology Co., Ltd. | Virtual prediction buffer for intra block copy in video coding |
US11677941B2 (en) | 2018-11-22 | 2023-06-13 | Beijing Bytedance Network Technology Co., Ltd | Construction method for inter prediction with geometry partition |
US11882287B2 (en) | 2019-03-01 | 2024-01-23 | Beijing Bytedance Network Technology Co., Ltd | Direction-based prediction for intra block copy in video coding |
US12069282B2 (en) | 2019-03-01 | 2024-08-20 | Beijing Bytedance Network Technology Co., Ltd | Order-based updating for intra block copy in video coding |
Families Citing this family (49)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102257269B1 (ko) | 2013-10-14 | 2021-05-26 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 비디오 및 이미지 코딩 및 디코딩을 위한 인트라 블록 카피 예측 모드의 피쳐 |
CN105659602B (zh) | 2013-10-14 | 2019-10-08 | 微软技术许可有限责任公司 | 用于视频和图像编码的帧内块复制预测模式的编码器侧选项 |
US10469863B2 (en) * | 2014-01-03 | 2019-11-05 | Microsoft Technology Licensing, Llc | Block vector prediction in video and image coding/decoding |
US11284103B2 (en) | 2014-01-17 | 2022-03-22 | Microsoft Technology Licensing, Llc | Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning |
JP6482191B2 (ja) * | 2014-06-12 | 2019-03-13 | キヤノン株式会社 | 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム |
WO2015192353A1 (en) | 2014-06-19 | 2015-12-23 | Microsoft Technology Licensing, Llc | Unified intra block copy and inter prediction modes |
KR101748620B1 (ko) * | 2014-06-20 | 2017-07-04 | 성균관대학교산학협력단 | 영상의 부호화/복호화 방법 및 이를 이용하는 장치 |
WO2015194913A1 (ko) * | 2014-06-20 | 2015-12-23 | 성균관대학교 산학협력단 | 영상의 부호화/복호화 방법 및 이를 이용하는 장치 |
US10412387B2 (en) | 2014-08-22 | 2019-09-10 | Qualcomm Incorporated | Unified intra-block copy and inter-prediction |
KR20170066457A (ko) * | 2014-09-26 | 2017-06-14 | 브이아이디 스케일, 인크. | 시간적 블록 벡터 예측을 갖는 인트라 블록 카피 코딩 |
EP3202150B1 (en) | 2014-09-30 | 2021-07-21 | Microsoft Technology Licensing, LLC | Rules for intra-picture prediction modes when wavefront parallel processing is enabled |
GB2531003A (en) * | 2014-10-06 | 2016-04-13 | Canon Kk | Method and apparatus for vector encoding in video coding and decoding |
US9918105B2 (en) * | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
WO2016195460A1 (ko) | 2015-06-05 | 2016-12-08 | 한양대학교 산학협력단 | 화면 내 예측에 대한 부호화/복호화 방법 및 장치 |
TWI816224B (zh) | 2015-06-08 | 2023-09-21 | 美商Vid衡器股份有限公司 | 視訊解碼或編碼方法及裝置 |
WO2017063169A1 (zh) * | 2015-10-15 | 2017-04-20 | 富士通株式会社 | 图像编码方法、装置以及图像处理设备 |
GB2547053B (en) * | 2016-02-08 | 2020-07-08 | Canon Kk | Methods, devices, and computer programs for combining the use of intra-layer prediction and inter-layer prediction with scalability & screen content features |
US10986349B2 (en) * | 2017-12-29 | 2021-04-20 | Microsoft Technology Licensing, Llc | Constraints on locations of reference blocks for intra block copy prediction |
US11202079B2 (en) | 2018-02-05 | 2021-12-14 | Tencent America LLC | Method and apparatus for video decoding of an affine model in an intra block copy mode |
US10523948B2 (en) | 2018-02-05 | 2019-12-31 | Tencent America LLC | Method and apparatus for video coding |
US10687071B2 (en) | 2018-02-05 | 2020-06-16 | Tencent America LLC | Method and apparatus for video coding |
US10638137B2 (en) | 2018-03-07 | 2020-04-28 | Tencent America LLC | Method and apparatus for video coding |
CN118741096A (zh) * | 2018-03-27 | 2024-10-01 | 数码士有限公司 | 使用运动补偿的视频信号处理方法及设备 |
US10462483B1 (en) | 2018-04-26 | 2019-10-29 | Tencent America LLC | Method and apparatus for video coding |
US10448025B1 (en) | 2018-05-11 | 2019-10-15 | Tencent America LLC | Method and apparatus for video coding |
US11109025B2 (en) | 2018-06-04 | 2021-08-31 | Tencent America LLC | Method and apparatus for sub-block based temporal motion vector prediction |
CN110832861A (zh) * | 2018-07-03 | 2020-02-21 | 深圳市大疆创新科技有限公司 | 视频处理方法和设备 |
US10448026B1 (en) * | 2018-07-09 | 2019-10-15 | Tencent America LLC | Method and apparatus for block vector signaling and derivation in intra picture block compensation |
US10904559B2 (en) | 2018-07-13 | 2021-01-26 | Tencent America LLC | Block vector prediction in intra block copy mode |
US11019331B2 (en) | 2018-07-16 | 2021-05-25 | Tencent America LLC | Method and apparatus for video coding with prediction information |
US10798376B2 (en) | 2018-07-17 | 2020-10-06 | Tencent America LLC | Method and apparatus for video coding |
US10735763B2 (en) | 2018-07-27 | 2020-08-04 | Tencent America LLC | Method and apparatus for motion vector prediction using spatial and temporal combination |
US10958932B2 (en) * | 2018-09-12 | 2021-03-23 | Qualcomm Incorporated | Inter-prediction coding of video data using generated motion vector predictor list including non-adjacent blocks |
US11317099B2 (en) | 2018-10-05 | 2022-04-26 | Tencent America LLC | Method and apparatus for signaling an offset in video coding for intra block copy and/or inter prediction |
US10764601B2 (en) | 2018-10-06 | 2020-09-01 | Tencent America LLC | Method and apparatus for video coding |
US11284066B2 (en) | 2018-10-10 | 2022-03-22 | Tencent America LLC | Method and apparatus for intra block copy in intra-inter blending mode and triangle prediction unit mode |
US11140404B2 (en) | 2018-10-11 | 2021-10-05 | Tencent America LLC | Method and apparatus for video coding |
US11509919B2 (en) | 2018-10-17 | 2022-11-22 | Tencent America | Reference sample memory size restrictions for intra block copy |
WO2020086317A1 (en) | 2018-10-23 | 2020-04-30 | Tencent America Llc. | Method and apparatus for video coding |
CN111263144B (zh) * | 2018-11-30 | 2022-07-01 | 杭州海康威视数字技术股份有限公司 | 一种运动信息确定方法及其设备 |
US10999594B2 (en) * | 2018-12-20 | 2021-05-04 | Qualcomm Incorporated | Virtual search area for current picture referencing (CPR) and intra block copy (IBC) |
US11240516B2 (en) | 2019-03-20 | 2022-02-01 | Tencent America LLC | Coding mode signaling for small blocks |
MX2021011619A (es) * | 2019-04-01 | 2021-10-13 | Beijing Bytedance Network Tech Co Ltd | Uso de filtros de interpolacion para la prediccion de vector de movimiento basada en historia. |
WO2020259426A1 (en) * | 2019-06-22 | 2020-12-30 | Beijing Bytedance Network Technology Co., Ltd. | Motion candidate list construction for intra block copy mode |
BR112022002480A2 (pt) | 2019-08-20 | 2022-04-26 | Beijing Bytedance Network Tech Co Ltd | Método para processamento de vídeo, aparelho em um sistema de vídeo, e, produto de programa de computador armazenado em uma mídia legível por computador não transitória |
US11240524B2 (en) * | 2019-11-27 | 2022-02-01 | Mediatek Inc. | Selective switch for parallel processing |
WO2022114742A1 (ko) * | 2020-11-24 | 2022-06-02 | 현대자동차주식회사 | 비디오 부호화 및 복호화를 위한 장치 및 방법 |
CN114513659B (zh) * | 2022-02-15 | 2023-04-11 | 北京百度网讯科技有限公司 | 确定图片预测模式的方法、装置、电子设备和介质 |
US11849129B2 (en) * | 2022-03-18 | 2023-12-19 | Qualcomm Incorporated | Intra-block copy decoding using dynamic re-mapping of on-chip memory |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010021664A1 (en) * | 2008-08-20 | 2010-02-25 | Thomson Licensing | Depth coding |
CN102438147A (zh) * | 2011-12-23 | 2012-05-02 | 上海交通大学 | 帧内同步立体视频多参考帧模式视间预测编码及解码方法 |
CN103026709A (zh) * | 2010-07-28 | 2013-04-03 | 高通股份有限公司 | 用于视频译码的帧间预测模式和参考图片列表索引的译码 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8824558B2 (en) | 2010-11-23 | 2014-09-02 | Mediatek Inc. | Method and apparatus of spatial motion vector prediction |
WO2012122927A1 (en) | 2011-03-14 | 2012-09-20 | Mediatek Inc. | Method and apparatus for derivation of motion vector candidate and motion vector prediction candidate |
ES2900107T3 (es) * | 2011-03-21 | 2022-03-15 | Lg Electronics Inc | Método para seleccionar un predictor de vector de movimiento |
WO2013154674A1 (en) | 2012-04-11 | 2013-10-17 | Motorola Mobility Llc | Evaluation of signaling of collocated reference picture for temporal prediction |
US9648318B2 (en) * | 2012-09-30 | 2017-05-09 | Qualcomm Incorporated | Performing residual prediction in video coding |
CN103079067B (zh) * | 2013-01-09 | 2016-03-09 | 华为技术有限公司 | 运动矢量预测值列表构建方法和视频编解码方法及装置 |
US10904551B2 (en) * | 2013-04-05 | 2021-01-26 | Texas Instruments Incorporated | Video coding using intra block copy |
US10015515B2 (en) * | 2013-06-21 | 2018-07-03 | Qualcomm Incorporated | Intra prediction from a predictive block |
US9503715B2 (en) * | 2013-08-30 | 2016-11-22 | Qualcomm Incorporated | Constrained intra prediction in video coding |
US10009629B2 (en) * | 2013-10-11 | 2018-06-26 | Sony Corporation | Video coding system with search range and method of operation thereof |
US10469863B2 (en) * | 2014-01-03 | 2019-11-05 | Microsoft Technology Licensing, Llc | Block vector prediction in video and image coding/decoding |
US9699468B2 (en) * | 2014-02-10 | 2017-07-04 | Microsoft Technology Licensing, Llc | Adaptive screen and video coding scheme |
US9854237B2 (en) | 2014-10-14 | 2017-12-26 | Qualcomm Incorporated | AMVP and merge candidate list derivation for intra BC and inter prediction unification |
-
2015
- 2015-02-17 KR KR1020167017880A patent/KR101908205B1/ko active IP Right Grant
- 2015-02-17 EP EP15752201.2A patent/EP3078192B1/en active Active
- 2015-02-17 US US15/107,916 patent/US10555001B2/en active Active
- 2015-02-17 WO PCT/CN2015/073225 patent/WO2015124110A1/en active Application Filing
- 2015-02-17 CN CN201580005168.4A patent/CN106416243B/zh active Active
- 2015-02-17 CN CN201910202687.XA patent/CN109889850A/zh active Pending
-
2019
- 2019-12-17 US US16/717,247 patent/US11140411B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010021664A1 (en) * | 2008-08-20 | 2010-02-25 | Thomson Licensing | Depth coding |
CN103026709A (zh) * | 2010-07-28 | 2013-04-03 | 高通股份有限公司 | 用于视频译码的帧间预测模式和参考图片列表索引的译码 |
CN102438147A (zh) * | 2011-12-23 | 2012-05-02 | 上海交通大学 | 帧内同步立体视频多参考帧模式视间预测编码及解码方法 |
Non-Patent Citations (1)
Title |
---|
BUDAGAVI M: "《13. JCT-VC meeting; 104. MPEG meeting》", 9 April 2013 * |
Cited By (49)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107105240B (zh) * | 2017-03-22 | 2020-06-19 | 中南大学 | 一种hevc-scc复杂度控制方法及其系统 |
CN107105240A (zh) * | 2017-03-22 | 2017-08-29 | 中南大学 | 一种hevc‑scc复杂度控制方法及其系统 |
CN110072111A (zh) * | 2018-01-23 | 2019-07-30 | 富士通株式会社 | 用于视频图像编码和视频图像解码的装置和方法 |
CN108924551A (zh) * | 2018-08-29 | 2018-11-30 | 腾讯科技(深圳)有限公司 | 视频图像编码模式的预测方法及相关设备 |
CN108924551B (zh) * | 2018-08-29 | 2022-01-07 | 腾讯科技(深圳)有限公司 | 视频图像编码模式的预测方法及相关设备 |
US11405612B2 (en) | 2018-09-07 | 2022-08-02 | Huawei Technologies Co., Ltd. | Method and apparatus for interpolation filtering for intra- and inter-prediction in video coding |
CN113784145B (zh) * | 2018-09-07 | 2022-06-28 | 华为技术有限公司 | 一种视频译码方法和装置,编码器和解码器 |
US11968362B2 (en) | 2018-09-07 | 2024-04-23 | Huawei Technologies Co., Ltd. | Method and apparatus for interpolation filtering for intra- and inter-prediction in video coding |
CN113784145A (zh) * | 2018-09-07 | 2021-12-10 | 华为技术有限公司 | 用于视频译码中帧内预测和帧间预测的插值滤波方法和装置 |
US12010340B2 (en) | 2018-09-21 | 2024-06-11 | Tencent America LLC | Intra block copy search range |
CN114710675A (zh) * | 2018-09-21 | 2022-07-05 | 腾讯美国有限责任公司 | 视频解码的方法、装置及可读介质 |
CN109413420B (zh) * | 2018-10-26 | 2020-10-13 | 吉林建筑大学 | 带宽压缩中复杂纹理的双模式选择预测方法 |
CN109413420A (zh) * | 2018-10-26 | 2019-03-01 | 西安科锐盛创新科技有限公司 | 带宽压缩中复杂纹理的双模式选择预测方法 |
CN113016187B (zh) * | 2018-11-07 | 2023-06-06 | 寰发股份有限公司 | 利用当前画面参照编码方式的视频区块编码或解码方法和装置 |
CN113016187A (zh) * | 2018-11-07 | 2021-06-22 | 联发科技股份有限公司 | 利用当前画面参照编码方式的视频区块编码或解码方法和装置 |
US11785207B2 (en) | 2018-11-07 | 2023-10-10 | Hfi Innovation Inc. | Apparatus of encoding or decoding video blocks by current picture referencing coding |
US11889056B2 (en) | 2018-11-07 | 2024-01-30 | Hfi Innovation Inc. | Method of encoding or decoding video blocks by current picture referencing coding |
US11924421B2 (en) | 2018-11-22 | 2024-03-05 | Beijing Bytedance Network Technology Co., Ltd | Blending method for inter prediction with geometry partition |
US11677941B2 (en) | 2018-11-22 | 2023-06-13 | Beijing Bytedance Network Technology Co., Ltd | Construction method for inter prediction with geometry partition |
US11943477B2 (en) | 2018-11-27 | 2024-03-26 | Semiconductor Components Industries, Llc | Methods and apparatus for successive intra block prediction |
CN111225205A (zh) * | 2018-11-27 | 2020-06-02 | 半导体元件工业有限责任公司 | 用于执行区块内预测的方法和装置 |
CN111225205B (zh) * | 2018-11-27 | 2024-04-09 | 半导体元件工业有限责任公司 | 用于执行区块内预测的方法和装置 |
CN113228636A (zh) * | 2018-12-12 | 2021-08-06 | 韦勒斯标准与技术协会公司 | 使用当前图片参考的视频信号处理方法和设备 |
US12003699B2 (en) | 2018-12-12 | 2024-06-04 | Humax Co., Ltd. | Video signal processing method and device using current picture reference |
US11671586B2 (en) | 2018-12-28 | 2023-06-06 | Beijing Bytedance Network Technology Co., Ltd. | Modified history based motion prediction |
WO2020134883A1 (zh) * | 2018-12-28 | 2020-07-02 | 杭州海康威视数字技术股份有限公司 | 视频编码及视频解码 |
WO2020135465A1 (en) * | 2018-12-28 | 2020-07-02 | Beijing Bytedance Network Technology Co., Ltd. | Modified history based motion prediction |
CN109743576A (zh) * | 2018-12-28 | 2019-05-10 | 杭州海康威视数字技术股份有限公司 | 编码方法、解码方法及装置 |
CN111630860A (zh) * | 2019-01-03 | 2020-09-04 | 深圳市大疆创新科技有限公司 | 视频处理方法和装置 |
US12088834B2 (en) | 2019-02-02 | 2024-09-10 | Beijing Bytedance Network Technology Co., Ltd | Selective use of virtual pipeline data units for intra block copy video coding |
US12003745B2 (en) | 2019-02-02 | 2024-06-04 | Beijing Bytedance Network Technology Co., Ltd | Buffer updating for intra block copy in video coding |
US11438613B2 (en) | 2019-02-02 | 2022-09-06 | Beijing Bytedance Network Technology Co., Ltd. | Buffer initialization for intra block copy in video coding |
WO2020156546A1 (en) * | 2019-02-02 | 2020-08-06 | Beijing Bytedance Network Technology Co., Ltd. | Prediction using extra-buffer samples for intra block copy in video coding |
US11228775B2 (en) | 2019-02-02 | 2022-01-18 | Beijing Bytedance Network Technology Co., Ltd. | Data storage in buffers for intra block copy in video coding |
US11375217B2 (en) | 2019-02-02 | 2022-06-28 | Beijing Bytedance Network Technology Co., Ltd. | Buffer management for intra block copy in video coding |
US12101494B2 (en) | 2019-02-02 | 2024-09-24 | Beijing Bytedance Network Technology Co., Ltd | Prediction using intra-buffer samples for intra block copy in video coding |
US11956438B2 (en) | 2019-03-01 | 2024-04-09 | Beijing Bytedance Network Technology Co., Ltd. | Direction-based prediction for intra block copy in video coding |
US11882287B2 (en) | 2019-03-01 | 2024-01-23 | Beijing Bytedance Network Technology Co., Ltd | Direction-based prediction for intra block copy in video coding |
US12069282B2 (en) | 2019-03-01 | 2024-08-20 | Beijing Bytedance Network Technology Co., Ltd | Order-based updating for intra block copy in video coding |
US11546581B2 (en) | 2019-03-04 | 2023-01-03 | Beijing Bytedance Network Technology Co., Ltd. | Implementation aspects in intra block copy in video coding |
US11985308B2 (en) | 2019-03-04 | 2024-05-14 | Beijing Bytedance Network Technology Co., Ltd | Implementation aspects in intra block copy in video coding |
US11895320B2 (en) | 2019-03-27 | 2024-02-06 | Beijing Bytedance Network Technology Co., Ltd | History-based motion vector prediction |
WO2020192726A1 (en) * | 2019-03-27 | 2020-10-01 | Beijing Bytedance Network Technology Co., Ltd. | History-based motion vector prediction |
CN113796070A (zh) * | 2019-06-10 | 2021-12-14 | Oppo广东移动通信有限公司 | 预测值的确定方法、编码器以及计算机存储介质 |
US11575888B2 (en) | 2019-07-06 | 2023-02-07 | Beijing Bytedance Network Technology Co., Ltd. | Virtual prediction buffer for intra block copy in video coding |
US11936852B2 (en) | 2019-07-10 | 2024-03-19 | Beijing Bytedance Network Technology Co., Ltd. | Sample identification for intra block copy in video coding |
US11528476B2 (en) | 2019-07-10 | 2022-12-13 | Beijing Bytedance Network Technology Co., Ltd. | Sample identification for intra block copy in video coding |
US11523107B2 (en) | 2019-07-11 | 2022-12-06 | Beijing Bytedance Network Technology Co., Ltd. | Bitstream conformance constraints for intra block copy in video coding |
CN114979630A (zh) * | 2019-08-26 | 2022-08-30 | 腾讯科技(深圳)有限公司 | 数据解码方法、装置和数据编码方法、装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3078192B1 (en) | 2019-12-04 |
EP3078192A1 (en) | 2016-10-12 |
US20160330474A1 (en) | 2016-11-10 |
US10555001B2 (en) | 2020-02-04 |
KR101908205B1 (ko) | 2018-10-15 |
CN106416243B (zh) | 2019-05-03 |
KR20160095057A (ko) | 2016-08-10 |
US11140411B2 (en) | 2021-10-05 |
CN109889850A (zh) | 2019-06-14 |
WO2015124110A1 (en) | 2015-08-27 |
EP3078192A4 (en) | 2017-08-30 |
US20200120357A1 (en) | 2020-04-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106416243B (zh) | 利用基于帧内图像区块复制预测的视频编码方法 | |
CN105594211B (zh) | 用于图片的包括帧内区块复制模式的编码模式的发送方法 | |
CN106797229B (zh) | 视频编码方法 | |
CN106797466B (zh) | 一种处理视频数据的方法及装置 | |
CN106797476B (zh) | 用于编码/解码视频数据的方法和视频解码装置 | |
CN106797477B (zh) | 用于解码及编码视频数据的方法和设备 | |
CN107852490A (zh) | 使用帧内块复制模式的视频编解码方法及系统 | |
KR101958534B1 (ko) | 팔레트 기반 비디오 코딩에서 이스케이프를 갖는 런들의 코딩 | |
CN108141605A (zh) | 帧内块复制合并模式及不可用帧内块复制参考区域的填充 | |
CN102132247B (zh) | 传播地图 | |
CN105874795B (zh) | 在波前并行处理被启用时对图片内预测模式的规则 | |
CN106797479A (zh) | 对于并行处理的帧内块复制预测限制 | |
CN111869216B (zh) | 用于视频编解码系统的语法处理的方法和装置 | |
CN106464896A (zh) | 帧内区块复制搜索和补偿范围的方法 | |
CN107852505A (zh) | 用于使用帧内块复制模式的视频解码错误处理的方法和装置 | |
CN107079161A (zh) | 用于屏幕内容以及视频编码的帧内图片块复制的方法 | |
CN107592972A (zh) | 用于视频数据中特定图片内的帧间译码的搜索区域确定 | |
CN107925769A (zh) | 用于帧内块复制模式的已解码图像缓存器的方法和系统 | |
CN106105215A (zh) | 将当前图片用作视频译码的参考 | |
CN106105216A (zh) | 用于3d视频译码的受约束深度帧内模式译码 | |
CN107852499A (zh) | 用于在视频编解码中减少最坏情况下的带宽的约束帧内块复制的方法 | |
CN107113436A (zh) | 用于次取样格式的调色模式 | |
CN106464904A (zh) | 用于视频译码的帧内块复制块向量信令 | |
CN106416249A (zh) | 在视频译码中确定用于经调色板译码块的量化参数(qp)值和差量qp值 | |
CN108028940A (zh) | 调色板模式视频译码中转义像素信号值的限制 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20220422 Address after: Hsinchu County, Taiwan, China Patentee after: MEDIATEK Inc. Address before: Singapore City Huicheng Avenue Soras one of the third floor of the building Patentee before: MediaTek (Singapore) Pte. Ltd. |
|
TR01 | Transfer of patent right |