CN107079162A - 在视频编码中用于帧内区块复制的去区块方法 - Google Patents

在视频编码中用于帧内区块复制的去区块方法 Download PDF

Info

Publication number
CN107079162A
CN107079162A CN201580048875.1A CN201580048875A CN107079162A CN 107079162 A CN107079162 A CN 107079162A CN 201580048875 A CN201580048875 A CN 201580048875A CN 107079162 A CN107079162 A CN 107079162A
Authority
CN
China
Prior art keywords
block
frame
rebuild
adjacent
border
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580048875.1A
Other languages
English (en)
Other versions
CN107079162B (zh
Inventor
许晓中
刘杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
HFI Innovation Inc
Original Assignee
HFI Innovation Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HFI Innovation Inc filed Critical HFI Innovation Inc
Priority to CN202010722532.1A priority Critical patent/CN111988606B/zh
Publication of CN107079162A publication Critical patent/CN107079162A/zh
Application granted granted Critical
Publication of CN107079162B publication Critical patent/CN107079162B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法和装置。根据本发明的实施方式，在两相邻已重建区块中包括至少一帧内区块复制已编码区块，对于两相邻已重建区块的至少一种组合方式，基于与两相邻已重建区块相关的编码参数，选择边界滤波强度为1或0。利用选择的边界滤波强度，应用去区块滤波于两相邻已重建区块的相邻采样，两相邻已重建区块在区块边界周围。举例来说，当两相邻已重建区块对应于一个帧内区块复制已编码区块和一个帧间已编码区块时，边界滤波强度设置为1。

Description

在视频编码中用于帧内区块复制的去区块方法
交叉引用
本发明主张在2014年9月15日提出的申请号为62/050,258的美国临时专利申请的优先权。因此在全文中合并参考此专利申请案。
技术领域
本发明是有关于利用包括帧内区块复制(Intra-block copy,IntraBC)的多个编码模式的视频编码，特别是有关于通过去区块滤波(deblocking filter)减轻在用于具有帧内区块复制模式的视频编码系统的区块边界周围的伪迹(artifacts)来改善视觉质量的技术。
背景技术
高效视频编码(High Efficiency Video Coding,以下简称为HEVC)是近年来开发的新的编码标准。在HEVC系统中，H.264/AVC中固定尺寸的宏块由灵活的区块来代替，并将其命名为编码单元(coding unit,CU)。在编码单元中像素共享相同的编码参数，以改善编码效率。编码单元可开始于最大编码单元(largest CU,LCU)，其在HEVC中也被称为编码树单元。除编码单元的概念之外，预测单元的概念也被引入HEVC中。一旦编码单元分层树的分割完成，根据预测类型和预测单元分割，每一个叶编码单元被进一步分割为一个或多个预测单元。已开发出用于屏幕内容编码的各种编码工具。与本发明相关的工具如下文所述。
图1A描述了根据高效视频编码的包括环内处理的示范性自适应帧间(Inter)/帧内(Intra)视频编码系统的示意图。对于帧间预测来说，运动估计/运动补偿112基于自其它图片的视频数据提供预测数据。开关114选择帧内预测110或帧间预测数据，并且已选择的预测数据被提供至加法器116以形成预测误差，也称为残差。然后，预测误差由转换118以及之后的量化120处理。然后，已转换和已量化的残差由熵编码器122编码，以形成对应于已压缩视频数据的视频比特流。然后，与变换系数相关的比特流被封装为(packed with)边信息，例如与图像区域相关的运动、模式、以及其他信息。边信息也可熵编码以降低需要的带宽。当使用帧间预测模式时，参考图片也可在编码器侧被重建。因此，已变换和已量化的残差由逆量化124和逆变换126处理，以恢复残差。然后，残差被添加至在重建128处的预测数据136，以重建视频数据。已重建的视频数据可被存储于参考图片缓冲器134中，并用于其他帧的预测。
如图1A所示，输入的视频数据在编码系统中经过一系列的处理。由于一系列的处理，自重建128的已重建的视频数据可遭受各种损害。相应地，在已重建的视频数据被存入参考图片缓冲器134之前，为改善视频质量，各种环内处理被应用于已重建的视频数据。在发展的高效率视频编码标准中，去区块处理模块(deblocking(DF)processing module)130，采样自适应偏移(Sample Adaptive Offset,SAO)处理模块131可被开发以提供图片质量。环内滤波信息可包括于比特流中，以使得解码器可适当地恢复需要的信息。因此，自采样自适应偏移的环内滤波信息被提供至熵编码器122，以用于将该环内滤波信息包括于比特流中。在图1A中，去区块处理模块130先被应用于已重建的视频，以及然后采样自适应偏移131被应用于已去区块处理的视频。然而，在去区块处理模块和采样自适应偏移处理模块之间的处理顺序可以调整。
图1A中编码器对应的解码器如图1B所示。视频比特流由熵解码器142解码，以恢复已转换的、已量化的残差、采样自适应偏移信息、和其他系统信息。在解码器侧，仅运动补偿113代替运动估计/运动补偿而执行。解码处理相似于在编码器侧的已重建环。已恢复的、已转换的、已量化的残差、采样自适应偏移信息和其他系统信息用于重建视频数据。已重建的视频被进一步由去区块处理模块130和采样自适应偏移处理模块131处理，以产生最终的已提高的已解码的视频。
在高效视频编码中的编码处理利用名为最大编码单元的区块结构来编码或解码图像。最大编码单元可利用四叉树(quadtree)自适应地分割为编码单元。在每一个叶编码单元(leaf CU)中，对每一个8x8区块执行去区块操作，以及在高效视频编码中，去区块被应用于8x8区块边界。对于每一个8x8区块，首先应用跨越垂直区块边界(也称为垂直边缘)的水平滤波，然后应用跨越水平区块边界(也称为水平边缘)的垂直滤波。在处理亮度区块边界的过程中，在边界每一侧的四个像素涉及滤波参数推导，以及在滤波后边界每一侧的3个像素会改变。
图2描述了在两区块之间的垂直边缘210的去区块过程中涉及的像素的示意图，其中每一个最小的正方形代表一个像素。边缘左侧的像素(即，220表示的像素列p0至像素列p3)形成一个8x8已重建区块，以及在边缘右侧的像素(即，230表示的像素列q0至像素列q3)形成另一个8x8已重建区块。根据高效视频编码在去区块滤波处理中，两个8x8区块的编码信息先用于计算边缘的边界滤波强度(boundary filter strength)(也称为BS或边界强度(boundary strength))。在确定边界滤波强度之后，已重建像素的像素列p0至像素列p3以及像素列q0至像素列q3用于得到包括滤波开/滤波关决策和强/弱滤波选择的滤波参数。
图3描述了用于水平边缘310的去区块滤波过程中涉及的边界像素的示意图，其中每一个最小的正方形代表一个像素。边缘上方的像素(即，320表示的像素列p0至像素列p3)形成一个8x8已重建区块，以及在边缘下方的像素(即，330表示的像素列q0至像素列q3)形成另一个8x8已重建区块。水平边缘的去区块处理相似于垂直边缘的去区块处理。
根据高效率视频编码，可使用三级边界滤波强度(即，2,1,和0)。对于强边界(即，较可见的边界)，较强的去区块滤波被使用以引起较光滑的边界。较强的去区块滤波由BS＝2来指示，以及较弱的去区块滤波由BS＝1来指示。当BS等于0时，指示没有去区块滤波。
目前，已开发出高效视频编码的扩展版本，包括屏幕内容编码(screen contentcoding,SCC))和3维扩展版本。屏幕内容编码目的在于，编码具有非4:2:0颜色格式(例如，4:2:2和4:4:4颜色格式)的屏幕捕获内容和具有较高比特深度(例如，每次采样12，14和16比特)的视频数据，而3维扩展版本目的在于编码具有深度数据的多视点视频。
在屏幕内容编码的发展过程中，已开发出各种视频编码工具，包括“帧内图像区块复制(IntraBC)”技术。帧内区块复制技术最初描述于JCTVC-M0350中(Budagavi et al.,AHG8:Video coding using Intra motion compensation,Joint Collaborative Team onVideo Coding(JCT-VC)of ITU-T SG16WP3and ISO/IEC JTC 1/SC 29/WG11 13thMeeting:Incheon,KR,18–26Apr.2013,Document:JCTVC-M0350)。根据JCTVC-M0350的示例如图4所示，其中当前编码单元(CU,410)利用帧内运动补偿(Intra motion compensation,Intra MC)而被编码。预测区块(420)自当前编码单元和位移向量(412)而定位。在此示例中，搜索区块被限制为当前编码树单元、左侧编码树单元、左侧的第二个编码树单元。预测区块自已重建区域而得到。然后，位移向量，也称为运动向量(motion vector,MV)或区块向量(block vector,BV)，和用于当前编码单元的残差被编码。已知HEVC采用编码树单元和编码单元区块结构作为用于编码视频数据的基本单元。每一个图片被分割为多个编码树单元，以及每一个编码树单元被分割为多个编码单元。在预测期间，每一个编码单元可被分割为多个区块，该多个区块被称为预测单元，以用于执行预测处理。
基于JCTVC-M0350的修改描述于JCTVC-N0256中(Pang et al.,Non-RCE3:IntraMotion Compensation with 2-D MVs,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG16WP3and ISO/IEC JTC 1/SC 29/WG11 14th Meeting:Vienna,AT,25July–2Aug.2013,Document:JCTVC-N0256)，其允许水平和垂直区块向量分量均为非零。此外，区块向量编码方法被描述于JCTVC-N0256中。其中，一个方法使用左侧或上方的区块向量作为区块向量预测子并编码结果区块向量差值(BV differences,BVD)。一个标志被发送以指示区块向量差值是否为零。当区块向量差值不为零时，指数哥伦布编码(exponential-Golomb)的第三位码被使用以编码区块向量差值的剩余绝对水平(remaining absolute level)。使用一个标志以编码区块向量差值的符号。根据另一方法，不使用预测子，以及利用高效视频编码中的区块向量差值的指数哥伦布码，区块向量被编码。
JCTVC-N0256也揭示一些管线(pipeline)友好的方式。举例来说，不使用差值滤波。此外，区块向量搜索区域被限制。在一个示例中，搜索区域被限制于当前编码树单元和左侧编码树单元。在另一示例中，搜索区域被限制于当前编码树单元和左侧编码树单元的最右边4列采样。
在SCM-2.0(Joshi et al.,Screen content coding test model 2(SCM 2),Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16WP3and ISO/IECJTC 1/SC29/WG11,18th Meeting:Sapporo,JP,30June–9July 2014,Document:JCTVC-R1014)中，根据JCTVC-R0309(Pang,et al.,Non-SCCE1:Combination of JCTVC-R0185andJCTVC-R0203,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG16WP3and ISO/IEC JTC 1/SC29/WG11,18th Meeting:Sapporo,JP,30June–9July 2014,Document:JCTVC-R0309)，区块向量编码被修改为利用相邻区块向量以及已编码的区块向量作为区块向量预测子。区块向量预测子以与在HEVC中的先进运动向量预测(advancedmotion vector prediction,AMVP)的方法相似的方式来得到。如图5所示，通过先按顺序存取空间相邻区块a1和b1，预测子候选列表被构建。若任意空间相邻区块不包括区块向量，则最后两个已编码的区块向量被用于填充区块向量候选列表，以使得列表将包括两个不同的条目。最后两个已编码的区块向量利用(-2*CU_width,0)和(-CU_width,0)来初始化。为避免需要线缓冲器，当前编码树单元之外的上方的区块向量被认为是不可用的。最后编码的两个区块向量被重置为(0,0)以用于每一个编码树单元来避免数据依赖。
目前，帧内区块编码的已编码区块的区块向量为整数精度，不同于帧间已编码区块的运动向量，帧间已编码区块的运动向量为四分之一像素(quarter-pel)精度。
根据SCM-2.0，在重建处理之后，去区块滤波处理将沿区块边界执行，这相似于传统的HEVC。边界滤波强度(boundary filter strength,BS)将决定强滤波、弱滤波或不滤波将被应用于边界。在HEVC中，若边缘需要去区块滤波，不同的区块边界滤波强度被分配至不同属性的区块边界。总之，应用如下边界滤波强度决策过程：
步骤1。执行测试1，测试1对应于区块边界一侧任意区块为帧内已编码。若结果被断言(即，结果为是(result＝yes))，则边界滤波强度的值等于2，以及边界滤波强度决策过程终止。否则，边界滤波强度决策过程转至步骤2。
步骤2。执行测试2，测试2对应于区块边界是否为变换块边缘，以及在区块边界一侧的至少一区块是否具有非零系数。若结果被断言(即，结果为是(result＝yes))，边界滤波强度的值等于1，以及边界滤波强度决策过程终止。否则，边界滤波强度决策过程转至步骤3。
步骤3。执行测试3，测试3关于区块边界两侧的两个区块相关的编码参数。基于测试3的结果，边界滤波强度的值等于1或0。一些编码参数可被用于测试3，例如，RefList(参考图像列表(reference picture list)，也称为参考列表(reference list))、RefIdx(参考图像索引(reference picture index)，也称为参考索引(reference index))、使用的运动向量的数量，以及两侧的运动向量差值。例如，当两区块涉及相同图像，以及两运动向量之间的差异小于一个整数像素(任一组分)时，边界滤波强度被设置为0。否则，边界滤波强度被设置为1。
对于边界边缘，在帧内区块复制已编码区块在区块边缘一侧的情况下，根据当前HEVC实践，去区块滤波边界滤波强度决策将帧内区块复制已编码区块视为帧内已编码区块。相应地，若相邻于区块边界的两区块的任意一个为帧内区块复制已编码，对于去区块滤波操作的相关边缘的边界滤波强度的值等于2。
根据涉及帧内区块复制已编码区块的当前去区块滤波实践，滤波过程对待帧内区块复制已编码区块在某种程度上相似于帧内区块。因此，当涉及帧内区块复制已编码区块时，不会导致理想的视觉质量。相应地，需要开发去区块滤波过程以用于与帧内区块复制已编码区块相关的区块边界来改善视觉质量。
发明内容
本发明提供一种在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法和装置。根据本发明的实施方式，在两相邻已重建区块中包括至少一帧内区块复制已编码区块，对于两相邻已重建区块的至少一种组合方式，基于与两相邻已重建区块相关的编码参数，选择边界滤波强度为1或0。利用选择的边界滤波强度，应用去区块滤波于两相邻已重建区块的相邻采样，两相邻已重建区块在区块边界周围。
在一个实施方式中，当帧内区块复制已编码区块利用参考图像索引值而被发送，以及两相邻已重建区块对应于一个帧内区块复制已编码区块和一个帧间已编码区块时，若区块边界也为一个变换区块边缘以及两相邻已重建区块中的至少一个具有一个或多个非零系数，则边界滤波强度被设置为1。若区块边界不是一个变换区块边缘或者两个相邻已重建区块均不具有非零系数，则根据选自编码参数组的因素，边界滤波强度被设置为1或0，编码参数组包括参考图像列表、参考图像索引、使用的运动向量的数量，以及与两相邻已重建区块相关的运动向量差值。
在其他实施方式中，当帧内区块复制已编码区块利用参考图像索引值而被发送，以及两相邻已重建区块对应于两个帧内区块复制已编码区块时，若区块边界也为一个变换区块边缘以及两相邻已重建区块中的至少一个具有一个或多个非零系数，则边界滤波强度被设置为1。若区块边界不是一个变换区块边缘或者两个相邻已重建区块均不具有非零系数，则根据选自编码参数组的一个或多个因素，边界滤波强度被设置为1或0，编码参数组包括参考图像列表、参考图像索引、使用的运动向量的数量，以及与两相邻已重建区块相关的运动向量差值。
在又一实施方式中，当每一个帧内区块复制已编码区块利用参考图像索引值而被发送，以及两相邻已重建区块对应于一个帧内区块复制已编码区块和一个帧间已编码区块时，特定参考图像索引被分配至帧内区块复制已编码区块。当前图像用作参考图像以用于帧内区块复制已编码区块。当前图像被分配至对应于L0和L1的参考图像列表、或不同于L0和L1的、与L0和L1相区分的参考图像列表。特定参考图像索引对应于在当前条带头中不由常规的帧间参考图像使用的值。特定参考图像索引对应于-1、或在参考图像列表L0或参考图像列表L1中的参考图像索引的总数。
根据本发明另一实施方式，当每一个帧内区块复制已编码区块利用参考图像索引值而被发送，以及两相邻已重建区块对应于两个帧内区块复制已编码区块时，相同的特定参考图像列表和相同的特定参考图像索引被分配至两个帧内区块复制已编码区块。
在基于利用帧内区块复制标志的帧内区块复制的发送方式的情况下，若两个相邻已重建区块对应于一个帧内区块复制已编码区块和一个帧间已编码区块，则边界滤波强度被设置为1。若两相邻已重建区块对应于两个帧内区块复制已编码区块，若与两帧内区块复制已编码区块相关的两个区块矢量的差值大于或等于一阈值，则边界滤波强度被设置为1，否则边界滤波强度被设置为0。阈值对应于1、或2、或4。
在一个实施方式中，若两相邻已重建区块中的任意一个已重建区块是来自参考其他图像的补偿区块，则已重建区块关于边界滤波强度的选择时被视为帧间已编码区块。
在其他实施方式中，若边界区块为帧内区块复制已编码区块，则关于基于一个或两个编码参数，选择边界滤波强度为1或0，帧内区块复制已编码区块的区块向量被转换至四分之一采样精度。举例来说，通过左移两位区块向量，帧内区块复制已编码区块的区块向量被转换至四分之一采样精度。
附图说明
图1A描述了根据高效视频编码标准的包括去区块和采样自适应偏移的环内处理的示范性自适应帧间(Inter)/帧内(Intra)视频编码系统的示意图
图1B描述了根据高效视频编码标准的包括去区块和采样自适应偏移的环内处理的示范性帧间/帧内视频解码系统的示意图。
图2描述了去区块滤波的两个8x8区块之间的垂直的区块边缘的示意图。
图3描述了去区块滤波的两个8x8区块之间的水平的边缘的示意图。
图4描述了根据帧内区块复制模式的帧内运动补偿的示意图，其中水平位移矢量被使用。
图5描述了根据HEVC的先进运动向量预测模式的、用于运动向量预测的相邻区块的示意图。
图6描述了包括帧内区块复制模式的编码系统的流程图，其中系统利用包括本发明实施方式的边界滤波强度。
具体实施方式
以下描述的是执行本发明的最佳实施方式。这些实施方式仅用于描述本发明的基本原理，而并非用于限制本发明。本发明的范围应以权利要求的范围为准。
根据本发明的实施方式，当参考补偿区块的已重建区块被视为帧间已编码区块时，在去区块滤波处理期间，帧内区块复制已编码的区块视为非帧内模式，其中，该补偿区块来自的图片不同于当前图片。与其他编码参数一起，当前帧内区块复制已编码区块的区块向量将被使用，以确定边界滤波强度的值是否等于1或0。
存在两种方法来实现如何发送帧内区块复制：ref_idx方法以及ibc_flag方法。根据ref_idx方法，当前图像被视为参考图像以用于帧内区块复制已编码区块。以及特定的RefList和ref_idx的值将被分配给此帧内区块复制已编码区块。根据ibc_flag方法，帧内区块复制已编码区块通过一个标志(称为ibc_flag或intra_bc_flag)来发送。请注意，条带为用于视频编码的视频结构，其中图像被划分为多个条带，以及每一个条带允许使用对该条带特定的一组编码参数。另外，当前条带特定的编码信息可被发送于条带头中，以使得条带特定编码信息可在解码器侧被恢复。对于两个帧内区块复制发送方式中的每一个(即，ref_idx和ibc_flag)，存在三种情况需要被考虑，以用于涉及至少一帧内区块复制已编码区块的边界边缘的去区块滤波的边界滤波强度决策。
基于ref_idx的帧内区块复制的发送方式
示例1。紧挨着区块边界的一个区块为帧内已编码以及其他区块为帧内区块复制已编码。用于此边界边缘的边界滤波强度的值等于2。
示例2。紧挨着区块边界的一个区块为帧间已编码以及其他区块为帧内区块复制已编码。根据本发明的实施方式，包括帧内区块复制已编码区块的当前图像被视为用于帧内区块复制已编码区块的参考图像。参考图像(即，当前图像)被放置于特定参考图像列表RefList中。特定的参考图像索引值，ref_idx，会被分配至此帧内区块复制已编码区块，以使得这些参数可在去区块过程中被使用。举例来说，当前图像可以分配至参考图像列表0(L0)，以及如下所示参考图像索引ref_idx被确定：
ref_idx＝num_ref_idx_l0_active_minus1+1,(1)
其中，num_ref_idx_l0_active_minus1为条带头语法，指示在L0中的参考图像数量以用于当前条带。
常规的(regular)帧间参考图像的参考图像索引ref_idx会从0至num_ref_idx_l0_active_minus1。一般说来，常规的帧内参考图像不会使用的任意参考图像索引ref_idx，例如，参考图像索引ref_idx＝-1(或在参考图像列表L0中的参考图像索引的总数)，可以分配给帧内区块复制已编码区块。先前提到的边缘滤波强度决策过程的步骤2和步骤3可被应用以确定边缘滤波强度的值。
在其他示例中，当前图像被配置至参考图像列表1(即，L1)，以及如下所示参考图像索引ref_idx：
ref_idx＝num_ref_idx_l1_active_minus1+1,(2)
其中，num_ref_idx_l1_active_minus1为条带头语法，指示用于当前条带的在L1中的参考图像数量。常规的帧间参考图像的参考图像索引ref_idx会从0至num_ref_idx_l1_active_minus1。一般说来，常规的帧内参考图像不会使用的任意参考图像索引ref_idx，例如，参考图像索引ref_idx＝-1(或在参考图像列表L0中的参考图像索引的总数)，可以分配给帧内区块复制已编码区块。先前提到的边缘滤波强度决策过程的步骤2和步骤3可被应用以确定边缘滤波强度的值。
在又一实施方式中，当前图像被配置至第三参考图像列表(即，L2)，第三参考图像列表不同于L0和L1。任意的参考图像索引ref_idx值(例如，0或-1)可被分配至此帧内区块复制已编码区块。先前提到的边缘滤波强度决策过程的步骤2和步骤3可被应用以确定边缘滤波强度的值。在一个实施方式中，若边缘滤波强度决策过程的步骤3被应用，由于用于帧间已编码区块和帧内区块复制已编码区块的参考图像不同，则用于相关边界边缘的边缘滤波强度的值为1。
示例3。在区块边界处的区块均为帧内区块复制已编码。相似于示例2，区块均被分配特定的参考图像列表RefList值和参考图像索引值ref_idx值，以使得这些参数可在帧间去区块过程中被使用。在这种情况下，所有区块的参考图像列表RefList和参考图像索引ref_idx应该一样。先前提到的边缘滤波强度决策过程的步骤2和步骤3可被应用以确定边缘滤波强度的值。在一个实施方式中，若边缘滤波强度决策过程的步骤3被应用，基于如下至少一个因素，用于相关边界边缘的边缘滤波强度的值等于1或零，这些因素为：参考图像列表(RefList)、参考图像索引(RefIdx)、使用的区块向量的数量、与两个相邻帧内区块复制已编码区块相关的区块向量差值。举例来说，当两个相邻帧内区块复制已编码区块涉及相同的参考图像，以及与两个相邻帧内区块复制已编码区块的两个区块向量相同，则边缘滤波强度被设置为0；否则边缘滤波强度被设置为1。
基于ibc_flag的帧内区块复制的发送方式
示例1。在区块边界的一个区块为帧内已编码以及其他区块为帧内区块复制已编码。用于此边界边缘的边缘滤波强度的值为2。
示例2。在区块边界的一个区块为帧间已编码以及其他区块为帧内区块复制已编码。用于此边界边缘的边缘滤波强度的值为1。
示例2。在区块边界处的区块均为帧内区块复制已编码。此两个区块的两个区块向量称为BV0和BV1。若BV0和BV1的水平组分或垂直组分之间的绝对差值大于或等于N，则用于此边界边缘的边缘滤波强度的值等于1；否则，用于此边界边缘的的边缘滤波强度的值等于0。N可为1、2、4或其他整数。
帧内区块复制区块向量转移(shift)
在HEVC中，用于亮度组分的运动向量具有四分之一采样精度以用于帧间已编码区块。另一方面，用于帧内区块复制已编码区块的区块向量具有整数精度。根据本发明的实施方式，用于帧内区块复制已编码区块的区块向量被转换为具有与亮度组分的运动向量相同的精度。举例来说，在去区块滤波过程中，区块向量可左移两位。因此，已左移的区块向量具有与帧间已编码区块的运动向量相同的精度(precision)。
将包括本发明实施方式的系统的性能和基于SCM-3.0软件(屏幕编码测试模型版本3.0)的参照系统(anchor system)进行比较。包括本发明实施方式的系统基于ref_idx方法的帧内区块复制发送方式，以及边界滤波强度决策过程在示例1至示例3中进行描述，示例1至示例3与基于ref_idx的帧内区块复制发送方式相关。另一方面，基于SCM-3.0的系统将紧挨着区块边界的任意帧内区块复制已编码区块视为帧内区块。对各种测试视频数据进行了测试。基于BD率，进行了性能比较，其中BD率是在视频编码领域中已知的性能测量方法。在各种配置下进行性能比较，这些配置包括：全帧内(all-Intra)配置、随机存取(random access)配置、以及低延迟B(low-delay B)图像配置。基于上述比较，包括本发明实施方式的系统RD率(RD-Rate)比全帧内配置减少了1.3％，比随机存取配置减少了1.9％，比低延迟B图像配置减少了2.9％。
图6描述了包括帧内区块复制模式的编码系统的流程图，其中系统利用包括本发明实施方式的边界滤波强度推导。如步骤610所示，系统接收当前图片的两相邻已重建区块的输入数据，当前图片在两相邻已重建区块之间具有区块边界。输入数据包括由去区块滤波器滤波的两相邻区块的已重建数据。输入数据也可包括在区块边界两侧的两相邻区块相关的编码参数。对于编码来说，编码参数(coding parameters)可在编码器侧得到。对于解码来说，编码参数可自解码器接收的比特流而解析。输入数据可自存储器(例如，计算机存储器、缓冲器(RAM或DRAM)、或其他媒体)、或自处理器而被检索。在步骤620中，与两相邻已重建区块相关的一个或多个编码参数被确定。在步骤630中，“若至少一个相邻已重建区块为帧内区块复制已编码”被测试。若结果为“是”，则执行步骤640和步骤650。若结果为“否”，则跳过步骤640和步骤650，以及在此情况下，使用根据现有的HEVC(例如，SCM-3.0)的边界滤波强度决策过程。
上述的流程图用于描述根据本发明实施方式的帧内区块复制编码的示例。本领域技术人员可在不脱离本发明精神的前提下，修改、重排列、拆分、或组合各个步骤，以实现本发明。
在提供特定应用和其需求的情况下，以上描述使得本领域技术人员能够实现本发明。对本领域技术人员来说，各种修饰是清楚的，以及在此定义的基本原理可以应用与其他实施方式。因此，本发明并不限于描述的特定实施方式，而应与在此公开的原则和新颖性特征相一致的最广范围相符合。在上述详细描述中，为全面理解本发明，描述了各种特定细节。然而，本领域技术人员能够理解本发明可以实现。
以上描述的本发明的实施方式可在各种硬件、软件编码或两者组合中进行实施。例如，本发明的实施方式可为集成入视频压缩芯片的电路或集成入视频压缩软件以执行上述过程的程序代码。本发明的实施方式也可为在数据信号处理器(Digital SignalProcessor,DSP)中执行上述程序的程序代码。本发明也可涉及计算机处理器、数字信号处理器、微处理器或现场可编程门阵列(Field Programmable Gate Array,FPGA)执行的多种功能。可根据本发明配置上述处理器执行特定任务，其通过执行定义了本发明揭示的特定方法的机器可读软件代码或固件代码来完成。可将软件代码或固件代码发展为不同的程序语言与不同的格式或形式。也可为了不同的目标平台编译软件代码。然而，根据本发明执行任务的软件代码与其他类型配置代码的不同代码样式、类型与语言不脱离本发明的精神与范围。
在不脱离本发明精神或本质特征的情况下，可以其他特定形式实施本发明。描述示例被认为仅在所有方面进行说明并且不是限制性的。因此，本发明的范围由权利要求书指示，而非前面描述。所有在权利要求等同的方法与范围中的变化都属于本发明的涵盖范围。

Claims (19)

1.一种在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，该方法包括：
接收与当前图像的两相邻已重建区块相关的输入数据，该当前图片在该两相邻已重建区块之间具有区块边界；
确定与该两相邻已重建区块相关的一个或多个编码参数；以及
在该两相邻已重建区块中包括至少一帧内区块复制已编码区块，对于该两相邻已重建区块的至少一种组合方式：
基于该一个或两个编码参数，选择边界滤波强度为1或0；以及
利用该边界滤波强度，应用去区块滤波于该两相邻已重建区块的相邻采样，该两相邻已重建区块在该区块边界周围。
2.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，当每一个帧内区块复制已编码区块利用参考图像索引值而被发送，以及该两相邻已重建区块对应于一个帧内区块复制已编码区块和一个帧间已编码区块时，若该区块边界也为一个变换区块边缘以及该两相邻已重建区块中的至少一个具有非零系数，则该边界滤波强度被设置为1。
3.根据权利要求2所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，若该区块边界不是一个变换区块边缘或者该两个相邻已重建区块均不具有非零系数，则根据选自编码参数组的一个或多个因素，该边界滤波强度被设置为1或0，该编码参数组包括参考图像列表、参考图像索引、使用的运动向量的数量，以及与该两相邻已重建区块相关的运动向量差值。
4.根据权利要求2所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，若该区块边界不是一个变换区块边缘或该两个相邻已重建区块均不具有非零系数，则该边界滤波强度被设置为1。
5.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，当每一个帧内区块复制已编码区块利用参考图像索引值而被发送，以及该两相邻已重建区块对应于两个帧内区块复制已编码区块时，若该区块边界也为一个变换区块边缘以及该两相邻已重建区块中的至少一个具有非零系数，则该边界滤波强度被设置为1。
6.根据权利要求5所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，若该区块边界不是一个变换区块边缘或者该两个相邻已重建区块均不具有非零系数，则根据选自编码参数组的一个或多个因素，该边界滤波强度被设置为1或0，该编码参数组包括参考图像列表、参考图像索引、使用的区块向量的数量，以及与该两相邻已重建区块相关的运动向量差值。
7.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，当每一个帧内区块复制已编码区块利用参考图像索引值而被发送，以及该两相邻已重建区块对应于一个帧内区块复制已编码区块和一个帧间已编码区块时，特定参考图像索引被分配至该帧内区块复制已编码区块。
8.根据权利要求7所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，该当前图像用作参考图像以用于该帧内区块复制已编码区块。
9.根据权利要求8所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，该当前图像被分配至对应于L0和L1的参考图像列表、或不同于L0和L1的、与L0和L1相区分的参考图像列表。
10.根据权利要求7所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，该特定参考图像索引对应于在当前条带头中不由常规的帧间参考图像使用的值。
11.根据权利要求10所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，该特定参考图像索引对应于-1、或在参考图像列表L0或参考图像列表L1中的参考图像索引的总数。
12.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，当每一个帧内区块复制已编码区块利用参考图像索引值而被发送，以及该两相邻已重建区块对应于两个帧内区块复制已编码区块时，相同的特定参考图像列表和相同的特定参考图像索引被分配至该两个帧内区块复制已编码区块。
13.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，当每一个帧内区块复制已编码区块利用帧内区块复制标志而被发送，该两相邻已重建区块对应于一个帧内区块复制已编码区块和一个帧间已编码区块时，则该边界滤波强度被设置为1。
14.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，当每一个帧内区块复制已编码区块利用帧内区块复制标志而被发送，该两相邻已重建区块对应于两个帧内区块复制已编码区块时，若与该两帧内区块复制已编码区块相关的两个区块矢量的差值大于或等于一阈值，则该边界滤波强度被设置为1，否则该边界滤波强度被设置为0。
15.根据权利要求14所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，该阈值对应于1、或2、或4。
16.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，若该两相邻已重建区块中的任意一个已重建区块是来自参考其他图像的补偿区块，则该已重建区块关于该边界滤波强度的选择时被视为帧间已编码区块。
17.根据权利要求1所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，对于在该区块边界的一侧的每一个帧内区块复制已编码区块，关于基于该一个或两个编码参数，选择该边界滤波强度为1或0，每一个帧内区块复制已编码区块的区块向量被转换至四分之一采样精度。
18.根据权利要求17所述的在包括帧内区块复制模式的视频编码系统中对区块边界应用去区块滤波的方法，其特征在于，通过左移两位该区块向量，每一个帧内区块复制已编码区块的该区块向量被转换为四分之一采样精度。
19.一种在包括帧内区块复制模式的视频编码系统中应用去区块滤波于区块边界的装置，其特征在于，该装置包括一个或多个电子装置，被配置为：
接收与当前图像的两相邻已重建区块相关的输入数据，该当前图片在该两相邻已重建区块之间具有区块边界；
确定与该两相邻已重建区块相关的一个或多个编码参数；以及
在该两相邻已重建区块中包括至少一帧内区块复制已编码区块，对于该两相邻已重建区块的至少一种组合方式：
基于该一个或两个编码参数，选择边界滤波强度为1或0；以及
利用该边界滤波强度，应用去区块滤波于该两相邻已重建区块的相邻采样，该两相邻已重建区块在该区块边界周围。
CN201580048875.1A 2014-09-15 2015-08-26 在视频编码中用于帧内区块复制的去区块滤波方法和装置 Active CN107079162B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010722532.1A CN111988606B (zh) 2014-09-15 2015-08-26 去区块滤波方法、相应地编码装置和存储介质

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462050258P 2014-09-15 2014-09-15
US62/050,258 2014-09-15
PCT/US2015/046887 WO2016043933A1 (en) 2014-09-15 2015-08-26 Method of deblocking for intra block copy in video coding

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202010722532.1A Division CN111988606B (zh) 2014-09-15 2015-08-26 去区块滤波方法、相应地编码装置和存储介质

Publications (2)

Publication Number Publication Date
CN107079162A true CN107079162A (zh) 2017-08-18
CN107079162B CN107079162B (zh) 2020-08-21

Family

ID=55533683

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202010722532.1A Active CN111988606B (zh) 2014-09-15 2015-08-26 去区块滤波方法、相应地编码装置和存储介质
CN201580048875.1A Active CN107079162B (zh) 2014-09-15 2015-08-26 在视频编码中用于帧内区块复制的去区块滤波方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202010722532.1A Active CN111988606B (zh) 2014-09-15 2015-08-26 去区块滤波方法、相应地编码装置和存储介质

Country Status (5)

Country Link
US (2) US10743034B2 (zh)
EP (1) EP3178228B1 (zh)
KR (1) KR102008592B1 (zh)
CN (2) CN111988606B (zh)
WO (1) WO2016043933A1 (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019144732A1 (en) * 2018-01-29 2019-08-01 Mediatek Inc. Length-adaptive deblocking filtering in video coding
CN110677662A (zh) * 2018-07-02 2020-01-10 北京字节跳动网络技术有限公司 Hmvp+非相邻运动
CN111436226A (zh) * 2018-11-12 2020-07-21 北京字节跳动网络技术有限公司 用于帧间预测的运动矢量存储
US20200413044A1 (en) 2018-09-12 2020-12-31 Beijing Bytedance Network Technology Co., Ltd. Conditions for starting checking hmvp candidates depend on total number minus k
US11134267B2 (en) 2018-06-29 2021-09-28 Beijing Bytedance Network Technology Co., Ltd. Update of look up table: FIFO, constrained FIFO
US11140385B2 (en) 2018-06-29 2021-10-05 Beijing Bytedance Network Technology Co., Ltd. Checking order of motion candidates in LUT
US11140383B2 (en) 2019-01-13 2021-10-05 Beijing Bytedance Network Technology Co., Ltd. Interaction between look up table and shared merge list
US11146785B2 (en) 2018-06-29 2021-10-12 Beijing Bytedance Network Technology Co., Ltd. Selection of coded motion information for LUT updating
US11159817B2 (en) 2018-06-29 2021-10-26 Beijing Bytedance Network Technology Co., Ltd. Conditions for updating LUTS
US11159807B2 (en) 2018-06-29 2021-10-26 Beijing Bytedance Network Technology Co., Ltd. Number of motion candidates in a look up table to be checked according to mode
US11528500B2 (en) 2018-06-29 2022-12-13 Beijing Bytedance Network Technology Co., Ltd. Partial/full pruning when adding a HMVP candidate to merge/AMVP
US11528501B2 (en) 2018-06-29 2022-12-13 Beijing Bytedance Network Technology Co., Ltd. Interaction between LUT and AMVP
US11589071B2 (en) 2019-01-10 2023-02-21 Beijing Bytedance Network Technology Co., Ltd. Invoke of LUT updating
US11641483B2 (en) 2019-03-22 2023-05-02 Beijing Bytedance Network Technology Co., Ltd. Interaction between merge list construction and other tools
US11895318B2 (en) 2018-06-29 2024-02-06 Beijing Bytedance Network Technology Co., Ltd Concept of using one or multiple look up tables to store motion information of previously coded in order and use them to code following blocks
US11956464B2 (en) 2019-01-16 2024-04-09 Beijing Bytedance Network Technology Co., Ltd Inserting order of motion candidates in LUT

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10856009B2 (en) * 2014-09-04 2020-12-01 Mediatek Inc. Method of block vector clipping and coding for screen content coding and video coding
CN115134607A (zh) 2015-06-11 2022-09-30 杜比实验室特许公司 使用自适应去块滤波编码和解码图像的方法及其装置
US10582206B2 (en) * 2016-04-06 2020-03-03 Telefonaktiebolaget Lm Ericsson (Publ) Methods, encoder, and transcoder for transcoding
US10735725B2 (en) 2016-09-14 2020-08-04 Microsoft Technology Licensing, Llc Boundary-intersection-based deblock filtering
EP3610649A1 (en) * 2017-04-11 2020-02-19 VID SCALE, Inc. 360-degree video coding using face continuities
US11032545B2 (en) 2017-06-29 2021-06-08 Qualcomm Incorporated Reducing seam artifacts in 360-degree video
WO2020005031A1 (ko) * 2018-06-28 2020-01-02 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
EP3895433A4 (en) 2019-01-10 2022-02-23 Huawei Technologies Co., Ltd. UNBLOCK FILTER FOR SUBPARTITION BOUNDARIES CAUSED BY INTRA-SUBPARTITION ENCODING TOOL
US11012686B2 (en) * 2019-03-08 2021-05-18 Tencent America LLC Unified block vector prediction for intra picture block compensation
WO2020185009A1 (ko) 2019-03-12 2020-09-17 현대자동차주식회사 잔차블록을 효율적으로 코딩하는 방법 및 장치
CN117176969A (zh) * 2019-05-11 2023-12-05 抖音视界有限公司 用于视频编解码的去方块滤波器
US11487939B2 (en) * 2019-05-15 2022-11-01 Salesforce.Com, Inc. Systems and methods for unsupervised autoregressive text compression
CN114424560A (zh) * 2019-09-20 2022-04-29 北京字节跳动网络技术有限公司 用于屏幕内容的自适应分辨率变化和可缩放编解码
WO2020251420A2 (en) * 2019-10-05 2020-12-17 Huawei Technologies Co., Ltd. Removing blocking artifacts inside coding unit predicted by intra block copy
US11516477B2 (en) * 2021-02-11 2022-11-29 Qualcomm Incorporated Intra block copy scratch frame buffer

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100260264A1 (en) * 2001-09-14 2010-10-14 Shijun Sun Adaptive filtering based upon boundary strength
US20120281762A1 (en) * 2009-03-05 2012-11-08 Qualcomm Incorporated System and method to process motion vectors of video data
CN103947208A (zh) * 2011-09-13 2014-07-23 联发科技股份有限公司 减少解块滤波器的方法及装置
US20140226721A1 (en) * 2012-07-11 2014-08-14 Qualcomm Incorporated Repositioning of prediction residual blocks in video coding

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100679035B1 (ko) * 2005-01-04 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
JP2011040966A (ja) * 2009-08-10 2011-02-24 Renesas Electronics Corp 画像処理装置、画像処理方法及びプログラム
JP5859568B2 (ja) * 2011-03-10 2016-02-10 メディア テック シンガポール ピーティーイー．リミテッド 非ブロック化フィルタの方法と装置
IN2014CN03020A (zh) * 2011-11-04 2015-07-03 Panasonic Corp
PL4024864T3 (pl) * 2011-11-04 2024-03-18 Lg Electronics, Inc. Sposób i aparat do kodowania/dekodowania informacji wideo
AU2013248857B2 (en) * 2012-04-16 2015-11-05 Hfi Innovation Inc. Method and apparatus for loop filtering across slice or tile boundaries
US10904551B2 (en) 2013-04-05 2021-01-26 Texas Instruments Incorporated Video coding using intra block copy
US10015515B2 (en) * 2013-06-21 2018-07-03 Qualcomm Incorporated Intra prediction from a predictive block
JP6359101B2 (ja) * 2013-10-14 2018-07-18 マイクロソフト テクノロジー ライセンシング，エルエルシー ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴
US20150271515A1 (en) * 2014-01-10 2015-09-24 Qualcomm Incorporated Block vector coding for intra block copy in video coding
US9832467B2 (en) * 2014-10-07 2017-11-28 Qualcomm Incorporated Deblock filtering for intra block copying

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100260264A1 (en) * 2001-09-14 2010-10-14 Shijun Sun Adaptive filtering based upon boundary strength
US20120281762A1 (en) * 2009-03-05 2012-11-08 Qualcomm Incorporated System and method to process motion vectors of video data
CN103947208A (zh) * 2011-09-13 2014-07-23 联发科技股份有限公司 减少解块滤波器的方法及装置
US20140226721A1 (en) * 2012-07-11 2014-08-14 Qualcomm Incorporated Repositioning of prediction residual blocks in video coding

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019144732A1 (en) * 2018-01-29 2019-08-01 Mediatek Inc. Length-adaptive deblocking filtering in video coding
CN111630857B (zh) * 2018-01-29 2022-04-15 联发科技股份有限公司 视频编解码方法/装置和相应非易失性计算机可读介质
CN111630857A (zh) * 2018-01-29 2020-09-04 联发科技股份有限公司 视频编解码中的长度自适应去块滤波
US11153607B2 (en) 2018-01-29 2021-10-19 Mediatek Inc. Length-adaptive deblocking filtering in video coding
US11146786B2 (en) 2018-06-20 2021-10-12 Beijing Bytedance Network Technology Co., Ltd. Checking order of motion candidates in LUT
US11695921B2 (en) 2018-06-29 2023-07-04 Beijing Bytedance Network Technology Co., Ltd Selection of coded motion information for LUT updating
US11245892B2 (en) 2018-06-29 2022-02-08 Beijing Bytedance Network Technology Co., Ltd. Checking order of motion candidates in LUT
US11134267B2 (en) 2018-06-29 2021-09-28 Beijing Bytedance Network Technology Co., Ltd. Update of look up table: FIFO, constrained FIFO
US11973971B2 (en) 2018-06-29 2024-04-30 Beijing Bytedance Network Technology Co., Ltd Conditions for updating LUTs
US11140385B2 (en) 2018-06-29 2021-10-05 Beijing Bytedance Network Technology Co., Ltd. Checking order of motion candidates in LUT
US11909989B2 (en) 2018-06-29 2024-02-20 Beijing Bytedance Network Technology Co., Ltd Number of motion candidates in a look up table to be checked according to mode
US11895318B2 (en) 2018-06-29 2024-02-06 Beijing Bytedance Network Technology Co., Ltd Concept of using one or multiple look up tables to store motion information of previously coded in order and use them to code following blocks
US11146785B2 (en) 2018-06-29 2021-10-12 Beijing Bytedance Network Technology Co., Ltd. Selection of coded motion information for LUT updating
US11877002B2 (en) 2018-06-29 2024-01-16 Beijing Bytedance Network Technology Co., Ltd Update of look up table: FIFO, constrained FIFO
US11706406B2 (en) 2018-06-29 2023-07-18 Beijing Bytedance Network Technology Co., Ltd Selection of coded motion information for LUT updating
US11153557B2 (en) 2018-06-29 2021-10-19 Beijing Bytedance Network Technology Co., Ltd. Which LUT to be updated or no updating
US11528501B2 (en) 2018-06-29 2022-12-13 Beijing Bytedance Network Technology Co., Ltd. Interaction between LUT and AMVP
US11159817B2 (en) 2018-06-29 2021-10-26 Beijing Bytedance Network Technology Co., Ltd. Conditions for updating LUTS
US11528500B2 (en) 2018-06-29 2022-12-13 Beijing Bytedance Network Technology Co., Ltd. Partial/full pruning when adding a HMVP candidate to merge/AMVP
US11159807B2 (en) 2018-06-29 2021-10-26 Beijing Bytedance Network Technology Co., Ltd. Number of motion candidates in a look up table to be checked according to mode
CN110677662A (zh) * 2018-07-02 2020-01-10 北京字节跳动网络技术有限公司 Hmvp+非相邻运动
US11134244B2 (en) 2018-07-02 2021-09-28 Beijing Bytedance Network Technology Co., Ltd. Order of rounding and pruning in LAMVR
US11463685B2 (en) 2018-07-02 2022-10-04 Beijing Bytedance Network Technology Co., Ltd. LUTS with intra prediction modes and intra mode prediction from non-adjacent blocks
US11153559B2 (en) 2018-07-02 2021-10-19 Beijing Bytedance Network Technology Co., Ltd. Usage of LUTs
US11134243B2 (en) 2018-07-02 2021-09-28 Beijing Bytedance Network Technology Co., Ltd. Rules on updating luts
US11153558B2 (en) 2018-07-02 2021-10-19 Beijing Bytedance Network Technology Co., Ltd. Update of look-up tables
US11159787B2 (en) 2018-09-12 2021-10-26 Beijing Bytedance Network Technology Co., Ltd. Conditions for starting checking HMVP candidates depend on total number minus K
US11997253B2 (en) 2018-09-12 2024-05-28 Beijing Bytedance Network Technology Co., Ltd Conditions for starting checking HMVP candidates depend on total number minus K
US20200413044A1 (en) 2018-09-12 2020-12-31 Beijing Bytedance Network Technology Co., Ltd. Conditions for starting checking hmvp candidates depend on total number minus k
US20210297659A1 (en) 2018-09-12 2021-09-23 Beijing Bytedance Network Technology Co., Ltd. Conditions for starting checking hmvp candidates depend on total number minus k
CN111436226A (zh) * 2018-11-12 2020-07-21 北京字节跳动网络技术有限公司 用于帧间预测的运动矢量存储
US11589071B2 (en) 2019-01-10 2023-02-21 Beijing Bytedance Network Technology Co., Ltd. Invoke of LUT updating
US11909951B2 (en) 2019-01-13 2024-02-20 Beijing Bytedance Network Technology Co., Ltd Interaction between lut and shared merge list
US11140383B2 (en) 2019-01-13 2021-10-05 Beijing Bytedance Network Technology Co., Ltd. Interaction between look up table and shared merge list
US11956464B2 (en) 2019-01-16 2024-04-09 Beijing Bytedance Network Technology Co., Ltd Inserting order of motion candidates in LUT
US11962799B2 (en) 2019-01-16 2024-04-16 Beijing Bytedance Network Technology Co., Ltd Motion candidates derivation
US11641483B2 (en) 2019-03-22 2023-05-02 Beijing Bytedance Network Technology Co., Ltd. Interaction between merge list construction and other tools

Also Published As

Publication number Publication date
US11297352B2 (en) 2022-04-05
US20170302966A1 (en) 2017-10-19
KR102008592B1 (ko) 2019-08-07
CN107079162B (zh) 2020-08-21
US20200351521A1 (en) 2020-11-05
KR20170053696A (ko) 2017-05-16
EP3178228B1 (en) 2023-10-04
EP3178228A4 (en) 2018-02-21
US10743034B2 (en) 2020-08-11
CN111988606B (zh) 2022-09-20
EP3178228A1 (en) 2017-06-14
CN111988606A (zh) 2020-11-24
WO2016043933A1 (en) 2016-03-24

Similar Documents

Publication Publication Date Title
CN107079162A (zh) 在视频编码中用于帧内区块复制的去区块方法
KR102185954B1 (ko) 영상 부호화 및 복호화 장치 및 그 방법
CN109644271B (zh) 用于二叉树分割块的确定候选集的方法及装置
CN106797466B (zh) 一种处理视频数据的方法及装置
US9641863B2 (en) Apparatus and method of sample adaptive offset for video coding
DK2391129T3 (en) New planar prediction mode
CN107852505A (zh) 用于使用帧内块复制模式的视频解码错误处理的方法和装置
EP2515542A2 (en) Video signal decoding method and device
US10681371B2 (en) Method and device for performing deblocking filtering
BR112014004922B1 (pt) Aparelho para decodificação de informações de movimento em modo de fusão
CN111937392B (zh) 视频编解码的神经网络方法和装置
CN103947208A (zh) 减少解块滤波器的方法及装置
KR102648464B1 (ko) 지도 학습을 이용한 영상 개선 방법 및 장치
CN108028924B (zh) 用于编码/解码图像的方法及其装置
CN111083486A (zh) 一种确定编码单元的色度信息的方法和装置
CN105874802A (zh) 处理视频信号以便减小块赝像的可见性的方法和装置
US20230044603A1 (en) Apparatus and method for applying artificial intelligence-based filtering to image
KR20180009358A (ko) 영상의 부호화/복호화 방법 및 이를 위한 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant