CN103891292A - 非跨图块环路滤波方法及其装置 - Google Patents

非跨图块环路滤波方法及其装置 Download PDF

Info

Publication number
CN103891292A
CN103891292A CN201280050785.2A CN201280050785A CN103891292A CN 103891292 A CN103891292 A CN 103891292A CN 201280050785 A CN201280050785 A CN 201280050785A CN 103891292 A CN103891292 A CN 103891292A
Authority
CN
China
Prior art keywords
block boundary
loop filtering
segment
pixel
filtering processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280050785.2A
Other languages
English (en)
Other versions
CN103891292B (zh
Inventor
徐志玮
蔡家扬
黄毓文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HFI Innovation Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN103891292A publication Critical patent/CN103891292A/zh
Application granted granted Critical
Publication of CN103891292B publication Critical patent/CN103891292B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

本发明揭露一种视频数据环路滤波处理方法及其装置。根据本发明的实施例去除跨图块边界的相关环路处理的数据依赖。根据一实施例，如果禁用跨图块环路处理，则重新配置环路处理以去除跨图块边界的数据依赖。上述环路滤波处理对应于DF(去块滤波)、SAO(样本自适应偏移)处理或ALF(自适应环路滤波)处理。对于至少一个图块边界可跳过上述处理。在另一实施例中，使用基于当前图块的像素的数据填充或修改像素分类轨迹以去除跨图块边界的数据依赖。可使用在序列、图像或条带层编码的旗标指示是否禁用跨图块环路处理以说明是否允许跨至少一个图块边界的数据依赖。

Description

非跨图块环路滤波方法及其装置
交叉引用
本发明要求如下优先权：编号为61／550,636，申请日为2011年10月24日，名称为“Non-Cross-Tiles Loop Filtering”的美国临时专利申请；编号为61／554,601，申请日为2011年11月2日，名称为“Non-Cross-Tiles Loop Filtering and Syntax Design”的美国临时专利申请；编号为61／558,664，申请日为2011年11月11日，名称为“Tile InformationAdaptation”的美国临时专利申请。上述美国临时专利申请在此一并作为参考。
技术领域
本发明涉及一种视频编码。特别地，本发明涉及一种与在图块(tile)边界处滤波、处理相关联的视频编码技术。
背景技术
运动估计(motion estimation)是利用视频序列中时间冗余(temporalredundancy)的一种有效帧间编码技术。运动补偿帧间编码(motioncompensated inter-frame coding)已经广泛应用于各种国际视频编码标准。在各种编码标准中采用的运动估计是通常以区块(block)为基础的技术，其中为每个宏块(macroblock)或相似区块配置确定运动信息，例如编码模式与运动矢量。此外，也可自适应地采用帧内编码(intra-coding)，其中在无需参考任何其他图像的情况下处理图像。通常可进一步由变换(transformation)、量化(quantization)以及熵编码(entropy coding)处理帧间预测或帧内预测残差(residue)以生成压缩视频比特流。在编码期间，尤其是在量化进程中引入编码伪影(coding artifact)。为了减轻编码伪影，在较新的编码系统中可对重建视频采用附加处理从而提高图像品质。通常在环内操作(in-loop operation)中配置上述附加处理从而使得编码器与解码器可得到相同的参考图像从而改善系统性能。
图1描述包含环内滤波处理的示例自适应帧间／帧内视频编码系统。对于帧间预测，可使用运动估计(Motion Estimation，ME)／运动补偿(Motion Compensation，MC)112基于其他图像的视频数据提供预测数据。开关114选择帧内预测110或来自ME／MC112的帧间预测数据并且将选择的预测数据提供至加法器116以生成预测误差(prediction error)，也称为残差。然后变换(T)118处理预测误差，接着量化(Q)120处理预测误差。然后，熵编码器122编码已变换及已量化的残差从而生成对应压缩视频数据的视频比特流。接着，将边信息(side information)加入与变换系数相关联的比特流，其中上述边信息可为例如与图像单元相关联的运动、模式及其他信息。上述边信息也可进行熵编码处理以减小需求带宽。相应地，如图1所示，将边信息数据提供至熵编码器122(连接熵编码器122的运动／模式路径未示出)。当使用帧间预测模式时，必须使用先前重建参考图像以生成预测残差。因此，使用重建环路在编码器端生成重建图像。因此，逆量化(Inverse Quantization，IQ)124与逆变换(Inverse Transformation，IT)126处理上述已变换及已量化残差以恢复上述已处理残差。接着重建(REC)128将上述已处理残差叠加至预测数据136以重建视频数据。可将上述重建视频数据储存至参考图像缓冲器134中并且将上述重建视频数据用于预测其他帧。
如图1所示，接收的视频数据在编码系统中经过一系列处理。由于上述一系列处理，来自REC128的重建视频数据经受了各种损害。因此，在重建视频数据用作预测数据之前对上述重建视频数据应用各种环路处理从而改善视频品质。在当前发展的高效率视频编码(HighEfficiency Video Coding，HEVC)标准中，已经发展出了去块滤波器(Deblocking Filter,DF)130、样本自适应偏移(Sample Adaptive Offset，SAO)131与自适应环路滤波器(Adaptive Loop Filter,ALF)132以提高图像品质。可将去块滤波器(DF)130应用于边界像素(boundary pixel)并且DF处理依赖于与相应区块相关联的基础像素数据与编码信息。无需将任何特定DF边信息合并入视频比特流中。另一方面，SAO与ALF处理是自适应的，其中可根据基础视频数据动态改变类似滤波器参数与滤波器类型的滤波器信息。因此，将与SAO、ALF相关联的滤波器信息合并入视频比特流中，从而使得解码器可正确恢复所需信息。因此，向熵编码器122提供来自SAO与ALF的滤波器信息用于合并入比特流中。在图1中，首先对重建视频应用DF130；接着将SAO131应用于DF已处理视频；然后将ALF132应用于SAO已处理视频。然而，也可重新调整DF、SAO、ALF的处理顺序。在H.264／AVC视频标准中，自适应滤波器仅包含DF。在当前发展的高效率视频编码(HEVC)视频标准中，环路滤波处理包含DF、SAO与ALF。在本揭露书中，将环内滤波称为无需将边信息并入视频比特流情况下在基础视频数据中执行环路滤波处理。另一方面，将自适应滤波称为使用并入视频比特流的边信息情况下自适应地在基础视频数据中执行环路滤波处理。例如，可将去块滤波看作环内滤波，同时将SAO与ALF看作自适应滤波。在本揭露书中，也可将环内滤波与自适应滤波称为环路滤波。
依据最大编码单元(Largest Coding Unit，LCU)应用HEVC中的编码进程。可使用四叉树划分(quadtree)自适应地将LCU分割为编码单元。在每个叶编码单元(Leaf CU)中，对每个8×8区块执行DF并且在HEVC测试模型版本4.0(HM-4.0)中，将DF应用于8×8区块的边界。对于每个8×8区块，首先采用跨垂直区块边界的水平滤波，然后接着采用跨水平区块边界的垂直滤波。图2A描述在区块边界每侧具有4个边界像素的垂直区块边界210的示意图。将边界像素称为q0、q1、q2、q3以及p0、p1、p2、p3，其中q0与p0是紧邻垂直边界的两个像素。图2B描述在区块边界每侧具有4个边界像素的水平区块边界220的示意图。同样，将边界像素称为q0、q1、q2、q3以及p0、p1、p2、p3，其中q0与p0是紧邻水平边界的两个像素。对于每幅图像，可并行地水平滤波跨一个或多个垂直边界的边界像素行以提高处理速度。在跨垂直边界进行水平滤波后，可并行地垂直滤波跨一个或多个水平边界的边界像素列。对于亮度组分的DF处理，使用每侧的四个像素(即p0至p3或q0至q3)导出滤波参数。然而，在DF处理后，仅可改变每侧的三个像素(即p0至p2或q0至q2)。对于亮度组分的水平DF，使用先前DF像素(即水平DF之前的像素)以导出滤波参数并且也使用先前DF像素作为DF滤波的输入数据。对于亮度组分的垂直DF，使用先前DF像素导出滤波参数，并且使用H-DF像素(即水平DF后的像素)作为DF滤波的输入数据。对于色度区块边界的DF处理，使用每侧的两个像素，即(p0，p1)或(q0，q1)，以导出滤波参数，并且在DF滤波后最多改变每侧的一个像素，即p0或q0。对于跨垂直区块边界的水平滤波，可将重建像素(即先前DF像素)用于滤波参数导出并且将其用作滤波的源像素。对于跨水平区块边界的垂直滤波，可将水平DF处理像素(即在水平滤波后的像素)用于滤波参数导出并且将其用作DF滤波的输入像素。
如图1所示，在HM-4.0中也采用样本自适应偏移(SAO)131。可将SAO视为一种滤波处理仅应用于一个像素的特定情况。SAO可将一幅图像划分为多个LCU对齐区域(LCU-aligned region)，并且每个区域可在两种带偏移(Band Offset，BO)类型、四种边偏移(Edge Offset，EO)类型以及非处理(OFF)中选择一种SAO类型。对于每个待处理(也称为待滤波)的像素，BO使用像素强度(pixel intensity)将像素归类于带中。如图3所示，像素强度范围可平均分为32个带。在像素分类后，为每个带中的所有像素取得一个偏移量，并且选择并编码中心16个带或外围16个带的偏移量。在EO中，首先实施像素分类以将像素分为不同组(也称为类)。如图4所示，每个像素的像素分类以3×3窗口为基础，其中四个对应0°、90°、135°与45°的配置用于分类。基于图像或区域中所有像素分类，导出一个偏移量并且发送给每组像素。在HM-4.0中，将SAO用于亮度与色度组分，并且独立处理每个亮度组分。与BO相似，除了类别0，为每个类别的所有像素导出一个偏移量，其中类别0强制使用零偏移量。下述列表1列举了EO像素分类，其中“C”表示待分类的像素。
列表1.
类别 条件
1 C<两个相邻像素值
2 C<一个相邻像素值＆＆C==一个相邻像素值
3 C>一个相邻像素值＆＆C==一个相邻像素值
4 C>两个相邻像素值
0 其他
如图1所示，自适应环路滤波(ALF)132是HM-4.0中的另一种提高图像品质的环内滤波。可使用多种类型的亮度滤波轨迹(footprint)与色度滤波轨迹。例如，图5A所示为11×5十字形滤波器以及图5B所示为5×5雪花形滤波器。每幅图像可为亮度信号选择一种滤波形状以及为色度信号选择一种滤波形状。首先在水平方向应用ALF操作。在执行水平ALF后，在垂直方向应用ALF。在HM-4.0中，可为每幅图像使用多达十六种亮度ALF滤波以及最多一种色度ALF滤波。为了允许ALF局部化，存在用于亮度像素的两种模式以选择滤波器。一种模式是基于区域自适应(Region-based Adaptation，RA)模式，以及另一种模式是基于区块自适应(Block-based Adaptation，BA)模式。除了在图像层用于自适应模式选择的RA与BA，滤波使用旗标(filter usage flag)可进一步控制大于阈值的编码单元(CU)以局部地启动或禁用ALF操作。至于色度组分，既然它们相对较一致，则在HM-4.0中不使用局部自适应，并且图像的两个色度组分共享相同的滤波器。
RA模式简单地将一幅亮度图像分割为16个区域。一旦获知图像尺寸，则确定上述16个区域。上述区域可合并，并且在合并后可对每个区域使用一种滤波器。因此，对于RA模式，最多为每幅图像发送16种滤波器。另一方面，BA模式使用边缘活动与方向作为每个4×4区块的特性。计算4×4区块的特性需要相邻像素。例如，如图6所示，在HM-4.0中将5×5窗口610用于相关4×4窗口620。在计算完4×4区块的特性后，将区块分为15个类别。上述类别可进行合并，并且在合并后为每个类别使用一种滤波器。因此，对于BA模式，最多发送15种滤波器。对于色度组分，既然色度组分相对平顺(smooth)，则不使用局部自适应。图像的两个色度组分共享相同的ALF滤波信息。
在HEVC测试模型版本4.1(HEVC Test Model Version4.1，HM-4.1)，引入新的图像单元结构，称为图块(tile)。图6显示将图像分割成多个图块的示例，其中分割单元为最大编码单元(Largest Coding Unit，LCU)。粗线710、712、720与722指示图块边界。因此，将图7的图像分割为九个图块，标记为A至I。在每个图块中，LCU的处理顺序是根据如关联LCU的相关数字所示的循序扫描顺序。在每幅图像中，图块的处理顺序也可根据循序扫描顺序。换句话说，图块的处理顺序是从图块A至图块I。图块边界与LCU边界对齐。可独立配置条带与图块。因此，一个条带可跨多个图块，并且一个图块也可跨多个条带。
存在两种类型的图块：独立图块(independent tile)与非独立图块(dependent tile)。独立图块主要用于并行处理。一个图块中的重建LCU(例如MV预测、帧内预测、熵编码)与DF不需要来自其他图块的任何数据。然而，在发展中的现存HEVC系统中，对一个图块的SAO与ALF操作仍需要来自相邻图块的数据。因此，在图块层面上SAO与ALF对数据的依赖性会限制上述并行处理。以自适应参数集合(Adaptation Parameter Set，APS)形式发送SAO与ALF参数。除了SAO与ALF，其他非DF环内滤波工具也可将相关参数合并入APS中。
在HM-4.0中，将图块参数编码入序列参数集合(SequenceParameter Set，SPS)或图像参数集合。图块参数num_tile_comlumn_minusl与num_tile_row_minusl分别指示在列与行方向上的图块分割数量。每幅图像的图块数量可由(num_tile_comlumn_minusl+1)与(num_tile_row_minusl+1)相乘得出。此外，使用旗标tile_boundary_independent_idc指示是否允许跨图块边界的数据依赖(data dependency)。如果tile_boundary_independent_idc等于1，则说明独立图块处理。在这种情况下不允许跨图块边界的数据依赖。否则，图块是非独立图块并且允许跨图块边界的数据依赖。此外，将旗标tile_info_present_flag合并入PPS以指示在PPS或SPS中是否存在图块参数。例如，如果将两个图块参数集合合并入SPS与PPS，则使用tile_info_present_flag确定使用哪一个图块参数集合。例如，如果tile_info_present_flag等于1，则说明使用PPS中的图块分割参数。否则，使用SPS中的图块参数。
为了支持包含自适应环路滤波器(例如SAO与ALF)的系统的并行图块处理，需要发展一种无跨图块边界数据依赖的自适应环路滤波器。
发明内容
本发明揭露一种视频数据环路滤波处理方法及其装置。根据本发明的实施例去除跨图块边界的相关环路处理的数据依赖。根据本发明一实施例，如果禁用跨图块环路处理，则重新配置环路处理以去除跨图块边界的数据依赖。重新配置所述环路滤波处理对应于跳过所述环路滤波处理、使用数据填充替换跨图块边界的相邻图块的像素，或者修改像素分类或滤波轨迹以去除跨至少一个图块边界的数据依赖。上述环路滤波处理对应于DF(去块滤波)、SAO(样本自适应偏移)处理或ALF(自适应环路滤波)处理。对于DF，在至少一个图块边界跳过上述处理。对于SAO，重新配置环路处理对应于对至少一个图块边界跳过环路滤波处理、基于当前图块的像素使用数据填充替换跨图块边界的相邻图块的像素，或者修改像素分类轨迹以去除跨图块边界的数据依赖。对于ALF，重新配置环路处理对应于对至少一个图块边界跳过环路滤波处理、基于当前图块的像素使用数据填充替换跨图块边界的相邻图块的像素，或者修改滤波轨迹以去除跨图块边界的数据依赖。
根据本发明另一实施例，可修改滤波信息确定以去除跨图块边界的数据依赖并且也重新配置环路处理以消除跨图块边界的数据依赖。上述环路滤波处理对应于DF(去块滤波)、SAO(样本自适应偏移)处理或ALF(自适应环路滤波)处理。
本发明的一方面提出关于是否允许跨图块环路处理的指标。在一实施例中，使用旗标指示是否禁用跨图块环路处理，其中在序列、图像或条带层编码旗标以指示是否允许跨至少一个图块边界的数据依赖。在图像仅包含一个图块的情况下，无需使用上述旗标。
附图说明
图1描述使用帧内／帧间预测的视频编码系统示意图，其中上述系统对应包括去块滤波(DF)、样本自适应偏移(SAO)与自适应环路滤波(ALF)的环路滤波处理。
图2A描述在去块滤波器中垂直边界两侧的像素。
图2B描述在去块滤波器中水平边界两侧的像素。
图3描述将像素强度范围平均分为32个带的带偏移(BO)示意图。
图4描述基于3×3窗口的边偏移(EO)像素分类，其中上述分类具有根据0°、90°、135°与45°的四种配置。
图5A描述自适应环路滤波器(ALF)的11×5十字形滤波器。
图5B描述自适应环路滤波器(ALF)的5×5雪花形滤波器。
图6描述使用具有5×5支持窗口的4×4基于区块适应(Block-basedAdaptation，BA)窗口的BA模式自适应环路滤波器(ALF)示意图。
图7描述将图像分割为三行三列图块的图块分割示例。
图8是根据本发明实施例描述的示例序列参数集合(SPS)语法设计。
图9是根据本发明实施例描述的示例图像参数集合(PPS)语法设计。
图10是根据本发明实施例描述的系统流程图。
具体实施方式
为了允许包含环路滤波器(例如DF、SAO、ALF)的系统的并行图块处理，根据本发明的实施例采用不依赖相邻图块数据的环路滤波器。如前所述，DF、SAO、ALF进程依赖相邻数据以导出参数与控制滤波。对于DF、SAO、ALF，滤波操作也依赖相邻像素。本发明去除在图块边界处的DF、SAO、ALF的数据依赖以允许独立的基于图块处理。可将跨图块边界的数据依赖仅应用于环路滤波处理。可选择地，将跨图块边界的数据依赖在应用于环路滤波处理的同时也应用于确定滤波信息(包含参数导出及／或滤波控制)。因此，本发明实施例允许并行处理图像中的图块。
在本发明一实施例中，使用数据填充(data padding)替换图块边界相邻图块中的所需像素。例如，将图5B中的5×5雪花滤波器应用于紧邻图块边界或距离图块边界仅一个像素的位置，ALF操作将需要来自相邻图块的某些像素数据。根据本实施例，通过填充替换用于ALF操作的相邻图块的所需像素数据。通过数据重复、线性外插、非线性外插或其他方法可实现数据填充以生成相邻图块中所需的数据。可采用许多方法取得数据重复。例如，可将紧邻图块边界的当前图块像素在相同行或相同列的相邻图块中进行重复以得到替换像素。可选择地，也可使用具有奇对称或偶对称的镜像填充(mirror padding)。对于具有奇对称的镜像填充，为相邻图块生成替换像素pn’，...，与p1’，其中p1’是紧邻图块边界的像素。当前图块中的相应像素为p0，p1，...，pn，其中p0是紧邻图块边界的像素。通过具有奇对称的镜像填充生成的替换像素是根据pn’=pn，...，p1’=p1进行的。对于偶对称，为相邻图块生成替换像素pn’，...，与p0’，其中p0’是紧邻图块边界的像素。首先跨垂直边界在水平方向上应用ALF，然后跨水平边界在垂直方向上应用ALF。
虽然上述环路滤波技术完全去除了跨图块边界的数据依赖，但本发明实施例也可减小上述数据依赖性而非完全去除上述数据依赖。例如，本发明一实施例仅可去除垂直方向上的数据依赖。因此，图块仅具有对当前图块左右两侧相邻图块的数据依赖。对于图7所示的图块分割，如果去除垂直数据依赖，则图块行A、B、C独立于图块行D、E、F。相似地，图块行D、E、F独立于图块行G、H、I。在这种情况下，可并行处理图块A、D、G。另一方面，如果去除水平数据依赖，则可并行处理图块A、B、C。也可将上述减小数据依赖技术应用于关联滤波信息确定的跨图块边界的数据依赖。
虽然上述环路滤波技术去除了跨图块边界的数据依赖，但根据本发明实施例的环路滤波效率仅轻微降低。根据本发明的实施例可采用附加进程以调整滤波输出。例如，上述滤波输出可与滤波器输入像素进行平均以得到最终ALF输出像素。也可使用滤波输出与滤波器输入像素的加权和作为最终ALF输出像素。因此，虽然ALF操作不需要来自相邻图块的任意像素数据，但可削弱潜在效率降低。通过数据填充生成替换像素的技术可应用于DF、SAO或其他环路滤波以去除跨图块边界的数据依赖。因此。可独立处理图块并且并行图块处理变为可能。如前所述，可部分去除数据依赖以允许部分并行处理，例如并行图块行处理或并行图块列处理。
在本发明另一实施例中，可通过跳过边界像素的环路滤波取得跨图块边界的数据依赖，其中上述环路滤波需要来自相邻图块的像素数据。例如，当图5B中的5×5雪花滤波器应用于紧邻图块边界或距离图块边界仅一个像素的位置时，ALF操作将需要来自相邻图块的某些像素。根据本实施例，将跳过紧邻图块边界或距离图块边界仅一个像素的位置处的ALF操作。因此，可独立处理图块并且并行图块处理变为可能。虽然使用ALF作为示例描述通过跳过图块边界像素的滤波操作实现去除数据依赖，其中图块边界像素的滤波处理需要来自相邻图块的像素数据，但也可将上述方案应用于其他环路滤波。例如，DF进程需要来自边界两侧的四个相邻亮度像素以确定滤波控制。因此，在图块边界(与区块边界对齐)，可跳过DF操作从而去除数据依赖。相似地，可在图块边界处跳过SAO操作以去除数据依赖。
在本发明另一实施例中，可为边界像素修改与参数导出／控制确定相关联的数据轨迹或滤波轨迹从而去除跨图块边界的数据依赖。例如，如图4所示，通过使用基础像素与两个相邻像素，基于EO的SAO执行基础像素的像素分类。可修改图4的像素配置(在本揭露书中也称为数据轨迹)以去除在图块边界处的数据依赖。例如，当紧邻图块左侧边界的像素采用0°EO时，需要相邻图块中的像素(基础像素的左侧)。根据本实施例，可修改数据轨迹，从而使得0°EO依赖上述基础像素与右侧像素。可相应修改列表1中所列的分类规则。相似地，可修改图4所示的其他轨迹以去除跨图块边界的数据依赖。
对于基于BA的ALF，为每个4×4区块确定边缘活动与方向。如图6所示，基于5×5窗口610计算每个4×4区块的边缘活动与方向。
根据本发明一实施例将修改5×5窗口(即5×5数据轨迹)以去除跨图块边界的数据依赖。因此，本发明实施例的用于环路滤波的轨迹可去除数据依赖。
当图块边界周围的滤波操作涉及数据依赖时，根据本发明的另一实施例可通过修改滤波轨迹去除数据依赖。例如，当图5A中的11×5十字形滤波器应用于紧邻图块边界左侧或距离左侧图块边界最多四个像素的位置时，ALF操作将需要来自相邻图块的某些像素。根据本发明的实施例将修改上述11×5十字形滤波器以去除跨图块边界的数据依赖。例如，当上述滤波器应用于紧邻左侧图块边界的像素时，可通过消除左侧的五个像素从而修改滤波轨迹。当上述滤波器应用于距左侧图块边界两个像素的位置时，可通过消除左侧的三个像素从而修改滤波轨迹。可根据其他边界位置修改上述滤波轨迹。当修改上述滤波轨迹时，为体现已修改的轨迹，需要标准化滤波器系数。虽然使用上述11×5十字形滤波器作为示例，但本领域技术人员可将滤波轨迹修改扩展到其他类型的滤波器中。
可根据条件执行上述的数据依赖去除并且使用类似旗标的指示发信号表示是否启用数据依赖去除。例如，可将旗标合并入序列、图像或条带层从而指示是否使用非跨图块(non-cross-tile)环路滤波。对于仅具有一个图块的图像，不存在数据依赖的问题并且无需使用上述旗标。图8所示的是根据本发明实施例的示例SPS语法设计。区块810与820指示基于HM4.0传统系统的语法设计的改变。将SPS与PPS中的控制旗标loop_filter_across_tile_flag合并入上述语法从而指示环路滤波进程是否跨图块。如果使用非跨图块环路滤波，即loop_filter_across_tile_flag等于0，则对基础图块的环路滤波不使用其他图块的像素。否则将环路滤波应用于跨图块边界。如果tile_boundary_independent_flag等于0，其指示禁止独立图块，则不编码控制旗标loop_filter_across_tile_flag。如果num_tile_columns_minusl与num_tile_rows_minusl(即一个图块列与一个图块行)皆等于0，其指示图像仅包含一个图块，则不编码旗标loop_filter_across_tile_flag。既然使用新的语法单元loop_filter_across_tile_fiag与tile_boundary_independent_flag指示图块边界依赖性，因此无需tile_boundary_independence_idc。因此，如图8的区块810所示，从基于HM4.0的传统语法设计中删除上述语法单元。
如图9所示的区块910，将控制当前旗标tile_control_present_flag合并入PPS语法中以指示是否在PPS中发讯说明图块独立性。如果tile_control_present_flag等于0，如区块930所示，将不存在图像层图块独立指标。在这种情况下在图像层使用序列层旗标loop_filter_across_tile_flag。如果tile_control_present_flag等于1，则图像层包含其自身控制旗标loop_filter_across_tile_flag。然而，如果如tile_boundary_independent_flag等于0所示禁止独立图块或图像仅有一个图块，则无需控制旗标loop_filter_across_tile_flag。
图10是根据本发明实施例描述的系统流程示意图。在步骤1010，接收与图像相关联的视频数据，其中将图像分割为一个或多个图块。接着在步骤1020，确定与上述一个或多个图块相关联的图块边界。在步骤1030，检查环路滤波处理是否需要跨至少一个图块边界的相邻图块的至少一个像素。如果答案为“是”，则在步骤1040，执行重新配置环路滤波处理以去除跨当前图块至少一个图块边界的数据依赖，并且在步骤1050，将环路滤波处理应用于上述一个或多个图块的像素。如果答案为“否”，则进程直接进入步骤1050。虽然图10是根据一实施例描述的流程示意图，但本领域技术人员可重排步骤以在不脱离本发明精神的情况下实施本发明。例如，可将使用旗标启动或禁用跨图块边界处理的步骤加入到上述流程图中。在另一示例中，也可将修改确定滤波信息以去除跨图块边界的数据依赖的步骤加入至上述流程图。
图8与图9所示的SPS与PPS的示例语法设计分别描述了启动图块依赖控制的特定实施例。本领域技术人员也可使用其他语法元素或重排控制流程以在不脱离本发明精神的情况下实施本发明。
呈现上述描述以允许本领域技术人员根据特定应用以及其需要的内容实施本发明。所述实施例的各种修改对于本领域技术人员来说是显而易见的，并且可将上述定义的基本原则应用于其他实施例。因此，本发明不局限于所述的特定实施例，而是符合与揭露的原则及新颖特征相一致的最宽范围。在上述细节描述中，为了提供对本发明的彻底理解，描述了各种特定细节。然而，本领域技术人员可以理解本发明是可实施的。
上述的本发明实施例可在各种硬件、软件编码或两者组合中进行实施。例如，本发明实施例可为集成入视频压缩芯片的电路或集成入视频压缩软件以执行上述过程的程序代码。本发明的实施例也可为在数据信号处理器(Digital Signal Processor，DSP)中执行的执行上述程序的程序代码。本发明也可涉及计算机处理器、数字信号处理器、微处理器或现场可编程门阵列(Field Programmable Gate Array,FPGA)执行的多种功能。可根据本发明配置上述处理器执行特定任务，其通过执行定义了本发明揭示的特定方法的机器可读软件代码或固件代码来完成。可将软件代码或固件代码发展为不同的程序语言与不同的格式或形式。也可为了不同的目标平台编译软件代码。然而，根据本发明执行任务的软件代码与其他类型配置代码的不同代码样式、类型与语言不脱离本发明的精神与范围。
在不脱离本发明精神或本质特征的情况下，可以其他特定形式实施本发明。描述示例被认为说明的所有方面并且无限制。因此，本发明的范围由权利要求书指示，而非前面描述。所有在权利要求等同的方法与范围中的变化皆属于本发明的涵盖范围。

Claims (22)

1.一种视频数据环路滤波处理方法，所述方法包含：
接收与图像相关联的视频数据，其中将所述图像分割为一个或多个图块；
确定与所述一个或多个图块相关联的图块边界；
确定是否禁用跨图块环路处理；
如果禁用所述跨图块环路处理，则重新配置所述环路滤波处理，其中如果所述环路滤波处理需要跨至少一个图块边界的相邻图块的至少一个像素，则所述重新配置所述环路滤波处理的步骤去除跨当前图块的所述至少一个图块边界的数据依赖；以及
将所述环路滤波处理应用于所述一个或多个图块。
2.如权利要求1所述的方法，其特征在于，所述重新配置所述环路滤波处理的步骤对应于跳过所述环路滤波处理、基于所述当前图块的所述像素使用数据填充替换跨所述至少一个图块边界的所述相邻图块的所述至少一个像素，或者修改数据轨迹或滤波轨迹以去除跨所述至少一个图块边界的数据依赖。
3.如权利要求1所述的方法，其特征在于，所述环路滤波处理对应于DF(去块滤波)、SAO(样本自适应偏移)处理或ALF(自适应环路滤波)处理。
4.如权利要求1所述的方法，其特征在于，所述环路滤波处理对应于DF，并且其中对所述至少一个图块边界跳过所述环路滤波处理。
5.如权利要求1所述的方法，其特征在于，所述环路滤波处理对应于SAO，并且其中所述重新配置所述环路滤波处理的步骤对应于对所述至少一个图块边界跳过所述环路滤波处理、基于所述当前图块的所述像素使用数据填充替换跨所述至少一个图块边界的所述相邻图块的所述至少一个像素，或者修改像素分类轨迹以去除跨所述至少一个图块边界的数据依赖。
6.如权利要求5所述的方法，其特征在于，所述数据填充对应于重复填充、具有奇对称的镜像填充、具有偶对称的镜像填充、线性外插或非线性外插。
7.如权利要求1所述的方法，其特征在于，所述环路滤波处理对应于ALF，并且其中所述重新配置所述环路滤波处理的步骤对应于对所述至少一个图块边界跳过所述环路滤波处理、基于所述当前图块的所述像素使用数据填充替换跨所述至少一个图块边界的所述相邻图块的所述至少一个像素，或者修改滤波轨迹以去除跨所述至少一个图块边界的数据依赖。
8.如权利要求7所述的方法，其特征在于，所述数据填充对应于重复填充、具有奇对称的镜像填充、具有偶对称的镜像填充、线性外插或非线性外插。
9.如权利要求1所述的方法，其特征在于，使用旗标指示所述确定是否禁用跨图块环路处理的步骤，其中在序列、图像或条带层编码所述旗标以指示是否允许跨所述至少一个图块边界的数据依赖。
10.如权利要求9所述的方法，其特征在于，如果所述一个或多个图块大于一个，则编码所述旗标，否则不编码所述旗标。
11.一种视频数据环路滤波处理方法，所述方法包含：
接收与图像相关联的视频数据，其中将所述图像分割为一个或多个图块；
确定与所述一个或多个图块相关联的图块边界；
确定所述一个或多个图块的滤波信息，其中如果所述确定滤波信息的步骤需要跨至少一个第一图块边界的第一相邻图块的至少一个像素，则修改所述确定滤波信息的步骤以去除跨当前图块的所述至少一个第一图块边界的第一数据依赖；以及
使用所述滤波信息对所述一个或多个图块应用所述环路滤波处理，其中如果所述环路滤波处理需要跨至少一个第二图块边界的第二相邻图块的至少一个像素，则重新配置所述环路滤波处理以去除跨所述当前图块的所述至少一个第二图块边界的第二数据依赖。
12.如权利要求11所述的方法，其特征在于，所述重新配置所述环路滤波处理的步骤对应于跳过所述环路滤波处理、基于所述当前图块的所述像素使用数据填充替换跨所述至少一个图块边界的所述相邻图块的所述至少一个像素，或者修改数据轨迹或滤波轨迹以去除跨所述至少一个图块边界的数据依赖。
13.如权利要求11所述的方法，其特征在于，所述环路滤波处理对应于DF(去块滤波)、SAO(样本自适应偏移)处理或ALF(自适应环路滤波)处理。
14.如权利要求13所述的方法，其特征在于，所述环路滤波处理对应于DF，并且其中对所述至少一个第二图块边界跳过所述环路滤波处理。
15.如权利要求13所述的方法，其特征在于，所述环路滤波处理对应于SAO，并且其中所述重新配置所述环路滤波处理的步骤对应于对所述至少一个图块边界跳过所述环路滤波处理、基于所述当前图块的所述像素使用数据填充替换跨所述至少一个第二图块边界的所述相邻图块的所述至少一个像素，或者修改像素分类轨迹以去除跨所述至少一个图块边界的数据依赖。
16.如权利要求15所述的方法，其特征在于，所述数据填充对应于重复填充、具有奇对称的镜像填充、具有偶对称的镜像填充、线性外插或非线性外插。
17.如权利要求13所述的方法，其特征在于，所述环路滤波处理对应于ALF，并且其中所述重新配置所述环路滤波处理的步骤对应于对所述至少一个第二图块边界跳过所述环路滤波处理、基于所述当前图块的所述像素使用数据填充替换跨所述至少一个第二图块边界的所述相邻图块的所述至少一个像素，或者修改滤波轨迹以去除跨所述至少一个第二图块边界的数据依赖。
18.如权利要求17所述的方法，其特征在于，所述数据填充对应于重复填充、具有奇对称的镜像填充、具有偶对称的镜像填充、线性外插或非线性外插。
19.如权利要求11所述的方法，其特征在于，在序列、图像或条带层编码旗标以指示是否允许跨所述至少一个第二图块边界的数据依赖。
20.如权利要求19所述的方法，其特征在于，如果所述一个或多个图块大于一个，则编码所述旗标，否则不编码所述旗标。
21.一种在视频解码器中用于视频数据环路滤波处理的装置，所述装置包含：
用于接收与图像相关联的视频数据的装置，其中将所述图像分割为一个或多个图块；
用于确定与所述一个或多个图块相关联的图块边界的装置；
用于确定是否禁用跨图块环路处理的装置；
用于当禁用所述跨图块环路处理时重新配置所述环路滤波处理的装置，其中如果所述环路滤波处理需要跨至少一个图块边界的相邻图块的至少一个像素，则所述重新配置所述环路滤波处理去除跨当前图块的所述至少一个图块边界的数据依赖；以及
用于将所述环路滤波处理应用于所述一个或多个图块的装置。
22.一种用于视频数据环路滤波处理的装置，所述装置包含：
用于接收与图像相关联的视频数据的装置，其中将所述图像分割为一个或多个图块；
用于确定与所述一个或多个图块相关联的图块边界的装置；
用于确定所述一个或多个图块的滤波信息的装置，其中如果所述确定滤波信息需要跨至少一个第一图块边界的第一相邻图块的至少一个像素，则修改所述确定滤波信息以去除跨当前图块的所述至少一个第一图块边界的第一数据依赖；以及
用于使用所述滤波信息对所述一个或多个图块应用所述环路滤波处理的装置，其中如果所述环路滤波处理需要跨至少一个第二图块边界的第二相邻图块的至少一个像素，则重新配置所述环路滤波处理以去除跨所述当前图块的所述至少一个第二图块边界的第二数据依赖。
CN201280050785.2A 2011-10-24 2012-10-19 视频数据环路滤波处理方法及其装置 Active CN103891292B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201161550636P 2011-10-24 2011-10-24
US61/550,636 2011-10-24
US201161554601P 2011-11-02 2011-11-02
US61/554,601 2011-11-02
US201161558664P 2011-11-11 2011-11-11
US61/558,664 2011-11-11
PCT/CN2012/083212 WO2013060250A1 (en) 2011-10-24 2012-10-19 Method and apparatus for non-cross-tile loop filtering

Publications (2)

Publication Number Publication Date
CN103891292A true CN103891292A (zh) 2014-06-25
CN103891292B CN103891292B (zh) 2018-02-02

Family

ID=48167118

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280050785.2A Active CN103891292B (zh) 2011-10-24 2012-10-19 视频数据环路滤波处理方法及其装置

Country Status (5)

Country Link
US (1) US20140198844A1 (zh)
EP (1) EP2737705A4 (zh)
CN (1) CN103891292B (zh)
AU (1) AU2012327672B2 (zh)
WO (1) WO2013060250A1 (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105306957A (zh) * 2015-10-23 2016-02-03 北京中星微电子有限公司 自适应环路滤波方法和设备
CN105530519A (zh) * 2014-09-29 2016-04-27 炬芯（珠海）科技有限公司 一种环内滤波方法及装置
CN107113439A (zh) * 2014-12-10 2017-08-29 英特尔公司 用于基于gpu的解块的高并行依赖性模式
CN108259905A (zh) * 2018-01-15 2018-07-06 北京数码视讯科技股份有限公司 Avs2视频编码方法、装置及电子设备
WO2020083108A1 (en) * 2018-10-23 2020-04-30 Mediatek Inc. Method and apparatus for reduction of in-loop filter buffer
CN111936929A (zh) * 2018-03-22 2020-11-13 联发科技股份有限公司 采用360°虚拟现实投影的投影布局的重构的基于投影的帧的样本适应性偏移滤波方法用于重构的基于投影的帧的样本适应性偏移滤波方法
WO2021004542A1 (en) * 2019-07-11 2021-01-14 Beijing Bytedance Network Technology Co., Ltd. Sample padding in adaptive loop filtering
WO2021052509A1 (en) * 2019-09-22 2021-03-25 Beijing Bytedance Network Technology Co., Ltd. Selective application of sample padding in adaptive loop filtering
WO2021073631A1 (en) * 2019-10-18 2021-04-22 Beijing Bytedance Network Technology Co., Ltd. Interplay between subpictures and in-loop filtering
CN113302943A (zh) * 2019-02-11 2021-08-24 华为技术有限公司 环绕视图视频编解码
WO2022016535A1 (zh) * 2020-07-24 2022-01-27 深圳市大疆创新科技有限公司 视频编解码的方法和装置
CN114747223A (zh) * 2019-10-07 2022-07-12 Lg电子株式会社 基于子画面结构执行环路内滤波的图像编码/解码方法和装置及发送比特流的方法
CN114946191A (zh) * 2019-11-18 2022-08-26 Lg电子株式会社 基于用于滤波的信息的信令的图像编码设备和方法
US11490082B2 (en) 2019-06-14 2022-11-01 Beijing Bytedance Network Technology Co., Ltd. Handling video unit boundaries and virtual boundaries based on color format
US11523108B2 (en) 2019-08-10 2022-12-06 Beijing Bytedance Network Technology Co., Ltd. Position restriction for inter coding mode
US11539950B2 (en) 2019-10-02 2022-12-27 Beijing Bytedance Network Technology Co., Ltd. Slice level signaling in video bitstreams that include subpictures
US11553179B2 (en) 2019-07-09 2023-01-10 Beijing Bytedance Network Technology Co., Ltd. Sample determination for adaptive loop filtering
US11683488B2 (en) 2019-09-27 2023-06-20 Beijing Bytedance Network Technology Co., Ltd. Adaptive loop filtering between different video units
US11700368B2 (en) 2019-07-15 2023-07-11 Beijing Bytedance Network Technology Co., Ltd. Classification in adaptive loop filtering
US11706462B2 (en) 2019-10-10 2023-07-18 Beijing Bytedance Network Technology Co., Ltd Padding process at unavailable sample locations in adaptive loop filtering
RU2815441C2 (ru) * 2019-07-11 2024-03-15 Бейджин Байтдэнс Нетворк Текнолоджи Ко., Лтд. Способ заполнения отсчетов при адаптивной контурной фильтрации

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10244239B2 (en) * 2010-12-28 2019-03-26 Dolby Laboratories Licensing Corporation Parameter set for picture segmentation
US20130107973A1 (en) * 2011-10-28 2013-05-02 Qualcomm Incorporated Loop filtering control over tile boundaries
GB201119206D0 (en) * 2011-11-07 2011-12-21 Canon Kk Method and device for providing compensation offsets for a set of reconstructed samples of an image
JP6048941B2 (ja) * 2012-01-27 2016-12-27 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
KR102276914B1 (ko) * 2013-10-24 2021-07-13 삼성전자주식회사 비디오 인코딩 장치 그리고 이의 구동 방법
CN107683606B (zh) * 2015-06-05 2021-11-05 索尼公司 图像处理装置和图像处理方法
KR20180009358A (ko) * 2015-06-16 2018-01-26 엘지전자 주식회사 영상의 부호화/복호화 방법 및 이를 위한 장치
US9905200B2 (en) 2015-10-19 2018-02-27 Yahoo Holdings, Inc. Computerized system and method for automatically creating and applying a filter to alter the display of rendered media
US20200236355A1 (en) * 2017-08-01 2020-07-23 Sharp Kabushiki Kaisha Systems and methods for filtering reconstructed video data using adaptive loop filtering techniques
US10986371B2 (en) 2018-03-22 2021-04-20 Mediatek Inc. Sample adaptive offset filtering method for reconstructed projection-based frame that employs projection layout of 360-degree virtual reality projection
KR20240019383A (ko) * 2018-03-29 2024-02-14 소니그룹주식회사 화상 처리 장치 및 화상 처리 방법
GB2580173B (en) 2018-12-21 2022-07-27 Canon Kk A filter
US11432015B2 (en) * 2019-07-11 2022-08-30 Qualcomm Incorporated Adaptive loop filtering across raster-scan slices
CN113994670B (zh) * 2019-07-25 2023-08-11 寰发股份有限公司 具有虚拟边界的跨分量自适应环路滤波的视频编解码方法及装置
CN116114245A (zh) 2021-09-02 2023-05-12 辉达公司 在视频编码过程中视频帧的并行处理
WO2023029045A1 (en) * 2021-09-06 2023-03-09 Nvidia Corporation Parallel encoding of video frames without filtering dependency

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005027495A2 (en) * 2003-09-07 2005-03-24 Microsoft Corporation Slice layer in video codec
CN1812580A (zh) * 2005-01-04 2006-08-02 三星电子株式会社 去块控制方法及使用该方法的多层视频编码器/解码器
CN1816149A (zh) * 2005-02-06 2006-08-09 腾讯科技（深圳）有限公司 去除视频图像中块效应的滤波方法及环路滤波器
CN101742292A (zh) * 2008-11-14 2010-06-16 北京中星微电子有限公司 基于图像内容信息的环路滤波方法和滤波器
US20100329361A1 (en) * 2009-06-30 2010-12-30 Samsung Electronics Co., Ltd. Apparatus and method for in-loop filtering of image data and apparatus for encoding/decoding image data using the same

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8964833B2 (en) * 2011-07-19 2015-02-24 Qualcomm Incorporated Deblocking of non-square blocks for video coding
PL2744202T3 (pl) * 2011-08-11 2020-12-28 Sun Patent Trust Sposób kodowania obrazów, sposób dekodowania obrazów, urządzenie do kodowania obrazów, urządzenie do dekodowania obrazów oraz urządzenie do kodowania/dekodowania obrazów
US9344743B2 (en) * 2011-08-24 2016-05-17 Texas Instruments Incorporated Flexible region based sample adaptive offset (SAO) and adaptive loop filter (ALF)
US9462298B2 (en) * 2011-10-21 2016-10-04 Qualcomm Incorporated Loop filtering around slice boundaries or tile boundaries in video coding
US20130107973A1 (en) * 2011-10-28 2013-05-02 Qualcomm Incorporated Loop filtering control over tile boundaries

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005027495A2 (en) * 2003-09-07 2005-03-24 Microsoft Corporation Slice layer in video codec
CN1812580A (zh) * 2005-01-04 2006-08-02 三星电子株式会社 去块控制方法及使用该方法的多层视频编码器/解码器
CN1816149A (zh) * 2005-02-06 2006-08-09 腾讯科技（深圳）有限公司 去除视频图像中块效应的滤波方法及环路滤波器
CN101742292A (zh) * 2008-11-14 2010-06-16 北京中星微电子有限公司 基于图像内容信息的环路滤波方法和滤波器
US20100329361A1 (en) * 2009-06-30 2010-12-30 Samsung Electronics Co., Ltd. Apparatus and method for in-loop filtering of image data and apparatus for encoding/decoding image data using the same

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
A.FULDSETH: "Replacing slices with titles for high level parallelism", 《JCT-VC OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
CHIA-YANG TSAI等: "Slice Boundary Processing and Picture Layer Raw Byte Sequence Payload", 《JCT-VC OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
CHIH-MING FU等: "Sample Adaptive Offset with Padding at LCU, Slice, and Image Boundaries", 《JCT-VC OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
COR MEENDERINCK等: "Parallel Scalability of Video Decoders", 《J SIGH PROCESS SYST》 *
YE-KUI WANG: "Isolated Regions: Motivation, Problems, and Solutions", 《JOINT VIDEO TEAM (JVT) OF ISO/IEC MPEG & ITU-T VCEG》 *
无: "VIDEO CODING FOR LOW BIT RATE COMMUNICATION", 《ITU-T RECOMMENDATION H.263》 *

Cited By (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105530519A (zh) * 2014-09-29 2016-04-27 炬芯（珠海）科技有限公司 一种环内滤波方法及装置
CN105530519B (zh) * 2014-09-29 2018-09-25 炬芯（珠海）科技有限公司 一种环内滤波方法及装置
CN107113439A (zh) * 2014-12-10 2017-08-29 英特尔公司 用于基于gpu的解块的高并行依赖性模式
CN105306957B (zh) * 2015-10-23 2019-04-26 湘潭中星电子有限公司 自适应环路滤波方法和设备
CN105306957A (zh) * 2015-10-23 2016-02-03 北京中星微电子有限公司 自适应环路滤波方法和设备
CN108259905A (zh) * 2018-01-15 2018-07-06 北京数码视讯科技股份有限公司 Avs2视频编码方法、装置及电子设备
CN111936929A (zh) * 2018-03-22 2020-11-13 联发科技股份有限公司 采用360°虚拟现实投影的投影布局的重构的基于投影的帧的样本适应性偏移滤波方法用于重构的基于投影的帧的样本适应性偏移滤波方法
US11743458B2 (en) 2018-10-23 2023-08-29 Hfi Innovation Inc. Method and apparatus for reduction of in-loop filter buffer
CN113287316B (zh) * 2018-10-23 2023-07-21 寰发股份有限公司 减少环路滤波缓冲器的方法及装置
WO2020083108A1 (en) * 2018-10-23 2020-04-30 Mediatek Inc. Method and apparatus for reduction of in-loop filter buffer
CN113287316A (zh) * 2018-10-23 2021-08-20 联发科技股份有限公司 减少环路滤波缓冲器的方法及装置
CN113302943A (zh) * 2019-02-11 2021-08-24 华为技术有限公司 环绕视图视频编解码
CN113302943B (zh) * 2019-02-11 2023-01-06 华为技术有限公司 用于环绕视图视频编解码的方法、设备、装置及存储介质
US11490082B2 (en) 2019-06-14 2022-11-01 Beijing Bytedance Network Technology Co., Ltd. Handling video unit boundaries and virtual boundaries based on color format
US11553179B2 (en) 2019-07-09 2023-01-10 Beijing Bytedance Network Technology Co., Ltd. Sample determination for adaptive loop filtering
US11831869B2 (en) 2019-07-09 2023-11-28 Beijing Bytedance Network Technology Co., Ltd. Sample determination for adaptive loop filtering
CN114128278A (zh) * 2019-07-11 2022-03-01 北京字节跳动网络技术有限公司 自适应环路滤波中的样点填充
WO2021004542A1 (en) * 2019-07-11 2021-01-14 Beijing Bytedance Network Technology Co., Ltd. Sample padding in adaptive loop filtering
US11589042B2 (en) 2019-07-11 2023-02-21 Beijing Bytedance Network Technology Co., Ltd. Sample padding in adaptive loop filtering
CN114128278B (zh) * 2019-07-11 2023-12-05 北京字节跳动网络技术有限公司 自适应环路滤波中的样点填充
RU2815441C2 (ru) * 2019-07-11 2024-03-15 Бейджин Байтдэнс Нетворк Текнолоджи Ко., Лтд. Способ заполнения отсчетов при адаптивной контурной фильтрации
US11700368B2 (en) 2019-07-15 2023-07-11 Beijing Bytedance Network Technology Co., Ltd. Classification in adaptive loop filtering
US11533513B2 (en) 2019-08-10 2022-12-20 Beijing Bytedance Network Technology Co., Ltd. Subpicture size definition in video processing
US11553177B2 (en) 2019-08-10 2023-01-10 Beijing Bytedance Network Technology Co., Ltd. Buffer management in subpicture decoding
US11523108B2 (en) 2019-08-10 2022-12-06 Beijing Bytedance Network Technology Co., Ltd. Position restriction for inter coding mode
US11652998B2 (en) 2019-09-22 2023-05-16 Beijing Bytedance Network Technology Co., Ltd. Padding process in adaptive loop filtering
US11671594B2 (en) 2019-09-22 2023-06-06 Beijing Bytedance Network Technology Co., Ltd. Selective application of sample padding in adaptive loop filtering
WO2021052509A1 (en) * 2019-09-22 2021-03-25 Beijing Bytedance Network Technology Co., Ltd. Selective application of sample padding in adaptive loop filtering
US11683488B2 (en) 2019-09-27 2023-06-20 Beijing Bytedance Network Technology Co., Ltd. Adaptive loop filtering between different video units
US11539950B2 (en) 2019-10-02 2022-12-27 Beijing Bytedance Network Technology Co., Ltd. Slice level signaling in video bitstreams that include subpictures
US11546593B2 (en) 2019-10-02 2023-01-03 Beijing Bytedance Network Technology Co., Ltd. Syntax for subpicture signaling in a video bitstream
CN114747223B (zh) * 2019-10-07 2023-11-14 Lg电子株式会社 基于子画面结构执行环路内滤波的图像编码/解码方法和装置及发送比特流的方法
CN114747223A (zh) * 2019-10-07 2022-07-12 Lg电子株式会社 基于子画面结构执行环路内滤波的图像编码/解码方法和装置及发送比特流的方法
US11706462B2 (en) 2019-10-10 2023-07-18 Beijing Bytedance Network Technology Co., Ltd Padding process at unavailable sample locations in adaptive loop filtering
CN114631321A (zh) * 2019-10-18 2022-06-14 北京字节跳动网络技术有限公司 子图片与环路滤波之间的相互影响
WO2021073631A1 (en) * 2019-10-18 2021-04-22 Beijing Bytedance Network Technology Co., Ltd. Interplay between subpictures and in-loop filtering
US11956432B2 (en) 2019-10-18 2024-04-09 Beijing Bytedance Network Technology Co., Ltd Interplay between subpictures and in-loop filtering
CN114631321B (zh) * 2019-10-18 2024-04-12 北京字节跳动网络技术有限公司 子图片与环路滤波之间的相互影响
US11962771B2 (en) 2019-10-18 2024-04-16 Beijing Bytedance Network Technology Co., Ltd Syntax constraints in parameter set signaling of subpictures
CN114946191A (zh) * 2019-11-18 2022-08-26 Lg电子株式会社 基于用于滤波的信息的信令的图像编码设备和方法
WO2022016535A1 (zh) * 2020-07-24 2022-01-27 深圳市大疆创新科技有限公司 视频编解码的方法和装置

Also Published As

Publication number Publication date
EP2737705A1 (en) 2014-06-04
WO2013060250A1 (en) 2013-05-02
AU2012327672B2 (en) 2015-09-03
EP2737705A4 (en) 2016-03-02
CN103891292B (zh) 2018-02-02
US20140198844A1 (en) 2014-07-17
AU2012327672A1 (en) 2014-03-20

Similar Documents

Publication Publication Date Title
CN103891292A (zh) 非跨图块环路滤波方法及其装置
KR101977741B1 (ko) 제한된 오프셋 보상 및 루프 필터를 기반으로 하는 영상 부호화 및 복호화 방법 및 그 장치
US10116967B2 (en) Method and apparatus for coding of sample adaptive offset information
DK2882190T3 (en) Method and apparatus for improved ring-structured filtration
US10405004B2 (en) Apparatus and method of sample adaptive offset for luma and chroma components
US9641863B2 (en) Apparatus and method of sample adaptive offset for video coding
AU2013248857B2 (en) Method and apparatus for loop filtering across slice or tile boundaries
CN103535035A (zh) 用于亮度和色度分量的样本自适应偏移的方法和装置
CN110063057B (zh) 用于视频编解码的采样自适应偏移处理的方法和装置
KR101364085B1 (ko) 비디오 압축 시스템의 ｓａｏ 처리 장치 및 그 방법
CN110771166B (zh) 帧内预测装置和方法、编码、解码装置、存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160908

Address after: Hsinchu County, Taiwan, China

Applicant after: Atlas Limited by Share Ltd

Address before: China Taiwan Hsinchu Science Park Hsinchu city Dusing a road No.

Applicant before: MediaTek.Inc

GR01 Patent grant
GR01 Patent grant