CN104380730B - 模式依赖帧内平滑的简化 - Google Patents

模式依赖帧内平滑的简化 Download PDF

Info

Publication number
CN104380730B
CN104380730B CN201380006070.1A CN201380006070A CN104380730B CN 104380730 B CN104380730 B CN 104380730B CN 201380006070 A CN201380006070 A CN 201380006070A CN 104380730 B CN104380730 B CN 104380730B
Authority
CN
China
Prior art keywords
reference sample
lut
size
blocks
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380006070.1A
Other languages
English (en)
Other versions
CN104380730A (zh
Inventor
李贵春
刘凌志
楠·林
郑建铧
菲利普·张
宋理
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN104380730A publication Critical patent/CN104380730A/zh
Application granted granted Critical
Publication of CN104380730B publication Critical patent/CN104380730B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明包括一种含有处理器的装置，所述处理器用于确定是否基于查找表(LUT)对预测单元(PU)使用帧内平滑滤波器，其中LUT包括用于指示不应该在任何大小为8x8像素且与方向预测模式关联的PU块上应用帧内平滑滤波器的数据。本发明也包括一种方法，所述方法包括生成参考样本，确定PU块的大小和基于PU块的大小选择参考样本，其中对大小为8x8像素且与方向预测模式关联的PU块不选择经滤波的参考样本。

Description

模式依赖帧内平滑的简化
相关申请案交叉申请
本发明要求2012年1月19日由李贵春(Guichun Li)等人递交的发明名称为“模式依赖帧内平滑的简化(Simplification of Mode Dependent Intra Smoothing)”的第61/588355号美国临时专利申请案的在先申请优先权，该在先申请的内容以引入的方式并入本文本中，如全文再现一般。
关于由联邦政府赞助的研究或开发的声明
不适用。
缩微平片附件的引用
不适用。
背景技术
即使在影片相对较短的情况下也需要对大量的视频数据进行描述，当数据要在带宽容量受限的通信网络中流过或以其他方式传送时，这样可能会造成困难。因此，视频数据通常要先压缩然后在现代电信网络中传送。视频压缩设备通常在源处使用软件和/或硬件，以在传送之前对视频数据进行编码，从而减少用来表示数字视频图像所需的数据量。接着，压缩的数据在目的地处由视频解压设备接收，该视频解压设备用于对视频数据进行解码。在有限的网络资源以及对更高视频质量的需求不断增加的情况下，需要改进压缩和解压技术，所述改进的技术基本上无需增加比特率就可以改进图像质量。
发明内容
在一项实施例中，本发明包括一种含有处理器的装置，所述处理器用于确定是否基于查找表(LUT)对预测单元(PU)使用帧内平滑滤波器，其中LUT包括用于指示不应对大小为8x8像素且与方向预测模式关联的PU块应用帧内平滑滤波器的数据。
在另一项实施例中，本发明包括一种方法，所述方法包括生成参考样本，确定PU块的大小以及基于PU块的大小选择参考样本，其中对大小为8x8像素且与方向预测模式关联的PU块不选择经滤波的参考样本。
在又一项实施例中，本发明包括一种含有存储器和处理器的装置，所述存储器包含指令，所述处理器用于通过生成参考样本，确定PU块的大小以及基于PU块的大小选择经滤波和未经滤波的参考样本来执行指令，其中对大小为8x8像素且与方向预测模式关联的PU块不选择经滤波的参考样本。
结合附图和权利要求书，可从以下的详细描述中更清楚地理解这些和其他特征。
附图说明
为了更完整地理解本发明，现可参考以下简要描述，结合附图和详细描述，其中相同参考标号表示相同部分。
图1是多个帧内预测模式的示意图。
图2是为帧内预测选择参考样本的方法的实施例的示意图。
图3为网元的实施例的示意图。
具体实施方式
首先应该理解的是，尽管下面提供了一种或多种实施例的示例性实施方式，本发明公开的系统和/或方法可通过多种当前已知的或存在的技术实施。本发明决不应限于下文所说明的所述说明性实施方案、图式和技术，包含本文所说明并描述的示范性设计和实施方案，而是可以在所附权利要求书的范围以及其均等物的完整范围内修改。
视频媒体通常涉及相对较快地连续显示一系列静态图像或帧，从而让观察者感觉到运动。每个帧可以包含多个图像元素或像素，每个图像元素或像素可以表示帧中的单个参考点。在数字处理期间，每个像素可以被分配一个整数值(例如，0、1、…或255)，所述整数值表示对应参考点处的图像质量或特征，例如，亮度或色度。单个帧中的多组像素(例如，宏块，编码单元(CU)或预测单元(PU))通常可以与相同帧内的其他宏块进行相关，使得一些宏块内的像素值可能仅略有不同并且/或者呈现出重复的纹理(texture)。现代视频压缩方法使用各种技术来利用这些空间相关性，这些技术统称为帧内预测。帧内预测可以降低相同帧内相邻和/或邻近宏块(下文中简称为块)之间的空间冗余，从而在无需大幅降低图像质量的情况下压缩视频数据。各种约定的视频/图像编码标准描述了不同形式的帧内预测，例如国际电信联盟(ITU)电信标准化部门(ITU-T)H.264(下文中简称为H.264)，该内容以引入的方式并入本文本中，如全文再现一般。
实际上，帧内预测可以由视频编码器/解码器(编解码器)来实现，以从一个或多个先前编码/解码的邻近块中插入一个预测块，从而创建一个当前块的近似。因此，编码器和解码器可以独立地插入预测块，从而使得帧和/或图像的绝大部分能够根据相对少量的参考块的通信进行重建，所述参考块例如，位于帧的左上角(并从此处延伸)的块。然而，仅靠帧内预测不能为现代视频重现质量良好的图像，而且编码器和解码器可能会交换错误校正信息例如残余信息来校正预测块和当前块之间的差异。譬如，编码器可以从当前块中减去预测块来生成一个残余块，然后在将该残留块编码成编码数据流之前将它变换、量化和扫描。收到编码数据流后，解码器将重建的残余块添加到独立生成的预测块中来重建当前块。尽管重建的当前块可能是原始当前块的不完美的版本，例如由于帧内编码压缩的有损性质导致，它们之间的差异是肉眼难以察觉的。因此，在没有降低重建图像质量的情况下减少了大量的比特。
残余块可能包括预测块和当前块之间的少许差异，因此，许多残余块的离散值例如像素数据可能包含0和/或接近0的系数，例如，在预测块相同和/或接近相同当前块的区域。此外，残余块的变换、量化和/或扫描会去除数据流中的0和/或接近0的系数，从而导致视频数据的进一步压缩。所以，对原始图像更精确的预测可以保证编码效率。为了保证编码效率，约定的视频/图像编码标准在帧内预测中使用多种预测模式来提高预测精确度，例如每中预测模式可以生成一个唯一的纹理。例如，高性能视频编码(HEVC)视频压缩标准(也称为H.265)在统一帧内预测(UIP)方案中使用多种预测模式。
图1是HEVC UIP方案中使用的多种帧内预测模式100的示意图。对于亮度块，帧内预测模式100包括最多36个帧内预测模式，其中包含3个非方向模式和33个方向模式。非方向模式包括平面预测模式，帧内平均(DC)预测模式和从亮度到色度(LM)预测模式。平面预测模式通过假设一个块的振幅表面来进行预测，所述振幅表面从该块的边界衍生出水平和垂直的斜面。DC预测模式通过假设一个平坦的块表面来进行预测，所述平坦的块表面有一个与块边界平均值相匹配的值。LM预测模式通过假设块的色度值来进行预测，所述色度值匹配该块的亮度值。方向模式基于相邻块进行预测，如图1所示。
在使用中，编码器可以为每个当前块选择产生最精确预测的预测模式。例如，帧内预测模式100中为每个模式计算绝对误差和(SAE)，并选择SAE最小的模式。越多的帧内预测模式通常可以保证更为精确的帧内预测。例如，最近的研究表明，相对于使用少于36种帧内预测模式的约定，例如H.264仅使用9种帧内预测模式，使用36种帧内预测模式例如帧内预测模式100的约定可以更精确地预测复杂的纹理。虽然公开了36种帧内预测模式，但需要注意任何其他合适数量的预测模式都可以使用，这取决于块的大小和/或帧内预测方案。
可以利用多种帧内平滑方案来提高预测精确度。例如，在一个方案中，编解码器可以为每个当前块确定是否应用平滑滤波器，以及基于帧内预测模式确定应用哪一个平滑滤波器。具体而言，平滑滤波器可以应用于参考样本，然后用于帧内预测。此方案被称为模式依赖帧内平滑(MDIS)。MDIS也包含多种方法。例如，一种MDIS方法可以明确指出预测样本是否被滤波。编码器通过给检测所有潜在帧内预测模式的率失真(RD)成本来做平滑决定。另一种MDIS方法仅通过检测经滤波或者未经滤波的预测样本的RD成本来确定最佳的帧内预测模式，这种MDIS过程相对较快。
基于块的帧内编码压缩标准例如高级视频编码(AVC)、关键技术领域(KTA)和HEVC测试模型(HM)等可以使用正方形块作为预测单元(PU)。一个PU是预测的一个基本单元。一个正方形PU的水平侧(长度)和垂直侧(高度)具有相同的像素数。基于正方形PU的MDIS方案可以根据查找表(LUT)来确定一个滤波器的开启/关闭(ON/OFF)状态和/或其类型。表1描述了一个典型的LUT，该LUT在HM5.0中使用，依据本杰明·布罗斯等人于2011年11月21-30日在日内瓦的联合协作小组第七次会议关于ITU-T SG16WP3和ISO/IEC JTC1/SC29/WG11视频编码(JCT-VC)(7th Meeting of the Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG16WP3and ISO/IEC JTC1/SC29/WG11)上提出的“WD5：高性能视频编码工作草案5”(“WD5:Working Draft5of High-Efficiency Video Coding”)，Doc.JCTVC-G1103_d9，在此以引用的方式并入本文本中。表1包含了多个滤波器决定条目，每个条目可由正方形PU的大小和帧内预测模式进行索引。各行对应帧内预测中一个正方形PU的可能大小，每行代表一个唯一的正方形PU的大小(例如，4x4，8x8等)。各列对应UIP方案中可以使用的36种预测模式。0列代表平面模式，1列代表DC模式，2-34列代表方向帧内预测模式，其中2-34列中每列代表一个根据图1进行编号(2-34)的方向预测模式，35列代表LM模式。表1中的条目对应滤波器决定并代表每个决定的数值分配。在本文中，对于每个滤波器决定，值1表示关联的帧内平滑滤波器是开启的，值0表示帧内平滑滤波器是关闭的。例如，对于方向预测模式是4的8x8正方形PU，可以进行帧内平滑；对于方向预测模式是5的32x32正方形PU，可以不进行帧内平滑，等等。
表1 HM5.0MDIS中使用的查找表(LUT)
如表1所示，MDIS LUT中只使用了正方形PU。应注意，对于不同视频编码约定的不同帧内预测方案，可以设计不同的LUT。而表1仅描述了帧内平滑滤波器的开启/关闭(ON/OFF)状态，其他LUT不仅描述开启/关闭(ON/OFF)状态，还可以包括多种滤波器类型的选择(例如，1＝类型1，2＝类型2等等)。可以为帧内平滑选择合适的滤波器类型，例如有线脉冲响应(FIR)滤波器，无线脉冲响应(IIR)滤波器和基于帧内系数滤波器等。有关其他LUT的示例和帧内平滑滤波器的实现，请参阅以下报告：杉本一夫(Kazuo Sugimoto)、俊一关口(Shun-ichi Sekiguchi)、宫泽晃(Akira Minezawa)、井口和久(Kazuhisa Iguchi)和鹿喰善明(Yoshiaki Shishikui)于2011年1月20-28日在韩国大邱的联合协作小组第四次会议关于ITU-T SG16WP3和ISO/IEC JTC1/SC29/WG11视频编码(JCT-VC)(4th Meeting of theJoint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG16WP3and ISO/IECJTC1/SC29/WG11)上提出的“基于LUT对帧内预测样本的自适应滤波”(“LUT-BasedAdaptive Filtering on Intra Prediction Samples”)，Doc.JCTVC-D109；杉本一夫(Kazuo Sugimoto)、俊一关口(Shun-ichi Sekiguchi)宫泽晃(Akira Minezawa)、井口和久(Kazuhisa Iguchi)和鹿喰善明(Yoshiaki Shishikui)于2011年3月16-23日在日内瓦的联合协作小组第五次会议关于ITU-T SG16WP3和ISO/IEC JTC1/SC29/WG11视频编码(JCT-VC)(5th Meeting of the Joint Collaborative Team on Video Coding(JCT-VC)of ITU-TSG16WP3and ISO/IEC JTC1/SC29/WG11)上提出的“CE6.f：基于LUT对帧内预测样本的自适应滤波的验证报告”(“CE6.f:Verification Report on LUT-Based Adaptive Filteringon Intra Prediction Samples”)，Doc.JCTVC-E069；以及海尔特范德奥拉(Geert Van derAuwera)和王祥林(Xianglin Wang)于2011年7月14-22日在都灵的联合协作小组第六次会议关于ITU-T SG16WP3和ISO/IEC JTC1/SC29/WG11视频编码(JCT-VC)(6th Meeting ofthe Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG16WP3and ISO/IEC JTC1/SC29/WG11)上提出的“CE6.e：依赖于模式的帧内平滑修改”(“CE6.e:Mode-Dependent Intra Smoothing Modifications”)，Doc.JCTVC-F126，在此以引用的方式并入本文本中。
本文中所论述的帧内平滑方案可能需要较高的处理能力来进行视频编码和/或解码。在多种预测模式下给PU块应用平滑滤波器，以计算复杂程度为代价来提高预测的精确度，这可能导致更长的处理时间。因此，简化帧内平滑方案对编码过程是有利的，只要这种简化导致的预测精确度降低程度可接受和增加的块最少。
本文公开的简化MDIS LUT可以用于简化MDIS过程，可以降低导致复杂性，加快处理过程，预测精确度可忽略不计。具体而言，可以为所有与8x8正方形PU关联的方向模式关闭滤波，预测精确度的降低可以忽略不计。可以进一步为与8x8正方形PU关联的平面预测模式关闭滤波。
图2是为帧内预测选择参考样本的方法200的实施例的示意图。步骤210中，方法200可以为每个PU块产生经滤波的参考样本。具体而言，可以通过应用一个三系数(3抽头)平滑滤波器来生成经滤波的参考样本。经滤波的参考样本可以存储在步骤220中的滤波缓冲器中。步骤230中，所述方法可确定指定PU块的大小(例如，以像素为单位)以及与该PU块关联的预测模式。步骤240中，方法200可从MDIS LUT获得滤波开关数据。所述MDIS LUT基本与表1中描述的LUT相似。然而，步骤240中使用的MDIS LUT包括用于指示如果PU块是一个8x8的正方形块且与方向预测模式关联，不应该应用和/或选择帧内平滑滤波器的数据，如表2所示。
表2 简化的MDIS LUT
如上所示，1-35列均为0，表明平滑滤波器不应该应用于DC模式(例如，1列)，任何方向预测模式(例如，2-34列)，和/或LM模式(例如，35列)。或者，LUT也可以包括用于指示平滑滤波器不应该应用于平面模式的数据，如表3所示。
表3 另一个简化的MDIS LUT
所述方法在步骤240中从MDIS LUT获得开关数据后，可进行步骤250，并选择包含经滤波的参考样本的滤波缓冲器，或者选择一个包含未经滤波的参考样本的非滤波缓冲器。基于步骤240中获得的滤波开关数据进行选择。所述选择然后可用于帧内预测。因此，通过使用表2和/或表3中的LUT，方法200不会为与方向预测模式关联的8x8PU块选择经滤波的参考样本，和/或不会为与平面预测模式关联的8x8PU块选择经滤波的参考样本。步骤260中，方法200确定是否已经为所有PU块选择参考样本。如果所有参考样本已经选择，所述方法结束；如果还没有为某些PU选择参考样本，所述方法返回到步骤230。
方法200可在全帧内高效率情况下，降低处理复杂度以及不损失预测精确度(例如，编码性能)，在全帧内低复杂度情况下保证可以忽略不计的预测精确度损失。具体而言，Bjontegaard失真(BD)率可能是0.00％的亮度(Y)变化，0.02％的蓝色差色度(Cb)的增益，全帧内高效率下的0.01％的红色差色度(Cr)的增益和0.05％的亮度(Y)损失，0.03％的蓝色差色度(Cb)的增益，以及全帧内低复杂度下的0.02％的红色差色度(Cr)的损失。
本领域技术人员会理解方法200反而可以通过基于LUT中的滤波开关数据来确定是否生成经滤波的参考样本(例如，是否应用滤波器)来实现。这些实施例可以通过减少生成的经滤波的参考样本数量来进一步简化方法200，并涵盖在本发明中。
图3是网元(NE)300的实施例的示意图，其包括处理器或视频/图像编解码器用于处理图像以及在网络或系统中预测块，如上所述。例如，网元300可以对应一个图像发射器和/或接收器中的媒体控制器。本领域技术人员会认识到术语网元包含范围广泛的设备，而网元300仅仅是一个例子。使用网元300是为了清楚的论述，但决不意味着本发明的应用限制在某个特定的网元实施例或者一类网元实施例。本发明中至少有一些特性/方法，例如用于选择参考样本200的方法，可以在一个网络装置或元件如网元300上全部或者部分实现。例如，本发明的特性/方法可以使用硬件，固件和/或安装在硬件上运行的软件实现。网元300可以是网络上传输帧的任何设备，例如交换机，路由器，网桥，服务器和客户端等。如图3所示，网元300包含收发器(Tx/Rx)310，其可以是发射器、接收器或两者组合。Tx/Rx310可耦合到多个下行端口320，用于发送帧和/或从其他节点接收帧，Tx/Rx310可耦合到多个上行端口350，用于发送帧和/或从其他节点接收帧；处理器可耦合到Tx/Rx310，用于处理帧和/或确定发送帧到那些节点。处理器330包括一个或多个多核处理器和/或可用于数据存储和缓冲等的存储设备332。处理器330可以实施为一个通用处理器或者是一个或多个专用集成电路(ASIC)和/或数字信号处理器(DSP)的一部分。下行端口320和/或上行端口350包含电和/或光发送和/或接收元件。网元300可以是也可以不是一个做出路由决定的路由元件。
应理解，通过将可执行指令编程和/或加载至网元300，处理器330、下行端口320、Tx/Rxs310、存储设备332和/或上行端口350中的至少之一被改变，将网元300的一部分变换成特定机器或装置(例如，本发明宣扬的拥有功能的多核转发架构)。加载可执行软件至计算机所实现的功能可以通过公知设计规则转换成硬件实施，这在电力工程和软件工程领域是很基础的。决定使用软件还是硬件来实施一个概念通常取决于对设计稳定性及待生产的单元数量的考虑，而不是从软件领域转换至硬件领域中所涉及的任何问题。一般来说，经常变动的设计更适于在软件中实施，因为重新编写硬件实施比重新编写软件设计更为昂贵。一般来说，稳定及大规模生产的设计更适于在如ASIC这样的硬件中实施，因为运行硬件实施的大规模生产比软件实施更为便宜。设计通常可以以软件形式进行开发和测试，之后通过公知设计规则变换成专用集成电路中等同的硬件实施，该集成电路硬线软件指令。由新ASIC控制的机器是一特定的机器或装置，同样地，编程和/或加载有可执行指令的电脑可视为特定的机器或装置。
本发明公开至少一项实施例，且本领域的普通技术人员对所述实施例和/或所述实施例的特征作出的变化、组合和/或修改均在本发明公开的范围内。因组合、合并和/或省略所述实施例的特征而得到的替代性实施例也在本发明的范围内。应当理解的是，本发明已明确阐明了数值范围或限制，此类明确的范围或限制应包括涵盖在上述范围或限制(如从大约1至大约10的范围包括2、3、4等；大于0.10的范围包括0.11、0.12、0.13等)内的类似数量级的迭代范围或限制。例如，每当公开具有下限Rl和上限Ru的数值范围时，具体是公开落入所述范围内的任何数字。具体而言，特别公开所述范围内的以下数字：R＝Rl+k*(Ru-Rl)，其中k为从1％到100％范围内以1％递增的变量，即，k为1％、2％、3％、4％、5％、……、70％、71％、72％、……、95％、96％、97％、98％、99％或100％。此外，还特此公开了，上文定义的两个R值所定义的任何数值范围。除非另有说明，否则术语“约”是指随后数字的±10％。相对于权利要求的某一要素，术语“可选择”的使用表示该要素可以是“需要的”，或者也可以是“不需要的”，二者均在所述权利要求的范围内。使用如“包括”、“包含”和“具有”等较广术语应被理解为提供对如“由…组成”、“基本上由…组成”以及“大体上由…组成”等较窄术语的支持。因此，保护范围不受上文所述的限制，而是由所附权利要求书定义，所述范围包含所附权利要求书的标的物的所有等效物。每项和每条权利要求作为进一步公开的内容并入说明书中，且权利要求书是本发明的实施例。所述揭示内容中的参考的论述并不是承认其为现有技术，尤其是具有在本申请案的在先申请优先权日期之后的公开日期的任何参考。本发明中所引用的所有专利、专利申请案和公开案的公开内容在此以引用的方式并入本文本中，其对本发明提供示例性、程序性或其他细节补充。
虽然本发明多个具体实施例，但应当理解，所公开的系统和方法也可通过其他多种具体形式体现，而不会脱离本发明的精神或范围。本发明的实例应被视为说明性而非限制性的，且本发明并不限于本文本所给出的细节。例如，各种元件或部件可以在另一系统中组合或合并，或者某些特征可以省略或不实施。
此外，在不脱离本发明的范围的情况下，各种实施例中描述和说明为离散或单独的技术、系统和方法可以与其他系统、模块、技术或方法进行组合或合并。展示或论述为彼此耦接或直接耦接或通信的其他项也可以采用电方式、机械方式或其他方式通过某一接口、装置或中间部件间接地耦接或通信。其他变更、替换、更替示例对本领域技术人员而言是显而易见的，均不脱离此处公开的精神和范围。

Claims (16)

1.一种视频处理的装置，其特征在于，所述装置包括：
一个处理器，所述处理器被配置为：
确定是否基于查找表(LUT)对预测单元(PU)使用帧内平滑滤波器，
其中LUT包括用于指示不应该对大小为8x8像素且与方向预测模式关联的PU块应用帧内平滑滤波器的数据；
其中，所述LUT包括36列，0列包含与平面模式关联的数据，1列包含与帧内DC模式关联的数据，2-34列包含与方向帧内模式关联的数据，其中35列包含与帧内LM模式关联的数据；
LUT进一步包括：
多个与PU块大小关联的行；以及
多个将行和列关联的单元，
其中每个单元包含值1用于表示给对应大小的PU块应用帧内平滑滤波器或者值0用于表示不给对应大小的PU块应用帧内平滑滤波器；以及
所述LUT描述如下：
2.根据权利要求1所述的装置，其特征在于，LUT进一步包括用于指示不应该对大小为8x8像素且与平面预测模式关联的PU块应用帧内平滑滤波器的数据。
3.根据权利要求2所述的装置，其特征在于，LUT进一步包括：
用于指示不应该对任何大小为8x8像素且与帧内平均(DC)模式关联的PU块应用帧内平滑滤波器的数据；以及
用于指示不应该对任何大小为8x8像素且与从亮度到色素(LM)模式关联的PU块应用帧内平滑滤波器的数据。
4.根据权利要求1所述的装置，其特征在于，LUT是一个高性能视频编码(HEVC)模式依赖帧内平滑(MDIS)LUT。
5.根据权利要求1所述的装置，其特征在于，LUT进一步包括：
所述LUT描述如下：
6.一种视频处理的方法，其特征在于，所述方法包括：
生成参考样本；
确定预测单元(PU)块的大小；以及
根据PU块的大小选择所述参考样本，
其中对大小为8x8像素且与方向预测模式关联的PU块不选择经滤波的参考样本；
其中，基于PU块的大小选择所述参考样本包括从HEVC MDIS查找表(LUT)获得数据；
所述LUT包括：
多个与预测模式关联的列，
多个与PU块大小关联的行；以及
多个将行和列关联的单元，
其中每个单元包含值1用于表示给对应大小的PU块选择经滤波的参考样本或者值0用于表示不给对应大小的PU块选择经滤波的参考样本；以及
所述LUT描述如下：
7.根据权利要求6所述的方法，其特征在于，生成并选择所述参考样本是视频编码过程的一部分。
8.根据权利要求6所述的方法，其特征在于，生成并选择所述参考样本是视频解码过程的一部分。
9.根据权利要求6所述的方法，其特征在于，生成并选择所述参考样本是高性能视频编码(HEVC)模式依赖帧内平滑(MDIS)过程的一部分。
10.根据权利要求9所述的方法，其特征在于，对于大小为8x8像素的PU块，只选择未经滤波的参考样本。
11.根据权利要求9所述的方法，其特征在于，只有当PU块的大小为8x8像素且与平面预测模式关联时，选择经滤波的参考样本。
12.根据权利要求9所述的方法，其特征在于，通过应用一个三系数(3抽头)滤波器来创建经滤波的参考样本。
13.一种视频处理的装置，其特征在于，所述装置包括：
包含指令的存储器；以及
通过以下方法执行指令的处理器：
生成参考样本；
确定预测单元(PU)块的大小；以及
基于PU块的大小选择经滤波和未经滤波的参考样本，
其中对大小为8x8像素且与方向预测模式关联的PU块不选择经滤波的参考样本；基于PU块的大小选择经滤波和未经滤波的参考样本包括从HEVC MDIS查找表(LUT)获得数据；所述LUT进一步包括：
多个与预测模式关联的列，
多个与PU块大小关联的行；以及
多个将行和列关联的单元，
其中每个单元包含值1用于表示给对应大小的PU块选择经滤波的参考样本或者值0用于表示不给对应大小的PU块选择经滤波的参考样本；以及
所述LUT描述如下：
14.根据权利要求13所述的装置，其特征在于，生成并选择所述参考样本是高性能视频编码(HEVC)模式依赖帧内平滑(MDIS)过程的一部分。
15.根据权利要求13所述的装置，其特征在于，所述LUT进一步包括：
所述LUT描述如下：
16.根据权利要求13所述的装置，其特征在于，所述经滤波的参考样本存储在第一个缓冲器，所述未经滤波的参考样本存储在第二个缓冲器，基于PU块的大小选择所述参考样本进一步包括基于所述LUT数据的第一个缓冲器和第二个缓冲器之间的切换。
CN201380006070.1A 2012-01-19 2013-01-18 模式依赖帧内平滑的简化 Active CN104380730B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261588355P 2012-01-19 2012-01-19
US61/588,355 2012-01-19
PCT/US2013/022116 WO2013109867A1 (en) 2012-01-19 2013-01-18 Simplification of mode dependent intra smoothing

Publications (2)

Publication Number Publication Date
CN104380730A CN104380730A (zh) 2015-02-25
CN104380730B true CN104380730B (zh) 2017-12-22

Family

ID=47664430

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380006070.1A Active CN104380730B (zh) 2012-01-19 2013-01-18 模式依赖帧内平滑的简化

Country Status (3)

Country Link
US (1) US9807385B2 (zh)
CN (1) CN104380730B (zh)
WO (1) WO2013109867A1 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2651137A4 (en) 2010-12-08 2016-03-02 Lg Electronics Inc INTRA-PREDICTION METHOD, ENCODING APPARATUS, AND DECODING APPARATUS USING THE SAME
CN104871537B (zh) * 2013-03-26 2018-03-16 联发科技股份有限公司 色彩间帧内预测的方法
GB2516225B (en) * 2013-07-12 2015-12-09 Canon Kk Method, device, and computer program for block filtering in a video encoder and decoder
US9299122B2 (en) 2013-09-25 2016-03-29 Apple Inc. Neighbor context processing in block processing pipelines
US9270999B2 (en) 2013-09-25 2016-02-23 Apple Inc. Delayed chroma processing in block processing pipelines
US9305325B2 (en) 2013-09-25 2016-04-05 Apple Inc. Neighbor context caching in block processing pipelines
US9571846B2 (en) 2013-09-27 2017-02-14 Apple Inc. Data storage and access in block processing pipelines
US9215472B2 (en) 2013-09-27 2015-12-15 Apple Inc. Parallel hardware and software block processing pipelines
US9218639B2 (en) 2013-09-27 2015-12-22 Apple Inc. Processing order in block processing pipelines
EP3334159A1 (en) * 2014-03-03 2018-06-13 Sony Corporation Strong intra smoothing for in rext 4:4:4 and 32x32
US9807410B2 (en) 2014-07-02 2017-10-31 Apple Inc. Late-stage mode conversions in pipelined video encoders
US10070130B2 (en) * 2015-01-30 2018-09-04 Qualcomm Incorporated Flexible partitioning of prediction units
EP3300362A1 (en) * 2016-09-27 2018-03-28 Thomson Licensing Method for improved intra prediction when reference samples are missing
US10638126B2 (en) * 2017-05-05 2020-04-28 Qualcomm Incorporated Intra reference filter for video coding
CN108632622B (zh) * 2018-04-08 2020-06-26 北京奇艺世纪科技有限公司 一种帧内预测方法、装置及电子设备
EP3799692A4 (en) * 2018-06-13 2021-08-04 Huawei Technologies Co., Ltd. INTRA ENHANCEMENT AND / OR CONTOUR CORRECTION FILTER FOR VIDEO CODING ON THE BASIS OF A BIT TRAIN FLAG
JP7250917B2 (ja) * 2018-10-06 2023-04-03 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 補間フィルタを使用するイントラ予測のための方法および装置
WO2021134759A1 (en) * 2020-01-02 2021-07-08 Huawei Technologies Co., Ltd. An encoder, a decoder and corresponding methods of symmetric mode dependent intra smoothing when wide angle intra prediction is activated

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101523922A (zh) * 2006-10-13 2009-09-02 高通股份有限公司 具有用于经运动补偿预测的自适应滤波的视频编码
CN102256125A (zh) * 2011-07-14 2011-11-23 北京工业大学 面向高效视频编码hevc基于上下文的自适应算数编码方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8885714B2 (en) 2010-01-14 2014-11-11 Texas Instruments Incorporated Method and system for intracoding in video encoding
US9094658B2 (en) * 2010-05-10 2015-07-28 Mediatek Inc. Method and apparatus of adaptive loop filtering
US9008175B2 (en) * 2010-10-01 2015-04-14 Qualcomm Incorporated Intra smoothing filter for video coding
EP2651137A4 (en) * 2010-12-08 2016-03-02 Lg Electronics Inc INTRA-PREDICTION METHOD, ENCODING APPARATUS, AND DECODING APPARATUS USING THE SAME
US10045046B2 (en) * 2010-12-10 2018-08-07 Qualcomm Incorporated Adaptive support for interpolating values of sub-pixels for video coding
US9288500B2 (en) * 2011-05-12 2016-03-15 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
US9602839B2 (en) 2011-06-15 2017-03-21 Futurewei Technologies, Inc. Mode dependent intra smoothing filter table mapping methods for non-square prediction units
MX2013013523A (es) * 2011-06-17 2014-02-27 Mediatek Inc Metodo y aparato para codificacion de modo de intra predicion.

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101523922A (zh) * 2006-10-13 2009-09-02 高通股份有限公司 具有用于经运动补偿预测的自适应滤波的视频编码
CN102256125A (zh) * 2011-07-14 2011-11-23 北京工业大学 面向高效视频编码hevc基于上下文的自适应算数编码方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
CE6.e: Mode-Dependent Intra Smoothing Modifications;G. Van der Auwera et.al;《Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 6th Meeting：Torino》;20110722;正文第1-3章 *
WD3: Working Draft 3 of High-Efficiency Video Coding;Thomas Wiegand et.al;《Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 5th Meeting：Geneva，CH》;20110323;正文第8.3部分，表8-1到表8-6，附图8-1 *
WD5: Working Draft 5 of High-Efficiency Video Coding;Benjamin Bross et.al;《Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 7th Meeting：Geneva，CH》;20111130;全文 *

Also Published As

Publication number Publication date
WO2013109867A1 (en) 2013-07-25
CN104380730A (zh) 2015-02-25
US9807385B2 (en) 2017-10-31
US20130188702A1 (en) 2013-07-25

Similar Documents

Publication Publication Date Title
CN104380730B (zh) 模式依赖帧内平滑的简化
CN103780911B (zh) 视频解码设备
CN108184129B (zh) 一种视频编解码方法、装置及用于图像滤波的神经网络
CN104054344B (zh) 对色度数据进行解块以用于视频译码
CN104969259B (zh) 处理高动态范围图像
CN103650496B (zh) 用于在hevc中编码的基于像素的帧内预测
CN104935942B (zh) 对帧内预测模式进行解码的方法
CA2763887C (en) Image processing device and method
CN102939761B (zh) 用于使用自适应滤波器来执行帧内预测的方法和设备
CN103609124B (zh) 用于非正方形预测单元的依赖于模式的帧内平滑滤波器的表映射方法
CN109076237A (zh) 在视频和图像压缩中使用帧内预测滤波器的帧内预测模式的方法和装置
CN107852513A (zh) 对输入视频序列的像素进行编码
CN106170092A (zh) 用于无损编码的快速编码方法
CN109194958A (zh) 视频编解码装置、存储比特流装置、计算机可读存储介质
TW202315408A (zh) 以區塊為基礎之預測技術
CN109905707A (zh) 清除解块人为噪声的方法
CN107743706A (zh) 超变换视频代码化
CN109845252A (zh) 用于视频编码的设备和方法
CN115104301A (zh) 用于视频编码或解码的基于神经网络的帧内预测
CN107040778A (zh) 环路滤波方法以及环路滤波装置
CN102075743A (zh) 视频编码方法及装置、视频解码方法及装置
Qian et al. Transform domain transcoding from MPEG-2 to H. 264 with interpolation drift-error compensation
CN110100437A (zh) 用于有损视频编码的混合域协作环路滤波器
CN104243985A (zh) Hevc中的样本自适应补偿
CN110115033A (zh) 用于有损静止图像编码的混合域协同后滤波器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant