CN115804095A - 视频编码中的帧内预测方法 - Google Patents

视频编码中的帧内预测方法 Download PDF

Info

Publication number
CN115804095A
CN115804095A CN202180048660.5A CN202180048660A CN115804095A CN 115804095 A CN115804095 A CN 115804095A CN 202180048660 A CN202180048660 A CN 202180048660A CN 115804095 A CN115804095 A CN 115804095A
Authority
CN
China
Prior art keywords
value
sample
reference samples
determining
target block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202180048660.5A
Other languages
English (en)
Other versions
CN115804095B (zh
Inventor
陈杰
叶琰
廖如伶
李新伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Damo Institute Hangzhou Technology Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN202311077092.9A priority Critical patent/CN117041566A/zh
Publication of CN115804095A publication Critical patent/CN115804095A/zh
Application granted granted Critical
Publication of CN115804095B publication Critical patent/CN115804095B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本公开提供了用于视频或图像编码的帧内预测方法。一种示例性方法包括:对目标块执行帧内预测处理,其中执行帧内预测处理包括:确定目标块的帧内预测模式;响应于帧内预测模式是角度模式,基于角度模式通过将N抽头内插滤波器应用于目标块周围的多个参考采样来确定滤波值,其中N是大于4的整数;以及基于滤波值来确定目标块的采样的预测值。

Description

视频编码中的帧内预测方法
相关申请的交叉引用
本公开要求于2020年10月15日提交的美国临时申请第63/092,224号以及于2020年8月21日提交的美国临时申请第63/068,482号的优先权,这两项申请通过引用以其整体并入本文。
技术领域
本公开总体上涉及视频处理,并且更具体地,涉及用于执行帧内预测的系统和方法。
背景技术
视频是一组捕获视觉信息的静态图片(或“帧”)。为了减少存储空间和传输带宽,可以在存储或传输视频之前对其进行压缩,并且在显示之前对视频进行解压缩。压缩处理通常被称为编码,而解压缩处理通常被称为解码。存在使用标准化视频编码技术的各种视频编码格式,这些标准化视频编码技术通常都是基于预测、变换、量化、熵编码和环路内滤波。由标准化组织开发了指定特定视频编码格式的视频编码标准,诸如高效视频编码(HEVC/H265)标准、通用视频编码(VVC/H266)标准和音视频编码标准(AVS)标准。随着视频标准中采用越来越先进的视频编码技术,新的视频编码标准的编码效率越来越高。
发明内容
本公开的实施例提供了一种视频处理方法。在一些实施例中,示例性视频处理方法包括:对目标块执行帧内预测处理,其中执行帧内预测处理包括:确定针对目标块的帧内预测模式;响应于帧内预测模式是角度模式,基于角度模式通过将N抽头内插滤波器应用于围绕目标块的多个参考采样来确定经滤波值,其中N是大于4的整数;以及基于经滤波值来确定目标块的采样的预测值。
本公开的实施例提供了一种视频或图像处理系统。该系统包括:存储器,其存储指令集;以及一个或多个处理器,其被配置为执行指令集,以使系统对目标块执行帧内预测处理,该帧内预测处理包括:确定针对目标块的帧内预测模式;响应于帧内预测模式是直流(DC)模式或平面模式,基于围绕目标块的多个参考采样来确定基值;以及基于基值和第一组对应参考采样来确定目标块的采样的预测值。
本公开的实施例还提供了一种非瞬时性计算机可读介质,其存储指令集,指令集可由设备的一个或多个处理器执行,以使该设备实施视频或图像处理方法。该方法包括:对目标块执行帧内预测处理,该帧内预测处理包括:确定针对目标块的帧内预测模式;响应于帧内预测模式是双线性模式,基于多个顶参考采样的加权组合来确定第一值,基于多个左参考采样的加权组合来确定第二值,其中多个顶参考采样包括一个以上参考采样,并且多个左参考采样包括一个以上参考采样;以及基于第一值和第二值来确定目标块的采样的预测值。
附图说明
在下面的详细描述和附图中示出本公开的实施例和各个方面。附图中所示的各种特征并非按比例绘制。
图1示出了根据本公开的一些实施例的示例性视频序列的结构。
图2A示出了根据本公开的一些实施例的示例性编码处理的示意图。
图2B示出了根据本公开的一些实施例的另一示例性编码处理的示意图。
图3A示出了根据本公开的一些实施例的示例性解码处理的示意图。
图3B示出了根据本公开的一些实施例的另一示例性解码处理的示意图。
图4示出了根据本公开的一些实施例的用于编码或解码视频的示例性设备的框图。
图5是示出根据本公开的一些实施例的在帧内预测中使用的参考块的示意图。
图6是示出根据本公开的一些实施例的帧内预测中的双线性模式的示意图。
图7是示出根据本公开的一些实施例的角度模式下的预测方向的示意图。
图8是示出根据本公开的一些实施例的帧内预测中的角度模式的示意图。
图9是示出根据本公开的一些实施例的帧内预测中的角度模式的示意图。
图10是示出根据本公开的一些实施例的帧内预测中的角度模式的示意图。
图11是示出根据本公开的一些实施例的帧内预测中的角度模式的示意图。
图12(a)至图12(f)示出了根据本公开的一些实施例在加权直流模式和加权平面模式下的加权采样。
图13示出了根据本公开的一些实施例的角度模式下长抽头内插的帧内预测处理的示例性流程图。
图14示出了根据本公开的一些实施例的直流(DC)模式或平面模式下的帧内预测处理的示例性流程图。
图15示出了根据本公开的一些实施例的双线性模式下的帧内预测处理的示例性流程图。
具体实施方式
现在将详细参考在附图中示出其示例的示例性实施例。下面的描述参考附图,其中,除非另有说明,不同附图中的相同数字表示相同或相似的元件。以下对示例性实施例的描述中提出的实现方式不代表与本发明一致的所有实现方式。相反,它们仅仅是与所附权利要求中所述的与本发明相关的方面一致的设备和方法的示例。下面将更详细地描述本公开的具体方面。如果与引入作为参考的术语和/或定义冲突,则以本文提供的术语和定义为准。
现在将详细参考附图中示出其示例的示例性实施例。下面的描述参考附图,其中,除非另有说明,不同附图中的相同数字表示相同或相似的元件。以下对示例性实施例的描述中提出的实现方式不代表与本发明一致的所有实现方式。相反,它们仅仅是与所附权利要求中所述的与本发明相关的方面一致的设备和方法的示例。下面将更详细地描述本公开的具体方面。如果与引入作为参考的术语和/或定义冲突,则以本文提供的术语和定义为准。
在中国于2002年建立的音视频编码标准(AVS)工作组目前正在开发第三代AVS视频标准AVS3视频标准。AVS3标准的前身AVS1和AVS2分别于2006年和2006年发布作为中国国家标准。2017年12月,AVS工作组发布提案征集(CfP),以正式地开始第三代AVS标准AVS3的开发。在2018年12月,工作组选择高性能模型(HPM)作为AVS3标准开发的新参考软件平台。HPM中的初始技术继承自AVS2标准,并且基于此,越来越多的新的高级视频编码技术被采用以提高压缩性能。在2019年,AVS3标准的第一阶段已结束,并且与其前身AVS2相比获得了超过20%的编码性能增益,而AVS3标准的第二阶段仍在AVS3的第一阶段之上开发以获得更好的编码效率。
AVS3标准基于与在诸如AVS1、AVS2、H.264/AVC、H.265/HEVC等现代视频压缩标准中使用的同一混合视频编码系统。
视频是以时间顺序布置为存储视觉信息的一组静态图片(或“帧”)。视频捕获设备(例如,相机)可以用于按时间顺序捕获和存储这些图片,并且视频回放装置(例如,电视、计算机、智能电话、平板计算机、视频播放器或具有显示功能的任何终端用户终端)可以用于按时间顺序显示这些图片。此外,在一些应用中,视频捕获装置可以实时地将所捕获的视频发送到视频回放设备(例如,具有监视器的计算机),以例如用于进行监视、会议或直播。
为了减少这样的应用所需的存储空间和传输带宽,可以对视频进行压缩。例如,可以在存储和传输之前压缩视频,并且在显示之前解压缩视频。压缩和解压缩可以由处理器(例如,通用计算机的处理器)或专用硬件执行的软件来实施。用于压缩的模块通常被称为“编码器”,而用于解压缩的模块通常被称为“解码器”。编码器和解码器可以被统称为“编解码器”。编码器和解码器可以被实施为各种合适的硬件、软件或其组合中的任何一种。例如,编码器和解码器的硬件实施方式可以包括电路,例如一个或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑或其任何组合。编码器和解码器的软件实施方式可以包括程序代码、计算机可执行指令、固件或固定在计算机可读介质中的任何合适的计算机实施的算法或处理。视频压缩和解压缩可以通过各种算法或标准,例如MPEG-1、MPEG-2、MPEG-4、H.26x系列等来实施。在一些应用中,编解码器可以对于第一编码标准的视频进行解压缩,并且使用第二编码标准重新压缩被解压缩的视频,在这样的情况下,编解码器可以被称为“转码器”。
视频编码处理可以识别并保留可用于重建图片的有用信息。如果不能完全重建被忽略的信息,则该编码处理可以被称为“有损的”。否则,可以被称为“无损的”。大多数编码处理是有损的,这是为了减少所需存储空间和传输带宽而做出的妥协。
在很多情况下,正被编码的图片(称为“当前图片”)的有用信息可以包括相对于参考图片(例如,先前已编码或重建的图片)的改变。这样的改变可以包括像素的位置改变、亮度改变或颜色改变。表征对象的一组像素的位置变化可以反映对象在参考图片和当前图片之间的运动。
在不参考另一图片的情况下编码的图片(即,其是其自身的参考图片)被称为“I图片”。如果使用帧内预测或帧间预测基于一个参考图片预测图片中的一些或所有块(例如,通常指视频图片的一些部分的块)(例如,单向预测),那么将该图片称作“P图片”。如果用两个参考图片来预测图片中的至少一个块(例如,双向预测),则该图片被称为“B图片”。
图1示出了根据本公开的一些实施例的示例性视频序列的结构。如图1中所示,视频序列100可以是直播视频或已经被捕获和存档的视频。视频100可以是现实生活视频、计算机生成的视频(例如,计算机游戏视频)或其组合(例如,具有增强现实效果的现实生活视频)。视频序列100可以来自视频捕获设备(例如,照相机)、含有先前捕获的视频档案(例如,存储在存储设备中的视频文件)或用于从视频内容提供商接收视频的视频馈送接口(例如,视频广播收发器)。
如图1所示,视频序列100可以包括沿着时间线按照时间顺序布置的一系列图片,包括图片102、104、106和108。图片102-106是连续的,并且在图片106和108之间有更多的图片。在图1中,图片102是I图片,其参考图片是图片102本身。图片104是P图片,如箭头所示,其参考图片是图片102。图片106是B图片,如箭头所示,其参考图片是图片104和108。在一些实施例中,图片(例如,图片104)的参考图片可不紧接在该图片之前或之后。例如,图片104的参考图片可以是图片102之前的图片。应注意,图片102-106的参考图片仅为示例,并且本公开并没有将参考图片的实施例限制为图1中所示示例。
通常,由于这样的任务的计算复杂性,视频编解码器不会一次编码或解码整个图片。相反,它们可以将图片分割成基础片段,并且逐段地对图片进行编码或解码。在本公开中,这样的基础片段被称为基础处理单元(“BPU”)。例如,图1中的结构110示出了视频序列100的图片(例如,图片102-108中的任何一个)的示例结构。在结构110中,图片被划分成4×4基础处理单元,其边界被示为虚线。在一些实施例中,基础处理单元在一些视频编码标准(例如,MPEG族、H.261、H.263或H.264/AVC)中可以被称为“宏块”,或者在一些其他视频编码标准(例如,H.265/HEVC或H.266/VVC)中可以被称为“编码树单元”(“CTU”)。基础处理单元在图片中可具有可变大小,例如128×128、64×64、32×32、16×16、4×8、16×32,或任何任意形状和大小的像素。可以基于编码效率和基础处理单元中要保留的细节的程度之间的平衡来为图片选择基础处理单元的大小和形状。
基础处理单元可以是逻辑单元,其可以包括存储在计算机存储器中(例如,在视频帧缓冲器中)的一组不同类型的视频数据。例如,彩色图片的基础处理单元可以包括表示非彩色的亮度信息的亮度分量(Y)、表示颜色信息的一个或多个色度分量(例如,Cb和Cr),和相关联的语法元素,其中亮度和色度分量可以具有与基础处理单元相同的大小。在一些视频编码标准(例如,H.265/HEVC或H.266/VVC)中,亮度和色度分量可以被称为“编码树块”(“CTB”)。对基础处理单元执行的任何操作都可以对其亮度和色度分量中的每一个重复执行。
视频编码具有多个操作阶段,其示例在图2A-2B和图3A-3B中示出。对于每一阶段,基础处理单元的大小仍可能对于处理而言过大,并且因此可进一步划分成本公开中称为“基础处理子单元”的片段。在一些实施例中,基础处理子单元在一些视频编码标准(例如,MPEG族、H.261、H.263或H.264/AVC)中可以被称为“块”,或者在一些其他视频编码标准(例如,H.265/HEVC或H.266/VVC)中可以被称为“编码单元”(“CU”)。基础处理子单元可以具有与基础处理单元相同或更小的大小。类似于基础处理单元,基础处理子单元也是逻辑单元,其可包括存储于计算机存储器(例如,视频帧缓冲器)中的一组不同类型的视频数据(例如,Y、Cb、Cr和相关联的语法元素)。对基础处理子单元执行的任何操作都可以对其亮度和色度分量中的每一个重复执行。应当注意,可以根据处理需要将这样的划分执行到跟进一步的程度。还应注意,不同阶段可使用不同的方案来划分基础处理单元。
例如,在模式决定阶段(图2B中示出了其示例),编码器可以决定对于基础处理单元使用什么预测模式(例如,图片内预测或图片间预测),但是基础处理单元可能会由于太大而使得编码器不能做出这样的决定。编码器可以将基础处理单元分成多个基础处理子单元(例如,如H.265/HEVC或H.266/VVC中的CU),并且对于每个单独的基础处理子单元决定预测类型。
对于另一示例,在预测阶段(图2A-2B中示出其示例),编码器可以以基础处理子单元(例如,CU)来执行预测操作。然而,在一些情况下,基础处理子单元可能对于编码器来说仍然太大而使得编码器无法处理。编码器可以进一步将基础处理子单元划分成能够对其执行预测操作的更小的片段(例如,在H.265/HEVC或H.266/VVC中称为“预测块”或“PB”)。
对于另一示例,在变换阶段(图2A-2B中示出其示例),编码器可对剩余的基础处理子单元(例如,CU)执行变换操作。然而,在一些情况下,基础处理子单元可能对于编码器来说仍然太大而使得编码器不能处理。编码器还可以将基础处理子单元进一步划分成能够对其执行变换操作的更小的片段(例如,在H.265/HEVC或H.266/VVC中称为“变换块”或“TB”)。应注意,同一基础处理子单元的划分方案在预测阶段和变换阶段可以不同。例如,在H.265/HEVC或H.266/VVC中,同一个CU的预测块和变换块可以具有不同大小和数量。
在图1的结构110中,基础处理单元112被进一步划分成3×3基础处理子单元,其边界被示为虚线。同一图片的不同基础处理单元可以按照不同方案划分为基础处理子单元。
在一些实现方式中,为了向视频编码和解码提供并行处理和差错恢复的能力,图片可以被划分成用于处理的区域,从而对于图片的区域,编码或解码处理可以不依赖于来自图片的任何其他区域的信息。换句话说,可以独立地处理图片的每个区域。通过这样做,编解码器可以并行处理图片的不同区域,从而提高编码效率。此外,当区域的数据在处理中被破坏或在网络传输中丢失时,编解码器可以正确地编码或解码同一图片的其他区域,而不依赖于被破坏的或丢失的数据,从而提供差错恢复能力。在一些视频编码标准中,图片可以被划分成不同类型的区域。例如,H.265/HEVC和H.266/VVC提供两种类型的区域:“条带”和“切块”。还应当注意,视频序列100的不同图片可以具有用于将图片划分成区域的不同分割方案。
例如,在图1中,结构110被划分成三个区域114、116和118,其边界被示为结构110内的实线。区域114包括四个基础处理单元。区域116和118中的每一个包括六个基础处理单元。应注意,图1中的基础处理单元、基础处理子单元和结构110的区域仅是示例,并且本公开不限制其实施例。
图2A示出了根据本公开的实施例的示例性编码处理的示意图。例如,图2A中所示的编码处理200A可由编码器执行。如图2A所示,编码器可以根据处理200A将视频序列202编码成视频比特流228。与图1中的视频序列100类似地,视频序列202可以包括以时间顺序排列的一组图片(称为“原始图片”)。与图1中的结构110类似地,视频序列202的每个原始图片可以被编码器划分成基础处理单元、基础处理子单元或区域以用于处理。在一些实施例中,编码器可以以基础处理单元对视频序列202的每个原始图片执行处理200A。例如,编码器可以以循环方式执行处理200A,其中编码器可以在处理200A的一次循环中编码一个基础处理单元。在一些实施例中,编码器可以对视频序列202的每个原始图片的区域(例如,区域114-118)并行地执行处理200A。
在图2A中,编码器可以将视频序列202的原始图片的基础处理单元(称为“原始BPU”)馈送到预测阶段204,以生成预测数据206和预测BPU 208。编码器可以从原始BPU中减去预测BPU 208以生成剩余BPU 210。编码器可以将剩余BPU 210馈送到变换阶段212和量化阶段214以生成量化变换系数216。编码器可将预测数据206和量化变换系数216馈送到二进制编码阶段226以产生视频比特流228。上述标记202、204、206、208、210、212、214、216、226和228可以被称为“前向路径”。在处理200A期间,在量化阶段214之后,编码器可以将量化变换系数216馈送到逆量化阶段218和逆变换阶段220,以生成重建剩余BPU 222。编码器可以将重建剩余BPU 222添加到预测BPU 208以生成预测参考224,其在预测阶段204中用于处理200A的下一个循环。处理200A的上述标记218、220、222和224可以被称为“重建路径”。重建路径可以用于确保编码器和解码器两者使用相同的参考数据进行预测。
编码器可以循环地执行处理200A,以对原始图片的每个原始BPU(在前向路径中)进行编码,并且生成用于对原始图片的下一个原始BPU(在重建路径中)进行编码的预测参考224。在对原始图片的所有原始BPU进行编码之后,编码器可以继续对视频序列202中的下一图片进行编码。
参考处理200A,编码器可以接收由视频捕获设备(例如,相机)生成的视频序列202。本文所使用的术语“接收”可以指接收、输入、获取、检索、获得、读取、访问或以任何方式的用于输入数据的任何动作。
在预测阶段204,在当前循环中,编码器可以接收原始BPU和预测参考224,并且执行预测操作以生成预测数据206和预测BPU 208。预测参考224可以从处理200A的先前循环的重建路径生成。预测阶段204的目的是通过从原始BPU和预测参考224提取预测数据206来减少信息冗余,该预测数据可以用于将原始BPU重建为预测BPU 208。
理想地,预测BPU 208可以与原始BPU相同。然而,由于非理想的预测和重建操作,预测BPU 208通常与原始BPU略有不同。为了记录这样的差异,在生成预测BPU 208之后,编码器可以从原始BPU中减去它以生成残余BPU 210。例如,编码器可以从原始BPU的相应像素的值中减去预测BPU 208的像素的值(例如,灰度值或RGB值)。作为原始BPU和预测BPU 208的对应像素之间的这样的减法的结果,残余BPU 210的每个像素可以具有残余值。与原始BPU相比,预测数据206和残余BPU 210可以具有更少的比特,但是它们可以用于重建原始BPU而没有显著的质量劣化。因此,原始BPU被压缩。
为了进一步压缩残余BPU 210,在变换阶段212,编码器可以通过将残余BPU 210分解成一组二维“基础图案”来减少其空间冗余,每个基础图案与“变换系数”相关联。基础图案可以具有相同的大小(例如,残余BPU 210的大小)。每个基础图案可以表示残余BPU 210的变化频率(例如,亮度变化的频率)分量。没有一种基础图案可以从任何其他基础图案的任何组合(例如线性组合)中获得。换句话说,分解可以将残余BPU 210的变化分解到频域中。这样的分解类似于函数的离散傅立叶变换,其中基础图案类似于离散傅立叶变换的基本函数(例如,三角函数),并且变换系数类似于与基本函数相关联的系数。
不同的变换算法可以使用不同的基础图案。在变换阶段212可使用各种变换算法,诸如离散余弦变换、离散正弦变换等。变换阶段212的变换是可逆的。也就是说,编码器可以通过变换的逆操作(称为“逆变换”)来复原残余BPU 210。例如,为了复原残余BPU 210的像素,逆变换可以是将基础图案的对应像素的值乘以相应的关联系数,并将乘积相加以产生加权和。对于视频编码标准来说,编码器和解码器两者都可以使用相同的变换算法(因此使用相同的基础图案)。因此,编码器能够仅记录变换系数,解码器可以在没有从编码器接收基础图案的情况下根据该变换系数重建残余BPU 210。与残余BPU 210相比,变换系数可以具有更少的比特,但是它们可以用于重建残余BPU 210而没有显著的质量劣化。因此,残余BPU 210被进一步压缩。
编码器可以在量化阶段214进一步压缩变换系数。在变换过程中,不同的基础图案可以表示不同的变化频率(例如,亮度变化频率)。由于人眼通常能更好地识别低频变化,因此编码器可以忽略高频变化的信息而不会在解码中引起显著的质量劣化。例如,在量化阶段214,编码器可以通过将每个变换系数除以整数值(称为“量化比例因子”)并将商舍入到其最近的整数来生成量化变换系数216。在这样的操作之后,高频基础图案的一些变换系数可以被转换为零,并且低频基础图案的变换系数可以被转换为较小的整数。编码器可以忽略零值的量化变换系数216,由此进一步压缩变换系数。量化过程也是可逆的,其中量化变换系数216可在量化逆运算中被重建为变换系数(称为“逆量化”)。
因为编码器在舍入操作中忽略了这样的除法的余数,所以量化阶段214可以是有损的。通常,量化阶段214可在处理200A中造成最多的信息损失。信息损失越大,量化变换系数216需要的比特数越少。为了获得不同程度的信息丢失,编码器可以使用量化参数或量化处理的任何其他参数的不同值。
在二进制编码阶段226,编码器可使用二进制编码技术对预测数据206和量化变换系数216进行编码,该二进制编码技术可以例如是熵编码、可变长度编码、算术编码、霍夫曼编码、上下文自适应二进制算术编码或任何其他无损或有损压缩算法。在一些实施例中,除了预测数据206和量化变换系数216之外,编码器可在二进制编码阶段226编码其他信息,诸如预测阶段204使用的预测模式、预测操作的参数、变换阶段212的变换类型、量化处理的参数(例如,量化参数)、编码器控制参数(例如,比特率控制参数)等。编码器可以使用二进制编码阶段226的输出数据来生成视频比特流228。在一些实施例中,视频比特流228可以被进一步分组以用于网络传输。
参考处理200A的重建路径,在逆量化阶段218,编码器可以对量化变换系数216执行逆量化,以生成重建变换系数。在逆变换阶段220,编码器可以基于重建变换系数生成重建残余BPU 222。编码器可以将重建残余BPU 222添加到预测BPU 208,以生成将在处理200A的下一个循环中使用的预测参考224。
应当注意,处理200A的其他变化可用于编码视频序列202。在一些实施例中,处理200A的各个阶段可以由编码器以不同的顺序执行。在一些实施例中,处理200A的一个或多个阶段可以组合成单个阶段。在一些实施例中,处理200A的单个阶段可以被划分成多个阶段。例如,变换阶段212和量化阶段214可组合成单个阶段。在一些实施例中,处理200A可以包括额外的阶段。在一些实施例中,处理200A可以省略图2A中的一个或多个阶段。
图2B示出了根据本公开的实施例的另一示例性编码处理的示意图。如图2B中所示,处理200B可以是通过修改处理200A而获得的。例如,处理200B可以由符合混合视频编码标准(例如,H.26x系列)的编码器使用。与处理200A相比,处理200B的前向路径另外包括模式决定阶段230,并将预测阶段204划分成空间预测阶段2042和时间预测阶段2044。处理200B的重建路径另外包括环路滤波阶段232和缓冲器234。
通常,预测技术可以被分类成两种类型:空间预测和时间预测。空间预测(例如,图片内预测或“帧内预测”)可以使用来自同一图片中的一个或多个已经编码的相邻BPU的像素来预测当前BPU。也就是说,空间预测中的预测参考224可包括相邻BPU。空间预测可以减少图片的固有空间冗余。时间预测(例如,图片间预测或“帧间预测”)可使用来自一个或多个经编码图片的区域来预测当前BPU。也就是说,时间预测中的预测参考224可包括经编码图片。时间预测可以减少图片的固有时间冗余。
参考处理200B,在前向路径中,编码器在空间预测阶段2042和时间预测阶段2044执行预测操作。例如,在空间预测阶段2042,编码器可以执行帧内预测。对于正被编码的图片的原始BPU,预测参考224可以包括在同一图片中已经被编码(在前向路径中)和被重建(在重建路径中)的一个或多个相邻BPU。编码器可以通过外推邻近BPU来生成预测BPU 208。外推技术可以包括例如线性外推或插值、多项式外推或插值等。在一些实施例中,编码器可以在像素级执行外推,诸如通过外推预测BPU 208的每个像素的对应采样值。用于外推的相邻BPU可以位于相对于原始BPU的各种方向上,例如垂直方向(例如,原始BPU的顶部上)、水平方向(例如,原始BPU的左侧)、对角线方向(例如,原始BPU的左下、右下、左上或右上)或在所使用的视频编码标准中界定的任何方向。对于帧内预测,预测数据206可以包括例如所使用的邻近BPU的位置(例如,坐标)、所使用的邻近BPU的大小、外推的参数、所使用的邻近BPU相对于原始BPU的方向等。
对于另一示例,在时间预测阶段2044,编码器可执行帧间预测。对于当前图片的原始BPU,预测参考224可以包括已经被编码(在前向路径中)和重建(在重建路径中)的一个或多个图片(称为“参考图片”)。在一些实施例中,可以逐个BPU对参考图片进行编码和重建。例如,编码器可以将重建残余BPU 222添加到预测BPU 208以生成重建BPU。当生成同一图片的所有重建BPU时,编码器可以生成重建图片作为参考图片。编码器可以执行“运动估计”操作,以在参考图片的范围(称为“搜索窗口”)中搜索匹配区域。参考图片中搜索窗口的位置可以基于当前图片中原始BPU的位置来确定。例如,搜索窗口可以以参考图片中具有与当前图片中的原始BPU相同的坐标的位置为中心,并且可以向外扩展预定距离。当编码器在搜索窗口中识别(例如,通过使用像素递归算法、块匹配算法等)与原始BPU相似的区域时,编码器可以将这样的区域确定为匹配区域。匹配区域可以具有与原始BPU不同的大小(例如,小于、等于、大于或具有不同的形状)。因为参考图片和当前图片在时间线中在时间上分离(例如,如图1中所示),所以可认为随着时间的推移,匹配区域“移动”到原始BPU的位置。编码器可以将这样的运动的方向和距离记录为“运动向量”。当使用多个参考图片(例如,如图1中的图片106)时,编码器可以搜索匹配区域,并对于每个参考图像确定其关联的运动图片。在一些实施例中,编码器可以向相应匹配参考图片的匹配区域的像素值分配权重。
运动估计可以用于识别各种类型的运动,诸如平移、旋转、缩放等。对于帧间预测,预测数据206可以包括例如匹配区域的位置(例如,坐标)、与匹配区域相关联的运动向量、参考图片的数量、与参考图片相关联的权重等。
为了生成预测BPU 208,编码器可以执行“运动补偿”操作。运动补偿可以用于基于预测数据206(例如,运动向量)和预测参考224来重建预测BPU 208。例如,编码器可以根据运动向量移动参考图片的匹配区域,其中编码器可以预测当前图片的原始BPU。当使用多个参考图片时(例如,如图1中的图片106),编码器可根据匹配区域的相应运动向量和平均像素值来移动参考图片的匹配区域。在一些实施例中,如果编码器已经向相应匹配参考图片的匹配区域的像素值分配了权重,则编码器可以再加上移动的匹配区域的像素值的加权和。
在一些实施例中,帧间预测可以是单向的或双向的。单向帧间预测可以使用与当前图片在同一时间方向上的一个或多个参考图片。例如,图1中的图片104是单向帧间预测图片,其中参考图片(例如,图片102)位于图片104之前。双向帧间预测可以使用当前图片的两个时间方向上的一个或多个参考图片。例如,图1中的图片106是双向帧间预测图片,其中参考图片(即,图片104和108)在图片104的两个时间方向上。
仍然参考处理200B的前向路径,在空间预测2042和时间预测阶段2044之后,在模式决定阶段230,编码器可为处理200B的当前循环选择预测模式(例如,帧内预测或帧间预测中的一个)。例如,编码器可执行率失真优化技术,在该技术中,编码器可以对预测模式进行选择以最小化根据候选预测模式的码率和在该候选预测模式下重建参考图片的失真的成本函数的值。取决于所选择的预测模式,编码器可以生成对应的预测BPU 208和预测数据206。
在处理200B的重建路径中,如果在前向路径中选择了帧内预测模式,则在生成预测参考224(例如,当前图片中已经编码和重建的当前BPU)之后,编码器可以直接将预测参考224馈送到空间预测阶段2042以供以后使用(例如,用于当前图片的下一BPU的外推)。编码器可将预测参考224馈送到环路滤波阶段232,在该环路滤波阶段,编码器可将环路滤波器应用于预测参考224以减少或消除在预测参考224的编码期间引入的失真(例如,块效应)。编码器可以在环路滤波阶段232应用各种环路滤波器技术,例如去块、采样自适应偏移、自适应环路滤波器等。经环路滤波的参考图片可存储在缓冲器234(或“解码图片缓冲器”)中以供以后使用(例如,用作视频序列202的后续图片的帧间预测参考图片)。编码器可以将一个或多个参考图片存储在缓冲器234中以在时间预测阶段2044使用。在一些实施例中,编码器可以将二进制编码阶段226的环路滤波器的参数(例如,环路滤波器强度)与量化变换系数216、预测数据206和其他信息一起进行编码。
图3A示出了根据本公开的实施例的示例性解码处理的示意图。如图3A所示,处理300A可以是对应于图2A中的压缩处理200A的解压缩处理。在一些实施例中,处理300A可以类似于处理200A的重建路径。解码器可以根据处理300A将视频比特流228解码成视频流304。视频流304可以与视频序列202非常相似。然而,由于压缩和解压缩处理(例如,图2A-2B中的量化阶段214)中的信息丢失,通常,视频流304与视频序列202不相同。与图2A-2B中的处理200A和200B类似地,解码器可以以基础处理单元(BPU)来对编码为视频比特流228的每个图片执行处理300A。例如,解码器可以以循环方式执行处理300A,在该循环方式中,解码器可以在处理300A的一次循环中对基础处理单元进行解码。在一些实施例中,解码器可以针对编码为视频比特流228中的每个图片的多个区域(例如,区域114-118)并行地执行处理300A。
在图3A中,解码器可将与经编码图片的基础处理单元(称为“编码BPU”)相关联的视频比特流228的一部分馈送到二进制解码阶段302。在二进制解码阶段302,解码器可将该一部分解码成预测数据206和量化变换系数216。解码器可以将量化变换系数216馈送到逆量化阶段218和逆变换阶段220,以生成重建残余BPU 222。解码器可以将预测数据206馈送到预测阶段204以生成预测BPU 208。解码器可以将重建残余BPU 222添加到预测BPU 208以生成预测参考224。在一些实施例中,预测参考224可以存储在缓冲器(例如,计算机存储器中的解码图片缓冲器)中。解码器可将预测参考224馈送到预测阶段204以用于在处理300A的下一循环中执行预测操作。
解码器可以循环地执行处理300A,以对编码图片的每个编码BPU进行解码,并生成用于对编码图片的下一个编码BPU进行编码的预测参考224。在对编码图片的所有编码BPU进行解码之后,解码器可以将该图片输出到视频流304以进行显示,并且继续对视频比特流228中的下一个编码图片进行解码。
在二进制解码阶段302,解码器可以执行编码器所使用的二进制编码技术(例如,熵编码、可变长度编码、算术编码、霍夫曼编码、上下文自适应二进制算术编码、或任何其他无损压缩算法)的逆运算。在一些实施例中,除了预测数据206和量化变换系数216之外,解码器可以在二进制解码阶段302对其他信息进行解码,这些其他信息例如可以是预测模式、预测操作的参数、变换类型、量化处理的参数(例如,量化参数)、编码器控制参数(例如,比特率控制参数)等。在一些实施例中,如果视频比特流228以分组的形式通过网络传输,则解码器可以在将视频比特流228馈送到二进制解码阶段302之前对其进行去分组处理。
图3B示出了根据本公开的实施例的另一示例性解码处理的示意图。如图3B所示,处理300B可以是通过对处理300A进行修改而获得的。例如,处理300B可以由符合混合视频编码标准(例如,H.26x系列)的解码器使用。与处理300A相比,处理300B额外地将预测阶段204划分成空间预测阶段2042和时间预测阶段2044,并且额外地包括环路滤波阶段232和缓冲器234。
在处理300B中,对于正被解码的编码图片(称为“当前图片”)的编码基础处理单元(称为“当前BPU”),由解码器从二进制解码阶段302解码获得的预测数据206可以根据编码器使用什么预测模式来编码当前BPU而包括各种类型的数据。例如,如果编码器使用帧内预测来编码当前BPU,则预测数据206可以包括指示帧内预测的预测模式指示符(例如,标志值)、帧内预测操作的参数等。帧内预测操作的参数可以包括例如用作参考的一个或多个相邻BPU的位置(例如,坐标)、相邻BPU的大小、外推参数、相邻BPU相对于原始BPU的方向等。对于另一示例,如果编码器使用帧间预测来编码当前BPU,则预测数据206可以包括指示帧间预测的预测模式指示符(例如,标志值)、帧间预测操作的参数等。帧间预测操作的参数可以包括例如与当前BPU相关联的参考图片的数量、分别与参考图片相关联的权重、一个或多个匹配区域在各自参考图片中的位置(例如,坐标)、分别与匹配区域相关联的一个或多个运动向量等。
基于预测模式指示符,解码器可以决定是在空间预测阶段2042执行空间预测(例如,帧内预测)还是在时间预测阶段2044执行时间预测(例如,帧间预测)。参考图2B已经详细描述了执行这样的空间预测或时间预测的细节,并且在下文中将不再重复。在执行这样的空间预测或时间预测之后,解码器可以生成预测BPU 208。解码器可以将预测BPU 208和重建残余BPU 222相加,以生成预测参考224,如参考图3A所描述的那样。
在处理300B中,解码器可将预测参考224馈送到空间预测阶段2042或时间预测阶段2044,以在处理300B的下一循环中执行预测操作。例如,如果在空间预测阶段2042使用帧内预测来解码当前BPU,则在生成预测参考224(例如,经解码的当前BPU)之后,解码器可以直接将预测参考224馈送给空间预测阶段2042以供后续使用(例如,用于当前图片的下一BPU的外推)。如果在时间预测阶段2044使用帧间预测对当前BPU进行解码,则在生成预测参考224(例如,其中所有BPU都已被解码的参考图片)之后,解码器可以将预测参考224馈送到环路滤波阶段232以减少或消除失真(例如,块效应)。解码器可以以如参考图2B所描述的方式将环路滤波器应用于预测参考224。经环路滤波后的参考图片可存储在缓冲器234(例如,计算机存储器中的解码图片缓冲器)中以供后续使用(例如,用作视频比特流228的后续的编码图片的帧间预测参考图片)。解码器可以将一个或多个参考图片存储在缓冲器234中以在时间预测阶段2044使用。在一些实施例中,预测数据可以还包括环路滤波器的参数(例如,环路滤波器强度)。在一些实施例中,当预测数据206的预测模式指示符指示使用帧间预测来编码当前BPU时,预测数据包括环路滤波器的参数。
可以有四种类型的环路滤波器。例如,环路滤波器可以包括去块滤波器、采样自适应偏移(“SAO”)滤波器、具有色度缩放的亮度映射(“LMCS”)滤波器和自适应环路滤波器(“ALF”)。应用四种环路滤波器的顺序可以是LMCS滤波器、去块滤波器、SAO滤波器和ALF。LMCS滤波器可以包括两个主要组成部分。第一组成部分可以是基于自适应分段线性模型的亮度分量的环内映射。第二组成部分可以针对色度分量,并且可以应用依赖于亮度的色度残差缩放。
图4示出了根据本公开的实施例的用于编码或解码视频的示例性设备的框图。如图4所示,设备400可以包括处理器402。当处理器402执行本文描述的指令时,设备400可以成为用于视频编码或解码的专用机器。处理器402可以是能够操纵或处理信息的任何类型的电路。例如,处理器402可以包括任何数量的中央处理单元(或“CPU”)、图形处理单元(或“GPU”)、神经处理单元(“NPU”)、微控制器单元(“MCU”)、光学处理器、可编程逻辑控制器、微控制器、微处理器、数字信号处理器、知识产权(IP)核、可编程逻辑阵列(PLA)、可编程阵列逻辑(PAL)、通用阵列逻辑(GAL)、复杂可编程逻辑器件(CPLD)、现场可编程门阵列(FPGA)、片上系统(SoC)、专用集成电路(ASIC)等的任何组合。在一些实施例中,处理器402还可以是被分组为单个逻辑组件的一组处理器。例如,如图4所示,处理器402可以包括多个处理器,包括处理器402a、处理器402b和处理器402n。
设备400还可以包括被配置为存储数据(例如,指令集、计算机代码、中间数据等)的存储器404。例如,如图4所示,被存储的数据可以包括程序指令(例如,用于实施处理200A、200B、300A或300B中的阶各个段的程序指令)和用于处理的数据(例如,视频序列202、视频比特流228或视频流304)。处理器402可以(例如,经由总线410)访问程序指令和用于处理的数据,并且执行程序指令以对用于处理的数据执行操作或操纵。存储器404可以包括高速随机存取存储设备或非易失性存储设备。在一些实施例中,存储器404可以包括任意数量的随机存取存储器(RAM)、只读存储器(ROM)、光盘、磁盘、硬盘驱动器、固态驱动器、闪存驱动器、安全数字(SD)卡、记忆棒、紧凑型闪存(CF)卡等的任意组合。存储器404还可以是分组为单个逻辑组件的一组存储器(图4中未示出)。
总线410可以是在设备400内部的组件之间传送数据的通信设备,例如内部总线(例如,CPU-存储器总线)、外部总线(例如,通用串行总线端口、外围组件互连高速端口)等。
为了便于解释而不导致不清楚,在本公开中,处理器402和其他数据处理电路被统称为“数据处理电路”。数据处理电路可以完全实施为硬件,或者实施为软件、硬件或固件的组合。另外,数据处理电路可以是单个独立模块,或者可以完全或部分地组合到设备400的任何其他组件中。
设备400还可以包括网络接口406,以提供与网络(例如,因特网、内联网、局域网、移动通信网络等)的有线或无线通信。在一些实施例中,网络接口406可以包括任何数量的网络接口控制器(NIC)、射频(RF)模块、应答器、收发器、调制解调器、路由器、网关、有线网络适配器、无线网络适配器、蓝牙适配器、红外适配器、近场通信(“NFC”)适配器、蜂窝网络芯片等的任何组合。
在一些实施例中,设备400还可以包括外围接口408,以提供到一个或多个外围设备的连接。如图4所示,外围设备可以包括但不限于光标控制设备(例如,鼠标、触摸板或触摸屏)、键盘、显示器(例如,阴极射线管显示器、液晶显示器或发光二极管显示器)、视频输入装置(例如,照相机或可通信地耦接到视频档案的输入接口)等。
应注意,视频编解码器(例如,执行处理200A、200B、300A或300B的编解码器)可实施为设备400中的任何软件或硬件模块的任何组合。例如,处理200A、200B、300A或300B的一些或所有阶段可以被实施为设备400的一个或多个软件模块,例如可以被加载到存储器404中的程序指令。对于另一示例,处理200A、200B、300A或300B的一些或所有阶段可以被实施为设备400的一个或多个硬件模块,例如专用数据处理电路(例如,FPGA、ASIC、NPU等)。
在量化和逆量化功能块(例如,图2A或图2B的量化214和逆量化218、图3A或图3B的逆量化218)中,使用量化参数(QP)来确定应用于预测残差的量化(和逆量化)的数量。可以在高级别信令用于对图片或条带进行编码的初始QP值,例如,在图片参数集(PPS)中使用init_qp_minus26语法元素以及在条带头中使用slice_qp_delta语法元素。此外,可以使用以量化组的粒度发送的增量QP值,在局部级别为每个CU调整QP值。
对于帧内预测,空间相邻重建采样被用作参考采样来预测当前块的采样值。通常,由于编码次序是从左到右和从上到下,因此当对当前块进行编码时,左相邻重建采样和顶相邻重建采样通常已经被编码。因此,在帧内预测中,顶相邻重建采样、右上相邻重建采样、左上相邻重建采样、左相邻重建采样和左下相邻重建采样被用作当前块的参考采样。如图5所示,白色块是将要以M×N为大小预测的当前块。用点图案填充的块是参考采样,这些参考采样是相邻块的重建采样。在AVS3中,顶参考采样的数量为M,右上参考采样的数量为M,左参考采样的数量为N,左下参考采样的数量为N,左上参考采样的数量为1。除了具有点图案的参考采样之外,如图5所示,利用对角线图案填充的块也被用作参考采样,从用点图案填充的采样对这些参考采样进行边缘填充。在顶行存在两个边缘填充采样,并且在左列存在两个边缘填充采样。边缘填充采样也被用作参考采样。
在本公开中,当前块的宽度为M,当前块的高度为N,顶参考采样被表示为r[1]至r[M],右上参考采样被表示为r[M+1]至r[2M];左参考采样被表示为c[1]至c[N],左下参考采样被表示为c[N+1]至c[2N],左上参考采样被表示为r[0]或c[0],顶行中的边缘填充采样被表示为r[-1]和r[-2],并且左列中的边缘填充采样被表示为c[-1]和c[-2]。
在帧内预测中,存在多个预测模式。在AVS3中,存在65个帧内预测模式,包括直流(DC)模式、平面模式、双线性模式以及其他62个角度模式,在下面对这些模式进行详细描述。
DC模式是其中使用左参考采样和顶参考采样的直流的模式。具体地,如果左参考采样和顶参考采样两者都可用,则左参考采样和顶参考采样的平均值被用作当前块中所有采样的预测值。在一些实施例中,如果左参考采样可用且顶参考采样不可用,则左参考采样的平均值被用作当前块中所有采样的预测值。如果左参考采样不可用且顶参考采样可用,则顶参考采样的平均值被用作当前块中所有采样的预测值;以及如果左参考采样和顶参考采样两者都不可用,则当前比特深度的采样值范围的中值被用作当前块中所有采样的预测值。
平面模式是其中采样的预测值全部在平面内的模式,即,每个采样的预测值都遵循二维线性模型。在一些实施例中,顶参考采样和左上参考采样用于导出水平方向(图片宽度方向)上的斜率,并且左参考采样和左上参考采样用于导出垂直方向(图片高度方向)上的斜率,如等式1和等式2所示,其中ib是水平斜率,并且ic是垂直斜率:
ib=((ih<<5)×imh+(1<<(ish-1)))>>ish(等式1)
ic=((iv<<5)×imv+(1<<(isv-1)))>>isv(等式2)
其中imh、imv、ish和isv取决于块的尺寸,并且在一些实施例中定义如下:
imh=ibMult[Log(M)-2],
ish=ibShift[Log(M)-2],
imv=ibMult[Log(N)-2],
isv=ibShift[Log(N)-2],
其中:
ibMult[5]={13,17,5,11,23},
ibShift[5]={7,10,11,15,19}。
此外,可以基于以下等式3和等式4导出ih和iv:
Figure BDA0004039832290000211
Figure BDA0004039832290000212
在一些实施例中,基于等式5,使用右上采样和左下采样的平均值作为当前块中的中心采样的预测值:
ia=(r[M]+c[N])<<(5 -1)=(r[M]+c[N])<<4(等式5)
其中ia是右移5位后的平均值。
在一些实施例中,基于两个方向上的斜率的中心值,基于等式6来推导获得当前块中的所有采样的预测值:Pred[x][y]=(ia+(x-((M>>1)-1))×ib+(y-((N>>1)-1))×ic+16)>>5(x=0~M-1,y=0~N-1)(等式6),其中Pred[x][y]是位于当前块中的(x,y)的采样的预测值。
在以下对双线性模式的描述中,双线性模式的预测值是两个线性内插值的加权平均值。如图6所示,当前块的右下角采样C的预测值是根据A到C的距离以及B到C的距离对右上参考采样A和左下参考采样B进行加权平均获得的加权平均值。对于右边界,通过根据预测采样与参考采样A之间的距离以及预测采样与角采样C之间的距离对参考采样A和角采样C的预测值进行加权平均,来生成预测值。对于底边界采样,通过根据预测采样与参考采样B之间的距离以及预测采样与角采样C之间的距离对参考采样B和角采样C的预测值进行加权平均,来生成预测值。然后,通过对水平线性预测和垂直线性预测的预测值进行加权平均,来预测位于块中的剩余采样。通过根据当前预测采样到对应左参考采样的距离以及当前预测采样到对应右边界采样的距离对水平对应左参考采样和右边界采样进行加权平均,来生成水平线性预测的预测值。通过根据当前预测采样到对应顶参考采样的距离以及当前预测采样到对应底边界采样的距离对垂直对应顶参考采样和底边界采样进行加权平均,来生成垂直线性预测的预测值。
可以基于下面的等式7来描述预测处理:
Pred[x][y]=((((ia-c[y+1])×(x+1))<<Log(N))+(((ib-r[x+1])×(y+1))<<Log(M))+((r[x+1]+c[y+1])<<(Log(M)+Log(N)))+((ic<<1)-ia-ib)×x×y+(1<<(Log(M)+Log(N))))>>(Log(M)+Log(N)+1),(x=0~M-1,y=0~N-1)(等式7)(如果M等于N)
例如,ia表示采样A且等于r[M],ib表示采样B且等于c[N],ic表示预测采样C。如果M等于N,ic=(ia+ib+1)>>1;否则ic=(((ia<<Log(M))+(ib<<Log(N)))×权重+(1<<(i移位+5)))>>(i移位+6),其中i移位=Log(Min(M,N)),权重=双线性权重[Log(Max(M,N)/Min(M,N))–1],双线性权重[3]={21,13,7}。
在一些实施例中,在角度模式下通过参考采样的定向外推或内插来生成预测值。在AVS3中,如图7所示,有63个不同的方向。图7中的箭头表示从参考采样到预测采样的预测方向。每个角度预测模式具有不同的预测方向。
在一些实施例中,通过沿特定方向进行预测来计算当前采样的参考位置。例如,预测方向可以是参考位置和当前采样之间接近水平方向的方向。再例如,预测方向可以是参考位置和当前采样之间的接近垂直方向的方向。然后,通过使用周围的四个整型考采样来对该位置的参考采样值进行内插。
如图8所示,当前采样是K,采样K是指当前预测方向上的顶参考采样行中的整型参考采样b和整型参考采样c之间的位置。然后,使用参考采样a、b、c和d来基于等式8推导获得采样k的预测值:
Predk=(f0×a+f1×b+f2×c+f3×d)>>移位(等式8)
例如,Predk是采样K的预测值,f0、f1、f2和f3是由待被内插的子像素位置决定的内插滤波器系数,“移位”是取决于f0至f3之和的右移位数。由于不同的子像素位置对应于不同的滤波器(即,不同的滤波器系数),帧内预测方法需要一组滤波器。
在AVS3中,由块区域和行/列编号确定该组内插滤波器。在一些实施例中,等于64的阈值被用于区分小块和大块。小块和大块使用不同组的内插滤波器。在一些实施例中,不同的行/列可以使用不同组的内插滤波器。如果当前预测模式的预测方向对于垂直方向的接近程度与对于水平方向的接近程度相比更接近垂直方向,则第一行和剩余行使用不同组的内插滤波器。在一些实施例中,如果当前预测模式的预测方向对于水平方向的接近程度与对于垂直方向的接近程度相比更接近水平方向,则第一列和剩余列使用不同组的内插滤波器。
本公开提供了用于改善帧内预测中的角度模式的方法。
在AVS3中,使用4抽头内插滤波器来生成内部预测采样的预测值。对于一些平滑块,4抽头滤波器的截止频率可能太高。因此,在一些实施例中,可以使用抽头数大于4的长抽头内插滤波器。例如,可以使用8抽头内插滤波器。
如图9所示,围绕待预测采样所参考的参考位置的8个整型参考采样a、b、c、d、e、f、g、h被用于根据等式(9)生成采样的预测值:
Predk=(f0×a+f1×b+f2×c+f3×d+f4×e+f5×f+f6×g+f7×h+偏移)>>移位(等式9)
其中Predk是采样K的预测值,f0、f1、f2、f3、f4、f5、f6和f7是内插滤波器系数,“移位”是右移位数。在一些实施例中,f0至f7之和等于2的移位次幂,且偏移量等于2的(移位-1)次幂。在这个实施例中,子像素位置的精度是1/32像素。因为每个子像素位置具有不同的内插滤波器,所以在一组滤波器中有32个滤波器。
在一些实施例中,存在多组内插滤波器,并且每组含有32个滤波器,每个滤波器用于每个子像素位置。根据块区域和行/列编号,从这些多个组中选择一组滤波器。例如,基于下面的等式(10)确定过滤器编号:
filter_idx=multiple_filter_enabled?:(j<TH0?(M×N<TH1)+1:(M×N<TH1)):3(等式10),
其中等式10可以被重整为下面的等式(等式10a):
filter_idx=multiple_filter_enabled?:(j<TH0?(M×N<TH1?a:b):(M×N<TH1?b:c)):d(等式10a)
其中a、b、c和d是四个不同的编号。
例如,filter_idx是滤波器组的编号,M是块的宽度,N是块的高度,j是当前采样所在的行/列的编号,TH0和TH1是两个阈值,并且multiple_filter_enabled是在序列头中信令的标志。例如,对于亮度块,TH0被设置为1,对于色度块,TH0被设置为2,并且对于亮度块,TH1被设置为64,对于色度块,TH1被设置为32。对于当前预测方向,如果顶参考采样和左上参考采样用于生成当前预测方向上的预测值,则j是行编号;如果左参考采样和左下参考采样被用于生成预测值,则j是列编号。替代地,如果当前预测模式的预测方向对于垂直方向的接近程度与对于水平方向的接近程度相比,预测方向更接近垂直方向,则j是行编号;如果当前预测模式的预测方向对于水平方向的接近程度与对于垂直方向的接近程度相比,预测方向更接近水平方向,则j是列编号。
为了支持8抽头内插,如图9所示,填充有对角线图案的四个采样边角填充在顶参考行中,其中r[-1]等于c[1],r[-2]等于c[2],r[-3]等于c[3],r[-4]等于c[4]。此外,填充有对角线图案的四个其它采样被边角填充在左参考列中,其中c[-1]等于r[1],c[-2]等于r[2],c[-3]等于r[3],并且c[-4]等于r[4]。
例如,第一组示例性8抽头滤波器如下:
{483,3171,7631,10030,7623,3221,567,42},
{441,3045,7497,10030,7757,3347,609,42},{399,2919,7363,10030,7891,3473,651,42},{378,2835,7254,10005,7983,3578,693,42},{336,2688,7078,9980,8142,3746,756,42},{315,2604,6969,9955,8234,3851,798,42},{273,2457,6793,9930,8393,4019,861,42},{252,2373,6684,9905,8485,4124,903,42},{231,2268,6533,9855,8602,4271,966,42},{210,2184,6424,9830,8694,4376,1008,42},{189,2079,6273,9780,8811,4523,1071,42},{168,1974,6101,9688,8903,4695,1176,63},{147,1869,5950,9638,9020,4842,1239,63},{126,1785,5841,9613,9112,4947,1281,63},{126,1722,5694,9496,9162,5098,1386,84},{105,1617,5543,9446,9279,5245,1449,84},{84,1512,5392,9396,9396,5392,1512,84},{84,1449,5245,9279,9446,5543,1617,105},{84,1386,5098,9162,9496,5694,1722,126},{63,1281,4947,9112,9613,5841,1785,126},{63,1239,4842,9020,9638,5950,1869,147},{63,1176,4695,8903,9688,6101,1974,168},{42,1071,4523,8811,9780,6273,2079,189},{42,1008,4376,8694,9830,6424,2184,210},{42,966,4271,8602,9855,6533,2268,231},{42,903,4124,8485,9905,6684,2373,252},{42,861,4019,8393,9930,6793,2457,273},{42,798,3851,8234,9955,6969,2604,315},{42,756,3746,8142,9980,7078,2688,336},{42,693,3578,7983,10005,7254,2835,378},{42,651,3473,7891,10030,7363,2919,399},{42,609,3347,7757,10030,7497,3045,441}
第二组示例性8抽头滤波器如下:
{231,2919,7898,10756,7902,2894,189,-21},
{189,2772,7722,10731,8061,3062,252,-21},
{147,2646,7609,10773,8220,3163,252,-42},
{126,2541,7458,10723,8337,3310,315,-42},
{84,2394,7303,10740,8521,3453,336,-63},
{42,2226,7085,10690,8705,3663,420,-63},
{21,2142,6997,10707,8822,3743,420,-84},
{0,2016,6804,10632,8964,3932,504,-84},
{-21,1911,6653,10582,9081,4079,567,-84},
{-42,1806,6523,10574,9223,4201,588,-105},
{-63,1680,6330,10499,9365,4390,672,-105},
{-84,1554,6137,10424,9507,4579,756,-105},
{-84,1491,6032,10391,9607,4680,777,-126},
{-105,1365,5839,10316,9749,4869,861,-126},{-105,1302,5713,10241,9824,4995,924,-126},{-126,1176,5520,10166,9966,5184,1008,-126},{-126,1092,5352,10066,10066,5352,1092,-126},{-126,1008,5184,9966,10166,5520,1176,-126},{-126,924,4995,9824,10241,5713,1302,-105},{-126,861,4869,9749,10316,5839,1365,-105},{-126,777,4680,9607,10391,6032,1491,-84},
{-105,756,4579,9507,10424,6137,1554,-84},
{-105,672,4390,9365,10499,6330,1680,-63},
{-105,588,4201,9223,10574,6523,1806,-42},
{-84,567,4079,9081,10582,6653,1911,-21},
{-84,504,3932,8964,10632,6804,2016,0},
{-84,420,3743,8822,10707,6997,2142,21},
{-63,420,3663,8705,10690,7085,2226,42},
{-63,336,3453,8521,10740,7303,2394,84},{-42,315,3310,8337,10723,7458,2541,126},{-42,252,3163,8220,10773,7609,2646,147},{-21,252,3062,8061,10731,7722,2772,189},
第三组示例性8抽头滤波器如下:
{0,1344,4032,5632,4032,1344,0,0},
{-21,1260,3923,5607,4124,1449,42,0},
{-42,1176,3814,5582,4216,1554,84,0},
{-42,1134,3751,5574,4291,1613,84,-21},
{-42,1092,3688,5566,4366,1672,84,-42},
{-63,1008,3579,5541,4458,1777,126,-42},{-84,924,3470,5516,4550,1882,168,-42},
{-84,903,3428,5491,4575,1924,189,-42},
{-84,882,3386,5466,4600,1966,210,-42},
{-105,798,3277,5441,4692,2071,252,-42},{-126,714,3168,5416,4784,2176,294,-42},{-126,651,3063,5383,4884,2277,315,-63},{-126,588,2958,5350,4984,2378,336,-84},{-105,609,2941,5300,4967,2399,357,-84},{-84,630,2924,5250,4950,2420,378,-84},
{-84,567,2798,5175,5025,2546,441,-84},
{-84,504,2672,5100,5100,2672,504,-84},
{-84,441,2546,5025,5175,2798,567,-84},
{-84,378,2420,4950,5250,2924,630,-84},
{-84,357,2399,4967,5300,2941,609,-105},{-84,336,2378,4984,5350,2958,588,-126},{-63,315,2277,4884,5383,3063,651,-126},{-42,294,2176,4784,5416,3168,714,-126},{-42,252,2071,4692,5441,3277,798,-105},{-42,210,1966,4600,5466,3386,882,-84},
{-42,189,1924,4575,5491,3428,903,-84},
{-42,168,1882,4550,5516,3470,924,-84},
{-42,126,1777,4458,5541,3579,1008,-63},{-42,84,1672,4366,5566,3688,1092,-42},
{-21,84,1613,4291,5574,3751,1134,-42},
{0,84,1554,4216,5582,3814,1176,-42},
{0,42,1449,4124,5607,3923,1260,-21},
第四组示例性8抽头滤波器如下:
{672,3360,7520,9664,7520,3360,672,0},
{651,3276,7390,9597,7587,3490,756,21},{630,3192,7260,9530,7654,3620,840,42},{609,3108,7130,9463,7721,3750,924,63},{588,3024,7000,9396,7788,3880,1008,84},{567,2940,6870,9329,7855,4010,1092,105},{546,2856,6740,9262,7922,4140,1176,126},{525,2772,6610,9195,7989,4270,1260,147},{504,2688,6480,9128,8056,4400,1344,168},{483,2604,6350,9061,8123,4530,1428,189},{462,2520,6220,8994,8190,4660,1512,210},{441,2436,6090,8927,8257,4790,1596,231},{420,2352,5960,8860,8324,4920,1680,252},{399,2268,5830,8793,8391,5050,1764,273},{378,2184,5700,8726,8458,5180,1848,294},{357,2100,5570,8659,8525,5310,1932,315},{336,2016,5440,8592,8592,5440,2016,336},{315,1932,5310,8525,8659,5570,2100,357},{294,1848,5180,8458,8726,5700,2184,378},{273,1764,5050,8391,8793,5830,2268,399},{252,1680,4920,8324,8860,5960,2352,420},{231,1596,4790,8257,8927,6090,2436,441},{210,1512,4660,8190,8994,6220,2520,462},
{189,1428,4530,8123,9061,6350,2604,483},
{168,1344,4400,8056,9128,6480,2688,504},
{147,1260,4270,7989,9195,6610,2772,525},
{126,1176,4140,7922,9262,6740,2856,546},
{105,1092,4010,7855,9329,6870,2940,567},
{84,1008,3880,7788,9396,7000,3024,588},
{63,924,3750,7721,9463,7130,3108,609},
{42,840,3620,7654,9530,7260,3192,630},
{21,756,3490,7587,9597,7390,3276,651}
{0,42,1449,4124,5607,3923,1260,-21},
在此实施例的另一示例中,第一组示例性8抽头滤波器如下:{253,1615,3785,4994,3781,1641,293,22},
{231,1553,3719,4994,3847,1703,315,22},
{209,1491,3653,4994,3913,1765,337,22},
{198,1449,3600,4981,3959,1816,359,22},
{176,1376,3514,4968,4038,1898,392,22},
{165,1334,3461,4955,4084,1949,414,22},
{143,1261,3375,4942,4163,2031,447,22},
{132,1219,3322,4929,4209,2082,469,22},
{121,1166,3249,4903,4268,2153,502,22},
{110,1124,3196,4890,4314,2204,524,22},
{99,1071,3123,4864,4373,2275,557,22},
{88,1018,3039,4818,4419,2359,610,33},
{77,965,2966,4792,4478,2430,643,33},
{66,923,2913,4779,4524,2481,665,33},
{66,890,2842,4720,4550,2554,718,44},
{55,837,2769,4694,4609,2625,751,44},
{44,784,2696,4668,4668,2696,784,44},
{44,751,2625,4609,4694,2769,837,55},
{44,718,2554,4550,4720,2842,890,66},
{33,665,2481,4524,4779,2913,923,66},
{33,643,2430,4478,4792,2966,965,77},
{33,610,2359,4419,4818,3039,1018,88},{22,557,2275,4373,4864,3123,1071,99},{22,524,2204,4314,4890,3196,1124,110},{22,502,2153,4268,4903,3249,1166,121},{22,469,2082,4209,4929,3322,1219,132},{22,447,2031,4163,4942,3375,1261,143},{22,414,1949,4084,4955,3461,1334,165},{22,392,1898,4038,4968,3514,1376,176},{22,359,1816,3959,4981,3600,1449,198},{22,337,1765,3913,4994,3653,1491,209},{22,315,1703,3847,4994,3719,1553,231},
第二组示例性8抽头滤波器如下:{121,1507,3902,5366,3904,1494,101,-11},{99,1434,3816,5353,3983,1576,134,-11},{77,1372,3761,5373,4062,1625,136,-22},{66,1319,3688,5347,4121,1696,169,-22},{44,1246,3613,5354,4213,1765,182,-33},{22,1162,3507,5328,4305,1867,226,-33},{11,1120,3465,5335,4364,1905,228,-44},{0,1056,3372,5296,4436,1996,272,-44},{-11,1003,3299,5270,4495,2067,305,-44},{-22,950,3237,5264,4567,2125,318,-55},{-33,886,3144,5225,4639,2216,362,-55},{-44,822,3051,5186,4711,2307,406,-55},{-44,789,3002,5167,4763,2354,419,-66},{-55,725,2909,5128,4835,2445,463,-66},{-55,692,2849,5089,4874,2505,496,-66},{-66,628,2756,5050,4946,2596,540,-66},{-66,584,2676,4998,4998,2676,584,-66},{-66,540,2596,4946,5050,2756,628,-66},{-66,496,2505,4874,5089,2849,692,-55},{-66,463,2445,4835,5128,2909,725,-55},{-66,419,2354,4763,5167,3002,789,-44},{-55,406,2307,4711,5186,3051,822,-44},{-55,362,2216,4639,5225,3144,886,-33},{-55,318,2125,4567,5264,3237,950,-22},{-44,305,2067,4495,5270,3299,1003,-11},{-44,272,1996,4436,5296,3372,1056,0},{-44,228,1905,4364,5335,3465,1120,11},{-33,226,1867,4305,5328,3507,1162,22},{-33,182,1765,4213,5354,3613,1246,44},{-22,169,1696,4121,5347,3688,1319,66},{-22,136,1625,4062,5373,3761,1372,77},{-11,134,1576,3983,5353,3816,1434,99},
第三组示例性8抽头滤波器如下:{0,704,1984,2816,1984,704,0,0},
{-11,662,1931,2803,2030,755,22,0},
{-22,620,1878,2790,2076,806,44,0},
{-22,598,1849,2784,2115,833,46,-11},
{-22,576,1820,2778,2154,860,48,-22},
{-33,534,1767,2765,2200,911,70,-22},
{-44,492,1714,2752,2246,962,92,-22},
{-44,481,1694,2739,2259,982,103,-22},{-44,470,1674,2726,2272,1002,114,-22},{-55,428,1621,2713,2318,1053,136,-22},{-66,386,1568,2700,2364,1104,158,-22},{-66,353,1519,2681,2416,1151,171,-33},{-66,320,1470,2662,2468,1198,184,-44},{-55,329,1463,2636,2461,1207,195,-44},{-44,338,1456,2610,2454,1216,206,-44},{-44,305,1396,2571,2493,1276,239,-44},{-44,272,1336,2532,2532,1336,272,-44},{-44,239,1276,2493,2571,1396,305,-44},{-44,206,1216,2454,2610,1456,338,-44},{-44,195,1207,2461,2636,1463,329,-55},{-44,184,1198,2468,2662,1470,320,-66},{-33,171,1151,2416,2681,1519,353,-66},{-22,158,1104,2364,2700,1568,386,-66},{-22,136,1053,2318,2713,1621,428,-55},{-22,114,1002,2272,2726,1674,470,-44},{-22,103,982,2259,2739,1694,481,-44},{-22,92,962,2246,2752,1714,492,-44},
{-22,70,911,2200,2765,1767,534,-33},
{-22,48,860,2154,2778,1820,576,-22},
{-11,46,833,2115,2784,1849,598,-22},
{0,44,806,2076,2790,1878,620,-22},
{0,22,755,2030,2803,1931,662,-11},
第四组示例性8抽头滤波器如下:{352,1696,3744,4800,3744,1696,352,0},{341,1654,3680,4767,3777,1760,394,11},{330,1612,3616,4734,3810,1824,436,22},{319,1570,3552,4701,3843,1888,478,33},{308,1528,3488,4668,3876,1952,520,44},{297,1486,3424,4635,3909,2016,562,55},{286,1444,3360,4602,3942,2080,604,66},{275,1402,3296,4569,3975,2144,646,77},{264,1360,3232,4536,4008,2208,688,88},{253,1318,3168,4503,4041,2272,730,99},
{242,1276,3104,4470,4074,2336,772,110},
{231,1234,3040,4437,4107,2400,814,121},
{220,1192,2976,4404,4140,2464,856,132},
{209,1150,2912,4371,4173,2528,898,143},
{198,1108,2848,4338,4206,2592,940,154},
{187,1066,2784,4305,4239,2656,982,165},
{176,1024,2720,4272,4272,2720,1024,176},
{165,982,2656,4239,4305,2784,1066,187},
{154,940,2592,4206,4338,2848,1108,198},
{143,898,2528,4173,4371,2912,1150,209},
{132,856,2464,4140,4404,2976,1192,220},
{121,814,2400,4107,4437,3040,1234,231},
{110,772,2336,4074,4470,3104,1276,242},
{99,730,2272,4041,4503,3168,1318,253},
{88,688,2208,4008,4536,3232,1360,264},
{77,646,2144,3975,4569,3296,1402,275},
{66,604,2080,3942,4602,3360,1444,286},
{55,562,2016,3909,4635,3424,1486,297},
{44,520,1952,3876,4668,3488,1528,308},
{33,478,1888,3843,4701,3552,1570,319},
{22,436,1824,3810,4734,3616,1612,330},
{11,394,1760,3777,4767,3680,1654,341}
在第三示例中,第一组示例性8抽头滤波器如下:{26,135,221,255,222,135,28,2},
{24,131,219,255,224,139,30,2},
{22,128,217,255,226,142,32,2},
{20,125,215,255,228,145,34,2},
{18,120,213,254,230,149,38,2},
{17,117,211,254,231,152,40,2},
{15,112,208,254,233,156,44,2},
{14,109,207,253,234,159,46,2},
{13,105,204,253,236,162,49,2},
{11,102,203,253,237,165,51,2},
{10,98,200,252,239,168,55,2},
{9,94,197,251,240,171,59,3},
{8,90,195,250,242,174,62,3},
{7,87,193,250,243,176,65,3},
{7,84,190,248,244,179,68,4},
{6,80,187,247,245,182,72,5},
{5,75,185,247,247,185,75,5},
{5,72,182,245,247,187,80,6},
{4,68,179,244,248,190,84,7},
{3,65,176,243,250,193,87,7},
{3,62,174,242,250,195,90,8},
{3,59,171,240,251,197,94,9},
{2,55,168,239,252,200,98,10},
{2,51,165,237,253,203,102,11},
{2,49,162,236,253,204,105,13},
{2,46,159,234,253,207,109,14},
{2,44,156,233,254,208,112,15},
{2,40,152,231,254,211,117,17},
{2,38,149,230,254,213,120,18},
{2,34,145,228,255,215,125,20},
{2,32,142,226,255,217,128,22},
{2,30,139,224,255,219,131,24}
第二组示例性8抽头滤波器如下:{13,140,228,264,228,140,12,-1},
{10,136,226,264,230,144,15,-1},
{8,132,225,264,232,148,17,-2},
{7,128,223,264,233,151,20,-2},
{5,123,221,264,236,155,23,-3},
{2,117,218,264,238,160,28,-3},
{1,115,217,264,241,162,29,-5},
{0,109,214,263,243,166,34,-5},
{-1,105,212,262,244,169,38,-5},
{-2,101,211,262,246,172,40,-6},
{-3,96,208,261,248,176,44,-6},
{-5,91,205,261,250,179,49,-6},
{-5,87,204,261,251,181,52,-7},
{-6,82,201,260,253,185,56,-7},
{-6,79,199,259,253,187,60,-7},
{-7,74,196,258,255,191,64,-7},
{-7,68,194,257,257,194,68,-7},
{-7,64,191,255,258,196,74,-7},
{-7,60,187,253,259,199,79,-6},
{-7,56,185,253,260,201,82,-6},
{-7,52,181,251,261,204,87,-5},
{-6,49,179,250,261,205,91,-5},
{-6,44,176,248,261,208,96,-3},
{-6,40,172,246,262,211,101,-2},
{-5,38,169,244,262,212,105,-1},
{-5,34,166,243,263,214,109,0},
{-5,29,162,241,264,217,115,1},
{-3,28,160,238,264,218,117,2},
{-3,23,155,236,264,221,123,5},
{-2,20,151,233,264,223,128,7},
{-2,17,148,232,264,225,132,8},
{-1,15,144,230,264,226,136,10},
第三组示例性8抽头滤波器如下:{0,73,115,136,115,73,0,0},
{-1,70,114,135,117,75,2,0},{-2,67,112,134,118,78,5,0},{-2,65,112,134,119,79,6,-1},{-2,62,112,134,120,80,8,-2},{-3,59,110,134,122,82,10,-2},{-5,56,109,134,123,85,12,-2},{-5,55,108,134,123,86,13,-2},{-5,54,107,133,123,87,15,-2},{-6,51,106,133,124,89,17,-2},{-7,48,104,133,126,91,19,-2},{-7,45,103,132,127,93,22,-3},{-7,42,102,132,128,95,25,-5},{-6,41,102,132,128,94,26,-5},{-5,41,102,131,127,94,27,-5},{-5,37,100,130,128,96,31,-5},{-5,34,98,129,129,98,34,-5},{-5,31,96,128,130,100,37,-5},{-5,27,94,127,131,102,41,-5},{-5,26,94,128,132,102,41,-6},{-5,25,95,128,132,102,42,-7},{-3,22,93,127,132,103,45,-7},{-2,19,91,126,133,104,48,-7},{-2,17,89,124,133,106,51,-6},{-2,15,87,123,133,107,54,-5},{-2,13,86,123,134,108,55,-5},{-2,12,85,123,134,109,56,-5},{-2,10,82,122,134,110,59,-3},{-2,8,80,120,134,112,62,-2},{-1,6,79,119,134,112,65,-2},{0,5,78,118,134,112,67,-2},
{0,2,75,117,135,114,70,-1}.
第四组示例性8抽头滤波器如下:{36,131,219,251,220,131,36,0},
{35,128,217,250,221,133,39,1},
{34,125,214,249,222,136,42,2},
{33,122,211,248,223,139,45,3},
{32,119,208,247,223,142,48,5},
{31,116,206,246,224,144,51,6},
{30,113,203,245,225,147,54,7},
{29,110,200,244,226,150,57,8},
{27,107,197,243,228,153,60,9},
{26,104,195,242,228,156,63,10},
{25,101,192,241,229,159,66,11},
{24,98,189,240,230,161,69,13},
{23,95,186,239,231,164,72,14},
{22,92,183,238,232,167,75,15},
{20,89,181,237,233,170,78,16},
{19,87,178,236,234,172,81,17},
{18,84,175,235,235,175,84,18},
{17,81,172,234,236,178,87,19},
{16,78,170,233,237,181,89,20},
{15,75,167,232,238,183,92,22},
{14,72,164,231,239,186,95,23},
{13,69,161,230,240,189,98,24},
{11,66,159,229,241,192,101,25},
{10,63,156,228,242,195,104,26},
{9,60,153,228,243,197,107,27},
{8,57,150,226,244,200,110,29},
{7,54,147,225,245,203,113,30},
{6,51,144,224,246,206,116,31},
{5,48,142,223,247,208,119,32},
{3,45,139,223,248,211,122,33},
{2,42,136,222,249,214,125,34},
{1,39,133,221,250,217,128,35}
在第四示例中,第一组示例性8抽头滤波器如下:{33,156,209,223,211,156,33,3},
{30,153,208,223,212,159,36,3},
{27,149,208,223,213,162,39,3},
{26,146,207,223,213,164,42,3},
{23,141,206,223,214,168,46,3},
{21,138,205,223,215,170,49,3},
{18,133,204,223,216,174,53,3},
{17,130,204,222,216,176,56,3},
{16,125,203,222,217,178,60,3},
{14,123,202,222,217,180,63,3},
{13,118,201,222,218,182,67,3},
{12,113,199,222,218,184,72,4},
{10,109,198,221,219,187,76,4},
{9,106,198,221,219,188,79,4},
{9,101,195,221,219,189,84,6},
{7,97,195,220,220,191,88,6},
{6,92,194,220,220,194,92,6},
{6,88,191,220,220,195,97,7},
{6,84,189,219,221,195,101,9},
{4,79,188,219,221,198,106,9},
{4,76,187,219,221,198,109,10},
{4,72,184,218,222,199,113,12},
{3,67,182,218,222,201,118,13},
{3,63,180,217,222,202,123,14},
{3,60,178,217,222,203,125,16},
{3,56,176,216,222,204,130,17},
{3,53,174,216,223,204,133,18},
{3,49,170,215,223,205,138,21},
{3,46,168,214,223,206,141,23},
{3,42,164,213,223,207,146,26},
{3,39,162,213,223,208,149,27},
{3,36,159,212,223,208,153,30}
第二组示例性8抽头滤波器如下:{16,170,215,226,214,169,15,-1},
{13,165,214,226,215,173,20,-2},
{10,162,215,226,216,176,22,-3},
{8,157,214,226,216,179,27,-3},
{6,152,214,226,217,182,31,-4},
{3,146,213,226,218,186,36,-4},
{2,143,214,226,218,188,39,-6},
{0,137,213,226,219,190,45,-6},
{-1,132,212,226,220,192,49,-6},
{-3,128,213,226,220,194,53,-7},
{-4,122,211,225,221,197,59,-7},
{-6,116,210,225,222,200,64,-7},
{-6,112,211,225,222,200,68,-8},
{-7,106,210,225,222,203,74,-9},
{-7,101,209,225,223,204,78,-9},
{-9,96,208,224,224,206,84,-9},
{-9,90,207,224,224,207,90,-9},
{-9,84,206,224,224,208,96,-9},
{-9,78,204,223,225,209,101,-7},
{-9,74,203,222,225,210,106,-7},
{-8,68,200,222,225,211,112,-6},
{-7,64,200,222,225,210,116,-6},
{-7,59,197,221,225,211,122,-4},
{-7,53,194,220,226,213,128,-3},
{-6,49,192,220,226,212,132,-1},
{-6,45,190,219,226,213,137,0},
{-6,39,188,218,226,214,143,2},
{-4,36,186,218,226,213,146,3},
{-4,31,182,217,226,214,152,6},
{-3,27,179,216,226,214,157,8},
{-3,22,176,216,226,215,162,10},
{-2,20,173,215,226,214,165,13}
第三组示例性8抽头滤波器如下:{0,91,108,114,108,91,0,0},
{-1,88,107,114,108,93,3,0},
{-3,85,106,114,109,95,6,0},
{-3,82,107,114,109,96,8,-1},
{-3,79,109,114,109,96,11,-3},
{-4,76,108,114,109,98,14,-3},
{-6,73,107,114,110,100,17,-3},
{-6,72,107,114,110,100,18,-3},
{-6,70,107,114,110,100,20,-3},
{-7,67,106,114,111,102,22,-3},
{-8,64,106,113,111,104,25,-3},
{-9,60,106,113,112,105,29,-4},
{-9,56,107,113,112,106,33,-6},
{-7,54,107,113,112,104,35,-6},
{-6,53,107,113,112,103,36,-6},
{-6,49,106,113,112,104,40,-6},
{-6,45,105,112,112,105,45,-6},
{-6,40,104,112,113,106,49,-6},
{-6,36,103,112,113,107,53,-6},
{-6,35,104,112,113,107,54,-7},
{-6,33,106,112,113,107,56,-9},
{-4,29,105,112,113,106,60,-9},
{-3,25,104,111,113,106,64,-8},
{-3,22,102,111,114,106,67,-7},
{-3,20,100,110,114,107,70,-6},
{-3,18,100,110,114,107,72,-6},
{-3,17,100,110,114,107,73,-6},
{-3,14,98,109,114,108,76,-4},
{-3,11,96,109,114,109,79,-3},
{-1,8,96,109,114,107,82,-3},
{0,6,95,109,114,106,85,-3},
{0,3,93,108,114,107,88,-1}
第四组示例性8抽头滤波器如下:{46,145,210,222,210,145,46,0},
{44,142,208,221,211,147,49,2},
{43,139,206,221,211,149,52,3},
{41,136,204,221,212,151,55,4},
{40,133,202,220,212,153,58,6},
{39,130,200,220,212,155,61,7},
{37,126,198,220,213,157,64,9},
{36,123,196,219,213,160,67,10},
{34,120,194,219,213,162,71,11},
{33,117,192,218,214,163,74,13},
{31,114,190,218,214,166,77,14},
{30,111,188,218,214,167,80,16},
{28,108,186,217,215,170,83,17},
{27,105,184,217,215,172,86,18},
{26,101,182,217,215,174,89,20},
{24,99,180,216,216,176,92,21},
{23,95,178,216,216,178,95,23},
{21,92,176,216,216,180,99,24},
{20,89,174,215,217,182,101,26},
{18,86,172,215,217,184,105,27},
{17,83,170,215,217,186,108,28},
{16,80,167,214,218,188,111,30},
{14,77,166,214,218,190,114,31},
{13,74,163,214,218,192,117,33},
{11,71,162,213,219,194,120,34},
{10,67,160,213,219,196,123,36},
{9,64,157,213,220,198,126,37},
{7,61,155,212,220,200,130,39},
{6,58,153,212,220,202,133,40},
{4,55,151,212,221,204,136,41},
{3,52,149,211,221,206,139,43},
{2,49,147,211,221,208,142,44}
在一些实施例中,提供了7抽头滤波器和6抽头滤波器。也就是说,根据子像素位置,使用具有不同抽头数的滤波器用于内插。
例如,为每个块信令一个标志,以在原始4抽头内插滤波器和提议的8抽头内插滤波器之间切换。可以以诸如序列参数集、序列报头、图片参数集、图片报头、切片报头或补丁报头等高水平用信号发出标志。可替代地,可以以低水平用信号发出标志,诸如编码树单元水平、编码单元水平、预测单元水平或变换单元水平。
在一些实施例中,如图9所示,可以使用更多的参考采样来生成当前采样的预测值,同时执行上述长抽头内插滤波器。例如,如图10所示,在执行上述8抽头内插滤波之后,与当前采样位于同一行中的左参考采样以及与当前采样位于同一列中的顶参考采样也被用于生成当前采样的预测值。在这个示例中,如果当前采样是k[i][j],其中i是当前采样所在列的编号,j是当前采样所在行的编号,则附加参考采样是c[j]和r[i]。可以如等式(11)或等式(12)那样来描述采样k的预测值的推导:
Predk[x][y]=(((f0×a+f1×b+f2×c+f3×d+f4×e+f5×f+f6×g+f7×h+偏移1)>>移位
1)×w0+c[y+1]×w1+r[x+1]×w2+偏移2)>>移位2(等式11)
或者
Predk[x][y]=((f0×a×w0+f1×b×w0+f2×c×w0+f3×d×w0+f4×e×w0+f5×f×w0+f6×g
×w0+f7×h×w0)+(c[y+1]×w1<<移位1)+(r[x+1]×w2<<移位1)+(偏移1<<移位2))>>(移位2+移位1)(等式12)
在上述等式中,Predk[x][y]是行y列x的采样K[x][y](x=0~M-1,y=0~N-1)的预测值。f0、f1、f2、f3、f4、f5、f6和f7是如前面示例中定义的内插滤波器系数。“移位1”是右移位数,其中f0至f7之和等于2的移位1次幂。偏移1等于2的(移位1-1)次幂,w0、w1和w2是具有固定值的权重。“移位2”是右移位数,其中w0至w2之和等于2的移位2次幂。偏移2等于2的(移位2-1)次幂。例如,w0可以等于2,w1可以等于1,并且w2可以等于1。在一些实施例中,w0可以等于14,w1可以等于1,w2可以等于1。
图11示出了根据一些公开的实施例的另外的示例,该示例用于使用更多的参考采样来生成当前采样的预测值,同时描述了上述8抽头内插滤波。如图11所示,在执行内插滤波之后,使用与当前采样位于同一行中的左参考采样周围的左参考采样以及与当前采样位于同一列中的顶参考采样周围的顶参考采样来与内插值一起生成当前采样的预测值。在该示例中,如果当前采样是k[i][j],其中i是当前采样所在列的编号,j是当前采样所在行的编号,附加参考采样是c[j]、c[j+2]、r[i]和r[i+2]),则采样k的预测值可以被推导为内插值和参考采样值的加权组合,如下面的等式13或等式14所示:
Predk[x][y]=(((f0×a+f1×b+f2×c+f3×d+f4×e+f5×f+f6×g+f7×h+偏移1)>>移位
1)×w0+c[y]×w1+c[y+2]×w2+r[x]×w3+r[x+2]×w4+偏移2)>>移位2(等式13)
或者
Predk[x][y]=((f0×a×w0+f1×b×w0+f2×c×w0+f3×d×w0+f4×e×w0+f5×f×w0+f6×g
×w0+f7×h×w0)+(c[y]×w1<<移位1)+(c[y+2]×w2<<移位1)+(r[x]×w3<<移位1)+(r[x+2]×w4<<移位1)+(偏移1<<移位2))>>(移位2+移位1)(等式14)
在上述等式中,Predk[x][y]是行y列x的采样K[x][y](x=0~M-1,y=0~N-1)的预测值。f0、f1、f2、f3、f4、f5、f6和f7是如前面示例中定义的内插滤波器系数。“移位1”是右移位数,其中f0至f7之和等于2的移位1次幂。偏移1等于2的(移位1-1)次幂,w0、w1、w2、w3和w4是具有固定值的权重。“移位2”是右移位数,其中w0至w2之和等于2的移位2次幂。偏移2等于2的(移位2-1)次幂。例如,w0可以等于4,w1可以等于1,w2可以等于1,w3可以等于1,w4可以等于1。在另一个示例中,w0可以等于28,w1可以等于1,w2可以等于1,w3可以等于1,w4可以等于1。
在一些实施例中,在执行内插滤波的同时,图11中的参考采样c[y]、c[y+1]、c[y+2]、r[x]、r[x+1]和r[x+2]都被用于进行预测值推导。此外,其他参考采样的位置与当前采样的位置相对应。在一些实施例中,可以将其它参考采样与在内插中使用的参考采样一起使用,以推导当前采样的预测值。例如,将权重分配给每个参考采样,并且将预测值推导为参考采样值的加权和。
本公开还提供与加权直流模式相关联的实施例。在当前直流模式中,相邻参考采样的平均值被用作块中所有采样的预测值。靠近顶边界和左边界的采样与参考采样更相关,因为这些采样接近参考采样。在一些实施例中,作为所有可用参考采样的平均值的DC值没有被用作块中所有采样的预测值。对于前K1行上的采样和前K2列采样上的采样,更准确的预测值被推导为DC值和接近预测采样的参考采样的值的加权组合。例如,K1和K2可以等于2。因此,对于块的前两行中的预测采样和块的前两列中的预测采样,基于DC值和预测采样附近的参考采样的值来推导出预测值。对于另一个示例,K1和K2可以取决于块的大小。
例如,如图12(a)所示,除了DC值,对于处于第一行上但并非前两列上的采样a,使用标记为A0、A1和A2的三个顶参考采样来推导出a的预测值;对于处于第一列上但非前两行上的采样b,使用标记为B0、B1和B2的三个左参考采样来推导出b的预测值;对于第一列和第一行相交处的采样c(即,第一行的第一采样或第一列的第一采样),使用标记为C0、C1和C2的三个参考采样来推导出c的预测值。该推导是基于加权组合来执行的,如以下等式(15)-(17)所示:
a=(f0×A0+f1×A1+f2×A2+f3×DC+偏移)>>移位(等式15)
b=(f0×B0+f1×B1+f2×B2+f3×DC+偏移)>>移位(等式16)
c=(g0×C0+g1×C1+g2×C2+g3×DC+偏移)>>移位(等式17)
在上述等式中,fi和gi(i=0、1、2或3)是加权平均中使用的权重。例如,f0等于18,f1等于38,f2等于18,f3等于182。g0等于38,g1等于18,g2等于38,并且g3等于162。偏移等于128,并且移位等于8。fi和gi可以是包括负值的其它值。在该实施例中,f0至f3之和以及g0至g3之和是2的幂,使得可以通过位移位运算来实现除法运算。
例如,如图12(b)所示,除了DC值,对于处于第一行上但非前两列上的采样a,使用标记为A0、A1和A2的三个顶参考采样来推导出a的预测值;对于处于第一列上但非前两行上的采样b,使用标记为B0、B1和B2的三个左参考采样来推导出b的预测值;对于处于第一列和第一行相交处的采样c(即,第一行的第一个采样或第一列的第一个采样),使用标记为C0、C1、C2、C3和C4的五个参考采样来推导出c的预测值。在等式15和等式16中描述了a和b的推导,并且基于加权组合来执行c的推导,如下面的等式(18)所示:
c=(g0×C0+g1×C1+g2×C2+g3×C3+g4×C4+g5×DC+偏移)>>移位(等式18)
在等式(18)中,变量gi是加权平均中使用的权重。例如,g0等于18,g1等于38,g2等于18,g3等于38,g4等于18,g5等于126。偏移等于128,并且“移位”等于8。在该实施例中,g0至g5之和是2的幂,因此可以通过位移位运算来实施除法运算。
例如,如图12(c)所示,除了DC值之外,对于处于第二行上但非前两列上的采样a,使用标记为A的一个顶参考采样来推导出采样a的预测值;对于处于第二列上但非前两行上的采样b,使用标记为B的一个左参考采样来推导出采样b的预测值;对于处于第二行和第二列相交处的采样c(即,第二行的第二个采样或第二列的第二个采样),使用标记为C0、C1和C2的三个参考采样来推导出采样c的预测值。可以基于加权组合来执行推导,如下面的等式(19)-(21)所示:
a=(f0×A0+f1×DC+偏移)>>移位(等式19)
b=(f0×B0+f1×DC+偏移)>>移位(等式20)
c=(g0×C0+g1×C1+g2×C2+g3×DC+偏移)>>移位(等式21)
在上述等式中,fi和gi是在加权平均中使用的权重。例如,f0等于13,f1等于243。g0等于13,g1等于5,g2等于13,并且g3等于225。“偏移”等于128,并且“移位”等于8。在该实施例中,f0至f1之和以及g0至g3之和是2的幂,使得可以通过位移位运算来实施除法运算。
例如,如图12(d)所示,除了DC值之外,对于处于第二行上但非前两列上的采样a,使用标记为A的一个顶参考采样来推导出采样a的预测值;对于处于第二列上但非前两行上的采样b,使用标记为B的一个左参考采样来推导出采样b的预测值;对于处于第二列和第二行相交处的采样c(即,第二行的第二采样或第二列的第二采样),使用标记为C0和C1的两个参考采样来推导出采样c的预测值。可以基于加权组合来执行推导,如下面的等式22-24所示:
a=(f0×A0+f1×DC+偏移)>>移位(等式22)
b=(f0×B0+f1×DC+偏移)>>移位(等式23)
c=(g0×C0+g1×C1+g2×DC+偏移)>>移位(等式24)
在上述等式中,fi和gi是在加权平均中使用的权重。例如,f0等于13,f1等于243。g0等于13,g1等于13,并且g2等于230。“偏移”等于128,并且“移位”等于8。在该实施例中,f0至f1之和以及g0至g2之和是2的幂,使得可以通过位移位运算来实现除法运算。
例如,如图12(e)所示;除DC值外,对于处于第一列和第二行相交处的第一采样b(即,第二行的第一采样),使用标记为B0、B1、B2和B3的四个左参考采样来推导出采样b的预测值。可以基于加权组合来执行推导,如下面的等式25所示:
b=(f0×B0+f1×B1+f2×B2+f3×B3+f4×DC+偏移)>>移位(等式25)
在等式25中,fi是在加权平均中使用的权重。例如,f0等于18,f1等于38,f2等于18,f3等于13,f4等于169。“偏移”等于128,并且“移位”等于8。在该实施例中,f0至f4之和是2的幂,使得可以通过位移位运算来实现除法运算。
例如,如图12(f)所示;除DC值外,对于处于第一行和第二列相交处的第二采样a(即,第一行的第二采样),使用标记为A0、A1、A2和A3的四个参考采样来推导出采样a的预测值。可以基于加权组合来执行推导,如下面的等式26所示:
b=(f0×A0+f1×A1+f2×A2+f3×A3+f4×DC+偏移)>>移位(等式26)
在等式26中,fi是在加权平均中使用的权重。例如,f0等于13,f1等于18,f2等于38,f3等于18,f4等于169,“偏移”等于128,并且“移位”等于8。在该实施例中,f0至f4之和是2的幂,使得可以通过位移位运算来实施除法运算。
为了在原始直流模式和所提出的加权直流模式之间切换,对于每个块信令一个标志。可以在诸如序列参数集、序列头、图片参数集、图片头、条带头或分块头的高级别信令该标志。替代地,可以在诸如编码树单元级别、编码单元级别、预测单元级别或变换单元级别的低级别中信令该标志。
平面模式基于平面来推导采样的预测值。通过顶参考采样和左参考采样计算垂直和水平斜率。然而,对于当前块内的采样,随着从当前采样到参考采样的距离的增加,相关性减小。因此,接近上边界和左边界的采样的值对于参考采样的接近程度与远离上边界和左边界的采样的值对于参考采样的接近程度相比,接近上边界和左边界的采样的值更接近参考采样。也就是说,线性模型的准确性不足以描述当前块中的所有采样值。因此,在一些实施例中,对于处于前K1行上的采样和前K2列上的采样,基于原始的基于平面的预测值,通过考虑预测采样附近的参考采样的影响来推导新的预测值。例如K1和K2等于2。因此,对于块中的前两行中的采样和块中的前两列中的采样,基于根据平面模型推导的基值和相应的参考采样的值的加权组合来推导预测值。K1和K2可以彼此不同,并且可以取决于块大小。
为了推导在上边界和左边界附近的采样的预测值,首先确定在推导处理中涉及的参考采样。
例如,如图12(a)所示,除了基值之外,对于处于第一行上但非前两列上的采样a,使用标记为A0、A1和A2的三个顶参考采样来推导采样a的预测值;对于处于第一列上但非前两行上的采样b,使用标记为B0、B1和B2的三个左参考采样来推导出采样b的预测值;对于处于第一列和第一行相交处的采样c(即,第一行的第一采样或第一列的第一采样),使用标记为C0、C1和C2的三个参考采样来推导出采样c的预测值。
例如,如图12(b)所示,除了基值之外,对于处于第一行上但非前两列上的采样a,使用标记为A0、A1和A2的三个顶参考采样来推导出采样a的预测值;对于处于第一列上但非前两行上的采样b,使用标记为B0、B1和B2的三个左参考采样来推导出采样b的预测值;对于处于第一列和第一行相交处的采样c(即,第一行的第一采样或第一列的第一采样),使用标记为C0、C1,C2、C3和C4的五个参考采样来推导出采样c的预测值。
例如,如图12(c)所示,除了基值之外,对于处于第二行上但非前两列上的采样a,使用标记为A的一个顶参考采样用于推导出采样a的预测值;对于处于第二列上但非前两行上的采样b,使用标记为B的一个左参考采样来推导出采样b的预测值;对于处于第二列和第二行相交处的采样c(即,第二行的第二采样或第二列的第二采样),使用标记为C0、C1和C2的三个参考采样用于推导出采样c的预测值。
例如,如图12(d)所示,除了基值之外,对于处于第二行上但非前两列的采样a,使用标记为A的一个顶参考采样来推导出采样a的预测值;对于处于第二列上但非前两行上的采样b,使用标记为B的一个左参考采样来推导出采样b的预测值;对于处于第二列和第二行相交处的采样c(即,第二行的第二采样或第二列的第二采样),使用标记为C0和C1的两个参考采样来推导出采样c的预测值。
例如,如图12(e)和12(f)所示,除了基值之外,对于处于第一列和第二行相交处的采样b(即,第二行的第一采样),使用标记为B0、B1、B2和B3的四个左参考采样来推导采样b的预测值;对于处于第一行和第二列相交处的采样a(即,第一行的第二采样),使用标记为A0、A1、A2和A3的四个参考采样来细化采样a的预测值。
在确定推导处理中涉及的参考采样后,以K1=2、K2=2为例,如下地描述对于前K1行且前K2列中的采样的预测值。
在一些实施例中,可以基于以下等式27-30推导水平方向(图片宽度方向)上的斜率ib、垂直方向(图片高度方向)上的斜率ic以及中心点值ia和左上点值it。
ib=((ih<<5)×imh+(1<<(ish-1)))>>ish(等式27)
ic=((iv<<5)×imv+(1<<(isv-1)))>>isv(等式28)
ia=(r[M]+c[N])<<4(等式29)
it=ia-((M>>1)-1)×ib-((N>>1)-1)×ic+16(等式30)
在上述等式中,imh、imv、ish和isv取决于块的大小。imh=ibMult[Log(M)-2],ish=ibShift[Log(M)-2],imv=ibMult[Log(N)-2],isv=ibShift[Log(N)-2],ibMult[5]={13,17,5,11,23},ibShift[5]={7,10,11,15,19}。
然后,在图12(a)至图12(f)中,对于采样a、b和c,基于加权组合来确定预测值,如下面的等式31-39所示:
Pred[x][0]=((A0<<5)×f0+(A1<<5)×f1+(A2<<5)×f2+x×ib×f3+it×f3+87×ic+偏移)>>(移位+5)(x>1)(等式31)
Pred[x][1]=((A<<5)×g0+x×ib×g1+it×g1+269×ic+偏移)>>(移位+5)(x>1)(等式32)
Pred[0][y]=((B0<<5)×f0+(B1<<5)×f1+(B2<<5)×f2+y×ic×f3+it×f3+87×ib+偏移)>>(移位+5)(y>1)(等式33)
Pred[1][y]=((B<<5)×g0+y×ic×g1+it×g1+269×ib+偏移)>>(移位+5)(y>1)(等式34)
Pred[0][0]=((C0<<5)×h0+(C1<<5)×h1+(C2<<5)×h2+it×h3+69×ic+69×ib+偏移)>>(移位+5)(等式35)
或者
Pred[0][0]=((C0<<5)×p0+(C1<<5)×p1+(C2<<5)×p2+(C3<<5)×p3+(C4<<5)×p4+it×p5+69×ic+69×ib+偏移)>>(移位+5)(等式36)
Pred[1][1]=((C0<<5)×k0+(C1<<5)×k1+it×k2+256×ic+256×ib+偏移)>>(移位+5)(等式37)
Pred[1][0]=((A0<<5)×m0+(A1<<5)×m1+(A2<<5)×m2+(A3<<5)×m3+it×m4+195×ib+87×ic+偏移)>>(移位+5)(等式38)
Pred[0][1]=((B0<<5)×n0+(B1<<5)×n1+(B2<<5)×n2+(B3<<5)×n3+it×n4+195×ic+87×ib+偏移)>>(移位+5)(等式39)
请注意的是,在数学意义上,通过减少计算中的5个最低有效位,等式31至等式39等效于下面的等式31b至等式39b。
Pred[x][0]=(A0×f0+A1×f1+A2×f2+((x×ib×f3+it×f3+87×ic)>>5)+偏移’)>>移位(x>1)(等式31b)
Pred[x][1]=(A×g0+((x×ib×g1+it×g1+269×ic)>>5)+偏移’)>>移位(x>1)(等式32b)
Pred[0][y]=(B0×f0+B1×f1+B2×f2+((y×ic×f3+it×f3+87×ib)>>5)+偏移’)>>移位(y>1)(等式33b)
Pred[1][y]=(B×g0+((y×ic×g1+it×g1+269×ib)>>5)+偏移’)>>移位(y>1)(等式34b)
Pred[0][0]=(C0×h0+C1×h1+C2×h2+((it×h3+69×ic+69×ib)>>5)+偏移’)>>移位(等式35b)
或者
Pred[0][0]=(C0×p0+C1×p1+C2×p2+C3×p3+C4×p4+((it×p5+69×ic+69×ib)>>5)+偏移’)>>移位(等式36b)
Pred[1][1]=(C0×k0+C1×k1+((it×k2+256×ic+256×ib)>>5)+偏移’)>>移位(等式37b)
Pred[1][0]=(A0×m0+A1×m1+A2×m2+A3×m3+((it×m4+195×ib+87×ic))>>5)+偏移’)>>移位(等式38b)
Pred[0][1]=(B0×n0+B1×n1+B2×n2+B3×n3+((it×n4+195×ic+87×ib)>>5)+偏移’)>>移位(等式39b)
其中偏移’=偏移>>5
在上述等式中,Pred[x][0]是的第一行上处于位置(x,0)的第(x+1)个采样,Pred[x][1]是第二行上处于位置(x,1)的第(x+1)个采样,Pred[0][y]是第一列上处于位置(0,y)的第(y+1)个采样,Pred[1][y]是第二列上处于位置(1,y)的第(y+1)个采样,Pred[0][0]是第一行上的第一个采样,Pred[1][0]是第二列上的第一个采样或第一行上的第二个采样,Pred[0][1]是第二行上的第一个采样或第一列上的第二个采样。f0等于18,f1等于38,f2等于18,并且f3等于182。g0等于13,并且g1等于243。h0等于38,h1等于18,h2等于38,并且h3等于162。k0等于13,k1等于13,并且k2等于230。p0等于18,p1等于38,p2等于18,p3等于38,p4等于18,并且p5等于126。m0等于13,m1等于18,m2等于38,m3等于18,并且m4等于169。n0等于18,n1等于38,n2等于18,n3等于13,并且n4等于169。“偏移”等于8,并且“偏移”等于1<<12。
为了在原始直流模式和所提出的加权平面模式之间切换,对于每个块信令一个标志。可以在诸如序列参数集、序列头、图片参数集、图片头、条带报头或分块头的高等级中信令该标志。替代地,可以在诸如编码树单元级别、编码单元级别、预测单元级别或变换单元级别的低级别中信令该标志。
双线性模式通过两个线性内插值的加权平均值来生成预测值。线性内插基于待预测的采样和参考采样之间的距离。因此,沿同一方向的每两个相邻采样具有相同的预测值差。但是对于平滑块,两个相邻采样之间的值变化可能太大。另外,参考采样是先前编码的块的重建采样。因此,参考采样值含有降低预测质量的编码误差。因此,在该实施例中提出了平滑双线性模式,在该模式中,相邻采样的预测值对当前采样的预测值进行平滑滤波。
在一些实施例中,首先对参考采样进行平滑滤波,然后也对右上参考采样与左参考采样之间的差值以及左下参考采样与顶参考采样之间的差值进行平滑滤波。可以通过加权组合或加权平均来实施平滑滤波。然后,基于这些滤波值,推导获得每个采样的细化预测值。
预测处理可描述如下。在一些实施例中,可以基于下面的等式40-43来确定ia、ib、ic和wt:
ia=r[M](等式40)
ib=c[N](等式41)
ic=(M==N)?(ia+ib+1)>>1:(((ia<<Log(M))+(ib<<Log(N)))×权重+(1<<(i移位+5)))>>(i移位+6)(等式42)
wt=((ic<<2)–ia–ib)(等式43)
在上述等式中,i移位=Log(Min(M,N)),
权重=双线性权重[Log(Max(M,N)/Min(M,N))-1],并且双线性权重[3]={21,13,7}。
在一些实施例中,可以基于以下等式44-47对参考采样以及参考采样之间的差值进行平滑滤波:
fdc[y]=(ia-c[y-1])×f0+(ia-c[y])×f1+(ia-c[y+1])×f2+(ia-c[y+2])×f3+(ia-c[y+3])×f4(等式44)
fdr[x]=(ib-r[x-1])×f0+(ib-r[x])×f1+(ib-r[x+1])×f2+(ib-r[x+2])×f3+(ib-r[x+3])×f4(等式45)
fc[y]=(c[y-1]<<log(M))×f0+(c[y]<<log(M))×f1+(c[y+1]<<log(M))×f2+
(c[y+2]<<log(M))×f3+(c[y+3]<<log(M))×f4(等式46)
fr[x]=(r[x-1]<<log(N))×f0+(r[x]<<log(N))×f1+(r[x+1]<<log(N))×f2+
(r[x+2]<<log(N))×f3+(r[x+3]<<log(N))×f4(等式47)
可以如等式48所示推导fwt[x][y]:
Figure BDA0004039832290000521
其中f0等于82,f1等于252,f2等于356,f3等于252,f4等于82,并且g[5][5]是如下的二维阵列:
g[5][5]={{7,20,28,20,7]},
{20,62,88,62,20},
{28,88,124,88,28},
{20,62,88,62,20},
{7,20,28,20,7]}
并且h(x,y)是根据等式49或50定义的双变量函数。
h(x,y)=xy(等式49)
或者
Figure BDA0004039832290000522
因此fwt[x][y]可以简化为
fwt[x][x]=wt×x×y<<10(等式51)
然后,可以基于下面的等式52推导获得每个采样的预测值:
Pred[x][y]=(((fdc[y+1]×(x+1))<<Log(N))+((fdr[y+1]×(y+1))<<Log(M))+((fr[x+1]+fc[y+1])<<(Log(M)+Log(N)))+fwt[x][y]+(1<<(Log(M)+Log(N)+移位)))>>(Log(M)+Log(N)+移位+1),(x=0~M-1,y=0~N-1)(等式52)
在等式52中,Pred[x][y]是在平滑双线性模式中推导出的位于当前块中(x,y)的采样的预测值,并且“移位”等于10。
数学意义上,可以如下面的等式53来对等式52进行重整
Pred[x][y]=(((((ia<<移位)-(c[y-1]×f0+c[y]×f1+c[y+1]×f2+c[y+2]
×f3+c[y+3]×f4))×(x+1))<<Log(N))+((((ib<<移位)-(r[x-1]×f0+r[x]×f1+r[x+1]×f2+c[y+2]×f3+c[y+3]×f4))×(y+1))<<Log(M))+((c[y-1]×f0+c[y]×f1+c[y+1]×f2+c[y+2]×f3+c[y+3]×f4+r[x-1]×f0+r[x]×f1+r[x+1]×f2+c[y+2]×f3+c[y+3]×f4)<<(Log(M)+Log(N)))+(((ic<<1)-ia-ib)×x×y<<移位)+(1<<(Log(M)+Log(N)+移位)))>>(Log(M)+Log(N)+移位+1),(x=0~M-1,y=0~N-1)(等式53)
其中c[y-1]×f0+c[y]×f1+c[y+1]×f2+c[y+2]×f3+c[y+3]×f4是左参考采样的加权组合并且r[x-1]×f0+r[x]×f1+r[x+1]×f2+c[y+2]×f3+c[y+3]×f4是顶参考采样的加权组合。f0、f1、f2、f3和f4分别是值等于82、252、356、252和82的权重。
在一些实施例中,对于每个块信令至少一个标志,以在原始双线性模式和所提出的加权双线性模式之间切换。可以在诸如序列参数集、序列头、图片参数集、图片头、条带头或切块头的高级别中信令该标志。替代地,可以在诸如编码树单元级别、编码单元级别、预测单元级别或变换单元级别的低级别中信令该标志。
本公开的实施例还包括用于视频编码中的帧内预测方法的方法。图13至图15示出了视频解码处理的示例的流程图。
图13示出了根据本公开的一些实施例的用于关于帧内预测的视频处理的示例性方法1300的流程图。方法1300可以由编码器(例如,由图2A的处理200A或图2B的处理200b)执行,或者由设备(例如,图4的设备400)的一个或多个软件或硬件组件执行。例如,一个或多个处理器(例如,图4的处理器402)可以执行方法1300。在一些实施例中,方法1300可以由以计算机可读介质形式实现的计算机程序产品来实施,计算机可读介质包括由计算机(例如,图4的设备400)执行的诸如程序代码的计算机可执行指令。
如图13所示,根据一些实施例,在步骤1310中,可以对于目标块确定帧内预测模式。例如,帧内预测模式是角度模式,通过参考采样的定向外推或内插来生成预测值。
在步骤1320中,响应于角度模式,基于帧内预测模式将N抽头内插滤波器应用于目标块周围的多个参考采样,以确定滤波值。在一些实施例中,N是大于4的整数。例如,在图9中,将8抽头内插滤波器应用于位于待预测的采样所参考的参考位置周围的8个整型参考采样a、b、c、d、e、f、g、h,以生成滤波值,如下面的等式所示:Predk=(f0×a+f1×b+f2×c+f3×d+f4×e+f5×f+f6×g+f7×h+偏移)>>移位,其中f0、f1、f2、f3、f4、f5、f6和f7是内插滤波器系数,并且“移位”是右移位数,其中f0至f7之和等于2的移位次幂。在一些实施例中,偏移等于2的(移位-1)次幂。
在步骤1330中,基于滤波值确定目标块的采样的预测值。在一些实施例中,在图9中,Predk是采样K的预测值。在一些其它实施例中,进一步用一些对应参考采样对Predk进行加权平均以生成采样K的预测值。
图14示出了根据本公开的一些实施例的用于关于帧内预测的视频处理的示例性方法1400的流程图。方法1400可以由编码器(例如,由图2A的处理200A或图2B的处理200B)执行,或者由设备(例如,图4的设备400)的一个或多个软件或硬件组件执行。例如,一个或多个处理器(例如,图4的处理器402)可以执行方法1400。在一些实施例中,方法1400可以由以计算机可读介质形式实现的计算机程序产品来实施,计算机可读介质包括由计算机(例如,图4的设备400)执行的诸如程序代码的计算机可执行指令。
如图14所示,根据一些实施例,在步骤1410中,对于目标块确定帧内预测模式。例如,帧内预测模式是直流(DC)模式或平面模式。直流模式基于参考采样的平均值推导预测值。平面模式基于平面模型推导采样的预测值。
在步骤1420中,响应于直流模式或平面模式,基于目标块周围的多个参考采样来确定基值。例如,直流模式中基于目标块周围的参考采样的平均值来推导获得基值,或者基于从参考采样值差导推导获得的垂直斜率和水平斜率来推导获得基值。
在步骤1430中,基于基值和第一组对应参考采样来确定目标块的采样的预测值。在一些实施例中,在图12中,K等于2,并且基于基值和当前采样附近的参考采样的值来推导获得块的前两行和块的前两列中的采样的预测值。上述K行采样和前K列采样的数量在此不受限制。
图15示出了根据本公开的一些实施例的用于关于帧内预测的视频处理的示例性方法1500的流程图。方法1500可以由编码器(例如,由图2A的处理200A或图2B的处理200B)执行,或者由设备(例如,图4的设备400)的一个或多个软件或硬件组件执行。例如,一个或多个处理器(例如,图4的处理器402)可以执行方法1500。在一些实施例中,方法1500可以由以计算机可读介质形式实现的计算机程序产品来实施,计算机可读介质包括由计算机(例如,图4的设备400)执行的诸如程序代码的计算机可执行指令。
如图15所示,在步骤1510中,对于目标块确定帧内预测模式。例如,帧内预测模式是双线性模式。双线性模式的预测值是基于两个线性内插值。
在步骤1520中,响应于双线性模式,基于多个顶参考采样的加权组合确定第一值以及基于多个左参考采样的加权组合确定第二值。例如,多个顶参考采样包括一个以上的参考采样,多个左参考采样包括一个以上的参考采样。在一些实施例中,参考采样被平滑滤波,并且右下角和左上角以及左下角之间的差值也被平滑滤波。可以如下地描述第一值和第二值的推导。
fdc[y]=(ia-c[y-1])×f0+(ia-c[y])×f1+(ia-c[y+1])×f2+(ia-c[y+2])×f3+
(ia-c[y+3])×f4
fdr[x]=(ib-r[x-1])×f0+(ib-r[x])×f1+(ib-r[x+1])×f2+(ib-r[x+2])×f3+
(ib-r[x+3])×f4
fc[y]=(c[y-1]<<log(M))×f0+(c[y]<<log(M))×f1+(c[y+1]<<log(M))×f2+
(c[y+2]<<log(M))×f3+(c[y+3]<<log(M))×f4
fr[x]=(r[x-1]<<log(N))×f0+(r[x]<<log(N))×f1+(r[x+1]<<log(N))×f2+
(r[x+2]<<log(N))×f3+(r[x+3]<<log(N))×f4
在步骤1530中,基于第一值和第二值来确定目标块的采样的预测值。在一些实施例中,基于参考采样的滤波值,推导获得每个采样的细化预测值。可以如下地描述预测值的推导。
Pred[x][y]=(((((ia<<移位)-(c[y-1]×f0+c[y]×f1+c[y+1]×f2+c[y+2]
×f3+c[y+3]×f4))×(x+1))<<Log(N))+((((ib<<移位)-(r[x-1]×f0+r[x]×f1+r[x+1]×f2+c[y+2]×f3+c[y+3]×f4))×(y+1))<<Log(M))+((c[y-1]×f0+c[y]×f1+c[y+1]×f2+c[y+2]×f3+c[y+3]×f4+r[x-1]×f0+r[x]×f1+r[x+1]×f2+c[y+2]×f3+c[y+3]×f4)<<(Log(M)+Log(N)))+(((ic<<1)-ia-ib)×x×y<<移位)+(1<<(Log(M)+Log(N)+移位)))>>(Log(M)+Log(N)+移位+1)
图13至图15所示的方法是为了说明的目的,下面将从解码器和编码器的角度对其进行描述。可以设想,视频编码器可以执行解码操作的逆操作的全部或一部分。除非另有说明,本公开中所述的视频解码技术也意图包括所公开的视频编码技术的逆技术(即,与所公开的视频解码技术相关联的视频编码技术),反之亦然。
在一些实施例中,还提供了包括指令的非瞬时性计算机可读存储介质,并且指令可以由用于执行上述方法的设备(诸如所公开的编码器和解码器)执行。非瞬时性介质的常用形式包括例如软盘、软磁盘、硬盘、固态驱动器、磁带或任何其它磁性数据存储介质、CD-ROM、任何其它光学数据存储介质、任何具有孔图案的物理介质、RAM、PROM和EPROM、FLASH-EPROM或任何其它闪存、NVRAM、高速缓存器、寄存器、任何其它存储芯片或盒、以及它们的联网版本。设备可以包括一个或多个处理器(CPU)、输入/输出接口、网络接口和/或存储器。
应当注意,本文的关系术语(诸如“第一”和“第二”)仅用于区分一个实体或操作与另一个实体或操作,而不需要或暗示这些实体或操作之间的任何实际关系或顺序。此外,词语“包含”、“具有”、“含有”和“包括”以及其它类似的形式的意思是等同的,并且是开放式的,因为在这些词中的任何一个词之后的一个或多个术语并不意指此类一个或多个术语的穷举列表,或者意指仅限于所列的一个或多个术语。
还可以使用下面的条款来描述这些实施例:
1.一种计算机实施的视频或图像处理方法,包括:
对目标块执行帧内预测处理,其中执行帧内预测处理包括:
确定目标块的帧内预测模式;
响应于帧内预测模式是角度模式,基于角度模式将N抽头内插滤波器应用于目标块周围的多个参考采样来确定滤波值,其中N是大于4的整数;以及
基于滤波值来确定目标块的采样的预测值。
2.根据条款1所述的方法,其中,基于滤波值来确定目标块的采样的预测值还包括:
基于滤波值和对应的参考采样的值的加权组合来确定目标块的采样的预测值。
3.根据条款1所述的方法,还包括:
确定标志;以及
当标志等于第一值时,通过应用N抽头内插滤波器来确定滤波值,以及当标志等于第二值时,通过应用M抽头内插滤波器来确定滤波值,其中M是小于N的整数。
4.根据条款1所述的方法,其中,N等于6、7或8。
5.根据条款1所述的方法,其中,多个参考采样包括位于目标块左侧的行中的左参考采样或位于目标块顶部的列中的顶参考采样,该方法还包括:
从目标块的顶参考采样开始边缘填充两个以上左参考采样;或者
从目标块的左参考采样开始边缘填充两个以上顶参考采样。
6.根据条款5所述的方法,其中,独立于帧内预测模式来进行参考采样的边缘填充。
7.根据条款2所述的方法,其中,对应的参考采样包括位于目标块左侧的列中的两个左参考采样以及位于目标块顶部的行中的两个顶参考采样。
8.根据条款1所述的方法,还包括:
基于帧内预测模式从多组滤波器中选择N抽头滤波器,其中多组滤波器包括第一组滤波器和第二组滤波器。
9.根据条款8所述的方法,其中,第一组过滤器或第二组过滤器包括:
{33,156,209,223,211,156,33,3},
{30,153,208,223,212,159,36,3},
{27,149,208,223,213,162,39,3},
{26,146,207,223,213,164,42,3},
{23,141,206,223,214,168,46,3},
{21,138,205,223,215,170,49,3},
{18,133,204,223,216,174,53,3},
{17,130,204,222,216,176,56,3},{16,125,203,222,217,178,60,3},{14,123,202,222,217,180,63,3},{13,118,201,222,218,182,67,3},{12,113,199,222,218,184,72,4},{10,109,198,221,219,187,76,4},{9,106,198,221,219,188,79,4},{9,101,195,221,219,189,84,6},{7,97,195,220,220,191,88,6},
{6,92,194,220,220,194,92,6},
{6,88,191,220,220,195,97,7},
{6,84,189,219,221,195,101,9},{4,79,188,219,221,198,106,9},{4,76,187,219,221,198,109,10},{4,72,184,218,222,199,113,12},{3,67,182,218,222,201,118,13},{3,63,180,217,222,202,123,14},{3,60,178,217,222,203,125,16},{3,56,176,216,222,204,130,17},{3,53,174,216,223,204,133,18},{3,49,170,215,223,205,138,21},{3,46,168,214,223,206,141,23},{3,42,164,213,223,207,146,26},{3,39,162,213,223,208,149,27},{3,36,159,212,223,208,153,30}或者
{16,170,215,226,214,169,15,-1},{13,165,214,226,215,173,20,-2},{10,162,215,226,216,176,22,-3},{8,157,214,226,216,179,27,-3},{6,152,214,226,217,182,31,-4},{3,146,213,226,218,186,36,-4},{2,143,214,226,218,188,39,-6},{0,137,213,226,219,190,45,-6},{-1,132,212,226,220,192,49,-6},{-3,128,213,226,220,194,53,-7},{-4,122,211,225,221,197,59,-7},{-6,116,210,225,222,200,64,-7},{-6,112,211,225,222,200,68,-8},{-7,106,210,225,222,203,74,-9},{-7,101,209,225,223,204,78,-9},{-9,96,208,224,224,206,84,-9},{-9,90,207,224,224,207,90,-9},{-9,84,206,224,224,208,96,-9},{-9,78,204,223,225,209,101,-7},{-9,74,203,222,225,210,106,-7},{-8,68,200,222,225,211,112,-6},{-7,64,200,222,225,210,116,-6},{-7,59,197,221,225,211,122,-4},{-7,53,194,220,226,213,128,-3},{-6,49,192,220,226,212,132,-1},{-6,45,190,219,226,213,137,0},{-6,39,188,218,226,214,143,2},{-4,36,186,218,226,213,146,3},{-4,31,182,217,226,214,152,6},{-3,27,179,216,226,214,157,8},{-3,22,176,216,226,215,162,10},{-2,20,173,215,226,214,165,13}或者
{0,91,108,114,108,91,0,0},
{-1,88,107,114,108,93,3,0},
{-3,85,106,114,109,95,6,0},
{-3,82,107,114,109,96,8,-1},
{-3,79,109,114,109,96,11,-3},{-4,76,108,114,109,98,14,-3},{-6,73,107,114,110,100,17,-3},{-6,72,107,114,110,100,18,-3},{-6,70,107,114,110,100,20,-3},{-7,67,106,114,111,102,22,-3},{-8,64,106,113,111,104,25,-3},{-9,60,106,113,112,105,29,-4},{-9,56,107,113,112,106,33,-6},{-7,54,107,113,112,104,35,-6},{-6,53,107,113,112,103,36,-6},{-6,49,106,113,112,104,40,-6},{-6,45,105,112,112,105,45,-6},{-6,40,104,112,113,106,49,-6},{-6,36,103,112,113,107,53,-6},{-6,35,104,112,113,107,54,-7},{-6,33,106,112,113,107,56,-9},{-4,29,105,112,113,106,60,-9},{-3,25,104,111,113,106,64,-8},{-3,22,102,111,114,106,67,-7},{-3,20,100,110,114,107,70,-6},{-3,18,100,110,114,107,72,-6},{-3,17,100,110,114,107,73,-6},{-3,14,98,109,114,108,76,-4},{-3,11,96,109,114,109,79,-3},{-1,8,96,109,114,107,82,-3},
{0,6,95,109,114,106,85,-3},
{0,3,93,108,114,107,88,-1}
或者
{46,145,210,222,210,145,46,0},{44,142,208,221,211,147,49,2},{43,139,206,221,211,149,52,3},{41,136,204,221,212,151,55,4},{40,133,202,220,212,153,58,6},{39,130,200,220,212,155,61,7},{37,126,198,220,213,157,64,9},{36,123,196,219,213,160,67,10},{34,120,194,219,213,162,71,11},{33,117,192,218,214,163,74,13},{31,114,190,218,214,166,77,14},{30,111,188,218,214,167,80,16},{28,108,186,217,215,170,83,17},{27,105,184,217,215,172,86,18},{26,101,182,217,215,174,89,20},{24,99,180,216,216,176,92,21},{23,95,178,216,216,178,95,23},{21,92,176,216,216,180,99,24},{20,89,174,215,217,182,101,26},{18,86,172,215,217,184,105,27},{17,83,170,215,217,186,108,28},{16,80,167,214,218,188,111,30},{14,77,166,214,218,190,114,31},{13,74,163,214,218,192,117,33},{11,71,162,213,219,194,120,34},{10,67,160,213,219,196,123,36},{9,64,157,213,220,198,126,37},{7,61,155,212,220,200,130,39},{6,58,153,212,220,202,133,40},
{4,55,151,212,221,204,136,41},
{3,52,149,211,221,206,139,43},
{2,49,147,211,221,208,142,44}。
10.一种视频或图像处理系统,包括:
存储器,该存储器存储指令集;以及
一个或多个处理器,该一个或多个处理器被配置为执行指令集以使系统对于目标块执行帧内预测处理:
确定目标块的帧内预测模式;
响应于帧内预测模式是角度模式,基于角度模式将N抽头内插滤波器应用于目标块周围的多个参考采样来确定滤波值,其中N是大于4的整数;以及
基于滤波值来确定目标块的采样的预测值。
11.根据条款10所述的系统,其中,基于滤波值来确定目标块的采样的预测值还包括:
基于滤波值和对应的参考采样的值的加权组合来确定目标块的采样的预测值。
12.根据条款10的系统,其中,一个或多个处理器还被配置为执行指令集,以使系统执行:
确定标志;以及
当标志等于第一值时,通过应用N抽头内插滤波器来确定滤波值,以及当标志等于第二值时,通过应用M抽头内插滤波器来确定滤波值,其中M是小于N的整数。
13.根据条款10所述的系统,其中,N等于6、7、8。
14.根据条款10所述的系统,其中,多个参考采样包括位于目标块左侧的行中的左参考采样或位于目标块顶部的列中的顶参考采样,还包括:
从目标块的顶参考采样开始边缘填充两个以上左参考采样;或者
从目标块的左参考采样开始边缘填充两个以上顶参考采样。
15.根据条款14所述的系统,其中,独立于帧内预测模式来进行参考采样的边缘填充。
16.根据条款10所述的系统,其中,对应的参考采样包括位于目标块左侧的列中的两个左参考采样以及位于目标块顶部的行中的两个顶参考采样。
17.根据条款9所述的方法,其中一个或多个处理器还被配置为执行指令集,以使系统执行:
基于帧内预测模式从多组滤波器中选择N抽头滤波器,其中多组滤波器包括第一组滤波器和第二组滤波器。
18.根据权利要求17的系统,其中,第一组过滤器或第二组过滤器包括:
{33,156,209,223,211,156,33,3},
{30,153,208,223,212,159,36,3},
{27,149,208,223,213,162,39,3},
{26,146,207,223,213,164,42,3},
{23,141,206,223,214,168,46,3},
{21,138,205,223,215,170,49,3},
{18,133,204,223,216,174,53,3},
{17,130,204,222,216,176,56,3},
{16,125,203,222,217,178,60,3},
{14,123,202,222,217,180,63,3},
{13,118,201,222,218,182,67,3},
{12,113,199,222,218,184,72,4},
{10,109,198,221,219,187,76,4},
{9,106,198,221,219,188,79,4},
{9,101,195,221,219,189,84,6},
{7,97,195,220,220,191,88,6},
{6,92,194,220,220,194,92,6},
{6,88,191,220,220,195,97,7},
{6,84,189,219,221,195,101,9},
{4,79,188,219,221,198,106,9},
{4,76,187,219,221,198,109,10},{4,72,184,218,222,199,113,12},{3,67,182,218,222,201,118,13},{3,63,180,217,222,202,123,14},{3,60,178,217,222,203,125,16},{3,56,176,216,222,204,130,17},{3,53,174,216,223,204,133,18},{3,49,170,215,223,205,138,21},{3,46,168,214,223,206,141,23},{3,42,164,213,223,207,146,26},{3,39,162,213,223,208,149,27},{3,36,159,212,223,208,153,30}或者
{16,170,215,226,214,169,15,-1},{13,165,214,226,215,173,20,-2},{10,162,215,226,216,176,22,-3},{8,157,214,226,216,179,27,-3},{6,152,214,226,217,182,31,-4},{3,146,213,226,218,186,36,-4},{2,143,214,226,218,188,39,-6},{0,137,213,226,219,190,45,-6},{-1,132,212,226,220,192,49,-6},{-3,128,213,226,220,194,53,-7},{-4,122,211,225,221,197,59,-7},{-6,116,210,225,222,200,64,-7},{-6,112,211,225,222,200,68,-8},{-7,106,210,225,222,203,74,-9},{-7,101,209,225,223,204,78,-9},{-9,96,208,224,224,206,84,-9},{-9,90,207,224,224,207,90,-9},{-9,84,206,224,224,208,96,-9},{-9,78,204,223,225,209,101,-7},{-9,74,203,222,225,210,106,-7},{-8,68,200,222,225,211,112,-6},{-7,64,200,222,225,210,116,-6},{-7,59,197,221,225,211,122,-4},{-7,53,194,220,226,213,128,-3},{-6,49,192,220,226,212,132,-1},{-6,45,190,219,226,213,137,0},{-6,39,188,218,226,214,143,2},{-4,36,186,218,226,213,146,3},{-4,31,182,217,226,214,152,6},{-3,27,179,216,226,214,157,8},{-3,22,176,216,226,215,162,10},{-2,20,173,215,226,214,165,13}或者
{0,91,108,114,108,91,0,0},
{-1,88,107,114,108,93,3,0},
{-3,85,106,114,109,95,6,0},
{-3,82,107,114,109,96,8,-1},
{-3,79,109,114,109,96,11,-3},
{-4,76,108,114,109,98,14,-3},
{-6,73,107,114,110,100,17,-3},{-6,72,107,114,110,100,18,-3},{-6,70,107,114,110,100,20,-3},{-7,67,106,114,111,102,22,-3},{-8,64,106,113,111,104,25,-3},{-9,60,106,113,112,105,29,-4},{-9,56,107,113,112,106,33,-6},{-7,54,107,113,112,104,35,-6},{-6,53,107,113,112,103,36,-6},{-6,49,106,113,112,104,40,-6},{-6,45,105,112,112,105,45,-6},{-6,40,104,112,113,106,49,-6},{-6,36,103,112,113,107,53,-6},{-6,35,104,112,113,107,54,-7},{-6,33,106,112,113,107,56,-9},{-4,29,105,112,113,106,60,-9},{-3,25,104,111,113,106,64,-8},{-3,22,102,111,114,106,67,-7},{-3,20,100,110,114,107,70,-6},{-3,18,100,110,114,107,72,-6},{-3,17,100,110,114,107,73,-6},{-3,14,98,109,114,108,76,-4},
{-3,11,96,109,114,109,79,-3},
{-1,8,96,109,114,107,82,-3},
{0,6,95,109,114,106,85,-3},
{0,3,93,108,114,107,88,-1}
或者
{46,145,210,222,210,145,46,0},{44,142,208,221,211,147,49,2},{43,139,206,221,211,149,52,3},{41,136,204,221,212,151,55,4},{40,133,202,220,212,153,58,6},{39,130,200,220,212,155,61,7},{37,126,198,220,213,157,64,9},{36,123,196,219,213,160,67,10},{34,120,194,219,213,162,71,11},{33,117,192,218,214,163,74,13},{31,114,190,218,214,166,77,14},{30,111,188,218,214,167,80,16},
{28,108,186,217,215,170,83,17},
{27,105,184,217,215,172,86,18},
{26,101,182,217,215,174,89,20},
{24,99,180,216,216,176,92,21},
{23,95,178,216,216,178,95,23},
{21,92,176,216,216,180,99,24},
{20,89,174,215,217,182,101,26},
{18,86,172,215,217,184,105,27},
{17,83,170,215,217,186,108,28},
{16,80,167,214,218,188,111,30},
{14,77,166,214,218,190,114,31},
{13,74,163,214,218,192,117,33},
{11,71,162,213,219,194,120,34},
{10,67,160,213,219,196,123,36},
{9,64,157,213,220,198,126,37},
{7,61,155,212,220,200,130,39},
{6,58,153,212,220,202,133,40},
{4,55,151,212,221,204,136,41},
{3,52,149,211,221,206,139,43},
{2,49,147,211,221,208,142,44}。
19.一种非瞬时性计算机可读介质,其存储指令集,该指令集可由设备的一个或多个处理器执行,以使设备实施视频或图像处理方法,方法包括:
对目标块执行帧内预测处理,其中执行帧内预测处理包括:
确定目标块的帧内预测模式;
响应于帧内预测模式是角度模式,基于角度模式将N抽头内插滤波器应用于目标块周围的多个参考采样来确定滤波值,其中N是大于4的整数;以及
基于滤波值来确定目标块的采样的预测值。
20.根据条款19的非瞬时性计算机可读介质,其中,基于滤波值来确定目标块的采样的预测值还包括:
基于滤波值和对应的参考采样的值的加权组合来确定目标块的采样的预测值。
21.根据条款19的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
确定标志;以及
当标志等于第一值时,通过应用N抽头内插滤波器来确定滤波值,以及当标志等于第二值时,通过应用M抽头内插滤波器来确定滤波值,其中M是小于N的整数。
22.根据条款19的非瞬时性计算机可读介质,其中N等于6、7、8。
23.根据条款19的非瞬时性计算机可读介质,其中,多个参考采样包括位于目标块左侧的行中的左参考采样或位于目标块顶部的列中的顶参考采样,该方法还包括:
从目标块的顶参考采样开始边缘填充两个以上左参考采样;或者
从目标块的左参考采样开始边缘填充两个以上顶参考采样。
24.根据条款23的非瞬时性计算机可读介质,其中,独立于帧内预测模式来进行参考采样的边缘填充。
25.根据条款20的非瞬时性计算机可读介质,其中,对应的参考采样包括位于目标块左侧的列中的两个左参考采样以及位于目标块顶部的行中的两个顶参考采样。
26.根据条款19的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
基于帧内预测模式从多组滤波器中选择N抽头滤波器,其中多组滤波器包括第一组滤波器和第二组滤波器。
27.根据条款26的非瞬时性计算机可读介质,其中,第一组过滤器或第二组过滤器包括:
{33,156,209,223,211,156,33,3},
{30,153,208,223,212,159,36,3},
{27,149,208,223,213,162,39,3},
{26,146,207,223,213,164,42,3},
{23,141,206,223,214,168,46,3},{21,138,205,223,215,170,49,3},{18,133,204,223,216,174,53,3},{17,130,204,222,216,176,56,3},{16,125,203,222,217,178,60,3},{14,123,202,222,217,180,63,3},{13,118,201,222,218,182,67,3},{12,113,199,222,218,184,72,4},{10,109,198,221,219,187,76,4},{9,106,198,221,219,188,79,4},{9,101,195,221,219,189,84,6},{7,97,195,220,220,191,88,6},
{6,92,194,220,220,194,92,6},
{6,88,191,220,220,195,97,7},
{6,84,189,219,221,195,101,9},{4,79,188,219,221,198,106,9},{4,76,187,219,221,198,109,10},{4,72,184,218,222,199,113,12},{3,67,182,218,222,201,118,13},{3,63,180,217,222,202,123,14},{3,60,178,217,222,203,125,16},{3,56,176,216,222,204,130,17},{3,53,174,216,223,204,133,18},{3,49,170,215,223,205,138,21},{3,46,168,214,223,206,141,23},{3,42,164,213,223,207,146,26},{3,39,162,213,223,208,149,27},{3,36,159,212,223,208,153,30}或者
{16,170,215,226,214,169,15,-1},{13,165,214,226,215,173,20,-2},{10,162,215,226,216,176,22,-3},{8,157,214,226,216,179,27,-3},{6,152,214,226,217,182,31,-4},{3,146,213,226,218,186,36,-4},{2,143,214,226,218,188,39,-6},{0,137,213,226,219,190,45,-6},{-1,132,212,226,220,192,49,-6},{-3,128,213,226,220,194,53,-7},{-4,122,211,225,221,197,59,-7},{-6,116,210,225,222,200,64,-7},{-6,112,211,225,222,200,68,-8},{-7,106,210,225,222,203,74,-9},{-7,101,209,225,223,204,78,-9},{-9,96,208,224,224,206,84,-9},{-9,90,207,224,224,207,90,-9},{-9,84,206,224,224,208,96,-9},{-9,78,204,223,225,209,101,-7},{-9,74,203,222,225,210,106,-7},{-8,68,200,222,225,211,112,-6},{-7,64,200,222,225,210,116,-6},{-7,59,197,221,225,211,122,-4},{-7,53,194,220,226,213,128,-3},{-6,49,192,220,226,212,132,-1},{-6,45,190,219,226,213,137,0},{-6,39,188,218,226,214,143,2},{-4,36,186,218,226,213,146,3},{-4,31,182,217,226,214,152,6},{-3,27,179,216,226,214,157,8},{-3,22,176,216,226,215,162,10},{-2,20,173,215,226,214,165,13}或者
{0,91,108,114,108,91,0,0},
{-1,88,107,114,108,93,3,0},
{-3,85,106,114,109,95,6,0},
{-3,82,107,114,109,96,8,-1},
{-3,79,109,114,109,96,11,-3},{-4,76,108,114,109,98,14,-3},{-6,73,107,114,110,100,17,-3},{-6,72,107,114,110,100,18,-3},{-6,70,107,114,110,100,20,-3},{-7,67,106,114,111,102,22,-3},{-8,64,106,113,111,104,25,-3},{-9,60,106,113,112,105,29,-4},{-9,56,107,113,112,106,33,-6},{-7,54,107,113,112,104,35,-6},{-6,53,107,113,112,103,36,-6},{-6,49,106,113,112,104,40,-6},{-6,45,105,112,112,105,45,-6},{-6,40,104,112,113,106,49,-6},{-6,36,103,112,113,107,53,-6},{-6,35,104,112,113,107,54,-7},{-6,33,106,112,113,107,56,-9},{-4,29,105,112,113,106,60,-9},{-3,25,104,111,113,106,64,-8},{-3,22,102,111,114,106,67,-7},{-3,20,100,110,114,107,70,-6},{-3,18,100,110,114,107,72,-6},{-3,17,100,110,114,107,73,-6},{-3,14,98,109,114,108,76,-4},{-3,11,96,109,114,109,79,-3},
{-1,8,96,109,114,107,82,-3},
{0,6,95,109,114,106,85,-3},
{0,3,93,108,114,107,88,-1}
或者
{46,145,210,222,210,145,46,0},{44,142,208,221,211,147,49,2},{43,139,206,221,211,149,52,3},{41,136,204,221,212,151,55,4},{40,133,202,220,212,153,58,6},{39,130,200,220,212,155,61,7},{37,126,198,220,213,157,64,9},{36,123,196,219,213,160,67,10},{34,120,194,219,213,162,71,11},{33,117,192,218,214,163,74,13},{31,114,190,218,214,166,77,14},{30,111,188,218,214,167,80,16},{28,108,186,217,215,170,83,17},{27,105,184,217,215,172,86,18},{26,101,182,217,215,174,89,20},{24,99,180,216,216,176,92,21},{23,95,178,216,216,178,95,23},{21,92,176,216,216,180,99,24},{20,89,174,215,217,182,101,26},{18,86,172,215,217,184,105,27},{17,83,170,215,217,186,108,28},{16,80,167,214,218,188,111,30},{14,77,166,214,218,190,114,31},{13,74,163,214,218,192,117,33},{11,71,162,213,219,194,120,34},{10,67,160,213,219,196,123,36},
{9,64,157,213,220,198,126,37},
{7,61,155,212,220,200,130,39},
{6,58,153,212,220,202,133,40},
{4,55,151,212,221,204,136,41},
{3,52,149,211,221,206,139,43},
{2,49,147,211,221,208,142,44}。
28.一种计算机实施的视频或图像处理方法,包括:
对目标块执行帧内预测处理,其中执行帧内预测处理包括:
确定目标块的帧内预测模式;
响应于帧内预测模式是直流(DC)模式或平面模式,基于目标块周围的多个参考采样来确定基值;以及
基于基值和第一组对应的参考采样来确定目标块的采样的预测值。
29.根据条款28所述的方法,其中,基于基值和第一组对应的参考采样来确定目标块的采样的预测值还包括:
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的前两列上的采样或前两行上的采样的预测值。
30.根据条款29所述的方法,还包括:
加权组合包括等于18、38、13、126、169、230、182或243的权重。
31.根据条款29所述的方法,还包括以下步骤中的至少一个:
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行和第一列相交处的采样的预测值,其中第一组对应的参考采样包括两个顶参考采样、两个左参考采样和一个左上参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行和第二列相交处的采样的预测值,其中第一组对应的参考采样包括三个顶参考采样和一个左参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行和第一列相交处的采样的预测值,其中第一组对应的参考采样包括三个左参考采样和一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行和第二列相交处的采样的预测值,其中第一组对应的参考采样包括一个左参考采样和一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行上但不在前两列上的采样的预测值,其中第一组对应的参考采样包括三个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行上但不在前两列上的采样的预测值,其中第一组对应的参考采样包括一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一列上但不在前两行上的采样的预测值,其中第一组对应的参考采样包括三个左参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合来确定目标块的处于第二列上但不在前两行上的采样的预测值,其中第一组对应的参考采样包括一个左参考采样。
32.根据条款28所述的方法,还包括:
基于采样的预测值和第二组对应的参考采样的值的加权组合,确定采样的最终预测值,其中第二组对应的参考采样与第一组对应的参考采样不相同。
33.根据条款28所述的方法,还包括:
响应于帧内预测模式是平面模式,基于多个参考采样的顶参考采样和左参考采样来确定目标块的水平斜率和垂直斜率;以及
基于水平斜率和垂直斜率来确定基值。
34.根据条款28所述的方法,还包括:
响应于帧内预测模式是直流模式,通过对多个参考采样中的参考采样求平均来确定基值。
35.根据条款28所述的方法,还包括:
确定标志;以及
响应于标志等于第一值,基于基值和第一组对应的参考采样来确定目标块的采样的预测值。
36.根据条款35所述的方法,还包括:
响应于标志等于第二值,基于基值而非基于第一组对应的参考采样来确定目标块的采样的预测值。
37.一种视频或图像处理系统,该系统包括:
存储器,存储器存储指令集;以及
一个或多个处理器,一个或多个处理器被配置为执行指令集,以使系统针对目标块执行帧内预测处理,其中执行帧内预测处理包括:
确定目标块的帧内预测模式;
响应于帧内预测模式是直流(DC)模式或平面模式,基于目标块周围的多个参考采样来确定基值;以及
基于基值和第一组对应的参考采样来确定目标块的采样的预测值。
38.根据条款37所述的系统,其中,基于基值和第一组对应的参考采样来确定目标块的采样的预测值还包括:
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的前两列上的采样或前两行上的采样的预测值。
39.根据条款38所述的系统,其中,加权组合包括等于18、38、13、126、169、230、182或243的权重。
40.根据条款38的系统,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行和第一列相交处的采样的预测值,其中第一组对应的参考采样包括两个顶参考采样、两个左参考采样和一个左上参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行和第二列相交处的采样的预测值,其中第一组对应的参考采样包括三个顶参考采样和一个左参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行和第一列相交处的采样的预测值,其中第一组对应的参考采样包括三个左参考采样和一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行和第二列相交处的采样的预测值,其中第一组对应的参考采样包括一个左参考采样和一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行上但不在前两列上的采样的预测值,其中第一组对应的参考采样包括三个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行上但不在前两列上的采样的预测值,其中第一组对应的参考采样包括一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一列上但不在前两行上的采样的预测值,其中第一组对应的参考采样包括三个左参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二列上但不在前两行上的采样的预测值,其中第一组对应的参考采样包括一个左参考采样。
41.根据条款37所述的系统,其中,一个或多个处理器还被配置为执行指令集,以使系统执行:
基于采样的预测值和第二组对应的参考采样的值的加权组合,确定采样的最终预测值,其中第二组对应的参考采样与第一组对应的参考采样不相同。
42.根据条款37所述的系统,其中,一个或多个处理器还被配置为执行指令集,以使系统执行:
响应于帧内预测模式是平面模式,基于多个参考采样的顶参考采样和左参考采样来确定目标块的水平斜率和垂直斜率;以及
基于水平斜率和垂直斜率来确定基值。
43.根据条款37所述的系统,其中,一个或多个处理器还被配置为执行指令集,以使系统执行:
响应于帧内预测模式是直流模式,通过对多个参考采样中的参考采样求平均来确定基值。
44.根据条款37所述的系统,其中,一个或多个处理器还被配置为执行指令集,以使系统执行:
确定标志;以及
响应于标志等于第一值,基于基值和第一组对应的参考采样来确定目标块的采样的预测值。
45.根据条款44所述的系统,其中,一个或多个处理器还被配置为执行指令集,以使系统执行:
响应于标志等于第二值,基于基值而非基于第一组对应的参考采样来确定目标块的采样的预测值。
46.一种非瞬时性计算机可读介质,其存储指令集,该指令集可由设备的一个或多个处理器执行,以使设备实施视频或图像处理方法,该方法包括:
对目标块执行帧内预测处理,其中执行帧内预测处理包括:
确定目标块的帧内预测模式;
响应于帧内预测模式是直流(DC)模式或平面模式,基于目标块周围的多个参考采样来确定基值;以及
基于基值和第一组对应的参考采样来确定目标块的采样的预测值。
47.根据条款46所述的非瞬时性计算机可读介质,其中,基于基值和第一组对应的参考采样来确定目标块的采样的预测值还包括:
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的前两列上的采样或前两行上的采样的预测值。
48.根据条款47的非瞬时性计算机可读介质,其中,加权组合包括等于18、38、126、230、182或243的权重。
49.根据条款47所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行和第一列相交处的采样的预测值,其中第一组对应的参考采样包括两个顶参考采样、两个左参考采样和一个左上参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行和第二列相交处的采样的预测值,其中第一组对应的参考采样包括三个顶参考采样和一个左参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行和第一列相交处的采样的预测值,其中第一组对应的参考采样包括三个左参考采样和一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行和第二列相交处的采样的预测值,其中第一组对应的参考采样包括一个左参考采样和一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一行上但不在前两列上的采样的预测值,其中第一组对应的参考采样包括三个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第二行上但不在前两列上的采样的预测值,其中第一组对应的参考采样包括一个顶参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合,确定目标块的处于第一列上但不在前两行上的采样的预测值,其中第一组对应的参考采样包括三个左参考采样;或者
基于基值和第一组对应的参考采样的值的加权组合来确定目标块的处于第二列上但不在前两行上的采样的预测值,其中第一组对应的参考采样包括一个左参考采样。
50.根据条款46所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
基于采样的预测值和第二组对应的参考采样的值的加权组合,确定采样的最终预测值,其中第二组对应的参考采样与第一组对应的参考采样不相同。
51.根据条款46所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
响应于帧内预测模式是平面模式,基于多个参考采样的顶参考采样和左参考采样来确定目标块的水平斜率和垂直斜率;以及
基于水平斜率和垂直斜率来确定基值。
52.根据条款46所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
响应于帧内预测模式是直流模式,通过对多个参考采样中的参考采样求平均来确定基值。
53.根据条款46所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使得设备进一步执行:
确定标志;以及
响应于标志等于第一值,基于基值和第一组对应的参考采样来确定目标块的采样的预测值。
54.根据条款53所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
响应于标志等于第二值,基于基值而非基于第一组对应的参考采样来确定目标块的采样的预测值。
55.一种计算机实施的视频或图像处理方法,包括:
对目标块执行帧内预测处理,其中执行帧内预测处理包括:
确定目标块的帧内预测模式;
响应于帧内预测模式是双线性模式,基于多个顶参考采样的加权组合来确定第一值,基于多个左参考采样的加权组合来确定第二值,其中多个顶参考采样包括一个以上参考采样,并且多个左参考采样包括一个以上参考采样;以及
基于第一值和第二值来确定目标块的采样的预测值。
56.根据条款55所述的方法,还包括下述步骤中的至少一个:
基于多个顶参考采样的加权组合来确定第一值,其中加权组合包括等于82、252或356的权重;或者
基于多个左参考采样的加权组合来确定第二值,其中加权组合包括等于82、252或356的权重。
57.根据条款55所述的方法,其中,多个顶参考采样包括五个顶参考采样,其权重分别等于82、252、356、252、82;以及
其中多个左参考采样包括五个左参考采样,其权重分别等于82、252、356、252、82。
58.根据条款55所述的方法,还包括:
基于第一值、第二值以及目标块的宽度和目标块的高度来确定第三值;以及
进一步基于第三值确定目标块的采样的预测值。
59.根据条款55所述的方法,还包括:
确定标志;以及
响应于标志等于第一值,基于多个顶参考采样的加权组合来确定第一值,基于多个左参考采样的加权组合来确定第二值,其中多个顶参考采样包括一个以上参考采样,多个左参考采样包括一个以上参考采样,并且基于第一值和第二值来确定目标块的采样的预测值。
60.根据条款59所述的方法,还包括:
响应于标志等于第二值,仅基于一个顶参考采样来确定第一值,仅基于一个左参考采样来确定第二值,并且基于第一值和第二值来确定目标块的采样的预测值。
61.一种视频或图像处理系统,该系统包括:
存储器,该存储器存储指令集;以及
一个或多个处理器,该一个或多个处理器被配置为执行指令集,以使系统执行:
确定目标块的帧内预测模式;
响应于帧内预测模式是双线性模式,基于多个顶参考采样的加权组合来确定第一值,基于多个左参考采样的加权组合来确定第二值,其中多个顶参考采样包括一个以上参考采样,并且多个左参考采样包括一个以上参考采样;以及
基于第一值和第二值来确定目标块的采样的预测值。
62.根据条款61所述的系统,其中,一个或多个处理器被配置为执行指令集,以使系统进一步执行以下中的至少一项:
基于多个顶参考采样的加权组合来确定第一值,其中加权组合包括等于82、252或356的权重;或者
基于多个左参考采样的加权组合来确定第二值,其中加权组合包括等于82、252或356的权重。
63.根据条款61所述的系统,其中,多个顶参考采样包括五个顶参考采样,其权重分别等于82、252、356、252、82;以及
其中多个左参考采样包括五个左参考采样,其权重分别等于82、252、356、252、82。
64.根据条款61所述的系统,其中,一个或多个处理器被配置为执行指令集,以使系统进一步执行:
基于第一值、第二值以及目标块的宽度和目标块的高度来确定第三值;以及
进一步基于第三值确定目标块的采样的预测值。
65.根据条款61所述的系统,其中,一个或多个处理器被配置为执行指令集,以使系统进一步执行:
确定标志;以及
响应于标志等于第一值,基于多个顶参考采样的加权组合来确定第一值,基于多个左参考采样的加权组合来确定第二值,其中多个顶参考采样包括一个以上参考采样,多个左参考采样包括一个以上参考采样,并且基于第一值和第二值来确定目标块的采样的预测值。
66.根据条款65所述的系统,其中,一个或多个处理器被配置为执行指令集,以使系统进一步执行:
响应于标志等于第二值,仅基于一个顶参考采样来确定第一值,仅基于一个左参考采样来确定第二值,并且基于第一值和第二值来确定目标块的采样的预测值。
67.一种非瞬时性计算机可读介质,其存储指令集,该指令集可由设备的一个或多个处理器执行,以使设备实施视频或图像处理方法,该方法包括:
对目标块执行帧内预测处理,其中执行帧内预测处理包括:
确定目标块的帧内预测模式;
响应于帧内预测模式是双线性模式,基于多个顶参考采样的加权组合来确定第一值,基于多个左参考采样的加权组合来确定第二值,其中多个顶参考采样包括一个以上参考采样,并且多个左参考采样包括一个以上参考采样;以及
基于第一值和第二值来确定目标块的采样的预测值。
68.根据条款67所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行以下中的至少一项:
基于多个顶参考采样的加权组合来确定第一值,其中加权组合包括等于82、252或356的权重;或者
基于多个左参考采样的加权组合来确定第二值,其中加权组合包括具有等于82、252或356的权重。
69.根据条款67所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行以下中的至少一项:
多个顶参考采样包括五个顶参考采样,其权重分别等于82、252、356、252、82;以及
多个左参考采样包括五个左参考采样,其权重分别等于82、252、356、252、82。
70.根据条款67所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
基于第一值、第二值以及目标块的宽度和目标块的高度来确定第三值;以及
进一步基于第三值来确定目标块的采样的预测值。
71.根据条款67所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
确定标志;以及
响应于标志等于第一值,基于多个顶参考采样的加权组合来确定第一值,并且基于多个左参考采样的加权组合来确定第二值,其中多个顶参考采样包括一个以上参考采样,多个左参考采样包括一个以上参考采样,并且基于第一值和第二值来确定目标块的采样的预测值。
72.根据条款71所述的非瞬时性计算机可读介质,其中,指令集可由设备的一个或多个处理器执行,以使设备进一步执行:
响应于标志等于第二值,仅基于一个顶参考采样来确定第一值,仅基于一个左参考采样来确定第二值,并且基于第一值和第二值来确定目标块的采样的预测值。
除非另有说明,否则本文所用术语“或”包括所有可能的组合,除非不可行。例如,如果指出数据库可以包括A或B,那么,除非另有说明或不可行,数据库可以包括A、或B、或A和B。作为另一个示例,如果说明数据库可以包括A、B或C,那么,除非另有说明或不可行,数据库可以包括A、或B、或C、或A和B、或A和C、或B和C、或A和B和C。
可以理解,可以通过硬件、或软件(程序代码)、或硬件和软件的组合来实现上述实施例。如果由软件实现,则可以将其存储在上述计算机可读介质中。当由处理器执行该软件时,该软件可以执行所公开所述的方法。可以通过硬件、或软件、或硬件和软件的组合来实现本公开中描述的计算单元和其它功能单元。本领域普通技术人员还将理解,上述模块/单元中的多个可以被组合为一个模块/单元,并且上述模块/单元中的每一个可以被进一步划分为多个子模块/子单元。
在前面的说明书中,已经参考多个具体细节描述了实施例,这些具体细节可以随着实现而变化。可以对所述实施例进行某些调整和修改。对于本领域技术人员来说,通过考虑本文公开的本发明的说明书和实践,其它实施例可以是显而易见的。本说明书和示例仅被认为是示例性的,本发明的真实范围和精神由所附权利要求书指出。图中所示的步骤序列也是为了说明的目的,并不限于任何特定的步骤序列。因此,本领域技术人员可以认识到,在实施相同方法的同时,可以以不同次序执行这些步骤。
在附图和说明书中,已经公开了示例性实施例。然而,可以对这些实施例进行多种变化和修改。因此,尽管使用了特定的术语,但是它们仅用于一般的和描述性的意义,而非为了限制目的。

Claims (23)

1.一种计算机实施的视频或图像处理方法,包括:
对目标块执行帧内预测处理,其中执行所述帧内预测处理包括:
确定所述目标块的帧内预测模式;
响应于所述帧内预测模式是角度模式,基于所述角度模式通过将N抽头内插滤波器应用于所述目标块周围的多个参考采样来确定滤波值,其中N是大于4的整数;以及
基于所述滤波值来确定所述目标块的采样的预测值。
2.根据权利要求1所述的方法,其中,基于所述滤波值来确定所述目标块的所述采样的所述预测值还包括:
基于所述滤波值和对应的参考采样的值的加权组合来确定所述目标块的所述采样的所述预测值。
3.根据权利要求1所述的方法,还包括:
确定标志;以及
当所述标志等于第一值时,通过应用所述N抽头内插滤波器来确定所述滤波值,并且当所述标志等于第二值时,通过应用M抽头内插滤波器来确定所述滤波值,其中M是小于N的整数。
4.根据权利要求1所述的方法,其中,N等于6、7或8。
5.根据权利要求1所述的方法,其中,所述多个参考采样包括位于所述目标块左侧的行中的左参考采样或位于所述目标块顶部的列中的顶参考采样,还包括:
从所述目标块的所述顶参考采样开始边缘填充两个以上左参考采样;或者
从所述目标块的所述左参考采样开始边缘填充两个以上顶参考采样。
6.根据权利要求5所述的方法,其中,独立于所述帧内预测模式,边缘填充所述参考采样。
7.根据权利要求2所述的方法,其中,所述对应的参考采样包括位于所述目标块左侧的列中的两个左参考采样以及位于所述目标块顶部的行中的两个顶参考采样。
8.根据权利要求1所述的方法,还包括:
基于所述帧内预测模式从多组滤波器中选择所述N抽头滤波器,其中所述多组滤波器包括第一组滤波器和第二组滤波器。
9.一种视频或图像处理系统,所述系统包括:
存储器,所述存储器存储指令集;以及
一个或多个处理器,所述一个或多个处理器被配置为执行所述指令集,以使所述系统对目标块执行帧内预测处理,其中执行所述帧内预测处理包括:
确定所述目标块的帧内预测模式;
响应于所述帧内预测模式是直流(DC)模式或平面模式,基于所述目标块周围的多个参考采样来确定基值;以及
基于所述基值和第一组对应的参考采样来确定所述目标块的采样的预测值。
10.根据权利要求9所述的系统,其中,基于所述基值和所述第一对应的参考采样来确定所述目标块的所述采样的所述预测值还包括:
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的前两列上的所述采样或前两行上的所述采样的所述预测值。
11.根据权利要求10所述的系统,其中,所述加权组合包括等于18、38、13、126、169、230、182或243的权重。
12.根据权利要求10所述的系统,其中,所述一个或多个处理器还被配置为执行所述指令集,以使所述系统执行:
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于第一行和第一列相交处的所述采样的所述预测值,其中所述第一组对应的参考采样包括两个顶参考采样、两个左参考采样和一个左上参考采样;或者
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于所述第一行和第二列相交处的所述采样的所述预测值,其中所述第一组对应的参考采样包括三个顶参考采样和一个左参考采样;或者
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于第二行和所述第一列相交处的所述采样的所述预测值,其中所述第一组对应的参考采样包括三个左参考采样和一个顶参考采样;或者
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于所述第二行和所述第二列相交处的所述采样的所述预测值,其中所述第一组对应的参考采样包括一个左参考采样和一个顶参考采样;或者
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于所述第一行上但不在前两列上的所述采样的所述预测值,其中所述第一组对应的参考采样包括三个顶参考采样;或者
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于所述第二行上但不在所述前两列上的所述采样的所述预测值,其中所述第一组对应的参考采样包括一个顶参考采样;或者
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于所述第一列上但不在前两行上的所述采样的所述预测值,其中所述第一组对应的参考采样包括三个左参考采样;或者
基于所述基值和所述第一组对应的参考采样的值的加权组合来确定所述目标块的位于所述第二列上但不在所述前两行上的所述采样的所述预测值,其中所述第一组对应的参考采样包括一个左参考采样。
13.根据权利要求9所述的系统,其中,所述一个或多个处理器还被配置为执行所述指令集,以使所述系统执行:
基于所述采样的所述预测值和第二组对应的参考采样的值的加权组合来确定所述采样的最终预测值,其中所述第二组对应的参考采样与所述第一组对应的参考采样不相同。
14.根据权利要求9所述的系统,其中,所述一个或多个处理器还被配置为执行所述指令集,以使所述系统执行:
响应于所述帧内预测模式是所述平面模式,基于所述多个参考采样的顶参考采样和左参考采样来确定所述目标块的水平斜率和垂直斜率;以及
基于所述水平斜率和所述垂直斜率来确定所述基值。
15.根据权利要求9所述的系统,其中,所述一个或多个处理器还被配置为执行所述指令集,以使所述系统执行:
响应于所述帧内预测模式是直流模式,通过对所述多个参考采样中的参考采样求平均来确定所述基值。
16.根据权利要求9所述的系统,其中,所述一个或多个处理器还被配置为执行所述指令集,以使所述系统执行:
确定标志;以及
响应于所述标志等于第一值,基于所述基值和所述第一组对应的参考采样来确定所述目标块的所述采样的所述预测值。
17.根据权利要求16所述的系统,其中,所述一个或多个处理器还被配置为执行所述指令集,以使所述系统执行:
响应于所述标志等于第二值,基于所述基值并且不基于所述第一组对应的参考采样来确定所述目标块的所述采样的所述预测值。
18.一种非瞬时性计算机可读介质,其存储指令集,所述指令集可由设备的一个或多个处理器执行,以使所述设备实施视频或图像处理方法,所述方法包括:
对目标块执行帧内预测处理,其中执行所述帧内预测处理包括:
确定所述目标块的帧内预测模式;
响应于所述帧内预测模式是双线性模式,基于多个顶参考采样的加权组合来确定第一值,并且基于多个左参考采样的加权组合来确定第二值,其中所述多个顶参考采样包括一个以上参考采样,并且所述多个左参考采样包括一个以上参考采样;以及
基于所述第一值和所述第二值来确定所述目标块的采样的预测值。
19.根据权利要求18所述的非瞬时性计算机可读介质,其中,所述指令集可由所述设备的所述一个或多个处理器执行,以使所述设备进一步执行以下中的至少一项:
基于所述多个顶参考采样的加权组合来确定所述第一值,其中所述加权组合包括等于82、252或356的权重;或者
基于所述多个左参考采样的加权组合来确定所述第二值,其中所述加权组合包括等于82、252或356的权重。
20.根据权利要求18所述的非瞬时性计算机可读介质,其中,所述指令集可由所述设备的所述一个或多个处理器执行,以使所述设备进一步执行以下中的至少一项:
所述多个顶参考采样包括五个顶参考采样,其权重分别等于82、252、356、252、82;以及
所述多个左参考采样包括五个左参考采样,其权重分别等于82、252、356、252、82。
21.根据权利要求18所述的非瞬时性计算机可读介质,其中,所述指令集可由所述设备的所述一个或多个处理器执行,以使所述设备进一步执行:
基于所述第一值、所述第二值以及所述目标块的宽度和所述目标块的高度来确定第三值;以及
进一步基于所述第三值来确定所述目标块的所述采样的所述预测值。
22.根据权利要求18所述的非瞬时性计算机可读介质,其中,所述指令集可由所述设备的所述一个或多个处理器执行,以使所述设备进一步执行:
确定标志;以及
响应于所述标志等于第一值,基于所述多个顶参考采样的加权组合来确定所述第一值,基于所述多个左参考采样的加权组合来确定所述第二值,其中所述多个顶参考采样包括一个以上参考采样,所述多个左参考采样包括一个以上参考采样,并且基于所述第一值和所述第二值来确定所述目标块的所述采样的所述预测值。
23.根据权利要求22所述的非瞬时性计算机可读介质,其中,所述指令集可由所述设备的所述一个或多个处理器执行,以使所述设备进一步执行:
响应于所述标志等于第二值,仅基于一个顶参考采样来确定所述第一值,仅基于一个左参考采样来确定所述第二值,并且基于所述第一值和所述第二值来确定所述目标块的所述采样的所述预测值。
CN202180048660.5A 2020-08-21 2021-08-20 视频编码中的帧内预测方法 Active CN115804095B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311077092.9A CN117041566A (zh) 2020-08-21 2021-08-20 视频编码中的帧内预测方法

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US202063068482P 2020-08-21 2020-08-21
US63/068,482 2020-08-21
US202063092224P 2020-10-15 2020-10-15
US63/092,224 2020-10-15
US17/406,569 US20220060734A1 (en) 2020-08-21 2021-08-19 Intra prediction methods in video coding
US17/406,569 2021-08-19
PCT/CN2021/113717 WO2022037670A1 (en) 2020-08-21 2021-08-20 Intra prediction methods in video coding

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202311077092.9A Division CN117041566A (zh) 2020-08-21 2021-08-20 视频编码中的帧内预测方法

Publications (2)

Publication Number Publication Date
CN115804095A true CN115804095A (zh) 2023-03-14
CN115804095B CN115804095B (zh) 2024-04-16

Family

ID=80271206

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202311077092.9A Pending CN117041566A (zh) 2020-08-21 2021-08-20 视频编码中的帧内预测方法
CN202180048660.5A Active CN115804095B (zh) 2020-08-21 2021-08-20 视频编码中的帧内预测方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202311077092.9A Pending CN117041566A (zh) 2020-08-21 2021-08-20 视频编码中的帧内预测方法

Country Status (4)

Country Link
US (1) US20220060734A1 (zh)
EP (1) EP4201070A1 (zh)
CN (2) CN117041566A (zh)
WO (1) WO2022037670A1 (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108293130A (zh) * 2015-11-27 2018-07-17 联发科技股份有限公司 通过帧内预测的视频编解码的装置及方法
WO2020004900A1 (ko) * 2018-06-25 2020-01-02 김기백 화면내 예측 방법 및 장치
CN110870315A (zh) * 2017-07-06 2020-03-06 韩国电子通信研究院 用于对图像进行编码/解码的方法和装置以及存储比特流的记录介质
CN111164979A (zh) * 2017-09-28 2020-05-15 三星电子株式会社 图像编码方法和设备以及图像解码方法和设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013110518A (ja) * 2011-11-18 2013-06-06 Canon Inc 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
KR102346713B1 (ko) * 2016-04-12 2022-01-03 세종대학교산학협력단 인트라 예측 기반의 비디오 신호 처리 방법 및 장치
EP3451668A4 (en) * 2016-04-26 2020-04-15 Intellectual Discovery Co., Ltd. METHOD AND DEVICE FOR CODING / DECODING AN IMAGE
CN106170093B (zh) * 2016-08-25 2020-01-07 上海交通大学 一种帧内预测性能提升编码方法
KR20180042899A (ko) * 2016-10-19 2018-04-27 디지털인사이트 주식회사 적응적 보간 필터를 사용하는 비디오 코딩 방법 및 장치
GB2564151A (en) * 2017-07-05 2019-01-09 Sony Corp Image data encoding and decoding
WO2020009366A1 (ko) * 2018-07-02 2020-01-09 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측에 따른 영상 디코딩 방법 및 장치
EP4070554A4 (en) * 2019-12-10 2023-01-25 Beijing Dajia Internet Information Technology Co., Ltd. VIDEO ENCODING METHODS AND APPARATUS IN A 4:4:4 CHROMINANCE FORMAT

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108293130A (zh) * 2015-11-27 2018-07-17 联发科技股份有限公司 通过帧内预测的视频编解码的装置及方法
CN110870315A (zh) * 2017-07-06 2020-03-06 韩国电子通信研究院 用于对图像进行编码/解码的方法和装置以及存储比特流的记录介质
CN111164979A (zh) * 2017-09-28 2020-05-15 三星电子株式会社 图像编码方法和设备以及图像解码方法和设备
WO2020004900A1 (ko) * 2018-06-25 2020-01-02 김기백 화면내 예측 방법 및 장치

Also Published As

Publication number Publication date
CN117041566A (zh) 2023-11-10
CN115804095B (zh) 2024-04-16
WO2022037670A1 (en) 2022-02-24
EP4201070A1 (en) 2023-06-28
US20220060734A1 (en) 2022-02-24

Similar Documents

Publication Publication Date Title
CN114208197A (zh) 用于视频编解码的块划分方法
US20210067803A1 (en) Matrix weighted intra prediction of video signals
US20210092390A1 (en) Methods and apparatuses for prediction refinement with optical flow in reference picture resampling
CN114424543A (zh) 用于发送视频编解码信息的方法和装置
CN116506635B (zh) 用于对图像执行逐步解码刷新处理的方法和系统
CN114375582A (zh) 处理亮度和色度信号的方法和系统
JP2024522853A (ja) 複合インター及びイントラ予測を行うための方法及びシステム
US20210044799A1 (en) Adaptive resolution change in video processing
CN114868393A (zh) 执行环绕运动补偿的方法
CN115398906A (zh) 用信号通知视频编码数据的方法
US20220141459A1 (en) Offset-based refinement of intra prediction (orip) of video coding
US20220060702A1 (en) Systems and methods for intra prediction smoothing filter
CN115280770B (zh) 用于对视频进行编码或解码的方法和装置
CN116569552A (zh) 用于帧间预测补偿的方法及系统
CN116918333A (zh) 用于跨分量样值偏移补偿的方法、装置和非暂时性计算机可读介质
CN115836525A (zh) 用于从多个交叉分量进行预测的方法和系统
CN114762332A (zh) 构建合并候选列表的方法
CN116405677A (zh) 用于在调色板模式下对视频数据进行编码的方法和装置
CN116114246B (zh) 帧内预测平滑滤波器系统及方法
CN115398897B (zh) 用于导出时间运动信息的方法和装置
CN115699744B (zh) 双向预测校正系统和方法
CN118044184A (zh) 用于执行组合帧间预测和帧内预测的方法和系统
CN115804095B (zh) 视频编码中的帧内预测方法
CN116601960A (zh) 使用自适应环路滤波器的方法及其系统
JP2022548555A (ja) 映像符号化のための動き補償方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20230802

Address after: Room 516, floor 5, building 3, No. 969, Wenyi West Road, Wuchang Street, Yuhang District, Hangzhou City, Zhejiang Province

Applicant after: Alibaba Dharma Institute (Hangzhou) Technology Co.,Ltd.

Address before: Box 847, four, Grand Cayman capital, Cayman Islands, UK

Applicant before: ALIBABA GROUP HOLDING Ltd.

GR01 Patent grant
GR01 Patent grant