CN110169064A - 具有减低复杂性的视频译码中的双边滤波器 - Google Patents

具有减低复杂性的视频译码中的双边滤波器 Download PDF

Info

Publication number
CN110169064A
CN110169064A CN201880006703.1A CN201880006703A CN110169064A CN 110169064 A CN110169064 A CN 110169064A CN 201880006703 A CN201880006703 A CN 201880006703A CN 110169064 A CN110169064 A CN 110169064A
Authority
CN
China
Prior art keywords
block
current block
sample
filtering
filtered
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880006703.1A
Other languages
English (en)
Other versions
CN110169064B (zh
Inventor
张莉
陈建乐
钱威俊
马尔塔·卡切维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN110169064A publication Critical patent/CN110169064A/zh
Application granted granted Critical
Publication of CN110169064B publication Critical patent/CN110169064B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements

Abstract

一种滤波视频数据的经重构块的实例方法包含：由一或多个处理器获得所述视频数据的当前块的经重构样本；及由所述一或多个处理器选择性地双边滤波所述当前块的所述经重构样本以产生经滤波当前块。在此实例中，选择性地双边滤波所述当前块的所述经重构样本包括抑制双边滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经双边滤波样本。

Description

具有减低复杂性的视频译码中的双边滤波器
本申请案主张2017年1月27日申请的美国临时申请案第62/451,555号的权利，所述美国临时申请案的全部内容特此以引用的方式并入。
技术领域
本发明涉及视频译码。
背景技术
数字视频能力可并入至广泛范围的装置中，所述装置包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子书阅读器、数字相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝或卫星无线电电话—所谓的“智能电话”、视频电话会议装置、视频流式处理装置等等。数字视频装置实施视频压缩技术，例如由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4、Part10、高级视频译码(AVC)、ITU-T H.265、高效率视频译码(HEVC)标准及这些标准的扩展所定义的标准中所描述的视频压缩技术。视频装置可通过实施这些视频压缩技术而更高效地传输、接收、编码、解码及/或存储数字视频信息。
视频压缩技术执行空间(图片内)预测及/或时间(图片间)预测以减低或移除视频序列中固有的冗余。对于基于块的视频译码，可将视频切片(即，视频帧或视频帧的部分)分割成视频块，其也可被称作树型块、译码单元(CU)及/或译码节点。图片的经帧内译码(I)切片中的视频块是使用相对于同一图片中的相邻块中的参考样本的空间预测予以编码。图片的经帧间译码(P或B)切片中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或相对于其它参考图片中的参考样本的时间预测。空间或时间预测会产生用于待译码块的预测性块。残余数据表示原始待译码块与预测性块之间的像素差。经帧间译码块是根据指向形成预测性块的参考样本块的运动向量及指示经译码块与预测性块之间的差的残余数据予以编码。经帧内译码块是根据帧内译码模式及残余数据予以编码。为了进行进一步压缩，可将残余数据从像素域变换至变换域，从而产生残余变换系数，其接着可被量化。
发明内容
一般来说，本发明描述可用于作为环路内译码的部分的后处理阶段中或用于视频译码的预测阶段中的滤波技术。本发明的滤波技术可应用于例如高效率视频译码(HEVC)的现有视频编解码器，或为任何未来视频译码标准中的高效译码工具。
在一个实例中，一种滤波视频数据的经重构块的方法包含：由一或多个处理器获得所述视频数据的当前块的经重构样本；及由所述一或多个处理器选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块。在此实例中，选择性地滤波所述当前块的所述经重构样本包括抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
在另一实例中，一种用于滤波视频数据的经重构块的设备包含：存储器，其经配置以存储视频数据；及一或多个处理器。在此实例中，所述一或多个处理器经配置以进行以下操作：获得所述视频数据的当前块的经重构样本；及选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块。在此实例中，为了选择性地滤波所述当前块的所述经重构样本，所述一或多个处理器经配置以抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
在另一实例中，一种用于滤波视频数据的经重构块的设备包含：用于获得所述视频数据的当前块的经重构样本的装置；及用于选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块的装置。在此实例中，所述用于选择性地滤波所述当前块的所述经重构样本的装置经配置以抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
在另一实例中，一种计算机可读存储媒体存储指令，所述指令在执行时致使用于滤波视频数据的经重构块的装置的一或多个处理器进行以下操作：获得所述视频数据的当前块的经重构样本；及选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块。在此实例中，致使所述一或多个处理器选择性地滤波所述当前块的所述经重构样本的所述指令包括致使所述一或多个处理器进行以下操作的指令：抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
下文在附图及具体实施方式中阐述本发明的一或多个方面的细节。本发明中所描述的技术的其它特征、目标及优点将从具体实施方式、附图及权利要求书显而易见。
附图说明
图1为绘示可利用本发明中所描述的一或多种技术的实例视频编码及解码系统的框图。
图2为绘示可实施本发明中所描述的技术的实例视频编码器的框图。
图3为绘示用于16×16图像块的帧内预测的典型实例的概念图。
图4A及4B为绘示帧内预测模式的实例的概念图。
图5A至5D各自绘示用于边缘偏移样本分类的1-D方向样式。
图6为绘示包含用于当前样本的双边滤波过程中的当前样本及相邻样本的当前块的概念图。
图7为绘示当前TU(例如，4×4TU)内的相邻样本可如何用以滤波当前样本的概念图。
图8为根据本发明的一或多种技术的绘示可如何分类样本的一个实例的概念图。
图9为绘示可实施本发明中所描述的一或多种技术的实例视频解码器的框图。
图10为根据本发明的一或多种技术的绘示用于滤波视频数据的经重构块的实例过程的流程图。
具体实施方式
视频译码器(例如，视频编码器及视频解码器)可对视频数据执行各种滤波操作。举例来说，为了节约边缘并减低噪声，视频解码器可通过运用视频数据样本自身及其相邻者的加权平均值来替换所述样本而对所述样本执行双边滤波。
通常可能需要使视频译码器能够并行地处理多个视频数据块。举例来说，视频解码器可同时重构及滤波若干视频数据块的样本。通过并行地处理多个视频数据块，视频译码器可减低为了解码视频数据图片所需要的时间量。然而，在一些状况下，也许没有可能并行地处理一些视频数据块。举例来说，如果当前块的样本的解码及/或重构取决于相邻块的经滤波样本，那么其可减小输送量，这是因为当前块的样本的解码及/或重构需要等待直到相邻块的滤波过程完成为止。
根据本发明的一或多种技术，视频译码器可选择性地滤波当前块的样本，使得所述滤波不会阻止相邻块的并行处理。举例来说，视频解码器可双边滤波可未由相邻块用于帧内预测的当前块的样本，并抑制双边滤波可由相邻块用于帧内预测的当前块的样本。以此方式，视频译码器仍可获得一些滤波益处，同时仍能够并行地处理相邻块。
图1为绘示可利用本发明的技术的实例视频编码及解码系统10的框图。如图1所展示，系统10包含源装置12，源装置12提供稍后将由目的地装置14解码的经编码视频数据。具体地说，源装置12经由计算机可读媒体16将视频数据提供至目的地装置14。源装置12及目的地装置14可包括广泛范围的装置中的任一者，包含桌上型计算机、笔记本(即，膝上型)计算机、平板计算机、机顶盒、例如所谓的“智能”电话的电话手机、平板计算机、电视、相机、显示装置、数字媒体播放器、视频游戏控制台、视频流式处理装置等等。在一些状况下，源装置12及目的地装置14可经装备以用于无线通信。因此，源装置12及目的地装置14可为无线通信装置。源装置12为实例视频编码装置(即，用于编码视频数据的装置)。目的地装置14为实例视频解码装置(即，用于解码视频数据的装置)。
在图1的实例中，源装置12包含视频源18、经配置以存储视频数据的存储媒体19、视频编码器20，及输出接口22。目的地装置14包含输入接口26、经配置以存储经编码视频数据的存储媒体28、视频解码器30，及显示装置32。在其它实例中，源装置12及目的地装置14可包含其它组件或布置。举例来说，源装置12可从例如外部相机的外部视频源接收视频数据。同样地，目的地装置14可与外部显示装置介接，而非包含集成显示装置。
图1的所绘示系统10仅仅为一个实例。用于处理视频数据的技术可由任何数字视频编码及/或解码装置执行。尽管本发明的技术通常由视频编码装置执行，但所述技术还可由视频编码器/解码器(通常被称作“编解码器(CODEC)”)执行。源装置12及目的地装置14仅仅为这些译码装置的实例，其中源装置12产生经译码视频数据以供传输至目的地装置14。在一些实例中，源装置12及目的地装置14可以大体上对称方式而操作，使得源装置12及目的地装置14中的每一者包含视频编码及解码组件。因此，系统10可支持源装置12与目的地装置14之间的单向或双向视频传输，例如，用于视频流式处理、视频回放、视频广播或视频电话。
源装置12的视频源18可包含视频捕获装置，例如视频相机、含有经先前捕获视频的视频存档，及/或用以从视频内容提供者接收视频数据的视频馈送接口。作为另外替代例，视频源18可产生作为源视频的基于计算机图形的数据，或实况视频、存档视频及计算机产生视频的组合。源装置12可包括经配置以存储视频数据的一或多个数据存储媒体(例如，存储媒体19)。本发明中所描述的技术可大体上适用于视频译码，并可应用于无线及/或有线应用。在每一状况下，经捕获、经预捕获或计算机产生视频可由视频编码器20编码。输出接口22可将经编码视频信息输出至计算机可读媒体16。
输出接口22可包括各种类型的组件或装置。举例来说，输出接口22可包括无线发射器、调制解调器、有线网络连接组件(例如，以太网卡)或另一物理组件。在输出接口22包括无线接收器的实例中，输出接口22可经配置以接收根据例如4G、4G-LTE、高级LTE、5G等等的蜂窝通信标准而调制的数据，例如位流。在输出接口22包括无线接收器的一些实例中，输出接口22可经配置以接收根据例如IEEE 802.11规范、IEEE 802.15规范(例如，ZigBeeTM)、BluetoothTM标准等等的其它无线标准而调制的数据，例如位流。在一些实例中，输出接口22的电路系统可集成至源装置12的视频编码器20及/或其它组件的电路系统中。举例来说，视频编码器20及输出接口22可为系统单芯片(SoC)的部分。SoC还可包含其它组件，例如通用微处理器、图形处理单元等等。
目的地装置14可经由计算机可读媒体16接收待解码的经编码视频数据。计算机可读媒体16可包括能够将经编码视频数据从源装置12移动至目的地装置14的任何类型的媒体或装置。在一些实例中，计算机可读媒体16包括用以使源装置12能够实时将经编码视频数据直接传输至目的地装置14的通信媒体。可根据例如无线通信协议的通信标准调制经编码视频数据，并将经编码视频数据传输至目的地装置14。通信媒体可包括任何无线或有线通信媒体，例如射频(RF)频谱或一或多个物理传输线。通信媒体可形成例如局域网、广域网或例如互联网的全球网的基于数据包的网络的部分。通信媒体可包含路由器、交换机、基站，或可用于促进从源装置12至目的地装置14的通信的任何其它设备。目的地装置14可包括经配置以存储经编码视频数据及经解码视频数据的一或多个数据存储媒体。
在一些实例中，可将经编码数据从输出接口22输出至存储装置。相似地，可由输入接口从存储装置存取经编码数据。存储装置可包含多种分布式或本地存取数据存储媒体中的任一者，例如硬盘驱动器、蓝光(Blu-ray)光盘、DVD、CD-ROM、快闪存储器、易失性或非易失性存储器，或用于存储经编码视频数据的任何其它合适数字存储媒体。在另外实例中，存储装置可对应于可存储由源装置12产生的经编码视频的文件服务器或另一中间存储装置。目的地装置14可经由流式处理或下载而从存储装置存取经存储视频数据。文件服务器可为能够存储经编码视频数据并将所述经编码视频数据传输至目的地装置14的任何类型的服务器。实例文件服务器包含网页服务器(例如，用于网站)、FTP服务器、网络连接存储(NAS)装置或本地磁盘驱动器。目的地装置14可经由包含互联网连接的任何标准数据连接而存取经编码视频数据。此连接可包含适合于存取存储于文件服务器上的经编码视频数据的无线信道(例如，Wi-Fi连接)、有线连接(例如，DSL、电缆调制解调器等等)或这两者的组合。从存储装置的经编码视频数据的传输可为流式处理传输、下载传输或其组合。
所述技术可应用于视频译码以支持多种多媒体应用中的任一者，例如空中电视广播、有线电视传输、卫星电视传输、互联网流式处理视频传输—例如HTTP动态自适应流式处理(DASH)、编码至数据存储媒体上的数字视频、存储于数据存储媒体上的数字视频的解码，或其它应用。在一些实例中，系统10可经配置以支持单向或双向视频传输来支持例如视频流式处理、视频回放、视频广播及/或视频电话的应用。
计算机可读媒体16可包含：暂时性媒体，例如无线广播或有线网络传输；或存储媒体(即，非暂时性存储媒体)，例如硬盘、闪存驱动器、紧密光盘、数字视频光盘、蓝光光盘或其它计算机可读媒体。在一些实例中，网络服务器(未展示)可例如经由网络传输而从源装置12接收经编码视频数据并将经编码视频数据提供至目的地装置14。相似地，例如光盘冲压设施的媒体生产设施的计算装置可从源装置12接收经编码视频数据并生产含有经编码视频数据的光盘。因此，在各种实例中，计算机可读媒体16可被理解为包含各种形式的一或多个计算机可读媒体。
目的地装置14的输入接口26从计算机可读媒体16接收信息。计算机可读媒体16的信息可包含由视频编码器20的视频编码器20定义的语法信息，所述语法信息也由视频解码器30使用，所述语法信息包含描述块及其它经译码单元—例如，图片群组(GOP)—的特性及/或处理的语法元素。输入接口26可包括各种类型的组件或装置。举例来说，输入接口26可包括无线接收器、调制解调器、有线网络连接组件(例如，以太网卡)或另一物理组件。在输入接口26包括无线接收器的实例中，输入接口26可经配置以接收根据例如4G、4G-LTE、高级LTE、5G等等的蜂窝通信标准而调制的数据，例如位流。在输入接口26包括无线接收器的一些实例中，输入接口26可经配置以接收根据例如IEEE 802.11规范、IEEE 802.15规范(例如，ZigBeeTM)、BluetoothTM标准等等的其它无线标准而调制的数据，例如位流。在一些实例中，输入接口26的电路系统可集成至目的地装置14的视频解码器30及/或其它组件的电路系统中。举例来说，视频解码器30及输入接口26可为SoC的部分。SoC还可包含其它组件，例如通用微处理器、图形处理单元等等。
存储媒体28可经配置以存储经编码视频数据，例如由输入接口26接收的经编码视频数据(例如，位流)。显示装置32向用户显示经解码视频数据，并可包括多种显示装置中的任一者，例如阴极射线管(CRT)、液晶显示器(LCD)、等离子体显示器、有机发光二极管(OLED)显示器或另一类型的显示装置。
视频编码器20及视频解码器单元30各自可被实施为多种合适编码器电路系统中的任一者，例如一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。当所述技术是部分地以软件予以实施时，装置可将用于所述软件的指令存储于合适的非暂时性计算机可读媒体中，并使用一或多个处理器在硬件中执行所述指令，以执行本发明的技术。视频编码器20及视频解码器30中的每一者可包含于一或多个编码器或解码器中，所述一或多个编码器或解码器中的任一者可被集成为相应装置中的组合式编码器/解码器(编解码器)的部分。
在一些实例中，视频编码器20及视频解码器30可根据例如现有或未来标准的视频译码标准而操作。实例视频译码标准包含但不限于ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2Visual、ITU-T H.263、ISO/IEC MPEG-4Visual及ITU-TH.264(也被称为ISO/IEC MPEG-4AVC)，包含其可缩放视频译码(SVC)及多视图视频译码(MVC)扩展。另外，ITU-T视频译码专业团体(VCEG)及ISO/IEC动画专业团体(MPEG)的视频译码联合协作小组(JCT-VC)以及3D视频译码扩展开发联合协作小组(JCT-3V)已开发新视频译码标准，即，高效率视频译码(HEVC)或ITU-T H.265，其包含其范围及屏幕内容译码扩展、3D视频译码(3D-HEVC)与多视图扩展(MV-HEVC)，及可缩放扩展(SHVC)。Ye-Kui Wang等人在2013年7月25日至8月2日于维也纳举行的第14次会议上的ITU-T SG 16WP 3及ISO/IEC JTC1/SC 29/WG 11的视频译码联合协作小组(JCT-VC)的“High Efficiency Video Coding(HEVC)Defect Report”—文档JCTVC-N1003_v1—为草案HEVC规范。
ITU-T VCEG(Q6/16)及ISO/IEC MPEG(JTC 1/SC 29/WG 11)现在正研究针对未来视频译码技术的标准化的潜在需要，所述未来视频译码技术的压缩能力显著地超过当前HEVC标准(包含其当前扩展及针对屏幕内容译码及高动态范围译码的近期扩展)的压缩能力。所述团体正共同致力于被称为联合视频探索小组(JVET)的联合协作工作中的此探索活动，以评估由其在此领域中的专家提出的压缩技术设计。JVET在2015年10月19日至21日期间首次举行会议。Jianle Chen等人在2016年5月26日至6月1日于瑞士日内瓦举行的第3次会议上的ITU-T SG 16WP 3及ISO/IEC JTC 1/SC 29/WG 11的联合视频探索小组(JVET)的“Algorithm Description of Joint Exploration Test Model 3”—文档JVET-C1001—为联合探索测试模型3(JEM3)的算法描述。
在HEVC及其它视频译码规范中，视频数据包含一系列图片。图片也可被称作“帧”。图片可包含一或多个样本阵列。图片的每一相应样本阵列可包括用于相应颜色分量的样本阵列。在HEVC中，图片可包含三个样本阵列，被标示为SL、SCb及SCr。SL为亮度样本的二维阵列(即，块)。SCb为Cb色度样本的二维阵列。SCr为Cr色度样本的二维阵列。在其它情况下，图片可为单色的并可仅包含亮度样本阵列。
作为编码视频数据的部分，视频编码器20可编码视频数据的图片。换句话说，视频编码器20可产生视频数据的图片的经编码表示。图片的经编码表示可在本文中被称作“经译码图片”或“经编码图片”。
为了产生图片的经编码表示，视频编码器20可编码图片的块。视频编码器20可将视频块的经编码表示包含于位流中。举例来说，为了产生图片的经编码表示，视频编码器20可将图片的每一样本阵列分割成译码树型块(CTB)并编码CTB。CTB可为图片的样本阵列中的样本的N×N块。在HEVC主规范中，CTB的大小可在16×16至64×64的范围内，但技术上可支持8×8CTB大小。
图片的译码树型单元(CTU)可包括一或多个CTB并可包括用以编码所述一或多个CTB的样本的语法结构。举例来说，每一CTU可包括亮度样本的CTB、色度样本的两个对应CTB，及用以编码所述CTB的样本的语法结构。在单色图片或具有三个单独颜色平面的图片中，CTU可包括单一CTB，及用以编码所述CTB的样本的语法结构。CTU也可被称作“树型块”或“最大译码单元”(LCU)。在本发明中，“语法结构”可被定义为按指定次序一起存在于位流中的零或多个语法元素。在一些编解码器中，经编码图片为含有所述图片的所有CTU的经编码表示。
为了编码图片的CTU，视频编码器20可将CTU的CTB分割成一或多个译码块。译码块为样本的N×N块。在一些编解码器中，为了编码图片的CTU，视频编码器20可对CTU的译码树型块递归地执行四叉树分割以将CTB分割成译码块，因此命名为“译码树型单元”。译码单元(CU)可包括一或多个译码块，及用以编码所述一或多个译码块的样本的语法结构。举例来说，CU可包括具有亮度样本阵列、Cb样本阵列及Cr样本阵列的图片的亮度样本的译码块及色度样本的两个对应译码块，及用以编码所述译码块的样本的语法结构。在单色图片或具有三个单独颜色平面的图片中，CU可包括单一译码块，及用以译码所述译码块的样本的语法结构。
此外，视频编码器20可编码视频数据的图片的CU。在一些编解码器中，作为编码CU的部分，视频编码器20可将CU的译码块分割成一或多个预测块。预测块为被应用相同预测的样本的矩形(即，正方形或非正方形)块。CU的预测单元(PU)可包括CU的一或多个预测块，及用以预测所述一或多个预测块的语法结构。举例来说，PU可包括亮度样本的预测块、色度样本的两个对应预测块，及用以预测所述预测块的语法结构。在单色图片或具有三个单独颜色平面的图片中，PU可包括单一预测块，及用以预测所述预测块的语法结构。
视频编码器20可产生用于CU的预测块(例如，亮度、Cb及Cr预测块)的预测性块(例如，亮度、Cb及Cr预测性块)。视频编码器20可使用帧内预测或帧间预测以产生预测性块。如果视频编码器20使用帧内预测以产生预测性块，那么视频编码器20可基于包含CU的图片的经解码样本而产生预测性块。如果视频编码器20使用帧间预测以产生当前图片的CU的预测性块，那么视频编码器20可基于参考图片(即，除了当前图片以外的图片)的经解码样本而产生CU的预测性块。
视频编码器20可产生用于CU的一或多个残余块。举例来说，视频编码器20可产生用于CU的亮度残余块。CU的亮度残余块中的每一样本指示CU的预测性亮度块中的一者中的亮度样本与CU的原始亮度译码块中的对应样本之间的差。另外，视频编码器20可产生用于CU的Cb残余块。CU的Cb残余块中的每一样本可指示CU的预测性Cb块中的一者中的Cb样本与CU的原始Cb译码块中的对应样本之间的差。视频编码器20还可产生用于CU的Cr残余块。CU的Cr残余块中的每一样本可指示CU的预测性Cr块的中的一者中的Cr样本与CU的原始Cr译码块中的对应样本之间的差。
此外，视频编码器20可将CU的残余块分解成一或多个变换块。举例来说，视频编码器20可使用四叉树分割以将CU的残余块分解成一或多个变换块。变换块为被应用相同变换的样本的矩形(即，正方形或非正方形)块。CU的变换单元(TU)可包括一或多个变换块。举例来说，TU可包括亮度样本的变换块、色度样本的两个对应变换块，及用以变换所述变换块样本的语法结构。因此，CU的每一TU可具有亮度变换块、Cb变换块及Cr变换块。TU的亮度变换块可为CU的亮度残余块的子块。Cb变换块可为CU的Cb残余块的子块。Cr变换块可为CU的Cr残余块的子块。在单色图片或具有三个单独颜色平面的图片中，TU可包括单一变换块，及用以变换所述变换块的样本的语法结构。
视频编码器20可将一或多个变换应用于TU的变换块以产生用于TU的系数块。系数块可为变换系数的二维阵列。变换系数可为标量。在一些实例中，一或多个变换将变换块从像素域转换至频域。因此，在这些实例中，变换系数可为被视为在频域中的标量。变换系数层级为表示在缩放以用于计算变换系数值之前与解码过程中的特定2维频率索引相关联的值的整数量。
在一些实例中，视频编码器20跳过对变换块的变换的应用。在这些实例中，视频编码器20可处理残余样本值，可以与变换系数相同的方式处理残余样本值。因此，在视频编码器20跳过变换的应用的实例中，变换系数及系数块的以下论述可适用于残余样本的变换块。
在产生系数块之后，视频编码器20可量化所述系数块。量化通常是指量化变换系数以可能减低用以表示变换系数的数据的量从而提供进一步压缩的过程。在一些实例中，视频编码器20跳过量化。在视频编码器20量化系数块之后，视频编码器20可产生指示经量化变换系数的语法元素。视频编码器20可熵编码指示经量化变换系数的语法元素中的一或多者。举例来说，视频编码器20可对指示经量化变换系数的语法元素执行上下文自适应二进制算术译码(CABAC)。因此，经编码块(例如，经编码CU)可包含指示经量化变换系数的经熵编码语法元素。
视频编码器20可输出包含经编码视频数据的位流。换句话说，视频编码器20可输出包含视频数据的经编码表示的位流。举例来说，位流可包括形成视频数据及关联数据的经编码图片的表示的一系列位。在一些实例中，经译码图片的表示可包含块的经编码表示。
位流可包括一系列网络抽象层(NAL)单元。NAL单元为含有NAL单元中的数据的类型的指示及含有所述数据的字节的语法结构，所述字节呈必要时穿插有仿真阻止位的原始字节序列有效负载(RBSP)的形式。所述NAL单元中的每一者可包含NAL单元标头并囊封RBSP。所述NAL单元标头可包含指示NAL单元类型码的语法元素。由NAL单元的NAL单元标头指定的NAL单元类型码指示NAL单元的类型。RBSP可为含有囊封于NAL单元内的整数数目个字节的语法结构。在一些情况下，RBSP包含零个位。
NAL单元可囊封用于视频参数集(VPS)、序列参数集(SPS)及图片参数集(PPS)的RBSP。VPS为包括应用于零或多个全部经译码视频序列(CVS)的语法元素的语法结构。SPS也为包括应用于零或多个全部CVS的语法元素的语法结构。SPS可包含识别在SPS活动时活动的VPS的语法元素。因此，VPS的语法元素相比于SPS的语法元素可更一般化地适用。PPS为包括应用于零或多个经译码图片的语法元素的语法结构。PPS可包含识别在PPS活动时活动的SPS的语法元素。切片的切片标头可包含指示在切片正被译码时活动的PPS的语法元素。
视频解码器30可接收由视频编码器20产生的位流。如上文所提及，位流可包括视频数据的经编码表示。视频解码器30可解码位流以重构视频数据的图片。作为解码位流的部分，视频解码器30可剖析位流以从位流获得语法元素。视频解码器30可至少部分地基于从位流获得的语法元素而重构视频数据的图片。用以重构视频数据的图片的过程可与由视频编码器20执行以编码所述图片的过程大体上互逆。举例来说，视频解码器30可使用帧间预测或帧内预测以产生用于当前CU的每一PU的一或多个预测性块，可使用PU的运动向量以确定用于当前CU的PU的预测性块。另外，视频解码器30可反量化当前CU的TU的系数块。视频解码器30可对系数块执行反变换以重构当前CU的TU的变换块。在一些实例中，通过将用于当前CU的PU的预测性块的样本与当前CU的TU的变换块的对应经解码样本相加，视频解码器30可重构当前CU的译码块。通过重构用于图片的每一CU的译码块，视频解码器30可重构图片。
图片的切片可包含图片的整数数目个CTU。切片的CTU可按例如光栅扫描次序的扫描次序连续地排序。在HEVC中，切片被定义为同一存取单元内的一个独立切片片段及先于下一独立切片片段(如果存在)的所有后续相依切片片段(如果存在)中所含有的整数数目个CTU。此外，在HEVC中，切片片段被定义为在图块扫描中连续地排序并在单一NAL单元中所含有的整数数目个译码树型单元。图块扫描为分割图片的CTB的特定顺序排序，其中CTB在图块中的CTB光栅扫描中连续地排序，而图片中的图块在图片的图块的光栅扫描中连续地排序。如HEVC及潜在其它编解码器中所定义，图块为图片中的特定图块列及特定图块行内的CTB的矩形区域。图块的其它定义可应用于除了CTB以外的类型的块。
视频编码器20及/或视频解码器30可对视频数据执行各种滤波操作。举例来说，如下文更详细地所论述，视频解码器30可通过运用视频数据样本自身及其相邻者的加权平均值来替换所述样本而对所述样本执行双边滤波。然而，对当前块的样本执行双边滤波可减低视频解码器30的输送量，这是因为当前块的相邻块的样本的重构可取决于当前块的未经滤波样本。
根据本发明的一或多种技术，视频编码器20及视频解码器30可选择性地滤波当前块的样本，使得所述滤波不会阻止相邻块的并行处理。举例来说，视频解码器30可双边滤波可由相邻块用于帧内预测的当前块的样本，并抑制双边滤波可未由相邻块用于帧内预测的当前块的样本。以此方式，视频解码器20及视频解码器30仍可获得一些滤波益处，同时仍能够并行地处理相邻块。
图2为绘示可执行本发明的技术的实例视频编码器200的框图。视频编码器200表示图1的视频编码器20的一个实例，但其它实例是可能的。图2是出于阐释的目的而被提供，且不应被视为限制如本发明中大致地所示范及描述的技术。出于阐释的目的，本发明在例如HEVC视频译码标准及开发中的H.266视频译码标准的视频译码标准的背景内容中描述视频编码器200。然而，本发明的技术并不限于这些视频译码标准，且大体上适用于视频编码及解码。
在图2的实例中，视频编码器200包含视频数据存储器230、模式选择单元202、残余产生单元204、变换处理单元206、量化单元208、反量化单元210、反变换处理单元212、重构单元214、滤波器单元216、经解码图片缓冲器(DPB)218，及熵编码单元220。
视频数据存储器230可存储将由视频编码器200的组件编码的视频数据。视频编码器200可从例如视频源18(图1)接收存储于视频数据存储器230中的视频数据。DPB 218可充当参考图片存储器，其存储参考视频数据以用于由视频编码器200预测后续视频数据。视频数据存储器230及DPB 218可由例如动态随机存取存储器(DRAM)的多种存储器装置中的任一者形成，所述存储器装置包含同步DRAM(SDRAM)、磁阻式RAM(MRAM)、电阻式RAM(RRAM)，或其它类型的存储器装置。视频数据存储器230及DPB 218可由同一存储器装置或单独存储器装置提供。在各种实例中，视频数据存储器230可如所绘示而与视频编码器200的其它组件一起在芯片上，或相对于那些组件在芯片外。
在本发明中，对视频数据存储器230的参考不应被解释为限于在视频编码器200内部的存储器，除非有如此特定描述；或对视频数据存储器230的参考不应被解释为限于在视频编码器200外部的存储器，除非有如此特定描述。更确切地，对视频数据存储器230的参考应被理解为存储由视频编码器200接收以供编码的视频数据(例如，待编码的用于当前块的视频数据)的参考存储器。视频数据存储器230还可提供来自视频编码器200的各种单元的输出的暂时存储。
图2的各种单元被绘示为辅助理解由视频编码器200执行的操作。所述单元可被实施为固定功能电路、可编程电路或其组合。固定功能电路是指提供特定功能性并对可被执行的操作预设的电路。可编程电路是指可经编程以执行各种任务并在可被执行的操作中提供灵活功能性的电路。举例来说，可编程电路可执行软件或固件，其致使可编程电路以由软件或固件的指令定义的方式而操作。固定功能电路可执行软件指令(例如，用以接收参数或输出参数)，但固定功能电路执行的操作的类型通常是不可变的。在一些实例中，所述单元中的一或多者可为相异电路块(固定功能或可编程)，且在一些实例中，所述一或多个单元可为集成电路。
视频编码器200可包含由可编程电路形成的算术逻辑单元(ALU)、基本功能单元(EFU)、数字电路、模拟电路及/或可编程核心。在视频编码器200的操作是由可编程电路所执行的软件执行的实例中，视频数据存储器230可存储由视频编码器200接收及执行的软件的目标码，或另一存储器(未展示)可存储这些指令。
视频数据存储器230经配置以存储经接收视频数据。视频编码器200可从视频数据存储器230检索视频数据的图片，并将视频数据提供至残余产生单元204及模式选择单元202。视频数据存储器230中的视频数据可为待编码的原始视频数据。
模式选择单元202包含运动估计单元222、运动补偿单元224及帧内预测单元226。模式选择单元202可包含额外功能单元以根据其它预测模式而执行视频预测。作为实例，模式选择单元202可包含调色板单元、块内复制单元(其可为运动估计单元222及/或运动补偿单元224的部分)、仿射单元、线性模型(LM)单元等等。
模式选择单元202通常协调多个编码遍次以测试编码参数的组合及用于这些组合的所得速率-失真值。编码参数可包含CTU至CU的分割、用于CU的预测模式、用于CU的残余数据的变换类型、用于CU的残余数据的量化参数等等。模式选择单元202最终可选择相比于其它经测试组合具有较佳速率-失真值的编码参数的组合。
视频编码器200可将从视频数据存储器230检索的图片分割成一系列CTU，并将一或多个CTU囊封于切片内。模式选择单元202可根据例如上文所描述的HEVC的QTBT结构或四叉树结构的树结构而分割图片的CTU。如上文所描述，视频编码器200可通过根据树结构而分割CTU来形成一或多个CU。此CU通常也可被称作“视频块”或“块”。
一般来说，模式选择单元202还控制其组件(例如，运动估计单元222、运动补偿单元224及帧内预测单元226)以产生用于当前块(例如，当前CU，或在HEVC中为PU与TU的重叠部分)的预测块。对于当前块的帧间预测，运动估计单元222可执行运动搜索以识别一或多个参考图片(例如，存储于DPB 218中的一或多个经先前译码图片)中的一或多个紧密匹配参考块。具体地说，运动估计单元222可例如根据绝对差总和(SAD)、平方差总和(SSD)、平均绝对差(MAD)、平均平方差(MSD)等等而计算表示潜在参考块与当前块的相似程度的值。运动估计单元222通常可使用当前块与所考虑的参考块之间的逐样本差来执行这些计算。运动估计单元222可识别具有由这些计算产生的最低值的参考块，其指示最紧密地匹配于当前块的参考块。
运动估计单元222可形成一或多个运动向量(MV)，其相对于当前图片中的当前块的位置来界定参考图片中的参考块的位置。运动估计单元222接着可将运动向量提供至运动补偿单元224。举例来说，对于单向帧间预测，运动估计单元222可提供单一运动向量，而对于双向帧间预测，运动估计单元222可提供两个运动向量。运动补偿单元224接着可使用运动向量来产生预测块。举例来说，运动补偿单元224可使用运动向量来检索参考块的数据。作为另一实例，如果运动向量具有分数样本精确度，那么运动补偿单元224可根据一或多个内插滤波器而内插用于预测块的值。此外，对于双向帧间预测，运动补偿单元224可检索用于由相应运动向量识别的两个参考块的数据，并例如经由逐样本平均化或加权平均化来组合经检索数据。
作为另一实例，对于帧内预测，或帧内预测译码，帧内预测单元226可从相邻于当前块的样本产生预测块。举例来说，对于方向模式，帧内预测单元226通常可数学上组合相邻样本的值，并在跨越当前块的定义方向上填充这些计算值以产生预测块。作为另一实例，对于DC模式，帧内预测单元226可计算当前块的相邻样本的平均值，并产生预测块以针对预测块的每一样本包含此所得平均值。
图3为绘示用于16×16图像块的帧内预测的典型实例的概念图。如图3所展示，在运用帧内预测的情况下，16×16图像块(在深色虚线正方形中)可由上方及左侧相邻经重构样本(参考样本)沿着所选择预测方向(如由箭头所指示)预测。
在HEVC中，对于亮度块的帧内预测包含35个模式，包含平面模式、DC模式及33个角模式。图4A及4B为绘示帧内预测模式的实例的概念图。在HEVC中，在已针对竖直(VER)及水平(HOR)帧内模式产生帧内预测块之后，预测样本的最左列及最顶行分别可被进一步调整。
为了捕获自然视频中所呈现的较精细边缘方向，将方向帧内模式从如HEVC中所定义的33扩展至65。新方向模式在图4B中被描绘为虚线箭头，且平面及DC模式保持不变。这些较密集方向帧内预测模式适用于所有块大小以及亮度及色度帧内预测两者。
另外，可利用四抽头帧内内插滤波器而非两抽头帧内内插滤波器来产生帧内预测块，这会改善方向帧内预测准确度。可将HEVC中的边界滤波器进一步扩展至若干对角帧内模式，且使用两抽头滤波器(对于帧内模式2及34)或三抽头滤波器(对于帧内模式3至6及30至33)来进一步调整高达四列或行的边界样本。
位置相依帧内预测组合(PDPC)为用于帧内预测的后处理，其调用HEVC帧内预测与未经滤波边界参考样本的组合。在自适应参考样本平滑化(ARSS)中，使用两个低通滤波器(LPF)以处理参考样本：
·3抽头LPF，其系数为[1,2,1]/4
·5抽头LPF，其系数为[2,3,6,3,2]/16
CCLM为新色度预测方法，其中利用经重构亮度块及相邻色度块以导出色度预测块。可在2016年10月15日至21日中国成都第4次会议的JVET-D1001(在下文中为“JVET-D1001”)中找到关于PDPC、ARSS及CCLM的额外信息。
模式选择单元202将预测块提供至残余产生单元204。残余产生单元204从视频数据存储器230接收当前块的原始的未经译码版本，并从模式选择单元202接收预测块的原始的未经译码版本。残余产生单元204计算当前块与预测块之间的逐样本差。所得逐样本差定义用于当前块的残余块。在一些实例中，残余产生单元204还可确定残余块中的样本值之间的差以使用残余差分脉码调制(RDPCM)来产生残余块。在一些实例中，可使用执行二进制减法的一或多个减法器电路来形成残余产生单元204。
在模式选择单元202将CU分割成PU的实例中，每一PU可与亮度预测单元及对应色度预测单元相关联。视频编码器200及视频解码器300可支持具有各种大小的PU。如上文所指示，CU的大小可指CU的亮度译码块的大小，且PU的大小可指PU的亮度预测单元的大小。假定特定CU的大小为2N×2N，那么视频编码器200可支持用于帧内预测的2N×2N或N×N的PU大小，及用于帧间预测的2N×2N、2N×N、N×2N、N×N或相似者的对称PU大小。视频编码器20及视频解码器30还可支持用于帧间预测的2N×nU、2N×nD、nL×2N及nR×2N的PU大小的不对称分割。
在模式选择单元未将CU进一步分割成PU的实例中，每一CU可与亮度译码块及对应色度译码块相关联。如上，CU的大小可指CU的亮度译码块的大小。视频编码器200及视频解码器120可支持2N×2N、2N×N或N×2N的CU大小。
作为少数实例，对于例如块内复制模式译码、仿射模式译码及线性模型(LM)模式译码的其它视频译码技术，模式选择单元202经由与所述译码技术相关联的相应单元而产生用于正被编码的当前块的预测块。在例如调色板模式译码的一些实例中，模式选择单元202可能不会产生预测块，而是产生指示基于所选择调色板来重构所述块的方式的语法元素。在这些模式中，模式选择单元202可将这些语法元素提供至熵编码单元220以供编码。
如上文所描述，残余产生单元204接收用于当前块及对应预测块的视频数据。残余产生单元204接着产生用于当前块的残余块。为了产生残余块，残余产生单元204计算预测块与当前块之间的逐样本差。因此，
变换处理单元206将一或多个变换应用于残余块以产生变换系数的块(在本文中被称作“变换系数块”)。变换处理单元206可将各种变换应用于残余块以形成变换系数块。举例来说，变换处理单元206可将离散余弦变换(DCT)、方向变换、卡洛南-洛伊(Karhunen-Loeve)变换(KLT)或概念上相似变换应用于残余块。在一些实例中，变换处理单元206可对残余块执行多个变换，例如，主要变换及次要变换，例如旋转变换。在一些实例中，变换处理单元206不将变换应用于残余块。
量化单元208可量化变换系数块中的变换系数，以产生经量化变换系数块。量化单元208可根据与当前块相关联的量化参数(QP)值而量化变换系数块的变换系数。视频编码器200(例如，经由模式选择单元202)可通过调整与CU相关联的QP值而调整应用于与当前块相关联的系数块的量化程度。量化可引入信息损耗，且因此，经量化变换系数相比于由变换处理单元206产生的原始变换系数可具有较低精确度。
反量化单元210及反变换处理单元212可将反量化及反变换分别应用于经量化变换系数块，以从变换系数块重构残余块。重构单元214可基于经重构残余块及由模式选择单元202产生的预测块而产生对应于当前块的经重构块(尽管潜在地具某种程度的失真)。举例来说，重构单元214可将经重构残余块的样本与来自由模式选择单元202产生的预测块的对应样本相加，以产生经重构块。
滤波器单元216可对经重构块执行一或多个滤波操作。举例来说，滤波器单元216可执行解块操作以减低沿着CU的边缘的块效应假象。如由虚线所绘示，在一些实例中可跳过滤波器单元216的操作。
视频编码器200将经重构块存储于DPB 218中。举例来说，在不需要滤波器单元216的操作的实例中，重构单元214可将经重构块存储至DPB 218。在需要滤波器单元216的操作的实例中，滤波器单元216可将经滤波的经重构块存储至DPB 218。运动估计单元222及运动补偿单元224可从DPB 218检索由经重构(并潜在地经滤波)块形成的参考图片，以帧间预测经随后编码图片的块。另外，帧内预测单元226可使用当前图片的DPB 218中的经重构块，以帧内预测当前图片中的其它块。
一般来说，熵编码单元220可熵编码从视频编码器200的其它功能组件接收的语法元素。举例来说，熵编码单元220可熵编码来自量化单元208的经量化变换系数块。作为另一实例，熵编码单元220可熵编码来自模式选择单元202的预测语法元素(例如，用于帧间预测的运动信息，或用于帧内预测的帧内模式信息)。熵编码单元220可对为视频数据的另一实例的语法元素执行一或多个熵编码操作，以产生经熵编码数据。举例来说，熵编码单元220可对数据执行上下文自适应可变长度译码(CAVLC)操作、CABAC操作、可变至可变(V2V)长度译码操作、基于语法的上下文自适应二进制算术译码(SBAC)操作、概率区间分割熵(PIPE)译码操作、指数哥伦布编码操作，或另一类型的熵编码操作。在一些实例中，熵编码单元220可在略过模式中操作，其中不熵编码语法元素。
视频编码器200可输出位流，其包含为了重构切片或图片的块所需要的经熵编码语法元素。具体地说，熵编码单元220可输出所述位流。
上文所描述的操作是关于块予以描述。此描述应被理解为用于亮度译码块及/或色度译码块的操作。如上文所描述，在一些实例中，亮度译码块及色度译码块为CU的亮度分量及色度分量。在一些实例中，亮度译码块及色度译码块为PU的亮度分量及色度分量。
在一些实例中，不需要针对色度译码块重复关于亮度译码块所执行的操作。作为一个实例，不需要重复用以识别用于亮度译码块的运动向量(MV)及参考图片的操作以用于识别用于色度块的MV及参考图片。更确切地，可缩放用于亮度译码块的MV以确定用于色度块的MV，且参考图片可不变。作为另一实例，帧内预测过程针对亮度译码块及色度译码块可相同。
如上文所论述，滤波器单元216可对经重构块执行一或多个滤波操作。在一些实例中，例如在HEVC中，滤波器单元216可使用两个环路内滤波器，包含解块滤波器(DBF)及样本自适应偏移(SAO)滤波器。
至解块滤波器译码工具的输入为在预测(例如，帧内或帧间预测，但其它预测模式是可能的)之后的经重构图像。解块滤波器在经译码块边界处执行假象的检测，并通过应用所选择滤波器来减弱假象。如IEEE汇刊电路系统视频技术(IEEE Trans.CircuitsSyst.Video Technol.)，22(12)：第1746至1754页(2012年)，Norkin等人的“HEVCDeblocking Filter”中所描述，相较于H.264/AVC解块滤波器，HEVC解块滤波器具有较低计算复杂性及较佳并行处理能力，同时仍实现显著的视觉假象减低。
至SAO滤波器的输入为在调用解块滤波之后的经重构图像。SAO的概念是通过以下操作而减低区域的平均样本失真：首先运用所选择分类器将区域样本分类成多个类别，获得用于每一类别的偏移，并接着将偏移与类别的每一样本相加，其中分类器索引及区域的偏移是在位流中被译码。在HEVC中，区域(用于SAO参数发信的单元)被定义为译码树单元(CTU)。HEVC中采用可满足低复杂性的要求的两个SAO类型：边缘偏移(EO)及频带偏移(BO)。SAO类型的索引被译码(其在[0,2]的范围内)。
对于EO，样本分类是基于根据如下1维(1-D)方向样式在当前样本与相邻样本之间的比较：水平、竖直、135°对角，及45°对角。图5A至5D各自绘示用于边缘偏移样本分类的1-D方向样式。图5A绘示水平(EO类别＝0)样式，图5B绘示竖直(EO类别＝1)样式，图5C绘示135°对角(EO类别＝2)样式，且图5D绘示45°对角(EO类别＝3)样式。IEEE汇刊电路系统视频技术(IEEE Trans.Circuits Syst.Video Technol.)，22(12)：第1755至1764页(2012年)，Fu等人的“Sample adaptive offset in the HEVC standard”中详细地描述EO。
根据所选择EO样式，进一步定义由表1中的edgeIdx标示的五个类别。对于等于0～3的edgeIdx，偏移的量值可被发信，而正负号旗标被隐含地译码，即，对于等于0或1的edgeIdx为负偏移，且对于等于2或3的edgeIdx为正偏移。对于等于4的edgeIdx，偏移始终被设定为0，这意味着对于此状况不需要操作。
表1：用于EO的分类
对于BO，样本分类是基于样本值。每一颜色分量可具有其自己的SAO参数。BO暗示一个偏移与同一频带的所有样本相加。样本值范围被相等地划分成32个频带。对于范围为0至255的8位样本，频带的宽度为8，且从8k至8k+7的样本值属于频带k，其中k的范围为0至31。原始样本与频带中的经重构样本(即，频带的偏移)之间的平均差被发信至解码器。对偏移正负号可能不存在约束。四个连续频带的偏移(且在一些实例中，仅为四个连续频带的偏移)及开始频带位置可被发信至解码器。
为了减低旁侧信息，可将多个CTU合并在一起(复制来自上方CTU的参数(经由将sao_merge_left_flag设定为等于1)或复制来自左侧CTU的参数(经由将sao_merge_up_flag设定为等于1))以共享SAO参数。
除了经修改DB及HEVC SAO方法以外，JEM还已包含另一滤波方法，被称为基于几何变换的自适应环路滤波(GALF)。GALF旨在通过引入若干新方面而改善HEVC阶段中研究的ALF的译码效率。ALF旨在通过使用基于维纳(Wiener)的自适应滤波器而最小化原始样本与经解码样本之间的均方误差。图片中的样本被分类成多个类别，且每一类别中的样本接着运用其关联自适应滤波器予以滤波。滤波器系数可被发信或继承以优化均方误差与开销之间的权衡。GALF方案可进一步改善ALF的性能，其引入待应用于滤波器支持区域中的样本的例如旋转、对角翻转及竖直翻转的几何变换，这取决于在ALF之前的经重构样本的梯度的定向。至ALF/GALF的输入为在调用SAO之后的经重构图像。
在2016年2月20日至2月26日于美国圣地亚哥举行的ITU-T SG 16WP 3及ISO/IECJTC 1/SC 29/WG 11探索小组(JVET)第2次会议上的文档JVET-B0060中，Karczewicz等人的“EE2.5:Improvements on adaptive loop filter”中提出GALF，且在2016年5月26日至6月1日于瑞士日内瓦举行的ITU-T SG 16WP 3及ISO/IEC JTC 1/SC 29/WG 11探索小组(JVET)第3次会议上的文档JVET-C0038中，Karczewicz等人的“EE2.5:Improvements on adaptiveloop filter”中提出GALF，基于几何变换的ALF(GALF)。GALF已用于JEM的最新版本，即，JEM3.0中。在GALF中，在考虑到对角梯度的情况下修改分类，且可将几何变换应用于滤波器系数。每一2×2块基于其方向性及活动的经量化值而分类成25个类别中的一者。以下子章节中描述细节。
如C.Tomasi及R.Manduchi在1998年1月印度孟买IEEE ICCV会刊中的“Bilateralfiltering for gray and color images”中所描述，双边滤波可帮助避免针对边缘中的像素的不良过度平滑化。双边滤波的主要想法为，相邻样本的加权考量像素值自身以更多地加权具有相似亮度或色度值的那些像素。位于(i，j)处的样本是使用其相邻样本(k，l)予以滤波。权重ω(i，j，k，l)为针对样本(k，l)所指派的权重以滤波样本(i，j)，且其被定义为：
在以上方程式(1)中，I(i，j)及I(k，l)分别为样本(i，j)及(k，l)的强度值，σd为空间参数，且σr为范围参数。下文提供空间参数及范围参数的定义。可根据以下方程式(2)而定义具有由ID(i，j)标示的经滤波样本值的滤波过程。
双边滤波器的性质(或强度)是由这两个参数控制。相比于较远离并具有较大强度差的样本，位于较接近于待滤波样本处的样本及与待滤波样本具有较小强度差的样本将具有较大权重。
如2016年10月15至21日在中国成都举行的第4次会议上JVET-D0069的Jacob等人的“Bilateral filter after inverse transform”(在下文中为“JVET-D0069”)中所描述，变换单元(TU)中的每一经重构样本是仅使用其直接相邻经重构样本予以滤波。所述滤波器具有在待滤波样本中心处的加号形滤波器孔径，如图6所描绘。图6为绘示当前块600的概念图，当前块600包含用于双边滤波过程中的当前样本602及相邻样本604至610。空间参数(即，σd)可基于变换单元大小而设定，且范围参数(即，σr)可基于用于当前块400的QP而设定。方程式(3)及(4)提供可如何确定空间及范围参数的一个实例。
如2017年1月12至20日在瑞士日内瓦举行的第5次会议上JVET-E0032的Jacob等人的“Bilateral filter strength based on prediction mode”(在下文中为“JVET-E0032”)中所描述，为了在低延迟配置下进一步减低译码损耗，将滤波器强度进一步设计为取决于经译码模式。对于经帧内译码块，仍使用以上方程式(3)。而对于经帧间译码块，应用以下方程式(5)。
应注意，所提出的双边滤波方法可仅应用于具有至少一个非零系数的亮度块。对于具有全零系数的色度块及亮度块，可始终停用双边滤波方法。
对于位于TU顶部及左侧边界处的样本(即，顶行及左列)，仅使用当前TU内的相邻样本以滤波当前样本。图7为绘示当前TU(例如，4×4TU)内的相邻样本可如何用以滤波当前样本的概念图。图7将当前TU 700绘示为包含当前样本700及相邻样本704至710。如图7所展示，当前样本702的左侧相邻样本710未包含于当前TU 700中。因而，左侧相邻样本710可能不会用于当前样本702的滤波过程中。
滤波器单元216可应用根据本发明的技术的双边滤波器。举例来说，滤波器单元216可根据以上方程式(2)而对由重构单元214产生的当前块的经重构样本应用双边滤波器。在将双边滤波器应用于当前块的经重构样本之后，滤波器单元216可将当前块的经滤波版本存储于经解码图片缓冲器218中。当前块的经滤波版本可作为参考图片而用于编码视频数据的另一图片，如在本发明中的其它处所描述。
JVET-D0069及JVET-E0032中的双边滤波设计可具有以下潜在问题。具体地说，恰好在一个块的重构之后应用双边滤波器。因此，视频编码器20可能必须等待直到针对待译码的下一相邻块完成当前块的滤波过程为止。此设计可减小管线输送量，这可为不良的。
本发明的技术可处理上述潜在问题。所提出的一些技术可组合在一起。所提出的技术可应用于取决于某些已知信息以隐含地导出自适应滤波器参数的其它环路内滤波方法，或具有明确参数发信的滤波器。
根据本发明的一或多种技术，滤波器单元216可选择性地滤波当前块的样本，使得所述滤波不会阻止相邻块的并行处理。举例来说，滤波器单元216可将当前块的样本分类为“待滤波(to be filtered)”或“不待滤波(not to be filtered)”，并仅对被分类为待滤波的样本执行双边滤波(即，滤波器单元216可抑制双边滤波被分类为不待滤波的样本)。以此方式，滤波器单元216仍可获得一些滤波益处，同时仍能够并行地处理相邻块。
滤波器单元216可以多种方式将当前块的样本分类为待滤波或不待滤波。作为一个实例，滤波器单元216可基于样本是否可用于预测相邻块的样本而执行分类。作为另一实例，滤波器单元216可基于样本是否位于当前块的预定义区域中而执行分类。作为另一实例，滤波器单元216可基于样本是否实际上用于预测相邻块而执行分类。
图8为根据本发明的一或多种技术的绘示可如何分类样本的一个实例的概念图。如图8所展示，图片800包含当前块810、底部相邻块820及右侧相邻块830。
如上文所论述，滤波器单元216可基于当前块的样本是否可用以预测相邻块中的样本(例如，在帧内预测或LM模式中)而分类当前块的样本。举例来说，滤波器单元216可将当前块的所有样本分类为不待滤波，所述样本可能由一或多个相邻块用于帧内预测，而不评估所述样本是否实际上用于/将实际上用于帧内预测。出于说明起见，如果当前块的第一样本可由相邻块用于帧内预测，那么滤波器单元216可将第一样本分类为不待滤波并抑制对第一样本执行双边滤波。另一方面，如果当前块的第二样本可能不会由相邻块用于帧内预测，那么滤波器单元216可将第二样本分类为待滤波并对第二样本执行双边滤波。在一些实例中，滤波器单元216可确定位于当前块的最右列或底行的样本(在采取水平光栅扫描次序的情况下，应理解，最右列及底行被解释为“前置”列/行，且其它列/行可与其它扫描次序一起使用)可由相邻块用于帧内预测。举例来说，在图8的实例中，滤波器单元216可将最右列812中的样本及底行814中的样本分类为不滤波，这是因为有可能使相邻块820及830将最右列812中的样本及底行814中的样本用于帧内预测。
如上文所论述，滤波器单元216可基于当前块的样本是否位于当前块的预定义区域中而分类所述样本。此技术可相似于基于样本是否可由相邻块用于帧内预测的分类，并在某些情形中与所述分类重叠。举例来说，当前块的预定义区域可包含当前块的最右列及底行。
如上文所论述，滤波器单元216可基于样本是否实际上用于相邻块的预测而执行分类。为了确定当前块的哪些样本由相邻块利用，滤波器单元216可基于从模式选择单元202接收的信息而确定当前块的相邻块是否运用帧内模式被译码。响应于确定当前块的右侧相邻块(例如，块830)使用帧内预测被译码，滤波器单元216可确定位于当前块的最右列(例如，列812中的样本)中的当前块的样本由相邻块用于帧内预测。然而，响应于确定当前块的右侧相邻块(例如，块830)未使用帧内预测被译码(例如，使用帧间预测被译码)，滤波器单元216可确定位于当前块的最右列(例如，列812中的样本)中的当前块的样本未由相邻块用于帧内预测。相似地，响应于确定当前块的底部相邻块(例如，块820)使用帧内预测被译码，滤波器单元216可确定位于当前块的底行(例如，行814中的样本)中的当前块的样本由相邻块用于帧内预测。然而，响应于确定当前块的底部相邻块(例如，块820)未使用帧内预测被译码，滤波器单元216可确定位于当前块的底行(例如，行814中的样本)中的当前块中的样本未由相邻块用于帧内预测。
在一些实例中，如上文所论述，视频编码器20可使用交叉分量线性模型(CCLM)预测模式来预测视频数据的样本。在CCLM中，视频编码器20可在执行色度块的色度帧内预测过程时利用整个块的亮度样本。因而，在当前块的相邻块依赖于亮度重构样本的情况下(例如，如果相邻块使用CCLM被译码)，滤波器单元216可确定当前块的所有样本实际上用于相邻块的预测。在这些实例中，滤波器单元216可抑制对当前块的任何样本执行双边滤波。
当基于样本是否可用于预测相邻块的样本或基于样本是否位于当前块的预定义区域中而分类样本时，滤波器单元216可避免必须实际上确定当前块的哪些(如果存在)样本实际上用于预测相邻块。通过不确定当前块的哪些样本实际上用于预测相邻块，滤波单元216可减低滤波过程的复杂性。然而，通过确定当前块的哪些样本实际上用于预测相邻块并仅抑制滤波实际上使用的样本，滤波单元216可滤波较大数目个样本，这可改善质量/假象减低。
在一些实例中，与选择性地滤波当前块的一些样本相反，滤波器单元216可对当前块的所有样本执行双边滤波并存储两个重构块/子块集合。举例来说，滤波器单元216可存储包含当前块的未经双边滤波样本的第一集合及包含当前块的经双边滤波样本的第二集合。在一些实例中，第二集合可包含被双边滤波但尚未由例如解块滤波器的其它环路内滤波器滤波的样本。
在一些实例中，帧内预测单元226可始终将第一集合用于执行帧内亮度预测过程。在一些实例中，帧内预测单元226可选择第一集合或第二集合以用于基于帧内预测模式信息而执行相邻块的亮度帧内预测。举例来说，如果当前块的相邻块运用PDPC或ARSS模式被译码或边界滤波器被启用，那么帧内预测单元226可选择第一集合以用于相邻块的亮度帧内预测过程。在一些实例中，如果色度模式依赖于亮度重构样本，例如，交叉分量线性模型(CCLM)预测模式，那么帧内预测单元226可在执行色度块的色度帧内预测过程时利用对应亮度块的第一集合。
相似地，可在对下一经译码块进行所有帧内预测之后应用块/子块的重构的滤波过程。此处，帧内预测可包含但不限于1)使用随意经重构样本的传统正常帧内预测，2)交叉分量线性模型(CCLM)预测。
视频编码器200表示经配置以编码视频数据的装置的实例，所述装置包含：存储器，其经配置以存储视频数据(例如，经解码图片缓冲器218)；及一或多个处理器，其经配置以进行以下操作：获得视频数据的当前块的经重构样本；及选择性地双边滤波当前块的经重构样本以产生经滤波当前块，其中选择性地双边滤波当前块的经重构样本包括抑制双边滤波当前块的至少一个经重构样本，使得经滤波当前块包含至少一个非经双边滤波样本。
图9为绘示可执行本发明的技术的实例视频解码器300的框图。视频解码器300表示图1的视频解码器30的一个实例，但其它实例也是可能的。图9是出于阐释的目的而被提供，且并不限制如本发明中大致地所示范及描述的技术。出于阐释的目的，本发明描述视频解码器300是根据JEM及HEVC的技术予以描述。然而，本发明的技术可由对其它视频译码标准所配置的视频译码装置执行。
在图9的实例中，视频解码器300包含经译码图片缓冲器(CPB)存储器320、熵解码单元302、预测处理单元304、反量化单元306、反变换处理单元308、重构单元310、滤波器单元312及经解码图片缓冲器(DPB)314。预测处理单元304包含运动补偿单元316及帧内预测单元318。预测处理单元304可包含用以根据其它预测模式而执行预测的附加单元。作为实例，预测处理单元304可包含调色板单元、块内复制单元(其可形成运动补偿单元316的部分)、仿射单元、线性模型(LM)单元等等。在其它实例中，视频解码器300可包含更多、更少或不同的功能组件。
CPB存储器320可存储将由视频解码器300的组件解码的视频数据，例如经编码视频位流。可例如从存储媒体28(图1)获得存储于CPB存储器320中的视频数据。CPB存储器320可包含存储来自经编码视频位流的经编码视频数据(例如，语法元素)的CPB。此外，CPB存储器320可存储除了经译码图片的语法元素以外的视频数据，例如表示来自视频解码器300的各种单元的输出的暂时数据。DPB 314通常存储经解码图片，视频解码器300可在解码经编码视频位流的后续数据或图片时输出及/或使用所述经解码图片作为参考视频数据。CPB存储器320及DPB 314可由例如动态随机存取存储器(DRAM)的多种存储器装置中的任一者形成，所述存储器装置包含同步DRAM(SDRAM)、磁阻式RAM(MRAM)、电阻式RAM(RRAM)，或其它类型的存储器装置。CPB存储器320及DPB 314可由同一存储器装置或单独存储器装置提供。在各种实例中，CPB存储器320可与视频解码器300的其它组件一起在芯片上，或相对于那些组件在芯片外。
图9所展示的各种单元被绘示为辅助理解由视频解码器300执行的操作。所述单元可被实施为固定功能电路、可编程电路或其组合。相似于图2，固定功能电路是指提供特定功能性并对可被执行的操作预设的电路。可编程电路是指可经编程以执行各种任务并在可被执行的操作中提供灵活功能性的电路。举例来说，可编程电路可执行软件或固件，其致使可编程电路以由软件或固件的指令定义的方式而操作。固定功能电路可执行软件指令(例如，用以接收参数或输出参数)，但固定功能电路执行的操作的类型通常是不可变的。在一些实例中，所述单元中的一或多者可为相异电路块(固定功能或可编程)，且在一些实例中，所述一或多个单元可为集成电路。
视频解码器300可包含ALU、EFU、数字电路、模拟电路，及/或由可编程电路形成的可编程核心。在视频解码器300的操作是由在可编程电路上执行的软件执行的实例中，芯片上或芯片外存储器可存储由视频解码器300接收及执行的软件的指令(例如，目标码)。
熵解码单元302可从CPB接收经编码视频数据并熵解码视频数据以再生语法元素。预测处理单元304、反量化单元306、反变换处理单元308、重构单元310及滤波器单元312可基于从位流提取的语法元素而产生经解码视频数据。
一般来说，视频解码器300在逐块基础上重构图片。视频解码器300可对每一块个别地执行重构操作(其中当前正被重构(即，解码)的块可被称作“当前块”)。
熵解码单元302可熵解码定义经量化变换系数块的经量化变换系数的语法元素，以及例如量化参数(QP)及/或变换模式指示的变换信息。反量化单元306可使用与经量化变换系数块相关联的QP以确定量化程度，并同样地确定使反量化单元306适用的反量化程度。反量化单元306可例如执行按位左移操作以反量化经量化变换系数。反量化单元306可由此形成包含变换系数的变换系数块。
在反量化单元306形成变换系数块之后，反变换处理单元308可将一或多个反变换应用于变换系数块以产生与当前块相关联的残余块。举例来说，反变换处理单元308可将反DCT、反整数变换、反卡洛南-洛伊变换(KLT)、反旋转变换、反方向变换或另一反变换应用于系数块。
此外，预测处理单元304根据由熵解码单元302熵解码的预测信息语法元素而产生预测块。举例来说，如果预测信息语法元素指示当前块被帧间预测，那么运动补偿单元316可产生预测块。在此状况下，预测信息语法元素可指示DPB 314中供检索参考块的参考图片，以及运动向量，其识别参考图片中的参考块相对于当前图片中的当前块的位置的位置。运动补偿单元316通常可以与关于运动补偿单元224(图2)所描述的方式大体上相似的方式执行帧间预测过程。
作为另一实例，如果预测信息语法元素指示当前块被帧内预测，那么帧内预测单元318可根据由预测信息语法元素指示的帧内预测模式而产生预测块。此外，帧内预测单元318通常可以与关于帧内预测单元226(图2)所描述的方式大体上相似的方式执行帧内预测过程。帧内预测单元318可从DPB 314检索当前块的相邻样本的数据。
重构单元310可使用预测块及残余块来重构当前块。举例来说，重构单元310可将残余块的样本与预测块的对应样本相加以重构当前块。
滤波器单元312可对经重构块执行一或多个滤波操作。举例来说，滤波器单元312可执行解块操作以减低沿着经重构块的边缘的块效应假象。如由虚线所绘示，未必在所有实例中执行滤波器单元312的操作。
滤波器单元312通常可以与关于滤波器单元216(图1)所描述的方式大体上相似的方式执行滤波过程。举例来说，滤波器单元312可选择性地滤波当前块的样本，使得所述滤波不会阻止相邻块的并行处理。举例来说，滤波器单元312可将当前块的样本分类为“待滤波”或“不待滤波”，并仅对被分类为待滤波的样本执行双边滤波(即，滤波器单元312可抑制双边滤波被分类为不待滤波的样本)。以此方式，滤波器单元312仍可获得一些滤波益处，同时仍能够并行地处理相邻块。
视频解码器300可将经重构块存储于DPB 314中。举例来说，滤波器单元312可将经滤波的经重构块存储于DPB 314中。如上文所论述，DPB 314可向预测处理单元304提供参考信息，例如用于帧内预测的当前图片及用于后续运动补偿的经先前解码图片的样本。此外，视频解码器300可输出来自DPB的经解码图片以用于随后呈现于例如图1的显示装置32的显示装置上。
图10为根据本发明的一或多种技术的绘示用于滤波视频数据的经重构块的实例过程的流程图。出于阐释的目的，下文将图10的方法描述为由视频解码器30/300及其组件(例如，图1及9所绘示)执行，但图10的方法可由其它视频解码器或视频编码器执行。举例来说，图10的方法可由视频编码器20/200(例如，图1及2所绘示)执行。
视频解码器30可重构视频数据的当前块的样本(1002)。举例来说，重构单元310可将残余块的样本(由反变换处理单元308产生)与预测块的对应样本(由预测处理单元304产生)相加以重构当前块的样本。
视频解码器30可将当前块的样本分类为待滤波或不待滤波(1004)。如上文所论述，滤波器单元216可以多种方法将当前块的样本分类为待滤波或不待滤波。作为一个实例，滤波器单元216可基于样本是否可用于预测相邻块的样本而执行分类。作为另一实例，滤波器单元216可基于样本是否位于当前块的预定义区域中而执行分类。作为另一实例，滤波器单元216可基于样本是否实际上用于预测相邻块而执行分类。在一些实例中，分类样本可被解释为确定是否滤波。举例来说，滤波器单元216可通过确定是否滤波特定样本而分类特定样本，且不需要将值指派至用于特定样本的某一属性或变量。
视频解码器30可滤波被分类为待滤波的当前块的样本(1006)。举例来说，滤波器单元216可根据以上方程式(2)而对被分类为待滤波的每一样本执行双边滤波过程。具体地说，滤波器单元216可运用被分类为待滤波的每一样本自身及其相邻者的加权平均值来替换所述样本。
视频解码器30可存储当前块的经滤波样本(1008)。举例来说，滤波器单元216可将经滤波当前块(其包含当前块的经滤波样本，以及被分类为不待滤波的未经滤波样本)存储于经解码图片缓冲器314中。此外，视频解码器30可输出来自DPB的经解码图片以用于随后呈现于例如图1的显示装置32的显示装置上。
出于说明的目的，已关于视频译码标准而描述了本发明的某些方面。然而，本发明中所描述的技术可用于其它视频译码过程，包含尚未开发的其它标准或专有视频译码过程。
上文所描述的技术可由视频编码器200及/或视频解码器120执行，其两者可被整体上称作视频译码器。同样地，在适用时，视频译码可指视频编码或视频解码。
应理解，本文中所描述的所有技术可被个别地或组合地使用。本发明包含可取决于例如块大小、调色板大小、切片类型等等的某些因素而改变的若干发信方法。发信或推断语法元素的这些变化可为编码器及解码器先验地所知，或可在视频参数集(VPS)、序列参数集(SPS)、图片参数集(PPS)、切片标头中、在图块层级处或在其它处被明确地发信。
应认识到，取决于实例，本文中所描述的技术中的任一者的某些动作或事件可以不同序列被执行，可被添加、合并或完全省去(例如，并非所有所描述动作或事件皆为实践所述技术所必要)。此外，在某些实例中，可例如经由多线程处理、中断处理或多个处理器同时地而非按顺序执行动作或事件。另外，尽管出于清晰的目的而将本发明的某些方面描述为由单一模块或单元执行，但应理解，本发明的技术可由与视频译码器相关联的单元或模块的组合执行。
尽管上文描述了所述技术的各种方面的特定组合，但提供这些组合仅仅是为了说明本发明中所描述的技术的实例。因此，本发明的技术不应限于这些实例组合并可涵盖本发明中所描述的技术的各种方面的任何可设想组合。
在一或多个实例中，所描述的功能可以硬件、软件、固件或其任何组合予以实施。如果以软件予以实施，那么所述功能可作为一或多个指令或代码而存储于计算机可读媒体上或在计算机可读媒体上进行传输，并由基于硬件的处理单元执行。计算机可读媒体可包含：计算机可读存储媒体，其对应于例如数据存储媒体的有形媒体；或通信媒体，其包含促进例如根据通信协议将计算机程序从一处传送至另一处的任何媒体。以此方式，计算机可读媒体通常可对应于(1)为非暂时性的有形计算机可读存储媒体，或(2)例如信号或载波的通信媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索用于实施本发明中所描述的技术的指令、代码及/或数据结构的任何可用媒体。计算机程序产品可包含计算机可读媒体。
作为实例而非限制，这些计算机可读存储媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置、快闪存储器，或可用以存储呈指令或数据结构形式的所要程序代码并可由计算机存取的任何其它媒体。此外，任何连接被适当地称为计算机可读媒体。举例来说，如果使用同轴电缆、光缆、双绞线、数字订户线(DSL)或例如红外、无线电及微波的无线技术从网站、服务器或其它远程源传输指令，那么同轴电缆、光缆、双绞线、DSL或例如红外、无线电及微波的无线技术包含于媒体的定义中。然而，应理解，计算机可读存储媒体及数据存储媒体并不包含连接、载波、信号或其它暂时性媒体，而是涉及非暂时性的有形存储媒体。如本文中所使用，磁盘及光盘包含紧密光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软盘及蓝光光盘，其中磁盘通常以磁性方式再生数据，而光盘通过激光以光学方式再生数据。以上各者的组合也应包含于计算机可读媒体的范围内。
可由例如以下各者的一或多个处理器执行指令：一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)，或其它等效集成或离散逻辑电路系统。因此，如本文中所使用的术语“处理器”可指前述结构或适合于实施本文中所描述的技术的任何其它结构中的任一者。另外，在一些方面中，本文中所描述的功能性可提供于经配置用于编码及解码的专用硬件及/或软件模块内，或并入于组合式编解码器中。此外，所述技术可完全地实施于一或多个电路或逻辑元件中。
本发明的技术可实施于各种各样的装置或设备中，所述装置或设备包含无线手机、集成电路(IC)或IC集合(例如，芯片组)。在本发明中描述各种组件、模块或单元以强调经配置以执行所揭示技术的装置的功能方面，但未必要求由不同硬件单元来实现。更确切地，如上文所描述，各种单元可结合合适的软件及/或固件而组合于编解码器硬件单元中或由互操作硬件单元的集合提供，所述硬件单元包含如上文所描述的一或多个处理器。
已描述了各种实例。这些及其它实例在所附权利要求书的范围内。

Claims (26)

1.一种滤波视频数据的经重构块的方法，所述方法包括：
由一或多个处理器获得所述视频数据的当前块的经重构样本；及
由所述一或多个处理器选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块，其中选择性地滤波所述当前块的所述经重构样本包括抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
2.根据权利要求1所述的方法，其中选择性地滤波包括选择性地双边滤波所述经重构样本。
3.根据权利要求2所述的方法，其中双边滤波特定样本包括运用所述特定样本的值与所述特定样本的上方、下方、左侧及右侧相邻样本的值的加权平均值来替换所述特定样本的所述值，且其中选择性地双边滤波所述当前块的所述经重构样本包括双边滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个经双边滤波样本。
4.根据权利要求1所述的方法，其中选择性地滤波所述当前块的所述经重构样本包括：
由所述一或多个处理器将所述当前块的所述经重构样本分类为待滤波或不待滤波，其中选择性地滤波包括：
滤波被分类为待滤波的所述当前块的经重构样本；及
抑制滤波被分类为不待滤波的所述当前块的经重构样本。
5.根据权利要求4所述的方法，其中分类所述经重构样本包括：
确定所述当前块的哪些样本用于至少一个相邻块的预测；
将用于至少一个相邻块的预测的所述当前块的经重构样本分类为不待滤波；及
将未用于至少一个相邻块的预测的所述当前块的经重构样本分类为待滤波。
6.根据权利要求5所述的方法，其中确定所述当前块的哪些样本用于至少一个相邻块的预测包括：
响应于确定所述当前块的右侧相邻块使用帧内预测被译码，确定位于所述当前块的最右列中的所述当前块的样本用于至少一个相邻块的预测；及
响应于确定所述当前块的下方相邻块使用帧内预测被译码，确定位于所述当前块的底行中的所述当前块的样本用于至少一个相邻块的预测。
7.根据权利要求5所述的方法，其中所述当前块包括当前色度块及当前亮度块，且其中确定所述当前块的哪些样本用于至少一个相邻块的预测包括：
响应于确定所述当前色度块的相邻块或所述当前亮度块的对应色度块使用交叉分量线性模型CCLM预测模式被译码，确定所述当前块的所有样本用于至少一个相邻块的预测。
8.根据权利要求4所述的方法，其中分类所述经重构样本包括：
将能够由相邻块用于帧内预测的所述当前块的经重构样本分类为不待滤波；及
将不能够由相邻块用于帧内预测的所述当前块的经重构样本分类为待滤波。
9.根据权利要求4所述的方法，其中分类所述经重构样本包括：
将位于所述当前块的预定义区域中的所述当前块的经重构样本分类为不待滤波；及
将不位于所述当前块的所述预定义区域中的所述当前块的经重构样本分类为待滤波。
10.根据权利要求9所述的方法，其中所述预定义区域包含所述当前块的最右样本列及所述当前块的底部样本行。
11.根据权利要求1所述的方法，所述方法能在无线通信装置上执行，其中所述装置包括：
存储器，其经配置以存储所述视频数据；及
接收器，其经配置以接收所述视频数据并将所述视频数据存储至所述存储器。
12.根据权利要求11所述的方法，其中所述无线通信装置为蜂窝电话，且所述视频数据由接收器接收并根据蜂窝通信标准予以调制。
13.一种用于滤波视频数据的经重构块的设备，所述设备包括：
存储器，其经配置以存储视频数据；及
一或多个处理器，其经配置以进行以下操作：
获得所述视频数据的当前块的经重构样本；及
选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块，其中，为了选择性地滤波所述当前块的所述经重构样本，所述一或多个处理器经配置以抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
14.根据权利要求13所述的设备，其中，为了选择性地滤波，所述一或多个处理器经配置以选择性地双边滤波所述经重构样本。
15.根据权利要求13所述的设备，其中，为了双边滤波特定样本，所述一或多个处理器经配置以运用所述特定样本的值与所述特定样本的上方、下方、左侧及右侧相邻样本的值的加权平均值来替换所述特定样本的所述值，且其中，为了选择性地双边滤波所述当前块的所述经重构样本，所述一或多个处理器经配置以双边滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个经双边滤波样本。
16.根据权利要求13所述的设备，其中，为了选择性地滤波所述当前块的所述经重构样本，所述一或多个处理器经配置以进行以下操作：
将所述当前块的所述经重构样本分类为待滤波或不待滤波；
滤波被分类为待滤波的所述当前块的经重构样本；及
抑制滤波被分类为不待滤波的所述当前块的经重构样本。
17.根据权利要求16所述的设备，其中，为了分类所述经重构样本，所述一或多个处理器经配置以进行以下操作：
确定所述当前块的哪些样本用于至少一个相邻块的预测；
将用于至少一个相邻块的预测的所述当前块的经重构样本分类为不待滤波；及
将未用于至少一个相邻块的预测的所述当前块的经重构样本分类为待滤波。
18.根据权利要求17所述的设备，其中，为了确定所述当前块的哪些样本用于至少一个相邻块的预测，所述一或多个处理器经配置以进行以下操作：
响应于确定所述当前块的右侧相邻块使用帧内预测被译码，确定位于所述当前块的最右列中的所述当前块的样本用于至少一个相邻块的预测；及
响应于确定所述当前块的下方相邻块使用帧内预测被译码，确定位于所述当前块的底行中的所述当前块的样本用于至少一个相邻块的预测。
19.根据权利要求17所述的设备，其中所述当前块包括当前色度块及当前亮度块，且其中，为了确定所述当前块的哪些样本用于至少一个相邻块的预测，所述一或多个处理器经配置以进行以下操作：
响应于确定所述当前色度块的相邻块或所述当前亮度块的对应色度块使用交叉分量线性模型CCLM预测模式被译码，确定所述当前块的所有样本用于至少一个相邻块的预测。
20.根据权利要求16所述的设备，其中，为了分类所述经重构样本，所述一或多个处理器经配置以进行以下操作：
将能够由相邻块用于帧内预测的所述当前块的经重构样本分类为不待滤波；及
将不能够由相邻块用于帧内预测的所述当前块的经重构样本分类为待滤波。
21.根据权利要求16所述的设备，其中，为了分类所述经重构样本，所述一或多个处理器经配置以进行以下操作：
将位于所述当前块的预定义区域中的所述当前块的经重构样本分类为不待滤波；及
将不位于所述当前块的所述预定义区域中的所述当前块的经重构样本分类为待滤波。
22.根据权利要求21所述的设备，其中所述预定义区域包含所述当前块的最右样本列及所述当前块的底部样本行。
23.根据权利要求13所述的设备，其中所述装置为无线通信装置，其进一步包括：
接收器，其经配置以接收可解码以获得所述经重构样本的位流。
24.根据权利要求23所述的设备，其中所述无线通信装置为蜂窝电话，且所述位流由所述接收器接收并根据蜂窝通信标准予以调制。
25.一种用于滤波视频数据的经重构块的设备，所述设备包括：
用于获得所述视频数据的当前块的经重构样本的装置；及
用于选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块的装置，其中所述用于选择性地滤波所述当前块的所述经重构样本的装置经配置以抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
26.一种计算机可读存储媒体，其存储指令，所述指令在执行时致使用于滤波视频数据的经重构块的装置的一或多个处理器进行以下操作：
获得所述视频数据的当前块的经重构样本；及
选择性地滤波所述当前块的所述经重构样本以产生经滤波当前块，其中致使所述一或多个处理器选择性地滤波所述当前块的所述经重构样本的所述指令包括致使所述一或多个处理器进行以下操作的指令：抑制滤波所述当前块的至少一个经重构样本，使得所述经滤波当前块包含至少一个非经滤波样本及至少一个经滤波样本。
CN201880006703.1A 2017-01-27 2018-01-25 具有减低复杂性的视频译码中的双边滤波器 Active CN110169064B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762451555P 2017-01-27 2017-01-27
US62/451,555 2017-01-27
US15/879,359 2018-01-24
US15/879,359 US10694181B2 (en) 2017-01-27 2018-01-24 Bilateral filters in video coding with reduced complexity
PCT/US2018/015206 WO2018140587A1 (en) 2017-01-27 2018-01-25 Bilateral filters in video coding with reduced complexity

Publications (2)

Publication Number Publication Date
CN110169064A true CN110169064A (zh) 2019-08-23
CN110169064B CN110169064B (zh) 2021-05-07

Family

ID=61189550

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880006703.1A Active CN110169064B (zh) 2017-01-27 2018-01-25 具有减低复杂性的视频译码中的双边滤波器

Country Status (9)

Country Link
US (1) US10694181B2 (zh)
EP (1) EP3574650A1 (zh)
KR (1) KR20190110548A (zh)
CN (1) CN110169064B (zh)
AU (1) AU2018212665A1 (zh)
BR (1) BR112019015106A2 (zh)
SG (1) SG11201905243YA (zh)
TW (1) TW201832562A (zh)
WO (1) WO2018140587A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112913235A (zh) * 2018-10-04 2021-06-04 Lg电子株式会社 基于cclm的帧内预测方法及其设备
CN113632464A (zh) * 2019-05-21 2021-11-09 华为技术有限公司 分量间预测的方法和设备
CN114731417A (zh) * 2019-11-22 2022-07-08 高通股份有限公司 交叉分量自适应环路滤波器

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10638126B2 (en) * 2017-05-05 2020-04-28 Qualcomm Incorporated Intra reference filter for video coding
GB2567249A (en) * 2017-10-09 2019-04-10 Canon Kk New sample sets and new down-sampling schemes for linear component sample prediction
EP3547686A1 (en) * 2018-03-29 2019-10-02 InterDigital VC Holdings, Inc. Method and apparatus for decoder side prediction based on weighted distortion
US10958928B2 (en) * 2018-04-10 2021-03-23 Qualcomm Incorporated Decoder-side motion vector derivation for video coding
US10805624B2 (en) * 2018-07-16 2020-10-13 Tencent America LLC Determination of parameters of an affine model
CN116347109A (zh) 2018-08-17 2023-06-27 北京字节跳动网络技术有限公司 一种处理视频数据的方法和装置
US11064196B2 (en) * 2018-09-03 2021-07-13 Qualcomm Incorporated Parametrizable, quantization-noise aware bilateral filter for video coding
US10819979B2 (en) * 2018-09-06 2020-10-27 Tencent America LLC Coupled primary and secondary transform
WO2020053806A1 (en) * 2018-09-12 2020-03-19 Beijing Bytedance Network Technology Co., Ltd. Size dependent down-sampling in cross component linear model
EP4199514A1 (en) * 2018-09-20 2023-06-21 LG Electronics Inc. Method and device for image decoding on basis of cclm prediction in image coding system
SG11202103372XA (en) * 2018-10-01 2021-04-29 Op Solutions Llc Methods and systems of exponential partitioning
CN112956199B (zh) 2018-11-06 2023-07-28 北京字节跳动网络技术有限公司 帧内预测的简化参数推导
US11178396B2 (en) * 2018-11-14 2021-11-16 Tencent America LLC Constrained intra prediction and unified most probable mode list generation
WO2020108591A1 (en) * 2018-12-01 2020-06-04 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation for intra prediction
BR112021010428A2 (pt) 2018-12-07 2021-08-24 Beijing Bytedance Network Technology Co., Ltd. Método para processamento de vídeo, aparelho em um sistema de vídeo, e, produto de programa de computador
KR20220116357A (ko) * 2018-12-21 2022-08-22 삼성전자주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR20200083321A (ko) * 2018-12-28 2020-07-08 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2020156534A1 (en) 2019-02-01 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Interactions between in-loop reshaping and intra block copy
CN113383547A (zh) 2019-02-01 2021-09-10 北京字节跳动网络技术有限公司 环路整形和帧间编解码工具之间的相互作用
WO2020156549A1 (en) 2019-02-02 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Buffer access methods for intra block copy in video coding
SG11202107959WA (en) 2019-02-02 2021-08-30 Beijing Bytedance Network Technology Co Ltd Buffer management for intra block copy in video coding
SG11202108209YA (en) 2019-02-22 2021-08-30 Beijing Bytedance Network Technology Co Ltd Neighbouring sample selection for intra prediction
WO2020171644A1 (ko) * 2019-02-22 2020-08-27 엘지전자 주식회사 영상 코딩 시스템에서 cclm 예측에 기반한 영상 디코딩 방법 및 그 장치
MX2021009894A (es) 2019-02-24 2022-05-18 Beijing Bytedance Network Tech Co Ltd Derivación de parámetros para intrapredicción.
EP3915265A4 (en) 2019-03-01 2022-06-22 Beijing Bytedance Network Technology Co., Ltd. DIRECTION-BASED PREDICTION FOR INTRA BLOCK COPY IN VIDEO CODING
EP3915252A4 (en) 2019-03-04 2022-03-23 Beijing Bytedance Network Technology Co., Ltd. IMPLEMENTATION OF ASPECTS IN AN INTRA BLOCK COPY IN VIDEO ENCODING
CN113545044A (zh) 2019-03-08 2021-10-22 北京字节跳动网络技术有限公司 视频处理中的整形模型
CN117499644A (zh) 2019-03-14 2024-02-02 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
CN113632462B (zh) 2019-03-23 2023-08-22 北京字节跳动网络技术有限公司 默认的环内整形参数
WO2020192642A1 (en) * 2019-03-24 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Conditions in parameter derivation for intra prediction
MX2021012674A (es) 2019-04-23 2021-11-12 Beijing Bytedance Network Tech Co Ltd Metodos para la reduccion de dependencia de componentes cruzados.
KR20220024006A (ko) 2019-06-22 2022-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 잔차 스케일링을 위한 신택스 요소
CN114363635A (zh) * 2019-06-25 2022-04-15 Oppo广东移动通信有限公司 信息处理方法及装置、设备、存储介质
CN114827611B (zh) * 2019-06-25 2023-09-12 北京大学 视频图像编码和解码方法、设备及介质
CN111699681B (zh) * 2019-06-25 2023-11-14 北京大学 一种视频图像处理方法、设备及存储介质
BR112022000187A2 (pt) 2019-07-06 2022-02-22 Beijing Bytedance Network Tech Co Ltd Método de processamento de dados de vídeo, aparelho para processar dados de vídeo, meio de armazenamento não transitório legível por computador, meio de gravação não transitório legível por computador
EP3977738A4 (en) 2019-07-07 2022-08-17 Beijing Bytedance Network Technology Co., Ltd. SIGNALING OF CHROMA RESIDUAL SCALE
JP7359934B2 (ja) 2019-07-10 2023-10-11 北京字節跳動網絡技術有限公司 映像符号化におけるイントラブロックコピーのためのサンプル識別
CN117579816A (zh) 2019-07-11 2024-02-20 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的比特流一致性约束
CN114424541A (zh) * 2019-08-16 2022-04-29 苹果公司 使用查找表的自适应双边滤波
EP4140127A4 (en) * 2020-05-26 2023-07-26 Huawei Technologies Co., Ltd. METHOD AND DEVICE FOR HIGH-LEVEL SYNTAX FOR SMOOTHING INTRAPREDICATION TECHNIQUES
US11743459B2 (en) * 2020-09-29 2023-08-29 Qualcomm Incorporated Filtering process for video coding
WO2022108422A1 (ko) * 2020-11-23 2022-05-27 현대자동차주식회사 적응적 참조화소 선택을 이용한 영상 부호화 및 복호화 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101390401A (zh) * 2006-03-01 2009-03-18 高通股份有限公司 借助伪影评价的提高的图像/视频质量
CN101641961A (zh) * 2007-03-28 2010-02-03 三星电子株式会社 使用运动补偿滤波的图像编码和解码方法及设备
US20100239187A1 (en) * 2009-03-17 2010-09-23 Sehoon Yea Method for Up-Sampling Depth Images
US20130177078A1 (en) * 2010-09-30 2013-07-11 Electronics And Telecommunications Research Institute Apparatus and method for encoding/decoding video using adaptive prediction block filtering
CN104244015A (zh) * 2013-06-14 2014-12-24 辉达公司 移除视频数据中的编码伪影的自适应滤波机制
WO2015191834A1 (en) * 2014-06-11 2015-12-17 Qualcomm Incorporated Determining application of deblocking filtering to palette coded blocks in video coding

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
HUP0301368A3 (en) * 2003-05-20 2005-09-28 Amt Advanced Multimedia Techno Method and equipment for compressing motion picture data
US20070171980A1 (en) 2006-01-26 2007-07-26 Yen-Lin Lee Method and Related Apparatus For Decoding Video Streams
US7894685B2 (en) * 2008-07-01 2011-02-22 Texas Instruments Incorporated Method and apparatus for reducing ringing artifacts
JP5183664B2 (ja) * 2009-10-29 2013-04-17 財團法人工業技術研究院 ビデオ圧縮のためのデブロッキング装置及び方法
KR101681301B1 (ko) * 2010-08-12 2016-12-01 에스케이 텔레콤주식회사 필터링모드 생략가능한 영상 부호화/복호화 방법 및 장치
US9930366B2 (en) * 2011-01-28 2018-03-27 Qualcomm Incorporated Pixel level adaptive intra-smoothing
US20120236936A1 (en) * 2011-03-14 2012-09-20 Segall Christopher A Video coding based on edge determination
US9344729B1 (en) * 2012-07-11 2016-05-17 Google Inc. Selective prediction signal filtering
WO2016115981A1 (en) * 2015-01-22 2016-07-28 Mediatek Singapore Pte. Ltd. Method of video coding for chroma components
RU2684193C1 (ru) * 2015-05-21 2019-04-04 Хуавэй Текнолоджиз Ко., Лтд. Устройство и способ для компенсации движения в видеоизображении
WO2016192677A1 (en) * 2015-06-03 2016-12-08 Mediatek Inc. Method and apparatus of error handling for video coding using intra block copy mode
EP3767947A1 (en) * 2015-11-17 2021-01-20 Huawei Technologies Co., Ltd. Method and apparatus of adaptive filtering of samples for video coding

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101390401A (zh) * 2006-03-01 2009-03-18 高通股份有限公司 借助伪影评价的提高的图像/视频质量
CN101641961A (zh) * 2007-03-28 2010-02-03 三星电子株式会社 使用运动补偿滤波的图像编码和解码方法及设备
US20100239187A1 (en) * 2009-03-17 2010-09-23 Sehoon Yea Method for Up-Sampling Depth Images
US20130177078A1 (en) * 2010-09-30 2013-07-11 Electronics And Telecommunications Research Institute Apparatus and method for encoding/decoding video using adaptive prediction block filtering
CN104244015A (zh) * 2013-06-14 2014-12-24 辉达公司 移除视频数据中的编码伪影的自适应滤波机制
WO2015191834A1 (en) * 2014-06-11 2015-12-17 Qualcomm Incorporated Determining application of deblocking filtering to palette coded blocks in video coding

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ANDREY NORKIN ET AL: "《HEVC Deblocking Filter》", 《IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY》 *
JINHO LEE ET AL: "《Deblocking filter modification for constrained intra prediction》", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11 6TH MEETING: TORINO》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112913235A (zh) * 2018-10-04 2021-06-04 Lg电子株式会社 基于cclm的帧内预测方法及其设备
CN113632464A (zh) * 2019-05-21 2021-11-09 华为技术有限公司 分量间预测的方法和设备
CN113632464B (zh) * 2019-05-21 2023-04-28 华为技术有限公司 分量间预测的方法和设备
CN114731417A (zh) * 2019-11-22 2022-07-08 高通股份有限公司 交叉分量自适应环路滤波器
CN114731417B (zh) * 2019-11-22 2023-07-14 高通股份有限公司 交叉分量自适应环路滤波器

Also Published As

Publication number Publication date
EP3574650A1 (en) 2019-12-04
BR112019015106A2 (pt) 2020-03-10
KR20190110548A (ko) 2019-09-30
US20180220130A1 (en) 2018-08-02
TW201832562A (zh) 2018-09-01
CN110169064B (zh) 2021-05-07
WO2018140587A1 (en) 2018-08-02
SG11201905243YA (en) 2019-08-27
AU2018212665A1 (en) 2019-07-04
US10694181B2 (en) 2020-06-23

Similar Documents

Publication Publication Date Title
CN110169064A (zh) 具有减低复杂性的视频译码中的双边滤波器
CN106797466B (zh) 一种处理视频数据的方法及装置
CN106464881B (zh) 块自适应颜色空间转换译码的方法和装置
CN106797479B (zh) 对于并行处理的帧内块复制预测限制
CN105723707B (zh) 用于视频译码的色彩残差预测
CN106797477B (zh) 用于解码及编码视频数据的方法和设备
CN106105206B (zh) 用于使用置零系数的低复杂度正变换的系统和方法
CN106537916B (zh) 编码和解码视频数据的方法和装置及计算机可读存储介质
CN106105201B (zh) 使用像素距离的解块滤波
CN103891293B (zh) 用于色度分量的自适应环路滤波的方法及设备
CN110100439A (zh) 用于视频译码的帧内预测技术
CN105580365B (zh) 处理视频数据的方法、装置及存储媒体
CN105493507B (zh) 用于帧内块复制的残余预测
CN109076218A (zh) 在视频译码中自适应环路滤波中的多个滤波器的混淆
US20180184127A1 (en) Determining neighboring samples for bilateral filtering in video coding
CN104255035B (zh) 视讯译码中的量化参数(qp)译码
CN110100436A (zh) 使用导出色度模式译码视频数据
CN104205829B (zh) 合并信令及环路滤波器开/关信令
CN110024403A (zh) 用于视频译码的仿射运动模型的运动向量生成
CN109716765A (zh) 用于视频译码中的帧内预测的经改进内插滤波器
CN107660341A (zh) 切片级帧内块复制及其它视频译码改进
CN107690803A (zh) 用于高动态范围及广色域视频译码的自适应常量照度方法
CN109076228A (zh) 滤波信息的发信号
CN110024401A (zh) 用于时间扩缩性支持的修改适应性环路滤波器时间预测
CN110393010A (zh) 视频译码中的帧内滤波旗标

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40006133

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant