CN101610416B - 一种处理数据的方法及系统 - Google Patents

一种处理数据的方法及系统 Download PDF

Info

Publication number
CN101610416B
CN101610416B CN200910152369.3A CN200910152369A CN101610416B CN 101610416 B CN101610416 B CN 101610416B CN 200910152369 A CN200910152369 A CN 200910152369A CN 101610416 B CN101610416 B CN 101610416B
Authority
CN
China
Prior art keywords
decoded picture
picture
filtering
bit stream
adj
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200910152369.3A
Other languages
English (en)
Other versions
CN101610416A (zh
Inventor
迈克尔·杨
谢孟·陈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Avago Technologies Fiber IP Singapore Pte Ltd
Original Assignee
Zyray Wireless Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zyray Wireless Inc filed Critical Zyray Wireless Inc
Publication of CN101610416A publication Critical patent/CN101610416A/zh
Application granted granted Critical
Publication of CN101610416B publication Critical patent/CN101610416B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供了一种为AVS1-P2进行自适应解块的方法和系统。AVS解码器可接收接收比特流，其中包括一个或多个滤波参数和构成图片的多个宏块；解码所述多个宏块，生成解码后的图片；基于所述一个或多个滤波参数和从所述生成的解码后的图片中计算得出的调整后的量化参数(adj_qp)来处理所述解码后的图片。解码后的图片的adj_qp可基于解码后的图片和解码后的图片的相关联的参考图片的类型来确定。可基于滤波参数、分片边界信息、adj_qp和用户控制信息来确定和/或调整滤波强度。解码后的图片可通过外部环路解块滤波器使用确定的滤波强度来进行滤波，以降低解码后的图片的宏块和/或分片边界效应。外部环路解块滤波器可基于确定的滤波强度级来开启或关闭。

Description

一种处理数据的方法及系统
技术领域
本发明涉及应用于视频编码系统的信号处理，更具体地说，涉及一种为AVS1-P2进行自适应解块的方法和系统。
背景技术
中国音频视频编码标准(AVS)视频标准是一种流化(streamlined)高效的视频编码方案，其使用了最新的视频编码工具，专门用来编码HDTV内容。AVS的设计目标是提供最优的性能和在一定程度上降低复杂度。因此AVS将可提供低成本的实现方式。AVS应用包括广播TV、HD-DVD和宽带视频网络。
AVS是构建在分层的数据结构之上的，该数据结构表示传统的视频数据。该结构映射到编码后的视频比特流。通常，序列包括从序列头开始的几个GOP(图片组)，每一个GOP都可以是一个随机访问点。GOP和宏块之间的其它层为图片和分片。
AVS视频(第二部分)将基于空间和临时预测进行混合编码，整数转换和熵编码。AVS可用于将图片使用矩形格式进行编码，该矩形格式的大小为16K×16K个像素。像素将被编码到亮度-色度格式(YCrCb)之中，每个分量的精确度为8比特。该标准中的基本编码/解码单元为宏块，其包括一个16×16亮度块和两个8×8色度块。在该编码方案中，独立的基于块的编码技术可能会在重建图像或视频的块的边界之间产生可察觉的不连续现象，这种现象也称为方块效应(blocking artifact)。为降低方块效应并改善视频的质量，AVS采用了许多新技术，其中包括自适应解块滤波。AVS要求在AVS编解码器的运动补偿预测环路中使用解块滤波器，以确保视觉质量达到一定级别。由于解块滤波器是设置在运动补偿预测环路之中的，解块滤波器通常也称为“环路内部解块滤波器”。
比较本发明后续将要结合附图介绍的系统，现有技术的其它局限性和弊端对于本领域的普通技术人员来说是显而易见的。
发明内容
本发明提供了一种为AVS1-P2进行自适应解块的方法和系统，在至少一副附图中做了描述，并结合权利要求做了完整的定义。
依据本发明，提供了一种处理数据的方法，包括，
接收比特流，其中包括一个或多个滤波参数和构成图片的多个宏块；
解码所述多个宏块，生成解码后的图片；
基于所述一个或多个滤波参数和从所述生成的解码后的图片中计算得出的一个或多个参数来处理所述解码后的图片。
优选地，所述比特流为AVS1-P2比特流或者H.264比特流。
优选地，所述方法还包括为所述解码后的图片计算调整后的量化参数。
优选地，所述方法还包括基于所述解码后的图片的图片类型确定所述调整后的量化参数。
优选地，所述方法还包括基于所述解码后的图片和所述解码后的图片的一个或多个参考图片来确定所述调整后的量化参数。
优选地，所述方法还包括基于所述一个或多个滤波参数和/或所述调整后的量化参数和/或用户控制信息来为所述解码后的图片确定滤波强度。
优选地，所述方法还包括基于所述确定的滤波强度对所述解码后的图片进行滤波。
优选地，所述方法还包括调整所述确定的滤波强度以降低宏块的边界效应(macroblock boundary artifact)和/或分片的边界效应(slice boundary artifact)。
优选地，所述方法还包括基于所述确定的滤波强度来开启或关闭所述处理。
依据本发明，提供了一种处理数据的系统，包括：
一个或多个处理器，用于接收比特流，所述比特流包括一个或多个滤波参数和构成图片的多个宏块；
所述一个或多个处理器用于解码所述多个宏块，生成解码后的图片；
所述一个或多个处理器用于基于所述一个或多个滤波参数和从所述生成的解码后的图片中计算得出的一个或多个参数来处理所述解码后的图片。
优选地，所述比特流为AVS1-P2比特流或者H.264比特流。
优选地，所述一个或多个处理器用于为所述解码后的图片计算调整后的量化参数。
优选地，所述一个或多个处理器用于基于所述解码后的图片的图片类型确定所述调整后的量化参数。
优选地，所述一个或多个处理器用于基于所述解码后的图片和所述解码后的图片的一个或多个参考图片来确定所述调整后的量化参数。
优选地，所述一个或多个处理器用于基于所述一个或多个滤波参数和/或所述调整后的量化参数和/或用户控制信息来为所述解码后的图片确定滤波强度。
优选地，所述一个或多个处理器用于基于所述确定的滤波强度对所述解码后的图片进行滤波。
优选地，所述一个或多个处理器用于调整所述确定的滤波强度以降低宏块的边界效应和/或分片的边界效应。
优选地，所述一个或多个处理器用于基于所述确定的滤波强度来开启或关闭所述处理。
依据本发明，提供了一种机器可读存储器，其中存储有计算机程序，该计算机程序包括用于处理数据的至少一个代码段，所述至少一个代码段可由机器执行，以控制机器执行如下步骤：
接收比特流，其中包括一个或多个滤波参数和构成图片的多个宏块；
解码所述多个宏块，生成解码后的图片；
基于所述一个或多个滤波参数和从所述生成的解码后的图片中计算得出的一个或多个参数来处理所述解码后的图片。
优选地，所述比特流为AVS1-P2比特流或者H.264比特流。
优选地，所述至少一个代码段包括用于为所述解码后的图片计算调整后的量化参数的代码。
优选地，所述至少一个代码段包括用于基于所述解码后的图片的图片类型确定所述调整后的量化参数的代码。
优选地，所述至少一个代码段包括用于基于所述解码后的图片和所述解码后的图片的一个或多个参考图片来确定所述调整后的量化参数的代码。
优选地，所述至少一个代码段包括用于基于所述一个或多个滤波参数和/或所述调整后的量化参数和/或用户控制信息来为所述解码后的图片确定滤波强度的代码。
优选地，所述至少一个代码段包括用于基于所述确定的滤波强度对所述解码后的图片进行滤波的代码。
优选地，所述至少一个代码段包括用于调整所述确定的滤波强度以降低宏块的边界效应和/或分片的边界效应的代码。
优选地，所述至少一个代码段包括用于基于所述确定的滤波强度来开启或关闭所述处理的代码。
本发明的上述和其它优点、特征和创新之处，以及下述实施例中的细节，将通过下列附图说明和附图得到更为清楚的理解。
附图说明
图1是依据本发明一较佳实施例的示范性AVS CODEC系统的结构示意图；
图2是依据本发明一较佳实施例的示范性AVS1-P2访问单元结构的示意图；
图3是依据本发明一较佳实施例的示范性AVS1-P2解码器结构的示意图；
图4是依据本发明一较佳实施例的为AVS视频计算量化参数的方法的流程图；
图5是依据本发明一较佳实施例的应用于AVS1-P2视频的自适应边界强度-决策树的操作流向示意图。
具体实施方式
本发明涉及一种为AVS1-P2进行自适应解块(adaptive deblocking)的方法和系统。本发明的多个特征可用于在AVS解码器中接收编码比特流。收到的编码比特流可包括一个或多个图片处理相关的滤波参数，以及构成图片的多个宏块。解码器可用于解码每个宏块，以构建一个或多个解码后的图片。每个解码后的图片可基于从收到的比特流中提取的滤波参数和对应的从各自解码后的图片中计算得出的量化参数来进行处理。可在AVS解码器中基于解码后的图片的类型和相关联的解码后的图片中的一个或多个参考图片来为解码后的图片计算调整后的量化参数(adj_qp)。处理解码后的图片时用到的滤波强度可基于滤波参数、adj_qp和用户控制信息来确定。解码后的图片可使用确定的滤波强度通过外部环路解块滤波器来进行滤波。解码后的图片的滤波强度可基于收到的滤波参数、计算得到的adj_qp和用户控制信息来自适应地调整，以降低解码后的图片的宏块边界效应和/或分片边界效应。外部环路解块滤波器可依据确定的滤波强度级别来开启或关闭。
图1是依据本发明一较佳实施例的示范性AVS CODEC系统100的结构示意图。如图1所示，其中展示了AVS编解码系统100，包括预处理单元102、AVS编码器104、AVS解码器106和包含外部环路解块滤波器108a的后处理单元108。
预处理单元102可包括适当的逻辑、电路和/或代码，用于在编码之前消除一些相对不明显的高频分量，以改善编码效率，降低视频编码处理过程中处理痕迹(artifact)发生的可能性。
AVS编码器104可包括适当的逻辑、电路和/或代码，用于使用尽可能少的比特来将视频流转换为压缩格式，例如AVS格式，同时保持可以接受的视觉效果。AVS1-P2中的基本编码单元可以是宏块。AVS1-P2比特流具有分层结构。通常来说，AVS序列可包括几个图片组(GOP)，每个图片组都具有随机访问点。GOP和宏块之间的其它层可以是图片和分片。AVS序列层可提供到编码比特流的进入点。
AVS序列层可包括一组系统参数，用于启动和设置相应的解码器系统。图片层可提供视频帧的编码表现形式。图片层可包括包头，包括必选和可选的参数，还可包括可选的用户数据。AVS指定了多个图片类型，包括帧间图片(I图片)、预测图片(P图片)和插值图片(B图片)。分片结构可提供最底层机制，用于在发生传输错误时为AVS1-P2比特流重新建立同步。分片头可包括对应相关联宏块的宏块级别处理上的信息。例如，例如AVS解码器106之中的内部环路解块滤波器的状态。每一分片可包括任意数量的以栅格顺序(raster-ordered)排列的宏块中的行。宏块可包括量度和色度分量像素，其共同代表16×16区域的图片。宏块层可以使AVS编解码器中自适应性和运动补偿的主要单元。宏块头可包括与编码模式、运动向量和/或相应宏块的量化参数(QP)有关的信息。
AVS1-P2标准之中的内部环路解块滤波器可用于消除方块效应，以改善视频质量。内部环路解块滤波器可以是非线性1D滤波器，可跨块选择性的使用该滤波器以使方块效应变得平滑。可在压缩后的比特流中以图片为单位采用显式方式传送滤波参数，或者也可由解码器基于本地条件推算得出，从而可以对滤波强度进行灵活的调整，以及启动或关闭滤波器。
后处理单元108可包括适当的逻辑、电路和/或代码，用于处理解码后的图片，并将其转换为LCD输入格式以进行显示。后处理单元108可用于通过各种后滤波算法来增强图片SNR(信噪比)和主观(subjective)图片质量。在这点上，后处理单元108可包括编码环路之外的外部环路解块滤波器108a。外部环路解块滤波器108a可在重建和显示宏块之前使用。外部环路解块滤波器108a可用于消除例如8×8块的边缘上的可见的块结构，这种块结构是在进行基于块的转换编码和运动估计过程中产生的。外部环路解块滤波器108a可自适应地调整，以对宏块边界进行自适应滤波，或者基于来自AVS解码器106和/或用户噪声降低控制的信息来开启或者关闭。
在操作过程中，预处理单元102可从例如摄像机或者其它视频源接收视频比特流。预处理单元102可用于通过例如在进行编码之前移除一些相对不明显的高频分量来处理收到的比特流，以改善编码效率，并降低视频编码处理过程中产生的处理痕迹。AVS编码器104可用于将预处理的比特流转换为AVS-P2比特流。视频数据处理参数例如环路滤波关闭(loop_filter_disable)(用于指示需要启动还是关闭内部环路解块滤波器108a)和分片边界信息(slice_boundary_info)(用于指示像素是否位于相关图片的分片边界上)可包含在AVS1-P2比特流中，发往AVS解码器106。
AVS解码器108可从收到的AVS1-P2比特流中提取有关的内部环路解块滤波参数，例如loop_filter_disable和slice_boundary_info。AVS解码器108将收到的1-P2比特流处理和转换为解码后的图片。调整后的AP参数(adi_qp)，用于指示多少解码后的图片的AP需要调整，其可在AVS解码器106中为每一解码后的图片来计算。各种参数和/或信号例如loop_filter_disable、silce_boundary_info和算得的adi_qp可与解码后的图片一起发往后处理单元108。收到的参数例如loop_filter_disable、slice_boundary_info和算得的adi_qp可用于控制后处理单元108的滤波强度。此外，用户还可控制后处理单元108的滤波强度，这是通过经由对应设备的用户接口发送用户噪声降低控制参数usr_bnr来实现的。后处理单元108可通过外部环路解块滤波108a来处理解码后的图片，并将生成的比特流转换为LCD格式以进行显示。
图2是依据本发明一较佳实施例的示范性AVS1-P2访问单元结构的示意图。如图2所示，其中展示了AVS访问点(AU)200，包括序列头(SH)202、图片头204、分片头206和宏块解码208。
序列头202包括与图片序列有关的信息，并可应用于一系列连续的编码的视频图片。序列头202可包括一些参数，例如初始化AVS编码器106、同步AVS编码器106以及解码收到的解码比特流所需的比特率和采样率。
图片头206可包括模块参数例如AVS编解码器中的loop_filter_disable。图片头204中的信息可在解码整个图片的过程中一直保持不变。
分片头206可包括处理与分片有关的宏块时需要的信息。分片头206中的信息可包括内部解块滤波参数例如slice_boundary_info。
为了对AVS1-P2比特流中的图片进行解码，AVS编码器106可从收到的图片中提取包含的内部解码滤波参数例如图片头204之中的loop_filter_disable和分片头206之中的slice_boundary_info，并计算当前图片调整后的QP(adj_qp)。adj_qp可基于图片头204、分片头206和需要在宏块解码208中解码的多个宏块中的信息来计算。提取的loop_filter_disable和slice_boundary_info将与计算得到的adj_qp一起发往后处理单元108，以便对相关联宏块的边界和/或解码后的图片中的分片进行自适应的外部解块滤波。
图3是依据本发明一较佳实施例的示范性AVS1-P2解码器结构的示意图。如图3所示，其中展示了AVS解码器结构300，其中包含AVS解码器106、DRAM(动态随机访问存储器)302、外部环路解块器304和处理器306。
DRAM 302可包括适当的逻辑、电路和/或代码，用于存储信息，例如AVS解码器106可能使用的可执行指令和数据。可执行指令可包括一些算法，用于自动或者在收到请求之后存储实时视频流。DRAM 302可用于输出AVS解码器106和/或外部环路解块器304所请求的不同长度的示范性视频流。DRAM302可包括低延迟非易失性存储器例如闪存和/或其它适当的电子数据存储器。
外部环路解块器304可包括适当的逻辑、电路和/或代码，用于消除与来自AVS解码器106的解码后的图片有关的块噪声。外部环路解块器304的外部环路解块滤波的强度可由AVS解码器106和用户自适应地控制。例如，外部环路解块器304可使用分片边界上的信息、块结构上的信息、跨块应用到图片像素梯度的像素梯度(gradient)和跳变上的信息和量化参数的状态上的信息。外部环路解块器304可基于来自AVS解码器106和用户的信息灵活的修改滤波强度或者甚至启动/关闭滤波器。外部环路解块器304可用于向DRAM302读取/写入视频数据。
处理器306可包括适当的逻辑、电路和/或代码，用于提供处理从用户收到的接收信号时所需的控制指令，以及向外部环路解块器304提供信息，以调整滤波强度或者开启或关闭滤波器。
在操作过程中，对于进站AVS1-P2比特流，AVS解码器106可从收到的AVS1-P2比特流中提取滤波参数例如loop_filter_disable和slice_boundary_info信息和计算得到的相关的adj_qp。AVS解码器108可将收到的AVS1-P2比特流处理和转换为一个或多个解码后的图片(重建图片)。每一解码后的图片中的分片以及相关的分片信息例如分片中第一宏块(MB)的宏块地址，将发往DRAM 302以进行存储。DRAM 302可用于在等到解码后的图片的所有分片到达之后，再开始后处理该图片。图片后处理过程中使用的滤波参数例如loop_filter_disable和slice_boundary_info可在AVS解码器106中从编码比特流中提取。AVS解码器106可为每一解码后的图片计算adj_qp，并将其与提取的loop_filter_disable和slice_boundary_info一起发往外部环路解块器304。外部环路解块器304的滤波强度可通过使用处理器306发送user-bnr和/或adaptive-filtering-flag来进行控制。外部环路解块器304可用于从DRAM 302中读取解码后的图片以进行后处理。外部环路解块器304可使用来自AVS解码器106和通过处理器306得到的用户控制参数的信息来对解码后的图片的块边界进行自适应滤波。滤波后的图片可发往DRAM 302进行存储，以便进行后续的处理和显示。
图4是依据本发明一较佳实施例的为AVS视频计算量化参数的方法的流程图。如图4所示，其中展示了基于图片类型计算adj_qp的过程。表1展示了处理过程中可能用到的示范性参数。
表1自适应外部环路解块滤波参数
  参数   描述
  alpha   0～1范围内的浮点数
  adj_qp   当前图片的调整后的QP
  adj_qp_pre   前一图片的调整后的QP
  adj_qp_ref   当前图片的参考图片的调整后的QP
  adaptive_filtering_flag   1：外部环路解块滤波器开启0：其它
  act_qp_ref   当前图片的参考图片的平均量化参数(QP)
  avg_qp_ref   当前图片的参考图片的平均量化参数(QP)
  B_adj_only   1：QP调整仅对B图片进行，而avg_qp_cur直接应用于I/P图片0：其它
  inter_coded_mb_cnt   在当前图片中具有非零编码块图样的中间宏块的总数
 参数   描述
 intra_mb_cnt   当前图片中宏块的总数
 loop_filter_disable   1：内部环路解块滤波器关闭0：其它
 P_adj-forwarding   1：对P图片Qp的调整将在随后的图片中用作“参考图片的Qp”0：其它
 ref_pic_flag   1：当前图片为参考图片0：其它
 total_mb_cnt   当前图片宏块的总数
 user_bnr   用户块噪声降低控制参数
计算adj_qp的示范性步骤可开始于步骤402，在初始化AVS解码器106的过程中，参数B_adj_only和p_adj-forwarding和alpha将被设置。参数B_adj_only可设置为二进制的0或1。参数B_adj_only只有在以下情况下进行调整，即只有对B图片进行QP调整(计算adj_qp)同时avg_qp_cur参数直接应用于I图片和B图片的情况下。参数p_adj-forwarding可控制是否将参考图片的adj_qp或avg_qp_cur值用于为随后的参考图片生成调整后的QP值。换句话说，当参数p_adj-forwarding被设置时，P图片的QP的调整将开始进行，并用作后续图片的“参考图片的QP”。参数alpha为0到1范围内的浮点数，代表例如2抽头(two-tap)IIR滤波器的系数，该滤波器用于计算adj_qp，该参数用于对从一张图片到另一张图片的adj_qp的较大波动进行平滑处理。
在步骤404，在每一视频序列的开始处，初始化参数adj_qp_pre和adj_qp_ref，这是通过分别将adj_qp_pr＝0和adj_qp_ref＝0来进行的。参数adj_qp_pre可用于指示最近显示的图片的调整后的QP，参数adj_qp_ref可用于展示当前P图片的最近的参考图片的平均QP。
在步骤406，将为当前图片计算参数adj_qp。参数adj_qp可使用图片的加权平均后的adj_qp_cur和adj_qp_ref来计算。
图片的avg_qp_cur可使用下列关系来计算：avg_qp_cur＝每一宏块的Qp的和/total_mb_cnt，其中QP为图片中每一宏块的平均QP。
参数avg_qp_ref可依据图片类型来生成。对于I图片，avg_qp_ref可设置成与图片的avg_qp_cur相等。对于P图片，avg_qp_ref可取最近参考图片(I或P图片)的avg_qp_cur的值。对于B图片，avg_qp_ref可取最近解码的两个参考图片的avg_qp_cur值的算术平均值。理想情况下，依据运动向量的方向(前进/后退/双向)，B图片的avg_qp_ref为参考I和P图片的的加权平均值，然而，若I和P图片在多数情况下非常接近时，简单的算术平均值可以作为可行的近似解。若在开放GOP(图片组)中第一连续B图片紧跟第一编码I帧的情况下，这些B图片的avg_qp_ref可设置为第一解码I帧的avg_qp_cur，这是因为当前可能没有可用的P图片可作为当前GOP的参考。
步骤406的操作将对与在步骤406中收到的GOP相关联的每一图片重复进行。在步骤406之后，将对下一新的GOP执行步骤404。
图5是依据本发明一较佳实施例的应用于AVS1-P2视频的自适应边界强度-决策树的操作流向示意图。如图5所示，示范性步骤可开始于步骤502，确定是否设置user_bnr。user_bnr为用户块噪声降低控制参数，其可设置为不同的值如0、1、2，以便指示外部环路解块器304的不同滤波强度级别。将user_bnr设置为0或1或2可分别对应0强度外部环路解块滤波(关闭外部环路解块器304)、低强度外部环路解块滤波和高强度外部环路解块滤波。若在步骤502中将user_bnr设置为0，则外部环路解块器304将被关闭，因此滤波强度可设置为0。在步骤502，若user_bnr设置为大于0，则在步骤504，确定是否设置adaptive_filtering_flag。若设置adaptive_filtering_flag，则在步骤506，确定是否设置loop_filter_flag。
若设置loop_filter_flag，则在步骤508，确定图片中正在进行的像素是否跨越分片边界，以及外部环路解块器304是否进行外部环路水平滤波。若是，则在步骤510，将外部环路解块器304的滤波强度设置为f(adj_qp，user_bnr)+s，其中f()为adj_qp和user_bnr的函数，s为正常数。可依据具体的实现来选择user_bnr、f()和s。在步骤504，若没有对adaptive_filtering_flag进行设置，则在步骤514，将外部环路解块器304的滤波强度设置为f(adj_qp，user_bnr)。在步骤506，若loop_filter_flag未设置，则在步骤516，确定图片中当前正在进行的像素是否跨越分片边界，以及外部环路解块器304是否执行外部环路水平滤波。若图片中当前正在进行的像素跨越分片边界和/或外部环路解块器304执行外部环路水平滤波，则在步骤520，外部环路解块器304的滤波强度可设置为f(adj_qp，user_bnr)+s。在步骤516，若正在进行的像素未跨越分片边界和/外部环路解块器304不执行水平滤波，则在步骤518，外部环路解块器304的滤波强度将设置为f(adj_qp，user_bnr)。在步骤508，若正在进行的像素未跨越分片的边界和/或外部环路解块器304不执行水平滤波，则在步骤522，外部环路解块器304的滤波强度将设置为0。
图5所示的过程可展示如何使用外部环路解块器304来基于用户噪声降低控制以及与解码后的图片有关的位置信息(例如内部环路解块滤波器的状态、分片边界信息(slice_boundary_info)和所需的图片量化参数调整)对解码后的图片的像素进行自适应滤波。例如，外部环路解块器304可基于对user_bnr的设置来开启或关闭。当user_bnr设置为0时，外部环路解块器304将关闭，因此强度将设置为0。当adaptive_filter_flag设置为例如1或2时，解码后的图片的所有边界将使用强度f(adj_qp，user_brn)(图5未示出)进行滤波，或者基于内部环路解块滤波器的状态来确定滤波强度。例如，若adaptive_filter_flag进行了设置，则滤波强度将依据loop_filter_flag和slice_boundary_info进行自适应设置。如果loop_filter_disable未进行设置，则内部环路解块滤波器将开启，因此只有分片边界将使用外部环路解块器304进行滤波。由于分片边界可能需要更强的滤波，所以强度值可设置为f(adj_qp，user_brn)+s，其中s为正常数值。若loop_filter_disable进行了设置，则内部环路解块滤波器将关闭，因此所有块边界将进行滤波，解码后的图片中的分片边界将使用比解码后的图片其它边界更强的滤波强度进行滤波。
图5中描述的自适应强度决策方法可应用任何多级解块滤波算法例如H.264之中。
本发明提供了一种为AVS1-P2进行自适应解块的方法和系统。依据本发明的各个实施例，AVS解码器106可接收来自AVS编码器104的编码比特流。收到的编码比特流可包括一个或多个嵌入的滤波参数，例如图片头204中的inner-loop-flag，分片头206中的slice_boundary_info，以及宏块208中的构建图片的多个宏块。AVS解码器106可用于对收到的比特流中的每一宏块进行解码，以构建/生成解码后的图片。每一解码后的图片将在后处理单元108中基于从收到的比特流中提取的滤波参数和从解码后的图片中算得的对应的量化参数来进行处理。解码后的图片的调整后的量化参数(adj_qp)可在AVS解码器106中计算。adj_qp可指示与对应的解码后的图片有关的噪声级别。adj_qp可基于输入解码后的图片的类型和图4中描述的输入解码后的图片的相关联的一个或多个参考图片来确定或计算。处理每一解码后的图片所需的滤波强度可基于从收到的比特流中提取的滤波参数adj_qp和图5所述的用户控制信息例如user_bnr来确定。每一解码后的图片可使用对应的确定的滤波强度通过外部环路解块滤波器108进行滤波。解码器的滤波强度可基于收到的滤波参数adj_qp和用户信息来进行自适应的调整，以降低解码后的图片的宏块边界效应和/分片边界效应。外部环路解块滤波器108a可基于确定的滤波强度级来开启或关闭。例如，外部环路解块滤波器108a可在确定的滤波强度级为非零或0时开启或关闭。
本发明的另一实施例可提供一种机器可读存储器，其中存储有计算机程序，该计算机程序包括用于处理数据的至少一个代码段，所述至少一个代码段可由机器执行，以控制机器执行本文描述的步骤以便为AVS1-P2进行自适应解块。
本发明可以通过硬件、软件，或者软、硬件结合来实现。本发明可以在至少一个计算机系统中以集中方式实现，或者由分布在几个互连的计算机系统中的不同部分以分散方式实现。任何可以实现所述方法的计算机系统或其它设备都是可适用的。常用软硬件的结合可以是安装有计算机程序的通用计算机系统，通过安装和执行所述程序控制计算机系统，使其按所述方法运行。在计算机系统中，利用处理器和存储单元来实现所述方法。
本发明的实施例可作为板级产品(board level product)来实施，如单个芯片、专用集成电路(ASIC)、或者作为单独的部件以不同的集成度与系统的其它部分一起集成在单个芯片上。系统的集成度主要取决于速度和成本考虑。现代处理器品种繁多，使得能够采用目前市场上可找到的处理器。选择性的，如果处理器可用作ASIC核心或逻辑模块，则目前市场上可找到的处理器可以作为ASIC器件的一部分，带有各种功能的固件。
本发明还可以通过计算机程序产品进行实施，所述程序包含能够实现本发明方法的全部特征，当其安装到计算机系统中时，通过运行，可以实现本发明的方法。本申请文件中的计算机程序所指的是：可以采用任何程序语言、代码或符号编写的一组指令的任何表达式，该指令组使系统具有信息处理能力，以直接实现特定功能，或在进行下述一个或两个步骤之后，a)转换成其它语言、代码或符号；b)以不同的格式再现，实现特定功能。
本发明是通过几个具体实施例进行说明的，本领域技术人员应当理解，在不脱离本发明范围的情况下，还可以对本发明进行各种变换及等同替代。另外，针对特定情形或具体情况，可以对本发明做各种修改，而不脱离本发明的范围。因此，本发明不局限于所公开的具体实施例，而应当包括落入本发明权利要求范围内的全部实施方式。

Claims (6)

1.一种处理数据的方法，其特征在于，包括，
接收比特流，对所述比特流进行预处理；
对所述预处理的比特流进行编码，所述编码后的比特流中包括一个或多个滤波参数和构成图片的多个宏块；
解码所述多个宏块，生成解码后的图片；
基于所述一个或多个滤波参数和从所述生成的解码后的图片中计算得出的一个或多个参数来处理所述解码后的图片；
为所述解码后的图片计算调整后的量化参数；
基于所述一个或多个滤波参数和/或所述调整后的量化参数和/或用户控制信息来为所述解码后的图片确定滤波强度；
调整所述确定的滤波强度以降低宏块的边界效应和/或分片的边界效应，并基于所述确定的滤波强度来开启或关闭对解码后的图片的滤波处理。
2.根据权利要求1所述的方法，其特征在于，所述比特流为AVSl-P2比特流或者H.264比特流。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括基于所述解码后的图片的图片类型确定所述调整后的量化参数。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括基于所述解码后的图片和所述解码后的图片的一个或多个参考图片来确定所述调整后的量化参数。
5.一种处理数据的系统，其特征在于，包括：
一个或多个处理器，用于接收比特流，并对所述比特流进行预处理；
所述一个或多个处理器，用于对所述预处理的比特流进行编码，所述编码后的比特流包括一个或多个滤波参数和构成图片的多个宏块；
所述一个或多个处理器用于解码所述多个宏块，生成解码后的图片；
所述一个或多个处理器用于基于所述一个或多个滤波参数和从所述生成的解码后的图片中计算得出的一个或多个参数来处理所述解码后的图片；
所述一个或多个处理器用于为所述解码后的图片计算调整后的量化参数；
所述一个或多个处理器用于基于所述一个或多个滤波参数和/或所述调整后的量化参数和/或用户控制信息来为所述解码后的图片确定滤波强度；
所述一个或多个处理器用于调整所述确定的滤波强度以降低宏块的边界效应和/或分片的边界效应，并基于所述确定的滤波强度来开启或关闭对解码后的图片的滤波处理。
6.根据权利要求5所述的系统，其特征在于，所述比特流为AVSl-P2比特流或者H.264比特流。
CN200910152369.3A 2008-06-20 2009-06-22 一种处理数据的方法及系统 Expired - Fee Related CN101610416B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US7456008P 2008-06-20 2008-06-20
US61/074,560 2008-06-20
US12/192,970 2008-08-15
US12/192,970 US20090316793A1 (en) 2008-06-20 2008-08-15 Method and system for adaptive deblocking for avs1-p2

Publications (2)

Publication Number Publication Date
CN101610416A CN101610416A (zh) 2009-12-23
CN101610416B true CN101610416B (zh) 2012-01-11

Family

ID=41171138

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910152369.3A Expired - Fee Related CN101610416B (zh) 2008-06-20 2009-06-22 一种处理数据的方法及系统

Country Status (4)

Country Link
US (1) US20090316793A1 (zh)
EP (1) EP2136563A3 (zh)
CN (1) CN101610416B (zh)
TW (1) TW201012228A (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5195250B2 (ja) * 2008-10-03 2013-05-08 ソニー株式会社 画像表示システム及び画像表示装置
JP5233897B2 (ja) * 2009-07-31 2013-07-10 ソニー株式会社 画像処理装置および方法
JP5344238B2 (ja) 2009-07-31 2013-11-20 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
CN102473240B (zh) * 2009-08-03 2015-11-25 摩托罗拉移动有限责任公司 编码视频内容的方法
JP5604825B2 (ja) * 2009-08-19 2014-10-15 ソニー株式会社 画像処理装置および方法
US8451896B2 (en) * 2009-10-19 2013-05-28 Hong Kong Applied Science and Technology Research Institute Company Limited Method and apparatus for adaptive quantization in digital video coding
KR101457396B1 (ko) 2010-01-14 2014-11-03 삼성전자주식회사 디블로킹 필터링을 이용한 비디오 부호화 방법과 그 장치, 및 디블로킹 필터링을 이용한 비디오 복호화 방법 및 그 장치
US9525884B2 (en) * 2010-11-02 2016-12-20 Hfi Innovation Inc. Method and apparatus of slice boundary filtering for high efficiency video coding
JP5748463B2 (ja) * 2010-12-02 2015-07-15 キヤノン株式会社 符号化装置およびプログラム
US9060174B2 (en) * 2010-12-28 2015-06-16 Fish Dive, Inc. Method and system for selectively breaking prediction in video coding
WO2012120840A1 (ja) * 2011-03-07 2012-09-13 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置および画像符号化装置
US8780996B2 (en) 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US8781004B1 (en) * 2011-04-07 2014-07-15 Google Inc. System and method for encoding video using variable loop filter
KR101215152B1 (ko) * 2011-04-21 2012-12-24 한양대학교 산학협력단 인루프 필터링을 적용한 예측 방법을 이용한 영상 부호화/복호화 방법 및 장치
US8885706B2 (en) 2011-09-16 2014-11-11 Google Inc. Apparatus and methodology for a video codec system with noise reduction capability
JP6048941B2 (ja) 2012-01-27 2016-12-27 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
BR112013027865B1 (pt) * 2012-02-03 2023-03-21 Hfi Innovation Inc Método e aparelho de processamento de filtro em loop para pixels de fronteira através de uma fronteira de bloco
US9131073B1 (en) 2012-03-02 2015-09-08 Google Inc. Motion estimation aided noise reduction
TWI667913B (zh) * 2012-04-06 2019-08-01 日商新力股份有限公司 Image processing device, image processing method, computer program, and recording medium
UA125468C2 (uk) 2012-04-13 2022-03-23 ДЖ.І. ВІДІЕУ КЕМПРЕШН, ЛЛСі Кодування картинки з малою затримкою
CN115442625A (zh) 2012-06-29 2022-12-06 Ge视频压缩有限责任公司 视频数据流、编码器、编码视频内容的方法以及解码器
US9344729B1 (en) 2012-07-11 2016-05-17 Google Inc. Selective prediction signal filtering
US9264661B2 (en) 2013-06-07 2016-02-16 Apple Inc. Adaptive post-processing for mobile video calling system
US10102613B2 (en) 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
JP6194427B2 (ja) * 2014-10-06 2017-09-06 テレフオンアクチーボラゲット エルエム エリクソン（パブル） 量子化パラメータのコーディング及び導出
HK1221373A2 (zh) * 2016-03-29 2017-05-26 萬維數碼有限公司 種提升視頻分辨率和視頻質量的方法、編碼器及解碼器
CN107896330B (zh) * 2017-11-29 2019-08-13 北京大学深圳研究生院 一种用于帧内和帧间预测的滤波方法
CN118042168A (zh) * 2018-03-29 2024-05-14 艾锐势有限责任公司 用于对hdr内容进行去方块的系统和方法
WO2021005349A1 (en) * 2019-07-05 2021-01-14 V-Nova International Ltd Quantization of residuals in video coding
WO2021122070A1 (en) * 2019-12-19 2021-06-24 Telefonaktiebolaget Lm Ericsson (Publ) Picture header prediction
US11245896B1 (en) * 2021-02-26 2022-02-08 Realtek Semiconductor Corporation Deblocking filter level decision method

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1694537A (zh) * 2004-04-29 2005-11-09 联发科技股份有限公司 活动图像专家组视讯译码器可适性去区块滤波装置及方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2154918C1 (ru) * 1998-08-01 2000-08-20 Самсунг Электроникс Ко., Лтд. Способ и устройство для цикл-фильтрации данных изображения
US7929610B2 (en) * 2001-03-26 2011-04-19 Sharp Kabushiki Kaisha Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding
JP4533081B2 (ja) * 2004-10-12 2010-08-25 キヤノン株式会社 画像符号化装置及びその方法
US7574060B2 (en) * 2004-11-22 2009-08-11 Broadcom Corporation Deblocker for postprocess deblocking
US7848408B2 (en) * 2005-01-28 2010-12-07 Broadcom Corporation Method and system for parameter generation for digital noise reduction based on bitstream properties
SG140508A1 (en) * 2006-08-31 2008-03-28 St Microelectronics Asia Multimode filter for de-blocking and de-ringing
US9961372B2 (en) * 2006-12-08 2018-05-01 Nxp Usa, Inc. Adaptive disabling of deblock filtering based on a content characteristic of video information
US20080267297A1 (en) * 2007-04-26 2008-10-30 Polycom, Inc. De-blocking filter arrangements
US8195001B2 (en) * 2008-04-09 2012-06-05 Intel Corporation In-loop adaptive wiener filter for video coding and decoding

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1694537A (zh) * 2004-04-29 2005-11-09 联发科技股份有限公司 活动图像专家组视讯译码器可适性去区块滤波装置及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Atul puri,etc..Video coding using the H.264/MPEG-4 AVC compression standard.《Signal Processing:Image Communication》.2004,第19卷(第9期),第800-824页、附图3,25. *

Also Published As

Publication number Publication date
TW201012228A (en) 2010-03-16
CN101610416A (zh) 2009-12-23
US20090316793A1 (en) 2009-12-24
EP2136563A3 (en) 2010-09-08
EP2136563A2 (en) 2009-12-23

Similar Documents

Publication Publication Date Title
CN101610416B (zh) 一种处理数据的方法及系统
CN105430398B (zh) 用于环内去伪影滤波的方法和设备
US9794597B2 (en) Methods and apparatus for deblocking filtering of non-local intra prediction
CN101711481B (zh) 使用预测数据精选进行视频编码的方法和装置
CN102742268B (zh) 视频编码和解码的自适应模版匹配预测的方法和装置
CN1973546B (zh) 用于高级视频编码的降低分辨率更新模式
US8340182B2 (en) Video decoding apparatus and video decoding method
US20200404275A1 (en) Methods and Apparatuses of Video Encoding or Decoding with Adaptive Quantization of Video Data
CN102428702B (zh) 用于针对视频编码和解码的改进量化舍入偏移调节的方法和设备
CN102918564B (zh) 具有变换选择的视频编码和解码的约束变换的方法和装置
KR102350436B1 (ko) 영역 기반 필터에 대해서 협력적 분할 부호화하는 방법 및 장치
CN102439975B (zh) 用于在基于稀疏性的去伪影滤波中响应于可变变换的滤波器参数的确定和选择的方法和设备
JP2002514023A (ja) 圧縮映像のブリージングアーチファクトを低減する方法および装置
CN102349298B (zh) 用于去伪像滤波的基于区域的滤波器参数选择的方法和装置
CN102196253B (zh) 一种帧类型自适应选择的视频编码方法及装置
US20120314966A1 (en) Image coding apparatus, image decoding apparatus, image coding method, image decoding method, and program
CN101860755A (zh) 用于台标字幕插入系统的解码方法及图像插入方法
US20160360236A1 (en) Method and Apparatus for Entropy Transcoding
CN113596483B (zh) 一种编码树单元的参数确定方法及系统
CN101217667B (zh) 四分之一像素插值方法及装置
CN113630599B (zh) 一种基于roi的视频码率控制方法及系统
WO2024119821A1 (zh) 视频数据处理方法、装置、存储介质、设备和程序产品
CN114270849A (zh) 具有色度缩放的亮度映射(lmcs)lut扩展和裁剪
Zhang et al. Performance study of error resilience with multiple reference frames in H. 264/AVC in conditions of low bit-rate

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20180502

Address after: Singapore Singapore

Patentee after: Avago Technologies Fiber IP Singapore Pte. Ltd.

Address before: Park Road, Irvine, California, USA, 16215, 92618-7013

Patentee before: Zyray Wireless Inc.

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120111

Termination date: 20180622