CN102577379B - 用于视频编码和译码中的嵌入量化参数调节的方法和装置 - Google Patents

用于视频编码和译码中的嵌入量化参数调节的方法和装置 Download PDF

Info

Publication number
CN102577379B
CN102577379B CN201080045061.XA CN201080045061A CN102577379B CN 102577379 B CN102577379 B CN 102577379B CN 201080045061 A CN201080045061 A CN 201080045061A CN 102577379 B CN102577379 B CN 102577379B
Authority
CN
China
Prior art keywords
quantization parameter
block
variance
quantization
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080045061.XA
Other languages
English (en)
Other versions
CN102577379A (zh
Inventor
吕小安
约珥·索
尹鹏
许茜
郑云飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
International Digital Madison Patent Holding SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN102577379A publication Critical patent/CN102577379A/zh
Application granted granted Critical
Publication of CN102577379B publication Critical patent/CN102577379B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/197—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including determination of the initial value of an encoding parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Abstract

提供了用于视频编码和译码中的嵌入量化参数调节的方法和装置。一种装置，包括：用于对图片中的至少一个块的图片数据进行编码的编码器(300)。被应用到通过对所述块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从至少对应于所述块的重建数据推导得出的。

Description

用于视频编码和译码中的嵌入量化参数调节的方法和装置
相关申请的交叉引用
本申请要求于2009年10月5日递交的美国临时申请序列号No.61/248,541(律师案件编号No.PU090143)的优先权，其全部内容通过引用被结合于此。
技术领域
本原理一般地涉及视频编码和译码，更具体地涉及用于视频编码和译码中的嵌入量化参数调节的方法和装置。
背景技术
大多数视频应用都寻求针对一组给定的比特率限制的最高可能的感知质量(perceptual quality)。例如，在诸如视频电话系统之类的低比特率应用中，视频编码器可以通过消除在视觉上更重要的感兴趣的区域上的强烈伪像来提供更高的质量。另一方面，在较高比特率的应用中，期望在图片中的任何地方都具有视觉无损的质量，并且视频编码器还需要实现透明的视觉质量。在高比特率的应用中获取透明视觉质量的一个挑战是保存细节，尤其是平滑区域的细节(其中，由于人类视觉系统的纹理遮蔽特征，平滑区域的细节损失比非平滑区域的细节损失更明显)。
增大比特率是用于提高质量的最直接的方法。当比特率给定时，编码器操纵它的比特分配模块，以将可用比特用在可以获得最大的视觉质量改善方面。在诸如DVD创作之类的非实时应用中，视频编码器可以利用可变比特率(VBR)设计，针对困难和容易的视频内容产生一贯的恒定质量。在这种应用中，可用比特被适当地分布到不同的视频段，以获取恒定的质量。相反，恒定比特率(CBR)系统向一个或者多个图片的间隔指派相同数目的比特而不管这些图片的编码难度如何，并且产生随视频内容变化的视觉质量。对于VBR和CBR编码系统，编码器可以根据图片内的感知模型来分配比特。人类感知的一个特性是纹理遮蔽(texture marking)，该特性解释了为什么人类的眼睛对平滑区域中的质量损失比纹理区域中的质量损失更敏感。为了获取较高的视觉质量，可以使用该特征来增大向平滑区域分配的比特数目。
视频编码器中的量化处理控制编码比特的数目和质量。通常通过调节量化参数(QP)来调节质量。量化参数可以包括量化步长、取整偏移(rounding offset)、以及比例变换矩阵。在当前的现有技术和现有标准中，量化参数值在比特流中被明确发送。编码器具有调谐量化参数并用信号向译码器发送量化参数的灵活性。然而，用信号发送量化参数会不利地导致开销成本。
提高感知质量的处理中的一个重要方面是保存精细的细节，诸如胶片颗粒和计算机生成的噪声等。这对于精细的细节损失很容易被注意到的平滑区域尤其重要。现有算法中的一种通用方法是以更精细的量化步长来编码这些平滑区域、或者包括平滑区域的视频片断。尽管对于横跨多个标准的本领域的当前状态是共同的，但是在以下的描述中我们将使用国际标准化组织/国际电工委员会(ISO/ICE)移动图片专家组-2(MPEG-2)标准参考软件测试模型版本5(以下称为“TM5”)来阐述怎样针对图片内的平滑区域获取更高的质量。
在TM5中，使用如下的原始像素值，从四个8×8的亮度帧组织的子块(n＝1，...，4)和四个亮度场组织的子块(n＝5，...，8)计算宏块(MB)j的空间活动性度量：
actj＝1+min(vblk1，vblk2，...vblk8) (1)
其中
以及
其中表示在第n个原始8×8块中的采样值。接着，如下对actj进行归一化：
其中avg_act是先前的经编码图片的actj的平均值。在第一图片中，avg_act被设置为400。接着，TM5如下获取mquantj：
mquantj＝Qj×N_actj (5)
其中，Qj是参考量化参数。mquantj的最终值被裁剪到范围[1...31]中并且被用于指示在编码期间的量化步长。
因此，在TM5量化机制中，具有较小方差的平滑宏块具有较小值的空间活动性度量actj和较小值的N_actj、以及由mquantj索引的更精细的量化步长。利用平滑宏块的更精细的量化，可以保存更精细的细节并且可以获取更高的感知质量。索引mquantj在比特流中被发送到译码器。
国际标准化组织/国际电工委员会(ISO/ICE)移动图片专家组-4(MPEG-4)部分10高级视频编码(AVC)标准/国际电信联盟，电信部(ITU-T)H.264建议(以下为“MPEG-4AVC标准”)中的语法也允许针对每一图片和宏块的量化参数有所不同。量化参数的值为整数并且在0--51的范围内。可以从语法元素pic_init_qp_minus26推导得出每个切片(slice)的初始值。当对非零值的slice_qp_delta进行译码时在切片层对初始值进行修改，并且当对非零值的mb_qp_delta进行译码时在宏块层对初始值进行修改。
精确地，切片的初始量化参数被如下计算：
SliceQPY＝26+pic_init_qp_minus26+slice_qp_delta (6)
在宏块层上，量化参数的值被如下推导得出：
QPY＝QPY，PREV+mb_qp_delta (7)
其中，QPY，PREV是当前切片中按照译码顺序的前一宏块的量化参数。
参考图1，通过参考数字100一般地指示出了用于在视频编码器中改善感知质量的一般量化调节方法。方法100包括开始块105，该开始块105将控制传递到功能块110。功能块110分析输入视频内容，并且将控制传递到循环限制块115。循环限制块115使用具有从1到宏块(MB)的#的范围的变量i在图片中的每一宏块上开始循环，并将控制传递到功能块120。功能块120调节当前宏块i的量化参数，并且将控制传递到功能块125。功能块125对量化参数和宏块i进行编码，并且将控制传递到循环限制块130。循环限制块130结束每一宏块上的循环，并且将控制传递到结束块199。因此，在方法100中，量化参数调节被明确地用信号进行传送。至于功能块120，基于宏块i的内容和/或先前的编码结果对宏块i的量化参数进行调节。例如，平滑宏块将降低量化参数以提高感知质量。在另一示例中，如果先前的宏块使用比指派的比特更多的比特，则当前宏块将增大量化参数以消耗比原始指派的比特更少的比特。方法100在图片中的全部宏块被编码后结束。
参考图2，通过参考数字200一般地指示出了用于在视频译码器中对宏块和量化参数进行译码的一般方法。该方法200包括开始块205，该开始块205将控制传递到循环限制块210。循环限制块210使用具有从1到宏块(MB)的#的范围的变量i在图片中的每一宏块上开始循环，并将控制传递到功能块215。功能块215对量化参数和当前宏块i进行译码，并且将控制传递到循环限制块220。循环限制块220结束每一宏块上的循环，并且将控制传递到结束块299。
总之，如前所述，现有的标准支持在编码器中调节图片级和宏块级的量化参数，以实现高感知质量。量化参数值被绝对地或者是差分地编码从而在比特流中被明确发送。该编码器具有调谐量化参数并且用信号向译码器发送量化参数的灵活性。然而，明确地用信号发送量化参数会不利地导致开销成本。
发明内容
通过本原理解决了现有技术的这些以及其它缺点和劣势，该原理针对用于视频编码和译码中的嵌入量化参数调节的方法和装置。
依据本原理的一个方面，提供了一种装置。该装置包括用于对图片中的至少一个块的图片数据进行编码的编码器。被应用到通过对该块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从至少对应于该块的重建数据推导得出的。
依据本原理的另一方面，提供了一种视频编码器中的方法。该方法包括对图片中的至少一个块的图片数据进行编码。被应用到通过对该块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从至少对应于该块的重建数据推导得出的。
依据本原理的另一方面，提供了一种装置。该装置包括用于对图片中的至少一个块的图片数据进行译码的译码器。被应用到通过对该块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从至少对应于该块的重建数据推导得出的。
依据本原理的另一方面，提供了一种视频译码器中的方法。该方法包括对图片中的至少一个块的图片数据进行译码。被应用到通过对该块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从至少对应于该块的重建数据推导得出的。
结合附图，通过示例性实施例的以下详细描述，本原理的这些和其它方面、特征和优势将变得显而易见。
附图说明
依据以下的示例性示图，可以更好地理解本原理，其中：
图1是示出依据现有技术的用于在视频编码器中提高感知质量的一般量化调整方法的流程图；
图2是示出依据现有技术的用于在视频译码器中对量化参数和宏块进行译码的一般方法的流程图；
图3是示出依据本原理的实施例的应用本原理的示例性视频编码器的框图；
图4是示出依据本原理的实施例的应用本原理的示例性视频译码器的框图；
图5是示出依据本原理的实施例的用于在比特流中嵌入量化参数图的的示例性方法的流程图；
图6是示出依据本原理的实施例的用于对嵌入的量化参数图进行译码的示例性方法的流程图；
图7是示出依据本原理的实施例的用于利用嵌入的量化参数图对明确的量化参数调节进行编码的示例性方法的流程图；
图8是示出依据本原理的实施例的用于利用嵌入的量化参数图对明确的量化参数调节进行译码的示例性方法的流程图；
图9是示出依据本原理的实施例的用于在视频编码器中指派量化参数的示例性方法的流程图；
图10是示出依据本原理的实施例的用于在视频译码器中计算量化参数的示例性方法的流程图；
图11是示出依据本原理的实施例的用于在视频编码器中指派量化参数的示例性方法的流程图；以及
图12是示出依据本原理的实施例的用于在视频译码器中计算量化参数的示例性方法的流程图。
具体实施方式
本原理针对用于视频编码和译码中的嵌入量化参数调节的方法和装置。
本描述对本原理进行了举例说明。因而可以理解，本领域技术人员将可以设计虽然在这里没有被明确地描述或者示出、但是体现本原理并且被包括在本原理的精神和范围之内的各种配置。
这里陈述的全部示例和条件性语句出于教学目的，用于帮助读者理解本原理和一个或多个发明人为进一步推进现有技术所贡献的概念，并且本原理应被理解为不限于具体陈述的示例和条件。
此外，描述本原理的原理、方面、特征和实施例、以及它们的具体示例的全部陈述用于覆盖本原理的结构和功能等价物。另外，希望这些等价物包括当前已知的等价物以及将来开发的等价物(即，所开发的执行同样功能的任何元件，而不管其结构如何)。
因此，例如，本领域技术人员将明白，这里呈现的框图表示体现本原理的说明性电路的概念性视图。类似地，将明白任何流程表、流程图、状态转换图、伪代码等可以表示多种处理，该多种处理可以被大体上表示在计算机可读介质中并且由计算机或者处理器执行，无论该计算机或者处理器是否被精确地示出。
可以通过使用专用硬件以及能够执行与适当的软件相关联的软件的硬件，来提供图中示出的各种元件的功能。当由处理器提供时，这些功能可以由单个专用处理器、单个共享的处理器、或者其中的一些被共享的多个单独的处理器提供。此外，术语“处理器”或者“控制器”的明确使用不应当被理解为排他地指代能够执行软件的硬件，并且可以暗含而不限制地包括数字信号处理器(“DSP”)硬件、用于存储软件的只读存储器(“ROM”)、随机访问存储器(“RAM”)、以及非易失存储装置。
还可以包括传统的和/或定制的其它硬件。类似地，在图中示出的任何开关都仅仅是概念上的。可以通过程序逻辑的操作、通过专用逻辑、通过程序控制和专用逻辑的相互作用、或者甚至是手动地执行他们的功能。如通过上下文可以更具体地理解的，实施人可以选择特定技术。
在这里的权利要求中，被表示为用于执行指定功能的装置的任何元件包括执行该功能的任何方式，该元件例如包括：a)执行该功能的电路元件的组合、或者b)任何形式的包括固件、微代码等的与用于运行软件以执行该功能的适当的电子电路组合在一起的软件。如这些权利要求限定的本原理存在以下事实：由所陈述的各种装置提供的功能被以权利要求所要求的方式组合一起。因而可以认为，可以提供那些功能的任何装置都等同于在这里示出的那些装置。
本说明书中对于本原理的“一个实施例”或者“实施例”、以及它们的其他变形的引用，意味着结合该实施例描述的特定特征、结构、特性等被包括在本原理的至少一个实施例中。因而，出现在说明中的多种地方的短语“在一个实施例中”或“在实施例中”、以及任何其它的变形的出现不一定全部指同一实施例。
应明白，以下“/”、“和/或”、以及“其中的至少一个”(例如，在“A/B”、“A和/或B”、以及“A和B中的至少一个”的情况中)的使用意图包括仅第一个被列出的选项(A)的选择，或者仅第二个被列出的选项(B)的选择，或者两个选项(A和B)的选择。作为另一示例，在“A、B、和/或C”以及“A、B、和C中的至少一个”的情况中，这样的短语意图包括仅第一个被列出的选项(A)的选择，或者仅第二个被列出的选项(B)的选择，或者仅第三个被列出的选项(C)的选择，或者仅第一个和第二个被列出的选项(A和B)的选择，或者仅第一个和第三个被列出的选项(A和C)的选择，或者仅第二个和第三个被列出的选项(B和C)的选择，或者全部的三个选项(A和B和C)的选择。如本领域或者相关领域的普通技术人员容易明白地那样，对于所列出的许多项目，这可以被扩展。
同样，如在这里所使用的，单词“图片”和“图像”可以被相互交换地使用，并且被用来指代来自视频序列的静止图像或者图片。如已知的，图片可以为帧或者场。
另外，如在这里所使用的，单词“用信号发送”指代向相应的译码器指示某内容。例如，编码器为了使译码器知道哪一个或多个特定的量化参数被用在了编码器侧，可以用信号发送嵌入的量化参数图中的一个或者多个量化参数。这样，相同的量化参数可以被用在译码器侧和编码器侧上。因此，例如，编码器可以在发送给译码器的比特流中嵌入量化参数图，从而使得译码器可以使用与编码器同样的量化参数(图中指定的量化参数)。应明白，用信号发送可以以多种方法实现。例如，一个或者多个语法元素、标志等可以被用于用信号将信息发送到相应的译码器。
另外，应明白，出于说明的目的主要针对宏块描述了本文中描述的量化参数调节处理，本原理的量化参数调节处理可以被应用到子宏块、宏块、宏块的群组、或者任何的编码单元中的任意一种。因此，如在这里所使用的，单词“块”可以指代宏块或者子宏块。另外，应明白可以基于包括但不限于亮度和/或色度分量的各种准则来调节量化参数。
参考图3，通过参考数字300一般地指示出了可以应用本原理的示例性视频编码器。视频编码器300包括具有与组合器385的非反相输入信号通信的输出的帧排序缓冲器310。组合器385的输出以信号通信的方式与变换器和量化器325的第一输入连接。变换器和量化器325的输出以信号通信的方式与熵编码器345的第一输入和反变换器和反量化器350的第一输入连接。熵编码器345的输出以信号通信的方式与组合器390的第一非反相输入连接。组合器390的输出以信号通信的方式与输出缓冲器335的第一输入连接。
编码器控制器305的第一输出以信号通信的方式与帧排序缓冲器310的第二输入、反变换器和反量化器350的第二输入、图片类型判定模块315的输入、宏块类型(MB类型)判定模块320的第一输入、内部预测模块360的第二输入、去块滤波器365的第二输入、运动补偿器370的第一输入、运动估计器375的第一输入、以及参考图片缓冲器380的第二输入连接。
编码器控制器305的第二输出以信号通信的方式与辅助增强信息(SEI)插入器330的第一输入、变换器和量化器325的第二输入、熵编码器345的第二输入、输出缓冲器335的第二输入、以及序列参数集(SPS)和图片参数集(PPS)插入器340的输入连接。
SEI插入器330的输出以信号通信的方式与组合器390的第二非反相输入连接。
图片类型判定模块315的第一输出以信号通信的方式与帧排序缓冲器310的第三输入连接。图片类型判定模块315的第二输出以信号通信的方式与宏块类型判定模块320的第二输入连接。
序列参数集(SPS)和图片参数集(PPS)插入器340的输出以信号通信的方式与组合器390的第三非反相输入连接。
反变换器和反量化器350的输出以信号通信的方式与组合器319的第一非反相输入连接。组合器319的输出以信号通信的方式与内部预测模块360的第一输入和去块滤波器365的第一输入连接。去块滤波器365的输出以信号通信的方式与参考图片缓冲器380的第一输入连接。参考图片缓冲器380的输出以信号通信的方式与运动估计器375的第二输入和运动补偿器370的第三输入连接。运动估计器375的第一输出以信号通信的方式与运动补偿器370的第二输入连接。运动估计器375的第二输出以信号通信的方式与熵编码器345的第三输入连接。
运动补偿器370的输出以信号通信的方式与开关397的第一输入连接。内部预测模块360的输出以信号通信的方式与开关397的第二输入连接。宏块类型判定模块320的输出以信号通信的方式与开关397的第三输入连接。开关397的第三输入确定开关的“数据”输入(相对于控制输入(即，第三输入))是否将由运动补偿器370或者内部预测模块360提供。开关397的输出以信号通信的方式与组合器319的第二非反相输入和组合器385的反相输入连接。
帧排序缓冲器310的第一输入和编码器控制器305的输入可被用作编码器100的输入，用于接收输入图片。此外，辅助增强信息(SEI)插入器330的第二输入可被用作编码器300的输入，用于接收元数据。输出缓冲器335的输出可被用作编码器300的输出，用于输出比特流。
参考图4，通过参考数字400一般地指示出了可以应用本原理的示例性视频译码器。视频译码器400包括输入缓冲器410，输入缓冲器410具有以信号通信的方式与熵译码器445的第一输入连接的输出。熵译码器445的第一输出以信号通信的方式与反变换器和反量化器450的第一输入连接。反变换器和反量化器450的输出以信号通信的方式与组合器425的第二非反相输入连接。组合器425的输出以信号通信的方式与去块滤波器465的第二输入以及内部预测模块460的第一输入连接。去块滤波器465的第二输出以信号通信的方式与参考图片缓冲器480的第一输入连接。参考图片缓冲器480的输出以信号通信的方式与运动补偿器470的第二输入连接。
熵译码器445的第二输出以信号通信的方式与运动补偿器470的第三输入、去块滤波器465的第一输入、以及内部预测器460的第三输入连接。熵译码器445的第三输出以信号通信的方式与译码器控制器405的输入连接。译码器控制器405的第一输出以信号通信的方式与熵译码器445的第二输入连接。译码器控制器405的第二输出以信号通信的方式与反变换器和反量化器450的第二输入连接。译码器控制器405的第三输出以信号通信的方式与去块滤波器465的第三输入连接。译码器控制器405的第四输出以信号通信的方式与内部预测模块460的第二输入、运动补偿器470的第一输入、以及参考图片缓冲器480的第二输入连接。
运动补偿器470的输出以信号通信的方式与开关497的第一输入连接。内部预测模块460的输出以信号通信的方式与开关497的第二输入连接。开关497的输出以信号通信的方式与组合器425的第一非反相输入连接。
输入缓冲器410的输入可被用作译码器400的输入，用于接收输入比特流。去块滤波器465的第一输出可被用作译码器400的输出，用于输出输出图片。
如以上指出的，本原理针对用于视频编码和译码中的嵌入量化参数调节的方法和装置。例如，在一个或者多个实施例中，我们公开了用于在编码器处将量化参数嵌入在比特流中，并且在译码器处使用先前被译码的内容来重建量化参数的方法和装置。在不明确地发送量化参数信息的情况下，在编码器和译码器上使用相同的量化参数调节处理。这导致了重建视频中的感知质量的改善，并且几乎没有或者没有块级量化参数开销。同样，除了前述的现有技术使用的明确的块级量化参数之外，依据本原理的嵌入经调节的块级量化参数可以提供额外的量化参数调节灵活性。
嵌入量化参数调节
如先前陈述的，为了减少用信号发送量化参数信息的开销成本，依据本原理我们提出将量化参数嵌入在比特流中。因此，区分于其中量化参数被明确地输送到译码器的本技术的当前状态，依据本原理在编码器上和译码上使用同样的方法从重建数据暗含地推导得出量化参数。另外，在一个或者多个实施例中，可以结合现有技术的明确地用信号发送的量化参数，使用依据本原理的经调节和嵌入的量化参数来获取对于本领域或者相关领域的普通技术人员显而易见的其它优势中的进一步的灵活性。
实施例1
为了提高感知质量，需要基于图片的全局特征和单独块的局部特征来调节量化参数。如在这里使用的，短语“全局特征”指代从图片内的所有块推导得出的特征。例如，全局特征可以是但不限于图片的平均像素值或者平均方差。此外，如在这里使用的，短语“局部特征”指代宏块的特征。例如，局部特征可以是但不限于宏块的方差或者平均像素值。以下描述怎样计算图片的全局特征和单独块的局部特征的示例。另外，如以上指出的，虽然在这里出于说明的目的针对宏块描述了本原理的示例，但是依据本原理诸如子宏块、宏块组之类的其它编码单元也可以被使用，同时保持本原理的精神。有利地，本原理允许质量损耗更容易被注意到的区域的质量提高，并且可以可选地允许剩余区域(或它们的一部分)的质量降低以节省比特。
参考图5，通过参考数字500一般地指示出了用于将量化参数图嵌入在比特流中的示例性方法。方法500包括开始块505，该开始块505将控制传递到功能块510。功能块510分析输入视频内容，发送从在前的分析确定的全局特征信息，并且将控制传递到循环限制块515。循环限制块515使用具有从1到宏块(MB)的#的范围的变量i在图片中的每一宏块上开始循环，并将控制传递到功能块520。功能块520使用全局特征信息推导得出当前宏块i的量化参数，并将控制传递到功能块525。功能块525使用推导得出的量化参数对当前宏块i进行编码，并将控制传递到循环限制块530。循环限制块530结束在每一宏块上的循环，并且将控制传递到结束块599。
参考图6，通过参考数字600一般地指示出了用于对嵌入的量化参数图进行译码的示例性方法。方法600包括开始块605，开始块605将控制传递到功能块610。功能块610从所接收的比特流译码出全局特征信息，并且将控制传递到循环限制块615。循环限制块615使用具有从1到宏块(MB)的#的范围的变量i在图片中的每一宏块上开始循环，并将控制传递到功能块620。功能块620推导得出当前宏块i的量化参数，并将控制传递到功能块625。功能块625使用推导得出的量化参数对当前宏块进行译码，并将控制传递到循环限制块630。循环限制块630结束在每一宏块上的循环，并且将控制传递到结束块699。
实施例2
为了在量化参数调节中提供进一步的灵活性，描述了支持除了嵌入的QP以外的宏块级的明确的量化参数调节的实施例。
参考图7，通过参考数字700一般地指示出了用于利用嵌入的量化参数图对明确的量化参数调节进行编码的示例性方法。方法700包括开始块705，开始块705将控制传递到功能块710。功能块710分析输入视频内容，发送全局特征信息，并且将控制传递到循环限制块715。循环限制块715使用具有从1到宏块(MB)的#的范围的变量i在图片中的每一宏块上开始循环，并将控制传递到功能块720。功能块720推导得出当前宏块i的量化参数QP0，并将控制传递到功能块725。功能块725调节当前宏块i的量化参数偏移QPd，并将控制传递到功能块730。功能块730对量化参数偏移QPd和宏块i进行编码，并将控制传递到循环限制块735。循环限制块735结束在每一宏块上的循环，并且将控制传递到结束块799。因此，依据方法700，在通过功能块720推导得出宏块的量化参数QP0之后，功能块725可以进一步将宏块级量化参数调谐量化参数偏移QPd。至于功能块730，在量化参数QP0+QPd上对宏块进行编码，并且对偏移QPd进行编码。
参考图8，通过参考数字800一般地指示出了用于利用嵌入的量化参数图对明确的量化参数调节进行译码的示例性方法。方法800包括开始块805，开始块805将控制传递到功能块810。功能块810对全局特征信息进行译码，并将控制传递到循环限制块815。循环限制块815使用具有从1到宏块(MB)的#的范围的变量i在图片中的每一宏块上开始循环，并将控制传递到功能块820。功能块820对量化参数偏移QPd进行译码，并且推导得出当前宏块i的量化参数QP0，并将控制传递到功能块825。功能块825对宏块i进行译码，并将控制传递到循环限制块830。循环限制块835结束在每一宏块上的循环，并且将控制传递到结束块899。
QP推导
下面，我们描述推导量化参数的方法。对于具体的方法，为了同步在编码器和译码器上使用同一方法。
在感兴趣的区域上提供高感知质量对整个感知质量具有显著影响。所以，量化参数调节的一般准则是将较低的量化参数指派给感兴趣的区域以提高感知质量，并且将较高的量化参数指派给其它区域以减少比特数目。特别地，我们说明怎样使用以方差测量的图片的空间活动性来调节量化参数。对于每个块，可以使用该块中的全部像素或者它们的子集来计算方差。
首先，我们分析图片的全局特征。在一个实施例中，通过平均图片中的所有块上的方差来计算平均空间活动性(avg_var)。当avg_var大时，整个图片是有纹理的，否则是平滑的。信息avg_var需要被编码和并在比特流中被发送。为了节省开销，可以使用avg_var的降级版本(downscaled version)。
对于每一宏块，我们基于avg_var和局部方差(var)来推导量化参数。因为在编码器和译码器上都使用局部方差，所以可以仅使用先前重建的信息。在一个实施例中，我们使用诸如左、上、和/或左上块之类的相邻块的平均方差。在另一实施例中，我们使用相邻块的最小方差。在另一实施例中，使用方差的中值。
在得到全局的和局部特征后，我们如下推导量化参数：
其中，α是编译器和译码器都应知道的参数，QPpic是图片的基础量化参数。α控制QP方差依赖在var和avg_var之间的比率var/avg_var的程度。在一个实施例中，为了控制量化参数方差的动态范围，我们将量化参数限制到[QPpic-L，QPpic+U]，其中L和U分别是下阈值和上阈值，编译器和译码器都应知道L和U，并且L和U应该相同。等式(8)中的公式将较小的量化参数指派给平滑的并且具有小方差的宏块。
为了简化等式(8)中的计算，可以使用查询表。例如，我们使用如下的伪代码如下推导量化参数：
其中，βi和Δi是编译器和译码器都应知道的参数。在该示例中，我们使用三个不同的量化参数等级。然而，应明白本原理不限于此，并且在保持本原理的精神的条件下其他数目的等级可以被用于该方法。
参考图9，通过参考数字900一般地指示出了用于在视频编码器中指派量化参数的示例性方法。方法900包括开始块905，开始块905将控制传递到功能块910。功能块910分析图片的全局特征，并将控制传递到循环限制块915。循环限制块915使用具有从1到宏块的数目(#)的范围的变量i(例如，在当前图片中)开始循环，并将控制传递到功能块920。功能块920检测当前宏块的重要性，并将控制传递到功能块925。功能块925如下地指派量化参数，并将控制传递到循环限制块930：宏块越重要，指派给它的量化参数越低，其中量化参数可以是量化步长、取整偏移、和/或比例变换矩阵。循环限制块930结束循环，并且将控制传递到结束块999。
参考图10，通过参考数字1000一般地指示出了用于在视频译码器中计算量化参数的示例性方法。方法1000包括开始块1005，开始块1005将控制传递到功能块1010。功能块1010对图片的全局特征进行译码，并将控制传递到循环限制块1015。循环限制块1015使用具有从1到宏块的数目(#)的范围的变量i(例如，在当前图片中)开始循环，并将控制传递到功能块1020。功能块1020检测当前宏块的重要性，并将控制传递到功能块1025。功能块1025使用与编码器中同样的规则计算量化参数，并将控制传递到循环限制块1030。一般来说，宏块越重要，量化参数越低，其中量化参数可以是量化步长、取整偏移、和/或比例变换矩阵。循环限制块1030结束循环，并且将控制传递到结束块1099。
参考图11，通过参考数字1100一般地指示出了用于在视频编码器中指派量化参数的示例性方法。方法1100包括开始块1105，开始块1105将控制传递到功能块1110。功能块1110使用全部块计算平均方差(avg_var)，并将控制传递到循环限制块1115。循环限制块1115使用具有从1到宏块的数目(#)的范围的变量i(例如，在当前图片中)开始循环，并将控制传递到功能块1120。功能块1120从相邻块计算方差(其中，该方差可以为但不限于相邻块的方差的平均值、最小值或者中值)，并将控制传递到功能块1125。功能块1125基于等式(8)或者等式(9)计算量化参数，并将控制传递到循环限制块1130。循环限制块1130结束循环，并且将控制传递到结束块1199。
参考图12，通过参考数字1200一般地指示出了用于在视频译码器中计算量化参数的示例性方法。方法1200包括开始块1205，开始块1205将控制传递到功能块1210。功能块1210对平均方差(avg_var)进行译码，并将控制传递到循环限制块1215。循环限制块1215使用具有从1到宏块的数目(#)的范围的变量i(例如，在当前图片中)开始循环，并将控制传递到功能块1220。功能块1220从相邻块计算方差(其中，该方差可以为但不限于相邻块的方差的平均值、最小值或者中值)，并将控制传递到功能块1225。同样的方差计算方法被用在编码器中。功能块1225基于等式(8)或者等式(9)计算量化参数，并将控制传递到循环限制块1230。循环限制块1230结束循环，并且将控制传递到结束块1299。
语法
为了同步编码器和译码器，在译码器上应当已知全局特征、公式、查询表、和推导过程中它们的相关参数。
使用等式(9)中描述的方法作为示例，我们描述怎样设计语法以应用本原理。语法元素被用来指定嵌入的量化参数是否被使用。语法元素可以被指定在图片级或者序列级。应当在图片级语法中指定图片的全局特征avg_var。表1示出了依据本原理的实施例的图片参数集中的语法示例。
表1
pic_parameter_set_rbsp(){ C 描述符
...
embedded_QPmap_flag 0 u(1)
if(embedded_QPmap_flag){
avg_var u(v)
for(i＝0；i＜N；i++)
beta[i] 0 u(v)
delta[i] 0 u(v)
}
}
...
}
表1中的一些语法元素的语义如下：
Embedded_QPmap_flag等于1指示，在图片参数集中存在嵌入的量化参数。Embedded_QPmap_flag等于0指示，在图片参数集中不存在嵌入的量化参数。
Avg_var指示图片的平均方差的值。
Beta_i指示等式(9)中的参数。
Delta_i指示等式(9)中的QP偏移。
现在将给出本发明的许多伴随的优势/特征的描述，其中以上已经提及它们中的一些。例如，一个优势/特征是具有用于对图片中的至少一个块的图片数据进行编码的编码器的装置。被应用到通过对该块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从至少对应于该块的重建数据推导得出的。
另一个优势/特征是具有上述编码器的装置，其中，响应于公式、查找表、图片的全局特征和该块的局部特征、方差，该块和图片中的至少一个的亮度特征、以及该块和图片中的至少一个的色度特征中的至少一个，从重建数据推导量化参数的处理被执行。
另一个优势/特征是具有上述编码器的装置，其中，响应于编码器和相应的译码器两者都使用的已知公式，从重建数据推导量化参数的处理被执行。
另一个优势/特征是具有上述编码器的装置，其中，响应于至少一个公式，从重建数据推导量化参数的处理被执行，其中至少一个公式、至少一个公式的索引、以及与索引和至少一个公式中的至少一个相关联的参数被明确地包括在比特流中。
另外，另一个优势/特征是具有上述编码器的装置，其中，响应于图片的全局特征和该块的局部特征，从重建数据推导量化参数的处理被执行，其中图片的全局特征是以方差为基础的。
另外，另一个优势/特征是具有上述编码器的装置，其中，除了默认的量化取整偏移外，另一量化偏移被支持用于包括至少一个块的图片中的每个块，从而使得默认的量化偏移被明确地用信号进行发送，并且其它量化偏移被暗含地用信号进行发送。
另外，另一个优势/特征是具有上述编码器的装置，其中，量化参数包括量化步长、量化取整偏移、以及量化比例变换矩阵中的至少一个。
基于本文中的教导，相关领域的普通技术人员可以容易地确定本原理的这些和其它特征和优势。应理解可以以硬件、软件、固件、专用处理器、或者它们的组合的多种形式来实现本原理的教导。
更优选地，本原理的教导可以被实现为硬件和软件的组合。此外，软件可以被实现为被有形地包括在程序存储单元上的应用程序。可以将该应用程序上载到包括任意合适的架构的机器上，或者可以通过包括任意合适的架构的机器执行该应用程序。优选地，在具有诸如一个或者多个中央处理器(“CPU”)、随机访问存储器(“RAM”)、以及输入/输出(“I/O”)接口之类的硬件的计算机平台上实现该机器。该计算机平台也可以包括操作系统和微指令代码。这里描述的各种处理和功能可以为微指令代码的一部分或者为应用程序的一部分，或者可以为它们的任何组合(其可以由CPU执行)。另外，可以将诸如附加的数据存储单元和打印单元之类的多种其它外围单元连接到计算机平台。
还应理解，因为可以优选地以软件来实现在附图中描绘的构成系统组件和方法中的一些，所以在系统组件或者处理功能块之间的实际连接可以依据对本原理进行编程的方式而不同。鉴于这里的教导，相关领域的普通技术人员将可以预见本原理的这些和类似的实施方式或者配置。
虽然在这里已经参考附图描述了说明性的实施例，但是应理解本原理不限制于那些精确的实施例，并且在不背离本原理的范围或者精神的情况下，相关领域的普通技术人员可以在这里实现多种变化和修改。全部这些变化和修改都被包括在如在所附权利要求中陈述的本原理的范围之内。

Claims (21)

1.一种视频编码器中的装置，包括：
用于对图片中的一个块的图片数据进行编码的编码器(300)，其中，被应用到通过对所述块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从自所述图片的在前的分析确定的全局特征信息和所述块的左、上、和/或左上的相邻块的局部重建数据的平均方差推导得出的；以及
其中所述编码器和译码器都知道的参数控制量化参数方差依赖在局部方差和全局方差之间的比率的程度。
2.根据权利要求1所述的装置，其中，响应于从包括以下内容的群组中选择的至少一项内容，从所述重建数据推导所述量化参数的处理被执行：
公式，
查找表，
所述全局特征信息和所述块的局部重建数据的方差，
方差，
所述块的亮度特征，
所述图片的亮度特征，
所述块的色度特征，以及
所述图片的色度特征。
3.根据权利要求1所述的装置，其中，响应于所述编码器和相应的译码器两者所使用的已知公式，从所述重建数据推导所述量化参数的处理被执行。
4.根据权利要求1所述的装置，其中，响应于至少一个公式，从所述重建数据推导所述量化参数的处理被执行，其中，所述至少一个公式、所述至少一个公式的索引、以及与所述索引和所述至少一个公式中的至少一项相关联的参数被明确地包括在比特流中。
5.根据权利要求1所述的装置，其中，响应于所述全局特征信息和所述块的局部重建数据的方差，从所述重建数据推导所述量化参数的处理被执行，其中所述全局特征信息是以方差为基础的。
6.根据权利要求1所述的装置，其中，除了默认的量化取整偏移以外，第二量化偏移被支持用于所述图片中的多个块，从而使得所述默认的量化取整偏移被明确地用信号进行发送，并且所述第二量化偏移被暗含地用信号进行发送。
7.根据权利要求1所述的装置，其中，所述量化参数包括量化步长、量化取整偏移、以及量化比例变换矩阵中的至少一个。
8.一种视频编码器中的方法，包括：
对图片中的一个块的图片数据进行编码，其中，被应用到通过对所述块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从自所述图片的在前的分析确定的全局特征信息和所述块的左、上、和/或左上的相邻块的局部重建数据的平均方差推导得出的(520，525，720，730)；以及
其中所述编码器和译码器都知道的参数控制量化参数方差依赖在局部方差和全局方差之间的比率的程度。
9.根据权利要求8所述的方法，其中，响应于从包括以下内容的群组选择的至少一项内容，从所述重建数据推导所述量化参数的处理被执行(520，720，1125)：
公式，
查找表，
所述全局特征信息和所述块的局部重建数据的方差，
方差，
所述块的亮度特征，
所述图片的亮度特征，
所述块的色度特征，以及
所述图片的色度特征。
10.根据权利要求8所述的方法，其中，响应于所述编码器和相应的译码器两者所使用的已知公式，从所述重建数据推导所述量化参数的处理被执行(1125)。
11.根据权利要求8所述的方法，其中，响应于至少一个公式，从所述重建数据推导所述量化参数的处理被执行，其中，所述至少一个公式、所述至少一个公式的索引、以及与所述索引和所述至少一个公式中的至少一者相关联的参数被明确地包括在比特流中(1025)。
12.根据权利要求8所述的方法，其中，响应于所述全局特征信息和所述块的局部重建数据的方差，从所述重建数据推导所述量化参数的处理被执行，其中所述全局特征信息是以方差为基础的(1120)。
13.根据权利要求8所述的方法，其中，除了默认的量化取整偏移以外，第二量化偏移被支持用于所述图片中的多个块，从而使得所述默认的量化取整偏移被明确地用信号进行发送，并且所述第二量化偏移被暗含地用信号进行发送(720，725)。
14.根据权利要求8所述的方法，其中，所述量化参数包括量化步长、量化取整偏移、以及量化比例变换矩阵中的至少一个(925)。
15.一种视频译码器中的方法，包括：
对图片中的一个块的图片数据进行译码，其中，被应用到通过对所述块的原始版本和至少一个参考块之间的差值进行变换而获取的一个或者多个变换系数的量化参数是从所接收的比特流中的并且自所述图片确定的全局特征信息和所述块的左、上、和/或左上的相邻块的局部重建数据的平均方差推导得出的(620，625，820，825)；以及
其中编码器和所述视频译码器都知道的参数控制量化参数方差依赖在局部方差和全局方差之间的比率的程度。
16.根据权利要求15所述的方法，其中，响应于从包括以下内容的群组选择的至少一项内容，从所述重建数据推导所述量化参数的处理被执行(620，820)：
公式，
查找表，
所述全局特征信息和所述块的局部重建数据的方差，
方差，
所述块的亮度特征，
所述图片的亮度特征，
所述块的色度特征，以及
所述图片的色度特征。
17.根据权利要求15所述的方法，其中，响应于所述编码器和相应的译码器两者所使用的已知公式，从所述重建数据推导所述量化参数的处理被执行(1225)。
18.根据权利要求15所述的方法，其中，响应于至少一个公式，从所述重建数据推导所述量化参数的处理被执行，其中，所述至少一个公式、所述至少一个公式的索引、以及与所述索引和所述至少一个公式中的至少一者相关联的参数被明确地包括在比特流中(1225)。
19.根据权利要求15所述的方法，其中，响应于所述全局特征信息和所述块的局部重建数据的方差，从所述重建数据推导所述量化参数的处理被执行，其中所述全局特征信息是以方差为基础的(1220，1225)。
20.根据权利要求15所述的方法，其中，除了默认的量化取整偏移以外，第二量化偏移被支持用于所述图片中的多个块，从而使得所述默认的量化取整偏移被明确地用信号进行发送，并且所述第二量化偏移被暗含地用信号进行发送(820)。
21.根据权利要求15所述的方法，其中，所述量化参数包括量化步长、量化取整偏移、以及量化比例变换矩阵中的至少一个(1025)。
CN201080045061.XA 2009-10-05 2010-09-29 用于视频编码和译码中的嵌入量化参数调节的方法和装置 Expired - Fee Related CN102577379B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US24854109P 2009-10-05 2009-10-05
US61/248,541 2009-10-05
PCT/US2010/002630 WO2011043793A1 (en) 2009-10-05 2010-09-29 Methods and apparatus for embedded quantization parameter adjustment in video encoding and decoding

Publications (2)

Publication Number Publication Date
CN102577379A CN102577379A (zh) 2012-07-11
CN102577379B true CN102577379B (zh) 2017-12-19

Family

ID=43416234

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080045061.XA Expired - Fee Related CN102577379B (zh) 2009-10-05 2010-09-29 用于视频编码和译码中的嵌入量化参数调节的方法和装置

Country Status (6)

Country Link
US (3) US9819952B2 (zh)
EP (1) EP2486730A1 (zh)
JP (1) JP5806219B2 (zh)
KR (1) KR101873356B1 (zh)
CN (1) CN102577379B (zh)
WO (1) WO2011043793A1 (zh)

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9819952B2 (en) * 2009-10-05 2017-11-14 Thomson Licensing Dtv Methods and apparatus for embedded quantization parameter adjustment in video encoding and decoding
US10897625B2 (en) 2009-11-20 2021-01-19 Texas Instruments Incorporated Block artifact suppression in video coding
EP4024865B1 (en) 2010-06-10 2023-10-25 InterDigital VC Holdings, Inc. Methods and apparatus for determining quantization parameter predictors from a plurality of neighboring quantization parameters
BR112013022670B1 (pt) 2011-03-11 2022-05-03 Sony Corporation Aparelho e método de processamento de imagem
ES2651133T3 (es) 2011-12-13 2018-01-24 JVC Kenwood Corporation Dispositivo de codificación de vídeo, procedimiento de codificación de vídeo, programa de codificación de vídeo, dispositivo de decodificación de vídeo, procedimiento de decodificación de vídeo y programa de decodificación de vídeo
WO2013086724A1 (en) * 2011-12-15 2013-06-20 Mediatek Singapore Pte. Ltd. Method of clippling transformed coefficients before de-quantization
MX2014007041A (es) * 2011-12-15 2014-09-16 Thomson Licensing Metodo y aparato para medicion de calidad de video.
CN107493475B (zh) * 2011-12-15 2019-05-17 寰发股份有限公司 量化电平截取装置及方法
CN103975592B (zh) * 2011-12-15 2018-03-06 寰发股份有限公司 反量化变换系数的方法及装置
TWI726579B (zh) * 2011-12-21 2021-05-01 日商Ｊｖｃ建伍股份有限公司 動態影像編碼裝置、動態影像編碼方法、動態影像解碼裝置、及動態影像解碼方法
US9883180B2 (en) 2012-10-03 2018-01-30 Avago Technologies General Ip (Singapore) Pte. Ltd. Bounded rate near-lossless and lossless image compression
US9805442B2 (en) 2012-10-03 2017-10-31 Avago Technologies General Ip (Singapore) Pte. Ltd. Fine-grained bit-rate control
US9978156B2 (en) 2012-10-03 2018-05-22 Avago Technologies General Ip (Singapore) Pte. Ltd. High-throughput image and video compression
US9813711B2 (en) 2012-10-03 2017-11-07 Avago Technologies General Ip (Singapore) Pte. Ltd. Hybrid transform-based compression
US10812829B2 (en) 2012-10-03 2020-10-20 Avago Technologies International Sales Pte. Limited 2D block image encoding
US20140105278A1 (en) * 2012-10-16 2014-04-17 Microsoft Corporation Color adaptation in video coding
US9363517B2 (en) 2013-02-28 2016-06-07 Broadcom Corporation Indexed color history in image coding
US20140269901A1 (en) * 2013-03-13 2014-09-18 Magnum Semiconductor, Inc. Method and apparatus for perceptual macroblock quantization parameter decision to improve subjective visual quality of a video signal
US9204150B2 (en) * 2014-02-26 2015-12-01 Intel Corporation Techniques for evaluating compressed motion video quality
CN105338352B (zh) * 2014-07-24 2019-04-19 华为技术有限公司 一种视频编码中自适应反量化方法及装置
KR102365685B1 (ko) * 2015-01-05 2022-02-21 삼성전자주식회사 인코더의 작동 방법과 상기 인코더를 포함하는 장치들
US9979969B2 (en) * 2015-04-24 2018-05-22 Fingram Co., Ltd. Method and system for image compression using image block characteristics
FR3035760B1 (fr) * 2015-04-29 2018-05-11 Digigram Video & Broadcast Systeme et procede d'encodage d'une sequence video
WO2017057923A1 (ko) * 2015-09-29 2017-04-06 엘지전자(주) 단일 최적화된 그래프를 이용하여 비디오 신호를 인코딩, 디코딩하는 방법
KR102503900B1 (ko) * 2015-10-05 2023-02-27 삼성전자주식회사 양자화 파라미터를 적응적으로 결정하는 인코더 및 이를 포함하는 애플리케이션 프로세서
WO2017138761A1 (ko) 2016-02-11 2017-08-17 삼성전자 주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
EP3649782A4 (en) * 2017-07-05 2021-04-14 Telefonaktiebolaget LM Ericsson (PUBL) DECODING A BLOCK OF VIDEO SAMPLE
US20200322606A1 (en) * 2017-10-24 2020-10-08 Sharp Kabushiki Kaisha Systems and methods for determining quantization parameter predictive values
CN109819253B (zh) * 2017-11-21 2022-04-22 腾讯科技（深圳）有限公司 视频编码方法、装置、计算机设备和存储介质
US11259035B2 (en) * 2019-03-15 2022-02-22 Ati Technologies Ulc Macroblock coding type prediction
US10924741B2 (en) * 2019-04-15 2021-02-16 Novatek Microelectronics Corp. Method of determining quantization parameters
WO2020244661A1 (en) * 2019-06-06 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Implicit selection of transform candidates
EP3993418A4 (en) * 2019-06-28 2023-06-28 Lg Electronics Inc. Method for decoding image and apparatus therefor
US11509897B2 (en) 2020-08-07 2022-11-22 Samsung Display Co., Ltd. Compression with positive reconstruction error
US11503322B2 (en) 2020-08-07 2022-11-15 Samsung Display Co., Ltd. DPCM codec with higher reconstruction quality on important gray levels
US11683490B2 (en) * 2020-09-10 2023-06-20 Tencent America LLC Context adaptive transform set
US20220201334A1 (en) * 2020-12-23 2022-06-23 Tencent America LLC Method and apparatus for video coding

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6363113B1 (en) * 1999-06-07 2002-03-26 Lucent Technologies Inc. Methods and apparatus for context-based perceptual quantization
CN1943221A (zh) * 2004-04-22 2007-04-04 索尼株式会社 图像处理装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5592228A (en) * 1993-03-04 1997-01-07 Kabushiki Kaisha Toshiba Video encoder using global motion estimation and polygonal patch motion estimation
DE69940703D1 (de) * 1998-03-05 2009-05-20 Panasonic Corp Verfahren zur Bildkodierung, Verfahren zur Bildkodierung/-Dekodierung, Bildkodierer, oder Vorrichtung zur Bildaufzeichnung/-Wiedergabe
EP1005233A1 (en) * 1998-10-12 2000-05-31 STMicroelectronics S.r.l. Constant bit-rate coding control in a video coder by way of pre-analysis of the slices of the pictures
US6192080B1 (en) * 1998-12-04 2001-02-20 Mitsubishi Electric Research Laboratories, Inc. Motion compensated digital video signal processing
US6628839B1 (en) * 1999-02-23 2003-09-30 Matsushita Electric Industrial Co., Ltd. Image coding system converting apparatus, image coding system converting method, and recording medium
US7894530B2 (en) * 2004-05-07 2011-02-22 Broadcom Corporation Method and system for dynamic selection of transform size in a video decoder based on signal content
US20060056508A1 (en) * 2004-09-03 2006-03-16 Phillippe Lafon Video coding rate control
JP2007081474A (ja) 2005-09-09 2007-03-29 Toshiba Corp 画像符号化装置及び方法
US8199812B2 (en) * 2007-01-09 2012-06-12 Qualcomm Incorporated Adaptive upsampling for scalable video coding
US20080230949A1 (en) 2007-03-23 2008-09-25 Paul Razgunas Injection molding process for forming coated molded parts
FR2914125A1 (fr) 2007-03-23 2008-09-26 Thomson Licensing Sas Procede de traitement d'image et dispositif de codage implementant ledit procede.
US8995522B2 (en) * 2007-04-13 2015-03-31 Apple Inc. Method and system for rate control
US8238428B2 (en) * 2007-04-17 2012-08-07 Qualcomm Incorporated Pixel-by-pixel weighting for intra-frame coding
JPWO2008139721A1 (ja) * 2007-05-07 2010-07-29 パナソニック株式会社 復号化装置及び復号化方法
US8488668B2 (en) * 2007-06-15 2013-07-16 Qualcomm Incorporated Adaptive coefficient scanning for video coding
JP2009111691A (ja) * 2007-10-30 2009-05-21 Hitachi Ltd 画像符号化装置及び符号化方法、画像復号化装置及び復号化方法
US9113194B2 (en) * 2007-12-19 2015-08-18 Arris Technology, Inc. Method and system for interleaving video and data for transmission over a network at a selected bit rate
US8542730B2 (en) * 2008-02-22 2013-09-24 Qualcomm, Incorporated Fast macroblock delta QP decision
US9819952B2 (en) * 2009-10-05 2017-11-14 Thomson Licensing Dtv Methods and apparatus for embedded quantization parameter adjustment in video encoding and decoding
US8630341B2 (en) * 2011-01-14 2014-01-14 Mitsubishi Electric Research Laboratories, Inc. Method for training and utilizing separable transforms for video coding
TWI726579B (zh) * 2011-12-21 2021-05-01 日商Ｊｖｃ建伍股份有限公司 動態影像編碼裝置、動態影像編碼方法、動態影像解碼裝置、及動態影像解碼方法
US9363517B2 (en) * 2013-02-28 2016-06-07 Broadcom Corporation Indexed color history in image coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6363113B1 (en) * 1999-06-07 2002-03-26 Lucent Technologies Inc. Methods and apparatus for context-based perceptual quantization
CN1943221A (zh) * 2004-04-22 2007-04-04 索尼株式会社 图像处理装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
A prequantizer with the human visual effect for the DPCM;CHUN-HUNG K ET AL;《SIGNAL PROCESSING. IMAGE COMMUNICATION,ELSEVIER SCIENCE PUBLISHERS,AMSTERDAM,NL》;19960701;第8卷(第5期);摘要，第2节 *
Locally Adaptive Perceptual Image Coding;INGO HONTSCH ET AL;《IEEE TRANSACTIONS ON IMAGE PROCESSING, IEEE SERVICE CENTER, PISCATAWAY,NJ,US》;20000901;第9卷(第9期);摘要，第1475页左栏第6行-第1478段左栏第1段，附图2,4,10，表1-5，第1473段左栏第1-2段 *

Also Published As

Publication number Publication date
CN102577379A (zh) 2012-07-11
JP2013507086A (ja) 2013-02-28
KR20120083368A (ko) 2012-07-25
EP2486730A1 (en) 2012-08-15
US20180091822A1 (en) 2018-03-29
US9819952B2 (en) 2017-11-14
JP5806219B2 (ja) 2015-11-10
US20120183053A1 (en) 2012-07-19
US10194154B2 (en) 2019-01-29
KR101873356B1 (ko) 2018-07-02
US20180091817A1 (en) 2018-03-29
WO2011043793A1 (en) 2011-04-14

Similar Documents

Publication Publication Date Title
CN102577379B (zh) 用于视频编码和译码中的嵌入量化参数调节的方法和装置
KR101702156B1 (ko) 비디오 인코딩 및 디코딩에 대한 개선된 양자화 라운딩 오프셋 조정을 위한 방법들 및 장치
CN103155553B (zh) 从多个相邻量化参数中确定量化参数预测值的方法和装置
CN102577380B (zh) 用于改进的帧内色度编码和解码的方法及装置
US9716891B2 (en) Quantization method and apparatus in encoding/decoding
CN104041035B (zh) 用于复合视频的无损编码及相关信号表示方法
US8848788B2 (en) Method and apparatus for joint quantization parameter adjustment
CN102550026B (zh) 视频编码和解码中色度分量的预测像素的自适应滤波的方法和装置
CN101971635B (zh) 针对视频编码中的速率控制精度的方法及装置
KR101599561B1 (ko) 비디오 인코딩 및 디코딩에서 레이트 제어 정밀도를 위한 방법 및 장치
CN101543076A (zh) 用于环内去伪影滤波的方法和设备
CN104994382B (zh) 一种感知率失真的优化方法
CN101779465A (zh) 使用兴趣区域(roi)信息改进视频编码的方法和设备
KR20110137796A (ko) 성김에 기반한 아티팩트 제거 필터링에서 가변 변환들에 응답하여 필터 파라미터 결정 및 선택을 위한 방법과 장치
Luo et al. Improving H. 264/AVC video coding with adaptive coefficient suppression

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: The French Yixilaimu Leo City

Patentee before: THOMSON LICENSING

CP02 Change in the address of a patent holder
TR01 Transfer of patent right

Effective date of registration: 20190201

Address after: Paris France

Patentee after: International Digital Madison Patent Holding Co.

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190201

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20171219

Termination date: 20200929

CF01 Termination of patent right due to non-payment of annual fee