CN107094251B - 一种基于空间位置自适应质量调整的视频、图像编解码方法及装置 - Google Patents

一种基于空间位置自适应质量调整的视频、图像编解码方法及装置 Download PDF

Info

Publication number
CN107094251B
CN107094251B CN201710204303.9A CN201710204303A CN107094251B CN 107094251 B CN107094251 B CN 107094251B CN 201710204303 A CN201710204303 A CN 201710204303A CN 107094251 B CN107094251 B CN 107094251B
Authority
CN
China
Prior art keywords
quality
unit
adaptive
image
factor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710204303.9A
Other languages
English (en)
Other versions
CN107094251A (zh
Inventor
虞露
孙宇乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN201710204303.9A priority Critical patent/CN107094251B/zh
Publication of CN107094251A publication Critical patent/CN107094251A/zh
Application granted granted Critical
Publication of CN107094251B publication Critical patent/CN107094251B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供了一种视频、图像编解码中基于图像空间位置的自适应质量调整方法和装置，该发明用于处理质量重要性在空间不相同的视频、图像，即质量评价指标是空间误差非均匀加权。对于图像或视频的每帧，通过对不同空间位置的单元自适应质量调整，使重要性大的空间位置具有较好的质量，在相同的码率下，提升视频、图像整体加权质量。其中自适应质量调整可以通过调整量化步长实现。另外还可以修改对应的lambda用于编码决策。本发明给出的方法在视频或图像的编码中能够提升编码性能。本发明在提出视频、图像编解码中基于图像空间位置的自适应质量调整方法的同时，还提出了相应的装置。

Description

一种基于空间位置自适应质量调整的视频、图像编解码方法 及装置
技术领域
本发明专利属于视频、图像编码领域，具体涉及一种视频、图像编码或解码中基于图像空间位置的自适应质量调整方法和装置。
背景技术
有损视频、图像编码中，量化技术对视频、图像质量的影响很大。量化技术通过对变换系数进行量化，引入信号失真，提高压缩率。量化程度由量化步长决定，量化步长越大，引入信号噪声越大，压缩率越大，也就是量化步长越大，失真越大，但码率越小。以HEVC为例，HEVC用量化程度指标量化参数QP来表明编码失真程度，QP与量化步长Qstep有如下对应关系：
Qstep≈2(QP-4)/6,
QP与量化步长Qstep对应关系可查表确定，且QP范围为0-51。编码解码系统也可以规定其它的对应关系。
在HEVC编码控制中，编码决策的代价函数使用了拉格朗日乘子lamda。lamda与量化程度的指标QP相关联。而且在决策不同任务时，使用不同的lamda。例如：亮度块划分或帧内、帧间模式选择的模式乘子lamda_mode、运动估计的运动估计乘子lamda_motion与QP的关系如下：
lamda_mode＝α*2((QP-12)/3)
Figure BDA0001259440760000011
其中，因子α由编码配置、编码图像在图像组GOP中所处的位置以及当前图像是否作为参考图像。
对于传统的视频、图像编码，客观质量评价是对每帧图像进行空间像素误差均匀加权得到的。比如HEVC、AVC视频编码标准把PSNR作为评价指标。在编码端，可以设定序列或图像的量化程度指标。对于一帧图像，会设置一个基本量化参数baseQP，可以通过码率控制、内容复杂度分布的分析等设定图像局部区域的量化程度指标，在baseQP基础上进行调整。但对于每帧图像不同的空间位置，不会针对的根据位置自适应调整QP，也就是一帧图像不同位置的baseQP不同，量化程度和图像的空间位置是不相关的。
随着视频，图像技术发展，一些新应用的质量评价指标是空间像素误差非均匀加权，比如360度全景视频，360度范围的图像表达为一个或多个的投影面,均匀采样的投影面映射到球面会不均匀。因此图像的不同空间位置质量的重要性、伸缩比例系数不同，需要球面加权评价[1]。附图5列举了部分360视频投影格式的评价伸缩比例系数图，不同面也可以重新拼放组合，投影格式上每个像素都有对应的伸缩比例系数Wi，j，伸缩比例系数Wi，j表示每个像素映射到单位球面的面积与投影格式上像素的面积比，其中亮度值大的区域表明该区域的像素伸缩比例系数大。对于这类视频、图像若仍采用相同的量化步长或者相同的量化步长组进行编码，不同位置视频的质量差异较大。在码率约束下，会使图像质量伸缩比例系数较小的空间位置消耗较多码率，影响整体的编码性能。
发明内容
为了解决上述技术问题，本发明提出了一种视频、图像编码或解码中基于图像空间位置的自适应质量调整方法和装置。通过对视频、图像不同空间位置的单元自适应调整量化步长，使重要性大的空间位置具有较好的质量，在相同的码率下，提升视频、图像整体加权质量。
本发明的第一目的是提供一种基于空间位置自适应质量调整的视频、图像编码或解码方法，包括如下内容：
确定视频、图像不同空间位置自适应质量调整单元的质量重要性即伸缩比例系数；根据视频、图像不同空间位置的自适应质量调整单元伸缩比例系数，编码或解码不同自适应质量调整单元自适应调整量化步长，调整图像自适应质量调整单元在不同空间位置的质量。
所述的基于图像空间位置的自适应质量调整编码或解码方法，自适应质量调整单元至少包含以下一种表达形式：
a)划分图像的最大的处理单元：例如：编码树单元(CTU)、宏块(MB)等；
b)将最大的处理单元进一步划分为同一类型编码的单元：例如：编码单元(CU)；
c)进行一维或二维变换的单元，例如：变换单元(TU)、亮度变换块(Y－TB)、某色彩分量的变换块等；
d)进行一维或二维变换的单元的子单元，多于一个变换系数；
e)多个上述单元的组合。
所述的基于图像空间位置的自适应质量调整编码或解码方法，自适应质量调整单元质量重要性即单元伸缩比例系数UW,是以下一种值：
a)客观质量评价指标中的该单元内像素的平均质量重要性，即单元内像素伸缩比例系数Wi，j的平均值；
b)客观质量评价指标中的该单元内某一整像素的质量重要性，即单元内某个整像素的伸缩比例系数Wi，j；
c)客观质量评价指标中的该单元内某一分像素的质量重要性，即单元内某个分像素的伸缩比例系数Wi，j；
d)根据编码图像单元空间位置对上述(a)或(b)或(c)结果控制精度后的值，比如保留16位位宽。
所述的基于图像空间位置的自适应质量调整编码或解码方法，调整量化步长由下式得到：
New_Qstep＝factor*Ori_Qstep
Figure BDA0001259440760000031
其中New_Qstep表示新的量化步长值，Ori_Qstep表示初始的量化步长值；UWi，j表示单元坐标为(i，j)的伸缩比例系数且最大伸缩比例系数为1；factor表示量化步长Qstep的因子；factor_ave表示量化步长整体平均的因子，是以下一种值：
a)图像每个自适应质量调整单元的伸缩比例系数UWi，j有对应的
Figure BDA0001259440760000032
对所有单元的
Figure BDA0001259440760000033
求平均值；
b)对图像所有自适应质量调整单元的伸缩比例系数UWi，j求平均得到的平均伸缩比例系数UWi，j‘，再求对应的
Figure BDA0001259440760000034
值；
c)对上述(a)或(b)结果进行精度控制后的值，比如保留16位位宽的结果。
所述的基于图像空间位置的自适应质量调整编码或解码方法，调整量化步长量deltaQstep至少包含以下一种方法：
a)在编码或解码的量化反量化环节对量化步长进行调整；
b)在编码或解码调整量化参数QP，量化参数调整量deltaQP可由对浮点型量化参数调整量deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)。
本发明第二目的是提供一种视频、图像编码或解码中基于图像空间位置的自适应质量调整装置，其包括：
确定视频、图像不同空间位置自适应质量调整单元的质量重要性即伸缩比例系数；根据视频、图像不同空间位置的单元伸缩比例系数，编码或解码不同单元自适应调整量化步长，调整图像自适应质量调整单元在不同空间位置的质量。
所述的基于图像空间位置的自适应质量调整编码或解码装置，自适应质量调整单元至少包含以下一种表达形式：
a)划分图像的最大的处理单元：例如：编码树单元(CTU)、宏块(MB)等；
b)将最大的处理单元进一步划分为同一类型编码的单元：例如：编码单元(CU)；
c)进行一维或二维变换的单元，例如：变换单元(TU)、亮度变换块(Y－TB)、某色彩分量的变换块等；
d)进行一维或二维变换的单元的子单元；
e)多个上述单元的组合。
所述的基于图像空间位置的自适应质量调整编码或解码装置，自适应质量调整单元质量重要性即伸缩比例系数是以下一种值：
a)客观质量评价指标中的该单元内像素的平均质量重要性，即平均伸缩比例系数；
b)客观质量评价指标中的该单元内某一整像素的质量重要性，即某一整像素伸缩比例系数；
c)客观质量评价指标中的该单元内某一分像素的质量重要性，即某一分像素伸缩比例系数；
d)根据编码图像自适应质量调整单元空间位置对上述(a)或(b)或(c)结果控制精度后的值，比如保留16位位宽后的结果。
所述的基于图像空间位置的自适应质量调整编码或解码装置，调整量化步长由下式得到：
New_Qstep＝factor*Ori_Qstep
Figure BDA0001259440760000041
其中New_Qstep表示新的量化步长值，Qri_Qstep表示初始的量化步长值；UWi，j表示单元坐标为(i，j)的伸缩比例系数且最大伸缩比例系数为1；factor表示量化步长Qstep的因子；factor_ave表示量化步长整体平均的因子，是以下一种值：
a)图像每个自适应质量调整单元的伸缩比例系数UWi，j有对应的
Figure BDA0001259440760000042
对所有单元的
Figure BDA0001259440760000043
求平均值；
b)对图像所有自适应质量调整单元的伸缩比例系数UWi，j求平均得到的平均伸缩比例系数UWi，j‘，再求对应的
Figure BDA0001259440760000044
值；
c)对上述(a)或(b)结果进行精度控制的值，比如保留16位位宽后的结果。
所述的基于图像空间位置的自适应质量调整编码或解码装置，调整量化步长量deltaQstep至少包含以下一种方法：
a)在编码或解码的量化反量化环节对量化步长进行调整
b)在编码或解码调整量化参数QP，量化参数调整量deltaQP可由对浮点型量化步长调整量deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)
本发明由于采用以上技术方案，其具有以下优点：
基于图像空间位置的自适应质量调整编码或解码，对视频、图像不同空间位置的自适应质量调整单元自适应质量调整，使重要性大的空间位置具有较好的质量，在相同的码率下，提升视频、图像整体加权质量。其中自适应质量调整通过调整量化步长实现，实现复杂度低，且能较大程度提升编码性能。
附图说明
结合附图，本发明的其他特点和优点可从下面通过举例来对本发明的原理进行解释的优选实施方式的说明中变得更清楚。
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是本发明自适应质量调整单元确定量化步长因子算法的流程图。
图2是本发明自适应质量调整单元编码或解码算法的流程图。
图3是本发明自适应质量调整单元确定量化因子装置图。
图4是本发明自适应质量调整单元编码或解码装置图。
图5是部分360视频投影格式的质量评价伸缩比例系数图。
具体实施方式
为表述简单，以下实施例中视频、图像不同空间位置的自适应质量调整单元是划分图像的最大的处理单元，例如：编码树单元(CTU)、宏块(MB)等，或者是最大的处理单元进一步划分为同一类型编码的单元，例如：编码单元(CU)，或者是进行一维或二维变换的单元，例如：变换单元(TU)，或者是进行一维或二维变换的单元的子单元，或者是上述单元的组合。
为表述简单，以下实施例中视频、图像自适应质量调整单元伸缩比例系数UWi，j是该单元内像素的平均质量伸缩比例系数，或者是单元内某一整像素的质量伸缩比例系数，比如单元内左上角像素的伸缩比例系数或者是单元内某一分像素的质量伸缩比例系数，比如图像中心处插值得到的分像素或者是对上述3种结果进行精度控制后的结果，比如保留16位位宽。
为表述简单，以下实施例中视频、图像平均量化步长因子factor_ave是图像每个自适应质量调整单元的伸缩比例系数UWi，j有对应的
Figure BDA0001259440760000051
对所有单元的
Figure BDA0001259440760000052
求平均值，或者是对图像所有自适应质量调整单元的伸缩比例系数UWi，j求平均得到的UWi，j‘，再求对应的
Figure BDA0001259440760000053
值，或者是前两者结果进行精度控制后的结果，比如保留16位位宽。
实施例1
一种编码或解码中量化步长因子确定方法。图1所示是该方法的流程图。其中S006-S008是本发明的特点。下面结合图1进行具体的说明。
在步骤S106中，输入为图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在步骤S108中，输入为自适应质量调整单元质量重要性即伸缩比例系数，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000061
实施例2
一种自适应质量调整编码方法。图2所示是该方法的流程图。其中S106-S110是本发明的特点。下面结合图2进行具体的说明。
在步骤S106中，输入为图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在步骤S108中，输入为自适应质量调整单元质量重要性即伸缩比例系数，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000062
在步骤S110中，输入为量化步长因子factor，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Ori_Qstep确定：
New_Qstep＝factor*Ori_Qstep
最后在编码的量化环节，使用更新后的量化步长New_Qstep。
实施例3
一种自适应质量调整编码方法。图2所示是该方法的流程图。其中S106-S110是本发明的特点。下面结合图2进行具体的说明。
在步骤S106中，输入为图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在步骤S108中，输入为自适应质量调整单元质量重要性即伸缩比例系数，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWii，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000071
在步骤S110中，输入为量化步长因子factor，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Ori_Qstep确定：
New_Qstep＝factor*Ori_Qstep
在编码端通过调整QP来调整量化步长Qstep，QP调整量deltaQP可由对deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)
最终图像的每个自适应质量调整单元使用调整后的New_QP进行编码，可由deltaQP和初始QP Ori_QP得到：
New_QP＝deltaQP+Ori_QP
实施例4
在实施例2的基础上，对应的修改lambda。若lambda决策的单元只含有一个自适应质量调整单元,则新的lambda为初始的lambda乘上关于deltaQP的因子：
New_lambda＝Ori_lambda*2deltaQP/3
若lambda决策的单元包含多个自适应质量调整单元,上式的deltaQP是包含的质量调整单元的平均deltaQP,或者是根据包含的质量调整单元大小，加权得到的deltaQP。
其中，deltaQP可由对deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)
实施例5
在实施例3的基础上，修改对应的lambda，若lambda决策的单元只含有一个自适应质量调整单元,则新的lambda为初始的lambda乘上关于deltaQP的因子：
New_lambda＝Ori_lambda*2deltaQP/3
若lambda决策的单元包含多个自适应质量调整单元,上式的deltaQP是包含的质量调整单元的平均deltaQP,或者是根据包含的质量调整单元大小，加权得到的deltaQP。
实施例6
一种自适应质量调整解码方法。图2所示是该方法的流程图。其中S106-S110是本发明的特点。下面结合图2进行具体的说明。
在步骤S106中，输入为图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在步骤S108中，输入为自适应质量调整单元质量重要性即伸缩比例系数，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000081
在步骤S110中，输入为量化步长因子factor，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Ori_Qstep确定：
New_Qstep＝factor*Ori_Qstep
最后在解码的量化环节，使用更新后的量化步长New_Qstep。
实施例7
一种自适应质量调整解码方法。图2所示是该方法的流程图。其中S106-S110是本发明的特点。下面结合图2进行具体的说明。
在步骤S106中，输入为某一帧图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在步骤S108中，输入为自适应质量调整单元质量重要性即伸缩比例系数，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000082
在步骤S110中，输入为量化步长因子factor，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Ori_Qstep确定：
New_Qstep＝factor*Ori_Qstep
在解码端通过调整QP来调整量化步长Qstep，QP调整量deltaQP可由对deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)
最终图像的每个自适应质量调整单元使用调整后的New_QP进行解码，可由deltaQP和初始QP Ori_QP得到：
New_QP＝deltaQP+Ori_QP
实施例8
一种编码或解码中量化步长因子确定装置。图3所示是该方法的装置图。其中S200-S202是本发明的特点。下面结合图3进行具体的说明。
在步骤S200中，输入为图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在步骤S202中，输入为自适应质量调整单元质量重要性即伸缩比例系数，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000091
实施例9
一种自适应质量调整编码装置。图4所示是该方法的装置图。其中S302-S306是本发明的特点。下面结合图4进行具体的说明。
在模块S302中，输入为图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在模块S304中，输入为自适应质量调整单元质量重要性即伸缩比例系数和平均量化步长因子factor_ave，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000092
在模块S306中，输入为量化步长因子factor和初始量化步长Ori_Qstep，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Ori_Qstep确定：
New_Qstep＝factor*Ori_Qstep
最后在编码的量化环节，使用更新后的量化步长New_Qstep。
实施例10
一种自适应质量调整编码装置。图4所示是该方法的装置图。其中S302-S306是本发明的特点。下面结合图4进行具体的说明。
在模块S302中，输入为图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在模块S304中，输入为自适应质量调整单元质量重要性即伸缩比例系数平均量化步长因子factor_ave，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000101
在模块S306中，输入为量化步长因子factor和初始量化步长Qri_Qstep，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Ori_Qstep确定：
New_Qstep＝factor*Ori_Qstep
在编码端通过调整QP来调整量化步长Qstep，QP调整量deltaQP可由对deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP′可由下式获得：
deltaQP‘＝6*log2(factor)
最终图像的每个自适应质量调整单元使用调整后的New_QP进行编码，可由deltaQP和初始QP Ori_QP得到：
New_QP＝deltaQP+Ori_QP
实施例11
在实施例8的基础上，对应的修改lambda。若lambda决策的单元只含有一个自适应质量调整单元，则新的lambda为初始的lambda乘上关于deltaQP的因子：
New_lambda＝Ori_lambda*2deltaQP/3
若lambda决策的单元包含多个自适应质量调整单元，上式的deltaQP是包含的质量调整单元的平均deltaQP，或者是根据包含的质量调整单元大小，加权得到的deltaQP。
其中，deltaQP可由对deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)
实施例12
在实施例9的基础上，修改对应的lambda，若lambda决策的单元只含有一个自适应质量调整单元，则新的lambda为初始的lambda乘上关于deltaQP的因子：
New_lambda＝Ori_lambda*2deltaQP/3
若lambda决策的单元包含多个自适应质量调整单元，上式的deltaQP是包含的质量调整单元的平均deltaQP，或者是根据包含的质量调整单元大小，加权得到的deltaQP。
实施例13
一种自适应质量调整解码装置。图4所示是该方法的装置图。其中S302-S306是本发明的特点。下面结合图4进行具体的说明。
在模块S302中，输入为某一帧图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在模块S304中，输入为自适应质量调整单元质量重要性即伸缩比例系数和平均量化步长因子factor_ave，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000111
在模块S306中，输入为量化步长因子factor和初始量化步长Ori_Qstep，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Qri_Qstep确定：
New_Qstep＝factor*Ori_Qstep
最后在解码的量化环节，使用更新后的量化步长New_Qstep。
实施例14
一种自适应质量调整解码装置。图4所示是该方法的装置图。其中S302-S306是本发明的特点。下面结合图4进行具体的说明。
在模块S302中，输入为某一帧图像的自适应质量调整单元，输出为该自适应质量调整单元质量重要性即伸缩比例系数。首先根据视频格式以及自适应质量调整单元在图像中的坐标位置，确定该自适应质量调整单元伸缩比例系数UWi，j。
在模块S304中，输入为自适应质量调整单元质量重要性即伸缩比例系数和平均量化步长因子factor_ave，输出为量化步长因子。自适应质量调整单元量化步长因子factor由伸缩比例系数UWi，j和平均量化步长因子factor_ave导出：
Figure BDA0001259440760000121
在模块S306中，输入为量化步长因子factor和初始量化步长Ori_Qstep，输出为调整后的量化步长New_Qstep。调整后的量化步长New_Qstep可由输入的量化步长因子factor和初始量化步长Ori_Qstep确定：
New_Qstep＝factor*Ori_Qstep
在解码端通过调整QP来调整量化步长Qstep，QP调整量deltaQP可由对deltaQP‘上取整或下取整或四舍五入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)
最终图像的每个自适应质量调整单元使用调整后的New_QP进行解码，可由deltaQP和初始QP Ori_QP得到：
New_QP＝deltaQP+Ori_QP
参考文献
[1]Y.Sun，A.Lu，L.Yu，“AHG8：WS-PSNR for 360video objective qualityevaluation，”Joint Video Exploration Team of ITU-T SG16WP3and ISO/IEC JTC1/SC29/WG11，JVET-D0040，Oct.2016，Chengdu，China.

Claims (10)

1.一种基于空间位置自适应质量调整的视频、图像编解码方法，其特征在于，包括以下步骤：
确定视频、图像不同空间位置的自适应质量调整单元的质量重要性，将质量重要性定义为伸缩比例系数；
根据视频、图像不同空间位置的自适应质量调整单元伸缩比例系数，编码或解码不同自适应质量调整单元自适应调整量化步长，调整图像自适应质量调整单元在不同空间位置的质量；
所述自适应调整量化步长信息不需要进行编码传送，解码端根据视频、图像格式以及自适应质量调整单元所在空间位置导出。
2.根据权利要求1所述的基于空间位置自适应质量调整的视频、图像编解码方法，其特征在于，所述的自适应质量调整单元至少包含以下一种表达形式：
a)划分图像的最大的处理单元；
b)将最大的处理单元进一步划分为同一类型编码的单元；
c)进行一维或二维变换的单元；
d)进行一维或二维变换的单元的子单元，多于一个变换系数。
3.根据权利要求1所述的基于空间位置自适应质量调整的视频、图像编解码方法，其特征在于，所述的自适应质量调整单元质量重要性是以下一种值：
a)客观质量评价指标中的该单元内像素的平均质量重要性，定义为平均伸缩比例系数；
b)客观质量评价指标中的该单元内某一整像素的质量重要性，定义为某一整像素伸缩比例系数；
c)客观质量评价指标中的该单元内某一分像素的质量重要性，定义为某一分像素伸缩比例系数；
d)根据编码图像自适应质量调整单元空间位置对a)或b)或c)定义的伸缩比例系数再进行精度控制的值。
4.根据权利要求1所述的基于空间位置自适应质量调整的视频、图像编解码方法，其特征在于，所述的调整量化步长由下式得到：
New_Qstep＝factor*Ori_Qstep
Figure FDA0002549409600000021
其中New_Qstep表示新的量化步长值，Ori_Qstep表示初始的量化步长值；UWi,j表示自适应质量调整单元坐标为(i，j)的伸缩比例系数且最大伸缩比例系数为1；factor表示量化步长Qstep的因子；factor_ave表示量化步长整体平均因子，是以下一种值：
a)图像每个自适应质量调整单元的伸缩比例系数UWi,j有对应的
Figure FDA0002549409600000022
对所有自适应质量调整单元的
Figure FDA0002549409600000023
求平均值；
b)对图像所有自适应质量调整单元的伸缩比例系数UWi,j求平均得到的平均伸缩比例系数UWi,j‘，再求对应的
Figure FDA0002549409600000024
值；
c)对a)或b)的结果进行精度控制后的值。
5.根据权利要求4所述的基于空间位置自适应质量调整的视频、图像编解码方法，其特征在于，所述的调整量化步长量deltaQPstep至少包含以下一种方法：
a)在编码或解码的量化反量化环节对量化步长进行调整；
b)在编码或解码调整量化参数QP，量化参数调整量deltaQP可由对浮点型量化参数调整量deltaQP‘上取整或下取整或四舍五入或六舍七入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)。
6.一种基于空间位置自适应质量调整的视频、图像编解码装置，其特征在于，包括以下内容：
伸缩比例系数确定单元，用于确定视频、图像不同空间位置的自适应质量调整单元的质量重要性，将质量重要性定义为伸缩比例系数；
量化步长自适应调整单元，用于根据视频、图像不同空间位置的自适应质量调整单元伸缩比例系数，编码或解码不同自适应质量调整单元自适应调整量化步长，调整图像自适应质量调整单元在不同空间位置的质量；
所述自适应调整量化步长信息不需要进行编码传送，解码端根据视频、图像格式以及自适应质量调整单元所在空间位置导出。
7.根据权利要求6所述的基于空间位置自适应质量调整的视频、图像编解码装置，其特征在于，所述的自适应质量调整单元至少包含以下一种表达形式：
a)划分图像的最大的处理单元；
b)将最大的处理单元进一步划分为同一类型编码的单元；
c)进行一维或二维变换的单元；
c)进行一维或二维变换的单元的子单元，多于一个变换系数。
8.根据权利要求6所述的基于空间位置自适应质量调整的视频、图像编解码装置，其特征在于，所述的自适应质量调整单元质量重要性是以下一种值：
a)客观质量评价指标中的该单元内像素的平均质量重要性，定义为平均伸缩比例系数；
b)客观质量评价指标中的该单元内某一整像素的质量重要性，定义为某一整像素伸缩比例系数；
c)客观质量评价指标中的该单元内某一分像素的质量重要性，定义为某一分像素伸缩比例系数；
d)根据编码图像自适应质量调整单元空间位置对a)或b)或c)定义的伸缩比例系数再进行精度控制的值。
9.根据权利要求6所述的基于空间位置自适应质量调整的视频、图像编解码装置，其特征在于，所述的调整量化步长由下式得到：
New_Qstep＝factor*Ori_Qstep
Figure FDA0002549409600000031
其中New_Qstep表示新的量化步长值，Ori_Qstep表示初始的量化步长值；UWi,j表示自适应质量调整单元坐标为(i，j)的伸缩比例系数且最大伸缩比例系数为1；factor表示量化步长Qstep的因子；factor_ave表示量化步长整体平均因子，是以下一种值：
a)图像每个自适应质量调整单元的伸缩比例系数UWi,j有对应的
Figure FDA0002549409600000032
对所有自适应质量调整单元的
Figure FDA0002549409600000033
求平均值；
b)对图像所有自适应质量调整单元的伸缩比例系数UWi,j求平均得到的平均伸缩比例系数UWi,j‘，再求对应的
Figure FDA0002549409600000034
值；
c)对a)或b)的结果进行精度控制后的值。
10.根据权利要求9所述的基于空间位置自适应质量调整的视频、图像编解码装置，其特征在于，所述的调整量化步长量deltaQPstep至少包含以下一种方法：
c)在编码或解码的量化反量化环节对量化步长进行调整；
d)在编码或解码调整量化参数QP，量化参数调整量deltaQP可由对浮点型量化步长调整量deltaQP‘上取整或下取整或四舍五入或六舍七入的整数得到，deltaQP‘可由下式获得：
deltaQP‘＝6*log2(factor)。
CN201710204303.9A 2017-03-31 2017-03-31 一种基于空间位置自适应质量调整的视频、图像编解码方法及装置 Active CN107094251B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710204303.9A CN107094251B (zh) 2017-03-31 2017-03-31 一种基于空间位置自适应质量调整的视频、图像编解码方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710204303.9A CN107094251B (zh) 2017-03-31 2017-03-31 一种基于空间位置自适应质量调整的视频、图像编解码方法及装置

Publications (2)

Publication Number Publication Date
CN107094251A CN107094251A (zh) 2017-08-25
CN107094251B true CN107094251B (zh) 2021-07-23

Family

ID=59646358

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710204303.9A Active CN107094251B (zh) 2017-03-31 2017-03-31 一种基于空间位置自适应质量调整的视频、图像编解码方法及装置

Country Status (1)

Country Link
CN (1) CN107094251B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10904531B2 (en) 2017-03-23 2021-01-26 Qualcomm Incorporated Adaptive parameters for coding of 360-degree video
CN110121071A (zh) * 2018-02-05 2019-08-13 广东欧珀移动通信有限公司 视频编码方法及相关产品
CN109089115B (zh) * 2018-05-28 2022-07-01 北方工业大学 在hevc用于对360度视频进行编码的方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101953158A (zh) * 2008-02-14 2011-01-19 思科技术公司 针对全景视频会议中的均一质量的自适应量化
CN102281446A (zh) * 2011-09-20 2011-12-14 西南交通大学 一种分布式视频编码中基于视觉感知特性的量化方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06205396A (ja) * 1992-12-28 1994-07-22 Kyocera Corp 画面に重み付けを持たせた画像圧縮方式
JPH07177513A (ja) * 1993-12-20 1995-07-14 Mitsubishi Electric Corp 映像信号符号化方式
US8503536B2 (en) * 2006-04-07 2013-08-06 Microsoft Corporation Quantization adjustments for DC shift artifacts
JP2008245201A (ja) * 2007-03-29 2008-10-09 Victor Co Of Japan Ltd 符号化装置
CN101252689B (zh) * 2008-02-29 2010-08-25 杭州爱威芯科技有限公司 一种自适应的码率控制方法
CA2784515A1 (en) * 2009-12-17 2011-06-23 Telefonaktiebolaget L M Ericsson (Publ) Method and arrangement for video coding
WO2011115659A1 (en) * 2010-03-16 2011-09-22 Thomson Licensing Methods and apparatus for implicit adaptive motion vector predictor selection for video encoding and decoding
MX339436B (es) * 2011-03-09 2016-05-26 Nec Corp Dispositivo de codificacion de video, dispositivo de decodificacion de video, metodo de codificacion de video, y metodo de decodificacion de video.
CN103124347B (zh) * 2012-10-22 2016-04-27 上海大学 利用视觉感知特性指导多视点视频编码量化过程的方法
CN102970536B (zh) * 2012-11-15 2015-10-28 上海交通大学 一种改进的带有预测残差调整的视频编码方法
CN106063270A (zh) * 2013-12-27 2016-10-26 寰发股份有限公司 用于主颜色索引图编码的方法及装置
CN105338352B (zh) * 2014-07-24 2019-04-19 华为技术有限公司 一种视频编码中自适应反量化方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101953158A (zh) * 2008-02-14 2011-01-19 思科技术公司 针对全景视频会议中的均一质量的自适应量化
CN102281446A (zh) * 2011-09-20 2011-12-14 西南交通大学 一种分布式视频编码中基于视觉感知特性的量化方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
AHG8: Stretching ratio based adaptive quantization for 360 video;Yule Sun, Lu Yu;《Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11》;20170330;第1-5页 *

Also Published As

Publication number Publication date
CN107094251A (zh) 2017-08-25

Similar Documents

Publication Publication Date Title
KR100970315B1 (ko) 트랜스코더 및 부호화 화상 변환 방법
JP5806219B2 (ja) ビデオ符号化及び復号化における埋め込み量子化パラメータ調整方法及び装置
JP5107495B2 (ja) 品質ベースのイメージ圧縮
US10616594B2 (en) Picture encoding device and picture encoding method
US8331449B2 (en) Fast encoding method and system using adaptive intra prediction
US8175158B2 (en) Methods and systems for inter-layer image prediction parameter determination
CN105959706B (zh) 图像编码装置和方法、以及图像译码装置和方法
CN111133476A (zh) 点云压缩
JPH04196976A (ja) 画像符号化装置
JP2022176939A (ja) Ｖｖｃにおける色変換のための方法及び機器
CN106303530B (zh) 一种融合视觉感知特性的码率控制方法
US20160337668A1 (en) Method and apparatus for encoding image data and method and apparatus for decoding image data
US7676107B2 (en) Method and system for video classification
CN107094251B (zh) 一种基于空间位置自适应质量调整的视频、图像编解码方法及装置
CN115695784A (zh) 对图像的块进行编码的方法，编码设备和计算机可读介质
WO2015097118A1 (en) Method and device for encoding a high-dynamic range image into a bitstream and/or decoding a bitstream representing a high-dynamic range image
KR101076876B1 (ko) 블록기반 깊이정보 맵의 코딩 방법과 장치, 및 이를 이용한 3차원 비디오 코딩 방법
CN112866696A (zh) 4k、8k、16k超高清视频编码优化控制方法和装置
EP3550837A1 (en) Method for generating quantization matrices based on viewing conditions
JP6256565B2 (ja) 画像符号化装置、画像符号化方法、及び画像符号化プログラム
US20060222065A1 (en) System and method for improving video data compression by varying quantization bits based on region within picture
Jung et al. HEVC encoder optimization for HDR video coding based on perceptual block merging
JP6256566B2 (ja) 画像符号化装置、画像符号化方法、及び画像符号化プログラム
KR20160135670A (ko) 픽처 블록을 인코딩/디코딩하기 위한 방법
JP2019004304A (ja) 画像符号化装置、画像符号化方法、及び画像符号化プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant