CN1193616C - 一种用于图像压缩传输的量化与码流控制方法 - Google Patents
一种用于图像压缩传输的量化与码流控制方法 Download PDFInfo
- Publication number
- CN1193616C CN1193616C CN 00125624 CN00125624A CN1193616C CN 1193616 C CN1193616 C CN 1193616C CN 00125624 CN00125624 CN 00125624 CN 00125624 A CN00125624 A CN 00125624A CN 1193616 C CN1193616 C CN 1193616C
- Authority
- CN
- China
- Prior art keywords
- quantization
- frame
- image
- average
- sad
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000013139 quantization Methods 0.000 title claims abstract description 92
- 238000000034 method Methods 0.000 title claims abstract description 33
- 230000005540 biological transmission Effects 0.000 title claims abstract description 14
- 230000033001 locomotion Effects 0.000 claims description 16
- 230000001953 sensory effect Effects 0.000 claims description 3
- 238000012935 Averaging Methods 0.000 claims description 2
- 238000012937 correction Methods 0.000 claims description 2
- 230000035945 sensitivity Effects 0.000 claims description 2
- 230000000007 visual effect Effects 0.000 abstract description 6
- 230000006835 compression Effects 0.000 abstract description 5
- 238000007906 compression Methods 0.000 abstract description 5
- 230000000694 effects Effects 0.000 abstract description 3
- 238000004891 communication Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 101100369978 Arabidopsis thaliana TMN11 gene Proteins 0.000 description 2
- 101100099846 Arabidopsis thaliana TMN8 gene Proteins 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000013441 quality evaluation Methods 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/005—Statistical coding, e.g. Huffman, run length coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种用于视频通讯领域中压缩图像传输的量化与码流控制方法,该方法将缓冲区量化参数控制与率失真理论相结合,并着重考虑人眼在空间域与时间域的视觉特点,对不同特质的图像采用不同形式的率失真函数变形,通过帧级量化参数控制和宏块级量化控制两个步骤,在帧一级和宏块一级对量化参数进行控制,在码率控制比较平稳的前提下,提供了较好的主观图像压缩质量,并且可有效防止码流控制的滞后,提高码流控制的效果。
Description
发明领域
本发明涉及视频通讯领域,尤其涉及视频信息的传输与处理领域。
背景技术
在视频信息传输系统中,需要传输大量的视频信号,但是由于带宽的限制,又不可能将视频信号以原样进行传输,必须对视频信号进行压缩处理之后,才能是视频信号的传输成为可能,在视频信号压缩处理中,量化与码流控制又是一个必不可少的重要环节,它直接影响图像压缩效率与主观图像质量。主观图像质量是指在一幅图像中,由于重要信息和次要信息对人视觉影响的差异带来的在人的视觉上所得到的评价。在视频信号压缩处理过程中,量化与码流控制通常采用缓存区(Buffer)控制方法,这种方法根据编码器缓冲区的充盈程度对图像进行宏块级量化参数控制,优点是实现简单,缺点是没有考虑图像具体内容信息的重要程度,容易造成对重要图像信息量化粗糙,影响图象主观质量,另外该方法还会造成码流控制的滞后,影响码流控制的效果。
压缩图像码流与压缩图像失真度之间存在一定的关系,根据率失真控制理论,即信息编成码率与允许失真度的关系的理论,人们还提出了一种量化与码率控制方法,这种方法的基本思想是在给定编码速率的情况下,通过控制量化参数,达到压缩图像的最小失真度,如ITU公布的H.263的测试模型TMN8和TMN11中提到的码流控制方法,便是这种思想在实际应用中的两个经典例子。TMN8和TMN11的优点是对码率的控制比较平稳,但它存在的缺点是在一帧内的量化参数分布不够均匀,没有考虑对人眼的视觉特点,会造成压缩图像主观质量的下降。
发明内容
本发明的目的是提供一种用于压缩图像传输的量化与码流控制方法,结合图像具体内容信息,考虑人眼的视觉需求,对一帧图像内的量化参数分布进行调整,以提高压缩图象的主观质量,并有效防止码流控制的滞后,使码流控制的效果更加理想。
为实现上述目的,本发明提出一种用于压缩图像传输的量化与码流控制方法,将缓冲区控制与率失真理论相结合,对不同特点的图像采用不同的率失真函数,同时参考人眼的视觉特性,对整帧图像量化参数分布进行调整。
本发明所述方法的处理步骤如下:
1)通过缓冲区空满状态调整当前帧预分配编码比特数;
2)根据当前图象帧的失真度与前一帧图像的失真度的比较调整当前帧平均量化值;
3)根据人眼在空间域的感官特性将帧级量化值限制在以平均量化值为中心的一区间范围内;
4)根据当前图像特点运用不同率失真函数调整宏块级量化值;
5)根据人眼对图像中心区域信息敏感特性调整图像中心区域量化值;
6)根据当前帧的平均量化值、当前帧的实际编码比特数、当前帧的实际预分配比特数预测下一帧平均量化值。
该方法简单有效,便于实现,在给定传输速率下,可使压缩图象主观质量评价显著提高,满足实际应用的需要。
附图说明
图1是采用传统编码器缓存区量化控制方法的系统框图;
图2是采用本发明所述量化与码率控制方法的系统框图
图3所示是本发明所述的量化与码率控制方法流程图。
具体实施方式
下面结合附图对本发明作进一步的详细描述。
图1所示的系统框图是传统编码器缓存区量化控制方法的框图,从图1中可以看出,该方法是根据编码器缓冲区的充盈程度在宏块级进行量化控制,并没有考虑图像具体信息的重要程度,从而极大地影响了图像的主观质量。
图2所示是图像编码系统的框图,本发明所述量化与码流控制的方法位于上述编码系统框图的量化与码率控制模块中,这一改进措施充分考虑了在一幅图像中,重要信息和次要信息对人视觉影响的差异,并且相应地加以控制,突出重要信息,提高图像质量,相应地降低对次要信息的要求,满足视觉对不同视觉信息的要求,从而在总体上实现了主观质量的提高。
图3是本发明所述的量化与码率控制方法流程图,本发明所述的量化与码流控制方法可具体依次分为帧级量化控制与宏块级量化控制两部分。
帧级量化参数控制
1通过缓冲区控制当前帧预分配编码比特数
根据缓冲区空满状态调整当前图像预分配编码比特数,本步骤一方面可有效控制信道传输延迟,另一方面可结合信道实际速率状态,调整每一帧预分配编码比特数,能够有效利用信道当前带宽。
具体实施如下:
其中:
表示在给定帧率(Frame)与码率(Rate)情况下,每一帧图像的平均编码比特数;
nDelayBufNum:编码器与信道之间的缓冲区大小;
bufoccupy:缓冲区内已编码未传送比特数。
当bufoccupy=0.1×nDelayBufNum时,即编码缓冲区充盈度为总缓冲区大小的10%时,当前帧预分配比特数
与平均编码比特数B相等;bufoccupy>0.1×nDelayBufNum时,当前帧预分配比特数
比平均编码比特数B减少,以防止编码缓冲区上溢,可有效控制编码传输延迟;bufoccupy<0.1×nDelayBufNum时,当前帧预分配比特数
比平均编码比特数B增加,以防止编码缓冲区下溢,可有效利用当前传输带宽。
2根据当前图象帧的失真度调整平均量化值
根据图像实际失真度的不同,修正平均量化值,使量化反馈快速适应具体图像失真度的要求,如果图像的失真度大则提高量化值,反之则降低量化值,保证输出码率的均匀。
具体实施公式如下:
Q←(
Q+ΔQ),对平均量化值参数
Q进一步修正;
其中:
Δ
Q:当前帧图像平均量化参数修正值;
Q:当前帧平均量化参数;
SADk:第k个宏块与运动估计匹配块的差分绝对值和(SAD);
MB:一帧图像包含的宏块数;
下标i:图像帧的序号;
当Ei>Ei-1时,即当前帧图像失真度大于前一帧图像失真度时,当前帧图像平均量化参数增加,当Ei<Ei-1时,当前帧图像平均量化参数减小,这样可以一定程度上预先保证输出码率的均匀,防止码率控制的滞后。
具体实施时,可以将以上ΔQ结果嵌位在一定的范围内,如[-1,1],从而保证帧与帧之间的量化系数不要变动得过于剧烈,避免造成图像主观质量下降。
3根据人眼在空间域的感官特性限定帧级量化值范围
考虑到人眼在空间域上对图象质量分布不均比较敏感,因此加入此步骤,保证帧内量化值变化不要过于剧烈,以提高主观图像质量。
具体实施时可以将图像宏块量化参数Q的波动范围限制在以平均量化参数
Q为中心的一个区间里,如:
Q∈[max(
Q-2,2),min(
Q+2,20)]
4根据当前帧图像的平均量化值与编码比特数预测下一帧图像平均量化值应用此步骤的目的是为了维持相邻图像帧间量化参数具有一定的继承性,从而保证时间域上图像质量的平稳过渡,提高图象主观质量。具体实施公式如下:
其中:CLIP表示嵌值操作,将
限定在(2,20)范围内;
SADtotal,MB描述同前;
在
即当前帧图像实际编码比特数大于当前帧图像实际预分配比特数
情况下,下一帧图像的预计平均量化值
Q增加,当
时,
Q减小;上述公式采用
E>1和
E≤1两种情况的目的是在图像平均失真度较大的情况下(
E>1),快速调整
Q以保证在一段时间里码率的均匀,而在图像平均失真度较小的情况下(
E≤1),慢调
Q以保证帧间量化参数变化均匀,提高主观图像质量。
宏块级量化控制
1根据当前图像特点运用率失真理论调整量化值
许多率失真控制方法均使用一种率失真函数,但事实上静止图像序列和运动图像序列的率失真函数曲线变化是不同的。
根据率失真理论,一幅图像的量化系数Q、码率B和MAD(平均绝对差)之间近似有如下关系:
其中参数a和b是模型参数;
在运动量较大的情况下,B与Q之间的反比关系强烈,微小运动或相对静止情况下,B与Q平方之间的反比关系强烈;在微小运动或相对静止情况下,一般
成立,在较大运动情况下,一般
成立。为更准确地反映这种关系,本发明在静止(或小运动)及大运动情况下分别采用不同的率失真函数来控制宏块级量化系数的改变。从而紧密结合了图像具体运动信息,在静止(或小运动)及大运动情况下,压缩图像均获得较好的主观评价。
具体实施公式如下:
Sk+1=Sk-SADk
其中,
Qk:第k个宏块量化参数;
第k个宏块实际编码比特数;
当前帧实际预分配比特数;
其他参数描述同前;
由以上实施公式可以看出,在图像平均失真度较小的情况下(
E≤1),宏块间量化参数的变动范围较小,以充分保证在小运动和静止情况下的图像主观质量,而在图像平均失真度较大的情况下(
E>1),宏块间的量化参数波动可能较大,以保证在大运动情况下编码码率的均匀,因为在大运动情况下人眼对图像的细节变化并不敏感。
2根据人眼特性细化中心区域量化值
考虑到人眼对图像中心区域质量比较敏感,因此在低码率情况下,可适当牺牲边缘区域图像质量来保证重点区域的图像效果。
具体实施时可将图像中心区域的量化参数控制在较小的范围内,而边缘区域量化参数适当放大,如:
Qcenter∈[max(
Q-2,2),min(
Q+2,20)]
Qedeg∈[
Q,20]
其中,
Qcenter:图像中心区域宏块量化参数;
Qedeg:图像边缘区域宏块量化参数。
视频信号压缩编码中,量化与码率控制是的一项重要技术,它直接影响图像压缩效率与主观图像质量。本发明所述的信号量化与控制方法可广泛应用于各种图像压缩编码标准,如H261、H263、MPEG-1、MPEG-2中,能够在有限的信道速率下传输较优的图像质量,为目前固定速率传输(如E1,V.35等)或可变速率传输(如Intranet,Internet等)下码率控制提供了较好的控制方法,具有较高的实用价值。
Claims (8)
1、一种用于压缩图像传输中的量化与码流控制方法,其特征在于包含以下步骤:
1)通过缓冲区空满状态调整当前帧预分配编码比特数;
2)根据当前图象帧的失真度与前一帧图像的失真度的比较调整当前帧平均量化值;
3)根据人眼在空间域的感官特性将帧级量化值限制在以平均量化值为中心的一区间范围内;
4)根据当前图像特点运用不同率失真函数调整宏块级量化值;
5)根据人眼对图像中心区域信息敏感特性调整图像中心区域量化值;
6)根据当前帧的平均量化值、当前帧的实际编码比特数、当前帧的实际预分配比特数预测下一帧平均量化值。
2、根据权利要求1所述的量化与码流控制方法,其特征在于,所述步骤1)中的当前帧预分配编码比特数由公式
确定,其中B为每一帧图像的平均编码比特数;
nDelayBufNum表示编码器与信道之间的缓冲区大小;
bufoccupy表示缓冲区内已编码未传送比特数。
3、根据权利要求1所述的量化与码流控制方法,其特征在于,所述步骤2)中的平均量化值由公式
确定,其中:
Δ
Q:当前帧图像平均量化参数修正值;
Q:当前帧平均量化参数;
Ei:第i帧图像的平均失真度。
4、根据权利要求1所述的量化与码流控制方法,其特征在于,所述步骤3)中的帧级量化值范围Q的波动范围进一步包括:将所述波动范围限制在以平均量化参数
Q为中心的区间里,即:Q∈[max(
Q-2,2),min(
Q+2,20)]。
7、根据权利要求2所述的量化与码流控制方法,其特征在于,所述的每一帧图像的平均编码比特数B由公式
确定,其中Frame为给定帧率,Rate为码率。
8、根据权利要求3所述的量化与码流控制方法,其特征在于,所述的第i帧图像的平均失真度由公式
确定,其中
SADk:第k个宏块与运动估计匹配块的差分绝对值和;
MB:一帧图像包含的宏块数;
下标i:图像帧的序号。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 00125624 CN1193616C (zh) | 2000-09-29 | 2000-09-29 | 一种用于图像压缩传输的量化与码流控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 00125624 CN1193616C (zh) | 2000-09-29 | 2000-09-29 | 一种用于图像压缩传输的量化与码流控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1332576A CN1332576A (zh) | 2002-01-23 |
CN1193616C true CN1193616C (zh) | 2005-03-16 |
Family
ID=4591411
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 00125624 Expired - Fee Related CN1193616C (zh) | 2000-09-29 | 2000-09-29 | 一种用于图像压缩传输的量化与码流控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN1193616C (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100358364C (zh) * | 2005-05-27 | 2007-12-26 | 上海大学 | 基于h.264的精细颗粒可伸缩编码的码率控制方法 |
CN100448297C (zh) * | 2005-11-08 | 2008-12-31 | 上海广电(集团)有限公司中央研究院 | 一种码率控制方法 |
CN100425078C (zh) * | 2005-11-08 | 2008-10-08 | 上海广电(集团)有限公司中央研究院 | 码流转换中编码速度和视频质量的自适应联合控制方法 |
CN100455024C (zh) * | 2006-05-15 | 2009-01-21 | 西安理工大学 | 基于图像块动态划分矢量量化算法的图像压缩芯片 |
CN100425079C (zh) * | 2006-08-07 | 2008-10-08 | 浙江大学 | 基于低内存消耗查询表的视频压缩码率控制方法 |
US20080225947A1 (en) * | 2007-03-13 | 2008-09-18 | Matthias Narroschke | Quantization for hybrid video coding |
US8116581B2 (en) * | 2007-06-28 | 2012-02-14 | Microsoft Corporation | Efficient image representation by edges and low-resolution signal |
CN101521819B (zh) * | 2008-02-27 | 2010-12-01 | 深圳市融创天下科技发展有限公司 | 一种在视频图像压缩中对率失真进行优化的方法 |
CN101252689B (zh) * | 2008-02-29 | 2010-08-25 | 杭州爱威芯科技有限公司 | 一种自适应的码率控制方法 |
CN101568025B (zh) * | 2009-05-18 | 2011-10-26 | 常州中流电子科技有限公司 | 码率控制中的虚拟缓冲区自适应控制方法 |
CN101854531B (zh) * | 2010-05-24 | 2013-07-31 | 镇江唐桥微电子有限公司 | 一种多通道视频联合码率控制方法 |
CN103096048B (zh) * | 2011-11-02 | 2015-11-11 | 北京大学 | 一种可伸缩视频编码量化参数确定方法及装置 |
CN106412503B (zh) * | 2016-09-23 | 2019-09-03 | 华为技术有限公司 | 图像处理方法及装置 |
WO2018068239A1 (zh) * | 2016-10-12 | 2018-04-19 | 深圳市大疆创新科技有限公司 | 码率控制的方法、计算机系统和装置 |
-
2000
- 2000-09-29 CN CN 00125624 patent/CN1193616C/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
CN1332576A (zh) | 2002-01-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1164123C (zh) | 视频编码的量化方法和装置 | |
CN1193616C (zh) | 一种用于图像压缩传输的量化与码流控制方法 | |
CN1151685C (zh) | 编码系统中用于优化速率控制的装置和方法 | |
KR101012600B1 (ko) | 화상을 기반으로 한 룩어헤드 윈도우를 이용한 레이트컨트롤 | |
CN1177480C (zh) | 编码系统中基于对象的速率控制装置和方法 | |
KR100970315B1 (ko) | 트랜스코더 및 부호화 화상 변환 방법 | |
KR100926199B1 (ko) | 레이트 제어 비디오 인코딩을 위한 적응형 프레임 스킵 기술 | |
CN106358040B (zh) | 一种基于显著性的码率控制比特分配方法 | |
CN1902939A (zh) | 数字画面序列的编码方法和解码方法以及编码设备 | |
CN1301370A (zh) | 用于减少压缩的视频中的喘息污迹的方法和设备 | |
JP2008503918A5 (zh) | ||
CN1909662A (zh) | 采用帧目标比特数不平均分配的视频压缩码率控制方法 | |
CN1738424A (zh) | 基于h.264的精细颗粒可伸缩编码的码率控制方法 | |
CN100563338C (zh) | 一种恒定码率的控制方法 | |
CN101335891A (zh) | 视频速率控制方法及视频速率控制器 | |
CN105187832B (zh) | 基于2.5g无线网络移动视频码率控制方法 | |
CN100442848C (zh) | 一种h263编码中码率的控制方法 | |
CN1870753A (zh) | 一种低复杂度的积分码率控制方法 | |
CN102724507A (zh) | 一种gpu加速编码器码率控制方法 | |
CN104270634B (zh) | 一种质量自适应的无线视频编码方法 | |
CN102427529B (zh) | 视频编码压缩方法 | |
KR100543608B1 (ko) | 오브젝트 기반 비트율 제어방법 및 장치 | |
CN1917646A (zh) | 基于低内存消耗查询表的视频压缩码率控制方法 | |
CN100563336C (zh) | 一种基于手机电视的恒定码率控制方法 | |
CN112243126A (zh) | 一种结合视频特性的hevc自适应量化参数优化方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C06 | Publication | ||
PB01 | Publication | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20050316 Termination date: 20140929 |
|
EXPY | Termination of patent right or utility model |