CN101257628B - 一种实现视频码流帧率可调整的压缩方法 - Google Patents

一种实现视频码流帧率可调整的压缩方法 Download PDF

Info

Publication number
CN101257628B
CN101257628B CN 200810047101 CN200810047101A CN101257628B CN 101257628 B CN101257628 B CN 101257628B CN 200810047101 CN200810047101 CN 200810047101 CN 200810047101 A CN200810047101 A CN 200810047101A CN 101257628 B CN101257628 B CN 101257628B
Authority
CN
China
Prior art keywords
frame
image
reference frame
size
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN 200810047101
Other languages
English (en)
Other versions
CN101257628A (zh
Inventor
胡瑞敏
王启军
牟晓弦
刘琼
屠增辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan University WHU
Original Assignee
Wuhan University WHU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan University WHU filed Critical Wuhan University WHU
Priority to CN 200810047101 priority Critical patent/CN101257628B/zh
Publication of CN101257628A publication Critical patent/CN101257628A/zh
Application granted granted Critical
Publication of CN101257628B publication Critical patent/CN101257628B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明提供实现视频码流帧率可调整的压缩方法,压缩图像的类型分I帧、non-I帧、P帧、non-P帧以及B帧,在解码过程中,类型为工帧或者P帧的各帧图像的时域层次以单位组大小为周期变化;编码中,先按待编码的当前帧图像编码顺序确定当前帧图像的时域层次,然后按照参考帧选取策略获得当前帧图像的参考帧图像,对当前帧图像编码,编码完成后按照参考帧更新策略更新参考帧缓存;解码中,按待解码的当前帧图像解码顺序确定当前帧图像的时域层次,按照参考帧选取策略获得当前帧图像的参考帧图像,对当前帧图像解码,解码完成后按照参考帧更新策略更新参考帧缓存。本发明使得压缩后的码流具有帧率可调整的功能,能够适应不同网络的传输和不同终端设备的显示。

Description

一种实现视频码流帧率可调整的压缩方法
技术领域
本发明属于视频技术领域,特别涉及一种实现视频码流帧率可调整的压缩方法。
背景技术
运动图像的每帧之间具有很强的相似性,所以在视频压缩过程中,采用运动估计和运动补偿的方式来消除帧间的信息冗余,达到压缩的目的。在这个过程中,被用来做运动估计的图像被称为参考帧图像,通常简称为参考帧。由于压缩过程中各帧环环相扣、互为参考,导致任何一帧都不能随意丢弃,只能按照随机访问点之前的顺序进行丢帧,否则就会产生预测误差,后续图像不能正确解码,如图2所示:虚线处为一随机访问点,当解码位置在此时,可正确解码图像,在丢帧过程中只有按照箭头的方向实现丢帧,才能不会产生解码错误。
视频压缩的时域可分级性目的就是使码流具有帧率的可变性,一些帧可以在分发过程中丢弃,以满足不同的网络情况和不同的终端设备解码和显示需要。目前实现时域可分级的技术主要是帧间小波技术和分级预测技术,帧间小波技术也就是基于运动补偿的时域滤波技术(MCTF,Motion-Compensated TemporalFiltering),这种技术通过在时域上引入小波分解,得到视频在时域上的多分辨率分析,进而实现视频在时域上的可分级。MCTF在其发展中,逐渐形成了两种实现方式,即基于块位移的MCTF和基于提升算法的MCTF。基于块位移的MCTF首先不能很好的获取编码图像运动场的信息,导致在编码图像和参考帧之间一定数量的像素被标记成“unconnected”,影响了编码效率;其次,亚像素精度的运动估计和运动补偿以及除Haar小波外的其他小波很难在其编码框架内实现,极大影响了编码的灵活性和编码效率。基于提升方案的帧间小波技术现在使用广泛,现在有多种基于此的编码器如MC-EZBC,3D-SPIHT等,但是与基于运动预测-变换的混合编码方式相比,其编码效率不高。
而分级预测技术则是将编码序列分层若干组相间的图像,同一组的图像具有相同的时域层次,而不同组的图像的时域层次则不相同,高时域层次的图像只能够参考低时域层次的图像。采用这种方式如H.264SVC中的分层B帧技术。但是分层B帧技术的分层机制是基于B帧的层次性,而B帧会带来一定的时延,所以在低时延的应用中,该技术并不可取。而且H.264 SVC的分层B帧技术的参考帧管理方式是通过内存标记管理策略实现,实现过程复杂,在对计算复杂度要求比较严格的应用中,该技术的使用也会受到限制。
视频时域分级编码可以使码流具有帧率调整的功能,而这种功能在实际应用中具有重要的意义。例如在监控应用中,随着移动通信技术的不断发展,基于移动通信网络的视频监控应用会使用的越来越广泛,但是,现在已经部署的2.5G的分组移动通信网络CDMA1X和GPRS的带宽均有限,经测试:CDMA1X的终端的平均下载速度可以达到40Kbps到80Kbps。而GPRS终端的平均下载速度只能达到20Kbps,且带宽波动性较大;在移动的环境,由于终端功率消耗的限制,对单位时间内处理视频的帧数也有比较严格的限制,因此,针对基于移动通信网及其终端设备的监控系统,其所使用的视频编码后的码流应具有帧率可调整的功能,而且在中国AVS标准工作组的“面向安防监控的音视频标准的需求”(N1400)中明确提出面向监控应用的音视频标准“能适应多种网络的情况,包括专网、互联网、无线网络等的传输”。
因此,针对现有视频压缩技术不足,提出更适合异构网络传输和显示的高效视频压缩方法,成为本领域亟待解决的问题。
发明内容
本发明目的在于提供一种实现视频码流帧率可调整的压缩方法,使得压缩后的码流具有帧率可调整的功能,能够适应不同网络的传输和不同终端设备的显示。
本发明的技术方案将压缩图像的类型分为帧内编码帧、非参考帧内编码帧、前向预测帧、非参考前向预测帧以及双向参考帧,在编解码过程中,类型为帧内编码帧或者前向预测帧的各帧图像的时域层次以单位组大小为周期进行变化,
编码过程中,先按待编码的当前帧图像编码顺序确定当前帧图像的时域层次,然后按照参考帧选取策略获得当前帧图像的参考帧图像,对当前帧图像进行编码,编码完成后按照参考帧更新策略更新参考帧缓存,
所述当前帧图像的时域层次根据单位组大小确定,如果当前帧图像的类型是非参考帧内编码帧或者双向参考帧,则其时域层次默认为最高时域层次;
解码过程中,先按待解码的当前帧图像解码顺序确定当前帧图像的时域层次,然后按照参考帧选取策略获得当前帧图像的参考帧图像,对当前帧图像进行解码,解码完成后按照参考帧更新策略更新参考帧缓存,
所述当前帧图像的时域层次确定方法为,通过对已解码的帧内编码帧和前向预测帧计数来映射出当前帧图像的时域层次,如果当前帧图像是非参考前向预测帧或者双向参考帧,则其时域层次默认为最高时域层次;
编解码过程中所述参考帧选取策略为,从参考帧缓存中选取与当前帧图像时域层次相等或比当前帧图像时域层次低的图像为参考帧图像;
编解码过程中所述参考帧更新策略为,在对帧内编码帧和前向预测帧完成编码或者解码后,对参考帧缓存进行更新,对其余类型的帧进行编码或者解码后,不更新参考帧缓存,所述更新的具体规则为,如果当前参考帧缓存中的参考帧数目小于指定的最大参考帧数目时,则直接将该帧放入参考帧缓存中;如果当前参考帧缓存中的参考帧数目等于指定的最大参考帧数目时,则移除参考帧缓存中与该帧时域层次相等并且显示顺序最早的那一帧,将该帧放入参考帧缓存中。
而且,在编码过程中,所述根据单位组大小确定当前帧图像时域层次的具体过程为,
单位组大小标记为unit_size;初始化一大小为单位组大小的数组level,在该数组中,将所有数组序号为奇数的数组值设为log2(unit_size),所有数组序号为2的整数倍的数组值设为log2(unit_size)-1,将所有数组序号为4的整数倍的数组值设为log2(unit_size)-2,直到将所有数组序号为unit_size的整数倍的数组值设为0为止;如果当前帧图像为帧内编码帧或者前向预测帧,则其时域层次为level[x%unit_size],其中x为当前帧图像的序号,如果当前帧图像为非参考帧内编码帧或者双向参考帧,则当前帧图像时域层次为log2(unit_size)。
而且,在解码过程中,所述根据单位组大小确定当前帧图像帧时域层次的具体过程为,
单位组大小标记为unit_size;初始化一大小为单位组大小的数组level,在该数组中,将所有数组序号为奇数的数组值设为log2(unit_size),所有数组序号为2的整数倍的数组值设为log2(unit_size)-1,将所有数组序号为4的整数倍的数组值设为log2(unit_size)-2,直到将所有数组序号为unit_size的整数倍的数组值设为0为止;如果当前帧图像为帧内编码帧或者前向预测帧,则其时域层次为level[x%unit_size],其中x为已解码参考帧图像的计数,如果当前帧图像为非参考前向预测帧或者双向参考帧,则当前帧图像的时域层次为log2(unit_size)。
而且,当编码单位组大小为2时,采用低延时模式,即没有双向参考帧,在两个参考帧之间插入1个非参考帧内编码帧,则显示顺序号为0的当前帧时域层次为0,显示顺序号为1的当前帧时域层次为1,而非参考帧内编码帧的时域层次也为1。
而且,当限制编解码端参考帧缓存最多缓存2帧,限制当前帧图像运动预测和补偿的参考帧数目最多为2帧时,采用就近搜索方法来获取一个或两个前向参考帧,所述就近搜索方法过程如下,
步骤一,搜索时域层次低于或等于当前帧图像的参考帧;
步骤二,根据步骤一搜索结果选择最接近当前帧图像的一个或两个前向参考帧作为参考帧,当步骤一搜索结果有一个前向参考帧时采用该帧,当步骤一搜索结果有二个前向参考帧时采用这两个帧作为参考帧。
而且,对当前帧图像进行编码或者解码后,对参考帧缓存进行更新的方式为,
当参考帧缓存未填满时,按照编码顺序将当前帧图像的重建图像按缓存中的编号依次存入参考帧缓存中,直至将其填满;
当参考帧缓存已填满时,重建图像替代参考帧缓存中的某一帧,被替代帧的时域层次等于重建图像所在的时域层次且被替代帧的显示顺序号为参考帧缓存内所有参考帧中最小的。
而且,在编码生成的压缩码流中,在序列头记录单位组大小,在帧内编码帧、非参考帧内编码帧、前向预测帧和非参考前向预测帧的图像头设置表明是否为参考帧图像的标志。
本发明与现有技术相比,具有以下的主要优点:通过对帧内编码帧、非参考帧内编码帧进行分级实现视频码流帧率可调整的功能,而不是基于双向参考帧的层次性,因此降低时延;其参考帧缓存管理方式简单易行,能够满足低时延、低带宽、低功耗等应用场合的使用要求;时域层次由设定的单位组大小自行得到,在压缩码流中不需要写入时域层次的元素,节省了码率。本发明特别适合于在一些特定应用场景下,如视频监控应用中,提高压缩的性能。
附图说明
图1为本发明实施例的P帧时域层次分级的结构示意图;
图2为现有技术中IPPP…结构实现帧率调整的方案示意图;
图3为本发明实施例与现有技术的率失真曲线图。
具体实施方式
本发明将压缩图像的类型分为帧内编码帧(简称I帧)、非参考帧内编码帧(简称non-I帧)、前向预测帧(简称P帧)、非参考前向预测帧(简称non-P帧)以及双向参考帧(简称B帧)。I帧、P帧、B帧是视频领域的常用术语,本发明提出non-I帧、non-P帧,由于其不参与后续帧的预测过程、并且时域层次最高,可在帧率调整过程中首先被丢弃。在编解码过程中,类型为I帧或者P帧的各帧图像的时域层次以单位组大小为周期进行变化,作为分级实现视频码流帧率可调整的基础,而没有采用B帧。参见图1,实施例中的单位组大小unit_size为4,按编码顺序012345排列的一段待编码帧图像IPPPPP,映射成的时域层次为021202,映射关系参见箭头指向。具体实施时,unit_size可由操作人员事先根据需要设定数值。压缩方法的基本实现方式,有编码和相应解码两个方面:编码过程中,先按待编码的当前帧图像编码顺序确定当前帧图像的时域层次,然后按照参考帧选取策略获得当前帧图像的参考帧图像,然后对当前帧图像进行编码,编码完成后按照参考帧更新策略更新参考帧缓存。解码过程中,先按待解码的当前帧图像解码顺序确定当前帧图像的时域层次,然后按照参考帧选取策略获得当前帧图像的参考帧图像,对当前帧图像进行解码,解码完成后按照参考帧更新策略更新参考帧缓存。
本发明的关键改进处在于以下三点:
(1)编码时,所述当前帧图像的时域层次根据单位组大小确定,如果是当前帧图像的类型是non-P帧或者B帧,则其时域层次默认为最高时域层次;解码时所述当前帧图像的时域层次确定方法为,通过对已解码的I帧和P帧计数来映射出当前帧图像的时域层次,如果当前帧图像是non-P帧或者B帧,则其时域层次默认为最高时域层次。因为I帧或者P帧的各帧图像的时域层次以单位组大小为周期进行变化,确定当前帧图像的时域层次有章可循。
(2)编解码过程中所述参考帧选取策略为,从参考帧缓存中选取与当前帧图像时域层次相等或比当前帧图像时域层次低的图像为参考帧。不采用时域层次高的图像为参考帧可以降低时延。
为肋降低复杂度,可以规定参考帧缓存的内存大小。当限制编解码端参考帧缓存最多缓存2帧,限制当前帧图像运动预测和补偿的参考帧数目最多为2帧时,采用就近搜索方法来获取一个或两个前向参考帧,所述就近搜索方法过程如下,
步骤一,搜索时域层次低于或等于当前帧图像的参考帧;
步骤二,根据步骤一搜索结果选择最接近当前帧图像的一个或两个前向参考帧作为参考帧,当步骤一搜索结果有一个前向参考帧时采用该帧,当步骤一搜索结果有二个前向参考帧时采用这两个帧作为参考帧。
(3)编解码过程中所述参考帧更新策略为,在对I帧和P帧完成编码或者解码后,对参考帧缓存进行更新,对其余类型的帧进行编码或者解码后,不更新参考帧缓存。具体更新的规则为:如果当前参考帧缓存中的参考帧数目小于指定的最大参考帧数目时,则直接将该帧放入参考帧缓存中;如果当前参考帧缓存中的参考帧数目等于指定的最大参考帧数目时,则移除参考帧缓存中与该帧时域层次相等并且显示顺序最早的那一帧,将该帧放入参考帧缓存中。“该帧”是指需要将其重构图像缓存到参考帧缓存中的当前帧图像的重构图像帧。具体实施时,对当前帧图像进行编码或者解码后,对参考帧缓存进行更新的方式可以为:当参考帧缓存未填满时,按照编码顺序将当前帧图像的重建图像按缓存中的编号依次存入参考帧缓存中,直至将其填满;当参考帧缓存已填满时,重建图像替代参考帧缓存中的某一帧,被替代帧的时域层次等于重建图像所在的时域层次且被替代帧的显示顺序号为参考帧缓存内所有参考帧中最小的。
只通过一个是否为参考帧的图像头标志位就能实现缓存中参考帧的更新,简洁、灵活、易于实现。因此,本发明提出在编码生成的压缩码流中,在序列头记录单位组大小,在帧内编码帧、非参考帧内编码帧、前向预测帧和非参考前向预测帧的图像头设置表明是否为参考帧图像的标志。
本发明提出一种优选实施方案:采用低延时的编码方式,即没有B帧,每两个参考帧之间插入一个non-P帧。则显示顺序号为0的当前时域层次level[0]为0,显示顺序号为1的当前时域层次level[1]为1,而non-P帧的时域层次也为1。因此,编码中各帧时域层次是按照以2×unit_size为周期进行变化,限制当前帧图像的参考帧数目最多为两帧,参考帧缓存中所存的参考帧数目num:
num = 2 if log 2 ( unit _ size ) ≤ 1 log 2 ( unit _ size )
也就是说限制当前帧图像运动预测和补偿的参考帧数目最多为2帧。
本发明提供了具体实施例的详细步骤,以便实施参考,实现自动化压缩处理:
1.在编码端采用包括以下步骤的方法:
(11)检查配置文件中关于时域可分级参数设置的合法性:
具体unit_size的大小是否为2的整数次幂,如果检查出参数设置不合法,那么编码器退出。
(12)计算待编码当前帧图像的时域层次。根据单位组大小(unit_size)确定当前帧图像时域层次,具体过程为:如果当前帧图像为第一个编码帧,则初始化一大小为单位组大小的数组level,在该数组中,将所有数组序号为奇数的数组值设为log2(unit_size),所有数组序号为2的整数倍的数组值设为log2(unit_size)-1,将所有数组序号为4的整数倍的数组值设为log2(unit_size)-2,直到将所有数组序号为unit_size的整数倍的数组值设为0为止;如果当前帧图像类型为I帧或者P帧,则其时域层次为level[x%unit_size],其中x为当前帧图像的序号,如果当前帧图像为non-P帧,则当前帧图像的时域层次为log2(unit_size)。
(13)获取待编码当前帧图像的参考帧:
如果当前是I帧,则不存在参考帧,直接执行现存标准中的帧内编码过程;如果当前帧图像是P帧,则其参考帧为满足条件的一个或两个前向参考帧:一、其时域层次低于或等于当前帧图像;二、其显示顺序为最接近当前帧图像的显示顺序。
即以当前编码帧为起点,向前搜索图像组重建图像数组与当前编码帧距离最近的而且时域层次低于或等于当前帧图像的一个或两个图像作为当前帧图像的参考帧。
(14)写入码流,对当前帧图像进行运动预测和运动补偿、离散余弦变换、量化、对残差信息以及参考帧索引和运动向量进行熵编码,这个过程与非可分级视频编码过程一样。写入码流时,如果当前帧图像为non-P帧或者non-I帧,则写入非参考帧图像标志位。如果为I帧或者P帧,则写入参考帧图像标志位。
(15)进行参考帧缓存更新。在对I帧和P帧完成编码后,需要对参考帧缓存进行更新,对其余类型的帧进行编码后,不需要更新参考帧缓存。具体更新的规则是:如果当前参考帧缓存中的参考帧数目小于指定的最大参考帧数目时,则直接将该帧放入参考帧缓存中;如果当前参考帧缓存中的参考帧数目等于指定的最大参考帧数目时,则移除参考帧缓存中与该帧时域层次相等并且显示顺序最早的那一帧,将该帧放入参考帧缓存中。
(16)保存重建图像,到(12)开始下一帧编码。
2.在解码端采用包括以下步骤的方法:
(21)读取unit_size大小,并检查其合法性
具体unit_size的大小是否为2的整数次幂,如果检查出参数设置不合法,那么程序退出。
(22)计算待解码的当前帧图像时域层次。
根据单位组大小(unit_size)确定当前帧图像的时域层次,具体过程为:如果当前帧图像是第一个解码帧,则初始化一大小为单位组大小的数组level,在该数组中,将所有数组序号为奇数的数组值设为log2(unit_size),所有数组序号为2的整数倍的数组值设为log2(unit_size)-1,将所有数组序号为4的整数倍的数组值设为log2(unit_size)-2,直到将所有数组序号为unit_size的整数倍的数组值设为0为止;从该帧码流中读取是否为参考帧图像的标志位,获取当前帧图像是否为参考帧图像的信息,如果当前帧图像是参考帧图像,则其时域层次为level[x%unit_size],其中x为参考帧图像的计数(即在图像头中含有参考帧图像标志位的图像的总数),如果当前帧图像为非参考帧图像,则当前帧图像的时域层次为log2(unit_size)。
(23)获取当前帧图像的参考帧:
如果当前帧图像是I帧,则不存在参考帧,直接执行现存标准中的帧内解码过程;如果当前帧图像是P帧,则其参考帧为满足条件的一个或两个前向参考帧:一、其时域层次低于或等于当前帧图像;二、其显示顺序为最接近当前帧图像的显示顺序。
即以当前帧图像为起点,向前搜索图像组重建图像数组与当前帧图像距离最近的而且时域层次低于或等于当前帧图像的一个或两个图像作为当前帧图像的参考帧。
(24)对当前帧图像进行熵解码、反量化、反离散余弦变换和运动补偿,这个过程与非可分级视频解码过程一样。
(25)进行参考帧缓存更新。如果当前帧图像为参考帧图像,需要对参考帧缓存进行更新,如果当前帧图像不为参考帧图像,不需要更新参考帧缓存。具体更新的规则是:如果当前参考帧缓存中的参考帧数目小于指定的最大参考帧数目时,则直接将该帧放入参考帧缓存中;如果当前参考帧缓存中的参考帧数目等于指定的最大参考帧数目时,则移除参考帧缓存中与该帧时域层次相等并且显示顺序最早的那一帧,将该帧放入参考帧缓存中。
(26)输出图像,到(22)开始下一帧解码。
为了说明本发明效果,参见附图3:横坐标为码率,纵坐标为峰值信噪比,对典型的序列night_static(帧率30HZ),与IPPP…结构的传统压缩方式相比,在同等码率下,本发明对图像进行编码后峰值信噪比有0.125dB的提高。

Claims (5)

1.一种实现视频码流帧率可调整的压缩方法,其特征在于:将压缩图像的类型分为帧内编码帧、非参考帧内编码帧、前向预测帧、非参考前向预测帧以及双向参考帧,在编解码过程中,类型为帧内编码帧或者前向预测帧的各帧图像的时域层按周期进行变化,周期大小为单位组;
编码过程中,先按待编码的当前帧图像编码顺序确定当前帧图像的时域层次,然后按照参考帧选取策略获得当前帧图像的参考帧图像,对当前帧图像进行编码,编码完成后按照参考帧更新策略更新参考帧缓存,
所述当前帧图像的时域层次根据单位组大小确定,如果当前帧图像的类型是非参考帧内编码帧或者双向参考帧,则其时域层次默认为最高时域层次;在所述根据单位组大小确定当前帧图像时域层次的具体过程为,单位组大小标记为unit_size;初始化一大小为单位组大小的数组level,在该数组中,将所有数组序号为奇数的数组值设为log2(unit_size),所有数组序号为2的整数倍的数组值设为log2(unit_size)-1,将所有数组序号为4的整数倍的数组值设为log2(unit_size)-2,直到将所有数组序号为unit_size的整数倍的数组值设为0为止;如果当前帧图像为帧内编码帧或者前向预测帧,则其时域层次为level[x%unit_size],其中x为当前帧图像的序号,如果当前帧图像为非参考帧内编码帧或者双向参考帧,则当前帧图像时域层次为log2(unit_size);
解码过程中,先按待解码的当前帧图像解码顺序确定当前帧图像的时域层次,然后按照参考帧选取策略获得当前帧图像的参考帧图像,对当前帧图像进行解码,解码完成后按照参考帧更新策略更新参考帧缓存,
所述当前帧图像的时域层次确定方法为,通过对已解码的帧内编码帧和前向预测帧计数来映射出当前帧图像的时域层次,如果当前帧图像是非参考前向预测帧或者双向参考帧,则其时域层次默认为最高时域层次;具体映射方式为,根据单位组大小unit_size确定当前帧图像时域层次,如果当前帧图像为第一个编码帧,则初始化一大小为单位组大小的数组level,在该数组中,将所有数组序号为奇数的数组值设为log2(unit_size),所有数组序号为2的整数倍的数组值设为log2(unit_size)-1,将所有数组序号为4的整数倍的数组值设为log2(unit_size)-2,直到将所有数组序号为unit_size的整数倍的数组值设为0为止;如果当前帧图像类型为I帧或者P帧,则其时域层次为level[x%unit_size],其中x为当前帧图像的序号,如果当前帧图像为non-P帧,则当前帧图像的时域层次为log2(unit_size);
编解码过程中所述参考帧选取策略为,从参考帧缓存中选取与当前帧图像时域层次相等或比当前帧图像时域层次低的图像为参考帧图像;
编解码过程中所述参考帧更新策略为,在对帧内编码帧和前向预测帧完成编码或者解码后,对参考帧缓存进行更新,对其余类型的帧进行编码或者解码后,不更新参考帧缓存,所述更新的具体规则为,对当前帧图像进行编码或者解码后,对参考帧缓存进行更新的方式为,当参考帧缓存未填满时,按照编码顺序将当前帧图像的重建图像按缓存中的编号依次存入参考帧缓存中,直至将其填满;当参考帧缓存已填满时,重建图像替代参考帧缓存中的某一帧,被替代帧的时域层次等于重建图像所在的时域层次且被替代帧的显示顺序号为参考帧缓存内所有参考帧中最小的。
2.根据权利要求1所述的实现视频码流帧率可调整的压缩方法,其特征在于:在解码过程中,所述根据单位组大小确定当前帧图像帧时域层次的具体过程为,单位组大小标记为unit_size;初始化一大小为单位组大小的数组level,在该数组中,将所有数组序号为奇数的数组值设为log2(unit_size),所有数组序号为2的整数倍的数组值设为log2(unit_size)-1,将所有数组序号为4的整数倍的数组值设为log2(unit_size)-2,直到将所有数组序号为unit_size的整数倍的数组值设为0为止;如果当前帧图像为帧内编码帧或者前向预测帧,则其时域层次为level[x%unit_size],其中x为已解码参考帧图像的计数,如果当前帧图像为非参考前向预测帧或者双向参考帧,则当前帧图像的时域层次为log2(unit_size)。
3.根据权利要求1所述的实现视频码流帧率可调整的压缩方法,其特征在于:当编码单位组大小为2时,采用低延时模式,即没有双向参考帧,在两个参考帧之间插入1个非参考帧内编码帧,则显示顺序号为0的当前帧时域层次为0,显示顺序号为1的当前帧时域层次为1,而非参考帧内编码帧的时域层次也为1。
4.根据权利要求1所述的实现视频码流帧率可调整的压缩方法,其特征在于:当限制编解码端参考帧缓存最多缓存2帧,限制当前帧图像运动预测和补偿的参考帧数目最多为2帧时,采用就近搜索方法来获取一个或两个前向参考帧,所述就近搜索方法过程如下,
步骤一,搜索时域层次低于或等于当前帧图像的参考帧;
步骤二,根据步骤一搜索结果选择最接近当前帧图像的一个或两个前向参考帧作为参考帧,当步骤一搜索结果有一个前向参考帧时采用该帧,当步骤一搜索结果有二个前向参考帧时采用这两个帧作为参考帧。
5.根据权利要求1或2或3或4所述的实现视频码流帧率可调整的压缩方法,其特征在于:在编码生成的压缩码流中,在序列头记录单位组大小,在帧内编码帧、非参考帧内编码帧、前向预测帧和非参考前向预测帧的图像头设置表明是否为参考帧图像的标志。
CN 200810047101 2008-03-20 2008-03-20 一种实现视频码流帧率可调整的压缩方法 Expired - Fee Related CN101257628B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200810047101 CN101257628B (zh) 2008-03-20 2008-03-20 一种实现视频码流帧率可调整的压缩方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200810047101 CN101257628B (zh) 2008-03-20 2008-03-20 一种实现视频码流帧率可调整的压缩方法

Publications (2)

Publication Number Publication Date
CN101257628A CN101257628A (zh) 2008-09-03
CN101257628B true CN101257628B (zh) 2010-06-02

Family

ID=39892044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200810047101 Expired - Fee Related CN101257628B (zh) 2008-03-20 2008-03-20 一种实现视频码流帧率可调整的压缩方法

Country Status (1)

Country Link
CN (1) CN101257628B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8872812B2 (en) * 2009-11-12 2014-10-28 Marvell World Trade Ltd. Power saving in mobile devices by optimizing frame rate output
CN103024327B (zh) * 2011-09-28 2015-12-09 中磊电子(苏州)有限公司 视频录制方法及视频录制装置
CN103796021B (zh) * 2012-10-29 2018-03-16 浙江大学 视频编解码方法及装置
CN103873872B (zh) * 2012-12-13 2017-07-07 联发科技(新加坡)私人有限公司 参考图像管理方法及装置
CN103338351A (zh) * 2013-06-05 2013-10-02 深圳市宏电技术股份有限公司 一种使用无线网络监控视频数据上传的方法、装置及系统
CN104243988B (zh) * 2013-06-14 2019-11-12 浙江大学 视频编解码方法及装置、传输视频码流的方法
CN104754345B (zh) * 2013-12-27 2019-01-04 展讯通信(上海)有限公司 视频编码方法及视频编码器
CN104270649B (zh) 2014-10-28 2019-01-22 中磊电子(苏州)有限公司 影像编码装置及影像编码方法
CN104469369B (zh) * 2014-11-17 2017-10-31 何震宇 一种利用解码端信息提高svc性能的方法
CN105100799B (zh) * 2015-04-25 2018-07-31 芯原微电子(北京)有限公司 一种减少hevc编码器中帧内编码时延的方法
CN107027052B (zh) * 2017-02-28 2019-11-08 青岛富视安智能科技有限公司 Svc视频自适应降帧率的方法及系统
CN107123078A (zh) * 2017-04-25 2017-09-01 北京小米移动软件有限公司 显示图像的方法及装置
CN107426567B (zh) * 2017-05-19 2019-11-15 西安电子科技大学 基于编码顺序已知图像集的多参考图像确定方法
CN107623852B (zh) * 2017-09-12 2020-02-14 童剑军 一种对数字视频信号进行编码及降帧的方法及装置
CN110945872A (zh) * 2018-08-01 2020-03-31 深圳市大疆创新科技有限公司 视频处理设备和方法
CN110351576B (zh) * 2019-07-15 2021-11-05 华瑞新智科技(北京)有限公司 一种在工业场景下进行实时视频流快速显示的方法及其系统
CN112351285B (zh) * 2020-11-04 2024-04-05 北京金山云网络技术有限公司 视频编码、解码方法和装置、电子设备和存储介质
CN114979772B (zh) * 2021-02-24 2023-05-12 腾讯科技(深圳)有限公司 解码器的配置方法、装置、介质以及电子设备
CN113301332A (zh) * 2021-04-12 2021-08-24 阿里巴巴新加坡控股有限公司 视频解码方法、系统和介质
CN114205615B (zh) * 2021-12-03 2024-02-06 北京达佳互联信息技术有限公司 解码图像缓存区的管理方法和装置
WO2023246936A1 (zh) * 2022-06-24 2023-12-28 杭州海康威视数字技术股份有限公司 一种图像处理方法、装置及设备
CN115396672B (zh) * 2022-08-25 2024-04-26 广东中星电子有限公司 比特流存储方法、装置、电子设备和计算机可读介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1538566A2 (en) * 2003-12-01 2005-06-08 Samsung Electronics Co., Ltd. Method and apparatus for scalable video encoding and decoding
CN101047860A (zh) * 2006-03-27 2007-10-03 华为技术有限公司 交织模式下的视频分层编码方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1538566A2 (en) * 2003-12-01 2005-06-08 Samsung Electronics Co., Ltd. Method and apparatus for scalable video encoding and decoding
CN101047860A (zh) * 2006-03-27 2007-10-03 华为技术有限公司 交织模式下的视频分层编码方法

Also Published As

Publication number Publication date
CN101257628A (zh) 2008-09-03

Similar Documents

Publication Publication Date Title
CN101257628B (zh) 一种实现视频码流帧率可调整的压缩方法
CN101222630B (zh) 一种实现实时双帧参考的时域可分级视频编码方法
CN101010964B (zh) 在可分级视频编码中的使用帧速率上变换技术的方法与设备
CN101742321B (zh) 基于图层分解的视频编、解码方法及装置
CN107529704B (zh) 解码器、解码和编码视频的方法
CN101282479B (zh) 基于感兴趣区域的空域分辨率可调整编解码方法
CN102065302B (zh) 一种基于h.264的可伸缩视频编码方法
CN104243997B (zh) 一种质量可分级hevc视频编码方法
CN101015215A (zh) 用于在视频编码解码器中实施快速模式决策的方法及设备
CN101198064A (zh) 一种分辨率分层技术中的运动矢量预测方法
CN105325004A (zh) 基于用信号传输样点自适应偏移参数的视频编码方法和设备以及视频解码方法和设备
CN104683811A (zh) 一种基于整数dct系数调制的信息隐藏及提取方法
CN101835042A (zh) 基于无反馈速率控制的Wyner-Ziv视频编码系统及方法
CN102685500B (zh) 基于信息变长分组结构的h.264大容量信息隐藏方法
CN107277537B (zh) 一种基于时间相关性的分布式视频压缩感知采样方法
CN104219522A (zh) 一种视频图像编码中的码率控制方法及装置
CN101018334A (zh) 一种快速实现双帧参考视频流的时域可伸缩编码的方法
CN108989802A (zh) 一种利用帧间关系的hevc视频流的质量估计方法及系统
Pan et al. Frame-level Bit Allocation Optimization Based on<? brk?> Video Content Characteristics for HEVC
CN102572428B (zh) 面向多媒体传感网分布式编解码的边信息估计方法
CN102857760B (zh) 一种无反馈的优化码率的分布式视频编解码方法及其系统
CN102595132A (zh) 一种应用于无线传感器网络的分布式视频编解码方法
CN104113761A (zh) 一种视频编码中的码率控制方法及编码器
CN105120276A (zh) 自适应Motion JPEG编码方法和系统
CN101179729A (zh) 一种基于帧间模式统计分类的h.264宏块模式选择方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20100602

Termination date: 20150320

EXPY Termination of patent right or utility model