CN1568621A - 混合时域信噪比细粒视频编码中的传输控制方法 - Google Patents
混合时域信噪比细粒视频编码中的传输控制方法 Download PDFInfo
- Publication number
- CN1568621A CN1568621A CNA028203356A CN02820335A CN1568621A CN 1568621 A CN1568621 A CN 1568621A CN A028203356 A CNA028203356 A CN A028203356A CN 02820335 A CN02820335 A CN 02820335A CN 1568621 A CN1568621 A CN 1568621A
- Authority
- CN
- China
- Prior art keywords
- reinforced layer
- layer frame
- quality
- measured value
- time domain
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
- H04N19/29—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
在细粒视频编码系统中,提出了一种确定一帧内SNR编码和时域编码视频数据的传输位数,以平衡图像质量和对象运动。根据本发明的原理,确定质量强化视频帧和时域强化视频帧在已知比特率下的传输位数,以平衡图像质量和对象运动平滑度。本发明一方面,通过将质量强化视频帧中的视频编码信息测量值与质量强化视频帧和时域强化视频帧中的视频编码信息测量值之间的比率和已知域值相比较。然后当该比率超过已知域值时,使用第一方法确定每个加强层中的传输位数,否则使用第二方法。本发明另一方面,通过首先确定运动活动性和复杂度的测量值来确定位数。当运动活动性低于已知测量值或者复杂度超过已知域值时,使用第一方法310确定传输位数。否则使用第二方法320来确定每个加强层中的传输位数。
Description
技术领域
一般而言,本发明涉及视频编码,更具体地说,涉及确定传输数据位的数量,以平衡图像质量和运动平滑度。
技术领域
正如美国专利申请PHA23,725中所描述的那样,细粒可量测性(FGS)视频编码的灵活性使之能支持的传输带宽范围很大,该专利申请名为″System and Method for Improved Fine Granular ScalableVideo Using Base Layer Coding Information″,于1999年7月6日提出,并转让给此处的受让人。在美国专利申请序列号PHA23,582中公开了一种改进了的FGS视频编码方法,该专利申请名为″HybridTemporal-SNR Fine Granular Scalability Video Coding″,于2000年7月9日提出,并转让给此处的受让人。在公开的混合时域SNR(信噪比)FGS视频编码方法中,编码器可用来将视频图像编码成SNR FGS唯一格式或者混合时域SNR FGS格式。判断在一帧中是传输唯一的SNR(即质量)FGS编码视频数据,还是传输混合时域SNR编码视频数据。在前一种情况下,所有可用的带宽都由有助于图像质量的数据位使用,从而传输高质量的图像,而后一种情况下,可用带宽由增加图像质量的数据位和平滑对象运动的数据位占用。当以高质量的第一种模式传输编码的视频图像时,帧内对象展现出“不稳定(jerky)”运动,而以第二种模式传输的编码视频图像的质量较差。该方法的缺点在于一旦模式选定,在传输过程中选定的模式不会改变。因此,当选择第二种模式时,即使帧间没有对象运动,也传输较差质量的图像。
由于没有使传输模式适应视频图像,因此使用传输模式选定方法不能有效地使用可用网络带宽。
因此需要一种方法或系统来确定一种传输模式,该传输模式能够有效利用和适应传输带宽和帧与帧间的图像运动变化,以平衡接收的图像质量和图像对象运动平滑度。
在细粒视频编码系统中,存在一种用来确定时域加强视频数据和编码SNR的传输位数,以平衡图像质量和对象运动的方法。依照本发明的原理,通过将质量强化帧数据的测量值与质量强化帧数据和时域强化帧数据的测量值的比率与一已知域值相比较,可以从一个方面确定在一已知的比特率下每一个质量强化视频图像帧和时域强化视频图像帧的传输位数。当比率大于该已知域值时使用第一方法来确定每一个质量强化帧和时域强化帧中传输的位数,否则使用第二方法。
附图说明
图1描述了一种传统的FGS编码系统;
图2a-2c示出了混合时域SNR FGS编码结构的例子;
图3a示出了依照本发明原理的速率控制确定过程的流程图;
图3b示出了依照本发明的第二实施例的速率控制确定过程的流程图;
图4示出了依照本发明原理的域值设定值与图像质量关系曲线图;
图5a-5b示出了利用本发明原理的范例系统;和
图6示出了可用来实施本发明原理的传输系统范例。
具体实施方式
应当理解这些图仅仅用来说明本发明的内容,并不作为本发明的限制标准。应当明白通篇使用相同的参考数字来识别相应部分,在适当地方可能补充有参考字符。
图1示出了在混合时域SNR FGS编码结构中的编码视频图像系统100。系统100接收来自视频源2的视频图像,并通过可变带宽网络6传输经过编码的视频图像。就象我们所理解的那样,视频源2可表现为任何形式的视频捕获设备,如电视摄像机,录影机/重放设备,模拟或数字等等,而可变带宽网络可以是陆上线路通信网络如因特网,点对点网络如电话网,或者无线网络,如卫星频道,或者移动接收设备如移动电话或计算机。
编码器110主要由基层(BL)编码器8,混合时域SNR FGS视频编码器20和视频速率控制器18组成。基层编码器8将接收到的视频图像编码为基层数据流,该基层编码器8在前面序列号为09/347,881的参考申请中有所阐述。该编码基层表示一种编码级别,该编码级别代表最低可接受视频图像并确保通过网络6进行传输。FGS层编码器20将输入视频图像和输入视频图像的基层编码图像之间生成的残留图像编码为视频加强层,该FGS层编码器20在前面序列号为19/590,825的参考申请中有所阐述。视频加强层用来改善由编码基层产生的图像质量。速率控制器18确定基层和加强层的传输速率,从而根据例如可用带宽(R)和用户偏好确定可传输的位数。用户偏好可由用户输入3输入到控制器18。
如图所示,来自视频源2的视频数据输入到BL编码器8和混合时域SNR FGS视频编码器20。BL编码器8使用传统的帧预测编码技术对原始视频图像进行编码,并以预定的比特率压缩视频数据,该预定的比特率表示为RBL。计算模块4将RBL设置成最小比特率(Rmin)和最大比特率(Rmax)之间的一个值。在大多数情况下,RBL被设置成Rmin,以保证即使在最低带宽下,网络6也能适应由基层编码器8编码的视频数据。
来自视频源2的原始视频数据和由BL编码器8提供的编码视频数据(即基层编码图像)进一步供给混合编码器20中的残留图像(RI)计算模块10和运动补偿残留图像(MCRI)计算模块24。RI计算模块10和MCRI计算模块24处理原始视频数据和编码视频数据,分别产生残留图像12和运动补偿(MC)残留图像22。残留图像12是基于该解码视频数据中的像素和原始视频数据中的像素之间的区别产生的。该MCRI计算模块24接收来自BL编码器8的编码视频数据,同时也对该编码视频数据进行解码。MC残留图像22是基于运动补偿方法从解码视频数据中产生的。
作为上述混合编码的结果,产生了两个加强层帧数据流:时域加强数据流32,这里称作编码FGST,和加强数据流31,这里称作编码FGS。该FGST编码加强数据流32包括来自MCRI EL编码器26的压缩FGS时域帧,而该FGS编码加强数据流31包括来自残留图像编码器14的SNR即标准FGS残留帧。可以单独传输视频编码数据流31,32,或者将两者混合产生单一的加强层数据流。
现在参考图2a,图中示出了混合时域SNR可量测性结构的示意性序列,其中只传输FGS加强层240中示出的编码视频帧242,244,246,248等等。该加强层FGS层帧与图示的基层编码帧212,214,216,218等等同时进行传输。在这种情况下,由于该FGS加强层240帧对相应基层210中的编码数据进行补充,因此可以获得高质量的视频图像。可以理解,可用带宽限制了所传输的FGS编码模块242,244,246,248等等的位数。因此,在传输时间内只能传输有限数量的FGS编码信息项或者数据位。
在没有时域加强数据传输的情况下,该传输的基层帧数据和FGS加强层帧数据以交替帧的方式进行传输。为保持恒定的帧速率,在接收系统(未示出)中,解码器将接收到的帧拷贝到未传输帧内。因此,在接收到的序列(未示出)中复制接收到的帧如212/242,以简化接收器操作。
现在参考图2b,图中示出了混合时域SNR可量测性结构的示意性序列,其中只传输时域层(即FGST)帧。在这种情况下,交替传输基层帧210和时域层帧232’中的信息项,在该范例中,图像质量主要相当于具有帧间对象平滑运动的基层210的图像质量。
现在参考图2c,图中示出了混合时域SNR可量测性结构的示意性序列,其中对FGST编码加强层230和FGS编码加强层240帧数据都进行了传输。在这种情况下,质量和时域可量测性性都可获得。在该图示案例中,在传输了基层帧212中的编码数据和相应的FGS加强层帧242”中的编码数据后,还传输FGST加强层帧232”。应当理解,该传输序列只是一个传输例子,通过并行通道可以同时传输FGS和FGST层。
图1中的FGS速率控制器28和实时可量测视频速率控制器18确定以上参考的每一种传输方案中可以传输的位数,其中当只传输一种加强层时使用第一方法,当需要混合传输SNR和时域加强层时使用第二方法。
可以理解,在确定传输位数的第一方法中,该方法以下被称为方法A,一个加强层传输的数据位等于零,就像没有传输加强层一样。因此,对于仅仅进行质量加强即仅仅SNR来说,FGST层的比特率等于零。因此,所传输的编码FGS加强层帧的位数可以如下确定:
30
其中:
FeA FGS是每个FGS加强帧的位数;
FeA FGST=0;
Renh是在传输时间加强层的可用比特率;
ft是传输帧速率;
R是在传输时间总的可用带宽;
fBL是基层帧速率,和;
RBL是基层比特率。
相反,当对象图像运动平滑度是主要考虑因素时,即图2b或2c,在传输时间加强层的可用比特率Renh必须适应FGS编码加强层帧和FGST编码加强层帧。FGS编码和FGST编码加强层传输的总的传输帧速率为fBL+fEL。在一种优选实施例中,在传输帧中对每个FGS和FGST加强层帧进行基本均分。因此,在每个加强层中,位数可以如下确定:
其中FeB FGS是FGS帧的位数;
FeB FGST是FGST帧的位数;和
fEL是总的加强层比特率。
在确定传输位数的该第二方法中,该方法以下被称为方法B,当在两个FGS帧中插入仅仅一个FGST帧时,即fEL=fBL,如图2c中所示,则每个传输帧中的位数可表示为:
在这种情况下,只传输了加强FGS层的一半位数。因此,当用于改进基层质量的FGS加强位数减少,则图像质量相应下降。可以理解,FGS加强层之间的时域加强层数可包括任意层数。在这种情况下,由于每层中传输的位数优选地基本相同,因此对象运动明显变得更加平滑。
现在参考方法A,由于不传输FGST编码加强层帧232,234等,每个编码FGS加强层帧242,244等可以表示为FGS(i),i=1,3,5,7,...n。
衡量每帧图像质量的峰值信噪比(PSNR)值可以确定并表达为PSNR(FGS(j)),其中j=1,2,...n。可以理解,PSNRA(FGS(i))基本上与PSNRA(FGS(i+1))相类似。可是,当一个帧图像包含高度运动时,在2fBL下,相邻帧即PSNRA(FGS(i))和PSNRA(FGS(i+1))之间的图像内容区别相对较大。因此,传输帧的PSNR值远高于前一帧,即PSNRA(FGS(i))>>PSNRA(FGS(i+1))。
至于图2c所示的传输,其中传输FGS加强层240和FGST加强层230,相邻帧的PSNR值之间的变化相对较小,相邻帧的PSNR测量值基本相同,即PSNRB(FGS(i))≈PSNRB(FGS(i+1))。
图3a描述了用来确定传输的FGS层240位数和FGST层230位数,以取得最佳视觉质量的示意性处理序列的方框图300。
在方框305中,判断方法B FGST编码的下一帧的PSNR测量值(PSNR(i+1))是否低于已知标准。假如结果是肯定的,则根据方法A即公式1确定每一层传输的位数,因为改进质量具有较高优先级。在这种情况下,可用加强层带宽完全由FGS层240信息项比特位所占据。
可是,假如方框305中判断的结果是否定的,则在方框315中判断方法B FGST编码的当前帧的PSNR测量值是否高于已知标准。假如结果是肯定的,那么根据方法B即公式2确定每一层传输的位数,因为质量足够了,而运动平滑度是最重要的。
可是,假如方框315中判断的结果是否定的,那么在方框325中确定方法A和方法B中当前帧之间的PSNR测量值之差。另外,确定方法A中当前帧和下一帧之间的PSNR测量值之差。在方框325中确定后者质量测量值与前者质量测量值之比,该比率表示为:
(PSNRA(FGS(i+1)-PSNRA(FGS(i))/(PSNRA(FGS(i)-PANRB(FGS(i))。
在方框330中,判断PSNR差的确定比率是否小于已知域值。假如该PSNR之差之比小于已知域值,则根据方法A即公式1确定每一层传输的位数。否则,根据方法B即公式2确定每一层传输的位数。
可以理解,当可用带宽R已知时,只有在传输时间可以计算PSNR测量值和PSNR之差的测量值。在可选实施例中,对于多个已知比特率Rk,k=1,...,m,可以非实时确定PSNR测量值和相应的FGS层240和FGST层230信息数据项,并将其存储供以后参考。因此,在传输时间,可以访问预存预测的FGS层240和FGST层230信息项PSNR值,以获得可用比特率,其中Rk+1>R>=Rk。
为了得到良好的性能,使已知域值与FGS加强层240和FGST加强层230帧的图像质量与可用比特率R相关。更具体地说,随着FGS加强层帧240的质量上升,由运动不平稳引起的视觉干扰影响变得更加不可容忍。随着可以得到的传输带宽增加或者比特率R上升,各图像的相应质量上升。因此,可以传输更多的FGST层帧,以提高视觉质量。
图3b示出了根据本发明的原理的用于速率确定的第二实施例的流程图350。在该实施例中,在方框355,判断图像或场景的复杂度。在“MPEG-2 Test Model 5,Coded Representation of Picture andAudio Information,ISO/IECJTC1/SC29/WG11/N0400,April 1993.”中公开了一种用于判断场景复杂度的方法。在方框360,判断场景复杂度是否超过已知域值。假如答案是肯定的,则根据方法A即公式1判断每层需传输的位数,因为场景复杂,改进质量具有较高的优先级。在这种情况下,可用加强层带宽由FGS层230的质量加强位占用。
可是,假如答案是否定的,则在方框365,确定FGST帧的运动活动性。在一种实施例中,通过估算传输运动向量所需的位数可以确定运动活动性。在方框370,判断运动活动性是否低于可接受域值。假如答案是肯定的,则在方框310,根据方法A即公式1确定每层需传输的位数,因为在场景中运动活动性很小,因此改进质量具有较高的优先级。在这种情况下,可用加强层带宽完全由FGS层240信息项的比特位占用。
可是,假如答案是否定的,则在方框320,根据方法B即公式2确定每个FGS和FGST加强层需要传输的位数,因为场景的质量足够了,而运动的平滑度是最重要的。例如,在10Hz下,对于CIF分辨率图像来说,当复杂度测量值超过300,000,而运动向量至少等于6000位时,可以确定达到足够标准。
图4示出了确定域值和FGST加强层230帧的PSNR测量结果之间的函数关系的例图400,在图3a的方框330中提到该域值。如图所示,当PSNR测量值低于表示为430的已知低值时,该域值设为最大值410,并且随着PSNR测量值增加,该域值单调递减,由递减线440表示。当PSNR测量值超过表示为450的已知标准时,该确定的域值设为最低值。
尽管根据当前帧和下一帧之间的比较情况公开了本发明,但是应当理解,如图3所示,假如在使用同样方法的较大一组帧上进行确定的话,可以提高FGS加强层和FGST加强层之间进行切换的连贯性。
图5a示出了使用本发明原理的示意性传输系统500。在这种情况下,由视频帧源2提供视频数据给视频编码单元510。然后将视频编码数据存储在编码器缓冲器514中。服务器516接收视频编码信息,并根据变化的带宽情况,信息包损耗或用户偏好,通过数据网络6调整传输位数据流。在接收系统517,将接收到的数据帧存储在解码器缓冲器518中,并将其提供给视频解码器520。视频解码器520提取该接收到的信息并对其进行解码。接下来该解码的信息项呈现在视频显示器522上,或者存储在视频记录设备(未示出)上,如模拟录像机或者数字录像机。图5b示出了一个系统的第二实施例,其中具有高带宽的高带宽网络550接收视频编码信息,并根据变化的带宽情况,信息包损耗或者用户对网络570的选择,通过代理器560调整该传输位数据流。
图6示出了一种可用来实施本发明原理的系统600的示意性实施例。系统600可代表电视机,机顶盒,台式,膝上或掌上电脑,个人数字助理(PDA),视频/图像存储设备如录像机(VCR),数字录像机(DVR),TiVO设备等等,以及这些和其它设备的一部分或者它们的组合。系统600包括一个或多个视频/图像源2,一个或多个输入/输出设备602,处理器603和存储器604。该视频/图像源2可表示,如电视接收器,VCR或其它视频/图像存储设备。该视频/图像源2也可表示一个或多个网络连接,通过例如全局计算机通信网如因特网,广域网,都市网,局域网,陆地广播系统,有线网,卫星网,无线网或者电话网,以及这些和其它类型网络的一部分或它们的组合,该一个或多个网络连接可用来接收来自一个或多个服务器的视频信号。
输入/输出设备602,处理器603和存储器604可通过通信媒介6进行通信。该通信媒介6可表示如总线,通信网络,电路的一个或多个内部连接,电路卡或其它设备,以及这些和其它通信媒介的一部分或它们的组合。根据存储在存储器604中并由处理器603执行的一个或多个软件程序,处理来自源2的输入视频数据,以生成提供给显示设备606的输出视频/图像信息。
在一种优选实施例中,使用本发明原理的编码和解码可由系统执行的计算机可处理代码实现。该代码可存储在存储器604中或者可从存储媒介如CD-ROM或软盘读取/下载。在其它实施例中,可用硬件线路代替软件指令或者和软件指令混合使用,以实施本发明。例如,这里举例的元件也可用分立硬件元件来实现。
尽管在此以优选形式描述本发明,而该优选形式具有一定程度的特殊性,但是应当理解在此公开优选实施例仅仅是为了举例,在不背离以下所要求的本发明的精神和范围的情况下,可以对各部件的详细结构和组合和排列进行很多变化。本发明通过所附权利要求中的合适表达,将覆盖所公开的本发明中存在的具有可授予专利的新颖性的任何特征。
Claims (38)
1.一种在细粒加强编码视频帧的传输中确定当前质量加强层帧和当前时域加强层帧中的每一个在已知比特率下的传输位数的方法,所述方法包含步骤:
将所述质量加强层帧的第一测量值与所述质量加强层帧和所述时域加强层帧的第二测量值的比率和已知域值相比较(325);和
当所述比率低于已知域值时,使用第一方法(310)确定所述传输位数,否则使用第二方法(320)。
2.如权利要求1中所述的方法,其中所述第一测量值是所述当前质量加强层帧和至少一个下一质量加强层帧之间的质量测量值之差,所述当前帧质量测量值和所述至少一个下一帧质量测量值是使用根据所述第一方法所确定的位数来确定的。
3.如权利要求1中所述的方法,其中所述第二测量值是所述当前质量加强层帧和至少一个下一时域加强层帧之间的质量测量值之差,所述当前帧质量测量值是使用根据所述第一方法所确定的位数来确定的,而所述至少一个下一时域加强层帧质量测量值是使用根据所述第二方法所确定的位数来确定的。
4.如权利要求1中所述的方法,其中所述域值是根据所述时域加强层帧测量值选择的,而所述时域加强层帧测量值是使用根据所述第二方法所确定的位数来确定的。
5.如权利要求4中所述的方法,其中所述域值随着所述时域加强层帧测量值增加而单调递减。
6.如权利要求1中所述的方法,进一步包含步骤:
将至少一个下一时域加强层帧的测量值和已知标准相比较(305);和
当所述测量值低于所述已知标准时,根据所述第一方法确定所述传输位数(310)。
7.如权利要求6中所述的方法,其中使用根据所述第二方法所确定的位数来确定所述至少一个时域加强层帧的所述测量值。
8.如权利要求1中所述的方法,进一步包含步骤:
将所述当前时域加强层帧的测量值和第二已知标准相比较(315);和
当所述测量值超过所述第二已知标准时,根据所述第二方法确定所述传输位数(320)。
9.如权利要求8中所述的方法,其中使用根据所述第二方法所确定的位数来确定所述当前时域加强层帧的所述测量值。
10.如权利要求1中所述的方法,其中根据公式1确定所述第一方法。
11.如权利要求1中所述的方法,其中根据公式2确定所述第二方法。
12.一种在细粒编码视频帧的传输中确定当前质量加强层帧(31)和当前时域加强层帧(32)中每一个在已知比特率下的传输位数的设备(18),所述设备包括:
用来将所述质量加强层帧的第一测量值与所述质量加强层帧和所述时域加强层帧的第二测量值之间的比率和已知域值相比(325)的代码;和
当所述比率超过已知域值时,使用第一方法(310)来确定所述传输位数,反之使用第二方法(320)的代码。
13.如权利要求12中所述的方法,进一步包括:
确定所述第一测量值为所述当前质量加强层帧和至少一个下一质量加强层帧之间的质量差的代码,其中所述当前帧和所述至少一个下一帧的质量测量值是使用根据所述第一方法所确定的位数来确定的。
14.如权利要求12中所述的设备,进一步包括:
确定所述第二测量值为所述当前质量加强层帧和至少一个下一时域加强层帧之间的质量测量值之差的代码,其中所述当前帧质量测量值是使用根据所述第一方法所确定的位数来确定的,而所述至少一个下一时域加强层帧质量测量值是使用根据所述第二方法所确定的位数来确定的。
15.如权利要求12中所述的设备,进一步包括:
根据所述时域加强层帧测量值确定所述域值的代码,其中所述时域加强层帧测量值是使用根据所述第二方法所确定的位数来确定的。
16.如权利要求15中所述的设备,其中所述域值随着所述时域加强层帧测量值增加而单调递减。
17.如权利要求12中所述的设备,进一步包括:
将至少一个下一时域加强层帧的测量值和已知标准相比较(305)的代码;和
当所述测量值低于所述已知标准时,根据所述第一方法确定所述传输位数(310)的代码。
18.如权利要求17中所述的设备,其中使用根据所述第二方法所确定的位数来确定至少一个时域加强层帧的所述测量值。
19.如权利要求12中所述的设备,进一步包括:
将所述当前时域加强层帧的测量值和第二已知标准相比较(315)的代码;和
当所述测量值超过所述第二已知标准时,根据所述第二方法确定所述传输位数(320)的代码。
20.如权利要求19中所述的设备,其中使用根据所述第二方法所确定的位数来确定所述当前时域加强层帧测量值。
21.如权利要求12中所述的设备,进一步包括:
根据公式1确定所述第一方法(310)的代码。
22.如权利要求12中所述的设备,进一步包括:
根据公式2确定所述第二方法(320)的代码。
23.如权利要求10中所述的方法,其中在所述时域加强层帧中的传输位数为零。
24.如权利要求21中所述的设备,进一步包括:
将所述时域加强层帧中的传输位数设为零的代码。
25.一个其中包含代码的存储模块,该代码用于在细粒可量测性编码视频帧的传输中确定当前质量加强层帧(31)和当前时域加强层帧(32)中每一个的传输位数,所述存储模块代码可操作来:
将至少一个下一时域加强层帧的测量值和已知标准相比较(305);
当所述测量值低于所述已知标准时,根据所述第一方法确定所述传输位数(310);
将一个当前时域加强层帧的测量值和第二已知标准相比较(315);
当所述第二测量值超过所述第二已知标准时,根据所述第二方法确定所述传输位数(320);
将所述质量加强层帧的测量值与所述质量加强层帧和所述时域加强层帧的测量值之间的比率和已知域值相比较(325);和
当所述比率超过已知域值时,根据所述第一方法(310)确定所述传输位数,反之根据所述第二方法(320)。
26.如权利要求25中所述的存储模块代码,进一步可操作来:
使用根据所述第二方法确定的位数来确定所述至少一个时域加强层帧。
27.如权利要求25中所述的存储模块代码,进一步可操作来:
使用根据所述第二方法确定的位数来确定所述当前时域加强层帧测量值。
28.如权利要求25中所述的存储模块代码,进一步可操作来:
使用根据所述第一方法确定的位数来确定所述当前质量加强层帧的质量测量值(310);
使用根据所述第一方法确定的位数来确定至少一个下一质量加强层帧的质量测量值(310);和
确定所述质量加强层帧测量值为所述当前质量加强层帧质量测量值和至少一个下一质量加强层帧质量测量值中的差。
29.如权利要求25中所述的存储模块代码,进一步可操作来:
使用根据所述第一方法确定的位数来确定所述当前质量加强层帧的质量测量值(310);
使用根据所述第二方法确定的位数来确定所述至少一个下一时域加强层帧的质量测量值;和
确定所述质量加强层帧和所述时域加强层帧测量值为所述当前质量加强层帧质量测量值和所述至少一个下一时域加强层帧质量测量值中的差。
30.如权利要求25中所述的存储模块代码,进一步可操作来:
根据公式1确定所述第一方法(310)。
31.如权利要求30中所述的存储模块代码,进一步可操作来:
确定所述时域加强层帧中的传输位数为零。
32.如权利要求25中所述的存储模块代码,进一步可操作来:
根据公式2确定所述第二方法(320)。
33.一种在细粒强化编码视频帧的传输中确定当前质量加强层帧和当前时域加强层帧中每一个在已知比特率下的传输位数的方法,所述方法包含步骤:
当质量层帧测量值超过已知域值时,使用第一方法(310)确定(320)所述传输位数;
当时域加强层帧测量值低于可接受测量值时,使用所述第一方法(310)确定(365)所述传输位数;
否则,使用第二方法(320)确定所述传输位数。
34.如权利要求33中所述的方法,其中根据公式2确定所述第二方法(320)。
35.如权利要求33中所述的方法,其中根据公式1确定所述第一方法(310)。
36.如权利要求33中所述的方法,其中所述时域加强层帧测量值是从所述帧中的运动活动性测量值中确定的。
37.如权利要求33中所述的方法,其中所述质量层帧测量值是从所述帧的复杂度测量值中确定的。
38.如权利要求36中所述的方法,其中所述运动活动性测量值是根据所述帧的运动向量确定的。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/930,671 US6785334B2 (en) | 2001-08-15 | 2001-08-15 | Method for transmission control in hybrid temporal-SNR fine granular video coding |
US09/930,671 | 2001-08-15 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN1568621A true CN1568621A (zh) | 2005-01-19 |
Family
ID=25459597
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA028203356A Pending CN1568621A (zh) | 2001-08-15 | 2002-08-02 | 混合时域信噪比细粒视频编码中的传输控制方法 |
Country Status (8)
Country | Link |
---|---|
US (1) | US6785334B2 (zh) |
EP (1) | EP1417841B1 (zh) |
JP (1) | JP2005500755A (zh) |
KR (1) | KR20040036709A (zh) |
CN (1) | CN1568621A (zh) |
AT (1) | ATE330428T1 (zh) |
DE (1) | DE60212401T2 (zh) |
WO (1) | WO2003017673A1 (zh) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2364842A (en) * | 2000-07-11 | 2002-02-06 | Motorola Inc | Method and system for improving video quality |
US20030161398A1 (en) * | 2002-02-21 | 2003-08-28 | Meir Feder | Improving static picture quality in compressed video |
US7391807B2 (en) * | 2002-04-24 | 2008-06-24 | Mitsubishi Electric Research Laboratories, Inc. | Video transcoding of scalable multi-layer videos to single layer video |
FR2858741A1 (fr) | 2003-08-07 | 2005-02-11 | Thomson Licensing Sa | Dispositif et procede de compression d'images numeriques |
KR100703744B1 (ko) * | 2005-01-19 | 2007-04-05 | 삼성전자주식회사 | 디블록을 제어하는 fgs 기반의 비디오 인코딩 및디코딩 방법 및 장치 |
US20070147371A1 (en) * | 2005-09-26 | 2007-06-28 | The Board Of Trustees Of Michigan State University | Multicast packet video system and hardware |
KR100834757B1 (ko) * | 2006-03-28 | 2008-06-05 | 삼성전자주식회사 | 엔트로피 부호화 효율을 향상시키는 방법 및 그 방법을이용한 비디오 인코더 및 비디오 디코더 |
KR100834625B1 (ko) * | 2006-07-27 | 2008-06-02 | 삼성전자주식회사 | 비디오 인코딩 데이터율 제어를 위한 실시간 장면 전환검출 방법 |
US20090010341A1 (en) * | 2007-07-02 | 2009-01-08 | Feng Pan | Peak signal to noise ratio weighting module, video encoding system and method for use therewith |
JP5339697B2 (ja) * | 2007-08-14 | 2013-11-13 | キヤノン株式会社 | 送信装置、送信方法、及びコンピュータプログラム |
KR20110137093A (ko) * | 2010-06-16 | 2011-12-22 | 삼성전자주식회사 | 무선 통신 시스템에서 녹화된 컨텐츠의 재생 방법 및 장치 |
US8724712B1 (en) * | 2011-07-07 | 2014-05-13 | Google Inc. | Apparatus and method for encoding at non-uniform intervals |
US9591318B2 (en) | 2011-09-16 | 2017-03-07 | Microsoft Technology Licensing, Llc | Multi-layer encoding and decoding |
US11089343B2 (en) * | 2012-01-11 | 2021-08-10 | Microsoft Technology Licensing, Llc | Capability advertisement, configuration and control for video coding and decoding |
WO2013173292A1 (en) | 2012-05-14 | 2013-11-21 | Motorola Mobility Llc | Scalable video coding with enhanced base layer |
US10356406B2 (en) | 2016-01-19 | 2019-07-16 | Google Llc | Real-time video encoder rate control using dynamic resolution switching |
CN112258407B (zh) * | 2020-10-20 | 2024-07-26 | 北京集创北方科技股份有限公司 | 一种图像采集设备的信噪比获取方法、装置及存储介质 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0783315B2 (ja) | 1988-09-26 | 1995-09-06 | 富士通株式会社 | 可変レート音声信号符号化方式 |
FI113124B (fi) | 1999-04-29 | 2004-02-27 | Nokia Corp | Tiedonsiirto |
US6263022B1 (en) * | 1999-07-06 | 2001-07-17 | Philips Electronics North America Corp. | System and method for fine granular scalable video with selective quality enhancement |
US6501797B1 (en) * | 1999-07-06 | 2002-12-31 | Koninklijke Phillips Electronics N.V. | System and method for improved fine granular scalable video using base layer coding information |
US7245663B2 (en) * | 1999-07-06 | 2007-07-17 | Koninklijke Philips Electronis N.V. | Method and apparatus for improved efficiency in transmission of fine granular scalable selective enhanced images |
US6480547B1 (en) * | 1999-10-15 | 2002-11-12 | Koninklijke Philips Electronics N.V. | System and method for encoding and decoding the residual signal for fine granular scalable video |
US6639943B1 (en) | 1999-11-23 | 2003-10-28 | Koninklijke Philips Electronics N.V. | Hybrid temporal-SNR fine granular scalability video coding |
EP1249131B1 (en) * | 1999-12-22 | 2004-03-17 | General Instrument Corporation | Video compression for multicast environments using spatial scalability and simulcast coding |
US6510329B2 (en) * | 2001-01-24 | 2003-01-21 | Datex-Ohmeda, Inc. | Detection of sensor off conditions in a pulse oximeter |
US6895050B2 (en) * | 2001-04-19 | 2005-05-17 | Jungwoo Lee | Apparatus and method for allocating bits temporaly between frames in a coding system |
-
2001
- 2001-08-15 US US09/930,671 patent/US6785334B2/en not_active Expired - Fee Related
-
2002
- 2002-08-02 JP JP2003521625A patent/JP2005500755A/ja not_active Withdrawn
- 2002-08-02 CN CNA028203356A patent/CN1568621A/zh active Pending
- 2002-08-02 AT AT02755489T patent/ATE330428T1/de not_active IP Right Cessation
- 2002-08-02 DE DE60212401T patent/DE60212401T2/de not_active Expired - Fee Related
- 2002-08-02 WO PCT/IB2002/003264 patent/WO2003017673A1/en active IP Right Grant
- 2002-08-02 EP EP02755489A patent/EP1417841B1/en not_active Expired - Lifetime
- 2002-08-02 KR KR10-2004-7002207A patent/KR20040036709A/ko not_active Application Discontinuation
Also Published As
Publication number | Publication date |
---|---|
ATE330428T1 (de) | 2006-07-15 |
EP1417841B1 (en) | 2006-06-14 |
EP1417841A1 (en) | 2004-05-12 |
US20030035480A1 (en) | 2003-02-20 |
KR20040036709A (ko) | 2004-04-30 |
JP2005500755A (ja) | 2005-01-06 |
DE60212401T2 (de) | 2007-02-01 |
DE60212401D1 (de) | 2006-07-27 |
US6785334B2 (en) | 2004-08-31 |
WO2003017673A1 (en) | 2003-02-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1192629C (zh) | 应用基层编码信息改进精确颗粒可定标图像的系统和方法 | |
CN1568621A (zh) | 混合时域信噪比细粒视频编码中的传输控制方法 | |
CN1166200C (zh) | 混合式时间-信杂比精细颗粒可分级视频编码 | |
CN1303817C (zh) | 细粒可调节视频残差信号的编码解码系统和方法 | |
CN1196341C (zh) | 使用基层量化数据对增强层数据进行编码和解码的系统和方法 | |
CN1117482C (zh) | 利用基于特征点的运动估算编码视频信号的方法 | |
US8194729B2 (en) | Apparatus and method for matching compressed video data under wireless fading environment | |
US6337881B1 (en) | Multimedia compression system with adaptive block sizes | |
CN1254975C (zh) | 对视频数据和视频信号进行编码和解码的方法及装置 | |
CN1253014C (zh) | 图像编码方法及设备和图像解码方法及设备 | |
CN1258922C (zh) | 细粒可分级性的最佳传输/流式顺序 | |
CN1636394A (zh) | 细粒视频编码的空间可缩放性 | |
CN101077011A (zh) | 运用精细粒度可伸缩性技术进行数字视频实时代码转换的系统和方法 | |
RU2007137462A (ru) | Классификация контента для обработки мультимедийных данных | |
CN1602633A (zh) | 用于动态指派有选择地增强的细粒度可缩放编码的图像的方法和设备 | |
US8542735B2 (en) | Method and device for coding a scalable video stream, a data stream, and an associated decoding method and device | |
Shen et al. | Foveation-based wireless soft image delivery | |
CN1536894A (zh) | 图像帧的块差错补偿装置及其方法 | |
US20160182911A1 (en) | De-juddering techniques for coded video | |
US20030169813A1 (en) | Method and apparatus to execute a smooth transition between FGS encoded structures | |
KR20050061483A (ko) | 스케일링 가능한 비디오 인코딩 | |
CN1656816A (zh) | 使用较高质量的参考帧改进效率的fgst结构 | |
CN108900874B (zh) | 一种基于svc-dash框架的流媒体自适应请求方法及其装置 | |
CN1254115C (zh) | 双回路移动补偿精细颗粒的可标度性 | |
CN1529511A (zh) | 一种基于运动矢量合成的视频转码方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned | ||
C20 | Patent right or utility model deemed to be abandoned or is abandoned |