CN101682757B - 可缩放视频编解码器中的高效有效系数编码 - Google Patents

可缩放视频编解码器中的高效有效系数编码 Download PDF

Info

Publication number
CN101682757B
CN101682757B CN200780038049.4A CN200780038049A CN101682757B CN 101682757 B CN101682757 B CN 101682757B CN 200780038049 A CN200780038049 A CN 200780038049A CN 101682757 B CN101682757 B CN 101682757B
Authority
CN
China
Prior art keywords
value
indexs
index
fragment
eob
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200780038049.4A
Other languages
English (en)
Other versions
CN101682757A (zh
Inventor
马尔塔·卡切维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN101682757A publication Critical patent/CN101682757A/zh
Application granted granted Critical
Publication of CN101682757B publication Critical patent/CN101682757B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本发明描述用于可缩放视频编解码器中的高效有效系数编码的技术。在一种配置中,提供一种包括处理电路的装置,所述处理电路具有指令集,所述指令集操作以产生用于当前帧或片段的初始化表。所述初始化表具有使用可缩放视频编码的先前经编码帧或片段的有效系数进程的统计数据。所述装置还包括传输器以将所述初始化表和所述当前帧或片段一起传输到解码器。所述解码器可使用所述传输的初始化表来解码帧或片段。所述解码器还可使用驻存的默认初始化表。

Description

可缩放视频编解码器中的高效有效系数编码
共同待决申请案
本发明主张2006年10月13日申请的第60/829,490号临时申请案的优先权权益,所述临时申请案如同下文充分陈述那样以引用的方式并入本文中。
技术领域
本发明大体涉及编解码器的领域,且更具体来说,涉及用于可缩放视频编解码器中的高效有效系数编码的技术。
背景技术
例如MPEG-1、H.261/263/264等常规视频编码标准在给定质量设置下编码视频(通常称为“固定QP编码”),或经由使用速率控制机制在相对恒定的位速率下编码视频。如果由于某种原因,视频需要在不同质量下加以传输或解码,那么数据必须首先被解码,且随后使用适当设置重新编码。在某些情境中,例如,在低延迟实时应用中,此类“转换编码(transcoding)”可能不可行。类似地,常规视频编码标准在特定空间分辨率下编码视频。如果视频需要在较低分辨率下加以传输或解码,那么数据必须首先被解码、空间地缩放,且随后重新编码。再次,此类转换编码在某些情境中不可行。
所以,需要用于可缩放视频编解码器中的高效有效系数编码的技术。
发明内容
本发明提供用于可缩放视频编解码器中的高效有效系数编码的技术。在一种配置中,提供一种包含处理电路的装置,所述处理电路具有指令集,所述指令集经操作以产生用于当前帧或片段的初始化表,所述初始化表具有使用可缩放视频编码的先前经编码帧或片段的有效系数进程(pass)的统计数据。所述装置还包括传输器,以将初始化表与当前帧或片段一起传输到解码器。
在另一配置中,提供一种包括计算机可读媒体的计算机程序产品,所述计算机可读媒体具有若干指令以使计算机产生用于当前帧或片段的初始化表,所述初始化表具有使用可缩放视频编码的先前经编码帧或片段的有效系数进程的统计数据。所述计算机程序产品还包括若干指令以使计算机将初始化表与当前帧或片段一起传输到解码器。
在又一配置中,提供一种方法,所述方法包含使用可缩放视频编码来编码当前帧或片段。所述方法还包括产生用于当前帧或片段的初始化表,初始化表具有使用可缩放视频编码的先前经编码帧或片段的有效系数进程的统计数据。所述方法进一步包括:将初始化表与当前帧或片段一起传输到解码器;和由解码器使用所传输的初始化表来解码当前帧或片段。
尤其当与附图一起考虑时,从具体实施方式中将更容易了解额外方面。
附图说明
当结合图式考虑时,从下文陈述的具体实施方式中将更加了解本发明的方面和配置,图式中相同参考标号始终标示相应元件。
图1展示使用精细粒度可缩放性(FGS)的常规可缩放视频编码(SVC)的大体流程图。
图2展示利用FGS的常规SVC码。
图3A、图3B和图3C展示若干实例区块,其中所有系数均分类为有效进程系数。
图4A、图4B和图4C展示有效进程和精化进程的系数的实例。
图5展示常规SVC编解码器。
图6展示使用SVC来编码宏区块的常规SVC编码过程的大体流程图。
图7展示用于SVC的常规默认初始化表的实例。
图8展示indexS重新界定过程的大体流程图。
图9展示使用SVC和重新界定的indexS来编码宏区块的SVC编码过程的大体流程图。
图10展示使用SVC和重新界定的indexS来编码宏区块的SVC简化编码过程的大体流程图。
图11展示高效SVC编解码器的具有第一层级位保留的SVC帧传输的大体框图。
图12展示高效SVC编解码器的具有第二层级位保留的SVC帧传输的大体框图。
图13展示高效SVC编解码器的具有第三层级位保留的SVC帧传输的大体框图。
图14展示无线装置的配置的框图。
图式中的图像出于说明的目的而被简化,且并未按比例绘制。为了便于理解,在可能的情况下已使用相同参考标号来表示图所共同的相同元件,但在适当的时候可附加后缀来区分此类元件。
附图说明本发明的示范性配置,因而,不应解释为限制本发明的范围,本发明的范围可容许其它同等高效配置。预期一个配置的特征或步骤可有益地并入在其它配置中,而无需进一步陈述。
具体实施方式
词语“示范性”在本文中用于表示“充当实例、例子或说明”。本文中描述为“示范性”的任何配置或设计均不必解释为相对于其它配置或设计来说是优选或有利的,且术语“核心”、“引擎”、“机器”、“处理器”和“处理单元”可互换使用。
图1展示使用精细粒度可缩放性(FGS)的常规可缩放视频编码(SVC)10的大体流程图。可缩放视频编码(SVC)10克服了转换编码问题。将结合图2描述SVC 10的过程。图2展示利用FGS的常规SVC码。SVC 10的大体过程通过编码具有最小空间分辨率300和质量320的“基础层”(图2)而开始于框12,其中0表示基础层。框12之后为框14,在其中准备编码增强信息,所述信息增加空间分辨率301-30m和/或质量321-32m直到最大水平。所以,可通过简单地丢弃空间增强信息而实现空间分辨率的减小,而无需转换编码。
对于质量增强来说,通常可在离散(但紧密间隔)的点处截断信息,从而通过允许实现处于“基础”与“最大”之间的中间质量而提供额外灵活性。允许实现质量可缩放性的FGS增强层1-m通常称作FGS(精细粒度可缩放性)。FGS层0-m的每一者含有量化的经转换系数340-34m,且可能含有其它语法元素361-36m,例如(但不限于)运动向量。
第m个FGS增强层中的转换系数的编码通常发生于两个进程中:框18处的精化进程,和框16处的有效性进程。在框16处的有效性进程中,编码所有较低FGS层中的具有等于零的重建值的所有系数。在框18处的精化进程中编码剩余系数。随后,可在框20处传输FGS增强层信息。
图3A、图3B和图3C展示若干实例区块,其中所有系数均分类为有效进程系数。图3A中所示的Z形样式用于所有4x4区块40A、40B和40C。图3A、图3B和图3C的示范性区块40A、40B和40C分别表示系数被分类为有效性进程系数的情况。在图3A、图3B和图3C中的每一4x4区块40A、40B和40C内,系数被分成若干游程值(run-value)对。在图3A的区块40A中,系数将划分为{1}、{0-1}、{1}、{0-0-1}。在图3B的区块40B中,系数将划分为{0-1}、{1}、{0-1}。在图3C的区块40C中,系数将为{000000001}。
有效性游程由其开始扫描索引、等于零的系数的数目和终止值,或(p,r,v)三元组而充分地加以描述。因此,图3A的区块40A中的游程将为(0,0,1)0、(1,1,1)0、(3,0,1)0和(4,2,1)0;且对于图3B的区块40B来说,游程将为(0,1,1)1、(2,0,1)1和(3,1,1)1。下标指示区块索引,且是为了清晰起见而附加。在第i个编码“循环”中,从所有区块编码p≤i的所有游程。在此实例中,每一循环中所编码的游程将为:
循环0:(0,0,1)0、(0,1,1)1、(0,8,1)2
循环1:(1,1,1)0
循环2:(2,0,1)1
循环3:(3,0,1)0、(3,1,1)1;以及
循环4:(4,2,1)0
图4A、图4B和图4C展示有效进程和精化进程的系数的实例。图4A中所示的Z形样式用于所有4x4区块50A、50B和50C。区块50A、50B和50C中的阴影系数属于精化进程。在计算游程长度时,跳过精化进程系数。因此,在此实例中,第一区块50A中的有效性游程将为(0,1,1)0、(1,2,1)0和(5,2,1)0。第二区块50B的有效性游程将为(0,2,1)1和(2,1,1)1。第三区块50C的有效性游程将为(0,6,1)2。使用特殊游程长度“X”来指示所规定扫描索引处的精化系数,每一循环中所编码的系数将为:
循环0:(0,0,1)0、(0,1,1)1、(0,5,1)2
循环1:(1,1,1)0
循环2:(2,0,1)1、(2,X,0)2
循环3:(3,X,1)0、EOB1、(3,X,0)2
循环4:(4,X,0)0、(4,X,1)1、(4,X,0)2;以及
循环5:(5,1,1)0
符号“EOBn”意味着在区块n中没有更多的非零有效性进程系数需要编码,其中n为区块的计数。除了区块结束(EOB)外,还可发送特殊EOB(sEOB)。其意味着在区块n中没有更多的非零有效性进程系数需要编码,但某些有效系数层级绝对值大于1。对于那些区块来说,将传输额外信息。
EOB和sEOB符号出现的机率视帧内容而在帧之间和逐序列地进行变化。当通过(p,r,v)三元组来描述游程长度时,r的值等于编码成等于0的系数的数目。举例来说,游程{0,0,0,1}将被指派以三元组(0,3,1)。保留r=C和r=D的值,以虑及EOB和sEOB符号。
如果用于编码有效性游程的可变长度编码(VLC)表和为EOB和sEOB符号所保留的值C和D视循环数目或开始扫描位置而定,那么编码效率可显著改进。
图5展示常规SVC编解码器60。被考虑用于可缩放视频编码(SVC)编码器60的一个解决方案包括:利用区块结束(EOB)确定模块62动态地确定EOB,和利用sEOB移位确定模块64动态地确定sEOB,并在由编码模块74执行编码时,基于经由统计数据收集模块72所收集的统计数据而确定一组可用VLC表70中的哪一VLC表1,2,...,T应当用于编码有效游程。VLC表1,2,...,T、EOB和sEOB移位视indexS而定,其中根据示范性伪码(1)而计算indexS,如下:
indexS=0;
for(i=0;i<scanIndex;i++){if(!coeffBase[i]&&coeff[i]){indexS=i+1;}}    (1)
其中i为用以识别有效系数进程的Z形扫描中的位置的计数;scanIndex为有效系数进程期间循环的开始扫描位置索引;coeffBase[i]为在扫描位置i处使用FGS层0到n-1的信息而重建的转换系数的值;coeff[i]为用于当前编码的第n个FGS层的系数的层级;“!”意味着位翻转(bit flip);且&&表示逻辑“与(AND)”函数。应注意,本文陈述的许多等式和表达式使用类似于C或C++计算机编程语言的语法。所述表达式出于说明的目的,且可用具有不同语法的其它计算机编程语言来表达。
SVC编码器60进一步包括indexS计算器76,indexS计算器76追踪scanIndex 78A、coeffBase[i]78B、coeff[i]78C和indexS 78D。在编码器和解码器两者中,提供累加器80以单独地针对indexS的不同值0,1,...,Max而存储符号(有效性游程82A、EOB 82B、sEOB 82C)的累加计数,其中Max为所使用的Z形样式中的扫描位置的总数的函数。
图6展示使用SVC来编码宏区块的常规SVC编码过程90的大体流程图。所述过程开始于框91处,其中编码宏区块。在框91处编码每一宏区块之后,针对indexS的每一值而分别在框93A、93B和93C处更新VLC表、EOB和sEOB移位。因此,框91之后跟随有框92,在其中获取indexS。框92之后跟随有框93A、93B和93C,在其中更新VLC表、EOB和sEOB移位。并行展示框93A、93B和93C。然而,图示出于说明的目的。因此,流程图框可按所描绘次序执行,或这些框或其部分可同时、并行或以不同次序执行。在一些情况下,如果任一次回路反复过程无需更新,那么所述框便可省去。
框93A、93B和93C之后跟随有框94,在其中递增indexS。框94之后跟随有框95,在其中确定是否已针对indexS的最后一个值而更新所有VLC表、EOB和sEOB移位。如果确定为“否”,那么过程90沿回路返回以重复93A、93B、93C、94和95的回路,直到最后一个indexS为止。如果框95处的确定为“是”,那么过程90结束。
上述解决方案的缺点中的一者为调适的复杂性。举例来说,当编码/解码循环X时,indexS可采用从0到Max的任一值。因此,在每一宏区块结束时,不得不针对indexS=0,1,..,Max而查知EOB、sEOB移位和VLC表。
在低位速率和/或结合片段编码(例如,四分之一通用中间格式QCIF片段)的情况下,适应于符号统计数据所需的位速率可表示帧/片段位速率的相当大量。因此,如果不合适的VLC表或EOB/sEOB移位初始化被用于较小片段和/或低位速率,那么速率失真性能可能降低。
图7展示用于SVC的常规默认初始化表99的实例。默认初始化表99是使用用于SVC的常规VLC表索引和EOB移位初始化方法而创建。被考虑用于SVC的常规VLC表索引和EOB移位初始化方法仅支持单一组默认初始化表EOBshiftInit[D]、sEOBshiftInit[D]和VLCtableSelectInit[D],其中D表示默认。可容易看出,EOBshiftInit[D]的值指示,对于indexS=0来说,EOB移位应等于16(在当前SVC语法中,决不应针对indexS=0而信令EOB,因此使用EOB移位的最大值)。对于indexS=1来说,EOB移位应等于2,等等。VLCtableSelectInit[D]的值指示,对于indexS=0、1和2来说,应使用VLC表1,且对于indexS 3-15来说,使用VLC表0。sEOBshiftInit[D]的值指示,对于indexS=0来说,sEOB移位应等于16,且对于indexS=1-10来说应等于6,且之后单调降低。默认表在SVC编解码器60的解码器侧可用。
图7中的初始化表用于亮度,且另一组初始化表(未图示)用于色度。然而,使用单组初始化表是不够的,因为具有广泛变化内容的视频材料的编码会产生实质性变化的符号统计数据(且因此,产生被选用于indexS的每一值的实质性变化的VLC表、EOB和sEOB移位)。
图8展示indexS重新界定过程100的大体流程图。为了减小表调适的复杂性而根据示范性伪码(2)重新界定indexS,如下:
if(indexS>0){indexS=scanIndex;}    (2)
其中scanIndex为循环的开始扫描位置索引。
一般来说,indexS重新界定过程100开始于框102处,在其中确定indexS是否大于0。如果确定为“是”,那么框102之后跟随有框104,在其中indexS等于scanIndex。然而,如果确定为“否”,那么框102之后跟随有框106,在其中indexS等于0。将框106展示为虚线以指示可选步骤。伪码中暗示indexS可为0或scanIndex。框104和框106结束过程100。
因此,indexS被重新界定为仅等于开始扫描索引(表示为scanIndex)或0。此意味着,对于每一循环来说,计算仅针对indexS的两个值的VLC表索引、EOB和sEOB移位。
图9展示使用SVC和重新界定的indexS来编码宏区块的SVC编码过程120的大体流程图。SVC编码过程120开始于框122处,其中编码宏区块。在框122处编码每一宏区块之后,在框124处将当前循环设置为等于0。框124之后跟随有框126,在其中获取当前循环的第一indexS。其可为0、开始扫描索引或循环中根据上文的码(1)所计算的某一其它数字。框126之后跟随有框128,其中根据图8的过程100重新界定indexS。框128之后跟随有框130、132和134,在其中针对indexS的当前值而更新VLC表、EOB和sEOB移位。框130、132和134是并行展示的,但可视需要以不同次序形成和/或被跳过。框130、132和134之后跟随有框136,在其中确定其是否为循环的结束。如果确定为“否”,那么在框138处获取下一indexS。框138之后跟随有框140,其中根据图8的过程100而为当前循环计算indexS。框140沿回路返回到框130、132和134之前,以使得再次针对indexS的当前值而更新VLC表、EOB和sEOB移位。
再次返回到框136,可基于若干条件而确定循环的结束。但是,可确定循环的结束以使得indexS将仅采用两个值:0或scanIndex。因此,在针对indexS=0和scanIndex而完成所述两次回路反复过程之后,更新当前循环,且可结束当前循环。然而,对于不存在indexS=0的循环来说,可在仅一个针对indexS=scanIndex的反复过程之后结束循环。因此,如果框136处的确定为“否”,那么框136之后跟随有框142,在其中组合VLC表、经更新的EOB移位和经更新的sEOB移位以用于传输,如将参看图11更详细描述。
框142之后跟随有框144,在其中确定是否已到达最后一个循环。如果框144处的确定为“是”,那么框144结束过程120。然而,如果框144处的确定为“否”(意味着更多循环),那么在框146处递增当前循环。框146返回到框126,以重复针对indexS=0和scanIndex而更新VLC表、EOB和sEOB移位的过程。
图10展示使用SVC和重新界定的indexS来编码宏区块的SVC简化编码过程150的大体流程图。为了进一步简化编码过程120,在循环0之后,并不针对等于0的indexS而调适VLC表,(在当前SVC语法的限制内决不应针对循环0或indexS=0而信令EOB和sEOB)。因此,框132′和134′用虚线展示,因为对于循环0来说或在indexS=0时可将其省去。对于任何其它循环来说,当indexS等于0时,使用被选用于循环0的VLC表。如果需要不同循环的并行解码,那么应将针对indexS=0的VLC表索引信令到解码器。
在图10中,SVC简化编码过程150基本上与图9中的过程120相同,不同之处在于添加了框129处的条件和以略微不同的次序更新VLC表、EOB和sEOB。因此,将仅描述经修改块或额外框。上文在图9中已描述了过程150的其它框。在图10中,在框128之后作出确定,以确定是否当前循环大于0且indexS=0。如果确定为“否”,那么在框130′处更新VLC表。当indexS等于0时,不为任何大于0的循环更新或改变VLC表。因此,如果框129处的确定为“是”,那么分别在块132′和134′处仅更新EOB移位和sEOB移位。框130′之后还跟随有框132′和134′。框132′和134′之后跟随有框136。
在另一替代配置中,indexS可总是被指派以开始扫描位置索引的值。在此配置中,对于indexS>0且不容许EOB和sEOB的系数来说,必须相应地修改用于有效性游程的VLC码索引的指派。举例来说,当indexS=4时,在(p,r,v)三元组中,为EOB和sEOB而保留的r值分别等于0和5,且根据表1而选择以下VLC表。
表1
    符号   码索引   码长度
    EOB     0     1
    有效性游程0     1     3
    有效性游程1     2     3
    有效性游程2     3     4
    有效性游程3     4     4
    sEOB     5     5
    有效性游程4     6     5
    有效性游程5     7     6
    有效性游程6     8     6
    有效性游程7     9     7
    有效性游程8     10     7
    有效性游程9     11     8
    有效性游程10     12     8
    ....
对于不容许EOB和sEOB的系数来说,符号(有效性游程)到VLC码索引的指派将根据表2进行指派。
表2
    符号   码索引 码长度
    有效性游程0     0     1
    有效性游程1     1     3
    有效性游程2     2     3
    有效性游程3     3     4
    有效性游程4     4     4
    有效性游程5     5     5
  有效性游程6     6     5
  有效性游程7     7     6
  有效性游程8     8     6
  有效性游程9     9     7
  有效性游程10     10     7
  有效性游程11     11     8
  有效性游程12     12     8
    ....
图11展示高效SVC编解码器200的具有第一层级位保留的SVC帧传输的大体框图。高效SVC编解码器200包括编码器220和解码器240。为了增加本文描述的调适的编码效率,高效SVC编解码器200向解码器240传输用于每一帧或片段(表示为帧/片段[i])的初始化表[i-1]204A。初始化表[i-1]204可包括一个或一个以上语法元素。举例来说,初始化表[i-1]204A至少包括用于亮度的初始化表[i-1]204AL和用于色度的初始化表[i-1]204AC。仅展示初始化表[i-1]204AL。初始化表[i-1]204AL包括用于亮度的表EOBshiftInit[i-1]、sEOBshiftInit[i-1]和VLCtableSelectInit[i-1]。用于色度的初始化表[i-1]204AC也可包括用于色度的表EOBshiftInit[i-1]、sEOBshiftInit[i-1]和VLCtableSelectInit[i-1]。这些表可由编码器220使用(例如)针对先前经编码帧或片段所搜集的统计数据而获取,此将确保所述表反映当前帧的统计数据(其优于默认表)。在此配置中,指示符i表示当前帧或片段,而i-1表示先前帧或片段。指示符Max表示最后一个indexS。
在图11中,从编码器220到解码器240的传输将包括代表当前帧/片段[i]202A的位流,之后跟随有初始化表[i-1]204A。展示区块206仅为了表示可视需要包括位流中的其它数据。下一帧/片段[i+1]202B将跟在区块206或204A之后。在下一帧/片段[i+1]202B之后,初始化表[(i-1)+1]204B将被传递到解码器240。对于剩余帧或片段来说,位流包括具有或不具有区块206的样式。在此实例中,信息被展示于单一位流中。然而,帧/片段信息可在与初始化表分离的流中加以发送。在此配置中,如果在初始化表[i-1]204A、初始化表[(i-1)+1]204B等中发送亮度和色度或其它语法元素,那么解码器240将不需要将默认表用于亮度和色度或其它语法元素。
图12展示高效SVC编解码器200′的具有第二层级位保留的SVC帧传输的大体框图。在高效SVC编解码器200′中,初始化表[i-1]204A′包括仅用于亮度的表EOBshiftInit[i-1]、sEOBshiftInit[i-1]和VLCtableSelectInit[i-1]。因此,对于某些帧/片段202A′和202B′来说,将发送仅用于亮度的初始化表[i-1]204A′和初始化表[(i-1)+1]204B′。在此配置中,解码器240将使用驻存于解码器240处的默认初始化色度表244来解码帧/片段。
图13展示高效SVC编解码器300的具有第三层级位保留的SVC帧传输的大体框图。编解码器300包括编码器320和解码器340。为了减小传输初始化表[i-1]304A所需的位的数目,可仅针对某些indexS值传输用于EOBshiftInit[i-1]、sEOBshiftInit[i-1]和VLCtableSelectInit[i-1]的表。例如,针对indexS<Max1。举例来说,Max1可为8。对于indexS的剩余值来说,针对indexS>Max1(M)(表示为M+1,M+2,...Max2)的具有默认值EOBshiftInit[D]、sEOBshiftInit[D]和VLCtableSelectInit[D]的默认初始化表344被解码器340使用。针对EOBshiftInit[i-1]、sEOBshiftInit[i-1]和VLCtableSelectInit[i-1]的indexS值信令到解码器340,且可在编码器320中适应性地加以确定并逐帧或逐片段地发生变化。
在图13中,从编码器320到解码器340的传输将包括代表当前帧/片段[i]302A的位流,之后跟随有初始化表[i-1]304A。展示区块306仅为了表示可包括位流中的其它数据。下一帧/片段[i+1]302B将跟在区块306或304A之后。在下一帧/片段[i+1]302B之后,初始化表[(i-1)+1]304B将被传递到解码器340。对于剩余帧或片段来说,位流包括具有或不具有区块306的样式。在此配置中,信息被展示于单一位流中。然而,帧/片段信息可在与初始化表分离的流中加以发送。
此外,视帧/片段内容而定,可传输仅用于某些语法元素的初始化表,且对于剩余语法元素来说应使用默认初始化表。举例来说,对于某些片段/帧来说,如图12所示,可仅传输用于亮度的针对EOB和VLC表索引的初始化表。
可观察到,当循环数目或indexS增加时,EOB移位和sEOB值通常单调降低。因此,可通过允许针对indexS=1的EOB移位值采用所有可能值(例如,0到15)的一者而传递EOB移位表。对于indexS>1来说,将EOB移位值限制为同于或小于针对indexS-1的EOB移位值。因此,对于indexS>1来说,仅需要每indexS值一个位来信令EOB移位值(例如,0-EOB移位值保持相同,1-EOB移位值应降低1)。当对于indexS=Max来说EOB移位值达到0时,无需针对大于Max的indexS而传输额外信息。
针对传输初始化表描述的方法可在存在调适或不存在调适的情况下使用。在后一情况下,初始化表中给出的值用于整个帧/片段。
本文上文中描述的技术可用于无线通信、计算、个人电子装置等。下文描述所述技术在无线通信方面的示范性使用。
图14展示无线通信系统中的无线装置400的配置的框图。无线装置400可为手持机。所述手持机可为蜂窝式电话或相机电话、终端机、配备有无线能力的个人数字助理(PDA)、无线通信装置、视频游戏控制台、膝上型计算机、具备视频能力的装置,或某一其它配备有无线能力的装置。所述无线通信系统可为码分多址(CDMA)系统、全球移动通信系统(GSM)系统或某一其它系统。
无线装置400能够经由接收路径和传输路径而提供双向通信。在接收路径上,基站所传输的信号被天线412接收,且提供到接收器(RCVR)414。接收器414调节并数字化所接收的信号,且将样本提供到数字区段420以用于进一步处理。在传输路径上,传输器(TMTR)416接收待从数字区段420传输的数据,处理且调节所述数据,并产生经调制信号,所述经调制信号经由天线412而传输到基站。
数字区段420包括各种处理单元、接口单元和存储器单元,例如,调制解调器处理器422、视频处理器424、控制器/处理器426、显示处理器428、ARM/DSP 432、图形处理单元(GPU)434、内部存储器436和外部总线接口(EBI)438。调制解调器处理器422针对数据传输和接收执行处理(例如,编码、调制、解调制和解码)。视频处理器424对视频内容(例如,静态图像、移动视频和移动文本)执行处理以用于例如摄像机、视频重放和视频会议等视频应用。控制器/处理器426可引导数字区段420内的各种处理和接口单元的操作。显示处理器428执行处理以促进将视频、图形和文本显示于显示单元430上。ARM/DSP 432可针对无线装置400执行各种类型的处理。图形处理单元434执行图形处理。
本文描述的技术可用于数字区段420中的处理器的任一者,例如,视频处理器424。内部存储器436存储用于数字区段420内的各种单元的数据和/或指令。EBI 438促进数字区段420(例如,内部存储器436)与主存储器440之间沿总线或数据线DL的数据传送。
可以一个或一个以上DSP、微处理器、RISC等实施数字区段420。数字区段420还可制造于一个或一个以上专用集成电路(ASIC)或某一其它类型的集成电路(IC)上。
本文描述的技术可实施于各种硬件单元中。举例来说,所述技术可实施于ASIC、DSP、RISC、ARM、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器和其它电子单元中。
在一个或一个以上示范性配置中,所描述的功能可以硬件、软件、固件或其任一组合来实施。如果以软件实施,那么所述功能可作为一个或一个以上指令或代码存储于计算机可读媒体上或在计算机可读媒体上传输。计算机可读媒体包括计算机存储媒体和通信媒体(包括促进将计算机程序从一个地方传送到另一地方的任何媒体)两者。存储媒体可为可由计算机存取的任何可用媒体。举例来说,且非限制性的,此类计算机可读媒体可包含RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置,或可用于载运或存储所需的呈指令或数据结构形式的程序码且可由计算机存取的任何其它媒体。并且,任何连接均适当地称作计算机可读媒体。举例来说,如果使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)或例如红外线、无线电和微波等无线技术从网站、服务器或其它远程源传输软件,那么同轴电缆、光纤电缆、双绞线、DSL或例如红外线、无线电和微波等无线技术均包括在媒体的定义中。如本文使用的磁盘(Disk)和光盘(Disc)包括紧密光盘(CD)、激光光盘、光学光盘、数字通用光盘(DVD)、软性磁盘和蓝光光盘,其中磁盘通常以磁性方式再生数据,而光盘用激光以光学方式再生数据。上述各项的组合也应包括在计算机可读媒体的范围内。
提供对所揭示的配置的先前描述以使所属领域的技术人员能够制造或使用本发明。所属领域的技术人员将容易了解对这些配置的各种修改,且本文所界定的一般原理可在不脱离本发明的精神或范围的情况下应用于其它配置。因此,本发明不希望限于本文所示的配置,而是应被赋予与本文所揭示的原理和新颖特征一致的最广泛范围。

Claims (10)

1.一种使用可缩放视频编码的装置,其包含:
编码装置,其使用可缩放视频编码来编码当前帧或片段;
生成装置,其用于基于采用可缩放视频编码对先前经编码帧或片段的有效性进程系数进行的编码而生成用于当前帧或片段的指示区块结束EOB、特殊区块结束sEOB以及VLC初始化表的数据,其中所述初始化表中的统计数据由索引定义,且其中所述索引被限制为两个值,其中所述两个值包括0和scanIndex,其中scanIndex规定有效系数进程的Z形样式的开始扫描位置索引;以及
传输装置,其用于将所述指示EOB、sEOB以及VLC初始化表的数据与所述当前帧或片段一起传输到解码器。
2.根据权利要求1所述的装置,其中所述生成装置包括将所述数据的一部分与所述索引相关联的装置,其中所述数据的一部分对应于当针对所述符号的开始扫描位置索引等于所述数据的所述索引时所编码的符号以及当针对所述符号的开始扫描位置索引等于零时所编码的符号。
3.根据权利要求2所述的装置,其中所述初始化表用于亮度、色度,或所述亮度与所述色度两者。
4.根据权利要求2所述的装置,其中所述索引包括当前帧或片段的indexS值,其中所述indexS值包括进入所述EOB、所述sEOB和所述VLC初始化表的索引,所述装置进一步包括:
在所述indexS值所指示的位置从所述EOB表获取一个EOB值的装置;
在所述indexS值所指示的位置从所述sEOB表获取一个sEOB值的装置;
在所述indexS值所指示的位置从所述VLC初始化表获取一个VLC表值的装置;以及
使用所获取的EOB值、sEOB值和VLC表值对所述当前帧或片段进行编码的装置。
5.根据权利要求4所述的装置,进一步包括确定所述当前帧或片段的缺省indexS值是否大于零的装置,且当确定所述缺省indexS值大于零时,将所述indexS值设置为等于所述有效性进程的一个循环的scanIndex值。
6.一种使用可缩放视频编码的方法,其包含:
使用可缩放视频编码来编码当前帧或片段;
基于采用可缩放视频编码对先前经编码帧或片段的有效性进程系数进行的编码而生成用于所述当前帧或片段的指示区块结束EOB、特殊区块结束sEOB以及VLC初始化表的数据,其中所述初始化表中的统计数据由索引定义,且其中所述索引被限制为两个值,其中所述两个值包括0和scanIndex,其中scanIndex规定有效系数进程的Z形样式的开始扫描位置索引;以及
将所述指示EOB、sEOB以及VLC初始化表的数据与所述当前帧或片段一起传输到解码器。
7.根据权利要求6所述的方法,其中所述生成包括:
将所述数据的一部分与所述索引相关联,其中所述数据的一部分对应于当针对所述符号的开始扫描位置索引等于所述数据的所述索引时所编码的符号以及当针对所述符号的开始扫描位置索引等于零时所编码的符号。
8.根据权利要求6所述的方法,其中所述索引包含针对当前帧或片段的indexS值,且其中所述indexS值包括进入所述EOB、所述sEOB和所述VLC初始化表的索引。
9.根据权利要求8所述的方法,进一步包括:
在所述indexS值所指示的位置从所述EOB表获取一个EOB值;
在所述indexS值所指示的位置从所述sEOB表获取一个sEOB值;
在所述indexS值所指示的位置从所述VLC初始化表获取一个VLC表值;以及
使用所获取的EOB值、sEOB值和VLC表值对所述当前帧或片段进行编码。
10.根据权利要求9所述的方法,进一步包括:
确定所述当前帧或片段的缺省indexS值是否大于零;且
当确定所述缺省indexS值大于零时,将所述indexS值设置为等于所述有效性进程的一个循环的scanIndex值。
CN200780038049.4A 2006-10-13 2007-10-11 可缩放视频编解码器中的高效有效系数编码 Expired - Fee Related CN101682757B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US82949006P 2006-10-13 2006-10-13
US60/829,490 2006-10-13
US11/868,179 US8942292B2 (en) 2006-10-13 2007-10-05 Efficient significant coefficients coding in scalable video codecs
US11/868,179 2007-10-05
PCT/US2007/081119 WO2008048855A2 (en) 2006-10-13 2007-10-11 Efficient significant coefficients coding in scalable video codecs

Publications (2)

Publication Number Publication Date
CN101682757A CN101682757A (zh) 2010-03-24
CN101682757B true CN101682757B (zh) 2014-08-27

Family

ID=39286551

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200780038049.4A Expired - Fee Related CN101682757B (zh) 2006-10-13 2007-10-11 可缩放视频编解码器中的高效有效系数编码

Country Status (8)

Country Link
US (1) US8942292B2 (zh)
EP (1) EP2074828B1 (zh)
JP (1) JP5180220B2 (zh)
KR (1) KR101032277B1 (zh)
CN (1) CN101682757B (zh)
BR (1) BRPI0717831A2 (zh)
TW (1) TWI387343B (zh)
WO (1) WO2008048855A2 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BRPI0714127A2 (pt) * 2006-07-13 2012-12-25 Qualcomm Inc codificaÇço de vÍdeo com escalabilidade de granularidade fina utilizando fragmentos alinhados por ciclo.
US9319700B2 (en) 2006-10-12 2016-04-19 Qualcomm Incorporated Refinement coefficient coding based on history of corresponding transform coefficient values
US8325819B2 (en) 2006-10-12 2012-12-04 Qualcomm Incorporated Variable length coding table selection based on video block type for refinement coefficient coding
US8599926B2 (en) 2006-10-12 2013-12-03 Qualcomm Incorporated Combined run-length coding of refinement and significant coefficients in scalable video coding enhancement layers
US8565314B2 (en) 2006-10-12 2013-10-22 Qualcomm Incorporated Variable length coding table selection based on block type statistics for refinement coefficient coding
US8363579B2 (en) * 2008-12-08 2013-01-29 Intel Corporation Apparatus and method of communication in a wireless network
TWI399093B (zh) * 2009-12-30 2013-06-11 Univ Feng Chia 用於高效能細緻可調性編碼器之快速重新量化方法及快速重新量化器
US9042440B2 (en) 2010-12-03 2015-05-26 Qualcomm Incorporated Coding the position of a last significant coefficient within a video block based on a scanning order for the block in video coding
US8976861B2 (en) 2010-12-03 2015-03-10 Qualcomm Incorporated Separately coding the position of a last significant coefficient of a video block in video coding
US20120163456A1 (en) 2010-12-22 2012-06-28 Qualcomm Incorporated Using a most probable scanning order to efficiently code scanning order information for a video block in video coding
US9106913B2 (en) 2011-03-08 2015-08-11 Qualcomm Incorporated Coding of transform coefficients for video coding
US10397577B2 (en) 2011-03-08 2019-08-27 Velos Media, Llc Inverse scan order for significance map coding of transform coefficients in video coding
US9167253B2 (en) 2011-06-28 2015-10-20 Qualcomm Incorporated Derivation of the position in scan order of the last significant transform coefficient in video coding
KR20220131366A (ko) * 2012-10-01 2022-09-27 지이 비디오 컴프레션, 엘엘씨 베이스 레이어로부터 예측을 위한 서브블록 세부분할의 유도를 이용한 스케일러블 비디오 코딩
US20230035118A1 (en) * 2021-07-23 2023-02-02 Tencent America LLC Cross component end of block flag coding

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6792044B2 (en) * 2001-05-16 2004-09-14 Koninklijke Philips Electronics N.V. Method of and system for activity-based frequency weighting for FGS enhancement layers
US6959116B2 (en) * 2001-09-18 2005-10-25 Emc Corporation Largest magnitude indices selection for (run, level) encoding of a block coded picture
US6909753B2 (en) * 2001-12-05 2005-06-21 Koninklijke Philips Electronics, N.V. Combined MPEG-4 FGS and modulation algorithm for wireless video transmission
WO2003079692A1 (en) * 2002-03-19 2003-09-25 Fujitsu Limited Hierarchical encoder and decoder
PT2391019E (pt) * 2002-03-27 2014-08-29 Panasonic Ip Corp America Método de descodificação de comprimento variável, suporte de armazenamento, dispositivo de descodificação de comprimento ariável
US7136532B2 (en) * 2002-06-27 2006-11-14 Koninklijke Philips Electronics N.V. FGS decoder based on quality estimated at the decoder
US6894628B2 (en) * 2003-07-17 2005-05-17 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and methods for entropy-encoding or entropy-decoding using an initialization of context variables
US7286710B2 (en) * 2003-10-01 2007-10-23 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Coding of a syntax element contained in a pre-coded video signal
US7227894B2 (en) * 2004-02-24 2007-06-05 Industrial Technology Research Institute Method and apparatus for MPEG-4 FGS performance enhancement
US7519229B2 (en) * 2004-03-30 2009-04-14 Apple, Inc. Video coding system providing separate coding chains for dynamically selected small-size or full-size playback
US20060008009A1 (en) * 2004-07-09 2006-01-12 Nokia Corporation Method and system for entropy coding for scalable video codec
TWI243615B (en) * 2004-10-11 2005-11-11 Ind Tech Res Inst System for enhancing compression ratio of scalable video coding and method thereof
US20070223826A1 (en) * 2006-03-21 2007-09-27 Nokia Corporation Fine grained scalability ordering for scalable video coding
US8275045B2 (en) 2006-07-12 2012-09-25 Qualcomm Incorporated Video compression using adaptive variable length codes
KR100809301B1 (ko) * 2006-07-20 2008-03-04 삼성전자주식회사 엔트로피 부호화/복호화 방법 및 장치

Also Published As

Publication number Publication date
TWI387343B (zh) 2013-02-21
KR20090095564A (ko) 2009-09-09
WO2008048855A3 (en) 2009-12-17
WO2008048855A2 (en) 2008-04-24
JP2010528492A (ja) 2010-08-19
KR101032277B1 (ko) 2011-05-06
JP5180220B2 (ja) 2013-04-10
CN101682757A (zh) 2010-03-24
US20080089425A1 (en) 2008-04-17
US8942292B2 (en) 2015-01-27
BRPI0717831A2 (pt) 2014-06-10
EP2074828A2 (en) 2009-07-01
EP2074828B1 (en) 2016-11-16
TW200835337A (en) 2008-08-16

Similar Documents

Publication Publication Date Title
CN101682757B (zh) 可缩放视频编解码器中的高效有效系数编码
KR101524146B1 (ko) 다운샘플링된 기준 화상을 이용한 인터-뷰 예측
AU2007350974B2 (en) A video coder
AU2006250203B2 (en) Method of transmitting picture information when encoding video signal and method of using the same when decoding video signal
EP3185557A1 (en) Predictive coding/decoding method, corresponding coder/decoder, and electronic device
JP2023065387A (ja) マルチコンポーネント画像またはビデオ符号化のコンセプト
EP2096870A2 (en) Systems and methods for processing multiple projections of video data in a single video file
TW201244487A (en) Picture identification for multi-view video coding
MX2008000569A (es) Indicacion de dependencia de codificacion en codificacion de video escalable.
TW200840371A (en) CAVLC enhancements for SVC CGS enhancement layer coding
CN104937932A (zh) 可适性视频编码的增强参考区域利用
CN113170113A (zh) 用于视频编码和解码的三角形和多重假设组合
CN116348184A (zh) 游戏应用程序中利用基于深度学习的预测的延迟管理
US9467676B2 (en) Multi-view video coding and decoding methods and apparatuses, coder, and decoder
US20220109891A1 (en) Features of range asymmetric number system encoding and decoding
JP6005292B2 (ja) ビデオ符号化及び復号のためのヒストグラム分割ベースのローカル適応フィルタ
JP7012191B1 (ja) 画像復号装置、画像復号方法及びプログラム
CN113038209A (zh) 无线传屏数据处理方法、系统及计算机可读存储介质
CN114079789A (zh) 处理运动矢量的方法和设备
CN115623218A (zh) 特征数据编码方法、编码器、特征数据解码方法及解码器
JP2017184262A (ja) ビデオ符号化及び復号のためのヒストグラム分割ベースのローカル適応フィルタ
JP2017028714A (ja) ビデオ符号化及び復号のためのヒストグラム分割ベースのローカル適応フィルタ

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140827

Termination date: 20181011

CF01 Termination of patent right due to non-payment of annual fee