CN103563379A - 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置 - Google Patents

图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置 Download PDF

Info

Publication number
CN103563379A
CN103563379A CN201280008483.9A CN201280008483A CN103563379A CN 103563379 A CN103563379 A CN 103563379A CN 201280008483 A CN201280008483 A CN 201280008483A CN 103563379 A CN103563379 A CN 103563379A
Authority
CN
China
Prior art keywords
signal
coding
mentioned
composition
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280008483.9A
Other languages
English (en)
Other versions
CN103563379B (zh
Inventor
笹井寿郎
西孝启
柴原阳司
杉尾敏康
谷川京子
松延彻
寺田健吾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Patent Trust Inc
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to CN201710545579.3A priority Critical patent/CN107197284B/zh
Priority to CN201710545557.7A priority patent/CN107257463B/zh
Publication of CN103563379A publication Critical patent/CN103563379A/zh
Application granted granted Critical
Publication of CN103563379B publication Critical patent/CN103563379B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/40Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

图像编码方法包括:二值化步骤(S401),通过将在LAST位置信息中包含第1成分和第2成分二值化分别生成第1二值化信号和第2二值化信号;算术编码步骤,将作为第1二值化信号的一部分的第1部分信号和作为第2二值化信号的一部分的第2部分信号通过第1算术编码而编码(S402、S405),并且将作为第1二值化信号的另一部分的第3部分信号和作为第2二值化信号的另一部分的第4部分信号通过第2算术编码而编码(S409、S411);以及配置步骤(S412),将编码后的第1~第4部分信号配置到比特流内;在配置步骤(S412)中,(i)接着编码后的第1部分信号而配置编码后的第2部分信号,或者(ii)接着编码后的第3部分信号而配置编码后的第4部分信号。

Description

图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
技术领域
本发明涉及进行算术编码或算术解码的图像编码技术及图像解码技术。
背景技术
用来提供经由因特网的服务(例如,电视会议、数字视频广播、以及包含影像内容的流的视频点播(Video On Demand)型的服务)的应用越来越增加。这些应用有赖于影像数据的发送。当通过这些应用发送影像数据时,影像数据的许多被经由具有有限的带宽的以往的传送路径发送。此外,当通过这些应用将影像数据记录时,影像数据的许多被向具有有限的记录容量的以往的记录介质记录。为了经由以往的传送路径发送影像数据、或向以往的记录介质记录影像数据,将影像数据的数据量压缩或削减是必不可少的。
所以,为了影像数据的压缩而开发了多个影像编码标准。这样的影像编码标准例如是由H.26x表示的ITU-T标准及由MPEG-x表示的ISO/IEC标准。最新且最先进的影像编码标准目前是由H.264/MPEG-4AVC表示的标准(参照非专利文献1及非专利文献2)。
作为这些影像编码标准的几乎全部的基础的编码方法基于包括由以下的(a)~(d)表示的主要的阶段的预测编码。(a)为了将影像帧分别用块级别进行数据压缩,将影像帧分割为具有多个像素的块。(b)通过根据先编码的影像数据预测各个块,确定时间及空间冗余性。(c)通过从影像数据减去预测数据,将所确定的冗余性除去。(d)通过傅立叶变换、量化及熵编码,将其余的数据(残差块)压缩。
在上述(a)工序中,在目前的影像编码标准中,为了预测各宏块而使用的预测模式不同。几乎全部的影像编码标准为了根据前面编码及解码后的帧来预测影像数据而使用运动检测及运动补偿(帧间预测)。或者块数据也可以从相同的帧的邻接的块进行外插(帧内预测)。
在上述(d)工序中,将包含在编码对象块中的量化后的系数以预先设定的顺序(扫描顺序)扫描。并且,将表示扫描后的系数是零系数还是非零系数的信息(Significant Flag)(例如将非零系数表示为1、将零系数表示为0的2值信息(symbol,符号))编码。
进而,将表示在扫描顺序中为最后的非零系数的位置的信息(LAST位置信息)进行二值化,进行算术编码及算术解码。
现有技术文献
非专利文献
非专利文献1:ITU-T Recommendation H.264“Advanced video codingfor generic audio visual services”,2010年3月
非专利文献2:JCT-VC “WD4:Working Draft 4 of High-EfficiencyVideo Coding”,JCTVC-F803,July2011.
发明概要
发明要解决的问题
但是,在上述以往的技术中,希望更有效率地将LAST位置信息进行算术编码及算术解码。
发明内容
所以,本发明提供一种能够将LAST位置信息有效率地算术编码及算术解码的图像编码方法及图像解码方法。
用于解决问题的手段
有关本发明的一技术方案的一种图像编码方法,对LAST位置信息进行编码,该LAST位置信息表示在编码对象块所包含的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置,其特征在于,该图像编码方法包括:二值化步骤,通过对作为在上述LAST位置信息中包含的水平成分及垂直成分中的一方的第1成分、和作为上述水平成分及上述垂直成分中的另一方的第2成分进行二值化,分别生成第1二值化信号和第2二值化信号;算术编码步骤,将作为上述第1二值化信号的一部分的第1部分信号和作为上述第2二值化信号的一部分的第2部分信号通过第1算术编码而编码,并且将作为上述第1二值化信号的另一部分的第3部分信号和作为上述第2二值化信号的另一部分的第4部分信号通过方法与上述第1算术编码不同的第2算术编码而编码;以及配置步骤,将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号配置到比特流内;在上述配置步骤中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
另外,这些包含性或具体的形态也可以通过系统、装置、集成电路、计算机程序或计算机可读取的CD-ROM等的记录介质实现,也可以通过系统、装置、集成电路、计算机程序及记录介质的任意的组合来实现。
发明效果
有关本发明的一技术方案的图像编码方法能够将LAST位置信息有效率地算术编码及算术解码。
附图说明
图1是表示有关设想技术的图像解码装置的结构的一例的框图。
图2是表示有关设想技术的图像解码方法的一例的流程图。
图3A是表示块尺寸为4×4的情况下的LAST位置信息的二值化信号的一例的图。
图3B是表示块尺寸为8×8的情况下的LAST位置信息的二值化信号的例子的图。
图3C是表示块尺寸为16×16的情况下的LAST位置信息的二值化信号的例子的图。
图3D是表示块尺寸为32x32的情况下的LAST位置信息的二值化信号的例子的图。
图4是表示上下文自适应算术解码处理的流程图。
图5是表示旁路解码处理的流程图。
图6是表示归一化处理的流程图。
图7是表示有关实施方式1的图像解码装置的功能结构的框图。
图8A是表示有关实施方式1的图像解码装置的处理动作的一例的流程图。
图8B是表示有关实施方式1的图像解码装置的处理动作的另一例的流程图。
图9A是表示有关实施方式1的第2解码部的处理动作的一例的流程图。
图9B是表示实施方式1的块尺寸与前缀部的最大长度的关系的一例的图。
图9C是表示实施方式1的块尺寸与前缀部的最大长度的关系的另一例的图。
图9D是表示实施方式1的块尺寸与莱斯参数的关系的一例的图。
图9E是表示实施方式1的块尺寸与莱斯参数的关系的另一例的图。
图10A是表示RP值和前缀部的最大长度的决定方法的一例的流程图。
图10B是表示RP值和前缀部的最大长度的决定方法的另一例的流程图。
图10C是表示RP值和前缀部的最大长度的决定方法的另一例的流程图。
图10D是表示RP值和前缀部的最大长度的决定方法的另一例的流程图。
图11A是用来说明实施方式1的算术解码处理的例子的图。
图11B是用来说明比较例的算术解码处理的例子的图。
图12是表示有关实施方式1的变形例的图像解码装置的结构的一例的框图。
图13是表示有关实施方式2的图像编码装置的功能结构的框图。
图14A是表示有关实施方式2的图像编码装置的处理动作的一例的流程图。
图14B是表示有关实施方式2的图像编码装置的处理动作的另一例的流程图。
图15是表示块尺寸为16×16的情况下的LAST位置信息的二值化信号的一例的图。
图16是表示有关实施方式2的图像编码装置的结构的一例的框图。
图17是实现内容分发服务的内容供给系统的整体结构图。
图18是数字广播用系统的整体结构图。
图19是表示电视机的结构例的模块图。
图20是表示对作为光盘的记录介质进行信息的读写的信息再现/记录部的结构例的模块图。
图21是表示作为光盘的记录介质的构造例的图。
图22A是表示便携电话的一例的图。
图22B是表示便携电话的结构例的模块图。
图23是表示复用数据的结构的图。
图24是示意地表示各流在复用数据中怎样被复用的图。
图25是更详细地表示在PES包序列中视频流怎样被保存的图。
图26是表示复用数据的TS包和源包的构造的图。
图27是表示PMT的数据结构的图。
图28是表示复用数据信息的内部结构的图。
图29是表示流属性信息的内部结构的图。
图30是表示识别影像数据的步骤的图。
图31是表示实现各实施方式的动态图像编码方法及动态图像解码方法的集成电路的结构例的模块图。
图32是表示切换驱动频率的结构的图。
图33是表示识别影像数据、切换驱动频率的步骤的图。
图34是表示将影像数据的标准与驱动频率建立了对应的查找表的一例的图。
图35A是表示将信号处理部的模块共用的结构的一例的图。
图35B是表示将信号处理部的模块共用的结构的另一例的图。
具体实施方式
(作为本发明的基础的见解)
本发明的发明者们关于在“背景技术”栏中记载的LAST位置信息的算术编码及算术解码,发现了以下的情况。
另外,在以下,LAST位置信息表示在包含在对象块中的多个系数中、在预先设定的顺序中为最后的非零系数的水平方向及垂直方向的位置。这里,LAST位置信息包括水平成分(以下,称作“X成分”)和垂直成分(以下,称作“Y成分”)。X成分表示对象块内的水平方向的位置。此外,Y成分表示对象块内的垂直方向的位置。
图1是表示有关设想技术的图像解码装置1000的结构的一例的框图。此外,图2是表示有关设想技术的图像解码方法的一例的流程图。如图1所示,图像解码装置1000具备第1解码部1001、第2解码部1002、解码控制部1003和复原部1004。
图像解码装置1000取得包含LAST位置信息的比特流BS。并且,图像解码装置1000将比特流BS向第1解码部1001、第2解码部1002和解码控制部1003输入。
解码控制部1003对所取得的比特流BS内的各信号是LAST位置信息的X成分还是Y成分进行管理。
第1解码部1001对包含在比特流BS中的LAST位置信息的X成分的前缀部进行算术解码(S1001)。具体而言,第1解码部1001通过上下文自适应算术解码将X成分的前缀部解码。这里,所谓前缀(prefix)部,是在X成分或Y成分的二值化信号中通过上下文自适应算术编码而被编码的部分。
接着,第1解码部1001判断X成分的二值化信号是否包含后缀部(S1002)。所谓后缀(suffix)部,是在X成分或Y成分的二值化信号中通过旁路(bypass)编码而被编码的部分。
这些前缀部及后缀部例如如图3A~图3D所示,由X成分及Y成分的各值(以下,也称作“Last值”)决定。因而,第1解码部1001能够通过预先设定的方法判断X成分的二值化信号是否包含后缀部。
具体而言,例如在变换块的尺寸(以下,称作“变换尺寸”)是4×4的情况下,如图3A所示,X成分的二值化信号不论Last值如何,都仅包含前缀部而不包含后缀部。因而,第1解码部1001在解码对象块的尺寸是4×4的情况下,判断为X成分的二值化信号不包含后缀部。
此外,例如在变换尺寸为8×8的情况下,如图3B所示,当解码后的X成分的二值化信号的第4比特之前的2值符号的值的某个是“1”时,第1解码部1001判断为X成分的二值化信号不包含后缀部。另一方面,当解码后的X成分的二值化信号的第4比特之前的2值符号的值的全部是“0”时,第1解码部1001判断为X成分的二值化信号包含固定长2比特的后缀部。
此外,例如在变换尺寸为16×16的情况下,如图3C所示,当解码后的X成分的二值化信号的第8比特之前的2值符号的值的某个是“1”时,第1解码部1001判断为X成分的二值化信号不包含后缀部。另一方面,当解码后的X成分的二值化信号的第8比特之前的2值符号的值的全部是“0”时,第1解码部1001判断为X成分的二值化信号包含固定长3比特的后缀部。
此外,例如在变换尺寸为32×32的情况下,如图3D所示,当解码后的X成分的二值化信号的第16比特之前的2值符号的值的某个是“1”时,第1解码部1001判断为X成分的二值化信号不包含后缀部。另一方面,在解码后的X成分的二值化信号的第16比特之前的2值符号的值的全部是“0”时,第1解码部1001判断为X成分的二值化信号包含固定长4比特的后缀部。
这里,在X成分的二值化信号包含后缀部的情况下(S1002中“是”),第2解码部1002将预先设定的固定长的比特数的后缀部算术解码(S1003)。具体而言,第2解码部1002通过旁路解码将X成分的后缀部算术解码。另一方面,在X成分的二值化信号不包含后缀部的情况下(S1002中“否”),将后缀部的解码处理跳过。
复原部1004使用解码后的前缀部及后缀部将LAST位置信息的X成分复原(S1004)。即,在X成分的二值化信号包含后缀部的情况下,复原部1004通过将解码后的包含前缀部及后缀部的二值化信号进行多值化,将X成分复原。另一方面,在X成分的二值化信号不包含后缀部的情况下,通过将解码后的包含前缀部的二值化信号进行多值化,将X成分复原。
接着,第1解码部1001与步骤S1001同样,将LAST位置信息的Y成分的前缀部算术解码(S1005)。接着,第1解码部1001与步骤S1002同样,判断Y成分的二值化信号是否包含后缀部(S1006)。
这里,在Y成分的二值化信号包含后缀部的情况下(S1006中“是”),第2解码部1002与步骤S1003同样,将预先设定的固定长的后缀部算术解码(S1007)。另一方面,在Y成分的二值化信号不包含后缀部的情况下(S1006中“否”),将后缀部的解码处理跳过。
最后,复原部1004与步骤S1004同样,将LAST位置信息的Y成分复原(S1008)。即,在Y成分的二值化信号包含后缀部的情况下,复原部1004通过将解码后的包含前缀部及后缀部的二值化信号进行多值化,将Y成分复原。另一方面,在Y成分的二值化信号不包含后缀部的情况下,通过将解码后的包含前缀部的二值化信号进行多值化,将Y成分复原。
如以上这样,将在LAST位置信息中包含的X成分及Y成分复原。
接着,对可变长编码及可变长解码进行说明。在H.264中,作为可变长编码方法之一,使用上下文自适应算术编码(CABAC:Context AdaptiveBinary Arithmetic Coding)。将前缀部通过该CABAC编码。另一方面,将后缀部通过作为使用固定概率(例如“0.5”)的算术编码的旁路编码来编码。所以,使用图4~图6对上下文自适应算术解码处理及旁路解码处理进行说明。
图4是表示上下文自适应算术解码处理的流程图。另外,该图4是从非专利文献1中摘取的图。只要没有特别说明,图4的说明就是非专利文献1中记载那样的。
在算术解码处理中,首先,输入基于解码对象信号的信号种类决定的上下文(ctxIdx)。
接着,在步骤S2001中进行以下的处理。
首先,从表示当前的算术解码的状态的第1参数codIRange,计算qCodIRangeIdx。进而,取得作为与ctxIdx对应的状态值的pStateIdx。并且,通过对表(rangeTableLPS)进行参照,取得与这两个值(qCodIRangeIdx及pStateIdx)对应的codIRangeLPS。
另外,该codIRangeLPS表示对于表示算术解码的状态的第1参数codIRange发生了LPS的情况下的算术解码的状态。LPS表示符号“0”及“1”中的发生概率较低一方的符号。
进而,在codIRange中,设置从当前的codIRange减去上述codIRangeLPS后的值。
接着,在步骤S2002中,将codIRange与表示算术解码的状态的第2参数codIOffset比较。
这里,在codIOffset与codIRange相等或比其大的情况下(S2002中“是”),在步骤S2003中,进行以下的处理。
首先,判断为发生了LPS,在作为解码输出值的binVal中设置与valMPS不同的值(在valMPS=1的情况下是“0”,在valMPS=0的情况下是“1”)。valMPS表示MPS的具体的值(“0”或“1”)。此外,MPS指示2值符号的值“0”及“1”中的发生概率较高一方的2值符号。
此外,在表示算术解码的状态的第2参数codIOffset中,设置从当前的codIOffset减去codIRange后的值。进而,在表示算术解码的状态的第1参数codIRange中,设置在步骤S2001中设置的codIRangeLPS的值。
接着,在步骤S2005中,判断pStateIdx的值是否是“0”。
这里,在pStateIdx的值是“0”的情况下(步骤S2005中“是”),表示LPS的概率高于MPS的概率,所以将valMPS的值替换(在valMPS=1的情况下设定“0”,在valMPS=0的情况下设定“1”)(步骤S2006)。另一方面,在pStateIdx值不是“0”的情况下(步骤S2005中“否”),将pStateIdx的值基于在发生了LPS的情况下所参照的变换表transIdxLPS来更新(步骤S2007)。
此外,在codIOffset比codIRange小的情况下(S2002中“否”),判断为发生了MPS,在作为解码输出值的binVal中设置valMPS,将pStateIdx的值基于在发生了MPS的情况下所参照的变换表transIdxMPS来更新(步骤S2004)。
最后,进行归一化处理(RenormD)(步骤S2008),结束算术解码。
这样,在上下文自适应算术解码处理中,将作为2值符号的发生概率的符号发生概率与上下文索引建立对应而保持多个。并且,由于根据条件(例如邻接块的值)切换上下文,所以需要维持处理的顺序。
图5是表示旁路解码处理的流程图。另外,该图5是从非专利文献1摘取出的图。只要没有特别说明,图5的说明就是非专利文献1所记载那样的。
首先,将表示当前的算术解码的状态的第2参数codIOffset进行左移位(2倍)。进而,从比特流中读出1比特,如果该读出比特是“1”,则再对codIOffset加1(S3001)。
接着,在codIOffset与表示算术解码的状态的第1参数codIRange相等或比其大的情况下(S3002中“是”),对作为解码输出值的binVal设置“1”,在codIOffset中,设置从当前的codIOffset减去codIRange后的值(步骤S3003)。另一方面,在codIOffset比表示算术解码的状态的第1参数codIRange小的情况下(S3002中“否”),对作为解码输出值的binVal设置“0”(步骤S3004)。
图6是用来详细地说明在图4的步骤S2008中表示的归一化处理(RenormD)的流程图。该图6是从非专利文献1摘取的图。只要没有特别说明,图6的说明就是非专利文献1所记载那样的。
在表示算术解码的状态的第1参数codIRange变得比0x100(16进制:256(10进制))小的情况下(S4001中“是”),将codIRange左移位(2倍)。进而,将表示算术解码的状态的第2参数codIOffset左移位(2倍)。进而,从比特流读出1比特,如果该读出比特是“1”,则再对codIOffset加上1(S4002)。
当通过该步骤S4002的处理、最终codIRange成为256以上时(S4001中“否”),将归一化处理结束。
如以上这样,进行算术解码。
但是,在上述设想技术中,将包含在LAST位置信息中的X成分及Y成分按顺序解码。即,在比特流内依次配置有X成分和Y成分。因而,当将LAST位置信息算术解码时,交替地执行上下文自适应算术解码和旁路解码。即,算术解码方法的切换较多,难以高效率地将LAST位置信息算术解码。
所以,有关本发明的一技术方案的一种图像编码方法,对LAST位置信息进行编码,该LAST位置信息表示在编码对象块所包含的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置,其特征在于,该图像编码方法包括:二值化步骤,通过对作为在上述LAST位置信息中包含的水平成分及垂直成分中的一方的第1成分、和作为上述水平成分及上述垂直成分中的另一方的第2成分进行二值化,分别生成第1二值化信号和第2二值化信号;算术编码步骤,将作为上述第1二值化信号的一部分的第1部分信号和作为上述第2二值化信号的一部分的第2部分信号通过第1算术编码而编码,并且将作为上述第1二值化信号的另一部分的第3部分信号和作为上述第2二值化信号的另一部分的第4部分信号通过方法与上述第1算术编码不同的第2算术编码而编码;以及配置步骤,将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号配置到比特流内;在上述配置步骤中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
据此,接着某个编码后的部分信号而将通过与该部分信号相同的算术编码而编码的部分信号配置到比特流内。因而,在将算术编码后的LAST位置信息解码时,与将用不同的方法算术编码后的多个部分信号交替地配置的情况相比,能够减少算术解码的方法的切换。即,能够输出能将LAST位置信息高效率地解码的比特流。
例如,也可以是,上述第1算术编码是使用基于已编码信号而更新的变动概率的上下文自适应算术编码;在上述配置步骤中,接着上述编码后的第1部分信号而配置上述编码后的第2部分信号。
据此,作为第1算术编码可以使用上下文自适应算术编码。因而,能够输出能将两个编码后的部分信号连续地高效率地通过上下文自适应算术解码而解码的比特流。
例如,也可以是,上述第2算术编码是使用固定概率的旁路编码;在上述配置步骤中,接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
据此,作为第1算术编码可以使用旁路编码。另外,在旁路解码中,由于没有使用变动概率,所以并行处理变得容易。因而,能够输出将两个编码后的部分信号连续或并行地、高效率地旁路解码的比特流。
例如,也可以是,上述第1算术编码是使用基于已编码信号而更新的变动概率的上下文自适应算术编码;上述第2算术编码是使用固定概率的旁路编码;在上述配置步骤中,将上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号的顺序配置到上述比特流内。
据此,能够接着通过上下文自适应算术编码而编码的两个部分信号而配置通过旁路编码而编码的两个部分信号。因而,在将LAST位置信息解码时,能够进一步减少算术解码的方法的切换。即,能够输出能将LAST位置信息更高效率地解码的比特流。
例如,也可以是,上述第1算术编码是使用基于已编码信号而更新的变动概率的上下文自适应算术编码;上述第2算术编码是使用固定概率的旁路编码;在上述配置步骤中,将上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第4部分信号及上述编码后的第3部分信号的顺序配置到上述比特流内。
据此,能够接着通过上下文自适应算术编码而编码的两个部分信号而配置通过旁路编码而编码的两个部分信号。因而,在将LAST位置信息解码时,能够进一步减少算术解码的方法的切换。即,能够输出能将LAST位置信息更高效率地解码的比特流。
此外,据此,由于接着编码后的第2部分信号而配置编码后的第4部分信号,所以能够输出能够通过一系列的解码处理得到第2二值化信号的比特流。
例如,也可以是,上述图像编码方法还包括:切换步骤,将编码处理切换为依据第1标准的第1编码处理或依据第2标准的第2编码处理;以及附加步骤,将表示切换后的上述编码处理所依据的上述第1标准或上述第2标准的识别信息附加到比特流中;在上述编码处理被切换为上述第1编码处理的情况下,作为上述第1编码处理而进行上述二值化步骤、上述算术编码步骤和上述配置步骤。
据此,能够切换依据第1标准的第1编码处理和依据第2标准的第2编码处理。
此外,有关本发明的一技术方案的一种图像解码方法,对LAST位置信息进行解码,该LAST位置信息表示在编码对象块所包含的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置,其特征在于,该图像解码方法包括:算术解码步骤,将包含在比特流中的编码后的第1部分信号及编码后的第2部分信号通过第1算术解码而解码,并且将包含在上述比特流中的编码后的第3部分信号及编码后的第4部分信号通过方法与上述第1算术解码不同的第2算术解码而解码;以及复原步骤,通过对由上述第1部分信号及上述第3部分信号构成的第1二值化信号进行多值化,将在上述LAST位置信息中包含的作为水平成分及垂直成分中的一方的第1成分复原,并且,通过对由上述第2部分信号及上述第4部分信号构成的第2二值化信号进行多值化,将作为上述水平成分及上述垂直成分中的另一方的第2成分复原;在上述比特流中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
据此,通过将接着某个编码后的部分信号而配置有用与该部分信号相同的算术编码而编码的部分信号的比特流解码,能够将LAST位置信息复原。因而,与将交替地配置了用不同的方法算术编码的多个部分信号的比特流解码的情况相比,能够减少算术解码的方法的切换。即,能够将LAST位置信息高效率地解码。
例如,也可以是,在上述比特流中,接着上述编码后的第1部分信号而配置上述编码后的第2部分信号;上述第1算术解码是使用基于已解码信号而更新的变动概率的上下文自适应算术解码。
据此,作为第1算术解码可以使用上下文自适应算术解码。因而,能够将两个编码后的部分信号连续高效率地通过上下文自适应算术解码而解码。
例如,也可以是,在上述比特流中,接着上述编码后的第3部分信号而配置上述编码后的第4部分信号;上述第2算术解码是使用固定概率的旁路解码。
据此,作为第1算术解码可以使用旁路解码。另外,在旁路解码中,由于不使用变动概率,所以并行处理变容易。因而,能够将两个编码后的部分信号连续或并行地、高效率地旁路解码。
例如,也可以是,在上述比特流中,上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号的顺序配置;上述第1算术解码是使用基于已解码信号而更新的变动概率的上下文自适应算术解码;上述第2算术解码是使用固定概率的旁路解码。
据此,能够将接着通过上下文自适应算术编码而编码的两个部分信号而配置有通过旁路编码而编码的两个部分信号的比特流解码。因而,在将LAST位置信息解码时,能够进一步减少算术解码的方法的切换,能够将LAST位置信息更高效率地解码。
例如,也可以是,在上述比特流中,上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第4部分信号及上述编码后的第3部分信号的顺序配置;上述第1算术解码是使用基于已解码信号而更新的变动概率的上下文自适应算术解码;上述第2算术解码是使用固定概率的旁路解码。
据此,能够将接着通过上下文自适应算术编码而编码的两个部分信号而配置有通过旁路编码而编码的两个部分信号的比特流解码。因而,在将LAST位置信息解码时,能够进一步减少算术解码的方法的切换,能够将LAST位置信息更高效率地解码。
此外,据此,由于将接着编码后的第2部分信号而配置有编码后的第4部分信号的比特流解码,所以能够通过一系列的解码处理得到第2二值化信号。
例如,也可以是,上述图像解码方法还包括:切换步骤,根据附加在比特流中的表示第1标准或第2标准的识别信息,将解码处理切换为依据上述第1标准的第1解码处理或依据上述第2标准的第2解码处理;在上述解码处理被切换为第1解码处理的情况下,作为上述第1解码处理而进行上述算术解码步骤和上述复原步骤。
据此,能够切换依据第1标准的第1解码处理和依据第2标准的第2解码处理。
另外,这些包含性或具体的形态也可以通过系统、装置、集成电路、计算机程序或计算机可读取的CD-ROM等的记录介质实现,也可以通过系统、装置、集成电路、计算机程序及记录介质的任意的组合来实现。
以下,使用附图对实施方式详细地说明。
另外,以下说明的实施方式都是表示包含性或具体的例子的。在以下的实施方式中表示的数值、形状、材料、构成要素、构成要素的配置位置及连接形态、步骤、步骤的顺序等是一例,并不是限定本发明的意思。此外,关于以下的实施方式的构成要素中的、在表示最上位概念的独立权利要求中没有记载的构成要素,作为任意的构成要素进行说明。
(实施方式1)
图7是表示有关实施方式1的图像解码装置100的功能结构的框图。该图像解码装置100将LAST位置信息解码。这里,对编码后的LAST位置信息包含编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号的情况进行说明。
如图7所示,图像解码装置100具备算术解码部110和复原部104。算术解码部110具有第1解码部101、第2解码部102和解码控制部103。
图像解码装置100取得包含编码后的LAST位置信息的比特流BS。
另外,比特流BS也有不包含编码后的第3部分信号或编码后的第4部分信号的情况。例如,在解码对象块比规定尺寸小的情况下、或者在包含在LAST位置信息中的第1成分或第2成分的值(Last值)比规定值小的情况下,比特流BS不包含编码后的第3部分信号或编码后的第4部分信号。
编码后的第1部分信号及编码后的第2部分信号分别相当于例如通过上下文自适应算术编码而编码的前缀部。此外,编码后的第3部分信号及编码后的第4部分信号分别相当于例如通过旁路编码而编码的后缀部。
这里,在比特流BS中,接着编码后的第1部分信号而配置有编码后的第2部分信号,或者接着编码后的第3部分信号而配置有编码后的第4部分信号。
具体而言,在比特流BS中,例如以编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号的顺序,来配置编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号。此外,在比特流BS中,例如也可以以编码后的第1部分信号、编码后的第2部分信号、编码后的第4部分信号及编码后的第3部分信号的顺序,来配置编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号。
第1解码部101将编码后的第1部分信号及编码后的第2部分信号通过第1算术解码而解码。第1算术解码例如是使用基于已解码信号更新后的变动概率的上下文自适应算术解码。在此情况下,第1解码部101将编码后的第1部分信号及编码后的第2部分信号通过上下文自适应算术解码而解码。另外,第1算术解码也可以不是上下文自适应算术解码。
第2解码部102将编码后的第3部分信号及编码后的第4部分信号通过第2算术解码而解码。例如,第2算术解码是使用固定概率的旁路解码。在此情况下,第2解码部102将编码后的第3部分信号及编码后的第4部分信号通过旁路解码而解码。此时,第2解码部102也可以将编码后的第3部分信号及编码后的第4部分信号并行地解码。
另外,第2算术解码也可以不是旁路解码。即,只要第1算术解码的方法和第2算术解码的方法不同就可以。
解码控制部103对比特流BS内的各部是LAST位置信息的X成分还是Y成分进行管理。另外,解码控制部103也可以不包含在算术解码部110中。即,图像解码装置100也可以不具备解码控制部103。在此情况下,第1解码部101及第2解码部102只要管理X成分及Y成分就可以。
复原部104通过将包含第1部分信号及第3部分信号的第1二值化信号多值化,将包含在LAST位置信息中的作为水平成分及垂直成分的一方的第1成分复原。此外,复原部104通过将包含第2部分信号及第4部分信号的第2二值化信号进行多值化,将包含在LAST位置信息中的作为水平成分及垂直成分的另一方的第2成分复原。
接着,对如以上那样构成的图像解码装置100的动作使用图8A及图8B详细地说明。
以下,假设第1成分是X成分,第2成分是Y成分。此外,假设第1部分信号及第2部分信号是前缀部,第3部分信号及第4部分信号是后缀部。此外,假设在X成分的后缀标志及Y成分的后缀标志中,作为初始值而设定了“OFF”。另外,后缀标志是表示在LAST位置信息的各成分的二值化信号中是否包含后缀部的内部标志。
图8A是表示有关实施方式1的图像解码装置100的处理动作的一例的流程图。在图8A中,在比特流BS中,以编码后的X成分的前缀部、编码后的Y成分的前缀部、编码后的X成分的后缀部及编码后的Y成分的后缀部的顺序连续配置有编码后的X成分的前缀部、编码后的Y成分的前缀部、编码后的X成分的后缀部及编码后的Y成分的后缀部。另外,各成分的后缀部根据各成分的值,有不包含在比特流BS中的情况。
首先,第1解码部101从比特流BS将编码后的X成分的前缀部通过上下文自适应算术解码而解码(S101)。例如,第1解码部101将编码后的前缀部1比特1比特地算术解码,直到预先设定的最大长度或直到“1”被解码。
接着,第1解码部101判断X成分的二值化信号是否包含后缀部(S102)。例如,在前缀部具有预先设定的最大长度、并且包含在前缀部中的2值符号的值全部是“0”的情况下,第1解码部101判断为X成分的二值化信号包含后缀部。
另外,该前缀部的最大长度例如根据变换尺寸预先设定。例如,前缀部的最大长度如图9B或图9C那样设定。
这里,在X成分的二值化信号包含后缀部的情况下(S102中“是”),第1解码部101在X成分的后缀标志中设定“ON”(S103)。另一方面,在X成分的二值化信号不包含后缀部的情况下(S102中“否”),第1解码部101在X成分的后缀标志中不设定“ON”。即,为在X成分的后缀标志中保持设定作为初始值的“OFF”原状不变。另外,第1解码部101这里也可以在X成分的后缀标志中设定“OFF”。
接着,第1解码部101将接着编码后的X成分的前缀部配置的、编码后的Y成分的前缀部通过上下文自适应算术解码而解码(S104)。具体而言,第1解码部101与X成分的前缀部的解码同样,将Y成分的前缀部解码。
接着,第1解码部101判断Y成分的二值化信号是否包含后缀部(S105)。具体而言,第1解码部101与X成分的二值化信号是否包含后缀部的判断同样,判断Y成分的二值化信号是否包含后缀部。
这里,在Y成分的二值化信号包含后缀部的情况下(S105中“是”),第1解码部101在Y成分的后缀标志中设定“ON”(S106)。另一方面,在Y成分的二值化信号不包含后缀部的情况下(S105中“否”)第1解码部101不在Y成分的后缀标志中设定“ON”。
接着,第2解码部102判断在X成分的后缀标志中是否设定了“ON”(S107)。这里,在X成分的后缀标志中设定了“ON”的情况下(S107中“是”),第2解码部102将接着编码后的Y成分的前缀部配置的编码后的X成分的后缀部通过旁路解码而解码(S108)。另一方面,在X成分的后缀标志中没有设定“ON”的情况下(S107中“否”),将步骤S108跳过。
复原部104通过将包含前缀部及后缀部的两者或仅包含前缀部的X成分的二值化信号多值化,将LAST位置信息的X成分复原(S109)。例如在如图3B那样将X成分的值二值化的情况下,复原部104通过将二值化信号“000010”多值化,将X成分的值“5”复原。
接着,第2解码部102判断在Y成分的后缀标志中是否设定了“ON”(S110)。这里,在Y成分的后缀标志中设定了“ON”的情况下(S110中“是”),第2解码部102将接着编码后的X成分的后缀部配置的或接着编码后的Y成分的前缀部配置的、编码后的Y成分的后缀部通过旁路解码而解码(S111)。另一方面,在Y成分的后缀标志中没有设定“ON”的情况下(S110中“否”),将步骤S111跳过。
最后,复原部104通过将包含前缀部及后缀部的两者或仅包含前缀部的Y成分的二值化信号多值化,将LAST位置信息的Y成分复原(S112)。
另外,在图8A中,第2解码部102在X成分的后缀部的解码(S108)后进行Y成分的后缀部的解码(S111),但也可以并行地进行X成分的后缀部的解码和Y成分的后缀部的解码。由此,第2解码部102能够使LAST位置信息的算术解码处理高速化。
接着,以与图8A不同的顺序,对在比特流内配置各成分的前缀部及后缀部的情况进行说明。
图8B是表示有关实施方式1的图像解码装置100的处理动作的另一例的流程图。另外,在图8B中,赋予了与图8A相同的标号的步骤的处理原则上与在图8A中说明的处理相同。
此外,在图8B中,在比特流BS中,以编码后的X成分的前缀部、编码后的Y成分的前缀部、编码后的Y成分的后缀部及编码后的X成分的后缀部的顺序连续配置有编码后的X成分的前缀部、编码后的Y成分的前缀部、编码后的X成分的后缀部及编码后的Y成分的后缀部。另外,与图8A的情况同样,有各成分的后缀部根据各成分的值而不包含在比特流BS中的情况。
首先,第1解码部101将编码后的X成分的前缀部通过上下文自适应算术解码而解码(S101)。并且,第1解码部101判断X成分的二值化信号是否包含后缀部(S102)。
这里,在X成分的二值化信号包含后缀部的情况下(S102中“是”),第1解码部101在X成分的后缀标志中设定“ON”(S103)。另一方面,在X成分的二值化信号不包含后缀部的情况下(S102中“否”),第1解码部101不在X成分的后缀标志中设定“ON”。
接着,第1解码部101将接着编码后的X成分的前缀部配置的编码后的Y成分的前缀部通过上下文自适应算术解码而解码(S104)。并且,第1解码部101判断Y成分的二值化信号是否包含后缀部(S105)。
这里,在Y成分的二值化信号包含后缀部的情况下(S105中“是”),第2解码部102将接着编码后的Y成分的前缀部配置的编码后的Y成分的后缀部通过旁路解码而解码(S111)。另一方面,在Y成分的二值化信号不包含后缀部的情况下(S105中“否”),将步骤S111跳过。
接着,复原部104通过将包含前缀部及后缀部的两者或仅包含前缀部的Y成分的二值化信号进行多值化,将LAST位置信息的Y成分复原(S112)。
然后,第2解码部102判断在X成分的后缀标志中是否设定了“ON”(S107)。这里,在X成分的后缀标志中设定了“ON”的情况下(S107中“是”),第2解码部102将接着编码后的Y成分的前缀部或后缀部配置的编码后的X成分的后缀部通过旁路解码而解码(S108)。另一方面,在X成分的后缀标志中没有设定“ON”的情况下(S107中“否”),将步骤S108跳过。
最后,复原部104通过将包含前缀部及后缀部的两者的或仅包含前缀部的X成分的二值化信号进行多值化,将LAST位置信息的X成分复原(S109)。
这样,通过将Y成分的前缀部及后缀部连续解码,能够不将表示Y成分的二值化信号是否包含后缀部的信息(这里是Y成分的后缀标志)保持在存储器中而将Y成分复原。因而,能够削减存储器的需要量。
另外,在图8A及图8B的流程图中,X成分及Y成分的二值化信号包含后缀部,但例如在基于包含在比特流中的信息预先判断的情况下,也可以不执行后缀部的判断处理(S102、S105)、后缀标志的设定处理(S103、S106)及后缀标志的判断处理(S107、S110)。
接着,对编码后的X成分及Y成分的后缀部的解码处理(S108、S111)的一例进行说明。这里,对将后缀部通过哥伦布-莱斯(Golomb-Rice)码而二值化的情况进行说明。
在哥伦布-莱斯码中,后缀部的长度不是固定长。后缀部被分为前半部分和后半部分的两部分。
后半部分是具有莱斯参数(以下称作“RP”)表示的长度的固定长部分。
前半部分用以能够由2的RP次幂(2RP)表现的数(例如,在RP是“2”的情况下为“4”)的单位增加的“1”、和设定在最后的比特位置上的“0”表现。即,在RP是“2”的情况下,前半部分的长度如0,0,0,0,10,10,10,10,110,110,110,110,…那样,按照2的RP次幂的每个单位1比特1比特地增加。
另外,这里由于已经知道了后缀部要表现的信息量,所以在前半部分为最大长度的情况下,能够将前半部分的最后的“0”省略。例如,在RP是“2”、并且最大的信息量是“12”的情况下,前半部分可以用0,0,0,0,10,10,10,10,11,11,11,11的某个表现。通过这样将前半部分的最后的“0”省略,能够将二值化信号的码量削减1比特。
该最大的信息量可以用变换尺寸的长度与前缀部的长度的差表示。由此,能够将冗余的比特削减。
此外,该RP只要例如如图9D或图9E那样对变换尺寸预先设定就可以。由此,能够根据变换尺寸用适当的长度的二值化信号表现后缀部,能够使编码效率提高。
对将这样通过哥伦布-莱斯码二值化的后缀部解码的情况下的第2解码部102的动作使用图9A进行说明。图9A是表示有关实施方式1的第2解码部102的处理动作的一例的流程图。
首先,第2解码部102设定RP值(S201)。具体而言,第2解码部102例如参照预先设定的表设定RP值。该情况下的预先设定的表例如是图9D或图9E所示的表。
另外,第2解码部102也可以不参照表而设定RP值。关于该RP值的设定,使用图10A~图10D在后面详细地说明。
接着,第2解码部102设定Max值(S202)。这里,所谓Max值,表示哥伦布-莱斯码的前半部分的长度的最大值。即,Max值表示能够用从Last值的最大值减去前缀部的最大长度后的值表现的最短的二值化信号的长度。因而,第2解码部102通过从Last值的最大值减去前缀部的长度、将减法运算得到的值除以2的RP次幂、或右移位运算RP比特,导出Max值。
另外,前缀部的最大长度也可以如图9B或图9C所示那样根据变换尺寸改变。
接着,第2解码部102从比特流BS将哥伦布-莱斯码的1比特通过旁路解码而解码,将计数值(初始值为“0”)增加1(S203)。
这里,在解码后的1比特的信号是“0”的情况下(S204中“是”),结束哥伦布-莱斯码的前半部分的解码,向步骤S206前进。
另一方面,在解码后的信号不是“0”(是“1”)的情况下(S204中“否”),判断计数值是否与Max值相同(S205)。这里,在计数值与Max值不相同的情况下(S205中“否”),向步骤S203返回。即,第2解码部102将哥伦布-莱斯码的下个1比特通过旁路解码而解码。
另一方面,在计数值与Max值相同的情况下(S205中“是”),结束后缀部的前半部分的解码,进入步骤S206。
接着,第2解码部102将哥伦布-莱斯码的后半部分(RP比特的固定长的二值化信号)通过旁路解码而解码(S206)。
最后,第2解码部102将用哥伦布-莱斯码表现的值复原(S207)。这里,作为值的复原方法,将对从由哥伦布-莱斯码的前半部分表示的值减1后的值向左移位RP比特后的值与后半部分相加。
另外,也有使后半部分的二值化信号的值反转而二值化的情况。在此情况下,第2解码部102考虑该反转而复原。另外,是否使二值化信号的值反转,只要预先在解码侧和编码侧决定就可以。是否使二值化信号的值反转对编码效率及处理负荷没有影响。
接着,使用图10A~图10D说明RP值及前缀部的最大长度的决定方法。
图10A表示根据变换尺寸决定RP值和前缀部的最大长度的方法。
首先,第2解码部102取得变换尺寸(S301)。并且,第2解码部102通过参照图9D或图9E所示那样的表示变换尺寸与RP值的关系的表,决定与所取得的变换尺寸对应的RP值(S302)。进而,第2解码部102通过参照图9B或图9C所示那样的表示变换尺寸与前缀部的最大长度的关系的表,决定前缀部的最大长度(S303)。
图10B表示根据预测信息决定RP值和前缀部的最大长度的方法。
首先,第2解码部102取得预测信息(S311)。该预测信息,是关于作为解码对象块的变换块的预测的信息。例如,预测信息表示变换块是帧内(intra)预测还是帧间(inter)预测。此外,例如,预测信息也可以是表示帧内预测的预测方向的信息。
接着,第2解码部102基于预测信息决定RP值(S312)。例如,在帧间预测的情况下,已知一般高频率成分比帧内预测少。因而,第2解码部102只要在预测信息表示帧间预测的情况下,决定能够将具有较小的值的X成分及Y成分用较短的二值化信号表现那样的RP值就可以。具体而言,第2解码部102在预测信息表示帧间预测的情况下,只要决定比预测信息表示帧内预测的情况小的RP值就可以。
此外,在帧内预测的方向是水平方向的情况下,一般设想LAST位置信息的Y成分比X成分小。所以,在帧内预测的预测方向是水平方向的情况下,第2解码部102只要将比X成分的RP值小的RP值决定为Y成分的RP值就可以。另外,在帧内预测的预测方向是垂直方向的情况下,第2解码部102只要将比Y成分的RP值小的RP值决定为X成分的RP值就可以。
最后,第2解码部102基于预测信息决定前缀部的最大长度(S313)。
这样,第2解码部102能够根据预测信息使二值化信号的编码长度变化,所以能够提高编码效率。
图10C表示根据统计信息决定RP值和前缀部的最大长度的方法。
首先,第2解码部102取得统计信息(S321)。统计信息例如是包含在已经解码的块的LAST位置信息中的X成分或Y成分的二值化信号的长度的统计信息。
接着,第2解码部102基于统计信息决定RP值(S322)。最后,第2解码部102基于统计信息决定前缀部的最大长度(S323)。
这样,第2解码部102能够根据统计信息使二值化信号的编码长度变化,所以能够使编码效率进一步提高。
图10D表示根据X成分及Y成分中的已经解码的成分决定RP值和前缀部的最大长度的方法。
首先,第2解码部102取得X成分及Y成分中的已经解码的成分(S331)。例如,第2解码部102在对编码的Y成分进行解码时,取得已经解码的X成分。此外,例如第2解码部102也可以在对编码的X成分进行解码时取得已经解码的Y成分。
并且,第2解码部102使用X成分及Y成分中的已经解码的成分,决定X成分及Y成分中的未解码的成分的RP值(S332)。一般而言,X成分和Y成分容易成为相同。所以,第2解码部102例如在已解码的X成分的值比一定值(例如变换尺寸的一半)小的情况下,将Y成分的RP值决定为比X成分的RP值小的值。
最后,第2解码部102基于X成分及Y成分中的已经解码的成分,决定X成分及Y成分中的未解码的成分的前缀部的最大长度(S333)。
这样,第2解码部102能够根据X成分及Y成分中的已经解码的成分使二值化信号的编码长度变化,所以能够使编码效率进一步提高。
另外,图10A~图10D所示的RP值及前缀部的最大长度的决定方法也可以组合使用。例如,第2解码部102在没有参照的信息的情况下,也可以根据预先决定的表决定RP值,根据能够参照的信息决定RP值。
此外,第2解码部102也可以将前缀部的最大长度与RP值同样地决定。另外,第2解码部102在预测出X成分及Y成分的值较小的情况下,只要将前缀部的最大长度决定为比预测X成分及Y成分的值较大的情况短就可以。由能够使编码效率进一步提高。
接着,使用图11A及图11B,对为了编码的LAST位置信息的算术解码处理而需要的时间进行说明。
图11A是用来说明实施方式1的算术解码处理的例子的图。在图11A中,对编码后的X成分的前缀部、编码后的Y成分的前缀部、编码后的Y成分的后缀部及编码后的X成分的后缀部依次包含在比特流BS中的情况进行说明。
图11A的(a)表示将各成分的前缀部及后缀部依次算术解码的情况。在图11A的(a)中,以LAST位置信息的X成分的前缀部的解码(LASTX_PREFIX)、Y成分的前缀部的解码(LASTY_PREFIX)、Y成分的后缀部的解码(LASTY_SUFFIX)、X成分的后缀部的解码(LASTX_SUFFIX的顺序进行处理。
这里,为了使算术解码的处理速度提高,可以考虑将LAST位置信息的算术解码并行地执行。但是,前缀部由于被上下文自适应算术解码,所以难以将算术解码处理并行化。具体而言,在前缀部的算术解码中,使用仅基于已编码信号更新后的变动概率(符号发生概率)。即,需要依次进行符号发生概率的读入及更新。因此,前缀部的算术解码处理的并行化较困难。
另一方面,后缀部由于通过旁路解码而解码,所以算术解码处理的并行化比较容易。即,在后缀部的算术解码中,不使用基于已编码信号更新后的变动概率,而使用固定概率(符号发生概率)。因而,后缀部的算术解码处理的并行化比较容易。
所以,如图11A的(b)所示,也可以将后缀部的算术解码处理以比特单位并行化。由此,能够使LAST位置信息的算术解码的处理速度提高。
此外,在进一步并行化的情况下,例如也可以如图11A的(c)那样,从比特流BS取得关于后缀部的信息,在上下文自适应算术解码处理完成之前开始后缀部的算术解码处理。由此,能够更高速地将LAST位置信息解码。
图11B是用来说明比较例的算术解码处理的例子的图。在图11B中,对在比特流BS中依次包含编码后的X成分的前缀部、编码后的X成分的后缀部、编码后的Y成分的前缀部及编码后的Y成分的后缀部的情况进行说明。
图11B的(a)表示将各成分的前缀部及后缀部依次算术解码的情况下的例子。图11B的(a)的情况下的处理时间与图11A的(a)的情况处理时间相同。但是,在图11B的(a)中,与图11A的(a)相比,上下文自适应算术解码和旁路解码的切换次数增加。
图11B的(b)是用来说明将后缀部的算术解码处理以比特单位并行化的情况下的例子的图。在图11B的(b)中,将后缀部的旁路处理并行化,与图11B的(a)相比处理时间减少。但是,X成分的后缀部和Y成分的后缀部不能并行化。因而,在图11B的(b)中,处理时间比图11A的(b)增大。
如以上那样,根据有关实施方式1的图像解码装置100,能够高效率地将LAST位置信息解码。
具体而言,图像解码装置100通过将分为上下文自适应算术解码的组和旁路解码的组而配置了包含在LAST位置信息中的X成分及Y成分的编码后的二值化信号的比特流解码,由此能够将LAST位置信息复原。因而,图像解码装置100能够减少算术解码的方法的切换次数。此外,由于将通过能够并行运算的旁路解码而解码的部分信号集中,所以图像解码装置100能够将编码的LAST信息高速地算术解码。
即,图像解码装置100通过将接着某个编码的部分信号(例如,X成分的后缀部)而配置了利用与该部分信号相同的算术编码而编码的部分信号(例如,Y成分的后缀部)的比特流解码,能够将LAST位置信息复原。因而,与将交替地配置了通过不同的方法算术编码的多个部分信号的比特流解码的情况相比,图像解码装置100能够减少算术解码的方法的切换,能够将LAST位置信息高效率地解码。
另外,图9B~图9E所示的RP值及前缀部的最大长度是一例,也可以是与它们不同的RP值及前缀部的最大长度。例如,也可以使前缀部的最大长度更小、使后缀部变长。由此,能够提高算术解码处理的并行度,实现更高速的算术解码处理。
另外,在本实施方式中,各构成要素也可以由专用的硬件构成、或者通过执行适合于各构成要素的软件程序来实现。各构成要素也可以通过CPU或处理器等的程序执行部将记录在硬盘或半导体存储器等的记录介质中的软件程序并执行来实现。这里,实现本实施方式的信息处理装置等的软件是以下这样的程序。
即,该程序使计算机执行图像解码方法,所述图像解码方法将表示在包含于解码对象块中的多个系数中在预先设定的顺序上处于最后的非零系数的水平方向及垂直方向的位置的LAST位置信息解码,包括:算术解码步骤,将包含在比特流中的、编码后的第1部分信号及编码后的第2部分信号通过第1算术解码而解码,并且将包含在上述比特流中的、编码后的第3部分信号及编码后的第4部分信号通过方法与上述第1算术解码不同的第2算术解码而解码;复原步骤,通过将由上述第1部分信号及上述第3部分信号构成的第1二值化信号多值化,将在上述LAST位置信息中包含的作为水平成分及垂直成分的一方的第1成分复原,并且,通过将由上述第2部分信号及上述第4部分信号构成的第2二值化信号进行多值化,将作为上述水平成分及上述垂直成分的另一方的第2成分复原;在上述比特流中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
(实施方式1的变形例)
另外,有关实施方式1的图像解码装置100也可以包含在以下的图像解码装置中。图12是表示有关实施方式1的变形例的图像解码装置200的结构的一例的框图。
图像解码装置200将压缩编码后的编码图像数据解码。例如,编码图像数据按照每个块作为解码对象信号输入图像解码装置200。图像解码装置200通过对输入的解码对象信号进行可变长解码、逆量化及逆变换,将图像数据复原。
如图12所示,图像解码装置200具备熵解码部210、逆量化逆变换部220、加法器225、解块过滤器230、存储器240、帧内预测部250、运动补偿部260和帧内/帧间切换开关270。
熵解码部210通过对输入信号(比特流)进行可变长解码,将量化系数复原。另外,这里输入信号是解码对象信号,相当于编码图像数据的每个块的数据。在该编码图像数据中,包含编码的LAST位置信息。此外,熵解码部210从输入信号中取得运动数据,将所取得的运动数据向运动补偿部260输出。
另外,有关实施方式1的图像解码装置100相当于该熵解码部210的一部分。即,熵解码部210将编码的LAST位置信息解码。
逆量化逆变换部220通过将由熵解码部210复原的量化系数逆量化,将变换系数复原。并且,逆量化逆变换部220通过将复原后的变换系数逆变换,将预测误差复原。
加法器225通过将复原后的预测误差与预测信号相加,生成解码图像。
解块过滤器230对所生成的解码图像进行解块过滤处理。将解块过滤处理后的解码图像作为解码信号输出。
存储器240是用来存储在运动补偿中使用的参照图像的存储器。具体而言,存储器240将实施了解块过滤处理的解码图像保存。
帧内预测部250通过进行帧内预测而生成预测信号(帧内预测信号)。具体而言,帧内预测部250通过参照由加法器225生成的解码图像中的、解码对象块(输入信号)的周围的图像进行帧内预测,生成帧内预测信号。
运动补偿部260通过基于从熵解码部210输出的运动数据进行运动补偿,生成预测信号(帧间预测信号)。
帧内/帧间切换开关270选择帧内预测信号及帧间预测信号中的某个,将所选择的信号作为预测信号向加法器225输出。
通过以上的结构,图像解码装置200将压缩编码后的编码图像数据解码。
(实施方式2)
参照附图对有关实施方式2的图像编码装置进行说明。
图13是表示有关实施方式2的图像编码装置300的功能结构的框图。该图像编码装置300将LAST位置信息编码。这里,对包含在LAST位置信息中的第1成分的二值化信号(第1二值化信号)包括第1部分信号及第3部分信号、包含在LAST位置信息中的第2成分的二值化信号(第2二值化信号)包括第2部分信号及第4部分信号的情况进行说明。
另外,第1成分是水平成分及垂直成分中的一方,第2成分是水平成分及垂直成分中的另一方。
如图13所示,图像编码装置300具备二值化部310、算术编码部320和配置部330。算术编码部320具备第1编码部321、第2编码部322和编码控制部323。
二值化部310通过将包含在LAST位置信息中的第1成分和第2成分进行二值化,分别生成第1二值化信号和第2二值化信号。
第1编码部321将作为第1二值化信号的一部分的第1部分信号和作为第2二值化信号的一部分的第2部分信号通过第1算术编码而编码。第1算术编码例如是使用基于已编码信号而更新的变动概率的上下文自适应算术编码。另外,第1算术编码也可以不是上下文自适应算术编码。
第2编码部322将作为第1二值化信号的另一部分的第3部分信号和作为第2二值化信号的另一部分的第4部分信号通过方法与第1算术编码不同的第2算术编码而编码。第2算术编码例如是使用固定概率的旁路编码。另外,第2算术编码也可以不是旁路编码。即,只要第1算术编码的方法和第2算术编码的方法不同就可以。
编码控制部323对输入到算术编码部320中的信号是第1~第4部分信号中的哪个进行管理。另外,编码控制部323也可以不包含在算术编码部320中。即,图像编码装置300也可以不具备编码控制部323。
配置部330将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号配置到比特流内。这里,配置部330将编码后的第2部分信号配置到编码后的第1部分信号的下个,或者将编码后的第4部分信号配置到编码后的第3部分信号的下个。
具体而言,配置部330例如也可以将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号以编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号的顺序配置到比特流内。此外,例如配置部330也可以将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号以编码后的第1部分信号、编码后的第2部分信号、编码后的第4部分信号及编码后的第3部分信号的顺序配置到比特流内。
接着,对如以上那样构成的图像编码装置300的动作使用图14A及图14B进行说明。
以下,假设第1成分是X成分、第2成分是Y成分。此外,假设第1部分信号及第2部分信号是前缀部、第3部分信号及第4部分信号是后缀部。此外,假设X成分的后缀标志及Y成分的后缀标志中作为初始值而设定了“OFF”。另外,后缀标志是表示在LAST位置信息的各成分的二值化信号中是否包含后缀部的内部标志。
图14A是表示有关实施方式2的图像编码装置300的处理动作的一例的流程图。具体而言,图14A表示用来生成能够用图8A的解码方法解码的比特流的编码方法。
首先,二值化部310将LAST位置信息的X成分及Y成分分别二值化(S401)。具体而言,二值化部310例如如图15所示,将X成分及Y成分中的每一个(Last值)二值化。这里,将后缀部通过哥伦布-莱斯码二值化。
接着,第1编码部321将包含在LAST位置信息中的X成分的前缀部通过上下文自适应算术编码而编码(S402)。
所谓上下文自适应算术编码,是与图4所示的上下文自适应算术解码对应的编码。在上下文自适应算术编码中,根据条件将上下文切换,取得与上下文对应的符号发生概率。并且,使用所取得的符号发生概率将2值符号算术编码。进而,根据编码后的2值符号的值,将与该上下文对应的概率值更新(参照非专利文献1)。
接着,第1编码部321判断X成分的二值化信号是否包含后缀部(S403)。具体而言,第1编码部321用与图8A的步骤S102相同的方法判断X成分的二值化信号是否包含后缀部。
这里,在X成分的二值化信号包含后缀部的情况下(S403中“是”),第1编码部321在X成分的后缀标志中设定“ON”(S404)。另一方面,在X成分的二值化信号不包含后缀部的情况下(S403中“否”),第1编码部321在X成分的后缀标志中不设定“ON”。即,在X成分的后缀标志中维持设定“OFF”不变。另外,第1编码部321这里也可以在X成分的后缀标志中设定“OFF”。
接着,第1编码部321将包含在LAST位置信息中的Y成分的前缀部通过上下文自适应算术编码而编码(S405)。接着,第1编码部321判断Y成分的二值化信号是否包含后缀部(S406)。
这里,在Y成分的二值化信号包含后缀部的情况下(S406中“是”),第1编码部321在Y成分的后缀标志中设定“ON”(S407)。另一方面,在Y成分的二值化信号不包含后缀部的情况下(S406中“否”),第1编码部321在Y成分的后缀标志中不设定“ON”。
接着,第2编码部322判断在X成分的后缀标志中是否设定了“ON”(S408)。这里,在X成分的后缀标志中设定了“ON”的情况下(S408中“是”),第2编码部322将X成分的后缀部通过旁路编码而编码(S409)。另一方面,在X成分的后缀标志中没有设定“ON”的情况下(S408中“否”),将步骤S409跳过。
第2编码部322判断在Y成分的后缀标志中是否设定了“ON”(S410)。这里,在Y成分的后缀标志中设定了“ON”的情况下(S410中“是”),第2编码部322将Y成分的后缀部通过旁路编码而编码(S411)。另一方面,在Y成分的后缀标志中没有设定“ON”的情况下(S410中“否”),将步骤S411跳过。
最后,配置部330将编码后的X成分的前缀部、编码后的Y成分的前缀部、编码后的X成分的后缀部及编码后的Y成分的后缀部依次配置到比特流BS内(S412)。这里,配置部330以编码的顺序,将各成分的前缀部及后缀部配置到比特流BS内。
接着,对在以与图14A不同的顺序在比特流内配置各成分的前缀部及后缀部的情况进行说明。
图14B是表示有关实施方式2的图像编码装置300的处理动作的另一例的流程图。具体而言,图14B表示用来生成能够用图8B的解码方法解码的比特流的编码方法。另外,在图14B中,被赋予了与图14A相同的标号的步骤的处理原则上与在图14A中说明的处理相同。
首先,二值化部310将LAST位置信息的X成分及Y成分分别二值化(S401)。第1编码部321将包含在LAST位置信息中的X成分的前缀部通过上下文自适应算术编码而编码(S402)。
接着,第1编码部321判断X成分的二值化信号是否包含后缀部(S403)。这里,在X成分的二值化信号包含后缀部的情况下(S403中“是”),第1编码部321在X成分的后缀标志中设定“ON”(S404)。另一方面,在X成分的二值化信号不包含后缀部的情况下(S403中“否”),第1编码部321在X成分的后缀标志中不设定“ON”。
并且,第1编码部321将Y成分的前缀部通过上下文自适应算术编码而编码(S405)。接着,第1编码部321判断Y成分的二值化信号是否包含后缀部(S406)。
这里,在Y成分的二值化信号包含后缀部的情况下(S406中“是”),第2编码部322将Y成分的后缀部通过旁路编码而编码(S411)。另一方面,在Y成分的二值化信号不包含后缀部的情况下(S406中“否”),将步骤S411跳过。
接着,第2编码部322判断在X成分的后缀标志中是否设定了“ON”(S408)。这里,在X成分的后缀标志中设定了“ON”的情况下(S408中“是”),第2编码部322将X成分的后缀部通过旁路编码而编码(S409)。另一方面,在X成分的后缀标志中没有设定“ON”的情况下(S408中“否”),将步骤S409跳过。
最后,配置部330将编码后的X成分的前缀部、编码后的Y成分的前缀部、编码后的Y成分的后缀部及编码后的X成分的后缀部依次配置到比特流BS内(S512)。这里,配置部330以编码的顺序将各成分的前缀部及后缀部配置到比特流BS内。
这样,通过将Y成分的前缀部及后缀部连续编码,能够不将表示Y成分的二值化信号是否包含后缀部的信息(图14A中的Y成分的后缀标志)保持到存储器中而将Y成分的二值化信号编码。因而,能够削减存储器的需要量。
另外,在图14A及图14B的流程图中,在预先判断了X成分及Y成分的二值化信号包含后缀部的情况下,也可以不执行后缀部的判断处理(S403、S406),后缀标志的设定处理(S404、S407)及后缀标志的判断处理(S408、S410)。
接着,使用图15对包含在LAST位置信息中的前缀部及后缀部的编码方法简单地说明。
图15是表示块尺寸为16×16的情况下的LAST位置信息的二值化信号的一例的图。在图15中,前缀部的最大长度是“4”,RP是“2”。
在前缀部比前缀部的最大长度短的情况下,第1编码部321以X成分的值的数将“0”通过上下文自适应算术编码而编码,在最后将“1”通过上下文自适应算术编码而编码。在此情况下,由于在X成分的二值化信号中不包含后缀部,所以这样X成分的编码结束。
另一方面,在前缀部比前缀部的最大长度长的情况下,第1编码部321以最大长度的数将“0”通过上下文自适应算术编码而编码。
接着,第2编码部322将后缀部的前半部分编码。具体而言,第2编码部322以能够用2的RP次幂表现的数(在RP为“2”的情况下是“4”)的单位使“1”增加而编码,最后将“0”编码。
即,在X成分的值是4以上不到8的情况下,第2编码部322作为前半部分而仅将“0”编码。此外,在X成分的值是8以上不到12的情况下,第2编码部322作为前半部分而将“10”编码。此外,在X成分的值是12以上不到16的情况下,第2编码部322作为前半部分而将“110”编码。
另外,在图15的例子中,由于后缀部应表现的信息量是“12”(16-4=12),所以在X成分的值是12以上不到16的情况下,作为前半部分不是编码“110”、而是编码将最后的“0”省略的“11”。由此能够将码长削减。
接着,第2编码部322将后缀部的后半部分编码。后半部分是具有RP值的长度的固定长部分。在图15的例子中,后半部分是将二值化了2的RP次幂的部分的后缀部的数值后的值,以从左开始读的形式输出的例子。即,后半部分为将0,1,2,3二值化的值。这是一例,只要编码侧与解码侧的方法一致,对于编码效率就没有特别的影响。
另外,在图14A及图14B中,也如在实施方式1中说明的图11A那样,能够将后缀部的编码处理并行化,能够使算术编码的处理速度提高。
如以上这样,根据有关本实施方式的图像编码装置300,在比特流内,接着某个编码后的部分信号(例如,X成分的后缀部)而配置通过与该部分信号相同的算术编码而编码的部分信号(例如,Y成分的后缀部)。因而,在将算术编码后的LAST位置信息解码时,与交替地配置用不同的方法算术编码的多个部分信号的情况相比,能够减少算术解码的方法的切换。即,图像编码装置300能够输出能将LAST位置信息高效率地解码的比特流。
另外,在本实施方式中,各构成要素也可以由专用的硬件构成、或者通过执行适合于各构成要素的软件程序来实现。各构成要素也可以通过CPU或处理器等的程序执行部将记录在硬盘或半导体存储器等的记录介质中的软件程序并执行来实现。这里,实现本实施方式的信息处理装置等的软件是以下这样的程序。
即,该程序使计算机执行图像编码方法,所述图像编码方法将表示在包含于编码对象块中的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置的LAST位置信息编码,包括:二值化步骤,通过对作为在上述LAST位置信息中包含的水平成分及垂直成分中的一方的第1成分、和作为上述水平成分及上述垂直成分中的另一方的第2成分进行二值化,分别生成第1二值化信号和第2二值化信号;算术编码步骤,将作为上述第1二值化信号的一部分的第1部分信号和作为上述第2二值化信号的一部分的第2部分信号通过第1算术编码而编码,并且将作为上述第1二值化信号的另一部分的第3部分信号和作为上述第2二值化信号的另一部分的第4部分信号通过方法与上述第1算术编码不同的第2算术编码而编码;配置步骤,将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号配置到比特流内;在上述配置步骤中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
(实施方式2的变形例)
另外,有关实施方式2的图像编码装置300也可以包含在以下的图像编码装置中。图16是表示有关实施方式2的变形例的图像编码装置400的结构的一例的框图。
图像编码装置400将图像数据压缩编码。例如,对于图像编码装置400,将图像数据按照每个块作为输入信号输入。图像编码装置400通过对输入的输入信号进行变换、量化及可变长编码,生成编码信号(比特流)。
如图16所示,图像编码装置400具备减法器405、变换量化部410、熵编码部420、逆量化逆变换部430、加法器435、解块过滤器440、存储器450、帧内预测部460、运动检测部470、运动补偿部480和帧内/帧间切换开关490。
减法器405计算输入信号与预测信号的差分作为预测误差。
变换量化部410通过将空间域的预测误差变换,生成频率域的变换系数。例如,变换量化部410通过对预测误差进行DCT(Discrete CosineTransform:离散余弦变换)变换,生成变换系数。进而,变换量化部410通过将变换系数量化,生成量化系数。
熵编码部420通过将量化系数可变长编码,生成编码信号。此外,熵编码部420将由运动检测部470检测到的运动数据(例如运动矢量)编码,包含在编码信号中而输出。
另外,有关实施方式2的图像编码装置300相当于该熵编码部420的一部分。即,熵编码部420将LAST位置信息编码。
逆量化逆变换部430通过将量化系数逆量化,将变换系数复原。进而,逆量化逆变换部430通过将复原后的变换系数逆变换,将预测误差复原。另外,复原后的预测误差由于通过量化而丢失了信息,所以与减法器405生成的预测误差不一致。即,复原后的预测误差包含有量化误差。
加法器435通过将复原后的预测误差与预测信号相加,生成本地(local)解码图像。
解块过滤器440对所生成的本地解码图像进行解块过滤处理。
存储器450是用来保存在运动补偿中使用的参照图像的存储器。具体而言,存储器450保存被实施解块过滤处理后的本地解码图像。
帧内预测部460通过进行帧内预测,生成预测信号(帧内预测信号)。具体而言,帧内预测部460通过参照由加法器435生成的本地解码图像中的、编码对象块(输入信号)的周围的图像进行帧内预测,生成帧内预测信号。
运动检测部470检测输入信号与保存在存储器450中的参照图像之间的运动数据(例如,运动矢量)。
运动补偿部480通过基于检测出的运动数据进行运动补偿,生成预测信号(帧间预测信号)。
帧内/帧间切换开关490选择帧内预测信号及帧间预测信号中的某个,将所选择的信号作为预测信号向减法器405及加法器435输出。
通过以上的结构,图像编码装置400将图像数据压缩编码。
以上,基于实施方式对有关1个或多个技术方案的图像解码装置及图像编码装置进行了说明,但本发明并不限定于这些实施方式。只要不脱离本发明的主旨,对本实施方式实施了本领域的技术人员想到的各种变形后的形态、或将不同实施方式的构成要素组合而构建的形态也包含在1个或多个技术方案的范围内。
例如,在上述各实施方式中,特殊化为LAST位置信息的解码或编码进行了说明,但运动矢量的X成分及Y成分也能够与上述同样解码及编码。即,通过在X成分的前缀部(上下文自适应编码的部分)和Y成分的前缀部(上下文自适应编码的部分)之后配置包括Y成分的后缀部及正负符号的旁路编码的部分、和包括X成分的后缀部及正负符号的旁路编码的部分,能够不将表示Y成分的后缀部的有无的信息缓冲而进行编码及解码。另外,关于运动矢量信息的详细情况在非专利文献1中详细地记载,所以省略。
此外,在上述各实施方式中,将后缀部通过哥伦布-莱斯码二值化,但后缀部也可以通过其他方法二值化。例如,后缀部也可以如图3A~图3D所示那样以固定长进行二值化。
此外,上述各实施方式的X成分及Y成分的二值化方法是一例,也可以通过其他二值化方法进行二值化。例如,在图3A~图3D中,也可以将“0”和“1”反转而将Last值二值化。具体而言,例如在图3B中,将Last值“3”二值化为“1110”。
此外,在上述各实施方式中,说明了以(i)X成分的前缀部、Y成分的前缀部、X成分的后缀部及Y成分的后缀部的顺序、或(ii)X成分的前缀部、Y成分的前缀部、Y成分的后缀部及X成分的后缀部的顺序配置各部的例子,但各部的配置并不限定于此。例如,也可以以Y成分的前缀部及X成分的前缀部的顺序配置两个前缀部。
(实施方式3)
通过将用来实现上述各实施方式所示的动态图像编码方法(图像编码方法)或动态图像解码方法(图像解码方法)的结构的程序记录到存储介质中,能够将上述各实施方式所示的处理在独立的计算机系统中简单地实施。存储介质是磁盘、光盘、光磁盘、IC卡、半导体存储器等,只要是能够记录程序的介质就可以。
进而,这里说明在上述各实施方式中示出的动态图像编码方法(图像编码方法)及动态图像解码方法(图像解码方法)的应用例和使用它的系统。该系统的特征在于,具有由使用图像编码方法的图像编码装置及使用图像解码方法的图像解码装置构成的图像编码解码装置。关于系统的其他结构,可以根据情况而适当变更。
图17是表示实现内容分发服务的内容供给系统ex100的整体结构的图。将通信服务的提供区划分为希望的大小,在各小区内分别设置有作为固定无线站的基站ex106、ex107、ex108、ex109、ex110。
该内容供给系统ex100在因特网ex101上经由因特网服务提供商ex102及电话网ex104、及基站ex107~ex110连接着计算机ex111、PDA(PersonalDigital Assistant)ex112、照相机ex113、便携电话ex114、游戏机ex115等的各设备。
但是,内容供给系统ex100并不限定于图17那样的结构,也可以将某些要素组合连接。此外,也可以不经由作为固定无线站的基站ex107~ex110将各设备直接连接在电话网ex104上。此外,也可以将各设备经由近距离无线等直接相互连接。
照相机ex113是能够进行数字摄像机等的动态图像摄影的设备,照相机ex116是能够进行数字照相机等的静止图像摄影、动态图像摄影的设备。此外,便携电话ex114是GSM(Global System for Mobile Communications)方式、CDMA(Code Division Multiple Access)方式、W-CDMA(Wideband-Code Division Multiple Access)方式、或LTE(Long Term Evolution)方式、HSPA(High Speed Packet Access)的便携电话机、或PHS(PersonalHandyphone System)等,是哪种都可以。
在内容供给系统ex100中,通过将照相机ex113等经由基站ex109、电话网ex104连接在流媒体服务器ex103上,能够进行现场分发等。在现场分发中,对用户使用照相机ex113摄影的内容(例如音乐会现场的影像等)如在上述各实施方式中说明那样进行编码处理(即,作为本发明的一个方式的图像编码装置发挥作用),向流媒体服务器ex103发送。另一方面,流媒体服务器ex103将发送来的内容数据对有请求的客户端进行流分发。作为客户端,有能够将上述编码处理后的数据解码的计算机ex111、PDAex112、照相机ex113、便携电话ex114、游戏机ex115等。在接收到分发的数据的各设备中,将接收到的数据解码处理而再现(即,作为本发明的一个方式的图像解码装置发挥作用)。
另外,摄影的数据的编码处理既可以由照相机ex113进行,也可以由进行数据的发送处理的流媒体服务器ex103进行,也可以相互分担进行。同样,分发的数据的解码处理既可以由客户端进行,也可以由流媒体服务器ex103进行,也可以相互分担进行。此外,并不限于照相机ex113,也可以将由照相机ex116摄影的静止图像及/或动态图像数据经由计算机ex111向流媒体服务器ex103发送。此情况下的编码处理由照相机ex116、计算机ex111、流媒体服务器ex103的哪个进行都可以,也可以相互分担进行。
此外,这些编码解码处理一般在计算机ex111或各设备具有的LSIex500中处理。LSIex500既可以是单芯片,也可以是由多个芯片构成的结构。另外,也可以将动态图像编码解码用的软件装入到能够由计算机ex111等读取的某些记录介质(CD-ROM、软盘、硬盘等)中、使用该软件进行编码解码处理。进而,在便携电话ex114是带有照相机的情况下,也可以将由该照相机取得的动态图像数据发送。此时的动态图像数据是由便携电话ex114具有的LSIex500编码处理的数据。
此外,也可以是,流媒体服务器ex103是多个服务器或多个计算机,是将数据分散处理、记录、及分发的。
如以上这样,在内容供给系统ex100中,客户端能够接收编码的数据而再现。这样,在内容供给系统ex100中,客户端能够将用户发送的信息实时地接收、解码、再现,即使是没有特别的权利或设备的用户也能够实现个人广播。
另外,并不限定于内容供给系统ex100的例子,如图18所示,在数字广播用系统ex200中也能够装入上述实施方式的至少动态图像编码装置(图像编码装置)或动态图像解码装置(图像解码装置)的某个。具体而言,在广播站ex201中,将对影像数据复用了音乐数据等而得到的复用数据经由电波向通信或广播卫星ex202传送。该影像数据是通过上述各实施方式中说明的动态图像编码方法编码后的数据(即,通过本发明的一个方式的图像编码装置编码后的数据)。接受到该数据的广播卫星ex202发出广播用的电波,能够对该电波进行卫星广播接收的家庭的天线ex204接收该电波,通过电视机(接收机)ex300或机顶盒(STB)ex217等的装置将接收到的复用数据解码并将其再现(即,作为本发明的一个方式的图像解码装置发挥作用)。
此外,可以在将记录在DVD、BD等的记录介质ex215中的复用数据读取并解码、或将影像数据编码再根据情况与音乐信号复用而写入记录介质ex215中的读取器/记录器ex218中也能够安装上述各实施方式所示的动态图像解码装置或动态图像编码装置。在此情况下,可以将再现的影像信号显示在监视器ex219上,通过记录有复用数据的记录介质ex215在其他装置或系统中能够再现影像信号。此外,也可以在连接在有线电视用的线缆ex203或卫星/地面波广播的天线ex204上的机顶盒ex217内安装动态图像解码装置,将其用电视机的监视器ex219显示。此时,也可以不是在机顶盒、而在电视机内装入动态图像解码装置。
图19是表示使用在上述各实施方式中说明的动态图像解码方法及动态图像编码方法的电视机(接收机)ex300的图。电视机ex300具备经由接收上述广播的天线ex204或线缆ex203等取得或者输出对影像数据复用了声音数据的复用数据的调谐器ex301、将接收到的复用数据解调或调制为向外部发送的编码数据的调制/解调部ex302、和将解调后的复用数据分离为影像数据、声音数据或将在信号处理部ex306中编码的影像数据、声音数据复用的复用/分离部ex303。
此外,电视机ex300具备:具有将声音数据、影像数据分别解码、或将各自的信息编码的声音信号处理部ex304和影像信号处理部ex305(即,作为本发明的一个方式的图像编码装置或图像解码装置发挥作用)的信号处理部ex306;具有将解码后的声音信号输出的扬声器ex307及显示解码后的影像信号的显示器等的显示部ex308的输出部ex309。进而,电视机ex300具备具有受理用户操作的输入的操作输入部ex312等的接口部ex317。进而,电视机ex300具有合并控制各部的控制部ex310、对各部供给电力的电源电路部ex311。接口部ex317也可以除了操作输入部ex312以外,还具有与读取器/记录器ex218等的外部设备连接的桥接部ex313、用来能够安装SD卡等的记录介质ex216的插槽部ex314、用来与硬盘等的外部记录介质连接的驱动器ex315、与电话网连接的调制解调器ex316等。另外,记录介质ex216是能够通过收存的非易失性/易失性的半导体存储元件电气地进行信息的记录的结构。电视机ex300的各部经由同步总线相互连接。
首先,对电视机ex300将通过天线ex204等从外部取得的复用数据解码、再现的结构进行说明。电视机ex300接受来自遥控器ex220等的用户操作,基于具有CPU等的控制部ex310的控制,将由调制/解调部ex302解调的复用数据用复用/分离部ex303分离。进而,电视机ex300将分离的声音数据用声音信号处理部ex304解码,将分离的影像数据用影像信号处理部ex305使用在上述各实施方式中说明的解码方法解码。将解码后的声音信号、影像信号分别从输出部ex309朝向外部输出。在输出时,可以暂时将这些信号储存到缓冲器ex318、ex319等中,以使声音信号和影像信号同步再现。此外,电视机ex300也可以不是从广播等、而从磁/光盘、SD卡等的记录介质ex215、ex216读出编码的复用数据。接着,对电视机ex300将声音信号或影像信号编码、向外部发送或写入到记录介质等中的结构进行说明。电视机ex300接受来自遥控器ex220等的用户操作,基于控制部ex310的控制,由声音信号处理部ex304将声音信号编码,由影像信号处理部ex305将影像信号使用在上述各实施方式中说明的编码方法编码。将编码后的声音信号、影像信号用复用/分离部ex303复用,向外部输出。在复用时,可以暂时将这些信号储存到缓冲器ex320、ex321等中,以使声音信号和影像信号同步再现。另外,缓冲器ex318、ex319、ex320、ex321既可以如图示那样具备多个,也可以是共用一个以上的缓冲器的结构。进而,在图示以外,也可以在例如调制/解调部ex302或复用/分离部ex303之间等也作为避免系统的上溢、下溢的缓冲部而在缓冲器中储存数据。
此外,电视机ex300除了从广播等或记录介质等取得声音数据、影像数据以外,也可以具备受理麦克风或照相机的AV输入的结构,对从它们中取得的数据进行编码处理。另外,这里,将电视机ex300作为能够进行上述编码处理、复用、及外部输出的结构进行了说明,但也可以不能进行这些处理,而是仅能够进行上述接收、解码处理、外部输出的结构。
此外,在由读取器/记录器ex218从记录介质将复用数据读出、或写入的情况下,上述解码处理或编码处理由电视机ex300、读取器/记录器ex218的哪个进行都可以,也可以是电视机ex300和读取器/记录器ex218相互分担进行。
作为一例,将从光盘进行数据的读入或写入的情况下的信息再现/记录部ex400的结构表示在图20中。信息再现/记录部ex400具备以下说明的单元ex401、ex402、ex403、ex404、ex405、ex406、ex407。光头ex401对作为光盘的记录介质ex215的记录面照射激光斑而写入信息,检测来自记录介质ex215的记录面的反射光而读入信息。调制记录部ex402电气地驱动内置在光头ex401中的半导体激光器,根据记录数据进行激光的调制。再现解调部ex403将由内置在光头ex401中的光检测器电气地检测到来自记录面的反射光而得到的再现信号放大,将记录在记录介质ex215中的信号成分分离并解调,再现所需要的信息。缓冲器ex404将用来记录到记录介质ex215中的信息及从记录介质ex215再现的信息暂时保持。盘马达ex405使记录介质ex215旋转。伺服控制部ex406一边控制盘马达ex405的旋转驱动一边使光头ex401移动到规定的信息轨道,进行激光斑的追踪处理。系统控制部ex407进行信息再现/记录部ex400整体的控制。上述的读出及写入的处理由系统控制部ex407利用保持在缓冲器ex404中的各种信息、此外根据需要而进行新的信息的生成、追加、并且一边使调制记录部ex402、再现解调部ex403、伺服控制部ex406协调动作、一边通过光头ex401进行信息的记录再现来实现。系统控制部ex407例如由微处理器构成,通过执行读出写入的程序来执行它们的处理。
以上,假设光头ex401照射激光斑而进行了说明,但也可以是使用接近场光进行高密度的记录的结构。
在图21中表示作为光盘的记录介质ex215的示意图。在记录介质ex215的记录面上,以螺旋状形成有导引槽(沟),在信息轨道ex230中,预先通过沟的形状的变化而记录有表示盘上的绝对位置的地址信息。该地址信息包括用来确定作为记录数据的单位的记录块ex231的位置的信息,通过在进行记录及再现的装置中将信息轨道ex230再现而读取地址信息,能够确定记录块。此外,记录介质ex215包括数据记录区域ex233、内周区域ex232、外周区域ex234。为了记录用户数据而使用的区域是数据记录区域ex233,配置在比数据记录区域ex233靠内周或外周的内周区域ex232和外周区域ex234用于用户数据的记录以外的特定用途。信息再现/记录部ex400对这样的记录介质ex215的数据记录区域ex233进行编码的声音数据、影像数据或复用了这些数据的编码数据的读写。
以上,举1层的DVD、BD等的光盘为例进行了说明,但并不限定于这些,也可以是多层构造、在表面以外也能够记录的光盘。此外,也可以是在盘的相同的地方使用不同波长的颜色的光记录信息、或从各种角度记录不同的信息的层等、进行多维的记录/再现的构造的光盘。
此外,在数字广播用系统ex200中,也可以由具有天线ex205的车ex210从卫星ex202等接收数据、在车ex210具有的车载导航仪ex211等的显示装置上再现动态图像。另外,车载导航仪ex211的结构可以考虑例如在图19所示的结构中添加GPS接收部的结构,在计算机ex111及便携电话ex114等中也可以考虑同样的结构。
图22A是表示使用在上述实施方式中说明的动态图像解码方法和动态图像编码方法的便携电话ex114的图。便携电话ex114具有由用来在与基站ex110之间收发电波的天线ex350、能够拍摄影像、静止图像的照相机部ex365、显示将由照相机部ex365摄影的影像、由天线ex350接收到的影像等解码后的数据的液晶显示器等的显示部ex358。便携电话ex114还具有包含操作键部ex366的主体部、用来进行声音输出的扬声器等的声音输出部ex357、用来进行声音输入的麦克风等的声音输入部ex356、保存拍摄到的影像、静止图像、录音的声音、或者接收到的影像、静止图像、邮件等的编码后的数据或者解码后的数据的存储器部ex367、或者作为与同样保存数据的记录介质之间的接口部的插槽部ex364。
进而,使用图22B对便携电话ex114的结构例进行说明。便携电话ex114对于合并控制具备显示部ex358及操作键部ex366的主体部的各部的主控制部ex360,将电源电路部ex361、操作输入控制部ex362、影像信号处理部ex355、照相机接口部ex363、LCD(Liquid Crystal Display:液晶显示器)控制部ex359、调制/解调部ex352、复用/分离部ex353、声音信号处理部ex354、插槽部ex364、存储器部ex367经由总线ex370相互连接。
电源电路部ex361如果通过用户的操作使通话结束及电源键成为开启状态,则通过从电池组对各部供给电力,便携电话ex114起动为能够动作的状态。
便携电话ex114基于具有CPU、ROM及RAM等的主控制部ex360的控制,在语音通话模式时,将由声音输入部ex356集音的声音信号通过声音信号处理部ex354变换为数字声音信号,将其用调制/解调部ex352进行波谱扩散处理,由发送/接收部ex351实施数字模拟变换处理及频率变换处理后经由天线ex350发送。此外,便携电话ex114在语音通话模式时,将由天线ex350接收到的接收数据放大并实施频率变换处理及模拟数字变换处理,用调制/解调部ex352进行波谱逆扩散处理,通过声音信号处理部ex354变换为模拟声音数据后,将其经由声音输出部ex357输出。
进而,在数据通信模式时发送电子邮件的情况下,将通过主体部的操作键部ex366等的操作输入的电子邮件的文本数据经由操作输入控制部ex362向主控制部ex360送出。主控制部ex360将文本数据用调制/解调部ex352进行波谱扩散处理,由发送/接收部ex351实施数字模拟变换处理及频率变换处理后,经由天线ex350向基站ex110发送。在接收电子邮件的情况下,对接收到的数据执行上述处理的大致逆处理,并输出到显示部ex350。
在数据通信模式时,在发送影像、静止图像、或者影像和声音的情况下,影像信号处理部ex355将从照相机部ex365供给的影像信号通过上述各实施方式所示的动态图像编码方法进行压缩编码(即,作为本发明的一个方式的图像编码装置发挥作用),将编码后的影像数据送出至复用/分离部ex353。另外,声音信号处理部ex354对通过照相机部ex365拍摄影像、静止图像等的过程中用声音输入部ex356集音的声音信号进行编码,将编码后的声音数据送出至复用/分离部ex353。
复用/分离部ex353通过规定的方式,对从影像信号处理部ex355供给的编码后的影像数据和从声音信号处理部ex354供给的编码后的声音数据进行复用,将其结果得到的复用数据用调制/解调部(调制/解调电路部)ex352进行波谱扩散处理,由发送/接收部ex351实施数字模拟变换处理及频率变换处理后,经由天线ex350发送。
在数据通信模式时接收到链接到主页等的动态图像文件的数据的情况下,或者接收到附加了影像或者声音的电子邮件的情况下,为了对经由天线ex350接收到的复用数据进行解码,复用/分离部ex353通过将复用数据分离,分为影像数据的比特流和声音数据的比特流,经由同步总线ex370将编码后的影像数据向影像信号处理部ex355供给,并将编码后的声音数据向声音信号处理部ex354供给。影像信号处理部ex355通过与上述各实施方式所示的动态图像编码方法相对应的动态图像解码方法进行解码,由此对影像信号进行解码(即,作为本发明的一个方式的图像解码装置发挥作用),经由LCD控制部ex359从显示部ex358显示例如链接到主页的动态图像文件中包含的影像、静止图像。另外,声音信号处理部ex354对声音信号进行解码,从声音输出部ex357输出声音。
此外,上述便携电话ex114等的终端与电视机ex300同样,除了具有编码器、解码器两者的收发型终端以外,还可以考虑只有编码器的发送终端、只有解码器的接收终端的3种安装形式。另外,在数字广播用系统ex200中,设为发送、接收在影像数据中复用了音乐数据等得到的复用数据而进行了说明,但除声音数据之外复用了与影像关联的字符数据等的数据也可以,不是复用数据而是影像数据本身也可以。
这样,将在上述各实施方式中表示的动态图像编码方法或动态图像解码方法用在上述哪种设备、系统中都可以,通过这样,能够得到在上述各实施方式中说明的效果。
此外,本发明并不限定于这样的上述实施方式,能够不脱离本发明的范围而进行各种变形或修正。
(实施方式4)
也可以通过将在上述各实施方式中示出的动态图像编码方法或装置、与依据MPEG-2、MPEG4-AVC、VC-1等不同的标准的动态图像编码方法或装置根据需要而适当切换,来生成影像数据。
这里,在生成分别依据不同的标准的多个影像数据的情况下,在解码时,需要选择对应于各个标准的解码方法。但是,由于不能识别要解码的影像数据依据哪个标准,所以产生不能选择适当的解码方法的问题。
为了解决该问题,在影像数据中复用了声音数据等的复用数据采用包含表示影像数据依据哪个标准的识别信息的结构。以下,说明包括通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据在内的复用数据的具体的结构。复用数据是MPEG-2传输流形式的数字流。
图23是表示复用数据的结构的图。如图23所示,复用数据通过将视频流、音频流、演示图形流(PG)、交互图形流中的1个以上进行复用而得到。视频流表示电影的主影像及副影像,音频流(IG)表示电影的主声音部分和与该主声音混合的副声音,演示图形流表示电影的字幕。这里,所谓主影像,表示显示在画面上的通常的影像,所谓副影像,是在主影像中用较小的画面显示的影像。此外,交互图形流表示通过在画面上配置GUI部件而制作的对话画面。视频流通过在上述各实施方式中示出的动态图像编码方法或装置、依据以往的MPEG-2、MPEG4-AVC、VC-1等标准的动态图像编码方法或装置编码。音频流由杜比AC-3、Dolby Digital Plus、MLP、DTS、DTS-HD、或线性PCM等的方式编码。
包含在复用数据中的各流通过PID被识别。例如,对在电影的影像中使用的视频流分配0x1011,对音频流分配0x1100到0x111F,对演示图形分配0x1200到0x121F,对交互图形流分配0x1400到0x141F,对在电影的副影像中使用的视频流分配0x1B00到0x1B1F,对与主声音混合的副声音中使用的音频流分配0x1A00到0x1A1F。
图24是示意地表示复用数据怎样被复用的图。首先,将由多个视频帧构成的视频流ex235、由多个音频帧构成的音频流ex238分别变换为PES包序列ex236及ex239,并变换为TS包ex237及ex240。同样,将演示图形流ex241及交互图形ex244的数据分别变换为PES包序列ex242及ex245,再变换为TS包ex243及ex246。复用数据ex247通过将这些TS包复用到1条流中而构成。
图25更详细地表示在PES包序列中怎样保存视频流。图25的第1段表示视频流的视频帧序列。第2段表示PES包序列。如图25的箭头yy1、yy2、yy3、yy4所示,视频流中的多个作为Video Presentation Unit的I图片、B图片、P图片按每个图片被分割并保存到PES包的有效载荷中。各PES包具有PES头,在PES头中,保存有作为图片的显示时刻的PTS(PresentationTime-Stamp)及作为图片的解码时刻的DTS(Decoding Time-Stamp)。
图26表示最终写入在复用数据中的TS包的形式。TS包是由具有识别流的PID等信息的4字节的TS头和保存数据的184字节的TS有效载荷构成的188字节固定长度的包,上述PES包被分割并保存到TS有效载荷中。在BD-ROM的情况下,对于TS包赋予4字节的TP_Extra_Header,构成192字节的源包,写入到复用数据中。在TP_Extra_Header中记载有ATS(Arrival_Time_Stamp)等信息。ATS表示该TS包向解码器的PID滤波器的转送开始时刻。在复用数据中,源包如图26下段所示排列,从复用数据的开头起递增的号码被称作SPN(源包号)。
此外,在复用数据所包含的TS包中,除了影像、声音、字幕等的各流以外,还有PAT(Program Association Table)、PMT(Program Map Table)、PCR(Program Clock Reference)等。PAT表示在复用数据中使用的PMT的PID是什么,PAT自身的PID被登记为0。PMT具有复用数据所包含的影像、声音、字幕等的各流的PID、以及与各PID对应的流的属性信息,还具有关于复用数据的各种描述符。在描述符中,有指示许可/不许可复用数据的拷贝的拷贝控制信息等。PCR为了取得作为ATS的时间轴的ATC(Arrival Time Clock)与作为PTS及DTS的时间轴的STC(System TimeClock)的同步,拥有与该PCR包被转送至解码器的ATS对应的STC时间的信息。
图27是详细地说明PMT的数据构造的图。在PMT的开头,配置有记述了包含在该PMT中的数据的长度等的PMT头。在其后面,配置有多个关于复用数据的描述符。上述拷贝控制信息等被记载为描述符。在描述符之后,配置有多个关于包含在复用数据中的各流的流信息。流信息由记载有用来识别流的压缩编解码器的流类型、流的PID、流的属性信息(帧速率、纵横比等)的流描述符构成。流描述符存在复用数据中存在的流的数量。
在记录到记录介质等中的情况下,将上述复用数据与复用数据信息文件一起记录。
复用数据信息文件如图28所示,是复用数据的管理信息,与复用数据一对一地对应,由复用数据信息、流属性信息以及入口映射构成。
复用数据信息如图28所示,由系统速率、再现开始时刻、再现结束时刻构成。系统速率表示复用数据的向后述的系统目标解码器的PID滤波器的最大转送速率。包含在复用数据中的ATS的间隔设定为成为系统速率以下。再现开始时刻是复用数据的开头的视频帧的PTS,再现结束时刻设定为对复用数据的末端的视频帧的PTS加上1帧量的再现间隔的值。
流属性信息如图29所示,按每个PID登记有关于包含在复用数据中的各流的属性信息。属性信息具有按视频流、音频流、演示图形流、交互图形流而不同的信息。视频流属性信息具有该视频流由怎样的压缩编解码器压缩、构成视频流的各个图片数据的分辨率是多少、纵横比是多少、帧速率是多少等的信息。音频流属性信息具有该音频流由怎样的压缩编解码器压缩、包含在该音频流中的声道数是多少、对应于哪种语言、采样频率是多少等的信息。这些信息用于在播放器再现之前的解码器的初始化等中。
在本实施方式中,使用上述复用数据中的、包含在PMT中的流类型。此外,在记录介质中记录有复用数据的情况下,使用包含在复用数据信息中的视频流属性信息。具体而言,在上述各实施方式示出的动态图像编码方法或装置中,设置如下步骤或单元,该步骤或单元对包含在PMT中的流类型、或视频流属性信息,设定表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的固有信息。通过该结构,能够识别通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据、和依据其他标准的影像数据。
此外,在图30中表示本实施方式的动态图像解码方法的步骤。在步骤exS100中,从复用数据中取得包含在PMT中的流类型、或包含在复用数据信息中的视频流属性信息。接着,在步骤exS101中,判断流类型、或视频流属性信息是否表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的复用数据。并且,在判断为流类型、或视频流属性信息是通过在上述各实施方式中示出的动态图像编码方法或装置生成的复用数据情况下,在步骤exS102中,通过在上述各实施方式中示出的动态图像解码方法进行解码。此外,在流类型、或视频流属性信息表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的复用数据的情况下,在步骤exS103中,通过依据以往的标准的动态图像解码方法进行解码。
这样,通过在流类型、或视频流属性信息中设定新的固有值,在解码时能够判断是否能够通过在上述各实施方式中示出的动态图像解码方法或装置解码。因而,在被输入了依据不同的标准的复用数据的情况下,也能够选择适当的解码方法或装置,所以能够不发生错误地进行解码。此外,将在本实施方式中示出的动态图像编码方法或装置、或者动态图像解码方法或装置用在上述任何设备、系统中。
(实施方式5)
在上述各实施方式中示出的动态图像编码方法及装置、动态图像解码方法及装置典型地可以由作为集成电路的LSI实现。作为一例,在图31中表示1芯片化的LSIex500的结构。LSIex500具备以下说明的单元ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509,各单元经由总线ex510连接。电源电路部ex505通过在电源是开启状态的情况下对各部供给电力,起动为能够动作的状态。
例如在进行编码处理的情况下,LSIex500基于具有CPUex502、存储器控制器ex503、流控制器ex504、驱动频率控制部ex512等的控制部ex501的控制,通过AV I/Oex509从麦克风ex117及照相机ex113等输入AV信号。被输入的AV信号暂时储存在SDRAM等的外部的存储器ex511中。基于控制部ex501的控制,将储存的数据根据处理量及处理速度适当地分为多次等,向信号处理部ex507发送,在信号处理部ex507中进行声音信号的编码及/或影像信号的编码。这里,影像信号的编码处理是在上述各实施方式中说明的编码处理。在信号处理部ex507中,还根据情况而进行将编码的声音数据和编码的影像数据复用等的处理,从流I/Oex506向外部输出。将该输出的比特流向基站ex107发送、或写入到记录介质ex215中。另外,在复用时,可以暂时将数据储存到缓冲器ex508中以使其同步。
另外,在上述中,设存储器ex511为LSIex500的外部的结构进行了说明,但也可以是包含在LSIex500的内部中的结构。缓冲器ex508也并不限定于一个,也可以具备多个缓冲器。此外,LSIex500既可以形成1个芯片,也可以形成多个芯片。
此外,在上述中,假设控制部ex510具有CPUex502、存储器控制器ex503、流控制器ex504、驱动频率控制部ex512等,但控制部ex510的结构并不限定于该结构。例如,也可以是信号处理部ex507还具备CPU的结构。通过在信号处理部ex507的内部中也设置CPU,能够进一步提高处理速度。此外,作为其他例,也可以是CPUex502具备信号处理部ex507、或作为信号处理部ex507的一部分的例如声音信号处理部的结构。在这样的情况下,控制部ex501为具备具有信号处理部ex507或其一部分的CPUex502的结构。
另外,这里设为LSI,但根据集成度的差异,也有称作IC、系统LSI、超级(super)LSI、特级(ultra)LSI的情况。
此外,集成电路化的方法并不限定于LSI,也可以由专用电路或通用处理器实现。也可以利用在LSI制造后能够编程的FPGA(Field ProgrammableGate Array)、或能够重构LSI内部的电路单元的连接及设定的可重构处理器。
进而,如果因半导体技术的进步或派生的其他技术而出现代替LSI的集成电路化的技术,则当然也可以使用该技术进行功能模块的集成化。有可能是生物技术的应用等。
(实施方式6)
在将通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据解码的情况下,考虑到与将依据以往的MPEG-2、MPEG4-AVC、VC-1等标准的影像数据的情况相比处理量会增加。因此,在LSIex500中,需要设定为比将依据以往的标准的影像数据解码时的CPUex502的驱动频率更高的驱动频率。但是,如果将驱动频率设得高,则发生消耗电力变高的问题。
为了解决该问题,电视机ex300、LSIex500等的动态图像解码装置采用识别影像数据依据哪个标准、并根据标准切换驱动频率的结构。图32表示本实施方式的结构ex800。驱动频率切换部ex803在影像数据是通过在上述各实施方式中示出的动态图像编码方法或装置生成的情况下,将驱动频率设定得高。并且,对执行在上述各实施方式中示出的动态图像解码方法的解码处理部ex801指示将影像数据解码。另一方面,在影像数据是依据以往的标准的影像数据的情况下,与影像数据是通过在上述各实施方式中示出的动态图像编码方法或装置生成的数据的情况相比,将驱动频率设定得低。并且,对依据以往的标准的解码处理部ex802指示将影像数据解码。
更具体地讲,驱动频率切换部ex803由图31的CPUex502和驱动频率控制部ex512构成。此外,执行在上述各实施方式中示出的动态图像解码方法的解码处理部ex801、以及依据以往的标准的解码处理部ex802对应于图31的信号处理部ex507。CPUex502识别影像数据依据哪个标准。并且,基于来自CPUex502的信号,驱动频率控制部ex512设定驱动频率。此外,基于来自CPUex502的信号,信号处理部ex507进行影像数据的解码。这里,可以考虑在影像数据的识别中使用例如在实施方式4中记载的识别信息。关于识别信息,并不限定于在实施方式4中记载的信息,只要是能够识别影像数据依据哪个标准的信息就可以。例如,在基于识别影像数据利用于电视机还是利用于盘等的外部信号,来能够识别影像数据依据哪个标准的情况下,也可以基于这样的外部信号进行识别。此外,CPUex502的驱动频率的选择例如可以考虑如图34所示的将影像数据的标准与驱动频率建立对应的查找表进行。将查找表预先保存到缓冲器ex508、或LSI的内部存储器中,CPUex502通过参照该查找表,能够选择驱动频率。
图33表示实施本实施方式的方法的步骤。首先,在步骤exS200中,在信号处理部ex507中,从复用数据中取得识别信息。接着,在步骤exS201中,在CPUex502中,基于识别信息识别影像数据是否是通过在上述各实施方式中示出的编码方法或装置生成的数据。在影像数据是通过在上述各实施方式中示出的编码方法或装置生成的数据的情况下,在步骤exS202中,CPUex502向驱动频率控制部ex512发送将驱动频率设定得高的信号。并且,在驱动频率控制部ex512中设定为高的驱动频率。另一方面,在表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,在步骤exS203中,CPUex502向驱动频率控制部ex512发送将驱动频率设定得低的信号。并且,在驱动频率控制部ex512中,设定为与影像数据是通过在上述各实施方式中示出的编码方法或装置生成的数据的情况相比更低的驱动频率。
进而,通过与驱动频率的切换连动而变更对LSIex500或包括LSIex500的装置施加的电压,由此能够进一步提高节电效果。例如,在将驱动频率设定得低的情况下,随之,可以考虑与将驱动频率设定得高的情况相比,将对LSIex500或包括LSIex500的装置施加的电压设定得低。
此外,驱动频率的设定方法只要是在解码时的处理量大的情况下将驱动频率设定得高、在解码时的处理量小的情况下将驱动频率设定得低就可以,并不限定于上述的设定方法。例如,可以考虑在将依据MPEG4-AVC标准的影像数据解码的处理量大于将通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据解码的处理量的情况下,与上述的情况相反地进行驱动频率的设定。
进而,驱动频率的设定方法并不限定于使驱动频率低的结构。例如,也可以考虑在识别信息是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的情况下,将对LSIex500或包括LSIex500的装置施加的电压设定得高,在表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,将对LSIex500或包括LSIex500的装置施加的电压设定得低。此外,作为另一例,也可以考虑在识别信息表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的情况下,不使CPUex502的驱动停止,在表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,由于在处理中有富余,所以使CPUex502的驱动暂停。也可以考虑在识别信息表示是通过在上述各实施方式中示出的动态图像编码方法或装置生成的影像数据的情况下,也只要在处理中有富余则使CPUex502的驱动暂停。在此情况下,可以考虑与表示是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况相比,将停止时间设定得短。
这样,根据影像数据所依据的标准来切换驱动频率,由此能够实现节电化。此外,在使用电池来驱动LSIex500或包括LSIex500的装置的情况下,能够随着节电而延长电池的寿命。
(实施方式7)
在电视机、便携电话等上述的设备、系统中,有时被输入依据不同的标准的多个影像数据。这样,为了使得在被输入了依据不同的标准的多个影像数据的情况下也能够解码,LSIex500的信号处理部ex507需要对应于多个标准。但是,如果单独使用对应于各个标准的信号处理部ex507,则发生LSIex500的电路规模变大、此外成本增加的问题。
为了解决该问题,采用将用来执行在上述各实施方式中示出的动态图像解码方法的解码处理部、和依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的解码处理部一部分共用的结构。图35A的ex900表示该结构例。例如,在上述各实施方式中示出的动态图像解码方法和依据MPEG4-AVC标准的动态图像解码方法在熵编码、逆量化、解块滤波器、运动补偿等的处理中有一部分处理内容共通。可以考虑如下结构:关于共通的处理内容,共用对应于MPEG4-AVC标准的解码处理部ex902,关于不对应于MPEG4-AVC标准的本发明的一个方式所特有的其他的处理内容,使用专用的解码处理部ex901。特别是,本发明的一个方式在熵解码方面具有特征,因此可以考虑例如对于熵解码使用专用的解码处理部ex901,对于除此之外的解块过滤、运动补偿、逆量化中的某一个或者全部的处理,共用解码处理部。关于解码处理部的共用,也可以是如下结构:关于共通的处理内容,共用用来执行在上述各实施方式中示出的动态图像解码方法的解码处理部,关于MPEG4-AVC标准所特有的处理内容,使用专用的解码处理部。
此外,用图35B的ex1000表示将处理一部分共用的另一例。在该例中,采用使用与本发明的一个方式所特有的处理内容对应的专用的解码处理部ex1001、和与其他的以往标准所特有的处理内容对应的专用的解码处理部ex1002、和与在本发明的一个方式的动态图像解码方法和其他的以往标准的动态图像解码方法中共通的处理内容对应的共用的解码处理部ex1003的结构。这里,专用的解码处理部ex1001、ex1002并不一定是为本发明的一个方式、或者其他的以往标准所特有的处理内容而特殊化的,可以是能够执行其他的通用处理的结构。此外,也能够由LSIex500安装本实施方式的结构。
这样,对于在本发明的一个方式的动态图像解码方法和以往的标准的动态图像解码方法中共通的处理内容,共用解码处理部,由此能够减小LSI的电路规模并且降低成本。
产业上的可利用性
有关本发明的一技术方案的图像编码装置及图像解码装置例如能够在电视机、数字录像机、车载导航仪、便携电话、数字照相机或数字摄像机中使用。
标号说明
100、200、1000 图像解码装置
101、1001      第1解码部
102、1002      第2解码部
103、1003      解码控制部
104、1004      复原部
110            算术解码部
210            熵解码部
220、430       逆量化逆变换部
225、435       加法器
230、440       解块过滤器
240、450       存储器
250、460       帧内预测部
260、480       运动补偿部
270、490       帧内/帧间切换开关
300、400       图像编码装置
310            二值化部
320            算术编码部
321            第1编码部
322            第2编码部
323            编码控制部
330            配置部
405            减法器
410            变换量化部
420            熵编码部
470            运动检测部

Claims (15)

1.一种图像编码方法,对LAST位置信息进行编码,该LAST位置信息表示在编码对象块所包含的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置,其特征在于,
该图像编码方法包括:
二值化步骤,通过对作为在上述LAST位置信息中包含的水平成分及垂直成分中的一方的第1成分、和作为上述水平成分及上述垂直成分中的另一方的第2成分进行二值化,分别生成第1二值化信号和第2二值化信号;
算术编码步骤,将作为上述第1二值化信号的一部分的第1部分信号和作为上述第2二值化信号的一部分的第2部分信号通过第1算术编码而编码,并且将作为上述第1二值化信号的另一部分的第3部分信号和作为上述第2二值化信号的另一部分的第4部分信号通过方法与上述第1算术编码不同的第2算术编码而编码;以及
配置步骤,将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号配置到比特流内;
在上述配置步骤中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
2.如权利要求1所述的图像编码方法,其特征在于,
上述第1算术编码是使用基于已编码信号而更新的变动概率的上下文自适应算术编码;
在上述配置步骤中,接着上述编码后的第1部分信号而配置上述编码后的第2部分信号。
3.如权利要求1或2所述的图像编码方法,其特征在于,
上述第2算术编码是使用固定概率的旁路编码;
在上述配置步骤中,接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
4.如权利要求1所述的图像编码方法,其特征在于,
上述第1算术编码是使用基于已编码信号而更新的变动概率的上下文自适应算术编码;
上述第2算术编码是使用固定概率的旁路编码;
在上述配置步骤中,将上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号的顺序配置到上述比特流内。
5.如权利要求1所述的图像编码方法,其特征在于,
上述第1算术编码是使用基于已编码信号而更新的变动概率的上下文自适应算术编码;
上述第2算术编码是使用固定概率的旁路编码;
在上述配置步骤中,将上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第4部分信号及上述编码后的第3部分信号的顺序配置到上述比特流内。
6.如权利要求1所述的图像编码方法,其特征在于,
上述图像编码方法还包括:
切换步骤,将编码处理切换为依据第1标准的第1编码处理或依据第2标准的第2编码处理;以及
附加步骤,将表示切换后的上述编码处理所依据的上述第1标准或上述第2标准的识别信息附加到比特流中;
在上述编码处理被切换为上述第1编码处理的情况下,作为上述第1编码处理而进行上述二值化步骤、上述算术编码步骤和上述配置步骤。
7.一种图像编码装置,对LAST位置信息进行编码,该LAST位置信息表示在编码对象块所包含的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置,其特征在于,
该图像编码装置具备:
二值化部,通过对作为在上述LAST位置信息中包含的水平成分及垂直成分中的一方的第1成分、和作为上述水平成分及上述垂直成分中的另一方的第2成分进行二值化,分别生成第1二值化信号和第2二值化信号;
算术编码部,将作为上述第1二值化信号的一部分的第1部分信号和作为上述第2二值化信号的一部分的第2部分信号通过第1算术编码而编码,并且将作为上述第1二值化信号的另一部分的第3部分信号和作为上述第2二值化信号的另一部分的第4部分信号通过方法与上述第1算术编码不同的第2算术编码而编码;以及
配置部,将编码后的第1部分信号、编码后的第2部分信号、编码后的第3部分信号及编码后的第4部分信号配置到比特流内;
上述配置部,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
8.一种图像解码方法,对LAST位置信息进行解码,该LAST位置信息表示在编码对象块所包含的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置,其特征在于,
该图像解码方法包括:
算术解码步骤,将包含在比特流中的编码后的第1部分信号及编码后的第2部分信号通过第1算术解码而解码,并且将包含在上述比特流中的编码后的第3部分信号及编码后的第4部分信号通过方法与上述第1算术解码不同的第2算术解码而解码;以及
复原步骤,通过对由上述第1部分信号及上述第3部分信号构成的第1二值化信号进行多值化,将在上述LAST位置信息中包含的作为水平成分及垂直成分中的一方的第1成分复原,并且,通过对由上述第2部分信号及上述第4部分信号构成的第2二值化信号进行多值化,将作为上述水平成分及上述垂直成分中的另一方的第2成分复原;
在上述比特流中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
9.如权利要求8所述的图像解码方法,其特征在于,
在上述比特流中,接着上述编码后的第1部分信号而配置上述编码后的第2部分信号;
上述第1算术解码是使用基于已解码信号而更新的变动概率的上下文自适应算术解码。
10.如权利要求8或9所述的图像解码方法,其特征在于,
在上述比特流中,接着上述编码后的第3部分信号而配置上述编码后的第4部分信号;
上述第2算术解码是使用固定概率的旁路解码。
11.如权利要求8所述的图像解码方法,其特征在于,
在上述比特流中,上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号的顺序配置;
上述第1算术解码是使用基于已解码信号而更新的变动概率的上下文自适应算术解码;
上述第2算术解码是使用固定概率的旁路解码。
12.如权利要求8所述的图像解码方法,其特征在于,
在上述比特流中,上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第3部分信号及上述编码后的第4部分信号以上述编码后的第1部分信号、上述编码后的第2部分信号、上述编码后的第4部分信号及上述编码后的第3部分信号的顺序配置;
上述第1算术解码是使用基于已解码信号而更新的变动概率的上下文自适应算术解码;
上述第2算术解码是使用固定概率的旁路解码。
13.如权利要求8所述的图像解码方法,其特征在于,
上述图像解码方法还包括:
切换步骤,根据附加在比特流中的表示第1标准或第2标准的识别信息,将解码处理切换为依据上述第1标准的第1解码处理或依据上述第2标准的第2解码处理;
在上述解码处理被切换为第1解码处理的情况下,作为上述第1解码处理而进行上述算术解码步骤和上述复原步骤。
14.一种图像解码装置,对LAST位置信息进行解码,该LAST位置信息表示在编码对象块所包含的多个系数中在预先设定的顺序中处于最后的非零系数的水平方向及垂直方向的位置,其特征在于,
该图像解码装置具备:
算术解码部,将包含在比特流中的编码后的第1部分信号及编码后的第2部分信号通过第1算术解码而解码,并且将包含在上述比特流中的编码后的第3部分信号及编码后的第4部分信号通过方法与上述第1算术解码不同的第2算术解码而解码;以及
复原部,通过对由上述第1部分信号及上述第3部分信号构成的第1二值化信号进行多值化,将在上述LAST位置信息中包含的作为水平成分及垂直成分中的一方的第1成分复原,并且,通过对由上述第2部分信号及上述第4部分信号构成的第2二值化信号进行多值化,将作为上述水平成分及上述垂直成分中的另一方的第2成分复原;
在上述比特流中,(i)接着上述编码后的第1部分信号而配置上述编码后的第2部分信号,或者(ii)接着上述编码后的第3部分信号而配置上述编码后的第4部分信号。
15.一种图像编码解码装置,其特征在于,具备:
权利要求7所述的图像编码装置;以及
权利要求14所述的图像解码装置。
CN201280008483.9A 2011-11-07 2012-11-05 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置 Active CN103563379B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710545579.3A CN107197284B (zh) 2011-11-07 2012-11-05 图像编码解码装置
CN201710545557.7A CN107257463B (zh) 2011-11-07 2012-11-05 图像编码方法和图像编码装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161556406P 2011-11-07 2011-11-07
US61/556,406 2011-11-07
PCT/JP2012/007069 WO2013069246A1 (ja) 2011-11-07 2012-11-05 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、および画像符号化復号装置

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201710545579.3A Division CN107197284B (zh) 2011-11-07 2012-11-05 图像编码解码装置
CN201710545557.7A Division CN107257463B (zh) 2011-11-07 2012-11-05 图像编码方法和图像编码装置

Publications (2)

Publication Number Publication Date
CN103563379A true CN103563379A (zh) 2014-02-05
CN103563379B CN103563379B (zh) 2017-07-28

Family

ID=48289340

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201710545557.7A Active CN107257463B (zh) 2011-11-07 2012-11-05 图像编码方法和图像编码装置
CN201280008483.9A Active CN103563379B (zh) 2011-11-07 2012-11-05 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
CN201710545579.3A Active CN107197284B (zh) 2011-11-07 2012-11-05 图像编码解码装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201710545557.7A Active CN107257463B (zh) 2011-11-07 2012-11-05 图像编码方法和图像编码装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201710545579.3A Active CN107197284B (zh) 2011-11-07 2012-11-05 图像编码解码装置

Country Status (10)

Country Link
US (7) US8670625B2 (zh)
EP (1) EP2779648A4 (zh)
JP (3) JP5368662B1 (zh)
KR (1) KR20140097969A (zh)
CN (3) CN107257463B (zh)
AU (2) AU2012333927A1 (zh)
CA (1) CA2826423C (zh)
MX (1) MX2013008943A (zh)
TW (1) TW201334563A (zh)
WO (1) WO2013069246A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111049527A (zh) * 2019-12-23 2020-04-21 云南大学 一种图像编码解码方法
CN114079774A (zh) * 2020-08-21 2022-02-22 北京三星通信技术研究有限公司 帧间预测信息的编解码方法及装置

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140097969A (ko) * 2011-11-07 2014-08-07 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치, 화상 복호 장치, 및 화상 부호화 복호 장치
JP6080375B2 (ja) * 2011-11-07 2017-02-15 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
CN108235015A (zh) 2011-11-08 2018-06-29 三星电子株式会社 用于对视频进行解码的设备
US20130114667A1 (en) * 2011-11-08 2013-05-09 Sony Corporation Binarisation of last position for higher throughput
JP5973766B2 (ja) * 2012-03-30 2016-08-23 キヤノン株式会社 画像処理装置
MX2013015089A (es) 2012-05-25 2014-02-21 Panasonic Corp Metodo de codificacion de imagenes en movimiento, metodo de decodificacion de imagenes en movimiento, aparato de codificacion de imagenes en movimiento, aparato de decodificacion de imágenes en movimiento y aparato de codificacion y decodificacion de imagenes en movimiento.
WO2013175736A1 (ja) 2012-05-25 2013-11-28 パナソニック株式会社 動画像符号化方法、動画像符号化装置、動画像復号方法、動画像復号装置、および、動画像符号化復号装置
RU2679984C2 (ru) 2012-05-25 2019-02-14 Вилос Медиа Интернэшнл Лимитед Способ кодирования изображений, устройство кодирования изображений, способ декодирования изображений, устройство декодирования изображений и устройство кодирования и декодирования изображений
KR102060617B1 (ko) * 2012-06-04 2019-12-30 선 페이턴트 트러스트 동화상 부호화 방법, 동화상 부호화 장치, 동화상 복호 방법, 및, 동화상 복호 장치
GB2513111A (en) * 2013-04-08 2014-10-22 Sony Corp Data encoding and decoding
GB2519289B (en) * 2013-10-11 2016-10-12 Canon Kk Method and apparatus for displacement vector component transformation in video coding and decoding
GB2521828A (en) * 2013-12-23 2015-07-08 Sony Corp Data encoding and decoding
US20160044339A1 (en) * 2014-08-07 2016-02-11 Qualcomm Incorporated System and method for reordering of prefixes and suffixes in variable length coding to increase throughput
JP6881441B2 (ja) * 2016-05-13 2021-06-02 日本電気株式会社 算術符号化装置、算術符号化方法、及び、算術符号化回路
US10523968B2 (en) 2017-09-18 2019-12-31 Google Llc Coding of last significant coefficient flags
US10593257B2 (en) 2018-03-15 2020-03-17 Samsung Display Co., Ltd. Stress profile compression
CN110072114B (zh) * 2019-04-16 2021-04-09 西南交通大学 用于静态霍夫曼表生成的全并行频数生成电路结构与方法
US11132944B2 (en) 2019-09-18 2021-09-28 Samsung Display Co., Ltd. Unbiased iterative compression on additive data using dither
CN112866723B (zh) * 2019-11-28 2024-04-19 瑞昱半导体股份有限公司 图像数据处理方法与系统
CN111372124B (zh) * 2020-03-09 2022-04-15 格兰菲智能科技有限公司 一种文字图像的编码及解码方法
KR20230022061A (ko) * 2021-08-06 2023-02-14 삼성전자주식회사 디코딩 장치 및 그의 동작 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060045178A1 (en) * 2004-08-26 2006-03-02 Markus Schu Method for encoding a first and a second data word
US20070160150A1 (en) * 1995-03-15 2007-07-12 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems, and variable-length coding and/or decoding system
US20090201994A1 (en) * 2002-05-02 2009-08-13 Fraunhofer-Gesellschaff Zur Forderung Der Angewandten Forschung E.V. Method and Arrangement for Coding Transform Coefficients in Picture and/or Video Coders and Decoders and a Corresponding Computer Program and a Corresponding Computer-Readable Storage Medium
US20100303147A1 (en) * 2009-05-27 2010-12-02 Sony Corporation Encoding apparatus and encoding method, and decoding apparatus and decoding method

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2546700B1 (fr) * 1983-05-27 1986-12-05 Thomson Csf Procede et dispositif de codage a faible cout en debit de donnees pour systemes de television a rafraichissement conditionnel
US5010401A (en) * 1988-08-11 1991-04-23 Mitsubishi Denki Kabushiki Kaisha Picture coding and decoding apparatus using vector quantization
FR2835366B1 (fr) * 2002-01-29 2004-06-18 Canon Kk Procede et dispositif de formation d'un signal numerique compresse reduit
JP4090862B2 (ja) 2002-04-26 2008-05-28 松下電器産業株式会社 可変長符号化方法および可変長復号化方法
JP4230188B2 (ja) * 2002-06-06 2009-02-25 パナソニック株式会社 可変長符号化方法および可変長復号化方法
JP3959039B2 (ja) 2003-02-28 2007-08-15 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法、及び画像復号プログラム
EP1453004A2 (en) 2003-02-28 2004-09-01 NTT DoCoMo, Inc. Image encoding apparatus and method
US6900748B2 (en) 2003-07-17 2005-05-31 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Method and apparatus for binarization and arithmetic coding of a data value
CN100341333C (zh) * 2005-05-23 2007-10-03 上海广电(集团)有限公司中央研究院 一种增强像素域码流转换方法
JP4468858B2 (ja) * 2005-06-01 2010-05-26 オリンパスイメージング株式会社 データ符号化装置、データ符号化方法、プログラム
CN1719903A (zh) * 2005-06-24 2006-01-11 清华大学 用于图象算术编码中的一种二值化和概率模型选择方法
CN100488254C (zh) * 2005-11-30 2009-05-13 联合信源数字音视频技术(北京)有限公司 一种基于上下文的熵编码方法及解码方法
CN100471279C (zh) * 2006-02-13 2009-03-18 清华大学 一种基于上下文自适应变长解码的方法
US8891615B2 (en) * 2008-01-08 2014-11-18 Qualcomm Incorporated Quantization based on rate-distortion modeling for CABAC coders
WO2011002914A1 (en) * 2009-06-30 2011-01-06 Massachusetts Institute Of Technology System and method for providing high throughput entropy coding using syntax element partitioning
JP5676744B2 (ja) * 2010-04-13 2015-02-25 フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン エントロピー符号化
US8520740B2 (en) * 2010-09-02 2013-08-27 International Business Machines Corporation Arithmetic decoding acceleration
US8976861B2 (en) * 2010-12-03 2015-03-10 Qualcomm Incorporated Separately coding the position of a last significant coefficient of a video block in video coding
JP5876030B2 (ja) * 2011-02-24 2016-03-02 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 算術復号方法および算術符号化方法
US9747255B2 (en) * 2011-05-13 2017-08-29 Texas Instruments Incorporated Inverse transformation using pruning for video coding
US10123053B2 (en) * 2011-05-23 2018-11-06 Texas Instruments Incorporated Acceleration of bypass binary symbol processing in video coding
EP4220966A1 (en) * 2011-06-24 2023-08-02 Sun Patent Trust Image decoding device,
EP3402206B1 (en) * 2011-06-28 2020-05-20 Samsung Electronics Co., Ltd. Video encoding and decoding method using arithmetic coding with a two-dimensional signaling of the last significant coefficient
EP2740272A4 (en) * 2011-08-04 2015-04-08 Mediatek Inc METHOD AND DEVICE FOR RECORDING BINARIZATION OF SYNTAX ELEMENTS IN CABAC
US20130094779A1 (en) * 2011-10-04 2013-04-18 Texas Instruments Incorporated Method and Apparatus for Prediction Unit Size Dependent Motion Compensation Filtering Order
KR20140097969A (ko) * 2011-11-07 2014-08-07 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치, 화상 복호 장치, 및 화상 부호화 복호 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070160150A1 (en) * 1995-03-15 2007-07-12 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems, and variable-length coding and/or decoding system
US20090201994A1 (en) * 2002-05-02 2009-08-13 Fraunhofer-Gesellschaff Zur Forderung Der Angewandten Forschung E.V. Method and Arrangement for Coding Transform Coefficients in Picture and/or Video Coders and Decoders and a Corresponding Computer Program and a Corresponding Computer-Readable Storage Medium
US20060045178A1 (en) * 2004-08-26 2006-03-02 Markus Schu Method for encoding a first and a second data word
US20100303147A1 (en) * 2009-05-27 2010-12-02 Sony Corporation Encoding apparatus and encoding method, and decoding apparatus and decoding method

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
BENJAMIN BROSS ET AL.: "《WD4: Working Draft 4 of High-Efficiency Video Coding》", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
HISAO SASAI ET AL.: "《Modified MVD coding for CABAC》", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *
VADIM SEREGIN ET AL.: "《Binarisation modification for last position coding》", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111049527A (zh) * 2019-12-23 2020-04-21 云南大学 一种图像编码解码方法
CN114079774A (zh) * 2020-08-21 2022-02-22 北京三星通信技术研究有限公司 帧间预测信息的编解码方法及装置

Also Published As

Publication number Publication date
USRE48632E1 (en) 2021-07-06
US20140029863A1 (en) 2014-01-30
CA2826423C (en) 2020-03-24
CN107257463A (zh) 2017-10-17
CN107197284B (zh) 2020-03-27
US20140133562A1 (en) 2014-05-15
US8670625B2 (en) 2014-03-11
JP5404961B1 (ja) 2014-02-05
EP2779648A4 (en) 2016-06-01
KR20140097969A (ko) 2014-08-07
JP5368662B1 (ja) 2013-12-18
AU2017202023A1 (en) 2017-04-20
CN107257463B (zh) 2020-02-28
US20150103879A1 (en) 2015-04-16
US8923634B2 (en) 2014-12-30
USRE47728E1 (en) 2019-11-12
AU2017202023B2 (en) 2018-12-20
AU2012333927A1 (en) 2013-08-22
MX2013008943A (es) 2013-09-06
US20130129238A1 (en) 2013-05-23
JPWO2013069246A1 (ja) 2015-04-02
US8958653B2 (en) 2015-02-17
TWI562596B (zh) 2016-12-11
CA2826423A1 (en) 2013-05-16
JP6132270B2 (ja) 2017-05-24
USRE49788E1 (en) 2024-01-02
US9191683B2 (en) 2015-11-17
CN107197284A (zh) 2017-09-22
CN103563379B (zh) 2017-07-28
JP2014030231A (ja) 2014-02-13
EP2779648A1 (en) 2014-09-17
TW201334563A (zh) 2013-08-16
JP2014030230A (ja) 2014-02-13
WO2013069246A1 (ja) 2013-05-16

Similar Documents

Publication Publication Date Title
CN103563379B (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
CN103004207B (zh) 图像解码方法及图像解码装置
CN103004208B (zh) 图像编码方法和装置、图像解码方法和装置
CN107087189B (zh) 图像编码方法及图像编码装置
EP2665264B1 (en) Image encoding method, image decoding method, image encoding device, image decoding device, and image encoding/decoding device
CN103202020B (zh) 动态图像解码方法以及动态图像解码装置
CN103348680A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码解码装置
CN103718553A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
CN103535039A (zh) 图像解码方法、图像编码方法、图像解码装置、图像编码装置以及图像编解码装置
CN103650511A (zh) 运动图像编码方法、运动图像解码方法、运动图像编码装置、运动图像解码装置和运动图像编码解码装置
CN103609110A (zh) 图像解码方法、图像编码方法、图像解码装置、图像编码装置及图像编码解码装置
CN103563384A (zh) 运动图像编码方法、运动图像编码装置、运动图像解码方法、运动图像解码装置、及运动图像编解码装置
CN103703774A (zh) 滤波方法、运动图像解码方法、运动图像编码方法、运动图像解码装置、运动图像编码装置及运动图像编码解码装置
CN103650498A (zh) 运动图像编码方法、运动图像编码装置、运动图像解码方法及运动图像解码装置
CN104025598A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
CN103636209A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置和图像编码解码装置
CN103339937A (zh) 图像编码方法、图像编码装置、图像解码方法、图像解码装置以及图像编解码装置
CN103636221A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置以及图像编码解码装置
CN103621088A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置和图像编码解码装置
CN103650500A (zh) 图像编码方法、图像编码装置、图像解码方法、图像解码装置及图像编码解码装置
CN103119943A (zh) 图像编码方法及图像解码方法
CN103636226A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置和图像编码解码装置
CN104509116A (zh) 图像解码方法、图像编码方法、图像解码装置、图像编码装置及图像编码解码装置
CN102860009A (zh) 编码失真除去方法、编码方法、解码方法、编码失真除去装置、编码装置、及解码装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20141010

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20141010

Address after: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Osaka Japan

Applicant before: Matsushita Electric Industrial Co.,Ltd.

C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: Seaman Avenue Torrance in the United States of California No. 20000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM:

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20161020

Address after: American New York

Applicant after: Sun patent hosting Co.

Address before: Seaman Avenue Torrance in the United States of California No. 20000 room 200

Applicant before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

GR01 Patent grant
GR01 Patent grant