CN107734344B - 图像编码方法及图像编码设备 - Google Patents

图像编码方法及图像编码设备 Download PDF

Info

Publication number
CN107734344B
CN107734344B CN201710978692.0A CN201710978692A CN107734344B CN 107734344 B CN107734344 B CN 107734344B CN 201710978692 A CN201710978692 A CN 201710978692A CN 107734344 B CN107734344 B CN 107734344B
Authority
CN
China
Prior art keywords
coefficient
flag
context
processing
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710978692.0A
Other languages
English (en)
Other versions
CN107734344A (zh
Inventor
寺田健吾
西孝启
柴原阳司
谷川京子
笹井寿郎
杉尾敏康
松延彻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Patent Trust Inc
Original Assignee
Willers Media International Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Willers Media International Ltd filed Critical Willers Media International Ltd
Publication of CN107734344A publication Critical patent/CN107734344A/zh
Application granted granted Critical
Publication of CN107734344B publication Critical patent/CN107734344B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/40Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
    • H03M7/4006Conversion to or from arithmetic code
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field

Abstract

一种利用算术编码的图像编码方法,包括:第一标志编码步骤(S701),对示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大的第一标志(greater1_flag)进行算术编码;以及第二标志编码步骤(S702),对示出所述处理对象的系数的绝对值是否比2大的第二标志(greater2_flag)进行算术编码,在所述第一标志编码步骤以及所述第二标志编码步骤中,判定所述处理对象的系数块的前一个系数块中是否存在绝对值超过阈值的系数(S711),按照判定结果,对用于所述第一标志以及所述第二标志的算术编码的上下文进行切换(S712)。

Description

图像编码方法及图像编码设备
本申请是申请日为2013年06月07日、申请号为201380031036.X、发明名称为“图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编解码装置”的专利申请的分案申请。
技术领域
本发明涉及图像编码方法及图像解码方法。
背景技术
近几年,数字影像设备的技术进步显著,对影像信号(按照时间序列顺序排列的多个运动图像图片)进行压缩编码,将通过编码而得到的影像信号,记录到DVD或硬盘等的记录介质,或者,分发到网络上的机会逐渐增多。图像编码标准有H.264/AVC(MPEG-4AVC),但是,正在研究作为下一代的标准规格的HEVC(High Efficiency Video Coding)标准(例如,参照非专利文献1)。
(现有技术文献)
(非专利文献)
非专利文献1:Joint Collaborative Team on Video Coding(JCT-VC) of ITU-TSG16 WP3 and ISO/IEC JTC1/SC29/WG119th Meeting: Geneva,CH,27 April-7 May 2012JCTVC-I1003_d4.doc,High efficiency video coding(HEVC)text specification draft7http:// phenix.it-sudparis.eu/jct/doc_end_user/documents/9_Geneva/ wg11/JCTVC-I1003-v5.zip
对于这样的图像编码方法及图像解码方法,期待能够一边抑制编码效率的劣化,一边降低处理量。
发明内容
本发明的目的在于,提供能够一边抑制编码效率的劣化,一边降低处理量的图像编码方法及图像解码方法。
为了实现所述目的,本发明的实施方案之一涉及的图像编码方法,是利用算术编码的图像编码方法,包括:第一标志编码步骤,对第一标志进行算术编码,该第一标志示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大;以及第二标志编码步骤,对第二标志进行算术编码,该第二标志示出所述处理对象的系数的绝对值是否比2大,在所述第一标志编码步骤以及所述第二标志编码步骤中,判定所述处理对象的系数块的前一个系数块中是否存在绝对值超过阈值的系数,按照判定结果,对用于所述第一标志以及所述第二标志的算术编码的上下文进行切换。
而且,它们的整体或具体的形态,可以由系统、方法、集成电路、计算机程序或计算机可读取的CD-ROM等的记录介质实现,也可以由系统、方法、集成电路、计算机程序及记录介质的任意的组合实现。
本发明能够提供能够一边抑制编码效率的劣化,一边降低处理量的图像编码方法及图像解码方法。
附图说明
图1是实施例1涉及的图像编码装置的方框图。
图2是实施例1涉及的图像编码处理的流程图。
图3是实施例1涉及的可变长编码部的方框图。
图4是实施例1涉及的可变长编码处理的流程图。
图5是实施例1涉及的level编码部的方框图。
图6是实施例1涉及的level编码处理的流程图。
图7是实施例1涉及的greater1_flag编码处理的流程图。
图8是实施例1涉及的greater2_flag编码处理的流程图。
图9是实施例1涉及的remaining编码处理的流程图。
图10是实施例1涉及的上下文集选择处理的流程图。
图11是实施例1涉及的greater1_flag上下文选择处理的流程图。
图12是示出实施例1涉及的上下文号码的一个例子的图。
图13是实施例1涉及的remaining二值化处理的流程图。
图14是实施例1涉及的Prefix、Suffix决定处理的流程图。
图15A是示出实施例1涉及的remaining和Prefix及Suffix bin的对应关系的一个例子的图。
图15B是示出实施例1涉及的remaining和Prefix及Suffix bin的对应关系的一个例子的图。
图15C是示出实施例1涉及的remaining和Prefix及Suffix bin的对应关系的一个例子的图。
图16是实施例1涉及的Prefix bin输出处理的流程图。
图17是实施例1涉及的Suffix bin输出处理的流程图。
图18是实施例1涉及的二值化参数更新处理的流程图。
图19是示出实施例1涉及的图像编码方法的评价结果的图。
图20是实施例2涉及的图像解码装置的方框图。
图21是实施例2涉及的图像解码处理的流程图。
图22是实施例2涉及的可变长解码部的方框图。
图23是实施例2涉及的可变长解码处理的流程图。
图24是实施例2涉及的level解码部的方框图。
图25是实施例2涉及的level解码处理的流程图。
图26是实施例2涉及的greater1_flag解码处理的流程图。
图27是实施例2涉及的greater2_flag解码处理的流程图。
图28是实施例2涉及的remaining解码处理的流程图。
图29是实施例2涉及的remaining多值化处理的流程图。
图30是实施例2涉及的Prefix解码处理的流程图。
图31是实施例2涉及的Suffix解码处理及Prefix、Suffix结合处理的流程图。
图32A是实施例1涉及的图像编码方法的流程图。
图32B是实施例1涉及的第一标志编码处理及第二标志编码处理的流程图。
图33A是实施例2涉及的图像解码方法的流程图。
图33B是实施例2涉及的第一标志解码处理及第二标志解码处理的流程图。
图34是实施例3涉及的level编码部的方框图。
图35是实施例3涉及的level编码处理的流程图。
图36是实施例3涉及的上下文集选择处理的流程图。
图37是实施例3涉及的图像编码方法的评价结果的图。
图38是实施例4涉及的level解码部的方框图。
图39是实施例4涉及的level解码处理的流程图。
图40是实现内容分发服务的内容提供系统的整体结构图。
图41是数字广播用系统的整体结构图。
图42是示出电视机的结构例的方框图。
图43是示出对作为光盘的记录介质进行信息的读写的信息再生/记录部的结构例的方框图。
图44是示出作为光盘的记录介质的构造例的图。
图45A是示出表示移动电话的一个例子的图。
图45B是示出移动电话的结构例的方框图。
图46是示出多路复用数据的结构的图。
图47是示出在多路复用数据中各个流如何被多路复用的模式图。
图48是更详细示出PES数据包列中如何存储视频流的图。
图49是示出多路复用数据的TS数据包和源数据包的构造的图。
图50是示出PMT的数据结构的图。
图51是示出多路复用数据信息的内部结构的图。
图52是示出流属性信息的内部结构的图。
图53是示出识别影像数据的步骤的图。
图54是示出实现各个实施例的运动图像编码方法及运动图像解码方法的集成电路的结构例的方框图。
图55是示出切换驱动频率的结构的图。
图56是示出识别影像数据,切换驱动频率的步骤的图。
图57是示出影像数据的标准与驱动频率对应起来的查找表的一个例子的图。
图58A是示出共享信号处理部的模块的结构的一个例子的图。
图58B是示出共享信号处理部的模块的结构的其他的一个例子的图。
具体实施方式
(成为本发明的基础的知识)
本发明人,对于以往的图像编码方法,发现了产生以下的问题。
现在的HEVC标准(例如,参照非专利文献1)的图像编码方法包括,预测编码图像的步骤、求出预测图像和编码对象图像的差分的步骤、将差分图像变换为频率系数的步骤、以及对频率系数进行算术编码的步骤。在算术编码中,编码对象的系数块中包含的多个系数,按照从高频成分到低频成分的顺序而被编码。此时,按照编码完毕系数选择上下文,利用与选择到的上下文对应而决定的符号发生概率对编码对象系数进行算术编码。
在一般的图像中,系数越接近低频成分就越成为大的值的情况多,因此,参考编码完毕的系数(比编码对象系数高频的系数)决定上下文,从而能够使符号发生概率具有偏差。例如,编码完毕的系数(比编码对象系数高频的系数)的值越大,编码对象系数也成为大的值的概率就越大。因此,图像编码装置,通过使用用于大的值的上下文,从而能够抑制发生代码量。在现在的HEVC标准中,对编码完毕的系数中系数的绝对值为2以上的系数的个数进行计数,按照其个数决定编码对象系数的上下文。
然而,本发明人发现了在所述图像编码方法中存在以下的问题,即,需要对编码完毕的系数中绝对值为2以上的系数的个数进行计数,需要计数的处理及用于存储计数值的寄存器。
为了实现所述目的,本发明的实施方案之一涉及的图像编码方法,是利用算术编码的图像编码方法,包括:第一标志编码步骤,对第一标志进行算术编码,该第一标志示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大;以及第二标志编码步骤,对第二标志进行算术编码,该第二标志示出所述处理对象的系数的绝对值是否比2大,在所述第一标志编码步骤以及所述第二标志编码步骤中,判定所述处理对象的系数块的前一个系数块中是否存在绝对值超过阈值的系数,按照判定结果,对用于所述第一标志以及所述第二标志的算术编码的上下文进行切换。
据此,该图像编码方法,按照前一个系数块中是否存在绝对值超过阈值的系数切换上下文。因此,该图像编码方法,与按照系数的个数切换上下文的情况相比,能够减少处理量。并且,该图像编码方法,能够一边抑制编码效率的降低,一边减少处理量。
例如,也可以是,在所述第一标志编码步骤以及所述第二标志编码步骤中,利用所述前一个系数块的算术编码时生成的变量,判定所述前一个系数块中是否存在绝对值超过阈值的系数。
据此,该图像编码方法,将其他的处理中利用的变量,挪用于上下文的切换处理,从而能够减少处理量。
例如,也可以是,所述图像编码方法,进一步,在所述处理对象的系数的绝对值比2大的情况下,根据多个变换表之中的由二值化参数指定的变换表,对剩余值进行二值化,该剩余值是从所述处理对象的系数的绝对值减去3之后的值,所述二值化参数是按照所述前一个系数块中是否存在绝对值超过阈值的系数而决定的,所述变量是所述二值化参数。
例如,所述阈值也可以是1。
并且,本发明的实施方案之一涉及的图像解码方法,是利用算术解码的图像解码方法,包括:第一标志解码步骤,对第一标志进行算术解码,该第一标志示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大;以及第二标志解码步骤,对第二标志进行算术解码,该第二标志示出所述处理对象的系数的绝对值是否比2大,在所述第一标志解码步骤以及所述第二标志解码步骤中,判定所述处理对象的系数块的前一个系数块中是否存在绝对值超过阈值的系数,按照判定结果,对用于所述第一标志以及所述第二标志的算术解码的上下文进行切换。
据此,该图像解码方法,按照前一个系数块中是否存在绝对值超过阈值的系数切换上下文。因此,该图像解码方法,与按照系数的个数切换上下文的情况相比,能够减少处理量。并且,该图像解码方法,能够一边抑制编码效率的降低,一边减少处理量。
例如,也可以是,在所述第一标志解码步骤以及所述第二标志解码步骤中,利用所述前一个系数块的算术解码时生成的变量,判定所述前一个系数块中是否存在绝对值超过阈值的系数。
据此,该图像解码方法,将其他的处理中利用的变量,挪用于上下文的切换处理,从而能够减少处理量。
例如,也可以是,所述图像解码方法,进一步,在所述处理对象的系数的绝对值比2大的情况下,根据多个变换表之中的由二值化参数指定的变换表,对剩余值进行多值化,该剩余值是从所述处理对象的系数的绝对值减去3之后的值,所述二值化参数是按照所述前一个系数块中是否存在绝对值超过阈值的系数而决定的,所述变量是所述二值化参数。
例如,所述阈值也可以是1。
并且,本发明的实施方案之一涉及的图像编码装置,是利用算术编码的图像编码装置,具备:控制电路;以及从所述控制电路能够访问的存储装置,所述控制电路,执行第一标志编码步骤和第二标志编码步骤,在所述第一标志编码步骤中,对第一标志进行算术编码,该第一标志示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大;以及在所述第二标志编码步骤中,对第二标志进行算术编码,该第二标志示出所述处理对象的系数的绝对值是否比2大,在所述第一标志编码步骤以及所述第二标志编码步骤中,判定所述处理对象的系数块的前一个系数块中是否存在绝对值超过阈值的系数,按照判定结果,对用于所述第一标志以及所述第二标志的算术编码的上下文进行切换。
据此,该图像编码装置,按照前一个系数块中是否存在绝对值超过阈值的系数切换上下文。因此,该图像编码装置,与按照系数的个数切换上下文的情况相比,能够减少处理量。并且,该图像编码装置,能够一边抑制编码效率的降低,一边减少处理量。
并且,本发明的实施方案之一涉及的图像解码装置,是利用算术解码的图像解码装置,具备:控制电路;以及从所述控制电路能够访问的存储装置,所述控制电路,执行第一标志解码步骤和第二标志解码步骤,在所述第一标志解码步骤中,对第一标志进行算术解码,该第一标志示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大;以及在所述第二标志解码步骤中,对第二标志进行算术解码,该第二标志示出所述处理对象的系数的绝对值是否比2大,在所述第一标志解码步骤以及所述第二标志解码步骤中,判定所述处理对象的系数块的前一个系数块中是否存在绝对值超过阈值的系数,按照判定结果,对用于所述第一标志以及所述第二标志的算术解码的上下文进行切换。
据此,该图像解码装置,按照前一个系数块中是否存在绝对值超过阈值的系数切换上下文。因此,该图像解码装置,与按照系数的个数切换上下文的情况相比,能够减少处理量。并且,该图像解码装置,能够一边抑制编码效率的降低,一边减少处理量。
并且,本发明的实施方案之一涉及的图像编解码装置具备,所述图像编码装置和所述图像解码装置。
而且,它们的整体或具体的形态,可以由系统、方法、集成电路、计算机程序或计算机可读取的CD-ROM等的记录介质实现,也可以由系统、方法、集成电路、计算机程序及记录介质的任意的组合实现。
以下,对于图像编码装置及图像解码装置的实施例,参照附图进行说明。
而且,以下说明的实施例,都示出本发明的优选的一个具体例子。以下的实施例示出的数值、形状、材料、构成要素、构成要素的配置位置及连接形态、步骤、步骤的顺序等是一个例子而不是限定本发明的宗旨。并且,对于以下的实施例的构成要素中的、示出最上位概念的独立权利要求中没有记载的构成要素,作为任意的构成要素而被说明。
(实施例1)
在本实施例中,说明图像编码装置的实施例。
<整体结构>
图1是示出本实施例涉及的图像编码装置的结构的方框图。
图1示出的图像编码装置100,通过对输入图像121进行编码,从而生成代码串125(编码比特流)。该图像编码装置100具备,代码块分割部 101、减法部102、变换部103、可变长编码部104、逆变换部105、加法部106、帧存储器107、以及预测部108。
<工作(整体)>
接着,参照图2,说明编码处理整体的流程。
(步骤S101)
代码块分割部101,将输入图像121分割成代码块122,将代码块122 依次输出到减法部102及预测部108。此时,代码块122的尺寸为可变,代码块分割部101,利用输入图像121的特征,将输入图像121分割成代码块122。例如,代码块122的最小尺寸为横4像素×纵4像素,最大尺寸为横32像素×纵32像素。
(步骤S102)
预测部108,利用代码块122、以及帧存储器107中存储的解码图像 128生成预测块129。
(步骤S103)
减法部102,生成作为代码块122和预测块129的差分的差分块123。
(步骤S104)
变换部103,将差分块123变换成频率系数124。
(步骤S105)
可变长编码部104,通过对频率系数124进行可变长编码,从而生成代码串125。
(步骤S106)
逆变换部105,通过将频率系数124变换成像素数据,从而复原差分块126。
(步骤S107)
加法部106,通过对复原后的差分块126和预测块129进行加法运算,从而生成解码块127,将生成的解码块127作为解码图像128存储到帧存储器107。
(步骤S108)
反复进行步骤S102至步骤S107,直到编码对象图像内的全代码块的编码完成为止。
以后,详细说明可变长编码部104。
<可变长编码部104的结构>
图3是示出可变长编码部104的结构的方框图。
在本实施例中,可变长编码部104,利用significant_flag、 greater1_flag、greater2_flag、remaining、以及sign_flag的五个参数,对频率系数124(以下,也简称为“系数”)进行编码。
significant_flag是示出系数是否为0的标志,在值为0时示出系数为 0,在值为1时示出系数为0以外。
greater1_flag是,仅针对significant_flag为1的系数(不是0的系数) 存在的。greater1_flag是示出系数的绝对值是否为2以上(比1大)的标志。在greater1_flag的值为0时示出系数的绝对值为1,在值为1时示出系数的绝对值为2以上。
greater2_flag是,仅针对greater1_flag为1的系数(绝对值为2以上的系数)存在的。greater2_flag是示出系数的绝对值是否为3以上(比2大) 的标志。在greater2_flag的值为0时示出系数的绝对值为2,在值为1时示出系数的绝对值为3以上。
remaining是仅针对greater2_flag为1的系数(绝对值为3以上的系数)存在的。remaining示出从系数的绝对值减去3之后的值。
sign_flag是仅针对significant_flag为1的系数(不是0的系数)存在的。sign_flag是示出系数是否为负的值(是负还是正)的标志。在sign_flag 的值为0时示出系数为正的值,在值为1时示出系数为负的值。
如图3示出,可变长编码部104具备,系数块分割部131、 significant_flag编码部132、level编码部133、以及sign_flag编码部134。
significant_flag编码部132,对significant_flag进行编码。level编码部133,对greater1_flag、greater2_flag、以及remaining进行编码。 sign_flag编码部134,对sign_flag进行编码。
<工作(可变长编码)>
接着,参照图4,说明可变长编码处理的流程。
(步骤S121)
系数块分割部131,将代码块(频率系数124)分割成4×4的系数块。具体而言,系数块分割部131,在代码块为32×32的情况下,在横向分割成8,在纵向分割成8。并且,系数块分割部131,在代码块为4×4的情况下,不进行分割。而且,按每个系数块执行以后的步骤S122至步骤S124。并且,多个系数块,按照从高频带成分的系数块到低频带成分的系数块的顺序被处理。
(步骤S122)
significant_flag编码部132,对系数块中包含的各个系数的 significant_flag进行编码。
(步骤S123)
level编码部133,对系数块中包含的各个系数的greater1_flag、 greater2_flag、以及remaining进行编码。
(步骤S124)
sign_flag编码部134,对系数块中包含的各个系数的sign_flag进行编码。
(步骤S125)
反复进行步骤S122至S124,直到代码块中包含的所有的系数块的处理完成为止。
以后,详细说明level编码部133。
<level编码部133的结构>
图5是示出level编码部133的结构的方框图。如图5示出,level编码部133具备,greater1_flag设定部141、greater2_flag设定部142、 remaining设定部143、二值化参数更新部144、上下文集选择部145、 greater1_flag存储器146、greater1_flag上下文选择部147、 greater1_flag上下文存储器148、greater2_flag上下文选择部149、 greater2_flag上下文存储器150、算术编码部151、以及remaining二值化部152。remaining二值化部152具备,PrefixSuffix决定部153、Suffix bin输出部154、以及Prefixbin输出部155。
level编码部133,首先,选择greater1_flag、以及greater2_flag的算术编码所使用的上下文集。接着,level编码部133,将greater1_flag、 greater2_flag、以及remaining按照该顺序编码。level编码部133,在算术编码之前将remaining从多值信号变换成二值信号(bin)。此时,level 编码部133,利用二值化参数(cParam)适应性地变更二值信号(bin)的长度。并且,level编码部133,在上下文集的选择时也利用该二值化参数,适应性地选择上下文集。
<工作(level编码)>
接着,参照图6至图9,详细说明由level编码部133的编码处理的流程。图6是示出由level编码部133的编码处理的流程的图。
(步骤S141)
上下文集选择部145,设定greater1_flag、以及greater2_flag的算术编码所使用的上下文集号码。在后面进行详细说明。
(步骤S142)
二值化参数更新部144,将二值化参数(cParam)初始化为0。通过该处理,在4×4的系数块的开头中cParam被设定为0。而且,对系数块进行步骤S141及步骤S142的处理一次。按每个系数进行步骤S143以后的处理。
(步骤S143)
level编码部133,对系数块中包含的各个系数的greater1_flag进行编码。图7是详细示出该处理的流程图。
(步骤S151)
greater1_flag设定部141,判定对象系数(处理对象的系数)的绝对值是否为1以上。若对象系数的绝对值为1以上,则在步骤S152至S154 中greater1_flag被编码,若对象系数的绝对值为0,则greater1_flag不被编码。
(步骤S152)
greater1_flag设定部141,在对象系数的绝对值为2以上的情况下,将greater1_flag设定为1,若对象系数的绝对值为1,则将greater1_flag 设定为0。
(步骤S153)
greater1_flag上下文选择部147,利用步骤S141中选择的上下文集号码设定上下文号码。
在后面进行详细说明。
(步骤S154)
算术编码部151,按照步骤S153中选择的上下文号码,从 greater1_flag上下文存储器148加载所利用的上下文,利用该上下文进行 greater1_flag的算术编码。并且,算术编码部151,将通过该算术编码而更新后的上下文,存放到greater1_flag上下文存储器148的与原来的上下文相同的位置。
(步骤S155)
反复进行步骤S151至步骤S155,直到4×4系数块内的全系数的处理完成为止。
如上所述,系数块中包含的各个系数的greater1_flag被编码。
(步骤S144)
level编码部133,对系数块中包含的各个系数的greater2_flag进行编码。图8是详细示出该处理的流程图。
(步骤S161)
greater2_flag设定部142,判定对象系数的绝对值是否为2以上。若对象系数的绝对值为2以上,则在步骤S162至S165中greater2_flag被编码,若对象系数的绝对值为1以下,则greater2_flag不被编码。
(步骤S162)
greater2_flag设定部142,在对象系数的绝对值为3以上的情况下,将greater2_flag设定为1,若对象系数的绝对值为2,则将greater2_flag 设定为0。
(步骤S163)
greater2_flag上下文选择部149,将步骤S141中选择的上下文集号码设定为上下文号码。greater2_flag的上下文与greater1_flag不同,上下文集号码本身被设定为上下文号码。也就是说,greater2_flag的一个上下文集仅包含一个上下文。
(步骤S164)
算术编码部151,按照步骤S150中选择的上下文号码,从 greater2_flag上下文存储器150加载所利用的上下文,利用该上下文进行 greater2_flag的算术编码。并且,算术编码部151,将通过该算术编码而更新后的上下文,存放到greater2_flag上下文存储器150的与原来的上下文相同的位置。
(步骤S165)
反复进行步骤S161至步骤S164,直到4×4系数块内的全系数的处理完成为止。
如上所述,系数块中包含的各个系数的greater2_flag被编码。
(步骤S145)
level编码部133,对系数块中包含的各个系数的remaining进行编码。图9是详细示出该处理的流程图。
(步骤S171)
remaining设定部143,判定对象系数的绝对值是否为3以上。若对象系数的绝对值为3以上,则在步骤S172至S175中remaining被编码,若对象系数的绝对值为2以下,则remaining不被编码。
(步骤S172)
remaining设定部143,将从对象系数的绝对值减去3之后的数值设定为remaining(多值信号)。
(步骤S173)
remaining二值化部152,将remaining的多值信号变换成二值信号。在后面进行详细说明。
(步骤S174)
算术编码部151,进行remaining的算术编码。remaining,与 greater1_flag及greater2_flag不同,通过不利用上下文的Bypass算术编码来被编码。
(步骤S175)
二值化参数更新部144,更新二值化参数(cParam)。在后面进行详细说明。
(步骤S176)
反复进行步骤S171至步骤S175,直到系数块内的全系数的处理完成为止。
<工作(上下文集选择)>
接着,参照图10,详细说明上下文集选择处理(图6的S141)。
(步骤S181至S183)
上下文集选择部145,判定处理对象的系数块是否为在代码块内最低频的系数块,在处理对象的系数块为低频的系数块的情况下,将上下文集号码设定为0,在处理对象的系数块不是最低频的系数块的情况下,将上下文集号码设定为2。也就是说,上下文集选择部145,在处理对象的系数块为代码块内的左上的系数块的情况下,将上下文集号码设定为0,在处理对象的系数块不是代码块内的左上的系数块的情况下,将上下文集号码设定为2。
(步骤S184至S185)
上下文集选择部145,在刚刚处理后的系数块(前一个系数块)的更新后的二值化参数(cParam)比0大的情况下,将上下文集号码与1相加。据此,只要前一个系数块中cParam被更新一次,就切换上下文集。
如此,通过步骤S181至S185,上下文集号码被设定为0至3的任一个值。也就是说,上下文集有4种,上下文集选择部145,从4种中选择 1种。
<工作(greater1_flag上下文选择)>
接着,参照图11,详细说明greater1_flag上下文选择处理(图7的 S153)。
(步骤S191)
greater1_flag上下文选择部147,在处理对象的系数块内的处理完毕系数中,算出值1的greater1_flag的个数(G1NUM)。也就是说, greater1_flag上下文选择部147,算出系数的绝对值为2以上的系数的个数。而且,处理完毕系数的greater1_flag被存储在greater1_flag存储器 146中,greater1_flag上下文选择部147,从greater1_flag存储器146 获得处理完毕系数的greater1_flag。
(步骤S192至S193)
在步骤S191中算出的G1NUM为1以上的情况下,greater1_flag 上下文选择部147,将上下文偏移量设定为1,在G1NUM为0的情况下,进行到步骤S194。也就是说,只要在系数块内的处理完毕系数中绝对值为 2以上的系数存在一个,就将上下文偏移量设定为3。
(步骤S194)
greater1_flag上下文选择部147,算出处理对象的系数块内的处理完毕系数中的、具有greater1_flag的系数的个数(G1NUM2)。也就是说, greater1_flag上下文选择部147,算出系数的绝对值为1以上的系数的个数。而且,greater1_flag上下文选择部147,从greater1_flag存储器146 获得处理完毕系数的greater1_flag。
(步骤S195至S197)
greater1_flag上下文选择部147,在步骤S194中算出的G1NUM2 比2大的情况下,将上下文偏移量设定为2,在除此以外的情况下,将上下文偏移量设定为G1NUM2的值。
如此,通过步骤S191至S197,上下文偏移量被设定为0至3的任一个值。
(步骤S198)
greater1_flag上下文选择部147,将上下文号码设定为“(上下文集号码×4)+上下文偏移量”,将设定的上下文号码输出到greater1_flag上下文存储器148。如图12示出,上下文集号码为0至3,上下文偏移量为0 至3,因此,上下文号码为0至15的任一个值。也就是说,上下文集有4 种,对于greater1_flag,在上下文集内存在四个上下文。由上下文集选择部145从4种中选择1种上下文集,由greater1_flag上下文选择部147,从选择出的上下文集中的四个上下文中,选择一个上下文。
<工作(remaining二值化)>
接着,参照图13至图16,详细说明remaining二值化处理(图9的 S173)。说明概要,二值信号(bin)包含Prefix和Suffix。按照二值化参数 (cParam),切换Prefix、以及Suffix的决定方法。
(步骤S201)
PrefixSuffix决定部153,决定Prefix及Suffix。图14是详细示出该处理的流程图。
(步骤S211至S222)
PrefixSuffix决定部153,对Prefix及Suffix的决定,利用cParam。处理被划分为大致两个,在remaining小的情况下,由步骤S213至S214 决定Prefix及Suffix,在remaining大的情况下,由步骤S215至S222 决定Prefix及Suffix。对用于辨别remaining小还是大的阈值,利用 cParam,cParam越大,阈值就越大。并且,cParam也与Prefix及Suffix的bin长度有关。
图15A至图15C是示出与cParam及remaining对应的Prefix及 Suffix的bin的图。如图15A至图15C示出,在remaining小的情况下, cParam越小,bin长度就越短,在remaining大的情况下,cParam越大, bin长度就越短。也就是说,在remaining小的概率高的情况下,若将 cParam变小,则编码效率提高的可能性更高。反而,在remaining大的概率高的情况下,若将cParam变大,则编码效率提高的可能性更高。
(步骤S202)
Prefixbin输出部155,将与Prefix有关的bin输出到算术编码部151。图16是详细示出该处理的流程图。
(步骤S231至S235)
Prefixbin输出部155,首先,按照Prefix的值的数量输出“1”,最后输出“0”。
(步骤S203)
Suffixbin输出部154,将与Suffix有关的bin输出到算术编码部151。图17是详细示出该处理的流程图。
(步骤S241至S245)
Suffixbin输出部154,将Suffix的值变换成二进制数,将变换后的二进制数从高位bit依次输出。Suffixbin输出部154,按照tmpLen的数量输出bin,但是,在Suffix值的bit数比tmpLen小的情况下,将高位 bit作为0来输出。
<工作(二值化参数更新)>
接着,参照图18,详细说明二值化参数更新处理(图9的S175)。
(步骤S251)
二值化参数更新部144,在二值化参数(cParam)比4小的情况下,由步骤S252至S254进行更新处理,在4以上的情况下,不进行更新处理,而结束处理。
(步骤S252至S254)
二值化参数更新部144,在对象系数的绝对值比阈值大的情况下,将 cParam与1相加。阈值由“3×(1<<cParam)”的算式设定。并且,“<<”示出左移。cParam的值越大,阈值的值就越大。对于cParam,如上所述,在系数块的处理的开头中初始化为0,由二值化参数更新部144,每当出现超过阈值的系数时,按照1增加,直到成为最大值的4为止。
<效果>
以上,本实施例涉及的图像编码装置100,在处理完毕系数块内存在绝对值超过阈值的系数的情况下,切换greater1_flag、以及greater2_flag 的上下文,从而能够以少的处理量提高编码效率。
更具体而言,每当系数的绝对值超过阈值时,二值化参数(cParam)增加1。在系数块处理的开头中由前一个系数块处理更新后的cParam的值比0大的情况下,即,只要在前一个系数块中超过阈值的系数存在一个的情况下,就切换上下文集号码。也就是说,图像编码装置100,在前一个系数块(比处理对象的系数块高频的系数块)中存在值大的系数的情况下,判断为处理对象的系数块中也存在大的值的系数的可能性高,选择适于大的值的系数的上下文。
在此,在现在的HEVC标准(参照非专利文献1)中,对处理完毕的系数中的绝对值为2以上的系数的个数进行计数,按照该个数决定了编码对象系数的上下文。并且,在此,对于处理完毕系数,不仅限于前一个系数块包含的系数,也包含位于比处理对象的系数块高频侧的多个系数块中包含的多个系数。
另一方面,在本实施例的方法中,仅判定前一个系数块中是否存在超过阈值的系数。因此,根据本实施例涉及的图像编码装置100,不需要对超过阈值的系数的个数进行计数,也不需要用于存储计数值的寄存器。
并且,对现在的HEVC标准的试验用软件,安装本实施例涉及的图像编码方法,来进行了实验。图19是示出与安装之前比较的实验结果的图。实验条件是,根据HEVC标准化团体的共同实验条件的。数值越大就越示出编码效率降低,若是负的值则示出编码效率提高。如图19示出得知,所有的值为-0.01至0.03%,即使删除对系数的个数进行计数的处理,编码效率也几乎不变。
并且,将用于上下文的切换的信息、和用于remaining的编码的信息统一起来,从而能够削减电路规模。具体而言,将每当系数的绝对值超过阈值时变大的cParam,使用于remaining的二值化参数、和greater1_flag 及greater2_flag的上下文切换,从而由一个机构实现多个功能。如此,本实施例涉及的图像编码方法,与现在的HEVC标准相比,不增加新的机构,而一边抑制编码效率的降低,一边实现系数的个数的计数处理的删除。
而且,在所述说明中,图像编码装置100,利用前一个系数块中更新的二值化参数(cParam)切换上下文集,但是,也可以利用前一个以外的系数块中更新的二值化参数。例如,图像编码装置100,在处理完毕的系数块的某一个中cParam比0大的情况下,也可以切换上下文集。系数块从高频的块处理。因此,在某一个系数块中cParam比0大的情况下,即,在绝对值为阈值以上的系数出现的情况下,以后所有的系数块系数中值大的可能性高。因此,在这样的情况下,选择系数值大的可能性高时使用的上下文集,从而能够提高编码效率。
并且,图像编码装置100,将二值化参数(cParam)在系数块的处理的开头中初始化为0,但是,也可以不初始化为0,而继续使用前一个系数块中更新的cParam。据此,更能够继续使用高频的系数块的状态,根据输入图像,会有编码效率提高的情况。
并且,在所述说明中,图像编码装置100,在cParam比0大的情况下切换上下文集,但是,不仅限于此,例如,在cParam比1大的情况下,或者,在比2大的情况下,也可以切换上下文集。根据输入图像,会有 cParam比1大时切换上下文集就编码效率更提高的情况。
并且,在所述说明中,说明了使用4种上下文集的例子,但是,不仅限于此,上下文集,可以比4种多,也可以比4种少。例如,在所述说明中,图像编码装置100,在上下文集号码为0的情况下,也在上下文集号码为2的情况下,都在cParam比0大的情况下,使上下文集号码增加1,但是,也可以仅在上下文集号码为2的情况下增加1。
并且,在所述说明中,图像编码装置100,在最低频的系数块的情况下,使用其他的上下文集,但是,也可以不进行其切换。并且,图像编码装置100也可以,在cParam比0大的情况下,使上下文集号码增加1,在cParam比1大的情况下,还增加1。根据输入图像,会有上下文集的种类多就编码效率更提高的情况,在上下文集少的情况下,上下文的种类更减少,能够削减选择处理的电路规模、或能够削减上下文存储用的存储器。
并且,在所述说明中,图像编码装置100,如图11示出,利用G1NUM 及G1NUM2设定greater1_flag的上下文,但是,不仅限于此。例如,图像编码装置100,可以按照对象系数的系数块内的位置设定上下文,也可以仅利用G1NUM及G1NUM2的一方设定上下文。
并且,在所述说明中,图像编码装置100,在greater2_flag的上下文选择中,将上下文集号码本身设定为上下文号码,但是,不仅限于此。图像编码装置100也可以,以与greater1_flag同样的方法选择greater2_flag 的上下文。
并且,在所述说明中,greater1_flag及greater2_flag是在对象系数的绝对值为1以上、或2以上的情况下存在的,但是,与现在的HEVC标准(非专利文献1)同样,可以在系数块内限制最大数,也可以将 greater1_flag设为最大8个为止、将greater2_flag设为最大1个为止。
并且,在所述说明中,图像编码装置100,在remaining的二值化中,由Prefix及Suffix构成bin,但是,对于remaining的二值化信号,能够由cParam变更bin长度的结构即可。例如,对于remaining的二值化信号,可以仅由Prefix构成,也可以以H.264运动图像编码标准的指数哥伦布码方法表现。
并且,在所述说明中,Prefix的bin的最后被设定为0,但是,在Prefix 为最大的情况下,也可以删除最后的0。在不是最大Prefix的情况下,需要插入“0”来明确示出Prefix和Suffix的边界的bin,但是,在图像解码装置把握系数的最大值的情况下,也能够把握Prefix的最大。因此,图像解码装置,在最大Prefix的情况下,即使没有“0”,也能够判断Prefix 和Suffix的边界。在最大Prefix的情况下,不插入“0”,从而在多数发生最大Prefix的系数的场合(代码比特率高的场合),能够削减多数bin长度。据此,能够提高编码效率。
并且,在所述说明中,二值化参数(cParam)的更新用的阈值由“3*(1 <<cParam)”的算式设定,但是,不仅限于此。例如,图像编码装置,可以代替系数“3”而利用“4”等的其他的数值,也可以利用其他的算式。
并且,在所述说明中,图像编码装置,针对所有的系数的 greater1_flag、以及greater2_flag,使用上下文进行算术编码,但是,也可以针对一部分的系数的greater1_flag、或greater2_flag,利用与 remaining同样不使用上下文的Bypass算术编码。例如,图像编码装置,在紧前处理的系数的greater1_flag为1的情况下,也可以将对象系数的greater1_flagBypass算术编码。并且,图像编码装置,也可以对系数块的开头的greater1_flag进行Bypass算术编码。利用Bypass算术编码,因此,不需要上下文的加载及更新。并且,也能够删除与利用相同的上下文的其他的syntax的依赖关系。据此,能够实现处理的高速化。
并且,在所述说明中,代码块为最大32×32、且最小为4×4,但是,编码块的尺寸不仅限于此。并且,代码块也可以是固定尺寸。
并且,在所述说明中,将代码块分割为4×4的系数块,但是,系数块也可以不是4×4。例如,系数块也可以是8×8。并且,系数块也可以是8 ×4等的长方形。
并且,本实施例的处理,也可以由软件实现。而且,也可以将该个软件通过下载等来传播。并且,也可以将该个软件记录在CD-ROM等的记录介质中来传播。而且,该内容,也符合本说明书中的其他的实施例中。
(实施例2)
在本实施例中,说明对由实施例1涉及的图像编码装置所生成的编码比特流进行解码的图像解码装置。
<整体结构>
图20是示出本实施例涉及的图像解码装置200的结构的方框图。
图20示出的图像解码装置200,对代码串221进行解码,从而生成解码图像225。在此,代码串221,例如,与所述的的图像编码装置100所生成的代码串125对应。该图像解码装置200具备,可变长解码部201、逆变换部202、加法部203、解码块结合部204、以及帧存储器205。
<工作(整体)>
接着,参照图21,说明解码处理的整体的流程。
(步骤S301)
可变长解码部201,对代码串221进行可变长解码,从而生成频率系数222,将频率系数222输出到逆变换部202。
(步骤S302)
逆变换部202,将频率系数222变换成像素数据,从而生成差分块223。
(步骤S303)
加法部203,将帧存储器205中存储的解码图像226和差分块223相加,从而生成解码块224。
(步骤S304)
反复进行步骤S301至步骤S303,直到解码对象图像内的全解码块的解码完成为止。
(步骤S305)
解码块结合部204,结合多个解码块224,从而生成解码图像225,并且,将解码图像225作为解码图像226存储到帧存储器205。
以后,详细说明可变长解码部201。
<可变长解码部201的结构>
图22是示出可变长解码部201的结构的方框图。在本实施例中,与实施例1同样,利用significant_flag、greater1_flag、greater2_flag、 remaining、以及sign_flag的五个参数来表现频率系数222(以下,也简称为“系数”)。对于各个参数的意义,由于与实施例1同样,因此省略说明。
如图22示出,可变长解码部201具备,significant_flag解码部231、 level解码部232、sign_flag解码部233、以及系数解码部234。
<工作(可变长解码)>
接着,参照图23,说明可变长解码处理的流程。
(步骤S321)
significant_flag解码部231,对系数块内的各个系数的 significant_flag进行解码,将通过解码而得到的significant_flag输出到 level解码部232、sign_flag解码部233以及系数解码部234。
(步骤S322)
level解码部232,对系数块内的各个系数的greater1_flag、 greater2_flag、以及remaining进行解码,将通过解码而得到的 greater1_flag、greater2_flag、以及remaining输出到系数解码部234。而且,level解码部232,仅在significant_flag为1时,对greater1_flag、 greater2_flag、以及remaining进行解码。
(步骤S323)
sign_flag解码部233,对系数块内的各个系数的sign_flag进行解码,将通过解码而得到的sign_flag输出到系数解码部234。而且,sign_flag 解码部233,仅在significant_flag为1时,对sign_flag进行解码。
(步骤S324)
系数解码部234,利用significant_flag、greater1_flag、 greater2_flag、remaining、以及sign_flag对系数进行解码。各个参数的意义,与实施例1同样,系数解码部234,根据该意义对系数进行解码。
以后,详细说明level解码部232。
<level解码部232的结构>
图24是示出level解码部232的结构的方框图。如图24示出,level 解码部232具备,上下文集选择部241、greater1_flag上下文选择部242、 greater1_flag存储器243、greater1_flag上下文存储器244、 greater2_flag上下文选择部245、greater2_flag上下文存储器246、算术解码部247、二值化参数更新部248、以及remaining多值化部249。remaining多值化部249具备,Prefix解码部250、Suffix解码部251、以及PrefixSuffix结合部252。
<工作(level解码)>
接着,参照图25至图28,详细说明level解码处理。图25是示出由 level解码部232的解码处理的流程的图。
(步骤S341)
上下文集选择部241,设定greater1_flag、以及greater2_flag的算术解码所使用的上下文集号码。该设定方法与实施例1的上下文集选择处理(图10)同样。
(步骤S342)
二值化参数更新部248,将二值化参数(cParam)初始化为0。通过本处理,在系数块的开头中cParam被设定为0。而且,步骤S341和步骤 S342,对系数块被进行1次,但是,按每个系数进行步骤S343以后的处理。
(步骤S343)
level解码部232,对系数块中包含的各个系数的greater1_flag进行解码。图26是详细示出该处理的流程图。
(步骤S351)
level解码部232,判定对象系数的significant_flag是否为1,若 significant_flag为1,则在步骤S352至S353中对greater1_flag进行解码,若significant_flag为0,则不对greater1_flag进行解码。
(步骤S352)
greater1_flag上下文选择部242,利用步骤S341中选择的上下文集号码,设定上下文号码。该设定方法,与实施例1的greater1_flag上下文选择处理(图11)同样。
(步骤S353)
算术解码部247,根据步骤S352中选择的上下文号码,从 greater1_flag上下文存储器244加载所使用的上下文,利用该上下文进行 greater1_flag的算术解码。并且,算术解码部247,将通过该算术解码而更新后的上下文,存放到greater1_flag上下文存储器244的与原来的上下文相同的位置。
(步骤S354)
反复进行步骤S351至步骤S353,直到系数块内的全系数的处理完成为止。
如上,系数块中包含的各个系数的greater1_flag被解码。
(步骤S344)
level解码部232,对系数块中包含的各个系数的greater2_flag进行解码。图27是详细示出该处理的流程图。
(步骤S361)
level解码部232,判定对象系数的greater1_flag是否为1,若 greater1_flag为1,则在步骤S362至S363对greater2_flag进行解码,若greater1_flag为0,则不对greater2_flag进行解码。而且,level解码部232,在对象系数的significant_flag为0的情况下,不对greater1_flag 进行解码,在此情况下,也不对greater2_flag进行解码。
(步骤S362)
greater2_flag上下文选择部245,将步骤S341中选择的上下文集号码设定为上下文号码。greater2_flag的上下文,与greater1_flag不同,上下文集号码本身被设定为上下文号码。也就是说,greater2_flag的一个上下文集仅包含一个上下文。
(步骤S363)
算术解码部247,根据步骤S362中选择的上下文号码,从 greater2_flag上下文存储器246加载所使用的上下文,利用该上下文进行 greater2_flag的算术解码。并且,算术解码部247,将通过该算术解码而更新后的上下文,存放到greater2_flag上下文存储器246的与原来的上下文相同的位置。
(步骤S364)
反复进行步骤S361至S363,直到系数块内的全系数的处理完成为止。
如上,系数块中包含的各个系数的greater2_flag被解码。
(步骤S345)
level解码部232,对系数块中包含的各个系数的remaining进行解码。图28是详细示出该处理的流程图。
(步骤S371)
level解码部232,判定对象系数的greater2_flag是否为1,若 greater2_flag为1,则在步骤S372至S373中对remaining进行解码,若greater2_flag为0,则不对remaining进行解码。而且,level解码部232,在对象系数的significant_flag为0或greater1_flag为0的情况下,不对greater2_flag进行解码,在此情况下,也不对remaining进行解码。
(步骤S372)
算术解码部247,进行remaining的算术解码。remaining与greater1_flag及greater2_flag不同,通过不利用上下文的Bypass算术解码而被解码。
(步骤S373)
remaining多值化部249,将remaining的二值信号变换成多值信号。在后面进行详细说明。
(步骤S374)
二值化参数更新部248,更新二值化(cParam)。该更新方法,与实施例1的二值化参数更新处理(图18)同样。
(步骤S375)
反复进行步骤S371至S374,直到系数块内的全系数的处理完成为止。
<工作(remaining多值化)>
接着,参照图29至图31,详细说明remaining多值化处理(图28的 S373)。
(步骤S401)
Prefix解码部250,对Prefix进行解码。图30是详细示出该处理的流程图。
(步骤S411至S415)
Prefix解码部250,决定Prefix。若说明概要,Prefix解码部250,从算术解码部247按每个1bin获得代码,直到“0”出现为止,将“1”连续的个数设定为Prefix的值。
(步骤S402)
Suffix解码部251,对Suffix进行解码。
(步骤S403)
PrefixSuffix结合部252,结合Prefix和Suffix,来生成remaining 的多值信号。
图31是详细示出步骤S402及S403的流程图。
(步骤S421至S433)
Suffix解码部251,决定Suffix。若说明概要,Suffix解码部251,在Prefix小于8的情况下,将cParam的值设定为bin长度,按照从高位到低位的顺序排列该bin长度的算术解码结果,从而生成Suffix。另一方面,在Prefix为8以上的情况下,Suffix解码部251,从Prefix及cParam 求出bin长度,按照从高位到低位的顺序排列该bin长度的算术解码结果,从而生成Suffix。
(步骤S441至S442)
PrefixSuffix结合部252,利用Prefix、Suffix、以及cParam,计算 remaining。
<效果>
据此,本实施例涉及的图像解码装置,能够实现与所述实施例1同样的效果。
图32A是由所述的图像编码装置100的图像编码处理的流程图。
如上所说,图像编码装置100,对示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大的第一标志(greater1_flag)进行算术编码(S701)。接着,图像编码装置100,对示出处理对象的系数的绝对值是否比2大的第二标志(greater2_flag)进行算术编码(S702)。
图32B是这样的步骤S701及S702的流程图。
图像编码装置100,在步骤S701及S702中,判定前一个系数块中是否存在绝对值超过阈值的系数(S711),按照判定结果,切换第一标志及第二标志的算术编码所使用的上下文(S712)。换而言之,图像编码装置100,对该判断,仅参考前一个系数块中包含的系数,而不参考前一个以外的处理完毕系数块中包含的系数。也就是说,图像编码装置100,利用多个上下文中的与判定结果对应的上下文,对第一标志及第二标志进行算术编码。
并且,前一个系数块是,按照处理顺序在处理对象的系数块的前一个系数块。
具体而言,图像编码装置100,在系数的绝对值比阈值大的情况下使二值化参数(cParam)增加(图18的S253至S254)。而且,图像编码装置 100,在前一个系数块的cParam比0大的情况下切换上下文(使上下文集号码增加)(图10的S184至S185)。
也就是说,图像编码装置100,利用前一个系数块的算术编码时生成的变量,判定前一个系数块中是否存在绝对值超过阈值的系数。
具体而言,图像编码装置100,进一步,在处理对象的系数的绝对值比2大的情况下,将作为从处理对象的系数的绝对值减去3之后的值的剩余值(remaining),根据多个变换表中的由二值化参数(cParam)指定的变换表来二值化。该二值化参数是,按照前一个系数块中是否存在绝对值超过阈值的系数来决定的。所述变量是,该二值化参数。
而且,在所述说明中,作为上下文的切换的基准的、系数的绝对值的阈值是,按照二值化参数来决定的(图18的S252),但是,如以往技术中说明,该阈值也可以是预先决定的值(“1”)。也就是说,图像编码装置100 也可以,判定前一个系数块中是否存在绝对值超过1的(2以上的)系数,按照判定结果,切换所使用的上下文。而且,如上所述,在以往技术中,对绝对值超过阈值的系数的数量进行计数,与本实施例那样的判定是否存在绝对值超过阈值的系数的处理不同。
进而,在此情况下,也与所述同样,图像编码装置100也可以,利用前一个系数块的算术编码时生成的变量,判定前一个系数块中是否存在绝对值超过1的系数。例如,该变量是greater1_flag。也就是说,图像编码装置100也可以,按照前一个系数块中是否存在具有值为1的 greater1_flag的系数,切换上下文。
图33A是由所述的图像解码装置200的图像解码处理的流程图。
如图33A示出,图像解码装置200,对示出处理对象的系数块中包含的处理对象的系数的绝对值是否比1大的第一标志(greater1_flag)进行算术解码(S751)。图像解码装置200,对示出处理对象的系数的绝对值是否比2大的第二标志(greater2_flag)进行算术解码(S752)。
图33B是这样的步骤S751及S752的流程图。
图像解码装置200,在这样的步骤S751及S752中,判定前一个系数块中是否存在绝对值超过阈值的系数(S761),按照判定结果,切换第一标志及第二标志的算术解码所使用的上下文(S762)。也就是说,图像解码装置200,利用多个上下文中的、与判定结果对应的上下文对第一标志及第二标志进行算术解码。
具体而言,图像解码装置200,在系数的绝对值比阈值大的情况下使二值化参数(cParam)增加(图18的S253至S254)。而且,图像解码装置 200,在前一个系数块的cParam比0大的情况下切换上下文(使上下文集号码增加)(图10的S184至S185)。
也就是说,图像解码装置200,利用前一个系数块的算术解码时生成的变量,判定前一个系数块中是否存在绝对值超过阈值的系数。
具体而言,图像解码装置200,进一步,在处理对象的系数的绝对值比2大的情况下,将作为从处理对象的系数的绝对值减去3之后的值的剩余值,根据多个变换表中的由二值化参数指定的变换表来二值化。该二值化参数是,按照前一个系数块中是否存在绝对值超过阈值的系数来决定的。所述变量是二值化参数。
并且,与所述同样,所述阈值也可以是预先决定的值(“1”)进而,在此情况下,也与所述同样,图像解码装置200也可以,利用前一个系数块的算术编码时生成的变量,判定前一个系数块中是否存在绝对值超过1的系数。例如,该变量是greater1_flag。也就是说,图像解码装置200也可以,按照前一个系数块中是否存在具有值为1的greater1_flag的系数,切换上下文。
(实施例3)
在本实施例中,说明所述实施例1的变形例。本实施例涉及的图像编码装置,与实施例1涉及的图像编码装置相比,level编码部133A的功能与level编码部133不同。以后,说明level编码部133A。
<level编码部133A的结构>
图34是示出level编码部133A的结构的方框图。该level编码部 133A,具备实施例1涉及的level编码部133的结构,还具备greater_flag 切换部160。并且,remaining设定部143A、以及上下文集选择部145A 的功能,与remaining设定部143、以及上下文集选择部145不同。
<工作(level编码)>
接着,参照图35,详细说明level编码处理。针对实施例1的level 编码处理,追加了步骤S501至S503。并且,步骤S141A及S171A与步骤S141及S171不同。而且,省略与实施例1同样的处理的说明。
(步骤S141A)
上下文集选择部145A,设定greater1_flag、以及greater2_flag的算术编码所使用的上下文集号码。在后面进行详细说明。
(步骤S501)
greater_flag切换部160,判定前一个系数块的更新后的二值化参数 (cParam)是否比0大。在二值化参数是0的情况下,与实施例1同样, greater1_flag、以及greater2_flag被编码,但是,在二值化参数比0大的情况下,greater1_flag、以及greater2_flag不被编码。
(步骤S502,S503,S171A)
remaining设定部143A,在前一个系数块的更新后的二值化参数 (cParam)比0大的情况下,将remaining基值设定为1,在该二值化参数为0的情况下,将remaining基值设定为3。而且,level编码部133A,在系数的绝对值是remaining基值以上的情况下,由步骤S172至S175 对remaining进行编码,在小于remaining基值的情况下,不对remaining 进行编码。level编码部133A,在对remaining进行编码的情况下,将从系数的绝对值减去remaining基值之后的值设定为remaining来编码。这是因为,由于会有不会按照cParam而greater1_flag、以及greater2_flag 而被编码的情况,因此应该设定为remaining的值发生变化的缘故。在实施例1中,与cParam无关而存在greater1_flag及greater2_flag,因此,remaining基值被固定为“3”。
<工作(上下文集选择)>
接着,参照图35,详细说明上下文集选择处理(图34的S141A)。
(步骤S511至S513)
上下文集选择部145A,判定处理对象的系数块是否为在代码块内最低频的系数块,在最低频的系数块的情况下,将上下文集号码设定为0,在不是最低频的系数块的情况下,将上下文集号码设定为1。也就是说,上下文集选择部145A,将代码块内的左上的系数块的上下文集号码设定为0,在不是最低频的系数块的情况下,将上下文集号码设定为1。
并且,上下文集选择部145A,与实施例1不同,在cParam比0大的情况下,不进行上下文集的切换。这是因为,如所述的level编码处理那样,在cParam比0大的情况下,不进行greater1_flag及greater2_flag 的编码,也不进行上下文的选择的缘故。
<效果>
以上,本实施例涉及的图像编码装置,不按照前一个系数块的更新后的二值化参数,对greater1_flag、以及greater2_flag进行编码,替代 greater1_flag、以及greater2_flag,而由remaining对系数进行编码。因此,图像编码装置,只要前一个系数块的处理中超过阈值的系数存在一个的情况下,就替代利用了上下文的算术编码,而使用不利用上下文的Bypass算术编码。对于Bypass算术编码,不需要上下文的加载及更新,而且不等待前级的处理的上下文更新完成也能够开始处理。因此,Bypass 算术编码,与利用了上下文的算术编码相比,更能够实现处理的高速化。
并且,在系数的绝对值小的可能性高的情况下,也会有greater1_flag 及greater2_flag成为0的情况,也会有不需要对remaining进行编码的场合。另一方面,在系数的绝对值大的可能性高的情况下,几乎没有这样的场合,因此,在不对greater1_flag及greater2_flag进行编码的情况下,总bin量减少的情况也更多。
本实施例涉及的图像编码装置,在前一个系数块处理后的cParam比 0大的情况下(只要在超过阈值的系数存在一个的情况下),估计本系数块内的绝对值大的系数的发生概率高,不对greater1_flag、以及greater2_flag 进行编码。据此,能够抑制编码效率的降低,并且,减少利用了上下文的算术编码的数量,因此,能够实现处理高速化。
并且,在cParam比0大时不对greater1_flag、以及greater2_flag 进行编码,因此,不需要在cParam比0大时使用的上下文集、即在值大的系数的发生概率高时使用的上下文集。也就是说,图像编码装置,在代码块内的左上的系数块时使用一个上下文集,在其他的系数块时使用共同的一个上下文集。据此,能够减少所使用的上下文的数量,因此,能够削减用于存储上下文的存储器尺寸以及用于上下文选择处理的电路的规模。
并且,将用于greater1_flag、以及greater2_flag的编码处理的有无的切换的信息、和用于remaining的编码的信息统一起来,从而能够削减电路规模。具体而言,将每当系数的绝对值超过阈值时变大的cParam,使用于remaining的二值化参数、和greater1_flag及greater2_flag的编码处理的有无的切换,从而能够由一个机构实现多个功能。如此,本实施例涉及的图像编码装置,与现在的HEVC标准(非专利文献1)相比,不追加新的机构,而能够实现greater1_flag及greater2_flag的编码处理的有无的切换。
并且,对现在的HEVC标准(非专利文献1)的试验用软件,安装本实施例涉及的图像编码方法,来进行了实验。图37是示出与安装之前比较的实验结果的图。实验条件是根据HEVC标准化团体的共同实验条件的,图 37的数值是对试验用图像的开头49帧的结果。数值越大就越示出编码效率降低,若是负的值则示出编码效率提高。如图37示出得知,所有的值为 0.00至0.06%,即使削减利用了上下文的算术编码来使处理高速化,并且减少上下文的总数,编码效率也几乎不变。
而且,在所述说明中,图像编码装置,利用前一个系数块中更新后的二值化参数(cParam),切换greater1_flag、以及greater2_flag的编码处理的有无,但是,也可以利用前一个以外的系数块中更新后的二值化参数。例如,图像编码装置也可以,在处理完毕的系数块的某个中cParam比0 大的情况下,在以后的系数块中不对greater1_flag及greater2_flag进行编码。系数块从高频的块处理。因此,在某个系数块中cParam比0大的情况下,即,在绝对值为阈值以上的系数出现的情况下,以后所有的系数块中系数值大的可能性高。因此,在这样的情况下,也会有即使不对 greater1_flag、以及greater2_flag进行编码,编码效率也不降低的情况。
并且,在所述说明中,图像编码装置,在cParam比0大的情况下,不对greater1_flag、以及greater2_flag进行编码,但是,不仅限于此,例如,在cParam比1大的情况下,或者,在比2大的情况下,也可以不对greater1_flag、以及greater2_flag进行编码。根据输入图像,也会有若在cParam比1大时切换greater1_flag、以及greater2_flag的编码处理的有无,则编码效率提高的情况。
而且,对于其他内容,与实施例1同样,因此,省略说明。
(实施例4)
在本实施例中,说明对由实施例3涉及的图像编码装置生成的编码比特流进行解码的图像解码装置。本实施例涉及的图像解码装置,与实施例2 涉及的图像解码装置相比,level解码部232A与level解码部232不同。以后,说明level解码部232A。
<level解码部232A的结构>
图38是示出level解码部232A的结构的方框图。该level解码部 232A,具备实施例2涉及的level解码部232的结构,还具备greater_flag 切换部260。并且,上下文集选择部241A及算术解码部247A的功能,与上下文集选择部241及算术解码部247不同。
<工作(level解码)>
接着,参照图39,详细说明level解码处理。对实施例2的level解码处理,追加了步骤S601至S603。并且,步骤S341A及S371A,与步骤 S341及S371不同。而且,省略与实施例2同样的处理的说明。
(步骤S341A)
上下文集选择部241A,设定greater1_flag、以及greater2_flag的算术解码所使用的上下文集号码。选择方法,与实施例3的上下文集选择处理(图36)同样。也就是说,上下文集选择部241A,不进行与cParam对应的上下文集的切换。
(步骤S601)
greater_flag切换部260,判定前一个系数块的更新后的二值化参数 (cParam)是否比0大。greater_flag切换部260,在二值化参数为0的情况下,与实施例2同样,对greater1_flag、以及greater2_flag进行解码,但是,在二值化参数比0大的情况下,不对greater1_flag、以及 greater2_flag进行解码。
(步骤S602,S603,S371A)
算术解码部247A,在前一个系数块的更新后的二值化参数(cParam) 比0大的情况下,将remaining基值设定为1,设定为二值化参数为0的情况下,将remaining基值设定为3。而且,level解码部232A,在 remaining基值为3、且对象系数的greater2_flag为1的情况下,或者,在remaining基值为1、且对象系数的significant_flag为1的情况下,由步骤S372至S373对remaining进行解码,在除此以外的情况下,不对remaining进行解码。在remaining被解码的情况下,将解码后的 remaining和remaining基值相加后的数值是系数的绝对值。
<效果>
如上,本实施例涉及的图像解码装置,能够实现与所述实施例3同样的效果。
在以上的各个实施例中,功能框的每一个,通常,能够由MPU(微处理器)以及存储器等实现。并且,由功能框的每一个的处理,通常,能够由软件(程序)实现,该软件记录在ROM等的记录介质中。而且,将这样的软件,可以通过下载等来分发,也可以记录在CD-ROM等的记录介质中来分发。而且,当然也能够由硬件(专用电路)实现各个功能框。
并且,在各个实施例中说明的处理,可以由利用单一的装置(系统)的集中处理实现,或者,也可以由利用多个装置的分散处理实现。并且,执行所述程序的计算机,可以是一个,也可以是多个。也就是说,该计算机,可以进行集中处理,或者,也可以进行分散处理。
以上,说明了实施例涉及的图像编码装置以及图像解码装置,不过本发明不仅限于该实施例。
此外,所述实施例涉及的图像编码装置以及图像解码装置包含的各个处理部典型地可以作为集成电路的LSI来实现。这些可以将每一个制成一个芯片,也可以将一部分或者全部制成一个芯片。
还有,集成电路化的方法不局限于LSI,也可以用专用电路或者通用处理器来实现。也可以利用在LSI制造之后可编程的现场可编程门阵列 (FPGA∶FieldProgrammableGate Array)或可动态地重构LSI内部的电路单元的连接和设定的可重构处理器。
在所述各个实施例,各个构成要素可以用专用的硬件来构成,或者通过执行适合各个构成要素的软件程序来实现。各个构成要素,通过CPU或处理器等的程序执行部读出并执行硬盘或半导体存储器等记录介质上记录的软件程序来实现。
换而言之,图像编码装置及图像解码装置具备,控制电路(control circuitry)、以及与该控制电路电连接的(从该控制电路能够访问的)存储装置(storage)。控制电路,至少包含专用的硬件及程序执行部的一方。并且,存储装置,在控制电路包含程序执行部的情况下,存储由该程序执行部执行的软件程序。
加之,本发明可以是所述软件程序,也可以是所述程序被记录的非一时的计算机可读取的记录介质。此外,所述程序能够经由互联网等的传输介质来流通。
此外,所述使用的数字都是为了具体地说明本发明的示例,本发明不被例示的数字所限制。
此外,在方框图中的功能块的分割只是一例,可以将多个功能块作为一个功能块来实现,或者将一个功能块分割为多个,或者将一部分功能转移到其他的功能块。此外,将具有类似的功能的多个功能块的功能,用单一的硬件或者软件并行或者分时地处理。
此外,所述的图像编码方法或者图像解码方法中包含的步骤执行的顺序,是为了具体地说明本发明示出的例子的顺序,也可以是所述以外的顺序。此外,所述步骤的一部分可以与其他的步骤同时(并行)执行。
以上,针对本发明的一个或多个方案涉及的图像编码装置以及图像解码装置,根据实施例来进行了说明,不过,本发明不是被这些实施例所限制的。只要不超出本发明的宗旨,则技术者想出的各种变形例实施在各个实施例的例子,对不同实施例中的构成要素进行组合而构筑的例子也都包括在本发明的一个或者多个方案的范围中。
(实施例5)
将用于实现所述各个实施例示出的运动图像编码方法(图像编码方法) 或运动图像解码方法(图像解码方法)的构成的程序记录到存储媒体,从而所述各个实施例示出的处理,能够在独立的计算机系统简单地实施。记录介质可以是磁盘、光盘、磁光盘、IC卡、半导体存储器等,只要能够记录程序就可以。
加之在这里说明,所述各个实施例示出的运动图像编码方法(图像编码方法)和运动图像解码方法(图像解码方法)的应用例以及使用那些的系统。该系统的特征是具有图像编解码装置,该图像编解码装置由利用图像编码方法的图像编码装置以及利用图像解码方法的图像解码装置组成。关于系统中的其外构成,按照情况能够恰当地变更。
图40是示出实现内容分发服务的内容提供系统ex100的全体构成图。将通信服务的提供区域划分为所希望的大小,在各个单元内分别设置有作为固定无线局的基站ex106、ex107、ex108、ex109、ex110。
在该内容提供系统ex100中,计算机ex111、PDA(个人数字助理: personaldigital assistant)ex112、摄像机ex113、便携式电话ex114、游戏机ex115等各种设备通过互联网服务提供商ex102和电话网ex104、以及基站ex106至ex110,与互联网ex101相连接。
然而,内容提供系统ex100并非局限于图40所示的构成,也可以对任意的要素进行组合后连接。并且,可以不通过作为固定无线局的基站 ex106至ex110,而是各个设备直接与电话网ex104相连接。并且,也可以是各个设备通过近场无线等而彼此直接连接。
摄像机ex113是数字摄像机等能够拍摄运动图像的设备,摄像机ex116 是数字照相机等能够拍摄静止图像以及运动图像的设备。并且便携式电话ex114是GSM(注册商标)(Global System for Mobile Communications:全球移动通讯系统)方式、CDMA(CodeDivision Multiple Access:码分多址)方式、W-CDMA(Wideband-Code DivisionMultiple Access:宽带码分多址)方式、LTE(Long Term Evolution:长期演进)方式、HSPA(High -Speed Packet Access:高速分组接入)的便携式电话,或PHS(Personal Handy-phone System:个人手持式电话系统)等,可以是其中任一个。
在内容提供系统ex100中,摄像机ex113等通过基站ex109、电话网 ex104与流播放服务器ex103连接,从而进行实况分发等。在实况分发中,针对用户利用摄像机ex113拍摄的内容(例如音乐实况的影像等)进行在上述的各个实施例所说明的编码处理(即作为本发明的图像编码装置来发挥作用),并发送到流播放服务器ex103。另外,流播放服务器ex103针对提出请求的客户端,对被发送的内容数据进行流的分发。作为客户端,包括可以解码上述的被编码处理的数据的计算机ex111、PDAex112、摄像机 ex113、便携式电话ex114、以及游戏机ex115等。在接收了被分发的数据的各个设备,对接收的数据进行解码处理并再生(即作为本发明的图像解码装置来发挥作用)。
并且,拍摄的数据的编码处理可以在摄像机ex113进行,也可以在进行数据的发送处理的流播放服务器ex103进行,也可以相互分担进行。同样,被分发的数据的解码处理可以由客户端进行,也可以在流播放服务器 ex103进行,也可以相互分担进行。并且,不仅限于摄像机ex113,由摄像机ex116拍摄的静止图像数据以及/或者运动图像数据,也可以通过计算机ex111而发送到流播放服务器ex103。此时的编码处理可以在摄像机 ex116、计算机ex111、流播放服务器ex103的任一个中进行,也可以相互分担进行。
并且,这些编码处理以及解码处理通常在计算机ex111以及各个设备所具有的LSI(Large Scale Integration:大规模集成电路)ex500中处理。 LSIex500可以由一个芯片构成,也可以由多个芯片构成。另外,也可以将运动图像编码用以及运动图像解码用的软件安装到能够由计算机ex111等读取的某种记录介质(CD-ROM、软盘、硬盘等)中,并利用该软件来进行编码处理以及解码处理。而且,在便携式电话ex114是附带有相机的情况下,也可以发送由该相机获得的运动图像数据。在这种情况下的运动图像数据是由便携式电话ex114所具有的LSIex500进行编码处理后的数据。
并且,流播放服务器ex103是多个服务器或多个计算机,也可以是对数据进行分散地处理、记录、分发的装置。
如以上所述,在内容提供系统ex100中,客户端能够接收并再生被编码的数据。在这样的内容提供系统ex100中,在客户端能够实时地接收并解码由用户发送的信息并且能够再生,这样,即使是没有特殊权利或设备的用户也能够实现个人播放。
并且,不仅限于内容供给系统ex100的例子,如图41所示,在数字广播用系统ex200上也能够组装上述各个实施例所示的运动图像编码装置 (图像编码装置)以及运动图像解码装置(图像解码装置)中的任一个。具体而言,在广播电台ex201,影像数据上多路复用了音乐数据的多路复用数据通过电波来通信或被传输到卫星ex202。这个影像数据是根据所述各个实施例说明的运动图像编码方法被编码的数据(即根据本发明的图像编码装置被编码的数据)。接收了这些的广播卫星ex202发送用于广播的电波,这些电波由能够进行卫星广播接收的家庭的天线ex204来接收。接收的多路复用数据由电视机(接收机)ex300或机顶盒(STB)ex217等装置进行解码并再生(即作为本发明的一个方案涉及的图像解码装置发挥作用)。
并且,在用于读取并解码DVD、BD等记录介质ex215中所记录的多路复用数据、或者将影像信号编码、进而有时与音乐信号多路复用后进行写入的阅读器/记录器ex218上,也能够安装上述各个实施例所示的运动图像解码装置或运动图像编码装置。在这种情况下,被再生的影像信号能够被显示在监视器ex219,并且能够由记录了多路复用数据的记录介质 ex215在其他的装置或系统中再生影像信号。并且,也可以将运动图像解码装置安装到与有线电视用的电缆ex203或卫星/地波广播的天线ex204 连接的机顶盒ex217内,并在电视机的监视器ex219上显示。此时,可以不组装到机顶盒,而将运动图像解码装置组装到电视机内。
图42示出了利用了在上述的各个实施例中说明的运动图像解码方法以及运动图像编码方法的电视机(接收机)ex300。电视机ex300包括:调谐器ex301,通过接收上述广播的天线ex204或电缆ex203等获得或者输出影像数据上多路复用了声音数据的多路复用数据;调制/解调部ex302,解调接收的多路复用数据,或者为了将多路复用数据发送到外部而进行调制;以及多路复用/分离部ex303,对解调的多路复用数据分为影像数据和声音数据,或者在信号处理部ex306进行了编码的影像数据和声音数据进行多路复用。
并且,电视机ex300具有信号处理部ex306和输出部ex309,所述信号处理部ex306具有分别对声音信号和影像信号进行解码或者对各个信息分别进行编码的声音信号处理部ex304和影像信号处理部ex305(作为本发明的图像编码装置或者图像解码装置发挥作用);所述输出部ex309具有对被解码的声音信号进行输出的扬声器ex307,以及对被解码的影像信号进行显示的显示器等显示部ex308。进而,电视机ex300具有接口部ex317,该接口部ex317具有接受用户的操作输入的操作输入部ex312等。进而,电视机ex300具有统括控制各个部的控制部ex310,以及向各个部提供电力的电源电路部ex311。接口部ex317除可以具有操作输入部ex312以外,还可以具有与阅读器/记录器ex218等外部设备连接的电桥ex313、用于安装SD卡等记录介质ex216的插槽部ex314、用于与硬盘等外部记录介质连接的驱动器ex315、以及与电话网连接的调制解调器ex316等。并且,记录介质ex216能够通过存储的非易失性/易失性的半导体存储器元件进行信息的电记录。电视机ex300的各个部通过同步总线相互连接。
首先,对电视机ex300通过天线ex204等从外部获得的多路复用数据进行解码并再生的构成进行说明。电视机ex300接受来自远程控制器 ex220等的用户的操作,并根据具有CPU等的控制部ex310的控制,将在调制/解调部ex302解调的多路复用数据,在多路复用/分离部ex303 进行分离。并且,电视机ex300将分离的声音数据在声音信号处理部ex304 进行解码,利用上述的实施例中说明的解码方法,将分离的影像数据在影像信号处理部ex305进行解码。解码的声音信号和影像信号分别从输出部 ex309被输出到外部。在进行输出时,为了使声音信号和影像信号同步再生,而可以在缓冲器ex318、ex319等暂时蓄积这些信号。并且,电视机 ex300可以不从广播等读出多路复用数据,而是从磁性/光盘、SD卡等记录介质ex215、ex216中读出多路复用数据。以下将要说明的构成是,电视机ex300对声音信号以及影像信号进行编码,并发送到外部或写入到记录介质等的构成。电视机ex300接受来自远程控制器ex220等的用户的操作,并根据控制部ex310的控制,利用在上述的实施例中说明的编码方法,在声音信号处理部ex304对声音信号进行编码,并在影像信号处理部 ex305对影像信号进行编码。被编码的声音信号和影像信号在多路复用/ 分离部ex303被多路复用,并被输出到外部。在进行多路复用时,为了使声音信号和影像信号同步,而可以将这些信号暂时蓄积到缓冲器ex320、 ex321等。另外,关于缓冲器ex318至ex321,可以如图中所示那样具备多个,也可以是共享一个以上的缓冲器的构成。而且,除图中所示以外,例如可以在调制/解调部ex302与多路复用/分离部ex303之间等,作为回避系统的上溢和下溢的缓冲部分,在缓冲器中蓄积数据。
并且,电视机ex300除具有获得来自广播以及记录介质等的声音数据以及影像数据的构成以外,还可以具有接受麦克风以及摄像机的AV输入的构成,并且也可以对从这些获得的数据进行编码处理。并且,在此虽然对电视机ex300能够进行上述的编码处理、多路复用以及外部输出的构成进行了说明,不过也可以是不进行上述的全部的处理,而仅进行上述的接收、解码处理以及外部输出的构成。
并且,在阅读器/记录器ex218从记录介质中读出或写入多路复用数据的情况下,上述的解码处理或编码处理也可以在电视机ex300以及阅读器/记录器ex218的某一个中进行,也可以是电视机ex300和阅读器/记录器ex218彼此分担进行。
作为一个例子,图43示出了从光盘进行数据的读取或写入的情况下的信息再生/记录部ex400的构成。信息再生/记录部ex400包括以下将要说明的要素ex401、ex402、ex403、ex404、ex405、ex406、ex407。光学头ex401将激光照射到作为光盘的记录介质ex215的记录面并写入信息,并且检测来自记录介质ex215的记录面的反射光并读取信息。调制记录部ex402对被内藏于光学头ex401的半导体激光进行电驱动,并按照记录数据来进行激光的调制。再生解调部ex403对由被内藏于光学头ex401 的光电探测器对来自记录面的反射光进行电检测而得到的再生信号进行放大,对被记录在记录介质ex215的信号成分进行分离、解调,并再生必要的信息。缓冲器ex404对用于在记录介质ex215进行记录的信息以及从记录介质ex215再生的信息进行暂时保持。盘式电机ex405使记录介质ex215 旋转。伺服控制部ex406在对盘式电机ex405的旋转驱动进行控制的同时,将光学头ex401移动到规定的代码道,进行激光的光点的追踪处理。系统控制部ex407对信息再生/记录部ex400进行整体控制。上述的读出以及写入处理可以通过以下的方法来实现,即:系统控制部ex407利用被保持在缓冲器ex404的各种信息,并且按照需要在进行新的信息的生成以及追加的同时,一边使调制记录部ex402、再生解调部ex403以及伺服控制部 ex406协调工作,一边通过光学头ex401来进行信息的记录再生。系统控制部ex407例如以微处理器构成,通过执行读出以及写入的程序来执行这些处理。
以上,以光学头ex401照射激光光点为例进行了说明,不过也可以利用近场光学来进行高密度的记录。
图44是作为光盘的记录介质ex215的模式图。在记录介质ex215的记录面上,导槽(槽)被形成为螺旋状,在代码道ex230上预先被记录有按照槽的形状的变化示出盘上的绝对位置的地址信息。该地址信息包括用于确定记录块ex231的位置的信息,该记录块ex231是记录数据的单位,在进行记录以及再生的装置能够通过再生代码道ex230以及读取地址信息,来确定记录块。并且,记录介质ex215包括:数据记录区域ex233、内周区域ex232、以及外周区域ex234。用于记录用户数据的区域为数据记录区域ex233,被配置在数据记录区域ex233的内周或外周的内周区域 ex232和外周区域ex234被用于用户数据的记录以外的特殊用途。信息再生/记录部ex400针对这种记录介质ex215的数据记录区域ex233,进行被编码的声音数据、影像数据或对这些数据进行多路复用后的多路复用数据的读写。
以上以具有一层结构的DVD、BD等光盘为例进行了说明,但并非受此所限,也可以是多层结构的能够在表面以外进行记录的光盘。并且,也可以在盘的同一位置上记录利用了各种不同波长的颜色的光的信息,或者可以是从各种角度记录不同的信息的层等的具有进行多维的记录/再生的构成的光盘。
此外,在数字广播用系统ex200,能够在具有天线ex205的车辆ex210 从卫星ex202等接收数据,并在车辆ex210具有的车辆导航系统211等的显示装置再生运动图像。另外,关于车辆导航系统ex211的构成可以考虑成在图42示出的构成中添加GPS接收部,同样也可以考虑在计算机ex111 和便携式电话ex114等上。
图45A是示出了利用了在上述的实施例所说明的运动图像编码方法和运动图像解码方法的便携式电话ex114的图。便携式电话ex114具有:天线ex350,用于在与基站ex110之间进行电波的收发;摄像机部ex365,能够拍摄影像和静止图像;显示部ex358,是用于显示在摄像机部ex365 拍摄的影像以及由天线ex350接收的影像等被解码后的数据的液晶显示器等。便携式电话ex114还具有:具有操作键部ex366的主体部、声音输出部ex357,是用于输出声音的扬声器等;声音输入部ex356,是用于输入声音的麦克风等;存储器部ex367,用于保存拍摄的影像、静止图像、录音的声音、或者接收的影像、静止图像、邮件等被编码或被解码的数据;或者同样是保存数据的记录介质之间的接口的插槽部ex364。
进一步利用图45B对便携式电话ex114的构成例进行说明。在便携式电话ex114中,针对用于统括控制具有显示部ex358以及操作键部ex366 的主体部的各个部的主控制部ex360,电源电路部ex361、操作输入控制部ex362、影像信号处理部ex355、摄像机接口部ex363、LCD(Liquid CrystalDisplay:液晶显示器)控制部ex359、调制/解调部ex352、多路复用/分离部ex353、声音信号处理部ex354、插槽部ex364、以及存储器部ex367经由总线ex370相互连接。
电源电路部ex361在通过用户的操作而成为通话结束以及电源键成为导通状态下,通过从电池组向各个部提供电力,从而启动便携式电话 ex114,使其成为能够工作的状态。
便携式电话ex114根据由CPU、ROM以及RAM等构成的主控制部 ex360的控制,在声音通话模式时,由声音信号处理部ex354将在声音输入部ex356收集的声音信号转换为数字声音信号,并在调制/解调部ex352 进行扩频(Spread Spectrum)处理,在发送/接收部ex351进行数模转换处理以及频率转换处理之后,经由天线ex350发送。并且,便携式电话ex114 在声音通话模式时,对通过天线ex350接收的接收数据进行放大并进行频率转换处理以及模数转换处理,在调制/解调部ex352进行扩频处理的逆处理,在由声音信号处理部ex354转换为模拟声音信号之后,将其从声音输出部ex356输出。
并且,在数据通信模式时发送电子邮件的情况下,通过主体部的操作键部ex366等的操作被输入的电子邮件的文本数据经由操作输入控制部 ex362被发送到主控制部ex360。主控制部ex360,由调制/解调部ex352 对文本数据进行扩频处理,在发送/接收部ex351进行数模转换处理以及频率转换处理之后,经由天线ex350发送到基站ex110。在接收电子邮件的情况下、针对接收的数据进行与上述几乎相反的处理,发送到显示部 ex358。
在数据通信模式时发送影像、静止图像、或影像和声音的情况下,影像信号处理部ex355,将从摄像机部ex365提供的影像信号,按照所述各个实施例表示的运动图像编码方法来进行压缩编码(即,作为本发明的一个方式涉及的图像编码装置来发挥作用),并将被编码的影像数据发送到多路复用/分离部ex353。此外,声音信号处理部ex354,对摄像机部ex365 拍摄影像、静止图像等中,由声音输入部ex356收集的声音信号进行编码,并将被编码的声音数据发送到多路复用/分离部ex353。
多路复用/分离部ex353以规定的方式,对从影像信号处理部ex355 提供来的被编码的影像数据和从声音信号处理部ex354提供来的被编码的声音数据进行多路复用,将通过多路复用而得到的多路复用数据在调制/解调部(调制/解调电路部)ex352进行扩频处理,并在发送/接收部ex351进行数模转换处理以及频率转换处理之后,经由天线ex350发送。
在数据通信模式时,接收被链接在主页等的运动图像文件的数据的情况下,或者接收被添加了影像及/或声音的电子邮件的情况下,为了经由天线ex350解码被接收的多路复用数据,多路复用/分离部ex353,通过分割多路复用数据来分为影像数据的比特流和声音数据的比特流,经由同步总线ex370将被编码的影像数据提供给影像信号处理部ex355,并且将被编码的声音数据提供给声音信号处理部ex354。影像信号处理部ex355根据与所述各个实施例示出的运动图像编码方法对应的运动图像解码方法进行解码来解码影像信号(即,作为本发明的图像解码装置来发挥作用),通过 LCD控制部ex359在显示部ex358显示例如被链接在主页的运动图像文件中包含的影像、静止图像。此外,声音信号处理部ex354解码声音信号,从声音输出部ex357输出声音。
并且,上述便携式电话ex114等终端与电视机ex300同样,除可以考虑到是具有编码器以及解码器双方的收发信型终端的形式以外,还可以考虑到是仅具有编码器的发送终端,以及仅具有解码器的接收终端的共三种形式。并且,上述说明了在数字广播用系统ex200,接收以及发送在影像数据上多路复用了音乐数据等的多路复用数据,不过可以是除了声音数据以外多路复用了有关影像的文字数据等的数据,也可以是影像数据本身,而不是多路复用数据。
这样,在上述的实施例所示的图像编码方法或图像解码方法能够适用于上述的任一个设备以及系统,这样,能够得到在上述的实施例中说明的效果。
此外,本发明不仅限于所述的实施例,可以不脱离本发明的范围而进行各种变形或修改。
(实施例6)
可以按照需要适宜地切换上述的各个实施例所示的运动图像编码方法或装置与依照MPEG-2、MPEG4-AVC、VC-1等不同的标准的运动图像编码方法或装置,来生成影像数据。
在这里,在根据各自不同的标准生成了多个影像数据的情况下,需要在解码时选择与各自的标准对应的解码方法。然而,不能识别要解码的影像数据是依据了哪个标准的数据,所以产生不能选择恰当的解码方法这样的课题。
为了解决这个课题可以是在影像数据上多路复用了声音数据等的多路复用数据包含识别信息的构成,该识别信息表示影像数据是依据了哪个标准。下面说明包含由上述的各个实施例所示的运动图像编码方法或装置生成的影像数据的多路复用数据的具体构成。多路复用数据是MPEG-2传输流形式的数字流。
图46是表示多路复用数据的构成的图。如图46所示多路复用数据是通过对如下流中的一个以上进行多路复用而得到的数据:视频流,音频流,字幕流(presentationgraphics:PG),交互式图形流(interactive graphics stream)。视频流表示电影的主影像以及副影像,音频流(IG)表示电影的主声音部分和与主声音混合的副声音,字幕流表示电影的字幕。在这里,主影像表示在画面显示的通常的影像,副影像是指在主影像中以小画面显示的影像。还有,交互式图形流示出通过在画面上配置图形用户界面元件而作成的对话画面。视频流,根据上述的各个实施例所示的运动图像编码方法或装置,以及以往的MPEG-2、MPEG4-AVC、VC-1等标准的运动图像编码方法或装置被编码。音频流,根据杜比AC-3、Dolby Digital Plus、MLP、DTS、DTS-HD、或线性PCM等方式被编码。
多路复用数据中包含的各个流由PID被识别。例如,针对用于电影的影像的视频流分配0x1011,针对音频流分配从0x1100到0x111F,针对字幕流分配从0x1200到0x121F,针对交互式图形流分配从0x1400到 0x141F,针对用于电影的副影像的视频流分配从0x1B00到0x1B1F,针对用于与主声音混合的副声音的音频流分配从0x1A00到0x1A1F。
图47是表示多路复用数据怎样被多路复用的模式图。首先,由多个视频帧组成的视频流ex235、由多个音频帧组成的音频流ex238,分别变换为PES数据包列ex236以及ex239,变换为TS数据包ex237以及ex240。同样地将字幕流ex241及交互式图形ex244的数据,分别变换为PES数据包列ex242以及ex245,进一步变换为TS数据包ex243以及ex246。多路复用数据ex247,将这些TS数据包多路复用在1个流上而被构成。
图48是更加详细地表示在PES数据包列中视频流怎样被存储的图。在图48的第一段示出视频流的视频帧列。第二段示出PES数据包列。如图48的箭头yy1,yy2,yy3,yy4所示,作为视频流中的多个Video Presentation Unit的I图片,B图片,P图片,按每个图片被分割,存储到PES数据包的有效负载中。各个PES数据包拥有PES头,PES头中存储了作为图片的显示时刻的PTS(Presentation Time-Stamp:显示时间戳)、作为图片的解码时刻的DTS(Decoding Time-Stamp:解码时间戳)。
图49示出最终被写入到多路复用数据中的TS数据包的形式。TS数据包是具有识别流的PID等的信息的4Byte的TS头以及存储数据的 184Byte的TS有效负载所构成的188Byte定长的数据包,所述PES数据包被分割被存储到TS有效负载。在是BD-ROM的情况下,TS数据包被赋予4Byte的TP_Extra_Header,构成192Byte的源数据包,被写入到多路复用数据。在TP_Extra_Header上记载了ATS (Arrival_Time_Stamp)等的信息。ATS表示该TS数据包向解码器的 PID滤波器的传输开始时刻。在多路复用数据中如图49的下段所示排列了源数据包,从多路复用数据的开头增加的编号被称为SPN(源数据包编号)。
此外,多路复用数据中包含的TS数据包中除了影像、声音、字幕等各个流以外,还有PAT(Program Association Table:节目关联表)、PMT (Program Map Table:节目映射表)、PCR(Program Clock Reference:节目时钟基准)等。PAT表示多路复用数据中所利用的PMT的PID是什么,PAT自身的PID登记为0。PMT具有多路复用数据中包含的影像、声音、字幕等的各个流的PID以及与各个PID对应的流的属性信息,并且具有与多路复用数据有关的各种描述符。描述符具有复制控制信息等,该复制控制信息指示多路复用数据的复制许可、不许可。PCR为了使作为 ATS的时间轴的ATC(Arrival Time Clock)与作为PTS、DTS的时间轴的STC(System Time Clock)同步,具有与该PCR数据包传输到解码器的ATS对应的STC时间的信息。
图50是详细地说明PMT的数据构成的图。PMT的开头设置了PMT 头,用于记载该PMT中包含的数据的长度等。在其之后设置了多个与多路复用数据有关的描述符。上述复制控制信息等作为描述符被记载。在描述符之后设置了多个与多路复用数据中包含的各个流有关的流信息。流信息,为了识别流的压缩编解码等,由记载了流类型、流的PID、流的属性信息(帧速率、纵横比等)的流描述符所构成。流描述符的数量与在多路复用数据中存在的流的数量相同。
在记录介质等记录的情况下,上述多路复用数据与多路复用数据信息文件一起被记录。
如图51所示多路复用数据信息文件是多路复用数据的管理信息,与多路复用数据1对1地对应,其由多路复用数据信息、流属性信息以及项映射(entry map)所构成。
多路复用数据信息如图51所示,由系统速率、再生开始时刻、再生结束时刻所构成。系统速率表示多路复用数据向着后述的系统目标解码器的 PID滤波器的最大传输速率。多路复用数据中包含的ATS的间隔,被设定为是系统速率以下。再生开始时刻是多路复用数据的开头的视频帧的PTS,再生结束时刻被设定为,在多路复用数据的尾端的视频帧的PTS加上1帧的再生间隔。
流属性信息如图52所示,按每个PID登记包含在多路复用数据中的各个流的属性信息。属性信息按照每个视频流、音频流、字幕流、交互式图形流,具有不同的信息。视频流属性信息具有如下信息:该视频流以怎样的压缩编解码被压缩、构成视频流的各个图片数据的分辨率是多少、纵横比是多少、帧速率是多少等信息。音频流属性信息,具有如下信息:该音频流以怎样的压缩编解码被压缩、该音频流中包含的频道数是多少、与什么语言对应、采样频率是多少等信息。这些信息,用于在播放器再生之前的解码器的初始化等。
在本实施例,利用所述多路复用数据中的PMT中包含的流类型。此外,在记录介质中记录了多路复用数据的情况下,利用多路复用数据信息中包含的视频流属性信息。具体而言,在上述各个实施例表示的运动图像编码方法或装置中,针对PMT中包含的流类型、或视频流属性信息,设置设定固有的信息的步骤或单元,该固有的信息表示由上述各个实施例示出的运动图像编码方法或装置所生成的影像数据。根据该构成,能够识别由所述各个实施例表示的运动图像编码方法或装置所生成的影像数据与依据其他的标准的影像数据。
此外,图53表示在本实施例的运动图像解码方法的步骤。在步骤 exS100,从多路复用数据中获得PMT中包含的流类型、或者多路复用数据信息中包含的视频流属性信息。接着,在步骤exS101,判断流类型或视频流属性信息是否表示是由所述各个实施例表示的运动图像编码方法或装置所生成的多路复用数据。而且,在判断为流类型或视频流属性信息表示是由所述各个实施例表示的运动图像编码方法或装置所生成的数据的情况下,在步骤exS102,所述各个实施例表示的运动图像解码方法进行解码。此外,流类型或视频流属性信息表示是以往的MPEG-2、MPEG4-AVC、 VC-1等的标准的数据的情况下,在步骤exS103,根据所依据的以往的标准的运动图像解码方法来进行解码。
这样,通过在流类型或视频流属性信息设定新的固有值,从而在解码时,能够判断根据所述各个实施例表示的运动图像解码方法或装置是否能够解码。从而,即时被输入了依据不同的标准的多路复用数据时,也能够选择恰当的解码方法或装置,因此能够不产生错误地进行解码。此外,本实施例表示的运动图像编码方法或装置,或者运动图像解码方法或装置,能够用在上述的任一个设备以及系统。
(实施例7)
上述的各个实施例所示的运动图像编码方法以及装置、运动图像解码方法以及装置,典型的能够以作为集成电路的LSI来实现。作为一个例子,图54示出了被制成一个芯片的LSIex500的构成。LSIex500包括以下将要说明的要素ex501至ex509,各个要素通过总线ex510连接。电源电路部ex505在电源为打开状态的情况下,通过向各个部提供电力,从而启动为能够工作的状态。
例如,在进行编码处理的情况下,LSIex500,根据具有CPUex502、存储器控制器ex503、流控制器ex504、驱动频率控制部ex512等的控制部ex501的控制,根据AV输入输出ex509从麦克风ex117和摄像机ex113 等输入AV信号。被输入的AV信号被暂时蓄积到SDRAM等的外部的存储器ex511。根据控制部ex501的控制,存储的数据按照处理量和处理速度适当地分为多个被发送到信号处理部ex507,在信号处理部ex507被进行声音信号的编码及/或影像信号的编码。在这里,影像信号的编码处理是所述各个实施例说明的编码处理。在信号处理部ex507还根据情况对被编码的声音数据以及被编码的影像数据进行多路复用等处理,从流输入输出 ex506输出到外部。该被输出的多路复用数据被发送到基站ex107,或者被写入到记录介质ex215。并且,为了在多路复用时能够同步进行,而可以将数据暂时蓄积到缓冲器ex508。
另外,以上虽然对存储器ex511作为LSIex500的外部构成进行了说明,不过也可以被包括在LSIex500的内部。缓冲器ex508也可以不限于一个,可以具备多个缓冲器。并且,LSIex500可以被制成一个芯片,也可以是多个芯片。
此外,在上述说明中,控制部ex501具有CPUex502、存储器控制器 ex503、流控制器ex504、驱动频率控制部ex512等,不过,控制部ex501 的构成,不限于这个构成。例如,可以是信号处理部ex507还具备CPU 的构成。通过在信号处理部ex507的内部也设置CPU,可以使处理速度提高。此外,作为其他的例子,可以是CPUex502具备信号处理部ex507、或者具备信号处理部ex507的一部分例如声音信号处理部的构成。在这样的情况下,控制部ex501是具备信号处理部ex507或具有其一部分的 CPUex502的构成。
在此,虽然例示了LSI,不过根据集成度的不同,也可以称为IC、系统LSI、超级LSI、极超级LSI。
还有,集成电路化的方法不局限于LSI,也可以用专用电路或者通用处理器来实现。也可以利用在LSI制造之后可编程的现场可编程门阵列 (FPGA∶Field ProgrammableGate Array)或可动态地重构LSI内部的电路单元的连接和设定的可重构处理器。这样的可编程逻辑装置,典型的是加载或者从存储器等读入构成软件或者固件的程序,从而能够执行所述各个实施例示出的运动图像编码方法、或运动图像解码方法。
而且,随着半导体技术的进步或派生出的其他的技术,若出现了能够取代LSI的集成电路化的技术,当然也可以利用这些技术来对功能块进行集成化。有可能适用生物技术等。
(实施例8)
在对根据所述各个实施例表示的运动图像编码方法或装置所生成的影像数据进行解码的情况下,可以想到与对依据以往的MPEG-2、MPEG4 -AVC、VC-1等标准的影像数据进行解码的情况相比,处理量增加。因此,在LSIex500中需要设定比解码依据以往的标准的影像数据时的 CPUex502的驱动频率高的驱动频率。但是驱动频率高,则产生电力消耗高这样的课题。
为了解决这个课题,设电视ex300、LSIex500等运动图像解码装置为如下构成,识别影像数据依据了哪个标准,按照标准切换驱动频率的构成。图55表示在本实施例的构成ex800。驱动频率切换部ex803,在影像数据是由所述各个实施例表示的运动图像编码方法或装置所生成的情况下,设定高的驱动频率。而且,对执行所述各个实施例表示的运动图像解码方法的解码处理部ex801进行指示,以解码影像数据。另一方面,在影像数据是依据以往的标准的影像数据的情况的情况下,与影像数据由所述各个实施例示出的运动图像编码方法或装置所生成的情况相比,设定低的驱动频率。而且,指示依据以往的标准的解码处理部ex802,对影像数据进行解码。
更具体而言,驱动频率切换部ex803由图54的CPUex502与驱动频率控制部ex512所构成。此外,执行所述各个实施例示出的运动图像解码方法的解码处理部ex801,以及依据以往的标准的解码处理部ex802,相当于图54的信号处理部ex507。CPUex502识别影像数据依据哪个标准。而且,根据来自CPUex502的信号,驱动频率控制部ex512设定驱动频率。此外,根据来自CPUex502的信号,信号处理部ex507进行影像数据的解码。在这里,可以考虑在影像数据的识别中利用例如在实施例8记载的识别信息。有关识别信息,不仅限于在实施例8记载的信息,只要是能够识别影像数据是依据哪个标准的信息就可以。例如,在根据识别影像数据是否用于电视,是否用于盘等的外部信号,能够识别影像数据是依据哪个标准的情况下,可以根据这样的外部信号进行识别。此外,在CPUex502的驱动频率的选择,可以考虑根据例如如图57一样的使影像数据的标准和驱动频率对应的一览表来进行。将一览表预先存储在缓冲器ex508和LSI的内存储器中,通过CPUex502参考这个一览表,能够选择驱动频率。
图56示出了实施本实施例的方法的步骤。首先,在步骤exS200中,由信号处理部ex507从多路复用数据中获得识别信息。接着,在步骤 exS201中,CPUex502根据识别信息,识别影像数据是不是由所述各个实施例示出的编码方法或装置所生成的数据。在影像数据是由所述各个实施例示出的编码方法或装置所生成的数据情况下,在步骤exS202中,将设定高的驱动频率的信号,由CPUex502发送到驱动频率控制部ex512。而且,在驱动频率控制部ex512设定高的驱动频率。另一方面,在示出了是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,在步骤exS203中,将设定低的驱动频率的信号,由CPUex502发送到驱动频率控制部ex512。而且,在驱动频率控制部ex512,设定与影像数据由所述各个实施例示出的编码方法或装置所生成的情况相比低的驱动频率。
加之,与驱动频率的切换联动,通过变更对LSIex500或包含LSIex500 的装置施加的电压,可以提高省电效果。例如,在设定低驱动频率的情况下,随之与设定高驱动频率的情况相比,可以考虑使对LSIex500或包含 LSIex500的装置施加的电压设定为低电压。
此外,关于驱动频率的设定方法,只要在解码时的处理量大的情况下,设定高的驱动频率,在解码时的处理量小的情况下,设定低的驱动频率就可以,不限于上述的设定方法。例如对依据MPEG4-AVC标准的影像数据进行解码的处理量,大于对由所述各个实施例示出的运动图像编码方法或装置所生成的影像数据进行解码的处理量的情况下,可以考虑将驱动频率的设定与上述的情况相反地进行。
加之,驱动频率的设定方法不限于使驱动频率设为低的构成。例如,可以考虑在识别信息示出是由所述各个实施例示出的运动图像编码方法或装置所生成的影像数据的情况下,对LSIex500或包含LSIex500的装置施加的电压设定为高的电压,在示出是依据以往的MPEG-2、MPEG4 -AVC、VC-1等的标准的影像数据的情况下,对LSIex500或包含LSIex500的装置施加的电压设定为低的电压。此外,作为其他的例子,可以考虑在识别信息示出是由所述各个实施例示出的运动图像编码方法或装置所生成的影像数据的情况下,不停止CPUex502的驱动,在示出是依据以往的MPEG-2、MPEG4-AVC、VC-1等的标准的影像数据的情况下,因为处理有余量,可以暂时停止CPUex502的驱动。即使在识别信息示出是由所述各个实施例示出的运动图像编码方法或装置所生成的影像数据的情况下,如果处理有余量,也可以考虑暂时停止CPUex502的驱动。这个情况下,可以考虑与识别信息示出是依据以往的MPEG-2、MPEG4 -AVC、VC-1等的标准的影像数据的情况相比,停止时间设定地较短。
这样,按照影像数据依据的标准来切换驱动频率,从而能够达到省电化。此外,在利用电池驱动LSIex500或包含LSIex500的装置的情况下,随着省电化还可以延长电池的寿命。
(实施例9)
电视和便携式电话等上述的设备以及系统,有时被输入依据不同标准的多个影像数据。这样,即使在被输入了依据不同标准的多个影像数据的情况下也能进行解码,从而LSIex500的信号处理部ex507需要与多个标准对应。但是,与各个标准对应的信号处理部ex507个别利用时,使LSIex500的电路规模变大,还产生成本增加这样的课题。
为了解决上述课题可以是如下的构成,将用于执行所述各个实施例示出的运动图像解码方法的解码处理部与依据以往的MPEG-2、MPEG4 -AVC、VC-1等的标准的解码处理部,进行一部分共享。图58A的ex900 示出该构成例。例如,所述各个实施例示出的运动图像解码方法和依据 MPEG4-AVC标准的运动图像解码方法,在熵编码、逆量化、解块及滤波器、运动补偿等处理中,一部分处理内容是共同的。关于共同的处理内容,可以考虑共享与MPEG4-AVC标准对应的解码处理部ex902,关于与MPEG4-AVC标准不对应的本发明特有的其他处理内容,使用专用的解码处理部ex901这样的构成。尤其是本发明的一个方案中,熵解码具有特征,从而可以考虑如下,例如熵解码中利用专用的解码处理部ex901,除此之外的逆量化、解块滤波器、运动补偿的任一个或全部的处理中共用解码处理部。对于解码处理部的共享化,关于共同的处理内容,共享用于执行所述各个实施例示出的运动图像解码方法的解码处理部,关于 MPEG4-AVC标准特有的处理内容,使用专用的解码处理部。
此外,图58B的ex1000示出了处理的部分共享化的其他例子。在这个例子的构成是,使用与本发明特有的处理内容对应的专用的解码处理部 ex1001、与其他的以往标准特有的处理内容对应的专用的解码处理部 ex1002、与本发明的运动图像解码方法及其他的以往标准的运动图像解码方法共同的处理内容相对应的共用的解码处理部ex1003。在这里,专用的解码处理部ex1001、ex1002,不一定是本发明或其他以往标准特有的处理内容所特有的,可以是能够执行其他通用处理的部。此外,也可以是在 LSIex500安装本实施例的构成。
这样,关于本发明的一个方案涉及地运动图像解码方法与以往的标准的运动图像解码方法共同的处理内容,通过共享解码处理部,可以使LSI 的电路规模变小,并且能够减少成本。
本发明能够适用于图像编码方法、图像解码方法、图像编码装置及图像解码装置。并且,本发明,能够利用于具备图像编码装置的电视机、数字录像机、汽车导航、移动电话、数字照相机、以及的数字摄像机等的高分辨率的信息显示设备或摄像设备。
符号说明
100 图像编码装置
101 代码块分割部
102 减法部
103 变换部
104 可变长编码部
105、202 逆变换部
106、203 加法部
107、205 帧存储器
108 预测部
121 输入图像
122 代码块
123、126、223 差分块
124、222 频率系数(系数)
125、221 代码串
127、224 解码块
128、225、226 解码图像
129 预测块
131 系数块分割部
132 significant_flag编码部
133、133A level编码部
134 sign_flag编码部
141 greater1_flag设定部
142 greater2_flag设定部
143、143A remaining设定部
144、248 二值化参数更新部
145、145A、241、241A 上下文集选择部
146、243 greater1_flag存储器
147、242 greater1_flag上下文选择部
148、244 greater1_flag上下文存储器
149、245 greater2_flag上下文选择部
150、246 greater2_flag上下文存储器
151 算术编码部
152 remaining二值化部
153 PrefixSuffix决定部
154 Suffixbin输出部
155 Prefixbin输出部
160、260 greater_flag切换部
200 图像解码装置
201 可变长解码部
204 解码块结合部
231 significant_flag解码部
232、232A level解码部
233 sign_flag解码部
234 系数解码部
247、247A 算术解码部
249 remaining多值化部
250 Prefix解码部
251 Suffix解码部
252 PrefixSuffix结合部

Claims (9)

1.一种图像编码方法,包括:
使用输入图像块和预测图像块生成剩余数据;
对所述剩余数据执行变换以生成多个变换系数;
对所述多个变换系数执行量化;
将所量化的所述多个变换系数划分为多个系数块,所述多个系数块包括处理对象系数块和就在所述处理对象系数块之前已被编码的前一个系数块;
对于所述处理对象系数块,确定所述前一个系数块是否包括绝对值大于阈值的系数;
对于所述处理对象系数块中的处理对象系数,
选择第一上下文用于第一标志的算术编码,所述第一标志指示所述处理对象系数块中的所述处理对象系数的绝对值是否大于1,所述第一上下文的选择至少部分地基于关于所述前一个系数块是否包括绝对值大于所述阈值的系数的确定的结果;
使用所述第一上下文执行对所述第一标志的算术编码;
选择第二上下文用于第二标志的算术编码,所述第二标志指示所述处理对象系数块中的所述处理对象系数的绝对值是否大于2,所述第二上下文的选择至少部分地基于关于所述前一个系数块是否包括绝对值大于所述阈值的系数的确定的结果;以及
使用所述第二上下文执行对所述第二标志的算术编码,
其中所述阈值为1。
2.根据权利要求1所述的图像编码方法,其中所述处理对象系数块为处理对象编码块的子块,所述处理对象编码块包括输入图像在频域中的系数。
3.根据权利要求2所述的图像编码方法,还包括:
根据多个变换表之中的由二值化参数指定的变换表对剩余值进行二值化,当所述处理对象系数的绝对值大于2时,所述剩余值为从所述绝对值减去3所得到的值;其中所述二值化参数是根据所述前一个系数块是否包括绝对值大于所述阈值的系数而确定。
4.一种图像编码设备,包括:
至少一个处理器;
包括计算机程序代码的至少一个存储器,所述存储器和所述计算机程序代码配置成,与所述至少一个处理器协同,使所述设备至少执行下列项:
使用输入图像块和预测图像块生成剩余数据;
对所述剩余数据执行变换以生成多个变换系数;
对所述多个变换系数执行量化;
将所量化的所述多个变换系数划分为多个系数块,所述多个系数块包括处理对象系数块和就在所述处理对象系数块之前已被编码的前一个系数块;
对于所述处理对象系数块,确定所述前一个系数块是否包括绝对值大于阈值的系数;
对于所述处理对象系数块中的处理对象系数,
选择第一上下文用于第一标志的算术编码,所述第一标志指示所述处理对象系数块中的所述处理对象系数的绝对值是否大于1,所述第一上下文的选择至少部分地基于关于所述前一个系数块是否包括绝对值大于所述阈值的系数的确定的结果;
使用所述第一上下文执行对所述第一标志的算术编码;
选择第二上下文用于第二标志的算术编码,所述第二标志指示所述处理对象系数块中的所述处理对象系数的绝对值是否大于2,所述第二上下文的选择至少部分地基于关于所述前一个系数块是否包括绝对值大于所述阈值的系数的确定的结果;以及
使用所述第二上下文执行对所述第二标志的算术编码,
其中所述阈值为1。
5.根据权利要求4所述的图像编码设备,其中所述处理对象系数块是处理对象编码块的子块,所述处理对象编码块包括输入图像在频域中的系数。
6.根据权利要求4所述的图像编码设备,其中所述存储器包括计算机程序代码,所述计算机程序代码配置成与所述至少一个处理器协同使所述设备执行下列项:根据多个变换表之中的由二值化参数指定的变换表对剩余值进行二值化,当所述处理对象系数的绝对值大于2时,所述剩余值为从所述绝对值减去3所得到的值;
其中所述二值化参数是根据所述前一个系数块是否包括绝对值大于所述阈值的系数而确定。
7.至少一种以指令进行编码的计算机可读取介质,所述指令在由处理器执行时,将进行:
使用输入图像块和预测图像块生成剩余数据;
对所述剩余数据执行变换以生成多个变换系数;
对所述多个变换系数执行量化;
将所量化的所述多个变换系数划分为多个系数块,所述多个系数块包括处理对象系数块和就在所述处理对象系数块之前已被编码的前一个系数块;
对于所述处理对象系数块,确定所述前一个系数块是否包括绝对值大于阈值的系数;
对于所述处理对象系数块中的处理对象系数,
选择第一上下文用于第一标志的算术编码,所述第一标志指示所述处理对象系数块中的所述处理对象系数的绝对值是否大于1,所述第一上下文的选择至少部分地基于关于所述前一个系数块是否包括绝对值大于所述阈值的系数的确定的结果;
使用所述第一上下文执行对所述第一标志的算术编码;
选择第二上下文用于第二标志的算术编码,所述第二标志指示所述处理对象系数块中的所述处理对象系数的绝对值是否大于2,所述第二上下文的选择至少部分地基于关于所述前一个系数块是否包括绝对值大于所述阈值的系数的确定的结果;以及
使用所述第二上下文执行对所述第二标志的算术编码,
其中所述阈值为1。
8.根据权利要求7所述的介质,其中所述处理对象系数块是处理对象编码块的子块,所述处理对象编码块包括输入图像在频域中的系数。
9.根据权利要求7所述的介质,进一步以指令来编码,所述指令在由处理器执行时将进行:
根据多个变换表之中的由二值化参数指定的变换表对剩余值进行二值化,当所述处理对象系数的绝对值大于2时,所述剩余值为从所述绝对值减去3所得到的值;
其中所述二值化参数是根据所述前一个系数块是否包括绝对值大于所述阈值的系数而确定。
CN201710978692.0A 2012-06-22 2013-06-07 图像编码方法及图像编码设备 Active CN107734344B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261663121P 2012-06-22 2012-06-22
US61/663121 2012-06-22
CN201380031036.XA CN104350747B (zh) 2012-06-22 2013-06-07 图像解码方法、图像解码装置及图像编解码装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201380031036.XA Division CN104350747B (zh) 2012-06-22 2013-06-07 图像解码方法、图像解码装置及图像编解码装置

Publications (2)

Publication Number Publication Date
CN107734344A CN107734344A (zh) 2018-02-23
CN107734344B true CN107734344B (zh) 2021-06-29

Family

ID=49768411

Family Applications (4)

Application Number Title Priority Date Filing Date
CN201710976083.1A Active CN107809645B (zh) 2012-06-22 2013-06-07 图像解码方法及图像解码设备
CN201710978692.0A Active CN107734344B (zh) 2012-06-22 2013-06-07 图像编码方法及图像编码设备
CN201380031036.XA Active CN104350747B (zh) 2012-06-22 2013-06-07 图像解码方法、图像解码装置及图像编解码装置
CN201710975973.0A Active CN107749992B (zh) 2012-06-22 2013-06-07 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编解码装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201710976083.1A Active CN107809645B (zh) 2012-06-22 2013-06-07 图像解码方法及图像解码设备

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201380031036.XA Active CN104350747B (zh) 2012-06-22 2013-06-07 图像解码方法、图像解码装置及图像编解码装置
CN201710975973.0A Active CN107749992B (zh) 2012-06-22 2013-06-07 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编解码装置

Country Status (15)

Country Link
US (4) US9264712B2 (zh)
EP (1) EP2866444B1 (zh)
JP (5) JP5603525B2 (zh)
KR (2) KR102073399B1 (zh)
CN (4) CN107809645B (zh)
AR (2) AR091537A1 (zh)
AU (3) AU2013278760B2 (zh)
BR (1) BR112014031146B1 (zh)
CA (1) CA2875196C (zh)
MX (1) MX339710B (zh)
MY (2) MY167469A (zh)
RU (2) RU2680749C2 (zh)
SG (2) SG11201408361TA (zh)
TW (1) TWI565297B (zh)
WO (1) WO2013190796A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9036710B2 (en) * 2012-03-08 2015-05-19 Blackberry Limited Unified transform coefficient encoding and decoding
EP2866444B1 (en) * 2012-06-22 2022-04-13 Velos Media International Limited Image encoding method, image decoding method, image encoding device, image decoding device
US9894385B2 (en) * 2013-01-02 2018-02-13 Lg Electronics Inc. Video signal processing method and device
US11388441B2 (en) * 2014-03-18 2022-07-12 Qualcomm Incorporated Derivation of SPS temporal ID nesting information for multi-layer bitstreams
JP6797755B2 (ja) * 2017-06-20 2020-12-09 キヤノン株式会社 撮像装置、撮像装置の処理方法およびプログラム
CN111373753B (zh) 2018-09-20 2023-09-08 Lg电子株式会社 变换因子级别编码方法及其装置
TW202046729A (zh) * 2019-04-24 2020-12-16 美商松下電器(美國)知識產權公司 編碼裝置、解碼裝置、編碼方法、及解碼方法
CN117640934A (zh) * 2019-07-12 2024-03-01 Lg电子株式会社 图像编码方法、图像解码方法以及发送方法
CN114554899A (zh) 2019-10-18 2022-05-27 耐克创新有限合伙公司 具有绳锁的易进入的鞋类物品
CN111464750B (zh) * 2020-05-14 2021-07-23 中央民族大学 一种图像处理装置及智能车
CN112995671B (zh) * 2021-02-21 2022-10-28 腾讯科技(深圳)有限公司 视频编解码方法、装置、计算机可读介质及电子设备
WO2023166888A1 (ja) * 2022-03-03 2023-09-07 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 復号方法、符号化方法、復号装置及び符号化装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1531348A (zh) * 2003-02-28 2004-09-22 ��ʽ����Ntt����Ħ 图像编码设备、方法及程序,和图像解码设备、方法及程序
CN1758756A (zh) * 2005-11-03 2006-04-12 浙江大学 一种用于将待编码数据进行二进制化编码的方法和装置
JP2007142637A (ja) * 2005-11-16 2007-06-07 Matsushita Electric Ind Co Ltd 画像情報符号化装置
CN101106721A (zh) * 2006-07-10 2008-01-16 华为技术有限公司 一种编解码装置及相关编码器
US7365659B1 (en) * 2006-12-06 2008-04-29 Silicon Image Gmbh Method of context adaptive binary arithmetic coding and coding apparatus using the same
CN101951516A (zh) * 2010-09-25 2011-01-19 清华大学 基于h.264/avc中cabac的并行编码实现电路及编码方法
CN102256125A (zh) * 2011-07-14 2011-11-23 北京工业大学 面向高效视频编码hevc基于上下文的自适应算数编码方法
JP2012023613A (ja) * 2010-07-15 2012-02-02 Mitsubishi Electric Corp 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3807342B2 (ja) * 2002-04-25 2006-08-09 三菱電機株式会社 デジタル信号符号化装置、デジタル信号復号装置、デジタル信号算術符号化方法、およびデジタル信号算術復号方法
JP2003319391A (ja) * 2002-04-26 2003-11-07 Sony Corp 符号化装置および方法、復号装置および方法、記録媒体、並びにプログラム
US7379608B2 (en) * 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
KR100612015B1 (ko) * 2004-07-22 2006-08-11 삼성전자주식회사 컨텍스트 적응형 이진 산술 부호화 방법 및 그 장치
JPWO2006013854A1 (ja) * 2004-08-05 2008-05-01 松下電器産業株式会社 画像復号化装置および画像符号化装置
WO2006051796A1 (en) * 2004-11-09 2006-05-18 Matsushita Electric Industrial Co., Ltd. Two step arithmetic decoding with conversion into an intermediate format
KR100763196B1 (ko) 2005-10-19 2007-10-04 삼성전자주식회사 어떤 계층의 플래그를 계층간의 연관성을 이용하여부호화하는 방법, 상기 부호화된 플래그를 복호화하는방법, 및 장치
KR101375668B1 (ko) * 2008-03-17 2014-03-18 삼성전자주식회사 변환 계수의 부호화, 복호화 방법 및 장치
JP2009231914A (ja) * 2008-03-19 2009-10-08 Sony Corp 復号装置、復号処理方法およびプログラム
JP2012023612A (ja) 2010-07-15 2012-02-02 Canon Inc 撮像装置及び撮像方法
US20130003858A1 (en) * 2011-06-30 2013-01-03 Vivienne Sze Simplified Context Selection For Entropy Coding of Transform Coefficient Syntax Elements
TR201811137T4 (tr) 2011-10-31 2018-08-27 Samsung Electronics Co Ltd Dönüştürme katsayısı seviyesi için entropi kod çözme için bir bağlam modelinin belirlenmesine yönelik usul.
US9088296B2 (en) * 2011-12-29 2015-07-21 Microsoft Technology Licensing, Llc Variable length coding and decoding using counters
US9036710B2 (en) * 2012-03-08 2015-05-19 Blackberry Limited Unified transform coefficient encoding and decoding
CA2873694A1 (en) * 2012-06-01 2013-12-05 Sharp Kabushiki Kaisha Arithmetic decoding device, image decoding device, arithmetic encoding device, and image encoding device
EP2866444B1 (en) * 2012-06-22 2022-04-13 Velos Media International Limited Image encoding method, image decoding method, image encoding device, image decoding device
EP2868103B1 (en) * 2012-06-29 2016-12-07 GE Video Compression, LLC Video data stream concept

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1531348A (zh) * 2003-02-28 2004-09-22 ��ʽ����Ntt����Ħ 图像编码设备、方法及程序,和图像解码设备、方法及程序
CN1758756A (zh) * 2005-11-03 2006-04-12 浙江大学 一种用于将待编码数据进行二进制化编码的方法和装置
JP2007142637A (ja) * 2005-11-16 2007-06-07 Matsushita Electric Ind Co Ltd 画像情報符号化装置
CN101106721A (zh) * 2006-07-10 2008-01-16 华为技术有限公司 一种编解码装置及相关编码器
US7365659B1 (en) * 2006-12-06 2008-04-29 Silicon Image Gmbh Method of context adaptive binary arithmetic coding and coding apparatus using the same
JP2012023613A (ja) * 2010-07-15 2012-02-02 Mitsubishi Electric Corp 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法
CN101951516A (zh) * 2010-09-25 2011-01-19 清华大学 基于h.264/avc中cabac的并行编码实现电路及编码方法
CN102256125A (zh) * 2011-07-14 2011-11-23 北京工业大学 面向高效视频编码hevc基于上下文的自适应算数编码方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
context set selection for coefficient level coding;NGUYEN N ET AL;《JCT-VC meeting》;20120120;正文 *

Also Published As

Publication number Publication date
KR102163398B1 (ko) 2020-10-12
EP2866444A1 (en) 2015-04-29
BR112014031146A8 (pt) 2018-02-06
JP6352488B2 (ja) 2018-07-04
BR112014031146A2 (pt) 2017-08-08
JP2020043610A (ja) 2020-03-19
MX2014014880A (es) 2015-03-09
TW201412125A (zh) 2014-03-16
JP5603525B2 (ja) 2014-10-08
RU2680749C2 (ru) 2019-02-26
CA2875196C (en) 2023-03-14
AR091537A1 (es) 2015-02-11
CN107734344A (zh) 2018-02-23
EP2866444A4 (en) 2015-06-24
JP2018157590A (ja) 2018-10-04
MY193123A (en) 2022-09-26
AU2013278760A1 (en) 2014-12-11
CN107809645A (zh) 2018-03-16
JP2017147745A (ja) 2017-08-24
KR20200013804A (ko) 2020-02-07
AU2018282369B2 (en) 2020-09-10
JPWO2013190796A1 (ja) 2016-02-08
BR112014031146B1 (pt) 2023-05-16
US9596487B2 (en) 2017-03-14
US20170094318A1 (en) 2017-03-30
MY167469A (en) 2018-08-29
RU2019103984A (ru) 2020-08-13
AU2017200514B2 (en) 2018-12-06
EP2866444B1 (en) 2022-04-13
US9264712B2 (en) 2016-02-16
SG11201408361TA (en) 2015-01-29
CA2875196A1 (en) 2013-12-27
AU2013278760B2 (en) 2016-10-27
US9924202B2 (en) 2018-03-20
RU2017136413A3 (zh) 2019-02-08
CN107749992B (zh) 2020-06-09
SG10201505418UA (en) 2015-08-28
RU2017136413A (ru) 2019-02-08
JP6145750B2 (ja) 2017-06-14
RU2635895C2 (ru) 2017-11-16
MX339710B (es) 2016-06-07
US20180167642A1 (en) 2018-06-14
CN107749992A (zh) 2018-03-02
AR113715A2 (es) 2020-06-03
CN104350747B (zh) 2017-11-21
AU2018282369A1 (en) 2019-01-17
JP6633136B2 (ja) 2020-01-22
US10687084B2 (en) 2020-06-16
AU2017200514A1 (en) 2017-02-16
TWI565297B (zh) 2017-01-01
US20130343463A1 (en) 2013-12-26
JP2014225905A (ja) 2014-12-04
US20160050444A1 (en) 2016-02-18
KR20150024835A (ko) 2015-03-09
JP7003100B2 (ja) 2022-01-20
RU2014150558A (ru) 2016-08-10
KR102073399B1 (ko) 2020-02-05
CN104350747A (zh) 2015-02-11
CN107809645B (zh) 2021-12-03
WO2013190796A1 (ja) 2013-12-27

Similar Documents

Publication Publication Date Title
JP7003100B2 (ja) 画像復号方法及び画像復号装置
CN107257490B (zh) 图像编码方法及图像编码装置
JP6799122B2 (ja) 画像符号化方法、画像復号方法および画像復号装置
CN107820092B (zh) 运动图像编码方法及装置、运动图像编解码装置
WO2012108205A1 (ja) 画像符号化方法、画像符号化装置、画像復号方法、画像復号装置および画像符号化復号装置
WO2013175736A1 (ja) 動画像符号化方法、動画像符号化装置、動画像復号方法、動画像復号装置、および、動画像符号化復号装置
JP6717562B2 (ja) 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
RU2815733C1 (ru) Способ кодирования изображения, способ декодирования изображения, устройство кодирования изображения, устройство декодирования изображения и устройство кодирования и декодирования изображения
RU2808610C1 (ru) Способ кодирования изображения, способ декодирования изображения, устройство кодирования изображения, устройство декодирования изображения и устройство кодирования и декодирования изображения
RU2794163C2 (ru) Способ кодирования изображения, способ декодирования изображения, устройство кодирования изображения, устройство декодирования изображения и устройство кодирования и декодирования изображения

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20230506

Address after: New York, United States

Patentee after: Sun patent hosting Co.

Address before: Irish Dublin

Patentee before: Velos Media, LLC

TR01 Transfer of patent right