CN101569203A - 代码转换器、代码转换方法、解码器以及解码方法 - Google Patents

代码转换器、代码转换方法、解码器以及解码方法 Download PDF

Info

Publication number
CN101569203A
CN101569203A CNA2008800011545A CN200880001154A CN101569203A CN 101569203 A CN101569203 A CN 101569203A CN A2008800011545 A CNA2008800011545 A CN A2008800011545A CN 200880001154 A CN200880001154 A CN 200880001154A CN 101569203 A CN101569203 A CN 101569203A
Authority
CN
China
Prior art keywords
mentioned
image data
coding mode
compression coding
compressed encoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2008800011545A
Other languages
English (en)
Inventor
宫内进吾
松浦隆治
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101569203A publication Critical patent/CN101569203A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提供一种代码转换器及代码转换方法,能够不增大电路规模并且高速地进行压缩编码方式不同的影像数据间的代码转换。使用具备解码器(1)、语法转换部(2)、编码器(3)的代码转换器。解码器(1)对按照MPEG2方式进行了压缩编码的影像数据进行解码,然后,提取按照MPEG2方式制作的运动矢量,进而,对于运动矢量以外的影像数据进行逆量化。语法转换部(2)将来自解码器(1)的影像数据的语法转换为H.264方式。编码器(3)对于语法转换后的影像数据进行量化,并将其与提取的运动矢量按照H.264方式进行压缩编码。编码器(3)进而在该得到的数据中,附加表示运动矢量是按照MPEG2方式制作的情况的识别符。

Description

代码转换器、代码转换方法、解码器以及解码方法
技术领域
本发明涉及用于对影像数据进行代码转换的代码转换器及代码转换方法,进而涉及用于对代码转换得到的影像数据进行再现的解码器及解码方法。
背景技术
以往而来,MPEG2方式作为对影像进行压缩编码的方式之一已众所周知。MPEG2方式能够抑制画质的劣化并且压缩影像数据,所以广泛应用于DVD、数字广播等各种领域。
近年来,还开发了称为H.264方式的新的压缩编码方式。根据H.264方式,能够以比MPEG2方式更高的压缩率对影像进行压缩编码。例如,通过MPEG2方式和H.264方式,对相同的影像数据以相同程度的画质进行压缩编码时,通过H.264方式进行压缩编码的影像数据的数据量为通过MPEG2方式的数据量的一半左右。进而,H.264方式在“蓝光盘(Blue-RayDisc)”和具备动画再现功能的各种便携式终端装置中,作为标准动画形式而使用。
其中,广播工作者、节目制作者、电影制作者等对过去庞大的影像资产通过MPEG2方式进行压缩编码。因此,需要开发一种代码转换器(代码转换装置),将通过MPEG2方式进行了压缩编码的影像数据,通过H.264方式再次进行压缩编码。
作为将通过MPEG2方式进行了压缩编码的影像数据(MPEG2影像数据)代码转换为通过H.264方式进行压缩编码的影像数据(H.264影像数据)的代码转换器,已知利用了闭环架构(closed loop architecture)的代码转换器(例如,参照日本特开2007-104231号公报。)。在日本特开2007-104231号公报中公开的代码转换器具备解码器和编码器。
解码器对于原来的MPEG2影像数据,依次进行可变长度解码(VLD)、逆量化以及IDCT(逆离散余弦转换),生成再现影像。再现影像被输出至编码器的缓冲存储器。编码器按每帧来提取被积蓄在缓冲存储器中的再现影像,对于所提取的再现影像,进行DCT(离散余弦变换)、量化以及可变长度编码,并制作H.264影像数据。另外,编码器为了对所提取的再现影像进行运动补偿,利用积蓄了参照图片(picture)的参照存储器来生成运动矢量,并对所生成的运动矢量也进行可变长度编码。进而,在运动信息的生成中,编码器还参照MPEG2影像数据中的运动信息。
这样,根据日本特开2007-104231号公报中公开的代码转换器,能够将MPEG2影像数据代码转换为H.264影像数据,并能够使数据量为原MPEG2影像数据的数据量的一半以下。因此,例如,在硬盘记录器具备上述代码转换器时,节约了硬盘容量,可以进行更多的标题的录制。另外,在传输速度低的网络内,也可以传输画质优良的影像。
此外,还已知采用开环架构(open loop architecture)的代码转换器(例如,参照日本特许第3244399号公报)。该代码转换器对原影像数据进行可变解码及逆量化,并对于得到的数据,改变量化步长值Q进行量化,然后执行可变编码。结果,生成数据量比原影像数据更被压缩的新的影像数据。
但是,在利用闭环架构的前者的代码转换器中,如上所述,缓冲存储器和参考存储器是不可缺少的,需要较多的存储器资源。另外,为了实现上述代码转换器,需要大规模电路。从这几点出发,在前者的代码转换器中,存在无法以廉价的成本提供该代码转换器的问题。
进而,在前者的代码转换器中,解码器需要进行可变长度解码、逆量化以及逆DCT,另外,编码器需要进行DCT、量化以及可变长度编码。因此,在上述代码转换器中,难以进行处理的高速化,还存在到完成代码转换为止的时间比原影像数据的再现时间更长的情况。
另一方面,在利用了开环架构的后者的代码转换器中,不进行基于解码器的逆DCT和基于编码器的DCT。因此,无需存储器资源,进而电路规模也较小即可,所以抑制了成本的上升。另外,也容易达到代码转换的高速化。
但是,后者的代码转换器的目的不在于变更压缩编码方式,而仅在于压缩MPEG2影像数据的数据量。即,在后者的代码转换器中,不进行对不同压缩编码方式间的语法(syntax)或运动补偿的差异进行了考虑的代码转换,不能够进行从MPEG2影像数据向H.264影像数据的代码转换。
发明内容
本发明的目的在于,解决上述问题,提供能够以廉价的成本且高速地进行压缩编码方式不同的影像数据间的代码转换的代码转换器及代码转换方法,并提供对通过该代码转换器得到的影像数据进行解码的解码器及解码方法。
为了达到上述目的,本发明中的代码转换器对按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据进行解码,并对其按照第二压缩编码方式再次进行压缩编码,其特征在于,具备:解码器、语法转换部以及编码器;上述解码器对按照上述第一压缩编码方式进行了压缩编码的上述影像数据进行解码,从解码后的上述影像数据中,提取按照上述第一压缩编码方式制作的运动矢量,并将提取的上述运动矢量输入至上述编码器,另外,对上述运动矢量以外的解码后的上述影像数据进行逆量化,并将逆量化后的上述影像数据输入至上述语法转换部;上述语法转换部将由上述解码器输入的上述影像数据的语法转换为由上述第二压缩编码方式规定的语法;上述编码器对转换了语法的上述影像数据以设定的量化步长值进行量化,将量化后的上述影像数据和从上述解码器输入的上述运动矢量结合,并对其按照上述第二压缩编码方式进行压缩编码,进而,在按照上述第二压缩编码方式进行了压缩编码的数据中,附加识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的。
为了达到上述目的,本发明中的代码转换方法对按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据进行解码,并对其按照第二压缩编码方式再次进行压缩编码,其特征在于,具有以下步骤:(a)对按照上述第一压缩编码方式进行了压缩编码的上述影像数据进行解码;(b)从在上述(a)的步骤中被解码的上述影像数据中,提取按照上述第一压缩编码方式制作的运动矢量;(c)对上述运动矢量以外的被解码的上述影像数据进行逆量化;(d)将在上述(c)的步骤中进行了逆量化的上述影像数据的语法转换为由上述第二压缩编码方式规定的语法;(e)对在上述(d)的步骤中转换了语法的上述影像数据,以设定的量化步长值进行量化;(f)将在上述(e)的步骤中进行了量化的上述影像数据和在上述(b)的步骤中提取的上述运动矢量结合,并对其按照上述第二压缩编码方式进行压缩编码;以及(g)在上述(f)的步骤中按照上述第二压缩编码方式进行了压缩编码的数据中,附加识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的。
为了达到上述目的,本发明中的解码器根据通过上述代码转换器进行的再次的压缩编码得到的影像数据,生成再现图像,其特征在于,具备:运动补偿部,根据通过上述再次的压缩编码得到的影像数据中包括的运动矢量,进行运动补偿;上述运动补偿部判断上述代码转换器对于通过上述再次的压缩编码得到的影像数据是否附加了识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的;在附加了上述识别符的情况下,按照上述第一压缩编码方式进行运动补偿。
为了达到上述目的,本发明中的解码方法根据通过上述代码转换方法进行的再次的压缩编码得到的影像数据,生成再现图像,其特征在于,具有以下步骤:(a)判断在通过上述再次的压缩编码所得到的影像数据中是否附加了识别符,该识别符表示影像数据中包括的运动矢量是按照上述第一压缩编码方式制作的;以及(b)在上述(a)的步骤中,在判断为附加了上述识别符的情况下,按照上述第一压缩编码方式进行运动补偿。
根据本发明,能够对于按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据,按照第二压缩编码方式进行再次编码。这时,原影像数据的运动矢量被原样利用,而不再次制作,所以不像利用现有的闭环架构的情况那样需要大存储器资源或电路规模。因此,根据本发明,抑制了代码转换器相关的成本上升。另外,在本发明中,不进行DCT(离散余弦变换)或IDCT(逆离散余弦变换)便能够进行代码转换,所以还谋求了处理时间的缩短。
附图说明
图1是表示本发明的实施方式中的代码转换器的概略结构的框图。
图2是表示MPEG2影像数据的数据结构的图。
图3是表示运动补偿所需的信息的一例的图。
图4是说明第一压缩编码方式(MPEG2方式)中的预测插入信号的生成的图。
图5是说明第二压缩编码方式(H.264方式)中的预测插入信号的生成的图。
图6是说明本发明的实施方式中的代码转换方法中的流程的流程图。
图7是表示本发明的实施方式中的解码器的概略结构的框图。
图8是说明本发明的实施方式中的解码方法中的流程的流程图。
具体实施方式
本发明中的代码转换器对按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据进行解码,并对其按照第二压缩编码方式再次进行压缩编码,其特征在于,具备:解码器、语法转换部以及编码器;上述解码器对按照上述第一压缩编码方式进行了压缩编码的上述影像数据进行解码,从解码后的上述影像数据中,提取按照上述第一压缩编码方式制作的运动矢量,并将提取的上述运动矢量输入至上述编码器,另外,对上述运动矢量以外的解码后的上述影像数据进行逆量化,并将逆量化后的上述影像数据输入至上述语法转换部;上述语法转换部将由上述解码器输入的上述影像数据的语法转换为由上述第二压缩编码方式规定的语法;上述编码器对转换了语法的上述影像数据以设定的量化步长值进行量化,将量化后的上述影像数据和从上述解码器输入的上述运动矢量结合,并对其按照上述第二压缩编码方式进行压缩编码,进而,在按照上述第二压缩编码方式进行了压缩编码的数据中,附加识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的。
本发明中的代码转换方法对按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据进行解码,并对其按照第二压缩编码方式再次进行压缩编码,其特征在于,具有以下步骤:(a)对按照上述第一压缩编码方式进行了压缩编码的上述影像数据进行解码;(b)从在上述(a)的步骤中被解码的上述影像数据中,提取按照上述第一压缩编码方式制作的运动矢量;(c)对上述运动矢量以外的被解码的上述影像数据进行逆量化;(d)将在上述(c)的步骤中进行了逆量化的上述影像数据的语法转换为由上述第二压缩编码方式规定的语法;(e)对在上述(d)的步骤中转换了语法的上述影像数据,以设定的量化步长值进行量化;(f)将在上述(e)的步骤中进行了量化的上述影像数据和在上述(b)的步骤中提取的上述运动矢量结合,并对其按照上述第二压缩编码方式进行压缩编码;以及(g)在上述(f)的步骤中按照上述第二压缩编码方式进行了压缩编码的数据中,附加识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的。
另外,本发明也可以是一种程序,用于具体实现上述本发明中的代码转换器。通过将该程序安装至计算机中执行,能够得到本发明中的代码转换器。进而,记录了该程序的记录介质也是本发明的一个实施方式。
另外,本发明中的解码器根据通过上述代码转换器进行的再次的压缩编码得到的影像数据,生成再现图像,其特征在于,具备:运动补偿部,根据通过上述再次的压缩编码得到的影像数据中包括的运动矢量,进行运动补偿;上述运动补偿部判断上述代码转换器对于由上述再次的压缩编码得到的影像数据是否附加了识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的;在附加了上述识别符的情况下,按照上述第一压缩编码方式进行运动补偿。
本发明中的解码方法根据通过上述代码转换方法进行的再次的压缩编码得到的影像数据,生成再现图像,其特征在于,具有以下步骤:(a)判断在通过上述再次的压缩编码所得到的影像数据中是否附加了识别符,该识别符表示影像数据中包括的运动矢量是按照上述第一压缩编码方式制作的;以及(b)在上述(a)的步骤中,在判断为附加了上述识别符的情况下,按照上述第一压缩编码方式进行运动补偿。
另外,本发明也可以是一种程序,用于具体实现上述本发明中的解码器。通过将该程序安装至计算机中执行,能够得到本发明中的解码器。进而,记录了该程序的记录介质也是本发明的一个实施方式。
在本发明中,作为上述第一压缩编码方式,可以举出MPEG2方式。另外,作为上述第二压缩编码方式,可以举出H.264方式。
以下,对本发明的一个实施方式所涉及的代码转换器、代码转换方法、解码器、解码方式参照图1至图8进行说明。
(关于代码转换器及代码转换方法的说明)
最初,利用图1至图5说明本实施方式中的代码转换器的结构。图1是表示本发明的实施方式中的代码转换器的概略结构的框图。如图1所示,本实施方式中的代码转换器具备解码器1、语法转换部2和编码器3。通过该结构,按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据被解码,并按照第二压缩编码方式被再次进行压缩编码。在本实施方式中,第一压缩编码方式是MPEG2方式,第二压缩编码方式是H.264方式。
解码器1具备解码部4和逆量化部5。解码部4对作为代码转换对象的转换源的影像数据进行解码,生成被进行压缩编码之前的数据。在本实施方式中,作为对象的影像数据是根据MPEG2方式、例如通过哈夫曼(Huffman)编码被压缩编码的MPEG2影像数据(MPEG2ES(基本流:Elementary Stream))。解码部4执行可变长度代码解码(VLD:VariableLength Decoding)。
另外,解码部4从解码后的影像数据中提取根据MPEG2方式制作的运动矢量,并将提取的运动矢量直接输入至编码器3。对于运动矢量,利用图2至图5后述。
逆量化部5对于被解码的影像数据进行逆量化。其中,由逆量化部5进行的逆量化仅对运动矢量以外的被解码的影像数据进行。逆量化部5将进行了逆量化的影像数据输入至语法转换部2。
语法转换部2将由解码器2的逆量化部5输入的影像数据的语法转换为由H.264方式规定的语法。在MPEG2方式中,图片为编码的单位,与此相对,在H.264方式中,片(slice)为编码的单位(参照图2),所以与此对应地转换语法。
具体的,语法转换部2提取转换源的MPEG2影像数据的序列头(SH:Sequence Head)和在各图片的前端附加的图片头(参照图2)。然后,语法转换部2根据这些来制作由H.264方式规定的序列参数集(SPS:Sequence Parameter Set)和图片参数集(PPS:Picture Parameter Set)。
在SPS及PPS之中,分别附加了号码。通过在各片(参照图2)上附加的片头之中指定PPS号码,从而识别要使用哪个PPS。另外,通过在PPS之中指定SPS号码,从而识别各片属于哪个序列。另外,语法转换部2将这些参数集配置在参照它们的数据之前。
进而,语法转换部2还能够进行SEI(补充加强信息:SupplementalEnhancement Information)和AU定界符(接入单元定界符:AccessUnit Delimiter)的附加。SEI是包括各图片的定时信息或随机接入信息等的附加信息在内的头。AU定界符是用于确定图片的前端的符号。
编码器3具备量化部6和编码部7。量化部6对于由语法转换部2转换了语法的影像数据,以设定的量化步长值进行量化。编码部7将由量化部6进行了量化的影像数据和从解码器1输入的运动矢量进行对应,并将它们按照H.264方式进行压缩编码。
具体的,编码部7按照CAVLC(上下文适应性可变长度编码方式:Context-Adaptive Variable Length Coding)、或者CABAC(上下文适应性二元算术编码方式:Context-Adaptive Binary ArithmeticCoding),执行压缩编码。
进而,编码部7在进行了再次编码的影像数据中附加识别符,该识别符表示运动矢量是按照MPEG2方式制作的(即,对于运动矢量,不是按照H.264方式制作的)。然后,编码部7将进行了再次编码的影像数据(H.264ES(基本流:Elementary Stream))向外部输出。
另外,在本实施方式中,编码器3具备比特率控制部8。比特率控制部8根据由解码器1的解码部4解码的数据和由编码器3的编码部7进行压缩编码而制作的影像数据,求出作为目标的比特率。然后,比特率控制部8设定用于达到被求出的比特率的量化步长值(除法值),并将设定的量化步长值输入至量化部6。若输入了量化步长值,则量化部6以输入的值执行量化。
在此,利用图2至图5具体说明运动矢量。首先,对包括运动矢量在内的MPEG2影像数据的整体结构进行说明。图2是表示MPEG2影像数据的数据结构的图。如图2所示,MPEG2影像数据由序列层、GOP(图片组:Group of Picture)层、图片层、片层、宏块层以及块层这6层(阶层)构成。
构成序列层的序列由一个以上的GOP、与其对应的序列头、以及1个序列终止代码(终止符)形成。在序列头中,包括对运动图像序列的特征进行确定的信息,例如画面的纵横的尺寸、纵横比、图像率、量化矩阵等。
构成GOP层的GOP由多个画面(图片)的集合构成。作为图片,存在以下三种,即:通过帧内编码得到的I图片、通过双向预测编码得到的B图片、以及通过顺方向预测编码得到的P图片。
构成图片层的图片由一个运动图像帧构成。虽然没有图示,但在各图片中附加了图片头。在图片头之中,包括表示图片的显示顺序的号码、确定图片的种类的代码等。
构成片层的片是将一个图片切断为带状而得到的,是多个宏块(MB)的集合体。另外,宏块层由作为片的一部分的一个宏块构成。宏块是16像素×16行的正方形的像素块,由亮度块Y和所对应的2个8像素×8行的色差块(Cb、Cr)构成。进而,宏块被细分为作为DCT的处理单位的8像素×8行的块,而该块构成了块层。
在图2中,公开了MPEG2影像数据,但H.264影像数据也具备大致相同的数据结构。其中,如上所述,在H.264方式中,片为编码的单位,所以在一个图片中,还有不同种类的片混杂存在的情况。进而,在H.264方式中,DCT的处理单位是4像素×4行,宏块被进一步细分。
另外,MPEG2方式及H.264方式这两者中进行运动补偿。然后,对于分割运动图像帧而得到的每个运动补偿块,求出运动矢量,并进行运动矢量的编码。作为运动补偿块的尺寸,在MPEG2方式中仅认可16×16。另一方面,在H.264中,作为运动补偿块的尺寸,在16×16之外,还认可16×8、8×16、8×8、8×4、4×8、4×4。
为了进行运动补偿所需的信息被附加至宏块层。图3是表示运动补偿所需的信息的一例的图。如图3所示,在MPEG2方式及H.264方式这两者中,在宏块层中,为了确定运动补偿,附加了各运动补偿块的参照图片号码和各运动补偿块的运动矢量。
另外,为了进行运动补偿,在MPEG2方式及H.264方式的任何一个中,都进行预测插入信号的生成。预测插入信号是具有比整数像素的像素精度低的像素精度的信号,根据参照图片的像素值生成。其中,在两个方式中,预测插入信号的生成方法不同。对于这一点,以下利用图4及图5进行说明。
图4是说明第一压缩编码方式(MPEG2方式)中的预测插入信号的生成的图。图5是说明第二压缩编码方式(H.264方式)中的预测插入信号的生成的图。
如图4所示,在MPEG2方式中,预测插入信号的生成是利用2阶(tap)滤波器,通过在相邻的整数像素信号(□)的中间点上求出两者的平均值(○)、或者通过在4个整数像素信号的中央求出它们的平均值(◇)来进行的。在MPEG2方式中,运动矢量基本上以半像素精度表现。
另一方面,如图5所示,在H.264方式中,预测插入信号的生成利用6阶(tap)滤波器进行。具体的,位于2个整数像素信号(□)的、水平方向的中间位置的(1/2)像素信号(○)通过对在水平方向上排列的6个整数像素信号施以6阶滤波处理来制作。同样的,位于2个整数像素信号(□)的、垂直方向的中间位置的(1/2)像素信号(○)通过对在垂直方向上排列的6个整数像素信号施以6阶滤波处理来制作。
另外,位于4个整数像素信号(□)的中间位置的(1/2)像素信号(◇)通过对在水平方向或垂直方向上排列的6个(1/2)像素信号(○)施以6阶滤波处理来制作。在制作(1/2)像素信号之后,通过平均值滤波器制作(1/4)像素信号(●以及◆)。
像这样,在预测插入信号的生成中,H.264方式与MPEG2方式大为不同。在H.264方式中,与MPEG2方式相比,由于运动矢量的预测精度上升,所以可以进行精度更高的运动补偿。其中,因此,要将按照MPEG2方式制作的运动矢量完全代码转换为按照H.264方式制作的运动矢量,像利用现有的闭环架构的代码转换器那样,需要缓冲存储器或参照存储器。即,对MPEG2影像数据进行逆量化之后,如果不进一步进行IDCT(逆离散余弦变换),然后将得到的图像在存储器上展开,那么难以进行再次编码。
对此,在本实施方式中,如图1所示,解码器1对于运动矢量,在解码之后,保持原样向编码器3输出。在本实施方式中,不再次制作预测插入信号。然后,编码器3对于运动矢量,保持原样进行再次编码。因此,在本实施方式中的代码转换器中,不像利用现有的闭环架构的情况那样需要大存储器资源或电路规模。
接着,利用图6说明本实施方式中的代码转换方法。图6是说明本发明的实施方式中的代码转换方法中的流程的流程图。本实施方式中的代码转换方法通过使图1所示的本实施方式中的代码转换器工作来实施。因此,在以下的说明中,一边适当参照图1,一边与图1所示的代码转换器的工作一起进行说明。
如图6所示,首先,如果变换源的MPEG2影像数据(MPEG2ES)输入至解码器1,那么解码器1的解码部4执行可变长度代码解码(VLD:Variable Length Decoding)(步骤S1)。进而,解码部4从被解码的MPEG2图像数据中仅提取运动矢量,对于提取的运动矢量,输入至编码器3(步骤S2)。解码部4对于运动矢量以外的影像数据,输入至逆量化部5。
接下来,逆量化部5对于输入的影像数据,执行逆量化(步骤S3)。另外,逆量化部5将进行逆量化而得到的影像数据输入至语法转换部2。接着,语法转换部2对于进行了逆量化的影像数据,执行语法的转换(步骤S4)。由此,制作由H.264方式规定的、序列参数集和图片参数集等,并将其加入影像数据中。转换了语法的影像数据被输入至构成编码器3的量化部6。
接着,如果输入了影像数据,则量化部6对该影像数据以设定的量化步长值执行量化(步骤S5)。这时,量化步长值的设定通过比特率控制部8进行。比特率控制部8如上所述,设定量化步长值(除法值)以达到作为目标的比特率。另外,量化部6将进行了量化的影像数据输入至构成编码部3的编码部7。
之后,编码部7对于进行了量化的影像数据按照H.264方式执行再次压缩编码(步骤S6)。另外,编码部7在进行了再次压缩编码的影像数据上附加识别符。该识别符表示运动矢量是按照代码转换前的压缩编码方式(MPEG2方式)制作的,写入至影像数据的用户区域。
像这样,通过执行步骤S1至步骤S6,得到了按照H.264方式进行了再次压缩编码(进行了代码转换)的影像数据。另外,如上所述,在代码转换时没有要求大存储器资源或电路规模,所以根据本实施方式,抑制了与代码转换相关的成本的上升。另外,在本实施方式中,由于不进行DCT或IDCT就能够进行代码转换,所以也谋求了处理时间的缩短。
另外,本实施方式中的代码转换器还能够通过在计算机中安装使其进行图6所示的步骤S1至S6的程序、并执行该程序来实现。这时,计算机的CPU(中央处理单元:central processing unit)作为解码器1、语法转换部2、编码器3执行功能,进行处理。
另外,在执行步骤S6(参照图6)之后从编码器3(参照图1)输出的影像数据中,运动矢量按照MPEG2方式制作,所以严格地说,不是完全的H.264影像数据。因此,解码器在再现被进行了代码转换的影像数据时,如果按照H.264方式进行运动补偿,则存在画质劣化的可能性。
但是,在进行了该代码转换的影像数据中,附加了上述识别符。因此,在对进行了该代码转换的影像数据进行解码时,在解码器侧判断有无识别符,存在识别符的情况下,按照代码转换前的编码方式执行运动补偿即可。这时,不使画质劣化来再现影像。以下说明本实施方式中的解码器及解码方法。
(关于解码器及解码方法的说明)
接着,利用图7及图8说明本实施方式中的解码器及解码方法。本实施方式中的解码器及解码方法能够根据通过本实施方式中的代码转换器及代码转换方法进行了再次编码的影像数据,生成再现图像。
首先,利用图7说明本实施方式中的解码器的结构。图7是表示本发明的实施方式中的解码器的概略结构的框图。如图7所示,解码器具备:运动补偿部14,根据由再次的压缩编码得到的影像数据中包括的运动矢量,进行运动补偿。另外,解码器除此之外还具备解码部11、逆量化部12、IDCT部13、帧存储器15、画面内预测部16以及滤波器17。
若输入了H.264影像数据(H.264ES),则解码部11对其进行解码(熵解码),并将进行了解码的影像数据输入至逆量化部12。逆量化部12对被解码的影像数据进行逆量化,并将进行了逆量化的影像数据输入至IDCT部13。IDCT部13对进行了逆量化的影像数据执行IDCT(逆离散余弦变换),并输出由像素值构成的影像数据。
滤波器17是解块滤波器,对于由IDCT部13输出的影像数据,进行块失真的消除。由滤波器17消除了块失真的影像数据作为再现图像输出至外部,并且储存在帧存储器15中。画面内预测部16在原数据是通过画面内预测编码制作的情况下,根据由IDCT部13输出的影像数据制作运动图像帧。
运动补偿部14利用被储存在帧存储器15中的运动图像帧,执行运动补偿,并制作运动图像帧。由画面内预测部16制作的运动图像帧和运动补偿部14制作的运动图像帧根据再现顺序被加入至由IDCT部13输出的影像数据中。
另外,通常的,运动补偿部14与H.264用的解码器中具备的运动补偿部同样,按照H.264方式执行运动补偿。但是,在本实施方式中,运动补偿部14除了基于执行运动补偿的制作运动图像帧的功能之外,还具备判断有无识别符的功能。进而,运动补偿部14还具备以下功能,即:在判断为附加了识别符的情况下,按照代码转换前的压缩编码方式、即MPEG2方式执行运动补偿。
另外,运动补偿部14在判定为没有附加识别符的情况下,如上所述,按照H.264方式执行运动补偿。“识别符”是图1所示的本实施方式中的代码转换器所制作的识别符,表示运动矢量是按照MPEG2方式制作的。
在此,利用图8说明本实施方式中的解码方法。图8是说明本实施方式中的解码方法中的流程的流程图。本实施方式中的解码方法通过使图7所示的本实施方式中的解码器工作来实施。因此,在以下的说明中,一边适当参照图7,一边与图7所示的解码器的工作一起进行说明。另外,图8仅图示出解码方法中整个步骤之中与运动补偿相关的步骤,即由运动补偿部14执行的步骤。
如图8所示,如果输入了影像数据,则运动补偿部14对输入的影像数据是否包括由代码转换器所附加的“识别符”进行判断(步骤S11)。
在步骤S11的判断的结果是包括“识别符”的情况下,运动补偿部14按照MPEG2方式执行运动补偿(步骤S12)。具体的,运动补偿部14在步骤S12中,以运动矢量为半像素精度为前提,生成运动图像帧。
另一方面,在没有包括“识别符”的情况下,运动补偿部14与通常的H.264用的解码器中具备的运动补偿部同样,按照H.264方式执行运动补偿(步骤S13)。具体的,运动补偿部14在步骤S13中,以根据基于6阶滤波处理的预测插入信号生成了运动矢量为前提,生成运动图像帧。
另外,在步骤S11中的判断在影像数据的输入开始时执行。另外,步骤S12及S13执行到影像数据向图7所示的解码器的输入结束为止。
像这样,如果使用本实施方式中的解码器或解码方法,则能够对由本实施方式中的代码转换器及代码转换方法进行了再次压缩编码的影像数据进行再现。另外,根据本实施方式中的解码器或解码方法,对于由本实施方式中的代码转换器及代码转换方法进行了再次压缩编码的影像数据以外的H.264影像数据,也能够进行再现。
另外,本实施方式中的解码器还能够通过在计算机中安装使其执行图8所示的步骤S11至S13、解码处理、逆量化处理、IDCT处理、画面内预测处理以及解块滤波处理的程序,并执行该程序来实现。这时,计算机的CPU(中央处理单元,central processing unit)作为解码部11、逆量化部12、IDCT部13、运动补偿部14、画面内预测部16执行功能,进行处理。另外,计算机的存储器作为帧存储器15执行功能。
工业可利用性
本发明中的代码转换器及代码转换方法对各种影像设备是有用的,具有工业可利用性。另外,本发明中的解码器及解码方法作为用于再现由本发明中的代码转换器或代码转换方法进行了再次压缩编码的影像数据的解码器及解码方法,具有工业可利用性。

Claims (10)

1、一种代码转换器,对按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据进行解码,并对其按照第二压缩编码方式再次进行压缩编码,其特征在于,
具备:解码器、语法转换部以及编码器;
上述解码器对按照上述第一压缩编码方式进行了压缩编码的上述影像数据进行解码,从解码后的上述影像数据中,提取按照上述第一压缩编码方式制作的运动矢量,并将提取的上述运动矢量输入至上述编码器,另外,对上述运动矢量以外的解码后的上述影像数据进行逆量化,并将逆量化后的上述影像数据输入至上述语法转换部;
上述语法转换部将由上述解码器输入的上述影像数据的语法转换为由上述第二压缩编码方式规定的语法;
上述编码器对转换了语法的上述影像数据以设定的量化步长值进行量化,
将量化后的上述影像数据和从上述解码器输入的上述运动矢量结合,并对其按照上述第二压缩编码方式进行压缩编码,
进而,在按照上述第二压缩编码方式进行了压缩编码的数据中,附加识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的。
2、如权利要求1所述的代码转换器,其中,
上述第一压缩编码方式是MPEG2方式,上述第二压缩编码方式是H.264方式。
3、一种代码转换方法,对按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据进行解码,并对其按照第二压缩编码方式再次进行压缩编码,其特征在于,具有以下步骤:
(a)对按照上述第一压缩编码方式进行了压缩编码的上述影像数据进行解码;
(b)从在上述(a)的步骤中被解码的上述影像数据中,提取按照上述第一压缩编码方式制作的运动矢量;
(c)对上述运动矢量以外的被解码的上述影像数据进行逆量化;
(d)将在上述(c)的步骤中进行了逆量化的上述影像数据的语法转换为由上述第二压缩编码方式规定的语法;
(e)对在上述(d)的步骤中转换了语法的上述影像数据,以设定的量化步长值进行量化;
(f)将在上述(e)的步骤中进行了量化的上述影像数据和在上述(b)的步骤中提取的上述运动矢量结合,并对其按照上述第二压缩编码方式进行压缩编码;以及
(g)在上述(f)的步骤中按照上述第二压缩编码方式进行了压缩编码的数据中,附加识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的。
4、如权利要求3所述的代码转换方法,其中,
上述第一压缩编码方式是MPEG2方式,上述第二压缩编码方式是H.264方式。
5、一种解码器,根据通过上述权利要求1中记载的代码转换器进行的再次的压缩编码所得到的影像数据,生成再现图像,其特征在于,
具备:运动补偿部,根据通过上述再次的压缩编码所得到的影像数据中包括的运动矢量,进行运动补偿;
上述运动补偿部判断上述代码转换器是否对通过上述再次的压缩编码所得到的影像数据附加了识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的;在附加了上述识别符的情况下,按照上述第一压缩编码方式进行运动补偿。
6、如权利要求5所述的解码器,其中,
上述第一压缩编码方式是MPEG2方式,上述第二压缩编码方式是H.264方式。
7、一种解码方法,根据通过上述权利要求3中记载的代码转换方法进行的再次的压缩编码所得到的影像数据,生成再现图像,其特征在于,具有以下步骤:
(a)判断在通过上述再次的压缩编码所得到的影像数据中是否附加了识别符,该识别符表示影像数据中包括的运动矢量是按照上述第一压缩编码方式制作的;以及
(b)在上述(a)的步骤中,在判断为附加了上述识别符的情况下,按照上述第一压缩编码方式进行运动补偿。
8、如权利要求7所述的解码方法,其中,
上述第一压缩编码方式是MPEG2方式,上述第二压缩编码方式是H.264方式。
9、一种程序,用于通过计算机执行代码转换方法,该代码转换方法对按照进行运动补偿帧间差分编码的第一压缩编码方式进行了压缩编码的影像数据进行解码,并对其按照第二压缩编码方式再次进行压缩编码,上述程序的特征在于,使计算机执行以下步骤:
(a)对按照上述第一压缩编码方式进行了压缩编码的上述影像数据进行解码;
(b)从在上述(a)的步骤中被解码的上述影像数据中,提取按照上述第一压缩编码方式制作的运动矢量;
(c)对上述运动矢量以外的被解码的上述影像数据进行逆量化;
(d)将在上述(c)的步骤中进行了逆量化的上述影像数据的语法转换为由上述第二压缩编码方式规定的语法;
(e)对在上述(d)的步骤中转换了语法的上述影像数据,以设定的压缩率进行量化;
(f)将在上述(e)的步骤中量化后的上述影像数据和在上述(b)的步骤中提取的上述运动矢量结合,并按照上述第二压缩编码方式对其进行压缩编码;以及
(g)在上述(f)的步骤中按照上述第二压缩编码方式进行了压缩编码的数据中,附加识别符,该识别符表示上述运动矢量是按照上述第一压缩编码方式制作的。
10、一种程序,用于通过计算机执行解码方法,该解码方法根据通过上述权利要求3中记载的代码转换方法进行的再次的压缩编码所得到的影像数据,生成再现图像,其特征在于,使计算机执行以下步骤:
(a)判断在通过上述再次的压缩编码所得到的影像数据中是否附加了识别符,该识别符表示影像数据中包括的运动矢量是按照上述第一压缩编码方式制作的;以及
(b)在上述(a)的步骤中,在判断为附加了上述识别符的情况下,按照上述第一压缩编码方式进行运动补偿。
CNA2008800011545A 2007-07-11 2008-07-10 代码转换器、代码转换方法、解码器以及解码方法 Pending CN101569203A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP182477/2007 2007-07-11
JP2007182477 2007-07-11

Publications (1)

Publication Number Publication Date
CN101569203A true CN101569203A (zh) 2009-10-28

Family

ID=40228368

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2008800011545A Pending CN101569203A (zh) 2007-07-11 2008-07-10 代码转换器、代码转换方法、解码器以及解码方法

Country Status (5)

Country Link
US (1) US20100020883A1 (zh)
EP (1) EP2077670A4 (zh)
JP (1) JPWO2009008177A1 (zh)
CN (1) CN101569203A (zh)
WO (1) WO2009008177A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102550030A (zh) * 2010-09-16 2012-07-04 松下电器产业株式会社 图像解码装置、图像编码装置、及其方法、程序、集成电路以及代码转换装置

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011112726A1 (en) * 2010-03-10 2011-09-15 Storwize, Inc. Real-time multi-block lossless recompression
US8457311B1 (en) * 2010-04-27 2013-06-04 Adobe Systems Incorporated Protecting video as it is decoded by a codec
JP2012034138A (ja) * 2010-07-29 2012-02-16 Toshiba Corp 信号処理装置及び信号処理方法
RU2609094C2 (ru) * 2011-02-10 2017-01-30 Сони Корпорейшн Устройство и способ обработки изображений
AU2016269467B2 (en) * 2011-02-10 2018-08-16 Sony Group Corporation Image Processing Device and Image Processing Method
TWI463438B (zh) * 2011-03-07 2014-12-01 Ind Tech Res Inst 特徵點描述壓縮方法及特徵點描述壓縮裝置
JP5341952B2 (ja) * 2011-05-30 2013-11-13 株式会社東芝 ビデオサーバ及びデータ収録再生方法
US20130279597A1 (en) * 2012-04-24 2013-10-24 Magnum Semiconductor, Inc. Apparatuses and methods for bitstream bitstuffing
JP2017183910A (ja) * 2016-03-29 2017-10-05 富士通株式会社 画像符号化装置及び画像符号化方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3244399B2 (ja) 1994-03-25 2002-01-07 三洋電機株式会社 圧縮動画像符号信号の情報量変換回路、及び方法
JP2002152755A (ja) * 2000-11-09 2002-05-24 Nippon Telegr & Teleph Corp <Ntt> 映像ストリーム間のトランスコード方法、およびトランスコーダ、並びにトランスコード方法のプログラムを記録した記録媒体
KR100604032B1 (ko) * 2003-01-08 2006-07-24 엘지전자 주식회사 복수 코덱을 지원하는 장치와 방법
US8312499B2 (en) * 2004-09-13 2012-11-13 Lsi Corporation Tunneling information in compressed audio and/or video bit streams
JP2006295502A (ja) * 2005-04-08 2006-10-26 Pioneer Electronic Corp 再符号化装置、再符号化方法、および再符号化用プログラム
JP2006295503A (ja) * 2005-04-08 2006-10-26 Pioneer Electronic Corp 再符号化装置、再符号化方法、および再符号化用プログラム
JP4534935B2 (ja) 2005-10-04 2010-09-01 株式会社日立製作所 トランスコーダ、記録装置及びトランスコード方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102550030A (zh) * 2010-09-16 2012-07-04 松下电器产业株式会社 图像解码装置、图像编码装置、及其方法、程序、集成电路以及代码转换装置
US9185406B2 (en) 2010-09-16 2015-11-10 Panasonic Intellectual Property Management Co., Ltd. Image decoding device, image coding device, methods thereof, programs thereof, integrated circuits thereof, and transcoding device
CN102550030B (zh) * 2010-09-16 2016-07-06 松下知识产权经营株式会社 图像解码装置、图像编码装置、及其方法、程序、集成电路以及代码转换装置

Also Published As

Publication number Publication date
EP2077670A4 (en) 2011-09-28
JPWO2009008177A1 (ja) 2010-09-02
WO2009008177A1 (ja) 2009-01-15
US20100020883A1 (en) 2010-01-28
EP2077670A1 (en) 2009-07-08

Similar Documents

Publication Publication Date Title
CN101569203A (zh) 代码转换器、代码转换方法、解码器以及解码方法
TWI693820B (zh) 為視訊寫碼中非方形區塊判定預測參數
CN110720218B (zh) 与视频译码中的变换处理一起应用的帧内滤波
CN110393010B (zh) 视频译码中的帧内滤波旗标
CN101031086B (zh) 视频信息编码方法及设备和视频信息解码方法及设备
US10382784B2 (en) Method of coding and decoding images, coding and decoding device and computer programs corresponding thereto
CN102783035B (zh) 并行熵编码方法和设备
US20140205006A1 (en) Super macro block based intra coding method and apparatus
KR101356207B1 (ko) 데이터 인코딩/디코딩 방법 및 장치
CN103339939A (zh) 具有自适应分接头大小的低复杂性内插滤波
CN110291789B (zh) 用于选择用于对残差块进行编码/解码的编码模式的方法和装置
CN100555332C (zh) 使用包括多个宏块的预测和非预测画面对画面序列编码的方法和装置
US11695962B2 (en) Encoding and decoding methods and corresponding devices
KR101147744B1 (ko) 비디오 트랜스 코딩 방법 및 장치와 이를 이용한 pvr
CA2810899C (en) Coding and decoding utilizing adaptive context model selection with zigzag scan
CN101594536A (zh) 编码/解码设备、编码/解码方法以及存储介质
KR100827093B1 (ko) 영상 부호화 방법 및 장치
CN101754016A (zh) 用于插入数据的方法、用于读取所插入的数据的方法
CN102396232A (zh) 图像处理装置和方法
CN102783148A (zh) 用于视频编码的方法和装置
CN110536133B (zh) 视频数据解码方法及装置
KR101117000B1 (ko) 화면 내 예측 오프셋을 이용한 부호화/복호화 방법 및 그 장치
Richardson White paper: an overview of H. 264 advanced video coding
US20120147972A1 (en) Image decoding apparatus, image decoding method, image encoding apparatus, image encoding method, and program
US20080049836A1 (en) Method and System for a Fast Video Transcoder

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20091028