CN101543082A - 运动图像解码装置以及运动图像解码方法 - Google Patents

运动图像解码装置以及运动图像解码方法 Download PDF

Info

Publication number
CN101543082A
CN101543082A CNA2008800006388A CN200880000638A CN101543082A CN 101543082 A CN101543082 A CN 101543082A CN A2008800006388 A CNA2008800006388 A CN A2008800006388A CN 200880000638 A CN200880000638 A CN 200880000638A CN 101543082 A CN101543082 A CN 101543082A
Authority
CN
China
Prior art keywords
cloth
width
decoded picture
image
mnemon
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008800006388A
Other languages
English (en)
Other versions
CN101543082B (zh
Inventor
近村启史
田中健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101543082A publication Critical patent/CN101543082A/zh
Application granted granted Critical
Publication of CN101543082B publication Critical patent/CN101543082B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43—Hardware specially adapted for motion estimation or compensation
    • H04N19/433—Hardware specially adapted for motion estimation or compensation characterised by techniques for memory access
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种运动图像解码装置，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n(n为2以上的整数)幅的图像来进行帧间预测的编码方式，所述运动图像解码装置，包括：H.264解码器，利用帧间预测对运动图像数据中包含的编码图像进行解码；外部存储器，保持已解码图像，以使该已解码图像被输出到外部；内部存储器，能够存储n幅已解码图像，该n幅已解码图像是在帧间预测时能够参考的n幅已解码图像；以及第二传输部，将已解码图像从外部存储器传输到内部存储器，使得在对一幅编码图像开始进行解码之前n幅已解码图像被存储在内部存储器。

Description

运动图像解码装置以及运动图像解码方法
技术领域
本发明涉及运动图像解码装置以及运动图像解码方法，其对根据进行帧间预测的编码标准来编码后的编码图像进行解码。
背景技术
在以往的技术中，作为利用针对运动图像数据的帧间差分的压缩编码(以下，简单地称为“编码”)技术中有，MPEG(Moving Picture Expert Group：运动图像专家组)编码技术(参照非专利文献1)。并且，在近些年，采用了实现高压缩的H.264(参照非专利文献2)，以作为编码标准。
并且，在作为针对运动图像数据的编码以及解码的要素技术的帧间预测中，由于利用已解码的图像的信息预测像素值，因此需要存储已解码的图像的存储器。在以往的技术中，因需要的存储容量或芯片面积的关系，而将该存储器设置在包括解码部等的系统LSI的外部(参照专利文献1)。
被存储到外部存储器的图像是正在解码中的图像、有可能正在解码中的图像将要参考的图像以及被输出到显示部的图像的全部。
据此，除了将正在解码中的图像写入到外部存储器的处理以外，还需要以下的工作等，即，为了进行帧间预测而将已解码的图像从外部存储器依次读入到解码部。
尤其在后者的为了进行帧间预测而依次读入已解码的图像的处理中，数据的传输频度以及传输量非常大。因此，存在的问题是，导致外部存储器的存取带宽的增大，并且，因需要作为外部存储器的高速存储器而使成本变高。
对此，在近些年，内置在系统LSI中的大容量存储器(Embedded DRAM)的实用化进展了，并开发了以下的技术，即，除了外部存储器以外，还利用内部存储器，从而减少存取外部存储器。
在专利文献2中公开了以下的技术，即，在MPEG编码处理中，通过将用于运动检索处理的数据写入到内部存储器以及外部存储器两者，并将需要的数据配置在广频带的内部存储器，从而提高运动检索处理的处理效率(参照专利文献2)。
专利文献1：(日本)特开2004-215049号公报
专利文献2：(日本)特开2002-218474号公报
非专利文献1：ITU-T劝告H.262“Information technology-Generic coding of moving pictures and associated audio information：Video”
非专利文献2：ITU-T劝告H.264“Advanced video coding for genericaudiovisual services”
在所述专利文献2中说明了，在编码处理中，在内部具有存储参考图像的帧存储器的情况下的结构。
在将这些结构应用到解码处理的情况下，在H.264标准中，将已解码的数据，即将帧间预测所需要的图像的数据，为了利用于帧间预测而写入到内部存储器，与此同时，为了输出到显示器等的外部装置而写入到外部存储器。
在此情况下存在的问题是，由于在内部存储器中记忆正在解码中的图像和正在解码中的图像所需要的能够参考的图像，因此导致内部存储器所需要的容量增加。
发明内容
鉴于所述以往的问题，本发明的目的在于提供一种运动图像解码装置，其利用帧间预测对编码图像进行解码，并且，不使解码所需要的存储容量增加而高效率地进行解码处理。
为了解决所述以往的问题，本发明的运动图像解码装置，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述运动图像解码装置，包括：解码单元，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；第一记忆单元，保持通过所述解码单元得到的已解码图像，以使通过所述解码单元得到的已解码图像被输出到外部；第二记忆单元，能够存储n幅已解码图像，该n幅已解码图像是在所述解码单元进行帧间预测时能够参考的n幅已解码图像；以及传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在由所述解码单元对一幅编码图像开始进行解码之前所述n幅已解码图像被存储在所述第二记忆单元。
根据该结构，解码单元参考的最多n幅已解码图像，在该解码前，从第一记忆单元被传输到第二记忆单元，该第二记忆单元是解码单元进行帧间预测时的参考目标。
因此，不需要像以往的技术那样在对某个编码图像正在进行解码中将该解码结果的数据蓄积到第二记忆单元。
也就是，本发明的运动图像解码装置能够，只将解码对象的编码图像能够参考的已解码图像，记忆到作为帧间预测时的参考目标的第二记忆单元。据此，能够防止第二记忆单元的必要容量增大。
具体而言，能够将第二记忆单元的容量变为能够存储n幅已解码图像的容量。
并且，解码单元，只要向第二记忆单元存取，就能够取得应该参考的所有的已解码图像。因此，能够高效率地进行解码处理。
例如，在以集成电路的一个功能来实现解码单元的情况下，能够不使该集成电路具有的内部存储器的容量增加，而将该内部存储器作为第二记忆单元来使用。据此，能够高速地执行伴随帧间预测的解码处理。
并且，也可以是，所述第一记忆单元，在所述解码单元对编码图像进行解码期间，依次蓄积通过所述解码单元得到的已解码数据，从而保持构成已解码图像的所有的数据，该已解码图像是所述编码图像的解码结果，所述传输单元，在对所述一幅编码图像开始进行解码之前，且在按照解码顺序所述一幅编码图像的前一幅编码图像的解码结束后，开始传输所述n幅已解码图像中的一幅已解码图像。
根据该结构，在未进行解码处理的期间，即在从解码单元向第一记忆单元未传输已解码的数据的期间，能够将已解码图像传输到第二记忆单元。因此，能够使运动图像解码装置高效率地工作。
并且，也可以是，所述传输单元，在所述传输中，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，该已解码图像是所述n幅已解码图像中的一幅，也是所述前一幅编码图像的解码结果。
如此，在某个图像的解码结束后，只将该解码后的图像的数据从第一记忆单元传输到第二记忆单元，从而能够更减少从第一记忆单元向第二记忆单元的数据传输量。
并且，也可以是，本发明的运动图像解码装置，还包括：判断单元，判断在对所述一幅编码图像进行解码时，多个已解码图像的每一个是否被参考，所述传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在对所述一幅编码图像开始进行解码之前n幅已解码图像被存储在所述第二记忆单元，该n幅已解码图像是由所述判断单元判断为在对所述一幅编码图像进行解码时被参考的n幅已解码图像。
根据该结构，只实际参考的已解码图像被存储到第二记忆单元。因此，能够减少数据传输所需要的处理负荷。
并且，也可以是，所述传输单元，只将n幅已解码图像中的所述第二记忆单元未存储的已解码图像从所述第一记忆单元传输到所述第二记忆单元，该n幅已解码图像是由所述判断单元判断为在对所述一幅编码图像进行解码时被参考的n幅已解码图像。
根据该结构，传输单元，不会将已经存储在第二记忆单元的已解码图像，从第一记忆单元传输到第二记忆单元。也就是，数据传输所需要的处理效率会提高。
并且，也可以是，所述解码单元和所述第二记忆单元在一个集成电路中，所述第一记忆单元被配置在所述集成电路的外部。
根据该结构，通过将集成电路的内部存储器作为第二记忆单元使用，从而能够实现高速地进行解码处理的运动图像解码装置。
并且，也可以是，所述运动图像数据具有的编码图像是通过所述编码方式进行编码而得到的1920像素×1080像素的图像的数据，所述编码方式是指H.264标准所规定的、最多参考四幅图像来进行帧间预测的编码方式，所述解码单元，参考从所述第一记忆单元被传输到所述第二记忆单元的四幅已解码图像中的一幅以上的已解码图像来对所述编码图像进行解码。
根据该结构，能够实现运动图像解码装置，该运动图像解码装置是对根据H.264标准高效率地被压缩编码的运动图像数据进行解码的装置，也是不增加解码所需要的记忆容量而适当地进行解码处理的装置。
并且，本发明的再生装置，再生运动图像数据，所述再生装置，包括：权利要求1所述的运动图像解码装置；输入单元，接受所述运动图像数据的输入，并将其提供给所述运动图像解码装置；以及显示单元，依次显示从所述第一记忆单元输出的多个已解码图像。
据此，能够实现再生装置，该再生装置不增加解码所需要的记忆容量而高效率地解码并再生运动图像数据。
并且，本发明的运动图像解码装置，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述运动图像解码装置，包括：解码单元，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；第一记忆单元，保持通过所述解码单元得到的已解码图像，以使通过所述解码单元得到的已解码图像被输出到外部；第二记忆单元，存储n幅已解码图像，该n幅已解码图像是在所述解码单元进行帧间预测时能够参考的n幅已解码图像；以及传输单元，将已解码图像从所述第二记忆单元传输到所述第一记忆单元，该已解码图像是所述第二记忆单元所存储的一幅以上的已解码图像中的、应该在所述第一记忆单元所存储的已解码图像后被显示的已解码图像。
根据该结构，能够将被参考的已解码图像存储到第二记忆单元，并按照出图的时机将已解码图像从第二记忆单元传输到第一记忆单元。
因此，只要在各个编码图像的解码时向第二记忆单元存取，就能够取得参考图像，并且，比以往更减少第一记忆单元所需要的容量。
而且，也能够以集成电路来实现本发明，该集成电路包括本发明的运动图像解码装置的特征的构成部。在此情况下，能够使用该集成电路具有的内部存储器以作为第二记忆单元，使用配置在该集成电路外部的外部存储器以作为第一记忆单元。
而且，能够以将本发明的运动图像解码装置的特征的构成部的工作作为步骤的运动图像解码方法来实现本发明，也能够以用于使计算机执行这些步骤的程序来实现本发明，还能够以记录有该程序的记录介质来实现本发明。
而且，也能够将该程序通过因特网等传输介质或DVD等记录介质分发。
本发明的运动图像解码装置，只将解码对象的编码图像能够参考的图像，记忆到参考目标的第二记忆单元。据此，能够防止第二记忆单元的容量增大。
因此，本发明能够提供运动图像解码装置以及运动图像解码方法，其利用帧间预测对编码图像进行解码，并且，不增加解码所需要的记忆容量而高效率地进行解码处理。
附图说明
图1是示出本发明的实施例1中的运动图像解码装置的主要功能结构的功能框图。
图2是示出H.264解码器的主要功能结构的功能框图。
图3是实施例1中的运动图像解码装置的处理的流程图。
图4是示出H.264流的阶层构造的图。
图5是实施例1的运动图像解码装置中的解码处理的时序图的一个例子。
图6是示出本发明的实施例2中的运动图像解码装置的主要功能结构的功能框图。
图7是实施例2中的运动图像解码装置的处理的流程图。
图8是示出连续的图像序列的一个例子的图。
图9是示出图像的编码顺序和显示顺序的对应关系的图。
图10是示出本发明的实施例3中的运动图像解码装置的主要功能结构的功能框图。
图11是实施例3中的运动图像解码装置的处理的流程图。
图12是包括利用本发明的集成电路的编码图像的再生装置的结构图。
附图标记
10、20、30运动图像解码装置
50、60、70系统LSI
100、600、900H.264解码器
101、601、901第一传输部
102、602、902第二传输部
103、603、903第三传输部
104、604、904出图部
105、605、905编码数据提供部
106、606、906内部存储器
107、608、908外部存储器
200编码流缓冲器
201可变长解码部
202逆量化部
203帧间预测部
204帧内预测部
205解块滤波部
206解码图像缓冲器
607、907判断部
1000再生装置
1100电路板
1105显示部
1110流输入部
1111外部输出部
具体实施方式
以下，参照附图说明本发明的实施例。
(实施例1)
图1是示出本发明的实施例1中的运动图像解码装置10的主要功能结构的功能框图。
以下，利用图1说明实施例1中的运动图像解码装置10的结构。
如图1示出，实施例1的运动图像解码装置10包括系统LSI50、和配置在系统LSI50外部的外部存储器107。
系统LSI50具有H.264解码器100、第一传输部101、第二传输部102、第三传输部103、出图部104、编码数据提供部105、以及用于帧间预测的内部存储器106。
也就是，在一个LSI(Large Scale Integration：大规模集成电路)中包括这些要素，从而构成系统LSI50。
外部存储器107是本发明的运动图像解码装置中的第一记忆单元的一个例子，也是存储编码图像以及已解码图像的数据的存储器。也就是一种存储器，其保持解码对象的编码图像，并且保持通过H.264解码器100得到的已解码图像，以使通过H.264解码器100得到的已解码图像被输出到外部。
内部存储器106是本发明的运动图像解码装置中的第二记忆单元的一个例子，也是能够存储在通过H.264解码器100进行帧间预测时能够参考的n幅已解码图像的存储器。
而且，该n是编码标准所规定的能够参考的最多幅数，在本实施例中，能够存储四幅HD(High Definition：高清晰度)图像(1920像素×1080像素)。
编码数据提供部105是一种处理部，读取外部存储器107所存储的编码数据，并将其提供给H.264解码器100。
H.264解码器100是本发明的运动图像解码装置中的解码单元的一个例子，也是利用帧间预测对运动图像数据中包含的编码图像进行解码的处理部。
具体而言，H.264解码器100是利用帧间预测处理算法的H.264编码流的解码电路。对于H.264解码器100，在后面利用图2进行详细说明。
第一传输部101是将通过H.264解码器100得到的已解码图像的数据传输到外部存储器107的处理部。
而且，在本说明书以及权利要求书中，“传输”是作为包含“复制”的广义概念来使用，所述“复制”是指在原来的地方保留信息的状态下将该信息复制到其它的地方。
第二传输部102是本发明的运动图像解码装置中的传输单元的一个例子，也是将外部存储器107所存储的已解码图像的数据复制到内部存储器106的处理部。
第三传输部103是将内部存储器106所存储的已解码图像的数据复制到H.264解码器100的处理部。
而且，第一传输部101是本发明的集成电路中的第一传输单元的一个例子，第二传输部102是本发明的集成电路中的第二传输单元的一个例子。
如此，第一传输部101、第二传输部102以及第三传输部103分别是，在构成要素之间复制数据时所使用的。并且，内部存储器106所存储的已解码图像是，在以后的图像的解码时被参考的。
具体而言，内部存储器106，通过从第二传输部102接受外部存储器107所存储的已解码图像的数据，从而存储用于帧间预测处理的已解码图像的数据。
而且，在本实施例中，所有的已解码图像通过第二传输部102从外部存储器107被复制到内部存储器106，其处理是在下一个编码图像的解码开始之前进行的。
而且，在H.264解码器100利用帧间预测来进行解码时，内部存储器106所存储的数据中实际上用于参考的数据通过第三传输部103被复制到H.264解码器100。
出图部104是一种处理部，读取外部存储器107所存储的已解码图像的数据，并将其输出到外部显示器。据此，在与运动图像解码装置10连接的外部显示器上显示已解码图像。
其次，利用图2说明H.264解码器100的结构。
图2是示出H.264解码器100的主要功能结构的功能框图。
如图2示出H.264解码器100具有存储编码流的编码流缓冲器200、可变长解码部201、逆量化部202、帧间预测部203、帧内预测部204、解块滤波部205、以及写出已解码图像的解码图像缓冲器206。
编码流缓冲器200是临时保持所输入的运动图像数据的缓冲器。具体而言，H.264的编码流被输入到编码流缓冲器200。
可变长解码部201是对所输入的编码流实施可变长解码处理的处理部。逆量化部202是对通过可变长解码部201得到的数据进行逆量化处理以及逆整数变换处理的处理部。
帧间预测部203是进行帧间预测处理的处理部，帧内预测部204是进行帧内预测处理的处理部。
具体而言，根据通过可变长解码部201得到的值，来判断在解码该图像时进行帧内预测处理、还是进行帧间预测处理。根据其判断结果，通过帧间预测部203或帧内预测部204的任一方进行预测处理。
解块滤波部205是对通过帧间预测部203或帧内预测部204得到的数据实施滤波处理的处理部。
解码图像缓冲器206是临时保持进行了滤波处理的数据的缓冲器。
解码图像缓冲器206所蓄积的数据，通过第一传输部101被传输到外部存储器107。也就是，外部存储器107，也用于存储H.264解码器100所解码的已解码图像。
其次，说明具有图1以及图2示出的结构的运动图像解码装置10中的H.264解码器100的解码处理的顺序。
在外部存储器107存储有作为解码对象的H.264编码后的运动图像数据的情况下，首先，该运动图像数据通过编码数据提供部105被提供到H.264解码器100。
H.264解码器100，将从编码数据提供部105接受的运动图像数据存储到编码流缓冲器200，并利用可变长解码部201进行可变长解码处理。
根据通过可变长解码处理解码后的信息，在判断为解码对象的图像是不利用帧间预测的图像的种类的情况下，然后通过逆量化部202进行逆量化处理以及逆整数变换处理。
在解码对象的图像是利用帧间预测的图像的情况下，并且，在作为解码单位的宏块(以下，也表示为“MB”)是利用帧间预测的MB的情况下，利用第三传输部103从存储有已解码图像的数据的内部存储器106中取得已解码图像的数据。所取得的数据被输入到帧间预测部203。
帧间预测部203，利用该已解码图像的数据进行帧间预测处理。从帧间预测部203输出的数据，经过解块滤波部205被存储到解码图像缓冲器206。
并且，在解码对象的MB是进行帧内预测的MB的情况下，通过帧内预测部204进行帧内预测处理后，被解码的数据经过解块滤波部205被存储到解码图像缓冲器206。
解码图像缓冲器206所存储的数据，通过第一传输部101被传输到外部存储器107。
在此，在通过H.264解码器100对图像进行解码后，在H.264解码器100不工作的期间，第一传输部101也不传输数据。
并且，在已解码图像的数据被写入到外部存储器107的情况下，在下一个编码图像的解码开始之前，即在未进行通过H.264解码器100的解码处理的期间，利用第二传输部102将有可能在下一个解码中被参考的图像的数据复制到内部存储器106。
而且，在本实施例中，所有的已解码图像从外部存储器107被传输到内部存储器106，以作为有可能被参考的图像。
并且，对于被传输到内部存储器106的已解码图像，根据此后将要被解码的编码图像的图像头(picture header)所示的信息来被判断是否需要。因此，被判断为此后不被参考的已解码图像，即被判断为不需要保留时的已解码图像，从内部存储器106中被删除。
通过其处理，如上所述，在出现以后的解码处理时利用帧间预测的MB的情况下，内部存储器106存储有帧间预测所需要的参考图像的数据，该内部存储器106是帧间预测时的参考目标。
因此，H.264解码器100，不需要向外部存储器107存取。一般而言，向系统LSI的内部存储器的存取能够比向位于外部的存储器的存取更高速地进行。
因此，运动图像解码装置10，不利用高速的外部存储器107，而只向配置在系统LSI50内部的内部存储器160存取，从而能够进行帧间预测处理。
而且，外部存储器107所存储的已解码图像，通过出图部104从外部存储器107中被读出后，被输出到外部显示器。据此，在外部显示器上显示包含该图像的运动图像。
对于如上所述的解码处理的流程，利用图3的流程图进行说明。
图3是实施例1中的运动图像解码装置10的处理的流程图。
首先，H.264解码器100处于初始状态，即处于等待图像解码处理开始的状态(S300)。
在该状态下，例如根据用户的指示，开始解码图像。具体而言，首先，称为图像头的数据由可变长解码部201解码，该图像头存储有使编码流中包含的图像整体具有特征的信息(S301)。
在图像头的解码结束的情况下，然后进行称为切片头(slice header)的数据的解码处理(S302)。
在H.264标准中，从通信路径的抗错性等的观点来，一幅图像被分割为称为切片的多个单位。
图4是示出H.264流的阶层构造的图。
如图4示出，切片是将一个画面的图像以带状来分割为#1至#n的，各个切片由多个宏块(MB)构成。
MB是16×16像素的编码以及解码的单位。也就是，切片是典型的16线的MB的条带。
而且，也能够跨过多个线来构成单一切片。在此情况下，切片由16×n(n是自然数)的MB的条带构成。切片头是配置在包含多个MB的切片的开头的数据，也是在切片内的宏块共通的参数被编码的数据。
在H.264解码器100，在切片头的解码结束的情况下，然后由可变长解码部201对MB的头部的解码开始(S303)。
在MB的头部中包含该MB的详细信息的数据被编码，通过解释该数据，从而能够判定该MB是进行帧间预测的MB还是进行帧内预测的MB(S304)。
在该MB是进行帧内预测的MB的情况下，帧内预测部204对该MB进行帧内预测处理(S307)。从帧内预测部204输出的数据，经过解块滤波部205的解块处理，被存储到解码图像缓冲器206。
解码图像缓冲器206所存储的数据，通过第一传输部101被传输到外部存储器107(S308)。
另一方面，在该MB是利用帧间预测处理的MB的情况下，H.264解码器100利用第三传输部103来取得内部存储器160所存储的已解码图像的数据。帧间预测部203利用取得的已解码图像的数据进行帧间预测处理(S306)。
在帧间预测处理完成后，从帧间预测部203输出的数据，经过解块滤波部205的解块处理，被存储到解码图像缓冲器206。
解码图像缓冲器206所存储的数据，通过第一传输部101被传输到外部存储器107(S308)。
并且，在MB的解码结束后，判定该MB是否为该MB所属的切片的末端的MB(S309)。
因此，在判定为该MB不是切片的末端的MB的情况下(S309的“否”)，然后进行以后的MB的解码处理。在该MB是切片的末端的MB的情况下(S309的“是”)，然后判定该MB是否为图像的末端的MB(S310)。
因此，在判定为该MB不是图像的末端的MB的情况下(S310的“否”)，然后进行以后的切片的解码。在该MB是图像的末端的MB的情况下(S310的“是”)，H.264解码器100使对该图像的解码处理完成。
而且，例如通过可变长解码部201进行所述的判定处理(S309以及S310)。
在所述一系列处理完成时，外部存储器107存储有H.264解码器100所解码的数据的全部。也就是，外部存储器107存储有构成该图像的已解码数据的全部。
如此，解码处理完成后被写出到外部存储器107的已解码图像的数据，通过第二传输部102被传输到内部存储器106(S311)。该传输后，H.264解码器100以规定的定时来开始下一个图像的解码。
然后，例如，直到用户指示结束该运动图像数据的再生为止，或者，直到该运动图像数据整体的解码处理结束为止，反复进行所述处理。
图5是实施例1的运动图像解码装置10中的解码处理的时序图的一个例子。而且，图中的″#0″等编号是识别各个图像的编号。
运动图像解码装置10，如上所述，反复进行以下的处理，即，将解码后用于帧间预测的图像的数据从外部存储器107复制到内部存储器106的处理。
据此，如图5示出，内部存储器106存储有在后续图像的解码处理时所需要的已解码图像的数据的全部。
因此，运动图像解码装置10，在进行后续图像的解码时，能够只向内部存储器106存取来执行帧间预测。
而且，在已解码图像#4被传输到内部存储器106之前，图像#0～图像#3中此后不被参考的一幅以上的图像被删除。
并且，在解码处理停止的状态下，进行从外部存储器107到内部存储器106的数据传输处理。也就是，没有像以往那样在解码处理的期间中已解码数据被传输到内部存储器106的情况。因此，对于内部存储器106的容量，只要是能够存储为了进行帧间预测而必要且最低限度的数据的容量即可。
而且，在H.264标准中规定有等级，该等级用于规定解码器的能力以及被编码的比特流的复杂程度等。并且，按每个等级规定有支持编码工具的范围，该编码工具是标准所规定的编码处理的要素技术。
具体而言，支持全高清晰电视机以及Blu-ray盘等的光盘所支持的1920像素×1080像素的运动图像流的等级中，在H.264的标准上规定有在帧间预测能够参考的已解码图像最多四幅图像。
例如，在实施例1的运动图像解码装置10将该运动图像流作为解码对象的情况下，能够将内部存储器106的容量成为标准所规定的四幅图像的容量。
如上所述，实施例1的运动图像解码装置10，在反复进行的解码处理的停止期间，将用于以后的帧间预测的参考图像从外部存储器107传输到内部存储器106。
也就是，在运动图像解码装置10中，在对一幅编码图像的解码处理的期间中，不发生向内部存储器106的数据传输，而只进行向外部存储器107的数据传输。然后，在该解码处理完成的情况下，直到下一个解码处理开始为止，该已解码图像的数据从外部存储器107被复制到内部存储器106。
据此，与像以往的运动图像解码装置那样将正在解码中的数据向内部存储器和外部存储器同时写入的情况相比，能够减少内部存储器的一幅图像的容量。
具体而言，在本实施例的运动图像解码装置10的情况下，如图5示出，例如对图像#4的解码处理中存在于内部存储器106的数据是，图像#0～图像#3这四幅的数据。也就是，内部存储器106具有四幅图像的容量即可。
然而，在以往的运动图像解码装置的情况下，在对图像#4的解码处理中，解码结束后的MB的数据依次被写入到内部存储器。因此，内部存储器需要五幅图像的容量。这些必要容量的差异是在其它的解码处理的期间也同样发生的。
如此，本实施例的运动图像解码装置10，不会使解码所需要的存储容量增加，具体而言，不会使内部存储器所需要的容量增加。
并且，在解码处理的停止期间，即在不进行通过第一传输部101的向外部存储器107的数据传输的期间，将已解码图像从外部存储器107传输到内部存储器106。因此，不会使运动图像解码装置10的数据传输所涉及的处理负荷不必要地增大。
如此，在实施例1的运动图像解码装置10中，由于从内部存储器106能够取得所有的参考图像，因此能够保证解码处理的迅速性。
而且，通过将只写出到外部存储器107的已解码图像，以此后的解码处理中的帧间预测所需要的定时来传输到内部存储器106，从而与以往相比能够减少内部存储器106的必要容量。
而且，在本实施例中，设想已解码图像的全部从外部存储器107被复制到内部存储器106。
在此，在将多个已解码图像从外部存储器107复制到内部存储器106时，也可以从在进行复制的紧前的解码结束之前已经存储在内部存储器106的图像的数据开始依次进行复制。
并且，也可以从按照解码顺序解码刚结束的图像的数据开始依次进行复制。
也就是，在某一幅编码图像的解码开始之前，内部存储器106存储有有可能在其解码处理中被参考的所有的已解码图像即可。
并且，其存储的顺序不仅限于特定的顺序。并且，在解码处理的一次的停止期间，也可以将多个已解码图像从外部存储器107传输到内部存储器106。
如本实施例，通过按每个停止期间，只将进行紧前的解码处理而得到的一幅已解码图像从外部存储器107复制到内部存储器106，从而能够使从外部存储器107到内部存储器106的一次的数据传输量更减少。
并且，在本实施例中，如图1示出，运动图像解码装置10包括第一传输部101、第二传输部102、第三传输部103以及编码数据提供部105，以分别作为不同的功能框。
然而，它们是在内部存储器106以及外部存储器107的构成要素之间传输数据的单元。因此，也可以以单一的功能框来实现，从而以时分来进行各个部实行的功能。或者，也可以以单一的功能框来实现，从而能够并行执行多个功能。
(实施例2)
图6是示出本发明的实施例2中的运动图像解码装置20的主要功能结构的功能框图。
利用图6说明实施例2中的运动图像解码装置20的结构。
如图6示出，运动图像解码装置20，除了实施例1中的运动图像解码装置10包括的构成要素以外，还包括判断部607。
也就是，运动图像解码装置20包括集成有多个功能的系统LSI60、以及配置在系统LSI60外部的外部存储器608。
系统LSI60具有H.264解码器600、第一传输部601、第二传输部602、第三传输部603、出图部604、编码数据提供部605、以及用于帧间预测的内部存储器606，还具有判断部607。
判断部607是判断多个已解码图像分别在编码图像的解码时是否被参考的处理部。也就是，判断部607具有检测后续的图像将要参考的图像的作用。
具体而言，判断部607，根据对编码图像进行解码时得到的图像头中包含的信息来进行该判断。对于判断的具体例子，在后面利用图8进行说明。
对于其它的各个构成要素的作用，由于与实施例1相同，因此省略说明。
其次，利用图7～图9说明实施例2中的运动图像解码装置20的工作。
图7是实施例2中的运动图像解码装置20的处理的流程图。
如图7示出，实施例2中的运动图像解码装置20的基本处理流程，与图3示出的实施例2中的运动图像解码装置20的处理流程相同。
也就是，在图7中，从等待图像解码开始(S700)到解码后的MB是否为图像的末端的MB的判定(S710)为止的处理，与图3中的各个处理(S300～S310)相对应。
然而，实施例2中的运动图像解码装置20，在解码后的MB是图像的末端的MB的情况下(S710的“是”)，判断部607，判断已解码图像的数据是否用于帧间预测。
因此，只将被判断为用于帧间预测的已解码图像，从外部存储器608传输到内部存储器606。
据此，能够使从外部存储器608到内部存储器606的数据传输量减少。
利用图8以及图9说明，与通过判断部607的参考图像的确定有关的处理的具体例子。
图8是示出连续的图像序列的一个例子的图。而且，以下的说明中示出，H.264的解码处理中的参考图像的判断方法的一个例子。
对于图8示出的各个图像的符号进行说明。描述为I、P、B的符号示出图像的种类。I所示的图像(I图像)是只将帧内预测作为编码工具来利用的图像，也是不利用其它的已解码图像的数据也能够解码的图像。
P所示的图像(P图像)是利用已解码图像的数据进行帧间预测的图像，存在只能参考的一幅图像之类的限制。
B所示的图像(B图像)是与P图像相同进行帧间预测的图像，但也能够同时参考的二幅图像。
而且，被添加到I、P以及B的数字示出编码的顺序。由于按照该编码的顺序来构成编码流，因此该顺序也与解码的顺序一致。
然而，另一方面，由于出图的顺序为I0、B3、B2、B4、P1，因此得知在解码后出图时有可能需要按照规定的顺序重新排列。
在图8示出的例子中，例如P1图像参考I0图像。并且，B2图像参考I0和P1。并且，B3图像参考I0和B2，B4参考B2和P1。
在具有这些图像间的参考关系的流的情况下，例如B3和B4是非参考图像，该非参考图像在对其它的图像进行解码时不被用于帧间预测的参考。由于这些图像在解码后不被参考，因此判断部607判断这些图像不是参考图像。
具体而言，在各个图像的图像头包含一种信息，该信息示出应该将哪个图像作为用于参考的图像来保留、以及参考哪个图像。判断部607，例如从H.264解码器600接受该信息，从而能够判断各个图像是否为参考图像。
该判断后，本实施例的运动图像解码装置20，不会将外部存储器608所存储的B3以及B4的图像的数据复制到内部存储器606。
图9是示出图像的编码顺序和显示顺序的对应关系的图。
而且，图9示出图8所示的处于参考关系的多个图像的编码顺序和显示顺序的对应关系。
如图9示出，首先，对只利用帧内预测的I0图像进行解码，然后，对参考I0图像来进行帧间预测的P1图像进行解码。
并且，由于B2图像的解码是参考I0图像和P1图像来进行的，因此得知I0图像和P1图像的解码后进行B2图像的解码。
这些图像解码顺序和显示顺序的关系是，能够根据存储在所述图像的开头的图像头中包含的信息来判断的。
到此为止进行了解码的I0、P1以及B2的各个图像是，在帧间预测时被参考的图像。
因此，在本结构中，I0图像的解码结束且被写入到外部存储器608后，在P1图像的解码开始之前，I0的数据通过第二传输部602从外部存储器608被传输到内部存储器606。
并且，在P1图像的解码完成的情况下，同样，在B2的解码开始之前P1的数据从外部存储器608被传输到内部存储器606。
另一方面，在B3的解码中利用I0和B2的数据以作为参考图像，在B4的解码中利用B2和P1的数据以分别作为参考图像，但是，通过判断部607判断为在以后的帧间预测中不使用B3以及B4。据此，这些的已解码图像的数据不会被传输到内部存储器606。
如此，在实施例2的运动图像解码装置20中，在通过判断部607只将需要的数据存储在内部存储器606的状态下能够进行解码。并且，经过这些顺序，解码顺序和显示顺序的关系成为像图9那样。
如上所述，实施例2的运动图像解码装置20，包括判断部607，从而针对已解码图像，判断是否应该通过第二传输部602从外部存储器608复制到内部存储器606。据此，能够只将此后实际上用于帧间预测的已解码图像的数据复制到内部存储器606，从而能够减少对传输所需要的数据量。
在此，如上所述，在H.264标准中规定有等级，该等级用于规定解码器的能力等，并且按每个等级规定有支持标准所规定的编码工具的范围。
具体而言，如上所述，支持全高清晰电视机以及Blu-ray盘等的光盘所支持的1920像素×1080像素的运动图像流的等级中，规定有用于帧间预测的已解码图像最多四幅图像。
例如，在实施例2的运动图像解码装置20，将该运动图像流作为解码对象的情况下，也可以将内部存储器606的大小作为标准所规定的四幅图像的容量本身。
而且，对于判断部607具有的判断各个图像是否被参考的功能，也可以是例如H.264解码器600具备的。在此情况下，通过H.264解码器600指示第二传输部602，从而只将被参考的已解码图像从外部存储器608传输到内部存储器606即可。
(实施例3)
图10是示出本发明的实施例3中的运动图像解码装置30的主要功能结构的功能框图。
以下，利用图10说明实施例3的运动图像解码装置30的结构。
如图10示出，运动图像解码装置30的结构与实施例2中的运动图像解码装置20相同。
也就是，运动图像解码装置30包括集成有多个功能的系统LSI70、以及配置在系统LSI70外部的外部存储器908。
系统LSI70具有H.264解码器900、第一传输部901、第二传输部902、第三传输部903、出图部904、编码数据提供部905、以及用于帧间预测的内部存储器906，还具有判断部907。
如此，实施例3中的运动图像解码装置30的结构与实施例2中的运动图像解码装置20的结构相同。
但是，实施例3中的运动图像解码装置30与实施例1中的运动图像解码装置10以及实施例2中的运动图像解码装置20不同，第二传输部902将已解码图像从内部存储器906传输到外部存储器908。
实施例3中的运动图像解码装置30，根据其特征，能够减少外部存储器908的容量。
而且，对于各个构成要素的基本作用，由于与实施例1以及实施例2相同，因此省略说明。
其次，利用图11说明实施例3中的运动图像解码装置30的工作。
图11是实施例3中的运动图像解码装置30的处理的流程图。
首先，H.264解码器900处于初始状态，即处于等待图像解码处理开始的状态(S1000)。
在该状态下，例如，在根据用户的指示开始图像的解码的情况下，H.264解码器900对图像头进行解码(S1001)。
判断部907，根据解码后的图像头中包含的信息来判断该图像是否为用于帧间预测的图像(S1002)。
在该图像不是用于帧间预测的图像的情况下(S1002的“否”)，H.264解码器900，然后进行切片头的解码处理(S1004)。
另一方面，在该图像是用于帧间预测的图像的情况下(S1002的“是”)，H.264解码器900，在以后的处理中将该图像的解码结果只写入到内部存储器906。
在此情况下，在该图像的解码后，在于对后续的图像进行解码时出图的定时的数据，在此时被存储在内部存储器906。于是，为了将该数据出图而传输到外部存储器908，而开始第二传输部902的传输处理(S1003)。
其次进行切片头的解码处理(S1004)、以及宏块头的解码处理(S1005)。
然后，进行正在解码中的MB是否为进行帧间预测的MB的判断(S1006)。在是进行帧间预测的MB的情况下(S1006的“是”)，H.264解码器900，利用第三传输部903来从内部存储器906取得已解码图像的数据。而且，利用取得的已解码图像的数据进行帧间预测处理(S1008)。
并且，在是不进行帧间预测的MB的情况下(S1006的“否”)，进行帧内预测处理(S1009)。
利用帧间预测(S1008)或帧内预测(S1009)来解码的MB，被写出到内部存储器906或外部存储器908的任一方。
具体而言，按照该图像为了帧间预测而是否被后续的图像参考的判断(S1010)的结果来决定输出目标。
在判断部907判断为该图像是被后续的图像参考的图像的情况下(S1010的“是”)，该已解码的MB，利用第三传输部903被传输到内部存储器906(S1012)。
在判断部907判断为该图像是不被后续的图像参考的图像的情况下(S1010的“否”)，该已解码的MB，利用第一传输部901直接被写出到外部存储器908(S1011)。
在MB的解码完成的情况下，判定该MB是否为该MB所属的切片的末端的MB(S1013)。在该MB不是切片的末端的MB的情况下(S1013的“否”)，移向下一个MB的解码处理。
并且，在该MB是切片的末端的MB的情况下(S1013的“是”)，然后判定该MB是否为图像的末端的MB(S1014)。
在该MB不是图像的末端的MB的情况下(S1014的“否”)，移向下一个切片的解码处理。
并且，在该MB是图像的末端的MB的情况下(S1014的“是”)，移向数据传输的完成确认(S1015)。
具体而言，在属于该图像的MB的解码全部完成后，判定从内部存储器906到外部存储器908的出图用数据的传输(S1013)等的、由各个传输部的数据传输是否全部完毕(S1015)。
而且，该判定是例如H.264解码器900与各个传输部通信来进行的。
在传输未完成的情况下(S1015的“否”)，等待传输完成(S1015的“是”)，然后移向下一个图像的解码处理。
运动图像解码装置30，经过以上的顺序，从而能够在解码处理中用于帧间预测的数据全部存储在内部存储器906的状态下开始下一个图像的解码。
据此，不为了帧间预测而向内部存储器906存取也能够进行解码工作，因此不需要高速的外部存储器908。
并且，被写入到外部存储器908的数据是，预定正在出图中的图像后将要出图的图像的数据。据此，为了存储已解码图像的数据而外部存储器908需要的容量是二幅图像的容量即可。
(实施例1～3的补充事项)
在实施例1～3中均说明了H.264的解码处理。但是，本发明能够应用到参考多个帧来对运动图像数据进行编码的任何运动图像编码标准。
并且，本发明也能够应用到例如将编码后的运动图像数据再生的再生装置。
图12是包括利用本发明的集成电路的编码图像的再生装置1000的结构图。
而且，在图12中示出再生装置1000中包括实施例1的运动图像解码装置10的结构，但也可以再生装置1000中包括运动图像解码装置20或运动图像解码装置30，而替代运动图像解码装置10。
如图12示出，再生装置1000包括电路板1100和显示部1105。
电路板1100包括具有系统LSI50和外部存储器107的运动图像解码装置10、流输入部1110、以及外部输出部1111。
系统LSI50是集成多个功能的一个LSI，具有像实施例1中说明那样的功能上的结构。
流输入部1110是本发明的再生装置的输入单元的一个例子，也是从存储卡、硬盘驱动器、光盘驱动器、地波天线、卫星广播天线、以及IP(InternetProtocol：因特网协议)网络等接受输入信号并提取编码流，从而提供给运动图像解码装置10的处理部。
具体而言，流输入部1110所提取的编码流被写入到外部存储器107。被写入到外部存储器107的编码流，与实施例1的处理流程(参照图3)相同被输入到系统LSI50且被解码后，通过第一传输部101被写入到外部存储器107。
而且，流输入部1110是，在图12中被记载为被安装在电路板1100上的另一个电路。但是，流输入部1110也可以在系统LSI50的内部包括、或可以被安装在其它的电路板来与电路板1100连接。
并且，流输入部1110也可以，针对存储卡、硬盘驱动器、光盘驱动器、地波天线、卫星广播天线、以及IP网络等的外部输入分别包括的电路。
被写入到外部存储器107的已解码图像的数据，通过出图部104被输入到外部输出部1111，该外部输出部1111管理显示部1105的显示处理。外部输出部1111，将该图像的数据输出到显示部1105。据此，该图像被显示在显示部1105。
而且，外部输出部1111是在图12中被记载为被安装在电路板1100上的另一个电路。但是，流输入部1110也可以在系统LSI50的内部包括、或可以被安装在其它的电路板来与电路板1100连接。
根据具有这些结构的将编码图像再生的再生装置1000，能够通过具有更少的内部存储器的集成电路来将编码图像再生。
并且，这些再生装置1000，能够应用到将从存储卡、硬盘驱动器、光盘驱动器、地波天线、卫星广播天线等的装置输入的编码流再生的各种设备。
而且，在所有的实施例中，H.264解码器、传输部、编码数据提供部、或出图部等的各个功能框是，以典型的集成电路的LSI来实现的，但也可以将它们分别作为单芯片化，还可以将它们在包括一部分或全部的状态下作为单芯片化。
在此，设想了LSI，但是根据集成度不同，有时被称为IC、超(Super)LSI、特大(Ultra)LSI。
并且，对于集成电路化的方法不仅限于LSI，也可以以专用电路或通用处理器来实现。也可以利用在制造LSI后能够编程的FPGA(FieldProgrammable Gate Array：现场可编程门阵列)、或可重构LSI内部的电路单元的连接或设定的可重构处理器。
而且，当然，若因半导体技术的进步或导出的其它的技术而出现代替LSI的集成电路化的技术，则可以利用其技术对功能框进行集成化。
本发明能够提供一种运动图像解码装置，其利用帧间预测对编码图像进行解码，并且，不使解码所需要的存储容量增加而高效率地进行解码处理。因此，本发明的运动图像解码装置能够应用到数字照相机、数字摄像机、DVD、Blu-ray光盘播放机、数字电视机、数字电视机的接收机、汽车导航系统、或与因特网连接的机顶盒等。
权利要求书(按照条约第19条的修改)
1、一种运动图像解码装置，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述运动图像解码装置，包括：
解码单元，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；
第一记忆单元，保持通过所述解码单元得到的已解码图像，以使通过所述解码单元得到的已解码图像被输出到外部；
第二记忆单元，能够存储n幅已解码图像，该n幅已解码图像是在所述解码单元进行帧间预测时能够参考的n幅已解码图像；以及
传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在由所述解码单元对一幅编码图像开始进行解码之前所述n幅已解码图像被存储在所述第二记忆单元。
2、如权利要求1所述的运动图像解码装置，
所述第一记忆单元，在所述解码单元对编码图像进行解码期间，依次蓄积通过所述解码单元得到的已解码数据，从而保持构成已解码图像的所有的数据，该已解码图像是所述编码图像的解码结果，
所述传输单元，在对所述一幅编码图像开始进行解码之前，且在按照解码顺序所述一幅编码图像的前一幅编码图像的解码结束后，开始传输所述n幅已解码图像中的一幅已解码图像。
3、如权利要求2所述的运动图像解码装置，
所述传输单元，在所述传输中，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，该已解码图像是所述n幅已解码图像中的一幅，也是所述前一幅编码图像的解码结果。
4、如权利要求1所述的运动图像解码装置，还包括：
判断单元，判断在对所述一幅编码图像进行解码时，多个已解码图像的每一个是否被参考，
所述传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在对所述一幅编码图像开始进行解码之前n幅已解码图像被存储在所述第二记忆单元，该n幅已解码图像是由所述判断单元判断为在对所述一幅编码图像进行解码时被参考的n幅已解码图像。
5、如权利要求4所述的运动图像解码装置，
所述传输单元，只将n幅已解码图像中的所述第二记忆单元未存储的已解码图像从所述第一记忆单元传输到所述第二记忆单元，该n幅已解码图像是由所述判断单元判断为在对所述一幅编码图像进行解码时被参考的n幅已解码图像。
6、如权利要求1所述的运动图像解码装置，
所述解码单元和所述第二记忆单元被包含在一个集成电路中，所述第一记忆单元被配置在所述集成电路的外部。
7、如权利要求1所述的运动图像解码装置，
所述运动图像数据具有的编码图像是通过所述编码方式进行编码而得到的1920像素×1080像素的图像的数据，
所述编码方式是指H.264标准所规定的、最多参考四幅图像来进行帧间预测的编码方式，
所述解码单元，参考从所述第一记忆单元被传输到所述第二记忆单元的四幅已解码图像中的一幅以上的已解码图像来对所述编码图像进行解码。
8、一种再生装置，再生运动图像数据，所述再生装置，包括：
权利要求1所述的运动图像解码装置；
输入单元，接受所述运动图像数据的输入，并将其提供给所述运动图像解码装置；以及
显示单元，依次显示从所述第一记忆单元输出的多个已解码图像。
9、一种运动图像解码方法，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述运动图像解码方法，包括：
解码步骤，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；
第一记忆步骤，使第一记忆单元对在所述解码步骤得到的已解码图像进行保持，以使在所述解码步骤得到的已解码图像被输出到外部；以及
传输步骤，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在所述解码步骤对一幅编码图像开始进行解码之前n幅已解码图像被存储在第二记忆单元，该n幅已解码图像是在所述解码步骤进行帧间预测时能够参考的n幅已解码图像，
在所述解码步骤，参考所述第二记忆单元所记忆的所述n幅已解码图像来对所述一幅编码图像进行解码。
10、一种集成电路，用于运动图像解码装置，该运动图像解码装置对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述集成电路，包括：
解码单元，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；
第一传输单元，将通过所述解码单元得到的已解码图像传输到所述集成电路的外部的第一记忆单元；
第二记忆单元，能够存储n幅已解码图像，该n幅已解码图像是在所述解码单元进行帧间预测时能够参考的n幅已解码图像；以及
第二传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在所述解码单元对一幅编码图像开始进行解码之前所述n幅已解码图像被存储在所述第二记忆单元。

Claims (11)

1、一种运动图像解码装置，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述运动图像解码装置，包括：
解码单元，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；
第一记忆单元，保持通过所述解码单元得到的已解码图像，以使通过所述解码单元得到的已解码图像被输出到外部；
第二记忆单元，能够存储n幅已解码图像，该n幅已解码图像是在所述解码单元进行帧间预测时能够参考的n幅已解码图像；以及
传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在由所述解码单元对一幅编码图像开始进行解码之前所述n幅已解码图像被存储在所述第二记忆单元。
2、如权利要求1所述的运动图像解码装置，
所述第一记忆单元，在所述解码单元对编码图像进行解码期间，依次蓄积通过所述解码单元得到的已解码数据，从而保持构成已解码图像的所有的数据，该已解码图像是所述编码图像的解码结果，
所述传输单元，在对所述一幅编码图像开始进行解码之前，且在按照解码顺序所述一幅编码图像的前一幅编码图像的解码结束后，开始传输所述n幅已解码图像中的一幅已解码图像。
3、如权利要求2所述的运动图像解码装置，
所述传输单元，在所述传输中，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，该已解码图像是所述n幅已解码图像中的一幅，也是所述前一幅编码图像的解码结果。
4、如权利要求1所述的运动图像解码装置，还包括：
判断单元，判断在对所述一幅编码图像进行解码时，多个已解码图像的每一个是否被参考，
所述传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在对所述一幅编码图像开始进行解码之前n幅已解码图像被存储在所述第二记忆单元，该n幅已解码图像是由所述判断单元判断为在对所述一幅编码图像进行解码时被参考的n幅已解码图像。
5、如权利要求4所述的运动图像解码装置，
所述传输单元，只将n幅已解码图像中的所述第二记忆单元未存储的已解码图像从所述第一记忆单元传输到所述第二记忆单元，该n幅已解码图像是由所述判断单元判断为在对所述一幅编码图像进行解码时被参考的n幅已解码图像。
6、如权利要求1所述的运动图像解码装置，
所述解码单元和所述第二记忆单元被包含在一个集成电路中，所述第一记忆单元被配置在所述集成电路的外部。
7、如权利要求1所述的运动图像解码装置，
所述运动图像数据具有的编码图像是通过所述编码方式进行编码而得到的1920像素×1080像素的图像的数据，
所述编码方式是指H.264标准所规定的、最多参考四幅图像来进行帧间预测的编码方式，
所述解码单元，参考从所述第一记忆单元被传输到所述第二记忆单元的四幅已解码图像中的一幅以上的已解码图像来对所述编码图像进行解码。
8、一种再生装置，再生运动图像数据，所述再生装置，包括：
权利要求1所述的运动图像解码装置；
输入单元，接受所述运动图像数据的输入，并将其提供给所述运动图像解码装置；以及
显示单元，依次显示从所述第一记忆单元输出的多个已解码图像。
9、一种运动图像解码装置，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述运动图像解码装置，包括：
解码单元，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；
第一记忆单元，保持通过所述解码单元得到的已解码图像，以使通过所述解码单元得到的已解码图像被输出到外部；
第二记忆单元，存储n幅已解码图像，该n幅已解码图像是在所述解码单元进行帧间预测时能够参考的n幅已解码图像；以及
传输单元，将已解码图像从所述第二记忆单元传输到所述第一记忆单元，该已解码图像是所述第二记忆单元所存储的一幅以上的已解码图像中的、应该在所述第一记忆单元所存储的已解码图像后被显示的已解码图像。
10、一种运动图像解码方法，对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述运动图像解码方法，包括：
解码步骤，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；
第一记忆步骤，使第一记忆单元对在所述解码步骤得到的已解码图像进行保持，以使在所述解码步骤得到的已解码图像被输出到外部；以及
传输步骤，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在所述解码步骤对一幅编码图像开始进行解码之前n幅已解码图像被存储在第二记忆单元，该n幅已解码图像是在所述解码步骤进行帧间预测时能够参考的n幅已解码图像，
在所述解码步骤，参考所述第二记忆单元所记忆的所述n幅已解码图像来对所述一幅编码图像进行解码。
11、一种集成电路，用于运动图像解码装置，该运动图像解码装置对具有编码图像的运动图像数据进行解码，该编码图像是通过编码方式进行编码而得到的编码图像，该编码方式是指最多参考n幅的图像来进行帧间预测的编码方式，n为2以上的整数，所述集成电路，包括：
解码单元，利用帧间预测对所述运动图像数据中包含的编码图像进行解码；
第一传输单元，将通过所述解码单元得到的已解码图像传输到所述集成电路的外部的第一记忆单元；
第二记忆单元，能够存储n幅已解码图像，该n幅已解码图像是在所述解码单元进行帧间预测时能够参考的n幅已解码图像；以及
第二传输单元，将已解码图像从所述第一记忆单元传输到所述第二记忆单元，使得在所述解码单元对一幅编码图像开始进行解码之前所述n幅已解码图像被存储在所述第二记忆单元。
CN2008800006388A 2007-05-22 2008-05-14 运动图像解码装置以及运动图像解码方法 Expired - Fee Related CN101543082B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP135137/2007 2007-05-22
JP2007135137 2007-05-22
PCT/JP2008/001207 WO2008146455A1 (ja) 2007-05-22 2008-05-14 動画像復号化装置及び動画像復号化方法

Publications (2)

Publication Number Publication Date
CN101543082A true CN101543082A (zh) 2009-09-23
CN101543082B CN101543082B (zh) 2011-07-20

Family

ID=40316820

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008800006388A Expired - Fee Related CN101543082B (zh) 2007-05-22 2008-05-14 运动图像解码装置以及运动图像解码方法

Country Status (4)

Country Link
US (1) US8681862B2 (zh)
JP (1) JP5173849B2 (zh)
CN (1) CN101543082B (zh)
WO (1) WO2008146455A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103828372A (zh) * 2011-11-24 2014-05-28 联发科技股份有限公司 储存于缓冲装置中的多重图像块编码图像的数据存取方法及装置
US9497466B2 (en) 2011-01-17 2016-11-15 Mediatek Inc. Buffering apparatus for buffering multi-partition video/image bitstream and related method thereof
US9538177B2 (en) 2011-10-31 2017-01-03 Mediatek Inc. Apparatus and method for buffering context arrays referenced for performing entropy decoding upon multi-tile encoded picture and related entropy decoder
CN107925777A (zh) * 2015-08-31 2018-04-17 英特尔公司 用于视频译码的帧重新排序的方法和系统
WO2019047883A1 (en) * 2017-09-08 2019-03-14 Fg Innovation Ip Company Limited DEVICE AND METHOD FOR ENCODING VIDEO DATA BASED ON MULTIPLE REFERENCE LINES

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011024661A (ja) * 2009-07-22 2011-02-10 Daito Giken:Kk 遊技台
JP5803697B2 (ja) * 2012-01-27 2015-11-04 株式会社ソシオネクスト 動画像復号装置及び動画像復号方法

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5880786A (en) 1994-06-15 1999-03-09 Hitachi, Ltd. Apparatus for picture decoding having frame memories commonly connected to one data bus and one address bus
JPH0818953A (ja) 1994-07-01 1996-01-19 Hitachi Ltd 動画像復号表示装置
EP2129133A3 (en) * 1995-08-29 2012-02-15 Sharp Kabushiki Kaisha Video coding device and video decoding device with a motion compensated interframe prediction
US5909224A (en) * 1996-10-18 1999-06-01 Samsung Electronics Company, Ltd. Apparatus and method for managing a frame buffer for MPEG video decoding in a PC environment
JPH10191341A (ja) * 1996-12-24 1998-07-21 Toshiba Corp 画像伸張装置
JP4264571B2 (ja) * 1998-04-09 2009-05-20 ソニー株式会社 ディジタル画像復号装置及び方法、並びに記録媒体
JP3604290B2 (ja) * 1998-09-25 2004-12-22 沖電気工業株式会社 動画像復号方法及び装置
JP2000175201A (ja) * 1998-12-04 2000-06-23 Sony Corp 画像処理装置及び方法、並びに提供媒体
JP3813444B2 (ja) * 1999-03-23 2006-08-23 三洋電機株式会社 ビデオデコーダ
JP3840895B2 (ja) * 2000-11-22 2006-11-01 日本電気株式会社 動画像符号化データ変換装置及びその方法
JP2002218474A (ja) 2001-01-24 2002-08-02 Mitsubishi Electric Corp 画像データ符号化装置
JP3861607B2 (ja) 2001-02-22 2006-12-20 セイコーエプソン株式会社 画像信号復号装置
US20050117643A1 (en) * 2002-04-26 2005-06-02 Nec Corporation Moving image transferring system, moving image encoding apparatus, moving image decoding apparatus, and moving image transferring program
JP2004215049A (ja) 2003-01-07 2004-07-29 Sony Corp 符号化装置および方法、復号装置および方法、並びにプログラム
JP3938368B2 (ja) * 2003-09-02 2007-06-27 ソニー株式会社 動画像データの編集装置および動画像データの編集方法
KR100517906B1 (ko) * 2003-11-27 2005-09-30 (주) 멀티비아 모바일 디바이스용 동영상 압축 방법
KR101024913B1 (ko) * 2004-01-09 2011-03-31 엘지전자 주식회사 Ｖｌｄ 버퍼 관리 장치
JP4414904B2 (ja) * 2004-04-16 2010-02-17 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、及び動画像復号プログラム
JP2006115168A (ja) * 2004-10-14 2006-04-27 Sony Corp 画像復号装置および画像表示装置
JP2006166308A (ja) * 2004-12-10 2006-06-22 Victor Co Of Japan Ltd 復号化装置及び復号化方法
JP2006287583A (ja) * 2005-03-31 2006-10-19 Victor Co Of Japan Ltd 画像データ領域取得補間回路

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9497466B2 (en) 2011-01-17 2016-11-15 Mediatek Inc. Buffering apparatus for buffering multi-partition video/image bitstream and related method thereof
US9538177B2 (en) 2011-10-31 2017-01-03 Mediatek Inc. Apparatus and method for buffering context arrays referenced for performing entropy decoding upon multi-tile encoded picture and related entropy decoder
CN103828372A (zh) * 2011-11-24 2014-05-28 联发科技股份有限公司 储存于缓冲装置中的多重图像块编码图像的数据存取方法及装置
CN107925777A (zh) * 2015-08-31 2018-04-17 英特尔公司 用于视频译码的帧重新排序的方法和系统
US11051026B2 (en) 2015-08-31 2021-06-29 Intel Corporation Method and system of frame re-ordering for video coding
WO2019047883A1 (en) * 2017-09-08 2019-03-14 Fg Innovation Ip Company Limited DEVICE AND METHOD FOR ENCODING VIDEO DATA BASED ON MULTIPLE REFERENCE LINES
US10856010B2 (en) 2017-09-08 2020-12-01 FG Innovation Company Limited Device and method for coding video data based on multiple reference lines

Also Published As

Publication number Publication date
US8681862B2 (en) 2014-03-25
WO2008146455A1 (ja) 2008-12-04
JP5173849B2 (ja) 2013-04-03
CN101543082B (zh) 2011-07-20
JPWO2008146455A1 (ja) 2010-08-19
US20100054332A1 (en) 2010-03-04

Similar Documents

Publication Publication Date Title
CN101543082B (zh) 运动图像解码装置以及运动图像解码方法
CN102263950B (zh) 编码设备和编码方法以及解码设备和解码方法
JP4782181B2 (ja) エントロピー復号化回路、エントロピー復号化方法、およびパイプライン方式を利用したエントロピー復号化方法
WO2007024413A2 (en) Transpose buffering for video processing
US8184700B2 (en) Image decoder
CN101164336A (zh) 影像信息记录装置、影像信息记录方法、影像信息记录程序、以及记录了影像信息记录程序的记录介质
US20060044165A1 (en) Variable length decoding device
CN101472176A (zh) 基于边界强度因子进行去块效应滤波的解码方法和装置
JP3403168B2 (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
KR20000062982A (ko) 압축 후의 화상 데이터의 부호량을 억제하면서, 고속이고또한 고정밀도의 부호화가 실현 가능한 화상 압축 장치
CN103109535B (zh) 图像再生方法、图像再生装置、摄像系统及再生系统
US20030099293A1 (en) Image reproducing method, and image processing method, and image reproducing device, image processing device, and television receiver capable of using the methods
JP2611637B2 (ja) 画像圧縮伸長装置
TWI308459B (en) Context-aware frame memory scheme for motion compensation in video decoding
KR950703838A (ko) 화상 복호화 방법 및 장치와, 화상 부호화 방법 및 장치(Method and apparatus for decoding image and method and apparatus for encoding image)
US8213731B2 (en) Information processing device and method
EP1259073A1 (en) Image reproducing method and image processing method, and image reproducing device, image processing device, and television receiver capable of using the methods
JP2001025018A (ja) ウェーブレット変換装置、符号化復号化装置、ウェーブレット変換処理方法、及び、記録媒体
JP4626707B2 (ja) 情報処理装置および方法
CN103795955B (zh) 电子设备、动态图像再生装置、动态图像解码方法
JP7242246B2 (ja) 画像符号化装置、及びこれらの制御方法、並びにプログラム
CN101516030B (zh) 具有多格式影像编解码功能的数据处理电路及处理方法
CN100544438C (zh) 信号变换、逆变换方法和图象编码、译码装置及方法
JPH0844709A (ja) ２次元逆離散形コサイン変換（ｉｄｃｔ）装置
JP2700355B2 (ja) 画像データの圧縮装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110720

Termination date: 20180514