CN1338861A - 图像译码方法、图像译码装置和数据存储媒体 - Google Patents

图像译码方法、图像译码装置和数据存储媒体 Download PDF

Info

Publication number
CN1338861A
CN1338861A CN01124400A CN01124400A CN1338861A CN 1338861 A CN1338861 A CN 1338861A CN 01124400 A CN01124400 A CN 01124400A CN 01124400 A CN01124400 A CN 01124400A CN 1338861 A CN1338861 A CN 1338861A
Authority
CN
China
Prior art keywords
decoding
frame
mentioned
image
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN01124400A
Other languages
English (en)
Other versions
CN1185860C (zh
Inventor
西孝啓
中谷信太郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1338861A publication Critical patent/CN1338861A/zh
Application granted granted Critical
Publication of CN1185860C publication Critical patent/CN1185860C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明用于在将利用包含画面间预测编码处理的编码方法将图像数据编码而得到的图像编码数据译码时,既使画面间预测编码帧开始进行译码处理时也可以从图像编码数据的输入时刻延迟不大地及紊乱少地进行译码图像的显示。在将图像编码数据译码并根据译码图像数据显示译码图像的图像译码装置100a中,具有将已处理的帧的译码图像数据作为画面间预测编码帧的译码处理使用的参照数据进行存储的帧存储器112a,在图像编码数据的译码处理开始时将帧存储器112a的存储区域进行初始化处理。

Description

图像译码方法、图像译码 装置和数据存储媒体
技术领域
本发明涉及图像译码方法、图像译码装置和数据存储媒体，特别是涉及译码控制或显示控制，使得作为译码处理的对象的开头帧在译码处理时成为参照其他帧的译码图像数据的帧时，可以避免译码开始之后的显示图像的紊乱。
背景技术
为了有效地存储或传输数字图像信息(以下，称为图像数据)，需要将数字图像信息进行压缩编码，现在，作为将数字图像信息压缩的方法，除了以JPEG(Joint Photographic Coding Experts Group)及MPEG(Moving Picture Experts Group)等标准对应的压缩解压处理为代表的离散余弦变换(DCT：Discrete Cosine Transform)外，还有副带、子波、分形等波形编码方法。在MPEG标准对应的压缩处理中，各帧(画面)的图像分割为由16×16像素构成的称为宏块的正方形的区域(编码处理的单位区域)，进而宏块又分割为由8×8像素构成的子块，然后，对于与各帧的图像对应的数字图像信息，对各子块进行DCT处理。通过该DCT处理，可以得到与子块对应的DCT系数。
另外，作为去掉相邻的帧(画面)间的冗长的图像信息而进行编码的方法，有包含使用运动补偿的画面间预测处理的编码方法。在该编码方法中，首先，通过画面间预测处理，参照前画面(已处理的帧)的图像数据预测现画面(成为处理对象的被处理帧)的指定的宏块的图像数据，生成与上述指定的宏块对应的预测数据。即，在上述画面间预测处理中，对于成为被处理帧的处理对象的对象宏块，利用运动矢量指定已处理的帧(参照帧)的参照区域，通过参照该指定的参照区域的图像数据的运动补偿处理，生成与对象宏块的图像数据对应的预测数据。并且，上述指定的宏块的图像数据利用该图像数据与其预测数据的差值数据表示，该差值数据作为上述指定的宏块的图像数据进行波形编码。
这里，利用包含画面间预测处理的编码方法(画面间预测编码处理)进行图像数据的编码的宏块称为画面间宏块(intermacroblock)，另外，利用不包含画面间预测处理的编码方法(画面内编码处理)进行图像数据的编码的宏块称为画面内宏块(intramacroblock)。此外，包含画面间宏块的画面间编码帧称为P帧(predictive-coded grame)或P画面，仅由画面内宏块构成的画面内编码帧称为I帧(intra-coded frame)或I画面。另外，在MPEG对P帧的编码处理中，可以对各宏块选择将宏块作为画面间宏块处理或作为画面内宏块处理。
在可以将具有构成1个场景的任意形状的图像(以下，称为物体)作为单位进行图像信息的处理的MPEG-4中，包含上述物体的矩形区域作为上述帧(画面)进行处理。该矩形区域称为结合框(BBOX)，是具有与物体的宽度相当的宽度和与物体的高度相当的高度的区域。并且，该矩形区域的宽度方向(水平方向)和高度方向(垂直方向)的像素数分别为16的倍数。这是由于上述矩形区域由多个宏块构成的缘故。
另外，在MPEG-4中，作为运动补偿处理，容许与对象宏块对应的运动矢量将已处理的矩形区域外的区域指定为参照区域的非限制运动补偿。这时，作为指定的参照区域的像素值，使用与该参照区域距离最近的已处理的矩形区域内的像素的像素值。
图13是用于说明使用上述非限制运动补偿的画面间预测处理的模式图。上述矩形区域(BBOX)的尺寸与物体的形状变化一起发生变化，但是，在以下的说明中，假定矩形区域(BBOX)的尺寸固定为图13(a)所示的最大尺寸(这里，是4×4宏块)。
图13(b)表示任意形状的物体(飞行体)随着时间的推移从矩形区域的右上方向左下方移动的情况。
在设定了处理时刻(t＝t1)的矩形区域Bx1中，仅出现飞行体Ob的前部，在设定了处理时刻(t＝t2，但是，t2＞t1)的矩形区域Bx2中，出现除了飞行体Ob的层部的大部分。并且，在设定处理时刻(t＝t3，但是，t3＞t2)的矩形区域Bx3中，出现飞行体Ob的全部。
这里，在对矩形区域Bx2的画面间预测编码处理中，已处理的矩形区域Bx1作为参照矩形区域使用。例如，在将矩形区域Bx2的宏块MBa作为画面间宏块的画面间预测编码处理中，矩形区域Bx1内的由16×16像素构成的区域Rra由与宏块MBa对应的运动矢量指定为参照区域，该参照区域Rra的图像数据(像素值)作为宏块MBa的预测数据使用。另一方面，在将矩形区域Bx2的宏块MBb作为画面间宏块的画面间预测编码处理中，矩形区域Bx1以外的由16×16像素构成的区域Rrb由与宏块MBa对应的运动矢量指定为参照区域。这时，由于未定义参照区域Rrb的图像数据(像素值)，所以，如图13(c)所示的那样，将该区域Rrb内的全部像素Prr的像素值作为矩形区域Bx1内的宏块Rmb中与该区域Rrb最接近的像素Pfr的像素值，而作为宏块MBb的预测数据则使用仅由像素Pfr的像素值构成的图像数据。
下面，具体地说明先有的图像译码装置。
图14是用于说明先有的图像译码装置的一例的框图。
该图像译码装置100接收对构成运动图像等图像的一连串的帧的图像数据按各宏块进行编码处理而得到的图像编码数据，对该图像编码数据按各宏块进行译码处理，生成与各宏块对应的译码图像数据。这样的图像译码装置搭载到所谓的电视电话或图像便携式终端等通信机器中。上述编码处理包括使用运动补偿的画面间预测处理、DCT等正交变换处理、量化处理和可变长编码处理等，上述译码处理包括使用运动补偿的画面间预测处理、IDCT等逆正交变换处理、逆量化处理和可变长译码处理等。
即，上述图像译码装置100具有将成为处理对象的被处理帧的对象宏块的图像编码数据101进行可变长译码并输出与该对象宏块对应的频率变换系数数据103和运动矢量数据108的可变长译码器102和将上述频率变换系数数据103进行逆频率变换并输出量化数据117的逆频率变换器104。
这里，上述频率变换系数数据103表示与在编码侧对与对象宏块对应的图像数据按子块单位进行DCT处理而得到的对象宏块对应的DCT系数的数据。上述运动矢量数据108是表示以被处理帧的对象宏块的位置为基准表示进行上述参照帧的像素值的参照的参照区域的位置的运动矢量的数据。上述量化数据117是与表示在编码侧对上述DCT系数进行量化处理而得到的量化系数的数据相当的数据。
另外，上述图像译码装置100还具有对上述量化数据117进行逆量化处理并输出与对象宏块对应的差值数据105的逆量化器118和将通过对象宏块的译码图像数据的预测处理而得到的预测图像数据109与上述对象宏块的差值数据105相加并输出对象宏块的译码图像数据107的加法器106。
这里，上述对象宏块的差值数据105是在译码侧对对象宏块的量化系数进行逆量化处理和逆DCT处理而得到的对象宏块的局部译码图像数据与参照参照帧的图像数据对该局部译码图像数据进行预测处理而得到的对象宏块的预测图像数据的差值数据。
此外，上述图像译码装置100还具有根据上述译码图像数据107显示译码图像的图像显示部119、将从上述加法器106输出的译码图像数据107作为参照帧的图像数据暂时存储的帧存储器112b和根据该帧存储器112b存储的参照帧的图像数据111和上述运动矢量数据108生成对象宏块的预测图像数据109的运动补偿器110。
下面，说明其动作。
在该图像译码装置100中，输入图像编码数据101时，由可变长译码器102对该输入的图像编码数据101进行可变长译码处理，顺序输出与各宏块对应的频率变换系数数据103和运动矢量数据108。
并且，在上述频率变换系数数据103输入上述逆频率变换器104时，该频率变换系数数据103按各子块通过逆频率变换，变换为量化数据117，与各宏块对应的量化数据117向逆量化器118输出。在该逆量化器118中，各宏块的量化数据117通过逆量化处理变换为与各宏块对应的差值数据105，该差值数据105向加法器106输出。
于是，在该加法器106中，作为译码处理的对象的对象宏块的预测图像数据109和与该对象宏块对应的差值数据105相加，并输出该对象宏块的译码图像数据107。
此外，在从该加法器106输出的译码图像数据107输入图像显示部119时，在该图像显示部119中，根据该译码图像数据107进行译码图像的显示。
另一方面，从上述加法器106输出的译码图像数据107作为参照帧的图像数据暂时存储到帧存储器112b中。
另外，在运动补偿器110中，根据帧存储器112b存储的参照帧的图像数据111和上述对象宏块的运动矢量数据生成该对象宏块的预测图像数据109，该预测图像数据109向上述加法器106输出。
然而，在P帧中，通过进行画面间预测而去掉冗长的图像信息，所以，与P帧对应的图像编码数据的代码量通常比I帧的图像编码数据的代码量少。因此，通过传输速度慢的传输路径传输图像信息时，为了提高编码效率，有时仅图像的开头帧作为I帧进行图像数据的编码，其后的帧则全部作为P帧进行图像数据的编码。
进行这样的编码时，为了防止编码侧机器与译码侧机器间运算精度的不同引起的误差或传输错误等影响后面的帧，大多使用称为内部更新的方法。在该方法中，将P帧的指定位置的一定数的宏块作为画面内宏块的编码处理对各P帧顺序变更作为画面内宏块的宏块的位置而进行。
图15是用于说明伴有内部更新的编码处理的图。
在以下的伴有内部更新的编码处理的说明中，以对图像的开头的帧F1，将其作为I帧进行画面内编码处理，而对上述帧F1之后的帧F2～F25，将它们作为P帧进行画面间编码处理的情况作为具体的例子。这里，假定图像的形状和尺寸一定，各帧的尺寸分别为8宏块(水平方向)×6宏块(垂直方向)。另外，作为画面内宏块的宏块为4个。此外，对各宏块F1～F25开始进行译码处理的时刻分别为时刻(t＝t1)～时刻(t＝t25)。
开头的帧F1是I帧，所以，对该帧的全部宏块MB进行不使用画面间预测的画面内编码处理。并且，由于上述帧F1以后的帧F2～F25是P帧，所以对它们进行使用画面间预测的画面间编码处理。
这里，在P帧的编码处理中，进行内部更新，所以，首先，在最初的P帧F2中，从第1行的左边数，第1个～第4个宏块MB1～MB4作为画面内宏块进行处理，在其后的P帧F3中，从第1行的左边数，第5个～第8个宏块MB5～MB8作为画面内宏块进行处理。此外，在P帧F4中，从第2行的左边数，第1个～第4个宏块MB9～MB12作为画面内宏块进行处理。
从以上的说明可知，对于以后的P帧F5～F13，同样也顺序将4个宏块作为画面内宏块进行处理。例如，P帧F7的宏块MB21～MB24、P帧F8的宏块MB25～MB28、和P帧13的宏块MB45～MB48作为画面内宏块进行处理。
在各P帧的编码处理中，即使是成为内部更新的对象的宏块以外的宏块，在画面内像素值的相关比画面间像素值的相关强时，也作为画面内宏块进行处理。另外，通过内部更新作为画面内宏块进行处理的P帧的宏块数不限定4个。
并且，在对P帧F2～F13的编码处理结束时，帧中各宏块位置的宏块MB1～MB48至少1次作为画面内宏块进行了处理。换言之，对P帧F13之后的P帧F14的所有宏块位置的区域，在对P帧F2～F13的编码处理期间至少1次进行了画面间编码处理。
然后，对P帧F14～F25，和P帧F2～F13一样，顺序将4个宏块作为画面内宏块进行编码处理。例如，P帧F14的宏块MB1～MB4、P帧F15的宏块MB5～MB8、和P帧F25的宏块MB45～MB48作为画面内宏块进行处理。
使用这样的内部更新的方法时，在特定的P帧中即使存在由于错误等而不能正确地译码的异常宏块，对于上述特定P帧之后的后续的P帧中与上述异常宏块相同位置的宏块，从该宏块成为画面内宏块的帧开始就可以正确地进行译码处理了。这是由于各P帧中相同宏块位置的宏块周期地(在图15所示的例中，为每12帧)作为画面内宏块进行编码处理的缘故。
例如，即使在P帧F3中有由于错误等不能正确地进行译码的异常宏块MB28(从第4行的左边数，第4个宏块)，对于和上述异常宏块MB28相同位置的宏块，从其成为画面内宏块的帧F8开始就可以正确地进行译码处理了。
然而，如上所述，对利用不仅包含画面内编码处理而且包含画面间编码处理的编码方法将图像数据编码而得到的图像编码数据进行译码处理时，对P帧的图像编码数据，将已处理的帧作为参照帧，参照该参照帧的像素值进行画面间译码处理。
因此，在先有的译码装置中，从P帧开始进行译码处理时，参照帧的像素值是不定的，所以，构成译码图像数据的像素值也是不定的。
结果，如上述那样，从P帧开始进行译码处理时，将显示像素值不定的译码图像，从而将发生显示图像的紊乱。
对于显示这种像素值不定的译码图像的问题，在从P帧开始进行译码处理之后，通过至少在对1副I帧的译码处理结束之前不进行译码图像的显示，可以回避上述问题。但是，采取这样的对策时，从图像编码数据输入译码装置之后到显示译码图像的延迟时间将增大。
技术内容
本发明就是为了解决上述问题而提案的，目的旨在提供一种图像译码方法、图像译码装置和数据存储媒体，使得从P帧开始进行译码处理时，可以从译码处理结束的帧开始顺序进行将像素值确定为指定的值的译码图像的显示，并且可以将数据输入的延迟时间抑制得小，从而可以良好地进行译码图像的显示。
本发明(第1方面)的图像译码方法是包括将对用于显示指定的图像的各帧的图像数据进行编码而得到的图像编码数据进行译码从而生成译码图像数据的译码处理，和根据该译码图像数据显示译码图像的显示处理的图像译码方法，其特征在于：上述译码处理包括，不参照译码处理已结束的帧的译码图像数据将成为译码处理的对象的被处理帧的图像编码数据进行译码的画面内译码处理，和参照译码处理已结束的帧的译码图像数据将成为译码处理对象的被处理帧的图像编码数据进行译码的画面间译码处理，在将上述被处理帧的图像编码数据译码时作为所参照的参照帧的已处理的帧的译码图像数据不定时，将上述画面间译码处理采用参照用于显示既定的图像的既定的图像数据来取代该参照帧的译码图像数据的处理。
本发明(第2方面)的特征在于：在第1方面的图像译码方法中，对于成为编码处理的对象的被处理帧的图像数据，对不参照编码处理已结束的帧的图像数据进行画面内编码处理而得到的图像编码数据将上述译码处理利用上述画面内译码处理进行译码，对于成为编码处理的对象的被处理帧的图像数据，对参照编码处理已结束的帧的图像数据进行画面间编码处理而得到的图像编码数据利用上述画面间译码处理进行译码，在最初进行了译码处理的被处理帧是进行了上述画面间编码处理的帧时，将上述画面间译码处理采用参照上述既定的图像数据的处理。
本发明(第3方面)的特征在于：在第1方面的图像译码方法中，在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述既定的图像数据作为初始数据写入的初始化处理。
本发明(第4方面)的特征在于：在第1方面所述的图像译码方法中，在最初译码的被处理帧是进行上述画面内处理的帧时，在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述已定的图像数据作为初始数据写入的初始化处理，在对进行上述画面内编码处理的帧的图像数据的区域检测到错误时，就在检测到该错误的某一区域，显示与上述帧存储器的存储区域存储的图像数据中与检测到上述错误的某一区域对应的区域的像素值。
本发明(第5方面)的特征在于：在第1方面所述的图像译码方法中，在上述被处理帧的图像编码数据中检测到错误时，在将检测到该错误的被处理帧进行译码处理之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述已定的图像数据作为初始数据写入的初始化处理。
本发明(第6方面)的特征在于：在第1方面所述的图像译码方法中，在上述被处理帧的图像编码数据中检测到错误时，在将检测到该错误的被处理帧进行译码处理之前，判断该错误的致命度，如果该错误的致命度高，就对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述已定的图像数据作为初始数据写入的初始化处理，如果该错误的致命度低，就不进行上述初始化处理。
本发明(第7方面)的特征在于：在第1方面所述的图像译码方法中，作为上述已定的图像数据，使用包含文字信息的图像数据。
本发明(第8方面)的特征在于：在第1方面所述的图像译码方法中，在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的一部分存储区域，进行将上述已定的图像数据作为初始数据写入的初始化处理，将在上述帧存储器的一部分存储区域存储的译码图像数据作为上述参照帧的译码图像数据使用。
本发明(第9方面)的特征在于：在第8方面所述的图像译码方法中，将上述画面内编码处理和画面间编码处理对各帧的图像数据按该帧的各单位区域进行，使与上述帧存储器的一部分存储区域相当的图像尺寸与上述编码处理的单位区域的尺寸一致。
本发明(第10方面)的特征在于：在第1方面所述的图像译码方法中，作为上述已定的图像数据，使用由一定的像素值构成的图像数据。
本发明(第11方面)的图像译码方法是包括将对成为编码处理的对象的被处理帧的图像数据、不参照已进行了编码处理的帧的图像数据进行编码的画面内编码处理、和参照使已处理的帧的图像数据进行编码的画面间编码处理中的任一处理、按上述被处理帧的各单位区域进行而得到的图像编码数据进行译码从而生成译码图像数据的译码处理、和根据该译码图像数据显示译码图像的显示处理的图像译码方法，其特征在于：上述译码处理包括不参照译码处理已结束的帧的译码图像数据，将仅由进行了上述画面内编码处理的单位区域构成的画面内编码帧的图像编码数据进行译码的画面内译码处理，和参照译码处理已结束的帧的译码图像数据，将包含进行了上述画面内编码处理的单位区域的画面间编码帧的图像编码数据进行译码的画面间译码处理，不论成为上述译码处理的对象的开头帧是画面内编码帧还是画面间编码帧，都开始进行上述画面内译码处理或画面间译码处理，在上述开头帧是画面间编码帧时，使上述显示处理从该开头帧之后的指定的帧开始根据其译码图像数据开始进行译码图像的显示。
本发明(第12方面)的特征在于：在第11方面所述的图像译码方法中，在上述编码处理对连续的N个(N是自然数)帧完成一连串的画面间编码处理时，为了使被处理帧的所有的单位区域在该一连串的画面间编码处理期间成为至少进行了1次画面内编码处理的区域，对各帧的图像数据进行编码处理，在上述开头帧是画面间编码帧时，使上述显示处理从该开头帧数的第N个帧开始根据其译码图像数据开始进行译码图像的显示。
本发明(第13方面)的特征在于：在第11方面所述的图像译码方法中，在对连续的指定数的帧完成一连串的画面间编码处理时，为了使被处理帧的所有的单位区域在该一连串的画面间编码处理期间成为至少进行了1次画面内编码处理的区域，上述编码处理对各帧的图像数据进行编码处理，在上述开头帧是画面间编码帧时，为了使所有的单位区域在上述一连串的画面间编码处理期间成为至少进行了1次画面内编码处理的区域，检测上述开头帧之后的特定的画面间编码帧，使上述显示处理从该特定的画面间编码帧开始根据其译码图像数据开始进行译码图像的显示。
本发明(第14方面)的图像译码装置是输入将用于显示指定的图像的各帧的图像数据进行编码而得到的图像编码数据，并将该图像编码数据译码从而生成译码图像数据的图像译码装置，其特征在于：具有进行将成为译码处理的对象的被处理帧的图像编码数据、不参照译码处理已结束的帧的译码图像数据进行译码的画面内译码处理、和将成为译码处理的对象的被处理帧的图像编码数据参照译码处理已结束的帧的译码图像数据进行译码的画面间译码处理中某一处理的译码处理部；根据上述译码图像数据显示译码图像的图像显示部；暂时存储上述画面间译码处理时参照的已处理的帧的译码图像数据的帧存储器，和根据从外部供给的初始化控制信号将上述帧存储器进行初始化处理的初始化单元。
本发明(第15方面)的特征在于：在第14方面所述的图像译码装置中，上述初始化控制信号是在译码处理开始时或在上述图像编码数据中检测到错误时从外部供给的信号。
本发明(第16方面)的特征在于：在第14方面所述的图像译码装置中，上述初始化控制信号是在译码处理开始时或在上述图像编码数据中检测到错误并判定错误的致命度高时从外部供给的信号。
本发明(第17方面)的特征在于：在第14方面所述的图像译码装置中，具有根据上述图像编码数据的输入时刻决定开始进行该图像编码数据的译码处理的译码开始时刻并在该译码开始时刻之前将上述初始化控制信号向上述初始化单元输出的初始化控制单元。
本发明(第18方面)的特征在于：在第17方面所述的图像译码装置中，上述初始化控制单元检测上述图像编码数据的错误并根据该错误的发生时刻决定检测到了该错误的上述图像编码数据的译码时刻，在检测到上述错误的图像编码数据的译码时刻之前将初始化控制信号向上述初始化控制单元输出。
本发明(第19方面)的特征在于：在第17方面所述的图像译码装置中，上述初始化控制单元检测上述图像编码数据的错误，判断该错误的致命度，根据该错误的发生时刻决定检测到该错误的上述图像编码数据的译码时刻，如果该错误的致命度高，就在检测到上述错误的图像编码数据的译码时刻之前将初始化控制信号向上述初始化单元输出，如果上述错误的致命度低，就不将初始化控制信号向上述初始化单元输出。
本发明(第20方面)的图像译码装置是将对成为编码处理的对象的被处理帧的图像数据、按上述被处理帧的各单位区域进行不参照已进行了编码处理的帧的图像数据的画面内编码处理、和参照上述已处理的帧的图像数据的画面间编码处理的某一处理而得到的图像编码数据进行译码从而生成译码图像数据的图像译码装置，其特征在于：具有译码处理部、图像显示部、开关和开关控制单元，译码处理部对仅由进行了上述画面内编码处理的单位区域构成的画面内编码帧的图像编码数据，不参照已完成译码处理的帧的译码图像数据进行译码，同时对包含进行了上述画面间编码处理的单位区域的画面间编码帧的图像编码数据，参照已完成译码处理的帧的译码图像数据进行译码，并输出上述译码图像数据；图像显示部根据从上述译码处理部输出的译码图像数据显示译码图像；开关设置在上述译码处理部与上述图像显示部之间；开关控制单元根据上述图像编码数据决定开始进行各帧的译码图像的显示的显示开始时刻，并根据该显示开始时刻控制上述开关的开合。
本发明(第21方面)的数据存储媒体是存储由计算机进行对将用于显示指定的图像的各帧的图像数据进行编码而得到的图像编码数据译码、从而生成译码图像数据的译码处理和根据该译码图像数据显示译码图像的显示处理的图像译码程序的数据存储媒体，其特征在于：上述译码处理包括不参照已完成译码处理的帧的译码图像数据将成为译码处理的对象的被处理帧的图像编码数据进行译码的画面内译码处理和参照已完成译码处理的帧的译码图像数据将成为译码处理的对象的被处理帧的图像编码数据进行译码的画面间译码处理，在将上述被处理帧的图像编码数据译码时作为所参照的参照帧的已处理的帧的图像编码数据不定时，上述画面间译码处理就参照用于显示已定的图像的已定的图像数据，取代该参照帧的译码图像数据进行处理。
本发明(第22方面)的数据存储媒体是存储用于由计算机进行译码处理和显示处理的图像译码程序的数据存储媒体，译码处理将对成为编码处理的对象的被处理帧的图像数据、按上述被处理帧的各单位区域进行不参照已进行了编码处理的帧的图像数据进行编码的画面内编码处理、和参照上述已处理的帧的图像数据进行编码的画面间编码处理中的某一处理而得到的图像编码数据进行译码、从而生成译码图像数据，显示处理根据该译码图像数据显示译码图像，其特征在于：上述译码处理包括不参照已完成译码处理的帧的译码图像数据，将仅由进行了上述画面内编码处理的单位区域构成的画面内编码帧的图像编码数据进行译码的画面内译码处理，和参照已完成译码处理的帧的译码图像数据，将包含进行了上述画面间编码处理的单位区域的画面间编码帧的图像编码数据进行译码的画面间译码处理，不论成为上述译码处理的对象的开头帧是画面内编码帧还是画面间编码帧，都开始进行上述画面内译码处理或画面间译码处理，在上述开头帧是画面间编码帧时，上述显示处理从该开头帧以后的指定的帧开始根据其译码图像数据开始进行译码图像的显示。
如上所述，按照本发明(第1方面)的图像译码方法，在参照已处理的帧的译码图像数据将被处理帧的图像编码数据进行译码的画面间译码处理中，在将上述被处理帧的图像编码数据译码时作为所参照的参照帧的已处理帧的译码图像数据不定时，就参照用于显示既定的图像的既定的图像数据来取代该参照帧的译码图像数据，所以，即使在作为该参照帧的已处理帧的译码图像数据不确定时也可以根据通过对各帧的画面间译码处理而得到的译码图像数据将从图像编码数据的译码开始时的延迟时间抑制小，从而可以良好地进行译码图像的显示。
按照本发明(第2方面)，在第1方面所述的图像译码方法中，在上述译码处理中，利用上述画面内译码处理将对被处理帧的图像数据不参照已处理的帧的图像数据进行画面内编码处理而得到的图像编码数据进行译码，利用上述画面间译码处理将对被处理帧的图像数据参照已处理的帧的图像数据进行画面间编码处理而得到的图像编码数据进行译码，在上述画面间译码处理中，在最初进行译码处理的被处理帧是进行了上述画面间编码处理的帧时，就参照上述既定的图像数据，所以，在从进行了画面间编码处理的画面间编码帧开始进行译码处理时，也可以根据通过对该画面间编码帧的画面间译码处理而得到的译码图像数据将从图像编码数据的译码开始时的延迟时间抑制小，从而可以良好地进行译码图像的显示。
按照本发明(第3方面)，在第1方面所述的图像译码方法中，在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述既定的图像数据作为初始化数据而写入的初始化处理，所以，可以准备各种图像的图像数据作为参照的既定的图像数据，取代对被处理帧的画面间译码处理时已处理的帧的译码图像数据。
按照本发明(第4方面)，在第1方面所述的图像译码方法中，在最初进行译码的被处理帧是进行了上述画面内处理的帧时，在上述译码处理开始之前，也对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述既定的图像数据作为初始化数据而写入的初始化处理，在进行了上述画面内编码处理的帧的图像数据的某一区域检测到错误时，将在检测到该错误的某一区域，显示上述帧存储器的存储区域存储的图像数据的与检测到上述错误的某一区域对应的区域的像素值，所以，在进行了画面内处理的帧中发生了错误时，不论发生该错误的帧是开头帧还是途中的帧，都可以该错误处理统一化，所以，可以减小程序存储用存储器的尺寸。这对便携式终端等要求更小型化的装置是非常有效的。
按照本发明(第5方面)，在第1方面所述的图像译码方法中，在上述被处理帧的图像编码数据中检测到错误时，在将检测到该错误的被处理帧进行译码处理之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述既定的图像数据作为初始化数据而写入的初始化处理，所以，可以在发生错误的图像编码数据的错误区域显示上述帧存储器内的既定图像数据，从而作为与被处理帧对应的译码图像，可以显示像素值一定的图像。
按照本发明(第6方面)，在第1方面所述的图像译码方法中，在上述被处理帧的图像编码数据中检测到错误时，在将检测到该错误的被处理帧进行译码处理之前，判断该错误的致命度，如果该错误的致命度高，就对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述既定的图像数据作为初始化数据而写入的初始化处理，如果该错误的致命度低，就不进行上述初始化处理，所以，在发生了错误时，仅在上述错误的致命度高时才进行帧存储器的初始化处理，从而可以提高显示的图像数据的画质。
按照本发明(第7方面)，在第1方面所述的图像译码方法中，作为上述既定的图像数据，使用包含文字信息的图像数据，所以，在对被处理帧进行画面间译码处理时参照的已处理的帧的译码图像数据中包含很多不定的像素值的状态下，可以将包含各种信息的图像作为译码图像进行显示。
按照本发明(第8方面)，在第1方面所述的图像译码方法中，在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的一部分存储区域进行将上述既定的图像数据作为初始化数据而写入的初始化处理，所以，可以减少进行初始化处理时的数据处理量。
按照本发明(第9方面)，在第8方面所述的图像译码方法中，将上述帧存储器的与进行初始化处理的一部分存储区域相当的图像尺寸采用上述编码处理的单位区域的尺寸，所以，可以使进行初始化处理时的数据处理量成为最小。
按照本发明(第10方面)，在第1方面所述的图像译码方法中，作为上述既定的图像数据，使用由一定的像素值构成的图像数据，所以，可以减小上述既定的图像数据对在译码图像上表示的由画面间译码处理而得到的译码图像数据的影响。
按照本发明(第11方面)的图像译码方法，包括不参照译码处理已完成的已处理的帧的译码图像数据将画面内编码帧的图像编码数据进行译码的画面内译码处理和参照译码处理已完成的已处理的帧的译码图像数据将画面间编码帧的图像编码数据进行译码的画面间译码处理，不论成为上述译码处理的对象的开头帧是画面内编码帧还是画面间编码帧，都开始进行上述画面内译码处理或画面间译码处理，在上述开头帧是画面间编码帧时，就从该开头帧之后的后续的指定的帧开始，根据其译码图像数据开始进行译码图像的显示，所以，可以将从图像编码数据译码开始时的延迟时间抑制小，而且可以不招致极端的译码图像的紊乱而进行译码图像的显示。
按照本发明(第12方面)，在第11方面所述的图像译码方法中，在上述开头帧是画面间编码帧时，根据成为译码处理的对象的被处理帧的所有的宏块都至少1次作为画面内宏块进行处理的周期，从与该开头帧距离与该周期相当的帧数的帧开始，根据其译码图像数据开始进行译码图像的显示，所以，在译码图像的像素值确定为有意义的值时，就立即进行译码图像的显示。即，不仅可以避免显示像素值不定的译码图像，而且可以不等待对与画面内编码帧对应的图像编码数据的译码，在生成像素值一定的译码图像数据的时刻就可以显示该译码图像。
另外，也不必判断被处理帧的所有的宏块是否作为画面内宏块进行了处理。
按照本发明(第13方面)，在第11方面所述的图像译码方法中，在图像编码数据输入之后，在检测到成为译码处理的对象的被处理帧的所有的宏块都至少1次作为画面内宏块进行了处理时，就根据其译码图像数据开始进行译码图像的显示，所以，在译码图像的像素值确定为有意义的值时，就立即进行译码图像的显示。即，可以避免显示像素值不定的译码图像，在生成像素值一定的译码图像数据时，可以立即显示该译码图像。
按照本发明(第14方面)的图像译码装置，具有进行不参照已处理的帧的译码图像数据将被处理帧的图像编码数据译码的画面内译码处理和参照已处理的帧的译码图像数据将被处理帧的图像编码数据译码的画面间译码处理中的某一处理的译码处理部、根据从上述译码处理部输出的译码图像数据显示译码图像的图像显示部和暂时存储上述画面间译码处理时参照的已处理的帧的译码图像数据的帧存储器，根据从外部供给的初始化控制信号将上述帧存储器进行初始化处理，所以，在作为对被处理帧的参照帧的已处理帧的译码图像数据不确定时，也可以根据通过对被处理帧的画面间译码处理而得到的译码图像数据将从图像编码数据的输入时刻开始的延迟时间抑制小，从而可以良好地进行译码图像的显示。
按照本发明(第15方面)，在第14方面所述的图像译码装置中，上述初始化控制信号是在译码处理开始时或在上述图像编码数据中检测到错误时从外部供给的控制信号，所以，在发生了错误的图像编码数据的错误区域可以显示上述帧存储器内的既定的图像数据，作为与被处理帧对应的译码图像，可以显示像素值一定的图像。
按照本发明(第16方面)，在第14方面所述的图像译码装置中，上述初始化控制信号是在译码处理开始时或在上述图像编码数据中检测到错误并判定该检测的错误的致命度高时从外部供给的控制信号，所以，在发生了错误时，仅在上述错误的致命度高时才进行存储器的初始化处理，从而可以提高所显示的图像数据的画质。
按照本发明(第17方面)，在第14方面所述的图像译码装置中，具有根据上述图像编码数据的输入时刻决定该图像编码数据的译码处理开始的译码开始时刻并在该译码开始时刻之前向上述初始化单元输出上述初始化控制信号的初始化控制单元，所以，即使从进行了画面间编码处理的画面间编码帧开始进行译码处理时，也可以根据通过对该画面间编码帧的画面间译码处理而得到的译码图像数据将从图像编码数据的输入时刻开始的延迟时间抑制小，从而可以良好地进行译码图像的显示，另外，由于在装置内部发生初始化控制信号，所以，可以简化与外部装置的接口。
按照本发明(第18方面)，在第17方面所述的图像译码装置中，上述初始化控制单元检测上述图像编码数据的错误，并根据该错误的发生时刻决定检测到该错误的上述图像编码数据的译码时刻，并在检测到上述错误的图像编码数据的译码时刻之前向上述初始化控制单元输出初始化控制信号，所以，可以根据通过对画面间编码帧的画面间译码处理而得到的译码图像数据将从图像编码数据的输入时刻开始的延迟时间抑制小，从而可以良好地进行译码图像的显示，另外，在被处理帧的图像数据中检测到错误时，可以将从上述错误发生时刻开始的延迟时间抑制小，从而可以良好地进行错误处理后的译码图像数据的显示。
按照本发明(第19方面)，在第17方面所述的图像译码装置中，上述初始化控制单元检测上述图像编码数据的错误，判断该错误的致命度，并根据该错误的发生时刻决定检测到该错误的上述图像编码数据的译码时刻，如果该错误的致命度高，在检测到上述错误的图像编码数据的译码时刻之前，向上述初始化单元输出初始化控制信号，如果上述错误的致命度低，就不向上述初始化单元输出初始化控制信号，所以，在发生了错误时，仅在上述错误的致命度高时才进行帧存储器的初始化处理，从而可以提高显示的图像数据的画质。
按照板(第20方面)的图像译码装置，具有不参照已处理的帧的译码图像数据将画面内编码帧的图像编码数据译码而参照已处理的帧的译码图像数据将画面间编码帧的图像编码数据译码的译码处理部、根据从上述译码处理部输出的译码图像数据显示译码图像的图像显示部和设置在上述译码处理部与图像显示部之间的开关，根据上述图像编码数据决定开始进行各帧的译码图像的显示的显示开始时刻，根据该显示开始时刻控制上述开关的开合，所以，可以将从图像编码数据的输入时刻开始的延迟时间抑制小，而且可以不招致极端的译码图像的紊乱而根据各帧的译码图像数据进行译码图像的显示。
具体而言，在进行了译码处理的帧的很多宏块或所有的宏块作为画面内宏块处理之后，可以开始进行译码图像的显示，因此，即使未输入画面内编码帧的图像编码数据，也可以根据通过对画面间编码帧的图像编码数据的译码处理而得到的译码图像数据而从图像编码数据的输入时刻延迟不太多的显示正确的译码图像或接近正确的译码图像。
按照本发明(第21方面)的数据存储媒体，存储由计算机进行将图像编码数据译码的译码处理和显示译码图像的显示处理的图像译码程序，在参照已处理的帧的译码图像数据将被处理帧的图像编码数据译码的画面间译码处理中，在将上述被处理帧的图像编码数据译码时作为参照的参照帧的已处理的帧的译码图像数据不定时，就参照用于显示既定的图像的图像数据，取代该参照帧的译码图像数据，所以，即使作为该参照帧的已处理的帧的译码图像数据不确定时，也可以根据通过对各帧的画面间译码处理而得到的译码图像数据将从图像编码数据的译码开始时的延迟时间抑制小，从而可以利用软件实现用于良好地进行译码图像的显示的译码控制处理。
按照本发明(第22方面)的数据存储媒体，存储用于由计算机进行将对被处理帧的图像数据不参照已处理的帧的图像数据的画面内编码处理和参照上述已处理的帧的图像数据的画面间编码处理中的某一处理按上述被处理帧的各单位区域进行而得到的图像编码数据译码的译码处理和显示译码图像的显示处理的图像译码程序，在上述译码处理中，自适应地切换不参照译码处理已完成的已处理的帧的译码图像数据将画面内编码帧的图像编码数据译码的画面内译码处理和参照译码处理已完成的已处理的帧的译码图像数据将画面间编码帧的图像编码数据译码的画面间译码处理，不论成为上述译码处理的对象的开头帧是画面内编码帧还是画面间编码帧，都开始进行上述画面内译码处理或画面间译码处理，在上述开头帧是画面间编码帧时，就从该开头帧之后后续的指定的帧开始根据其译码图像数据进行译码图像的显示，所以，可以将从图像编码数据的译码开始时的延迟时间抑制小，从而可以利用软件不招致极端的译码图像的紊乱而实现用于进行译码图像的显示的显示控制处理。
附图说明
图1是用于说明本发明实施例1的图像译码装置的框图。
图2是表示在本发明实施例1的图像译码装置中发生错误时的错误处理方法的图，表示被处理帧(图2(a))和参照帧(图2(b))。
图3是在本发明实施例1的图像译码装置中发生错误的被处理帧为I帧时的流程图，表示不进行初始化处理的情况(图3(a))和进行初始化处理的情况(图3(b))。
图4是用于说明本发明实施例1的变形例的图像译码装置的框图。
图5是用于说明上述实施例1的变形例的图像译码装置的动作的模式图，表示被处理帧(图5(a))和参照帧(图5(b))。
图6是表示在上述实施例1的变形例的图像译码装置中致命的错误的一例的图。
图7是在上述实施例1的变形例的图像译码装置中帧存储器的数据区域的模式图，是表示A尺寸的存储区域(图7(a))和B尺寸的存储区域(图7(b))的图。
图8是用于说明本发明实施例2的图像译码装置的框图。
图9用于说明判断上述实施例2的图像译码装置中被处理帧的所有的宏块是否作为画面内宏块进行处理的处理的模式图。
图10是用于说明本发明实施例2的变形例1的图像译码装置的框图。
图11是用于说明本发明实施例2的变形例2的图像译码装置的框图。
图12是用于说明存储用于由计算机进行上述各实施例的编码和译码处理的程序的数据存储媒体(图12(a)、(b))和上述计算机系统(图12(c))的图。
图13是用于说明MPEG-4的非限制运动补偿的模式图，表示矩形区域(BBOX)(图13(a))、矩形区域内的物体的变化(图13(b))和参照矩形区域外的参照区域(图13(c))。
图14是用于说明先有的图像译码装置的框图。
图15是用于说明在先有的图像译码装置的译码处理中使用的内部更新处理的模式图。
具体实施方式
下面，说明本发明的实施例。
实施例1.
图1是表示本发明实施例1的图像译码装置的结构的框图。
本实施例1的图像译码装置100a是搭载到电视电话等通信机器上的译码装置，具有可以将其数据记录区域进行初始化处理的结构的帧存储器112a，取代先有的图像译码装置100的结构的帧存储器112b，此外，还具有根据外部的初始化控制信号113将上述帧存储器112a进行初始化处理的初始化单元115。
具体而言，在译码处理开始时从外部供给初始化控制信号113时，作为上述初始化处理，上述初始化单元115对帧存储器112a的记录区域利用由用于进行全面篮或灰色等指定的画面显示的一定的像素值构成的初始化数据114进行上写入其不定值的处理。并且，在搭载了图像译码装置100a的通信机器的电源接通时，上述初始化控制信号113就供给上述图像译码装置100a的初始化单元115。
该图像译码装置100a的其他结构和先有的图像译码装置100相同。
下面，说明其动作。
在本实施例1中，在搭载了图像译码装置100a的通信机器的电源接通时，上述初始化控制信号113就供给上述图像译码装置100a的初始化单元115，并且，开始进行输入的图像编码数据101的译码处理。
于是，在上述帧存储器112a中，由初始化单元115对其数据记录区域全体设定由用于进行全面篮或灰色等画面显示的一定的像素值构成的初始化数据114的处理比在译码处理中参照帧存储器112a的处理早。
并且，在实施例1中，进行图像编码数据101的译码处理，但是，该译码处理除了增加了上述帧存储器112a的初始化数据设定外，和先有的图像译码装置100相同。即，用可变长译码器102进行图像编码数据101的可变长译码处理，顺序输出与各宏块对应的频率变换系数数据103和运动矢量数据108。
上述频率变换系数数据103通过逆频率变换器104和逆量化器118的处理，变换为差值数据105，进而由加法器106将对象宏块的差值数据105与对象宏块的预测图像数据109相加，并将该对象宏块的译码图像数据107向图像显示部119和帧存储器112a输出。由该图像显示部119根据上述译码图像数据107进行译码图像的显示，由帧存储器112a向该数据记录区域的与该对象宏块对应的部分写入该宏块的译码图像数据107。
并且，在完成1帧的图像编码数据的译码处理时，与1帧对应的译码图像数据107作为参照图像数据111存储到帧存储器112a中。
例如，在成为译码处理的对象的开头帧是P帧时，在对该开头帧完成译码处理的时刻，将初始化数据与差值数据相加而得到的译码图像数据就作为对上述开头帧后的下一帧的参照图像数据存储到帧存储器112a中。这时的参照图像数据由于上述差值数据的信息量非常小而与初始化数据非常接近。
另外，在成为译码处理的对象的开头帧为I帧时，初始化单元115可以不利用初始化控制信号113对帧存储器112a进行初始化处理。并且，这时，在完成对开头帧的译码处理的时刻，与作为上述开头帧的I帧对应的译码图像数据就作为对上述开头帧后的下一帧的参照图像数据存储到帧存储器112a中。
并且，由运动补偿器110根据帧存储器112a存储的参照图像数据111和对象宏块的运动矢量数据108生成对象宏块的预测图像数据109，并将该预测图像数据109向上述加法器106输出。
这样，在本实施例1中，在将图像编码数据101译码并根据译码图像数据107将译码图像显示在图像显示部119上的图像译码装置100a中，具有将已处理的帧的译码图像数据107作为画面间预测编码帧的译码处理使用的参照图像数据111进行存储的帧存储器112a，在图像编码数据的译码处理开始时对帧存储器112a的数据存储区域进行写入初始化数据114的初始化处理，所以，即使从P帧开始进行译码处理时，在与P帧的各画面间宏块对应的译码处理中，也参照上述初始化数据，参照帧的图像数据的像素值就不是不定的，因此，作为与P帧对应的译码图像，就可以显示像素值一定的图像。
另外，在本实施例1中，即使从P帧开始进行译码处理时，也从完成译码处理的帧开始顺序显示对应的译码图像，所以，在输入从P帧开始的图像编码数据时，与将译码图像的显示延迟到至少完成对1个I帧的译码处理的方法相比，可以缩短从图像编码数据的输入到译码图像的显示的延迟时间。
在上述实施例1中，在开始进行译码处理时对帧存储器112a进行初始化处理，但是，如果进行译码处理并在最初的参照之前可以完成对帧存储器112a的初始化处理，则帧存储器112a的初始化的时刻就可以比译码处理的开始时刻适当地延迟。
此外，在上述实施例1中，在开头帧是I帧时，在开始进行译码处理时初始化单元115可以不对帧存储器112a进行初始化处理，但是，不论开头帧的种类如何，在开始进行译码处理时，一定可以进行帧存储器112a的初始化处理。
下面，说明在被处理帧的图像数据中发生传输错误等错误时的错误处理方法，如图2所示，在上述被处理帧Ft发生错误的区域Rer，显示与参照帧Fr的上述被处理帧的错误区域对应的区域Rer’的像素数据，在上述被处理帧不显示不定值。
具体而言，在发生上述错误的图像编码数据不是开头帧时，不论该帧是I帧还是P帧，在其之前处理的译码图像数据107都存储到帧存储器112a中，所以，如上所述，将该译码图像数据作为参照帧，并在被处理帧的图像数据发生错误的区域显示与该参照帧的上述被处理帧的错误区域对应的区域的图像数据，在发生上述错误的图像编码数据为开头帧时，如果垓图像编码数据是P帧，在译码处理开始之前就已进行了帧存储器112a的初始化处理，所以，进行上述错误处理，如果上述图像编码数据是I帧，就不进行帧存储器112a的初始化处理，所以，在上述错误处理中显示不定值，于是，就进行别的错误处理，显示例如预先对该错误区域进行了编程的既定的像素数据。即，在发生上述错误的图像编码数据是I帧时，它是否为开头帧，错误处理是不同的，如图3(a)的流程图所示的那样，首先在步骤S31判断该被处理帧是否为开头帧，如果该被处理帧是开头帧，在步骤S33就显示对错误区域预先编程的既定值，如果上述被处理帧不是开头帧，在步骤S32就不必对该区域进行显示与参照帧的上述错误区域对应的区域的像素值等处理。
但是，在开始进行译码处理时，不论开头帧的种类如何，在译码处理开始之前如果一定由初始化单元115进行帧存储器112a的初始化处理，在发生上述错误的被处理帧为I帧并且是开头帧时，即使进行上述错误处理，也不显示不定值，在发生错误的帧为I帧时，该帧是否为开头帧，都不必选择不同的错误处理。这样，不论在哪个帧发生错误，都如图3(b)的流程图所示的那样，在步骤S41都可以用对上述被处理帧的错误区域显示参照帧的相同区域的像素值这样的上述错误处理进行处置。结果，就可以使错误处理程序在开头帧和中途帧中共同使用，可以缩小装置内的程序尺寸，从而可以减小程序存储用存储器的尺寸。这对便携式终端等要求小型化的装置是非常有利的。
另外，上述初始化单元115对帧存储器112a的初始化处理，不仅在开始进行译码处理时而且在例如图像编码数据的尺寸改变等上述那样的参照帧存储器112a内的图像数据的错误处理中发生不能处置的错误时也进行，所以，在发生图像编码数据101的传输错误等错误时也可以进行。作为这时的具体的结构，可以是例如在图像译码装置100a的前级设置进行图像编码数据的错误检测的错误检测器，并根据该错误检测器的错误检测输出将上述初始化控制信号113供给初始化单元115的结构。
另外，在上述实施例1中，初始化控制信号113在图像译码装置的外部发生，但是，也可以象以下所示的变形例那样，在该图像译码装置内部发生初始化控制信号113。
另外，在上述实施例1中，应译码的数据采用伴有内部更新进行了编码的图像编码数据，但是，也可以是不伴有内部更新的数据。
实施例1的变形例.
下面，将在图像译码装置内部发生初始化控制信号的图像译码装置作为本发明实施例1的变形例进行说明。
图4是用于说明上述实施例1的变形例的图像译码装置的框图。
本实施例1的变形例的图像译码装置100a1除了实施例1的图像译码装置100a的结构外，具有根据输入图像编码数据101的开头代码的时刻决定译码开始时刻并在该译码开始时刻之前将初始化控制信号113向初始化单元115输出的初始化控制单元116。
在这样的结构的图像译码装置100a1中，在其内部发生初始化控制信号113，所以，可以简化该图像译码装置100a1与其外部装置的接口。
在上述实施例1的变形例中，帧存储器112a的初始化的时刻可以是进行译码处理并在最初参照帧存储器112a之前便可完成初始化处理的时刻。
另外，帧存储器112a的初始化不仅在译码处理的开始时进行而且可以在发生图像编码数据101的传输错误等时进行。
这时，具体而言，上述实施例1的变形例的初始化控制单元116不仅根据输入图像编码数据101的开头代码的时刻进行决定译码开始时刻的处理，而且检测图像编码数据101的错误，同时根据该检测的错误的发生时刻进行决定该错误数据的译码时刻的处理，并在该译码开始时刻或错误数据的译码时刻之前将初始化控制信号113向初始化单元115输出。
这时，不仅在译码开始时而且在传输错误发生时等可以避免显示像素值不定的译码图像，从而可以实现与外部装置的接口简单的图像译码装置。
另外，在上述实施例1及其变形例中，上述初始化数据114采用仅由一定的像素值构成的图像数据，但是，上述初始化数据114不一定必须是这样的图像数据。
例如，在从P帧开始进行译码处理时，对于未进行该P帧的内部更新的宏块，初始化数据114对其译码图像数据107的影响大，所以，作为上述初始化数据114，通过使用包含文字信息的图像数据等减轻用户的不快感(失调感)的图像数据，在参照帧中存在多个未进行内部更新的宏块的期间，作为译码图像，显示减轻用户的不快感(失调感)的图像。
另外，在容许将参照区域外的像素指定为参照像素的运动补偿的译码处理中，如图13(c)所示，参照区域Bx1外的像素Prr指定为参照像素时，参照该参照区域内的像素Pfr进行对象宏块的图像编码数据的译码处理。这样，在参照该参照区域的像素的对象宏块的译码处理中，并不是参照该参照区域全体的像素，所以，在上述实施例1及其变形例中，就不一定必须将帧存储器112a的记录参照数据的区域全体进行初始化处理。
因此，例如可以如图5所示的那样仅将参照帧Fr(图5(b))的一部分区域例如与相当于1个宏块等的区域Rir对应的图像数据初始化，从而可以使用与被处理帧Ft(图5(a))对应的参照帧Fr中已初始化区域Rir的图像数据取代参照帧Fr全体的图像数据。
这样，便可减少帧存储器112a的初始化区域，从而可以减少进行帧存储器的初始化处理时的数据处理量。
另外，在上述实施例1的变形例中，发生图像编码数据101的传输错误等错误时，在初始化控制单元116中检测该错误的发生，并根据该检测的错误的发生时刻输出初始化控制信号113，将帧存储器112a内存储的参照图像数据全体或部分进行初始化处理，但是，在初始化控制单元116中检出图像编码数据101的错误发生的同时判断该错误的致命度，如果该错误是致命的，就输出初始化控制信号113，将帧存储器112n的数据区域进行初始化处理，如果上述错误不是致命的，就可以不进行初始化处理，保持帧存储器112a存储的参照帧的图像数据。
图6是表示发生的错误是致命的时的一例的模式图。
例如，假定向本图像译码装置100a1传送来H263标准的图像编码数据101。在H263标准中，各帧包含决定其图像尺寸的数据(以下，称为源格式(SF))。在该SF上发生错误时，传送来的图像编码数据101的尺寸将发生变化，如图6所示，此前是尺寸A的图像数据(帧F(n-2)～Fn)变为尺寸B的图像数据(帧F(n+1))了。这时，在上述帧F(n+1)为P帧时，就参照作为其前一帧的帧Fn的译码图像数据，但是，作为前一帧的Fn和作为译码中的帧F(n+1)，尺寸不变，另外，这里从前一帧Fn到帧F(n+1)的尺寸的变化不能判断例如是前一帧Fn的尺寸缩小或Fn的某一部分被切除等如何变更，所以，不能规定Fn、F(n+1)两帧中的像素的对应关系，从而不能根据帧Fn预测被处理帧F(n+1)的图像，另外，也不能修复错误。因此，如上所述，在被处理帧的尺寸发生变更等从而发生不能根据前一帧的图像数据唯一地决定处理的致命的错误时，在初始化控制单元116中就判定该错误是致命的错误，并输出初始化控制信号113，为了抑制上述帧F(n+1)的紊乱而按尺寸B将帧存储器112a进行初始化处理。另外，上述帧Fn作为用户确认的图像示于图6，但是，通常在存储器内如图7所示的那样，尺寸A的帧Fn如图7(a)那样、尺寸B的帧F(n+1)如图7(b)那样按1维排列记录各像素值。因此，如上所述，想将帧存储器112a按尺寸B进行初始化处理时，可以使如图7(a)所示的那样将帧存储器112a访问到A尺寸的区域的情况通过如图7(b)所示的那样只能访问到B尺寸的区域而实现。
另一方面，在上述初始化控制单元116中判定发生的错误不是上述那样的例如图像数据的尺寸发生变化等致命的错误时，上述初始化控制单元116就不输出初始化控制信号113，保持帧存储器112a存储的参照帧的图像数据，并利用该图像数据进行错误处理。
这样，在初始化控制单元116中，就在检测图像编码数据101的错误的同时判断该错误的致命度，判断是否将帧存储器112a的数据区域进行初始化处理，这样，在可以利用帧存储器112a内存储的译码图像数据的致命度低的错误中，就可以将该图像数据作为参照图像数据111利用，从而可以减少帧存储器112a的初始化处理的次数。
这里，说明了在初始化控制单元116中在检测图像编码数据的错误的同时判断该错误的致命度的情况，但是，如实施例1那样不具有初始化控制单元116时，通过在本图像译码装置的前级设置在检测错误的同时判断该错误的致命度的错误检测器等，并在错误的致命度高时从该错误检测器向初始化单元115输出上述初始化控制信号113，也可以得到上述同样的效果。
实施例2.
本实施例2是在将通过包含内部更新的编码处理而得到的图像编码数据的译码处理从P帧开始时可以消除不快感或失调感而显示译码图像的情况。
图8是表示本发明实施例2的图像译码装置的结构的框图。
本实施例2的图像译码装置100b除了上述实施例1的图像译码装置100a的结构外，还具有插入到上述加法器106与图像显示部119之间的开关122和根据对各宏块的内部更新的状况控制该开关122开合的开关控制单元120。
上述开关控制单元120根据输入的图像编码数据101检测成为译码处理的对象的被处理帧的所有的宏块在上述图像编码数据的译码处理开始之后是否至少1次作为画面内宏块进行了处理，在上述所有的宏块作为画面内宏块进行了1次处理时，就利用控制信号121使上述开关122成为导通状态，在除此以外的情况时，就利用控制信号121使上述开关122成为非导通状态。
另外，上述开关控制单元120在图像编码数据的译码处理开始之后，在输入了与指定数的帧相当的图像编码数据时，不论上述检测结果如何，都使上述开关122成为导通状态。
并且，本实施例2的图像译码装置100b的其他结构和上述实施例1的图像译码装置100a相同。
下面，说明其动作。
在本实施例2中，在搭载了图像译码装置100b的通信机器的电源接通时，和上述实施例1一样，上述初始化控制信号113就供给上述图像译码装置100b的初始化单元115，另外，开始进行输入的图像编码数据101的译码处理。
另外，在开关控制单元120中，根据输入的图像编码数据检测被处理帧的所有的宏块在该图像编码数据的译码处理开始之后是否至少进行了1次画面内编码(以下，称为内部编码)。并且，由上述开关控制单元120根据上述检测结果控制开关122的开合。
另外，在上述帧存储器112a中，由初始化单元115对参照图像数据的存储区域进行设定由用于进行全面篮或灰色等画面显示的一定的像素值构成的初始化数据114的处理。
并且，在本实施例2中，上述图像编码数据101的译码处理和实施例1一样。即，通过可变长译码器102对图像编码数据101的可变长译码处理，顺序输出与各宏块对应的频率变换系数数据103和运动矢量数据108。
上述频率变换系数数据103通过逆频率变换器104和逆量化器118的处理变换为差值数据，进而由加法器106将对象宏块的差值数据与对象宏块的预测图像数据相加，输出与该对象宏块对应的译码图像数据。在该图像显示部119中，根据译码图像数据进行译码图像的显示，在帧存储器112a中，向其数据记录区域的与该对象宏块对应的部分写入上述译码图像数据。
并且，在1帧的图像编码数据的译码处理完成的时刻，与该1帧对应的译码图像数据作为参照图像数据存储到帧存储器112a中。
此外，在运动补偿单元110中，根据帧存储器112a存储的参照图像数据111和对象宏块的运动矢量数据生成对象宏块的预测图像数据，该预测图像数据向上述加法器106输出。
在这样的译码处理中，在成为译码处理的对象的开头帧(被处理帧)是I帧时，上述被处理帧的各位置的宏块全部进行了画面内编码，所以，上述开关控制单元120是开关122成为导通状态。于是，就进行译码图像的显示。
另外，在成为译码处理的对象的开头帧(被处理帧)是P帧时，通常在上述被处理帧中所有的宏块不是进行了画面内编码处理的画面内宏块，所以，上述开关控制单元120使开关122成为非导通状态。于是，就不进行译码图像的显示。
并且，在开关控制单元120中，在上述开头帧的图像编码数据输入开始之后，在检测到已输入了与指定数的帧相当的图像编码数据时，就向上述开关控制单元122输出使上述开关122成为导通状态的控制信号121。
另外，在开关控制单元120中，在从开头帧输入了与多个帧对应的图像编码数据的时刻，在检测到被处理帧的所有的宏块在从该开头帧到被处理帧间一连串的帧中与上述被处理帧的各宏块相同位置的宏块即使是1次作为画面内宏块出现时，就向上述开关控制单元122输出使上述开关122成为导通状态的控制信号121。
下面，使用图9简单地说明检测被处理帧的所有的宏块在上述图像编码数据的译码处理开始之后是否至少1次作为画面内宏块进行处理的处理。
在图9中，表示出了开头帧F1作为I帧进行编码、而其后面的帧F2～F15作为P帧进行编码的情况。另外，在该编码处理中，进行了内部更新，所以，在各P帧中，4个宏块(斜线部分)顺序作为画面内宏块进行处理。
并且，作为上述开关122的具体的控制，说明对通过上述各帧的图像数据的编码处理而得到的图像编码数据的译码处理从例如设定了处理时刻(t＝t4)的帧F4开始的情况。
在帧F4中，宏块MB9～MB12通过内部更新已成为画面内宏块，但除此以外的宏块是画面间宏块，所以，被处理帧的所有的宏块在上述图像编码数据的译码处理开始之后并不是至少1次作为画面内宏块进行处理的状态。因此，在对帧F4的译码处理中，上述开关122根据控制信号121成为非导通状态。
另外，在上述帧F4以后的帧F7中，宏块MB21～MB24通过内部更新已成为画面内宏块，宏块MB9～MB20在帧F4～F6中作为画面内宏块进行了处理，但除此以外的宏块在帧F4～F7中1次也没有作为画面内宏块进行处理。因此，在对帧F7的译码处理中，上述开关122根据控制信号121成为非导通状态。
另外，在帧F7以后的帧F8～F14中，包含帧F4以后1次也未作为画面内宏块进行处理的宏块。
即，在上述帧F8中，宏块MB25～MB28通过内部更新已成为画面内宏块，宏块MB9～MB24在帧F4～F7中已作为画面内宏块进行了处理，但除此以外的宏块在帧F4～F8中还1次也未作为画面内宏块进行处理。
在上述帧F13中，宏块MB45～MB48通过内部更新已成为画面内宏块，宏块MB9～MB44在帧F4～F12中已作为画面内宏块进行了处理，但除此以外的宏块在帧F4～F13中1次也未作为画面内宏块进行处理。
在上述帧F14中，宏块MB1～MB4通过内部更新已成为画面内宏块，话家常MB9～MB48在帧F4～F13中已作为画面内宏块进行处理，但除此以外的宏块在帧F4～F14中1次也未作为画面内宏块进行处理。
并且，在上述帧F15中，宏块MB5～MB8通过内部更新已成为画面内宏块，宏块MB9～MB48、MB1～MB4在帧F4～F14中已作为画面内宏块进行处理。即，该帧F15的所有的宏块在输入图像编码数据之后至少1次作为画面内宏块进行了处理。因此，在对帧F15的译码处理中，上述开关122根据控制信号121成为导通状态。
这样，在本实施例2的图像译码装置100b中，在图像编码数据输入之后，检测到成为译码处理的对象的被处理帧的所有的宏块至少1次作为画面内宏块进行了处理时，就根据译码图像数据开始进行图像显示，所以，在译码图像的像素值确定为有意义的值时，就立即进行译码图像的显示。即，不仅可以避免显示像素值不定的译码图像，而且可以不等待与I帧对应的图像编码数据的输入，在生成像素值一定的译码图像数据时就可以显示该译码图像。
另外，在输入了与一定数的帧相当的图像编码数据时，即使在被处理帧内有未作为画面内宏块进行处理的宏块，也进行译码图像的显示，所以，可以将图像编码数据输入之后到显示译码图像的延迟时间抑制在一定的范围内，从而根据仅由有意义的像素值构成的完全的译码图像数据或不定的像素值少的译码图像数据显示译码图像。
在上述实施例2中，作为图像译码装置和上述实施例1一样，具有进行帧存储器的初始化处理的初始化单元，但是，在上述实施例2中，上述初始化单元不一定是必须的。
例如，在预先知道输入的图像编码数据是通过使用内部更新的编码处理进行编码的时，则所有的宏块一定已按一定周期进行了1次内部编码，所以，实施例2的图像译码装置就可以采用省去初始化单元115的结构(实施例2的变形例1)。
下面，使用附图具体地说明该变形例1的图像译码装置。
实施例2的变形例1.
图10表示作为本发明实施例2的变形例1省去了上述实施例2的图像译码装置的初始化单元115的结构的图像译码装置。
本实施例2的变形例1的图像译码装置是采用省去了实施例2的图像译码装置100b的初始化单元115的结构。
这里，内部更新的周期信息预先供给图像译码装置，开关控制单元120在图像编码数据输入之后，在相当于内部更新的每一周期的帧数次的译码完成的时刻向上述开关122输出使该开关122成为导通状态的控制信号121。
在这样的结构中，开关控制单元120在相当于内部更新的每一周期的帧数次的译码完成的时刻向该开关122输出使该开关122成为导通状态的控制信号121，所以，就不必判断被处理帧的所有的宏块是否作为画面内宏块进行了处理。
此外，在上述实施例2中，在图像编码数据输入开始之后，根据被处理帧的所有的宏块是否作为画面内宏块进行了处理控制开关122的开合，但是，也可以将实施例2的图像译码装置采用在图像编码数据中发生了错误时而在该错误发生之后也根据被处理帧的所有的宏块是否作为画面内宏块进行了处理来控制开关122的开合的结构(实施例2的变形例2)。
下面，使用附图具体地说明该变形例2的图像译码装置。
实施例2的变形例2.
图11是用于说明作为本发明实施例2的变形例2在图像编码数据中发生了错误时也进行上述开关122的开合控制的图像译码装置的图。
本实施例2的变形例2的图像译码装置100b2具有开关控制单元120b2，取代实施例2的图像译码装置100b的开关控制单元120，在图像编码数据输入之后和图像编码数据中发生了错误之后，在被处理帧的所有的宏块至少1次作为画面内宏块进行了处理之前，开关控制单元120b2使开关122成为非导通状态，在被处理帧的所有的宏块都至少1次作为画面内宏块进行了处理时，就使开关122成为导通状态。
另外，该开关控制单元120b2不仅在图像编码数据输入开始之后而且在生成图像编码数据时发生错误之后输入了与一定数的帧相当的图像编码数据时，即使被译码帧的宏块中有未进行内部编码的宏块，也显示译码图像。
在这种结构的图像译码装置100b2中，不仅在图像编码数据输入开始之后而且在生成图像编码数据时发生错误之后也检测成为译码处理的对象的被处理帧的所有的宏块是否都至少1次作为画面内宏块进行了处理，并根据该检测结果开始进行基于各帧的译码图像数据的图像显示，所以，在图像编码数据发生错误之后，可以避免显示像素值不定的译码图像，另外，在生成图像编码数据时发生错误之后，就不等待输入与I帧对应的图像编码数据，在生成像素值一定的译码图像数据的时刻，可以显示该译码图像。
另外，在生成图像编码数据时发生错误之后输入了与一定数的帧相当的图像编码数据时，即使被译码帧的宏块中有未作为画面内宏块进行处理的宏块，也进行译码图像的显示，所以，从图像编码数据发生错误时到显示译码图像之前可以将延迟时间抑制在一定范围内，从而可以根据仅由有意义的像素值构成的完全的译码图像数据或不定的像素值少的译码图像数据显示译码图像。
此外，通过将用于利用软件进行上述各实施例及其变形例所示的图像译码处理的图像译码处理程序记录到软盘等数据存储媒体上，可以在独立的计算机系统中简单地实现上述各实施例所示的图像译码处理。
图12是用于说明使用存储了上述图像译码处理程序的软盘利用计算机系统实施上述各实施例及其变形例的图像译码处理的图。
图12(a)表示从软盘的正面看的外观、剖面结构和软盘本体，图12(b)表示该软盘本体的纹理格式的例。
上述软盘FD是将上述软盘本体D收容到软盘盒FC内的结构，在该软盘本体D的表面，从外周向内周以同心圆状形成多个磁道Tr，各磁道Tr在角度方向分割为16个扇区Se。因此，在存储上述程序的软盘FD中，上述软盘本体D将作为上述程序的数据记录到在其上分割的区域(扇区)Se中。
另外，图12(c)表示进行对软盘FD的上述程序的记录和用于使用软盘FD存储的程序的软件进行图像译码处理的结构。
在将上述程序记录到软盘FD上时，从计算机系统Cs将作为上述程序的数据通过软盘驱动器FDD写入到软盘FD上。另外，利用记录到软盘FD上的程序将上述图像译码装置构筑到计算机系统Cs中时，利用软盘驱动器FDD从软盘FD中读出程序，安装到计算机系统Cs中。
在上述说明中，使用软盘作为数据存储媒体进行了说明，但是，使用光盘也和上述软盘的情况一样，可以利用软件进行图像译码处理。另外，数据存储媒体不限于上述光盘或软盘，也可以是IC卡、盒式ROM等，只要是可以记录程序的媒体，不论哪一种都可以，使用这些数据存储媒体时也和使用上述软盘等时一样，可以利用软件进行图像译码处理。

Claims (22)

1.一种图像译码方法，包括将对用于显示指定的图像的各帧的图像数据进行编码而得到的图像编码数据进行译码从而生成译码图像数据的译码处理，和根据该译码图像数据显示译码图像的显示处理，其特征在于：上述译码处理包括，不参照译码处理已结束的帧的译码图像数据将成为译码处理的对象的被处理帧的图像编码数据进行译码的画面内译码处理，和参照译码处理已结束的帧的译码图像数据将成为译码处理对象的被处理帧的图像编码数据进行译码的画面间译码处理，上述画面间译码处理，在将上述被处理帧的图像编码数据译码时，在作为所参照的参照帧的已处理的帧的译码图像数据不定时，参照用于显示既定的图像的既定的图像数据来取代该参照帧的译码图像数据。
2.按权利要求1所述的图像译码方法，其特征在于：上述译码处理，利用上述画面内译码处理，将对成为编码处理的对象的被处理帧的图像数据不参照编码处理已结束的帧的图像数据进行画面内编码处理而得到的图像编码数据进行译码，利用上述画面间译码处理，将对成为编码处理的对象的被处理帧的图像数据参照编码处理已结束的帧的图像数据进行画面间编码处理而得到的图像编码数据进行译码，上述画面间译码处理，在最初进行了译码理的被处理帧是进行了上述画面间编码处理的帧时，就参照上述既定的图像数据。
3.按权利要求1所述的图像译码方法，其特征在于：在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述既定的图像数据作为初始数据写入的初始化处理。
4.按权利要求1所述的图像译码方法，其特征在于：在最初译码的被处理帧是进行上述画面内处理的帧时，在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述已定的图像数据作为初始数据写入的初始化处理，在对进行了上述画面内编码处理的帧的图像数据的区域检测到错误时，就在检测到该错误的某一区域，显示与上述帧存储器的存储区域存储的图像数据中与检测到上述错误的该某一区域对应的区域的像素值。
5.按权利要求1所述的图像译码方法，其特征在于：在上述被处理帧的图像编码数据中检测到错误时，在将检测到该错误的被处理帧进行译码处理之前，对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述已定的图像数据作为初始数据写入的初始化处理。
6.按权利要求1所述的图像译码方法，其特征在于：在上述被处理帧的图像编码数据中检测到错误时，在将检测到该错误的被处理帧进行译码处理之前，判断该错误的致命度，如果该错误的致命度高，就对存储上述参照帧的译码图像数据的帧存储器的存储区域进行将上述已定的图像数据作为初始数据写入的初始化处理，如果该错误的致命度低，就不进行上述初始化处理。
7.按权利要求1所述的图像译码方法，其特征在于：作为上述已定的图像数据，使用包含文字信息的图像数据。
8.按权利要求1所述的图像译码方法，其特征在于：在上述译码处理开始之前，对存储上述参照帧的译码图像数据的帧存储器的一部分存储区域，进行将上述已定的图像数据作为初始数据写入的初始化处理，将在上述帧存储器的一部分存储区域存储的译码图像数据作为上述参照帧的译码图像数据使用。
9.按权利要求8所述的图像译码方法，其特征在于：上述画面内编码处理和画面间编码处理对各帧的图像数据按该帧的各单位区域进行，与上述帧存储器的一部分存储区域相当的图像尺寸与上述编码处理的单位区域的尺寸一致。
10.按权利要求1所述的图像译码方法，其特征在于：作为上述已定的图像数据，使用由一定的像素值构成的图像数据。
11.一种图象译码方法，包括将对成为编码处理的对象的被处理帧的图像数据、按上述被处理帧的各单位区域进行不参照已进行了编码处理的帧的图像数据进行编码的画面内编码处理、和参照使已处理的帧的图像数据进行编码的画面间编码处理中的任一处理、而得到的图像编码数据进行译码、从而生成译码图像数据的译码处理，和根据该译码图像数据显示译码图像的显示处理，其特征在于：上述译码处理包括，不参照译码处理已结束的帧的译码图像数据，将仅由进行了上述画面内编码处理的单位区域构成的画面内编码帧的图像编码数据进行译码的画面内译码处理，和参照译码处理已结束的帧的译码图像数据，将包含进行了上述画面内编码处理的单位区域的画面间编码帧的图像编码数据进行译码的画面间译码处理，不论成为上述译码处理的对象的开头帧是画面内编码帧还是画面间编码帧，都开始进行上述画面内译码处理或画面间译码处理，上述显示处理，在上述开头帧是画面间编码帧时，从该开头帧之后的指定的帧开始根据其译码图像数据开始进行译码图像的显示。
12.按权利要求11所述的图像译码方法，其特征在于：上述编码处理在对连续的N个(N是自然数)帧完成一连串的画面间编码处理时，为了使被处理帧的所有的单位区域在该一连串的画面间编码处理期间成为至少进行了1次画面内编码处理的区域，对各帧的图像数据进行编码处理，上述显示处理在上述开头帧是画面间编码帧时从该开头帧数的第N个帧开始根据其译码图像数据开始进行译码图像的显示。
13.按权利要求11所述的图像译码方法，其特征在于：上述编码处理在对连续的指定数的帧完成一连串的画面间编码处理时，为了使被处理帧的所有的单位区域在该一连串的画面间编码处理期间成为至少进行了1次画面内编码处理的区域，对各帧的图像数据进行编码处理，上述显示处理在上述开头帧是画面间编码帧时，为了使所有的单位区域在上述一连串的画面间编码处理期间成为至少进行了1次画面内编码处理的区域，检测上述开头帧之后的特定的画面间编码帧，从该特定的画面间编码帧开始根据其译码图像数据开始进行译码图像的显示。
14.一种图像译码装置，用于输入将用于显示指定的图像的各帧的图像数据进行编码而得到的图像编码数据，并将该图像编码数据译码从而生成译码图像数据，其特征在于：具有译码处理部，用于进行将成为译码处理的对象的被处理帧的图像编码数据，不参照译码处理已结束的帧的译码图像数据进行译码的画面内译码处理，和将成为译码处理的对象的被处理帧的图像编码数据参照译码处理已结束的帧的译码图像数据进行译码的画面间译码处理中的某一处理；根据上述译码图像数据显示译码图像的图像显示部；暂时存储上述画面间译码处理时参照的已处理的帧的译码图像数据的帧存储器，和根据从外部供给的初始化控制信号将上述帧存储器进行初始化处理的初始化单元。
15.按权利要求14所述的图像译码装置，其特征在于：上述初始化控制信号是在译码处理开始时或在上述图像编码数据中检测到错误时从外部供给的信号。
16.按权利要求14所述的图像译码装置，其特征在于：上述初始化控制信号是在译码处理开始时或在上述图像编码数据中检测到错误并判定错误的致命度高时从外部供给的信号。
17.按权利要求14所述的图像译码装置，其特征在于：具有根据上述图像编码数据的输入时刻决定开始进行该图像编码数据的译码处理的译码开始时刻并在该译码开始时刻之前将上述初始化控制信号向上述初始化单元输出的初始化控制单元。
18.按权利要求17所述的图像译码装置，其特征在于：上述初始化控制单元检测上述图像编码数据的错误并根据该错误的发生时刻决定检测到了该错误的上述图像编码数据的译码时刻，在检测到上述错误的图像编码数据的译码时刻之前将初始化控制信号向上述初始化控制单元输出。
19.按权利要求17所述的图像译码装置，其特征在于：上述初始化控制单元检测上述图像编码数据的错误，判断该错误的致命度，根据该错误的发生时刻决定检测到该错误的上述图像编码数据的译码时刻，如果该错误的致命度高，就在检测到上述错误的图像编码数据的译码时刻之前将初始化控制信号向上述初始化单元输出，如果上述错误的致命度低，就不将初始化控制信号向上述初始化单元输出。
20.一种图像译码装置，用于将对成为编码处理的对象的被处理帧的图像数据、按上述被处理帧的各单位区域进行不参照已进行了编码处理的帧的图像数据的画面内编码处理、和参照上述已处理的帧的图像数据的画面间编码处理的某一处理、而得到的图像编码数据进行译码，从而生成译码图像数据，其特征在于：具有译码处理部、图像显示部、开关和开关控制单元，译码处理部对仅由进行了上述画面内编码处理的单位区域构成的画面内编码帧的图像编码数据，不参照已完成译码处理的帧的译码图像数据进行译码，同时对包含进行了上述画面间编码处理的单位区域的画面间编码帧的图像编码数据，参照已完成译码处理的帧的译码图像数据进行译码，并输出上述译码图像数据；图像显示部根据从上述译码处理部输出的译码图像数据显示译码图像；开关设置在上述译码处理部与上述图像显示部之间；开关控制单元根据上述图像编码数据决定开始进行各帧的译码图像的显示的显示开始时刻，并根据该显示开始时刻控制上述开关的开合。
21.一种数据存储媒体，存储由计算机进行对将用于显示指定的图像的各帧的图像数据进行编码而得到的图像编码数据译码从而生成译码图像数据的译码处理、和根据该译码图像数据显示译码图像的显示处理的图像译码程序，其特征在于：上述译码处理包括不参照已完成译码处理的帧的译码图像数据将成为译码处理的对象的被处理帧的图像编码数据进行译码的画面内译码处理，和参照已完成译码处理的帧的译码图像数据将成为译码处理的对象的被处理帧的图像编码数据进行译码的画面间译码处理，上述画面间译码处理，在将上述被处理帧的图像编码数据译码时作为所参照的参照帧的已处理的帧的图像编码数据不定时，就参照用于显示已定的图像的已定的图像数据，取代该参照帧的译码图像数据。
22.一种存储用于由计算机进行译码处理和显示处理的图像译码程序的数据存储媒体，译码处理将对成为编码处理的对象的被处理帧的图像数据、按上述被处理帧的各单位区域进行不参照已进行了编码处理的帧的图像数据进行编码的画面内编码处理、和参照上述已处理的帧的图像数据进行编码的画面间编码处理中的某一处理、而得到的图像编码数据进行译码从而生成译码图像数据，显示处理根据该译码图像数据显示译码图像，其特征在于：上述译码处理包括不参照已完成译码处理的帧的译码图像数据，将仅由进行了上述画面内编码处理的单位区域构成的画面内编码帧的图像编码数据进行译码的画面内译码处理，和参照已完成译码处理的帧的译码图像数据将包含进行了上述画面间编码处理的单位区域的画面间编码帧的图像编码数据进行译码的画面间译码处理，不论成为上述译码处理的对象的开头帧是画面内编码帧还是画面间编码帧，都开始进行上述画面内译码处理或画面间译码处理，上述显示处理在上述开头帧是画面间编码帧时从该开头帧以后的指定的帧开始根据其译码图像数据开始进行译码图像的显示。
CNB011244003A 2000-07-25 2001-07-25 图像译码方法、图像译码装置 Expired - Fee Related CN1185860C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2000224400 2000-07-25
JP224400/2000 2000-07-25

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CNB2004100957230A Division CN1320825C (zh) 2000-07-25 2001-07-25 图像译码方法、图像译码装置
CN2006101436916A Division CN101005627B (zh) 2000-07-25 2001-07-25 图像译码方法、图像译码装置

Publications (2)

Publication Number Publication Date
CN1338861A true CN1338861A (zh) 2002-03-06
CN1185860C CN1185860C (zh) 2005-01-19

Family

ID=18718374

Family Applications (3)

Application Number Title Priority Date Filing Date
CNB011244003A Expired - Fee Related CN1185860C (zh) 2000-07-25 2001-07-25 图像译码方法、图像译码装置
CN2006101436916A Expired - Fee Related CN101005627B (zh) 2000-07-25 2001-07-25 图像译码方法、图像译码装置
CNB2004100957230A Expired - Fee Related CN1320825C (zh) 2000-07-25 2001-07-25 图像译码方法、图像译码装置

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN2006101436916A Expired - Fee Related CN101005627B (zh) 2000-07-25 2001-07-25 图像译码方法、图像译码装置
CNB2004100957230A Expired - Fee Related CN1320825C (zh) 2000-07-25 2001-07-25 图像译码方法、图像译码装置

Country Status (3)

Country Link
US (2) US6819715B2 (zh)
EP (1) EP1176833A3 (zh)
CN (3) CN1185860C (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100458844C (zh) * 2003-04-18 2009-02-04 深圳市朗科科技股份有限公司 数码图像处理装置及方法
CN1992902B (zh) * 2005-12-26 2010-07-21 三洋电机株式会社 解码装置
CN101208954B (zh) * 2004-03-08 2010-09-08 Nxp股份有限公司 具有可变压缩比和用于存储及检索参考帧数据的缓冲器的视频解码器以及视频解码方法

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1176833A3 (en) * 2000-07-25 2012-06-27 Panasonic Corporation Image decoding method, image decoding apparatus, and data storage medium
US7086596B2 (en) * 2003-01-09 2006-08-08 Hand Held Products, Inc. Decoder board for an optical reader utilizing a plurality of imaging formats
KR100522595B1 (ko) * 2002-11-29 2005-10-19 삼성전자주식회사 엠펙 비디오 복호화방법 및 엠펙 비디오 복호화기
KR100464040B1 (ko) * 2002-12-16 2005-01-03 엘지전자 주식회사 얼굴 움직임을 이용한 이동 통신 단말기의 제어 방법
JP2006127367A (ja) * 2004-11-01 2006-05-18 Sony Corp 情報管理方法、情報管理プログラムおよび情報管理装置
JP4406623B2 (ja) 2005-08-31 2010-02-03 パナソニック株式会社 動画受信装置
JP2008177907A (ja) * 2007-01-19 2008-07-31 Fujitsu Ltd 動画データ復号装置、情報機器、動画データ復号方法および動画データ復号プログラム
US10536726B2 (en) 2012-02-24 2020-01-14 Apple Inc. Pixel patch collection for prediction in video coding system
US9451288B2 (en) * 2012-06-08 2016-09-20 Apple Inc. Inferred key frames for fast initiation of video coding sessions
JPWO2015064403A1 (ja) * 2013-11-01 2017-03-09 ソニー株式会社 画像処理装置および方法
WO2015064402A1 (ja) * 2013-11-01 2015-05-07 ソニー株式会社 画像処理装置および方法
GB2587448B (en) 2019-04-24 2021-10-13 Acsuper Tech Inc Optical fiber adapter

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5400076A (en) * 1991-11-30 1995-03-21 Sony Corporation Compressed motion picture signal expander with error concealment
JPH0698313A (ja) * 1992-09-14 1994-04-08 Sony Corp 動画像復号化装置
US5365604A (en) * 1993-01-14 1994-11-15 Rca Thomson Licensing Corporation Error concealment apparatus for video signal processors
US5737022A (en) * 1993-02-26 1998-04-07 Kabushiki Kaisha Toshiba Motion picture error concealment using simplified motion compensation
TW224553B (en) * 1993-03-01 1994-06-01 Sony Co Ltd Method and apparatus for inverse discrete consine transform and coding/decoding of moving picture
US5515388A (en) * 1993-03-19 1996-05-07 Sony Corporation Apparatus and method for preventing repetitive random errors in transform coefficients representing a motion picture signal
US6055335A (en) * 1994-09-14 2000-04-25 Kabushiki Kaisha Toshiba Method and apparatus for image representation and/or reorientation
JP3711571B2 (ja) * 1994-09-29 2005-11-02 ソニー株式会社 画像符号化装置及び画像符号化方法
JPH08154247A (ja) * 1994-09-29 1996-06-11 Sanyo Electric Co Ltd 圧縮画像データ処理装置及び方法
US5517250A (en) * 1995-02-28 1996-05-14 General Instrument Corporation Of Delaware Acquisition of desired data from a packetized data stream and synchronization thereto
US6064803A (en) * 1995-03-01 2000-05-16 Matsushita Electric Industrial Co., Ltd. Image information decoder with a reduced capacity frame memory
US5903313A (en) * 1995-04-18 1999-05-11 Advanced Micro Devices, Inc. Method and apparatus for adaptively performing motion compensation in a video processing apparatus
US5568200A (en) * 1995-06-07 1996-10-22 Hitachi America, Ltd. Method and apparatus for improved video display of progressively refreshed coded video
US6002802A (en) * 1995-10-27 1999-12-14 Kabushiki Kaisha Toshiba Video encoding and decoding apparatus
US5745097A (en) * 1995-11-08 1998-04-28 Apple Computer, Inc. Apparatus and method for automatic image display alignment
US5982441A (en) * 1996-01-12 1999-11-09 Iterated Systems, Inc. System and method for representing a video sequence
US5668599A (en) * 1996-03-19 1997-09-16 International Business Machines Corporation Memory management for an MPEG2 compliant decoder
JPH1023375A (ja) * 1996-07-04 1998-01-23 Matsushita Electric Ind Co Ltd 順次ディジタルビデオ復号化装置
JPH1023415A (ja) * 1996-07-05 1998-01-23 Matsushita Electric Ind Co Ltd 画像符号化復号方法および装置
KR100203266B1 (ko) * 1996-07-09 1999-06-15 윤종용 윤곽선복호화장치
DE19630295A1 (de) * 1996-07-26 1998-01-29 Thomson Brandt Gmbh Verfahren zur Codierung und Decodierung von digitalisierten Bildern eines Trickfilms sowie Vorrichtung zur Codierung und Decodierung von digitalisierten Bildern eines Trickfilms
CN1192631C (zh) * 1996-07-26 2005-03-09 德国汤姆逊-布朗特公司 对特技电影的数字化帧进行编码和译码的方法及装置
US5909224A (en) * 1996-10-18 1999-06-01 Samsung Electronics Company, Ltd. Apparatus and method for managing a frame buffer for MPEG video decoding in a PC environment
US5978509A (en) * 1996-10-23 1999-11-02 Texas Instruments Incorporated Low power video decoder system with block-based motion compensation
TW361046B (en) * 1996-10-31 1999-06-11 Matsushita Electric Ind Co Ltd Dynamic picture image decoding apparatus and method of decoding dynamic picture image
JP3373130B2 (ja) * 1997-03-24 2003-02-04 沖電気工業株式会社 画像復号化装置
JP3387820B2 (ja) * 1997-04-09 2003-03-17 松下電器産業株式会社 画像予測復号化装置及び画像予測復号化方法
SG65064A1 (en) * 1997-04-09 1999-05-25 Matsushita Electric Ind Co Ltd Image predictive decoding method image predictive decoding apparatus image predictive coding method image predictive coding apparatus and data storage media
US5903311A (en) * 1997-05-30 1999-05-11 Sony Corporation Run level pair buffering for fast variable length decoder circuit
JPH1141609A (ja) 1997-07-23 1999-02-12 Hitachi Ltd 信号処理装置
KR100247978B1 (ko) * 1997-08-08 2000-03-15 윤종용 픽쳐 디코딩 동기화 회로 및 그 방법
KR100299119B1 (ko) * 1997-09-30 2001-09-03 윤종용 플래쉬롬제어장치를구비한개인용컴퓨터시스템및그제어방법
EP0920216A1 (de) * 1997-11-25 1999-06-02 Deutsche Thomson-Brandt Gmbh Verfahren und Vorrichtung zur Codierung und zur Decodierung einer Bildsequenz
US6665344B1 (en) * 1998-06-29 2003-12-16 Zenith Electronics Corporation Downconverting decoder for interlaced pictures
US6728377B1 (en) * 1998-07-09 2004-04-27 Ricoh Company, Ltd. Coding apparatus and an information processing apparatus provided with the coding apparatus
JP4083302B2 (ja) * 1998-08-12 2008-04-30 株式会社東芝 動画像スクランブル／デスクランブル装置
US6539054B1 (en) * 1998-09-18 2003-03-25 Matsushita Electric Industrial Co., Ltd. Image output apparatus, image reproduction method, object composition apparatus, object composition method, and data storage medium
JP3604290B2 (ja) * 1998-09-25 2004-12-22 沖電気工業株式会社 動画像復号方法及び装置
JP3606306B2 (ja) * 1998-10-08 2005-01-05 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
EP1050828A4 (en) * 1998-11-26 2008-08-13 Matsushita Electric Ind Co Ltd PROCESSOR AND IMAGE PROCESSING DEVICE
US6590938B1 (en) * 1999-09-30 2003-07-08 Conexant Systems, Inc. DCT domain conversion of a higher definition signal to lower definition signal
DE10015099A1 (de) * 2000-03-28 2001-10-04 Sel Alcatel Ag Optisches Netzwerk
EP1176833A3 (en) * 2000-07-25 2012-06-27 Panasonic Corporation Image decoding method, image decoding apparatus, and data storage medium
US6757439B2 (en) * 2000-12-15 2004-06-29 International Business Machines Corporation JPEG packed block structure
US20030012284A1 (en) * 2000-12-20 2003-01-16 Masahiro Kazayama Method and apparatus for decoding motion video game
US6956507B2 (en) * 2002-12-12 2005-10-18 International Business Machines Corporation Method and apparatus for morphing memory compressed machines

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100458844C (zh) * 2003-04-18 2009-02-04 深圳市朗科科技股份有限公司 数码图像处理装置及方法
CN101208954B (zh) * 2004-03-08 2010-09-08 Nxp股份有限公司 具有可变压缩比和用于存储及检索参考帧数据的缓冲器的视频解码器以及视频解码方法
CN1992902B (zh) * 2005-12-26 2010-07-21 三洋电机株式会社 解码装置

Also Published As

Publication number Publication date
CN1320825C (zh) 2007-06-06
CN1185860C (zh) 2005-01-19
US6819715B2 (en) 2004-11-16
EP1176833A3 (en) 2012-06-27
US20050100099A1 (en) 2005-05-12
US20020018525A1 (en) 2002-02-14
EP1176833A2 (en) 2002-01-30
CN101005627B (zh) 2010-04-14
CN1620148A (zh) 2005-05-25
CN101005627A (zh) 2007-07-25

Similar Documents

Publication Publication Date Title
CN1185860C (zh) 图像译码方法、图像译码装置
CN1305311C (zh) 图像编码装置、图像解码装置、图像编码方法、及图像解码方法
CN1199471C (zh) 提高了处理效率的图象声音处理装置
CN1254113C (zh) 图像编码装置、图像编码方法、图像解码装置、图像解码方法和通信装置
CN1167274C (zh) 数字图像编码设备和数字图像解码设备
CN1134992C (zh) 图像预测解码方法
CN1909666A (zh) 运动检测装置
CN1738429A (zh) 图像解码方法
CN1910931A (zh) 视频编码方法及装置、视频解码方法及装置、其程序及记录该程序的记录介质
CN1784011A (zh) 图像编码装置及图像编码方法
CN101060622A (zh) 数字信号编、解码装置、数字信号算术编、解码方法
CN101064848A (zh) 图像数据处理装置与方法
CN1910933A (zh) 图像信息编码装置和图像信息编码方法
CN1620821A (zh) 图像信息编码装置和图像信息编码方法、图像信息解码装置和图像信息解码方法
CN101035292A (zh) 动态图像编码方法及动态图像解码方法
CN1652608A (zh) 数据处理装置及其方法以及编码装置和解码装置
CN1270541C (zh) 编码设备和方法
CN1240225C (zh) 图像编码装置以及图像编码方法
CN1265342C (zh) 数字图像输出装置
CN1652605A (zh) 视频编解码器、数据处理系统以及用于上述系统的方法
CN1777287A (zh) 图像解码装置、程序、方法、及图像编码装置、程序、方法
CN1266947C (zh) 活动图象压缩编码装置及运动矢量检测方法
CN1547857A (zh) 图像解码设备和图像解码方法
CN1314050A (zh) 视频处理装置和方法及介质
CN1918917A (zh) 视频编码方法及装置、视频解码方法及装置、它们的程序及记录这些程序的记录媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20050119

Termination date: 20160725

CF01 Termination of patent right due to non-payment of annual fee