JPH10322704A - Bit stream data decoder - Google Patents

Bit stream data decoder

Info

Publication number
JPH10322704A
JPH10322704A JP12848297A JP12848297A JPH10322704A JP H10322704 A JPH10322704 A JP H10322704A JP 12848297 A JP12848297 A JP 12848297A JP 12848297 A JP12848297 A JP 12848297A JP H10322704 A JPH10322704 A JP H10322704A
Authority
JP
Japan
Prior art keywords
data
bit stream
error
image
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP12848297A
Other languages
Japanese (ja)
Inventor
Takahiro Nanba
隆広 難波
Toshihiro Kai
俊博 賀井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP12848297A priority Critical patent/JPH10322704A/en
Publication of JPH10322704A publication Critical patent/JPH10322704A/en
Pending legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

PROBLEM TO BE SOLVED: To output normal images instead of abnormal images by comparing the information of a packet length detected from the packet header of an inputted bit stream with the value of measuring the packet length of the bit stream and replacing erroneous image data with stored image data, when judged that an error is present. SOLUTION: Inputted encoded data are decoded by a variable length decoding means 2 and an encoded prediction error, a prediction mode and a motion vector are outputted. The encoded prediction error is decoded by an inverse quantization means 3 and an inverse DCT transformer 4, added with a prediction image outputted from a motion compensation prediction means 8 in an adder 5 and stored in an image memory 6. Upon receiving error information, the image memory 6 inhibits the write of the image data inputted from the adder 5 and outputs the stored image data of one frame before to a format conversion means 7.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、ビットストリー
ムデータ復号装置に関する。
The present invention relates to a bit stream data decoding device.

【0002】[0002]

【従来の技術】図6は、従来のビットストリームデータ
復号装置を示すブロック図である。図において、1は入
力された画像の符号化データを記憶する入力バッファで
あり、入力バッファ1の出力は可変長復号化手段2に与
えられる。可変長復号化手段2の出力は逆量子化手段3
に与えられ、逆量子化手段3の出力は逆DCT変換器4
に与えられる。逆DCT変換器4の出力は加算器5の第
一の入力に与えられる。加算器5の出力は画像メモリ6
に与えられて記憶される。画像メモリ6の出力はフォー
マット変換手段7および動き補償予測手段8に与えら
れ、動き補償予測手段8の出力は加算器5の第二の入力
および画像メモリ6に与えられる。また、フォーマット
変換手段7の出力はD/A変換器9に与えられ、D/A
変換器9の出力はビットストリームデータ復号装置の画
像出力となる。
2. Description of the Related Art FIG. 6 is a block diagram showing a conventional bit stream data decoding device. In the figure, reference numeral 1 denotes an input buffer for storing coded data of an input image, and an output of the input buffer 1 is provided to a variable length decoding means 2. The output of the variable length decoding means 2 is
And the output of the inverse quantization means 3 is supplied to the inverse DCT
Given to. The output of the inverse DCT converter 4 is provided to a first input of an adder 5. The output of the adder 5 is an image memory 6
Is given and stored. The output of the image memory 6 is provided to the format conversion means 7 and the motion compensation prediction means 8, and the output of the motion compensation prediction means 8 is provided to the second input of the adder 5 and the image memory 6. Also, the output of the format conversion means 7 is given to a D / A converter 9, and the D / A
The output of the converter 9 is the image output of the bitstream data decoding device.

【0003】まず、この復号装置のもとになる符号化方
式を説明する。動き補償予測符号化は、動画像の時間方
向の冗長性を削減する符号化方式として広く用いられて
いる。図7に、動き補償予測符号化方式の概念図を示
す。入力画像は、例えば16画素×16ラインのマクロ
ブロックに分割され、すでに符号化した画像の復号画像
を参照画像として、各マクロブロックに最も近い画像の
領域が参照画像の中から探索されて予測画像が作成され
るとともに、その予測画像の位置が動きベクトルとして
符号化される。
[0003] First, an encoding method based on this decoding apparatus will be described. Motion-compensated predictive coding is widely used as a coding method for reducing the temporal redundancy of a moving image. FIG. 7 shows a conceptual diagram of the motion compensation predictive coding method. The input image is divided into, for example, macroblocks of 16 pixels × 16 lines, and a decoded image of an already coded image is used as a reference image, and a region of an image closest to each macroblock is searched from the reference image to obtain a predicted image. Is generated, and the position of the predicted image is encoded as a motion vector.

【0004】図7(a)は片方向予測の場合を示し、図
7(b)は両方向予測の場合を示している。片方向予測
の場合、参照画像はすでに符号化した画像で、入力画像
より時間的に前の画像である。また、両方向予測の場
合、参照画像はすでに符号化した画像で、入力画像より
時間的に前と後の画像の両方を用いる。すなわち、符号
化する前に入力画像の順番を入れ替える必要がある。こ
の場合、予測画像には、時間的に前の画像を参照画像と
したときの予測画像と、時間的に後の画像を参照画像と
したときの予測画像と、これらの予測画像の平均をとっ
た画像の3つのうち、予測誤差の少ないものが選ばれ
る。入力画像と予測画像の差分は、予測誤差として離散
コサイン変換(以下、「DCT」という)などを用いて
符号化される。
FIG. 7A shows a case of unidirectional prediction, and FIG. 7B shows a case of bidirectional prediction. In the case of unidirectional prediction, the reference image is an already encoded image, which is an image temporally earlier than the input image. In the case of bidirectional prediction, the reference image is an already coded image, and both images temporally before and after the input image are used. That is, it is necessary to change the order of the input images before encoding. In this case, the predicted image includes a predicted image when a temporally previous image is used as a reference image, a predicted image when a temporally later image is used as a reference image, and an average of these predicted images. Among the three images, an image having a small prediction error is selected. The difference between the input image and the predicted image is encoded using a discrete cosine transform (hereinafter, referred to as “DCT”) as a prediction error.

【0005】なお、片方向予測を行う画像をPピクチャ
と呼び、両方向予測を行う画像をBピクチャと呼ぶ。ま
た、符号化の初期状態や、伝送エラーが起こった場合の
ために、予測を行わないで一つの画面内で符号化するこ
とがある。この画像をIピクチャと呼ぶ。
[0005] An image for which unidirectional prediction is performed is called a P picture, and an image for which bidirectional prediction is performed is called a B picture. In addition, due to an initial state of encoding or a case where a transmission error occurs, encoding may be performed within one screen without performing prediction. This image is called an I picture.

【0006】図6における画像メモリ6は符号化順に復
号し、符号化時に符号化器(図示せず)に入力された動
画像の順に出力する。例えば、4枚の画像が画像メモリ
6に時系列(Iピクチャ、Pピクチャ、Bピクチャ、B
ピクチャの順)で記憶され、第一の画像Iピクチャを復
号し、第二の画像Pピクチャを復号し、第三および第四
の画像Bピクチャを復号する場合、画像メモリ6は、第
一の画像を最初に出力し、次に第三、第四の画像を出力
し、その後、第二の画像を出力する。このような順序で
画像メモリ6から画像を出力させることによって、符号
化時の動画映像を忠実に再生することが可能となる。
The image memory 6 in FIG. 6 decodes in the order of encoding, and outputs the images in the order of moving images input to an encoder (not shown) at the time of encoding. For example, four images are stored in the image memory 6 in chronological order (I picture, P picture, B picture, B picture).
When decoding the first picture I picture, decoding the second picture P picture, and decoding the third and fourth picture B pictures, the picture memory 6 stores Output the image first, then output the third and fourth images, and then output the second image. By outputting the images from the image memory 6 in such an order, it is possible to faithfully reproduce the moving image at the time of encoding.

【0007】次に、上記の手法により符号化された映像
の伝送方法について説明する。MPEG符号化器(図示
せず)によって圧縮符号化された映像・音声情報は、通
常、通信メディアを介して復号器を所有する他の機器に
伝送される。このとき、圧縮符号化された映像・音声情
報は時系列的に分割伝送されるが、この伝送方法として
は、映像・音声の圧縮符号化データを1つのプログラム
単位で扱うプログラムストリーム(以下、「PS」とい
う)と、映像・音声の圧縮符号化データを複数のプログ
ラム単位で扱うトランスポートストリーム(以下、「T
S」という)がある。
Next, a description will be given of a method of transmitting a video coded by the above method. Video / audio information compressed and encoded by an MPEG encoder (not shown) is usually transmitted to another device having a decoder via a communication medium. At this time, the compression-coded video / audio information is divided and transmitted in a time-series manner. As a transmission method, a program stream (hereinafter, referred to as “program stream”) that handles video / audio compression-coded data in one program unit is used. PS) and a transport stream (hereinafter, “T”) that handles video / audio compression-encoded data in a plurality of program units.
S ”).

【0008】PSは、例えばDVDのような単一メディ
アからの圧縮符号化データが送られてくる場合に用い、
TSは、CSデジタル放送のように、多チャンネルの情
報を一つのチャンネル情報に時系列的に多重化して伝送
する場合に用いる。
The PS is used when compressed and encoded data is transmitted from a single medium such as a DVD.
The TS is used when multi-channel information is multiplexed into one channel information in time series and transmitted as in CS digital broadcasting.

【0009】一方、MPEGでは、このPSとTS間の
データ転送を容易に行うために、両者の中間的なデータ
ストリーム構造をもつPES(Packetized Elememtary
Stream)を設けている。このPESは、あらかじめ定ま
った長さのデータのかたまり(以下、「パケット」とい
う)から構成され、PESパケットとして扱われる。P
Sの場合はこのPESパケットを基本として、複数のP
ESパケットにPS独自の情報を付加して1つのストリ
ームとして扱っている。
On the other hand, in MPEG, in order to facilitate the data transfer between the PS and the TS, a PES (Packetized Elementary) having a data stream structure intermediate between the two.
Stream). The PES is composed of a chunk of data having a predetermined length (hereinafter, referred to as a “packet”), and is treated as a PES packet. P
In the case of S, based on this PES packet,
The information unique to the PS is added to the ES packet to handle it as one stream.

【0010】複数のPESパケットから構成されるPS
には、その中に、例えばビデオ信号やオーディオ信号と
いった各種情報が伝送される。これらの情報は、複数の
PESパケットから構成されるエレメンタリストリーム
(以下、「ES」という)をひとつの情報単位として伝
送される。ビデオ信号の場合は「ビデオES」、オーデ
ィオ信号の場合は「オーディオES」という。
A PS composed of a plurality of PES packets
, Various information such as a video signal and an audio signal are transmitted therein. These pieces of information are transmitted using an elementary stream (hereinafter, referred to as “ES”) composed of a plurality of PES packets as one information unit. A video signal is referred to as “video ES”, and an audio signal is referred to as “audio ES”.

【0011】ここで、ビデオESの構造について説明す
る。図8はビデオESの階層構造を示す図である。ビデ
オESは階層構造を持ったストリームデータであり、そ
の最上位階層をシーケンス層という。32ビットのSH
C(Sequence Header Code)50はシーケンス層の開始
およびシーケンス層独自の情報を示すデータであり、ま
た、SEC(Sequence End Code)51はシーケンス層
の終了を示すデータである。MPEG−2の場合は、S
HC50の後に3つの拡張データが存在し、そのうしろ
にGOP(Group of Picture)52が複数個続いてい
る。
Here, the structure of the video ES will be described. FIG. 8 is a diagram showing a hierarchical structure of the video ES. The video ES is stream data having a hierarchical structure, and the highest layer is called a sequence layer. 32-bit SH
C (Sequence Header Code) 50 is data indicating the start of the sequence layer and information unique to the sequence layer, and SEC (Sequence End Code) 51 is data indicating the end of the sequence layer. For MPEG-2, S
Three extension data exist after the HC 50, and a plurality of GOPs (Group of Picture) 52 continue behind the extension data.

【0012】32ビットのGSC(Group Start Code)
53はGOP層の開始を示すデータであり、その後ろの
TC(Time Code)、CG(Closed Gop)、BL(Broke
n Link)といった情報の後に、Iピクチャ57、Bピク
チャ58、Pピクチャ59がビデオ信号の符号化方法に
よって交互に発生する。
[0012] 32-bit GSC (Group Start Code)
Numeral 53 denotes data indicating the start of the GOP layer. TC (Time Code), CG (Closed Gop), BL (Broke)
After the information such as (n Link), an I picture 57, a B picture 58, and a P picture 59 are generated alternately according to the video signal encoding method.

【0013】各ピクチャそれぞれは、ピクチャ層と呼ば
れるGOP層の下位に存在する。32ビットのPSC
(Picture Start Code)60はピクチャ層の開始を示す
データであり、この後ろに複数個のスライスデータが続
く。
Each picture exists below a GOP layer called a picture layer. 32-bit PSC
(Picture Start Code) 60 is data indicating the start of a picture layer, and is followed by a plurality of slice data.

【0014】上記のようなデータ階層を持つPSの一部
であるGOP52と、PESの関係は、例えばDVDの
場合図9のようになる。PSは、通常、基本となるデー
タ単位である複数個のビデオパック70と、そのビデオ
パック70を構成するデータ単位である複数個のパケッ
ト72に分割できる。DVDの場合、1パック=204
8バイトで、さらにその1パック内にはパックの開始位
置を表すパックヘッダ71があり、また1つのパケット
72の中には、パケットの開始位置を示すパケットヘッ
ダ74と、ビデオスタートコード83と、ビデオデータ
75が存在する。
The relationship between the GOP 52 which is a part of the PS having the above data hierarchy and the PES is as shown in FIG. 9 for a DVD, for example. The PS can usually be divided into a plurality of video packs 70, which are basic data units, and a plurality of packets 72, which are data units constituting the video packs 70. In the case of DVD, one pack = 204
In one pack, there is a pack header 71 indicating the start position of the pack, and in one packet 72, a packet header 74 indicating the start position of the packet, a video start code 83, Video data 75 exists.

【0015】このビデオデータ75に、GOP層内のデ
ータがGHC53を先頭にして分割されて入っている。
このように分割すれば、1GOPのデータを複数個のビ
デオパックによって伝送することが可能であるが、1G
OPのデータ長は可変であることから、整数個のビデオ
パックに分割できない場合は、1GOPを構成するビデ
オパックのうち、最終ビデオパックが2048バイトよ
り少なくなってしまう。その場合は不足分にパディング
73を施し、2048バイトのビデオパックとする。
In the video data 75, the data in the GOP layer is divided and entered with the GHC 53 at the head.
With this division, it is possible to transmit 1 GOP data by a plurality of video packs.
Since the data length of the OP is variable, if the OP cannot be divided into an integer number of video packs, the final video pack of the video packs constituting one GOP will be shorter than 2048 bytes. In that case, padding 73 is applied to the shortage to make a 2048-byte video pack.

【0016】パケットヘッダ74は9〜29バイトで構
成される。パケットスタートコード76はパケットヘッ
ダ74の始まりを示し、ストリームID77はこのパケ
ット72がどのような種類(ビデオ、オーディオ等)の
パケットであるかを示す情報である。また、PESパケ
ットレングス78は、このデータ以後、このパケット7
2の最後までのデータバイト数を表す。また、ビデオパ
ック70内のビデオスタートコード83は、パケット7
2中のビデオデータ75の開始を示すコードであり、こ
のコードの後ろに実際のビデオデータ75が続く。
The packet header 74 is composed of 9 to 29 bytes. The packet start code 76 indicates the start of the packet header 74, and the stream ID 77 is information indicating what type (video, audio, etc.) of the packet 72 is. After this data, the PES packet length 78
2 represents the number of data bytes to the end. The video start code 83 in the video pack 70 is the packet 7
2 is a code indicating the start of the video data 75, and this code is followed by actual video data 75.

【0017】図10は、PESパケットレングス78の
データ長を示す構成図である。例えば、PESパケット
レングス78の値が2025の場合、PESパケットレ
ングス78の直後のデータからビデオデータ75の終わ
りまでのデータ長が2025バイトとなる。
FIG. 10 is a configuration diagram showing the data length of the PES packet length 78. For example, when the value of the PES packet length 78 is 2025, the data length from the data immediately after the PES packet length 78 to the end of the video data 75 is 2025 bytes.

【0018】次に、図6に従って、ビットストリームデ
ータ復号装置の動作について説明する。可変長復号化手
段2には、上記のように符号化されたビットストリーム
データが入力され、可変長復号される。可変長復号化手
段2からは同時に、符号化された予測誤差と、予測モー
ドと、動きベクトルが出力される。符号化された予測誤
差は、逆量子化手段3と逆DCT変換器4により復号さ
れ、加算器5において、動き補償予測手段8から出力さ
れる予測画像と加算される。加算器5から出力される画
像は復号画像であり、画像メモリ6に与えられて記憶さ
れる。加算器5は、符号化順に復号画像を出力するの
で、画像メモリ6は、復号画像を符号化時の画像入力
順、すなわち画像表示順に並び換えて出力する。画像メ
モリ6の出力は、フォーマット変換手段7により表示す
る画像のフォーマットに変換され、D/A変換器9によ
り変換されて出力される。
Next, the operation of the bit stream data decoding device will be described with reference to FIG. The bit stream data encoded as described above is input to the variable length decoding means 2 and subjected to variable length decoding. At the same time, the encoded prediction error, the prediction mode, and the motion vector are output from the variable length decoding means 2. The encoded prediction error is decoded by the inverse quantization means 3 and the inverse DCT transformer 4, and is added by the adder 5 to the prediction image output from the motion compensation prediction means 8. The image output from the adder 5 is a decoded image, which is provided to the image memory 6 and stored. Since the adder 5 outputs the decoded images in the order of encoding, the image memory 6 rearranges and outputs the decoded images in the order of image input during encoding, that is, in the order of image display. The output of the image memory 6 is converted into the format of the image to be displayed by the format conversion means 7, and is converted and output by the D / A converter 9.

【0019】[0019]

【発明が解決しようとする課題】従来のビットストリー
ムデータ復号装置は、上記のように構成されているの
で、例えば、入力されたビットストリーム信号中のビデ
オデータが、伝送途中ノイズなどにより正しく伝送され
なかった場合でも、このデータを復号した異常な画像を
出力してしまうという問題があった。
Since the conventional bit stream data decoding device is configured as described above, for example, video data in an input bit stream signal is correctly transmitted due to noise during transmission. Even if there is no such data, there is a problem that an abnormal image obtained by decoding this data is output.

【0020】この発明は上記のような問題点を解決する
ためになされたもので、入力ビットストリームが正しく
伝送されなかった場合、以上の画像に代えて正常な画像
が出力されるビットストリームデータ復号装置を得るこ
とを目的とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and in the case where an input bit stream is not correctly transmitted, a bit stream data decoding in which a normal image is output instead of the above image The aim is to obtain a device.

【0021】[0021]

【課題を解決するための手段】この発明に係るビットス
トリームデータ復号装置は、入力ビットストリームのエ
ラー判定手段を、入力されたビットストリームデータの
パケット長の情報を検出するパケットヘッダ検出器と、
前記入力されたビットストリームデータのパケット長を
計測するパケット長カウンタと、前記パケット長の情報
と前記パケット長カウンタの出力値を比較するデータ比
較器とで構成し、この比較結果により入力されたビット
ストリームデータのエラーの有無を判定するように構成
し、エラー有りと判定されたとき、前記画像メモリまた
は前記フォーマット変換手段内に記憶されている画像デ
ータを当該エラー画像データに置き換えて出力する処理
手段とを備えたものである。
According to the present invention, there is provided a bit stream data decoding apparatus comprising: a packet header detector for detecting information on a packet length of input bit stream data;
A packet length counter for measuring the packet length of the input bit stream data, and a data comparator for comparing the information on the packet length and the output value of the packet length counter, and the bits input based on the comparison result. A processing unit configured to determine whether there is an error in the stream data, and when it is determined that there is an error, replacing the image data stored in the image memory or the format conversion unit with the error image data and outputting the error image data It is provided with.

【0022】また、入力ビットストリームのエラー判定
手段を、入力されたビットストリームデータのパケット
ヘッダ長の情報を検出するパケットヘッダ検出器と、入
力されたビットストリームデータのパケットヘッダ長を
計測するパケットヘッダ長カウンタと、前記パケット長
の情報と前記パケットヘッダ長カウンタの出力値を比較
するデータ比較器とで構成し、この比較結果により入力
されたビットストリームデータのエラーの有無を判定す
るように構成し、エラー有りと判定されたとき、前記画
像メモリまたは前記フォーマット変換手段内に記憶され
ている画像データを当該エラー画像データに置き換えて
出力する処理手段とを備えたものである。
Further, an error determination means for the input bit stream includes a packet header detector for detecting information of a packet header length of the input bit stream data, and a packet header for measuring the packet header length of the input bit stream data. A length comparator and a data comparator for comparing the information of the packet length with the output value of the packet header length counter, and determining whether or not there is an error in the input bit stream data based on the comparison result. And processing means for, when it is determined that there is an error, replacing the image data stored in the image memory or the format conversion means with the error image data and outputting.

【0023】また、入力ビットストリームのエラー判定
手段を、入力されたビットストリームデータのパケット
ヘッダ情報を検出するパケットヘッダ検出器と、当該ビ
ットストリームデータ復号装置で復号可能なデータプロ
トコルのパラメータの初期値を記憶しているフォーマッ
ト情報記憶手段と、前記パケットヘッダ情報と前記フォ
ーマット情報記憶手段に記憶されている初期値とを比較
するデータ比較器とで構成し、この比較結果により入力
されたビットストリームデータのエラーの有無を判定す
るように構成し、エラー有りと判定されたとき、前記画
像メモリまたは前記フォーマット変換手段内に記憶され
ている画像データを当該エラー画像データに置き換えて
出力する処理手段とを備えたものである。
[0023] Further, the input bit stream error determining means includes a packet header detector for detecting packet header information of the input bit stream data, and an initial value of a parameter of a data protocol that can be decoded by the bit stream data decoding apparatus. And a data comparator for comparing the packet header information with an initial value stored in the format information storage means, and the bit stream data input based on the comparison result. Processing means for determining whether there is an error, and when it is determined that there is an error, replacing the image data stored in the image memory or the format conversion means with the error image data and outputting the error data. It is provided.

【0024】また、入力ビットストリームのエラー判定
手段を、入力されたビットストリームデータのシーケン
スヘッダ情報を検出するシーケンスヘッダ検出器と、前
記シーケンスヘッダに書き込まれているプロファイル情
報およびレベル情報から、当該入力ビットストリームデ
ータの最大ビットレートを算出するビットレート算出器
と、前記シーケンスヘッダ検出器によって検出されたビ
ットレート情報と前記ビットレート算出器の出力を比較
するビットレート比較器とで構成し、この比較結果によ
り入力されたビットストリームデータのエラーの有無を
判定するように構成し、エラー有りと判定されたとき、
前記画像メモリまたは前記フォーマット変換手段内に記
憶されている画像データを当該エラー画像データに置き
換えて出力する処理手段とを備えたものである。
[0024] Further, the error judging means for the input bit stream is determined based on the sequence header detector for detecting the sequence header information of the input bit stream data and the profile information and level information written in the sequence header. A bit rate calculator for calculating the maximum bit rate of the bit stream data; and a bit rate comparator for comparing the bit rate information detected by the sequence header detector with the output of the bit rate calculator. It is configured to determine the presence or absence of an error in the input bit stream data based on the result, and when it is determined that there is an error,
Processing means for replacing the image data stored in the image memory or the format conversion means with the error image data and outputting the error image data.

【0025】[0025]

【発明の実施の形態】この発明の実施の形態であるビッ
トストリームデータ復号装置においては、入力ビットス
トリームのパケット長の検出を行い、このパケット長が
入力ビットストリームのヘッダ情報内にあるパケット長
の情報と異なる場合、入力されたビットストリームデー
タにエラーがあると判断する入力ビットストリームのエ
ラー判定手段を設け、入力されたビットストリームデー
タにエラーがあると判定したときは、画像メモリまたは
フォーマット変換手段に記憶されている画像データを当
該エラー画像データに置き換えて出力する。
DESCRIPTION OF THE PREFERRED EMBODIMENTS In a bit stream data decoding apparatus according to an embodiment of the present invention, the packet length of an input bit stream is detected, and the packet length is determined by the packet length in the header information of the input bit stream. If the input bit stream data is different from the information, an error determination unit is provided for the input bit stream to determine that there is an error in the input bit stream data. Is replaced with the error image data and output.

【0026】また、入力ビットストリームのエラー判定
手段は、入力ビットストリームのパケットヘッダ長の検
出を行い、このパケットヘッダ長が入力ビットストリー
ムのヘッダ情報内にあるパケット長の情報と異なる場
合、入力されたビットストリームデータにエラーがある
と判断する。
The error determination means for the input bit stream detects the packet header length of the input bit stream. If the packet header length is different from the information of the packet length in the header information of the input bit stream, the input is determined. It is determined that there is an error in the bit stream data.

【0027】また、入力ビットストリームのエラー判定
手段は、パケットヘッダに記録されている情報が、フォ
ーマット情報記憶手段に記憶されている初期値と異なる
場合、入力されたビットストリームデータにエラーがあ
ると判断する。
Further, the input bit stream error judging means judges that there is an error in the input bit stream data when the information recorded in the packet header is different from the initial value stored in the format information storage means. to decide.

【0028】また、入力ビットストリームのエラー判定
手段は、入力ビットストリームの中にある、シーケンス
ヘッダに書き込まれているプロファイル情報とレベル情
報から最大ビットレートの算出を行い、シーケンスヘッ
ダから検出されたビットレート情報の値がこの算出値を
超える場合、入力されたビットストリームデータにエラ
ーがあると判断する。
The input bit stream error determination means calculates the maximum bit rate from the profile information and the level information written in the sequence header in the input bit stream, and calculates the bit rate detected from the sequence header. If the value of the rate information exceeds this calculated value, it is determined that there is an error in the input bit stream data.

【0029】以下、この発明をその実施の形態を示す図
面に基づいて具体的に説明する。 実施の形態1.図1は、この発明の実施の形態1である
ビットストリームデータ復号装置を示すブロック図であ
る。図において、1は入力された画像の符号化データを
記憶する入力バッファであり、入力バッファ1の出力は
可変長復号化手段2に与えられる。可変長復号化手段2
の出力は逆量子化手段3に与えられ、逆量子化手段3の
出力は逆DCT変換器4に与えられる。逆DCT変換器
4の出力は加算器5の第一の入力に与えられ、加算器5
の出力は、画像メモリ6に与えられて記憶される。画像
メモリ6の出力はフォーマット変換手段7および動き補
償予測手段8に与えられ、動き補償予測手段8の出力は
加算器5の第二の入力および画像メモリ6に与えられ
る。
Hereinafter, the present invention will be described in detail with reference to the drawings showing the embodiments. Embodiment 1 FIG. FIG. 1 is a block diagram showing a bit stream data decoding apparatus according to Embodiment 1 of the present invention. In the figure, reference numeral 1 denotes an input buffer for storing coded data of an input image, and an output of the input buffer 1 is provided to a variable length decoding means 2. Variable length decoding means 2
Is supplied to the inverse quantization means 3, and the output of the inverse quantization means 3 is supplied to the inverse DCT transformer 4. The output of the inverse DCT converter 4 is provided to a first input of an adder 5,
Are given to the image memory 6 and stored. The output of the image memory 6 is provided to the format conversion means 7 and the motion compensation prediction means 8, and the output of the motion compensation prediction means 8 is provided to the second input of the adder 5 and the image memory 6.

【0030】他方、符号化データは、パケットヘッダ検
出器11と、パケット長カウンタ12に与えられ、パケ
ットヘッダ検出器11の出力はパケット長カウンタ12
およびデータ比較器13に与えられ、パケット長カウン
タ12の出力はデータ比較器13に与えられる。データ
比較器13の出力は画像メモリ6およびフォーマット変
換手段7に与えられ、フォーマット変換手段7の出力
は、D/A変換器9に与えられ、D/A変換器9の出力
は、ビットストリームデータ復号装置の画像出力とな
る。上記構成において、パケットヘッダ検出器11、パ
ケット長カウンタ12およびデータ比較器13でエラー
判定手段20を構成している。
On the other hand, the encoded data is given to a packet header detector 11 and a packet length counter 12, and the output of the packet header detector 11 is
And the data comparator 13, and the output of the packet length counter 12 is provided to the data comparator 13. The output of the data comparator 13 is provided to the image memory 6 and the format converter 7, the output of the format converter 7 is provided to the D / A converter 9, and the output of the D / A converter 9 is the bit stream data. The image is output from the decoding device. In the above configuration, the packet header detector 11, the packet length counter 12, and the data comparator 13 constitute the error determination means 20.

【0031】次に、実施の形態1の動作について説明す
る。入力バッファ1を介して入力された符号化データ
は、可変長復号化手段2で可変長復号され、符号化され
た予測誤差と予測モードと動きベクトルとが出力され
る。この符号化された予測誤差は逆量子化手段3と逆D
CT変換器4により復号され、加算器5において動き補
償予測手段8から出力される予測画像と加算される。こ
の加算器5から出力される画像は復号画像であり、画像
メモリ6に与えられて記憶される。加算器5は符号化順
に復号画像を出力するので、画像メモリ6は、復号画像
を入力順すなわち表示順に並び換えて出力する。
Next, the operation of the first embodiment will be described. The coded data input via the input buffer 1 is variable-length decoded by the variable-length decoding means 2, and the coded prediction error, prediction mode, and motion vector are output. The encoded prediction error is calculated by the inverse quantization means 3 and the inverse D
The decoded image is decoded by the CT converter 4, and is added to the predicted image output from the motion compensation prediction unit 8 in the adder 5. The image output from the adder 5 is a decoded image, which is provided to the image memory 6 and stored. Since the adder 5 outputs the decoded image in the encoding order, the image memory 6 rearranges and outputs the decoded image in the input order, that is, the display order.

【0032】他方、入力された符号化データは、パケッ
トヘッダ検出器11とパケット長カウンタ12に与えら
れ、パケットヘッダ検出器11は、図10に示したパケ
ットスタートコード76を検出することによってパケッ
トデータの開始を知り、さらにパケットヘッダの中から
PESパケットレングス78を検出して、この値をデー
タ比較器13に出力するとともに、パケットスタートコ
ード76およびPESパケットレングス78の検出情報
をパケット長カウンタ12に出力する。
On the other hand, the input encoded data is supplied to a packet header detector 11 and a packet length counter 12, and the packet header detector 11 detects the packet start code 76 shown in FIG. The PES packet length 78 is detected from the packet header, the value is output to the data comparator 13, and the packet start code 76 and the detection information of the PES packet length 78 are transmitted to the packet length counter 12. Output.

【0033】パケット長カウンタ12は、PESパケッ
トレングス78の検出情報が入力されると同時に入力デ
ータの伝送タイミングに同期して入力データ長のカウン
トを開始し、次のパケットスタートヘッダ76の検出情
報が入力されるまでのカウント値を、データ比較器13
に出力する。
The packet length counter 12 starts counting the input data length in synchronization with the transmission timing of the input data at the same time as the detection information of the PES packet length 78 is input. The count value until input is calculated by the data comparator 13
Output to

【0034】データ比較器13は、パケットヘッダ検出
器11から入力されたPESパケットレングス78の値
と、実際のパケット長であるパケット長カウンタ12か
ら入力されたカウント値を比較し、一致しない場合は入
力された符号化データに何らかのデータ欠落、あるいは
ノイズによるエラーデータの混入があると判断してエラ
ー情報を画像メモリ6に出力する。
The data comparator 13 compares the value of the PES packet length 78 input from the packet header detector 11 with the count value input from the packet length counter 12 which is the actual packet length. It is determined that the input coded data contains some data loss or error data due to noise, and outputs error information to the image memory 6.

【0035】エラー情報をうけた画像メモリ6は、加算
器5から入力される画像データの書き込みを禁止すると
ともに、記憶している1フレーム前の画像データをフォ
ーマット変換手段7に出力する。
The image memory 6 receiving the error information prohibits the writing of the image data input from the adder 5 and outputs the stored image data one frame before to the format conversion means 7.

【0036】データ比較器13は、つぎに入力された符
号化データについてパケットヘッダ検出器11で検出さ
れたPESパケットレングス78の値と、パケット長カ
ウンタ12から入力されたカウント値を比較し、一致し
ない場合はエラー情報を画像メモリ6に出力し、画像メ
モリ6は、加算器5から入力される画像データの書き込
みを禁止するとともに、メモリ内に記憶している画像デ
ータをフォーマット変換手段7に出力する、という動作
を繰り返し、一致したときエラー情報の出力を停止す
る。エラー情報の入力がなくなった画像メモリ6は、画
像データの書き込みを再開し、書き込まれた画像データ
をフォーマット変換手段7に出力する通常の復号化処理
に復帰する。
The data comparator 13 compares the value of the PES packet length 78 detected by the packet header detector 11 and the count value input from the packet length counter 12 with respect to the next input coded data. If not, error information is output to the image memory 6. The image memory 6 prohibits writing of the image data input from the adder 5, and outputs the image data stored in the memory to the format conversion means 7. The output of error information is stopped when they match. The image memory 6 from which the input of the error information is stopped resumes the writing of the image data, and returns to the normal decoding process of outputting the written image data to the format conversion means 7.

【0037】なお、実施の形態1では、データ比較器1
3からエラー情報が出力されたとき、画像メモリ6に記
憶している1フレーム前の画像データをフォーマット変
換手段7に出力するようにしたが、図1中に破線で示し
たように、エラー判定手段20からエラー情報をフォー
マット変換手段7に出力し、フォーマット変換手段7内
に記憶されている画像データを、D/A変換器9に出力
するようにしてもよい。これは、通常、フォーマット変
換手段7はメモリを備えており、このメモリにはフォー
マット変換後の画像データが存在するからで、このよう
にしても、画像メモリ6を用いた場合と同等の効果が得
られる。
In the first embodiment, the data comparator 1
3, when the error information is output, the image data of the previous frame stored in the image memory 6 is output to the format conversion means 7. However, as shown by the broken line in FIG. The error information may be output from the means 20 to the format conversion means 7, and the image data stored in the format conversion means 7 may be output to the D / A converter 9. This is because the format conversion means 7 usually has a memory, and the image data after the format conversion exists in this memory. Even in this case, the same effect as in the case of using the image memory 6 is obtained. can get.

【0038】実施の形態2.図2は、この発明の実施の
形態2であるビットストリームデータ復号装置を示すブ
ロック図で、図1と同一符号はそれぞれ同一または相当
部分を示しており、パケットヘッダ検出器11、パケッ
トヘッダ長カウンタ14およびデータ比較器13で構成
したエラー判定手段20を設けたものである。以下、実
施の形態1と異なる部分の構成と、その動作を説明す
る。
Embodiment 2 FIG. 2 is a block diagram showing a bit stream data decoding apparatus according to a second embodiment of the present invention, wherein the same reference numerals as those in FIG. 1 denote the same or corresponding parts, respectively, and a packet header detector 11, a packet header length counter. An error determination means 20 comprising the data comparator 14 and the data comparator 13 is provided. Hereinafter, a configuration of a portion different from the first embodiment and an operation thereof will be described.

【0039】符号化データは入力バッファ1に入力され
るとともに、パケットヘッダ検出器11とパケットヘッ
ダ長カウンタ14に入力される。パケットヘッダ検出器
11は、図9に示したパックスタートコード80を検出
してパックヘッダ71の開始を知り、ついでパックヘッ
ダ71内に書かれているパックスタッフィングレングス
81の情報を読みとり、この情報、すなわちパケットヘ
ッダ74のデータ長の値と、パケットヘッダ74に書き
込まれているパケットスタートコード76の検出情報と
をパケットヘッダ長カウンタ14に出力する。
The coded data is input to the input buffer 1 and input to the packet header detector 11 and the packet header length counter 14. The packet header detector 11 detects the pack start code 80 shown in FIG. 9 to know the start of the pack header 71, then reads the information of the pack stuffing length 81 written in the pack header 71, and That is, the value of the data length of the packet header 74 and the detection information of the packet start code 76 written in the packet header 74 are output to the packet header length counter 14.

【0040】さらにパケットヘッダ検出器11は、パケ
ットヘッダ74の中のPESパケットヘッダレングス7
9の情報を読みとり、このPESパケットヘッダレング
スの値をデータ比較器13に出力するとともに、パケッ
トスタートコード76,PESパケットヘッダレングス
79、およびビデオデータスタートコード83が検出さ
れたことを示す情報をパケットヘッダ長カウンタ14に
出力する。
The packet header detector 11 further includes a PES packet header length 7 in the packet header 74.
9 and outputs the value of the PES packet header length to the data comparator 13, and outputs information indicating that the packet start code 76, the PES packet header length 79, and the video data start code 83 have been detected to the packet. Output to the header length counter 14.

【0041】パケットヘッダ長カウンタ14は、パケッ
トスタートコード76が検出されると同時に入力データ
の伝送タイミングに同期してデータ長のカウントを開始
し、ビデオスタートコード83の検出情報が入力される
までのカウント値をデータ比較器13に出力する。
The packet header length counter 14 starts counting the data length in synchronization with the transmission timing of the input data at the same time when the packet start code 76 is detected, and continues until the detection information of the video start code 83 is input. The count value is output to the data comparator 13.

【0042】データ比較器13は、パケットヘッダ検出
器11から入力されたPESパケットヘッダレングス7
9の値と、実際のパケット長であるパケットヘッダ長カ
ウンタ14から入力されたカウント値を比較し、一致し
ない場合は入力された符号化データに何らかのデータ欠
落、あるいはノイズによるエラーデータの混入があると
判断してエラー情報を画像メモリ6に出力する。
The data comparator 13 has a PES packet header length 7 input from the packet header detector 11.
The value of 9 is compared with the count value input from the packet header length counter 14, which is the actual packet length. If they do not match, there is some missing data in the input coded data, or mixed error data due to noise. And outputs the error information to the image memory 6.

【0043】エラー情報をうけた画像メモリ6は、加算
器5から入力される画像データの書き込みを禁止すると
ともに、記憶している1フレーム前の画像データをフォ
ーマット変換手段7に出力する。
The image memory 6 receiving the error information prohibits the writing of the image data input from the adder 5 and outputs the stored image data of one frame before to the format conversion means 7.

【0044】データ比較器13は、つぎに入力された符
号化データについてパケットヘッダ検出器11で検出さ
れたPESパケットヘッダレングス79の値と、パケッ
トヘッダ長カウンタ14から入力されたカウント値を比
較し、一致しない場合はエラー情報を画像メモリ6に出
力し、画像メモリ6は、加算器5から入力される画像デ
ータの書き込みを禁止するとともに、メモリ内に記憶し
ている画像データをフォーマット変換手段7に出力す
る、という動作を繰り返し、一致したときエラー情報の
出力を停止する。エラー情報の入力がなくなった画像メ
モリ6は、画像データの書き込みを再開し、書き込まれ
た画像データをフォーマット変換手段7に出力する通常
の復号化処理に復帰する。
The data comparator 13 compares the value of the PES packet header length 79 detected by the packet header detector 11 and the count value input from the packet header length counter 14 for the coded data input next. If they do not match, error information is output to the image memory 6. The image memory 6 prohibits writing of the image data input from the adder 5, and converts the image data stored in the memory into the format conversion means 7. The operation of outputting error information is stopped when they match. The image memory 6 from which the input of the error information is stopped resumes the writing of the image data, and returns to the normal decoding process of outputting the written image data to the format conversion means 7.

【0045】なお、図2中に破線で示したように、エラ
ー判定手段20からエラー情報をフォーマット変換手段
7に出力し、フォーマット変換手段7内に記憶されてい
る画像データを、D/A変換器9に出力するようにして
もよい。
As shown by the broken line in FIG. 2, the error information is output from the error determination means 20 to the format conversion means 7 and the image data stored in the format conversion means 7 is converted into a D / A signal. It may be output to the container 9.

【0046】実施の形態3.図3は、この発明の実施の
形態3であるビットストリームデータ復号装置を示すブ
ロック図で、図1と同一符号はそれぞれ同一または相当
部分を示しており、パケットヘッダ検出器11、フォー
マット情報記録手段15およびデータ比較器13で構成
したエラー判定手段20を設けたもので、フォーマット
情報記録手段15は、このビットストリームデータ復号
装置において復号可能なデータプロトコルのパラメー
タ、たとえば符号化データのヘッダに書き込まれている
各種の情報が、メモリや磁気媒体等に書き込まれてい
る。以下、このビットストリームデータ復号装置で復号
可能なデータプロトコルのパラメータの一例として、図
8に示す各ピクチャ57,58,59の最初の部分にあ
るPCT(Picture Coding Type)90を用いた例につ
いて、実施の形態1と異なる部分の動作を説明する。
Embodiment 3 FIG. 3 is a block diagram showing a bit stream data decoding apparatus according to a third embodiment of the present invention. The same reference numerals as those in FIG. 1 denote the same or corresponding parts, respectively. 15 and an error determining means 20 comprising a data comparator 13. The format information recording means 15 is written in a parameter of a data protocol which can be decoded by the bit stream data decoding device, for example, a header of encoded data. Are written in a memory, a magnetic medium, or the like. Hereinafter, as an example of a parameter of a data protocol that can be decoded by the bit stream data decoding device, an example using a PCT (Picture Coding Type) 90 in the first part of each of the pictures 57, 58, and 59 shown in FIG. An operation of a portion different from the first embodiment will be described.

【0047】パケットヘッダ検出器11は、入力された
符号化データからPCT90を検出すると、このPCT
90の情報が書き込まれているアドレス情報をフォーマ
ット情報記憶手段15に出力する。
When the packet header detector 11 detects a PCT 90 from the input coded data,
The address information in which the information 90 is written is output to the format information storage unit 15.

【0048】フォーマット情報記憶手段15は、入力さ
れたアドレス情報に相当するフォーマットデータ、すな
わちPCT90の情報をデータ比較器13に出力する。
PCT90は3ビットの情報であり、ピクチャの種類を
示す。例えば、PCT=“001”はIピクチャ、“0
10”はPピクチャ、“011”はBピクチャと定まっ
ている。なお、MPEG規格では、これ以外の値は使用
を禁じられている。データ比較器13は、パケットヘッ
ダ検出器11から入力されたPCT90の情報と、フォ
ーマット情報記憶手段15から読み出したPCT90の
情報を比較し、一致していない場合は、すなわちPCT
として使用してはいけないデータが検出された場合であ
ることから、入力された符号化データに何らかのノイズ
が付加していると判断し、エラー情報を画像メモリ6に
出力する。
The format information storage means 15 outputs format data corresponding to the input address information, that is, information of the PCT 90, to the data comparator 13.
PCT 90 is 3-bit information and indicates the type of picture. For example, PCT = “001” is an I picture, “0”
"10" is defined as a P picture, and "011" is defined as a B picture.The use of other values is prohibited by the MPEG standard.The data comparator 13 is input from the packet header detector 11. The information of the PCT 90 is compared with the information of the PCT 90 read from the format information storage means 15.
Since data that should not be used is detected, it is determined that some noise has been added to the input coded data, and error information is output to the image memory 6.

【0049】エラー情報をうけた画像メモリ6は、加算
器5から入力される画像データの書き込みを禁止すると
ともに、記憶している1フレーム前の画像データをフォ
ーマット変換手段7に出力する。
The image memory 6 receiving the error information prohibits the writing of the image data input from the adder 5 and outputs the stored image data one frame before to the format conversion means 7.

【0050】データ比較器13は、つぎに入力された符
号化データについてパケットヘッダ検出器11で検出さ
れたPCT90の情報とフォーマット情報記憶手段15
から読み出したPCT90の情報を比較し、一致しない
場合はエラー情報を画像メモリ6に出力し、画像メモリ
6は、加算器5から入力される画像データの書き込みを
禁止するとともに、メモリ内に記憶している画像データ
をフォーマット変換手段7に出力する、という動作を繰
り返し、一致したときエラー情報の出力を停止する。エ
ラー情報の入力がなくなった画像メモリ6は、画像デー
タの書き込みを再開し、書き込まれた画像データをフォ
ーマット変換手段7に出力する通常の復号化処理に復帰
する。
The data comparator 13 stores information of the PCT 90 detected by the packet header detector 11 with respect to the coded data inputted next and the format information storage means 15.
The information of the PCT 90 read from the PCT 90 is compared. If they do not match, error information is output to the image memory 6. The image memory 6 prohibits the writing of the image data input from the adder 5 and stores the image data in the memory. The operation of outputting the current image data to the format conversion means 7 is repeated, and the output of the error information is stopped when they match. The image memory 6 from which the input of the error information is stopped resumes the writing of the image data, and returns to the normal decoding process of outputting the written image data to the format conversion means 7.

【0051】なお、図3中に破線で示したように、エラ
ー判定手段20からエラー情報をフォーマット変換手段
7に出力し、フォーマット変換手段7内に記憶されてい
る画像データを、D/A変換器9に出力するようにして
もよい。
As indicated by the broken line in FIG. 3, the error information is output from the error judging means 20 to the format converting means 7 and the image data stored in the format converting means 7 is converted by the D / A conversion. It may be output to the container 9.

【0052】なお、上記の説明はPCT90を用いた例
について説明したが、符号化/復号化のフォーマットに
よって変化する値であれば他の値を用いても同様の効果
が得られる。
In the above description, an example using the PCT 90 has been described. However, similar effects can be obtained by using other values as long as the values change depending on the encoding / decoding format.

【0053】実施の形態4.図4は、この発明の実施の
形態4であるビットストリームデータ復号装置を示すブ
ロック図で、図1と同一符号はそれぞれ同一または相当
部分を示しており、シーケンスヘッダ検出器16、ビッ
トレート算出器17およびビットレート比較器18で構
成したエラー判定手段20を設けたものである。また、
図5はMPEG−2のビデオESのシーケンス層の詳細
を示す図である。
Embodiment 4 FIG. 4 is a block diagram showing a bit stream data decoding apparatus according to a fourth embodiment of the present invention, wherein the same reference numerals as those in FIG. 1 denote the same or corresponding parts, respectively, and a sequence header detector 16, a bit rate calculator 17 and an error determining means 20 comprising a bit rate comparator 18. Also,
FIG. 5 is a diagram showing details of the sequence layer of the video ES of MPEG-2.

【0054】以下、実施の形態1と異なる部分の動作を
説明する。符号化データは入力バッファ1に入力される
とともに、シーケンスヘッダ検出器16に入力される。
シーケンスヘッダ検出器16は、図5のシーケンス層に
あるBRV(Bit Rate Value)91、PALI(Profil
e And Level Indication)92およびBRE(Bit Rate
Extension)93の3つの情報を検出する。
Hereinafter, the operation of a portion different from the first embodiment will be described. The encoded data is input to the input buffer 1 and to the sequence header detector 16.
The sequence header detector 16 includes a BRV (Bit Rate Value) 91 and a PALI (Profil) in the sequence layer of FIG.
e And Level Indication) 92 and BRE (Bit Rate)
Extension) 93 are detected.

【0055】BRE93は、ビットレート値の上位12
ビット、BRV91はビットレート値の下位18ビット
を示し、計30ビットの2進数でビットレートを表す
(以下、この30ビットを10進数で表したものを「B
RT」という)。また、PALI92はMPEG規格
上、画像のクオリティを示す値で、3ビットのプロファ
イル識別データと4ビットのレベル識別値から構成され
る。プロファイル識別データは画像の圧縮方法を示し、
“000”から“111”までの値をとる。例えば“1
00”はメインプロファイル、“011”はSNRスケ
ーラブルプロファイルといったように3ビットデータで
識別できる。レベル識別値は画像の画素数を示す値で、
“1000”はメインレベル(水平画素数720、ライ
ン数576、毎秒画面数30)、“0100”はハイレ
ベル(水平画素数1440、ライン数1152、毎秒画
面数60)を示している。
The BRE 93 is the upper 12 bits of the bit rate value.
The bit BRV91 indicates the lower 18 bits of the bit rate value, and the bit rate is represented by a total of 30 bits in a binary number (hereinafter, the representation of these 30 bits in a decimal number is "B
RT ”). The PALI 92 is a value indicating the quality of an image according to the MPEG standard, and is composed of 3-bit profile identification data and a 4-bit level identification value. The profile identification data indicates the compression method of the image,
It takes a value from “000” to “111”. For example, "1
"00" can be identified by 3-bit data such as a main profile, "011" can be identified by an SNR scalable profile, etc. The level identification value is a value indicating the number of pixels of an image.
“1000” indicates a main level (720 horizontal pixels, 576 lines, 30 screens per second), and “0100” indicates a high level (1440 horizontal pixels, 1152 lines, 60 screens per second).

【0056】MPEGにおいて、上記のプロファイルお
よびレベルの値は、伝送画像のビットレートの最大値を
決定するもので、例えばメインプロファイルメインレベ
ルで符号化されたMPEGデータの最高ビットレートは
15Mpbs、メインプロファイルハイレベルで符号化
されたMPEGデータの最高ビットレートは80Mpb
sと定まっている。
In the MPEG, the above profile and level values determine the maximum value of the bit rate of the transmission image. For example, the maximum bit rate of MPEG data encoded at the main profile main level is 15 Mpbs, and the main profile The highest bit rate of high-level encoded MPEG data is 80 Mpb
It is fixed as s.

【0057】シーケンスヘッダ検出器16によって検出
されたPALI92は、ビットレート算出器17に出力
され、ビットレート算出器17で入力された符号化デー
タのビットレートTが算出されてビットレート比較器1
8に出力される。また、シーケンスヘッダ検出器16に
よって検出されたBRV(Bit Rate Value)91、BR
E(Bit Rate Extension)93もビットレート比較器1
8に出力される。ビットレート比較器18は、入力され
たビットレートTの値とBRTを比較し、BRT>Tの
場合は、このビットストリームデータ復号装置では想定
していないビットレートの符号化データが入力された
か、あるいはPALI92、BRV91およびBRE9
3がノイズ等によって誤った値を伝送していると判断し
て、エラー情報を画像メモリ6に出力する。
The PALI 92 detected by the sequence header detector 16 is output to the bit rate calculator 17, where the bit rate T of the coded data input by the bit rate calculator 17 is calculated, and the bit rate comparator 1
8 is output. In addition, BRV (Bit Rate Value) 91, BR detected by the sequence header detector 16
E (Bit Rate Extension) 93 is also a bit rate comparator 1
8 is output. The bit rate comparator 18 compares the value of the input bit rate T with the BRT. If BRT> T, whether bit data encoded at a bit rate not expected by the bit stream data decoding device has been input, Or PALI92, BRV91 and BRE9
3 judges that an incorrect value is being transmitted due to noise or the like, and outputs error information to the image memory 6.

【0058】エラー情報をうけた画像メモリ6は、加算
器5から入力される画像データの書き込みを禁止すると
ともに、記憶している1フレーム前の画像データをフォ
ーマット変換手段7に出力する。
The image memory 6 receiving the error information inhibits the writing of the image data input from the adder 5 and outputs the stored image data of one frame before to the format conversion means 7.

【0059】ビットレート比較器18は、つぎに入力さ
れたビットレートTの値とBRTを比較し、BRT>T
の場合はエラー情報を画像メモリ6に出力し、画像メモ
リ6は、加算器5から入力される画像データの書き込み
を禁止するとともに、メモリ内に記憶している画像デー
タをフォーマット変換手段7に出力する、という動作を
繰り返し、BRT≦Tになったときエラー情報の出力を
停止する。エラー情報の入力がなくなった画像メモリ6
は、画像データの書き込みを再開し、書き込まれた画像
データをフォーマット変換手段7に出力する通常の復号
化処理に復帰する。
The bit rate comparator 18 compares the value of the next input bit rate T with the BRT and finds that BRT> T
In the case of (1), the error information is output to the image memory 6, and the image memory 6 prohibits the writing of the image data input from the adder 5, and outputs the image data stored in the memory to the format conversion means 7. The output of the error information is stopped when BRT ≦ T. Image memory 6 with no error information input
Restarts the writing of the image data, and returns to the normal decoding process of outputting the written image data to the format conversion means 7.

【0060】なお、図4中に破線で示したように、エラ
ー判定手段20からエラー情報をフォーマット変換手段
7に出力し、フォーマット変換手段7内に記憶されてい
る画像データを、D/A変換器9に出力するようにして
もよい。
As shown by the broken line in FIG. 4, error information is output from the error determination means 20 to the format conversion means 7, and the image data stored in the format conversion means 7 is converted into a D / A signal. It may be output to the container 9.

【0061】なお、前記各実施の形態では、画像メモリ
6とフォーマット変換手段7を別の構成としたが、両方
ともメモリを用いた処理を行うことから、必ずしもメモ
リを独立して設ける必要はなく、1つのメモリ上で領域
を分割しても、また同じメモリ領域を共有して使用する
構成としても、同等の効果が得られる。
In each of the above embodiments, the image memory 6 and the format conversion means 7 have different configurations. However, since both perform processing using memories, it is not always necessary to provide memories independently. Even if the area is divided on one memory or the same memory area is shared and used, the same effect can be obtained.

【0062】また、前記各実施の形態における処理過程
は、ハードウェアを用いて実現したが、必ずしもハード
ウェアを用いて処理を行う必要はなく、演算処理を行う
ことができる手段、例えばマイクロコンピュータ等を用
いたソフトウェアによる処理を行っても同等の効果が得
られる。
Although the processing steps in each of the above embodiments are realized using hardware, it is not always necessary to perform processing using hardware, but means capable of performing arithmetic processing, such as a microcomputer, etc. The same effect can be obtained by performing processing by software using.

【0063】[0063]

【発明の効果】この発明は以上説明したように構成され
ているので、以下に示すような効果を奏する。
Since the present invention is configured as described above, it has the following effects.

【0064】入力されたビットストリームデータのパケ
ット長の情報を検出するパケットヘッダ検出器と、前記
入力されたビットストリームデータのパケット長を計測
するパケット長カウンタと、前記パケット長の情報と前
記パケット長カウンタの出力値を比較するデータ比較器
とで構成したエラー判定手段で入力されたビットストリ
ームデータのPESパケットのデータ長を監視し、ノイ
ズ等によってデータが欠落してPESパケット長が変化
した場合、エラー有りと判定して画像メモリまたはフォ
ーマット変換手段内に記憶されている画像データを当該
エラー画像データに置き換えて出力するように構成した
ので、見苦しいエラー画像がそのまま出力されるのを防
止できる。
A packet header detector for detecting the packet length information of the input bit stream data, a packet length counter for measuring the packet length of the input bit stream data, the packet length information and the packet length The data length of the PES packet of the input bit stream data is monitored by the error determination means composed of a data comparator for comparing the output value of the counter, and when the data is lost due to noise or the like and the PES packet length changes, Since it is determined that there is an error and the image data stored in the image memory or the format conversion means is replaced with the error image data and output, the unsightly error image can be prevented from being output as it is.

【0065】また、エラー判定手段を、入力されたビッ
トストリームデータのパケットヘッダ長の情報を検出す
るパケットヘッダ検出器と、入力されたビットストリー
ムデータのパケットヘッダ長を計測するパケットヘッダ
長カウンタと、前記パケットヘッダ長の情報と前記パケ
ットヘッダ長カウンタの出力値を比較するデータ比較器
とで構成して、入力されたビットストリームデータのP
ESパケットのデータ長を監視し、ノイズ等によってデ
ータが欠落してPESパケットヘッダ長が変化した場
合、エラー有りと判定して画像メモリまたはフォーマッ
ト変換手段内に記憶されている画像データを当該エラー
画像データに置き換えて出力するように構成したので、
見苦しいエラー画像がそのまま出力されるのを防止でき
る。
The error determination means includes a packet header detector for detecting information on the packet header length of the input bit stream data, a packet header length counter for measuring the packet header length of the input bit stream data, A data comparator for comparing the packet header length information with the output value of the packet header length counter, and
The data length of the ES packet is monitored, and if data is lost due to noise or the like and the PES packet header length changes, it is determined that there is an error, and the image data stored in the image memory or the format conversion means is replaced with the error image. Since it is configured to output by replacing with data,
It is possible to prevent an unsightly error image from being output as it is.

【0066】またエラー判定手段を、入力されたビット
ストリームデータのパケットヘッダ情報を検出するパケ
ットヘッダ検出器と、当該入力されたビットストリーム
データのヘッダ情報の初期値を記憶しているフォーマッ
ト情報記憶手段と、前記パケットヘッダ情報と前記フォ
ーマット情報記憶手段に記憶されている初期値とを比較
するデータ比較器とで構成し、入力されたビットストリ
ームデータの入力された符号化データに付随するヘッダ
情報を、あらかじめ記憶している当該ビットストリーム
データのデータと比較してイレギュラーデータを監視
し、伝送途中でノイズ等によってデータが破壊されて符
号化時のデータから変化した場合、エラー有りと判定し
て画像メモリまたはフォーマット変換手段内に記憶され
ている画像データを当該エラー画像データに置き換えて
出力するように構成したので、見苦しいエラー画像がそ
のまま出力されるのを防止できる。
The error determining means includes a packet header detector for detecting packet header information of the input bit stream data, and a format information storage means for storing an initial value of the header information of the input bit stream data. And a data comparator for comparing the packet header information with an initial value stored in the format information storage means. The header information accompanying the input encoded data of the input bit stream data is The irregular data is monitored by comparing with the data of the bit stream data stored in advance, and when the data is destroyed due to noise or the like during transmission and changed from the data at the time of encoding, it is determined that there is an error. Image data stored in the image memory or format conversion means And then, is output by replacing the error image data, it is possible to prevent the unsightly error image is output as it is.

【0067】またエラー判定手段を、入力されたビット
ストリームデータのシーケンスヘッダ情報を検出するシ
ーケンスヘッダ検出器と、前記シーケンスヘッダに書き
込まれているプロファイル情報およびレベル情報から、
当該入力ビットストリームデータの最大ビットレートを
算出するビットレート算出器と、前記シーケンスヘッダ
検出器によって検出されたビットレート情報と前記ビッ
トレート算出器の出力を比較するビットレート比較器と
で構成し、入力されたビットストリームデータの入力さ
れた符号化データに付随するヘッダ情報内にあるビット
レート情報を監視し、当該ビットストリームデータ復号
装置で復号化できないビットレートを持つ符号化データ
が入力された場合や、伝送途中にノイズ等によってビッ
トレート情報が破壊され、符号化時のビットレート情報
が変化した場合、エラー有りと判定して画像メモリまた
はフォーマット変換手段内に記憶されている画像データ
を当該エラー画像データに置き換えて出力するように構
成したので、見苦しいエラー画像がそのまま出力される
のを防止できる。
The error judging means is provided by a sequence header detector for detecting sequence header information of the input bit stream data, and profile information and level information written in the sequence header.
A bit rate calculator for calculating the maximum bit rate of the input bit stream data, and a bit rate comparator for comparing the bit rate information detected by the sequence header detector and the output of the bit rate calculator, Monitors bit rate information in the header information associated with the input coded data of the input bit stream data, and when coded data having a bit rate that cannot be decoded by the bit stream data decoding device is input. If the bit rate information is destroyed due to noise or the like during transmission and the bit rate information at the time of encoding changes, it is determined that there is an error, and the image data stored in the image memory or the format conversion means is replaced with the error. It is configured to output by replacing with image data, There error image can be prevented from being output as it is.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 この発明の実施の形態1におけるビットスト
リームデータ復号装置を示すブロック図である。
FIG. 1 is a block diagram illustrating a bitstream data decoding device according to Embodiment 1 of the present invention.

【図2】 この発明の実施の形態2におけるビットスト
リームデータ復号装置を示すブロック図である。
FIG. 2 is a block diagram showing a bitstream data decoding device according to Embodiment 2 of the present invention.

【図3】 この発明の実施の形態3におけるビットスト
リームデータ復号装置を示すブロック図である。
FIG. 3 is a block diagram showing a bitstream data decoding device according to Embodiment 3 of the present invention.

【図4】 この発明の実施の形態4におけるビットスト
リームデータ復号装置を示すブロック図である。
FIG. 4 is a block diagram showing a bitstream data decoding device according to Embodiment 4 of the present invention.

【図5】 MPEG−2のビデオESのシーケンス層に
おけるヘッダ情報を示す構成図である。
FIG. 5 is a configuration diagram showing header information in a sequence layer of a video ES of MPEG-2.

【図6】 従来のビットストリームデータ復号装置を示
すブロック図である。
FIG. 6 is a block diagram showing a conventional bit stream data decoding device.

【図7】 従来の動き補償予測方式を示す概念図であ
る。
FIG. 7 is a conceptual diagram showing a conventional motion compensation prediction method.

【図8】 MPEG−2のビデオESの階層構造を示す
構成図である。
FIG. 8 is a configuration diagram showing a hierarchical structure of an MPEG-2 video ES.

【図9】 DVDにおけるGOPとPESの関係を示す
構成図である。
FIG. 9 is a configuration diagram showing a relationship between a GOP and a PES in a DVD.

【図10】 PESパケットレングスを示す構成図であ
る。
FIG. 10 is a configuration diagram showing a PES packet length.

【符号の説明】[Explanation of symbols]

1 入力バッファ、2 可変長復号化手段、3 逆量子
化手段、4 逆DCT変換器、5 加算器、6 画像メ
モリ、7 フォーマット変換手段、9 D/A変換器、
10 エラー判定手段、11 パケットヘッダ検出器、
12 パケット長カウンタ、13 データ比較器、14
パケットヘッダ長カウンタ、15 フォーマット情報
記憶手段、16 シーケンスヘッダ検出器、17 ビッ
トレート算出器、18 ビットレート比較器、20 エ
ラー判定手段。
1 input buffer, 2 variable length decoding means, 3 inverse quantization means, 4 inverse DCT converter, 5 adder, 6 image memory, 7 format conversion means, 9 D / A converter,
10 error determination means, 11 packet header detector,
12 packet length counter, 13 data comparator, 14
Packet header length counter, 15 format information storage means, 16 sequence header detector, 17 bit rate calculator, 18 bit rate comparator, 20 error determination means.

Claims (4)

【特許請求の範囲】[Claims] 【請求項1】 離散コサイン変換を施した後量子化処理
が行われ、さらに可変長符号化されたビットストリーム
データが入力される入力バッファと、 この、入力バッファから入力されたビットストリームデ
ータを可変長復号して符号化された予測誤差と、予測モ
ードと、動きベクトルとを出力する可変長復号化手段
と、 前記符号化された予測誤差を復号する逆量子化手段およ
び逆DCT変換器と、 前記予測モードおよび動きベクトルと、 前記予測誤差と、前記予測画像を加算して復号画像を出
力する加算器と、 この復号画像を記憶し、入力順に並び換えて出力する画
像メモリと、 この画像メモリから出力される復号画像を所定のフォー
マットに変換するフォーマット変換手段と、 このフォーマット変換された復号画像をD/A変換して
出力するD/A変換器とを備えたビットストリームデー
タ復号装置において、 入力されたビットストリームデータのパケット長の情報
を検出するパケットヘッダ検出器、前記入力されたビッ
トストリームデータのパケット長を計測するパケット長
カウンタ、および前記パケット長の情報と前記パケット
長カウンタの出力値を比較するデータ比較器とで構成さ
れ、この比較結果により入力されたビットストリームデ
ータのエラーの有無を判定するように構成されたエラー
判定手段と、 エラー有りと判定されたとき、前記画像メモリまたは前
記フォーマット変換手段内に記憶されている画像データ
を当該エラー画像データに置き換えて出力する処理手段
とを備えたことを特徴とするビットストリームデータ復
号装置。
An input buffer to which a quantizing process is performed after performing a discrete cosine transform, and further, a variable length coded bit stream data is input, and the bit stream data input from the input buffer is variable. Variable-length decoding means for outputting a prediction error encoded by long decoding, a prediction mode, and a motion vector; an inverse quantization means and an inverse DCT transformer for decoding the encoded prediction error; An adder that adds the prediction mode and the motion vector, the prediction error, and the predicted image to output a decoded image, an image memory that stores the decoded image, rearranges and outputs the input image, and an image memory. Format conversion means for converting the decoded image output from the device into a predetermined format; and D / A conversion of the format-converted decoded image. A packet header detector for detecting information on the packet length of the input bit stream data, and a packet for measuring the packet length of the input bit stream data. A length counter, and a data comparator for comparing the information of the packet length with the output value of the packet length counter, and configured to determine whether there is an error in the input bit stream data based on the comparison result. An error determining unit; and a processing unit that replaces the image data stored in the image memory or the format converting unit with the error image data and outputs the error image data when it is determined that there is an error. Bit stream data decoding device.
【請求項2】 前記エラー判定手段が、入力されたビッ
トストリームデータのパケットヘッダ長の情報を検出す
るパケットヘッダ検出器と、 入力されたビットストリームデータのパケットヘッダ長
を計測するパケットヘッダ長カウンタと、 前記パケット長の情報と前記パケットヘッダ長カウンタ
の出力値を比較するデータ比較器とで構成され、この比
較結果により入力されたビットストリームデータのエラ
ーの有無を判定するように構成された請求項1記載のビ
ットストリームデータ復号装置。
2. A packet header detector for detecting information of a packet header length of input bit stream data, a packet header length counter for measuring a packet header length of input bit stream data, and And a data comparator for comparing the packet length information with an output value of the packet header length counter, and configured to determine whether or not there is an error in the input bit stream data based on the comparison result. 2. The bit stream data decoding device according to 1.
【請求項3】 前記エラー判定手段が、入力されたビッ
トストリームデータのパケットヘッダ情報を検出するパ
ケットヘッダ検出器と、 当該ビットストリームデータ復号装置で復号可能なデー
タプロトコルのパラメータの初期値を記憶しているフォ
ーマット情報記憶手段と、 前記パケットヘッダ情報と前記フォーマット情報記憶手
段に記憶されている初期値とを比較するデータ比較器と
で構成され、この比較結果により入力されたビットスト
リームデータのエラーの有無を判定するように構成され
た請求項1記載のビットストリームデータ復号装置。
3. The error determination means stores a packet header detector for detecting packet header information of input bit stream data, and stores initial values of parameters of a data protocol that can be decoded by the bit stream data decoding device. And a data comparator for comparing the packet header information with the initial value stored in the format information storage means. The bit stream data decoding device according to claim 1, configured to determine presence / absence.
【請求項4】 前記エラー判定手段が、入力されたビッ
トストリームデータのシーケンスヘッダ情報を検出する
シーケンスヘッダ検出器と、 前記シーケンスヘッダに書き込まれているプロファイル
情報およびレベル情報から、当該入力ビットストリーム
データの最大ビットレートを算出するビットレート算出
器と、 前記シーケンスヘッダ検出器によって検出されたビット
レート情報と前記ビットレート算出器の出力を比較する
ビットレート比較器とで構成され、この比較結果により
入力されたビットストリームデータのエラーの有無を判
定するように構成された請求項1記載のビットストリー
ムデータ復号装置。
4. An apparatus according to claim 1, wherein said error determining means detects a sequence header information of the input bit stream data, and a profile header and level information written in the sequence header. And a bit rate comparator for comparing the bit rate information detected by the sequence header detector with the output of the bit rate calculator. 2. The bit stream data decoding apparatus according to claim 1, wherein the bit stream data decoding apparatus is configured to determine whether there is an error in the bit stream data.
JP12848297A 1997-05-19 1997-05-19 Bit stream data decoder Pending JPH10322704A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP12848297A JPH10322704A (en) 1997-05-19 1997-05-19 Bit stream data decoder

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP12848297A JPH10322704A (en) 1997-05-19 1997-05-19 Bit stream data decoder

Publications (1)

Publication Number Publication Date
JPH10322704A true JPH10322704A (en) 1998-12-04

Family

ID=14985842

Family Applications (1)

Application Number Title Priority Date Filing Date
JP12848297A Pending JPH10322704A (en) 1997-05-19 1997-05-19 Bit stream data decoder

Country Status (1)

Country Link
JP (1) JPH10322704A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002112275A (en) * 2000-07-25 2002-04-12 Matsushita Electric Ind Co Ltd Image decoding method, image decoder, and data storage medium
JP2002374172A (en) * 2001-06-14 2002-12-26 Sony Corp Apparatus and method for recording
US6674480B2 (en) 2000-01-31 2004-01-06 Nec Electronics Corporation Device for and method of converting a frame rate in a moving picture decoder, and a record medium and an integrated circuit device for implementing such a method
JP2005535885A (en) * 2002-08-13 2005-11-24 ユニヴァースティ オブ ヴァージニア パテント ファウンデイション Method, system and computer program product for processing self-monitoring blood glucose (SMBG) data to promote diabetes self-management
JP2006211201A (en) * 2005-01-27 2006-08-10 Sanyo Electric Co Ltd Digital broadcasting receiver
JP2009159462A (en) * 2007-12-27 2009-07-16 Nippon Telegr & Teleph Corp <Ntt> Objective quality evaluating method, objective quality evaluating apparatus, and program
US8291464B2 (en) 2002-03-15 2012-10-16 Hitachi, Ltd. Digital broadcast receiving apparatus
JP2013134301A (en) * 2011-12-26 2013-07-08 Renesas Electronics Corp Playback system
WO2013136678A1 (en) * 2012-03-16 2013-09-19 パナソニック株式会社 Image decoding device and image decoding method

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6674480B2 (en) 2000-01-31 2004-01-06 Nec Electronics Corporation Device for and method of converting a frame rate in a moving picture decoder, and a record medium and an integrated circuit device for implementing such a method
JP2002112275A (en) * 2000-07-25 2002-04-12 Matsushita Electric Ind Co Ltd Image decoding method, image decoder, and data storage medium
JP2002374172A (en) * 2001-06-14 2002-12-26 Sony Corp Apparatus and method for recording
US8291464B2 (en) 2002-03-15 2012-10-16 Hitachi, Ltd. Digital broadcast receiving apparatus
JP2005535885A (en) * 2002-08-13 2005-11-24 ユニヴァースティ オブ ヴァージニア パテント ファウンデイション Method, system and computer program product for processing self-monitoring blood glucose (SMBG) data to promote diabetes self-management
JP2006211201A (en) * 2005-01-27 2006-08-10 Sanyo Electric Co Ltd Digital broadcasting receiver
JP4693427B2 (en) * 2005-01-27 2011-06-01 京セラ株式会社 Digital broadcast receiver
JP2009159462A (en) * 2007-12-27 2009-07-16 Nippon Telegr & Teleph Corp <Ntt> Objective quality evaluating method, objective quality evaluating apparatus, and program
JP2013134301A (en) * 2011-12-26 2013-07-08 Renesas Electronics Corp Playback system
WO2013136678A1 (en) * 2012-03-16 2013-09-19 パナソニック株式会社 Image decoding device and image decoding method
CN104170386A (en) * 2012-03-16 2014-11-26 松下电器产业株式会社 Image decoding device and image decoding method
JPWO2013136678A1 (en) * 2012-03-16 2015-08-03 パナソニックIpマネジメント株式会社 Image decoding apparatus and image decoding method

Similar Documents

Publication Publication Date Title
RU2310290C2 (en) Method for buffering images for predicting and displaying standards
US6516034B2 (en) Stream processing apparatus and method
KR100628494B1 (en) Image decoding method and apparatus, and storage medium
JP5242404B2 (en) Adaptive GOP structure in video streaming
JP3302939B2 (en) Video signal decompressor for independently compressed even and odd field data
JPH09121358A (en) Picture coding/decoding device and its method
JPH10257502A (en) Hierarchical image encoding method, hierarchical image multiplexing method, hierarchical image decoding method and device therefor
JP3004215B2 (en) Variable bit rate video decoding device with variable speed and high speed playback function
JPH09187007A (en) Resynchronizing method for data stream including error, encoder and decoder
JPH10322704A (en) Bit stream data decoder
JP2002027469A (en) Bit stream converting method and device, and program recording medium
JP3852366B2 (en) Encoding apparatus and method, decoding apparatus and method, and program
JP2894958B2 (en) Image decoding method and apparatus
JP3895414B2 (en) Video decoding device
JP2002027483A (en) Picture coding system, picture decoding system, and storage media
JP5017223B2 (en) Video processing apparatus, video compression encoding apparatus, video decoding / reproducing apparatus, and video reproducing method
JP5509262B2 (en) Video processing apparatus, video compression encoding apparatus, video decoding / reproducing apparatus, and video reproducing method
JP3240737B2 (en) Image signal encoding method and apparatus, decoding method and apparatus
JP3141149B2 (en) Image coding device
JP2006262016A (en) Error-correcting device
JP2001186523A (en) Image-processing unit and its method and storage medium
JPH1155663A (en) Image transmitter and image transmission method
KR0123092B1 (en) Method and apparatus for coding a code indicating picture starting location
KR0147941B1 (en) Encoder for fast play
KR100397133B1 (en) Method and System for compressing/transmiting of a picture data

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20040625

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20051012

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060307

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060426

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070206