JPH11262010A - エラー許容モードビデオコデック方法及びその装置 - Google Patents
エラー許容モードビデオコデック方法及びその装置Info
- Publication number
- JPH11262010A JPH11262010A JP10342192A JP34219298A JPH11262010A JP H11262010 A JPH11262010 A JP H11262010A JP 10342192 A JP10342192 A JP 10342192A JP 34219298 A JP34219298 A JP 34219298A JP H11262010 A JPH11262010 A JP H11262010A
- Authority
- JP
- Japan
- Prior art keywords
- bit
- variable length
- video codec
- motion vector
- bit area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
- H04N19/69—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving reversible variable length codes [RVLC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/164—Feedback from the receiver or from the transmission channel
- H04N19/166—Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
- H04N19/66—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving data partitioning, i.e. separation of data into packets or partitions according to importance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
- H04N19/68—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving the insertion of resynchronisation markers into the bitstream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
できるエラー許容モードビデオコデック方法を提供す
る。 【解決手段】 本発明のエラー許容モードビデオコデッ
ク方法は、エラー許容モードにおいて前記ビデオデータ
の各マクロブロック領域よりヘッダデータ部ビット領
域、モーションベクトルデータ部ビット領域、及び離散
コサイン変換データ部ビット領域に分割する段階20
と、前記分割されたビット領域を可変長コーディングす
る段階22と、前記可変長コーディングされたビット領
域のうち復元に必要な所定の優先順位に基づいて選択さ
れたビット領域を逆可変長コーディングする段階24
と、可変長コーディングまたは逆可変長コーディングさ
れたビット領域にマーカーを挿入する段階26とを含む
ことを特徴とする。
Description
dec:符復号化)方法及びその装置に係り、特にエラー
許容モードビデオコデック方法及びその装置に関する。
また本発明は、本願の出願人により出願された”エラー
許容モードにおけるビデオコデック方法(Video Codec
Method in Error Resilient mode)”というタイトルの
米国特許仮出願第60/067,013号に基づく。
状況下で、ビデオコデックは全体フレームをビットスト
リームに符号化するにあたってチャンネルエラーに対応
する能力が減少されるが、これは、ビットストリームに
おいてエラーの生じた部分を復元すべきか、それとも捨
てるべきかを決定するための判断要素がないからであ
る。そこで、あるフレームの一定部分がエラーによって
ビット損失が生じた場合か、または全体的にエラーがあ
るものかを決めづらいので、全体フレームの符号化され
たビットストリームを無視し、次のフレームに対するビ
ットストリームの開始点を探さなければならないといっ
た欠点があった。
かかるコデックでは、付加的な装置を別に設けその判断
要素として使用している。一例としてH.263標準で
定義されたコデックにおいては、ピクチャ開始コード
(PSC:Picture Start Code)を置き、このフィール
ド情報の次にエラーが受信された場合は以降の部分を無
視し次のピクチャ開始コード(PSC)を探す方法を用
いている。また、ブロック群(GOB:Group Of Bloc
k)の開始を表示するブロック群開始コード(GBS
C:GOB Start Code)を置き、この情報の次にエラーが
受信された場合はその以降の部分のみ無視し次のブロッ
ク群を探すことにより、捨てられる部分を減らしてい
る。
モードコデックにおいて生成されたビデオデータパケッ
トの一例が示されている。図1に示すビデオデータパケ
ットは、MPEG−4コデックにおいて生じたビデオデ
ータパケットの一例であって、このパケットを参照すれ
ば、従来の技術にかかるエラー許容モードコデックはモ
ーションデータ(motion data)とテクスチャーデータ
(texture data)とに分離して符号化を行う。モーショ
ンデータはコーディングの可否を表示するCODビッ
ト、各マクロブロックの色度種類を表示するマクロブロ
ックパターン色度(MCBPC:MaCro Block Pattern
Chrominance)ビット及びモーションベクトルよりな
り、テクスチャーデータはCBPY(Coded Block Patt
ern luminance(Y))、DQUANT(Data Quantizatio
n)、DCT(Discrete Cosine Transform)データより
なる。なお、前記の“COD”は、ビットストリーム内
で符号化の有無を示すフィールドであって、コードを示
す略語である。このモーションデータとテクスチャーデ
ータは、モーションマーカー(MM:motion marker)
に分離される。また、DCTデータは逆可変長コーディ
ング(Reversible Variable Length Coding:RVL
C)によりコーディングされる。
トストリームのデコーディング過程について説明する。
まず、前記ビットストリームにおいて再同期マーカー
(RM)を見つける。一応再同期マーカーを見つける
と、次の再同期マーカーが見つかるまでの情報は一つの
パケットとされる。モーションベクトルよりなるモーシ
ョンベクトルデータ部(MVDP:Motion Vector Data
Part)には予測によるモーションベクトルのみ存在す
るので、実際にモーションベクトルは以前のデコーディ
ングされたモーションベクトルがある場合に限って使用
可能である。そこで、もしビットストリームの中でモー
ションベクトルデータ部にエラーが見つかると、該当す
る全体パケットが無視され、次のパケットに該当する再
同期マーカーを見つけてデコーディングすべきであるか
ら、情報の損失が多いといった欠点がある。
損失が少なく、エラー許容を大いに付加できるエラー許
容モードビデオコデック方法を提供することにある。本
発明の他の目的は、前記ビデオコデック方法を実行する
コンピュータにて読取りできる記録媒体を提供すること
にある。本発明のさらに他の目的は、前記方法を具現す
るエラー許容モードビデオコデック装置を提供すること
にある。
に、本発明にかかるビデオコデック方法は、エラー許容
モードにおいて前記ビデオデータの各マクロブロック領
域よりヘッダデータ部ビット領域、モーションベクトル
データ部ビット領域、及び離散コサイン変換データ部ビ
ット領域に分割する段階と、前記分割されたビット領域
を可変長コーディングする段階と、前記可変長コーディ
ングされたビット領域のうち復元に必要な所定の優先順
位に基づいて選択されたビット領域を逆可変長コーディ
ングする段階と、可変長コーディングまたは逆可変長コ
ーディングされたビット領域にマーカーを挿入する段階
とを含むことを特徴とする。
発明にかかるビデオコデック装置は、エラー許容モード
において前記ビデオデータの各マクロブロック領域より
ヘッダデータ部ビット領域、モーションベクトルデータ
部ビット領域、及び離散コサイン変換データ部ビット領
域に分割する手段と、前記分割されたビット領域を可変
長コーディングする手段と、前記可変長コーディングさ
れたビット領域のうち復元に必要な所定の優先順位に基
づいて選択されたビット領域を逆可変長コーディングす
る手段と、可変長コーディングまたは逆可変長コーディ
ングされたビット領域にマーカーを挿入する手段とを含
むことを特徴とする。
発明による好適な実施形態について詳細に説明する。図
2には、本発明の実施形態にかかるエラー許容モードビ
デオコデック方法の主な段階が示されている。図2を参
照すれば、本発明にかかるエラー許容モードビデオコデ
ック方法は、分割段階20、可変長コーディング段階2
2、選択されたビット領域に対する逆可変長コーディン
グ段階24、及びマーカー挿入段階26を含んでなる。
分割(partitioning)によりヘッダデータ部(HDP:
Header Data Part)ビット領域が構成され、同じく、モ
ーションベクトルデータとDCTデータに対する分割に
よりそれぞれモーションベクトルデータ部(MVDP:
Motion Vector Data Part)ビット領域とDCTデータ
部(DDP:DCT Data Part)ビット領域とが構成され
る。
ディングされた状態に関する情報を含む。すなわち、ヘ
ッダデータは、現マクロブロックが現フレームの内容を
そのままコーディングしたインターマクロブロックか、
それとも前フレームの差をコーディングしたイントラマ
クロブロックかを示しているので、このヘッダデータに
エラーが生じると、極めて深刻な情報損失を招く。そこ
で、このヘッダデータは重要度が高く、復元に際して優
先的に復元すべきである。これにより、一例としてヘッ
ダデータのうちコーディングの可否の状態を表示するマ
クロブロック識別(COD)ビットとマクロブロックパ
ターン色度(MCBPC)ビットとは、一つの新たなシ
ンテックス(COD+MCBPC)ビットに結合して分
割するのが望ましい。このように結合して分割するのが
好適であるのは以下の理由に起因する。
してCODビットには1ビット、MCBPCビットには
可変長コードが使用されている。しかし乍ら、CODビ
ットは0と1がいずれも存在できるので、エラーが生じ
たかを識別しづらい。しかも、可変長コードを使用する
MCBPCビットの場合であっても、受信されたビット
にエラーが生じた場合、そのエラービットが可変長コー
ドテーブルに存在する可能性が高いので、エラーの検出
が難しい。したがって、本発明にかかるエラー許容モー
ドビデオコデック方法の一実施形態によると、分割時に
CODビットとMCBPCビットとを結合し、結合され
たビット領域を逆可変長コーディングすることにより、
ビットが変更されたかどうかが識別し易くなる。
1001などのエラーが生じた場合であってもエラーと
して識別できるので、エラーを含む情報を使用する可能
性を減らすことができる。しかも、逆可変長コーディン
グによりコーディングされたので、逆方向の復元も可能
になる。しかし乍ら、必要に応じてヘッダデータ部は結
合方法を利用することなく、ヘッダデータの単独的な分
割により構成することもある。
ブロック単位で行われるので、各パケットに一番初のマ
クロブロックの番号を表示する最初マクロブロックイン
デックスビット領域を挿入する段階を含むことにより、
デコーディング時に参照できるようにするのが一層好適
である。また、この分割段階20では、前記モーション
ベクトルデータ部ビット領域の次に、予測によるもので
ない、絶対モーションベクトル情報を含む最終絶対モー
ションベクトルビットを挿入する段階を含むのが望まし
い。さらに、分割段階20では、パケットの一連番号を
表示するパケット番号ビット領域を付加情報として挿入
する段階をさらに含むのが望ましい。
データ部ビット領域、モーションベクトルデータ部ビッ
ト領域、及びDCTデータ部ビット領域に対して可変長
コーディング作業が行われる。また、パケット番号及び
最終絶対モーションベクトルビットも可変長コーディン
グされる。
長コーディングされたビット領域のうち復元に必要な所
定の優先順位に基づいて選択されたビット領域に対し逆
可変長コーディング変換を行う。すなわち、デコーディ
ング時に、もし損失が生じると全体パケットやマクロブ
ロックが損失されうる重要な情報に対して逆可変長コー
ディングを行うのである。優先順位が必要な理由につい
て詳細に説明すれば以下の通りである。
クロブロックが現フレームの内容をそのままコーディン
グしたインターマクロブロックか、それとも前フレーム
の差をコーディングしたイントラマクロブロックかを示
している。ほとんどのマクロブロックは、圧縮効率を高
めるためにインターマクロブロックから構成される。イ
ンターマクロブロック中ヘッダ部にエラーが生じるとモ
ーションベクトル部、DCTデータ部が使用できず、モ
ーションベクトル部にエラーが生じるとDCTデータ部
が使用できない。したがって、ヘッダ部、モーションデ
ータ部、及びDCTデータ部の順番で重要度がつけられ
る。すなわち、マクロブロック内にはかかる重要度に該
当する優先順位が存在し、その優先順位に従って復元さ
れる必要がある。このとき、全てのデータを逆可変長コ
ーディングすることなく、優先順位をつけて選択的に逆
可変長コーディングをするのは、逆可変長コーディング
をすると、可変長コーディングを行った場合に比べビッ
ト数が増大するので、限られたチャンネル容量を考慮し
たからである。
デオコデック方法は、チャンネルの容量、エラー状況、
混雑度などチャンネルの特性に関する情報をバックチャ
ンネル(back channel)等を介して受信することにより
チャンネルの特性を識別する段階をさらに含み、前記チ
ャンネル特性識別段階においてチャンネル特性が許容す
る場合は、例えば、DCTデータ部ビット領域のように
優先順位の低い所定のビット領域を逆可変長コーディン
グし、チャンネル特性が許容しない場合は、前記ビット
領域を可変長コーディングする段階をさらに含むことに
より、エラー許容を増大せしめつつも、チャンネルの特
性をいずれも満足せしめるように具現するのが一層望ま
しい。
別段階でチャンネル特性が許容する場合は、例えば、D
CTデータ部ビット領域のように優先順位の少ないビッ
ト領域には付加情報を挿入することによりデコーディン
グ時に参照できるようにする。
上げて詳細に説明する。まず、ヘッダ部の情報をDCT
データ部内へもう一度送ることが可能である。これは重
要度の高いヘッダ部ではエラーが生じ、モーションベク
トル部とDCTデータ部ではエラーが生じない場合のた
めのものであり、この状況は実際に生じうる。このよう
にヘッダデータをDCTデータ部の後ろに位置づけるこ
とにより、現データパケットを捨てることなく、復元す
ることができる。第二、DCTデータ領域内へCRCを
付加情報として送ることが可能である。例えば、DCT
データはDC値として8ビットの固定長コード(FL
C)を、AC値として可変長コード(VLC)を使用す
る。8ビットの固定長コードはエラーを検出するのが相
対的に難しい。エラーの検出を助けるために、この8ビ
ットの固定長コードにCRCを加えることにより復元性
を向上させることができる。さらに、前記8ビットの固
定長コードと共に固定長コードを使用する他のビット、
例えば、量子化値を表示するQPビットをCRCを作る
にあたって使用することもできる。この方法によりDC
Tデータ部において固定長コードのビットにCRCを加
えてデコーディング時にエラー復旧性を増大させうる。
現パケット内でエラーの生じた部分を復元可能にした
り、エラー検出が難しい部分をさらに容易にエラー検出
可能にするためのものである。また、本発明の実施形態
にかかるエラー許容モードビデオコデック方法において
は、逆可変長コーディングをする時、前記チャンネル特
性識別段階でチャンネル特性により特性の異なるRVL
Cコーディングテーブルを使用することによりエラー検
出をさらに効率よく行う。
分するための再同期マーカー、ヘッダ部とモーションベ
クトル部とを区分する情報ビットとしてヘッダマーカー
を挿入する。さらに、マーカー挿入段階26では、モー
ションベクトルデータ部とDCTデータ部とを区分する
ためのモーションマーカーを挿入する。前記ヘッダマー
カーは、ヘッダデータ部のコーディングには使用しない
コードワードを用いてなるので、デコーディング時に区
別可能にするのが望ましい。
明の実施形態にかかるエラー許容モードビデオコデック
装置を示した。図3を参照すれば、本発明にかかるエラ
ー許容モードビデオコデック装置は、分割手段30、可
変長コーディング手段32及び前記可変長コーディング
されたビット領域のうち復元に必要な所定の優先順位に
基づいて選択されたビット領域を逆可変長コーディング
する逆可変長コーディング手段34を備える。また、前
記エラー許容モードビデオコデック装置は、チャンネル
の容量、エラー状況、混雑度などチャンネルの特性に関
する情報を、例えば、バックチャンネル(図示せず)等
を介して受信することによりチャンネルの特性を識別す
るチャンネル識別手段36と、可変長コーディングまた
は逆可変長コーディングされたビット領域にマーカーを
挿入するマーカー挿入手段38とを備える。
図2に基づいて述べられたように、エラー許容モードに
おいて前記ビデオデータの各マクロブロック領域からヘ
ッダデータ部(HDP)ビット領域、モーションベクト
ルデータ部(MVDP)ビット領域及び離散コサイン変
換データ部(DDP)ビット領域に分割を行う。また前
記分割手段は、前記ヘッダデータ部ビットを、例えば、
コーディング状態(COD)ビットとマクロブロックパ
ターン色度(MCBPC)ビットのように、復元にあた
って重要度の高い所定の複数のビット領域を結合し一つ
の新たなシンテックス(COD+MCBPC)ビットと
して構成するのが望ましい。
たビット領域を入力して可変長コーディングを行い、逆
可変長コーディング手段34では、可変長コーディング
されたビット領域のうち一例としてデコーディング時に
もし損失されれば全体パケットやマクロブロックが損失
されうる可能性などのように、復元に必要な所定の優先
順位に基づいて選択されたビット領域に対してエラー復
旧性の良い逆可変長コーディング変換を行う。しかし乍
ら、逆可変長コーディングを行えば、可変長コーディン
グを行った場合に比べビット数が増大するので、限られ
たチャンネル容量を考慮した上で優先順位をつけ、選択
されたビット領域に対してのみ前記逆可変長コーディン
グを行うのが望ましい。
は、チャンネル特性が許容すると決せられた場合は離散
コサイン変換データ部のように優先順位の少ないビット
領域を逆可変長コーディングし、チャンネル特性が許容
しないと決せられた場合は前記ビット領域を可変長コー
ディングするように可変長コーディング手段32と逆可
変長コーディング手段34とを制御する。代案として、
付加情報を挿入する手段(図示せず)をさらに具備し
て、チャンネル特性識別手段36においてチャンネル特
性が許容すると決せられた場合、DCTデータ部のよう
に優先順位の少ないビット領域に付加情報を挿入するこ
とも可能である。さらに、逆可変長コーディング手段3
4は、前記チャンネル特性識別手段においてチャンネル
特性が許容すると決めた場合は、図2に基づいて述べら
れた効果を成し遂げるために、それぞれ他のコーディン
グテーブルを用いて逆可変長コーディングを行うのが望
ましい。
は、図2に基づいて述べられたような効果を成し遂げる
ために、各パケットにおいて一番初のマクロブロックの
番号を表示する最初マクロブロックインデックス(FM
BI:First Macro Block Index)ビット領域を挿入す
る手段(図示せず)をさらに含み、逆可変長コーディン
グ手段34は最終絶対モーションベクトル(LAMV:
Last Absolute MotionVector)ビットを逆可変長コーデ
ィングするのが望ましい。さらに、前記ビデオコデック
装置は、再同期マーカービット領域の次にパケットの一
連番号を表示するパケット番号(PN:Packet Numbe
r)ビット領域を付加情報として挿入する手段(図示せ
ず)と、前記モーションベクトルデータ部ビットの次に
絶対モーションベクトル情報を含む最終絶対モーション
ベクトルビットを挿入する手段(図示せず)とをさらに
含むのが望ましい。
を区分するための再同期マーカー(RM)と、ヘッダ部
とモーションベクトル部とを区分する情報ビットとして
ヘッダデータ部のコーディングには使用しないコードワ
ードを用いてなるヘッダマーカー(HT)及びモーショ
ンベクトルデータ部とDCTデータ部とを区分するため
のモーションマーカー(MM)を挿入する。このとき、
前記ヘッダマーカーは、ヘッダデータ部のコーディング
には使用しないコードワードを用いてなることにより、
デコーディング時に区別可能にするのが望ましい。
オデータパケットの一例が示されている。図4を参照す
れば、前記方法により生成されたビデオデータパケット
は、再同期マーカー(RM)ビット、パケット番号(P
N)ビット、及び最初マクロブロックインデックス(F
MBI)ビットを含む。また前記パケットは、ヘッダデ
ータ部(HDP)ビット、ヘッダマーカー(HM)ビッ
ト、及びモーションベクトルデータ部(MVDP)ビッ
トを含む。また前記パケットは、最終絶対モーションベ
クトル(LAMV)ビット、モーションマーカー(M
M)、及びDCTデータ部(DDP)を含む。
トにおいて、再同期マーカービットはビデオデータパケ
ットの開始を表示し、これによりデコーディング時に従
来の技術でのように、パケットの開始点を見出すことが
できる。パケット番号は各パケットの一連番号を表示
し、付加情報として使用できる。最初マクロブロックイ
ンデックスビットは、各パケットにおいて一番初のマク
ロブロックの番号を表示する。本実施形態においてヘッ
ダデータ部ビットは、MPEG−4またはH.263標
準で定義されたコーディング状態(COD)ビットとマ
クロブロックパターン色度(MCBPC)ビットとが一
つの新たなシンテックス(COD+MCBPC)ビット
として結合され、前記ビットは逆可変長コーディングさ
れてなる。ヘッダマーカービットは、ヘッダ部とモーシ
ョンベクトル部とを区分する情報ビットであって、ヘッ
ダデータ部ビットのCOD+MCBPCコーディングに
は使用しないコードワードを用いてなる。
ーションベクトル予測により生じた情報を逆可変長コー
ディング法によりコーディングしたモーションベクトル
データ部分である。DCTデータ部ビットには、離散コ
サイン変換に関わる情報を含む領域であって、CBPY
ビット、DQUANTビット、及びDCT係数がコーデ
ィングされている。また、DCTデータ部ビットには、
現パケットで使用された情報のうち受信後復号化するに
あたってエラー確認及び復元に必要な情報を挿入するの
が望ましい。かかる情報の挿入は、同じくチャンネルの
特性によって選択的に適用しうる。モーションマーカー
ビットは、モーションベクトルデータ部ビットとDCT
データ部ビットとを区分するためのものである。
たビデオデータパケットがデコーディングされる過程に
ついて説明する。まず、受信されたビットストリームに
おいて再同期マーカーを見出すと、従来の技術でのよう
に、次の再同期マーカーが見つかるまでは一つのパケッ
トとされる。もし、ヘッダデータ部においてエラーが生
じた場合、前記ヘッダデータ部は逆可変長コーディング
法によりコーディングされているので、順方向のデコー
ディングのみでなく、逆方向のデコーディングも可能に
なる。例えば、次パケットのパケット番号と最初マクロ
ブロックインデックスとを用いてヘッダデータ部を復元
することも可能である。すなわち、次パケットの最初マ
クロブロックインデックスから1を引いた値が現パケッ
トのマクロブロック番号であるから、逆方向デコーディ
ングを用いヘッダデータ部ビットをエラーの生じた領域
まで復元可能になる。さらに、モーションベクトルデー
タ部ビットをモーションマーカーを見出すまでデコーデ
ィングし、これによりモーションベクトル予測によるモ
ーションベクトルがデコーディングされる。このデコー
ディング過程においてエラーが生じると、前記モーショ
ンベクトルデータ部ビットも同じく逆可変長コーディン
グされているので、逆方向のデコーディングが可能にな
る。
ンコーディングされたビデオデータパケットをデコーデ
ィングする過程と比較して説明すれば、従来の技術にか
かる方法ではモーションベクトルデータ部ビットにモー
ション予測によるモーションベクトルのみ存在するの
で、実質的なモーションベクトルは、以前にデコーディ
ングされたモーションベクトルがある場合にのみ使用可
能であった。しかし乍ら、本発明にかかるコデック方法
では、最終のモーションベクトルを予測しない絶対モー
ションベクトルを逆可変長コーディング法によりコーデ
ィングして送ることになっているから、この最終絶対モ
ーションベクトルを用い逆方向にデコーディングする場
合、以前のモーションベクトルに対して独立的になる。
さらに、DDPビット領域は、前記DDPビット領域に
エラーが受信されれば可変長コーディングでコーディン
グされた場合は前記パケットを無視するしかないもの
の、逆可変長コーディングでコーディングされた場合は
逆方向のデコーディングが行えるので、エラー許容がさ
らに与えられる効果を奏する。また、前記DDPビット
領域に復元に必要な付加情報がエンコーディングされて
いる場合は、これを用いてデコーディングに使用するこ
とができる。
ピュータにおいて実行可能なプログラムで作成すること
ができる。また、コンピュータで使用される媒体より前
記プログラムを動作させる汎用ディジタルコンピュータ
で具現可能である。前記媒体は磁気記録媒体(例:フロ
ッピーディスク、ハードディスク等)、光記録媒体
(例:CD−ROM、DVD等)、及びキャリアウェー
ブ(例:インターネットを介して伝送)などの貯蔵媒体
を含む。
て前記ビデオデータの各マクロブロック領域からヘッダ
データ部ビット領域、モーションベクトルデータ部ビッ
ト領域、及び離散コサイン変換データ部ビット領域に分
割する段階と、前記分割されたビット領域を可変長コー
ディングする段階と、前記可変長コーディングされたビ
ット領域のうち復元に必要な所定の優先順位に基づいて
選択されたビット領域を逆可変長コーディングする段
階、及び可変長コーディングまたは逆可変長コーディン
グされたビット領域にマーカーを挿入する段階を含むビ
デオコデック方法を実行するプログラムコードを保存す
る。
ック方法は、エラー許容モードをさらに与えることがで
きることから、無線通信チャンネルのようにエラーが大
いに生じる環境下でエラーに一層敏感でない通信が可能
になる。以上、本発明にかかるコデック方法はMPEG
−4及びH.263を一例として再同期マーカー、パケ
ット番号、最初マクロブロックインデックス、ヘッダデ
ータ部、ヘッダマーカー、モーションベクトルデータ
部、モーションマーカー、及びDCTデータ部のように
ビット領域に関する用語を定義して述べられたが、当業
者にとって明らかなように、この用語で定義されたもの
と等価的な他のビット領域を使用するいずれのビデオコ
デックに適用可能である。さらに、本発明を具現するた
めの機能的なプログラム、コード及びコードセグメント
は、本発明の属する技術分野におけるプログラマーによ
り容易に推論可能である。
クで生成されたビデオデータパケットの一例を示す図で
ある。
ビデオコデック方法の主な段階を示すフローチャートで
ある。
ビデオコデック装置を示すブロック図である。
ビデオコデック方法により生成されたビデオデータパケ
ットの一例を示す図面である。
ング段階 26 マーカー挿入段階
Claims (29)
- 【請求項1】 ビデオデータをコーディングしてビデオ
データパケットを生成し、前記パケットをデコーディン
グするビデオコデック方法において、 エラー許容モードにおいて前記ビデオデータの各マクロ
ブロック領域よりヘッダデータ部ビット領域、モーショ
ンベクトルデータ部ビット領域、及び離散コサイン変換
データ部ビット領域に分割する段階と、 前記分割されたビット領域を可変長コーディングする段
階と、 前記可変長コーディングされたビット領域のうち復元に
必要な所定の優先順位に基づいて選択されたビット領域
を逆可変長コーディングする段階と、 可変長コーディングまたは逆可変長コーディングされた
ビット領域にマーカーを挿入する段階とを含むことを特
徴とするビデオコデック方法。 - 【請求項2】 前記逆可変長コーディング段階は、ヘッ
ダデータ部ビット領域及びモーションベクトルデータ部
ビット領域を逆可変長コーディングすることを特徴とす
る請求項1に記載のビデオコデック方法。 - 【請求項3】 前記ヘッダデータ部ビットは、復元にあ
たって重要度の高い所定の複数のビット領域を結合し一
つの情報ビットをなすことを特徴とする請求項1に記載
のビデオコデック方法。 - 【請求項4】 前記所定のビット領域は、復元にあたっ
て重要度の高いマクロブロック識別(COD)ビットと
マクロブロックパターン色度(MCBPC)ビットであ
り、前記CODビットと前記MCBPCビットは結合さ
れ一つの新たなシンテックス(COD+MCBPC)を
形成することを特徴とする請求項3に記載のビデオコデ
ック方法。 - 【請求項5】 前記分割段階は、各パケットにおいて一
番初のマクロブロックの番号を表示する最初マクロブロ
ックインデックスビット領域を挿入する段階を含むこと
を特徴とする請求項1に記載のビデオコデック方法。 - 【請求項6】 前記分割段階は、前記モーションベクト
ルデータ部ビットの次に、絶対モーションベクトル情報
を含む最終絶対モーションベクトルビットを挿入する段
階を含むことを特徴とする請求項2に記載のビデオコデ
ック方法。 - 【請求項7】 前記最終絶対モーションベクトルビット
は、逆可変長コーディングされることを特徴とする請求
項6に記載のビデオコデック方法。 - 【請求項8】 再同期マーカービット領域の次に、パケ
ットの一連番号を表示するパケット番号ビット領域を付
加情報として挿入する段階をさらに含むことを特徴とす
る請求項1に記載のビデオコデック方法。 - 【請求項9】 前記マーカー挿入段階は、 パケットを区分するための再同期マーカーを挿入する段
階と、 ヘッダ部とモーションベクトル部とを区分する情報ビッ
トとしてヘッダデータ部のコーディングには使用されて
いないコードワードを用いてなるヘッダマーカーを挿入
する段階と、 モーションベクトルデータ部と離散コサイン変換データ
部とを区分するためのモーションマーカーを挿入する段
階とを含むことを特徴とする請求項1に記載のビデオコ
デック方法。 - 【請求項10】 チャンネルの特性を識別する段階をさ
らに含み、前記チャンネル特性識別段階は、チャンネル
特性が許容する場合は優先順位の少ない所定のビット領
域を逆可変長コーディングし、チャンネル特性が許容し
ない場合は前記ビット領域を可変長コーディングする段
階を含むことを特徴とする請求項1に記載のビデオコデ
ック方法。 - 【請求項11】 前記ビット領域は、離散コサイン変換
データ部であることを特徴とする請求項10に記載のビ
デオコデック方法。 - 【請求項12】 チャンネルの特性を識別する段階と、 前記チャンネル特性識別段階においてチャンネル特性が
許容する場合は優先順位の少ない所定のビット領域に付
加情報を挿入する段階とをさらに含むことを特徴とする
請求項1に記載のビデオコデック方法。 - 【請求項13】 前記ビット領域は、DCTデータ部で
あることを特徴とする請求項12に記載のビデオコデッ
ク方法。 - 【請求項14】 チャンネルの特性を識別する段階をさ
らに含み、前記チャンネル特性識別段階においてチャン
ネル特性が許容する場合は、前記エンコーディング段階
において逆可変長コーディングする時にそれぞれ別のコ
ーディングテーブルを使用することを特徴とする請求項
1に記載のビデオコデック方法。 - 【請求項15】 ビデオデータをコーディングしてビデ
オデータパケットを生成し、前記パケットをデコーディ
ングするビデオコデック方法を実行するコンピュータに
て読取りできる記録媒体において、 エラー許容モードにおいて前記ビデオデータの各マクロ
ブロック領域よりヘッダデータ部ビット領域、モーショ
ンベクトルデータ部ビット領域、及び離散コサイン変換
データ部ビット領域に分割する段階と、 前記分割されたビット領域を可変長コーディングする段
階と、 前記可変長コーディングされたビット領域のうち復元に
必要な所定の優先順位に基づいて選択されたビット領域
を逆可変長コーディングする段階と、 可変長コーディングまたは逆可変長コーディングされた
ビット領域にマーカーを挿入する段階とを実行するプロ
グラムを保存するコンピュータにて読取りできる記録媒
体。 - 【請求項16】 ビデオデータをコーディングしてビデ
オデータパケットを生成し、前記パケットをデコーディ
ングするビデオコデック装置において、 エラー許容モードにおいて前記ビデオデータの各マクロ
ブロック領域よりヘッダデータ部ビット領域、モーショ
ンベクトルデータ部ビット領域、及び離散コサイン変換
データ部ビット領域に分割する手段と、 前記分割されたビット領域を可変長コーディングする手
段と、 前記可変長コーディングされたビット領域のうち復元に
必要な所定の優先順位に基づいて選択されたビット領域
を逆可変長コーディングする手段と、 可変長コーディングまたは逆可変長コーディングされた
ビット領域にマーカーを挿入する手段とを含むことを特
徴とするビデオコデック装置。 - 【請求項17】 前記逆可変長コーディング手段は、ヘ
ッダデータ部ビット領域及びモーションベクトルデータ
部ビット領域を逆可変長コーディングすることを特徴と
する請求項16に記載のビデオコデック装置。 - 【請求項18】 前記分割手段は、前記ヘッダデータ部
ビットを復元するにあたって、重要度の高い所定の複数
のビット領域を結合し一つの情報ビットで構成すること
を特徴とする請求項16に記載のビデオコデック装置。 - 【請求項19】 前記所定のビット領域は、復元にあた
って重要度の高いマクロブロック識別(COD)ビット
とマクロブロックパターン色度(MCBPC)ビットで
あり、前記CODビットと前記MCBPCビットは結合
され一つの新たなシンテックス(COD+MCBPC)
を形成することを特徴とする請求項18に記載のビデオ
コデック装置。 - 【請求項20】 各パケットにおいて一番初のマクロブ
ロックの番号を表示する最初マクロブロックインデック
スビット領域を挿入する手段をさらに含むことを特徴と
する請求項16に記載のビデオコデック装置。 - 【請求項21】 前記モーションベクトルデータ部ビッ
トの次に、絶対モーションベクトル情報を含む最終絶対
モーションベクトルビットを挿入する手段をさらに含む
ことを特徴とする請求項16に記載のビデオコデック装
置。 - 【請求項22】 前記逆可変長コーディング手段は、最
終絶対モーションベクトルビットを逆可変長コーディン
グすることを特徴とする請求項21に記載のビデオコデ
ック装置。 - 【請求項23】 再同期マーカービット領域の次に、パ
ケットの一連番号を表示するパケット番号ビット領域を
付加情報として挿入する手段をさらに含むことを特徴と
する請求項16に記載のビデオコデック装置。 - 【請求項24】 前記マーカー挿入手段は、パケットを
区分するための再同期マーカーと、ヘッダ部とモーショ
ンベクトル部とを区分する情報ビットとしてヘッダデー
タ部のコーディングには使用されていないコードワード
を用いてなるヘッダマーカー、及びモーションベクトル
データ部と離散コサイン変換データ部とを区分するため
のモーションマーカーを挿入することを特徴とする請求
項16に記載のビデオコデック装置。 - 【請求項25】 チャンネルの特性を識別する手段をさ
らに含み、前記チャンネル特性識別手段はチャンネル特
性が許容すると決めた場合は優先順位の少ない所定のビ
ット領域を逆可変長コーディングし、チャンネル特性が
許容しないと決めた場合は前記ビット領域を可変長コー
ディングするように制御することを特徴とする請求項1
6に記載のビデオコデック装置。 - 【請求項26】 前記ビット領域は、離散コサイン変換
データ部であることを特徴とする請求項25に記載のビ
デオコデック装置。 - 【請求項27】 チャンネルの特性を識別する手段と、 前記チャンネル特性識別手段においてチャンネル特性が
許容すると決めた場合は優先順位の少ない所定のビット
領域に付加情報を挿入する手段とをさらに含むことを特
徴とする請求項16に記載のビデオコデック装置。 - 【請求項28】 前記ビット領域は、離散コサイン変換
データ部であることを特徴とする請求項27に記載のビ
デオコデック装置。 - 【請求項29】 チャンネルの特性を識別する手段をさ
らに含み、前記逆可変長コーディング手段は前記チャン
ネル特性識別手段においてチャンネル特性が許容すると
決めた場合はそれぞれ別のコーディングテーブルを用い
て逆可変長コーディングを行なうことを特徴とする請求
項16に記載のビデオコデック装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US6701397P | 1997-12-01 | 1997-12-01 | |
US067,013 | 1997-12-01 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH11262010A true JPH11262010A (ja) | 1999-09-24 |
JP3262761B2 JP3262761B2 (ja) | 2002-03-04 |
Family
ID=22073165
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP34219298A Expired - Lifetime JP3262761B2 (ja) | 1997-12-01 | 1998-12-01 | エラー許容モードビデオコデック方法及びその装置 |
Country Status (5)
Country | Link |
---|---|
JP (1) | JP3262761B2 (ja) |
KR (1) | KR100313870B1 (ja) |
CN (2) | CN1182723C (ja) |
DE (1) | DE19855501C2 (ja) |
GB (1) | GB2332116B (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1075148A3 (en) * | 1999-08-02 | 2005-08-24 | Texas Instruments Incorporated | Error resistant video coding using reversible variable length codes (RVLCs) |
DE10033110B4 (de) * | 2000-07-07 | 2005-06-16 | Siemens Ag | Verfahren, und System zur Übertragung digitalisierter Bewegtbilder von einem Sender zu einem Empfänger und zugehöriger Decoder |
KR100357266B1 (ko) | 2000-12-06 | 2002-10-19 | 엘지전자 주식회사 | 데이터 분할 기법을 이용한 영상 부호화 전송방법 |
EP1345451A1 (en) * | 2002-03-15 | 2003-09-17 | BRITISH TELECOMMUNICATIONS public limited company | Video processing |
KR100441604B1 (ko) * | 2002-03-19 | 2004-07-23 | 삼성전자주식회사 | 멀티미디어 스트리밍 서비스를 위한 패킷 전송장치 및 그방법 |
US7269288B2 (en) * | 2003-07-30 | 2007-09-11 | Mediatek Inc. | Apparatus for parallel calculation of prediction bits in a spatially predicted coded block pattern and method thereof |
KR20050026661A (ko) | 2003-09-09 | 2005-03-15 | 엘지전자 주식회사 | 디지탈 동영상 해상도 감축을 위한 움직임 벡터 설정방법 |
PL4164224T3 (pl) | 2011-06-28 | 2024-07-08 | Lg Electronics Inc. | Urządzenie do dekodowania wideo i urządzenie do kodowania wideo |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB8728397D0 (en) * | 1987-12-04 | 1988-01-13 | Shell Int Research | Preparation of phenyl ureas |
JPH02151190A (ja) * | 1988-12-02 | 1990-06-11 | Hitachi Ltd | フレーム間符号化装置 |
JP2697479B2 (ja) * | 1992-04-17 | 1998-01-14 | 国際電信電話株式会社 | 可逆可変長符号化方式 |
JPH09182073A (ja) * | 1995-03-15 | 1997-07-11 | Toshiba Corp | 動画像符号化装置および復号装置 |
JP2848326B2 (ja) * | 1996-03-28 | 1999-01-20 | 日本電気株式会社 | Mpeg符号化画像復号装置 |
-
1998
- 1998-12-01 KR KR1019980052332A patent/KR100313870B1/ko not_active IP Right Cessation
- 1998-12-01 DE DE19855501A patent/DE19855501C2/de not_active Expired - Lifetime
- 1998-12-01 JP JP34219298A patent/JP3262761B2/ja not_active Expired - Lifetime
- 1998-12-01 GB GB9826265A patent/GB2332116B/en not_active Expired - Lifetime
- 1998-12-01 CN CNB981230369A patent/CN1182723C/zh not_active Expired - Lifetime
- 1998-12-01 CN CNB2004100549532A patent/CN1294759C/zh not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
DE19855501C2 (de) | 2003-12-11 |
CN1238644A (zh) | 1999-12-15 |
KR19990066826A (ko) | 1999-08-16 |
CN1294759C (zh) | 2007-01-10 |
DE19855501A1 (de) | 1999-06-10 |
KR100313870B1 (ko) | 2001-12-12 |
GB2332116A (en) | 1999-06-09 |
GB2332116B (en) | 1999-10-20 |
GB9826265D0 (en) | 1999-01-20 |
CN1561110A (zh) | 2005-01-05 |
CN1182723C (zh) | 2004-12-29 |
JP3262761B2 (ja) | 2002-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6768775B1 (en) | Video CODEC method in error resilient mode and apparatus therefor | |
KR100359093B1 (ko) | 오류허용모드비디오코덱방법및그장치 | |
JP3474005B2 (ja) | 動画像符号化方法及び動画像復号方法 | |
JP2001245305A (ja) | ディジタル映像データ通信システムにおけるエラー伝播抑制のための送受信データの処理方法及びこのための記録媒体 | |
JP3262761B2 (ja) | エラー許容モードビデオコデック方法及びその装置 | |
KR20010108318A (ko) | 동화상 부호화 장치 및 동화상 복호화 장치 | |
US6356661B1 (en) | Method and device for robust decoding of header information in macroblock-based compressed video data | |
JP2000278700A (ja) | 動画像復号化装置及び動画像復号化方法 | |
KR100375345B1 (ko) | 오류 허용 모드를 위한 비디오 코딩 방법 및 그 장치 | |
US7185264B2 (en) | Image processing apparatus and method therefor | |
JP3011680B2 (ja) | 可変長符号化装置及び方法 | |
KR100644604B1 (ko) | 오류 허용 모드를 위한 비디오 코딩 방법 및 그 장치 | |
JP4131977B2 (ja) | 可変長復号化装置 | |
JP3819638B2 (ja) | 可変長符号化装置 | |
JP4199240B2 (ja) | 可変長復号化装置およびこの装置で用いられるデータまたはプログラムを記録した記録媒体 | |
JP3905938B2 (ja) | 画像符号化装置および画像復号化装置 | |
JP3609814B2 (ja) | 可変長復号化方法及び装置 | |
JP3612315B2 (ja) | 可変長復号化方法及び装置 | |
JP3417933B2 (ja) | 可変長復号化方法及び装置 | |
JP3612314B2 (ja) | 可変長符号化方法及び装置 | |
JP3474861B2 (ja) | 動画像復号化装置及び動画像復号化方法 | |
JP2002009626A (ja) | 可変長符号化/復号化装置に用いられるプログラムを記録した記録媒体 | |
JP3944049B2 (ja) | 可変長復号化方法及び装置 | |
JP2000324491A (ja) | 動画像符号化装置および動画像復号化装置 | |
JP2000308049A (ja) | 動画像符号化装置および動画像復号化装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071221 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081221 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091221 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101221 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101221 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111221 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111221 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121221 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121221 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131221 Year of fee payment: 12 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |