JP2937747B2 - Video and audio digital compression device - Google Patents
Video and audio digital compression deviceInfo
- Publication number
- JP2937747B2 JP2937747B2 JP9968394A JP9968394A JP2937747B2 JP 2937747 B2 JP2937747 B2 JP 2937747B2 JP 9968394 A JP9968394 A JP 9968394A JP 9968394 A JP9968394 A JP 9968394A JP 2937747 B2 JP2937747 B2 JP 2937747B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- audio
- video
- compressed
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Description
【０００１】[0001]
【産業上の利用分野】本発明は映像・音声ディジタル圧
縮装置に関し、特に、ディジタル圧縮された映像データ
と音声データとを同期して伝送することのできる映像・
音声ディジタル圧縮装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a digital video / audio compression apparatus, and more particularly, to a video / audio digital compression apparatus capable of synchronously transmitting digitally compressed video data and audio data.
The present invention relates to an audio digital compression device.
【０００２】[0002]
【従来の技術】まず、図３及び図４を参照して、従来の
映像・音声ディジタル圧縮装置について概説する。2. Description of the Related Art First, a conventional video / audio digital compression apparatus will be outlined with reference to FIGS.
【０００３】図示の映像・音声ディジタル圧縮装置には
映像信号及び音声信号が与えられ、これら映像信号及び
音声信号はそれぞれＡ／Ｄ変換器１１及び１２でディジ
タル映像信号及びディジタル音声信号に変換される。[0003] A video and audio signal is supplied to a video and audio digital compression apparatus shown in the figure, and these video and audio signals are converted into digital video and digital audio signals by A / D converters 11 and 12, respectively. .
【０００４】映像データ圧縮回路１３において、ディジ
タル映像信号は可変長圧縮され、ディジタル圧縮映像信
号として出力される。図示の例では、図４（ア）に示す
ように、ディジタル圧縮映像信号は同期信号（ＳＹＮ
Ｃ）及び同期信号に続く映像データ（ａ），（ｂ），
（ｃ），（ｄ），（ｅ），…を備えており、これら同期
信号及び映像データは順次映像バッファ１４に記憶映像
データとして一時格納される。映像データ圧縮回路１３
には映像バッファ１４から記憶映像データの量が記憶デ
ータ量として与えられており、つまり、映像データ圧縮
回路１３は映像バッファ１４の残量を監視しており、こ
の残量に基づいてデータ圧縮を制御する。具体的には、
映像データ圧縮回路１３は映像バッファ１４の残量に基
づいて映像バッファ１４にオーバフロー／アンダーフロ
ーが発生しないようにデータ圧縮を制御することにな
る。In the video data compression circuit 13, the digital video signal is subjected to variable length compression and output as a digitally compressed video signal. In the illustrated example, as shown in FIG. 4A, the digital compressed video signal is a synchronization signal (SYN).
C) and video data (a), (b),
(C), (d), (e),..., And these synchronization signals and video data are temporarily stored in the video buffer 14 sequentially as stored video data. Video data compression circuit 13
Is supplied with the amount of stored video data from the video buffer 14 as the stored data amount, that is, the video data compression circuit 13 monitors the remaining amount of the video buffer 14, and performs data compression based on the remaining amount. Control. In particular,
The video data compression circuit 13 controls data compression based on the remaining amount of the video buffer 14 so that overflow / underflow does not occur in the video buffer 14.
【０００５】一方、音声データ圧縮回路１５において、
ディジタル音声信号は、固定長圧縮されて、ディジタル
圧縮音声信号として出力される。図示の例では、図４
（イ）に示すように、ディジタル圧縮音声信号は、音声
データ（Ａ），（Ｂ），…を備えており、これら音声デ
ータは音声バッファ１６に記憶音声データとして一時格
納される。On the other hand, in the audio data compression circuit 15,
The digital audio signal is fixed-length compressed and output as a digital compressed audio signal. In the illustrated example, FIG.
As shown in (a), the digital compressed audio signal includes audio data (A), (B),..., And these audio data are temporarily stored in the audio buffer 16 as stored audio data.
【０００６】所定長（固定期間）のフレームに映像デー
タ及び音声データの順にデータを挿入して伝送信号を生
成するため、伝送フレーミング回路（図示せず）ではス
イッチ１７を制御する。この際、音声バッファ１６にお
けるオーバフロー／アンダーフローの発生を防止するた
め、固定期間毎に固定データ（つまり、音声データ）が
伝送されるようにする。つまり、図４（ウ）に示すよう
に、まず、第１フレームの前に同期信号（ＳＹＮＣ）が
配置され、第１フレームに映像データ（ａ）及び（ｂ）
と映像データ（ｃ）の一部分（ｃ），が配置されて、映
像データ（ｃ）の一部分（ｃ），の後に音声データ
（Ａ）が配置される。第２フレームには、まず、映像デ
ータ（ｃ）の残りの部分（ｃ），，が配置され、続いて
映像データ（ｄ）及び映像データ（ｅ）の一部分（ｅ）
，が配置されて、映像データ（ｅ）の一部分（ｅ），の
後に音声データ（Ｂ）が配置される。以下同様にして、
第３フレームには、まず、映像データ（ｅ）の残りの部
分（ｅ），，が配置される。このようにして、伝送フレ
ーミング回路はスイッチ１７を制御して伝送信号を生成
して伝送データとして送出する。In order to generate a transmission signal by inserting data in the order of video data and audio data into a frame of a predetermined length (fixed period), a transmission framing circuit (not shown) controls a switch 17. At this time, in order to prevent overflow / underflow from occurring in the audio buffer 16, fixed data (that is, audio data) is transmitted every fixed period. That is, as shown in FIG. 4C, first, the synchronization signal (SYNC) is arranged before the first frame, and the video data (a) and (b) are placed in the first frame.
A portion of the video data (c) (c), is the arrangement, a portion of the video data (c) (c), audio data (A) is located after the. In the second frame, first, the remaining portions (c) ,... Of the video data (c) are arranged, and then the video data (d) and a part (e) of the video data (e) are arranged.
, It is disposed, a portion of the video data (e) (e), audio data (B) is located after the. Similarly,
In the third frame, first, the remaining portions (e) ,... Of the video data (e) are arranged. In this way, the transmission framing circuit controls the switch 17 to generate a transmission signal and sends it out as transmission data.
【０００７】以上の説明から容易に理解できるように、
図示の映像・音声ディジタル圧縮装置では、音声バッフ
ァ１６における音声データ遅延量を調整して音声データ
と映像データとの同期をとるようにしている。As can be easily understood from the above description,
In the illustrated video / audio digital compression apparatus, the audio data delay amount in the audio buffer 16 is adjusted to synchronize the audio data with the video data.
【０００８】なお、映像信号及び音声信号を取り扱うも
のとして特開昭５９−１００８２号公報が知られてい
る。Japanese Unexamined Patent Publication No. Sho 59-10082 is known for handling video signals and audio signals.
【０００９】[0009]
【発明が解決しようとする課題】ところで、従来の映像
・音声ディジタル圧縮装置では、ディジタル映像圧縮信
号及びディジタル音声圧縮信号をそれぞれ独立してバッ
ファリングし、しかも、音声圧縮信号を優先的にフレー
ミングしている関係上、音声データと映像データとの同
期をとることが難しいという問題点がある。つまり、従
来の映像・音声ディジタル圧縮装置では、伝送データに
おいて同期をとることが行なわれておらず、その結果、
精度よく映像データと音声データとの同期をとることが
難しいという問題点がある。In the conventional video / audio digital compression apparatus, the digital video compression signal and the digital audio compression signal are buffered independently, and the audio compression signal is preferentially framed. Therefore, there is a problem that it is difficult to synchronize the audio data and the video data. In other words, in the conventional video / audio digital compression device, synchronization is not performed in the transmission data, and as a result,
There is a problem that it is difficult to accurately synchronize the video data and the audio data.
【００１０】本発明の目的は、精度よく映像データと音
声データとの同期がとられた伝送データを送出すること
のできる映像・音声ディジタル圧縮装置を提供すること
にある。It is an object of the present invention to provide a video / audio digital compression apparatus capable of transmitting transmission data in which video data and audio data are accurately synchronized.
【００１１】[0011]
【課題を解決するための手段】本発明によれば、複数の
映像データを備える映像信号及び複数の音声データを備
える音声信号を受け前記複数の映像データ及び前記複数
の音声データをディジタル圧縮して多重化データとして
送出する映像・音声ディジタル圧縮装置において、前記
複数の映像データはｎ（ｎは８の倍数）ラインの有効水
平期間とｎラインの水平ブランク期間とからなり、前記
映像データの各々は前記有効水平期間に位置し、前記音
声データの各々は前記有効水平期間及び前記水平ブラン
ク期間に亘って位置しており、前記映像データを前記有
効水平期間で可変長符号化によってディジタル圧縮して
圧縮映像データを得る映像圧縮手段と、前記音声データ
を前記有効水平期間に同期して固定長符号化によってデ
ィジタル圧縮し圧縮音声データを得る音声圧縮手段と、
前記圧縮音声データ識別するための音声識別同期信号を
前記圧縮映像データと前記圧縮音声データとの間に挿入
して前記多重データを生成する多重化手段とを有するこ
とを特徴とする映像・音声ディジタル圧縮装置が得られ
る。According to Means for Solving the Problems] The present invention, the plurality of image data and the plurality receives an audio signal comprising a video signal and a plurality of audio data comprising a plurality of video data
A digital audio / video compression apparatus for digitally compressing audio data and sending out as multiplexed data,
The plurality of video data composed of a n (n is 8 multiples) horizontal blank period of the effective horizontal period of the line and n lines, each of the image data is located in the effective horizontal period, each of the audio data is the The video data is located over an effective horizontal period and the horizontal blank period, and
Video compression means for obtaining compressed video data by digital compression by variable-length coding in the effective horizontal period, and audio compression for digitally compressing the audio data by fixed-length encoding in synchronization with the effective horizontal period to obtain compressed audio data Means,
Multiplexing means for inserting an audio identification synchronization signal for identifying the compressed audio data between the compressed video data and the compressed audio data to generate the multiplexed data. A compression device is obtained.
【００１２】[0012]
【実施例】以下本発明について実施例によって説明す
る。DESCRIPTION OF THE PREFERRED EMBODIMENTS The present invention will be described below with reference to embodiments.
【００１３】図１を参照して、図１に示す映像・音声デ
ィジタル圧縮装置において、図３に示す映像・音声ディ
ジタル圧縮装置と同一の構成要素については、同一の参
照番号を付し、説明を省略する。Referring to FIG. 1, in the video / audio digital compression apparatus shown in FIG. 1, the same components as those in the video / audio digital compression apparatus shown in FIG. Omitted.
【００１４】図２も参照して、ここでは、映像信号は映
像データ（ａ），（ｂ），（ｃ），…を備えており、音
声信号は音声データ（Ａ），（Ｂ），（Ｃ），…を備え
ているものとする。映像信号はｎ（ｎは８の倍数）ライ
ンの有効水平期間（水平映像期間）とｎラインの水平ブ
ランク期間とを有しており、各映像データは水平映像期
間に位置し、各音声データは水平映像期間及び水平ブラ
ンク期間に亘って位置している。つまり、Ａ／Ｄ変換器
１１から出力されるディジタル映像信号は図２（ア）に
示す配列を有し、Ａ／Ｄ変換器１２から出力されるディ
ジタル音声信号は図２（イ）に示す配列を有することに
なる。Referring to FIG. 2, here, the video signal includes video data (a), (b), (c),..., And the audio signal includes audio data (A), (B), ( C), ... are provided. The video signal has an effective horizontal period (horizontal video period) of n (n is a multiple of 8) lines and a horizontal blank period of n lines, each video data is located in a horizontal video period, and each audio data is It is located over a horizontal image period and a horizontal blank period. That is, the digital video signal output from the A / D converter 11 has the arrangement shown in FIG. 2A, and the digital audio signal output from the A / D converter 12 has the arrangement shown in FIG. Will have.
【００１５】映像データ圧縮回路１８ではディジタル映
像信号を可変長符号化して圧縮映像信号を得る。一方、
音声データ圧縮回路１９ではディジタル音声信号を固定
長符号化して圧縮音声信号を得る。この際、ディジタル
映像信号及びディジタル音声信号はｎラインの水平画像
期間毎に同期して圧縮される。そして、圧縮映像信号及
び圧縮音声信号はセレクタ２０に与えられる。The video data compression circuit 18 performs variable length coding on the digital video signal to obtain a compressed video signal. on the other hand,
The audio data compression circuit 19 obtains a compressed audio signal by performing a fixed-length encoding on the digital audio signal. At this time, the digital video signal and digital audio signal are compressed synchronously every horizontal image period of n lines. Then, the compressed video signal and the compressed audio signal are provided to the selector 20.
【００１６】セレクタ２０には音声識別同期信号（ＳＹ
ＮＣ）発生回路２１が接続されており、伝送フレーミン
グ回路（図示せず）はセレクタ２０を制御して、圧縮映
像信号、圧縮音声信号、及び音声識別ＳＹＮＣを選択的
に出力する。つまり、セレクタ２０はまずｎラインの圧
縮映像データ（ａ）を選択して次に音声識別ＳＹＮＣを
選択し、そして、音声データ（Ａ）を選択する。これに
よって、１フレーム分の圧縮映像・音声信号が多重化デ
ータとしてデータバッファ２２に一時格納される。同様
にして、圧縮映像データ（ｂ）、音声識別ＳＹＮＣ、音
声データ（Ｂ）の順に配列された圧縮映像・音声信号が
多重化データとしてデータバッファ２２に一時格納さ
れ、圧縮映像データ（ｃ）、音声識別ＳＹＮＣ、音声デ
ータ（Ｃ）の順に配列された圧縮映像・音声信号が多重
化データとしてデータバッファ２２に一時格納される。
これら多重化データは伝送クロックに基づいてデータバ
ッファ２２から読み出されて伝送データとして送出され
る。The selector 20 has a voice identification synchronization signal (SY)
A transmission framing circuit (not shown) controls the selector 20 to selectively output the compressed video signal, the compressed audio signal, and the audio identification SYNC. That is, the selector 20 first selects the compressed video data (a) of n lines, then selects the audio identification SYNC, and then selects the audio data (A). Thus, the compressed video / audio signal for one frame is temporarily stored in the data buffer 22 as multiplexed data. Similarly, compressed video / audio signals arranged in the order of compressed video data (b), audio identification SYNC, and audio data (B) are temporarily stored as multiplexed data in the data buffer 22, and compressed video data (c), The compressed video / audio signals arranged in the order of the audio identification SYNC and the audio data (C) are temporarily stored in the data buffer 22 as multiplexed data.
These multiplexed data are read out from the data buffer 22 based on the transmission clock and transmitted as transmission data.
【００１７】なお、映像データ圧縮回路１８ではデータ
バッファ２２のデータ残量に基づいてデータ圧縮を制御
する。The video data compression circuit 18 controls data compression based on the remaining amount of data in the data buffer 22.
【００１８】[0018]
【発明の効果】以上説明したように、本発明では予め定
められたｎラインの水平映像期間内において映像データ
及び音声データをディジタル圧縮して、音声識別同期信
号を挿入して多重化データを生成するようにしたから、
音声データと映像データとを水平映像期間単位で同期さ
せることができ、その結果、精度よく映像データと音声
データとの同期がとられた伝送データを送出することの
できるという効果がある。As described above, according to the present invention, multiplexed data is generated by digitally compressing video data and audio data within a predetermined horizontal video period of n lines and inserting an audio identification synchronization signal. I decided to do
The audio data and the video data can be synchronized on a horizontal video period basis, and as a result, there is an effect that transmission data in which the video data and the audio data are accurately synchronized can be transmitted.
【図１】本発明による映像・音声ディジタル圧縮装置の
一実施例を示すブロック図である。FIG. 1 is a block diagram showing an embodiment of a video / audio digital compression apparatus according to the present invention.
【図２】図１に示す映像・音声ディジタル圧縮装置にお
いて取り扱われる信号を示す図であり、（ア）はディジ
タル映像信号を示す図、（イ）はディジタル音声信号を
示す図、（ウ）は伝送信号を示す図である。2A and 2B are diagrams showing signals handled in the video / audio digital compression apparatus shown in FIG. 1, wherein FIG. 2A shows a digital video signal, FIG. 2A shows a digital audio signal, and FIG. It is a figure showing a transmission signal.
【図３】従来の映像・音声ディジタル圧縮装置を示すブ
ロック図である。FIG. 3 is a block diagram showing a conventional video / audio digital compression device.
【図４】図３に示す映像・音声ディジタル圧縮装置にお
いて取り扱われる信号を示す図であり、（ア）はディジ
タル映像信号を示す図、（イ）はディジタル音声信号を
示す図、（ウ）は伝送信号を示す図である。4A and 4B are diagrams showing signals handled by the video / audio digital compression apparatus shown in FIG. 3, wherein FIG. 4A shows a digital video signal, FIG. 4A shows a digital audio signal, and FIG. It is a figure showing a transmission signal.
１１，１２ Ａ／Ｄ変換器 １３，１８ 映像データ圧縮回路 １４ 映像バッファ １５，１９ 音声データ圧縮回路 １６ 音声バッファ １７ スイッチ ２０ セレクタ ２１ 音声識別同期信号発生回路（音声ＳＹＮＣ） ２２ データバッファ 11, 12 A / D converter 13, 18 Video data compression circuit 14 Video buffer 15, 19 Audio data compression circuit 16 Audio buffer 17 Switch 20 Selector 21 Audio identification synchronization signal generation circuit (Audio SYNC) 22 Data buffer
Claims (3)
複数の音声データを備える音声信号を受け前記複数の映
像データ及び前記複数の音声データをディジタル圧縮し
て多重化データとして送出する映像・音声ディジタル圧
縮装置において、前記複数の映像データはｎ（ｎは８の
倍数）ラインの有効水平期間とｎラインの水平ブランク
期間とからなり、前記映像データの各々は前記有効水平
期間に位置し、前記音声データの各々は前記有効水平期
間及び前記水平ブランク期間に亘って位置しており、前
記映像データを前記有効水平期間で可変長符号化によっ
てディジタル圧縮して圧縮映像データを得る映像圧縮手
段と、前記音声データを前記有効水平期間に同期して固
定長符号化によってディジタル圧縮し圧縮音声データを
得る音声圧縮手段と、前記圧縮音声データ識別するため
の音声識別同期信号を前記圧縮映像データと前記圧縮音
声データとの間に挿入して前記多重データを生成する多
重化手段とを有することを特徴とする映像・音声ディジ
タル圧縮装置。1. A plurality of the plurality receives an audio signal comprising a video signal and a plurality of audio data comprising video data and movies <br/> image data and the plurality of audio data compressed digital transmitted as multiplexed data in video and audio digital compression device for the plurality of video data consists of an n (n is 8 multiples) horizontal blank period of the effective horizontal period of the line and n lines, each of the image data in the effective horizontal period And wherein each of the audio data is located over the effective horizontal period and the horizontal blank period, and the compressed video data is obtained by digitally compressing the video data by variable length coding in the effective horizontal period. and compression means, audio compression hands to obtain the compressed audio data and digital compressed by fixed length coding in synchronization with the audio data in the effective horizontal period And multiplexing means for inserting an audio identification synchronization signal for identifying the compressed audio data between the compressed video data and the compressed audio data to generate the multiplexed data. Audio digital compression device.
タル圧縮装置において、前記多重化手段は、前記圧縮映
像データ、前記圧縮音声データ、及び前記音声識別同期
信号を受け、前記圧縮映像データ、前記音声識別同期信
号、及び前記圧縮音声データの順に出力データとして出
力する選択手段と、該出力データを一時格納するバッフ
ァ手段とを有し、前記バッファ手段から伝送クロックに
応じて前記出力データが読み出されて前記多重化データ
として伝送されるようにしたことを特徴とする映像・音
声ディジタル圧縮装置。2. The video / audio digital compression apparatus according to claim 1, wherein said multiplexing means receives said compressed video data, said compressed audio data, and said audio identification synchronization signal, and receives said compressed video data, Selecting means for outputting as the output data in the order of the audio identification synchronizing signal and the compressed audio data; and buffer means for temporarily storing the output data, wherein the output data is read from the buffer means in accordance with a transmission clock. A video / audio digital compression device, which is output and transmitted as the multiplexed data.
タル圧縮装置において、前記映像圧縮手段には前記バッ
ファ手段の記憶残量を示す残量信号が与えられ、前記映
像圧縮手段は該残量信号に基づいて前記映像データのデ
ィジタル圧縮を制御するようにしたことを特徴とする映
像・音声ディジタル圧縮装置。3. The video / audio digital compression apparatus according to claim 2, wherein said video compression means is provided with a remaining signal indicating the remaining storage capacity of said buffer means, and said video compression means outputs said remaining capacity signal. A video / audio digital compression apparatus, wherein digital compression of the video data is controlled based on a signal.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9968394A JP2937747B2 (en) | 1994-05-13 | 1994-05-13 | Video and audio digital compression device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9968394A JP2937747B2 (en) | 1994-05-13 | 1994-05-13 | Video and audio digital compression device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH07307683A JPH07307683A (en) | 1995-11-21 |
| JP2937747B2 true JP2937747B2 (en) | 1999-08-23 |
Family
ID=14253842
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP9968394A Expired - Fee Related JP2937747B2 (en) | 1994-05-13 | 1994-05-13 | Video and audio digital compression device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2937747B2 (en) |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61127240A (en) * | 1984-11-27 | 1986-06-14 | Nec Corp | Coder |
| JPH0661949A (en) * | 1992-08-10 | 1994-03-04 | Fujitsu Ltd | Image/voice data compression/expansion processor |
-
1994
- 1994-05-13 JP JP9968394A patent/JP2937747B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH07307683A (en) | 1995-11-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP0634870B1 (en) | Synchronizing method for time division multiplexed video and audio signals | |
| JPH01106680A (en) | Adaptive adjustment of running time of video signal and audio signal to reference signal | |
| NO302210B1 (en) | Multichannel image compression system, and decoder device | |
| US6185229B1 (en) | Data multiplexing apparatus and method thereof | |
| JP3507498B2 (en) | Real-time voice packet layer encoder | |
| JP2937747B2 (en) | Video and audio digital compression device | |
| JP4404233B2 (en) | Editing apparatus and data transmission method | |
| JPH1169330A (en) | Image communication equipment provided with automatic answering function | |
| JPH06348580A (en) | Multimedia transfer device | |
| JPH07284096A (en) | Multi-channel picture transmitter | |
| JPH08125903A (en) | Television camera device | |
| JP3055320B2 (en) | Video signal transmitting device and video signal receiving device | |
| JP3177825B2 (en) | Media coding device | |
| JP3194510B2 (en) | Digital video signal multiplex transmission method and apparatus | |
| JP2558730B2 (en) | Video transmission system | |
| JPH08191434A (en) | Moving picture/audio coding data multiplexing method and moving picture/audio coding data multiplexer | |
| KR19980036074A (en) | Video / Audio Synchronizer in Decoder System | |
| JPS62145985A (en) | Voice delay time control method | |
| JPH0738860A (en) | Transmission equipment and reception equipment for digital video signal | |
| JPH0832621A (en) | Video and audio encoded data transmission device | |
| JP6618783B2 (en) | Packet multiplex transmission apparatus, packet multiplex transmission method and system | |
| JP4167415B2 (en) | Synchronization processing apparatus and synchronization processing method | |
| JP3683210B2 (en) | Video / audio transmission system | |
| JPH04100430A (en) | Voice cell/picture cell reproduction synchronizing device | |
| JPH06208452A (en) | Common circuit for companding buffer |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 19971217 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080611 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090611 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |