JPH0522697A - Video recorder - Google Patents

Video recorder

Info

Publication number
JPH0522697A
JPH0522697A JP3168372A JP16837291A JPH0522697A JP H0522697 A JPH0522697 A JP H0522697A JP 3168372 A JP3168372 A JP 3168372A JP 16837291 A JP16837291 A JP 16837291A JP H0522697 A JPH0522697 A JP H0522697A
Authority
JP
Japan
Prior art keywords
image
recording
circuit
camera
image memory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP3168372A
Other languages
Japanese (ja)
Other versions
JP3114248B2 (en
Inventor
Koji Takahashi
宏爾 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP03168372A priority Critical patent/JP3114248B2/en
Publication of JPH0522697A publication Critical patent/JPH0522697A/en
Application granted granted Critical
Publication of JP3114248B2 publication Critical patent/JP3114248B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)

Abstract

PURPOSE:To minimize an image memory with a camera incorporated video recorder. CONSTITUTION:A camera signal processing circuit 26 performs the image stabilizing processing of hand shake correction besides the gamma correction, etc., with an image memory 28. That is, in accordance with an action vector, a displaying area is selected in a photographing screen. An interpolation expanding circuit 32 expands the image of the displaying area selected by the image stabilization to the size of a TV screen. The interpolation expanding circuit 32 simultaneously compresses the video signal of 1 field period Tf to a shorter period Tc.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は映像記録装置に関し、よ
り具体的には、カメラを一体化された映像記録装置に関
する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a video recording device, and more particularly to a video recording device having a camera integrated therein.

【0002】[0002]

【従来の技術】上述のようなカメラ一体型の映像記録装
置は、基本的に、撮影を行なうカメラ部と、当該カメラ
による撮影映像信号を磁気テープに記録する記録部とか
らなる。
2. Description of the Related Art A camera-integrated video recording apparatus as described above basically comprises a camera section for taking an image and a recording section for recording a video image signal taken by the camera on a magnetic tape.

【0003】近年、カメラの撮像素子の出力信号により
被写体の動きを検出し、ディジタル画像信号処理により
手振れを検出・補正する手振れ補正回路が実用化されて
いる。
In recent years, a camera shake correction circuit has been put into practical use, which detects a motion of an object by an output signal of an image pickup device of a camera and detects and corrects a camera shake by digital image signal processing.

【0004】また、記録部としては、映像信号を圧縮し
て磁気テープに記録する方式が知られている。例えば、
ダブル・アジマス・ヘッドを具備する回転ドラムに対す
る磁気テープの巻付け角をθとし、当該回転ドラムを1
フィールドに1回、即ち3,600rpmで回転させる
ドラム機構が知られている。図5にその平面図を示す。
10は回転ドラム、12は磁気テープ、14aはプラス
・アジマスの磁気ヘッド、14bはマイナス・アジマス
の磁気ヘッドである。このドラム機構を使用する場合、
回転ドラムの1回転が1フィールド期間に相当するの
で、巻き付け角の不足分(360−θ)だけ、非接触期
間となり、記録しようとする映像信号を、360/(3
60−θ)だけ圧縮しなければならない。従来例では、
この圧縮を画像メモリを使って実現している。図6は圧
縮のための画像メモリのタイミング図であり、図6
(a)は書き込み期間、同(b)は読み出し期間であ
る。即ち、Tf/Tc=360/θになっている。
As the recording section, a method of compressing a video signal and recording it on a magnetic tape is known. For example,
Let θ be the winding angle of the magnetic tape on the rotating drum equipped with the double azimuth head, and set the rotating drum to 1
Drum mechanisms are known which rotate once in the field, i.e. at 3,600 rpm. FIG. 5 shows its plan view.
Reference numeral 10 is a rotary drum, 12 is a magnetic tape, 14a is a plus-azimuth magnetic head, and 14b is a minus-azimuth magnetic head. When using this drum mechanism,
Since one rotation of the rotary drum corresponds to one field period, the short contact angle (360-θ) results in a non-contact period, and the video signal to be recorded is 360 / (3).
60-θ) must be compressed. In the conventional example,
This compression is realized using an image memory. FIG. 6 is a timing diagram of the image memory for compression.
(A) is a writing period, and (b) is a reading period. That is, Tf / Tc = 360 / θ.

【0005】[0005]

【発明が解決しようとする課題】上述のような、手振れ
補正機能を具備するカメラと、圧縮記録する記録回路と
を一体化してカメラ一体型の映像記録装置を構成する
と、カメラ部と記録回路の両方で、画像メモリが必要に
なる。画像メモリは現在でも、大きな占有面積を必要と
して小型化を妨げているだけでなく、消費電力が大きい
という欠点がある。通常、カメラ一体型映像記録装置
は、バッテリ駆動で使用されるので、電力消費の増大は
好ましくない。
When a camera having a camera shake correction function as described above and a recording circuit for compression recording are integrated to form a camera-integrated video recording device, the camera section and the recording circuit are integrated. Both require image memory. The image memory still has a drawback that it consumes a large area and not only hinders miniaturization, but also consumes a large amount of power. Normally, the camera-integrated video recording device is used in a battery drive, and therefore it is not preferable to increase power consumption.

【0006】本発明は、これらの問題点を解決し、小型
化及び低消費電力の映像記録装置を提示することを目的
とする。
SUMMARY OF THE INVENTION It is an object of the present invention to solve these problems and provide a compact and low power consumption video recording apparatus.

【0007】[0007]

【課題を解決するための手段】本発明に係る映像記録装
置は、撮影画像信号をディジタル信号処理するカメラ部
と、映像信号を時間軸変換して記録媒体に記録する記録
部とからなる映像記録装置であって、当該カメラ部のデ
ィジタル信号処理と当該記録部の時間軸変換処理に共用
する画像メモリを設けたことを特徴とする。
A video recording apparatus according to the present invention comprises a camera section for digitally processing a captured image signal and a recording section for time-axis converting the video signal and recording it on a recording medium. The apparatus is characterized in that an image memory shared by the digital signal processing of the camera section and the time axis conversion processing of the recording section is provided.

【0008】[0008]

【作用】上記手段により画像メモリを少なくできる。こ
れにより、回路規模の拡大及び消費電力の増大を防止で
き、バッテリの負担を軽減できる。
By the above means, the image memory can be reduced. As a result, it is possible to prevent an increase in circuit scale and an increase in power consumption and reduce the load on the battery.

【0009】[0009]

【実施例】以下、図面を参照して本発明の実施例を説明
する。
Embodiments of the present invention will be described below with reference to the drawings.

【0010】図1は、本発明の一実施例の構成ブロック
図を示す。撮像素子22は、撮影レンズ20による被写
体像を電気信号に変換し、A/D変換器24は撮像素子
22のアナログ出力をディジタル信号に変換する。カメ
ラ信号処理回路26は所謂ディジタル・シグナル・プロ
セッサ(DSP)からなり、種々のカメラ信号処理を行
なう。カメラ信号処理には、ガンマ補正やニー補正とい
った非線形処理、AGCやクランプなどのレベル調整、
ホワイトバランスや偽色除去といったクロマ系の処理、
及び、ノイズ除去やアパーチャ制御などの画質改善処理
などが含まれる。一方、本実施例では、画像メモリ28
を利用して、上述の手振れ補正のための像安定化処理が
行なわれる。
FIG. 1 is a block diagram showing the configuration of an embodiment of the present invention. The image sensor 22 converts the subject image from the taking lens 20 into an electric signal, and the A / D converter 24 converts the analog output of the image sensor 22 into a digital signal. The camera signal processing circuit 26 comprises a so-called digital signal processor (DSP) and performs various camera signal processing. For camera signal processing, nonlinear processing such as gamma correction and knee correction, level adjustment such as AGC and clamp,
Chroma-based processing such as white balance and false color removal,
It also includes image quality improvement processing such as noise removal and aperture control. On the other hand, in this embodiment, the image memory 28
Is used to perform the image stabilization processing for the above-described camera shake correction.

【0011】この像安定化処理は、具体的には、動きベ
クトル検出処理と、検出した動きベクトルを相殺する像
移動処理とからなる。例えば、図2に示すように、撮像
素子22の撮影領域の大きさをHo×Voとしたとき
に、これより狭いh×vを表示領域とし、撮影領域Ho
×Vo内で、動きベクトルを相殺する方向に表示領域h
×vを移動することにより、手振れを軽減解消する。動
きベクトル検出回路25は、A/D変換器24から出力
されるディジタル・ビデオ信号から動きベクトルを検出
する。検出された動きベクトルの情報はメモリ制御回路
30に入力され、画像メモリ28の読み出しアドレスが
制御される。
The image stabilizing process is specifically composed of a motion vector detecting process and an image moving process for canceling the detected motion vector. For example, as shown in FIG. 2, when the size of the imaging area of the image sensor 22 is Ho × Vo, h × v narrower than this is set as the display area, and the imaging area Ho is set.
The display area h in the direction of canceling the motion vector in × Vo
By moving xv, the camera shake is reduced and eliminated. The motion vector detection circuit 25 detects a motion vector from the digital video signal output from the A / D converter 24. Information on the detected motion vector is input to the memory control circuit 30, and the read address of the image memory 28 is controlled.

【0012】撮像素子22の撮影領域Ho×Voが、即
ちTV画面の大きさであるから、表示領域h×vの切り
出し範囲(画像メモリ28からの読み出し範囲)が決定
した後、標準テレビジョン信号にするために補間拡大処
理をする必要があり、補間拡大回路32がその補間拡大
処理を実行する。具体的には、拡大比率Ho/h,Vo
/vに応じて拡大し、水平画素間及び水平走査線間の距
離に反比例した係数により加重平均して各画素値を算出
する。
Since the shooting area Ho × Vo of the image pickup device 22, that is, the size of the TV screen, determines the cut-out range (read-out range from the image memory 28) of the display area h × v, and then the standard television signal. Therefore, the interpolation enlargement process needs to be performed, and the interpolation enlargement circuit 32 executes the interpolation enlargement process. Specifically, the expansion ratio Ho / h, Vo
Each pixel value is calculated by enlarging according to / v and performing weighted averaging by a coefficient inversely proportional to the distance between horizontal pixels and horizontal scanning lines.

【0013】但し、図5及び図6を参照して説明した手
法により磁気テープに記録する際には、上述のように、
1フィールドのビデオ信号を1フィールド期間Tfより
短い期間Tcに圧縮しなければならず、本実施例では、
補間拡大回路32は、期間Tcに圧縮したディジタル映
像信号を出力するように設計されている。従って、補間
拡大回路32は、図3(a)に示すタイミングで、水平
方向Tf/Tc・Ho/h、垂直方向Tf/Tc・Vo
/vの比率で画像メモリ28からデータを読み出し、そ
れぞれh/Ho,v/Voの比率でデータ補間を行な
い、図3(c)に示すタイミングで出力する。これによ
り、補間拡大回路32は、1フィールド期間Tfの映像
データを期間Tcに圧縮したディジタル信号をD/A変
換器34に出力する。
However, when recording on a magnetic tape by the method described with reference to FIGS. 5 and 6, as described above,
The video signal of one field must be compressed into a period Tc shorter than the one-field period Tf. In the present embodiment,
The interpolation enlargement circuit 32 is designed to output a digital video signal compressed during the period Tc. Therefore, the interpolation enlarging circuit 32 has the horizontal direction Tf / Tc · Ho / h and the vertical direction Tf / Tc · Vo at the timing shown in FIG.
Data is read from the image memory 28 at a ratio of / v, data is interpolated at a ratio of h / Ho and v / Vo, respectively, and output at the timing shown in FIG. As a result, the interpolation expansion circuit 32 outputs the digital signal obtained by compressing the video data of the one-field period Tf into the period Tc to the D / A converter 34.

【0014】いうまでもないが、像安定化を行なわない
場合には、撮像素子22の撮影領域Ho×Voがそのま
ま表示領域となり、補間拡大回路32は、Tf/Tcの
圧縮のみを行なう。
Needless to say, when the image stabilization is not performed, the image pickup area Ho × Vo of the image pickup element 22 becomes the display area as it is, and the interpolation enlarging circuit 32 only compresses Tf / Tc.

【0015】像安定化を行なうか否かは、使用者がキー
53によりシステム制御回路52に指示し、システム制
御回路52はこの指示に応じてメモリ制御回路30及び
補間拡大回路32を制御する。
The user instructs the system control circuit 52 with the key 53 whether or not to perform image stabilization, and the system control circuit 52 controls the memory control circuit 30 and the interpolation enlarging circuit 32 in accordance with the instruction.

【0016】D/A変換器34は補間拡大回路32から
の映像データをアナログ信号に変換し、記録処理回路3
6がFM変調などの記録処理をする。記録処理回路36
の出力は、ヘッド切換えスイッチ38により、回転ドラ
ム40のダブル・アジマス・ヘッド42a,42bにフ
ィールド毎に交互に印加され、磁気テープ44に記録さ
れる。なお、磁気テープ44は、回転ドラムに300゜
に渡り巻き付いている。
The D / A converter 34 converts the video data from the interpolation enlargement circuit 32 into an analog signal, and the recording processing circuit 3
6 performs recording processing such as FM modulation. Recording processing circuit 36
The output of is alternately applied to the double azimuth heads 42a and 42b of the rotary drum 40 for each field by the head changeover switch 38, and is recorded on the magnetic tape 44. The magnetic tape 44 is wound around the rotary drum over 300 °.

【0017】ドラム・モータ46が回転ドラム40を回
転させ、キャプスタン・モータ48が磁気テープ44を
走行駆動する。サーボ回路50がモータ46,48の回
転速度及び位相を所定値に制御する。
A drum motor 46 rotates the rotary drum 40, and a capstan motor 48 drives the magnetic tape 44 to run. The servo circuit 50 controls the rotation speeds and phases of the motors 46 and 48 to predetermined values.

【0018】図4は、図1に示す記録系に対応する再生
系の構成ブロック図を示す。図1と共通する構成要素に
は同じ符号を付してある。図4を参照して、再生動作を
簡単に説明する。
FIG. 4 shows a block diagram of a reproducing system corresponding to the recording system shown in FIG. The same components as those in FIG. 1 are designated by the same reference numerals. The reproducing operation will be briefly described with reference to FIG.

【0019】サーボ回路50の制御下で、ドラム・モー
タ46は回転ドラム40を所定速度及び所定位相で回転
させ、キャプスタン・モータ48が磁気テープ44を所
定速度で走行させる。ヘッド切換えスイッチ38は、異
なるアジマスの磁気ヘッド42a,42bの出力をフィ
ールド交互に切り換え、再生処理回路54に供給する。
再生処理回路54はFM復調などの再生処理を行ない、
図3(c)に示す期間Tcに、圧縮された再生映像信号
を出力する。A/D変換器56は再生処理回路54の出
力をディジタル信号に変換する。A/D変換器56の出
力は、メモリ制御回路30の制御下で画像メモリ38に
書き込まれる。画像メモリ38に書き込まれた映像デー
タは、図3(a)に示す期間に伸長されて読み出され、
D/A変換器58によりアナログ信号に変換され、出力
端子60に出力される。
Under the control of the servo circuit 50, the drum motor 46 rotates the rotary drum 40 at a predetermined speed and a predetermined phase, and the capstan motor 48 runs the magnetic tape 44 at a predetermined speed. The head changeover switch 38 alternately switches the outputs of the magnetic heads 42a and 42b of different azimuths and supplies them to the reproduction processing circuit 54.
The reproduction processing circuit 54 performs reproduction processing such as FM demodulation,
The compressed reproduced video signal is output during the period Tc shown in FIG. The A / D converter 56 converts the output of the reproduction processing circuit 54 into a digital signal. The output of the A / D converter 56 is written in the image memory 38 under the control of the memory control circuit 30. The video data written in the image memory 38 is expanded and read during the period shown in FIG.
The analog signal is converted by the D / A converter 58 and output to the output terminal 60.

【0020】回転ドラムに対するテープ巻き付け角が3
00゜の場合を例に説明したが、本発明がこれに限定さ
れないことは明らかである。また、現在市販品で採用さ
れる180゜対向2ヘッド式の回転ドラムや4ヘッド式
の回転ドラム(270゜巻き)を用いたVTRで時間軸
変換処理を行なう場合にも適用できることはいうまでも
ない。
The tape winding angle on the rotating drum is 3
Although the case of 00 ° has been described as an example, it is obvious that the present invention is not limited to this. Further, it is needless to say that the present invention can also be applied to the case where the time axis conversion process is performed by the VTR using the 180 ° opposite two-head type rotary drum or the four-head type rotary drum (270 ° winding) which is currently used in the commercial product. Absent.

【0021】手振れ補正の像安定化処理に使用する画像
メモリを記録時の圧縮処理に併用する例を説明したが、
更にシンプルな静止画撮影のフリーズ記録用の画像メモ
リ、その他の画像メモリであっても、同様に共用するこ
とができる。
An example has been described in which the image memory used for the image stabilization process for camera shake correction is also used for the compression process during recording.
Even an image memory for freeze recording of simple still image shooting and other image memories can be shared in the same manner.

【0022】[0022]

【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、画像メモリを共用するので、回路
規模の拡大及び消費電力の増大を防止でき、バッテリの
負担を軽減できる。また、カメラ部と記録部とをディジ
タル信号により直結しているので、カメラ部のD/A変
換器及び記録部のA/D変換器を省略でき、量子化誤
差、即ち画質低下を低減できるという利点もある。
As can be easily understood from the above description, according to the present invention, since the image memory is shared, it is possible to prevent an increase in circuit scale and an increase in power consumption and reduce a load on the battery. Further, since the camera unit and the recording unit are directly connected by a digital signal, the D / A converter of the camera unit and the A / D converter of the recording unit can be omitted, and the quantization error, that is, the image quality deterioration can be reduced. There are also advantages.

【図面の簡単な説明】[Brief description of drawings]

【図1】 本発明の一実施例の構成ブロック図である。FIG. 1 is a configuration block diagram of an embodiment of the present invention.

【図2】 手振れ補正の説明図である。FIG. 2 is an explanatory diagram of camera shake correction.

【図3】 本実施例の圧縮伸長のタイミング図である。FIG. 3 is a timing chart of compression / expansion according to the present embodiment.

【図4】 本実施例に対応する再生系の構成ブロック図
である。
FIG. 4 is a configuration block diagram of a reproduction system corresponding to the present embodiment.

【図5】 回転ドラムの平面図である。FIG. 5 is a plan view of a rotary drum.

【図6】 図5の回転ドラムを使用する映像記録装置の
圧縮タイミング図である。
FIG. 6 is a compression timing diagram of a video recording apparatus using the rotary drum of FIG.

【符号の説明】[Explanation of symbols]

10:回転ドラム 12:磁気テープ 14a:プラス
・アジマス磁気ヘッド 14b:マイナス・アジマス磁気ヘッド 20:撮影レ
ンズ 22:撮像素子 24:A/D変換器 25:動きベクトル検出回路 2
6:カメラ信号処理回路 28:画像メモリ 30:メモリ制御回路 32:補間
拡大回路 34:D/A変換器 36:記録処理回路
38:ヘッド切換えスイッチ 40:回転ドラム 4042a,42b:磁気ヘッド 44:磁気テープ
46:ドラム・モータ 48:キャプスタン・モータ
50:サーボ回路 52:システム制御回路 53:キー 54:再生処理回路 56:A/D変換器
58:D/A変換器 60:出力端子
10: rotating drum 12: magnetic tape 14a: plus azimuth magnetic head 14b: minus azimuth magnetic head 20: taking lens 22: image sensor 24: A / D converter 25: motion vector detection circuit 2
6: Camera signal processing circuit 28: Image memory 30: Memory control circuit 32: Interpolation enlargement circuit 34: D / A converter 36: Recording processing circuit
38: Head changeover switch 40: Rotating drum 4042a, 42b: Magnetic head 44: Magnetic tape
46: Drum motor 48: Capstan motor
50: Servo circuit 52: System control circuit 53: Key 54: Reproduction processing circuit 56: A / D converter 58: D / A converter 60: Output terminal

Claims (1)

【特許請求の範囲】 【請求項1】 撮影画像信号をディジタル信号処理する
カメラ部と、映像信号を時間軸変換して記録媒体に記録
する記録部とからなる映像記録装置であって、当該カメ
ラ部のディジタル信号処理と当該記録部の時間軸変換処
理に共用する画像メモリを設けたことを特徴とする映像
記録装置。
Claim: What is claimed is: 1. A video recording apparatus comprising: a camera unit for digitally processing a captured image signal; and a recording unit for time-axis-converting a video signal and recording the video signal on a recording medium. An image recording device provided with an image memory shared between a digital signal processing of a recording section and a time base conversion processing of the recording section.
JP03168372A 1991-07-09 1991-07-09 Imaging device Expired - Fee Related JP3114248B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP03168372A JP3114248B2 (en) 1991-07-09 1991-07-09 Imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP03168372A JP3114248B2 (en) 1991-07-09 1991-07-09 Imaging device

Publications (2)

Publication Number Publication Date
JPH0522697A true JPH0522697A (en) 1993-01-29
JP3114248B2 JP3114248B2 (en) 2000-12-04

Family

ID=15866876

Family Applications (1)

Application Number Title Priority Date Filing Date
JP03168372A Expired - Fee Related JP3114248B2 (en) 1991-07-09 1991-07-09 Imaging device

Country Status (1)

Country Link
JP (1) JP3114248B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003075557A1 (en) * 2002-03-05 2003-09-12 Sony Corporation Image pickup device and chromatic aberration correction method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003075557A1 (en) * 2002-03-05 2003-09-12 Sony Corporation Image pickup device and chromatic aberration correction method
CN100384221C (en) * 2002-03-05 2008-04-23 索尼株式会社 Image pickup device and chromatic aberration correction method
US7397499B2 (en) 2002-03-05 2008-07-08 Sony Corporation Image pickup device and chromatic aberration correction method

Also Published As

Publication number Publication date
JP3114248B2 (en) 2000-12-04

Similar Documents

Publication Publication Date Title
JP3605870B2 (en) Panoramic still image creation device
JP3114248B2 (en) Imaging device
JP2685595B2 (en) Recording / playback device for imaging signals
JPS63294082A (en) Picture recorder
JP3336085B2 (en) Imaging recording and playback device
KR0160711B1 (en) Method and apparatus for reproducing still image of camcorder
JP3319188B2 (en) Video signal processing apparatus and video signal recording / reproducing apparatus including the same
JP3218612B2 (en) Video signal recording / reproducing device capable of correcting camera shake
JP3158350B2 (en) Image recording / playback device
JP2865360B2 (en) Still image playback device
JPH08298644A (en) Picture data recording device and its method
JP3158549B2 (en) Still image recording and playback device
JP3318815B2 (en) Video signal processing apparatus and video signal recording / reproducing apparatus including the same
JP2771148B2 (en) Electronic camera
JPH0923360A (en) Video device and video recorder
JP3215750B2 (en) Multi memory capture method
JP3311002B2 (en) Electronic still camera
JP2771149B2 (en) Image processing device
JP2783590B2 (en) Image recording and playback device
JPH0482392A (en) Picture recording and reproducing device
JPS6310985A (en) Video signal reproducing device
JPH0622286A (en) Image processing unit
JPH04179381A (en) Image recorder
JPH09200611A (en) Image pickup device
JPH05130551A (en) Recorder

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20000829

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080929

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090929

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090929

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100929

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees