JP3295208B2 - Electronic still camera - Google Patents

Electronic still camera

Info

Publication number
JP3295208B2
JP3295208B2 JP35198693A JP35198693A JP3295208B2 JP 3295208 B2 JP3295208 B2 JP 3295208B2 JP 35198693 A JP35198693 A JP 35198693A JP 35198693 A JP35198693 A JP 35198693A JP 3295208 B2 JP3295208 B2 JP 3295208B2
Authority
JP
Japan
Prior art keywords
image data
electronic still
still camera
circuit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP35198693A
Other languages
Japanese (ja)
Other versions
JPH07203352A (en
Inventor
宏樹 福岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=18420994&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP3295208(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP35198693A priority Critical patent/JP3295208B2/en
Publication of JPH07203352A publication Critical patent/JPH07203352A/en
Priority to US09/010,997 priority patent/US5960155A/en
Priority to US09/334,265 priority patent/US6212331B1/en
Priority to US09/722,325 priority patent/US6334027B1/en
Priority to US09/790,664 priority patent/US6427049B2/en
Application granted granted Critical
Publication of JP3295208B2 publication Critical patent/JP3295208B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は、電子スチルカメラに係
り、特に、その画像・音声記録再生装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an electronic still camera, and more particularly to an image / sound recording / reproducing apparatus.

【0002】[0002]

【従来の技術】現在、電子スチルカメラは、主に情報機
器への画像・音声データの入力装置として使用されてい
る。例えば、特開平4−212582号公報には、電子カメラ
による画像データをアダプタ等を一切用いずにパーソナ
ルコンピュータに直接入力し、編集等の処理が行えるよ
うにする技術が提案されている。
2. Description of the Related Art At present, electronic still cameras are mainly used as input devices for image and audio data to information equipment. For example, Japanese Patent Laying-Open No. 4-225882 proposes a technique in which image data from an electronic camera is directly input to a personal computer without using any adapter or the like, and processing such as editing can be performed.

【0003】[0003]

【発明が解決しようとする課題】しかし、現在の電子ス
チルカメラは、これらの情報機器との親和性が悪く、イ
ンタフェース(I/F)用のハードウェア,ソフトウェア
が必要である。
However, current electronic still cameras have poor compatibility with these information devices and require hardware and software for an interface (I / F).

【0004】具体的には以下のような問題がある。[0004] Specifically, there are the following problems.

【0005】(1) 情報機器に使用されている画像フォー
マットは、アプリケーション・プログラムにより異なっ
ており、電子スチルカメラで記録した画像ファイルのフ
ォーマットがアプリケーションに合わない場合、ファイ
ルフォーマット変換プログラムを作成する必要がある。
(1) The image format used in the information equipment differs depending on the application program. If the format of the image file recorded by the electronic still camera does not match the application, it is necessary to create a file format conversion program. There is.

【0006】(2) 電子スチルカメラは、テレビジョン
(NTSC等)画面上で再生して見ることを標準で設計さ
れているので、画素のアスペクト比が“1”ではない。
このように記録されたファイルをそのままパソコン等の
情報機器で再生すると、潰れた画面になってしまい見づ
らい表示となる。
(2) An electronic still camera is a television
(NTSC) The aspect ratio of the pixel is not "1" because it is designed as a standard for reproduction and viewing on the screen.
If the file recorded in this way is reproduced on an information device such as a personal computer as it is, the screen becomes a crushed screen and the display becomes difficult to see.

【0007】(3) 記録媒体I/Fを介して情報機器へ直
接画像データを転送する場合、画像データの同期位置も
転送しないと、正常に情報機器側で表示できない。
(3) When image data is directly transferred to the information device via the recording medium I / F, the information device cannot display normally unless the image data synchronization position is also transferred.

【0008】本発明の目的は、前記従来の課題中、画素
のアスペクト比に関する問題を解決し、情報機器へのマ
ルチメディア情報(画像・音声)を入力するために最適な
コストパフォーマンスに優れた電子スチルカメラを提供
することにある。
SUMMARY OF THE INVENTION An object of the present invention is to solve the above-mentioned conventional problems relating to the aspect ratio of a pixel and to provide an electronic device having excellent cost performance which is optimal for inputting multimedia information (image / audio) to information equipment. It is to provide a still camera.

【0009】[0009]

【課題を解決するための手段】前記目的を達成するた
め、本発明は、被写体を撮像して画像データを出力する
撮影手段と、画像データを符号化する画像データ符号化
手段と、符号化された画像データを記録媒体に記録する
手段を備えた電子スチルカメラにおいて、記録媒体に記
録する画像データの画素アスペクト比を変更する手段を
備えたことを特徴とする。
According to the present invention, there is provided a photographing means for photographing a subject and outputting image data; an image data encoding means for encoding image data; An electronic still camera provided with means for recording the image data on a recording medium, the electronic still camera further comprising means for changing the pixel aspect ratio of the image data recorded on the recording medium.

【0010】[0010]

【作用】前記構成の電子スチルカメラによれば、記録媒
体に記録する画像データの画素アスペクト比を変更する
手段を備えているので、情報機器において各種アプリケ
ーションプログラムにて使用する場合、これらの画素ア
スペクト比に合わせて電子スチルカメラで記録しておけ
ばアスペクト変換をする必要がなくなる。
According to the electronic still camera having the above-mentioned structure, since the means for changing the pixel aspect ratio of the image data recorded on the recording medium is provided, when the electronic device is used in various application programs in an information device, the pixel aspect ratio is changed. If the image is recorded by an electronic still camera according to the ratio, there is no need to perform aspect conversion.

【0011】[0011]

【実施例】以下、本発明の実施例を図面に基づいて説明
する。
Embodiments of the present invention will be described below with reference to the drawings.

【0012】図1は本発明の一実施例の構成を示すブロ
ック図であり、1はマイク、2a,2bは増幅器、3は音
声データの符号化/復号化を行う音声データ符号化手段
および音声データ復号化手段である音声データ圧縮/伸
張回路、4はA/D(アナログ/デジタル)変換回路、5
はD/A(デジタル/アナログ)変換回路である。
FIG. 1 is a block diagram showing the configuration of an embodiment of the present invention, wherein 1 is a microphone, 2a and 2b are amplifiers, 3 is audio data encoding means for encoding / decoding audio data, and audio. An audio data compression / expansion circuit as data decoding means, 4 is an A / D (analog / digital) conversion circuit,
Denotes a D / A (digital / analog) conversion circuit.

【0013】6は撮像レンズ7,絞り8,CCD9,カ
メラコントロール部であるCDS10等からなるカメラ撮
像部、11は各種画像処理がなされるデジタル信号処理回
路、12は画像データの符号化/復号化を行う画像データ
符号化手段および画像データ復号化手段である画像デー
タ圧縮/伸張回路、13はFIFO回路、14はメモリカー
ドとのインタフェース(I/F)であるメモリカードI/
Fである。
Reference numeral 6 denotes a camera imaging unit including an imaging lens 7, an aperture 8, a CCD 9, and a CDS 10 serving as a camera control unit. Reference numeral 11 denotes a digital signal processing circuit for performing various types of image processing. , An image data compression / decompression circuit as image data encoding means and image data decoding means, a FIFO circuit 13, and a memory card I / F 14 as an interface (I / F) with a memory card.
F.

【0014】16はカメラ撮像部6の機械系の駆動部(ド
ライバ)、17はカメラ撮像部6の電気系のタイミング信
号発生部(SG)、18は照明手段であるストロボ、19は各
種モードを設定するための操作部、20は設定されたモー
ドを表示するモード表示部、21は前記各部をコントロー
ルするCPUである。
Reference numeral 16 denotes a mechanical drive unit (driver) of the camera imaging unit 6, 17 denotes an electrical timing signal generation unit (SG) of the camera imaging unit 6, 18 denotes a strobe as illumination means, and 19 denotes various modes. An operation unit for setting, 20 is a mode display unit for displaying the set mode, and 21 is a CPU for controlling each unit.

【0015】22aと22bは、メモリカードI/F14に接続
されて、各種記録媒体とのインタフェースをとるための
記録媒体I/Fと、各種情報機器とのインタフェースを
とるための情報機器I/Fである。
The recording media I / F 22a and 22b are connected to the memory card I / F 14 to interface with various recording media and the information equipment I / F for interfacing with various information devices. It is.

【0016】図1において、被写体像が撮像レンズ7に
よって撮像手段であるCCD9上に結像され、CCD9
で撮像された画像は、CDS10でゲインコントロールさ
れて、A/D変換回路4でデジタルデータにされるよう
になっている。デジタル画像データは、デジタル信号処
理回路11でガンマ補正,アパーチャ補正が施されて、画
像信号符号化手段である画像データ圧縮/伸張回路12へ
送られ符号化されるようになっている。デジタル信号処
理回路11には、CPU21からの設定により画素アスペク
ト比を変更できる回路を内蔵している。
In FIG. 1, a subject image is formed by an imaging lens 7 on a CCD 9 serving as an imaging means.
The image picked up by is subjected to gain control by the CDS 10, and is converted into digital data by the A / D conversion circuit 4. The digital image data is subjected to gamma correction and aperture correction by a digital signal processing circuit 11, and is sent to an image data compression / expansion circuit 12, which is image signal encoding means, to be encoded. The digital signal processing circuit 11 has a built-in circuit that can change the pixel aspect ratio by setting from the CPU 21.

【0017】NTSC画像のアスペクト比を“1”にす
る方式は垂直方向画素補間で行うが、具体的方法を以下
に示す。
The method of setting the aspect ratio of an NTSC image to "1" is performed by vertical pixel interpolation. A specific method will be described below.

【0018】アスペクト比変更前画素をa(i,k)、変
更後の画素をb(i,k)とすると、
If the pixel before changing the aspect ratio is a (i, k) and the pixel after changing is b (i, k),

【0019】[0019]

【数1】 m=(i/6)+1 1≦i≦575,1≦k≦768,mは整数とすると、M = (i / 6) +1 1 ≦ i ≦ 575, 1 ≦ k ≦ 768, and m is an integer,

【0020】[0020]

【数2】 b(i,k)={(5+i−6m)/6}×a(i−m,k) +{(1−i+6m)/6}×a{(i−m+1),k} 但し、a(0,k)=0とする。B (i, k) = {(5 + i−6m) / 6} × a (im, k) + {(1−i + 6m) / 6} × a {(im−1), k} However, a (0, k) = 0.

【0021】符号化された画像データは、FIFO回路
13へ入り、順次、メモリカードI/F14を通って記録媒
体であるメモリカードに記録されるようになっている。
なお、前記各部は、CPU21にてコントロールされるよ
うになっている。
The encoded image data is sent to a FIFO circuit.
13 and sequentially recorded on a memory card as a recording medium through a memory card I / F 14.
Note that the above components are controlled by the CPU 21.

【0022】一方、音声は、マイク1にて捕らえられ、
電気信号に変換される。この電気信号は、増幅器2aで
増幅されて、A/D変換回路4でデジタルデータにさ
れ、音声信号符号化手段である音声データ圧縮/伸張回
路3へ送られ、符号化されるようになっている。符号化
された音声データは、CPU21を介してメモリカードI
/F14を通ってメモリカードに記録される。メモリカー
ドへの記録フォーマットは、CPU21からファイル作成
時に設定するヘッダを変更することにより、幾つかの記
録フォーマットファイルを作成できる。これらの詳細に
ついては図2を用いて後に説明する。
On the other hand, the voice is captured by the microphone 1,
Converted to electrical signals. This electric signal is amplified by an amplifier 2a, converted into digital data by an A / D conversion circuit 4, sent to an audio data compression / expansion circuit 3 as audio signal encoding means, and encoded. I have. The encoded audio data is transmitted to the memory card I via the CPU 21.
/ F14 to be recorded on the memory card. Several recording format files can be created for the recording format on the memory card by changing the header set by the CPU 21 when creating the file. Details of these will be described later with reference to FIG.

【0023】メモリカードに記録されたデータの再生時
には、画像音声データは、メモリカードI/F14を通っ
て、FIFO回路13あるいはCPU21へ送られるように
なっている。画像データは、画像データ圧縮/伸張回路
12でデータ伸張(復号)処理が施されて、デジタル信号処
理回路11を通ってビデオ信号として出力されるようにな
っている。
At the time of reproducing the data recorded on the memory card, the video and audio data is sent to the FIFO circuit 13 or the CPU 21 through the memory card I / F 14. The image data is an image data compression / decompression circuit
The data is subjected to data expansion (decoding) processing at 12, and is output as a video signal through the digital signal processing circuit 11.

【0024】一方、音声データはCPU21を介して音声
データ圧縮/伸張回路3へ送られ、データ伸張(復号)さ
れて、増幅器2bを通ってオーディオ信号として出力さ
れる。
On the other hand, the audio data is sent to the audio data compression / expansion circuit 3 via the CPU 21, is subjected to data expansion (decoding), and is output as an audio signal through the amplifier 2b.

【0025】また、情報機器との間で直接データを転送
するために、記録媒体I/F22aは、共用使用される。
非圧縮画像データを情報機器へ転送する場合、デジタル
信号処理回路11でガンマ補正,アパーチャ補正された画
像データは、画像データ圧縮/伸張回路12をそのまま出
力され、FIFO回路13へ書き込まれる。FIFO回路
13に書き込まれた画像データは、メモリカードI/F14
を介して情報機器I/F22bへ出力される。また、非圧
縮音声データを情報機器へ転送する場合、A/D変換回
路4でデジタル化された音声データは、音声データ圧縮
/伸張回路3をそのまま出力され、FIFO回路13へ書
き込まれる。FIFO回路13に書き込まれた音声データ
は、メモリカードI/F14を介して情報機器I/F22b
へ出力される。
The recording medium I / F 22a is commonly used for directly transferring data to and from an information device.
When transferring uncompressed image data to an information device, the image data subjected to gamma correction and aperture correction by the digital signal processing circuit 11 is output as it is from the image data compression / expansion circuit 12 and written into the FIFO circuit 13. FIFO circuit
The image data written in the memory card 13 is stored in the memory card I / F 14
Is output to the information device I / F 22b via the. When transferring uncompressed audio data to an information device, the audio data digitized by the A / D conversion circuit 4 is output from the audio data compression / expansion circuit 3 as it is and written to the FIFO circuit 13. The audio data written in the FIFO circuit 13 is transmitted to the information device I / F 22b via the memory card I / F 14.
Output to

【0026】図3(a),(b)に情報機器データ転送のタイ
ミングチャートを示す。デジタル信号処理回路11から出
力された画像データは、画像有効期間にそのまま情報機
器I/F22bへ出力される。垂直ブランキング期間に
は、音声データ以外に垂直ブランキングを示す符号化さ
れた垂直同期符号,カメラのステータスを示す符号化さ
れたステータス符号,情報機器側への制御コマンドを示
す制御符号,フィールド番号またはフレーム番号を示す
符号を挿入記録する。
FIGS. 3A and 3B show timing charts of information device data transfer. The image data output from the digital signal processing circuit 11 is directly output to the information device I / F 22b during the image valid period. In the vertical blanking period, in addition to audio data, an encoded vertical synchronization code indicating vertical blanking, an encoded status code indicating camera status, a control code indicating a control command to the information device, and a field number Alternatively, a code indicating the frame number is inserted and recorded.

【0027】また、水平ブランキング期間には、音声デ
ータ以外に水平ブランキングを示す符号化された水平同
期符号,カメラのステータスを示す符号化されたステー
タス符号,情報機器側への制御コマンドを示す制御符
号,水平走査線番号を示す符号を挿入記録する。
During the horizontal blanking period, in addition to audio data, an encoded horizontal synchronization code indicating horizontal blanking, an encoded status code indicating camera status, and a control command to the information device are shown. A control code and a code indicating a horizontal scanning line number are inserted and recorded.

【0028】図2に本実施例のファイル作成のフローを
示す。ファイル作成において、まず、CPU21に操作部
19から作成フォーマット仕様を設定または選択する(S
1)。CPU21は、画像データをメモリカードへ転送する
際に選択されたファイルフォーマット(S2-1,S2-2,
S2-3)に合ったヘッダ情報を画像データ本体に組み合わ
せて転送を行うことにより、ファイルを作成する(S
3)。
FIG. 2 shows a flow of file creation in this embodiment. In creating a file, first, the CPU 21
Set or select the creation format specification from 19 (S
1). The CPU 21 selects the file format (S2-1, S2-2, S2-2) selected when transferring the image data to the memory card.
A file is created by combining the header information matching S2-3) with the image data body and transferring the image data.
3).

【0029】[0029]

【発明の効果】以上説明したように、本発明の電子スチ
ルカメラは、請求項1記載の発明によれば、記録媒体に
記録する画像データの画素アスペクト比を変更する手段
を備えているので、情報機器において各種アプリケーシ
ョンプログラムにて使用する場合、これらの画素アスペ
クト比に合わせて電子スチルカメラで記録しておけばア
スペクト変換をする必要がなくなり、より親和性が高ま
る。
As described above, according to the first aspect of the present invention, the electronic still camera of the present invention is provided with the means for changing the pixel aspect ratio of the image data recorded on the recording medium. When used with various application programs in an information device, recording with an electronic still camera in accordance with these pixel aspect ratios eliminates the need for aspect conversion, thereby increasing affinity.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施例である電子スチルカメラの構
成を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration of an electronic still camera according to an embodiment of the present invention.

【図2】本実施例のファイル作成のフローチャートであ
る。
FIG. 2 is a flowchart of file creation according to the embodiment.

【図3】情報機器データ転送のタイミングチャートであ
る。
FIG. 3 is a timing chart of information device data transfer.

【符号の説明】[Explanation of symbols]

1…マイク、 2a,2b…増幅器、 3…音声データ圧
縮/伸張回路、 6…カメラ撮像部、 7…撮像レン
ズ、 12…画像データ圧縮/伸張回路、 14,22a,22b
…インタフェース、 21…CPU(中央演算処理部)。
DESCRIPTION OF SYMBOLS 1 ... Microphone, 2a, 2b ... Amplifier, 3 ... Audio data compression / expansion circuit, 6 ... Camera imaging part, 7 ... Imaging lens, 12 ... Image data compression / expansion circuit, 14, 22a, 22b
... Interface, 21 ... CPU (Central Processing Unit).

Claims (1)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 被写体を撮像して画像データを出力する
撮影手段と、画像データを符号化する画像データ符号化
手段と、符号化された画像データを記録媒体に記録する
手段を備えた電子スチルカメラにおいて、記録媒体に記
録する画像データの画素アスペクト比を変更する手段を
備えたことを特徴とする電子スチルカメラ。
1. An electronic still comprising: a photographing means for photographing a subject and outputting image data; an image data encoding means for encoding the image data; and a means for recording the encoded image data on a recording medium. An electronic still camera, comprising: means for changing a pixel aspect ratio of image data recorded on a recording medium.
JP35198693A 1993-08-09 1993-12-29 Electronic still camera Expired - Lifetime JP3295208B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP35198693A JP3295208B2 (en) 1993-12-29 1993-12-29 Electronic still camera
US09/010,997 US5960155A (en) 1993-08-09 1998-01-22 Electronic still camera
US09/334,265 US6212331B1 (en) 1993-08-09 1999-06-16 Electronic still camera
US09/722,325 US6334027B1 (en) 1993-08-09 2000-11-28 Electronic still camera
US09/790,664 US6427049B2 (en) 1993-08-09 2001-02-23 Electronic still camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP35198693A JP3295208B2 (en) 1993-12-29 1993-12-29 Electronic still camera

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2002063675A Division JP3306808B1 (en) 2002-03-08 2002-03-08 Electronic still camera

Publications (2)

Publication Number Publication Date
JPH07203352A JPH07203352A (en) 1995-08-04
JP3295208B2 true JP3295208B2 (en) 2002-06-24

Family

ID=18420994

Family Applications (1)

Application Number Title Priority Date Filing Date
JP35198693A Expired - Lifetime JP3295208B2 (en) 1993-08-09 1993-12-29 Electronic still camera

Country Status (1)

Country Link
JP (1) JP3295208B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100498594B1 (en) * 2000-12-30 2005-07-01 매그나칩 반도체 유한회사 Cmos image sensor
KR100422579B1 (en) * 2002-04-29 2004-03-12 주식회사 하이닉스반도체 Image sensor and method for signal processing of image sensor

Also Published As

Publication number Publication date
JPH07203352A (en) 1995-08-04

Similar Documents

Publication Publication Date Title
JP3398081B2 (en) Digital camera
JP4958758B2 (en) Recording apparatus, reproducing apparatus, recording method, reproducing method, and program
US7490181B2 (en) Data reproducing apparatus for transforming external input signal and method thereof
KR100726819B1 (en) Video imaging device, video conversion device, and video edition device
US7649552B2 (en) Video signal processing apparatus
JP2006203334A (en) Image recording apparatus, control method thereof and program
JP3295208B2 (en) Electronic still camera
JP4973497B2 (en) Captured image recording apparatus, captured image recording method, captured image playback apparatus, captured image playback method, and captured image recording / playback system
US20050200709A1 (en) Composition photographing apparatus and sound recording method using the same
JPH11177868A (en) Image pickup method, reproduction method and device therefor
JP3306808B1 (en) Electronic still camera
JP2003125331A (en) Picture recording method and device and picture reproducing method and device
KR100292498B1 (en) Multi-mode camcorder and control method thereof
JP3169397B2 (en) Digital electronic still camera and operation method thereof
JP2000115693A (en) Image data recording method and device, image data reproducing method and device, information recording medium and computer-readable recording medium
KR20000056435A (en) Apparatus for Transmitting Non-compression Image in Digital Video Camera
JPH08298644A (en) Picture data recording device and its method
JPH04119756A (en) Still picture recorder
JP2003348542A (en) Digital video camcorder
KR100943277B1 (en) Digital camcorder for image mixing and method thereof
JPH10150641A (en) Image recorder
JP2732941B2 (en) Image signal processing device
KR20050036559A (en) Photographing apparatus of copying moving-image signals from one recording medium to another and method thereof
JPH10322632A (en) Digital video camera device and video reproducing method therefor
JPH1013785A (en) Recording and reproducing device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080405

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080405

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090405

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090405

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100405

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100405

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110405

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120405

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130405

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140405

Year of fee payment: 12

EXPY Cancellation because of completion of term