JP4466698B2 - Solid-state imaging device, camera using the same, and driving method of solid-state imaging device - Google Patents
Solid-state imaging device, camera using the same, and driving method of solid-state imaging device Download PDFInfo
- Publication number
- JP4466698B2 JP4466698B2 JP2007219858A JP2007219858A JP4466698B2 JP 4466698 B2 JP4466698 B2 JP 4466698B2 JP 2007219858 A JP2007219858 A JP 2007219858A JP 2007219858 A JP2007219858 A JP 2007219858A JP 4466698 B2 JP4466698 B2 JP 4466698B2
- Authority
- JP
- Japan
- Prior art keywords
- solid
- imaging device
- state imaging
- frequency
- readout mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
Description
本発明は、固体撮像装置およびその駆動方法に係わり、特に電子スチルカメラ等の撮像デバイスとして用いて好適な固体撮像装置およびその駆動方法に関するものである。さらに、本発明は、電子スチルカメラ等のように、固体撮像装置を用いて構成されたカメラに関するものである。 The present invention relates to a solid-state imaging device and a driving method thereof, and more particularly to a solid-state imaging device suitable for use as an imaging device such as an electronic still camera and a driving method thereof. Furthermore, the present invention relates to a camera configured using a solid-state imaging device such as an electronic still camera.
近年、CCD(Charge Coupled Device)固体撮像装置をはじめとした固体撮像装置の進展に伴い、CCD固体撮像装置等を撮像デバイスとして用いたディジタル記録の電子スチルカメラが普及しつつある。
電子スチルカメラでは、高解像度を実現するために、通常、図8に示すように、各画素の信号電荷を垂直CCD中で混ぜずに同一時刻に独立に読み出す、いわゆる全画素読み出し方式のCCD固体撮像装置が用いられている。この全画素読み出し方式のCCD固体撮像装置によれば、ビデオカメラ等で一般的に使用されている、いわゆるフィールド読み出し方式の固体撮像装置に比べて、画素数を同じとした場合に2倍の垂直解像度を実現できる。
In recent years, with the progress of solid-state imaging devices such as CCD (Charge Coupled Device) solid-state imaging devices, digital recording electronic still cameras using CCD solid-state imaging devices and the like as imaging devices are becoming widespread.
In an electronic still camera, in order to realize high resolution, as shown in FIG. 8, normally, a CCD solid of a so-called all-pixel readout method in which signal charges of each pixel are read independently at the same time without being mixed in a vertical CCD. An imaging device is used. According to this all-pixel readout type CCD solid-state imaging device, the vertical number is doubled when the number of pixels is the same as that of a so-called field readout type solid-state imaging device generally used in a video camera or the like. The resolution can be realized.
ところで、最近では、このような電子スチルカメラに対して、長時間の使用を可能にするために、消費電力を低減することが要望されている。これを実現するための一つの方法として、電子スチルカメラの撮像デバイスである固体撮像装置、特にこの固体撮像装置のうちの固体撮像素子や、ここから得られる信号の処理を行う信号処理回路の消費電力を低減することが考えられる。
体撮像素子の消費電力は、その駆動周波数に大きく依存する。したがって、固体撮像素子の消費電力を低減するためには、その固体撮像素子の駆動周波数を低下させることが効果的である。また、駆動周波数を低下させることは、この駆動周波数がそのまま信号処理回路の周波数となるので、そこでの消費電力の低減の効果も期待できる。
By the way, recently, in order to enable such an electronic still camera to be used for a long time, it is desired to reduce power consumption. As one method for realizing this, a solid-state image pickup device that is an image pickup device of an electronic still camera, in particular, consumption of a solid-state image pickup device of the solid-state image pickup device and a signal processing circuit for processing a signal obtained therefrom. It is conceivable to reduce power.
The power consumption of the body image sensor greatly depends on the drive frequency. Therefore, in order to reduce the power consumption of the solid-state image sensor, it is effective to reduce the drive frequency of the solid-state image sensor. In addition, reducing the drive frequency can be expected to reduce the power consumption because the drive frequency is directly used as the frequency of the signal processing circuit.
しかしながら、固体撮像素子の駆動周波数を低下させると、これに合わせて固体撮像素子のフレームレートも低下してしまう。フレームレートが低下すると、単位時間当たりに固体撮像素子から出力される出力信号の量(画面数)が少なくなるので、被写体の構図を確認するために電子スチルカメラに設けられているディスプレイ(液晶ディスプレイ等)で表示される画像の動きが、滑らかでなく不自然なものになってしまう。しかも、固体撮像素子における暗電流やスミア等の影響も受けやすくなってしまい、結果として撮影後の画質にも影響を及ぼしてしまう。 However, when the drive frequency of the solid-state image sensor is lowered, the frame rate of the solid-state image sensor is also lowered accordingly. When the frame rate decreases, the amount of output signals (number of screens) output from the solid-state image sensor per unit time decreases, so a display (liquid crystal display) provided on an electronic still camera to check the composition of the subject Etc.), the motion of the image displayed is not smooth and unnatural. In addition, the solid-state image sensor is easily affected by dark current, smear, and the like, and as a result, the image quality after shooting is also affected.
そこで、本発明は、固体撮像素子から出力される画面数等に影響を及ぼすことなく、消費電力を低減することが可能な固体撮像装置およびその駆動方法を提供することを目的とする。
さらに、本発明は、固体撮像装置を用いたカメラにおいて、ディスプレイに表示される画像の動きや撮影後の画質に影響を及ぼすことなく、固体撮像装置の消費電力を低減することが可能なカメラを提供することを目的とする。
Therefore, an object of the present invention is to provide a solid-state imaging device and a driving method thereof that can reduce power consumption without affecting the number of screens output from the solid-state imaging device.
Furthermore, the present invention provides a camera that can reduce the power consumption of the solid-state imaging device without affecting the movement of the image displayed on the display and the image quality after shooting. The purpose is to provide.
本発明による固体撮像装置は、全画素の信号電荷を同一時刻に独立に読み出す全画素読み出しモードと、垂直方向の一部の画素列のみから信号電荷を読み出す間引き読み出しモードとを選択的にとり得る固体撮像素子と、前記固体撮像素子の駆動周波数を動作モードに応じて可変させる周波数可変手段とを備え、前記周波数可変手段が駆動周波数を1/m(mは自然数)に低下させても、前記固体撮像素子がn(nは自然数)個の画素のうち1個のみを読み出す1/n間引き読み出しを行うことによって、フレームレートがn/mになるように構成されているとともに、n=mに設定されていることを特徴とする。 The solid-state imaging device according to the present invention is capable of selectively taking the all-pixel readout mode in which the signal charges of all the pixels are independently read at the same time and the thinning-out readout mode in which the signal charges are read out from only a part of the pixel columns in the vertical direction. An imaging element; and a frequency variable unit that varies a driving frequency of the solid-state imaging element according to an operation mode, and the solid-state imaging unit is configured to reduce the driving frequency to 1 / m (m is a natural number). The image sensor is configured to perform 1 / n decimation readout that reads out only one of n (n is a natural number) pixels, so that the frame rate is set to n / m, and n = m is set. It is characterized by being.
本発明による駆動方法は、全画素の信号電荷を同一時刻に独立に読み出す全画素読み出しモードと、垂直方向の一部の画素列のみから信号電荷を読み出す間引き読み出しモードとを選択的にとり得る固体撮像素子を備えた固体撮像装置の駆動方法において、前記固体撮像素子の駆動周波数を動作モードに応じて可変させ、当該駆動周波数を1/m(mは自然数)に低下させても、前記固体撮像素子がn(nは自然数)個の画素のうち1個のみを読み出す1/n間引き読み出しを行うことによって、フレームレートがn/mになるようにするとともに、n=mとなるように設定することを特徴とする。 The driving method according to the present invention is a solid-state imaging that can selectively take all-pixel readout mode in which signal charges of all pixels are independently read out at the same time and thinning-out readout mode in which signal charges are read out only from some pixel columns in the vertical direction. In a driving method of a solid-state imaging device provided with an element, the solid-state imaging element can be obtained even if the driving frequency of the solid-state imaging element is varied according to an operation mode and the driving frequency is reduced to 1 / m (m is a natural number). 1 / n thin-out readout that reads out only one of n (n is a natural number) pixels, so that the frame rate is set to n / m and n = m is set. It is characterized by.
上記構成の固体撮像装置およびその駆動方法によれば、動作モードに応じて固体撮像素子の駆動周波数を可変させる。これにより、例えば、間引き読み出しモード時における固体撮像素子の駆動周波数を、全画素読み出しモード時の駆動周波数よりも1/mに低くするといったことが可能になる。この場合には、垂直方向の一部の画素列のみから信号電荷が読み出される1/n間引き読み出しを行うので、駆動周波数を低くしても、単位時間あたりに固体撮像素子から出力される画面数が減ってしまうことがない。つまり、n=mとすることで、間引き読み出しモード時と全画素読み出しモード時とのフレームレートの変化がなくなる。しかも、間引き読み出しモード時には、駆動周波数を低くすることにより固体撮像素子の消費電力が低減される。 According to the solid-state imaging device having the above configuration and the driving method thereof, the driving frequency of the solid-state imaging device is varied according to the operation mode. As a result, for example, the driving frequency of the solid-state imaging device in the thinning readout mode can be made 1 / m lower than the driving frequency in the all-pixel readout mode. In this case, 1 / n thinning readout is performed in which signal charges are read out from only a part of the pixel columns in the vertical direction, so the number of screens output from the solid-state imaging device per unit time even if the drive frequency is lowered. Will not decrease. That is, by setting n = m, there is no change in the frame rate between the thinning readout mode and the all-pixel readout mode. In addition, in the thinning readout mode, the power consumption of the solid-state imaging device is reduced by lowering the drive frequency.
また、本発明によるカメラは、全画素の信号電荷を同一時刻に独立に読み出す全画素読み出しモードと、垂直方向の一部の画素列のみから信号電荷を読み出す間引き読み出しモードとを選択的にとり得る固体撮像素子と、前記固体撮像素子の駆動周波数を動作モードに応じて可変させる周波数可変手段とを備え、前記周波数可変手段が駆動周波数を1/m(mは自然数)に低下させても、前記固体撮像素子がn(nは自然数)個の画素のうち1個のみを読み出す1/n間引き読み出しを行うことによって、フレームレートがn/mになるように構成されているとともに、n=mに設定されていることを特徴とする。 In addition, the camera according to the present invention is capable of selectively taking the all-pixel readout mode in which the signal charges of all the pixels are independently read at the same time and the thinning-out readout mode in which the signal charges are read out from only a part of the pixel columns in the vertical direction. An imaging element; and a frequency variable unit that varies a driving frequency of the solid-state imaging element according to an operation mode, and the solid-state imaging unit is configured to reduce the driving frequency to 1 / m (m is a natural number). The image sensor is configured to perform 1 / n decimation readout that reads out only one of n (n is a natural number) pixels, so that the frame rate is set to n / m, and n = m is set. It is characterized by being.
上記構成のカメラによれば、動作モードに応じて固体撮像素子の駆動周波数を可変させる。これにより、このカメラでは、例えば、間引き読み出しモード時における固体撮像素子の駆動周波数を、全画素読み出しモード時の駆動周波数よりも1/mに低くするといったことが可能になる。この場合には、垂直方向の一部の画素列のみから信号電荷が読み出される1/n間引き読み出しを行うので、駆動周波数を低くしても、単位時間あたりに固体撮像素子から出力される画面数が減ってしまうことがない。つまり、n=mとすることで、間引き読み出しモード時と全画素読み出しモード時とのフレームレートの変化がなくなる。よって、表示手段による表示時に、表示される画像の動きが、滑らかでなく不自然なものになってしまうことがない。しかも、駆動周波数を低くすることにより固体撮像素子の消費電力が低減される。
また、全画素読み出しモード時には固体撮像素子の駆動周波数を低くしないようにすれば、撮影データを記憶手段に保存する際に撮影データの画質低下を防ぐことができる。
According to the camera having the above configuration, the driving frequency of the solid-state imaging device is varied according to the operation mode. Accordingly, in this camera, for example, the driving frequency of the solid-state imaging device in the thinning readout mode can be made 1 / m lower than the driving frequency in the all-pixel readout mode. In this case, 1 / n thinning readout is performed in which signal charges are read out from only a part of the pixel columns in the vertical direction, so the number of screens output from the solid-state imaging device per unit time even if the drive frequency is lowered. Will not decrease. That is, by setting n = m, there is no change in the frame rate between the thinning readout mode and the all-pixel readout mode. Therefore, the movement of the displayed image does not become smooth and unnatural when displayed by the display means. In addition, the power consumption of the solid-state imaging device is reduced by lowering the drive frequency.
Further, if the driving frequency of the solid-state imaging device is not lowered in the all-pixel reading mode, it is possible to prevent the image quality of the shooting data from being lowered when the shooting data is stored in the storage unit.
以上に説明したように、本発明の固体撮像装置およびその駆動方法によれば、動作モードに応じて固体撮像素子の駆動周波数を可変させるので、間引き読み出しモード時の駆動周波数を全画素読み出しモード時よりも低くするといったことが可能になり、フレームレートの低下を防ぎつつ、固体撮像素子の消費電力を低減できるようになる。つまり、固体撮像素子から出力される画面数等に影響を及ぼすことなく、固体撮像装置の消費電力を低減することができる。 As described above, according to the solid-state imaging device and the driving method thereof according to the present invention, since the driving frequency of the solid-state imaging device is varied according to the operation mode, the driving frequency in the thinning-out readout mode is the same as that in the all-pixel readout mode. It is possible to reduce the power consumption of the solid-state imaging device while preventing the frame rate from decreasing. That is, the power consumption of the solid-state imaging device can be reduced without affecting the number of screens output from the solid-state imaging device.
また、本発明のカメラによれば、動作モードに応じて固体撮像素子の駆動周波数を可変させるので、被写体の構図確認時と撮影データの保存時とで動作モードおよび駆動周波数を切り替えるが可能になる。これにより、このカメラでは、構図確認時の表示画像の動きや撮影後の画質に影響を及ぼすことなく、固体撮像素子、すなわちカメラの消費電力を低減することができる。 Further, according to the camera of the present invention, since the driving frequency of the solid-state imaging device is varied according to the operation mode, the operation mode and the driving frequency can be switched between the confirmation of the composition of the subject and the storage of the shooting data. . Thereby, in this camera, the power consumption of the solid-state imaging device, that is, the camera can be reduced without affecting the movement of the display image at the time of composition confirmation and the image quality after shooting.
以下、本発明の実施形態について、図面を参照しつつ詳細に説明する。図1は、本発明に係わるCCD固体撮像装置の一例の概略構成図である。
本実施形態のCCD固体撮像装置は、図1に示すように、CCD固体撮像素子10と、タイミング発生回路20とを備えてなるものである。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. FIG. 1 is a schematic configuration diagram of an example of a CCD solid-state imaging device according to the present invention.
As shown in FIG. 1, the CCD solid-state imaging device according to the present embodiment includes a CCD solid-
CCD固体撮像素子10には、撮像エリア11が設けられている。
撮像エリア11は、行(垂直)方向および列(水平)方向にマトリクス状に配列され、入射光をその光量に応じた電荷量の信号電荷に変換して蓄積する複数のセンサ部12と、これらセンサ部12の垂直列毎に設けられ、各センサ部12から読み出しゲート部13によって読み出された信号電荷を垂直転送する複数本の垂直CCD14とによって構成されている。
The CCD solid-
The
この撮像エリア11において、センサ部12は例えばPN接合のフォトダイオードからなっている。このセンサ部12に蓄積された信号電荷は、読み出しゲート部13に後述する読み出しパルスXSGが印加されることにより垂直CCD14に読み出される。垂直CCD14は、例えば3層電極3相(φV1〜φV3)駆動の構成となっており、各センサ部12から読み出された信号電荷を水平ブランキング期間の一部にて1走査線(1ライン)に相当する部分ずつ順に垂直方向に転送する。
In the
ここで、垂直CCD14において、2層目(φV2)の転送電極は、読み出しゲート部13のゲート電極を兼ねている。このことから、3相の垂直転送クロックφV1〜φV3のうち、2相目の垂直転送クロックφV2が低レベル(以下、“L”レベルと称す)、中間レベル(以下、“M”レベルと称す)および高レベル(以下、“H”レベルと称す)の3値をとるように設定されており、その3値目の“H”レベルのパルスが読み出しゲート部13に印加される読み出しパルスXSGとなる。
Here, in the vertical CCD 14, the transfer electrode of the second layer (φV 2) also serves as the gate electrode of the
撮像エリア11の図面上の下側には、水平CCD15が配されている。この水平CCD15には、複数本の垂直CCD14から1ラインに相当する信号電荷が順次転送される。水平CCD15は、例えば2層電極2相(φH1,φH2)駆動の構成となっており、複数本の垂直CCD14から移された1ライン分の信号電荷を、水平ブランキング期間後に水平走査期間において順次水平方向に転送する。
A
水平CCD15の転送先の端部には、例えばフローティング・ディフュージョン・アンプ構成の電荷電圧変換部16が設けられている。この電荷電圧変換部16は、水平CCD15によって水平転送されてきた信号電荷を順次電圧信号に変換して出力する。この電圧信号は、被写体からの光の入射量に応じたCCD出力OUTとして導出される。
以上により、CCD固体撮像素子10が構成されている。
At the end of the transfer destination of the
The CCD solid-
このように構成されたCCD固体撮像素子10を駆動するための垂直転送クロックφV1〜φV3、水平転送クロックφH1,φH2を含む各種のタイミング信号は、タイミング発生回路20で生成される。
タイミング発生回路20は、各種のタイミング信号を生成するTG(Timing Generator)部21に加えて、原発振器22、分周器23およびセレクタ24を有しているものである。
Various timing signals including vertical transfer clocks φV1 to φV3 and horizontal transfer clocks φH1 and φH2 for driving the CCD solid-
The
TG部21は、外部から与えられるモード信号に応じて、全画素の信号電荷を同一時刻に独立に読み出す全画素読み出しモードと、垂直方向の一部の画素列のみから信号電荷を読み出す間引き読み出しモードをとり得る構成となっている。そして、2相目の垂直転送クロックφV2については、この2つのモードに対応するために2系統のクロック(φV2,φV2′)を発生する。
The
原発振器22は、所定周波数の基準パルスを発振する。分周器23は、原発振器22が発振した基準パルスを1/m(ただし、mは自然数)に分周する。セレクタ24は、原発振器22による基準パルスと、分周器23が分周した後のパルス信号とのいずれか一方を、TG部21に与えるための切り替えを行う。この切り替えは、動作モード、すなわち全画素読み出しモードと間引き読み出しモードとの2つのモードに応じて行われる。
The original oscillator 22 oscillates a reference pulse having a predetermined frequency. The frequency divider 23 divides the reference pulse oscillated by the original oscillator 22 into 1 / m (where m is a natural number). The selector 24 performs switching for supplying either the reference pulse from the original oscillator 22 or the pulse signal after frequency division by the frequency divider 23 to the
図2は、単位画素の具体的な構成の一例を示す平面パターン図であり、図3にそのX−X′矢視断面を示す。先ず、垂直CCD14は、N型基板31上にP型ウェル32を介して形成されたN型不純物からなる転送チャネル33と、この転送チャネル33の上方にその転送方向に繰り返して配列された3相の転送電極34-1〜34-3とから構成されている。これら転送電極34-1〜34-3において、1相目の転送電極34-1は1層目のポリシリコン(図中、一点鎖線で示す)によって形成され、2相目の転送電極34-2は2層目のポリシリコン(図中、二点鎖線で示す)によって形成され、3相目の転送電極34-3は3層目のポリシリコン(図中、破線で示す)によって形成されている。
FIG. 2 is a plan pattern diagram showing an example of a specific configuration of the unit pixel, and FIG. 3 shows a cross section taken along the line XX ′. First, the vertical CCD 14 includes a
図4は、垂直CCD14における転送電極34-1〜34-3の配線パターン図である。本配線系においては、間引き読み出し駆動を可能にするために、2相目の垂直転送クロックφV2の配線に工夫が凝らされている。具体的には、先述したように、2相目の垂直転送クロックとして2系統の垂直転送クロックφV2,φV2′が用意され、さらに垂直転送クロックφV1,φV2,φV2′,φV3を伝送するために計4本のバスライン41〜44が配線されている。なお、図5に、ラインシフト期間における垂直転送クロックφV1,φV2,φV2′,φV3の位相関係を示す。
FIG. 4 is a wiring pattern diagram of the transfer electrodes 34-1 to 34-3 in the vertical CCD 14. In the present wiring system, in order to enable thinning-out reading driving, the device of the second-phase vertical transfer clock φV2 is devised. Specifically, as described above, two vertical transfer clocks φV2 and φV2 ′ are prepared as the vertical transfer clocks for the second phase, and further, in order to transmit the vertical transfer clocks φV1, φV2, φV2 ′, and φV3. Four
そして、垂直転送クロックφV1,φV3を伝送するバスライン41,44には、全画素の1相目の転送電極34-1,34-3が接続されている。また、垂直転送クロックφV2を伝送するバスライン42には、前後する3画素を単位Aとしてこれら画素の2相目の転送電極34-2が4画素おきに接続され、垂直転送クロックφV2′を伝送するバスライン43には、バスライン42に接続された画素以外の4画素を単位Bとしてこれら画素の2相目の転送電極34-3が3画素おきに接続されている。
The first-phase transfer electrodes 34-1 and 34-3 of all the pixels are connected to the
垂直転送クロックφV2,φV2′は、先述したように、その3値目の“H”レベルのパルスがセンサ部12から信号電荷を読み出すときに読み出しゲート部13のゲート電極に印加される読み出しパルスXSGとなる。そして、全画素読み出しモードの際には、垂直転送クロックφV2,φV2′の双方に読み出しパルスXSGが立つのに対し、間引き読み出しモードの際には、垂直転送クロックφV2のみに読み出しパルスXSGが立つ。
As described above, the vertical transfer clocks φV 2 and φV 2 ′ are read pulses XSG applied to the gate electrode of the read
すなわち、全画素読み出しモードでは、垂直転送クロックφV2,φV2′の双方に読み出しパルスXSGが立つことで、全画素から信号電荷が読み出されることになる。一方、間引き読み出しモードでは、垂直転送クロックφV2のみに読み出しパルスXSGが立つことで、3ラインを単位として4ラインおきに信号電荷が読み出されることとなる。換言すれば、4ラインを単位として3ラインおきに信号電荷の読み出しが間引かれることになる。 That is, in the all-pixel readout mode, the signal charge is read from all the pixels by setting the readout pulse XSG on both the vertical transfer clocks φV2 and φV2 ′. On the other hand, in the thinning-out reading mode, the signal charge is read every four lines in units of three lines by setting the reading pulse XSG only at the vertical transfer clock φV2. In other words, the readout of the signal charge is thinned out every 3 lines with 4 lines as a unit.
なお、本例では、一例として、カラー方式CCD固体撮像素子において、色フィルタのカラーコーディングに対応して、3ラインを単位として4ラインおきに間引き読み出しを行う場合を例にとって示したが、これに限定されるものではなく、4ラインを単位として2ラインおき、あるいは2ラインを単位として1ラインおきなど、図4の垂直転送クロックφV2,φV2′の配線パターンを変更するのみで、任意の間引き読み出しの設定が可能である。 In this example, as an example, in the color CCD solid-state image pickup device, the case where thinning readout is performed every 4 lines in units of 3 lines corresponding to the color coding of the color filter is shown as an example. The present invention is not limited, and arbitrary thinning-out reading can be performed only by changing the wiring pattern of the vertical transfer clocks φV2 and φV2 ′ in FIG. 4 such as every two lines in units of four lines or every other line in units of two lines. Can be set.
ところで、タイミング発生回路20は、外部から与えられるモード信号に応じて全画素読み出しモードと間引き読み出しモードをとり得る構成のTG部21に加えて、原発振器22、分周器23およびセレクタ24を有している。これにより、このタイミング発生回路20では、TG部21に対し、原発振器22による基準パルスをそのまま与えるか、この基準パルスを1/mに分周して与えるかが、セレクタ24によって切り替えられるようになっている。この切り替えは、TG部21と同様に、外部から与えられるモード信号に応じて行われる。
Incidentally, the
詳しくは、全画素読み出しモード時にはTG部21に基準パルスをそのまま与え、間引き読み出しモード時にはTG部21に1/m分周後のパルス信号を与えるように、セレクタ24が切り替えを行う。
このとき、TG部21は、与えられた基準パルスまたは1/m分周後のパルス信号を基に、CCD固体撮像素子10を駆動するための垂直転送クロックφV1〜φV3、水平転送クロックφH1,φH2を含む各種のタイミング信号を生成する。そのため、間引き読み出しモード時に生成されるタイミング信号は、全画素読み出しモード時に生成されるタイミング信号に対して、その周波数が1/mとなる。つまり、間引き読み出しモード時には、CCD固体撮像素子10に供給される駆動周波数が、全画素読み出しモード時の1/mとなる。
Specifically, the selector 24 performs switching so that the reference pulse is directly applied to the
At this time, the
駆動周波数が1/mになると、その駆動周波数が供給されるCCD固体撮像素子10においては、フレームレートが1/mに低下してしまう。
ところが、このとき、CCD固体撮像素子10では、間引き読み出しモードで動作している。すなわち、n(ただし、nは自然数)個の画素のうち、1個のみを読み出す1/n間引き読み出しを行うことで、全画素読み出しモード時に比べてフレームレートをn倍にすることが可能になる。
When the drive frequency becomes 1 / m, the frame rate is reduced to 1 / m in the CCD solid-
However, at this time, the CCD solid-
したがって、駆動周波数が1/mになっても、1/n間引き読み出しを行うことによって、フレームレートがn/mになる。ここで、n=mであれば、全画素読み出しモード時とのフレームレートの変化がなくなる。
しかも、駆動周波数が1/mになることによって、その駆動周波数が供給されるCCD固体撮像素子10では、消費電力の低減が実現される。
Therefore, even if the driving frequency becomes 1 / m, the frame rate becomes n / m by performing 1 / n thinning readout. Here, if n = m, there is no change in the frame rate from that in the all-pixel readout mode.
In addition, when the driving frequency is 1 / m, the CCD solid-
以上のように、本実施形態のCCD固体撮像装置およびその駆動方法では、動作モードに応じてCCD固体撮像素子10へ供給する駆動周波数を可変させるようになっている。これにより、間引き読み出しモード時の駆動周波数を全画素読み出しモード時の1/mにするといったことが可能になり、フレームレートの低下を防ぎつつ、CCD固体撮像素子10の消費電力を低減できるようになる。つまり、CCD固体撮像素子10から出力される画面数等に影響を及ぼすことなく、消費電力を低減することが可能になる。
As described above, in the CCD solid-state imaging device and the driving method thereof according to the present embodiment, the driving frequency supplied to the CCD solid-
また、本実施形態のCCD固体撮像装置では、タイミング発生回路20に設けられた原発振器22、分周器23およびセレクタ24によって、駆動周波数を可変させるようになっている。よって、TG部21に、原発振器22、分周器23およびセレクタ24を加えるだけで駆動周波数の可変が可能になり、先述した消費電力の低減を容易に実現することができるようになる。また、TG部21は、外部から与えられるモード信号に応じて全画素読み出しモードと間引き読み出しモードをとり得る構成のものであれば、通常のものがそのまま使用できるので、タイミング発生回路20の設計が容易になる。
In the CCD solid-state imaging device of this embodiment, the driving frequency is varied by the original oscillator 22, the frequency divider 23 and the selector 24 provided in the
次に、以上のようなCCD固体撮像装置を、撮像デバイスとして用いたディジタル記録の電子スチルカメラについて説明する。図6は、本発明に係わる電子スチルカメラの一例の概略構成図である。 Next, a digital recording electronic still camera using the above CCD solid-state imaging device as an imaging device will be described. FIG. 6 is a schematic configuration diagram of an example of an electronic still camera according to the present invention.
この電子スチルカメラは、図6に示すように、CCD固体撮像素子10およびタイミング発生回路20の他に、光学レンズ101、サンプルホールド(S/H)回路102、A/D変換器103、カメラ信号処理回路104、データスイッチャ105、変換回路106、液晶ディスプレイ(Liquid Crystal Display;以下、LCDと略す)107、エンコーダ/デコーダ108、DRAM(DynamicRandom Access Memory)109、メモリコントロール110およびフラッシュメモリ111を備えている。
As shown in FIG. 6, the electronic still camera includes an optical lens 101, a sample hold (S / H)
そして、光学レンズ101が被写体の光学像を2次元の画像としてCCD固体撮像素子10に結像させると、S/H回路102、A/D変換器103およびカメラ信号処理回路104が順に、CCD固体撮像素子10から得られる電圧信号に対して、それぞれ必要に応じた処理を行う。そして、データスイッチャ105は、ユーザのキー操作等に基づいて発生したモード切り替え信号(CAM,Rec,Play)に従って、カメラ信号処理回路104で処理された信号、例えば輝度データと色差データが多重化されたコンポーネント信号(Y,Cr,Y,Y,Cb,Y))の送出先を切り替える。
When the optical lens 101 forms an optical image of the subject on the CCD solid-
データスイッチャ105での切り替えによって、コンポーネント信号が変換回路106へ送出された場合に、変換回路106では、そのコンポーネント信号を三原色信号(R,G,B)に変換してLCD107に送出し、このLCD107で可視画像として表示させる。
また、データスイッチャ105での切り替えによって、コンポーネント信号が記録再生データバス112を介してエンコーダ/デコーダ108へ送出された場合には、このエンコーダ/デコーダ108において、JPEG(Joint Photographic Experts Group)、すなわち適応DCT(Discrete Cosine Transform)の符号化によるコンポーネント信号のデータ圧縮が行われる。ただし、JPEG以外の方式の高能率符号化を使用してもよい。
When a component signal is sent to the
Further, when a component signal is sent to the encoder /
このJPEGにおけるブロック化処理等のために、DRAM109が設けられている。DRAM109は、メモリコントローラ110から供給されるアドレス信号、制御信号によってその動作が制御される。
エンコーダ/デコーダ108がJPEGによるデータ圧縮を行うと、圧縮後のデータが撮影データとしてフラッシュメモリ111内に保存される。フラッシュメモリ111は、電源を切っても記憶内容が保持され、メモリ全体あるいは分割した領域毎に電気的に一括して消去、再書き込みが可能な半導体メモリである。ただし、不揮発性メモリであれば、フラッシュメモリ111以外のものであってもよい。
A
When the encoder /
つまり、本実施形態における電子スチルカメラは、被写体の光学像を2次元の画像として結像させる光学レンズ101と、結像された画像に対する光電変換を行う固体撮像装置と、その光電変換によって得られた電気信号を撮影データとして保存するフラッシュメモリ111と、このフラッシュメモリ111に撮影データを保存するにあたって、被写体の構図を確認するために、光電変換によって得られた電気信号を可視画像化して表示するLCD107とを具備しているものである。
That is, the electronic still camera in the present embodiment is obtained by the optical lens 101 that forms an optical image of a subject as a two-dimensional image, the solid-state imaging device that performs photoelectric conversion on the formed image, and the photoelectric conversion. The
ここで、このように構成された電子スチルカメラにおいて、被写体の撮影を行う場合におけるシーケンス動作について、図7を参照しながら説明する。
被写体の撮影を行う場合には、電子スチルカメラは、先ずユーザに、LCD107の表示画面に基づいて、被写体の構図を確認(モニタリング)させる。
Here, in the electronic still camera configured as described above, a sequence operation when photographing a subject will be described with reference to FIG.
When photographing a subject, the electronic still camera first allows the user to confirm (monitor) the composition of the subject based on the display screen of the
このとき、LCD107における表示画面は、モニタリング、すなわち画角の確認用であるため、画質が多少悪化しても問題が生じることはない。ところが、その動きについては、滑らかであり、かつ、自然であることが要求される。
また、通常、被写体を撮影するシーケンス動作の中で、このモニタリングに費やす時間が最も長くなる。
At this time, since the display screen on the
In addition, normally, the time spent for this monitoring is the longest in the sequence operation for photographing the subject.
そこで、この電子スチルカメラでは、図7(A)に示すように、モニタリング時における駆動モードをaモードとする。aモードとは、図7(B)に示すように、CCD固体撮像素子10へ供給する駆動周波数を1/m分周後のものとするとともに、1/n間引き読み出しモードで信号電荷の読み出しを行うことにより、結果としてフレームレートが下がらない(n/mになる)ようにするモードである。
これにより、モニタリング時には、LCD107における表示画面の動きが、滑らかでなかったり不自然になってしまうことがなく、しかもCCD固体撮像素子10の消費電力を低減できるようになる。
Therefore, in this electronic still camera, as shown in FIG. 7A, the driving mode at the time of monitoring is set to the a mode. In the a mode, as shown in FIG. 7B, the drive frequency supplied to the CCD solid-
Thereby, at the time of monitoring, the movement of the display screen on the
モニタリングの結果、被写体の構図を確認が終了すると、続いて電子スチルカメラは、図7(A)に示すように、ユーザにシャッタを半押しにさせて、光学検波を行う。光学検波は、オートフォーカス(AF;Automatic Focussing)、オートエクスポージャ(AE;Auto Exposure)、オートホワイトバランス(AWB;Auto White Balance)、手振れ検出などの機能を実現するために行う。この場合、CCD固体撮像素子10から一瞬にして何フレーム分もの信号を得ることが必要になる。
When the confirmation of the composition of the subject is completed as a result of the monitoring, the electronic still camera subsequently performs optical detection by causing the user to half-press the shutter, as shown in FIG. The optical detection is performed in order to realize functions such as auto focus (AF), auto exposure (AE), auto white balance (AWB), and camera shake detection. In this case, it is necessary to obtain signals for several frames from the CCD solid-
したがって、この電子スチルカメラでは、光学検波時の駆動モードをbモードとする。bモードとは、図7(B)に示すように、CCD固体撮像素子10へ供給する駆動周波数を分周することなく、しかも1/n間引き読み出しモードで信号電荷の読み出しを行うことにより、結果としてフレームレートが上げる(n倍にする)モードである。
これにより、光学検波時には、AF、AE、AWB、手振れ検出などに必要な信号が、確実かつ迅速に得られようになる。なお、このときに得られる信号は、AF、AE、AWB、手振れ検出などのために用いられるものなので、その画質については問わない。
Therefore, in this electronic still camera, the driving mode at the time of optical detection is set to b mode. As shown in FIG. 7B, the b mode is a result obtained by reading the signal charge in the 1 / n decimation readout mode without dividing the drive frequency supplied to the CCD solid-
Thereby, at the time of optical detection, signals necessary for AF, AE, AWB, camera shake detection, etc. can be obtained reliably and quickly. Note that the signal obtained at this time is used for AF, AE, AWB, camera shake detection, and the like, so the image quality is not limited.
光学検波が完了すると、次いで電子スチルカメラは、図7(A)に示すように、ユーザにシャッタを全押しにさせて、記録画像の読み出しを行って、フラッシュメモリ111に撮影データを保存する。ただし、このときには、最も良い画質が必要とされる。したがって、ここでは、駆動モードをcモードとする。cモードでは、図7(B)に示すように、全画素読み出しモード(通常モード)で信号電荷の読み出しを行う。また、暗電流やスミア等の影響を防ぐために、駆動周波数の分周も行わない。
そして、撮影データの保存が完了すると、この電子スチルカメラは、再びモニタリング状態となる。
When the optical detection is completed, the electronic still camera then causes the user to fully press the shutter as shown in FIG. However, the best image quality is required at this time. Therefore, here, the drive mode is the c mode. In the c mode, as shown in FIG. 7B, signal charges are read in the all-pixel reading mode (normal mode). Further, in order to prevent the influence of dark current, smear, etc., the drive frequency is not divided.
When the storage of the shooting data is completed, the electronic still camera enters the monitoring state again.
ただし、この電子スチルカメラでは、モニタリング時にaモード、光学検波時にbモード、データ保存時にcモードで動作するといったことが予め設定されており、その設定とシャッタの状態に基づいて、図示しないCPU(Central Processing Unit)が、タイミング発生回路20を始めとした各部に動作指示を与えている。
However, the electronic still camera is preset to operate in the a mode during monitoring, the b mode during optical detection, and the c mode during data storage. Based on the setting and the shutter state, a CPU (not shown) Central Processing Unit) gives an operation instruction to each part including the
以上のように、本実施形態の電子スチルカメラでは、被写体の構図を確認するためのモニタリング時に、1/n間引き読み出しモードで動作するとともに、CCD固体撮像素子10へ供給する駆動周波数を1/m分周後のものとするようになっている。これにより、フレームレートの低下を防ぎつつ、CCD固体撮像素子10の消費電力を低減できるようになる。つまり、モニタリング時における表示画面上での動画としての認識度と消費電力の低減といった相反する事柄を両立して実現できる。特に、被写体を撮影するシーケンス動作の中で、このモニタリングに費やす時間が最も長いため、このモニタリング時における消費電力を低減することは、非常に有効である。
As described above, the electronic still camera according to the present embodiment operates in the 1 / n decimation readout mode at the time of monitoring for confirming the composition of the subject, and the driving frequency supplied to the CCD solid-
さらに、この場合に、n=mであれば、フレームレートに変化がなくなるので、S/H回路102、A/D変換器103、あるいはカメラ信号処理回路104における信号処理が容易になる。
Further, in this case, if n = m, there is no change in the frame rate, so that signal processing in the S /
また、本実施形態の電子スチルカメラでは、撮影データの保存時に、全画素読み出しモードで動作するとともに、駆動周波数の分周していないものとするようになっている。これにより、保存される撮影データの画質が低下してしまうことがない。
つまり、この電子スチルカメラでは、モニタリング時と撮影データの保存時とで、動作モードおよび駆動周波数を切り替えることで、LCD107に表示される画像の動きや撮影後の画質に影響を及ぼすことなく、CCD固体撮像素子10、すなわち電子スチルカメラの消費電力を低減することができるようになる。
Further, the electronic still camera of the present embodiment is configured to operate in the all-pixel reading mode and not to divide the driving frequency when shooting data is stored. As a result, the image quality of the stored shooting data does not deteriorate.
That is, in this electronic still camera, by switching the operation mode and the driving frequency between monitoring and saving of shooting data, the CCD does not affect the movement of the image displayed on the
なお、本実施形態では、本発明を、静止画を撮影する電子スチルカメラに適用した場合について説明したが、本発明はこれに限定されるものではない。例えば、動画を撮影するビデオカメラであっても本発明を適用することは可能であり、このビデオカメラに搭載されている固体撮像素子の駆動周波数を動作モードに応じて可変させれば、上述した場合と同様の効果を得ることができる。 In the present embodiment, the case where the present invention is applied to an electronic still camera that captures still images has been described. However, the present invention is not limited to this. For example, the present invention can be applied even to a video camera that shoots a moving image. If the driving frequency of a solid-state imaging device mounted on the video camera is varied according to the operation mode, the above-described case is possible. The same effect as the case can be obtained.
10…CCD固体撮像素子、11…撮像エリア、12…センサ部、14…垂直CCD、15…水平CCD、16…電荷電圧変換部、20…タイミング発生回路、22…原発振器、23…分周器、24…セレクタ、101…光学レンズ、107…LCD、111…フラッシュメモリ
DESCRIPTION OF
Claims (8)
前記固体撮像素子の駆動周波数を動作モードに応じて可変させる周波数可変手段とを備え、
前記周波数可変手段が駆動周波数を1/m(mは自然数)に低下させても、前記固体撮像素子がn(nは自然数)個の画素のうち1個のみを読み出す1/n間引き読み出しを行うことによって、フレームレートがn/mになるように構成されているとともに、n=mに設定されている
ことを特徴とする固体撮像装置。 A solid-state imaging device capable of selectively taking an all-pixel readout mode of independently reading out signal charges of all pixels at the same time and a thinning-out readout mode of reading out signal charges from only a part of the pixel columns in the vertical direction;
Frequency varying means for varying the drive frequency of the solid-state imaging device according to the operation mode,
Even if the frequency variable means lowers the drive frequency to 1 / m (m is a natural number), the solid-state imaging device performs 1 / n decimation readout that reads out only one of n (n is a natural number) pixels. Accordingly, the solid-state imaging device is configured such that the frame rate is set to n / m and n = m is set.
ことを特徴とする請求項1記載の固体撮像装置。 The solid-state imaging device according to claim 1, wherein the frequency varying unit makes a driving frequency in the thinning readout mode lower than a driving frequency in the all-pixel readout mode.
所定周波数の基準パルスを発振する発振器と、
前記発振器が発振した基準パルスを分周する分周器と、
前記発振器が発振した基準パルスと、前記分周器が分周した後のパルス信号とのいずれかを、動作モードに応じて前記固体撮像素子に供給するセレクタと
からなることを特徴とする請求項2記載の固体撮像装置。 The frequency variable means includes
An oscillator that oscillates a reference pulse of a predetermined frequency;
A frequency divider for dividing a reference pulse generated by the oscillator;
A selector that supplies either a reference pulse oscillated by the oscillator or a pulse signal after frequency division by the frequency divider to the solid-state imaging device according to an operation mode. 2. The solid-state imaging device according to 2.
前記固体撮像素子の駆動周波数を動作モードに応じて可変させる周波数可変手段とを備え、
前記周波数可変手段が駆動周波数を1/m(mは自然数)に低下させても、前記固体撮像素子がn(nは自然数)個の画素のうち1個のみを読み出す1/n間引き読み出しを行うことによって、フレームレートがn/mになるように構成されているとともに、n=mに設定されている
ことを特徴とするカメラ。 A solid-state imaging device capable of selectively taking an all-pixel readout mode of independently reading out signal charges of all pixels at the same time and a thinning-out readout mode of reading out signal charges from only a part of the pixel columns in the vertical direction;
Frequency varying means for varying the drive frequency of the solid-state imaging device according to the operation mode,
Even if the frequency variable means lowers the drive frequency to 1 / m (m is a natural number), the solid-state imaging device performs 1 / n decimation readout that reads out only one of n (n is a natural number) pixels. Accordingly, the frame rate is configured to be n / m, and n = m is set.
該光学レンズによって結像された画像に対する光電変換を行う固体撮像装置と、
該固体撮像装置での光電変換によって得られた電気信号を撮影データとして保存する記憶手段と、
該記憶手段に撮影データを保存するにあたって、前記固体撮像装置での光電変換によって得られた電気信号を可視画像化して表示する表示手段とを具備し、
前記固体撮像装置が、前記固体撮像素子および前記周波数可変手段を備える
ことを特徴とする請求項4記載のカメラ。 An optical lens that forms an optical image of a subject as a two-dimensional image;
A solid-state imaging device that performs photoelectric conversion on an image formed by the optical lens;
Storage means for storing electrical signals obtained by photoelectric conversion in the solid-state imaging device as photographing data;
A display unit that displays the electrical signal obtained by photoelectric conversion in the solid-state imaging device in the form of a visible image when storing the photographing data in the storage unit;
The camera according to claim 4, wherein the solid-state imaging device includes the solid-state imaging device and the frequency variable unit.
前記周波数可変手段は、前記間引き読み出しモード時における駆動周波数を、前記全画素読み出しモード時における駆動周波数よりも低くする
ことを特徴とする請求項5記載のカメラ。 In the solid-state imaging device, the thinning readout mode is set at the time of display by the display means, and the all-pixel readout mode is set at the time of taking an electric signal into the storage means,
The camera according to claim 5, wherein the frequency varying unit makes the drive frequency in the thinning readout mode lower than the drive frequency in the all-pixel readout mode.
前記固体撮像素子の駆動周波数を動作モードに応じて可変させ、
当該駆動周波数を1/m(mは自然数)に低下させても、前記固体撮像素子がn(nは自然数)個の画素のうち1個のみを読み出す1/n間引き読み出しを行うことによって、フレームレートがn/mになるようにするとともに、n=mとなるように設定する
ことを特徴とする固体撮像装置の駆動方法。 Solid-state imaging device having a solid-state imaging device capable of selectively taking all-pixel readout mode in which signal charges of all pixels are independently read out at the same time and thinning-out readout mode in which signal charges are read out only from a partial pixel column in the vertical direction In the driving method of
The drive frequency of the solid-state image sensor is varied according to the operation mode,
Even if the driving frequency is reduced to 1 / m (m is a natural number), the solid-state imaging device performs 1 / n thinning readout for reading out only one of n (n is a natural number) pixels, thereby A method for driving a solid-state imaging device, wherein the rate is set to n / m and n = m is set.
ことを特徴とする請求項7記載の固体撮像装置の駆動方法。 8. The solid state according to claim 7, wherein when reading signal charges from the solid-state image sensor in the thinning readout mode, a drive frequency of the solid-state image sensor is made lower than a drive frequency in the all-pixel readout mode. Driving method of imaging apparatus.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007219858A JP4466698B2 (en) | 2007-08-27 | 2007-08-27 | Solid-state imaging device, camera using the same, and driving method of solid-state imaging device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007219858A JP4466698B2 (en) | 2007-08-27 | 2007-08-27 | Solid-state imaging device, camera using the same, and driving method of solid-state imaging device |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP11213397A Division JP4161384B2 (en) | 1997-04-30 | 1997-04-30 | Solid-state imaging device, camera using the same, and driving method of solid-state imaging device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007336597A JP2007336597A (en) | 2007-12-27 |
JP4466698B2 true JP4466698B2 (en) | 2010-05-26 |
Family
ID=38935537
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007219858A Expired - Lifetime JP4466698B2 (en) | 2007-08-27 | 2007-08-27 | Solid-state imaging device, camera using the same, and driving method of solid-state imaging device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4466698B2 (en) |
-
2007
- 2007-08-27 JP JP2007219858A patent/JP4466698B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JP2007336597A (en) | 2007-12-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4161384B2 (en) | Solid-state imaging device, camera using the same, and driving method of solid-state imaging device | |
JP3854826B2 (en) | Imaging device | |
JPH1051696A (en) | Solid-state image pickup device and its drive method | |
JP2000307961A (en) | Solid-state image pickup device, its driving method and camera system | |
KR100448302B1 (en) | Solid state image pickup device of an interline system | |
JP4782532B2 (en) | Solid-state imaging device and solid-state imaging device drive control method | |
JP2006014117A (en) | Physical information acquisition method, physical information acquisition apparatus and semiconductor device for detecting physical quantity distribution | |
US20080055437A1 (en) | Solid-state imaging device | |
JP4738667B2 (en) | Imaging device | |
JP4466698B2 (en) | Solid-state imaging device, camera using the same, and driving method of solid-state imaging device | |
JP2006041867A (en) | Image processing method and image processor, imaging apparatus, and timing controller | |
JP4095645B2 (en) | Imaging device | |
JP2005020276A (en) | Solid-state image pickup element and image pickup device | |
JP2006262086A (en) | Method for driving image pickup device | |
JP4227203B2 (en) | Imaging device | |
JP2005303653A (en) | Image pickup device | |
JP2001078208A (en) | Solid-state image pickup device and signal read method | |
JP2008306616A (en) | Imaging device | |
JP4296025B2 (en) | Solid-state imaging device and driving method thereof | |
JP2008118446A (en) | Imaging element and imaging apparatus | |
JP2004112304A (en) | Solid-state image pickup device, its drive method, and image pickup system | |
JP2001078209A (en) | Solid-state image pickup device and signal read method | |
JP2003009009A (en) | Solid-state image pickup device and driving method | |
JP2006174024A (en) | Driving method of solid state imaging device and solid state imaging apparatus using it | |
JP2007013776A (en) | Photographic equipment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20091007 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20091019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100202 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100215 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140305 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |