JP4441703B2 - Method and apparatus for optimizing noise and dynamic range of an image sensor - Google Patents
Method and apparatus for optimizing noise and dynamic range of an image sensor Download PDFInfo
- Publication number
- JP4441703B2 JP4441703B2 JP2004129330A JP2004129330A JP4441703B2 JP 4441703 B2 JP4441703 B2 JP 4441703B2 JP 2004129330 A JP2004129330 A JP 2004129330A JP 2004129330 A JP2004129330 A JP 2004129330A JP 4441703 B2 JP4441703 B2 JP 4441703B2
- Authority
- JP
- Japan
- Prior art keywords
- pixel array
- voltage
- exposure level
- level
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 17
- 230000004044 response Effects 0.000 claims description 6
- 230000000295 complement effect Effects 0.000 claims description 5
- 229910044991 metal oxide Inorganic materials 0.000 claims description 5
- 150000004706 metal oxides Chemical class 0.000 claims description 5
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 claims description 2
- 229910052710 silicon Inorganic materials 0.000 claims description 2
- 239000010703 silicon Substances 0.000 claims description 2
- QPRMGHKASRLPJP-UHFFFAOYSA-N 12-(5-hydroxy-6-methylpiperidin-2-yl)dodecan-2-one Chemical compound CC1NC(CCCCCCCCCCC(C)=O)CCC1O QPRMGHKASRLPJP-UHFFFAOYSA-N 0.000 claims 3
- OGPQOSAKRHKIHW-UHFFFAOYSA-N Cassin Natural products CC(CCCCCCCCCC1CCC(O)C(C)N1)C(=O)C OGPQOSAKRHKIHW-UHFFFAOYSA-N 0.000 claims 3
- 230000006870 function Effects 0.000 description 8
- 238000013139 quantization Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 230000003321 amplification Effects 0.000 description 3
- 238000003199 nucleic acid amplification method Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 239000000872 buffer Substances 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/709—Circuitry for control of the power supply
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N3/00—Scanning details of television systems; Combination thereof with generation of supply voltages
- H04N3/10—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical
- H04N3/14—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices
- H04N3/15—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices for picture signal generation
- H04N3/155—Control of the image-sensor operation, e.g. image processing within the image-sensor
- H04N3/1568—Control of the image-sensor operation, e.g. image processing within the image-sensor for disturbance correction or prevention within the image-sensor, e.g. biasing, blooming, smearing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
- Image Input (AREA)
- Facsimile Heads (AREA)
Description
本発明は、イメージセンサの分野に関し、より詳しくは、イメージセンサのノイズおよびダイナミックレンジを最適化することに関する。 The present invention relates to the field of image sensors, and more particularly to optimizing noise and dynamic range of image sensors.
イメージセンサは、ピクセルアレイを使用して、イメージセンサが露光された時にイメージを捕捉する。図1は、従来技術によるピクセルアレイ103のブロック図を示す。ピクセルアレイ103は、アレイ内の信号のためのドライバ、バッファおよびマルチプレクサなどの補助回路を備える。供給電圧(または電源電圧、または電源)105は、ピクセルアレイ103に電力を供給する。露光期間の開始時に、リセット信号107がアサートされ、ピクセルアレイ103内のいくつかまたは全部のピクセルがリセットされる。その結果、ピクセルは、一般に供給電圧105の関数であるリセット電圧に充電される。ピクセルアレイ103は入射光109に露光されるので、各ピクセルにおける電圧は低下する。
The image sensor uses a pixel array to capture an image when the image sensor is exposed. FIG. 1 shows a block diagram of a
露光期間の終わりに、各ピクセルの最終的な電圧が元のリセット電圧と比較される。こうした電圧の揺れは捕捉イメージを表し、ピクセルアレイ103の露光レベルに比例する。大きい電圧の揺れは高い露光レベルを示すが、これは、ピクセルアレイ103が明るい光に露光されたか、または露光期間が長かったことを意味する。逆に、小さい電圧の揺れは低い露光レベルを示すが、これは、ピクセルアレイ103が暗い光に露光されたか、または露光期間が短かったことを意味する。電圧の揺れは、ピクセルアレイ103からイメージ信号(または画像信号。以下同じ)111として読み取られる。
At the end of the exposure period, the final voltage of each pixel is compared to the original reset voltage. Such voltage swing represents a captured image and is proportional to the exposure level of the
より高い供給電圧(電源電圧)は、各ピクセルがより大きいリセット電圧を有し、その結果、電圧の揺れのレンジがより大きいため、ピクセルアレイのダイナミックレンジを増加させる。より大きいダイナミックレンジは、ピクセルアレイが、露光レベルが高い時に、より忠実なイメージを捕捉することを可能にする。しかし、ピクセルの一時的なノイズおよび暗電流ノイズ(以下、「ノイズ」または「ピクセルノイズ」と総称する)は、ピクセルアレイを相補型金属酸化シリコン(または相補型金属酸化物半導体:CMOS)技術で作る場合、供給電圧と共に増加することが分かっている。ノイズは、ピクセルアレイによって補足された画像を歪ませる。 A higher supply voltage (power supply voltage) increases the dynamic range of the pixel array because each pixel has a larger reset voltage, resulting in a larger voltage swing range. The larger dynamic range allows the pixel array to capture a more faithful image when the exposure level is high. However, pixel transient noise and dark current noise (hereinafter collectively referred to as “noise” or “pixel noise”) can cause pixel arrays to be in complementary metal oxide (or complementary metal oxide semiconductor: CMOS) technology. When making, it has been found to increase with supply voltage. Noise distorts the image captured by the pixel array.
本発明の好ましい実施態様により、イメージセンサのピクセルアレイの供給電圧(電源電圧)を最適化するための方法および装置について説明する。供給電圧は、イメージを捕捉する時に、ピクセルアレイの露光レベルに応答して変化させられる。供給電圧は、露光レベルが比較的高い場合に増加してリセット電圧を増加させ、ピクセルアレイのダイナミックレンジを拡張する。露光レベルが比較的低く、ピクセルアレイの全ダイナミックレンジが使用されるわけではない場合、供給電圧が減少されてリセット電圧を低くし、その結果、ノイズレベルを低下させ、画質に対するノイズの影響を減少させる。 In accordance with a preferred embodiment of the present invention, a method and apparatus for optimizing the supply voltage (power supply voltage) of a pixel array of an image sensor is described. Supply voltage, when capturing an image, Ru is allowed change in response to exposure level of a pixel array. The supply voltage increases when the exposure level is relatively high, increasing the reset voltage and extending the dynamic range of the pixel array. If the exposure level is relatively low and the full dynamic range of the pixel array is not used, the supply voltage is reduced to lower the reset voltage, thereby lowering the noise level and reducing the impact of noise on image quality Let
本発明の一実施態様によると、露光レベルは、信号がアナログ−ディジタル変換器(ADC)によりディジタル化される前に、ピクセルアレイからの信号を増幅するプログラム可能な利得増幅器(PGA)の利得をチェックすることにより決定される。利得制御ブロックは、ピクセルアレイからの信号レンジをADCの入力レンジに一致させて量子化誤差を最小化するようにPGAの利得を制御する。高いPGA利得は、ピクセルアレイからの比較的低い信号レベルを示し、低いPGA利得はピクセルアレイからの比較的高い信号レベルを示す。したがって、PGAの利得は、露光レベルのインジケータ(指標)である。 According to one embodiment of the present invention, the exposure level is the gain of a programmable gain amplifier (PGA) that amplifies the signal from the pixel array before the signal is digitized by an analog-to-digital converter (ADC). Determined by checking. The gain control block controls the gain of the PGA so that the signal range from the pixel array matches the input range of the ADC to minimize the quantization error. A high PGA gain indicates a relatively low signal level from the pixel array, and a low PGA gain indicates a relatively high signal level from the pixel array. Therefore, the gain of PGA is an exposure level indicator.
本発明の別の実施態様では、露光レベルは、ピクセルアレイからの平均信号値と閾値とを比較して決定される。平均信号値が閾値より高い場合、ピクセルアレイは高い露光レベルを有する。平均信号値が閾値より低い場合、ピクセルアレイは低い露光レベルを有する。代替的には、露光レベルを、ピクセルアレイからの中間信号値または最大信号値を閾値と比較して決定することができる。 In another embodiment of the invention, the exposure level is determined by comparing the average signal value from the pixel array with a threshold value. If the average signal value is higher than the threshold value, the pixel array has a high exposure level. If the average signal value is below the threshold, the pixel array has a low exposure level. Alternatively, the exposure level can be determined by comparing the intermediate or maximum signal value from the pixel array to a threshold value.
本発明の別の実施態様では、ピクセルアレイは、2つ以上の電源(または供給電圧)を有する。これら供給電圧のうちの1個または複数を、ピクセルアレイの露光レベルに応じて変化させて、ピクセルアレイのノイズレベルおよびダイナミックレンジを最適化する。 In another embodiment of the invention, the pixel array has more than one power supply (or supply voltage). One or more of these supply voltages are varied depending on the exposure level of the pixel array to optimize the noise level and dynamic range of the pixel array.
本発明のもう1つの実施態様では、ピクセルアレイを、リセット電圧がピクセルアレイに対する供給電圧の関数ではないように設計することができる。また、こうした構成では、リセット電圧を、ピクセルアレイの露光レベルに応じてノイズレベルを減少させるために、供給電圧に関係なく最適化することができる。 In another embodiment of the invention, the pixel array can be designed such that the reset voltage is not a function of the supply voltage to the pixel array. In such a configuration, the reset voltage can be optimized regardless of the supply voltage in order to reduce the noise level according to the exposure level of the pixel array.
本発明のさらに他の特徴及び利点、並びに本発明の好ましい実施態様の構成および動作について、添付の例示的な図面を参照して以下に詳細に説明する。図中、同じ参照符号は、同一のまたは機能的に類似する要素を示す。 Further features and advantages of the present invention, as well as the structure and operation of preferred embodiments of the present invention, are described in detail below with reference to the accompanying exemplary drawings. In the drawings, like reference numbers indicate identical or functionally similar elements.
ピクセルアレイが高い露光レベルを有する場合、ピクセルのノイズは、イメージ信号がピクセルのノイズフロアに比べて大きいので無視できる。信号対ノイズ比が大きいと、結果的に、高い露光レベル下で高い画質が得られる。しかし、ピクセルアレイの電圧の揺れは、低い露光レベル下では比較的小さくなる。信号対ノイズ比は、これらの条件では比較的低く、得られる画質は比較的悪い。したがって、ピクセルアレイに対する供給電圧を、露光レベルに応じて変化させて、ピクセルアレイのノイズレベルおよびダイナミックレンジを最適化する。 If the pixel array has a high exposure level, the pixel noise is negligible because the image signal is large compared to the pixel noise floor. A large signal-to-noise ratio results in high image quality at high exposure levels. However, the voltage swing of the pixel array, is relatively small under low exposure levels. The signal to noise ratio is relatively low under these conditions and the resulting image quality is relatively poor. Therefore, the supply voltage to the pixel array is changed according to the exposure level to optimize the noise level and dynamic range of the pixel array.
図2は、本発明にしたがって製作された、露光レベルに応じてピクセルアレイの供給電圧(電源)を最適化するためのシステム201のブロック図を示す。ピクセルアレイ203は、イメージ信号211により表されるイメージ(画像)を捕捉するために使用される。露光レベル決定器207は、イメージ信号211の露光レベルを決定し、電源調節器(供給電圧調整器)206にフィードバックするための露光レベルインジケータ209を生成する。電源調節器206は、電源205からの電圧を調節して、最適化された供給電圧(アレイVdd204)をピクセルアレイ203に提供する。アレイVdd204は、露光レベルインジケータ209により指示される露光レベルにおいてノイズレベルとダイナミックレンジとが最適に平衡するように選択される。
FIG. 2 shows a block diagram of a
たとえば、露光レベル決定器207が、ピクセルアレイ203が高い露光レベルを有することを指示する場合、電源調節器206はアレイVdd204を増加させる。これは、ピクセルアレイ203におけるより大きなダイナミックレンジを可能にする。露光レベル決定器207が、ピクセルアレイ203が低い露光レベルを有することを示す場合、電源調節器206はアレイVdd204を低下させる。アレイVdd204が低下しても、各ピクセルにおける電圧の揺れが比較的小さいため、低い露光レベルにおけるピクセルアレイ203のダイナミックレンジは損なわれない。アレイVdd204の低下は、ピクセルノイズの量も減少させ、その結果、信号対ノイズ比、および低い露光レベル下で捕捉されたイメージの画質を改善する。低い露光レベルと高い露光レベルとを区別する基準は、露光時間の長さ、ピクセルの感度、周囲光の強度、およびその他のシステム変数などの要因に応じてシステムごとに異なる。しかし、一般に、イメージ信号211が基準値より高い場合、ピクセルアレイ203は高い露光レベルを有する。イメージ信号211が基準値より低い場合、ピクセルアレイ203は低い露光レベルを有する。
For example, if the exposure level determiner 207 indicates that the
図3Aは、図2の露光レベル決定器207として可能な一実施例を示す。露光レベル決定器207に対する入力は、イメージ信号211である。イメージ信号211は、ピクセルアレイ203から読み取られ、必要な場合、プログラム可能な利得増幅器(PGA)301により増幅される。増幅が必要かどうかについては、以下でさらに説明する。次に、増幅されたイメージ信号302は、増幅されたイメージ信号302をディジタル形式(ディジタル化されたイメージ信号304)に変換するアナログ−ディジタル変換器(ADC)303により処理される。
FIG. 3A shows one possible implementation for the exposure level determiner 207 of FIG. An input to the
アナログ信号がディジタル化されると常に、追加のノイズをディジタル化信号に導入する量子化誤差が生じる。量子化ノイズが、ディジタル化されるアナログ信号上に存在するノイズと同程度か、またはこのノイズより大きい場合、量子化ノイズは全体の信号対ノイズ比を悪化させる。量子化ノイズの影響を最低限にするため、アナログ信号を、量子化ノイズが追加される前に、信号の振幅が最大化されるように増幅することができる(但し、ADCの入力レンジを超えないようにして)。その結果、追加された量子化ノイズが信号対ノイズ比に与える影響を最低限にする。したがって、PGA301は、ADC303のレンジにより良好に一致するように、弱いイメージ信号を増幅する。利得制御ブロック305は、ADC303からのディジタル化イメージ信号を分析して、増幅が必要かどうかを決定する。たとえば、ディジタル化イメージ信号304の平均レベルが目標値に合致しない場合、利得制御ブロック305は、PGA301の利得設定(値)306を相応に調節する。
Whenever an analog signal is digitized, there is a quantization error that introduces additional noise into the digitized signal. If the quantization noise is comparable to or greater than the noise present on the analog signal being digitized, the quantization noise degrades the overall signal to noise ratio. In order to minimize the effects of quantization noise, the analog signal can be amplified so that the amplitude of the signal is maximized before the quantization noise is added (but beyond the ADC input range). Not so). As a result, the influence of the added quantization noise on the signal-to-noise ratio is minimized. Therefore, the
したがって、PGA301の利得設定値306は、イメージ信号211の露光レベルのインジケータである。高い利得は、ADC303に対する入力のためにかなりの量イメージ信号211を増幅する必要があったことを示す。したがって、ピクセルアレイ203は低い露光レベルを有していたことになる。逆に、低い利得は、イメージ信号211の増幅が殆ど、またはまったく必要なかったことを指示し、ピクセルアレイ203が高い露光レベルを有していたことを指示する。露光レベル決定器207から出力される露光レベルインジケータ209は、PGA301の利得設定値306である。
Therefore, the
図3Bは、露光レベル決定器207の別の実施例を示す。イメージ信号211の平均値は、平均値計算機311により計算される。比較器307は、平均信号値を閾値309と比較する。平均信号値が閾値309より高い場合、ピクセルアレイは高い露光レベルを有する。平均ピクセルが閾値309より低い場合、ピクセルアレイは低い露光レベルを有する。代替的には、比較器209は、イメージ信号211からの中間信号値または最大信号値を閾値309と比較することができる。露光レベル決定器207から出力される露光レベルインジケータ209は、単なる比較器307の出力である。その他の方法を使用して、ピクセルアレイの露光レベルを決定することもできる。
FIG. 3B shows another embodiment of the
図4は、電圧制御ブロック401および電圧調整器(または、電圧レギュレータ。以下同じ)403を使用する供給電圧(電源)調節器206として可能な1実施例を示す。露光レベル決定器207をどのように実施するかに関係なく(つまり、図3A、3Bの実施例、または他の任意の実施例に関係なく)、露光レベルインジケータ209は、イメージ211が捕捉された露光レベルを表す。電圧制御ブロック401は、露光レベルインジケータ209に基づいて電圧基準405を生成する。電圧基準405の最適値は、ピクセルアレイ203のダイナミックレンジを犠牲にすることなくピクセルアレイ203のピクセルノイズを最小化する値である。これらの最適値を、事前にシステムのために決定して、電圧制御ブロック401内のルックアップメモリテーブル内に記憶することができる。
FIG. 4 illustrates one possible implementation of a supply voltage (power supply)
代替的には、露光レベルインジケータ209に基づいて、電圧基準405の最適値を計算するためのアルゴリズムを用いることができる。このアルゴリズムは、電圧制御ブロック401内のハードウェア回路またはソフトウェアとして実施することができる。典型的なアルゴリズムは、比較関数であろう。電圧制御ブロック401は、露光レベルインジケータ209を閾値と比較する比較器を備えることができる。露光レベルインジケータ209が閾値より大きい場合、電圧基準405は増加する。露光レベルインジケータ209が閾値より低い場合、電圧基準405は減少する。
Alternatively, an algorithm for calculating the optimum value of the
電圧調整器403は、最適電圧基準405に一致するようにアレイVdd204を調整する。電圧調整器403は、トランジスタ409のゲートを駆動する演算増幅器(オペアンプ)407を有する。オペアンプ407の負入力はトランジスタ409のドレインに接続され、トランジスタ409のソースは電源(供給電圧源)205に接続される。電圧調整器403は、当該技術分野において周知の回路であり、本明細書で示した実施例は、可能な多くの構成のうちの単なる一例にすぎない。
The
いくつかのイメージセンサでは、ピクセルアレイ用の補助回路(ドライバ、バッファ、マルチプレクサなど)は、1個または複数の別個の電源から電力を引き出すことができる。これらの電源の各々も、ピクセルアレイの露光レベルに応じてノイズレベルを減少させるように最適化され得る。図5は、複数の電源205A、205Bおよび205Cを有するピクセルアレイ203を示す。各電源は、露光レベルインジケータ209により指示される露光レベルに対して電源を最適化するために、電源調節器206A、206Bおよび206Cによりそれぞれ調節される。
In some image sensors, auxiliary circuitry for the pixel array (drivers, buffers, multiplexers, etc.) can draw power from one or more separate power sources. Each of these power supplies can also be optimized to reduce the noise level depending on the exposure level of the pixel array. FIG. 5 shows a
本発明のもう1つの実施態様では、ピクセルアレイを、リセット電圧が、ピクセルアレイに対する供給電圧(電源電圧)の関数ではないように設計することができる。しかし、ピクセルアレイのノイズレベルは、リセット電圧に依存し、ノイズはリセット電圧に応じて増加する。こうした構成では、リセット電圧を、供給電圧に関係なく、ノイズレベルを低下させるように最適化することもできる。たとえば、リセット電圧は、いくつかのイメージセンサではリセット信号208の関数である。電源調節器206に類似するリセット電圧調節器を使用して、ピクセルアレイの露光レベルに応答してリセット信号208を調節することができる。
In another embodiment of the invention, the pixel array can be designed such that the reset voltage is not a function of the supply voltage (power supply voltage) to the pixel array. However, the noise level of the pixel array depends on the reset voltage, and the noise increases with the reset voltage. In such a configuration, the reset voltage can also be optimized to reduce the noise level regardless of the supply voltage. For example, the reset voltage is a function of the
図6は、本発明による処理フローチャートを示す。先ず、ステップ601では、イメージがピクセルアレイに捕捉される。次に、ステップ603では、イメージが分析されて、その露光レベルが決定される。露光レベルが低い場合は、ピクセルアレイの供給電圧が下げられる。露光レベルが比較的高い場合は、供給電圧を上げることができる。調節後、次のイメージを捕捉することができ、処理は再び601から開始する。リセット電圧が供給電圧の関数ではない場合、供給電圧に関係なくリセット電圧も調節することができる。
FIG. 6 shows a process flowchart according to the present invention. First, in
以下に、本発明の種々の構成要件の組み合わせからなる例示的な実施態様を示す。
1.イメージ211を捕捉するためのピクセルアレイ203と、
前記ピクセルアレイの露光レベルを決定して、露光レベルインジケータ209を生成するための露光レベル決定器207と、
前記露光レベルインジケータに応じて前記ピクセルアレイに対する電源電圧205を調節するための電源調節器206
を備えるシステム。
2.前記露光レベル決定器207が、
前記ピクセルアレイ203からの信号211を増幅するためのプログラム可能な利得増幅器301と、
増幅された信号302を受信して、前記増幅された信号をディジタル化信号304に変換するためのアナログ−ディジタル変換器303と、
前記プログラム可能な利得増幅器の利得306を調節するための利得制御ブロック305とを備えることからなる、上項1に記載のシステム。
3.前記ピクセルアレイが相補型金属酸化シリコン(または相補形金属酸化物半導体:CMOS)技術により作製される、上項2に記載のシステム。
4.前記利得制御ブロック305が、ディジタル化信号304の平均レベルを決定し、前記ディジタル化信号の平均レベルが目標値に合致しない場合には、前記プログラム可能な利得増幅器301の利得306を調節することからなる、上項2に記載のシステム。
5.前記利得制御ブロック305が、
ディジタル化信号304の平均レベルが目標値未満の場合には、前記プログラム可能な利得増幅器301の利得306を増加させ、
前記ディジタル化信号の平均レベルが目標値を超える場合には、前記プログラム可能な利得増幅器の利得を減少させることからなる、上項4に記載のシステム。
6.前記利得制御ブロックが、前記ディジタル化信号の平均レベルを目標値と比較するための比較器を備える、上項5に記載のシステム。
7.前記露光レベル決定器207が、ピクセルアレイ値を閾値309と比較するための比較器307を備え、前記ピクセルアレイ値が、前記ピクセルアレイ203からの信号の平均値、中間値および最大値から選択されることからなる、上項1に記載のシステム。
8.前記電源調節器206が、
前記露光レベルインジケータ209が、前記ピクセルアレイ203の露光レベルが閾値未満であることを指示するときには、電源205の電圧を低下させ、
前記露光レベルインジケータが、前記ピクセルアレイの露光レベルが閾値を超えるこを指示するときには、電源の電圧を上昇させることからなる、上項1に記載のシステム。
9.前記電源調節器206が、
前記露光レベルインジケータ209に基づいて最適な電圧基準405を生成するための電圧制御ブロック401と、
前記最適な電圧基準に合致するように、前記電源205を調節するための電圧調整器403とを備えることからなる、上項1に記載のシステム。
10.前記電圧制御ブロック401が、前記最適な電圧基準405を生成するためのルックアップテーブルを含むことからなる、上項9に記載のシステム。
11.前記電圧制御ブロック401が、前記露光レベルインジケータ209を閾値レベルと比較するための比較器を備えることからなる、上項9に記載のシステム。
12.前記露光レベルインジケータ209に応じて前記ピクセルアレイ203のリセット電圧を調節するためのリセット電圧調節器をさらに備える、上項1に記載のシステム。
13.ピクセルアレイ203の電源205を最適化するための方法であって、
前記ピクセルアレイに電圧を供給するステップと、
イメージ211を前記ピクセルアレイで捕捉するステップと、
前記イメージの露光レベルを決定するステップと、
前記露光レベルに応じて前記電源の電圧を調節するステップ
を含む方法。
14.電源の電圧を調節する前記ステップが、
前記露光レベルが閾値未満のときには、電源205の電圧を低下させるステップと、
前記露光レベルが閾値を超えるときには、電源の電圧を上昇させるステップ
を含むことからなる、上項13に記載の方法。
15.露光レベルを決定する前記ステップが、
前記ピクセルアレイ203からの信号211を利得設定値306に応じて増幅するステップと、
増幅された信号302をディジタル化信号304に変換するステップと、
前記ディジタル化信号の平均レベルを決定するステップと、
前記利得設定値を前記ディジタル化信号の平均レベルに応じて調節するステップ
を含むことからなる、上項13に記載の方法。
16.露光レベルを決定する前記ステップが、ピクセルアレイ値を閾値と比較するステップを含み、前記ピクセルアレイ値が、前記ピクセルアレイからの信号の平均値、中間値および最大値から選択されることからなる、上項13に記載の方法。
17.前記ピクセルアレイ203のリセット電圧を前記露光レベルに応じて調節するステップをさらに含む、上項13に記載の方法。
The following is an exemplary embodiment comprising a combination of various components of the present invention.
1. A
An
A
A system comprising:
2. The
A
An analog-to-
The system of claim 1, comprising a gain control block 305 for adjusting a
3. The system of claim 2, wherein the pixel array is fabricated by complementary metal oxide silicon (or complementary metal oxide semiconductor: CMOS) technology.
4). The
5). The
If the average level of the digitized signal 304 is less than the target value, increase the
The system of claim 4, comprising reducing the gain of the programmable gain amplifier if the average level of the digitized signal exceeds a target value.
6). The system of claim 5, wherein the gain control block comprises a comparator for comparing an average level of the digitized signal with a target value.
7). The
8). The
When the
The system of claim 1, comprising raising a voltage of a power supply when the exposure level indicator indicates that the exposure level of the pixel array exceeds a threshold value.
9. The
A voltage control block 401 for generating an
The system of claim 1 comprising a
10. The system of claim 9, wherein the
11. The system of claim 9, wherein the
12 The system of claim 1, further comprising a reset voltage adjuster for adjusting a reset voltage of the
13. A method for optimizing a
Supplying a voltage to the pixel array;
Capturing an
Determining an exposure level of the image;
Adjusting the voltage of the power source in accordance with the exposure level.
14 Said step of adjusting the voltage of the power supply comprises:
Reducing the voltage of the
14. The method according to claim 13, further comprising a step of increasing a voltage of a power source when the exposure level exceeds a threshold value.
15. Said step of determining the exposure level comprises:
Amplifying the
Converting the amplified signal 302 into a digitized signal 304;
Determining an average level of the digitized signal;
14. The method of claim 13, comprising adjusting the gain setting value according to an average level of the digitized signal.
16. Said step of determining an exposure level comprises comparing a pixel array value to a threshold value, said pixel array value consisting of an average value, an intermediate value and a maximum value of a signal from said pixel array; 14. The method according to item 13 above.
17. The method of claim 13, further comprising adjusting a reset voltage of the
本発明は、イメージセンサのピクセルアレイ203の電源205を最適化して、ピクセルノイズを最小化し、かつ、ダイナミックレンジを最大化するための方法及び装置に関する。電源205は、ピクセルアレイ203がイメージを捕捉するときにピクセルアレイ203の露光レベルに応じて調整される。比較的高い露光レベルの場合には、電源205の電圧を上げて、ピクセルアレイ203のダイナミックレンジを広げる。露光レベルが比較的低い状態において、ピクセルアレイ203の全ダイナミックレンジが使用されるわけではないときは、電源205の電圧を下げて、ピクセルノイズのレベルを下げ、画質に対するピクセルノイズの影響を低減する。
The present invention relates to a method and apparatus for optimizing a
本発明を特定の好ましい実施態様に関して詳細に説明したが、本発明に関する当業者には、特許請求の範囲の思想および範囲を逸脱することなく、様々な変更および改良を行うことができることが分かるであろう。 Although the invention has been described in detail with reference to certain preferred embodiments, those skilled in the art to which the invention pertains can make various changes and modifications without departing from the spirit and scope of the claims. I will.
203 ピクセルアレイ
204 アレイVdd
205 電源
206 電源調節器(または供給電圧調整器)
207 露光レベル決定器
209 露光レベルインジケータ
211 画像信号(イメージ信号)
203 pixel array 204 array Vdd
205
207
Claims (19)
前記ピクセルアレイの露光レベルを決定して、露光レベルインジケータを生成するための露光レベル決定器と、
前記ピクセルアレイに入射する光の露光レベルに応じて、前記ピクセルアレイに供給される電源電圧のレベルを調節するための電源調節器と、
前記ピクセルアレイにリセット信号を提供するためのリセット電圧のレベルを調節するためのリセット調節器とを備え、
前記リセット電圧は、前記ピクセルアレイに入射する光の前記露光レベルに応じて、かつ、前記ピクセルアレイに供給される前記電源電圧とは無関係に、調節される、システム。 Capturing the images, the pixel array for outputting an image signal corresponding to an image obtained by the capture,
To determine the exposure level of the pixel array, the exposure level determination for generating an exposure level indicator,
Depending on the exposure level of the light incident on the pixel array, and a power adjuster for adjusting the level of the power supply voltage supplied to the pixel array,
A reset adjuster for adjusting a level of a reset voltage for providing a reset signal to the pixel array;
The system, wherein the reset voltage is adjusted according to the exposure level of light incident on the pixel array and independent of the power supply voltage supplied to the pixel array .
前記ピクセルアレイからの信号を増幅するためのプログラム可能な利得増幅器と、
前記増幅された信号を受信して、前記増幅された信号をディジタル化信号に変換するためのアナログ−ディジタル変換器と、
前記プログラム可能な利得増幅器の利得を調節するための利得制御ブロックとを備える、請求項1に記載のシステム。 The exposure level determiner comprises :
A programmable gain amplifier circuit for amplifying the signals of the pixel array or al,
A digital converter, - receiving a signal that is the amplified, analog for converting the amplified signal to issue a digital Cassin
Ru and a gain control block for adjusting the gain of the programmable gain amplifier system of claim 1.
前記ディジタル化信号の平均レベルが目標値未満の場合には、前記プログラム可能な利得増幅器の利得を増加させ、
前記ディジタル化信号の平均レベルが目標値を超える場合には、前記プログラム可能な利得増幅器の利得を減少させる、請求項4に記載のシステム。 It said gain control block is,
When the above average level of the digital Cassin No. is less than the target value, increase the gain of the programmable gain amplifier circuit,
If the average level of the digitized signal exceeds the target value, Ru reduces the gain of the programmable gain amplifier system of claim 4.
前記露光レベルインジケータが、前記ピクセルアレイの露光レベルが閾値未満であることを指示するときには、前記電源電圧を低下させ、
前記露光レベルインジケータが、前記ピクセルアレイの露光レベルが閾値を超えることを指示するときには、前記電源電圧を上昇させる、請求項1に記載のシステム。 The power regulator is
The exposure level indicator is, when instructing the exposure level of the pixel array is less than the threshold value, reduces the power voltage,
The exposure level indicator, when the exposure level of the pixel array instructs the Koeruko the threshold, Ru raises the power voltage, the system according to claim 1.
前記露光レベルインジケータに基づいて最適な電圧基準を生成するための電圧制御ブロックと、
前記最適な電圧基準に合致するように、前記電源電圧を調節するための電圧調整器とを備える、請求項1に記載のシステム。 The power regulator is
A voltage control block for generating the optimum voltage standards based on the exposure level indicator,
To match the optimum voltage reference, Ru and a voltage regulator for adjusting the power supply voltage, the system according to claim 1.
前記ピクセルアレイに電源電圧及びリセット電圧を供給するステップと、
イメージを前記ピクセルアレイで捕捉するステップと、
前記イメージの露光レベルを決定するステップと、
前記露光レベルに応じて前記電源電圧を調節するステップと、
前記露光レベルに応じて前記リセット電圧を調節するステップであって、前記リセット電圧は、前記ピクセルアレイに供給される前記電源電圧とは無関係に調節される、ステップと、
を含む方法。 A method for optimizing the power source voltage of the pixel array,
Supplying a power supply voltage and a reset voltage to the pixel array;
A step of capturing the images in the pixel array,
Determining an exposure level of the image;
And adjusting the power voltage in response to the exposure level,
Adjusting the reset voltage according to the exposure level, wherein the reset voltage is adjusted independently of the power supply voltage supplied to the pixel array;
Including methods.
前記露光レベルが閾値未満のときには、前記電源電圧を低下させるステップと、
前記露光レベルが閾値を超えるときには、前記電源電圧を上昇させるステップと、
を含む、請求項12に記載の方法。 Wherein the step of adjusting the power voltage is,
Wherein when the exposure level is less than the threshold value, the step of reducing the power voltage,
When the exposure level is above the threshold, the step of increasing the supply voltage,
The including method of claim 12.
前記ピクセルアレイからのイメージ信号を利得設定値に応じて増幅するステップと、
前記増幅された信号をディジタル化信号に変換するステップと、
前記ディジタル化信号の平均レベルを決定するステップと、
前記利得設定値を前記ディジタル化信号の平均レベルに応じて調節するステップと、
を含む、請求項12に記載の方法。 The step of determining the exposure level comprises:
A step of amplifying in response to image No. signals of the pixel array or al the gain setting value,
Converting the signal that is the amplified No. digital Cassin,
Determining an average level of the digitized signal;
Adjusting the gain setting according to an average level of the digitized signal ;
The including method of claim 12.
前記リセット調節器は、前記リセット電圧を前記ピクセルアレイに供給するための、前記電圧供給源に接続された第2の調節器を含む、請求項1に記載のシステム。The system of claim 1, wherein the reset adjuster includes a second adjuster connected to the voltage supply for supplying the reset voltage to the pixel array.
前記第2の調節器は第2の電圧レギュレータを含み、該第2の電圧レギュレータは、前記露光レベルインジケータ信号によって表される前記露光レベルに関連付けられた第2のルップアップテーブル中のルックアップテーブル値に基づき、第2の電圧基準信号を受信する、請求項17に記載のシステム。The second regulator includes a second voltage regulator, the second voltage regulator being a lookup table in a second look-up table associated with the exposure level represented by the exposure level indicator signal. The system of claim 17, wherein the system receives a second voltage reference signal based on the value.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/427,318 US7440012B2 (en) | 2003-04-30 | 2003-04-30 | Method and apparatus for optimizing image sensor noise and dynamic range |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004336747A JP2004336747A (en) | 2004-11-25 |
JP4441703B2 true JP4441703B2 (en) | 2010-03-31 |
Family
ID=32176770
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004129330A Expired - Fee Related JP4441703B2 (en) | 2003-04-30 | 2004-04-26 | Method and apparatus for optimizing noise and dynamic range of an image sensor |
Country Status (4)
Country | Link |
---|---|
US (2) | US7440012B2 (en) |
JP (1) | JP4441703B2 (en) |
DE (1) | DE10357241B4 (en) |
GB (1) | GB2401274B (en) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7616698B2 (en) | 2003-11-04 | 2009-11-10 | Atheros Communications, Inc. | Multiple-input multiple output system and method |
KR100610478B1 (en) * | 2004-05-06 | 2006-08-08 | 매그나칩 반도체 유한회사 | Image sensor and method for compensation of digital gain thereof |
JP2007180654A (en) * | 2005-12-27 | 2007-07-12 | Matsushita Electric Ind Co Ltd | Image pickup device |
US7488926B2 (en) * | 2006-01-06 | 2009-02-10 | Microsoft Corporation | Pixel array with shared pixel output lines |
JP5003127B2 (en) * | 2006-12-01 | 2012-08-15 | ソニー株式会社 | Imaging apparatus, control method therefor, and camera |
US7714266B2 (en) | 2007-01-12 | 2010-05-11 | Aptina Imaging Corporation | Method and apparatus for measuring source follower gain in an image sensor array |
EP1944961B1 (en) * | 2007-01-12 | 2009-04-15 | STMicroelectronics (Research & Development) Limited | Image sensor power supply |
CN101594457B (en) * | 2008-05-30 | 2012-11-21 | 深圳艾科创新微电子有限公司 | Grading noise reduction system and grading noise reduction method |
JP2010273158A (en) * | 2009-05-22 | 2010-12-02 | Toshiba Corp | Power source noise removing circuit |
JP2011055308A (en) * | 2009-09-02 | 2011-03-17 | Ricoh Co Ltd | Imaging apparatus |
JP6137997B2 (en) * | 2012-10-31 | 2017-05-31 | ルネサスエレクトロニクス株式会社 | Solid-state imaging device |
US9491383B2 (en) * | 2013-06-07 | 2016-11-08 | Invisage Technologies, Inc. | Image sensor with noise reduction |
KR102083776B1 (en) * | 2013-09-03 | 2020-04-16 | 삼성전자 주식회사 | Image sensor for supplying a different voltage to pixels based on illumination change, operation method thereof, and device having image sensor |
KR102205702B1 (en) * | 2014-07-30 | 2021-01-21 | 삼성전자주식회사 | Image sensor and method of driving image sensor, and image capturing apparatus using the same |
US11095840B2 (en) * | 2017-06-14 | 2021-08-17 | Sony Semiconductor Solutions Corporation | Control apparatus and imaging apparatus capable of reducing power consumption |
US20190306447A1 (en) * | 2018-03-29 | 2019-10-03 | Analog Devices Global Unlimited Company | Lookup table |
US10965303B2 (en) | 2019-08-23 | 2021-03-30 | Analog Devices International Unlimited Company | Data converter system with improved power supply accuracy and sequencing |
GB201913244D0 (en) | 2019-09-13 | 2019-10-30 | Univ Tartu | Method for making a fuel tablet |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4860108A (en) * | 1986-12-29 | 1989-08-22 | Minolta Camera Kabushiki Kaisha | Image sensing device for an electronic still camera |
US5530474A (en) * | 1991-09-05 | 1996-06-25 | Canon Kabushiki Kaisha | White balance correction device with correction signal limiting device |
JP3113406B2 (en) * | 1992-08-13 | 2000-11-27 | 旭光学工業株式会社 | Image sensor control device for still video camera |
KR100396203B1 (en) * | 1993-06-17 | 2003-12-31 | 소니 가부시끼 가이샤 | Exposure apparatus and method, video camera having the exposure apparatus |
EP1715439A3 (en) * | 1998-11-02 | 2007-10-10 | Datalogic S.P.A. | Device for the acquisition and automatic processing of data obtained from optical codes |
US6850278B1 (en) * | 1998-11-27 | 2005-02-01 | Canon Kabushiki Kaisha | Solid-state image pickup apparatus |
JP3031367B1 (en) * | 1998-12-02 | 2000-04-10 | 日本電気株式会社 | Image sensor |
US6788340B1 (en) * | 1999-03-15 | 2004-09-07 | Texas Instruments Incorporated | Digital imaging control with selective intensity resolution enhancement |
US6445022B1 (en) * | 1999-04-23 | 2002-09-03 | Micron Technology, Inc. | Increasing pixel conversion gain in CMOS image sensors |
JP4436513B2 (en) | 2000-01-05 | 2010-03-24 | オリンパス株式会社 | Imaging device |
JP2001218113A (en) * | 2000-02-02 | 2001-08-10 | Minolta Co Ltd | Solid-state image pickup device |
JP2001217182A (en) | 2000-02-03 | 2001-08-10 | Canon Inc | Sensor control device and aligner using the same |
US7102680B2 (en) | 2000-03-13 | 2006-09-05 | Olympus Corporation | Image pickup device capable of adjusting the overflow level of the sensor based on the read out mode |
US6881941B1 (en) * | 2001-11-08 | 2005-04-19 | Ess Technology, Inc. | Multi-mode imager with pinned photo region photoreceptors |
KR100411307B1 (en) * | 2002-03-12 | 2003-12-24 | 주식회사 하이닉스반도체 | Image sensor with improved automatic control of reset voltage and control method thereof |
US7038820B1 (en) * | 2002-04-03 | 2006-05-02 | Eastman Kodak Company | Automatic exposure control for an image sensor |
US6911640B1 (en) * | 2002-04-30 | 2005-06-28 | Ess Technology, Inc. | Reducing reset noise in CMOS image sensors |
US7327393B2 (en) * | 2002-10-29 | 2008-02-05 | Micron Technology, Inc. | CMOS image sensor with variable conversion gain |
-
2003
- 2003-04-30 US US10/427,318 patent/US7440012B2/en active Active
- 2003-12-08 DE DE10357241A patent/DE10357241B4/en not_active Expired - Fee Related
-
2004
- 2004-03-19 GB GB0406232A patent/GB2401274B/en not_active Expired - Fee Related
- 2004-04-26 JP JP2004129330A patent/JP4441703B2/en not_active Expired - Fee Related
-
2008
- 2008-10-16 US US12/252,565 patent/US20090086086A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
GB2401274B (en) | 2006-05-10 |
JP2004336747A (en) | 2004-11-25 |
DE10357241A1 (en) | 2004-12-02 |
US20040218088A1 (en) | 2004-11-04 |
GB2401274A (en) | 2004-11-03 |
GB0406232D0 (en) | 2004-04-21 |
DE10357241B4 (en) | 2009-12-31 |
US20090086086A1 (en) | 2009-04-02 |
US7440012B2 (en) | 2008-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20090086086A1 (en) | Method and apparatus for optimizing image sensor noise and dynamic range | |
US6788340B1 (en) | Digital imaging control with selective intensity resolution enhancement | |
US8154635B2 (en) | Image sensor and digital gain compensation method thereof | |
KR100776134B1 (en) | Image sensor and method for controlling distribution of image brightness | |
US20040119853A1 (en) | Image sensor providing improved image quality | |
US6384394B1 (en) | Apparatus and method for offset reduction in the image sensors | |
JP2010520707A (en) | Method and apparatus for improving and controlling the dynamic range of an image sensor | |
US20010007473A1 (en) | Imaging method and apparatus for generating an output image with a wide dynamic range | |
US11327550B2 (en) | Sensor chip with reduced operation power | |
WO2005084371A2 (en) | Programmable gain amplifier with hybrid digital/analog architecture | |
KR100873985B1 (en) | Optical pointing device and auto gain control method thereof | |
EP1067775A2 (en) | Digital imaging control with selective intensity resolution enhancement | |
US20110211100A1 (en) | Signel processing circuit capable of selectively adjusting gain factor of sample-and-hold circuit and signal processing method thereof | |
US6650443B1 (en) | Apparatus and method for reading image, and computer-readable storage medium storing image processing program | |
JPWO2008129885A1 (en) | Output control circuit and imaging apparatus | |
JP2001013005A (en) | Light quantity detecting circuit capable of controlling photoelectric conversion ratio | |
JP2008518490A (en) | Preamplifier circuit with variable feedback resistor | |
WO2001043068A2 (en) | Electronic image processing technique for achieving enhanced image detail | |
JP7457568B2 (en) | Imaging device | |
US20050157214A1 (en) | Image signal processing device and image signal processing method | |
US20220247945A1 (en) | Image processing device, image processing method, and storage medium | |
US7724166B2 (en) | A/D converter | |
JP2001309393A (en) | Imaging unit | |
US20090045320A1 (en) | Method, apparatus and system for a low power imager device | |
JP3105008B2 (en) | Image reading device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070420 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20070727 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20080222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20080604 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20080604 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090716 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090728 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091022 Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20091022 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091201 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091221 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4441703 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130122 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130122 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130122 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |