JP2004228867A - Image processor and its processing method - Google Patents

Image processor and its processing method Download PDF

Info

Publication number
JP2004228867A
JP2004228867A JP2003013599A JP2003013599A JP2004228867A JP 2004228867 A JP2004228867 A JP 2004228867A JP 2003013599 A JP2003013599 A JP 2003013599A JP 2003013599 A JP2003013599 A JP 2003013599A JP 2004228867 A JP2004228867 A JP 2004228867A
Authority
JP
Japan
Prior art keywords
signal
voltage
line
system clock
state imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003013599A
Other languages
Japanese (ja)
Other versions
JP4314832B2 (en
Inventor
Hiroaki Nasu
弘明 那須
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2003013599A priority Critical patent/JP4314832B2/en
Publication of JP2004228867A publication Critical patent/JP2004228867A/en
Application granted granted Critical
Publication of JP4314832B2 publication Critical patent/JP4314832B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processor in which the degradation of image quality can be prevented even if the system clock frequency is altered, and to provide its processing method. <P>SOLUTION: The image processor comprises a solid state imaging element, a signal processing section for processing an output from the solid state imaging element based on an inputted system clock signal and delivering an image signal, and a means for informing a user of the frequency of the system clock signal inputted to the signal processing section to the solid state image sensor such that it corresponds to the system clock signal of a plurality of frequencies. When the timing for driving the solid state image sensor is controlled for a variation in system clock frequency informed from the signal processing section, image quality of the image signal can be kept constant even if the system clock frequency is varied. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、画像処理装置及びその処理方法に関する。特に、単位画素がフォトダイオードと光信号検出用のトランジスタとを備え、該単位画素が複数配列されたマトリックス型の固体撮像素子を含む画像処理装置及びその処理方法に関する。
【0002】
【従来の技術】
半導体イメージセンサは、種々の画像入力装置に利用されている。最近、その中で、閾値電圧変調方式のMOS型固体撮像素子が、CCD(電荷結合素子)の高性能画質、及びCMOSの低消費電力を兼ね備え,画質の劣化を抑えたほか,高密度化および低コスト化を実現するものとして注目されている。
【0003】
閾値電圧変調方式のMOS型固体撮像素子の技術は、例えば、特開平11−195778号公報に開示されている。閾値電圧変調方式のMOS型固体撮像素子では、初期化、蓄積及び読出の3つの状態を繰り返すことによって、各画素のキャリアポケットに蓄積された光発生電荷に基づく画像信号が取り出される。初期化状態の期間は、残留電荷をキャリアポケット内から排出する期間である。蓄積状態の期間は、センサセルに電荷を蓄積する期間である。読出状態の期間は、蓄積された電荷量を電圧変調して読み出す期間である。
【0004】
【特許文献1】
特開平11−195778号公報
【0005】
【発明が解決しようとする課題】
しかし、これまで開示された技術によれば、閾値電圧変調方式のMOS型固体撮像素子の駆動パルスを発生する制御が単一であり、入力したシステムクロックの周波数に応じて前記駆動パルスのパルス幅も変化する。例えば、フレームレートを30フレーム/secから15フレーム/secに変更する場合、システムクロックの周波数を変える必要があるが、システムクロック周波数を変更すると、閾値電圧変調方式のMOS型固体撮像素子の駆動タイミングが変化してしまい、画質が劣化する問題があった。
【0006】
例えば、システムクロック周波数が変わると、初期化状態の期間を規定するクリアパルスのパルス幅や、蓄積状態の期間を規定するシャッタスピード(換言すれば、露光時間exposure time)が変わる。クリアパルスの幅が変わると、残電荷量に変化を生じ、閾値電圧変調方式のMOS型固体撮像素子の出力を信号処理して得られる画像信号の明るさや画質が変化してしまう。露光時間が変わった場合も同様である。また、蓄積期間を除く読出期間及び初期化期間を規定する時間(後述するHブランキング期間に相当する)が変わると、このときは蓄積状態時に閾値電圧変調方式のMOS型固体撮像素子に印可されていたノイズの発生しにくいバイアス状態が解除されるので、例えば当該ブランキング相当時間が延びることはノイズ発生の期間が長くなるためノイズを増加させる問題を生ずる。
【0007】
そこで、本発明は、上記の問題に鑑み、システムクロック周波数を変更しても、画質の劣化を防ぐことができる画像処理装置及びその処理方法を提供することを目的とする。
【0008】
【課題を解決するための手段】
本発明の画像処理装置は、フォトダイオードと光信号検出用のトランジスタとを備えた単位画素が複数配列されたマトリックス型の固体撮像素子と、システムクロック信号が入力され、該システムクロック信号に基づいて前記固体撮像素子の出力を信号処理し、画像信号として出力する信号処理部と、複数の周波数のシステムクロック信号に対応するように、前記信号処理部に入力したシステムクロック信号の周波数を前記固体撮像素子に通知する手段と、を具備したものである。
【0009】
このような構成によれば、複数のシステムクロック信号の周波数に対応可能な画像処理システムを実現でき、システムクロック周波数が変わっても、画質の劣化を防ぐことが可能となる。
【0010】
本発明の画像処理装置において、前記固体撮像素子が、閾値電圧変調方式のMOS型固体撮像素子であることが好ましい。
【0011】
このような構成によれば、閾値電圧変調方式のMOS型固体撮像素子を使用することで、良好な画質を実現可能となる。
【0012】
また、本発明の画像処理装置において、前記信号処理部より通知されたシステムクロック信号の周波数に応じて、前記固体撮像素子の駆動タイミングを制御する手段を、さらに具備することが好ましい。
【0013】
このような構成によれば、信号処理部より通知されたシステムクロック周波数の変化に対して、固体撮像素子の駆動タイミングを制御することで、システムクロック周波数が変わっても画像信号の画質を良くすることができる。
【0014】
さらに、本発明の画像処理装置において、前記制御する手段は、駆動パルスの幅を一定に保つように制御することが好ましい。
【0015】
このような構成によれば、システムクロック周波数が変わっても固体撮像素子の駆動パルスの幅が一定であるので、画像信号の画質を一定に保つことが可能となる。
【0016】
本発明の画像処理装置において、前記通知する手段は、システムクロック信号の周波数に対応したクロック指定信号のレベルに基づいて通知を行うことが好ましい。
【0017】
このような構成によれば、例えば、システムクロック信号の周波数の高低に対応したクロック指定信号のH,Lレベルに基づいて通知を行うことができ、システムクロック周波数の高低に対応して画質の均一化等を制御を行うことが容易となる。
【0018】
本発明の画像処理装置において、前記通知する手段は、システムクロック信号の周波数に応じてビット割り当てされた値を、前記信号処理部と前記固体撮像素子それぞれに配置したレジスタ間で送受するものであることが好ましい。
【0019】
このような構成によれば、システムクロック周波数の情報を信号処理部と固体撮像素子のそれぞれに保持しておくことができ、信号処理部と固体撮像素子との信号同期をとることが容易である。
【0020】
本発明の画像処理装置の処理方法は、フォトダイオードと光信号検出用のトランジスタとを備えた単位画素が複数配列されたマトリックス型の固体撮像素子と、前記固体撮像素子の出力を信号処理する信号処理部を含む画像処理装置の処理方法であって、前記信号処理部に入力したシステムクロック信号の周波数を前記固体撮像素子へ通知し、複数のシステムクロック周波数に対応可能としたものである。
【0021】
このような方法によれば、複数のシステムクロック信号の周波数に対応可能な画像処理方法を実現し、システムクロック周波数が変わっても、画質の劣化を防ぐことが可能となる。
【0022】
本発明の画像処理装置の処理方法において、前記固体撮像素子が、閾値電圧変調方式のMOS型固体撮像素子であることが好ましい。
【0023】
このような方法によれば、閾値電圧変調方式のMOS型固体撮像素子を使用することで、良好な画質を実現可能となる。
【0024】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
【0025】
まず、図1に基づき、本実施の形態に係わる画像処理装置の構成を説明する。
【0026】
図1は、固体撮像装置であるイメージセンサLSI(大規模集積回路)1と、信号処理装置である信号処理LSI2からなる画像処理装置の構成を示すブロック構成図である。イメージセンサLSI1は、2次元の固体撮像装置であり、光学像を光電変換して、光学像に基づく画素信号を信号処理LSI2へ供給する。信号処理LSI2は、受信した各画素信号に対して予め決められた信号処理を施して、画像信号を出力する。
【0027】
イメージセンサLSI1は、センサセルアレイ3と、クリアライン用シフトレジスタ4と、読み出しライン用シフトレジスタ5と、垂直ドライブ回路6と、昇圧回路7と、レギュレータ8と、蓄積信号用ラインメモリ9と、オフセット信号用ラインメモリ10と、水平シフトレジスタ11と、出力アンプ12と、タイミングジェネレータ13とを含む。タイミングジェネレータ13は、レジスタ14と3線シリアルインターフェース15を含む。
【0028】
イメージセンサLSI1のセンサセルアレイ3は、例えば、特開平11−195778号公報に記載されたような閾値変調型の固体撮像素子である。タイミングジェネレータ13から、各回路へ各種制御信号が供給され、その各種制御信号に基づいて、センサセルアレイ3は、各セルの受光した光量に応じた画素信号を出力する。また、センサセルアレイ3は、例えば、640×480のセルと、オプティカルブラック(OB)のための領域(OB領域)を含む。OB領域を含めると、センサアレイ3は例えば712×500のセルで構成される。そして、イメージセンサLSI1は、受光光量に応じた信号成分の電圧出力信号VOUTSと、オフセット成分に応じた電圧出力信号VOUTNの2つの出力信号を、信号処理LSI2へ供給する。
【0029】
垂直ドライブ回路6は、読み出しラインとクリアラインを選択するための回路である。読み出しライン用シフトレジスタ5とクリアライン用シフトレジスタ4は、それぞれ読み出しラインとクリアラインを指定するための回路である。
【0030】
レギュレータ8は、イメージセンサLSI1内で必要とされる各種電圧を生成するための電圧生成回路である。昇圧回路7は、後述するように、センサセルアレイ3に対して必要な電圧を与えるために、レギュレータ8から供給された電圧を昇圧するための回路である。なお、イメージセンサLSI1のより詳細な説明は、図2を用いて後述する。
【0031】
信号処理LSI2は、差分アンプ回路16と、オプティカルブラック(以下、OBと略す。)クランプ回路17と、プログラマブルゲインアンプ回路(PGA)18と、アナログディジタル変換回路(ADC)19と、OB制御ロジック回路20と、輝度制御ロジック回路21と、輝度測光ロジック回路22と、レジスタ23と、イメージプロセッサ24と、シーケンサ25と、タイミングジェネレータ26とを含む。レジスタ23は、シャッタースピードデータ等のデータがストアされる。
【0032】
イメージセンサLSI1からのVOUTSとVOUTNの2つのアナログ信号は、差分アンプ回路16に入力される。信号処理LSI2の差分アンプ回路16は、信号成分の電圧値とオフセット成分との電圧値の差を取って増幅し、OBクランプ回路17へその差分電圧を出力する。
OBクランプ回路17は、入力された画素信号の黒レベルを黒色の適切なレベルに設定するための回路である。センサセルアレイ3内の予め決められた数画素分のセル、すなわちOB領域は、遮光板等によって遮光されており、その遮光されたセルの信号レベルに基づいて、有効画素領域の画素信号に対する適切な黒色レベル調整が行われる。
【0033】
PGA18は、例えば1デシベル単位でゲインを調整するための増幅器である。PGA18によって増幅された信号は、ADC19へ供給される。ADC19はPGA18の出力をディジタル信号に変換する。
OB領域の画素については、その画素の輝度データが、ADC19からディジタル信号としてOB制御ロジック回路20に供給される。OB制御ロジック回路20は、タイミングジェネレータ26からの制御信号に基づいて、ADC19からの信号を入力し、黒レベルの調整をするためにOBクランプ回路17へ制御信号を出力する。
【0034】
同様に、輝度測光ロジック回路22は、例えば、ADC19から供給される1フレーム内の全ての緑(G)の画素のデータに基づいて、輝度を測定し、輝度データを輝度制御ロジック21に供給する。
輝度制御ロジック回路21は、輝度測光ロジック回路22から供給される輝度データに基づいて、PGA18へゲイン制御信号を供給することによって、画像の明るさの調整を行う。さらに、輝度制御ロジック回路21は、レジスタ23へシャッタースピードのデータを書き込む。
【0035】
なお、レジスタ14とレジスタ23は、互いに同じデータをストアするようになっているので、一方のレジスタの内容が変更されると、3線シリアルインターフェース15を介して、他方のレジスタの内容も変更される。よって、シャッタースピードのデータが、信号処理LSI2内のレジスタ23に書き込まれると、さらに、そのデータは、3線シリアルインターフェース15を介して、イメージセンサLSI1内のレジスタ14に転送されて書き込まれる。イメージセンサLSI1では、シャッタースピードのデータに基づいて、フォーカルプレーンシャッターの設定が行われる。フォーカルプレーンシャッターの機能については後述する。
【0036】
例えば、イメージセンサLSI1側では、シャッタースピードのデータに基づいて、フォーカルプレーンの読み出しラインとクリアラインの幅dlを制御する。画像が明るい場合のように、露光時間を短くする場合には、その幅dlを狭めるように、すなわち読み出しラインとクリアライン間のライン数を小さくするように、制御が行われる。また、画像が暗い場合のように、露光時間を長くする場合には、その幅dlを広げるように、すなわち読み出しラインとクリアライン間のライン数を大きくするように、制御が行われる。さらに、シャッタースピードの制御だけでは露光が適切でないときは、輝度制御ロジック回路21は、信号ゲインを調整することによって、信号量を適切になるように制御する。
【0037】
信号処理LSI2には、システムクロック信号CLKINが供給され、そのシステムクロック信号CLKINに基づいて、タイミングジェネレータ26は、種々のタイミング信号を生成する。信号処理LSI2は、種々のタイミング信号の中から各種同期信号を、イメージセンサLSI1に供給する。同期信号としては、センサ駆動クロック信号SCLK、垂直同期信号VSYNC、水平同期信号HSYNCがある。イメージセンサLSI1はこれらの同期信号に基づいて同期を取って、画像信号を信号処理LSI2へ供給する。従って、SCLK、VSYNC、HSYNCの各信号は、システムクロック信号CLKINに依存する。
【0038】
信号処理LSI2のレジスタ23には、各種パラメータ、例えば、全体に、あるいは部分的に明るくするためのパラメータ等が、IC−Bus(アイスクエアシーバス)I/Fを介して入力され、ストアされる。
信号処理LSI2において、イメージプロセッサ24は、RGBの信号に基づいて画像を生成するための回路であり、シーケンサ25は、イメージプロセッサ24を駆動するための回路である。
【0039】
イメージセンサLSI1のタイミングジェネレータ13には、さらにクロック指定信号CLK_SELが、入力されるようになっている。CLK_SELは、イメージセンサLSI1が動作されるクロック周波数の指定を明示的に、イメージセンサLSI1に知らせるすなわちイメージセンサLSI1にクロックの高低指示を制御信号として入力する、ための信号である。CLK_SELに基づいて、タイミングジェネレータ13が各種制御信号の出力タイミングを変更する。さらに、タイミングジェネレータ13には、スタンバイ信号STANDBYが入力される。
【0040】
イメージセンサLSI1のレジスタ14には、シャッタースピード、レギュレータの電圧設定、スキャン方向の指定、等のデータが3線シリアルインターフェース15を介して入力され、ストアされる。
また、イメージセンサLSI1は、一つの制御信号として有効信号VALIDを信号処理LSI2のタイミングジェネレータ26へ供給する。VALIDは、イメージセンサLSI1から有効な画像データが出力されていることを示す信号である。この信号がアクティブなときは、有効な画像データがイメージセンサLSI1から出力されているので、そのデータを測光等に使用できることを、信号処理LSI2は知ることができる。
【0041】
次に、イメージセンサLSI1の構成について説明する。図2は、イメージセンサLSI1の構成を示す回路図である。
センサセルアレイ3は、m×n(m行n列)個のセルS11〜Smnからなるマトリックスの固体撮像素子である。一つのセルが、一つの単位画素に対応する。各単位画素に対応する各セルは、フォトダイオードPDSと、光信号検出用絶縁ゲート型電界効果型トランジスタであるMOSトランジスタPDTrを含む。フォトダイオードPDSは、不純物拡散領域とウエル領域からなり、入射光に応じてホール(正孔)がウエル領域内に生じる。そのウエル領域は、光信号検出用MOSトランジスタPDTrと共有されており、光信号検出用MOSトランジスタPDTrのゲート領域を構成する。フォトダイオードPDSの不純物拡散領域と、光信号検出用MOSトランジスタPDTrのドレイン拡散領域は、ウエル領域の表層に一体的に形成されている。ドレイン拡散領域は、リング状のゲート電極の外周部を取り囲むように形成されている。リング状のゲート電極の中心部にソース拡散領域が形成されている。ゲート電極下のウエル領域内であって、ソース拡散領域の周辺部に、ソース拡散領域を取り囲むようにキャリアポケットが形成されている。センサ構造の詳細は、特開平11−195778号公報に記載されている。
【0042】
センサセルアレイ3から光量に応じた信号を得るために、蓄積、読み出し及びクリアの3状態のそれぞれにおいて、各セルのゲート、ソース及びドレインに、所定のバイアス電圧を印加することによって、光量に応じた信号を得ることができる。簡単に言えば、蓄積状態のとき、フォトダイオードPDSに入射した光量に応じて生じたホールをキャリアポケットに蓄積させる。読み出し状態のとき、蓄積されたホールに基づいて信号電圧を読み出す。読み出された信号電圧は、ゲート電圧と、受光量に応じて変化した閾値との差に応じた電圧信号である。クリア状態のとき、昇圧回路7によって光信号検出用MOSトランジスタPDTrのソース電圧を所定の値に昇圧するとともに、リングゲート、ソース間のカップリング容量により、ゲート電圧も所定の値に昇圧され、光信号検出用MOSトランジスタPDTrがターンオンし、リングゲート下にチャネルが形成される。従って、ドレイン電圧はソース電圧とほぼ等しい値(ドレイン電圧VD=VG−Vthでゲート電圧VGがソース電圧より十分高い場合)となり、ソース、チャネル、ドレイン下の空乏層が広がることによって、蓄積されたホールは基板方向へ掃き出され、ホール等の残留電荷を排出する。クリア後、ノイズ成分を含むオフセット電圧を読み出し、信号電圧とオフセット電圧との差分をとることによって、画像信号を得ることができる。各セルについて、上述した動作を行い、画像信号を得ることによって、2次元の画像信号を得ることができる。バイアス条件、すなわち各状態における各セルのゲート、ソース及びドレインのバイアス電圧については、後述する。
【0043】
クリアライン用シフトレジスタ4は、クリアするラインを指定するための回路である。クリアライン用シフトレジスタ4には、クリアライン用シフトデータAV、クリアライン用シフトクロック信号VCLK_ASR、クリアライン用シフトレジスタリセット信号VSFRA_RSTが入力される。クリアライン用シフトレジスタ4は、マトリックス状のセンサセルアレイ3の中の、蓄積電荷をクリアするラインを選択するクリアライン選択信号VSA1ないしVSAmを出力する。
【0044】
読み出しライン用シフトレジスタ5は、読み出しラインを指定するための回路である。読み出しライン用シフトレジスタ5には、読み出しライン用シフトデータBV、読み出しライン用シフトクロック信号VCLK_BSR、読み出しライン用シフトレジスタリセット信号VSFRB_RSTが入力される。読み出しライン用シフトレジスタ5は、マトリックス状のセンサセルアレイ3の中の、信号電圧を読み出すラインを選択する読み出しライン選択信号VSB1ないしVSBmを出力する。
【0045】
シャッタースピードのデータに基づいて決められた出力タイミングでクリアライン用シフトデータAVと読み出しライン用シフトデータBVが与えられることによって、クリアライン用シフトレジスタ4と読み出しライン用シフトレジスタ5は、順番に選択信号を出力する。すなわち、読み出しライン用シフトデータBVは、垂直同期信号VSYNCに対して予め決められたタイミングで生成されるが、読み出しライン用シフトデータBVとクリアライン用シフトデータAVとの位相関係はシャッタースピードによって決定され、その位相関係を保った状態で、クリアライン用シフトレジスタ4と読み出しライン用シフトレジスタ5は、順番に選択信号を出力する。なお、後述するように、1フレーム中に読み出しラインとクリアラインが存在するときは、センサアレイの中の2つのラインが指定され、選択される。
【0046】
垂直ドライブ回路6は、ライン毎に、2つのAND回路31、32と、OR回路33と、バッファ回路34と、ドレイン・ゲート電圧供給回路VC1i(iは、1からmのいずれかである。以下、同じ。)とを含む。一つのAND回路31は、クリアライン選択信号VSAiとクリアライン選択イネーブル信号CLSとを入力とする。他方のAND回路32は、読み出しライン選択信号VSBiと、信号読み出し、クリア、ノイズ読み出しの3つの動作の読み出しライン選択イネーブル信号VSMとを入力とする。OR回路33は、各AND回路31、32の出力信号と蓄積時全ライン選択信号VGUPとを入力とする。バッファ回路34は、そのOR回路33からの出力信号を入力とする。各バッファ回路34の出力信号は、ライン選択信号VSCiとして、ドレイン・ゲート電圧供給回路VC1iへ供給される。
【0047】
ドレイン・ゲート電圧供給回路VC1iには、ライン選択信号VSCiに加えて、蓄積イネーブル信号SDI、読み出しイネーブル信号SDR2及びクリアパルス信号CLが入力される。ドレイン・ゲート電圧供給回路VC1iは、対応するラインの全セルのゲート及びドレインに印加するための電圧を選択して出力する。すなわち、ドレイン・ゲート電圧供給回路VC1iは、各ラインの各セルに、ドレイン電圧VPDiと、ゲート電圧VPGiを供給する。このドレイン・ゲート電圧供給回路VC1iの詳細は後述する。
【0048】
ソース電圧供給回路VC2h(hは、1からnのいずれか。以下、同じ。)が、マトリックスの列毎に、設けられている。ソース電圧供給回路VC2hには、クリアパルス信号CL及びクリア前ゲートプリセット信号PRが入力される。ソース電圧供給回路VC2hは、各列の全セルのソースに、ソース電圧VPShを供給する。このソース電圧供給回路VC2hの詳細は後述する。
【0049】
各列に対応するソース線が蓄積信号用ラインメモリ9とオフセット信号用ラインメモリ10とに、ラインメモリデータロード信号LOADが入力されるスイッチSW1hを介して接続されている。
蓄積信号用ラインメモリ9は、各列に対応した選択回路HShを含む。各選択回路HShは、電荷蓄積用コンデンサC2と、読み込み用スイッチSW21と、リセット用スイッチSW22と、出力用スイッチSW23とを含む。
【0050】
オフセット信号用ラインメモリ10は、各列に対応した選択回路HNhを含む。各選択回路HNhは、電荷蓄積用コンデンサC3と、読み込み用スイッチSW31と、リセット用スイッチSW32と、出力用スイッチSW33とを含む。 蓄積信号用ラインメモリ9への蓄積信号用ラインメモリデータロード信号LOADSが入力されると、SW21がオンとなって、各ソース線から光量に応じた電圧がコンデンサC2に与えられ、コンデンサC2にその電圧に応じた電荷が蓄積される。読み出しライン用シフトレジスタ5によって選択された1ライン分の画素信号が、LOADSに応じて、蓄積信号用ラインメモリ9にストアされる。
【0051】
蓄積信号用ラインメモリ9への蓄積信号用ラインメモリリセット信号RESSは、信号読み出し直前にコンデンサC2を予め決められた電圧VMPRにするための信号である。電圧VMPRは、リセット用スイッチSW22をオンにすることによって、レギュレータ8で生成された電源35からコンデンサC2に供給される。
【0052】
そして、水平シフトレジスタ11からの選択信号HSCANhによって、蓄積信号用ラインメモリ9の各選択回路HShのスイッチSW23は順番にオンされていく。オンされたSW23は、コンデンサC2に蓄積された電荷に応じた電圧を出力するので、読み出しライン用シフトレジスタ5で選択された1ラインの画素信号が、VOUTS信号として順番に出力アンプ36を介して出力される。
【0053】
オフセット信号用ラインメモリ10へのオフセット成分蓄積信号用ラインメモリデータロード信号LOADNが入力されると、スイッチSW31がオンとなって、各ソース線からオフセット成分に応じた電圧が与えられ、コンデンサC3にその電圧に応じた電荷が蓄積される。読み出しライン用シフトレジスタ5によって選択された1ライン分の画素信号が、オフセット成分蓄積信号用ラインメモリデータロード信号LOADNに応じて、オフセット信号用ラインメモリ10にストアされる。オフセット信号用ラインメモリ10へのオフセット信号用ラインメモリリセット信号RESNは、オフセット成分の信号の読み出し直前にコンデンサC3を予め決められた電圧VMPRにするための信号である。電圧VMPRは、リセット用スイッチSW32をオンにすることによって、レギュレータ8で生成された電源37からコンデンサC3に供給される。
【0054】
そして、水平シフトレジスタ11は、オフセット信号用ラインメモリ10の各選択回路HNhのスイッチSW33を順番にオンしていく。オンされたSW33は、コンデンサC3に蓄積された電荷に応じた電圧を出力させるので、読み出しライン用シフトレジスタ5で選択された1ラインの画素信号のオフセット成分の信号が、VOUTN信号として順番に出力アンプ38を介して出力される。イメージセンサLSI1からのVOUTSとVOUTNの2つの電圧アナログ信号は、信号処理LSI2の差分アンプ回路16に入力される。
【0055】
図3は図2のドレイン・ゲート電圧供給回路VC11ないしVC1mの構成を示す回路図である。ドレイン・ゲート電圧供給回路VC1iは、NAND回路、インバータ回路、トランジスタを含み、各種入力信号に応じて、ドレイン電圧VPDとゲート電圧VPGを出力する。
【0056】
各ドレイン・ゲート電圧供給回路VC1iには、クリアパルス信号CL、蓄積イネーブル信号SDI及び読み出しイネーブル信号SDR2が入力され、供給されているVCCSGHR、VCCSGHI、VCCSDR及びVCCSDIの電圧を用いて、後述する図5のバイアス電圧を発生し、各センサセルのドレインとゲートに与える。
【0057】
センサセルアレイ3は、次のような状態を有する。これらの各状態は、詳細には、“蓄積”、“リセット(S)”、“変調(S)”、“プリセット”、“クリア”、“リセット(N)”及び“変調(N)”の各状態を含み、これらの各状態の繰返しによって、光学像を電気信号に変換して出力する。蓄積イネーブル信号SDIは、ローアクティブの信号であり、蓄積期間を示す信号である。読み出しイネーブル信号SDR2は、蓄積期間以外の期間を示す信号SDRを元に生成された信号であり、変調、オフセット変調及びクリア時にローアクティブとなる信号である。また、ライン選択信号VSCiは、読み出しライン及びクリアラインの選択に用いられ、クリアパルス信号CLは、蓄積されたホール等の残留電荷を排出する期間に設定される。
【0058】
図3において、クリアパルス信号CLがLレベルでライン選択信号VSCiがHレベルになるものとする。この場合には、PMOSトランジスタT1 、NMOSトランジスタT2 はオンとなり、PMOSトランジスタT3 はオフとなる。そうすると、ゲート電圧VPGiは電圧VCCSGHI又は電圧VCCSGHRとなる。なお、PMOSトランジスタT1 はエンハンスト型、NMOSトランジスタT2 はディプレッション型のMOSトランジスタである。
【0059】
逆に、クリアパルス信号CLがHレベルでライン選択信号VSCがLレベルの場合には、トランジスタT1,T2 はオフとなり、トランジスタT3 はオンとなる。この場合には、ゲート電圧VPGiはローレベルの電圧となる。なお、クリアパルス信号CL及びライン選択信号VSCiがHレベルの場合には、トランジスタT1,T2,T3 はオフとなり、ゲートはフローティング状態となる。
【0060】
また、クリアパルス信号CLがLレベルの場合又はライン選択信号VSCがLレベルの場合には、NMOSトランジスタT5 はオンとなる。各ラインのトランジスタT5のソースは共通接続されてCOMノードを構成する。トランジスタT5がオンの場合には、各ラインのドレインはCOMノードに接続されてフローティング状態となる。トランジスタT5がオンの場合において、蓄積イネーブル信号SDIがLレベルのときには、PMOSトランジスタT6とNMOSトランジスタT7 もオンとなって、ドレイン電圧VPDiは電圧VCCSDIとなる。また、トランジスタT5 がオン状態で、読み出しイネーブル信号SDR2がLレベルになると、PMOSトランジスタT4 もオンとなって、ドレイン電圧VPDiは電圧VCCSDRとなる。また、トランジスタT4 〜T7 のうちトランジスタT5 のみがオン状態の場合には、全てのドレインはフローティング状態のCOMノードに接続されてHiZとなる。
【0061】
なお、トランジスタT1 には、蓄積イネーブル信号SDIがLレベルの場合に電圧VCCSGHIが供給され、信号SDRがLレベルの場合に電圧VCCSGHRが供給されるようになっている。
【0062】
即ち、図3の回路は下記表1の状態を得る。なお、表1には、着目している信号のHレベルとLレベルのみ示されている。

Figure 2004228867
図4(a)は、図2のソース電圧供給回路VC21ないしVC2nの構成を示す回路図である。ソース電圧供給回路VC2hは、コンデンサとトランジスタを含み、各種入力信号に応じて、ソース電圧VPShを出力する。
図4(b)は,図4(a)におけるS1、S2、S3及びS4の信号を生成するための回路を示す。
各ソース電圧供給回路VC2hは、クリアパルス信号CLの反転信号S1〜S3と、プリセット信号PRの正転信号S4とが入力され、供給されているVCCSDB及びVCCVPSを用いて、図5のSOURCEバイアス電圧を発生して、各センサセルのソースに与える。
【0063】
図4(b)において、信号S1〜S3はクリアパルス信号CLの反転信号であり、プリセット信号PRの正転信号S4は、クリア前ゲートプリセット信号PRと同一論理レベルの信号である。クリアパルス信号CL及びクリア前ゲートプリセット信号PRがいずれもLレベルの場合には、反転信号S1〜S3はHレベルであり、プリセット信号PRの正転信号S4はLレベルである。従って、NMOSトランジスタT11,T13はオンであり、PMOSトランジスタT12,T14はオフであり、NMOSトランジスタT15はオフである。即ち、この場合には、トランジスタT14,T15がオフであるので、ソース電圧供給回路VC2hはソース電圧を供給しない。なお、この時点では、ND1点の電圧値はグランドレベル(GND)であり、ND2点の電圧値はVCCSDBである。
【0064】
また、クリアパルス信号CLがLレベルで、クリア前ゲートプリセット信号PRがHレベルの場合には、反転信号S1〜S3及びプリセット信号PRの正転信号S4はHレベルである。従って、トランジスタT11,T13,T15はオンであり、トランジスタT12,T14はオフである。即ち、この場合には、ソース電圧VPShは電圧VCCVPSとなり、また、ND1点の電圧値はグランドレベル(GND)であり、ND2点の電圧値はVCCSDBである。従って、この間、コンデンサC1 は電圧VCCSDBまで充電される。
【0065】
また、クリアパルス信号CLがHレベルで、クリア前ゲートプリセット信号PRがLレベルの場合には、反転信号S1〜S3及びプリセット信号PRの正転信号S4はLレベルである。従って、トランジスタT11,T13,T15はオフであり、トランジスタT12,T14はオンである。即ち、この場合には、ND2点の電圧がソース電圧VPShとなる。仮に、この場合の直前に、コンデンサC1の電圧がVCCSDBに充電されていれば、トランジスタT12がオンすることによってND1点は電圧VCCSDBになるので、ND2点の電圧値はVCCSDB×2となる。
【0066】
即ち、図4の回路は下記表2の状態を得る。
Figure 2004228867
図5は、センサセルへ印加するバイアス電圧を説明するための図である。
図5は、各状態における、各セルのゲート電圧、ソース電圧及びドレイン電圧の電圧値を示す。なお、図5ではバイアス電圧の観点から、“蓄積”、“リセット(S)”、“変調(S)”、“プリセット”、“クリア”、“リセット(N)”及び“変調(N)”の各状態に分けて示している。
【0067】
図5において、GATEは、セルのゲート電圧であり、選択状態と非選択状態の2つの状態を有する。SOURCEは、セルのソース電圧である。DRAINは、セルのドレイン電圧であり、選択状態と非選択状態の2つの状態を有する。
【0068】
まず、蓄積状態の場合について説明する。
“蓄積”の状態(以下、蓄積状態という。)のとき、セルアレー中の全てのセルが選択状態とされ、電圧値がVCCSGHIである電圧が、ゲートに印加される。蓄積状態のとき、非選択のセルはない。蓄積状態のとき、ソースは、ソース電圧供給回路VC2hからのバイアス電圧の供給を受けないが、ゲートにVCCSGHIの電圧が印加され、光信号検出用MOSトランジスタPDTrがターンオンしているので、ソース・ドレイン間が導通状態になり、蓄積状態ではソースはドレイン電圧(VCCSDI)に等しくなる。
【0069】
次に、“リセット(S)”の状態(以下、RESS状態と略す。)の場合について説明する。
選択状態のセルの場合、RESS状態のとき、電圧値がLo(Lレベル)である電圧が、ゲートに印加される。RESS状態のときは、電圧値がVMPRである電圧が、ソースに印加される。選択状態のセルの場合、RESS状態のとき、ゲートにLoの電圧が印加され、光信号検出用MOSトランジスタPDTrがオフしているので、ソース・ドレイン間が非導通状態になり、ドレインはハイインピーダンス(HiZ)となる。
【0070】
また、非選択状態のセルの場合、RESS状態のときは、電圧値がLo(Lレベル)である電圧が、ゲートに印加される。あるセルが非選択状態で、RESS状態のときは、ドレインはHiZとなる。
“変調(S)”の状態(以下、LOADS状態と略す。)において、選択状態のセルの場合、電圧値がVCCSGHRである電圧が、ゲートに印加される。選択状態のセルの場合、電圧値がVCCSDRである電圧が、ドレインに印加され、電圧値が(VCCSGHR−VthS)である電圧が、ソースに出力される。LOADS状態では、(VCCSGHR<VCCSDR)の関係が成り立つバイアス電圧を印加する必要がある。
【0071】
また、非選択状態のセルの場合、LOADS状態のとき、電圧値がLoである電圧が、ゲートに印加され、電圧値がVCCSDRである電圧が、ドレインに印加される。
続いて、“プリセット”の状態(以下、PR状態と略す。)の場合について説明する。
選択状態のセルの場合、PR状態のとき、電圧値がVCCSGHRである電圧が、ゲートに印加される。PR状態のとき、電圧値がVCCVPSである電圧が、ソースに印加される。選択状態のセルの場合、PR状態のとき、光信号検出用MOSトランジスタPDTrがターンオンしているので、ドレインはソースと同じ電圧となる。
【0072】
また、非選択状態のセルの場合、PR状態のとき、電圧値がLoである電圧が、ゲートに印加され、ドレインはVCCVPSとなる。VSCiがLoレベルのライン(=非選択ライン)はT5がターンオンし、各ラインが共通ノード(COMノード)に接続されてCOMノードがHiZとなる。
【0073】
“クリア”の状態(以下、CL状態と略す。)において、選択状態のセルの場合、電圧値が(VCCSDB×2)である電圧が、ソースに印加され、光信号検出用MOSトランジスタPDTrがターンオンしているので、ドレインはソースと同じ電圧となる。その結果、電圧値が(VCCSGHR+VCCSDB×2)の電圧が、ゲートに印加される。
【0074】
また、非選択状態のセルの場合、CL状態のとき、電圧値がLoである電圧が、ゲートに印加され、電圧値がVCCSDRである電圧が、ドレインに印加される。
次に、“リセット(N)”の状態(以下、RESN状態と略す。)の場合について説明する。
選択状態のセルの場合、RESN状態のとき、電圧値がLoである電圧が、ゲートに印加される。RESN状態のとき、電圧値がVMPRである電圧が、ソースに印加される。選択状態のセルの場合、RESN状態のとき、ドレインはHiZとなる。
【0075】
また、非選択状態のセルの場合、RESN状態のとき、電圧値がLoである電圧が、ゲートに印加される。非選択状態のセルの場合、RESN状態のとき、ドレインはHiZとなる。
なお、クリアパルス信号CLがLレベルの期間では、図3のNMOSトランジスタT5がターンオンしている。従って、RESS状態でもNMOSトランジスタT5はターンオンしてドレインはCOMノードに接続される。読み出しイネーブル信号SDR2は、RESS状態とRESN状態でHレベルとなるので、PMOSトランジスタT4がターンオフし、COMノードはフローティングとなる。
【0076】
“変調(N)”の状態(以下、LOADN状態と略す。)において、選択状態のセルの場合、電圧値がVCCSGHRである電圧が、ゲートに印加される。LOADN状態のとき、電圧値がVCCSDRである電圧が、ドレインに印加され、電圧値が(VCCSGHR−VthN)である電圧が、ソースに出力される。
【0077】
また、非選択状態のセルの場合、LOADN状態のとき、電圧値がLoである電圧が、ゲートに印加され、電圧値がVCCSDRである電圧が、ドレインに印加される。
LOADS状態と同様に、LOADN時も図3のT5がターンオンしているのでドレインはCOMノード(=HiZ)に接続される。
【0078】
図6は、センサの読み出しラインとクリアラインを説明するための図である。
【0079】
図6に示すように、m×nの画素マトリックスにおいて、各ラインが第1のラインから第mのラインまで順番に走査される。読み出しラインは、光量に応じた信号が読み出されるラインであり、クリアラインは、各セルに蓄積された電荷がクリアされるラインである。第1ラインから順番に走査が行われるので、クリア用選択信号に基づいてクリアされたラインの各セルに、その後に受光した光量に応じてホールが生成される。クリア後、読み出しライン選択信号VSBiによって読み出されるまでの時間が露出時間となる。露出時間は、読み出しラインとクリアライン間のライン数dl に比例し、シャッタースピードの設定、すなわち、1H(Hは水平ライン数を示す。以下同じ。)からmHの範囲(あるいは(1フレーム+1H以上でもよい)の設定によって変更することができる。
【0080】
図7は、垂直同期信号VSYNCと水平同期信号HSYNCのタイミングを示すタイミングチャートである。
垂直同期信号VSYNCは、周期t1毎に発生される、t2時間長さのタイミングパルスである。水平同期信号HSYNCは、周期t3毎に発生される、t4時間長さのタイミングパルスである。垂直同期信号VSYNCと水平同期信号HSYNCは、信号処理LSI2のタイミングジェネレータ26からイメージセンサLSI1へ供給される。
【0081】
垂直同期信号VSYNCが供給されると、読み出しライン用シフトレジスタ5は、選択信号VSBiを順次出力する。垂直同期信号VSYNCの供給後の周期t1内において、水平同期信号HSYNCが、センサセルアレイ3のライン数(=m)だけ出力される。そして、水平同期信号HSYNCが出力されている期間t4内であってかつVGUPがLの期間に、上述した信号成分の読み出し、クリア、そしてオフセット成分の読み出しの動作が行われる期間が存在する。このVGUPがLの期間は、Hブランキング期間中の所定の期間に設定される。Hブランキング期間については、後で図9を用いて詳述する。
【0082】
周期t3内の期間t4後の期間t5内に、n個の信号成分とオフセット成分のアナログ信号VOUTSとVOUTNが出力される。
次に、イメージセンサLSI1のタイミングジェネレータ(以下、TGという)13の回路構成について図8を参照して説明する。
図8は、図1のイメージセンサLSI1のTG13の構成を示す回路ブロック図である。
【0083】
TGは、シリアルコントロールブロック71、マスタタイミング制御ブロック72、センサレジスタブロック73、シャッターコントロール部(シャッタスピード上限制御部)74、フレームコントロール部75、H・Vカウンタ76、垂直スキャン制御ブロック77、水平スキャン制御ブロック78、アナログ制御ブロック79を含む。
【0084】
シリアルコントロールブロック71には、当該シリアルコントロールブロック71と、信号処理LSI2のレジスタ14との間のインターフェース信号である3線シリアルI/F信号が入出力される。
マスタタイミング制御ブロック72には、信号処理LSI2のTG26からセンサ駆動クロックSCLK,水平同期信号HSYNC及び垂直同期信号VSYNCが入力される。またTG13には、信号処理LSI2からのクロック指定信号CLK_SELと、スタンバイ信号STANDBYが入力されている。
【0085】
シリアルコントロールブロック71は、信号処理LSI2のレジスタ23に書き込まれているシャッタスピードの設定データ,レギュレータ8の設定データ及びシステムクロック情報などをシリアルI/F信号として入力し、これらのデータについてライトデータ,ライトアドレス及びライトストローブ信号WRを出力し、センサレジスタブロック73に供給する。
【0086】
前記センサレジスタブロック73は、上記の入力信号に応じて、ラインシャッタスピード設定信号,フレームシャッタスピード設定信号,フレームモード設定信号,クリアパルス幅制御設定信号,クリアパルス印加回数設定信号,ゲイン設定信号及びレギュレータ電圧設定信号を出力する。
一方、マスタタイミング制御ブロック72は、前述の各種入力信号に基づいて、ピクセルクロック,水平リセットパルス,垂直リセットパルス及びリセット信号を出力する。
【0087】
シャッタコントロール部(シャッタスピード上限制御部)74には、センサレジスタブロック73からのラインシャッタスピード設定信号及びフレームシャッタスピード設定信号が入力され、出力としてラインシャッタスピードデータ及びフレームシャッタスピードデータを出力する。
【0088】
フレームコントロール部75には、前記マスタタイミング制御ブロック72からのピクセルクロック,垂直リセットパルス及びリセット信号と、前述のスタンバイ信号STANDBYが入力され、出力としてフレームカウント値,フレーム制御データ及びバリッド(VALID)制御信号を出力する。
また、H・Vカウンタ76には、前記マスタタイミング制御ブロック72からのピクセルクロック,水平リセットパルス,垂直リセットパルス及びリセット信号が入力され、出力としてラインカウント値及びピクセルカウント値を出力する。
【0089】
垂直スキャン制御ブロック77には、入力として、前記シャッタコントロール部74からのラインシャッタスピードデータ及びフレームシャッタスピードデータ、前記フレームコントロール部75からのフレームカウント値,フレーム制御データ及びバリッド(VALID)制御信号、前記センサレジスタブロック73からのクリアパルス幅制御設定信号及びクリアパルス印加回数設定信号、前記マスタタイミング制御ブロック72からのピクセルクロック及びリセット信号、クロック指定信号CLK_SEL、前記H・Vカウンタ76からのラインカウント値及びピクセルカウント値が入力される。
【0090】
垂直スキャン制御ブロック77は、出力としてクリアライン用シフトデータAV,クリアライン用シフトクロックVCLK_ASR,クリアライン用シフトレジスタリセット信号VSFRA_RST,クリアライン選択イネーブル信号CLS,読み出しライン用シフトデータBV,読み出しライン用シフトクロックVCLK_BSR,読み出しライン用シフトレジスタリセット信号VSFRB_RST,読み出しライン選択イネーブル信号VSM,蓄積時全ライン選択信号VGUP,蓄積イネーブル信号SDI,読み出しイネーブル信号SDR,クリア前ゲートプリセット信号PR,クリアパルスCLを出力する。
【0091】
水平スキャン制御ブロック78には、入力として、前記フレームコントロール部75からのバリッド(VALID)制御信号、前記H・Vカウンタ76からのラインカウント値及びピクセルカウント値、前記センサレジスタブロック73からのクリアパルス幅制御設定信号、前記マスタタイミング制御ブロック72からのピクセルクロック及びリセット信号、クロック指定信号CLK_SELが入力される。
【0092】
水平スキャン制御ブロック78は、出力としてラインメモリ選択用シフトデータAH,ラインメモリ選択用シフトクロックCIN,ラインメモリ選択イネーブル信号HSC_CK,蓄積信号用ラインメモリリセット信号RESS,蓄積信号用ラインメモリデータロード信号LOADS,オフセット用ラインメモリリセット信号RESN,オフセット用ラインメモリデータロード信号LOADNを出力する。
【0093】
上記のクロック指定信号CLK_SELは、システムクロック信号CLKINの周波数の高低を示す信号であるが、このCLK_SELは垂直スキャン制御ブロック77及び水平スキャン制御ブロック78に供給されている。各制御ブロック77及びク78では、クロック指定信号CLK_SELのH,Lレベルに応じて各ブロック77及びク78から出力される各種センサ駆動信号の出力タイミングを制御できるようになっている。
【0094】
アナログ制御ブロック79には、前記フレームコントロール部75からのバリッド(VALID)制御信号、前記H・Vカウンタ76からのラインカウント値及びピクセルカウント値、前記センサレジスタブロック73からのゲイン設定信号、スタンバイ信号STANDBYが入力され、出力としてアナログアンプゲイン制御信号,アンプ用駆動クロックCDL,スタンバイ制御信号を出力する。
【0095】
そして、前記フレームコントロール部75からのバリッド(VALID)制御信号はVALID信号としてTG13から信号処理LSI2へ出力されるようになっている。
また、前記センサレジスタブロック73からのレギュレータ電圧設定信号と、前記アナログ制御ブロック79からのスタンバイ制御信号とは、図1のイメージセンサLSI1のセンサ駆動バイアス発生用レギュレータ8に入力される。
【0096】
前記アナログ制御ブロック79からのアナログアンプゲイン制御信号とアンプ用駆動クロックCDLとは、図1のイメージセンサLSI1の出力アンプ12の制御用信号となる。
【0097】
図9はセンサセルアレイ3の光電変換を制御する各信号を示すタイミングチャートである。センサセルアレイ3は、“蓄積”、“リセット(S)”、“変調(S)”、“プリセット”、“クリア”、“リセット(N)”及び“変調(N)”の各状態の繰返しによって、光学像を電気信号に変換して出力する。図9はこれらの各状態における信号の様子を示している。センサセルアレイ3は、図7の垂直同期信号VSNYC及び水平同期信号HSYNCを単位時間とした所定のフレームレートで動作する。
【0098】
図9の例では、あるラインカウント信号ROWCTにおいて、HSYNCが、ピクセルクロック信号PXLCTが1から80までLレベルであり、さらにPXLCTが5から22までがLOADS(リセット(S)+変調(S))状態に、PXLCTが27から44までがCL(プリセット+クリア)状態に、PXLCTが45から63までがLOADN(リセット(N)+変調(N))状態に割り当てられている。
【0099】
なお、各制御信号はTG13によって生成され出力される。TG13は、論理回路で構成されるが、その論理回路は、Verilog−HDL、VHDL等のHDL(Hardware Description Language:ハードウエア記述言語)を利用した設計システムを用いれば、自動設計することができる。
【0100】
先ず、蓄積状態について説明する。
図7に示すHブランキング期間中の所定期間(図9の第5ピクセル〜第63ピクセル)以外の期間が蓄積期間である。蓄積期間には、全画素が蓄積状態となる。この期間には、蓄積時全ライン選択信号VGUPはHレベルで、蓄積イネーブル信号SDI及びクリアパルス信号CLはLレベルである。図2に示すように、蓄積時全ライン選択信号VGUPがHレベルとなることによって全てのライン選択信号VSCiがHレベルとなり、ドレイン・ゲート電圧供給回路VC1iの動作を示す上記表1に示すように、ゲート電圧VPGiはVCCSGHIとなる。また、ドレイン電圧VPDiは電圧VCCSDIとなる。また、この期間には、クリア前ゲートプリセット信号PRもLレベルであり、ソース電圧供給回路VC2hの動作を示す上記表2に示すように、ソース電圧供給回路VC2hはソース電圧を供給しない。この場合には、セルアレー中の全てのセルのソースは、光信号検出用MOSトランジスタPDTrがターンオンしドレイン電圧に一致する。
【0101】
Hブランキング期間の第5ピクセルにおいて蓄積期間は終了し信号読み出しが開始される。この信号読み出しのための期間(LOADS,CL,LOADN期間)においても、受光光量に基づくホールの蓄積は継続されるが、各セルは蓄積期間とは異なる設定値に設定される。また、信号読み出しのための期間には、クリアライン、読み出しライン又は非選択ラインでは、各セルは個別の設定値に設定される。
【0102】
先ず、リセット(s)状態について説明する。図9に示すように、この期間においても、全てのセルに共通の設定が行われる。
図9に示すように、クリアパルス信号CL及びクリア前ゲートプリセット信号PRはLレベルであり、ソース電圧供給回路VC2hはソース電圧を供給しない。この期間においては、蓄積信号用ラインメモリリセット信号RESSがハイアクティブとなり、図2のスイッチSW22がオンとなって、ラインメモリを構成するコンデンサC2 の端子電圧はVMPRにチャージされる。更に、蓄積信号用ラインメモリデータロード信号LOADS及びラインメモリデータロード信号LOADもハイアクティブとなり、スイッチSW21及びスイッチSW11がオンとなって、ソースラインを電圧VMPRで初期化する。
【0103】
一方、蓄積時全ライン選択信号VGUPはHからLに変化し、全てのライン選択信号VSCiはLレベルに変化する。従って、表1に示すように、ゲート電圧VPSGiは全てL(GND)レベルとなる。また、蓄積イネーブル信号SDIはHレベルであり、SDR2もHレベルであるため、表1に示すように、図3中のT5がターンオンしているので、全てのセルのドレインは共通に接続され(COMノード)、そのCOMノードはHiz状態となる。
【0104】
次に、変調(s)状態について説明する。
図9に示すように、CL,PRはLレベルを維持しており、ソース電圧供給回路VC2hはソースラインに電圧を供給していない。各セルに設定した電圧値に応じた出力がソースラインを介して出力される。即ち、クリアライン及び非選択ラインについてはライン選択信号VSCiはLレベルのままであり、ゲート電圧はL(GND)レベルである。また、読み出しイネーブル信号SDR2もLレベルであるので、ドレイン電圧VPDiはVCCSDRとなる。
【0105】
読み出しラインについてはライン選択信号VSCiはHレベルである。クリアパルス信号CL及び信号SDRがLレベルであるので、ゲート電圧VPGiはVCCSGHRである。ドレイン電圧VPDiはVCCSDRである。これにより、ソース電圧VPSiには電圧(VCCSGHR−VthS)が現れる。なお、VthSは、蓄積されたホールに応じて変化する。ソースラインの電圧(VCCSGHR−VthS)は、スイッチSW21を介してラインメモリを構成する各コンデンサC2 に蓄積される。
【0106】
次に、相関2重サンプリング処理のために、読み出しラインの各セルに蓄積されているホールを除去(クリア)するためのCL状態を設定する。ホールの除去のためには極めて高い電圧をゲートに印加する必要があり、クリア状態の前にプリセット状態を設定して、倍圧回路を利用して高電圧を得るようになっている。なお、読み出しラインのクリアと同時にクリアラインの各セルのクリアも行うようになっている。
【0107】
先ず、プリセット状態においては、読み出しラインとクリアラインについては、ライン選択信号VSCiはHレベルである。クリアパルス信号CL及び信号SDRはLレベルであるので、ゲート電圧VPGiはVCCSGHRである。なお、非選択ラインについては、ライン選択信号VSCiがLレベルであるので、ゲート電圧はL(GND)レベルである。
【0108】
また、クリアパルス信号CLはLレベルで、クリア前ゲートプリセット信号PRはHであるので、表2に示すように、全ソースラインの電圧VPShは電圧VCCVPS(例えば0V)にリセットされる。また、図4のコンデンサC1 は電圧VCCSDBがチャージされ、ND2点は電圧VCCSDBとなる。なお、蓄積イネーブル信号SDI及び読み出しイネーブル信号SDR2はHレベルであるので、ドレインは、光信号検出用MOSトランジスタPDTrがターンオンして、ソースと同電位になる。
【0109】
次に、クリア状態においては、クリア前ゲートプリセット信号PRがHレベルからLレベルに変化し、クリアパルス信号CLがLレベルからHレベルに変化する。この場合には、表2に示すように、ソースラインは電圧VCCSDB×2に変化する。また、読み出しラインとクリアラインについては、クリアパルス信号CL及びライン選択信号VSCiがHレベルであるので、表1に示すように、ゲートはフローティング状態となる。従って、ソースとゲートとのカップリング容量によって、ゲート電圧VPGiは(VCCSDB×2+VCCSGHR)となる。また、ドレインはプリセット状態時と同様に、光信号検出用MOSトランジスタPDTrがターンオンして、ソースと同電位になる。
【0110】
一方、非選択ラインについては、ゲート電圧VPGiはL(GND)レベルのままであり、ドレイン電圧VPDiは、トランジスタT4 がオンとなるので、VCCSDRとなる。
【0111】
次に、リセット(N)状態を経て、変調(N)状態に移行する。これらのリセット(N)状態及び変調(N)状態は、夫々リセット(s)状態及び変調(s)状態と略同様の信号が設定される。即ち、リセット(N)状態においては、蓄積信号用ラインメモリリセット信号RESS,蓄積信号用ラインメモリデータロード信号LOADSに夫々代えてオフセット用ラインメモリリセット信号RESN,オフセット用ラインメモリデータロード信号LOADNがハイアクティブとなる。これにより、スイッチSW32がオンとなって、ノイズ読み出し用のラインメモリを構成するコンデンサC3 がVMPRにチャージされる。更に、スイッチSW31及びスイッチSW11がオンとなって、ソースラインは電圧VMPRで初期化される。
【0112】
変調(N)状態においては、クリアパルス信号CL,クリア前ゲートプリセット信号PRはLレベルであり、ソース電圧供給回路VC2hはソースラインに電圧を供給しない。クリアライン及び非選択ラインについてはライン選択信号VSCiはLレベルであり、ゲート電圧VPGiはL(GND)である。また、読み出しイネーブル信号SDR2もLレベルであるので、ドレイン電圧VPDiはVCCSDRとなる。
【0113】
読み出しラインについてはライン選択信号VSCiはHレベルである。クリアパルス信号CL及び信号SDRがLレベルであるので、ゲート電圧VPGiはVCCSGHRである。ドレイン電圧VPDiはVCCSDRである。これにより、ソース電圧VPShには電圧(VCCSGHR−VthN)が現れる。このソースに現れる電圧は、直前にクリア状態に設定されていることから、オフセット成分に対応したものとなっている。ソースラインの電圧(VCCSGHR−VthN)は、スイッチSW31を介してラインメモリを構成する各コンデンサC3 に蓄積される。
【0114】
こうして、コンデンサC2 には信号成分が蓄積され、コンデンサC3 にはオフセット成分が蓄積される。水平シフトレジスタ11からの選択信号HSCANhによって、スイッチSW23,SW33が順番にオンになることで、コンデンサC2 ,C3 に蓄積された電圧が夫々出力アンプ36,38を介してVOUTS,VOUTNとして出力される。
【0115】
ところで、前述したように、信号処理LSI2には、システムクロック信号CLKINが供給されており、そのシステムクロック信号CLKINに基づいて、信号処理LSI側のTG26は、種々のタイミング信号を生成して信号処理LSI2内の各部に供給する一方、システムクロック信号CLKINに依存したセンサ駆動クロック信号SCLK、垂直同期信号VSYNC、水平同期信号HSYNCを生成してイメージセンサLSI1に供給している。
【0116】
しかしながら、フレームレートを変更する場合、入力されるシステムクロック信号の周波数を変更すると、固体撮像素子としてのイメージセンサLSI1の駆動タイミングが変化して、画質が劣化する不具合を生じる虞れがある。
【0117】
その対策としては、入力されるシステムクロック信号の周波数に応じた適切な駆動パルス制御が必要となる。
【0118】
即ち、信号処理部としての信号処理LSI2に入力したシステムクロック信号の周波数をイメージセンサLSI1に通知する手段を設け、複数のシステムクロック信号の周波数の変化に対応することが必要である。
【0119】
より具体的には、信号処理LSI2より通知されたシステムクロック信号の周波数に応じて、イメージセンサLSI1の駆動タイミングを制御する、例えば、イメージセンサLSI1における各種の駆動パルスの幅を一定に保つように制御することで、Hブランキング期間を一定とすることができ、Hブランキング期間が変化することでノイズが増加するのを防ぎ、画質を一定に保つことがで可能となる。
【0120】
前述した通知する手段としては、(1)システムクロック信号CLKINの周波数に対応したクロック指定信号CLK_SELのレベルに基づいてイメージセンサLSI1へ通知を行う手段と、(2)システムクロック信号CLKINの周波数に応じてビット割り当てされた値を、信号処理LSI2とイメージセンサLSI1それぞれに配置したレジスタ23,14間で送受することによって通知を行う手段と、のいずれか一方を設けることができる。
【0121】
上記(1)のクロック指定信号CLK_SELによる手段については、イメージセンサLSI1のTG13には、クロック指定信号CLK_SELが、入力されるようになっている。クロック指定信号CLK_SELは、イメージセンサLSI1が動作されるクロック周波数の指定を明示的に、イメージセンサLSI1に知らせる、ための信号である。換言すれば、クロック指定信号CLK_SELは、入力されるシステムクロック信号CLKINの周波数が所定の周波数に対して高いか低いかをイメージセンサLSI1に知らせるための信号である。クロック指定信号CLK_SELのH,Lレベルに基づいて、TG13が各種制御信号の出力タイミングを変更することが可能となる。
【0122】
上記(2)のレジスタ機能による手段については、イメージセンサLSI1内のレジスタ14と信号処理LSI2内のレジスタ23は、互いに同じデータをストアするようになっているので、一方のレジスタの内容が変更されると、3線シリアルインターフェース15を介して、他方のレジスタの内容も変更される。よって、システムクロック周波数のデータが、信号処理LSI2内のレジスタ23に書き込まれると、さらに、そのデータは、3線シリアルインターフェース15を介して、イメージセンサLSI1内のレジスタ14に書き込まれる。イメージセンサLSI1では、システムクロック周波数のデータに基づいて、TG13が各種制御信号の出力タイミングを変更することが可能となる。
【0123】
また、前記クロック指定信号CLK_SELは、基板への実装時に設定することも可能である。この場合は、基板毎に動作クロックを規定しているシステムクロックとの整合を取ることができる。
【0124】
図10〜図15に、上記クロック指定信号CLK_SELなどによって通知を受けたTG13における、垂直スキャン制御ブロック77及び水平スキャン制御ブロック78の構成例を示している。
【0125】
図10は、垂直スキャン制御ブロック77の構成を示すブロック図である。垂直スキャン制御ブロック77は、カウント設定1比較器81、第1のパルス発生手段82、カウント設定2比較器83、第2のパルス発生手段84を含む。図10のように、垂直スキャン制御ブロック77は、カウント設定1比較器81及び第1のパルス発生手段82が一体化した組と、カウント設定2比較器83及び第2のパルス発生手段84が一体化した組との、2つのカウント設定比較器とパルス発生手段の組を有して構成されている。
【0126】
カウント設定1比較器81及びカウント設定2比較器83には、フレームカウント値,ラインカウント値及びピクセルカウント値が入力され、第1のパルス発生手段82及び第2のパルス発生手段84には、バリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号及びクロック指定信号CLK_SELが入力されている。
【0127】
システムクロック信号CLK_INの高低を示すクロック指定信号CLK_SELがHレベルかLレベルかで、比較設定値の異なったカウント設定1比較器81及びカウント設定2比較器83の一方が選択されるように構成されている。
【0128】
すなわち、クロック指定信号CLK_SELがLレベルのときは、カウント設定1比較器81及び第1のパルス発生手段82の組がその反転イネーブル端子EnableがHレベルとなることによって選択され、入力されるフレームカウント値,ラインカウント値及びピクセルカウント値の各カウント値が第1の比較設定値の組と比較され、第1のパルス発生手段82は、そのカウント比較結果と、入力されているバリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号とに基づいて制御され、出力としてクリアライン選択イネーブル信号CLS1,読み出しライン選択イネーブル信号VSM1,蓄積時全ライン選択信号VGUP1,クリア前ゲートプリセット信号PR1及びクリアパルスCL1の組を、垂直スキャン制御ブロック77からの出力(CLS,VSM,VGUP,PR及びCL)として出力する。
【0129】
同様に、クロック指定信号CLK_SELがHレベルのときは、カウント設定2比較器83及び第2のパルス発生手段84の組がそのイネーブル端子EnableがHレベルとなることによって選択され、入力されるフレームカウント値,ラインカウント値及びピクセルカウント値の各カウント値が第2の比較設定値の組と比較され、入力の各カウント値がこの第2の組の比較設定値に達したら、第2のパルス発生手段84は、そのカウント比較結果と、入力されているバリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号とに基づいて制御され、出力としてクリアライン選択イネーブル信号CLS2,読み出しライン選択イネーブル信号VSM2,蓄積時全ライン選択信号VGUP2,クリア前ゲートプリセット信号PR2及びクリアパルスCL2の組を、垂直スキャン制御ブロック77からの出力(CLS,VSM,VGUP,PR及びCL)として出力する。
【0130】
図11は、垂直スキャン制御ブロック77の他の例の構成を示すブロック図である。垂直スキャン制御ブロック77は、カウント設定1比較器81、カウント設定2比較器83、セレクタ85、パルス発生手段86を含む。
【0131】
図11で図10と異なる点は、図10のパルス発生手段82,84を1つにしたパルス発生手段86を形成したものである。
【0132】
具体的には、カウント設定1比較器81及びカウント設定2比較器83には共通に、フレームカウント値,ラインカウント値及びピクセルカウント値が入力されており、1つにされたパルス発生手段86には、バリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号及びクロック指定信号CLK_SELが入力され、かつカウント設定1比較器81及びカウント設定2比較器83のそれぞれのカウント比較結果1,2を、クロック指定信号CLK_SELのL,Hレベルに応じてセレクタ85で切り換えて前記パルス発生手段86に入力しており、これらの入力に基づいてパルス発生手段86は制御され、出力としてクリアライン選択イネーブル信号CLS,読み出しライン選択イネーブル信号VSM,蓄積時全ライン選択信号VGUP,クリア前ゲートプリセット信号PR及びクリアパルスCLを出力する。
【0133】
以上の図10と図11の例は、システムクロック周波数の高低に応じて異なった比較設定値のカウント設定比較器を選択するものである。これに対して、図12及び図13は、クリアパルスのパルス幅を変更可能である場合に、クリアパルスのパルス幅の大小に応じて異なった比較設定値のカウント設定比較器を選択するものである。
【0134】
図12は、垂直スキャン制御ブロック77の更に他の例の構成を示すブロック図である。垂直スキャン制御ブロック77は、カウント設定1比較器81a、第1のパルス発生手段82a、カウント設定2比較器83a、第2のパルス発生手段84aを含む。図12のように、垂直スキャン制御ブロック77は、カウント設定1比較器81及び第1のパルス発生手段82が一体化した組と、カウント設定2比較器83及び第2のパルス発生手段84が一体化した組との、2つのカウント設定比較器とパルス発生手段の組を有して構成されている。
【0135】
カウント設定1比較器81a及び第1のパルス発生手段82aには、フレームカウント値,ラインカウント値,ピクセルカウント値及びクリアパルス幅制御設定信号が入力され、カウント設定2比較器83a及び第2のパルス発生手段84aには、バリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号,クロック指定信号CLK_SEL及びクリアパルス印加回数設定信号が入力される。
【0136】
クリアパルス幅の大小を示すクリアパルス幅制御設定信号に応じて、比較設定値の異なったカウント設定1比較器81a及びカウント設定2比較器83aの一方が選択されるように構成されている。
【0137】
すなわち、クリアパルス幅制御設定信号がLレベルのときは、カウント設定1比較器81a及び第1のパルス発生手段82aの組が選択され、入力されるフレームカウント値,ラインカウント値及びピクセルカウント値の各カウント値が第1の比較設定値の組と比較され、第1のパルス発生手段82は、そのカウント比較結果と、入力されているバリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号,クリアパルス印可回数設定信号とに基づいて制御され、出力としてクリアライン選択イネーブル信号CLS1,読み出しライン選択イネーブル信号VSM1,蓄積時全ライン選択信号VGUP1,クリア前ゲートプリセット信号PR1及びクリアパルスCL1の組を、垂直スキャン制御ブロック77からの出力(CLS,VSM,VGUP,PR及びCL)として出力する。
【0138】
同様に、クリアパルス幅制御設定信号がHレベルのときは、カウント設定2比較器83a及び第2のパルス発生手段84aの組が選択され、入力されるフレームカウント値,ラインカウント値及びピクセルカウント値の各カウント値が第2の比較設定値の組と比較され、第2のパルス発生手段84aは、は、そのカウント比較結果と、入力されているバリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号とに基づいて制御され、出力としてクリアライン選択イネーブル信号CLS2,読み出しライン選択イネーブル信号VSM2,蓄積時全ライン選択信号VGUP2,クリア前ゲートプリセット信号PR2及びクリアパルスCL2の組を、垂直スキャン制御ブロック77からの出力(CLS,VSM,VGUP,PR及びCL)として出力する。
【0139】
図13は、垂直スキャン制御ブロック77の他の例の構成を示すブロック図である。垂直スキャン制御ブロック77は、カウント設定1比較器81a、カウント設定2比較器83a、セレクタ85a、パルス発生手段86aを含む。
【0140】
図13で図12と異なる点は、図12のパルス発生手段82a,84aを1つにしたパルス発生手段86aを形成したものである。
【0141】
具体的には、カウント設定1比較器81a及びカウント設定2比較器83aには共通に、フレームカウント値,ラインカウント値及びピクセルカウント値が入力されており、1つにされたパルス発生手段86aには、バリッド(VALID)制御信号,フレーム制御データ,ピクセルクロック信号及びクリアパルス印可回数設定信号が入力され、かつカウント設定1比較器81a及びカウント設定2比較器83aのそれぞれのカウント比較結果1,2を、パルス幅制御設定信号に応じてセレクタ85aで切り換えて前記パルス発生手段86aに入力しており、これらの入力に基づいてパルス発生手段86aは制御され、出力としてクリアライン選択イネーブル信号CLS,読み出しライン選択イネーブル信号VSM,蓄積時全ライン選択信号VGUP,クリア前ゲートプリセット信号PR及びクリアパルスCLを出力する。
【0142】
図14は、水平スキャン制御ブロック78の構成を示すブロック図である。水平スキャン制御ブロック78は、カウント設定1比較器91、第1のパルス発生手段92、カウント設定2比較器93、第2のパルス発生手段94を含む。図14のように、垂直スキャン制御ブロック78は、カウント設定1比較器91及び第1のパルス発生手段92が一体化した組と、カウント設定2比較器93及び第2のパルス発生手段94が一体化した組との、2つのカウント設定比較器とパルス発生手段の組を有して構成されている。
【0143】
カウント設定1比較器91及びカウント設定2比較器93には、ラインカウント値及びがピクセルカウント値が入力され、第1のパルス発生手段92及び第2のパルス発生手段94には、バリッド(VALID)制御信号,ピクセルクロック信号及びクロック指定信号CLK_SELが入力されている。
【0144】
システムクロック信号CLK_INの高低を示すクロック指定信号CLK_SELがHレベルかLレベルかで、比較設定値の異なったカウント設定1比較器91及びカウント設定2比較器93の一方が選択されるように構成されている。
【0145】
すなわち、クロック指定信号CLK_SELがLレベルのときは、カウント設定1比較器91及び第1のパルス発生手段92の組がその反転イネーブル端子EnableがHレベルとなることによって選択され、入力されるラインカウント値及びピクセルカウント値の各カウント値が第1の比較設定値の組と比較され、第1のパルス発生手段82は、そのカウント比較結果と、入力されているバリッド(VALID)制御信号及びピクセルクロック信号とに基づいて制御され、出力として蓄積信号用ラインメモリリセット信号RESS1,蓄積信号用ラインメモリデータロード信号LOADS1,オフセット用ラインメモリリセット信号RESN1,オフセット用ラインメモリデータロード信号LOADN1の組を、水平スキャン制御ブロック78からの出力(RESS,LOADS,RESN,LOADN)として出力する。
【0146】
同様に、クロック指定信号CLK_SELがHレベルのときは、カウント設定2比較器93及び第2のパルス発生手段94の組がそのイネーブル端子EnableがHレベルとなることによって選択され、入力されるラインカウント値及びピクセルカウント値の各カウント値が第2の比較設定値の組と比較され、第2のパルス発生手段94は、そのカウント比較結果と、入力されているバリッド(VALID)制御信号及びピクセルクロック信号とに基づいて制御され、出力として蓄積信号用ラインメモリリセット信号RESS2,蓄積信号用ラインメモリデータロード信号LOADS2,オフセット用ラインメモリリセット信号RESN2,オフセット用ラインメモリデータロード信号LOADN2の組を、水平スキャン制御ブロック78からの出力(RESS,LOADS,RESN,LOADN)として出力する。
【0147】
図15は、水平スキャン制御ブロック78の他の例の構成を示すブロック図である。水平スキャン制御ブロック78は、カウント設定1比較器91、カウント設定2比較器93、セレクタ95、パルス発生手段96を含む。
【0148】
図15で図14と異なる点は、図14のパルス発生手段92,94を1つにしたパルス発生手段96を形成したものである。
【0149】
具体的には、カウント設定1比較器91及びカウント設定2比較器93には共通に、ラインカウント値及びピクセルカウント値が入力されており、1つにされたパルス発生手段96には、バリッド(VALID)制御信号,ピクセルクロック信号及びクロック指定信号CLK_SELが入力され、かつカウント設定1比較器91及びカウント設定2比較器93のそれぞれのカウント比較結果1,2を、クロック指定信号CLK_SELのL,Hレベルに応じてセレクタ95で切り換えて前記パルス発生手段96に入力しており、これらの入力に基づいてパルス発生手段96は制御され、出力として蓄積信号用ラインメモリリセット信号RESS,蓄積信号用ラインメモリデータロード信号LOADS,オフセット用ラインメモリリセット信号RESN,オフセット用ラインメモリデータロード信号LOADNを出力する。
【0150】
上記のように、入力されるシステムクロック信号の周波数の高低に対応したクロック指定信号CLK_SELのH,Lレベルに基づいて垂直スキャン制御ブロック及び/又は水平スキャン制御ブロックを制御することで、システムクロック周波数に応じて動作状態の設定(例えばフレームレートの変更)を行った場合でも、画質に影響を与えるセンサ駆動パルスの幅を常に一定となるように制御することが可能となる。その結果、ノイズの低減、ノイズ増加に伴う消費電流の増加の低減、さらに暗い環境での長時間露光の実現、暗い環境下での撮影時でもフレームレートによらず一定の画質(暗電流ノイズの増加防止)の実現、が可能となる。
【0151】
図16は、システムクロック信号CLKINの周波数の変更(高低)に対しても、クリアライン選択イネーブル信号CLS,クリア前ゲートプリセット信号PR及びクリアパルスCLのパルス幅が一定となるように制御されることを示している。CLS,PR及びCLの各パルスの幅は、出力される画像信号の画質に係わるものである。
【0152】
図16(a)はシステムクロック信号CLKINが高くクロック指定信号CLK_SELがLレベルの場合における、CLS,PR及びCLの各パルス幅の状態を示し、図16(b)はシステムクロック信号CLKINが低くクロック指定信号CLK_SELがHレベルの場合における、CLS,PR及びCLの各パルス幅が図16(a)と同じとなるように制御された状態を示している。
【0153】
以上説明した本発明の実施の形態によれば、閾値電圧変調方式のMOS型イメージセンサと、前記イメージセンサの出力を信号処理する信号処理部を含む画像処理装置において、前記信号処理部に入力したシステムクロック信号の周波数を前記イメージセンサへ通知することにより、イメージセンサでは撮影時の処理において複数のシステムクロック周波数に対応することができ、システムクロック周波数の変更に伴う画質の劣化を防ぐことができる。
【0154】
尚、上記実施の形態は、固体撮像素子として閾値電圧変調方式のMOS型イメージセンサを例に説明したが、閾値電圧変調方式のMOS型イメージセンサに限定されるものではなく、他の方式のイメージセンサについても適応可能であることは言うまでも無い。
【図面の簡単な説明】
【図1】本発明の実施の形態に係わる画像処理装置の構成を示すブロック図。
【図2】本発明の実施の形態に係わるイメージセンサLSIの構成を示す回路図。
【図3】本発明の実施の形態に係わるドレイン・ゲート電圧供給回路の構成を示す回路図。
【図4】本発明の実施の形態に係わるソース電圧供給回路の構成を示す回路図。
【図5】本発明の実施の形態に係わるセンサセルへ印加するバイアス電圧を説明するための図。
【図6】本発明の実施の形態に係わる、センサの読み出しラインとクリアラインを説明するための図。
【図7】本発明の実施の形態に係わる垂直同期信号と水平同期信号のタイミングを示すタイミングチャート。
【図8】本発明の実施の形態に係わるイメージセンサLSIのタイミングジェネレータの構成を示す回路ブロック図。
【図9】本発明の実施の形態に係わるHブランキング期間における各状態における各信号の状態を説明するためのタイミングチャート。
【図10】本発明の実施の形態に係わるタイミングジェネレータの垂直スキャン制御ブロックの構成を示すブロック図。
【図11】本発明の実施の形態に係わるタイミングジェネレータの垂直スキャン制御ブロックの他の例の構成を示すブロック図。
【図12】本発明の実施の形態に係わるタイミングジェネレータの垂直スキャン制御ブロックの更に他の例の構成を示すブロック図。
【図13】本発明の実施の形態に係わるタイミングジェネレータの垂直スキャン制御ブロックの更に別の他の例の構成を示すブロック図。
【図14】本発明の実施の形態に係わるタイミングジェネレータの水平スキャン制御ブロックの構成を示すブロック図。
【図15】本発明の実施の形態に係わるタイミングジェネレータの水平スキャン制御ブロックの他の例の構成を示すブロック図。
【図16】本発明の画像処理装置に係る、システムクロック周波数の変更(高低)に対応してセンサ駆動パルスの幅を一定とするように制御した例を説明するタイミングチャート。
【符号の説明】
1…イメージセンサLSI、2…信号処理LSI、3…センサセルアレイ、6…垂直ドライブ回路、8…レギュレータ、9…蓄積信号用ラインメモリ、10…オフセット信号用ラインメモリ、13,26…タイミングジェネレータ、14,23…レジスタ、15…3線シリアルインターフェース[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an image processing device and a processing method thereof. In particular, the present invention relates to an image processing apparatus including a matrix type solid-state imaging device in which a unit pixel includes a photodiode and a transistor for detecting an optical signal, and in which a plurality of the unit pixels are arranged, and a processing method therefor.
[0002]
[Prior art]
Semiconductor image sensors are used in various image input devices. Recently, a MOS type solid-state image pickup device using a threshold voltage modulation method has a high performance image quality of a CCD (charge coupled device) and a low power consumption of a CMOS. Attention has been paid to lower costs.
[0003]
The technology of the MOS type solid-state imaging device using the threshold voltage modulation method is disclosed in, for example, Japanese Patent Application Laid-Open No. H11-195778. In a threshold voltage modulation type MOS solid-state imaging device, an image signal based on photo-generated charges accumulated in a carrier pocket of each pixel is extracted by repeating three states of initialization, accumulation, and reading. The period of the initialization state is a period in which the residual charges are discharged from the inside of the carrier pocket. The period of the accumulation state is a period in which electric charges are accumulated in the sensor cells. The period of the read state is a period in which the accumulated charge amount is voltage-modulated and read.
[0004]
[Patent Document 1]
JP-A-11-195778
[0005]
[Problems to be solved by the invention]
However, according to the technology disclosed so far, the control for generating the drive pulse of the MOS type solid-state imaging device of the threshold voltage modulation method is single, and the pulse width of the drive pulse depends on the frequency of the input system clock. Also change. For example, when changing the frame rate from 30 frames / sec to 15 frames / sec, it is necessary to change the frequency of the system clock. However, if the system clock frequency is changed, the drive timing of the threshold voltage modulation type MOS solid-state imaging device is changed. Has been changed and the image quality has been degraded.
[0006]
For example, when the system clock frequency changes, the pulse width of the clear pulse that defines the period of the initialization state and the shutter speed (in other words, the exposure time exposure time) that defines the period of the accumulation state change. When the width of the clear pulse changes, the amount of residual charge changes, and the brightness and image quality of the image signal obtained by performing signal processing on the output of the threshold voltage modulation type MOS solid-state imaging device change. The same applies when the exposure time changes. Also, when the time (corresponding to the H blanking period described later) that defines the readout period and the initialization period excluding the accumulation period changes, at this time, the threshold voltage modulation type MOS solid-state imaging device is applied in the accumulation state. Since the bias state in which noise is less likely to be generated is canceled, for example, if the time corresponding to the blanking is extended, the period of noise generation becomes longer, thereby causing a problem of increasing noise.
[0007]
In view of the above problems, an object of the present invention is to provide an image processing apparatus and a processing method thereof that can prevent deterioration in image quality even when the system clock frequency is changed.
[0008]
[Means for Solving the Problems]
An image processing apparatus according to the present invention is configured such that a matrix-type solid-state imaging device in which a plurality of unit pixels each including a photodiode and a transistor for detecting an optical signal are arranged, a system clock signal is input, and a system clock signal is input. A signal processing unit that performs signal processing on the output of the solid-state imaging element and outputs the image signal as an image signal; Means for notifying the device.
[0009]
According to such a configuration, it is possible to realize an image processing system capable of coping with the frequencies of a plurality of system clock signals, and to prevent deterioration in image quality even when the system clock frequency changes.
[0010]
In the image processing apparatus according to the aspect of the invention, it is preferable that the solid-state imaging device is a MOS solid-state imaging device using a threshold voltage modulation method.
[0011]
According to such a configuration, good image quality can be realized by using the MOS solid-state imaging device of the threshold voltage modulation method.
[0012]
In the image processing apparatus according to the aspect of the invention, it is preferable that the image processing apparatus further includes a unit that controls a drive timing of the solid-state imaging device according to a frequency of a system clock signal notified from the signal processing unit.
[0013]
According to such a configuration, by controlling the drive timing of the solid-state imaging device in response to the change in the system clock frequency notified from the signal processing unit, the image quality of the image signal is improved even when the system clock frequency changes. be able to.
[0014]
Further, in the image processing apparatus according to the aspect of the invention, it is preferable that the control unit performs control so as to keep the width of the driving pulse constant.
[0015]
According to such a configuration, even if the system clock frequency changes, the width of the driving pulse of the solid-state imaging device is constant, so that the image quality of the image signal can be kept constant.
[0016]
In the image processing apparatus according to the aspect of the invention, it is preferable that the notifying unit performs the notification based on a level of a clock designation signal corresponding to a frequency of a system clock signal.
[0017]
According to such a configuration, for example, the notification can be performed based on the H and L levels of the clock designation signal corresponding to the level of the frequency of the system clock signal, and the image quality can be uniformed according to the level of the system clock frequency. It becomes easy to control the conversion.
[0018]
In the image processing apparatus according to the aspect of the invention, the notifying unit may transmit and receive a value, which is bit-assigned according to a frequency of a system clock signal, between the signal processing unit and the registers arranged in each of the solid-state imaging devices. Is preferred.
[0019]
According to such a configuration, information of the system clock frequency can be held in each of the signal processing unit and the solid-state imaging device, and it is easy to synchronize signals between the signal processing unit and the solid-state imaging device. .
[0020]
A processing method of an image processing apparatus according to the present invention includes a matrix-type solid-state imaging device in which a plurality of unit pixels each including a photodiode and a transistor for detecting an optical signal are arranged, and a signal for performing signal processing on an output of the solid-state imaging device. A processing method for an image processing apparatus including a processing unit, wherein a frequency of a system clock signal input to the signal processing unit is notified to the solid-state imaging device so that the solid-state imaging device can handle a plurality of system clock frequencies.
[0021]
According to such a method, it is possible to realize an image processing method capable of coping with the frequencies of a plurality of system clock signals, and to prevent deterioration in image quality even when the system clock frequency changes.
[0022]
In the processing method of the image processing apparatus according to the present invention, it is preferable that the solid-state imaging device is a threshold voltage modulation type MOS solid-state imaging device.
[0023]
According to such a method, good image quality can be realized by using the MOS type solid-state imaging device of the threshold voltage modulation method.
[0024]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0025]
First, the configuration of the image processing apparatus according to the present embodiment will be described with reference to FIG.
[0026]
FIG. 1 is a block diagram showing a configuration of an image processing device including an image sensor LSI (large-scale integrated circuit) 1 as a solid-state imaging device and a signal processing LSI 2 as a signal processing device. The image sensor LSI1 is a two-dimensional solid-state imaging device, photoelectrically converts an optical image, and supplies a pixel signal based on the optical image to the signal processing LSI2. The signal processing LSI 2 performs predetermined signal processing on each received pixel signal and outputs an image signal.
[0027]
The image sensor LSI 1 includes a sensor cell array 3, a clear line shift register 4, a read line shift register 5, a vertical drive circuit 6, a booster circuit 7, a regulator 8, a storage signal line memory 9, an offset It includes a signal line memory 10, a horizontal shift register 11, an output amplifier 12, and a timing generator 13. The timing generator 13 includes a register 14 and a 3-wire serial interface 15.
[0028]
The sensor cell array 3 of the image sensor LSI 1 is, for example, a threshold modulation type solid-state imaging device as described in JP-A-11-195778. Various control signals are supplied from the timing generator 13 to each circuit, and based on the various control signals, the sensor cell array 3 outputs a pixel signal corresponding to the amount of light received by each cell. The sensor cell array 3 includes, for example, 640 × 480 cells and an area (OB area) for optical black (OB). Including the OB area, the sensor array 3 is composed of, for example, 712 × 500 cells. The image sensor LSI1 supplies to the signal processing LSI2 two output signals, a voltage output signal VOUTS of a signal component corresponding to the amount of received light and a voltage output signal VOUTN corresponding to the offset component.
[0029]
The vertical drive circuit 6 is a circuit for selecting a read line and a clear line. The read line shift register 5 and the clear line shift register 4 are circuits for specifying a read line and a clear line, respectively.
[0030]
The regulator 8 is a voltage generation circuit for generating various voltages required in the image sensor LSI1. The booster circuit 7 is a circuit for boosting the voltage supplied from the regulator 8 in order to supply a necessary voltage to the sensor cell array 3 as described later. A more detailed description of the image sensor LSI1 will be described later with reference to FIG.
[0031]
The signal processing LSI 2 includes a difference amplifier circuit 16, an optical black (hereinafter abbreviated as OB) clamp circuit 17, a programmable gain amplifier circuit (PGA) 18, an analog-digital conversion circuit (ADC) 19, and an OB control logic circuit. 20, a luminance control logic circuit 21, a luminance photometry logic circuit 22, a register 23, an image processor 24, a sequencer 25, and a timing generator 26. The register 23 stores data such as shutter speed data.
[0032]
Two analog signals VOUTS and VOUTN from the image sensor LSI1 are input to the difference amplifier circuit 16. The difference amplifier circuit 16 of the signal processing LSI 2 takes the difference between the voltage value of the signal component and the voltage value of the offset component, amplifies the difference, and outputs the difference voltage to the OB clamp circuit 17.
The OB clamp circuit 17 is a circuit for setting the black level of the input pixel signal to an appropriate black level. A cell of a predetermined number of pixels in the sensor cell array 3, that is, an OB area is shielded from light by a light shielding plate or the like. Black level adjustment is performed.
[0033]
The PGA 18 is an amplifier for adjusting a gain in, for example, one decibel unit. The signal amplified by the PGA 18 is supplied to the ADC 19. The ADC 19 converts the output of the PGA 18 into a digital signal.
For the pixels in the OB area, the luminance data of the pixels are supplied from the ADC 19 to the OB control logic circuit 20 as digital signals. The OB control logic circuit 20 inputs a signal from the ADC 19 based on a control signal from the timing generator 26, and outputs a control signal to the OB clamp circuit 17 to adjust a black level.
[0034]
Similarly, the luminance metering logic circuit 22 measures the luminance based on, for example, the data of all the green (G) pixels in one frame supplied from the ADC 19 and supplies the luminance data to the luminance control logic 21. .
The brightness control logic circuit 21 adjusts the brightness of the image by supplying a gain control signal to the PGA 18 based on the brightness data supplied from the brightness photometry logic circuit 22. Further, the brightness control logic circuit 21 writes shutter speed data to the register 23.
[0035]
Since the register 14 and the register 23 store the same data, when the content of one register is changed, the content of the other register is also changed via the 3-wire serial interface 15. You. Therefore, when the shutter speed data is written into the register 23 in the signal processing LSI 2, the data is further transferred to the register 14 in the image sensor LSI 1 via the 3-wire serial interface 15 and written. In the image sensor LSI1, a focal plane shutter is set based on shutter speed data. The function of the focal plane shutter will be described later.
[0036]
For example, on the image sensor LSI1, the width dl of the read line and the clear line of the focal plane is controlled based on the shutter speed data. When the exposure time is shortened, for example, when the image is bright, control is performed so as to reduce the width dl, that is, to reduce the number of lines between the read line and the clear line. In addition, when the exposure time is lengthened as in the case where the image is dark, control is performed so as to increase the width dl, that is, to increase the number of lines between the read line and the clear line. Further, when the exposure is not appropriate only by controlling the shutter speed, the luminance control logic circuit 21 controls the signal amount to be appropriate by adjusting the signal gain.
[0037]
The signal processing LSI 2 is supplied with a system clock signal CLKIN, and the timing generator 26 generates various timing signals based on the system clock signal CLKIN. The signal processing LSI 2 supplies various synchronization signals from various timing signals to the image sensor LSI 1. The synchronization signals include a sensor drive clock signal SCLK, a vertical synchronization signal VSYNC, and a horizontal synchronization signal HSYNC. The image sensor LSI1 synchronizes based on these synchronization signals and supplies an image signal to the signal processing LSI2. Therefore, each signal of SCLK, VSYNC, and HSYNC depends on the system clock signal CLKIN.
[0038]
In the register 23 of the signal processing LSI 2, various parameters, for example, parameters for making the whole or a part brighter are stored in the register 23. 2 It is input and stored via a C-Bus (Isquare Seabass) I / F.
In the signal processing LSI 2, the image processor 24 is a circuit for generating an image based on RGB signals, and the sequencer 25 is a circuit for driving the image processor 24.
[0039]
A clock designation signal CLK_SEL is further input to the timing generator 13 of the image sensor LSI1. CLK_SEL is a signal for explicitly instructing the image sensor LSI1 to specify the clock frequency at which the image sensor LSI1 is operated, that is, for inputting a high / low instruction of the clock to the image sensor LSI1 as a control signal. The timing generator 13 changes the output timing of various control signals based on CLK_SEL. Further, the standby signal STANDBY is input to the timing generator 13.
[0040]
Data such as shutter speed, voltage setting of a regulator, designation of a scan direction, and the like are input to a register 14 of the image sensor LSI 1 via a three-wire serial interface 15 and stored.
Further, the image sensor LSI1 supplies a valid signal VALID as one control signal to the timing generator 26 of the signal processing LSI2. VALID is a signal indicating that valid image data is being output from the image sensor LSI1. When this signal is active, valid image data is output from the image sensor LSI1, so that the signal processing LSI2 can know that the data can be used for photometry and the like.
[0041]
Next, the configuration of the image sensor LSI1 will be described. FIG. 2 is a circuit diagram showing a configuration of the image sensor LSI1.
The sensor cell array 3 is a matrix solid-state imaging device including m × n (m rows and n columns) cells S11 to Smn. One cell corresponds to one unit pixel. Each cell corresponding to each unit pixel includes a photodiode PDS and a MOS transistor PDTr which is an insulated gate type field effect transistor for detecting an optical signal. The photodiode PDS includes an impurity diffusion region and a well region, and a hole (hole) is generated in the well region according to incident light. The well region is shared with the optical signal detection MOS transistor PDTr, and forms a gate region of the optical signal detection MOS transistor PDTr. The impurity diffusion region of the photodiode PDS and the drain diffusion region of the MOS transistor PDTr for detecting an optical signal are integrally formed on the surface of the well region. The drain diffusion region is formed so as to surround the outer periphery of the ring-shaped gate electrode. A source diffusion region is formed at the center of the ring-shaped gate electrode. A carrier pocket is formed in the well region below the gate electrode and around the source diffusion region so as to surround the source diffusion region. Details of the sensor structure are described in JP-A-11-195778.
[0042]
In order to obtain a signal corresponding to the light amount from the sensor cell array 3, in each of the three states of accumulation, reading, and clearing, a predetermined bias voltage is applied to the gate, source, and drain of each cell, thereby corresponding to the light amount. A signal can be obtained. Briefly, in the accumulation state, holes generated according to the amount of light incident on the photodiode PDS are accumulated in the carrier pocket. In the read state, a signal voltage is read based on the accumulated holes. The read signal voltage is a voltage signal corresponding to a difference between the gate voltage and a threshold value changed according to the amount of received light. In the clear state, the booster circuit 7 boosts the source voltage of the optical signal detection MOS transistor PDTr to a predetermined value, and also boosts the gate voltage to a predetermined value by the coupling capacitance between the ring gate and the source. The signal detection MOS transistor PDTr is turned on, and a channel is formed below the ring gate. Therefore, the drain voltage has a value substantially equal to the source voltage (when the drain voltage VD = VG-Vth and the gate voltage VG is sufficiently higher than the source voltage), and the accumulated depletion layer under the source, channel, and drain is expanded. The holes are swept toward the substrate to discharge residual charges such as holes. After clearing, an image signal can be obtained by reading an offset voltage including a noise component and calculating a difference between the signal voltage and the offset voltage. By performing the above-described operation for each cell and obtaining an image signal, a two-dimensional image signal can be obtained. The bias conditions, that is, the gate, source, and drain bias voltages of each cell in each state will be described later.
[0043]
The clear line shift register 4 is a circuit for specifying a line to be cleared. The clear line shift register 4 receives the clear line shift data AV, the clear line shift clock signal VCLK_ASR, and the clear line shift register reset signal VSFRA_RST. The clear line shift register 4 outputs clear line selection signals VSA1 to VSAm for selecting a line for clearing the accumulated charge in the matrix-like sensor cell array 3.
[0044]
The read line shift register 5 is a circuit for specifying a read line. The read line shift register 5 receives the read line shift data BV, the read line shift clock signal VCLK_BSR, and the read line shift register reset signal VSFRB_RST. The read line shift register 5 outputs read line selection signals VSB1 to VSBm for selecting a line from which a signal voltage is read in the matrix-like sensor cell array 3.
[0045]
By providing the clear line shift data AV and the read line shift data BV at the output timing determined based on the shutter speed data, the clear line shift register 4 and the read line shift register 5 are sequentially selected. Output a signal. That is, the read line shift data BV is generated at a predetermined timing with respect to the vertical synchronization signal VSYNC, but the phase relationship between the read line shift data BV and the clear line shift data AV is determined by the shutter speed. Then, with the phase relationship maintained, the clear line shift register 4 and the read line shift register 5 sequentially output selection signals. As described later, when a read line and a clear line exist in one frame, two lines in the sensor array are designated and selected.
[0046]
The vertical drive circuit 6 includes two AND circuits 31, 32, an OR circuit 33, a buffer circuit 34, and a drain / gate voltage supply circuit VC1i (i is any one of 1 to m.) And the same.). One AND circuit 31 receives a clear line selection signal VSAi and a clear line selection enable signal CLS as inputs. The other AND circuit 32 receives a read line select signal VSBi and a read line select enable signal VSM for three operations of signal read, clear, and noise read as inputs. The OR circuit 33 receives the output signals of the AND circuits 31 and 32 and the storage-time all-line selection signal VGUP as inputs. The buffer circuit 34 receives an output signal from the OR circuit 33 as an input. The output signal of each buffer circuit 34 is supplied to the drain / gate voltage supply circuit VC1i as a line selection signal VSCi.
[0047]
The drain / gate voltage supply circuit VC1i receives an accumulation enable signal SDI, a read enable signal SDR2, and a clear pulse signal CL in addition to the line selection signal VSCi. The drain-gate voltage supply circuit VC1i selects and outputs a voltage to be applied to the gates and drains of all cells on the corresponding line. That is, the drain / gate voltage supply circuit VC1i supplies the drain voltage VPDi and the gate voltage VPGi to each cell of each line. The details of the drain / gate voltage supply circuit VC1i will be described later.
[0048]
A source voltage supply circuit VC2h (h is any one of 1 to n; the same applies hereinafter) is provided for each column of the matrix. The clear pulse signal CL and the pre-clear gate preset signal PR are input to the source voltage supply circuit VC2h. The source voltage supply circuit VC2h supplies a source voltage VPSh to the sources of all cells in each column. The details of the source voltage supply circuit VC2h will be described later.
[0049]
A source line corresponding to each column is connected to the line memory 9 for accumulation signals and the line memory 10 for offset signals via a switch SW1h to which a line memory data load signal LOAD is input.
The accumulation signal line memory 9 includes a selection circuit HSh corresponding to each column. Each selection circuit HSh includes a charge storage capacitor C2, a read switch SW21, a reset switch SW22, and an output switch SW23.
[0050]
The offset signal line memory 10 includes a selection circuit HNh corresponding to each column. Each selection circuit HNh includes a charge storage capacitor C3, a read switch SW31, a reset switch SW32, and an output switch SW33. When the storage signal line memory data load signal LOADS is input to the storage signal line memory 9, SW21 is turned on, and a voltage corresponding to the amount of light is applied from each source line to the capacitor C2. Electric charges corresponding to the voltage are accumulated. The pixel signals for one line selected by the read line shift register 5 are stored in the accumulation signal line memory 9 in accordance with LOADS.
[0051]
The storage signal line memory reset signal RESS to the storage signal line memory 9 is a signal for setting the capacitor C2 to a predetermined voltage VMPR immediately before reading the signal. The voltage VMPR is supplied to the capacitor C2 from the power supply 35 generated by the regulator 8 by turning on the reset switch SW22.
[0052]
Then, the switches SW23 of the respective selection circuits HSh of the accumulation signal line memory 9 are sequentially turned on by the selection signal HSCANh from the horizontal shift register 11. Since the turned-on SW 23 outputs a voltage corresponding to the electric charge accumulated in the capacitor C2, the pixel signals of one line selected by the read-out line shift register 5 are sequentially output as the VOUTS signal via the output amplifier 36 via the output amplifier 36. Is output.
[0053]
When the line memory data load signal LOADN for the offset component accumulation signal is input to the offset signal line memory 10, the switch SW31 is turned on, and a voltage corresponding to the offset component is applied from each source line to the capacitor C3. An electric charge corresponding to the voltage is accumulated. The pixel signals for one line selected by the read line shift register 5 are stored in the offset signal line memory 10 in accordance with the offset component accumulation signal line memory data load signal LOADN. The offset signal line memory reset signal RESN to the offset signal line memory 10 is a signal for setting the capacitor C3 to the predetermined voltage VMPR immediately before reading the offset component signal. The voltage VMPR is supplied from the power supply 37 generated by the regulator 8 to the capacitor C3 by turning on the reset switch SW32.
[0054]
Then, the horizontal shift register 11 turns on the switches SW33 of the respective selection circuits HNh of the offset signal line memory 10 in order. Since the turned-on SW 33 outputs a voltage corresponding to the electric charge accumulated in the capacitor C3, the offset component signal of the pixel signal of one line selected by the read line shift register 5 is sequentially output as the VOUTN signal. The signal is output via the amplifier 38. Two voltage analog signals VOUTS and VOUTN from the image sensor LSI1 are input to the difference amplifier circuit 16 of the signal processing LSI2.
[0055]
FIG. 3 is a circuit diagram showing a configuration of the drain-gate voltage supply circuits VC11 to VC1m of FIG. The drain / gate voltage supply circuit VC1i includes a NAND circuit, an inverter circuit, and a transistor, and outputs a drain voltage VPD and a gate voltage VPG according to various input signals.
[0056]
A clear pulse signal CL, an accumulation enable signal SDI, and a read enable signal SDR2 are input to each of the drain / gate voltage supply circuits VC1i. , And applied to the drain and gate of each sensor cell.
[0057]
The sensor cell array 3 has the following state. These states are, in detail, “accumulation”, “reset (S)”, “modulation (S)”, “preset”, “clear”, “reset (N)” and “modulation (N)”. An optical image is converted into an electric signal and output by repeating these states. The accumulation enable signal SDI is a low active signal and is a signal indicating an accumulation period. The read enable signal SDR2 is a signal generated based on the signal SDR indicating a period other than the accumulation period, and is a low active signal during modulation, offset modulation, and clearing. Further, the line selection signal VSCi is used for selecting a read line and a clear line, and the clear pulse signal CL is set in a period during which residual charges such as accumulated holes are discharged.
[0058]
In FIG. 3, it is assumed that clear pulse signal CL is at L level and line select signal VSCi is at H level. In this case, the PMOS transistor T1 and the NMOS transistor T2 are turned on, and the PMOS transistor T3 is turned off. Then, the gate voltage VPGi becomes the voltage VCCSGHI or the voltage VCCSGHR. The PMOS transistor T1 is an enhanced type MOS transistor and the NMOS transistor T2 is a depletion type MOS transistor.
[0059]
Conversely, when the clear pulse signal CL is at the H level and the line selection signal VSC is at the L level, the transistors T1 and T2 are turned off and the transistor T3 is turned on. In this case, the gate voltage VPGi is a low level voltage. When the clear pulse signal CL and the line selection signal VSCi are at the H level, the transistors T1, T2, and T3 are turned off, and the gates are in a floating state.
[0060]
When the clear pulse signal CL is at L level or the line selection signal VSC is at L level, the NMOS transistor T5 is turned on. The sources of the transistors T5 in each line are commonly connected to form a COM node. When the transistor T5 is on, the drain of each line is connected to the COM node and enters a floating state. When the transistor T5 is turned on and the accumulation enable signal SDI is at the L level, the PMOS transistor T6 and the NMOS transistor T7 are also turned on, and the drain voltage VPDi becomes the voltage VCCSDI. When the read enable signal SDR2 goes low while the transistor T5 is on, the PMOS transistor T4 also turns on, and the drain voltage VPDi becomes the voltage VCCSDR. When only the transistor T5 among the transistors T4 to T7 is in the ON state, all the drains are connected to the floating COM node and become HiZ.
[0061]
The transistor T1 is supplied with the voltage VCCSGHI when the accumulation enable signal SDI is at the L level, and is supplied with the voltage VCCSGHR when the signal SDR is at the L level.
[0062]
That is, the circuit of FIG. 3 obtains the states shown in Table 1 below. Note that Table 1 shows only the H level and the L level of the signal of interest.
Figure 2004228867
FIG. 4A is a circuit diagram showing a configuration of the source voltage supply circuits VC21 to VC2n in FIG. The source voltage supply circuit VC2h includes a capacitor and a transistor, and outputs a source voltage VPSh according to various input signals.
FIG. 4B shows a circuit for generating the signals S1, S2, S3 and S4 in FIG. 4A.
Each of the source voltage supply circuits VC2h receives the inverted signals S1 to S3 of the clear pulse signal CL and the non-inverted signal S4 of the preset signal PR and uses the supplied VCCSDB and VCCVPS to supply the SOURCE bias voltage shown in FIG. And applies it to the source of each sensor cell.
[0063]
In FIG. 4B, signals S1 to S3 are inverted signals of the clear pulse signal CL, and the non-inverted signal S4 of the preset signal PR is a signal having the same logical level as the gate preset signal PR before clearing. When both the clear pulse signal CL and the pre-clear gate preset signal PR are at L level, the inverted signals S1 to S3 are at H level, and the normal rotation signal S4 of the preset signal PR is at L level. Therefore, the NMOS transistors T11 and T13 are on, the PMOS transistors T12 and T14 are off, and the NMOS transistor T15 is off. That is, in this case, since the transistors T14 and T15 are off, the source voltage supply circuit VC2h does not supply the source voltage. At this point, the voltage value at the point ND1 is at the ground level (GND), and the voltage value at the point ND2 is VCCSDB.
[0064]
When the clear pulse signal CL is at the L level and the gate preset signal PR before clearing is at the H level, the inverted signals S1 to S3 and the normal rotation signal S4 of the preset signal PR are at the H level. Therefore, the transistors T11, T13, T15 are on, and the transistors T12, T14 are off. That is, in this case, the source voltage VPSh becomes the voltage VCCVPS, the voltage value at the point ND1 is the ground level (GND), and the voltage value at the point ND2 is VCCSDB. Therefore, during this time, the capacitor C1 is charged to the voltage VCCSDB.
[0065]
When the clear pulse signal CL is at the H level and the gate preset signal before clearing PR is at the L level, the inverted signals S1 to S3 and the normal rotation signal S4 of the preset signal PR are at the L level. Therefore, the transistors T11, T13, T15 are off, and the transistors T12, T14 are on. That is, in this case, the voltage at the point ND2 becomes the source voltage VPSh. If the voltage of the capacitor C1 is charged to VCCSDB immediately before this case, the ND1 point becomes the voltage VCCSDB by turning on the transistor T12, and the voltage value at the ND2 point becomes VCCSDB × 2.
[0066]
That is, the circuit of FIG.
Figure 2004228867
FIG. 5 is a diagram for explaining a bias voltage applied to the sensor cell.
FIG. 5 shows the voltage values of the gate voltage, source voltage, and drain voltage of each cell in each state. In FIG. 5, “accumulation”, “reset (S)”, “modulation (S)”, “preset”, “clear”, “reset (N)”, and “modulation (N)” from the viewpoint of the bias voltage. Are shown separately for each state.
[0067]
In FIG. 5, GATE is the gate voltage of the cell, and has two states, a selected state and a non-selected state. SOURCE is the source voltage of the cell. DRAIN is a drain voltage of the cell and has two states, a selected state and a non-selected state.
[0068]
First, the case of the accumulation state will be described.
In the state of “accumulation” (hereinafter referred to as accumulation state), all cells in the cell array are set to the selected state, and a voltage having a voltage value of VCCSGHI is applied to the gate. When in the accumulation state, there are no unselected cells. In the accumulation state, the source does not receive the supply of the bias voltage from the source voltage supply circuit VC2h, but since the voltage of VCCSGHI is applied to the gate and the optical signal detection MOS transistor PDTr is turned on, the source / drain In the accumulation state, the source becomes equal to the drain voltage (VCCSDI).
[0069]
Next, the case of the “reset (S)” state (hereinafter, abbreviated as the “RESS state”) will be described.
In the case of the cell in the selected state, in the RESS state, a voltage whose voltage value is Lo (L level) is applied to the gate. In the RESS state, a voltage having a voltage value of VMPR is applied to the source. In the case of the cell in the selected state, in the RESS state, a voltage of Lo is applied to the gate, and the MOS transistor PDTr for detecting an optical signal is turned off. (HiZ).
[0070]
In the case of a cell in a non-selected state, a voltage having a voltage value Lo (L level) is applied to the gate in the RESS state. When a certain cell is in a non-selected state and is in a RESS state, the drain becomes HiZ.
In the state of “modulation (S)” (hereinafter abbreviated as LOADS state), in the case of a cell in a selected state, a voltage having a voltage value of VCCSGHR is applied to the gate. In the case of the selected cell, a voltage having a voltage value of VCCSDR is applied to the drain, and a voltage having a voltage value of (VCCSGHR-VthS) is output to the source. In the LOADS state, it is necessary to apply a bias voltage that satisfies the relationship (VCCSGHR <VCCSDR).
[0071]
In the case of a cell in the non-selected state, in the LOADS state, a voltage having a voltage value of Lo is applied to the gate, and a voltage having a voltage value of VCCSDR is applied to the drain.
Subsequently, the case of the “preset” state (hereinafter, abbreviated as the PR state) will be described.
In the case of the selected cell, in the PR state, a voltage having a voltage value of VCCSGHR is applied to the gate. In the PR state, a voltage having a voltage value of VCCVPS is applied to the source. In the case of the cell in the selected state, in the PR state, the drain has the same voltage as the source because the optical signal detection MOS transistor PDTr is turned on.
[0072]
In addition, in the case of a cell in a non-selected state, in the PR state, a voltage having a voltage value of Lo is applied to the gate, and the drain becomes VCCVPS. T5 turns on the line (= non-selected line) where VSCi is Lo level, each line is connected to the common node (COM node), and the COM node becomes HiZ.
[0073]
In the “clear” state (hereinafter abbreviated as CL state), in the case of a selected cell, a voltage having a voltage value of (VCCSDB × 2) is applied to the source, and the optical signal detection MOS transistor PDTr is turned on. Therefore, the drain has the same voltage as the source. As a result, a voltage having a voltage value of (VCCSGHR + VCCSDB × 2) is applied to the gate.
[0074]
In the case of a cell in a non-selected state, in the CL state, a voltage having a voltage value of Lo is applied to the gate, and a voltage having a voltage value of VCCSDR is applied to the drain.
Next, a case of a “reset (N)” state (hereinafter, abbreviated as a RESN state) will be described.
In the case of the cell in the selected state, in the RESN state, a voltage having a voltage value of Lo is applied to the gate. In the RESN state, a voltage having a voltage value of VMPR is applied to the source. In the case of the cell in the selected state, the drain becomes HiZ in the RESN state.
[0075]
In the case of a cell in a non-selected state, in the RESN state, a voltage having a voltage value of Lo is applied to the gate. In the case of a cell in a non-selected state, the drain becomes HiZ in the RESN state.
Note that while the clear pulse signal CL is at the L level, the NMOS transistor T5 in FIG. 3 is turned on. Therefore, even in the RESS state, the NMOS transistor T5 is turned on and the drain is connected to the COM node. Since the read enable signal SDR2 becomes H level in the RESS state and the RESN state, the PMOS transistor T4 is turned off, and the COM node becomes floating.
[0076]
In the state of “modulation (N)” (hereinafter abbreviated as “LOADN state”), in the case of a selected cell, a voltage having a voltage value of VCCSGHR is applied to the gate. In the LOADN state, a voltage having a voltage value of VCCSDR is applied to the drain, and a voltage having a voltage value of (VCCSGHR-VthN) is output to the source.
[0077]
In the case of a cell in the non-selected state, in the LOADN state, a voltage having a voltage value of Lo is applied to the gate, and a voltage having a voltage value of VCCSDR is applied to the drain.
Similarly to the LOADS state, at the time of LOADN, the drain is connected to the COM node (= HiZ) because T5 in FIG. 3 is turned on.
[0078]
FIG. 6 is a diagram for explaining a read line and a clear line of the sensor.
[0079]
As shown in FIG. 6, in the mxn pixel matrix, each line is sequentially scanned from the first line to the m-th line. The read line is a line from which a signal corresponding to the light amount is read, and the clear line is a line from which charges accumulated in each cell are cleared. Since scanning is performed in order from the first line, holes are generated in each cell of the line cleared based on the clear selection signal in accordance with the amount of light received thereafter. After the clearing, the time until the readout is performed by the readout line selection signal VSBi is the exposure time. The exposure time is proportional to the number dl of lines between the readout line and the clear line, and is set in the shutter speed, that is, in the range of 1H (H indicates the number of horizontal lines; the same applies hereinafter) to mH (or (1 frame + 1H or more). May be changed).
[0080]
FIG. 7 is a timing chart showing the timing of the vertical synchronization signal VSYNC and the horizontal synchronization signal HSYNC.
The vertical synchronization signal VSYNC is a timing pulse generated for each period t1 and having a time length of t2. The horizontal synchronization signal HSYNC is a timing pulse generated for each cycle t3 and having a time length of t4. The vertical synchronization signal VSYNC and the horizontal synchronization signal HSYNC are supplied from the timing generator 26 of the signal processing LSI 2 to the image sensor LSI1.
[0081]
When the vertical synchronization signal VSYNC is supplied, the read line shift register 5 sequentially outputs the selection signal VSBi. Within the period t1 after the supply of the vertical synchronization signal VSYNC, the horizontal synchronization signal HSYNC is output by the number of lines (= m) of the sensor cell array 3. Then, within the period t4 during which the horizontal synchronization signal HSYNC is being output and during the period when VGUP is L, there is a period during which the above-described operation of reading the signal component, clearing, and reading the offset component is performed. The period in which VGUP is L is set to a predetermined period in the H blanking period. The H blanking period will be described later in detail with reference to FIG.
[0082]
Analog signals VOUTS and VOUTN of n signal components and offset components are output in a period t5 after a period t4 in the period t3.
Next, a circuit configuration of a timing generator (hereinafter, referred to as TG) 13 of the image sensor LSI 1 will be described with reference to FIG.
FIG. 8 is a circuit block diagram showing a configuration of the TG 13 of the image sensor LSI1 of FIG.
[0083]
The TG includes a serial control block 71, a master timing control block 72, a sensor register block 73, a shutter control unit (shutter speed upper limit control unit) 74, a frame control unit 75, an HV counter 76, a vertical scan control block 77, a horizontal scan. A control block 78 and an analog control block 79 are included.
[0084]
The serial control block 71 receives and outputs a 3-wire serial I / F signal which is an interface signal between the serial control block 71 and the register 14 of the signal processing LSI 2.
The master timing control block 72 receives the sensor drive clock SCLK, the horizontal synchronization signal HSYNC, and the vertical synchronization signal VSYNC from the TG 26 of the signal processing LSI 2. The clock designation signal CLK_SEL from the signal processing LSI 2 and the standby signal STANDBY are input to the TG 13.
[0085]
The serial control block 71 inputs shutter speed setting data, regulator 8 setting data, system clock information, and the like written in the register 23 of the signal processing LSI 2 as a serial I / F signal. The write address and write strobe signal WR are output and supplied to the sensor register block 73.
[0086]
The sensor register block 73 receives a line shutter speed setting signal, a frame shutter speed setting signal, a frame mode setting signal, a clear pulse width control setting signal, a clear pulse application count setting signal, a gain setting signal, Outputs the regulator voltage setting signal.
On the other hand, the master timing control block 72 outputs a pixel clock, a horizontal reset pulse, a vertical reset pulse, and a reset signal based on the various input signals described above.
[0087]
The shutter control unit (shutter speed upper limit control unit) 74 receives a line shutter speed setting signal and a frame shutter speed setting signal from the sensor register block 73, and outputs line shutter speed data and frame shutter speed data as outputs.
[0088]
The frame control unit 75 receives the pixel clock, the vertical reset pulse, and the reset signal from the master timing control block 72 and the standby signal STANDBY, and outputs a frame count value, frame control data, and valid (VALID) control as outputs. Output a signal.
The HV counter 76 receives the pixel clock, the horizontal reset pulse, the vertical reset pulse, and the reset signal from the master timing control block 72, and outputs a line count value and a pixel count value as outputs.
[0089]
The vertical scan control block 77 receives line shutter speed data and frame shutter speed data from the shutter control unit 74, a frame count value, frame control data, and a valid (VALID) control signal from the frame control unit 75 as inputs. A clear pulse width control setting signal and a clear pulse application count setting signal from the sensor register block 73, a pixel clock and reset signal from the master timing control block 72, a clock designation signal CLK_SEL, and a line count from the HV counter 76 A value and a pixel count value are entered.
[0090]
The vertical scan control block 77 outputs the clear line shift data AV, the clear line shift clock VCLK_ASR, the clear line shift register reset signal VSFRA_RST, the clear line selection enable signal CLS, the read line shift data BV, and the read line shift. A clock VCLK_BSR, a read line shift register reset signal VSFRB_RST, a read line select enable signal VSM, an all-line select signal VGUP during accumulation, an accumulation enable signal SDI, a read enable signal SDR, a gate preset signal PR before clear, and a clear pulse CL are output. .
[0091]
The horizontal scan control block 78 has, as inputs, a valid (VALID) control signal from the frame control unit 75, a line count value and a pixel count value from the HV counter 76, and a clear pulse from the sensor register block 73. A width control setting signal, a pixel clock and a reset signal from the master timing control block 72, and a clock designation signal CLK_SEL are input.
[0092]
The horizontal scan control block 78 outputs line memory selection shift data AH, line memory selection shift clock CIN, line memory selection enable signal HSC_CK, accumulation signal line memory reset signal RESS, accumulation signal line memory data load signal LOADS. , An offset line memory reset signal RESN, and an offset line memory data load signal LOADN.
[0093]
The clock designation signal CLK_SEL is a signal indicating the level of the frequency of the system clock signal CLKIN. The CLK_SEL is supplied to the vertical scan control block 77 and the horizontal scan control block 78. In each of the control blocks 77 and 78, the output timing of various sensor drive signals output from each block 77 and 78 can be controlled in accordance with the H and L levels of the clock designation signal CLK_SEL.
[0094]
The analog control block 79 includes a valid (VALID) control signal from the frame control unit 75, a line count value and a pixel count value from the HV counter 76, a gain setting signal from the sensor register block 73, and a standby signal. STANDBY is input and outputs an analog amplifier gain control signal, an amplifier drive clock CDL, and a standby control signal as outputs.
[0095]
A valid (VALID) control signal from the frame control unit 75 is output from the TG 13 to the signal processing LSI 2 as a VALID signal.
The regulator voltage setting signal from the sensor register block 73 and the standby control signal from the analog control block 79 are input to the sensor drive bias generation regulator 8 of the image sensor LSI 1 in FIG.
[0096]
The analog amplifier gain control signal and the amplifier drive clock CDL from the analog control block 79 are used as control signals for the output amplifier 12 of the image sensor LSI 1 in FIG.
[0097]
FIG. 9 is a timing chart showing signals for controlling the photoelectric conversion of the sensor cell array 3. The sensor cell array 3 repeats each state of “accumulation”, “reset (S)”, “modulation (S)”, “preset”, “clear”, “reset (N)”, and “modulation (N)”. The optical image is converted into an electric signal and output. FIG. 9 shows the state of the signal in each of these states. The sensor cell array 3 operates at a predetermined frame rate using the vertical synchronization signal VSNYC and the horizontal synchronization signal HSYNC in FIG. 7 as a unit time.
[0098]
In the example of FIG. 9, in a certain line count signal ROWCT, HSYNC is at the L level from 1 to 80 for the pixel clock signal PXLCT, and LOADS (reset (S) + modulation (S)) for PXLCT from 5 to 22. In the state, PXLCT from 27 to 44 is assigned to the CL (preset + clear) state, and PXLCT from 45 to 63 is assigned to the LOADN (reset (N) + modulation (N)) state.
[0099]
Each control signal is generated and output by the TG 13. The TG 13 is configured by a logic circuit. The logic circuit can be automatically designed by using a design system using HDL (Hardware Description Language: hardware description language) such as Verilog-HDL or VHDL.
[0100]
First, the accumulation state will be described.
A period other than a predetermined period (the fifth pixel to the 63rd pixel in FIG. 9) in the H blanking period shown in FIG. 7 is an accumulation period. During the accumulation period, all the pixels are in the accumulation state. During this period, the accumulation-time all-line selection signal VGUP is at the H level, and the accumulation enable signal SDI and the clear pulse signal CL are at the L level. As shown in FIG. 2, when all the line selection signals VGUP at the time of accumulation become H level, all the line selection signals VSCi become H level. , And the gate voltage VPGi becomes VCCSGHI. Further, the drain voltage VPDi becomes the voltage VCCSDI. Also, during this period, the gate preset signal PR before clearing is also at the L level, and the source voltage supply circuit VC2h does not supply the source voltage as shown in Table 2 showing the operation of the source voltage supply circuit VC2h. In this case, the sources of all the cells in the cell array are turned on by the optical signal detection MOS transistor PDTr and are equal to the drain voltage.
[0101]
In the fifth pixel of the H blanking period, the accumulation period ends, and signal reading starts. During the signal reading period (LOADS, CL, and LOADN periods), accumulation of holes based on the amount of received light is continued, but each cell is set to a set value different from the accumulation period. In a period for signal reading, each cell is set to an individual set value on a clear line, a read line, or a non-selected line.
[0102]
First, the reset (s) state will be described. As shown in FIG. 9, even during this period, settings common to all cells are performed.
As shown in FIG. 9, the clear pulse signal CL and the pre-clear gate preset signal PR are at L level, and the source voltage supply circuit VC2h does not supply the source voltage. During this period, the storage signal line memory reset signal RESS becomes high active, the switch SW22 in FIG. 2 turns on, and the terminal voltage of the capacitor C2 constituting the line memory is charged to VMPR. Further, the line memory data load signal LOADS for accumulation signals and the line memory data load signal LOAD also become high active, the switches SW21 and SW11 are turned on, and the source line is initialized with the voltage VMPR.
[0103]
On the other hand, during accumulation, all the line selection signals VGUP change from H to L, and all line selection signals VSCi change to L level. Therefore, as shown in Table 1, all the gate voltages VPSGi are at the L (GND) level. Further, since the accumulation enable signal SDI is at the H level and the SDR2 is also at the H level, as shown in Table 1, T5 in FIG. 3 is turned on, and the drains of all the cells are connected in common ( COM node), and the COM node enters the Hiz state.
[0104]
Next, the modulation (s) state will be described.
As shown in FIG. 9, CL and PR maintain the L level, and the source voltage supply circuit VC2h does not supply a voltage to the source line. An output corresponding to the voltage value set for each cell is output via the source line. That is, for the clear line and the non-selected line, the line selection signal VSCi remains at the L level, and the gate voltage is at the L (GND) level. Since the read enable signal SDR2 is also at the L level, the drain voltage VPDi becomes VCCSDR.
[0105]
For the read line, the line selection signal VSCi is at the H level. Since the clear pulse signal CL and the signal SDR are at the L level, the gate voltage VPGi is VCCSGHR. The drain voltage VPDi is VCCSDR. As a result, a voltage (VCCSGHR-VthS) appears in the source voltage VPSi. Note that VthS changes according to the accumulated holes. The source line voltage (VCCSGHR-VthS) is accumulated in each capacitor C2 constituting the line memory via the switch SW21.
[0106]
Next, for the correlation double sampling processing, a CL state for removing (clearing) holes accumulated in each cell of the read line is set. In order to remove holes, it is necessary to apply an extremely high voltage to the gate. A preset state is set before the clear state, and a high voltage is obtained using a voltage doubler circuit. Note that each cell on the clear line is cleared simultaneously with the clearing of the read line.
[0107]
First, in the preset state, the line selection signal VSCi is at the H level for the read line and the clear line. Since the clear pulse signal CL and the signal SDR are at the L level, the gate voltage VPGi is VCCSGHR. Note that the gate voltage of the non-selected line is at the L (GND) level because the line selection signal VSCi is at the L level.
[0108]
Further, since the clear pulse signal CL is at the L level and the gate preset signal PR before clear is at the H level, as shown in Table 2, the voltages VPSh of all the source lines are reset to the voltage VCCVPS (for example, 0 V). Further, the capacitor C1 in FIG. 4 is charged with the voltage VCCSDB, and the point ND2 becomes the voltage VCCSDB. Since the accumulation enable signal SDI and the read enable signal SDR2 are at H level, the drain of the optical signal detection MOS transistor PDTr is turned on, and the drain has the same potential as the source.
[0109]
Next, in the clear state, the pre-clear gate preset signal PR changes from H level to L level, and the clear pulse signal CL changes from L level to H level. In this case, as shown in Table 2, the source line changes to VCCSDB × 2. As for the read line and the clear line, since the clear pulse signal CL and the line selection signal VSCi are at the H level, the gates are in a floating state as shown in Table 1. Therefore, the gate voltage VPGi becomes (VCCSDB × 2 + VCCSGHR) due to the coupling capacitance between the source and the gate. The drain of the optical signal detection MOS transistor PDTr is turned on to have the same potential as the source as in the preset state.
[0110]
On the other hand, for the non-selected line, the gate voltage VPDi remains at the L (GND) level, and the drain voltage VPDi becomes VCCSDR because the transistor T4 is turned on.
[0111]
Next, the state shifts to the modulation (N) state via the reset (N) state. In the reset (N) state and the modulation (N) state, signals substantially similar to the reset (s) state and the modulation (s) state are set, respectively. That is, in the reset (N) state, the offset line memory reset signal RESN and the offset line memory data load signal LOADN are high instead of the accumulation signal line memory reset signal RESS and the accumulation signal line memory data load signal LOADS, respectively. Become active. As a result, the switch SW32 is turned on, and the capacitor C3 constituting the noise reading line memory is charged to the VMPR. Further, the switches SW31 and SW11 are turned on, and the source line is initialized with the voltage VMPR.
[0112]
In the modulation (N) state, the clear pulse signal CL and the pre-clear gate preset signal PR are at the L level, and the source voltage supply circuit VC2h does not supply a voltage to the source line. For the clear line and the non-selected line, the line selection signal VSCi is at the L level, and the gate voltage VPGi is L (GND). Since the read enable signal SDR2 is also at the L level, the drain voltage VPDi becomes VCCSDR.
[0113]
For the read line, the line selection signal VSCi is at the H level. Since the clear pulse signal CL and the signal SDR are at the L level, the gate voltage VPGi is VCCSGHR. The drain voltage VPDi is VCCSDR. As a result, a voltage (VCCSGHR-VthN) appears in the source voltage VPSh. The voltage appearing at the source corresponds to the offset component since it was set to the clear state immediately before. The source line voltage (VCCSGHR-VthN) is stored in each capacitor C3 constituting the line memory via the switch SW31.
[0114]
Thus, the signal component is stored in the capacitor C2, and the offset component is stored in the capacitor C3. When the switches SW23 and SW33 are sequentially turned on by the selection signal HSCANh from the horizontal shift register 11, the voltages accumulated in the capacitors C2 and C3 are output as VOUTS and VOUTN via the output amplifiers 36 and 38, respectively. .
[0115]
As described above, the system clock signal CLKIN is supplied to the signal processing LSI 2, and the TG 26 on the signal processing LSI side generates various timing signals based on the system clock signal CLKIN to perform signal processing. On the other hand, it supplies a sensor drive clock signal SCLK, a vertical synchronizing signal VSYNC, and a horizontal synchronizing signal HSYNC that depend on the system clock signal CLKIN, and supplies them to the image sensor LSI1.
[0116]
However, when the frame rate is changed, if the frequency of the input system clock signal is changed, the drive timing of the image sensor LSI1 as a solid-state imaging device may change, which may cause a problem that image quality deteriorates.
[0117]
As a countermeasure, it is necessary to perform appropriate drive pulse control according to the frequency of the input system clock signal.
[0118]
That is, it is necessary to provide a means for notifying the image sensor LSI 1 of the frequency of the system clock signal input to the signal processing LSI 2 as a signal processing unit, and to cope with a change in the frequency of a plurality of system clock signals.
[0119]
More specifically, the drive timing of the image sensor LSI1 is controlled in accordance with the frequency of the system clock signal notified from the signal processing LSI2. For example, the width of various drive pulses in the image sensor LSI1 is kept constant. By performing the control, the H blanking period can be kept constant, the noise can be prevented from increasing due to the change in the H blanking period, and the image quality can be kept constant.
[0120]
The above-mentioned notifying means includes (1) means for notifying the image sensor LSI1 based on the level of the clock designation signal CLK_SEL corresponding to the frequency of the system clock signal CLKIN, and (2) means for notifying the image sensor LSI1 according to the frequency of the system clock signal CLKIN. Either of means for notifying by transmitting and receiving the value to which the bits have been assigned between the registers 23 and 14 arranged in the signal processing LSI 2 and the image sensor LSI 1, respectively.
[0121]
Regarding the means (1) using the clock designation signal CLK_SEL, the clock designation signal CLK_SEL is input to the TG 13 of the image sensor LSI1. The clock designation signal CLK_SEL is a signal for explicitly notifying the designation of the clock frequency at which the image sensor LSI1 is operated to the image sensor LSI1. In other words, the clock designation signal CLK_SEL is a signal for notifying the image sensor LSI1 whether the frequency of the input system clock signal CLKIN is higher or lower than a predetermined frequency. The TG 13 can change the output timing of various control signals based on the H and L levels of the clock designation signal CLK_SEL.
[0122]
Regarding the means by the register function (2), the register 14 in the image sensor LSI 1 and the register 23 in the signal processing LSI 2 store the same data, so that the content of one register is changed. Then, the content of the other register is changed via the 3-wire serial interface 15. Therefore, when the data of the system clock frequency is written to the register 23 in the signal processing LSI 2, the data is further written to the register 14 in the image sensor LSI 1 via the 3-wire serial interface 15. In the image sensor LSI1, the TG 13 can change the output timing of various control signals based on the data of the system clock frequency.
[0123]
Further, the clock designation signal CLK_SEL can be set at the time of mounting on a board. In this case, it is possible to match with the system clock that defines the operation clock for each board.
[0124]
10 to 15 show configuration examples of the vertical scan control block 77 and the horizontal scan control block 78 in the TG 13 notified by the clock designation signal CLK_SEL and the like.
[0125]
FIG. 10 is a block diagram showing the configuration of the vertical scan control block 77. The vertical scan control block 77 includes a count setting 1 comparator 81, a first pulse generator 82, a count setting 2 comparator 83, and a second pulse generator 84. As shown in FIG. 10, the vertical scan control block 77 includes a set in which the count setting 1 comparator 81 and the first pulse generating means 82 are integrated, and a set in which the count setting 2 comparator 83 and the second pulse generating means 84 are integrated. And two sets of count setting comparators and pulse generating means.
[0126]
The frame count value, the line count value, and the pixel count value are input to the count setting 1 comparator 81 and the count setting 2 comparator 83, and the first pulse generation unit 82 and the second pulse generation unit 84 (VALID) control signal, frame control data, pixel clock signal, and clock designation signal CLK_SEL are input.
[0127]
One of the count setting 1 comparator 81 and the count setting 2 comparator 83 having different comparison setting values is selected depending on whether the clock designating signal CLK_SEL indicating the level of the system clock signal CLK_IN is high or low. ing.
[0128]
That is, when the clock designation signal CLK_SEL is at the L level, the set of the count setting 1 comparator 81 and the first pulse generating means 82 is selected by the inversion enable terminal Enable being at the H level, and the input frame count is set. The first pulse generation means 82 compares each count value of the value, the line count value, and the pixel count value with the first set of comparison set values, and compares the count comparison result with the input valid (VALID) control. Signals, frame control data, and pixel clock signals, and output as a clear line selection enable signal CLS1, a read line selection enable signal VSM1, an all-in-accumulation line selection signal VGUP1, a gate preset signal PR1 before clearing, and a clear pulse CL1. Pair of vertical scans The output from the control block 77 outputs (CLS, VSM, VGUP, PR and CL) as.
[0129]
Similarly, when the clock designation signal CLK_SEL is at the H level, the set of the count setting 2 comparator 83 and the second pulse generating means 84 is selected by the enable terminal Enable being at the H level, and the input frame count is set. Value, line count value, and pixel count value are compared with a second set of comparison set values, and when each input count value reaches the second set of comparison set values, a second pulse is generated. The means 84 is controlled based on the count comparison result and the input valid (VALID) control signal, frame control data, and pixel clock signal, and outputs a clear line selection enable signal CLS2 and a read line selection enable signal VSM2 as outputs. , All-line selection signal VGUP2 during accumulation, gate preset before clear A set of issue PR2 and clear pulse CL2, and outputs the output from the vertical scanning control block 77 (CLS, VSM, VGUP, PR and CL) as.
[0130]
FIG. 11 is a block diagram showing a configuration of another example of the vertical scan control block 77. The vertical scan control block 77 includes a count setting 1 comparator 81, a count setting 2 comparator 83, a selector 85, and a pulse generator 86.
[0131]
11 is different from FIG. 10 in that a pulse generating means 86 is formed by combining the pulse generating means 82 and 84 in FIG.
[0132]
Specifically, the frame count value, the line count value, and the pixel count value are commonly input to the count setting 1 comparator 81 and the count setting 2 comparator 83, and are input to the single pulse generation unit 86. , Receives a valid (VALID) control signal, frame control data, a pixel clock signal, and a clock designation signal CLK_SEL, and counts the count comparison results 1 and 2 of the count setting 1 comparator 81 and the count setting 2 comparator 83, respectively. The signal is switched by the selector 85 according to the L and H levels of the clock designation signal CLK_SEL and input to the pulse generating means 86. The pulse generating means 86 is controlled based on these inputs, and the clear line selection enable signal CLS is output as an output. , Read line selection enable signal VSM, Selection signal VGUP, outputs the gate preset signal PR before clearing and clearing pulse CL.
[0133]
The examples of FIGS. 10 and 11 described above select count setting comparators having different comparison setting values according to the level of the system clock frequency. On the other hand, FIGS. 12 and 13 show a case in which when the pulse width of the clear pulse can be changed, the count setting comparator of a different comparison set value is selected according to the magnitude of the pulse width of the clear pulse. is there.
[0134]
FIG. 12 is a block diagram showing the configuration of still another example of the vertical scan control block 77. The vertical scan control block 77 includes a count setting 1 comparator 81a, a first pulse generator 82a, a count setting 2 comparator 83a, and a second pulse generator 84a. As shown in FIG. 12, the vertical scan control block 77 includes a set in which the count setting 1 comparator 81 and the first pulse generating means 82 are integrated, and a set in which the count setting 2 comparator 83 and the second pulse generating means 84 are integrated. And two sets of count setting comparators and pulse generating means.
[0135]
The frame count value, the line count value, the pixel count value, and the clear pulse width control setting signal are input to the count setting 1 comparator 81a and the first pulse generation means 82a, and the count setting 2 comparator 83a and the second pulse The generation means 84a receives a valid (VALID) control signal, frame control data, a pixel clock signal, a clock designation signal CLK_SEL, and a clear pulse application count setting signal.
[0136]
According to a clear pulse width control setting signal indicating the magnitude of the clear pulse width, one of the count setting 1 comparator 81a and the count setting 2 comparator 83a having different comparison set values is selected.
[0137]
That is, when the clear pulse width control setting signal is at the L level, a set of the count setting 1 comparator 81a and the first pulse generating means 82a is selected, and the input frame count value, line count value, and pixel count value are selected. Each count value is compared with a first set of comparison set values, and the first pulse generator 82 compares the count comparison result with the input valid (VALID) control signal, frame control data, pixel clock signal, It is controlled based on a clear pulse application count setting signal, and outputs a set of a clear line select enable signal CLS1, a read line select enable signal VSM1, an all-in-accumulation line select signal VGUP1, a gate preset signal PR1 before clear, and a clear pulse CL1. , The output from the vertical scan control block 77 (C S, and outputs VSM, VGUP, PR and CL) as.
[0138]
Similarly, when the clear pulse width control setting signal is at the H level, the set of the count setting 2 comparator 83a and the second pulse generating means 84a is selected, and the input frame count value, line count value, and pixel count value are selected. Are compared with the second set of comparison setting values. The second pulse generation means 84a calculates the count comparison result and the input valid (VALID) control signal, frame control data, pixel And a set of a clear line select enable signal CLS2, a read line select enable signal VSM2, an all line select signal during accumulation VGUP2, a gate preset signal PR2 before clear, and a clear pulse CL2 as an output. Output from block 77 (CLS, VSM, VGUP, P And CL) is output as.
[0139]
FIG. 13 is a block diagram showing a configuration of another example of the vertical scan control block 77. The vertical scan control block 77 includes a count setting 1 comparator 81a, a count setting 2 comparator 83a, a selector 85a, and a pulse generator 86a.
[0140]
FIG. 13 differs from FIG. 12 in that a pulse generating means 86a is formed by combining the pulse generating means 82a and 84a in FIG.
[0141]
Specifically, the frame count value, the line count value, and the pixel count value are commonly input to the count setting 1 comparator 81a and the count setting 2 comparator 83a, and are input to the single pulse generation unit 86a. Are input with a valid (VALID) control signal, frame control data, a pixel clock signal, and a clear pulse application count setting signal, and count comparison results 1 and 2 of the count setting 1 comparator 81a and the count setting 2 comparator 83a, respectively. Are switched by a selector 85a in response to a pulse width control setting signal and input to the pulse generating means 86a. Based on these inputs, the pulse generating means 86a is controlled, and a clear line selection enable signal CLS is output as an output. Line selection enable signal VSM, all line selection signal during accumulation GUP, and outputs the gate preset signal PR before clearing and clearing pulse CL.
[0142]
FIG. 14 is a block diagram showing the configuration of the horizontal scan control block 78. The horizontal scan control block 78 includes a count setting 1 comparator 91, a first pulse generator 92, a count setting 2 comparator 93, and a second pulse generator 94. As shown in FIG. 14, the vertical scan control block 78 includes a group in which the count setting 1 comparator 91 and the first pulse generating means 92 are integrated, and a group in which the count setting 2 comparator 93 and the second pulse generating means 94 are integrated. And two sets of count setting comparators and pulse generating means.
[0143]
The line count value and the pixel count value are input to the count setting 1 comparator 91 and the count setting 2 comparator 93, and the first pulse generation means 92 and the second pulse generation means 94 receive a valid (VALID) signal. A control signal, a pixel clock signal, and a clock designation signal CLK_SEL are input.
[0144]
One of the count setting 1 comparator 91 and the count setting 2 comparator 93 having different comparison setting values is selected depending on whether the clock designating signal CLK_SEL indicating the level of the system clock signal CLK_IN is high or low. ing.
[0145]
That is, when the clock designating signal CLK_SEL is at the L level, the set of the count setting 1 comparator 91 and the first pulse generating means 92 is selected by the inversion enable terminal Enable being at the H level, and the input line count is inputted. Each of the count value and the pixel count value is compared with a first set of comparison set values, and the first pulse generation means 82 compares the count comparison result with the input valid (VALID) control signal and pixel clock. And a line memory reset signal RESS1, a line memory data load signal LOADS for an accumulation signal, a line memory reset signal RESN1, an offset line memory data load signal LOADN1 for an accumulation signal, Scan control block The output from 78 output (RESS, LOADS, RESN, LOADN) as.
[0146]
Similarly, when the clock designation signal CLK_SEL is at the H level, the set of the count setting 2 comparator 93 and the second pulse generating means 94 is selected by the enable terminal Enable being at the H level, and the input line count is inputted. Each of the count value and the pixel count value is compared with a second set of comparison set values, and the second pulse generating means 94 compares the count comparison result with the input valid (VALID) control signal and pixel clock. The output signal is controlled based on a set of a line memory reset signal for storage signal RESS2, a line memory data load signal for load signal LOADS2, an offset line memory reset signal RESN2, and a line memory data load signal LOADN2 for offset. Scan control block 78 The output of al outputs (RESS, LOADS, RESN, LOADN) as.
[0147]
FIG. 15 is a block diagram showing a configuration of another example of the horizontal scan control block 78. The horizontal scan control block 78 includes a count setting 1 comparator 91, a count setting 2 comparator 93, a selector 95, and a pulse generator 96.
[0148]
FIG. 15 differs from FIG. 14 in that a pulse generating means 96 is formed by combining the pulse generating means 92 and 94 in FIG.
[0149]
More specifically, the line count value and the pixel count value are commonly input to the count setting 1 comparator 91 and the count setting 2 comparator 93, and the valid pulse ( VALID) control signal, a pixel clock signal, and a clock designation signal CLK_SEL are input, and the count comparison results 1 and 2 of the count setting 1 comparator 91 and the count setting 2 comparator 93 are compared with L and H of the clock designation signal CLK_SEL. The signal is switched by a selector 95 in accordance with the level and is input to the pulse generating means 96. The pulse generating means 96 is controlled based on these inputs, and outputs a line signal for storage signal reset signal RESS and a line memory for storage signal as outputs. Data load signal LOADS, offset line memory reset signal ESN, and outputs the offset for the line memory data load signal LOADN.
[0150]
As described above, the system clock frequency is controlled by controlling the vertical scan control block and / or the horizontal scan control block based on the H and L levels of the clock designation signal CLK_SEL corresponding to the level of the frequency of the input system clock signal. Even when the operation state is set (for example, the frame rate is changed) according to the above, it is possible to control the width of the sensor drive pulse that affects the image quality to be always constant. As a result, noise reduction, reduction of current consumption due to noise increase, long-time exposure in dark environments, and constant image quality (dark current noise Increase prevention) can be realized.
[0151]
FIG. 16 shows that, even when the frequency of the system clock signal CLKIN is changed (high or low), the pulse width of the clear line selection enable signal CLS, the gate preset signal PR before clear, and the pulse width of the clear pulse CL are controlled to be constant. Is shown. The width of each pulse of CLS, PR, and CL relates to the image quality of the output image signal.
[0152]
FIG. 16A shows the state of each pulse width of CLS, PR and CL when the system clock signal CLKIN is high and the clock designation signal CLK_SEL is at L level, and FIG. This shows a state where the pulse widths of CLS, PR and CL are controlled to be the same as in FIG. 16A when the designation signal CLK_SEL is at the H level.
[0153]
According to the above-described embodiment of the present invention, in the image processing apparatus including the threshold voltage modulation type MOS image sensor and the signal processing unit that performs signal processing on the output of the image sensor, the input is input to the signal processing unit. By notifying the image sensor of the frequency of the system clock signal, the image sensor can cope with a plurality of system clock frequencies in the processing at the time of shooting, and can prevent deterioration in image quality due to a change in the system clock frequency. .
[0154]
In the above embodiment, the solid-state imaging device has been described by taking a threshold voltage modulation type MOS image sensor as an example. However, the present invention is not limited to the threshold voltage modulation type MOS image sensor. It goes without saying that the sensor can be applied.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention.
FIG. 2 is a circuit diagram showing a configuration of an image sensor LSI according to the embodiment of the present invention.
FIG. 3 is a circuit diagram showing a configuration of a drain / gate voltage supply circuit according to the embodiment of the present invention.
FIG. 4 is a circuit diagram showing a configuration of a source voltage supply circuit according to the embodiment of the present invention.
FIG. 5 is a diagram for explaining a bias voltage applied to a sensor cell according to the embodiment of the present invention.
FIG. 6 is a diagram illustrating a read line and a clear line of a sensor according to the embodiment of the present invention.
FIG. 7 is a timing chart showing timings of a vertical synchronization signal and a horizontal synchronization signal according to the embodiment of the present invention.
FIG. 8 is a circuit block diagram showing a configuration of a timing generator of the image sensor LSI according to the embodiment of the present invention.
FIG. 9 is a timing chart for explaining the state of each signal in each state during the H blanking period according to the embodiment of the present invention.
FIG. 10 is a block diagram showing a configuration of a vertical scan control block of the timing generator according to the embodiment of the present invention.
FIG. 11 is a block diagram showing a configuration of another example of the vertical scan control block of the timing generator according to the embodiment of the present invention.
FIG. 12 is a block diagram showing a configuration of still another example of the vertical scan control block of the timing generator according to the embodiment of the present invention.
FIG. 13 is a block diagram showing a configuration of still another example of the vertical scan control block of the timing generator according to the embodiment of the present invention.
FIG. 14 is a block diagram showing a configuration of a horizontal scan control block of the timing generator according to the embodiment of the present invention.
FIG. 15 is a block diagram showing a configuration of another example of the horizontal scan control block of the timing generator according to the embodiment of the present invention.
FIG. 16 is a timing chart illustrating an example in which the width of a sensor driving pulse is controlled to be constant in response to a change (high or low) of a system clock frequency according to the image processing apparatus of the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Image sensor LSI, 2 ... Signal processing LSI, 3 ... Sensor cell array, 6 ... Vertical drive circuit, 8 ... Regulator, 9 ... Line memory for accumulation signals, 10 ... Line memory for offset signals, 13, 26 ... Timing generator, 14, 23 ... register, 15 ... 3-wire serial interface

Claims (8)

フォトダイオードと光信号検出用のトランジスタとを備えた単位画素が複数配列されたマトリックス型の固体撮像素子と、
システムクロック信号が入力され、該システムクロック信号に基づいて前記固体撮像素子の出力を信号処理し、画像信号として出力する信号処理部と、
複数の周波数のシステムクロック信号に対応するように、前記信号処理部に入力したシステムクロック信号の周波数を前記固体撮像素子に通知する手段と、
を具備したことを特徴とする画像処理装置。
A matrix-type solid-state imaging device in which a plurality of unit pixels each including a photodiode and a transistor for detecting an optical signal are arranged,
A signal processing unit that receives a system clock signal, performs signal processing on the output of the solid-state imaging device based on the system clock signal, and outputs the image signal.
Means for notifying the solid-state imaging device of the frequency of the system clock signal input to the signal processing unit, so as to correspond to the system clock signals of a plurality of frequencies,
An image processing apparatus comprising:
前記固体撮像素子が、閾値電圧変調方式のMOS型固体撮像素子であることを特徴とする請求項1に記載の画像処理装置。The image processing apparatus according to claim 1, wherein the solid-state imaging device is a threshold voltage modulation type MOS solid-state imaging device. 前記信号処理部より通知されたシステムクロック信号の周波数に応じて、前記固体撮像素子の駆動タイミングを制御する手段を、
さらに具備したことを特徴とする請求項1又は2に記載の画像処理装置。
Means for controlling the drive timing of the solid-state imaging device according to the frequency of the system clock signal notified from the signal processing unit,
The image processing apparatus according to claim 1, further comprising:
前記制御する手段は、駆動パルスの幅を一定に保つように制御することを特徴とする請求項3に記載の画像処理装置。The image processing apparatus according to claim 3, wherein the control unit controls the drive pulse so as to keep the width of the drive pulse constant. 前記通知する手段は、システムクロック信号の周波数に対応したクロック指定信号のレベルに基づいて通知を行うことを特徴とする請求項1〜4のいずれか1つに記載の画像処理装置。The image processing apparatus according to claim 1, wherein the notification unit performs the notification based on a level of a clock designation signal corresponding to a frequency of a system clock signal. 前記通知する手段は、システムクロック信号の周波数に応じてビット割り当てされた値を、前記信号処理部と前記固体撮像素子それぞれに配置したレジスタ間で送受することによって通知を行うことを特徴とする請求項1〜5のいずれか1つに記載の画像処理装置。The notifying unit performs the notification by transmitting and receiving a value assigned to a bit according to a frequency of a system clock signal between the signal processing unit and a register arranged in each of the solid-state imaging devices. Item 6. The image processing apparatus according to any one of Items 1 to 5. フォトダイオードと光信号検出用のトランジスタとを備えた単位画素が複数配列されたマトリックス型の固体撮像素子と、前記固体撮像素子の出力を信号処理する信号処理部を含む画像処理装置の処理方法であって、
前記信号処理部に入力したシステムクロック信号の周波数を前記固体撮像素子へ通知し、複数のシステムクロック周波数に対応可能としたことを特徴とする画像処理装置の処理方法。
A processing method of an image processing apparatus including a matrix-type solid-state imaging device in which a plurality of unit pixels each including a photodiode and a transistor for detecting an optical signal are arranged, and a signal processing unit that performs signal processing on an output of the solid-state imaging device. So,
A method of processing an image processing apparatus, comprising: notifying a frequency of a system clock signal input to the signal processing unit to the solid-state imaging device so as to correspond to a plurality of system clock frequencies.
前記固体撮像素子が、閾値電圧変調方式のMOS型固体撮像素子であることを特徴とする請求項7に記載の画像処理装置の処理方法。8. The processing method according to claim 7, wherein the solid-state imaging device is a threshold voltage modulation type MOS solid-state imaging device.
JP2003013599A 2003-01-22 2003-01-22 Image processing apparatus and processing method thereof Expired - Fee Related JP4314832B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003013599A JP4314832B2 (en) 2003-01-22 2003-01-22 Image processing apparatus and processing method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003013599A JP4314832B2 (en) 2003-01-22 2003-01-22 Image processing apparatus and processing method thereof

Publications (2)

Publication Number Publication Date
JP2004228867A true JP2004228867A (en) 2004-08-12
JP4314832B2 JP4314832B2 (en) 2009-08-19

Family

ID=32901880

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003013599A Expired - Fee Related JP4314832B2 (en) 2003-01-22 2003-01-22 Image processing apparatus and processing method thereof

Country Status (1)

Country Link
JP (1) JP4314832B2 (en)

Also Published As

Publication number Publication date
JP4314832B2 (en) 2009-08-19

Similar Documents

Publication Publication Date Title
US6507365B1 (en) Solid-state imaging device
KR101186734B1 (en) Solid?state imaging device, camera and driving method thereof
US8089530B2 (en) Solid-state image pickup apparatus, drive method for the solid-state image pickup apparatus, and image pickup apparatus
US7499091B2 (en) Solid-state imaging device and method for driving same
JP5212022B2 (en) Solid-state imaging device, imaging device, pixel driving voltage optimization device, and pixel driving voltage optimization method
US20010005227A1 (en) Solid-state imaging device
JP2002077737A (en) Image sensor
KR101939402B1 (en) Solid-state imaging device and driving method thereof, and electronic apparatus using the same
US11310488B2 (en) Method of operating an image sensor, image sensor performing the same, and electronic system including the same
JP2009206709A (en) Solid-state imaging apparatus, driving method of solid-state imaging apparatus and electronic apparatus
US20140036114A1 (en) Solid-state imaging device and imaging apparatus
JP3870905B2 (en) Image processing apparatus and processing method thereof
JP2004228874A (en) Image processor, image processing method and solid-state imaging apparatus
JP2003521836A (en) Image sensor unit cell with individually controllable electronic shutter circuit
JP2004228872A (en) Image processor, image processing method and solid-state imaging apparatus
JP2004228873A (en) Image processor, image processing method, and solid state imaging device
JP2004228871A (en) Image processor, image processing method, and solid state imaging device
JP4314832B2 (en) Image processing apparatus and processing method thereof
JP2004228868A (en) Image processor and its processing method
JP2004228869A (en) Image processor and its processing method
JP4123951B2 (en) Shift register circuit, shift clock generation circuit, and image processing apparatus
JP2008148327A (en) Shift register circuit, shift clock generating circuit and image processor
WO2011070745A1 (en) Solid-state imaging device and imaging device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050407

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050422

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20050426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050830

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080229

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080311

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080508

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080522

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20080527

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090428

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090511

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120529

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130529

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140529

Year of fee payment: 5

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees