JP2019129338A - 固体撮像素子、撮像装置及び撮像方法 - Google Patents

固体撮像素子、撮像装置及び撮像方法 Download PDF

Info

Publication number
JP2019129338A
JP2019129338A JP2018008096A JP2018008096A JP2019129338A JP 2019129338 A JP2019129338 A JP 2019129338A JP 2018008096 A JP2018008096 A JP 2018008096A JP 2018008096 A JP2018008096 A JP 2018008096A JP 2019129338 A JP2019129338 A JP 2019129338A
Authority
JP
Japan
Prior art keywords
signal
counter
unit
count value
count
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018008096A
Other languages
English (en)
Other versions
JP7022598B2 (ja
Inventor
聡史 鈴木
Satoshi Suzuki
聡史 鈴木
小林 寛和
Hirokazu Kobayashi
寛和 小林
伸弘 竹田
Nobuhiro Takeda
伸弘 竹田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2018008096A priority Critical patent/JP7022598B2/ja
Priority to PCT/JP2018/044168 priority patent/WO2019142510A1/ja
Publication of JP2019129338A publication Critical patent/JP2019129338A/ja
Priority to US16/930,972 priority patent/US11190717B2/en
Application granted granted Critical
Publication of JP7022598B2 publication Critical patent/JP7022598B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/571Control of the dynamic range involving a non-linear response
    • H04N25/575Control of the dynamic range involving a non-linear response with a response composed of multiple slopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/772Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters
    • H04N25/773Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters comprising photon counting circuits, e.g. single photon detection [SPD] or single photon avalanche diodes [SPAD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Nonlinear Science (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

【課題】信号量の増加を抑制しつつ広いダイナミックレンジを実現し得る固体撮像素子、撮像装置及び撮像方法を提供する。【解決手段】光子の受光頻度に応じた頻度でパルスを発するセンサ部と、センサ部から発せられるパルスを、センサ部から発せられるパルスの数に応じた間引き度合いで間引いてカウントする計数部とを有している。【選択図】図3

Description

本発明は、固体撮像素子、撮像装置及び撮像方法に関する。
半導体を用いたイメージセンサとして、CCDイメージセンサ及びCMOSイメージセンサが広く知られている。CCDイメージセンサ及びCMOSイメージセンサは、露光期間中に画素に入射される光をフォトダイオードによって電荷に変換し、電荷に応じた信号を出力する。
近年では、露光期間中にフォトダイオードに入射する光子(フォトン)の数をカウントし、フォトンのカウント値を信号値として出力するフォトンカウンティング方式のイメージセンサが提案されている。例えば、特許文献1には、アバランシェフォトダイオードと、カウンタとが用いられた固体撮像装置が開示されている。アバランシェフォトダイオードに、降伏電圧より大きい逆バイアス電圧を印加すると、単一フォトンの入射によって生成されるキャリアがアバランシェ増倍を生じさせ、大きな電流が当該アバランシェフォトダイオードに流れる。単一フォトンの入射に応じたパルス信号を、カウンタによってカウントすることによって、単一フォトンの数に応じた信号を得ることができる。フォトンカウンティング方式のイメージセンサは、フォトダイオードに入射したフォトンの数をそのまま信号値として用いるため、CCDイメージセンサ及びCMOSイメージセンサと比較して、ノイズの影響を受けにくい。このため、フォトンカウンティング方式のイメージセンサは、微弱な光環境においても良好な画像を得ることが可能である。
特開昭61−152176号公報
しかしながら、広いダイナミックレンジの画像を単に得ようとした場合には、カウンタのビット幅が大きくなる。カウンタのビット数の増大は、信号量の増大を招くとともに、高画素化の阻害要因となる。
本発明の目的は、信号量の増加を抑制しつつ広いダイナミックレンジを実現し得る固体撮像素子、撮像装置及び撮像方法を提供することにある。
実施形態の一観点によれば、光子の受光頻度に応じた頻度でパルスを発するセンサ部と、前記センサ部から発せられるパルスを、前記センサ部から発せられるパルスの数に応じた間引き度合いで間引いてカウントする計数部とを有することを特徴とする固体撮像素子が提供される。
本発明によれば、信号量の増加を抑制しつつ広いダイナミックレンジを実現し得る固体撮像素子、撮像装置及び撮像方法を提供することができる。
第1実施形態による撮像装置を示すブロック図である。 第1実施形態による固体撮像素子を示すブロック図である。 第1実施形態による固体撮像素子に備えられた単位画素を示す図である。 第1実施形態による固体撮像素子の単位画素に備えられた分周器を示す図である。 第1実施形態による固体撮像素子の単位画素に備えられたカウンタを示す図である。 第1実施形態による固体撮像素子のレイアウトを示す斜視図である。 第1実施形態による固体撮像素子の動作を示すタイミングチャートである。 第1実施形態による固体撮像素子の単位画素に備えられたカウンタの動作の例を示す図である。 第1実施形態による固体撮像素子の単位画素に備えられたカウンタの動作の他の別を示す図である。 第2実施形態による固体撮像素子に備えられた単位画素を示す図である。 第2実施形態による固体撮像素子の単位画素に備えられたイネーブル信号生成部を示す図である。 第2実施形態による固体撮像素子の単位画素に備えられたカウンタを示す図である。 第3実施形態による固体撮像素子に備えられた単位画素を示す図である。 第3実施形態による固体撮像素子の単位画素に備えられたカウント値処理部を示す図である。 第3実施形態による固体撮像素子の単位画素に備えられたカウンタを示す図である。 第3実施形態による固体撮像素子の単位画素に備えられた計数部の動作を示すタイミングチャートである。
本発明の実施の形態について図面を用いて以下に説明する。なお、本発明は以下の実施形態に限定されるものではなく、適宜変更可能である。また、以下に示す実施形態を適宜組み合わせるようにしてもよい。
[第1実施形態]
第1実施形態による固体撮像素子、撮像装置及び撮像方法について図1乃至図9を用いて説明する。
本実施形態による固体撮像素子は、センサ部300から発せられるパルスを、センサ部300から発せられるパルスの数に応じた間引き度合いで間引いてカウントするものである。
図1は、本実施形態による撮像装置100を示すブロック図である。図1に示すように、撮像装置100は、固体撮像素子102と、信号処理部(デジタル信号処理部、画像処理部)103と、メモリ部104と、記録部105と、制御部106と、操作部107と、表示部108とを有する。撮像装置100には、撮影レンズ101が備えられる。撮影レンズ101は、撮像装置100のボディから着脱可能であってもよいし着脱不能であってもよい。
固体撮像素子102の撮像面には、撮影レンズ(撮像光学系)101によって生成された光学像が結像される。固体撮像素子102には、アバランシェフォトダイオードが備えられている。このため、固体撮像素子102は、単一フォトンの検出を行い得る。
信号処理部103は、固体撮像素子102から出力される画像信号に対して、所定の信号処理(デジタル信号処理、画像処理)を行う。かかる信号処理としては、例えば、信号増幅、基準レベル調整、欠陥補正等が挙げられる。信号処理部103は、復元部109を備えている。
固体撮像素子102から出力される不図示の圧縮パターン情報が、制御部106に供給される。制御部106は、当該圧縮パターン情報を復元部109に供給する。復元部109は、制御部106から供給される圧縮パターン情報に基づいて、固体撮像素子102によって圧縮された画像信号が入射フォトン数に応じたリニアな信号となるように復元処理を行う。
制御部106は、撮像装置100の全体の制御を司る。制御部106は、固体撮像素子102に対する制御を行う。また、制御部106は、固体撮像素子102から出力される画像信号に対して所定の処理を行う。
メモリ部104には、信号処理部103から出力される画像データが一時的に保持される。表示部108は、撮影された画像、ライブビュー画像、各種設定画面等を表示する。操作部107は、ユーザが撮像装置100を操作するための各種のインターフェースである。制御部106は、操作部107を介して行われるユーザによる操作指示に基づいて、各機能ブロックを制御する。記録部105には、不図示の記録媒体が備えられる。記録媒体は、記録部105から着脱可能であってもよいし着脱不能であってもよい。記録媒体には、画像データ等が記録される。記録媒体としては、例えば不揮発性メモリ、メモリカード等が用いられる。
図2は、本実施形態による固体撮像素子102を示すブロック図である。図2に示すように、固体撮像素子102は、画素アレイ(画素領域)200、垂直選択回路202、水平選択回路203、タイミング発生部(TG:Timing Generator)204、出力部205、カウント圧縮制御部206を有する。
画素アレイ200には、複数の単位画素201が行列状に配置されている。ここでは、説明を簡単にするために、3行×3列の単位画素201のみを示しているが、実際には多数の単位画素201が画素アレイ200に配置されている。
垂直選択回路202は、画素アレイ200に備えられた単位画素201をスイッチ207によって1行単位で選択する。水平選択回路203は、画素アレイ200に備えられた単位画素201をスイッチ208によって1列単位で選択する。垂直選択回路202と水平選択回路203とによって選択される単位画素201から出力される信号は、出力部205を介して固体撮像素子102の外部に出力される。
カウント圧縮制御部206は、入射するフォトンの数をカウントする際の間引き度合いを定めるためのカウント圧縮制御信号CCSを、画素アレイ200に備えられた複数の単位画素201の各々に供給する。
タイミング発生部204は、垂直選択回路202、水平選択回路203、カウント圧縮制御部206に制御信号を供給する。また、タイミング発生部204は、画素アレイ200に備えられた複数の単位画素201の各々に対しても、不図示の配線によって制御信号を供給する。
図3は、本実施形態による固体撮像素子102に備えられた単位画素201を示す図である。
単位画素201は、センサ部300と計数部301とを備える。センサ部300は、フォトダイオード302と、クエンチ抵抗303と、反転バッファ304とを有し、光子の受光頻度に応じた頻度でパルスを発する。フォトダイオード302は、アバランシェフォトダイオードである。フォトダイオード302には、クエンチ抵抗303を介して降伏電圧以上のバイアス電圧Vbiasが印加される。このため、フォトダイオード302は、ガイガーモードで動作する。即ち、フォトダイオード302にフォトンが入射すると、アバランシェ増倍現象が引き起こされる。これにより、アバランシェ電流が生じ、クエンチ抵抗303において電圧降下が生じる。クエンチ抵抗303は、フォトダイオード302のアバランシェ増倍現象を停止されるための抵抗素子である。クエンチ抵抗303としては、例えばトランジスタの抵抗成分を利用し得る。アバランシェ増倍現象によるアバランシェ電流がフォトダイオード302に流れると、クエンチ抵抗303において電圧降下が発生し、フォトダイオード302に印加されるバイアス電圧が低下する。フォトダイオード302に印加されるバイアス電圧が降伏電圧以下になると、アバランシェ増倍現象が停止する。その結果、フォトダイオード302にアバランシェ電流が流れなくなり、フォトダイオード302には、再びバイアス電圧Vbiasが印加される。反転バッファ304は、クエンチ抵抗303において生じた電圧変化に基づいてパルス信号を出力する。即ち、フォトダイオード302にフォトンが入射すると、反転バッファ304からパルス信号PLSが出力される。
計数部301は、分周器305と、カウンタ306と、制御部307と、スイッチ308と、読み出しメモリ309とを有する。計数部301は、センサ部300から発せられるパルスを、センサ部300から発せられるパルスの数に応じた間引き度合いで間引いてカウントする。
フォトンの入射によってセンサ部300から出力されるパルス信号PLSは、分周器305に入力される。分周器305は、制御部307から供給される制御信号PSELに応じて分周処理を行う。分周器305の構成及び動作については、図4を用いて後述する。
分周器305から出力される信号は、カウンタ306に入力される。カウンタ306は、分周器305から供給される信号のパルス数をカウントする。即ち、カウンタ306は、センサ部300から発せられるパルスに応じた信号をカウントする。カウンタ306におけるカウント動作によって得られたカウント値は、画素信号となる。また、カウンタ306におけるカウント動作を制御するためのイネーブル信号PENが、タイミング発生部204からカウンタ306に供給される。分周器305は、センサ部300から発せられるパルス信号PLSに対して間引き処理を行う間引き処理部として機能し得る。カウンタ306の構成及び駆動については、図5を用いて後述する。
制御部307は、カウント圧縮制御部206から供給されるカウント圧縮制御信号CCSと、カウンタ306から供給されるカウント値とに応じて、制御信号PSELを分周器305に供給する。制御部307は、カウンタ306におけるカウント値に応じて、パルス信号PLSをカウントする際の間引き度合いを切り替える。制御部307は、カウンタ306におけるカウント値が大きくなるに伴って、間引き度合いを大きくする。また、制御部307は、カウンタ306におけるカウント値と、カウント圧縮制御信号CCSとに応じて間引き度合いを切り替え得る。カウント圧縮制御信号CCSは、撮像感度に応じて設定され得る。このため、制御部307は、カウンタ306におけるカウント値と、撮像感度に応じた信号とに応じて間引き度合いを切り替え得る。制御部307によって行われる制御については、図8及び図9を用いて後述する。
読み出しメモリ309は、カウンタ306によって得られたカウント値、即ち、画素信号を、一時的に保持する。スイッチ308は、カウンタ306によって得られたカウント値を読み出しメモリ309に供給するか否かを切り替える。スイッチ308は、タイミング発生部204から供給される制御信号MTXによって制御される。垂直選択回路202と水平選択回路203とによって選択された単位画素201からは、読み出しメモリ309に保持されたカウント値が出力される。単位画素201からこうして出力される画素信号は、出力部205を介して固体撮像素子102の外部に出力される。
図4は、本実施形態による固体撮像素子102の単位画素201に備えられた分周器305を示す図である。図4は、3つのD型フリップフロップ401〜403が備えられた分周器305の例を示している。
分周器305は、3つのD型フリップフロップ401〜403と、セレクタ404とを有する。分周器305には、パルス信号PLSをカウントする際の間引き度合いを制御するための制御信号PSEL信号が、制御部307から供給される。また、分周器305には、リセット信号RESがタイミング発生部204から供給される。
D型フリップフロップ401のクロック端子には、センサ部300から出力されるパルス信号PLS(PLS1)が供給される。D型フリップフロップ401の入力端子D及びD型フリップフロップ402のクロック端子には、D型フリップフロップ401の反転出力端子/Qから出力される信号PLS2が供給される。D型フリップフロップ402の入力端子D及びD型フリップフロップ403のクロック端子には、D型フリップフロップ402の反転出力端子/Qから出力される信号PLS3が供給される。D型フリップフロップ403の入力端子Dには、D型フリップフロップ403の反転出力端子/Qから出力される信号PLS4が供給される。
D型フリップフロップ401、402、403のリセット端子Resetにはタイミング発生部204から出力されるリセット信号RESが供給される。リセット信号RESがHレベルの際、D型フリップフロップ401、402、403の出力端子Qは、Lレベルにリセットされる。
セレクタ404には、制御部307から出力される2ビットの制御信号PSELが供給される。セレクタ404には、信号PLS1〜PLS4が入力される。信号PLS1は、センサ部300から出力されるパルス信号PLSをそのまま用いたものである。信号PLS2は、D型フリップフロップ401の反転出力端子/Qから出力される信号であり、パルス信号PLSを2分周することにより得られる信号である。信号PLS3は、D型フリップフロップ402の反転出力端子/Qから出力される信号であり、パルス信号PLSを4分周することにより得られる信号である。信号PLS4は、D型フリップフロップ403の反転出力端子/Qから出力される信号であり、パルス信号PLSを8分周することにより得られる信号である。セレクタ404は、制御部307から供給される制御信号PSELに応じて、4つの信号PLS1〜PLS4のうちから選択される信号を出力する。
なお、分周器305の構成はこれに限定されるものではない。信号PLSxがHレベルとなる頻度を、制御部307から供給される制御信号PSELに応じて変更し得る分周器305を適宜用い得る。
図5は、本実施形態による固体撮像素子102の単位画素201に備えられたカウンタ306を示す図である。図5は、n個のD型フリップフロップ500−1〜500−nが備えられたnビットカウンタの例を示している。カウンタ306は、分周器305から出力される信号PLSxの立ち上がりエッジに同期してカウント動作を行う。
図5に示すように、カウンタ306は、n個のD型フリップフロップ500−1〜500−nを有している。個々のD型フリップフロップについて説明する際には、符号500−1〜500−nを用い、D型フリップフロップ一般について説明する際には、符号500を用いる。
D型フリップフロップ500−1のクロック端子には、分周器305から出力される信号PLSxが供給される。D型フリップフロップ500−2のクロック端子には、D型フリップフロップ500−1の反転出力端子/Qから出力される信号が供給される。D型フリップフロップ500−3のクロック端子には、D型フリップフロップ500−2の反転出力端子/Qから出力される信号が供給される。D型フリップフロップ500−nのクロック端子には、D型フリップフロップ500−n−1の反転出力端子/Qから出力される信号が供給される。即ち、各々のD型フリップフロップ500のクロック端子には、前段に位置するD型フリップフロップ500の反転出力端子/Qから出力される信号が供給される。
各々のD型フリップフロップ500のリセット端子Resetには、タイミング発生部204から出力されるリセットRES信号が供給される。リセット信号RESがHレベルの際、各々のD型フリップフロップ500の出力端子QはLレベルにリセットされる。リセット信号RESがLレベルの際、各々のD型フリップフロップ500の出力端子Qからは、カウント値の各ビットの値(COUNT[1]、COUNT[2]、・・・、COUNT[n])が出力される。カウンタ306がこのような構成になっているため、分周器305から供給される信号PLSxの立ち上がりエッジに同期して、カウント値COUNTが1つずつ増加する。
なお、カウンタ306に入力されるイネーブル信号PEN(図3参照)がLレベルの際には、カウンタ306のカウント値COUNTは、信号PLSxの立ち上がりが生じても更新されることなく維持される。イネーブル信号PENがHレベルの際には、信号PLSxの立ち上がりエッジに同期してカウント値COUNTが増加する。
図6は、本実施形態による固体撮像素子102のレイアウトを示す斜視図である。
図6に示すように、固体撮像素子102は、2つの基板(半導体チップ)601,602を積層することによって構成されている。図6に示すように、固体撮像素子102は、撮影レンズ101によって形成される光学像を受光する基板(上部基板、受光部基板)601と、主としてデジタル系の回路を備える基板(下部基板、計数部基板)602とから構成されている。単位画素201は、上述したように、センサ部300と計数部301とを備えている。単位画素201のうちのセンサ部300は、基板601に形成されている。単位画素201のうちの計数部301は、基板602に形成されている。複数のセンサ部300が、基板601に行列状に配列されている。複数の計数部301が、基板602に行列状に配列されている。複数のセンサ部300の各々と、これらのセンサ部300に対応する複数の計数部301の各々とが、基板601に形成された不図示の複数の貫通電極をそれぞれ介して、互いに電気的に接続されている。こうして、複数の単位画素201がマトリクス状に配されている。上述したように、センサ部300には、フォトダイオード302と、クエンチ抵抗303と、反転バッファ304とが備えられている。センサ部300から計数部301に伝送される信号はパルス信号であるため、センサ部300から計数部301への伝送は比較的ロバストである。計数部301には、上述したように、分周器305と、カウンタ306と、制御部307と、スイッチ308と、読み出しメモリ309とが備えられている。垂直選択回路202と、水平選択回路203と、タイミング発生部204と、出力部205とは、基板602に備えられている。なお、ここでは、垂直選択回路202と、水平選択回路203と、タイミング発生部204と、出力部205と、カウント圧縮制御部206とが、基板602に備えられている場合を例に説明するが、これに限定されるものではない。例えば、これらの構成要素が適宜基板601に備えられていてもよい。
このように、本実施形態では、センサ部300が基板601に形成されており、計数部301が基板602に形成されている。回路規模が大きい計数部301が、センサ部300が備えられている基板601とは別個の基板602に備えられているため、センサ部300の面積を十分に確保することができる。このため、センサ部300の開口面積を十分に確保することができる。
次に、本実施形態による固体撮像素子の動作について図7を用いて説明する。図7は、本実施形態による固体撮像素子の動作を示すタイミングチャートである。
タイミングt701において、撮影開始信号STARTがHレベルになると、センサ部300にバイアス電圧Vbiasが供給される。フォトダイオード302の降伏電圧以上のバイアス電圧Vbiasがフォトダイオード302に印加され、フォトダイオード302はガイガーモードで動作する。そして、フォトダイオード302に入射するフォトンに応じて、パルス信号PLSがセンサ部300から出力される。タイミングt701においては、リセット信号RESがHレベルとなっているため、分周器305とカウンタ306とはリセット状態となっている。また、タイミングt701においては、イネーブル信号PENがHレベルとなるため、カウンタ306はディセーブル状態からイネーブル状態に変化する。
タイミングt702において、フレーム同期信号VDがHレベルになる。これにより、第1番目のフレームの露光期間が開始される。そして、リセット信号RESがLレベルとなり、分周器305及びカウンタ306のリセットが解除される。分周器305及びカウンタ306のリセットが解除されるため、計数部301に入力されるパルス信号PLSに応じてカウンタ306のカウント値が増加する。
タイミングt703において、第1番目のフレームの露光期間が終了する。タイミングt703において、イネーブル信号PEN信号がLレベルとなり、カウンタ306がディセーブル状態となる。これにより、カウンタ306のカウント値が増加しなくなる。
タイミングt704において、制御信号MTXがHレベルとなり、各々の単位画素201の計数部301内のスイッチ308が一斉にオン状態になる。これにより、各々の単位画素201のカウンタ306のカウント値が一斉に読み出しメモリ309に出力され、読み出しメモリ309は当該カウント値を保持する。
タイミングt705において、リセット信号RESがHレベルとなり、分周器305及びカウンタ306がリセットされる。また、タイミングt705において、垂直選択回路202への制御信号VCLKの供給が開始される。垂直選択回路202は、制御信号VCLKがHレベルになる毎に、画素アレイ200に備えられた単位画素201を1行ずつ順番に選択していく。垂直選択回路202によって、任意の1つの行が選択されると、当該行に位置する単位画素201に備えられたスイッチ207がオン状態となる。その後、制御信号HCLKが水平選択回路203に供給される。制御信号HCLKが水平選択回路203に供給されると、各々の列に位置する単位画素201に備えられたスイッチ208が順番にオン状態となる。これにより、垂直選択回路202によって選択された行に位置する単位画素201に備えられた読み出しメモリ309に保持されていたカウント値が、出力部205に順次供給される。カウント値は、画像信号として、固体撮像素子102の外部に順次出力される。
タイミングt706において、フレーム同期信号VDが再びHレベルとなり、第2番目のフレームの露光期間が開始される。
このような動作が画素アレイ200の最終行まで繰り返され、全ての単位画素201によって取得された画像信号の出力が完了する。第n−1番目のフレームの画像信号が固体撮像素子102の外部に出力されるのと並行して、第n番目のフレームの撮影が行われる。
図8は、本実施形態による固体撮像素子102の単位画素201に備えられたカウンタ306の動作の例を示す図である。図8における点線のプロットは、比較例による固体撮像素子の動作を示している。図8における実線のプロットは、本実施形態による固体撮像素子の動作を示している。
比較例による固体撮像素子においては、図8において点線で示すように、単位画素に入射するフォトンの数に比例してカウンタのカウント値が増加する。
これに対し、本実施形態では、カウンタ306のカウント値に応じてカウンタ306におけるカウント頻度を以下のように変化させる。ここでは、カウンタ306のビット幅が14ビットである場合を例に説明する。
カウンタ306のカウント値COUNTが0から15の範囲内である場合、当該カウント値COUNTはステージ1に属する。カウンタ306のカウント値COUNTがステージ1に属する場合においては、制御部307は、分周器305のセレクタ404が信号PLS1を出力するように、セレクタ404に制御信号PSEL信号を供給する。信号PLS1は、上述したように、センサ部300から出力されるパルス信号PLSをそのまま用いたものである。このため、カウンタ306のカウント値COUNTがステージ1に属する場合には、1つのフォトンが単位画素201に入射する毎に、カウンタ306はカウント値COUNTを1つずつ増加させる。
カウンタ306のカウント値COUNTが16から255の範囲内である場合、当該カウント値COUNTはステージ2に属する。カウンタ306のカウント値COUNTがステージ2に属する場合においては、制御部307は、分周器305のセレクタ404が信号PLS2を出力するように、セレクタ404に制御信号PSEL信号を供給する。信号PLS2は、上述したように、D型フリップフロップ401の反転出力端子/Qから出力される信号であり、パルス信号PLSを2分周することにより得られる信号である。このため、カウンタ306のカウント値COUNTがステージ2に属する場合には、2つのフォトンが単位画素201に入射する毎に、カウンタ306はカウント値COUNTを1つずつ増加させる。
カウンタ306のカウント値COUNTが256から4095の範囲内である場合、当該カウント値COUNTはステージ3に属する。カウンタ306のカウント値COUNTがステージ3に属する場合においては、制御部307は、分周器305のセレクタ404が信号PLS3を出力するように、セレクタ404に制御信号PSEL信号を供給する。信号PLS3は、上述したように、D型フリップフロップ402の反転出力端子/Qから出力される信号であり、パルス信号PLSを4分周することにより得られる信号である。このため、カウンタ306のカウント値COUNTがステージ3に属する場合には、4つのフォトンが単位画素201に入射する毎に、カウンタ306はカウント値COUNTを1つずつ増加させる。
カウンタ306のカウント値COUNTが4096から16383の範囲内である場合、当該カウント値COUNTはステージ4に属する。カウンタ306のカウント値COUNTがステージ4に属する場合においては、制御部307は、分周器305のセレクタ404が信号PLS4を出力するように、セレクタ404に制御信号PSEL信号を供給する。信号PLS4は、上述したように、D型フリップフロップ403の反転出力端子/Qから出力される信号であり、パルス信号PLSを8分周することにより得られる信号である。このため、カウンタ306のカウント値COUNTがステージ4に属する場合には、8つのフォトンが単位画素201に入射する毎に、カウンタ306はカウント値COUNTを1つずつ増加させる。
このように、本実施形態では、カウンタ306におけるカウント値に応じてカウンタ306におけるカウント頻度が変化する。
図9は、本実施形態による固体撮像素子102の単位画素201に備えられたカウンタ306の動作の他の例を示す図である。
図9に示す例においては、被写体の輝度が比較的高い場合、即ち、撮像感度(ISO感度)が比較的低く設定される場合には、図8を用いて上述した例と同様に、制御が行われる。
また、図9に示す例においては、被写体の輝度が比較的低い場合、即ち、撮像感度が比較的高く設定される場合には、以下のような制御が行われる。ここでは、カウンタ306のビット幅が14ビットである場合を例に説明する。
カウンタ306のカウント値COUNTが0から255の範囲内である場合、当該カウント値COUNTはステージ1′に属する。カウンタ306のカウント値COUNTがステージ1′に属する場合においては、制御部307は、分周器305のセレクタ404が信号PLS1を出力するように、セレクタ404に制御信号PSEL信号を供給する。信号PLS1は、上述したように、センサ部300から出力されるパルス信号PLSをそのまま用いたものである。このため、カウンタ306のカウント値COUNTがステージ1′に属する場合には、1つのフォトンが単位画素201に入射する毎に、カウンタ306はカウント値COUNTを1つずつ増加させる。
カウンタ306のカウント値COUNTが256から16383の範囲内である場合、当該カウント値COUNTはステージ2′に属する。カウンタ306のカウント値COUNTがステージ2′に属する場合においては、制御部307は、分周器305のセレクタ404が信号PLS2を出力するように、セレクタ404に制御信号PSEL信号を供給する。信号PLS2は、上述したように、D型フリップフロップ401の反転出力端子/Qから出力される信号であり、パルス信号PLSを2分周することにより得られる信号である。このため、カウンタ306のカウント値COUNTがステージ2′に属する場合には、2つのフォトンが単位画素201に入射する毎に、カウンタ306はカウント値COUNTを1つずつ増加させる。
センサ部300から出力されるパルス信号PLSの数が16383を超える場合には、当該カウント値COUNTはステージ3′に属し、カウンタ306のカウント値は16383に固定される。カウンタ306のカウント値COUNTがステージ3′に属する場合においては、制御部307は、分周器305のセレクタ404が信号PLSxを出力しないように、セレクタ404に制御信号PSEL信号を供給する。このため、カウンタ306のカウント値COUNTがステージ3′に属する際においては、フォトンが単位画素201に入射しても、カウンタ306はカウント値COUNTを増加させない。
なお、各々の単位画素201に備えられた制御部307に対して、カウント圧縮制御部206からカウント圧縮制御信号CCSが供給され、制御部307は、カウント圧縮制御信号CCSに基づいて上記のような制御を行う。
また、制御部106は、図8(b)や図9(b)に示すような圧縮パターン情報(テーブル)を、復元部109に供給する。復元部109は、制御部106から供給される圧縮パターン情報に基づいて、固体撮像素子102によって取得された画像信号が入射フォトン数に応じたリニアな信号となるように復元処理を行う。
このように、本実施形態では、カウンタ306におけるカウント値に応じてカウンタ306におけるカウント頻度が変化する。このため、本実施形態では、ダイナミックレンジを十分に確保しつつ、画像データのビット幅を小さくすることができる。画像データのビット幅を小さくすることができるため、カウンタ306及び読み出しメモリ309の規模を小さくすることができ、高画素化に寄与することができる。また、画像データのビット幅を小さくすることができるため、固体撮像素子102の外部に備えられる不図示のフレームメモリ等の容量を小さくすることができ、ひいては、低コスト化に寄与することもできる。
[第2実施形態]
第2実施形態による固体撮像素子及び撮像装置について図10乃至図13を用いて説明する。図1乃至図9に示す第1実施形態による固体撮像素子等と同一の構成要素には、同一の符号を付して説明を省略又は簡潔にする。
本実施形態による固体撮像素子は、単位画素201に備えられたイネーブル信号生成部1001によって生成されるイネーブル信号PEN2を用いて、カウンタ1002におけるカウント頻度を変化させるものである。
図10は、本実施形態による固体撮像素子に備えられた単位画素201を示す図である。図10に示すように、本実施形態による固体撮像素子に備えられた単位画素201は、センサ部300と、計数部1000とを有する。計数部1000は、イネーブル信号生成部1001と、カウンタ1002と、制御部1003と、スイッチ308と、読み出しメモリ309とを有する。
イネーブル信号生成部1001には、センサ部300から出力されるパルス信号PLSが供給される。イネーブル信号生成部1001には、制御部1003から出力される制御信号PSELが供給される。イネーブル信号生成部1001は、カウンタ1002をイネーブル状態にするためのイネーブル信号PEN2をカウンタ1002に供給する。イネーブル信号生成部1001は、カウンタ1002におけるカウント値に基づいて、カウンタ1002を第1の状態にする期間とカウンタ1002を第2の状態にする期間とを調整する。第1の状態は、センサ部300から発せられるパルス信号PLSをカウンタ1002がカウントする状態である。第2の状態は、センサ部300から発せられるパルス信号PLSをカウンタ1002がカウントしない状態である。なお、イネーブル信号生成部1001の構成及び動作については、図11を用いて後述する。
カウンタ1002には、センサ部300から出力されるパルス信号PLSが供給される。カウンタ1002は、パルス信号PLSの数をカウントする。カウンタ1002によって得られたカウント値は画素信号となる。カウンタ1002におけるカウント動作を制御するためのイネーブル信号PENが、タイミング発生部204からカウンタ1002に供給される。カウンタ1002におけるカウント動作を制御するためのイネーブル信号PEN2が、イネーブル信号生成部1001からカウンタ1002に供給される。カウンタ1002は、センサ部300から発せられるパルス信号PLSをカウントする状態である第1の状態と、センサ部300から発せられるパルス信号PLSをカウントしない状態である第2の状態とに切り替え可能である。カウンタ1002の構成及び動作については、図12を用いて後述する。
制御部1003は、カウント圧縮制御部206から供給されるカウント圧縮制御信号CCSと、カウンタ1002から出力されるカウント値とに基づいて、カウント頻度を制御するための制御信号PSELをイネーブル信号生成部1001に供給する。
各々の単位画素201に備えられた制御部1003に対して、カウント圧縮制御部206からカウント圧縮制御信号CCSが供給される。制御部1003は、カウント圧縮制御信号CCSに基づいて、図8及び図9を用いて上述した第1実施形態による固体撮像素子における制御と同様の制御を行う。
図11は、本実施形態による固体撮像素子の単位画素201に備えられたイネーブル信号生成部1001を示す図である。
図11は、3つのD型フリップフロップ1101〜1103が備えられたイネーブル信号生成部1001の例を示している。
イネーブル信号生成部1001は、3つのD型フリップフロップ1101〜1103と、セレクタ1104と、ORゲート1105、1106、インバータ1107とを有する。イネーブル信号生成部1001には、カウント頻度を制御するための制御信号PSEL信号が、制御部1003から供給される。また、イネーブル信号生成部1001には、リセット信号RESがタイミング発生部204から供給される。
D型フリップフロップ1101のクロック端子には、センサ部300から出力されるパルス信号PLSが供給される。D型フリップフロップ1101の入力端子Dには、D型フリップフロップ1101の反転出力端子/Qから出力される信号が供給される。
D型フリップフロップ1102のクロック端子には、D型フリップフロップ1101の出力端子Qから出力される信号D1が供給される。また、D型フリップフロップ1102の入力端子Dには、D型フリップフロップ1102の反転出力端子/Qから出力される信号が供給される。
D型フリップフロップ1103のクロック端子には、D型フリップフロップ1102の出力端子Qから出力される信号D2が供給される。また、D型フリップフロップ1103の入力端子Dには、D型フリップフロップ1103の反転出力端子/Qから出力される信号が供給される。
D型フリップフロップ1101、1102、1103のリセット端子Resetにはタイミング発生部204から出力されるリセット信号RESが供給される。リセット信号RESがHレベルの際、D型フリップフロップ1101、1102、1103の出力端子Qは、Lレベルにリセットされる。
セレクタ1104には、制御部1003から出力される2ビットの制御信号PSELが供給される。セレクタ1104には、以下のような4つの信号が入力される。セレクタ1104には、Lレベルに固定された信号と、D型フリップフロップ401の出力端子Qから出力される信号D1がそのまま用いられた信号/EN1と、ORゲート1105から出力される信号/EN2とが供給される。セレクタ1104には、ORゲート1106から出力される信号/EN3が更に供給される。
ORゲート1105には、D型フリップフロップ1101の出力端子Qから出力される信号D1と、D型フリップフロップ1102の出力端子Qから出力される信号D2とが供給される。ORゲート1106には、D型フリップフロップ1101の出力端子Qから出力される信号D1と、D型フリップフロップ1102の出力端子Qから出力される信号D2と、D型フリップフロップ1103の出力端子Qから出力される信号D3とが供給される。
信号/EN1は、D型フリップフロップ1101の出力端子Qから出力される信号D1であり、パルス信号PLSを2分周することにより得られる信号である。2つのパルス信号PLSに対して1つのアクティブローの信号/EN1が発せられる。
ORゲート1105から出力される信号/EN2は、D型フリップフロップ1101の出力端子Qから出力される信号D1と、D型フリップフロップ1102の出力端子Qから出力される信号D2との論理和の信号である。4つのパルス信号PLSに対して1つのアクティブローの信号/EN2が発せられる。
ORゲート1105から出力される信号/EN3は、信号D1と信号D2と信号D3との論理和である。信号D1は、上述したように、D型フリップフロップ1101の出力端子Qから出力される信号である。信号D2は、上述したように、D型フリップフロップ1102の出力端子Qから出力される信号である、信号D3は、D型フリップフロップ1103の出力端子Qから出力される信号D3である。8つのパルス信号PLSに対して1つのアクティブローの信号/EN3が発せられる。
セレクタ1104は、制御部307から供給される制御信号PSELに応じて、4つの信号のうちから選択される信号を出力する。セレクタ1104から出力される信号を、インバータ1107によって反転することにより、イネーブル信号PEN2が生成される。
なお、イネーブル信号生成部1001の構成はこれに限定されるものではない。イネーブル信号PEN2がHレベルとなる期間を、制御部1003から供給される制御信号PSELに応じて変更し得るイネーブル信号生成部1001を適宜用い得る。
図12は、本実施形態による固体撮像素子の単位画素201に備えられたカウンタ1002を示す図である。図12は、n個のD型フリップフロップ1200−1〜1200−nが備えられたnビットカウンタの例を示している。カウンタ1002は、センサ部300から出力されるパルス信号PLSの立ち上がりエッジに同期してカウント動作を行う。
図12に示すように、カウンタ1002は、n個のD型フリップフロップ1200−1〜1200−nと、ANDゲート1201とを有している。個々のD型フリップフロップについて説明する際には、符号1200−1〜1200−nを用い、D型フリップフロップ一般について説明する際には、符号1200を用いる。
D型フリップフロップ1200−1のクロック端子には、センサ部300から出力されるパルス信号PLSが供給される。D型フリップフロップ1200−2のクロック端子には、D型フリップフロップ1200−1の反転出力端子/Qから出力される信号が供給される。D型フリップフロップ1200−3のクロック端子には、D型フリップフロップ1200−2の反転出力端子/Qから出力される信号が供給される。D型フリップフロップ1200−nのクロック端子には、D型フリップフロップ1200−n−1の反転出力端子/Qから出力される信号が供給される。即ち、各々のD型フリップフロップ1200のクロック端子には、前段に位置するD型フリップフロップ1200の反転出力端子/Qから出力される信号が供給される。
各々のD型フリップフロップ1200のリセット端子Resetには、タイミング発生部204から出力されるリセット信号RESが供給される。リセット信号RESがHレベルの際、各々のD型フリップフロップ1200の出力端子QはLレベルにリセットされる。リセット信号RESがLレベルの際、各々のD型フリップフロップ1200の出力端子Qからは、カウント値の各ビットの値(COUNT[1]、COUNT[2]、・・・、COUNT[n])が出力される。カウンタ1002がこのような構成になっているため、センサ部300から供給されるパルス信号PLSの立ち上がりエッジに同期して、カウント値COUNTが1つずつ増加する。
ANDゲート1201には、イネーブル信号PENとイネーブル信号PEN2とが供給される。イネーブル信号PENとイネーブル信号PEN2のいずれもがHレベルである際には、ANDゲート1201から出力されるHレベルの信号がD型フリップフロップ1200のイネーブル端子ENに供給される。Hレベルの信号がD型フリップフロップ1200のイネーブル端子ENに供給されている際、パルス信号PLSの立ち上がりエッジに同期してカウンタ1002のカウント値COUNTが増加する。イネーブル信号PENとイネーブル信号PEN2とのうちの少なくともいずれかがLレベルになると、ANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される信号はLレベルになる。D型フリップフロップ1200のイネーブル端子ENがLレベルの際には、パルス信号PLSの立ち上がりが生じても、カウンタ1002のカウント値COUNTは更新されることなく維持される。
本実施形態による固体撮像素子は、図8を用いて上述した第1実施形態による固体撮像素子と同様に動作し得る。本実施形態による固体撮像素子の動作の例について図8を用いて説明する。
カウンタ1002のカウント値COUNTが0から15の範囲内である場合、当該カウント値COUNTはステージ1に属する。カウンタ1002のカウント値COUNTがステージ1に属する場合においては、制御部1003は、イネーブル信号生成部1001のセレクタ1104がLレベルの信号を出力するように、セレクタ1104に制御信号PSEL信号を供給する。イネーブル信号生成部1001のセレクタ1104から出力されるLレベルの信号は、インバータ1107によって反転される。このため、Hレベルのイネーブル信号PEN2が、イネーブル信号生成部1001からカウンタ1002に供給される。露光期間中においては、イネーブル信号PENは常にHレベルとなっている。イネーブル信号PENとイネーブル信号PEN2のいずれもがHレベルであるため、Hレベルの信号がANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される。このため、カウンタ1002のカウント値COUNTがステージ1に属する場合には、1つのフォトンが単位画素201に入射する毎に、カウンタ1002はカウント値COUNTを1つずつ増加させる。
カウンタ1002のカウント値COUNTが16から255の範囲内である場合、当該カウント値COUNTはステージ2に属する。カウンタ1002のカウント値COUNTがステージ2に属する場合においては、制御部1003は、イネーブル信号生成部1001のセレクタ1104が信号/EN1を出力するように、セレクタ1104に制御信号PSEL信号を供給する。信号/EN1は、上述したように、D型フリップフロップ1101の出力端子Qから出力される信号D1であり、パルス信号PLSを2分周することにより得られる信号である。上述したように、2つのパルス信号PLSに対して1つのアクティブローの信号/EN1が発せられる。イネーブル信号生成部1001のセレクタ1104から出力される信号/EN1は、インバータ1107によって反転される。このため、2つのパルス信号PLSに対して1つのアクティブハイのイネーブル信号PEN2が、イネーブル信号生成部1001から発せられる。上述したように、露光期間中においては、イネーブル信号PENは常にHレベルとなっている。このため、2つのパルス信号PLSに対して1つのアクティブハイの信号が、ANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される。このため、カウンタ1002のカウント値COUNTがステージ2に属する場合には、2つのフォトンが単位画素201に入射する毎に、カウンタ1002はカウント値COUNTを1つずつ増加させる。
カウンタ1002のカウント値COUNTが256から4095の範囲内である場合、当該カウント値COUNTはステージ3に属する。カウンタ1002のカウント値COUNTがステージ3に属する場合においては、制御部1003は、イネーブル信号生成部1001のセレクタ1104が信号/EN2を出力するように、セレクタ1104に制御信号PSEL信号を供給する。信号/EN2は、上述したように、D型フリップフロップ1101の出力端子Qから出力される信号D1と、D型フリップフロップ1102の出力端子Qから出力される信号D2との論理和の信号である。上述したように、4つのパルス信号PLSに対して1つのアクティブローの信号/EN2が発せられる。イネーブル信号生成部1001のセレクタ1104から出力される信号/EN2は、インバータ1107によって反転される。このため、4つのパルス信号PLSに対して1つのアクティブハイのイネーブル信号PEN2が、イネーブル信号生成部1001から発せられる。上述したように、露光期間中においては、イネーブル信号PENは常にHレベルとなっている。このため、4つのパルス信号PLSに対して1つのアクティブハイの信号が、ANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される。このため、カウンタ1002のカウント値COUNTがステージ3に属する場合には、4つのフォトンが単位画素201に入射する毎に、カウンタ1002はカウント値COUNTを1つずつ増加させる。
カウンタ1002のカウント値COUNTが4096から16383の範囲内である場合、当該カウント値COUNTはステージ4に属する。カウンタ1002のカウント値COUNTがステージ4に属する場合においては、制御部1003は、イネーブル信号生成部1001のセレクタ1104が信号/EN3を出力するように、セレクタ404に制御信号PSEL信号を供給する。信号/EN3は、D型フリップフロップ1101の出力端子Qから出力される信号D1と、D型フリップフロップ1102の出力端子Qから出力される信号D2と、D型フリップフロップ1103の出力端子Qから出力される信号D3との論理和の信号である。上述したように、8つのパルス信号PLSに対して1つのアクティブローの信号/EN3が発せられる。イネーブル信号生成部1001のセレクタ1104から出力される信号/EN3は、インバータ1107によって反転される。このため、8つのパルス信号PLSに対して1つのアクティブハイのイネーブル信号PEN2が、イネーブル信号生成部1001から発せられる。上述したように、露光期間中においては、イネーブル信号PENは常にHレベルとなっている。このため、8つのパルス信号PLSに対して1つのアクティブハイの信号が、ANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される。このため、カウンタ1002のカウント値COUNTがステージ4に属する場合には、8つのフォトンが単位画素201に入射する毎に、カウンタ1002はカウント値COUNTを1つずつ増加させる。
このように、本実施形態においても、カウンタ1002におけるカウント値に応じてカウンタ1002におけるカウント頻度が変化する。
本実施形態による固体撮像素子は、図9を用いて上述した第1実施形態による固体撮像素子と同様に動作することも可能である。本実施形態による固体撮像素子の動作の他の例について図9を用いて説明する。
図9に示す例においては、被写体の輝度が比較的高い場合、即ち、撮像感度が比較的低く設定される場合には、図8を用いて上述した例と同様に、制御が行われる。
また、図9に示す例においては、被写体の輝度が比較的低い場合、即ち、撮像感度が比較的高く設定される場合には、以下のような制御が行われる。ここでは、カウンタ1002のビット幅が14ビットである場合を例に説明する。
カウンタ1002のカウント値COUNTが0から255の範囲内である場合、当該カウント値COUNTはステージ1′に属する。カウンタ1002のカウント値COUNTがステージ1′に属する場合においては、制御部1003は、イネーブル信号生成部1001のセレクタ1104がLレベルの信号を出力するように、セレクタ1104に制御信号PSEL信号を供給する。イネーブル信号生成部1001のセレクタ1104から出力されるLレベルの信号は、インバータ1107によって反転される。このため、Hレベルのイネーブル信号PEN2がイネーブル信号生成部1001からカウンタ1002に供給される。このため、カウンタ1002のカウント値COUNTがステージ1′に属する場合には、Hレベルの信号がANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される。このため、カウンタ1002のカウント値COUNTがステージ1′に属する場合には、1つのフォトンが単位画素201に入射する毎に、カウンタ1002はカウント値COUNTを1つずつ増加させる。
カウンタ1002のカウント値COUNTが256から16383の範囲内である場合、当該カウント値COUNTはステージ2′に属する。カウンタ1002のカウント値COUNTがステージ2′に属する場合においては、制御部1003は、イネーブル信号生成部1001のセレクタ1104が信号/EN1を出力するように、セレクタ1104に制御信号PSEL信号を供給する。信号/EN1は、上述したように、D型フリップフロップ1101の出力端子Qから出力される信号D1であり、パルス信号PLSを2分周することにより得られる信号である。上述したように、2つのパルス信号PLSに対して1つのアクティブローの信号/EN1が発せられる。イネーブル信号生成部1001のセレクタ1104から出力される信号/EN1は、インバータ1107によって反転される。このため、2つのパルス信号PLSに対して1つのアクティブハイのイネーブル信号PEN2が、イネーブル信号生成部1001から発せられる。上述したように、露光期間中においては、イネーブル信号PENは常にHレベルとなっている。このため、2つのパルス信号PLSに対して1つのアクティブハイの信号が、ANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される。このため、カウンタ1002のカウント値COUNTがステージ2′に属する場合には、2つのフォトンが単位画素201に入射する毎に、カウンタ1002はカウント値COUNTを1つずつ増加させる。
センサ部300から出力されるパルス信号PLSの数が16383を超える場合には、当該カウント値COUNTはステージ3′に属し、カウンタ1002のカウント値は16383に固定される。カウンタ1002のカウント値COUNTがステージ3′に属する場合においては、制御部1003は、イネーブル信号生成部1001のセレクタ1104が信号を選択しないように、セレクタ1104に制御信号PSEL信号を供給する。このため、セレクタ1104の出力はHレベルとなる。セレクタ1104の出力はインバータ1107によって反転されるため、セレクタ1104の出力がHレベルの際には、イネーブル信号生成部1001からカウンタ1002のANDゲート1201に供給される信号はLレベルとなる。このため、ANDゲート1201からD型フリップフロップ1200のイネーブル端子ENに供給される信号はLレベルとなる。このため、カウンタ1002のカウント値COUNTがステージ3′に属する場合には、フォトンが単位画素201に入射しても、カウンタ1002はカウント値COUNTを増加させない。
なお、各々の単位画素201に備えられた制御部1003に対して、カウント圧縮制御部206からカウント圧縮制御信号CCSが供給され、制御部1003は、カウント圧縮制御信号CCSに基づいて上記のような制御を行う。
また、制御部1003は、図8(b)や図9(b)に示すような圧縮パターン情報を、復元部109に供給する。復元部109は、制御部1003から供給される圧縮パターン情報を用い、固体撮像素子102によって取得された画像信号が入射フォトン数に応じたリニアな信号となるように復元処理を行う。
このように、本実施形態においても、カウンタ1002におけるカウント値に応じてカウンタ1002におけるカウント頻度が変化する。このため、本実施形態においても、ダイナミックレンジを十分に確保しつつ、画像データのビット幅を小さくすることができる。
[第3実施形態]
第3実施形態による固体撮像素子及び撮像装置について図13乃至図16を用いて説明する。図1乃至図12に示す第1又は第2実施形態による固体撮像素子等と同一の構成要素には、同一の符号を付して説明を省略又は簡潔にする。
図13は、本実施形態による固体撮像素子に備えられた単位画素201を示す図である。図13に示すように、本実施形態による固体撮像素子に備えられた単位画素201は、センサ部300と、計数部1300とを有する。計数部1300は、カウンタ1301と、カウント値処理部1302と、カウンタ1303と、制御部1304と、スイッチ308と、読み出しメモリ309とを有する。
カウンタ1301には、センサ部300から出力されるパルス信号PLSが供給される。カウンタ1301は、パルス信号PLSの数をカウントする。カウンタ1301におけるカウント動作を制御するためのイネーブル信号PENが、タイミング発生部204からカウンタ1301に供給される。カウンタ1301は、パルス信号PLSの立ち上がりエッジに同期してカウント動作を行う。カウンタ1301の構成は、例えば図5を用いて上述したカウンタ306と同様である。
カウント値処理部1302には、カウンタ1301から出力されるカウント値DOUTが供給される。カウント値処理部1302は、カウンタ1303に対して信号DINを供給する。カウント値処理部1302は、カウント値DOUTに対してビットシフト等の処理を施すことにより複数の信号を生成する。カウント値処理部1302は、生成した複数の信号のうちのいずれかを、制御部1304から供給される制御信号PSELに応じて選択する。カウント値処理部1302は、こうして選択した信号を信号DINとしてカウンタ1303に供給する。カウント値処理部1302の構成及び動作については、図14を用いて後述する。
カウンタ1303には、センサ部300から出力されるパルス信号PLSが供給される。カウンタ1303は、パルス信号PLSの数をカウントする。カウンタ1303によって得られたカウント値は画素信号となる。カウンタ1303には、カウント値処理部1302から信号DINが供給される。カウンタ1303の構成及び動作については、図15を用いて後述する。
各々の単位画素201に備えられた制御部1304に対して、カウント圧縮制御部206からカウント圧縮制御信号CCSが供給される。制御部1304は、カウント圧縮制御部206から供給されるカウント圧縮制御信号CCSと、カウンタ1303から供給されるカウント値とに応じて、カウント頻度を制御するための制御信号PSELを出力する。制御部1304から出力される制御信号PSELは、カウント値処理部1302に供給される。制御部1304からカウント値処理部1302に適切な制御信号PSELが供給されることにより、図8及び図9を用いて上述した第1及び第2実施形態による固体撮像素子における制御と同様の制御が行われる。
図14は、本実施形態による固体撮像素子の単位画素201に備えられたカウント値処理部1302を示す図である。
カウント値処理部1302は、加算器1401と、ビットシフト部1402と、セレクタ1403とを有する。カウント値処理部1302には、カウント頻度を制御するための制御信号PSELが制御部1304から供給される。
加算器1401には、カウンタ1301から出力されるカウント値DOUTが供給される。加算器1401は、カウンタ1301から供給されるカウント値DOUTに対して1を加算することにより得られる値を、ビットシフト部1402に供給する。
ビットシフト部1402は、加算器1401から供給される値がそのまま用いられた値S0を、セレクタ1403に供給する。また、ビットシフト部1402は、加算器1401から供給される値を下位に1ビットシフトさせることにより得られる値S1を、セレクタ1403に供給する。また、ビットシフト部1402は、加算器1401から供給される値を下位に2ビットシフトさせることにより得られる値S2を、セレクタ1403に供給する。また、ビットシフト部1402は、加算器1401から供給される値を下位に3ビットシフトさせることにより得られる値S3を、セレクタ1404に供給する。
セレクタ1403は、制御部1304から供給される2ビットの制御信号PSELによって制御される。セレクタ1403は、ビットシフト部1402から出力される4つの値S0〜S3のうちのいずれかを、制御部1304から供給される制御信号PSELに応じて選択し、選択した信号を信号DINとして出力する。
なお、カウント値処理部1302の構成はこれに限定されるものではない。制御部1304から供給される制御信号PSELに応じて信号DINを所定の値に切り替え得るカウント値処理部1302を適宜用い得る。
図15は、本実施形態による固体撮像素子の単位画素201に備えられたカウンタ1303を示す図である。図15は、n個のD型フリップフロップ1500−1〜1500−nが備えられたnビットカウンタの例を示している。カウンタ1303は、センサ部300から出力されるパルス信号PLSの立ち上がりエッジに同期してカウント動作を行う。
図15に示すように、カウンタ1303は、n個のD型フリップフロップ1500−1〜1500−nを有している。個々のD型フリップフロップについて説明する際には、符号1500−1〜1500−nを用い、D型フリップフロップ一般について説明する際には、符号1500を用いる。
D型フリップフロップ1500の各々のクロック端子には、センサ部300から出力されるパルス信号PLSが供給される。D型フリップフロップ1500の各々のリセット端子Resetには、タイミング発生部204から出力されるリセット信号RESが供給される。リセット信号RESがHレベルの際、各々のD型フリップフロップ1500の出力端子QはLレベルにリセットされる。リセット信号RESがLレベルの際、各々のD型フリップフロップ1500の出力端子Qからは、カウント値の各ビットの値(COUNT[1]、COUNT[2]、・・・、COUNT[n])が出力される。カウンタ1303がこのような構成になっているため、センサ部300から出力されるパルス信号PLSの立ち上がりエッジに同期して、カウンタ1303のカウント値COUNTが1つずつ増加する。
D型フリップフロップ1500の各々の入力端子Dには、カウント値処理部1302から出力される信号DINの各ビットの値が入力される。カウント値処理部1302から出力される信号DINの最下位ビットの値DI[1]は、D型フリップフロップ1500−1の入力端子Dに供給される。カウント値処理部1302から出力される信号DINの最上位ビットの値DI[n]は、D型フリップフロップ1500−nの入力端子Dに供給される。カウンタ1303に入力される信号DINによって、カウンタ1303から出力されるカウント値COUNTが変化する。カウント値DOUTに対する処理をカウント値処理部1302によって適切に行うことにより、カウント値の圧縮を行うことが可能である。
図16は、本実施形態による固体撮像素子の単位画素201に備えられた計数部1300の動作を示すタイミングチャートである。図16には、図8を用いて上述したステージ1〜4のそれぞれにおける動作が示されている。
ステージ1においては、カウンタ1301から出力されるカウント値DOUTに対して、加算器1401によって1が加えられる。カウント値DOUTに対して1を加えることにより得られる値が、信号DINとしてカウンタ1303に供給される。カウンタ1303から出力されるカウント値COUNTは、パルス信号PLSの立ち上がりエッジに同期して、カウント値処理部1302から供給される信号DINによって更新される。このため、カウンタ1303のカウント値は、ステージ1においては、パルス信号PLSに同期して1つずつ増加する。即ち、カウンタ1303のカウント値は、1つのフォトンが単位画素201に入射する毎に1つずつ増加する。
ステージ2においては、カウンタ1301から出力されるカウント値DOUTに対して、加算器1401によって1が加えられる。カウント値DOUTに1を加えることにより得られる値が、ビットシフト部1402によって、下位に1ビットシフトされる。こうして得られる値が、信号DINとしてカウンタ1303に供給される。カウンタ1303から出力されるカウント値COUNTは、パルス信号PLSの立ち上がりエッジに同期して、カウント値処理部1302から供給される信号DINによって更新される。このため、カウンタ1303のカウント値は、ステージ2においては、2つのパルス信号PLSが入力される毎に1つずつ増加する。即ち、カウンタ1303のカウント値は、2つのフォトンが単位画素201に入射する毎に1つずつ増加する。
ステージ3においては、カウンタ1301から出力されるカウント値DOUTに対して、加算器1401によって1が加えられる。カウント値DOUTに1を加えることにより得られる値が、ビットシフト部1402によって、下位に2ビットシフトされる。こうして得られる値が、信号DINとしてカウンタ1303に供給される。カウンタ1303から出力されるカウント値COUNTは、パルス信号PLSの立ち上がりエッジに同期して、カウント値処理部1302から供給される信号DINによって更新される。このため、カウンタ1303のカウント値は、ステージ3においては、4つのパルス信号PLSが入力される毎に1つずつ増加する。即ち、カウンタ1303のカウント値は、4つのフォトンが単位画素201に入射する毎に1つずつ増加する。
ステージ4においては、カウンタ1301から出力されるカウント値DOUTに対して、加算器1401によって1が加えられる。カウント値DOUTに1を加えることにより得られる値が、ビットシフト部1402によって、下位に3ビットシフトされる。こうして得られる値が、信号DINとしてカウンタ1303に供給される。カウンタ1303から出力されるカウント値COUNTは、パルス信号PLSの立ち上がりエッジに同期して、カウント値処理部1302から供給される信号DINによって更新される。このため、カウンタ1303のカウント値は、ステージ4においては、8つのパルス信号PLSが入力される毎に1つずつ増加する。即ち、カウンタ1303のカウント値は、8つのフォトンが単位画素201に入射する毎に1つずつ増加する。
このように、本実施形態においても、カウンタのカウント値に応じてカウント頻度が変化する。
[変形実施形態]
以上、本発明の実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
例えば、上記実施形態では、パルス信号PLSに同期してカウント値が増加するインクリメント型のカウンタを用いる場合を例に説明したが、これに限定されるものではない。例えば、パルス信号PLSに同期してカウント値が減少するデクリメント型のカウンタを用いるようにしてもよい。
また、上記実施形態では、パルス信号PLSの数に対して線形にカウント値が増加する場合を説明したが、これに限定されるものではない。例えば、パルス信号PLSの数に対して非線形にカウント値が増加するようにしてもよい。
101:撮影レンズ
102:固体撮像素子
103:信号処理部
104:メモリ部
105:記録部
106:制御部
107:操作部
108:表示部
109:復元部
200:画素アレイ
201:単位画素
202:垂直選択回路
203:水平選択回路
204:タイミング発生部
205:出力部
206:カウント圧縮制御部
207,208:スイッチ

Claims (9)

  1. 光子の受光頻度に応じた頻度でパルスを発するセンサ部と、
    前記センサ部から発せられるパルスを、前記センサ部から発せられるパルスの数に応じた間引き度合いで間引いてカウントする計数部と
    を有することを特徴とする固体撮像素子。
  2. 前記計数部は、前記センサ部から発せられるパルスをカウントするカウンタと、前記カウンタにおけるカウント値に応じて前記間引き度合いを切り替える制御部とを有することを特徴とする請求項1に記載の固体撮像素子。
  3. 前記制御部は、前記カウンタにおけるカウント値が大きくなるに伴って、前記間引き度合いを大きくすることを特徴とする請求項2に記載の固体撮像素子。
  4. 前記計数部は、前記センサ部から発せられるパルスに対して間引き処理を行う間引き処理部を更に備え、
    前記カウンタは、前記間引き処理部によって間引き処理を施すことにより得られる信号をカウントすることを特徴とする請求項2又は3に記載の固体撮像素子。
  5. 前記カウンタは、前記センサ部から発せられるパルスをカウントする状態である第1の状態と、前記センサ部から発せられるパルスをカウントしない状態である第2の状態とに切り替え可能であり、
    前記制御部は、前記カウンタにおけるカウント値に基づいて、前記カウンタを前記第1の状態にする期間と前記カウンタを前記第2の状態にする期間とを調整することを特徴とする請求項2又は3に記載の固体撮像素子。
  6. 前記制御部は、前記カウンタにおけるカウント値と撮像感度に応じた信号とに応じて前記間引き度合いを切り替えることを特徴とする請求項2から5のいずれか1項に記載の固体撮像素子。
  7. 前記センサ部は、アバランシェフォトダイオードとクエンチ抵抗とを備えることを特徴とする請求項1から6のいずれか1項に記載の固体撮像素子。
  8. 光子の受光頻度に応じた頻度でパルスを発するセンサ部と、前記センサ部から発せられるパルスを、前記センサ部から発せられるパルスの数に応じた間引き度合いで間引いてカウントする計数部とを有する固体撮像素子と、
    前記固体撮像素子から出力される信号に対して所定の処理を行う処理部と
    を有することを特徴とする撮像装置。
  9. 光子の受光頻度に応じた頻度でセンサ部から発せられるパルスを、前記センサ部から発せられるパルスの数に応じた第1の間引き度合いで間引いてカウントするステップと、
    前記センサ部から発せられるパルスを、前記センサ部から発せられるパルスの数に応じて、前記第1の間引き度合いよりも大きい第2の間引き度合いで間引いてカウントするステップと
    を有することを特徴とする撮像方法。
JP2018008096A 2018-01-22 2018-01-22 固体撮像素子、撮像装置及び撮像方法 Active JP7022598B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018008096A JP7022598B2 (ja) 2018-01-22 2018-01-22 固体撮像素子、撮像装置及び撮像方法
PCT/JP2018/044168 WO2019142510A1 (ja) 2018-01-22 2018-11-30 固体撮像素子、撮像装置及び撮像方法
US16/930,972 US11190717B2 (en) 2018-01-22 2020-07-16 Solid state image sensor, image capturing apparatus, and image capturing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018008096A JP7022598B2 (ja) 2018-01-22 2018-01-22 固体撮像素子、撮像装置及び撮像方法

Publications (2)

Publication Number Publication Date
JP2019129338A true JP2019129338A (ja) 2019-08-01
JP7022598B2 JP7022598B2 (ja) 2022-02-18

Family

ID=67302210

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018008096A Active JP7022598B2 (ja) 2018-01-22 2018-01-22 固体撮像素子、撮像装置及び撮像方法

Country Status (3)

Country Link
US (1) US11190717B2 (ja)
JP (1) JP7022598B2 (ja)
WO (1) WO2019142510A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024185281A1 (ja) * 2023-03-03 2024-09-12 ソニーセミコンダクタソリューションズ株式会社 光検出装置およびカウンタ回路

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11622086B2 (en) * 2018-02-02 2023-04-04 Sony Semiconductor Solutions Corporation Solid-state image sensor, imaging device, and method of controlling solid-state image sensor
US11137607B2 (en) * 2019-06-28 2021-10-05 Canon Kabushiki Kaisha Image capturing and display apparatus and wearable device
JP2022096472A (ja) 2020-12-17 2022-06-29 キヤノン株式会社 光電変換装置及びその駆動方法
JP2024067906A (ja) * 2022-11-07 2024-05-17 ソニーセミコンダクタソリューションズ株式会社 光検出装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000253320A (ja) * 1999-02-25 2000-09-14 Nippon Hoso Kyokai <Nhk> 固体撮像装置
JP2004193675A (ja) * 2002-12-06 2004-07-08 Victor Co Of Japan Ltd イメージセンサ
JP2013090139A (ja) * 2011-10-18 2013-05-13 Sony Corp 撮像素子およびカメラシステム
WO2014097519A1 (ja) * 2012-12-18 2014-06-26 パナソニック株式会社 半導体光検出器
JP2016029753A (ja) * 2014-07-25 2016-03-03 キヤノン株式会社 撮像装置
WO2016042734A1 (ja) * 2014-09-19 2016-03-24 パナソニックIpマネジメント株式会社 固体撮像装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0799868B2 (ja) * 1984-12-26 1995-10-25 日本放送協会 固体撮像装置
US8426797B2 (en) * 2010-03-23 2013-04-23 Massachusetts Institute Of Technology CMOS readout architecture and method for photon-counting arrays

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000253320A (ja) * 1999-02-25 2000-09-14 Nippon Hoso Kyokai <Nhk> 固体撮像装置
JP2004193675A (ja) * 2002-12-06 2004-07-08 Victor Co Of Japan Ltd イメージセンサ
JP2013090139A (ja) * 2011-10-18 2013-05-13 Sony Corp 撮像素子およびカメラシステム
WO2014097519A1 (ja) * 2012-12-18 2014-06-26 パナソニック株式会社 半導体光検出器
JP2016029753A (ja) * 2014-07-25 2016-03-03 キヤノン株式会社 撮像装置
WO2016042734A1 (ja) * 2014-09-19 2016-03-24 パナソニックIpマネジメント株式会社 固体撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024185281A1 (ja) * 2023-03-03 2024-09-12 ソニーセミコンダクタソリューションズ株式会社 光検出装置およびカウンタ回路

Also Published As

Publication number Publication date
WO2019142510A1 (ja) 2019-07-25
JP7022598B2 (ja) 2022-02-18
US20200358972A1 (en) 2020-11-12
US11190717B2 (en) 2021-11-30

Similar Documents

Publication Publication Date Title
JP7022598B2 (ja) 固体撮像素子、撮像装置及び撮像方法
JP6961392B2 (ja) 固体撮像素子、撮像装置及び撮像方法
US10389956B2 (en) Image sensor
JP4449565B2 (ja) 物理量分布検知の半導体装置
US9374097B2 (en) Data processor, solid-state imaging device, imaging device, and electronic apparatus
US7522082B2 (en) Digital-to-analog converter, analog-to-digital converter, and semiconductor device
US7227570B2 (en) Solid-state image pickup device and signal processing method therefor
JP4193768B2 (ja) データ処理方法並びに物理量分布検知の半導体装置および電子機器
US7859447B2 (en) Image processing method, semiconductor device for detecting physical quantity distribution, and electronic apparatus
US20060013485A1 (en) Data processing method, data processing apparatus, semiconductor device, and electronic apparatus
KR20080067963A (ko) 고체 상태 촬상 장치 및 촬상 장치
US10834349B2 (en) Solid-state image sensor, image capturing apparatus and image capturing method
JPWO2017169724A1 (ja) 信号処理装置および方法、撮像素子、並びに電子機器
KR20160145217A (ko) 카운팅 회로, 그 카운팅 회로를 포함하는 이미지 센싱 장치 및 그 이미지 센싱 장치의 리드아웃 방법
JP7108471B2 (ja) 固体撮像素子、撮像装置及び撮像方法
JP6112871B2 (ja) 撮像素子及び撮像装置
JP6230365B2 (ja) 撮像装置及びその制御方法
CN118574030A (zh) 光电转换装置、光电转换装置的控制方法和存储介质
JP2021164041A (ja) 半導体デバイス

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210121

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210507

RD05 Notification of revocation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7425

Effective date: 20210526

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220207

R151 Written notification of patent or utility model registration

Ref document number: 7022598

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151