JP7245178B2 - 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 - Google Patents

固体撮像素子、撮像装置、および、固体撮像素子の制御方法 Download PDF

Info

Publication number
JP7245178B2
JP7245178B2 JP2019568897A JP2019568897A JP7245178B2 JP 7245178 B2 JP7245178 B2 JP 7245178B2 JP 2019568897 A JP2019568897 A JP 2019568897A JP 2019568897 A JP2019568897 A JP 2019568897A JP 7245178 B2 JP7245178 B2 JP 7245178B2
Authority
JP
Japan
Prior art keywords
power supply
potential
supply potential
photodiode
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019568897A
Other languages
English (en)
Other versions
JPWO2019150752A1 (ja
Inventor
豊 稲岡
弘博 朱
挙文 高塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Semiconductor Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corp filed Critical Sony Semiconductor Solutions Corp
Publication of JPWO2019150752A1 publication Critical patent/JPWO2019150752A1/ja
Application granted granted Critical
Publication of JP7245178B2 publication Critical patent/JP7245178B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14625Optical elements or arrangements associated with the device
    • H01L27/14627Microlenses
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14643Photodiode arrays; MOS imagers
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L31/00Semiconductor devices sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation; Processes or apparatus specially adapted for the manufacture or treatment thereof or of parts thereof; Details thereof
    • H01L31/02Details
    • H01L31/02016Circuit arrangements of general character for the devices
    • H01L31/02019Circuit arrangements of general character for the devices for devices characterised by at least one potential jump barrier or surface barrier
    • H01L31/02027Circuit arrangements of general character for the devices for devices characterised by at least one potential jump barrier or surface barrier for devices working in avalanche mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/59Control of the dynamic range by controlling the amount of charge storable in the pixel, e.g. modification of the charge conversion ratio of the floating node capacitance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/701Line sensors
    • H04N25/7013Line sensors using abutted sensors forming a long line
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/772Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters
    • H04N25/773Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters comprising photon counting circuits, e.g. single photon detection [SPD] or single photon avalanche diodes [SPAD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Power Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Photometry And Measurement Of Optical Pulse Characteristics (AREA)
  • Light Receiving Elements (AREA)

Description

本技術は、固体撮像素子、撮像装置、および、固体撮像素子の制御方法に関する。詳しくは、画像データを撮像する固体撮像素子、撮像装置、および、固体撮像素子の制御方法に関する。
従来より、撮像装置などにおいて、画像データを撮像するために複数の画素を配列した半導体デバイスが用いられている。例えば、光電流を増幅するアバランシェフォトダイオードなどのフォトダイオードとCMOS(Complementary MOS)とを画素毎に設けた半導体デバイスが提案されている(例えば、特許文献1参照。)。この半導体デバイスでは、全ての画素について電源電位は同一の値に制御される。
米国特許出願公開第2010/0019343号明細書
上述の従来技術では、アバランシェフォトダイオードにより光電流が増幅されるため、微弱な光を検出することができる。しかしながら、この従来技術では、消費電力を低減することが困難である。例えば、電源電位を低下させれば消費電力を低減することはできるが、電源電位の低下により全画素の感度が低下して、特に照度の低い光が入射する画素において明るさが不足するおそれがある。
本技術はこのような状況に鑑みて生み出されたものであり、微弱な光を検出する固体撮像素子において、消費電力を低減することを目的とする。
本技術は、上述の問題点を解消するためになされたものであり、その第1の側面は、入射光を光電変換して光電流を出力するフォトダイオードと、上記光電流が出力されるたびに上記フォトダイオードの一端の電位を電源電位より低い値に降下させる抵抗と、上記一端の電位が降下した頻度に基づいて上記入射光の照度を測定する測定部と、上記測定された照度が高いほど低い値に上記電源電位を制御する電源制御部とを具備する固体撮像素子、および、その制御方法である。これにより、照度が高いほど低い値に電源電位が制御されるという作用をもたらす。
また、この第1の側面において、上記電源制御部は、上記照度と所定の閾値との比較結果に基づいて上記電源電位を制御してもよい。これにより、2つの電位のいずれかに電源電位が制御されるという作用をもたらす。
また、この第1の側面において、上記電源制御部は、上記照度と互いに異なる複数の閾値との比較結果に基づいて上記電源電位を制御してもよい。これにより、3つの電位のいずれかに電源電位が制御されるという作用をもたらす。
また、この第1の側面において、上記フォトダイオード、上記抵抗、上記測定部および上記電源制御部は、二次元格子状に配列された複数の画素回路のそれぞれに配置されてもよい。これにより、画素回路ごとに電源電位が制御されるという作用をもたらす。
また、この第1の側面において、上記測定部は、所定の露光期間内において上記一端の電位が降下した回数を計数して当該計数値を上記照度の測定値として上記電源制御部に供給してもよい。これにより、露光期間内に上記一端の電位が降下した回数に応じて電源電位が制御されるという作用をもたらす。
また、この第1の側面において、互いに異なる複数の電位のいずれかを切替信号に従って選択して上記電源電位として供給する選択部をさらに具備し、上記電源制御部は、上記切替信号を上記選択部に供給してもよい。これにより、複数の電位のいずれかに電源電位が制御されるという作用をもたらす。
また、本技術の第2の側面は、入射光を集光する撮像レンズと、上記入射光を光電変換して光電流を出力するフォトダイオードと、上記光電流が出力されるたびに上記フォトダイオードの一端の電位を電源電位より低い値に降下させる抵抗と、上記一端の電位が降下した頻度に基づいて上記入射光の照度を測定する測定部と、上記測定された照度が高いほど低い値に上記電源電位を制御する電源制御部とを具備する固体撮像素子である。これにより、撮像レンズからの入射光の照度が高いほど低い値に電源電位が制御されるという作用をもたらす。
また、本技術の第3の側面は、所定の露光期間内に光子が入射した回数を計数して計数値を出力する計数部と、上記所定の露光期間が経過する前に上記計数値が所定の制限値に達した場合には上記計数部を停止させる計数制御部と、上記計数部を停止させるまでの時間に基づいて上記所定の露光期間内の光子の入射回数を推定して推定値として出力する推定部とを具備する固体撮像素子、および、その制御方法である。これにより、計数値が所定の制限値に達した場合に計数部が停止し、推定値が出力されるという作用をもたらす。
また、この第3の側面において、上記推定部は、上記計数部を停止させるまでの時間と上記所定の露光期間の長さと上記所定の制限値とから上記推定値を求めてもよい。これにより、計数値が所定の制限値に達するまでの時間と所定の露光期間の長さと所定の制限値とから得られた推定値が出力されるという作用をもたらす。
また、この第3の側面において、1つの光子の入射の有無を検出するフォトダイオードと、上記光子の入射が検出されるたびに上記フォトダイオードの一端の電位を初期状態へ戻すための抵抗と、上記計数値が上記所定の制限値に達した場合には上記推定値を出力値として出力し、上記計数値が上記所定の制限値に達していない場合には上記計数値を上記出力値として出力するスイッチと、上記出力値に応じて上記電源電位を制御する電源制御部とをさらに具備し、上記計数部は、上記一端の電位が前記光子の入射の有無の検出により変動した回数を計数し、上記計数制御部および上記推定部は、上記電源電位に応じて上記所定の制限値を制御することもできる。これにより、電源電位に応じて制御された制限値に計数値が達した場合に計数部が停止するという作用をもたらす。
また、この第3の側面において、上記電源制御部は、上記出力値と所定の閾値との比較結果に基づいて上記電源電位を制御してもよい。これにより、2つの電位のいずれかに電源電位が制御されるという作用をもたらす。
また、この第3の側面において、上記電源制御部は、上記出力値と互いに異なる複数の閾値との比較結果に基づいて上記電源電位を制御してもよい。これにより、3つ以上の電位のいずれかに電源電位が制御されるという作用をもたらす。
また、この第3の側面において、上記フォトダイオードおよび上記抵抗は、受光チップに配置され、上記計数部、上記計数制御部、上記推定部、上記スイッチおよび上記電源制御部は、上記受光チップに積層されたロジックチップに配置されてもよい。これにより、受光チップ内の抵抗により、電位降下が生じるという作用をもたらす。
また、この第3の側面において、上記フォトダイオードは、受光チップに配置され、上記抵抗、上記計数部、上記計数制御部、上記推定部、上記スイッチおよび上記電源制御部は、上記受光チップに積層されたロジックチップに配置されてもよい。これにより、ロジックチップ内の抵抗により、電位降下が生じるという作用をもたらす。
また、この第3の側面において、上記計数部および上記計数制御部は、二次元格子状に配列された複数の画素回路のそれぞれに配置されてもよい。これにより、画素回路ごとに、推定値が出力されるという作用をもたらす。
また、本技術の第4の側面は、所定の露光期間内に光子が入射した回数を計数して計数値を出力する計数部と、上記所定の露光期間が経過する前に上記計数値が所定の制限値に達した場合には上記計数部を停止させる計数制御部と、上記計数部を停止させるまでの時間に基づいて上記所定の露光期間内の光子の入射回数を推定して推定値として出力する推定部と、上記推定値から生成された画像データを記録する記録部とを具備する撮像装置である。これにより、計数値が所定の制限値に達した場合に計数部が停止し、推定値から生成された画像データが記録されるという作用をもたらす。
本技術によれば、微弱な光を検出する固体撮像素子において、消費電力を低減することができるという優れた効果を奏し得る。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術の第1の実施の形態における撮像装置の一構成例を示すブロック図である。 本技術の第1の実施の形態における固体撮像素子の積層構造の一例を示す図である。 本技術の第1の実施の形態における受光チップの一構成例を示す平面図である。 本技術の第1の実施の形態におけるロジックチップの一構成例を示すブロック図である。 本技術の第1の実施の形態における画素回路の一構成例を示す回路図である。 本技術の第1の実施の形態におけるアノード、カソードを逆にした際の画素回路の一構成例を示す回路図である。 本技術の第1の実施の形態における撮像装置の動作の一例を示すタイミングチャートである。 本技術の第1の実施の形態における電源制御部の動作の一例を示す図である。 本技術の第1の実施の形態と比較例とのそれぞれにおける画素ごとの電源電位の一例を示す図である。 本技術の第1の実施の形態における撮像装置の動作の一例を示すフローチャートである。 本技術の第1の実施の形態の変形例における画素回路の一構成例を示す回路図である。 本技術の第1の実施の形態の変形例における電源制御部の動作の一例を示す図である。 本技術の第2の実施の形態におけるロジックチップの一構成例を示すブロック図である。 本技術の第2の実施の形態における画素回路の一構成例を示す回路図である。 本技術の第2の実施の形態におけるアノード、カソードを逆にした際の画素回路の一構成例を示す回路図である。 本技術の第2の実施の形態におけるフォトンカウンタの動作の一例を示す図である。 本技術の第2の実施の形態における計数制御部の動作の一例を示す図である。 本技術の第2の実施の形態における信号処理部の動作の一例を示す図である。 本技術の第2の実施の形態における撮像装置の動作の一例を示すタイミングチャートである。 本技術の第2の実施の形態における計数値の変動の一例を示す図である。 本技術の第2の実施の形態における画素回路の動作の一例を示すフローチャートである。 本技術の第2の実施の形態における計数処理の一例を示すフローチャートである。 本技術の第2の実施の形態の変形例における画素回路の一構成例を示す回路図である。 本技術の第3の実施の形態における画素回路の一構成例を示す回路図である。 本技術の第3の実施の形態における電源制御部の動作の一例を示す図である。 本技術の第3の実施の形態における計数制御部の動作の一例を示す図である。 本技術の第3の実施の形態における信号処理部の動作の一例を示す図である。 本技術の第3および第2の実施の形態における画素ごとの電源電位の一例を示す図である。 本技術の第3の実施の形態における画素回路の動作の一例を示すフローチャートである。 本技術の第3の実施の形態の変形例における画素回路の一構成例を示す回路図である。 本技術の第3の実施の形態の変形例における電源制御部の動作の一例を示す図である。 本技術の第3の実施の形態の変形例における計数制御部の動作の一例を示す図である。 本技術の第3の実施の形態の変形例における信号処理部の動作の一例を示す図である。 車両制御システムの概略的な構成例を示すブロック図である。 撮像部の設置位置の一例を示す説明図である。
以下、本技術を実施するための形態(以下、実施の形態と称する)について説明する。説明は以下の順序により行う。
1.第1の実施の形態(照度に応じて電源電位を2段階に制御する例)
2.第2の実施の形態(計数値が上限値に達すると計数を停止する例)
3.第3の実施の形態(電源電位を制御し、計数値が上限値に達すると計数を停止する例)
4.移動体への応用例
<1.第1の実施の形態>
[撮像装置の構成例]
図1は、本技術の第1の実施の形態における撮像装置100の一構成例を示すブロック図である。この撮像装置100は、画像データを撮像するものであり、撮像レンズ110、固体撮像素子200、記録部120および撮像制御部130を備える。撮像装置100としては、例えば、スマートフォン、デジタルカメラ、パーソナルコンピュータ、車載カメラやIoT(Internet of Things)カメラが想定される。
撮像レンズ110は、入射光を集光して固体撮像素子200に導くものである。固体撮像素子200は、撮像制御部130の制御に従って画像データを撮像するものである。この固体撮像素子200は、撮像した画像データを記録部120に信号線209を介して供給する。記録部120は、画像データを記録するものである。
撮像制御部130は、固体撮像素子200を制御して画像データを撮像させるものである。この撮像制御部130は、例えば、垂直同期信号などの同期信号と、露光期間を制御する露光制御信号とを固体撮像素子200に信号線139を介して供給する。
なお、撮像装置100は、インターフェースをさらに備え、そのインターフェースにより画像データを外部に送信してもよいし、表示部をさらに備え、表示部に画像データを表示してもよい。
[固体撮像素子の構成例]
図2は、本技術の第1の実施の形態における固体撮像素子200の積層構造の一例を示す図である。この固体撮像素子200は、受光チップ201と、その受光チップ201に積層されたロジックチップ202とを備える。これらのチップ間には、信号を伝送するための信号線が設けられる。
[受光チップの構成例]
図3は、本技術の第1の実施の形態における受光チップ201の一構成例を示す平面図である。この受光チップ201には、受光部210が設けられ、受光部210には、二次元格子状に複数の受光回路220が設けられる。受光回路220の詳細については後述する。
[ロジックチップの構成例]
図4は、本技術の第1の実施の形態におけるロジックチップ202の一構成例を示すブロック図である。このロジックチップ202には、垂直制御部230、ロジックアレイ部260、水平制御部240および信号処理部250が配置される。また、ロジックアレイ部260には、受光回路220ごとに、論理回路270が配列される。これらの論理回路270のそれぞれは、対応する受光回路220と信号線を介して接続されている。受光回路220と、その回路に対応する論理回路270とからなる回路は、画像データにおける1画素の画素信号を生成する画素回路として機能する。
そして、垂直制御部230には、垂直同期信号が入力され、水平制御部240には水平同期信号が入力される。ロジックアレイ部260には、露光制御信号が入力される。
以下、所定方向(水平方向など)に配列された画素回路(受光回路220および論理回路270)の集合を「行」と称し、行に垂直な方向に配列された画素回路の集合を列と称する。
垂直制御部230は、垂直同期信号に同期して行を順に選択するものである。論理回路270は、露光期間内のフォトンの個数を計数して、その計数値を示す信号を画素信号として出力するものである。水平制御部240は、水平同期信号に同期して列を順に選択して画素信号を出力させるものである。
信号処理部250は、画素信号からなる画像データに対して、フィルタ処理などの所定の信号処理を実行するものである。この信号処理部250は、処理後の画像データを記録部120に出力する。
[画素回路の構成例]
図5は、本技術の第1の実施の形態における画素回路300の一構成例を示す回路図である。この画素回路300は、受光回路220と論理回路270とを備える。受光回路220は、スイッチ221および222と、抵抗223と、フォトダイオード224とを備える。また、論理回路270は、インバータ271、トランジスタ272、電源制御部273、フォトンカウンタ274およびスイッチ275を備える。
スイッチ221は、電位VE1の端子と抵抗223との間の経路を切替信号SWに従って開閉するものである。スイッチ222は、電位VE2の端子と抵抗223との間の経路を切替信号SWに従って開閉するものである。例えば、電位VE1は、電位VE2より高い値に設定される。
これらのスイッチ221および222からなる回路は、切替信号SWに従って電位VE1およびVE2のいずれかを選択するマルチプレクサ225として機能する。選択された電位は電源電位として供給される。なお、マルチプレクサ225は、特許請求の範囲に記載の選択部の一例である。
フォトダイオード224は、入射光を光電変換して光電流を出力するものである。このフォトダイオード224のカソードは、抵抗223を介してマルチプレクサ225に接続され、アノードは、マルチプレクサ225からの電源電位よりも低い電位の端子(接地端子など)に接続される。これにより、フォトダイオード224には、逆バイアスが印加される。また、光電流は、フォトダイオード224のカソードからアノードへの方向に流れる。
フォトダイオード224としては、例えば、光電流を増幅するアバランシェフォトダイオードが用いられる。また、アバランシェダイオードの中でも特に、SPAD(Single-Photon Avalanche Diode)を用いることが望ましい。SPADは、アバランシェフォトダイオードの一種であり、フォトン1個を検出することができるほど感度の高いものである。
抵抗223の一端は、マルチプレクサ225に共通に接続され、他端は、フォトダイオード224のカソードに接続される。光電流が出力されるたびに、抵抗223に光電流が流れ、フォトダイオード224のカソード電位が、マルチプレクサ225からの電源電位より低い値に降下する。
インバータ271は、フォトダイオード224のカソード電位の信号を反転してパルス信号OUTとして、フォトンカウンタ274に出力するものである。このインバータ271は、カソード電位が所定値より高い場合にローレベルのパルス信号OUTを出力し、その所定値以下の場合にハイレベルのパルス信号OUTを出力する。
トランジスタ272のゲートには、垂直制御部230からのゲート信号GATが印加され、ソースはバックゲートおよび接地端子と接続され、ドレインはフォトダイオード224のカソードとインバータ271の入力端子とに接続される。トランジスタ272として、例えば、N型のMOS(Metal Oxide Semiconductor)トランジスタが用いられる。垂直制御部230は、例えば、選択した行にローレベルのゲート信号GATを供給する。
フォトンカウンタ274は、露光期間内においてハイレベルのパルス信号OUTが出力された回数を計数するものである。このフォトンカウンタ274は、露光開始時に計数値CNTを初期値(例えば、「0」)にし、露光期間に亘って計数を行う。そして、フォトンカウンタ274は、露光終了時に計数を停止し、その計数値CNTを電源制御部273とスイッチ275とに出力する。
画素回路300への入射光の照度が高いほど、その入射光内のフォトンの入射頻度が高くなる。そして、フォトンの入射頻度が高いほど、フォトダイオード224のカソード電位が降下する頻度が高くなり、ハイレベルのパルス信号の出力頻度が高くなる。そして、パルス信号の出力頻度が高いほど、露光終了時の計数値CNTの値が大きくなる。すなわち、計数値CNTは、照度を測定した値となる。なお、フォトンカウンタ274は、特許請求の範囲に記載の測定部の一例である。
電源制御部273は、計数値CNTが大きい(すなわち、照度が高い)ほど低い値に電源電位を制御するものである。この電源制御部273は、例えば、計数値CNTと所定の閾値Th1とを比較し、計数値CNTが閾値Th1より大きい(すなわち、照度が高い)場合に低い方の電位VE2を指示する切替信号SWを供給する。一方、電源制御部273は、計数値CNTが閾値Th1以下である(すなわち、照度が低い)場合に高い方の電位VE1を指示する切替信号SWを供給する。
照度が高いときに低い方の電位VE2を選択することにより、画素回路300の消費電力を低減することができる。低い方の電位VE2の選択により、画素回路300の感度が低下するものの、その画素の照度は高いため、明るさの変動は少ない。
スイッチ275は、水平制御部240の制御に従って、計数値CNTの信号を画素信号OUTとして信号処理部250に出力するものである。
なお、フォトダイオード224のカソードを抵抗223に接続しているが、図6に例示するように、アノードを抵抗223に接続することもできる。
[撮像装置の動作例]
図7は、本技術の第1の実施の形態における撮像装置の動作の一例を示すタイミングチャートである。垂直同期信号VSYNCの立ち上がりのタイミングT0から、その次の立上りのタイミングT3までの期間は、垂直同期信号VSYNCの周期に該当する。この周期内において露光期間が設定される。
例えば、撮像制御部130は、周期内のタイミングT1からタイミングT2までの期間を露光期間として設定し、その露光期間内に亘って露光制御信号をハイレベルにする。そして、フォトンカウンタ274は、露光期間内において動作して計数値CNTを計数し、露光期間外において計数を停止する。
露光終了時のタイミングT2において、画素毎に電源制御部273は、計数値CNTに応じて電源電位を制御する。
図8は、本技術の第1の実施の形態における電源制御部273の動作の一例を示す図である。この電源制御部273は、計数値CNTと閾値Th1とを比較する。計数値CNTが閾値Th1以下である(すなわち、照度が低い)場合に電源制御部273は、切替信号SWをローレベルにして高い方の電位VE1をマルチプレクサ225に選択させる。
一方、計数値CNTが閾値Th1より大きい(すなわち、照度が高い)場合に電源制御部273は、切替信号SWをハイレベルにして低い方の電位VE2を選択させる。
図9は、本技術の第1の実施の形態と比較例とのそれぞれにおける画素ごとの電源電位の一例を示す図である。同図におけるaは、本技術の実施の形態における画素ごとの電源電位の一例を示す図であり、同図におけるbは、全画素に一定の電源電位を供給する比較例における画素ごとの電源電位の一例を示す図である。
例えば、高い方の電位VE1を5ボルト(V)とし、低い方の電位VE2を1ボルト(V)とする。図9におけるaに例示するように、固体撮像素子200では、照度の高い光が入射する画素に1ボルトが供給され、照度の低い光が入射する画素には5ボルトが供給される。一方、同図におけるbに例示するように、比較例では、全画素に5ボルトが供給される。
ここで、画素回路300の消費電力Pは、例えば、次の式により表される。
P=C×VE×dV
上式において、Cは、カソード容量であり、単位は、例えば、ファラッド(F)である。VEは、電源電位であり、dVは、フォトダイオード224のアノード-カソード間の電位差である。
電位差dVは一定となるように制御される。また、カソード容量Cも一定であるため、上式より、画素回路300の電源電位を低くすることにより、その画素の消費電力を低減することができる。仮に、全画素のうち3割の画素の電源電位を1ボルト(V)に低下させた場合、全画素の電源電位を5ボルトにした場合に対する消費電力の割合は次の式により表される。
4/5×0.3=0.24
すなわち、全画素の電源電位が5ボルト(V)の場合の消費電力を100パーセント(%)とし、全画素の3割を1ボルト(V)にすると、消費電力は24パーセント(%)に低下する。このように、高照度の光が入射する画素と低照度の光が入射する画素とが混在する像を撮像する場合に、後者の画素の電源電位を低下させることにより、全画素に同一の電位を供給する場合と比較して、固体撮像素子200の消費電力を低減することができる。
図10は、本技術の第1の実施の形態における撮像装置100の動作の一例を示すフローチャートである。この動作は、例えば、画像データを撮像するための所定のアプリケーションが実行されたときに開始される。
撮像装置100は、露光開始時刻を経過したか否かを判断する(ステップS901)。露光開始時刻前の場合に(ステップS901:No)、撮像装置100は、ステップS901を繰り返す。
一方、露光開始時刻を経過した場合に(ステップS901:Yes)、撮像装置100は、画素毎に計数値CNTの計数(すなわち、フォトンカウント)を行う(ステップS902)。そして、撮像装置100は、露光終了時刻を経過したか否かを判断する(ステップS903)。露光終了時刻前の場合に(ステップS903:No)、撮像装置100は、ステップS902を繰り返す。
一方、露光終了時刻を経過した場合に(ステップS903:Yes)、撮像装置100内のそれぞれの画素回路300は、計数値CNTが閾値Th1より大きいか否かを判断する(ステップS904)。計数値CNTが閾値Th1より大きい場合に(ステップS904:Yes)、画素回路300は、低い方の電位VE2を電源電位として選択する(ステップS905)。一方、計数値CNTが閾値Th1以下の場合に(ステップS904:No)、画素回路300は、高い方の電位VE1を選択する(ステップS906)。ステップS905またはS906の後に、撮像装置100は、画像データに対する信号処理を実行する(ステップS907)。ステップS907の後に、撮像装置100は、ステップS901以降を繰り返し実行する。なお、ステップS904乃至S905は、全画素について画素毎に実行される。
このように、本技術の実施の形態では、画素回路300内の電源制御部273が照度が高いほど低い値に電源電位を制御するため、照度が高い光が入射する画素回路300の消費電力を低減することができる。
[変形例]
上述の第1の実施の形態では、電源制御部273は、照度に応じて電位VE1およびVE2のいずれかに電源電位を制御していたが、電位VE1では高すぎる場合や電位VE2では低すぎる場合がある。このため、電源電位をより細かく制御することが望ましい。この第1の実施の形態の変形例の画素回路300は、照度に応じて3段階に電源電位を制御する点において第1の実施の形態と異なる。
図11は、本技術の第1の実施の形態の変形例における画素回路300の一構成例を示す回路図である。この実施の形態の変形例の画素回路300は、マルチプレクサ225がスイッチ226をさらに備える点において実施の形態と異なる。
スイッチ226は、切替信号SWに従って電位VE3の端子と抵抗223の一端との間の経路を開閉するものである。電位VE3には、電位VE2より低い値が設定される。
また、第1の実施の形態の変形例の電源制御部273は、計数値CNTと2つの閾値とを比較し、その比較結果に基づいて、マルチプレクサ225に電位VE1乃至VE3のいずれかを供給させる。
図12は、本技術の第1の実施の形態の変形例における電源制御部273の動作の一例を示す図である。計数値CNTが閾値Th1以下である(すなわち、照度が低い)場合に電源制御部273は、切替信号SWに「0」を設定して最も高い電位VE1を選択させる。
また、計数値CNTが閾値Th1より大きく、閾値Th2以下である(すなわち、照度が中程度である)場合に電源制御部273は、切替信号SWに「1」を設定して中間の電位VE2を選択させる。ここで、閾値Th2は、閾値Th1より大きな値である。
また、計数値CNTが閾値Th2より大きい(すなわち、照度が高い)場合に電源制御部273は、切替信号SWに「2」を設定して最も低い電位VE3を選択させる。
なお、電源制御部273は、計数値CNTと2つの閾値とを比較して3段階に電源電位を制御しているが、計数値CNTとN個(Nは、3以上の整数)の閾値とを比較して(N+1)段階以上に電源電位を制御することもできる。
このように、本技術の第1の実施の形態の変形例では、電源制御部273が、照度に応じて電位VE1乃至VE3のいずれかに電源電位を制御するため、電位VE1およびVE2のいずれかに制御する場合よりも適切な値に電源電位を制御することができる。
[ロジックチップの構成例]
図13は、本技術の第2の実施の形態におけるロジックチップ202の一構成例を示すブロック図である。このロジックチップ202には、垂直制御部230、ロジックアレイ部260、水平制御部240、信号処理部250および計時回路290が配置される。また、ロジックアレイ部260には、受光回路220ごとに、論理回路270が配列される。これらの論理回路270のそれぞれは、対応する受光回路220と信号線を介して接続されている。受光回路220と、その回路に対応する論理回路270とからなる回路は、画像データにおける1画素の画素信号を生成する画素回路として機能する。
そして、垂直制御部230には、垂直同期信号が入力され、水平制御部240には水平同期信号が入力される。ロジックアレイ部260には、撮像制御部130からの露光制御信号が入力される。計時回路290には、露光制御信号が入力される。
以下、所定方向(水平方向など)に配列された画素回路(受光回路220および論理回路270)の集合を「行」と称し、行に垂直な方向に配列された画素回路の集合を列と称する。
垂直制御部230は、垂直同期信号に同期して行を順に選択するものである。論理回路270は、露光期間内に光子が入射された回数を計数して、その計数値を示す信号を画素信号として信号処理部250に出力するものである。水平制御部240は、水平同期信号に同期して列を順に選択して画素信号を出力させるものである。
信号処理部250は、画素信号からなる画像データに対して、フィルタ処理などの所定の信号処理を実行するものである。この信号処理部250は、処理後の画像データを記録部120に出力する。また、信号処理部250には、撮像制御部130からの露光時間が入力される。また、信号処理部250は、露光期間内の光子の入射回数の推定も行う。推定方法の詳細については後述する。
計時回路290は、露光制御信号に従って、露光期間内の相対時刻を計時するものである。この計時回路290は、計時した時刻を示すタイマ値を論理回路270のそれぞれに入力する。
[画素回路の構成例]
図14は、本技術の第2の実施の形態における画素回路300の一構成例を示す回路図である。この画素回路300は、受光回路220と論理回路270とを備える。受光回路220は、抵抗226-1およびフォトダイオード227を備える。また、論理回路270は、インバータ271と、フォトンカウンタ274と、計数制御部275と、スイッチ276、277および280と、時刻情報保持部279とを備える。
フォトダイオード227は、入射光を光電変換して光電流を出力するものである。このフォトダイオード227のカソードは、抵抗226-1を介して電源電位の端子に接続され、アノードは、その電源電位よりも低い電位GND1の端子(接地端子など)に接続される。これにより、フォトダイオード227には、逆バイアスが印加される。また、光電流は、フォトダイオード227のカソードからアノードへの方向に流れる。
フォトダイオード227としては、例えば、光電流を増幅することにより1光子の入射の有無を検出することができるアバランシェフォトダイオードが用いられる。また、アバランシェダイオードの中でも特に、SPADを用いることが望ましい。
抵抗226-1の一端は、電源電位の端子に接続され、他端は、フォトダイオード227のカソードに接続される。光子の入射が検出されるたびに、抵抗226-1に光電流が流れ、フォトダイオード227のカソード電位が、電源電位より低い初期状態の値に降下する。
インバータ271は、フォトダイオード227のカソード電位の信号を反転してパルス信号として、フォトンカウンタ274に出力するものである。このインバータ271は、カソード電位が所定値より高い場合にローレベルのパルス信号を出力し、その所定値以下の場合にハイレベルのパルス信号を出力する。また、インバータ271が接続される接地側の電位GND2は、受光回路220内の電位GND2と異なる。
フォトンカウンタ274は、露光期間内においてハイレベルのパルス信号が出力された回数を計数するものである。この計数値は、光子の入射の有無の検出によりフォトダイオード222の一端の電位(カソード電位など)が変動した回数を示す。光子の実際の入射数に対するパルス数の比率を1/10とすると、10個の光子が入射されるたびに1回の計数が行われる。
フォトンカウンタ274は、露光開始時に計数値CNTを初期値(例えば、「0」)にし、露光期間に亘って計数を行う。計数値は、例えば、パルス信号が出力されるたびに増分される。すなわち、アップカウントが行われる。そして、フォトンカウンタ274は、露光終了時、または、計数制御部275の制御に従って計数を停止し、その計数値CNTを計数制御部275およびスイッチ276に出力する。
なお、フォトンカウンタ274は、特許請求の範囲に記載の計数部の一例である。また、フォトンカウンタ274は、アップカウントを行っているが、アップカウントの代わりにダウンカウントを行ってもよい。
計数制御部275は、計数値CNTが所定の制限値に達した場合に、フォトンカウンタ274を停止させるものである。アップカウントの場合には制限値として上限値L1が用いられる。上限値L1は、フォトンカウンタ274が計数することができる最大値以下の値であり、予めレジスタなどに設定される。例えば、8ビットカウンタをフォトンカウンタ274として用いる場合、「255」以下の値(「254」や「255」など)が上限値L1として設定される。
計数制御部275は、露光期間内に計数値CNTが上限値L1に達しているか否かを判定し、その判定結果DECをフォトンカウンタ274、スイッチ276、スイッチ277および信号処理部250に出力する。なお、ダウンカウントが行われる場合には、上限値の代わりに下限値が用いられる。
スイッチ277は、判定結果DECに従って、計時回路290からのタイマ値Tcを時刻情報保持部279に保持させるものである。このスイッチ277は、計数値CNTが上限値L1に達した際に、そのときのタイマ値Tcを時刻情報保持部279に保持させる。時刻情報保持部279は、タイマ値Tcを保持するものである。
また、信号処理部250は、フォトンカウンタ274を停止させるまでの時間(タイマ値Tc)に基づいて露光期間内の光子の入射回数を推定する。この信号処理部250は、撮像制御部130からの露光時間Teと、時刻情報保持部279に保持されたタイマ値Tcと、上限値L1とを用いて次の式により推定を行う。なお、信号処理部250は、特許請求の範囲に記載の推定部の一例である。
EST=L1×(Te/Tc) ・・・式1
上式において、ESTは、露光期間が経過するまでフォトンカウンタ274が停止せずに計数したと仮定したときの計数値であり、この値は、露光期間内の露光量を示す。信号処理部250は、ESTを推定値としてスイッチ276に出力する。
スイッチ276は、判定結果DECに従って、計数値CNTおよび推定値ESTのいずれかを選択するものである。このスイッチ276は、計数値CNTが所定の制限値に達した場合に推定値ESTを選択して出力値OUTとしてスイッチ280に出力する。一方、計数値CNTが所定の制限値に達していない場合にスイッチ276は、計数値CNTを選択して出力値OUTとしてスイッチ280に供給する。
スイッチ280は、水平制御部240の制御に従って、出力値OUTの信号を画素信号として信号処理部250に出力するものである。
なお、フォトダイオード227のカソードを抵抗226-1に接続しているが、図15に例示するように、アノードを抵抗226-1に接続することもできる。
図16は、本技術の第2の実施の形態におけるフォトンカウンタ274の動作の一例を示す図である。フォトンカウンタ274には、露光制御信号と判定結果DECとが入力される。ここで、露光制御信号には、例えば、露光期間内において「1」が設定され、露光期間外において「0」が設定される。また、判定結果DECには、例えば、計数値CNTが上限値L1に達した場合に「1」が設定され、計数値CNTが上限値L1未満の場合に「0」が設定される。
露光制御信号が「0」(すなわち、露光期間外)である場合にフォトンカウンタ274は、判定結果DECの値に関わらず、計数動作を停止する。一方、露光制御信号が「1」(すなわち、露光期間内)である場合にフォトンカウンタ274は、判定結果DECが「0」(すなわち、計数値CNTが上限値L1未満)であれば、計数動作を継続して行う。しかし、判定結果DECが「1」(すなわち、計数値CNTが上限値L1)であれば、フォトンカウンタ274は、計数動作を停止する。
図17は、本技術の第2の実施の形態における計数制御部275の動作の一例を示す図である。計数値CNTが上限値L1未満である場合に計数制御部275は、「0」の判定結果DECを出力してフォトンカウンタ274に計数動作を継続させる。一方、計数値CNTが上限値L1である場合に計数制御部275は、「1」の判定結果DECを出力してフォトンカウンタ274に計数動作を停止させる。
図18は、本技術の第2の実施の形態における信号処理部250の動作の一例を示す図である。判定結果DECが「0」(すなわち、計数値CNTが上限値L1未満)である場合に信号処理部250は、推定値の演算を実行せずに停止する。一方、判定結果DECが「1」(すなわち、計数値CNTが上限値L1)である場合に信号処理部250は、式1を用いて推定値ESTを演算する。
図19は、本技術の第2の実施の形態における撮像装置100の動作の一例を示すタイミングチャートである。垂直同期信号VSYNCの立ち上がりのタイミングT0から、その次の立上りのタイミングT4までの期間は、垂直同期信号VSYNCの周期に該当する。この周期内において露光期間が設定される。
例えば、撮像制御部130は、周期内のタイミングT1からタイミングT3までの期間を露光期間として設定し、その露光期間内に亘って露光制御信号をハイレベルにする。そして、フォトンカウンタ274は、露光期間内において動作して計数値CNTを計数する。そして、露光期間内のタイミングT2において、計数値CNTが上限値L1に達すると、計数制御部275は、フォトンカウンタ274に計数を停止させる。動作停止時に、フォトンカウンタ274は、計数値を初期値にする。
また、次の垂直同期信号VSYNCの立ち上がりのタイミングT4の後において、撮像制御部130は、周期内のタイミングT5からタイミングT6までの期間を露光期間として設定する。フォトンカウンタ274は、その露光期間内において動作して計数値CNTを計数する。この露光期間内においては、計数値CNTが上限値L1に達しなかったため、フォトンカウンタ274は露光期間終了時に計数動作を停止する。
上述したように、フォトンカウンタ274は、露光期間内に計数値CNTが上限値L1に達すると計数を停止する。ここで、一般に、カウント回数が増大するほど、カウンタの消費電力は大きくなる。このため、フォトンカウンタ274が、露光期間の途中で計数を停止することにより、停止せずに計数を継続した場合と比較して消費電力を低減することができる。ただし、露光期間の途中で計数を停止した場合、そのときの計数値CNT(すなわち、上限値L1)は、停止せずに露光期間終了時まで計数した際の値と異なるものとなり、露光期間内の露光量に応じた値ではなくなってしまう。そこで、信号処理部250が、露光期間終了時の計数値(すなわち、露光量)の推定を行っている。
図20は、本技術の第2の実施の形態における計数値の変動の一例を示す図である。同図における縦軸は、計数値CNTを示し、横軸は、計数した時間を示す。タイミングT1は、露光開始時刻であり、タイミングT3は露光終了時刻である。タイミングT1からT3までの時間が露光時間Teに該当する。
タイミングT1においてフォトンカウンタ274は計数を開始し、時間の経過とともに計数値CNTは増加する。露光期間において照度の変化が殆ど無い場合、計数値CNTの増加速度は略一定となり、照度が高いほど、増加速度が速くなる。そして、タイミングT2において計数値CNTが上限値L1に達したものとする。このタイミングT2において、フォトンカウンタ274は計数を停止する。
そして、信号処理部250は、タイミングT1からT2までの時間Tcと、露光時間Teおよび上限値L1を式1に代入して、露光終了時の計数値を推定値ESTとして算出する。
フォトンカウンタ274が計数することができる最大値を上限値L1とした場合、上限値L1に対応する光量を超える量の光を受光した際であっても、固体撮像素子200は、露光量に応じた計数値を推定することができる。
これに対して、露光期間中に計数を停止しない比較例を想定すると、比較例では、露光量が大きいと、正確な計数値を得られないおそれがある。例えば、8ビットカウンタを用いる場合、「255」に対応する光量を超える量の光を受光すると、比較例では、計数値がオーバーフローしてしまい、不正確な値となってしまう。オーバーフローしないようにするには、桁数が十分に多いカウンタを用いればよいが、桁数が多くなるほど、カウンタの消費電力、回路規模やコストが増大するため、望ましくない。
一方、固体撮像素子200では、式1を用いて信号処理部250が露光終了時の計数値を推定するため、露光量に応じた正確な計数値を求めることができる。また、桁数が多いカウンタを用いなくてよいため、消費電力等を削減することができる。
また、上限値L1を小さくするほど、消費電力を低減することができるが、その代わりに推定値ESTの誤差が大きくなってしまう。上限値L1の値は、消費電力の低減のメリットと、推定値ESTの精度低下のデメリットとを比較考量して決定される。
[画素回路の動作例]
図21は、本技術の第2の実施の形態における画素回路300の動作の一例を示すフローチャートである。この動作は、例えば、画像データを撮像するための所定のアプリケーションが実行されたときに開始される。
画素回路300は、露光開始時刻を経過したか否かを判断する(ステップS901)。
露光開始時刻を経過した場合に(ステップS901:Yes)、画素回路300は、計数値CNTを計数(すなわち、フォトンカウント)する計数処理を実行する(ステップS910)。露光開始時刻前の場合(ステップS901:No)、または、ステップS910の後に画素回路300は、ステップS901以降を繰り返す。
図22は、本技術の第1の実施の形態における計数処理の一例を示すフローチャートである。画素回路300内のフォトンカウンタ274は、光子数の計数を行い(ステップS911)、計数制御部275は、計数値CNTが上限値L1に達したか否かを判断する(ステップS912)。
計数値CNTが上限値L1に達した場合に(ステップS912:Yes)、フォトンカウンタ274は計数を停止し(ステップS913)、信号処理部250は、露光終了時の計数値の推定を行う(ステップS914)。
一方、計数値CNTが上限値L1未満の場合に(ステップS912:No)、フォトンカウンタ274は露光終了時刻であるか否かを判断する(ステップS915)。露光終了時刻前の場合に(ステップS915:No)、フォトンカウンタ274はステップS911以降を繰り返し実行する。
露光終了時刻である場合(ステップS915:Yes)、または、ステップS914の後に画素回路300は、計数処理を終了する。
このように、本技術の第1の実施の形態によれば、計数値が上限値に達すると計数制御部275が計数を停止させ、信号処理部250が露光量を推定するため、露光期間中に計数を停止しない場合と比較して消費電力を低減することができる。
[変形例]
上述の第2の実施の形態では、受光チップ201において画素毎に抵抗226-1およびフォトダイオード227を配置していたが、画素数が増大するほど、受光チップ201の回路規模が大きくなるという問題がある。この第2の実施の形態の変形例の固体撮像素子200は、受光チップ201内に、フォトダイオード227のみを配置する点において第2の実施の形態と異なる。
図23は、本技術の第2の実施の形態の変形例における画素回路300の一構成例を示す回路図である。この第2の実施の形態の変形例の画素回路300は、受光チップ201側の受光回路220内にフォトダイオード227のみが配置される点において第2の実施の形態と異なる。フォトダイオード227以外の回路や素子は、ロジックチップ202側に配置される。
このように、本技術の第2の実施の形態の変形例によれば、受光チップ201内にフォトダイオード227のみを配置したため、抵抗226-1およびフォトダイオード227の両方を配置する場合と比較して受光チップ201の回路規模を小さくすることができる。
<3.第3の実施の形態>
上述の第2の実施の形態では、全画素に同一の電源電位を供給していたが、消費電力をさらに低減することが困難である。例えば、全画素の電源電位を低下させれば消費電力を低減することはできるが、電源電位の低下により全画素の感度が低下して、特に照度の低い光が入射する画素において明るさが不足するおそれがある。この第3の実施の形態の固体撮像素子200は、画素のそれぞれの電源電位を照度に応じて制御する点において第2の実施の形態と異なる。
図24は、本技術の第3の実施の形態における画素回路300の一構成例を示す回路図である。この第2の実施の形態の画素回路300は、スイッチ221および222と電源制御部273とをさらに備える点において第2の実施の形態と異なる。
スイッチ221は、電位VE1の端子と抵抗226-1との間の経路を切替信号SWに従って開閉するものである。スイッチ222は、電位VE2の端子と抵抗226-1との間の経路を切替信号SWに従って開閉するものである。例えば、電位VE1は、電位VE2より高い値に設定される。また、切替信号SWは、電位VE1およびVE2のいずれかへの電源電位の切り替えを指示する信号である。
これらのスイッチ221および222からなる回路は、切替信号SWに従って電位VE1およびVE2のいずれかを選択するマルチプレクサ225として機能する。選択された電位は電源電位として供給される。
電源制御部273は、スイッチ276からの出力値OUTが大きい(すなわち、照度が高い)ほど低い値に電源電位を制御するものである。この電源制御部273は、例えば、出力値OUTと所定の閾値Th1とを比較し、出力値OUTが閾値Th1より大きい(すなわち、照度が高い)場合に低い方の電位VE2を指示する切替信号SWを供給する。一方、電源制御部273は、出力値OUTが閾値Th1以下である(すなわち、照度が低い)場合に高い方の電位VE1を指示する切替信号SWを供給する。この切替信号SWは、マルチプレクサ225の他、計数制御部275および信号処理部250にも供給される。
また、第2の実施の形態の計数制御部275は、切替信号SWの示す電位に応じて、互いに異なる数値であるL1およびL2のをいずれかを上限値として選択する。L2には、L1よりも小さな値が設定される。例えば、切替信号SWが高い方の電位VE1を指示する場合に、大きい方の上限値L1が選択される。一方、切替信号SWが低い方の電位VE2を指示する場合に、小さい方の上限値L2が選択される。
一般に、電源電位が高いほど、画素の感度が高くなり、光子の入射数に対するパルス数の比率も高くなる。これにより、計数値CNTの上昇速度が速くなり、推定値ESTの誤差が大きくなる。そこで、誤差を軽減するために、高い方の電位に対応する上限値L1には、L2よりも大きな値が設定される。
また、信号処理部250も、計数制御部275と同様に、切替信号SWの示す電位に応じて、L1およびL2をいずれかを上限値として選択する。
図25は、本技術の第3の実施の形態における電源制御部273の動作の一例を示す図である。この電源制御部273は、計数値CNTと閾値Th1とを比較する。計数値CNTが閾値Th1以下である(すなわち、照度が低い)場合に電源制御部273は、切替信号SWをローレベルにして高い方の電位VE1をマルチプレクサ225に選択させる。
図26は、本技術の第3の実施の形態における計数制御部275の動作の一例を示す図である。切替信号SWが「0」である(すなわち、高い方の電位VE1が選択された)場合に、計数制御部275は、上限値L1を選択する。そして、計数値CNTが上限値L1未満である場合に計数制御部275は、「0」の判定結果DECを出力し、計数値CNTが上限値L1である場合に「1」の判定結果DECを出力する。
一方、切替信号SWが「1」である(すなわち、低い方の電位VE2が選択された)場合に、計数制御部275は、上限値L2を選択する。そして、計数値CNTが上限値L2未満である場合に計数制御部275は、「0」の判定結果DECを出力し、計数値CNTが上限値L2である場合に「1」の判定結果DECを出力する。
図27は、本技術の第3の実施の形態における信号処理部250の動作の一例を示す図である。判定結果DECが「0」(すなわち、計数値CNTが上限値L1未満)である場合に信号処理部250は、推定値の演算を実行せずに停止する。一方、判定結果DECが「1」(すなわち、計数値CNTが上限値L1)である場合に信号処理部250は、推定値ESTの演算を行う。切替信号SWが「0」である(すなわち、高い方の電位VE1が選択された)場合に、信号処理部250は、上限値L1を選択して式1により推定値ESTを求める。
一方、切替信号SWが「1」である(すなわち、低い方の電位VE2が選択された)場合に、信号処理部250は、上限値L2を選択して次の式により推定値ESTを求める。
EST=L2×(Te/Tc) ・・・式2
図26は、本技術の第2および第3の実施の形態における画素ごとの電源電位の一例を示す図である。同図におけるaは、本技術の第2の実施の形態における画素ごとの電源電位の一例を示す図であり、同図におけるbは、全画素に一定の電源電位を供給する第1の実施の形態における画素ごとの電源電位の一例を示す図である。
例えば、高い方の電位VE1を5ボルト(V)とし、低い方の電位VE2を1ボルト(V)とする。図19におけるaに例示するように、固体撮像素子200では、照度の高い光が入射する画素に1ボルトが供給され、照度の低い光が入射する画素には5ボルトが供給される。一方、同図におけるbに例示するように、第1の実施の形態では、全画素に5ボルトが供給される。
ここで、画素回路300の消費電力Pは、例えば、次の式により表される。
P=C×VE×dV
上式において、Cは、カソード容量であり、単位は、例えば、ファラッド(F)である。VEは、電源電位であり、dVは、フォトダイオード227のアノード-カソード間の電位差である。
電位差dVは一定となるように制御される。また、カソード容量Cも一定であるため、上式より、画素回路300の電源電位を低くすることにより、その画素の消費電力を低減することができる。仮に、全画素のうち3割の画素の電源電位を1ボルト(V)に低下させた場合、全画素の電源電位を5ボルトにした場合に対する消費電力の割合は次の式により表される。
4/5×0.3=0.24
すなわち、全画素の電源電位が5ボルト(V)の場合の消費電力を100パーセント(%)とし、全画素の3割を1ボルト(V)にすると、消費電力は24パーセント(%)に低下する。このように、高照度の光が入射する画素と低照度の光が入射する画素とが混在する像を撮像する場合に、後者の画素の電源電位を低下させることにより、全画素に同一の電位を供給する場合と比較して、固体撮像素子200の消費電力を低減することができる。
図29は、本技術の第3の実施の形態における画素回路300の動作の一例を示すフローチャートである。画素回路300は、計数処理(ステップS910)の後に、出力値OUTが閾値Th1を超えるか否かを判断する(ステップS902)。
出力値OUTが閾値Th1を超える場合に(ステップS902:Yes)、画素回路300は、電位VE2を選択し(ステップS903)、上限値にL2を設定する(ステップS904)。一方、出力値OUTが閾値Th1以下の場合に(ステップS902:No)、画素回路300は、電位VE1を選択し(ステップS905)、上限値にL1を設定する(ステップS906)。
露光開始時刻前の場合(ステップS901:No)、ステップS904またはS906の後に画素回路300は、ステップS901以降を繰り返す。
このように、本技術の第2の実施の形態によれば、画素回路300内の電源制御部273が照度が高いほど低い値に電源電位を制御するため、照度が高い光が入射する画素回路300の消費電力を低減することができる。
[変形例]
上述の第3の実施の形態では、電源制御部273は、照度に応じて電位VE1およびVE2のいずれかに電源電位を制御していたが、電位VE1では高すぎる場合や電位VE2では低すぎる場合がある。このため、電源電位をより細かく制御することが望ましい。この第3の実施の形態の変形例の画素回路300は、照度に応じて3段階に電源電位を制御する点において第3の実施の形態と異なる。
図30は、本技術の第3の実施の形態の変形例における画素回路300の一構成例を示す回路図である。この第3の実施の形態の変形例の画素回路300は、マルチプレクサ225がスイッチ223をさらに備える点において第3の実施の形態と異なる。
スイッチ223は、切替信号SWに従って電位VE3の端子と抵抗226-1の一端との間の経路を開閉するものである。電位VE3には、電位VE2より低い値が設定される。
また、第3の実施の形態の変形例の電源制御部273は、計数値CNTと2つの閾値とを比較し、その比較結果に基づいて、マルチプレクサ225に電位VE1乃至VE3のいずれかを供給させる。
図31は、本技術の第3の実施の形態の変形例における電源制御部273の動作の一例を示す図である。計数値CNTが閾値Th1以下である(すなわち、照度が低い)場合に電源制御部273は、切替信号SWに「0」を設定して最も高い電位VE1を選択させる。
また、計数値CNTが閾値Th1より大きく、閾値Th2以下である(すなわち、照度が中程度である)場合に電源制御部273は、切替信号SWに「1」を設定して中間の電位VE2を選択させる。ここで、閾値Th2は、閾値Th1より大きな値である。
また、計数値CNTが閾値Th2より大きい(すなわち、照度が高い)場合に電源制御部273は、切替信号SWに「2」を設定して最も低い電位VE3を選択させる。
なお、電源制御部273は、計数値CNTと2つの閾値とを比較して3段階に電源電位を制御しているが、計数値CNTとN個(Nは、3以上の整数)の閾値とを比較して(N+1)段階以上に電源電位を制御することもできる。
図32は、本技術の第3の実施の形態の変形例における計数制御部275の動作の一例を示す図である。切替信号SWが「0」である(すなわち、電位VE1が選択された)場合に、計数制御部275は、上限値L1を選択する。切替信号SWが「1」である(すなわち、電位VE2が選択された)場合に、計数制御部275は、上限値L2を選択する。また、切替信号SWが「2」である(すなわち、電位VE3が選択された)場合に、計数制御部275は、上限値L3を選択する。上限値L3には、上限値L1およびL2よりも小さな値が設定される。このように、電源電位が低いほど、小さな上限値が設定される。
図33は、本技術の第3の実施の形態の変形例における信号処理部250の動作の一例を示す図である。判定結果DECが「0」(すなわち、計数値CNTが上限値L1未満)である場合に信号処理部250は、推定値の演算を実行せずに停止する。一方、判定結果DECが「1」(すなわち、計数値CNTが上限値L1)である場合に信号処理部250は、推定値ESTの演算を行う。切替信号SWが「0」である(すなわち、電位VE1が選択された)場合に、信号処理部250は、上限値L1を選択して式1により推定値ESTを求める。切替信号SWが「1」である(すなわち、電位VE2が選択された)場合に、信号処理部250は、上限値L2を選択して式2により推定値ESTを求める。
また、切替信号SWが「2」である(すなわち、電位VE3が選択された)場合に、信号処理部250は、上限値L3を選択して次の式により推定値ESTを求める。
EST=L3×(Te/Tc)
このように、本技術の第3の実施の形態の変形例では、電源制御部273が、照度に応じて電位VE1乃至VE3のいずれかに電源電位を制御するため、電位VE1およびVE2のいずれかに制御する場合よりも適切な値に電源電位を制御することができる。
<4.移動体への応用例>
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
図34は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図34に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、及び統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、及び車載ネットワークI/F(interface)12053が図示されている。
駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図34の例では、出力装置として、オーディオスピーカ12061、表示部12062及びインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
図35は、撮像部12031の設置位置の例を示す図である。
図35では、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101及び車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部12105は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
なお、図35には、撮像部12101ないし12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101ないし12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
撮像部12101ないし12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101ないし12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を基に、撮像範囲12111ないし12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
例えば、マイクロコンピュータ12051は、撮像部12101ないし12104から得られた距離情報を元に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
撮像部12101ないし12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101ないし12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101ないし12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101ないし12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、撮像部12031に適用され得る。例えば、図1の撮像装置100は、撮像部12031に適用することができる。撮像部12031に本開示に係る技術を適用することにより、撮像部12031を含むシステムの消費電力を低減することができる。
なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
また、上述の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。この記録媒体として、例えば、CD(Compact Disc)、MD(MiniDisc)、DVD(Digital Versatile Disc)、メモリカード、ブルーレイディスク(Blu-ray(登録商標)Disc)等を用いることができる。
なお、本明細書に記載された効果はあくまで例示であって、限定されるものではなく、また、他の効果があってもよい。
なお、本技術は以下のような構成もとることができる。
(1)入射光を光電変換して光電流を出力するフォトダイオードと、
前記光電流が出力されるたびに前記フォトダイオードの一端の電位を電源電位より低い値に降下させる抵抗と、
前記一端の電位が降下した頻度に基づいて前記入射光の照度を測定する測定部と、
前記測定された照度が高いほど低い値に前記電源電位を制御する電源制御部と
を具備する固体撮像素子。
(2)前記電源制御部は、前記照度と所定の閾値との比較結果に基づいて前記電源電位を制御する
前記(1)記載の固体撮像素子。
(3)前記電源制御部は、前記照度と互いに異なる複数の閾値との比較結果に基づいて前記電源電位を制御する
前記(1)記載の固体撮像素子。
(4)前記フォトダイオード、前記抵抗、前記測定部および前記電源制御部は、二次元格子状に配列された複数の画素回路のそれぞれに配置される
前記(1)から(3)のいずれかに記載の固体撮像素子。
(5)前記測定部は、所定の露光期間内において前記一端の電位が降下した回数を計数して当該計数値を前記照度の測定値として前記電源制御部に供給する
前記(1)から(4)のいずれかに記載の固体撮像素子。
(6)互いに異なる複数の電位のいずれかを切替信号に従って選択して前記電源電位として供給する選択部をさらに具備し、
前記電源制御部は、前記切替信号を前記選択部に供給する
前記(1)から(5)のいずれかに記載の固体撮像素子。
(7)入射光を集光する撮像レンズと、
前記入射光を光電変換して光電流を出力するフォトダイオードと、
前記光電流が出力されるたびに前記フォトダイオードの一端の電位を電源電位より低い値に降下させる抵抗と、
前記一端の電位が降下した頻度に基づいて前記入射光の照度を測定する測定部と、
前記測定された照度が高いほど低い値に前記電源電位を制御する電源制御部と
を具備する固体撮像素子。
(8)入射光を光電変換した光電流がフォトダイオードから出力されるたびに前記フォトダイオードの一端の電位が電源電位より低い値に降下した頻度に基づいて前記入射光の照度を測定する測定手順と、
前記測定された照度が高いほど低い値に前記電源電位を制御する電源制御手順と
を具備する固体撮像素子の制御方法。
(9)所定の露光期間内に光子が入射した回数を計数して計数値を出力する計数部と、
前記所定の露光期間が経過する前に前記計数値が所定の制限値に達した場合には前記計数部を停止させる計数制御部と、
前記計数部を停止させるまでの時間に基づいて前記所定の露光期間内の光子の入射回数を推定して推定値として出力する推定部と
を具備する固体撮像素子。
(10)前記推定部は、前記計数部を停止させるまでの時間と前記所定の露光期間の長さと前記所定の制限値とから前記推定値を求める
前記(9)記載の固体撮像素子。
(11)1つの光子の入射の有無を検出するフォトダイオードと、
前記光子の入射が検出されるたびに前記フォトダイオードの一端の電位を初期状態へ戻すための抵抗と、
前記計数値が前記所定の制限値に達した場合には前記推定値を出力値として出力し、前記計数値が前記所定の制限値に達していない場合には前記計数値を前記出力値として出力するスイッチと、
前記出力値に応じて前記電源電位を制御する電源制御部と
をさらに具備し、
前記計数部は、前記一端の電位が前記光子の入射の有無の検出により変動した回数を計数し、
前記計数制御部および前記推定部は、前記電源電位に応じて前記所定の制限値を制御する
前記(9)または(10)に記載の固体撮像素子。
(12)前記フォトダイオードは、アバランシェフォトダイオードである
前記(11)記載の固体撮像素子。
(13)前記電源制御部は、前記出力値と所定の閾値との比較結果に基づいて前記電源電位を制御する
前記(11)記載の固体撮像素子。
(14)前記電源制御部は、前記出力値と互いに異なる複数の閾値との比較結果に基づいて前記電源電位を制御する
前記(11)記載の固体撮像素子。
(15)前記フォトダイオードおよび前記抵抗は、受光チップに配置され、
前記計数部、前記計数制御部、前記推定部、前記スイッチおよび前記電源制御部は、前記受光チップに積層されたロジックチップに配置される
前記(11)から(13)のいずれかに記載の固体撮像素子。
(16)前記フォトダイオードは、受光チップに配置され、
前記抵抗、前記計数部、前記計数制御部、前記推定部、前記スイッチおよび前記電源制御部は、前記受光チップに積層されたロジックチップに配置される
前記(11)から(13)のいずれかに記載の固体撮像素子。
(17)前記計数部および前記計数制御部は、二次元格子状に配列された複数の画素回路のそれぞれに配置される
前記(9)から(16)のいずれかに記載の固体撮像素子。
(18)所定の露光期間内に光子が入射した回数を計数して計数値を出力する計数部と、
前記所定の露光期間が経過する前に前記計数値が所定の制限値に達した場合には前記計数部を停止させる計数制御部と、
前記計数部を停止させるまでの時間に基づいて前記所定の露光期間内の光子の入射回数を推定して推定値として出力する推定部と、
前記推定値から生成された画像データを記録する記録部と
を具備する撮像装置。
(19)所定の露光期間内に光子が入射した回数を計数して計数値を出力する計数手順と、
前記所定の露光期間が経過する前に前記計数値が所定の制限値に達した場合には前記計数部を停止させる計数制御手順と、
前記計数部を停止させるまでの時間に基づいて前記所定の露光期間内の光子の入射回数を推定して推定値として出力する推定手順と
を具備する固体撮像素子の制御方法。
100 撮像装置
110 撮像レンズ
120 記録部
130 撮像制御部
200 固体撮像素子
201 受光チップ
202 ロジックチップ
210 受光部
220 受光回路
221、222、223、226、275、276、277、280 スイッチ
223、226-1 抵抗
224、227 フォトダイオード
225 マルチプレクサ
230 垂直制御部
240 水平制御部
250 信号処理部
260 ロジックアレイ部
270 論理回路
271 インバータ
272 トランジスタ
273 電源制御部
274 フォトンカウンタ
275 計数制御部
279 時刻情報保持部
290 計時回路
300 画素回路
12031 撮像部

Claims (8)

  1. 入射光を光電変換して光電流を出力するフォトダイオードと、
    前記フォトダイオードの一端と電源電位との間に挿入された抵抗と、
    前記一端の電位が降下した頻度に基づいて前記入射光の照度を測定する測定部と、
    前記測定された照度が高いほど低い値に前記電源電位を制御する電源制御部と
    を具備し、
    前記フォトダイオードの他端は、前記電源電位より低い電位の接地端子に接続されている
    固体撮像素子。
  2. 前記電源制御部は、前記照度と所定の閾値との比較結果に基づいて前記電源電位を制御する
    請求項1記載の固体撮像素子。
  3. 前記電源制御部は、前記照度と互いに異なる複数の閾値との比較結果に基づいて前記電源電位を制御する
    請求項1記載の固体撮像素子。
  4. 前記フォトダイオード、前記抵抗、前記測定部および前記電源制御部は、二次元格子状に配列された複数の画素回路のそれぞれに配置される
    請求項1記載の固体撮像素子。
  5. 前記測定部は、所定の露光期間内において前記一端の電位が降下した回数を計数して計数値を前記照度の測定値として前記電源制御部に供給する
    請求項1記載の固体撮像素子。
  6. 互いに異なる複数の電位のいずれかを切替信号に従って選択して前記電源電位として供給する選択部をさらに具備し、
    前記電源制御部は、前記切替信号を前記選択部に供給する
    請求項1記載の固体撮像素子。
  7. 入射光を集光する撮像レンズと、
    前記入射光を光電変換して光電流を出力するフォトダイオードと、
    前記フォトダイオードのカソードと電源電位との間に挿入された抵抗と、
    前記カソードの電位が降下した頻度に基づいて前記入射光の照度を測定する測定部と、
    前記測定された照度が高いほど低い値に前記電源電位を制御する電源制御部と
    を具備し、
    前記フォトダイオードのアノードは、前記電源電位より低い電位の接地端子に接続されている
    固体撮像素子。
  8. 入射光を光電変換した光電流を出力するフォトダイオードの一端と電源電位との間に挿入された抵抗によって前記一端の電位が降下した頻度に基づいて前記入射光の照度を測定する測定手順と、
    前記測定された照度が高いほど低い値に前記電源電位を制御する電源制御手順と
    を具備し、
    前記フォトダイオードの他端は、前記電源電位より低い電位の接地端子に接続されている
    固体撮像素子の制御方法。
JP2019568897A 2018-02-02 2018-12-04 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 Active JP7245178B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2018017019 2018-02-02
JP2018017020 2018-02-02
JP2018017019 2018-02-02
JP2018017020 2018-02-02
PCT/JP2018/044462 WO2019150752A1 (ja) 2018-02-02 2018-12-04 固体撮像素子、撮像装置、および、固体撮像素子の制御方法

Publications (2)

Publication Number Publication Date
JPWO2019150752A1 JPWO2019150752A1 (ja) 2021-01-28
JP7245178B2 true JP7245178B2 (ja) 2023-03-23

Family

ID=67479206

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019568897A Active JP7245178B2 (ja) 2018-02-02 2018-12-04 固体撮像素子、撮像装置、および、固体撮像素子の制御方法

Country Status (7)

Country Link
US (2) US11622086B2 (ja)
EP (1) EP3748957B1 (ja)
JP (1) JP7245178B2 (ja)
KR (1) KR102657111B1 (ja)
CN (2) CN118301493A (ja)
DE (1) DE112018007006T5 (ja)
WO (1) WO2019150752A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6852041B2 (ja) * 2018-11-21 2021-03-31 キヤノン株式会社 光電変換装置及び撮像システム
JP7218191B2 (ja) * 2019-01-30 2023-02-06 キヤノン株式会社 光電変換装置、撮像システム、移動体
JP7336217B2 (ja) * 2019-03-12 2023-08-31 キヤノン株式会社 情報処理装置、撮像素子、撮像装置、及び情報処理方法
JP2021016070A (ja) * 2019-07-11 2021-02-12 日本放送協会 撮像素子及びその信号読み出し回路
JP7393162B2 (ja) * 2019-09-09 2023-12-06 キヤノン株式会社 光電変換装置
JP2021093583A (ja) * 2019-12-09 2021-06-17 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
JP2024004306A (ja) 2022-06-28 2024-01-16 キヤノン株式会社 光電変換装置
JP2024067906A (ja) * 2022-11-07 2024-05-17 ソニーセミコンダクタソリューションズ株式会社 光検出装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000253320A (ja) 1999-02-25 2000-09-14 Nippon Hoso Kyokai <Nhk> 固体撮像装置
JP2007005774A (ja) 2005-05-23 2007-01-11 Semiconductor Energy Lab Co Ltd 光電変換装置及びその作製方法
JP2010199953A (ja) 2009-02-25 2010-09-09 Nec Corp 光受信回路、光受信装置、及び光受信回路の保護方法
WO2013157448A1 (ja) 2012-04-20 2013-10-24 ソニー株式会社 半導体光検出装置および放射線検出装置
JP2013257423A (ja) 2012-06-12 2013-12-26 Olympus Corp 光検出システムおよび顕微鏡システム
US20150163429A1 (en) 2013-12-09 2015-06-11 Omnivision Technologies, Inc. Low power imaging system with single photon avalanche diode photon counters and ghost image reduction
JP2016156748A (ja) 2015-02-25 2016-09-01 東芝メディカルシステムズ株式会社 光子計数型x線検出器及び光子計数型x線ct装置
US20170131143A1 (en) 2014-07-02 2017-05-11 Andreas G. Andreou Photodetection circuit and operating method thereof
JP2017521682A (ja) 2014-06-20 2017-08-03 ブルカー・エイエックスエス・インコーポレイテッドBruker AXS, Inc. 混合型光子計数/アナログ出力モードで動作可能なx線検出器
JP2018013422A (ja) 2016-07-21 2018-01-25 ソニーセミコンダクタソリューションズ株式会社 検出装置及び電子機器

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2442253A (en) 2006-09-13 2008-04-02 X Fab Uk Ltd A Semiconductor device
JP4900200B2 (ja) 2007-11-15 2012-03-21 ソニー株式会社 固体撮像素子、およびカメラシステム
GB2482278A (en) 2010-04-13 2012-02-01 St Microelectronics Res & Dev Image sensor analogue to digital conversion (ADC) with ramp signal delay compensation
US8716643B2 (en) 2010-09-06 2014-05-06 King Abdulaziz City Science And Technology Single photon counting image sensor and method
US9525495B2 (en) * 2013-02-19 2016-12-20 Mitsubishi Electric Corporation Burst-mode receiver, and method of bias voltage control for APD of burst-mode receiver
EP3503534B1 (en) * 2017-12-20 2021-08-18 Canon Kabushiki Kaisha Solid-state image sensor, image capturing apparatus, and image capturing method
JP7022598B2 (ja) * 2018-01-22 2022-02-18 キヤノン株式会社 固体撮像素子、撮像装置及び撮像方法
JP7218193B2 (ja) * 2019-01-31 2023-02-06 キヤノン株式会社 撮像装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000253320A (ja) 1999-02-25 2000-09-14 Nippon Hoso Kyokai <Nhk> 固体撮像装置
JP2007005774A (ja) 2005-05-23 2007-01-11 Semiconductor Energy Lab Co Ltd 光電変換装置及びその作製方法
JP2010199953A (ja) 2009-02-25 2010-09-09 Nec Corp 光受信回路、光受信装置、及び光受信回路の保護方法
WO2013157448A1 (ja) 2012-04-20 2013-10-24 ソニー株式会社 半導体光検出装置および放射線検出装置
JP2013257423A (ja) 2012-06-12 2013-12-26 Olympus Corp 光検出システムおよび顕微鏡システム
US20150163429A1 (en) 2013-12-09 2015-06-11 Omnivision Technologies, Inc. Low power imaging system with single photon avalanche diode photon counters and ghost image reduction
JP2017521682A (ja) 2014-06-20 2017-08-03 ブルカー・エイエックスエス・インコーポレイテッドBruker AXS, Inc. 混合型光子計数/アナログ出力モードで動作可能なx線検出器
US20170131143A1 (en) 2014-07-02 2017-05-11 Andreas G. Andreou Photodetection circuit and operating method thereof
JP2016156748A (ja) 2015-02-25 2016-09-01 東芝メディカルシステムズ株式会社 光子計数型x線検出器及び光子計数型x線ct装置
JP2018013422A (ja) 2016-07-21 2018-01-25 ソニーセミコンダクタソリューションズ株式会社 検出装置及び電子機器

Also Published As

Publication number Publication date
US20230179880A1 (en) 2023-06-08
JPWO2019150752A1 (ja) 2021-01-28
EP3748957A4 (en) 2020-12-09
KR20200116456A (ko) 2020-10-12
CN111466114B (zh) 2024-03-19
CN118301493A (zh) 2024-07-05
WO2019150752A1 (ja) 2019-08-08
EP3748957A1 (en) 2020-12-09
CN111466114A (zh) 2020-07-28
US11622086B2 (en) 2023-04-04
US20200382726A1 (en) 2020-12-03
EP3748957B1 (en) 2024-04-03
DE112018007006T5 (de) 2020-10-29
KR102657111B1 (ko) 2024-04-11

Similar Documents

Publication Publication Date Title
JP7245178B2 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US11470273B2 (en) Solid-state imaging element, imaging device, and control method of solid-state imaging element
JP7299845B2 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2019150786A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US11632505B2 (en) Solid-state image sensor and imaging device
US11678078B2 (en) Solid-state imaging device, imaging apparatus, and method for controlling solid-state imaging device for detecting occurrence of an address event of pixels
WO2020110537A1 (ja) 固体撮像素子、および、撮像装置
JP2018036102A (ja) 測距装置、および、測距装置の制御方法
JP2020072471A (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US11917317B2 (en) Solid-state imaging element and imaging device that detects address event
WO2022064867A1 (ja) 固体撮像素子、および、撮像装置
WO2020090311A1 (ja) 固体撮像素子
JPWO2020012943A1 (ja) コンパレータ及び撮像装置
US11711634B2 (en) Electronic circuit, solid-state image sensor, and method of controlling electronic circuit
JP2022061517A (ja) 受光素子、測距モジュール、および、受光素子の制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211014

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230214

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230310

R150 Certificate of patent or registration of utility model

Ref document number: 7245178

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150