JP2020057949A - 固体撮像装置及び撮像装置 - Google Patents
固体撮像装置及び撮像装置 Download PDFInfo
- Publication number
- JP2020057949A JP2020057949A JP2018187784A JP2018187784A JP2020057949A JP 2020057949 A JP2020057949 A JP 2020057949A JP 2018187784 A JP2018187784 A JP 2018187784A JP 2018187784 A JP2018187784 A JP 2018187784A JP 2020057949 A JP2020057949 A JP 2020057949A
- Authority
- JP
- Japan
- Prior art keywords
- light receiving
- unit
- receiving units
- imaging device
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 167
- 238000001514 detection method Methods 0.000 claims abstract description 167
- 238000006243 chemical reaction Methods 0.000 claims description 70
- 230000010287 polarization Effects 0.000 claims description 66
- 238000012546 transfer Methods 0.000 claims description 45
- 238000010304 firing Methods 0.000 claims description 33
- 238000009792 diffusion process Methods 0.000 claims description 32
- 238000007667 floating Methods 0.000 claims description 32
- 230000010354 integration Effects 0.000 claims description 17
- 230000008859 change Effects 0.000 claims description 13
- 230000003287 optical effect Effects 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 51
- 230000000875 corresponding effect Effects 0.000 description 36
- 238000012545 processing Methods 0.000 description 24
- 230000000694 effects Effects 0.000 description 23
- 230000004048 modification Effects 0.000 description 19
- 238000012986 modification Methods 0.000 description 19
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 16
- 239000003990 capacitor Substances 0.000 description 15
- 239000003086 colorant Substances 0.000 description 12
- 230000004044 response Effects 0.000 description 11
- 239000000872 buffer Substances 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 238000000034 method Methods 0.000 description 6
- 230000003252 repetitive effect Effects 0.000 description 6
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 6
- 230000003321 amplification Effects 0.000 description 5
- 239000010949 copper Substances 0.000 description 5
- 238000003199 nucleic acid amplification method Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 239000011368 organic material Substances 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000000149 penetrating effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 241000724291 Tobacco streak virus Species 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
- H04N25/441—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading contiguous pixels from selected rows or columns of the array, e.g. interlaced scanning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
- H04N25/443—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading pixels from selected 2D regions of the array, e.g. for windowing or digital zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
- H04N25/447—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by preserving the colour pattern with or without loss of information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/47—Image sensors with pixel address output; Event-driven image sensors; Selection of pixels to be read out based on image data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/707—Pixels for event detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/79—Arrangements of circuitry being divided between different or multiple substrates, chips or circuit boards, e.g. stacked image sensors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Solid State Image Pick-Up Elements (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
Description
1.はじめに
2.第1の実施形態
2.1 撮像装置の構成例
2.2 固体撮像装置の構成例
2.2.1 固体撮像装置の積層構成例
2.2.2 固体撮像装置の機能構成例
2.3 画素アレイ部の構成例
2.4 画素ブロックの例
2.4.1 ベイヤー配列
2.4.2 X−Trans(登録商標)型配列
2.4.3 クアッドベイヤー配列
2.4.4 その他
2.5 アドレスイベントの発火検出
2.6 画素ブロックの構成例
2.7 アドレスイベント検出部の構成例
2.8 電流電圧変換部の構成例
2.9 減算器及び量子化器の構成例
2.10 カラムADCの構成例
2.11 固体撮像装置の動作例
2.11.1 タイミングチャート
2.11.2 フローチャート
2.12 作用・効果
3.第2の実施形態
3.1 アドレスイベントの発火検出
3.2 画素ブロックの構成例
3.3 固体撮像装置の動作例
3.4 作用・効果
4.第3の実施形態
4.1 画素ブロックの例
4.2 作用・効果
5.第4の実施形態
5.1 画素ブロックの例
5.2 作用・効果
6.第5の実施形態
6.1 画素ブロックの例
6.2 変形例1
6.3 変形例2
6.4 作用・効果
7.第6の実施形態
7.1 画素ブロックの例
7.2 変形例1
7.3 変形例2
7.4 作用・効果
8.第7の実施形態
8.1 作用・効果
一般的なDVS(Dynamic Vision Sensor)には、単位画素ごとにアドレスイベントの発火の有無を検出し、アドレスイベントの発火が検出された場合、このアドレスイベントが発火した単位画素から画素信号を読み出すという、いわゆるイベントドリブン型の駆動方式が採用されている。
まず、本開示の第1の実施形態に係る固体撮像装置及び撮像装置について、図面を参照して詳細に説明する。
図1は、第1の実施形態に係る固体撮像装置及び撮像装置の概略構成例を示すブロック図である。図1に示すように、撮像装置100は、例えば、撮像レンズ110、固体撮像装置200、記録部120及び制御部130を備える。撮像装置100としては、産業用ロボットに搭載されるカメラや、車載カメラなどが想定される。
つづいて、固体撮像装置200の構成例について、図面を参照して詳細に説明する。
図2は、第1の実施形態に係る固体撮像装置の積層構造例を示す図である。図2に示すように、固体撮像装置200は、受光チップ201と検出チップ202とが上下に積層された構造を備える。受光チップ201と検出チップ202との接合には、例えば、それぞれの接合面を平坦化して両者を電子間力で貼り合わせる、いわゆる直接接合を用いることができる。ただし、これに限定されず、例えば、互いの接合面に形成された銅(Cu)製の電極パッド同士をボンディングする、いわゆるCu−Cu接合や、その他、バンプ接合などを用いることも可能である。
図3は、第1の実施形態に係る固体撮像装置の機能構成例を示すブロック図である。図3に示すように、固体撮像装置200は、駆動回路211、信号処理部212、アービタ213、カラムADC220及び画素アレイ部300を備える。
つづいて、画素アレイ部300の構成例について説明する。図4は、第1の実施形態に係る画素アレイ部の概略構成例を示すブロック図である。図4に示すように、画素アレイ部300における複数の単位画素は、複数の画素ブロック310にグループ化される。画素ブロック310それぞれは、I行×J列(I及びJは正の整数)に配列する複数の単位画素で構成されている。
図4に示す構成において、画素ブロック310は、例えば、色彩を再構成するために必要となる波長成分を受光する単位画素の組合せで構成される。例えば、RGB三原色に基づいて色彩を再構成する場合では、赤(R)色の光を受光する単位画素と、緑(G)色の光を受光する単位画素と、青(B)色の光を受光する単位画素との組合せで、画素ブロック310が構成される。
図5は、カラーフィルタ配列にベイヤー配列を採用した場合の画素ブロックの構成例を示す模式図である。図5に示すように、カラーフィルタ配列としてベイヤー配列を採用した場合、1つの画素ブロック310Aは、ベイヤー配列における繰返しの単位である2×2画素の計4つの単位画素よりなる基本パターン(以下、単位パターンという)で構成される。したがって、本例に係る各画素ブロック310Aには、例えば、赤(R)色のカラーフィルタを備える受光部330Rと、緑(Gr)色のカラーフィルタを備える受光部330Grと、緑(Gb)色のカラーフィルタを備える受光部330Gbと、青(B)色のカラーフィルタを備える受光部330Bとが含まれる。
図6は、カラーフィルタ配列にX−Trans(登録商標)型配列を採用した場合の画素ブロックの構成例を示す模式図である。図6に示すように、本例では、1つの画素ブロック310Bは、X−Trans(登録商標)型配列における繰返しの単位である3×3画素の計9つの単位画素よりなる基本パターン(以下、これも単位パターンという)で構成される。したがって、本例に係る各画素ブロック310Bには、例えば、単位パターンを形成する矩形領域の2つの対角線に沿って配置された緑(G)色のカラーフィルタを備える5つの受光部330Gと、矩形領域の中心に位置する受光部330Gを中心軸として点対称に配置された赤(R)色のカラーフィルタを備える2つの受光部330Rと、同じく、矩形領域の中心に位置する受光部330Gを中心軸として点対称に配置された青(B)色のカラーフィルタを備える2つの受光部330Bとが含まれる。
図7は、カラーフィルタ配列にクアッドベイヤー配列を採用した場合の画素ブロックの構成例を示す模式図である。図7に示すように、カラーフィルタ配列としてベイヤー配列を採用した場合、1つの画素ブロック310Cは、クアッドベイヤー配列における繰返しの単位である4×4画素の計16つの単位画素よりなる基本パターン(以下、これも単位パターンという)で構成される。したがって、本例に係る各画素ブロック310Cには、例えば、赤(R)色のカラーフィルタを備える2×2画素の計4つの受光部330Rと、緑(Gr)色のカラーフィルタを備える2×2画素の計4つの受光部330Grと、緑(Gb)色のカラーフィルタを備える2×2画素の計4つの受光部330Gbと、青(B)色のカラーフィルタを備える2×2画素の計4つの受光部330Bとが含まれる。
図8は、単位画素がカラーフィルタを備えない場合の画素ブロックの構成例を示す模式図である。例えば、RGB三原色それぞれに対する受光部330が光の入射方向に沿って配置(縦積)された構造を備える場合など、固体撮像装置200がカラーフィルタを備えない場合が存在する。そのような場合では、図8に示すように、1つの画素エリア330G/B/Rに、緑(G)色の光を受光する受光部330Gと、青(B)色の光を受光する受光部330Bと、赤(R)色の光を受光する受光部330Rとが設けられた構造となる。そこで、そのような場合、本実施形態では、画素ブロック310Dを、1つの画素エリア330G/B/Rに設けられた3つの受光部330G、330B及び330Rで構成する。
以上のような構成において、本実施形態では、アドレスイベントの発火を単位画素ごとに検出し、アドレスイベントの発火が検出された単位画素を含む画素ブロック310に属する全ての単位画素から画素信号SIGを読み出す。なお、以下の説明では、簡略化のため、カラーフィルタ配列としてベイヤー配列を採用し、その単位パターンを構成する2×2画素の計4つの受光部330R、330Gr、330Gb及び330Bで各画素ブロック310(画素ブロック310Aに相当)を構成した場合について例を挙げる。
つづいて、画素ブロックの構成例について説明する。図11は、第1の実施形態に係る画素ブロックの概略構成例を示す回路図である。図11に示すように、画素ブロック310において、画素信号生成部320は、リセットトランジスタ321、増幅トランジスタ322、選択トランジスタ323及び浮遊拡散層324を備える。画素ブロック310を構成する複数の受光部330R、330Gr、330Gb及び330Bの出力は、それぞれに対して個別に設けられたアドレスイベント検出部400R、400Gr、400Gb及び400Bに接続されている。
図12は、第1の実施形態に係るアドレスイベント検出部の概略構成例を示すブロック図である。図12に示すように、アドレスイベント検出部400は、電流電圧変換部410、バッファ420、減算器430、量子化器440及び転送部450を備える。なお、以下の説明において、受光部330R、330Gr、330Gb及び330Bを区別しない場合、その符号を330とする。同様に、以下の説明において、アドレスイベント検出部400R、400Gr、400Gb及び400Bを区別しない場合、その符号を400とする。
図13は、第1の実施形態に係る電流電圧変換部の概略構成例を示す回路図である。図13に示すように、電流電圧変換部410は、N型トランジスタ411及び413とP型トランジスタ412とを備える。N型トランジスタ411及び413とP型トランジスタ412とは、例えば、MOSトランジスタであってよい。
図14は、第1の実施形態に係る減算器及び量子化器の概略構成例を示す回路図である。減算器430は、コンデンサ431及び433と、インバータ432と、スイッチ434とを備える。また、量子化器440は、コンパレータ441を備える。
Qinit=C1×Vinit (1)
Qafter=C1×Vafter (2)
Q2=−C2×Vout (3)
Qinit=Qafter+Q2 (4)
Vout=−(C1/C2)×(Vafter−Vinit) (5)
図15は、第1の実施形態に係るカラムADCの概略構成例を示すブロック図である。このカラムADC220は、画素ブロック310の列ごとに設けられた複数のADC230を備える。
つづいて、本実施形態に係る固体撮像装置200の動作について、図面を参照して詳細に説明する。
まず、固体撮像装置200の動作の一例をタイミングチャートを用いて説明する。図16は、第1の実施形態に係る固体撮像装置の動作の一例を示すタイミングチャートである。
次に、固体撮像装置200の動作の一例をフローチャートを用いて説明する。図17は、第1の実施形態に係る固体撮像装置の動作の一例を示すフローチャートである。この動作は、例えば、アドレスイベントを検出するための所定のアプリケーションが実行されたときに開始される。
以上のように、第1の実施形態では、色彩を再構成するために必要となる波長成分を受光する複数(N個)の単位画素の集合(画素ブロック310)をアドレスイベントの発火の有無を検出する単位(画素ブロック単位)とし、画素ブロック単位でアドレスイベントの発火が検出された場合には、画素ブロック単位で画素信号SIGが読み出されるように構成されている。これにより、ある波長成分の単位画素でアドレスイベントが発火した際には、色彩の再構成に必要となる全ての波長成分の画素信号SIGが同期して読み出されるため、正しい色彩を再構成することが可能となる。その結果、正しく色彩が再構成されたカラー画像を取得できるイベントドリブン型の固体撮像装置及び撮像装置を実現することが可能となる。
次に、本開示の第2の実施形態に係る固体撮像装置及び撮像装置について、図面を参照して詳細に説明する。なお、以下の説明において、上述した実施形態と同様の構成、動作及び効果については、それらを引用することで、重複する説明を省略する。
本実施形態では、上述したように、同一の画素ブロック510に属する全ての受光部330に対して共通のアドレスイベント検出部400が設けられる。したがって、本実施形態では、アドレスイベントの発火が画素ブロック510ごとに検出され、アドレスイベントの発火が検出された画素ブロック510に属する全ての単位画素から画素信号SIGが読み出される。なお、以下の説明では、簡略化のため、カラーフィルタ配列としてベイヤー配列を採用し、その単位パターンを構成する2×2画素の計4つの受光部330R、330Gr、330Gb及び330Bで各画素ブロック510(画素ブロック310Aに相当)を構成した場合について例を挙げる。
つづいて、画素ブロックの構成例について説明する。図20は、第2の実施形態に係る画素ブロックの概略構成例を示す回路図である。図20に示すように、本実施形態に係る画素ブロック510では、第1の実施形態において図11を用いて説明した画素ブロック310と同様の構成において、各受光部に対して一対一に設けられた複数のアドレスイベント検出部400R、400Gr、400Gb及び400Bが、1つの共通のアドレスイベント検出部400に置き換えられている。また、各受光部330R、330Gr、330Gb及び330Bの出力は、統合部250で統合されて、アドレスイベント検出部400に入力されている。
つづいて、本実施形態に係る固体撮像装置200の動作について説明する。本実施形態に係る固体撮像装置200の動作例は、例えば、第1の実施形態において図16及び図17を用いて説明した動作例と同様であってよい。ただし、本実施形態では、制御信号OFG−R、OFG−Gr、OFG−Gb及びOFG−Bがハイレベルである期間中(図16のタイミングT0〜T2参照)、アドレスイベント検出部400には、受光部330R、330Gr、330Gb及び330Bから出力されて統合部250で統合された光電流が入力される。したがって、本実施形態において、アドレスイベント検出部400は、統合された光電流に基づき、画素ブロック単位でアドレスイベントの発火の有無を検出し、アドレスイベントの発火を検出した場合、アービタ213にリクエストを送信する。そして、アービタ213から所定の応答を受け取ると、アドレスイベント検出部400は、例えば、タイミングT1〜T2の期間、駆動回路211及び信号処理部212に入力する検出信号をハイレベルに立ち上げる。
以上のように、第2の実施形態では、第1の実施形態と同様に、色彩を再構成するために必要となる波長成分を受光する複数(N個)の単位画素の集合(画素ブロック310)をアドレスイベントの発火の有無を検出する単位(画素ブロック単位)とし、画素ブロック単位でアドレスイベントの発火が検出された場合には、画素ブロック単位で画素信号SIGが読み出されるように構成されている。これにより、ある波長成分の単位画素でアドレスイベントが発火した際には、色彩の再構成に必要となる全ての波長成分の画素信号SIGが同期して読み出されるため、正しい色彩を再構成することが可能となる。その結果、正しく色彩が再構成されたカラー画像を取得できるイベントドリブン型の固体撮像装置及び撮像装置を実現することが可能となる。
次に、本開示の第3の実施形態に係る固体撮像装置及び撮像装置について、図面を参照して詳細に説明する。なお、以下の説明において、上述した実施形態と同様の構成、動作及び効果については、それらを引用することで、重複する説明を省略する。
本実施形態に係る画素ブロック610は、例えば、偏光情報を再構成するために必要となる偏光成分を受光する単位画素の組合せで構成される。偏光情報は、例えば、正弦曲線のフィッティングによって求めることができる。そのため、偏光情報を再構成するためには、偏光軸の光軸を中心とした回転角が異なる少なくとも3つの偏光子を用いて入射光を観測する必要がある。
以上のように、第3の実施形態では、第1及び第2の実施形態で使用した波長選択素子(カラーフィルタ314R、314Gr、314Gb、314B等)に代えて、偏光軸の光軸を中心とした回転角が異なる少なくとも3つの偏光子614H、614V及び614Sが受光部330に対して設けられ、これら偏光子614H、614V及び614Sをそれぞれ少なくとも1つずつ含む単位画素の集合が、1つの画素ブロック610としてグループ化された構成を備える。これにより、上述した実施形態と同様に、画素ブロック単位でアドレスイベントの発火が検出された場合には、画素ブロック単位で画素信号SIGが読み出されるため、ある偏光成分の単位画素でアドレスイベントが発火した際には、偏光情報の再構成に必要となる少なくとも3つの偏光成分の画素信号SIGが同期して読み出される。それにより、画素ブロック単位で読み出された画素信号SIGに基づいて、正しい偏光情報を再構成することが可能となる。その結果、入射光が自然光であるか否かや、物体や水面等で反射した反射光であるか否かや、光源からの光がどのような偏光状態であるかなどの情報が含まれる画像データを取得することができるイベントドリブン型の固体撮像装置及び撮像装置を実現することが可能となる。
上述した第3の実施形態では、偏光軸の光軸を中心とした回転角が異なる3種類の偏光子614H、614V及び614Sを2次元格子状に配列する複数の受光部330に対して所定の繰返しパターンで配置し、繰返しパターンそれぞれ、すなわち、3種類の偏光子614H、614V及び614Sをそれぞれ1つずつ含む3つの単位画素の集合を、1つの画素ブロック610としてグループ化する場合を例示した。それに対し、第4の実施形態では、4種類の偏光子を2次元格子状に配列する複数の受光部330に対して所定の繰返しパターンで配置し、この繰返しパターンそれぞれ、すなわち、4種類の偏光子をそれぞれ1つずつ含む4つの単位画素の集合を、1つの画素ブロックとしてグループ化する。
図22は、第4の実施形態に係る画素ブロックの例を示す模式図である。なお、説明の簡略化のため、図22では、画素信号生成部320とアドレスイベント検出部400とが省略されている。
このように、偏光情報の再構成に使用する単位画素の数を4つとした場合でも、第3の実施形態と同様に、ある偏光成分の単位画素でアドレスイベントが発火した際には、偏光情報の再構成に必要となる少なくとも3つの偏光成分の画素信号SIGが同期して読み出されるため、画素ブロック単位で読み出された画素信号SIGに基づいて、正しい偏光情報を再構成することが可能となる。その結果、入射光が自然光であるか否かや、物体や水面等で反射した反射光であるか否かや、光源からの光がどのような偏光状態であるかなどの情報が含まれる画像データを取得することができるイベントドリブン型の固体撮像装置及び撮像装置を実現することが可能となる。
第1又は第2の実施形態で例示した波長選択素子と、第3又は第4の実施形態で例示した偏光子とは、組み合わせることが可能である。すなわち、色彩を再構成するために必要となる波長成分ごとに、偏光情報を再構成するために必要となる偏光成分を取得するように構成することも可能である。それにより、入射光が自然光であるか否かや、物体や水面等で反射した反射光であるか否かや、光源からの光がどのような偏光状態であるかなどの情報が含まれるとともに、色彩が正しく再構成されたカラー画像を取得することが可能となる。
図23は、第5の実施形態に係る画素ブロックの例を示す模式図である。なお、説明の簡略化のため、図23では、受光部330と画素信号生成部320とアドレスイベント検出部400とが省略されている。
図24は、第5の実施形態の変形例1に係る画素ブロックの例を示す模式図である。図23では、単位パターン820Aを構成するカラーフィルタ314R、314Gr、314Gb及び314Bそれぞれに対して一対一で偏光子614H1、614V1、614V2及び614H2を組み合わせた場合を例示したが、このような構成に限定されるものではない。例えば、図24に例示する画素ブロック910のように、4つの単位パターン820Aそれぞれに組み合わせる偏光子群840H1、840V1、840V2及び840H2を、それぞれ1つの偏光子914H1、914V1、914V2又は914H2で構成することも可能である。
また、図25は、第5の実施形態の変形例2に係る画素ブロックの例を示す模式図である。変形例2では、カラーフィルタ配列としてX−Trans(登録商標)型配列を採用した場合の画素ブロック1210を例示する。なお、本説明では、明確化のため、X−Trans(登録商標)型配列に対して組み合わせる偏光子を、第4の実施形態で例示した偏光子614H1、614V1、614V2及び614H2とする。また、図25では、説明の簡略化のため、受光部330と画素信号生成部320とアドレスイベント検出部400とが省略されている。
以上のように、第1又は第2の実施形態で例示した波長選択素子と、第3又は第4の実施形態で例示した偏光子とを組み合わせることで、入射光が自然光であるか否かや、物体や水面等で反射した反射光であるか否かや、光源からの光がどのような偏光状態であるかなどの情報が含まれるとともに、色彩が正しく再構成されたカラー画像を取得することができるイベントドリブン型の固体撮像装置及び撮像装置を実現することが可能となる。
上述の第5の実施形態では、カラーフィルタに対し、その配列を変更せずに、偏光子を組み合わせた場合を例示した。これに対し、第6の実施形態では、例えば、偏光子に対し、その繰返しパターンを変更せずに、カラーフィルタを組み合わせる場合について、例を挙げて説明する。
図26は、第6の実施形態に係る画素ブロックの例を示す模式図である。なお、説明の簡略化のため、図26では、受光部330と画素信号生成部320とアドレスイベント検出部400とが省略されている。
図27は、第6の実施形態の変形例1に係る画素ブロックの例を示す模式図である。図26では、所定のカラーフィルタ配列(例えば、ベイヤー配列)で配列した各カラーフィルタを、それらに組み合わせる偏光子の数に分割した場合を例示したが、このような構成に限定されるものではない。例えば、図27に例示する画素ブロック1110のように、各カラーフィルタ314R、314Gr、314Gb及び314Bを分割せずにそのサイズを変更して、各カラーフィルタ314R、314Gr、314Gb及び314Bに対して偏光子群1040Aを組み合わせた構成とすることも可能である。
また、図28は、第6の実施形態の変形例2に係る画素ブロックの例を示す模式図である。変形例2では、カラーフィルタ配列としてX−Trans(登録商標)型配列を採用した場合の画素ブロック1310を例示する。なお、本説明では、明確化のため、X−Trans(登録商標)型配列に対して組み合わせる偏光子を、第4の実施形態で例示した偏光子614H1、614V1、614V2及び614H2とする。また、図28では、説明の簡略化のため、受光部330と画素信号生成部320とアドレスイベント検出部400とが省略されている。
このように、偏光子に対し、その繰返しパターンを変更せずに、カラーフィルタを組み合わせた場合でも、第5の実施形態と同様に、入射光が自然光であるか否かや、物体や水面等で反射した反射光であるか否かや、光源からの光がどのような偏光状態であるかなどの情報が含まれるとともに、色彩が正しく再構成されたカラー画像を取得することができるイベントドリブン型の固体撮像装置及び撮像装置を実現することが可能となる。
また、第3又は第4の実施形態で例示したような偏光子は、例えば、第1の実施形態で図8を用いて例示した、1つの画素エリア330G/B/Rに受光部330G、330B及び330Rが設けられた構造の画素ブロック310Dに対しても、組み合わせることが可能である。
以上のように、1つの画素エリア330G/B/Rに色彩の再構成に必要となる波長成分を受光する受光部330G、330B及び330Rが集約されている場合でも、例えば、第3又は第4の実施形態で例示した偏光子とを組み合わせることで、入射光が自然光であるか否かや、物体や水面等で反射した反射光であるか否かや、光源からの光がどのような偏光状態であるかなどの情報が含まれるとともに、色彩が正しく再構成されたカラー画像を取得することができるイベントドリブン型の固体撮像装置及び撮像装置を実現することが可能となる。
(1)
各々が特定波長の光を受光して受光量に応じた電荷を発生させる複数の受光部と、
前記複数の受光部のうちの少なくとも1つで発生した電荷に基づく光電流を検出する検出部と、
前記複数の受光部それぞれで発生した電荷に基づく電圧信号を生成する生成部と、
前記検出部による前記光電流の検出結果に基づいて、前記複数の受光部のうちの少なくとも2つで発生した電荷それぞれに基づく電圧信号を前記生成部に生成させる駆動回路と、
を備える固体撮像装置。
(2)
前記検出部は、前記光電流の電流値又は当該電流値の変化量を検出する前記(1)に記載の固体撮像装置。
(3)
前記複数の受光部は、少なくとも2つの受光部ごとの画素ブロックにグループ化され、
前記検出部は、前記画素ブロックごとに、当該画素ブロックに属する受光部のうちの前記少なくとも1つで発生した前記電荷に基づく前記光電流を検出し、
前記駆動回路は、前記検出部による前記画素ブロックごとの前記光電流の前記検出結果に基づいて、前記画素ブロックごとに、当該画素ブロックに属する前記受光部で発生した前記電荷それぞれに基づく前記電圧信号を前記生成部に生成させる
前記(1)又は(2)に記載の固体撮像装置。
(4)
前記画素ブロックそれぞれに属する前記受光部は、互いに異なる前記特定波長の光を受光する前記(3)に記載の固体撮像装置。
(5)
前記画素ブロックそれぞれは、入射光の色彩を再構成するために必要となる波長成分をそれぞれ受光する受光部の組合せで構成されている前記(4)に記載の固体撮像装置。
(6)
前記画素ブロックそれぞれは、赤色の波長成分を受光する第1受光部と、緑色の波長成分を受光する第2受光部と、青色の波長成分を受光する第3受光部とを含む前記(3)〜(5)の何れか1項に記載の固体撮像装置。
(7)
前記検出部は、前記複数の受光部ごとに設けられ、
前記画素ブロックごとに、当該画素ブロックに属する前記受光部に対して設けられた複数の前記検出部から出力された前記検出結果を統合する統合部をさらに備える
前記(3)〜(6)の何れか1項に記載の固体撮像装置。
(8)
前記検出部は、前記画素ブロックごとに設けられ、
前記画素ブロックごとに、当該画素ブロックそれぞれに属する前記受光部それぞれから出力された前記光電流を統合する統合部をさらに備え、
前記画素ブロックごとの前記検出部は、前記統合部を介して入力された前記光電流を検出する
前記(3)〜(6)の何れか1項に記載の固体撮像装置。
(9)
前記複数の受光部は、所定の配列に従って二次元格子状に配列する前記(3)〜(8)の何れか1項に記載の固体撮像装置。
(10)
前記所定の配列は、ベイヤー配列、X−Trans(登録商標)型配列、及び、クワッドベイヤー配列のうちの何れかである前記(9)に記載の固体撮像装置。
(11)
前記所定の配列は、入射光の色彩を再構成するために必要となる波長成分ごとの前記受光部が所定の配置で組み合わされてなる基本パターンが繰返し配置された構成を備え、
前記複数の受光部は、前記基本パターンごとに前記画素ブロックにグループ化されている
前記(9)又は(10)に記載の固体撮像装置。
(12)
前記複数の受光部それぞれは、
前記特定波長の光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記光電流として前記検出部へ供給する第1トランジスタと、
を含む前記(1)〜(11)の何れか1項に記載の固体撮像装置。
(13)
前記複数の受光部それぞれは、前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記生成部へ転送する第2トランジスタをさらに含み、
前記生成部は、
前記複数の受光部のうちの何れかから前記第2トランジスタを介して転送された前記電荷を蓄積する浮遊拡散層と、
前記駆動回路からの制御に従い、前記浮遊拡散層に蓄積されている前記電荷を放出する第3トランジスタと、
前記浮遊拡散層に蓄積された前記電荷の電荷量に応じた前記電圧信号を所定の信号線に出現させる第4トランジスタと、
前記駆動回路からの制御に従い、前記第4トランジスタと前記所定の信号線との接続を切り替える第5トランジスタと、
を含む
前記(12)に記載の固体撮像装置。
(14)
前記複数の受光部それぞれは、
前記特定波長の光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記光電流として前記検出部へ供給する第1トランジスタと、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記生成部へ転送する第2トランジスタをさらに含み、
前記生成部は、
前記複数の受光部のうちの何れかから前記第2トランジスタを介して転送された前記電荷を蓄積する浮遊拡散層と、
前記駆動回路からの制御に従い、前記浮遊拡散層に蓄積されている前記電荷を放出する第3トランジスタと、
前記浮遊拡散層に蓄積された前記電荷の電荷量に応じた前記電圧信号を所定の信号線に出現させる第4トランジスタと、
前記駆動回路からの制御に従い、前記第4トランジスタと前記所定の信号線との接続を切り替える第5トランジスタと、
を含み、
前記検出部は、前記光電流に基づいてイベントの発火の有無を検出し、
前記駆動回路は、前記複数の受光部それぞれの前記第1トランジスタをオン状態に制御している期間中に前記検出部が前記イベントの発火を検出した場合、前記イベントの発火が検出された画素ブロックに属する前記受光部それぞれの前記第1トランジスタをオフ状態に制御し、前記第5トランジスタをオン状態に制御するとともに、前記第3トランジスタを一定期間オン状態とし、その後、当該画素ブロックに属する受光部それぞれの第2トランジスタを所定の順番に従って一定期間オン状態に制御する
前記(3)〜(11)の何れか1項に記載の固体撮像装置。
(15)
前記所定の信号線に出現した前記電圧信号を電圧値に応じたデジタル値に変換する変換部をさらに備える前記(13)又は(14)に記載の固体撮像装置。
(16)
前記複数の受光部それぞれは、
前記特定波長の光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記光電変換素子に入射する前記光の波長を前記特定波長に制限する波長選択素子と、
を含む前記(1)〜(15)の何れか1項に記載の固体撮像装置。
(17)
前記複数の受光部それぞれに設けられた偏光子をさらに備える前記(1)〜(16)の何れか1項に記載の固体撮像装置。
(18)
前記複数の受光部それぞれに設けられた偏光子をさらに備え、
前記画素ブロックそれぞれに属する少なくとも2つの前記受光部に対してそれぞれ設けられた前記偏光子は、偏光軸の光軸を中心とした回転角が互いに異なる
前記(3)〜(11)の何れか1項に記載の固体撮像装置。
(19)
前記画素ブロックそれぞれは、入射光の色彩を再構成するために必要となる波長成分の数と、前記偏光軸の前記光軸を中心とした前記回転角が互いに異なる前記偏光子の数とを乗算した数の前記受光部を含む前記(18)に記載の固体撮像装置。
(20)
各々が特定波長の光を受光して受光量に応じた電荷を発生させる複数の受光部と、
前記複数の受光部のうちの少なくとも1つで発生した電荷に基づく光電流を検出する検出部と、
前記複数の受光部それぞれで発生した電荷に基づく電圧信号を生成する生成部と、
前記検出部による前記光電流の検出結果に基づいて、前記複数の受光部のうちの少なくとも2つで発生した電荷それぞれに基づく電圧信号を前記生成部に生成させる駆動回路と、
を備える撮像装置。
(21)
各々が特定の偏光方向の光を受光して受光量に応じた電荷を発生させる複数の受光部と、
前記複数の受光部のうちの少なくとも1つで発生した電荷に基づく光電流を検出する検出部と、
前記複数の受光部それぞれで発生した電荷に基づく電圧信号を生成する生成部と、
前記検出部による前記光電流の検出結果に基づいて、前記複数の受光部のうちの少なくとも2つで発生した電荷それぞれに基づく電圧信号を前記生成部に生成させる駆動回路と、
を備える固体撮像装置。
(22)
前記検出部は、前記光電流の電流値又は当該電流値の変化量を検出する前記(21)に記載の固体撮像装置。
(23)
前記複数の受光部は、少なくとも2つの受光部ごとの画素ブロックにグループ化され、
前記検出部は、前記画素ブロックごとに、当該画素ブロックに属する受光部のうちの前記少なくとも1つで発生した前記電荷に基づく前記光電流を検出し、
前記駆動回路は、前記検出部による前記画素ブロックごとの前記光電流の前記検出結果に基づいて、前記画素ブロックごとに、当該画素ブロックに属する前記受光部で発生した前記電荷それぞれに基づく前記電圧信号を前記生成部に生成させる
前記(21)又は(22)に記載の固体撮像装置。
(24)
前記画素ブロックそれぞれに属する前記受光部は、互いに異なる前記特定の偏光方向の光を受光する前記(23)に記載の固体撮像装置。
(25)
前記画素ブロックそれぞれは、入射光の偏光情報を再構成するために必要となる前記特定の偏光方向の前記光をそれぞれ受光する受光部の組合せで構成されている前記(24)に記載の固体撮像装置。
(26)
前記画素ブロックそれぞれは、第1の偏光方向の前記光を受光する第1受光部と、第2の偏光方向の前記光を受光する第2受光部と、第3の偏光方向の前記光を受光する第3受光部とを含む前記(23)〜(25)の何れか1項に記載の固体撮像装置。
(27)
前記検出部は、前記複数の受光部ごとに設けられ、
前記画素ブロックごとに、当該画素ブロックに属する前記受光部に対して設けられた複数の前記検出部から出力された前記検出結果を統合する統合部をさらに備える
前記(23)〜(26)の何れか1項に記載の固体撮像装置。
(28)
前記検出部は、前記画素ブロックごとに設けられ、
前記画素ブロックごとに、当該画素ブロックそれぞれに属する前記受光部それぞれから出力された前記光電流を統合する統合部をさらに備え、
前記画素ブロックごとの前記検出部は、前記統合部を介して入力された前記光電流を検出する
前記(23)〜(26)の何れか1項に記載の固体撮像装置。
(29)
前記複数の受光部は、所定の配列に従って二次元格子状に配列する前記(23)〜(28)の何れか1項に記載の固体撮像装置。
(30)
前記所定の配列は、入射光の偏光情報を再構成するために必要となる前記偏光方向ごとの前記受光部が所定の配置で組み合わされてなる繰返しパターンが繰返し配置された構成を備え、
前記複数の受光部は、前記繰返しパターンごとに前記画素ブロックにグループ化されている
前記(29)に記載の固体撮像装置。
(31)
前記複数の受光部それぞれは、
前記光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記光電流として前記検出部へ供給する第1トランジスタと、
を含む前記(21)〜(30)の何れか1項に記載の固体撮像装置。
(32)
前記複数の受光部それぞれは、前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記生成部へ転送する第2トランジスタをさらに含み、
前記生成部は、
前記複数の受光部のうちの何れかから前記第2トランジスタを介して転送された前記電荷を蓄積する浮遊拡散層と、
前記駆動回路からの制御に従い、前記浮遊拡散層に蓄積されている前記電荷を放出する第3トランジスタと、
前記浮遊拡散層に蓄積された前記電荷の電荷量に応じた前記電圧信号を所定の信号線に出現させる第4トランジスタと、
前記駆動回路からの制御に従い、前記第4トランジスタと前記所定の信号線との接続を切り替える第5トランジスタと、
を含む
前記(31)に記載の固体撮像装置。
(33)
前記複数の受光部それぞれは、
前記光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記光電流として前記検出部へ供給する第1トランジスタと、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記生成部へ転送する第2トランジスタをさらに含み、
前記生成部は、
前記複数の受光部のうちの何れかから前記第2トランジスタを介して転送された前記電荷を蓄積する浮遊拡散層と、
前記駆動回路からの制御に従い、前記浮遊拡散層に蓄積されている前記電荷を放出する第3トランジスタと、
前記浮遊拡散層に蓄積された前記電荷の電荷量に応じた前記電圧信号を所定の信号線に出現させる第4トランジスタと、
前記駆動回路からの制御に従い、前記第4トランジスタと前記所定の信号線との接続を切り替える第5トランジスタと、
を含み、
前記検出部は、前記光電流に基づいてイベントの発火の有無を検出し、
前記駆動回路は、前記複数の受光部それぞれの前記第1トランジスタをオン状態に制御している期間中に前記検出部が前記イベントの発火を検出した場合、前記イベントの発火が検出された画素ブロックに属する前記受光部それぞれの前記第1トランジスタをオフ状態に制御し、前記第5トランジスタをオン状態に制御するとともに、前記第3トランジスタを一定期間オン状態とし、その後、当該画素ブロックに属する受光部それぞれの第2トランジスタを所定の順番に従って一定期間オン状態に制御する
前記(23)〜(30)の何れか1項に記載の固体撮像装置。
(34)
前記所定の信号線に出現した前記電圧信号を電圧値に応じたデジタル値に変換する変換部をさらに備える前記(32)又は(33)に記載の固体撮像装置。
(35)
前記複数の受光部それぞれは、
前記光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記光電変換素子に入射する前記光の偏光方向を前記特定の偏光方向に制限する偏光子と、
を含む前記(21)〜(34)の何れか1項に記載の固体撮像装置。
(36)
前記複数の受光部は、入射光の色彩を再構成するために必要となる波長成分ごとの前記受光部が所定の配列に従って二次元格子状に配列した構成を備える前記(23)〜(35)の何れか1項に記載の固体撮像装置。
(37)
前記所定の配列は、ベイヤー配列、X−Trans(登録商標)型配列、及び、クワッドベイヤー配列のうちの何れかである前記(36)に記載の固体撮像装置。
(38)
前記複数の受光部それぞれに設けられて前記波長成分ごとの前記光を透過する波長選択素子をさらに備える前記(36)又は(37)に記載の固体撮像装置。
(39)
前記画素ブロックそれぞれは、入射光の偏光情報を再構成するために必要となる偏光子の数と、前記入射光の色彩を再構成するために必要となる波長成分の数とを乗算した数の前記受光部を含む前記(36)〜(38)の何れか1項に記載の固体撮像装置。
(40)
各々が特定の偏光方向の光を受光して受光量に応じた電荷を発生させる複数の受光部と、
前記複数の受光部のうちの少なくとも1つで発生した電荷に基づく光電流を検出する検出部と、
前記複数の受光部それぞれで発生した電荷に基づく電圧信号を生成する生成部と、
前記検出部による前記光電流の検出結果に基づいて、前記複数の受光部のうちの少なくとも2つで発生した電荷それぞれに基づく電圧信号を前記生成部に生成させる駆動回路と、
を備える撮像装置。
110 撮像レンズ
120 記録部
130 制御部
139、209 信号線
150、250 統合部
200 固体撮像装置
201 受光チップ
202 検出チップ
211 駆動回路
212 信号処理部
213 アービタ
220 カラムADC
230 ADC
300 画素アレイ部
310、310A、310B、310C、310D、510、610、710、810、910、1010、1110、1210、1310、1410 画素ブロック
314R、314Gr、314Gb、314B カラーフィルタ
320 画素信号生成部
321 リセットトランジスタ
322 増幅トランジスタ
323 選択トランジスタ
324 浮遊拡散層
330、330R、330G、330Gr、330Gb、330B、630H、630H1、630H2、630V、630V1、630V2、630S 受光部
330G/B/R 画素エリア
331 転送トランジスタ
332 OFGトランジスタ
333 光電変換素子
400、400R、400Gr、400Gb、400B アドレスイベント検出部
410 電流電圧変換部
411、413 N型トランジスタ
412 P型トランジスタ
420 バッファ
430 減算器
431、433 コンデンサ
432 インバータ
434 スイッチ
440 量子化器
441 コンパレータ
450 転送部
614H、614H1、614H2、614V、614V1、614V2、614S、914H1、914H2、914V1、914V2 偏光子
820A、1220A 単位パターン
830H1、830H2、830V1、830V2、1030R、1030Gr、1030Gb、1030B、1230H1、1230H2、1230V1、1230V2、1330R1、1330R2、1330G1〜1330G5、1330B1、1330B2 画素グループ
840H1、840H2、840V1、840V2、1040A、1240H1、1240H2、1240V1、1240V2 偏光子群
1020R、1020Gr、1020Gb、1020B、1320R、1320G、1320B カラーフィルタ群
SIG 画素信号
VSL 垂直信号線
Claims (20)
- 各々が特定波長の光を受光して受光量に応じた電荷を発生させる複数の受光部と、
前記複数の受光部のうちの少なくとも1つで発生した電荷に基づく光電流を検出する検出部と、
前記複数の受光部それぞれで発生した電荷に基づく電圧信号を生成する生成部と、
前記検出部による前記光電流の検出結果に基づいて、前記複数の受光部のうちの少なくとも2つで発生した電荷それぞれに基づく電圧信号を前記生成部に生成させる駆動回路と、
を備える固体撮像装置。 - 前記検出部は、前記光電流の電流値又は当該電流値の変化量を検出する請求項1に記載の固体撮像装置。
- 前記複数の受光部は、少なくとも2つの受光部ごとの画素ブロックにグループ化され、
前記検出部は、前記画素ブロックごとに、当該画素ブロックに属する受光部のうちの前記少なくとも1つで発生した前記電荷に基づく前記光電流を検出し、
前記駆動回路は、前記検出部による前記画素ブロックごとの前記光電流の前記検出結果に基づいて、前記画素ブロックごとに、当該画素ブロックに属する前記受光部で発生した前記電荷それぞれに基づく前記電圧信号を前記生成部に生成させる
請求項1に記載の固体撮像装置。 - 前記画素ブロックそれぞれに属する前記受光部は、互いに異なる前記特定波長の光を受光する請求項3に記載の固体撮像装置。
- 前記画素ブロックそれぞれは、入射光の色彩を再構成するために必要となる波長成分をそれぞれ受光する受光部の組合せで構成されている請求項4に記載の固体撮像装置。
- 前記画素ブロックそれぞれは、赤色の波長成分を受光する第1受光部と、緑色の波長成分を受光する第2受光部と、青色の波長成分を受光する第3受光部とを含む請求項3に記載の固体撮像装置。
- 前記検出部は、前記複数の受光部ごとに設けられ、
前記画素ブロックごとに、当該画素ブロックに属する前記受光部に対して設けられた複数の前記検出部から出力された前記検出結果を統合する統合部をさらに備える
請求項3に記載の固体撮像装置。 - 前記検出部は、前記画素ブロックごとに設けられ、
前記画素ブロックごとに、当該画素ブロックそれぞれに属する前記受光部それぞれから出力された前記光電流を統合する統合部をさらに備え、
前記画素ブロックごとの前記検出部は、前記統合部を介して入力された前記光電流を検出する
請求項3に記載の固体撮像装置。 - 前記複数の受光部は、所定の配列に従って二次元格子状に配列する請求項3に記載の固体撮像装置。
- 前記所定の配列は、ベイヤー配列、X−Trans(登録商標)型配列、及び、クワッドベイヤー配列のうちの何れかである請求項9に記載の固体撮像装置。
- 前記所定の配列は、入射光の色彩を再構成するために必要となる波長成分ごとの前記受光部が所定の配置で組み合わされてなる基本パターンが繰返し配置された構成を備え、
前記複数の受光部は、前記基本パターンごとに前記画素ブロックにグループ化されている
請求項9に記載の固体撮像装置。 - 前記複数の受光部それぞれは、
前記特定波長の光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記光電流として前記検出部へ供給する第1トランジスタと、
を含む請求項1に記載の固体撮像装置。 - 前記複数の受光部それぞれは、前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記生成部へ転送する第2トランジスタをさらに含み、
前記生成部は、
前記複数の受光部のうちの何れかから前記第2トランジスタを介して転送された前記電荷を蓄積する浮遊拡散層と、
前記駆動回路からの制御に従い、前記浮遊拡散層に蓄積されている前記電荷を放出する第3トランジスタと、
前記浮遊拡散層に蓄積された前記電荷の電荷量に応じた前記電圧信号を所定の信号線に出現させる第4トランジスタと、
前記駆動回路からの制御に従い、前記第4トランジスタと前記所定の信号線との接続を切り替える第5トランジスタと、
を含む
請求項12に記載の固体撮像装置。 - 前記複数の受光部それぞれは、
前記特定波長の光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記光電流として前記検出部へ供給する第1トランジスタと、
前記駆動回路からの制御に従い、前記光電変換素子に発生した電荷を前記生成部へ転送する第2トランジスタをさらに含み、
前記生成部は、
前記複数の受光部のうちの何れかから前記第2トランジスタを介して転送された前記電荷を蓄積する浮遊拡散層と、
前記駆動回路からの制御に従い、前記浮遊拡散層に蓄積されている前記電荷を放出する第3トランジスタと、
前記浮遊拡散層に蓄積された前記電荷の電荷量に応じた前記電圧信号を所定の信号線に出現させる第4トランジスタと、
前記駆動回路からの制御に従い、前記第4トランジスタと前記所定の信号線との接続を切り替える第5トランジスタと、
を含み、
前記検出部は、前記光電流に基づいてイベントの発火の有無を検出し、
前記駆動回路は、前記複数の受光部それぞれの前記第1トランジスタをオン状態に制御している期間中に前記検出部が前記イベントの発火を検出した場合、前記イベントの発火が検出された画素ブロックに属する前記受光部それぞれの前記第1トランジスタをオフ状態に制御し、前記第5トランジスタをオン状態に制御するとともに、前記第3トランジスタを一定期間オン状態とし、その後、当該画素ブロックに属する受光部それぞれの第2トランジスタを所定の順番に従って一定期間オン状態に制御する
請求項3に記載の固体撮像装置。 - 前記所定の信号線に出現した前記電圧信号を電圧値に応じたデジタル値に変換する変換部をさらに備える請求項13に記載の固体撮像装置。
- 前記複数の受光部それぞれは、
前記特定波長の光を受光して前記受光量に応じた前記電荷を発生させる光電変換素子と、
前記光電変換素子に入射する前記光の波長を前記特定波長に制限する波長選択素子と、
を含む請求項1に記載の固体撮像装置。 - 前記複数の受光部それぞれに設けられた偏光子をさらに備える請求項1に記載の固体撮像装置。
- 前記複数の受光部それぞれに設けられた偏光子をさらに備え、
前記画素ブロックそれぞれに属する少なくとも2つの前記受光部に対してそれぞれ設けられた前記偏光子は、偏光軸の光軸を中心とした回転角が互いに異なる
請求項3に記載の固体撮像装置。 - 前記画素ブロックそれぞれは、入射光の色彩を再構成するために必要となる波長成分の数と、前記偏光軸の前記光軸を中心とした前記回転角が互いに異なる前記偏光子の数とを乗算した数の前記受光部を含む請求項18に記載の固体撮像装置。
- 各々が特定波長の光を受光して受光量に応じた電荷を発生させる複数の受光部と、
前記複数の受光部のうちの少なくとも1つで発生した電荷に基づく光電流を検出する検出部と、
前記複数の受光部それぞれで発生した電荷に基づく電圧信号を生成する生成部と、
前記検出部による前記光電流の検出結果に基づいて、前記複数の受光部のうちの少なくとも2つで発生した電荷それぞれに基づく電圧信号を前記生成部に生成させる駆動回路と、
を備える撮像装置。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018187784A JP7176917B2 (ja) | 2018-10-02 | 2018-10-02 | 固体撮像装置及び撮像装置 |
TW108124997A TWI825123B (zh) | 2018-10-02 | 2019-07-16 | 固態影像擷取裝置及影像擷取裝置 |
KR1020217007347A KR102712197B1 (ko) | 2018-10-02 | 2019-09-11 | 이벤트 구동 컬러 촬상 장치 |
US17/276,426 US11451751B2 (en) | 2018-10-02 | 2019-09-11 | Solid-state image pickup device and image pickup device |
PCT/JP2019/035649 WO2020071068A1 (en) | 2018-10-02 | 2019-09-11 | Event driven colour image pickup |
CN201980062026.XA CN112740653A (zh) | 2018-10-02 | 2019-09-11 | 事件驱动的彩色图像拾取 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018187784A JP7176917B2 (ja) | 2018-10-02 | 2018-10-02 | 固体撮像装置及び撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020057949A true JP2020057949A (ja) | 2020-04-09 |
JP7176917B2 JP7176917B2 (ja) | 2022-11-22 |
Family
ID=68073109
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018187784A Active JP7176917B2 (ja) | 2018-10-02 | 2018-10-02 | 固体撮像装置及び撮像装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11451751B2 (ja) |
JP (1) | JP7176917B2 (ja) |
KR (1) | KR102712197B1 (ja) |
CN (1) | CN112740653A (ja) |
TW (1) | TWI825123B (ja) |
WO (1) | WO2020071068A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022181099A1 (ja) * | 2021-02-25 | 2022-09-01 | ソニーセミコンダクタソリューションズ株式会社 | 固体撮像素子、および、撮像装置 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4405747A1 (en) * | 2021-11-15 | 2024-07-31 | Ramot at Tel-Aviv University Ltd. | Dynamic vision sensor color camera |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11231058A (ja) * | 1997-07-04 | 1999-08-27 | Integrated Detector & Electronic As | センサーの中のアクテイブなピクセルにより放出されるデータ信号を読み取るための方法およびシステム |
US20140009648A1 (en) * | 2012-07-03 | 2014-01-09 | Tae Chan Kim | Image sensor chip, method of operating the same, and system including the same |
JP2015041793A (ja) * | 2013-08-20 | 2015-03-02 | オリンパス株式会社 | 撮像装置 |
WO2017013806A1 (ja) * | 2015-07-23 | 2017-01-26 | オリンパス株式会社 | 固体撮像装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4529834B2 (ja) * | 2005-07-29 | 2010-08-25 | ソニー株式会社 | 固体撮像装置、固体撮像装置の駆動方法および撮像装置 |
US8411146B2 (en) * | 2009-09-04 | 2013-04-02 | Lockheed Martin Corporation | Single camera color and infrared polarimetric imaging |
JP5585232B2 (ja) * | 2010-06-18 | 2014-09-10 | ソニー株式会社 | 固体撮像装置、電子機器 |
JP2012195734A (ja) * | 2011-03-16 | 2012-10-11 | Sony Corp | 固体撮像装置、撮像装置、電子機器、及び、固体撮像装置の駆動方法 |
KR101724513B1 (ko) * | 2011-12-19 | 2017-04-07 | 유니베르시태트 취리히 | 포토어레이, 특히 시간 의존성 이미지 데이터의 비동기성 검출과 샘플링된 밝기의 감지를 동시 실시하기 위한 포토어레이 |
KR102009192B1 (ko) * | 2013-02-05 | 2019-08-09 | 삼성전자주식회사 | 이미지 센서의 단위 픽셀 및 이를 포함하는 이미지 센서 |
CN105706439B (zh) | 2013-09-16 | 2019-06-28 | 超龙凯姆公司 | 动态、单个光电二极管像素电路及其操作方法 |
US20160093273A1 (en) | 2014-09-30 | 2016-03-31 | Samsung Electronics Co., Ltd. | Dynamic vision sensor with shared pixels and time division multiplexing for higher spatial resolution and better linear separable data |
KR102331920B1 (ko) | 2014-12-26 | 2021-11-29 | 삼성전자주식회사 | 동작 정보, 조도 정보 및 근접 정보를 위한 센서 및 그 센서를 이용하는 프로세서의 동작 방법 |
KR102523136B1 (ko) * | 2015-09-01 | 2023-04-19 | 삼성전자주식회사 | 이벤트 기반 센서 및 이벤트 기반 센서의 픽셀 |
CN108574793B (zh) * | 2017-03-08 | 2022-05-10 | 三星电子株式会社 | 被配置为重新生成时间戳的图像处理设备及包括其在内的电子设备 |
-
2018
- 2018-10-02 JP JP2018187784A patent/JP7176917B2/ja active Active
-
2019
- 2019-07-16 TW TW108124997A patent/TWI825123B/zh active
- 2019-09-11 WO PCT/JP2019/035649 patent/WO2020071068A1/en active Application Filing
- 2019-09-11 CN CN201980062026.XA patent/CN112740653A/zh active Pending
- 2019-09-11 US US17/276,426 patent/US11451751B2/en active Active
- 2019-09-11 KR KR1020217007347A patent/KR102712197B1/ko active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11231058A (ja) * | 1997-07-04 | 1999-08-27 | Integrated Detector & Electronic As | センサーの中のアクテイブなピクセルにより放出されるデータ信号を読み取るための方法およびシステム |
US20140009648A1 (en) * | 2012-07-03 | 2014-01-09 | Tae Chan Kim | Image sensor chip, method of operating the same, and system including the same |
JP2015041793A (ja) * | 2013-08-20 | 2015-03-02 | オリンパス株式会社 | 撮像装置 |
WO2017013806A1 (ja) * | 2015-07-23 | 2017-01-26 | オリンパス株式会社 | 固体撮像装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022181099A1 (ja) * | 2021-02-25 | 2022-09-01 | ソニーセミコンダクタソリューションズ株式会社 | 固体撮像素子、および、撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
US20220038662A1 (en) | 2022-02-03 |
WO2020071068A1 (en) | 2020-04-09 |
US11451751B2 (en) | 2022-09-20 |
CN112740653A (zh) | 2021-04-30 |
JP7176917B2 (ja) | 2022-11-22 |
TWI825123B (zh) | 2023-12-11 |
KR102712197B1 (ko) | 2024-10-04 |
TW202015228A (zh) | 2020-04-16 |
KR20210066803A (ko) | 2021-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9967472B2 (en) | Image sensor combining high dynamic range techniques | |
KR102612718B1 (ko) | 복수의 슈퍼-픽셀(super-pixel)들을 포함하는 이미지 센서 | |
US8541731B2 (en) | Solid-state image sensor | |
TWI586169B (zh) | 實施一堆疊晶片高動態範圍影像感測器的方法與系統 | |
TW200526030A (en) | Device and method for image sensing | |
JP2006340358A (ja) | ピクセルアレイの読み出しノイズを低減するためのシステム及び方法 | |
TWI533700B (zh) | 用於讀取具有轉移閘極升壓之影像感測器 | |
CN112740661A (zh) | 固体成像器件、固体成像器件的控制方法以及电子设备 | |
US11665444B2 (en) | Image sensor, pixel, and method of operating the pixel | |
WO2013016688A1 (en) | Color imaging using time-multiplexed light sources and monochrome image sensors with multi-storage-node pixels | |
JP2023076773A (ja) | 物体認識システム及び電子機器 | |
WO2018012068A1 (ja) | 固体撮像装置、固体撮像装置の駆動方法、及び、電子機器 | |
KR102712197B1 (ko) | 이벤트 구동 컬러 촬상 장치 | |
US12028628B2 (en) | Image sensor including pixel including internal capacitor | |
TWI822641B (zh) | 光感測裝置 | |
KR20120122165A (ko) | 광역 동적범위를 가지는 이미지 센서, 그 화소 회로 및 구동 방법 | |
US20240121526A1 (en) | Image sensor, method of operating the image sensor, and image processing device | |
US10827139B2 (en) | Multiple window, multiple mode image sensor | |
US20170006206A1 (en) | Image sensing device | |
JP2015008343A (ja) | 撮像装置および撮像画像の形成方法 | |
CN110557587B (zh) | 图像传感器和操作该图像传感器的方法 | |
KR102060194B1 (ko) | 이미지 센싱 장치 및 이의 동작 방법 | |
EP4307703A1 (en) | Image sensor and electronic device including the same | |
US20240363654A1 (en) | Pixel, image sensor and operating method of pixel | |
CN211457239U (zh) | 成像像素 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210823 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220809 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221003 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221018 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7176917 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |