JP2021524705A - 時間に依存した画像データを検出するためのセルのアレイ - Google Patents
時間に依存した画像データを検出するためのセルのアレイ Download PDFInfo
- Publication number
- JP2021524705A JP2021524705A JP2021500685A JP2021500685A JP2021524705A JP 2021524705 A JP2021524705 A JP 2021524705A JP 2021500685 A JP2021500685 A JP 2021500685A JP 2021500685 A JP2021500685 A JP 2021500685A JP 2021524705 A JP2021524705 A JP 2021524705A
- Authority
- JP
- Japan
- Prior art keywords
- photosensor
- processing unit
- pixel
- pixel information
- group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000036962 time dependent Effects 0.000 title claims abstract description 4
- 238000003860 storage Methods 0.000 claims description 64
- 230000015654 memory Effects 0.000 claims description 61
- 230000000875 corresponding effect Effects 0.000 claims description 28
- 230000008859 change Effects 0.000 claims description 14
- 230000002596 correlated effect Effects 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 2
- 230000005540 biological transmission Effects 0.000 abstract 1
- 238000001914 filtration Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 13
- 239000011159 matrix material Substances 0.000 description 8
- 230000002123 temporal effect Effects 0.000 description 4
- 238000003491 array Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000007935 neutral effect Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000000034 method Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000001010 compromised effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000009024 positive feedback mechanism Effects 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
- H01L27/14643—Photodiode arrays; MOS imagers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
- H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Power Engineering (AREA)
- General Physics & Mathematics (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- Electromagnetism (AREA)
- Computer Hardware Design (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Image Analysis (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Image Processing (AREA)
Abstract
Description
1.デバイスセル内に記憶された、最小しきい値数N未満のイベントが存するならば、これらのイベントは、ノイズイベントとみなされ、フィルタリングし除かれる。ここで、Nは、1より大きく、デバイスセル内の画素の総数Pより小さい。(第1の任意選択の条件)
2.デバイスセル内に記憶された、最大しきい値数Mより多いイベントが存するならば、これらのイベントは、空間的に冗長なイベントと考えられ、フィルタリングし除かれる。ここで、Mは、Nより大きく、デバイスセル内の画素の総数Pより小さい。(第2の任意選択の条件)
12 画素のグループ
13 (1次)処理ユニット
2 画素
3 相関論理
4 記憶メモリ
5 画素動作論理
6 2次記憶メモリ
7 セルのセット
8 2次相関論理
Claims (11)
- 時間に依存した画像データを検出するためのフォトアレイであって、多数のデバイスセル(1)のアレイを含み、各デバイスセル(1)は、
フォトセンサ(2)のグループ(12)であって、各フォトセンサ(2)は、前記フォトセンサ(2)においての光強度に依存するアナログセンサ信号を生成するように構成される、フォトセンサ(2)のグループ(12)と、
各フォトセンサ(2)に対して、前記フォトセンサ(2)により生成されたアナログセンサ信号を、前記フォトセンサ(2)から生じるデジタル画素情報へと変換するように構成される画素コード化回路と、
処理ユニット(13)であって、フォトセンサ(2)の前記グループ(12)のフォトセンサ(2)から生じる前記画素情報を相関させるように、ならびに、読み取られるべき画素情報を前記セル(1)が含むことを示す要求信号、および/または、前記セル(1)内に含まれる画素情報が送信されることを可能とするために処理ユニット(13)内で利用される通過信号を結果として作り出すように構成される相関論理(3)を含む、処理ユニット(13)と
を含む、フォトアレイ。 - フォトセンサ(2)の前記グループ(12)の2つ以上のフォトセンサ(2)が、互いに隣接して配置構成されることを特徴とする、請求項1に記載のフォトアレイ。
- 多数のデバイスセル(1)が、セル(1)の多数のセット(7)へと分けられること、ならびに、セル(1)の各セット(7)が、セル(1)の前記セット(7)の端部に配置される2次処理ユニット(8)をさらに含み、その2次処理ユニット(8)が、前記セル(1)のうちの選択されたセルのフォトセンサ(2)の前記グループ(12)のフォトセンサ(2)から生じる前記画素情報を相関させ、読み取られるべき画素情報を前記選択されたセルが含むことを示す要求信号、および/または、前記選択されたセル内に含まれる画素情報が送信されることを可能とするために2次処理ユニット(8)内で利用される少なくとも1つの通過信号を結果として作り出すように構成される2次相関論理(81、82)を含むことを特徴とする、請求項1または2に記載のフォトアレイ。
- 前記相関論理(3)および/または前記2次相関論理(81、82)が、組合せ論理により実現されることを特徴とする、請求項1から3のいずれか一項に記載のフォトアレイ。
- 前記相関論理(3)および/または前記2次相関論理(81、82)が、時空間的相関論理であることを特徴とする、請求項1から4のいずれか一項に記載のフォトアレイ。
- 前記相関論理(3)および/または前記2次相関論理(81、82)が、前記画素情報の相関結果が、最小しきい値数(N)以上である、および/または、最大しきい値数(M)以下であるとき、要求信号および/または通過信号を作り出すように構成されることを特徴とする、請求項1から5のいずれか一項に記載のフォトアレイ。
- 前記処理ユニット(13)が、フォトセンサ(2)の前記グループ(12)の各フォトセンサ(2)に対して、前記グループ(12)の前記対応するフォトセンサ(2)から生じる画素情報を受信し一時的に記憶するように、ならびに、前記対応するフォトセンサ(2)の前記画素コード化回路をリセットおよび/またはリスタートするように構成される画素動作論理(5)を含むことを特徴とする、請求項1から6のいずれか一項に記載のフォトアレイ。
- 前記処理ユニット(13)が、フォトセンサ(2)のグループ(12)の各フォトセンサ(2)に対して、前記フォトセンサ(2)から生じる前記画素情報を記憶するように構成されるイベント記憶メモリ(4)を含む、および/または、
前記2次処理ユニット(8)が、フォトセンサ(2)のグループ(12)の各フォトセンサ(2)に対して、前記フォトセンサ(2)から生じる前記画素情報を記憶するように構成される2次イベント記憶メモリ(6)を含む
ことを特徴とする、請求項1から7のいずれか一項に記載のフォトアレイ。 - 前記処理ユニット(13)が、フォトセンサ(2)のグループ(12)の各フォトセンサ(2)に対して、前記フォトセンサ(2)から生じる前記画素情報を記憶するように構成される記憶メモリ(4)を含み、前記2次処理ユニット(8)が、フォトセンサ(2)のグループ(12)の各フォトセンサ(2)に対して、前記フォトセンサ(2)から生じる前記画素情報を記憶するように構成される2次記憶メモリ(6)を含み、前記2次記憶メモリ(6)が、前記記憶メモリ(4)から前記画素情報を受信するように構成されることを特徴とする、請求項8に記載のフォトアレイ。
- 前記処理ユニット(13)および/または前記2次処理ユニット(8)が、選択信号を受信するように、および、前記選択信号に応答して、前記通過信号に、または、前記少なくとも1つの通過信号に依存して、前記セル(1)または前記選択されたセルが含む、読み取られるべき画素情報を並列方式で送信するように構成されることを特徴とする、請求項1から9のいずれか一項に記載のフォトアレイ。
- 前記画素コード化回路が、前記フォトセンサ(2)により生成されたアナログセンサ信号を、前記フォトセンサ(2)により生成されたセンサ信号の変化を示すデジタル画素情報へと変換するように構成される変化検出回路であることを特徴とする、請求項1から10のいずれか一項に記載のフォトアレイ。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP18182942.5 | 2018-07-11 | ||
EP18182942.5A EP3595295B1 (en) | 2018-07-11 | 2018-07-11 | Array of cells for detecting time-dependent image data |
PCT/EP2019/068044 WO2020011651A1 (en) | 2018-07-11 | 2019-07-04 | Array of cells for detecting time-dependent image data |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021524705A true JP2021524705A (ja) | 2021-09-13 |
JP7160410B2 JP7160410B2 (ja) | 2022-10-25 |
Family
ID=63165137
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021500685A Active JP7160410B2 (ja) | 2018-07-11 | 2019-07-04 | 時間に依存した画像データを検出するためのセルのアレイ |
Country Status (6)
Country | Link |
---|---|
US (1) | US11616923B2 (ja) |
EP (1) | EP3595295B1 (ja) |
JP (1) | JP7160410B2 (ja) |
KR (2) | KR20210018920A (ja) |
CN (1) | CN112400313B (ja) |
WO (1) | WO2020011651A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2971228A1 (en) * | 2013-12-16 | 2015-06-25 | Inbubbles Inc. | Space time region based communications |
EP4315833A1 (en) * | 2021-03-26 | 2024-02-07 | Sony Semiconductor Solutions Corporation | Pixel circuit and solid-state imaging device |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000316127A (ja) * | 1999-05-06 | 2000-11-14 | Nec Corp | 固体撮像装置およびその駆動方法 |
JP2010510732A (ja) * | 2006-11-23 | 2010-04-02 | エーアイティー オーストリアン インスティテュート オブ テクノロジー ゲゼルシャフト ミット ベシュレンクテル ハフツング | 電子形式の画像を生成する方法、画像生成用画像センサのための画像素子ならびに画像センサ |
JP2011171806A (ja) * | 2010-02-16 | 2011-09-01 | Shimadzu Corp | 高速度撮影装置 |
US20140009650A1 (en) * | 2012-07-05 | 2014-01-09 | Tae Chan Kim | Image sensor chip, method of operating the same, and system including the image sensor chip |
WO2019097797A1 (ja) * | 2017-11-14 | 2019-05-23 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置、撮像方法および撮像システム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7050501B2 (en) * | 2002-07-16 | 2006-05-23 | Broadcom Corporation | Digital noise reduction techniques |
EP1958433B1 (en) | 2005-06-03 | 2018-06-27 | Universität Zürich | Photoarray for detecting time-dependent image data |
JP2007166581A (ja) * | 2005-11-16 | 2007-06-28 | Matsushita Electric Ind Co Ltd | 高速撮影用固体撮像装置 |
DE102007026445A1 (de) | 2007-06-06 | 2008-12-11 | Robert Bosch Gmbh | Mikromechanisches Bauelement und Verfahren zur Herstellung eines mikromechanischen Bauelements |
KR101880998B1 (ko) * | 2011-10-14 | 2018-07-24 | 삼성전자주식회사 | 이벤트 기반 비전 센서를 이용한 동작 인식 장치 및 방법 |
US20140047512A1 (en) * | 2012-08-02 | 2014-02-13 | Ariff Sidi | System and method for monitoring online activity on electronic devices |
WO2014055280A2 (en) * | 2012-10-05 | 2014-04-10 | Rambus Inc. | Image sensor architecture with multi-bit sampling |
KR20140047494A (ko) | 2012-10-12 | 2014-04-22 | 삼성전자주식회사 | 서브픽셀, 이를 포함하는 이미지 센서, 및 이미지 센싱 시스템 |
EP2887009A1 (en) * | 2013-12-23 | 2015-06-24 | Universität Zürich | Method for reconstructing a surface using spatially structured light and a dynamic vision sensor |
CN104008377A (zh) * | 2014-06-07 | 2014-08-27 | 北京联合大学 | 基于时空关联的地面交通标志实时检测识别方法 |
US20160093273A1 (en) * | 2014-09-30 | 2016-03-31 | Samsung Electronics Co., Ltd. | Dynamic vision sensor with shared pixels and time division multiplexing for higher spatial resolution and better linear separable data |
KR102402678B1 (ko) | 2015-03-18 | 2022-05-26 | 삼성전자주식회사 | 이벤트 기반 센서 및 프로세서의 동작 방법 |
US20170357644A1 (en) * | 2016-06-12 | 2017-12-14 | Apple Inc. | Notable moments in a collection of digital assets |
KR102662029B1 (ko) * | 2016-08-01 | 2024-05-03 | 삼성전자주식회사 | 이벤트 신호 처리 방법 및 그 방법을 수행하는 이벤트 기반 센서 |
US10484628B2 (en) * | 2016-10-21 | 2019-11-19 | The Johns Hopkins University | Flexible pixel-wise exposure control and readout |
US10757384B2 (en) * | 2017-09-28 | 2020-08-25 | Gopro, Inc. | Desaturation control |
US11416759B2 (en) * | 2018-05-24 | 2022-08-16 | Samsung Electronics Co., Ltd. | Event-based sensor that filters for flicker |
GB201908517D0 (en) * | 2019-06-13 | 2019-07-31 | Spectral Edge Ltd | 3D digital imagenoise reduction system and method |
-
2018
- 2018-07-11 EP EP18182942.5A patent/EP3595295B1/en active Active
-
2019
- 2019-07-04 KR KR1020217000493A patent/KR20210018920A/ko not_active IP Right Cessation
- 2019-07-04 WO PCT/EP2019/068044 patent/WO2020011651A1/en active Application Filing
- 2019-07-04 KR KR1020237015537A patent/KR20230071193A/ko not_active Application Discontinuation
- 2019-07-04 JP JP2021500685A patent/JP7160410B2/ja active Active
- 2019-07-04 US US17/259,387 patent/US11616923B2/en active Active
- 2019-07-04 CN CN201980046619.7A patent/CN112400313B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000316127A (ja) * | 1999-05-06 | 2000-11-14 | Nec Corp | 固体撮像装置およびその駆動方法 |
JP2010510732A (ja) * | 2006-11-23 | 2010-04-02 | エーアイティー オーストリアン インスティテュート オブ テクノロジー ゲゼルシャフト ミット ベシュレンクテル ハフツング | 電子形式の画像を生成する方法、画像生成用画像センサのための画像素子ならびに画像センサ |
JP2011171806A (ja) * | 2010-02-16 | 2011-09-01 | Shimadzu Corp | 高速度撮影装置 |
US20140009650A1 (en) * | 2012-07-05 | 2014-01-09 | Tae Chan Kim | Image sensor chip, method of operating the same, and system including the image sensor chip |
WO2019097797A1 (ja) * | 2017-11-14 | 2019-05-23 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置、撮像方法および撮像システム |
Also Published As
Publication number | Publication date |
---|---|
KR20230071193A (ko) | 2023-05-23 |
CN112400313B (zh) | 2024-02-13 |
KR20210018920A (ko) | 2021-02-18 |
EP3595295B1 (en) | 2024-04-17 |
CN112400313A (zh) | 2021-02-23 |
JP7160410B2 (ja) | 2022-10-25 |
US20210281779A1 (en) | 2021-09-09 |
WO2020011651A1 (en) | 2020-01-16 |
US11616923B2 (en) | 2023-03-28 |
EP3595295A1 (en) | 2020-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108574809B (zh) | 像素、像素驱动电路以及包括其的视觉传感器 | |
US7525586B2 (en) | Image sensor and method with multiple scanning modes | |
JP7405328B2 (ja) | 画像センサー | |
KR102640070B1 (ko) | 이벤트 구동 센서들을 위한 픽셀 크기 축소 방법 | |
US20230085570A1 (en) | Event array readout control of event-based vision sensing | |
JP7160410B2 (ja) | 時間に依存した画像データを検出するためのセルのアレイ | |
CN113812142A (zh) | 使用接通/关断事件和灰度检测斜坡的基于事件的视觉传感器 | |
US11343454B2 (en) | Imaging systems and methods for performing pixel binning and variable integration for analog domain regional feature extraction | |
US20190289233A1 (en) | Solid-state imaging device and imaging system | |
EP4340353A1 (en) | Pixel acquisition circuits and image sensor | |
EP3643058B1 (en) | Multi-spectral imaging system and method thereof | |
US20200014871A1 (en) | Imaging device, imaging system, and moving body | |
EP3994495A1 (en) | Time-of-flight sensing circuitry and method for operating a time-of-flight sensing circuitry | |
JP2021082934A (ja) | 撮像装置及び撮像システム | |
KR101444014B1 (ko) | 이미지 센서의 구동 회로 및 구동 방법 | |
US11871131B2 (en) | Foveal compressive upsampling | |
US11218661B2 (en) | Signal processing apparatus, photoelectric conversion apparatus, imaging apparatus, and moving body | |
EP4303531A1 (en) | Low-power asynchronous solar sensor | |
JPH11298797A (ja) | 画像検出装置 | |
Hamamoto et al. | Image compression sensor based on column parallel architecture | |
Mustafa et al. | RTS noise reduction of CMOS image sensors using amplifier-selection pixels | |
WO2024097128A1 (en) | Neuromorphic programmable multiple pathways event-based sensors | |
WO2006049605A1 (en) | Image sensor and method with multiple scanning modes | |
KR20120004754A (ko) | 이미지 센서 및 그 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210305 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220301 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220530 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220906 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221005 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7160410 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |