RU2020112458A - Устройство и способ формирования изображения и устройство и способ обработки изображения - Google Patents

Устройство и способ формирования изображения и устройство и способ обработки изображения Download PDF

Info

Publication number
RU2020112458A
RU2020112458A RU2020112458A RU2020112458A RU2020112458A RU 2020112458 A RU2020112458 A RU 2020112458A RU 2020112458 A RU2020112458 A RU 2020112458A RU 2020112458 A RU2020112458 A RU 2020112458A RU 2020112458 A RU2020112458 A RU 2020112458A
Authority
RU
Russia
Prior art keywords
output pixel
output
incidence
angle
incident light
Prior art date
Application number
RU2020112458A
Other languages
English (en)
Other versions
RU2020112458A3 (ru
Inventor
Акира МАЦУЙ
Ёситака МИЯТАНИ
Кодзи ЯМАМОТО
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2020112458A publication Critical patent/RU2020112458A/ru
Publication of RU2020112458A3 publication Critical patent/RU2020112458A3/ru

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/443—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading pixels from selected 2D regions of the array, e.g. for windowing or digital zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/441—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading contiguous pixels from selected rows or columns of the array, e.g. interlaced scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/815—Camera processing pipelines; Components thereof for controlling the resolution by using a single image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/445—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by skipping some contiguous pixels within the read portion of the array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Image Processing (AREA)

Claims (20)

1. Устройство формирования изображения, содержащее элемент формирования изображения, включающий в себя множество пиксельных блоков вывода, выполненных с возможностью приема падающего светового пучка, входящего без прохождения либо через линзу, формирующую изображение, либо через точечное отверстие, и каждый из них выполнен с возможностью вывода одного сигнала обнаружения, указывающего выходное значение пикселя, модулированное углом падения падающего светового пучка; и блок управления считыванием для выборочного считывания выходного значения пикселя каждого из пиксельных блоков вывода элемента формирования изображения.
2. Устройство формирования изображения по п.1, в котором блок управления считыванием выполнен с возможностью выбора пиксельных блоков вывода из множества пиксельных блоков вывода элемента формирования изображения и считывания выходных значений пикселей выбранных пиксельных блоков вывода.
3. Устройство формирования изображения по п.2, в котором блок управления считыванием выполнен с возможностью выбора пиксельных блоков вывода в произвольных позициях из множества пиксельных блоков вывода элемента формирования изображения.
4. Устройство формирования изображения по п.3, в котором блок управления считыванием выполнен с возможностью выбора пиксельных блоков вывода так, что в отношении направленности угла падения выходного значения пикселя, указывающего направленность по отношению к углу падения падающего светового пучка относительно предмета, при этом все выбранные пиксельные блоки вывода имеют направленность угла падения, эквивалентную направленности угла падения всех пиксельных блоков вывода элемента формирования изображения.
5. Устройство формирования изображения по п.2, в котором блок управления считыванием выполнен с возможностью выбора пиксельных блоков вывода в позиционной взаимосвязи, имеющей заданную регулярность, из множества пиксельных блоков вывода элемента формирования изображения.
6. Устройство формирования изображения по п.5, в котором в отношении направленности угла падения выходного пиксельного значения, указывающего направленность по отношению к углу падения падающего светового пучка относительно предмета, все из указанных пиксельных блоков вывода элемента формирования изображения в позиционной взаимосвязи, имеющей регулярность, выбранную с помощью блока управления считыванием, имеют направленность угла падения, эквивалентную направленности угла падения всех пиксельных блоков вывода элемента формирования изображения.
7. Устройство формирования изображения по п.2, в котором блок управления считыванием выполнен с возможностью выбора пиксельного блока вывода, сформированного в одной частичной области из области, в которой сформировано множество пиксельных блоков вывода элемента формирования изображения.
8. Устройство формирования изображения по п.7, в котором в отношении направленности угла падения выходного пиксельного значения, указывающего направленность по отношению к углу падения падающего светового пучка относительно предмета, все пиксельные блоки вывода элемента формирования изображения, сформированного в частичной области, выбранной блоком управления считыванием, имеют направленность угла падения, эквивалентную направленности угла падения всех пиксельных блоков вывода элемента формирования изображения.
9. Устройство формирования изображения по п.1, в котором блок управления считыванием выполнен с возможностью считывания выходных значений пикселей из всех пиксельных блоков вывода элемента формирования изображения и выбора некоторых из считанных выходных значений пикселей.
10. Устройство формирования изображения по п.1, в котором блок управления считыванием выполнен с возможностью считывания выходных значений пикселей всех пиксельных блоков вывода элемента формирования изображения и суммирования считанных выходных значений пикселей для каждого заданного числа.
11. Устройство формирования изображения по п.10, в котором блок управления считыванием выполнен с возможностью суммирования выходных значений пикселей пиксельных блоков вывода, причем выходные значения пикселей имеют взаимно схожие направленности углов падения, каждая из которых указывает направленность по отношению к углу падения падающего светового пучка относительно предмета.
12. Устройство формирования изображения по п.10, в котором блок управления считыванием выполнен с возможностью суммирования выходных значений пикселей пиксельных блоков вывода, расположенных близко друг к другу.
13. Устройство формирования изображения по п.1, в котором множество пиксельных блоков вывода имеет конфигурацию, в которой направленность угла падения выходного значения пикселя, указывающая направленность по отношению к углу падения падающего светового пучка относительно предмета, задается независимо для каждого из пиксельных блоков вывода.
14. Устройство формирования изображения по п.1, в котором множество пиксельных блоков вывода имеет конфигурацию, в которой направленность угла падения, указывающая направленность по отношению к углу падения падающего светового пучка относительно предмета, устанавливается независимо для каждого из пиксельных блоков вывода.
15. Устройство формирования изображения по п.1, в котором множество пиксельных блоков вывода имеет конфигурацию, в которой направленность угла падения выходного значения пикселя, указывающая направленность по отношению к углу падения падающего светового пучка относительно предмета, устанавливается независимо для каждого из пиксельных блоков вывода, делая фотодиоды (PD), которые вносят вклад в выходной сигнал, отличными друг от друга.
16. Способ формирования изображения, содержащий этапы, на которых формируют изображение предмета с помощью элемента формирования изображения, включающего в себя множество пиксельных блоков вывода, принимающих падающий световой пучок, входящий без прохождения либо через линзу, формирующую изображение, либо через точечное отверстие, и каждый из них выполнен с возможностью вывода одного сигнала обнаружения, указывающего выходное значение пикселя, модулированное углом падения падающего светового пучка; и выборочно считывают выходное значение пикселя каждого из пиксельных блоков вывода элемента формирования изображения.
17. Устройство обработки изображений, содержащее блок установки разрешения для установки разрешения и блок установки матрицы восстановления для установки матрицы восстановления, включающей в себя коэффициенты, используемые при восстановлении восстановленного изображения из выходных значений пикселей множества пиксельных блоков вывода, элемента формирования изображения, включающего в себя множество пиксельных блоков вывода, выполненных с возможностью приема падающего светового пучка, входящего без прохождения либо через линзу, формирующую изображение, либо точечное отверстие, и каждый из них выполнен с возможностью вывода одного сигнала обнаружения, указывающего выходное значение пикселя, модулированное углом падения падающего светового пучка, в зависимости от разрешения, установленного блоком установки разрешения.
18. Устройство обработки изображения по п.17, в котором блок установки разрешения выполнен с возможностью установки разрешения посредством выбора выходных значений пикселей некоторых пиксельных блоков вывода.
19. Устройство обработки изображения по п.17, в котором блок установки разрешения выполнен с возможностью установки разрешения посредством суммирования выходных значений пикселей пиксельных блоков вывода вместе для каждого заданного числа.
20. Способ обработки изображения, содержащий этапы, на которых устанавливают разрешение и устанавливают матрицу восстановления, включающую в себя коэффициенты, используемые при восстановлении восстановленного изображения из выходных значений пикселей множества пиксельных блоков вывода, элемента формирования изображения, включающего в себя множество пиксельных блоков вывода, выполненных с возможностью приема падающего светового пучка, входящего без прохождения либо через линзу, формирующую изображение, либо точечное отверстие, при этом каждый из них выполнен с возможностью вывода одного сигнала обнаружения, указывающего выходное значение пикселя, модулированное углом падения падающего светового пучка, в зависимости от установленного разрешения.
RU2020112458A 2017-10-19 2018-10-19 Устройство и способ формирования изображения и устройство и способ обработки изображения RU2020112458A (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017202891 2017-10-19
JP2017-202891 2017-10-19
PCT/JP2018/038948 WO2019078340A1 (ja) 2017-10-19 2018-10-19 撮像装置および方法、並びに、画像処理装置および方法

Publications (2)

Publication Number Publication Date
RU2020112458A true RU2020112458A (ru) 2021-09-27
RU2020112458A3 RU2020112458A3 (ru) 2022-03-23

Family

ID=66173329

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2020112458A RU2020112458A (ru) 2017-10-19 2018-10-19 Устройство и способ формирования изображения и устройство и способ обработки изображения

Country Status (6)

Country Link
US (2) US11290664B2 (ru)
EP (1) EP3700194A4 (ru)
JP (1) JP7259757B2 (ru)
CN (1) CN111201780B (ru)
RU (1) RU2020112458A (ru)
WO (1) WO2019078340A1 (ru)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111201771B (zh) * 2017-10-19 2022-08-30 索尼公司 电子仪器
US11350053B2 (en) 2017-11-30 2022-05-31 Sony Corporation Imaging device, method thereof, and imaging element
EP3780576A4 (en) * 2018-03-29 2021-04-21 Sony Corporation INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, PROGRAM AND INFORMATION PROCESSING SYSTEM
EP3674973A1 (en) * 2018-12-28 2020-07-01 Samsung Electronics Co., Ltd. Method and apparatus with liveness detection and object recognition
EP3965159A4 (en) 2019-06-04 2022-06-15 Sony Group Corporation IMAGING ELEMENT, SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING METHOD, PROGRAM AND IMAGING DEVICE
US20220400238A1 (en) * 2021-06-14 2022-12-15 Hyundai Mobis Co., Ltd. Light source control apparatus and lamp
WO2023139629A1 (ja) * 2022-01-18 2023-07-27 株式会社フジクラ イメージング装置、イメージング方法、及びイメージング装置の製造方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002165136A (ja) 2000-11-29 2002-06-07 Canon Inc 撮像装置及び撮像システム
US10148897B2 (en) * 2005-07-20 2018-12-04 Rearden, Llc Apparatus and method for capturing still images and video using coded lens imaging techniques
GB0510470D0 (en) * 2005-05-23 2005-06-29 Qinetiq Ltd Coded aperture imaging system
GB0615040D0 (en) * 2006-07-28 2006-09-06 Qinetiq Ltd Processing method for coded apperture sensor
JP5682473B2 (ja) * 2011-06-21 2015-03-11 コニカミノルタ株式会社 広角歪補正処理を有する画像処理方法、画像処理装置及び撮像装置
JP5775976B2 (ja) * 2012-11-22 2015-09-09 富士フイルム株式会社 撮像装置、デフォーカス量演算方法、及び撮像光学系
CN110058339B (zh) * 2013-03-05 2022-03-08 拉姆伯斯公司 用于高分辨率无透镜光学传感的具有奇对称的相位光栅
US9110240B2 (en) * 2013-03-05 2015-08-18 Rambus Inc. Phase gratings with odd symmetry for high-resolution lensed and lensless optical sensing
US10488535B2 (en) * 2013-03-12 2019-11-26 Rearden, Llc Apparatus and method for capturing still images and video using diffraction coded imaging techniques
JP6408372B2 (ja) * 2014-03-31 2018-10-17 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置及びその駆動制御方法、並びに、電子機器
US9761730B2 (en) 2014-10-29 2017-09-12 Semiconductor Energy Laboratory Co., Ltd. Imaging device and electronic device
US11178349B2 (en) 2015-01-29 2021-11-16 William Marsh Rice University Lensless imaging system using an image sensor with one or more attenuating layers
WO2018012492A1 (ja) 2016-07-13 2018-01-18 ソニー株式会社 撮像装置、撮像素子、および画像処理装置

Also Published As

Publication number Publication date
JPWO2019078340A1 (ja) 2020-11-05
JP7259757B2 (ja) 2023-04-18
US11290664B2 (en) 2022-03-29
US11659289B2 (en) 2023-05-23
CN111201780A (zh) 2020-05-26
WO2019078340A1 (ja) 2019-04-25
US20220182562A1 (en) 2022-06-09
US20200275038A1 (en) 2020-08-27
EP3700194A1 (en) 2020-08-26
CN111201780B (zh) 2022-09-16
EP3700194A4 (en) 2020-08-26
RU2020112458A3 (ru) 2022-03-23

Similar Documents

Publication Publication Date Title
RU2020112458A (ru) Устройство и способ формирования изображения и устройство и способ обработки изображения
US9881951B2 (en) Image sensors with phase detection pixels
JP5929553B2 (ja) 画像処理装置、撮像装置、画像処理方法およびプログラム
US9681057B2 (en) Exposure timing manipulation in a multi-lens camera
JP5463718B2 (ja) 撮像装置
US9338380B2 (en) Image processing methods for image sensors with phase detection pixels
JP5810173B2 (ja) 撮像装置および電子情報機器
CN107005640B (zh) 图像传感器单元和成像装置
US10419664B2 (en) Image sensors with phase detection pixels and a variable aperture
US20150381951A1 (en) Pixel arrangements for image sensors with phase detection pixels
US9787889B2 (en) Dynamic auto focus zones for auto focus pixel systems
JP2016082574A (ja) 複数ピクセルピッチ超解像技術
JP7192778B2 (ja) 撮像装置および方法、並びに、画像処理装置および方法
WO2015132831A1 (ja) 撮像装置
US11431898B2 (en) Signal processing device and imaging device
US20160156867A1 (en) Image sensor, image capturing apparatus, focus detection apparatus, image processing apparatus, and control method of image capturing apparatus
JP5820831B2 (ja) 撮像装置
JP6491539B2 (ja) 撮像装置及びその制御方法、システムならびにプログラム
KR20230111379A (ko) 이미지 센서 및 이미징 장치
KR20240091440A (ko) 서로 다른 크기의 마이크로 렌즈를 포함하는 이미지 센서
JP2014217035A5 (ru)