JP2020014195A5 - - Google Patents

Download PDF

Info

Publication number
JP2020014195A5
JP2020014195A5 JP2019104796A JP2019104796A JP2020014195A5 JP 2020014195 A5 JP2020014195 A5 JP 2020014195A5 JP 2019104796 A JP2019104796 A JP 2019104796A JP 2019104796 A JP2019104796 A JP 2019104796A JP 2020014195 A5 JP2020014195 A5 JP 2020014195A5
Authority
JP
Japan
Prior art keywords
image data
image
calculation
pixel unit
processing means
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019104796A
Other languages
Japanese (ja)
Other versions
JP7277263B2 (en
JP2020014195A (en
Filing date
Publication date
Application filed filed Critical
Priority to US16/502,218 priority Critical patent/US10904424B2/en
Publication of JP2020014195A publication Critical patent/JP2020014195A/en
Publication of JP2020014195A5 publication Critical patent/JP2020014195A5/ja
Application granted granted Critical
Publication of JP7277263B2 publication Critical patent/JP7277263B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

上記目的を達成するために、本発明の撮像装置は、各々が複数の光電変換部および1つのマイクロレンズを備えた画素が複数配置された画素部と、前記画素部を駆動する駆動手段と、前記画素部から出力された画像データを記憶する記憶手段と、前記画像データの一部である第1の画像データを用いた演算を行う第1の処理と、前記画像データに対して画像を得るための処理を行う第2の処理とを行う少なくとも1つの画像処理手段と、前記画素部から出力された画像データを、前記記憶手段および前記画像処理手段に転送する制御を行う制御手段と、を有し、前記制御手段は、前記画素部から出力された画像データのうち、少なくとも前記第1の画像データの一部、前記記憶手段に格納せずに前記画像処理手段に転送し、前記第1の画像データの残りと、前記画素部から出力された画像データのうち、第2の画像データを、前記記憶手段に記憶し、前記第1の画像データの残りと、前記第2の画像データを、前記記憶手段から前記画像処理手段に転送するように制御し、前記駆動手段は、前記第1の画像データおよび前記第2の画像データを前記画像処理手段に転送する順序とは異なる所定の順序で前記画像データを出力するように前記画素部を駆動する。 In order to achieve the above object, the image pickup apparatus of the present invention includes a pixel unit in which a plurality of pixels having a plurality of photoelectric conversion units and one microlens are arranged, a driving means for driving the pixel unit, and a driving means for driving the pixel unit. A storage means for storing the image data output from the pixel portion, a first process for performing an operation using the first image data which is a part of the image data, and obtaining an image for the image data. At least one image processing means for performing the second processing for performing the processing for the purpose, and a control means for controlling the transfer of the image data output from the pixel unit to the storage means and the image processing means. The control means transfers at least a part of the first image data out of the image data output from the pixel unit to the image processing means without storing it in the storage means, and transfers the first image data to the image processing means . Of the rest of the image data of 1 and the image data output from the pixel portion, the second image data is stored in the storage means, and the rest of the first image data and the second image data are stored. Is controlled to be transferred from the storage means to the image processing means, and the driving means has a predetermined order different from the order of transferring the first image data and the second image data to the image processing means. The pixel unit is driven so as to output the image data in order.

Claims (11)

各々が複数の光電変換部および1つのマイクロレンズを備えた画素が複数配置された画素部と、
前記画素部を駆動する駆動手段と、
前記画素部から出力された画像データを記憶する記憶手段と、
前記画像データの一部である第1の画像データを用いた演算を行う第1の処理と、前記画像データに対して画像を得るための処理を行う第2の処理とを行う少なくとも1つの画像処理手段と、
前記画素部から出力された画像データを、前記記憶手段および前記画像処理手段に転送する制御を行う制御手段と、を有し、
前記制御手段は、前記画素部から出力された画像データのうち、少なくとも前記第1の画像データの一部、前記記憶手段に格納せずに前記画像処理手段に転送し、前記第1の画像データの残りと、前記画素部から出力された画像データのうち、第2の画像データを、前記記憶手段に記憶し、前記第1の画像データの残りと、前記第2の画像データを、前記記憶手段から前記画像処理手段に転送するように制御し、
前記駆動手段は、前記第1の画像データおよび前記第2の画像データを前記画像処理手段に転送する順序とは異なる所定の順序で前記画像データを出力するように前記画素部を駆動することを特徴とする撮像装置。
A pixel unit in which a plurality of pixels each having a plurality of photoelectric conversion units and one microlens are arranged, and a pixel unit in which a plurality of pixels are arranged.
The driving means for driving the pixel portion and
A storage means for storing image data output from the pixel unit, and
At least one image that performs a first process of performing an operation using the first image data that is a part of the image data and a second process of performing a process for obtaining an image on the image data. Processing means and
It has a control means for controlling the transfer of image data output from the pixel unit to the storage means and the image processing means.
The control means transfers at least a part of the first image data out of the image data output from the pixel unit to the image processing means without storing it in the storage means, and transfers the first image. Of the rest of the data and the image data output from the pixel unit, the second image data is stored in the storage means, and the rest of the first image data and the second image data are stored in the storage means. Controlled to transfer from the storage means to the image processing means,
The driving means drives the pixel unit so as to output the image data in a predetermined order different from the order in which the first image data and the second image data are transferred to the image processing means. An image pickup device as a feature.
前記画像処理手段は、前記転送された画像データの順番を並べ替える並べ替え手段を更に有することを特徴とする請求項1に記載の撮像装置。The image pickup apparatus according to claim 1, wherein the image processing means further includes a rearranging means for rearranging the order of the transferred image data. 前記第1の処理は、相関演算、表示する画像を生成する演算、デフォーカスマップを作成する演算、被写体の追尾演算、露出を制御するための演算、ホワイトバランスを決定するための演算、フリッカを検出するための演算、フラッシュの発光量を決定するための演算の少なくともいずれかを含むことを特徴とする請求項1に記載の撮像装置。The first process includes correlation calculation, calculation for generating an image to be displayed, calculation for creating a defocus map, calculation for tracking a subject, calculation for controlling exposure, calculation for determining white balance, and flicker. The image pickup apparatus according to claim 1, further comprising at least one of an operation for detecting and an operation for determining a flash emission amount. 各々が複数の光電変換部および1つのマイクロレンズを備えた画素が複数配置された画素部と、
前記画素部を駆動する駆動手段と、
前記画素部から出力された画像データを記憶する記憶手段と、
前記画像データの一部である第1の画像データを用いた演算を行う第1の処理と、前記画像データに対して画像を得るための処理を行う第2の処理と、前記第1の画像データと異なる、前記画像データの別の一部である第3の画像データを用いた演算を行う第3の処理を行う少なくとも1つの画像処理手段と、
前記画素部から出力された画像データを、前記記憶手段および前記画像処理手段に転送する制御を行う制御手段と、を有し、
前記制御手段は、前記画素部から出力された画像データのうち、前記第1および第3の画像データの少なくとも一部を前記記憶手段に格納せずに前記画像処理手段に転送すると共に、前記一部を除く前記第1および第3の画像データと、前記画素部から出力された画像データのうち、第2の画像データを前記記憶手段に格納し、前記記憶手段から、前記一部を除く前記第1および第3の画像データと前記第2の画像データを前記画像処理手段に転送するように制御し、
前記駆動手段は、前記第1の画像データ及び前記第2の画像データを前記画像処理手段に転送する順序と異なる所定の順序で前記画像データを出力するように前記画素部を駆動することを特徴とする撮像装置。
A pixel unit in which a plurality of pixels each having a plurality of photoelectric conversion units and one microlens are arranged, and a pixel unit in which a plurality of pixels are arranged.
The driving means for driving the pixel portion and
A storage means for storing image data output from the pixel unit, and
A first process for performing an operation using the first image data which is a part of the image data, a second process for performing a process for obtaining an image for the image data, and the first image. At least one image processing means for performing a third process of performing an operation using a third image data which is another part of the image data, which is different from the data.
It has a control means for controlling the transfer of image data output from the pixel unit to the storage means and the image processing means.
The control means transfers at least a part of the first and third image data out of the image data output from the pixel unit to the image processing means without storing the first and third image data in the storage means, and also transfers the first and third image data to the image processing means. Of the first and third image data excluding the part and the image data output from the pixel part, the second image data is stored in the storage means, and the part is removed from the storage means. The first and third image data and the second image data are controlled to be transferred to the image processing means, and the first and third image data are controlled to be transferred to the image processing means.
The driving means is characterized in that the pixel unit is driven so as to output the image data in a predetermined order different from the order in which the first image data and the second image data are transferred to the image processing means. Image pickup device.
前記画像処理手段は、前記転送された画像データの順番を並べ替える並べ替え手段を更に有することを特徴とする請求項に記載の撮像装置。 The image pickup apparatus according to claim 4 , wherein the image processing means further includes a rearranging means for rearranging the order of the transferred image data. 前記第1の処理は、相関演算、表示する画像を生成する演算、デフォーカスマップを作成する演算、被写体の追尾演算、露出を制御するための演算、ホワイトバランスを決定するための演算、フリッカを検出するための演算、フラッシュの発光量を決定するための演算の少なくともいずれかを含むことを特徴とする請求項に記載の撮像装置。 The first process includes correlation calculation, calculation for generating an image to be displayed, calculation for creating a defocus map, calculation for tracking a subject, calculation for controlling exposure, calculation for determining white balance, and flicker. The image pickup apparatus according to claim 4 , further comprising at least one of an operation for detecting and an operation for determining the amount of light emitted from the flash. 前記第3の処理は、相関演算、表示する画像を生成する演算、デフォーカスマップを作成する演算、被写体の追尾演算、露出を制御するための演算、ホワイトバランスを決定するための演算、フリッカを検出するための演算、フラッシュの発光量を決定するための演算の少なくともいずれかを含み、前記第1の処理と異なることを特徴とする請求項に記載の撮像装置。 The third process includes correlation calculation, calculation for generating an image to be displayed, calculation for creating a defocus map, calculation for tracking a subject, calculation for controlling exposure, calculation for determining white balance, and flicker. The image pickup apparatus according to claim 4 , further comprising at least one of an operation for detecting and an operation for determining the amount of light emitted from the flash, which is different from the first process. 各々が複数の光電変換部および1つのマイクロレンズを備えた画素が複数配置された画素部と、
前記画素部を駆動する駆動手段と、
前記画素部から出力された画像データを記憶する記憶手段と、
前記画素部から出力された画像データの一部である第1の画像データを用いた演算を行う第1の処理と、前記画素部から出力された画像データに対して画像を得るための処理を行う第2の処理とを行う少なくとも1つの画像処理手段と、
前記画素部から出力された画像データを、前記記憶手段および前記画像処理手段に転送する制御を行う制御手段と、を有し、
前記制御手段は、前記画素部から出力された画像データをすべて前記記憶手段に格納すると共に、前記第1の画像データを前記記憶手段へ格納しながら前記画像処理手段に転送し、当該第1の画像データを転送した後、前記記憶手段から、前記第1の画像データおよび、前記記憶手段に記憶された画像データのうち、第2の画像データを所定の順序で前記画像処理手段に転送するように制御し、
前記駆動手段は、前記第1の画像データおよび前記第2の画像データを前記画像処理手段に転送する順序とは異なる所定の順序で前記画像データを出力するように前記画素部を駆動することを特徴とする撮像装置。
A pixel unit in which a plurality of pixels each having a plurality of photoelectric conversion units and one microlens are arranged, and a pixel unit in which a plurality of pixels are arranged.
The driving means for driving the pixel portion and
A storage means for storing image data output from the pixel unit, and
The first process of performing an operation using the first image data which is a part of the image data output from the pixel unit, and the process of obtaining an image for the image data output from the pixel unit. At least one image processing means for performing the second processing to be performed, and
It has a control means for controlling the transfer of image data output from the pixel unit to the storage means and the image processing means.
The control means stores all the image data output from the pixel unit in the storage means, and transfers the first image data to the image processing means while storing the first image data in the storage means, and the first image processing means. After transferring the image data, the second image data among the first image data and the image data stored in the storage means is transferred from the storage means to the image processing means in a predetermined order. Control to
The driving means drives the pixel unit so as to output the image data in a predetermined order different from the order in which the first image data and the second image data are transferred to the image processing means. An image pickup device as a feature.
前記画像処理手段は、更に、前記第1の画像データと異なる、前記画素部から出力された画像データの別の一部である第3の画像データを用いた演算を行う第3の処理を行い、
前記制御手段は、更に、前記第3の画像データを前記記憶手段へ格納しながら前記画像処理手段に転送し、前記第1および第3の画像データを転送した後、前記記憶手段から、前記第1の画像データ、前記第2の画像データ、前記第3の画像データを所定の順序で前記画像処理手段に転送するように制御することを特徴とする請求項に記載の撮像装置。
The image processing means further performs a third process of performing an operation using a third image data which is another part of the image data output from the pixel portion, which is different from the first image data. ,
The control means further transfers the third image data to the image processing means while storing the third image data in the storage means, transfers the first and third image data, and then transfers the first and third image data from the storage means to the first. The image pickup apparatus according to claim 8 , wherein the image data of 1, the second image data, and the third image data are controlled to be transferred to the image processing means in a predetermined order.
前記第1の処理は、相関演算、表示する画像を生成する演算、デフォーカスマップを作成する演算、被写体の追尾演算、露出を制御するための演算、ホワイトバランスを決定するための演算、フリッカを検出するための演算、フラッシュの発光量を決定するための演算の少なくともいずれかを含むことを特徴とする請求項に記載の撮像装置。 The first process includes correlation calculation, calculation for generating an image to be displayed, calculation for creating a defocus map, calculation for tracking a subject, calculation for controlling exposure, calculation for determining white balance, and flicker. The image pickup apparatus according to claim 8 , further comprising at least one of an operation for detecting and an operation for determining the amount of light emitted from the flash. 前記第3の処理は、相関演算、表示する画像を生成する演算、デフォーカスマップを作成する演算、被写体の追尾演算、露出を制御するための演算、ホワイトバランスを決定するための演算、フリッカを検出するための演算、フラッシュの発光量を決定するための演算の少なくともいずれかを含み、前記第1の処理と異なることを特徴とする請求項に記載の撮像装置。 The third process includes correlation calculation, calculation for generating an image to be displayed, calculation for creating a defocus map, calculation for tracking a subject, calculation for controlling exposure, calculation for determining white balance, and flicker. The image pickup apparatus according to claim 9 , further comprising at least one of an operation for detecting and an operation for determining the amount of light emitted from the flash, which is different from the first process.
JP2019104796A 2018-07-06 2019-06-04 Imaging device Active JP7277263B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/502,218 US10904424B2 (en) 2018-07-06 2019-07-03 Image capturing apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018129459 2018-07-06
JP2018129459 2018-07-06

Publications (3)

Publication Number Publication Date
JP2020014195A JP2020014195A (en) 2020-01-23
JP2020014195A5 true JP2020014195A5 (en) 2022-06-09
JP7277263B2 JP7277263B2 (en) 2023-05-18

Family

ID=69170126

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019104796A Active JP7277263B2 (en) 2018-07-06 2019-06-04 Imaging device

Country Status (1)

Country Link
JP (1) JP7277263B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023052713A (en) * 2020-03-11 2023-04-12 ソニーセミコンダクタソリューションズ株式会社 Imaging device, imaging system, and imaging method
JP2021145961A (en) * 2020-03-19 2021-09-27 サミー株式会社 Game machine

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106464781B (en) * 2014-05-08 2020-11-03 索尼公司 Information processing apparatus, information processing method, and computer program
JP6682770B2 (en) * 2015-06-09 2020-04-15 ソニー株式会社 Imaging device and imaging method
JP6706109B2 (en) * 2016-03-23 2020-06-03 キヤノン株式会社 Imaging device and signal processing method

Similar Documents

Publication Publication Date Title
JP2014057256A5 (en)
JP2017220896A5 (en)
JP2013059123A5 (en)
JP2005234014A5 (en)
WO2016031171A1 (en) Imaging device
JP2014216866A5 (en)
JP2017005443A5 (en)
JP2020014195A5 (en)
JP2013223054A5 (en)
RU2015115689A (en) IMAGE CAPTURE DEVICE AND METHOD FOR MANAGING THE IMAGE CAPTURE DEVICE
JP2015095772A5 (en)
JP2014143667A5 (en)
JP2015087719A5 (en)
JP7278750B2 (en) Imaging device
JPWO2017065057A1 (en) Endoscope apparatus, operation method of endoscope apparatus, and recording medium
JP2015109635A5 (en)
CN203912049U (en) Shooting system and lighting device
JP2019095480A5 (en)
JP7277263B2 (en) Imaging device
JP2015087723A5 (en)
CN114363524B (en) Backlight control method, device, equipment and storage medium
JP2014099918A5 (en)
JP2011160188A5 (en)
JP2010004367A5 (en)
JP5063503B2 (en) Imaging apparatus and control method thereof