JPWO2020044765A1 - 撮像素子、撮像装置、画像データ処理方法、及びプログラム - Google Patents
撮像素子、撮像装置、画像データ処理方法、及びプログラム Download PDFInfo
- Publication number
- JPWO2020044765A1 JPWO2020044765A1 JP2020540106A JP2020540106A JPWO2020044765A1 JP WO2020044765 A1 JPWO2020044765 A1 JP WO2020044765A1 JP 2020540106 A JP2020540106 A JP 2020540106A JP 2020540106 A JP2020540106 A JP 2020540106A JP WO2020044765 A1 JPWO2020044765 A1 JP WO2020044765A1
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- frame rate
- read
- photoelectric conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/254—Analysis of motion involving subtraction of images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/42—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
- H04N25/445—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by skipping some contiguous pixels within the read portion of the array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
- H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
- H04N25/771—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising storage means other than floating diffusion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/79—Arrangements of circuitry being divided between different or multiple substrates, chips or circuit boards, e.g. stacked image sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
Description
Claims (16)
- 撮像素子であって、
被写体が光電変換素子により撮像されることで得られた撮像画像データを前記光電変換素子から読み出し、かつ、前記撮像素子に内蔵された読出部と、
前記読出部により前記光電変換素子から読み出された前記撮像画像データを記憶可能であり、かつ、前記撮像素子に内蔵された記憶部と、
前記記憶部に記憶された前記撮像画像データに基づく出力用画像データを前記撮像素子の外部に出力し、かつ、前記撮像素子に内蔵された出力部と、を含み、
前記出力部は、第1フレームレートで前記出力用画像データを前記外部に出力し、
前記読出部は、第2フレームレートで前記撮像画像データを前記光電変換素子から読み出し、
前記読出部は、第1読み出し方式、又は、前記第1読み出し方式よりも読み出しデータ量が少ない第2読み出し方式で、前記光電変換素子から前記撮像画像データを読み出し、
前記第1読み出し方式の場合、前記第1フレームレートは、前記第2フレームレートに相当するフレームレートであり、前記第2読み出し方式の場合、前記第1フレームレートは、前記第1読み出し方式の場合に比べ、低いフレームレートであり、
前記被写体の動きを検出する検出部での検出結果に応じて、前記第1読み出し方式と前記第2読み出し方式とが切り替えられる
撮像素子。 - 前記記憶部は、前記撮像画像データを、撮像タイミングが前後する複数フレームで記憶可能である請求項1に記載の撮像素子。
- 前記検出部は、前記記憶部に記憶された前記複数フレームの前記撮像画像データに基づいて前記被写体の動きを検出する請求項2に記載の撮像素子。
- 前記第1フレームレートは、前記第1読み出し方式と前記第2読み出し方式との切り替えに応じて変更される請求項1から請求項3の何れか一項に記載の撮像素子。
- 前記第2フレームレートは、前記第1読み出し方式と前記第2読み出し方式との切り替えに関わらず固定化されている請求項1から請求項4の何れか一項に記載の撮像素子。
- 前記第2読み出し方式で、前記撮像画像データの1フレームは、予め定められた撮像条件で前記被写体が前記光電変換素子により撮像された場合よりも画素が間引かれた間引き画像フレームである請求項1から請求項5の何れか一項に記載の撮像素子。
- 前記撮像画像データが前記読出部によって前記第2読み出し方式で読み出される場合、前記撮像画像データは、予め定められた撮像条件で前記被写体が前記光電変換素子により撮像された場合よりも画素が間引かれ、かつ、互いに異なる箇所の画素が間引かれた複数の間引き画像フレームであり、
前記出力用画像データは、前記複数の間引き画像フレームを合成して得られた画像データである請求項1から請求項5の何れか一項に記載の撮像素子。 - 前記第2読み出し方式では、前記光電変換素子に対して前記画素が間引かれた状態で前記被写体を撮像させる請求項6又は請求項7に記載の撮像素子。
- 前記読出部は、前記第2読み出し方式において、前記光電変換素子から前記画素が間引かれた状態で前記撮像画像データを読み出す請求項6又は請求項7に記載の撮像素子。
- 前記第2読み出し方式では、前記撮像画像データは、フレーム毎に異なる箇所の画素が間引かれて得られた複数の間引き画像データであり、
前記記憶部は、前記複数の間引き画像データを記憶し、
前記検出部は、前記記憶部に記憶された前記複数の間引き画像データに基づいて前記被写体の動きを検出する請求項1から請求項9の何れか一項に記載の撮像素子。 - 前記検出部により前記被写体の動きが検出された場合に前記第1読み出し方式とされ、前記検出部により前記被写体の動きが検出されなかった場合に前記第2読み出し方式とされる請求項1から請求項10の何れか一項に記載の撮像素子。
- 前記検出部を含む請求項1から請求項11の何れか一項に記載の撮像素子。
- 前記撮像素子は、前記光電変換素子を有し、前記光電変換素子に前記記憶部が積層された積層型撮像素子である請求項1から請求項12の何れか一項に記載の撮像素子。
- 請求項1から請求項13の何れか一項に記載の撮像素子と、
前記撮像素子に含まれる前記出力部により出力された前記出力用画像データに基づく画像を表示部に対して表示させる制御を行う制御部と、
を含む撮像装置。 - 撮像素子には、被写体が光電変換素子により撮像されることで得られた撮像画像データを前記光電変換素子から読み出す読出部と、前記読出部により前記光電変換素子から読み出された前記撮像画像データを記憶可能な記憶部と、前記記憶部に記憶された前記撮像画像データに基づく出力用画像データを前記撮像素子の外部に出力する出力部とが内蔵されており、前記撮像素子に含まれる前記出力部に対して、第1フレームレートで前記出力用画像データを前記外部に出力させ、
前記読出部に対して、第2フレームレートで前記撮像画像データを前記光電変換素子から読み出させ、
前記読出部に対して、第1読み出し方式、又は、前記第1読み出し方式よりも読み出しデータ量が少ない第2読み出し方式で、前記光電変換素子から前記撮像画像データを読み出させ、
前記第1読み出し方式の場合、前記第1フレームレートを、前記第2フレームレートに相当するフレームレートとし、
前記第2読み出し方式の場合、前記第1フレームレートを、前記第1読み出し方式の場合に比べ、低いフレームレートとし、
前記被写体の動きを検出する検出部での検出結果に応じて、前記第1読み出し方式と前記第2読み出し方式とを切り替えることを含む画像データ処理方法。 - 撮像素子には、被写体が光電変換素子により撮像されることで得られた撮像画像データを前記光電変換素子から読み出す読出部と、前記読出部により前記光電変換素子から読み出された前記撮像画像データを記憶可能な記憶部と、前記記憶部に記憶された前記撮像画像データに基づく出力用画像データを前記撮像素子の外部に出力する出力部とが内蔵されており、コンピュータを、前記読出部及び前記出力部として機能させるためのプログラムであって、
前記出力部は、第1フレームレートで前記出力用画像データを前記外部に出力し、
前記読出部は、第2フレームレートで前記撮像画像データを前記光電変換素子から読み出し、
前記読出部は、第1読み出し方式、又は、前記第1読み出し方式よりも読み出しデータ量が少ない第2読み出し方式で、前記光電変換素子から前記撮像画像データを読み出し、
前記第1読み出し方式の場合、前記第1フレームレートは、前記第2フレームレートに相当するフレームレートであり、前記第2読み出し方式の場合、前記第1フレームレートは、前記第1読み出し方式の場合に比べ、低いフレームレートであり、
前記被写体の動きを検出する検出部での検出結果に応じて、前記第1読み出し方式と前記第2読み出し方式とが切り替えられる
プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021115301A JP7320024B2 (ja) | 2018-08-31 | 2021-07-12 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
JP2023119435A JP2023145575A (ja) | 2018-08-31 | 2023-07-21 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018163998 | 2018-08-31 | ||
JP2018163998 | 2018-08-31 | ||
PCT/JP2019/025648 WO2020044765A1 (ja) | 2018-08-31 | 2019-06-27 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021115301A Division JP7320024B2 (ja) | 2018-08-31 | 2021-07-12 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6913830B2 JP6913830B2 (ja) | 2021-08-04 |
JPWO2020044765A1 true JPWO2020044765A1 (ja) | 2021-08-10 |
Family
ID=69644135
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020540106A Active JP6913830B2 (ja) | 2018-08-31 | 2019-06-27 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
JP2021115301A Active JP7320024B2 (ja) | 2018-08-31 | 2021-07-12 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
JP2023119435A Pending JP2023145575A (ja) | 2018-08-31 | 2023-07-21 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021115301A Active JP7320024B2 (ja) | 2018-08-31 | 2021-07-12 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
JP2023119435A Pending JP2023145575A (ja) | 2018-08-31 | 2023-07-21 | 撮像素子、撮像装置、画像データ処理方法、及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US11122223B2 (ja) |
JP (3) | JP6913830B2 (ja) |
CN (1) | CN112640429A (ja) |
WO (1) | WO2020044765A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021039114A1 (ja) * | 2019-08-29 | 2021-03-04 | 富士フイルム株式会社 | 撮像装置、撮像装置の動作方法、及びプログラム |
WO2024034390A1 (ja) * | 2022-08-09 | 2024-02-15 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、プログラム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007195050A (ja) * | 2006-01-20 | 2007-08-02 | Canon Inc | 撮像装置、撮像方法及び制御プログラム |
JP2011146847A (ja) * | 2010-01-13 | 2011-07-28 | Sanyo Electric Co Ltd | 画像再生制御装置、画像再生制御方法および撮像装置 |
JP2012050141A (ja) * | 2006-10-24 | 2012-03-08 | Sony Corp | 撮像装置と再生制御装置 |
JP2014082731A (ja) * | 2012-09-26 | 2014-05-08 | Jvc Kenwood Corp | 動画像データ処理装置及び動画像データ処理方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007134805A (ja) | 2005-11-08 | 2007-05-31 | Canon Inc | 電子撮像装置 |
JP6369328B2 (ja) * | 2012-04-05 | 2018-08-08 | 日本電気株式会社 | 解析システム |
JP2015032917A (ja) | 2013-07-31 | 2015-02-16 | 株式会社東芝 | 固体撮像装置 |
JP6350863B2 (ja) | 2013-12-20 | 2018-07-04 | ソニー株式会社 | 撮像素子、撮像装置、および電子装置 |
JP6588702B2 (ja) * | 2015-01-05 | 2019-10-09 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
JP2017183952A (ja) | 2016-03-30 | 2017-10-05 | キヤノン株式会社 | 撮像装置およびその制御方法、撮像素子 |
JP2017188760A (ja) | 2016-04-05 | 2017-10-12 | ソニー株式会社 | 画像処理装置、画像処理方法、コンピュータプログラム及び電子機器 |
-
2019
- 2019-06-27 JP JP2020540106A patent/JP6913830B2/ja active Active
- 2019-06-27 WO PCT/JP2019/025648 patent/WO2020044765A1/ja active Application Filing
- 2019-06-27 CN CN201980056058.9A patent/CN112640429A/zh active Pending
-
2021
- 2021-02-15 US US17/176,176 patent/US11122223B2/en active Active
- 2021-07-12 JP JP2021115301A patent/JP7320024B2/ja active Active
- 2021-07-13 US US17/374,203 patent/US11405566B2/en active Active
-
2023
- 2023-07-21 JP JP2023119435A patent/JP2023145575A/ja active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007195050A (ja) * | 2006-01-20 | 2007-08-02 | Canon Inc | 撮像装置、撮像方法及び制御プログラム |
JP2012050141A (ja) * | 2006-10-24 | 2012-03-08 | Sony Corp | 撮像装置と再生制御装置 |
JP2011146847A (ja) * | 2010-01-13 | 2011-07-28 | Sanyo Electric Co Ltd | 画像再生制御装置、画像再生制御方法および撮像装置 |
JP2014082731A (ja) * | 2012-09-26 | 2014-05-08 | Jvc Kenwood Corp | 動画像データ処理装置及び動画像データ処理方法 |
Also Published As
Publication number | Publication date |
---|---|
US11405566B2 (en) | 2022-08-02 |
CN112640429A (zh) | 2021-04-09 |
US11122223B2 (en) | 2021-09-14 |
JP7320024B2 (ja) | 2023-08-02 |
US20210168308A1 (en) | 2021-06-03 |
US20210344853A1 (en) | 2021-11-04 |
JP6913830B2 (ja) | 2021-08-04 |
JP2023145575A (ja) | 2023-10-11 |
WO2020044765A1 (ja) | 2020-03-05 |
JP2021177646A (ja) | 2021-11-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5029268B2 (ja) | 電子カメラ | |
JP2023145575A (ja) | 撮像素子、撮像装置、画像データ処理方法、及びプログラム | |
US8223255B2 (en) | Imaging apparatus, auto-focusing method and recording medium | |
US20230421904A1 (en) | Imaging element, imaging apparatus, image data processing method, and program that performs imaging in a first frame rate and outputs data in a second frame rate | |
JP7004852B2 (ja) | 撮像素子、撮像装置、撮像素子の作動方法、及びプログラム | |
JP6964806B2 (ja) | 撮像素子、撮像装置、画像データ処理方法、及びプログラム | |
JP2022062138A (ja) | 撮像素子、撮像装置、撮像素子の作動方法、及びプログラム | |
JP6955308B2 (ja) | 撮像素子、撮像装置、撮像方法及びプログラム | |
JP7410088B2 (ja) | 撮像素子、撮像装置、画像データ出力方法、及びプログラム | |
JP6915166B2 (ja) | 撮像素子、撮像装置、画像データ処理方法、及びプログラム | |
JP7004853B2 (ja) | 撮像素子、撮像装置、撮像素子の作動方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210222 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210222 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20210222 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20210312 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210615 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210712 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6913830 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |