JP2021106418A - 画像処理装置、撮像装置および制御方法 - Google Patents
画像処理装置、撮像装置および制御方法 Download PDFInfo
- Publication number
- JP2021106418A JP2021106418A JP2021063200A JP2021063200A JP2021106418A JP 2021106418 A JP2021106418 A JP 2021106418A JP 2021063200 A JP2021063200 A JP 2021063200A JP 2021063200 A JP2021063200 A JP 2021063200A JP 2021106418 A JP2021106418 A JP 2021106418A
- Authority
- JP
- Japan
- Prior art keywords
- region
- subject
- gazing point
- image
- control circuit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 41
- 238000000034 method Methods 0.000 title claims description 44
- 238000003384 imaging method Methods 0.000 title abstract description 8
- 238000001514 detection method Methods 0.000 claims description 53
- 239000003550 marker Substances 0.000 description 59
- 230000003287 optical effect Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000003825 pressing Methods 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 3
- 238000002360 preparation method Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 238000007906 compression Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000006641 stabilisation Effects 0.000 description 2
- 238000011105 stabilization Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 210000004087 cornea Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Automatic Focus Adjustment (AREA)
- Exposure Control For Cameras (AREA)
- Focusing (AREA)
- Details Of Cameras Including Film Mechanisms (AREA)
Abstract
Description
図1では、画像処理装置としてデジタルカメラ等の撮像装置を例にとって説明する。なお、本発明は、撮像素子6が出力する信号に係る撮影画像の入力を受けて画像処理する任意の画像処理装置装置に適用可能である。図1(A)は、撮像装置の中央断面図を示す。図1(B)は、撮像装置の機能ブロック図を示す。図1(A)および図1(B)で同一の符号が付された構成要素は、それぞれ対応している。
図2(A)は、撮像装置の正面を示す。図2(B)は、背面を示す。レリーズボタン10aは、操作検出部10の一部をなしている。また、操作ボタン10bは、レリーズボタンとは異なる操作ボタンである。操作ボタン10bも操作検出部10の一部をなしている。操作ボタン10bは、トリガ入力用のボタンとして動作する。
S100において、撮像装置の電源がONとなって、動作が開始される。S110において、カメラシステム制御回路5が、動作モードの読み出しを行う。カメラシステム制御回路5は、予め定められた設定S120を読み出し、動作に反映させる。この例において、動作モードとは、ピントを合わせる動作に関する動作モードである。第1の動作モードとして、一度ピント合わせを行って以降のピントを合わせるための位置の設定を画像認識による主たる被写体の追尾によって行うこと、つまり主たる被写体の領域を選択領域としてピントを合わせることを示す被写体追尾モードがある。また、第2の動作モードとして、検出された注視点に基づいて、ピントを合わせる選択領域を設定することを示す注視点追尾モードがある。なお、ここでは、選択領域に対してピントを合わせる処理を行う動作モードを例にあげて説明を行うが、これに限られるものではない。選択領域に基づいて、露出値の調整、色相や彩度などの色の調整、コントラストや階調の修正、あるいは、画像信号の圧縮レベルの決定を行う処理などを行うこともできる。また、撮影時の処理でなくとも、再生時の画像処理で参照するための情報として、選択領域を示す情報を撮像画像とともに記録するようにしてもよい。
図4(A),(B),(C)は、この順に時間が経過した3つの時間的に異なる画像を示している。図4(A)は、S1以前の状態(いわゆるS0)における表示例である。図4(B)は、S1を押した瞬間における表示例である。図4(C)は、S1を維持している状態における表示例である。
図5に示す例では、第1の被写体31が主被写体であり、シャッタータイミングを考えている最中に第2の被写体32が前を横切ったものとする。図5に示す例に類似する場面としては、遊戯会で主被写体の前を他の演技者が横切るような場面が考えられる。図5(A)、(B)、(C)は、この順に時間が経過した3つの時間的に異なる画像を示している。図5において図4と同じ機能のものには同じ番号を付した。図5において、31は第1の被写体を、32は第2の被写体を示す。図5(A)では、S1を押した瞬間の状態である。図5(B)および図5(C)では、S1を維持している状態である。
図6において、図4と同じものには同じ番号を付している。図6のS1のタイミングは図4と異なっている。図6(A)は、S1の瞬間の状態を示す。図6(B)および図6(C)は、S1を維持している状態を示す。また、図6では、動作モードは、注視点でピント合わせを行い続ける注視点追尾モードであるものとする。すなわち、図6は、図3のS180からS200に進む場合に対応している。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
2 レンズユニット
Claims (1)
- 撮影画像を取得する取得手段と、
前記撮影画像の領域のうち、ユーザが注視する領域である第1の領域を検知する検知手段と、
前記撮影画像の領域のうち、主たる被写体の領域である第2の領域を決定する決定手段と、
前記第1の領域を示す第1の領域情報と前記第2の領域を示す第2の領域情報とを、それぞれ識別可能に前記撮影画像に重畳させて表示する制御を行う表示制御手段とを備え、
前記表示制御手段は、第1の指示手段の操作前においては、前記第1の領域情報と前記第2の領域情報を同一の位置の情報に基づいて表示し、前記第1の指示手段の操作後においては、前記第1の領域情報と前記第2の領域情報を互いに別の位置の情報に基づいて表示する
ことを特徴とする画像処理装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021063200A JP7071569B2 (ja) | 2017-02-08 | 2021-04-01 | 画像処理装置、撮像装置、制御方法、プログラム及び記憶媒体 |
JP2022072509A JP7346654B2 (ja) | 2017-02-08 | 2022-04-26 | 画像処理装置、撮像装置、制御方法、プログラム、及び記憶媒体 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017021134A JP6862202B2 (ja) | 2017-02-08 | 2017-02-08 | 画像処理装置、撮像装置および制御方法 |
JP2021063200A JP7071569B2 (ja) | 2017-02-08 | 2021-04-01 | 画像処理装置、撮像装置、制御方法、プログラム及び記憶媒体 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017021134A Division JP6862202B2 (ja) | 2017-02-08 | 2017-02-08 | 画像処理装置、撮像装置および制御方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022072509A Division JP7346654B2 (ja) | 2017-02-08 | 2022-04-26 | 画像処理装置、撮像装置、制御方法、プログラム、及び記憶媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021106418A true JP2021106418A (ja) | 2021-07-26 |
JP2021106418A5 JP2021106418A5 (ja) | 2022-03-09 |
JP7071569B2 JP7071569B2 (ja) | 2022-05-19 |
Family
ID=63037476
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017021134A Active JP6862202B2 (ja) | 2017-02-08 | 2017-02-08 | 画像処理装置、撮像装置および制御方法 |
JP2021063200A Active JP7071569B2 (ja) | 2017-02-08 | 2021-04-01 | 画像処理装置、撮像装置、制御方法、プログラム及び記憶媒体 |
JP2022072509A Active JP7346654B2 (ja) | 2017-02-08 | 2022-04-26 | 画像処理装置、撮像装置、制御方法、プログラム、及び記憶媒体 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017021134A Active JP6862202B2 (ja) | 2017-02-08 | 2017-02-08 | 画像処理装置、撮像装置および制御方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022072509A Active JP7346654B2 (ja) | 2017-02-08 | 2022-04-26 | 画像処理装置、撮像装置、制御方法、プログラム、及び記憶媒体 |
Country Status (2)
Country | Link |
---|---|
US (4) | US10542206B2 (ja) |
JP (3) | JP6862202B2 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7379028B2 (ja) * | 2019-09-06 | 2023-11-14 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラムおよび記憶媒体 |
JP7208128B2 (ja) * | 2019-10-24 | 2023-01-18 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP7467114B2 (ja) * | 2019-12-27 | 2024-04-15 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP7500211B2 (ja) * | 2020-02-07 | 2024-06-17 | キヤノン株式会社 | 電子機器 |
JP2021131441A (ja) * | 2020-02-19 | 2021-09-09 | キヤノン株式会社 | 電子機器 |
JP7387493B2 (ja) * | 2020-03-06 | 2023-11-28 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラム、記憶媒体 |
JP7542973B2 (ja) | 2020-03-18 | 2024-09-02 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP7446913B2 (ja) * | 2020-05-21 | 2024-03-11 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラム |
JP7346375B2 (ja) * | 2020-10-22 | 2023-09-19 | キヤノン株式会社 | 電子機器及びその制御方法及びプログラム及び記録媒体 |
US20220239836A1 (en) * | 2021-01-25 | 2022-07-28 | Canon Kabushiki Kaisha | Image processing device, control method thereof, imaging apparatus, and program storage medium |
JP2023003735A (ja) * | 2021-06-24 | 2023-01-17 | キヤノン株式会社 | 視線検出装置、撮像装置、視線検出方法、プログラム、および、記憶媒体 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05304631A (ja) * | 1991-12-09 | 1993-11-16 | Canon Inc | 撮像装置 |
JPH05328197A (ja) * | 1992-05-22 | 1993-12-10 | Canon Inc | 撮影装置 |
JPH05333258A (ja) * | 1992-05-29 | 1993-12-17 | Olympus Optical Co Ltd | 視線入力可能なカメラ |
JPH08307739A (ja) * | 1995-05-11 | 1996-11-22 | Canon Inc | ビデオカメラ |
JP2002062470A (ja) * | 2000-08-21 | 2002-02-28 | Canon Inc | 光学装置及びカメラ |
JP2013197827A (ja) * | 2012-03-19 | 2013-09-30 | Nec Casio Mobile Communications Ltd | 撮影補助装置、方法、並びに該撮影補助装置を搭載した撮影装置及びカメラ付き携帯端末 |
JPWO2014103732A1 (ja) * | 2012-12-26 | 2017-01-12 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3180458B2 (ja) | 1991-08-27 | 2001-06-25 | 株式会社ニコン | 視線検出手段を有するカメラ |
JP3097250B2 (ja) * | 1991-12-20 | 2000-10-10 | 株式会社ニコン | カメラの表示装置 |
JP3727954B2 (ja) * | 1993-11-10 | 2005-12-21 | キヤノン株式会社 | 撮像装置 |
JP2001111882A (ja) | 1999-10-04 | 2001-04-20 | Canon Inc | 被写体検出装置、画像処理装置、画像処理システム、被写体検出方法、画像処理方法、及び記憶媒体 |
JP4669150B2 (ja) * | 2001-04-09 | 2011-04-13 | キヤノン株式会社 | 主被写体推定装置及び主被写体推定方法 |
JP4761146B2 (ja) * | 2006-06-30 | 2011-08-31 | カシオ計算機株式会社 | 撮像装置及びそのプログラム |
EP1909229B1 (en) * | 2006-10-03 | 2014-02-19 | Nikon Corporation | Tracking device and image-capturing apparatus |
CN102265597B (zh) * | 2008-12-26 | 2013-10-09 | 松下电器产业株式会社 | 摄像装置 |
US8493390B2 (en) * | 2010-12-08 | 2013-07-23 | Sony Computer Entertainment America, Inc. | Adaptive displays using gaze tracking |
KR101919010B1 (ko) * | 2012-03-08 | 2018-11-16 | 삼성전자주식회사 | 안구 동작에 기초한 디바이스의 제어 방법 및 이를 위한 디바이스 |
JP5724991B2 (ja) | 2012-11-19 | 2015-05-27 | Tdk株式会社 | 電源装置、および電源装置の故障検出方法 |
WO2014188149A1 (en) * | 2013-05-20 | 2014-11-27 | Milan Momcilo Popovich | Holographic waveguide eye tracker |
JP6257198B2 (ja) | 2013-07-22 | 2018-01-10 | キヤノン株式会社 | 光学機器、その制御方法、および制御プログラム |
US10165176B2 (en) * | 2013-10-31 | 2018-12-25 | The University Of North Carolina At Chapel Hill | Methods, systems, and computer readable media for leveraging user gaze in user monitoring subregion selection systems |
US10359842B2 (en) * | 2014-09-16 | 2019-07-23 | Ricoh Company, Limited | Information processing system and information processing method |
US10528614B2 (en) * | 2016-11-07 | 2020-01-07 | International Business Machines Corporation | Processing images from a gaze tracking device to provide location information for tracked entities |
-
2017
- 2017-02-08 JP JP2017021134A patent/JP6862202B2/ja active Active
-
2018
- 2018-02-05 US US15/888,200 patent/US10542206B2/en active Active
-
2019
- 2019-12-31 US US16/731,172 patent/US11399131B2/en active Active
-
2021
- 2021-04-01 JP JP2021063200A patent/JP7071569B2/ja active Active
-
2022
- 2022-04-26 JP JP2022072509A patent/JP7346654B2/ja active Active
- 2022-06-24 US US17/848,785 patent/US11962887B2/en active Active
-
2024
- 2024-03-20 US US18/610,894 patent/US20240236473A1/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05304631A (ja) * | 1991-12-09 | 1993-11-16 | Canon Inc | 撮像装置 |
JPH05328197A (ja) * | 1992-05-22 | 1993-12-10 | Canon Inc | 撮影装置 |
JPH05333258A (ja) * | 1992-05-29 | 1993-12-17 | Olympus Optical Co Ltd | 視線入力可能なカメラ |
JPH08307739A (ja) * | 1995-05-11 | 1996-11-22 | Canon Inc | ビデオカメラ |
JP2002062470A (ja) * | 2000-08-21 | 2002-02-28 | Canon Inc | 光学装置及びカメラ |
JP2013197827A (ja) * | 2012-03-19 | 2013-09-30 | Nec Casio Mobile Communications Ltd | 撮影補助装置、方法、並びに該撮影補助装置を搭載した撮影装置及びカメラ付き携帯端末 |
JPWO2014103732A1 (ja) * | 2012-12-26 | 2017-01-12 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
US11962887B2 (en) | 2024-04-16 |
US20200137299A1 (en) | 2020-04-30 |
US20180227481A1 (en) | 2018-08-09 |
JP7071569B2 (ja) | 2022-05-19 |
JP6862202B2 (ja) | 2021-04-21 |
US11399131B2 (en) | 2022-07-26 |
JP7346654B2 (ja) | 2023-09-19 |
US20240236473A1 (en) | 2024-07-11 |
US20220321773A1 (en) | 2022-10-06 |
US10542206B2 (en) | 2020-01-21 |
JP2018129659A (ja) | 2018-08-16 |
JP2022106849A (ja) | 2022-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7071569B2 (ja) | 画像処理装置、撮像装置、制御方法、プログラム及び記憶媒体 | |
US10459190B2 (en) | Imaging apparatus, imaging method, and computer-readable recording medium | |
JP5512878B2 (ja) | 撮影装置及び表示制御方法 | |
US7706675B2 (en) | Camera | |
JP6512810B2 (ja) | 撮像装置および制御方法とプログラム | |
US9761010B2 (en) | Tracking apparatus | |
JP4019200B2 (ja) | 画像表示器付きカメラ | |
JPH11355617A (ja) | 画像表示器付きカメラ | |
KR20070086061A (ko) | 카메라 및 카메라의 화상처리방법 | |
JP2011030008A (ja) | 撮像装置 | |
US11509816B2 (en) | Image processing apparatus, image pickup apparatus, and control method of image processing apparatus | |
US20210051266A1 (en) | Image capture apparatus and control method thereof | |
JP2021124669A (ja) | 電子機器 | |
JP2021047291A (ja) | 画像処理装置、撮像装置および制御方法 | |
JP4506779B2 (ja) | 撮像装置及びプログラム | |
JP4586707B2 (ja) | 画像処理装置、電子カメラおよび画像処理プログラム | |
JP4842919B2 (ja) | 表示装置、撮影装置、および表示方法 | |
JP7500217B2 (ja) | 電子機器 | |
JP2011211531A (ja) | 撮像装置 | |
US20200177814A1 (en) | Image capturing apparatus and method of controlling image capturing apparatus | |
JP6834988B2 (ja) | 制御装置 | |
JP2019144502A (ja) | 焦点検出装置および焦点検出方法 | |
JP3294608B2 (ja) | 画像表示装置 | |
JP2002258344A (ja) | カメラ | |
US11050923B2 (en) | Imaging apparatus and control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210430 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210430 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220228 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220405 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220506 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7071569 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |