JP2021039167A - 画像処理装置及び画像処理装置の制御方法 - Google Patents
画像処理装置及び画像処理装置の制御方法 Download PDFInfo
- Publication number
- JP2021039167A JP2021039167A JP2019158662A JP2019158662A JP2021039167A JP 2021039167 A JP2021039167 A JP 2021039167A JP 2019158662 A JP2019158662 A JP 2019158662A JP 2019158662 A JP2019158662 A JP 2019158662A JP 2021039167 A JP2021039167 A JP 2021039167A
- Authority
- JP
- Japan
- Prior art keywords
- region
- pupil
- designated
- image
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 46
- 210000001747 pupil Anatomy 0.000 claims abstract description 143
- 238000003384 imaging method Methods 0.000 claims abstract description 5
- 238000001514 detection method Methods 0.000 claims description 65
- 210000000887 face Anatomy 0.000 claims description 5
- 230000008859 change Effects 0.000 abstract description 4
- 230000008569 process Effects 0.000 description 39
- 210000000056 organ Anatomy 0.000 description 11
- 238000004891 communication Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 230000007704 transition Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 3
- 210000003128 head Anatomy 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- -1 silver halide Chemical class 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- Automatic Focus Adjustment (AREA)
Abstract
Description
図2はカメラ制御部131の本発明の実施例1に関する動作を示すフローチャートである。図2の処理は、フレーム毎の画像が生成される度に行われるものとして説明するが、所定数のフレームごとに行うなど適宜変更可能である。
図3はS208でカメラ制御部131によって実行される瞳もしくは顔の自動選択処理を説明するフローチャートである。
図4は、図2のフローチャートで示した表示枠の表示例を示したものであり、表示部171に表示される顔枠および瞳枠の例となる。
図5はS206でカメラ制御部131によって実行される、左右どちらの瞳を指定したかの判別処理を説明するフローチャートである。
図6はカメラ制御部131によって実行される、顔以外の領域を指定したときの処理を説明するフローチャートである。
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。
124 カメラ信号処理回路
131 カメラ制御部
141 顔情報検出部
142 器官情報検出部
151 自動選択部
152 表示枠設定部
153 記憶部
171 表示部
172 タッチパネル
Claims (14)
- 撮像素子から出力された画像信号の画像において第1の領域を検出する第1の検出手段と、
前記画像において、前記第1の領域に含まれる、瞳に対応する1つ以上の第2の領域を検出する第2の検出手段と、
ユーザ操作による領域指定の指示を受け付けて、画像内で1つの領域を指定する指定手段と、
前記指定手段で指定した領域に対応する被写体をピントを合わせる被写体として設定する設定手段と、を有し、
前記指定手段は、前記第1の検出手段により前記第1の領域が検出されている場合、前記第2の領域の検出結果に関わらず、前記第1の領域に基づいた領域で前記瞳の指定を受け付けることを特徴とする画像処理装置。 - 前記第1の領域は顔に対応する領域であることを特徴とする、請求項1に記載の画像処理装置。
- 前記顔の角度に基づいて、検出できていない瞳に対応する第2の領域を推定する手段を有することを特徴とする、請求項1または2に記載の画像処理装置。
- 前記指定手段は、前記第2の領域の1つを指定されたが、その指定領域が非検出の場合、前記第1の領域を指定し、その後、前記第1の領域の前に指定していた前記第2の領域の1つが検出できた場合、その前記第2の領域の1つへの指定に切り替えることを特徴とする、請求項1乃至3のいずれか1項に記載の画像処理装置。
- 撮像素子から出力された画像信号を表示し、かつタッチパネルを備える表示部をさらに備え、前記指定手段は、前記表示部にユーザがタッチした位置に基づき、前記第2の領域の中から1つの領域を指定することを特徴とする、請求項1乃至4のいずれか1項に記載の画像処理装置。
- 前記第1、第2のうち少なくとも1つの領域の状態に基づき、前記第2の領域の中から1つの領域を指定するか否かの判断を行う判断手段をさらに備え、前記判断手段が指定すると判断した場合に、前記指定手段は前記第2の領域の中から1つの領域を指定することを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。
- 指定した領域の指定を解除する解除手段をさらに持つことを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 前記解除手段は、指定してから所定の時間を経過しても指定した領域が検出できない場合、前記指定手段で指定した領域の指定を解除することを特徴とする請求項7に記載の撮像装置。
- 前記解除手段は、前記第1の検出手段によって前記第1の領域が検出されなくなった場合には、前記指定手段で指定した領域の指定を解除することを特徴とする請求項7または8に記載の画像処理装置。
- 前記指定手段は、前記表示部にユーザがタッチした位置に対し、距離が近い方の瞳に対応する第2の領域を指定することを特徴とする請求項5に記載の画像処理装置。
- 前記領域の状態とは、領域の大きさ、位置、角度、信頼性、色、輝度、ボケ量、ブレ量の少なくとも一つであることを特徴とする請求項6に記載の画像処理装置。
- 前記第1の検出手段は複数の顔に対応する領域を検出し、また第2の検出手段は複数の顔それぞれに含まれる、瞳に対応する領域を検出することを特徴とする請求項1乃至11のいずれか1項に記載の画像処理装置。
- 前記指定手段が第1の領域と瞳のどちらでもない領域を新しく指定した場合、前記解除手段は前記第1もしくは第2の領域への指定を解除することを特徴とする請求項7乃至9のいずれか1項に記載の画像処理装置。
- 撮像素子から出力された画像信号において第1の領域を検出する第1の検出ステップと、
前記画像において、前記第1の領域に含まれる、瞳に対応する1つ以上の第2の領域を検出する第2の検出ステップと、
ユーザ操作による領域指定の指示を受け付けて、画像内で1つの領域を指定する指定ステップと、
前記指定ステップで指定した領域に対応する画像信号に基づいてフォーカスレンズの駆動を制御する制御ステップと、を有し、
前記指定ステップは、前記第1の検出手段により前記第1の領域が検出されている場合、前記第2の領域の検出結果に関わらず、前記第1の領域に基づいた領域で前記瞳の指定を受け付けることを特徴とする画像処理装置の制御方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019158662A JP7418104B2 (ja) | 2019-08-30 | 2019-08-30 | 画像処理装置及び画像処理装置の制御方法 |
US17/002,138 US11438498B2 (en) | 2019-08-30 | 2020-08-25 | Image processing apparatus and method for controlling image processing apparatus |
US17/929,632 US11812133B2 (en) | 2019-08-30 | 2022-09-02 | Image processing apparatus and method for controlling image processing apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019158662A JP7418104B2 (ja) | 2019-08-30 | 2019-08-30 | 画像処理装置及び画像処理装置の制御方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021039167A true JP2021039167A (ja) | 2021-03-11 |
JP2021039167A5 JP2021039167A5 (ja) | 2022-09-02 |
JP7418104B2 JP7418104B2 (ja) | 2024-01-19 |
Family
ID=74680482
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019158662A Active JP7418104B2 (ja) | 2019-08-30 | 2019-08-30 | 画像処理装置及び画像処理装置の制御方法 |
Country Status (2)
Country | Link |
---|---|
US (2) | US11438498B2 (ja) |
JP (1) | JP7418104B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117061869A (zh) * | 2018-12-28 | 2023-11-14 | 株式会社尼康 | 电子设备、照相机以及程序 |
JP7418104B2 (ja) * | 2019-08-30 | 2024-01-19 | キヤノン株式会社 | 画像処理装置及び画像処理装置の制御方法 |
JP2022131706A (ja) * | 2021-02-26 | 2022-09-07 | キヤノン株式会社 | 画像処理装置およびその制御方法、撮像装置、プログラム |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001215403A (ja) * | 2000-02-01 | 2001-08-10 | Canon Inc | 撮像装置および焦点の自動検出方法 |
US20080239139A1 (en) * | 2007-03-30 | 2008-10-02 | Samsung Electronics Co.; Ltd | Mobile communication terminal and method for displaying image using focus information thereof |
JP2009037067A (ja) * | 2007-08-02 | 2009-02-19 | Canon Inc | 撮像装置及びその制御方法 |
US20120147252A1 (en) * | 2010-12-10 | 2012-06-14 | Keiji Kunishige | Imaging device and af control method |
WO2015045911A1 (ja) * | 2013-09-24 | 2015-04-02 | ソニー株式会社 | 撮影装置、撮影方法、およびプログラム |
US20160295100A1 (en) * | 2015-04-03 | 2016-10-06 | Canon Kabushiki Kaisha | Focus detection apparatus and control method therefor |
JP2016197179A (ja) * | 2015-04-03 | 2016-11-24 | キヤノン株式会社 | 焦点検出装置およびその制御方法 |
CN108093170A (zh) * | 2017-11-30 | 2018-05-29 | 广东欧珀移动通信有限公司 | 用户拍照方法、装置及设备 |
JP2019120748A (ja) * | 2017-12-28 | 2019-07-22 | キヤノン株式会社 | 電子機器及びその制御方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5156108B2 (ja) * | 2011-04-23 | 2013-03-06 | オリンパスイメージング株式会社 | 撮像装置および撮像方法 |
JP5911557B2 (ja) | 2014-12-16 | 2016-04-27 | オリンパス株式会社 | 撮像装置 |
JP6186521B2 (ja) * | 2014-12-26 | 2017-08-23 | 富士フイルム株式会社 | 合焦制御装置、撮像装置、合焦制御方法、及び合焦制御プログラム |
JP2018207309A (ja) * | 2017-06-05 | 2018-12-27 | オリンパス株式会社 | 撮像装置、撮像方法およびプログラム |
JP7418104B2 (ja) * | 2019-08-30 | 2024-01-19 | キヤノン株式会社 | 画像処理装置及び画像処理装置の制御方法 |
-
2019
- 2019-08-30 JP JP2019158662A patent/JP7418104B2/ja active Active
-
2020
- 2020-08-25 US US17/002,138 patent/US11438498B2/en active Active
-
2022
- 2022-09-02 US US17/929,632 patent/US11812133B2/en active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001215403A (ja) * | 2000-02-01 | 2001-08-10 | Canon Inc | 撮像装置および焦点の自動検出方法 |
US20080239139A1 (en) * | 2007-03-30 | 2008-10-02 | Samsung Electronics Co.; Ltd | Mobile communication terminal and method for displaying image using focus information thereof |
JP2009037067A (ja) * | 2007-08-02 | 2009-02-19 | Canon Inc | 撮像装置及びその制御方法 |
US20120147252A1 (en) * | 2010-12-10 | 2012-06-14 | Keiji Kunishige | Imaging device and af control method |
JP2012123301A (ja) * | 2010-12-10 | 2012-06-28 | Olympus Imaging Corp | 撮像装置 |
CN102572269A (zh) * | 2010-12-10 | 2012-07-11 | 奥林巴斯映像株式会社 | 摄像装置以及af控制方法 |
WO2015045911A1 (ja) * | 2013-09-24 | 2015-04-02 | ソニー株式会社 | 撮影装置、撮影方法、およびプログラム |
US20160295100A1 (en) * | 2015-04-03 | 2016-10-06 | Canon Kabushiki Kaisha | Focus detection apparatus and control method therefor |
JP2016197179A (ja) * | 2015-04-03 | 2016-11-24 | キヤノン株式会社 | 焦点検出装置およびその制御方法 |
CN108093170A (zh) * | 2017-11-30 | 2018-05-29 | 广东欧珀移动通信有限公司 | 用户拍照方法、装置及设备 |
JP2019120748A (ja) * | 2017-12-28 | 2019-07-22 | キヤノン株式会社 | 電子機器及びその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7418104B2 (ja) | 2024-01-19 |
US20210067685A1 (en) | 2021-03-04 |
US11812133B2 (en) | 2023-11-07 |
US11438498B2 (en) | 2022-09-06 |
US20220417423A1 (en) | 2022-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9888182B2 (en) | Display apparatus | |
JP4884417B2 (ja) | 携帯型電子装置及びその制御方法 | |
JP5967432B2 (ja) | 処理装置、処理方法、及び、プログラム | |
JP6512810B2 (ja) | 撮像装置および制御方法とプログラム | |
CN108377329B (zh) | 摄像装置及其控制方法 | |
JP7484866B2 (ja) | ブレ補正装置、交換レンズ、撮像装置及び像ブレ補正方法 | |
US11812133B2 (en) | Image processing apparatus and method for controlling image processing apparatus | |
US11450131B2 (en) | Electronic device | |
US9451149B2 (en) | Processing apparatus, processing method, and program | |
JP2021105694A (ja) | 撮像装置およびその制御方法 | |
JP6357646B2 (ja) | 撮像装置 | |
JP6465705B2 (ja) | 動きベクトル検出装置、動体角速度算出装置、撮像装置およびレンズ装置 | |
JP6326631B2 (ja) | 撮像装置 | |
JP6465566B2 (ja) | 撮像装置及び撮像方法 | |
JP5744527B2 (ja) | 撮像装置及びその制御方法 | |
JP7277149B2 (ja) | 撮像装置及びその制御方法 | |
JP6231768B2 (ja) | 撮像装置及びその制御方法 | |
US10951829B2 (en) | Image capturing apparatus and method for controlling display | |
US20230106750A1 (en) | Image capturing apparatus for photometry, control method, and storage medium | |
JP6724395B2 (ja) | 画像表示制御装置、画像表示制御方法及び画像表示制御プログラム | |
JP2008178031A (ja) | 撮像装置 | |
JP2021040183A (ja) | 画像処理装置及び画像処理方法 | |
JP2016122132A (ja) | 像振れ補正装置並びにその制御方法、プログラム及び記憶媒体 | |
JP2018056650A (ja) | 光学装置、撮像装置および制御方法 | |
JP2020052400A (ja) | ズーム制御装置およびその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220825 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220825 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230525 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230704 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230828 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231003 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231130 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231205 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20231213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231228 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7418104 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |