JP2016127525A - 撮像装置およびその制御方法、並びにプログラム - Google Patents

Abstract

【課題】自分撮りを行う撮影状況であってもユーザーが意図するタイミングで撮影することができる撮像装置を提供する。【解決手段】撮像装置１００は、画像データを取得する撮像部１０１と、取得された画像データから顔を検出する顔検出部１０２と、自分撮りかを判定する自分撮り判定部１０３と、操作／表示部１０５とを備え、自分撮り判定部１０３の判定結果より自分撮り中であった場合に、顔検出部１０２により検出された顔の大きさによって操作／表示部の表示方法を変更する。【選択図】図１

Description

本発明は、撮像装置およびその制御方法、並びにプログラムに関し、特に、自分撮り（Ｓｅｌｆｉｅ）を行うときの操作性および表示性を向上する撮像装置およびその制御方法、並びにプログラムに関する。

従来、カメラで自分自身を撮影するには、カメラを三脚にセットし、当該カメラのセルフタイマーモード機能を利用して撮影することが一般的である。しかしながら、ユーザーが三脚を常時携帯するのは不便であり、またユーザーが撮影を所望する場所で常に三脚が使えるとは限らない。さらに、撮影する場所の周囲に人がおらず、ユーザーが他人に撮影をお願いするのが困難な場合もある。

そこで、近年は、ユーザー自身がカメラを手に保持した状態で自らを被写体として撮像を行う、いわゆる自分撮り（Ｓｅｌｆｉｅ）が行われている。

しかしながら、カメラで自分撮りを行うにはシャッター操作がしにくいという問題がある。近年は、タッチパネルでシャッター操作が可能なデジタルカメラもあるが、自分撮りを行うには従前よりシャッター操作が難しく、また手ぶれも起きやすい。

そこで、自分撮りモードとタイマーモードを併用して、シャッター操作から実際に撮影するまでに間隔をあけることで手ぶれを防止する撮像装置が提案されている（例えば特許文献１参照）。

また、撮影者の特定の表情を検出し、特定の表情を検出すると自動的に撮影を行う撮像装置が提案されている（例えば特許文献２参照）。

特開２００３−３１５９０１号公報 特開２０１１−５５２５１号公報

しかしながら、特許文献１に記載の方法では、自分撮りモードとタイマーモードを併用することから、ユーザーが意図するタイミングで撮影できないおそれがある。

また、特許文献２では、ユーザーが無意識に特定の表情をしてしまったり、特定の表情が正しく検出されない場合があり、ユーザーが意図するタイミングで撮影できないおそれがある。

本発明は、上記問題に鑑みて成されたものであり、自分撮りを行う撮影状況であってもユーザーが意図するタイミングで撮影することができる撮像装置を提供することを目的とする。

上記目的を達成するために、本発明の撮像装置は、表示画面上へのタッチ操作による各種操作が可能な表示手段と、被写体像を前記表示手段に表示する撮像手段とを備える撮像装置において、前記撮像手段により取得された被写体像から人物の顔領域を検出する検出手段と、自分撮りが行われているか否かを判定する判定手段とを備え、前記表示手段は、前記判定手段により自分撮りが行われていると判定された場合に、前記検出手段により検出された人物の顔領域の大きさに応じて、操作用アイコンの表示を変更することを特徴とする。

本発明によれば、ユーザーが自分撮りをする際に、検出された顔の大きさに応じてユーザーの撮影状況を判断し、操作を受け付ける表示部の表示を適切なものに変更する。これにより、撮像装置の操作性を向上させることができ、自分撮りを行う撮影状況であってもユーザーが意図するタイミングで撮影することが可能となる。

本発明の第１の実施形態に係る撮像装置の概略構成を示すブロック図である。 図１における操作／表示部のタッチパネルの表示例を示す図であり、（ａ）撮影機能設定アイコン及びシャッターアイコンが表示された状態、（ｂ）タイマー詳細設定メニューが表示された状態、（ｃ）撮影機能設定アイコンが表示されず、シャッターアイコンのみが拡大された状態を示す。 ユーザーの撮影状況に応じてパネル表示を適切な表示に変更する撮像装置の動作処理の流れを示すフローチャートである。 （ａ）ユーザーが手前に撮像装置を持っている撮影状況の一例を示す図、（ｂ）図４（ａ）に示す撮影状況で得られる画像データの一例を示す図、（ｃ）図４（ａ）に示す撮影状況で操作／表示部のタッチパネルの表示例を示す図である。 （ａ）ユーザーが撮像装置を持っている片手を遠くに伸ばしている撮影状況の一例を示す図、（ｂ）図５（ａ）に示す撮影状況で得られる画像データの一例を示す図、（ｃ）図５（ａ）に示す撮影状況での操作／表示部のタッチパネルの表示例を示す図である。 ユーザーの撮像状況に応じてタッチ操作で有効となる機能を制限する撮像装置の動作処理の流れを示すフローチャートである。 本発明の第３の実施形態に係る撮像装置の概略構成を示すブロック図である。 第二のシャッター操作で撮影するようにユーザーにアシスト表示を行う撮像装置の動作処理の流れを示すフローチャートである。 図７における笑顔検出部による笑顔の検出方法を説明するための図であり、（ａ）通常の顔、（ｂ）笑顔を示す。 （ａ）ユーザーが手前に撮像装置を持っている撮影状況の一例を示す図、（ｂ）図１０（ａ）に示す撮影状況で得られる画像データの一例を示す図、（ｃ）図１０（ａ）に示す撮影状況での表示部の表示例を示す図である。 （ａ）ユーザーが撮像装置を持っている片手を遠くに伸ばしている撮影状況の一例を示す図、（ｂ）図１１（ａ）に示す撮影状況で得られる画像データの一例を示す図、（ｃ）図１１（ａ）に示す撮影状況での表示部の表示例を示す図である。 ユーザーの撮影状況に応じて第二のシャッター操作を制限する撮像装置の動作処理の流れを示すフローチャートである。 図１０（ａ）に示す撮影状況で第二のシャッター操作であるスマイルシャッターが無効であることを示すアシスト表示がなされた表示部の一例を示す図である。

以下、本発明の実施の形態を図面を参照して詳細に説明する。

［第１の実施形態］
図１は、本発明の第１の実施形態に係る撮像装置の概略構成を示すブロック図である。

図１において、撮像装置１００は、撮像部１０１、顔検出部１０２、自分撮り判定部１０３、操作／表示部１０４、および記録部１０５を備える。なお、図示の各部以外の部分については省略している。

撮像部１０１は、不図示の撮影レンズを介して撮像素子が捉えた被写体像を画像データとして取得し、顔検出部１０２に出力する。また、撮像部１０１は、ユーザーにより操作／表示部１０４等を介して設定された各種撮影機能に応じて被写体像を取得し、画像データとして記録部１０５に送る。

顔検出部１０２は、撮像部１０１から入力された画像データに対して人物の顔領域の検出を行う。例えば、顔検出部１０２は、入力された画像データから鼻、口や目などの顔の構成要素に相当する形状を抽出し、両目の中間を通過する延長線上に鼻と口が存在する領域を検出する。そして、両目の大きさとそれらの距離から顔の大きさを推定し、鼻の中心に相当する位置を基準として、推定した大きさの領域で囲んだ領域を顔領域とする。なお、顔検出部１０２における顔検出方法については、上述した方法に限定されるものではなく、既知の方法で構わない。

自分撮り判定部１０３は、自分撮りが行われるかどうかを判定する。自分撮りの判定方法は既知の方法でよい。例えば、特開２０１０−８１３５７号公報に開示されているように、画像データから顔領域と腕領域を検出し、検出した顔領域と腕領域の位置関係から、撮像者が撮像装置を手で保持した状態で自分撮りを行っているか否かを判定する。本実施形態では、撮像装置１００が自分撮りモードを備え、自分撮り判定部１０３が自分撮りモードの設定有無に応じて判定する。

操作／表示部１０４は、例えばタッチパネル等を備え、撮像部１０１で取得された画像を当該タッチパネルに表示したり、表示画面上の操作用アイコンへのタッチ操作に応じてシャッター操作や撮影機能の設定等の各種操作を受け付ける。また、操作／表示部１０４は、タッチパネル上でのシャッター操作が行われると撮像部１０１に撮像指示を送ると共に、記録部１０５に画像データの記録指示を送る。また、操作／表示部１０４は、タッチパネル上で撮影機能の設定が行われると撮像部１０１に撮影機能情報を送る。

記録部１０５は、例えば内蔵メモリまたは撮像装置１００に着脱可能に構成された記録媒体を備え、操作／表示部１０４から記録指示情報を受信すると、当該内蔵メモリまたは当該記録媒体に画像データを記録する。

図２（ａ）〜図２（ｃ）は、図１における操作／表示部１０４のタッチパネルの表示例を示す図である。

図２（ａ）において、操作／表示部１０４のタッチパネルには、操作用アイコンとして、シャッターアイコン（シャッターボタン）３０３、タイマー設定アイコン３０４、およびマクロ設定アイコン３０５が表示されている。また、操作／表示部１０４のタッチパネルの近傍には、撮像部１０１の撮影レンズ３０２が配置されている。

操作／表示部１０４は、シャッターアイコン３０３の表示されている領域がタッチされるとシャッター操作とみなす。また、操作／表示部１０４は、タイマー設定アイコン３０４やマクロ設定アイコン３０５などの撮影機能の設定アイコンの表示されている領域がタッチされると、その撮影機能の詳細な設定が可能なメニュー表示を行う。例えば、タイマー設定アイコン３０４がタッチされた場合、図２（ｂ）のようにタイマー詳細設定メニュー３２４が表示される。タイマー詳細設定メニュー３２４上でユーザーが「なし」、「２秒」、「１０秒」のいずれかを選択すると、選択された設定情報が撮影機能情報として操作／表示部１０４から撮像部１０１に送信される。また、マクロ設定アイコン３０５は、マクロ撮影の詳細な設定を行うための操作アイコンである。これらタイマー設定アイコン３０４、マクロ設定アイコン３０５を含む撮影機能を設定するためのアイコンを撮影機能設定アイコンと総称する。

本実施形態では、操作／表示部１０４は、タッチパネル上のアイコン表示をユーザーの撮影状況に応じて変更する制御を行う。ここでいうユーザーの撮影状況には、例えば、ユーザーが手前にカメラを持っている場合、より広角に撮影しようとユーザーがカメラを持っている片手を遠くに伸ばしている場合が挙げられる。

ユーザーが手前にカメラを持っている場合とは、撮影前であり、撮影機能の設定中という撮影状況が想定される。そこで、操作／表示部１０４は、タッチパネルに上述した撮影機能設定アイコンを表示する。また、ユーザーが手前にカメラを持ったまま撮影する撮影状況も想定される。そこで、操作／表示部１０４は、図２（ａ）に示すように、撮影機能設定アイコンと合わせてシャッターアイコン３０３も表示する。

一方、ユーザーがカメラを持っている片手を遠くに伸ばしている場合とは、ユーザーが撮影機能の設定を終えて、より広角に撮影をしようと構図を調整し、決まればシャッター操作をする撮影状況が想定される。このとき、手を伸ばしてカメラを持っているため、操作／表示部１０４のタッチパネル上のシャッターアイコン３０３を正確に押すことが難しくなる。そこで、シャッターアイコン３０３を拡大表示することにより、シャッターアイコン３０３へのタッチをしやすくする。また、この撮影状況では、既に撮影機能の設定が終了していると推定されるため、撮影機能設定アイコンを非表示とする。このときのパネル表示は、例えば図２（ｃ）のように、シャッターアイコン３０３が拡大表示され、撮影機能アイコンが非表示になっている。

以上のように、ユーザーの撮影状況に応じてパネル表示を適切な表示に変更することでユーザーにとって操作性が向上し、手を伸ばしての撮影時も手ブレが抑えられ、所望の画像を撮影できるようになる。

次に、ユーザーの撮影状況に応じてパネル表示を適切な表示に変更する撮像装置１００の動作処理について図３を参照して説明する。

図３は、ユーザーの撮影状況に応じてパネル表示を適切な表示に変更する撮像装置１００の動作処理の流れを示すフローチャートである。

ステップＳ２０１では、顔検出部１０２は、撮像部１０１から入力された画像データに対して人物の顔領域の検出を行い、１つ以上の顔領域を検出できた場合（ステップＳ２０２でＹＥＳ）にはステップＳ２０３に進む。一方、顔領域を検出できなかった場合（ステップＳ２０２でＮＯ）にはステップＳ２０７に進む。

ステップＳ２０３では、自分撮り判定部１０３は、撮像装置１００に自分撮りモードが設定されているか否かを判定し、自分撮りモードが設定されている場合（ステップＳ２０４でＹＥＳ）にはステップＳ２０５に進む。一方、自分撮りモードが設定されていない場合（ステップＳ２０４でＮＯ）にはステップＳ２０７に進む。

ステップＳ２０５では、顔検出部１０２は、ステップＳ２０１で検出した顔領域の大きさが顔幅閾値以下であるか否かを判定する。本実施形態では、ユーザーがカメラを持っている片手を遠くに伸ばしているかどうかを判定するために、顔検出部１０２により検出された顔領域の大きさを利用する。例えば、検出された顔領域の大きさが閾値（顔幅閾値）以下であった場合に、ユーザーがカメラを持っている片手を遠くに伸ばしている撮影状況にあると判断する。本実施形態において顔幅閾値は、画像の水平方向のサイズで判断し、水平方向の画像サイズが１９２０×１０８０とするとその半分の９６０とする。また、顔幅閾値は、ズーム操作があった場合には、その倍率に応じて値が調整される。本実施形態においては、ワイド端での顔幅閾値を９６０とし、９６０×ズーム倍率を顔幅閾値として用いる。例えば、ズーム倍率１．２倍の操作が行われた場合、顔幅閾値は９６０×１．２＝１１５２となる。

ステップＳ２０５の判定結果から、顔領域の大きさが顔幅閾値以下であった場合にはステップＳ２０６に進む一方、顔幅閾値より大きい場合にはステップＳ２０７に進む。

ステップＳ２０６では、操作／表示部１０４は、顔検出部１０２で検出された顔領域の大きさが顔幅閾値以下であることから、ユーザーがカメラを持っている片手を遠くに伸ばしている撮影状況にあると判断する。そして、タッチパネルに撮影機能設定アイコンを表示せず、シャッターアイコン３０３のみを拡大表示して（ステップＳ２０６）、ステップＳ２０９へ進む。

ステップＳ２０７では、操作／表示部１０４は、顔検出部１０２で検出された顔領域の大きさが顔幅閾値より大きいことから、ユーザーが手前にカメラを持っている撮影状況にあると判断する。そして、タッチパネルに撮影機能設定アイコンを表示（ステップＳ２０７）すると共に、シャッターアイコン３０３を通常のサイズで表示（ステップＳ２０８）してステップＳ２０８へ進む。

ステップＳ２０９では、操作／表示部１０４は、タッチパネル上の撮影機能設定アイコンに対してタッチ操作があったか否かを判断する。タッチ操作があった場合にはステップＳ２１０に進む一方、タッチ操作がなかった場合にはステップＳ２１１に進む。

ステップＳ２１０では、操作／表示部１０４は、ステップＳ２０９で操作された撮影機能の詳細な設定が可能なメニュー表示を行い、当該メニュー表示に対応する撮影機能の設定変更を受け付けて、ステップＳ２１１へ進む。

ステップＳ２１１では、操作／表示部１０４は、シャッターアイコン３０３に対するシャッター（タッチ）操作があったか否かを判断し、シャッター操作があった場合にはステップＳ２１２に進む一方、シャッター操作がなかった場合には本処理を終了する。

ステップＳ２１２では、シャッター操作があったことから、操作／表示部１０４は記録部１０５に記録指示情報を出力し、記録部１０５は画像データの記録を行って、本処理を終了する。

以上のように、本実施形態では、ユーザーの撮影状況を判断し、操作を受け付けるタッチパネルの表示を適切なものに変更する。これにより、ユーザーの操作性が向上し、ユーザーが意図するタイミングで撮影を行うことが可能となり、さらにシャッター操作時の手ブレの影響を低減することが可能となる。

次に、上述した処理における具体的な表示例について図４（ａ）〜図４（ｃ）、図５（ａ）〜図５（ｃ）を用いて説明する。

図４（ａ）は、ユーザー４１０が手前に撮像装置１００を持っている撮影状況の一例を示す図である。図４（ａ）に示す撮影状況では、例えば図４（ｂ）に示す画像データ４２０が得られる。

顔検出部１０２は、画像データ４２０から顔検出を行い、ユーザー４１０の顔領域４１１を検出する。このときの顔領域４１１の水平サイズは１５００であったものとする。そして、撮像装置１００に自分撮りモードが設定されていることから、顔検出部１０２は、検出した顔領域の大きさが顔幅閾値以下かを判定する。検出した顔領域の大きさは１５００であり、上述した顔幅閾値９６０より大きいため、図４（ｃ）に示すように、操作／表示部１０４のタッチパネルには、撮影機能設定アイコンとして、タイマー設定アイコン３０４とマクロ設定アイコン３０５が表示される。また、操作／表示部１０４のタッチパネルには、シャッターアイコン３０３が通常のサイズで表示される。

図５（ａ）は、ユーザー４１０が撮像装置１００を持っている片手を遠くに伸ばしている撮影状況の一例を示す図である。図５（ａ）に示す撮影状況では、例えば図５（ｂ）に示す画像データ５２０が得られる。

顔検出部１０２は、画像データ５２０から顔検出を行い、ユーザー４１０の顔領域５２１を検出する。このときの顔領域５２１の水平サイズは６００であったものとする。そして、撮像装置１００に自分撮りモードが設定されていることから、顔検出部１０２は、検出した顔領域の大きさが顔幅閾値以下かを判定する。その結果、検出した顔領域の大きさは６００であり、上述した顔幅閾値９６０以下となるため、図５（ｃ）に示すように、操作／表示部１０４のタッチパネルには、撮影機能設定アイコンが非表示となり、シャッターアイコン３０３が拡大表示される。

上記第１の実施形態によれば、ユーザーが自分撮りをする際に、顔検出部１０２により検出された顔の大きさに応じてユーザーの撮影状況を判断し、操作を受け付けるタッチパネルの表示を適切なものに変更する。これにより、撮像装置の操作性を向上させることができ、自分撮りを行う撮影状況であってもユーザーが意図するタイミングで撮影することが可能となる。

［第２の実施形態］
次に、本発明の第２の実施形態として、撮像装置が、タッチパネル上の操作用アイコン以外の任意の領域へのタッチ操作で有効となる機能を備える場合に、撮影状況に応じて当該機能を制限する撮像装置について説明する。

近年のデジタルカメラには、タッチパネル上でタッチされた任意の領域に対してフォーカスを合わせる機能（タッチフォーカス機能）を備えるものがある。本実施形態の撮像装置にもタッチフォーカス機能が搭載されており、操作／表示部１０４のタッチパネルに表示された被写体像上でタッチされた領域の位置情報を撮像部１０１に出力し、撮像部１０１がその位置情報に応じてフォーカスを合わせる。このとき、撮像装置はユーザーが自分撮りをしていると判断した場合、上記第１の実施形態でも述べたように、ユーザーが撮影機能の設定を終えているものと推定される。そのため、タッチパネル上の任意の領域がタッチされた場合には誤操作である可能性が高いので、タッチフォーカス機能を無効とし、フォーカス位置を変更しないように制限する。なお、第１の実施形態と同一の構成要素には、同一の符号を付して、それらの説明を省略する。

図６は、ユーザーの撮像状況に応じてタッチ操作で有効となる機能を制限する撮像装置１００の動作処理の流れを示すフローチャートである。なお、本処理は、顔幅閾値を用いてタッチフォーカス機能の有効、無効が切り替わる以外は図３に示すフローチャートと同様の処理となる。

ステップＳ６０１では、顔検出部１０２は、撮像部１０１から入力された画像データに対して人物の顔領域の検出を行い、１つ以上の顔を検出できた場合（ステップＳ６０２でＹＥＳ）にはステップＳ６０３に進む。一方、顔領域を検出できなかった場合（ステップＳ６０２でＮＯ）にはステップＳ６０７に進む。

ステップＳ６０３では、自分撮り判定部１０３は、撮像装置１００に自分撮りモードが設定されているか否かを判定し、自分撮りモードが設定されている場合（ステップＳ６０４でＹＥＳ）にはステップＳ６０５に進む。一方、自分撮りモードが設定されていない場合（ステップＳ６０４でＮＯ）にはステップＳ６０７に進む。

ステップＳ６０５では、顔検出部１０２は、ステップＳ６０１で検出した顔領域の大きさが顔幅閾値以下であるか否かを判定する。ステップＳ６０５の判定方法については、図３のステップＳ２０５と同様であるため、省略する。

ステップＳ６０５の判定結果から、顔領域の大きさが顔幅閾値以下であった場合にはステップＳ６０５に進み、操作／表示部１０４がシャッターアイコン３０３を拡大表示する。一方、顔領域の大きさが顔幅閾値より大きかった場合にはステップＳ６０７に進む。

ステップＳ６０７では、操作／表示部１０４は、撮影機能設定アイコンを表示すると共に、シャッターアイコン３０３を通常のサイズで表示（ステップＳ６０８）してステップＳ６０９に進む。

ステップＳ６０９では、操作／表示部１０４は、タッチフォーカス操作があったか否かを判定する。タッチフォーカス操作があった場合にはステップＳ６１０に進む一方、タッチフォーカス操作がなかった場合にはステップＳ６１１に進む。

ステップＳ６１０では、タッチフォーカス操作があったことから、操作／表示部１０４のタッチパネルに表示された被写体像上でタッチされた領域の位置情報を操作／表示部１０４から撮像部１０１に送る。そして、撮像部１０１がその位置情報に応じてフォーカス位置を変更して（ステップＳ６１０）、ステップＳ６１１へ進む。

ステップＳ６１１では、操作／表示部１０４は、タッチパネル上の撮影機能設定アイコンに対するタッチ操作があったか否かを判断する。タッチ操作があった場合にはステップＳ６１２に進む一方、タッチ操作がなかった場合にはステップＳ６１３に進む。

ステップＳ６１２では、操作／表示部１０４は、ステップＳ２０９で操作された撮影機能の詳細な設定が可能なメニュー表示を行い、当該メニュー表示に対応する撮影機能の設定変更を受け付けて、ステップＳ６１３へ進む。

ステップＳ６１３では、操作／表示部１０４は、シャッターアイコン３０３に対するシャッター（タッチ）操作があったかを判断し、シャッター操作があった場合にはステップＳ２１２に進む一方、シャッター操作がなかった場合には本処理を終了する。

ステップＳ２１２では、シャッター操作があったことから、操作／表示部１０４は記録部１０５に記録指示情報を出力し、記録部１０５は画像データの記録を行って、本処理を終了する。

上記第２の実施形態によれば、ユーザーが自分撮りをする際に、顔検出部１０２により検出された顔の大きさに応じてユーザーの撮影状況を判断し、操作を受け付けるタッチパネルの表示を適切なものに変更する。さらに、アイコン表示以外をタッチすることで有効になる機能については、撮影状況から有効、無効を判断する。これにより、カメラを持っている片手を遠くに伸ばしている撮影状況で、誤ってタッチパネルをタッチしてしまった場合でも、当該タッチにより有効になる機能を無効とすることで、撮像装置の操作性を向上させることができる。

［第３の実施形態］
図７は、本発明の第３の実施形態に係る撮像装置の概略構成を示すブロック図である。

図７において、撮像装置２００は、撮像部１０１、顔検出部１０２、自分撮り判定部１０３、笑顔検出部２０４、シャッター操作部２０５、シャッター判定部２０６、操作／表示部１０４、および記録部１０５を備える。なお、図示の各部以外の部分については省略している。また、図７に示す部分と同一の部分については同一の符号を付して、その説明を省略する。

笑顔検出部２０４は、顔検出部１０２で検出された被写体像の顔領域から、被写体の人物の顔が特定の表情（本実施形態では笑顔とする）かどうかを判定する。例えば、顔領域において、図９（ａ）に示す２３点の特徴点を用いて口、目、眉毛、鼻などの顔の構成要素の具体的な形状や、これらの構成要素の位置情報を検出する。そして、検出した構成要素の形状や位置関係から笑顔か否かを判定し、図９（ｂ）に示すような特徴点が検出された場合に笑顔と判定する。笑顔検出部２０４が笑顔と判定すると、シャッター判定部２０６にシャッター指示を送る。

シャッター操作部２０５は、ユーザーがシャッター操作を行うための操作部であり、例えばシャッターボタンなどである。ユーザーによりシャッター操作部２０５に対する操作が行われると、シャッター操作部２０５からシャッター判定部２０６にシャッター指示を送る。

シャッター判定部２０６は、笑顔検出部２０４またはシャッター操作部２０５からのシャッター指示情報に応じてシャッター操作が行われたかを判定する。シャッター判定部２０６は、シャッター操作が行われたと判定した場合、撮像部１０１に撮像指示を送ると共に、記録部１０５に対して画像データの記録指示を送る。

また、シャッター判定部２０６は、顔検出部１０２および自分撮り判定部１０３における判定結果から、ユーザーにシャッター操作のアシスト表示を行うか否かを判定する。

表示部２０７は、例えば液晶パネル等を備え、撮像部１０１で取得された画像を表示したり、シャッター判定部２０６からシャッター操作のアシスト表示の指示があれば、当該指示に応じた表示を行う。

撮像装置２００にはシャッター操作手段が２つあり、ユーザーはいずれかのシャッター操作を行うことで撮影が可能である。１つ目の方法は、シャッター操作部２０５を用いた第一のシャッター操作であり、例えば、シャッター操作部２０５のシャッターボタンを押し下げる操作である。２つ目の方法は、被写体像の人物の顔の表情変化に応じてシャッター操作がなされたと判断する第二のシャッター操作である。本実施形態では、表情変化として、被写体像の顔領域から被写体の人物の笑顔が検出されたときにシャッター操作がなされたと判断する（スマイルシャッター）。これら２つのシャッター操作は、撮影時には常に有効であるものとする。

上述した第一のシャッター操作は、ユーザーがシャッターボタンを直接操作するため、ユーザーが意図するシャッタータイミングを逃すことなく確実に撮影することが可能である。一方、第二のシャッター操作は、ユーザーが直接操作をしなくてもよいため、ユーザーが撮像装置から離れていてもシャッター操作が可能である。また、第二のシャッター操作は、撮像装置に触れることにより生じる手ぶれの影響をなくすこともできる。

このように、第一および第二のシャッター操作にはそれぞれの利点があり、状況によっていずれかの操作を使いわけることができる。例えば、自分撮りをする場合、より広角に撮影しようとカメラを持っている片手を遠くに伸ばして撮影するには第一のシャッター操作では操作が難しくなり、またカメラの保持状態も不安定でシャッター操作による手ぶれの影響も大きい。このような状況下では、第二のシャッター操作によって撮影するほうが好ましい。

そこで本実施形態では、上述した状況において、第二のシャッター操作で撮影するようにユーザーにアシスト表示を行う。

次に、第二のシャッター操作で撮影するようにユーザーにアシスト表示を行う撮像装置２００の動作処理について図８を参照して説明する。

図８は、第二のシャッター操作で撮影するようにユーザーにアシスト表示を行う撮像装置２００の動作処理の流れを示すフローチャートである。

ステップＳ８０１では、顔検出部１０２は、撮像部１０１から入力された画像データに対して人物の顔領域の検出を行い、１つ以上の顔領域が検出できた場合（ステップＳ８０２でＹＥＳ）にはステップＳ８０３に進む。一方、顔領域を検出できなかった場合（ステップＳ８０２でＮＯ）にはステップＳ８０７に進む。

ステップＳ８０３では、自分撮り判定部１０３は、撮像装置２００に自分撮りモードが設定されているか否かを判定し、自分撮りモードが設定されている場合（ステップＳ８０４でＹＥＳ）にはステップＳ８０５に進む。一方、自分撮りモードが設定されていない場合（ステップＳ８０４でＮＯ）にはステップＳ８０７に進む。

ステップＳ８０５では、顔検出部１０２は、ステップＳ８０１で検出した顔領域の大きさが第１の顔幅閾値以下であるか否かを判定する。本実施形態では、ユーザーがカメラを持っている片手を遠くに伸ばしているかどうかを判定するために、顔検出部１０２により検出された顔領域の大きさを利用する。例えば、検出された顔領域の大きさが閾値（第１の顔幅閾値）以下であった場合に、ユーザーがカメラを持っている片手を遠くに伸ばしている撮影状況にあると判断する。本実施形態において第１の顔幅閾値は、画像の水平方向のサイズで判断し、水平方向の画像サイズが１９２０×１０８０とするとその半分の９６０とする。また、顔幅閾値は、ズーム操作があった場合には、その倍率に応じて値が調整される。本実施形態においては、ワイド端での顔幅閾値を９６０とし、９６０×ズーム倍率を顔幅閾値として用いる。例えば、ズーム倍率１．２倍の操作が行われた場合、顔幅閾値は９６０×１．２＝１１５２となる。

ステップＳ８０５の判定結果から、顔領域の大きさが第１の顔幅閾値以下であった場合にはステップＳ８０６に進む一方、第１の顔幅閾値より大きい場合にはステップＳ８０７に進む。

ステップＳ８０６では、表示部２０７は、第二のシャッター操作で撮影するようにユーザーにアシスト表示し、ユーザーに第二のシャッター操作を促し、ステップＳ８０８に進む。

ステップＳ８０７では、シャッター判定部２０６は、第一および第二のシャッター操作のいずれかがあったか否かを判断し、シャッター操作があった場合にはステップＳ８０８に進む一方、シャッター操作がなかった場合には本処理を終了する。

ステップＳ８０８では、シャッター操作があったことから、記録部１０５は画像データの記録を行って、本処理を終了する。

以上のように、本実施形態では、ユーザーの撮影状況を判断し、適切なシャッター操作を促すように表示を変更する。具体的には、撮像装置に自分撮りモードが設定され、ユーザーがカメラを持っている片手を遠くに伸ばしている撮影状況にあると判断した場合には、第二のシャッター操作を促す。これにより、ユーザーが所望する広角で手ぶれの影響が少ない画像の撮影が可能となる。

次に、上述した処理における具体的な表示例について、図１０（ａ）〜図１０（ｃ）、図１１（ａ）〜図１１（ｄ）を用いて説明する。

図１０（ａ）は、ユーザー４１０が手前に撮像装置２００を持っている撮影状況の一例を示す図である。図１０（ａ）に示す撮影状況では、例えば図１０（ｂ）に示す画像データ４２０が得られる。

図１０（ｃ）において、撮像装置２００の筐体上部にはシャッター操作部２０５のシャッターボタンが配置され、表示部２０７の近傍には撮像部１０１の撮影レンズ３０２が配置されている。

顔検出部１０２は、画像データ４２０から顔検出を行い、ユーザー４１０の顔領域４１１を検出する。このときの顔領域４１１の水平サイズは１５００であったものとする。撮像装置２００に自分撮りモードが設定されていることから、顔検出部１０２は、検出した顔領域の大きさが第１の顔幅閾値以下かを判定する。検出した顔領域の大きさは１５００であり、第１の顔幅閾値９６０より大きいため、図１０（ｃ）に示すように、表示部２０７には第二のシャッター操作のアシスト表示が行われない。

図１１（ａ）は、ユーザー４１０が撮像装置２００を持っている片手を遠くに伸ばしている撮影状況の一例を示す図である。図１１（ａ）に示す撮影状況では、例えば図１１（ｂ）に示す画像データ５２０が得られる。

顔検出部１０２は、画像データ５２０から顔検出を行い、ユーザー４１０の顔領域５２１を検出する。このときの顔領域５２１の水平サイズは６００であったものとする。そして、撮像装置２００に自分撮りモードが設定されていることから、顔検出部１０２は、検出した顔領域の大きさが第１の顔幅閾値以下かを判定する。その結果、検出した顔の大きさは６００であり、第１の顔幅閾値９６０以下となるため、表示部２０７に第二のシャッター操作のアシスト表示が行われる。第二のシャッター操作のアシスト表示としては、例えば図１１（ｃ）に示すように、第二のシャッター操作であるスマイルシャッターが操作可能であることを示すアシスト表示５３０が表示される。

なお、上述したシャッター操作部２０５を用いた第一のシャッター操作には、タッチパネル上でのシャッター操作が含まれていてもよい。

上記第３の実施形態によれば、ユーザーが自分撮りをする際に、顔検出部１０２により検出された顔の大きさに応じてユーザーの撮影状況を判断し、適切なシャッター操作をユーザーに通知する。これにより、ユーザーが適切なシャッター操作が可能となり、所望の撮影を行うことができる。

［第４の実施形態］
次に、本発明の第４の実施形態として、ユーザーが自分撮りをする際に手を伸ばした状態でなく、手前に撮像装置を持っていると判断した場合に、第二のシャッター操作を制限する撮像装置について説明する。

本実施形態における撮像装置は、撮影状況の判断として、顔領域の大きさが第１の顔幅閾値より小さいか否かでユーザーが撮像装置をもっている片手を遠くに伸ばしているかを判断する。さらに、顔領域の大きさが第１の顔幅閾値とは異なる第２の顔幅閾値より大きいか否かでユーザーが手前に撮像装置をもっているかを判断する。そして、手前に撮像装置を持っていると判断した場合には、第二のシャッター操作を制限し、第二のシャッター操作が制限されていることを表示部に表示する。

ユーザーが手前に撮像装置をもっている状況では、自分撮りを開始する前に撮像装置の撮影条件などの設定をしている可能性が高い。また、撮像装置を手前にもった状態で撮影する場合には、ユーザーが撮像装置をしっかり保持できるので、第一のシャッター操作による手ブレの影響も少ない。これらを鑑みて、撮像装置を手前にもっている場合には、あえて第二のシャッター操作を制限し、ユーザーの無意識な表情変化や表情の誤検出による意図しないタイミングでのシャッター操作を防止する。なお、第３の実施形態と同一の構成要素には、同一の符号を付して、それらの説明を省略する。

図１２は、ユーザーの撮影状況に応じて第二のシャッター操作を制限する撮像装置２００の動作処理の流れを示すフローチャートである。なお、本処理は、第２の顔幅閾値を用いて第二のシャッター操作を無効にする動作以外は図８に示すフローチャートと同様の処理となる。

ステップＳ１２０１では、顔検出部１０２は、撮像部１０１から入力された画像データに対して人物の顔領域の検出を行い、１つ以上の顔を検出できた場合（ステップＳ１２０２でＹＥＳ）にはステップＳ１２０３に進む。一方、顔領域を検出できなかった場合（ステップＳ１２０２でＮＯ）にはステップＳ１２０９に進む。

ステップＳ１２０３では、自分撮り判定部１０３は、撮像装置２００に自分撮りモードに設定されているか否かを判定し、自分撮りモードが設定されている場合（ステップＳ１２０４でＹＥＳ）にはステップＳ１２０５に進む。一方、自分撮りモードが設定されていない場合（ステップＳ１２０４でＮＯ）にはステップＳ１２０９に進む。

ステップＳ１２０５では、顔検出部１０２は、ステップＳ１２０１で検出した顔領域の大きさが第１の顔幅閾値以下であるか否かを判定する。ステップＳ１２０５の判定方法については、図３のステップＳ２０５と同様であるため、省略する。

ステップＳ１２０５の判定結果から、顔領域の大きさが第１の顔幅閾値以下であった場合にはステップＳ１２０６に進み、表示部２０７が第二のシャッター操作が可能であることを表示する。一方、顔領域の大きさが第１の顔幅閾値より大きい場合にはステップＳ１２０７に進む。

ステップＳ１２０７では、顔検出部１０２は、ステップＳ１２０１で検出された顔領域の大きさが第２の顔幅閾値以上であるか否かを判定する。この判定結果から、顔領域の大きさが第２の顔幅閾値以上であった場合にはステップＳ１２０８に進む一方、顔領域の大きさが第２の顔幅閾値未満の場合にはステップＳ１２０９に進む。

ステップＳ１２０８では、表示部２０７は、第二のシャッター操作が無効であることを表示して、ステップＳ１２０９へ進む。

ステップＳ１２０９では、シャッター判定部２０６は、第一および第二のシャッター操作のいずれかがあったか否かを判断し、シャッター操作があった場合にはステップＳ１２１０に進む一方、シャッター操作がなかった場合には本処理を終了する。

ステップＳ１２１０では、シャッター操作があったことから、記録部１０５は画像データの記録を行って、本処理を終了する。

次に、上述した処理における具体的な表示例について、図１０（ａ）〜図１０（ｃ）、図１３を用いて説明する。

上記第３の実施形態と同様に、図１０（ａ）に示すように、ユーザー４１０が手前に撮像装置２００をもっており、図１０（ｂ）に示す画像データ４２０が得られ、撮像装置２００に自分撮りモードが設定されているものとする。また、上述した第２の顔幅閾値は１２００とする。

顔検出部１０２は、画像データ４２０から顔検出を行い、ユーザー４１０の顔領域４１１を検出する。このときの顔領域４１１の水平サイズは１５００であったものとする。撮像装置２００に自分撮りモードが設定されていることから、顔検出部１０２は、検出した顔領域の大きさが第１の顔幅閾値以下かを判定する。検出した顔領域の大きさは１５００であり、第１の顔幅閾値９６０より大きいために、顔領域の大きさが一定以上の大きさか、すなわち第２の顔幅閾値以上かを判定する。第２の顔幅閾値は１２００であり、第２の顔幅閾値以上となるため、第二のシャッター操作を無効にし、表示部２０７で第二のシャッター操作が無効であることを示すアシスト表示を行う。例えば。図１３に示すように、撮像装置２００の表示部２０７に第二のシャッター操作であるスマイルシャッターが無効であることを示すアシスト表示７０１が表示される。

なお、上述したシャッター操作部２０５を用いた第一のシャッター操作には、タッチパネル上でのシャッター操作が含まれていてもよい。

上記第４の実施形態によれば、ユーザーが自分撮りをする際に、顔検出部１０２により検出された顔の大きさに応じてユーザーの撮影状況を判断し、適切なシャッター操作をユーザーに通知するか、または意図しないシャッタータイミングでの撮影を防止する。これにより、ユーザーが適切なシャッター操作が可能となり、所望の撮影を行うことができる。

以上、本発明の好ましい実施の形態を説明したが、本発明は上記実施形態に限定されるものではなく、その要旨の範囲内で種々の変形及び変更が可能である。例えば、適切なシャッター操作をユーザーに促す方法として、撮像装置が音声出力部を備え、当該音声出力部から音声ガイドを流す方法であってもよい。

また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

１００ 撮像装置
１０１ 撮像部
１０２ 顔検出部
１０３ 自分撮り判定部
１０４ 操作／表示部
３０３ シャッターアイコン
３０４ タイマー設定アイコン
３０５ マクロ設定アイコン

Claims (15)

1. 表示画面上へのタッチ操作による各種操作が可能な表示手段と、被写体像を前記表示手段に表示する撮像手段とを備える撮像装置において、
   前記撮像手段により取得された被写体像から人物の顔領域を検出する検出手段と、
   自分撮りが行われているか否かを判定する判定手段とを備え、
   前記表示手段は、前記判定手段により自分撮りが行われていると判定された場合に、前記検出手段により検出された人物の顔領域の大きさに応じて、操作用アイコンの表示を変更することを特徴とする撮像装置。
2. 前記表示手段は、前記検出手段により検出された人物の顔領域の大きさが閾値より小さかった場合には、前記撮像装置の機能を設定するためのアイコンを非表示とすることを特徴とする請求項１に記載の撮像装置。
3. 前記表示手段は、前記検出手段により検出された人物の顔領域の大きさが閾値より小さかった場合には、シャッターアイコンを拡大表示することを特徴とする請求項１または２に記載の撮像装置。
4. 前記表示画面上の操作用アイコン以外の任意の領域へのタッチ操作で前記撮像装置の機能を有効にする機能手段をさらに備え、
   前記表示手段は、前記検出手段より検出された人物の顔領域の大きさに応じて、前記機能手段を無効にすることを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 前記撮像装置の機能には、前記表示画面上でタッチされた任意の領域に対してフォーカスを合わせる機能が含まれることを特徴とする請求項４記載の撮像装置。
6. 前記撮像手段のズーム倍率を変更するズーム手段をさらに備え、
   前記表示手段は、前記閾値を前記ズーム倍率に応じて調整することを特徴とする請求項２乃至５のいずれか１項に記載の撮像装置。
7. 被写体像を表示手段に表示する撮像手段を備える撮像装置において、
   前記撮像手段により取得された被写体像から人物の顔領域を検出する検出手段と、
   自分撮りが行われているか否かを判定する判定手段と、
   第一のシャッター操作に応じて前記撮像手段に撮像を行わせる第一の制御手段と、
   前記第一のシャッター操作とは異なる第二のシャッター操作に応じて前記撮像手段に撮像を行わせる第二の制御手段とを備え、
   前記表示手段は、前記検出手段により検出された人物の顔領域の大きさに応じて、前記第一のシャッター操作または前記第二のシャッター操作のいずれかで撮影するようにユーザーに促す表示を行うことを特徴とする撮像装置。
8. 前記検出手段により検出された人物の顔領域から顔の表情を判定する判定手段をさらに備え、
   前記第二の制御手段は、前記判定手段により顔の表情が特定の表情になったと判定された場合に前記撮像手段に撮像を行わせることを特徴とする請求項７に記載の撮像装置。
9. 前記表示手段は、前記検出手段により検出された人物の顔領域の大きさが閾値より小さかった場合には、前記第二のシャッター操作で撮影するように促す表示を行うことを特徴とする請求項７または８に記載の撮像装置。
10. 前記第一のシャッター操作には、ユーザーによるシャッターボタンの直接操作が含まれることを特徴とする請求項７乃至９のいずれか１項に記載の撮像装置。
11. 前記表示手段は、前記検出手段により検出された人物の顔領域の大きさが一定以上の大きさであった場合には、前記第二のシャッター操作での撮影を無効にすることを特徴とする請求項７乃至１０のいずれか１項に記載の撮像装置。
12. 被写体像を表示手段に表示する撮像手段を備える撮像装置において、
    前記撮像手段により取得された被写体像から人物の顔領域を検出する検出手段と、
    自分撮りが行われているか否かを判定する判定手段と、
    第一のシャッター操作に応じて前記撮像手段に撮像を行わせる第一の制御手段と、
    前記第一のシャッター操作とは異なる第二のシャッター操作に応じて前記撮像手段に撮像を行わせる第二の制御手段と、
    音声を出力する音声手段とを備え、
    前記音声手段は、前記検出手段により検出された人物の顔領域の大きさに応じて、前記第一のシャッター操作または前記第二のシャッター操作のいずれかで撮影するようにユーザーに促す音声を出力することを特徴とする撮像装置。
13. 表示画面上へのタッチ操作による各種操作が可能な表示手段と、被写体像を前記表示手段に表示する撮像手段とを備える撮像装置の制御方法において、
    前記撮像手段により取得された被写体像から人物の顔領域を検出する検出工程と、
    自分撮りが行われているか否かを判定する判定工程と、
    前記判定工程にて自分撮りが行われていると判定された場合に、前記検出工程にて検出された人物の顔領域の大きさに応じて、前記表示手段に表示された操作用アイコンの表示を変更する表示工程とを備えることを特徴とする制御方法。
14. 被写体像を表示手段に表示する撮像手段を備える撮像装置の制御方法において、
    前記撮像手段により取得された被写体像から人物の顔領域を検出する検出工程と、
    自分撮りが行われているか否かを判定する判定工程と、
    第一のシャッター操作に応じて前記撮像手段に撮像を行わせる第一の制御工程と、
    前記第一のシャッター操作とは異なる第二のシャッター操作に応じて前記撮像手段に撮像を行わせる第二の制御工程と、
    前記検出工程にて検出された人物の顔領域の大きさに応じて、前記第一のシャッター操作または前記第二のシャッター操作のいずれかで撮影するようにユーザーに促す表示を行う表示工程とを備えることを特徴とする制御方法。
15. 請求項１３または１４に記載の制御方法を撮像装置に実行させるためのコンピュータに読み取り可能なプログラム。
    

Images