JP4724890B2 - 画像再生装置、画像再生方法、画像再生プログラム及び撮像装置 - Google Patents

Description

本発明は画像再生装置、画像再生方法、画像再生プログラム及び撮像装置に係り、特に画像の一部領域を拡大表示する技術に関する。

従来、撮像手段から出力された画像データによって表される被写体像に含まれる顔画像を検出する顔画像検出手段、拡大指令を与える拡大指令手段、上記拡大指令手段から拡大指令が与えられたことに応じて、上記顔画像検出手段によって検出された顔画像を拡大する拡大手段、上記拡大手段によって拡大された顔画像を表示画面に表示するように上記表示装置を制御する第１の表示制御手段を備えたディジタル・スチル・カメラが提案されている（特許文献１）。
特開２００５−３１８５１５号公報

上記特許文献１では、撮像された画像から顔が検出されなかった場合（例えば、顔が写っていない場合や顔の検出に失敗した場合）において、拡大指令に応じた処理が定義されていなかった。また、上記特許文献１では、画像から顔が複数検出された場合に、複数の画像の中から１の画像を拡大して表示するためには、所定のファクタに基づいて決定された顔画像の順序に対応づけられて表示された顔画像の中から、指定手段によって１の顔画像を指定する必要があるため、デジタルカメラの操作が非常に煩雑になるという問題があった。

本発明はこのような事情に鑑みてなされたもので、画像から顔が検出されなかった場合の処理を定義するとともに、顔拡大に係る操作を簡素化することができる画像再生装置、画像再生方法、画像再生プログラム及び撮像装置を提供することを目的とする。

上記課題を解決するために、本発明の第１の態様に係る画像再生装置は、画像を取得する画像取得手段と、前記画像を表示する画像表示手段と、前記画像に含まれる顔画像を検出する顔画像検出手段と、ユーザの操作入力に応じて拡大指令を与える拡大指令手段と、前記拡大指令手段から与えられた拡大指令に応じて、前記顔画像検出手段によって検出された顔画像を拡大する画像拡大手段と、前記顔画像検出手段によって検出された顔画像が複数であるかどうかを判定する判定手段と、前記判定手段によって顔画像が複数であると判定された場合に、前記拡大指令手段から拡大指令が与えられるごとに、前記画像拡大手段によって拡大された複数の顔画像を所定の順番で切り替えて表示するように前記画像表示手段を制御する表示制御手段とを備えることを特徴とする。

上記第１の態様によれば、画像から複数の顔画像が検出された場合に、拡大指令を繰り返し与えるだけで、検出された顔画像を順番に拡大することができる。

本発明の第２の態様に係る画像再生装置は、上記第１の態様において、前記顔画像検出手段によって検出された顔画像の顔らしさの評価値を算出する評価値算出手段を更に備え、前記表示制御手段は、前記顔画像を顔らしさの評価値の順に表示させることを特徴とする。

上記第２の態様によれば、顔らしさの評価値が高い又は低い順に顔画像を拡大表示することができる。

本発明の第３の態様に係る画像再生装置は、上記第１の態様において、前記顔画像検出手段によって検出された顔画像の顔画像のサイズを算出する顔画像サイズ算出手段を更に備え、前記表示制御手段は、前記顔画像をサイズの順に表示させることを特徴とする。

上記第３の態様によれば、顔画像のサイズが大きい又は小さい順に顔画像を拡大表示することができる。

本発明の第４の態様に係る画像再生装置は、上記第１から第３の態様において、前記拡大表示された画像の拡大倍率を変更する拡大倍率変更手段を更に備えることを特徴とする。

上記第４の態様によれば、ユーザは拡大された画像を所望の拡大倍率で確認することができる。

本発明の第５の態様に係る画像再生装置は、上記第１から第４の態様において、前記拡大表示された画像の表示領域を移動させる移動手段を更に備えることを特徴とする。

上記第５の態様によれば、ユーザは拡大された画像の周囲の画像を確認することができる。
本発明の第６の態様に係る画像再生装置は、上記第１から第３の態様において、前記ユーザから操作入力を受け付ける操作部材と、前記操作部材に割り当てられる機能を、前記拡大表示される画像の拡大倍率を変更する機能と、前記拡大表示される前記画像中の表示領域を移動させる機能との間で切り替えるための機能切り替え用操作部材とを更に備えることを特徴とする。
本発明の第７の態様に係る画像再生装置は、上記第６の態様において、前記表示制御手段は、前記機能切り替え用操作部材が操作されたときに前記操作部材に割り当てられる機能を示す画像と、前記操作部材に割り当てられている機能を示す画像とを前記画像表示手段に表示することを特徴とする。
本発明の第８の態様に係る画像再生装置は、上記第１から第７の態様において、前記画像拡大手段は、前記顔画像検出手段によって前記画像から顔画像が検出されなかった場合に、前記拡大指令手段から与えられた拡大指令に応じて、前記画像の所定の領域を拡大し、前記表示制御手段は、前記画像拡大手段によって拡大された所定の領域を表示するように前記画像表示手段を制御することを特徴とする。
上記第８の態様によれば、顔画像が検出されなかった場合にも、画像の一部を拡大表示させることができる。
本発明の第９の態様に係る画像再生装置は、上記第８の態様において、前記画像拡大手段は、前記画像の中央部又は前記画像において合焦している被写体を含む領域を拡大することを特徴とする。
上記第９の態様によれば、顔画像が検出されなかった場合にも、画像の中央部や、合焦している被写体を検出することにより、画像中の主要な被写体を拡大表示することができる。

本発明の第１０の態様に係る撮像装置は、上記第１から第９の態様に係る画像再生装置を備えることを特徴とする。

上記第１０の態様に係る発明によれば、撮像した画像を上記の画像再生装置により再生可能な撮像装置を実現することができる。

本発明の第１１の態様に係る画像再生方法は、画像を取得する画像取得工程と、前記画像を表示する画像表示工程と、前記画像に含まれる顔画像を検出する顔画像検出工程と、ユーザの操作入力に応じて拡大指令を与える拡大指令工程と、前記拡大指令に応じて前記顔画像を拡大する第１の画像拡大工程と、前記顔画像が複数検出されたかどうかを判定する判定工程と、前記顔画像が複数検出されたと判定された場合に、前記拡大指令が与えられるごとに、前記拡大された複数の顔画像を所定の順番で切り替えて表示する第１の表示制御工程とを備えることを特徴とする。

本発明の第１２の態様に係る画像再生方法は、上記第１１の態様において、前記検出された顔画像の顔らしさの評価値を算出する評価値算出工程を更に備え、前記第１の表示制御工程において、前記顔画像を顔らしさの評価値の順に表示することを特徴とする。

本発明の第１３の態様に係る画像再生方法は、上記第１１の態様において、前記検出された顔画像のサイズを算出する顔画像サイズ算出工程を更に備え、前記第１の表示制御工程において、前記顔画像をサイズの順に表示することを特徴とする。
本発明の第１４の態様に係る画像再生方法は、上記第１１から第１３の態様において、機能切り替え用操作部材からの操作入力に応じて、前記ユーザから操作入力を受け付ける操作部材に割り当てられる機能を、前記拡大表示される画像の拡大倍率を変更する機能と、前記拡大表示される前記画像中の表示領域を移動させる機能との間で切り替える工程を更に備えることを特徴とする。
本発明の第１５の態様に係る画像再生方法は、上記第１４の態様において、前記機能切り替え用操作部材が操作されたときに前記操作部材に割り当てられる機能を示す画像と、前記操作部材に割り当てられている機能を示す画像とを表示する工程を更に備えることを特徴とする。
本発明の第１６の態様に係る画像再生方法は、上記第１１から第１５の態様において、前記画像から顔画像が検出されなかった場合に、前記拡大指令に応じて、前記画像の所定の領域を拡大する第２の画像拡大工程と、前記拡大された所定の領域を表示する第２の表示制御工程とを更に備えることを特徴とする。
本発明の第１７の態様に係る画像再生方法は、上記第１６の態様の前記第２の画像拡大工程において、前記画像の中央部又は前記画像において合焦している被写体を含む領域を拡大することを特徴とする。

本発明の第１８の態様に係る画像再生プログラムは、画像を取得する画像取得機能と、前記画像を表示する画像表示機能と、前記画像に含まれる顔画像を検出する顔画像検出機能と、ユーザの操作入力に応じて拡大指令を与える拡大指令機能と、前記拡大指令に応じて前記顔画像を拡大する第１の画像拡大機能と、前記顔画像が複数検出されたかどうかを判定する判定機能と、前記顔画像が複数検出されたと判定された場合に、前記拡大指令が与えられるごとに、前記拡大された複数の顔画像を所定の順番で切り替えて表示する第１の表示制御機能とをコンピュータに実現させることを特徴とする。

本発明の第１９の態様に係る画像再生プログラムは、上記第１８の態様において、前記検出された顔画像の顔らしさの評価値を算出する評価値算出機能と、前記第１の表示制御機能により前記複数の顔画像を表示する際に前記顔画像を顔らしさの評価値の順に表示する機能とをコンピュータに実現させることを特徴とする。

本発明の第２０の態様に係る画像再生プログラムは、上記第１８の態様において、前記検出された顔画像のサイズを算出する顔画像サイズ算出機能と、前記第１の表示制御機能により前記複数の顔画像を表示する際に前記顔画像をサイズの順に表示する機能とをコンピュータに実現させることを特徴とする。

本発明の第２１の態様に係る画像再生プログラムは、上記第１８から第２０の態様において、前記拡大表示された画像の拡大倍率を変更する拡大倍率変更機能をコンピュータに実現させることを特徴とする。

本発明の第２２の態様に係る画像再生プログラムは、上記第１８から第２１の態様において、前記拡大表示された画像の表示領域を移動させる移動機能をコンピュータに実現させることを特徴とする。
本発明の第２３の態様に係る画像再生プログラムは、上記第１８から第２０の態様において、機能切り替え用操作部材からの操作入力に応じて、前記ユーザから操作入力を受け付ける操作部材に割り当てられる機能を、前記拡大表示される画像の拡大倍率を変更する機能と、前記拡大表示される前記画像中の表示領域を移動させる機能との間で切り替える機能をコンピュータに実現させることを特徴とする。
本発明の第２４の態様に係る画像再生プログラムは、上記第２３の態様において、前記機能切り替え用操作部材が操作されたときに前記操作部材に割り当てられる機能を示す画像と、前記操作部材に割り当てられている機能を示す画像とを表示する機能をコンピュータに実現させることを特徴とする。
本発明の第２５の態様に係る画像再生プログラムは、上記第１８から第２４の態様において、前記画像から顔画像が検出されなかった場合に、前記拡大指令に応じて、前記画像の所定の領域を拡大する第２の画像拡大機能と、前記第２の画像拡大機能によって拡大された所定の領域を表示するように制御する第２の表示制御機能とをコンピュータに実現させることを特徴とする。
本発明の第２６の態様に係る画像再生プログラムは、上記第２５の態様において、前記第２の画像拡大機能が、前記画像の中央部又は前記画像において合焦している被写体を含む領域を拡大することを特徴とする。

上記の態様に係る画像再生プログラムを、撮像装置（電子カメラ、デジタルカメラ）やＰＣ、ビデオ再生装置（ビデオデッキ、テレビ）、ＰＤＡ、携帯フォトプレーヤー、携帯電話等の画像再生機能を有する装置に適用することにより、本発明の画像再生装置及び画像再生方法を実現することができる。

本発明によれば、画像から顔画像が検出されなかった場合にも、画像の中央部や、合焦している被写体を検出することにより、主要な被写体を拡大表示することができる。また、画像から複数の顔画像が検出された場合に、単純な操作により検出された顔画像を順番に拡大することができる。

以下、添付図面に従って本発明に係る画像再生装置、画像再生方法、画像再生プログラム及び撮像装置の好ましい実施の形態について説明する。

［撮像装置の構成］
図１は、本発明の一実施形態に係る画像再生装置を備えた撮像装置の背面の外観を示す平面図である。図１に示すように、撮像装置（電子カメラ）１０の上面には、レリーズボタン１２及び電源スイッチ１４が設けられている。撮像装置１０の背面には、表示部（モニタ）１６、モードスイッチ１８、十字ボタン２０、ＭＥＮＵ／ＯＫボタン２２、キャンセルボタン２４、拡大ボタン２６及び機能切替スイッチ２８等が設けられている。また、図示しないカメラ本体の底面には、バッテリカバーが設けられており、このバッテリカバーを開くと、バッテリを装着するためのバッテリ収納室と、メモリカードを装着するためのメモリカードスロットが設けられている。

レリーズボタン１２は、撮影指示を入力するボタンとして機能し、２段式に構成されており、レリーズボタン１２を軽く押して止める「半押し（Ｓ１＝ＯＮ）」の状態で自動ピント合わせ（ＡＦ）及び自動露出制御（ＡＥ）が作動してＡＦとＡＥをロックし、「半押し」から更に押し込む「全押し（Ｓ２＝ＯＮ）」の状態で撮像が実行される。

電源スイッチ１４は、スライド式のスイッチで構成されており、この電源スイッチ１４のスライド操作で撮像装置１０の電源がＯＮ／ＯＦＦされる。

モニタ１６は、カラーＬＣＤで構成されている。このモニタ１６は、再生モード時に撮影済み画像の再生に使用されるとともに、撮影モード時にスルー画像が表示されて電子ファインダとして使用される。また、各種設定操作時にメニュー画面が表示されて、ユーザが各種設定操作を行うためのユーザインターフェイスとしても使用される。

モードスイッチ１８は、撮像装置１０のモードを切り替えるスイッチとして機能し、その設定位置によって静止画の撮像を行なう「撮影モード」と、撮像した画像を再生する「再生モード」とに切り替えられる。

十字ボタン２０は、上下左右四方向に押下可能に構成されており、撮像装置１０の状況に応じた機能が割り当てられる。例えば、撮影モード時には、右ボタンがマクロモードの切り換えを指示するマクロボタンとして機能し、左ボタンがストロボモードの切り換えを指示するストロボボタンとして機能する。また、撮影モード時には、上ボタンがテレ方向のズームを指示するズームテレボタンとして機能し、下ボタンがワイド方向のズームを指示するズームワイドボタンとして機能する。一方、再生モード時には、右ボタンが画像のコマ送りを指示するボタンとして機能し、左ボタンが画像のコマ戻しを指示するコマ戻しボタンとして機能する。また、再生モード時には、上ボタンが画像の拡大を指示する拡大ボタンとして機能し、下ボタンが画像の縮小を指示する縮小ボタンとして機能する。また、十字ボタン２０は、モニタ１６を利用した各種設定時には、モニタ１６に表示されるカーソルの移動を指示するボタンとして機能する。

ＭＥＮＵ／ＯＫボタン２２は、モニタ１６へのメニュー画面の表示を指示するボタンとして機能するとともに、各種操作の実行を指示するボタンとして機能し、キャンセルボタン２４は、各種操作のキャンセルを指示するボタンとして機能する。

拡大ボタン２６は、モニタ１６に表示された画像の中に含まれる顔画像を拡大する拡大指令を入力するスイッチである。機能切替スイッチ２８は、顔画像の拡大表示時に十字ボタン２０の機能を切り替えるためのスイッチである。

図２は、撮像装置１０の電気的構成を示すブロック図である。図２に示すように、ＣＰＵ５０は、バス５２を介して撮像装置１０内の各部に接続されており、操作部５４等からの操作入力に基づいて撮像装置１０の動作を制御する統括制御部である。操作部５４は、上記レリーズボタン１２や電源スイッチ１４、モードスイッチ１８、十字ボタン２０等を含んでおり、ユーザからの操作入力を受け付ける操作部材である。

メモリ５６は、メモリ制御部５８によって制御され、ＣＰＵ５０が処理するプログラム及び制御に必要な各種データ等が格納されるＲＯＭ５６Ａや、ＣＰＵ５０が各種の演算処理等を行う作業用領域及び画像処理領域となるＲＡＭ５６Ｂ等を有している。ＲＯＭ５６Ａには、顔画像を検出するためのデータ（例えば、顔のサンプル画像データ）が格納されている。

外部通信インターフェース部（外部通信Ｉ／Ｆ）６０は、ネットワークや外部出力機器（例えば、パーソナルコンピュータやテレビジョン、ディスプレイ、プリンタ、外部記録装置）等と接続するための機器で、所定のプロトコルにしたがって各種データの送受信を行う。なお、データの送受信の方式としては、例えば、ＵＳＢやＩＥＥＥ１３９４、有線ＬＡＮ、赤外線通信（ＩｒＤＡ）等を用いることができる。

撮像素子６４は、光学系（レンズ）６２を介して入射した光を受け止めて電気信号に変換する素子であり、例えば、ＣＣＤやＣＭＯＳである。この電気信号は、図示せぬプリアンプによって増幅され、Ａ／Ｄ変換器６６によってデジタル信号に変換されて、画像処理部６８に入力される。

上述のように、撮像装置１０は、画像を撮像するための撮影モードと、撮像した画像を表示、再生するための再生モードの２つの動作モードを備えている。撮影モード時には、撮像素子６４から出力された電気信号は、画像処理部（デジタル信号処理部）６８に入力され、画像処理部６８によってガンマ補正やホワイトバランス補正等の処理が施されて、画角確認用の画像データ（スルー画）が作成される。この画像データ（スルー画）は、画像処理部６８によって画像信号として表示部（モニタ）１６に出力される。これにより、モニタ１６にスルー画が表示される。

レリーズボタン１２が半押しされると、画像信号がＣＰＵ５０に入力されて、ＡＦ及びＡＥが作動して、光学系６２に含まれるズームレンズや絞りが駆動されてＡＦとＡＥがロックされ、全押しの状態で撮像が実行される。画像が撮像されると、撮像素子６４から出力された電気信号が画像処理部６８によって処理されて記憶用の画像ファイルが作成される。この記憶用の画像ファイルは、メモリカード７２に所定のファイル形式で記憶される。ここで、メモリカード７２は、例えば、半導体メモリ等であり、メモリカード７２への入出力は外部メモリ制御部７４によって制御される。

スルー画表示時又は画像の撮像時に画像処理部６８から出力された画像信号は、顔検出処理部７０にも入力される。顔検出処理部７０は、顔認識技術によってこの画像に写っている人物の顔領域の検出を行う。なお、顔領域を検出する方法の例としては、原画像から肌色に指定した色と近い色を持つ画素を取り出し、取り出した領域を顔領域として検出する方法がある。この処理は、例えば、肌色を他の色と区別するための色空間上で、あらかじめサンプリングした肌色の情報から色空間上の肌色の範囲を定め、各画素の色が定めた範囲に入っているか否かを判定することにより行われる。上記顔検出処理部７０によって検出された顔領域の位置情報はＣＰＵ５０に出力される。また、顔領域の位置情報とともに、顔領域の顔らしさの評価値（顔らしさ度）や顔領域のサイズ（顔画像を含む矩形領域の面積又は顔画像自体の面積）も顔検出処理部７０によって算出されてＣＰＵ５０に出力される。ここで、顔らしさ度は、顔検出処理部７０によって検出された領域が顔領域であるかどうかを示すパラメータであり、例えば、肌色の度合等により算出される。顔検出処理部７０は、画像中から検出された肌色領域ごとに、この顔らしさ度を算出して、この顔らしさ度が所定値以上の肌色領域を顔領域と判断する。

スルー画又は撮像済み画像の表示時に拡大ボタン２６が押下されると、ＣＰＵ５０に拡大指令が入力される。顔検出処理部７０によって顔領域が検出された場合には、ＣＰＵ５０は、上記拡大指令の入力に応じて、顔検出処理部７０から入力された顔領域の位置情報に基づいて顔領域を拡大してモニタ１６に表示する。ここで、顔領域が複数検出された場合には、ＣＰＵ５０は、上記拡大指令の入力が行われるごとに、顔領域の拡大表示を所定の順番で切り替える。なお、顔領域を拡大表示する順番は、例えば、顔らしさ度や顔領域のサイズにより決定される。一方、顔検出処理部７０によって顔領域が検出されなかった場合には、ＣＰＵ５０は、上記拡大指令の入力に応じて、画像の所定の領域（例えば、画像の中心や画像の合焦点を含む領域）を拡大してモニタ１６に表示する。

一方、再生モード時には、画像処理部６８によってメモリカード７２に記憶された画像データが読み出されて表示用の画像データが作成される。この表示用の画像データは、画像信号としてモニタ１６に出力される。これにより、メモリカード７２内の画像が読み出されてモニタ１６に表示される。

再生モード時に、拡大ボタン２６が押下されると、メモリカード７２から読み出された画像が顔検出処理部７０にも入力され、顔検出処理部７０によって画像中の顔が写っている領域（顔領域）が検出される。再生モード時において、画像の表示中に拡大ボタン２６が押下されると、ＣＰＵ５０に拡大指令が入力される。顔検出処理部７０によって顔領域が検出された場合には、ＣＰＵ５０は、上記拡大指令の入力に応じて、顔領域を拡大してモニタ１６に表示する。一方、顔検出処理部７０によって顔領域が検出されなかった場合には、ＣＰＵ５０は、上記拡大指令の入力に応じて、画像の所定の領域（例えば、画像の中心や画像の合焦点を含む領域）を拡大してモニタ１６に表示する。

なお、本実施形態では、顔検出が行われた画像の顔領域に関する情報（例えば、画像中における位置や顔らしさ度、サイズ）を格納するためのメタデータ（例えば、ｘｍｌ形式）を作成してメモリカード７２に保存するようにしてもよい。また、顔領域に関する情報は、画像のタグ情報として格納されるようにしてもよい。顔領域に関する情報をメタデータ等に格納しておく場合には、例えば、再生モード時において、ＣＰＵ５０は、顔検出処理部７０を制御して顔領域の検出を行うことなく、メタデータ等から顔領域に関する情報を取得することができる。

［顔拡大処理］
以下、顔拡大処理について説明する。図３から図５は、顔拡大処理時の表示の遷移を示す図である。図３（ａ）に示すように、表示中の画像から顔領域Ａ１が１つ検出された場合には、拡大ボタン２６の押下に応じて、顔領域Ａ１がモニタ１６に拡大表示される。図３（ｂ）に示すように、顔画像の拡大表示の際には、顔領域Ａ１の中心がモニタ１６の中心に一致するように拡大表示される。また、顔領域Ａ１は、例えば、顔領域Ａ１がモニタ１６に収まる最大のサイズになるように拡大表示される。そして、拡大ボタン２６が再度押下されると、図３（ｃ）に示すように、元の画像の表示に戻る。

顔領域の拡大表示中に（図４（ｂ））、十字ボタン２０の上ボタンが押下されると、上ボタンの押下時間に応じて、図４（ｃ）に示すように、顔領域の拡大倍率が増加する（ズームインする）。一方、顔領域の拡大表示中に（図５（ｂ））、十字ボタン２０の下ボタンが押下されると、上ボタンの押下時間に応じて、図５（ｃ）に示すように、顔領域の拡大倍率が減少する（ズームアウトする）。また、図３（ｂ）等に示した顔領域の拡大表示中に、機能切替スイッチ２８が押下されると、十字ボタン２０がモニタ１６に拡大表示される領域を移動させるボタンとして機能し、上下左右キーの押下に応じてモニタ１６に拡大表示される領域が移動する。なお、図３（ｂ）等に示した顔領域の拡大表示中には、十字ボタン２０の機能を示す表示がなされる。図６は、十字ボタン２０の機能の表示の例を示す図である。図６に示す例では、十字ボタン２０及び機能切替スイッチ２８を模した画像中にそれぞれの機能を示す表示がなされており、この画像は、例えば、モニタ１６の下部に上記顔画像の拡大表示と重ならないように、又は半透明で重ねて表示される。図６（ａ）に示すように、十字ボタン２０が画像の拡大倍率を変更するためのズームボタンとして機能する場合には、十字ボタン２０の上下ボタンに対応する箇所にそれぞれ「ZOOM IN」、「ZOOM OUT」と表示されている。また、図６（ａ）に示すように、機能切換スイッチ２８に対応する箇所には、十字ボタン２０を表示領域の移動ボタンに切り替えるボタンであることを示す表示がなされる。十字ボタン２０が移動ボタンに切り替えられた場合には、図６（ｂ）に示すように、十字ボタン２０の上下左右ボタンに対応する箇所に移動方向を示す符号がそれぞれ表示される。また、図６（ｂ）に示すように、機能切換スイッチ２８に対応する箇所には、十字ボタン２０をズームボタンに切り替えるボタンであることを示す表示がなされる。

図７は、顔領域が複数検出された場合の表示の遷移を示す図である。図７（ａ）に示すように、表示中の画像から顔領域が２つ検出された場合には、拡大ボタン２６が押下されると、検出された顔領域Ａ２、Ａ３のうち顔らしさ度が高い顔領域Ａ２が選択されて拡大表示される（図７（ｂ））。そして、拡大ボタン２６が再度押下されると、顔らしさ度が次に高い顔領域Ａ３が選択されて拡大表示される（図７（ｃ））。そして、拡大ボタン２６の押下が繰り返されて全ての画像の表示が終了した後、拡大ボタン２６が再度押下されると、元の画像の表示に戻る（図７（ａ））。なお、顔領域の表示の順番は、顔らしさ度の低い順であってもよいし、顔領域のサイズの大きい順又は小さい順に表示されるようにしてもよい。

図８は、顔領域が検出されなかった場合の表示の遷移を示す図である。図８（ａ）に示すように、表示中の画像から顔領域が検出されなかった場合には、拡大ボタン２６の押下に応じて、ＣＰＵ５０によって画像の中央部Ａ５が拡大されてモニタ１６に表示される（図８（ｂ））。図８（ｂ）において、十字ボタン２０を用いてズームイン／ズームアウトや表示領域の移動を行うことができる。そして、拡大ボタン２６が再度押下されると、図８（ｃ）に示すように、元の画像の表示に戻る。なお、顔領域が検出されなかった場合には、画像の中央部Ａ５ではなく、ＣＰＵ５０によって合焦している被写体を検出して、合焦被写体を含む領域を拡大表示するようにしてもよい。中央部Ａ５や合焦している被写体を拡大表示する際には、中央部Ａ５や被写体の中心がモニタ１６の中心に表示されるようにするとよい。また、合焦している被写体を含む領域を拡大表示する際には、例えば、被写体の色を検出することにより、合焦被写体がモニタ１６に収まる最大のサイズになるように拡大表示されるようにするとよい。

［顔拡大処理の第１の実施形態］
図９は、顔拡大処理の流れを示すフローチャートである。まず、拡大ボタン２６が押下されると（ステップＳ１０のＹｅｓ）、ＣＰＵ５０によって、顔検出処理部７０又はメモリカード７２に記録されたメタデータ等から顔情報が取得される（ステップＳ１２）。画像中から顔領域が１つ検出された場合には（ステップＳ１４のＹｅｓ、ステップＳ１６のＮｏ）、ＣＰＵ５０によって顔領域が拡大され（ステップＳ１８）、拡大された顔領域がモニタ１６に表示される（ステップＳ２０、図３（ｂ））。そして、拡大ボタン２６が再度押下されると（ステップＳ２２のＹｅｓ）、拡大前の画像の表示に戻る（ステップＳ２４、図３（ｃ））。

一方、画像中から複数の顔領域が複数検出された場合には（ステップＳ１４のＹｅｓ、ステップＳ１６のＹｅｓ）、検出された顔領域のうち顔らしさ度が最も高い顔領域がＣＰＵ５０によって拡大されて（ステップＳ２６）、拡大された顔領域がモニタ１６に表示される（ステップＳ２８、図７（ｂ））。そして、拡大ボタン２６が再度押下されると（ステップＳ３０のＹｅｓ）、顔らしさ度が２番目に高い顔領域がＣＰＵ５０によって拡大されて（ステップＳ２６）、拡大された顔領域がモニタ１６に表示される（ステップＳ２８）。そして、ステップＳ２６からＳ３２の処理が繰り返されて、全ての顔領域の表示が終了すると（ステップＳ３２のＹｅｓ）、拡大前の画像の表示に戻る（ステップＳ２４、図７（ａ））。

また、画像中から複数の顔領域が検出されなかった場合には（ステップＳ１４のＮｏ）、ＣＰＵ５０によって画像の中央部が拡大されて（ステップＳ３４）、拡大された画像の中央部がモニタ１６に表示される（ステップＳ３６、図８（ｂ））。そして、拡大ボタン２６が再度押下されると（ステップＳ３８のＹｅｓ）、拡大前の画像の表示に戻る（ステップＳ２４、図８（ｃ））。

本実施形態によれば、画像から複数の顔領域が検出された場合に、拡大ボタン２６を繰り返し押下するだけで顔画像を順番に拡大することができる。また、本実施形態によれば、画像から顔画像が検出されなかった場合にも、画像の中央部や、合焦している被写体を検出することにより、主要な被写体を拡大表示することができる。

［顔拡大処理の第２の実施形態］
図１０は、顔拡大処理の別の実施形態を示すフローチャートである。なお、ステップＳ５０からＳ６４及びステップＳ７４からＳ６４の工程は、それぞれ図９のステップＳ１０からＳ２４及びステップＳ３４からＳ２４の工程と同様であるため説明を省略する。本実施形態では、顔領域が複数検出された場合に（ステップＳ５４のＹｅｓ、ステップＳ５６のＹｅｓ）、ステップＳ６６からＳ７２において顔領域をサイズ順に拡大表示させるようになっている。

なお、上記の各実施形態では、拡大ボタン２６の押下の繰り返しにより、複数の顔領域の表示を切り替えるようにしたが、拡大ボタン２６の１度目の押下で顔領域の順次表示を自動的に実行し、拡大ボタン２６の２度目の押下で顔領域の拡大表示を終了するようにしてもよい。

また、上記拡大表示された顔領域等をトリミングして、メモリカード７２に保存できるようにしてもよい。

なお、本発明の画像再生装置は、上記の撮像装置のほか、例えば、パーソナルコンピュータ（ＰＣ）やビデオ再生装置（ビデオデッキ、テレビ）、携帯情報端末（ＰＤＡ）、携帯フォトプレーヤー、携帯電話等の画像再生機能を有する装置に適用可能である。また、上記の処理を実行するソフトウェアやファームウェアを、撮像装置（電子カメラ、デジタルカメラ）やＰＣ、ビデオ再生装置（ビデオデッキ、テレビ）、ＰＤＡ、携帯フォトプレーヤー、携帯電話等の画像再生機能を有する装置に適用することにより、本発明の画像再生装置及び画像再生方法を実現することができる。

本発明の一実施形態に係る画像再生装置を備えた撮像装置の背面の外観を示す平面図 撮像装置１０の電気的構成を示すブロック図 顔拡大処理時の表示の遷移を示す図 顔拡大処理時の表示の遷移を示す図 顔拡大処理時の表示の遷移を示す図 十字ボタン２０の機能の表示の例を示す図 顔領域が複数検出された場合の表示の遷移を示す図 顔領域が検出されなかった場合の表示の遷移を示す図 顔拡大処理の流れを示すフローチャート 顔拡大処理の別の実施形態を示すフローチャート

符号の説明

１０…撮像装置（電子カメラ）、１２…レリーズボタン、１４…電源スイッチ、１６…表示部（モニタ）、１８…モードスイッチ、２０…十字ボタン、２２…ＭＥＮＵ／ＯＫボタン、２４…キャンセルボタン、２６…拡大ボタン、２８…機能切替スイッチ、５０…ＣＰＵ、５２…バス、５４…操作部、５６…メモリ、５８…メモリ制御部、６０…外部通信Ｉ／Ｆ、６２…光学系（レンズ）、６４…撮像素子、６６…Ａ／Ｄ変換器、６８…画像処理部、７０…顔検出処理部、７２…メモリカード、７４…外部メモリ制御部

Claims (16)

1. 画像を取得する画像取得手段と、
   前記画像を表示する画像表示手段と、
   前記画像に含まれる顔画像を検出する顔画像検出手段と、
   ユーザの操作入力に応じて拡大指令を与える拡大指令手段と、
   前記拡大指令手段から与えられた拡大指令に応じて、前記顔画像検出手段によって検出された顔画像を拡大する画像拡大手段と、
   前記顔画像検出手段によって検出された顔画像が複数であるかどうかを判定する判定手段と、
   前記判定手段によって顔画像が複数であると判定された場合に、前記拡大指令手段から拡大指令が与えられるごとに、前記画像拡大手段によって拡大された複数の顔画像を所定の順番で切り替えて表示するように前記画像表示手段を制御する表示制御手段と、
   前記ユーザから操作入力を受け付ける操作部材と、
   前記操作部材に割り当てられる機能を、前記拡大表示される画像の拡大倍率を変更する機能と、前記拡大表示される前記画像中の表示領域を移動させる機能との間で切り替えるための機能切り替え用操作部材とを備え、
   前記表示制御手段は、前記機能切り替え用操作部材が操作されたときに前記操作部材に割り当てられる機能を示す画像と、前記操作部材に割り当てられている機能を示す画像とを前記画像表示手段に表示することを特徴とする画像再生装置。
2. 前記顔画像検出手段によって検出された顔画像の顔らしさの評価値を算出する評価値算出手段を更に備え、
   前記表示制御手段は、前記顔画像を顔らしさの評価値の順に表示させることを特徴とする請求項１記載の画像再生装置。
3. 前記顔画像検出手段によって検出された顔画像のサイズを算出する顔画像サイズ算出手段を更に備え、
   前記表示制御手段は、前記顔画像をサイズの順に表示させることを特徴とする請求項１記載の画像再生装置。
4. 前記画像拡大手段は、前記顔画像検出手段によって前記画像から顔画像が検出されなかった場合に、前記拡大指令手段から与えられた拡大指令に応じて、前記画像の所定の領域を拡大し、
   前記表示制御手段は、前記画像拡大手段によって拡大された所定の領域を表示するように前記画像表示手段を制御することを特徴とする請求項１から３のいずれか１項記載の画像再生装置。
5. 前記画像拡大手段は、前記画像の中央部又は前記画像において合焦している被写体を含む領域を前記所定の領域として拡大することを特徴とする請求項４記載の画像再生装置。
6. 請求項１から５のいずれか１項記載の画像再生装置を備えることを特徴とする撮像装置。
7. 画像を取得する画像取得工程と、
   前記画像を表示する画像表示工程と、
   前記画像に含まれる顔画像を検出する顔画像検出工程と、
   ユーザの操作入力に応じて拡大指令を与える拡大指令工程と、
   前記拡大指令に応じて前記顔画像を拡大する第１の画像拡大工程と、
   前記顔画像が複数検出されたかどうかを判定する判定工程と、
   前記顔画像が複数検出されたと判定された場合に、前記拡大指令が与えられるごとに、前記拡大された複数の顔画像を所定の順番で切り替えて表示する第１の表示制御工程と、
   機能切り替え用操作部材からの操作入力に応じて、前記ユーザから操作入力を受け付ける操作部材に割り当てられる機能を、前記拡大表示される画像の拡大倍率を変更する機能と、前記拡大表示される前記画像中の表示領域を移動させる機能との間で切り替える工程と、
   前記機能切り替え用操作部材が操作されたときに前記操作部材に割り当てられる機能を示す画像と、前記操作部材に割り当てられている機能を示す画像とを表示する工程と、
   を備えることを特徴とする画像再生方法。
8. 前記検出された顔画像の顔らしさの評価値を算出する評価値算出工程を更に備え、
   前記第１の表示制御工程において、前記顔画像を顔らしさの評価値の順に表示することを特徴とする請求項７記載の画像再生方法。
9. 前記検出された顔画像のサイズを算出する顔画像サイズ算出工程を更に備え、
   前記第１の表示制御工程において、前記顔画像をサイズの順に表示することを特徴とする請求項７記載の画像再生方法。
10. 前記画像から顔画像が検出されなかった場合に、前記拡大指令に応じて、前記画像の所定の領域を拡大する第２の画像拡大工程と、
    前記拡大された所定の領域を表示する第２の表示制御工程と、
    を更に備えることを特徴とする請求項７から９のいずれか１項記載の画像再生方法。
11. 前記第２の画像拡大工程において、前記画像の中央部又は前記画像において合焦している被写体を含む領域を拡大することを特徴とする請求項１０記載の画像再生方法。
12. 画像を取得する画像取得機能と、
    前記画像を表示する画像表示機能と、
    前記画像に含まれる顔画像を検出する顔画像検出機能と、
    ユーザの操作入力に応じて拡大指令を与える拡大指令機能と、
    前記拡大指令に応じて前記顔画像を拡大する第１の画像拡大機能と、
    前記顔画像が複数検出されたかどうかを判定する判定機能と、
    前記顔画像が複数検出されたと判定された場合に、前記拡大指令が与えられるごとに、前記拡大された複数の顔画像を所定の順番で切り替えて表示する第１の表示制御機能と、
    機能切り替え用操作部材からの操作入力に応じて、前記ユーザから操作入力を受け付ける操作部材に割り当てられる機能を、前記拡大表示される画像の拡大倍率を変更する機能と、前記拡大表示される前記画像中の表示領域を移動させる機能との間で切り替える機能と、
    前記機能切り替え用操作部材が操作されたときに前記操作部材に割り当てられる機能を示す画像と、前記操作部材に割り当てられている機能を示す画像とを表示する機能と、
    をコンピュータに実現させることを特徴とする画像再生プログラム。
13. 前記検出された顔画像の顔らしさの評価値を算出する評価値算出機能と、
    前記第１の表示制御機能により前記複数の顔画像を表示する際に前記顔画像を顔らしさの評価値の順に表示する機能と、
    をコンピュータに実現させることを特徴とする請求項１２記載の画像再生プログラム。
14. 前記検出された顔画像のサイズを算出する顔画像サイズ算出機能と、
    前記第１の表示制御機能により前記複数の顔画像を表示する際に前記顔画像をサイズの順に表示する機能と、
    をコンピュータに実現させることを特徴とする請求項１２記載の画像再生プログラム。
15. 前記画像から顔画像が検出されなかった場合に、前記拡大指令に応じて、前記画像の所定の領域を拡大する第２の画像拡大機能と、
    前記第２の画像拡大機能によって拡大された所定の領域を表示するように制御する第２の表示制御機能と、
    をコンピュータに実現させることを特徴とする請求項１２から１４のいずれか１項記載の画像再生プログラム。
16. 前記第２の画像拡大機能が、前記画像の中央部又は前記画像において合焦している被写体を含む領域を拡大することを特徴とする請求項１５記載の画像再生プログラム。

Images