JP5245636B2

JP5245636B2 - 電子機器

Info

Publication number: JP5245636B2
Application number: JP2008209472A
Authority: JP
Inventors: 享永千田; 正俊神崎
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2007-08-17
Filing date: 2008-08-18
Publication date: 2013-07-24
Anticipated expiration: 2028-08-18
Also published as: JP2009070374A

Description

本発明は、電子機器に関する。

画像に写っている人物の顔領域を検出し、検出した顔領域の一部を拡大して表示する技術が知られている（特許文献１参照）。

特開２００６−２９３７８２号公報

従来技術では、顔領域を拡大表示させる場合、あらかじめ顔表示モードに設定しておく必要がある。つまり、拡大表示操作に応じて画像を拡大表示する通常モードとの間でモード切換えが必要で、ユーザにとって使いづらいという問題がある。

請求項１に記載の発明による電子機器は、電子データによる画像を再生する画像再生手段と、拡大指示を示す信号を発する操作部材と、前記操作部材からの前記信号に応じて前記画像の一部を引き延ばして前記画像再生手段に拡大再生させる拡大手段と、前記画像に含まれる顔を示す顔情報が存在する場合、前記画像のうち当該顔情報が示す領域内に前記拡大再生の中心位置を決めるように前記拡大手段を制御する制御手段と、前記顔情報に含まれる付加情報を前記拡大再生画像とともに再生するように前記画像再生手段を制御する再生制御手段とを備え、前記顔情報が複数存在する場合、前記制御手段は、前記付加情報を含む顔情報が示す領域内に前記拡大再生の中心位置を優先して決めるように前記拡大手段を制御することを特徴とする。
請求項９に記載の発明による電子機器は、電子データによる画像を再生する画像再生手段と、拡大指示を示す信号を発する操作部材と、前記操作部材からの前記信号に応じて前記画像の一部を引き延ばして前記画像再生手段に拡大再生させる拡大手段と、前記画像に含まれる顔を示す顔情報が１つ存在する場合には、前記画像のうち当該顔情報が示す領域内に前記拡大再生の中心位置を決めるように前記拡大手段を制御し、前記顔情報が複数存在する場合には、前記画像の中央に近い位置に位置している顔を示す顔情報が示す領域内に前記拡大再生の中心位置を優先して決めるように前記拡大手段を制御する制御手段とを備えることを特徴とする。
請求項１６に記載の発明による電子機器は、電子データによる画像を再生する画像再生手段と、拡大指示を示す信号を発する操作部材と、前記操作部材からの前記信号に応じて前記画像の一部を引き延ばして前記画像再生手段に拡大再生させる拡大手段と、前記画像に含まれる顔を示す顔情報の有無に応じて前記拡大再生の中心位置を異ならせるように前記拡大手段を制御する制御手段と、前記画像に含まれる顔を示す顔情報が存在しない場合に、前記画像の再生時に前記画像再生手段によって再生された画像の中から顔領域を検出して前記顔領域を示す顔情報を出力する検出手段と、前記画像の再生時に前記検出手段から出力される前記顔情報を記録する記録手段と、を備え、前記制御手段は、前記画像に含まれる顔を示す顔情報が存在しない場合に、前記画像再生手段によって再生された画像について前記検出手段から出力される前記顔情報の有無に応じて前記拡大再生の中心位置を異ならせるように前記拡大手段を制御することを特徴とする電子機器。

本発明による電子機器では、顔表示モードにしなくても、適切に顔領域を拡大表示できる。

以下、図面を参照して本発明を実施するための最良の形態について説明する。
（第一の実施形態）
図１は、本発明の第一の実施形態による電子カメラの背面図である。図１において、電子カメラ１の背面に、液晶モニタ１６と、ズームボタン１７２と、切替ボタン１７３と、メニューボタン１７５と、削除ボタン１７４、ＯＫボタン１７６およびマルチセレクタ１７７とが設けられている。リング状に構成されたマルチセレクタ１７７は、押下操作に応じた押下位置信号を発生する。ＯＫボタン１７６の配設位置はマルチセレクタ１７７の中央部である。マルチセレクタ１７７およびＯＫボタン１７６は、電子カメラ１に各種設定を指示するための操作部材である。

ズームボタン１７２は、電子カメラ１にズームダウンまたはズームアップを指示するための操作部材である。切替ボタン１７３は、撮影を行う撮影モードと、撮影画像の再生表示を行う再生モードとの切替を電子カメラ１に指示するための操作部材である。メニューボタン１７５は、メニュー選択画面を液晶モニタ１６に表示させるための操作部材である。削除ボタン１７４は、電子カメラ１に画像ファイルの削除を指示するための操作部材である。

電子カメラ１の上面には、レリーズボタン１７１が配設されている。レリーズボタン１７１は、電子カメラ１０に撮影を指示するための操作部材である。

図２は、電子カメラ１の要部構成を説明するブロック図である。電子カメラ１は、メインＣＰＵ１１によって制御される。

撮影レンズ２１は、撮像素子２２の撮像面上に被写体像を結像させる。撮像素子２２はＣＣＤイメージセンサなどで構成され、撮像面上の被写体像を撮像し、撮像信号を撮像回路２３へ出力する。撮像素子２２は、静止画像の単写撮像、静止画像の連写撮像、および動画像の撮像がそれぞれ可能である。

ＮＤ(Neutral Density)フィルタ２０は、透過光を所定量（たとえば、アペックス値で３段相当）減衰させる減光部材である。ＮＤフィルタ２０は、駆動機構１９によって撮影レンズ２１の光軸と直交する向きに進退駆動される。ＮＤフィルタ２０が駆動されて被写体光の光路上へ挿入された場合、撮像素子２２へ入射される光量がＮＤフィルタ２０で制限される。一方、ＮＤフィルタ２０が駆動されて被写体光の光路外へ退避された場合、撮像素子２２へ入射される光量は制限されない。駆動機構１９は、メインＣＰＵ１１からの指示に応じてＮＤフィルタ２０に対する進退駆動を行う。

撮像回路２３は、メインＣＰＵ１１からの感度変更指示に応じて撮像感度（露光感度）を所定範囲（たとえばＩＳＯ１００相当〜ＩＳＯ８００相当）内において所定ステップで変更する。撮像感度は、撮像素子２２に蓄積された電荷の検出感度、もしくは不図示の増幅回路の増幅利得を変化させる被制御量のことをいう。撮像感度値は、相当するＩＳＯ感度値で表される。撮影回路２３はさらに、メインＣＰＵ１１からの撮影指示に応じて、内蔵されるＡ／Ｄ変換回路を用いてアナログ撮像信号をディジタルデータに変換する。

ＡＦ装置１８は、メインＣＰＵ１１からの指示に応じて撮影レンズ２１のフォーカス調節状態を検出し、検出結果に応じて撮影レンズ２１を構成する不図示のフォーカスレンズを光軸方向に進退駆動する。

メインＣＰＵ１１は、各ブロックから出力される信号を入力して所定の演算を行い、演算結果に基づく制御信号を各ブロックへ出力する。画像処理回路１２は、たとえばＡＳＩＣとして構成され、撮像回路２３から入力されるディジタル画像信号に対して画像処理を行う。画像処理には、たとえば、輪郭強調や色温度調整（ホワイトバランス調整）処理、画像信号に対するフォーマット変換処理が含まれる。

画像圧縮回路１３は、画像処理回路１２による処理後の画像信号に対して、JPEG方式で所定の圧縮比率の画像圧縮処理を行う。表示画像作成回路１５は、撮像画像を液晶モニタ１６に表示させるための表示データを作成する。

記録媒体３０は、電子カメラ１に対して着脱可能なメモリカードなどで構成される。記録媒体３０には、メインＣＰＵ１１からの指示によって撮影画像のデータおよびその情報を含むＥｘｉｆ形式の画像ファイルが記録される。記録媒体３０に記録された画像ファイルは、メインＣＰＵ１１からの指示によって読み出しが可能である。

Ｅｘｉｆ形式の画像ファイルは、JPEG画像フォーマットの画像データ内にサムネイル画像や撮影情報などのデータを埋め込むようにしたものである。このファイル構造は、図３に例示するように、画像の付属情報を記録するタグ領域３１と撮影画像データを記録する画像データ領域３２とを有する。

バッファメモリ１４は、画像処理前後および画像処理途中のデータを一時的に格納する他、記録媒体３０へ記録する前の画像ファイルを格納したり、記録媒体３０から読み出した画像ファイルを格納したりするために使用される。

操作部材１７は、上述した各種ボタンやスイッチ類を含み、レリーズボタン１７１やメニューボタン１７５の押下操作など、各操作部材の操作内容に応じた操作信号をメインＣＰＵ１１へ出力する。

＜撮影動作＞
メインＣＰＵ１１は、電子カメラ１が撮影モードに切替えられている場合、液晶モニタ１６にモニタ画像を表示させる。具体的には、撮像素子２２にモニタ用の撮像を行わせ、電荷蓄積後に出力される撮像信号を用いて画像処理回路１２に信号処理させ、信号処理後の画像データを表示画像作成回路１５へ出力させる動作を繰り返すことにより、モニタ画像を液晶モニタ１６に逐次表示させる。

メインＣＰＵ１１は、レリーズボタン１７１の半押し操作を示す操作信号が操作部材１７から入力されると、測光を開始させる。具体的には、撮像素子２２に測光用の撮像を行わせ、電荷蓄積後に出力される撮像信号の信号値から被写界の明るさ情報を取得する。メインＣＰＵ１１はさらに、明るさ情報に基づいて露出演算を行い、露出条件を決定する。撮像信号に対して画像処理回路１２に信号処理させ、信号処理後の画像データを表示画像作成回路１５へ出力させることにより、半押し操作後のモニタ画像が液晶モニタ１６に表示される。

レリーズボタン１７１の全押しを示す操作信号が操作部材１７から入力されると、メインＣＰＵ１１は撮影動作を開始させる。具体的には、上記決定した露出条件で撮像素子２２に撮影用の電荷蓄積を行わせる。画像処理回路１２が信号処理を施した画像データを表示画像作成回路１５へ出力すると、撮影画像が液晶モニタ１６に表示される。また、画像圧縮回路１３によって圧縮処理された画像データが記録媒体３０へ記録される。

＜再生動作＞
メインＣＰＵ１１は、撮影モード時に切替ボタン１７３の押下を示す操作信号を操作部材１７から受けると再生モードへ切替え、記録媒体３０に記録されている直近の撮影画像を液晶モニタ１６に再生表示させる（図１）。メインＣＰＵ１１は、マルチセレクタ１７７の左操作を示す信号を操作部材１７から受けると、１コマ前の撮影画像を液晶モニタ１６に再生表示させる。また、マルチセレクタ１７７の右操作を示す信号を操作部材１７から受けると、１コマ後ろの撮影画像を液晶モニタ１６に再生表示させる。メインＣＰＵ１１は、液晶モニタ１６で再生表示中に切替ボタン１７３の押下を示す操作信号を操作部材１７から受けると、再生動作を止めて撮影モードに戻る。

本実施形態の電子カメラ１は、再生モード時の動作に特徴を有するので、以後再生モード時の処理を中心に説明する。図４は、表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。メインＣＰＵ１１は、再生モードにおいて液晶モニタ１６へ画像を再生表示させると、図４による処理を起動する。

図４のステップＳ１１において、メインＣＰＵ１１はズームボタン１７２が操作されたか否かを判定する。メインＣＰＵ１１は、ズームボタン１７２のテレ側「Ｔ」押下を示す信号を操作部材１７から受けると、ステップＳ１１を肯定判定してステップＳ１２へ進む。メインＣＰＵ１１は、ズームボタン１７２のテレ側「Ｔ」押下を示す信号を操作部材１７から受けない場合は、ステップＳ１１を否定判定して当該判定処理を繰り返す。

ステップＳ１２において、メインＣＰＵ１１は顔検出情報があるか否かを判定する。顔検出情報は、画像における顔位置を示す座標およびその顔のサイズ（画素領域）を示す情報であり、画像に対して顔検出処理を行った場合に生成される。顔検出情報は、Ｅｘｉｆ画像ファイルが記録媒体３０に記録される場合、ファイル内の所定領域（たとえばタグ領域３１）に記録される。なお、画像ファイルに関連付けた別ファイルとして顔検出情報を記録しても構わない。

メインＣＰＵ１１は、表示中の画像に関する顔検出情報が存在する場合にステップＳ１２を肯定判定してステップＳ１３へ進み、顔検出情報が存在しない場合にはステップＳ１２を否定判定し、ステップＳ２０へ進む。

ステップＳ１３において、メインＣＰＵ１１は顔ズーム再生を行ってステップＳ１４へ進む。具体的には、顔領域（顔を構成する画素領域）内の所定位置（たとえば領域の中心座標）を拡大中心とし、液晶モニタ１６に表示中の画像のうち、拡大中心の周囲を引き延ばしてズームアップ表示する。表示倍率は、顔の表示サイズを液晶モニタ画面の短辺の略１／３にする倍率とする。なお、顔ズーム再生する前の画像（元画像と呼ぶ）で「顔」の表示サイズが液晶モニタ画面の短辺の１／３を超えている場合は、表示倍率を１．２倍とする。また、元画像で「顔」が画像の端部に位置する場合など、顔領域の中心座標を拡大中心にできない場合には、可能な範囲で拡大中心を顔領域の中心座標に寄せる。

図５は、顔ズーム再生（ステップＳ１３）後の表示画面を例示する図である。図１に例示した表示画像を元画像とし、元画像のファイルに人物Ａと人物Ｂの顔検出情報が含まれていれば、メインＣＰＵ１１は、元画像において中央に近い位置に検出されている「顔」（人物Ａ）について顔ズーム再生する。

図４のステップＳ１４において、メインＣＰＵ１１は顔検出情報が複数の顔情報を含むか否かを判定する。メインＣＰＵ１１は、複数の顔情報が含まれている場合にステップＳ１４を肯定判定してステップＳ１５へ進む。メインＣＰＵ１１は、複数の顔情報が含まれていない場合にはステップＳ１４を否定判定し、ステップＳ２１へ進む。

ステップＳ１５において、メインＣＰＵ１１はマルチセレクタ１７７が操作されたか否かを判定する。メインＣＰＵ１１は、マルチセレクタ１７７の押下操作を示す信号を操作部材１７から受けると、ステップＳ１５を肯定判定してステップＳ１８へ進む。メインＣＰＵ１１は、マルチセレクタ１７７の押下操作を示す信号を操作部材１７から受けない場合は、ステップＳ１５を否定判定してステップＳ１６へ進む。

ステップＳ１６において、メインＣＰＵ１１は顔情報の削除操作が行われたか否かを判定する。メインＣＰＵ１１は、削除ボタン１７４の押下操作を示す信号を操作部材１７から受けると、ステップＳ１６を肯定判定してステップＳ１７へ進む。メインＣＰＵ１１は、削除ボタン１７４の押下操作を示す信号を操作部材１７から受けない場合は、ステップＳ１６を否定判定してステップＳ１２へ戻る。ステップＳ１２へ戻る場合は、上述した処理を繰り返す。

ユーザーによって削除操作されるのは、「顔」でない領域がズームアップ表示されている場合、もしくはユーザーが望まない「顔」がズームアップ表示されている場合である。ステップＳ１７において、メインＣＰＵ１１は、拡大中心を決定する際に用いた顔情報を顔検出情報から削除してステップＳ１２へ戻る。これにより、次回以降の顔ズーム再生において、当該領域についてのズームアップ表示が回避される。

ステップＳ１５を肯定判定して進むステップＳ１８において、メインＣＰＵ１１は、マルチセレクタ１７７による操作信号に応じた顔ズーム再生を行ってステップＳ１９へ進む。たとえば、左操作を示す信号を受けた場合、「顔」（人物Ａ）に代えて、人物Ａより左に位置する「顔」（人物Ｂ）について顔ズーム再生する。顔の表示サイズを液晶モニタ画面の短辺の略１／３にする点、元画像で「顔」の表示サイズが液晶モニタ画面の短辺の１／３を超えている場合は表示倍率を１．２倍とする点、顔領域内の所定位置（たとえば領域の中心座標）を拡大中心とする点、および可能な範囲で拡大中心を顔領域の中心座標に寄せる点は、ステップＳ１３の場合と同様である。

図６は、顔ズーム再生（ステップＳ１８）後の表示画面を例示する図である。元画像において人物Ａおよび人物Ｂ間で「顔」の領域の大きさが異なっても、顔ズーム再生後はほぼ等しい大きさで表示される。

メインＣＰＵ１１は、顔ズーム再生後にマルチセレクタ１７７の左操作を示す信号を受けた場合、顔検出情報に含まれる顔情報のうち、顔ズーム再生中の「顔」より水平方向左側に位置する「顔」の顔情報に基づいて顔ズーム再生を行う。もし、水平方向の座標が共通する「顔」の顔情報が複数存在する場合は、垂直方向に上に位置する「顔」を優先して顔ズーム再生する。

メインＣＰＵ１１は、顔ズーム再生後にマルチセレクタ１７７の右操作を示す信号を受けた場合、顔検出情報に含まれる顔情報のうち、顔ズーム再生中の「顔」より水平方向右側に位置する「顔」の顔情報に基づいて顔ズーム再生を行う。もし、水平方向の座標が共通する「顔」の顔情報が複数存在する場合は、垂直方向に下に位置する「顔」を優先して顔ズーム再生する。

図４のステップＳ１９において、メインＣＰＵ１１はズームボタン１７２が操作されたか否かを判定する。メインＣＰＵ１１は、ズームボタン１７２の「Ｔ」（テレ側）または「Ｗ」（ワイド側）操作を示す信号を操作部材１７から受けると、ステップＳ１９を肯定判定してステップＳ２２へ進む。メインＣＰＵ１１は、ズームボタン１７２の操作を示す信号を操作部材１７から受けない場合は、ステップＳ１９を否定判定してステップＳ１５へ戻る。ステップＳ１５戻る場合は、上述した処理を繰り返す。

上述したステップＳ１２を否定判定して進むステップＳ２０において、メインＣＰＵ１１は通常ズーム再生を行ってステップＳ２１へ進む。具体的には、元画像の中心座標を拡大中心とし、液晶モニタ１６に表示中の画像のうち、拡大中心の周囲を引き延ばしてズームアップ表示する。表示倍率は、たとえば１．２倍とする。

ステップＳ２１において、メインＣＰＵ１１はズームボタン１７２が操作されたか否かを判定する。メインＣＰＵ１１は、ズームボタン１７２の「Ｔ」（テレ側）または「Ｗ」（ワイド側）操作を示す信号を操作部材１７から受けると、ステップＳ２１を肯定判定してステップＳ２２へ進む。メインＣＰＵ１１は、ズームボタン１７２の操作を示す信号を操作部材１７から受けない場合は、ステップＳ２１を否定判定してステップＳ２３へ進む。

ステップＳ２２において、メインＣＰＵ１１は通常ズーム再生を行ってステップＳ２３へ進む。ズームボタン１７２の「Ｔ」（テレ側）操作を示す信号を操作部材１７から受けた場合、現表示画面における中心座標を拡大中心とし、液晶モニタ１６に表示中の画像のうち、拡大中心の周囲を引き延ばしてズームアップ表示する。表示倍率は、たとえば１．２倍とする。一方、ズームボタン１７２の「Ｗ」（ワイド側）操作を示す信号を操作部材１７から受けた場合、現表示画面における中心座標を縮小中心とし、液晶モニタ１６に表示中の画像をズームダウン表示する。表示倍率は、たとえば１／１．２倍とする。なお、ズームダウンにより等倍表示に戻す場合は、元画像の中心座標が縮小中心に対応する。

ステップＳ２３において、メインＣＰＵ１１はＯＫボタン１７６が操作されたか否かを判定する。メインＣＰＵ１１は、ＯＫボタン１７６の押下操作を示す信号を操作部材１７から受けると、ステップＳ２３を肯定判定し、ズームダウンにより等倍表示に戻してステップＳ１１へ戻る。メインＣＰＵ１１は、ＯＫボタン１７６の押下操作を示す信号を操作部材１７から受けない場合は、ステップＳ２３を否定判定してステップＳ２１へ戻る。

上記顔検出情報を生成する顔検出処理について説明する。メインＣＰＵ１１は、撮影時の撮影準備画像（モニタ画像）の中から人物の顔に対応する画像領域を抽出する。抽出方法としては、特開平９−１３８４７０号公報に開示されるように、特定色を抽出する方法、特定形状パターンを抽出する方法、背景に相当すると推定される領域を除去する方法等の複数の異なる抽出方法をあらかじめ評価して重みを定め、各抽出方法で主要な被写体像（主要部）を抽出し、抽出された主要部を定めた重みで重み付けし、その結果に応じて主要部を判定および抽出する。

また、別の主要部抽出方法としては、特開平９−１３８４７１号公報に開示されるように、画像中の複数点の濃度または輝度を測定してその変化量を求め、変化量が所定値以上の点を基準点として設定した後に、基準点から所定範囲内で濃度等の変化量等を用いて検索範囲および検索方向パターンを設定し、検索範囲内で検索方向パターンが示す方向における濃度等の変化量が所定値以上の箇所を検索し、次いでこの箇所を基準として検索を行うことを繰り返し、検索・設定した基準点を結んで主要部を抽出する。

メインＣＰＵ１１は、液晶モニタ１６に表示しているモニタ画像について顔領域を抽出し、抽出した顔領域の位置情報、その顔領域のサイズ情報を算出する。メインＣＰＵ１１は、このように認識した顔領域に対応する画像データを用いてフォーカス調節を行う。たとえば、レリーズボタン１７１の半押し操作に応じて上記顔検出処理を行い、その後にレリーズボタン１７１の全押し操作に応じて撮影動作を行うと、顔検出情報を含む撮影画像ファイルを記録媒体３０へ保存する。

被写体人物の顔を複数検出した場合、たとえば、画像の中央に近い「顔」から順に番号を付与して顔検出情報に記録する。ステップＳ１３において顔ズーム再生する場合、付与された番号が小さい「顔」を優先して行う。なお、メニュー操作に応じて、顔領域のサイズが大きい「顔」を優先して顔ズーム再生するように切替え自在に構成してもよい。

以上説明した第一の実施形態によれば、次の作用効果が得られる。
（１）顔検出情報に基づいて顔領域の中心座標を拡大中心とし、液晶モニタ１６に表示中の画像のうち拡大中心の周囲を引き延ばしてズームアップ表示する顔ズーム再生を行うようにした。これにより、スクロール操作しなくても拡大した被写体人物の「顔」を液晶モニタ１６の中央に表示させることができる。

（２）拡大後の顔の表示サイズを液晶モニタ画面の短辺の略１／３にする表示倍率としたので、１操作（ズームボタン１７２「Ｔ」操作のみ）で適切な大きさにズームアップ表示できる。

（３）顔検出情報に顔情報が複数存在する場合は、顔ズーム再生後のマルチセレクタ１７７操作に応じて他の顔を対象に顔ズーム再生を行うようにした。これにより、ズーム対象の「顔」の切替えを容易にすることができる。また、元画像において「顔」の大きさが異なる場合でも、各「顔」をほぼ共通の大きさで顔ズーム再生表示できる。

（４）顔ズーム再生後に、当該拡大中心を得るための情報（すなわち顔情報）を顔検出情報から削除可能に構成した。これにより、「顔」でない領域がズームアップ表示されること、もしくはユーザーが望まない「顔」がズームアップ表示されることを、次回以降の顔ズーム再生において回避できる。

（５）顔ズーム再生後、２回目のズームボタン１７２操作（「Ｔ」または「Ｗ」）で通常ズーム再生を行うようにした。通常ズーム再生は、現表示画面の中心座標を拡大／縮小中心とする。ユーザーによるモード切替え操作がなくても、顔ズーム再生後に通常ズーム再生へ自動的に切替えるので、使い勝手のよい拡大／縮小表示を実現できる。

（変形例１）
上述した実施形態では、顔検出情報が存在しなければ通常ズーム再生を行ったが（ステップＳ２０）、通常ズーム再生を行う前に顔検出処理を行うように構成してもよい。図７は、変形例１による表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。メインＣＰＵ１１は、図４による処理に代えて図７による処理を起動する。

図７において、ステップＳ２５およびステップＳ２６が追加される点が図４と異なるので、これら相違点を中心に説明する。ステップＳ１２を否定判定して進むステップＳ２５において、メインＣＰＵ１１は、液晶モニタ１６に表示中の元画像の画像データを用いて顔検出処理を行い、ステップＳ２６へ進む。メインＣＰＵ１１が検出した顔検出情報は、記録媒体３０内の元画像の画像ファイルに記録される。なお、顔検出処理の内容は上述したとおりである。

ステップＳ２６において、メインＣＰＵ１１は顔検出したか否かを判定する。メインＣＰＵ１１は、顔検出した場合にステップＳ２６を肯定判定してステップＳ１３へ進み、顔検出していない場合にはステップＳ２６を否定判定してステップＳ２０へ進む。

以上説明した変形例１によれば、顔検出情報が存在しない場合でも、新たに顔検出処理を施すことによって被写体人物の「顔」を液晶モニタ１６の中央に表示させることができる。

（変形例２）
拡大中心を変更自在に構成してもよい。図８は、変形例２による表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。メインＣＰＵ１１は、図７による処理に代えて図８による処理を起動する。

図８において、ステップＳ２７およびステップＳ２８が追加される点が図７と異なるので、これら相違点を中心に説明する。ステップＳ２２の次に進むステップＳ２７において、メインＣＰＵ１１は指定操作が行われたか否かを判定する。メインＣＰＵ１１は、マルチセレクタ１７７の押下操作を示す信号を操作部材１７から受けると、ステップＳ２７を肯定判定する。メインＣＰＵ１１はさらに、マルチセレクタ１７７の左操作を示す信号を受けた場合、ズーム再生中の表示領域より水平方向左側の画像を表示するようにスクロールさせる。同様に、マルチセレクタ１７７の右操作を示す信号を受けた場合、ズーム再生中の表示領域より水平方向右側の画像を表示するようにスクロールさせる。また、マルチセレクタ１７７の上操作を示す信号を受けた場合、ズーム再生中の表示領域より垂直方向上側の画像を表示するようにスクロールさせる。さらにまた、マルチセレクタ１７７の下操作を示す信号を受けた場合、ズーム再生中の表示領域より垂直方向下側の画像を表示するようにスクロールさせる。メインＣＰＵ１１は、表示画像をスクロールさせるとステップＳ２８へ進む。

一方、メインＣＰＵ１１は、マルチセレクタ１７７の押下操作を示す信号を操作部材１７から受けない場合はステップＳ２７を否定判定し、ステップＳ２３へ進む。ステップＳ２８において、メインＣＰＵ１１は、スクロール後の表示画像の中心座標を示す情報を顔検出情報に登録し、ステップＳ２３へ進む。顔検出情報は、記録媒体３０内の元画像の画像ファイルに記録される。これにより、次回以降の顔ズーム再生において、当該領域についてのズームアップ表示が行われる。

以上説明した変形例２によれば、通常ズーム再生後に表示位置を指定する操作が行われた場合には、指定操作後の表示中心を示す情報を保存することにより、次回以降の顔ズーム再生において当該領域をズームアップ表示させることができる。

（変形例３）
上述した説明では、表示拡大／表示縮小を指示するための操作部材（ズームボタン１７２）と、表示領域の移動を指示するための操作部材（マルチセレクタ１７７）とを分ける場合を説明したが、これらを分けずに共通の操作部材によって表示拡大／表示縮小および表示領域の移動を指示するように構成してもよい。

（変形例４）
電子カメラを例に説明したが、電子データによる再生画像を表示または投影する機器であれば、フォトビューワやプロジェクタにも本発明を適用できる。

（第二の実施形態）
第二の実施形態では、顔検出情報に加えて、その顔の人物に関する付加情報がファイル内の所定領域（たとえばタグ領域３１）に記録可能に構成される。図９は、第二の実施形態による電子カメラ１Ａの要部構成を説明するブロック図である。図２に例示した場合に比べて、不揮発性メモリであるフラッシュメモリ１０が追加されている点が異なる。

第二の実施形態のメインＣＰＵ１１が行う再生モード時の処理の流れについて、図１０および図１１のフローチャートを参照して説明する。メインＣＰＵ１１は、再生モードにおいて液晶モニタ１６に画像を再生表示させると、図１０、図１１による処理を起動する。図１０および図１１において、図４の場合と同様の処理を行うステップ番号には同一番号を付して説明を省略する。

第二の実施形態のメインＣＰＵ１１は、ステップＳ１３において顔ズーム再生する場合に、顔検出情報のうち付加情報が存在する「顔」を付加情報が存在しない「顔」より優先させて表示対象にする。たとえば、図１に例示した表示画像を元画像とし、元画像のファイルに人物Ａと人物Ｂの顔検出情報が含まれているものとする。そして、人物Ａに関する付加情報が存在し、人物Ｂに関する付加情報が存在しないと仮定すれば、ステップＳ１３では人物Ａの「顔」を先に顔ズーム再生する。付加情報が存在する「顔」が複数存在する場合は、たとえば、元画像において中央に近い位置に検出されている「顔」を優先させて顔ズーム再生する。

図１０のステップＳ１３Ｂにおいて、メインＣＰＵ１１は上記付加情報が記録されているか否かを判定する。メインＣＰＵ１１は、顔ズーム再生表示中の「顔」の人物に関する付加情報がタグ領域３１に存在する場合にステップＳ１３Ｂを肯定判定してステップＳ１３Ｃへ進み、付加情報が存在しない場合にはステップＳ１３Ｂを否定判定し、ステップＳ１４へ進む。

ステップＳ１３Ｃにおいて、メインＣＰＵ１１は、タグ領域３１から付加情報を読み出し、顔ズーム再生表示中の「顔」とともに当該付加情報を液晶モニタ１６に表示させる。図１２は、付加情報表示（ステップＳ１３Ｃ）後の表示画面を例示する図である。

＜付加情報の編集＞
図１２に例示した画面（顔ズーム再生表示中の「顔」と当該「顔」に関する付加情報）を液晶モニタ１６に表示させたメインＣＰＵ１１は、たとえば、ＯＫボタン１７６の押下を示す操作信号を操作部材１７から受けると、図１３に例示する編集画面を液晶モニタ１６に表示させる。メインＣＰＵ１１は、既に登録されている付加情報（たとえば、登録名、グループ名、メガネの有無（かける／かけない）など）の内容を操作部材１７からの操作信号に応じて変更する。変更した内容は所定領域（本例ではタグ領域３１）に上書き更新する。メインＣＰＵ１１は、たとえば、ＯＫボタン１７６の押下を示す操作信号を操作部材１７から受けると、図１３に例示する編集画面に代えて、図１２と同様の顔ズーム再生画面を液晶モニタ１６に表示させる。「顔」とともに表示する付加情報は、編集された付加情報である。

ステップＳ１５を肯定判定した場合（マルチセレクタ１７７の押下操作を示す信号を操作部材１７から受けた場合）のメインＣＰＵ１１は、ステップＳ３０に進む。ステップＳ３０において、メインＣＰＵ１１は、タグ領域３１に顔検出情報が他にも存在するか否かを判定する。メインＣＰＵ１１は、他にも顔検出情報が存在する場合にステップＳ３０を肯定判定してステップＳ１８へ進む。メインＣＰＵ１１は、他の顔検出情報が存在しない場合にステップＳ３０を否定判定してステップＳ３１へ進む。

ステップＳ１８において、メインＣＰＵ１１は、「顔」（人物Ａ）に代えて、他の「顔」（人物Ｂ）について顔ズーム再生する。顔の表示サイズを液晶モニタ画面の短辺の略１／３にする点、元画像で「顔」の表示サイズが液晶モニタ画面の短辺の１／３を超えている場合は表示倍率を１．２倍とする点、顔領域内の所定位置（たとえば領域の中心座標）を拡大中心とする点、および可能な範囲で拡大中心を顔領域の中心座標に寄せる点は、ステップＳ１３の場合と同様である。

ステップＳ１８Ｂにおいて、メインＣＰＵ１１は上記付加情報が記録されているか否かを判定する。メインＣＰＵ１１は、顔ズーム再生表示中の「顔」の人物に関する付加情報がタグ領域３１に存在する場合にステップＳ１８Ｂを肯定判定してステップＳ１８Ｃへ進み、付加情報が存在しない場合にはステップＳ１８Ｂを否定判定し、ステップＳ１９へ進む。

ステップＳ１８Ｃにおいて、メインＣＰＵ１１は、タグ領域３１から付加情報を読み出し、顔ズーム再生表示中の「顔」とともに当該付加情報を液晶モニタ１６に表示させる。この場合の液晶モニタ１６の表示画面は図１２と同様であり、付加情報の編集操作を受け付ける点はステップＳ１３Ｃによる表示中と同様である。

ステップＳ３０を否定判定して進むステップＳ３１において、メインＣＰＵ１１は、タグ領域３１に付加情報が存在しない（すなわち未登録の）顔検出情報が存在するか否かを判定する。メインＣＰＵ１１は、未登録の顔検出情報が存在する場合にステップＳ３１を肯定判定してステップＳ３２へ進む。メインＣＰＵ１１は、未登録の顔検出情報が存在しない場合にはステップＳ３１を否定判定して図１１のステップＳ２２へ進む。

ステップＳ３２において、メインＣＰＵ１１は、他の「顔」について顔ズーム再生する。顔の表示サイズを液晶モニタ画面の短辺の略１／３にする点、元画像で「顔」の表示サイズが液晶モニタ画面の短辺の１／３を超えている場合は表示倍率を１．２倍とする点、顔領域内の所定位置（たとえば領域の中心座標）を拡大中心とする点、および可能な範囲で拡大中心を顔領域の中心座標に寄せる点は、ステップＳ１３の場合と同様である。

＜付加情報の登録＞
顔ズーム再生処理（ステップＳ３２）によって図６と同様の画面（顔ズーム再生表示中の「顔」だけで付加情報の表示なし）を液晶モニタ１６に表示させたメインＣＰＵ１１は、ステップＳ３３において、メインＣＰＵ１１は登録操作が行われたか否かを判定する。メインＣＰＵ１１は、たとえば、ＯＫボタン１７６の押下を示す操作信号を操作部材１７から受けると、図１４に例示する登録画面を液晶モニタ１６に表示させる。メインＣＰＵ１１は、新たな付加情報（たとえば、登録名、グループ名、メガネの有無（かける／かけない）など）を示す操作信号を操作部材１７から受けた場合にステップＳ３３を肯定判定してステップＳ３４へ進む。メインＣＰＵ１１は、新たな付加情報を示す操作信号を操作部材１７から受けない場合にはステップＳ３３を否定判定してステップＳ１８Ｂへ進む。

ステップＳ３４において、メインＣＰＵ１１は新たな付加情報を登録（タグ領域３１へ記録する）し、図１４に例示する登録画面に代えて図１２と同様の顔ズーム再生画面を液晶モニタ１６に表示させてステップＳ１８Ｂへ進む。この場合に「顔」とともに表示する付加情報は、登録された付加情報である。

上述したステップＳ１２を否定判定した場合（タグ領域３１に顔検出情報が存在しない場合）のメインＣＰＵ１１は、図１１のステップＳ４０へ進む。図１１のステップＳ４０において、メインＣＰＵ１１は、タグ領域３１に付加情報が存在しない（すなわち未登録の）顔検出情報が存在するか否かを判定する。メインＣＰＵ１１は、未登録の顔検出情報が存在する場合にステップＳ４０を肯定判定してステップＳ４１へ進む。メインＣＰＵ１１は、未登録の顔検出情報が存在しない場合にはステップＳ４０を否定判定してステップＳ２０へ進む。

ステップＳ４１において、メインＣＰＵ１１は、未登録の「顔」、すなわち、顔検出情報が存在するものの付加情報が存在しない「顔」を再生するか否かを判定する。メインＣＰＵ１１は、再生表示するように設定されている（たとえば、あらかじめメニュー設定される）場合にステップＳ４１を肯定判定してステップＳ４２へ進む。メインＣＰＵ１１は、再生表示するように設定されていない場合にステップＳ４１を否定判定してステップＳ２０へ進む。

ステップＳ４２において、メインＣＰＵ１１は、未登録の「顔」について顔ズーム再生する。顔の表示サイズを液晶モニタ画面の短辺の略１／３にする点、元画像で「顔」の表示サイズが液晶モニタ画面の短辺の１／３を超えている場合は表示倍率を１．２倍とする点、顔領域内の所定位置（たとえば領域の中心座標）を拡大中心とする点、および可能な範囲で拡大中心を顔領域の中心座標に寄せる点は、ステップＳ１３の場合と同様である。

ステップＳ４３において、メインＣＰＵ１１は登録操作が行われたか否かを判定する。顔ズーム再生処理（ステップＳ４２）によって図６と同様の画面（顔ズーム再生表示中の「顔」だけで付加情報の表示なし）を液晶モニタ１６に表示させたメインＣＰＵ１１は、たとえば、ＯＫボタン１７６の押下を示す操作信号を操作部材１７から受けると、図１４に例示する登録画面を液晶モニタ１６に表示させる。メインＣＰＵ１１は、新たな付加情報（たとえば、登録名、グループ名、メガネの有無（かける／かけない）など）を示す操作信号を操作部材１７から受けた場合にステップＳ４３を肯定判定してステップＳ４４へ進む。メインＣＰＵ１１は、新たな付加情報を示す操作信号を操作部材１７から受けない場合にはステップＳ４３を否定判定して図１０のステップＳ１３Ｂへ戻る。

ステップＳ４４において、メインＣＰＵ１１は新たな付加情報を登録（タグ領域３１へ記録する）し、図１４に例示する登録画面に代えて図１２と同様の顔ズーム再生画面を液晶モニタ１６に表示させて図１０のステップＳ１３Ｂへ戻る。この場合に「顔」とともに表示する付加情報は、登録された付加情報である。

以上説明した第二の実施形態によれば、次の作用効果が得られる。
（１）電子カメラ１Ａは、画像に含まれる「顔」を示す顔検出情報が存在する場合、画像のうち当該顔検出情報が示す顔領域を拡大再生の中心にした拡大再生画像とともに、顔検出情報に含まれる付加情報を液晶モニタ１６に再生表示するように制御したので、拡大再生した「顔」に関する情報を「顔」とともに知らせることができる。

（２）付加情報を含んでいない顔検出情報に対して、操作部材１７で受け付けられた情報を付加情報として加えるようにしたので、拡大再生した「顔」に関する情報を後から登録することができる。
（３）付加情報を含んでいない顔検出情報が示す顔領域を拡大再生の中心にした拡大再生画像を再生表示しているときに付加情報を加えるので、拡大再生された「顔」を確認した上で登録できる。

（４）顔検出情報に含まれる付加情報を、操作部材１７で受け付けられた情報に基づいて更新するようにしたので、拡大再生した「顔」に関する情報を後から編集することができる。
（５）付加情報を含んでいる顔検出情報が示す顔領域を拡大再生の中心にした拡大再生画像を再生表示しているときに付加情報を加えるので、拡大再生された「顔」を確認した上で編集できる。
（６）画像に含まれる複数の「顔」を示す複数の顔検出情報が存在する場合、付加情報を含む顔情報が示す顔領域を拡大再生の中心にした画像を優先して表示させることができる。

（変形例５）
以上の説明では、顔検出情報を記録媒体３０に記録する画像ファイル内の所定領域（たとえばタグ領域３１）に記録する例を説明した。この代わりに、画像ファイルに関連付けた別ファイルとして、図９におけるフラッシュメモリ１０に記録するようにしてもよい。

（変形例６）
ステップＳ１３において顔ズーム再生を行う場合、顔検出情報のうち付加情報が存在する「顔」を付加情報が存在しない「顔」より優先させて表示対象にする例を説明したが、付加情報が存在する「顔」の中でも優先順位をつけて表示順を制御するように構成してもよい。たとえば、付加情報に含められているグループ名ごとにあらかじめ優先順位をつけておき、優先順位が高いグループ名で付加情報が記録されている人物の「顔」を優先して顔ズーム再生対象にする。

（変形例７）
また、同じグループ名で付加情報が記録されている人物の「顔」の中でも優先順位をつけて表示順を制御するように構成してもよい。たとえば、記録媒体３０あるいはフラッシュメモリ１０の所定フォルダ内に記録されている全画像ファイルについて人物の「顔」の登場回数（画像に「顔」が含まれている数）を計数し、登場回数が多い人物の「顔」を優先して顔ズーム再生対象にする。

（変形例８）
あらかじめタグ領域に３１に顔検出情報が記録されている場合を例に説明したが、タグ領域に３１に顔検出情報が記録されていない場合には、操作部材１７が操作された時点で顔検出処理を行うようにしてもよい。たとえば、ステップＳ１１においてズームボタン１７２のテレ側「Ｔ」押下を示す信号を操作部材１７から受けた場合に、顔検出処理を行ってからステップＳ１１を肯定判定してステップＳ１２へ進む。

以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。上述した実施形態と変形例を組み合わせてもよく、たとえば、図４の処理にステップＳ２７およびステップＳ２８（図８）を追加するようにしてもよい。

本発明の第一の実施形態による電子カメラの背面図である。電子カメラの要部構成を説明するブロック図である。Ｅｘｉｆファイル構造を示す図である。表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。顔ズーム再生後の表示画面を例示する図である。顔ズーム再生後の表示画面を例示する図である。変形例１による表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。変形例２による表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。第二の実施形態による電子カメラの要部構成を説明するブロック図である。表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。表示倍率の変更を行うズーム処理の流れを説明するフローチャートである。顔ズーム再生後の表示画面を例示する図である。編集画面を例示する図である。登録画面を例示する図である。

符号の説明

１、１Ａ…電子カメラ
１１…メインＣＰＵ
１５…表示画像作成回路
１６…液晶モニタ
１７（１７１〜１７７）…操作部材
３０…記録媒体

Claims

電子データによる画像を再生する画像再生手段と、
拡大指示を示す信号を発する操作部材と、
前記操作部材からの前記信号に応じて前記画像の一部を引き延ばして前記画像再生手段に拡大再生させる拡大手段と、
前記画像に含まれる顔を示す顔情報が存在する場合、前記画像のうち当該顔情報が示す領域内に前記拡大再生の中心位置を決めるように前記拡大手段を制御する制御手段と、
前記顔情報に含まれる付加情報を前記拡大再生画像とともに再生するように前記画像再生手段を制御する再生制御手段とを備え、
前記顔情報が複数存在する場合、前記制御手段は、前記付加情報を含む顔情報が示す領域内に前記拡大再生の中心位置を優先して決めるように前記拡大手段を制御することを特徴とする電子機器。
請求項１に記載の電子機器において、
前記付加情報は、前記画像が含む顔に対応する人物の情報を含むことを特徴とする電子機器。
請求項２に記載の電子機器において、
情報入力を受け付ける操作部材と、
前記付加情報を含んでいない前記顔情報に対して前記受け付けられた情報を前記付加情報として加える情報付加手段とをさらに備えることを特徴とする電子機器。
請求項３に記載の電子機器において、
前記情報付加手段は、前記制御手段によって前記付加情報を含んでいない前記顔情報が示す領域内に前記拡大再生の中心位置が決められている場合に前記付加情報を加えることを特徴とする電子機器。
請求項３または４に記載の電子機器において、
前記顔情報が含んでいる前記付加情報を前記受け付けられた情報に基づいて更新する情報更新手段をさらに備えることを特徴とする電子機器。
請求項５に記載の電子機器において、
前記情報更新手段は、前記制御手段によって前記付加情報を含んでいる前記顔情報が示す領域内に前記拡大再生の中心位置が決められている場合に前記付加情報を更新することを特徴とする電子機器。
請求項１〜６のいずれか一項に記載の電子機器において、
前記制御手段は、前記付加情報を含む顔情報が複数存在する場合、前記付加情報を含む顔情報のうち、前記画像の中央に近い位置に位置している顔を示す顔情報が示す領域内に前記拡大再生の中心位置を優先して決めるように前記拡大手段を制御することを特徴とする電子機器。
請求項１〜７のいずれか一項に記載の電子機器において、
前記制御手段は、前記顔情報が存在しない場合には、前記画像の中心位置を前記拡大再生の中心位置に決めるように前記拡大手段を制御することを特徴とする電子機器。
電子データによる画像を再生する画像再生手段と、
拡大指示を示す信号を発する操作部材と、
前記操作部材からの前記信号に応じて前記画像の一部を引き延ばして前記画像再生手段に拡大再生させる拡大手段と、
前記画像に含まれる顔を示す顔情報が１つ存在する場合には、前記画像のうち当該顔情報が示す領域内に前記拡大再生の中心位置を決めるように前記拡大手段を制御し、前記顔情報が複数存在する場合には、前記画像の中央に近い位置に位置している顔を示す顔情報が示す領域内に前記拡大再生の中心位置を優先して決めるように前記拡大手段を制御する制御手段とを備えることを特徴とする電子機器。
請求項９に記載の電子機器において、
前記顔情報が複数存在する場合に拡大再生の中心位置を他の顔情報が示す領域内に変更するように指示する指示手段をさらに備え、
前記制御手段は、前記指示手段により指示された顔情報が示す領域内に前記拡大再生の中心位置を決めるように前記拡大手段を制御することを特徴とする電子機器。
請求項９に記載の電子機器において、
前記画像の中から顔領域を検出する検出手段をさらに備え、
前記制御手段は、前記顔情報が存在しない場合、前記画像のうち前記検出手段が検出した顔領域内に前記拡大再生の中心位置を決めるように前記拡大手段を制御することを特徴とする電子機器。
請求項１１に記載の電子機器において、
前記制御手段は、前記検出手段が顔領域を検出しない場合、前記画像の中心位置を前記拡大再生の中心位置に決めるように前記拡大手段を制御することを特徴とする電子機器。
請求項９〜１２のいずれか一項に記載の電子機器において、
前記制御手段は、前記画像のデータを格納するファイルのタグ情報を参照して前記顔情報の有無を判定することを特徴とする電子機器。
請求項１１または１２に記載の電子機器において、
情報追加指示に応じて、前記顔情報に前記検出手段が検出した顔領域の情報を加える情報追加手段をさらに備えることを特徴とする電子機器。
請求項１０に記載の電子機器において、
情報削除指示に応じて、前記拡大手段が決めた前記拡大再生の中心位置に対応する情報を、前記顔情報から削除する情報削除手段をさらに備えることを特徴とする電子機器。
電子データによる画像を再生する画像再生手段と、
拡大指示を示す信号を発する操作部材と、
前記操作部材からの前記信号に応じて前記画像の一部を引き延ばして前記画像再生手段に拡大再生させる拡大手段と、
前記画像に含まれる顔を示す顔情報の有無に応じて前記拡大再生の中心位置を異ならせるように前記拡大手段を制御する制御手段と、
前記画像に含まれる顔を示す顔情報が存在しない場合に、前記画像の再生時に前記画像再生手段によって再生された画像の中から顔領域を検出して前記顔領域を示す顔情報を出力する検出手段と、
前記画像の再生時に前記検出手段から出力される前記顔情報を記録する記録手段と、を備え、
前記制御手段は、前記画像に含まれる顔を示す顔情報が存在しない場合に、前記画像再生手段によって再生された画像について前記検出手段から出力される前記顔情報の有無に応じて前記拡大再生の中心位置を異ならせるように前記拡大手段を制御することを特徴とする電子機器。