JP2012029119A - 表示制御装置、カメラ、および、表示装置 - Google Patents

Abstract

【課題】複数のユーザが撮影画像を観察するに利便性の高い表示を行うことができる表示制御装置、カメラ、または、表示装置を提供する。
【解決手段】被写体を撮影して撮影画像を取得する画像取得部から前記撮影画像を取得する画像入力部と、表示部に映像を出力可能な映像出力部と、前記表示部への表示内容を制御する表示制御部と、前記画像取得部により取得され、前記記録部に記録されていない第１の撮影画像から抽出した顔情報基づき、前記第２の撮影画像の中から前記第１の撮影画像に含まれる人物と同一の人物が含まれる第３の撮影画像を検索する画像検索部と、前記第１の撮影画像に含まれる複数の人物間の関連情報を取得する関連情報取得部と、を備え、前記表示制御部は、前記関連情報に応じて、前記第３の撮影画像の前記表示部への表示の順番、あるいは、表示の大きさを制御することを特徴とする。
【選択図】図８

Description

ここに開示された技術は、表示制御装置、および、表示制御装置を有するカメラならびに表示装置に関する。

近年、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ−Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などのイメージセンサおよび信号処理の集積度が向上し、かつ安価に提供できるようになっている。このため、被写体の光学的な像を電気的な画像信号に変換して出力可能な撮像装置が急速に普及している。撮像装置としては、例えばデジタルスチルカメラやデジタルビデオカメラ（以下、単にデジタルカメラという）が考えられる。特に、静止画の撮影および動画の撮影の両方の機能を備えた撮像装置が主流となりつつある。

上記撮像装置で撮影した静止画あるいは動画の再生方法として、ユーザの利便性を図った提案がされている（たとえば、特許文献１）。特許文献１に記載された構成は、観賞するユーザをカメラが認識し、システム内に有する再生ソースの中から認識したユーザに関連する再生ソースを自動的に選ぶ。これにより、例えば、ユーザがテレビの前の観賞位置に座った場合、当該ユーザが被写体として登場する画像が自動的に選択される。

特開２００８−００９６９４号公報

しかし、複数のユーザが撮影画像を観察するに利便性の高い表示はいまだ提案されていない。そこで、ここに開示された技術は、複数のユーザが撮影画像を観察するに利便性の高い表示を行うことができる表示制御装置、カメラ、または、表示装置を提供することを目的とする。

上記目的は、以下の表示制御装置によって達成される。表示制御装置は、
被写体を撮影して撮影画像を取得する画像取得部から前記撮影画像を取得する画像入力部と、
表示部に映像を出力可能な映像出力部と、
前記表示部への表示内容を制御する表示制御部と、
複数の撮影画像を記録する記録部から前記撮影画像を読出し可能な読出し制御部と、
前記撮影画像から、前記被写体の顔に関する情報である顔情報を抽出する顔情報抽出部と、
前記画像取得部により取得され、前記記録部に記録されていない第１の撮影画像から抽出した顔情報に基づき、前記第２の撮影画像の中から前記第１の撮影画像に含まれる人物と同一の人物が含まれる第３の撮影画像を検索する画像検索部と、
前記第１の撮影画像に含まれる複数の人物間の関連情報を取得する関連情報取得部と、
を備え、
前記表示制御部は、前記画像検索部により検索した第３の撮影画像を読み込み、前記関連情報に応じて、前記第３の撮影画像の前記表示部への表示の順番、あるいは、表示の大きさを制御することを特徴とする。

ここに開示された技術によれば、複数のユーザが撮影画像を観察するに利便性の高い表示を行うことができる表示制御装置、カメラ、または、表示装置を提供することができる。

本発明の第１実施形態に係るカメラの構成を示すブロック図 （ａ）は、デジタルカメラの上面図、（ｂ）はデジタルカメラの背面図 第１実施形態に係るカメラと表示装置の構成を示す図 第１実施形態に係るカメラの撮影した画像ファイルの管理方法を説明する図 第１実施形態に係るカメラの表示部に表示された画像再生メニュー画面の表示例を示す図 第１実施形態に係るカメラの人物情報の内容を説明する図 第１実施形態に係るカメラの撮影する際の顔検出処理時の様子を表示部に表示する表示例を示す図 第１実施形態に係るカメラを使用し、複数の人物の相対位置に応じて撮影画像を表示装置の表示部に表示する表示例を示す図 第１実施形態に係るカメラの人物情報を検出する方法を説明するフローチャート図 第１実施形態に係るカメラの撮影画像の位置に関する表示方法を説明するフローチャート図 第１実施形態に係るカメラの撮影画像の大きさに関する表示方法を説明するフローチャート図 第１実施形態に係るカメラを使用し、複数の人物の距離に応じて撮影画像を表示装置の表示部に表示する表示例を示す図 第１実施形態に係るカメラの撮影画像の優先度に関する表示方法を説明するフローチャート図 第１実施形態に係るカメラを使用し、複数の人物の優先度に応じて撮影画像を表示装置の表示部に表示する表示例を示す図 本発明の第２実施形態に係るカメラ付き表示制御装置の構成を示すブロック図 第２実施形態に係るカメラ付き表示制御装置の構成を示す図 第２実施形態に係るカメラ付き表示制御装置を使用し、複数の人物の相対位置に応じて撮影画像を表示装置の表示部に表示する表示例を示す図 第２実施形態に係るカメラの人物情報を検出する方法を説明するフローチャート図

（第１実施形態）
＜１．デジタルカメラの全体構成＞
図１および図２を用いて本発明の第１実施形態に係るデジタルカメラ１について説明する。図１はデジタルカメラ１の概略構成を示すブロック図である。図２（ａ）はデジタルカメラ１の上面図である。図２（ｂ）はデジタルカメラ１の背面図である。図２に示すように、デジタルカメラ１の光軸ＡＸに沿った方向をＺ軸方向、デジタルカメラ１の左右方向をＸ軸方向、デジタルカメラ１の上下方向をＹ軸方向とする。なお、これらの方向はデジタルカメラ１の使用状態を限定するものではない。

図１に示すように、デジタルカメラ１（カメラの一例）は、光学系Ｌと、マイクロコンピュータ３と、イメージセンサ４と、ＣＣＤ駆動制御部５と、シャッター制御部４１と、シャッター駆動モータ４２と、を有している。

光学系Ｌは、被写体の光学的な像を形成するための光学系であり、ズームレンズ群、フォーカスレンズ群などを含んでいる。光学系Ｌはレンズ鏡筒２により支持されている。

マイクロコンピュータ３は、デジタルカメラ１全体を制御するユニットであり、各ユニットに接続されている。

シャッター制御部４１は、シャッターを動作させるために、マイクロコンピュータ３からの制御信号に基づいてシャッター駆動モータ４２を駆動する。シャッターボタン３６を操作することにより得られるタイミング信号に基づいて、この制御信号はマイクロコンピュータ３により生成される。

イメージセンサ４は、例えばＣＣＤであり、光学系Ｌにより形成される光学的な像を電気的な画像信号に変換する。イメージセンサ４の駆動は、ＣＣＤ駆動制御部５により制御される。なお、イメージセンサ４は、ＣＭＯＳセンサでもよい。

図１に示すように、外部から操作情報を入力するために、デジタルカメラ１には操作部３４が設けられている。具体的には、操作部３４は、電源スイッチ３５と、シャッターボタン３６と、モード切換ダイアル３７と、十字操作キー３８と、ＭＥＮＵ設定ボタン３９と、ＳＥＴボタン４０と、を有している。マイクロコンピュータ３は、操作部Ｉ／Ｆ３０を介して、操作部３４と接続されており、操作部３４からの信号を受信可能である。

図２（ａ）および図２（ｂ）に示すように、筐体１ａの前面には、光学系Ｌおよびレンズ鏡筒２が配置されており、背面には電源スイッチ３５と、モード切換ダイアル３７と、十字操作キー３８と、ＭＥＮＵ設定ボタン３９と、ＳＥＴボタン４０と、動画撮影操作ボタン４５と、表示部１４と、が配置されている。筐体１ａの上面には、シャッターボタン３６と、ズーム操作レバー５７と、が配置されている。

ズーム操作レバー５７は、シャッターボタン３６と同軸に回転可能となるように、シャッターボタン３６の周囲に設けられている。電源スイッチ３５は、デジタルカメラ１の電源のＯＮ／ＯＦＦを行うためのスイッチである。モード切換ダイアル３７は、静止画撮影モード、および再生モードを切り換えるためのダイアルであり、ユーザはモード切換ダイアル３７を回転させてモードを切換えることができる。モード切換ダイアル３７により静止画撮影モードが選択されると、撮影モードを静止画撮影モードへ切り換えることができる。さらに、モード切換ダイアル３７により再生モードが選択されると、モードを再生モードへ切り換えることができ、表示部１４に撮影画像を表示させることができる。動画撮影操作ボタン４５は、動画撮影の開始および停止を指示するボタンであり、モード切換ダイアル３７において設定された撮影モードが静止画撮影モードまたは再生モードであっても、この動画撮影操作ボタン４５を押すことにより、モード切換ダイアル３７での設定内容に関係なく、強制的に動画撮影モードが開始され、動画の記録が開始される。さらに、動画撮影モードにおいて、この動画撮影操作ボタン４５を押すことにより、動画の記録が終了し、静止画撮影モード、あるいは再生モードへと移行する。また、静止画撮影モード、あるいは動画撮影モードに切換えられた状態で、ズーム操作レバー５７を右方向へ回転させるとズームレンズはズームモータ（図示せず）により望遠側へ駆動され、左方向へ回転させるとズームレンズはズームモータにより広角側へ駆動される。ズームモータの動作はマイクロコンピュータ３により制御される。

ＭＥＮＵ設定ボタン３９は、表示部１４に各種メニューを表示させるためのボタンである。十字操作キー３８は、撮影者等が上下左右の部位を押圧して、ＭＥＮＵ設定ボタン３９の操作により表示部５５に表示された各種メニューから所望のメニューまたは項目を選択するためのボタンである。ＳＥＴボタン４０は、各種メニューの実行を確定するためのボタンである。

図１に示すように、デジタルカメラ１は、アナログ信号処理部６と、Ａ／Ｄ変換部７と、デジタル信号処理部８と、バッファメモリ９と、画像圧縮部１０と、画像記録制御部１１と、画像記録部１２と、表示制御部１３と、表示部１４と、をさらに有している。

イメージセンサ４から出力された画像信号は、アナログ信号処理部６、Ａ／Ｄ変換部７、デジタル信号処理部８、バッファメモリ９および画像圧縮部１０により順次処理される。アナログ信号処理部６は、イメージセンサ４から出力される画像信号にガンマ処理等のアナログ信号処理を施す。Ａ／Ｄ変換部７は、アナログ信号処理部６から出力されたアナログ信号をデジタル信号に変換する。デジタル信号処理部８は、Ａ／Ｄ変換部７によりデジタル信号に変換された画像信号に対してノイズ除去や輪郭強調等のデジタル信号処理を施す。バッファメモリ９は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）であり、デジタル信号処理部８により処理された画像信号を一時的に記憶する。

さらに、バッファメモリ９に記憶された画像信号は、画像圧縮部１０により順次処理され、画像信号のデータは圧縮される。この際、画像信号は、この圧縮処理により、元のデータよりも小さなデータサイズになる。例えば、この圧縮方式として、静止画の場合には、例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式が用いられる。また、動画の場合には、例えば、ＭＰＥＧ（ＭｏｖｉｎｇＰｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式やＨ．２６４方式が用いられる。

なお、光学系Ｌと、イメージセンサ４と、アナログ信号処理部６と、Ａ／Ｄ変換部７と、デジタル信号処理部８とからなる構成は、画像取得部の一例である。

画像入力部３１は、デジタル信号処理部８から撮影画像を取得する。画像入力部３１は、例えば、マイクロコンピュータ３の端子の１つである。

画像記録部１２は、たとえば、着脱可能なリムーバブルメモリ５１などである。画像記録制御部１１は、カードＩ／Ｆ部１５を介して、リムーバブルメモリ５１に、撮影画像（撮影画像は、動画と静止画の両方を含む概念である）と、それに対応する縮小画像信号と、所定の情報と、を関連付けて記録する。これらの画像信号とともに記録される所定の情報としては、例えば、画像を撮影した際の日時、焦点距離情報、シャッタースピード情報、絞り値情報、撮影モード情報などが挙げられ、例えばＥｘｉｆ（登録商標）形式やＥｘｉｆ（登録商標）形式に類する形式である。また、このデジタルカメラ１では、所定の情報としては、後述する顔認識情報等が含まれている。

記録／読出し制御部３２は、マイクロコンピュータ３によって実現される。記録／読出し制御部３２は、画像記録部１２への撮影画像の記録を制御する。また、記録／読出し制御部３２は、画像記録部１２からの撮影画像の読み出しを制御する。画像記録部１２から読み出された撮影画像は、マイクロコンピュータ３の画像入力部３１から入力される。 映像出力Ｉ／Ｆ部５４は、外部の表示装置に映像および音声を出力可能である。映像出力Ｉ／Ｆ部５４には、ケーブル５５が接続可能である。され、ケーブル５５は、テレビ７０の画像入力Ｉ／Ｆ部７２に接続されている。テレビ７０は、映像出力Ｉ／Ｆ部５４から出力された映像を出力する表示部７１を有する。なお、ケーブル５５は一般的なＡＶケーブル、あるいは、ＨＤＭＩケーブルのように、映像と音声の出力以外に、テレビ７０を制御するための制御信号を送れるようなデジタルケーブルであってもよい。なお、映像出力Ｉ／Ｆ部５４は、表示部に映像を出力可能な映像出力部の一例である。映像出力部は、たとえば、無線により表示装置に映像を出力するものであってもよい。

表示制御部１３は、マイクロコンピュータ３によって実現される。表示制御部１３は、表示部１４への表示内容を制御する。たとえば、表示部１４は、画像記録部１２あるいはバッファメモリ９に記録された画像信号に基づき、撮影画像を可視画像として表示する。表示部１４の表示形態としては、撮影画像のみを表示する形態と、撮影画像とともに前述の所定の情報を表示する形態と、がある。所定の情報の表示は、例えばＭＥＮＵ設定ボタン３９の操作により切り替えられる。また、表示制御部１３は、テレビ７０の表示部７１への表示内容を制御する。たとえば、表示部７１は、画像記録部１２あるいはバッファメモリ９に記録された画像信号に基づき、撮影画像を可視画像として表示する。

フォーカス制御部６５は、フォーカス駆動モータ６６を介して、フォーカスレンズ群Ｌ２を光軸ＡＸ方向に駆動させて合焦調整を行う。

顔検出部２１は、マイクロコンピュータ３によって実現される。顔検出部２１は、撮影画像に含まれる人物の顔を検出する。顔検出部２１は、撮影画像における顔の位置と顔の特徴データを抽出することにより、人物の性別、年齢、あるいは個人の判別を行う。なお１フレームの撮影画像に複数の顔が写っている場合は複数の人物の顔をそれぞれ検出し、それぞれの顔の特徴データを抽出する。顔の特徴データは、顔に関する情報である顔情報の一例である。顔検出部２１は、顔情報抽出部の一例である。

顔認識部２２は、マイクロコンピュータ３によって実現される。顔認識部２２は、顔検出部２１で抽出された顔の特徴データと顔登録データベース２３の顔認識テーブルの顔認識レコードに記憶されている特徴データと比較して類似度を判定し、検出された顔がどの個人の顔であるかを特定して当該個人を特定する。特定された個人は、図４に示すような個人ごとの設けられたフォルダごとに、撮影画像として保存される。

人物位置検出部２４は、マイクロコンピュータ３によって実現される。人物位置検出部２４は、顔検出部２１の情報に基づき、複数の人物のデジタルカメラ１に対する位置関係を判定する。例えば、デジタルカメラ１に対して、横並びの人物のうち、いずれが右側に位置し、いずれが左側に位置するかを判定する。具体的には、マイクロコンピュータ３は、イメージセンサ４によって順次撮影された撮影画像をデジタル信号処理部８から順次取得し、当該撮影画像に含まれる複数の人物の顔の位置を検出する。デジタル信号処理部８から順次取得される撮影画像（以下、第１の撮影画像ともいう）は、画像記録部１２に記録されていない画像であり、スルー画像またはライブビュー画像と呼ばれるものである。デジタル信号処理部８から順次取得される撮影画像は、第１の撮影画像の一例である。

人物位置検出部２４は、第１の撮影画像に含まれる複数の人物間の関連情報を取得する関連情報取得部の一例である。

画像検索部２５は、デジタル信号処理部８から順次取得される第１の撮影画像から抽出した顔の特徴データと、既に画像記録部１２に記録されている撮影画像（以下、第２の撮影画像ともいう）の顔の特徴データとに基づき、第２の撮影画像の中から第１の撮影画像に含まれる人物と同一の人物が含まれる撮影画像（以下、第３の撮影画像ともいう）を検索する。

そして、表示制御部１３は、複数の人物の相対位置関係に基づいて、複数の前記第３の撮影画像の表示位置関係を制御する。具体的には、表示制御部１３は、デジタルカメラ１に向かって左側に位置する人物と同一人物が含まれると特定された撮影画像をテレビ７０の表示部７１の左側に表示させる。一方、デジタルカメラ１に向かって右側に位置する人物と同一人物が含まれると特定された撮影画像をテレビ７０の表示部７１の右側に表示させる。

図７は、デジタルカメラ１に設定された測距エリアの一例を示す図である。図７において、被写体ａに対して、顔検出処理を行った撮影画面上の所定の位置に、測距エリア枠Ｆａが実線により設定される。また、被写体ｂに対して、顔検出処理を行った撮影画面上の所定の位置に、測距エリアＦｂが実線により設定される。

図１に戻り、フォーカス駆動モータ６６は、フォーカスレンズ群Ｌ２を光軸方向に動作させ、測距エリアＦａ、あるいはＦｂにおけるコントラスト値がそれぞれ最大となるフォーカスレンズ群Ｌ２の位置を求める。コントラスト値は、マイクロコンピュータ３により測距エリアＦａ、あるいはＦｂに対応する画像信号から明暗の変化を演算処理して得られる。フォーカス制御部６５は、測距エリアＦａ、あるいはＦｂのコントラスト値の大きさや、撮影画面上における測距エリアＦａ、あるいはＦｂの配置位置に基づく重み付けなどから、主被写体に対する最適な合焦位置を算出する。よって、撮影者等は、表示された測距エリアＦａ、あるいはＦｂから、撮影画面上のいずれの領域に合焦しているのかを確認することができる。

人物距離検出部２６は、複数の人物について、デジタルカメラ１から、それぞれの人物までのそれぞれの距離を測定する。具体的には、複数の人物の顔に設定された測距エリアについて、それぞれ合焦しているときのフォーカスレンズ群Ｌ２の光軸方向の位置に基づいて、距離を測定する。

そして、表示制御部１３は、複数の人物の相対距離に関する情報に基づいて、複数の前記第３の撮影画像間の相対的な大きさの関係を制御する。具体的には、表示制御部１３は、第１の撮影画像に含まれる人物と、同一人物を含む第３の撮影画像の表示形態を、その人物までの距離に応じて、変更する。例えば、複数の人物のうち、デジタルカメラ１からの距離が近い人物が写った撮影画像を、遠い人物が写った撮影画像よりも大きく表示するように制御する。

次に、特定の被写体を撮影した撮影画像の画像ファイルの管理方法について説明する。

図４は、画像ファイルの管理方法を説明する図である。図４において、マイクロコンピュータ３は、画像記録部１２に、画像フォルダ９３と、その下の階層に、各個人ごとの撮影画像フォルダＡ（９４ａ）、Ｂ（９４ｂ）、Ｃ（９４ｃ）・・・を形成する。撮影された一連の画像ファイルは、被写体番号と共に、画像ファイル９５a、９５ｂ、９５ｃ・・・として、撮影画像フォルダＡ、Ｂ，Ｃ・・・に格納される。撮影画像フォルダＡには、例えば、被写体にＡさんを含む撮影画像の画像ファイルを保存する。同様に、撮影画像フォルダＢにＢさんを含む撮影画像の画像フォルダを保存する。撮影画像フォルダＣにＣさんを含む撮影画像の画像フォルダを保存する。

図５は、表示部に表示された画像再生メニューの表示例を示す図である。画像再生メニュー８５は、視聴者がＭＥＮＵ設定操作部３９や十字操作キー３８を操作することにより、表示部１４またはテレビ７０の表示部７１に表示させることができる。画像再生メニュー８５は、「人物自動検出モード」、「画像位置調整表示モード」、「画像サイズ調整表示モード」、「優先人物表示モード」、および「人物選択表示モード」とからなり、人物はそれぞれ対応するアイコンを選択することにより所望の再生モードに設定することができる。

アイコン８６は、「人物自動検出モード」を示し、この「人物自動検出モード」を選択すると、デジタルカメラ１の撮影機能が動作し、デジタルカメラ１の前の人物の人数を検出し、さらに複数の人物がいる場合には、それぞれの人物の顔の特徴データ、人物の優先度検出、人物の相対位置検出、および人物の相対距離検出を行い、一連の検出結果を人物情報として、メモリ２８に記憶する。

図６を用いて、この人物情報について説明する。人物情報Ｐ（Ｘ）（Ｘ＝１，２，３・・・）には、人物番号、人物特徴（Ａ，Ｂ，Ｃ・・・）、優先度（１，２）、相対位置（Ｒ，Ｌ）、相対距離（Ｎ，Ｆ）の順番で、情報が記録される。図６の場合、人物情報Ｐ（Ｘ）は、人物番号は１番、人物特徴はＡさん、優先度は１番、相対位置は右側（Ｒ）、相対距離は近い（Ｎ）ことを示している。なお、個別の数値の詳細については、後述する。

アイコン８７は、「画像位置調整表示モード」を示し、この「画像位置調整表示モード」を選択すると、人物の顔の特徴データを抽出の結果、人物の顔と画像記録部１２に保存されている撮影画像に写っている人物とが一致することが認識されれば、複数の人物のデジタルカメラ１に対する相対位置情報に基づき、複数の第３の撮影画像を、映像出力Ｉ／Ｆ部５４を介して、テレビ７０の表示部７１に表示する。

アイコン８８は、「画像サイズ調整表示モード」を示し、この「画像サイズ調整表示モード」を選択すると、人物の顔の特徴点を抽出の結果、人物の顔と画像記録部１２に保存されている撮影画像に写っている人物とが一致することが認識されれば、複数の人物のデジタルカメラ１に対する相対距離情報に基づき、同一人物を含んだ撮影画像を表示部１４に自動的に拡大・縮小表示する。

アイコン８９は、「優先人物表示モード」を示し、この「優先人物表示モード」を選択すると、人物の顔の特徴データを抽出の結果、人物の顔と画像記録部１２に保存されている撮影画像に写っている人物とが一致することが認識されれば、複数の人物の表示の優先順位に基づき、同一人物を含んだ撮影画像を表示部１４に順に表示する。

アイコン９０は、「人物選択表示モード」を示し、この「人物選択表示モード」の９０ａ，９０ｂ，９０ｃをそれぞれ選択すると、被写体Ａさん、Ｂさん、Ｃさんを含んだ撮影画像を表示部１４にまとめて表示する。

＜２．人物自動検出モードの処理＞
次に、「人物自動検出モード」が選択された場合の表示処理について、図９のフローチャートを用いて説明する。

図９は、デジタルカメラ１とテレビ７０の表示処理を示すフローチャートである。

Ｓｔｅｐ１（Ｓ１）の処理では、人物がデジタルカメラ１とテレビ７０とを、ケーブル５５を用いて接続する。

Ｓｔｅｐ２（Ｓ２）では、人物がデジタルカメラ１の電源スイッチ３５がＯＮ側に操作する。

Ｓｔｅｐ３（Ｓ３）では、人物がテレビ７０の電源スイッチ７４をＯＮにする。なおテレビ７０の電源については、ＨＤＭＩケーブルを使用することにより、デジタルカメラ１の電源がＯＮになると、自動的にＯＮとなるように、デジタルカメラ１側から一元的に管理できるようなシステムであってもよい。

Ｓｔｅｐ４（Ｓ４）では、人物は、まずテレビ７０の表示部７１に、画像再生メニュー８５を表示させるために、撮影／再生切換操作部３７を再生モードに切り替える。その結果、図５に示す画像再生メニューが表示される。

Ｓｔｅｐ５（Ｓ５）では、人物が、「人物自動検出モード」を選択したかどうかを判別する。「人物自動検出モード」が選択されていなければ、Ｓｔｅｐ４に戻る。「人物自動検出モード」を選択された場合には、Ｓｔｅｐ６（Ｓ６）にて、「人物自動検出モード」における変数Ｓをリセットする（Ｓ＝１）。Ｓｔｅｐ７（Ｓ７）では、「人物自動検出モード」において検出した各種の人物情報を示す変数Ｐ（Ｓ）をリセットする（Ｐ（Ｓ）＝０）。

Ｓｔｅｐ８（Ｓ８）では、人物の顔検出処理を行い、人物の人数をカウントする。顔検出処理方法としては、顔検出部２１により、撮影画像から輪郭情報を抽出し、抽出された輪郭内に特徴点（目、鼻、口等）が存在するかを検出する方法がある。顔検出部２１は、検出された輪郭内に特徴点が存在する場合、顔と判断する。この顔検出処理のＳｔｅｐ８において、人物が何人いるのかを検出し、総人物数をＮとしてカウントする。もし、一人の顔も検出できない場合は、人物がいないと判断し、Ｓｔｅｐ４に戻る。

図８は、人物を撮影する際の顔検出処理時の様子を、表示部７１に表示する表示例を示す図である。図８において、総人物数Ｎが２人の場合を示し、Ｓ＝１から２まで、各人物に対して番号付けされる。マイクロコンピュータ３は、この１から２までの各人物に付された番号を、人物個別に付けられた人物番号として、メモリ２８において一時的に記憶する。本実施形態では、人物１はＡさんとなり、人物２はＢさんとなる。

次にＳｔｅｐ９（Ｓ９）では、複数の人物の顔検出処理により、個人を特定する特徴データの抽出を行う。人物の個人の特定については、顔認識部２２が、顔検出部２１で抽出された顔の特徴データと顔登録データベース２３の顔認識テーブルの顔認識レコードに記憶されている特徴データと比較して類似度を判定し、検出された顔がどの個人の顔であるかを特定して当該個人を特定する。つまり、このステップでは、人物がＡさん、Ｂさん、Ｃさん・・・のいずれであるかが特定され、‘Ａ’，‘Ｂ‘，’Ｃ‘という情報がメモリ２８に記憶される。

Ｓｔｅｐ１０（Ｓ１０）では、複数の人物の優先度を検出する。この優先度については、予めメモリ２８に記憶しており、例えば、本実施形態の場合には、人物Ａさんの優先度が一番であるという情報‘１’が登録されている。よって、前ステップにおいて、人物がＡさんであると特定されれば、優先度の情報は１番であるので、‘１’という情報がメモリ２８に記憶される。

Ｓｔｅｐ１１（Ｓ１１）では、複数の人物のデジタルカメラ１に対する相対位置を検出する。図８において、人物１はデジタルカメラ１に向かって人物２よりも右側に位置するため、右側を示す‘Ｒ’という情報がメモリ２８に記憶される。また、人物２は、デジタルカメラ２に向かって人物１よりも左側に位置するため、左側を示す‘Ｌ’という情報がメモリ２８に記憶される。

Ｓｔｅｐ１２（Ｓ１２）では、複数の人物のデジタルカメラ１に対する相対距離を検出する。図８において、人物１がデジタルカメラ１に対して他の人物に比べて近い場合には‘Ｎ’という情報がメモリ２８に記憶される。また、他の人物に比べて遠い場合には、‘Ｆ’という情報がメモリ２８に記憶される。

Ｓｔｅｐ１３（Ｓ１３）では、上記Ｓｔｅｐ９からＳｔｅｐ１２で検出した情報を、人物１に対する人物情報Ｐ（１）として、メモリ２８に記憶する。

Ｓｔｅｐ１４（Ｓ１４）では、次の人物（Ｓ＋１人目）の撮影を行うために変数Ｓをインクリメ
ントする（Ｓ＝Ｓ＋１）。

Ｓｔｅｐ１５（Ｓ１５）では、人物番号を示す変数Ｓが上記Ｓｔｅｐ８で検出した総人物数Ｎ以下であるか否かを判別する。撮影する人物の番号が、Ｓｔｅｐ８で検出した総人物数Ｎ以下の場合には、総人物の検出が終了していないと判断して、人物１人目からＮ人目まで、次のＳｔｅｐ９からＳｔｅｐ１３までの一連の処理を行い、Ｓ＞Ｎになると被人物の検出が全て終了したと判断し、この「人物自動検出モード」を終了する。なお、人物自動検出モードを終了せずに、Ｓｔｅｐ６に戻って人物自動検出モードを継続するようにしてもよい。

＜３．画像位置調整表示モードの処理＞
次に、「画像位置調整表示モード」が選択された場合の表示処理について、図１０のフローチャートを用いて説明する。

Ｓｔｅｐ４０（Ｓ４０）では、人物は、まずテレビ７０の表示部７１に、画像再生メニュー８５を表示させるために、撮影／再生切換操作部３７を再生モードに切り替える。その結果、図５に示す画像再生メニューが表示される。

Ｓｔｅｐ４１（Ｓ４１）では、人物が、「画像位置調整表示モード」を選択したかどうかを判別する。「画像位置調整表示モード」が選択されていなければ、Ｓｔｅｐ４０に戻る。「画像位置調整表示モード」を選択された場合には、Ｓｔｅｐ４２（Ｓ４２）にて、「画像位置調整表示モード」における変数Ｕをリセットする（Ｕ＝１）。

Ｓｔｅｐ４３（Ｓ４３）では、人物（１）に対して、同一人物が写った第１の撮影画像が、画像記録部１２の画像フォルダ９３内に記録されているかどうかの検索処理を行う。

Ｓｔｅｐ４４（Ｓ４４）では、まず人物（１）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれている場合には、次のＳｔｅｐ４５（Ｓ４５）に移行し、人物（１）の含まれている第３の撮影画像を読み出す。つまりこの場合には、人物（１）はＡさんであるので、撮影画像フォルダＡ９４ａ内の撮影画像ファイル９５ａを順次読み込む。逆に、人物（１）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれていない場合には、Ｓｔｅｐ４８（Ｓ４８）に移行し、次の人物（Ｕ＋１人目）の撮影を行うために変数Ｔをインクリメントする（Ｕ＝Ｕ＋１）。

Ｓｔｅｐ４６（Ｓ４６）では、読み込まれた人物（１）が含まれている第３の撮影画像の画像ファイル９５ａを、テレビ７０の表示部７１のどの場所に表示するのかという撮影情報Ｐ（１）を、メモリ２８より読み込む。次にＳｔｅｐ４７（Ｓ４７）では、マイクロコンピュータ３によって実現される表示制御部１３は、この人物（１）の画像ファイル９５ａについては、先のＳｔｅｐ１３において記憶された撮影情報Ｐ（１）には、テレビ７０の表示部７１の表示側から見て右側を示す‘Ｒ’という情報が書き込まれているため、撮影画像ファイル９５ａを表示部７１の表示側から見て右側の位置に表示するよう制御する。よって、図８に示すように、画像記録部１２内に保存された人物（１）、つまりＡさんが写った撮影画像については、テレビ７０に向かって右側に表示されることとなり、Ａさんの目の前に表示される。

Ｓｔｅｐ４８（Ｓ４８）では、次の人物（Ｕ＋１人目）の撮影を行うために変数Ｕをインクリメントする（Ｕ＝Ｕ＋１）。

Ｓｔｅｐ４９（Ｓ４９）では、人物の番号を示す変数Ｕが上記Ｓｔｅｐ８で検出した総人物数Ｎ以下であるか否かを判別する。画像検索する人物の番号が、総人物数Ｎ以下の場合には、総人物数の画像検索が終了していないと判断して、人物２人目からＮ人目まで、次のＳｔｅｐ４３からＳｔｅｐ４７までの一連の処理を行い、Ｓ＞Ｎになると、人物の画像検索が全て終了したと判断して、「画像位置調整表示モード」から抜ける。

よって、人物が２人の場合は、Ｓｔｅｐ４４に戻り、Ｕ＝２、つまり人物（２）に対して、同一人物が写った撮影画像が、デジタルカメラ１の画像フォルダ９３内に記録されていないかどうかの検索処理を行う。

Ｓｔｅｐ４４（Ｓ４４）では、人物（２）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれている場合には、次のＳｔｅｐ４５（Ｓ４５）に移行し、人物（２）含まれている第３の撮影画像を読み出す。つまりこの場合には、人物（２）はＢさんであるので、撮影画像フォルダＢ９４ｂ内の画像ファイル９５ｂを順次読み込む。逆に、人物（２）が、画像フォルダ９３内の撮影画像に含まれていない場合には、Ｓｔｅｐ４８（Ｓ４８）に移行し、次の人物（Ｕ＋１人目）の撮影を行うために変数Ｕをインクリメントする（Ｕ＝Ｕ＋１）。

Ｓｔｅｐ４６（Ｓ４６）では、読み込まれた人物（２）の画像ファイル９５ｂを、テレビ７０の表示部７１のどの場所に表示するのかという撮影情報Ｐ（２）を、メモリ２８より読み込む。次にＳｔｅｐ４７（Ｓ４７）では、マイクロコンピュータ３によって実現される表示制御部１３は、この人物（２）の画像ファイル９５ｂについては、先のＳｔｅｐ１３において記憶された撮影情報Ｐ（２）には、テレビ７０の表示部７１の表示側から見て左側を示す‘Ｌ’という情報が書き込まれているため、撮影画像ファイル９５ｂを表示部７１の表示側から見て左側の位置に表示するように制御する。よって、図８に示すように、画像記録部１２内に保存された人物（２）、つまりＢさんが写った撮影画像については、テレビ７０に向かって左側に表示されることとなり、Ｂさんの目の前に表示することができる。

このように、「画像位置調整表示モード」では、テレビ７０の表示部７１に、Ａさんが写っている撮影画像とＢさんが写っている撮影画像とが表示される。そして、表示部を見ているＡさんとＢさんの位置関係に応じて、Ａさんの前にＡさんの撮影画像が表示され、Ｂさんの前にＢさんの撮影画像が表示される。Ａさんの撮影画像は順次表示され、Ｂさんの撮影画像も順次表示される。よって、Ａさん、Ｂさんにとって、好適な表示形態を提供することが可能である。

なお、「画像位置調整表示モード」は、マイクロコンピュータ３によって自動的に選択される構成でもよい。また、「画像位置調整表示モード」が選択されたとき、「人物自動検出モード」の処理が先に行われるようにしてもよい。また、「人物自動検出モード」の処理が「画像位置調整表示モード」の処理と並行して行われるようにしてもよい。「人物自動検出モード」の処理が「画像位置調整表示モード」の処理と並行して行われると、たとえば、テレビ７０の表示部７１の前にいるＡさんとＢさんの位置が入れ替わると、Ａさんの撮影画像の表示位置とＢさんの撮影画像の表示位置が入れ替わり、さらに好適な表示形態を提供することが可能である。

＜４．画像サイズ調整表示モードの処理＞
次に、「画像サイズ調整表示モード」が選択された場合の表示処理について、図１１のフローチャートを用いて説明する。

Ｓｔｅｐ６０（Ｓ６０）では、人物は、まずテレビ７０の表示部７１に、画像再生メニュー８５を表示させるために、撮影／再生切換操作部３７を再生モードに切り替える。その結果、図５に示す画像再生メニューが表示される。

Ｓｔｅｐ６１（Ｓ６１）では、人物が、「画像サイズ整表示モード」を選択したかどうかを判別する。「画像サイズ調整表示モード」が選択されていなければ、Ｓｔｅｐ６０に戻る。「画像サイズ調整表示モード」を選択された場合には、Ｓｔｅｐ６２（Ｓ６２）にて、「画像サイズ調整表示モード」における変数Ｖをリセットする（Ｖ＝１）。

Ｓｔｅｐ６３（Ｓ６３）では、人物（１）に対して、同一人物が写った撮影画像が、画像記録部１２の画像フォルダ９３内に記録されていないかどうかの検索処理を行う。

Ｓｔｅｐ６４（Ｓ６４）では、まず人物（１）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれている場合には、次のＳｔｅｐ６５（Ｓ６５）に移行し、人物（１）が含まれている第３の撮影画像を読み出す。つまりこの場合には、人物（１）はＡさんであるので、撮影画像フォルダＡ９４ａ内の画像ファイル９５ａを順次読み込む。逆に、人物（１）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれていない場合には、Ｓｔｅｐ４８（Ｓ４８）に移行し、次の人物（Ｖ＋１人目）の撮影を行うために変数Ｖをインクリメントする（Ｖ＝Ｖ＋１）。

Ｓｔｅｐ６６（Ｓ６６）では、読み込まれた人物（１）の画像ファイル９５ａを、テレビ７０の表示部７１にどの大きさで表示するのかという撮影情報Ｐ（１）を、メモリ２８より読み込む。次にＳｔｅｐ６７（Ｓ６７）では、マイクロコンピュータ３によって実現される表示制御部１３は、この人物（１）の画像ファイル９５ａについては、先のＳｔｅｐ１３において記憶された撮影情報Ｐ（１）には、表示部７１からの距離が遠いということを示す‘Ｆ’という情報が書き込まれているため、画像ファイル９５ａが示す撮影画像を表示部７１に小さく表示するように制御する。よって、図１２に示すように、画像記録部１２内に保存された人物（１）、つまりＡさんが写った撮影画像については、表示部７１にて、後述するＢさんの撮影画像に対して小さく表示される。

Ｓｔｅｐ６８（Ｓ６８）では、次の人物（Ｖ＋１人目）の撮影を行うために変数Ｖをインクリメントする（Ｖ＝Ｖ＋１）。

Ｓｔｅｐ６９（Ｓ６９）では、人物の番号を示す変数Ｖが上記Ｓｔｅｐ８で検出した総人物数Ｎ以下であるか否かを判別する。画像検索する人物の番号が、総人物数Ｎ以下の場合には、総人物数の画像検索が終了していないと判断して、人物２人目からＮ人目まで、次のＳｔｅｐ６３からＳｔｅｐ６７までの一連の処理を行い、Ｓ＞Ｎになると、人物の画像検索が全て終了したと判断して、「画像サイズ調整表示モード」から抜ける。

よって、人物が２人の場合は、Ｓｔｅｐ６４（Ｓ６４）に戻り、Ｖ＝２、つまり人物（２）に対して、同一人物が写った撮影画像が、画像記録部１２の画像フォルダ９３内に記録されていないかどうかの検索処理を行う。

Ｓｔｅｐ６４（Ｓ６４）では、人物（２）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれている場合には、次のＳｔｅｐ６５（Ｓ６５）に移行し、人物（２）が含まれている第３の撮影画像を読み出す。つまりこの場合には、人物（２）はＢさんであるので、撮影画像フォルダＢ９４ｂ内の画像ファイル９５ｂを順次読み込む。逆に、人物（２）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれていない場合には、Ｓｔｅｐ６８（Ｓ６８）に移行し、次の人物（Ｖ＋１人目）の撮影を行うために変数Ｖをインクリメントする（Ｖ＝Ｖ＋１）。

Ｓｔｅｐ６６（Ｓ６６）では、読み込まれた人物（２）の画像ファイル９５ｂを、テレビ７０の表示部７１のどの大きさで表示するのかという撮影情報Ｐ（２）を、メモリ２８より読み込む。次にＳｔｅｐ６７（Ｓ６７）では、マイクロコンピュータ３によって実現される表示制御部１３は、この人物（２）の撮影画像ファイル９５ｂについては、先のＳｔｅｐ１３において記憶された撮影情報Ｐ（２）には、表示部７１からの距離が近いということを示す‘Ｎ’という情報が書き込まれているため、画像ファイル９５ｂが示す撮影画像を表示部７１に大きく表示するように制御する。よって、図１２に示すように、デジタルカメラ１内に保存された人物（２）、つまりＢさんが写った撮影画像については、表示部７１にて、先述したＡさんの撮影画像に対して大きく表示される。

このように、「画像サイズ調整表示モード」では、テレビ７０の表示部７１に、Ａさんが写っている撮影画像とＢさんが写っている撮影画像とが表示される。そして、表示部を見ているＡさんとＢさんのデジタルカメラ１に対する前後位置関係に応じて、Ａさんの前にいるＢさんの撮影画像が、Ａさんの撮影画像よりも、大きく表示される。Ａさんの撮影画像は順次表示され、Ｂさんの撮影画像も順次表示される。よって、Ａさん、Ｂさんにとって、好適な表示形態を提供することが可能である。

なお、「画像サイズ調整表示モード」は、マイクロコンピュータ３によって自動的に選択される構成でもよい。また、「画像サイズ調整表示モード」が選択されたとき、「人物自動検出モード」の処理が先に行われるようにしてもよい。また、「人物自動検出モード」の処理が「画像サイズ調整表示モード」の処理と並行して行われるようにしてもよい。「人物自動検出モード」の処理が「画像サイズ調整表示モード」の処理と並行して行われると、たとえば、テレビ７０の表示部７１の前にいるＡさんとＢさんの前後位置が入れ替わると、Ｂさんの前にいるＡさんの撮影画像が、Ｂさんの撮影画像よりも、大きく表示されるように変更され、さらに好適な表示形態を提供することが可能である。

＜５．優先人物表示モードの処理＞
次に、「優先人物表示モード」が選択された場合の表示処理について、図１３のフローチャートを用いて説明する。

Ｓｔｅｐ８０（Ｓ８０）では、人物は、まずテレビ７０の表示部７１に、画像再生メニュー８５を表示させるために、撮影／再生切換操作部３７を再生モードに切り替える。その結果、図５に示す画像再生メニューが表示される。

Ｓｔｅｐ８１（Ｓ８１）では、人物が、「優先人物表示モード」を選択したかどうかを判別する。「優先人物表示モード」が選択されていなければ、Ｓｔｅｐ８０に戻る。「優先人物表示モード」を選択された場合には、Ｓｔｅｐ８２（Ｓ８２）にて、「優先人物表示モード」における変数Ｗをリセットする（Ｗ＝１）。

Ｓｔｅｐ８３（Ｓ８３）では、人物（１）に対して、同一人物が写った撮影画像が、画像記録部１２の画像フォルダ９３内に記録されていないかどうかの検索処理を行う。

Ｓｔｅｐ８４（Ｓ８４）では、まず人物（１）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれている場合には、次のＳｔｅｐ８５（Ｓ８５）に移行し、人物（１）が含まれている第３の撮影画像を読み出す。つまりこの場合には、人物（１）はＡさんであるので、撮影画像フォルダＡ９４ａ内の画像ファイル９５ａを順次読み込む。逆に、人物（１）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれていない場合には、Ｓｔｅｐ９０（Ｓ９０）に移行し、次の人物（Ｗ＋１人目）の撮影を行うために変数Ｗをインクリメントする（Ｗ＝Ｗ＋１）。

Ｓｔｅｐ８６（Ｓ８６）では、読み込まれた人物（１）の画像ファイル９５ａを、テレビ７０の表示部７１にどの大きさで表示するのかという撮影情報Ｐ（１）を、メモリ２８より読み込む。次にＳｔｅｐ８７（Ｓ８７）では、マイクロコンピュータ３は、人物（１）が予め登録された優先人物であるかどうかを判別する。人物（１）が優先人物であれば、次のＳｔｅｐ８８（Ｓ８８）に移行する。逆に、人物（１）が優先人物でない場合には、Ｓｔｅｐ８８をスキップし、Ｓｔｅｐ８９（Ｓ８９）に移行する。

Ｓｔｅｐ８８では、画像ファイル９５ａについては、先のＳｔｅｐ１３において記憶された撮影情報Ｐ（１）には、この人物（１）は優先人物であることを示す‘１’という情報が書き込まれているため、表示制御部１３は、画像ファイル９５ａが示す撮影画像を表示部１４に優先的に表示するように制御する。よって、図１４に示すように、デジタルカメラ１内に保存された人物（１）、つまりＡさんが写った撮影画像については、表示部７１にて、テレビ７０の表示側から見て右側の位置に大きく表示される。

Ｓｔｅｐ９０（Ｓ９０）では、次の人物（Ｗ＋１人目）の撮影を行うために変数Ｗをインクリメントする（Ｗ＝Ｗ＋１）。

Ｓｔｅｐ９１（Ｓ９１）では、人物の番号を示す変数Ｗが上記Ｓｔｅｐ８で検出した総人物数Ｎ以下であるか否かを判別する。画像検索する人物の番号が、総人物数Ｎ以下の場合には、総人物数の画像検索が終了していないと判断して、人物２人目からＮ人目まで、次のＳｔｅｐ８３からＳｔｅｐ８９までの一連の処理を行い、Ｗ＞Ｎになると、人物の画像検索が全て終了したと判断して、「優先人物表示モード」から抜ける。

よって、人物が２人の場合は、Ｓｔｅｐ８４に戻り、Ｗ＝２、つまり人物（２）に対して、同一人物が写った撮影画像が、画像記録部１２の画像フォルダ９３内に記録されていないかどうかの検索処理を行う。

Ｓｔｅｐ８４では、人物（２）が含まれている第３の撮影画像が画像フォルダ９３内の撮影画像に含まれている場合には、次のＳｔｅｐ８５に移行し、人物（２）の撮影画像を読み出す。つまりこの場合には、人物（２）はＢさんであるので、撮影画像フォルダＢ９４ｂ内の撮影画像ファイル９５ｂを順次読み込む。逆に、人物（２）が含まれている第１の撮影画像が画像フォルダ９３内の撮影画像に含まれていない場合には、Ｓｔｅｐ９０に移行し、次の人物（Ｗ＋１人目）の撮影を行うために変数Ｗをインクリメントする（Ｗ＝Ｗ＋１）。

Ｓｔｅｐ８６では、読み込まれた人物（２）の撮影画像ファイル９５ｂを、テレビ７０の表示部７１のどの大きさで表示するのかという撮影情報Ｐ（２）を、メモリ２８より読み込む。次にＳｔｅｐ８７では、マイクロコンピュータ３は、この人物（２）が予め登録された優先人物であるかどうかを判別する。この場合、人物（２）は優先人物ではないので、Ｓｔｅｐ８９（Ｓ８９）に移行する。

Ｓｔｅｐ８９では、先述した優先度に基づき、図１４に示すように、人物（２）の撮影画像を表示するのではなく、優先人物と判定した人物（１）、つまりＡさんのサムネイル画像を表示する。このサムネイル画像については、選択することにより、テレビ７０の右側に拡大表示される。

以上のように、本第１実施形態によれば、デジタルカメラ１からテレビ７０に映像を送る制御を行い、デジタルカメラ１をテレビ７０の鑑賞者を撮影できるように配置している。そして、テレビ７０の前にいる人物の顔を検出し、検出した顔と同一の顔を含む撮影画像を抽出し、優先的に表示することができる。具体的には、テレビの前にいる複数の人物の相対位置関係に応じて、テレビに表示する撮影画像の位置を変えて最適表示する。また、複数の人物の相対距離の関係に応じて、テレビに表示する撮影画像の大きさを変えて最適表示する。さらには、複数の人物の優先度に応じて、撮影画像の種類を変えて最適表示することができる。

なお、人物自動検出モード、画像位置調整表示モードの処理、画像サイズ調整表示モード、および、優先人物表示モードの複数、または、すべてを組合わせて処理するようにしてもよい。

第２実施形態のマイクロコンピュータ３は、表示制御装置の一実施形態である。

（第２実施形態）
以下に、本発明の第２実施形態に係る表示装置について説明する。なお、本第２実施形態に係る表示装置は、上述の第１実施形態と異なり、表示制御装置がテレビ側に配置されている。具体的には、表示装置は、画像取得部の機能を有するカメラ部８１と、表示制御装置の一例であるマイクロコンピュータ１４１を有するモニタ部８２と、を備える。

第１実施形態と実質的に同一の構成に、同一の番号を付し、その説明は省略する。

図１５に示すように、カメラ付き表示制御装置８０は、カメラ部８１とモニタ部８２より構成される。本実施形態では、カメラ部８１とモニタ部８２とは一体に形成される。しかし、カメラ部８１は着脱可能であってもよい。

＜６．カメラ部８１の構成＞
先ず初めに、カメラ部８１について説明する。カメラ部８１は、光学系Ｌと、マイクロコンピュータ１０３と、イメージセンサ４と、ＣＣＤ駆動制御部５と、を有している。

光学系Ｌは、被写体の光学的な像を形成するための光学系である。第１実施形態と異なり、例えば、所定の画角の範囲内でピントの合うパンフォーカスのレンズ群を含んでいる。光学系Ｌはレンズ鏡筒１０２により支持されている。

マイクロコンピュータ１０３は、カメラ部８１全体を制御するユニットであり、各ユニットに接続されている。

カメラ部８１は、アナログ信号処理部６と、Ａ／Ｄ変換部７と、デジタル信号処理部８と、バッファメモリ９と、映像出力Ｉ／Ｆ部１５４と、をさらに有している。

イメージセンサ４から出力された画像信号は、アナログ信号処理部６、Ａ／Ｄ変換部７、デジタル信号処理部８、および、バッファメモリ９により順次処理される。アナログ信号処理部６は、イメージセンサ４から出力される画像信号にガンマ処理等のアナログ信号処理を施す。Ａ／Ｄ変換部７は、アナログ信号処理部６から出力されたアナログ信号をデジタル信号に変換する。デジタル信号処理部８は、Ａ／Ｄ変換部７によりデジタル信号に変換された画像信号に対してノイズ除去や輪郭強調等のデジタル信号処理を施す。バッファメモリ９は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）であり、デジタル信号処理部８により処理された画像信号を一時的に記憶する。

デジタル信号処理された画像信号は、映像出力Ｉ／Ｆ部５４、ケーブル５５を介して、モニタ部８２に出力される。

＜７．モニタ部８２の構成＞
次にモニタ部８２について説明する。

カメラ部８１にてデジタル信号処理された画像信号は、画像入力Ｉ／Ｆ部７２を介して、モニタ部８２に入力される。

図１５に示すように、モニタ部８２は、画像記録部１２、メモリ２８、顔登録データベース２３、表示部７１、画像入力Ｉ／Ｆ部７２、操作部Ｉ／Ｆ３０、および、操作部３４を備えている。

マイクロコンピュータ１４１は、モニタ部８２の各部を制御可能である。マイクロコンピュータ１４１は、操作部Ｉ／Ｆ３０を介して、操作部３４と接続されており、操作部３４からの信号を受信可能である。また、マイクロコンピュータ１４１は、表示制御部１３、 顔検出部２１、顔認識部２２、人物位置検出部２４、画像検索部２５、人物距離検出部２６、および、記録／読出し制御部３２を実現する。

画像入力部３１は、画像入力Ｉ／Ｆ部７２から撮影画像を取得する。画像入力部３１は、例えば、マイクロコンピュータ１４１の端子の１つである。

カメラ部８１は、表示部７１の表示側を撮影可能に配置されている。そして、表示部７１を鑑賞している人物を撮影可能である。

＜８．人物自動検出モードの処理＞
次に、「人物自動検出モード」が選択された場合の表示処理について、図１８のフローチャートを用いて説明する。

図１８は、カメラ部８１とモニタ部８２の表示処理を示すフローチャートである。

Ｓｔｅｐ２１（Ｓ２１）の処理では、人物がモニタ部８２の電源スイッチ７３をＯＮ側に操作する。

Ｓｔｅｐ２２（Ｓ２２）では、人物は、まずモニタ部８２の表示部７１に、画像再生メニュー８５を表示させるために、操作部３４のＭＥＮＵボタン３９により再生モードに切り替える。その結果、図５に示す画像再生メニューが表示される。

Ｓｔｅｐ２３（Ｓ２３）では、人物が、「人物自動検出モード」を選択したかどうかを判別する。「人物自動検出モード」が選択されていなければ、Ｓｔｅｐ２２に戻る。「人物自動検出モード」を選択された場合には、Ｓｔｅｐ２４（Ｓ２４）にてカメラ部８１を起動し、Ｓｔｅｐ２５（Ｓ２５）にて「人物自動検出モード」における変数Ｔをリセットする（Ｔ＝１）。Ｓｔｅｐ２６（Ｓ２６）では、「人物自動検出モード」において検出した各種の人物情報を示す変数Ｐ（Ｔ）をリセットする（Ｐ（Ｔ）＝０）。

Ｓｔｅｐ２７（Ｓ２７）では、人物の顔検出処理を行い、人物の人数をカウントする。顔検出処理方法としては、顔検出部２１により、撮影画像から輪郭情報を抽出し、抽出された輪郭内に特徴点（目、鼻、口等）が存在するかを検出する方法がある。顔検出部２１は、検出された輪郭内に特徴点が存在する場合、顔と判断する。この顔検出処理のＳｔｅｐ２７において、人物が何人いるのかを検出し、総人物数をＮとしてカウントする。もし、一人の顔も検出できない場合は、人物がいないと判断し、Ｓｔｅｐ２２に戻る。

図１７は、人物を撮影する際の顔検出処理時の様子を、表示部７１に表示する表示例を示す図である。図１７において、総人物数Ｎが２人の場合を示し、Ｔ＝１から２まで、各人物に対して番号付けされる。マイクロコンピュータ１４１は、この１から２までの各人物に付された番号を、人物個別に付けられた人物番号として、メモリ２８において一時的に記憶する。本第２実施形態では、人物１はＡさんとなり、人物２はＢさんとなる。

次にＳｔｅｐ２８（Ｓ２８）では、複数の人物の顔検出処理により、個人を特定する特徴点の抽出を行う。人物の個人の特定については、顔認識部２２が、顔検出部２１で抽出された顔の特徴データと顔登録データベース２３の顔認識テーブルの顔認識レコードに記憶されている特徴データと比較して類似度を判定し、検出された顔がどの個人の顔であるかを特定して当該個人を特定する。つまり、このステップでは、人物がＡさん、Ｂさん、Ｃさん・・・のいずれであるかが特定され、‘Ａ’，‘Ｂ‘，’Ｃ‘という情報がメモリ２８に記憶される。

Ｓｔｅｐ２９（Ｓ２９）では、複数の人物の優先度を検出する。この優先度については、予めメモリ２８に記憶しており、例えば、本第１実施形態の場合には、人物Ａさんの優先度が一番であるという情報‘１’が登録されている。よって、前ステップにおいて、人物がＡさんであると特定されれば、優先度の情報は１番であるので、‘１’という情報がメモリ２８に記憶される。

Ｓｔｅｐ３０（Ｓ３０）では、複数の人物のカメラ部８１に対する相対位置を検出する。図１７において、人物１はカメラ部８１に向かって右側に位置するため、右側を示す‘Ｒ’という情報がメモリ２８に記憶される。また、人物２は、カメラ部８１に向かって左側に位置するため、左側を示す‘Ｌ’という情報がメモリ２８に記憶される。

Ｓｔｅｐ３１（Ｓ３１）では、複数の人物のカメラ部８１に対する相対距離を検出する。図１７において、人物１がカメラ部８１に対して１ｍの距離に位置する場合、後述する他の人物に比べて、近い場合には‘Ｎ’という情報がメモリ２８に記憶される。また、遠い場合には、‘Ｆ’という情報がメモリ２８に記憶される。

Ｓｔｅｐ３２（Ｓ３２）では、上記Ｓｔｅｐ２８からＳｔｅｐ３１で検出した情報を、人物１に対する人物情報Ｐ（１）として、メモリ２８に記憶する。

Ｓｔｅｐ３３（Ｓ３３）では、次の人物（Ｔ＋１人目）の撮影を行うために変数Ｔをインクリメントする（Ｔ＝Ｔ＋１）。

Ｓｔｅｐ３４（Ｓ３４）では、人物番号を示す変数Ｔが上記Ｓｔｅｐ２７で検出した総人物数Ｎ以下であるか否かを判別する。撮影する人物の番号が、Ｓｔｅｐ２７で検出した総人物数Ｎ以下の場合には、総人物の検出が終了していないと判断して、人物１人目からＮ人目まで、次のＳｔｅｐ２８からＳｔｅｐ３４までの一連の処理を行い、Ｓ＞Ｎになると被人物の検出が全て終了したと判断し、この「人物自動検出モード」を終了する。

以降、＜画像位置調整表示モードの処理＞、＜画像位置調整表示モードの処理＞、＜優先人物表示モードの処理＞の方法については、第１実施形態で述べた方法と同じであるので、その説明を省略する。

以上のように、本第２実施形態によれば、第１実施形態と同様に、表示部７１の前にいる人物の顔を検出し、検出した顔と同一の顔を含む撮影画像を抽出し、優先的に表示することができる。具体的には、表示部７１の前にいる複数の人物の相対位置関係に応じて、表示部７１に表示する撮影画像の位置を変えて最適表示する。また、複数の人物の相対距離の関係に応じて、表示部７１に表示する撮影画像の大きさを変えて最適表示する。さらには、複数の人物の優先度に応じて、撮影画像の種類を変えて最適表示することができる。

（他の実施形態）
本発明の具体的な構成は、前述の実施形態に限られるものではなく、発明の要旨を逸脱しない範囲で種々の変更および修正が可能である。

（１）前述の実施形態では、人物が２名の場合について説明したが、人物の人数については制限されるものではない。

（２）前述の実施形態では、カメラから近い位置にいる人物の撮影画像を大きく、遠い位置にいる人物の撮影画像を小さく表示したが、その反対でも良い。

（３）前述の実施形態では、人物の優先度については固定された情報であったが、ユーザによって入力できるようにしても良い。

（４）撮影画像の表示に関するレイアウトについては、制限されるものではない。

（５）撮影画像については、静止画、動画のいずれでも良い。なお動画の場合には、テレビ７０の左右にスピーカーを設け、Ａさんの前のスピーカーからはＡさんの動画像の音声を流し、Ｂさんの前のスピーカーからはＢさんの動画像の音声を流すような構成としてもよい。

（６）前述の実施形態では、この表示制御装置を機能させるためのプログラムでも実現される。このプログラムはコンピュータで読み取り可能な記録媒体に格納されている。

（７）表示部７１に表示する例を示したが、デジタルカメラ１の表示部１４に表示してもよい。

（８）撮影画像の顔の特徴データについて、画像記録部１２に記録された撮影画像と関連付けて当該撮影画像に含まれる人物の顔の特徴データを画像記録部１２に記録してもよく、人物が含まれた撮影画像を画像記録部１２に記録された撮影画像を検索する都度、撮影画像から顔の特徴データを求めてもよい。

（９）カメラは、例えば、静止画像の撮影が可能な装置や静止画像および動画像の撮影が可能な装置である。カメラの例としては、デジタルビデオカメラ、デジタルスチルカメラおよびデジタル一眼レフカメラが挙げられる。また、カメラの他の例としては、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）およびカメラ機能付きＰＣ（Personal Computer）が挙げられる。撮像部は、例えば、光電変換により画像信号を生成するセンサ（ＣＣＤ、ＣＭＯＳ）を含んでいる。

（１０）表示装置は、テレビ、あるいは、ＰＣ等、表示部と表示部を制御する単位を有する機器である。

ここに開示された技術は、表示部への撮影画像の表示に好適である。

１ デジタルカメラ
１ａ 筐体
２ レンズ鏡筒
３，１０３，１４１ マイクロコンピュータ
４ イメージセンサ
５ ＣＣＤ駆動制御部
６ アナログ信号処理部
７ Ａ／Ｄ変換部
８ デジタル信号処理部
９ バッファメモリ
１０ 画像圧縮部
１１ 画像記録制御部
１２ 記録部
１３ 表示制御部
１４ 表示部
２１ 顔検出部
２２ 顔認識部
２３ 顔登録データベース
２４ 人物位置検出部
２５ 画像検索部
２６ 人物距離検出部
２８ メモリ
３４ 操作部
５１ リムーバブルメモリ
５４ 映像出力Ｉ／Ｆ
５５ 接続ケーブル
７０ テレビ
７１ 表示部
７２ 画像入力Ｉ／Ｆ部
８０ 表示装置
８１ カメラ部
８２ モニタ部
８５ 画像再生メニュー
８６ 人物自動検出モードアイコン
８７ 画像位置調整表示モードアイコン
８８ 画像サイズ調整表示モードアイコン
８９ 人物選択表示モードアイコン
９０ａ，９０ｂ，９０ｃ 人物アイコン
９３ 画像フォルダ
９４ａ，９４ｂ，９４ｃ 撮影画像フォルダＡ，Ｂ，Ｃ
９５ａ，９５ｂ，９５ｃ 画像ファイル
Ｌ 光学系

Claims (8)

1. 被写体を撮影して撮影画像を取得する画像取得部から前記撮影画像を取得する画像入力部と、
   表示部に映像を出力可能な映像出力部と、
   前記表示部への表示内容を制御する表示制御部と、
   複数の撮影画像を記録する記録部から前記撮影画像を読出し可能な読出し制御部と、
   前記撮影画像から、前記被写体の顔に関する情報である顔情報を抽出する顔情報抽出部と、
   前記画像取得部により取得され、前記記録部に記録されていない第１の撮影画像から抽出した顔情報と、前記画像記録部に記録された第２の撮影画像の顔情報とに基づき、前記第２の撮影画像の中から前記第１の撮影画像に含まれる人物と同一の人物が含まれる第３の撮影画像を検索する画像検索部と、
   前記第１の撮影画像に含まれる複数の人物間の関連情報を取得する関連情報取得部と、
   を備え、
   前記表示制御部は、前記画像検索部により検索した第３の撮影画像を読み込み、前記関連情報に応じて、前記第３の撮影画像の前記表示部への表示の順番、あるいは、表示の大きさを制御することを特徴とする表示制御装置。
2. 前記関連情報は、前記複数の人物の相対位置関係に関する情報であり、
   前記表示制御部は、前記相対位置関係に関する情報に基づいて、複数の前記第３の撮影画像の表示位置関係を制御することを特徴とする請求項１記載の表示制御装置。
3. 前記関連情報は、前記複数の人物の前記画像取得部からの相対距離に関する情報であり、
   前記表示制御部は、前記相対距離に関する情報に基づいて、複数の前記第３の撮影画像間の相対的な大きさの関係を制御することを特徴とする請求項１記載の表示制御装置。
4. 前記関連情報は、前記複数の人物の表示優先度を表す情報であることを特徴とする請求項１記載の表示制御装置。
5. 画像検索部は、前記第１の撮影画像から抽出した顔情報と、前記第２の撮影画像の顔情報とに基づき、前記第２の撮影画像の中から前記第１の撮影画像に含まれる人物と同一の人物が含まれる第３の撮影画像を検索することを特徴とする請求項１から４のいずれかに記載の表示制御装置。
6. 請求項１から５までのいずれかに記載の表示制御装置と、
   前記画像取得部と、
   を備えるカメラ。
7. 請求項１から５までのいずれかに記載の表示制御装置と、
   前記表示部と、
   を備える表示装置。
8. 請求項１から５までのいずれかに記載の表示制御装置と、
   前記画像取得部と、
   前記表示部と、
   を備える表示装置。

Images