JP2011130068A - 画像表示装置及びカメラシステム - Google Patents

Abstract

【課題】画像データに含まれていない人物の特徴情報をグループ化する画像表示装置を提供する。
【解決手段】画像を表示する表示部１４と、前記表示部に表示された前記画像を鑑賞する鑑賞者を撮像する撮像部１６と、前記撮像部により撮像された前記鑑賞者の顔を検出する第１検出部と、前記第１検出部において検出した前記鑑賞者の顔の特徴情報を抽出する第１抽出部１８と、前記第１抽出部において抽出された前記鑑賞者の顔の前記特徴情報を第１のグループとする第１グループ情報を生成する第１グループ情報生成部とを備える。
【選択図】図１

Description

本発明は、画像表示装置及びカメラシステムに関するものである。

従来顔認識機能を備えたデジタルカメラが知られている（例えば、特許文献１参照）。このデジタルカメラによれば、同じ顔情報を含む画像データをグループ化することができる。

特開２００６−３１８３５２号公報

しかし、上述のデジタルカメラにおいては、画像データに含まれていない人物の顔情報をグループ化することはできなかった。

本発明の目的は、画像データに含まれていない人物の特徴情報をグループ化する画像表示装置及びカメラシステムを提供することである。

本発明の画像表示装置は、画像を表示する表示部と、前記表示部に表示された前記画像を鑑賞する鑑賞者を撮像する撮像部と、前記撮像部により撮像された前記鑑賞者の顔を検出する第１検出部と、前記第１検出部において検出した前記鑑賞者の顔の特徴情報を抽出する第１抽出部と、前記第１抽出部において抽出された前記鑑賞者の顔の前記特徴情報を第１のグループとする第１グループ情報を生成する第１グループ情報生成部とを備えることを特徴とする。

また、本発明のカメラシステムは、画像表示装置と、デジタルカメラとを有するカメラシステムであって、前記画像表示装置は、画像を表示する表示部と、前記表示部に表示された前記画像を鑑賞する鑑賞者を撮像する第１撮像部と、前記第１撮像部により撮像された前記鑑賞者の顔を検出する第１検出部と、前記第１検出部において検出した前記鑑賞者の顔の特徴情報を抽出する第１抽出部と、前記第１抽出部において抽出された前記鑑賞者の顔の前記特徴情報を第１のグループとする第１グループ情報を生成する第１グループ情報生成部と、前記第１グループ情報を前記デジタルカメラに対して送信する送信部とを備え、前記デジタルカメラは、被写体を撮像する第２撮像部と、前記画像表示装置から前記第１グループ情報を受信する受信部とを備え、前記受信部において受信した前記第１グループ情報を前記第２撮像部により被写体の撮像を行う際に被写体認識情報として用いることを特徴とする。

本発明の画像表示装置及びカメラシステムによれば、画像データに含まれていない人物の特徴情報をグループ化することができる。

第１の実施の形態に係るカメラシステムにおけるシステム構成を示すブロック図である。 第１の実施の形態に係るカメラシステムにおけるデジタルフォトフレームのデータ処理を示すフローチャートである。 第１の実施の形態に係るカメラシステムにおけるデジタルカメラのデータ処理を示すフローチャートである。 第１の実施の形態に係るカメラシステムにおけるデジタルフォトフレームの再生処理を示すフローチャートである。 第２の実施の形態に係るカメラシステムにおけるシステム構成を示すブロック図である。 第２の実施の形態に係るカメラシステムにおけるデジタルフォトフレームのデータ処理を示すフローチャートである。 第２の実施の形態に係るカメラシステムにおけるデジタルカメラのデータ処理を示すフローチャートである。 第２の実施の形態に係るカメラシステムにおけるデジタルフォトフレームの再生処理を示すフローチャートである。

以下、図面を参照して本発明の第１の実施の形態に係るカメラシステムについて説明する。図１は、第１の実施の形態に係るカメラシステムのシステム構成を示すブロック図である。カメラシステム２は、デジタルカメラ４とデジタルフォトフレーム（以下、ＤＰＦという。）６とを備えており、ＵＳＢケーブルを介して接続されている。ここでデジタルカメラ４には、被写体を撮像するための撮像素子を有する撮像部８、撮像部８により撮像された画像から人の顔を検出し、検出した人の顔の特徴情報を抽出する顔認識部１０及びＤＰＦ６に対して撮像部８により撮像した画像の画像データを送信し、ＤＰＦ６から後述するグループ情報及び重要人物情報を受信するデータ転送部１２が設けられている。また、ＤＰＦ６には、撮像部８により撮像した画像の画像データに基づく画像等を表示する画像表示部１４、画像表示部１４により画像が表示されている間、画像表示部１４に表示される画像を鑑賞する鑑賞者を撮像するカメラ１６、カメラ１６により撮像された画像の画像データから人の顔を検出し、検出した人の顔の特徴情報を抽出する顔特徴点抽出部１８、デジタルカメラ４に対して後述するグループ情報及び重要人物情報を送信し、デジタルカメラ４から撮像部８により撮像した画像の画像データを受信するデータ転送部２０が設けられている。

次に、図２に示すフローチャートを参照して第１の実施の形態に係るカメラシステム２のＤＰＦ６のデータ処理について説明する。まず、操作者により画像表示部１４に画像を表示するための表示開始の操作が行われると（ステップＳ１１：Ｙｅｓ）、データ転送部２０を介して受信した画像データに基づく画像が画像表示部１４に表示されると共にカメラ１６により画像表示部１４に表示された画像を鑑賞する鑑賞者の撮像が開始される（ステップＳ１２）。次に、顔特徴点抽出部１８において、カメラ１６により撮像された画像に人の顔が含まれているか否かの判定を行う（ステップＳ１３）。ここで、画像における人の顔検出は、画像において人物の顔や眼を認識する顔認識処理により行う。人の顔が検出されなかった場合は、電源をオフにするための操作があったか否かの判定を行い（ステップＳ２４）、人の顔が検出された場合は、さらに人の顔が検出された画像の画像データから顔の特徴情報の抽出を行う（ステップＳ１４）。即ち、カメラ１６により撮像された画像の画像データから鑑賞者の特徴を示す情報、例えば、顔全体の大きさに対する目や鼻の大きさや位置などの抽出を行う。ここで、抽出の具体例として、本人が妻及び娘とともに３人で画像表示部１４に表示された画像を鑑賞している場合は、３人の顔の特徴情報を抽出する。次に、抽出した顔の特徴情報を記憶部に記憶する（ステップＳ１５）。なお、記憶された顔の特徴情報は、人物を特定する人物情報として用いられる。

次に、複数の顔の特徴情報をグループ化するグループ情報を生成し、グループ情報を記憶部に記憶する（ステップＳ１６）。例えば、本人、妻及び娘のそれぞれの顔の特徴情報が記憶された場合には、これらの顔の特徴情報に基づいて、この家族を一つのグループとするグループ情報を生成し、グループ情報を記憶する。次に、電源をオフにするための操作があったか否かの判定を行い（ステップＳ２４）、電源をオフにするための操作が行われた場合は、ＤＰＦ６の電源をオフにして一連の処理を終了する。一方、電源をオフにするための操作が行われなかった場合は、次の画像の表示を開始する操作が行われたか否かの判定を行い（ステップＳ１１）、次の画像の表示を開始する操作が行われた場合には、次の画像が画像表示部１４に表示されると共にカメラ１６による撮像が開始され、ステップＳ１２〜ステップＳ１６の処理を繰り返す。

ここで、今回、既にグループに含まれる人物の顔の特徴情報と共に、新たな人物の顔の特徴情報を抽出、記憶した場合は、前回記憶部に記憶されたグループ情報に新たな顔の特徴情報を加えたグループ情報を生成し、記憶する。例えば、本人、妻及び娘を一つのグループとするグループ情報が既に記憶されており、今回、新たに本人、娘及び息子の顔の特徴情報が抽出、記憶された場合には、既存のグループに息子の顔の特徴情報を追加し、本人、妻、娘及び息子を一つのグループとする新たなグループ情報を生成し、記憶部に記憶する。

次に、表示開始の操作が行われなかった場合（ステップＳ１１：Ｎｏ）、デジタルカメラ４からのＵＳＢ接続の要求があったか否かの判定を行う（ステップＳ２１）。ＵＳＢ接続の要求がなかった場合は、電源をオフにするための操作があったか否かの判定を行う（ステップＳ２４）。一方、ＵＳＢ接続の要求があった場合は、所定のＵＳＢ接続処理を行うことによりデジタルカメラ４との間でＵＳＢ接続を確立し、ＵＳＢケーブルを介してデジタルカメラ４から撮像部８により撮像した画像の画像データを受信し、記憶部に記憶する（ステップＳ２２）。次に、記憶部に記憶されているグループ情報を読み出し、ＵＳＢケーブルを介してデジタルカメラ４に対して送信する（ステップＳ２３）。次に、電源をオフにするための操作があったか否かの判定を行う（ステップＳ２４）。電源をオフにするための操作が行われなかった場合は、次の画像の表示を開始する操作が行われたか否かの判定を行い（ステップＳ１１）、電源をオフにするための操作が行われた場合は、ＤＰＦ６の電源をオフにして一連の処理を終了する。

次に、図３に示すフローチャートを参照して第１の実施の形態に係るカメラシステム２のデジタルカメラ４の処理について説明する。まず、操作者により人の顔を認識して被写体の撮像を行う顔認識撮影モードが設定されると、撮像部８により被写体の撮像が行われ、スルー画像がデジタルカメラ４の図示しない表示部に表示される（ステップＳ３１）。次に、ＤＰＦ６からＵＳＢ接続の要求があった場合は（ステップＳ３２：Ｙｅｓ）、所定のＵＳＢ接続処理を行うことによりＤＰＦ６との間でＵＳＢ接続を確立し（ステップＳ３３：Ｙｅｓ）、撮像部８により撮像された画像の画像データをデジタルカメラ４の記憶部から読み出し、ＵＳＢケーブルを介してＤＰＦ６に対して送信する（ステップＳ３４）。次に、ＤＰＦ６からＵＳＢケーブルを介してグループ情報を受信し（ステップＳ３５）、これらを記憶部に記憶する（ステップＳ３６）。次に、ＤＰＦ６との間のＵＳＢ接続が切断された場合には（ステップＳ３７：Ｙｅｓ）、再度ＤＰＦ６からＵＳＢ接続の要求があったか否かの判定を行う（ステップＳ３２）。

次に、ＵＳＢ接続の要求がなかった場合は（ステップＳ３２：Ｎｏ）、顔認識部１０において、撮像部８により撮像された画像に人の顔が含まれているか否かの判定を行う（ステップＳ４１）。ここで、画像における人の顔検出は、画像において人物の顔や眼を認識する顔認識処理により行う。人の顔が検出されなかった場合は、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ４５）。一方、人の顔が検出された場合は、検出した顔の人物が受信したグループに含まれる人物か否かの判定を行う（ステップＳ４２）。ここで、グループに含まれる人物か否かの判定は、顔認識部１０において検出した人の顔から顔の特徴情報を抽出し、この顔の特徴情報がＤＰＦ６から受信したグループに含まれる人物の顔の特徴情報と一致するか否かを判定することにより行う。例えば、本人、妻及び娘の顔の特徴情報を一つのグループとするグループ情報をＤＰＦ６から受信したとする。この場合において、デジタルカメラ４で娘と娘の友人を撮像した場合、撮像された画像から検出した人の顔の特徴情報の中で娘の顔の特徴情報は、受信したグループ情報に含まれる娘の顔の特徴情報と一致する。そのため、娘は、デジタルカメラ４が受信した家族のグループに含まれる人物であると判定する。

次に、検出した顔の人物の全てがグループに含まれる人物でない場合には（ステップＳ４２：Ｎｏ）、図示しない表示部に表示されている全ての人物の顔のまわりに顔枠を表示し（ステップＳ４４）、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ４５）。一方、検出した顔の人物にグループに含まれる人物が含まれている場合は（ステップＳ４２：Ｙｅｓ）、デジタルカメラ４の図示しない表示部に表示されているグループに含まれる全ての人物の顔のまわりに顔枠を表示する（ステップＳ４３）。この場合、グループに含まれない人物の顔のまわりには顔枠を表示しない。例えば、本人、妻及び娘の顔の特徴情報を一つのグループとするグループ情報をＤＰＦ６から受信したとする。この場合において、デジタルカメラ４の顔認識部１０において妻、娘及び娘の友人の顔を検出した場合、妻と娘の顔のまわりに顔枠を表示する。

次に、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ４５）。レリーズボタンが半押しされた場合には、撮像部８において焦点位置の調節及び被写体光の測光を行う（ステップＳ４６）。なお、焦点位置の調節及び被写体光の測光は、画像表示部１４に顔枠が表示されている場合には顔枠の位置（顔枠が複数表示されている場合は最大の顔面積を有する顔の顔枠の位置）において、顔枠が表示されていない場合には画像の中央位置において行う。次に、レリーズボタンが全押しされたか否かの判定を行う（ステップＳ４７）。レリーズボタンが全押しされない場合には（ステップＳ４７：Ｎｏ）、再度レリーズボタンが半押しされたか否かの判定を行い（ステップＳ４５）、レリーズボタンが全押しされた場合には（ステップＳ４７：Ｙｅｓ）、撮像部８の撮像素子により撮像が行われ（ステップＳ４８）、撮像された画像の画像データは記憶部に記憶され、Ｅｘｉｆ等の所定のファイル形式の画像ファイルとしてメモリカードに記憶される（ステップＳ４９）。なお、グループに含まれる人物が写っている画像の画像ファイルには、グループに含まれる人物が写っていることを示す情報がそのヘッダ部に記録される。

また、レリーズボタンが半押しされなかった場合には（ステップＳ４５：Ｎｏ）、電源をオフにするための操作が行われたか否かの判定を行う（ステップＳ５０）。電源をオフにするための操作が行われなかった場合には、再度ＤＰＦ６からＵＳＢ接続の要求があったか否かの判定を行い（ステップＳ３２）、電源をオフにするための操作が行われた場合にはデジタルカメラ４の電源をオフにして一連の処理を終了する。

次に、図４に示すフローチャートを参照して第１の実施の形態に係るカメラシステム２のＤＰＦ６の再生処理について説明する。まず、操作者によりメモリカードに記憶されている画像データに基づく画像を画像表示部１４に再生する再生モードの設定が行われると、メモリカードに記憶されている全ての画像データに基づく画像を画像表示部１４に表示する対象とする全画像再生モードが設定される（ステップＳ５１）。次に、最新の画像データの画像ファイルをメモリカードから読み出して、画像データに基づく画像を画像表示部１４に表示する（ステップＳ５２）。次に、再生モードを切り替える図示しない再生モード切替ボタンが操作された場合は（ステップＳ５３：Ｙｅｓ）、全画像再生モードが設定されているか否かの判定を行う（ステップＳ５４）。

全画像再生モードが設定されていない場合は（ステップＳ５４：Ｎｏ）、全画像再生モードの設定を行い（ステップＳ５５）、最新の画像データに基づく画像を画像表示部１４に表示する（ステップＳ５２）。一方、全画像再生モードが設定されている場合は（ステップＳ５４：Ｙｅｓ）、メモリカードからグループに含まれる人物が写っている画像データの画像ファイルを検索する（ステップＳ５６）。例えば、グループに含まれる人物が写っていることを示す情報が画像ファイルのヘッダ部に記憶されている場合において、ヘッダ部にグループに含まれる人物が写っていることを示す情報が記憶されている画像ファイルをメモリカードから検索する。次に、グループに含まれる人物が写っている画像を画像表示部１４に表示する対象とするグループ再生モードを設定し（ステップＳ５７）、グループに含まれる人物が写っていることを示す情報を有する画像ファイルの中で最新の画像ファイルの画像データに基づく画像を画像表示部１４に表示する（ステップＳ５２）。

一方、再生モード切替ボタンが操作されなかった場合は（ステップＳ５３：Ｎｏ）、次の画像を画像表示部１４に表示する画像送りボタンが操作されたか否かの判定を行い（ステップＳ５８）、画像送りボタンが操作された場合には、次の画像を表示し（ステップＳ５９）、画像送りボタンが操作されなかった場合には、前の画像を画像表示部１４に表示する画像戻しボタンが操作されたか否かの判定を行う（ステップＳ６０）。画像戻しボタンが操作された場合には、前の画像を表示し（ステップＳ６１）、画像戻しボタンが操作されなかった場合には、電源をオフにするための操作が行われたか否かの判定を行う（ステップＳ６２）。電源をオフにするための操作が行われなかった場合には、再度再生モード切替ボタンが操作されたか否かの判定を行い（ステップＳ５３）、電源をオフにするための操作が行われた場合にはデジタルカメラ４の電源をオフにして一連の処理を終了する。

この第１の実施の形態に係るカメラシステム２によれば、画像表示部１４に表示された画像を鑑賞する鑑賞者をカメラ１６により撮像し、撮像した鑑賞者の顔の特徴情報を一つのグループとすることにより、画像データに含まれていない人物の顔情報をグループ化することができる。また、ＤＰＦ６のカメラ１６により撮像された鑑賞者の顔の特徴情報からグループ情報を生成するため、デジタルカメラ４の撮像部８において撮像された画像に写っていない人物の顔情報を、撮像部８において被写体を撮像する際における被写体認識情報として用いることができる。

次に、図面を参照して本発明の第２の実施の形態に係るカメラシステムについて説明する。この第２の実施の形態に係るカメラシステム２００は第１の実施の形態に係るカメラシステム２に後述する重要人物情報を生成する機能を付加したものである。従って、第１の実施の形態と同一の構成についての詳細な説明は省略し、異なる部分のみについて詳細に説明する。また、第１の実施の形態と同一の構成には同一の符号を付して説明する。

図５は、第２の実施の形態に係るカメラシステム２００のシステム構成を示すブロック図である。カメラシステム２００は、第１の実施の形態に係るカメラシステム２におけるＤＰＦ６にデジタルカメラ４から受信した画像データから人の顔を検出し、検出した人の顔の特徴情報を抽出する顔検出部１５及び後述する重要人物情報を生成する重要人物生成部１９を加えたものである。

次に、図６に示すフローチャートを参照して第２の実施の形態に係るカメラシステム２００のＤＰＦ６のデータ処理について説明する。まず、操作者により画像表示部１４に画像を表示するための表示開始の操作が行われると（ステップＳ７１：Ｙｅｓ）、データ転送部２０を介して受信した画像データに基づく画像が画像表示部１４に表示されると共にカメラ１６により画像表示部１４に表示された画像を鑑賞する鑑賞者の撮像が開始される（ステップＳ７２）。次に、顔特徴点抽出部１８において、カメラ１６により撮像された画像に人の顔が含まれているか否かの判定を行う（ステップＳ７３）。ここで、画像における人の顔検出は、画像において人物の顔や眼を認識する顔認識処理により行う。

人の顔が検出されなかった場合は、電源をオフにするための操作があったか否かの判定を行い（ステップＳ９４）、人の顔が検出された場合は、さらに人の顔が検出された画像の画像データから顔の特徴情報の抽出を行う（ステップＳ７４）。即ち、カメラ１６により撮像された画像の画像データから鑑賞者の特徴を示す情報、例えば、顔全体の大きさに対する目や鼻の大きさや位置などの抽出を行う。次に、抽出した顔の特徴情報を記憶部に記憶し、複数の顔の特徴情報をグループ化するグループ情報（以下、第１グループ情報という。）を生成し、第１グループ情報を記憶部に記憶する（ステップＳ７５）。次に、顔検出部１５において、デジタルカメラ４から受信した画像データに基づく画像に人の顔が含まれているか否かの判定を行う（ステップＳ７６）。人の顔が検出されなかった場合は、電源をオフにするための操作があったか否かの判定を行い（ステップＳ９４）、人の顔が検出された場合は、画像データから顔の特徴情報の抽出を行う（ステップＳ７７）。次に、抽出した顔の特徴情報を記憶部に記憶し、複数の顔の特徴情報をグループ化するグループ情報（以下、第２グループ情報という。）を生成し、第２グループ情報を記憶部に記憶する（ステップＳ７８）。

次に、第１グループ情報と第２グループ情報とを比較し（ステップＳ７９）、重要人物生成部１９において、第２グループ情報に含まれておらず、第１グループ情報に含まれる顔の特徴情報から特定される人物を重要人物とする重要人物情報を生成し（ステップＳ８０）、記憶部に記憶する（ステップＳ８１）。例えば、デジタルカメラ４から受信した画像データに基づく画像に妻と娘が写っており、本人がＤＰＦ６の画像表示部１４に表示されている、この妻と娘の画像を見ている場合、本人の顔はＤＰＦ６のカメラ６によって撮像される。この場合、本人の顔（第１グループ情報）は画像データに基づく画像（第２グループ情報）には含まれていないため、本人（第１グループ情報）を重要人物とする重要人物情報が生成される。

次に、電源をオフにするための操作があったか否かの判定を行う（ステップＳ９４）、電源をオフにするための操作が行われた場合は、ＤＰＦ６の電源をオフにして一連の処理を終了する。一方、電源をオフにするための操作が行われなかった場合は、次の画像の表示を開始する操作が行われたか否かの判定を行い（ステップＳ７１）、次の画像の表示を開始する操作が行われた場合には、次の画像が画像表示部１４に表示されると共にカメラ１６による撮像が開始され、ステップＳ７２〜ステップＳ８１の処理を繰り返す。

次に、表示開始の操作が行われなかった場合（ステップＳ７１：Ｎｏ）、デジタルカメラ４からのＵＳＢ接続の要求があったか否かの判定を行う（ステップＳ９１）。ＵＳＢ接続の要求がなかった場合は、電源をオフにするための操作があったか否かの判定を行う（ステップＳ９４）。一方、ＵＳＢ接続の要求があった場合は、所定のＵＳＢ接続処理を行うことによりデジタルカメラ４との間でＵＳＢ接続を確立し、ＵＳＢケーブルを介してデジタルカメラ４から撮像部８により撮像した画像の画像データを受信し、記憶部に記憶する（ステップＳ９２）。次に、記憶部に記憶されているグループ情報及び重要人物情報を読み出し、ＵＳＢケーブルを介してデジタルカメラ４に対して送信する（ステップＳ９３）。次に、電源をオフにするための操作があったか否かの判定を行う（ステップＳ９４）。電源をオフにするための操作が行われなかった場合は、次の画像の表示を開始する操作が行われたか否かの判定を行い（ステップＳ７１）、電源をオフにするための操作が行われた場合は、ＤＰＦ６の電源をオフにして一連の処理を終了する。

次に、図７に示すフローチャートを参照して第２の実施の形態に係るカメラシステム２００のデジタルカメラ４の処理について説明する。まず、操作者により人の顔を認識して被写体の撮像を行う顔認識撮影モードが設定されると、撮像部８により被写体の撮像が行われ、スルー画像がデジタルカメラ４の図示しない表示部に表示される（ステップＳ１０１）。次に、ＤＰＦ６からＵＳＢ接続の要求があった場合は（ステップＳ１０２：Ｙｅｓ）、所定のＵＳＢ接続処理を行うことによりＤＰＦ６との間でＵＳＢ接続を確立し（ステップＳ１０３：Ｙｅｓ）、撮像部８により撮像された画像の画像データをデジタルカメラ４の記憶部から読み出し、ＵＳＢケーブルを介してデジタルカメラ４に対して送信する（ステップＳ１０４）。次に、ＤＰＦ６からＵＳＢケーブルを介してグループ情報及び重要人物情報を受信し（ステップＳ１０５）、これらを記憶部に記憶する（ステップＳ１０６）。次に、ＤＰＦ６との間のＵＳＢ接続が切断された場合には（ステップＳ１０７：Ｙｅｓ）、再度ＤＰＦ６からＵＳＢ接続の要求があったか否かの判定を行う（ステップＳ１０２）。

次に、ＵＳＢ接続の要求がなかった場合は（ステップＳ１０２：Ｎｏ）、顔認識部１０において、撮像部８により撮像された画像に人の顔が含まれているか否かの判定を行う（ステップＳ１１１）。ここで、画像における人の顔検出は、画像において人物の顔や眼を認識する顔認識処理により行う。人の顔が検出されなかった場合は、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ１１９）。一方、人の顔が検出された場合は、検出した顔の人物が受信したグループに含まれる人物か否かの判定を行う（ステップＳ１１２）。ここで、グループに含まれる人物か否かの判定は、顔認識部１０において検出した人の顔から顔の特徴情報を抽出し、この顔の特徴情報がＤＰＦ６から受信した顔の特徴情報に含まれる顔の特徴情報と一致するか否かを判定することにより行う。例えば、本人、妻及び娘の顔の特徴情報を一つのグループとするグループ情報をＤＰＦ６から受信したとする。この場合において、デジタルカメラ４で娘と娘の友人を撮像した場合、撮像された画像から検出した人の顔の特徴情報の中で娘の顔の特徴情報は、受信したグループ情報に含まれる娘の顔の特徴情報と一致する。そのため、娘は、デジタルカメラ４が受信した家族のグループに含まれる人物であると判定する。

次に、検出した顔の人物の全てがグループに含まれる人物でない場合には（ステップＳ１１２：Ｎｏ）、図示しない表示部に表示されている全ての人物の顔のまわりに顔枠を表示し（ステップＳ１１３）、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ１１９）。一方、検出した顔の人物にグループに含まれる人物が含まれている場合は（ステップＳ１１２：Ｙｅｓ）、グループに含まれる人物の顔が複数検出されたか否かの判定を行う（ステップＳ１１４）。グループに含まれる人物の顔が複数検出されなかった場合（一人の場合）には、現在デジタルカメラ４の表示部に表示されているグループに含まれる人物の顔のまわりに顔枠を表示し（ステップＳ１１５）、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ１１９）。例えば、本人、妻及び娘の顔の特徴情報を一つのグループとするグループ情報をＤＰＦ６から受信した場合において、デジタルカメラ４の顔認識部１０において娘及び娘の友人の顔を検出した場合、娘の顔のまわりに顔枠を表示する。

また、グループに含まれる人物の顔が複数検出された場合には、検出された人物に重要人物が含まれるか否かの判定を行う（ステップＳ１１６）。重要人物が含まれない場合には（ステップＳ１１６：Ｎｏ）、グループに含まれる全ての人物の顔のまわりに顔枠を表示し（ステップＳ１１７）、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ１１９）。例えば、本人、妻及び娘の顔の特徴情報を一つのグループとするグループ情報及び本人を重要人物とする重要人物情報をＤＰＦ６から受信した場合において、デジタルカメラ４の顔認識部１０において妻、娘及び娘の友人の顔を検出した場合、妻と娘の顔のまわりに顔枠を表示する。

一方、重要人物が含まれる場合には（ステップＳ１１６：Ｙｅｓ）、重要人物の顔のまわりに顔枠を表示し（ステップＳ１１８）、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ１１９）。例えば、デジタルカメラ４の顔認識部１０において本人、妻、娘及び娘の友人の顔を検出した場合、本人の顔のまわりに顔枠を表示する。

次に、レリーズボタンが半押しされたか否かの判定を行う（ステップＳ１１９）。レリーズボタンが半押しされた場合には、撮像部８において焦点位置の調節及び被写体光の測光を行う（ステップＳ１２０）。なお、焦点位置の調節及び被写体光の測光は、画像表示部１４に顔枠が表示されている場合には顔枠の位置（顔枠が複数表示されている場合は最大の顔面積を有する顔の顔枠の位置）において、顔枠が表示されていない場合には画像の中央位置において行う。次に、レリーズボタンが全押しされたか否かの判定を行う（ステップＳ１２１）。レリーズボタンが全押しされない場合には（ステップＳ１２１：Ｎｏ）、再度レリーズボタンが半押しされたか否かの判定を行い（ステップＳ１１９）、レリーズボタンが全押しされた場合には（ステップＳ１２１：Ｙｅｓ）、撮像素子により撮像が行われ（ステップＳ１２２）、撮像された画像の画像データは記憶部に記憶され、Ｅｘｉｆ等の所定のファイル形式の画像ファイルとしてメモリカードに記憶される（ステップＳ１２３）。なお、グループに含まれる人物が写っている画像の画像ファイルには、グループに含まれる人物が写っていることを示す情報がそのヘッダ部に記録され、重要人物が写っている画像の画像ファイルには、重要人物が写っていることを示す情報がそのヘッダ部に記録される。

また、レリーズボタンが半押しされなかった場合には（ステップＳ１１９：Ｎｏ）、電源をオフにするための操作が行われたか否かの判定を行う（ステップＳ１２４）。電源をオフにするための操作が行われなかった場合には、再度ＤＰＦ６からＵＳＢ接続の要求があったか否かの判定を行い（ステップＳ１０２）、電源をオフにするための操作が行われた場合にはデジタルカメラ４の電源をオフにして一連の処理を終了する。

次に、図８に示すフローチャートを参照して第２の実施の形態に係るカメラシステム２のＤＰＦ６の再生処理について説明する。まず、操作者によりメモリカードに記憶されている画像データに基づく画像を画像表示部１４に再生する再生モードの設定が行われると、メモリカードに記憶されている全ての画像データに基づく画像を画像表示部１４に表示する対象とする全画像再生モードが設定される（ステップＳ１３１）。次に、最新の画像データの画像ファイルをメモリカードから読み出して、画像データに基づく画像を画像表示部１４に表示する（ステップＳ１３２）。次に、再生モードを切り替える図示しない再生モード切替ボタンが操作された場合は（ステップＳ１３３：Ｙｅｓ）、全画像再生モードが設定されているか否かの判定を行う（ステップＳ１３４）。

全画像再生モードが設定されていない場合は（ステップＳ１３４：Ｎｏ）、グループ再生モードが設定されているか否かの判定を行う（ステップＳ１３５）。グループ再生モードが設定されていない場合は（ステップＳ１３５：Ｎｏ）、全画像再生モードの設定を行い（ステップＳ１３６）、最新の画像データに基づく画像を画像表示部１４に表示する（ステップＳ１３２）。一方、グループ再生モードが設定されている場合は（ステップＳ１３５：Ｙｅｓ）、メモリカードから重要人物が写っている画像データの画像ファイルの検索を行う（ステップＳ１３７）。例えば、重要人物が写っていることを示す情報が画像ファイルのヘッダ部に記憶されている場合において、ヘッダ部に重要人物が写っていることを示す情報が記憶されている画像ファイルをメモリカードから検索する。次に、重要人物が写っている画像を画像表示部１４に表示する対象とする重要人物再生モードを設定し（ステップＳ１３８）、重要人物が写っていることを示す情報を有する画像ファイルの中で最新の画像ファイルの画像データに基づく画像を画像表示部１４に表示する（ステップＳ１３２）。

一方、全画像再生モードが設定されている場合は（ステップＳ１３４：Ｙｅｓ）、メモリカードからグループに含まれる人物が写っている画像データの画像ファイルを検索する（ステップＳ１３９）。例えば、グループに含まれる人物が写っていることを示す情報が画像ファイルのヘッダ部に記憶されている場合において、ヘッダ部にグループに含まれる人物が写っていることを示す情報が記憶されている画像ファイルをメモリカードから検索する。次に、グループに含まれる人物が写っている画像を画像表示部１４に表示する対象とするグループ再生モードを設定し（ステップＳ１４０）、グループに含まれる人物が写っていることを示す情報を有する画像ファイルの中で最新の画像ファイルの画像データに基づく画像を画像表示部１４に表示する（ステップＳ１３２）。

また、再生モード切替ボタンが操作されなかった場合は（ステップＳ１３３：Ｎｏ）、次の画像を画像表示部１４に表示する画像送りボタンが操作されたか否かの判定を行い（ステップＳ１４１）、画像送りボタンが操作された場合には、次の画像を表示し（ステップＳ１４２）、画像送りボタンが操作されなかった場合には、前の画像を画像表示部１４に表示する画像戻しボタンが操作されたか否かの判定を行う（ステップＳ１４３）。画像戻しボタンが操作された場合には、前の画像を表示し（ステップＳ１４４）、画像戻しボタンが操作されなかった場合には、電源をオフにするための操作が行われたか否かの判定を行う（ステップＳ１４５）。電源をオフにするための操作が行われなかった場合には、再度再生モード切替ボタンが操作されたか否かの判定を行い（ステップＳ１３３）、電源をオフにするための操作が行われた場合にはデジタルカメラ４の電源をオフにして一連の処理を終了する。

この第２の実施の形態に係るカメラシステム２００によれば、画像表示部１４に表示された画像を鑑賞する鑑賞者をカメラ１６により撮像し、撮像した鑑賞者の顔の特徴情報を一つのグループとすることにより、画像データに含まれていない人物の顔情報をグループ化することができる。また、デジタルカメラ４において撮像された画像に写ることはないが、ＤＰＦ６のカメラ１６において検出される人物を重要人物とすることにより、例えば、妻と娘が写っている画像を頻繁にＤＰＦ６の画像表示部１４で鑑賞するが、自分自身は画像に写ることのない本人などを重要人物の対象とすることができる。また、重要人物に優先的に焦点を合わせて撮像を行うことにより、例えば、画像に写ることのない本人を他の人物に優先して撮像することができる。

なお、上述の第２の実施の形態においては、第２グループ情報に含まれておらず、第１グループ情報に含まれる顔の特徴情報から特定される人物を重要人物とする重要人物情報を生成しているが、第２グループ情報に含まれる頻度が低い人物を重要人物とする重要人物情報を生成してもよい。また、この場合において、デジタルカメラ４から受信した画像データから高い頻度で抽出された顔の特徴情報と重要人物の顔の特徴情報とをグループ化するグループ情報を生成してもよい。これにより、殆ど画像に写ることのない人物と頻繁に撮像される人物とを一つのグループとするグループ情報を生成ことができる。例えば、妻、娘、義母、娘の友人の４人を撮像した画像の画像データ１０個をデジタルカメラ４から受信した場合において、１０個の画像データの内訳が、妻が写っているものが８個、娘が写っているものが９個、義母が写っているものが２個、娘の友人が写っているものが１個であれば、頻繁に撮像された妻及び娘と重要人物である本人とを一つのグループとするグループ情報を生成することができる。

また、上述の第２の実施の形態においては、第２グループ情報に含まれておらず、第１グループ情報に含まれる顔の特徴情報から特定される人物を重要人物とする重要人物情報を生成しているが、第１グループ情報と第２グループ情報の何れかに含まれる顔の特徴情報から特定される人物を重要人物とする重要人物情報を生成してもよい。例えば、本人の顔の特徴情報を一つのグループとする第１グループ情報及び妻、娘の顔の特徴情報を一つのグループとする第２グループ情報がある場合において、本人、妻及び娘を重要人物とする重要人物情報を生成するようにしてもよい。

また、上述の各実施の形態においては、グループに含まれる人物の顔を検出した場合、顔枠を表示し、顔枠の位置に合わせて焦点位置の調節を行っているが、グループに含まれる人物の顔を検出した場合に撮像を行うようにしてもよい。これにより、シャッターチャンスを逃すことなく撮像を行うことができる。また、重要人物の顔を検出した場合に撮像を行うようにしてもよい。

また、上述の各実施の形態においては、グループに含まれる人物を検出した場合にはグループに含まれる人物の顔のまわりに、検出した顔に重要人物が含まれる場合には重要人物の顔のまわりに顔枠を表示しているが、検出した全ての人物の顔のまわりに顔枠を表示し、検出した人物の顔の特徴情報に記憶された情報に応じて顔枠に優先順位をつけるようにしてもよい。例えば、重要人物の顔の周りには赤い顔枠、グループに含まれる人物の顔の周りには太い顔枠、それ以外の人物の顔の周りには通常の顔枠を表示し、優先順位に応じて顔枠の位置における焦点位置の調節及び被写体光の測光を行うようにしてもよい。この場合、デジタルカメラ４は赤い顔枠の位置において焦点位置の調節及び被写体光の測光を行うことになる。これにより、常に画像表示部１４に表示されている人物の中で最も優先順位の高い人物に焦点等を合わせて撮像を行うことができる。

また、上述の第２の実施の形態においては、グループに含まれる人物の顔が複数検出された場合には、グループに含まれる全ての人物の顔のまわりに顔枠を表示しているが、グループに含まれる人物の中で最大の顔面積を有する顔のまわりに顔枠を表示してもよい。なお、重要人物でなく且つグループにも含まれない人物の顔が複数検出された場合においても最大の顔面積を有する顔のまわりに顔枠を表示するようにしてもよい。

また、上述の各実施の形態においては、ＤＰＦ６を例として再生処理を示すフローチャートの説明を行っているが（図４、図８参照）、デジタルカメラ４において同様の再生処理を行ってもよい。これにより、デジタルカメラ４においてグループ再生モードによるグループに含まれる人物が写っている画像のみの再生、及び重要人物再生モードによる重要人物が写っている画像のみの再生を行うことができる。

また、上述の実施の形態においては、再生処理において静止画像を例に説明を行っているが、スライドショー機能を設けてもよい。これにより、グループに含まれる人物が写っている画像のみ、及び重要人物が写っている画像のみをスライドショーとして表示することができる。また、スライドショーの表示効果として、画像に重要人物が写っている場合には、重要人物を中心に画像を拡大して表示するようにしてもよい。これにより、スライドショーの鑑賞者に重要人物を深く印象付けることができる。

また、上述の第２の実施の形態においては、全画像再生モード及びグループ再生モードが設定された場合において最新の画像データに基づく画像を表示しているが、重要人物が写っている画像を優先的に再生してもよい。これにより、重要人物再生モードが設定されていない場合であっても重要人物が写っている画像を優先して表示することができる。

また、上述の第２の実施の形態においては、ＤＰＦ６において、撮像部８により撮像された画像に重要人物が含まれる場合には、重要人物の顔のまわりに顔枠を表示し、優先して焦点位置の調節及び被写体光の測光を行っているが、デジタルカメラ４において重要人物の顔を優先して顔ズームするようにしてもよい。これにより、遠くから撮影を行う場合でも重要人物を見失わずに画像を拡大することができる。

また、上述の実施の形態においては、ＵＳＢケーブルを介してデジタルカメラ４とＤＰＦ６との間の通信を行っているが、ワイヤレスＵＳＢ通信を用いてもよく、またＵＳＢ通信以外の他の通信手段を用いてもよい。これにより、デジタルカメラ４とＤＰＦ６とが離れている場合でもＤＰＦ６はデジタルカメラ４から画像データを取得できる。また、メモリカードをデジタルカメラ４及びＤＰＦ６に着脱することにより直接メモリカードからデータを取得するようにしてもよい。例えば、メモリカードをＤＰＦ６に装着してグループ情報、重要人物情報をメモリカードに記憶させた後、ＤＰＦ６からメモリカードを取外してデジタルカメラ４に装着する。デジタルカメラ４はメモリカードから顔の特徴情報、グループ情報、重要人物情報を取得してデジタルカメラ４の記憶部に記憶する。また、デジタルカメラ４に装着されているメモリカードは、デジタルカメラ４から画像データを取得して記憶する。デジタルカメラ４からメモリカードを取外してＤＰＦ６に装着すると、ＤＰＦ６は、メモリカードから画像データを取得してＤＰＦ６の記憶部に記憶するようにしてもよい。

２、２００…カメラシステム、４…デジタルカメラ、６…デジタルフォトフレーム、８…撮像部、１０…顔認識部、１２…データ転送部、１４…画像表示部、１５…顔検出部、１６…カメラ、１８…顔特徴点抽出部、１９…重要人物生成部、２０…データ転送部。

Claims (8)

1. 画像を表示する表示部と、
   前記表示部に表示された前記画像を鑑賞する鑑賞者を撮像する撮像部と、
   前記撮像部により撮像された前記鑑賞者の顔を検出する第１検出部と、
   前記第１検出部において検出した前記鑑賞者の顔の特徴情報を抽出する第１抽出部と、
   前記第１抽出部において抽出された前記鑑賞者の顔の前記特徴情報を第１のグループとする第１グループ情報を生成する第１グループ情報生成部と
   を備えることを特徴とする画像表示装置。
2. 前記外部機器から前記画像の画像データを取得する取得部と、
   前記取得部により取得した前記画像データに基づく画像に含まれる人の顔を検出する第２検出部と、
   前記第２検出部において検出した前記人の顔の特徴情報を抽出する第２抽出部と、
   前記第２抽出部において抽出された前記人の顔の前記特徴情報を第２のグループとする第２グループ情報を生成する第２グループ情報生成部と、
   前記第１グループの前記特徴情報と前記第２グループの前記特徴情報とに基づいて重要人物情報を生成する重要人物情報生成部と
   を備えることを特徴とする請求項１記載の画像表示装置。
3. 前記重要人物情報生成部は、前記第１グループの前記特徴情報に存在し前記第２グループの前記特徴情報に存在しない前記特徴情報により特定される人物を重要人物とすることを特徴とする請求項２記載の画像表示装置。
4. 前記重要人物情報生成部は、前記第１グループと前記第２グループの何れかの前記特徴情報により特定される人物を重要人物とすることを特徴とする請求項２記載の画像表示装置。
5. 画像表示装置と、デジタルカメラとを有するカメラシステムであって、
   前記画像表示装置は、
   画像を表示する表示部と、
   前記表示部に表示された前記画像を鑑賞する鑑賞者を撮像する第１撮像部と、
   前記第１撮像部により撮像された前記鑑賞者の顔を検出する第１検出部と、
   前記第１検出部において検出した前記鑑賞者の顔の特徴情報を抽出する第１抽出部と、
   前記第１抽出部において抽出された前記鑑賞者の顔の前記特徴情報を第１のグループとする第１グループ情報を生成する第１グループ情報生成部と、
   前記第１グループ情報を前記デジタルカメラに対して送信する送信部と
   を備え、
   前記デジタルカメラは、
   被写体を撮像する第２撮像部と、
   前記画像表示装置から前記第１グループ情報を受信する受信部と
   を備え、
   前記受信部において受信した前記第１グループ情報を前記第２撮像部により被写体の撮像を行う際に被写体認識情報として用いることを特徴とするカメラシステム。
6. 前記画像表示装置は、
   前記デジタルカメラから前記画像の画像データを受信する画像受信部と、
   前記画像受信部により受信した前記画像データに基づく画像に含まれる人の顔を検出する第２検出部と、
   前記第２検出部において検出した前記人の顔の特徴情報を抽出する第２抽出部と、
   前記第２抽出部において抽出された前記人の顔の前記特徴情報を第２のグループとする第２グループ情報を生成する第２グループ情報生成部と、
   前記第１グループの前記特徴情報と前記第２グループの前記特徴情報とに基づいて重要人物情報を生成する重要人物情報生成部とを備え、
   前記送信部は、前記重要人物情報を前記デジタルカメラに対して送信することを特徴とする請求項５記載のカメラシステム。
7. 前記重要人物情報生成部は、前記第１グループの前記特徴情報に存在し前記第２グループの前記特徴情報に存在しない前記特徴情報により特定される人物を重要人物とすることを特徴とする請求項６記載のカメラシステム。
8. 前記重要人物情報生成部は、前記第１グループと前記第２グループの何れかの前記特徴情報により特定される人物を重要人物とすることを特徴とする請求項６記載のカメラシステム。

Images