JP2006155095A - 電子アルバム表示システム、電子アルバム表示方法、及び電子アルバム表示プログラム - Google Patents

Abstract

【課題】表示する画像に含まれる人物と鑑賞者との間の親密さに基づいて、ＢＧＭとして演奏する楽曲を選択する。
【解決手段】複数の画像を格納している画像格納部と、複数の画像のそれぞれについて、画像に含まれる複数の人物を認識する人物認識部と、認識結果に基づいて、複数の画像の中の少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する親密度算出部と、複数の楽曲のそれぞれを、親密度の範囲に対応付けて格納している楽曲格納部と、複数の画像のそれぞれに含まれる人物と鑑賞者との間の親密度、及び複数の楽曲のそれぞれに対応付けられた親密度の範囲に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する選択部と、選択された画像を表示すると共に、選択された楽曲を演奏する表示演奏部とを備える電子アルバム表示システムを提供する。
【選択図】図２

Description

本発明は、電子アルバム表示システム、電子アルバム表示方法、及び電子アルバム表示プログラムに関する。特に本発明は、複数の画像を表示する電子アルバム表示システム、電子アルバム表示方法、及び電子アルバム表示プログラムに関する。

従来、電子アルバムに含まれる複数の画像を、スライドショーとして順次表示する場合において、画像の表示中にＢＧＭ（Ｂａｃｋｇｒｏｕｎｄ Ｍｕｓｉｃ）を演奏することにより、鑑賞者にとっての満足度の向上が図られている。ここで、例えば、クリスマスに撮像された画像を表示する場合には、クリスマスに関連する楽曲をＢＧＭとして演奏するというように、表示する画像の撮像日時に基づいて、演奏する楽曲を選択する電子アルバム表示システムが知られている（例えば、特許文献１参照。）。
特開平９−２２４１６号公報

スライドショーにおけるＢＧＭとして演奏する楽曲を、表示する画像の撮像日時のみに基づいて選択する従来の電子アルバム表示システムにおいては、撮像日時が類似する複数の画像におけるＢＧＭは同じ楽曲である場合が多い。このため、鑑賞者が、画像が撮像された時期や時代を振り返ることよりも、画像に含まれる人物を見ることをより重視してスライドショーを鑑賞したいと所望する場合において、複数の画像における撮像日時が類似している場合、それぞれの画像に含まれる人物と鑑賞者との関係の違いに関わらず、同じ楽曲がＢＧＭとして演奏されるので、鑑賞者の満足度を十分に向上させることができていない場合があった。

そこで本発明は、上記の課題を解決することができる電子アルバム表示システム、電子アルバム表示方法、及び電子アルバム表示プログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。

上記課題を解決するために、本発明の第１の形態においては、電子アルバム表示システムであって、複数の画像を格納している画像格納部と、複数の画像のそれぞれについて、当該画像に含まれる複数の人物を認識する人物認識部と、人物認識部による認識結果に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する親密度算出部と、複数の楽曲のそれぞれを、親密度の範囲に対応付けて格納している楽曲格納部と、複数の画像のそれぞれに含まれる人物と鑑賞者との間の親密度、及び複数の楽曲のそれぞれに対応付けられた親密度の範囲に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する選択部と、選択部によって選択された画像を表示すると共に、選択部によって選択された楽曲を演奏する表示演奏部とを備える。

選択部は、複数の画像の中の、少なくとも一部の画像が予め選択されている場合に、複数の楽曲のうち、当該選択されている画像のそれぞれに含まれる人物と鑑賞者との間の親密度を含む親密度の範囲に対応する楽曲を選択してもよい。選択部は、複数の楽曲の中の、少なくとも一部の楽曲が予め選択されている場合に、複数の画像のうち、画像に含まれる人物と鑑賞者との間の親密度が、当該選択されている楽曲に対応する親密度の範囲に含まれている画像を選択してもよい。親密度算出部は、複数の画像の中の、少なくとも一部の画像に含まれる、第１の人物と第２の人物との間の親密度を、複数の画像のうち、当該第１の人物と当該第２の人物との双方を含む画像の数がより多い場合に、より高い親密度として算出してもよい。

親密度算出部は、複数の画像のそれぞれについて人物認識部により認識された人物の数に基づいて、当該画像に含まれる人物の間の親密度である画像内親密度を算出する画像内親密度算出部と、複数の画像のそれぞれについて算出された画像内親密度に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度である全体親密度を算出する全体親密度算出部とを有し、楽曲格納部は、複数の楽曲のそれぞれを、全体親密度の範囲に対応付けて格納しており、選択部は、複数の画像のそれぞれに含まれる人物と鑑賞者との間の全体親密度、及び複数の楽曲のそれぞれに対応付けられた全体親密度の範囲に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択してもよい。画像内親密度算出部は、複数の画像のそれぞれについて人物認識部により認識された人物の数が少ない程、当該画像に含まれる人物の間の画像内親密度をより高く算出してもよい。

親密度算出部は、複数の画像のそれぞれについての人物認識部による認識結果に基づいて、当該画像に含まれる人物の間の親密度である画像内親密度を、当該人物のそれぞれを示す画像の間の距離が小さい程、より高い値として算出する画像内親密度算出部と、複数の画像のそれぞれについて算出された画像内親密度に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度である全体親密度を算出する全体親密度算出部とを有し、楽曲格納部は、複数の楽曲のそれぞれを、全体親密度の範囲に対応付けて格納しており、選択部は、複数の画像のそれぞれに含まれる人物と鑑賞者との間の全体親密度、及び複数の楽曲のそれぞれに対応付けられた全体親密度の範囲に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択してもよい。画像内親密度算出部は、複数の画像のそれぞれについて、当該画像に含まれる人物の間の画像内親密度を、当該人物のそれぞれを示す画像に含まれる顔画像の間の距離が小さい程、より高い値として算出してもよい。

人物認識部は、複数の画像のそれぞれについて、当該画像に含まれる複数の人物のそれぞれにおける性別を更に認識し、楽曲格納部は、複数の楽曲のそれぞれに対応付けて、当該楽曲について予め定められた、性別の一致または不一致を示す情報を更に格納しており、選択部は、複数の画像のそれぞれに含まれる人物の性別と鑑賞者の性別とが一致するか否か、及び複数の楽曲のそれぞれに対応付けられた性別の一致または不一致を示す情報に更に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択してもよい。

人物認識部は、複数の画像のそれぞれについて、当該画像に含まれる複数の人物のそれぞれにおける年齢を更に認識し、楽曲格納部は、複数の楽曲のそれぞれに対応付けて、当該楽曲について予め定められた、年齢差を示す情報を更に格納しており、選択部は、複数の画像のそれぞれに含まれる人物と鑑賞者との年齢差、及び複数の楽曲のそれぞれに対応付けられた年齢差を示す情報に更に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択してもよい。当該電子アルバム表示システムは、鑑賞者の顔画像を撮像する撮像部と、撮像部により撮像された顔画像に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物から、鑑賞者である人物を識別する鑑賞者識別部とを更に備えてもよい。

また、本発明の第２の形態においては、画像格納部が格納している複数の画像のそれぞれについて、当該画像に含まれる複数の人物を認識する人物認識段階と、人物認識段階における認識結果に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する親密度算出段階と、複数の画像のそれぞれに含まれる人物と鑑賞者との間の親密度、及び楽曲格納部が格納している複数の楽曲のそれぞれに対応付けられた親密度の範囲に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する選択段階と、選択段階において選択された画像を表示すると共に、選択段階において選択された楽曲を演奏する表示演奏段階とを備える。

また、本発明の第３の形態においては、電子アルバム表示システムとしてコンピュータを機能させる電子アルバム表示プログラムであって、コンピュータを、複数の画像を格納している画像格納部と、複数の画像のそれぞれについて、当該画像に含まれる複数の人物を認識する人物認識部と、人物認識部による認識結果に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する親密度算出部と、複数の楽曲のそれぞれを、親密度の範囲に対応付けて格納している楽曲格納部と、複数の画像のそれぞれに含まれる人物と鑑賞者との間の親密度、及び複数の楽曲のそれぞれに対応付けられた親密度の範囲に基づいて、複数の画像の中の少なくとも一部の画像、及び複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する選択部と、選択部によって選択された画像を表示すると共に、選択部によって選択された楽曲を演奏する表示演奏部とを備える電子アルバム表示システムとして機能させる。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。

本発明によれば、表示する画像に含まれる人物と鑑賞者との間の親密さに基づいて、ＢＧＭとして演奏する楽曲を選択することができる。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、本発明の実施形態に係る電子アルバム表示システム１０の一例を示す。電子アルバム表示システム１０は、電子アルバム再生部２０、及び表示演奏部３０を備え、電子アルバムに含まれる複数の画像を表示して、鑑賞者４０に鑑賞させる。ここで、電子アルバム表示システム１０は、例えば、当該複数の画像を、所謂スライドショーとして、予め定められた時間間隔で切り替えつつ順次表示してよい。そして、電子アルバム表示システム１０は、当該複数の画像を表示しつつ、ＢＧＭを演奏する。

電子アルバム再生部２０は、電子アルバムに含まれる複数の画像、及びＢＧＭとして演奏する複数の楽曲を格納している。ここで、画像とは、静止画像及び動画像の何れであってもよい。そして、電子アルバム再生部２０は、当該複数の画像の中から、表示すべき画像を選択し、選択した画像を画像信号として再生して、表示演奏部３０に出力する。また、電子アルバム再生部２０は、当該複数の楽曲の中から、演奏すべき楽曲を選択し、選択した楽曲を音声信号として再生して、表示演奏部３０に出力する。なお、電子アルバム再生部２０は、例えば、静止画像または動画像を再生可能であるＤＶＤプレイヤー等の映像再生機器であってもよい。表示演奏部３０は、例えばテレビ受像機であってよく、電子アルバム再生部２０から受け取った画像信号に基づいて、選択された画像を表示すると共に、電子アルバム再生部２０から受け取った音声信号に基づいて、選択された楽曲を演奏する。

なお、電子アルバム表示システム１０は、例えば、パーソナルコンピュータ（ＰＣ）や、デジタルカメラ、或いはデジタルカメラを有する携帯電話端末等であってもよい。また、電子アルバム表示システム１０は、例えば、電子アルバム再生部２０がＰＣであると共に、表示演奏部３０がデジタルカメラであるというように、互いに異なる機器の組み合わせを含んでいてもよい。

本発明の実施形態に係る電子アルバム表示システム１０は、複数の画像の中の少なくとも一部の画像と、複数の楽曲の中の少なくとも一部の楽曲との組み合わせを選択して、ＢＧＭ付きのスライドショーを表示する場合に、当該複数の画像から算出した人物間の親密度と、当該複数の楽曲のそれぞれに対応する親密度の範囲とに基づいて組み合わせを選択することにより、満足度の高いスライドショーを鑑賞者４０に提供することを目的とする。

図２は、本発明の実施形態に係る電子アルバム表示システム１０の機能構成の一例を示すブロック図である。電子アルバム再生部２０は、画像格納部２００、顔画像データベース２１０、人物認識部２２０、親密度算出部２３０、撮像部２４０、鑑賞者識別部２５０、楽曲格納部２６０、及び選択部２７０を有する。画像格納部２００は、例えば磁気記録媒体や半導体記録媒体等を用いた記憶装置であってよく、電子アルバムに含まれる複数の画像を格納している。顔画像データベース２１０は、複数の人物の顔画像を格納している。人物認識部２２０は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる複数の人物を、顔画像データベース２１０に格納されている複数の人物の顔画像に基づいて認識する。そして、人物認識部２２０は、それぞれの画像における人物の認識結果を、親密度算出部２３０、及び選択部２７０に出力する。

親密度算出部２３０は、人物認識部２２０による、画像格納部２００に格納されている複数の画像のそれぞれに含まれる複数の人物の認識結果に基づいて、当該複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する。そして、親密度算出部２３０は、算出した親密度を選択部２７０に出力する。撮像部２４０は、例えば電子アルバム再生部２０に設けられたデジタルカメラであり、鑑賞者４０の顔画像を撮像する。そして、撮像部２４０は、撮像した鑑賞者４０の顔画像を、鑑賞者識別部２５０に出力する。鑑賞者識別部２５０は、撮像部２４０により撮像された鑑賞者４０の顔画像と、顔画像データベース２１０に格納されている複数の人物の顔画像とに基づいて、画像格納部２００に格納されている複数の画像の中の、少なくとも一部の画像に含まれる人物から、鑑賞者４０である人物を識別する。そして、鑑賞者識別部２５０は、鑑賞者４０である人物の識別結果を、選択部２７０に出力する。楽曲格納部２６０は、スライドショーのＢＧＭとして演奏される複数の楽曲のそれぞれを、人物の間における親密度の範囲に対応付けて格納している。

選択部２７０は、画像格納部２００に格納されている複数の画像のそれぞれに含まれる複数の人物の認識結果を、人物認識部２２０から受け取る。また、選択部２７０は、画像格納部２００に格納されている複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を、親密度算出部２３０から受け取る。また、選択部２７０は、鑑賞者識別部２５０から受け取った識別結果に基づいて、鑑賞者４０が、当該複数の画像のそれぞれに含まれる人物のうち、何れの人物であるかを認識する。そして、選択部２７０は、画像格納部２００に格納されている複数の画像のそれぞれに含まれる人物と鑑賞者４０との間の親密度と、楽曲格納部２６０に格納されている複数の楽曲のそれぞれに対応付けられた親密度の範囲とに基づいて、当該複数の画像の中の少なくとも一部の画像と、当該複数の楽曲の中の少なくとも一部の楽曲との組み合わせを選択する。そして、選択部２７０は、選択した画像を画像格納部２００から読み出して表示演奏部３０に出力すると共に、選択した楽曲を楽曲格納部２６０から読み出して表示演奏部３０に出力する。表示演奏部３０は、選択部２７０から受け取った画像を表示すると共に、選択部２７０から受け取った楽曲を演奏する。

本発明の実施形態に係る電子アルバム表示システム１０によれば、画像における人物の認識結果から算出した人物間の親密度と、楽曲に対応付けられた親密度の範囲とに基づいて、画像と楽曲との組み合わせを選択することができる。そして、選択した画像をスライドショーとして表示しつつ、選択した楽曲を当該スライドショーのＢＧＭとして演奏することができる。これにより、鑑賞者４０は、表示される画像に合わせて、ＢＧＭとして演奏される楽曲を手動で選択しなくとも、画像に含まれる人物と自分自身との間の親密さに適した楽曲がＢＧＭとして演奏される、満足度の高いスライドショーを鑑賞することができる。

また、電子アルバム表示システム１０によれば、鑑賞者４０の顔画像を撮像して、電子アルバムにおける画像のそれぞれに含まれる複数の人物のうち、何れの人物が鑑賞者４０であるかを認識することができる。これにより、鑑賞者４０は、電子アルバム表示システム１０に対して、自分自身の情報を登録したり、ログイン手続きを行ったりしなくとも、表示される画像に含まれる人物と自分自身との間の親密度に基づいて選択されたＢＧＭが演奏されるスライドショーを鑑賞することができる。

なお、選択部２７０は、複数の画像及び複数の楽曲を同時に選択してもよい。この場合、選択部２７０は、当該複数の画像のそれぞれと、当該複数の楽曲のそれぞれとの対応関係を示す情報を更に出力してよい。これにより、選択部２７０は、表示演奏部３０において、複数の画像のそれぞれを表示させつつ、当該画像に対応する楽曲を演奏させることができる。

また、選択部２７０は、選択した画像及び楽曲そのものを、画像信号や音声信号として表示演奏部３０に出力するのに代えて、画像のそれぞれを識別する画像識別子、及び楽曲のそれぞれを識別する楽曲識別子を、所謂プレイリストとして表示演奏部３０に出力してもよい。例えば、電子アルバム再生部２０がＰＣであり、表示演奏部３０がデジタルカメラや携帯電話端末である場合において、ＰＣが、デジタルカメラ等から受け取ったメモリカードに格納されている画像に対して人物の認識処理や親密度の算出処理を行った後で、スライドショーにおいて用いられるべき画像及び楽曲を選択すると共に、選択結果をスライドショーのプレイリストとしてデジタルカメラに出力することができる。これにより、当該デジタルカメラは、人物の認識処理等を行わなくとも、鑑賞者４０にとって満足度の高いスライドショーを再生することができる。

図３は、本発明の実施形態に係る画像格納部２００の一例を示す。画像格納部２００は、複数の画像のそれぞれについて、当該画像を識別する画像識別子と、当該画像を示す画像データとを対応付けて格納している。ここで、画像識別子とは、画像格納部２００が画像を格納する場合に、それぞれの画像について一意となるべく定められた値であってよい。なお、本図において、画像識別子は数値として示されているが、これに代えて、画像識別子は、例えば画像データを示すファイルに割り当てられたファイル名等の文字列であってもよい。

図４は、本発明の実施形態に係る顔画像データベース２１０の一例を示す。顔画像データベース２１０は、複数の人物のそれぞれについて、当該人物を識別する人物識別子と、当該人物の顔画像とを対応付けて格納している。ここで、人物識別子は、例えば、顔画像データベース２１０に顔画像が格納される場合に、それぞれの顔画像について一意となるべく定められた値であってよい。また、顔画像データベース２１０は、人物認識部２２０から顔画像を受け取って格納してよい。具体的には、人物認識部２２０は、画像格納部２００に格納されている画像に含まれる人物を認識する場合において、当該画像から抽出した人物の顔画像が、顔画像データベース２１０に格納されている何れの顔画像に対しても予め定められた基準値以上の類似度を示さない場合に、当該画像から抽出した人物の顔画像を、新たな顔画像として顔画像データベース２１０に格納させてよい。これにより、顔画像データベース２１０は、画像格納部２００に格納されている複数の画像の中の少なくとも一部の画像に含まれる人物の顔画像を格納することができる。

図５は、本発明の実施形態に係る人物認識部２２０による人物の認識結果の一例を示す。例えば、人物認識部２２０は、画像格納部２００に格納されている複数の画像のそれぞれについて、輪郭抽出処理や色分布分析処理等の公知の画像処理を行うことにより、当該画像に含まれる複数の被写体を検出する。そして、人物認識部２２０は、検出したそれぞれの被写体を示す画像から、人物の顔に固有の特徴量を検出することにより、当該被写体が人物である場合に、当該被写体を示す画像から人物の顔を示す部分画像を検出する。そして、人物認識部２２０は、検出した人物の顔を示す部分画像を、図４に示した顔画像データベース２１０に格納されている複数の顔画像のそれぞれと比較する。そして、人物認識部２２０は、検出した人物の顔を示す部分画像が、顔画像データベース２１０に格納されている顔画像に対して、予め定められた基準値以上の類似度で類似している場合に、検出した被写体が、顔画像データベース２１０において当該顔画像に対応付けられている人物であると認識し、当該人物を示す人物識別子を検出する。このようにして、人物認識部２２０は、図５に示すように、複数の画像のそれぞれについて、当該画像に含まれる複数の人物を示す複数の人物識別子を検出する。

図６は、本発明の実施形態に係る親密度算出部２３０による親密度の算出結果の一例を示す。親密度算出部２３０は、画像格納部２００に格納されている複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する。例えば、親密度算出部２３０は、本図に示すように、人物識別子が０である人物と、人物識別子が１である人物との間における親密度を１０として算出する。ここで、親密度算出部２３０は、画像格納部２００に格納されている複数の画像の中の、少なくとも一部の画像に含まれる、第１の人物と第２の人物との間の親密度を、複数の画像のうち、当該第１の人物と当該第２の人物との双方を含む画像の数がより多い場合に、より高い親密度として算出してよい。例えば、親密度算出部２３０は、当該第１の人物と第２の人物との双方を含む画像の数を、親密度として算出してもよい。これにより、共に画像に含まれている頻度が高い人物同士を、より親密な関係にある人物として検出することができるので、人物の間の親密度を精度よく算出することができる。

なお、電子アルバム再生部２０は、画像格納部２００に格納されている複数の画像のそれぞれにおける、当該画像に含まれる人物の認識結果や、当該画像に含まれる人物同士の親密度、当該画像に含まれる人物のそれぞれと鑑賞者４０との間の親密度等を、Ｅｘｉｆ（Ｅｘｃｈａｎｇｅａｂｌｅ ｉｍａｇｅ ｆｉｌｅ）フォーマット等に基づくタグ情報として、当該画像を示す画像ファイルに格納してもよい。これにより、それぞれの画像に対して、当該画像に含まれる人物を認識したり、親密度を算出したりする処理を再度実行する場合において、処理に要する時間を短縮することができる。

図７は、本発明の実施形態に係る楽曲格納部２６０の一例を示す。楽曲格納部２６０は、スライドショーのＢＧＭとして演奏される複数の楽曲（７００、７１０、７２０、・・・）を格納している。また、楽曲格納部２６０は、複数の楽曲のそれぞれに対応付けて、人物の間における親密度の範囲を示す情報を格納している。例えば、楽曲格納部２６０は、鑑賞者４０等の利用者によって楽曲が登録される場合に、当該楽曲に対応する親密度の範囲を当該利用者に入力させ、それぞれを対応付けて格納してよい。また、例えば、楽曲格納部２６０は、楽曲が登録される場合に、公知の音声認識技術を用いて当該楽曲を解析した結果に基づいて、当該楽曲に対応する親密度の範囲を自動的に設定し、当該楽曲と設定した親密度の範囲とを対応付けて格納してよい。具体的には、楽曲格納部２６０は、楽曲が登録される場合に、当該楽曲を解析することにより、当該楽曲における平均のテンポを検出する。そして、楽曲格納部２６０は、例えば、楽曲におけるテンポがより遅い場合に、当該楽曲に、より高い親密度の範囲を設定してよい。

そして、選択部２７０は、親密度算出部２３０によって算出された、画像格納部２００に格納されている複数の画像のそれぞれに含まれる人物の間の親密度と、楽曲格納部２６０に格納されている複数の楽曲のそれぞれに対応付けられている親密度の範囲とに基づいて、スライドショーにおいて用いられる画像と楽曲との組み合わせを選択する。ここで、選択部２７０は、当該選択を行うにあたり、例えば、次に説明する２つの方法の何れかを用いてよい。

第１の方法においては、選択部２７０は、画像格納部２００に格納されている複数の画像の中の少なくとも一部の画像が、例えば鑑賞者４０等によって予め選択されている場合に、楽曲格納部２６０に格納されている複数の楽曲のうち、当該選択されている画像のそれぞれに含まれる人物と鑑賞者４０との間の親密度を含む範囲に対応する楽曲を選択する。これにより、鑑賞者４０が、スライドショーとして鑑賞したい画像を選択して、電子アルバム表示システム１０に予め指示している場合に、電子アルバム表示システム１０は、当該選択された画像に含まれる人物と鑑賞者４０との間の親密さを認識すると共に、当該親密さに適したＢＧＭを自動的に選択することができる。そして、電子アルバム表示システム１０は、選択した楽曲と、予め選択された画像とを用いて、画像と楽曲とが精度よく整合した、満足度の高いスライドショーを鑑賞者４０に提供することができる。

また、第２の方法においては、選択部２７０は、楽曲格納部２６０に格納されている複数の楽曲の中の少なくとも一部の楽曲が、例えば鑑賞者４０等によって予め選択されている場合に、画像格納部２００に格納されている複数の画像のうち、画像に含まれる人物と鑑賞者４０との間の親密度が、当該選択されている楽曲に対応する親密度の範囲に含まれている画像を選択する。これにより、鑑賞者４０が、聴きたい楽曲を選択して、電子アルバム表示システム１０に予め指示している場合に、電子アルバム表示システム１０は、鑑賞者４０とそれぞれの人物との間における親密度の算出結果に基づいて、鑑賞者４０に対して、当該選択された楽曲に適した親密さを示す人物を自動的に認識することができる。そして、電子アルバム表示システム１０は、認識した人物が含まれる画像と、予め選択された楽曲とを用いて、画像と楽曲とが精度よく整合した、満足度の高いスライドショーを鑑賞者４０に提供することができる。

なお、選択部２７０は、画像に複数の人物が含まれている場合には、例えば、当該複数の人物のうち、鑑賞者４０に対して最も親密度が高い人物における親密度に基づいて、画像と楽曲との組み合わせを選択してよい。また、選択部２７０は、画像に含まれる人物と鑑賞者４０との間の親密度に基づいて画像及び楽曲を選択するのに代えて、画像に含まれる人物の間の親密度に基づいて、画像及び楽曲を選択してもよい。こうすることにより、電子アルバム表示システム１０は、表示される画像に含まれる人物の間における親密さに適した楽曲をＢＧＭとして選択して、スライドショーを表示することができる。

また、楽曲格納部２６０は、複数の楽曲のそれぞれに対応付けて、当該楽曲について予め定められた、性別の一致または不一致を示す情報を更に格納していてよい。例えば、鑑賞者４０等の利用者は、楽曲が、同性の友人同士で聴くことに適していると判断した場合には、性別の一致を示す情報を入力して、当該楽曲に対応付けて楽曲格納部２６０に格納させてよい。また、鑑賞者４０等の利用者は、楽曲が、恋人同士で聴くことに適していると判断した場合には、性別の不一致を示す情報を入力して、当該楽曲に対応付けて格納させてよい。そして、この場合、人物認識部２２０は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる複数の人物のそれぞれにおける性別を更に認識する。例えば、人物認識部２２０は、画像に含まれる人物の顔を示す部分画像に、男性または女性に固有の特徴が含まれているか否かを判定することにより、当該人物の性別を認識してよい。また、例えば、人物認識部２２０は、鑑賞者４０等の利用者によってそれぞれの人物について予め設定され、顔画像データベース２１０に格納された、当該人物の性別を示す情報に基づいて、それぞれの人物の性別を認識してもよい。また、人物認識部２２０と同様にして、鑑賞者識別部２５０は、撮像部２４０が撮像した鑑賞者４０の顔画像に基づいて、鑑賞者４０の性別を認識する。

そして、選択部２７０は、画像格納部２００に格納されている複数の画像のそれぞれに含まれる人物の性別と鑑賞者４０の性別とが一致するか否か、及び楽曲格納部２６０に格納されている複数の楽曲のそれぞれに対応付けられた性別の一致または不一致を示す情報に更に基づいて、当該複数の画像の中の少なくとも一部の画像と、当該複数の楽曲の中の少なくとも一部の楽曲との組み合わせを選択する。例えば、選択部２７０は、表示すべき画像が鑑賞者４０等によって予め選択されている場合において、当該選択された画像に含まれる人物の性別と鑑賞者４０の性別とが一致する場合には、当該人物と鑑賞者４０との間の親密度を範囲に含む楽曲の中から、楽曲格納部２６０において、性別の一致を示す情報が対応付けて格納されている楽曲を選択する。また、例えば、選択部２７０は、演奏すべき楽曲が鑑賞者４０等によって予め選択されている場合において、当該選択された楽曲に、性別の一致を示す情報が対応付けて格納されている場合には、鑑賞者４０に対する親密度が、当該選択された楽曲に対応する親密度の範囲に含まれている人物の中から、鑑賞者４０と同じ性別を示す人物を検出する。そして、選択部２７０は、画像格納部２００に格納されている複数の画像の中から、検出した人物が含まれる画像を選択する。

なお、楽曲格納部２６０は、本図において楽曲７２０として示す場合のように、少なくとも一部の楽曲において、性別の一致または不一致を示す情報を格納しなくともよい。この場合、選択部２７０は、当該楽曲については、それぞれの人物及び鑑賞者４０の性別に基づくことなく、画像及び楽曲の選択を行ってよい。

画像に含まれるそれぞれの人物と鑑賞者４０との間の親密度に基づくのみでは、それぞれの人物と鑑賞者４０との間の関係を正確に認識できない場合がある。例えば、ある人物と鑑賞者４０との間の親密度が非常に高い場合であっても、それぞれが、非常に仲の良い同性の親友であるのか、或いは恋人同士であるのかを判別することは困難である。このため、親密度に基づくのみでは、スライドショーとして表示する画像と、当該スライドショーのＢＧＭとして演奏する楽曲とを、精度よく整合させることができない場合がある。しかし、本発明の実施形態に係る電子アルバム表示システム１０によれば、それぞれの画像に含まれる人物及び鑑賞者４０の性別と、楽曲のそれぞれに対応付けられた、性別が一致するか否かを示す情報とに基づいて、スライドショーとして表示する画像と、ＢＧＭとして演奏する楽曲とを選択することができる。これにより、画像と楽曲とがより高い精度で整合している、より満足度の高いスライドショーを鑑賞者４０に提供することができる。

なお、楽曲格納部２６０は、性別の一致を示す情報を楽曲に対応付けて格納している場合において、更に、当該一致する性別が男性であるか女性であるかを示す情報を格納していてもよい。

また、楽曲格納部２６０は、複数の楽曲のそれぞれに対応付けて、当該楽曲について予め定められた、年齢差を示す情報を更に格納していてよい。例えば、鑑賞者４０等の利用者は、楽曲が、同年代の友人同士で聴くことに適していると判断した場合には、当該楽曲が、家族で聴くことに適していると判断した場合に比べて、より小さい年齢差を示す情報を入力して、当該楽曲に対応付けて楽曲格納部２６０に格納させてよい。そして、この場合、人物認識部２２０は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる複数の人物のそれぞれにおける年齢を更に認識する。例えば、人物認識部２２０は、画像に含まれる人物の顔を示す部分画像から、人物の加齢に応じて変化する特徴を検出することにより、当該人物の大凡の年齢を認識してよい。また、例えば、人物認識部２２０は、画像に含まれる人物の、他の人物に対する相対的な大きさに基づいて、当該人物が大人であるか否かを認識することにより、当該人物の大凡の年齢を認識してもよい。また、例えば、人物認識部２２０は、鑑賞者４０等の利用者によってそれぞれの人物について予め設定され、顔画像データベース２１０に格納された、当該人物の年齢や生年月日を示す情報に基づいて、それぞれの人物の年齢を認識してもよい。また、人物認識部２２０と同様にして、鑑賞者識別部２５０は、撮像部２４０が撮像した鑑賞者４０の顔画像に基づいて、鑑賞者４０の年齢を認識する。

そして、選択部２７０は、画像格納部２００に格納されている複数の画像のそれぞれに含まれる人物と鑑賞者４０との年齢差、及び楽曲格納部２６０に格納されている複数の楽曲のそれぞれに対応付けられた年齢差を示す情報に更に基づいて、当該複数の画像の中の少なくとも一部の画像と、当該複数の楽曲の中の少なくとも一部の楽曲との組み合わせを選択する。例えば、選択部２７０は、表示すべき画像が鑑賞者４０に等によって予め選択されている場合において、当該選択された画像に含まれる人物と鑑賞者４０との間の親密度を範囲に含む楽曲の中から、当該人物の年齢と鑑賞者４０の年齢との差が、楽曲に対応付けられた年齢差より小さい楽曲を選択する。また、例えば、選択部２７０は、演奏すべき楽曲が鑑賞者４０等によって予め選択されている場合において、画像格納部２００に格納されている複数の画像の少なくとも一部に含まれている人物から、鑑賞者４０の年齢に対して、当該選択された楽曲に対応付けられている年齢差よりも小さい年齢差を示す年齢として認識された人物を検出する。そして、選択部２７０は、画像格納部２００に格納されている複数の画像の中から、検出した人物が含まれる画像を選択する。

画像に含まれるそれぞれの人物と鑑賞者４０との間の親密度に基づくのみでは、それぞれの人物と鑑賞者４０との間の関係を正確に認識できない場合がある。例えば、ある人物と鑑賞者４０との間の親密度が非常に高い場合であっても、それぞれが、非常に仲の良い同年代の親友であるのか、親子であるのかを判別することは困難である。このため、親密度に基づくのみでは、スライドショーとして表示する画像と、当該スライドショーのＢＧＭとして演奏する楽曲とを、精度よく整合させることができない場合がある。しかし、本発明の実施形態に係る電子アルバム表示システム１０によれば、それぞれの画像に含まれる人物と鑑賞者４０との間の年齢差、及び楽曲のそれぞれに対応付けられた年齢差に基づいて、スライドショーとして表示する画像と、ＢＧＭとして演奏する楽曲とを選択することができる。これにより、画像と楽曲とがより高い精度で整合している、より満足度の高いスライドショーを鑑賞者４０に提供することができる。

なお、楽曲格納部２６０は、更に、複数の楽曲のそれぞれについて、期間を示す情報や、地域を示す情報を格納していてもよい。楽曲格納部２６０が期間を示す情報を格納している場合、選択部２７０は、画像格納部２００に格納されている画像と、当該画像の撮像日時を当該期間に含む楽曲との組み合わせを選択する。ここで、期間とは、例えば、任意の２つの時点をそれぞれ端点として定められた期間であってよく、また、「正月」や「夏」といった、特定の月、日、或いは季節を示す期間であってもよい。また、楽曲格納部２６０が地域を示す情報を格納している場合、選択部２７０は、画像格納部２００に格納されている画像と、当該画像の撮像地点を当該地域に含む楽曲との組み合わせを選択する。ここで、地域とは、例えば、「東京」や「日本」といった、地図上の地域であってよく、また、「海」や「山」といった、地域の種類を示す情報であってもよい。

図８は、本発明の実施形態に係る電子アルバム表示システム１０を用いた電子アルバムの表示方法における処理の流れの第１の例を示すフローチャートである。本例においては、選択部２７０が、図７において説明した第１の方法を用いる場合、つまり、鑑賞者４０等の利用者が、スライドショーとして表示する画像を予め選択している場合について説明する。まず、人物認識部２２０は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる複数の人物を、顔画像データベース２１０に格納されている複数の人物の顔画像に基づいて認識する（Ｓ１０００）。続いて、親密度算出部２３０は、人物の認識結果に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する（Ｓ１０１０）。続いて、撮像部２４０は、鑑賞者４０の顔画像を撮像する（Ｓ１０２０）。続いて、鑑賞者識別部２５０は、撮像部２４０により撮像された鑑賞者４０の顔画像と、顔画像データベース２１０に格納されている複数の人物の顔画像とに基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物から、鑑賞者４０である人物を識別する（Ｓ１０３０）。ここで、電子アルバム表示システム１０は、鑑賞者識別部２５０が、鑑賞者４０である人物を識別したか否かを判定する（Ｓ１０４０）。鑑賞者４０である人物が識別された場合（Ｓ１０４０：Ｙｅｓ）、選択部２７０は、図７において説明したように、予め選択された画像に基づいて、演奏されるべき楽曲を選択する（Ｓ１０５０）。続いて、表示演奏部３０は、予め選択された画像を表示する（Ｓ１０６０）。そして、表示演奏部３０は、選択された楽曲を演奏する（Ｓ１０７０）。

図９は、本発明の実施形態に係る電子アルバム表示システム１０を用いた電子アルバムの表示方法における処理の流れの第２の例を示すフローチャートである。本例においては、選択部２７０が、図７において説明した第２の方法を用いる場合、つまり、鑑賞者４０等の利用者が、スライドショーのＢＧＭとして演奏する楽曲を予め選択している場合について説明する。まず、人物認識部２２０は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる複数の人物を、顔画像データベース２１０に格納されている複数の人物の顔画像に基づいて認識する（Ｓ１１００）。続いて、親密度算出部２３０は、人物の認識結果に基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する（Ｓ１１１０）。続いて、撮像部２４０は、鑑賞者４０の顔画像を撮像する（Ｓ１１２０）。続いて、鑑賞者識別部２５０は、撮像部２４０により撮像された鑑賞者４０の顔画像と、顔画像データベース２１０に格納されている複数の人物の顔画像とに基づいて、複数の画像の中の、少なくとも一部の画像に含まれる人物から、鑑賞者４０である人物を識別する（Ｓ１１３０）。ここで、電子アルバム表示システム１０は、鑑賞者識別部２５０が、鑑賞者４０である人物を識別したか否かを判定する（Ｓ１１４０）。鑑賞者４０である人物が識別された場合（Ｓ１１４０：Ｙｅｓ）、選択部２７０は、図７において説明したように、予め選択された楽曲に基づいて、表示されるべき画像を選択する（Ｓ１１５０）。続いて、表示演奏部３０は、選択された画像を表示する（Ｓ１１６０）。そして、表示演奏部３０は、予め選択された楽曲を演奏する（Ｓ１１７０）。

図１０は、本発明の実施形態における第１の変形例に係る親密度算出部２３０の機能構成の一例を示すブロック図である。本発明の実施形態の第１の変形例において、親密度算出部２３０は、画像内親密度算出部２３２、及び全体親密度算出部２３４を有する。画像内親密度算出部２３２は、画像格納部２００に格納されている複数の画像のそれぞれについて人物認識部２２０により認識された人物の数に基づいて、当該画像に含まれる人物の間の親密度である画像内親密度を算出する。そして、画像内親密度算出部２３２は、算出したそれぞれの画像における画像内親密度を全体親密度算出部２３４に出力する。全体親密度算出部２３４は、画像格納部２００に格納されている複数の画像のそれぞれについて画像内親密度算出部２３２により算出された画像内親密度に基づいて、当該複数の画像の中の少なくとも一部の画像に含まれる人物のそれぞれの間における親密度である全体親密度を算出する。そして、全体親密度算出部２３４は、算出した全体親密度を選択部２７０に出力する。

また、図１に示した楽曲格納部２６０は、複数の楽曲のそれぞれを、全体親密度の範囲に対応付けて格納している。そして、図１に示した選択部２７０は、画像格納部２００に格納されている複数の画像のそれぞれに含まれる人物と鑑賞者４０との間の全体親密度、及び楽曲格納部２６０に格納されている複数の楽曲のそれぞれに対応付けられた全体親密度の範囲に基づいて、当該複数の画像の中の少なくとも一部の画像と、当該複数の楽曲の中の少なくとも一部の楽曲との組み合わせを選択する。

本発明の実施形態における第１の変形例に係る電子アルバム表示システム１０によれば、画像に含まれる人物の数に基づいて、当該画像に含まれる人物間の親密度である画像内親密度を算出することができると共に、画像格納部２００に格納されている複数の画像のそれぞれにおける画像内親密度に基づいて、当該複数の画像全体における人物間の親密度である全体親密度を算出することができる。そして、算出した全体親密度と、楽曲に対応付けられた全体親密度の範囲とに基づいて、画像と楽曲との組み合わせを選択して、ＢＧＭ付きのスライドショーを表示することができる。これにより、鑑賞者４０は、表示される画像に合わせて、ＢＧＭとして演奏される楽曲を手動で選択しなくとも、画像に含まれる人物と自分自身との間の親密さに適した楽曲がＢＧＭとして演奏される、満足度の高いスライドショーを鑑賞することができる。

図１１は、本発明の実施形態における第１の変形例に係る画像内親密度算出部２３２による画像内親密度の算出結果の一例を示す。画像内親密度算出部２３２は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる人物の間の親密度である画像内親密度を算出する。例えば、画像内親密度算出部２３２は、複数の画像のそれぞれについて人物認識部２２０により認識された人物の数が少ない程、当該画像に含まれる人物の間の画像内親密度をより高く算出してよい。具体的には、画像内親密度算出部２３２は、それぞれの画像に含まれる人物の間の画像内親密度を、当該画像について認識された人物の数の逆数として算出してよい。なお、画像内親密度算出部２３２は、画像について認識された人物の数が１以下である場合には、当該画像において画像内親密度を算出しなくともよい。

画像に含まれている人物の数が少ない程、当該画像に含まれる人物の間の関係はよりプライベートなものであり、それぞれの人物はより親密である場合が多い。従って、画像に含まれる人物が少ない程、より高い画像内親密度を算出することにより、画像内における人物間の親密度を、高い精度で算出することができる。

図１２は、本発明の実施形態における第１の変形例に係る全体親密度算出部２３４による全体親密度の算出結果の一例を示す。全体親密度算出部２３４は、画像格納部２００に格納されている複数の画像のそれぞれについて算出された画像内親密度に基づいて、当該複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度である全体親密度を算出する。例えば、全体親密度算出部２３４は、本図に示すように、人物識別子が０である人物と、人物識別子が１である人物との間の全体親密度を、９．８として算出する。ここで、全体親密度算出部２３４は、当該複数の画像の中の、少なくとも一部の画像に含まれる第１の人物と第２の人物との間の全体親密度を、複数の画像のうち、当該第１の人物と当該第２の人物との双方が含まれる画像の数がより多い程、より高く算出してよい。例えば、全体親密度算出部２３４は、当該第１の人物と当該第２の人物との間の全体親密度を、複数の画像のうち、当該第１の人物と当該第２の人物との双方が含まれる画像のそれぞれについて算出された、当該１の人物と当該第２の人物との間の画像内親密度のそれぞれを合計することにより算出してよい。

二人の人物のそれぞれが同一の画像に含まれる頻度が高い程、当該二人の人物の間の関係はより親密である場合が多い。従って、画像内親密度を合計して全体親密度を算出することにより、画像格納部２００に格納されている複数の画像に含まれる人物の間の親密度を、高い精度で算出することができる。

図１３は、本発明の実施形態における第２の変形例に係る親密度算出部２３０の機能構成の一例を示すブロック図である。本発明の実施形態の第２の変形例において、親密度算出部２３０は、画像内親密度算出部２３６、及び全体親密度算出部２３８を有する。画像内親密度算出部２３６は、画像格納部２００に格納されている複数の画像のそれぞれについての人物認識部２２０による認識結果に基づいて、当該画像に含まれる人物のそれぞれを示す画像の間の距離を算出する。そして、画像内親密度算出部２３６は、複数の画像のそれぞれについて、当該画像に含まれる人物の間の親密度である画像内親密度を、当該人物のそれぞれを示す画像の間の距離に基づいて算出する。具体的には、画像内親密度算出部２３６は、それぞれの画像に含まれる人物の間の画像内親密度を、当該人物のそれぞれを示す画像の間の距離が小さい程、より高い値として算出する。そして、画像内親密度算出部２３６は、算出したそれぞれの画像における、それぞれの人物の間の画像内親密度を、全体親密度算出部２３８に出力する。全体親密度算出部２３８は、画像格納部２００に格納されている複数の画像のそれぞれについて画像内親密度算出部２３６により算出された画像内親密度に基づいて、当該複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度である全体親密度を算出する。そして、全体親密度算出部２３８は、算出した全体親密度を選択部２７０に出力する。

また、図１に示した楽曲格納部２６０は、複数の楽曲のそれぞれを、全体親密度の範囲に対応付けて格納している。そして、図１に示した選択部２７０は、画像格納部２００に格納されている複数の画像のそれぞれに含まれる人物と鑑賞者４０との間の全体親密度、及び楽曲格納部２６０に格納されている複数の楽曲のそれぞれに対応付けられた全体親密度の範囲に基づいて、当該複数の画像の中の少なくとも一部の画像と、当該複数の楽曲の中の少なくとも一部の楽曲とを組み合わせを選択する。

二人の人物が非常に親密である場合、当該二人の人物が近接した状態で画像が撮像されることが多い。一方、二人の人物があまり親密ではない場合、当該二人の人物が近接した状態で画像が撮像されることは多くない。このように、画像を撮像する場合における人物間の距離は、それぞれの人物の間における親密さに関連していると言える。ここで、本発明の実施形態における第２の変形例に係る電子アルバム表示システム１０によれば、画像に含まれる人物間の距離に基づいて、当該画像に含まれる人物間の親密度である画像内親密度を算出することができると共に、画像格納部２００に格納されている複数の画像のそれぞれにおける画像内親密度に基づいて、当該複数の画像全体における人物間の親密度である全体親密度を算出することができる。そして、算出した全体親密度と、楽曲に対応付けられた全体親密度の範囲とに基づいて、画像と楽曲との組み合わせを選択して、ＢＧＭ付きのスライドショーを表示することができる。これにより、鑑賞者４０は、表示される画像に合わせて、ＢＧＭとして演奏される楽曲を手動で選択しなくとも、画像に含まれる人物と自分自身との間の親密さに適した楽曲がＢＧＭとして演奏される、満足度の高いスライドショーを鑑賞することができる。

図１４は、本発明の実施形態における第２の変形例に係る人物認識部２２０による人物の認識結果の一例を示す。例えば、人物認識部２２０は、画像格納部２００に格納されている複数の画像のそれぞれについて、輪郭抽出処理や色分布分析処理等の公知の画像処理を行うことにより、当該画像に含まれる複数の被写体を検出する。そして、人物認識部２２０は、検出したそれぞれの被写体を示す画像から、人物の顔に固有の特徴量を検出することにより、当該被写体が人物である場合に、当該被写体を示す画像から人物の顔を示す部分画像を検出する。そして、人物認識部２２０は、検出した人物の顔を示す部分画像を、図４に示した顔画像データベース２１０に格納されている複数の顔画像のそれぞれと比較する。そして、人物認識部２２０は、検出した人物の顔を示す部分画像が、顔画像データベース２１０に格納されている顔画像に対して、予め定められた基準値以上の類似度で類似している場合に、検出した被写体が、顔画像データベース２１０において当該顔画像に対応付けられている人物であると認識し、当該人物を示す人物識別子を検出する。このようにして、人物認識部２２０は、図１４に示すように、複数の画像のそれぞれについて、当該画像に含まれる複数の人物を示す複数の人物識別子を検出する。

また、人物認識部２２０は、複数の画像のそれぞれについて、当該画像において検出した人物または当該人物の顔を示す部分画像の、当該画像内における位置を示す位置情報を、画像内親密度算出部２３６に出力する。ここで、位置情報とは、例えば、それぞれの画像内における、人物または当該人物の顔を示す部分画像の、左上隅及び右下隅の画素の座標値を含んでいてよい。

図１５は、本発明の実施形態における第２の変形例に係る画像内親密度算出部２３６による画像内親密度の算出結果の一例を示す。画像内親密度算出部２３６は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる人物の間の親密度である画像内親密度を算出する。具体的には、画像内親密度算出部２３６は、複数の画像のそれぞれについて、当該画像に含まれる人物の間の画像内親密度を、当該人物のそれぞれを示す画像の間の距離が小さい程、より高い値として算出してよい。例えば、画像内親密度算出部２３６は、それぞれの画像に含まれる人物の間の画像内親密度が、当該人物のそれぞれを示す画像の間の距離に反比例するべく、画像内親密度を算出してよい。また、画像内親密度算出部２３６は、複数の画像のそれぞれについて、当該画像に含まれる人物の間の画像内親密度を、当該人物のそれぞれを示す画像に含まれる顔画像の間の距離が小さい程、より高い値として算出してもよい。なお、画像内親密度算出部２３６は、人物のそれぞれを示す画像の間の距離、または人物のそれぞれを示す画像に含まれる顔画像の間の距離を、人物認識部２２０から受け取った、複数の画像のそれぞれにおける人物または当該人物の顔を示す部分画像の、当該画像内における位置を示す位置情報や、当該画像内における大きさを表す面積情報に基づいて算出してよい。

二人の人物の顔が近接して画像が撮像されている場合、当該二人の人物は非常に親しい場合が多い。一方、二人の人物があまり親密ではない場合、当該二人の人物の顔が近接した状態で画像が撮像されることは多くない。ここで、本発明の実施形態における第２の変形例に係る電子アルバム表示システム１０によれば、画像に含まれる人物の顔画像の間の距離に基づいて画像内親密度を算出することができるので、画像格納部２００に格納されている画像全体における人物間の親密度である全体親密度を高い精度で算出することができる。

また、画像内親密度算出部２３６は、画像格納部２００に格納されている複数の画像のそれぞれについて、当該画像に含まれる人物のそれぞれを示す画像の間の距離が予め定められた基準値以上である場合には、当該人物の間の画像内親密度を、予め定められた標準値として算出してよい。ここで、予め定められた基準値及び予め定められた標準値とは、例えば利用者等によって予め指定された値であってよい。

二人の人物の間の距離と、当該二人の人物の間の親密度とは関連するが、何れの距離においても、常に、距離がより近い程、親密度がより高いとは限らない。例えば、二人の人物が１０メートル離れている場合と、１５メートル離れている場合とでは、当該二人の人物の間の親密度に差はないと見なせる場合がある。ここで、本発明の実施形態における第２の変形例に係る電子アルバム表示システム１０によれば、人物の間の距離が予め定められた基準値以上である場合には、当該人物の間の画像内親密度を予め定められた標準的な親密度として算出することができるので、画像格納部２００に格納されている画像全体における人物間の親密度である全体親密度を高い精度で算出することができる。

図１６は、本発明の実施形態における第２の変形例に係る全体親密度算出部２３８による全体親密度の算出結果の一例を示す。全体親密度算出部２３８は、画像格納部２００に格納されている複数の画像のそれぞれについて算出された、当該画像内に含まれるそれぞれの人物の間の画像内親密度に基づいて、当該複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度である全体親密度を算出する。例えば、全体親密度算出部２３８は、本図に示すように、人物識別子が０である人物と、人物識別子が１である人物との間の全体親密度を、１２０として算出する。ここで、全体親密度算出部２３８は、当該複数の画像の中の、少なくとも一部の画像に含まれる第１の人物と第２の人物との間の全体親密度を、複数の画像のうち、当該第１の人物と当該第２の人物との双方が含まれる画像の数がより多い程、より高く算出してよい。例えば、全体親密度算出部２３８は、当該第１の人物と当該第２の人物との間の全体親密度を、複数の画像のうち、当該第１の人物と当該第２の人物との双方が含まれる画像のそれぞれについて算出された、当該１の人物と当該第２の人物との間の画像内親密度のそれぞれを合計することにより算出してよい。

二人の人物のそれぞれが同一の画像に含まれる頻度が高い程、当該二人の人物の間の関係はより親密である場合が多い。従って、画像内親密度を合計して全体親密度を算出することにより、画像格納部２００に格納されている画像に含まれる人物の間の親密度を、高い精度で算出することができる。

図１７は、本発明の実施形態に係るコンピュータ１５００のハードウェア構成の一例を示すブロック図である。本発明の実施形態に係るコンピュータ１５００は、ホスト・コントローラ１５８２により相互に接続されるＣＰＵ１５０５、ＲＡＭ１５２０、グラフィック・コントローラ１５７５、及び表示装置１５８０を有するＣＰＵ周辺部と、入出力コントローラ１５８４によりホスト・コントローラ１５８２に接続される通信インターフェイス１５３０、ハードディスクドライブ１５４０、及びＣＤ−ＲＯＭドライブ１５６０を有する入出力部と、入出力コントローラ１５８４に接続されるＲＯＭ１５１０、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０を有するレガシー入出力部とを備える。

ホスト・コントローラ１５８２は、ＲＡＭ１５２０と、高い転送レートでＲＡＭ１５２０をアクセスするＣＰＵ１５０５及びグラフィック・コントローラ１５７５とを接続する。ＣＰＵ１５０５は、ＲＯＭ１５１０及びＲＡＭ１５２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等がＲＡＭ１５２０内に設けたフレーム・バッファ上に生成する画像データを取得し、表示装置１５８０上に表示させる。これに代えて、グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。

入出力コントローラ１５８４は、ホスト・コントローラ１５８２と、比較的高速な入出力装置である通信インターフェイス１５３０、ハードディスクドライブ１５４０、ＣＤ−ＲＯＭドライブ１５６０を接続する。通信インターフェイス１５３０は、ネットワークを介して他の装置と通信する。ハードディスクドライブ１５４０は、コンピュータ１５００内のＣＰＵ１５０５が使用するプログラム及びデータを格納する。ＣＤ−ＲＯＭドライブ１５６０は、ＣＤ−ＲＯＭ１５９５からプログラム又はデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０に提供する。

また、入出力コントローラ１５８４には、ＲＯＭ１５１０と、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０の比較的低速な入出力装置とが接続される。ＲＯＭ１５１０は、コンピュータ１５００が起動時に実行するブート・プログラムや、コンピュータ１５００のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ１５５０は、フレキシブルディスク１５９０からプログラム又はデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０に提供する。入出力チップ１５７０は、フレキシブルディスク・ドライブ１５５０や、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。

ＲＡＭ１５２０を介してハードディスクドライブ１５４０に提供される電子アルバム表示プログラムは、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５、又はＩＣカード等の記録媒体に格納されて利用者によって提供される。電子アルバム表示プログラムは、記録媒体から読み出され、ＲＡＭ１５２０を介してコンピュータ１５００内のハードディスクドライブ１５４０にインストールされ、ＣＰＵ１５０５において実行される。コンピュータ１５００にインストールされて実行される電子アルバム表示プログラムは、ＣＰＵ１５０５等に働きかけて、コンピュータ１５００を、図１から図１６にかけて説明した電子アルバム表示システム１０として機能させる。

以上に示したプログラムは、外部の記憶媒体に格納されてもよい。記憶媒体としては、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５の他に、ＤＶＤやＰＤ等の光学記録媒体、ＭＤ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスク又はＲＡＭ等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムをコンピュータ１５００に提供してもよい。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

本発明の実施形態に係る電子アルバム表示システム１０の一例を示す図である。 本発明の実施形態に係る電子アルバム表示システム１０の機能構成の一例を示すブロック図である。 本発明の実施形態に係る画像格納部２００の一例を示す図である。 本発明の実施形態に係る顔画像データベース２１０の一例を示す図である。 本発明の実施形態に係る人物認識部２２０による人物の認識結果の一例を示す図である。 本発明の実施形態に係る親密度算出部２３０による親密度の算出結果の一例を示す図である。 本発明の実施形態に係る楽曲格納部２６０の一例を示す図である。 本発明の実施形態に係る電子アルバム表示システム１０を用いた電子アルバムの表示方法における処理の流れの第１の例を示すフローチャートである。 本発明の実施形態に係る電子アルバム表示システム１０を用いた電子アルバムの表示方法における処理の流れの第２の例を示すフローチャートである。 本発明の実施形態における第１の変形例に係る親密度算出部２３０の機能構成の一例を示すブロック図である。 本発明の実施形態における第１の変形例に係る画像内親密度算出部２３２による画像内親密度の算出結果の一例を示す図である。 本発明の実施形態における第１の変形例に係る全体親密度算出部２３４による全体親密度の算出結果の一例を示す図である。 本発明の実施形態における第２の変形例に係る親密度算出部２３０の機能構成の一例を示すブロック図である。 本発明の実施形態における第２の変形例に係る人物認識部２２０による人物の認識結果の一例を示す図である。 本発明の実施形態における第２の変形例に係る画像内親密度算出部２３６による画像内親密度の算出結果の一例を示す図である。 本発明の実施形態における第２の変形例に係る全体親密度算出部２３８による全体親密度の算出結果の一例を示す図である。 本発明の実施形態に係るコンピュータ１５００のハードウェア構成の一例を示すブロック図である。

符号の説明

１０ 電子アルバム表示システム、２０ 電子アルバム再生部、３０ 表示演奏部、４０ 鑑賞者、２００ 画像格納部、２１０ 顔画像データベース、２２０ 人物認識部、２３０ 親密度算出部、２３２ 画像内親密度算出部、２３４ アルバム内親密度算出部、２３６ 画像内親密度算出部、２３８ アルバム内親密度算出部、２４０ 撮像部、２５０ 鑑賞者識別部、２６０ 楽曲格納部、２７０ 選択部

Claims (13)

1. 複数の画像を格納している画像格納部と、
   前記複数の画像のそれぞれについて、当該画像に含まれる複数の人物を認識する人物認識部と、
   前記人物認識部による認識結果に基づいて、前記複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する親密度算出部と、
   複数の楽曲のそれぞれを、前記親密度の範囲に対応付けて格納している楽曲格納部と、
   前記複数の画像のそれぞれに含まれる人物と鑑賞者との間の前記親密度、及び前記複数の楽曲のそれぞれに対応付けられた前記親密度の範囲に基づいて、前記複数の画像の中の少なくとも一部の画像、及び前記複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する選択部と、
   前記選択部によって選択された画像を表示すると共に、前記選択部によって選択された楽曲を演奏する表示演奏部と
   を備える電子アルバム表示システム。
2. 前記選択部は、前記複数の画像の中の、少なくとも一部の画像が予め選択されている場合に、前記複数の楽曲のうち、当該選択されている画像のそれぞれに含まれる人物と前記鑑賞者との間の前記親密度を含む前記親密度の範囲に対応する楽曲を選択する請求項１に記載の電子アルバム表示システム。
3. 前記選択部は、前記複数の楽曲の中の、少なくとも一部の楽曲が予め選択されている場合に、前記複数の画像のうち、画像に含まれる人物と前記鑑賞者との間の前記親密度が、当該選択されている楽曲に対応する前記親密度の範囲に含まれている画像を選択する請求項１に記載の電子アルバム表示システム。
4. 前記親密度算出部は、前記複数の画像の中の、少なくとも一部の画像に含まれる、第１の人物と第２の人物との間の前記親密度を、前記複数の画像のうち、当該第１の人物と当該第２の人物との双方を含む画像の数がより多い場合に、より高い前記親密度として算出する請求項１に記載の電子アルバム表示システム。
5. 前記親密度算出部は、
   前記複数の画像のそれぞれについて前記人物認識部により認識された人物の数に基づいて、当該画像に含まれる人物の間の前記親密度である画像内親密度を算出する画像内親密度算出部と、
   前記複数の画像のそれぞれについて算出された前記画像内親密度に基づいて、前記複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における前記親密度である全体親密度を算出する全体親密度算出部と
   を有し、
   前記楽曲格納部は、前記複数の楽曲のそれぞれを、前記全体親密度の範囲に対応付けて格納しており、
   前記選択部は、前記複数の画像のそれぞれに含まれる人物と前記鑑賞者との間の前記全体親密度、及び前記複数の楽曲のそれぞれに対応付けられた前記全体親密度の範囲に基づいて、前記複数の画像の中の少なくとも一部の画像、及び前記複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する
   請求項１に記載の電子アルバム表示システム。
6. 前記画像内親密度算出部は、前記複数の画像のそれぞれについて前記人物認識部により認識された人物の数が少ない程、当該画像に含まれる人物の間の前記画像内親密度をより高く算出する請求項５に記載の電子アルバム表示システム。
7. 前記親密度算出部は、
   前記複数の画像のそれぞれについての前記人物認識部による認識結果に基づいて、当該画像に含まれる人物の間の前記親密度である画像内親密度を、当該人物のそれぞれを示す画像の間の距離が小さい程、より高い値として算出する画像内親密度算出部と、
   前記複数の画像のそれぞれについて算出された前記画像内親密度に基づいて、前記複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における前記親密度である全体親密度を算出する全体親密度算出部と
   を有し、
   前記楽曲格納部は、前記複数の楽曲のそれぞれを、前記全体親密度の範囲に対応付けて格納しており、
   前記選択部は、前記複数の画像のそれぞれに含まれる人物と前記鑑賞者との間の前記全体親密度、及び前記複数の楽曲のそれぞれに対応付けられた前記全体親密度の範囲に基づいて、前記複数の画像の中の少なくとも一部の画像、及び前記複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する
   請求項１に記載の電子アルバム表示システム。
8. 前記画像内親密度算出部は、前記複数の画像のそれぞれについて、当該画像に含まれる人物の間の前記画像内親密度を、当該人物のそれぞれを示す画像に含まれる顔画像の間の距離が小さい程、より高い値として算出する請求項７に記載の電子アルバム表示システム。
9. 前記人物認識部は、前記複数の画像のそれぞれについて、当該画像に含まれる複数の人物のそれぞれにおける性別を更に認識し、
   前記楽曲格納部は、前記複数の楽曲のそれぞれに対応付けて、当該楽曲について予め定められた、性別の一致または不一致を示す情報を更に格納しており、
   前記選択部は、前記複数の画像のそれぞれに含まれる人物の性別と前記鑑賞者の性別とが一致するか否か、及び前記複数の楽曲のそれぞれに対応付けられた性別の一致または不一致を示す情報に更に基づいて、前記複数の画像の中の少なくとも一部の画像、及び前記複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する
   請求項１に記載の電子アルバム表示システム。
10. 前記人物認識部は、前記複数の画像のそれぞれについて、当該画像に含まれる複数の人物のそれぞれにおける年齢を更に認識し、
    前記楽曲格納部は、前記複数の楽曲のそれぞれに対応付けて、当該楽曲について予め定められた、年齢差を示す情報を更に格納しており、
    前記選択部は、前記複数の画像のそれぞれに含まれる人物と前記鑑賞者との年齢差、及び前記複数の楽曲のそれぞれに対応付けられた年齢差を示す情報に更に基づいて、前記複数の画像の中の少なくとも一部の画像、及び前記複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する
    請求項１に記載の電子アルバム表示システム。
11. 前記鑑賞者の顔画像を撮像する撮像部と、
    前記撮像部により撮像された顔画像に基づいて、前記複数の画像の中の、少なくとも一部の画像に含まれる人物から、前記鑑賞者である人物を識別する鑑賞者識別部と
    を更に備える請求項１に記載の電子アルバム表示システム。
12. 画像格納部が格納している複数の画像のそれぞれについて、当該画像に含まれる複数の人物を認識する人物認識段階と、
    前記人物認識段階における認識結果に基づいて、前記複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する親密度算出段階と、
    前記複数の画像のそれぞれに含まれる人物と鑑賞者との間の前記親密度、及び楽曲格納部が格納している複数の楽曲のそれぞれに対応付けられた前記親密度の範囲に基づいて、前記複数の画像の中の少なくとも一部の画像、及び前記複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する選択段階と、
    前記選択段階において選択された画像を表示すると共に、前記選択段階において選択された楽曲を演奏する表示演奏段階と
    を備える電子アルバム表示方法。
13. 電子アルバム表示システムとしてコンピュータを機能させる電子アルバム表示プログラムであって、
    前記コンピュータを、
    複数の画像を格納している画像格納部と、
    前記複数の画像のそれぞれについて、当該画像に含まれる複数の人物を認識する人物認識部と、
    前記人物認識部による認識結果に基づいて、前記複数の画像の中の、少なくとも一部の画像に含まれる人物のそれぞれの間における親密度を算出する親密度算出部と、
    複数の楽曲のそれぞれを、前記親密度の範囲に対応付けて格納している楽曲格納部と、
    前記複数の画像のそれぞれに含まれる人物と鑑賞者との間の前記親密度、及び前記複数の楽曲のそれぞれに対応付けられた前記親密度の範囲に基づいて、前記複数の画像の中の少なくとも一部の画像、及び前記複数の楽曲の中の少なくとも一部の楽曲の組み合わせを選択する選択部と、
    前記選択部によって選択された画像を表示すると共に、前記選択部によって選択された楽曲を演奏する表示演奏部と
    を備える電子アルバム表示システムとして機能させる電子アルバム表示プログラム。

Images