JP6976531B2 - アルバム作成支援装置およびアルバム作成支援システム - Google Patents

Description

本発明は、アルバム作成を支援するアルバム作成支援システムに関し、特にＡＩ顔認証を用いたアルバム作成の支援に関する。

スマートフォンに代表される多機能型携帯電話機、デジタルカメラ等の普及に伴い、利用者自身は、これらの端末で撮像された画像データを整理し、編集し、アルバムを作成し、作成したアルバムを家族、友人等の間で共有したい、という需要が高まりつつある。

例えば、特許文献１のアルバム作成装置は、顔が認識された画像を自動的に抽出することで動画から動画アルバムや静止画アルバムを自動的に作成し、アルバムの編集作業を削減することを可能にしている。特許文献２のアルバム作成装置は、顔画像の検出数が最も多い第１画像をページ内の中央領域に配置し、第１画像以外の第２画像をページ内の第１画像を取り囲む周辺領域に配置することで、アルバム編集の作業量を減らしユーザーの利便性を図っている。また、特許文献３には、アルバム編集において被写体の目立ち度や登場回数を平均化する技術が開示され、特許文献４には、ユーザーにより選択された顔画像とメモリから生成された顔画像とを比較し、類似度が高い順に顔画像を表示する技術が開示されている。

特開２００９−８８６８７号公報 特開２０１７−１０２５５０号公報 特許第６５１５９７７号公報 特許５３８８３９９号公報

近年、保育業界を取り巻く環境は、少子化による園児の減少に伴い保育施設間の園児獲得競争激化を招き、他園との差別化が求められる、など厳しさを増している。さらに、写真や映像も加えた園児の日々の記録を保護者と共有する仕組みの１つとして、アルバム作成が求められている。

アルバム作成に際して、幼稚園や保育園は、各種イベントで撮像した写真を保護者に公開するために、例えば、園内にプリント写真を掲示したり、あるいはデジタル写真をサーバーにアップロードし、保護者は、これらの写真を閲覧し、その中から自分の子供が写っている写真を探さなければならない。イベント数や園児の数によっては公開される写真の数が膨大になり、そこから写真を選定するには非常に手間がかかってしまう。また、園の職員は、卒園アルバムをはじめとするオフィシャルアルバムの作成に際して、全ての園児の写真をバランス良く選定する作業等に多くの手間を要している。

本発明は、このような従来の課題を解決するものであり、顔認証を利用して撮像画像の選択を容易にしたアルバム作成支援システムを提供することを目的とする。

本発明に係るアルバム作成支援装置は、顔画像を含む参照画像を記憶する記憶手段と、撮像カメラで撮像された撮像画像を取得する取得手段と、前記参照画像と前記撮像画像とを比較し、前記撮像画像内の認識対象の顔画像の類似度を算出する算出手段と、閾値を決定する決定手段と、前記閾値以上の類似度をもつ撮像画像を選択する選択手段と、前記選択された撮像画像のアルバム編集を可能とする編集手段とを有する。

ある実施態様では、前記選択手段は、指定された参照画像の類似度が前記閾値以上の撮像画像を選択する。ある実施態様では、アルバム作成支援装置は、ユーザー入力手段を含み、前記決定手段は、前記入力手段からの入力に基づき前記閾値を決定する。ある実施態様では、アルバム作成支援装置は、表示手段を含み、前記表示手段は、前記選択手段により選択された撮像画像と前記閾値を変更するための閾値変更入力とを表示し、前記決定手段は、前記閾値変更入力に基づき閾値を決定し、前記選択手段は、前記閾値が変更されたとき撮像画像を再選択する。ある実施態様では、前記表示手段は、選択された撮像画像の数を表示する。ある実施態様では、前記決定手段は、前記選択手段により選択された撮像画像の数に基づき、前記選択された撮像画像の数が上限値を超えないように前記閾値を調整する。ある実施態様では、前記決定手段はさらに、前記選択された撮像画像の数が下限値を下回らないように前記閾値を調整する。ある実施態様では、前記決定手段は、前記選択手段により選択された撮像画像の数に基づき、前記選択された撮像画像の数がアルバムのページ数の上限値を超えないように前記閾値を調整する。ある実施態様では、前記決定手段はさらに、前記選択された撮像画像の数が下限値を下回らないように前記閾値を調整する。ある実施態様では、前記決定手段は、前記撮像画像に関連するイベント数に応じて閾値を調整する。ある実施態様では、前記決定手段は、前記参照画像の数に応じて閾値を調整する。

本発明に係るアルバム作成支援システムは、上記記載のアルバム作成支援装置と、前記アルバム作成支援装置とネットワークを介して接続された少なくとも１つの利用者端末とを含み、前記利用者端末は、前記参照画像および前記撮像画像をアルバム作成支援装置にアップロードする手段と、アルバム作成支援装置にアルバム編集の指示を入力する入力手段とを含む。

本発明によれば、参照画像と撮像画像とを比較し、両者の顔画像の類似度から撮像画像を選択するようにしたので、アルバム編集のための撮像画像の選択の作業効率を向上させることができる。

図１（Ａ）は、本発明の実施例に係るアルバム作成支援装置の内部構成を示すブロック図、図１（Ｂ）は、本実施例のアルバム作成支援機能の構成を示すブロック図である。 本発明の実施例による参照画像を記憶する記憶部のデータ構成例を示す図である。 本発明の実施例による撮像画像を記憶する記憶部のデータ構成例を示す図である。 写真Ｐ１に写された人物の例を示す図である。 写真Ｐ１の類似度算出結果の一例を示す図である。 写真Ｐ１の類似度算出結果の表示例である。 本発明の実施例に係る写真選択部の選択結果の一例を示す図である。 本発明の実施例に係るアルバム作成支援装置の動作を説明するフローである。 図９（Ａ）は、参照識別Ｕ１で選択された写真の表示例を示し、図９（Ｂ）は、ユーザーが閾値を変更したときの選択された写真の表示例を示す。 本発明の第２の実施例に係るアルバム作成支援装置の動作を説明するフローである。 本発明の第３の実施例に係るアルバム作成支援装置の動作を説明するフローである。 図１２（Ａ）は、本発明の第４の実施例に係るアルバム作成支援機能の構成を示し、図１２（Ｂ）は、イベント数と閾値との関係を規定するテーブルである。 図１３（Ａ）は、本発明の第５の実施例に係るアルバム作成支援機能の構成を示し、図１３（Ｂ）は、参照識別の数と閾値との関係を規定するテーブルである。 本発明の第６の実施例に係るアルバム作成支援システムの構成を示す図である。

図１は、本発明の実施例に係るアルバム作成支援装置の構成を示すブロック図である。同図に示すように、本実施例のアルバム作成支援装置１００は、外部インターフェース（Ｉ／Ｆ）１１０、入力部１２０、表示部１３０、参照画像を記憶する記憶部１４０、撮像画像を記憶する記憶部１５０および各部を制御する制御部１６０を含んで構成される。

外部Ｉ／Ｆ１１０は、他の電子機器（例えば、スマートフォンやデジタルカメラ等）との有線または無線による接続を可能にする。さらに外部Ｉ／Ｆ１１０は、有線または無線による通信手段を介してネットワーク上のサーバー等への接続を可能にする。

入力部１２０は、ユーザーからの入力を受け取り、これを制御部１６０へ提供する。入力部１２０は、特に限定されないが、例えば、キーボード、マウス、音声入力モジュール、タッチパネルなどを含む。表示部１３０は、特に限定されないが、例えば、液晶ディスプレイ、有機ＥＬ等を含み、アルバム編集のために写真等を表示する。

記憶部１４０は、顔認証を行うときの基準（比較元）となる参照画像を記憶する。参照画像は、例えば、外部Ｉ／Ｆ１１０を介して他の電子機器（スマートフォン、パーソナルコンピュータ、デジタルカメラ等）から取得することができ、取得された参照画像が記憶部１４０に記憶される。１つの参照画像は、一人の人物に固有の１つまたは複数の顔画像を含む。図２に、記憶部１４０のデータ構成例を示す。参照識別は、参照画像を識別するものであり、この参照画像は、人物に固有の顔画像を含むものである。つまり、参照識別は、ユーザー識別と同義である。図２の例では、参照識別Ｕ１は、ユーザーＵ１の１つまたは複数の顔画像Ｕ１＿１、Ｕ１＿２、・・・、Ｕ１＿ｎを含み、参照識別Ｕ２は、ユーザーＵ２の１つまたは複数の顔画像Ｕ２＿１、Ｕ２＿２、・・・、Ｕ２＿ｎを含み、参照識別Ｕ３は、ユーザーＵ３の１つまたは複数の顔画像を含む。複数の顔画像は、例えば、異なる方向から撮像された顔画像、マスクや帽子を装着した顔画像、明るさの異なる顔画像などを含むことで、顔認証の精度を向上させることが可能である。このように、記憶部１４０には、複数のユーザーＵ１、Ｕ２、・・・、Ｕｎのそれぞれの参照画像が事前に登録される。

記憶部１５０は、参照画像と比較される撮像画像を記憶する。撮像画像は、例えば、外部Ｉ／Ｆ１１０を介して他の電子機器（スマートフォン、パーソナルコンピュータ、デジタルカメラ等）から取得することができ、取得された撮像画像が記憶部１５０に記憶される。

図３に、記憶部１５０のデータ構成例を示す。撮像識別は、撮像画像を識別するものであり、ここでは、１つの撮像画像は、１枚の写真である。１つの撮像画像は、属性情報として、撮像画像を撮像した者の識別（または撮像画像を提供した者の識別）、撮像日時、撮像画像が関連するイベントを含むことができる。図３の例では、撮像識別Ｐ１は、写真Ｐ１と同義であり、写真Ｐ１の属性情報として撮像者識別、撮像日時、イベント、撮像画像の格納先が含まれる。

制御部１６０は、アルバム作成支援装置１００の全体の動作を制御する。制御部１６０は、ハードウエアおよび／またはソフトウエアを用いて構成され、ある態様では、制御部１６０は、マイクロプロセッサ、ＲＯＭ／ＲＡＭを含むマイクロコントローラ、画像処理プロセッサ、ＡＩプロセッサ、ディジタルシグナルプロセッサ（ＤＳＰ）等を含むことができる。

本実施例では、制御部１６０は、図１（Ｂ）に示すように、アルバム作成支援機能２００を含む。アルバム作成支援機能２００は、類似度算出部２１０、写真選択部２２０、閾値決定部２３０およびアルバム編集部２４０を含む。

類似度算出部２１０は、記憶部１５０に記憶された撮像画像と記憶部１４０に記憶された参照画像とを比較し、撮像画像（写真）に写された人物の顔認証を行う。好ましくは、類似度算出部２１０は、ＡＩ(人工知能)技術を活用し、撮像画像に写された人物が参照画像の顔画像に一致する度合すなわち類似度を定量的に算出する。

例えば、撮像画像が写真Ｐ１であると仮定し、写真Ｐ１には、図４に示すように、複数の人物ＯＢ１〜ＯＢ７が写されている。類似度算出部２１０は、写真Ｐ１の画像データの特徴を解析し、７名の人物ＯＢ１〜ＯＢ７の顔画像を抽出し、抽出した７名の人物ＯＢ１〜ＯＢ７の顔画像を、記憶部１４０に記憶された参照画像と逐次比較し、７名の人物ＯＢ１〜ＯＢ７の顔認証を行い、その類似度を算出する。

図５に、写真Ｐ１の類似度算出結果の一例を示す。類似度算出部２１０は、認識対象ＯＢ１〜ＯＢ７の顔画像が位置する座標、参照画像との類似度、参照識別をそれぞれ生成する。例えば、認識対象ＯＢ１の顔画像が位置する座標は（ｘ１、ｙ１）であり、認識対象ＯＢ１が参照識別Ｕ３（つまり、ユーザーＵ３）と８０％で類似することを示している。この類似度８０％は、認識対象ＯＢ１と比較した全ての参照画像との間で最大を意味する。同様に、認識対象ＯＢ２の顔画像が位置する座標は（ｘ２、ｙ２）であり、認識対象ＯＢ２が参照識別Ｕ４（つまり、ユーザーＵ４）と７５％で類似することを示している。この類似度７５％は、認識対象ＯＢ２と比較した全ての参照画像との間で最大を意味する。他の認識対象ＯＢ３〜ＯＢ７についても同様のことが示されている。

類似度算出部２１０は、１つの機能として、類似度算出結果を表示部１３０に表示させる機能を有する。例えば、ユーザーは、入力部１２０を介して写真を特定し、特定した写真の類似度算出結果を表示部１３０に表示させることができる。図６は、写真Ｐ１の類似度算出結果の表示例である。同図に示すように、写真Ｐ１の人物ＯＢ１〜ＯＢ７の近傍には、図５に示す類似度算出結果を示す指標ＴＧが表示される。ユーザーは、この画面を介して類似度の状況を認識することができる。

類似度算出部２１０の算出結果は、写真選択部２２０に提供される。写真選択部２２０は、閾値決定部２３０から提供される閾値Ｔｈと類似度とを比較し、閾値Ｔｈ以上の類似度をもつ写真を選択する。写真選択部２２０はさらに、参照識別（ユーザー識別）毎に写真をフィルタリングする機能を備えている。図７は、閾値以上の類似度をもつ写真を、参照識別毎に分類した例を示している。例えば、参照識別Ｕ１に関して、閾値以上の類似度を持つ写真は、Ｐ１、Ｐ５、Ｐ８、Ｐ１０等であり、参照識別Ｕ２に関して、閾値以上の類似度をもつ写真は、Ｐ１、Ｐ３、Ｐ４、Ｐ７等である。

ユーザーは、入力部１２０を介してフィルタリングする参照識別を指定することが可能である。例えば、ユーザーが参照識別Ｕ２を指定することで、参照識別Ｕ２を含む写真が選択され、参照識別Ｕ２を含まない写真は選択されない。さらに、写真選択部２２０は、記憶部１５０に記憶される撮像画像のメタデータを利用して選択される写真をフィルタリングすることも可能である。例えば、ユーザーが撮像者識別を指定することで、指定された撮像者識別に該当する写真が選択されるようにしたり、撮像期間を指定することで、当該撮像期間に該当する撮像日時を有する写真が選択されるようにしたり、イベントを指定することで、当該イベントに該当する写真が選択されるようにすることも可能である。

写真選択部２２０で選択された写真は、アルバム編集部２４０へ提供される。アルバム編集部２４０は、選択された写真を表示部１３０に表示させ、ユーザーによるアルバム編集を可能にする。アルバム編集では、例えば、１つまたは複数のテンプレートが用意され、ユーザーは、テンプレートを利用して写真のレイアウトを容易に行うことができる。また、必要に応じて写真の拡大、縮小、回転などを行うことも可能である。アルバム編集部２４０は、作成されたアルバムの各ページを印刷データに変換し、外部Ｉ／Ｆ１１０を介してプリンタに印刷させることも可能である。

次に、本実施例のアルバム作成支援装置の動作を図８のフローを参照して説明する。先ず、アルバム作成支援装置１００の記憶部１４０には、参照画像の登録が行われる（Ｓ１００）。参照画像が外部Ｉ／Ｆ１１０を介して取り込まれるとき、制御部１６０は、参照画像を一定のサイズまたは解像度に加工し、正規化された参照画像を記憶部１４０に記憶させることが可能である。さらに制御部１６０は、参照画像を識別する参照識別（ユーザー識別）をメタデータまたは属性データとして記憶部１４０に記憶する（図２参照）。

また、外部Ｉ／Ｆ１１０を介して複数の撮像画像が取り込まれ（Ｓ１１０）、制御部１６０は、取り込まれた撮像画像を記憶部１５０に格納する。制御部１６０は、撮像画像を一定のサイズまたは解像度に加工し、撮像画像を正規化するようにしてもよい。さらに制御部１６０は、撮像画像を識別する撮像識別、撮像者識別、撮像日時、インベントなどの情報をメタデータまたは属性データとして記憶部１５０に記憶する（図３参照）。

次に、ユーザーは、入力部１２０を介してアルバム編集の指示を入力し（Ｓ１２０）、次に、入力部１２０を介して参照識別（ユーザー識別）を指定する（Ｓ１３０）。つまり、アルバム編集の対象となる人物を特定する。参照識別は、１つに限らず複数の指定であってもよい。

次に、類似度算出部２１０は、参照画像と撮像画像とを比較し、撮像画像の認識対象の顔認証を行い、類似度を算出する（Ｓ１４０）。次に、写真選択部２２０は、閾値以上の類似度を有し、かつ指定された参照識別が含まれる写真を選択し（Ｓ１５０）、アルバム編集部２４０は、選択された写真を表示部１３０に表示させる（Ｓ１６０）。ユーザーは、表示部１３０に表示された写真を用いてアルバムの編集を行う（Ｓ１７０）。

図９（Ａ）は、参照識別Ｕ１で選択された写真の表示例である。表示部１３０の画面１３２には、選択された写真Ｐ１、Ｐ５、Ｐ８、Ｐ１０等の縮小画像あるいはサムネイル画像が表示され、さらに選択された写真の枚数（８５枚）が表示されている。ユーザーが写真Ｐ１を選択すると、その拡大された写真Ｐ１が表示される。さらに画面１３２には、閾値調整ボタン１３４が表示される。閾値調整ボタン１３４には、現在設定されている閾値（８０％）が表示され、その左右に閾値を増加または減少させるための増減入力ボタンが表示される。ユーザーは、選択された写真の枚数を考慮し、増減入力ボタンにタッチして閾値を増減させることが可能である。図９（Ｂ）は、ユーザーが閾値を９０％に変更した例を示している。これにより、写真Ｐ８、Ｐ１０、Ｐ１８，Ｐ２５等が選択され、選択された写真の枚数が４０枚に減少される。ユーザーは、閾値を適宜調整することで、アルバムに使用する写真の枚数を調整することができる。

このように本実施例によれば、複数の撮像画像の中から顔認証を利用して類似度の高い撮像画像（写真）を自動で選択するようにしたので、アルバム作成の際に撮像画像を選択するための作業効率を大幅に改善することができる。

次に、本発明の第２の実施例について説明する。上記実施例では、写真を選択するための閾値Ｔｈをユーザー入力により変更する例を示したが、第２の実施例は、選択された写真の枚数に応じて自動的に閾値を可変するものである。

図１０は、第２の実施例の動作を説明するフローであり、第２の実施例では、ステップＳ２００、Ｓ２１０が図８に示すステップと相違し、それ以外のステップは図８と同じである。第２の実施例では、閾値決定部２３０は、写真選択部２２０によって選択された写真の枚数を受け取り、写真の枚数が一定値以上か否かを判定し（Ｓ２００）、一定値以上である場合には、選択された写真の枚数が多すぎるとみなし、現在の閾値をΔＴｈだけ増加させる（Ｓ２１０）。この閾値の変更に応答して、写真選択部２２０は、変更された閾値に基づき写真を再選択する（Ｓ１５０）。このループは、選択された写真の枚数が一定値未満になるまで繰り返される。

このように本実施例によれば、選択される写真の枚数が上限値を超えないように閾値を自動調整することができ、ユーザーの利便性を図ることができる。なお、写真の枚数の上限値および閾値の増加量ΔＴｈは、閾値決定部２３０に予め設定される。

本実施例の変形例として、写真の枚数の下限値を設定し、写真の枚数が下限値よりも大きくなるように閾値を自動的に調整することも可能である。この場合、選択された写真の枚数が下限値を下回る場合には、閾値決定部２３０は、現在の閾値をΔＴｈだけ減少させ、写真選択部２２０は、変更された閾値に基づき写真を再選択する。

さらなる変形例として、写真の枚数の上限値と下限値の双方を設定し、写真の枚数が上限値と下限値との間になるように閾値を自動的に調整するようにしてもよい。これにより、アルバムの編集に必要な写真の枚数に応じた写真の選択を自動的に行うことができる。

次に、本発明の第３の実施例について説明する。図１１は、第３の実施例の動作を説明するフローであり、第３の実施例では、ステップＳ２２０、Ｓ２３０が図８に示すステップと相違し、それ以外のステップは図８と同じである。第３の実施例では、閾値決定部２３０は、写真選択部２２０によって選択された写真の枚数を受け取り、写真の枚数から算出されるアルバムのページ数が一定値以上か否かを判定し（Ｓ２２０）、一定値以上である場合には、選択された写真の枚数が多すぎるとみなし、現在の閾値をΔＴｈだけ増加させる（Ｓ２３０）。この閾値の変更に応答して、写真選択部２２０は、変更された閾値に基づき写真を再選択する（Ｓ１５０）。このループは、選択された写真の枚数が一定値未満になるまで繰り返される。

閾値決定部２３０は、写真の枚数とアルバムのページ数との関係を規定する数式またはテーブルを備えている。例えば、１ページにレイアウト可能な写真の枚数Ｍと、アルバムを構成する最大ページ数Ｐとから、写真の枚数の上限値（Ｍａｘ＝Ｍ×Ｐ）を設定する。また、ある実施態様では、ユーザーが写真のレイアウトに使用するテンプレートを選択している場合には、当該テンプレートに基づき１ページにレイアウト可能な写真の枚数を算出するようにしてもよい。

このように本実施例によれば、選択される写真の枚数がアルバムのページ数の上限値を超えないように閾値を自動調整することができ、ユーザーの利便性を図ることができる。

本実施例の変形例として、アルバムのページ数の下限値を設定し、写真の枚数が下限値よりも大きくなるように閾値を自動的に調整することも可能である。この場合、選択された写真の枚数が下限値を下回る場合には、閾値決定部２３０は、現在の閾値をΔＴｈだけ減少させ、写真選択部２２０は、変更された閾値に基づき写真を再選択する。

さらなる変形例として、アルバムのページ数の上限値と下限値の双方を設定し、写真の枚数が上限値と下限値との間になるように閾値を自動的に調整するようにしてもよい。これにより、アルバムの編集に必要な写真の枚数に応じた写真の選択を自動的に行うことができる。

次に、本発明の第４の実施例について説明する。図１２（Ａ）は、第４の実施例に係るアルバム作成支援機能２００Ａの構成を示す図である。同図に示すように、閾値決定部２３０は、類似度算出部２１０によって使用される撮像画像のイベント数ＩＶに応じて閾値Ｔｈを決定する。ある態様では、記憶部１５０に記憶される撮像画像のイベントは、複数の記念行事に分類される。記念行事は、例えば、入学式、卒業式、運動会、食事会、父兄参観などである。閾値決定部２３０は、分類されたイベントの種類からイベント数ＩＶを判定し、イベント数ＩＶが多ければ、より多くの写真が必要になるので閾値を相対的に低くし、イベント数ＩＶが少なければ、少ない写真で済むため閾値を相対的に高くする。例えば、図１２（Ｂ）に示すようなテーブルを用意し、閾値決定部２３０は、イベント数ＩＶに対応する閾値を選択するようにしてもよい。

次に、本発明の第５の実施例について説明する。図１３（Ａ）は、第５の実施例に係るアルバム作成支援機能２００Ｂの構成を示す図である。同図に示すように、閾値決定部２３０は、類似度算出部２１０によって使用される参照画像の参照識別の数ＲＶに応じて閾値Ｔｈを決定する。参照識別の数は、記憶部１４０に登録された参照識別の数（Ｕ１〜Ｕｎ）をカウントすることにより得ることができる。アルバムに満遍なく参照識別（ユーザー識別）を掲載する場合、参照識別の数が多ければ、より多くの写真が必要になるので閾値を相対的に低くし、参照識別の数が少なければ、少ない写真で済むため閾値を相対的に高くする。例えば、図１３（Ｂ）に示すようなテーブルを用意し、閾値決定部２３０は、参照識別の数ＲＶに対応する閾値を選択するようにしてもよい。

なお、上記第１ないし第５の実施例は、それぞれ単独で実施されるものであってもよいし、第１ないし第５の実施例を適宜組み合わせて実施されるものであってもよい。例えば、第２の実施例と第４の実施例とを組み合わせた場合、イベント数が多ければ写真の上限値を大きくし、イベント数が少なければ写真の下限値を小さくしたり、第３の実施例と第５の実施例とを組み合わせた場合、参照識別の数が多ければアルバムのページ数の上限値を大きくし、参照識別の数が小さければアルバムのページ数の下限値を小さくするようにしてもよい。

次に、本発明の第６の実施例について説明する。図１４は、第６の実施例に係るアルバム作成支援システム３００の構成を示す図である。アルバム作成支援システム３００は、アルバム作成支援装置１００と、この装置１００にネットワークＮＷを介して接続される１つまたは複数の利用者端末４００（４００＿１、４００＿２〜４００＿ｎ）を含んで構成される。利用者端末４００は、スマートフォン、パーソナルコンピュータ、タブレット型情報端末、デジタルカメラ等であることができる。利用者端末４００は、搭載された通信手段を利用して、インターネットまたはイントラネット上のアルバム作成支援装置１００に接続することができ、この場合、利用者端末４００はクライアントとして機能し、アルバム作成支援装置１００はサーバーとして機能する。

利用者端末４００は、アルバム作成支援装置１００に対して、顔画像を含む参照画像をアップロードし、アルバム作成支援装置１００は、記憶部１４０に参照画像を記憶する。また、アルバム作成支援装置１００の記憶部１５０には、利用者端末４００からアップロードされた撮像画像、あるいはその他のサーバーから提供された撮像画像が記憶される。

アルバム作成支援装置１００は、利用者端末４００からアルバム作成の指示を受け取ると、第１ないし第５の実施例で説明したようにアルバム作成支援のための動作を実行する。写真選択部２２０は、閾値Ｔｈに基づき写真を選択すると、図９に示すような選択された写真を含む編集用の画面１３２の画像データを利用者端末４００に送信し、これが利用者端末４００に表示される。利用者端末４００は、例えば、閾値調整ボタン１３４を介して閾値調整の指示を閾値決定部２３０へ与えることができる。さらに利用者端末４００は、アルバム作成支援装置１００から送信された画面１３２の画像データを利用してアルバムの編集を行うことができる。

本実施例のアルバム作成支援システム３００は、例えば、幼稚園や保育園等において利用される。例えば、幼稚園や保育園の保護者あるいは園の職員は、利用者端末４００を利用してアルバム作成支援装置１００にアクセスし、アルバムに使用するための撮像画像（写真）の選定に大きな労力を費やすことなく、効率よくアルバムの編集を行うことができる。また、アルバム作成支援装置において編集されたアルバムは、利用者端末間で閲覧しその内容をシェアすることができる。

以上、本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。

１００：アルバム作成支援装置
１１０：外部Ｉ／Ｆ
１２０：入力部
１３０：表示部
１４０：記憶部
１５０：記憶部
１６０：制御部
２００：アルバム作成支援機能
２１０：類似度算出部
２２０：写真選択部
２３０：閾値決定部
２４０：アルバム編集部
３００：アルバム作成支援システム
４００＿１、４００＿２、４００＿ｎ：利用者端末

Claims (12)

1. 顔画像を含む参照画像を記憶する記憶手段と、
   撮像カメラで撮像された撮像画像を取得する取得手段と、
   前記参照画像と前記撮像画像とを比較し、前記撮像画像内の認識対象の顔画像の類似度を算出する算出手段と、
   閾値を決定する決定手段と、
   前記閾値以上の類似度をもつ撮像画像を選択する選択手段と、
   前記選択された撮像画像のアルバム編集を可能とする編集手段と、
   ユーザー入力手段とを含み、前記決定手段は、前記ユーザー入力手段からの入力に基づき前記閾値を決定する、アルバム作成支援装置。
2. 顔画像を含む参照画像を記憶する記憶手段と、
   撮像カメラで撮像された撮像画像を取得する取得手段と、
   前記参照画像と前記撮像画像とを比較し、前記撮像画像内の認識対象の顔画像の類似度を算出する算出手段と、
   閾値を決定する決定手段と、
   前記閾値以上の類似度をもつ撮像画像を選択する選択手段と、
   前記選択された撮像画像のアルバム編集を可能とする編集手段と、
   前記選択手段により選択された撮像画像と前記閾値を変更するための閾値変更入力とを表示する表示手段とを含み、前記決定手段は、前記閾値変更入力に基づき閾値を決定し、前記選択手段は、前記閾値が変更されたとき撮像画像を再選択する、アルバム作成支援装置。
   
3. 顔画像を含む参照画像を記憶する記憶手段と、
   撮像カメラで撮像された撮像画像を取得する取得手段と、
   前記参照画像と前記撮像画像とを比較し、前記撮像画像内の認識対象の顔画像の類似度を算出する算出手段と、
   閾値を決定する決定手段と、
   前記閾値以上の類似度をもつ撮像画像を選択する選択手段と、
   前記選択された撮像画像のアルバム編集を可能とする編集手段とを含み、
   前記決定手段は、前記選択手段により選択された撮像画像の数に基づき、前記選択された撮像画像の数が上限値を超えないように前記閾値を調整する、アルバム作成支援装置。
4. 顔画像を含む参照画像を記憶する記憶手段と、
   撮像カメラで撮像された撮像画像を取得する取得手段と、
   前記参照画像と前記撮像画像とを比較し、前記撮像画像内の認識対象の顔画像の類似度を算出する算出手段と、
   閾値を決定する決定手段と、
   前記閾値以上の類似度をもつ撮像画像を選択する選択手段と、
   前記選択された撮像画像のアルバム編集を可能とする編集手段とを含み、
   前記決定手段は、前記選択手段により選択された撮像画像の数に基づき、前記選択された撮像画像の数がアルバムのページ数の上限値を超えないように前記閾値を調整する、アルバム作成支援装置。
5. 顔画像を含む参照画像を記憶する記憶手段と、
   撮像カメラで撮像された撮像画像を取得する取得手段と、
   前記参照画像と前記撮像画像とを比較し、前記撮像画像内の認識対象の顔画像の類似度を算出する算出手段と、
   閾値を決定する決定手段と、
   前記閾値以上の類似度をもつ撮像画像を選択する選択手段と、
   前記選択された撮像画像のアルバム編集を可能とする編集手段とを含み、
   前記決定手段は、前記撮像画像に関連するイベント数に応じて閾値を調整する、アルバム作成支援装置。
6. 顔画像を含む参照画像を記憶する記憶手段と、
   撮像カメラで撮像された撮像画像を取得する取得手段と、
   前記参照画像と前記撮像画像とを比較し、前記撮像画像内の認識対象の顔画像の類似度を算出する算出手段と、
   閾値を決定する決定手段と、
   前記閾値以上の類似度をもつ撮像画像を選択する選択手段と、
   前記選択された撮像画像のアルバム編集を可能とする編集手段とを含み、
   前記決定手段は、前記参照画像の数に応じて閾値を調整する、アルバム作成支援装置。
7. 前記選択手段は、指定された参照画像の類似度が前記閾値以上の撮像画像を選択する、請求項１ないし６いずれか１つに記載のアルバム作成支援装置。
8. 前記表示手段は、選択された撮像画像の数を表示する、請求項２に記載のアルバム作成支援装置。
9. 前記決定手段はさらに、前記選択された撮像画像の数が下限値を下回らないように前記閾値を調整する、請求項３に記載のアルバム作成支援装置。
10. 前記決定手段はさらに、前記選択された撮像画像の数が下限値を下回らないように前記閾値を調整する、請求項４に記載のアルバム作成支援装置。
11. 前記決定手段は、イベント数が多ければ閾値を相対的に低くし、イベント数が少なければ閾値を相対的に高くする、請求項５に記載のアルバム作成支援装置。
12. 請求項１ないし１１いずれか１つに記載のアルバム作成支援装置と、
    前記アルバム作成支援装置とネットワークを介して接続された少なくとも１つの利用者端末とを含み、
    前記利用者端末は、前記参照画像および前記撮像画像をアルバム作成支援装置にアップロードする手段と、
    アルバム作成支援装置にアルバム編集の指示を入力する入力手段とを含む、アルバム作成支援システム。

Images