JP2018186439A - 情報処理システム、情報処理装置、及び、情報処理方法 - Google Patents

Abstract

【課題】画像が多数ある場合であっても、容易に質の高いフォトアルバムを作成できるようにすること目的とする。【解決手段】本発明の情報処理システムは、数の画像からなる画像群に含まれるそれぞれの画像を、ダイジェスト再生の基準である第１評価基準で評価する第１評価手段と、第１評価手段による評価に基づいて、画像群から画像を選択する第１選択手段と、画像群に含まれるそれぞれの画像を、第１評価基準とは異なる第２評価基準で評価する第２評価手段と、第２評価手段による評価に基づいて、画像群から画像を選択する第２選択手段と、第１選択手段によって選択された画像、及び、第２選択手段によって選択された画像に基づいて、ユーザが印刷対象の画像を決定できる決定画面を表示する制御を行う表示制御手段と、を備える。【選択図】図５

Description

本発明は、情報処理システム、情報処理装置、情報処理方法、及び、プログラムに関する。

従来、静止画や動画を記録媒体に記録するとともに、記録媒体に記録された静止画や動画を再生できるデジタルカメラが知られている。このようなデジタルカメラにおいて、記録媒体にたくさんの静止画や動画が記録されている場合、全てを閲覧するには時間がかかってしまうという問題があった。このような問題に鑑み、たとえば動画から重要なシーンだけを抽出し、ダイジェスト再生する技術が提案されている（特許文献１）。特許文献１では、サッカー等の試合の動画において、重要なシーンを音声の大小で判別し、所定のパワーを越えるシーンを抜粋し、ダイジェスト再生する。

特開２００７−２６７３５１号公報

ところで、多数ある画像の中から画像を選択してフォトアルバムを作成したいという要望がある。しかしながら、ユーザが多数ある画像の中からフォトアルバム用に画像を選択する作業は煩雑である。また、例えば特許文献１のようにダイジェスト再生のために選択された画像は、フォトアルバム用の画像には適さないことがある。

本発明は、画像が多数ある場合であっても、容易に質の高いフォトアルバムを作成できるようにすること目的とする。

本発明の情報処理システムは、複数の画像からなる画像群に含まれるそれぞれの画像を、ダイジェスト再生の基準である第１評価基準で評価する第１評価手段と、前記第１評価手段による評価に基づいて、前記画像群から画像を選択する第１選択手段と、前記画像群に含まれるそれぞれの画像を、前記第１評価基準とは異なる第２評価基準で評価する第２評価手段と、前記第２評価手段による評価に基づいて、前記画像群から画像を選択する第２選択手段と、前記第１選択手段によって選択された画像、及び、前記第２選択手段によって選択された画像に基づいて、ユーザが印刷対象の画像を決定できる決定画面を表示する制御を行う表示制御手段と、を備える。

本発明によれば、画像が多数ある場合であっても、容易に質の高いフォトアルバムを作成できる。

情報処理システムの構成図である。 デジタルカメラ、サーバ、及び、通信装置の構成図である。 フォトアルバム印刷処理のシーケンス図である。 フォトアルバム印刷処理の概念図である。 画像送信処理のフローチャートである。 顔に関する評価を説明する図である。 動きに関する評価を説明する図である。 クラスタリング処理の概念図である。 フォトアルバム確認印刷処理のフローチャートである。 プレビュー画面の例を示す図である。 プレビュー画面の例を示す図である。 フォトアルバムの例を示す図である。

［システム構成］
まず、図１を参照して、情報処理システム１００の構成について説明する。図１は、情報処理システム１００の構成図である。情報処理システム１００は、デジタルカメラ１１０と、通信装置１２０と、サーバ１３０とを備える。
デジタルカメラ１１０は、コンピュータ、及び、情報処理装置の例であり、後に説明するように、ダイジェスト動画の生成、再生、及び、画像のサーバ１３０への送信等を行う。なお、デジタルカメラ１１０として、タブレット端末、携帯端末を用いることもできるが、これらに限定されるものではない。
通信装置１２０は、コンピュータ、及び、情報処理装置の例であり、例えば、ウェブブラウザを実行して、ユーザの指示をサーバ１３０に送信する。通信装置１２０として、例えば、パーソナルコンピュータ、タブレット端末、携帯端末を用いることもできるが、これらに限定されるものではない。
サーバ１３０は、コンピュータ、及び、情報処理装置の例であり、デジタルカメラ１１０から受信した画像に基づいて、フォトアルバムを印刷する。

次に、図２（ａ）を参照して、デジタルカメラ１１０の構成について説明する。図２（ａ）は、デジタルカメラ１１０の構成図である。
第１操作部２０１は、デジタルカメラ１１０のユーザがデジタルカメラ１１０に対して各種の指示を入力するために操作するスイッチやボタン等により構成されている。第１操作部２０１は、シャッタースイッチやタッチセンサを含む。タッチセンサは、第１表示部２０７をユーザがタッチすることで各種の指示を入力できるものである。
制御部２０２は、デジタルカメラ１１０の全体を制御する。制御部２０２は、第１ＣＰＵ、及び、ＲＯＭやＲＡＭ等の第１記憶部を備え、第１記憶部に記憶されたプログラムを第１ＣＰＵが実行することで、制御部２０２で実現される各種の機能、図３のデジタルカメラ１１０の処理、及び、図５の処理が実現される。

センサ部２０３は、レンズ２０８ａ、露出機構２０９ａを介して入射される光を受け、その光量に応じた電荷を出力する。
Ａ／Ｄ変換部２０４は、センサ部２０３から出力されたアナログ画像信号に対して、サンプリング、ゲイン調整、Ａ／Ｄ変換等を行い、デジタル画像信号として出力する。
画像処理部２０５は、Ａ／Ｄ変換部２０４から出力されたデジタル画像信号に対して各種の画像処理を行い、処理済みのデジタル画像信号を出力する。例えば、画像処理部２０５は、Ａ／Ｄ変換部２０４から受けたデジタル画像信号を、ＹＵＶ画像信号に変換して出力する。

被写体検出部２１５は、画像処理部２０５から得た画像信号を用いて、被写体の検出を行って、被写体情報を生成する。被写体情報には、画像における被写体の位置、サイズ、及び、デジタルカメラ１１０から被写体までの距離等が含まれる。本実施形態では、被写体検出部２１５は、被写体として顔の検出処理を行って、被写体情報として顔情報を生成する。顔情報には、画像における顔の位置、顔サイズ、顔の向き、視線の方向、及び、デジタルカメラ１１０から顔までの距離等が含まれる。被写体検出部２１５は、例えば専用の回路で実現される。
表情検出部２１６は、被写体検出部２１５から取得した顔情報に基づいて、表情を検出する。表情検出部２１６は、顔のエッジ情報を用い、笑顔のレベルを判定して、笑顔を数値化した笑顔度を算出する。表情検出部２１６は、例えば専用の回路で実現される。

第１表示部２０７は、液晶画面等により構成され、各種の画面や画像を表示する。
外部接続部２１４は、外部機器との接続インタフェースである。外部接続部２１４に外部モニタを接続することで、外部モニタに画面を表示することが可能となる。
ＡＦ（オートフォーカス）処理部２０８は、画像処理部２０５によって得られた画像に基づいて、レンズ２０８ａを制御し、ピントを合わせる。
ＡＥ（自動露出）処理部２０９は、画像処理部２０５によって作成された画像から適正輝度との差分を算出し、露出機構２０９ａを制御する。

ＥＦ（フラッシュプリ発光）処理部２１０は、発光判断がされた場合に被写体が適正となりうる光量をフラッシュ部２１１に発光させる。
エンコーダー部２１２は、画像処理部２０５から出力されたデジタル画像信号（画像データ）のフォーマットをＪＰＥＧ等のフォーマットに変換し、画像記録部２１３に出力する。また、エンコーダー部２１２は、撮影情報生成部２２２から取得した撮影情報を画像データのヘッダに書き込む。エンコーダー部２１２は、例えば専用の回路で実現される。
画像記録部２１３は、エンコーダー部２１２から取得したフォーマット変換済みの画像データを、デジタルカメラ１１０内の不図示のメモリや、デジタルカメラ１１０に挿入されている外部メモリ等の記録媒体２３０に記録する処理を行う。記録媒体２３０には、メモリーカードが含まれる。
第１通信インタフェース２１７は、制御部２０２の制御に基づいて、サーバ１３０等の外部装置との通信を司る。

次に、図２（ａ）を参照して、制御部２０２で実現される各種の機能について説明する。
再生期間設定部２２１は、ダイジェスト再生の対象となる画像の条件を設定する。本実施形態では、ダイジェスト再生の対象となる画像の条件は、再生期間と呼ばれる期間で指定できるものとする。再生期間は、画像が撮影された時刻の範囲を表す。再生期間に含まれる時刻に撮影された画像が、ダイジェスト再生の対象となる画像である。再生期間として、ユーザが指定する１日や１週間等が使われる。ダイジェスト再生で再生される動画をダイジェスト動画と呼ぶ。
撮影情報生成部２２２は、撮影情報を生成する。撮影情報は、画像の撮影時の情報である。撮影情報には、例えば、画像処理部２０５で得られた画像信号、被写体検出部２１５で得られた被写体情報、ユーザが設定した設定情報、ピントの合焦情報、ＹＵＶヒストグラム、ジャイロ変動量、及び、ズーム情報が含まれる。被写体情報の顔情報には、表情検出部２１６が算出する笑顔度が含まれる。ジャイロ変動量は、デジタルカメラ１１０が備えるジャイロセンサの角速度情報である。ズーム情報は、ズーム位置の時間変化を表す。

ダイジェスト動画部２２３は、ダイジェスト動画を生成したり、ダイジェスト動画を再生したりする。
画面管理部２２４は、後に説明する印刷メニュー画面等の管理を行う。
画像評価部２２５は、画像のデータのヘッダに記録された撮影情報に基づいて、画像の評価を行う。
画像分類部２２６は、撮影日時に基づいて、画像のクラスタリングを行う。
画像選択部２２７は、画像評価部２２５の評価に基づいて、画像を選択する。
画像送信部２２８は、画像選択部２２７によって選択された画像をサーバ１３０に送信する。
制御部２０２で実現される各種の機能は、専用の回路で実現されてもよい。また、デジタルカメラ１１０の制御部２０２以外の各部の機能は、必要に応じて制御部２０２で実現されるように構成してもよい。

次に、図２（ｂ）を参照して、通信装置１２０の構成について説明する。図２（ｂ）は、通信装置１２０の構成図である。通信装置１２０は、第２ＣＰＵ２５０と、第２記憶部２５１と、第２操作部２５２と、第２表示部２５３と、第２通信インタフェース２５４と、これらを接続するバス２５５と、を備える。
第２ＣＰＵ２５０は、通信装置１２０全体を制御する。第２記憶部２５１に記憶されたプログラムを第２ＣＰＵ２５０が実行することで、図３の通信装置１２０の処理が実現される。

第２記憶部２５１は、プログラムが記憶されたＲＯＭ、及び、第２ＣＰＵ２５０の一時的な作業領域となるＲＡＭを備える。
第２操作部２５２は、通信装置１２０のユーザが通信装置１２０に対して各種の指示を入力するために操作するスイッチやボタン等により構成されている。第２操作部２５２は、キーボードやタッチセンサを含んでいてもよい。タッチセンサは、第２表示部２５３をユーザがタッチすることで各種の指示を入力できるものである。
第２表示部２５３は、液晶画面等により構成され、各種の画面や画像を表示する。
第２通信インタフェース２５４は、第２ＣＰＵ２５０の制御に基づいて、サーバ１３０等の外部装置との通信を司る。

次に、図２（ｃ）を参照して、サーバ１３０の構成について説明する。図２（ｃ）は、サーバ１３０の構成図である。サーバ１３０は、第３ＣＰＵ２７０と、第３記憶部２７１と、印刷部２７２と、第３通信インタフェース２７３と、これらを接続するバス２７４と、を備える。
第３ＣＰＵ２７０は、サーバ１３０全体を制御する。第３記憶部２７１に記憶されたプログラムを第３ＣＰＵ２７０が実行することで、図３や図９のサーバ１３０の処理が実現される。

第３記憶部２７１は、プログラムが記憶されたＲＯＭ、及び、第３ＣＰＵ２７０の一時的な作業領域となるＲＡＭを備える。
印刷部２７２は、画像を印刷する装置であり、フォトアルバムを印刷する。
第３通信インタフェース２７３は、第３ＣＰＵ２７０の制御に基づいて、デジタルカメラ１１０、及び、通信装置１２０等の外部装置との通信を司る。

［撮影処理］
次に、デジタルカメラ１１０での撮影処理について説明する。
まず、デジタルカメラ１１０のユーザが、第１操作部２０１に含まれている電源スイッチをオンにすると、制御部２０２はこれを検知し、デジタルカメラ１１０を構成する各部に電源を供給する。デジタルカメラ１１０を構成する各部に電源が供給されるとシャッターが開くので、デジタルカメラ１１０の前面に配置されたレンズ２０８ａ、露出機構２０９ｂを介して光がセンサ部２０３に入光することになる。センサ部２０３は、溜まった電荷を読み出して、Ａ／Ｄ変換部２０４にアナログ画像信号として出力する。
Ａ／Ｄ変換部２０４は、センサ部２０３から出力されたアナログ画像信号に対して、サンプリング、ゲイン調整、Ａ／Ｄ変換等を行い、デジタル画像信号として出力する。

画像処理部２０５は、Ａ／Ｄ変換部２０４から出力されたデジタル画像信号に対して各種画像処理を行い、処理済みのデジタル画像信号を出力する。画像処理部２０５から出力された画像信号は制御部２０２を介して、ＡＥ処理部２０９へとフィードバックされ、ＡＥ処理部２０９は、適正露出への収束制御を行う。
また、被写体検出部２１５は、画像処理部２０５から出力された画像を用い、被写体の検出を行って、顔サイズ、顔の位置を含む顔情報を取得する。また、被写体検出部２１５は、取得した顔情報を用いてＡＦ処理部１０８が被写体の顔までの距離情報を取得する。表情検出部２１６は、顔情報を用いて、被写体の表情検出を行う。本実施形態では、被写体の顔のエッジ情報を用いて、表情を検出し、被写体の表情が笑顔であるほど高スコアとなる笑顔度を取得する。

制御部２０２は、信号ＳＷ１なる信号の通知をシャッタースイッチから受けると、この時点における画像情報を用いＡＦ処理、ＡＥ処理を行い、撮影に最適なピント、及び、露出設定条件を取得する。シャッタースイッチは、第１操作部２０１に含まれ、例えば反押しされると信号ＳＷ１を制御部２０２に通知する。
制御部２０２は、信号ＳＷ２なる信号の通知をシャッタースイッチから受けると、本撮影の制御を行う。シャッタースイッチは、例えば全押しされると信号ＳＷ２を制御部２０２に通知する。本撮影では、センサ部２０３は、レンズ２０８ａ、及び、露出機構２０９ｂを介して入った光による電荷を読出し、Ａ／Ｄ変換部２０４にアナログ画像信号として出力する。
制御部２０２は、例えば、画像処理部２０５から出力された画像から現在の輝度値を検出する。そして、ＥＦ処理部２１０は、予め設定された閾値よりも暗いと判断された場合、発光判断を行って、フラッシュ部２１１が本発光処理を行う。

Ａ／Ｄ変換部２０４は、センサ部２０３から出力されたアナログ画像信号に対して、サンプリング、ゲイン調整、Ａ／Ｄ変換等を行い、デジタル画像信号として出力する。画像処理部２０５は、Ａ／Ｄ変換部２０４から出力されたデジタル画像信号に対して各種の画像処理を行い、処理済みのデジタル画像信号を出力する。
エンコーダー部２１２は、画像処理部２０５から出力されたデジタル信号を、ＪＰＥＧ等のフォーマットに変換し、画像記録部２１３に出力する。また、撮影情報作成部１１７は、被写体検出部２１５や表情検出部２１６から顔情報や笑顔度等の情報を取得して撮影情報を生成し、生成した撮影情報を画像記録部２１３に出力する。
画像記録部２１３は、エンコーダー部２１２でフォーマット変換された画像のデータのヘッダに撮影情報を含めて、記録媒体２３０に記録する。
デジタルカメラ１１０は、画像として、静止画、及び、動画を撮影できる。本実施形態では、デジタルカメラ１１０が撮影して記録媒体２３０に記録する各動画の長さは、後に説明する単位画像再生時間である４秒とする。

［フォトアルバム印刷処理の流れ］
次に、図３、図４を参照して、フォトアルバム印刷処理の流れについて説明する。図３は、フォトアルバム印刷処理のシーケンス図である。図４は、フォトアルバム印刷処理の概念図である。フォトアルバム印刷処理は、デジタルカメラ１１０の撮影によって記録媒体２３０に記録された画像を使ってフォトアルバムを印刷する処理である。
ステップＳ３０１に先立って、ユーザは、第１操作部２０１を操作して、記録媒体２３０に記録された画像をダイジェスト再生する指示をしたものとする。また、ユーザは、第１操作部２０１を操作して、既に説明した再生期間を設定しているものとする。

ステップＳ３０１において、デジタルカメラ１１０は、記録媒体２３０からダイジェスト動画４００を構成する複数の画像である第１画像群を選択する。そして、デジタルカメラ１１０は、タイトル処理、及び、色フィルタ処理等の加工処理が行われたダイジェスト動画４００を生成して、第１表示部２０７に再生する。デジタルカメラ１１０に外部モニタを接続することで、ダイジェスト動画４００を外部モニタに再生できる。なお、ステップＳ３０１の処理は後に詳しく説明する。
デジタルカメラ１１０は、ダイジェスト動画４００の再生が終了すると、印刷メニュー画面を表示する。印刷メニュー画面では、ダイジェスト動画４００でダイジェスト再生されたイベントを印刷するか否かをユーザが指定できる。

ステップＳ３０２において、ユーザは、第１操作部２０１を操作して、印刷メニュー画面でダイジェスト再生されたイベントを印刷する指示をする。
ステップＳ３０３において、デジタルカメラ１１０は、後に説明するが、印刷基準での評価に基づいて第２画像群を選択して、第１画像群、及び、第２画像群をサーバ１３０に送信する。サーバ１３０は、第１画像群、及び、第２画像群を受信する。
ステップＳ３０４において、サーバ１３０は、受信した第１画像群、及び、第２画像群の画像から、フォトアルバムのプレビュー用に画像のレイアウトを行って、プレビュー画面４１０の情報を通信装置１２０に送信する。通信装置１２０は、プレビュー画面４１０を表示する。通信装置１２０とサーバ１３０との通信には例えばＷｅｂが使われる。
ステップＳ３０５において、ユーザは、プレビュー画面４１０を参照して、適宜画像の変更等を行って、所望のフォトアルバムとなった後、プレビュー画面４１０の印刷ボタンを押下して印刷実行の指示を行う。
ステップＳ３０６において、通信装置１２０は、サーバ１３０に印刷指示を送信する。サーバ１３０は、印刷指示を受信する。
ステップＳ３０７において、サーバ１３０は、フォトアルバムを印刷する。こうして、フォトアルバムが作成される。

［画像送信処理］
次に、図５を参照して画像送信処理について説明する。図５は、画像送信処理のフローチャートである。画像送信処理は、デジタルカメラ１１０が行う処理であり、図３のステップＳ３０１、及び、Ｓ３０３に対応する処理である。
ステップＳ５０１において、再生期間設定部２２１は、記録媒体２３０に含まれる画像群から、再生期間に含まれる時刻に撮影された画像群を指定する。

ステップＳ５０２において、画像評価部２２５は、ステップＳ５０１で指定された画像群に含まれるそれぞれの画像を、画像のデータのヘッダに記録された撮影情報に基づいて、動画再生基準で評価する。動画再生基準は、ダイジェスト動画４００として再生するのに適した画像の評価が高くなる評価基準である。
動画再生基準での評価項目には、例えば、サイズ評価と、位置評価と、笑顔評価と、ブレ評価と、コントラスト評価と、白とび評価と、動き評価とが含まれる。以下の説明では、評価値が大きくなるに従って、評価が高いことを表すものとする。

まず、図６（ａ）を参照して、動画再生基準でのサイズ評価について説明する。図６（ａ）は、顔サイズとサイズ評価の評価値との関係を示した図である。線６０１が、動画再生基準でのサイズ評価を表す。サイズ評価は、画像に写された顔のサイズについての評価である。図６（ａ）に示すように、動画再生基準では、顔サイズが大きくなるに従って、サイズ評価が高くなる。顔サイズは、撮影情報の中の顔情報に含まれる。図６（ａ）では、画像の縦方向長さに対する顔の縦方向長さの割合で、顔サイズが表されている。
次に、図６（ｂ）を参照して、動画再生基準での位置評価について説明する。図６（ｂ）は、顔位置と位置評価の評価値との関係を示した図である。線６０３が、動画再生基準での位置評価を表す。位置評価は、画像に写された顔の位置についての評価である。図６（ｂ）に示すように、動画再生基準では、顔位置が画像に中心にくるに従って、位置評価が高くなる。顔位置は、撮影情報の中の顔情報に含まれる。図６（ｂ）では、画像の対角距離に対する、画像の中心から顔の位置までの距離の割合で、顔位置が表されている。

次に、図６（ｃ）を参照して、動画再生基準での笑顔評価について説明する。図６（ｃ）は、笑顔度と笑顔評価の評価値との関係を示した図である。線６０５が、動画再生基準での笑顔評価を表す。笑顔評価は、画像に写された顔の笑顔についての評価である。図６（ｃ）に示すように、動画再生基準では、笑顔度が大きくなるに従って、笑顔評価が高くなる。笑顔度は、撮影情報の中の顔情報に含まれる。
次に、ブレ評価について説明する。ブレ評価は、被写体のブレについての評価である。動画再生基準では、ブレ量が小さくなるに従って、ブレ評価が高くなる。画像評価部２２５は、撮影情報に含まれるジャイロ変動量、及び、ズーム情報の少なくともいずれかに基づいて、ブレ量を決定し、決定したブレ量からブレ評価を行う。

次に、コントラスト評価について説明する。コントラスト評価は、画像のコントラストについての評価である。動画再生基準では、コントラストが高くなるに従って、コントラスト評価が高くなる。画像評価部２２５は、撮影情報に含まれるピントの合焦情報に基づいて、画像のコントラストを決定し、決定したコントラストからコントラスト評価を行う。
次に、白とび評価について説明する。白とび評価は、画像の白とびについての評価である。動画再生基準では、白とび領域のサイズである白とびサイズが小さくなるに従って、白とび評価が高くなる。画像評価部２２５は、画像の輝度値が予め設定された値より大きい画素の数を白とび領域のサイズと決定し、決定した白とび領域のサイズから白とび評価を行う。

次に、図７（ａ）から（ｅ）までを参照して、動き評価について説明する。図７（ａ）から（ｄ）までは、時系列に並んだ動画のフレームの図である。図７（ｅ）は、動きベクトル累積量と動き評価の評価値との関係を示した図である。動きベクトル累積量は、フレームごとに決定される被写体の動きベクトルの大きさの累積値である。図７（ａ）から（ｄ）までの例では、被写体として顔を用いる。図７（ｅ）の線７０１が、動画再生基準での動き評価を表す。

動き評価は、画像に写された被写体の動きについての評価である。動き評価は、動画を対象とする。図７（ｅ）に示すように、動画再生基準では、動きベクトル累積量が大きくなるに従って、動き評価が高くなる。画像評価部２２５は、撮影情報に含まれる顔の位置の情報等に基づいて、動きベクトル累積量を決定し、決定した動きベクトル累積量から動き評価を行う。

なお、画像評価部２２５は、動画に関して、再生時に類似シーンが再生されないように、動き評価を行ってもよい。例えば、画像評価部２２５は、被写体の動きが激しい動画を高評価とする。また、被写体の動きが安定している動画も高評価にする。そして、後述のステップＳ５０９において、画像選択部２２７は、被写体の動きが激しい動画、及び、被写体の動きが安定した動画をそれぞれ１シーンずつ選択してもよい。
また、動画では、笑顔度や顔サイズは、フレームごとに変動するため、動画再生基準では、動画については、フレームごとの変動を踏まえた評価としてもよい。例えば、動画再生基準では、笑顔度が安定して高い動画や、後半で笑顔度が最大になる動画の評価を高くする。そして、画像選択部２２７は、後述のステップＳ５０９において、動画について、笑顔度が安定して高い動画、及び、後半で笑顔度が最大になる動画をそれぞれ選択してもよい。

画像評価部２２５は、それぞれの評価項目についての動画再生基準での評価値を合計して、動画再生基準での総合評価値を取得する。そして、画像評価部２２５を降順にソートする。
図５に戻って画像送信処理の説明を続ける。
ステップＳ５０３において、画像分類部２２６は、総撮影時間を決定する。総撮影時間は、再生期間内で最初に撮影された画像の撮影時刻から再生期間内で最後に撮影された画像の撮影時刻までの時間である。

ステップＳ５０４において、画像分類部２２６は、再生期間の総クラスタ数を決定する。クラスタは、画像の撮影時刻に基づいて画像が分類されるグループであり、１つのイベントを表す。クラスタごとに対応する期間が定められており、画像は、画像の撮影時刻が含まれる期間に対応するクラスタに分類される。各クラスタに対応する期間の長さは総撮影時間に基づいて決定される。総撮影時間が１日以下の場合、各クラスタに対応する期間の長さは１時間とする。クラスタは、画像が撮影された時間帯を表す。
画像分類部２２６は、総撮影時間、及び、各クラスタに対応する期間の長さに基づいて、総クラスタ数を決定する。
例えば、再生期間内で最初に撮影された画像の撮影時刻が８：００（午前８時）であり、再生期間内で最後に撮影された画像の撮影時刻が２０：００（午後８時）の場合を考える。このとき、総撮影時間は１２時間であり、各クラスタに対応する期間の長さは１時間である。したがって、画像分類部２２６は、総クラスタ数を１２と決定する。

ステップＳ５０５において、画像分類部２２６は、クラスタリング処理を行う。クラスタリング処理は、再生期間内に撮影された画像を、画像の撮影時刻に対応するクラスタに分類する処理である。
クラスタリング処理の例について図８を参照して説明する。図８はクラスタリング処理の概念図である。第１ヒストグラム８０１は、記録媒体２３０に記録された画像の撮影日単位で集計した画像の数を表す。図８の例では、再生期間は、２月２４日であるものとする。したがって、クラスタリング処理の対象となる画像は２月２４日に撮影された画像である。
第２ヒストグラム８０２は、２月２４日に撮影された画像を時間単位で集計した画像の数を表す。各クラスタに対応する期間の長さは１時間であるため、第２ヒストグラム８０２は、画像分類部２２６によるクラスタリング処理の結果が示されていることになる。例えば、正午から午後１時までに対応するクラスタには、１０個の画像が分類されている。

ステップＳ５０６において、画像分類部２２６は、目標再生時間を取得する。目標再生時間は、目標とするダイジェスト再生の時間を表し、ダイジェスト動画４００の再生時間となる。目標再生時間は、例えば、予めユーザがデジタルカメラ１１０に設定しており、制御部２０２が備える第１記憶部に保存されている。
ステップＳ５０７において、画像分類部２２６は、目標再生時間、及び、単位画像再生時間に基づいて、総選択画像数を決定する。単位画像再生時間は、１つの画像の再生時間であり本実施形態では４秒とする。画像分類部２２６は、目標再生時間を単位画像再生時間で割って、総選択画像数を算出する。

ステップＳ５０８において、画像分類部２２６は、各クラスタを正規化する。各クラスタの正規化とは、各クラスタ間の画像数の比率を維持しつつ、各クラスタに含まれる画像数の合計が総選択画像数になるように、各クラスタに含める画像の数を決定することである。各クラスタを正規化した後の各クラスタに含める画像の数を各クラスタの目標画像数と呼ぶ。
画像分類部２２６は、再生期間内に撮影された総画像数に対する総選択画像数の割合を算出し、算出した割合を、正規化前の各クラスタに含まれる画像数に乗算することで、各クラスタを正規化して、各クラスタの目標画像数とする。なお、ここで正規化を行う際に、クラスタ内の画像の数が少ないと正規化により目標画像数が０（ゼロ）となってしまう場合があるため、小数点以下を切り上げる。図８の第３ヒストグラム８０３は、各クラスタの目標画像数の例を示す。

画像分類部２２６は、画像として静止画、及び、動画が同じクラスタに混在するとき、クラスタに含める静止画の数、及び、動画の数の比率を決定する。静止画の数、及び、動画の数の比率は、各クラスタに含まれる静止画の数、及び、動画の数の比率としてもよく、ユーザによって指定された比率でもよく、予め設定された比率でもよい。そして、画像分類部２２６は、クラスタごとに、目標画像数に基づいて、各クラスタに含める静止画の数、及び、動画の数を決定する。第４ヒストグラム８０４は、正規化後の各クラスタに含める静止画の数、及び、動画の数の例を示す。第４ヒストグラム８０４の斜線の網掛け部は動画であり、点の網掛け部は静止画を表す。

ステップＳ５０９において、画像選択部２２７は、クラスタごとに、動画再生基準での総合評価値が高い順に、クラスタに対応する目標画像数の画像を選択する。静止画、及び、動画が混在するクラスタについては、画像選択部２２７は、ステップＳ５０７で決定した数の静止画を総合評価値が高い順に選択し、ステップＳ５０７で決定した数の動画を総合評価値が高い順に選択する。なお、画像選択部２２７は、ダイジェスト動画に使われる画像の種別を増やすために、総合評価値を使わずに、評価項目ごとに評価値の高い画像を選択してもよい。ステップＳ５０９で画像選択部２２７が選択した画像が第１画像群である。
ステップＳ５１０において、ダイジェスト動画部２２３は、ステップＳ５０９で選択された画像を、撮影時刻に基づいて時系列順に並び替える。

ステップＳ５１１において、ダイジェスト動画部２２３は、ステップＳ５１０で並び替えられた画像を１つの結合し、ダイジェスト動画４００を生成する。
ステップＳ５１２において、ダイジェスト動画部２２３は、ステップＳ５１０で生成したダイジェスト動画４００を第１表示部２０７に再生する再生制御を行って、再生期間に撮影された画像のダイジェスト再生を行う。ステップＳ５１２で再生されるダイジェスト動画４００が、フォトアルバム印刷前にフォトアルバムに含めるイベントのプレビューとなる。

ステップＳ５１３において、画面管理部２２４は、第１表示部２０７に印刷メニュー画面を表示する制御を行う。印刷メニュー画面において、ユーザは、ダイジェスト動画４００の再生によってプレビューされたイベントを印刷するか否かを指定できる。
ステップＳ５１４において、画面管理部２２４は、第１操作部２０１からの情報に基づいて、ユーザが印刷を選択したか否かを判定する。画面管理部２２４は、ユーザが印刷を選択したとき処理をステップＳ５１５に進め、ユーザが印刷を選択していないとき再度ステップＳ５１４を実行する。

ステップＳ５１５において、画像評価部２２５は、ステップＳ５０１で指定された画像群に含まれるそれぞれの画像を、画像のデータのヘッダに記録された撮影情報に基づいて、印刷基準で評価する。印刷基準は、印刷に適した画像の評価が高くなる評価基準である。
印刷基準での評価項目には、例えば、動画再生基準と共通の評価項目であるサイズ評価と、位置評価と、笑顔評価と、ブレ評価と、コントラスト評価と、白とび評価と、動き評価とが含まれる。

まず、図６（ａ）を参照して、印刷基準でのサイズ評価について説明する。線６０２が、印刷基準でのサイズ評価を表す。図６（ａ）に示すように、印刷基準では、顔サイズが大きくなるに従って、線６０１に示す動画再生基準でのサイズ評価以下の範囲で、サイズ評価が高くなる。そして、印刷基準でのサイズ評価は、顔サイズが２０％より大きく８０％未満の顔サイズについて、対応する動画再生基準でのサイズ評価より、低くなる。すなわち、サイズ評価について、印刷基準は動画再生基準より厳しい。
次に、図６（ｂ）を参照して、印刷基準での位置評価について説明する。線６０４が、印刷基準での位置評価を表す。図６（ｂ）に示すように、印刷基準では、顔位置が画像に中心にくるに従って、線６０３に示す動画再生基準での位置評価以下の範囲で、位置評価が高くなる。そして、印刷基準での位置評価は、２．５％より大きく６０％未満の顔位置について、対応する動画再生基準での位置評価より、低くなる。このように、位置評価について、印刷基準は動画再生基準より厳しい。

次に、図６（ｃ）を参照して、印刷基準での笑顔評価について説明する。線６０６が、印刷基準での笑顔評価を表す。図６（ｃ）に示すように、印刷基準では、笑顔度が大きくなるに従って、線６０５に示す動画再生基準での笑顔評価以下の範囲で、笑顔評価が高くなる。そして、印刷基準での笑顔評価は、０（ゼロ）より大きく１３００未満の笑顔度について、対応する動画再生基準での笑顔評価より、低くなる。このように、笑顔評価について、印刷基準は動画再生基準より厳しい。

次に、ブレ評価について説明する。印刷基準では、ブレ量が小さくなるに従って、対応する動画再生基準でのブレ評価以下の範囲で、ブレ評価が高くなる。そして、印刷基準でのブレ評価は、予め設定された範囲のブレ量について、対応する動画再生基準でのブレ評価より、低くなる。このように、ブレ評価について、印刷基準は動画再生基準より厳しい。
フォトアルバム中の１ページ又は見開きの２ページの中に静止画が印刷されるため、ユーザの見かた次第では、時間的に画面変化のある動画再生よりも注視して見る可能性が高い。したがって、ブレ評価ついて、印刷基準を動画再生基準より厳しくする。

特に動画に関しては、１つの動画から複数フレームを抜粋し、フォトアルバムのページ内に配置することを本実施形態では想定している。動画では被写体の動きを撮影するケースが多いため、撮影されたフレームには被写体ブレが発生している可能性が高い。動画として再生する場合は、ユーザには気づかれないレベルのブレも、印刷用に１フレーム抜粋された場合はそのブレに気づいてしまうことがある。そのため、各フレームにおける被写体ブレに対して、動画再生基準でブレとして許容されているレベルよりも、印刷基準ではより厳しく判定することで被写体ブレ画像が印刷される可能性を低減させる。

次に、コントラスト評価について説明する。印刷基準では、コントラストが高くなるに従って、対応する動画再生基準でのコントラスト評価以下の範囲で、コントラスト評価が高くなる。そして、印刷基準でのコントラスト評価は、予め設定された範囲のコントラストについて、対応する動画再生基準でのコントラスト評価より、低くなる。このように、コントラスト評価について、印刷基準は動画再生基準より厳しい。
次に、白とび評価について説明する。印刷基準では、白とびサイズが小さくなるに従って、対応する動画再生基準での白とび評価以下の範囲で、白とび評価が高くなる。そして、印刷基準での白とび評価は、予め設定された範囲の白とびサイズについて、対応する動画再生基準での白とび評価より、低くなる。このように、白とび評価について、印刷基準は動画再生基準より厳しい。

次に、図７（ｅ）を参照して、動き評価について説明する。線７０２が、印刷基準での動き評価を表す。図７（ｅ）に示すように、印刷基準では、動きベクトル累積量が小さくなるに従って、動き評価が高くなる。すなわち、印刷基準では、被写体が安定しているほど、動き評価が高くなる。
また、印刷基準では、動画再生基準と同様に、動画については、フレームごとの変動を踏まえた評価としてもよい。例えば、印刷基準では、笑顔度が安定して高い動画や、後半で笑顔度が最大になる動画の評価を高くする。そして、画像選択部２２７は、後述のステップＳ５１６において、動画について、笑顔度が安定して高い動画、及び、後半で笑顔度が最大になる動画をそれぞれ選択してもよい。
画像評価部２２５は、それぞれの評価項目についての印刷基準での評価値を合計して、印刷基準での総合評価値を取得する。

ステップＳ５１６において、画像選択部２２７は、クラスタごとに、印刷基準での総合評価値が高い順に、画像を選択する。画像選択部２２７がクラスタごとに選択する画像の数は、ステップＳ５０９と同様にクラスタに対応する目標画像数でもよく、ユーザが設定した数でもよい。静止画、及び、動画が混在するクラスタについては、画像選択部２２７は、ステップＳ５０９の場合と比べて、動画の割合を小さくする。ステップＳ５１６で画像選択部２２７が選択した画像が第２画像群である。
ステップＳ５１７において、画像選択部２２７は、ステップＳ５０９で選択された第１画像群、及び、ステップＳ５１６で選択された第２画像群の少なくともいずれかに動画が含まれるとき、動画からフレームを選択する。より具体的には、画像選択部２２７は、時間軸上で隣接する２つのフレームが予め設定された時間間隔以上の時間間隔を持つように、フレームを選択する。画像選択部２２７は、動画の各フレームを印刷基準で評価して、高評価のフレームを選択してもよい。

ステップＳ５１８において、画像送信部２２８は、ステップＳ５０９で選択された第１画像群に含まれる画像、及び、ステップＳ５１６で選択された第２画像群に含まれる画像を、サーバ１３０に送信する。第１画像群に含まれる動画、及び、第２画像群に含まれる動画については、動画自体を送信するのではなく、ステップＳ５１７で選択されたフレームを送信する。また、画像送信部２２８は、クラスタ情報をサーバ１３０に送信する。クラスタ情報は、それぞれの画像に対するクラスタについての情報であり、ステップＳ５０４で決定された総クラスタ数を含む。サーバ１３０は、第１画像群に含まれる画像、及び、第２画像群に含まれる画像を受信する。

［フォトアルバム確認印刷処理］
次に、図９を参照して、フォトアルバム確認印刷処理について説明する。図９は、フォトアルバム確認印刷処理のフローチャートである。フォトアルバム確認印刷処理は、サーバ１３０が行う処理であり、図３のステップＳ３０４、及び、Ｓ３０７に対応する処理である。
ステップＳ９０１において、サーバ１３０の第３ＣＰＵ２７０は、フォトアルバムのページ数を決定する。本実施形態では、第３ＣＰＵ２７０は、１つのクラスタが見開き２ページに対応するものとして、総クラスタ数からフォトアルバムのページ数を決定する。
ステップＳ９０２において、第３ＣＰＵ２７０は、第１画像群に含まれる画像を用いて、クラスタ情報に基づいてフォトアルバムのレイアウトを決定して、画像を配置する。第３ＣＰＵ２７０は、見開き２ページに、第１画像群の同じクラスタに含まれる画像を配置する。

ステップＳ９０３において、第３ＣＰＵ２７０は、プレビュー画面４１０の情報を生成して、ユーザが持つ通信装置１２０に送信することで通信装置１２０が第２表示部２５３にプレビュー画面４１０を表示する。このとき、通信装置１２０の第２ＣＰＵ２５０は、プレビュー画面４１０を第２表示部２５３に表示させる表示制御を行う。通信装置１２０とサーバ１３０との通信には例えばＷｅｂが使われ、ユーザはＷｅｂ上でプレビュー画面４１０を確認できる。
ここで、図１０を参照して、プレビュー画面４１０について説明する。図１０は、プレビュー画面４１０の例を示す図である。プレビュー画面４１０は、ユーザが印刷対象の画像を決定できる画面であり、決定画面の例である。プレビュー画面４１０には、プレビュー部１００１と、候補画像部１００２と、お勧め表示部１００３と、画像一覧部１００４と、カーソル１００５と、印刷ボタン１００６とが含まれる。

プレビュー部１００１は、フォトアルバムの印刷プレビューを表示する。初期表示の状態のプレビュー部１００１には、ステップＳ９０２で配置されたように画像が表示される。
候補画像部１００２は、カーソル１００５で指定されたページの候補画像を表示する。第３ＣＰＵ２７０は、カーソル１００５で指定されたページのクラスタが表す画像の撮影期間や類似シーン等に基づいて、候補画像を決定する。例えば、第３ＣＰＵ２７０は、カーソル１００５で指定されたページのクラスタに含まれる第２画像群の画像を、カーソル１００５で指定されたページの候補画像に含める。また、第３ＣＰＵ２７０は、カーソル１００５で指定されたページのクラスタに含まれる第１画像群の画像を、カーソル１００５で指定されたページのクラスタの候補画像に含めてもよい。

図１０の例では、カーソル１００５で指定されたページには、動画のフレームが表示されているが、このフレームはブレ量が大きい。しかし、候補画像部１００２には、同じ動画のフレームの中でも被写体のブレ量が小さい画像が高評価としてユーザに勧められており、ユーザは、候補画像部１００２の画像を選択することで、カーソル１００５で指定されたページの画像を交換できる。図１１は、図１０のプレビュー画面４１０でのカーソル１００５があるページの画像を、ユーザの操作に基づいて、お勧め表示部１００３に表示された画像に変更した後のプレビュー画面４１０の例を示す。
また、本実施形態のように、画像の撮影時間に基づいて、画像のクラスタに分類した場合、同じクラスタに異なる場所で撮影された画像が、フォトアルバムの見開きに混じることがある。これを回避するために、ユーザは、候補画像部１００２の画像から画像を選んで、画像を交換できる。

お勧め表示部１００３は、候補画像部１００２に表示される候補画像のお勧め度を表示する。第３ＣＰＵ２７０は、印刷評価基準に基づいて候補画像のお勧め度を決定する。例えば、第３ＣＰＵ２７０は、印刷評価基準での総合評価値が最も大きい候補画像のお勧め度を「◎」とする。第３ＣＰＵ２７０は、２番目に総合評価値が大きい候補画像のお勧め度を「○」とする。第３ＣＰＵ２７０は、３番目に総合評価値が大きい候補画像のお勧め度を「△」とする。第３ＣＰＵ２７０は、最も総合評価値が小さい候補画像のお勧め度を「×」とする。お勧め表示部１００３によって、ユーザは、変更する画像を容易に選択できる。
画像一覧部１００４は、第１画像群、及び、第２画像群に含まれる全ての画像を表示する。
ユーザは、プレビュー画面４１０での操作によって、候補画像部１００２や画像一覧部１００４に表示された画像を使って、プレビュー部１００１に表示された画像を交換することや、プレビュー部１００１の画像の配置を変更することができる。

ステップＳ９０４において、第３ＣＰＵ２７０は、第３通信インタフェース２７３を介して通信装置１２０から受信する情報に基づいて、ユーザがプレビュー画面４１０の印刷ボタン１００６を押下したか否かを判定する。第３ＣＰＵ２７０は、ユーザが印刷ボタン１００６を押下したとき処理をステップＳ９０５に進め、押下していないとき処理をステップＳ９０６に進める。

ステップＳ９０５において、第３ＣＰＵ２７０は、プレビュー画面４１０のプレビュー部１００１の表示になるように、印刷部２７２にフォトアルバムを印刷させる印刷制御を行う。これにより、フォトアルバムが印刷される。
ステップＳ９０６において、第３ＣＰＵ２７０は、第３通信インタフェース２７３を介して、通信装置１２０から受信するプレビュー画面４１０でのユーザの操作の情報に基づいて、プレビュー部１００１の画像の変更や、配置の変更を行う。そして、第３ＣＰＵ２７０は、プレビュー画面４１０の情報を更新して、ユーザが持つ通信装置１２０に送信することで通信装置１２０が第２表示部２５３にプレビュー画面４１０を表示する。

以上説明したように、デジタルカメラ１１０は、動画再生基準で選択された画像をダイジェスト動画として連続再生する。また、通信装置１２０は、プレビュー画面４１０を表示する。プレビュー画面４１０では、ユーザは、動画再生基準で選択された画像、及び、印刷基準で選択された画像から、印刷する画像を決定できる。よって、ユーザは、ダイジェスト動画のシーンについて、ダイジェスト動画として再生された画像と異なる基準で選択された画像を印刷対象にできる。したがって、ダイジェスト動画として再生された画像が印刷に適さない画像があっても、ユーザは、印刷に適した画像に変更できる可能性が高まる。また、ユーザがプレビュー画面４１０で選択できる画像は、動画再生基準で選択された画像、及び、印刷基準で選択された画像であり、多数の画像から選抜されている。このため、画像が多数ある場合であっても、容易に質の高いフォトアルバムを作成できる。
また、印刷基準は動画再生基準より厳しい基準であるため、印刷基準で評価の高い画像は印刷に適した画像となる。よって、ユーザは、プレビュー画面４１０で印刷に適した画像を選択できる。したがって、質の高いフォトアルバムを作成できる。

また、ダイジェスト再生する際に、特許文献１のように、音声レベルだけで画像を抽出すると、一定箇所のシーンばかりが抽出されてしまうことがある。例えばゴールシーン等の観客の盛り上がりを抽出するには特許文献１は適しているが、ゴールシーンがそのゴールシーンに至る経緯が分からず、ベストショットの連続がダイジェスト再生されてしまうこととなる。
一方、本実施形態では、デジタルカメラ１１０は、画像群に含まれる画像を撮影時刻に基づいてクラスタに分類し、クラスタごとにダイジェスト再生用の画像を動画再生基準で評価して選択する。したがって、一定箇所のシーンばかりが抽出されることを回避できる。
また、本実施形態では、ダイジェスト動画がフォトアルバムのプレビューの役割を果たし、ユーザがダイジェスト動画を気に入ったときは、印刷メニュー画面で、フォトアルバムの印刷を実行できる。したがって、ユーザは簡単にフォトアルバムを作成できる。

また、動画再生基準で評価されて選択された画像のみからフォトアルバムを作成すると、印刷された結果から受ける印象が、ダイジェスト動画の印象と異なる場合がある。これは、ダイジェスト動画に使われる画像は、動画再生基準で評価が高く動画に適した画像であるためであり、必ずしも印刷に適しているとはいえないためである。例えば、動画再生基準で選択される画像のカテゴリには動画があり、動画再生基準で選択される画像は、多少のブレがあったとしても、動画としての面白み（笑顔度合いの変化や時系列的な画角変化等）が優先される。しかしながら、フォトアルバムとして印刷する画像として、動画再生基準で選択された動画を使う場合、動画から抜粋したフレームが静止画としてページ内に配置されるため、動画では許容されていた少々のブレが許容できないケースが想定される。
本実施形態では、ユーザは、プレビュー画面４１０において、印刷基準で選択された画像を選択できる。したがって、多数の画像からユーザが画像を選択する煩わしさが解消され、かつ、質の高いフォトアルバムをユーザが容易に作成できる。

また、動画再生基準で評価されて選択された画像のみからフォトアルバムを作成すると、図１２に示すようなフォトアルバムになることがある。第４ページ１２０１では、ブレ量の大きい画像が印刷されているがブレ量の小さい画像が好ましい。また、第６ページ１２０２、及び、第７ページ１２０３では、被写体が画像の端にあって、被写体が見開きの中心に配置される画像が印刷されるが、中央に被写体が写された画像が好ましい。また、第１０ページ１２０４を含む見開きには、動画のコマ割り方式で画像が印刷されており最後の画像で被写体が欠けているが、被写体が欠けていない画像が好ましい。
ここで挙げた好ましい画像をユーザがデジタルカメラ１１０で撮影している場合は、印刷評価基準によって選択されている可能性が高くなる。よって、本実施形態では、ユーザは、ここで挙げた好ましい画像をプレビュー画面４１０でフォトアルバムに印刷する画像として選択することで、質の高いフォトアルバムを容易に作成できる。

［その他の実施形態］
上記の通信装置１２０はプリンタ等の印刷可能な装置であってもよい。このとき、通信装置１２０は、上記の実施形態のサーバ１３０の機能を備え、情報処理システム１００は、デジタルカメラ１１０と、デジタルカメラ１１０と通信可能な通信装置１２０と、で構成される。
また、上記の実施形態では、記録媒体２３０に記録された各動画の長さは単位画像再生時間である４秒としたが、記録媒体２３０に記録された各動画の長さは単位画像再生時間に限定されるものではない。
単位画像再生時間より長い動画については、図５のステップＳ５０９において、画像選択部２２７は、例えば、動画再生基準で評価の高い単位画像再生時間の長さ部分を１つの動画として扱う。また、ステップＳ５１６において、画像選択部２２７は、例えば、印刷基準で評価の高い単位画像再生時間の長さ部分を１つの動画として扱う。

本発明は、上記の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
以上、本発明を実施形態と共に説明したが、上記実施形態は本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。

１００ 情報処理システム、１１０ デジタルカメラ、１２０ 通信装置、１３０ サーバ

Claims (27)

1. 複数の画像からなる画像群に含まれるそれぞれの画像を、ダイジェスト再生の基準である第１評価基準で評価する第１評価手段と、
   前記第１評価手段による評価に基づいて、前記画像群から画像を選択する第１選択手段と、
   前記画像群に含まれるそれぞれの画像を、前記第１評価基準とは異なる第２評価基準で評価する第２評価手段と、
   前記第２評価手段による評価に基づいて、前記画像群から画像を選択する第２選択手段と、
   前記第１選択手段によって選択された画像、及び、前記第２選択手段によって選択された画像に基づいて、ユーザが印刷対象の画像を決定できる決定画面を表示する制御を行う表示制御手段と、を備えることを特徴とする情報処理システム。
2. 前記第１評価基準、及び、前記第２評価基準には、共通の評価項目に対する基準が含まれ、
   前記共通の評価項目の少なくとも一つに対して、前記第２評価基準は、前記第１評価基準より厳しいことを特徴とする請求項１に記載の情報処理システム。
3. 前記共通の評価項目は、画像のブレ量の評価であるブレ評価、画像における顔サイズの評価であるサイズ評価、画像における顔位置の評価である位置評価、画像に写された顔の笑顔の評価である笑顔評価、画像のコントラストの評価であるコントラスト評価、画像の白とびの評価である白とび評価、及び、被写体の動きの評価である動き評価のうち少なくともいずれか一つを含むことを特徴とする請求項２に記載の情報処理システム。
4. 前記第１評価基準、及び、前記第２評価基準の評価項目には前記ブレ評価の基準が含まれ、
   前記第１評価基準では、前記ブレ量が小さくなるに従って、前記ブレ評価が高くなり、
   前記第２評価基準では、前記ブレ量が小さくなるに従って、前記第１評価基準での前記ブレ評価以下の範囲で、前記ブレ評価が高くなり、
   前記第２評価基準での前記ブレ評価は、予め設定された範囲の前記ブレ量について、前記第１評価基準での前記ブレ評価より、低くなることを特徴とする請求項３に記載の情報処理システム。
5. 前記第１評価基準、及び、前記第２評価基準の評価項目には前記サイズ評価の基準が含まれ、
   前記第１評価基準では、前記顔サイズが大きくなるに従って、前記サイズ評価が高くなり、
   前記第２評価基準では、前記顔サイズが大きくなるに従って、前記第１評価基準での前記サイズ評価以下の範囲で、前記サイズ評価が高くなり、
   前記第２評価基準での前記サイズ評価は、予め設定された範囲の前記顔サイズについて、前記第１評価基準での前記サイズ評価より、低くなることを特徴とする請求項３又は４に記載の情報処理システム。
6. 前記第１評価基準、及び、前記第２評価基準の評価項目には前記位置評価の基準が含まれ、
   前記第１評価基準では、前記顔位置が画像の中心に近づくに従って、前記位置評価が高くなり、
   前記第２評価基準では、前記顔位置が画像の中心に近づくに従って、前記第１評価基準での前記位置評価以下の範囲で、前記位置評価が高くなり、
   前記第２評価基準での前記位置評価は、予め設定された範囲の前記顔位置について、前記第１評価基準での前記位置評価より、低くなることを特徴とする請求項３乃至５のいずれか１項に記載の情報処理システム。
7. 前記第１評価基準、及び、前記第２評価基準の評価項目には前記笑顔評価の基準が含まれ、
   前記第１評価基準では、画像に写された顔の笑顔を表す笑顔度が大きくなるに従って、前記笑顔評価が高くなり、
   前記第２評価基準では、前記笑顔度が大きくなるに従って、前記第１評価基準での前記笑顔評価以下の範囲で、前記笑顔評価が高くなり、
   前記第２評価基準での前記笑顔評価は、予め設定された範囲の前記笑顔度について、前記第１評価基準での前記笑顔評価より、低くなることを特徴とする請求項３乃至６のいずれか１項に記載の情報処理システム。
8. 前記第１評価基準、及び、前記第２評価基準の評価項目には前記コントラスト評価の基準が含まれ、
   前記第１評価基準では、前記コントラストが高くなるに従って、前記コントラスト評価が高くなり、
   前記第２評価基準では、前記コントラストが高くなるに従って、前記第１評価基準での前記コントラスト評価以下の範囲で、前記コントラスト評価が高くなり、
   前記第２評価基準での前記コントラスト評価は、予め設定された範囲の前記コントラストについて、前記第１評価基準での前記コントラスト評価より、低くなることを特徴とする請求項３乃至７のいずれか１項に記載の情報処理システム。
9. 前記第１評価基準、及び、前記第２評価基準の評価項目には前記白とび評価の基準が含まれ、
   前記第１評価基準では、前記白とびの領域のサイズである白とびサイズが小さくなるに従って、前記白とび評価が高くなり、
   前記第２評価基準では、前記白とびサイズが小さくなるに従って、前記第１評価基準での前記白とび評価以下の範囲で、前記白とび評価が高くなり、
   前記第２評価基準での前記白とび評価は、予め設定された範囲の前記白とびサイズについて、前記第１評価基準での前記白とび評価より、低くなることを特徴とする請求項３乃至８のいずれか１項に記載の情報処理システム。
10. 前記第１評価基準、及び、前記第２評価基準の評価項目には前記動き評価の基準が含まれ、
    前記第１評価基準では、被写体の動きが大きくなるに従って前記動き評価が高くなり、
    前記第２評価基準では、被写体の動きが小さくなるに従って前記動き評価が高くなることを特徴とする請求項３乃至９のいずれか１項に記載の情報処理システム。
11. 前記第１評価手段は、前記画像群に含まれるそれぞれの画像、及び、画像の撮影時の情報の少なくともいずれかに基づいて、画像を評価し、
    前記第２評価手段は、前記画像群に含まれるそれぞれの画像、及び、画像の前記撮影時の情報の少なくともいずれかに基づいて、画像を評価することを特徴とする請求項１乃至１０のいずれか１項に記載の情報処理システム。
12. 前記第１選択手段によって選択された画像を連続再生する制御を行う再生制御手段を更に備えることを特徴とする請求項１乃至１１のいずれか１項に記載の情報処理システム。
13. 前記決定画面で決定された画像を印刷する制御を行う印刷制御手段を更に備えることを特徴とする請求項１乃至１２のいずれか１項に記載の情報処理システム。
14. ユーザが指定する期間に撮影された画像を前記画像群に含まれる画像と指定する指定手段を更に備えることを特徴とする請求項１乃至１３のいずれか１項に記載の情報処理システム。
15. 前記画像群に含まれる画像を撮影時刻に基づいて複数のグループに分類する分類手段を更に備え、
    前記第１選択手段は、前記分類手段によって分類された前記グループごとに、前記第１評価手段による評価に基づいて画像を選択し、
    前記第２選択手段は、前記分類手段によって分類された前記グループごとに、前記第２評価手段による評価に基づいて画像を選択することを特徴とする請求項１乃至１４のいずれか１項に記載の情報処理システム。
16. 前記表示制御手段は、前記第１選択手段によって選択された画像を印刷対象の画像とした前記決定画面を初期表示する制御を行うことを特徴とする請求項１乃至１５のいずれか１項に記載の情報処理システム。
17. 前記表示制御手段は、前記第２選択手段によって選択された画像を印刷対象の候補となる画像とした前記決定画面を初期表示する制御を行うことを特徴とする請求項１乃至１６のいずれか１項に記載の情報処理システム。
18. 前記表示制御手段は、印刷対象の画像が撮影された時間帯と同じ時間帯に撮影された画像を印刷対象の候補となる画像とした前記決定画面を表示する制御を行うことを特徴とする請求項１乃至１７のいずれか１項に記載の情報処理システム。
19. 前記表示制御手段は、印刷対象の候補となる画像を前記第２評価基準で評価した情報を表示する制御を行うことを特徴とする請求項１乃至１８のいずれか１項に記載の情報処理システム。
20. 前記決定画面は、複数のページについての印刷プレビューを含むことを特徴とする請求項１乃至１９のいずれか１項に記載の情報処理システム。
21. 前記表示制御手段は、ユーザによって指定された前記印刷プレビューのページについての印刷対象の候補となる画像を表示する制御を行うことを特徴とする請求項２０に記載の情報処理システム。
22. 前記第２選択手段が前記画像群から選択する画像の中の動画の割合は、前記第１選択手段が前記画像群から選択する画像の中の動画の割合より、小さいことを特徴とする請求項１乃至２１のいずれか１項に記載の情報処理システム。
23. 前記第２選択手段は、選択した画像に動画が含まれるとき、選択した動画から複数のフレームを選択することを特徴とする請求項１乃至２２のいずれか１項に記載の情報処理システム。
24. 前記第２選択手段は、時間軸上で隣接する２つのフレームが予め設定された時間間隔以上の時間間隔を持つように、選択した動画から複数のフレームを選択することを特徴とする請求項２３に記載の情報処理システム。
25. 複数の画像からなる画像群に含まれるそれぞれの画像を、ダイジェスト再生の基準である第１評価基準で評価する第１評価手段と、
    前記第１評価手段による評価に基づいて、前記画像群から画像を選択する第１選択手段と、
    前記画像群に含まれるそれぞれの画像を、前記第１評価基準とは異なる第２評価基準で評価する第２評価手段と、
    前記第２評価手段による評価に基づいて、前記画像群から画像を選択する第２選択手段と、
    前記第１選択手段によって選択された画像、及び、前記第２選択手段によって選択された画像に基づいて、ユーザが印刷対象の画像を決定できる決定画面を表示する制御を行う表示制御手段と、を備えることを特徴とする情報処理装置。
26. 複数の画像からなる画像群に含まれるそれぞれの画像を、ダイジェスト再生の基準である第１評価基準で評価する第１評価ステップと、
    前記第１評価ステップによる評価に基づいて、前記画像群から画像を選択する第１選択ステップと、
    前記画像群に含まれるそれぞれの画像を、前記第１評価基準とは異なる第２評価基準で評価する第２評価ステップと、
    前記第２評価ステップによる評価に基づいて、前記画像群から画像を選択する第２選択ステップと、
    前記第１選択ステップによって選択された画像、及び、前記第２選択ステップによって選択された画像に基づいて、ユーザが印刷対象の画像を決定できる決定画面を表示する制御を行う表示制御ステップと、を備えることを特徴とする情報処理方法。
27. コンピュータを、請求項２５に記載された情報処理装置の各手段として機能させるためのプログラム。

Images