JP2011081509A - 画像処理システムおよび画像処理装置 - Google Patents

Abstract

【課題】遠隔地で撮像される画像を使用して簡便に、かつシームレスに再生することができるようにする。
【解決手段】本発明の画像処理システムにおいては、携帯端末は画像を撮像し、画像に関する画像データを記憶し、画像データが更新されたことを検知し、画像データが更新されたことが検知された場合、新たな画像データを情報管理装置に対して送信し、画像処理装置は、画像を表示し、情報管理装置から情報管理装置の写真データベースが更新されたことを示す更新通知を受信し、更新通知が受信された後、写真データベースに新たに記憶された画像データを情報管理装置から受信し、受信された画像データから特徴量を抽出し、抽出された画像データの特徴量に基づいて、予め定義されるテンプレートファイルに従ったスライドショーを生成し、生成された前記スライドショーを前記表示手段を用いて再生することを特徴とする。
【選択図】 図１

Description

本発明は画像処理システムおよび画像処理装置に係り、特に、遠隔地で撮像される画像を使用してシームレスに再生することができるようにした画像処理システムおよび画像処理装置に関する。

従来から、ユーザがハードディスクなどに記録される画像を指定すると、指定された画像にエフェクト処理と呼ばれる編集処理を施し、予め用意された音楽（ＢＧＭ）に合わせて画像を順次表示するコンテンツを作成する画像編集技術が知られている。また、このような画像編集技術に関連した技術として、予め定義されるテンプレートによって、ユーザが保有する画像の特徴量から類似写真を使用する一連の動画（スライドショー）を生成する技術が提案されている（例えば特許文献１参照）。特許文献１に提案される技術によれば、テンプレートファイルには、静止画または動画が挿入される素材枠、画像に対するエフェクト、画像の再生中に流れる楽曲であるＢＧＭ、および画像と画像の切替え方式であるトランジションが、タイムコードに応じて予め定義されており、動画作成装置は、ユーザにより選択されたテンプレートファイルの素材枠それぞれのメタデータを解析するとともに、ユーザが保有する画像のメタデータも解析し、メタデータが一致する画像を、テンプレートファイルの素材枠に挿入する。これにより、楽曲やエフェクトなどによる効果的な演出を有する動画データをより簡単に作成することができる。

特開２００９−５５１５２号公報

しかしながら、特許文献１に提案される技術では、あくまでも動画作成装置の内部に記録される画像を用いて画像編集処理を行い、予め用意された音楽に合わせて画像を順次表示するコンテンツを作成するにすぎない。そのため、従来の動画作成装置は、動画作成装置に対して遠隔地に存在する携帯端末（携帯電話機など）が撮像する画像を逐次取得し、逐次取得される画像をシームレスに再生することはできない。

本発明は、このような状況に鑑みてなされたものであり、遠隔地で撮像される画像を使用して簡便に、かつシームレスに再生することができる画像処理システムおよび画像処理装置を提供することを目的とする。

本発明の画像処理システムは、上述した課題を解決するために、携帯端末と、携帯端末とネットワークを介して接続されて携帯端末に同期して動作可能な情報管理装置と、情報管理装置とネットワークを介して接続されて情報管理装置に同期して動作可能な画像処理装置を備える画像処理システムにおいて、携帯端末は、画像を撮像し、撮像される画像に関する画像データを記憶し、記憶される画像データが更新されたことを検知し、記憶される画像データが更新されたことが検知された場合、記憶される新たな画像データを情報管理装置に対して送信し、情報管理装置は、携帯端末から携帯端末に記憶される新たな画像データを受信し、受信された新たな画像データを写真データベースに記憶し、写真データベースが更新されたことを検知し、写真データベースが更新されたことが検知された場合、写真データベースが更新されたことを示す更新通知を携帯端末と画像処理装置に送信し、画像処理装置は、画像を表示し、情報管理装置から情報管理装置の写真データベースが更新されたことを示す更新通知を受信し、更新通知が受信された後、情報管理装置の写真データベースに新たに記憶された画像データを情報管理装置から受信し、受信された画像データから特徴量を抽出し、抽出された画像データの特徴量に基づいて、予め定義されるテンプレートファイルに従ったスライドショーを生成し、生成されたスライドショーを再生することを含むことを特徴とする。

本発明の画像処理装置は、上述した課題を解決するために、画像を表示する表示手段と、情報管理装置とネットワークを介して接続され、この情報管理装置の写真データベースに新たに記憶された画像データを取得する画像データ取得手段と、画像データ受信手段により受信された画像データから特徴量を抽出する抽出手段と、抽出出段により抽出された画像データの特徴量に基づいて、予め定義されるテンプレートファイルに従ったスライドショーを生成する生成手段と、生成手段により生成されたスライドショーを表示手段を用いて再生する再生手段とを備えることを特徴とする。

本発明によれば、遠隔地で撮像される画像を使用して簡便に、かつシームレスに再生することができる。

本実施形態に係る画像処理システムの全体の概略的な構成を示す図。 携帯端末、サーバ、および画像処理装置における一連の処理を説明するシーケンス図。 携帯端末、サーバ、および画像処理装置における一連の処理を説明するシーケンス図。 デフォルトのスライドショーの例を示す図。 （Ａ）は、画像処理装置の記憶部に格納される写真特徴量テーブルの構成例を示し、（Ｂ）は画像処理装置の記憶部に格納される顔検出ＩＤテーブルの構成例を示し、（Ｃ）は、画像処理装置の制御部が生成する素材リストの例を示す図。 （Ａ）乃至（Ｃ）は顔を使用しない場合のエフェクトの例１を示し、（Ｄ）乃至（Ｆ）は顔を使用する場合のエフェクトの例２を示す図。 デフォルトのスライドショーの再生から新たなスライドショーが再生された後、再度デフォルトのスライドショーが再生される流れを示す図。 デフォルトのスライドショーの再生から新たなスライドショーが再生された後、再度デフォルトのスライドショーが再生される流れを示す図。

以下、本発明の実施の形態について、図面を参照しながら説明する。図１は、本実施形態に係る画像処理システム１の全体の概略的な構成を表している。画像処理システム１には、通信サービスの提供エリアを所望の大きさに分割したセル内に固定無線局である基地局が複数設置される。各基地局には、本実施形態に係る携帯端末１１が無線接続される。各基地局は、携帯電話通信網に接続する。携帯電話機通信網は、インターネット１２に接続される。なお、図１の場合、携帯電話通信網に対して基地局を介して接続される携帯端末１１は簡略的に１つ図示されるが、本実施形態においては、携帯電話通信網に対して基地局を介して接続される携帯端末１１は複数である場合を想定する。また、本実施形態では、携帯端末１１とサーバ１３、画像処理装置１６によって画像処理システム１が構成されているものとして説明するが、携帯端末１１は、必ずしも携帯可能な装置である必要は無く、取得した画像をサーバに送信することができればよい。

携帯端末１１は、制御部２１、記憶部２２、操作部２３、通信部２４、およびＣＣＤ（Charge Coupled Device）カメラからなるカメラ２５を備える。勿論、携帯端末１１は、表示部を備えるようにしてもよい。携帯端末１１の制御部２１は、携帯端末１１を統括的に制御する。携帯端末１１は、例えばW-CDMAと呼ばれる符号分割多元接続方式によって無線接続されてもよいし、他の無線接続方式を用いるようにしてもよい。例えばＧＳＭの接続方式を用いた場合、デジタル変調方式としてＧＭＳＫ（Gaussian Filtered Minimum Shift Keying）が用いられる。携帯端末１１は、ユーザにより操作部２３が操作されることにより、カメラ２５を用いて画像を撮像し、撮像された画像に関する画像信号をデジタル化して所定の圧縮符号化方式により圧縮符号化することにより画像データを生成する。携帯端末１１は、生成された画像データを記憶部２２に記憶する。また、携帯端末１１上で動作する制御プログラムは、記憶部２２に新たな画像データが記憶されて記憶部２２に記憶される画像データが更新されたことを検知すると、記憶部２２から新たな画像データを読み出し、読み出された画像データを、通信部２４を介してインターネット１２を経由してサーバ１３に送信する。携帯端末１１上で動作する制御プログラムが記憶部２２に記憶される画像データが更新されたことを検知する方法として、例えば、制御プログラムは、記憶部２２が格納する特定のフォルダを所要の期間ごとに定期的に監視し、特定のフォルダに変更があるか否かを検知する。

インターネット１２には、各携帯端末１１から携帯電話通信網を介して適宜送信される画像データ（写真に関する情報）を管理するサーバ１３が接続される。サーバ１３は、写真データベース１４が格納される記憶部を有する。サーバ１３は、携帯電話通信網１２を介して各携帯端末１１から新たな画像データを逐次受信し、受信された新たな画像データをサーバ１３の写真データベース１４に保存する。サーバ１３は、記憶部の写真データベース１４に新たな画像データを保存することにより写真データベース１４を変更（更新）した場合、写真データベースを更新したことを、サーバ１３にインターネット１２および携帯電話通信網を介して接続される携帯端末１１（新たな画像データをサーバ１３に送信した携帯端末１１）に通知するとともに、サーバ１３にインターネット１５を介して接続される画像処理装置１６に写真データベース１４を更新したことを通知する。サーバ１３は、公共のファイル共有サービスを提供するインターネット上のサーバを想定する。

画像処理装置１６は、例えば携帯電話機やＰＣ（Personal Computer）である。画像処理装置１６は、制御部３１、記憶部３２、通信部３３、外部出力装置３４、および表示装置３５を備える。画像処理装置１６の制御部３１は、画像処理装置１６を統括的に制御する。画像処理装置１６は、インターネット１５と有線または無線を介して接続する。画像処理装置１６は、写真データベース１４を更新したことを示す更新通知をサーバ１３からインターネット１５を介して受信すると、サーバ１３に対して新たに写真データベース１４に保存された画像データを取得するための取得要求をインターネット１５を介して送信する。サーバ１３は、画像処理装置１６からの取得要求をインターネット１５を介して受信すると、取得要求に従い、写真データベース１４に新たに保存された画像データをインターネット１５を介して画像処理装置１６に送信する。画像処理装置１６は、サーバ１３からインターネット１５を介して写真データベース１４に新たに保存された画像データを受信し、受信された画像データを記憶部３２の特定の記憶領域に保存（記憶）する。画像処理装置１６は、記憶部３２の特定の記憶領域での更新を検知・監視するための監視プログラムを実行しており、画像処理装置１６の制御部３１上で動作する監視プログラムが記憶部３２の特定の記憶領域での更新を検知すると、監視プログラムは、記憶部３２の特定の記憶領域に保存する画像データを読み出し、読み出された画像データを、画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムに渡す。スライドショー生成・再生プログラムは、監視プログラムから渡された画像データから、画像データの特徴量を抽出してその特徴量を記憶部３２に記憶するとともに、特徴量に基づいて、予め定義されるスライドショーのテンプレートファイルに従った一連のスライドショーを再構築（再構成）する。画像処理装置１６上で動作するスライドショー生成・再生プログラムは、再構築された一連のスライドショーを外部出力装置３４を介して表示装置３５に出力する。表示装置３５は、例えばＬＣＤや有機ＥＬなどからなるディスプレイでもよいし、画像処理装置１６の外部に存在するＴＶ、電光掲示板、デジタルサイネージ、デジタルフォトフレームなどでもよい。このとき、画像処理装置１６の外部に存在するＴＶ、電光掲示板、デジタルサイネージ、デジタルフォトフレームは、画像処理装置１６に接続される。勿論、画像処理装置１６の外部出力装置３４に１つの携帯端末１１が接続され、再構築された一連のスライドショーを外部出力装置３４を介して携帯端末１１の表示部に表示するようにしてもよい。

図２と図３のシーケンス図を参照して、図１の携帯端末１１、サーバ１３、および画像処理装置１６における一連の処理を説明する。

ステップＳ１において、携帯端末１１の制御部２１は、通信部２４を制御し、サーバ１３におけるファイル共有サービスへのサインイン要求をネットワーク１２を介してサーバ１３に送信する。サーバ１３におけるファイル共有サービスへのサインイン要求とは、サーバ１３におけるファイル共有サービスを利用する場合に、サーバ１３に接続される装置を認証するための手続きである。サーバ１３は、サーバ１３におけるファイル共有サービスへのサインイン要求を受信すると、携帯端末１１とサーバ１３との間での認証を行い、ステップＳ１１で、サーバ１３におけるファイル共有サービスへのサインイン要求に対する応答を携帯端末１１に対してネットワーク１２を介して送信する。携帯端末１１の通信部２４は、サーバ１３からのサインイン応答を受信する。これにより、携帯端末１１とサーバ１３との間でサインイン手続きが完了し、携帯端末１１は、サーバ１３と同期して動作することが可能となる。

ステップＳ３１において、画像処理装置１６の制御部３１は、通信部３３を制御し、サーバ１３におけるファイル共有サービスへのサインイン要求をネットワーク１５を介してサーバ１３に送信する。サーバ１３は、サーバ１３におけるファイル共有サービスへのサインイン要求を受信すると、画像処理装置１６とサーバ１３との間での認証を行い、ステップＳ１２で、サーバ１３におけるファイル共有サービスへのサインイン要求に対する応答を画像処理装置１６に対してネットワーク１５を介して送信する。画像処理装置の通信部３３は、サーバ１３からのサインイン応答を受信する。これにより、画像処理装置１６とサーバ１３との間でサインイン手続きが完了し、画像処理装置１６は、サーバ１３と同期して動作することが可能となる。

なお、画像処理装置とサーバ１３との間でサインインの手続きが完了し、サーバ１３の写真データベースに画像が記憶されていない場合や、サーバ１３の写真データベースから画像を取得して新たなスライドショーの再生を開始するまでの間に、画像処理装置１６の制御部３１は、表示装置３５を制御し、既に記憶部３２に記憶されている画像データを用いたスライドショー（デフォルトのスライドショー）を再生する。具体的には、画像処理装置１６の制御部３１は、予め定義されるスライドショーのテンプレートファイル（エフェクト番号により示されるテンプレート（エフェクトと呼ばれる））に従った一連のデフォルトのスライドショーを外部出力装置３４を介して表示装置３５に表示させる。図４は、デフォルトのスライドショーの例を示す。図４の場合、１５種類のエフェクトからなるデフォルトのスライドショーであり、スライドショーはスライド１乃至スライド１５により構成される。スライド１は、エフェクト番号１００１に従ったスライドである。以下、同様である。なお、図４の場合、１５種類のエフェクトからなるデフォルトのスライドショーを明示的に記載したが、このような場合限られない。すなわち、図４の１５種類のエフェクトはあくまでも１５種類以上の多数のエフェクトの中から選択されたエフェクトにすぎず、１４種類以下のエフェクトからならデフォルトのスライドショーでもよいし、１６種類以上のエフェクトからならデフォルトのスライドショーでもよい。エフェクトの種類も１５種類以上でもよいし、１５種類未満でもよい。そして、デフォルトのスライドショーを構成するエフェクトの種類は任意に設定可能である。

ステップＳ２において、携帯端末１１の制御部２１は、ユーザにより操作部２３が操作されることによりカメラ２５を制御し、カメラ２５を用いて画像を撮像する。携帯端末１１の制御部２１は、撮像された画像に関する画像信号をデジタル化して所定の圧縮符号化方式により圧縮符号化することにより画像データを生成する。なお、携帯端末１１を用いた画像の撮像処理は、画像処理装置１６との処理とは関係なくユーザの操作により任意のタイミングで行われる。ステップＳ３において、携帯端末１１は、生成された画像データを記憶部２２に記憶する。ステップＳ４において、携帯端末１１の制御部２１上で動作する制御プログラムは、記憶部２２に新たな画像データが記憶されて記憶部２２に記憶される画像データが更新されたことを検知する。ステップＳ５において、携帯端末１１の制御部２１上で動作する制御プログラムは、記憶部２２から新たな画像データを読み出し、読み出された画像データを、通信部２４を介してインターネット１２を経由してサーバ１３に送信する。

ステップＳ１３において、サーバ１３は、いずれかの携帯端末１１からの新たな画像データをインターネット１２および携帯電話通信網を介して受信する。ステップＳ１４において、サーバ１３は、受信された携帯端末１１からの新たな画像データをサーバ１３の写真データベース１４に保存（記憶）する。ステップＳ１５において、サーバ１３は、記憶部の写真データベース１４に新たな画像データを保存することにより写真データベース１４を変更（更新）したことを検知する。ステップＳ１６において、サーバ１３は、記憶部の写真データベース１４に新たな画像データを保存することにより写真データベース１４を変更（更新）したことを検知した場合、写真データベース１４を更新したことを、サーバ１３にインターネット１２および携帯電話通信網を介して接続される携帯端末１１（新たな画像データをサーバ１３に送信した携帯端末１１）に通知するとともに、サーバ１３にインターネット１５を介して接続される画像処理装置１６に写真データベースを更新したことを通知する。

ステップＳ３３において、画像処理装置１６の通信部３３は、写真データベース１４を更新したことを示す更新通知をサーバ１３からインターネット１５を介して受信する。なお、図２と図３の場合、画像処理装置１６の通信部３３が写真データベース１４を更新したことを示す更新通知をサーバ１３から受信したとき、ステップＳ３２におけるデフォルトのスライドショーの再生は終了しているものとする。画像処理装置１６の制御部３１は、通信部３３を制御し、サーバ１３に対して新たに写真データベース１４に保存された画像データを取得するための取得要求をインターネット１５を介して送信する。ステップＳ１７において、サーバ１３は、画像処理装置１６からの取得要求をインターネット１５を介して受信すると、取得要求に従い、写真データベース１４に新たに保存された画像データをインターネット１５を介して画像処理装置１６に送信する。ステップＳ３４において、画像処理装置１６の通信部３３は、サーバ１３からインターネット１５を介して写真データベース１４に新たに保存された画像データを受信する。画像処理装置１６の制御部３１は、受信された画像データを記憶部３２の特定の記憶領域に保存する。ステップＳ３５において、画像処理装置１６の制御部３１は、記憶部３２の特定の記憶領域での更新を検知・監視するための監視プログラムを実行し、画像処理装置１６の制御部３１上で動作する監視プログラムが記憶部３２の特定の記憶領域での更新を検知する。

画像処理装置１６の制御部３１上で動作する監視プログラムは、記憶部３２の特定の記憶領域に保存する画像データを読み出し、読み出された画像データを、画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムに渡す。ステップＳ３４において、画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムは、監視プログラムから渡された画像データから画像データの特徴量を抽出し（インデキシングし）、抽出された特徴量を記述したメタデータ(ファイル)を生成する。具体的には、画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムは、画像データから、写真ＩＤ，写真のファイルサイズ、写真に対応する画像データの生成時刻などの写真に関する情報（以降、特徴量と称する）を抽出してこの特徴量を記述したメタデータを生成する。また、画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムは、画像データから顔を検出し、顔に関する特徴量（例えば顔検出数や検出した顔の位置）を抽出してこの特徴量を記述したメタデータを生成する。画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムは、生成された画像データに関するメタデータを記憶部３２の写真特徴量テーブルに記憶する。

図５（Ａ）は、画像処理装置１６の記憶部３２に格納される写真特徴量テーブルの構成例を示す。図５（Ｂ）は、画像処理装置１６の記憶部３２に格納される顔検出ＩＤテーブルの構成例を示す。図５（Ａ）の写真特徴量テーブルが示すように、写真ごとに生成されたメタデータがレコード１、レコード２、…として記述される。例えば図４（Ａ）の写真特徴量テーブルでは、レコード１の写真ＩＤは「１」であり、ファイルパスは「hoge/photo/pic1.jpg」であり、ファイルサイズは「２５６（Ｍｂｙｔｅ）」であり、生成時刻は「2009:05:29 12:00:30」であり、ＭＩＭＥＴＹＰＥは「jpeg」であり、画像幅は「１６００」であり、画像高さは「１２００」であり、画像向き（回転角）は「０°」であり、顔検出数は「３」であり、顔検出ＩＤは「１，２，３」である。

図５（Ｂ）が示す顔検出ＩＤテーブルが示すように、写真ごとに取得される顔の特徴量が記述されたメタデータがレコード１、レコード２、…として記述される。例えば、図５（Ｂ）の顔検出ＩＤテーブルでは、レコード１の顔検出ＩＤは「１」であり、人物ＩＤは「１」であり、正面度は「８０」であり、左位置は「１００（位置を示す数値）」であり、右位置は「２００（位置を示す数値）」であり、上位置は「８００（位置を示す数値）」であり、下位置は「９００（位置を示す数値）」であり、写真ＩＤは「１」である。

ステップＳ３６において、画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムは、記憶部３２のテーブルに記憶された画像データ（写真）に関する特徴量に基づいて、予め定義されるスライドショーのテンプレートファイル（エフェクト番号により示されるテンプレート（エフェクトと呼ばれる））に従った一連のスライドショーを新たに生成する。具体的には、画像処理装置１６の制御部３１上で動作するスライドショー生成・再生プログラムは、記憶部３２のテーブルに記憶された画像データに関する特徴量に基づいて、新たに生成するスライドショーのテンプレートファイルの再生順番、そのテンプレートファイルで使用される素材としての写真ＩＤ、各テンプレートファイルの再生時間（シーン長さ）などを決定し、素材リスト（ファイル）を生成する。すなわち、スライドショーの生成は「素材リストの生成」を意味する。図５（Ｃ）は、画像処理装置１６の制御部３１が生成する素材リストの例を示す。図５（Ｃ）が示すように、画像処理装置１６の制御部３１が生成する素材リストには、新たなスライドショーを構成するシーンごとにエフェクト番号、素材や素材数、シーン長さなどが対応付けられる。

図６（Ａ）乃至（Ｃ）は顔の特徴量を使用しない場合のエフェクトの例１を示し、図６（Ｄ）乃至（Ｆ）は顔の特徴量を使用する場合のエフェクトの例２を示す。図６（Ａ）乃至（Ｃ）は時系列的に配列されており、図６（Ｄ）乃至（Ｆ）も同様である。エフェクトの例１の場合、２枚の写真(画像データ)が使用され、図６（Ａ）で１枚目の写真が表示され、図６（Ｂ）で２枚目の写真が右隅からスライドインし、図６（Ｃ）で２枚目の写真が１枚目の写真に重畳して表示される。エフェクトの例２の場合、１枚の写真(画像データ)が使用され、図６（Ｄ）で写真が全体表示され、図６（Ｅ）で写真の顔の部分がズームアップし、図６（Ｆ）で写真の顔が中央で拡大表示される。

なお、予め定義されるスライドショーのテンプレートファイルは種々のパターンが考えられる。図６（Ａ）乃至（Ｃ）が示す顔を使用しない場合のエフェクトの例１以外にも、回転したり縮小拡大したり、画像データの全部または一部が透過するようにしたり、画像データに装飾を追加したり、画像データに枠を追加したり、画像データを上下左右に移動するようにしてもよい。また、図６（Ｄ）乃至（Ｆ）が示す顔を使用する場合のエフェクトの例２以外にも、顔の部分だけを抜き出したり、複数の顔を検出したら順に顔の部分を拡大してもよいし、顔の周辺領域の明るさを上げたり、反対に顔の周辺領域の明るさを下げたり、顔以外の部分をぼかしたり、顔の部分にマーカや装飾を追加するようにしてもよい。

このとき、画像処理装置１６上で動作するスライドショー生成・再生プログラムは、一連のスライドショーを新たに生成すると、新たな画像データに基づく新たなスライドショーが生成されたことをユーザに報知する。ユーザへの報知方法としては、例えば、予め設定された動画像データ（「新着ムービー」と称する）を、外部出力装置３４を介して表示装置３５に出力して再生しても良いし、表示装置３５に新たなスライドショーが生成されたことを示す文字列を表示しても良いし、図示しないスピーカから報知音を出力しても良い。

図７は、デフォルトのスライドショーの再生から新たなスライドショーが再生された後、再度デフォルトのスライドショーが再生される流れを示す。図７が示すように、一連のスライドショーを新たに生成すると、新たな画像データに基づく新たなスライドショーが生成されたことを示す新着ムービーが再生される。

ステップＳ３７において、画像処理装置１６上で動作するスライドショー生成・再生プログラムは、生成（再構築）された一連の新たなスライドショーを外部出力装置３４を介して表示装置３５に出力して再生する。図７の場合、５種類のエフェクトからなる新たなスライドショーであり、新たなスライドショーはスライド１乃至スライド５により構成される。スライド１は、新着写真に基づくエフェクト番号１１０３に従ったスライドである。スライド２は、デフォルト写真２枚に基づくエフェクト番号１００３に従ったスライドである。スライド３は、デフォルト写真２枚に基づくエフェクト番号１００８に従ったスライドである。スライド４は、デフォルト写真２枚に基づくエフェクト番号１０１８に従ったスライドである。スライド５は、別の新着写真に基づくエフェクト番号１１０２に従ったスライドである。以下、同様である。なお、５種類以外のエフェクトからなるスライドショーでもよい。

ステップＳ３８において、画像処理装置１６上で動作するスライドショー生成・再生プログラムは、新たに生成されたスライドショーの再生が終了すると、図７が示すようにデフォルトのスライドショーを再生する。

なお、新たに生成されたスライドショーの再生後に、サーバ１３の記憶部に新たに記憶された画像データ（新着写真）を削除するようにしてもよい。この場合、画像処理装置１６上で動作するスライドショー生成・再生プログラムは、新たに生成されたスライドショーの再生が終了すると、新たな画像データ（新着写真）のインデックスを削除するとともに、画像処理装置１６の記憶部３２の特定の記憶領域に保存する新たな画像データ（新着写真）を削除する。これにより、新たな画像データ（新着写真）に基づいて新たな生成されたスライドショーの再生が終了すると、新たな画像データ(新着写真)を削除することができる。なお、携帯端末１１または画像処理装置１６でのユーザから削除操作が入力されたことやサーバ１３からの削除依頼を受信したことをトリガとして、画像処理装置１６上で動作するスライドショー生成・再生プログラムは、画像処理装置１６の記憶部３２の特定の記憶領域に保存する新たな画像データ（新着写真）を削除するようにしてもよい。

その後、ステップＳ３８の終了後、携帯端末１１で画像の撮像が行われる場合は、再度携帯端末１１でステップＳ２乃至Ｓ５までの処理が実行され、サーバ１３でステップＳ１３乃至Ｓ１７までの処理が実行され、画像処理装置１６でステップＳ３２乃至Ｓ３７までの処理が実行される。

なお、図２と図３の場合、画像処理装置１６の通信部３３がサーバ１３から、写真データベース１４を更新したことを示す更新通知を受信したとき、ステップＳ３２におけるデフォルトのスライドショーの再生は終了しているものとしたが、デフォルトのスライドショーや生成したスライドショーを繰り返し再生する場合や、デフォルトのスライドショーまたは生成したスライドショーの再生が完了するまでにサーバ１３から新たな画像データを受信する場合も考えられる。そこで、画像処理装置１６の通信部３３がサーバ１３から、写真データベース１４を更新したことを示す更新通知を受信したときに、スライドショーが再生中の場合、画像処理装置１６上で動作するスライドショー生成・再生プログラムは、新着の写真（画像データ）に基づいて新たなスライドショーを生成したとき、再生中のスライドショー（デフォルトのスライドショーまたは生成したスライドショー）の再生を一旦停止し、新たな写真（画像データ）に基づく新たなスライドショーが生成されたことを示す新着ムービーを再生し、その後、新たなスライドショーを再生するようにしてもよい。また、再生中のスライドショーが一通り再生完了した後に新たなスライドショーを再生するようにしても良い。

再生中のスライドショーの再生を一旦停止する場合、画像処理装置１６上で動作するスライドショー生成・再生プログラムは、図３のステップＳ３６において新たなスライドショーを生成した後に、デフォルトのスライドショーの再生を一旦停止し、新たな写真（画像データ）に基づく新たなスライドショーが生成されたことを示す新着ムービーを再生する。その後、画像処理装置１６はステップＳ３７で、新たなスライドショーを再生する。

図８は、デフォルトのスライドショーの再生から新たなスライドショーが再生された後、再度デフォルトのスライドショーが再生される流れを示す。図８が示すように、画像処理装置１６は、一連のスライドショーを新たに生成すると、デフォルトのスライドショーの再生を一旦停止し、新たな写真（画像データ）に基づく新たなスライドショーが生成されたことを示す新着ムービーを再生する。そして、新たなスライドショーの再生が終了すると、デフォルトのスライドショーの再生を再開する。なお、新たなスライドショーの再生を開始するときに、再生中のスライドショーの再生中断位置を記憶しておき、新たなスライドショーの再生終了後に、新たなスライドショーを再生する前に再生中であったスライドショーの再生を記憶している再生中断位置から開始しても良い。

以上の処理により、携帯端末１１が撮像した画像を、画像処理装置１６でよりシームレスに再生することができる。

ところで、図２と図３の処理の場合、サーバ１３は、携帯端末１１からの新たな画像データを受信する度に、サーバ１３の記憶部の写真データベース１４に新たな画像データを保存することにより写真データベース１４を変更（更新）したことを検知するようにしたが、このような場合に限られず、サーバ１３は、各携帯端末１１からの新たな画像データを逐次受信しつつ、例えば３０分間隔で、サーバ１３の記憶部の写真データベース１４に新たに保存される画像データを監視し、写真データベース１４を変更（更新）したことを検知するようにしてもよい。この場合、サーバ１３は、３０分間で新たに受信した複数の画像データ（写真）を画像処理装置１６からの取得要求に従って画像処理装置１６に送信し、画像処理装置１６は、３０分間で新たに受信した複数の画像データ（写真）に基づいて新たなスライドショーを生成して再生するようにしてもよい。

また、各携帯端末１１を所有する各ユーザが、携帯端末１１と同期して動作可能なサーバ１３にアップロードしたくない新たな画像データ（写真）がある場合、携帯端末１１は、サーバ１３に対してインターネット１２を介して送信しないようにしてもよい。具体的には、図２のステップＳ２で、携帯端末１１の制御部２１がユーザにより操作部２３が操作されることによりカメラ２５を用いて画像を撮像する場合に、携帯端末１１の制御部２１は、携帯端末１１の表示部に、サーバ１３に新たに撮像した画像データ（写真）をアップロードするか否かに関するダイアログを表示させる。ユーザは、サーバ１３に新たに撮像した画像データ（写真）をアップロードするか否かに関するダイアログ上で「Ｙｅｓ」または「Ｎｏ」のコマンドを選択する。携帯端末１１は、ダイアログ上で選択された「Ｙｅｓ」または「Ｎｏ」のコマンドに従い、ステップＳ５の処理でサーバ１３に新たな画像データを送信するか否かを判断する。すなわち、携帯端末１１は、ダイアログ上でユーザにより「Ｙｅｓ」のコマンドが選択された場合、ステップＳ５の処理でサーバ１３に新たな画像データをインターネット１２を介して送信する。一方、携帯端末１１は、ダイアログ上でユーザにより「Ｎｏ」のコマンドが選択された場合、ステップＳ５の処理でサーバ１３に新たな画像データをインターネット１２を介して送信しない。これにより、ユーザの好みに応じて、携帯端末１１と同期して動作可能なサーバ１３に対して、新たな画像データを送信するか否かを決定することができる。

また、ユーザは、サーバ１３に新たに撮像した画像データ（写真）をアップロードするか否かに関するダイアログ上で、サーバ１３に新たに撮像した画像データ（写真）をアップロードするか否かに関するダイアログ上で「Ｙｅｓ」または「Ｎｏ」のコマンドを選択するようにしたが、このような場合に限られず、携帯端末１１は、ユーザにより操作部２３が操作されることにより、予め、サーバ１３に新たに撮像した画像データ（写真）をアップロードするか否かに関する設定をするようにしてもよい。具体的には、携帯端末１１は、カメラ２５による撮影時間帯が午後１０時から午前７時までの場合にサーバ１３に新たに撮像した画像データ（写真）をアップロードしないとの設定を予めしておき、カメラ２５による撮影時間帯が午後１０時から午前７時までの場合に携帯端末１１がカメラ２５を用いて新たな画像を撮像したとしても、上記の設定により、サーバ１３に対して新たな画像データを送信しない。一方、カメラ２５による撮影時間帯が午後１０時から午前７時までの間以外である場合に携帯端末１１がカメラ２５を用いて新たな画像を撮像したとしても、携帯端末１１は、上記の設定により、サーバ１３に対して新たな画像データを送信する。

同様に、携帯端末１１は、カメラ２５による撮影モードが風景に対する撮影モードである場合、サーバ１３に新たに撮像した画像データ（写真）をアップロードしないとの設定を予めしておき、カメラ２５による撮影モードが風景に対する撮影モードである場合に携帯端末１１がカメラ２５を用いて新たな画像を撮像したとしても、上記の設定により、サーバ１３に対して新たな画像データを送信しない。一方、カメラ２５による撮影モードが人物に対する撮影モードである場合、携帯端末１１は、上記の設定により、サーバ１３に対して新たな画像データを送信する。

また、携帯端末１１は、カメラ２５により撮影された画像に顔がない場合、サーバ１３に新たに撮像した画像データ（写真）をアップロードしないとの設定を予めしておき、カメラ２５による撮影モードが風景に対する撮影モードである場合に携帯端末１１がカメラ２５を用いて新たな画像を撮像したとしても、上記の設定により、サーバ１３に対して新たな画像データを送信しない。一方、カメラ２５により撮影された画像に顔がある場合、携帯端末１１は、上記の設定により、サーバ１３に対して新たな画像データを送信する。これにより、人物の最新の様子がリアルタイムにサーバ１３に送信されて写真データベース１４が更新される。

さらに、携帯端末１１は、カメラ２５により撮影された画像が基準値よりも小さい（基準値の解像度よりも小さい）場合、サーバ１３に新たに撮像した画像データ（写真）をアップロードしないとの設定を予めしておき、カメラ２５により撮影された画像が基準値よりも小さい（基準値の解像度よりも小さい）場合に携帯端末１１がカメラ２５を用いて新たな画像を撮像したとしても、上記の設定により、サーバ１３に対して新たな画像データを送信しない。一方、カメラ２５により撮影された画像が基準値以上である（基準値の解像度以上である）場合、携帯端末１１は、上記の設定により、サーバ１３に対して新たな画像データを送信する。これにより、携帯端末１１は、画像処理装置１６の表示装置３５で表示してもその画面上で目が粗くならない写真のみを選択的にサーバ１３にアップロードすることができ、画像処理装置１６は、これらの写真に基づいて新たなスライドショーを生成することができる。

なお、図２の場合、ステップＳ１で、携帯端末１１の制御部２１は、通信部２４を制御し、サーバ１３におけるファイル共有サービスへのサインイン要求をネットワーク１２を介してサーバ１３に送信し、サーバ１３におけるファイル共有サービスへのサインインを行うようにしたが、このような場合に限られず、携帯端末１１における撮影状況に応じてサーバ１３へのサインイン（ログイン）するアカウントを選択するようにして、サーバ１３で保存される画像を共有する相手やグループを選択するようにしてもよい。

例えばステップＳ１で、月曜日乃至金曜日までの場合、携帯端末１１の制御部２１は、ユーザにより操作部２３が操作されることによりユーザが勤務する会社で共有するアカウントの入力を受け付け、通信部２４を制御し、サーバ１３におけるファイル共有サービスへのこのアカウントを用いたサインイン要求をネットワーク１２を介してサーバ１３に送信する。これにより、ユーザが勤務する会社で共有するアカウントを用いてサーバ１３にサインインすることができ、サーバ１３で保存される画像を会社における人のグループで共有することができる。一方、ステップＳ１で、土曜日乃至日曜日までの場合、携帯端末１１の制御部２１は、ユーザにより操作部２３が操作されることによりユーザの家族で共有するアカウントの入力を受け付け、通信部２４を制御し、サーバ１３におけるファイル共有サービスへのこのアカウントを用いたサインイン要求をネットワーク１２を介してサーバ１３に送信する。これにより、ユーザの家族が共有するアカウントを用いてサーバ１３にサインインすることができ、サーバ１３で保存される画像をユーザの家族で共有することができる。

なお、図２と図３の場合、画像処理装置１６のみが新たな画像データの特徴量を抽出し、新たな画像データに基づく新たなスライドショーを生成するようにしたが、このような場合に限られず、例えば画像処理装置１６だけでなく携帯端末１１も画像データの特徴量を抽出し（インデキシングし）、抽出された特徴量を記述したメタデータ(ファイル)を生成し、画像データ（写真）に関する特徴量に基づいて、予め定義されるスライドショーのテンプレートファイル（エフェクト番号により示されるテンプレート（エフェクトと呼ばれる））に従った一連のスライドショーを新たに生成するようにしてもよい。

本実施形態に係る画像処理システム１は、携帯端末１１と、携帯端末１１とネットワーク１２を介して接続されて携帯端末１１に同期して動作可能な情報管理装置（サーバ１３）、情報管理装置とネットワーク１５を介して接続されて情報管理装置に同期して動作可能な画像処理装置１６を備える画像処理システムであり、携帯端末１１は、画像を撮像し、撮像される画像に関する画像データを記憶し、記憶される画像データが更新されたことを検知し、記憶される画像データが更新されたことが検知された場合、記憶される新たな画像データを情報管理装置に対して送信し、情報管理装置は、携帯端末１１から携帯端末１１に記憶される新たな画像データを受信し、受信された新たな画像データを写真データベースに記憶し、写真データベースが更新されたことを検知し、写真データベースが更新されたことが検知された場合、写真データベースが更新されたことを示す更新通知を携帯端末１１と画像処理装置１６に送信し、画像処理装置１６は、画像を表示し、情報管理装置から情報管理装置の写真データベースが更新されたことを示す更新通知を受信し、更新通知が受信された後、情報管理装置の写真データベースに新たに記憶された画像データを情報管理装置から受信し、受信された画像データから特徴量を抽出し、抽出された画像データの特徴量に基づいて、予め定義されるテンプレートファイルに従ったスライドショーを生成し、生成されたスライドショーを再生することができる。これにより、携帯端末１１が写真を撮影した場合に、携帯端末１１が撮影した画像を使用してスライドショーを自動的に生成することができ、遠隔地で撮像される画像を使用して、ユーザによる操作なく簡便に、かつシームレスに表示装置３５で再生することができる。

１…画像処理システム、１１…携帯端末、１２…インターネット、１３…サーバ、１４…写真データベース、１５…インターネット、１６…画像処理装置、２１…制御部、２２…記憶部、２３…操作部、２４…通信部、２５…カメラ、３１…制御部、３２…記憶部、３３…通信部、３４…外部出力装置、３５…表示装置。

Claims (4)

1. 携帯端末と、前記携帯端末とネットワークを介して接続されて前記携帯端末に同期して動作可能な情報管理装置と、前記情報管理装置とネットワークを介して接続されて前記情報管理装置に同期して動作可能な画像処理装置を備える画像処理システムにおいて、
   前記携帯端末は、
   画像を撮像し、
   撮像される画像に関する画像データを記憶し、
   記憶される画像データが更新されたことを検知し、
   記憶される画像データが更新されたことが検知された場合、記憶される新たな画像データを前記情報管理装置に対して送信し、
   前記情報管理装置は、
   前記携帯端末から、前記携帯端末に記憶される新たな画像データを受信し、
   受信された新たな前記画像データを写真データベースに記憶し、
   前記写真データベースが更新されたことを検知し、
   前記写真データベースが更新されたことが検知された場合、前記写真データベースが更新されたことを示す更新通知を前記携帯端末と前記画像処理装置に送信し、
   前記画像処理装置は、
   画像を表示し、
   前記情報管理装置から、前記情報管理装置の前記写真データベースが更新されたことを示す前記更新通知を受信し、
   前記更新通知が受信された後、前記情報管理装置の前記写真データベースに新たに記憶された画像データを前記情報管理装置から受信し、
   受信された前記画像データから特徴量を抽出し、
   抽出された前記画像データの特徴量に基づいて、予め定義されるテンプレートファイルに従ったスライドショーを生成し、
   生成された前記スライドショーを再生することを含むことを特徴とする画像処理システム。
2. 画像を表示する表示手段と、
   情報管理装置とネットワークを介して接続され、この前記情報管理装置の写真データベースに新たに記憶された画像データを取得する画像データ取得手段と、
   前記画像データ受信手段により受信された前記画像データから特徴量を抽出する抽出手段と、
   前記抽出出段により抽出された前記画像データの特徴量に基づいて、予め定義されるテンプレートファイルに従ったスライドショーを生成する生成手段と、
   前記生成手段により生成された前記スライドショーを前記表示手段を用いて再生する再生手段とを備えることを特徴とする画像処理装置。
3. 前記再生手段によってスライドショーの再生中に、前記生成手段により前記スライドショーが生成された場合、前記再生手段は、前記再生中のスライドショーを停止し、前記生成手段により生成された前記スライドショーの再生を開始することを特徴とする請求項２に記載の画像処理装置。
4. 前記画像データ受信手段により受信された新たな前記画像データを記憶する記憶手段と、
   前記再生手段により前記画像データ受信手段によって受信された画像データに基づくスライドショーの再生が終了した場合、前記画像データ受信手段によって受信された画像データを前記記憶手段から削除する削除手段とをさらに備えることを特徴とする請求項２に記載の画像処理装置。