JP6192347B2 - システム、サーバ装置、サーバ装置の制御方法 - Google Patents

Description

本発明は、画像データ共有技術に関するものである。

近年、撮影者がデジタルカメラやビデオカメラなどといった撮影装置を利用して撮影した画像データを、有線や無線等の通信回線を介して複数の撮影装置間で交換し、撮影者間で画像データを共有する技術が実現されている。

このように画像データの交換を行うための従来技術として、コンテンツ識別情報とグループ識別情報とが含まれたコンテンツを不特定多数の人で共有するものがある（特許文献１）。

この従来技術を利用することで、共有するグループに共通したグループ識別情報をサーバに登録しておき、共有するグループに複数の撮影装置を含めることで、グループ識別情報に基づいて画像データを共有することが可能となる。

また、複数の撮影装置でグループ識別情報を共有し、コンテンツの受信側撮影装置がコンテンツの送信側撮影装置に、共有しているグループ識別情報を送信するものがある。これは、受信したグループ識別情報に該当するコンテンツを、グループ識別情報を共有している他の撮影装置に送信することで共有を可能とする（特許文献２）。

また、交換対象となる画像データの特徴量と転送元となる撮影装置の識別情報を、他の不特定多数の撮影装置に転送するものがある。これは、転送された撮影装置では撮影画像の特徴量と受信した特徴量が一致した場合に転送元の撮影装置に、撮影画像を送信することで共有を可能とする（特許文献３）。

さらに、近年さかんに利用されているソーシャルネットワークサービス（SNS）等において、利用者同士のソーシャルリンクのつながりを元に、つながりのある利用者同士で画像の共有が盛んにおこなわれている。ソーシャルリンクの作成には、一般的にソーシャルリンクでつながろうとする利用者が自身のつながりたいユーザに接続依頼を行い、接続依頼を受信した利用者が接続を承認することで利用者間のソーシャルリンクが作成される。ソーシャルリンクがつながっている利用者同士であれば画像データ等のコンテンツが相互参照可能となるサービスが広く利用されている。

特開２００６−５９３３１号公報 特開２００６−２５４０９８号公報 特開２００９−９４５７４号公報

ところで、画像データを交換する目的として旅行やパーティなどのイベントですべての撮影者が撮影した画像データをすべての利用者で共有したい場合がある。しかしながら、特許文献１の交換方法で交換は可能であるが、グループ識別情報をサーバに登録する必要があり、登録したグループ識別情報をすべての撮影装置に保存する必要がある。したがって、イベントがはじまる前の準備としてグループ識別情報をサーバに登録することや、撮影装置にグループ識別情報を入力する手間を利用者に強いることとなる。デジタルカメラやデジタルビデオなどのデバイスは、一般的に入力装置が小さく充実していないため、入力操作を行うことだけで使い勝手を著しく低下させてしまっている。

また、特許文献２の交換方法で行ったとしても、あらかじめサーバにグループ識別情報を登録しておく必要はないものの、依然としてグループ識別情報を撮影装置に入力する必要があるため、使い勝手を低下させてしまっている。

また、特許文献３の交換方法で行ったとしても、交換対象となる画像データの特徴量と特徴量が一致する撮影画像のみが送られてくるので、旅行やパーティ等ですべての画像を共有したいといったユースケースには対応することができない。

さらに、特許文献１と特許文献２の方法では、グループ識別情報を入手できれば誰でも画像データの共有に参加することが可能となってしまう。また特許文献３の方法では、撮影装置に任意の特徴量を送りつけることで一致する画像データが取得できてしまうため、プライバシー保護やセキュリティの観点でも問題が生じてしまう。

加えて、SNS等で行われているようにソーシャルリンクを利用してリンクの繋がっている利用者同士で画像データを共有する方法で交換が可能であるが、旅行やパーティに参加した全ての撮影者が同じサービスに参加しているとは限らない。また、参加していたとしても、ソーシャルリンクがつながっているとも限らない。そのため、撮影装置や外部の情報端末を利用して利用登録やソーシャルリンクの承認依頼作業や承認作業を行う必要があり、承認通知をうけとるといった煩雑な作業を撮影者に強いることとなる。これらは写真撮影やビデオ撮影、画像データ交換には関係のない作業であり、使い勝手を著しく低下させてしまうといった問題がある。このように、従来技術では、前述のようなケースで望まれる画像データを共有する方法には適していない。

本発明はこのような問題に鑑みてなされたものであり、コンテンツを共有したい撮影者の画像を撮影するといったカメラ本来の目的であるコンテンツを作成する作業の中で、自然に画像の交換を可能にすることを目的とする。

本発明の目的を達成するために、例えば、本発明のシステムは、複数台の撮影装置と、サーバ装置と、を有するシステムであって、
前記複数台の撮影装置のそれぞれは、
前記撮影装置のユーザの画像から抽出した第１の画像特徴を前記サーバ装置に送信する第１の送信手段と、
前記ユーザ以外の他ユーザの画像の撮影条件と、該画像から抽出した第２の画像特徴と、を前記サーバ装置に送信する第２の送信手段と
を備え、
前記サーバ装置は、
着目撮影装置から受信した撮影条件と類似する撮影条件で撮影された画像から抽出された第２の画像特徴を、前記サーバ装置がこれまでに受信した第２の画像特徴から特定し、該特定した第２の画像特徴の送信元から送信された第１の画像特徴及び第２の画像特徴のそれぞれが、前記着目撮影装置から受信した第２の画像特徴及び第１の画像特徴と類似している場合、前記着目撮影装置と前記送信元との間で画像の共有が可能となるように通信路を確立させる手段と
を備える
ことを特徴とする。

このように、本発明の構成によれば、コンテンツを共有したい撮影者の画像を撮影するといったカメラ本来の目的であるコンテンツを作成する作業の中で、自然に画像の交換を可能にすることができる。

システムの概略構成例を示す図。 サーバ１０２に適用可能なハードウェア構成例を示す図。 撮影装置１０１に適用可能なハードウェア構成例を示す図。 撮影装置１０１、サーバ１０２の機能構成例を示すブロック図。 撮影装置１０１が行う処理のフローチャート。 撮影装置１０１が行う処理のフローチャート。 サーバ１０２が行う処理のフローチャート。 サーバ１０２が行う処理のフローチャート。 撮影装置１０４が行う処理のフローチャート。 サーバ１０２が行う処理のフローチャート。 撮影装置同士の共有状況の一例を模式的に示した図。 サーバ１０２が行う処理のフローチャート。 撮影装置Ａ１１１１と撮影装置Ｂ１１１２の共有状況を示した模式図。

以下、添付図面を参照し、本発明の好適な実施形態について説明する。なお、以下説明する実施形態は、本発明を具体的に実施した場合の一例を示すもので、特許請求の範囲に記載の構成の具体的な実施例の１つである。

［第１の実施形態］
先ず、本実施形態に係るシステムの概略構成例について、図１を用いて説明する。図１に示す如く、本実施形態に係るシステムは、複数台の撮影装置（図１では撮影装置Ａ、Ｂ、…、Ｘ）１０１，１０４，１０５と、サーバ１０２と、データベース１０３と、アクセスポイント１０６と、を有している。

サーバ１０２、データベース１０３、アクセスポイント１０６、はそれぞれ有線及び／又は無線で構成されているネットワーク１０７に接続されており、互いにネットワーク１０７を介してデータ通信が可能な構成となっている。また、撮影装置１０１，１０４，１０５はアクセスポイント１０６との間で無線通信を行うことができる。これにより、撮影装置１０１，１０４，１０５はアクセスポイント１０６を介して、ネットワーク１０７に接続されているそれぞれの機器との間で無線通信を行うことができる。

なお、図１に示したシステムの構成はあくまでも一例であり、この構成に限るものではない。例えば、図１では一般的な無線LAN環境を想定した構成を示しているが、無線LAN以外にも公衆携帯網、固定電話網、有線LANなど様々なものが利用できる。更に、図１ではサーバ１０２とデータベース１０３とは別個の機器として示しているが、データベース１０３をサーバ１０２内に納めるようにしても構わない。

撮影装置１０１，１０４，１０５のそれぞれは、例えばカメラのような画像を撮影することができる装置であり、自身をシステム内で一意に識別可能な識別子（撮影装置識別情報）を保持している。本実施形態では、ネットワーク上のすべての機器はお互いに到達可能なネットワークを想定しているので、撮影装置識別情報はネットワークアドレスで代用可能である。またネットワークアドレスを撮影装置識別情報に利用しない場合においても、撮影装置識別情報はネットワーク上で撮影装置を特定可能なものあるので、ネットワークアドレスに変換可能である。よって以下では撮影装置識別情報はネットワークアドレスと等価として扱う。また撮影装置とサーバがファイアウォール等に隔てられてネットワーク的に非対称のネットワーク環境であったとしても、ポーリング等の技術を利用することで仮想的に到達可能なネットワークを構築することは可能である。撮影装置毎に装置の識別番号等の識別子を付与することでネットワークアドレスが直接利用できない場合でも、撮影装置の個別の認識は可能になる。したがって、前述したファイアウォール等が無い装置同士がお互いに到達可能なネットワークに所属する場合と等価として扱うことが可能である。

サーバ１０２は、撮影装置１０１，１０４，１０５と通信してデータを送受信する機能、データベース１０３に対するデータの読み書きを行う機能を有する。データベース１０３は撮影装置１０１，１０４，１０５から送信されてきた特徴量や利用者の情報、撮影装置の情報、撮影装置間の画像データの共有の可否などを保存する機能を有する。

上記の通り、サーバ１０２は、撮影装置１０１，１０４，１０５のそれぞれとデータ通信を行うのであるが、以下では説明を簡単にするために、１台の撮影装置とサーバ１０２との間のデータ通信について説明する。以下ではこの１台の撮影装置として撮影装置１０１を用いる。然るに、撮影装置１０４，１０５のそれぞれとサーバ１０２との間のデータ通信についても以下の説明が同様に適用可能である。

撮影装置１０１、サーバ１０２のそれぞれの機能構成例について、図４のブロック図を用いて説明する。なお、本実施形態では、撮影装置１０１，１０４，１０５はいずれも同じ構成であるものとするので、撮影装置１０４，１０５のそれぞれも、図１に示した撮影装置１０１の機能構成と同様の機能構成を有する。

先ず、撮影装置１０１の機能構成例について説明する。撮影部４１１は、光学系を介して外界から入光する光をイメージセンサなどでもって電気信号に変換し、該変換した電気信号から画像データに変換し、該変換した画像データを出力するものである。

撮影情報入力部４１２は、撮影装置１０１を操作するユーザ（利用者）が不図示のインターフェースを操作することで入力した各種の情報を含む様々な情報を、撮影情報として後段の画像データ取得部４１３に送出するものである。このインターフェースは、ボタンやダイアルなどにより構成されても良いし、タッチパネル画面に表示されるボタン画像により構成されても良い。ユーザは例えば、このインターフェースを操作して、撮影装置１０１の所有者であるユーザ（利用者）を撮影するモード、画像の共有を行う相手（他ユーザ）を撮影するモード、の何れかを入力することができる。このとき、撮影情報入力部４１２は、この入力されたモードを撮影情報に含めて画像データ取得部４１３に送出する。また、撮影情報入力部４１２は、撮影部４１１が撮影した画像の属性情報として撮影日時や撮影位置などの様々な情報を撮影情報に含めて画像データ取得部４１３に送出することができる。撮影日時や撮影位置は、例えば不図示のタイマやＧＰＳセンサなどにより測定されるので、撮影情報入力部４１２はこれら測定された撮影日時や撮影位置を撮影情報に含めて画像データ取得部４１３に送出することができる。

画像データ取得部４１３は、撮影部４１１から出力された画像を取得すると共に、撮影情報入力部４１２から出力された撮影情報を取得する。そして画像データ取得部４１３は、取得した画像と撮影情報とを後段の特徴量算出部４１４に対して送出する。

特徴量算出部４１４は、画像データ取得部４１３から受けた画像から人の顔が写っている領域（顔領域）を検出し、該検出した顔領域から特徴量を抽出する。人の顔が写っている画像から該顔の特徴量を抽出するための処理は公知の技術であるため、これについての説明は省略する。そして特徴量算出部４１４は、画像データ取得部４１３から取得した撮影情報に加え、該画像から抽出した特徴量を、データ送信部４１５に対して送出する。

データ送信部４１５は、特徴量算出部４１４から受けた撮影情報、特徴量に加えて、撮影装置１０１の撮影装置識別情報を、アクセスポイント１０６を介してサーバ１０２に対して送信する。

データ受信部４１６は、サーバ１０２からアクセスポイント１０６を介して送信された情報を受信する。アクセス権管理部４１７は、撮影装置１０１が保持している画像に対するアクセス権を管理している。

次に、サーバ１０２の機能構成例について説明する。データ受信部４２１は、撮影装置１０１からアクセスポイント１０６を介して送信された撮影情報、特徴量、撮影装置識別情報を受信し、受信したこれらをセットにしてデータベース１０３に登録する。登録方法については別段セットにして登録することに限るものではないが、受信したこれらが互いに関連づけられているのであれば、他の登録方法を採用しても構わない。

特徴量判定部４２２は、データ受信部４２１が受信した特徴量とデータベース１０３に登録されている特徴量と、を用いて、利用者が共有を行いたい相手の撮影装置の撮影装置識別情報をデータベース１０３から取得する。データ送受信部４２３は、特徴量判定部４２２が取得した撮影装置識別情報によって特定される撮影装置１０１との間でデータの送受信を行う。データ送受信部４２３がどのようなデータの送受信を行うのかについては後述する。

次に、撮影装置１０１、サーバ１０２のそれぞれの動作について説明する。先ず、撮影装置１０１のユーザの特徴量をサーバ１０２に登録するために撮影装置１０１が行う処理について、同処理のフローチャートを示す図５を用いて説明する。先ず、ユーザは上記のインターフェースを操作して、自身の画像を撮影する為のモードに設定し、撮影装置１０１のレンズを自身に向けて撮影指示を入力する。

ステップＳ５１０では、撮影部４１１はこの撮影指示を検知すると、撮影動作を行う。なお、ユーザの画像を撮影するための方法はこれに限るものではなく、専用の入力キーを押下することで撮影する方法、撮影装置に設置されたモードダイヤルを切り替える方法、決められたパターンの写真撮影が撮影開始のトリガーとなる方法などが考えられる。

ステップＳ５１１では、撮影部４１１は、上記撮影動作により取得した光を電気信号に変換し、該電気信号から、撮影装置１０１のユーザが写った画像を生成する。画像データ取得部４１３は、撮影部４１１から出力された画像、撮影情報入力部４１２から出力された撮影情報、を後段の特徴量算出部４１４に対して送出する。

ステップＳ５１２では、特徴量算出部４１４は、画像データ取得部４１３から受けた画像中の顔領域を検出し、該検出した顔領域から特徴量を抽出する。ここで、特徴量としては、ユーザの顔の写っている画像から顔領域の範囲を検出し、検出範囲の中から目立つ特徴点を抽出して特徴点の相対位置を特徴量とする方法が考えられる。ただし、特徴量はこれに限定されるものではなく、顔画像の標準データからの差分を特徴量とする等といったいろいろな方法が考えられる。以下では、撮影装置１０１のユーザの画像から抽出した特徴量をユーザ特徴量と呼称する。そして特徴量算出部４１４は、画像データ取得部４１３から取得した撮影情報に加え、抽出したユーザ特徴量を、データ送信部４１５に対して送出する。

ステップＳ５１３では、データ送信部４１５は、特徴量算出部４１４から受けた撮影情報、ユーザ特徴量に加えて、撮影装置１０１の撮影装置識別情報を、アクセスポイント１０６を介してサーバ１０２に対して送信する。

次に、画像の共有を行う相手（共有対象）の特徴量をサーバ１０２に登録するために撮影装置１０１が行う処理について、同処理のフローチャートを示す図６を用いて説明する。先ず、ユーザは上記のインターフェースを操作して、相手の画像を撮影する為のモードに設定し、撮影装置１０１のレンズを相手に向けて撮影指示を入力する。

ステップＳ６１０では、撮影部４１１はこの撮影指示を検知すると、上記ステップＳ５１０と同様にして撮影動作を行う。

ステップＳ６１１では、撮影部４１１は、上記撮影動作により取得した光を電気信号に変換し、該電気信号から、相手が写った画像を生成する。画像データ取得部４１３は、撮影部４１１から出力された画像、撮影情報入力部４１２から出力された撮影情報、を後段の特徴量算出部４１４に対して送出する。

ステップＳ６１２では、特徴量算出部４１４は、画像データ取得部４１３から受けた画像中の顔領域を検出し、該検出した顔領域から特徴量を抽出する。以下では、相手の画像から抽出した特徴量を相手特徴量と呼称する。そして特徴量算出部４１４は、画像データ取得部４１３から取得した撮影情報に加え、抽出した相手特徴量を、データ送信部４１５に対して送出する。

ステップＳ６１３では、データ送信部４１５は、特徴量算出部４１４から受けた撮影情報、相手特徴量に加えて、撮影装置１０１の撮影装置識別情報を、アクセスポイント１０６を介してサーバ１０２に対して送信する。

次に、サーバ１０２が行う処理について、同処理のフローチャートを示す図７を用いて説明する。ステップＳ７１０では、データ受信部４２１は、撮影装置１０１が図５のフローチャートに従った処理を実行することで送信した撮影情報、ユーザ特徴量、撮影装置識別情報を受信し、受信したこれらを関連づけてデータベース１０３に登録する。

ステップＳ７１１では、データ受信部４２１は、撮影装置１０１が図６のフローチャートに従った処理を実行することで送信した撮影情報、相手特徴量、撮影装置識別情報を受信し、受信したこれらを関連づけてデータベース１０３に登録する。

ステップＳ７１２では、特徴量判定部４２２は、ステップＳ７１１で受信した相手特徴量と類似するユーザ特徴量をデータベース１０３から検索する。類似する特徴量を検索する技術については周知であり、例えば、特徴量空間におけるそれぞれの特徴量間の距離の逆数を類似度とし、該類似度が閾値以上（距離が閾値以下）であれば、それぞれの特徴量は類似していると判断しても良い。

ステップＳ７１２における検索で、相手特徴量に類似するユーザ特徴量が見つかった場合には、処理はステップＳ７１３に進み、見つからなかった場合には、処理はステップＳ７１１に戻り、待機状態となる。

ステップＳ７１３では、特徴量判定部４２２は、ステップＳ７１２における検索で見つけたユーザ特徴量と関連づけてデータベース１０３に登録されている撮影装置識別情報を取得し、該取得した撮影装置識別情報をデータ送受信部４２３に送出する。データ送受信部４２３は、特徴量判定部４２２から受けた撮影装置識別情報を用いて、該撮影装置識別情報に対応する撮影装置に対して、画像の共有を許可するか否かを該撮影装置のユーザに確認させるための確認情報を送信する。その際、撮影装置１０１からユーザの画像や該画像中に写っているユーザに関する情報を取得し、該取得したこれらの情報をこの確認情報に含めて送信しても良い。

この確認情報を受信した撮影装置は、画像共有を行うか否かを該撮影装置の操作者に選択させるための画面を不図示の表示画面に表示する。そして操作者が上記のインターフェースを用いて許可／不許可の何れかを選択して返信指示を入力すると、この撮影装置はこの選択結果を確認情報に対する応答（承認情報）としてサーバ１０２に対して返信する。

確認情報の送信後、データ送受信部４２３が一定時間内に承認情報を１つも受信していない場合には、処理はステップＳ７１４を介してステップＳ７１１に戻り、そこで待機状態となる。一方、データ送受信部４２３が一定時間内に承認情報を受信した場合には、処理はステップＳ７１４を介してステップＳ７１５に進む。

ステップＳ７１５では、データ送受信部４２３は、許可を示す承認情報を送信した撮影装置、撮影装置１０１、のそれぞれに対し、許可を示す承認情報を送信した撮影装置、撮影装置１０１、のそれぞれの撮影装置識別情報を含む共有情報を送信する。

次に、サーバ１０２が確認情報を送信後に撮影装置１０１が行う処理について、図８のフローチャートを用いて説明する。ステップＳ８１０では、データ受信部４１６は、サーバ１０２から送信された確認情報を受信する。そしてステップＳ８１１では、データ送信部４１５は、ユーザにより入力された許可／不許可の何れかを示す承認情報をサーバ１０２に対して送信する。

ここで、複数の撮影装置識別情報が確認情報に含まれる場合、全ての撮影装置に対して一括して許可もしくは不許可を表す承認情報を送信してもよい。また、個別の撮影装置識別情報毎に指示することも可能であり、承認情報は個別の撮影装置識別情報の許可もしくは不許可の情報を含んだものであってもよい。

ステップＳ８１２では、データ受信部４１６は、サーバ１０２から送信された共有情報を受信する。この共有情報には、撮影装置１０１及び該撮影装置１０１と画像共有を行う撮影装置（許可撮影装置）の撮影装置識別情報が含まれている。然るに、ステップＳ８１３では、アクセス権管理部４１７は、この撮影装置識別情報を用いて、許可撮影装置に対して画像共有が可能となるように通信経路を開く。

ステップＳ８１４では、データ送信部４１５は、撮影装置１０１の撮影装置識別情報を含む共有開始情報を、共有情報に含まれているそれぞれの撮影装置識別情報に対応するそれぞれの許可撮影装置に対して送信する。

次に、撮影装置１０１から送信された共有開始情報を撮影装置１０４が受信した場合に、該撮影装置１０４が行う処理について、図９のフローチャートを用いて説明する。なお、共有開始情報を撮影装置１０５が受信した場合には、撮影装置１０５が図９のフローチャートに従った処理を実行することになる。

ステップＳ９１０では、データ受信部４１６は、サーバ１０２から送信された共有情報を受信する。ステップＳ９１１では、データ受信部４１６は、撮影装置１０１から送信された共有開始情報を受信する。

ステップＳ９１２では、アクセス権管理部４１７は、受信した共有開始情報に含まれている撮影装置１０１の撮影装置識別情報と、受信した共有情報に含まれている撮影装置１０１の撮影装置識別情報とが一致した場合、撮影装置１０１に対して通信経路を開く。撮影装置１０１に対して通信経路を開く際には、撮影装置１０１の撮影装置識別情報を用いて行う。

ステップＳ９１３では、データ受信部４１６は、撮影装置１０１が保持する画像の取得を開始する。ここで画像の取得方法に関しては、代表的にはＨＴＴＰでの通信を行う方法が考えられる。取得先がＨＴＴＰサーバとして振る舞い、取得元がＨＴＴＰクライアントとして取得先であるＨＴＴＰサーバに接続する。その後、取得元が取得先のインデックス情報をＨＴＴＰで取得した後、インデックス情報に記述されている個別のファイルをＨＴＴＰで取得するといった方法で画像の取得が可能となる。また画像の取得方法はＨＴＴＰを利用した方法に限定されるものではなく、ＦＴＰやＰＴＰ等の他のプロトコルを使い画像データを取得する方法も考えられる。

以上のような処理により、画像を共有したい相手の画像を撮影するといったカメラで本来行う撮影行為を行うことで自然に画像の交換を可能にする。なお、本実施形態において画像は撮影装置同士が直接通信（例えばＰ２Ｐ通信）を行うことにより共有を行うようになっているが、画像を一度サーバにアップロードし、サーバが通信を仲介することでデータの共有を行うことも可能である。

また本実施形態では、利用者を表す利用者画像の典型的なものは利用者の顔画像であるが、全身画像や利用者に関連づいたアイコンなどの図画も利用者を表す画像として利用できる。また、共有を行う相手の利用者を表す画像は一つに限ったものではなく、例えば複数の共有対象の利用者の顔画像が写った一枚の画像を共有対象画像としてもよい。

なお、本実施形態で説明したシステムの構成は以下に説明する基本構成の一例に過ぎず、以下に説明する基本構成に帰着するような構成であれば、他の様々な構成を採用しても構わない。

基本構成としてのシステムは、複数台の撮影装置と、サーバ装置と、を有するシステムである。このシステムにおいて複数台の撮影装置のそれぞれは、撮影装置のユーザの画像特徴を第１の画像特徴としてサーバ装置に送信（第１の送信）するとともに、該ユーザ以外の他ユーザの画像特徴を第２の画像特徴としてサーバ装置に送信（第２の送信）する。

また、このシステムにおいてサーバ装置は、着目撮影装置から第１の画像特徴及び第２の画像特徴を受信すると、サーバ装置がこれまでに受信した第１の画像特徴のうち、該着目撮影装置から受信した第２の画像特徴と類似する第１の画像特徴を特定する。そして、着目撮影装置と、この特定した第１の画像特徴の送信元である撮影装置のうち１以上と、の間で画像の共有が可能となるように通信路を確立させる。

＜変形例＞
図４に示したサーバ１０２、撮影装置１０１を構成する各機能部のハードウェア構成例として、例えば、図２，３に示した構成が適用可能である。先ず、図２に示した、サーバ１０２に適用可能なハードウェア構成例について説明する。

制御部２０１は、記憶部２０５に格納されているコンピュータプログラムやデータを用いてサーバ１０２全体の動作制御を行うと共に、サーバ１０２が行うものとして説明する各処理を実行する。

入力部２０２は、マウスやキーボードなどにより構成されており、本装置の操作者が操作することで、各種の指示を制御部２０１に対して入力することができる。出力部２０３は、データの出力を行うためのもので、例えば、制御部２０１による処理結果を画像や文字などでもって表示する表示画面により構成される。

通信制御部２０４は、図４のデータ受信部４２１、データ送受信部４２３として機能するものであり、ネットワーク１０７上の各機器とのデータ通信を行うためのものである。記憶部２０５は、ハードディスクドライブなどの大容量情報記憶装置である。記憶部２０５には、ＯＳ（オペレーティングシステム）や、サーバ１０２が行うものとして説明した各処理を制御部２０１に実行させるためのコンピュータプログラムやデータが保存されている。このコンピュータプログラムには、特徴量判定部４２２の機能を制御部２０１に実行させるためのコンピュータプログラムも含まれている。上記の各部はいずれも、システムバス２０６に接続されている。

次に、図３に示した、撮影装置１０１に適用可能なハードウェア構成例について説明する。制御部３０１は、記憶部３０４に格納されているコンピュータプログラムやデータを用いて撮影装置１０１全体の動作制御を行うと共に、撮影装置１０１が行うものとして説明する各処理を実行する。また、制御部２０１は、上記の撮影日時を計時するタイマも有している。

入力部３０２は、上記のインターフェースとして機能するものであり、タッチパネルやボタンやダイアルなどのインターフェースを含み、本装置の操作者が操作することで、各種の指示を制御部３０１に対して入力することができる。出力部３０３は、ＬＣＤ３０８に対するインターフェースである。

記憶部３０４は、本装置のＯＳ（オペレーティングシステム）や、本装置で撮影した画像、様々な設定データなどを記憶するためのものである。また、記憶部３０４には、撮影装置１０１が行うものとして説明する各処理を制御部３０１に実行させるためのコンピュータプログラムやデータが格納されている。このコンピュータプログラムには、撮影情報入力部４１２、画像データ取得部４１３、特徴量算出部４１４、アクセス権管理部４１７の各機能を制御部３０１に実行させるためのコンピュータプログラムも含まれている。また、このデータには、撮影装置１０１の撮影装置識別情報も含まれている。なお、フラッシュメモリを本装置に挿入することができるようにしてもよく、その場合、撮影した画像などをこのフラッシュメモリに記録するようにしても構わない。

イメージセンサ３０５は、上記の撮影部４１１を構成するものであり、周知の通り、レンズを介して入光した光を電気信号に変換し、更にこの電気信号を画像に変換する。変換した画像は撮影画像として記憶部３０４に記録される。

通信制御部３０６は、上記のデータ送信部４１５、データ受信部４１６として機能するものであり、アクセスポイント１０６を介して他の撮影装置やサーバ１０２とデータ通信を行う。

ＧＰＳ３０７は、周知の通り、自身の位置を計測するためのもので、計測した位置は記憶部３０４に記録される。例えば、画像を撮影したときの位置を撮影位置として計測することができ、この撮影位置は撮影情報に含められる。なお、撮影位置の計測はＧＰＳを利用したものに限らず、例えば、ＷｉＦｉのアクセスポイントを利用するような他の位置情報サービスを利用することも可能である。

ＬＣＤ３０８は、制御部３０１による処理結果を画像や文字などでもって表示する表示画面であり、例えば、モード選択画面や撮影画像を表示するための画面、各種の設定画面などを表示することができる。上記の各部はいずれもシステムバス３０９に接続されている。

［第２の実施形態］
本実施形態では、サーバ１０２が図７のフローチャートに従った処理を行う代わりに、図１０のフローチャートに従った処理を実行する点が第１の実施形態と異なる。また、それに併せて撮影装置１０１側で行う処理も第１の実施形態と若干異なる。以下では、第１の実施形態との差分のみについて説明し、以下で特に触れない限りは、第１の実施形態と同様であるものとする。

本実施形態では、複数の撮影装置で撮影した全ての画像を複数の撮影装置で共有するケースを例にとり説明する。本実施形態では、利用者が互いに承認をとることで望まない利用者と画像を共有してしまうといったセキュリティ的リスクを下げる。さらに撮影日時と撮影位置とを利用して一致の判定を行う特徴量を絞り込むことで判定処理の処理負荷を減らし、且つ判定処理の精度をあげるためのものである。以下にその手順を述べる。

本実施形態では、撮影装置１０１側では、撮影情報には第１の実施形態で説明したものに加え、更に撮影位置、撮影日時をも含める。撮影位置は上記の通りＧＰＳ等を用いて取得可能であり、撮影日時はタイマを用いて取得可能である。

先ず、図１０のフローチャートに従った処理を開始する段階ではすでに、ステップＳ７１０の処理は完了しているものとする。即ち、サーバ１０２はすでに、それぞれの撮影装置から、該撮影装置のユーザのユーザ特徴量、撮影情報、撮影装置識別情報、を受信しているものとする。

ステップＳ１０１０では、データ受信部４２１は、それぞれの撮影装置から送信された、撮影情報、相手特徴量、撮影装置識別情報、を受信し、受信したこれらを関連づけてデータベース１０３に登録する。なお、ステップＳ１０１０で受信した撮影情報中の撮影位置、撮影日時を以下ではそれぞれ、基準撮影位置、基準撮影日時と呼称する。

ステップＳ１０１１では、特徴量判定部４２２は、基準撮影日時との差異が閾値以内且つ基準撮影位置との差異が閾値以内となる撮影日時及び撮影位置と関連づけられている相手特徴量をデータベース１０３から検索する。この検索の結果、見つけた場合には、処理はステップＳ１０１２に進み、見つからなかった場合には、処理はステップＳ１０１０に戻って待機する。

ステップＳ１０１２では特徴量判定部４２２は、次のような処理を実行する。ステップＳ１０１１で見つけた相手特徴量と関連する撮影装置識別情報のうち、ステップＳ７１０で受信したユーザ特徴量に類似する相手特徴量及びステップＳ１０１０で受信した相手特徴量と類似するユーザ特徴量と関連する撮影装置識別情報を特定する。

ここで、ステップＳ１０１２における処理について、具体例を挙げて詳しく説明する。ステップＳ１０１０で受信した相手特徴量Ａと撮影日時及び撮影位置が近いとステップＳ１０１１で判断された相手特徴量を相手特徴量Ｂとする。また、相手特徴量Ａと関連づけられている撮影装置識別情報を撮影装置識別情報ａとし、撮影装置識別情報ａと関連づけられているユーザ特徴量をユーザ特徴量Ａとする。また、相手特徴量Ｂと関連づけられている撮影装置識別情報を撮影装置識別情報ｂとし、撮影装置識別情報ｂと関連づけられているユーザ特徴量をユーザ特徴量Ｂとする。

このとき、特徴量がシステムであらかじめ決められた閾値内で近いことを特徴量の一致とすると、相手特徴量Ａとユーザ特徴量Ｂが一致し、且つ相手特徴量Ｂとユーザ特徴量Ａが一致する場合を、互いの相手特徴量とユーザ特徴量が一致するとして判定する。

ステップＳ１０１２において撮影装置識別情報を特定することができた場合、処理はステップＳ１０１３に進み、特定することができなかった場合には、処理はステップＳ１０１０に戻って待機する。

ステップＳ１０１３では、データ送受信部４２３は、ステップＳ１０１２で特定した撮影装置識別情報に対応するそれぞれの撮影装置に対して上記の確認情報を送信する。確認情報の送信後、データ送受信部４２３が一定時間内に承認情報を受信していない場合や、１つでも不許可を示す承認情報を受信した場合には、処理はステップＳ１０１４を介してステップＳ１０１０に戻り、そこで待機状態となる。一方、データ送受信部４２３が一定時間内に全ての承認情報を受信し且つ全ての承認情報が許可を示す場合には、処理はステップＳ１０１４を介してステップＳ１０１５に進む。

ステップＳ１０１５では、データ送受信部４２３は、確認情報を送信した全ての撮影装置に対して共有情報を送信する。

以上のような処理により、利用者が互いに承認をとることで望んでいない利用者との画像データの共有が行われてしまうといったセキュリティ的なリスクを下げる。また、撮影日時と撮影位置を利用し、一致の判定を行う特徴量を絞り込むことで判定処理の処理負荷を減らし、かつ判定処理の精度をあげることができる。

なお、本実施形態では、撮影日時及び撮影位置を撮影条件の一例として用いたが、露光条件や撮影地域など、他の条件を撮影条件として用いても構わない。また、撮影日時として、年、月、日、時、分、秒、のどのレベルまでを使用するのかについても適宜決めればよい。

なお、本実施形態で説明したシステムの構成は以下に説明する基本構成の一例に過ぎず、以下に説明する基本構成に帰着するような構成であれば、他の様々な構成を採用しても構わない。

基本構成としてのシステムは、複数台の撮影装置と、サーバ装置と、を有するシステムである。このシステムにおいて複数台の撮影装置のそれぞれは、撮影装置のユーザの画像から抽出した第１の画像特徴をサーバ装置に送信するとともに、該ユーザ以外の他ユーザの画像の撮影条件と、該画像から抽出した第２の画像特徴と、をサーバ装置に送信する。

また、このシステムにおいてサーバ装置は、着目撮影装置から受信した撮影条件と類似する撮影条件で撮影された画像から抽出された第２の画像特徴を、サーバ装置がこれまでに受信した第２の画像特徴から特定する。ここで、該特定した第２の画像特徴の送信元から送信された第１の画像特徴及び第２の画像特徴のそれぞれが、着目撮影装置から受信した第２の画像特徴及び第１の画像特徴と類似しているとする。この場合、着目撮影装置と送信元との間で画像の共有が可能となるように通信路を確立させる。

［第３の実施形態］
本実施形態は、複数の利用者がグループ旅行等で旅行に一緒に行く際等に利用者グループを形成し、利用者グループ内の全ての利用者同士で個別に承認作業を行わなくても画像を共有できるようにするためのものである。以下にその手順を述べる。図１１は本実施形態において撮影装置同士の共有状況の一例を模式的に表したものである。

ここで第２の実施形態として図７で示したように、複数の利用者がお互いを共有対象として撮影した場合を直接共有の関係とする。図１１の例で表される撮影装置同士の関係は、撮影装置Ａ１１１１はどの撮影装置とも共有の関係になく、撮影装置Ｂ１１１２は撮影装置Ｃ１１１３および撮影装置Ｄ１１１４と共有の関係にある。また撮影装置Ｅ１１１５は撮影装置Ｆ１１１６と直接共有の関係にある。この例では撮影装置Ｃ１１１３と撮影装置Ｄ１１１４には直接共有の関係が無いが、共有の関係を結ぶ際に以下に説明する手順を行うことで撮影装置Ｃ１１１３と撮影装置Ｄ１１１４のような直接共有の関係に無い撮影装置の間でも共有を行うことが可能になる。

本実施形態では図１２に示す如く、ステップＳ７１４にてＹＥＳの場合に、サーバ１０２は、ステップＳ１２０１〜Ｓ１２０４の処理を行う。図７で示したように、複数の利用者がお互いを撮影した場合、サーバ１０２は許可された承認情報を受信すると、処理はステップＳ７１４を介してステップＳ１２０１に進み、データ送受信部４２３は、許可された共有関係をデータベース１０３に保存する。

データベース１０３にはすべての共有関係が保存されている。然るに、ステップＳ１２０１で共有関係を保存した撮影装置に直接および間接的に接続されている撮影装置すべてを取得することで、データ送受信部４２３は、共有関係が変化した撮影装置を全て取得することができる（ステップＳ１２０２）。

ステップＳ１２０２で取得した各撮影装置に対し、データ送受信部４２３は、各撮影装置が共有を許可されている撮影装置のリストを撮影装置毎に取得する（ステップＳ１２０３）。そしてデータ送受信部４２３は、取得したリストを各撮影装置に共有情報として送信する（ステップＳ１２０４）。

図１２のフローチャートを用いて上述した処理を、図１１に示した共有関係において撮影装置Ａ１１１１と撮影装置Ｂ１１１２とが共有関係を結ぶ際を例にして、以下に説明を行う。

ステップＳ７０４でサーバ１０２は、撮影装置Ａ１１１１と撮影装置Ｂ１１１２から承認情報を受け取る。受け取った承認情報がお互いにアクセスを許可するものであれば、ステップＳ１２０１において撮影装置Ａ１１１１および撮影装置Ｂ１１１２の間に共有関係があることをデータベース１０３に保存する。この際の保存の方法としては撮影装置Ａ１１１１と撮影装置Ｂ１１１２の関連をリレーショナルデータベースのリレーションデータとして表現してもいい。また他にもグラフデータベースを用いて各撮影装置をグラフデータ構造のノード、撮影装置間の関係をグラフデータ構造のエッジとして表現するなど、いろいろな方法が考えられる。

次に、ステップＳ１２０２で共有情報が変化した撮影装置を取得するために、撮影装置Ａ１１１１および撮影装置Ｂ１１１２に直接的に関連のある撮影装置および間接的に関連のある撮影装置を取得する。本実施形態の場合、撮影装置Ａ１１１１に関連する撮影装置としては、撮影装置Ａ１１１１は単独で存在し且つ共有が許された撮影装置が無いので共有情報が変化した撮影装置は撮影装置Ａ１１１１だけということになる。また、撮影装置Ｂ１１１２に関連する撮影装置としては、撮影装置Ｃ１１１３と撮影装置Ｄ１１１４がそれぞれ共有を許された撮影装置であるので、撮影装置Ｂ１１１２、撮影装置Ｃ１１１３、撮影装置Ｄ１１１４が共有情報が変化した撮影装置ということとなる。これらの結果をあわせることで、撮影装置Ａ１１１１、撮影装置Ｂ１１１２、撮影装置Ｃ１１１３、および撮影装置Ｄ１１１４が共有情報が変化した撮影装置として取得することが可能である。

図１３は、撮影装置Ａ１１１１と撮影装置Ｂ１１１２が直接共有の関係となった際の共有状況を示した模式図である。ステップＳ１２０２で取得した共有情報に変化のあった各撮影装置が共有を許可されている各撮影装置のリストをステップＳ１２０３で取得する。撮影装置Ａ１１１１は撮影装置Ｂ１１１２、撮影装置Ｃ１１１３、撮影装置Ｄ１１１４と共有可能であり、撮影装置Ｂ１１１２は撮影装置Ａ１１１１、撮影装置Ｃ１１１３、撮影装置Ｄ１１１４と共有可能である。さらに、撮影装置Ｃ１１１３は撮影装置Ａ１１１１、撮影装置Ｂ１１１２、撮影装置Ｄ１１１４と共有可能である。またさらに撮影装置Ｄ１１１４は撮影装置Ａ１１１１、撮影装置Ｂ１１１２、撮影装置Ｃ１１１３と共有可能である。

それぞれの共有可能な撮影装置のリストを取得し、取得された撮影装置のリストを共有情報としてステップＳ１０１５に示した通り各撮影装置に送信する。このような処理を行うことで、撮影装置Ａ１１１１，撮影装置Ｂ１１１２，撮影装置Ｃ１１１３，撮影装置Ｄ１１１４はグループ１３０１としてお互いの撮影装置同士で画像の共有が可能となる。また、撮影装置Ｅ１１１５と撮影装置Ｆ１１１６は直接共有の関係にあるが、グループ１３０１の撮影装置とはどれも共有の関係にないため、グループ１３０１とは別のグループであるグループ１３０２を形成する。

以上のような処理により、利用者グループ全ての利用者同士で画像データの共有を行いたい場合においても、個別にすべての撮影装置同士で共有を許可する作業を行う必要がない。よって、利用者グループ数が多いような場合においても利便性を損なうことなく画像データの共有を可能にすることができるようになる。

このように、各実施形態によれば、画像を撮影するといったカメラ本来の目的であるコンテンツを作成する作業の中で、自然に画像を交換する環境を整えることが可能となる。さらには共有する画像を送信する側が共有をしたい撮影者の画像を撮影することにより送信する側が共有の可否を制御できるため、望まない画像共有を防ぎプライバシーやセキュリティの問題を軽減することが可能となる。

さらに、共有を行い複数の利用者同士がお互いの画像の撮影を行い、互いにアクセス権の許可を与えあうことにより、セキュリティがより高まる。さらにまた、アクセス権を与えあう利用者同士の撮影した画像の特徴量を評価する際に、撮影時間や撮影位置で評価するデータを絞り込むことにより、処理負荷の軽減および処理の精度の向上が図ることができる。

（その他の実施例）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims (5)

1. 複数台の撮影装置と、サーバ装置と、を有するシステムであって、
   前記複数台の撮影装置のそれぞれは、
   前記撮影装置のユーザの画像から抽出した第１の画像特徴を前記サーバ装置に送信する第１の送信手段と、
   前記ユーザ以外の他ユーザの画像の撮影条件と、該画像から抽出した第２の画像特徴と、を前記サーバ装置に送信する第２の送信手段と
   を備え、
   前記サーバ装置は、
   着目撮影装置から受信した撮影条件と類似する撮影条件で撮影された画像から抽出された第２の画像特徴を、前記サーバ装置がこれまでに受信した第２の画像特徴から特定し、該特定した第２の画像特徴の送信元から送信された第１の画像特徴及び第２の画像特徴のそれぞれが、前記着目撮影装置から受信した第２の画像特徴及び第１の画像特徴と類似している場合、前記着目撮影装置と前記送信元との間で画像の共有が可能となるように通信路を確立させる手段と
   を備える
   ことを特徴とするシステム。
2. 前記サーバ装置は更に、
   画像の共有が可能な撮影装置間の関係を示す情報から、間接的に画像の共有が可能なそれぞれの撮影装置に対して直接の画像の共有が可能となるように通信路を確立させる手段
   を備えることを特徴とする請求項１に記載のシステム。
3. 撮影装置のユーザの画像から抽出した第１の画像特徴を送信する第１の送信手段と、前記ユーザ以外の他ユーザの画像の撮影条件と該画像から抽出した第２の画像特徴とを送信する第２の送信手段と、を有する複数台の撮影装置と通信が可能なサーバ装置であって、
   着目撮影装置から受信した撮影条件と類似する撮影条件で撮影された画像から抽出された第２の画像特徴を、前記サーバ装置がこれまでに受信した第２の画像特徴から特定する手段と、
   該特定した第２の画像特徴の送信元から送信された第１の画像特徴及び第２の画像特徴のそれぞれが、前記着目撮影装置から受信した第２の画像特徴及び第１の画像特徴と類似している場合、前記着目撮影装置と前記送信元との間で画像の共有が可能となるように通信路を確立させる手段と
   を備えることを特徴とするサーバ装置。
4. 撮影装置のユーザの画像から抽出した第１の画像特徴を送信する第１の送信手段と、前記ユーザ以外の他ユーザの画像の撮影条件と該画像から抽出した第２の画像特徴とを送信する第２の送信手段と、を有する複数台の撮影装置と通信が可能なサーバ装置の制御方法であって、
   前記サーバ装置の特定手段が、着目撮影装置から受信した撮影条件と類似する撮影条件で撮影された画像から抽出された第２の画像特徴を、前記サーバ装置がこれまでに受信した第２の画像特徴から特定する工程と、
   前記サーバ装置の確立手段が、該特定した第２の画像特徴の送信元から送信された第１の画像特徴及び第２の画像特徴のそれぞれが、前記着目撮影装置から受信した第２の画像特徴及び第１の画像特徴と類似している場合、前記着目撮影装置と前記送信元との間で画像の共有が可能となるように通信路を確立させる工程と
   を備えることを特徴とするサーバ装置の制御方法。
5. コンピュータを、請求項３に記載のサーバ装置の各手段として機能させるためのコンピュータプログラム。

Images