JP2014042170A - 撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラム - Google Patents
撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラム Download PDFInfo
- Publication number
- JP2014042170A JP2014042170A JP2012183590A JP2012183590A JP2014042170A JP 2014042170 A JP2014042170 A JP 2014042170A JP 2012183590 A JP2012183590 A JP 2012183590A JP 2012183590 A JP2012183590 A JP 2012183590A JP 2014042170 A JP2014042170 A JP 2014042170A
- Authority
- JP
- Japan
- Prior art keywords
- identification information
- face identification
- face
- classification
- photographing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
【課題】複数の撮影装置を用いて複数の撮影対象の写真を撮影する際に、撮影対象ごとの撮影枚数の偏りを減らす。
【解決手段】撮影装置は、被写体の画像を撮影して格納し、被写体の画像から顔領域を抽出し、顔領域内の画像の特徴量を得、顔領域内の画像の特徴量を含む顔識別情報を管理装置に送信する。管理装置は、顔識別情報を複数の撮影装置から収集して格納し、顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類し、グループのそれぞれについて、グループに所属する顔識別情報の数を計数し、顔識別情報を送信した撮影装置に対し、顔識別情報が所属するグループについて、グループに所属する顔識別情報の数の多寡を示す分類情報を提供する。撮影装置はさらに、送信した顔識別情報に対応する分類情報を管理装置から受信し、分類情報をユーザに提示する。
【選択図】図5
【解決手段】撮影装置は、被写体の画像を撮影して格納し、被写体の画像から顔領域を抽出し、顔領域内の画像の特徴量を得、顔領域内の画像の特徴量を含む顔識別情報を管理装置に送信する。管理装置は、顔識別情報を複数の撮影装置から収集して格納し、顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類し、グループのそれぞれについて、グループに所属する顔識別情報の数を計数し、顔識別情報を送信した撮影装置に対し、顔識別情報が所属するグループについて、グループに所属する顔識別情報の数の多寡を示す分類情報を提供する。撮影装置はさらに、送信した顔識別情報に対応する分類情報を管理装置から受信し、分類情報をユーザに提示する。
【選択図】図5
Description
本発明は、撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラムに関し、特に、撮影者による被写体の選択を支援する情報を、撮影者に提示する技術に関する。
撮影者による被写体の選択を支援するための技術として、撮影対象ごとの撮影枚数を撮影装置に表示する技術がある(特許文献1)。この技術では、撮影した画像から顔領域を抽出し、抽出した顔領域をあらかじめ登録された撮影対象と照合することで、その撮影対象についての撮影枚数を記録し管理する。そして、撮影前に、撮影対象ごとの撮影枚数の一覧が、ユーザに対して提示される。提示された情報により、撮影対象ごとの撮影枚数の偏りを減らすことが可能となる。
また、撮影された画像からいくつかの画像を選択してアルバムを作成する際に、アルバムに含まれる撮影対象ごとの画像枚数の偏りを防ぐ方法もある(特許文献2)。
しかしながら、複数の撮影者が写真を撮影する場合に、撮影対象ごとの撮影枚数の偏りを減らすためには、従来の技術は必ずしも適していなかった。例えば特許文献1の技術を用いたとしても、各々の撮影者は他の撮影者の撮影状況を知ることができない。結果として、各々の撮影者が撮影した写真を集めると、撮影対象ごとの撮影枚数の偏りが生じてしまう。この課題は、例えばパーティのアルバムを作成する等、複数の撮影者が多数の参加者を撮影する場合、特に一人の撮影者が全ての参加者を撮影することが困難である場合に顕著となる。
また、特許文献2の方法を用いても、撮影対象ごとの画像枚数に大きな偏りがある場合、例えばある撮影対象の画像が極端に少ない場合、アルバムに含まれる撮影対象ごとの画像枚数の偏りを防ぐことは困難となりうる。さらに、撮影機会が既に終了していれば、あらためて撮影することは不可能である。したがって、撮影時に撮影対象ごとの撮影枚数の偏りを減らすことが望ましい。
本発明は、複数の撮影装置を用いて複数の撮影対象の写真を撮影する際に、撮影対象ごとの撮影枚数の偏りを減らすことを目的とする。
本発明の目的を達成するために、例えば、本発明の撮影システムは以下の構成を備える。すなわち、
複数の撮影装置と、管理装置とを備える撮影システムであって、
前記撮影装置は、
被写体の画像を撮影して格納手段に格納する撮影手段と、
前記被写体の画像から顔領域を抽出する抽出手段と、
前記顔領域内の画像の特徴量を得る算出手段と、
前記顔領域内の画像の特徴量を含む顔識別情報を前記管理装置に送信する送信手段と、を備え、
前記管理装置は、
前記顔識別情報を前記複数の撮影装置から収集して記録手段に格納する収集手段と、
前記記録手段内の顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類する分類手段と、
前記グループのそれぞれについて、該グループに所属する前記記録手段内の顔識別情報の数を計数する計数手段と、
顔識別情報を送信した撮影装置に対し、該顔識別情報が所属するグループについて、該グループに所属する前記記録手段内の顔識別情報の数の多寡を示す分類情報を提供する提供手段と、を備え、
前記撮影装置はさらに、
前記送信した顔識別情報に対応する前記分類情報を前記管理装置から受信する受信手段と、
前記分類情報をユーザに提示する提示手段と、を備えることを特徴とする。
複数の撮影装置と、管理装置とを備える撮影システムであって、
前記撮影装置は、
被写体の画像を撮影して格納手段に格納する撮影手段と、
前記被写体の画像から顔領域を抽出する抽出手段と、
前記顔領域内の画像の特徴量を得る算出手段と、
前記顔領域内の画像の特徴量を含む顔識別情報を前記管理装置に送信する送信手段と、を備え、
前記管理装置は、
前記顔識別情報を前記複数の撮影装置から収集して記録手段に格納する収集手段と、
前記記録手段内の顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類する分類手段と、
前記グループのそれぞれについて、該グループに所属する前記記録手段内の顔識別情報の数を計数する計数手段と、
顔識別情報を送信した撮影装置に対し、該顔識別情報が所属するグループについて、該グループに所属する前記記録手段内の顔識別情報の数の多寡を示す分類情報を提供する提供手段と、を備え、
前記撮影装置はさらに、
前記送信した顔識別情報に対応する前記分類情報を前記管理装置から受信する受信手段と、
前記分類情報をユーザに提示する提示手段と、を備えることを特徴とする。
複数の撮影装置を用いて複数の撮影対象の写真を撮影する際に、撮影対象ごとの撮影枚数の偏りを減らすことができる。
以下、添付の図面を参照して、本発明をその好適な実施形態に基づいて詳細に説明する。なお、以下の実施形態において示す構成は一例に過ぎず、本発明は図示された構成に限定されるものではない。
<実施形態1>
実施形態1においては、複数の撮影装置で撮影される写真全体での被写体毎の撮影枚数を平準化するために、サーバが撮影枚数を管理する。ここで、複数の撮影装置のそれぞれが撮影した写真をサーバに送信し、サーバが写真に写っている被写体を解析することにより、撮影枚数が少ない人物を特定してもよい。しかしながらこのような構成を用いる場合、ネットワークに多大な負荷がかかる。特にアルバムを作成する場合、アルバムで利用する写真は一般的に解像度が高いためにデータサイズが大きくなり、ネットワークにかかる負荷が増加する。
実施形態1においては、複数の撮影装置で撮影される写真全体での被写体毎の撮影枚数を平準化するために、サーバが撮影枚数を管理する。ここで、複数の撮影装置のそれぞれが撮影した写真をサーバに送信し、サーバが写真に写っている被写体を解析することにより、撮影枚数が少ない人物を特定してもよい。しかしながらこのような構成を用いる場合、ネットワークに多大な負荷がかかる。特にアルバムを作成する場合、アルバムで利用する写真は一般的に解像度が高いためにデータサイズが大きくなり、ネットワークにかかる負荷が増加する。
また、パーティ会場等にサーバを設置できない場合には、サーバをインターネット上に置くことが考えられる。このような場合、ネットワークの帯域はさらに制限される。さらには、撮影装置が比較的小さなメモリ及び比較的低性能のCPUを搭載している場合、写真データのように大きなサイズのデータをネットワークに送ること自体に時間がかかってしまうために、リアルタイムにサービスを提供することが困難となりうる。
そこで本実施形態においては、撮影装置は撮影した画像から顔画像の特徴量を抽出してサーバに送信する。サーバは、送信された特徴量に基づいて、撮影枚数の管理を行う。本実施形態によれば、必要なネットワーク帯域を減らしながら、複数の撮影装置で撮影される写真全体での被写体毎の撮影枚数を平準化することが可能となる。
図1は、本発明の一実施形態に係る撮影支援システム(撮影システム)の全体構成を示すブロック図である。本実施形態に係る撮影支援システムは、図1に示すように、撮影装置A〜X(101,104,105)、サーバ102、データベース103、アクセスポイント106、及びネットワーク107を含む。撮影装置101,104,105は無線通信機能を備え、アクセスポイント106と無線通信を行うことができる。アクセスポイント106はネットワーク107に接続されている。したがって、撮影装置101,104,105はネットワーク107に接続されている機器と無線通信を行うことができる。
ネットワーク107には、サーバ102とデータベース103とが接続されている。したがって、撮影装置101,104、105はサーバ102と通信を行うことができる。また、サーバ102とデータベース103とも、ネットワーク107を通して互いに通信が可能である。
撮影装置A〜X(101,104,105)は、例えばカメラのような画像を撮影できる装置である。撮影装置A〜X(101,104,105)は同様の撮影装置でありうる。以下では、撮影装置A(101)について説明する。撮影装置101は、撮影装置をシステム内で個別に識別可能な撮影装置識別子を有している。本実施形態においてはシステム全体が同一ネットワークに所属しているので、撮影装置識別子として撮影装置のIPアドレスを用いることができる。また、撮影装置101は撮影促進情報を表示することができる。撮影促進情報とは、特定の人物について撮影枚数の多寡を示す情報である。本実施形態においては、撮影促進情報として、人物の顔画像と、人物毎に撮影枚数が多いか少ないかを示す情報とが表示される。
サーバ102(管理装置)は、撮影装置101と通信してデータを送受信する機能、及びデータベース103と通信してデータを読み書きする機能を有する。データベース103は、撮影装置101から送信されたデータ、又はサーバ102から送信されたデータを保存する機能を有する。
図2は、本実施形態におけるサーバ102のハードウェア構成の一例を示すブロック図である。サーバ102は、制御部201、入力部202、出力部203、通信制御部204、及び記憶部205を備える。制御部201は、CPU、ROM、RAM、及び周辺機器等を含み、サーバ102全体の動作を制御する。より具体的には、ROM又は記憶部205等に格納されたコンピュータプログラムをRAMへと読み出し、読み出されたプログラムに従ってCPUが動作することにより、CPUはサーバ102全体の動作を制御する。
入力部202は、キーボードやマウス等の入力装置を接続するインターフェースを含み、サーバ102への指示又は入力を受け取る。出力部203は、ディスプレイ等の出力装置を接続するインターフェースを含み、サーバ102の状態や処理結果等を示す出力を行う。通信制御部204は、ネットワーク107との通信を制御するインターフェースを含み、ネットワーク107を介して他の装置とデータを交換する。記憶部205は、大容量記憶装置(不図示)へのアクセスを制御するインターフェースを含み、大容量記憶装置へとデータを書き込み、又は大容量記憶装置からデータを読み込む。システムバス206は、上述の各部を互いに接続する。
図3は、本実施形態における撮影装置101のハードウェア構成の一例を示すブロック図である。撮影装置101は、制御部301、入力部302、出力部303、記憶部304、イメージセンサ305、通信制御部306、及びLCD307を備える。制御部301は、CPU、ROM、RAM、及び周辺機器等を含み、撮影装置101全体の動作を制御する。より具体的には、ROM又は記憶部304等に格納されたコンピュータプログラムをRAMへと読み出し、読み出されたプログラムに従ってCPUが動作することにより、CPUは撮影装置101全体の動作を制御する。
入力部302は、タッチパネル、ボタン又はダイアル等の入力インターフェースを含み、撮影装置101への指示又は入力を受け取る。出力部303は、LCD307等の出力装置とのインターフェースを含み、撮影装置101で撮影された画像、撮影装置の状態、又は処理結果等の出力を制御する。
記憶部304は、フラッシュメモリのような記憶媒体へのアクセスを制御するインターフェースと、フラッシュメモリのような記憶媒体とを有し、データを記憶媒体へと書き込み、及びデータを記憶媒体から読み出す機能を有する(格納手段)。イメージセンサ305は、撮像素子(不図示)を有し、レンズを通って撮像素子に入射した光は、撮像素子によって電気信号へと変換される。イメージセンサ305又は制御部301等の処理部がこの電気信号を処理することにより、被写体の画像が得られる。
通信制御部306は、ネットワーク107との通信を制御するインターフェースを含み、ネットワーク107を介してサーバ102等の他の装置とデータを交換する。LCD307は、出力部303から出力された情報を表示し、利用者に提示する。システムバス308は、上述の各部を互いに接続する。
次に、図4を参照して、撮影装置101及びサーバ102の機能構成について説明する。データ受信部415,421とデータ送信部414,424との間では、アクセスポイント106を経由して無線通信が行われる。
以下で、撮影装置101の機能構成について説明する。撮影装置101は、撮影部411と、画像データ取得部412と、特徴量算出部413と、データ送信部414と、データ受信部415と、撮影促進部416とを有する。撮影部411は、被写体の画像データを取得する。撮影部411の機能は、イメージセンサ305によって実現される。
画像データ取得部412は、撮影部411から画像データを繰り返し取得し、特徴量算出部413へ渡す。特徴量算出部413は、画像データ取得部412から渡された画像に含まれる顔領域の特徴量を算出する。撮影促進部416は、サーバ102から渡された分類情報に従って、ユーザに対して撮影促進情報を提示する。画像データ取得部412、特徴量算出部413、及び撮影促進部416の機能は、制御部301によって実現される。
データ送信部414は、特徴量算出部413が算出した顔領域の特徴量をサーバ102へ送信する。データ受信部415は、サーバ102から分類情報を受信する。データ送信部414及びデータ受信部415の機能は、通信制御部306によって実現される。
以下で、サーバ102の構成について説明する。サーバ102は、データ受信部421と、分類処理部422と、集計処理部423と、データ送信部424とを有する。データ受信部421は、複数の撮影装置101,104,105から送られてきた、顔領域の特徴量を含む顔識別情報を収集し、データベース103に(記録手段内に)記録する。データ送信部424は、集計処理部423が生成した分類情報を撮影装置101へと送信する。データ受信部421及びデータ送信部424の機能は、通信制御部204によって実現される。
分類処理部422は、撮影装置101から送信された特徴量に従って、それぞれの顔領域を分類する。分類結果は、データベース103に格納される。集計処理部423は、分類処理部422による分類結果に従って分類情報を生成する。分類処理部422及び集計処理部423の機能は、制御部201によって実現される。
次に、図5のフローチャートを参照して、本実施形態に係る動作について説明する。以下では、撮影装置A(101)、撮影装置B(104)、及びサーバ102の動作について説明するが、その他の撮影装置も同様に動作しうる。
ネットワーク107に接続された全ての撮影装置(101,104)は、電源投入後にまず、撮影装置情報をサーバ102に送信する(S510,S530)。撮影装置情報を送信されたサーバ102は、撮影装置情報を記憶する(S520)。
撮影装置情報は、ネットワーク上で撮影装置を一意に特定するための撮影装置識別子を含む。本実施形態においては、ネットワーク上のすべての機器はファイアウォール等を介さずに接続している。このため、撮影装置識別子として、例えばネットワークアドレスを用いることができる。一方で、撮影装置識別子として他の情報を用いることもできるが、撮影装置識別子は撮影装置を一意に特定するため、ネットワーク上でネットワークアドレスに変換することができる。以下では、撮影装置識別子はネットワークアドレスと等価なものとして扱う。
撮影者が撮影装置A(101)の撮影部411を用いて写真を撮影する(S511)と、画像データ取得部412は撮影された画像を取得する。ここで、それぞれの画像には、撮影装置が格納している複数の画像の中からそれぞれの画像を一意に特定する、画像識別子が付される。画像識別子としては特に限定されず、数値であっても文字列であってもよい。例えば画像識別子としては、シリアル番号又は撮影日時等を用いることができる。
次に特徴量算出部413は、撮影された画像中の人物の顔画像領域を抽出する(S512)。顔画像領域(以下、顔領域と呼ぶ)の抽出は、従来から知られている任意の方法により行うことができる。画像中に複数の顔領域が存在する場合、特徴量算出部413はそれぞれの顔領域を抽出する。
さらに特徴量算出部413は、抽出したそれぞれの顔領域に対して、顔識別子を付与する。顔識別子は、1つの画像内のそれぞれの顔領域を一意に特定する。したがって顔識別子としては、単一の画像の中で顔領域毎に一意な整数を用いることができる。もっとも、顔識別子としては整数以外の数値又は文字列を用いることができ、例えばUUID等のユニークな文字列であってもよい。
このように特徴量算出部413は、撮影された画像のそれぞれについて、顔識別子と、顔識別子に対応する顔領域の位置を示す情報と、のセットを0セット以上生成し、記憶部304に記録する。
次に特徴量算出部413は、ステップS513において顔領域が抽出されたか否かを判定する(S513)。顔領域が抽出されなかった場合、処理はステップS511に戻り、写真が再び撮影されるのを待つ。顔領域が抽出された場合、特徴量算出部413は、それぞれの顔領域について特徴量を算出する(S514)。特徴量算出部413は、顔領域毎に、顔領域を構成する画素の情報を用いた演算処理を行うことにより、特徴量を算出する。特徴量の算出方法は特に限定されず、顔マッチング技術として従来用いられてきた方法を用いることができる。本実施形態においては、顔領域における、目、鼻、口、及び顎等の特徴点間のベクトルを、特徴量として用いる。
その後データ送信部414は、それぞれの顔領域毎に、撮影装置識別子、画像識別子、顔識別子、及び特徴量のセットをサーバ102へと送信する(S515)。以下で、撮影装置識別子、画像識別子、顔識別子、及び特徴量のセットを、顔識別情報と呼ぶ。
サーバ102のデータ受信部421は、撮影装置101から顔識別情報が送信されるのを待ち、送信された顔識別情報を受信する(S521)。データ受信部421は、受信した顔識別情報を分類処理部422に渡す。
分類処理部422は、既に受信済みの顔識別情報の集合に、新たに送信されてきた顔識別情報を加える。そして分類処理部422は、顔識別情報の集合を、特徴量に従って部分集合へと分類する(S522)。同一人物についての特徴量は類似すると考えられるため、類似した特徴量を有する顔識別情報が同じ部分集合に含まれるように分類を行うことにより、それぞれの人物ごとに顔識別情報を分類することができる。具体的な分類方法としては、従来から知られているクラスタリング技術を用いることができる。
また分類処理部422は、それぞれの部分集合に対して分類識別子を付与する。分類識別子は、複数の部分集合の中から、それぞれの部分集合を一意に特定する。本実施形態においては分類識別子としてそれぞれの分類に固有な整数を用いる。しかしながら、分類識別子は整数以外の数値又は文字列であってもよく、例えばUUID等のユニークな文字列を用いることもできる。
そして分類処理部422は、顔識別情報と分類識別子とを関連付けて、データベース103に保存する。
次に集計処理部423は、データベース103から顔識別情報と分類識別子とのセットを読み込み、分類識別子毎に顔識別情報の数をカウントする(S523)。すなわち集計処理部423は、グループのそれぞれについて、このグループに所属するデータベース103内の顔識別情報の数を計数する。そしてデータ送信部424は、分類識別子毎の顔識別情報の数を、各撮影装置(101,104)へと通知する(S524)。本明細書においては、分類識別子毎の顔識別情報の数を示す情報を分類情報と呼ぶ。ここでデータ送信部424は、少なくとも、撮影装置101から送信された顔識別情報が属するグループについての分類情報を、撮影装置101へと通知する。こうして撮影装置101は、撮影した画像に写っている人物についての、全ての撮影装置による撮影枚数を知ることができる。
本実施形態においてデータ送信部424は、全てのグループについての分類情報を各撮影装置(101,104)へと通知する。またデータ送信部424は、通信量を削減するために、以前に通知している分類情報とステップS523で得られた分類情報との差分情報を各撮影装置(101,104)へと通知してもよい。
各撮影装置(101,104)のデータ受信部415は、分類情報を受信し、受信した分類情報を撮影促進部416に送る(S516,S531)。データ受信部415は、少なくともサーバ102へと送信した顔識別情報が属するグループについての分類情報を受信する。本実施形態においてデータ受信部415は、全てのグループについての分類情報をサーバ102から受信する。撮影促進部416は、受信した分類情報に従って撮影促進情報をLCD307上に表示することによって、受信した分類情報をユーザに提示する(S517)。本実施形態においては、撮影促進情報として、図6に模式的に示される分類枠を表示する。
図6において、分類枠A(611)〜分類枠E(615)は、各分類識別子と1対1で対応する。ここで、各分類枠の表示は、予め決められた方法に従って行われる。具体的には、各分類枠の表示は、ステップS523でカウントされた顔識別情報の数がより少ない分類識別子をユーザが判別できるように行われる。より具体的な例としては、顔識別情報の数に従って分類枠が並び替えられた状態で表示する方法が挙げられる。例えば、ステップS523でカウントされた顔識別情報の数がより少ない分類識別子について、対応する分類枠をより前に又はより後に表示する方法がある。また、各分類枠について、顔識別情報の数がより少ない分類識別子をユーザが判別するための情報をさらに追加して表示してもよい。例えば、各分類枠について、対応する分類識別子についての顔識別情報の数を表示する方法がある。また、対応する分類識別子についての顔識別情報の数に従って各分類枠に順位をつけ、各分類枠についてこの順位を示す数値又は記号を表示する方法もある。
さらに撮影促進部416は、各分類枠に、分類識別子に対応する人物の顔を表示する。後述するように、各撮影装置(101,104)が顔識別情報を送信すると、それぞれの顔識別情報についての分類識別子が、分類済情報としてサーバ102から通知される。そこで、撮影促進部416は、分類枠の分類識別子に関連付けられた顔識別情報が記憶部304に格納されているか検索することができる。顔識別情報が含む画像識別子に従って記憶部304に画像を取得し、顔識別情報が含む顔識別子に関連付けられた顔領域の位置に従って顔領域を切り出すことにより、分類識別子に対応する人物の顔画像が得られる。撮影促進部416は、撮影促進情報として、こうして得られた顔画像を分類枠に表示する。このように撮影促進部416は、送信した顔識別情報に対応する顔画像と、送信した顔識別情報に対応する分類情報とを、関連付けてユーザに提示することができる。
もっとも、分類識別子に対応する人物を撮影していない撮影装置は、この人物の画像を格納していないから、この人物の顔画像は表示しない。図6においては、分類枠A611、分類枠C613、及び分類枠D614には顔画像が表示されており、分類枠B612及び分類枠E615には顔画像が表示されていない。
各撮影装置(101,104)は、分類枠の場所と、対応する分類識別子とを関連づけて記憶部304に記録する。
また、サーバ102のデータ送信部424は、顔識別情報を送信した撮影装置101に対して、顔識別情報に対してステップS522で割り当てられた分類識別子を分類済情報として送信する(S525)。この分類識別子は、上述のように、顔識別情報が所属するグループを特定する。データ送信部424は、顔識別情報に含まれる画像識別子及び顔識別子、並びに分類識別子のセットを分類済情報として送信してもよい。
撮影装置101のデータ受信部415は、サーバ102から送信された分類済情報を受信し、分類済情報を撮影促進部416に送る(S518)。撮影促進部416は、分類済情報を、記憶部304に格納する。分類済情報は、顔識別情報と関連付けて格納される。顔識別情報は画像識別子と顔識別子とを含むことから、分類済情報には、被写体の画像と、顔領域の位置情報とが関連付けられる。
また撮影促進部416は、ステップS517と同様に、分類済情報に含まれる分類識別子に従って、分類識別子に対応する人物の顔画像を、分類識別子に対応する分類枠内に表示してもよい(S519)。撮影促進部416は、分類済情報に含まれる分類識別子に対応する分類枠内に顔画像が表示されていない時に、顔画像の表示を行ってもよい。
以上の処理により、撮影者は、シャッターボタンを押す前に画面に表示される顔画像を参考に、撮影枚数が少ない人物を特定することが可能となる。また、複数の撮影者がそれぞれ撮影枚数の少ない人物を探しながら撮影を行うことにより、各撮影装置で撮影された写真を集めた際に、各人物の撮影枚数の偏りが少なくなる。
本実施形態においては、ある人物を撮影していない撮影装置には、その人物に対応する顔画像は表示されず、分類枠のみが表示される。しかしながら、1度でもその人物を撮影した撮影装置には、その人物に対応する顔画像が表示される。このような撮影装置及び撮影者は、この人物と距離的に近接している、又はこの人物と知人であるといったような、この人物を撮影しやすい環境にあることが考えられる。したがって、撮影者が、撮影しやすくかつ撮影枚数の少ない人物を優先して撮影することにより、各撮影装置で撮影された写真を集めた際に、各人物の撮影枚数の偏りを少なくすることができる。
本実施形態のステップS524において、サーバ102は、サーバ102に撮影装置情報を登録している全ての撮影装置に対して、分類情報を送信した。この場合、各撮影装置の撮影促進情報をより頻繁に更新することができる。しかしながらサーバ102は、ステップS515で顔識別情報を送信した撮影装置101に対して、分類情報を送信してもよい。
本実施形態においては、顔領域における、目、鼻、口、及び顎等の特徴点間のベクトルを、特徴量として用いる。しかしながら特徴量はこれには限られず、例えば顔領域内の顔画像そのものが特徴量として用いられてもよい。この場合サーバ102は、顔画像の類似度に基づいて、顔識別情報の分類を行う。このような構成によっても、撮影画像全体をサーバへと送信する場合と比べて送信されるデータ量を低減することができる。また、このような構成によれば、撮影装置が特徴点間のベクトル等を算出する場合と比較して、撮影装置の演算量を削減することが可能となる。
本実施形態においては、分類識別子毎、すなわちグループ毎に、データベース103内に記録された顔識別情報の数を示す情報を分類情報として用いた。しかしながら、分類情報は顔識別情報の数を示す必要はない。すなわち、各グループについて、データベース103内に記録された顔識別情報の多寡を示す情報を分類情報として撮影装置に送ることによっても、各人物の撮影枚数の偏りを少なくすることが達成されうる。この多寡を示す情報としては、例えば、所属する顔識別情報の数に従って各グループを並べた場合の、各グループの順位でありうる。また、この分類情報は、各グループについて、所属する顔識別情報の数が閾値以上から閾値より少ないかを特定する情報であってもよい。
また、本実施形態においては顔画像に着目して、複数の撮影装置で撮影される写真全体での人物毎の撮影枚数の平準化を行う。しかしながら、顔以外の特徴領域に着目し、この特徴領域についての特徴量を用いて、サーバ102は人物毎の撮影枚数を管理してもよい。さらに、被写体が人間には限定されるわけではない。
本実施形態のシステムにおいて、サーバ102とデータベース103とは異なる装置である。しかしながら、データベース103はサーバ102に接続された記録装置であってもよい。
本実施形態のシステムにおいては、複数の撮影装置101,104,105とサーバ102とは異なる装置である。しかしながら、撮影装置のうちの少なくとも1つがサーバとして動作してもよい。また、本実施形態のシステムが、ネットワークを介して互いに接続されたサーバとクライアントとで構成される必要はない。例えば、P2P技術を用いて各装置が互いに接続されていてもよいし、クラウドコンピューティング等の技術を用いてサーバの機能が分散して実現されてもよい。
<実施形態2>
実施形態2では、ステップS522の分類処理において、予め定められた閾値に従って分類を行う。本実施形態によれば、特徴量に従って顔識別情報を分類する前に、辞書情報として顔画像又は特徴量を登録しておかなくてもよい。
実施形態2では、ステップS522の分類処理において、予め定められた閾値に従って分類を行う。本実施形態によれば、特徴量に従って顔識別情報を分類する前に、辞書情報として顔画像又は特徴量を登録しておかなくてもよい。
図7は、本実施形態に従って顔識別情報を分類する処理のフローチャートである。本実施形態においては、新たに顔識別情報が送信されてきた際に、送信された顔識別情報に対して分類識別子を付与することにより、顔識別情報の分類を行う。分類処理部422は、分類処理が開始されると、既にデータベース103に保存されている顔識別情報の中から、データ受信部421から渡された顔識別情報に含まれる特徴量と最も近い特徴量を有する顔識別情報を検索する(S711)。
説明のために、データ受信部421から渡された顔識別情報を顔識別情報1、検索で求められた顔識別情報を顔識別情報2とする。特徴量がベクトルで表される場合、差分ベクトルの大きさが小さいほど特徴量が近いものと判定することができる。顔識別情報2を決定する際に、顔識別情報1の特徴量と最も近い特徴量を有する顔識別情報が複数ある場合には、分類処理部422は、以下のようにして複数の顔識別情報の中から顔識別情報2を選択することができる。すなわち分類処理部422は、複数の顔識別情報を分類識別子ごとに分類し、この複数の顔識別情報について、対応する顔識別情報の数が多い分類識別子を選択する。そして分類処理部422は、選択された分類識別子に対応する1つを、複数の顔識別情報の中から選択し、顔識別情報2として決定する。さらに分類処理部422は、複数の顔識別情報について、対応する顔識別情報の数が同じ分類識別子が存在する場合には、データベース103に保存されている顔識別情報全体について、対応する顔識別情報の数が多い分類識別子を選択する。そして分類処理部422は、選択された分類識別子に対応する1つを、複数の顔識別情報の中から選択し、顔識別情報2として決定する。また分類処理部422は、データベース103に保存されている顔識別情報全体について、対応する顔識別情報の数が同じ分類識別子が存在する場合には、作成時期がより早い分類識別子を選択する。そして分類処理部422は、選択された分類識別子に対応する1つを、複数の顔識別情報の中から選択し、顔識別情報2として決定する。
次に分類処理部422は、顔識別情報1に含まれる特徴量と顔識別情報2に含まれる特徴量との近さが、あらかじめシステムに設定された閾値以内か否かを判定する(S712)。上述のように、顔識別情報1に含まれる特徴量と顔識別情報2に含まれる特徴量との近さとしては、差分ベクトルの大きさを用いることができる。
閾値以内にある場合には、分類処理部422は顔識別情報1と顔識別情報2とは同一人物に関連するものと判定し、顔識別情報2に関連付けられた分類識別子を、顔識別情報1にも関連付ける(S714)。こうして、顔識別情報1についての分類識別子を決定する。
閾値以内にない場合、すなわち特徴量の近さが閾値以内である顔識別情報2が発見されない場合、分類処理部422は顔識別情報1に関連する人物は、顔識別情報がデータベース103に保存されていない新しい人物であると判定する。この場合分類処理部422は、新しい分類識別子を作成し(S713)、顔識別情報1に対して新しく作成した分類識別子を関連付ける(S714)。こうして顔識別情報1は、今までデータベース103には存在しなかった新しいグループに分類される。
また、顔識別情報がデータベース103に全く保存されていない場合には、ステップS711及びステップS712が省略される。すなわち分類処理部422は、新しい分類識別子を作成し、顔識別情報1に対して新しく作成した分類識別子を関連付ける。
以上の処理により、撮影者はシステムにあらかじめ辞書となる顔画像や顔領域特徴量を登録することなく同一人物の分類を行うことが可能となり、複数の撮影装置で撮影される写真全体での被写体毎の撮影枚数の平準化を行うことができる。
<実施形態3>
実施形態3では、撮影装置が接続されたネットワークと、サーバ及びデータベースが接続されたネットワークとが、非対称なネットワーク透過性を有するネットワーク機器を介して接続される。非対称なネットワーク透過性を有するネットワーク機器としては、一般的なファイアウォールや、NAT機能等を備えたパーソナルルータ等が挙げられる。
実施形態3では、撮影装置が接続されたネットワークと、サーバ及びデータベースが接続されたネットワークとが、非対称なネットワーク透過性を有するネットワーク機器を介して接続される。非対称なネットワーク透過性を有するネットワーク機器としては、一般的なファイアウォールや、NAT機能等を備えたパーソナルルータ等が挙げられる。
本実施形態の構成は、サーバ及びデータベースが、インターネットを介して、撮影装置が接続されているネットワークとは別のネットワークに設置されているような環境で利用できる。このような環境の例としては、一般家庭のホームパーティで撮影を行う場合等、撮影装置が家庭内ネットワークに接続され、家庭内ネットワークと外部ネットワークとの通信がパーソナルルータによって制限されている場合が挙げられる。また、商用パーティで撮影を行う場合等、撮影装置が接続するネットワークと、外部ネットワークとの間のネットワーク透過性が、ファイアウォールによって非対称となっている場合も挙げられる。
図8は、本実施形態に係るネットワーク構成を示す。図1と同様に、撮影装置A〜X(101,104,105)及びアクセスポイント106が、ネットワーク107に接続されている。また、サーバ801とデータベース802は外部ネットワーク804に接続されている。ネットワーク107と外部ネットワーク804とは、ファイアウォール803を介して接続されている。外部ネットワーク804は、ネットワーク107とはファイアウォール803を介して分けられたネットワークである。外部ネットワーク804は、例えばインターネットであり、クラウド環境でありうる。
サーバ801とデータベース802とが提供する機能は、図1のサーバ102とデータベース103とが提供する機能と同様である。ファイアウォール803は、ネットワーク107と外部ネットワーク804の間の通信を制限する。本実施形態においてファイアウォール803は、ネットワーク107から外部ネットワーク804へセッションを張る通信を許可するが、外部ネットワーク804からネットワーク107へセッションを張る通信は許可しないものとする。
本実施形態では、装置間の通信にはHTTPを利用することとする。図8の環境の場合、ネットワーク107側の機器からHTTPの要求を出した場合に、外部ネットワーク804側の機器はHTTPの応答を返すことができる。しかし、外部ネットワーク804側の機器からHTTPの要求を出した場合には、ファイアウォール803で通信が阻害されるために、ネットワーク107側の機器にはHTTP要求は届けられない。したがって、HTTPの要求を出した外部ネットワーク804が側の機器は、HTTPの要求に対するHTTPの応答を受け取ることはない。
図9は、本実施形態に係る、ファイアウォールが設置された環境における送受信処理のフローチャートである。図5のフローチャートにおけるステップS515〜S518と、ステップS521〜525の代わりに、図9に示す処理が行われる。ステップS515〜S518及びステップS521〜525以外の処理は、図5に示す処理と同様に行われる。
ステップS911の処理は、ステップS515の処理と同様である。ステップS911における通信は、ネットワーク107から外部ネットワーク804への通信であるため、ファイアウォール803に阻害されない。しかしながら、ステップS924の処理は、外部ネットワーク804からネットワーク107への通信であるため、ファイアウォール803に阻害され、通常であれば通信が不可能である。そこで本実施形態において、ステップS921でHTTP要求として顔識別情報を受け取ったサーバ801は、そのHTTP要求に対するHTTP応答をすぐには返さずに、HTTPセッションを保持する。
サーバ801は、そのHTTPセッションを保持したまま、ステップS922及びステップS923を行う。ステップS922及びステップS923は、ステップS522及びステップS523と同様である。ステップS924においてサーバ801は、図5に示すステップS524及びステップS525と同様の処理を同時に行う。すなわちサーバ801は、分類情報と分類済情報とを、撮影装置101に対して同時に送信する。また、ステップS924においては、S921において保持したHTTPセッションのHTTP応答として、分類情報と分類済情報とを撮影装置101に送信する。
撮影装置101は、分類情報と分類済み情報とをサーバ801から受け取る(S912)。そして撮影装置101は、ステップS913及びステップS914を、ステップS517及びステップS518と同様に行う。
このようにサーバ801は、HTTP応答の処理として分類情報と分類済み情報とを撮影装置101に送信する。こうして、本実施形態のようにファイアウォールが設置された環境においても、サーバ801から分類情報と分類済情報とを撮影装置101に送信することが可能になる。
本実施形態においては、各撮影装置は撮影を行って顔識別情報をサーバに送らなければ、分類情報をサーバから取得できない。しかし、複数の撮影装置を用いて限られた空間内で撮影を行う場合、例えばパーティ会場でパーティの風景の撮影を行う場合には、あまり時間を空けることなく定期的に撮影が行われることが一般的である。したがって、撮影装置は、分類情報をあまり時間をあけずに定期的にサーバから取得することができる。撮影装置がリアルタイムに分類情報を取得したい場合には、撮影装置からサーバへと任意の時間間隔で分類情報の送信を要求してもよい。
<実施形態4>
実施形態4では、ユーザ指示に従って分類情報が修正される。特に、図6に示した撮影促進情報において、異なる分類枠に同一人物の顔が表示された場合に、ユーザ指示に従って分類情報を修正することにより、被写体毎の撮影枚数の平準化をより正確に行うことができる。
実施形態4では、ユーザ指示に従って分類情報が修正される。特に、図6に示した撮影促進情報において、異なる分類枠に同一人物の顔が表示された場合に、ユーザ指示に従って分類情報を修正することにより、被写体毎の撮影枚数の平準化をより正確に行うことができる。
図10は、本実施形態に係る処理のフローチャートである。以下では、図10に示す処理は、図5のステップS519における撮影装置101上での画像表示の後に行われるものとして説明する。もっとも、図10に示す処理が、他の撮影装置上での画像表示の後に、例えばステップS532における撮影装置104上での表示の後に行われてもよい。すなわち、ステップS1101〜ステップS1017の処理は、撮影装置104上で行われてもよい。
まず、撮影装置101の入力部302により、2以上の分類枠を指定するユーザ入力が受け取られる(S1011)。LCD307がタッチパネル機能を有する場合には、撮影者が分類枠に直接触れることにより、分類枠を選択することもできる。次に、入力部302により、結合操作の実行を示すユーザ指示が受け取られる(S1012)。すると撮影装置101のデータ送信部414は、結合情報を含む結合指示をサーバ102に対して送信する(S1013)。この結合情報は、選択された分類枠のそれぞれについての分類識別子を含む。
サーバ102のデータ受信部421は、結合情報を含む結合指示を撮影装置101から受信する(S1021)。そしてデータ受信部421は、受信した結合情報を分類処理部422に渡す。
結合情報を受け取った分類処理部422は、データベース103中での顔識別情報と分類識別子の関連付けを変更する(S1022)。この処理により、指定された分類枠に対応する分類識別子がマージされることにより、ユーザ入力により指定された分類枠に対応するグループが統合される。具体的には分類処理部422は、結合情報に含まれる複数の分類識別子のうちの1つを選択する。また分類処理部422は、データベース103中から、結合情報に含まれる複数の分類識別子のうち選択されなかった分類識別子を有する、顔識別情報と分類識別子との組み合わせを検索する。そして分類処理部422は、検索された組み合わせについての分類識別子を、結合情報に含まれる複数の分類識別子のうち選択された分類識別子で置き換える。
ステップS1022の処理により、各分類識別子に関連付けられた顔識別情報の数が変化する。このため集計処理部S223は、ステップS523と同様に、データベース103から顔識別情報と分類識別子とのセットを読み込み、分類識別子毎に顔識別情報の数をカウントする(S1023)。その後、サーバ102のデータ送信部424は、ステップS524と同様に、各撮影装置に分類情報を送信する(S1024)。
ステップS1014〜S1015、及びステップS1031〜S1032は、ステップS516〜S517及びステップS531〜S532と同様に行われる。
以上の処理により、複数の分類を結合して一つの分類にすることが可能となる。こうして、同一人物の顔識別情報に対して異なる分類識別子が付されている状態を修正することが可能となり、複数の分類枠に同一人物が表示されている状態を修正することができる。こうして、複数の撮影装置で撮影される写真全体での被写体毎の撮影枚数の平準化の精度を高めることができる。
<実施形態5>
実施形態5では、ライブビュー表示を行いながら撮影を行う場合について説明する。ライブビュー表示においては、撮影装置101が有するLCD307に、撮影範囲内の被写体の画像がリアルタイムに表示される。本実施形態では、撮影促進情報として図6に示した分類枠を表示する代わりに、ライブビュー表示上に後述する撮影促進情報を表示する。
実施形態5では、ライブビュー表示を行いながら撮影を行う場合について説明する。ライブビュー表示においては、撮影装置101が有するLCD307に、撮影範囲内の被写体の画像がリアルタイムに表示される。本実施形態では、撮影促進情報として図6に示した分類枠を表示する代わりに、ライブビュー表示上に後述する撮影促進情報を表示する。
図12のフローチャートを参照して、本実施形態に係る処理について説明する。ステップS510は、実施形態1と同様に行われる。次に撮影促進部416は、LCD307上にライブビュー表示を行う(S1211)。そして特徴量算出部413は、実施形態1と同様に、ライブビューで表示されている画像内の人物について顔領域を抽出し、各顔領域に顔識別子を割り当てる(S512)。顔領域が抽出されなかった場合、処理はS1211に戻る(S513)。
図11は、LCD307に表示されたライブビュー表示を模式的に表す。LCD307には、抽出された顔領域を示す、顔領域枠1101,1102,1103が表示される。人物A1111については顔領域枠A1101が表示され、人物B1112については顔領域枠B1102が表示され、人物C1113については顔領域枠C1103が表示されている。
実施形態1では、特徴量算出部413は、写真が撮影されたタイミングで顔領域の抽出を行った。しかし本実施形態においては、特徴量算出部413は、任意のタイミングで顔領域の抽出を開始することができる。例えば特徴量算出部413は、最初に人物が撮影範囲内に入ってきた際に、顔領域の抽出を開始してもよい。また特徴量算出部413は、一定の時間間隔で定期的に顔領域を抽出してもよい。さらに特徴量算出部413は、顔領域が撮影範囲から外れるか、又は顔領域として認識できなくなるまで、抽出した顔領域を追尾してもよい。追尾されている顔領域に対しては、同じ顔識別子を継続して割り当てることができる。このような顔領域の追尾は、従来から知られている方法を用いて行うことができる。以下では説明のために、最初に人物が撮影範囲内に入ってきた際に、顔領域の抽出を行うものとする。
次に特徴量算出部413は、実施形態1と同様に抽出された顔領域について特徴量を算出する(S514)。そして撮影装置101のデータ送信部414は、実施形態1と同様に、それぞれの顔領域毎に、撮影装置識別子、画像識別子、顔識別子、及び特徴量のセットを、顔識別情報としてサーバ102へと送信する(S515)。
その後サーバ102は実施形態1と同様の処理を行い、撮影装置101には分類情報と分類済情報とが返される(S516,S518)。撮影促進部416は、分類情報と分類済情報とを参照して、撮影促進情報をLCD307に表示する。具体的には撮影促進部416は、各撮影装置による撮影枚数の合計がより少ない人物を示す情報を、撮影促進情報として表示する。
撮影促進部416は、分類済情報により、ステップS512で抽出した顔領域のそれぞれについての分類識別子を得ることができる。また撮影促進部416は、分類情報を参照することにより、分類識別子毎の、すなわち人物毎の、各撮影装置による撮影枚数の合計を知ることができる。
撮影促進情報の表示の具体例としては、分類識別子毎に各撮影装置による撮影枚数を順位付けした際に、順位が閾値以下の分類識別子に関連付けられた顔領域について、顔領域枠を強調表示する方法が挙げられる。強調表示としては、他の顔領域枠とは異なる色の顔領域枠を表示する方法、又は顔領域枠内若しくは顔領域枠近傍にアイコンを表示する方法が挙げられる。さらには、各撮影装置による撮影枚数を顔領域枠の近傍に表示してもよい。このようにして、LCD307上には、撮影した画像と、画像から抽出された顔領域の位置と、顔領域に対応する顔識別情報についての分類情報と、が同時に表示される。
以上のような処理により、ライブビュー表示において、リアルタイムに表示された撮影促進情報を参照しながら撮影を行うことができる。実施形態1では、特定の人物を一度も撮影していない撮影装置においては、この人物の撮影促進情報としては分類枠のみが表示され、顔画像が表示されなかった。一方で本実施形態では、特定の人物を一度も撮影していない撮影装置においても、この人物の撮影を促す撮影促進情報を、顔画像とともに表示することができる。したがって本実施形態においては、特定の人物を一度も撮影していない撮影装置を用いる撮影者に対して、この人物の撮影を促すことができる。
(他の実施形態)
以上、実施形態例を詳述したが、本発明は例えば、システム、装置、方法、プログラム若しくは記録媒体(記憶媒体)等としての実施態様をとることが可能である。具体的には、複数の機器(例えば、ホストコンピュータ、インターフェース機器、撮影装置、webアプリケーション等)から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
以上、実施形態例を詳述したが、本発明は例えば、システム、装置、方法、プログラム若しくは記録媒体(記憶媒体)等としての実施態様をとることが可能である。具体的には、複数の機器(例えば、ホストコンピュータ、インターフェース機器、撮影装置、webアプリケーション等)から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムコードを読み出して実行する。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
Claims (15)
- 複数の撮影装置と、管理装置とを備える撮影システムであって、
前記撮影装置は、
被写体の画像を撮影して格納手段に格納する撮影手段と、
前記被写体の画像から顔領域を抽出する抽出手段と、
前記顔領域内の画像の特徴量を得る算出手段と、
前記顔領域内の画像の特徴量を含む顔識別情報を前記管理装置に送信する送信手段と、を備え、
前記管理装置は、
前記顔識別情報を前記複数の撮影装置から収集して記録手段に格納する収集手段と、
前記記録手段内の顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類する分類手段と、
前記グループのそれぞれについて、該グループに所属する前記記録手段内の顔識別情報の数を計数する計数手段と、
顔識別情報を送信した撮影装置に対し、該顔識別情報が所属するグループについて、該グループに所属する前記記録手段内の顔識別情報の数の多寡を示す分類情報を提供する提供手段と、を備え、
前記撮影装置はさらに、
前記送信した顔識別情報に対応する前記分類情報を前記管理装置から受信する受信手段と、
前記分類情報をユーザに提示する提示手段と、を備える
ことを特徴とする、撮影システム。 - 前記提示手段は、前記送信した顔識別情報に対応する前記顔領域内の画像と、前記送信した顔識別情報に対応する前記分類情報とを、関連付けてユーザに提示することを特徴とする、請求項1に記載の撮影システム。
- 前記分類情報はさらに、各グループに所属する前記記録手段内の顔識別情報の数の多寡を示す情報を含み、
前記提供手段はさらに、前記顔識別情報を送信した撮影装置に対し、該顔識別情報が所属するグループを特定する分類済情報を提供し、
前記格納手段は、前記被写体の画像と、該被写体の画像から抽出された顔領域の位置情報と、前記顔識別情報と、前記分類済情報とを関連付けて格納し、
前記提示手段は、前記分類済情報を参照して各グループに所属する顔識別情報が前記格納手段に格納されているかを検索し、該検索された顔識別情報に関連付けられた被写体の画像から前記位置情報に従って前記顔領域内の画像を切り出して、各グループについての前記多寡を示す情報とともにユーザに提示する
ことを特徴とする、請求項1又は2に記載の撮影システム。 - 前記提供手段はさらに、顔識別情報を1つの撮影装置から収集する毎に、前記複数の撮影装置のそれぞれに対して前記分類情報を提供することを特徴とする、請求項3に記載の撮影システム。
- 前記撮影装置はさらに、2以上のグループを指定するユーザ指示を取得し、該ユーザ指示を前記管理装置へと送信する手段を備え、
前記分類手段は、前記ユーザ指示により指定されたグループを統合することを特徴とする、請求項3又は4に記載の撮影システム。 - 前記分類手段は、前記収集手段により収集された顔識別情報の特徴量との差が閾値以内である特徴量を有する顔識別情報を前記記録手段から検索し、該検索された顔識別情報と同じグループに前記収集された顔識別情報を分類することを特徴とする、請求項1乃至5の何れか1項に記載の撮影システム。
- 前記分類手段は、前記収集手段により収集された顔識別情報の特徴量との差が閾値以内である特徴量を有する顔識別情報が発見されない場合、前記収集手段により収集された顔識別情報を新しいグループに分類することを特徴とする、請求項6に記載の撮影システム。
- 前記提示手段は、前記撮影手段によって撮影された画像と、前記抽出手段によって該画像から抽出された顔領域の位置と、該顔領域に対応する顔識別情報についての前記分類情報と、を同時に表示することを特徴とする、請求項1乃至7の何れか1項に記載の撮影システム。
- 複数の撮影装置と、管理装置とを備える撮影システムが行う撮影支援方法であって、
撮影装置の撮影手段が、被写体の画像を撮影して格納手段に格納する撮影工程と、
撮影装置の抽出手段が、前記被写体の画像から顔領域を抽出する抽出工程と、
撮影装置の算出手段が、顔領域内の画像の特徴量を得る算出工程と、
撮影装置の送信手段が、前記顔領域内の画像の特徴量を含む顔識別情報を前記管理装置に送信する送信工程と、
管理装置の収集手段が、前記顔識別情報を前記複数の撮影装置から収集して記録手段に格納する収集工程と、
管理装置の分類手段が、前記記録手段内の顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類する分類工程と、
管理装置の計数手段が、前記グループのそれぞれについて、該グループに所属する前記記録手段内の顔識別情報の数を計数する計数工程と、
管理装置の提供手段が、顔識別情報を送信した撮影装置に対し、該顔識別情報が所属するグループについて、該グループに所属する前記記録手段内の顔識別情報の数の多寡を示す分類情報を提供する提供工程と
撮影装置の受信手段が、前記送信した顔識別情報に対応する前記分類情報を前記管理装置から受信する受信工程と、
撮影装置の提示手段が、前記分類情報をユーザに提示する提示工程と、
を有することを特徴とする、撮影支援方法。 - 被写体の画像を撮影して格納手段に格納する撮影手段と、
前記被写体の画像から顔領域を抽出する抽出手段と、
前記顔領域内の画像の特徴量を得る算出手段と、
前記顔領域内の画像の特徴量を含む顔識別情報を管理装置に送信する送信手段と、
前記送信した顔識別情報に対応する、分類情報を前記管理装置から受信する受信手段と、
前記分類情報をユーザに提示する提示手段と、を備える撮影装置であって、
前記分類情報は、複数の撮影装置から前記管理装置に送信された顔識別情報の中に含まれる、前記送信した顔識別情報と類似した特徴量を有する顔識別情報の数の多寡を示す情報である
ことを特徴とする、撮影装置。 - 被写体の画像から抽出された顔領域内の画像の特徴量を含む顔識別情報を、複数の撮影装置から取得して記録手段に格納する取得手段と、
前記記録手段内の顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類する分類手段と、
前記グループのそれぞれについて、該グループに所属する前記記録手段内の顔識別情報の数を計数する計数手段と、
顔識別情報を送信した撮影装置に対し、該顔識別情報が所属するグループについて、該グループに所属する前記記録手段内の顔識別情報の数の多寡を示す分類情報を提供する提供手段と、を備える
ことを特徴とする、管理装置。 - 撮影装置の制御方法であって、
撮影手段が、被写体の画像を撮影して格納手段に格納する撮影工程と、
抽出手段が、前記被写体の画像から顔領域を抽出する抽出工程と、
算出手段が、前記顔領域内の画像の特徴量を得る算出工程と、
送信手段が、前記顔領域内の画像の特徴量を含む顔識別情報を管理装置に送信する送信工程と、
受信手段が、前記送信した顔識別情報に対応する、分類情報を前記管理装置から受信する受信工程と、
提示手段が、前記分類情報をユーザに提示する提示工程と、を有し、
前記分類情報は、複数の撮影装置から前記管理装置に送信された顔識別情報の中に含まれる、前記送信した顔識別情報と類似した特徴量を有する顔識別情報の数の多寡を示す情報である
ことを特徴とする、撮影装置の制御方法。 - 管理装置の制御方法であって、
取得手段が、被写体の画像から抽出された顔領域内の画像の特徴量を含む顔識別情報を、複数の撮影装置から取得して記録手段に格納する取得工程と、
分類手段が、前記記録手段内の顔識別情報を、類似した特徴量を含む顔識別情報が同じグループに含まれるように分類する分類工程と、
計数手段が、前記グループのそれぞれについて、該グループに所属する前記記録手段内の顔識別情報の数を計数する計数工程と、
提供手段が、顔識別情報を送信した撮影装置に対し、該顔識別情報が所属するグループについて、該グループに所属する前記記録手段内の顔識別情報の数の多寡を示す分類情報を提供する提供工程と、
を有することを特徴とする、管理装置の制御方法。 - コンピュータを、請求項10に記載の撮影装置の各手段として機能させるための、コンピュータプログラム。
- コンピュータを、請求項11に記載の管理装置の各手段として機能させるための、コンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012183590A JP2014042170A (ja) | 2012-08-22 | 2012-08-22 | 撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012183590A JP2014042170A (ja) | 2012-08-22 | 2012-08-22 | 撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2014042170A true JP2014042170A (ja) | 2014-03-06 |
Family
ID=50394096
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012183590A Pending JP2014042170A (ja) | 2012-08-22 | 2012-08-22 | 撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2014042170A (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016005258A (ja) * | 2014-06-19 | 2016-01-12 | ビッグローブ株式会社 | 撮影システム、撮影装置、情報処理方法、及びプログラム |
JP2016043750A (ja) * | 2014-08-21 | 2016-04-04 | 嵩鎔精密工業股▲ふん▼有限公司 | タイヤ空気圧モニタリングシステム |
CN110990633A (zh) * | 2019-12-25 | 2020-04-10 | 浙江丰牛环境科技有限公司 | 基于图像检索及公示系统的垃圾分类定点管理系统及方法 |
-
2012
- 2012-08-22 JP JP2012183590A patent/JP2014042170A/ja active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016005258A (ja) * | 2014-06-19 | 2016-01-12 | ビッグローブ株式会社 | 撮影システム、撮影装置、情報処理方法、及びプログラム |
JP2016043750A (ja) * | 2014-08-21 | 2016-04-04 | 嵩鎔精密工業股▲ふん▼有限公司 | タイヤ空気圧モニタリングシステム |
CN110990633A (zh) * | 2019-12-25 | 2020-04-10 | 浙江丰牛环境科技有限公司 | 基于图像检索及公示系统的垃圾分类定点管理系统及方法 |
CN110990633B (zh) * | 2019-12-25 | 2023-09-08 | 浙江丰牛环境科技有限公司 | 基于图像检索及公示系统的垃圾分类定点管理系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101810578B1 (ko) | 셔터 클릭을 통한 자동 미디어 공유 | |
US9137308B1 (en) | Method and apparatus for enabling event-based media data capture | |
US20120321131A1 (en) | Image-related handling support system, information processing apparatus, and image-related handling support method | |
CN108228792B (zh) | 图片检索方法、电子设备及存储介质 | |
JP2018106696A (ja) | 移動オブジェクトの仮想情報構築方法、移動オブジェクトの仮想情報検索方法及びアプリケーションシステム | |
US20160179846A1 (en) | Method, system, and computer readable medium for grouping and providing collected image content | |
JP2022518459A (ja) | 情報処理方法および装置、記憶媒体 | |
JP6947085B2 (ja) | 電子機器及びその制御方法 | |
KR101832680B1 (ko) | 참석자들에 의한 이벤트 검색 | |
KR101782590B1 (ko) | 이미지 분석기반의 관계형 태그생성 및 추천 방법 | |
JP5882805B2 (ja) | 情報処理装置、その処理方法及びプログラム | |
US20200296332A1 (en) | System and method of video capture and search optimization | |
US20190147251A1 (en) | Information processing apparatus, monitoring system, method, and non-transitory computer-readable storage medium | |
JP7103229B2 (ja) | 不審度推定モデル生成装置 | |
KR101479260B1 (ko) | 사진 기반 인물 친밀도 검색 방법 | |
JP2014042170A (ja) | 撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラム | |
JP2024045460A (ja) | 情報処理システム、情報処理装置、情報処理方法、およびプログラム | |
US10599928B2 (en) | Method and system for enabling information in augmented reality applications | |
JP2015072633A (ja) | 画像処理装置及びプログラム | |
US9076031B2 (en) | Image capture apparatus, control method of image capture apparatus, and recording medium | |
KR101563238B1 (ko) | 사진 기반 인물 친밀도 구축 장치 및 방법, 그리고 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체 | |
WO2023095770A1 (ja) | 拡張現実表示装置、サーバ装置、拡張現実表示システム、拡張現実表示方法、及びプログラム | |
US10783616B2 (en) | Method and apparatus for sharing and downloading light field image | |
JP2017175453A (ja) | 画像処理装置及び画像処理方法 | |
JP2024018302A (ja) | 情報処理装置、方法及びプログラム並びに情報処理システム |