JP2018157254A - 画像管理装置、画像管理方法、及びプログラム - Google Patents

Abstract

【課題】状況を記録した画像を、より簡易な方法で管理する画像管理装置、画像管理方法、及びプログラムを提供する。
【解決手段】画像管理装置は、第１カメラの撮影に基づいて生成された第１画像と、第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得する取得部と、少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出する位置抽出部と、前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示するように制御する表示制御部とを備える。
【選択図】図８

Description

本発明は、画像管理装置、画像管理方法、及びプログラムに関する。

従来、建物等の施設において、その施設の現在の状況をカメラ等で撮影して、その画像を画像管理装置により管理する画像管理方法が知られている。このような画像管理方法では、複数の画像を台帳に収めて管理することがある。この台帳を参照することにより、例えば、工事の施工記録や現地調査の記録等の施設の状況を収めた画像を参照することができる。そのような用途で利用される台帳には、画像の他、その画像の説明資料等が含まれることがある。画像の説明資料には、例えば、撮影者がその画像を撮影した地点等を記録に残すように、その周辺を示す平面図等が含まれており、その平面図中にはその画像の識別番号、その画像を撮影した地点等が記載されることがある。

また、１回の撮影操作で、撮影地点の周囲の状況を１つの全周囲画像に収める技術が知られている（例えば、特許文献１参照。）。

特開２０１５−９５８５３号公報

しかしながら、撮影の現場では、撮影の都度、平面図等に撮影の記録としてのメモを残しながら目的の作業を行い、また、現場を引き上げてから、上記のような台帳を作成することがある。このように撮影中の作業も台帳を作成する作業も、撮影した画像の数量の増加に伴い増大し、煩雑になることがある。
また、全周囲画像では、撮影地点から目的の対象物（被写体）までの距離が遠くなると、その対象物の状況を、必要とされる解像度で記録することができないことがある。これに対し、必要とされる解像度の画像が得られるように目的の対象物に接近して撮影することにすると、全周囲画像としての特徴を有効に利用することができずに画像の数量が増えてしまい、個別の画像を複数撮影する場合と同様に煩雑になることがある。

本発明が解決しようとする課題は、状況を記録した画像を、より簡易な方法で管理する画像管理装置、画像管理方法、及びプログラムを提供することにある。

（１）本発明の一態様の画像管理装置は、第１カメラの撮影に基づいて生成された第１画像と、第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得する取得部と、少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出する位置抽出部と、前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示するように制御する表示制御部とを備える画像管理装置である。
（２）また、上記の画像管理装置における前記表示制御部は、前記抽出した位置に基づいて、前記背景画像上に前記第１画像を重ねて表示するように制御する。
（３）また、上記の画像管理装置において、前記第２画像における位置と前記背景画像における位置との間に対応関係が有る。
（４）また、上記の画像管理装置において、前記第２画像の構図と前記背景画像の構図との間に対応関係が有る。
（５）また、上記の画像管理装置において、前記第１画像の水平画角は、前記第２画像の水平画角より狭い。
（６）また、本発明の一態様の画像管理方法は、第１カメラの撮影に基づいて生成された第１画像と、第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得するステップと、少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出するステップと、前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示するように制御するステップとを含む画像管理方法である。
（７）また、本発明の一態様のプログラムは、第１カメラの撮影に基づいて生成された第１画像と、第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得するステップと、少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出するステップと、前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示するように制御するステップとを、コンピュータに実行させるためのプログラムである。

本発明によれば、状況を記録した画像を、より簡易な方法で管理する画像管理装置、画像管理方法、及びプログラムを提供できる。

本発明の実施形態に係る画像管理システムの概要を説明するための図である。 実施形態に係る第２画像の一例について説明するための図である。 実施形態に係る画像管理装置の構成図である。 実施形態に係る画像管理装置２００の機能構成を示す図である。 実施形態の背景画像の一例について説明するための図である。 実施形態に係る画像形成の手順を示すフローチャートである。 実施形態に係る画像形成の処理の概要を説明するための図である。 実施形態の第１画像を撮影者Ｕ１の位置に関連付けて背景画像上に表示する処理により生成される表示の一例を示す図である。 実施形態の背景画像上の第１画像の位置を変更する処理により生成される表示の一例を示す図である。 実施形態の複数の第１画像を撮影者Ｕ１の位置に関連付けて背景画像上に表示する処理により生成される表示の一例を示す図である。 実施形態に係る画像形成の手順を示すフローチャートである。 実施形態に係る背景画像の形成に関する処理の手順を示すフローチャートである。

以下、本発明の実施形態の画像管理装置、画像管理方法、及びプログラムについて、添付図面を参照して説明する。

（第１の実施形態）
図１は、本発明の実施形態に係る画像管理システムの概要を説明するための図である。
図１に示す画像管理システム１は、第１カメラ１１０と、第２カメラ１２０と、画像管理装置２００とを含む。例えば、撮影者Ｕ１が施設２内の対象領域１０においてその状況を記録することを例示して、本実施形態について説明する。

第１カメラ１１０は、図１に示していない撮像素子、光学系、信号処理部、記憶部、通信部等を含めて構成される。第１カメラ１１０は、光学系を経て届いた光を撮像素子が検出し、信号処理部の処理を経て第１画像を生成する。その第１画像は、静止画像又は動画像の何れでもよい。例えば、第１カメラ１１０は、比較的高精細な画像を撮影することを可能とするものである。このような第１カメラ１１０は、所謂デジタルカメラ、スマートフォン等の携帯型の装置として構成されていてもよい。第１カメラ１１０は、撮影して得た第１画像を、通信部を介して送信してもよく、それを記憶媒体に書き込み、外部の装置に提供可能にしてもよい。

実施形態の第１カメラ１１０は、例えば撮影者Ｕ１によって携行され、撮影者Ｕ１の操作等により撮影して第１画像を生成する。例えば、カメラで撮影する一般的な要領と同様の方法で、撮影者Ｕ１は、第１カメラ１１０を手で支持して撮影する。つまり、第１カメラ１１０が撮影する方向は、撮影者Ｕ１により決定され、第１画像には、撮影者Ｕ１が決定した方向の撮影可能画角の範囲内に位置する被写体が撮影される。

第２カメラ１２０は、図１に示していない撮像素子、光学系、信号処理部、記憶部、通信部等を含めて構成される。第２カメラ１２０は、光学系を経て届いた光を撮像素子が検出し、信号処理部の処理を経て第２画像を生成する。その第２画像は、静止画像又は動画像の何れでもよい。

第２カメラ１２０は、例えば、第１カメラ１１０を用いて撮影する撮影者Ｕ１の位置の近傍に、当該第２カメラ１２０の位置を固定又は半固定にして配置され、配置された位置の周囲の画像を撮影して第２画像を生成する。例えば、第２カメラ１２０は、少なくとも撮影者Ｕ１又は第１カメラ１１０の移動に伴って移動しないポール、三脚、雲台等により支持された状態で、その所定の期間に渡って撮影する。上記の所定の期間は、撮影者Ｕ１が第１カメラ１１０を用いて、撮影する行為を１又は複数回実施する期間、１又は複数の静止画像を撮影する期間、連続性のある１又は複数の動画像を撮影する期間等の内の少なくとも何れかを含むように決定される。このようにして、第２カメラ１２０は、その位置を固定又は半固定にした状態で撮影することができる。なお、第２カメラ１２０は、その撮影後に移動することが制限されることはなく、例えば、走行等の方法で移動する移動手段を備えるものであれば、第２カメラ１２０が移動手段により移動してもよい。

上記のように第２カメラ１２０の撮影方向、画角、配置される位置等の撮影条件は、第１画像の撮影者Ｕ１又は第１カメラ１１０が映り込むように決定され、第１画像の水平画角が第２画像の水平画角より狭くなるように調整されている。第２カメラ１２０は、少なくとも第１カメラ１１０から第１画像の撮影実施の通知を受けて、その撮影に同期して静止画像を撮影するか、第１カメラ１１０の撮影前に録画開始の通知などに応じて動画像を記録するように、撮影条件が制限される。

例えば、第２カメラ１２０は、比較的広い画角で撮影することを可能とする光学系を有し、所謂パノラマ画像、全周囲画像、正距円筒図法による画像（以下、正距円筒画像という。）等の撮影を可能とするものである。なお、第２カメラ１２０は、複数の撮像素子を有していて、それぞれの撮像素子により撮影された画像を合成して、上記のような画像（第２画像）を生成してもよい。このような第２カメラ１２０は、所謂デジタルカメラ、スマートフォン等の携帯型の装置として構成されていてもよい。第２カメラ１２０は、撮影して得た第２画像等を、通信部を介して送信してもよく、それを記憶媒体に書き込み、外部の装置に提供可能にしてもよい。

図２は、実施形態に係る第２画像の一例について説明するための図である。
この図２に示す画像は、正距円筒画像の一例であり、図２（ａ）と図２（ｂ）にそれぞれ示す第２画像（ＰＩＣ２）は、互いに異なる時刻で撮影されたものの一例である。この図２に示すように、撮影者Ｕ１が、第１カメラ１１０を携帯して、第２カメラ１２０の近傍を移動して、第１カメラ１１０を用いて目的の第１画像を撮影したことが、各第２画像に記録されている。

図３は、実施形態に係る画像管理装置の構成図である。画像管理装置２００は、例えば、ＣＰＵ２００Ａと、ＲＡＭ（Random Access Memory）２００Ｂと、不揮発性記憶装置２００Ｃと、可搬型記憶媒体収納部２００Ｄと、入出力装置２００Ｅと、通信インターフェース２００Ｆとを備える。画像管理装置２００は、ＣＰＵ２００Ａに代えて、任意の形態のプロセッサを備えてもよいし、図２に示した各構成要素のうち一部を省略してもよい。

ＣＰＵ２００Ａは、不揮発性記憶装置２００Ｃに格納されたプログラム、又は可搬型記憶媒体収納部２００Ｄに装着された可搬型記憶媒体に格納されたデータをＲＡＭ２００Ｂに展開して実行することで、以下に説明する種々の処理を行う。ＲＡＭ２００Ｂは、ＣＰＵ２００Ａによってワーキングエリアとして使用される。不揮発性記憶装置２００Ｃは、例えば、ＨＤＤやフラッシュメモリ、ＲＯＭ（Read Only Memory）などである。可搬型記憶媒体収納部２００Ｄには、ＳＤカード又はＳＩＭカードなどの可搬型記憶媒体が装着される。入出力装置２００Ｅは、例えば、タッチパネル、表示装置などを含む。通信インターフェース２００Ｆは、ネットワークＮＷに接続され、画像管理装置２００における通信を制御する。

図４を参照して、実施形態に係る画像管理装置２００の機能構成について説明する。図４は、実施形態に係る画像管理装置２００の機能構成を示す図である。画像管理装置２００は、記憶部２１０と、制御部２２０とを備える。

記憶部２１０は、取得した第１画像（ＰＩＣ１）と第２画像（ＰＩＣ２）が関連付けられて格納される撮影画像ＤＢ２１１、第２画像に対応する背景画像（ＰＩＣＢＧ）が格納される背景画像ＤＢ２１２、表示画像に係るデータが格納される表示画像ＤＢ２１３等を格納する。

制御部２２０は、受付処理部２２１と、画像取得部２２２と、位置抽出部２２３と、表示制御部２２４と、通信処理部２２５とを備える。これらの機能部は、例えば、ＣＰＵ２００Ａがプログラムを実行することにより実現される。また、これらの機能部は、ＬＳＩ（Large Scale Integration）やＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）などのハードウェアによって実現されてもよいし、ソフトウェアとハードウェアが協働することで実現されてもよい。

受付処理部２２１は、入出力装置２００Ｅによって検出された撮影者Ｕ１などのユーザの操作を受け付ける。例えば、受付処理部２２１は、入出力装置２００Ｅにより表示された画像上のボタンなどを選択する操作を検出して、ユーザの操作として受け付ける。受付処理部２２１は、検出したユーザの操作に基づいた処理を、制御部２２０における各部に実行させる。

画像取得部２２２は、第１カメラ１１０から第１画像を取得し、第２カメラ１２０から第２画像を取得して撮影画像ＤＢ２１１に格納する。なお、実施形態の画像取得部２２２は、第２カメラ１２０から背景画像を取得して背景画像ＤＢ２１２に格納する。図５は、実施形態の背景画像の一例について説明するための図である。

位置抽出部２２３は、撮影画像ＤＢ２１１に格納された少なくとも１つの第２画像に基づいて、第１画像の撮影者Ｕ１又は前記第１カメラ１１０の位置を抽出する。

本実施形態の位置抽出部２２３は、第２画像に基づいて、第１画像の撮影者Ｕ１又は第１カメラ１１０の位置を抽出する。

表示制御部２２４は、第１画像等を、位置抽出部２２３によって抽出された位置に関連付けて、背景画像上に表示するように制御する。その詳細については後述する。

通信処理部２２５は、ネットワークに接続され、第１カメラ１１０、第２カメラ１２０、端末装置等と通信を制御する。

図６と図７を参照して、実施形態に係る画像形成の手順について説明する。
図６は、実施形態に係る画像形成の手順を示すフローチャートである。図７は、実施形態に係る画像形成の処理の概要を説明するための図である。

まず、第２カメラ１２０が背景画像を撮影する（ステップＳＡ１０）。例えば、撮影者Ｕ１等が、第２画像を撮影する位置に第２カメラ１２０を据える。撮影者Ｕ１等の移動する被写体が存在しない状況のもとで、撮影者Ｕ１の操作により、第２カメラ１２０がその周囲の状況を撮影する。

次に、第１カメラ１１０と第２カメラ１２０とが、第１画像と第２画像とを対応付けるように撮影する（ステップＳＡ２０）。例えば、第１カメラ１１０は、撮影して第１画像を生成する際に、撮影時刻を示す時刻情報を合わせて記録する。第２カメラ１２０は、撮影して第２画像を生成する際に、撮影時刻を示す時刻情報を合わせて記録する。第１画像に関する時刻情報と第２画像に関する時刻情報とに基づいて、それぞれに対応付けることを可能にする。なお、第１カメラ１１０は、撮影時に第２カメラ１２０に対して、静止画像の撮影指示を送り、第２カメラ１２０に撮影させてもよい。

次に、画像取得部２２２は、第１画像と、第２画像と、背景画像とをそれぞれのカメラから取得して（ステップＳＡ３０）、それぞれを記憶部２１０に格納する。

次に、位置抽出部２２３は、第２画像から撮影者Ｕ１の位置を特定する（ステップＳＡ４０）。例えば、位置抽出部２２３は、撮影者Ｕ１の頭部の位置又は第１カメラの位置を特定して、撮影者Ｕ１の位置としてもよい。位置抽出部２２３は、撮影者Ｕ１の頭部の位置を、第２画像上の撮影者Ｕ１の頭部の像の範囲の重心に対応付けてもよい。又は、位置抽出部２２３は、第１カメラの位置を、第２画像上の第１カメラの像の範囲の重心に対応付けてもよい。

次に、表示制御部２２４は、上記の第２画像上の位置に関連付けられた位置を決定し、背景画像上のその位置に第１画像を表示する（ステップＳＡ５０）。例えば、第２画像の範囲と背景画像の範囲とが同じ画像である場合、第２画像上の位置葉、背景画像上の位置に対応付けることができる。

次に、表示制御部２２４は、第１画像の位置の変更する要求の有無について判定する（ステップＳＡ６０）。第１画像の位置の変更する要求が有る場合、第１画像の位置の変更する指示を受け付けて、その指示に従い背景画像上の第１画像の位置を変更する（ステップＳＡ７０）。

第１画像の位置の変更する要求が無い場合、又は、ステップＳＡ７０の処理を終えた後に、図６に示す一連の処理を終える。なお、上記の手順は一例を示すものであり、上記の手順に従い順に処理を実施することの他、一部の処理の順序を替えて実施してもよく、並行して実施してもよい。例えば、ステップＳＡ１０における背景画像の撮影の処理は、ステップＳＡ３０の処理として背景画像が使われるまでに実施されていればよい。

なお、表示制御部２２４は、背景画像、第１画像、撮影者Ｕ１の像等のそれぞれを、互いに異なるレイヤに割り付けて置き、重ねた状態で表示するか表示しないかの処理を、上記のレイヤ単位に実施するようにしてもよい。例えば、このような場合の表示画像ＤＢ２１３には、背景画像、第１画像、撮影者Ｕ１の像のそれぞれを参照可能とし、それぞれを関連付けるためのデータが、表示画像に係るデータとして格納される。

続いて、上記の「第２画像から撮影者Ｕ１の位置を特定する処理」（ステップＳＡ４０）と、「第１画像を撮影者Ｕ１の位置に関連付けて背景画像上に表示する処理」（ステップＳＡ５０）と、「背景画像上の第１画像の位置を変更する処理」（ステップＳＡ７０）とに関するより具体的な事例について説明する。

［第２画像から撮影者Ｕ１の位置を特定する処理］
位置抽出部２２３は、撮影者Ｕ１の位置を、下記の何れかの方法で特定する。

・第２画像と背景画像に基づく処理
位置抽出部２２３は、第２画像と背景画像に基づき、第２画像と背景画像の差を取り、その差があった位置に動体が存在すると推定し、推定した動体に対して識別情報（動体ＩＤ）を付与する。なお、位置抽出部２２３は、検出した動体を人として特定してもよく、予め定められた条件を満たす場合に、その動体を人として特定してもよい。

・撮影時刻が互いに異なる複数の第２画像に基づく処理
位置抽出部２２３は、撮影時刻が互いに異なる複数の第２画像に基づき、互いの画像の差を取り、その差があった位置に動体が存在すると推定し、特定した動体に対して識別情報（動体ＩＤ）を付与する。なお、位置抽出部２２３は、検出した動体を人として特定してもよく、予め定められた条件を満たす場合に、その動体を人として特定してもよい。

例えば、上記の何れかの方法に基づいて特定した動体に対してそれを代表する代表点を予め定める。位置抽出部２２３は、その代表点の位置を検出する。位置抽出部２２３は、上記の識別情報（動体ＩＤ）と、代表点の位置とを関連付けて、それらを撮影者Ｕ１の位置を示す情報として扱う。

［第１画像を撮影者Ｕ１の位置に関連付けて背景画像上に表示する処理］
図８を参照して、実施形態の第１画像を撮影者Ｕ１の位置に関連付けて背景画像上に表示する処理について説明する。図８は、実施形態の第１画像を撮影者Ｕ１の位置に関連付けて背景画像上に表示する処理により生成される表示の一例を示す図である。
符号ＰＩＣＢＧは、背景画像として表示する画像の範囲を示す。この画像は、上記第２画像に対応する背景画像に基づくものであり、例えば、正距円筒画像である。以下に示す各画像は、位置抽出部２２３が抽出した第１画像の撮影者Ｕ１又は前記第１カメラ１１０の位置に基づいて、表示制御部２２４によって、背景画像上に前記第１画像を重ねて表示するための処理が実行されて生成される。

図８（ａ）における画像ＰＩＣＢＧの一部に、第１画像を示すオブジェクト（ＰＩＣ１）が配置されている。表示制御部２２４は、この第１画像を示すオブジェクト（ＰＩＣ１−１）を、例えば、第１画像を縮小した画像、所謂サムネイル画像として表示する。なお、表示制御部２２４は、このオブジェクトを上記のサムネイル画像に代えて、第１画像を示すアイコンにして表示してもよい。また、表示制御部２２４は、上記のサムネイル画像又はアイコンを、操作により選択された状態と、選択されていない状態とを識別可能に表示してもよい。また、この撮影者Ｕ１等の像は、第２画像から抽出された撮影者Ｕ１等の像に基づくものであり、撮影者Ｕ１が撮影した位置に対応する位置を画像ＰＩＣＢＧ上に示すものである。

図８（ｂ）における画像ＰＩＣＢＧの一部に、第１画像を示すオブジェクトと撮影者Ｕ１等の像が配置されている。
例えば、この撮影者Ｕ１等の像は、第２画像から抽出された撮影者Ｕ１等の像に基づくものであり、第２画像上の位置に対応させて画像ＰＩＣＢＧの一部に配置されている。
表示制御部２２４は、この撮影者Ｕ１等の像を、操作により当該画像内に表示させて、図８（ｂ）のように表示したり、図８（ａ）のように表示を消したりすることができる。

図８（ｃ）における画像ＰＩＣＢＧの一部に、第１画像を示すオブジェクトと撮影者Ｕ１等の像を半透明化した象が配置されている。
例えば、表示制御部２２４は、図８（ｂ）に示したように、撮影者Ｕ１等の像の表示を、表示又は非表示を切り替えることの他に、その像の表示を半透明化して表示してもよい。なお、表示制御部２２４は、半透明化して表示することに代えて、撮影者Ｕ１等の像の輪郭（シルエット）を表示するようにしてもよい。なお、表示制御部２２４は、撮影者Ｕ１等の像の輪郭（シルエット）の色と、第１画像を示すオブジェクトの色又はその枠の色とを、同一の色にして表示してもよい。

なお、画像管理装置２００は、上記の各画像の表示の種類を、ユーザの操作等に基づいて予め択一的に選択することができ、又は、複数の種類をユーザの操作等に基づいて選択し、切り替えて表示することができる。
表示制御部２２４は、サムネイル画像又はアイコン等の第１画像を示すオブジェクトに対する操作、又は、撮影者Ｕ１等の像に対する操作などの検出により、画像を選択するための操作として受け付けてもよい。

［背景画像上の第１画像の位置を変更する処理］
図９を参照して、実施形態の背景画像上の第１画像の位置を変更する処理について説明する。図９は、実施形態の背景画像上の第１画像の位置を変更する処理により生成される表示の一例を示す図である。

前述の図８（ａ）のように、第１画像は、背景画像（画像ＰＩＣＢＧ）上の所望の位置に配置されている。所望の位置とは、撮影者Ｕ１の像の位置に関連付けて背景画像（画像ＰＩＣＢＧ）上に表示する処理によって決定された位置である。ここで、第１画像の位置を変更することが必要な場合には、画像管理装置２００は、それを操作する撮影者Ｕ１等のユーザの操作に基づいて、画像ＰＩＣＢＧ内の他の位置に移動させて表示してもよい。その結果、図９に示すように第１画像は、背景画像上の位置を変更する処理によって決定された位置に改めて配置される。

なお、図９（ａ）のように撮影者Ｕ１の像を表示したり、図９（ｂ）のように半透明化して表示したりしてもよい。なお、半透明化して表示することに代えて、撮影者Ｕ１等の像の輪郭（シルエット）を表示するようにしてもよい。また、撮影者Ｕ１の像を非表示にすることも含めて、図８の場合と同様に適宜切り替えることができる。

なお、図９に示すように、撮影者Ｕ１の像と第１画像ＰＩＣ１−１とが配置された位置が離れる場合には、表示制御部２２４は、下記の何れかの方法で、それらの対応関係が明らかになるよう表示するとよい。

例えば、第１の表示の方法として、撮影者Ｕ１の像と第１画像ＰＩＣ１−１の何れか一方が選択された際に、表示制御部２２４は、その一方の表示を変更するのに合わせて、他方の表示を、一方の表示方法と同様の表示方法で変更するとよい。

また、第２の表示の方法として、対応関係のある撮影者Ｕ１の像と第１画像ＰＩＣ１−１の間を線などで繋いで表示してもよい。例えば、表示制御部２２４は、撮影者Ｕ１が操作する第１カメラ１１０と第１画像ＰＩＣ１−１の間を、第１画像ＰＩＣ１−１の位置に追従する線ＲＬ１−１で繋いで表示する。これにより、第１画像ＰＩＣ１−１が、撮影者Ｕ１から離れた位置に配置されたとしても、対応関係を視覚的に確認可能になる。

上記の実施形態によれば、画像管理装置２００は、第１カメラ１１０の撮影に基づいて生成された第１画像と、第２カメラ１２０の撮影に基づいて生成され、第１画像の撮影者Ｕ１又は第１カメラ１１０が映り込んでいる第２画像と、第２画像に対応する背景画像であって、第１画像の撮影者Ｕ１又は第１カメラ１１０が映り込んでいない背景画像と、を取得する取得部と、少なくとも１つの第２画像に基づいて、第１画像の撮影者Ｕ１又は第１カメラ１１０の位置を抽出する位置抽出部２２３と、前記抽出された位置に関連付けて、第１画像を背景画像上に表示するように制御する表示制御部２２４とを備えることにより、状況を記録した画像を、より簡易な方法で管理することができる。

なお、表示制御部２２４が、位置抽出部２２３が抽出した第１画像の撮影者Ｕ１又は第１カメラ１１０の位置に基づいて、背景画像上に第１画像を重ねて表示してもよい。これにより、ユーザの操作を介在することなく、背景画像上の適した位置に第１画像を表示することを可能にしたことで、状況を記録した画像を、より簡易な方法で管理することができる。

なお、第２画像における位置と背景画像における位置との間に対応関係が有るようにするようにしてもよく、第２画像の構図と背景画像の構図との間に対応関係が有るようにしてもよい。これにより、表示制御部２２４が、第２画像における位置に基づいて、その位置に対応する背景画像における位置に、第１画像を表示することを容易にする。

なお、第１画像の水平画角は、第２画像の水平画角より狭いことにより、細部の状況を拡大して撮影することができ、第２画像の解像度では記録しきれない事象も詳細な画像として残すことができる。

（第１の実施形態の変形例）
第１の実施形態の変形例について説明する。第１の実施形態では、図８と図９に示すように、１つの第１画像を背景画像上に表示する事例について説明した。これに代えて、本変形例では、複数の第１画像を背景画像上に表示する事例について説明する。

図１０は、実施形態の複数の第１画像を撮影者Ｕ１の位置に関連付けて背景画像上に表示する処理により生成される表示の一例を示す図である。

符号ＰＩＣ１−１とＰＩＣ１−２に対応する複数の第１画像を表示する場合には、下記のように個々の第１画像を扱うとよい。個々の第１画像には、それを撮影した際の撮影者Ｕ１−１、Ｕ１−２等の撮影者の像が、識別番号（動体ＩＤ）又は他の識別情報を用いて対応付けられる。表示制御部２２４は、個々の第１画像を、識別番号（動体ＩＤ）又は他の識別情報により識別可能な状態で表示する。例えば、図１０（ａ）に示すように第１画像内に、「Ｎｏ．１」、「Ｎｏ．２」などの識別番号（動体ＩＤ）又は他の識別情報を表示する。また、図１０（ｂ）に示すように、撮影者Ｕ１の像を表示してもよい。

この変形例によれば、第１実施形態と同様の効果を奏することの他、１つの背景画像を用いて、複数の第１画像を管理することができる。

（第２の実施形態）
第２の実施形態について説明する。第１の実施形態では、第２カメラ１２０が背景画像用に撮影して得た画像をそのまま利用する事例について説明した。本実施形態では、第２カメラ１２０が背景画像用に個別に撮影することを必要とせず、これに代えて、撮影者Ｕ１の位置検出用の画像を兼用する事例について説明する。以下の説明では、第１の実施形態との相違点を中心に説明する。

実施形態の画像取得部２２２は、第２カメラ１２０から第２画像を取得して、第２画像に基づいて背景画像を生成する。画像取得部２２２は、生成した背景画像を背景画像ＤＢに格納する。

図１１を参照して、実施形態に係る画像形成の手順について説明する。
図１１は、実施形態に係る画像形成の手順を示すフローチャートである。

まず、第１カメラ１１０と第２カメラ１２０とが、第１画像と第２画像とを対応付けるように撮影する（ステップＳＢ２０）。例えば、第１カメラ１１０は、撮影して第１画像を生成する際に、撮影時刻を示す時刻情報を合わせて記録する。第２カメラ１２０は、撮影して第２画像を生成する際に、撮影時刻を示す時刻情報を合わせて記録する。第１画像に関する時刻情報と第２画像に関する時刻情報とに基づいて、それぞれに対応付けることを可能にする。なお、第１カメラ１１０は、撮影時に第２カメラ１２０に対して、静止画像の撮影指示を送り、第２カメラ１２０に撮影させてもよい。

次に、画像取得部２２２は、第１画像、第２画像をそれぞれのカメラから取得して（ステップＳＢ３０）、それぞれを記憶部２１０に格納する。

次に、位置抽出部２２３は、第２画像から撮影者Ｕ１の位置を特定する（ステップＳＢ４０）。

次に、表示制御部２２４は、背景画像の有無について判定する（ステップＳＢ４２）。ステップＳＢ４２において、背景画像が有る場合には、表示制御部２２４は、処理をステップＳ５０に進める。ステップＳＢ４２において、背景画像が無い場合には、表示制御部２２４は、第２画像に基づいて背景画像を生成する（ステップＳＢ４４）。

ステップＳ４４の処理を終えた後、又は、ステップＳＢ４２において背景画像が有ると判定された後に、表示制御部２２４は、第１画像を、上記の位置に関連付けて背景画像上に表示する（ステップＳＢ５０）。

次に、表示制御部２２４は、第１画像の位置の変更する要求の有無について判定する（ステップＳＢ６０）。第１画像の位置の変更する要求が有る場合、第１画像の位置の変更する指示を受け付けて、その指示に従い背景画像上の第１画像の位置を変更する（ステップＳＢ７０）。
ステップＳＢ６０において第１画像の位置の変更する要求が無いと判定された場合、又は、ステップＳＢ７０の処理を終えた後に、図１１に示す一連の処理を終える。

図１２を参照して、実施形態に係る背景画像の形成に関する処理の手順について説明する。図１２は、実施形態に係る背景画像の形成に関する処理の手順を示すフローチャートである。

まず、表示制御部２２４は、撮影者Ｕ１等の移動する被写体が存在する状況か否かを問わずに、撮影時刻が異なるように所定の時間間隔を空けて複数の第２画像を撮影する（ステップＳＢ４４２）。この複数の第２画像とは、複数の静止画像であってもよく、一連の動画像の内の異なる時刻の画像であってもよい。以下、これらを纏めて「複数の第２画像」と呼ぶ。なお、下記の背景画像を生成する処理に適した複数の第２画像が既に格納されている場合には、このステップの処理を省略することができる。背景画像を生成する処理に適した複数の第２画像とは、動体の像の範囲が互いに重ならない画像であることを必要条件とするものである。

次に、表示制御部２２４は、複数の第２画像に基づいて、背景差分等の手法により動体を検出して、その動体の像を画像から削除するとともに、その削除した範囲を移動しない被写体の像で補うように画像を合成する画像処理の手法により背景画像を生成し（ステップＳＢ４４４）、背景画像ＤＢに格納する。

上記の実施形態によれば、第１実施形態と同様の効果を奏することの他、背景画像用にする画像を個別に撮影するまでもなく、第２画像に基づいて生成した背景画像を用いて、複数の第１画像を管理することができる。

少なくとも上記の実施形態によれば、画像管理装置２００は、第１カメラの撮影に基づいて生成された第１画像と、第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得し、少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出し、前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示することにより、状況を記録した画像を、より簡易な方法で管理することができる。

なお、画像管理装置２００を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより建物２等において撮影された画像を管理するための処理動作を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。

また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、ネットワークや通信回線のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１…画像管理システム、２…建物、１１０…第１カメラ、１２０…第２カメラ、２００…画像管理装置、２１０…記憶部、２２０…制御部、２２１…受付処理部、２２２…画像取得部、２２３…位置抽出部、２２４…表示制御部

Claims (7)

1. 第１カメラの撮影に基づいて生成された第１画像と、
   第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、
   前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得する取得部と、
   少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出する位置抽出部と、
   前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示するように制御する表示制御部と
   を備える画像管理装置。
2. 前記表示制御部は、
   前記抽出した位置に基づいて、前記背景画像上に前記第１画像を重ねて表示するように制御する、
   請求項１に記載の画像管理装置。
3. 前記第２画像における位置と前記背景画像における位置との間に対応関係が有る、
   請求項１又は請求項２に記載の画像管理装置。
4. 前記第２画像の構図と前記背景画像の構図との間に対応関係が有る、
   請求項１から請求項３の何れか１項に記載の画像管理装置。
5. 前記第１画像の水平画角は、前記第２画像の水平画角より狭い、
   請求項１から請求項４の何れか１項に記載の画像管理装置。
6. 第１カメラの撮影に基づいて生成された第１画像と、
   第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、
   前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得するステップと、
   少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出するステップと、
   前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示するように制御するステップと
   を含む画像管理方法。
7. 第１カメラの撮影に基づいて生成された第１画像と、
   第２カメラの撮影に基づいて生成され、前記第１画像の撮影者又は前記第１カメラが映り込んでいる第２画像と、
   前記第２画像に対応する背景画像であって、前記第１画像の撮影者又は前記第１カメラが映り込んでいない背景画像と、を取得するステップと、
   少なくとも１つの前記第２画像に基づいて、前記第１画像の撮影者又は前記第１カメラの位置を抽出するステップと、
   前記抽出された位置に関連付けて、前記第１画像を前記背景画像上に表示するように制御するステップとを、
   コンピュータに実行させるためのプログラム。

Images