JP6617547B2 - 画像管理システム、画像管理方法、プログラム - Google Patents

Description

本発明は、画像管理システム、画像管理方法及びプログラムに関する。

一度の撮像で、周囲３６０°の全方位を撮像可能な撮像装置が知られている。この撮像装置が撮像により作成する画像データは全方位が写っているので画像が湾曲しており、ユーザが二次元の画面で一度に全体を見ることが困難である。そのため、所定の視点から見た一部の所定領域をユーザが指定して、スマートフォン等が全方位画像から所定領域を切り出して表示する場合がある。これにより所定領域を平面画像のように閲覧することができる。また、ユーザはＳＮＳ（Social Network System）等に全方位画像をアップロードすることで、全方位画像を公開することもできる。他のユーザは全方位画像をダウンロードしてスマートフォン等に表示する。

しかしながら、全方位画像は、ユーザが表示させた所定領域に必ずしもユーザが意図する見所が表示されるとは限らないという特徴を有している。また、ユーザはスマートフォン等で任意の所定領域を容易に表示させることができるが、全方位画像を閲覧するためのアプリケーションソフトウェアがいったん終了されると、再度、アプリケーションソフトウェアを起動した際に終了前の所定領域の情報を失ってしまう。

そこで、画像データに視点を表す所定領域情報を付与しておく技術が考案されている（例えば、特許文献１参照。）。特許文献１には、通信端末に対し画像データを送信する際、画像データにおける所定領域を示す所定領域情報を送信する画像管理システムが開示されている。

しかしながら、特許文献１に記載されているように画像データに所定領域情報が付与されている場合、画像データに含まれる任意の場所を定点観測するような使い方に適さないという問題がある。

定点観測について補足する。当初はユーザが手で持って撮像することが多かった全方位を撮像可能な撮像装置であるが、定点カメラとして建物内に設置される利用方法が検討されている。例えば、店舗における消費者等の行動分析の分野で活用が期待されている。店舗内に設置された撮像装置が定期的に撮像を行いサーバなどに全方位画像を蓄積しておく。行動分析するユーザはサーバから全方位画像を時系列に受信して閲覧することが可能である。これにより、店舗を訪れた消費者がどのようにして購入に至ったのか、又は、購入しなかったのか等の経緯を店舗側の担当者が分析して、販売計画の立案等に役立てることが可能である。

定点撮像された時系列の全方位画像を閲覧して店舗側の担当者が分析する場合、利用する視点は限られている。あるいは、決まった視点で分析したいという要請がある。しかし、従来のように、画像データに見所となる所定領域情報を付与する方法では、画像データによって所定領域が変わってしまうおそれがあり、全方位画像の所定領域を時系列に定点観測するには適さない場合がある。

本発明は上記課題に鑑み、所定の視点による画像データの閲覧が可能な画像管理システムを提供することを目的とする。

上記課題に鑑み、本発明は、撮像装置が撮像した全方位画像を前記撮像装置と関連付けて管理する画像管理システムであって、前記撮像装置の識別情報と共に取得した前記全方位画像をディスプレイに表示する際の表示範囲の設定を受け付ける受付手段と、情報端末が前記撮像装置の識別情報と共に前記表示範囲の登録を要求した場合、前記撮像装置の識別情報に対応付けて前記表示範囲を指定する表示範囲情報を記憶装置に登録する登録手段と、前記撮像装置を指定して前記全方位画像を要求された場合、前記記憶装置において前記撮像装置の前記識別情報に対応付けられている前記表示範囲情報、及び、前記撮像装置が撮像した前記全方位画像を提供する提供手段と、前記提供手段が提供した前記表示範囲情報で前記全方位画像の前記表示範囲を決定し、ディスプレイに表示する表示制御手段と、を有する。

所定の視点による観測が容易な画像管理システムを提供することができる。

撮像装置の左側面図、正面図、平面図の一例である。 撮像装置の使用イメージ図の一例である。 撮像装置で撮像された半球画像（前）、撮像装置で撮像された半球画像（後）、メルカトル図法により表された画像を示した図の一例である。 メルカトル画像で球を被う状態を示した概念図、全天球パノラマ画像を示した図の一例である。 全天球パノラマ画像を３次元の立体球とした場合の仮想カメラ及び所定領域の位置を示した図の一例である。 図４の立体斜視図、ディスプレイに表示された所定領域の画像を示す図の一例である。 所定領域情報と所定領域画像の関係との関係を示した図である。 画像通信システムの概略構成図の一例である。 撮像装置のハードウェア構成図の一例である。 無線通信機能を有したクレードルの場合の通信端末のハードウェア構成図の一例である。 画像管理装置及び情報端末のハードウェア構成図の一例である。 本実施形態の処理の概略を説明する図の一例である。 画像通信システムの一部を構成する、撮像装置、通信端末、画像管理装置、及び情報端末の各機能ブロック図の一例である。 拠点レイアウトマップの一例を示す図である。 情報端末が画像を閲覧する処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図である（拠点レイアウトマップ）。 情報端末のディスプレイに表示される画面例を示す図である（画像の閲覧）。 閲覧者が所定領域情報を登録する処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図である（視点の登録）。 閲覧者が登録済みの視点を選択して視点を切り替える処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図である（登録済みの視点の表示）。 閲覧者が画像データを操作する手順を示すフローチャート図の一例である。 情報端末のディスプレイに表示される画面の別の例を示す図である（登録済みの視点の表示）。 情報端末の表示制御部が所定領域画像に重畳して視点タイトルを表示する手順を説明する図の一例である。 閲覧者が登録済みの視点を削除する処理又は動作を説明するシーケンス図の一例である。 閲覧者が登録済みの視点からデフォルトの視点を登録する処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図の一例である（デフォルトの視点の設定）。 デフォルト視点が設定された情報端末のディスプレイに表示される画面例を示す図である（デフォルトの視点による表示）。 情報端末がサムネイル画像を表示する処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図である（サムネイル画像）。 サムネイル画像が切り替わった情報端末のディスプレイに表示される画面例を示す図である（サムネイル画像）。 閲覧者が視点を登録する際に公開か非公開を設定する処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図である（視点の公開・非公開の設定）。 公開か非公開かが設定された後に、情報端末が画像データを表示する処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図である（視点の公開）。 自動的に登録された視点の所定領域画像を情報端末７が表示する処理又は動作を説明するシーケンス図の一例である。 情報端末のディスプレイに表示される画面例を示す図である（視点の自動登録）。

以下、本発明を実施するための形態について図面を参照しながら説明する。

本実施形態の画像通信システムは、後述する情報端末から受信した所定領域情報を撮像装置ごとに画像管理装置が記憶しておき、情報端末で撮像装置が選択された場合、画像管理装置５が記憶しておいた撮像装置ごとの所定領域情報を情報端末に送信することが特徴の１つになっている。

したがって、店舗内等に設置された撮像装置が定点撮像して作成した全方位画像をユーザが閲覧する際、撮像装置ごとに決まった視点で表示することができる。

＜用語について＞
撮像装置が店舗等に設置されるとは、定点観測される期間において場所と向きが固定されていることをいう。

店舗とは商品やサービスを提供する施設をいう。本実施形態では店舗を例に説明するが、事務所内、公共機関、工場、屋外、遊技場、水中、空中（高所）、地下、個人の住宅内などに設置されてもよく、設置される場所は限定されない。

視点とは閲覧者の視線が注がれる場所を言う。本実施形態では、全方位画像の全体のうち閲覧者がディスプレイに表示させた一部の画像を便宜的に視点という場合がある。また、この一部の画像を所定領域画像という。全方位画像における所定領域画像を特定するための情報を所定領域情報という。

全方位画像は、周囲３６０°の全方位が撮像された画像である。全天球画像、パノラマ画像、全天球パノラマ画像など、どのように呼ばれていてもよい。また、周囲３６０°の画像の一部が画像処理などの関係で欠けていても本実施形態の説明に支障がない場合は全方位画像と称する。

＜撮像装置について＞
図１〜７を用いて、周囲３６０°の全方位を撮像可能な撮像装置について説明する。図１は撮像装置１の外観を説明する図の一例である。図１（ａ）は撮像装置１の左側面図であり、図１（ｂ）は撮像装置１の正面図であり、図１（ｃ）は撮像装置１の平面図である。

図１（ａ）に示されているように、撮像装置１は、人間が片手で持つことができる大きさである。また、図２（ａ），（ｂ），（ｃ）に示されているように、撮像装置１の上部には、正面側（前側）に撮像素子１０３ａ及び背面側（後側）に撮像素子１０３ｂが設けられている。また、図２（ｂ）に示されているように、撮像装置１の正面側には、シャッターボタン等の操作部１１５が設けられている。

次に、図２を用いて、撮像装置１の使用状況を説明する。なお、図２は、撮像装置の使用イメージ図である。撮像装置１は、図２に示されているように、ユーザが手に持ってユーザの周りの被写体を撮像するために用いられる。この場合、図１に示されている撮像素子１０３ａ及び撮像素子１０３ｂによって、それぞれユーザの周りの被写体が撮像されることで、２つの半球画像を得ることができる。

次に、図３を用いて、撮像装置１で撮像された画像及び合成された画像を説明する。なお、図３（ａ）は撮像装置で撮像された半球画像（前側）、図３（ｂ）は撮像装置で撮像された半球画像（後側）、図３（ｃ）はメルカトル図法により表された画像（以下、「メルカトル画像」という）を示した図である。なお、正距円筒図法で表されてもよい。

図３（ａ）に示されているように、撮像素子１０３ａによって得られた画像は、後述の魚眼レンズ１０２ａによって湾曲した半球画像（前側）となる。また、図４（ｂ）に示されているように、撮像素子１０３ｂによって得られた画像は、後述の魚眼レンズ１０２ｂによって湾曲した半球画像（後側）となる。そして、半球画像（前側）と、１８０度反転された半球画像（後側）とは、撮像装置１によって合成され、図４（ｃ）に示されているように、メルカトル画像が作成される。

図４は、図４（ｃ）に示されている撮像画像（メルカトル画像）から、作成された全方位画像を示す。例えば、立体球に図４(ｃ)に示されるメルカトル画像を貼り付けることで、図４のような全方位画像が作成される。

図５〜７を用いて、全方位画像における所定領域の画像（これが上記の「所定領域画像」である）の作成及び表示の処理について説明する。なお、図５は、全方位画像を３次元の立体球とした場合の仮想カメラ及び所定領域の位置を示した図である。仮想カメラＩＣは、３次元の立体球として表示されている全方位画像に対して、その画像を見るユーザの視点の位置に相当するものである。

また、図６（ａ）は図５の立体斜視図、図６（ｂ）はディスプレイに所定領域画像を示す図である。図６（ａ）は図４に示されている全方位画像を３次元の立体球ＣＳで見せている。このように生成された全方位画像の立体球ＣＳであるとすると、図５に示されているように、仮想カメラＩＣが全方位画像の中心に位置し、この中心から上下左右の回転と、この中心からの視点での回転(ROLL)の３軸の回転を行うことができる。この全方位画像における所定領域Ｔは、この全方位画像における仮想カメラＩＣの位置の所定領域情報によって特定される。

この所定領域情報は、座標ｘ(rH)、座標ｙ(rV)、及び画角α(angle)によって示される。また、所定領域Ｔのズームは、画角αの範囲（円弧）を広げたり縮めたりすることで表現することができる。すなわち、座標ｘ、座標ｙで図７の中心点ＣＰを特定でき、画角αで所定領域画像の広さを特定できる。座標ｘ、座標ｙは全方位画像の例えば、左上コーナーを原点とする座標である。

図７を用いて、所定領域情報と所定領域画像の関係について説明する。なお、図７は、所定領域情報と所定領域画像の関係との関係を示した図である。

図７に示されているように、仮想カメラＩＣの画角αによって表される所定領域Ｔの対角線画角２Ｌとした場合の中心点ＣＰが、所定領域情報の（ｘ，ｙ）パラメータとなる。（ｘ，ｙ）は中心点ＣＰでなく所定領域画像の左上コーナーなどの座標でもよい。

なお、ｆは仮想カメラＩＣから中心点ＣＰまでの距離である。そして、図７では、一般的に以下の式（１）で示される関係が成り立つ。Ｌは所定領域画像の対角線の長さの半分である。

Ｌｆ＝ｔａｎ（α／２）・・・式（１）
所定領域画像のアスペクト比で対角線と下辺のなす角βが分かるので、所定領域画像の各コーナーの座標も算出できる。例えば、左上コーナーのｘ座標はｘ−Ｌcosβ、ｙ座標はｙ＋Ｌsinβである。

＜画像通信システム２００のシステム構成＞
図８は、画像通信システム２００の概略構成図の一例である。画像通信システム２００は、通信ネットワーク９を介して接続された画像管理装置５、撮像装置１、通信端末３、及び、情報端末７を有している。撮像装置１は設置者Ｘにより店舗内に設置されている。情報端末７は閲覧者Ｙにより操作される。

通信ネットワーク９は、店舗内や閲覧者Ｙの所属先の企業のＬＡＮ、ＬＡＮをインターネットに接続するプロバイダのプロバイダネットワーク、及び、回線事業者が提供する回線等の少なくとも１つを含んで構築されている。通信端末３や情報端末７がＬＡＮを介さずに直接、回線電話網や携帯電話網に接続する場合は、ＬＡＮを介さずにプロバイダネットワークに接続することができる。また、通信ネットワークにはＷＡＮやインターネットが含まれる。通信ネットワークは有線又は無線のどちらで構築されてもよく、また、有線と無線が組み合わされていてもよい。

撮像装置１は、上記のように１度の撮像で周囲３６０度を撮像し全方位画像を作成するカメラである。デジタルスチルカメラ又はデジタルビデオカメラと呼ばれる場合がある。また、通信端末３にカメラが付いている場合は、通信端末３がデジタルカメラとなりうる。本実施形態では、説明を分かりやすくするために撮像装置１は全方位画像を得るためのデジタルカメラとして説明を行う。撮像装置１は定期的に周囲３６０を撮像する。必ずしも定期的である必要はなく、不定期に撮像してもよいし、設置者Ｘの操作により撮像してもよいし、閲覧者Ｙが画像管理装置５に要求することで画像管理装置５からの命令で撮像してもよい。

なお、撮像装置１は、視線が異なる何枚かの風景を自動的に撮像し、複数の画像データを合成することで全方位画像を作成してもよい。

通信端末３は、撮像装置１の代わりに通信ネットワーク９に接続する通信機能を有している。通信端末３は、撮像装置１への電力供給や店舗への固定を行うためのクレードル(Cradle)である。クレードルとは、撮像装置１の機能を拡張する拡張機器をいう。通信端末３は撮像装置１と接続するためのインタフェースを有し、これにより撮像装置１は通信端末３の機能を利用できる。通信端末３は、このインタフェースを介して撮像装置１とデータ通信を行なう。そして、無線ルータ９ａ及び通信ネットワーク９を介して画像管理装置５とデータ通信を行なう。

なお、撮像装置１が無線ルータ９ａや通信ネットワーク９と直接、データ通信する機能を有する場合、通信端末３はなくてもよい。あるいは、撮像装置１と通信端末３が一体に構成されていてもよい。

画像管理装置５は、例えば、サーバとして機能する情報処理装置であり、通信ネットワーク９を介して、通信端末３及び情報端末７とデータ通信を行なうことができる。画像管理装置５には、OpenGL ES（3Dグラフィックス用のＡＰＩ：Application Interface）がインストールされている。OpenGL ESを呼び出すことでメルカトル画像から全方位画像を作成したり、全方位画像の一部の画像（所定領域画像）のサムネイル画像を作成したりすることができる。

なお、画像管理装置５にはクラウドコンピューティングが適用されていることが好ましい。クラウドコンピューティングの物理的な構成に厳密な定義はないが、情報処理装置を構成するＣＰＵ、ＲＡＭ、ストレージなどのリソースが負荷に応じて動的に接続・切断されることで情報処理装置の構成や設置場所が柔軟に変更される構成が知られている。また、クラウドコンピューティングでは、画像管理装置５が仮想化されることが一般的である。１台の情報処理装置が仮想化によって複数の画像管理装置５としての機能を提供することや、複数の情報処理装置が仮想化によって一台の画像管理装置５としての機能を提供することができる。なお、画像管理装置５がクラウドコンピューティングとしてではなく単独の情報処理装置により提供されることも可能である。

情報端末７は、例えば、ノートＰＣ(Personal Computer)であり、通信ネットワーク９を介して、画像管理装置５とデータ通信を行う。情報端末７は、ノートＰＣの他、タブレット端末、ＰＣ、ＰＤＡ（Personal Digital Assistant）、電子黒板、テレビ会議端末、ウェアラブルＰＣ、ゲーム機、携帯電話、カーナビゲーションシステム、スマートフォンなどでもよい。また、これらに限られるものではない。

撮像装置１、通信端末３、及び無線ルータ９ａは、店舗等の各販売拠点で設置者Ｘによって所定の位置に設置される。情報端末７は、各販売拠点を統括する本社等に設置され、画像管理装置５を介して送られて来る各拠点の状況を表した画像を表示することで、閲覧者Ｙが各拠点の状況を表した画像を閲覧することができる。ただし、情報端末７は本社以外の場所からも画像管理装置５と通信可能である。画像管理装置５は、各拠点の通信端末３から送られて来た画像データに所定領域情報を添付して情報端末７に送信する。

＜実施形態のハードウェア構成＞
次に、図９〜図１１を用いて、本実施形態の撮像装置１、通信端末３，情報端末７及び画像管理装置５のハードウェア構成を説明する。

<<撮像装置>>
図９は、撮像装置１のハードウェア構成図の一例である。以下では、撮像装置１は、２つの撮像素子を使用した全方位撮像装置とするが、撮像素子は３つ以上いくつでもよい。また、必ずしも全方位撮像専用の装置である必要はなく、通常のデジタルカメラやスマートフォン等に後付けの全方位撮像ユニットを取り付けることで、実質的に撮像装置１と同じ機能を有するようにしてもよい。

図９に示されているように、撮像装置１は、撮像ユニット１０１、画像処理ユニット１０４、撮像制御ユニット１０５、マイク１０８、音処理ユニット１０９、ＣＰＵ(Central Processing Unit)１１１、ＲＯＭ(Read Only Memory)１１２、ＳＲＡＭ(Static Random Access Memory)１１３、ＤＲＡＭ(Dynamic Random Access Memory)１１４、操作部１１５、ネットワークＩ／Ｆ１１６、通信部１１７、及びアンテナ１１７ａによって構成されている。

このうち、撮像ユニット１０１は、各々半球画像を結像するための１８０°以上の画角を有する広角レンズ（いわゆる魚眼レンズ）１０２ａ，１０２ｂと、各広角レンズに対応させて設けられている２つの撮像素子１０３ａ，１０３ｂを備えている。撮像素子１０３ａ，１０３ｂは、魚眼レンズによる光学像を電気信号の画像データに変換して出力するＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサやＣＣＤ(Charge Coupled Device)センサなどの画像センサ、この画像センサの水平又は垂直同期信号や画素クロックなどを生成するタイミング生成回路、この撮像素子の動作に必要な種々のコマンドやパラメータなどが設定されるレジスタ群などを有している。

撮像ユニット１０１の撮像素子１０３ａ，１０３ｂは、各々、画像処理ユニット１０４とはパラレルＩ／Ｆバスで接続されている。一方、撮像ユニット１０１の撮像素子１０３ａ，１０３ｂは、撮像制御ユニット１０５とは別に、シリアルＩ／Ｆバス（Ｉ２Ｃバス等）で接続されている。画像処理ユニット１０４及び撮像制御ユニット１０５は、バス１１０を介してＣＰＵ１１１と接続される。さらに、バス１１０には、ＲＯＭ１１２、ＳＲＡＭ１１３、ＤＲＡＭ１１４、操作部１１５、ネットワークＩ／Ｆ１１６、通信部１１７、及び電子コンパス１１８なども接続される。

画像処理ユニット１０４は、撮像素子１０３ａ，１０３ｂから出力される画像データをパラレルＩ／Ｆバスを通して取り込み、それぞれの画像データに対して所定の処理を施した後、これらの画像データを合成処理して、図３（ｃ）に示されているようなメルカトル画像のデータを作成する。

撮像制御ユニット１０５は、一般に撮像制御ユニット１０５をマスタデバイス、撮像素子１０３ａ，１０３ｂをスレーブデバイスとして、Ｉ２Ｃバスを利用して、撮像素子１０３ａ，１０３ｂのレジスタ群にコマンド等を設定する。必要なコマンド等は、ＣＰＵ１１１から受け取る。また、該撮像制御ユニット１０５は、同じくＩ２Ｃバスを利用して、撮像素子１０３ａ，１０３ｂのレジスタ群のステータスデータ等を取り込み、ＣＰＵ１１１に送る。

また、撮像制御ユニット１０５は、操作部１１５のシャッターボタンが押下されたタイミングで、撮像素子１０３ａ，１０３ｂに画像データの出力を指示する。撮像装置１によっては、ディスプレイによるプレビュー表示機能や動画表示に対応する機能を持つ場合もある。この場合は、撮像素子１０３ａ，１０３ｂからの画像データの出力は、所定のフレームレート（フレーム／分）によって連続して行われる。

また、撮像制御ユニット１０５は、後述するように、ＣＰＵ１１１と協働して撮像素子１０３ａ，１０３ｂの画像データの出力タイミングの同期をとる同期制御手段としても機能する。なお、本実施形態では、撮像装置１には表示部が設けられていないが、表示部を設けてもよい。

マイク１０８は、音を音（信号）データに変換する。音処理ユニット１０９は、マイク１０８から出力される音データをＩ／Ｆバスを通して取り込み、音データに対して所定の処理を施す。

ＣＰＵ１１１は、撮像装置１の全体の動作を制御すると共に必要な処理を実行する。ＲＯＭ１１２は、ＣＰＵ１１１のための種々のプログラムを記憶している。ＳＲＡＭ１１３及びＤＲＡＭ１１４はワークメモリであり、ＣＰＵ１１１で実行するプログラムや処理途中のデータ等を記憶する。特にＤＲＡＭ１１４は、画像処理ユニット１０４での処理途中の画像データや処理済みのメルカトル画像のデータを記憶する。

操作部１１５は、種々の操作ボタンや電源スイッチ、シャッターボタン、表示と操作の機能を兼ねたタッチパネルなどの総称である。ユーザは操作ボタンを操作することで、種々の撮像モードや撮像条件などを入力する。

ネットワークＩ／Ｆ１１６は、ＳＤカード等の外付けのメディアやパーソナルコンピュータなどとのインタフェース回路（ＵＳＢＩ／Ｆ等）の総称である。また、ネットワークＩ／Ｆ１１６としては、無線、有線を問わずにネットワークインタフェースである場合も考えられる。ＤＲＡＭ１１４に記憶されたメルカトル画像のデータは、このネットワークＩ／Ｆ１１６を介して外付けのメディアに記録されたり、必要に応じてネットワークＩ／ＦとなるネットワークＩ／Ｆ１１６を介して通信端末３等の外部装置に送信されたりする。

通信部１１７は、撮像装置１に設けられたアンテナ１１７ａを介して、WiFi(wireless fidelity)、ＮＦＣ、又はＬＴＥ（Long Term Evolution）等の離無線技術によって、通信端末３等の外部装置と通信を行う。この通信部１１７によっても、メルカトル画像のデータを通信端末３の外部装置に送信することができる。

電子コンパス１１８は、地球の磁気から撮像装置１の方位及び傾き(Roll回転角)を算出し、方位・傾き情報を出力する。この方位・傾き情報はExifに沿った関連情報（メタデータ）の一例であり、撮像画像の画像補正等の画像処理に利用される。なお、関連情報には、画像の撮像日時、及び画像データのデータ容量の各データも含まれている。

<<通信端末>>
次に、図１０を用いて、通信端末３のハードウェア構成を説明する。なお、図１０は、無線通信機能を有したクレードルの場合の通信端末３のハードウェア構成図である。

図１０に示されているように、通信端末３は、通信端末３全体の動作を制御するＣＰＵ３０１、基本入出力プログラムを記憶したＲＯＭ３０２、ＣＰＵ３０１のワークエリアとして使用されるＲＡＭ(Random Access Memory)３０４、Wi-fi、ＮＦＣ、ＬＴＥ等でデータ通信する通信部３０５、撮像装置１と有線で通信するためのＵＳＢ I/F３０３、カレンダーや時間情報を保持するＲＴＣ（Real Time Clock）３０６を有している。

また、上記各部を電気的に接続するためのアドレスバスやデータバス等のバスライン３１０を備えている。

なお、ＲＯＭ３０２には、ＣＰＵ３０１が実行するオペレーティングシステム(OS)、その他のプログラム、及び、種々データが記憶されている。

通信部３０５は、アンテナ３０５ａを利用して無線通信信号により、無線ルータ９ａ等と通信を行う。

図示する他、ＧＰＳ（Global Positioning Systems）衛星又は屋内ＧＰＳとしてのＩＭＥＳ(Indoor MEssaging System）によって通信端末３の位置情報（緯度、経度、及び高度）を含んだＧＰＳ信号を受信するＧＰＳ受信部を備えていてもよい。

<<画像管理装置、情報端末>>
図１１を用いて、画像管理装置５及びノートＰＣの場合の情報端末７のハードウェア構成を説明する。なお、図１１は、画像管理装置５及び情報端末７のハードウェア構成図である。画像管理装置５及び情報端末７はともにコンピュータであるため、以下では、画像管理装置５の構成について説明する。情報端末７の構成は画像管理装置５と同様であるとし、相違があるとしても本実施形態の説明に関し支障がないものとする。

画像管理装置５は、画像管理装置５全体の動作を制御するＣＰＵ５０１、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶したＲＯＭ５０２、ＣＰＵ５０１のワークエリアとして使用されるＲＡＭ５０３を有する。また、画像管理装置５用のプログラム等の各種データを記憶するＨＤ５０４、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御するＨＤＤ(Hard Disk Drive)５０５を有する。また、フラッシュメモリ等の記録メディア５０６に対するデータの読み出し又は書き込み（記憶）を制御するメディアドライブ５０７、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示するディスプレイ５０８を有する。ディスプレイ５０８にはタッチパネルが装着されていることが好ましい。また、通信ネットワーク９を利用してデータ通信するためのネットワークＩ／Ｆ５０９、文字、数値、各種指示などの入力のための複数のキーを備えたキーボード５１１、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行うマウス５１２を有する。また、着脱可能な記録媒体の一例としてのＣＤ−ＲＯＭ(Compact Disc Read Only Memory)５１３に対する各種データの読み出し又は書き込みを制御するＣＤ−ＲＯＭドライブ５１４を有する。また、上記各構成要素を図１１に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン５１０を備えている。

＜実施形態の処理の概略＞
次に、図１２を用いて、本実施形態の処理の概略について説明する。図１２は、本実施形態の処理の概略を説明する図である。

Ｓ１：通信端末３が撮像装置１から、画像データ、所定領域情報、及び関連情報を取得する。関連情報は、撮像日時や撮像装置１の端末ＩＤなどである。また、この所定領域情報は初期設定の所定領域情報であって、例えば、撮像装置１の正面方向の所定領域を特定する情報である（正面方向は例えば撮像素子１０３ａに垂直な方向）。

Ｓ２：通信端末３は、画像管理装置５に対して、画像データ、所定領域情報、及び、関連情報を送信する。

Ｓ３：画像管理装置５は、端末ＩＤに対応付けて関連情報、初期設定の所定領域情報及び画像データを記憶しておく。

Ｓ４：閲覧者Ｙが情報端末７を操作して撮像装置１を指定し、画像管理装置５から画像データ、初期設定の所定領域情報及び関連情報を受信する。

Ｓ５：閲覧者Ｙは定点観測したい場所を含むように視点を定める。この時、ディスプレイ５０８に表示されていた所定領域画像を定める所定領域情報が、閲覧者Ｙが見たい視点又は視点から見た画像ということができる。情報端末７は所定領域情報と端末ＩＤを画像管理装置５に送信する。

Ｓ６：画像管理装置５は端末ＩＤに対応付けて、閲覧者Ｙが設定した所定領域情報を登録する。

Ｓ７：その後、閲覧者Ｙが情報端末７を操作して画像管理装置５にアクセスして端末ＩＤを指定すると、画像管理装置５は画像データ、端末ＩＤに対応付けられている所定領域情報、及び、関連情報を情報端末７に送信する。この所定領域情報は初期設定の値でなく、閲覧者Ｙが登録した所定領域情報なので、閲覧者Ｙは見たい方向に視点を切り替えなくても、定点撮像された時系列の全方位画像を閲覧して分析することができる。

＜画像通信システム２００の機能について＞
図１３は、本実施形態の画像通信システム２００の一部を構成する、撮像装置１、通信端末３、画像管理装置５、及び情報端末７の各機能ブロック図である。

<<撮像装置１の機能構成>>
撮像装置１は、受付部１２、撮像部１３、集音部１４、接続部１５、及び記憶・読出部１９を有している。これら各部は、図９に示されている各構成要素のいずれかが、ＳＲＡＭ１１３からＤＲＡＭ１１４上に展開された撮像装置用のプログラムに従ったＣＰＵ１１１からの命令によって動作することで実現される機能又は手段である。

また、撮像装置１は、図９に示されているＲＯＭ１１２、ＳＲＡＭ１１３、及びＤＲＡＭ１１４の１つ以上によって構築される記憶部１０００を有している。記憶部１０００には撮像装置用のプログラム及び端末ＩＤが記憶されている。

撮像装置１の受付部１２は、主に、図９に示されている操作部１１５及びＣＰＵ１１１の処理によって実現され、ユーザ（図８では、設置者Ｘ）からの操作入力を受け付ける。なお、撮像装置１は設置者Ｘによる撮像のための操作がなくても自動的かつ定期的に周囲を撮像する。定期の間隔は、設置者Ｘが撮像装置１に設定してもよいし、閲覧者Ｙが画像管理装置５を介して設定してもよい。

撮像部１３は、主に、図９に示されている撮像ユニット１０１、画像処理ユニット１０４、及び撮像制御ユニット１０５、及びＣＰＵ１１１の処理によって実現され、風景等を撮像し、画像データを作成する。

集音部１４は、主に、図９に示されているマイク１０８及び音処理ユニット１０９、及び、ＣＰＵ１１１の処理によって実現され、撮像装置１の周囲の音を収音する。

接続部１５は、主に、ネットワークＩ／Ｆ１１６及びＣＰＵ１１１の処理によって実現され、通信端末３からの電力供給を受けると共に、通信端末３とデータ通信を行う。

記憶・読出部１９は、主に、図９に示されているＣＰＵ１１１の処理によって実現され、記憶部１０００に各種データを記憶したり、記憶部１０００から各種データを読み出したりする。なお、以下では、撮像装置１が記憶部１０００から読み書きする場合でも「記憶・読出部１９を介して」という記載を省略する場合がある。

<<通信端末３の機能構成>>
通信端末３は、送受信部３１、受付部３２、接続部３３、及び記憶・読出部３９を有している。これら各部は、図１０に示されている各構成要素のいずれかが、ＲＯＭ３０２からＲＡＭ３０４上に展開された通信端末用のプログラムに従ったＣＰＵ３０１からの命令によって動作することで実現される機能又は手段である。

また、通信端末３は、図１０に示されているＲＯＭ３０２及びＲＡＭ３０４によって構築される記憶部３０００を有している。記憶部３０００には通信端末用のプログラムが記憶されている。

（通信端末３の各機能構成）
通信端末３の送受信部３１は、主に、図１０に示されている通信部３０５及びＣＰＵ３０１の処理によって実現され、無線ルータ９ａ及び通信ネットワーク９を介して、画像管理装置５と各種データの送受信を行う。なお、以下では、通信端末３が画像管理装置５と通信する場合でも、「送受信部３１を介して」という記載を省略する場合がある。

接続部３３は、主に、図１０に示されているＵＳＢ I/F３０３、及びＣＰＵ３０１の処理によって実現され、撮像装置１に電力供給すると共に、データ通信を行う。

記憶・読出部３９は、主に、図１０に示されているＣＰＵ３０１の処理によって実現され、記憶部３０００に各種データを記憶したり、記憶部３０００から各種データを読み出したりする。なお、以下では、通信端末３が記憶部３０００から読み書きする場合でも「記憶・読出部３９を介して」という記載を省略する場合がある。

<<画像管理装置の機能構成>>
画像管理装置５は、送受信部５１、人物検出部５２、サムネイル作成部５３、画面作成部５４、デフォルト視点登録部５５、領域情報登録部５６、認証部５７、及び記憶・読出部５９を有している。これら各部は、図１１に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された画像管理装置用のプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能又は手段である。

また、画像管理装置５は、図１１に示されているＲＡＭ５０３、及びＨＤ５０４によって構築される記憶部５０００を有している。この記憶部５０００には、拠点管理ＤＢ５００１、端末管理ＤＢ５００２、撮像管理ＤＢ５００３、画像管理ＤＢ５００４、サムネイル管理ＤＢ５００５、視点管理ＤＢ５００６、及びユーザ管理ＤＢ５００７が構築されている。以下、各データベースについて説明する。

表１は、拠点管理ＤＢ５００１に記憶される各情報をテーブル状に示す拠点管理テーブルを示す概念図である。拠点管理テーブルでは、地域ＩＤ、地域名、拠点ＩＤ、拠点名、拠点レイアウトマップ、及び、装置ＩＤの各フィールドが関連付けて記憶されている。また、拠点管理テーブルの１つの行をレコードという場合がある。以下の各テーブルでも同様である。このうち、地域ＩＤは、地域を識別するための識別情報である。地域ＩＤの一例としては重複しない番号とアルファベットの組み合わせが挙げられる。

地域名は、例えば、関東、東京、渋谷区、ニューヨーク州、ニューヨーク市等、土地の区域又は範囲を示す。地域名称と言ってもよい。なお、識別情報とは、複数の対象からある特定の対象を一意的に区別するために用いられる名称、符号、文字列、数値又はこれらのうち２つ以上の組み合わせをいう。以下のＩＤ又は識別情報についても同じである。

拠点ＩＤは、拠点を識別するための識別情報の一例である。拠点ＩＤは拠点名に対し重複しないように付与される。拠点固有情報と称してもよい。拠点ＩＤの一例としては重複しない番号とアルファベットの組み合わせが挙げられる。拠点とは撮像装置１が設置され周囲を撮像するよりどころとなる所を言う。拠点の一例が店舗である。

拠点名は、渋谷店等の店舗名や、渋谷会場等の会場名等であり、拠点の名称である。拠点レイアウトマップには、各拠点のレイアウトや地図を示す画像データなどのファイル名が登録される。拠点レイアウトマップにより拠点における撮像装置１や取扱商品などの位置が２次元座標で特定される。拠点レイアウトマップの一例を図１４に示す。拠点レイアウトマップのファイルは記憶部５０００に記憶されている。

端末ＩＤは、撮像装置１を識別するための識別情報である。端末固有情報と称してもよい。端末ＩＤは、例えば、撮像装置１の例えばシリアル番号、製造番号、型番と重複しない数値、ＩＰアドレス、又は、ＭＡＣアドレスなどであるがこれらには限定されない。表１に示すように、１つの拠点には１つ以上の撮像装置（端末ＩＤ）が設置されており、それらの位置が端末管理ＤＢ５００２に基づいて拠点レイアウトマップに登録されている。

拠点管理テーブルは、設置者Ｘ又は閲覧者Ｙが登録してもよいし、画像通信システム２００のサプライヤーが登録してもよい。

表２は、端末管理ＤＢ５００２に記憶される各情報をテーブル状に示す端末管理テーブルを示す概念図である。この端末管理テーブルでは、端末ＩＤごとに、端末設置位置、及びデフォルト視点ＩＤの各フィールドが関連付けて記憶されている。端末設置位置は、例えば、拠点レイアウトマップ上における撮像装置１の設置位置を２次元座標、商品棚番号、又は、通路番号などで示す。

デフォルト視点ＩＤは、所定領域情報を識別する視点ＩＤのうち、デフォルトの所定領域情報（視点ＩＤ）である。１つの撮像装置１は１つのデフォルトの所定領域情報を有している。このデフォルトの所定領域情報は、閲覧者Ｙが登録したものである。

なお、設置者Ｘが店舗内に撮像装置１を登録するので、拠点レイアウトマップへの登録も設置者Ｘが行うことが好適である。しかし、閲覧者Ｙが登録してもよい。設置者Ｘは任意の情報処理装置で画像管理装置５と通信し、端末ＩＤを特定して自分が撮像装置１を設置した座標を登録する。この時点ではデフォルト視点ＩＤは登録されていなくてよい。

表３は、撮像管理ＤＢ５００３に記憶される各情報をテーブル状に示す撮像管理テーブルの概念図である。撮像管理テーブルでは、拠点ＩＤごとに、撮像タイトル、撮像開始日時、及び撮像終了日時の各フィールドが関連付けて記憶されている。撮像タイトルは、閲覧者Ｙが入力したイベントのタイトルである。つまり、閲覧者Ｙが消費者の行動を監視したい何らかのイベントが店舗で催される場合に、このイベントの名称が撮像タイトルとなる。当然ながら、イベントの名称は閲覧者Ｙが任意に付与できるためイベントの名称でなくてもよい。例えば、単に撮像年月日とすることもできる。閲覧者Ｙは、画像データの複数のファイルから所望の画像データを抽出する際に、撮像タイトルを参照することができる。なお、１回の撮像イベントで複数の画像データが時系列に（定期的に）撮像される。撮像開始日時は、閲覧者Ｙによって入力された日時であり、撮像装置１が撮像を開始する（又は開始した）日時を示す。撮像終了日時は、閲覧者Ｙによって入力された日時であり、撮像装置１が撮像を終了する（又は終了した）日時を示す。閲覧者Ｙは撮像開始日時と撮像終了日時を事前に登録しておくこともできる（予約撮像）。

撮像管理テーブルは、主に画像管理装置５が登録する。

表４は、画像管理ＤＢ５００４に記憶される各情報をテーブル状に示す画像管理テーブルの概念図である。画像管理テーブルでは、端末ＩＤごとに、画像ＩＤ、画像データのファイル名、及び撮像日時が関連付けて記憶されている。画像ＩＤは、画像データを一意に識別するための識別情報の一例である。画像固有情報と称してもよい。画像データのファイル名は、画像ＩＤで特定される画像データのファイル名である。撮像日時は画像データが端末ＩＤで示される撮像装置１で撮像された日時である。画像データも、記憶部５０００に記憶されている。

例えば、情報端末７で画像管理装置５にアクセスし、表３の撮像管理テーブルから拠点名と撮像タイトルを選ぶ。画像管理装置５は拠点ＩＤに対応付けられている端末ＩＤを表１の拠点管理テーブルから読み出すことができる。端末ＩＤが明らかになるので、画像管理テーブルの端末ＩＤに対応付けられた画像データのうち撮像日時が撮像開始日時から撮像終了日時に含まれる画像データを画像管理装置５が特定できる。

当然ながら、閲覧者Ｙは端末ＩＤや拠点ＩＤを直接指定することもできる。本実施形態では、簡単のため閲覧者Ｙが端末ＩＤを指定して閲覧する態様を主に説明する。なお、画像管理テーブルは、主に画像管理装置５が登録する。

表５は、サムネイル管理ＤＢ５００５に記憶される各情報をテーブル状に示すサムネイル管理テーブルの概念図である。サムネイルとは親指程度のという意味であり、サムネイル画像は縮小した、画素数を低減した又は一覧用のイメージデータという意味になる。

サムネイル管理テーブルでは、画像ＩＤごとに、サムネイルＩＤ、サムネイル画像のファイル名、及び所定領域情報が関連付けて記憶されている。サムネイルＩＤは、画像ＩＤで示される画像データに基づいて作成されたサムネイル画像を一意に識別するための識別情報の一例である。サムネイル固有情報と称してもよい。サムネイル画像のファイル名は、サムネイルＩＤで示されるサムネイル画像のファイル名である。サムネイル画像のファイル名は画像管理装置５が付与する。所定領域情報は、画像ＩＤで示される画像データにおいて、サムネイル画像が作成された所定領域を示す。例えば、図６（ａ）の全方位画像における所定領域Ｔの画像が図６（ｂ）に示されているが、図６（ｂ）のサムネイル画像が作成される場合、この所定領域Ｔの画像でからサムネイル画像が作成される。

サムネイル管理テーブルは、主に画像管理装置５が登録する。

表６は、視点管理ＤＢ５００６に記憶される各情報をテーブル状に示す視点管理テーブルの概念図である。視点管理テーブルでは、視点ＩＤ、端末ＩＤ、ユーザＩＤ、所定領域情報、拠点タイトル、及び、公開／非公開の各フィールドが対応付けられている。視点ＩＤは、所定領域情報を一意に識別するための識別情報である。所定領域固有情報と称してもよい。また、ユーザＩＤは閲覧者Ｙを一意に識別するための識別情報である。閲覧者固有情報と称してもよい。したがって、画像管理装置５は、端末ごとかつ閲覧者ごとに所定領域情報を登録できる。

また、視点タイトルは、閲覧者Ｙが所定領域情報を区別するために付与する所定領域情報の名称である。個人／公開には、所定領域情報を公開するか否かが閲覧者Ｙにより設定される。拠点管理テーブルは、閲覧者Ｙが操作する情報端末７とのデータ通信により主に画像管理装置５が登録する。

表７は、ユーザ管理ＤＢ５００７に記憶される各情報をテーブル状に示すユーザ管理テーブルの概念図である。ユーザ管理テーブルでは、ユーザＩＤ、ログイン名、及び、パスワードの各フィールドが対応付けられている。ログイン名は画像管理装置５にユーザがログインする際のユーザの名前である。パスワードは正式のユーザであることを画像管理装置５に通知するための任意の文字列である。ログイン名、及び、パスワードは閲覧者の認証のために使用される認証情報である。ユーザ管理テーブルは、閲覧者Ｙが操作する情報端末７とのデータ通信により主に画像管理装置５が登録する。

（画像管理装置の各機能構成）
画像管理装置５の送受信部５１は、主に、図１１に示されているネットワークＩ／Ｆ５０９及びＣＰＵ５０１の処理によって実現され、通信ネットワーク９を介して通信端末３、又は情報端末７と各種データの送受信を行う。なお、以下では、画像管理装置５が情報端末７と通信する場合でも、「送受信部５１を介して」という記載を省略する場合がある。

人物検出部５２は、主に、図１１に示されているＣＰＵ５０１の処理によって実現され、画像データから人物を検出する。この人物の検出は適切な特徴量の設定と、学習識別装置の設定により行われる。例えば、特徴量としては、Haar-like特徴、LBP(Local Binary Patterns)特徴、HOG(Histogram of Oriented Gradients)特徴などが知られている。また、学習識別装置としては、ＳＶＭ(Support Vector Machines)、AdaBoostを用いたカスケード分類などが知られている。ただし、これらに限られるものではなく人を検出できればよい。

サムネイル作成部５３は、主に、図１１に示されているＣＰＵ５０１の処理によって実現され、所定領域画像のサムネイル画像を作成する。

画面作成部５４は、画像データを情報端末７に送信する際に、ＨＴＭＬデータ、JavaScript（登録商標）及びＣＳＳなどで情報端末７が画像データを表示するための画面情報を作成する。

認証部５７は、主に、図１１に示されているＣＰＵ５０１の処理によって実現され、情報端末７から送信されたログイン名とパスワードに基づいて、ユーザの認証が成立するか否かを判定し、ユーザの認証が成立した場合にはユーザＩＤを特定する。なお、ユーザの認証は画像管理装置５でなく外部の認証サーバが行ってもよい。

領域情報登録部５６は、図１１に示されているＣＰＵ５０１の処理によって実現され、情報端末７から視点の登録要求を受信した場合、視点管理ＤＢ５００６の各フィールドに拠点ＩＤ、端末ＩＤ、及び、所定領域情報等を登録する。

デフォルト視点登録部５５は、図１１に示されているＣＰＵ５０１の処理によって実現され、情報端末７からデフォルト視点の登録要求を受信した場合、視点ＩＤをデフォルト視点ＩＤとして端末管理ＤＢ５００２に登録する。デフォルトとは予め標準として用意されている状態や動作をいう。

記憶・読出部５９は、主に、図１１に示されているＨＤＤ５０５、及びＣＰＵ５０１の処理によって実現され、記憶部５０００に各種データを記憶したり、記憶部５０００から各種データを読み出したりする。なお、以下では、画像管理装置５が記憶部５０００から読み書きする場合でも「記憶・読出部５９を介して」という記載を省略する場合がある。

＜情報端末７の機能構成＞
情報端末７は、送受信部７１、受付部７２、表示制御部７３、及び、記憶・読出部７９を有している。これら各部は、図１１に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された情報端末７用のプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能又は手段である。

また、情報端末７は、図１１に示されているＲＡＭ５０３、及びＨＤ５０４によって構築される記憶部７０００を有している。記憶部７０００には情報端末７用のプログラムが記憶されている。情報端末７用のプログラムは、例えばブラウザソフトウェアであるが、ブラウザソフトウェアのような通信機能を備えたアプリケーションソフトウェアでもよい。

（情報端末７の各機能構成）
情報端末７の送受信部７１は、主に、図１１に示されているネットワークＩ／Ｆ５０９及びＣＰＵ５０１の処理によって実現され、通信ネットワーク９を介して画像管理装置５と各種データの送受信を行う。なお、以下では、情報端末７が画像管理装置５と通信する場合でも、「送受信部７１を介して」という記載を省略する場合がある。

受付部７２は、主に、図１１に示されているキーボード５１１及びマウス５１２、並びにＣＰＵ５０１の処理によって実現され、ユーザ（図８では、閲覧者Ｙ）からの操作入力を受け付ける。

表示制御部７３は、主に、図１１に示されているＣＰＵ５０１の処理によって実現され、画像管理装置５から送信された画面情報を解釈して情報端末７のディスプレイ５０８に各種画面を表示させるための制御を行なう。

記憶・読出部７９は、主に、図１１に示されているＨＤ５０４、及びＣＰＵ５０１の処理によって実現され、記憶部７０００に各種データを記憶したり、記憶部７０００から各種データを読み出したりする。なお、以下では、情報端末７が記憶部７０００から読み書きする場合でも「記憶・読出部７９を介して」という記載を省略する場合がある。

＜拠点レイアウトマップ＞
図１４は、拠点レイアウトマップの一例を示す図である。図１４の拠点レイアウトマップは、左上コーナーを原点にして水平方向をＸ座標、垂直方向をＹ座標とする２次元座標で拠点レイアウトマップ内の位置を特定可能である。表２の端末設置位置にはこのＸ座標とＹ座標が登録される。

＜実施形態の処理又は動作＞
続いて、本実施形態の画像通信システム２００の処理又は動作についてシーケンス図等を用いて説明する。

<<画像の閲覧>>
図１５は、情報端末７が画像を閲覧する処理又は動作を説明するシーケンス図の一例を示し、図１６、図１７は情報端末７のディスプレイ５０８に表示される画面例を示す。

S1：まず、情報端末７の受付部７２は撮像装置１の選択を受け付ける。具体的には、閲覧者Ｙが情報端末７を操作してＵＲＬを指定して画像管理装置５と通信し、画像管理装置５にログインする。これによりユーザＩＤが特定される。閲覧者Ｙが例えば拠点名を指定することで、画像管理装置５の画面作成部５４は拠点名で特定される拠点レイアウトマップを表示するための画面情報を作成し情報端末７に送信する。すなわち、端末管理ＤＢ５００２から端末設置位置を読み出して拠点レイアウトマップに撮像装置１を示すアイコン６０１を配置する。なお、アイコン６０１は端末ＩＤと関連付けされている（例えばリンクされている）ため、アイコン６０１が選択されると端末ＩＤが選択される。

情報端末７の送受信部７１は拠点レイアウトマップを取得し、図１６（ａ）のような画面の拠点レイアウトマップ６０３が情報端末７のディスプレイ５０８に表示される。閲覧者Ｙは画像データを閲覧したい場所にある撮像装置１を示すアイコン６０１を選択する。情報端末７の受付部７２は閲覧者が指やマウス等のポインティングデバイスで入力した座標を取得することで、アイコン６０１の選択（端末ＩＤ）を受け付ける。アイコン６０１は端末ＩＤと関連付けられているため、端末ＩＤを特定できる。

これにより、図１６（ｂ）に示すように、情報端末７の表示制御部７３は閲覧者Ｙが選択した撮像装置１のアイコン６０１を強調表示する。図１６（ｂ）ではアイコン６０１が矢印６０２で示されている。この他、アイコン６０１を点滅させてもよいし、色変えてもよいし、枠で囲んでもよい。

S2：情報端末７の送受信部７１は端末ＩＤと共に画像データの取得要求を画像管理装置５に送信する。

S3：画像管理装置５の送受信部５１は画像データの取得要求を受信して、画面作成部５４が画像管理ＤＢ５００４から端末ＩＤに対応付けられた画像データを読み出す。同じ端末ＩＤに複数の画像データのファイル名が登録されている場合は、撮像日時が最も新しいものを送信してもよいし、閲覧者Ｙが撮像日時を選択してもよい。なお、情報端末７が画像管理装置５にアクセスして最初に表示する視点は端末管理ＤＢ５００２に登録されたデフォルト視点でもよい。

S4：画像管理装置５の送受信部５１は画像データを情報端末７に送信する。具体的には、画像管理装置５の画面作成部５４は画像データ及び拠点レイアウトマップ６０３を表示するための画面情報を作成し情報端末７に送信する。画像管理装置５の送受信部５１は時系列の画像データを順番に送信していく。なお、図１５では拠点レイアウトマップ６０３が送信されることは省略されている。

S5：情報端末７の送受信部７１は画面情報を受信して、表示制御部７３がディスプレイ５０８に表示する。これにより、図１７に示すような画面が表示される。図１７では、矢印６０２が示すアイコン６０１の撮像装置１が撮像した画像データの所定領域画像６０４が表示されている。なお、この所定領域画像６０４は、撮像装置１の正面方向などの初期設定の所定領域情報で切り出された画像である。

このように、閲覧者Ｙは定点観測している撮像装置１を選択することで画像データを閲覧できる。なお、閲覧者Ｙは端末ＩＤを直接、入力して画像データを閲覧してもよい。

<<視点登録>>
図１８は、閲覧者Ｙが所定領域情報を登録する処理又は動作を説明するシーケンス図の一例を示し、図１９は情報端末７のディスプレイ５０８に表示される画面例を示す。

S1：閲覧者Ｙは情報端末７を操作して所望の視点に移動させる。情報端末７の表示制御部７３は、受付部７２が受け付けた操作に応じて所定領域画像を変更する。

S2：視点が決まると閲覧者Ｙは視点登録のための操作を行う。図１９の画面例では視点登録ボタンを押下する。視点登録ボタン６１１は予め表示されていてもよいし、マウスオーバーなどのイベントで表示されてもよい。情報端末７の受付部７２はポインティングデバイスが入力する座標に基づいて視点登録ボタン６１１の押下を受け付ける。これにより、情報端末７の表示制御部７３は、視点タイトル入力画面６１２をポップアップ表示する。視点タイトル入力画面６１２は視点タイトル欄６１３、ＯＫボタン６１４、及び、キャンセルボタン６１５を有している。閲覧者Ｙは視点タイトル欄６１３に視点タイトルを入力し、ＯＫボタン６１４を押下する。

なお、所定領域画像をそのまま所定領域情報とするのでなく、閲覧者ＹがＸ座標とＹ座標を入力することで所定領域情報を入力してもよい。この場合、情報端末７の受付部７２はＸ座標とＹ座標の入力欄をディスプレイ５０８に表示する。

情報端末７の受付部７２はＯＫボタン６１４の押下を受け付けると、視点タイトル欄６１３から視点タイトルを取得する。

S3：情報端末７の送受信部７１は端末ＩＤ、所定領域情報、及び、視点タイトルと共に視点の登録要求を送信する。端末ＩＤは閲覧者がアイコン６０１で選択した撮像装置１の端末ＩＤであり、所定領域情報は図１９の所定領域画像６０４を画像データから切り出す際に用いられたものでよい。

S4：画像管理装置５の送受信部５１は端末ＩＤ、所定領域情報、及び、視点タイトルを受信し、領域情報登録部５６が視点管理ＤＢ５００６にこれらを登録する。具体的には、重複しない視点ＩＤを採番し、端末ＩＤ、所定領域情報及び視点タイトルを対応付けて登録する。なお、ユーザＩＤと個人／公開については後述する。

このように、閲覧者Ｙは所望の所定領域画像を表示させてボタンを押下するという簡単な操作で視点（所定領域情報）を登録できる。

<<登録済みの視点の選択>>
図２０は、閲覧者Ｙが登録済みの視点を選択して視点を切り替える処理又は動作を説明するシーケンス図の一例を示し、図２１（ａ）は情報端末７のディスプレイ５０８に表示される画面例を示す。

S1：情報端末７の受付部７２は撮像装置１の選択を受け付ける。この処理は図１５と同様でよい。

S2：情報端末７の送受信部７１は端末ＩＤと共に、画像データ及び視点リストの取得要求を画像管理装置５に送信する。なお、図１５においても視点リストの取得要求が送信されてよい。図１５では視点リストがまだ登録されていないため、視点リストが送信されない場合を想定したシーケンス図になっている。また、この端末ＩＤは撮像装置１をユーザが指定するための情報であるが、端末ＩＤの他、撮像装置１の名称を送信してもよい。この場合、撮像装置１の名称と端末ＩＤが画像管理装置５において紐付けられている。また、撮像装置１の名称の他、端末設置位置を送信してもよい。この場合、画像管理装置５において紐付けはなくてもよい。

S3：画像管理装置５の送受信部５１は画像データの取得要求を受信して、画面作成部５４が画像管理ＤＢ５００４から端末ＩＤに対応付けられた画像データを読み出す。この処理は図１５と同様でよい。

S4：次に、画像管理装置５の画面作成部５４は、端末ＩＤに対応付けられた所定領域情報及び視点タイトルを視点管理ＤＢ５００６から読み出す。具体的には、画像管理装置５の画面作成部５４は画像データ、拠点レイアウトマップ及び視点リストを表示するための画面情報を作成する。なお、視点リストには視点タイトルだけでなく視点管理ＤＢ５００６に含まれる各レコードの情報が関連付けられている。

S5：画像管理装置５の送受信部５１は画像データ、拠点レイアウトマップ及び視点リストを表示するための画面情報を情報端末７に送信する。

S6：情報端末７の送受信部７１は画像データ、拠点レイアウトマップ及び視点リストを表示するための画面情報を受信して、表示制御部７３がディスプレイ５０８に画面を表示する。これにより、図２１（ａ）に示すような画面が表示される。図２１（ａ）では、図１７に対し視点リスト欄６２１が表示されている。

視点リスト欄６２１には、視点タイトル６２３の一覧及び視点タイトルごとに削除ボタン６２２が表示されている。閲覧者は任意の視点タイトル６２３を選択することができる。なお、削除ボタン６２２については後述される。また、視点タイトル６２３は視点をユーザが判別できる情報であり、視点タイトル６２３は所定領域情報に関する情報の一例である。視点タイトル６２３の他、所定領域情報の登録日時や所定領域情報そのものを表示してもよい。

なお、図２１（ａ）では、所定領域画像６０４が撮像装置１の正面方向など初期設定の所定領域画像のままであるが、視点タイトル６２３のいずれかの所定領域情報で切り出した所定領域画像６０４を情報端末７が作成してもよい。例えば、視点リスト欄６２１で最上部の所定領域情報で切り取った所定領域画像６０４を表示する。これにより、情報端末7は、画像データを受信した直後から登録された視点の所定領域画像６０４を表示できる。

S7：閲覧者が視点タイトル６２３を選択すると、情報端末７の受付部７２は視点タイトル６２３の選択を受け付ける。具体的には、ポインティングデバイスの入力した座標に基づき選択された視点タイトル６２３を受け付ける。そして、視点タイトルに関連付けられた所定領域情報を取得する。

S8：情報端末７の表示制御部７３は画像データの視点を切り替えて表示する。すなわち、選択された視点タイトル６２３に関連付けられた所定領域情報で画像データから所定領域画像６０４を切りだしディスプレイ５０８に表示する。

図２１（ｂ）は図２１（ａ）で閲覧者Ｙが視点タイトルを選択した後、情報端末７がディスプレイ５０８に表示する画像データを示す。図２１（ｂ）の画像データは図２１（ａ）の画像データと撮像された時刻が異なっているが（画像データのフレームが切り替わっている）、同じ視点で表示できることが分かる。したがって、閲覧者Ｙが一度、視点タイトル６２３を選択すると別の視点タイトル６２３を選択するまで、同じ視点で画像データを表示することができる。

情報端末７がブラウザソフトウェアを終了しても、ブラウザソフトウェアを再度起動した際に閲覧者Ｙが登録されている視点タイトル６２３を選択するので、情報端末７は所望の視点で継続して画像データを閲覧できる。あるいは、閲覧者Ｙが視点タイトル６２３を選択しなくても、登録されている所定領域情報のいずれかで画像データから所定領域画像６０４を切り出して表示できる。

（閲覧者による画像データに対する操作）
図２２は、閲覧者Ｙが画像データを操作する手順を示すフローチャート図の一例である。

情報端末７の受付部７２は画面に対する操作を受け付ける（Ｓ１０）。

受付部７２は受け付けた操作が視点タイトル６２３の選択か否かを判定する（Ｓ２０）。

ステップＳ２０の判定がＹｅｓの場合、上記のように表示制御部７３が所定領域情報に基づいて所定領域画像６０４（すなわち視点）を切り替える（Ｓ３０）。

ステップＳ２０の判定がＮｏの場合、表示制御部７３は操作に応じて画像データを表示させる（Ｓ４０）。すなわち、ピンチインによる縮小、ピンチアウトによる拡大、スワイプによる視点移動などを受け付け、所定領域画像６０４を縮小したり拡大したり、所定領域画像６０４の中心を移動させたりする。

（登録済みの視点の表示方法の別の例）
図２１では視点リスト欄に視点タイトルが表示されたが、視点タイトルを所定領域画像に重畳して表示することも可能である。

図２３は情報端末７のディスプレイ５０８に表示される画面の別の例を示す。図２３では所定領域画像６０４に重畳して視点タイトル６２５が表示されている。このような視点タイトル６２５の表示は情報端末７の表示制御部７３が行う。

この処理について図２４を用いて説明する。図２４（ａ）は、情報端末７の表示制御部７３が所定領域画像６０４に重畳して視点タイトル６２５を表示する手順を示すフローチャート図の一例である。図２４（ａ）の処理は視点リストに含まれる１つの所定領域情報ごとに行われる。

まず、情報端末７の送受信部７１は、図２０のステップＳ５のように、画像データ、拠点レイアウトマップ及び視点リストを表示するための画面情報を受信する（Ｓ１０）。

情報端末７の表示制御部７３はディスプレイ５０８に表示される所定領域画像６０４に、着目している所定領域情報が含まれるか否かを判定する（Ｓ２０）。すなわち、着目している所定領域情報が有する所定領域画像の中心の座標が、ディスプレイ５０８に表示される所定領域画像６０４に含まれるかどうかを判定する。ディスプレイ５０８に表示される所定領域画像６０４の外縁となる頂点のＸ座標とＹ座標は図７にて説明したように所定領域情報やアスペクト比から算出される。

ステップＳ２０の判定がＹｅｓの場合、着目している所定領域情報が示す座標に視点タイトルを表示する（Ｓ３０）。所定領域情報が示す座標とは、所定領域情報が含むｘ座標とｙ座標である。

ステップＳ２０の判定がＮｏの場合、着目している所定領域情報がディスプレイ５０８に表示される所定領域画像に対し左回りと右回りのどちらの方が近いかを決定する（Ｓ５０）。この決定処理を図２４（ｂ）を用いて説明する。図２４（ｂ）は、全方位画像を上から見た模式図である。ディスプレイ５０８に表示される所定領域画像６０４には着目している所定領域情報が入らないが、画像データは全方位画像なので水平方向に３６０度連続している。したがって、ディスプレイ５０８に表示される所定領域画像６０４に向かって左回りでも右回りでも所定領域情報が示す座標に到達できる。

そこで、情報端末７の表示制御部７３は着目している所定領域情報とディスプレイ５０８に表示される所定領域画像６０４の左端までの距離Ａと、着目している所定領域情報とディスプレイ５０８に表示される所定領域画像の右端までの距離Ｂとを算出し、どちらが短いかを判定する。

図２４（ａ）に戻り、表示制御部７３は、着目している所定領域情報と近い方の所定領域画像６０４の端部に視点タイトルを表示する（Ｓ６０）。図２４（ｂ）では距離Ａの方が短いので所定領域画像６０４の左側の端部に視点タイトルを表示する。

次に、表示制御部７３は視点リストに含まれる全ての所定領域情報について処理したか否かを判定する（Ｓ４０）。ステップＳ４０の判定がＮｏの場合はステップＳ２０から処理を繰り返す。

図２３に示す「棚Ａ拡大」という視点タイトル６２５ａと「丸い棚」という視点タイトル６２５ｂは、所定領域情報がディスプレイ５０８の所定領域画像６０４に含まれるため、所定領域情報が示す座標に表示されている。一方、「レジ」という視点タイトル６２５ｃは、所定領域情報がディスプレイ５０８の所定領域画像６０４に含まれない。また、左回りの方が、ディスプレイ５０８に表示される所定領域画像６０４から「レジ」という視点タイトル６２５ｃの所定領域情報までの距離が短い。このため、所定領域画像６０４の左端に「レジ」という視点タイトル６２５ｃが表示されている。また、「レジ」という視点タイトル６２５ｃには左側に方向示す矢印６２６が形成されている。これにより、閲覧者Ｙは所定領域画像６０４よりも左側に「レジ」という視点タイトル６２５ｃがあることを把握できる。

なお、図２４の所定領域画像に表示される視点タイトル６２５にも視点管理テーブルの１レコードの情報が関連付けられている。情報端末７の表示制御部７３はポインティングデバイスの入力した座標に基づき選択された視点タイトル６２５を受け付けると、視点タイトル６２５に関連付けられた所定領域情報を取得して、画像データの視点を切り替えて（所定領域画像６０４を変えて）表示する。

<<登録済みの所定領域情報の削除>>
図２１に示したように、視点リスト欄６２１には削除ボタン６２２が表示される。閲覧者Ｙが削除ボタン６２２を押下することで、所定領域情報を削除できる。

図２５は、閲覧者Ｙが登録済みの視点を削除する処理又は動作を説明するシーケンス図の一例を示す。なお、図２５では主に図２０との相違を説明する。ステップＳ１〜Ｓ６の処理により図２１の画面が表示される。

S7：閲覧者Ｙは削除ボタン６２２を押下することで削除する視点（視点タイトル６２３に関連付けられた所定領域情報）を選択する。情報端末７の受付部７２は視点タイトル６２３の削除を受け付ける。具体的には、ポインティングデバイスの入力した座標に基づき削除ボタン６２２の選択と削除ボタン６２２に対応する視点タイトル６２３を受け付ける。これにより視点ＩＤを特定できる。

S8：情報端末７の送受信部７１は視点ＩＤと共に視点削除要求を画像管理装置５に送信する。

S9：画像管理装置５の送受信部５１は視点削除要求を受信して、領域情報登録部５６が視点ＩＤで特定される１レコードを視点管理ＤＢ５００６から削除する。このようにして閲覧者Ｙは視点を削除できるため、多くなりすぎた視点を整理することができる。なお、この後、画像管理装置５はステップＳ５を行って、新しい視点リストを情報端末７に送信する。

<<デフォルトの視点の登録>>
これまで説明したように、１つでも視点（所定領域情報）が登録された後は、情報端末７は画像データを受信した直後から、登録された所定領域情報で切り出される所定領域画像をディスプレイ５０８に表示することができる。しかし、複数の視点（所定領域情報）が登録されている場合、閲覧者がデフォルトの視点を明示的に登録できれば便利である。すなわち、情報端末７が画像データを受信した直後からよく使う視点の所定領域画像をディスプレイ５０８に表示できる。

図２６は、閲覧者Ｙが登録済みの視点からデフォルトの視点を登録する処理又は動作を説明するシーケンス図の一例を示し、図２７は情報端末７のディスプレイ５０８に表示される画面例を示す。なお、すでに図２０の処理が行われ、ディスプレイ５０８には図２７の画面が表示されているものとする。この場合、画像管理装置５の画面作成部５４は、視点リスト欄６２１にデフォルト設定のためのラジオボタン６２７を表示する画面情報を作成する。

S1：まず、閲覧者Ｙはラジオボタン６２７からいずれかを選択する。情報端末７の受付部７２はラジオボタン６２７が押下された視点（所定領域情報）の選択を受け付ける。これにより、視点ＩＤを特定できる。

S2：情報端末７の送受信部７１は端末ＩＤ及び視点ＩＤと共にデフォルト視点の登録要求を画像管理装置５に送信する。端末ＩＤについては視点リストを取得する時点で特定されている。

S3：画像管理装置５の送受信部５１はデフォルト視点の登録要求を受信し、デフォルト視点登録部５５が端末管理ＤＢ５００２の端末ＩＤに対応付けてデフォルト視点ＩＤのフィールドに視点ＩＤを登録する。なお、すでにデフォルト視点ＩＤのフィールドに視点ＩＤが登録されている場合、上書きされる。

このようにデフォルト視点が登録されると、次回、閲覧者Ｙが撮像装置１のアイコン６０１を選択して（端末ＩＤを指定して）画像データを画像管理装置５から取得した際、情報端末７はデフォルト視点ＩＤの視点ＩＤで所定領域画像を表示できる。

図２８は、デフォルト視点が設定された情報端末７のディスプレイ５０８に表示される画面例を示す。図２７で「棚Ａ拡大」という視点タイトル６２３がデフォルトの視点として選択されたものとする。画像管理装置５が端末ＩＤと共に画像データの取得要求を受信すると、画像管理装置５の記憶・読出部５９が端末管理ＤＢ５００２から端末ＩＤに対応付けられたデフォルト視点ＩＤを読み出す。そして、視点管理ＤＢ５００６からデフォルト視点ＩＤに対応付けられているレコードを読み出す。画像管理装置５はデフォルト視点ＩＤに対応付けられている所定領域情報を画像データと共に情報端末７に送信する。これにより、情報端末７の表示制御部７３はデフォルト視点の所定領域情報で画像データから切り出した所定領域画像６０４をディスプレイ５０８に表示できる。したがって、閲覧者Ｙが視点を切り替えることなく、画像データを受信した直後からデフォルトの視点で画像データを閲覧できる。

<<サムネイル画像の表示>>
情報端末７が視点リストを表示する際に各視点のサムネイル画像が表示されれば閲覧者Ｙが視点を選択しやすくなる。

図２９は、情報端末７がサムネイル画像を表示する処理又は動作を説明するシーケンス図の一例を示し、図３０は情報端末７のディスプレイ５０８に表示される画面例を示す。

S1：閲覧者は情報端末７を操作して撮像装置１を選択する。この処理は、図１５のＳ１と同様でよい。

S2：情報端末７の送受信部７１は画像データ及び視点リストの取得要求を画像管理装置５に送信する。

S3：画像管理装置５の送受信部５１は画像データ及び視点リストの取得要求を受信し、サムネイル作成部５３が画像管理ＤＢ５００４から端末ＩＤに対応付けられている画像データを読み出す。また、サムネイル作成部５３は視点管理ＤＢ５００６から端末ＩＤに対応付けられている所定領域情報を読み出す。

S4：そしてサムネイル作成部５３は、画像データからサムネイル画像を作成する。具体的には、画像データから所定領域情報に基づいて所定領域画像を切り出し、予め定められたサイズに縮小するなどしてサムネイル画像を作成する。視点管理ＤＢ５００６の同じ端末ＩＤに複数の所定領域情報が対応付けられている場合は、所定領域情報ごとにサムネイル画像を作成する。画像管理装置５の画面作成部５４は、サムネイル画像６３１を用いて視点リスト欄６２１を表示する画面情報を作成する。具体的には、視点タイトル６２３に並んでサムネイル画像６３１が表示されるように画面情報を作成する。

S5：情報端末７の送受信部７１は画像データ、拠点レイアウトマップ及び視点リストを表示するための画面情報を情報端末７に送信する。なお、視点リストには視点管理ＤＢ５００６に含まれる情報に加え、サムネイル画像６３１が関連付けられている。

S6：情報端末７の送受信部７１は画像データ、拠点レイアウトマップ及び視点リストを表示するための画面情報を受信して、表示制御部７３がディスプレイ５０８に画面を表示する。これにより、図３０に示すような画面が表示される。

ステップＳ７，８の処理は図２０と同様でよい。

図３０では、視点リスト欄６２１に各視点のサムネイル画像６３１が表示されている。閲覧者Ｙは視点タイトル６２３だけでなくサムネイル画像６３１を選択することでも視点を選択できる。この場合、情報端末７の受付部７２はポインティングデバイスが入力する座標に基づきサムネイル画像６３１を特定しサムネイル画像６３１に関連付けられている所定領域情報を特定する。

サムネイル画像６３１が表示されることで、閲覧者Ｙは各視点に何が写っているかをイメージできるので、視点を選択しやすくなる。サムネイル画像６３１は所定領域画像に入りきらない視点においても作成されているので、閲覧者Ｙは注目すべき視点を探しやすくなる。

なお、図２９では画像管理装置５がサムネイル画像６３１を作成したが、サムネイル画像６３１の作成は情報端末７が行ってもよい。

画像データは定期的に撮像されており、フレームレートが低い動画のように被写体が変化する。画像データが切り替わるとサムネイル画像６３１も新たに作成される。閲覧者Ｙは任意のタイミングでフレームを切り替えることもできるし、動画のように連続的にフレームを切り替えることもできる。

図３１は、サムネイル画像６３１が切り替わった情報端末７のディスプレイ５０８に表示される画面例を示す。図３１では、所定領域画像６０４とサムネイル画像６３１に人影６３２が写っている。すなわち、画像データが切り替わるとサムネイル画像６３１も同じように変化する。

サムネイル画像６３１は、所定領域画像に入りきらない視点においても作成されているので、閲覧者Ｙはサムネイル画像６３１を参照して変化のあった視点に容易に切り替えることができる。

<<視点の公開・非公開（個人）の設定>>
続いて、図３２〜図３５を用いて視点の公開と非公開の設定について説明する。図３２は、閲覧者Ｙが視点を登録する際に公開か非公開を設定する処理又は動作を説明するシーケンス図の一例を示し、図３３は情報端末７のディスプレイ５０８に表示される画面例を示す。

S1：閲覧者Ｙは情報端末７を操作して所望の視点に移動させる。情報端末７の表示制御部７３は、受付部７２が受け付けた操作に応じて所定領域画像６０４を変更する。

S2：視点が決まると閲覧者Ｙは視点登録のための操作を行う。図３３の画面例では図１９との相違を主に説明する。図３３では視点タイトル入力画面６１２に「個人」又は「公開」を選択するためのラジオボタン６４１が表示されている。閲覧者Ｙは、登録しようとしている視点を公開するか否かを判定しラジオボタン６４１を選択する。情報端末７の受付部７２はＯＫボタン６１４の押下を受け付けると、視点タイトル欄６１３から視点タイトル、個人（公開不可）と公開（公開可）のどちらが選択されたかを示す公開フラグを取得する。

S3：情報端末７の送受信部７１は端末ＩＤ、所定領域情報、視点タイトル、公開フラグ、及び、ユーザＩＤを送信する。なお、ユーザＩＤは画像管理装置５へのログインにより特定されており、画像データと共に情報端末７に送信されている。あるいは、クッキーなどの手法によりユーザＩＤを特定できる。

S4：画像管理装置５の送受信部５１は端末ＩＤ、所定領域情報、視点タイトル、公開フラグ、及び、ユーザＩＤを受信する。そして、領域情報登録部５６が端末ＩＤ、所定領域情報、視点タイトル、公開フラグ、及び、ユーザＩＤを視点管理ＤＢ５００６に登録する。したがって、撮像装置１ごと（端末ＩＤごと）だけでなく、閲覧者Ｙごとに視点を登録できる。また、閲覧者Ｙは視点を公開するかどうかを登録できる。他の閲覧者に対し注目させたい視点があれば公開することができ、個人的に興味がある視点であれば非公開にすることができる。これにより視点リスト欄６２１に表示される視点リストの数が多くなりすぎることも抑制できる。

次に、公開か非公開かが設定された後にディスプレイ５０８に表示される画面について説明する。

図３４は、公開か非公開かが設定された後に、情報端末７が画像データを表示する処理又は動作を説明するシーケンス図の一例を示し、図３５は情報端末７のディスプレイ５０８に表示される画面例を示す。

S1：情報端末７の受付部７２は撮像装置１の選択を受け付ける。

S2：情報端末７の送受信部７１は、端末ＩＤ及びユーザＩＤと共に、画像データ及び視点リストの取得要求を画像管理装置５に送信する。

S3：画像管理装置５の送受信部５１は端末ＩＤ及びユーザＩＤと共に画像データ及び視点リストの取得要求を受信する。そして、画面作成部５４が画像データを画像管理ＤＢ５００４から読み出す。

S4：また、端末ＩＤに対応付けられているレコードのうち個人／公開が「公開」となっているレコードを読み出す。同様に、ユーザＩＤに対応付けられているレコードを読み出す。重複しているレコードは１つだけ読み出せばよい。画面作成部５４はこれらから視点リスト欄６２１を表示するための画面情報を作成する。

S5：画像管理装置５の送受信部５１は画像データ及び視点リストを情報端末７に送信する。

S6：情報端末７の送受信部７１は画像データ及び視点リストを受信し、表示制御部７３がディスプレイ５０８に図３５のような画面を表示する。「棚Ａ拡大」と「丸い棚」という視点タイトル６２３は閲覧者Ｙが登録した視点であるが、「入口部分」という視点タイトル６２９は別のユーザが登録した視点である。別のユーザが登録した視点は削除すべきでないので、削除ボタン６２２が表示されない。この場合、視点管理ＤＢ５００６で閲覧者ＹのユーザＩＤに対応付けられていない視点タイトルに対し削除ボタン６２２を表示しない画面情報を画面作成部５４が作成する。

ステップＳ７，８の処理は図２０と同様でよい。

したがって、閲覧者Ｙは自分が設定した視点だけでなく、他のユーザが登録し公開されている視点で画像データを表示させることができる。

なお、ユーザＩＤが送信されることを利用して、ユーザごとにデフォルトの視点を登録してもよい。この場合、画像管理装置５は端末管理ＤＢ５００２のデフォルト視点ＩＤのフィールドにユーザＩＤに対応付けて視点ＩＤを登録すればよい。

<<視点の自動登録>>
閲覧者Ｙが視点を登録する他、注目すべき視点が自動的に登録されれば便利な場合がある。例えば、人が集まる場所が自動で登録されていれば、閲覧者Ｙは自動的に登録された視点を選択してすぐにその視点で所定領域画像を表示できる。

図３６は、自動的に登録された視点の所定領域画像を情報端末７が表示する処理又は動作を説明するシーケンス図の一例を示し、図３７は情報端末７のディスプレイ５０８に表示される画面例を示す。

S1：情報端末７の受付部７２は撮像装置１の選択を受け付ける。

S2：情報端末７の送受信部７１は、端末ＩＤと共に画像データ及び視点リストの取得要求を画像管理装置５に送信する。

S3：画像管理装置５の送受信部５１は端末ＩＤと共に画像データ及び視点リストの取得要求を受信する。そして、画面作成部５４が画像データを画像管理ＤＢ５００４から読み出す。

S4：画像管理装置５の人物検出部５２は画像データの全体に人検出処理を行う。人がいる上下方向の範囲は決まっているので、ある範囲だけ行ってもよい。

S5：人物検出部５２が人を検出した場合、画面作成部５４は視点リストに人が検出された座標を含む所定範囲を所定領域情報として作成する。なお、視点タイトルは、予め定められた例えば「人検出（自動登録）」とする。

S6：画像管理装置５は画像データと視点リストを情報端末７に送信する。

S7：情報端末７の送受信部７１は画像データと視点リストを受信して、表示制御部７３が図３７のような画面をディスプレイ５０８に表示する。図３７の画面では視点リスト欄６２１に「人検出（自動登録）」という視点タイトル６３７が表示されている。閲覧者Ｙは「人検出（自動登録）」という視点タイトル６３７を目視して自動的に登録された視点があることを把握し、必要であれば視点を切り替えることができる。「人検出（自動登録）」という視点タイトル６３７が押下されたことで、図３７の所定画像情報には人が含まれている。

ステップＳ８，９の処理は図２０のステップＳ７，８と同様でよい。

なお、単に人を検出するのでなく、大人、子供、男性、女性などのように人間を属性で分類して検出してもよい。閲覧者Ｙは属性によって行動がどのように変わるか等を分析できる。

また、画像管理装置５は商品が多く売れたことを画像処理で検出して、該商品が含まれる視点を登録してもよい。この場合、商品が売れたのは商品が減る前であるが、視点登録されれば、閲覧者Ｙは時間的に遡って画像データを閲覧する際に、登録された視点で所定領域画像を表示できる。

したがって、人に限られず画像管理装置５が画像処理することで所望の現象を検出し、視点を登録することができる。なお、現象とは観察されうる事実であり、注目すべき変化ということができる。

＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。

例えば、本実施形態では全方位画像を例にして説明したが、情報端末７に提供される画像は必ずしも全方位画像でなくてもよい。例えばディスプレイ５０８に全体が表示しきれない広角画像が含まれる。

上記の実施形態では、情報端末７が画像管理装置５に視点を登録したが、情報端末７が自機に視点を登録してもよい。すなわち、情報端末７が撮像装置１から画像データを取得し、閲覧者Ｙが決定した所定領域情報を端末ＩＤと対応づけて記憶する。この場合でも、閲覧者Ｙが撮像装置１を選択する（端末ＩＤを選択する）ことで、同じ視点で所定領域画像を表示できる。

また、以上の実施例で示した図１３などの構成例は、撮像装置１、通信端末３、画像管理装置５及び情報端末７の処理の理解を容易にするために、主な機能に応じて分割したものである。しかし、各処理単位の分割の仕方や名称によって本願発明が制限されることはない。撮像装置１、通信端末３、画像管理装置５及び情報端末７の処理は、処理内容に応じてさらに多くの処理単位に分割することもできる。また、１つの処理単位がさらに多くの処理を含むように分割することもできる。

また、画像管理装置５が有する機能の全て又は１以上を情報端末７が有していてよく、情報端末７が有する機能の全て又は１以上を画像管理装置５が有していてもよい。

また、画像管理装置５の記憶部５０００のデータベースは、画像管理装置５が直接有する他、画像管理装置５が読み書き可能な通信ネットワーク９上にあればよい。

なお、所定領域画像は表示範囲の一例であり、受付部７２は受付手段の一例であり、領域情報登録部５６は登録手段の一例であり、送受信部５１は提供手段の一例であり、表示制御部７３は表示制御手段の一例である。所定範囲情報は表示範囲情報の一例であり、視点管理ＤＢ５００６は記憶装置の一例である。

サムネイル作成部５３はサムネイル画像作成手段の一例であり、認証部５７は識別手段の一例であり、公開フラグは公開可否情報の一例であり、人物検出部５２は画像解析手段の一例である。ユーザＩＤはユーザ識別情報の一例であり、送受信部５１は受信手段の一例であり、画像通信システム２００又は画像管理装置５は画像管理システムの一例であり、画像通信システム２００が行う動作方法や処理方法は画像管理方法の一例である。

１ ：撮像装置
３ ：通信端末
５ ：画像管理装置
７ ：情報端末
３１ ：送受信部
３２ ：受付部
３３ ：接続部
３９ ：読出部
５１ ：送受信部
５２ ：人物検出部
５３ ：サムネイル作成部
５４ ：画面作成部
５５ ：デフォルト視点登録部
５６ ：領域情報登録部
５７ ：認証部
２００ ：画像通信システム

特開２０１４−１３１２１５号公報

Claims (15)

1. 撮像装置が撮像した全方位画像を前記撮像装置と関連付けて管理する画像管理システムであって、
   前記撮像装置の識別情報と共に取得した前記全方位画像をディスプレイに表示する際の表示範囲の設定を受け付ける受付手段と、
   情報端末が前記撮像装置の識別情報と共に前記表示範囲の登録を要求した場合、前記撮像装置の識別情報に対応付けて前記表示範囲を指定する表示範囲情報を記憶装置に登録する登録手段と、
   前記撮像装置を指定して前記全方位画像を要求された場合、前記記憶装置において前記撮像装置の前記識別情報に対応付けられている前記表示範囲情報、及び、前記撮像装置が撮像した前記全方位画像を提供する提供手段と、
   前記提供手段が提供した前記表示範囲情報で前記全方位画像の前記表示範囲を決定し、ディスプレイに表示する表示制御手段と、
   を有する画像管理システム。
2. 前記撮像装置は、任意の場所に設置された状態で繰り返し前記全方位画像を撮像し、
   前記表示制御手段は、前記表示範囲情報の選択を受け付けた後、別の前記表示範囲情報の選択を受け付けるまで、撮像時刻が異なる前記全方位画像について同じ前記表示範囲情報で前記全方位画像の前記表示範囲を決定しディスプレイに表示する請求項１に記載の画像管理システム。
3. 前記提供手段は、前記撮像装置を指定して前記全方位画像を要求された場合、前記撮像装置に対応付けられている前記表示範囲情報と前記表示範囲情報に関する情報を、前記撮像装置が撮像した前記全方位画像と共に提供し、
   前記表示制御手段は、前記表示範囲情報に関する情報をディスプレイに表示する請求項１又は２に記載の画像管理システム。
4. 前記受付手段は、前記表示範囲情報に関する情報としてディスプレイに表示された前記表示範囲に対する名称の入力を受け付け、
   前記登録手段は、前記全方位画像を撮像した前記撮像装置の前記識別情報、及び、前記表示範囲情報を前記名称と共に前記記憶装置に登録させ、
   前記表示制御手段は、前記表示範囲情報を前記名称と共にディスプレイに表示する請求項３に記載の画像管理システム。
5. 前記撮像装置を指定して前記全方位画像を要求された場合、前記撮像装置に対応付けられている前記表示範囲情報で前記撮像装置が撮像した前記全方位画像の前記表示範囲を決定し、該表示範囲のサムネイル画像を作成するサムネイル画像作成手段を有し、
   前記提供手段は、前記撮像装置に対応付けられている前記表示範囲情報、前記撮像装置が撮像した前記全方位画像、及び、前記サムネイル画像を提供し、
   前記表示制御手段は、前記表示範囲情報に関する情報に対応付けて前記サムネイル画像をディスプレイに表示する請求項３又は４に記載の画像管理システム。
6. 前記登録手段は、１つの前記撮像装置に対し複数の前記表示範囲情報を対応付けて前記記憶装置に登録させ、
   前記提供手段は、前記撮像装置を指定して前記全方位画像を要求された場合、前記撮像装置に対応付けられている複数の前記表示範囲情報を、前記撮像装置が撮像した前記全方位画像と共に提供し、
   前記表示制御手段は、複数の前記表示範囲情報のうち予め定められた前記表示範囲情報で、前記全方位画像の前記表示範囲を決定しディスプレイに表示する請求項１〜５のいずれか１項に記載の画像管理システム。
7. 前記表示制御手段は、複数の前記表示範囲情報に関する情報をディスプレイに表示し、
   前記受付手段が受け付けた１つの前記表示範囲情報で前記全方位画像の前記表示範囲を決定しディスプレイに表示する請求項６に記載の画像管理システム。
8. 前記表示制御手段は、ディスプレイに表示されている前記全方位画像の前記表示範囲に前記表示範囲情報の中心が含まれる場合、ディスプレイに表示されている前記表示範囲において前記中心に対応する位置に前記表示範囲情報に関する情報を表示し、
   ディスプレイに表示されている前記全方位画像の前記表示範囲に前記表示範囲情報の中心が含まれない場合、ディスプレイに表示されている前記表示範囲の左端又は右端のうち前記中心に近い方に前記表示範囲情報に関する情報を表示する請求項７に記載の画像管理システム。
9. 前記受付手段は、複数の前記表示範囲情報から選択された１つをデフォルトの前記表示範囲情報として受け付け、
   前記登録手段は、前記撮像装置の前記識別情報に対応付けて前記デフォルトの前記表示範囲情報を前記記憶装置に登録させておき、
   前記提供手段は、前記撮像装置を指定して前記全方位画像を要求された場合、前記撮像装置に対応付けられている前記デフォルトの前記表示範囲情報を、前記撮像装置が撮像した前記全方位画像と共に提供し、
   前記表示制御手段は、前記デフォルトの前記表示範囲情報で、前記全方位画像の前記表示範囲を決定しディスプレイに表示する請求項６〜８のいずれか１項に記載の画像管理システム。
10. 前記画像管理システムのユーザを識別する識別手段を有し、
    前記登録手段は、前記識別手段が特定した前記ユーザのユーザ識別情報と共に前記表示範囲情報を前記記憶装置に登録する請求項３に記載の画像管理システム。
11. 前記受付手段は、前記表示範囲情報を他のユーザに公開するか否かの設定を受け付け、
    前記登録手段は、前記撮像装置の前記識別情報と共に、前記表示範囲情報、前記ユーザ識別情報、及び、前記表示範囲情報を他のユーザに公開するか否かの公開可否情報を前記記憶装置に登録し、
    前記提供手段は、前記撮像装置を指定して前記ユーザ識別情報と共に前記全方位画像を要求された場合、前記ユーザ識別情報と前記撮像装置の前記識別情報に対応付けられている前記表示範囲情報、及び、前記ユーザ識別情報に対応付けられていないが前記公開可否情報が公開可である前記表示範囲情報、並びに、前記撮像装置が撮像した前記全方位画像を提供する請求項１０に記載の画像管理システム。
12. 前記撮像装置が撮像した前記全方位画像から予め定められた現象を検出する画像解析手段を有し、
    前記登録手段は、前記画像解析手段が検出した現象が写っている場所を含む所定範囲を前記表示範囲として指定する前記表示範囲情報を生成し、
    前記提供手段は、前記撮像装置を指定して前記全方位画像を要求された場合、前記登録手段が生成した前記表示範囲情報、及び、前記撮像装置が撮像した前記全方位画像を提供する請求項１〜１１のいずれか１項に記載の画像管理システム。
13. 情報端末とネットワークを介して通信可能な１つ以上の情報処理装置を含み、撮像装置が撮像した全方位画像を前記撮像装置と関連付けて管理する画像管理システムであって、
    撮像装置が撮像した全方位画像を前記情報端末がディスプレイに表示する際の表示範囲を指定する表示範囲情報、及び、前記全方位画像を撮像した前記撮像装置を識別するための識別情報を前記情報端末から受信する受信手段と、
    前記受信手段が受信した前記表示範囲を指定する前記表示範囲情報を、前記撮像装置の識別情報に対応付けて記憶装置に登録する登録手段と、
    前記撮像装置を指定して前記全方位画像を要求された場合、前記記憶装置において前記撮像装置の前記識別情報に対応付けられている前記表示範囲情報、及び、前記撮像装置が撮像した前記全方位画像を提供する提供手段と、
    を有する画像管理システム。
14. 情報端末とネットワークを介して通信可能な１つ以上の情報処理装置を含み、撮像装置が撮像した全方位画像を前記撮像装置と関連付けて管理する画像管理システムが行う画像管理方法であって、
    前記撮像装置が撮像した全方位画像を前記情報端末がディスプレイに表示する際の表示範囲を指定する表示範囲情報、及び、前記全方位画像を撮像した前記撮像装置を識別するための識別情報を前記情報端末から受信するステップと、
    前記受信するステップで受信した前記表示範囲を指定する前記表示範囲情報を、前記撮像装置の識別情報に対応付けて記憶装置に登録するステップと、
    前記情報端末から前記撮像装置を指定して前記全方位画像を要求された場合、前記記憶装置において前記撮像装置の前記識別情報に対応付けられている前記表示範囲情報、及び、前記撮像装置が撮像した前記全方位画像を前記情報端末に提供するステップと、を有する画像管理方法。
15. 情報端末とネットワークを介して通信可能であり、撮像装置が撮像した全方位画像を前記撮像装置と関連付けて管理する情報処理装置を、
    撮像装置が撮像した全方位画像を前記情報端末がディスプレイに表示する際の表示範囲を指定する表示範囲情報、及び、前記全方位画像を撮像した前記撮像装置を識別するための識別情報を前記情報端末から受信する受信手段と、
    前記受信手段が受信した前記表示範囲を指定する前記表示範囲情報を、前記撮像装置の識別情報に対応付けて記憶装置に登録する登録手段と、
    前記撮像装置を指定して前記全方位画像を要求された場合、前記記憶装置において前記撮像装置の前記識別情報に対応付けられている前記表示範囲情報、及び、前記撮像装置が撮像した前記全方位画像を提供する提供手段、として機能させるためのプログラム。

Images