JP2001034250A

JP2001034250A - 映像表示装置、映像表示方法および映像を表示するためのプログラムを記録した記録媒体

Info

Publication number: JP2001034250A
Application number: JP11204655A
Authority: JP
Inventors: Toshihiko Hata; 淑彦秦
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 1999-07-19
Filing date: 1999-07-19
Publication date: 2001-02-09
Anticipated expiration: 2019-07-19
Also published as: JP4167777B2

Abstract

(57)【要約】【課題】被写体情報および／またはイベント情報を用
いることにより、映像の重要度に応じてレイアウト等を
自動的に決定して映像を表示する映像表示装置、映像表
示方法および映像を表示するためのプログラムを記録し
た記録媒体を提供する。【解決手段】撮影された空間に存在する被写体と被写
体の重要性を表す被写体重要度との対応関係を含む被写
体情報を管理する被写体情報管理部と、被写体情報管理
部によって管理される被写体情報に基づいて、映像の重
要性を表す映像重要度を計算する映像重要度計算部と、
空間を撮影した映像の情報を、映像情報として取得する
映像情報取得部と、少なくとも映像重要度計算部によっ
て計算された映像重要度に基づいて、映像情報取得部に
よって取得された映像情報が表す映像の表示を制御する
表示制御部と、表示制御部の制御にしたがって映像を表
示する表示部とを備えた映像表示装置。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、セキュリティ監
視、プラント運転制御、設備管理あるいはスポーツや祭
り等のテレビ放送など、複数の映像を表示するための映
像表示装置、映像表示方法に関する。

【０００２】

【従来の技術】セキュリティ監視やプラント運転制御で
は、建物や設備が存在する現場の状況を複数の監視カメ
ラで撮影し、現場と離れた監視センタで必要な映像を随
時切り替えて表示する映像監視が行われている。表示す
る映像には、ライブ映像や、ＶＴＲ（ＶｉｄｅｏＴａ
ｐｅＲｅｃｏｒｄｅｒ）やハードディスクなどに記録
された蓄積映像が含まれる。ライブ映像は、監視対象の
現在の状況をリアルタイムで確認するために用いられ
る。蓄積映像は、検索することによって事件発生前の状
況を確認し、あるいは現象を繰り返し表示して詳細に分
析するために用いられることが多い。

【０００３】カメラや映像蓄積装置など映像用途機器の
低価格化に伴い、現場に設置されるカメラ台数は年々増
加している。現在、大規模施設では数十台のカメラが設
置されている。このような施設では、少数のオペレータ
が多数のカメラ映像を効率的に監視できるような工夫が
なされている。例えば、グループ化された複数カメラの
画像がモニタ画面に縮小して合成表示される、マルチ画
面合成表示である（図２参照）。このマルチ画面合成表
示では、一定時間毎あるいはオペレータの指示により別
のカメラグループの合成画面に切り替えることができ
る。別の例は、強調表示であり、カメラが撮影する物体
やエリアなどの重要度に応じて各々の映像の大きさを変
化させ、監視員に映像の重要度を意識させる（例えば図
１８（ａ）参照）。さらに別の例では、各映像の撮影位
置を容易に理解することができるよう、監視する地域の
地図や建物のレイアウト図を背景として表示し、撮影位
置に対応するその図の位置の近傍にその映像を表示する
（例えば図１８（ｂ）参照）。「ＭｕｌｔｉＳｃｏｐ
ｅ」（ＮＥＣシステム建設カタログ）は、このような表
示を可能にする従来の映像表示装置の一つである。

【０００４】図３９は、従来の映像表示装置３９０の構
成を示すブロック図である。

【０００５】映像表示装置３９０は、複数のカメラ３９
１ａ〜３９１ｎと、映像情報取得部３９２と、表示レイ
アウト情報修正部３９３と、表示レイアウト情報格納部
３９４と、表示制御部３９５と、表示部３９６とを含
む。映像情報取得部３９２は、より具体的に図４０に示
されるようにビデオマトリクススイッチャ４０１を含
む。ビデオマトリクススイッチャ４０１は、表示制御部
３９５からの指定に基づいて、Ｍ個の入力映像信号から
指定されたＮ個の映像信号を表示制御部３９５に出力す
る。表示制御部３９５は、少なくともグラフィックスボ
ード４０２とマルチ画面オーバレイボード４０３とを含
む。グラフィックスボード４０２とマルチ画面オーバレ
イボード４０３は、受け取った映像情報と表示レイアウ
ト情報とに基づいて、表示装置に表示すべき映像の表示
データを作成する。なお、グラフィックスボード４０２
とマルチ画面オーバレイボード４０３とはいずれも製品
化されているので、その詳細な説明は省略する。

【０００６】このように構成された映像表示装置３９０
で映像を表示する場合、ユーザは、予め表示レイアウト
情報修正部３９３（図３９）を介して表示レイアウト情
報を設定する。上述のように、表示制御部３９５は、設
定されている表示レイアウト情報に基づいて映像の表示
を制御し、映像を表示する。

【０００７】図４１は、従来の映像表示装置３９０（図
３９）において表示レイアウト情報を設定するための操
作画面の例を示す。

【０００８】図４１に示されるように、表示レイアウト
情報の設定は対話的に定義することができる。システム
設計者あるいはオペレータは、各カメラに写る被写体の
種類、重要度、写り具合等、オペレータの判断に基づい
て、見やすい表示レイアウトを頭の中で考える。オペレ
ータは、表示レイアウト情報修正部３９３（図３９）を
介してその表示レイアウトを入力することによって、表
示レイアウト情報を設定する。

【０００９】図４２は、従来の別の映像表示装置システ
ム４２０の構成を示すブロック図である。

【００１０】映像表示装置システム４２０は、複数の画
像送信端末４２１ａ〜４２１ｎと、画像多重化装置４２
２と、画像受信端末４２５とを含む。複数の画像送信端
末４２１ａ〜４２１ｎで撮影され、所定の処理を施され
た画像情報は、画像多重化装置４２２に送信され、さら
なる処理を加えられた後、画像受信端末４２５に送信さ
れ、表示される。

【００１１】画像送信端末４２１ａは、カメラ４２１ａ
−１と、画像符号化装置４２１ａ−２と、センサ４２１
ａ−３とを含む。センサ４２１ａ−３は、カメラ４２１
ａ−１に対応して設けられる。センサ４２１ａ−３は、
カメラ４２１ａ−１の撮影空間で発生した異常を検出
し、そのセンサレベル信号を画像多重化装置４２２に送
信する。

【００１２】画像多重化装置４２２は、画像多重化部４
２３と、優先順位決定部４２４とを含む。画像多重化部
４２３は、受け取った画像信号とその表示優先順位情報
とを多重化して、画像受信端末４２５に送信する。優先
順位決定部４２４は、表示優先順位情報を管理し、セン
サレベルが変化するとその値が高いカメラから表示の順
番付けを行う。

【００１３】図４３は、優先順位決定部４２４（図４
２）が管理する表示優先順位情報の例を示す。図４３に
示されるカメラＩＤとは、カメラ４２１ａ―１〜４２１
ｎ―１にそれぞれ割り当てられたＩＤである。

【００１４】再び図４２を参照して、画像受信端末４２
５は、画像符号化装置４２６と、表示部４２７とを含
む。画像受信端末４２５は、画像多重化装置４２２から
受け取った画像情報を復号化し、優先順位情報に基づい
て、画像を表示すべき順序に並べ、マルチウィンドウ表
示する。

【００１５】

【発明が解決しようとする課題】従来の映像表示装置３
９０（図３９）では、予めオペレータが被写体の位置や
重要度を考慮して表示レイアウトを考え、対話的に定義
するという煩雑な作業が必要である。さらに被写体の位
置や重要度が変わるとその度にオペレータは表示すべき
映像の表示レイアウト決定を繰り返さねばならない。よ
り複雑な、複数の被写体をそれぞれ含む複数の映像の表
示が必要な場合、オペレータの考慮した表示レイアウト
等では客観性に欠け、映像の重要性に応じた表示が実現
されているか不明確である。

【００１６】従来の映像表示装置システム４２０（図４
２）では、センサの計測値に基づき互いの優先順位がわ
かるよう複数の画像を自動的に表示することができる。
例えば５００℃が警戒レベルの工場設備の映像監視装置
において、５００℃に近い値を検出する温度センサに対
応するカメラの画像から順に画面上に表示することがで
きる。

【００１７】しかし、画像の重要性はカメラに対応して
設けられたセンサのセンサレベルでしか評価されないた
め、撮影された画像に含まれる被写体の重要性に応じて
画像の重要性を決定することができない。このようなシ
ステムでは、カメラを移動させながら撮影する場合に、
カメラで撮影した画像に何が写っているかによって画像
の重要性を判断することできず、利用が大きく制限され
る。さらに、カメラ毎にセンサが設けられているため、
ある被写体の異常を一つのセンサで検知し、その被写体
の異常発生状態を異なる視点から複数のカメラで撮影し
同様な重要度で表示することはできない。

【００１８】本発明の目的は、被写体情報および／また
はイベント情報を用いることにより、映像の重要度に応
じてレイアウト等を自動的に決定して映像を表示する映
像表示装置、映像表示方法および映像を表示するための
プログラムを記録した記録媒体を提供することである。

【００１９】

【課題を解決するための手段】本発明の映像表示装置
は、撮影された空間に存在する被写体と前記被写体の重
要性を表す被写体重要度との対応関係を含む被写体情報
を管理する被写体情報管理部と、前記被写体情報管理部
によって管理される前記被写体情報に基づいて、前記映
像の重要性を表す映像重要度を計算する映像重要度計算
部と、前記空間を撮影した映像の情報を、映像情報とし
て取得する映像情報取得部と、少なくとも前記映像重要
度計算部によって計算された前記映像重要度に基づい
て、前記映像情報取得部によって取得された前記映像情
報が表す前記映像の表示を制御する表示制御部と、前記
表示制御部の制御にしたがって前記映像を表示する表示
部とを備えており、これにより上記目的が達成される。

【００２０】前記映像表示装置は、前記映像情報を格納
する映像情報格納部をさらに備え、前記映像情報取得部
は、前記映像情報格納部から前記映像情報を読み出すこ
とによって前記映像情報を取得してもよい。

【００２１】前記映像表示装置は、新たな被写体重要度
が入力される入力部をさらに備え、前記被写体情報管理
部は、前記入力部からの入力に応答して、前記被写体重
要度を入力された前記新たな被写体重要度に変更して保
持することにより管理し、前記映像重要度計算部は、前
記被写体情報管理部による前記新たな被写体重要度の保
持に応答して、保持された被写体重要度に基づいて映像
重要度を計算してもよい。

【００２２】前記被写体は、前記空間に含まれる部分的
な空間であってもよい。

【００２３】前記映像情報は、前記映像を撮影した時刻
に関する撮影時刻情報を含み、前記被写体情報は、前記
被写体に発生したイベントと前記イベントが発生した時
刻を表すイベント発生時刻とに関するイベント情報を含
み、前記映像重要度計算部は、さらに前記イベント情報
と前記撮影時刻情報とに基づいて前記映像重要度を計算
してもよい。

【００２４】本発明の映像表示装置は、空間を撮影した
映像の情報と前記映像を撮影した時刻に関する撮影時刻
情報とを格納する映像情報格納部と、前記映像情報格納
部から前記映像情報を読み出す映像情報読み出し部と、
前記空間で発生したイベントと、前記イベントが発生し
た発生時刻、前記イベントの重要性を表すイベント重要
度および前記映像との対応関係を含むイベント情報を管
理するイベント情報管理部と、前記イベント情報管理部
によって管理される前記イベント情報と前記映像情報格
納部に格納された前記撮影時刻情報とに基づいて、前記
映像重要度を計算する映像重要度計算部と、少なくとも
前記映像重要度計算部によって計算された前記映像重要
度に基づいて、前記映像情報が表す映像の表示を制御す
る表示制御部と、前記表示制御部の制御にしたがって前
記映像を表示する表示部とを備えており、これにより上
記目的が達成される。

【００２５】前記映像は、前記空間を複数の視点から撮
影した複数の映像であって、前記映像重要度計算部は、
前記複数の映像のそれぞれについて前記映像重要度を計
算し、前記表示制御部は、少なくとも前記映像重要度計
算部によって計算された前記映像重要度に基づいて、前
記複数の映像それぞれの表示を制御してもよい。

【００２６】前記表示制御部は、前記映像重要度計算部
によって計算された前記映像重要度と前記映像を表示す
る規則を規定する表示規則とに基づいて、前記複数の映
像それぞれの表示を制御してもよい。

【００２７】前記表示規則は、前記映像が表示される位
置、時間、順序または大きさを規定してもよい。

【００２８】前記表示制御部は、前記複数の映像のそれ
ぞれについて前記映像重要度計算部によって計算された
前記映像重要度と、前記映像重要度に応じて適用される
表示規則とに基づいて、前記複数の映像それぞれを強調
表示するよう表示を制御してもよい。

【００２９】前記表示制御部は、前記複数の映像のそれ
ぞれについて前記映像重要度計算部によって計算された
前記映像重要度と、前記映像重要度に応じて適用される
表示規則とに基づいて、前記複数の映像のそれぞれの品
質を決定し、決定された品質で前記複数の映像それぞれ
の表示を制御してもよい。

【００３０】前記表示規則は変更可能であってもよい。

【００３１】前記映像は画像フレームから構成され前記
画像フレームは２以上の領域を含み、前記映像重要度計
算部は、前記２以上の領域のそれぞれについて前記映像
重要度を計算し、前記表示制御部は、前記映像重要度計
算部によって計算された前記映像重要度に基づいて、前
記２以上の領域のそれぞれを表示する態様を決定して前
記画像フレームの表示を制御してもよい。

【００３２】前記映像は、第１の時刻に撮影された第１
の映像と、第２の時刻に撮影された第２の映像を含み、
前記映像重要度計算部は、前記第１の映像の映像重要度
である第１映像重要度と、前記第２の映像の映像重要度
である第２映像重要度とを計算し、前記表示制御部は、
前記映像を表示するための規則を規定する表示規則と前
記映像重要度計算部によって計算された前記第１映像重
要度および第２映像重要度とに基づいて前記映像を表示
する態様を決定し、撮影された時刻に基づいて前記第１
の映像と前記第２の映像とが同期するよう表示を制御し
てもよい。

【００３３】前記表示制御部は、前記複数の映像のそれ
ぞれが撮影された位置と前記映像重要度計算部によって
計算された前記映像重要度とに基づいて前記複数の映像
それぞれの表示を制御してもよい。

【００３４】前記映像は静止画であってもよい。

【００３５】前記映像は動画であってもよい。

【００３６】前記第１の時刻と前記第２の時刻とは、同
一の時刻であってもよい。

【００３７】本発明の映像表示方法は、撮影された空間
に存在する被写体と前記被写体の重要性を表す被写体重
要度との対応関係を含む被写体情報を管理するステップ
と、前記被写体情報に基づいて、前記映像の重要性を表
す映像重要度を計算するステップと、前記空間を撮影し
た映像の情報を、映像情報として取得するステップと、
少なくとも前記映像重要度に基づいて、前記映像情報が
表す前記映像の表示を制御するステップと、前記映像の
表示の制御にしたがって前記映像を表示するステップと
を包含し、これにより上記目的が達成される。

【００３８】前記映像表示方法は、前記映像情報を格納
するステップをさらに包含し、前記映像情報を取得する
ステップは、格納された前記映像情報を読み出すことに
よって、前記映像情報を取得するステップであってもよ
い。

【００３９】前記映像表示方法は、新たな被写体重要度
を入力するステップをさらに包含し、前記被写体情報を
管理するステップは、前記新たな被写体重要度を入力す
るステップによる入力に応答して、前記被写体重要度を
入力された前記新たな被写体重要度に変更して保持する
ことにより管理するステップであり、前記映像重要度を
計算するステップは、前記新たな被写体重要度の保持に
応答して、保持された被写体重要度に基づいて映像重要
度を計算するステップであってもよい。

【００４０】前記映像情報は、前記映像を撮影した時刻
に関する撮影時刻情報を含み、前記被写体情報は、前記
被写体に発生したイベントと前記イベントが発生した時
刻を表すイベント発生時刻とに関するイベント情報を含
み、前記映像重要度を計算するステップは、さらに前記
イベント情報と前記撮影時刻情報とに基づいて前記映像
重要度を計算するステップであってもよい。

【００４１】本発明の映像表示方法は、空間を撮影した
映像の情報と前記映像を撮影した時刻に関する撮影時刻
情報とを格納するステップと、格納された前記映像情報
を読み出すステップと、前記空間で発生したイベント
と、前記イベントが発生した発生時刻、前記イベントの
重要性を表すイベント重要度および前記映像との対応関
係を含むイベント情報を管理するステップと、管理され
た前記イベント情報と格納された前記撮影時刻情報とに
基づいて、前記映像重要度を計算するステップと、少な
くとも計算された前記映像重要度に基づいて、前記映像
情報が表す映像の表示を制御するステップと、前記制御
にしたがって前記映像を表示するステップとを包含し、
これにより上記目的が達成される。

【００４２】前記映像は画像フレームから構成され、前
記画像フレームは２以上の領域を含み、前記映像重要度
を計算するステップは、前記２以上の領域のそれぞれに
ついて前記映像重要度を計算するステップであり、前記
表示を制御するステップは、計算された前記映像重要度
に基づいて、前記２以上の領域のそれぞれを表示する態
様を決定して前記画像フレームの表示を制御するステッ
プであってもよい。

【００４３】前記映像は、第１の時刻に撮影された第１
の映像と、第２の時刻に撮影された第２の映像を含み、
前記映像重要度を計算するステップは、前記第１の映像
の映像重要度である第１映像重要度と、前記第２の映像
の映像重要度である第２映像重要度とを計算するステッ
プであり、前記表示を制御するステップは、前記映像を
表示するための規則を規定する表示規則と計算された前
記第１映像重要度および第２映像重要度とに基づいて前
記映像を表示する態様を決定し、撮影された時刻に基づ
いて前記第１の映像と前記第２の映像とが同期するよう
表示を制御するステップであってもよい。

【００４４】本発明のコンピュータプログラムを記録し
た記録媒体は、撮影された空間に存在する被写体と前記
被写体の重要性を表す被写体重要度との対応関係を含む
被写体情報を管理するステップと、前記被写体情報に基
づいて、前記映像の重要性を表す映像重要度を計算する
ステップと、前記空間を撮影した映像の情報を、映像情
報として取得するステップと、少なくとも前記映像重要
度に基づいて、前記映像情報が表す前記映像の表示を制
御するステップと、前記映像の表示の制御にしたがって
前記映像を表示するステップとを含み、これにより上記
目的が達成される。

【００４５】前記映像表示方法は、前記映像情報を格納
するステップをさらに包含し、前記映像情報を取得する
ステップは、格納された前記映像情報を読み出すことに
よって、前記映像情報を取得するステップであってもよ
い。

【００４６】前記映像表示方法は、新たな被写体重要度
を入力するステップをさらに包含し、前記被写体情報を
管理するステップは、前記新たな被写体重要度を入力す
るステップによる入力に応答して、前記被写体重要度を
入力された前記新たな被写体重要度に変更して保持する
ことにより管理するステップであり、前記映像重要度を
計算するステップは、前記新たな被写体重要度の保持に
応答して、保持された被写体重要度に基づいて映像重要
度を計算するステップであってもよい。

【００４７】前記映像情報は、前記映像を撮影した時刻
に関する撮影時刻情報を含み、前記被写体情報は、前記
被写体に発生したイベントと前記イベントが発生した時
刻を表すイベント発生時刻とに関するイベント情報を含
み、前記映像重要度を計算するステップは、さらに前記
イベント情報と前記撮影時刻情報とに基づいて前記映像
重要度を計算するステップであってもよい。

【００４８】本発明のコンピュータプログラムを記録し
た記録媒体は、空間を撮影した映像の情報と前記映像を
撮影した時刻に関する撮影時刻情報とを格納するステッ
プと、格納された前記映像情報を読み出すステップと、
前記空間で発生したイベントと、前記イベントが発生し
た発生時刻、前記イベントの重要性を表すイベント重要
度および前記映像との対応関係を含むイベント情報を管
理するステップと、管理された前記イベント情報と格納
された前記撮影時刻情報とに基づいて、前記映像重要度
を計算するステップと、少なくとも計算された前記映像
重要度に基づいて、前記映像情報が表す映像の表示を制
御するステップと、前記制御にしたがって前記映像を表
示するステップとを含み、これにより上記目的が達成さ
れる。

【００４９】前記映像は画像フレームから構成され、前
記画像フレームは２以上の領域を含み、前記映像重要度
を計算するステップは、前記２以上の領域のそれぞれに
ついて前記映像重要度を計算するステップであり、前記
表示を制御するステップは、計算された前記映像重要度
に基づいて、前記２以上の領域のそれぞれを表示する態
様を決定して前記画像フレームの表示を制御するステッ
プであってもよい。

【００５０】前記映像は、第１の時刻に撮影された第１
の映像と、第２の時刻に撮影された第２の映像を含み、
前記映像重要度を計算するステップは、前記第１の映像
の映像重要度である第１映像重要度と、前記第２の映像
の映像重要度である第２映像重要度とを計算するステッ
プであり、前記表示を制御するステップは、前記映像を
表示するための規則を規定する表示規則と計算された前
記第１映像重要度および第２映像重要度とに基づいて前
記映像を表示する態様を決定し、撮影された時刻に基づ
いて前記第１の映像と前記第２の映像とが同期するよう
表示を制御するステップであってもよい。

【００５１】前記被写体情報は、少なくとも前記被写体
の名称と、前記被写体が存在する位置と、前記被写体重
要度とをそれぞれを関連づけて格納したデータ構造を有
していてもよい。

【００５２】

【発明の実施の形態】以下、添付の図面を参照して、本
発明の実施の形態を説明する。

【００５３】本発明の実施の形態では、撮影された空間
に存在する被写体と被写体の重要性を表す被写体重要度
との対応関係を含む被写体情報に基づいて、映像の重要
性が計算され、映像が表示される。「対応関係」とは、
その被写体がどの程度の被写体重要度であるかの対応付
けである。これにより、重要な被写体であれば映像重要
度が高く計算されそれに応じた表示がなされるので、ど
のカメラで撮影した映像であっても、重要な被写体が含
まれる映像は重要性が高いことがわかるように表示する
ことができる。

【００５４】本発明の実施の形態では、新たな被写体重
要度が入力され保持されると、それに応答して、保持さ
れた被写体重要度に基づいた映像重要度が計算される。
これにより、被写体重要度が変更されると、即座にその
変更が反映された映像表示が実現される。

【００５５】本発明の実施の形態では、被写体にアラー
ムやアクション等のイベントが発生した場合に、さらに
イベント情報と撮影時刻情報とに基づいて映像重要度が
計算される。被写体そのものの重要度だけでなくイベン
トの重要度に応じた映像の表示が実現されるので、同じ
被写体を撮影した映像であっても、イベントが撮影され
た映像の映像重要度がより高くなり、その映像の重要性
が高いことがわかるよう表示することができる。よっ
て、素早く的確なイベントの観察ができる。

【００５６】本発明の実施の形態では、イベント情報と
撮影時刻情報とに基づいても前記映像重要度を計算する
ことができる。これにより、イベントの発生前後の状態
を含むイベントに関する情報のみに基づいたイベントの
観察が可能になる。

【００５７】（実施の形態１）１−１．本実施の形態における映像表示装置の動作概要図１は、本実施の形態における映像表示装置１０の構成
を示すブロック図である。

【００５８】本実施の形態における映像表示装置１０
は、ライブ映像を映像の重要性に応じてグループに分割
し、複数の映像を表示するマルチ画面合成表示を行う
（図２（ａ）および（ｂ））。その際、撮影された映像
に含まれる被写体に被写体重要度を設定し、被写体情報
に基づいて映像全体の映像重要度を決定する。重要な被
写体ほど映像重要度に与える影響が大きい。したがって
その被写体を含む映像であれば、重要度の高い映像とし
て強調表示等を施すことによって他の映像と識別できる
よう自動的に表示レイアウトを決定し表示することがで
きる（図３（ａ）および（ｂ）、図１８（ａ））。

【００５９】１−２．本実施の形態における映像表示装
置の構成および動作（ａ）本実施の形態における映像表示装置の構成映像表示装置１０は、複数のカメラ１１ａ〜１１ｎと、
映像情報取得部１２と、被写体情報管理部１３と、被写
体情報格納部１４と、映像重要度計算部１５と、表示制
御部１６と、表示部１７とを含む。

【００６０】複数のカメラ１１ａ〜１１ｎは所定の空間
を撮影し、撮影した映像を映像情報取得部１２に送信す
る。複数のカメラ１１ａ〜１１ｎは、撮影方向、範囲あ
るいは設置位置等が固定されていても、可動であっても
よい。以下では、映像情報は、複数のカメラ１１ａ〜１
１ｎからそれぞれ送信される複数の映像情報であるとし
て説明するが、単一のカメラからの複数の映像情報であ
っても、単一のカメラからの単一の映像情報であっても
よい。

【００６１】映像情報取得部１２は、映像情報を取得
し、表示制御部１６へ取得した映像情報を供給するため
に設けられている。映像情報取得部１２は、複数のカメ
ラ１１ａ〜１１ｎから映像情報を受け取る。映像情報取
得部１２は、さらに表示制御部１６からどの映像情報を
選択すべきかを選択する選択指示命令を受け取る。映像
情報取得部１２は、選択指示命令に基づいて、受け取っ
た映像情報から表示すべき必要な映像情報を選択し、表
示制御部１６に送信する。映像情報取得部１２のより詳
しい構成および動作は後述される。

【００６２】被写体情報管理部１３は、被写体情報を管
理する。ここで「被写体情報」とは、撮影された空間に
存在する被写体と、被写体の重要性を表す被写体重要度
との対応関係を含む情報である（被写体情報については
図５を参照しながら後述する）。「被写体情報を管理す
る」とは、被写体情報管理部１３がユーザ（オペレー
タ）からの被写体情報の変更を受け付け、新たな被写体
情報を設定し、あるいは設定された被写体情報を保持す
ることを表す。被写体情報管理部１３は、設定された被
写体情報を被写体情報格納部１４に送り、被写体情報格
納部１４でその被写体情報を保持する。被写体情報管理
部１３は、ユーザ（オペレータ）からの被写体情報の変
更を受け付けるために、被写体情報の編集機能を有す
る。編集機能は、テキストエディタ等のソフトウェア的
あるいはハードウェア的に被写体情報の設定を変更する
手段として提供される。テキストエディタ等を用いた場
合、オペレータは、設定の変更を対話的に行うことがで
きる。

【００６３】被写体情報格納部１４は、被写体情報管理
部１３から、設定された被写体情報を受け取り、格納す
る。被写体情報格納部１４は、映像重要度計算部１５に
被写体情報を提供する。被写体情報格納部１４は、ＲＡ
Ｍ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）ある
いはＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）に代
表される半導体メモリ、ハードディスク等の磁気記憶媒
体を用いた記憶装置、光ディスク等、公知のデータ記憶
手段であり得る。

【００６４】映像重要度計算部１５は、映像の映像重要
度を計算するために設けられている。「映像重要度」と
は、被写体を含むその空間を撮影した映像の重要性を表
すその程度である。映像重要度計算部１５は、被写体情
報格納部１４から被写体情報を受け取り、受け取った被
写体情報に基づいて、映像重要度を計算する。映像重要
度計算部１５は、計算した映像重要度を表示制御部１６
へ送信する。映像重要度計算部１５はさらに、映像重要
度が高い映像を撮影するカメラを、順に所定のグループ
に分類し、そのそれぞれのグループにグループＩＤを付
す。

【００６５】表示制御部１６は、表示を行うために必要
なデータ処理、例えば映像の表示位置の決定や合成処理
等を行う。表示制御部１６は、映像重要度計算部１５か
ら計算された映像重要度を受け取る。続いて表示制御部
１６は、受け取った映像重要度に基づいて、映像情報取
得部１２にどの映像情報を選択すべきかを選択する選択
指示命令を送り、その指示命令にしたがった映像情報を
受け取る。続いて表示制御部１６は、映像の表示を制御
する。「映像の表示を制御する」とは、受け取った映像
重要度に基づいて、映像情報が表す映像をどのように表
示するかを決定することを表す。映像の表示の決定に
は、合成されて表示される映像の大きさや表示位置など
を計算し、適当な信号処理を行うことにより合成画面の
データを生成することが含まれる。表示制御部１６は、
生成した合成画面のデータを表示部１７に送信する。

【００６６】表示部１７は、合成画面を表示するための
装置である。表示部１７は、モニタ等であり得る。

【００６７】続いて、映像情報取得部１２と表示制御部
１６の具体的な構成を、図４０を参照して説明する。

【００６８】図４０は、映像情報取得部１２（図１）と
表示制御部１６（図１）の具体的な構成を示すブロック
図である。

【００６９】映像情報取得部１２（図１）は、少なくと
もビデオマトリクススイッチャ４０１を含む。ビデオマ
トリクススイッチャ４０１は、表示制御部１６からの指
定に基づいて、Ｍ個の入力映像信号から指定されたＮ個
の映像信号を表示制御部１６に出力する（Ｍ≧Ｎ）。

【００７０】表示制御部１６は、少なくともグラフィッ
クスボード４０２とマルチ画面オーバレイボード４０３
とを含む。グラフィックスボード４０２は、マルチ画面
オーバレイボード４０３において生成された合成画面デ
ータを受け取り、表示部１７（図１）において表示する
映像データを生成する。マルチ画面オーバレイボード４
０３は、映像情報取得部１２からＮ個の映像信号と、映
像重要度計算部（図１）から映像重要度とを受け取る。
受け取ったＮ個の映像信号と映像重要度とに基づいて、
マルチ画面オーバレイボード４０３は、映像信号のそれ
ぞれを映像ウィンドウとして重畳表示するために映像の
大きさや表示位置などを計算する。計算して生成された
合成画面データはグラフィックスボード４０２に送信さ
れる。

【００７１】このように構成されたビデオマトリクスス
イッチャ４０１、グラフィックスボード４０２およびマ
ルチ画面オーバレイボード４０３はいずれも製品化され
ており、これ以上の詳細な説明は省略する。

【００７２】（ｂ）本実施の形態における映像表示装置
の動作図４は、映像表示装置１０（図１）の動作手順を表すフ
ローチャートである。

【００７３】まず、映像重要度計算部１５（図１）は、
あらかじめ被写体情報格納部１４（図１）に格納されて
いる被写体情報に基づいて、映像情報が表す映像の映像
重要度を計算する（ステップ４０）。これにより、被写
体重要度の高い被写体を撮影しているカメラの映像はど
の映像でも、その被写体重要度に応じた映像重要度を有
することになり、定量的な判断の下、適切にその映像を
表示することができる。被写体情報を利用することによ
る大きな利点の一つは、１つの映像に複数の被写体が含
まれる場合である。別個の重要性を有する被写体が１つ
の映像に含まれていると、被写体の被写体重要度の関係
も考慮した上でその映像を表示する必要がある。被写体
ごとに被写体重要度を設定すると、そのような場合にも
自動的に適切な表示を実現することができる。例えば、
複数の被写体それぞれの被写体重要度の総和をその映像
の映像重要度とすることができる。以下、被写体情報と
映像重要度についてそれぞれ説明する。

【００７４】図５は、被写体情報の例を示す。被写体情
報は、前述のようにカメラで撮影された空間に存在する
被写体と、被写体の重要性を表す被写体重要度との対応
関係を含む情報である。より詳しくは、被写体情報は、
被写体を識別するＩＤ、被写体の名称、種類、存在する
位置座標、被写体を撮影するカメラのカメラＩＤ、被写
体の重要度等が対応付けて記述される。必要に応じて備
考欄を設け、より特定的な情報を含めることもできる。
被写体情報は、例えばテキストファイルとして被写体情
報格納部１４（図１）に格納され、被写体情報管理部１
３（図１）によって管理される。被写体情報に含まれる
いずれの情報も、その被写体の特性、性質等を特定でき
る情報であればその形式は問わない。例えば、被写体が
存在する位置座標は、緯度および経度によって表されて
いてもよいし、またはその住所等によってあらわされて
いてもよい。

【００７５】図６は、計算された映像重要度の例を示
す。映像重要度は、被写体情報に基づいて計算される。
映像重要度の計算は、例えば複数のカメラ１１ａ〜１１
ｎ（図１）のそれぞれが撮影する空間に被写体情報に記
述された被写体が複数存在する場合、上述のように、複
数の被写体それぞれの被写体重要度の総和を、そのカメ
ラが撮影した映像の映像重要度とすることができる。あ
るいは、撮影する空間内の被写体の中で最大の被写体重
要度を持つ被写体の被写体重要度を、そのカメラが撮影
した映像の映像重要度とすることもできる。どのような
計算方法を用いるかは、撮影の目的、被写体の性質等に
応じて適宜変更され得る。図６に例示される映像重要度
は、カメラＩＤにより特定されるカメラの映像の重要性
と被写体の重要性とが対応していることを示す。なお、
本発明で用いられる映像重要度は、従来の映像表示装置
４２０（図４２）で用いられていた表示優先順位情報
（図４３）に対応する。ただし、本発明では、映像重要
度は被写体情報に記述された被写体重要度に基づいて計
算されるのに対し、従来の映像表示装置４２０（図４
２）では、カメラの撮影した映像の表示優先順位が、カ
メラに付属したセンサの計測値により決定される点が異
なる。

【００７６】再び、図４を参照して、計算された映像重
要度は、映像重要度計算部１５（図１）の内部あるいは
外部の、図１には図示されないデータ格納部に格納され
る（ステップ４１）。この図示されないデータ格納部
は、公知の半導体メモリやハードディスク等であり得
る。

【００７７】映像情報取得部１２（図１）は、カメラ１
１ａ〜１１ｎのうち、表示すべき映像を撮影しているカ
メラグループのカメラ（たとえば４台）の映像情報を選
択し取得する（ステップ４２）。これは、同一のグルー
プＩＤを有するカメラの映像情報を選択することである
といえる。映像情報の選択は、上述のように、表示制御
部１６（図１）が映像重要度を受け取り、その映像重要
度に基づいて映像情報取得部１２にどの映像情報を選択
すべきかを選択する選択指示命令を送ることにより実現
される。

【００７８】表示制御部１６（図１）は、表示規則およ
び映像重要度に基づいて、受け取った映像情報の表示態
様を計算し、その結果を表示部１７（図１）に送信する
ことによって表示する（ステップ４３）。ここで、表示
規則とは、例えば優先順位に応じて表示部のどの位置
に、どのような大きさで、どれだけの時間表示すべきか
等を記述した映像を表示するに際して参照される規則で
ある。

【００７９】続いて被写体情報管理部１３（図１）によ
って被写体情報が変更されたか否かについての判定が行
われる（ステップ４４）。この判定は、図１には図示さ
れない中央演算部等の処理回路が行う。あるいはこの判
定は、映像重要度計算部１５（図１）が定時的にあるい
は被写体情報管理部１３（図１）からの入力があった際
に行ってもよい。

【００８０】被写体情報管理部１３（図１）によって被
写体情報が変更されたと判定された場合には、表示制御
部１６（図１）は映像の表示を中止し（ステップ４
５）、変更された被写体情報を被写体情報格納部１４
（図１）に格納する（ステップ４６）。その後、ステッ
プ４０からの動作を繰り返し、変更された新たな被写体
情報から映像重要度が計算され、変更を反映させた表示
が再び行われる。ここで、被写体情報が変更される場合
とは、例えばある被写体が消滅した場合や、新たに被写
体が登場した場合、あるいは既に被写体情報に含まれて
いる被写体の被写体重要度が変化した場合等である。

【００８１】被写体情報管理部１３（図１）によって被
写体情報が変更されたと判定されない場合には、続い
て、映像の表示を中止するよう指示されたか否かについ
ての判定が行われる（ステップ４７）。この映像の表示
を中止する指示は、オペレータ等によって、外部から与
えられる。

【００８２】映像の表示を中止するよう指示されない場
合には、ステップ４２からの動作を繰り返し、映像を表
示するために映像情報を取得する。この判定が複数回連
続する場合、取得される映像情報は、その直前に選択さ
れた映像の映像重要度の次に映像重要度が高い映像の映
像情報とされる。したがって、その次に映像重要度が高
い映像を提供しているカメラグループからの映像情報が
取得されることになる。なお、映像重要度が最低の映像
まで表示が終了すると、再び映像重要度が最高の映像が
表示される。

【００８３】映像の表示を中止するよう指示された場合
には、処理が終了し、映像の表示が中止される。

【００８４】以上のように、映像表示装置１０（図１）
の動作が行われる。

【００８５】なお映像表示装置１０（図１）の構成に
は、さらに表示レイアウト部が含まれてもよい。表示レ
イアウト部（図示せず）は、例えば表示制御部１６（図
１）の内部に設けられ、映像重要度計算部１５（図１）
で計算された映像重要度に基づいて映像の表示レイアウ
トを決定するための表示レイアウト情報を作成する。

【００８６】図７は、表示レイアウトを決定するステッ
プを含む、映像表示装置１０（図１）の動作手順を表す
フローチャートである。このフローチャートにおいて、
ステップ７０、７１は、図４のステップ４０、４１にそ
れぞれ対応し、ステップ７３は図４のステップ４２に対
応し、ステップ７５〜７８は、図４のステップ４４〜４
７にそれぞれ対応するのでそれらの説明は省略する。そ
こで、ステップ７２およびステップ７４で行われる処理
について説明する。

【００８７】表示レイアウト部（図示せず）は、映像重
要度計算部（図１）で計算された映像重要度に基づい
て、表示レイアウトを決定し、表示レイアウト情報を作
成する（ステップ７２）。

【００８８】図８は、表示レイアウト情報の例を示す。
表示レイアウト情報は、１グループが４台のカメラから
構成される複数のグループの映像を表示するために用い
られる情報である。表示レイアウト情報は、各カメラに
より撮影された映像が表示される表示時間、その映像を
撮影したカメラのカメラＩＤ、画面上の映像の表示位
置、表示サイズ（表示ウインドウの縦横のドット数）等
の情報を含む。

【００８９】映像制御部１６（図１）は、表示規則およ
び表示レイアウト情報に基づいて映像情報が表す映像を
表示する（ステップ７４）。図４のステップ４３では、
映像表示装置１０（図１）は表示規則および映像重要度
に基づいて映像を表示していたが、表示レイアウトをあ
らかじめ決定しておくことにより、より高速な映像表示
処理が実現できる。

【００９０】（ｃ）本実施の形態における映像表示装置
の映像の表示以下では、映像表示装置１０（図１）の処理動作により
表示部１７（図１）に表示される映像の表示態様につい
て説明する。

【００９１】図２（ａ）および（ｂ）は、映像表示装置
１０（図１）の処理動作により表示される映像の態様の
一例を示す。この表示は、例えば観光案内等で、著名な
建築物の映像を所定の順序で視聴したい場合に有用な表
示である。

【００９２】まず、重要度第１グループの公共施設関連
の建築物を撮影した映像が表示される（図２（ａ））。
このように表示されるのは、被写体たる公共施設関連の
建築物それぞれには高い被写体重要度が設定されおり、
その公共施設を撮影した映像の映像重要度が高くなった
（ここでは重要度第１番目）からである。その後、重要
度第ｎグループの住宅関連の建築物を撮影した映像が表
示される（図２（ｂ））。公共施設関連の建築物に設定
された被写体重要度と比較すると、住宅関連の建築物に
設定された被写体重要度は小さい。そのため、住宅関連
の建築物を撮影した映像の映像重要度も比較的小さくな
り（ここでは重要度第ｎ番目）、公共施設関連の建築物
よりも遅く住宅関連の建築物が表示される。

【００９３】本発明では、同じ公共施設関連の建築物を
撮影した映像の映像重要度にも差があることに鑑み、映
像を表示する位置にも差を設けている。

【００９４】図３は、同じ重要度のグループにおける映
像の表示位置を示す例である。

【００９５】同じ重要度のグループにおいて、映像重要
度が最も高い映像は画面の左上に、映像重要度が最も低
い映像は画面の右下に表示される。図３（ａ）は図２に
示す画面を４分割した場合の映像の表示例である。図３
（ｂ）は、画面を９分割した場合の映像の表示例であ
る。画面のどの位置にどの映像重要度の映像を表示する
かは適宜決定し、表示規則として規定することができ
る。さらには、所定数の映像重要度が高い映像をより大
きく、残りの映像はより小さく表示するという表示規則
を規定することも可能である（図１８（ａ）参照）。オ
ペレータの指示により対話的に各グループの表示を選択
し切り替えることも可能である。

【００９６】表示規則には、表示レイアウト情報（図
８）で説明した表示時間等も併せて規定することができ
る。したがって、重要度の高いグループほど表示される
時間が長く設定すること等が可能である。例えば、最も
重要度の高いグループは６０秒、２番目は５０秒、３番
目は４０秒と設定することができる。

【００９７】なお、これら表示規則で規定されるパラメ
ータは、映像表示装置１０（図１）を動作させるために
中央演算装置（図示せず）で実行されるソフトウェアプ
ログラム内に書きこまれている（以下、「ハードコーデ
ィングされている」という）、あるいは変更可能なパラ
メータ記述ファイル等を別に設け、そのパラメータを随
時参照することにより、変更を反映した表示を実現する
ことが可能である。さらには表示規則全体を、自然言語
に近い表現で、エンドユーザが簡易に記述できる言語で
あるスクリプト等で記述し、スクリプトファイルとして
変更できるようにすることで、多くのバリエーションを
もった表示の仕方から選択することができる。

【００９８】以上説明したように、実施の形態１にかか
る映像表示装置１０（図１）によれば、被写体それぞれ
の被写体重要度を含む被写体情報に基づいて、映像の映
像重要度が計算され、その映像重要度に基づいて映像が
表示される。したがって、映像に含まれる被写体の重要
性に応じた映像の表示が可能になる。オペレータは、被
写体の重要度を決定するだけで被写体の重要性に応じた
映像の表示をさせることができるので、表示レイアウト
を決定する煩雑な手間が不要になり、かつ客観性のある
映像表示を得ることができる。さらに、表示規則を規定
することにより、オペレータは重要なグループほど長時
間観察でき、画面内でも決められた重要度の配置でみる
ことができるといった、柔軟な映像表示が実現される。

【００９９】なお、映像情報が表す映像は、動画であっ
ても静止画であってもよく、さらにはそれらの混在であ
ってもよい。

【０１００】（実施の形態２）２−１．本実施の形態における映像表示装置の動作概要図９は、本実施の形態における映像表示装置９０の構成
を示すブロック図である。

【０１０１】本実施の形態における映像表示装置９０
は、映像情報は、複数のカメラから入力される映像情報
を直接用いるのではなく、記憶装置に蓄積された映像情
報を用いて映像の表示を行う。

【０１０２】本実施の形態の映像表示装置９０ではさら
に、映像を撮影した位置を視覚的に理解するために地図
を用い、地図上の対応する位置の近傍にその撮影された
映像を表示する（図１０（ａ）、（ｂ）および
（ｃ））。実施の形態１で説明したように、映像の表示
はさらに被写体情報に基づいて計算された映像重要度を
用いて重要な映像から順に表示するよう行われる。した
がって、実施の形態１において説明した映像表示装置１
０（図１）で得られた利点も全て得ることができる。

【０１０３】２−２．本実施の形態における映像表示装
置の構成および動作（ａ）本実施の形態における映像表示装置の構成映像表示装置９０は、複数のカメラ１１ａ〜１１ｎと、
映像情報取得部１２と、被写体情報管理部１３と、被写
体情報格納部１４と、映像重要度計算部１５と、表示制
御部１６と、表示部１７とを含む。映像表示装置９０は
さらに、映像情報格納部９３と、地図情報格納部９４
と、地図情報読み出し部９５と、操作部９６とを含む。

【０１０４】以下では、映像表示装置９０の構成要素の
うち、映像表示装置１０（図１）の構成要素と同一の符
号が付された構成要素については、映像表示装置１０
（図１）の構成要素の構成および機能と同一であるので
その説明は省略する。したがって、以下では、映像情報
格納部９３と、地図情報格納部９４と、地図情報読み出
し部９５と、操作部９６とについて説明する。映像表示
装置１０（図１）と異なる動作または追加の動作が行わ
れる場合には、その都度説明する。

【０１０５】映像表示装置９０の映像情報取得部１２
は、映像情報入力部９１と、映像情報読み出し部９２と
を含む。映像情報入力部９１には、カメラ１１ａ〜１１
ｎからの映像情報が入力される。映像情報入力部９１
は、入力された映像情報を映像情報格納部９３に格納す
る。映像情報読み出し部９２は、映像情報格納部９３に
格納された映像情報を読み出し、表示制御部１６に送信
する。どの映像情報を選択して読み出すかは、実施の形
態１において説明したように表示制御部１６からの選択
指示命令に基づく。

【０１０６】映像情報格納部９３は、映像情報をあらか
じめ格納しておくために設けられている。映像情報格納
部９３は、映像情報入力部９１から映像情報を受け取
り、その映像情報を格納する。映像情報格納部９３に格
納される映像情報は、複数の位置で複数のカメラによっ
て撮影された複数の映像情報であり得る。映像情報格納
部９３は、被写体情報格納部１４と同様、ＲＡＭあるい
はＲＯＭに代表される半導体メモリ、ハードディスク等
の磁気記憶媒体を用いた記憶装置、光ディスク等、公知
のデータ記憶手段であり得る。映像情報格納部９３は、
映像情報読み出し部９２からの読み出し信号に基づいて
所定の映像情報を読み出し、映像情報読み出し部９２に
送信する。

【０１０７】以上の説明によって明らかなように、本実
施の形態による映像表示装置９０では、実施の形態１の
ようにカメラ１１ａ〜１１ｎからの映像情報が直接表示
に利用されるのではなく、一旦映像情報格納部９３に格
納され、必要な情報が適宜表示に利用される。

【０１０８】地図情報格納部９４は、表示の背景的な役
割を果たす地図情報をあらかじめ格納しておくために設
けられている。地図情報格納部９４は、映像が撮影され
た位置を視覚的に表示するための地図に関する地図情報
を格納する。地図情報格納部９４は、図示されない適当
な入力手段からあらかじめ地図情報を受け取り、受け取
った地図情報を格納する。地図情報格納部９４は、地図
情報読み出し部に地図情報を提供する。

【０１０９】地図情報読み出し部９５は、地図情報を読
み出すために設けられている。地図情報読み出し部９５
は、表示制御部１６から地図読み出し命令を受け取り、
それに応じて地図情報格納部９４から地図情報を読み出
す。地図情報読み出し部９５は、読み出した地図情報を
表示制御部１６に送信する。

【０１１０】操作部９６は、後に説明するように、オペ
レータからの指示を受けて重畳表示された映像を選択的
に表示するために、または他の映像を表示するよう指示
するために用いられる。操作部９６は、例えばキーボー
ド、マウス、タッチパネル等公知の入力手段であり得
る。

【０１１１】なお、被写体情報格納部１４、映像情報格
納部９３および地図情報格納部９４は別々の記憶装置で
あっても、同一の記憶装置（例えばハードディスク）内
の別々の位置の領域であってもよい。

【０１１２】（ｂ）本実施の形態における映像表示装置
の動作および映像表示例図１１は、映像表示装置９０（図９）の動作手順を表す
フローチャートである。

【０１１３】まず映像重要度計算部１５（図９）は、被
写体情報と映像管理情報とに基づいて映像重要度を計算
する（ステップ１１０）。より詳しくは、映像重要度
は、映像に含まれる被写体の位置座標およびその映像を
撮影したカメラの位置座標とに基づいて計算される。
「映像に含まれる被写体の位置座標」は、被写体情報
（図５）に含まれている。「その映像を撮影したカメラ
の位置座標」は、映像管理情報に含まれている。映像管
理情報は、映像重要度計算部１５（図１）の内部あるい
は外部の、図９には図示されないデータ格納部に格納さ
れる。

【０１１４】図１２は、映像管理情報の例を示す。映像
管理情報は、複数の映像情報それぞれの特性を記載した
管理情報である。映像管理情報は、映像ＩＤ、映像の種
類（動画か静止画か、映像の解像度、符号化方式等）、
カメラそれぞれに割り当てられたカメラＩＤ、映像のフ
ァイル名、映像を撮影した時刻、映像を撮影した撮影位
置、映像重要度等を含む。映像重要度は、以下で述べる
ステップ１１１において格納される。

【０１１５】映像重要度を計算するための手順を説明す
る。映像重要度計算部１５は、被写体情報（図５）に記
述された被写体の位置と映像管理情報（図１２）に記述
された撮影位置とを比較する。比較の結果、その差が一
定範囲内にあれば（すなわち被写体とカメラとが一定距
離内にあれば）、映像重要度計算部１５は、カメラがそ
の被写体あるいはその近傍を撮影していると推定するこ
とができる。複数の被写体が存在する場合には、映像重
要度計算部１５は、そのそれぞれについて上述した比
較、推定を行うことにより、カメラがどの被写体を撮影
しているかを推定できる。映像重要度計算部１５は、カ
メラが撮影していると推定される被写体の被写体重要度
の総和を求めることにより、または被写体の被写体重要
度の最大値を採用することにより映像重要度を得ること
ができる。

【０１１６】映像重要度計算部１５（図９）によって計
算された映像重要度は、映像管理情報の一部として映像
管理情報に格納される（ステップ１１１）。

【０１１７】続いて表示制御部１６（図９）は、地図情
報読み出し部９５（図９）を介して地図情報格納部９４
（図９）に格納された地図情報を読み込み、読み込んだ
地図情報に基づいてその地図情報が表す地図を表示部１
７（図９）に表示する（ステップ１１２）。このとき、
地図表示情報が、表示制御部１６（図９）の内部あるい
は外部の、図９には図示されないデータ格納部に格納さ
れる。地図表示情報とは、地図の表示範囲や縮尺等、表
示されている地図の特性を表す情報である。

【０１１８】表示制御部１６は、映像重要度と地図表示
情報とに基づいて、映像情報を読み出す（ステップ１１
３）。より詳しくは、表示制御部１６は、地図表示情報
に記述されている地図の表示範囲に存在する撮影位置
（単数または複数）を特定し、その撮影位置のカメラか
らの映像を、例えば映像重要度の高い順にＮ個選択す
る。表示制御部１６は、選択した映像情報を、映像情報
読み出し部９２（図９）を介して映像情報格納部９３
（図９）から読み出す。なお、映像は映像重要度の高い
順にＮ個選択されるとしたが、これは表示規則によって
変更することができる。

【０１１９】表示制御部１６は、表示規則および映像重
要度に基づいて、読み出した映像情報を実際の撮影位置
に対応する地図上の位置の近傍に表示する（ステップ１
１４）。

【０１２０】図１０は、地図とその地図に関連づけられ
て表示された映像を示す。

【０１２１】図１０（ａ）は、１カメラにつき１つの映
像を表示する例を示す。各映像と、各映像が撮影された
位置とが視覚的に理解できるよう表示されているので、
状況が容易に把握できる。ここで、撮影位置が同一であ
る場合、または撮影位置が地図上で近い場合には、それ
ら複数の映像を一つのグループとして全て読み出し、例
えば撮影時刻の古い映像を代表映像として表示すること
ができる。このとき、例えば代表映像ウインドウの下に
重畳的に別のウインドウを表示することにより、オペレ
ータは他の映像が存在することを容易に把握することが
できる。

【０１２２】図１０（ｂ）は、所定のカメラの映像を複
数同時に表示する例を示す。図１０（ｂ）に示される例
は、原則として図１０（ａ）を参照して説明した例と同
じである。ただし、図１０（ａ）の例では複数の映像が
表示される場合には代表映像１つを表示するとしたが、
本例では、その複数の映像を所定数毎に同時に表示する
点が異なる。表示すべき映像の指定は、所定のカメラで
撮影された映像である。オペレータは、カメラと同時表
示すべき映像とを指定することができる。なお図１０
（ａ）の例で説明した代表映像のみの表示は、適当な操
作により本例の表示へと移行することができる。例え
ば、同じグループに属する他の映像を見たい場合は、地
図上で映像を指定してメニューを開き、メニューにある
“他の映像表示”を選択することにより実現される。

【０１２３】再び図１１を参照して、地図とその地図に
関連づけられて映像が表示されると、続いて地図の表示
を変更するようオペレータからの指示があったかが判定
される（ステップ１１５）。これは、オペレータが、操
作部９６（図９）を介して地図のスクロールや縮尺変更
等の地図操作を行った場合である。この地図操作は、地
図の縮尺が大きすぎるので地域をより限定して映像を見
たい場合等に行われる。

【０１２４】地図の表示を変更するよう指示があった場
合、表示制御部１６（図９）は、映像の表示内容および
地図表示情報を変更する（ステップ１１６）。すなわ
ち、新たな地図に対応して表示すべき映像およびその地
図の縮尺等の地図表示情報を変更する。その後、処理は
ステップ１１２まで戻る。

【０１２５】図１０（ｃ）は、図１０（ａ）または
（ｂ）に示す日本全国の表示設定を、九州地方に変更し
て表示した例を示す。表示設定が変更されても、図１０
（ａ）または（ｂ）で説明したと同様の処理により映像
が表示される。したがって、新たに表示された地図範囲
に存在する重要度の高い映像が更新されて表示される。

【０１２６】以上のように本実施の形態によれば、重要
な被写体あるいはその被写体の近傍を撮影した映像を、
地図上で撮影位置を把握しながら見ることができるとい
う視覚的効果を得ることができる。さらに、被写体の追
加や削除、被写体の重要度の変化に対しても被写体情報
を修正するだけで対応することができ、煩雑な表示レイ
アウト修正作業を省略することができる。さらに、撮影
した映像を一旦蓄積して使用するため、被写体を同じ重
要度で、または重要度を変更して、繰り返し複数の映像
を表示して観察することができる。

【０１２７】（ｃ）本実施の形態の変形例ステップ１１０における映像重要度の計算では、映像の
撮影位置と被写体の位置との間の距離だけで、カメラが
その被写体あるいはその近傍を撮影していると推定して
いる。しかしこの場合、距離は近くても被写体（撮影対
象）がカメラの撮影範囲に入っておらず、撮影されてい
ないという問題が起こり得る。この問題は、カメラの撮
影可能範囲に関する撮影範囲情報を映像管理情報（図１
２）に記述することにより解決される。撮影範囲情報に
は例えば、カメラの位置、方向およびズーム画角が記述
される。ここで「ズーム画角」とは、カメラが撮影する
ことができる範囲を示す角度である。カメラの位置、方
向およびズーム画角により被写体がカメラの撮影範囲に
存在するか否かを判断する手順を説明する。

【０１２８】図１３は、カメラの撮影位置、方向および
ズーム画角と被写体の位置関係を示す。被写体がカメラ
の撮影範囲に存在するか否かは、幾何計算から求めるこ
とができる。すなわち、カメラ位置と被写体位置を結ぶ
直線とカメラ方向の直線が作る角度（Φ１およびΦ２）
を求め、その絶対値がズーム画角θの半分（θ／２）以
下であれば被写体は撮影範囲に存在すると判定すること
ができる。例えば、撮影範囲内にある被写体１は｜Φ１
｜＜θ／２、撮影範囲外にある被写体２は｜Φ２｜＞θ
／２である。したがって、被写体１は撮影範囲に存在す
るが、被写体２は撮影範囲に存在しない、と判定でき
る。

【０１２９】なおズーム画角θは、図１４を参照して以
下のように求めることができる。

【０１３０】図１４は、被写体がカメラレンズを通して
撮像される図を示す。図示されるように、焦点距離を
Ｆ、撮影素子の大きさをＳとすると、

【０１３１】

【数１】

【０１３２】となり、ズーム画角θの値を求めることが
できる。

【０１３３】さらに被写体情報（図５）に、被写体の大
きさを表す外接多角形情報を記述することによって、被
写体がそのカメラにどれくらいの大きさで撮影されるか
を計算することができる。外接多角形情報とは、被写体
の形状が複雑であったり曲線部分を含むような場合、そ
の被写体の存在領域を近似的に表すために用いられる、
その被写体に外接する２次元または３次元の多角形の情
報をいう。

【０１３４】図１５は、撮影範囲と被写体の関係と撮影
状態を示す。

【０１３５】図１５（ａ）は、撮影範囲の中央に被写体
（文字「Ａ」）が存在する場合を示す。文字「Ａ」の外
接多角形情報は、図示されるように文字「Ａ」に外接す
る長方形である。このとき図示されるように、被写体は
映像の中央部に存在する。図１５（ｂ）は、撮影範囲の
一部（撮影範囲の下方）に被写体（文字「Ａ」）が存在
する場合を示す。このとき、撮影された映像の下方に被
写体が存在する。なお、実際には被写体の全体は表示さ
れないが、撮影面と被写体との関係を明確にするために
被写体の全体を図示している。

【０１３６】図１５（ａ）および（ｂ）に示すような場
合に、被写体がどの程度写っているかを定量的に計算す
る手順を以下に説明する。例えば図１４に示されるよう
に、まず撮影面を（Ｘ−Ｙ）平面とする。つづいて被写
体の近傍に存在しカメラの撮影方向に直交する（ｘ−
ｙ）平面を考え、この（ｘ−ｙ）平面に被写体の外接多
角形を射影する。ここで、（ｘ−ｙ）平面と撮影方向が
交わる点を（ｘ−ｙ）平面の原点とする。この（ｘ−
ｙ）平面において、射影した外接多角形の１つの頂点座
標を（ｘ０，ｙ０）とすると、その頂点に対応する撮影
面（Ｘ−Ｙ平面）上の点の座標（Ｘ０，Ｙ０）は、

【０１３７】

【数２】

【０１３８】で与えられる。ここで、Ｌは、レンズから
被写体が射影された平面（すなわちｘ−ｙ平面）までの
距離を表す。（ｘ−ｙ）平面は被写体の近傍に存在する
ので、被写体の位置情報を、レンズから（ｘ−ｙ）平面
までの距離として利用してもよい。このような手順によ
れば、外接多角形の頂点に対応する撮影面上での座標を
得ることができる。座標が得られると、その座標によっ
て囲まれる撮影面上の多角形の面積と、撮影面の面積と
の比を算出し、撮影面に占める被写体の割合を近似的に
求めることができる。

【０１３９】撮影範囲情報を利用することにより、図１
５（ｂ）に例示したように、カメラの撮影範囲と被写体
の存在位置との関係で被写体の一部しか撮影されていな
い場合には、被写体がカメラに写る割合（面積比）と被
写体の被写体重要度とを乗算した値をその映像の映像重
要度とすれば、被写体重要度の高い被写体がよく写って
いる映像を高い映像重要度を持つ映像として優先的に表
示することができる。

【０１４０】このように映像重要度を計算すると、撮影
範囲が固定されたカメラだけでなく、移動カメラや首振
りカメラで撮影した動画であっても、各画像フレーム毎
に撮影範囲情報を記述しておくことにより、重要な被写
体が写っている動画部分のみを抜き出して優先的に表示
することができる。

【０１４１】本実施の形態で説明した全ての場合におい
て上述した映像の表示態様は一例であり、表示規則を適
当に変更することによってより柔軟な映像表示を実現す
ることができる。上述した例（２−２．（ｂ））で表示
規則として規定していたのは、表示されるのが重要度の
高いＮ個の映像であること、地図上での映像の表示位置
は撮影位置の近傍とすること、同じ位置またはかなり近
い位置で撮影した映像のグループは撮影時刻の古いもの
から表示すること、および同一のグループに属する映像
のうち、代表映像以外の映像をオペレータの操作により
選択的に表示することである。しかし、例えば、閾値以
上の映像重要度を有する映像すべてを表示したり、閾値
以上でＮ個を超えない映像を表示する等の表示規則が適
用でき、オペレータの目的に応じて使い分けることがで
きる。

【０１４２】さらに、映像重要度の低く表示されない映
像を、例えばカメラの形をしたアイコンとして表示され
た地図上の撮影位置近傍に表示し、オペレータが地図上
でそのカメラアイコンを選択して映像表示を指示するよ
うにすれば、どのような映像重要度であっても任意の映
像を簡単な操作により見ることができる。

【０１４３】（実施の形態３）３−１．本実施の形態における映像表示装置の動作概要図１６は、本実施の形態における映像表示装置１６０の
構成を示すブロック図である。

【０１４４】本実施の形態における映像表示装置１６０
は、映像の重要性に応じて複数の映像を表示する。映像
の重要性は、映像に含まれる被写体に設定された被写体
重要度に基づいて決定される。映像表示装置１６０は、
映像の表示中であっても被写体重要度を変更することが
でき、その変更を映像の表示にリアルタイムに反映させ
る。例えば、プラント監視において燃料バルブのセンサ
からアラームが発生すると、オペレータや運転制御を行
う外部モジュールからの指示により、燃料バルブ付近に
存在する被写体や燃料系の被写体の被写体重要度を上
げ、その被写体を含む映像重要度を上げる。これによ
り、その近辺や系統的に繋がりのある被写体が優先的に
表示される。

【０１４５】３−２．本実施の形態における映像表示装
置の構成および動作（ａ）本実施の形態における映像表示装置の構成映像表示装置１６０は、複数のカメラ１１ａ〜１１ｎ
と、映像情報取得部１２と、被写体情報管理部１３と、
被写体情報格納部１４と、映像重要度計算部１５と、表
示制御部１６と、表示部１７とを含む。映像表示装置１
６０はさらに、入力部１６１および／または外部モジュ
ール１６２とを含む。

【０１４６】以下では、映像表示装置１６０の構成要素
のうち、映像表示装置１０（図１）の構成要素と同一の
符号が付された構成要素については、映像表示装置１０
（図１）の構成要素の構成および機能と同一であるので
その説明は省略する。したがって、以下では、入力部１
６１と外部モジュール１６２とについて説明する。映像
表示装置１０（図１）と異なる動作または追加の動作が
行われる場合には、その都度説明する。

【０１４７】入力部１６１は、オペレータが被写体情報
を修正、変更して設定するための入力装置である。入力
部１６１は、例えばキーボード等であり得る。入力部１
６１から変更、設定される被写体情報は被写体情報管理
部１３に送信される。

【０１４８】外部モジュール１６２は、プラント状態を
計算するシミュレータ等であり、運転制御を行う。外部
モジュール１６２から変更、設定される被写体情報は被
写体情報管理部１３に送信される。

【０１４９】被写体情報管理部１３は、入力部１６１お
よび／または外部モジュール１６２から被写体情報を変
更するよう指示を受け取り、さらに新たな被写体情報を
受け取る。被写体情報管理部１３は、受け取った新たな
被写体情報を対応する前の被写体情報にかえて被写体情
報格納部１４に格納する。なお被写体情報の変更指示
は、新たな被写体情報と別個に受け取られるのではな
く、被写体情報管理部１３が新たな被写体情報を受け取
ったときに与えられたとみなしてもよい。

【０１５０】（ｂ）本実施の形態における映像表示装置
の動作および映像表示例図１７は、映像表示装置１６０（図１６）の動作手順を
表すフローチャートである。このフローチャートに示さ
れたステップのうち、被写体重要度に基づいて映像重要
度を計算し、映像情報が表す映像を表示するステップ１
７０〜１７３は、図４を参照して説明したフローチャー
トのステップ４０〜４３とそれぞれ同じであるので、そ
の説明は省略する。

【０１５１】ステップ１７４において、被写体情報が被
写体情報管理部１３（図１６）によって変更されたか否
かが判定される。

【０１５２】被写体情報が被写体情報管理部１３（図１
６）によって変更されたと判定されると（すなわち入力
部１６１（図１６）または外部モジュール１６２（図１
６）から被写体重要度を変更するよう指示を受け取った
被写体情報管理部１３（図１６）が、所定の被写体情報
を受け取った新たな被写体情報に変更すると）、被写体
情報管理部１３（図１６）は、新たな被写体情報を被写
体情報格納部１４（図１６）に格納する（ステップ１７
５）。映像重要度計算部１５（図１６）は、変更された
新たな被写体情報に基づいてリアルタイムかつ自動的に
映像重要度を変更し、表示する映像を変更する。これは
ステップ１７５に続いて、ステップ１７０〜１７３が次
々実行されることにより実現される。

【０１５３】被写体情報が被写体情報管理部１３（図１
６）によって変更されていないと判定されると、変更の
指示があるまで待機し、映像の表示を続行する。なお、
被写体情報の変更指示があるまでステップ１７２〜１７
４からの処理を繰り返すことにより、映像の表示を次々
に行うことができる。これは、図４に示されるステップ
４２〜４４およびステップ４７の処理を繰り返し行うこ
とと同じである。

【０１５４】なお、映像情報が表す映像は、動画であっ
ても静止画であってもよく、さらにはそれらの混在であ
ってもよい。表示する表示規則に基づいて、映像が表示
されるのは既に説明したとおりであるが、その表示規則
は任意に変更しうる。

【０１５５】以上のように本実施の形態によれば、映像
表示中であっても、被写体情報管理部１３（図１６）
は、入力部１６１（図１６）や外部モジュール１６２
（図１６）からの要求に従い、被写体情報に含まれる被
写体重要度を変更する。表示制御部１６（図１６）は、
被写体情報の変更が反映された結果変更された映像重要
度に応じて、複数の映像の表示を自動的に変更する。し
たがって、注目すべき被写体の種類や位置などが状況に
応じて変化する場合でも、映像重要度の高い映像が自動
的に選択表示され、オペレータは素早く的確な被写体観
察ができる。言うまでもなく、実施の形態１で説明した
映像表示装置１０（図１）の効果も得ることができる。

【０１５６】（実施の形態４）４−１．本実施の形態における映像表示装置の動作概要実施の形態１〜３では、映像重要度の高い映像から順に
時間を変化させ、または複数の映像のうちＮ個の映像を
選択して表示した。本実施の形態では、映像重要度に従
って、映像の表示サイズを変更し、または映像を表示す
るウインドウの枠の太さや色を変更する強調表示の度合
いを変化させる。

【０１５７】４−２．本実施の形態における映像の表示本実施の形態において用いられる映像表示装置は、実施
の形態１〜３で説明した映像表示装置のいずれでもよ
い。映像表示装置１０、９０、１６０（図１、９、１
６）は、表示する映像の映像重要度に応じて以下のよう
に映像を表示する。

【０１５８】図１８は、映像重要度の高い映像ほど表示
サイズを大きくする表示画面の例を示す。

【０１５９】図１８（ａ）は、実施の形態２にかかる映
像表示装置１０（図１）を用いて映像を表示させた例を
示す。表示画面は１０分割され、映像重要度が最も高い
映像と２番目に高い映像とが画面の上半分に、その他の
映像が画面の下半分に表示されている。画面の上半分に
表示された映像の表示サイズは、他の映像の表示サイズ
の例えば４倍である。

【０１６０】図１８（ｂ）は、実施の形態２にかかる映
像表示装置９０（図９）を用いて映像を表示させた例を
示す。撮影された位置に対応する地図上の位置に表示さ
れる映像のうち、映像重要度が大きい順に２つの映像が
拡大されて表示され、映像重要度が小さい映像ほど、小
さく表示されている。

【０１６１】図１８（ｃ）は、実施の形態２にかかる映
像表示装置９０（図９）を用いて映像を表示させた例を
示す。撮影された位置に対応する地図上の位置に表示さ
れる映像のうち、映像重要度が大きい映像ほど、映像を
表示するウィンドウの枠が太く、色が濃く表示されてい
る。

【０１６２】図１９は、映像重要度に応じて映像の強調
度（表示サイズ）を変更するための表示規則の例を示
す。図１８（ａ）〜（ｃ）で用いられた映像表示装置１
０、９０、１６０（図１、９、１６）の表示制御部１６
（図１、９、１６）は、このような表示規則と映像重要
度とを用いることによって、上述のような映像の表示を
実現することができる。

【０１６３】図１９（ａ）は、映像重要度の高い映像の
表示サイズをより大きく表示するための表示規則であ
り、例えば１番目の映像重要度の映像を表示するサイズ
は４８０×３２０ドット、２番目は４５０×３００ドッ
トなどと規定している。

【０１６４】図１９（ｂ）は、映像重要度の高い映像の
表示ウィンドウの枠を太く、色を変更して表示する規則
であり、例えば、１番目はのウィンドウ枠は３ポイント
の赤色、２番目は２．５ポイントの橙色などと規定して
いる。色は目立つ色から順に用いられるようにしてもよ
い。なお、上述した強調表示の表示規則は一例にすぎ
ず、他の例として、重要な映像のウィンドウ枠をブリン
ク表示する、重要な映像のコントラストや輝度を上げる
等、オペレータが映像表示装置１０、９０、１６０（図
１、９、１６）を利用する目的に応じてさまざまな表示
規則を規定し、変更することができる。

【０１６５】これらの例においては、映像情報が表す映
像は、動画であっても静止画であってもよく、さらには
それらの混在であってもよい。

【０１６６】以上のように本実施の形態によれば、表示
規則と映像重要度とに基づいて、表示制御部１６（図
１、９、１６）が映像の強調表示の度合いを変化させて
表示するようにしたので、重要な映像ほど大きく表示す
る、または重要な映像を表示するウインドウの枠の色を
目立つようにする等、被写体の重要性をより意識して観
察することができる。

【０１６７】（実施の形態５）５−１．本実施の形態における映像表示装置の動作概要実施の形態１〜４は、映像は静止画または動画のいずれ
でもよかったが、本実施の形態では、映像は動画であ
る。本実施の形態では、映像重要度が高い映像ほど映像
の品質を高くして表示する。

【０１６８】５−２．本実施の形態における映像の表示本実施の形態において用いられる映像表示装置は、実施
の形態１〜４で説明した映像表示装置のいずれでもよ
い。映像表示装置１０、９０、１６０（図１、９、１
６）は、表示する映像の映像重要度に応じて以下に説明
する映像を表示する。

【０１６９】図２０は、映像重要度の順番にしたがって
映像の表示品質を変更するための表示規則の例を示す。

【０１７０】表示制御部１６（図１、９、１６）は、映
像重要度とこの表示規則とに基づいて映像を表示する。
例えば、１番目の映像重要度の映像を表示する表示品質
は、３０フレーム／秒で解像度が４８０×３２０、２番
目は２５フレーム／秒の４５０×３００、…となる。フ
レームレートが高いほど滑らかな動きを表示することが
でき、解像度が高いほど映像を緻密に表示することがで
きる。周知のように、動画は、時間的に連続した複数の
画像フレームを表示したときに実現される。

【０１７１】以上のように本実施の形態によれば、表示
制御部１６（図１、９、１６）は表示規則および映像重
要度に基づいてフレームレートや解像度等の映像品質の
度合いを変化させて表示するよう映像の表示を制御す
る。したがって映像重要度の高い映像（すなわち重要な
映像）がより見やすくかつ緻密に表示されるので、オペ
レータは自然と重要な映像を注視することができる。さ
らに、比較的映像重要度が低い映像（すなわち比較的重
要でない映像）は画像フレームが間引かれて表示される
ので、映像表示装置１０、９０、１６０（図１、９、１
６）にかかる表示処理の負荷は軽くなり、比較的安価な
処理回路を用いても映像表示装置１０、９０、１６０
（図１、９、１６）を製造することができる。したがっ
て、映像表示装置１０、９０、１６０（図１、９、１
６）の製造コストを低く抑えることができる。

【０１７２】なお、ＪＰＥＧ（ＪｏｉｎｔＰｈｏｔｏ
ｇｒａｐｈｉｃＥｘｐｅｒｔｓＧｒｏｕｐ）のような
フレーム間符号化のない符号化方式を用いて圧縮・記録
されている場合は、フレームレートに合わせて必要な映
像情報だけを効率的に読み出すことができる。さらに本
発明による映像表示装置９０（図９）を用いると、映像
情報格納部９３（図９）に同じ映像を異なる解像度で、
または映像の低周波数成分から高周波数成分を何段階か
に分けて符号化（階層的符号化）して、映像情報を格納
しておき、表示に際して必要な解像度の映像情報のみを
読み出すようにすることができる。これにより、読み出
し処理の負荷を軽くすることができる。なお、階層的符
号化は公知の技術であり、本発明の本質ではないので説
明は省略する。なおＪＰＥＧが静止画に多く利用される
符号化であることを鑑みると、本実施の形態の説明は、
動画のみではなく静止画にも応用することができる。静
止画を利用する場合には、フレームレートに関する条件
を無効にし、解像度のみを有効にすればよい。

【０１７３】本実施の形態における映像表示装置１０、
９０、１６０（図１、９、１６）では、その装置が有す
る映像の読み出し速度、表示性能等の処理能力に応じ
て、その表示能力を超えないよう映像に表示品質を設定
することにより、その装置が有する能力を最大限使った
品質のよい複数の映像を表示することができる。

【０１７４】（実施の形態６）６−１．本実施の形態における映像表示装置の動作概要図２１は、本実施の形態における映像表示装置２１０の
構成を示すブロック図である。

【０１７５】本実施の形態における映像表示装置２１０
は、実施の形態５で説明したと同様、映像重要度が高い
映像ほど映像の品質を高くして表示する。ただし、本実
施の形態の映像表示装置２１０は、映像を映像情報とし
て受け取り、格納し、ネットワークを介してその映像情
報を配信する映像サーバ２１１と、ネットワークから映
像情報を受信し、表示する映像表示端末２１２とを含む
一体的な装置である。映像サーバ２１１は、映像表示端
末２１２から所定の映像品質の映像情報を送信するよう
要求されると、その映像品質で映像情報を映像表示端末
２１２に送信する。

【０１７６】６−２．本実施の形態における映像表示装
置の構成および動作（ａ）本実施の形態における映像表示装置の構成映像表示装置２１０は、複数のカメラ１１ａ〜１１ｎ
と、映像サーバ２１１と、映像表示端末２１２とを含
む。映像サーバ２１１は、映像情報を格納する映像デー
タベース的な役割を果たし、要求に応じて保持している
映像情報を提供する。映像表示端末２１２は必要な映像
情報を映像サーバ２１１に要求し、受け取った映像情報
を表示する。

【０１７７】複数のカメラ１１ａ〜１１ｎで撮影された
映像は、映像情報として映像サーバ２１１へ送信され
る。映像サーバ２１１は、複数のカメラ１１ａ〜１１ｎ
から送信された映像情報を受け取って蓄積し、映像表示
端末２１２からの要求に応答して、映像情報を映像表示
端末２１２へ送信する。映像表示端末２１２は、映像サ
ーバ２１１へ映像情報の送信を要求し、送信された映像
情報を受け取った後、その映像情報が表す映像を表示す
る。

【０１７８】映像サーバ２１１は、映像情報取得部１２
と映像情報格納部２３と送受信部２１３とを含む。

【０１７９】以下では、映像表示装置２１０の構成要素
のうち、映像表示装置１０（図１）および映像表示装置
９０（図９）の構成要素と同一の符号が付された構成要
素については、映像表示装置１０（図１）および映像表
示装置９０（図９）の構成要素の構成および機能と同一
であるのでその説明は省略する。既に説明した動作と異
なる動作または追加の動作が行われる場合には、その都
度説明する。

【０１８０】映像情報取得部１２は、映像表示端末２１
２から送信された所定の映像情報の送信要求を送受信部
２１３を介して受け取り、その映像情報を映像情報格納
部９３から読み出す。映像情報取得部１２は、読み出し
た映像情報を送受信部２１３を介して映像表示端末２１
２に送信する。映像情報格納部９３には、同じ映像を表
すが異なる表示品質の映像情報が複数格納されている。

【０１８１】送受信部２１３は、映像情報等のデータを
送受信するための機能を有する。送受信部２１３は、映
像表示端末２１２から送信された映像情報送信要求その
他の情報を受信し、映像情報取得部１２へ送信する。送
受信部２１３は、映像情報取得部１２から映像情報その
他の情報を受け取り、映像表示端末２１２へ送信する。
送受信部２１３は、映像サーバ２１１をネットワーク回
線等の情報通信媒体に接続する。

【０１８２】映像表示端末２１２は、送受信部２１４
と、被写体情報管理部１３と、被写体情報格納部１４
と、映像重要度計算部１５と、表示制御部１６と、表示
部１７とを含む。

【０１８３】表示制御部１６は、表示規則と映像重要度
計算部１５において計算された映像重要度とに基づい
て、表示すべき映像の映像品質を決定する。表示制御部
１６は、送受信部２１４を介して、その映像品質を有す
る映像情報の送信を映像サーバ２１１に要求する。映像
表示部１６は、送受信部２１４を介して、映像サーバ２
１１から送信された映像情報を表示するよう表示を制御
する。

【０１８４】送受信部２１４は、映像情報等のデータを
送受信するための機能を有する。送受信部２１４は、表
示制御部１６から映像情報送信要求その他の情報を受け
取り、映像サーバ２１１へ送信する。送受信部２１４
は、映像サーバ２１１から送信された映像情報その他の
情報を受信し、表示制御部１６へ送信する。送受信部２
１４は、映像表示端末２１２をネットワーク回線等の情
報通信媒体に接続する。

【０１８５】（ｂ）本実施の形態における映像表示装置
の動作および映像表示例図２２は、映像表示装置２１０（図２１）の動作手順を
表すフローチャートである。

【０１８６】被写体情報に基づく映像重要度の計算（ス
テップ２２０）および計算した映像重要度の格納（ステ
ップ２２１）については、図４のステップ４０および４
１と同じであるのでその説明は省略する。

【０１８７】ステップ２２２では、表示制御部１６（図
２１）は、映像重要度および表示規則に基づいて表示す
べき映像の表示品質を決定する。表示品質とは、実施の
形態５に関連して説明したように、映像重要度に応じて
決定される動画のフレームレートおよび解像度（図２
０）を表す。映像の表示品質を決定すると、表示制御部
１６（図２１）は、その映像の映像情報の送信を映像サ
ーバ２１１（図２１）に要求する。この要求は、表示す
べき映像の映像ＩＤおよびその映像の映像品質を送信す
ることによって行われる。送信を要求される映像情報
は、１つに限らず、表示可能な数の映像に対応する複数
の映像情報であり得る。

【０１８８】ステップ２２３では、映像サーバ２１１
（図２１）が要求された映像情報を読み出し、映像表示
端末２１２（図２１）に送信する。映像表示端末２１２
（図２１）の表示制御部１６（図２１）は、送信されて
きた映像情報を受信する。なお映像情報の受信は静止画
であれば１度で終了するが、動画の場合には以下に説明
するステップが行われている間にも連続して行われるこ
とがあり得る。

【０１８９】ステップ２２４では、表示制御部１６（図
２１）は、表示規則に基づいて受信した映像情報が表す
映像を表示する。本実施の形態は映像の表示品質に関し
ているので、実施の形態１〜４に説明した表示態様と組
み合わせることで、実施の形態１〜４で説明したと同じ
効果を得ることができる。なお、実施の形態１〜４で説
明した映像表示装置には、本実施の形態で説明した映像
表示装置２１０（図２１）には示されていない構成要素
が含まれている場合がある。その場合であっても、全く
同様の構成要素を映像表示装置２１０（図２１）に設け
ればよい。

【０１９０】最後に、ステップ２２５では、表示制御部
１６（図２１）は、オペレータ等から映像の表示を終了
する指示を受け取ったか否かが判定される。この映像の
表示を中止する指示は、オペレータ等によって、外部か
ら与えられる。

【０１９１】映像の表示を終了する指示を受け取ってい
ない場合には、再びステップ２２２からの処理を繰り返
し、映像の表示を続行する。例えば、本実施の形態によ
る映像表示装置２１０（図２１）に実施の形態１にかか
る映像表示装置１０（図１）と同様の表示パターンで映
像の表示を行わせる場合には、スムーズかつ高い解像度
で表示された映像重要度の高い映像のグループから、間
引かれかつ低い解像度で表示された映像重要度の低い映
像のグループへと表示時間を変えながら映像が繰り返し
表示されることになる。

【０１９２】映像の表示を終了する指示を受け取った場
合には、映像の表示を終了する。

【０１９３】以上のように本実施の形態によれば、表示
制御部１６（図２１）は表示規則および映像重要度に基
づいてフレームレートや解像度等の映像品質の度合いを
変化させて表示するよう映像の表示を制御する。したが
って映像重要度の高い映像（すなわち重要な映像）がよ
り見やすくかつ緻密に表示されるので、オペレータは自
然と重要な映像を注視することができる。さらに、比較
的映像重要度が低い映像（すなわち比較的重要でない映
像）は画像フレームが間引かれて表示されるので、映像
表示装置２１０（図２１）にかかる表示処理の負荷を軽
くすることができ、比較的安価な処理回路を用いても映
像表示装置２１０（図２１）を製造することができる。
したがって、映像表示装置２１０（図２１）の製造コス
トを低く抑えることができる。表示規則は、目的に応じ
て適切に変更することができる。

【０１９４】さらに、映像サーバ２１（図２１）と映像
表示端末２１２（図２１）とがネットワークで接続され
た構成であっても、ネットワーク上は表示に必要な映像
品質の情報しか伝送されないため、ネットワーク資源や
サーバおよび端末の計算機資源を有効に利用することが
できる。それらの資源が有する伝送帯域や処理速度等の
性能に応じてその性能を超えないよう映像に映像品質を
設定することにより、そのネットワークベースの映像表
示装置２１０（図２１）が有する能力を最大限使った品
質のよい複数の映像を表示することができる。

【０１９５】本実施の形態では、映像情報格納部９３に
は同じ映像を表す異なる表示品質の映像情報が複数格納
されているとしたが、１つの高解像度映像を格納し、解
像度を適宜変換して必要な表示品質の映像にしてもよ
い。そのためには、読み出した符号化データを、その直
交変換領域（ＪＰＥＧの場合は離散コサイン変換した周
波数領域）を維持したまま解像度を下げる等の幾何変換
を行う公知のアルゴリズムを利用することが好ましい。
このアルゴリズムは、映像サーバ２１１（図２１）に高
解像度映像をＪＰＥＧ等の圧縮符号化して記録され、そ
の後読み出された符号化データに対して適用される。読
み出された符号化データは幾何変換により解像度の低い
符号化データに変換され、伝送される。このアルゴリズ
ムによれば、一度イメージデータに復号化して解像度を
低下させ、その解像度が低い映像を再度符号化する場合
に比べ、処理時間は大幅に短縮される。さらに、同じ映
像を表す表示品質の異なる複数の映像情報を格納する領
域を設ける必要がなくなり、有効に記憶領域を利用する
ことができる。

【０１９６】（実施の形態７）７−１．本実施の形態における映像表示装置の動作概要本実施の形態では、映像を構成する複数の画像フレーム
それぞれに着目する。すなわち、１枚の画像フレームの
映像を、例えばそれぞれ１つの被写体を含む複数の領域
（部分空間）に分割し、部分空間それぞれを異なる態様
で強調して表示する。複数の画像フレームそれぞれに同
様の処理を施すことにより、映像に含まれるそれぞれの
被写体を強調して表示することできる。

【０１９７】７−２．本実施の形態における映像の表示本実施の形態において用いられる映像表示装置は、実施
の形態１〜６で説明した映像表示装置のいずれでもよ
い。映像表示装置１０、９０、１６０、２１０（図１、
９、１６、２１）の表示制御部１６は、表示する映像の
映像重要度に応じて以下のように映像の表示を制御す
る。

【０１９８】図２３は、３つの被写体を撮影するカメラ
と、本実施の形態による処理を施されて表示された被写
体の例を示す。３つの被写体「Ａ」、「Ｂ」および
「Ｃ」に設定された被写体重要度は、それぞれ０．８、
１．０および０．６とする。撮影された映像は、画像フ
レームの映像毎に複数の部分領域に仮想的に分割され、
被写体「Ａ」、「Ｂ」および「Ｃ」はそれぞれ別個の部
分空間に存在する。

【０１９９】図２３（ａ）は、被写体「Ａ」、「Ｂ」お
よび「Ｃ」が存在する部分領域の映像重要度に応じて、
表示される被写体を囲む枠の色を変えて映像を表示させ
た例を示す。図２３（ａ）では、被写体「Ｂ」が写って
いる中央の領域を濃い色の枠で囲い、被写体「Ａ」また
は被写体「Ｃ」が写っているその左右の部分領域をより
薄い色の枠で囲む。枠の色は、その部分領域の映像重要
度に基づいて決定される。部分領域の映像重要度は、映
像重要度計算部１５（図１、９、１６、２１）によっ
て、映像が表示されるその瞬間瞬間の画像フレームの部
分領域それぞれについて計算される。映像重要度は、そ
の領域内に存在する被写体の被写体重要度に基づいて計
算される。以上のように画像フレームを部分領域に分割
し、その部分領域毎に映像重要度を規定したので、部分
領域毎に映像重要度に応じた濃さの枠で映像を部分領域
毎に強調して表示することができるようになる。

【０２００】なお本実施の形態では、映像情報が表す映
像は、動画であっても静止画であってもよく、さらには
それらの混在であってもよい。

【０２０１】図２３（ｂ）は、被写体「Ａ」、「Ｂ」お
よび「Ｃ」が存在する部分領域の映像重要度に応じて、
表示される被写体の表示品質を変えて映像を表示させた
例を示す。表示品質とは、動画の場合には実施の形態５
に関連して説明したように、映像重要度に応じて決定さ
れるフレームレートおよび解像度（図２０）を表す。静
止画の場合には、その静止画の解像度等を表す。部分領
域毎の映像重要度の決定手順については図２３（ａ）に
おいてした説明と同じである。図２３（ｂ）では、被写
体「Ｂ」が存在する中央の領域は一番映像品質を高く、
次に被写体「Ａ」が存在する領域、その次は被写体
「Ｃ」が存在する領域と映像品質を下げている。部分領
域毎に映像の品質を変化させた符号化映像情報を生成す
ることができる符号化方式として、ＪＰＥＧ２０００な
どが既に開発されているが、公知の技術であるため説明
は省略する。映像は、リアルタイムの映像であっても、
一旦映像情報格納部９３（図９、２１）に格納された映
像であってもよい。

【０２０２】なお、画像フレームのどの領域にどの被写
体が存在するかについては、実施の形態２の変形例にお
いて図１４、１５を参照して説明したように、各画像フ
レームに対して撮影範囲情報と被写体情報に被写体の位
置と大きさを示す外接多角形等の情報とを用いて、幾何
的に計算することができる。

【０２０３】以上のように本実施の形態によれば、１枚
の映像の中で注目すべき箇所をより明確に表示すること
ができる。

【０２０４】（実施の形態８）８−１．本実施の形態における映像表示装置の動作概要上述した実施の形態においては、「被写体」とは、撮影
対象としての建築物、設備、人物などの物体を主として
説明した。本実施の形態では、町名や番地等で指定され
る撮影対象空間の部分空間も、被写体として定義し、被
写体情報に記述する。観察対象として重要な町（映像重
要度が高い町）等を撮影した映像を優先的に表示するこ
と、またはオペレータが町名または番地で指示すること
により優先的に表示するという点では、例えば実施の形
態２の映像表示装置９０（図９）と同様の意義を有す
る。

【０２０５】８−２．本実施の形態における映像表示装
置の動作本実施の形態において用いられる映像表示装置は、実施
の形態１〜７で説明した映像表示装置のいずれでもよ
い。

【０２０６】図２４は、空間を被写体として定義した被
写体情報の例を示す。被写体情報は、空間を識別するＩ
Ｄ、町名等の名称および区、郡等の種類、空間の領域を
示す座標、空間を撮影するカメラのカメラＩＤ、被写体
重要度などが定義される。映像重要度計算部１５（図
１、９、１６、２１）はこの被写体情報に基づいて映像
の映像重要度を計算し、表示制御部１６（図１、９、１
６、２１）が映像重要度の高い空間を写す画像を優先的
に表示するよう、表示を制御する。さらに、映像表示装
置１０、９０、１６０、２１０（図１、９、１６、２
１）は、オペレータ等により外部から、被写体情報に記
述されているパラメータ（名称、種類、領域またはカメ
ラＩＤ等）を受け取ると、その被写体を含む映像を他の
映像よりも優先して表示する。これによりオペレータ
は、任意の被写体が撮影された映像を観察することがで
きる。

【０２０７】以上のように本実施の形態によれば、被写
体として地点や地域といった撮影対象空間における部分
空間も含むようにしたので、建物等の物体だけでなく、
町名や地図上での位置などで特定される空間を撮影した
映像を優先的に表示することができる。

【０２０８】なお上記説明において、部分空間は町や番
地など固定的な地域として説明したが、これに限定され
ない。例えば、図９に示す地図と連動した映像表示装置
９０において、オペレータがマウス等で指定した地図上
の地点およびその近傍を動的な部分空間として定義し、
この部分空間の映像重要度を上げる。これにより、指定
した地点の近傍を写す映像が表示され、オペレータが関
心をもつ空間の映像を地図に基づいて表示することがで
きる。この部分空間毎に、実施の形態７に説明したよう
に表示規則にしたがって表示品質を変えて表示すること
もできる。さらに、例えばマウスを地図上の道路に沿っ
て動かすとその近傍の映像が次々と表示され、地図上で
のウォークスルーに対応した映像表示も実現することが
できる。

【０２０９】（実施の形態９）９−１．本実施の形態における映像表示装置の動作概要図２５は、本実施の形態における映像表示装置２５０の
構成を示すブロック図である。

【０２１０】本実施の形態における映像表示装置２５０
は、被写体に発生したイベントをイベント発生検出部２
５１で検出し、そのイベントの重要性を示すイベント重
要度、イベントの発生時刻等と上述した被写体重要度と
に基づいて、映像重要度を求め、映像重要度に基づい
て、イベントが発生した位置を撮影していたカメラ（図
２６のカメラＡ）、およびイベントが発生した位置の近
傍を撮影していたカメラ（図２６のカメラＢ）がイベン
ト発生前後に撮影した映像の表示を行う（図２７）。な
お、本実施の形態では、映像は主として静止画を表す。
映像が動画である場合については実施の形態１０で説明
される。

【０２１１】９−２．本実施の形態における映像表示装
置の構成および動作（ａ）本実施の形態における映像表示装置の構成映像表示装置２５０は、複数のカメラ１１ａ〜１１ｎ
と、映像情報取得部１２と、被写体情報管理部１３と、
被写体情報格納部１４と、映像重要度計算部１５と、表
示制御部１６と、表示部１７と、映像情報格納部９３
と、地図情報格納部９４と、地図情報読み出し部９５
と、操作部９６とを含む。映像表示装置２５０はさら
に、イベント発生検出部２５１を含む。

【０２１２】以下では、映像表示装置２５０の構成要素
のうち、映像表示装置９０（図９）の構成要素と同一の
符号が付された構成要素については、映像表示装置９０
（図９）の構成要素の構成および機能と同一であるので
その説明は省略する。したがって、以下ではイベント発
生検出部２５１について説明する。他の構成要素につい
て映像表示装置９０（図９）と異なる動作または追加の
動作が行われる場合には、その都度説明する。

【０２１３】本実施の形態における映像表示装置２５０
においては、映像情報格納部９３に格納される映像情報
には、実際の映像を表す情報と、その映像が撮影された
時刻を表す撮影時刻情報とが含まれる。映像情報が格納
される手順は、映像情報入力部９１が、映像を表す情報
をカメラ１１ａ〜１１ｎから受け取り、その映像を表す
情報を映像情報格納部９３に格納する。格納に際して
は、映像を表す情報には撮影された時刻を表すタイムス
タンプが付される。本実施の形態では、タイムスタンプ
は、画像フレーム毎、または連続する画像フレームの集
合毎に付される。連続する画像フレームの集合毎にタイ
ムスタンプを付す場合には、少なくとも先頭フレームの
撮影時刻とフレームレートがタイムスタンプとして付さ
れる。以下では、このタイムスタンプを利用して映像情
報がどの時刻に撮影された映像を含むかが判断される。

【０２１４】イベント発生検出部２５１は、イベントの
発生を検出するために設けられている。イベントの例と
しては、プラント設備において発生した温度異常や圧力
異常、高速道路で発生した事故である。前者の場合は、
イベント発生検出部２５１は温度センサまたは圧力セン
サ等のセンサ、後者の場合は、イベント発生検出部２５
１は電話、非常ボタン等による通報を検出する装置が該
当する。イベント発生検出部２５１は、イベントを検出
すると、被写体情報管理部１３に対し被写体情報を変更
するよう指示し、発生したイベントに関する情報を被写
体情報管理部１３に送信し、被写体情報に記述させる。
発生したイベントに関するイベント情報は、イベントが
発生した被写体のＩＤ、イベントの種類、時刻、重要度
等である。

【０２１５】被写体情報管理部１３は、被写体情報の変
更指示と記述すべきイベント情報とを受信すると、被写
体情報格納部１４に格納された被写体情報にイベント情
報を書き込む。

【０２１６】図２８は、イベント情報を含む被写体情報
の例を示す。

【０２１７】被写体情報は、被写体情報テーブル（図２
８（ａ））とイベント情報テーブル（図２８（ｂ））と
から構成される。被写体情報テーブル（図２８（ａ））
には、被写体で発生したイベントの数と、イベント情報
テーブルを参照するためのポインタとが記述される。イ
ベント情報テーブル（図２８（ｂ））には、イベントの
ＩＤ、種類、発生時刻、イベントの重要度等が記述され
る。

【０２１８】（ｂ）本実施の形態における映像表示装置
の動作および映像表示例図２６は、カメラＡ，ＢおよびＣの位置とイベントＥが
発生した位置の位置関係を示す。図２６に示されるよう
に、イベントＥは時刻ｔｅ、位置（ｘｅ，ｙｅ）で発
生したことが理解される。このような位置関係にあるカ
メラＡ，ＢおよびＣとイベントについて、以下どのよう
に映像が表示されるかを説明する。

【０２１９】本実施の形態における映像表示装置２５０
（図２５）の処理手順は、図１１に示す映像表示装置９
０（図９）の動作手順と同じである。ただし、「被写体
情報と映像管理情報とに基づいて各映像の映像重要度を
計算する」（図１１、ステップ１１０）際の映像重要度
の計算内容のみが異なる。以下、その計算内容について
説明する。

【０２２０】映像重要度計算部１５（図２５）は、同じ
カメラによって撮影された映像であれば、イベント発生
時刻に近い映像ほど、より大きい映像重要度になるよう
計算する。

【０２２１】映像重要度の計算に際して、映像重要度計
算部１５（図２５）はまず、イベントの発生位置を撮影
していたカメラの映像撮影時刻と、イベントの発生時刻
との時間差ｔを計算する。カメラの映像撮影時刻は映像
管理情報（図１２）に記述されており、イベントの発生
時刻はイベント情報テーブルに記述されている。映像重
要度計算部１５（図２５）は、イベントの発生位置を撮
影していたカメラ（図２６のカメラＡ）およびイベント
の発生位置の近傍を撮影していたカメラ（図２６のカメ
ラＢ）からの映像について、上述した時間差を計算す
る。時間差を計算され、表示される対象となる映像は、
適当な時間的範囲、例えばイベントが発生した時間の前
後３０分に撮影された映像であるとしてもよい。この時
間的範囲は任意に調整され得る。

【０２２２】時間差ｔが計算されると、その時間差ｔを
イベント重要度関数Ｗｅ（ｔ）に与え、イベントに対す
る映像重要度Ｗｅを計算する。

【０２２３】図２９は、イベント重要度関数Ｗｅ（ｔ）
の例を示す。イベント重要度関数はイベント発生時刻の
映像重要度を最大値（１．０）として時間差ｔの絶対値
に比例して小さくなる関数である。ただし、イベント発
生位置の近傍を撮影していたカメラの映像に対しては、
映像重要度の最大値は０．５とする。したがって、カメ
ラＡはこのイベントが発生した位置を撮影しており、最
大値は１．０である。カメラＢはイベントが発生した位
置の近傍を撮影しているので、最大値は０．５である。
一方、カメラＣはイベントの発生位置びその近傍を撮影
していないので、時間差ｔに関係なく映像重要度は０と
される。

【０２２４】以上の手順によれば、図２９に示されるよ
うに映像重要度を得ることができる。すなわち、イベン
トの発生時刻（ｔ＝０）を１３時２０分とし、カメラＡ
がイベント発生位置を、カメラＢがイベント発生位置の
近傍を撮影しているとする。撮影時刻は、カメラＡは１
３時１０分と１３時２２分、カメラＢは１３時１５分と
１３時２５分、カメラＢは１３時２０分である。カメラ
Ａで撮影した画像Ａ１はｔ＝−８（分）、Ｗｅ＝０．
３、画像Ａ２はｔ＝２（分）、Ｗｅ＝０．８となる。カ
メラＢで撮影した画像Ｂ１はｔ＝−５（分）、Ｗｅ＝
０．３、画像Ｂ２はｔ＝５（分）、Ｗｅ＝０．３とな
る。カメラＣで撮影した画像Ｃ１は、ｔ＝０（分）、Ｗ
ｅ＝０．０である。上述した最終的な映像重要度は、イ
ベント重要度関数Ｗｅの値をそのまま用いたが、イベン
ト重要度関数Ｗｅの値と被写体情報に記述された被写体
重要度Ｗｏの値の積を映像重要度としてもよい。

【０２２５】以上のようにして得られた映像重要度によ
って、映像が表示される態様を説明する。

【０２２６】図２７は、本実施の形態における、イベン
トが発生した時に表示される複数の映像の例を示す。イ
ベント発生位置を撮影したカメラＡの２つの映像ととも
に、その近傍を撮影したカメラＢの２つの映像が表示さ
れる。

【０２２７】まず、イベントの発生位置を撮影していた
カメラＡの映像について、イベント発生時刻により近い
時刻の映像（１３時２２分に撮影された映像）の映像重
要度が最も大きいので（Ｗｅ＝０．８）、その映像が最
も大きく表示される。他方の映像は比較的小さく表示さ
れる。イベントの発生位置の近傍を撮影していたカメラ
Ｂの映像については、いずれの映像も、映像重要度は同
じであり（Ｗｅ＝０．３）、かつカメラＡの撮影した映
像の映像重要度と同じであるので、いずれも同じサイズ
で表示される。イベントの発生位置びその近傍を撮影し
ていないカメラＣの映像は、映像重要度が０であるので
表示されていない。

【０２２８】なお、映像重要度に応じて表示品質を変更
することもできる。ただし、その説明は既に実施の形態
５、６および７で説明したとおりなので省略する。

【０２２９】以上のように本実施の形態によれば、映像
管理情報（図１２）に映像の撮影時刻を記述し、被写体
情報にある時刻に発生したイベントに関するイベント情
報を記述し、これらに基づいて映像重要度計算部１５
（図２５）が映像重要度を計算するので、被写体そのも
のの重要度だけでなく、被写体に発生したセンサ異常等
のイベントの重要度に従い、対応する映像を優先的に表
示することができる。これにより、素早く的確にイベン
トを観察することができる。さらにイベント発生時刻の
近傍はより強調して表示するなどにより、映像の重要性
を時間的に意識して観察することができる。

【０２３０】上述したイベント重要度関数は、表示規則
として規定され得る。したがって、図２９に示すイベン
ト重要度関数に限らない、他のイベント重要度関数を用
いて映像重要度を決定することもできる。

【０２３１】図３１は、イベント重要度関数の例を示
す。

【０２３２】図３１（ａ）〜（ｃ）は正規分布関数を示
す。図３１（ｂ）および（ｃ）はイベントが発生する時
刻（ｔ＝０）の前後にピークが存在する。このようなイ
ベント重要度関数は、センサの感度等によりアラーム発
生時刻よりも以前あるいは以降に重要なシーンがあるよ
うな場合に有効である。

【０２３３】図３１（ｄ）は、立ち上がりが急でかつ減
衰が小さい関数である。この関数は、イベント発生時刻
（ｔ＝０）以降が重要な場合に有効である。

【０２３４】図３１（ｅ）は、ステップ関数である。ス
テップ関数を利用することで、映像重要度計算の処理を
簡単にすることができる。

【０２３５】図３１（ｆ）は、複数のピークを持つ関数
である。この関数は、イベント発生時刻（ｔ＝０）の前
後のある時点で重要なシーンがある場合に有効である。

【０２３６】イベントの種類や観察目的に応じて、図３
１（ａ）〜（ｆ）に示す関数および例示していない他の
多くの関数を用いることができる。

【０２３７】また上述した例では、被写体管理情報（図
２８）にイベント情報テーブルへのポインタを記述し被
写体とイベントを関連付けているが、これに限定される
ことはない。すなわち、被写体の位置が記述されている
被写体情報（図５）とイベント発生地点の位置情報が記
述されているイベント情報（図３８）とを参照すること
により、被写体の位置とイベントの発生位置とが所定の
距離内にあれば、イベントがその被写体で発生したイベ
ントであると推定することができる。このように、被写
体とイベントとの関連付けを行うこともできる。

【０２３８】さらに、撮影時におけるカメラの情報であ
るカメラ管理情報を用いて、被写体とイベントとが適切
に撮影された映像を得ることができる。

【０２３９】図３０は、カメラ管理情報の例を示す。カ
メラ管理情報は、カメラＩＤ、カメラの撮影範囲をあら
わすカメラの位置、水平および垂直角度、ズーム度が記
述されている。

【０２４０】上述した被写体情報（図６）に記述された
被写体の位置情報およびイベント情報（図３８）に記述
されたイベントの発生位置情報に加え、さらにカメラ管
理情報のカメラの位置および角度情報を利用することに
より、イベントがその被写体の近傍で発生したと推定で
きるのみならず、カメラがその被写体およびイベントを
撮影していたか否か、さらにカメラが被写体およびイベ
ントを撮影している場合には、その被写体およびイベン
トがその映像に占める割合等も判断することができる。
どのようにその判断が行われるかの詳細は、本明細書２
−２．（ｃ）で説明したので省略する。カメラ管理情報
を利用することにより、その被写体およびイベントを撮
影していたカメラが複数ある場合などは、その中から最
も的確にイベントおよび被写体を捉えているカメラの映
像を表示に利用することができる。したがって、映像の
表示をより柔軟に行うことができる。

【０２４１】上記９−１．では、本実施の形態は映像は
主として静止画を表すと述べたが、これに限定されるこ
とはない。すなわち、映像が動画像であってもよい。そ
の際には、イベント発生時刻との時間差との計算におい
て、撮影開始時刻、撮影終了時刻、撮影時刻中の時刻の
いずれを上述した映像の撮影時刻にしてもよい。どの時
刻を映像の撮影時刻として採用するかは本発明の本質的
な問題ではなく、目的に応じて使い分けることができ
る。

【０２４２】（実施の形態１０）１０−１．本実施の形態における映像表示装置の動作概
要実施の形態９においては、イベントの発生時刻に関連し
て、撮影時刻の異なる静止画を表示する場合を主として
説明した。本実施の形態では、イベントの発生時刻に関
連して、複数の動画を撮影時刻に応じて表示する場合を
説明する。撮影された動画は、その撮影時刻がイベント
発生時刻に近づくと表示サイズが徐々に広げられ（図３
２（ａ）および（ｂ））、撮影時刻がイベント発生時刻
から経過するにつれ表示サイズが徐々に縮小される（図
３２（ｃ））。このとき、複数の動画のそれぞれは、撮
影時刻に基づいて同期して再生・表示される（図３２に
おけるカメラＡおよびＢ近傍に表示された映像）。

【０２４３】なお本実施の形態において「同期」という
語は、複数の映像のそれぞれが、撮影された時刻に基づ
いて表示される際に用いられる。同期して表示されてい
る複数の映像とは、画像フレームレベルで同じ時刻に撮
影された複数の映像であって、その撮影時刻に基づいて
再生・表示された複数の映像のことをいう。なお、「同
じ撮影時刻」は、必ずしも厳密かつ正確に計測された時
刻でなくともよい。映像の同期表示の際には、映像それ
ぞれのフレームレートの差異、表示するハードウェアの
性能等によって撮影時刻に厳密に対応する時刻に表示さ
れなくともよく、多少のずれが生じてもよい。

【０２４４】１０−２．本実施の形態における映像表示
装置の動作および映像表示例本実施の形態における映像表示装置は、実施の形態９で
説明した映像表示装置２５０（図２５）と同じである。
したがって、映像表示装置２５０（図２５）の具体的な
構成については説明を省略する。

【０２４５】以下、本実施の形態における映像表示装置
２５０（図２５）の動作を説明する。映像表示装置２５
０（図２５）が動作する状況に関して、カメラの配置お
よびその撮影範囲、イベントの発生時刻および発生位置
は、図２６に示されるとおりとする。映像情報格納部９
３（図２５）には、映像情報としてカメラＡ，Ｂおよび
Ｃ（図２６）が撮影した動画像が格納されている。

【０２４６】図３３は、映像表示装置２５０（図２５）
の動作手順を表すフローチャートである。

【０２４７】表示制御部１６（図２５）は、地図情報読
み出し部９５（図２５）を介して地図情報格納部９４
（図２５）に格納された地図情報を読み込み、読み込ん
だ地図情報に基づいてその地図情報が表す地図を表示部
１７（図２５）に表示する（ステップ３３０）。

【０２４８】続いて表示制御部１６（図２５）は、オペ
レータ等が操作部９６（図２５）を介して入力した、映
像の再生開始時刻Ｔｓと、再生終了時刻Ｔｅとを受け取
る（ステップ３３１）。ここでいう再生開始時刻Ｔｓお
よび再生終了時刻Ｔｅは、例えば映像が時刻１３：００
から時刻１３：３０まで撮影されており、再生を開始し
たい時刻が時刻１３：１０であればＴｓ＝１３：１０
と、再生を終了したい時刻が時刻１３：２５であればＴ
ｅ＝１３：２５と設定される。

【０２４９】表示制御部１６（図２５）は、再生時刻ｔ
をｔ＝Ｔｓに設定する（ステップ３３２）。上記と同様
に、再生時刻ｔとは、再生されているその映像が実際に
撮影された時刻を表す。したがって、再生開始時刻Ｔｓ
および再生終了時刻Ｔｅについて説明した上記例では、
再生時刻ｔは再生開始時刻Ｔｓ（時刻１３：１０）から
再生終了時刻Ｔｅ（時刻１３：２５）の間に含まれる時
刻をいう。「映像が実際に撮影された時刻」には、再生
されている画像フレームそれぞれの撮影時刻を含み得
る。

【０２５０】映像重要度計算部１５（図１５）は、時刻
ｔにおける映像の映像重要度を計算する（ステップ３３
３）。本実施の形態では表示すべき映像は動画であるた
め、時刻ｔにおける映像の映像重要度とは、時刻ｔにお
ける動画のフレームを表す映像の映像重要度を表す。動
画を構成する各画像フレームの撮影時刻は、映像管理情
報（図１２）に記述されている撮影開始時刻と終了時刻
およびフレームレートから求めることができる。映像重
要度の計算は、実施の形態９で説明したように行われ
る。すなわち、時刻ｔにおける画像フレームの映像重要
度は、再生時刻とイベント発生時刻との時間差を求め、
イベント重要度関数を用いてその時間差に対応する映像
重要度の値を求めることができる。

【０２５１】図３４は、再生時刻とイベント発生時刻と
の時間差に応じて配列された画像フレームの集合とイベ
ント重要度関数との対応関係を示す。本実施の形態では
映像は動画であるため、映像の表示は画像フレームの連
続表示により実現される。図３４の時間軸に沿った直方
体を時間軸に垂直に切断した面は、その時間における画
像フレームを表す。画像フレームそれぞれについて（す
なわち画像フレームの撮影時刻ごとに）映像重要度を計
算することにより、動画像の映像重要度がリアルタイム
で変更されていると考えることができる。なお、イベン
ト重要度関数は実施の形態９で示したイベント重要度関
数と同じである。すなわち、イベント重要度関数はイベ
ント発生時刻の映像重要度を最大値（１．０）として時
間差ｔの絶対値に比例して小さくなる関数である。ただ
し、イベント発生位置の近傍を撮影していたカメラの映
像に対しては、映像重要度の最大値は０．５とする。し
たがって、カメラＡはこのイベントが発生した位置を撮
影しており、最大値は１．０である。カメラＢはイベン
トが発生した位置の近傍を撮影しているので、最大値は
０．５である。一方、カメラＣはイベントの発生位置び
その近傍を撮影していないので、時間差に関係なく映像
重要度は０とされる。

【０２５２】再び図３３を参照して、計算された映像重
要度は、映像管理情報の一部として映像管理情報に格納
される（ステップ３３４）。

【０２５３】表示制御部１６（図２５）は、映像情報読
み出し部９２（図９）を介して映像情報格納部９３（図
９）から時刻ｔにおける映像の映像情報を読み出す（ス
テップ３３５）。

【０２５４】表示制御部１６（図２５）は、表示規則と
時刻ｔにおける映像重要度とに基づいて表示サイズを決
定し、時刻ｔにおける映像を表示部１７（図２５）表示
する（ステップ３３６）。

【０２５５】続いて表示制御部１６は、現在の再生時刻
ｔが再生終了時刻Ｔｅに達していないかどうか（すなわ
ち、ｔ＜Ｔｅかどうか）を判定する（ステップ３３
６）。

【０２５６】現在の再生時刻ｔが再生終了時刻Ｔｅに達
していない場合には、再生時刻ｔを所定の時間Δｔだけ
進める、すなわち、ｔをｔ＋Δｔとして設定する（ステ
ップ３３８）。その後は、ステップ３３３以降の処理を
繰り返すことで再生が進行する。

【０２５７】現在の再生時刻ｔが再生終了時刻Ｔｅに達
した場合（すなわち、ｔ≧Ｔｅの場合）には、続いて動
画像の再生時刻が変更されたか否か、すなわち再生開始
時刻Ｔｓまたは再生終了時刻Ｔｅが変更されたか否かを
判定する（ステップ３３９）。

【０２５８】動画像の再生時刻が変更された場合には、
表示制御部１６（図２５）は変更された再生時刻を受け
取り、再びステップ３３１からの処理を繰り返す。

【０２５９】動画像の再生時刻が変更されていない場合
には、オペレータが次の再生時刻を入力されるまで、ス
テップ３３９の判定を繰り返し行う。

【０２６０】以上、本実施の形態における映像表示装置
２５０（図２５）の処理手順について説明した。なお上
述した処理は、動画像それぞれが再生時刻に基づいて同
期して再生・表示されるように行われる。このような同
期再生・表示が行われることを条件とすれば、上述した
処理で、複数の動画の各画像フレームの全てについてあ
るステップの処理が終了して次のステップに移行すると
しても、複数の動画の各画像フレームについての処理が
独立かつ並行に行われるとしてもよい。

【０２６１】図３２は、本実施の形態における、イベン
トの発生に応じて表示される複数の映像の例を示す。イ
ベント発生位置を撮影したカメラＡの動画像とともに、
その近傍を撮影したカメラＢの動画像がそれぞれの撮影
時刻に基づいて同時に表示される。カメラＣの撮影した
映像は上述のように映像重要度が０であるので表示され
ていない。

【０２６２】図３２（ａ）は、１３時２０分に発生した
イベントに対して、１３時１０分に撮影された映像を表
示した状態を示す。ここでは、映像は動画である。カメ
ラＡおよびＢの各画像フレームの映像重要度は、イベン
トが発生するまで間があるため比較的小さい。したがっ
て表示される映像のサイズは比較的小さい。

【０２６３】図３２（ｂ）は、イベントの発生時刻（１
３時２０分）に撮影された映像を表示した状態を示す。
イベントの発生位置を撮影していたカメラＡの映像は、
図３２（ａ）に示す映像よりも表示サイズが大きい。表
示サイズは、画像フレームの映像重要度の増加に応じて
滑らかに拡大する。すなわち、イベント発生時刻に近づ
くに従ってカメラＡの映像の表示サイズが拡大する。イ
ベントの発生位置の近傍を撮影していたカメラＢの映像
についても同様である。なお、同時刻におけるカメラＡ
の映像の映像重要度は、カメラＢの映像の映像重要度よ
りも大きいので、より大きなサイズで表示される。

【０２６４】図３２（ｃ）は、１３時２０分に発生した
イベントに対して、１３時２５分に撮影された映像を表
示した状態を示す。イベント発生時刻から時間が経過す
るにつれて、画像フレームの映像重要度は小さくなり、
それにしたがって表示サイズは小さくなる。

【０２６５】図３２（ａ）〜（ｃ）を参照して説明した
上記の例では、表示される映像は、それぞれのカメラＡ
およびＢで現実に撮影された時刻に基づいて同期して再
生・表示されている。

【０２６６】以上説明したように本実施の形態によれ
ば、撮影時刻毎に動画をなす画像フレームの映像重要度
を計算し、表示制御部１６（図２５）が重要度に従って
表示サイズを決めて、その撮影時刻に基づいて同期して
再生・表示するようにしたので、一つのカメラでは撮影
できないイベントの周辺状況を見やすく表示することが
できる。さらに、例えばカメラが移動した場合、または
異なる時間に異なる位置で複数のイベントが発生する場
合に対しても、撮影時刻に基づいて映像を表示し、およ
び全体の状況を広い視点で表示することができるので、
時間的・空間的に容易に把握することができる。比較的
近い位置で複数のイベントが発生した場合を、以下に簡
単に説明する。

【０２６７】図３５は、異なる時刻に発生した２つのイ
ベントとそのイベントを撮影するカメラの位置関係を示
す。

【０２６８】２つのイベントはイベントＥおよびＦであ
る。イベントＦは時刻ｔｅ、位置（ｘｅ，ｙｅ）で発生
し、イベントＦは時刻ｔｆ、位置（ｘｆ，ｙｆ）で発生
したと仮定する（ｔｅ＜ｔｆ）。さらにカメラＡはイベ
ントＥの発生した位置を撮影し、かつイベントＦの発生
した位置の近傍をも撮影している。カメラＢはイベント
Ｆの発生した位置を撮影し、かつイベントＥの発生した
位置の近傍をも撮影していたとする。

【０２６９】図３６は、イベントＥおよびＦが発生した
ときに用いられるイベント重要度関数の例を示す。

【０２７０】図３６（ａ）は、カメラＡの映像に対する
映像重要度を計算するためのイベント重要度関数を示
す。図３６には、イベントＥおよびＦが単独で発生した
場合にそれぞれカメラＡに対して用いられるイベント重
要度関数がオーバーラップして表示されている。イベン
トＥの発生位置を撮影していた時間と、イベントＦの発
生位置の近傍を撮影していた時間とは、異なるイベント
重要度関数が用いられる。これは上述したとおりであ
る。カメラＡの映像は、まずそれぞれのイベントＥおよ
びＦについて映像重要度を計算され、その後最終的な映
像重要度が決定される。最終的な映像重要度は、イベン
トＥおよびイベントＦそれぞれの映像についての映像重
要度の和を採用する、またはより大きい値を持つ映像重
要度を採用する等、どのように決定してもよい。これは
カメラＢの撮影した映像についても同様である。

【０２７１】なお、以上の説明では映像は動画とした
が、静止画を含んでいてもよい。但し、静止画１枚をそ
の撮影時刻に一瞬表示するだけでは見にくいので、撮影
時刻の前後一定時間の間再生することが好ましい。この
とき、動画と静止画とを区別するために表示枠の色を変
えて明示してもよい。これは、表示規則を変更すること
により設定することができる。同様の表示処理は、動画
の最初あるいは最後の画像フレームを表示する場合にも
有効である。例えば、カメラＡの動画がカメラＢの動画
より終了時刻が早い場合、カメラＡの最後の画像フレー
ムが表示された後、その表示枠の色を変化させ、再生終
了を知らせる。これにより、オペレータは再生開始また
は終了時刻の再設定を遅滞なく行うことができる。

【０２７２】（実施の形態１１）１１−１．本実施の形態における映像表示装置の動作概
要図３７は、本実施の形態における映像表示装置３７０の
構成を示すブロック図である。

【０２７３】上述した実施の形態９では、イベントが発
生したとき、そのイベントの重要性を示すイベント重要
度、イベントの発生時刻等に加え、被写体重要度も利用
して映像重要度を計算し、映像を表示していた。本実施
の形態における映像表示装置２５０は、イベント重要
度、イベントの発生時刻等に基づいて映像重要度を計算
し、被写体重要度を用いない。映像表示装置２５０は、
計算した映像重要度に基づいてイベント発生前後に撮影
された映像を表示する。

【０２７４】１１−２．本実施の形態における映像表示
装置の構成および動作（ａ）本実施の形態における映像表示装置の構成映像表示装置３７０は、複数のカメラ１１ａ〜１１ｎ
と、映像情報取得部１２と、映像重要度計算部１５と、
表示制御部１６と、表示部１７と、映像情報格納部９３
と、地図情報格納部９４と、地図情報読み出し部９５
と、操作部９６と、イベント発生検出部２５１とを含
む。映像表示装置２５０はさらに、イベント情報管理部
３７１と、イベント情報格納部３７２とを含む。

【０２７５】以下では、映像表示装置３７０の構成要素
のうち、実施の形態２における映像表示装置９０（図
９）の構成要素と同一の符号が付された構成要素につい
ては、映像表示装置９０（図９）の構成要素の構成およ
び機能と同一であるのでその説明は省略する。したがっ
て、以下では、イベント情報管理部３７１と、イベント
情報格納部３７２について説明する。他の構成要素につ
いて映像表示装置９０（図９）と異なる動作または追加
の動作が行われる場合には、その都度説明する。なお映
像表示装置９０（図９）の被写体情報管理部１３（図
９）および被写体情報格納部１４（図９）は、本実施の
形態における映像表示装置３７０には存在しない。被写
体情報を利用しないからである。

【０２７６】イベント情報管理部３７１は、イベント情
報を管理する。イベント情報とは、イベントの発生時
刻、イベントの種類、イベント重要度、映像との対応関
係を含む情報である。イベント情報管理部３７１は、イ
ベント発生検出部２５１によりイベント発生が検出さ
れ、イベント情報が送信されてくると、イベント情報を
設定しまたは変更する。イベント情報管理部３７１は、
設定しまたは変更したイベント情報をイベント情報格納
部３７２に格納する。

【０２７７】イベント情報格納部３７２は、発生したイ
ベントに関するイベント情報が格納される。イベント情
報格納部３７２は、イベント情報管理部３７１から、設
定されたイベント情報を受け取り、格納する。イベント
情報格納部３７２は、映像重要度計算部１５にイベント
情報を提供する。イベント情報格納部３７２は、ＲＡＭ
あるいはＲＯＭに代表される半導体メモリ、ハードディ
スク等の磁気記憶媒体を用いた記憶装置、光ディスク
等、公知のデータ記憶手段であり得る。

【０２７８】映像重要度計算部１５は、イベント情報お
よび表示規則に基づいて映像重要度を決定する。

【０２７９】図３８は、本実施の形態におけるイベント
情報の例を示す。

【０２８０】イベント情報は、イベントＩＤ、種類、発
生時刻および発生位置、そのイベントを撮影しているカ
メラＩＤ、イベント重要度等の情報を含む。

【０２８１】映像重要度計算部１５（図３７）は、イベ
ント情報のこれらの情報を利用して映像重要度を計算す
る。映像重要度の計算は、実施の形態９で説明した映像
重要度の計算と同じであるので、その説明は省略する。

【０２８２】映像重要度が計算されると、表示制御部１
６（図３７）はその映像重要度に基づいて映像の表示を
制御する。映像を表示する際には、これまでの実施の形
態で説明した表示規則を用いて、位置、時間、品質等の
制御を行うことができる。表示規則は適切に変更するこ
とができる。さらに、映像が静止画である場合または動
画である場合のいずれの場合でも、これまでの実施の形
態で説明した動作と同じ動作を行うことができるが、そ
の説明は省略する。

【０２８３】以上のように本実施の形態によれば、映像
重要度計算部１５（図３７）はイベント情報および表示
規則に基づいてイベント発生時刻と撮影時刻との時間関
係を用いて映像重要度を計算するので、イベントの発生
前後の状態を含むイベントに関する情報のみに基づいた
イベントの観察が可能になる。本実施の形態によれば、
実施の形態９では必要であった被写体情報は利用しない
ので、被写体情報の管理が不要になり、映像重要度の計
算処理を高速に行うことができる。

【０２８４】以上、各実施の形態について説明した。

【０２８５】フローチャートを用いて説明した処理手順
を始めとする本発明の映像表示装置の動作は、そのよう
に動作するように記述されたコンピュータプログラムと
しても実現され得る。そのようなコンピュータプログラ
ムは、光ディスク、フロッピーディスク等の磁気記憶媒
体、フラッシュＲＯＭ等の半導体記憶媒体等、適当な記
憶媒体に記録することができる。ここで、「記憶媒体」
の概念には、インターネット等の通信回線を介してコン
テンツを提供するコンピュータ等の記憶装置も含まれ
る。したがって、本発明の動作を実現するためのコンピ
ュータプログラムを格納し、そのプログラムを他の端末
に送信するためのサーバ等は、コンピュータプログラム
を記録した記憶媒体の範疇に含まれる。記憶媒体には、
例えば被写体情報は、図５に図示されるように、少なく
とも前記被写体の名称と、前記被写体が存在する位置
と、前記被写体重要度とをそれぞれを関連づけたデータ
構造として記録される。被写体情報にイベント情報が含
まれる場合にも、同様に上記実施の形態で説明したイベ
ントに関する情報もあわせて対応付けたデータ構造とし
て、記録媒体に記録される。図示された他の表示レイア
ウト情報（図８）、映像管理情報（図１２）、カメラ管
理情報（図３０）についても同様のデータ構造で記録さ
れ得る。

【０２８６】なお、被写体の位置座標およびカメラの位
置座標のいずれも、現実に存在する位置を特定できる情
報である。実施の形態１において図５を参照して説明し
たと同様に、位置座標は緯度および経度によって表され
ていてもよいし、またはその住所等によってあらわされ
ていてもよい。

【０２８７】

【発明の効果】以上説明したように、本発明によれば、
被写体それぞれの被写体重要度を含む被写体情報に基づ
いて、映像の映像重要度が計算され、その映像重要度に
基づいて映像が表示される。したがって、映像に含まれ
る被写体の重要性に応じた映像の表示が可能になる。オ
ペレータは、被写体の重要度を決定するだけで被写体の
重要性に応じた映像の表示をさせることができるので、
表示レイアウトを決定する煩雑な手間が不要になり、か
つ客観性のある映像表示を得ることができる。さらに、
表示規則を規定することにより、オペレータは重要なグ
ループほど長時間観察でき、画面内でも決められた重要
度の配置でみることができるといった、柔軟な映像表示
が実現される。

【０２８８】本発明によれば、重要な被写体あるいはそ
の被写体の近傍を撮影した映像を、地図上で撮影位置を
把握しながら見ることができるという視覚的効果を得る
ことができる。さらに、被写体の追加や削除、被写体の
重要度の変化に対しても被写体情報を修正するだけで対
応することができ、煩雑な表示レイアウト修正作業を省
略することができる。さらに、撮影した映像を一旦蓄積
して使用するため、被写体を同じ重要度で、または重要
度を変更して、繰り返し複数の映像を表示して観察する
ことができる。

【０２８９】本発明によれば、映像表示中であっても、
被写体情報管理部１３（図１６）は、入力部１６１（図
１６）や外部モジュール１６２（図１６）からの要求に
従い、被写体情報に含まれる被写体重要度を変更する。
表示制御部１６（図１６）は、被写体情報の変更が反映
された結果変更された映像重要度に応じて、複数の映像
の表示を自動的に変更する。したがって、注目すべき被
写体の種類や位置などが状況に応じて変化する場合で
も、映像重要度の高い映像が自動的に選択表示され、オ
ペレータは素早く的確な被写体観察ができる。

【０２９０】本発明によれば、表示規則と映像重要度と
に基づいて、表示制御部１６（図１、９、１６）が映像
の強調表示の度合いを変化させて表示するようにしたの
で、重要な映像ほど大きく表示する、または重要な映像
を表示するウインドウの枠の色を目立つようにする等、
被写体の重要性をより意識して観察することができる。

【０２９１】本発明によれば、表示制御部は表示規則お
よび映像重要度に基づいてフレームレートや解像度等の
映像品質の度合いを変化させて表示するよう映像の表示
を制御する。したがって映像重要度の高い映像（すなわ
ち重要な映像）がより見やすくかつ緻密に表示されるの
で、オペレータは自然と重要な映像を注視することがで
きる。さらに、比較的映像重要度が低い映像（すなわち
比較的重要でない映像）は画像フレームが間引かれて表
示されるので、映像表示装置にかかる表示処理の負荷は
軽くなり、比較的安価な処理回路を用いても映像表示装
置を製造することができる。したがって、映像表示装置
の製造コストを低く抑えることができる。

【０２９２】本発明によれば、表示制御部は表示規則お
よび映像重要度に基づいてフレームレートや解像度等の
映像品質の度合いを変化させて表示するよう映像の表示
を制御する。したがって映像重要度の高い映像（すなわ
ち重要な映像）がより見やすくかつ緻密に表示されるの
で、オペレータは自然と重要な映像を注視することがで
きる。さらに、比較的映像重要度が低い映像（すなわち
比較的重要でない映像）は画像フレームが間引かれて表
示されるので、映像表示装置にかかる表示処理の負荷を
軽くすることができ、比較的安価な処理回路を用いても
映像表示装置を製造することができる。したがって、映
像表示装置の製造コストを低く抑えることができる。

【０２９３】さらに、映像サーバと映像表示端末とがネ
ットワークで接続された構成であっても、ネットワーク
上は表示に必要な映像品質の情報しか伝送されないた
め、ネットワーク資源やサーバおよび端末の計算機資源
を有効に利用することができる。それらの資源が有する
伝送帯域や処理速度等の性能に応じてその性能を超えな
いよう映像に映像品質を設定することにより、そのネッ
トワークベースの映像表示装置が有する能力を最大限使
った品質のよい複数の映像を表示することができる。

【０２９４】本発明によれば、動画であっても、１枚の
映像の中で注目すべき箇所をより明確に表示することが
できる。

【０２９５】本発明によれば、被写体として地点や地域
といった撮影対象空間における部分空間も含むようにし
たので、建物等の物体だけでなく、町名や地図上での位
置などで特定される空間を撮影した映像を優先的に表示
することができる。

【０２９６】本発明によれば、映像管理情報に映像の撮
影時刻を記述し、被写体情報にある時刻に発生したイベ
ントに関するイベント情報を記述し、これらに基づいて
映像重要度計算部が映像重要度を計算するので、被写体
そのものの重要度だけでなく、被写体に発生したセンサ
異常等のイベントの重要度に従い、対応する映像を優先
的に表示することができる。これにより、素早く的確に
イベントを観察することができる。さらにイベント発生
時刻の近傍はより強調して表示するなどにより、映像の
重要性を時間的に意識して観察することができる。

【０２９７】本発明によれば、撮影時刻毎に動画をなす
画像フレームの映像重要度を計算し、表示制御部が重要
度に従って表示サイズを決めて同期して表示するように
したので、一つのカメラでは撮影できないイベントの周
辺状況を見やすく表示することができる。さらに、例え
ばカメラが移動した場合、または異なる時間に異なる位
置で複数のイベントが発生する場合に対しても、全体の
状況を広い視点で表示するので時間的・空間的に容易に
把握することができる。

【０２９８】本発明によれば、映像重要度計算部はイベ
ント情報および表示規則に基づいてイベント発生時刻と
撮影時刻との時間関係を用いて映像重要度を計算するの
で、イベントの発生前後の状態を含むイベントに関する
情報のみに基づいたイベントの観察が可能になる。さら
に被写体情報を利用することなく映像重要度を計算する
ことにより、被写体情報の管理が不要になり、映像重要
度の計算処理を高速に行うことができる。

【図面の簡単な説明】

【図１】実施の形態１における映像表示装置１０の構
成を示すブロック図を示す。

【図２】映像表示装置１０（図１）の処理動作により
表示される映像の態様の一例を示す図である。

【図３】同じ重要度のグループにおける映像の表示位
置を示す例を示す図である。

【図４】映像表示装置１０（図１）の動作手順を表す
フローチャートを示す図である。

【図５】被写体情報の例を示す図である。

【図６】計算された映像重要度の例を示す図である。

【図７】表示レイアウトを決定するステップを含む、
映像表示装置１０（図１）の動作手順を表すフローチャ
ートを示す図である。

【図８】表示レイアウト情報の例を示す図である。

【図９】実施の形態２における映像表示装置９０の構
成を示すブロック図を示す図である。

【図１０】地図とその地図に関連づけられて表示され
た映像を示す図である。

【図１１】映像表示装置９０（図９）の動作手順を表
すフローチャートを示す図である。

【図１２】映像管理情報の例を示す図である。

【図１３】カメラの撮影位置、方向およびズーム画角
と被写体の位置関係を示す図である。

【図１４】被写体がカメラレンズを通して撮像される
図である。

【図１５】撮影範囲と被写体の関係と撮影状態を示す
図である。

【図１６】実施の形態３における映像表示装置１６０
の構成を示すブロック図である。

【図１７】映像表示装置１６０（図１６）の動作手順
を表すフローチャートを示す図である。

【図１８】映像重要度の高い映像ほど表示サイズを大
きくする表示画面の例を示す図である。

【図１９】映像重要度に応じて映像の強調度（表示サ
イズ）を変更するための表示規則の例を示す図である。

【図２０】映像重要度の順番にしたがって映像の表示
品質を変更するための表示規則の例を示す図である。

【図２１】実施の形態６における映像表示装置２１０
の構成を示すブロック図である。

【図２２】映像表示装置２１０（図２１）の動作手順
を表すフローチャートを示す図である。

【図２３】３つの被写体を撮影するカメラと、本実施
の形態による処理を施されて表示された被写体の例を示
す図である。

【図２４】空間を被写体として定義した被写体情報の
例を示す図である。

【図２５】実施の形態９における映像表示装置２５０
の構成を示すブロック図である。

【図２６】カメラＡ，ＢおよびＣの位置とイベントＥ
が発生した位置の位置関係を示す図である。

【図２７】実施の形態９における、イベントが発生し
た時に表示される複数の映像の例を示す図である。

【図２８】イベント情報を含む被写体情報の例を示す
図である。

【図２９】イベント重要度関数Ｗｅ（ｔ）の例を示す
図である。

【図３０】カメラ管理情報の例を示す図である。

【図３１】イベント重要度関数の例を示す図である。

【図３２】実施の形態１０における、イベントの発生
に応じて表示される複数の映像の例を示す図である。

【図３３】映像表示装置２５０（図２５）の動作手順
を表すフローチャートである。

【図３４】再生時刻とイベント発生時刻との時間差に
応じて配列された画像フレームの集合とイベント重要度
関数との対応関係を示す図である。

【図３５】異なる時刻に発生した２つのイベントとそ
のイベントを撮影するカメラの位置関係を示す図であ
る。

【図３６】イベントＥおよびＦが発生したときに用い
られるイベント重要度関数の例を示す図である。

【図３７】実施の形態１１における映像表示装置３７
０の構成を示すブロック図である。

【図３８】実施の形態１１におけるイベント情報の例
を示す図である。

【図３９】従来の映像表示装置３９０の構成を示すブ
ロック図である。

【図４０】映像情報取得部３９２と表示制御部３９５
の具体的な構成を示すブロック図である。

【図４１】従来の映像表示装置３９０（図３９）にお
いて表示レイアウト情報を設定するための操作画面の例
を示す図である。

【図４２】従来の別の映像表示装置システム４２０の
構成を示すブロック図である。

【図４３】優先順位決定部４２４（図４２）が管理す
る表示優先順位情報の例を示す図である。

【符号の説明】

１０映像表示装置、１２映像情報取得部、１３被
写体情報管理部、１４被写体情報格納部、１５映像重
要度計算部、１６表示制御部、１７表示部、９２
映像情報読み出し部、９３映像情報格納部、１６１
入力部、２５１イベント発生検出部、３７１イベント
情報管理部、３７２イベント情報格納部

Claims

【特許請求の範囲】

【請求項１】撮影された空間に存在する被写体と前記
被写体の重要性を表す被写体重要度との対応関係を含む
被写体情報を管理する被写体情報管理部と、前記被写体情報管理部によって管理される前記被写体情
報に基づいて、前記映像の重要性を表す映像重要度を計
算する映像重要度計算部と、前記空間を撮影した映像の情報を、映像情報として取得
する映像情報取得部と、少なくとも前記映像重要度計算部によって計算された前
記映像重要度に基づいて、前記映像情報取得部によって
取得された前記映像情報が表す前記映像の表示を制御す
る表示制御部と、前記表示制御部の制御にしたがって前記映像を表示する
表示部とを備えた映像表示装置。
【請求項２】前記映像表示装置は、前記映像情報を格納する映像情報格納部をさらに備え、前記映像情報取得部は、前記映像情報格納部から前記映
像情報を読み出すことによって前記映像情報を取得す
る、請求項１に記載の映像表示装置。
【請求項３】前記映像表示装置は、新たな被写体重要
度が入力される入力部をさらに備え、前記被写体情報管理部は、前記入力部からの入力に応答
して、前記被写体重要度を入力された前記新たな被写体
重要度に変更して保持することにより管理し、前記映像重要度計算部は、前記被写体情報管理部による
前記新たな被写体重要度の保持に応答して、保持された
被写体重要度に基づいて映像重要度を計算する、請求項
１または２に記載の映像表示装置。
【請求項４】前記被写体は、前記空間に含まれる部分
的な空間である、請求項１または２に記載の映像表示装
置。
【請求項５】前記映像情報は、前記映像を撮影した時
刻に関する撮影時刻情報を含み、前記被写体情報は、前記被写体に発生したイベントと前
記イベントが発生した時刻を表すイベント発生時刻とに
関するイベント情報を含み、前記映像重要度計算部は、さらに前記イベント情報と前
記撮影時刻情報とに基づいて前記映像重要度を計算す
る、請求項１または２に記載の映像表示装置。
【請求項６】空間を撮影した映像の情報と前記映像を
撮影した時刻に関する撮影時刻情報とを格納する映像情
報格納部と、前記映像情報格納部から前記映像情報を読み出す映像情
報読み出し部と、前記空間で発生したイベントと、前記イベントが発生し
た発生時刻、前記イベントの重要性を表すイベント重要
度および前記映像との対応関係を含むイベント情報を管
理するイベント情報管理部と、前記イベント情報管理部によって管理される前記イベン
ト情報と前記映像情報格納部に格納された前記撮影時刻
情報とに基づいて、前記映像重要度を計算する映像重要
度計算部と、少なくとも前記映像重要度計算部によって計算された前
記映像重要度に基づいて、前記映像情報が表す映像の表
示を制御する表示制御部と前記表示制御部の制御にした
がって前記映像を表示する表示部とを備えた、映像表示
装置。
【請求項７】前記映像は、前記空間を複数の視点から
撮影した複数の映像であって、前記映像重要度計算部は、前記複数の映像のそれぞれに
ついて前記映像重要度を計算し、前記表示制御部は、少なくとも前記映像重要度計算部に
よって計算された前記映像重要度に基づいて、前記複数
の映像それぞれの表示を制御する、請求項１、２または
６に記載の映像表示装置。
【請求項８】前記表示制御部は、前記映像重要度計算
部によって計算された前記映像重要度と前記映像を表示
する規則を規定する表示規則とに基づいて、前記複数の
映像それぞれの表示を制御する、請求項１、２、６また
は７に記載の映像表示装置。
【請求項９】前記表示規則は、前記映像が表示される
位置、時間、順序または大きさを規定する、請求項８に
記載の映像表示装置。
【請求項１０】前記表示制御部は、前記複数の映像の
それぞれについて前記映像重要度計算部によって計算さ
れた前記映像重要度と、前記映像重要度に応じて適用さ
れる表示規則とに基づいて、前記複数の映像それぞれを
強調表示するよう表示を制御する、請求項８に記載の映
像表示装置。
【請求項１１】前記表示制御部は、前記複数の映像の
それぞれについて前記映像重要度計算部によって計算さ
れた前記映像重要度と、前記映像重要度に応じて適用さ
れる表示規則とに基づいて、前記複数の映像のそれぞれ
の品質を決定し、決定された前記品質で前記複数の映像
それぞれの表示を制御する、請求項８に記載の映像表示
装置。
【請求項１２】前記表示規則は変更可能である、請求
項８または９に記載の映像表示装置。
【請求項１３】前記映像は画像フレームから構成さ
れ、前記画像フレームは２以上の領域を含み、前記映像重要度計算部は、前記２以上の領域のそれぞれ
について前記映像重要度を計算し、前記表示制御部は、前記映像重要度計算部によって計算
された前記映像重要度に基づいて、前記２以上の領域の
それぞれを表示する態様を決定して前記画像フレームの
表示を制御する、請求項１、２または６に記載の映像表
示装置。
【請求項１４】前記映像は、第１の時刻に撮影された
第１の映像と、第２の時刻に撮影された第２の映像を含
み、前記映像重要度計算部は、前記第１の映像の映像重要度
である第１映像重要度と、前記第２の映像の映像重要度
である第２映像重要度とを計算し、前記表示制御部は、前記映像を表示するための規則を規
定する表示規則と前記映像重要度計算部によって計算さ
れた前記第１映像重要度および第２映像重要度とに基づ
いて前記映像を表示する態様を決定し、撮影された時刻
に基づいて前記第１の映像と前記第２の映像とが同期す
るよう表示を制御する、請求項５または６に記載の映像
表示装置。
【請求項１５】前記表示制御部は、前記複数の映像の
それぞれが撮影された位置と前記映像重要度計算部によ
って計算された前記映像重要度とに基づいて前記複数の
映像それぞれの表示を制御する、請求項７に記載の映像
表示装置。
【請求項１６】前記映像は静止画である、請求項１、
２または６に記載の映像表示装置。
【請求項１７】前記映像は動画である、請求項１、２
または６に記載の映像表示装置。
【請求項１８】前記第１の時刻と前記第２の時刻と
は、同一の時刻である、請求項１４に記載の映像表示装
置。
【請求項１９】撮影された空間に存在する被写体と前
記被写体の重要性を表す被写体重要度との対応関係を含
む被写体情報を管理するステップと、前記被写体情報に基づいて、前記映像の重要性を表す映
像重要度を計算するステップと、前記空間を撮影した映像の情報を、映像情報として取得
するステップと、少なくとも前記映像重要度に基づいて、前記映像情報が
表す前記映像の表示を制御するステップと、前記映像の表示の制御にしたがって前記映像を表示する
ステップとを包含する映像表示方法。
【請求項２０】前記映像表示方法は、前記映像情報を格納するステップをさらに包含し、前記映像情報を取得するステップは、格納された前記映
像情報を読み出すことによって、前記映像情報を取得す
るステップである、請求項１９に記載の映像表示方法。
【請求項２１】前記映像表示方法は、新たな被写体重
要度を入力するステップをさらに包含し、前記被写体情報を管理するステップは、前記新たな被写
体重要度を入力するステップによる入力に応答して、前
記被写体重要度を入力された前記新たな被写体重要度に
変更して保持することにより管理するステップであり、前記映像重要度を計算するステップは、前記新たな被写
体重要度の保持に応答して、保持された被写体重要度に
基づいて映像重要度を計算するステップである、請求項
１９または２０に記載の映像表示方法。
【請求項２２】前記映像情報は、前記映像を撮影した
時刻に関する撮影時刻情報を含み、前記被写体情報は、前記被写体に発生したイベントと前
記イベントが発生した時刻を表すイベント発生時刻とに
関するイベント情報を含み、前記映像重要度を計算するステップは、さらに前記イベ
ント情報と前記撮影時刻情報とに基づいて前記映像重要
度を計算するステップである、請求項１９または２０に
記載の映像表示方法。
【請求項２３】空間を撮影した映像の情報と前記映像
を撮影した時刻に関する撮影時刻情報とを格納するステ
ップと、格納された前記映像情報を読み出すステップと、前記空間で発生したイベントと、前記イベントが発生し
た発生時刻、前記イベントの重要性を表すイベント重要
度および前記映像との対応関係を含むイベント情報を管
理するステップと、管理された前記イベント情報と格納された前記撮影時刻
情報とに基づいて、前記映像重要度を計算するステップ
と、少なくとも計算された前記映像重要度に基づいて、前記
映像情報が表す映像の表示を制御するステップと前記制
御にしたがって前記映像を表示するステップとを包含す
る、映像表示方法。
【請求項２４】前記映像は画像フレームから構成さ
れ、前記画像フレームは２以上の領域を含み、前記映像重要度を計算するステップは、前記２以上の領
域のそれぞれについて前記映像重要度を計算するステッ
プであり、前記表示を制御するステップは、計算された前記映像重
要度に基づいて、前記２以上の領域のそれぞれを表示す
る態様を決定して前記画像フレームの表示を制御するス
テップである、請求項１９、２０または２３に記載の映
像表示方法。
【請求項２５】前記映像は、第１の時刻に撮影された
第１の映像と、第２の時刻に撮影された第２の映像を含
み、前記映像重要度を計算するステップは、前記第１の映像
の映像重要度である第１映像重要度と、前記第２の映像
の映像重要度である第２映像重要度とを計算するステッ
プであり、前記表示を制御するステップは、前記映像を表示するた
めの規則を規定する表示規則と計算された前記第１映像
重要度および第２映像重要度とに基づいて前記映像を表
示する態様を決定し、撮影された時刻に基づいて前記第
１の映像と前記第２の映像とが同期するよう表示を制御
するステップである、請求項２２または２３に記載の映
像表示方法。
【請求項２６】撮影された空間に存在する被写体と前
記被写体の重要性を表す被写体重要度との対応関係を含
む被写体情報を管理するステップと、前記被写体情報に基づいて、前記映像の重要性を表す映
像重要度を計算するステップと、前記空間を撮影した映像の情報を、映像情報として取得
するステップと、少なくとも前記映像重要度に基づいて、前記映像情報が
表す前記映像の表示を制御するステップと、前記映像の表示の制御にしたがって前記映像を表示する
ステップとを含むコンピュータプログラムを記録した記
録媒体。
【請求項２７】前記映像表示方法は、前記映像情報を格納するステップをさらに包含し、前記映像情報を取得するステップは、格納された前記映
像情報を読み出すことによって、前記映像情報を取得す
るステップである、請求項２６に記載の記録媒体。
【請求項２８】前記映像表示方法は、新たな被写体重
要度を入力するステップをさらに包含し、前記被写体情報を管理するステップは、前記新たな被写
体重要度を入力するステップによる入力に応答して、前
記被写体重要度を入力された前記新たな被写体重要度に
変更して保持することにより管理するステップであり、前記映像重要度を計算するステップは、前記新たな被写
体重要度の保持に応答して、保持された被写体重要度に
基づいて映像重要度を計算するステップである、請求項
２６または２７に記載の記録媒体。
【請求項２９】前記映像情報は、前記映像を撮影した
時刻に関する撮影時刻情報を含み、前記被写体情報は、前記被写体に発生したイベントと前
記イベントが発生した時刻を表すイベント発生時刻とに
関するイベント情報を含み、前記映像重要度を計算するステップは、さらに前記イベ
ント情報と前記撮影時刻情報とに基づいて前記映像重要
度を計算するステップである、請求項２６または２７に
記載の記録媒体。
【請求項３０】空間を撮影した映像の情報と前記映像
を撮影した時刻に関する撮影時刻情報とを格納するステ
ップと、格納された前記映像情報を読み出すステップと、前記空間で発生したイベントと、前記イベントが発生し
た発生時刻、前記イベントの重要性を表すイベント重要
度および前記映像との対応関係を含むイベント情報を管
理するステップと、管理された前記イベント情報と格納された前記撮影時刻
情報とに基づいて、前記映像重要度を計算するステップ
と、少なくとも計算された前記映像重要度に基づいて、前記
映像情報が表す映像の表示を制御するステップと前記制
御にしたがって前記映像を表示するステップとを含むコ
ンピュータプログラムを記録した記録媒体。
【請求項３１】前記映像は画像フレームから構成さ
れ、前記画像フレームは２以上の領域を含み、前記映像重要度を計算するステップは、前記２以上の領
域のそれぞれについて前記映像重要度を計算するステッ
プであり、前記表示を制御するステップは、計算された前記映像重
要度に基づいて、前記２以上の領域のそれぞれを表示す
る態様を決定して前記画像フレームの表示を制御するス
テップである、請求項２６、２７または３０に記載の記
録媒体。
【請求項３２】前記映像は、第１の時刻に撮影された
第１の映像と、第２の時刻に撮影された第２の映像を含
み、前記映像重要度を計算するステップは、前記第１の映像
の映像重要度である第１映像重要度と、前記第２の映像
の映像重要度である第２映像重要度とを計算するステッ
プであり、前記表示を制御するステップは、前記映像を表示するた
めの規則を規定する表示規則と計算された前記第１映像
重要度および第２映像重要度とに基づいて前記映像を表
示する態様を決定し、撮影された時刻に基づいて前記第
１の映像と前記第２の映像とが同期するよう表示を制御
するステップである、請求項２９または３０に記載の記
録媒体。
【請求項３３】前記被写体情報は、少なくとも前記被
写体の名称と、前記被写体が存在する位置と、前記被写
体重要度とをそれぞれを関連づけて格納したデータ構造
を有する、請求項２６または２７に記載の記録媒体。