JP3789121B2 - 表示方法および表示装置 - Google Patents

Description

この発明は、カメラで撮影した映像に基づいて部分的に映像を切り出し、この切り出した部分映像をモニタに表示する技術に関する。

近年、監視カメラと表示装置を備えた撮影監視システムが、商業分野や金融機関等において、防犯等の目的のため、広く利用されている。
そして、この撮影監視システムではカメラから入力される監視領域全体の映像とともに、この全体映像中にある対象物の拡大映像を取得し、監視精度を高めたいといった要求がある。
従来技術では、監視領域全体の映像を取得するための広角カメラを設置するとともに、監視領域内の１区画についての拡大映像を取得するためのカメラを監視領域内の各区画（複数）に設置し、広角カメラで撮影した全体映像に基づいて着目したい部分があれば、その区画に設置されたカメラで撮影した拡大映像を取得し、監視領域全体の映像と、対象物の拡大映像とを取得するといった、複数カメラによる撮影監視システムが用いられていた。
しかし、複数のカメラを必要とする撮影監視システムでは、装置コスト、設置工事、メンテナンス、カメラ設置スペースなどの問題を抱えており、シンプルな構成が求められていた。

そして近年、高解像度ＣＣＤカメラの出現により、１台の高解像度・広角カメラで高解像度の広角映像を取得することが可能となり、１台のカメラから取得した高解像度の映像から、目的とする部分の映像（部分映像）を切り出してモニタに対象物の拡大映像を表示する技術が開発された。（例えば、特許文献１を参照）
特願２００２−１６７３１０

１台のカメラから取得した高解像度の全体映像に基づいて対象物の拡大映像をモニタに表示する場合、目的とする対象物の位置（アドレス）を検出し、これに基づいて全体映像から部分的に映像を切り出し、対象物の拡大映像をモニタに表示する。
しかし全体映像から対象物の映像を部分的に切り出し（複数）、これら部分切り出し映像をモニタに並列表示するにあたって、各対象物の中心アドレスに基づいて映像を自動的に切り出すと、対象物の大小（高低）差によって切り出し部分が不揃いであり、特にモニタに並列表示した場合、この不揃いな切り出し映像による影響が顕著であった。
例えば、複数の人物を撮影した全体映像から、対象となる２人の映像を切り出し、この２人をモニタに並列表示した場合、２人の背の高さの違いによって、一方が他方を見下ろすような違和感がある映像になっていた。

なお、この不揃いな映像の切り出しを解消するために、各対象物の映像サイズ（高さや大きさ）を揃えるように拡大縮小処理し、このサイズを合わせた映像を並列表示する方法も考えられるが、監視映像のように連続入力される映像について拡大縮小をリアルタイムで行うと計算量が大きく、またサイズ変換による画質低下の虞があった。

上述の目的を達成するため、この発明は、カメラで撮影した高解像度・広角映像の全体映像を、同期信号検出部で検出した前記映像のアドレスに基づいてメモリに入力し格納するとともに、前記カメラで撮影した映像に基づいて対象物を検出し、この対象物の外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなる基準点を取得した後、前記基準点と表示サイズに基づいて切り出し部分を決定し、メモリに格納されている映像から前記切り出し部分を切り出してモニタへ出力し、この切り出した部分映像をモニタに表示する方法において、前記カメラで撮影した全体映像に基づいて複数の対象物を検出し、この各対象物の基準点をそれぞれ取得した後、各基準点と表示サイズに基づいてメモリに格納されている映像から各対象物の映像をそれぞれ部分的に切り出し、さらに各切り出し映像をモニタの表示画面に設定した分割画面にそれぞれ表示することによって、モニタに対象物の映像を並列表示するとともに、各対象物の映像上の位置が互いに近接した場合は、モニタの表示画面を再構築して結合画面を設定するとともに、それぞれの対象物の基準点をもとに新たな基準点を設定し、この新たな基準点をもとに、前記近接した対象物の映像を包括して切り出し、前記結合画面に表示する。

またこの発明による表示装置によれば、カメラで撮影した映像を格納するメモリと、前記映像のアドレスを検出する同期信号検出部と、前記カメラで撮影した映像から対象物を検出する対象検出部と、検出した対象物の外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなる基準点を取得する基準点抽出部と、前記基準点と、モニタへの表示サイズに基づいて切り出し部分を決定する切り出し表示制御部と、前記切り出し表示制御部の制御により、メモリに格納されている映像信号から部分的に映像を切り出し、この切り出した部分映像の映像信号をメモリから出力させる切り出し部と、メモリから出力された映像信号に基づいて映像を表示するモニタとを備え、前記カメラで撮影した全体映像に基づいて複数の対象物が検出され、この各対象物の切り出し映像が、モニタの表示画面に設定された複数の分割画面にそれぞれ表示されて、モニタに各対象物の映像が並列表示されるとともに、各対象物の映像上の位置が互いに近接した場合は、モニタの表示画面が再構築されて結合画面が設定されるとともに、それぞれの対象物の基準点をもとに新たな基準点が設定され、この新たな基準点をもとに、前記近接した対象物の映像が包括して切り出され、前記結合画面に表示されるものである。

本発明の表示方法および表示装置では、常に対象物の頭位置の高さを一定にした切り出し映像がモニタに表示され、対象物の高低差や大小差による影響を低減することができる。
従来の表示方法では、並列表示するにあたって対象物の大きさを揃えて表示していたため、サイズ変換による計算量が多く、画質も劣化する虞があるが、本発明のように頭位置の高さを揃えて並列表示する表示方法では、多大な計算や画質劣化を伴うことなく、対象物の高低差や大小差による影響を低減することができる。特に、高低差や多少の大小差の場合は、対象物の大きさを揃えなくても違和感なく並列表示することができる。

この発明による表示方法及び表示装置の第１実施例について、図１から図５を参照して説明する。

図１は、この発明の実施例による表示装置のブロック図を示すものである。
この実施例による表示装置では、カメラ１から高解像度・広角映像を取得し、この映像信号を２ポートメモリ２に格納する。このとき、同期信号検出部３で検出された前記映像のアドレスに基づいて、メモリ２に映像信号が格納される。

またこの表示装置によれば、カメラ１で撮影した映像から対象物を検出する対象検出部４を備える。
対象物の位置を自動検出する手段としては、クロマキーや動き検出を用いる方法がある。

なお図１に示す表示装置を撮影監視システムに用いる場合、カメラ１によって監視領域全体を撮影し、同期信号検出部３で検出した前記映像のアドレスに基づいて、２ポートメモリ２に監視領域全体の高解像度・広角映像を入力し格納するとともに、対象検出部４において、前記カメラ１で撮影した映像から、例えば動き検出等により対象物を検出する。

そして基準点抽出部５において、前記対象検出部４で検出した対象物の外接矩形の中心のＸ座標と、外接矩形の上端のＹ座標からなる基準点Ｐを求める（図２（ａ）参照）。

その後、切り出し表示制御部６において、前記基準点Ｐとモニタ８の表示画面への表示サイズに基づいて、ＸＬ（Ｘ方向の切り出しサイズ）とＹＬ（Ｙ方向の切り出しサイズ）とからなる切り出し部分を求める（図２（ｂ）参照）。

上述したように、切り出し表示制御部６は基準点Ｐに基づいて切り出し部分を計算する。
例えば、カメラで撮影した全体映像をしきい値処理するとともに、クロマキーや動き検出等によって対象物を検出し、その後、前記２値画像から対象物の外接矩形を求め、この外接矩形の中心のＸ座標と外接矩形上端のＹ座標からなる基準点Ｐを求める。そして前記基準点Ｐと表示サイズに基づいて、ＸＬ（Ｘ方向の切り出しサイズ）とＹＬ（Ｙ方向の切り出しサイズ）とからなる切り出し部分を計算する。
このとき、ＸＬの中央に基準点Ｐが位置するとともに、ＹＬの上端と基準点Ｐが一定の距離を保持するように切り出し部分を決定する。これによって人物などを対象物とした場合、頭位置が一定の切り出し映像を取得することができる。

そして、この切り出し表示制御部６によって制御された切り出し部７によって、２ポートメモリ２に格納されている全体映像（カメラ１による撮影映像）について、アドレスに基づいて部分的に映像を切り出し（基準点Ｐに基づいて決定したＸＬ、ＹＬとからなる「切り出し部分」（矩形）を切り出し）、この切り出した映像をモニタ８の表示画面に出力する。

すなわち図３に示すように、２ポートメモリ２に格納されている全体映像から、切り出し表示制御部６で決定した切り出し部分（切り出しサイズがＸＬ，ＹＬの矩形）の映像を切り出し、この部分切り出し映像をモニタ８に出力する。
このとき、対象物Ｔの外接矩形の中心のＸ座標と外接矩形上端のＹ座標とからなる基準点Ｐが、切り出しサイズＸＬの中央に位置するとともに、この基準点Ｐと切り出しサイズＹＬの上端とが一定の距離ｈを保持するように、全体映像から部分的に映像を切り出す。
これによって、例えば全体映像から人物を対象物として部分的に映像を切り出し、モニタに表示した場合、人物の頭位置が上から距離ｈを維持した状態で常に表示されることとなる。

次に、カメラ１で撮影した全体映像から複数の対象物を検出し、これら各対象物についての部分切り出し映像を、それぞれモニタに並列表示する方法について説明する。

複数の対象物を並列表示するにあたっては、並列配置された複数のモニタ、または表示画面が複数に分割されるとともに、この分割画面が並列配置されたモニタを使用し、これらのモニタの表示画面に対象物についての部分切り出し映像をそれぞれ表示する。

例えば、カメラ１で撮影した全体映像に基づいて２つの対象物を検出し、その切り出し映像をそれぞれ表示する場合、並列配置された２つのモニタ、または表示画面が２つに分割され並列配置されたモニタを使用し、２つのモニタの各表示画面、若しくは１つのモニタに構築されている２分割画面に、各対象物についての切り出し映像を並列表示する。

検出した複数の対象物についての切り出し映像を取得する場合、カメラ１で撮影した映像を、同期信号検出部３で検出した前記映像のアドレスに基づいてメモリ２に入力し格納するとともに、カメラ１で撮影した映像に基づいて、対象検出部４で複数の対象物を検出する。
そして、基準点抽出部５において前記対象検出部４で検出した各対象物の基準点をそれぞれ取得する。
なお基準点Ｐは、対象物の外接矩形を求め、この外接矩形の中心のＸ座標と外接矩形上端のＹ座標とから求める。

その後、切り出し表示制御部６において、前記各基準点と表示サイズに基づいてそれぞれの切り出し部分を決定し、この切り出し表示制御部６の制御によって、切り出し部７がメモリ２に格納されている映像（全体映像）から部分的に映像（複数）を切り出す。

こうして切り出された各対象物の切り出し映像がメモリ２から出力され、これら切り出し映像を並列表示するための手段によって、各映像の映像信号が各モニタ若しくは１つのモニタに構築された各分割画面に分配され、それぞれの対象物の映像を切り出した部分切り出し映像が並列表示される。

なお、基準点抽出部５で取得した各基準点のＸ座標を比較することによって、各対象物の左右関係を求めるとともに、前記各対象物の左右関係と、モニタの左右関係若しくはモニタの分割画面の左右関係とを一致させる手段を設けることによって、対象物の位置関係にあわせてモニタに各対象物を並列表示することができる。

図４は、複数の対象物をモニタに並列表示するにあたって、対象物に高低差がある場合の表示方法について説明するものである。

図４（ａ）に示すように、カメラから取得した全体映像から高さの異なる対象物Ｔ_１と対象物Ｔ_２について（対象物Ｔ_１の高さＨ_１＞対象物Ｔ_２の高さＨ_２）、それぞれ部分的に映像を切り出し、前記各部分切り出し映像をモニタに並列表示するにあたって、これら対象物の外接矩形の中心のＸ座標と外接矩形上端のＹ座標とからなる基準点Ｐと表示サイズに基づいて映像を切り出し、図４（ｂ）に示すように、対象物Ｔ_１と対象物Ｔ_２の頭の位置を揃えて並列表示した場合、対象物の高低差による影響を低減することができる。
一方、対象物Ｔ_１と対象物Ｔ_２のそれぞれの中心と表示サイズに基づいて映像を切り出して並列表示した場合、図４（ｃ）に示すように、対象物の高低差によって不揃いに切り出され、対象物Ｔ_１が対象物Ｔ_２を見下したように並列表示されることになる。

図５は、複数の対象物をモニタに並列表示するにあたって、対象物に大小差がある場合の表示方法について説明するものである。

図５（ａ）に示すように、カメラから取得した全体映像において遠近がある場合、近くの対象物Ｔ_３と遠くの対象物Ｔ_４では大きさが異って表示される（対象物Ｔ_３＞対象物Ｔ_４となって表示される）。
この大きさの異なる対象物Ｔ_３と対象物Ｔ_４について、それぞれ部分的に映像を切り出し、前記各部分切り出し映像をモニタに並列表示するにあたって、これら対象物の外接矩形の中心のＸ座標と外接矩形上端のＹ座標とからなる基準点Ｐと表示サイズに基づいて映像を切り出し、図５（ｂ）に示すように、対象物Ｔ_３と対象物Ｔ_４の頭の位置を揃えて並列表示した場合、監視者（観察者）は目線を変化させることなく２つの対象物を見ることができ、対象物の大小差による影響を低減することができる。
一方、対象Ｔ_３と対象Ｔ_４について、それぞれの肩位置を揃えて並列表示した場合、図５（ｃ）に示すように、対象物の大小差によって、監視者（観察者）は目線を変化させながら２つの対象物を見なければならない。

上述したように、本発明による表示方法では、監視者（観察者）は目線を変化させることなく、並列表示された複数の対象物を観察することができ、監視者（観察者）の労力を低減させることができる。

次に、この発明による表示方法の第２実施例について図６を参照して説明する。
この実施例による表示方法は、複数の分割画面を設定したモニタに、検出した対象物の映像をそれぞれ表示し、１つのモニタに複数の対象物の映像を並列表示する表示方法において、各対象物の位置が互いに近接した場合は、モニタの画面を再構築して結合画面を設定するとともに、前記近接した対象物の映像を包括して切り出し、前記モニタの結合画面に表示するものである。

表示画面が複数に分割され、かつ各分割画面（表示サイズ＝ｌ×ｍ）が並列配置されたモニタに、対象物の映像を表示するにあたって、この実施例でも実施例１と同様にして、検出された各対象物について、対象物の外接矩形の中心のＸ座標と外接矩形上端のＹ座標からなる基準点Ｐを求める。

図６（ｂ）に示すように、検出した２つの対象物Ｔ_５，Ｔ_６をモニタに設定した分割画面（表示サイズ＝ｌ×ｍ）にそれぞれ表示するにあたって、２つの対象物Ｔ_５，Ｔ_６がそれぞれ離れた位置にある場合は、先に説明した実施例１と同様に、対象物Ｔ_５の外接矩形ａの中心のＸ座標とその上端のＹ座標からなる基準点Ｐａ（ｘａ，ｙａ）を求め、モニタに設定されている分割画面の表示サイズ（ｌ×ｍ）と前記基準点Ｐａとに基づいて、切り出し部分ａ（切り出しサイズ＝ＸＬ×ＹＬ）を決定するとともに、対象物Ｔ_６の外接矩形ｂの中心のＸ座標とその上端のＹ座標からなる基準点Ｐｂ（ｘｂ，ｙｂ）を求め、モニタに設定されている分割画面の表示サイズ（ｌ×ｍ）と前記基準点Ｐｂとに基づいて、切り出し部分ｂ（切り出しサイズ＝ＸＬ×ＹＬ）を決定し、それぞれの切り出し映像を各分割画面（表示サイズ＝ｌ×ｍ）に表示する。

そしてこの実施例では、左右に並列する２つの対象物Ｔ_５，Ｔ_６が互いに近接し、対象物Ｔ_５の基準点Ｐａ（ｘａ，ｙａ）と、対象物Ｔ_６の基準点Ｐｂ（ｘｂ，ｙｂ）の位置関係が数式（１）に該当する場合は、モニタの表示画面を再構築し、左右に並列配置された各分割画面（表示サイズ＝ｌ×ｍ）を結合した結合画面（表示サイズ＝２ｌ×ｍ）を設定するとともに（図６（ａ）を参照）、前記各対象物Ｔ_５，Ｔ_６の映像を包括して前記結合画面に表示するための切り出し部分ｃ（切り出しサイズ＝２ＸＬ×ＹＬ）を、結合画面の表示サイズ（２ｌ×ｍ）と、各対象物の基準点（ＰａとＰｂ）とに基づいて決定する（図６（ｃ）を参照）。

ＸＬ≧｜ｘａ−ｘｂ｜、かつ ＹＬ≧２｜ｙａ−ｙｂ｜ ・・・数式（１）
ここで、
ＸＬ：分割画面（表示サイズ＝１×ｍ）に基づくＸ方向の切り出しサイズ
ＹＬ：分割画面（表示サイズ＝１×ｍ）に基づくＹ方向の切り出しサイズ
ｘａ：対象物Ｔ_５の基準点ＰａのＸ座標
ｘｂ：対象物Ｔ_６の基準点ＰｂのＸ座標
ｙａ：対象物Ｔ_５の基準点ＰａのＹ座標
ｙｂ：対象物Ｔ_６の基準点ＰｂのＹ座標

対象物Ｔ_５の基準点Ｐａ（ｘａ，ｙａ）と、対象物Ｔ_６の基準点Ｐｂ（ｘｂ，ｙｂ）との位置関係に基づいて、結合画面（表示サイズ＝２ｌ×ｍ）が設定された場合（２つの対象物が互いに近接した場合）、前記基準点Ｐａと基準点Ｐｂとに基づいて新たな基準点Ｐ_０（ｘ_０，ｙ_０）を求め、前記２つの対象物Ｔ_５，Ｔ_６の映像を包括して切り出すための切り出し部分Ｃ（表示サイズ＝２ＸＬ×ＹＬ）を求める。

この実施例では、各対象物の基準点Ｐａ（ｘａ，ｙａ）と基準点Ｐｂ（ｘｂ，ｙｂ）のＸ座標における中点座標ｘ_０と、Ｙ座標のうち上方に位置する座標ｙ_０とからなる新たな基準点Ｐ_０を求めた。また前記各対象物Ｔ_５，Ｔ_６が移動する場合は、各対象物の基準点Ｐａ，Ｐｂを逐次求めて結合画面（表示サイズ＝２ｌ×ｍ）を設定するか否かを逐次判断するとともに、この逐次求めた各対象物の基準点Ｐａ，Ｐｂの座標に基づいて新たな基準点Ｐ_０を逐次求めた。
そして前記基準点Ｐ_０と表示サイズ（２ｌ×ｍ）とに基づいて、２ＸＬ（Ｘ方向の切り出しサイズ）とＹＬ（Ｙ方向の切り出しサイズ）とからなる切り出し部分を計算した。
このとき、２ＸＬの中央に基準点Ｐ_０が位置するとともに、ＹＬの上端と基準点Ｐ_０が一定の距離ｈを保持するように切り出し部分ｃを決定した。

この実施例によれば、各対象物Ｔ_５，Ｔ_６が互いに近接し、数式（１）の条件を満たす場合は、モニタに設定した結合画面（表示サイズが２ｌ×ｍ）に、各対象物Ｔ_５，Ｔ_６の映像を包括し、１つの映像として表示する。また結合画面に表示した各対象物Ｔ_５，Ｔ_６が離隔し、数式（１）の条件を満たさなくなった場合は、結合画面の設定を解除し、再びモニタに設定された分割画面（表示サイズがｌ×ｍ）に、各対象物Ｔ_５，Ｔ_６をそれぞれ表示する。
つまり対象物が近接した場合は結合表示できるため、並列表示される各対象物の映像が重複することなく、監視者（観察者）の負担を軽減することができる。

なお、移動する各対象物Ｔ_５，Ｔ_６の基準点Ｐａ，Ｐｂを逐次求めて結合画面（表示サイズ＝２ｌ×ｍ）を設定するか否かを判断し、各対象物Ｔ_５，Ｔ_６の映像を結合画面若しくは分割画面に表示する場合、各対象物Ｔ_５，Ｔ_６が近接して一旦結合画面が設定されると、各対象物Ｔ_５，Ｔ_６が離隔して分割画面に設定されるまで、各対象物が近接して分割画面から結合画面に切り替えた時点で求めた新たな基準点Ｐ_０（初期値）を採用することによって、結合画面に表示される切り出し部分ｃ（映像）が固定され、結合画面に表示される映像が見やすくなる。

続いて、この発明による表示方法および表示装置の第３実施例について、図７〜図１３を参照して説明する。
図７は、この発明の実施例による表示装置のブロック図を示す。
この実施例による表示装置では、複数台のカメラ１ａ〜１ｄで撮影した各カメラ映像（高解像度・広角映像）を映像連結部９で連結し、複数のカメラ映像を連結した全体映像を取得することによって、実施例１による１台のカメラ１で取得した全体映像よりも広域を撮影した全体映像を取得する。

なおこの実施例では、各カメラ１ａ〜１ｄで撮影したカメラ映像を連結した全体映像を、カメラ毎に設けた同期信号検出部３ａ〜３ｄで検出した前記各カメラ映像のアドレスに基づいて映像連結部９で連結し全体映像を取得するとともに、前記全体映像をアドレスに基づいて２ポートメモリ２に入力・格納する。そして前記各カメラ映像を連結した全体映像をもとに、実施例１と同様に、対象検出部４において対象物を検出し、基準点抽出部５において前記対象物の基準点Ｐを求め、その後、切り出し表示制御部６において前記基準点Ｐとモニタ８への表示サイズに基づいて切り出し部分を求め、続いて、切り出し表示制御部６によって制御された切り出し部７によって２ポートメモリ２に格納されている全体映像（各カメラ映像の連結映像）から部分的に映像を切り出し、この切り出した映像をモニタ８の表示画面に出力する。

図８は広域の全体映像を取得するためのカメラ配置の例を示すものであって、４台のカメラ（撮影画角３０°）１ａ〜１ｄを扇状に配置し、連続性がある（互いに隣合う）４つのカメラ映像Ｃ１〜Ｃ４を取得するとともに、各カメラ映像を映像連結部９に入力することによって、各カメラ映像Ｃ１〜Ｃ４を連結した全体映像（撮影画角１２０°）を取得する。
なお各カメラ１ａ〜１ｄで撮影したカメラ映像（映像信号）を同期検出部３ａ〜３ｄに入力して、各カメラ映像Ｃ１〜Ｃ４のアドレスを検出し、当該前記アドレスに基づいて各カメラ映像Ｃ１〜Ｃ４を連結することによって、連続性がある（互いに隣合う）４つのカメラ映像Ｃ１〜Ｃ４の位置関係を違えることなく連結することができる。

図９及び図１０は、カメラ配置のその他の例を示すものである。
図９に示すカメラ配置の例では、扇状に配置した２台のカメラ（撮影画角３０°）１ａ及び１ｂをグループ化し、連続性がある（互いに隣合う）２つのカメラ映像Ｃ５及びＣ６を取得し、映像連結部９に入力するとともに、扇状に配置した２台のカメラ（撮影画角３０°）１ｃ及び１ｄをグループ化し、連続性がある（互いに隣合う）２つのカメラ映像Ｃ７及びＣ８を取得し、映像連結部９に入力する。そして各カメラ映像Ｃ５〜Ｃ８を連結した全体映像を取得するとともに、前記の全体映像について、カメラ映像Ｃ５及びＣ６と、カメラ映像Ｃ７及びＣ８とにグループ化したカメラ映像（映像画角６０°）毎に区別して扱うように構成した。

なお図１０に示すカメラ配置の例のように、各カメラ１ａ〜１ｄで連続性がない領域をそれぞれ撮影し、連続性がない４つのカメラ映像Ｃ９〜Ｃ１２を連結し、全体映像として扱ってもよい。

図１１は、モニタ８への表示方法を示すものであって、この実施例による表示方法では、モニタ８の表示画面を分割し、監視領域の全体映像を表示するための１つの全体映像表示エリアと、対象物の切り出し映像を表示するための１または２以上の拡大表示エリアとを別々に構築し、複数のカメラ映像を連結して取得した全体映像と、当該全体映像をもとに映像を部分的に切り出して取得した切り出し映像とを同時に表示する。

例えば、図８に示すように配置された４台のカメラ１ａ〜１ｄで撮影した各カメラ映像Ｃ１〜Ｃ４を連結した全体映像を全体映像表示エリアに表示するとともに、全体映像をもとに検出した対象物の映像を部分的に切り出し、当該切り出し映像を拡大表示エリアに表示する。
図１１に示す実施例では、全体映像をもとに２つの対象物を検出し、全体映像から前記対象物の映像を部分的に切り出し（対象物Ａと対象物Ｂ）、第１拡大表示エリアに対象物Ａ（切り出し部分Ａ）の映像を表示するとともに第２拡大表示エリアに対象物Ｂ（切り出し部分Ｂ）の映像を表示した。

なお２以上の拡大表示エリアにそれぞれ対象物の映像（切り出し映像）を表示する場合、拡大表示エリアの配置関係と、対象物の位置関係を一致させることが好ましい。
つまり図１１に示すように、全体映像をもとに検出した２つの対象物の位置関係と、並列して構築された２つの拡大表示エリアの配置関係を一致させ、左側の第１拡大表示エリアには左側に位置する対象物Ａの切り出し映像Ａを表示するとともに、右側の第２表示エリアには右側に位置する対象物Ｂの切り出し映像Ｂを表示する。

全体映像をもとに切り出し映像を取得するにあたって、対象物の検出手段を以下に説明する。

この実施例では、前記全体映像をもとに動き検出をして撮影領域内にある動体を検出し、当該動体を対象物と検出する手段を設け、全体映像をもとに検出した動体（対象物）を追尾するように全体映像から経時的に映像を切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成した。

なお全体映像をもとに動き検出をするにあたって、全体映像の映像全体を動き検出して動体を検出し、動体（対象物）が検出された場合は、当該動体（対象物）の動きに合わせて、全体映像から前記動体（対象物）の映像を経時的に映像を切り出すように構成することができる。
また全体映像をもとに動き検出をするにあたって、全体映像に設定した特定区間（センスエリア）で動き検出をし、前記センスエリアで動体（対象物）が検出された場合は、当該動体（対象物）の動きに合わせて、全体映像から前記動体（対象物）の映像を経時的に切り出すように構成することができる。

この実施例では、図１２に示すように、全体映像に設定した特定区間（センスエリア）で動き検出をし、前記センスエリアで動体（対象物Ａ）が検出されると、当該動体（対象物Ａ）の動きに合わせて、全体映像から前記動体（対象物Ａ）の映像を経時的に切り出し（切り出し映像Ａ）、その映像を拡大表示エリアに表示するととともに、前記センスエリアで動体（対象物Ｂ）が検出されると、当該動体（対象物Ｂ）の動きに合わせて、全体映像から前記動体（対象物Ｂ）の映像を経時的に切り出し（切り出し映像Ｂ）、その映像を拡大表示エリアに表示した。
なお２つの動体（対象物Ａ，Ｂ）を検出し、第１，第２拡大表示エリアにそれぞれの切り出し映像Ａ，Ｂを表示するにあたって、各対象物Ａ，Ｂの位置関係（左右関係）と各拡大表示エリアの配置関係（左右関係）を一致させた。

またこの実施例では、撮影領域内を巡回移動する一定区画を対象物として設定するオートパン手段を設け、全体映像内を自動的に巡回移動するようにして全体映像から経時的に映像を切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成した。
なお前記オートパン手段は、全体映像内に設定した特定領域内を自動的に巡回するように設定したり、全体映像内に設定した特定領域を外した領域内を自動的に巡回するように設定し、全体映像の特定領域内若しくは特定領域外から経時的に映像を切り出し、当該切り出し映像をモニタの拡大表示エリアに表示することもできる。

例えば前記オートパン手段では、全体映像を左右に往復するように自動巡回する一定区画を対象物として設定し、全体映像内を自動的に巡回移動（往復移動）するようにして全体映像から経時的に一定区画の映像を切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成することができる。
また例えば、全体映像の右端から左端への一方向の移動を繰返すように自動巡回する一定区画を対象物として設定し、全体映像内を自動的に巡回移動（一方向移動）するようにして全体映像から経時的に一定区画の映像を切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成することができる。

さらにこの実施例では、モニタの全体映像表示エリアに表示された全体映像をもとにオペレータ（例えば監視者）が指定したものを対象物として拡大表示エリアに表示する場合、モニタに表示された全体映像をもとにオペレータが対象物を指定する対象物指定手段を設け、前記対象物指定手段で指定した部分の映像を部分的に切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成した。

例えば、全体映像表示エリアに表示されている全体映像をもとにオペレータが前記対象物指定手段によって対象物を逐次指定するとともに、対象物指定手段で逐次指定した対象物の映像を全体映像から経時的に切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成した。

また例えば、オペレータが前記対象物指定手段によって指定した部分（対象物）の映像を、一定時間或いは指定が解除されるまでの間、全体映像から経時的に映像を切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成した。

さらに例えば、オペレータが前記対象物指定手段によって対象物を指定した後、前記対象物指定手段によって指定した対象物の動き検出を行い、対象物指定手段で指定した対象物の動きに合わせて、全体映像から対象物の映像を経時的に切り出し、当該切り出し映像をモニタの拡大表示エリアに表示するように構成した。

なお、上記複数の検出手段を用いて複数の対象物を検出する場合は、各検出手段で検出される対象物に優先順位を付け、優先度の高い対象物の映像を全体映像から部分的に切り出し、拡大表示エリアに表示する。

また検出した対象物の数（ｎ個の対象物）にあわせて、切り出し映像を表示する拡大表示エリアの数（第１〜第ｎ拡大表示エリア）を設定し、各拡大表示エリアに対象物をそれぞれ表示するようにしてもよい。

また拡大表示エリアの設定数に上限を設け、検出した対象物の数が前記上限を超えた場合は、優先度に従って対象物を選択し、優先度の高い対象物の映像を全体映像から部分的に切り出し、拡大表示エリアに表示するようにしてもよい。

また対象物の検出手段の数（ｍ個の検出手段）にあわせて、切り出し映像を表示する拡大表示エリアの数（第１〜第ｍ拡大表示エリア）を設定し、拡大表示エリアに切り出し映像を表示するにあたって、拡大表示エリア毎に設定した対象物の検出手段によって対象物が検出された場合、当該対象物の映像を全体映像をもとに切り出し、その切り出し映像を表示するように構成してもよい。
例えば、動き検出手段によって検出した対象物の映像を表示する第1拡大表示エリアと、オートパン手段によって取得した映像を表示する第２拡大表示エリアとを設定し、各拡大表示エリアに、それぞれの表示エリアに設定された検出手段によって検出した対象物の映像を表示する。

なお、拡大表示エリアに表示される切り出し映像（対象物）の撮影領域内での位置を確認できるようにするため、全体映像表示エリアに表示した全体映像に前記映像の切り出し部分をカーソル表示するようにすることが好ましい。例えば、映像の切り出し部分を囲む枠画像を表示することによって、拡大表示エリアに表示されている対象物が全体映像中のどの位置にあるかを容易に確認することができる。
なお対象物を検出した手段毎に、前記カーソル表示（枠画像）の色・形状を区別することによって、どのような検出手段によって検出された対象物かを容易に判断することができる。

またさらに、図９に示すカメラ配置のように、４つのカメラ１ａ〜１ｄを、２つのカメラ１ａ及び１ｂと、２つのカメラ１ｃ及び１ｄとにグループ化するとともに、グループ化したカメラで撮影した各カメラ映像Ｃ５〜Ｃ８を連結して全体映像を取得し、カメラ映像Ｃ５及びＣ６と、カメラ映像Ｃ７及びＣ８とにグループ化した場合、当該全体映像をカメラ映像Ｃ５及びＣ６のグループと、カメラ映像Ｃ７及びＣ８のグループとに区別して扱うことができる。

図１３に示す表示方法では、４台のカメラ１ａ〜１ｄで撮影した４つのカメラ映像Ｃ５〜Ｃ８を連結し、全体映像として全体映像表示エリアに表示する。
そして前記全体映像表示エリアに表示された全体映像について、グループ化した２つのカメラ１ａと１ｂで撮影したカメラ映像Ｃ５とＣ６の区間と、グループ化した２つのカメラ１ｃと１ｄで撮影したカメラ映像Ｃ７とＣ８の区間との、２つに区別して扱うことができるように構成した。

例えばカメラ映像Ｃ５とＣ６の区間でのみ、センスエリアで動き検出した動体（対象物Ａ）の動きに合わせて映像を切り出して、当該動体（対象物Ａ）の映像を第１拡大表示エリアに表示するように設定し、カメラ映像Ｃ７とＣ８の区間では前記動体（対象物）の動きに合わせた映像の切り出しを行わないように構成した。

また例えば、オートパン手段によって撮影領域内を自動巡回するように一定区画を切り出して、その映像を第２拡大表示エリアに表示するにあたって、カメラ映像Ｃ７とＣ８の区間を左右に往復するように自動巡回する一定区画を対象物として設定し、前記区間（カメラ映像Ｃ７とＣ８の範囲）内を自動的に巡回移動（往復移動）するようにして経時的に一定区画の映像を切り出し、当該切り出し映像をモニタの第２拡大表示エリアに表示するように構成した。

本発明の第１実施例による表示装置のブロック図。 対象物の基準点Ｐの取得方法および切り出し部分の決定方法を説明する図。 部分映像の切り出し方法を説明する図。 高低差のある対象物の並列表示方法を説明する図。 大小差のある対象物の並列表示方法を説明する図。 本発明の第２実施例による表示方法を説明する図。 本発明の第３実施例による表示装置のブロック図 複数台のカメラの配置方法を示す図 複数台のカメラのその他の配置方法を示す図 複数台のカメラのまたその他の配置方法を示す図 図８に示すカメラ配置で取得した映像の表示方法を示す図 図８に示すカメラ配置で取得した映像の表示方法を示す図 図９に示すカメラ配置で取得した映像の表示方法を示す図

符号の説明

１ カメラ
２ メモリ
３ 同期信号検出部
４ 対象検出部
５ 基準点抽出部
６ 切り出し表示制御部
７ 切り出し部
８ モニタ
９ 映像連結部

Claims (12)

1. カメラ（１）で撮影した高解像度・広角映像の全体映像を、同期信号検出部（３）で検出した前記映像のアドレスに基づいてメモリ（２）に入力するとともに、
   前記カメラ（１）で撮影した全体映像に基づいて対象物を検出し、この対象物の外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなる基準点を取得した後、前記基準点と表示サイズに基づいて切り出し部分を決定し、
   メモリに格納されている映像から前記切り出し部分を切り出してモニタへ出力し、この切り出した部分映像をモニタに表示する方法において、
   前記カメラ（１）で撮影した全体映像に基づいて複数の対象物を検出し、この各対象物の基準点をそれぞれ取得した後、各基準点と表示サイズに基づいてメモリ（２）に格納されている映像から各対象物の映像をそれぞれ部分的に切り出し、さらに各切り出し映像をモニタの表示画面に設定した分割画面にそれぞれ表示することによって、モニタ（８）に対象物の映像を並列表示するとともに、
   各対象物の映像上の位置が互いに近接した場合は、モニタの表示画面を再構築して結合画面を設定するとともに、それぞれの対象物の基準点をもとに新たな基準点を設定し、この新たな基準点をもとに、前記近接した対象物の映像を包括して切り出し、前記結合画面に表示することを特徴とする表示方法。
2. 全体映像をもとに動き検出をして撮影領域内にある動体（対象物）を検出するとともに、前記動き検出された動体（対象物）を追尾するように、全体映像から経時的に前記動体（対象物）の映像を切り出し、当該切り出し映像を表示することを特徴とする請求項１に記載の表示方法。
3. モニタに表示された全体映像をもとに指定した対象物の映像を切り出す方法であって、
   モニタに表示された全体映像をもとに対象物指定手段によって対象物を逐次指定するとともに、前記対象物指定手段によって逐次指定される対象物の映像を全体映像から経時的に切り出し、当該切り出し映像を表示することを特徴とする請求項１に記載の表示方法。
4. モニタに表示された全体映像をもとに指定した対象物の映像を表示する方法であって、
   モニタに表示された全体映像をもとに対象物指定手段によって対象物を指定するとともに、前記対象物指定手段によって指定した対象物の動き検出を行い、対象物指定手段で指定した対象物の動きに合わせて、全体映像から対象物の映像を経時的に切り出し、当該切り出し映像を表示することを特徴とする請求項１に記載の表示方法。
5. 並列配置された分割画面に各対象物の切り出し映像をそれぞれ表示し、モニタ（８）に各対象物の映像を並列表示するにあたって、
   各対象物の頭位置を揃えて並列表示することを特徴とする請求項１から４の何れか１項に記載の表示方法。
6. 並列配置された分割画面に各対象物の切り出し映像をそれぞれ表示し、モニタ（８）に各対象物の映像を並列表示するにあたって、
   基準点抽出部（５）で取得した基準点のＸ座標を比較することによって各対象物の左右関係を求め、前記対象物の左右関係にあわせて並列表示することを特徴とする請求項１から５の何れか１項に記載の表示方法。
7. 複数の分割画面を設定したモニタに、カメラ（１）で撮影した領域の全体映像と、前記全体映像から切り出された部分切り出し映像とを同時に表示することを特徴とする請求項１から６の何れか１項に記載の表示方法。
8. 複数台のカメラで撮影したカメラ映像を連結して全体映像を取得し、この全体映像をもとに部分的に映像を切り出すことを特徴とする請求項１から７の何れか１項に記載の表示方法。
9. 複数台のカメラを扇状に配置し、各カメラで撮影したカメラ映像を連結して全体映像を取得することを特徴とする請求項８に記載の表示方法。
10. 複数台のカメラで撮影した各カメラ映像を連結して全体映像を取得するにあたって、各カメラで撮影したカメラ映像をグループ化し、全体映像をグループ毎に区別して扱うことを特徴とする請求項８または９に記載の表示方法。
11. カメラ（１）で撮影した高解像度・広角映像から、対象物についての映像を部分的に切り出し、この部分切り出し映像をモニタ（８）に表示する装置であって、
    カメラ（１）で撮影した映像を全体映像として格納するメモリ（２）と、前記映像のアドレスを検出する同期信号検出部（３）と、
    前記カメラ（１）で撮影した全体映像から対象物を検出する対象検出部（４）と、
    検出した対象物の外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなる基準点を取得する基準点抽出部（５）と、
    前記基準点と、モニタ（８）への表示サイズに基づいて切り出し部分を決定する切り出し表示制御部（６）と
    前記切り出し表示制御部（６）の制御により、メモリ（２）に格納されている映像信号から部分的に映像を切り出し、この切り出した部分映像の映像信号をメモリ（２）から出力させる切り出し部（７）と、
    メモリ（２）から出力された映像信号に基づいて映像を表示するモニタ（８）とを備え、
    前記カメラ（１）で撮影した全体映像に基づいて複数の対象物が検出され、この各対象物の切り出し映像が、モニタの表示画面に設定された複数の分割画面にそれぞれ表示されて、モニタ（８）に各対象物の映像が並列表示されるとともに、
    各対象物の映像上の位置が互いに近接した場合は、モニタの表示画面が再構築されて結合画面が設定されるとともに、それぞれの対象物の基準点をもとに新たな基準点が設定され、この新たな基準点をもとに、前記近接した対象物の映像が包括して切り出され、前記結合画面に表示されることを特徴とする表示装置。
12. 複数台のカメラ（１ａ〜１ｄ）で撮影した各カメラ映像を連結する映像結合部（９）を備え、各カメラ映像を連結することによって全体映像を取得することを特徴とする請求項１１に記載の表示装置。