JP3852745B2 - 物体検出方法及び物体検出装置 - Google Patents
物体検出方法及び物体検出装置 Download PDFInfo
- Publication number
- JP3852745B2 JP3852745B2 JP2001054388A JP2001054388A JP3852745B2 JP 3852745 B2 JP3852745 B2 JP 3852745B2 JP 2001054388 A JP2001054388 A JP 2001054388A JP 2001054388 A JP2001054388 A JP 2001054388A JP 3852745 B2 JP3852745 B2 JP 3852745B2
- Authority
- JP
- Japan
- Prior art keywords
- intruding object
- image
- monitoring
- camera
- intruding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
Description
【発明の属する技術分野】
本発明は、監視システムに係り、特に監視領域全体を撮像する第1の侵入物体監視手段と、侵入物体の移動にしたがって撮像装置の視野方向を追従させて制御する第2の侵入物体監視手段とが、互いに独立に、侵入物体を自動的に監視するようにした侵入物体監視方法及び侵入物体監視装置に関する。
【0002】
【従来の技術】
近年、侵入物体監視システムにおいて、カメラ等の撮像装置による画像入力手段を用いた侵入物体監視装置の中には、従来の監視員による有人監視の方法に頼らず、監視対象領域内の侵入物体を自動的に検出し、カメラの視野内に侵入物体が常に捉えられるように侵入物体の検出位置に基づいてカメラを乗せた雲台を制御して、カメラの視線方向等を変更して撮像し、所定の報知や警報、侵入物体映像記録などの処置が得られるようしたものがある。
【0003】
このようなシステムとしては、例えば、図7に示すような2種類のカメラで構成した監視システムがある。図7はタンクヤードの監視を想定した監視システムを説明するための図である。
第1のカメラ702は、監視対象領域704全体を所定の時刻毎に連続的に撮像する画像入力手段である。この第1のカメラ702を含む第1の監視手段101は、異なる時刻に撮像した複数のフレーム画像から侵入物体701を検出し、検出した侵入物体701に関する情報を第2のカメラ703に与える。第2のカメラ703は、第1のカメラ702から与えられる侵入物体701の情報に応じて、侵入物体701を自動的に追尾して所定の時刻毎に連続的に撮像する画像入力手段である。
【0004】
また、第1の監視手段は、引き続き監視対象領域704全体の監視を行い、更に、検出された侵入物体702の追跡を行う。
ここで、本明細書の記載における“追跡”と“追尾”とは、以下のように定義される。
追跡:監視用カメラなどの撮像装置の視野内に写る対象物体の画面上での位置変化を計測する処理。例えば、監視対象領域全体について、対象物体の移動軌跡を求める等、対象物体が検出されてから検出されなくなるまでの時間的変化を監視し記録する。
追尾:撮像装置の雲台制御(カメラの光軸方向の制御)を伴う処理。例えば、移動する対象物体の現時刻の位置を常にカメラの光軸の中心に捉えるように、光軸方向を制御して、監視対象領域の1部である対象物体の領域部分を常に追いかける。
【0005】
図7と図8とを用いて、第1のカメラ702によって検出された侵入物体701を、第2のカメラ703が追跡する方法を簡単に説明する。
図7において、第1のカメラ702によって得られた、異なる時刻に入力された複数フレームの画像は、画素毎に輝度値の差分を求められ、その差分の大きい領域が侵入物体701として検出される。更に、侵入物体701が検出された場合に、第1のカメラ702側から、侵入物体の検出位置に基いて第2のカメラ703を乗せる雲台を制御する。これによって、第2のカメラ703の視野705内に常に侵入物体701を捉えるようにすることができる。
【0006】
図8は、第1のカメラ702による侵入物体検出処理方法の原理を説明する図である。この方法は、フレーム間差分法などと呼ばれ、従来から広く用いられている。
図8において、減算器809は、時刻t0-1に取得した入力画像801と時刻t0に取得した入力画像802とについて画素毎の輝度値の差分を計算し、入力画像801と入力画像802との差分画像804を出力する。同様に滅算器810も、時刻t0に取得した入力画像802と時刻t0+1に取得した入力画像803との画素毎の輝度値の差分を計算し、入力画像802と入力画像803との差分画像805を出力する。
次に、二値化器811は、差分画像804の画素毎の輝度値が所定のしきい値Th未満の輝度値を“0”、しきい値Th以上の画素の輝度値を、例えば“255”(1画素の輝度値を8ビットで計算)として二値化画像806を得る。二値化器812もまた同様の処理を行い、差分画像805から二値化画像807を得る。
【0007】
次に論理積器813は、二値化画像806と二値化画像807との画素毎の輝度値の論理積を計算し論理積画像808を出力する。これによって入力画像801,802,803に写った人型の物体814,815,816は、減算器809または810によって差分が生じた領域817または818として算出される。そして、二値化器811または812によって輝度値“255”のかたまりの画像819または820として抽出され、更に、論理積器813によって画像819と820を構成する画素の中で、両画像共に輝度値“255”を持つ画素のかたまり画像821が検出される。即ち、画素821が侵入物体として検出される。
なお、監視視野内の侵入物体を検出する方法であればフレーム間差分法以外の方法も適用できる。
【0008】
以上のように第1のカメラ702によって侵入物体が検出された場合には、第1のカメラ702によって検出された侵入物体701の大きさと検出位置の情報に基いて、第1のカメラ702は、制御信号を第2のカメラ703に与える。これによって、第2のカメラ703の監視視野範囲705の方向(雲台の方向)が制御される。そしてこれによって、第2のカメラ803は侵入物体801を捕捉することができる。
【0009】
第2のカメラ703の雲台の制御量を求める方法を図9によって説明する。図9は、第1のカメラ902の視野範囲904で検出された侵入物体901を第2のカメラ903で追尾する方法を説明するための図である。図9では、簡略化のため第1のカメラ902と第2のカメラ903を同じ位置に設置し、第1のカメラ902の視野の中心(光軸)方向と第2のカメラ903の基準視野方向(雲台制御角をバン 0 °,チルト 0 °)を一致させ、x軸の方向だけに着目して表示している。
【0010】
図9において、2Wは第1のカメラ902の視野(監視対象領域)904全体についての入力画像の横(x軸)方向の画素数(単位:pix)、Δxは検出された侵入物体の第1のカメラ902の視野中心からの横方向の変位(単位:pix)、θwは第1のカメラ902の半監視角度(単位:°)、θxは第2のカメラ903の雲台102mのパン制御角度(単位:°)を表す。ここで、第1のカメラ902の半監視角度θwは、第1のカメラ902の撮像素子の横方向の大きさh(単位:mm)と、第1のカメラ902の焦点距離f(単位:mm)とによって、
【数1】
と表すことができる。
【0011】
また、この監視条件において、入力画像の横方向の画素数2W、侵入物体901の検出位置の第1のカメラ902の視野中心からの横方向の変位Δxと、第1のカメラ902の半監視角度θwと、第2のカメラ903の雲台102mのパン制御角度θxとには、
【数2】
の関係がある。
【0012】
即ち、第2のカメラ903の雲台102mのパン制御角度θxは、
【数3】
となる。
【0013】
例えば、半監視角度θwを30 °、第1のカメラ902の入力画像の横方向の画素数2Wを320 pix、検出された侵入物体の第1のカメラ902の視野中心からの変位Δxを40とした場合、第2のカメラ903の雲台102mのパン制御角度は8.2 °となる。
【0014】
以上のように、第1のカメラ902によって異なる時刻に入力した複数フレームの画像を比較して画素毎に輝度値の差分を求め、その差分の大きい領域を侵入物体901として検出した場合に、その侵入物体901の大きさと検出位置に基いて第1のカメラ902から送られる制御信号によって、第2のカメラ903の雲台102mが制御される。これによって、第2のカメラ903の視野範囲905内に常に侵入物体901を捉えることができるため、移動する侵入物体を第2のカメラ903が常に自動的に追尾することができる。
上記2つのカメラ構成による監視装置としては、例えば、特開平5−334572号公報及び特開平6−153051号公報がある。
【0015】
【発明が解決しようとする課題】
前述の従来技術には、複数の侵入物体を追尾するために複数の第2のカメラを制御する構成とした場合に、侵入物体の数に比例して、第1のカメラが複数の第2のカメラを制御するため、第1のカメラの処理量が増加する欠点があった。
更に、第1のカメラで侵入物体が一時的に検出できなくなった場合には、第2のカメラがその侵入物体を捉えられる位置にあっても、継続して追尾を行なうことができないという欠点があった。
また、第1のカメラの撮像範囲でしか侵入物体の検出が行えず、侵入物体を正確に検出できるような大きさで侵入物体を撮像するように第1のカメラの撮像範囲を設定すると、おのずと監視エリアが制限されてしまう欠点があった。例えば、横幅1.0 m以上の侵入物体を検出するために、侵入物体が二値化画像中で幅10 画素以上のかたまりとして検出されなければならないようなような場合、画像サイズを320×480 画素として、320画素の実際の大きさは、1.0 /( 10 / 320 )= 32.0 となり、第1のカメラの撮像範囲は横方向 320 mまでしか設定できず、更に、ズームレンズと雲台とを制御しながら侵入物体を追尾する場合、第1のカメラの撮像範囲から外れた監視エリアが死角となってしまうことになる。
また、監視エリア内に存在する建物の陰や雲台の動作限界などによる死角に侵入物体が入った場合に、侵入物体を継続して追尾することが出来なくなってしまうといった欠点があった。
【0016】
本発明の目的は、第1のカメラによって得られる入力画像信号を第1の画像処理手段で処理し、複数の第2のカメラによって得られる入力画像信号をそれぞれ第2の画像処理手段で処理して、それぞれの画像処理手段を独立に制御することによって監視処理の負荷を分散させながら複数の侵入物体を監視できるようにし、更には、検出された侵入物体の位置情報に基づき侵入物体に近い位置に設置された第2の侵入物体監視手段で侵入物体を追尾するように割当てたり、最も重要度の高い領域に存在する侵入物体を優先的に追尾するように第2の侵入物体監視手段を割当ることで、迅速かつ効率的で正確に侵入物体を追尾する、信頼性の高い侵入物体監視方法及び侵入物体監視装置を提供することにある。
【0017】
【課題を解決するための手段】
上記の目的を達成するために、本発明の侵入物体監視方法は、監視対象領域をカバーする視野範囲を持つ第1の侵入物体監視装置と、第1の侵入物体監視装置の視野範囲の一部を監視領域とする複数の第2の侵入物体監視装置とを有する侵入物体監視システムを使用した侵入物体監視方法において、第1の侵入物体監視装置によって、監視対象領域の画像を入力する第1の画像入力ステップと、第1の画像入力ステップによって入力した画像から侵入物体の第1の情報を検出する第1の検出ステップと、第1の情報に基づいて第2の侵入物体監視装置の1つを制御して監視領域の画像を入力し、侵入物体を捕捉する第2の画像入力ステップと、第2の侵入物体監視装置によって、侵入物体の第2の情報を検出する第2の検出ステップとを設け、第2の情報に応じて、第2の侵入物監視装置が第1の侵入物体監視装置の制御なしで、侵入物体を追尾する。
また、第2の検出ステップによって検出した第2の情報は、侵入物体の大きさと検出位置を含む情報であり、第2の侵入物体監視装置による捕捉した侵入物体の追尾は、第2の情報に基づき第2の侵入物体監視装置の雲台を制御して撮像装置の視線方向を変更して行い、またあるいは、第1の検出ステップは、侵入物体の第1の情報の検出を差分法によって行い、またあるいは、第2の検出ステップは、侵入物体の第2の情報の検出をテンプレートマッチング法によって行う。
【0018】
更に、本発明の侵入物体監視方法は、侵入物体が新規に検出された侵入物体であるか否かを判定する新規検出物体判定ステップを有し、第1の侵入物体監視装置は、新規に検出された侵入物体であれば、新規に検出された侵入物体を現在追尾を行っていない第2の侵入物体監視装置の1つに追尾を割り当て、追尾を割り当てられた第2の侵入物体監視装置が、新規に検出された侵入物体を追尾する。またあるいは、第1の侵入物体監視装置は、新規に検出された侵入物体であれば、新規に検出された侵入物体を、侵入物体を追尾していない第2の侵入物体監視装置の1つに、新規に検出した侵入物体の第3の情報を伝達し、伝達された第3の情報に応じて、第2の侵入物体監視装置が新規に検出された侵入物体を捕捉し、捕捉後は、第2の侵入物体監視装置が、第1の侵入物体監視装置の制御なしで、捕捉した侵入物体を追尾する。
また更に、第2の侵入物体監視装置は、第3の情報に基づいて、新規に検出された侵入物体を捕捉し、捕捉後は、第2の侵入物体監視装置が、捕捉した侵入物体を追尾する。
さらにまた、第1の侵入物体監視装置は、新規に侵入物体を検出した場合に、侵入物体の第4の情報を、現在侵入物体を追尾していない1つの第2の侵入物体監視装置を特定し、特定された第2の侵入物体監視装置に与えることにより、第2の侵入物体監視装置を追尾に割り当てる追尾割当ステップを有する。
追尾割当ステップは、現在侵入物体を追尾していない前記第2の侵入物体監視装置のうち前記新規に検出した侵入物体に最も近い位置にある第2の侵入物体監視装置を追尾に割り当てる。
さらに、本発明の侵入物体監視方法は、監視領域全体を複数の部分監視領域に分割し、分割された部分監視領域に予め優先順位を設け、侵入物体が複数検出された場合、追尾割当ステップによって優先順位の高い部分監視領域に検出された侵入物体から順番に、第2の侵入物体監視装置を追尾に割り当てる。
また、新規検出物体判定ステップによって、侵入物体が新規に検出された侵入物体ではないと判定された場合には、第1の侵入物体監視装置によって追跡中の侵入物体であるとして、侵入物体の以前の位置から現在の侵入物体の位置への変化を、追跡中の侵入物体の移動軌跡とする。
またさらに、応答が一番速い第2の侵入物体監視手段から順に、新規に検出した侵入物体を追尾させる。
【0019】
そのほか更に、本発明の侵入物体監視方法は、新規に侵入物体が存在すると判定された場合に、侵入物体の検出された位置座標をもとに監視領域内での絶対座標を算出する絶対座標算出ステップと、算出された絶対座標と最も近い位置に存在する第2の撮像手段を持つ第2の侵入物体監視手段を選択するカメラ選択ステップと、侵入物体の追尾を指定された第2の侵入物体監視手段に割当てる追尾割当修正ステップとを設け、監視領域内の侵入物体を追尾する。
また、新規に検出した侵入物体に一番近い領域を視野範囲としている第2の侵入物体監視手段から順に、新規に検出した侵入物体を追尾させる。
さらに、監視対象領域内に予め設定された少なくとも2つ以上の優先順位の異なる領域に対し、監視対象領域内で検出された侵入物体の存在する領域の優先順位に基づいて、第2の侵入物体監視手段を割当てる追尾割当修正ステップを設け、監視対象領域内の侵入物体を追尾する。
【0020】
本発明の侵入物体監視システムは、監視対象領域の映像を入力し、監視対象領域に侵入する物体の検出情報を検出し、侵入物体の第1の情報を追跡する第1の侵入物体監視装置と、第1の侵入物体監視装置が検出した第1の情報に基づいて侵入物体を捕捉し捕捉した侵入物体を追尾する複数の第2の侵入物体監視装置とを備える侵入物体監視システムにおいて、新規に侵入物体が存在すると判定された場合に、まだ侵入物体を追尾していない第2の侵入物体監視装置を特定し、特定した第2の侵入物体監視装置に新規に検出された侵入物体を追尾させる。
また、第2の侵入物体監視装置は、それぞれ、第2の侵入物体監視装置によって制御される雲台を有し、第1の侵入物体監視装置が検出した第1の情報に応じて侵入物体を捕捉した後は、第2の侵入物体監視装置が検出する第2の情報によって、第1の侵入物体監視装置の制御なしで侵入物体を追尾する。
【0021】
即ち、本発明の侵入物体検出システムは、例えば、監視対象とする監視領域全体を撮像するカメラ等の第1の画像入力手段と、カメラ等の第1の画像入力手段が撮像した画像を入力する第1の画像入力I/Fと、1つ以上の侵入物体監視手段とデータの通信を行なう第1のデータ通信手段と、第1の画像入力I/Fから入力された画像を記憶する第1の画像メモリと、侵入物体検出を行なう第1の侵入物体検出手段の動作プログラムを記憶している第1のプログラムメモリと、第1のプログラムメモリに保持されているプログラムにしたがって第1の侵入物体検出手段を動作させる第1のCPUと、第1の画像メモリに記憶された画像の解析を行なう際に一時的にデータを記憶する第1のワークメモリとによって構成される第1の侵入物体監視装置と、監視対象とする監視領域の一部を撮像するカメラ等の第2の画像入力手段と、カメラ等の第2の画像入力手段が撮像した画像を入力する第2の画像入力I/Fと、第2の画像入力手段の撮像方向を変える雲台制御手段と、1つ以上の侵入物体監視手段との間でデータの通信を行なう第2のデータ通信手段と、第2の画像入力I/Fから入力された画像を記憶する第2の画像メモリと、侵入物体検出を行なう第2の侵入物体検出手段の動作プログラムを記憶している第2のプログラムメモリと、第2のプログラムメモリに保持されているプログラムにしたがって第2の侵入物体検出手段を動作させる第2のCPUと、第2の画像メモリに記憶された画像の解析を行なう際に一時的にデータを記憶する第2のワークメモリとによって構成される第2の侵入物体監視装置と、音、可視光、振動、回転運動、上下運動等の少なくとも1つ以上で表し人間または補助動物が感知可能な信号を発生する警告表示手段と、監視モニタと、第1あるいは第2のワークメモリの解析結果に対応して第1のCPUの指示によって警告手段に警告を表示させる信号を伝達する出力I/Fと、第1あるいは第2のワークメモリの解析結果に対応して第1のCPUの指示によって監視モニタに画像を送る画像出力I/Fとを有し、第1のCPUが、第1のプログラムメモリに保持されているプログラムにしたがって第1の画像メモリに記憶されてる入力画像から第1の画像入力手段の視野内に写る侵入物体を検出する第1の侵入物体検出手段によって侵入物体を検出した場合に、第1のデータ通信手段によって第2の侵入物体監視装置に検出物体の位置情報と共に追尾割当要求を送信し、検出した侵入物体を追跡するようにし、更に、第2のCPUが、第2のデータ通信手段によって第1の侵入物体監視装置から追尾割当要求を受信した場合に、侵入物体の位置情報に基づいて第2の画像入力手段の撮像方向を変える雲台制御手段を制御し、第2のプログラムメモリに保持されているプログラムにしたがって第2の画像メモリに記憶されてる入力画像から第2の画像入力手段の視野内に写る侵入物体を検出する第2の侵入物体検出手段によって侵入物体を検出し、検出した侵入物体の位置情報に基づいて第2の画像入力手段の撮像方向を変える雲台制御手段を制御するようにして監視視野内の侵入物体の監視を行なうようにしたものである。
【0022】
【発明の実施の形態】
まず、本発明の侵入物体監視システムの一実施例を図1によって説明する。
図1は、侵入物体監視システムのハードウエア構成を示すブロック図である。第1の侵入物体監視手段101と第2の侵入物体監視手段102とをそれぞれ1組ずつ備えた構成の一例である。
なお、第2の侵入物体監視手段102には固有のID(識別)番号が割当てられており、複数組の第2の侵入物体監視手段で構成した場合でもそれぞれを区別できるようになっている。
【0023】
第1の侵入物体監視装置101と第2の侵入物体監視装置102とは、第1の通信I/F101hと第2の通信I/F102hとが通信ケーブル107によって接続されている。また、第1の侵入物体監視装置101側では、第1の入力I/F101gが入力装置105に接続されている。更に第1の出力I/F101jが画像切替合成装置106の制御信号入力端子に接続され、また、警告灯104にも接続されている。
更にまた、第1の侵入物体監視装置101側の第1の画像出力I/F101iと、第2の侵入物体監視装置102側の第2の画像出力I/F102iとは、画像切替合成装置106に接続され、画像切替合成装置106は監視モニタ103に接続されている。
【0024】
第1の侵入物体監視装置101において、第1のカメラ101aは第1の画像入力I/F101bに接続され、第1の画像入力I/F101b、第1のCPU101c、第1の画像メモリ101d、第1のプログラムメモリ101e、第1のワークメモリ101f、第1の入力I/F101g、第1の通信I/F101h、第1の画像出力I/F101i、及び第1の出力I/F101jは、第1のデータバス101kにそれぞれ接続されている。
また、第2の侵入物体監視装置102において、第2のカメラ102aは第2の画像入力I/F102bに接続され、第2のカメラ102aはカメラ雲台102mに設置され、第2の出力I/F102jは雲台制御装置102lに接続され、雲台制御装置102lはカメラ雲台102mに接続されている。また、第2の画像入力I/F102b、第2のCPU102c、第2の画像メモリ102d、第2のプログラムメモリ102e、第2のワークメモリ102f、第2の通信I/F102h、第2の画像出力I/F102i、及び第2の出力I/F102jは、第2のデータバス102kにそれぞれ接続されている。
また、監視モニタは、1台である必要はなく、2台またはそれ以上でもよく、表示する内容もユーザの要求により自由に変更できる。
その他、第1の侵入物体監視手段101と第2の侵入物体監視手段102、及び、入力装置105、画像切替え合成装置106、警告灯104、監視モニタ103間の物理的結合は、上述の実施例以外であっても、必要な情報や信号が伝達できる方法であればどんな方法でのよいことはいうまでもない。
【0025】
図1において、第1のカメラ101aは監視対象区域を含んだ撮像視野内全体を所定の時刻毎に連続的に撮像し、撮像した画像を映像信号に変換して、その映像信号を第1の画像入力I/F101bに与える。第1の画像入力I/F101bは、入力した映像信号を侵入物体監視システムで扱うフォーマット(例えば、幅320 pix、高さ240 pix、8 bit/pix)の画像データに変換し、第1のデータバス101kを介して第1の画像メモリ101dに送る。
【0026】
第1の画像メモリ101dは、入力してきた画像データを蓄積する。第1のCPU101cは、第1のプログラムメモリ101eに保存されているプログラムに従って、第1のワークメモリ101fを処理作業領域として使用し、第1の画像メモリ101dに蓄積された画像の解析を行なう。
【0027】
以上の解析の結果、第1の侵入物体監視装置101は、第1のカメラ101aの撮像視野内に侵入物体が侵入したか否か、また侵入物体が侵入した場合には、その検出された侵入物体の大きさや検出位置等の検出情報を得る。第1のCPU101cは、処理結果に応じて第1のデータバス101kから第1の通信I/F101hを介して第2の侵入物体監視装置102へ侵入物体の有無、侵入物体の位置情報、侵入物体追跡結果その他の検出情報を送信する。更に、新規に侵入物体を発見した場合には、第1の通信I/F101hを介して、第2の侵入物体監視装置102のうち、まだ追尾を割り当てられていない第2の侵入物体監視装置102に宛てて、侵入物体追尾割り当てと対象物体の位置情報を送信し、その他、例えば、第1の出力I/F101jを介して警告灯104を点灯したり、例えば監視結果画像を第1の画像出力I/F101iを介して画像切替合成装置106に与える。
【0028】
第1の通信I/F101hは、第1のCPU101cからの送信データを例えばRS485フォーマットに変換して、通信ケーブル107で接続された1台以上の別の第2の侵入物体監視装置(図1では、1台で代表して描き、以下の説明も第2の侵入物体監視装置102の中の構成要素の参照符号を代表として説明する)へ送信する。また、第1の画像出力I/F101iは、第1のCPU101cからの信号を画像切替合成装置106が使用できるフォーマット(例えば、NTSC映像信号)に変換して、画像切替合成装置106に送る。
その他、第1の侵入物監視装置101と第2の侵入物監視装置102、及び、入力装置105、画像切替え合成装置106、警告灯104、監視モニタ103間の物理的結合は、上述の実施例以外であっても、必要な情報や信号が伝達できる方法であればどんな方法での良いことはいうまでもない。
【0029】
次に、第2のカメラ102aは、第2のカメラ102aの有する撮像視野内を所定の時刻毎に連続的に撮像する。カメラ雲台102mは雲台制御装置102lが与える雲台制御信号によって第2のカメラ102aの撮像方向を変える。第2のカメラ102aは、撮像した画像を映像信号に変換し、変換した映像信号を第2の画像入力I/F102bに与える。第2の画像入力I/F102bは、入力した映像信号を第2の侵入物体監視装置102で扱うことができるフォーマット(例えば、幅320 pix、高さ240 pix、8 bit/pix)の画像データに変換し、第2のデータバス102kを介して第2の画像メモリ102dに送る。第2の画像メモリ102dは、送られてきた画像データを蓄積する。第2のCPU102cは第2のプログラムメモリ102eに保存されているプログラムに従って、第2のワークメモリ102f内で第2の画像メモリ102dに蓄積された画像の解析を行なう。以上の解析結果、第2のカメラ102aの撮像視野内に侵入物体が侵入した等の検出情報を得る。
【0030】
第2のCPU102cは、処理結果に応じて第2のデータバス102kから第2の出力I/F102jを介して雲台制御装置102jへ制御信号を送信すると共に、第2の通信I/F102hを介して第1の侵入物体監視装置101へ侵入物体の位置情報、侵入物体追尾結果等の検出情報を送信する。また更に、検出情報、例えば監視結果画像を第2の画像出力I/F102iを介して画像切替合成装置106に与える。
【0031】
第2の通信I/F102hは、第2のCPU102cからの送信データを例えばRS485フォーマットに変換して、通信ケーブル107で接続された第1の侵入物体監視装置へ送信する。更に、別の第2の侵入物体監視装置が1台以上通信ケーブル107で接続されている場合には、第2の通信I/F102hは、通信ケーブル107を介して、この別の第2の侵入物体監視装置102へも第2のCPU102cからの送信データを送信する。また、第2の画像出力I/F102iは、第2のCPU102cからの信号を画像切替合成装置106が使用できるフォーマット(例えば、NTSC映像信号)に変換して、画像切替合成装置106に送る。
【0032】
更にまた、入力装置105は、ユーザからの例えばマウス操作、キーボード操作等の指示によって表示画像の切替等の入力を行ない、監視モニタ103は、画像切替合成装置106を介して、第1の侵入物体監視装置101及び第2の侵入物体監視装置102による監視結果画像を、ユーザから入力された指示により、例えば2画面並べて表示したり、どちらか1つを切り替えて表示する。
【0033】
次に、本発明の別の実施例の侵入物体監視システムを説明する。
本実施例の侵入物体監視システムは、第2の侵入物体監視装置を複数備える。第2の侵入物体監視装置102には、固有のID(識別)番号が割り当てられており、複数の第2の侵入物体監視装置のそれぞれを区別できるようになっている。例えば、第2の侵入物体監視装置が2台の場合の構成例を図11で説明する。
【0034】
図11は、本発明の侵入物体監視システムのハードウエア構成を示すブロック図である。この侵入物体監視システムは、第1の侵入物体監視装置101と2台の第2の侵入物体監視装置102と108によって構成されている。図11に示す構成は、図1で示される侵入物体監視システムに第2の監視装置108を追加したものであり、第2の侵入物体監視装置108を構成するブロック108a〜108mは、第2の侵入物体監視装置102を構成するブロック102a〜102mと同じものである。
このハードウエア構成を示すブロック図では、第1の通信I/F101hと第2の通信I/F102h、更に別の第2の通信I/F108hとは、通信ケーブル107によって接続されている。また、第1の画像出力I/F101iと第2の画像出力I/F102i、更に別の第2の画像出力I/F108iとは、画像切替合成装置106に接続されている。
【0035】
図2と図3は、本発明の一実施例の侵入物体監視方法の処理手順の一例を説明するフローチャートであり、図11の侵入物体監視システムを参照しつつ以下で説明する。
本実施例は、監視領域全体の映像を撮像する第1の撮像装置(第1のカメラ)から逐次入力する画像信号中から侵入物体を検出し、検出した侵入物体の位置変化を追跡する第1の侵入物体監視プロセスと、第1の侵入物体監視プロセスによって侵入物体が存在すると判定された場合に、第2の撮像装置(第2のカメラ)から逐次入力する画像信号中の侵入物体を検出し、雲台を制御しながら第2の撮像装置の視野内に常に侵入物体を捉えるように追尾するための第2の侵入物体監視プロセスとを備え、第1の侵入物体監視プロセスを第1の侵入物体監視装置101のCPU101cの下で制御し、第2の侵入物体監視プロセスを第2の侵入物体監視装置102または108のCPU102cまたは108cの下で制御することによって、それぞれ独立に制御する。これによって、監視処理対象領域内の侵入物体を追尾させるようにした方法である。
図2は第1の侵入物体監視プロセスの一実施例を説明するフローチャートであり、図3は第2の侵入物体監視プロセスの一実施例を説明するフローチヤートである。
【0036】
図2において、侵入物体の監視を開始すると、
画像入カステップ201では、第1のカメラ101aから、例えば、幅320 pix、高さ240 pix、8 bit/pixの入力画像を取得する。
侵入物体検出ステップ202では、入力画像に基づき、例えば、図9で説明したように、侵入物体検出処理を行なう。
次に、新規検出物体判定ステップ203では、検出した物体の検出位置と、1フレーム前の検出物体との検出位置を比較し、その検出位置の変化量を求める。そして、求めた変化量が所定の量(第1のカメラ101aの視野角に依存する量、例えば、50画素(50 pix))未満の場合には、検出物体が1フレーム前にも存在したもの(即ち、新規の検出物体ではない)とし、侵入物体追跡ステップ204へ分岐する。ここで、画像入力ステップ201で入力画像を取得する時間間隔は、例えば、100 msecであり、従って、1フレーム前とは、100 msec前の時刻である。また、変化量が所定の量以上の場合には、以前に検出された物体が移動すると予想される距離以上離れた場所で検出されたので、新規に検出された物体として待機確認要求送信ステップ207へ分岐する。
【0037】
侵入物体追跡ステップ204では、1フレーム前の検出物体を現時刻の検出物体の1フレーム前の検出物体とみなし、その位置変化を侵入者の移動軌跡であるとする。
次に追跡失敗判定ステップ205では、侵入物体の1フレーム前に求めた移動軌跡と現時刻に求めた移動軌跡の角度変化量を計算し、角度変化量が所定の値(例えば90 °)以上変化していた場合には、追跡失敗と見なす。これは、侵入物体が、通常、急激に進行方向を変えないという知見に基づく。
1フレーム前に求めた移動軌跡と現在求めた移動軌跡の変化量θは、1フレーム前に侵入物体が(x11,y11)から(x12,y12)、現在のフレームで侵入物体が(x21,y21)から(x22,y22)と移動したものとすると、次式のように算出される。
【0038】
【数4】
【0039】
追跡失敗判定ステップ205で追跡失敗と見なされた場合には、第1の通信I/F101hを介して、第2の侵入物体監視装置102または108に侵入物体の追跡結果を送信すると共に、視野外移動判定ステップ206に進み、視野外移動判定ステップ206において、画像切替合成装置106を介して監視モニタ103へ信号が送られ、監視モニタ103は例えば“侵入物体見逃し”等の表示を行い、全検出物体終了判定ステップ210に分岐する。
【0040】
追跡失敗判定ステップ205で追跡失敗と判定された場合には、第1の通信I/F101hを介して、第2の侵入物体監視装置102または108に侵入物体の追跡結果を送信すると共に、視野外移動判定ステップ206に進み、視野外移動判定ステップ206において、画像切替合成装置106を介して監視モニタ103へ信号が送られ、監視モニタ103は例えば“侵入物体見逃し”等の表示を行い、全検出物体終了判定ステップ208に分岐する。
以上のように、追跡失敗判定ステップ205で、追跡失敗と判定された場合には、追跡失敗という追跡結果を第2の侵入物体監視装置102または108に送信すると述べた。尚、上記「侵入物体の追跡結果」とは、侵入物体がどのように動いたかを表す情報で、例えば、対象物体の位置や移動量や移動方向などを含む情報である。例えば、次のような、ありえない数値を侵入物体の追跡結果として第2の侵入物体監視装置102または108に送信するようにしても良い。例えば、カメラ101aあるいは102aまたは108aによって得られる入力画像が、横256画素、縦192画素で構成され、画像上の侵入物体の座標位置(X,Y)を横軸(X軸)の0から255までの数値と縦軸(Y軸)の0から191までの数値を組合せて指定するものとする。このとき、例えば、(999,999)は上記ありえない数値として、何か予め定めたところの情報を伝えるために使用することができる。
【0041】
また、追跡失敗判定ステップ205で追跡が行なえたと判定された場合には、第1の通信I/F101hを介して、第2の侵入物体監視装置102または108に侵入物体の位置情報と共に追跡結果を送信し、全検出物体終了判定ステップ210へ分岐する。尚、図2の右向きの太い矢印は、第1の侵入物体監視プロセスの処理結果の情報を第2の侵入物体監視プロセスを処理する第2の侵入物体監視装置のいずれかに宛てて送信することを表す。
また、侵入物体追尾割当ステップ207では、第1の通信I/F101hを介して、現在追尾を行っていない第2の侵入物体監視装置102または108に侵入物体の位置情報と共に追尾割当の信号を送信し、全検出物体終了判定ステップ208へ分岐する。
【0042】
図10は、本発明の一実施例の通信ケーブル107に流れる通信情報の構成を表す一例である。
通信データは、7バイトのデータ列から構成されており、STX3201、DST3202、SRC3203、COM3204、DT13205、DT23206、ETX3207の順で送信される。ここで、STX3201は、通信データの先頭バイトを表し(Start of TeXt)、例えば $A0($ は16進数の数値であることを表す)を用いる。更に、DST3202は送信宛先(Destination)のID(識別名)、SRC3203は送信元(Source)のIDを表し、例えば、第1の侵入物体監視装置101のIDを“1”、第2の侵入物体監視装置102のIDを“2”、第2の侵入物体監視装置108のIDを“3”とした場合、第1の侵入物体監視装置101から第2の侵入物体監視装置102へ通信データを送信する場合、DST = 2、SRC = 1となる。更に、COM3204は、通信データの内容(Command)を表し、このデータで通信データが、例えば、追尾割当要求なのか、追跡結果なのか、あるいは追尾結果なのかを表す。例えば、追尾割当要求の場合はCOM = 1、追跡結果の場合はCOM = 2、追尾結果の場合はCOM = 3とする。更に、DT13205、DT23206は、付加情報1(Data 1)と付加情報2(Data 2)を表し、通信データの内容COM3204と組合わせて用いる。例えば、追尾割当要求(COM = 1)とした場合、追尾すべき対象物体がどの位置に存在するかを第2の侵入物体監視装置102または108に送信しなければならないが、この場合、付加情報1(Data 1)に対象物体のX座標、付加情報2(Data 2)に対象物体のY座標を指定する。更に、ETX3207は、通信データの終了バイトを表し(End of TeXt)、例えば $AFを用いる。
以上の通信データを用いることで、複数の侵入物体監視装置間で追尾割当要求、対象物体の追跡結果、対象物体の追尾結果をやり取りすることができる。なお、ここでは、通信データを7バイトのデータ列で構成したが、7バイト以外のデータ列で構成したり、また送信するデータの内容に応じて可変長にすることも可能である。
【0043】
次に、待機状態判定ステップ208では、第2の侵入監視装置102または108から、第1の通信I/F101hを介して待機状態信号が到来するのを待ち受ける。
第2の侵入物体監視装置102または108は、それぞれ、待機確認信号を受信すると、現在侵入物体の追尾を受け持っているものは応答を返さない。しかし、現在侵入物体の追尾を行っていない第2の侵入物体監視装置102または108はすべて、例えば最後に追尾した雲台の制御量情報等から、現在監視対象区域のどの部分にカメラ視野が向いているかの情報を、自分に割当てられたID番号と共に、待機状態信号として第1の侵入物体監視装置101に応答を返す。
第1の侵入物体監視装置101は、所定時間内に待機状態信号を受信した場合には侵入物体追尾割当ステップ209へ分岐し、所定時間内に待機状態信号を受信しなかった場合には全検出物体終了判定ステップ210へ分岐する。もし、侵入物体に割当て可能な第2の侵入物体監視装置がなければ、全検出物体終了判定ステップ210が、ユーザに知らせる何らかの処理(例えば警告を鳴らす)を実行し、記録を残す。
前述のように、この待機状態信号には、複数の第2の侵入物体監視装置102または108の1組を特定するためのID番号が付加されており、複数の第2の侵入物体監視装置で構成した場合でも、どの第2の侵入物体監視装置から送信されたものかを識別することができる。
【0044】
次に、侵入物体追尾割当ステップ209では、待機状態信号に付加されているID番号に基づき、第1の通信I/F101hを介して、該当する第2の侵入物体監視装置へ侵入物体の位置情報と共に追尾割当要求を送信し、第2の侵入物体監視プロセスヘ移行し、全検出物体終了判定ステップ210へ分岐する。
【0045】
第1の侵入監視装置101が、待機状態信号を1つだけ受信した場合には、その待機状態信号に付加されたID番号を付加して、追尾割当要求を送信する。
しかし、待機状態信号を所定時間内に複数受信した場合には、例えば、複数の第2の侵入監視装置102または108から待機状態信号を受信した場合には、一番初めに受信した待機状態信号を選択する。そして、選択したID番号を付加して追尾割当要求を送信する。
【0046】
全検出物体終了判定ステップ210では、侵入物体検出ステップ202において検出された全ての侵入物体に対して侵入物体追跡ステップ204あるいは待機確認要求送信ステップ207が実行された場合に画像入カステップ201へ分岐し、侵入物体追跡ステップ204あるいは待機確認要求送信ステップ207が実行されていない物体が存在する場合は新規検出物体判定ステップ203へ分岐する。
【0047】
次に図3の第2の侵入物体監視プロセスでは、
追尾割当待ちステップ301では、第2の通信I/F102hまたは108hを介して、第1の侵入物体監視プロセスから、検出物体の位置情報と追尾割当の信号が送信されてくるまで待機する。
追尾割当判定ステップ302では、追尾割当の信号を受信した場合に待機状態情報送信ステップ303へ分岐し、追尾割当の信号を受信しなかった場合に追尾割当待ちステップ301へ分岐する。
【0048】
そして、待機状態情報送信ステップ303では、第2の通信I/F102hまたは108hを介して、第1の侵入物体監視装置101へ侵入物体監視装置ID番号を付加した待機状態信号を送信する。
【0049】
追尾割当待ちステップ304では、第2の通信I/F102hまたは108hを介して、第1の侵入物体監視装置101からの検出物体の位置情報と追尾割当の信号が送信されてくるまで所定時間待機する。
そして、追尾割当判定ステップ305では、追尾割当待ちステップ304において、追尾割当の信号を所定時間内に受信した場合にはカメラ雲台制御ステップ306へ分岐し、追尾割当の信号を所定時間内に受信しなかった場合には待機確認要求受信ステップ301へ分岐する。
【0050】
カメラ雲台制御ステップ306では、追尾割当待ちステップ304で受信した侵入物体の位置等の検出情報に基づき、第2の出力I/F102Jまたは108jを介して雲台制御装置102lまたは108lを制御することによってカメラ雲台102mまたは108mを操作して第2のカメラ102aまたは108aの視野905内(図9)に第1の侵入物体監視プロセスで検出した侵入物体901(図9)を捉える。
カメラ雲台102mまたは108mの制御量(パン角、チルト角)は、例えば、前述の図9で示した方法によって算出される。
次に画像入カステップ307では、第2のカメラ102aまたは108aから、例えば、幅320 pix、高さ240 pix、8 bit/pixの入力画像を取得する。
初期テンプレート作成ステップ308では、画像入カステップ307で取得した入力画像に基づき図8で説明した侵入物体検出処理を行い、検出された侵入物体をテンプレート画像として第2の画像メモリ102dに記憶する。
【0051】
次に画像入カステップ309では、画像入カステップ307と同様に入力画像を取得する。但し、画像入カステップ309が取得する画像は、画像入カステップ307から画像入カステップ309までの処理時間が経過しているため、その処理時間後入力したフレームの画像が取得される。
そして、侵入物体追尾ステップ310では、第2の画像メモリ102dまたは108dに記憶したテンプレート画像に基づき、画像入カステップ307で取得した入力画像のテンプレートマッチングを行ない、第1の侵入物体監視プロセスで検出した侵入物体との位置変化量を検出する。
テンプレートマッチングとは、ある画像中でテンプレート画像として登録された画像がどの位置に存在するかを検出するもので、例えば、 1985年に総研出版より出版された田村秀行氏監修による『コンピュータ画像処理入門』と題する書籍のP118〜125に解説されている。
次に、追尾失敗判定ステップ311では、侵入物体追尾ステップ310において、テンプレートに登録した侵入物体が検出されなかった場合には第2の通信I/F102hまたは108hを介して第1の侵入物体監視装置101に侵入物体の位置情報と共に追尾結果を送信し、追尾要求待ちステップ301へ分岐する。
また侵入物体が検出された場合には、第2の通信I/F102hまたは108hを介して第1の侵入物体監視装置101に侵入物体の位置情報と共に追尾結果を送信し、テンプレート更新ステップ312へ分岐する。
【0052】
テンプレート更新ステップ312では、テンプレートマッチングによって検出した侵入物体の位置の画像を使って、第2の画像メモリ102dまたは108dに記憶したテンプレート画像を更新する。
次に、カメラ雲台制御ステップ313では、侵入物体追尾ステップ310でテンプレートマッチングによって検出された侵入物体の位置に基づき、第2の出力I/F102hまたは108hを介して雲台制御装置102lまたは108lを制御する。
即ち、侵入物体が、画像中央から上方に存在する場合にはカメラ雲台102mまたは108mのチルト角を適量上向きに変更し、画像中央から下方に存在する場合にはカメラ雲台102mまたは108mのチルト角を適量下向きに変更する。
また、侵入物体が、画像中央から左方に存在する場合にはカメラ雲台102mまたは108mのパン角を適量左向きに変更し、画像中央から右方に存在する場合にはカメラ雲台102mまたは108mのパン角を適量右向きに変更する。
【0053】
即ち、本実施例によれば、第1の侵入物体監視プロセスを第1の侵入物体監視装置101のCPU101cの制御の下で制御し、第2の侵入物体監視プロセスを第2の侵入物体監視装置102または108のCPU102cまたは108cの制御の下で制御し、それぞれ独立に制御する。これによって監視処理の処理量を分散させることができ、監視領域内に複数の侵入物体が存在する場合であっても、監視処理に関わる処理量が増加することなく、それぞれの侵入物体を複数の第2の侵入物体監視装置のどれかに割当てることによって侵入物体を追尾することが可能となる。
【0054】
図4は、本発明の別の実施例の侵入物体監視方法の処理手順の一例を説明するフローチャートである。
本実施例は、図2で説明した待機確認要求送信ステップ207の代わりに、図2の待機確認要求送信ステップ207とは異なる処理機能を持った待機確認要求送信ステップ401を設け、侵入物体から最も近い位置に設置された第2の侵入物体監視装置へ待機確認要求を送信する。そして、待機状態判定ステップ208において、この最も近い位置に設置された第2の侵入物体監視装置が待機状態である場合は、侵入物体追尾割り当てステップ209に分岐し、この侵入物体から最も近い位置に設置された第2の侵入物体監視装置へ侵入物体の追尾を割り当てる。
侵入物体から最も近い位置に設置された第2の侵入物体監視装置が待機状態でない(即ち、他の侵入物体を追尾中である)場合には待機確認要求送信ステップ401へ分岐して、次に近い位置に設置された第2の侵入物体監視装置へ待機確認要求信号を送信する。
全ての第2の侵入物体監視装置が追尾中(待機状態ではない)場合は、例えば、追尾割り当てを行わず、全検出物体終了ステップ210へ分岐する。待機確認要求送信ステップ401は、従って、侵入物体の検出された画像上の位置座標を基に侵入物体の監視領域内での座標(絶対座標)を算出し、この算出した座標と各第2の侵入物体監視装置の監視領域内での位置(該当する第2の侵入物体監視装置のプログラムメモリに保存されている)を比較し、侵入物体に最も近い第2の侵入物体監視装置を侵入物体の追尾に指定して侵入物体追尾割り当てステップ209で追尾割り当てを行う。
【0055】
待機状態判定ステップ208でこの侵入物体に最も近い第2の侵入物体監視装置が追尾中であると判定された場合には、次に侵入物体に近い第2の侵入物体監視装置を侵入物体の追尾に指定し、侵入物体追尾割り当てステップ209において追尾割り当てが修正される。
即ち、このように、図4における待機確認要求送信ステップ401では、検出した侵入物体の検出位置に応じて、例えば、新規に検出した侵入物体の位置座標に最も近い位置に取付けられた第2の侵入物体監視装置を選択するようにしたものである。
【0056】
図4のフローチャートの処理動作の一例を図5によって説明する。図5は、1台の第1の侵入物体監視装置と複数の第2の侵入物体監視装置とによって構成された本発明の侵入物体監視システムの一実施例を説明するための図である。但し、複数の第2の侵入物体監視装置のうち2台だけ表示し、他は省略している。
図5において、監視領域505中の侵入物体501を第1のカメラ501によって検出し、ステップ203までの処理がなされ、ステップ203によって対象の侵入物体が新規に検出された侵入物体であると判定されたとする。
すると、第1のプログラムメモリ101eに保存されている第1の侵入物体監視プログラム(図5では、第1のカメラ501で代表し、他の構成要素は省略している)は、検出した侵入物体の位置情報をもとに、侵入物体501に最も近い位置に存在する第2の侵入物体監視装置(図5では、第3のカメラ503で代表し、他の構成要素は省略している)を選択し待機要求確認信号を送信する(ステップ401)。
【0057】
次に、待機状態判定ステップ208では、選択した第2の侵入物体監視装置が待機状態でない(他の侵入物体を追尾中である)場合に待機確認要求送信ステップ401へ分岐する。また、待機中である場合は、ステップ209に進む。
待機確認要求送信ステップ401では、第2のプログラムメモリ102eに保存されている第2の侵入物体監視装置の位置情報から侵入物体501に次に近い位置に存在する第2の侵入物体監視装置を選択し待機要求確認信号を送信する。
即ち、本発明によると、検出した侵入物体の追尾を、その存在する位置に最も近い第2の侵入物体監視装置から順に割り当てることができ、侵入物体を的確かつ迅速に追尾することが可能となる。
【0058】
更に、図4のフローチャートの処理動作の他の一例を図6によって説明する。図6は、第1の侵入物体監視装置と1台の第2の侵入物体監視装置とによって構成された侵入物体監視システムの一実施例である。
図6の監視領域全体605中には、侵入物体601と侵入物体602が存在する。第1のカメラ603の監視領域全体605中には、優先順位の高い部分監視領域606が予め設定されている。新規検出物体判定203ステップでは、検出された侵入物体が複数ある場合に、先ず優先順位の高い部分監視領域606で検出された侵入物体に対して新規に検出された侵入物体であるか否かを判定し、これまでに検出されていた侵入物体であれば侵入物体追跡ステップ204へ分岐し、新規の侵入物体であった場合は待機確認要求送信ステップ401へ分岐する。そして、優先順位が高い部分監視領域606での検出物体の判定がすべて終了してから、次に優先度が高い部分監視領域というように、優先順位が高い部分監視領域から順番に判定を行う。従って、本発明の上記実施例によると、監視領域を分割して複数の部分領域を設けかつそれらの部分領域に優先順位をつけ、第2の侵入物体監視装置に、検出した複数の侵入物体が存在する部分監視領域の優先順位にしたがって順に割当てることによって、迅速かつ効率的に侵入物体を追尾することが可能となる。
【0059】
前述の実施例では、第1の侵入監視装置101が、待機状態信号を所定時間内に複数受信した場合には、例えば、以下の方法があると説明した。
(1) 一番初めに受信した待機状態信号を採用する。
(2) 新規に検出した侵入物体の位置座標と、最も近い位置に取付けられた第2の侵入物体監視装置を選択する。
しかし、その他、第2の侵入物体監視装置は、今現在のカメラ方向など、今現在の雲台の制御情報を待機状態信号に含めても良い。
この今現在の雲台の制御情報に基づき、待機確認要求送信ステップは、例えば、監視領域全体の中のある部分を監視しようとする場合、ちょうどカメラの光軸方向がたまたま都合よくこの部分の方に向いている第2の侵入物体監視装置を的確に選択することができる。
以上述べたように、第1の侵入物体監視装置は、それら第2の侵入物体監視装置からの待機状態信号に含められた雲台の制御情報の内容や、ID番号と照合できるカメラ位置情報等種々の情報の組合せから、最適な第2の侵入物体監視装置を選択し、選択したID番号を付加して追尾割当要求を送信することができる。
そしてその結果、迅速かつ効率的で正確に侵入物体監視を実行可能な最適な条件を選択することができる。
【0060】
【発明の効果】
以上のように本発明によれば、第1の侵入物体監視装置と第2の侵入物体監視装置とをそれぞれに内在するCPUの制御の下でそれぞれ独立に制御することによって侵入物体監視システムの処理量を分散させて複数の侵入物体を追尾できるようにして、検出した侵入物体を追尾する最適の第2の侵入物体監視装置を使って侵入物体を追尾することができる。
更に、本発明の別の効果によれば、監視領域を分割して優先順位をつけ、侵入物体を検出した監視領域の優先順位にしたがって第2の侵入物体監視装置を割当てることができるため侵入物体の監視性能を著しく向上させることができる。
以上のように、本発明は、複数の物体が監視区域内に侵入しても、それぞれの侵入物体に対して、迅速かつ効率的に個々に追尾を開始することができるため、正確で信頼性の高い侵入物体監視システムを提供することができるため、侵入物体監視システムの適用範囲を大きく広げることができる。
【図面の簡単な説明】
【図1】 本発明の侵入物体監視システムの構成の一実施例を示すプロック図。
【図2】 本発明の一実施例の処理動作を説明するためフローチャート。
【図3】 本発明の一実施例の処理動作を説明するためフローチャート。
【図4】 本発明の一実施例の処理動作を説明するためフローチャート。
【図5】 本発明の監視モニタに表示される画像の一実施例を示す図。
【図6】 本発明の監視モニタに表示される画像の一実施例を示す図。
【図7】 従来の2種類のカメラを用いた監視装置について説明するための図。
【図8】 侵入物体検出処理方法の原理の一例を説明する図。
【図9】 第1のカメラが検出した侵入物体を、第2のカメラが追尾する方法を説明するための図。
【図10】 本発明の一実施例の通信ケーブル107に流れる通信情報の構成を表す一例。
【図11】 本発明の侵入物体監視システムの構成の一実施例を示すプロック図。
【符号の説明】
101:第1の侵入物体監視装置、 101a:第1のカメラ、 104b:第1の画像入力I/F、 101c:第1のCPU、 101d:第1の画像メモリ、 101e:第1のプログラムメモリ、 101f:第1のワークメモリ、 1019:入力I/F、 101h:第1の通信I/F、 101i:第1の画像出力I/F、 101j:第1の出力I/F、 101k:第1のデータバス、 102,108:第2の侵入物体監視装置、 102a,108a:第2のカメラ、 102b,108b:第2の画像入力I/F、 102c,108c:第2のCPU、 102d,108d:第2の画像メモリ、 102e,108e:第2のプログラムメモリ、 102f,108f:第2のワークメモリ、 102h,108h:第2の 通信I/F、 102i,108i:第2の画像出力I/F、 102j,108j:第2の出力I/F、 102k,108k:第2のデータバス、 102l,108l:雲台制御装置、 102m,108m:カメラ雲台、 103:監視モニタ、 104:警告灯、 105:入力装置、 106:画像切替合成装置、 107:通信ケーブル、 701:侵入物体、 702:第1のカメラ、 703:第2のカメラ、 704:監視対象領域、 705:第2のカメラの視野範囲、 801,802,803:入力画像、 804,805:差分画像、 806,807:二値化画像、 808:論理積画像、 809,810:減算器、 811,812:二値化器、 813:論理積器、 814,815,816:物体、 817,818:領域、 819,820,821:画像、 901:侵入物体、 902:第1のカメラ、 903:第2のカメラ、 904,905:視野範囲。
Claims (2)
- 広域を撮像する第1のカメラ装置と、当該第1のカメラ装置の画像から検出した物体の位置情報に基づいて、前記物体を捕捉する第2のカメラ装置からなる物体検出装置を使用した物体検出方法であって、
前記検出した物体を前記第1のカメラ装置の画像に基づいて追跡中に、1フレーム前に求めた移動軌跡と現時刻に求めた移動軌跡の角度変化量が所定の値以上変化していた場合には、表示装置上に物体見逃しの表示を行う、
ことを特徴とする物体検出方法。 - 広域を撮像する第1のカメラ装置と、当該第1のカメラ装置の画像から検出した物体の位置情報に基づいて、前記物体を捕捉する第2のカメラ装置からなる物体検出装置であって、
前記検出した物体を前記第1のカメラ装置の画像に基づいて追跡中に、1フレーム前に求めた移動軌跡と現時刻に求めた移動軌跡の角度変化量が所定の値以上変化していた場合には、表示装置上に物体見逃しの表示を行う、
ことを特徴とする物体検出装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001054388A JP3852745B2 (ja) | 2000-02-28 | 2001-02-28 | 物体検出方法及び物体検出装置 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000050852 | 2000-02-28 | ||
JP2000-50852 | 2000-02-28 | ||
JP2001054388A JP3852745B2 (ja) | 2000-02-28 | 2001-02-28 | 物体検出方法及び物体検出装置 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006047762A Division JP4250172B2 (ja) | 2000-02-28 | 2006-02-24 | 物体検出方法及び物体検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001319279A JP2001319279A (ja) | 2001-11-16 |
JP3852745B2 true JP3852745B2 (ja) | 2006-12-06 |
Family
ID=26586189
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001054388A Expired - Fee Related JP3852745B2 (ja) | 2000-02-28 | 2001-02-28 | 物体検出方法及び物体検出装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3852745B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11290631B2 (en) * | 2020-02-21 | 2022-03-29 | Canon Kabushiki Kaisha | Image capture apparatus, image capture system, and control method |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4140567B2 (ja) | 2004-07-14 | 2008-08-27 | 松下電器産業株式会社 | 物体追跡装置および物体追跡方法 |
JP4378636B2 (ja) | 2005-02-28 | 2009-12-09 | ソニー株式会社 | 情報処理システム、情報処理装置および情報処理方法、プログラム、並びに記録媒体 |
JP5155145B2 (ja) * | 2006-02-23 | 2013-02-27 | パナソニック株式会社 | 画像補正装置、方法、プログラム、集積回路、システム |
JP4800073B2 (ja) * | 2006-03-09 | 2011-10-26 | 富士フイルム株式会社 | 監視システム、監視方法、及び監視プログラム |
JP5025292B2 (ja) * | 2007-03-12 | 2012-09-12 | 株式会社東芝 | 不審者検知システム及び方法 |
JP6174872B2 (ja) * | 2013-03-08 | 2017-08-02 | 株式会社デンソーウェーブ | 監視装置の制御方法 |
JP6174871B2 (ja) * | 2013-03-08 | 2017-08-02 | 株式会社デンソーウェーブ | 監視装置の制御方法 |
SG11201507077PA (en) | 2013-03-08 | 2015-10-29 | Denso Corp | Apparatus and method of monitoring moving objects |
CN105308955A (zh) * | 2013-03-08 | 2016-02-03 | 株式会社电装 | 监视移动体的装置以及方法 |
JP6182332B2 (ja) * | 2013-03-08 | 2017-08-16 | 株式会社デンソーウェーブ | 監視装置の制御方法 |
JP6182331B2 (ja) * | 2013-03-08 | 2017-08-16 | 株式会社デンソーウェーブ | 監視装置の制御方法 |
KR101328246B1 (ko) * | 2013-05-15 | 2013-11-14 | 강성진 | 이동 객체 자동 추적 시스템과 그 방법 |
-
2001
- 2001-02-28 JP JP2001054388A patent/JP3852745B2/ja not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11290631B2 (en) * | 2020-02-21 | 2022-03-29 | Canon Kabushiki Kaisha | Image capture apparatus, image capture system, and control method |
Also Published As
Publication number | Publication date |
---|---|
JP2001319279A (ja) | 2001-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100432870B1 (ko) | 침입물체 감시방법 및 침입물체 감시시스템 | |
JP4568009B2 (ja) | カメラ連携による監視装置 | |
JP3852745B2 (ja) | 物体検出方法及び物体検出装置 | |
JP5891061B2 (ja) | 映像監視装置、監視システム、監視システム構築方法 | |
JP6016295B2 (ja) | 監視システム | |
US20050128291A1 (en) | Video surveillance system | |
KR101596896B1 (ko) | 이종 카메라로부터의 영상을 이용하여 불법 주정차 단속을 수행하는 단속 시스템 및 이를 포함하는 관제 시스템 | |
JP3043925B2 (ja) | 移動物体検出判定装置 | |
JP4250172B2 (ja) | 物体検出方法及び物体検出装置 | |
JP2006245795A (ja) | 動体追跡装置及び動体追跡表示装置 | |
KR101832274B1 (ko) | 영상 촬영에 의한 지능형 방범 시스템 및 그 수행 방법 | |
JP2002290962A (ja) | 侵入者自動追尾方法および装置並びに画像処理装置 | |
KR100962612B1 (ko) | 실시간 거리 측정을 이용한 추적 감시 시스템 | |
JP3758511B2 (ja) | 物体検出装置及び物体検出プログラム | |
JP2001245284A (ja) | 侵入物体監視方法および侵入物体監視装置 | |
JP4444746B2 (ja) | 物体追尾方法及び物体追尾装置 | |
JP4985742B2 (ja) | 撮影システム、方法及びプログラム | |
KR102080456B1 (ko) | 압축영상에 대한 신택스 기반의 ptz 카메라의 객체 추적 제어 방법 | |
KR101155184B1 (ko) | 복수의 촬영수단간 협업을 이용한 영상추적 시스템 | |
KR20200010691A (ko) | 이종 카메라를 활용한 인물인식 및 교통통제시스템 | |
JP2006173872A (ja) | カメラ制御装置 | |
JP2000224457A (ja) | 監視システムおよびその制御方法およびそのプログラムを記憶した記憶媒体 | |
JP4744789B2 (ja) | 物体識別方法及び物体識別装置 | |
JP4038878B2 (ja) | 画像処理を用いた火災検出装置 | |
JP7014021B2 (ja) | 画像処理装置及び監視領域設定方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050629 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050711 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050908 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060213 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060224 |
|
A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20060405 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060613 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060802 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060830 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060831 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20090303 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100915 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110915 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120915 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130915 Year of fee payment: 7 |
|
LAPS | Cancellation because of no payment of annual fees |