JP3846553B2 - Image processing device - Google Patents

Image processing device Download PDF

Info

Publication number
JP3846553B2
JP3846553B2 JP2001099051A JP2001099051A JP3846553B2 JP 3846553 B2 JP3846553 B2 JP 3846553B2 JP 2001099051 A JP2001099051 A JP 2001099051A JP 2001099051 A JP2001099051 A JP 2001099051A JP 3846553 B2 JP3846553 B2 JP 3846553B2
Authority
JP
Japan
Prior art keywords
automatic tracking
image processing
tracking
moving object
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2001099051A
Other languages
Japanese (ja)
Other versions
JP2002300572A (en
Inventor
健二 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2001099051A priority Critical patent/JP3846553B2/en
Publication of JP2002300572A publication Critical patent/JP2002300572A/en
Application granted granted Critical
Publication of JP3846553B2 publication Critical patent/JP3846553B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Description

【０００１】
【発明の属する技術分野】
この発明は、映像データを基に移動物を検知し、該移動物を自動追尾する画像処理装置に関するものである。
【０００２】
【従来の技術】
図６は、従来の画像処理装置を含むシステムを示す図である。図６において、１は対象物を撮影するカメラ、２は上記カメラ１を水平方向に回転し、又は仰角を変更する回転台、３は撮影した映像を処理しカメラ１及び回転台２を制御する画像処理装置、４はカメラから画像処理装置に送られるビデオ信号、５はカメラを制御するためのレンズ制御信号、６は回転台を制御する回転台制御信号であり、３の画像処理装置はレンズ制御信号５及び回転台制御信号６により、カメラ１及び回転台２を制御することができる。
【０００３】
次に、動作について説明する。カメラ１は対象物を撮影すると、ビデオ信号４を画像処理装置３に伝送する。画像処理装置３はこのビデオ信号を処理し、表示部（図示せず。）に表示するとともに、移動物、例えば侵入者が映像中に現れた場合は、これを追跡して撮影するようにカメラ１及び回転台２を制御する。
【０００４】
しかし、従来の画像処理装置では、侵入者の検知後、追尾を行う際に、障害物や木々などといった固定背景に追尾対象が固定してしまうことがある。固定背景に追尾対象が固定したかどうかは、一定時間対象が動かないこと等により判断していたが、固定中は監視作業が中断してしまうという問題があった。
【０００５】
また、従来の画像処理装置は、検知した対象物を無差別に追尾しようとするので、追尾ができないような対象でも、追尾を実行してしまい結果的に誤動作を行うことがあった。
また、追尾中は監視が停止しているため、監視を行わない死角の時間が発生するなどの課題があった。
ここで、誤動作とは、追尾すべき対象（侵入者）とは別の物を追尾してしまうこと、及び建物や木々などの固定背景にカメラが固定してしまうことである。
【０００６】
誤動作の発生要因としては、侵入者が小さく写っている、背景とのコントラスト差異が小さい、建物や木々の影に隠れてしまう事等がある。
【０００７】
一方、特開昭６１−３９００９号公報並びに特開昭６１−３４５１５号公報には、カメラが追尾を行うことができる追尾範囲を、画像処理装置の画面内に予め設定しておき、カメラの追尾範囲が当該範囲を超える場合は、追尾を中止するようなシステムの発明が記載されている。
【０００８】
【発明が解決しようとする課題】
しかし、これらの公報に記載の装置の追尾可能範囲は、カメラで撮影される背景とは無関係に、カメラの自動焦点設定の観点から画面内の任意の範囲内において設定されるものである。
従って、当該追尾可能範囲内の背景に建物や木々などの固定背景が含まれている場合は、これらの固定背景を含む領域までカメラが追尾してしまうことになる。
【０００９】
また、当初の追尾可能範囲内にたまたま固定背景が含まれていない場合でも、カメラの移動や背景自体の変化などで、画面内の固定背景の相対位置が変化して、追尾可能範囲内に固定背景が含まれてしまうことも起こりうる。これらの場合、カメラは自動追尾中に固定背景に固定されてしまい結局誤動作を起こすことになり、依然として上記の問題を解決することはできない。
【００１０】
この発明は、上記のような課題を解決するためになされたものであり、カメラが自動追尾を行う際に、固定背景の存在により誤動作を起こさない画像処理装置を提供することを目的としている。さらには、侵入者以外のものや追尾困難な移動物を追尾しないようにし、監視停止中の時間の短縮を図ることが可能な画像処理装置を提供することを目的とするものである。
【００１１】
【課題を解決するための手段】
この発明にかかる画像処理装置は、外部のカメラから伝送されたビデオ信号を入力する入力手段と、該ビデオ信号をＡ／Ｄ変換する変換手段と、Ａ／Ｄ変換されたビデオ信号を処理して画像データを得る画像処理手段と、この画像データに基づく画像を画面に表示する表示手段と、画像データの中から固定背景と移動物とを識別し、前記識別された移動物を前記画面上で自動的に追尾するように追尾信号を出力する自動追尾手段と、この追尾信号に基づき外部のカメラ及び回転台座を制御するための制御信号を出力する出力手段とを備え、上記の自動追尾手段は、上記画面内に表示された所定の固定背景の周囲の領域を自動追尾を禁止する自動追尾禁止領域として設定するとともに、自動追尾中に移動物が上記画面内の自動追尾禁止領域に入域した場合は自動追尾を中止するようにしたものである。
【００１２】
また、上記の所定の固定背景は、画面内において任意に設定できるようにしたものである。
【００１３】
また、この発明にかかる画像処理装置は外部のカメラから伝送されたビデオ信号を入力する入力手段と、該ビデオ信号をＡ／Ｄ変換する変換手段と、Ａ／Ｄ変換されたビデオ信号を処理して画像データを得る画像処理手段と、画像データに基づく画像を画面に表示する表示手段と、画面に表示された画像の中から固定背景と移動物とを識別し、前記識別された移動物を画面上で自動的に追尾するように追尾信号を出力する自動追尾手段と、この追尾信号に基づき外部のカメラ及び回転台座を制御するための制御信号を出力する出力手段とを備え、上記の自動追尾手段は、自動追尾中に移動物が所定の方向に移動した場合は自動追尾を中止するようにしたものである。
【００１４】
さらに、上記所定の方向は、前記画面内において任意に設定できるようにしたものである。
【００１５】
また、この発明にかかる画像処理装置は外部のカメラから伝送されたビデオ信号を入力する入力手段と、該ビデオ信号をＡ／Ｄ変換する変換手段と、Ａ／Ｄ変換されたビデオ信号を処理して画像データを得る画像処理手段と、画像データに基づく画像を画面に表示する表示手段と、前記画像データの中から固定背景と移動物とを識別し、識別された移動物を前記画面上で自動的に追尾するように追尾信号を出力する自動追尾手段と、追尾信号に基づき外部のカメラ及び回転台座を制御するための制御信号を出力する出力手段とを備え、上記自動追尾手段は、前記画面内における固定背景と移動物とのコントラスト又は形状の大小関係を比較して自動追尾を行うか否かを判断し、所定の比較結果が得られた場合は自動追尾を中止するようにしたものである。
【００１６】
また、上記の出力手段は、自動追尾手段が自動追尾を中止した場合に、カメラを初期設定位置に移動させるための信号を出力するようにしたものである。
さらに、この画像処理装置は警報発生手段を備え、自動追尾手段が移動物を認識した場合は警報を発するようにしたものである。
【００１７】
【発明の実施の形態】
実施の形態１．
以下、この発明の実施の形態１を図に基づいて説明する。
図１は、この発明の実施の形態１に示す画像処理装置を含むシステムの全体構成図である。
【００１８】
図１において、１は対象物を撮影するカメラ、２は上記カメラ１を水平方向に回転し、又は仰角を変更する回転台、３０は撮影した映像を処理しカメラ１及び回転台２を制御する画像処理装置、４はカメラから画像処理装置に送られるビデオ信号、５はカメラを制御するためのレンズ制御信号、６は回転台を制御する回転台制御信号であり、３０の画像処理装置はレンズ制御信号５及び回転台制御信号６により、カメラ１及び回転台２を制御することができる。
【００１９】
また、図２は画像処理装置３０の内部の構成を示すブロック図である。図２において、３１はビデオ信号を入力する入力手段、３２は上記入力手段からの信号を受けてＡ／Ｄ変換をする変換手段、３３はＡ／Ｄ変換された信号を処理して画像データ形成するための画像処理手段、３４は画像を画面に表示するための表示手段、３５は上記画像データ中から固定背景と移動物とを識別し、前記識別された移動物を上記画面上で自動的に追尾するように追尾信号を出力する自動追尾手段である。
【００２０】
この自動追尾手段３５は、さらに固定背景における予め指定された固定背景の周囲の領域を、自動追尾を禁止する自動追尾禁止領域として設定するとともに、自動追尾中に移動物が自動追尾禁止領域に入域した場合は自動追尾を中止するための信号の出力をする。
【００２１】
３６は出力手段であり、上記の追尾信号を受けて、カメラ１を制御するためのレンズ制御信号５及び回転台２を制御するための回転台制御信号６を出力する。
【００２２】
次いで、この画像処理装置の動作の詳細について説明する。
図３は、カメラ１で撮影され、この画像処理装置の入力手段３１、変換手段３２及び画像処理手段３３を介して表示手段３４であるテレビモニタに表示された監視画像を示すものである。図３において、固定背景として立木１１及び外灯１２の他に、移動物たる侵入者１３が表示されている。
【００２３】
これらの画像のうち、立木１１及び外灯１２は固定背景であり、移動物である侵入者１３とは、自動追尾手段３５において識別される。ここで、自動追尾手段３５は一旦侵入者１３を捉えると、この侵入者の移動を追尾するように出力手段３６に追尾信号を出力する。
出力手段３６はこの追尾信号に従い、カメラが侵入者を追尾して撮影するようにレンズ制御信号５及び回転台制御信号６をカメラ１及び回転台座２に対して出力する。
【００２４】
ここで、侵入者１３が固定背景である立木１１又は外灯１２に接近するとカメラ１もそれに伴い侵入者１３を追跡しようとする。立木１１及び外灯１２はいずれも侵入者１３と誤認識されやすい固定背景であり、この侵入者１３を深追いして追尾すると、侵入者１３と固定背景とが接近するため、自動追尾手段３５は固定背景を侵入者であると誤認識するおそれがある。
【００２５】
しかし、この実施の形態１においては、自動追尾手段３５は画像処理手段３３からの画像データを基に、所定の固定背景である立木１１の周囲に第１の禁止領域を、また外灯１２の周囲に第２の追尾禁止領域を予め設定している。そして、侵入者１３がこれら第１の追尾禁止領域又は第２の追尾禁止領域に進入した場合、自動追尾手段３５は、直ちに追尾を中止するための信号を出力手段３６に対して出力し、出力手段３６はこれを受けてカメラ１及び回転台座２を初期の監視位置に戻す制御信号を出力する。
【００２６】
なお、上記の追尾禁止領域は、操作者が表示手段６の画面を見ながら任意に設定することができる。また、自動追尾手段３５に侵入者と誤認しやすい立木や外灯などの固定背景の形状を予め記憶させておき、カメラ１からの映像にこれらの固定背景が含まれている場合は自動的に認識して、当該固定背景の周囲に追尾禁止領域を設定することもできる。
【００２７】
本実施の形態にかかる画像処理装置では、以上のような構成とすることにより、侵入者と誤認されやすい所定の固定背景については、カメラが必要以上接近しないようになる。
その結果、自動追尾手段が移動物（侵入者）と固定背景とを誤認識することによる装置の誤動作を防止できる。また、自動追尾を中止した場合は、カメラを直ちに初期の監視位置に戻して監視を続けるようにするので、カメラが監視を停止している時間を短縮できる。
【００２８】
実施の形態２
上記実施の形態１の発明では、自動追尾手段３５は固定背景の周囲に追尾禁止領域を設けて、この範囲内におけるカメラの自動追尾を禁止して、画像処理装置３０の誤動作の防止を図るようにした。
【００２９】
しかし、この実施の形態２にかかる画像処理装置では、侵入者が表示手段における特定の方向に移動した場合にのみ、侵入者を追尾するようにしたものである。なお、当該画像処理装置の基本的な構成は実施の形態１で説明した図１及び図２に記載のものと同様であるので、これら図１、図２及び図４を用いて、動作の詳細について説明する。
【００３０】
図４は、図１のカメラ１で撮影され、この実施の形態２にかかる画像処理装置３０のテレビモニタ３３に表示される固定背景である建物１５及び移動物である侵入者１４の映像である。ここで侵入者１４は特定方向、すなわち建物１５に向かう方向に移動している。
この特定方向が予め設定された方向、例えば建物１５等のある方向であれば、図２における自動追尾手段３５は、この侵入者１４が追尾すべき移動物であると判断し、自動追尾を開始する。しかし、この侵入者１４の移動方向が上記の特定方向とは異なる方向であれば、自動追尾手段３５は、この移動物１４は追尾不要であると判断し、自動追尾を行わない。
【００３１】
このような構成とすることにより、画像処理装置が追尾の必要のない移動物（例えば動物等）を誤って侵入者であると誤認して追尾してしまうという問題を回避できる。
なお、上記特定の方向は一方向であっても良いし、複数の方向であってもい。また、この実施の形態２の画像処理装置に、上記実施の形態１で説明した追尾禁止領域を設定する機能を併せ持たすことができることは言うまでもない。
【００３２】
実施の形態３
上記の各実施の形態において、自動追尾手段３５は、移動物と固定背景とを識別して、移動物を追尾するようにした。しかし、移動物が立木等の固定背景に比較して、その大きさが極端に小さい場合や、表示手段におけるコントラストが低い場合は自動追尾中に移動物を見失うなどの誤動作を生じやすい。そこで、この実施の形態３にかかる画像処理装置では、自動追尾手段３５が移動物と固定背景との大きさ又はコントラストの差を比較して自動追尾を行うか否かを自動的に判断し、これらの差のうちのいずれか一方でも所定の範囲を超える場合は、追尾不能と判断して追尾を行わないようにしたものである。
【００３３】
本実施の形態にかかる画像処理装置では、このような構成とすることにより、自動追尾中に追尾不能に陥りやすいような大きさの移動物やコントラストの低い移動物を、追尾対象から除外して、初めから追尾をしないので、これらの要因に基づく誤動作を防止できる。
【００３４】
なお、上記では、移動物と固定背景との大小関係の比較並びにコントラストの比較の両者を考慮して追尾可否を判断するようにしたが、大小関係の比較又はコントラストの比較のいずれか一方のみを用いて追尾可否を判断してもよい。
また、この実施の形態３の画像処理装置の機能に、上記実施の形態１又は２で説明した画像処理装置の機能を併せ持たすことができることは言うまでもない。
【００３５】
実施の形態４
この実施の形態４にかかる画像処理装置は、上記の各実施の形態で説明した画像処理装置に、移動物を認識した場合に、その移動物の存在を知らせるために警報を発する警報装置を設けたものである。
図５は、そのような画像処理装置の構成を示す図である。
【００３６】
図において、３７は自動追尾手段３５からの警報信号を受けて警報を発する警報装置であり、自動追尾手段３５は、移動物を認識した場合に、自動追尾を行うか否かにかかわらず、当該警報信号を警報手段３７に出力する。また、その他の部分は実施の形態１で説明したものと同様であるので説明を省略する。なお、この警報手段３７は警報音を発するようなものであってもよく、また外部の装置に無線又は有線でアラーム信号を供給するようなものであってもよい。
【００３７】
本実施の形態にかかる画像処理装置では、移動物を認識した場合は、警報を発するようにしたので、装置の誤動作を引き起こすことなく、装置の監視者に移動物の存在を知らせることできる。
【００３８】
【発明の効果】
この発明にかかる画像処理装置は、所定の固定背景の周囲の領域を追尾禁止領域として設定し、その領域については移動物の自動追尾を行わないようにしたので、画像処理装置が移動物と固定背景とを誤って認識して、装置が誤動作することを防止できる効果がある。
【００３９】
また、移動物が特定の方向に移動する場合にのみ自動追尾をするようにしたので、無用な追尾を防止し、監視時間が短縮することを防止できる効果がある。
【００４０】
さらに、固定背景と移動物とのコントラスト又は形状の大小関係を比較して自動追尾を行うか否かを判断し、所定の比較結果が得られた場合は自動追尾を中止するようにしたので、装置の誤動作を未然に防止することができる効果がある。
【００４１】
また、自動追尾を中止した場合は直ちに、カメラを初期監視位置に戻すようにしたので、誤動作による監視停止時間を短縮することができる効果がある。
【００４２】
さらに、警報発生手段を備え、移動物を認識した場合は警報を発生するようにしたので、移動物の存在を監視者に知らせることができる効果がある。
【図面の簡単な説明】
【図１】 この発明の実施の形態１に示す画像処理装置を含むシステムの全体構成図である。
【図２】 この発明の実施の形態１に示す画像処理装置の構成を示す図である。
【図３】 この発明の実施の形態１に示す画像処理装置の表示手段に表示された画像を示すものである。
【図４】 この発明の実施の形態２に示す画像処理装置の表示手段に表示された画像を示すものである。
【図５】 この発明の実施の形態３に示す画像処理装置の構成を示すものである。
【図６】 従来の画像処理装置を含むシステムの全体構成図である。
【符号の説明】
４ ビデオ信号、５ レンズ制御信号、６ 回転台制御信号、１１ 立木、１２外灯、１３及び１４ 侵入者、３０ 画像処理装置、３１ 入力手段、３２ 変換手段、３３ 画像処理手段、３４ 表示手段、３５ 自動追尾手段、３６ 出力手段、３７ 警報発生手段。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image processing apparatus that detects a moving object based on video data and automatically tracks the moving object.
[0002]
[Prior art]
FIG. 6 is a diagram illustrating a system including a conventional image processing apparatus. In FIG. 6, 1 is a camera that captures an object, 2 is a rotating base that rotates the camera 1 in the horizontal direction or changes an elevation angle, and 3 is a camera that processes captured images and controls the camera 1 and the rotating base 2. An image processing device, 4 is a video signal sent from the camera to the image processing device, 5 is a lens control signal for controlling the camera, 6 is a turntable control signal for controlling the turntable, and 3 image processing device is a lens The camera 1 and the turntable 2 can be controlled by the control signal 5 and the turntable control signal 6.
[0003]
Next, the operation will be described. When the camera 1 captures an object, it transmits a video signal 4 to the image processing device 3. The image processing device 3 processes the video signal and displays it on a display unit (not shown). When a moving object, for example, an intruder appears in the video, the camera is adapted to track and shoot this. 1 and the turntable 2 are controlled.
[0004]
However, in the conventional image processing apparatus, when tracking is performed after an intruder is detected, the tracking target may be fixed to a fixed background such as an obstacle or trees. Whether or not the tracking target is fixed on the fixed background is determined by the fact that the target does not move for a certain period of time, but there is a problem that the monitoring operation is interrupted during the fixing.
[0005]
In addition, since the conventional image processing apparatus tries to track the detected object indiscriminately, even if the target cannot be tracked, tracking may be executed, resulting in malfunction.
In addition, since monitoring is stopped during tracking, there is a problem that a blind spot time in which monitoring is not performed occurs.
Here, the malfunctioning means that an object other than the object (intruder) to be tracked is tracked, and that the camera is fixed on a fixed background such as a building or trees.
[0006]
Causes of malfunction include intruders appearing small, contrast differences with the background being small, and hiding in the shadows of buildings and trees.
[0007]
On the other hand, in Japanese Patent Laid-Open Nos. 61-39209 and 61-34515, a tracking range that can be tracked by the camera is set in advance in the screen of the image processing apparatus. The invention of the system which stops a tracking when the range exceeds the said range is described.
[0008]
[Problems to be solved by the invention]
However, the trackable range of the devices described in these publications is set within an arbitrary range in the screen from the viewpoint of automatic focus setting of the camera, regardless of the background photographed by the camera.
Therefore, when a fixed background such as a building or trees is included in the background within the trackable range, the camera tracks up to an area including these fixed backgrounds.
[0009]
Even if a fixed background does not happen to be included in the initial trackable range, the relative position of the fixed background in the screen changes due to camera movement or changes in the background itself, and is fixed within the trackable range. It may happen that the background is included. In these cases, the camera is fixed to a fixed background during automatic tracking, which eventually causes a malfunction, and the above problem cannot still be solved.
[0010]
The present invention has been made to solve the above-described problems, and an object of the present invention is to provide an image processing apparatus that does not malfunction due to the presence of a fixed background when a camera performs automatic tracking. Furthermore, it is an object of the present invention to provide an image processing apparatus capable of not tracking an object other than an intruder or a moving object that is difficult to track and shortening the time during monitoring stop.
[0011]
[Means for Solving the Problems]
An image processing apparatus according to the present invention includes input means for inputting a video signal transmitted from an external camera, conversion means for A / D converting the video signal, and processing the A / D converted video signal. Image processing means for obtaining image data, display means for displaying an image based on the image data on a screen, a fixed background and a moving object are identified from the image data, and the identified moving object is displayed on the screen. Automatic tracking means for outputting a tracking signal so as to automatically track, and output means for outputting a control signal for controlling an external camera and a rotating base based on the tracking signal, the automatic tracking means described above sets a region around the predetermined fixed background displayed on the screen as an automatic tracking prohibition area that prohibits automatic tracking, moving object during automatic tracking is input to the automatic tracking prohibition area within the screen If it is obtained so as to cancel the automatic tracking.
[0012]
Further, the predetermined fixed background can be arbitrarily set in the screen.
[0013]
An image processing apparatus according to the present invention processes an input means for inputting a video signal transmitted from an external camera, a conversion means for A / D converting the video signal, and a video signal after A / D conversion. An image processing means for obtaining image data, a display means for displaying an image based on the image data on a screen, a fixed background and a moving object are identified from the images displayed on the screen, and the identified moving object is An automatic tracking means for outputting a tracking signal so as to automatically track on the screen; and an output means for outputting a control signal for controlling an external camera and a rotating base based on the tracking signal. The tracking means is configured to stop the automatic tracking when the moving object moves in a predetermined direction during the automatic tracking.
[0014]
Furthermore, the predetermined direction can be arbitrarily set in the screen.
[0015]
An image processing apparatus according to the present invention processes an input means for inputting a video signal transmitted from an external camera, a conversion means for A / D converting the video signal, and a video signal after A / D conversion. Image processing means for obtaining image data, display means for displaying an image based on the image data on a screen, a fixed background and a moving object are identified from the image data, and the identified moving object is displayed on the screen. automatically provided with an automatic tracking means for outputting a tracking signal to track, and output means for outputting a control signal for controlling the external camera and the rotary base on the basis of the tracking signal, said automatic tracking means, said determines whether to perform automatic tracking by comparing the magnitude of the contrast or the shape of the stationary background and the moving object in the screen, a predetermined comparison result is that obtained was to stop automatic tracking Than it is.
[0016]
Further, the output means outputs a signal for moving the camera to the initial setting position when the automatic tracking means stops the automatic tracking.
Further, this image processing apparatus is provided with an alarm generating means, and issues an alarm when the automatic tracking means recognizes a moving object.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Embodiment 1 FIG.
Embodiment 1 of the present invention will be described below with reference to the drawings.
FIG. 1 is an overall configuration diagram of a system including an image processing apparatus shown in Embodiment 1 of the present invention.
[0018]
In FIG. 1, 1 is a camera for photographing an object, 2 is a turntable for rotating the camera 1 in the horizontal direction or changing the elevation angle, and 30 is for processing the photographed image and controlling the camera 1 and the turntable 2. An image processing device, 4 is a video signal sent from the camera to the image processing device, 5 is a lens control signal for controlling the camera, 6 is a turntable control signal for controlling the turntable, and 30 image processing devices are lenses. The camera 1 and the turntable 2 can be controlled by the control signal 5 and the turntable control signal 6.
[0019]
FIG. 2 is a block diagram showing an internal configuration of the image processing apparatus 30. In FIG. 2, 31 is an input means for inputting a video signal, 32 is a conversion means for receiving a signal from the input means and performs A / D conversion, and 33 is an image data formed by processing the A / D converted signal. An image processing means 34 for displaying the image on the screen; 35, a fixed background and a moving object are identified from the image data; and the identified moving object is automatically displayed on the screen. Automatic tracking means for outputting a tracking signal so as to track.
[0020]
The automatic tracking means 35 further sets an area around the fixed background specified in advance in the fixed background as an automatic tracking prohibited area for prohibiting automatic tracking, and a moving object enters the automatic tracking prohibited area during automatic tracking. When the signal is detected, a signal is output to stop automatic tracking.
[0021]
An output means 36 receives the tracking signal and outputs a lens control signal 5 for controlling the camera 1 and a turntable control signal 6 for controlling the turntable 2.
[0022]
Next, details of the operation of the image processing apparatus will be described.
FIG. 3 shows a monitoring image taken by the camera 1 and displayed on the television monitor as the display means 34 through the input means 31, the conversion means 32, and the image processing means 33 of the image processing apparatus. In FIG. 3, an intruder 13 as a moving object is displayed in addition to the standing tree 11 and the outdoor lamp 12 as a fixed background.
[0023]
Among these images, the standing tree 11 and the outdoor lamp 12 are fixed backgrounds, and the intruder 13 that is a moving object is identified by the automatic tracking means 35. Here, once the automatic tracking means 35 catches the intruder 13, it outputs a tracking signal to the output means 36 so as to track the movement of the intruder.
The output means 36 outputs the lens control signal 5 and the turntable control signal 6 to the camera 1 and the turntable 2 so that the camera tracks the intruder and shoots in accordance with the tracking signal.
[0024]
Here, when the intruder 13 approaches the standing tree 11 or the outdoor light 12 as a fixed background, the camera 1 tries to track the intruder 13 accordingly. The standing tree 11 and the external light 12 are both fixed backgrounds that are easily misrecognized as intruders 13. When the intruder 13 is tracked after being deeply tracked, the intruders 13 and the fixed background approach each other. There is a risk of misrecognizing the background as an intruder.
[0025]
However, in the first embodiment, the automatic tracking means 35 sets the first prohibited area around the standing tree 11 that is a predetermined fixed background and the surroundings of the outside light 12 based on the image data from the image processing means 33. The second tracking prohibited area is set in advance. When the intruder 13 enters the first tracking prohibited area or the second tracking prohibited area, the automatic tracking means 35 immediately outputs a signal for stopping the tracking to the output means 36 and outputs it. In response to this, the means 36 outputs a control signal for returning the camera 1 and the rotary base 2 to the initial monitoring position.
[0026]
The tracking prohibition area can be arbitrarily set while the operator looks at the screen of the display means 6. The automatic tracking means 35 stores in advance the shapes of fixed backgrounds such as standing trees and outdoor lights that are easily misidentified as intruders, and automatically recognizes when these fixed backgrounds are included in the video from the camera 1. Thus, it is possible to set a tracking prohibited area around the fixed background.
[0027]
With the image processing apparatus according to the present embodiment, the camera is prevented from approaching more than necessary for a predetermined fixed background that is easily misidentified as an intruder by adopting the above-described configuration.
As a result, it is possible to prevent malfunction of the apparatus due to the automatic tracking means misrecognizing the moving object (intruder) and the fixed background. When automatic tracking is stopped, the camera is immediately returned to the initial monitoring position and monitoring is continued, so that the time during which the camera stops monitoring can be shortened.
[0028]
Embodiment 2
In the invention of the first embodiment, the automatic tracking means 35 provides a tracking prohibition area around the fixed background and prohibits the automatic tracking of the camera within this range to prevent malfunction of the image processing apparatus 30. I made it.
[0029]
However, in the image processing apparatus according to the second embodiment, the intruder is tracked only when the intruder moves in a specific direction on the display means. The basic configuration of the image processing apparatus is the same as that shown in FIGS. 1 and 2 described in the first embodiment, and the details of the operation will be described with reference to FIGS. 1, 2, and 4. Will be described.
[0030]
FIG. 4 is an image of the building 15 that is a fixed background and the moving intruder 14 that is captured by the camera 1 of FIG. 1 and displayed on the television monitor 33 of the image processing apparatus 30 according to the second embodiment. . Here, the intruder 14 is moving in a specific direction, that is, a direction toward the building 15.
If the specific direction is a predetermined direction, for example, a direction such as the building 15, the automatic tracking means 35 in FIG. 2 determines that the intruder 14 is a moving object to be tracked, and starts automatic tracking. To do. However, if the moving direction of the intruder 14 is different from the specific direction, the automatic tracking unit 35 determines that the moving object 14 does not need to be tracked and does not perform automatic tracking.
[0031]
By adopting such a configuration, it is possible to avoid the problem that the image processing apparatus mistakenly recognizes a moving object (for example, an animal or the like) that does not require tracking as an intruder and tracks the moving object.
Note that the specific direction may be one direction or a plurality of directions. Needless to say, the image processing apparatus according to the second embodiment can have the function of setting the tracking prohibited area described in the first embodiment.
[0032]
Embodiment 3
In each of the above-described embodiments, the automatic tracking means 35 is configured to track the moving object by identifying the moving object and the fixed background. However, when the moving object is extremely small compared to a fixed background such as a standing tree or when the contrast in the display means is low, a malfunction such as losing the moving object during automatic tracking is likely to occur. Therefore, in the image processing apparatus according to the third embodiment, the automatic tracking unit 35 automatically determines whether to perform automatic tracking by comparing the size or contrast difference between the moving object and the fixed background, If any one of these differences exceeds a predetermined range, it is determined that tracking is impossible and tracking is not performed.
[0033]
In the image processing apparatus according to the present embodiment, by adopting such a configuration, moving objects having a size that tends to become untrackable during automatic tracking or moving objects with low contrast are excluded from tracking targets. Since no tracking is performed from the beginning, malfunction based on these factors can be prevented.
[0034]
In the above description, whether or not tracking is possible is determined in consideration of both the comparison of the magnitude relationship between the moving object and the fixed background and the comparison of the contrast, but only either the comparison of the magnitude relationship or the comparison of the contrast is performed. It may be used to determine whether tracking is possible.
Needless to say, the functions of the image processing apparatus according to the third embodiment can be combined with the functions of the image processing apparatus described in the first or second embodiment.
[0035]
Embodiment 4
The image processing apparatus according to the fourth embodiment is provided with an alarm device that issues an alarm to notify the existence of the moving object when the moving object is recognized to the image processing apparatus described in each of the above embodiments. It is a thing.
FIG. 5 is a diagram showing the configuration of such an image processing apparatus.
[0036]
In the figure, reference numeral 37 denotes an alarm device that issues an alarm in response to an alarm signal from the automatic tracking means 35. The automatic tracking means 35, regardless of whether or not to perform automatic tracking when a moving object is recognized, An alarm signal is output to the alarm means 37. The other parts are the same as those described in the first embodiment, and a description thereof will be omitted. The alarm means 37 may emit an alarm sound, or may supply an alarm signal to an external device wirelessly or by wire.
[0037]
In the image processing apparatus according to the present embodiment, when a moving object is recognized, an alarm is issued, so that the apparatus monitor can be notified of the existence of the moving object without causing malfunction of the apparatus.
[0038]
【The invention's effect】
In the image processing apparatus according to the present invention, the area around the predetermined fixed background is set as a tracking prohibition area, and the automatic tracking of the moving object is not performed for the area. Therefore, the image processing apparatus is fixed to the moving object. There is an effect that it is possible to prevent the apparatus from malfunctioning by erroneously recognizing the background.
[0039]
In addition, since automatic tracking is performed only when a moving object moves in a specific direction, there is an effect that unnecessary tracking can be prevented and monitoring time can be prevented from being shortened.
[0040]
Furthermore, it was decided whether or not to perform automatic tracking by comparing the contrast or shape relationship between the fixed background and the moving object, and automatic tracking was stopped when a predetermined comparison result was obtained. There is an effect that it is possible to prevent malfunction of the apparatus.
[0041]
Further, since the camera is immediately returned to the initial monitoring position when the automatic tracking is stopped, there is an effect that the monitoring stop time due to malfunction can be shortened.
[0042]
Furthermore, since an alarm generating means is provided and an alarm is generated when a moving object is recognized, there is an effect that it is possible to notify the monitor of the presence of the moving object.
[Brief description of the drawings]
FIG. 1 is an overall configuration diagram of a system including an image processing apparatus according to Embodiment 1 of the present invention.
FIG. 2 is a diagram showing the configuration of the image processing apparatus shown in Embodiment 1 of the present invention.
FIG. 3 shows an image displayed on the display means of the image processing apparatus shown in Embodiment 1 of the present invention.
FIG. 4 shows an image displayed on the display means of the image processing apparatus shown in Embodiment 2 of the present invention.
FIG. 5 shows a configuration of an image processing apparatus shown in Embodiment 3 of the present invention.
FIG. 6 is an overall configuration diagram of a system including a conventional image processing apparatus.
[Explanation of symbols]
4 video signal, 5 lens control signal, 6 turntable control signal, 11 standing tree, 12 outdoor light, 13 and 14 intruder, 30 image processing device, 31 input means, 32 conversion means, 33 image processing means, 34 display means, 35 Automatic tracking means, 36 output means, 37 alarm generation means.

Claims (7)

外部のカメラから伝送されたビデオ信号を入力する入力手段と、
該ビデオ信号をＡ／Ｄ変換する変換手段と、前記Ａ／Ｄ変換されたビデオ信号を処理して画像データを得る画像処理手段と、
前記画像データに基づく画像を画面に表示する表示手段と、
前記画像データ中から固定背景と移動物とを識別し、前記識別された移動物を前記画面上で自動的に追尾するように追尾信号を出力する自動追尾手段と、
前記追尾信号に基づき外部のカメラ及び回転台座を制御するための制御信号を出力する出力手段とを備え、
前記自動追尾手段は、前記画面内における所定の固定背景の周囲の領域を、自動追尾を禁止する自動追尾禁止領域として設定するとともに、自動追尾中に前記移動物が前記画面内の前記自動追尾禁止領域に入域した場合は自動追尾を中止することを特徴とする画像処理装置。An input means for inputting a video signal transmitted from an external camera;
Conversion means for A / D converting the video signal; image processing means for processing the A / D converted video signal to obtain image data;
Display means for displaying an image based on the image data on a screen;
Automatic tracking means for identifying a fixed background and a moving object from the image data, and outputting a tracking signal so as to automatically track the identified moving object on the screen;
Output means for outputting a control signal for controlling an external camera and a rotating base based on the tracking signal;
The automatic tracking means sets an area around a predetermined fixed background in the screen as an automatic tracking prohibition area for prohibiting automatic tracking, and the moving object is prohibited from being automatically tracked in the screen during automatic tracking. An image processing apparatus, wherein automatic tracking is stopped when an area is entered. 前記所定の固定背景は、前記画面内において任意に設定できることを特徴とする請求項１記載の画像処理装置。The image processing apparatus according to claim 1, wherein the predetermined fixed background can be arbitrarily set in the screen. 外部のカメラから伝送されたビデオ信号を入力する入力手段と、
該ビデオ信号をＡ／Ｄ変換する変換手段と、
前記Ａ／Ｄ変換されたビデオ信号を処理して画像データを得る画像処理手段と、
前記画像データに基づく画像を画面に表示する表示手段と、
前記画像データの中から固定背景と移動物とを識別し、前記識別された移動物を前記画面上で自動的に追尾するように追尾信号を出力する自動追尾手段と、
前記追尾信号に基づき外部のカメラ及び回転台座を制御するための制御信号を出力する出力手段とを備え、前記自動追尾手段は、自動追尾中に前記移動物が所定の方向に移動した場合は自動追尾を中止することを特徴とする画像処理装置。An input means for inputting a video signal transmitted from an external camera;
Conversion means for A / D converting the video signal;
Image processing means for processing the A / D converted video signal to obtain image data;
Display means for displaying an image based on the image data on a screen;
Automatic tracking means for identifying a fixed background and a moving object from the image data and outputting a tracking signal so as to automatically track the identified moving object on the screen;
Output means for outputting a control signal for controlling an external camera and a rotating base based on the tracking signal, and the automatic tracking means is automatically operated when the moving object moves in a predetermined direction during automatic tracking. An image processing apparatus characterized by stopping tracking. 前記所定の方向は、前記画面内において任意に設定できることを特徴とする請求項４記載の画像処理装置。The image processing apparatus according to claim 4, wherein the predetermined direction can be arbitrarily set in the screen. 外部のカメラから伝送されたビデオ信号を入力する入力手段と、
該ビデオ信号をＡ／Ｄ変換する変換手段と、
前記Ａ／Ｄ変換されたビデオ信号を処理して画像データを得る画像処理手段と、
前記画像データに基づく画像を画面に表示する表示手段と、
前記画像データの中から固定背景と移動物とを識別し、前記識別された移動物を前記画面上で自動的に追尾するように追尾信号を出力する自動追尾手段と、
前記追尾信号に基づき外部のカメラ及び回転台座を制御するための制御信号を出力する出力手段とを備え、前記自動追尾手段は、前記画面内における固定背景と移動物とのコントラスト又は形状の大小関係を比較して自動追尾を行うか否かを判断し、所定の比較結果が得られた場合は自動追尾を中止することを特徴とする画像処理装置。An input means for inputting a video signal transmitted from an external camera;
Conversion means for A / D converting the video signal;
Image processing means for processing the A / D converted video signal to obtain image data;
Display means for displaying an image based on the image data on a screen;
Automatic tracking means for identifying a fixed background and a moving object from the image data and outputting a tracking signal so as to automatically track the identified moving object on the screen;
Output means for outputting a control signal for controlling an external camera and a rotating pedestal based on the tracking signal, and the automatic tracking means has a contrast or shape relationship between a fixed background and a moving object in the screen. An image processing apparatus that determines whether or not to perform automatic tracking by comparing the two, and stops automatic tracking when a predetermined comparison result is obtained. 前記出力手段は、前記自動追尾手段が自動追尾を中止した場合に、カメラを初期設定位置に移動させるための信号を出力することを特徴とする請求項１乃至請求項５のいずれか１項に記載の画像処理装置。The said output means outputs the signal for moving a camera to an initial setting position, when the said automatic tracking means stops automatic tracking, The one of Claims 1 thru | or 5 characterized by the above-mentioned. The image processing apparatus described. 前記画像処理装置は警報発生手段をさらに備え、前記自動追尾手段が移動物を認識した場合に、警報を発することを特徴とする請求項１乃至請求項５のいずれか１項に記載の画像処理装置。6. The image processing according to claim 1, wherein the image processing apparatus further includes an alarm generation unit, and issues an alarm when the automatic tracking unit recognizes a moving object. apparatus.
JP2001099051A 2001-03-30 2001-03-30 Image processing device Expired - Lifetime JP3846553B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001099051A JP3846553B2 (en) 2001-03-30 2001-03-30 Image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001099051A JP3846553B2 (en) 2001-03-30 2001-03-30 Image processing device

Publications (2)

Publication Number Publication Date
JP2002300572A JP2002300572A (en) 2002-10-11
JP3846553B2 true JP3846553B2 (en) 2006-11-15

Family

ID=18952646

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001099051A Expired - Lifetime JP3846553B2 (en) 2001-03-30 2001-03-30 Image processing device

Country Status (1)

Country Link
JP (1) JP3846553B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006311099A (en) * 2005-04-27 2006-11-09 Matsushita Electric Ind Co Ltd Device and method for automatic tracking
JP5279635B2 (en) * 2008-08-20 2013-09-04 キヤノン株式会社 Image processing apparatus, image processing method, and program
JP5127692B2 (en) * 2008-12-25 2013-01-23 キヤノン株式会社 Imaging apparatus and tracking method thereof
JP2011015244A (en) * 2009-07-03 2011-01-20 Sanyo Electric Co Ltd Video camera
WO2022209135A1 (en) * 2021-03-30 2022-10-06 富士フイルム株式会社 Control device, control method, and program

Also Published As

Publication number Publication date
JP2002300572A (en) 2002-10-11

Similar Documents

Publication Publication Date Title
US10861304B2 (en) Monitoring camera and monitoring camera control method
JP3698420B2 (en) Image monitoring apparatus, image monitoring method, and image monitoring processing program
US10728459B2 (en) System and method for tracking moving objects in a scene
JP4010444B2 (en) Omnidirectional monitoring control system, omnidirectional monitoring control method, and omnidirectional monitoring control program
US9041800B2 (en) Confined motion detection for pan-tilt cameras employing motion detection and autonomous motion tracking
JP4100934B2 (en) Composite camera system, zoom camera control method, and zoom camera control program
US10645311B2 (en) System and method for automated camera guard tour operation
JP2006523043A (en) Method and system for monitoring
US8717439B2 (en) Surveillance system and method
KR20050011698A (en) Object tracking method and object tracking apparatus
JP3846553B2 (en) Image processing device
JP2006279516A (en) Monitoring system, monitoring camera, and controller
JP4444746B2 (en) Object tracking method and object tracking device
TWM509482U (en) Surveillance device and system thereof
JP7176868B2 (en) monitoring device
JP2007318674A (en) Monitoring camera apparatus
TWI471825B (en) System and method for managing security of a roof
JPH02239779A (en) Automatic focusing, automatic picture angle adjustment, automatic visual line aligner and television doorphone set having them
KR101738514B1 (en) Monitoring system employing fish-eye thermal imaging camera and monitoring method using the same
JP2008219452A (en) Camera surveillance device
JP2006229450A (en) Network type supervisory camera apparatus, control program, and supervisory camera system
KR101804309B1 (en) Tracking cctv
KR20160121958A (en) Pan-tilt integrated surveillance camera system with a position tracking function of the object
KR20020071567A (en) A ccd camera system for effectively tracking a motion of objects and a method thereof
TWI573455B (en) Surveillance device, system and method thereof

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20040702

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040728

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060427

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060509

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060706

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060802

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060815

R151 Written notification of patent or utility model registration

Ref document number: 3846553

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090901

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100901

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110901

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110901

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120901

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130901

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term