JP5170731B2 - Traffic monitoring system - Google Patents

Traffic monitoring system Download PDF

Info

Publication number
JP5170731B2
JP5170731B2 JP2007023577A JP2007023577A JP5170731B2 JP 5170731 B2 JP5170731 B2 JP 5170731B2 JP 2007023577 A JP2007023577 A JP 2007023577A JP 2007023577 A JP2007023577 A JP 2007023577A JP 5170731 B2 JP5170731 B2 JP 5170731B2
Authority
JP
Japan
Prior art keywords
door
person
detection unit
camera
circle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007023577A
Other languages
Japanese (ja)
Other versions
JP2008191793A (en
Inventor
茂哲 本岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MegaChips Corp
Original Assignee
MegaChips Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MegaChips Corp filed Critical MegaChips Corp
Priority to JP2007023577A priority Critical patent/JP5170731B2/en
Publication of JP2008191793A publication Critical patent/JP2008191793A/en
Application granted granted Critical
Publication of JP5170731B2 publication Critical patent/JP5170731B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、通行監視システムに関し、特に、立入制限エリア内への不正侵入を監視するための通行監視システムに関する。   The present invention relates to a traffic monitoring system, and more particularly to a traffic monitoring system for monitoring unauthorized entry into a restricted access area.

従来、立入制限エリア内への不正侵入を監視するために、立入制限エリアへの出入口の近傍領域を監視カメラによって撮影するとともに、撮影された映像をハードディスク等に記録するシステムが存在する。   2. Description of the Related Art Conventionally, in order to monitor unauthorized entry into a restricted access area, there is a system that captures a region near the entrance to the restricted access area with a monitoring camera and records the captured image on a hard disk or the like.

例えば下記特許文献1には、立入制限エリアへの出入口の近傍領域の上方に距離センサ(距離画像撮像手段)を設置し、当該距離センサによって検出された被写体までの距離情報(距離画像情報)に基づいて、出入口を通行する人物の抽出を行う監視システムが開示されている。   For example, in Patent Document 1 below, a distance sensor (distance image capturing means) is installed above the area near the entrance to the entrance restricted area, and distance information (distance image information) to the subject detected by the distance sensor is included. Based on this, a monitoring system for extracting a person passing through an entrance is disclosed.

特開2006−243972号公報(図2(a)及び明細書の第0048段落乃至第0050段落参照)Japanese Patent Laying-Open No. 2006-243972 (see FIG. 2A and paragraphs 0048 to 0050 of the specification)

しかしながら、上記特許文献1に開示された監視システムによると、侵入者が床を這った姿勢で出入口の通行を試みた場合には、距離センサから床までの距離と、距離センサから侵入者までの距離とに大差がないため、距離センサが侵入者の存在を検出できない可能性がある。   However, according to the monitoring system disclosed in Patent Document 1, when the intruder attempts to pass through the entrance with a posture in which he / she leans on the floor, the distance from the distance sensor to the floor and the distance sensor to the intruder Since there is no large difference in distance, there is a possibility that the distance sensor cannot detect the presence of an intruder.

本発明はかかる事情に鑑みて成されたものであり、許可者による通行に紛れて非許可者が立入制限エリアへの出入口を通行すること(いわゆる共連れ)を確実に監視し得る通行監視システムを得ることを目的とする。   The present invention has been made in view of such circumstances, and is a traffic monitoring system that can reliably monitor that a non-permitted person passes through an entrance to an access restricted area (so-called companionship) due to traffic by a permitter. The purpose is to obtain.

第1の発明に係る通行監視システムは、ドアが設けられた所定の出入口を、当該出入口の近傍領域を含めて撮影するカメラと、前記ドアの開閉状態を検出する第1の検出部と、前記カメラによって撮影された映像に基づいて、前記出入口の近傍領域を移動する人物を検出する第2の検出部と、前記第1及び第2の検出部による検出結果に基づいて、前記ドアが開いてから次に閉じるまでの間に前記出入口を通行した人物が一か複数かを判定する判定部と、前記カメラによって撮影された映像に基づいて、前記カメラによる撮影画像の全領域の一部に、前記ドアの開閉状態を検出するために前記第1の検出部が監視すべき第1の監視領域を設定する第1の設定部と、前記カメラによって撮影された映像に基づいて、前記カメラによる撮影画像内において前記出入口を特定し、特定された前記出入口自身を、前記出入口を通行する人物を検出するために前記判定部が監視すべき第2の監視領域として設定する第2の設定部とを備え、前記第1の検出部は、前記カメラによって撮影された映像に基づいて、前記ドアの開閉状態を検出し、前記第2の設定部は、閉じられている状態での前記ドアの位置と、開かれている状態で前記第1の検出部によって検出された前記ドアの位置とに基づいて、前記出入口を特定することを特徴とする。
A traffic monitoring system according to a first aspect of the present invention is a camera for photographing a predetermined entrance / exit provided with a door including a region near the entrance / exit, a first detection unit for detecting an open / closed state of the door, Based on the image taken by the camera, the second detection unit that detects a person moving in the vicinity of the entrance and the detection result by the first and second detection units, the door is opened. And a determination unit that determines whether one or more persons have passed through the doorway until the next closing, and based on the video imaged by the camera, a part of the entire area of the image captured by the camera, Shooting by the camera based on a first setting unit for setting a first monitoring area to be monitored by the first detection unit to detect the open / closed state of the door, and an image shot by the camera In the image And a second setting unit that sets the specified entrance / exit as a second monitoring area to be monitored by the determination unit in order to detect a person passing through the entrance / exit. The first detection unit detects an open / closed state of the door based on an image taken by the camera, and the second setting unit is configured to detect the position of the door in a closed state, The doorway is specified based on the position of the door detected by the first detection unit in the opened state.

の発明に係る通行監視システムは、第の発明に係る通行監視システムにおいて特に、前記第1の検出部は、開かれている状態の前記ドアを検出している状況において、その開かれている状態の前記ドアを検出しなくなった場合、開かれている状態の前記ドアを検出しなくなった時点から、その状態が所定時間継続したことにより、前記ドアが閉じられたことを検出することを特徴とする。
The traffic monitoring system according to a second aspect of the invention is the traffic monitoring system according to the first aspect of the invention, particularly in the situation where the first detection unit detects the door in the opened state. When the door in the open state is no longer detected, it is detected that the door has been closed because the door has not been detected in the open state for a predetermined period of time. It is characterized by.

第3の発明に係る通行監視システムは、第1又は第2の発明に係る通行監視システムにおいて特に、前記カメラは、前記出入口の近傍領域の上方に設置されており、前記第2の検出部は、前記カメラによる撮像画像内において円を検出することによって、前記人物を検出し、前記第2の検出部は、重なる又は近接する複数の円を検出した場合、当該複数の円を包含する一つの円を規定し、当該一つの円を一人の前記人物として検出することを特徴とする。
Traffic monitoring system according to the third invention is the traffic monitoring system according to the first or second aspect, before Symbol camera is installed above the region near the doorway, said second detector Detects the person by detecting a circle in an image captured by the camera, and the second detection unit includes a plurality of circles when the plurality of overlapping or adjacent circles are detected. One circle is defined, and the one circle is detected as one person.

第4の発明に係る通行監視システムは、第1又は第2の発明に係る通行監視システムにおいて特に、前記カメラは、前記出入口の近傍領域の上方に設置されており、前記第2の検出部は、前記カメラによる撮像画像内において円を検出することによって、前記人物を検出し、前記カメラによる撮像画像内で前記円が移動した場合、前記第2の検出部は、前記円の中心位置情報及び半径情報に基づいて、移動の前後の円が同一人物に対応する円であるか否かを決定することを特徴とする。
Traffic monitoring system according to the fourth invention is the traffic monitoring system according to the first or second aspect, before Symbol camera is installed above the region near the doorway, said second detector Detects the person by detecting a circle in the image captured by the camera, and when the circle moves in the image captured by the camera, the second detection unit detects center position information of the circle And determining whether the circles before and after the movement are circles corresponding to the same person based on the radius information.

第1の発明に係る通行監視システムによれば、第1の検出部がドアの開閉状態を検出し、第2の検出部が出入口の近傍領域を移動する人物を検出し、判定部は、第1及び第2の検出部による検出結果に基づいて、ドアが開いてから次に閉じるまでの間に出入口を通行した人物が一か複数かを判定する。従って、許可者による通行に紛れて非許可者が出入口を通行すること(いわゆる共連れ)を確実に監視することが可能となる。   According to the traffic monitoring system according to the first aspect of the invention, the first detection unit detects the open / closed state of the door, the second detection unit detects a person moving in the vicinity area of the doorway, Based on the detection results of the first and second detection units, it is determined whether one or more persons have passed through the doorway between the opening and closing of the door. Therefore, it is possible to reliably monitor the passage of the non-permitted person through the doorway (so-called companionship) due to the passage by the permitted person.

また、の発明に係る通行監視システムによれば、第1の検出部は、カメラによって撮影された映像に基づいて、ドアの開閉状態を検出する。従って、ドアの開閉状態を検出するための専用のセンサを設置する必要がないため、コストの低減を図ることが可能となる。
In the traffic monitoring system according to the first aspect of the invention, the first detection unit detects the open / closed state of the door based on the video imaged by the camera. Therefore, it is not necessary to install a dedicated sensor for detecting the open / closed state of the door, so that the cost can be reduced.

また、の発明に係る通行監視システムによれば、第1の設定部は、カメラによる撮影画像の全領域の一部に、ドアの開閉状態を検出するために第1の検出部が監視すべき第1の監視領域を設定する。従って、第1の検出部は、第1の監視領域のみを監視すれば足り、撮影画像の全領域を監視する必要がないため、処理の負荷を低減することが可能となる。
In the traffic monitoring system according to the first aspect of the invention, the first setting unit monitors the opening / closing state of the door in a part of the entire area of the image captured by the camera. A first monitoring area to be set is set. Therefore, it is sufficient for the first detection unit to monitor only the first monitoring area, and it is not necessary to monitor the entire area of the photographed image, so that the processing load can be reduced.

また、の発明に係る通行監視システムによれば、第2の設定部は、カメラによる撮影画像内において出入口を特定し、特定された出入口自身を、出入口を通行する人物を検出するために判定部が監視すべき第2の監視領域として設定する。従って、判定部は、第2の監視領域のみを監視すれば足り、それよりも広い領域を監視する必要がないため、処理の負荷を低減することが可能となる。しかも、立入制限エリアへの侵入を試みる侵入者は必ず出入口を通行するため、出入口自身を第2の監視領域として設定することにより、侵入者の存在を確実に検出することが可能となる。
Further , according to the traffic monitoring system of the first invention, the second setting unit specifies an entrance / exit in a photographed image by the camera, and detects the person passing through the entrance / exit by using the specified entrance / exit. The determination unit sets the second monitoring area to be monitored. Therefore, the determination unit only needs to monitor the second monitoring area, and does not need to monitor a larger area, so that the processing load can be reduced. In addition, since an intruder attempting to enter the restricted access area always passes through the entrance / exit, it is possible to reliably detect the presence of the intruder by setting the entrance / exit itself as the second monitoring area.

また、の発明に係る通行監視システムによれば、第2の設定部は、閉じられている状態でのドアの位置と、開かれている状態で第1の検出部によって検出されたドアの位置とに基づいて、出入口を特定する。従って、第2の設定部は、現時点におけるドアの開き具合に応じて、第2の監視領域を適切に設定することが可能となる。
Further , according to the traffic monitoring system of the first invention, the second setting unit includes the position of the door in the closed state and the door detected by the first detection unit in the opened state. The entrance / exit is specified based on the position. Therefore, the second setting unit can appropriately set the second monitoring area according to the degree of opening of the door at the current time.

の発明に係る通行監視システムによれば、第1の検出部は、開かれているドアを検出しなくなった状態が所定時間継続したことにより、ドアが閉じられたことを検出する。従って、光の加減やノイズ等に起因して、第1の検出部が、実際に開かれている状態のドアを瞬間的に検出できなかった場合であっても、ドアが閉じられたと第1の検出部が誤って検出してしまうことを回避できる。その結果、判定部による通行人の単複判定を正確に行うことが可能となる。
According to the traffic monitoring system according to the second aspect of the invention, the first detection unit detects that the door has been closed because the state in which the opened door is no longer detected continues for a predetermined time. Therefore, even if the first detection unit cannot instantaneously detect a door that is actually opened due to light adjustment, noise, or the like, the first detection is that the door is closed. It is possible to avoid erroneous detection by the detection unit. As a result, it is possible to accurately determine the passerby's single / multiple determination by the determination unit.

3の発明に係る通行監視システムによれば、第2の検出部は、重なる又は近接する複数の円を検出した場合、当該複数の円を包含する一つの円を規定し、当該一つの円を一人の人物として検出する。従って、同一の人物に関して頭部や肩部等の複数の円が検出された場合には、これら複数の円を包含する一つの円が一人の人物として検出される。その結果、例えば、出入口の近傍領域を移動する人物が突飛な動きをして、その人物の頭部の移動量が瞬間的に大きくなる場合であっても、同一人物であるとしてその人物を正確に追跡することが可能となる。
According to the traffic monitoring system according to the third aspect of the invention, when the second detection unit detects a plurality of overlapping or adjacent circles, the second detection unit defines one circle including the plurality of circles, and the one circle Is detected as one person. Accordingly, when a plurality of circles such as the head and shoulders are detected for the same person, one circle including the plurality of circles is detected as one person. As a result, for example, even if a person moving in the vicinity of the entrance / exit makes a sudden movement and the amount of movement of the head of the person increases momentarily, the person is accurately identified as the same person. Can be tracked.

4の発明に係る通行監視システムによれば、第2の検出部は、カメラによる撮像画像内で円が移動した場合、円の中心位置情報及び半径情報に基づいて、移動の前後の円が同一人物に対応する円であるか否かを決定する。カメラの設置位置や設置角度等に応じて人物に対応する円の大きさも異なることとなるが、円の中心位置情報のみならず半径情報をも用いることにより、移動する人物の追跡をより正確に行うことが可能となる。
According to the traffic monitoring system according to the fourth aspect of the present invention, when the circle moves within the image captured by the camera, the second detection unit detects the circles before and after the movement based on the center position information and the radius information of the circle. It is determined whether the circles correspond to the same person. The size of the circle corresponding to the person will differ depending on the camera installation position, installation angle, etc., but by using not only the center position information of the circle but also the radius information, the moving person can be tracked more accurately Can be done.

以下、本発明の実施の形態について、図面を用いて詳細に説明する。なお、異なる図面において同一の符号を付した要素は、同一又は相応する要素を示すものとする。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In addition, the element which attached | subjected the same code | symbol in different drawing shall show the same or corresponding element.

図1及び図2はそれぞれ、本発明の実施の形態に係る通行監視システムが導入された環境を示す側面図及び上面図である。本実施の形態に係る通行監視システムは、立入制限エリアへの出入口を通行する人物を監視するためのシステムである。ここで、立入制限エリアとは、予め入室が許可された者(以下「許可者」と称す)以外の者の立ち入りが禁止されているエリアを意味する。   1 and 2 are a side view and a top view, respectively, showing an environment in which a traffic monitoring system according to an embodiment of the present invention is introduced. The traffic monitoring system according to the present embodiment is a system for monitoring a person passing through an entrance / exit to an access restricted area. Here, the entry restricted area means an area where entry of persons other than those who are permitted to enter the room in advance (hereinafter referred to as “permitted person”) is prohibited.

図1,2を参照して、立入制限エリアの出入口2には、ドア3が設けられている。図1,2においては、ドア3よりも右側が立入制限エリアである。ドア3の横の壁には、カードリーダ4が設置されている。所定のカードキーが予め許可者に付与されており、カードリーダ4によってカードキーの内容を読み取ることによって、ドア3の施錠が一時的に解除される。また、出入口2の近傍領域5の上方の天井には、動画撮影が可能なカメラ1が設置されている。カメラ1は、ドア3が設けられた出入口2を、出入口2の近傍領域5を含めて撮影する(図1の破線参照)。   Referring to FIGS. 1 and 2, a door 3 is provided at the entrance 2 of the restricted access area. 1 and 2, the right side of the door 3 is an access restriction area. A card reader 4 is installed on the wall next to the door 3. A predetermined card key is given to the authorized person in advance, and the lock of the door 3 is temporarily released by reading the contents of the card key by the card reader 4. In addition, a camera 1 capable of moving image shooting is installed on the ceiling above the area 5 near the entrance 2. The camera 1 photographs the entrance / exit 2 provided with the door 3 including the vicinity area 5 of the entrance / exit 2 (see the broken line in FIG. 1).

図3は、本実施の形態に係る通行監視システムにおける画像処理部10の機能構成を示すブロック図である。カメラ1の後段には、処理部11が接続されている。処理部11の後段には、差分画像生成部12及び画像記憶部13が接続されている。差分画像生成部12の後段には、第1の設定部14、第1の検出部15、第2の検出部16、及び第2の設定部17が接続されている。第1の検出部15及び第2の検出部16の後段には、判定部19が接続されている。また、第1の検出部15には、タイマ18が接続されている。   FIG. 3 is a block diagram showing a functional configuration of the image processing unit 10 in the traffic monitoring system according to the present embodiment. A processing unit 11 is connected to the rear stage of the camera 1. A difference image generation unit 12 and an image storage unit 13 are connected to the subsequent stage of the processing unit 11. A first setting unit 14, a first detection unit 15, a second detection unit 16, and a second setting unit 17 are connected to the subsequent stage of the difference image generation unit 12. A determination unit 19 is connected to the subsequent stage of the first detection unit 15 and the second detection unit 16. A timer 18 is connected to the first detection unit 15.

カメラ1によって撮像された画像D0は、処理部11に入力される。処理部11は、画像D0に対してエッジ強調処理及び2値化処理を行う。   An image D0 captured by the camera 1 is input to the processing unit 11. The processing unit 11 performs edge enhancement processing and binarization processing on the image D0.

図4は、ドア3が閉められている状態でカメラ1によって撮影され、処理部11によってエッジ強調処理及び2値化処理が施された、背景画像D1を示す図である。背景画像D1には、ドア3や近傍領域5の床が映っている。図3を参照して、背景画像D1は画像記憶部13に記憶される。   FIG. 4 is a diagram illustrating a background image D1 that is captured by the camera 1 with the door 3 closed and subjected to edge enhancement processing and binarization processing by the processing unit 11. In the background image D1, the floor of the door 3 and the nearby area 5 is shown. With reference to FIG. 3, the background image D <b> 1 is stored in the image storage unit 13.

図5は、許可者である人物20によってドア3が開けられた状態でカメラ1によって撮影され、処理部11によってエッジ強調処理及び2値化処理が施された、画像D2を示す図である。画像D2には、ドア3及び近傍領域5の床に加えて、出入口2の一部及び人物20が映っている。図3を参照して、画像D2は差分画像生成部12に入力される。   FIG. 5 is a diagram illustrating an image D <b> 2 captured by the camera 1 with the door 3 opened by the person 20 who is the permitter and subjected to edge enhancement processing and binarization processing by the processing unit 11. In the image D2, in addition to the door 3 and the floor in the vicinity area 5, a part of the entrance 2 and a person 20 are shown. With reference to FIG. 3, the image D <b> 2 is input to the difference image generation unit 12.

差分画像生成部12は、処理部11から入力された画像D2と、画像記憶部13から読み出した背景画像D1とに基づいて、差分画像D3を生成する。その際、差分画像生成部12は、画像D2と背景画像D1とで、対応する画素の画素値をそれぞれ比較し、背景画像D1よりも画像D2のほうが画素値が大きい画素を、差分画像D3内における黒画素として設定する。   The difference image generation unit 12 generates a difference image D3 based on the image D2 input from the processing unit 11 and the background image D1 read from the image storage unit 13. At that time, the difference image generation unit 12 compares the pixel values of the corresponding pixels in the image D2 and the background image D1, respectively, and determines the pixel having a larger pixel value in the image D2 than in the background image D1 in the difference image D3. Is set as a black pixel.

図6は、差分画像生成部12によって生成された差分画像D3を示す図である。背景画像D1と画像D2との差分をとったことにより、差分画像D3には、画像D2内の人物20に対応する人物30のエッジの一部、画像D2内のドア3に対応するドア31のエッジの一部、及び画像D2内の出入口2に対応する出入口32のエッジの一部が、それぞれ現れている。図3を参照して、差分画像D3は、第1の設定部14、第1の検出部15、第2の検出部16、及び第2の設定部17に入力される。   FIG. 6 is a diagram illustrating the difference image D <b> 3 generated by the difference image generation unit 12. By taking the difference between the background image D1 and the image D2, the difference image D3 includes a part of the edge of the person 30 corresponding to the person 20 in the image D2, and the door 31 corresponding to the door 3 in the image D2. A part of the edge and a part of the edge of the entrance 32 corresponding to the entrance 2 in the image D2 appear. With reference to FIG. 3, the difference image D <b> 3 is input to the first setting unit 14, the first detection unit 15, the second detection unit 16, and the second setting unit 17.

<第1の設定部14による処理>
図7は、図3に示した第1の設定部14による処理の内容を説明するための図である。本実施の形態に係る通行監視システムが導入され、カメラ1が所定の箇所に設置されると、まず初期設定が行われる。かかる初期設定においては、図4に示した背景画像D1が取得され、その後、ドア3を開ける状況がカメラ1によって撮影される。これにより、図3に示した差分画像生成部12によって、図6,7に示した差分画像D3が作成される。差分画像D3は、第1の設定部14に入力される。
<Processing by the first setting unit 14>
FIG. 7 is a diagram for explaining the contents of processing by the first setting unit 14 shown in FIG. When the traffic monitoring system according to the present embodiment is introduced and the camera 1 is installed at a predetermined location, initial setting is first performed. In such an initial setting, the background image D1 shown in FIG. 4 is acquired, and then the situation in which the door 3 is opened is photographed by the camera 1. Thereby, the difference image generation part 12 shown in FIG. 3 produces the difference image D3 shown in FIGS. The difference image D3 is input to the first setting unit 14.

ドア3が開けられると差分画像D3内にドア31のエッジ41が現れるので、第1の設定部14は、ハフ変換を用いた直線検出手法によって、差分画像D3内でエッジ41を検出する。そして、第1の設定部14は、初めて検出された瞬間におけるエッジ41の位置として、閉められている状態のドア3に対応するエッジ42の位置を検出する。   When the door 3 is opened, the edge 41 of the door 31 appears in the difference image D3. Therefore, the first setting unit 14 detects the edge 41 in the difference image D3 by a straight line detection method using Hough transform. And the 1st setting part 14 detects the position of the edge 42 corresponding to the door 3 of the closed state as a position of the edge 41 in the moment detected for the first time.

次に、第1の設定部14は、差分画像D3の全画像領域25内に、エッジ42を一辺とする矩形又は扇形の領域(図7に示した例では正方形の領域)を、第1の監視領域26として設定する。第1の監視領域26をエッジ42の左方に設定するか右方に設定するかは、数秒後に検出されるエッジ41の位置に基づいて決定することができる。図7に示した例では、エッジ42よりも左側でエッジ41が検出されるため、第1の監視領域26はエッジ42の左方に設定される。   Next, the first setting unit 14 sets a rectangular or fan-shaped area having a side of the edge 42 (a square area in the example shown in FIG. 7) in the entire image area 25 of the difference image D3 as the first area. Set as the monitoring area 26. Whether the first monitoring area 26 is set to the left or right of the edge 42 can be determined based on the position of the edge 41 detected after several seconds. In the example shown in FIG. 7, since the edge 41 is detected on the left side of the edge 42, the first monitoring area 26 is set to the left of the edge 42.

第1の監視領域26は、ドア3の開閉状態を検出するために第1の検出部15が監視すべき領域であり、第1の監視領域26の位置情報D4は、第1の設定部14によって保持される。図3を参照して、位置情報D4は、第1の設定部14から第1の検出部15に入力される。   The first monitoring area 26 is an area to be monitored by the first detection unit 15 in order to detect the open / closed state of the door 3. The position information D4 of the first monitoring area 26 is the first setting unit 14. Held by. With reference to FIG. 3, the position information D <b> 4 is input from the first setting unit 14 to the first detection unit 15.

このように、第1の設定部14は、カメラ1による撮影画像(具体的には差分画像D3)の全画像領域25の一部に、ドア3の開閉状態を検出するために第1の検出部15が監視すべき第1の監視領域26を設定する。従って、第1の検出部15は、第1の監視領域26のみを監視すれば足り、全画像領域25を監視する必要がないため、第1の検出部15の処理の負荷を低減することが可能となる。   As described above, the first setting unit 14 performs the first detection in order to detect the open / closed state of the door 3 in a part of the entire image area 25 of the image captured by the camera 1 (specifically, the difference image D3). The first monitoring area 26 to be monitored by the unit 15 is set. Therefore, the first detection unit 15 only needs to monitor the first monitoring region 26 and does not need to monitor the entire image region 25. Therefore, the processing load of the first detection unit 15 can be reduced. It becomes possible.

<第1の検出部15による処理>
本実施の形態に係る通行監視システムが導入され、初期設定が完了すると、カメラ1を用いた近傍領域5(図1,2参照)の監視が開始される。
<Processing by the first detection unit 15>
When the traffic monitoring system according to the present embodiment is introduced and the initial setting is completed, monitoring of the vicinity region 5 (see FIGS. 1 and 2) using the camera 1 is started.

第1の検出部15は、カメラ1によって撮影された映像に基づいて、ドア3の開閉状態を検出する。以下、具体的に説明する。   The first detection unit 15 detects the open / closed state of the door 3 based on the video imaged by the camera 1. This will be specifically described below.

上記の通り、第1の設定部14によって設定された第1の監視領域26に関する位置情報D4は、第1の設定部14から第1の検出部15に入力されている。また、図3を参照して、第1の検出部15には、差分画像生成部12によって生成された差分画像D3も入力されている。   As described above, the position information D4 regarding the first monitoring area 26 set by the first setting unit 14 is input from the first setting unit 14 to the first detection unit 15. In addition, referring to FIG. 3, the difference image D <b> 3 generated by the difference image generation unit 12 is also input to the first detection unit 15.

図7を参照して、第1の検出部15は、差分画像D3の全画像領域25内の第1の監視領域26を監視し、ハフ変換を用いた直線検出手法によって、第1の監視領域26内でエッジ41を探索する。エッジ41が検出されない場合は、第1の検出部15は、ドア3は閉じられている状態であると判定する。   Referring to FIG. 7, the first detection unit 15 monitors the first monitoring area 26 in the entire image area 25 of the difference image D3, and performs the first monitoring area by a straight line detection method using Hough transform. 26 to search for an edge 41. When the edge 41 is not detected, the first detection unit 15 determines that the door 3 is in a closed state.

ドア3が開けられると、第1の監視領域26内にドア31のエッジ41が現れる。第1の検出部15は、エッジ41を検出することにより、ドア3が開けられている状態であることを検出する。また、第1の検出部15は、第1の監視領域26内におけるエッジ41の位置により、ドア3の開き具合を検出することもできる。   When the door 3 is opened, an edge 41 of the door 31 appears in the first monitoring area 26. The first detection unit 15 detects that the door 3 is open by detecting the edge 41. The first detection unit 15 can also detect the degree of opening of the door 3 based on the position of the edge 41 in the first monitoring area 26.

このように、第1の検出部15は、エッジ41が検出されていることにより、開かれている状態のドア3を検出する。また、第1の検出部15は、検出されているエッジ41が検出されなくなることにより、ドア3が閉じられたことを検出する。   Thus, the 1st detection part 15 detects the door 3 of the open state by the edge 41 being detected. Further, the first detection unit 15 detects that the door 3 is closed when the detected edge 41 is not detected.

ここで、図3を参照して、第1の検出部15には、タイマ18が接続されている。第1の検出部15は、検出されているエッジ41が検出されなくなった時点から、タイマ18を用いて経過時間を計測する。そして、エッジ41が検出されない状態が所定時間(例えば数秒)以上継続したことにより、ドア3が閉じられたことを検出する。一方、検出されているエッジ41が検出されなくなった後、上記の所定時間が経過するよりも前に再びエッジ41が検出された場合には、第1の検出部15は、ドア3は閉じられていないと判断する。   Here, referring to FIG. 3, a timer 18 is connected to the first detection unit 15. The first detection unit 15 measures the elapsed time using the timer 18 from the time when the detected edge 41 is no longer detected. Then, when the state in which the edge 41 is not detected continues for a predetermined time (for example, several seconds) or more, it is detected that the door 3 is closed. On the other hand, after the detected edge 41 is no longer detected, when the edge 41 is detected again before the predetermined time elapses, the first detection unit 15 closes the door 3. Judge that it is not.

これにより、光の加減やノイズ等に起因して、第1の検出部15が、実際に開かれている状態のドア3を瞬間的に検出できなかった場合であっても、ドア3が閉じられたと第1の検出部15が誤って検出してしまうことを回避できる。その結果、後述する判定部19による通行人の単複判定を正確に行うことが可能となる。   As a result, the door 3 is closed even when the first detection unit 15 cannot instantaneously detect the door 3 that is actually opened due to light adjustment or noise. It can be avoided that the first detection unit 15 detects it erroneously. As a result, it is possible to accurately determine the passer-by-passer determination by the determination unit 19 described later.

<第2の検出部16による処理>
図8は、図3に示した第2の検出部16による処理の内容を説明するための図である。第2の検出部16は、カメラ1によって撮影された映像に基づいて、出入口2の近傍領域5(図1,2参照)を移動する人物を検出する。以下、具体的に説明する。
<Processing by Second Detection Unit 16>
FIG. 8 is a diagram for explaining the contents of the processing by the second detection unit 16 shown in FIG. The second detection unit 16 detects a person who moves in the vicinity area 5 (see FIGS. 1 and 2) of the entrance 2 based on the video imaged by the camera 1. This will be specifically described below.

図3に示したように、第2の検出部16には、差分画像生成部12によって生成された差分画像D3が入力されている。図8に示した例では、差分画像D3内に、図5に示した人物20に対応する人物30のエッジが現れている。このように、近傍領域5内に人物20が存在すると、差分画像D3内に人物30のエッジが現れる。   As shown in FIG. 3, the difference image D <b> 3 generated by the difference image generation unit 12 is input to the second detection unit 16. In the example shown in FIG. 8, the edge of the person 30 corresponding to the person 20 shown in FIG. 5 appears in the difference image D3. Thus, if the person 20 exists in the vicinity area | region 5, the edge of the person 30 will appear in the difference image D3.

図8を参照して、第2の検出部16は、差分画像D3の全画像領域25を監視し、ハフ変換を用いた円(真円及び楕円)の検出手法によって、差分画像D3内で円形のエッジを探索する。円形のエッジが検出されない場合は、第2の検出部16は、近傍領域5内に人物が存在しないと判定する。   Referring to FIG. 8, the second detection unit 16 monitors the entire image area 25 of the difference image D3, and uses a circle (true circle and ellipse) detection method using the Hough transform to detect a circle in the difference image D3. Search for edges. When the circular edge is not detected, the second detection unit 16 determines that no person is present in the vicinity region 5.

近傍領域5内に人物20が存在すると、差分画像D3内に人物30のエッジが現れる。図8に示した例では、第2の検出部16は、人物30の頭部に対応する真円50と、人物30の胴体に対応する楕円51とを検出する。   If the person 20 exists in the vicinity area | region 5, the edge of the person 30 will appear in the difference image D3. In the example illustrated in FIG. 8, the second detection unit 16 detects a perfect circle 50 corresponding to the head of the person 30 and an ellipse 51 corresponding to the torso of the person 30.

次に、第2の検出部16は、真円50と楕円51とを包含する一つの円52を規定する。このようにして規定された円52が、人物20(人物30)に対応する円として取り扱われる。図8に示すように、円52の内周は、真円50及び楕円51の各外周に接している。なお、図8に示した例では、互いに重なる真円50と楕円51とを包含して一つの円52が規定されたが、重ならずに互いに近接する複数の円が存在する場合には、これらの複数の円も包含されて、一つの円52が規定される。第2の検出部16は、例えば、複数の円の複数の半径のうち最大の半径を求め、その最大半径よりも離間距離が短い複数の円を一つのグループとして包含して、一つの円52を規定する。   Next, the second detection unit 16 defines one circle 52 including the perfect circle 50 and the ellipse 51. The circle 52 defined in this way is handled as a circle corresponding to the person 20 (person 30). As shown in FIG. 8, the inner circumference of the circle 52 is in contact with the outer circumferences of the perfect circle 50 and the ellipse 51. In the example shown in FIG. 8, one circle 52 is defined including the perfect circle 50 and the ellipse 51 that overlap each other, but when there are a plurality of circles that are close to each other without overlapping, A plurality of these circles are also included to define one circle 52. For example, the second detection unit 16 obtains the maximum radius among a plurality of radii of the plurality of circles, includes a plurality of circles having a separation distance shorter than the maximum radius as one group, and includes one circle 52. Is specified.

次に、第2の検出部16は、上記のようにして規定した円52の中心位置Cと半径Rとを求め、これらの情報を、人物20に関する位置情報として保持し、人物20の移動の追跡に利用する。   Next, the second detection unit 16 obtains the center position C and the radius R of the circle 52 defined as described above, holds these pieces of information as position information regarding the person 20, and moves the person 20. Use for tracking.

図9は、第2の検出部16による人物の移動の追跡処理の第1の例を説明するための図である。図9(A)及び図9(B)を参照して、円52aは、第1フレームにおいて検出された円52であり、円52bは、第1フレームよりも後の第2フレームにおいて検出された円52である。つまり、第1フレームでは、中心位置がCaで半径がRaの円52aが検出され、第2フレームでは、中心位置がCbで半径がRbの円52bが検出されたということである。中心位置Cbは、中心位置Caに対して距離Lだけ離間している。なお、第2フレームは、第1フレームに連続するフレームであっても良いし、第1フレームから数フレーム後のフレームであっても良い。   FIG. 9 is a diagram for explaining a first example of tracking processing of person movement by the second detection unit 16. Referring to FIGS. 9A and 9B, a circle 52a is a circle 52 detected in the first frame, and a circle 52b is detected in a second frame after the first frame. A circle 52. That is, in the first frame, the circle 52a having the center position Ca and the radius Ra is detected, and in the second frame, the circle 52b having the center position Cb and the radius Rb is detected. The center position Cb is separated from the center position Ca by a distance L. The second frame may be a frame that is continuous with the first frame, or may be a frame that is several frames after the first frame.

図9(A)を参照して、距離Lは、半径Ra以下である。この場合、第2の検出部16は、円52bは、円52aに対応する人物と同じ人物に対応する円であると判定する。つまり、第2の検出部16は、円52aに対応する人物と円52bに対応する人物とは、同一人物であると判定する。   With reference to FIG. 9A, the distance L is equal to or less than the radius Ra. In this case, the second detection unit 16 determines that the circle 52b is a circle corresponding to the same person as the person corresponding to the circle 52a. That is, the second detection unit 16 determines that the person corresponding to the circle 52a and the person corresponding to the circle 52b are the same person.

図9(B)を参照して、距離Lは、半径Raよりも大きい。この場合、第2の検出部16は、円52bは、円52aに対応する人物と異なる人物に対応する円であると判定する。つまり、第2の検出部16は、円52aに対応する人物と円52bに対応する人物とは、別の人物であると判定する。   With reference to FIG. 9B, the distance L is larger than the radius Ra. In this case, the second detection unit 16 determines that the circle 52b is a circle corresponding to a person different from the person corresponding to the circle 52a. That is, the second detection unit 16 determines that the person corresponding to the circle 52a and the person corresponding to the circle 52b are different persons.

このように、第2の検出部16は、カメラ1による撮像画像内で円52が移動した場合、円52a,52bの中心位置Ca,Cb及び円52aの半径Raに基づいて、移動の前後の円52a,52bが同一人物に対応する円であるか否かを決定する。カメラ1の設置位置や設置角度等に応じて人物20に対応する円52の大きさも異なることとなるが、円52の中心位置Cのみならず半径Rをも用いることにより、移動する人物20の追跡をより正確に行うことが可能となる。   As described above, when the circle 52 moves in the image captured by the camera 1, the second detection unit 16 determines whether the movement before and after the movement based on the center positions Ca and Cb of the circles 52a and 52b and the radius Ra of the circle 52a. It is determined whether or not the circles 52a and 52b are circles corresponding to the same person. The size of the circle 52 corresponding to the person 20 varies depending on the installation position, the installation angle, and the like of the camera 1, but not only the center position C of the circle 52 but also the radius R can be used. Tracking can be performed more accurately.

図10は、第2の検出部16による人物の移動の追跡処理の第2の例を説明するための図である。ここでは、例えば、出入口2の近傍領域5を移動する人物20が突飛な動きをして、その人物20の頭部の移動量が瞬間的に大きくなった状況を想定している。図10(A)は、円52を用いて人物の移動を追跡する例を示しており、一方、図10(B)は、人物の頭部に対応する円50のみを用いて人物の移動を追跡する例を示している。   FIG. 10 is a diagram for explaining a second example of the person movement tracking process by the second detection unit 16. Here, for example, a situation is assumed in which the person 20 moving in the vicinity area 5 of the doorway 2 makes a sudden movement, and the amount of movement of the head of the person 20 increases momentarily. FIG. 10A shows an example in which the movement of the person is tracked using the circle 52, while FIG. 10B shows the movement of the person using only the circle 50 corresponding to the head of the person. An example of tracking is shown.

図10(B)を参照して、円50aは、第1フレームにおいて検出された円50であり、円50bは、第2フレームにおいて検出された円50である。つまり、第1フレームでは円50aが検出され、第2フレームでは円50bが検出されたということである。なお、上記と同様に、第2フレームは、第1フレームに連続するフレームであっても良いし、第1フレームから数フレーム後のフレームであっても良い。   Referring to FIG. 10B, circle 50a is circle 50 detected in the first frame, and circle 50b is circle 50 detected in the second frame. That is, the circle 50a is detected in the first frame, and the circle 50b is detected in the second frame. Similarly to the above, the second frame may be a frame continuous with the first frame, or may be a frame several frames after the first frame.

図10(B)に示した例では、距離Lは半径Raよりも大きくなっている。従って、この例の場合、第2の検出部16は、円50bは、円50aに対応する人物と異なる人物に対応する円であると、誤って判定してしまう。   In the example shown in FIG. 10B, the distance L is larger than the radius Ra. Therefore, in this example, the second detection unit 16 erroneously determines that the circle 50b is a circle corresponding to a person different from the person corresponding to the circle 50a.

これに対し、図10(A)を参照して、円52aは、第1フレームにおいて検出された円52であり、円52bは、第2フレームにおいて検出された円52である。つまり、第1フレームでは円52aが検出され、第2フレームでは円52bが検出されたということである。   On the other hand, referring to FIG. 10A, a circle 52a is a circle 52 detected in the first frame, and a circle 52b is a circle 52 detected in the second frame. That is, the circle 52a is detected in the first frame, and the circle 52b is detected in the second frame.

図10(A)に示した例では、距離Lは半径Ra以下である。従って、この例の場合、第2の検出部16は、円52bは、円52aに対応する人物と同一人物に対応する円であると、正しく判定する。   In the example shown in FIG. 10A, the distance L is not more than the radius Ra. Therefore, in this example, the second detection unit 16 correctly determines that the circle 52b is a circle corresponding to the same person as the person corresponding to the circle 52a.

上記の通り、本実施の形態に係る第2の検出部16は、差分画像D3内で重なる又は近接する複数の円を検出した場合、当該複数の円を包含する一つの円を規定し、当該一つの円を一人の人物として検出する。従って、図8に示したように、同一の人物に関して頭部や肩部等の複数の円50,51が検出された場合には、これら複数の円50,51を包含する一つの円52が一人の人物として検出される。その結果、図10(A)に示したように、例えば、出入口2の近傍領域5を移動する人物20が突飛な動きをして、その人物20の頭部の移動量が瞬間的に大きくなる場合であっても、同一人物であるとしてその人物20を正確に追跡することが可能となる。   As described above, when the second detection unit 16 according to the present embodiment detects a plurality of circles that overlap or are close to each other in the difference image D3, the second detection unit 16 defines one circle that includes the plurality of circles, and One circle is detected as one person. Therefore, as shown in FIG. 8, when a plurality of circles 50 and 51 such as the head and shoulders are detected for the same person, one circle 52 including the plurality of circles 50 and 51 is obtained. Detected as one person. As a result, as shown in FIG. 10 (A), for example, the person 20 moving in the vicinity area 5 of the doorway 2 makes a sudden movement, and the movement amount of the head of the person 20 increases momentarily. Even in this case, the person 20 can be accurately tracked as being the same person.

<第2の設定部17による処理>
図11は、図3に示した第2の設定部17による処理の内容を説明するための図である。第2の設定部17は、カメラ1によって撮影された映像に基づいて、カメラ1による撮影画像内において出入口2を特定する。そして、特定された出入口2を含む領域を、出入口2を通行する人物20を検出するために判定部19が監視すべき第2の監視領域として設定する。以下、具体的に説明する。
<Processing by Second Setting Unit 17>
FIG. 11 is a diagram for explaining the contents of processing by the second setting unit 17 shown in FIG. 3. The second setting unit 17 specifies the entrance / exit 2 in the image captured by the camera 1 based on the video imaged by the camera 1. And the area | region containing the specified entrance / exit 2 is set as a 2nd monitoring area | region which the determination part 19 should monitor in order to detect the person 20 who passes the entrance / exit 2. FIG. This will be specifically described below.

図3に示したように、第2の設定部17には、差分画像生成部12によって生成された差分画像D3が入力されている。図11を参照して、ドア3が開けられると差分画像D3内にドア31のエッジ41が現れるので、上記の通り、第1の検出部15は、ハフ変換を用いた直線検出手法によって、差分画像D3内でエッジ41を検出する。また、第1の検出部15は、初めて検出された瞬間におけるエッジ41の位置として、閉められている状態のドア3に対応するエッジ42の位置を検出する。   As illustrated in FIG. 3, the difference image D <b> 3 generated by the difference image generation unit 12 is input to the second setting unit 17. Referring to FIG. 11, when the door 3 is opened, the edge 41 of the door 31 appears in the difference image D3. An edge 41 is detected in the image D3. Moreover, the 1st detection part 15 detects the position of the edge 42 corresponding to the door 3 of the closed state as a position of the edge 41 in the moment detected for the first time.

第2の設定部17は、エッジ41,42の位置情報を第1の検出部15から受け取る。そして、エッジ41の一端とエッジ42の一端とを結ぶ線分43を規定し、エッジ41,42及び線分43によって囲まれる三角形の領域を、第2の監視領域44として設定する。結果として、第2の監視領域44は、差分画像D3内の出入口2自身を含む領域として設定される。   The second setting unit 17 receives the position information of the edges 41 and 42 from the first detection unit 15. A line segment 43 connecting one end of the edge 41 and one end of the edge 42 is defined, and a triangular area surrounded by the edges 41 and 42 and the line segment 43 is set as the second monitoring area 44. As a result, the second monitoring area 44 is set as an area including the entrance 2 itself in the difference image D3.

第2の監視領域44は、出入口2を通行する人物20を検出するために判定部19が監視すべき領域であり、第2の監視領域44の位置情報D5は、第2の設定部17によって保持される。図3を参照して、位置情報D5は、第2の設定部17から判定部19に入力される。   The second monitoring area 44 is an area to be monitored by the determination unit 19 in order to detect the person 20 passing through the doorway 2, and the position information D5 of the second monitoring area 44 is obtained by the second setting unit 17. Retained. Referring to FIG. 3, position information D <b> 5 is input from second setting unit 17 to determination unit 19.

このように、第2の設定部17は、カメラ1による撮影画像内において出入口2を特定し、特定された出入口2自身を含む領域を、出入口2を通行する人物20を検出するために判定部19が監視すべき第2の監視領域44として設定する。従って、判定部19は、第2の監視領域44のみを監視すれば足り、それよりも広い領域を監視する必要がないため、処理の負荷を低減することが可能となる。しかも、立入制限エリアへの侵入を試みる侵入者は必ず出入口2を通行するため、出入口2自身を第2の監視領域44として設定することにより、侵入者の存在を確実に検出することが可能となる。   As described above, the second setting unit 17 specifies the entrance / exit 2 in the image captured by the camera 1 and determines a region including the specified entrance / exit 2 itself to detect the person 20 passing through the entrance / exit 2. 19 is set as the second monitoring area 44 to be monitored. Therefore, the determination unit 19 only needs to monitor the second monitoring area 44, and does not need to monitor a wider area, so that the processing load can be reduced. In addition, since an intruder who tries to enter the restricted access area always passes through the entrance 2, the presence of the intruder can be reliably detected by setting the entrance 2 as the second monitoring area 44. Become.

また、第2の設定部17は、閉じられている状態でのドア3の位置(エッジ42)と、開かれている状態で第1の検出部15によって検出されたドア3の位置(エッジ41)とに基づいて、出入口2を特定する。従って、第2の設定部17は、現時点におけるドア3の開き具合に応じて、第2の監視領域44を適切に設定することが可能となる。   Further, the second setting unit 17 includes the position of the door 3 in the closed state (edge 42) and the position of the door 3 detected by the first detection unit 15 in the opened state (edge 41). ) And the gateway 2 is specified. Therefore, the second setting unit 17 can appropriately set the second monitoring area 44 according to the opening degree of the door 3 at the current time.

<判定部19による処理>
図12〜14は、図3に示した判定部19による処理の内容をそれぞれ説明するための図である。これらの図においては、(A)→(B)→・・・→(F)の順に時間が進行している。図3を参照して、判定部19は、第1の検出部15によるドア3の開閉状態の検出結果D6と、第2の検出部16による移動人物の検出結果D7とに基づいて、ドア3が開いてから次に閉じるまでの間に出入口2を通行した人物が一か複数かを判定する。以下、具体的に説明する。
<Processing by the determination unit 19>
12-14 is a figure for demonstrating the content of the process by the determination part 19 shown in FIG. 3, respectively. In these figures, time advances in the order of (A) → (B) →... → (F). With reference to FIG. 3, the determination unit 19 determines whether the door 3 is open or closed based on the detection result D6 of the open / closed state of the door 3 by the first detection unit 15 and the detection result D7 of the moving person by the second detection unit 16. It is determined whether one or more persons have passed through the doorway 2 between the opening and closing of the. This will be specifically described below.

図3を参照して、第1の検出部15から判定部19に、ドア3の開閉状態の検出結果D6が入力される。具体的には、ドア3が開けられたことを知らせる情報と、その次にドア3が閉じられたことを知らせる情報とが、検出結果D6として第1の検出部15から判定部19に入力される。   Referring to FIG. 3, detection result D6 of the open / closed state of door 3 is input from first detection unit 15 to determination unit 19. Specifically, information notifying that the door 3 has been opened and information notifying that the door 3 has been closed next are input from the first detection unit 15 to the determination unit 19 as the detection result D6. The

また、第2の検出部16から判定部19に、移動人物の検出結果D7が入力される。具体的には、各時刻において第2の検出部16によって検出された一又は複数の円52(図8参照)の位置情報が、検出結果D7として第2の検出部16から判定部19に入力される。   In addition, the detection result D <b> 7 of the moving person is input from the second detection unit 16 to the determination unit 19. Specifically, position information of one or more circles 52 (see FIG. 8) detected by the second detection unit 16 at each time is input from the second detection unit 16 to the determination unit 19 as a detection result D7. Is done.

また、第2の設定部17から判定部19に、各時刻における第2の監視領域44(図11参照)の位置情報D5が入力される。   Further, the position information D5 of the second monitoring area 44 (see FIG. 11) at each time is input from the second setting unit 17 to the determination unit 19.

判定部19は、入力されたこれらの情報に基づいて、ドア3が開いてから次に閉じるまでの間に、第2の監視領域44を横切った円52の数が一であるか複数であるかによって、出入口2を通行した人物が一であるか複数であるかを判定する。   Based on the input information, the determination unit 19 has one or a plurality of circles 52 that cross the second monitoring area 44 between the opening and the next closing of the door 3. It is determined whether there is one person or a plurality of persons who have passed through the doorway 2.

図5,12を参照して、図12(A)の時点では、人物20によってドア3が開けられ始めたことに伴って、差分画像D3内に第2の監視領域44が設定される。また、人物20に対応する円52が検出されているが、この時点では、人物20はドア3の前に立っており、差分画像D3内においても、円52と第2の監視領域44とは互いに重なっていない。   With reference to FIGS. 5 and 12, at the time of FIG. 12A, the second monitoring region 44 is set in the difference image D <b> 3 as the door 3 starts to be opened by the person 20. In addition, a circle 52 corresponding to the person 20 is detected. At this time, the person 20 stands in front of the door 3, and the circle 52 and the second monitoring area 44 are also in the difference image D3. Do not overlap each other.

図12(B)の時点では、人物20によってドア3が大きく開けられたことに伴って、第2の監視領域44の面積も大きくなっている。但し、この時点でも、円52と第2の監視領域44とは互いに重なっていない。   At the time of FIG. 12B, the area of the second monitoring region 44 is increased as the door 3 is greatly opened by the person 20. However, even at this time, the circle 52 and the second monitoring area 44 do not overlap each other.

図12(C)の時点では、人物20が移動して出入口2に近付いたことに伴って、円52が右側に移動し、円52の一部が第2の監視領域44に重なっている。   At the time of FIG. 12C, as the person 20 moves and approaches the entrance 2, the circle 52 moves to the right side, and a part of the circle 52 overlaps the second monitoring area 44.

図12(D)の時点では、人物20がさらに移動して体の一部が出入口2内に進入したことに伴って、円52がさらに右側に移動し、円52の一部は第2の監視領域44を横切っている。   At the time of FIG. 12D, as the person 20 further moves and a part of the body enters the entrance 2, the circle 52 further moves to the right side, and a part of the circle 52 is the second The monitoring area 44 is crossed.

図12(E)の時点では、人物20によってドア3が閉じられ始めたことに伴って、第2の監視領域44の面積も小さくなっている。   At the time of FIG. 12 (E), the area of the second monitoring region 44 is reduced as the door 3 starts to be closed by the person 20.

図12(F)の時点では、人物20が出入口2を通過してドア3を閉じたことに伴って、円52は第2の監視領域44を完全に横切って検出されなくなるとともに、差分画像D3内において第2の監視領域44も消失している。   At the time of FIG. 12 (F), as the person 20 passes through the entrance 2 and closes the door 3, the circle 52 is no longer detected across the second monitoring area 44, and the difference image D3. The second monitoring area 44 has also disappeared.

図12に示した例では、ドア3が開けられた瞬間(図12(A))から次に閉じられる瞬間(図12(F))までの間に、第2の監視領域44を横切った円の数は1個である。従って、判定部19は、出入口2を通行した人物は一であると判定する。この場合、警報を鳴らす等の非常通報処理は行われない。   In the example shown in FIG. 12, a circle crossing the second monitoring area 44 from the moment when the door 3 is opened (FIG. 12A) to the next moment when the door 3 is closed (FIG. 12F). Is one. Accordingly, the determination unit 19 determines that one person has passed through the entrance 2. In this case, emergency call processing such as sounding an alarm is not performed.

一方、図13に示した例では、許可者に対応する円52が第2の監視領域44を横切った後に、侵入者に対応する円60が第2の監視領域44を横切っている。よって、図13に示した例では、ドア3が開けられた瞬間(図13(A))から次に閉じられる瞬間(図13(F))までの間に、第2の監視領域44を横切った円の数は2個である。従って、判定部19は、出入口2を通行した人物は複数であると判定する。この場合、警報を鳴らす等の非常通報処理が行われる。   On the other hand, in the example shown in FIG. 13, after the circle 52 corresponding to the permitter crosses the second monitoring area 44, the circle 60 corresponding to the intruder crosses the second monitoring area 44. Therefore, in the example shown in FIG. 13, the second monitoring area 44 is crossed between the moment when the door 3 is opened (FIG. 13A) and the next moment when it is closed (FIG. 13F). The number of circles is two. Therefore, the determination unit 19 determines that there are a plurality of persons who have passed through the entrance 2. In this case, emergency call processing such as sounding an alarm is performed.

図14に示した例では、円52のほかに、近傍領域5を通行する通行人に対応する円70が検出されている。ところが、円70は第2の監視領域44を横切っていない。よって、図14に示した例では、ドア3が開けられた瞬間(図14(A))から次に閉じられる瞬間(図14(F))までの間に、第2の監視領域44を横切った円の数は1個である。従って、判定部19は、出入口2を通行した人物は一であると判定する。この場合、警報を鳴らす等の非常通報処理は行われない。   In the example illustrated in FIG. 14, in addition to the circle 52, a circle 70 corresponding to a passerby who passes through the neighborhood region 5 is detected. However, the circle 70 does not cross the second monitoring area 44. Therefore, in the example shown in FIG. 14, the second monitoring area 44 is crossed between the moment when the door 3 is opened (FIG. 14A) and the moment when the door 3 is next closed (FIG. 14F). The number of circles is one. Accordingly, the determination unit 19 determines that one person has passed through the entrance 2. In this case, emergency call processing such as sounding an alarm is not performed.

このように、本実施の形態に係る通行監視システムによれば、第1の検出部15がドア3の開閉状態を検出し、第2の検出部16が出入口2の近傍領域5を移動する人物20を検出し、判定部19は、第1の検出部15及び第2の検出部16による検出結果に基づいて、ドア3が開いてから次に閉じるまでの間に出入口2を通行した人物が一か複数かを判定する。従って、許可者による通行に紛れて非許可者が出入口を通行すること(いわゆる共連れ)を確実に監視することが可能となる。   Thus, according to the traffic monitoring system according to the present embodiment, the first detector 15 detects the open / closed state of the door 3 and the second detector 16 moves in the vicinity area 5 of the entrance 2. 20, the determination unit 19 determines whether a person who has passed through the doorway 2 between the opening and closing of the door 3 based on the detection results of the first detection unit 15 and the second detection unit 16. Determine whether one or more. Therefore, it is possible to reliably monitor the passage of the non-permitted person through the doorway (so-called companionship) due to the passage by the permitted person.

なお、以上の説明では、立入制限エリアに入室する許可者の後を追って非許可者が入室する状況(いわゆる後追い)を例にとって説明したが、立入制限エリアから退室する許可者とすれ違って非許可者が入室する状況(いわゆるすれ違い)の場合であっても、本実施の形態に係る通行監視システムは、非許可者の侵入を検知することが可能である。   In the above explanation, an example was given of a situation in which a non-permitted person enters the room after the permitted person entering the restricted access area (so-called follow-up), but it is not permitted to pass by a permitted person leaving the restricted access area. Even when the person enters the room (so-called passing), the traffic monitoring system according to the present embodiment can detect the intrusion of the unauthorized person.

<変形例1>
図15は、図1に対応させて、本実施の形態の変形例に係る通行監視システムが導入された環境を示す側面図である。図1ではカメラ1が近傍領域5の上方の天井に設置されたが、図15に示すように、ドア3の上方の壁にカメラ1を設置してもよい。
<Modification 1>
FIG. 15 is a side view showing an environment in which a traffic monitoring system according to a modification of the present embodiment is introduced, corresponding to FIG. In FIG. 1, the camera 1 is installed on the ceiling above the nearby region 5, but the camera 1 may be installed on the wall above the door 3 as shown in FIG. 15.

カメラ1は、ドア3の正面斜め上方から近傍領域5を撮影している。従って、ドア3に向かって歩いてくる人物の顔を、カメラ1によって正面から撮影でき、セキュリティ性を高めることができる。   The camera 1 takes a picture of the vicinity area 5 from obliquely above the front of the door 3. Therefore, the face of the person walking toward the door 3 can be photographed from the front by the camera 1, and the security can be improved.

また、近傍領域5の上方の天井には鏡80が設置されている。鏡80は、カメラ1の撮影画角内(太い破線参照)に配置されている。カメラ1によって撮影された映像内には鏡80が映り込んでおり、その鏡80には、上方から眺めた近傍領域5の様子が映し出されている。従って、鏡80に映し出されている映像を対象として画像処理部10(図3参照)による処理を実行することによって、上記と同様の効果を得ることができる。   A mirror 80 is installed on the ceiling above the neighborhood area 5. The mirror 80 is disposed within the shooting angle of view of the camera 1 (see a thick broken line). A mirror 80 is reflected in the video photographed by the camera 1, and the state of the neighborhood region 5 viewed from above is reflected on the mirror 80. Therefore, the same effect as described above can be obtained by executing the processing by the image processing unit 10 (see FIG. 3) on the video displayed on the mirror 80.

<変形例2>
以上の説明では、第1の検出部15は、カメラ1によって撮影された映像に基づいて、ドア3の開閉状態を検出した。これに限らず、ドア3の開閉状態を検出するための専用のセンサをドア3又は出入口2に設置し、第1の検出部15は、そのセンサからの検出信号に基づいて、ドア3の開閉状態を検出してもよい。なお、この場合、第2の監視領域44は、例えば差分画像D3の全画像領域25として設定される。
<Modification 2>
In the above description, the first detection unit 15 detects the open / closed state of the door 3 based on the video imaged by the camera 1. Not only this but the sensor for exclusive use for detecting the opening-and-closing state of the door 3 is installed in the door 3 or the entrance / exit 2, and the 1st detection part 15 opens and closes the door 3 based on the detection signal from the sensor. A state may be detected. In this case, the second monitoring area 44 is set as the entire image area 25 of the difference image D3, for example.

本発明の実施の形態に係る通行監視システムが導入された環境を示す側面図である。It is a side view showing the environment where the traffic monitoring system concerning an embodiment of the invention was introduced. 本発明の実施の形態に係る通行監視システムが導入された環境を示す上面図である。It is a top view which shows the environment where the traffic monitoring system which concerns on embodiment of this invention was introduced. 本発明の実施の形態に係る通行監視システムにおける画像処理部の機能構成を示すブロック図である。It is a block diagram which shows the function structure of the image process part in the traffic monitoring system which concerns on embodiment of this invention. 背景画像を示す図である。It is a figure which shows a background image. 撮影画像を示す図である。It is a figure which shows a picked-up image. 差分画像を示す図である。It is a figure which shows a difference image. 図3に示した第1の設定部による処理の内容を説明するための図である。It is a figure for demonstrating the content of the process by the 1st setting part shown in FIG. 図3に示した第2の検出部による処理の内容を説明するための図である。It is a figure for demonstrating the content of the process by the 2nd detection part shown in FIG. 第2の検出部による人物の移動の追跡処理の第1の例を説明するための図である。It is a figure for demonstrating the 1st example of the tracking process of a person's movement by a 2nd detection part. 第2の検出部による人物の移動の追跡処理の第2の例を説明するための図である。It is a figure for demonstrating the 2nd example of the tracking process of a person's movement by a 2nd detection part. 図3に示した第2の設定部による処理の内容を説明するための図である。It is a figure for demonstrating the content of the process by the 2nd setting part shown in FIG. 図3に示した判定部による処理の内容を説明するための図である。It is a figure for demonstrating the content of the process by the determination part shown in FIG. 図3に示した判定部による処理の内容を説明するための図である。It is a figure for demonstrating the content of the process by the determination part shown in FIG. 図3に示した判定部による処理の内容を説明するための図である。It is a figure for demonstrating the content of the process by the determination part shown in FIG. 本発明の実施の形態の変形例に係る通行監視システムが導入された環境を示す側面図である。It is a side view which shows the environment where the traffic monitoring system which concerns on the modification of embodiment of this invention was introduced.

符号の説明Explanation of symbols

1 カメラ
2,32 出入口
3,31 ドア
5 近傍領域
10 画像処理部
12 差分画像生成部
14 第1の設定部
15 第1の検出部
16 第2の検出部
17 第2の設定部
18 タイマ
19 判定部
20,30 人物
25 全画像領域
26 第1の監視領域
41,42 エッジ
44 第2の監視領域
52 円
DESCRIPTION OF SYMBOLS 1 Camera 2, 32 Entrance / exit 3, 31 Door 5 Neighborhood area 10 Image processing part 12 Difference image generation part 14 1st setting part 15 1st detection part 16 2nd detection part 17 2nd setting part 18 Timer 19 Determination Part 20, 30 Person 25 Total image area 26 First monitoring area 41, 42 Edge 44 Second monitoring area 52 yen

Claims (4)

ドアが設けられた所定の出入口を、当該出入口の近傍領域を含めて撮影するカメラと、
前記ドアの開閉状態を検出する第1の検出部と、
前記カメラによって撮影された映像に基づいて、前記出入口の近傍領域を移動する人物を検出する第2の検出部と、
前記第1及び第2の検出部による検出結果に基づいて、前記ドアが開いてから次に閉じるまでの間に前記出入口を通行した人物が一か複数かを判定する判定部と、
前記カメラによって撮影された映像に基づいて、前記カメラによる撮影画像の全領域の一部に、前記ドアの開閉状態を検出するために前記第1の検出部が監視すべき第1の監視領域を設定する第1の設定部と、
前記カメラによって撮影された映像に基づいて、前記カメラによる撮影画像内において前記出入口を特定し、特定された前記出入口自身を、前記出入口を通行する人物を検出するために前記判定部が監視すべき第2の監視領域として設定する第2の設定部と
を備え、
前記第1の検出部は、前記カメラによって撮影された映像に基づいて、前記ドアの開閉状態を検出し、
前記第2の設定部は、閉じられている状態での前記ドアの位置と、開かれている状態で前記第1の検出部によって検出された前記ドアの位置とに基づいて、前記出入口を特定する、通行監視システム。
A camera for photographing a predetermined entrance / exit provided with a door including a region near the entrance / exit,
A first detector for detecting an open / closed state of the door;
A second detection unit that detects a person moving in a vicinity region of the doorway based on an image captured by the camera;
A determination unit that determines whether one or more persons have passed through the doorway between the opening and closing of the door based on the detection results of the first and second detection units;
Based on the video imaged by the camera, a first monitoring area to be monitored by the first detection unit in order to detect the open / closed state of the door is included in a part of the entire area of the image captured by the camera. A first setting unit to be set;
Based on the video imaged by the camera, the entrance should be identified in an image captured by the camera, and the determination unit should monitor the identified entrance / exit itself to detect a person passing through the entrance / exit A second setting unit for setting as a second monitoring area,
The first detection unit detects an open / closed state of the door based on an image taken by the camera,
The second setting unit identifies the doorway based on the position of the door in the closed state and the position of the door detected by the first detection unit in the opened state. A traffic monitoring system.
前記第1の検出部は、開かれている状態の前記ドアを検出している状況において、その開かれている状態の前記ドアを検出しなくなった場合、開かれている状態の前記ドアを検出しなくなった時点から、その状態が所定時間継続したことにより、前記ドアが閉じられたことを検出する、請求項1に記載の通行監視システム。   In the situation where the first detection unit detects the door in the opened state, the first detection unit detects the door in the opened state when the door in the opened state is not detected. 2. The traffic monitoring system according to claim 1, wherein the door is closed by detecting that the state has continued for a predetermined time from the point of time when the door is not operated. 記カメラは、前記出入口の近傍領域の上方に設置されており、
前記第2の検出部は、前記カメラによる撮像画像内において円を検出することによって、前記人物を検出し、
前記第2の検出部は、重なる又は近接する複数の円を検出した場合、当該複数の円を包含する一つの円を規定し、当該一つの円を一人の前記人物として検出する、請求項1又は2に記載の通行監視システム。
Before Symbol camera is installed above the region near the doorway,
The second detection unit detects the person by detecting a circle in an image captured by the camera,
The second detection unit, when detecting a plurality of circles that overlap or close, to define a single circle encompassing the plurality of circles, to detect the one circle as the person alone, claim 1 Or the traffic monitoring system according to 2;
記カメラは、前記出入口の近傍領域の上方に設置されており、
前記第2の検出部は、前記カメラによる撮像画像内において円を検出することによって、前記人物を検出し、
前記カメラによる撮像画像内で前記円が移動した場合、前記第2の検出部は、前記円の中心位置情報及び半径情報に基づいて、移動の前後の円が同一人物に対応する円であるか否かを決定する、請求項1又は2に記載の通行監視システム。
Before Symbol camera is installed above the region near the doorway,
The second detection unit detects the person by detecting a circle in an image captured by the camera,
When the circle moves in the image captured by the camera, the second detection unit determines whether the circles before and after the movement correspond to the same person based on the center position information and the radius information of the circle. The traffic monitoring system according to claim 1 or 2 , which determines whether or not.
JP2007023577A 2007-02-01 2007-02-01 Traffic monitoring system Expired - Fee Related JP5170731B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007023577A JP5170731B2 (en) 2007-02-01 2007-02-01 Traffic monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007023577A JP5170731B2 (en) 2007-02-01 2007-02-01 Traffic monitoring system

Publications (2)

Publication Number Publication Date
JP2008191793A JP2008191793A (en) 2008-08-21
JP5170731B2 true JP5170731B2 (en) 2013-03-27

Family

ID=39751859

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007023577A Expired - Fee Related JP5170731B2 (en) 2007-02-01 2007-02-01 Traffic monitoring system

Country Status (1)

Country Link
JP (1) JP5170731B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5340208B2 (en) * 2010-03-16 2013-11-13 三菱電機株式会社 Traffic detection system
JP6038643B2 (en) * 2012-12-27 2016-12-07 セコム株式会社 Background information generation apparatus and object detection apparatus
JP6080572B2 (en) * 2013-01-31 2017-02-15 セコム株式会社 Traffic object detection device
CN103986906B (en) * 2014-05-08 2017-05-10 杭州同尊信息技术有限公司 Door opening and closing detection method based on monitoring videos
CN113593099B (en) * 2020-04-30 2023-06-13 深圳云天励飞技术有限公司 Gate control method, device and system, electronic equipment and storage medium
WO2022202125A1 (en) * 2021-03-22 2022-09-29 日本電気株式会社 Information processing device, information processing system, information processing method, and recording medium
CN115482611A (en) * 2022-08-02 2022-12-16 青岛民航凯亚系统集成有限公司 Self-service security check channel flow control system based on video analysis

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0567264A (en) * 1991-06-28 1993-03-19 Furukawa Electric Co Ltd:The Illegal passage monitoring method
JP3731467B2 (en) * 2000-11-06 2006-01-05 オムロン株式会社 Biometric matching device, biometric matching system and method
JP2004280697A (en) * 2003-03-18 2004-10-07 Seiko Epson Corp Image processor and program
US8330814B2 (en) * 2004-07-30 2012-12-11 Panasonic Corporation Individual detector and a tailgate detection device

Also Published As

Publication number Publication date
JP2008191793A (en) 2008-08-21

Similar Documents

Publication Publication Date Title
US20070268145A1 (en) Automated tailgating detection via fusion of video and access control
JP5170731B2 (en) Traffic monitoring system
JP4321471B2 (en) Rampage detection device
JP5550974B2 (en) Suspicious person detection device
KR101858396B1 (en) Intelligent intrusion detection system
JP6336709B2 (en) Security device, security method and program
KR102361770B1 (en) Method and Apparatus for Strengthening of Security
JP4866801B2 (en) Apartment house intercom system
JP4617286B2 (en) Unauthorized passing person detection device and unauthorized passing person recording system using the same
KR102113489B1 (en) Action Detection System and Method Using Deep Learning with Camera Input Image
JP2002304651A (en) Device and method for managing entering/leaving room, program for executing the same method and recording medium with the same execution program recorded thereon
EP3048594B1 (en) Anonymous disarm detection with built-in camera
KR102046591B1 (en) Image Monitoring System and Method for Monitoring Image
JP2010211514A (en) Intruder monitoring device
Gavaskar et al. A novel design and implementation of IoT based real-time ATM surveillance and security system
JP2008182459A (en) Passage monitoring system
JP6947202B2 (en) Matching system
CN106572324A (en) Energy-efficient smart monitoring device
JP5752975B2 (en) Image monitoring device
JP2015079472A (en) Security system for architectural structure
CN105049782B (en) security monitoring system
JP2009205494A (en) Gate device
JPH1132322A (en) Automatic tracing system for possessor of dangerous weapon
JP2006338467A (en) Surveillance system and controlling method for it
JP2006039906A (en) Alarm generation system and video processing apparatus

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20090317

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20090317

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090317

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090319

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20110621

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120104

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120207

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120822

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121019

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121221

R150 Certificate of patent or registration of utility model

Ref document number: 5170731

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees