JP5223126B2 - Mobile object detection system and admission management system - Google Patents

Mobile object detection system and admission management system Download PDF

Info

Publication number
JP5223126B2
JP5223126B2 JP2008102130A JP2008102130A JP5223126B2 JP 5223126 B2 JP5223126 B2 JP 5223126B2 JP 2008102130 A JP2008102130 A JP 2008102130A JP 2008102130 A JP2008102130 A JP 2008102130A JP 5223126 B2 JP5223126 B2 JP 5223126B2
Authority
JP
Japan
Prior art keywords
tag
detection
trigger signal
area
mobile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008102130A
Other languages
Japanese (ja)
Other versions
JP2009252129A (en
Inventor
愼一 吉村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Matrix Inc
Original Assignee
Matrix Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matrix Inc filed Critical Matrix Inc
Priority to JP2008102130A priority Critical patent/JP5223126B2/en
Publication of JP2009252129A publication Critical patent/JP2009252129A/en
Application granted granted Critical
Publication of JP5223126B2 publication Critical patent/JP5223126B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Alarm Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

この発明は、移動体検出システムおよび入場管理システムに関し、特に不審者を検出可能な移動体検出システムおよび入場管理システムに関する。   The present invention relates to a mobile body detection system and an entrance management system, and more particularly to a mobile body detection system and an entrance management system that can detect a suspicious person.

従来の入場管理システムにおける、いわゆる共連れ防止方法がたとえば、特開2006−99381号公報(特許文献1)に開示されている。この公報によれば、ID(Identification)タグとカメラとを用いてゲートへ入場する人が有するIDタグの数とカメラで撮影した画像を分析することによって得られる人の数とが一致するか否かを判断して、不一致の場合にはゲートは開閉されること無く、また、警報が作動される。
特開2006−99381号公報(段落番号0027等)
For example, Japanese Patent Laid-Open No. 2006-99381 (Patent Document 1) discloses a so-called co-payment prevention method in a conventional entrance management system. According to this publication, whether or not the number of ID tags held by a person entering the gate using an ID (Identification) tag and a camera matches the number of persons obtained by analyzing an image taken by the camera. If there is a discrepancy, the gate is not opened and closed and an alarm is activated.
JP 2006-99381 A (paragraph number 0027, etc.)

従来の入場管理システムにおける共連れ防止は上記のように行われていた。タグの数と画像分析による数とが一致するか否かのみを判断しているため、不正な入場を禁止できるが、タグの数と画像分析による人数とを個別に数える必要があるため、構成が複雑になるという問題があった。   In the conventional entrance management system, the accompanying prevention is performed as described above. Since it only determines whether or not the number of tags matches the number from image analysis, unauthorized entry can be prohibited, but it is necessary to count the number of tags and the number by image analysis separately. There was a problem that became complicated.

この発明は上記のような問題点を解消するためになされたもので、IDタグを有する人と有しない人とを簡易に識別できる移動体検出システムおよび入場管理システムを提供することを目的とする。   The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a moving body detection system and an entrance management system that can easily identify a person having an ID tag and a person having no ID tag. .

この発明に係る、所定の領域に存在する移動体がIDタグを有するか移動体か否かを判断する移動体検出システムは、計時手段と、所定の領域を撮影する撮影手段と、撮影手段で撮影された画像を基に、所定の領域に移動体が存在するか否かを判定する画像判定手段と、所定の領域にIDタグを有する移動体が存在する否かを検出するIDタグ検出手段と、画像判定手段が、移動体が存在すると判定した時刻、および、IDタグ検出手段がIDタグを有する移動体が存在すると検出した時刻を計時手段から入手するタイミング検出手段と、タイミング検出手段が検出した、画像判定手段の判定時刻とIDタグ検出手段の検出した検出時刻とに基づいて、領域に存在する移動体がIDタグを有しているか否かを判断する判断手段とを含む。 According to the present invention, a mobile body detection system for determining whether a mobile body existing in a predetermined area has an ID tag or a mobile body includes a time measuring means, a photographing means for photographing a predetermined area, and a photographing means. An image determination unit that determines whether or not a moving object is present in a predetermined area based on the captured image, and an ID tag detection unit that detects whether or not a moving object having an ID tag is present in the predetermined area A timing detection unit that obtains from the time measuring unit the time when the image determination unit determines that the moving body is present, and the time when the ID tag detection unit detects that the mobile body having the ID tag is present, and the timing detection unit includes: Determination means for determining whether or not the mobile object existing in the region has an ID tag based on the detected determination time of the image determination means and the detection time detected by the ID tag detection means.

好ましくは、所定の領域には、それぞれの領域を特定するトリガ信号を発信するトリガ信号発信手段と、トリガ信号に応答したIDタグからのIDを受信するID受信手段とが設けられ、IDタグ検出手段は、ID受信手段の受信結果に基づいてIDタグを有する移動体が所定の領域に存在するか否かを検出する。   Preferably, the predetermined area is provided with a trigger signal transmitting means for transmitting a trigger signal for specifying each area and an ID receiving means for receiving an ID from an ID tag in response to the trigger signal. The means detects whether or not the mobile object having the ID tag is present in a predetermined area based on the reception result of the ID receiving means.

さらに好ましくは、表示手段を含み、表示手段は、判断手段の判断結果に応じて、領域にIDタグ検出手段が検出した移動体が存在する場合には第1の表示形態でIDタグを有する移動体を表示し、所定の領域にIDタグ検出手段が検出した移動体が存在しない場合には第1と異なる第2の表示形態でIDタグを有しない移動体を表示する。   More preferably, the display unit includes a display unit, and the display unit includes a movement having the ID tag in the first display form when a moving object detected by the ID tag detection unit exists in the area according to the determination result of the determination unit. When the mobile body detected by the ID tag detection means does not exist in the predetermined area, the mobile body having no ID tag is displayed in a second display mode different from the first.

なお、領域は複数設けられてもよい。   A plurality of regions may be provided.

この発明の他の局面においては、計時手段を有し、ゲートを通過する移動体が所定のIDを出力するIDタグを有するか否かを管理する入場管理システムは、ゲートの入口部に設けられた領域と、領域を撮影する撮影手段と、撮影手段で撮影された画像を基に、領域に移動体が存在するか否かを判定する画像判定手段と、領域にIDタグを有する移動体が存在するか否かを検出するIDタグ検出手段と、画像判定手段が、移動体が存在すると判定した時刻、および、IDタグ検出手段がIDタグを有する移動体が存在すると検出した時刻を前記計時手段から入手するタイミング検出手段と、タイミング検出手段が検出した、画像判定手段の判定時刻とIDタグ検出手段の検出した検出時刻とに基づいて、領域に存在する移動体がIDタグを有しているか否かを判断する判断手段とを含む。   In another aspect of the present invention, an admission management system that has a timing unit and manages whether or not a moving body that passes through a gate has an ID tag that outputs a predetermined ID is provided at an entrance of the gate. An image determination unit that determines whether or not a moving body exists in the area based on an image captured by the imaging unit, and a moving body that has an ID tag in the area. An ID tag detection unit that detects whether or not the image is present, and a time at which the image determination unit determines that a moving body is present and a time at which the ID tag detection unit detects that a mobile body having an ID tag is present Based on the timing detection means obtained from the means, the determination time of the image determination means detected by the timing detection means, and the detection time detected by the ID tag detection means, the mobile object existing in the region has an ID tag. And a determination means for determining whether or not to have.

好ましくは、領域には、領域を特定するトリガ信号を発信するトリガ信号発信手段と、トリガ信号に応答したIDタグからのIDを受信するID受信手段とが設けられ、IDタグ検出手段は、ID受信手段の受信結果に基づいてIDタグを有する移動体を検出する。   Preferably, the area is provided with a trigger signal transmitting means for transmitting a trigger signal for specifying the area and an ID receiving means for receiving an ID from an ID tag in response to the trigger signal. A moving body having an ID tag is detected based on the reception result of the receiving means.

さらに好ましくは、領域は、ゲートの幅方向に設けられた複数の小領域を含み、小領域には、各小領域を特定するトリガ信号を発信するトリガ信号発信手段が設けられる。   More preferably, the region includes a plurality of small regions provided in the width direction of the gate, and the small region is provided with a trigger signal transmitting means for transmitting a trigger signal for specifying each small region.

ゲートの通過を許可するIDを格納した記憶手段を含み、判断手段は、記憶手段に記憶されたゲート通過を許可するIDに基づいて移動体が所定のIDを出力するIDタグを有するか否かを判断してもよい。   Whether or not the mobile unit has an ID tag that outputs a predetermined ID based on the ID that allows passage through the gate stored in the storage unit, including a storage unit that stores an ID that allows passage through the gate. May be judged.

また、警報手段を含み、判断手段が、移動体が所定のIDタグを有していないと判断したときは、警報手段を作動させてもよい。   Further, the alarm means may be included and the alarm means may be activated when the determination means determines that the mobile body does not have the predetermined ID tag.

この発明の一つの実施の形態においては、表示手段を含み、表示手段は、判断手段の判断結果に応じて、領域にIDタグ検出手段が検出した移動体が存在する場合には第1の表示形態でIDタグを有する移動体を表示し、所定の領域にIDタグ検出手段が検出した移動体が存在しない場合には第1と異なる第2の表示形態でIDタグを有しない移動体を表示する。   In one embodiment of the present invention, the display unit includes a display unit, and the display unit displays the first display when the mobile body detected by the ID tag detection unit is present in the area according to the determination result of the determination unit. A mobile body having an ID tag is displayed in a form, and if there is no mobile body detected by the ID tag detection means in a predetermined area, a mobile body having no ID tag is displayed in a second display form different from the first. To do.

なお、小領域は、ゲートへの進行方向において複数の領域に区分されており、トリガ信号発信手段はゲートへの進行方向において設けられた複数の領域ごとに設けられてもよい。   The small region may be divided into a plurality of regions in the traveling direction to the gate, and the trigger signal transmitting means may be provided for each of the plurality of regions provided in the traveling direction to the gate.

この発明によれば、所定の領域を撮影し、撮影された画像を基に、移動体が存在するか否かを判定するとともに、その領域にIDタグを有する移動体を検出して、画像とIDタグのそれぞれの検出したタイミングを基に、移動体がIDタグを有しているか否かを判断する。   According to the present invention, a predetermined area is imaged, and based on the captured image, it is determined whether or not a moving object is present, and a moving object having an ID tag in the area is detected. Based on the detected timing of each ID tag, it is determined whether or not the mobile body has an ID tag.

その結果、簡易な構成で移動体がIDタグを有するか否かを識別できる移動体検出システム、および、入場管理システムを提供できる。   As a result, it is possible to provide a moving body detection system and an entrance management system that can identify whether or not the moving body has an ID tag with a simple configuration.

まず、この発明の原理について説明する。図1はこの発明に係る移動体検出システムの原理を説明するための図である。図1(A)は、所定の範囲に設けられた、人がIDタグを有するか否かを判断する移動体検出システムの要部を示す斜視図であり、図1(B)は図1(A)において矢印IB-IBで示す部分の平面図であり、図1(C)は図1(B)のうちの、トリガ領域のみを示す図である。図1(D)は、図2に示す管理コンピュータに接続されたディスプレイ(図2で示す表示部)の表示画面を示す図である。   First, the principle of the present invention will be described. FIG. 1 is a diagram for explaining the principle of a moving object detection system according to the present invention. FIG. 1A is a perspective view showing a main part of a moving body detection system provided in a predetermined range for determining whether or not a person has an ID tag, and FIG. FIG. 1A is a plan view of a portion indicated by an arrow IB-IB in FIG. 1A, and FIG. 1C is a view showing only a trigger region in FIG. FIG. 1D is a diagram showing a display screen of a display (display unit shown in FIG. 2) connected to the management computer shown in FIG.

図1を参照して、所定の監視範囲10が3つの監視領域11a,11b,11cに区切られている。これらの3つの監視領域11a〜11cのそれぞれには、それぞれの領域を特定するトリガ信号を発信するトリガアンテナが設けられている。ここでは、各領域11aから11cで示す矩形の外周にトリガ信号を発信するトリガアンテナが設けられているものとする。したがって、それぞれの領域11a〜11cにIDタグを有する移動体(人または物)が入ると、その領域のトリガ信号を受けて、それぞれのID番号が出力される。出力されたID番号は、図示のない受信器によって受信され、図2に示す受信部に入力される。ここで、各領域11a〜11cにIDタグが入った、または、出た時刻がIDタグ情報とともに記録される。   Referring to FIG. 1, a predetermined monitoring range 10 is divided into three monitoring areas 11a, 11b, and 11c. Each of these three monitoring areas 11a to 11c is provided with a trigger antenna that transmits a trigger signal for specifying each area. Here, the trigger antenna which transmits a trigger signal shall be provided in the rectangular outer periphery shown by each area | region 11a to 11c. Therefore, when a mobile body (person or thing) having an ID tag enters each of the areas 11a to 11c, the respective ID numbers are output in response to the trigger signal of that area. The output ID number is received by a receiver (not shown) and input to the receiving unit shown in FIG. Here, the time when the ID tag enters or exits each area 11a to 11c is recorded together with the ID tag information.

一方、3つの領域11a〜11cの上部には、所定の撮影範囲を有するカメラ(撮影手段)13が設けられている。ここで、カメラ13の撮影領域は図中点線12で示すように、3つの領域11a〜11cを十分カバーしている。カメラ13により撮影された画像は後に説明する画像処理部で処理され、移動体の有無が判断され、移動体が存在すると判断したときは、その撮影領域を示す情報とともに、移動体が撮影領域(監視領域)に入った、または、出た撮影時刻が記録される。   On the other hand, a camera (photographing means) 13 having a predetermined photographing range is provided above the three regions 11a to 11c. Here, the imaging region of the camera 13 sufficiently covers the three regions 11a to 11c as indicated by a dotted line 12 in the figure. An image photographed by the camera 13 is processed by an image processing unit which will be described later, and the presence or absence of a moving object is determined. When it is determined that a moving object exists, the moving object is displayed together with information indicating the photographing area. The shooting time when entering or leaving the monitoring area is recorded.

すなわち、このシステムにおいては、カメラによる移動体を撮影したタイミング情報と、IDタグによる移動体を検出したタイミング情報とが同じか否かに基づいて、所定の監視範囲にIDタグを有する移動体、および、有さない移動体が存在するか否かを判定する。   That is, in this system, based on whether or not the timing information obtained by photographing the moving body by the camera and the timing information by which the moving body by the ID tag is detected, the moving body having an ID tag in a predetermined monitoring range, And it is determined whether there exists a moving body which does not have.

次に、移動体検出システムを制御する制御部について説明する。図2は制御部の構成を示すブロック図である。図2を参照して、制御部100は、システム全体を制御するCPU(Central Processing Unit)101と、IDタグのID等を格納したデータベース(記憶手段)102と、上記したトリガアンテナにトリガ信号を送信するトリガ信号送信部(トリガ発信手段)103と、受信アンテナで受信したIDを受信する受信部104(受信手段)と、カメラ13で撮影した画像を分析して入場者の位置を特定する画像分析部105と、画像等を表示する表示部(表示手段)106と、カメラ13で撮影した画像を格納する画像格納部107と、移動体の検出時刻を知るための計時部(計時手段)108と、を含む。計時部108は時刻を検出可能な任意の装置である。   Next, a control unit that controls the moving body detection system will be described. FIG. 2 is a block diagram showing the configuration of the control unit. Referring to FIG. 2, the control unit 100 sends a trigger signal to a CPU (Central Processing Unit) 101 that controls the entire system, a database (storage means) 102 that stores IDs of ID tags, and the like, and the trigger antenna described above. Trigger signal transmission unit (trigger transmission unit) 103 for transmission, reception unit 104 (reception unit) for receiving ID received by the reception antenna, and image for analyzing the image taken by the camera 13 and specifying the position of the visitor An analysis unit 105, a display unit (display unit) 106 for displaying images and the like, an image storage unit 107 for storing images taken by the camera 13, and a time measuring unit (time measuring unit) 108 for knowing the detection time of the moving object. And including. The timer 108 is an arbitrary device that can detect the time.

データベース102は、IDタグを有する移動体が上記した監視領域に入ったときに、そのIDを有する移動体を特定するためのデータを格納している。   The database 102 stores data for specifying the mobile object having the ID when the mobile object having the ID tag enters the monitoring area described above.

次に、図1および図2を参照して、移動体検出システムの制御部100の動作について説明する。図3から図5は、制御部100の動作を示すフローチャートである。図3はメインフローチャートであり、図4および図5は、図3に示した処理内容を示すサブフローチャートである。   Next, with reference to FIG. 1 and FIG. 2, operation | movement of the control part 100 of a moving body detection system is demonstrated. 3 to 5 are flowcharts showing the operation of the control unit 100. FIG. 3 is a main flowchart, and FIGS. 4 and 5 are sub-flowcharts showing the processing contents shown in FIG.

まず、図3を参照して、カメラ13の撮影した画像に基づいて監視領域11a〜11cに移動体が存在するか否かを判断する(ステップS11、以下、ステップを省略する)。次に、トリガ信号を用いてIDタグが存在するか否かを判断する(S12)。次に、監視領域11a〜11cに入った未判定の動体があるか否かを判断する(S13)。監視領域11a〜11cに入った未判定の動体があれば(S13でYES)、同時・同位置にIDタグがあるか否かを判断する。IDタグの有無によって、IDタグを有する登録者(S15)か、IDタグを有さない不審者(S16)かを判定出力し、IDタグと動体とを判定済とする(S17)。したがって、CPU101はIDタグ検出手段、タイミング検出手段、および、判断手段として作動する。   First, referring to FIG. 3, it is determined whether or not there is a moving body in the monitoring areas 11 a to 11 c based on images taken by the camera 13 (step S <b> 11, hereinafter, steps are omitted). Next, it is judged whether an ID tag exists using a trigger signal (S12). Next, it is determined whether there is an undetermined moving body that has entered the monitoring areas 11a to 11c (S13). If there is an undetermined moving object that has entered the monitoring areas 11a to 11c (YES in S13), it is determined whether or not there is an ID tag at the same position. Based on the presence / absence of the ID tag, it is determined whether the registrant having the ID tag (S15) or the suspicious person having no ID tag (S16) is output, and the ID tag and the moving object are determined (S17). Therefore, the CPU 101 operates as an ID tag detection unit, a timing detection unit, and a determination unit.

次に、図3のS11で示したカメラによる動体の検出方法について図4を参照して説明する。図4はこの場合の制御部の動作を説明するためのフローチャートである。図4を参照して、まずカメラ13で撮影した画像を取得する(S111)。画像分析部105は取得した画像を基に画像分析部105で動体検出処理を行う(S112)。動体検出処理においては、画像内の移動体を抽出し、新しく検出された移動体に動体IDを与える。移動体が検出されて、監視領域11a〜11cに移動体が進入、または、退出したときに、動体IDを、監視領域を特定する領域IDとともにCPU101へ出力する。CPU101は、このデータを受けたとき、計時部108から時刻データを受け、移動体が監視領域に対して進入したのか退出したのかを示すフラグとともに図示のない記憶部に格納する。動体検出処理によって動体が検出されたときは(S113でYES)、前回の処理で動体が監視領域に入っていたか否かを判断する(S114)。前回の処理で人が入っていたときは(S114でYES)、そのまま処理を終了する(S119)。   Next, a moving object detection method by the camera shown in S11 of FIG. 3 will be described with reference to FIG. FIG. 4 is a flowchart for explaining the operation of the control unit in this case. Referring to FIG. 4, first, an image photographed by camera 13 is acquired (S111). The image analysis unit 105 performs a moving object detection process in the image analysis unit 105 based on the acquired image (S112). In the moving object detection process, a moving object in the image is extracted, and a moving object ID is given to the newly detected moving object. When the moving body is detected and the moving body enters or leaves the monitoring areas 11a to 11c, the moving body ID is output to the CPU 101 together with the area ID that specifies the monitoring area. When receiving this data, the CPU 101 receives time data from the time measuring unit 108 and stores it in a storage unit (not shown) together with a flag indicating whether the moving body has entered or exited the monitoring area. When a moving object is detected by the moving object detection process (YES in S113), it is determined whether or not the moving object has entered the monitoring area in the previous process (S114). If there is a person in the previous process (YES in S114), the process is terminated as it is (S119).

S113で動体が検出されなかったときは(S113でNO)、そのまま処理を終了する。S114で前回の処理で動体が監視領域に入っていなければ(S114でNO)、動体が監視領域に入っているか否かを判断する(S117)。動体が監視領域に入っていると判断したときは(S117でYES)、動体が新たに監視領域に進入した旨の情報をCPU101に出力して処理を終了する(S118,S119)。S117で動体が監視領域に入っていなければ(S117でNO)、処理を終了する(S119)。S115で動体が監視領域に入っていないと判断したときは(S115でNO)、動体が監視領域からの退出した旨の信号をCPU101に出力し、処理を終了する(S116、S119)。したがって、CPU101は画像判定手段として作動する。   If no moving object is detected in S113 (NO in S113), the process is terminated. If the moving object is not in the monitoring area in the previous process in S114 (NO in S114), it is determined whether or not the moving object is in the monitoring area (S117). When it is determined that the moving object is in the monitoring area (YES in S117), information indicating that the moving object has newly entered the monitoring area is output to the CPU 101, and the process is terminated (S118, S119). If the moving object is not in the monitoring area in S117 (NO in S117), the process is terminated (S119). If it is determined in S115 that the moving object is not in the monitoring area (NO in S115), a signal indicating that the moving object has left the monitoring area is output to the CPU 101, and the process is terminated (S116, S119). Therefore, the CPU 101 operates as an image determination unit.

次に、図3のS12で示したトリガ信号による動体の検出方法について図5を参照して説明する。図5はこの場合の制御部の動作を説明するためのフローチャートである。図5を参照して、まず受信部104からIDタグ受信データを取得する(S121)。取得したIDタグはデータベース102に格納された登録済のIDタグかどうかを判断する(S122)。登録済のIDタグであれば(S122でYES)、IDタグ受信データをCPU101に出力して処理を終了する(S123,S124)。S122で登録済みのIDタグでなければ(S122でNO)、その旨の信号をCPU101に出力し、処理を終了する(S119)。   Next, a moving object detection method using the trigger signal shown in S12 of FIG. 3 will be described with reference to FIG. FIG. 5 is a flowchart for explaining the operation of the control unit in this case. Referring to FIG. 5, first, ID tag reception data is acquired from receiving section 104 (S121). It is determined whether or not the acquired ID tag is a registered ID tag stored in the database 102 (S122). If it is a registered ID tag (YES in S122), the ID tag received data is output to the CPU 101 and the process is terminated (S123, S124). If the ID tag has not been registered in S122 (NO in S122), a signal to that effect is output to the CPU 101, and the process ends (S119).

なお、受信部104は監視領域11a〜11cを特定するトリガ領域にIDタグが滞在する間、IDタグ40からの信号を継続して受信する。受信が開始したとき、受信部104はIDタグ40がトリガ領域に進入したと判断し、受信が停止したとき、受信部104はIDタグ40がトリガ領域から退出したと判断する。IDタグ40からの信号には、IDタグ40のタグ番号、および、滞在するトリガ領域のトリガIDが含まれる。受信部104は、受信したタグ番号とトリガIDに、時刻と、監視(トリガ)領域への進入か退出かを示すフラグを付加し、CPU101へ出力する。   The receiving unit 104 continuously receives a signal from the ID tag 40 while the ID tag stays in the trigger area that specifies the monitoring areas 11a to 11c. When reception starts, the reception unit 104 determines that the ID tag 40 has entered the trigger area, and when reception stops, the reception unit 104 determines that the ID tag 40 has exited from the trigger area. The signal from the ID tag 40 includes the tag number of the ID tag 40 and the trigger ID of the staying trigger area. The receiving unit 104 adds a time and a flag indicating whether to enter or leave the monitoring (trigger) area to the received tag number and trigger ID, and outputs the result to the CPU 101.

図1(D)は、上記の処理による移動体の検出結果を表示部106に表示した例を示す図である。図1(D)に示すように、領域11a〜11cごとに、あるタイミングで、その領域に存在する移動体をカメラとIDタグとで検出可能であるため、その情報を用いて、各領域に存在するIDタグを有する人を○印で、IDタグを有しない人を○印と異なる□で表示可能になる。なお、ここでIDタグを有しない人が存在する場合は、その旨の警告を表示するとともに、ブザー等(警報手段)で警報を発してもよい。   FIG. 1D is a diagram illustrating an example in which the detection result of the moving object by the above processing is displayed on the display unit 106. As shown in FIG. 1 (D), for each of the areas 11a to 11c, a moving object existing in the area can be detected by the camera and the ID tag at a certain timing. A person with an existing ID tag can be displayed with a circle, and a person without an ID tag can be displayed with a square different from the circle. If there is a person who does not have an ID tag, a warning to that effect may be displayed and a warning may be issued with a buzzer or the like (alarm means).

以上のように、この発明においては、カメラとトリガ信号に応答したIDタグとによる監視領域への進入、または、退去のタイミングを基に、監視領域に存在する移動体がIDタグを有するか否かの判断を容易に行うことができる。   As described above, according to the present invention, whether or not the moving object existing in the monitoring area has the ID tag based on the timing of entering or leaving the monitoring area by the camera and the ID tag in response to the trigger signal. It can be easily determined.

なお、上記実施の形態においては、監視領域として3つの小領域を用いた場合について説明したが、これに限らず、監視領域は1つであってもよいし、3つに限らず、任意の数の監視領域を設けてもよい。   In the above embodiment, the case where three small regions are used as the monitoring region has been described. However, the present invention is not limited to this, and the number of monitoring regions may be one, not limited to three, and may be arbitrary. A number of monitoring areas may be provided.

次に、具体的な実施の形態について説明する。ここでは、上記した移動体検出システムを、マンション等の集合住宅の入口ドア(ゲート)の入場管理システムに適用した場合について説明する。図6は入場管理システムが適用された入口ゲート近傍を示す平面図である。図6を参照して、入口ドア21の外部には、通路20が設けられ、この通路20のドア21近傍の全幅を覆うように、監視領域30が設けられている。なお、この図では、天井に設けられたカメラについては図示を省略している。   Next, specific embodiments will be described. Here, the case where the above-described moving body detection system is applied to an entrance management system for an entrance door (gate) of an apartment house such as an apartment will be described. FIG. 6 is a plan view showing the vicinity of the entrance gate to which the entrance management system is applied. Referring to FIG. 6, a passage 20 is provided outside the entrance door 21, and a monitoring region 30 is provided so as to cover the entire width of the passage 20 near the door 21. In this figure, the camera provided on the ceiling is not shown.

この実施の形態においては、監視領域30は、図1の11a〜11cに対応する領域で、通路20の幅方向に3つの小領域A〜Cに分割されており、幅方向に分割されたそれぞれの小領域A〜Cは外部側からドア10側にさらに2つの小領域1,2に分割されている。すなわち、監視領域30は、A1,B1,C1からなる領域とA2,B2,C2からなる領域とからなる6つの小領域A1,A2,B1,B2,C1,C2に分割されている。図示のないカメラは監視領域30全体を撮影し、その画像を分析して、図1で説明したように、小領域ごとに人の入場、退出を検出する。   In this embodiment, the monitoring area 30 is an area corresponding to 11a to 11c in FIG. 1 and is divided into three small areas A to C in the width direction of the passage 20, and each divided in the width direction. The small areas A to C are further divided into two small areas 1 and 2 from the outside to the door 10 side. That is, the monitoring area 30 is divided into six small areas A1, A2, B1, B2, C1, and C2, which are composed of areas including A1, B1, and C1 and areas including A2, B2, and C2. A camera (not shown) captures the entire monitoring area 30, analyzes the image, and detects the entrance and exit of a person for each small area, as described with reference to FIG.

一方、それぞれの小領域A1〜C2には上記したトリガ信号を出力するトリガアンテナ31a〜33bが設けられている。IDタグはトリガ信号に応答して自分の有するID番号等を出力する。出力されたID番号等は、通路20の側部に設けられた受信アンテナ22によって受信されて、図2に示した管理コンピュータ100を有する監視パネル60に送信される。なお、受信アンテナ22や監視パネル60は図示の位置に限らず、任意の位置に設けてもよい。また、受信アンテナ22の受信した信号やカメラの撮影した画像データ等は無線で監視パネルへ送信してもよいし、有線で送信してもよい。   On the other hand, trigger antennas 31a to 33b for outputting the trigger signals described above are provided in the respective small areas A1 to C2. The ID tag outputs its own ID number and the like in response to the trigger signal. The output ID number and the like are received by the receiving antenna 22 provided on the side of the passage 20 and transmitted to the monitoring panel 60 having the management computer 100 shown in FIG. The receiving antenna 22 and the monitoring panel 60 are not limited to the illustrated positions, and may be provided at arbitrary positions. Further, the signal received by the receiving antenna 22, image data taken by the camera, or the like may be transmitted wirelessly to the monitoring panel or may be transmitted by wire.

そして、カメラにより撮影された画像から得られた小領域ごとの人の入退場と、IDタグから得られた小領域ごとの人の入退場とのタイミングを検出して、検出された人が、登録されたIDタグを有する人か否かを判断し、登録された人であれば、制御部100はドアを開閉する信号を出力し、IDタグを有さない人であればドアを開閉しない。また、警報を発してもよい。   And the person who is detected by detecting the timing of the person's entry and exit for each small area obtained from the image taken by the camera and the person's entry and exit for each small area obtained from the ID tag, It is determined whether or not the person has a registered ID tag. If the person is a registered person, the control unit 100 outputs a signal for opening and closing the door, and if the person does not have an ID tag, the door is not opened and closed. . An alarm may be issued.

その結果、登録されたIDタグを有する人のみが入場できる入場管理システムを提供できる。   As a result, it is possible to provide an entrance management system in which only a person having a registered ID tag can enter.

なお、通路の幅方向の分割幅は、人の肩幅より多少大きい程度が好ましい。それぞれの小トリガ領域A1〜C2に設けられたトリガアンテナ31a〜33bはそれぞれ、異なるトリガ信号を出力する。一方、トリガ信号を受信したIDタグは自身のID番号、および、受信したトリガ信号に含まれるID番号(トリガID)を出力するため、IDタグからの信号を受信して解析すれば、IDタグを有する人がどの小トリガ領域A1〜C2に存在するかを検出できる。   The width of the passage in the width direction is preferably slightly larger than the shoulder width of a person. The trigger antennas 31a to 33b provided in the small trigger areas A1 to C2 respectively output different trigger signals. On the other hand, since the ID tag that has received the trigger signal outputs its own ID number and the ID number (trigger ID) included in the received trigger signal, if the signal from the ID tag is received and analyzed, the ID tag It is possible to detect in which small trigger region A1 to C2 a person who has

以上のように、この実施の形態においては、複数の入場者のうち、IDタグを有していない人を特定して、警告とともに表示するため、不審者を容易に判別できる。   As described above, in this embodiment, since a person who does not have an ID tag among a plurality of visitors is specified and displayed together with a warning, a suspicious person can be easily identified.

次に、ここで使用されるIDタグ40について説明する。図7はIDタグ40の構成を示すブロック図である。図5を参照して、IDタグ40は受信用アンテナ51とトリガ信号検知部41と、電池49と、スイッチ42と固有番号としてのID番号を発生する、ID番号発生部43とを含む。ID番号発生部43はアドレス計数部45とID番号記憶部46と発振器47と出力回路48と、ID番号を出力する送信用アンテナ44と、メモリ52と、全体を制御するマイコン50とから構成される。   Next, the ID tag 40 used here will be described. FIG. 7 is a block diagram showing the configuration of the ID tag 40. Referring to FIG. 5, ID tag 40 includes a receiving antenna 51, a trigger signal detecting unit 41, a battery 49, a switch 42, and an ID number generating unit 43 that generates an ID number as a unique number. The ID number generation unit 43 includes an address counting unit 45, an ID number storage unit 46, an oscillator 47, an output circuit 48, a transmitting antenna 44 that outputs an ID number, a memory 52, and a microcomputer 50 that controls the whole. The

受信用アンテナ51は、トリガ信号送信部103からのトリガ信号を受信するようになっており、トリガ信号検知部41は、受信用アンテナ51で受信された信号が、トリガー信号であると認識したときにスイッチ42をONするようになっている。スイッチ42がONされると、ID番号発生部43に電源が供給されて、このID番号発生部43からそのIDタグ40に対応するID番号を、送信用アンテナ44を介して出力する。このように出力されたID番号は発振器47によって高周波信号に変換されて出力回路48を介して送信用アンテナ44から送信される。   The reception antenna 51 is configured to receive a trigger signal from the trigger signal transmission unit 103, and the trigger signal detection unit 41 recognizes that the signal received by the reception antenna 51 is a trigger signal. The switch 42 is turned on. When the switch 42 is turned on, power is supplied to the ID number generator 43, and the ID number corresponding to the ID tag 40 is output from the ID number generator 43 via the transmission antenna 44. The ID number thus output is converted into a high frequency signal by the oscillator 47 and transmitted from the transmitting antenna 44 via the output circuit 48.

ここでIDタグ40に設けられた発振器47からは受信したトリガ信号にユニークなパターンに同期して、ID番号が発信し続けられ、このID番号を、受信部104が受信する。なお、受信したトリガ信号に含まれるトリガIDを含めて発信する。   Here, an ID number is continuously transmitted from the oscillator 47 provided in the ID tag 40 in synchronization with the received trigger signal in a unique pattern, and the receiving unit 104 receives this ID number. In addition, it transmits including the trigger ID contained in the received trigger signal.

なお、上記実施の形態においては、ドアへ至る通路の監視領域をドアの幅方向に3分割、ドアへ向かう方向に2分割した例について説明したが、これに限らず、ドアの幅方向に割されていなくてもよい。   In the above embodiment, the example in which the monitoring area of the passage leading to the door is divided into three in the width direction of the door and divided into two in the direction toward the door has been described. It does not have to be.

また、上記実施の形態においては、人の入場を管理する場合について説明したが、これに限らず、任意の物体にIDタグを設けて、その物体を所定の位置へ搬送してもよいか否かを判定してもよい。   In the above-described embodiment, the case where the entrance of a person is managed has been described. However, the present invention is not limited to this, and an ID tag may be provided on an arbitrary object and the object may be transported to a predetermined position. It may be determined.

また、入場者を撮影するカメラを天井に1台設けた例について説明したが、これに限らず、複数のカメラを設けてもよい。   Moreover, although the example which provided one camera which image | photographs a visitor on the ceiling was demonstrated, you may provide not only this but a several camera.

また、別途入場者の顔を確認するためのカメラを設けてもよい。   Moreover, you may provide the camera for confirming a visitor's face separately.

以上、図面を参照してこの発明の実施形態を説明したが、この発明は、図示した実施形態のものに限定されない。図示された実施形態に対して、この発明と同一の範囲内において、あるいは均等の範囲内において、種々の修正や変形を加えることが可能である。   As mentioned above, although embodiment of this invention was described with reference to drawings, this invention is not limited to the thing of embodiment shown in figure. Various modifications and variations can be made to the illustrated embodiment within the same range or equivalent range as the present invention.

この発明の原理を説明するための図である。It is a figure for demonstrating the principle of this invention. 移動体検出システムの制御部の構成を示すブロック図である。It is a block diagram which shows the structure of the control part of a moving body detection system. 移動体検出システムの制御部の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the control part of a moving body detection system. 移動体検出システムの制御部の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the control part of a moving body detection system. IDタグ判断システムの制御部の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the control part of an ID tag judgment system. IDタグ判断システムを入場管理システムに適用した場合の要部を示す平面図である。It is a top view which shows the principal part at the time of applying an ID tag judgment system to an admission management system. IDタグの構成を示すブロック図である。It is a block diagram which shows the structure of an ID tag.

符号の説明Explanation of symbols

10 監視範囲、11 領域、12 撮影領域、13 カメラ、14 天井、20 通路、21 ドア、22 受信アンテナ、30 トリガ領域、31a〜33b トリガアンテナ、100 制御部、101 データベース、102 トリガ信号送信部、104 受信部、105 画像分析部、106 表示部、107 画像格納部。
10 monitoring range, 11 area, 12 shooting area, 13 camera, 14 ceiling, 20 passage, 21 door, 22 receiving antenna, 30 trigger area, 31a-33b trigger antenna, 100 control unit, 101 database, 102 trigger signal transmitting unit, 104 reception unit, 105 image analysis unit, 106 display unit, 107 image storage unit.

Claims (9)

所定の領域に存在する移動体がIDタグを有するか移動体か否かを判断する移動体検出システムであって、
計時手段と、
前記所定の領域を撮影する撮影手段と、
前記撮影手段で撮影された画像を基に、前記所定の領域に移動体が存在するか否かを判定する画像判定手段と、
前記所定の領域にIDタグを有する移動体が存在する否かを検出するIDタグ検出手段と、
前記画像判定手段が、移動体が存在すると判定した時刻、および、前記IDタグ検出手段がIDタグを有する移動体が存在すると検出した時刻を前記計時手段から入手するタイミング検出手段と、
前記タイミング検出手段が検出した、前記画像判定手段の判定時刻と前記IDタグ検出手段の検出した検出時刻とが同時刻であるか否かに基づいて、前記所定の領域に存在する移動体がIDタグを有しているか否かを判断する判断手段とを含み、
前記所定の領域には、前記所定の領域を特定するトリガ信号を発信するトリガ信号発信手段と、前記トリガ信号に応答した前記IDタグからのIDを受信するID受信手段とが設けられ、
前記IDタグ検出手段は、前記ID受信手段の受信結果に基づいてIDタグを有する移動体が前記所定の領域に存在するか否かを検出する、移動体検出システム。
A mobile object detection system for determining whether a mobile object existing in a predetermined area has an ID tag or is a mobile object,
Timekeeping means,
Photographing means for photographing the predetermined area;
Image determining means for determining whether or not a moving object is present in the predetermined area based on an image photographed by the photographing means;
ID tag detecting means for detecting whether or not there is a moving body having an ID tag in the predetermined area;
Timing detecting means for obtaining from the time measuring means the time when the image determining means determines that a moving object is present, and the time when the ID tag detecting means detects that a moving object having an ID tag is present;
Based on whether or not the determination time of the image determination unit detected by the timing detection unit and the detection time detected by the ID tag detection unit are the same time, the moving object present in the predetermined region is identified as an ID. Judging means for judging whether or not it has a tag,
The predetermined area is provided with a trigger signal transmitting means for transmitting a trigger signal for specifying the predetermined area, and an ID receiving means for receiving an ID from the ID tag in response to the trigger signal,
The said ID tag detection means is a moving body detection system which detects whether the moving body which has an ID tag exists in the said predetermined area | region based on the reception result of the said ID receiving means .
表示手段をさらに含み、
前記表示手段は、前記判断手段の判断結果に応じて、前記領域に前記IDタグ検出手段が検出した移動体が存在する場合には第1の表示形態で前記IDタグを有する移動体を表示し、前記所定の領域に前記IDタグ検出手段が検出した移動体が存在しない場合には第1と異なる第2の表示形態で前記IDタグを有しない移動体を表示する、請求項1に記載の移動体検出システム。
A display means,
The display means displays the mobile body having the ID tag in the first display form when the mobile body detected by the ID tag detection means exists in the area according to the determination result of the determination means. The mobile body that does not have the ID tag is displayed in a second display form different from the first display form when there is no mobile body detected by the ID tag detection means in the predetermined area. Mobile object detection system.
前記領域は複数の小領域に区分されている、請求項1またはに記載の移動体検出システム。 The region is divided into a plurality of small areas, mobile detection system according to claim 1 or 2. 計時手段を有し、ゲートを通過する移動体が所定のIDを出力するIDタグを有するか否かを管理する入場管理システムであって、
前記ゲートの入口部に設けられた領域と、
前記領域を撮影する撮影手段と、
前記撮影手段で撮影された画像を基に、前記領域に移動体が存在するか否かを判定する画像判定手段と、
前記領域にIDタグを有する移動体が存在する否かを検出するIDタグ検出手段と、
前記画像判定手段が、移動体が存在すると判定した時刻、および、前記IDタグ検出手段がIDタグを有する移動体が存在すると検出した時刻を前記計時手段から入手するタイミング検出手段と、
前記タイミング検出手段が検出した、前記画像判定手段の判定時刻と前記IDタグ検出手段の検出した検出時刻とが同時刻であるか否かに基づいて、前記領域に存在する移動体がIDタグを有しているか否かを判断する判断手段とを含み、
前記領域には、前記領域を特定するトリガ信号を発信するトリガ信号発信手段と、前記トリガ信号に応答した前記IDタグからのIDを受信するID受信手段とが設けられ、
前記IDタグ検出手段は、前記ID受信手段の受信結果に基づいてIDタグを有する移動体を検出する、入場管理システム。
An admission management system for managing whether or not a moving body that has a time measuring means and has an ID tag that outputs a predetermined ID,
A region provided at the entrance of the gate;
Photographing means for photographing the region;
Image determining means for determining whether or not a moving object is present in the region based on an image photographed by the photographing means;
ID tag detection means for detecting whether or not there is a mobile object having an ID tag in the area;
Timing detecting means for obtaining from the time measuring means the time when the image determining means determines that a moving object is present, and the time when the ID tag detecting means detects that a moving object having an ID tag is present;
Based on whether or not the determination time of the image determination unit and the detection time detected by the ID tag detection unit detected by the timing detection unit are the same time, the mobile object existing in the region has an ID tag. Judging means for judging whether or not it has,
The area is provided with a trigger signal transmitting means for transmitting a trigger signal for specifying the area, and an ID receiving means for receiving an ID from the ID tag in response to the trigger signal,
The said ID tag detection means is an admission management system which detects the mobile body which has an ID tag based on the reception result of the said ID receiving means .
前記領域は、前記ゲートの幅方向に設けられた複数の領域を含み、前記小領域には、各前記小領域を特定するトリガ信号を発信するトリガ信号発信手段が設けられる、請求項に記載の入場管理システム。 The region includes a plurality of regions provided in the width direction of the gate, the small areas, the trigger signal transmitter for transmitting a trigger signal for specifying each said small region is provided, according to claim 4 Admission management system. 前記ゲートの通過を許可するIDを格納した記憶手段を含み、
前記判断手段は、前記記憶手段に記憶されたゲート通過を許可するIDに基づいて移動体が所定のIDを出力するIDタグを有するか否かを判断する、請求項またはに記載の入場管理システム。
Storing means for storing an ID permitting passage of the gate;
The entrance according to claim 4 or 5 , wherein the determination means determines whether or not the mobile body has an ID tag that outputs a predetermined ID based on an ID that allows passage through a gate stored in the storage means. Management system.
警報手段を含み、前記判断手段が、移動体が所定のIDタグを有していないと判断したときは、前記警報手段を作動させる、請求項からのいずれかに記載の入場管理システム。 The admission management system according to any one of claims 4 to 6 , further comprising an alarm unit, wherein the alarm unit is activated when the determination unit determines that the mobile body does not have a predetermined ID tag. 表示手段を含み、
前記表示手段は、前記判断手段の判断結果に応じて、前記領域に前記IDタグ検出手段が検出した移動体が存在する場合には第1の表示形態で前記IDタグを有する移動体を表示し、前記所定の領域に前記IDタグ検出手段が検出した移動体が存在しない場合には第1と異なる第2の表示形態で前記IDタグを有しない移動体を表示する、請求項からのいずれかに記載の入場管理システム。
Including display means,
The display means displays the mobile body having the ID tag in the first display form when the mobile body detected by the ID tag detection means exists in the area according to the determination result of the determination means. , when the mobile body the ID tag detection means to the predetermined area is detected there is no display of the mobile without the ID tag in the first and different second display mode, from the claims 4 to 7 The admission management system described in any one.
前記小領域は、前記ゲートへの進行方向において複数の領域に区分されており、
前記トリガ信号発信手段は前記ゲートへの進行方向において設けられた複数の領域ごとに設けられる、請求項からのいずれかに記載の入場管理システム。
The small region is divided into a plurality of regions in the traveling direction to the gate,
The admission management system according to any one of claims 4 to 8 , wherein the trigger signal transmission means is provided for each of a plurality of areas provided in a traveling direction toward the gate.
JP2008102130A 2008-04-10 2008-04-10 Mobile object detection system and admission management system Expired - Fee Related JP5223126B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008102130A JP5223126B2 (en) 2008-04-10 2008-04-10 Mobile object detection system and admission management system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008102130A JP5223126B2 (en) 2008-04-10 2008-04-10 Mobile object detection system and admission management system

Publications (2)

Publication Number Publication Date
JP2009252129A JP2009252129A (en) 2009-10-29
JP5223126B2 true JP5223126B2 (en) 2013-06-26

Family

ID=41312740

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008102130A Expired - Fee Related JP5223126B2 (en) 2008-04-10 2008-04-10 Mobile object detection system and admission management system

Country Status (1)

Country Link
JP (1) JP5223126B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012133540A (en) * 2010-12-21 2012-07-12 Mitsubishi Electric Corp Security control device
US20120307051A1 (en) * 2011-06-01 2012-12-06 Sensormatic Electronics, LLC Video enabled electronic article surveillance detection system and method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006236128A (en) * 2005-02-25 2006-09-07 Matrix:Kk Action detection system
JP4728662B2 (en) * 2005-02-28 2011-07-20 Necエンジニアリング株式会社 Entrance / exit management system
JP4740699B2 (en) * 2005-09-07 2011-08-03 株式会社竹中工務店 Suspicious person admission prevention system and suspicious person admission prevention program

Also Published As

Publication number Publication date
JP2009252129A (en) 2009-10-29

Similar Documents

Publication Publication Date Title
JP4559819B2 (en) Suspicious person detection system and suspicious person detection program
JP2006311111A (en) Position sensing system and method for sensing position
CN101496074A (en) Device and method for detecting suspicious activity, program, and recording medium
JP2006259857A (en) Intruder detection system
JP2006236183A (en) Entrance/leaving control system
JP2007107194A (en) Room entrance/leaving management system
JP2009015412A (en) Entrance monitoring system
KR20170014913A (en) Car parking incoming and outgoing control system
JP2002334382A (en) System for managing entering/leaving persons
JP5223126B2 (en) Mobile object detection system and admission management system
JP2018182705A (en) Identification system, identification method and program
JP5728857B2 (en) Door opening / closing system, passage permission notification device, monitoring system, and alert device
JP2017054355A (en) Ticket examination monitoring system
JP4982254B2 (en) Flow line management system and flow line monitoring device
JP6563283B2 (en) Monitoring system
US10636264B2 (en) Office building security system using fiber sensing
JP5881361B2 (en) Security system
JP2004030022A (en) Invasion detection system
JP7030512B2 (en) Authentication system and authentication device
JP5331320B2 (en) Passage control system
JP2014063250A (en) Access management system and access management device
JP5763967B2 (en) Ticket gate system
JP7025609B2 (en) Monitoring system and control device used for monitoring system
JP2006107362A (en) Human detection sensor, radio device, monitoring device, monitoring system, monitoring method, computer program, and storage medium for it
JP4410591B2 (en) Visitor counting system and security system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110405

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120724

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130219

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160322

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees