KR20100004600A - Geographic information system based intelligent object monitoring system - Google Patents

Geographic information system based intelligent object monitoring system Download PDF

Info

Publication number
KR20100004600A
KR20100004600A KR1020080064856A KR20080064856A KR20100004600A KR 20100004600 A KR20100004600 A KR 20100004600A KR 1020080064856 A KR1020080064856 A KR 1020080064856A KR 20080064856 A KR20080064856 A KR 20080064856A KR 20100004600 A KR20100004600 A KR 20100004600A
Authority
KR
South Korea
Prior art keywords
data
gis
monitoring system
antenna
unauthorized
Prior art date
Application number
KR1020080064856A
Other languages
Korean (ko)
Other versions
KR101055335B1 (en
Inventor
장성진
박정천
Original Assignee
주식회사 케이엘넷
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이엘넷 filed Critical 주식회사 케이엘넷
Priority to KR1020080064856A priority Critical patent/KR101055335B1/en
Publication of KR20100004600A publication Critical patent/KR20100004600A/en
Application granted granted Critical
Publication of KR101055335B1 publication Critical patent/KR101055335B1/en

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/02Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13Receivers
    • G01S19/14Receivers specially adapted for specific applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/067Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components
    • G06K19/07Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips
    • G06K19/0723Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips the record carrier comprising an arrangement for non-contact communication, e.g. wireless communication circuits on transponder cards, non-contact smart cards or RFIDs

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Theoretical Computer Science (AREA)
  • Burglar Alarm Systems (AREA)
  • Alarm Systems (AREA)

Abstract

PURPOSE: A geographic information system based an intelligent object monitoring system is provided to monitor a specific area efficiently by generating an alarm when there is an intruder. CONSTITUTION: A geographic information system based an intelligent object monitoring system includes a sensor(100), a plurality of photographing devices(200), and a plurality of control clients(300) and server(400). The sensor includes an RF tag module having tag data, a first antenna transmitting the tag data, a GPS antenna receiving a first position. A photographing device comprises a second RF antenna and a reader module. The second RF antenna receives the tag data and first position data. The reader module transmits the received tag data and the position data. The photographing device extracts object data from image data. A control client analyzes an authorized and unauthorized object from the object data.

Description

GIS 기반의 지능형 객체감시 시스템 {Geographic Information System based intelligent object monitoring System}GIS-based intelligent object monitoring system {Geographic Information System based intelligent object monitoring System}

본 발명은 GIS(Geographic Information System) 기반의 지능형 객체감시 시스템에 관한 것으로서, 더욱 상세하게는 촬영기기에 의한 영상데이터로부터 산출된 객체데이터, GPS(Global Positioning System)에 의한 위치데이터, RF태그에 의한 고유의 태그데이터를 수신한 대표 제어 클라이언트가 수신된 객체데이터, 위치데이터, 태그데이터를 이용하여 상기 대표 제어 클라이언트에 구축된 GIS 기반의 지도상에서 진입이 허가된 인가자 객체와 진입이 허가되지 않은 비인가자 객체를 감시하기 위한 GIS 기반의 지능형 객체감시 시스템에 관한 것이다.The present invention relates to an intelligent object monitoring system based on a geographic information system (GIS), and more particularly, object data calculated from image data by a photographing device, position data by a GPS (Global Positioning System), and RF tag. Representative control client receiving the unique tag data uses the received object data, location data, and tag data on the GIS-based map constructed on the representative control client, and unauthorized access is not allowed. The present invention relates to a GIS-based intelligent object monitoring system for monitoring an object.

종래의 기술로서, 감시 시스템은 도 1에 도시된 바와 같이 촬영기기(10)와 디스플레이기기(20)만으로 구성되어 특별지역에 진입한 진입자를 감시하는 기술이 있었다.As a conventional technology, the monitoring system is composed of only the photographing device 10 and the display device 20 as shown in FIG.

즉, 상기 촬영기기(10)는 감시하고자 하는 중요지점에 설치하여 촬영되는 영 상데이터를 디스플레이기기(20)로 전송하고 상기 영상데이터를 수신한 디스플레이기기(20)가 수신된 영상데이터를 출력하게 되면 관리자가 육안으로 감시하는 것이다.That is, the photographing apparatus 10 is installed at an important point to be monitored and transmits the photographed image data to the display apparatus 20 so that the display apparatus 20 receiving the image data outputs the received image data. When the manager is visually monitored.

이러한 종래의 기술은 관리자가 직접 육안으로 감시하기 때문에 항상 디스플레이기기(20)에 상주해야함으로 여러명의 관리자가 필요하며 이에 따른 경비가 많이 발생하는 문제점이 있고, 감시해야 하는 중요한 시점에 관리자의 실수에 감시하지 못하는 문제점이 있었다.Since such a conventional technology is directly monitored by the administrator, it is necessary to always reside in the display device 20 so that a number of administrators are required and a lot of expenses are generated accordingly. There was a problem that could not be monitored.

따라서, 상기 문제점을 해결하고자, 도 1에 도시된 바와 같이 상기한 촬영기기(10)와 디스플레이기기(20)에 리코더(30)를 더 구비한 종래의 기술이 있었다.Therefore, in order to solve the above problem, as shown in FIG. 1, there is a conventional technology in which the recorder 30 is further provided in the photographing apparatus 10 and the display apparatus 20.

즉, 디스플레이기기(20)에서 촬영되는 영상데이터를 리코더(30)에 저장함으로써, 중요한 시점을 감시하지 못하더라도 상기 리코더(30)에 저장된 영상데이터를 재생하여 특별지역에 진입한 객체를 감시하였다.That is, by storing the image data captured by the display device 20 in the recorder 30, even if the important point of time is not monitored, the image data stored in the recorder 30 is reproduced to monitor an object entering a special area.

그러나, 상기한 종래의 기술은 특별지역에서의 진입이 허가된 출입자인지 진입이 허가되지 않은 출입자인지 선별하기 어려운 문제점이 있었다.However, the above-described conventional technology has a problem in that it is difficult to select whether a person who is permitted to enter a special area or an person who is not allowed to enter.

또한, 상기 진입이 허가되지 않은 출입자에 대해서 출입자의 위치파악이 어려운 문제점이 있었다.In addition, there is a problem that it is difficult to determine the location of the person with respect to the person who is not allowed to enter.

상기 본 발명의 문제점을 해소하기 위하여 안출된 것으로서, 본 발명의 목적 은 특별지역에 진입한 객체들 중에서 허가된 진입자 객체는 GIS 기반의 지도상에 표시하고 허가되지 않은 비진입자 객체는 GIS 기반의 지도상에 표시함은 물론 경보발생과 상기 특별지역을 관리하는 보안요원의 이동통신단말기에게 상기 허가되지 않은 진입자에 대한 메시지를 전송하는 GIS 기반의 지능형 객체감시 시스템을 제공하는 데 그 목적이 있다.In order to solve the problems of the present invention, an object of the present invention is to display the permitted entrant objects on the GIS-based map and the non-entrant non-entrant objects to the GIS-based map. The purpose of the present invention is to provide a GIS-based intelligent object monitoring system that transmits a message for the unauthorized entry to the mobile communication terminal of the security personnel managing the alarm and the special area.

상기의 과제를 해결하기 위하여 본 발명의 일실시예에 따르면, 본 발명 GIS 기반의 지능형 객체감시 시스템은 고유의 태그데이터를 갖는 RF 태그모듈, 상기 태그데이터를 전송하는 제 1 RF 안테나, 제 1 위치데이터를 수신하는 GPS 안테나 및 GPS 모듈이 일체화된 인식기와; 상기 태그데이터와 제 1 위치데이터를 수신하는 제 2 RF 안테나와 수신된 태그데이터, 위치데이터를 전송하는 리더 모듈을 구비하고 객체없이 최초 촬영된 영상데이터를 배경데이터로 모델링하며 상기 모델링된 배경데이터와 객체가 포함된 영상데이터의 차에 의해서 객체 데이터를 추출하는 다수의 촬영기기; 및 상기 다수의 촬영기기와 연결되고 상기 촬영기기의 리더모듈을 통하여 태그데이터, 제 1 위치데이터, 객체데이터를 수신하는 다수의 제어 클라이언트로 이루어지고, 상기 다수의 제어 클라이언트 중에서 임의의 한 제어 클라이언트인 대표 제어 클라이언트가 상기 다수의 제어 클라이언트로부터 제공받은 상기 객체데이터로부터 중첩 윈도우 방식으로 제 2 위치데이터를 추출하고 상기 제 1 위치데이터와 상기 제 2 위치데이터를 비교하여 일치하면 허가된 인가자 객체로 판단하고 일치하지 않으면 허가되지 않은 비인가자 객체로 판단하여 상기 인가자 객체와 비인가자 객체를 구분하여 GIS 기반의 지도상에 구분하여 표시하는 해결 수단으로 한다.In order to solve the above problems, according to an embodiment of the present invention, the GIS-based intelligent object monitoring system has an RF tag module having a unique tag data, a first RF antenna for transmitting the tag data, a first position A recognizer integrated with a GPS antenna and a GPS module for receiving data; And a second RF antenna for receiving the tag data and the first position data, a received tag data, and a reader module for transmitting the position data, and modeling image data photographed without an object as background data, and modeling the background data. A plurality of photographing apparatuses extracting object data by a difference of image data including an object; And a plurality of control clients connected to the plurality of photographing apparatuses and receiving tag data, first location data, and object data through a reader module of the photographing apparatus, wherein the control client is any one of the plurality of control clients. If the representative control client extracts the second position data from the object data provided from the plurality of control clients in a superimposed window manner, compares the first position data with the second position data, and determines that the authorized authority object is authorized. If it does not match, it is determined as an unauthorized unauthorized object, and the authorized object and the unauthorized object are classified and displayed on a GIS-based map.

이상 설명한 바와 같이, 본 발명은 항만, 공항, 군부대의 탄약고 등과 같은 특정 시설물이 분포된 특별지역에 진입한 객체에 대하여 상기 객체가 허가된 인가자 객체인지 허가되지 않은 비인가자 객체인지를 GIS 기반의 지도상에 표시하고 비인가된 객체가 표시되는 경우에 경보를 발생함으로써, 특정 지역에 대한 효율적인 감시를 수행하는 효과가 있다.As described above, the present invention provides a GIS-based method for determining whether the object is an authorized or unlicensed object for an object entering a special area where a specific facility such as a port, an airport, a military ammunition, etc. is distributed. By displaying an alarm when an unauthorized object is displayed on the map, an effective monitoring of a specific area is performed.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 2는 본 발명에 따른 GIS 기반의 지능형 객체감시 시스템 구성도로서, 상기 시스템은 태그데이터를 갖는 RF 태그모듈(110), 태그데이터를 전송하는 제 1 RF 안테나(111), 제 1 위치데이터를 수신하는 GPS 안테나(121) 및 GPS 모듈(120)이 일체화된 인식기(100)와 상기 태그데이터와 제 1 위치데이터를 수신하는 제 2 RF 안테나와 수신된 태그데이터, 위치데이터를 전송하는 리더 모듈(210)이 구비되고 촬영되는 영상데이터로부터 인가자 비인가자인 객체데이터를 추출하는 다수의 촬영기 기(200)와 상기 객체데이터로부터 인가자 객체와 비인가자 객체를 분석하는 다수의 제어 클라이언트(300)로 이루어진다.2 is a configuration diagram of a GIS-based intelligent object monitoring system according to the present invention, wherein the system includes an RF tag module 110 having tag data, a first RF antenna 111 transmitting tag data, and first location data. A reader module for transmitting a GPS antenna 121 and a GPS module 120 to which the receiver is integrated, a second RF antenna for receiving the tag data and the first position data, received tag data, and position data. 210 is provided and consists of a plurality of cameras 200 for extracting object data that is an unauthorized person from the image data to be photographed and a plurality of control client 300 for analyzing the authorized object and the unauthorized object from the object data. .

더욱이, 상기 인식기(100), 다수의 촬영기기(200), 다수의 제어 클라이언트(300)에 상기 다수의 제어 클라이언트(300)에 속하는 임의의 하나인 제어 클라이언트가 상기 대표 제어 클라이언트 역할을 수행하지 못하는 경우에는 상기 대표 제어 클라이언트의 역할을 수행하는 서버(400)를 더 포함하는 것이 바람직하다.Furthermore, a control client which belongs to the plurality of control clients 300 in the recognizer 100, the plurality of photographing apparatuses 200, and the plurality of control clients 300 may not perform the representative control client role. In this case, it is preferable to further include a server 400 to perform the role of the representative control client.

보다 상세하게, 상기 인식기(100)는 도 3에 도시된 바와 같이 다수의 촬영기기(200)가 설치된 A와 같은 지역에 진입할 경우에 인식기를 발급하는 발급소에서 진입자의 개인정보를 태그데이터에 기록한다. 도 4에 도시된 바와 같이 RF 태그모듈(110)과 GPS 모듈(120)이 일체화되게 구성되고 상기 RF 태그 모듈(110)과 결속된 제 1 RF 안테나(111)와, 상기 GPS 모듈(120)과 결속된 GPS 안테나(121)가 구성된다.In more detail, as shown in FIG. 3, when the recognizer 100 enters an area such as A in which a plurality of photographing apparatuses 200 are installed, the recognizer 100 issues personal information of the entrant to the tag data. Record it. As shown in FIG. 4, the RF tag module 110 and the GPS module 120 are integrally formed, and are coupled to the RF tag module 110, the first RF antenna 111, and the GPS module 120. The bound GPS antenna 121 is configured.

상기 인식기(100)를 소지한 진입자 또는 상기 인식기(100)를 소지하지 않은 진입자가 특별지역에 진입하게 되면 우선, 인식기(100)를 소지하지 않은 진입자는 상기 리더 모듈(210)이 구비된 촬영기기(200)에게 아무런 데이터를 전송하지 못하지만, 인식기(100)를 소지한 진입자는 RF 모듈(110)이 갖는 고유의 태그데이터와 GPS 모듈(120)과 GPS 안테나(121)에 의하여 수신된 제 1 위치데이터를 상기 제 1 RF 안테나(111)에 의해서 촬영기기(200)의 리더 모듈(210)에 구비된 제 2 RF 안테나(도시하지 않음.)를 통하여 전송된다.When the entrant carrying the recognizer 100 or the entrant not carrying the recognizer 100 enters a special area, first, the entrant not carrying the recognizer 100 is a photographing apparatus equipped with the reader module 210. Although no data is transmitted to the 200, the entrant having the recognizer 100 has unique tag data owned by the RF module 110 and a first position received by the GPS module 120 and the GPS antenna 121. Data is transmitted by the first RF antenna 111 through a second RF antenna (not shown) provided in the reader module 210 of the photographing apparatus 200.

특히, 인식기(100)는 상기 RF 모듈(110), 제 1 RF 안테나(111), GPS 모 듈(120) 및 GPS 안테나(121)를 소형의 휴대 단말기로 제작될 뿐 만 아니라 신용카드, 전화카드와 같은 카드로 제작된다.In particular, the recognizer 100 is not only manufactured by the RF module 110, the first RF antenna 111, the GPS module 120 and the GPS antenna 121 as a small portable terminal, but also a credit card and a telephone card. Is made of the same card.

이와 같이 촬영기기(200)에 전송된 제 1 위치데이터와 태그데이터에 의해서 특별지역에 진입한 진입자를 감시하며 상기 진입자 감시에 대해서는 하기에서 상세하게 설명한다.In this way, the entrant entering the special area is monitored by the first location data and the tag data transmitted to the photographing apparatus 200, and the entrant monitoring will be described in detail below.

상기 리더 모듈이 구비된 다수의 촬영기기(200)는 특별지역 즉, 항만, 공항, 군사시설물 등 중요 보안시설 등의 특별지역을 감시하도록 설치되는 것으로서, 리더 모듈(210)과 결속된 제 2 RF 안테나가 구비된다.The plurality of photographing apparatuses 200 equipped with the reader module are installed to monitor a special area, that is, a special area such as an important security facility such as a port, an airport, military facilities, etc., and a second RF coupled to the reader module 210. An antenna is provided.

따라서, 상기 리더 모듈(210)의 제 2 RF 안테나는 상기 제 1 RF 안테나(111)로부터 전송된 태그데이터와 제 1 위치데이터를 수신하고, 상기 리더 모듈(220)은 수신된 태그데이터와 제 1 위치데이터를 제어 클라이언트(300)에 전송한다.Accordingly, the second RF antenna of the reader module 210 receives tag data and first location data transmitted from the first RF antenna 111, and the reader module 220 receives the received tag data and the first location data. The location data is transmitted to the control client 300.

한편, 다수의 촬영기기(200) 도 3에 도시된 A와 같이 특별지역에 진입한 인식기(100)를 소지한 진입자와 인식기(100)를 소지하지 않은 진입자를 촬영하여 인식기(100)를 소지한 진입자와 인식기(100)를 소지하지 않은 진입자를 감시하기 위한 실시간 촬영 하는 바, 도 5에 도시된 바와 같이 객체없이 최초 촬영된 영상데이터를 배경데이터(도 5에 도시된 a)로 모델링하고 상기 모델링된 배경데이터와, 촬영되는 객체가 포함된 영상데이터(도 5에 도시된 b) 사이의 차이를 통하여 이동하는 객체데이터(도 5에 도시된 c)를 검출한다.Meanwhile, as shown in FIG. 3, a plurality of photographing apparatuses 200 possess the recognizer 100 by photographing an entrant having a recognizer 100 entering a special area and an entrant not having the recognizer 100. In order to monitor the entrant and the entrant without the recognizer 100, real-time shooting is performed. As shown in FIG. 5, the image data initially photographed without an object is modeled as background data (a shown in FIG. 5), and the modeling is performed. The object data (c shown in FIG. 5) is moved through the difference between the background data and the image data (b shown in FIG. 5) including the object to be photographed.

또한, 상기 객체데이터는 배경데이터와 영상데이터의 차이로 발생되는 과정에서 잡음(퍼짐, 찌그러짐 등)이 발생됨으로 상기 잡음을 제거하는 것이 바람직하 다. 더욱이 상기 객체데이터는 적어도 하나 이상이 검출되고 상기 검출된 적어도 하나 이상의 객체 데이터는 인식기(100)를 소지한 인가자 객체(즉, 진입이 허가된 인가자 객체)인가, 인식기(100)를 소지하지 않은 비인가자 객체(즉, 진입이 허가되지 않은 비인가자 객체)인가를 감시하기 위해서 제어 클라이언트(300)로 전송된다.In addition, the object data is preferable to remove the noise because noise (spreading, crushing, etc.) is generated in the process generated by the difference between the background data and the image data. Furthermore, the object data is at least one detected, and the detected at least one object data is an authorized object carrying the recognizer 100 (ie, authorized authorized object) or does not carry the recognized recognizer 100. Is sent to the control client 300 to monitor whether unauthorized unauthorized objects (i.e. unauthorized unauthorized objects are not allowed).

상기한 데이터들이 인식기(100)와 다수의 촬영기기(200) 사이에 데이터들을 전송하는 제 1 RF 안테나와 제 2 RF 안테나는 헤리컬 안테나가 바람직하다.The helical antenna is preferably used as the first RF antenna and the second RF antenna for transmitting the data between the recognizer 100 and the plurality of photographing apparatuses 200.

상기 다수의 제어 클라이언트(300) 각각은 리더 모듈이 구비된 촬영기기(200)와 데이터 통신을 수행함은 물론이고 상기 리더모듈(210)이 구비된 촬영기기(200)가 다수개 설계되어 특별지역을 전체를 감시하는 경우에는 다수의 제어 클라이언트(300)는 상호간에 네트워크가 구축되어 하나의 망이 구축된다.Each of the plurality of control clients 300 performs data communication with the photographing device 200 equipped with a reader module, and a plurality of photographing devices 200 equipped with the reader module 210 are designed to designate a special area. In the case of monitoring the whole, a plurality of control clients 300 are networked with each other to establish a network.

이때, 다수의 제어 클라이언트(300)는 하나 이상의 촬영기기와 연결되는 것도 바람직하다.In this case, the plurality of control clients 300 may be connected to one or more imaging devices.

이와 같이 형성된 네트워크 중에서 임의의 한 제어 클라이언트를 대표로 선택된 대표 제어 클라이언트(310)가 다수의 촬영기기(200)로부터 수신된 태그데이터와 제 1 위치데이터 및 객체데이터를 수신하여 특별지역에 진입한 진입자 객체를 판단한다.The entrant entering the special area by receiving the tag data, the first location data and the object data received from the plurality of photographing apparatuses 200, the representative control client 310 selected from any one control client of the network formed in this way Determine the object.

또한, 제어 클라이언트(300) 각각은 적어도 하나 이상의 촬영기기(200)를 구비하는 것이 바람직한다.In addition, each of the control client 300 is preferably provided with at least one or more imaging device (200).

이와 같이 상기한 대표 제어 클라이언트(310)에 대해서 보다 상세하게 그 구성요소와 함께 설명한다.Thus, the above-described representative control client 310 will be described with the components in more detail.

상기 대표 제어 클라이언트(310)는 도 6에 도시된 바와 같이 상기 제 1 위치데이터, 태그데이터 및 객체데이터를 수신하는 데이터 수신부(311)와 상기 객체데이터로부터 객체의 위치인 제 2 위치데이터를 산출하고 상기 제 1 위치데이터와 제 2 위치데이터가 일치하는 경우에 진입이 허가된 인가자 객체로 판단하고 제 1 위치데이터와 제 2 위치데이터가 일치하지 않는 경우에는 진입이 허가되지 않은 비인가자 객체로 판단하는 객체 위치 판단부(312)와 상기 비인가자 객체와 인가자 객체를 GIS 기반의 지도상에 표시하는 GIS 기반의 지도 어플리케이션부(313)와 상기 비인가자 객체가 상기 GIS 기반의 지도 어플리케이션부(313)에 표시되는 경우에는 보안요원이 소지한 이동통신단말기에게 비인가자 객체와 연관된 메시지를 전송하는 메시지 전송부(314) 및 상기 비인가자 객체가 상기 GIS 기반의 지도 어플리케이션부(313)에 표시되는 경우에 각종 경보를 발생시키는 상기 경보 발생부(315)로 이루어진다.As shown in FIG. 6, the representative control client 310 calculates second position data, which is a position of an object, from the data receiver 311 which receives the first position data, tag data and object data, and the object data. If the first position data and the second position data coincide, it is determined that the authorized object is permitted to enter. If the first position data and the second position data do not coincide, the non-authorized object is not allowed. The object location determiner 312, the GIS-based map application unit 313 for displaying the unauthorized person and the authorized object on a GIS-based map, and the unauthorized application object are the GIS-based map application unit 313. ), The message transmission unit 314 for transmitting a message associated with the unauthorized user object to the mobile communication terminal possessed by the security officer and the non- Let achieved if the objects displayed in the map application 313 based on the GIS to the alarm generating section 315 that generates various alarm.

보다 상세하게, 상기 데이터 수신부(311)는 리더 모듈(210)이 구비된 촬영기기(200)로부터 촬영된 영상데이터로부터 추출된 객체데이터를 수신하고, 인식기(100)에 의해서 상기 리더 모듈(210)이 구비된 촬영기기(200)에 전송된 제 1 위치데이터와 태그데이터를 수신한다.In more detail, the data receiver 311 receives object data extracted from image data photographed from the photographing apparatus 200 equipped with the reader module 210, and recognizes the reader module 210 by the reader 100. Receives the first position data and the tag data transmitted to the photographing device 200 provided.

상기 객체 위치 판단부(312)는 상기 데이터 수신부(311)에 수신된 데이터 중에서 객체데이터를 전송받으면 상기 객체데이터의 위치를 인식하기 위한 공지된 기술을 이용하여 객체의 위치인 제 2 위치데이터를 연속적이면서 실시간으로 산출하고 상기 산출된 제 2 위치데이터와 상기 데이터 수신부(311)에 수신된 제 1 위치데 이터를 비교한다.The object position determiner 312 continuously receives the second position data, which is the position of the object, by using a known technique for recognizing the position of the object data when the object data is received from the data received by the data receiver 311. And it calculates in real time and compares the calculated second position data and the first position data received by the data receiving unit 311.

이때, 상기 제 1 위치데이터와 제 2 위치데이터가 일치하면 특별지역에 진입한 진입자가 인식기(100)를 소지하고 있다는 것임으로 허가된 인가자 객체라 판단함과 동시에 상기 위치데이터와 함께 전송된 태그데이터로부터 특별지역에 진입한 진입자 고유의 정보를 추출하며 추출된 고유의 정보는 GIS 기반의 지도 어플리케이션부(314)에 전송되어 표시된다. 아울러 상기 제 1 위치데이터와 제 2 위치데이터가 일치하지 않으면 특별지역에 진입한 진입자가 인식기(100)를 소지하고 있지 않은 것임으로 허가되지 않은 비인가자 객체로 판단한다.In this case, when the first location data and the second location data coincide with each other, it is determined that the entrant entering the special area has the recognizer 100 and the tag transmitted together with the location data at the same time. Extracting the unique information of the entrant entering the special area from the data is extracted and transmitted to the GIS-based map application unit 314 is displayed. In addition, if the first location data and the second location data do not match, it is determined that the entrant entering the special area does not have the recognizer 100 and is not authorized.

상기 비인가자 객체로 판단된 경우에는 경보 발생부(313)에게 경보가 발생하도록 하는 경보발생데이터를 전송함과 동시에 메시지 전송부(314)에게 특별지역에서 이상현상을 관찰하는 보안요원이 소지한 이동통신단말기로 비인가자가 출입했다는 메시지를 전송하기 위한 메시지데이터를 전송한다.If it is determined that the unauthorized person object, the alarm is sent to the alarm generating unit 313, the alarm generating data for generating an alarm and the message transfer unit 314 carried by the security personnel to observe the abnormal phenomenon in a special area Sends the message data for transmitting a message that the unauthorized person entered and exited the communication terminal.

이에 따라, 메시지를 수신한 이동통신단말기 소지자인 보안요원이 즉각 비인가자에 대해서 즉시 대처할 수 있는 것이다.Accordingly, a security officer who is a mobile communication terminal holder who has received a message can immediately deal with an unauthorized person.

더욱이, 상기 보안요원이 비인가자 객체를 확인하기 전까지 상기 촬영기기(200)는 지속적으로 비인가자 객체를 촬영하고 촬영된 영상데이터로부터 비인가자인 객체데이터의 제 1 위치데이터를 산출하여 GIS 기반의 지도상에 지속적으로 표시한다.Furthermore, until the security officer identifies the unauthorized person object, the photographing device 200 continuously photographs the unauthorized person object and calculates the first location data of the unauthorized object data from the photographed image data to display the GIS based map. To be displayed continuously.

상기 GIS 기반의 지도 어플리케이션부(314)는 다수의 촬영기기(100)가 설치된 지역의 지도와 상기 지도상에 인가자 객체와 비인가자 객체가 표시된다.The GIS-based map application unit 314 displays a map of an area in which a plurality of photographing apparatuses 100 are installed, and an authorizer object and an unauthorized person object on the map.

즉, 로그인과정을 수행하여 인증과정이 허락되면 도 7에 도시된 바와 같이 촬영기기 선택부(314-1)와 메인 화면부(314-2) 및 경보발생 객체표시부(314-3)로 이루어진 모니터상에 화면이 표시된다.That is, when the authentication process is allowed by performing the login process, as shown in FIG. 7, the monitor includes a photographing device selection unit 314-1, a main screen unit 314-2, and an alarm generating object display unit 314-3. The screen is displayed on the screen.

더욱 상세하게, 상기 촬영기기 선택부(314-1)는 특별지역에 설치된 제어 클라이언트(300)가 표시되고 상기 제어 클라이언트(300)와 연결된 각각의 촬영기기(200)가 표시된다.More specifically, the photographing device selection unit 314-1 displays a control client 300 installed in a special area and displays each photographing device 200 connected to the control client 300.

이때, 상기 제어 클라이언트(300)와 촬영기기(200)는 특별지역에 설치된 개수만큼 표시된다.In this case, the control client 300 and the photographing apparatus 200 are displayed as many as installed in the special area.

상기 메인 화면부(314-2)는 상기 제어 클라이언트(300)와 연결된 다수의 촬영기기 중에서 어느 한 촬영기기(200)를 선택하면 상기 선택된 촬영기기가 촬영하고 있는 지역의 지도가 표시되고 진입이 허가된 인가자 객체와 진입이 허가되지 않은 비인가자 객체가 표시된다.When the main screen unit 314-2 selects any one photographing apparatus 200 from among a plurality of photographing apparatuses connected to the control client 300, a map of an area photographed by the selected photographing apparatus is displayed and entry is allowed. Approved Authenticator objects and unauthorized access objects are not allowed.

또한, 메인 화면부(314-2)는 상기 객체 위치 판단부(312)에 의해서 추출된 인가자 객체에 대한 고유의 정보를 표시한다.In addition, the main screen unit 314-2 displays unique information about the approver object extracted by the object position determiner 312.

상기 경보발생 객체표시부(314-3)는 상기 메인 화면부(314-2)에 표시되는 비인가자 객체에 대하여 경보를 발생하고 경보가 발생된 시각, 비인가자의 위치좌표, 비인가자를 촬영한 촬영기기가 갖는 고유번호가 표시된다.The alarm generating object display unit 314-3 generates an alarm for an unauthorized person object displayed on the main screen unit 314-2, and the time when the alarm is generated, the position coordinates of the unauthorized person, and the photographing device photographing the unauthorized person is displayed. Have a unique number.

아울러, 상기 GIS 기반의 지도 어플리케이션부(314)는 촬영기기(200)의 추가 및 삭제가 용이하게 수행된다. In addition, the GIS-based map application unit 314 is easily performed to add and delete the photographing device 200.

상기 메시지 전송부(315)는 비인가자 객체가 상기 GIS 기반의 지도 어플리케 이션부(314)에 의해서 검출되면 상기 비인가자 객체가 검출된 지역을 관리하는 보안요원의 이동통신단말기로 검출된 비인가자 객체와 연관된 메시지를 전송한다.The message transmitter 315 detects an unauthorized person detected by a mobile communication terminal of a security agent managing an area where the unauthorized object is detected when the unauthorized object is detected by the GIS-based map application unit 314. Send a message associated with the object.

상기 경보 발생부(316)는 상기 메시지 전송부(315)에서 메시지가 전송됨과 동시에 경보를 발생한다.The alarm generator 316 generates an alarm as soon as a message is transmitted from the message transmitter 315.

상기 서버(400)는 상기 대표 제어 클라이언트(310)의 역할을 수행한다.The server 400 performs the role of the representative control client 310.

즉, 각각의 제어 클라이언트(310)가 너무 많은 촬영기기(200)와 연결된 경우 또는 별도의 작업수행이 많아서 상기 다수의 제어 클라이언트 중에서 어느 하나도 대표 제어 클라이언트(310)로써 역할을 수행하지 못하는 경우에 서버(400)를 더 구비하여 대표 제어 클라이언트(310)의 역할을 수행하는 것이다.That is, when each control client 310 is connected with too many photographing apparatuses 200 or because there are many separate tasks, none of the plurality of control clients can serve as the representative control client 310. It further comprises a 400 to perform the role of the representative control client 310.

이상에서 설명한 바와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다.As described above, those skilled in the art will understand that the present invention can be implemented in other specific forms without changing the technical spirit or essential features.

그러므로 상기한 기술은 단지 한 실시예이고 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다. Therefore, it is to be understood that the above description is only one embodiment, illustrative, and not restrictive. The scope of the present invention is shown by the following claims rather than the detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalents should be construed as being included in the scope of the present invention. do.

도 1은 종래의 감시 시스템 구성도1 is a configuration diagram of a conventional monitoring system

도 2는 본 발명에 따른 GIS 기반의 지능형 객체감시 시스템 구성도2 is a block diagram of a GIS-based intelligent object monitoring system according to the present invention

도 3은 본 발명에 따른 특별지역에 다수개 설치된 촬영기기 예시도3 is a view illustrating a plurality of photographing apparatus installed in a special area according to the present invention;

도 4는 본 발명에 따른 인식기 사시도4 is a perspective view of a recognizer according to the present invention;

도 5는 본 발명에 따른 객체데이터 추출 예시도5 is a diagram illustrating object data extraction according to the present invention.

도 6은 본 발명에 따른 대표 제어 클라이언트 블록도6 is a representative control client block diagram in accordance with the present invention;

도 7은 본 발명에 따른 GIS 기반의 지도 어플리케이션부 예시도7 is an exemplary view illustrating a map application unit based on GIS according to the present invention.

* 도면의 주요부분에 대한 부호설명 ** Explanation of Signs of Major Parts of Drawings *

100 : 인식기 110 : RF 태그모듈100: recognizer 110: RF tag module

111 : 제 1 RF 안테나 120 : GPS 모듈111: first RF antenna 120: GPS module

121 : GPS 안테나 200 : 촬영기기121: GPS antenna 200: recording device

210 : 리더모듈 300 : 제어 클라이언트210: leader module 300: control client

310 : 대표 제어 클라이언트 311 : 데이터수신부310: representative control client 311: data receiver

312 : 객체 위치 판단부 313 : GIS 기반의 지도 어플리케이션부312: object location determination unit 313: GIS-based map application unit

314 : 메시지 전송부 314-1 : 촬영기기 선택부314: Message transmission unit 314-1: Recording device selection unit

314-2 : 메인 화면부 314-3 : 경보발생 객체표시부314-2: Main screen part 314-3: Alarm generating object display part

315 : 경보 발생부315: alarm generator

400 : 서버400: server

Claims (9)

고유의 태그데이터를 갖는 RF 태그모듈, 상기 태그데이터를 전송하는 제 1 RF 안테나, 제 1 위치데이터를 수신하는 GPS 안테나 및 GPS 모듈이 일체화된 인식기와;An RFID tag module having unique tag data, a first RF antenna for transmitting the tag data, a GPS antenna for receiving the first position data, and a GPS module integrated with the GPS module; 상기 태그데이터와 제 1 위치데이터를 수신하는 제 2 RF 안테나와 수신된 태그데이터, 위치데이터를 전송하는 리더 모듈을 구비하고 객체없이 최초 촬영된 영상데이터를 배경데이터로 모델링하며 상기 모델링된 배경데이터와 객체가 포함된 영상데이터의 차에 의해서 객체 데이터를 추출하는 다수의 촬영기기; 및And a second RF antenna for receiving the tag data and the first position data, a received tag data, and a reader module for transmitting the position data, and modeling image data photographed without an object as background data, and modeling the background data. A plurality of photographing apparatuses extracting object data by a difference of image data including an object; And 상기 다수의 촬영기기와 연결되고 상기 촬영기기의 리더모듈을 통하여 태그데이터, 제 1 위치데이터, 객체데이터를 수신하는 다수의 제어 클라이언트로 이루어지고,A plurality of control clients connected to the plurality of photographing apparatuses and receiving tag data, first position data, and object data through a reader module of the photographing apparatus; 상기 다수의 제어 클라이언트 중에서 임의의 한 제어 클라이언트인 대표 제어 클라이언트가 상기 다수의 제어 클라이언트로부터 제공받은 상기 객체데이터로부터 중첩 윈도우 방식으로 제 2 위치데이터를 추출하고 상기 제 1 위치데이터와 상기 제 2 위치데이터를 비교하여 일치하면 허가된 인가자 객체로 판단하고 일치하지 않으면 허가되지 않은 비인가자 객체로 판단하여 상기 인가자 객체와 비인가자 객체를 구분하여 GIS 기반의 지도상에 구분하여 표시하는 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템.A representative control client, which is any one of the plurality of control clients, extracts second position data from the object data provided from the plurality of control clients in an overlapping window manner, and the first position data and the second position data. If it is matched, it is determined as an authorized authorized object, and if it does not match, it is determined as an unauthorized unauthorized object. The authorized object and the unauthorized object are classified and displayed on a GIS-based map. GIS-based intelligent object monitoring system. 청구항 1에 있어서,The method according to claim 1, 상기 다수의 제어 클라이언트에 속하는 임의의 하나인 제어 클라이언트가 상기 대표 제어 클라이언트로 수행하지 못하는 경우에 서버를 더 구비하여 상기 서버가 대표 제어 클라이언트 역할을 수행하는 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템. GIS-based intelligent object monitoring system, characterized in that the server performs a role of the representative control client when the control client which is any one belonging to the plurality of control clients can not perform as the representative control client . 청구항 1 또는 청구항 2에 있어서, 상기 다수의 제어 클라이언트 각각은The method of claim 1 or 2, wherein each of the plurality of control clients 하나 이상의 촬영기기와 연결되는 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템.GIS-based intelligent object monitoring system, characterized in that connected to one or more imaging equipment. 청구항 1 또는 청구항 2에 있어서, 상기 대표 제어 클라이언트는The method of claim 1 or 2, wherein the representative control client 상기 제 1 위치데이터, 태그데이터 및 객체데이터를 수신하는 데이터 수신부와;A data receiver configured to receive the first location data, tag data, and object data; 상기 객체데이터로부터 중첩 윈도우 방식에 의해서 객체의 위치인 제 2 위치데이터를 산출하고 상기 제 1 위치데이터와 제 2 위치데이터가 일치하는 경우에 진입이 허가된 인가자 객체로 판단하고 제 1 위치데이터와 제 2 위치데이터가 일치하지 않는 경우에는 진입이 허가되지 않은 비인가자 객체로 판단하는 객체 위치 판단 부와;The second position data, which is the position of the object, is calculated from the object data by using an overlapping window method, and when the first position data and the second position data coincide, the second position data is determined to be the authorized object, and the first position data An object position determining unit that determines that an unauthorized person is not allowed to enter when the second position data does not match; 상기 비인가자 객체와 인가자 객체를 표시하는 GIS 기반의 지도 어플리케이션부와;A GIS-based map application unit displaying the unlicensed object and the authorized object; 상기 비인가자 객체가 상기 GIS 기반의 지도 어플리케이션부에 표시되는 경우에는 보안요원이 소지한 이동통신단말기에게 비인가자 객체와 연관된 메시지를 전송하는 메시지 전송부; 및A message transmitter for transmitting a message associated with an unauthorized user object to a mobile communication terminal possessed by a security officer when the unauthorized object is displayed on the GIS-based map application unit; And 상기 비인가자 객체가 상기 GIS 기반의 지도 어플리케이션부에 표시되는 경우에 각종 경보를 발생시키는 상기 경보 발생부로 이루어진 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템. GIS-based intelligent object monitoring system characterized in that the alarm generating unit for generating a variety of alarms when the unauthorized object is displayed on the map application unit based on the GIS. 청구항 4에 있어서, 상기 GIS 기반의 지도 어플리케이션부는The method according to claim 4, wherein the GIS-based map application unit 상기 제어 클라이언트와 촬영기기가 표시되는 상기 촬영기기 선택부와;The photographing device selection unit displaying the control client and the photographing device; 상기 촬영기기를 선택하여 표시되는 영역의 지도에 인가자 객체와 비인가자 객체가 표시되는 메인 화면부; 및A main screen unit configured to display an authorizer object and an unauthorized person object on a map of an area displayed by selecting the photographing device; And 상기 표시되는 비인가자 객체에 대하여 경보를 발생하고 발생된 시각, 좌표, 상기 비인가자를 촬영한 촬영기기의 고유번호가 표시되는 경보발생 객체표시부로 이루어진 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템. GIS-based intelligent object monitoring system comprising an alarm generating object display unit for generating an alarm for the displayed unauthorized person object, the generated time, coordinates, and the unique number of the photographing device photographing the unauthorized person. 청구항 5에 있어서, 상기 메인 화면부는The method of claim 5, wherein the main screen unit 상기 인가가 객체에 대한 고유의 정보가 표시되는 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템. Intelligent object monitoring system based on the GIS, characterized in that the authorization is displayed unique information about the object. 청구항 4에 있어서, 상기 객체 위치 판단부는The method of claim 4, wherein the object position determiner 객체데이터의 위치를 인식하기 위하여 실시간 연속적으로 산출된 제 2 위치데이터를 GIS 기반의 지도 어플리케이션부에서 실시간 표시하는 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템.GIS-based intelligent object monitoring system, characterized in that for displaying the location of the object data in real time continuously display the second location data in the GIS-based map application unit. 청구항 1 또는 청구항 2에 있어서, 상기 RF 태그모듈, 제 1 RF 안테나, GPS 안테나 및 GPS 모듈은The method according to claim 1 or 2, wherein the RF tag module, the first RF antenna, GPS antenna and GPS module 초소형의 휴대단말기, 또는 신용카드 및 전화카드와 같은 카드로 설계되는 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템.GIS-based intelligent object monitoring system, characterized in that it is designed as a very small portable terminal, or cards such as credit cards and telephone cards. 청구항 1 또는 청구항 2에 있어서, 제 1 RF 안테나와 제 2 RF 안테나는The method according to claim 1 or 2, wherein the first RF antenna and the second RF antenna 소형의 헤리컬 안테나인 것을 특징으로 하는 GIS 기반의 지능형 객체감시 시스템.Intelligent object monitoring system based on GIS, characterized by a small helical antenna.
KR1020080064856A 2008-07-04 2008-07-04 Intelligent object monitoring system based on GIs KR101055335B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080064856A KR101055335B1 (en) 2008-07-04 2008-07-04 Intelligent object monitoring system based on GIs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080064856A KR101055335B1 (en) 2008-07-04 2008-07-04 Intelligent object monitoring system based on GIs

Publications (2)

Publication Number Publication Date
KR20100004600A true KR20100004600A (en) 2010-01-13
KR101055335B1 KR101055335B1 (en) 2011-08-08

Family

ID=41814163

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080064856A KR101055335B1 (en) 2008-07-04 2008-07-04 Intelligent object monitoring system based on GIs

Country Status (1)

Country Link
KR (1) KR101055335B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101453349B1 (en) 2014-01-10 2014-10-22 전재현 Crime prevention GIS and CCTV Fusion method and the system by using geographic profiler

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4559819B2 (en) 2004-10-29 2010-10-13 セコム株式会社 Suspicious person detection system and suspicious person detection program
JP2006155512A (en) 2004-12-01 2006-06-15 Mitsubishi Electric Corp Information terminal device
KR100815920B1 (en) * 2007-02-13 2008-03-21 주식회사 코웰테크 Security system using location data of gps and image data of ccd camera and invader detection method using the same
KR100923294B1 (en) * 2007-08-31 2009-10-23 이커스텍(주) Real-time position recognition method and system in a ubiquitous environment

Also Published As

Publication number Publication date
KR101055335B1 (en) 2011-08-08

Similar Documents

Publication Publication Date Title
US20180278892A1 (en) Complex hardware-based system for video surveillance tracking
US10824713B2 (en) Spatiotemporal authentication
US8671143B2 (en) Virtual badge, device and method
US20160335484A1 (en) Access point stream and video surveillance stream based object location detection and activity analysis
US9129230B2 (en) Virtual badge, device and method
KR101419794B1 (en) The method for controlling the access of school visitors through the face recognition
CN108875466A (en) Monitoring method, monitoring system and storage medium based on recognition of face
US10896321B2 (en) Monitoring inmate movement with facial recognition
TWI307583B (en) Portable handheld security apparatus
CN111737674B (en) Wisdom garden system based on cloud platform
KR100815920B1 (en) Security system using location data of gps and image data of ccd camera and invader detection method using the same
CN108959884B (en) Human authentication verification device and method
JP2020524928A (en) Method of providing a device with an information element that allows identifying an unauthorized user in a restricted area
CN113538825A (en) Campus wall-turning event alarm method and system
KR101577036B1 (en) Access authentication system and method based ip camera
KR100814510B1 (en) Entrance and exit certifying system and method thereof
KR101775650B1 (en) A facial recognition management system using portable terminal
CN113962577A (en) Multi-system intelligent park platform
JP2020198475A (en) Person monitoring system and person monitoring method
KR102365589B1 (en) Method and apparatus for detecting abuse based on log information in closed-circuit television integrated management system
Muthusenthil et al. CCTV surveillance system, attacks and design goals
CN109379706A (en) Anti-theft method for mobile terminal, device, system and storage medium
KR101055335B1 (en) Intelligent object monitoring system based on GIs
JP5730000B2 (en) Face matching system, face matching device, and face matching method
CN109903416A (en) Pinpoint patrolling management system and method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140618

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150701

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160706

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170628

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180628

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190620

Year of fee payment: 9