KR101070803B1 - Unmanned guard system using ubiquitous sensor networks - Google Patents

Unmanned guard system using ubiquitous sensor networks Download PDF

Info

Publication number
KR101070803B1
KR101070803B1 KR1020100018417A KR20100018417A KR101070803B1 KR 101070803 B1 KR101070803 B1 KR 101070803B1 KR 1020100018417 A KR1020100018417 A KR 1020100018417A KR 20100018417 A KR20100018417 A KR 20100018417A KR 101070803 B1 KR101070803 B1 KR 101070803B1
Authority
KR
South Korea
Prior art keywords
frequency band
sound signal
sensor
unmanned security
whistle
Prior art date
Application number
KR1020100018417A
Other languages
Korean (ko)
Other versions
KR20110099419A (en
Inventor
정동석
임예은
Original Assignee
인하대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인하대학교 산학협력단 filed Critical 인하대학교 산학협력단
Priority to KR1020100018417A priority Critical patent/KR101070803B1/en
Publication of KR20110099419A publication Critical patent/KR20110099419A/en
Application granted granted Critical
Publication of KR101070803B1 publication Critical patent/KR101070803B1/en

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/16Actuation by interference with mechanical vibrations in air or other fluid
    • G08B13/1654Actuation by interference with mechanical vibrations in air or other fluid using passive vibration detection systems
    • G08B13/1672Actuation by interference with mechanical vibrations in air or other fluid using passive vibration detection systems using sonic detecting means, e.g. a microphone operating in the audio frequency range
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Alarm Systems (AREA)

Abstract

본 발명은 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템에 관한 것으로, 해결하고자 하는 기술적 과제는 일정한 주파수 대역을 가지는 호루라기 소리의 일반적인 특성을 이용하여 주변 소음에 강한 위험을 알리는 음향을 인식하고, 유비쿼터스 센서 네트워크 단자를 이용하여 넓은 지역에서도 센싱과 전송이 하나로 통합된 장치를 이용하여 무선으로 위험 정보를 파악하고 전송시킬 수 있는 무인 경비 시스템을 제공하는데 있다.
이를 위해 본 발명에 따른 무인 경비 시스템은, 무인 경비를 원하는 지역에 설치된 다수의 센서 노드 및 중앙 시스템 관리소를 포함하고, 상기 무인 경비 시스템 내에서 음향 신호가 발생하면, 상기 음향 신호가 발생한 영역 주변의 센서 노드들은 기설정된 위험 상황 판단 알고리즘에 따라 상기 음향 신호를 감지하여 상기 음향 신호가 위험 상황과 관련된 음향 신호인지 여부를 판단하며, 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하되, 상기 위험 신호를 전송받은 상기 중앙 시스템 관리소는 상기 위험 신호를 전송한 센서 노드들의 위치를 추적하여 경비인력을 보내는 것을 특징으로 하는 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템을 개시한다.
The present invention relates to an unmanned security system using a ubiquitous sensor network, the technical problem to be solved by using the general characteristics of the whistle sound having a predetermined frequency band to recognize the sound informing the strong danger to the surrounding noise, ubiquitous sensor network terminal It is to provide an unmanned security system that can detect and transmit risk information wirelessly by using a device in which sensing and transmission are integrated even in a large area by using.
To this end, the unmanned security system according to the present invention includes a plurality of sensor nodes and a central system management station installed in a desired area for unmanned security, and when an acoustic signal occurs in the unmanned security system, the area around the area where the acoustic signal is generated The sensor nodes detect the sound signal according to a preset dangerous situation determination algorithm to determine whether the sound signal is a sound signal related to a dangerous situation, and if the sound signal is determined to be a sound signal related to a dangerous situation, the central system management office. In this case, the central system management center transmits a danger signal by sending a guard manpower by tracking the location of the sensor nodes that have transmitted the danger signal. .

Description

유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템{UNMANNED GUARD SYSTEM USING UBIQUITOUS SENSOR NETWORKS} Unmanned security system using ubiquitous sensor network {UNMANNED GUARD SYSTEM USING UBIQUITOUS SENSOR NETWORKS}

본 발명은 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템에 관한 것이다.
The present invention relates to an unmanned security system using a ubiquitous sensor network.

일반적으로 유비쿼터스 센서 네트워크(Ubiquitous Sensor Network, USN)란 특정 지역에 소형의 센서 노드들을 설치하여 주변 정보 또는 특정 목적의 정보를 획득하여 이를 활용하기 위한 서비스 네트워크 환경을 말한다.In general, a ubiquitous sensor network (USN) refers to a service network environment for installing small sensor nodes in a specific area to obtain surrounding information or information for a specific purpose.

즉, 여러 개의 센서 네트워크 필드가 통신망을 통하여 외부 네트워크에 연결되는 구조를 말한다. 여기서, 센서 노드들은 가까운 싱크 노드(Sink Node)로 데이터를 전송하고 이렇게 전달되어가는 데이터들은 관리자에세 최종적으로 전달됨으로써 사용자가 자동화된 방식으로 센서 필드 주변의 정보를 원격으로 수집하여 활용할 수 있다는 장점이 있다.
That is, a structure in which several sensor network fields are connected to an external network through a communication network. Here, the sensor nodes transmit data to the close sink node, and the data transmitted to the sink node is finally delivered to the manager so that the user can collect and utilize the information around the sensor field in an automated manner. There is this.

한편, 기존의 음향 신호를 이용한 무인 경비 시스템에서는 감시구역 내에 격자구조로 설치된 시스템이 주변의 일정 음향 이상의 음향 신호가 일정 시간 이상동안 동일한 주파수 영역을 가질 경우, 이를 감지하여 그 위치를 파악하고 감지된 신호를 수신하여 중계하는 여러 개의 장치들을 통해 중앙 시스템으로 보내주는 장치 등이 고안되었다.On the other hand, in the unmanned security system using the existing acoustic signal, if the system installed in the grid structure in the monitoring area has the same frequency region for a certain time or more, the surrounding area has the same frequency range, and detects the position by detecting it. The device is designed to receive signals and send them to the central system through several relay devices.

하지만, 이러한 방법의 경우 격자 구조로 시스템을 설치하여야만 정확한 위치 파악이 가능하며, 중간에 있는 하나의 시스템만 고장이 나는 경우에도 정확한 위치를 파악할 수 없다는 문제점이 있다.However, in this case, it is possible to determine the exact location only when the system is installed in a grid structure, and even if only one system in the middle fails, the exact location cannot be determined.

또한, 직렬 통신을 이용한 중계 장치 역시 별도로 설치를 해야만 하고, 주변 소음 등에도 반응할 수 있다는 문제점이 있다.
In addition, the relay device using the serial communication must also be installed separately, there is a problem that can react to the ambient noise.

본 발명은 상기한 바와 같은 과제를 해결하기 위해 발명된 것으로, 일정한 주파수 대역을 가지는 호루라기 소리의 일반적인 특성을 이용하여 주변 소음에 강한 위험을 알리는 음향을 인식하고, 유비쿼터스 센서 네트워크 단자를 이용하여 넓은 지역에서도 센싱과 전송이 하나로 통합된 장치를 이용하여 무선으로 위험 정보를 파악하고 전송시킬 수 있는 동시에 사용자의 편의를 위해 태양전지를 삽입하여 전력을 공급할 수 있는 무인 경비 시스템을 제공하는데 그 목적이 있다.
The present invention has been invented to solve the above problems, by using the general characteristics of the whistle sound having a certain frequency band to recognize the sound informing the strong danger to the surrounding noise, using a ubiquitous sensor network terminal In this regard, the purpose of the present invention is to provide an unmanned security system that can detect and transmit risk information wirelessly using a device in which sensing and transmission are integrated at the same time, and can supply power by inserting solar cells for the convenience of the user.

상기한 바와 같은 목적을 달성하기 위해 본 발명은, 공원이나 주차장 등에 설치된 센서 노드에서 호루라기가 가지고 있는 특정 주파수 대역을 인지하고 일정 시간 이상 유지될 경우, 자신의 센서 노드의 위치 정보를 중앙 관리 시스템에 보내주며, 중앙 관리 시스템에서는 전송받은 위치 정보들을 토대로 사건 발생 지점을 파악하여 경비인력을 보낼 수 있는 무인 경비 시스템을 제공한다.In order to achieve the object as described above, the present invention, when the sensor node installed in the park or parking lot recognizes the specific frequency band of the whistle and is maintained for a predetermined time, the location information of its sensor node to the central management system In addition, the central management system provides an unmanned security system that can detect the occurrence of incidents and send security personnel based on the location information received.

보다 자세하게 본 발명은, 무인 경비를 원하는 지역에 설치된 다수의 센서 노드 및 중앙 시스템 관리소를 포함하는 무인 경비 시스템으로서,In more detail, the present invention is an unmanned security system including a plurality of sensor nodes and a central system management station installed in an area for unmanned security,

상기 무인 경비 시스템 내에서 음향 신호가 발생하면, 상기 음향 신호가 발생한 영역 주변의 센서 노드들은 기설정된 위험 상황 판단 알고리즘에 따라 상기 음향 신호를 감지하여 상기 음향 신호가 위험 상황과 관련된 음향 신호인지 여부를 판단하며, 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하되,When an acoustic signal is generated in the unmanned security system, sensor nodes around the region where the acoustic signal is generated detect the acoustic signal according to a preset dangerous situation determination algorithm to determine whether the acoustic signal is an acoustic signal related to a dangerous situation. If the sound signal is determined to be a sound signal associated with a dangerous situation, and transmits a dangerous signal to the central system management office,

상기 위험 신호를 전송받은 상기 중앙 시스템 관리소는 상기 위험 신호를 전송한 센서 노드들의 위치를 추적하여 경비인력을 보내는 것을 특징으로 한다.The central system office receiving the danger signal is characterized by sending the guard personnel by tracking the location of the sensor nodes that transmitted the danger signal.

여기서, 상기 기설정된 위험 상황 판단 알고리즘에 관한 제 1실시예는, 상기 다수의 센서 노드들을 통하여 상기 무인 경비 시스템 내에서 발생한 음향 신호의 주파수 대역을 측정하는 제 1과정과, 상기 제 1과정을 통하여 측정된 주파수 대역에서 주파수가 기설정된 문턱 주파수값을 초과하는 시점부터 0.3초 이후 기설정된 호루라기 주파수 대역이 3초 이상 유지되는 경우 위험 상황으로 판단하는 제 2과정과, 상기 제 2과정을 통하여 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하는 제 3과정을 포함할 수 있다.Here, the first embodiment of the predetermined risk situation determination algorithm, the first process of measuring the frequency band of the sound signal generated in the unmanned security system through the plurality of sensor nodes, and through the first process A second step of judging a dangerous situation when the preset whistle frequency band is maintained for 3 seconds or more after 0.3 seconds from a time when the frequency exceeds a preset threshold value in the measured frequency band; and the sound through the second process If the signal is determined to be a sound signal associated with the dangerous situation may include a third process of transmitting the dangerous signal to the central system management office.

또한, 상기 기설정된 위험 상황 판단 알고리즘에 관한 제 2실시예는, 상기 다수의 센서 노드들을 통하여 상기 무인 경비 시스템 내에서 발생한 음향 신호의 주파수 대역을 측정하는 제 1과정과, 상기 제 1과정을 통하여 측정된 주파수 대역에서 기설정된 호루라기 주파수 대역이 3초 이내에 2번 이상 감지되는 경우 위험 상황으로 판단하는 제 2과정과, 상기 제 2과정을 통하여 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하는 제 3과정을 포함할 수 있다.In addition, a second embodiment of the preset risk situation determination algorithm, the first process of measuring the frequency band of the sound signal generated in the unmanned security system through the plurality of sensor nodes, and through the first process A second step of judging a dangerous situation when a predetermined whistle frequency band is detected more than twice within 3 seconds in the measured frequency band; and when the sound signal is determined to be a sound signal related to a dangerous situation through the second step, And a third step of transmitting a danger signal to the central system management office.

또한, 상기 기설정된 위험 상황 판단 알고리즘에 관한 제 3실시예는, 상기 다수의 센서 노드들을 통하여 상기 무인 경비 시스템 내에서 발생한 음향 신호의 주파수 대역을 측정하는 제 1과정과, 상기 제 1과정을 통하여 측정된 주파수 대역에서 기설정된 호루라기 주파수 대역이 0.5초 이상 감지된 시점부터 3초 이내에 균일한 주파수 대역이 0.5초 이상 유지되는 경우 위험 상황으로 판단하는 제 2과정과, 상기 제 2과정을 통하여 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하는 제 3과정을 포함할 수 있다.In addition, a third embodiment of the preset risk situation determination algorithm, the first process of measuring the frequency band of the sound signal generated in the unmanned security system through the plurality of sensor nodes, and through the first process A second step of judging a dangerous situation when the uniform frequency band is maintained for 0.5 seconds or more within 3 seconds from the time when a preset whistle frequency band is detected in the measured frequency band for 0.5 seconds or more, and the sound through the second process If the signal is determined to be a sound signal associated with the dangerous situation may include a third process of transmitting the dangerous signal to the central system management office.

마지막으로, 상기 기설정된 위험 상황 판단 알고리즘에 관한 제 4실시예는, 상기 다수의 센서 노드들을 통하여 상기 무인 경비 시스템 내에서 발생한 음향 신호의 주파수 대역을 측정하는 제 1과정과, 상기 제 1과정을 통하여 측정된 주파수 대역에서 균일한 주파수 대역이 0.5초 이상 유지된 시점부터 3초 이내에 기설정된 호루라기 주파수 대역이 0.5초 이상 유지되는 경우 위험 상황으로 판단하는 제 2과정과, 상기 제 2과정을 통하여 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하는 제 3과정을 포함할 수 있다.Finally, a fourth embodiment of the preset risk situation determination algorithm includes a first process of measuring a frequency band of an acoustic signal generated in the unmanned security system through the plurality of sensor nodes, and the first process. A second process of determining a dangerous situation when the predetermined whistle frequency band is maintained for 0.5 seconds or more within 3 seconds from the time when the uniform frequency band is maintained for 0.5 seconds or more in the frequency band measured through the second process; If it is determined that the sound signal is a sound signal associated with a dangerous situation, it may include a third process of transmitting the danger signal to the central system management office.

한편, 상기 센서 노드의 내부에는 음향 센서, 조도 센서, 열 센서, 연기 센서, 습도 센서 및 GPS 중 하나 이상이 내장될 수 있다.Meanwhile, one or more of an acoustic sensor, an illuminance sensor, a thermal sensor, a smoke sensor, a humidity sensor, and a GPS may be built in the sensor node.

상기 다수의 센서 노드들은 무인 경비를 원하는 지역에 설치되면 상호간에 자동적으로 네트워크를 구성할 수 있다.When the plurality of sensor nodes are installed in an area where an unmanned expense is desired, the plurality of sensor nodes may automatically configure a network.

상기 센서 노드는 태양 전지를 실장하여 자동 충전이 가능할 수 있다.
The sensor node may be equipped with a solar cell to enable automatic charging.

상기한 바와 같이 본 발명에 따른 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템에 의하면, 무선으로 넓은 지역에 걸쳐 통신망 설정이 가능하고, 주변의 소음에 강하므로 오작동 횟수를 줄일 수 있는 효과가 있다.As described above, according to the unmanned security system using the ubiquitous sensor network according to the present invention, it is possible to wirelessly set up a communication network over a large area and to reduce the number of malfunctions because it is strong against ambient noise.

또한, 하나의 센서 노드가 고장난 경우에도 다른 센서 노드들을 통하여 정확한 위치 추적이 가능하며, 별도의 배선과 기본 장치가 없이도 바로 원하는 위치에 설치가 가능하므로 시스템을 구축하는 시간을 줄일 수 있는 효과가 있다.In addition, even if one sensor node fails, accurate position tracking is possible through other sensor nodes, and it can be installed at a desired position without separate wiring and basic devices, thereby reducing the time required to construct a system. .

또한, 태양전지가 삽입되었기 때문에 별도의 전원 공급선이나 배선 없이도 자체적으로 전력공급이 가능하므로 관리가 매우 편리한 효과가 있다.
In addition, since the solar cell is inserted, power can be supplied by itself without a separate power supply line or wiring, and thus management is very convenient.

도 1은 본 발명에 따른 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템의 개념도이고, 도 2는 전체 알고리즘을 도시한 순서도이다.
도 3은 위험 상황 판단 알고리즘의 제 1실시예를 설명하기 위한 순서도이고,도 4는 이를 설명하기 위한 그래프이다.
도 5는 위험 상황 판단 알고리즘의 제 2실시예를 설명하기 위한 순서도이고, 도 6는 이를 설명하기 위한 그래프이다.
도 7은 위험 상황 판단 알고리즘의 제 3실시예를 설명하기 위한 순서도이고, 도 8은 이를 설명하기 위한 그래프이다.
도 9는 위험 상황 판단 알고리즘의 제 4실시예를 설명하기 위한 순서도이고, 도 10은 이를 설명하기 위한 그래프이다.
1 is a conceptual diagram of an unmanned security system using a ubiquitous sensor network according to the present invention, Figure 2 is a flow chart showing the entire algorithm.
3 is a flowchart illustrating a first embodiment of a risk situation determination algorithm, and FIG. 4 is a graph for explaining the same.
FIG. 5 is a flowchart for describing a second embodiment of a risk situation determination algorithm, and FIG. 6 is a graph for explaining the same.
7 is a flowchart illustrating a third embodiment of a risk situation determination algorithm, and FIG. 8 is a graph for explaining the same.
9 is a flowchart illustrating a fourth embodiment of a risk situation determination algorithm, and FIG. 10 is a graph for explaining the same.

이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세히 설명한다. 우선, 도면들 중 동일한 구성요소 또는 부품들은 가능한 한 동일한 참조부호를 나타내고 있음에 유의해야 한다. 본 발명을 설명함에 있어서 관련된 공지기능 혹은 구성에 대한 구체적인 설명은 본 발명의 요지를 모호하게 하지 않기 위해 생략한다.
Hereinafter, with reference to the accompanying drawings will be described an embodiment of the present invention; First, it should be noted that the same components or parts among the drawings denote the same reference numerals whenever possible. In describing the present invention, detailed descriptions of related well-known functions or configurations are omitted in order not to obscure the gist of the present invention.

도 1은 본 발명에 따른 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템의 개념도이고, 도 2는 전체 알고리즘을 도시한 순서도이다.1 is a conceptual diagram of an unmanned security system using a ubiquitous sensor network according to the present invention, Figure 2 is a flow chart showing the entire algorithm.

본 발명에 따른 무인 경비 시스템은, 무인 경비를 원하는 지역에 설치된 다수의 센서 노드 및 중앙 시스템 관리소를 포함하고, 상기 무인 경비 시스템 내에서 음향 신호가 발생하면, 상기 음향 신호가 발생한 영역 주변의 센서 노드들은 기설정된 위험 상황 판단 알고리즘에 따라 상기 음향 신호를 감지하여 상기 음향 신호가 위험 상황과 관련된 음향 신호인지 여부를 판단하며, 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하되, 상기 위험 신호를 전송받은 상기 중앙 시스템 관리소는 상기 위험 신호를 전송한 센서 노드들의 위치를 추적하여 경비인력을 보내도록 한다.
The unmanned security system according to the present invention includes a plurality of sensor nodes and a central system management station installed in an area where an unmanned security guard is desired, and when an acoustic signal is generated in the unmanned security system, sensor nodes around an area where the acoustic signal is generated. The sound signal is detected according to a preset dangerous situation determination algorithm to determine whether the sound signal is an acoustic signal related to a dangerous situation, and if the sound signal is determined to be an acoustic signal related to a dangerous situation, the dangerous signal is sent to the central system office. Sending a signal, the central system management office receiving the dangerous signal to send the guard personnel by tracking the location of the sensor nodes that transmitted the dangerous signal.

이하에서는, 본 발명에 따른 무인 경비 시스템 내에 설치되는 센서 노드(모트)들에 대해 설명한다.Hereinafter, the sensor nodes (mot) installed in the unmanned security system according to the present invention will be described.

이러한 센서 노드들은 유비쿼터스 컴퓨팅 환경에 맞게 무선 네트워크 기술을 지원하고 있으며 크기 및 가격 면에서 경쟁력을 갖기 위하여 소형 및 저전력으로 설계되는 것이 바람직하다. These sensor nodes support wireless network technology for ubiquitous computing environment, and it is desirable to be designed small and low power in order to be competitive in size and price.

다만, 본 발명에 따른 시스템에서는 도 1에 도시된 바와 같이 이벤트 발생 위치에 따라 최적의 통신망을 자동으로 구축하여 중앙 시스템 관리소에 데이터를 전송할 수 있는 것이면 어떠한 종류의 센서 노드(모트)가 사용되어도 상관없으며 여기서 본 발명의 센서 노드의 종류 등을 한정하는 것은 아니다.However, in the system according to the present invention, any type of sensor node (mot) may be used as long as it can automatically establish an optimal communication network according to the event occurrence position and transmit data to the central system management office. The type of the sensor node of the present invention is not limited thereto.

한편, 다수의 센서 노드들 중 하나의 센서 노드가 고정이 난 경우에서 나머지 센서 노드들은 새로운 통신망을 구축하여 중앙 시스템 관리소에 데이터를 전송할 수 있다.Meanwhile, when one sensor node of the plurality of sensor nodes is fixed, the remaining sensor nodes may establish a new communication network and transmit data to the central system management office.

또한, 상기 센서 노드의 내부에는 여러 가지 주변 정보들을 인식할 수 있도록 소리, 조도, 열, 연기, 습도 센서 및 GPS 등이 삽입될 수 있다.
In addition, a sound, an illuminance, a heat, a smoke, a humidity sensor, and a GPS may be inserted into the sensor node so as to recognize various surrounding information.

다음으로, 본 발명에 따른 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템 내에서 이벤트가 발생한 위치를 어떻게 파악하는지에 대한 개념을 알아본다.Next, the concept of how to determine the location of the event in the unmanned security system using the ubiquitous sensor network according to the present invention.

기존의 무인 경비 시스템에 사용되는 장비들은 소리를 인식하고 위치를 파악하는 장비가 격자 무늬로 되어 있어소 격자무늬가 좌표와 같은 역할을 하는 방법으로 위치를 파악하기 때문에 하나의 격자를 이루고 있는 부분이 고장이 나거나 공원이나 산과 같이 범위가 넓은 부분에서는 사용에 어려움이 있었다.The equipment used in the existing unmanned security system has a lattice pattern that recognizes the sound and locates the location. In the event of a breakdown or in a wide area such as a park or mountain, it was difficult to use.

그러나, 본 발명에서는 이러한 점을 해결하기 위하여 센서 노드(모트)를 공원이나 산 등지에 뿌려놓기만 하면 자동으로 네트워크를 구성하기 때문에 넓은 지역에서도 사용이 가능하며, 본 발명에서 사용되는 센서 노드들은 가격이 저렴하고 크기가 작기 때문에 넓은 지역에 뿌려놓는게 큰 문제가 없다.However, in order to solve this problem, the present invention can be used in a large area because the network is automatically configured by simply spraying the sensor node (mot) on a park or a mountain, and the sensor nodes used in the present invention are priced. Because of its cheapness and small size, it is not a big problem to spread it over large areas.

한편, 도 1에 도시된 바와 같이 본 발명에 따른 무인 경비 시스템 내의 특정 지점에서 이벤트가 발생하면 이벤트 발생 지점 주변인 2번, 3번, 5번 센서 노드가 작동하여 상기 세 부분의 위험 감지 데이터를 중앙 시스템 관리소로 보내주며, 상기 2번, 3번, 5번 센서 노드의 중심점을 이벤트 발생 지역으로 인식하여 상기 중앙 시스템 관리소에서 경비인력을 보내는 등의 조치를 취할 수 있게 된다.Meanwhile, as shown in FIG. 1, when an event occurs at a specific point in the unmanned security system according to the present invention, sensor nodes 2, 3, and 5, which are around an event occurrence point, operate to centralize the risk detection data of the three parts. It sends to the system management center, and the center point of the sensor node 2, 3, 5 is recognized as the event occurrence area to take measures such as sending security personnel from the central system management office.

여기서, 상기 위험 감지 데이터는 도 1의 경우에, 3번 → 5번 → 6번 → 중앙 시스템 관리소 또는 2번 → 4번 → 6번 → 중앙 시스템 관리소 또는 5번 → 6번 → 중앙 시스템 관리소와 같은 경로로 전송될 수 있다.
Here, in the case of Figure 1, the risk detection data, such as 3 → 5 → 6 → Central System Office or 2 → 4 → 6 → Central System Office or 5 → 6 → Central System Office Can be sent by path.

다음으로, 상기 센서 노드가 어떻게 음향을 감지하고 경보를 발생하는지에 관하여 설명한다. 먼저, 음향을 인식하여 경보를 발생하거나 상황을 판단하는 과정에서는 무엇보다도 노이즈와 경보 발생 상황을 구분하여 경보를 발생시키는 것이 중요하다.Next, how the sensor node detects sound and generates an alarm will be described. First, in the process of recognizing sound and generating an alarm or determining a situation, it is important to distinguish between noise and an alarm occurrence situation and to generate an alarm.

기본의 무인 경비 시스템에 사용되는 음향 감지 방법은 일정 음량 이상의 음향 신호를 일정 시간 이상 동일한 주파수를 유지할 경우에만 위험 신호로 감지하였기 때문에 자동차 경적소리 등과 같은 주변의 소음에 반응할 수 있다는 문제점이 있었다.The acoustic detection method used in the basic unmanned security system has a problem in that it can react to ambient noise such as a car horn sound because it detects an acoustic signal of a certain volume or more as a dangerous signal only if it maintains the same frequency for a predetermined time.

그러나, 일반적으로 호루라기 소리의 경우 주파수가 약 2600 Hz 정도로 일정하며, 호루라기 소리와 같이 주파수를 균일하게 낼 수 있는 장치를 이용할 경우 음량과 일정 시간 동안 유지되는 주파수가 아닌 특정 주파수를 사용하기 때문에 주변의 소음 등에 영향을 받지 않고 주파수 대역 필터링을 통해 센서 노드에서 위험을 감지할 수 있다.However, in general, the frequency of the whistle is about 2600 Hz, and when using a device that can make the frequency uniform, such as the whistle, it uses a specific frequency instead of the volume and the frequency maintained for a certain time. Frequency band filtering allows the sensor node to detect danger without being affected by noise.

본 발명에서는 보다 정확하고 소음이나 오작동에 대비하기 위하여 이하에서는 4가지의 위험 상황 판단 알고리즘을 설명한다.
In the present invention, four dangerous situation determination algorithms will be described below in order to be more accurate and to prepare for noise or malfunction.

도 3은 위험 상황 판단 알고리즘의 제 1실시예를 설명하기 위한 순서도이고,도 4는 이를 설명하기 위한 그래프이다.3 is a flowchart illustrating a first embodiment of a risk situation determination algorithm, and FIG. 4 is a graph for explaining the same.

먼저, 사람이 호루라기를 불었을 경우 도 4에 도시된 그래프와 같이 바로 호루라기 주파수 대역으로 진입하지 못하고 주파수 상승 시간이 존재하게 된다. First, when a person blows a whistle, there is a frequency rise time without immediately entering the whistle frequency band as shown in the graph shown in FIG. 4.

여기서, 호루라기 주파수가 2600 Hz를 평균 주파수라고 하면 어느 정도의 주파수 차이를 고려하여 약 2000 Hz에서 3000 Hz 상이를 호루라기 주파수 범위로 간주할 수 있다.Here, when the whistle frequency is 2600 Hz as the average frequency, a difference between about 2000 Hz and 3000 Hz may be regarded as a whistle frequency range in consideration of a certain frequency difference.

도 4의 그래프에 도시된 특정 문턱치 주파수값은 상술한 바와 같이 호루라기의 주파수 대역으로 들어가지 전에 시간차를 고려하여 상승하는 부분의 주파수를 무시하고 일정한 크기의 주파수 대역을 찾기 위한 일종의 기준점이라고 할 수 있다. 즉, 특정 문턱치 주파수 값의 주파수가 관측이 되면 그 후 0.3초 정도의 주파수는 주파수 상승 구간이기 때문에 무시를 하고 그 이후의 주파수부터 호루라기 주파수인지 아닌지를 판단하는 것이다.As described above, the specific threshold frequency value shown in the graph of FIG. 4 may be referred to as a reference point for ignoring the frequency of the rising portion in consideration of the time difference before entering the frequency band of the whistle and finding a frequency band having a constant size. . That is, if a frequency of a specific threshold frequency value is observed, the frequency of about 0.3 seconds thereafter is a frequency rising period, and is ignored, and it is determined whether it is a whistle frequency from the subsequent frequency.

만약, 약 0.3초 후에 호루라기의 주파수 대역이 3초 이상 유지가 될 경우엔 위험 상황임을 인지하고 경보를 발생시키고, 그렇지 않고 호루라기 주파수가 감지가 안될 경우에는 노이즈로 간주하여 경보를 발생시키지 않게 된다.
If, after about 0.3 seconds, the frequency range of the whistle is maintained for more than 3 seconds, it is recognized as a dangerous situation and generates an alarm. Otherwise, if the whistle frequency is not detected, it is considered as noise and does not generate an alarm.

도 5는 위험 상황 판단 알고리즘의 제 2실시예를 설명하기 위한 순서도이고, 도 6는 이를 설명하기 위한 그래프이다.FIG. 5 is a flowchart for describing a second embodiment of a risk situation determination algorithm, and FIG. 6 is a graph for explaining the same.

만약 사용자가 치한을 만나서 호루라기를 불었을 경우 위에서 설명한 제 1실시예에서는 치한이 호루라기를 뺏거나 사용자가 당황을 하여 제대로 길게 호루라기를 불지 못할 경우에는 노이즈로 상황을 인식할 수 있기 때문에 제 2실시예에 따른 알고리즘을 추가로 삽입하였다.If the user meets the molar and blows the whistle In the first embodiment described above, when the mole is taken away from the whistle or if the user is embarrassed and cannot blow the whistle for a long time, the second embodiment can recognize the situation with noise. The algorithm according to the above was further inserted.

본 실시예에서는, 도 6의 그래프에 도시된 바와 같이 특정 문턱치 주파수 값이 관측된 후 3초 이내에 0.5초 이상의 호루라기 주파수가 2번 이상 발생할 경우 위험 경보 신호를 발생시키게 된다.
In the present embodiment, as shown in the graph of FIG. 6, when a whistle frequency of 0.5 seconds or more occurs two or more times within 3 seconds after a specific threshold frequency value is observed, a warning signal is generated.

도 7은 위험 상황 판단 알고리즘의 제 3실시예를 설명하기 위한 순서도이고, 도 8은 이를 설명하기 위한 그래프이다.7 is a flowchart illustrating a third embodiment of a risk situation determination algorithm, and FIG. 8 is a graph for explaining the same.

상술한 제 2실시예에 따른 알고리즘과 같이 본 실시예의 알고리즘에서도 사용자가 호루라기를 일정 시간 이상 불지 못할 경우에 대한 알고리즘이다.Like the algorithm according to the second embodiment described above, the algorithm of the present embodiment is an algorithm for a case in which the user does not blow the whistle for a predetermined time or more.

예를 들어, 사용자가 호루라기를 불고 호루라기를 놓치거나 치한에게 빼앗겼을 경우 호루라기를 쓸 수 없는 상황이 발생하게 된다. 이 때를 대비하여 나온 알고리즘이 본 실시예에 따른 알고리즘이다.For example, if the user blows the whistle and misses the whistle or is taken away by the mole, a situation occurs in which the whistle cannot be used. An algorithm prepared in this case is the algorithm according to the present embodiment.

도 8의 그래프에 도시된 바와 같이 호루라기 주파수가 0.5초 이상 발생하고 호루라기 주파수가 끝난 후 3초 이내에 어떤 주파수 대역이라도(이 때 특정 문턱치 주파수 값이 넘지 않아도 됨) 0.5초 이상 유지가 될 경우 경보를 발생한다. As shown in the graph of FIG. 8, when the whistle frequency is generated for 0.5 seconds or more and any frequency band is maintained within 0.5 seconds after the whistle frequency ends (the specific threshold frequency value is not exceeded at this time), the alarm is alerted. Occurs.

이러한 이유는 사람의 목소리의 대역은 사람에 따라 다양하기 때문에 문턱치를 넘지 않아도 호루라기 주파수가 인식이 된 다음에는 어떤 주파수 대역이라도 0.5초 이상 유지된 다면 위험 상황으로 인식하기 위함이다.
This is because the range of the human voice varies from person to person, so that if any frequency band is held for more than 0.5 seconds after the whistle frequency is recognized without exceeding the threshold, it is recognized as a dangerous situation.

도 9는 위험 상황 판단 알고리즘의 제 4실시예를 설명하기 위한 순서도이고, 도 10은 이를 설명하기 위한 그래프이다.9 is a flowchart illustrating a fourth embodiment of a risk situation determination algorithm, and FIG. 10 is a graph for explaining the same.

본 실시예에 따른 알고리즘은 상술한 제 3실시예에 따른 알고리즘과 같이 사용자가 당황하여 바로 호루라기를 불지 못했을 경우를 대비한 알고리즘이다.The algorithm according to the present embodiment is an algorithm for a case in which the user does not blow the whistle immediately because of the embarrassment, like the algorithm according to the third embodiment.

예를 들어, 사용자가 당황을 하여 비명을 먼저 지르고 난 후 호루라기를 불 경우를 상정하였다. 도 10에 도시된 그래프를 참조하면 처음에 일정 크기의 주파수가 0.5초 이상 유지된 후 3초 이내에 호루라기 주파수가 0.5초 이상 감지가 된 경우 위험상황으로 간주하여 경보를 작동시키게 되는 것이다
For example, suppose a user is embarrassed and screams first and then blows a whistle. Referring to the graph shown in FIG. 10, if a whistle frequency is detected for 0.5 seconds or more within 3 seconds after a predetermined size of frequency is maintained for 0.5 seconds or more, the alarm is regarded as a dangerous situation and an alarm is activated.

한편, 기존의 무인 경비 시스템에 사용되는 데이터 전송 장비들은 음향신호를 감지하는 감지부와는 별개로 따로 설치를 해야만 하는 불편함이 있었다. 그러나 본 발명에서와 같이 센서 노드들을 사용할 경우 음향 신호를 감지하는 감지부와 데이터를 전송하는 전송부가 함께 존재하기 때문에 별개로 전송 장비를 설치해야 하는 문제점이 사라지게 된다.On the other hand, the data transmission equipment used in the existing unmanned security system had a inconvenience to be installed separately from the detection unit for detecting the acoustic signal. However, when the sensor nodes are used as in the present invention, since a detector for detecting an acoustic signal and a transmitter for transmitting data exist together, the problem of separately installing transmission equipment is eliminated.

또한, 본 발명에서는 센서 노드에 반영구적인 태양전지를 삽입하여 자동으로 전력을 공급함으로써 기존의 시스템과 같이 전력선을 설치하거나 배터리의 교환을 불편함을 감소할 수 있으며, 전력선의 배치 또한 불필요하므로 사용자로 하여금 기본 설치와 관리의 불편함을 제거할 수 있는 효과가 있다.
In addition, in the present invention, by inserting a semi-permanent solar cell in the sensor node to automatically supply power, it is possible to reduce the inconvenience of installing a power line or replacement of a battery, as in the existing system, since the arrangement of the power line is also unnecessary, There is an effect that can eliminate the inconvenience of basic installation and management.

이상과 같이 본 발명에 따른 유비쿼터스를 센서 네트워크를 이용한 무인 경비 시스템을 예시한 도면을 참조로 하여 설명하였으나, 본 명세서에 개시된 실시예와 도면에 의해 본 발명이 한정되는 것은 아니며, 본 발명의 기술사상 범위내에서 당업자에 의해 다양한 변형이 이루어질 수 있음은 물론이다.
As described above with reference to the drawings illustrating an unmanned security system using a ubiquitous sensor network according to the present invention, the present invention is not limited by the embodiments and drawings disclosed herein, Of course, various modifications may be made by those skilled in the art within the scope.

Claims (8)

무인 경비를 원하는 지역에 설치된 다수의 센서 노드 및 중앙 시스템 관리소를 포함하는 무인 경비 시스템에 있어서,
상기 센서 노드는, 상기 무인 경비 시스템 내에서 음향 신호가 발생하면, 상기 음향 신호가 발생한 영역 주변의 센서 노드들에서 상기 음향 신호를 감지하여, 기설정된 위험상황 판단 알고리즘에 따라 상기 음향 신호가 위험 상황과 관련된 음향 신호인지 여부를 판단하고, 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면, 상기 중앙 시스템 관리소로 위험 신호를 전송하고,
상기 중앙 시스템 관리소는, 상기 위험 신호를 수신하면, 상기 위험 신호를 전송한 센서 노드들의 위치를 추적하여 경비인력을 보내는 동작을 수행하며,
상기 위험상황 판단 알고리즘은,
상기 다수의 센서 노드들을 통하여 상기 무인 경비 시스템 내에서 발생한 음향 신호의 주파수 대역을 측정하는 제 1과정과,
상기 제 1과정을 통하여 측정된 주파수 대역에 근거하여 위험 상황을 판단하는 제 2과정 및
상기 제 2과정을 통하여 상기 음향 신호가 위험 상황과 관련된 음향 신호로 판단되면 상기 중앙 시스템 관리소로 위험 신호를 전송하는 제 3과정을 포함하고,
상기 제 2과정은,
호루라기의 주파수 대역으로 들어가기 전까지의 시간차를 반영하여, 상기 제 1과정을 통하여 측정된 주파수 대역에서 주파수가 기설정된 문턱 주파수값을 초과하는 시점부터 0.3초 이후 기설정된 호루라기 주파수 대역이 3초 이상 유지되는 경우에 위험 상황으로 판단하고,
또는, 사용자가 위험 상황에서 호루라기를 길게 불지 못하는 경우를 노이즈로 인식하는 것을 방지하기 위해, 상기 제 1과정을 통하여 측정된 주파수 대역에서 기설정된 호루라기 주파수 대역이 3초 이내에 2번 이상 감지되는 경우에 위험 상황으로 판단하며,
또는, 사용자가 호루라기를 놓치거나 빼앗겨서 사용할 수 없는 상황을 노이즈로 인식하는 것을 방지하기 위해, 상기 제 1과정을 통하여 측정된 주파수 대역에서 기설정된 호루라기 주파수 대역이 0.5초 이상 감지된 시점부터 3초 이내에 균일한 주파수 대역이 0.5초 이상 유지되는 경우에 위험 상황으로 판단하고,
또는, 사용자가 비명을 먼저 지르고 난 후 호루라기를 불 경우를 노이즈로 인식하는 것을 방지하기 위해, 상기 제 1과정을 통하여 측정된 주파수 대역에서 균일한 주파수 대역이 0.5초 이상 유지된 시점부터 3초 이내에 기설정된 호루라기 주파수 대역이 0.5초 이상 유지되는 경우에 위험 상황으로 판단하는 것을 특징으로 하는 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템.
In an unmanned security system including a plurality of sensor nodes and a central system management station installed in an area where unmanned security is desired,
When a sound signal is generated in the unmanned security system, the sensor node detects the sound signal from sensor nodes around the region where the sound signal is generated, and the sound signal is in danger according to a preset risk situation determination algorithm. Determine whether the sound signal is related to the sound signal, and if the sound signal is determined to be a sound signal related to a dangerous situation, transmit a danger signal to the central system office,
The central system office, when receiving the danger signal, performs the operation of sending the guard personnel by tracking the location of the sensor nodes that sent the danger signal,
The risk situation determination algorithm,
A first step of measuring a frequency band of an acoustic signal generated in the unmanned security system through the plurality of sensor nodes;
A second process of determining a risk situation based on the frequency band measured through the first process and
And a third step of transmitting a danger signal to the central system management office when the sound signal is determined to be a sound signal related to a dangerous situation through the second process.
The second process,
Reflecting the time difference before entering the whistle frequency band, the predetermined whistle frequency band is maintained for 3 seconds or more after 0.3 seconds from the time when the frequency exceeds a preset threshold frequency value in the frequency band measured through the first process. In the case of a dangerous situation,
Alternatively, in order to prevent the user from recognizing a case in which the whistle is not long blowing in a dangerous situation as noise, when a preset whistle frequency band is detected more than twice within 3 seconds in the frequency band measured through the first process. Judge it as a dangerous situation,
Alternatively, in order to prevent the user from recognizing a situation in which the user cannot use the missed whistle due to the noise, noise is detected for 3 seconds from the time when the preset whistle frequency band is detected for 0.5 seconds or more in the frequency band measured through the first process. If the uniform frequency band is maintained for more than 0.5 seconds within the risk situation,
Alternatively, in order to prevent the user from screaming first and then detecting a whistle as noise, within 3 seconds from the time when the uniform frequency band is maintained for 0.5 seconds or more in the frequency band measured through the first process. Unmanned security system using a ubiquitous sensor network characterized in that it is determined as a dangerous situation when the preset whistle frequency band is maintained for 0.5 seconds or more.
삭제delete 삭제delete 삭제delete 삭제delete 청구항 1에 있어서,
상기 센서 노드의 내부에는 음향 센서, 조도 센서, 열 센서, 연기 센서, 습도 센서 및 GPS 중 하나 이상이 내장된 것을 특징으로 하는 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템.
The method according to claim 1,
The sensor node is an unmanned security system using a ubiquitous sensor network, characterized in that one or more of a built-in acoustic sensor, illuminance sensor, heat sensor, smoke sensor, humidity sensor and GPS.
청구항 1에 있어서,
상기 다수의 센서 노드들은 무인 경비를 원하는 지역에 설치되면 상호간에 자동적으로 네트워크를 구성하는 것을 특징으로 하는 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템.
The method according to claim 1,
When the plurality of sensor nodes are installed in an area that wants unmanned security, the unmanned security system using a ubiquitous sensor network, characterized in that automatically configure the network with each other.
청구항 1에 있어서,
상기 센서 노드는 태양 전지를 실장하여 자동 충전이 가능한 것을 특징으로 하는 유비쿼터스 센서 네트워크를 이용한 무인 경비 시스템.

The method according to claim 1,
The sensor node is an unmanned security system using a ubiquitous sensor network, characterized in that the automatic charging by mounting a solar cell.

KR1020100018417A 2010-03-02 2010-03-02 Unmanned guard system using ubiquitous sensor networks KR101070803B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100018417A KR101070803B1 (en) 2010-03-02 2010-03-02 Unmanned guard system using ubiquitous sensor networks

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100018417A KR101070803B1 (en) 2010-03-02 2010-03-02 Unmanned guard system using ubiquitous sensor networks

Publications (2)

Publication Number Publication Date
KR20110099419A KR20110099419A (en) 2011-09-08
KR101070803B1 true KR101070803B1 (en) 2011-10-10

Family

ID=44952296

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100018417A KR101070803B1 (en) 2010-03-02 2010-03-02 Unmanned guard system using ubiquitous sensor networks

Country Status (1)

Country Link
KR (1) KR101070803B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104077870A (en) * 2014-06-05 2014-10-01 温州市凯能电子科技有限公司 Automatic field guarding and warning system and control method and device

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100741425B1 (en) * 2006-02-16 2007-07-23 주식회사 투윈스컴 Emergency call system using sound and method thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100741425B1 (en) * 2006-02-16 2007-07-23 주식회사 투윈스컴 Emergency call system using sound and method thereof

Also Published As

Publication number Publication date
KR20110099419A (en) 2011-09-08

Similar Documents

Publication Publication Date Title
US9087444B2 (en) Alarm device
US9390605B2 (en) Auxiliary device for a hazard alarm constructed as a point type detector for function monitoring of the hazard alarm, and an arrangement and method of monitoring using a device of this kind
CN203773669U (en) Independent fire alarming system based on electric power carrier wave
US20160093187A1 (en) Sound and Temperature Sensors for Environmental Anomaly Detection
KR100795110B1 (en) Indoor localization system and method for prevention of child's accident
US10930137B2 (en) Event alarm device and event alarm system
KR100962030B1 (en) Apparatus for Information of a Safety Administration and Building Prevention Using a Wire Net and Wireless Net
JP3674161B2 (en) Telemeter / Telecontrol device
CN104574813A (en) Radar lamp monitoring system and method
KR101060919B1 (en) Automatic Distress Report System Using Zigbee Communication
KR101070803B1 (en) Unmanned guard system using ubiquitous sensor networks
CN103839370A (en) Design of home fire detection and alarm system based on GSM network
Ramasamy et al. Avoidance of fire accident on running train using zigbee wireless sensor network
KR100796143B1 (en) Alarm message transmit system and process
KR100927422B1 (en) Surveillance System Using Short Range Wireless Communication and Its Method
KR101659477B1 (en) Bluetooth Low Energy Based Theft Detecting System for Electric Power Distribution Lines
KR101228945B1 (en) USN based Low Power Emergency Communication System
KR101006548B1 (en) A flame-tracing system for outdoor area Using wirless sensor network
CN204791403U (en) Photovoltaic remote monitering system
JP2007264913A (en) Abnormality monitoring portable terminal and abnormality monitoring device
CN107170185A (en) A kind of security alarm method based on radio reception device, radio reception device
US20160171858A1 (en) Alarm systems for detecting and communicating anomalous events
JP4508181B2 (en) Measuring meter device
KR101659480B1 (en) Bluetooth Low Energy Based Theft Detecting and Tracking System for Electric Power Distribution Lines
KR101508662B1 (en) System and method for preventing life safety accident in small space based on user mobile-device with portable sensor

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140612

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150626

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160602

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee