KR100834012B1 - Automatic police enforcement system of illegal vehicle - Google Patents

Automatic police enforcement system of illegal vehicle Download PDF

Info

Publication number
KR100834012B1
KR100834012B1 KR1020070095107A KR20070095107A KR100834012B1 KR 100834012 B1 KR100834012 B1 KR 100834012B1 KR 1020070095107 A KR1020070095107 A KR 1020070095107A KR 20070095107 A KR20070095107 A KR 20070095107A KR 100834012 B1 KR100834012 B1 KR 100834012B1
Authority
KR
South Korea
Prior art keywords
camera
dome
photographing
vehicle
cameras
Prior art date
Application number
KR1020070095107A
Other languages
Korean (ko)
Inventor
윤영일
Original Assignee
주식회사 넥스파시스템
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 넥스파시스템 filed Critical 주식회사 넥스파시스템
Priority to KR1020070095107A priority Critical patent/KR100834012B1/en
Application granted granted Critical
Publication of KR100834012B1 publication Critical patent/KR100834012B1/en

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C19/00Electric signal transmission systems
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors

Abstract

An automatic traffic control system is provided to increase traffic control efficiency by transmitting an image captured in first and second fixed IP(Internet Protocol) cameras, in real time by connecting a control unit and the IP camera through the optic LAN(Local Area Network). In a photographing unit of an automatic traffic control system, first and second fixed IP cameras are installed to face each other, to monitor the surrounding situations. A dome-shaped IP camera is panned and tilted to take a picture of an object. A speaker outputs a voice signal transmitted through a communication unit. An electric signboard displays an SMS(Short Message Service) message transmitted through the communication unit. The communication unit is connected with the photographing unit near the photographing unit to transmit images outputted from the photographing unit, through the network. A control unit decides whether to control vehicles or not, on the basis of data transmitted from the communication unit. In the control unit, a keyboard device inputs text words. A word-voice conversion unit converts the text input by the keyboard device, into a voice signal and transmits the voice signal to the speaker. A camera control unit controls the dome-shaped IP camera through the communication unit. An SMS message transmitting unit transmits an SMS message to the electric signboard. As software of the control unit, a vehicle detector(203) detects a number plate of a vehicle from an image transmitted from the dome-shaped IP camera. UPPC(204) shows the connection state with the photographing unit. A voice text(205) controls voice outputted from the speaker. UPLPR(206) recognizes words from the number plate of the vehicle. UPMS(207) monitors the traffic situation of the vehicles for the photographing unit. UPPS(208) outputs the reception state of images captured by the first and second fixed IP cameras and the dome-shaped IP camera, as the form of a database. UPM(210) drives and controls the IP cameras.

Description

무인 교통 단속시스템{Automatic Police Enforcement System of Illegal Vehicle}Automatic Police Enforcement System of Illegal Vehicles

본 발명은 무인 교통 단속 시스템에 관한 것으로서, IP카메라를 이용하여 촬영하고, 이렇게 촬영된 영상정보에 기초하여 교통위반 차량을 단속하는 무인 교통 단속 시스템에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an unmanned traffic enforcement system, and relates to an unmanned traffic enforcement system that photographs using an IP camera and controls a traffic violation vehicle based on the photographed image information.

일반적으로 도로의 양쪽에는 차량이 주정차하기 쉽다. 이렇게 주정차된 차량은 주행중인 차량의 흐름을 방해하고, 실질적으로 도로의 폭을 좁게 만든다. 게다가 이러한 좁이 폭은 도로를 지나가는 차량은 항시 교통사고의 위험에 노출되어 있다. 이러한 위험성을 최소화시키고자 도로 교통법에서는 각종 주정차 금지 표시판을 세워 주정차를 금지하도록 계도하고 있다. In general, vehicles are easy to park on both sides of the road. This parked vehicle obstructs the flow of the running vehicle and substantially narrows the road. In addition, the narrow width of vehicles passing through the road is always at risk of traffic accidents. In order to minimize this risk, the Road Traffic Law has established various parking prohibition signs to prohibit parking.

그러나 단속을 실시하는 경찰관의 인력이 모든 주차 감시지역마다 배치될 수없는 것이 현실이기 때문에 도로의 갓길 등에는 주정차 금지 표시판이 있음에도 불구하고 주정차 위반차량으로 넘쳐나고 있다.However, the police officers who enforce the crackdown cannot be deployed in every parking monitoring area, so even though there are signs that stop on the side of the road, they are overflowing with traffic violations.

이러한 상황을 극복하기 위하여 주정차 감시 인원을 충원하는 등의 방식으로 대응하였으나 주정차 위반여부에 대한 확실한 증거를 제시하지 못하여 단속경찰관 과 일반 시민과의 사이에 잦은 마찰이 일어나는 것이 현실이다.In order to overcome such a situation, the government responded by recruiting a parking guard, but failed to provide clear evidence of the violation of the parking lot.

이러한 상황을 극복하기 위하여 등록 특허10-0538526 에서는 고정형 불법 무인단속시스템을 제안하고 있다. 이러한 방법에 따르면 근거리 감시 카메라와 원거리 감시 카메라가 설치되고, 이러한 감시 카메라에 차량이 들어오면, 이러한 차량을 관측하여 2차에 걸친 촬영을 하게 된다. 2차에 걸친 촬영은 일정시간의 시간동안 차량이 주차하였음을 증명하기 위한 것으로서 관리장치에는 촬영된 영상을 저장할 수 있는 메모리가 구비되어 있는 것을 특징으로 한다.In order to overcome this situation, the registered patent 10-0538526 proposes a fixed illegal unmanned enforcement system. According to this method, a short range surveillance camera and a remote surveillance camera are installed, and when a vehicle enters the surveillance camera, the vehicle is observed and two shots are taken. The second photographing is for proving that the vehicle has been parked for a predetermined time, and the management device is provided with a memory capable of storing the photographed image.

하지만 이러한 방법으로 단속을 하는 것은 카메라에 의해 촬영된 영상을 전송하는 과정을 거치게 되어 어떠한 하나의 카메라에 문제가 생겨도 즉각적으로 대응하기 어려운 문제를 가지고 있었다.However, intermittent cracking in this way has a problem that it is difficult to immediately respond to any one of the cameras as it goes through the process of transmitting the image taken by the camera.

뿐만 아니라, 한 번 문제가 발생하면 카메라의 높은 위치로 말미암아 수리가 어렵고, 많은 비용을 발생시키는 문제가 있었다.In addition, once a problem occurs, the high position of the camera makes it difficult to repair and incurs high costs.

또한 종래의 기술에서는 초고속 통신망인 ADSL을 통한 제어로 데이터의 처리가 신속한 장점이 있으나, 전송되는 데이터가 카메라에 의해 촬영된 영상과 이러한 영상으로부터 추출된 차량번호가 전부였다. 즉 이것은 실시간으로 처리할 수 있는 데이터의 양이 적어지고, 카메라에 대한 수동의 방식에 의한 제어가 불가능한 단점을 가진다. In addition, the conventional technology has the advantage of rapid processing of the data by the control via the ADSL, which is a high-speed communication network, but the transmission data were all the images taken by the camera and the vehicle number extracted from these images. In other words, this has the disadvantage that the amount of data that can be processed in real time is less, and the manual control to the camera is impossible.

본 발명은 이러한 문제를 해결하기 위하여 안출한 것으로서, 본 발명의 제 1목적은 제어수단과 IP카메라를 광랜으로 연결하여 제 1, 제 2고정형 IP카메라에서 촬영된 영상을 실시간으로 전송하여 교통단속에 대한 효율성을 높이고자 하는 것이 본 발명의 제 1목적이다.The present invention has been made to solve such a problem, the first object of the present invention is to connect the control means and the IP camera in the optical LAN to transmit the image taken by the first and second fixed IP camera in real time to the traffic enforcement It is a first object of the present invention to improve the efficiency of the present invention.

본 발명의 제 2목적은 IP카메라에 제어장치 및 IP카메라 작동관련 소프트웨어를 제어수단에서 제어하는 방법으로 IP카메라의 유지보수를 편리하게 하고 고장이 발생하였을 경우 신속한 대응과 처리가 가능하도록 하는 것이다.The second object of the present invention is to control the IP camera control device and the IP camera operation related software from the control means to facilitate the maintenance of the IP camera and to enable quick response and handling when a failure occurs.

본 발명의 제 3목적은 IP카메라의 작동을 자동 방식뿐만 아니라,수동 방식으로 제어할 수 있게 하여 교통단속에 대한 제어가 쉽게 이루어질 수 있도록 하는 것이다.A third object of the present invention is to control the operation of the IP camera so that the operation of the IP camera can be controlled not only in an automatic manner but also in a manual manner.

본 발명의 그 밖의 목적, 특정한 장점들 및 신규한 특징들은 첨부된 도면들과 연관되어지는 이하의 상세한 설명과 바람직한 실시예들로부터 더욱 분명해질 것이다.Other objects, specific advantages and novel features of the present invention will become more apparent from the following detailed description and the preferred embodiments associated with the accompanying drawings.

본 발명에 따른 무인 교통 단속 시스템은 차량을 촬영하는 촬영수단; 촬영수단과 인접한 위치에서 촬영수단과 연결되어 촬영수단으로부터의 영상출력 자체를 네트워크로 전송하기 위한 통신수단; 통신수단으로부터 전송된 데이터에 기초하여 단속여부를 결정하는 제어수단을 포함하는 것을 특징으로 한다. The unmanned traffic control system according to the present invention includes a photographing means for photographing the vehicle; Communication means connected to the photographing means at a position adjacent to the photographing means for transmitting the image output itself from the photographing means to a network; And control means for determining whether to control the interruption based on the data transmitted from the communication means.

특히, 촬영수단은 상호 대향하도록 설치되어 주변상황을 감시하기 위한 제 1, 제 2 고정형 IP카메라; 및 단속 대상을 촬영하는 돔형 IP카메라로 구성되어 있다.In particular, the photographing means is installed to face each other, the first, second fixed IP camera for monitoring the surrounding situation; And a dome-type IP camera for photographing an enforcement target.

특히, 제어수단은 통신수단을 통해 돔형 IP카메라를 제어하기 위한 카메라 제어수단을 더 포함하고 있다. In particular, the control means further includes a camera control means for controlling the dome type IP camera through the communication means.

특히, 돔형 IP카메라는 펜틸트 동작이 가능한 팬틸트 카메라로 구성이 되어 있다.In particular, the dome IP camera is composed of a pan tilt camera capable of pen tilt operation.

특히, 통신수단은 양방향 데이터 통신이 가능한 허브를 포함하고 있다.In particular, the communication means includes a hub capable of bidirectional data communication.

특히, 제어수단은 문자메시지를 전송하는 문자메시지 전송수단을 더 포함하고 촬영수단은 통신수단을 통해 전송된 문자메시지를 표시하는 전광판을 더 포함하도록 구성되어 있다.In particular, the control means further comprises a text message transmission means for transmitting a text message and the photographing means is configured to further include an electronic display board for displaying the text message transmitted through the communication means.

특히, 제어수단은 텍스트 입력을 위한 키보드 장치; 및 사기 키보드에 의해 입력된 텍스트를 음성신호로 변환하는 문자음성 변환수단을 더 포함하고, 촬영수단은 통신수단을 통해 전송된 음성신호를 출력하는 스피커를 더 포함하도록 구성되어 있다. In particular, the control means includes a keyboard device for text input; And text-to-speech converting means for converting text input by a fraudulent keyboard into a voice signal, and the photographing means further comprises a speaker for outputting a voice signal transmitted through the communication means.

특히, 제어수단은 복수의 촬영수단 및 통신수단과 연결되어 있다.In particular, the control means is connected with a plurality of photographing means and communication means.

특히, 촬영수단과 통신수단은 쌍을 이루어 20~30개 범위에서 연결되고 제어수단은 지방자치단체의 서버컴퓨터이다.In particular, the photographing means and the communication means are paired and connected in a range of 20 to 30, and the control means is a server computer of a local government.

특히, 제어수단은 복수의 촬영수단이 촬영한 영상을 각각 표시하기 위한 복복수의 모니터를 더 포함하고 있다.In particular, the control means further includes a plurality of monitors for respectively displaying the images photographed by the plurality of photographing means.

특히, 촬영수단은 IP카메라로 구성이 되어 있다..In particular, the photographing means is constituted by an IP camera.

본 발명에 따른 통한 무인 교통 단속시스템의 경우에는 카메라를 고화질의 IP카메라로 대체함으로써 실시간으로 동영상을 전송하여 단속처리의 효율성을 높이는 것이 가능하다.In the case of the unmanned traffic control system according to the present invention, by replacing the camera with a high-definition IP camera it is possible to increase the efficiency of the enforcement process by transmitting a video in real time.

또한 자동 팬/틸트/줌 기능의 사용에 따른 제어가 원격에서 이루어지던 것에 비해 이러한 팬/틸트/줌 기능의 상황을 중앙제어수단에서 파악이 가능하므로 즉각적인 대응이 가능한 장점을 갖는다.In addition, since the control according to the use of the automatic pan / tilt / zoom function is made remotely, the situation of the pan / tilt / zoom function can be grasped by the central control means, and thus the immediate response is possible.

또한 로컬영역에 설치되던 장비제어기를 센터영역으로 옮겨서 외부 노출에 의한 손상의 위험이 없고 이에 따라 장비제어기와 카메라의 연결을 위한 별도의 부대설비가 필요하지 않으므로 시공이 간편한 효과를 갖는다.In addition, there is no risk of damage due to external exposure by moving the equipment controller installed in the local area to the center area, and thus there is no need for a separate accessory for connecting the equipment controller and the camera.

이하, 첨부도면을 참조하여 본 발명의 구성과 작용에 대하여 설명하면 다음과 같다.Hereinafter, the configuration and operation of the present invention with reference to the accompanying drawings.

도 1은 본 발명에 따른 IP카메라를 사용한 무인교통 단속시스템의 하드웨어구성도이다. 도 1에 도시된 바와 같이 촬영수단(100)에는 제 1 고정형 IP카메라(101a)와 제 2 고정형 IP카메라(101b)가 있고, 이러한 제 1, 제 2고정형 IP카메라(101a,101b)로부터 받은 정보를 바탕으로 차량번호를 인식하는 돔형 IP카메라(102)로 구성이 되어있다. 이때 IP카메라(101a,101b,102)들로부터의 영상정보는 허브(103)에 전달되고, 제어수단(200)에 존재하는 허브(103)를 통해서 운영단말기(112)와 장비제어기(111)에 전달된다. 또한 이러한 운영단말기(112)에는 위의 영상정보를 보여주는 모니터(401,402,403)를 구비하는 것이 가능하다. 이에 따라 촬영수단(100)이 위치하고 있는 곳에 차량(미도시)이 진입하였는지를 감지하고 만일 그 차가 주차를 한다면 이에 대한 단속조치가 이루어진다. 이러한 감지와 단속의 일련의 과정은 이전의 특허에 상세히 기술되어 있으므로 이에 대해서는 생략한다. 1 is a hardware configuration of an unmanned traffic control system using an IP camera according to the present invention. As shown in FIG. 1, the photographing means 100 includes a first fixed IP camera 101a and a second fixed IP camera 101b, and information received from the first and second fixed IP cameras 101a and 101b. It is composed of a dome-type IP camera 102 to recognize the vehicle number based on the. At this time, the image information from the IP camera (101a, 101b, 102) is transmitted to the hub 103, and through the hub 103 present in the control means 200 to the operating terminal 112 and the equipment controller 111 Delivered. In addition, such an operating terminal 112 may be provided with a monitor (401, 402, 403) showing the above image information. Accordingly, it is detected whether a vehicle (not shown) has entered the location where the photographing means 100 is located, and if the vehicle is parked, enforcement measures for this are made. This series of detection and crackdown processes are described in detail in previous patents and will be omitted here.

다만 본 발명에 따른 IP카메라를 사용한 무인 교통 단속시스템은 이러한 각각의 IP카메라(101a,101b,102)에 대한 제어가 제어수단(200)이 위치하고 있는 센터영역에서 이루어지는 것이 종래의 발명과의 차이이다. 또한 이러한 IP카메라(101a,101b,102)에 대한 제어외에도 앰프(104)와 연결된 스피커(106)와 전광판(105)을 통해 계도방송을 출력하는 것이 가능하다. 즉 "여기는 주차할 수 없는 지역입니다"라는 등의 음성이나 문자를 전광판(105)에 출력할 수 있다. 이러한 스피커(106)와 전광판(105)은 로컬영역에 위치한다.However, in the unmanned traffic control system using an IP camera according to the present invention, the control of each of the IP cameras 101a, 101b, and 102 is performed in the center area where the control means 200 is located. . In addition to the control of the IP cameras 101a, 101b, and 102, it is possible to output the genealogy broadcast through the speaker 106 and the electronic display board 105 connected to the amplifier 104. That is, a voice or text such as "here is an area where parking is not possible" can be output to the display board 105. The speaker 106 and the electric sign 105 are located in the local area.

이처럼 본 발명에 따른 무인 교통 단속시스템은 출력장치로서 스피커(105)와 전광판(106)을 구비하는 방법으로 불법으로 주정차된 차량을 단속하는 기능을 수행한다. As described above, the unmanned traffic control system according to the present invention performs a function of controlling an illegally parked vehicle by a method including a speaker 105 and an electronic sign 106 as an output device.

앞에서 촬영수단(100)의 옆에서 주차하는 차량에 대하여 계도역할을 수행하는 출력장치에 대하여 설명하였으므로, 여기서는 센터영역에 위치하는 하드웨어의 구성과 작용에 대하여 논의하기로 한다. 먼저 단속상황판(108)은 IP카메라(101a,101b,102)의 상황을 일목요연하게 관측할 수 있다. 또한 이러한 단속상황판(108)은 장비제어기(111)와 연결되어 있어서 단속상황판(108)을 보면서 촬영수단(100)에 전기적으로 연결되어 있는 각종의 장비를 제어할 수 있다. 이러한 장비제어기(111)와 연결되어 있는 장치로는 운영단말기(112)가 있는 데, 운영단말기(112)에는 IP카메라(101a,101b,102)를 구동 및 제어할 수 있는 UPM(210)이라는 소프트웨어를 구비하고 있다. 이러한 UPM소프트웨어(210)에 대해서는 후술하기로 한다.As described above with respect to the output device for performing the role of role for the vehicle parked next to the photographing means 100, the configuration and operation of the hardware located in the center area will be discussed. First, the intermittent situation board 108 can observe the situation of the IP cameras 101a, 101b, and 102 at a glance. In addition, the intermittent situation board 108 may be connected to the equipment controller 111 to control a variety of equipment electrically connected to the photographing means 100 while watching the intermittent situation board 108. The device connected to the equipment controller 111 is an operating terminal 112, the operating terminal 112, the software called UPM 210 that can drive and control the IP camera (101a, 101b, 102) Equipped with. The UPM software 210 will be described later.

또한 다른 제어장치로서 외부연계서버(113)를 가지고 있어서 외부에 존재하는 각종시스템과 연결시키는 역할을 수행한다. 하나의 예를 들어 설명하면, 초기 위반시각에 대한 데이터와 최종위반시각에 대한 데이터를 자료처리서버(109)로부터 받아서 위반차량에 대한 고지서(번호미부여)를 출력하는 역할을 할 수 있다. 이때 물론 촬영수단(100)이 위치하고 있는 IP카메라(101a,101b)에 대한 IP데이터가 포함되어 있어야 한다.In addition, it has an external connection server 113 as another control device to serve to connect to various systems existing outside. As an example, the data for the initial violation time and the final violation time data may be received from the data processing server 109 and serve to output a notice (numbering) for the violation vehicle. At this time, of course, the IP data for the IP cameras 101a and 101b where the photographing means 100 is located should be included.

또한 이러한 제어수단(200)에는 자료처리서버(109)가 있는데 여기서는 각종의 통계자료 또는 단속이 필요한 차량에 대한 정보를 가지고 있어서 이러한 자료에 대한 처리가 가능한다. 그리고 이러한 자료처리서버(109)의 후단에는 DB서버(110)가 있는데 이는 지금까지의 각 촬영수단(100)에 대한 주정차 위반에 대한 자료가 축적되어 있다. 이것뿐만 아니라, 교통위반차량에 대한 정보를 가지고 있어서 현장에서 견인하는 것을 돕는 역할을 한다. 여기서의 교통 위반 차량은 세금체납차량, 도난 차량, 거주자 우선 주차 금지 위반차량, 속도제한 구역에서 제한 속도를 지키지 않은 차량을 말한다.In addition, the control means 200 has a data processing server 109, which has a variety of statistical data or information on the vehicle that needs to be cracked, it is possible to process such data. And there is a DB server 110 at the rear of the data processing server 109, which accumulates data on a parking stop violation for each photographing means 100 so far. In addition to this, it has information about traffic violation vehicles, helping to tow on site. Traffic offenses here are tax delinquent vehicles, stolen vehicles, occupant-priority parking prohibition vehicles, and vehicles that do not meet the speed limit in the speed limit zone.

본 발명에 따른 무인 교통 단속시스템의 경우에는 장비제어기(111)가 촬영수단(100)이 위치하는 로컬영역에 위치하는 것이 아니라, 제어수단(200)이 위치하고 있는 센터영역에 위치한다. 이처럼 장비제어기(111)가 센터영역에 위치하게 되면, 설사 장비제어기(111)가 고장이 나더라도 촬영수단(100)의 옆으로 갈 필요가 없다.In the case of the unmanned traffic control system according to the present invention, the equipment controller 111 is not located in the local area where the photographing means 100 is located, but is located in the center area where the control means 200 is located. When the equipment controller 111 is located in the center area in this way, even if the equipment controller 111 fails, it is not necessary to go to the photographing means 100.

뿐만 아니라, 특정영역에 위치하고 있는 IP카메라(101a,101b,102)에 대한 정보를 가지고 있어서 이러한 IP카메라(101a, 101b, 102)에 대한 상황파악이 실시간으로 가능한 특징을 가지고 있다.In addition, since it has information on IP cameras 101a, 101b, and 102 located in a specific area, it is possible to identify the situation of IP cameras 101a, 101b, and 102 in real time.

따라서 고장에 대한 대처능력이 우수하다. 또한 장비제어기(111)가 제어수단(200)에 위치하여 시공이 간편한 장점을 갖는다. 즉 촬영수단(100)의 옆에 설치할 경우에는 외부인의 눈에 띄어서는 아니되고, IP카메라(101a,101b,102)와의 연결상태를 고려하여 배치하여야 한다.Therefore, the ability to cope with failure is excellent. In addition, the equipment controller 111 is located in the control means 200 has the advantage of easy construction. That is, when installed next to the photographing means 100 should not be visible to the outsider, it should be arranged in consideration of the connection state with the IP camera (101a, 101b, 102).

하지만 장비제어기(111)가 제어장치(200)에 포함되어 위치함으로 부대장비 등이 불필요하다. 또한 외부에 노출이 안되어 내구성이 증가하고 고장율이 현저히 감소한다. 이에 따라 현지에 배치할 경우의 특징인 고장시 1회 약 30만원의 비용이 드는 고가사다리차를 임대하지 않아도 된다. However, since the equipment controller 111 is included in the control apparatus 200, the auxiliary equipment and the like are unnecessary. In addition, it is not exposed to the outside, which increases durability and significantly reduces the failure rate. As a result, it is not necessary to rent an expensive ladder car that costs about 300,000 won per breakdown.

이러한 하드웨어를 구동시키기 위해서는 소프트웨어의 작동이 필요한 데, 이하에서는 하드웨어를 구동시키기 위한 소프트웨어의 구성과 작동에 대하여 논의하기로 한다. The operation of the software is required to drive such hardware. Hereinafter, the configuration and operation of the software for driving the hardware will be discussed.

도 2는 본 발명에 따른 무인 교통 단속시스템의 소프트웨어 구성도이다. 도 2에 도시된 바와 같이, 촬영수단(100)에는 차량에 대한 IP카메라(101a,101b,102)를 운영하기 위한 프로그램만이 위치하고 있는데, 결국 이에 대한 작동 역시 제어수단(200)에 의해서 이루어진다. 이러한 소프트웨어의 구성은 촬영수단(100)과의 연결을 보여주는 UPPC(204), 스피커(105)에서 출력되는 음성에 대한 조절을 담당하는 보이스텍스트(205)를 구비하고 있다.2 is a software configuration diagram of an unmanned traffic control system according to the present invention. As shown in FIG. 2, only a program for operating the IP cameras 101a, 101b, and 102 for the vehicle is located in the photographing means 100, and the operation thereof is also performed by the control means 200. The configuration of the software includes a UPPC 204 showing a connection with the photographing means 100, and a voice text 205 for controlling the voice output from the speaker 105.

촬영수단(100)이 위치하는 로컬영역에는 IP카메라(101a,101b,102)에 대한 영상관리시스템(201)과 돔형 IP카메라(102)의 위치를 관리하기 위한 소프트웨어(202)가 위치하고 있다. 그래서 현재 영상 전송상태를 관리하는 것이 가능하고, 또한 돔형 IP카메라(102)에 대한 위치제어가 가능해진다. In the local area where the photographing means 100 is located, the image management system 201 for the IP cameras 101a, 101b, and 102 and the software 202 for managing the position of the dome type IP camera 102 are located. Therefore, it is possible to manage the current video transmission status, and also to control the position of the dome-type IP camera 102.

또한 차량의 움직임을 쫓아가면서 차량의 번호판을 검지하는 차량검지기(203), 차량의 번호판을 보고 문자인식을 하는 번호인식프로그램 UPLPR(206)을 가지고 있다. In addition, the vehicle detector 203 detects the license plate of the vehicle while following the movement of the vehicle, and has a number recognition program UPLPR 206 for character recognition by looking at the license plate of the vehicle.

여기에 각 촬영수단(100)에 대한 차량의 소통상황을 모니터링하는 UPMS(207), 촬영수단(100)으로부터 제 1,제 2 고정형, 돔형 IP카메라(101a,101b,102)에서 촬영된 영상을 수신받고 있는 상태를 데이터베이스의 형태로 출력하는 UPPS(208)를 가지고 있다.Here, the image captured by the first, second fixed, dome-type IP cameras 101a, 101b, and 102 from the UPMS 207 and the photographing means 100 for monitoring the traffic of the vehicle with respect to each photographing means 100 is shown. It has a UPPS 208 that outputs the state being received in the form of a database.

또한 각종 주정차 위반차량에 대한 정보를 저장하는 DB서버(110), 3개의 제 1,2 고정형, 돔형 IP카메라(101a,101b,102)로부터 로컬영역의 실제 상황을 실시간으로 전송받는다. 게다가 자동 또는 수동의 방식으로 불법 주정차 차량에 대한 사진 촬영을 수행하는 UPM(210)을 구비하고 있어서 차량의 검색이 용이하다. 사실 자동 또는 수동의 방식을 구비하고 있는 것은 종래의 기술에서도 가능하였다. 하지만 기능이 실제로 큰 역할을 하지 못하였으나 하나의 제어수단(200)에서 제어하게 되면서 고장에 대한 점검이 용이하다.In addition, the real-time situation of the local area is transmitted in real time from the DB server 110, which stores information on various parking vehicle violations, three first and second fixed type, dome type IP cameras (101a, 101b, 102). In addition, the vehicle has a UPM 210 for photographing the illegal parking vehicle in an automatic or manual manner, so that the vehicle can be easily searched. In fact it is possible in the prior art to have an automatic or manual approach. However, the function did not really play a big role, but it is easy to check for the failure while being controlled by one control means (200).

또한 이러한 UPM(210)로부터 위반된 차량에 대한 초기 위반 사진 영상과, 최 종 위반 영상을 공급받아 이들 차량별로 견인에 대한 고지서를 발부하는 UPES(210)로 구성되어 있다.In addition, it is composed of the UPES (210) for receiving the initial violation picture image and the last violation image for the vehicle violated from the UPM (210) to issue a notice for towing for each vehicle.

여기서의 소프트웨어는 주로 제1, 제2고정형, 돔형 IP카메라(101a,101b,102), 앰프(104), 스피커(105), 전광판(106) 등의 장치를 제어하고 교통 위반 차량에 대한 판단을 하기 위한 것이다. 이러한 장치 또는 불법주정차 차량에 대한 처리 기능에 따라 다양한 사용자 그래픽 인터페이스(graphic user interface)를 갖추는 것이 가능하다.The software here mainly controls devices such as the first, second fixed, dome-type IP cameras 101a, 101b, 102, amplifiers 104, speakers 105, billboards 106, and makes judgments about traffic violation vehicles. It is to. It is possible to have various graphical user interfaces according to the processing functions for such devices or illegal parking vehicles.

또한 이러한 제어수단은 텍스트 입력을 위한 키보드 장치와 이러한 키보드에 의해 입력된 텍스트를 음성신호로 변환하는 문자음성 변환수단을 더 포함한다. 여기에 촬여수단은 통신수단을 통해 전송된 음성신호를 출력하는 스피커(105)를 더 포함하고 있음은 상술한 바와 같다. The control means further includes a keyboard device for text input and text-to-speech converting means for converting text input by the keyboard into a voice signal. Here, the photographing means further includes a speaker 105 for outputting a voice signal transmitted through the communication means as described above.

도 3은 본 발명에 따른 제어수단(200)과 각각의 IP카메라(101a,101b,102)의 연결을 보여주는 UPPC(204)의 작동상태도이다. 도 3에 도시된 바와 같이, 로컬 IP(301)는 로컬카메라(101a,101b,102)의 IP주소를 보여주고, 재접속정보여부(305)는 연결상태를 나타낸다. 또한 UPPC(204)에서는 로컬 IP카메라(101a,101b,102)에서 촬영된 영상이 저장되어 있는 경로(303)를 보여준다. 또한 채널수(304)에는 현재 센터영역과 연결되어 있는 로컬영역의 개수를 보여준다. 본 발명에 따른 IP카메라를 이용한 무인 교통 단속시스템의 경우에는 30개의 로컬영역에 대한 연결을 모델로 하여 설정이 되기는 하였다. 3 is an operational state diagram of the UPPC 204 showing the connection of the control means 200 and the respective IP cameras (101a, 101b, 102) according to the present invention. As shown in FIG. 3, the local IP 301 shows IP addresses of the local cameras 101a, 101b, and 102, and the reconnection information 305 indicates a connection state. In addition, the UPPC 204 shows a path 303 in which images captured by the local IP cameras 101a, 101b, and 102 are stored. In addition, the number of channels 304 shows the number of local areas currently connected to the center area. In the case of an unmanned traffic control system using an IP camera according to the present invention, the connection to 30 local areas is set as a model.

이를 위해서 본 발명에 따른 무인교통단속시스템의 경우에는 제어수단(200)에 촬영수단(100)이 20~30개가 연결되어 있고, 이러한 제어수단(200)은 지방자치단체의 서버컴퓨터이다. 또한 제어수단(200)에는 복수의 촬영수단(100)과 통신수단이 연결되어 있어서 복수 개의 촬영수단(100)을 제어하는 것이 가능하다. To this end, in the case of the unmanned traffic control system according to the present invention, 20 to 30 photographing means 100 are connected to the control means 200, and the control means 200 is a server computer of a local government. In addition, the control means 200 is connected to the plurality of photographing means 100 and the communication means it is possible to control the plurality of photographing means (100).

하지만 경우에 따라서는 이를 확장하는 것 역시 제 1,2고정형, 돔형 IP카메라(101a,101b,102)와 허브(103)만 설치하면 되므로 아주 용이하다. 또한 출력장치의 하나인 전광판(106)이 정상적으로 작동하고 있음을 쉽게 확인할 수 있다. 게다가 고장이 발생한 경우 고장에 대한 판단이 아주 신속하게 이루어짐을 UPPC(204)라는 소프트웨어가 제어수단(200)에 위치하고 있음을 통해 확인할 수 있다. However, in some cases, it is also very easy to expand the first and second fixed type, dome type IP cameras 101a, 101b, 102 and the hub 103 only. In addition, it is easy to confirm that the electric sign 106, which is one of the output devices, is operating normally. In addition, it can be confirmed through the fact that the software called UPPC 204 is located in the control means 200 that the determination of the failure is made very quickly when a failure occurs.

UPMS(207)는 모니터링 서버프로그램이라고 할 수 있는데, 각각의 촬영수단(100)에 대한 모니터링 상태를 보여준다. 즉 센터영역에서 연결을 시도하는가의 여부에 따라 모니터링 상태가 제어된다. 물론 30개의 로컬영역(100)에 대하여 동시에 무인 교통 단속을 수행하기 위해서는 30개의 지역에서 촬영된 사진이 UPMS(207)에 표시되어야 한다. 이처럼 UPMS(207)에서는 불법주정차한 차량에 대한 정보를 얻고자 하는 각각의 촬영수단(100)에 대하여 연결을 하게 된다. The UPMS 207 may be referred to as a monitoring server program, and shows a monitoring state for each photographing means 100. That is, the monitoring state is controlled according to whether or not the connection is attempted in the center area. Of course, in order to simultaneously perform unmanned traffic control for 30 local areas 100, pictures taken in 30 areas should be displayed on the UPMS 207. In this way, the UPMS 207 is connected to each photographing means 100 to obtain information about the illegally parked vehicle.

UPPS(208)는 자료처리 서버(109)에 위치한다. 상술한 바와 같이 연결되어지는 촬영수단(100)에서 시간의 경과에 따른 사진 촬영 결과를 전송하고 있음을 알 수 있다. 여기에는 촬영시간에 대한 정보와 촬영지역에 대한 정보가 포함되어 있다. 또한 이러한 자료처리 서버(109)에서는 환경설정에 따라 각각의 촬영수단(100)과 연결되어 있는 스피커(106)에서 방송되는 멘트에 대한 제어가 가능하게 되고, 음성메시지에 대한 변경 또한 제어가 가능하도록 구성되어 있다. The UPPS 208 is located at the data processing server 109. It can be seen that the photographing means 100 connected as described above is transmitting the photographing result over time. This includes information about the shooting time and information about the shooting area. In addition, the data processing server 109 can be controlled to the announcement broadcast from the speaker 106 is connected to each recording means 100 according to the environment setting, and to change the voice message can also be controlled Consists of.

여기에 DB서버(110)가 연결되어 있는 데, 이러한 DB서버(110)는 각종의 자료를 저장하고 있어서 앞에서 상술한 자료 처리 서버(109)에 대한 데이터베이스를 제공하는 역할을 수행한다. 여기에다가 각종의 위반 차량에 대한 정보도 저장되어 있어서 앞에서 상술한 자료처리서버(109)의 사용자는 이러한 데이터베이스를 기반으로 하여 단속지시를 하거나 촬영수단(100)이 위치하는 지역에 대한 명령을 내리는 것이 가능하게 된다. 이러한 명령은 음성의 형태일 수 있고, 그래픽의 형태일 수도 있다. 그래픽 형태는 전광판(105)을 통해서 출력하는 것을 말한다.The DB server 110 is connected to the DB server 110, which stores a variety of data and serves to provide a database for the data processing server 109 described above. In addition, information on various violation vehicles is also stored, so that the user of the above-described data processing server 109 can give a command to the area where the photographing means 100 is located based on such a database. It becomes possible. Such a command may be in the form of a voice or may be in the form of a graphic. The graphic form refers to output through the electronic display board 105.

이를 위해서 제어수단에는 문자메시지를 전송하는 문자메시지 전송수단을 더 포함하고 있으며, 촬영수단(100)은 통신수단을 통해 전송된 문자메시지를 표시하는 전광판(106)을 더 포함하고 있다. To this end, the control means further includes a text message transmission means for transmitting a text message, and the photographing means 100 further includes an electronic display board 106 for displaying the text message transmitted through the communication means.

도 4에서는 본 발명에 따른 제 1, 제 2고정형 IP카메라와 돔형 IP카메라의 촬영을 제어하는 UPM(210)의 구성을 보여주는 작동상태도이다. 도 4에 도시된 바와 같이 본 발명에 따른 UPM(210)은 사용자의 선택에 따라 선택구역을 선정하는 것이 가능하다. 즉 부산 동구 범일2동, 또는 구로구 방배동, 또는 사이트 테스트 또는 회사내부 중의 어느 하나를 선택하여 라디오버튼 컨트롤(404)을 누르면 광랜(114)을 통하여 제1 고정형 IP카메라(101a), 제2 고정형 IP카메라(101b)와 돔형 IP카메라(102)에서 영상이 전송되어 온다. 이때 채널 1에서 촬영된 영상(402)은 제 1고정형 IP카메라(101a)에서 보여진다. 채널 2에서 촬영된 영상(403)은 제 2고정형 IP카메라(101b)에서 촬영된 영상을 실시간으로 보여준다. 따라서 제어수단(200)에서 이러한 고정형 IP카메라(101a, 101b)로부터 촬영된 영상을 보면서 제어하는 것이 가능하다. Figure 4 is an operating state diagram showing the configuration of the UPM 210 for controlling the shooting of the first, second fixed IP camera and the dome-type IP camera according to the present invention. As shown in FIG. 4, the UPM 210 according to the present invention may select a selection zone according to a user's selection. That is, the Bumil 2-dong, Busan Dong-gu, Bangbae-dong, Guro-gu, or the site test or the company inside the radio button control 404, the first fixed IP camera 101a, the second fixed IP via the optical LAN 114 Images are transmitted from the camera 101b and the dome type IP camera 102. At this time, the image 402 taken from the channel 1 is shown by the first fixed IP camera 101a. The image 403 captured in the channel 2 shows the image captured by the second fixed IP camera 101b in real time. Therefore, it is possible to control while viewing the image taken from the fixed IP camera (101a, 101b) in the control means 200.

이때 불법으로 주정차한 차량이 발견되면, 돔형 IP카메라(102)가 팬/틸트/줌 동작을 시작한다. 그래서 불법 주정차한 차량에 포커싱을 맞춘다. 즉 실시간으로 어떠한 지역의 주차 감시가 가능하다. 또한 이러한 차량에 주차위반에 대한 정보는 촬영되는 모니터(401,402,403)아래에 데이터베이스(405)의 형태로 출력되어 보여진다. 이처럼 본 발명에 따른 돔형 IP카메라(102)는 팬틸트 동작이 가능한 특징을 가지고 있다. At this time, if an illegally parked vehicle is found, the dome-type IP camera 102 starts a pan / tilt / zoom operation. So it focuses on illegally parked cars. In other words, parking monitoring of any area is possible in real time. In addition, the information about the parking violation in the vehicle is displayed in the form of a database 405 under the monitor (401, 402, 403) to be photographed. As described above, the dome-type IP camera 102 according to the present invention has a feature capable of pan tilt operation.

이로부터 제1, 제2 고정형, 돔형 IP카메라(101a,101b,102)가 원격으로 제어된다는 것을 확인할 수 있다. 또한 이러한 소프트웨어에서는 자동모드(406)로 줌/포커싱이 가능하였지만 UPM(210)에서는 이러한 것에 대한 제어 역시 가능하다. 즉 위에 기재한 장소에서 작동하는 돔형 IP카메라(102)를 팬/틸트/줌 등의 동작이 가능하도록 해준다. 도 4에서는 자동으로 작동하는 모드에서 UPM(210)을 운영하고 있으므로 오른쪽(408), 왼쪽(407), 위(410), 아래(409) 등의 동작에 대한 작용버튼은 비활성화된 상태이다. 본 발명에 따른 UPM(210)은 또한 단속 간격에 대한 조절이 가능하도록 시간 간격 조절 버튼(411)을 구비하고 있다. From this, it can be seen that the first, second fixed, dome-type IP cameras 101a, 101b, and 102 are remotely controlled. In addition, in such software, zooming / focusing was possible in the automatic mode 406, but the UPM 210 can control the same. That is, the dome-type IP camera 102 operating in the above-described place enables the operation such as pan / tilt / zoom. In FIG. 4, since the UPM 210 is operated in an automatically operating mode, action buttons for operations of the right 408, the left 407, the up 410, the bottom 409, and the like are inactive. UPM 210 according to the present invention is also provided with a time interval adjustment button 411 to enable adjustment for the intermittent interval.

제1, 제2 고정형 IP카메라(101a,101b)의 경우에는 자동적으로 이러한 차량의 정지여부에 대한 판단을 한다. 이러한 판단 결과 로컬 영역(100)안에 차량이 정지했다고 판단이 되면 돔형 IP카메라(102)가 사진 촬영을 할 수 있도록 고정형 IP카메라(101)에서 인식된 차량의 위치정보를 전달받는다. 이때 전송을 받는 경로는 고정형 IP카메라(101a,101b)로부터 직접 받는 것이 아니라, 고정형 IP카메라(101a,101b)와 연결된 랜(114)을 통하여 제어수단(200)으로 위치정보가 로컬 영역의 IP카메라(101a,101b,102)에 대한 IP정보가 전달이 되고, 제어수단(200)에서는 이러한 정보를 로컬영역의 돔형 IP카메라(102)로 전달을 한다. 이러한 정보를 전달받은 돔형 IP카메라(102)는 이러한 위치정보에 기초하여 회전동작이 발생한다. 그리고 동시에 촬영되는 영상을 랜(114)을 통하여 전송한다. 본 발명에서는 이러한 영상신호와 제어신호를 서로 다른 방식으로 전송하는 방법을 선택하였다. 즉 영상신호의 경우에는 용량이 크므로 압축하여 제, 제2 고정형, 돔형 IP카메라(101a, 101b, 102)에서 제어수단(200)으로 일방향으로 전송되는 방식이다. 하지만 제어신호의 경우에는 제1, 제 2 고정형, 돔형 IP카메라와 제어장치(200)의 통신이라고 할 수 있는 데, 비압축 방식이며 양방향 통신방식으로 이루어진다. In the case of the first and second fixed IP cameras 101a and 101b, a determination is made as to whether the vehicle is stopped. As a result of this determination, when it is determined that the vehicle is stopped in the local area 100, the dome-type IP camera 102 receives the position information of the vehicle recognized by the fixed IP camera 101 so as to take a picture. At this time, the path receiving the transmission is not directly received from the fixed IP cameras 101a and 101b, but the location information is transmitted to the control means 200 through the LAN 114 connected to the fixed IP cameras 101a and 101b. IP information for the 101a, 101b, 102 is transmitted, and the control means 200 transmits the information to the dome type IP camera 102 in the local area. The dome-type IP camera 102 that has received such information generates a rotation operation based on the location information. At the same time, the captured video is transmitted through the LAN 114. In the present invention, a method of transmitting the video signal and the control signal in different ways is selected. That is, in the case of the video signal, since the capacity is large, it is compressed and transmitted in one direction from the second fixed type and dome type IP cameras 101a, 101b, and 102 to the control means 200. However, in the case of the control signal, it can be said that the communication between the first, second fixed, dome-type IP camera and the control device 200, it is an uncompressed and bi-directional communication.

따라서 UPM(210)의 사용자는 실시간으로 불법주정차한 차량에 대한 정보를 제공받을 수 있다. 만일 수동모드라면 사용자가 차량의 위치좌표에 대한 정보를 입력할 수 있다. 이러한 제 1, 제 2 고정형, 돔형 IP카메라(101a,101b,102)의 촬영에 대한 프로그래밍의 기능이 촬영수단(100)이 위치하는 영역에서 이루어지는 것이 아니라, 센터영역의 제어수단(200)에서 이루어지는 것이 본 발명의 또 다른 특징이다. Therefore, the user of the UPM 210 may be provided with information about the illegally parked vehicle in real time. In the manual mode, the user may input information about the position coordinates of the vehicle. Programming of the first, second fixed and domed IP cameras 101a, 101b, and 102 is not performed in the region in which the photographing means 100 is located, but in the control means 200 of the center region. It is another feature of the present invention.

이러한 UPM(210)에서는 라디오 버튼 컨트롤의 형태로 각각의 지역에 대한 선정이 가능하고 이러한 지역에 대한 추가 역시 프로그래밍과정을 통해서 이루어진다. 그러므로 다른 무인 교통 단속시스템이 가지지 못하는 주차지역에 대한 확장이 용이한 장점을 갖는다. 물론 여기서 더 자세히 상술하지 않았지만 현재의 IPv4의 형태를 갖는 제 1, 제 2 고정형, 돔형 IP카메라에 대한 IP주소설정이 먼저 이루어져야 한다. 이러한 주소설정에 따라 라디오버튼 컨트롤의 버튼을 선택하는 동작을 하면 해당 버튼에 해당하는 인터넷 주소에 대한 IP정보가 전송이 된다. 이와 동시에 영상신호가 15fps(frame per second)의 속도로 전달이 된다. 특별히 영상신호의 전달속도에 대해서 제한이 필요한 것은 아니지만 너무 느린 속도로 전송이 되면 실시간으로 파악이 어렵고, 빠른 속도로 전송이 된다면 데이터의 오류율이 높아지는 특성을 보인다. In the UPM 210, it is possible to select each region in the form of a radio button control, and the addition of these regions is also made through a programming process. Therefore, it is easy to expand the parking area that other unmanned traffic control systems do not have. Of course, although not described in more detail here, the IP address setting for the first, second fixed and dome type IP cameras having the current IPv4 form must be made first. When the button of the radio button control is selected according to the address setting, IP information about the Internet address corresponding to the button is transmitted. At the same time, the video signal is transmitted at a rate of 15 fps (frame per second). Although it is not necessary to limit the transmission speed of the video signal, it is difficult to grasp in real time when the transmission speed is too slow, and the error rate of the data is increased when the transmission speed is high.

UPM(210)에서는 어떤 지역의 라디오버튼 컨트롤을 누르면, 내부적으로 프로그래밍된 데이터에 따라 그곳의 촬영영상이 실시간으로 전달이 된다. 이때 3대의 제 1, 제 2고정형, 돔형 IP카메라(101a, 101b, 102)는 허브(103)를 통해서 연결되어 있어서 한 촬영수단(100)에 대한 원거리영상정보와 근거리영상정보가 동시에 전달되는 장점을 가진다. In the UPM 210, when a radio button control of a certain area is pressed, the captured image therein is transmitted in real time according to internally programmed data. At this time, the three first, second fixed, dome-type IP cameras 101a, 101b, and 102 are connected through the hub 103, so that the long-range image information and the short-range image information for one photographing means 100 are simultaneously transmitted. Has

이와 같이 제어수단(200)은 통신수단을 통해 돔형 IP카메라(102)를 제어하기 위한 카메라 제어수단으로서 UPM이라는 소프트웨어를 구비하고 있다.As described above, the control means 200 is provided with software called UPM as a camera control means for controlling the dome-type IP camera 102 through a communication means.

UPLPR(206)은 번호인식용 프로그램이라고 할 수 있다. 즉 이는 돔형 IP카메라(102)로부터 어떠한 차량에 대한 번호판의 위치에 대한 판단이 되면 촬영작업을 수행할 준비를 한다. 이러한 번호인식 시스템은 템플릿 정합방식을 사용하는데, 본 발명에 따른 프로그램에서는 예전의 번호 인식방식인 지역에 대한 명칭을 포함하는 번호판에 대한 인식이 가능하다. 하지만 지역에 대한 정보를 포함하지 않는 현재의 번호판에 대하여 인식하는 프로그램 역시 개발되어 있으며 이러한 것은 통상의 지식을 가진 자에게 자명한 사항이므로 자세한 설명은 약한다. The UPLPR 206 may be referred to as a number recognition program. That is, when it is determined from the dome-type IP camera 102 about the position of the license plate for a certain vehicle, it prepares to perform a photographing operation. Such a number recognition system uses a template matching method. In the program according to the present invention, a license plate including a name for a region, which is an old number recognition method, can be recognized. However, programs have also been developed that recognize current license plates that do not contain information about the region. These are obvious to those with ordinary knowledge, so the detailed description is weak.

따라서 번호판 인식시스템의 구성에 대하여 간략히만 설명하면 먼저 번호판이 가지는 지역과 자음, 숫자의 구성으로 나누어 각각 파악하는 방식이다. 그리고 이러한 세가지 서로 다른 범주에 속하는 기호에 대한 인식이 끝나게 되면 차량번호에 대한 인식은 종료된다. 그리고 이러한 차량번호에 대한 촬영은 앞에서 상술한 돔형 IP카메라(102)가 담당한다. 촬영된 영상이 허브(103)와 랜(114)으로 구성된망(116)을 통해서 전송이 되면, UPLPR(206)에 의해서 차량번호 인식과정이 수행된다. 이러한 차량번호에 대한 데이터는 랜(114)을 통해서 연결된 DB서버(110)와 외부연계서버(113)를 통해서 저장된다. Therefore, if you briefly explain the configuration of the license plate recognition system, it is a method of identifying each of the license plates by dividing them into regions, consonants, and numbers. When the recognition of the symbols belonging to these three different categories ends, the recognition of the vehicle number is terminated. And the photographing of the vehicle number is in charge of the dome-type IP camera 102 described above. When the captured image is transmitted through the network 116 composed of the hub 103 and the LAN 114, the vehicle number recognition process is performed by the UPLPR 206. The data about the vehicle number is stored through the DB server 110 and the external connection server 113 connected through the LAN 114.

UPES(211)는 외부연계서버(113)와 연결된 프로그램이라고 할 수 있는 데, 위반된 차량번호에 대한 자료를 UPLPR(206)프로그램으로부터 넘겨받는다. 이러한 UPLPR(206)으로부터 넘겨받은 자료는 차량번호에 대한 데이터를 포함하며 위반 날짜와 시각에 대한 정보가 포함되어 있다. 이러한 데이터는 인쇄수단(미도시)와 연결되어 있어서, 외부로 출력이 된다. 또한 검색조건을 설정하는 방법에 의해서 다양한 상태의 출력을 얻는 것 또한 가능하다. The UPES 211 may be referred to as a program connected to the external connection server 113, and receives data on the violated vehicle number from the UPLPR 206 program. The data handed over from the UPLPR 206 includes data on the license plate number and includes information on the date and time of the violation. This data is connected to the printing means (not shown), so that it is output to the outside. It is also possible to obtain outputs of various states by setting search conditions.

상술한 바와 같이 인터넷을 통한 촬영수단(100)과 제어수단(200)과의 연결은 실시간으로 이루어진다. 본 발명에 따른 제 1,2고정형, 돔형 IP카메라(101a,101b,102)를 이용한 무인교통 단속시스템은 이러한 실시간 연결을 통한 무인 교통 단속을 효과적으로 하기 위해서 각종의 프로그램이 탑재되도록 설계되어 있다. As described above, the connection between the photographing means 100 and the control means 200 through the Internet is made in real time. The unmanned traffic control system using the first, second, fixed, dome type IP cameras 101a, 101b, and 102 according to the present invention is designed to mount various programs to effectively control the unmanned traffic through the real-time connection.

이러한 프로그램의 유용성을 높이기 위해서 촬영수단(100)과의 연결상태를 보여주는 UPPC(204)가 센터영역에 위치한다. UPLPR(206) 역시 제어수단(200)이 위치하는 곳에 있어서 문자인식 과정이 센터영역에서 이루어진다. 그리고 돔형 IP카메라(102)에서 줌인/줌아웃 과정을 거쳐 포커싱 작업 후 차량의 번호판을 촬영하고 인식한다. 이것이 가능하게 된 것은 고화질의 IP카메라(101a,101b,102)를 사용하고 또한 광랜(114)을 통한 고속, 고정밀의 데이터 전송이 이루어지기 때문이다.In order to increase the usefulness of such a program, a UPPC 204 showing a connection state with the photographing means 100 is located in the center area. UPLPR (206) is also the character recognition process in the center area where the control means 200 is located. In addition, the dome-type IP camera 102 performs a zoom-in / zoom-out process and photographs and recognizes a license plate of the vehicle. This is possible because the high-quality IP cameras 101a, 101b, and 102 are used, and high-speed, high-precision data transmission through the optical LAN 114 is achieved.

본 발명에서는 10~100Mbps의 광랜(114)을 사용하므로 고속의 선명한 영상전송이 가능하다. 이러한 광랜(114)은 광케이블을 사용하는 랜(114)을 말하는데, 광케이블은 종래의 동축케이블에 비해서 전송손실이 없고, 데이터의 전송속도가 빠른 특징을 가지고 있다. In the present invention, since the optical LAN 114 of 10 ~ 100Mbps is used, high-speed clear image transmission is possible. The optical LAN 114 refers to a LAN 114 using an optical cable. The optical cable has no transmission loss and has a faster data transmission rate than a conventional coaxial cable.

뿐만 아니라, 이러한 IP카메라(101a,101b,102)에 대한 제어가 제어수단(200)에 일임되어 있으므로 고장에 대한 판단이 용이하다. 이는 종래의 발명에서 장비제어기(111)가 촬영수단(100)이 위치하는 곳에 위치함에 따라 고장에 대한 판단이 어렵고, 고장에 대한 대응이 어려웠던 난점에 대한 해결책이라고 할 수 있다. 즉 고장이 발생하더라도 그에 대한 파악이 어렵고 대응이 어려웠던 것에 비해 제어수단(200)에서 제어할 수 있게 된다. 이는 장비제어기(111)가 원격에 위치하고 있어서 제어가 어려웠던 종래의 발명에 대한 해결책이 된다고 할 수 있다. 즉 자동식으로만 촬영하고 그에 대한 촬영결과를 제어수단(200)에서는 수동으로 입력받을 수 밖에 없었는데, 본 발명에서는 수동식과 자동식으로 운영하는 것이 가능하다.In addition, since the control of the IP camera (101a, 101b, 102) is assigned to the control means 200, it is easy to determine the failure. This can be said to be a solution to the difficulty in determining the failure as the equipment controller 111 is located where the photographing means 100 is located in the conventional invention, and difficult to respond to the failure. In other words, even if a failure occurs, it is difficult to grasp and difficult to respond to the control means 200 can be controlled. This can be said to be a solution to the conventional invention, in which the equipment controller 111 is located at a remote place and control is difficult. That is, only the automatic shooting and the photographing result for the control means 200 had to be input manually, but in the present invention it is possible to operate manually and automatically.

뿐만 아니라 본 발명에서는 고화질의 IP카메라(101a,101b,102)를 사용하기 때문에 종래의 카메라 전송방식인 영상입력에 의한 비디오 서버 전송방식을 사용함으로 인한 영상처리의 한계전송 특성을 극복하였다. 즉 본 발명에서는 제1,2 고정형, 돔형 IP카메라(101a,101b,102)에 IP주소를 부여하고 이런 조건하에서 광랜(114)을 통해 영상 전송이 이루어진다. 이에 따라 데이터 전송에 있어서 외부의 영향을 받지 않고, 잡음이나 누화가 발생하지 않는다. 또한 온도변화에 안정적이고 보안성이 뛰어나며 크기와 무게가 작으므로 설치가 용이하다. 게다가 에러 발생율이 적고, 생산가격이 저렴한 장점을 보유하고 있다.In addition, the present invention overcomes the limited transmission characteristics of the image processing by using the video server transmission method by the video input, which is a conventional camera transmission method because the high-definition IP cameras (101a, 101b, 102) are used. That is, in the present invention, IP addresses are assigned to the first and second fixed and dome type IP cameras 101a, 101b, and 102, and image transmission is performed through the optical LAN 114 under such conditions. Accordingly, data transmission is not influenced by the outside, and no noise or crosstalk occurs. In addition, it is easy to install because it is stable to temperature changes, excellent in security, and small in size and weight. In addition, it has the advantage of low error rate and low production price.

따라서 검지 카메라인 제 1, 제 2고정형 IP카메라(101a,101b)에서 촬영된 영상을 멀리 떨어진 영역에서 통신수단을 이용해 영상을 전송한다. 또한 제 1, 제 2고정형 IP카메라(101a,101b)에 내장된 위치좌표 검출기능에 따라 이러한 데이터는 돔형 IP카메라(102)에 전달이 된다. 이 또한 통신수단을 통해 연결되어 있다. 상술한 바와 같이 이때 영상 신호에 대한 전송방식은 압축형 데이터를 보내는 형태로 일방향 통신이라고 할 수 있다. 하지만 제어수단(200)에서 출력하는 제어신호나 제어수단(200)으로 보내는 신호는 양방향 신호이다. 이때의 신호는 굳이 압축을 하지 않아도 대용량 전송이 아니므로 무방함은 상술한 바와 같다. Therefore, the first and second fixed IP cameras 101a and 101b, which are the detection cameras, transmit the image using a communication means in an area far away. In addition, according to the position coordinate detection function built in the first and second fixed IP cameras 101a and 101b, such data is transmitted to the dome-type IP camera 102. This is also connected via communication means. As described above, the transmission method for the video signal may be referred to as one-way communication in the form of sending compressed data. However, the control signal output from the control means 200 or the signal sent to the control means 200 is a bidirectional signal. At this time, since the signal is not a large capacity transmission without the need for compression, it is as described above.

또한 여기서 영상신호를 보내는 경우, 이러한 영상신호는 일종의 동영상으로 15fps(frame per second)의 전송속도를 갖는다. 이러한 전송이 가능하게 하는 랜(114)은 광랜인 것이 바람직하다. 이러한 광랜은 고속의 전송속도를 가지면서도 데이터오류율이나 잡음에 의한 영향을 받지 않는 특성을 가지고 있다. 광랜은 일반적으로 최대 100메가의 다운링크 및 업링크 속도를 낼 수 있는 초고속 인터넷 서비 스를 말한다. 물론 빛처럼 빠른 속도는 아니지만 종래 인터넷보다 10배이상 빠른 데이터 통신이 가능하다. 우선 광랜이라는 광통신 방식에는 FTTH(Fiber to the Home)가 있다. 이 방식은 코어와 클래딩으로 구성된 광섬유케이블을 사용하여 데이터를 전송하고 그 이후에 모뎀 혹은 광단자 등을 통해 각 PC로 인입하는 것을 말한다. 이러한 경우 광케이블을 연결회선이 단독으로 사용하기 때문에 속도가 안정적이고 외부환경의 영향을 거의 받지 않는다. In addition, when a video signal is sent, the video signal is a kind of video and has a transmission rate of 15 fps (frame per second). The LAN 114 that enables this transmission is preferably an optical LAN. The optical LAN has a high transmission speed but is not affected by data error rate or noise. LANs are typically high-speed Internet services that can deliver up to 100 megabytes of downlink and uplink speeds. Of course, it is not as fast as light, but data communication is possible 10 times faster than the conventional Internet. First, there is FTTH (Fiber to the Home) in the optical communication method called optical LAN. This method uses a fiber optic cable consisting of a core and cladding to transfer data, and then enters each PC through a modem or optical terminal. In this case, since the connection cable is used alone, the speed is stable and it is hardly affected by the external environment.

본 발명에 따른 제1, 2고정형, 돔형 IP카메라(101a,101b,102)를 사용한 무인 교통 단속시스템에서는10~100Mbps의 전송속도를 갖는 광랜(114)을 사용하여 패킷 전송시 잡음의 영향을 받지 않고, 안정적으로 데이타의 송수신이 가능한 접속방식을 선택하였다. 이러한 광랜(114)을 이용하는 방식은 종래의 ADSL 또는 VDSL을 사용하는 방식보다 광대역의 통신이 가능하고 빠른 전송속도를 갖는 장점이 있다. In the unmanned traffic control system using the first, second fixed, dome-type IP cameras 101a, 101b, and 102 according to the present invention, noise is not affected by packet transmission using the optical LAN 114 having a transmission rate of 10 to 100 Mbps. Instead, we chose a connection method that could reliably transmit and receive data. The method using the optical LAN 114 has the advantage that the broadband communication is possible and has a faster transmission speed than the conventional method using the ADSL or VDSL.

이러한 광통신을 이용한 전송방식을 사용하므로써 연결회선이 끊어지는 현상이 발생하지 않기 때문에 각 제 1,2 고정형, 돔형 IP카메라(101a,101b,102)의 유지 보수가 용이해진다. 또한 고장이 설사 발생하더라도 이에 대한 대처능력이 우수하므로 빠른 조치가 가능한 특징을 갖는다. By using such a transmission method using optical communication, the disconnection of the connection line does not occur, so that the maintenance of each of the first and second fixed type and dome type IP cameras 101a, 101b, and 102 becomes easy. In addition, even if a breakdown occurs, the ability to cope with this excellent ability to respond quickly.

도 1은 본 발명에 따른 제1, 제2고정형, 돔형 IP카메라를 사용한 무인 교통 단속시스템의 하드웨어구성도.1 is a hardware configuration of an unmanned traffic control system using the first, second fixed, dome type IP camera according to the present invention.

도 2는 본 발명에 따른 제1, 제2 고정형, 돔형 IP카메라를 사용한 무인 교통 단속시스템의 소프트웨어 구성도.Figure 2 is a software configuration of the unmanned traffic control system using the first, second fixed, dome-type IP camera according to the present invention.

도 3은 본 발명에 따른 제어수단와 제 1, 제2 고정형, 돔형 IP카메라의 연결상태를 보여주는 UPPC의 작동상태도.Figure 3 is an operating state diagram of the UPPC showing the connection state of the control means and the first, second fixed, dome-type IP camera according to the present invention.

도 4는 본 발명에 따른 제 1, 제 2 고정형 IP카메라와 돔형 IP카메라의 촬영을 제어하는 UPM소프트웨어의 작용을 보여주는 작동상태도.Figure 4 is an operating state showing the operation of the UPM software for controlling the shooting of the first and second fixed IP cameras and dome-type IP camera according to the present invention.

<도면의 주요부분에 대한 부호 설명><Description of Signs of Major Parts of Drawings>

100:촬영수단,100: photographing means,

101a:제1 고정형 IP카메라,101a: the first fixed-type IP camera,

101b:제2 고정형 IP카메라,101b: second fixed IP camera,

102:돔형 IP카메라,102: Dome type IP camera,

103:허브,103: Hub,

108:단속상황판,108: The situation board,

109:자료처리서버,109: data processing server,

110:DB서버,110: DB server,

111:장비제어기.111: Equipment controller.

112:운영단말기112: operating terminal

113:외부연계서버.113: External connection server.

114:랜,114: LAN,

200:제어수단,200: control means,

203:차량검지기,203: vehicle detector,

204:UPPC,204: UPPC,

205:보이스텍스트,205: Voice text,

206:UPLPR,206: UPLPR,

207:UPMS,207: UPMS,

208:UPPS,208: UPPS,

210:UPM,210: UPM,

211:UPES.211: UPES.

301:로컬아이피,301: Local IP,

304:채널수,304: the number of channels,

305:재접속정보,305: reconnection information,

401:돔형 IP카메라에 대한 모니터,401: monitor for dome type IP camera,

402:제1 고정형 IP카메라에 대한 모니터,402: monitor for the first fixed IP camera,

403:제2 고정형 IP카메라에 대한 모니터.403: A monitor for a second fixed IP camera.

Claims (11)

무인 교통단속시스템에 있어서,In the unmanned traffic control system, 상호 대향하도록 설치되어 주변상황을 감시하기 위한 제 1, 2 고정형 IP카메라(101a,101b)와, 단속대상을 촬영하는 팬틸트 동작이 가능한 돔형 IP카메라(102)와, 통신수단을 통해 전송된 음성신호를 출력하는 스피커(105)와, 상기 통신수단을 통해 전송된 문자메시지를 표시하는 전광판(106)을 포함하여 이루어진 촬영수단(100);Installed to face each other, the first and second fixed IP cameras 101a and 101b for monitoring the surrounding situation, a dome-type IP camera 102 capable of pan tilting to photograph an enforcement target, and voice transmitted through a communication means. Photographing means (100) comprising a speaker (105) for outputting a signal and an electronic display (106) for displaying a text message transmitted through the communication means; 상기 촬영수단(100)과 인접한 위치에서 상기 촬영수단(100)과 연결되어 상기 촬영수단(100)으로부터의 영상출력자체를 네트워크로 전송하기 위한 통신수단; 및Communication means connected with the photographing means (100) at a position adjacent to the photographing means (100) to transmit the image output itself from the photographing means (100) to a network; And 상기 통신수단으로부터 전송된 데이터에 기초하여 단속여부를 결정하는 제어수단(200);을 포함하여 이루어지고,And control means (200) for determining whether to intercept based on the data transmitted from the communication means. 상기 제어수단(200)은 텍스트 문자입력을 위한 키보드 장치;The control means 200 includes a keyboard device for inputting text characters; 상기 키보드 장치에 의해 입력된 텍스트를 음성신호로 변환하여 상기 스피커(105)로 전송하기 위한 문자 음성 변환수단;Text-to-speech means for converting text input by said keyboard device into a voice signal and transmitting it to said speaker 105; 상기 통신수단을 통해 상기 돔형 IP카메라(102)를 제어하기 위한 카메라 제어수단; 및Camera control means for controlling the dome type IP camera 102 via the communication means; And 문자메시지를 상기 전광판(106)으로 전송하는 문자메시지 전송수단;을 포함하여 이루어지고,It comprises a; text message transmission means for transmitting a text message to the electronic display board 106, 상기 제어수단(200)에는 소프트웨어로서,The control means 200 is a software, 상기 돔형 IP카메라(102)로부터 전송된 영상으로부터 차량의 번호판을 검지하기 위한 차량검지기(203);A vehicle detector (203) for detecting a license plate of a vehicle from an image transmitted from the dome-type IP camera (102); 상기 촬영수단(100)과의 연결 상태를 보여주기 위한 UPPC(204);An UPPC 204 for showing a connection state with the photographing means 100; 상기 스피커(105)에서 출력되는 음성에 대한 조절을 담당하는 보이스텍스트(205);Voice text 205 for controlling the voice output from the speaker 105; 상기 차량의 번호판으로부터 문자를 인식하기 위한 UPLPR(206);UPLPR (206) for recognizing characters from the license plate of the vehicle; 상기 촬영수단(100)에 대한 차량의 소통상황을 모니터링하기 위한 UPMS(207);UPMS (207) for monitoring the traffic situation of the vehicle with respect to the photographing means (100); 상기 제 1,제 2 고정형, 돔형 IP카메라(101a,101b,102)에서 촬영된 영상을 수신 상태를 데이터베이스의 형태로 출력하는 UPPS(208); 및An UPPS 208 for outputting a reception state in the form of a database of the image photographed by the first and second fixed and dome type IP cameras 101a, 101b, and 102; And 상기 IP카메라(101a,101b,102)를 구동 및 제어할 수 있는 UPM(210);이 탑재되어 있는 것을 특징으로 하는 무인단속시스템.Unmanned enforcement system, characterized in that it is mounted; UPM (210) for driving and controlling the IP camera (101a, 101b, 102). 삭제delete 삭제delete 삭제delete 제 1항에 있어서,The method of claim 1, 상기 통신수단은 양방향 데이터 통신이 가능한 허브(103)인 것을 특징으로 하는 무인단속시스템.The communication means is an unmanned enforcement system, characterized in that the hub 103 capable of two-way data communication. 삭제delete 삭제delete 제 1항에 있어서,The method of claim 1, 상기 제어수단(200)은 복수의 촬영수단(100) 및 통신수단과 연결되어 있는 것을 특징으로 하는 무인단속시스템.The control means 200 is an unmanned enforcement system, characterized in that connected to the plurality of photographing means 100 and communication means. 제 8항에 있어서,The method of claim 8, 상기 촬영수단(100)과 통신수단은 쌍을 이루어 20~30개 범위에서 연결되고, 상기 제어수단(200)은 지방자치단체의 서버컴퓨터인 것을 특징으로 하는 무인단속시스템. The photographing means (100) and the communication means are connected in a range of 20 to 30 in a pair, the control means 200 is an unmanned enforcement system, characterized in that the server computer of the local government. 제 8항에 있어서,The method of claim 8, 상기 제어수단(200)은 복수의 촬영수단(100)이 촬영한 영상신호를 각각 표시하기 위한 복수의 모니터(401,402,403)를 더 포함하는 것을 특징으로 하는 무인단속시스템.The control means (200) further comprises a plurality of monitors (401, 402, 403) for displaying the video signal photographed by the plurality of photographing means (100), respectively. 삭제delete
KR1020070095107A 2007-09-19 2007-09-19 Automatic police enforcement system of illegal vehicle KR100834012B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070095107A KR100834012B1 (en) 2007-09-19 2007-09-19 Automatic police enforcement system of illegal vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070095107A KR100834012B1 (en) 2007-09-19 2007-09-19 Automatic police enforcement system of illegal vehicle

Publications (1)

Publication Number Publication Date
KR100834012B1 true KR100834012B1 (en) 2008-06-02

Family

ID=39769686

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070095107A KR100834012B1 (en) 2007-09-19 2007-09-19 Automatic police enforcement system of illegal vehicle

Country Status (1)

Country Link
KR (1) KR100834012B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101071715B1 (en) 2010-07-02 2011-10-11 윤형관 System and method for vehicle number ignition based on ip
KR101080219B1 (en) 2009-07-28 2011-11-07 (주)한일에스티엠 System for regulating illegal parking
KR101506153B1 (en) * 2013-09-23 2015-03-26 주식회사 엑스엠 Car-number recognition system adapted for traffic volume
KR102437697B1 (en) * 2022-05-24 2022-08-29 삼성지투비 주식회사 System of supervising illegal parking vehicle capable of tracking managing the vehicle

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050116879A (en) * 2004-06-08 2005-12-13 목인규 Unmanned parking lookout system
KR20060095612A (en) * 2005-02-28 2006-09-01 삼인데이타시스템 (주) The system and the method of a unmanned control for illegality stop and parking car
KR20060099596A (en) * 2005-03-14 2006-09-20 티지정보통신(주) Parrking control system with analog camera
KR20070025946A (en) * 2006-05-17 2007-03-08 (주)한일에스티엠 Announcement broadcasting method of illegal-stopping and parking vehicle and system thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050116879A (en) * 2004-06-08 2005-12-13 목인규 Unmanned parking lookout system
KR20060095612A (en) * 2005-02-28 2006-09-01 삼인데이타시스템 (주) The system and the method of a unmanned control for illegality stop and parking car
KR20060099596A (en) * 2005-03-14 2006-09-20 티지정보통신(주) Parrking control system with analog camera
KR20070025946A (en) * 2006-05-17 2007-03-08 (주)한일에스티엠 Announcement broadcasting method of illegal-stopping and parking vehicle and system thereof

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101080219B1 (en) 2009-07-28 2011-11-07 (주)한일에스티엠 System for regulating illegal parking
KR101071715B1 (en) 2010-07-02 2011-10-11 윤형관 System and method for vehicle number ignition based on ip
KR101506153B1 (en) * 2013-09-23 2015-03-26 주식회사 엑스엠 Car-number recognition system adapted for traffic volume
KR102437697B1 (en) * 2022-05-24 2022-08-29 삼성지투비 주식회사 System of supervising illegal parking vehicle capable of tracking managing the vehicle

Similar Documents

Publication Publication Date Title
KR100768820B1 (en) In-car type illegal vehicles detection system while driving and method of using the same
KR100719458B1 (en) The system and the method of a unmanned control for illegality stop and parking car
CN107645653B (en) Method, device and equipment for tracking shooting by camera and storage medium
KR101397453B1 (en) System for monitoring an image and method thereof
US20040105005A1 (en) Networked camera system and a monitoring method thereof
KR102015956B1 (en) Automatic Number Plate Recognition System and Method for transmitting vehicle information in Gigabit ethernet network
KR100834012B1 (en) Automatic police enforcement system of illegal vehicle
KR101080219B1 (en) System for regulating illegal parking
US20070115109A1 (en) Security system and method for mass transit vehicles
KR100534466B1 (en) Method and apparatus for watching restricted area of parking and stop
KR101510766B1 (en) Monitoring dvr system using emergency sign and multi function sensor
KR101259797B1 (en) An car alarm system that transmit motion image and the operating methode of the same
KR100933931B1 (en) System of supervision for car stop or parking with multi function on same time
KR102120635B1 (en) Speed Dome Camera with pan/tilt and data interface function
WO2015050413A1 (en) Image data of vehicle black box and gis interworking service method
KR20200101792A (en) The CCTV integrated control system using black box
CN109727423A (en) Two lines bus formula fire detecting arrangement
WO2022017192A1 (en) Edge computing device, and edge computing method and system
KR20100135103A (en) Security system using a different kind camera and security method thereof
KR200415231Y1 (en) In-car type illegal vehicles detection system while driving
KR20160000556A (en) Real-time traffic information processing system using unattended traffic information recording device
CN212463305U (en) Edge calculation device and edge calculation system
KR20050101640A (en) System for auto-monitoring of parking or stopping violation and method for controlling the same
KR20050091596A (en) Manless a park and stop regulation system and a method using thereof
KR100746129B1 (en) Semi-Automatic Detecting Method at Automatic Police Enforcement System of Illegal-stopping and Parking Vehicle and System thereof

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130401

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20140418

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160509

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20170421

Year of fee payment: 10