KR20210094726A - Network based camera control apparatus and method - Google Patents

Network based camera control apparatus and method Download PDF

Info

Publication number
KR20210094726A
KR20210094726A KR1020200008282A KR20200008282A KR20210094726A KR 20210094726 A KR20210094726 A KR 20210094726A KR 1020200008282 A KR1020200008282 A KR 1020200008282A KR 20200008282 A KR20200008282 A KR 20200008282A KR 20210094726 A KR20210094726 A KR 20210094726A
Authority
KR
South Korea
Prior art keywords
poe
camera
network
management server
failure
Prior art date
Application number
KR1020200008282A
Other languages
Korean (ko)
Other versions
KR102301767B1 (en
Inventor
김영탁
장주언
김지환
허치영
황현동
김민철
Original Assignee
영남대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 영남대학교 산학협력단 filed Critical 영남대학교 산학협력단
Priority to KR1020200008282A priority Critical patent/KR102301767B1/en
Publication of KR20210094726A publication Critical patent/KR20210094726A/en
Application granted granted Critical
Publication of KR102301767B1 publication Critical patent/KR102301767B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H04N5/23206—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer And Data Communications (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

The present invention relates to a network-based camera remote control apparatus to automatically recover a communication failure between a power over Ethernet (PoE)camera and a network and allow a manager to recognize a process related to failure recovery. According to the present invention, the network-based camera remote control apparatus comprises: one or more Power over Ethernet (PoE) Internet protocol (IP) cameras; a PoE module simultaneously transferring power and Ethernet to the PoE IP cameras; and a management server using a simple network management protocol (SNMP) to monitor network connection and image information transmission status of the PoE IP cameras connected through an UDP/IP Internet protocol while remotely controlling the PoE IP cameras through the PoE module and performing remote failover procedures for the IP camera in which a failure occurs.

Description

네트워크 기반의 카메라 제어장치 및 방법{Network based camera control apparatus and method}Network based camera control apparatus and method

본 발명은 카메라 제어장치에 관한 것으로, 특히 카메라와 네트워크 간의 통신 장애를 자동 복구함과 아울러 장애복구 관련 과정을 관리자가 인지할 수 있도록 하는 네트워크 기반의 카메라 제어장치 및 방법에 관한 것이다. The present invention relates to a camera control apparatus, and more particularly, to a network-based camera control apparatus and method for automatically recovering a communication failure between a camera and a network and allowing an administrator to recognize a process related to failure recovery.

CCTV 설치는 범죄나 비상상황 발생 시 신속한 대처가 가능할 뿐만 아니라 설치 지역에서의 범죄 예방은 물론 각종 범죄 발생률이 감소함이 통계적으로 확인되고 있다. 그리고 최근 이러한 CCTV를 이용한 영상보안시스템은 단순한 감시형 아날로그 형태에서 IP 네트워크 기반으로 발전하고 있으며, 특정 지역의 촬영 및 감시, 교통관제, 산불/산사태 등과 같은 재해감시의 단순 감시업무에서 벗어나 차량탑재, 원격의료, 화상회의 등과 같은 분야로 확대 적용되고 있다.It is statistically confirmed that CCTV installation not only enables rapid response in the event of a crime or emergency, but also prevents crime in the installation area and reduces the incidence of various crimes. And recently, the video security system using CCTV is evolving from a simple monitoring analog form to an IP network-based, moving away from the simple monitoring task of disaster monitoring such as filming and monitoring of a specific area, traffic control, forest fire/landslide, etc. It is being applied to fields such as telemedicine and video conferencing.

그런데 이처럼 CCTV에 대한 중요성은 커지고 있지만 CCTV를 관리 및 제어하는 전반적인 운용환경은 이에 미치지 못하고 있는 실정이다. 예를 들어 한국등록특허 10-1672970호(선행문헌 1)는 원격지에 위치하는 다수 카메라를 관리하는 기술을 공개하고 있고, 한국공개특허 10-2010-0114680호(선행문헌 2)는 CCTV 카메라를 항상 양호한 상태로 제어하는 기술을 공개하고 있다. However, although the importance of CCTV is growing as such, the overall operating environment for managing and controlling CCTV has not reached this level. For example, Korean Patent No. 10-1672970 (Prior Document 1) discloses a technology for managing multiple cameras located in remote locations, and Korean Patent Publication No. 10-2010-0114680 (Prior Document 2) discloses a CCTV camera at all times. Techniques for controlling in a good state are disclosed.

상기 선행문헌들은 기본적으로 SNMP(Simple Network Management Protocol)를 기반으로 CCTV 카메라를 관리 및 운영하고 있다. SNMP는 네트워크의 구성관리, 성능관리, 장비관리 및 보안관리를 목적으로 하는 것으로, 서버-클라이언트 구조 개념의 관제서버-에이전트 구조를 가지며, 관제서버가 데이터를 요청하는 요청 메시지와, 이에 대한 에이전트의 응답 메시지를 통해 동작된다고 할 수 있다. 그래서 선행문헌들의 기능을 사용하여 관제서버가 CCTV 카메라의 동작상태 등을 알 수 있고, 따라서 고장 등의 문제 발생시 이에 대한 대처가 어느 정도 가능하다.The prior documents basically manage and operate CCTV cameras based on SNMP (Simple Network Management Protocol). SNMP is for the purpose of network configuration management, performance management, equipment management, and security management. It has a control server-agent structure of the server-client structure concept. It can be said that it is operated through a response message. Therefore, the control server can know the operation status of the CCTV camera by using the functions of the preceding documents, and therefore, it is possible to cope with problems such as malfunctions to some extent.

하지만, 선행문헌들을 포함한 종래 대부분의 CCTV 운영 환경은 장애가 발생한 CCTV 카메라를 정상 동작시키기 위해서는 관리자(작업자가)가 설치 장소로 이동하여 직접 조치해야 하는 문제가 있다. 예컨대, 정상동작하는 CCTV 카메라가 장애나 고장으로 인하여 동작 불가 상태가 되면 메시지 송수신 기능에 의하여 관리서버를 통해 관리자는 이를 어느 정도 확인할 수 있지만, 다시 정상 동작시키기 위해서는 재부팅(re-booting) 후 네트워크 연결 재설정 등과 관련된 조치는 관리자가 직접 현장에 가서 초기화 등의 작업을 수행해야만 하는 것이다. 그렇지 않을 경우 장애가 발생한 CCTV의 정상 동작은 불가하였다. However, in most of the conventional CCTV operating environments including the prior literature, there is a problem in that the manager (operator) must move to the installation site and take action directly in order to operate the faulty CCTV camera normally. For example, if a normally operating CCTV camera becomes inoperable due to a failure or malfunction, the administrator can check it to some extent through the management server through the message transmission/reception function. Measures related to resetting, etc., require the administrator to personally go to the site and perform work such as initialization. Otherwise, the normal operation of the faulty CCTV was impossible.

이처럼 기존의 방식에서는 장애나 문제가 있는 CCTV 카메라를 관리 및 운용하는데 적지않은 시간과 비용이 필요했었다.In this way, in the existing method, a considerable amount of time and money was required to manage and operate CCTV cameras with faults or problems.

따라서 본 발명의 목적은 상기한 문제점을 해결하기 위한 것으로, 장애가 발생한 카메라를 원격으로 자동 복구할 수 있는 네트워크 기반의 카메라 제어장치 및 방법을 제공하는 것이다.Accordingly, an object of the present invention is to solve the above problems, and to provide a network-based camera control apparatus and method capable of remotely and automatically recovering a camera having a failure.

본 발명의 다른 목적은 장애 발생 및 복구과정을 관리자가 인지할 수 있게 안내하는 네트워크 기반의 카메라 제어장치 및 방법을 제공하는 것이다.Another object of the present invention is to provide a network-based camera control apparatus and method for guiding a failure occurrence and recovery process so that an administrator can recognize it.

그리고 이러한 목적들은 UPnP(universal plug and play)을 기반으로 한 PoE(Power over Ethernet)-IP 카메라를 적용함으로써 가능하다.And these purposes are possible by applying a PoE (Power over Ethernet)-IP camera based on UPnP (universal plug and play).

이와 같은 목적을 달성하기 위한 본 발명은, 전원(Power)과 이더넷(Ethernet)의 입력을 동시에 받을 수 있고 상기 입력에 대해 하나의 선로로 전달하는 PoE(Power over Ethernet) 스위치를 포함하는 복수의 IP 카메라; 상기 IP 카메라로부터 수집된 정보를 기초로 하여 장애 발생 여부를 판단하고, 장애 발생의 복구 과정을 원격으로 제어하는 관리서버를 포함하되, 상기 관리서버는, 상기 PoE 스위치에 따라 상기 IP 카메라를 재부팅(rebooting) 할 때, 상기 관리서버로 자동 접속하는 제1 프로토콜; 및 상기 IP 카메라의 영상 정보를 수집하고, 상기 IP 카메라의 네트워크 접속상태 및 영상정보전송상태를 실시간으로 모니터링하는 제2 프로토콜을 포함하는 것을 특징으로 하는 네트워크 기반의 카메라 제어장치를 제공한다.The present invention for achieving the above object is a plurality of IP including a Power over Ethernet (PoE) switch capable of receiving input of power and Ethernet at the same time and transferring the input to one line camera; and a management server that determines whether a failure has occurred based on the information collected from the IP camera and remotely controls a recovery process of the failure, wherein the management server reboots the IP camera according to the PoE switch ( rebooting), a first protocol for automatically connecting to the management server; and a second protocol for collecting image information of the IP camera and monitoring the network connection state and image information transmission state of the IP camera in real time.

상기 제1 프로토콜은 UPnP(universal plug and play)이다.The first protocol is universal plug and play (UPnP).

상기 제2 프로토콜은 SNMP(Simple network management protocol)이다.The second protocol is Simple network management protocol (SNMP).

본 발명의 다른 특징에 따르면, 하나 이상의 PoE(Power over Ethernet) IP 카메라: 전원과 이더넷을 동시에 상기 PoE IP 카메라로 전달하는 PoE 모듈; 및 상기 PoE 모듈을 통해 PoE IP 카메라를 원격 제어하면서 UDP/IP 인터넷 프로토콜을 통하여 접속된 상기 PoE IP 카메라들의 네트워크 접속 및 영상정보 전송상태를 SNMP(Simple network management protocol)을 이용하여 모니터링하고, 장애 발생한 PoE IP 카메라에 대한 장애 복구 절차를 수행하는 관리서버를 포함하는 네트워크 기반의 카메라 제어장치를 제공한다.According to another feature of the present invention, at least one Power over Ethernet (PoE) IP camera: a PoE module for simultaneously transmitting power and Ethernet to the PoE IP camera; And while remotely controlling the PoE IP camera through the PoE module, the network connection and image information transmission status of the PoE IP cameras connected through the UDP/IP Internet protocol are monitored using SNMP (Simple network management protocol), and a failure occurs It provides a network-based camera control device including a management server that performs a failure recovery procedure for a PoE IP camera.

상기 장애 복구가 완료된 PoE IP 카메라가 재부팅(rebooting) 되면, 상기 PoE IP 카메라는 UPnP(universal plug and play)를 기반으로 상기 관리서버에 자동 접속하고, 자신이 제공 가능한 서비스의 종류와 기능을 등록한다.When the PoE IP camera for which the failure recovery is completed is rebooted, the PoE IP camera automatically connects to the management server based on UPnP (universal plug and play) and registers the types and functions of the services it can provide. .

상기 관리서버는 장애발생 및 복구과정을 관리자용 단말로 안내한다.The management server guides the failure occurrence and recovery process to the manager terminal.

상기 PoE 모듈은, 전원과 이더넷을 동시에 입력받아 하나의 PoE 케이블로 공급하기 위한 적어도 하나의 PoE 스위치, 상기 PoE 케이블에서 전원과 데이터를 분리하여 일반 카메라(Non-PoE camera)를 지원하기 위한 PoE 스플리터(splitter) 및 주전원 차단 시 보조전원을 공급하기 위한 전원부(UPS)을 포함한다.The PoE module includes at least one PoE switch for receiving power and Ethernet at the same time and supplying it through a single PoE cable, and a PoE splitter for supporting a non-PoE camera by separating power and data from the PoE cable. (splitter) and a power supply unit (UPS) for supplying auxiliary power when the main power is cut off.

본 발명이 다른 특징에 따르면, 관리서버가 UDP/IP 인터넷 프로토콜을 통하여 접속된 적어도 하나의 PoE IP 카메라의 네트워크 접속 및 영상정보 전송상태를 모니터링하는 모니터링 단계; 모니터링 결과 PoE IP 카메라의 장애 발생을 판단하는 판단 단계; 상기 장애 발생한 PoE IP 카메라가 장애 발생 이벤트를 생성하여 상기 관리서버로 보고하는 보고 단계; 상기 관리서버가 상기 장애 발생 이벤트에 포함된 장애 종류에 따라 대응하는 복구 처리방안을 적용하여 장애 복구를 진행하는 복구 진행 단계; 상기 장애 복구가 완료된 PoE IP 카메라가 재부팅된 후 관리서버와 접속하는 자동 접속단계; 접속된 상기 PoE IP 카메라가 자신이 수행할 수 있는 서비스의 종류와 기능을 관리서버에 통보하는 통보 단계를 포함하는 네트워크 기반의 카메라 제어방법을 제공한다. According to another aspect of the present invention, a monitoring step of monitoring, by a management server, a network connection and image information transmission status of at least one PoE IP camera connected through a UDP/IP Internet protocol; A determination step of determining the occurrence of a failure of the PoE IP camera as a result of monitoring; a reporting step of generating a failure occurrence event by the PoE IP camera and reporting it to the management server; a recovery proceeding step in which the management server performs failure recovery by applying a recovery processing method corresponding to the type of failure included in the failure occurrence event; an automatic connection step of connecting the PoE IP camera to a management server after the failure recovery is completed; There is provided a network-based camera control method including a notification step of notifying a management server of the type and function of the service that the connected PoE IP camera can perform.

상기 모니터링 단계는 SNMP(Simple network management protocol)에 따라 진행된다.The monitoring step proceeds according to SNMP (Simple network management protocol).

상기 자동 접속단계는, UPnP(universal plug and play) 프로토콜에 따라 수행된다.The automatic connection step is performed according to a universal plug and play (UPnP) protocol.

상기 서비스 종류와 기능은 재부팅마다 변경될 수 있다.The service type and function may be changed every reboot.

이상과 같은 본 발명의 네트워크 기반의 카메라 제어장치 및 방법에 따르면, PoE IP 카메라의 네트워크 접속상태나 영상정보의 전송상태 확인에 따라 장애 발생을 감지하고, 장애 발생시 장애복구절차가 자동으로 이루어진다. 따라서 관리자가 직접 카메라 설치장소까지 이동해서 IP 카메라를 초기화하는 문제를 해소할 수 있다.According to the network-based camera control apparatus and method of the present invention as described above, the occurrence of a failure is detected according to the confirmation of the network connection state of the PoE IP camera or the transmission state of the image information, and the failure recovery procedure is automatically performed when the failure occurs. Therefore, it is possible to solve the problem that the administrator directly moves to the camera installation location and initializes the IP camera.

또 본 발명에 따르면 장애발생 종류 및 발생지점을 알 수 있어, 가장 적합한 장애 복구방안으로 대응할 수 있고, 경우에 따라 관리자(작업자)가 장애발생지점을 갈 경우에도 미리 장애발생지점을 알 수 있어 적절한 대처가 가능하다.In addition, according to the present invention, it is possible to know the type of failure and the point of occurrence, so that it is possible to respond with the most suitable failure recovery plan. can be dealt with

또 본 발명은 관리자가 장애발생 및 복구과정을 안내받을 수 있어, 네트워크 기반의 카메라 운영방안을 효율적으로 관리할 수 있다.In addition, according to the present invention, the administrator can be guided through the failure occurrence and recovery process, so that the network-based camera operation method can be efficiently managed.

도 1은 본 발명의 실시 예에 따른 네트워크 기반의 카메라 제어장치를 설명하는 블록 구성도
도 2는 WBEM 서버를 포함하는 UPnP 및 SNMP 구조에서의 PoE IP 카메라들을 통합 관리하는 구성도
도 3은 본 발명의 바람직한 실시 예에 따른 네트워크 기반의 카메라 제어방법을 보인 흐름도
도 4는 관리서버와 PoE IP 카메라가 UDP/IP 인터넷 프로토콜을 통하여 접속된 상태를 보인 구성도1 is a block diagram illustrating a network-based camera control apparatus according to an embodiment of the present invention;
2 is a configuration diagram for integrated management of PoE IP cameras in UPnP and SNMP structures including a WBEM server;
3 is a flowchart illustrating a network-based camera control method according to a preferred embodiment of the present invention.
4 is a configuration diagram showing a state in which the management server and the PoE IP camera are connected through the UDP/IP Internet protocol;

본 발명의 목적 및 효과, 그리고 그것들을 달성하기 위한 기술적 구성들은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.Objects and effects of the present invention, and technical configurations for achieving them will become clear with reference to the embodiments described below in detail in conjunction with the accompanying drawings. In describing the present invention, if it is determined that a detailed description of a well-known function or configuration may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted.

그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다.In addition, the terms described below are terms defined in consideration of functions in the present invention, which may vary according to intentions or customs of users and operators.

그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.However, the present invention is not limited to the embodiments disclosed below and may be implemented in various different forms. Only the present embodiments are provided so that the disclosure of the present invention is complete, and to fully inform those of ordinary skill in the art to which the present invention belongs, the scope of the invention, the present invention is defined by the scope of the claims will only be Therefore, the definition should be made based on the content throughout this specification.

이하에서는 도면에 도시한 실시 예에 기초하면서 본 발명에 대하여 더욱 상세하게 설명하기로 한다. Hereinafter, the present invention will be described in more detail based on the embodiments shown in the drawings.

도 1은 본 발명의 실시 예에 따른 네트워크 기반의 카메라 제어장치(10)를 설명하는 블록 구성도이다. 도 1에 도시한 바와 같이 관리서버(100) 및 PoE 모듈(200)을 포함되는 구성이고, 관리서버(100)는, 소정 지역 내에 하나 이상 설치될 수 있으며, 하나 이상의 PoE 모듈(200)에는 복수 개의 PoE 디바이스(300)가 연결된다. 상기 PoE 디바이스(300)는 PoE 기능을 수행할 수 있는 다양한 기기를 말할 수 있으나, 본 실시 예는 PoE - IP 카메라(300)를 예를 들어 설명한다. 반대로 PoE 기능을 지원하지 않는 일반 카메라(400)(Non-PoE Device)도 연결될 수 있다. 1 is a block diagram illustrating a network-based camera control apparatus 10 according to an embodiment of the present invention. As shown in FIG. 1 , the management server 100 and the PoE module 200 are included in the configuration, and the management server 100 may be installed at least one in a predetermined area, and at least one PoE module 200 includes a plurality of PoE devices 300 are connected. The PoE device 300 may refer to various devices capable of performing a PoE function, but in this embodiment, the PoE-IP camera 300 will be described as an example. Conversely, a general camera 400 (Non-PoE Device) that does not support the PoE function may also be connected.

본 발명에서의 네트워크는 UPnP(Universal Plug and Play)를 기반으로 한다. 단계적인 CCTV 카메라의 설치 확대 및 단계적 기능의 업그레이드(upgrade) 등으로 CCTV 네트워크에는 다양한 종류의 이기종 PoE IP 카메라들이 포함되어 있을 수 있으며, 이러한 이기종 PoE IP 카메라들을 하나의 시스템에서 관리하기 위해서는 관리시스템 및 원격 제어 프로토콜에 확장성이 있어야 한다. 또 각 PoE IP 카메라의 정비나 보수 또는 재부팅 후에 관리서버에 자동으로 접속하여 서비스를 재개할 수 있는 기능이 제공되어야 하기 때문이다. 그래서 UPnP를 기반으로 한다. 상기 UPnP는 PoE IP 카메라가 재부팅된 다음에 정해진 서비스를 시작할 때 상기 관리서버에 자동 원격 접속하여 제공 가능한 서비스의 종류와 기능을 통보해줄 수 있는 기능을 제공한다. 본 발명은 이러한 UPnP 기능을 IP 카메라에 적용하는 것이라 할 것이다. The network in the present invention is based on UPnP (Universal Plug and Play). Various types of heterogeneous PoE IP cameras may be included in the CCTV network due to the gradual expansion of installation of CCTV cameras and the gradual upgrade of functions. The remote control protocol should be extensible. In addition, after maintenance, repair, or reboot of each PoE IP camera, a function that automatically connects to the management server and resumes the service should be provided. So it is based on UPnP. The UPnP provides a function of automatically remote accessing the management server to notify the types and functions of available services when a predetermined service is started after the PoE IP camera is rebooted. The present invention will apply such a UPnP function to an IP camera.

본 발명의 따른 관리서버(100)는 관리객체(MO, managed object)들을 정의하고, 새로운 기능 확장에서도 객체지향성 망 운용 관리 기능을 효율적으로 구현할 수 있는 WBEM(web-based enterprise management) 서버를 채택한다. 도 2는 이러한 기능을 제공하기 위한 WBEM 서버를 포함하는 UPnP 및 SNMP 구조에서의 PoE IP 카메라들을 통합 관리하는 구성도이다. 도 2의 WBEM 서버를 보면 Client Protocol Adaptors, Indication Handlers, Security Adaptors, Provider Protocol Adaptors 및 이들 각각의 구성과 대응하는 인터페이스들을 포함한다.The management server 100 according to the present invention defines managed objects (MO) and adopts a WBEM (web-based enterprise management) server that can efficiently implement an object-oriented network operation management function even in a new function extension. . 2 is a configuration diagram for integrated management of PoE IP cameras in UPnP and SNMP structures including a WBEM server for providing such a function. The WBEM server of FIG. 2 includes Client Protocol Adapters, Indication Handlers, Security Adapters, Provider Protocol Adapters, and interfaces corresponding to their respective configurations.

본 실시 예에 따르면 상기 관리서버(100)는 이러한 구성들에 기초하여 상기 UPnP을 기반으로 하여 PoE IP 카메라들의 네트워크 접속 및 영상 정보의 전송상태를 확인하고, 장애 발생시 이를 복구하기 위한 다음과 같은 구성들을 직관적으로 구비한다. According to the present embodiment, the management server 100 checks the network connection and image information transmission status of the PoE IP cameras based on the UPnP based on these configurations, and the following configuration for recovering when a failure occurs are provided intuitively.

도 1에 도시한 바와 같이 상기 관리서버는 UDP/IP 인터넷 프로토콜을 통하여 접속된 상기 PoE IP 카메라의 네트워크 접속상태 및 영상정보 전송상태를 실시간으로 모니터링하는 네트워크 감시부(110)를 포함한다. 상기 모니터링 방법은 SNMP 프로토콜을 이용하여 실시한다.As shown in FIG. 1, the management server includes a network monitoring unit 110 that monitors the network connection state and image information transmission state of the PoE IP camera connected through the UDP/IP Internet protocol in real time. The monitoring method is implemented using the SNMP protocol.

상기 관리서버(100)는 모니터링 결과정보에 따라 장애 발생을 감지하는 감지부(120)와, 발생 장애를 복구하는 장애 복구부(130), 장애발생 및 복구과정을 관리자에게 안내하는 알림부(140)를 포함하고 있다. 감지부(120)는 주로 SNMP 프로토콜을 기반으로 수행된다. 장애 복구부(130)는 PoE 스위치에 따라 상기 PoE IP 카메라(300)의 전원을 다시 부팅할 때, nPnP 프로토콜에 따라 상기 관리서버(100)로 자동적으로 접속하는 기능을 수행한다. 장애복구부(130)에는 워치독 타이머(Watch dog timer) 기능을 함께 포함한다. 알림부(140)은 유/무선통신망을 매개로 하여 관리자가 휴대하는 단말장치(500)로 문자 메시지와 같은 형태로 전송한다.The management server 100 includes a detection unit 120 for detecting the occurrence of a failure according to the monitoring result information, a failure recovery unit 130 for recovering the generated failure, and a notification unit 140 for guiding the administrator about the occurrence of a failure and the recovery process. ) is included. The sensing unit 120 is mainly performed based on the SNMP protocol. When the power of the PoE IP camera 300 is rebooted according to the PoE switch, the failure recovery unit 130 automatically connects to the management server 100 according to the nPnP protocol. The failure recovery unit 130 also includes a watch dog timer function. The notification unit 140 transmits a text message to the terminal device 500 carried by the manager through a wired/wireless communication network as a medium.

도 1을 다시 참고하여 PoE(Power over Ethernet) 모듈 구성을 살펴본다. 상기 PoE 모듈(200)은 연결된 적어도 하나의 PoE - IP 카메라(300) 및 일반 카메라(Non-PoE camera)(400)의 동작을 제어하고, 영상정보를 관리서버(100)로 전송하는 역할을 한다. Referring again to FIG. 1, the configuration of a Power over Ethernet (PoE) module will be described. The PoE module 200 controls the operation of at least one connected PoE-IP camera 300 and a general camera (Non-PoE camera) 400 , and transmits image information to the management server 100 . .

PoE 모듈(200)은 전원과 이더넷을 동시에 입력받아 하나의 PoE 케이블로 공급하기 위한 적어도 하나의 PoE 스위치(210), 상기 PoE 케이블에서 전원과 데이터를 분리하여 일반 카메라(Non-PoE camera)를 지원하기 위한 PoE 스플리터(splitter)(220), 주전원 차단 시 보조전원을 공급하기 위한 전원부(UPS)(230) 등을 포함하여 구성된다.The PoE module 200 supports at least one PoE switch 210 for receiving power and Ethernet at the same time and supplying it through a single PoE cable, and a general camera (Non-PoE camera) by separating power and data from the PoE cable. It is configured to include a PoE splitter 220, a power supply unit (UPS) 230 for supplying auxiliary power when the main power is cut off.

다음에는 PoE IP 카메라의 제어방법을 도 3을 참고하여 설명한다. 도 3은 본 발명의 바람직한 실시 예에 따른 네트워크 기반의 카메라 제어방법을 보인 흐름도이다. Next, a method of controlling the PoE IP camera will be described with reference to FIG. 3 . 3 is a flowchart illustrating a network-based camera control method according to a preferred embodiment of the present invention.

PoE IP 카메라(300)들은 관리서버(100)와 최초 접속되어 부팅되거나, 워치독 타이머에 의한 재부팅 또는 정비나 보수 등으로 인하여 재부팅될 때, 각 PoE IP 카메라(300)는 관리서버(100)에 자동 접속한 후 자신이 제공 가능한 서비스의 종류 및 기능을 통보하게 된다. 그러면 관리서버(100)는 PoE 모듈(200)에 연결된 다수의 PoE IP 카메라(300)를 원격 제어하면서, 그 PoE IP 카메라(300)들이 촬영한 정보들을 관리한다(s100). When the PoE IP cameras 300 are connected to the management server 100 for the first time and are booted, rebooted by a watchdog timer, or rebooted due to maintenance or repair, each PoE IP camera 300 is connected to the management server 100 . After automatic connection, the type and function of the service that can be provided will be notified. Then, the management server 100 manages information captured by the PoE IP cameras 300 while remotely controlling the plurality of PoE IP cameras 300 connected to the PoE module 200 (s100).

아울러 관리서버(100)에 마련된 네트워크 감시부(110)는 네트워크 접속 상태 및 영상 정보 전송 상태를 지속적으로 모니터링한다(s112). 모니터링 과정은 도 4와 같이 관리서버(100)와 PoE IP 카메라(300)가 UDP/IP 인터넷 프로토콜을 통하여 접속된 상태에서 SNMP 프로토콜을 기반으로 하여 실시한다.In addition, the network monitoring unit 110 provided in the management server 100 continuously monitors the network connection state and the image information transmission state (s112). The monitoring process is performed based on the SNMP protocol in a state in which the management server 100 and the PoE IP camera 300 are connected through the UDP/IP Internet protocol as shown in FIG. 4 .

감지부(120)는 모니터링 결과에 따른 장애 발생 여부를 판단한다(s114). 장애 발생은 예를 들어 PoE IP 카메라(300)와 주기적인 메시지를 주고받는 관리서버(100)가 특정 PoE IP 카메라가 접속한 네트워크와의 접속상태나 영상 정보 전송 상태 등을 체크하는 것에 의해 가능하다. 즉 지속적으로 전송되는 메시지가 더 이상 전송받지 못하거나, 일정 시간 이상 아무런 정보를 미수신한 경우 등을 장애 발생으로 간주할 수 있을 것이다. The sensing unit 120 determines whether a failure has occurred according to the monitoring result (s114). The failure can occur by, for example, the management server 100 exchanging periodic messages with the PoE IP camera 300 checks the connection status with the network to which the specific PoE IP camera is connected or the image information transmission status. . That is, a case in which a continuously transmitted message is no longer transmitted or no information has been received for a certain period of time may be regarded as an occurrence of a failure.

장애가 발생하면, 관리서버(100)는 해당 PoE IP 카메라로 장애 발생 이벤트를 발생하도록 명령하거나 또는 장애가 발생한 PoE IP 카메라가 자체적으로 장애 발생 이벤트를 생성한다(s116). 장애 발생한 PoE IP 카메라가 장애 발생 이벤트를 직접 생성할 수도 있기 때문에, 장애 발생 이벤트에는 장애 종류와 함께 카메라의 고유 식별번호 등이 포함된다.When a failure occurs, the management server 100 instructs the corresponding PoE IP camera to generate a failure occurrence event, or the failed PoE IP camera generates a failure occurrence event by itself (s116). Since a failed PoE IP camera can directly generate a failure occurrence event, the failure occurrence event includes the camera's unique identification number along with the type of failure.

상기 관리서버(100)는 상기 장애 발생 이벤트를 전송받는다. 그러면 관리서버(100)는 장애 발생 이벤트에 포함된 식별번호에 의해 장애 발생한 카메라의 위치나 발생지점을 확인할 수 있고, 장애 종류 정보에 따라 장애 종류를 확인할 수 있다. 이러한 확인 결과, 관리서버(100)의 장애 복구부(130)는 장애종류에 따라 이미 마련된 서로 다른 처리방법이나 복구방법을 적용하여 장애복구과정을 수행한다(s118).The management server 100 receives the failure occurrence event. Then, the management server 100 may check the location or occurrence point of the camera where the failure occurs by the identification number included in the failure occurrence event, and may determine the failure type according to the failure type information. As a result of this check, the failure recovery unit 130 of the management server 100 performs a failure recovery process by applying different processing methods or recovery methods already prepared according to the type of failure (s118).

그리고 장애복구가 완료되면 PoE IP 카메라(300)를 재부팅(rebooting) 한다(s120). 재부팅되면 상술한 바와 같이 PoE IP 카메라(300)는 자신이 제공할 수 있는 서비스의 종류와 기능을 관리서버(100)로 통보하고, 관리서버(100)와 연결상태를 유지하면서 정해진 서비스를 수행한다(s122). And when the failure recovery is completed, the PoE IP camera 300 is rebooted (s120). When rebooted, as described above, the PoE IP camera 300 notifies the management server 100 of the type and function of the service it can provide, and performs a predetermined service while maintaining a connection state with the management server 100 . (s122).

이때 PoE IP 카메라(300)가 수행하게 되는 서비스의 종류 및 기능은 최초에 부여된 것과 변경될 수 있다. 즉 재부팅 과정에서 관리서버(100)는 PoE IP 카메라(300)가 수행할 수 있는 서비스의 종류와 기능을 다르게 셋팅할 수도 있기 때문이다. In this case, the type and function of the service performed by the PoE IP camera 300 may be changed from that initially granted. That is, in the rebooting process, the management server 100 may set different types and functions of services that the PoE IP camera 300 can perform.

한편, 본 발명에 따르면 상기 PoE IP 카메라는 별도의 유무선통신망을 매개로 하여 관리자용 단말장치(500)로 장애발생 및 복구과정을 안내할 수 있다. 안내에 필요한 메시지 등의 정보는 PoE IP 카메라(300)의 내부 메모리에 저장하고 있거나 PoE IP 카메라(300)가 관리서버(100)로부터 전달받아 전송할 수 있다. 이렇게 하면 관리자는 장애 발생사실을 빠르게 알 수 있어 이에 대한 적극적인 대처가 가능할 것이다. On the other hand, according to the present invention, the PoE IP camera can guide the failure occurrence and recovery process to the manager terminal device 500 through a separate wired/wireless communication network. Information such as a message required for guidance may be stored in the internal memory of the PoE IP camera 300 or the PoE IP camera 300 may receive and transmit it from the management server 100 . In this way, the manager will be able to know the fact that a failure has occurred quickly and will be able to take active measures against it.

다른 예로 상기 안내 메시지 전송은 관리서버(100)가 수행할 수도 있다. 이 경우 관리서버(100)는 장애 복구가 발생한 순서 또는 장애 복구가 모두 완료된 모든 PoE IP 카메라(300)에 대한 정보를 안내할 수 있다.As another example, the guide message transmission may be performed by the management server 100 . In this case, the management server 100 may guide information on all the PoE IP cameras 300 in the order in which the failure recovery occurs or in which the failure recovery is completed.

이상과 같이 본 발명의 도시된 실시 예를 참고하여 설명하고 있으나, 이는 예시적인 것들에 불과하며, 본 발명이 속하는 기술 분야의 통상의 지식을 가진 자라면 본 발명의 요지 및 범위에 벗어나지 않으면서도 다양한 변형, 변경 및 균등한 타 실시 예들이 가능하다는 것을 명백하게 알 수 있을 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 청구범위의 기술적인 사상에 의해 정해져야 할 것이다.Although described with reference to the illustrated embodiments of the present invention as described above, these are merely exemplary, and those of ordinary skill in the art to which the present invention pertains can use various functions without departing from the spirit and scope of the present invention. It will be apparent that modifications, variations, and other equivalent embodiments are possible. Therefore, the true technical protection scope of the present invention should be determined by the technical spirit of the appended claims.

100: 관리서버
110: 네트워크 감시부
120: 감지부
130: 장애 복구부
140: 알림부
200: PoE 모듈
210: PoE 스위치
220: PoE 스플리터
230: UPS
300: PoE IP 카메라
500: 단말장치100: management server
110: network monitoring unit
120: detection unit
130: failover unit
140: notification unit
200: PoE module
210: PoE switch
220: PoE splitter
230: UPS
300: PoE IP Camera
500: terminal device

Claims (11)

전원(Power)과 이더넷(Ethernet)의 입력을 동시에 받을 수 있고 상기 입력에 대해 하나의 선로로 전달하는 PoE(Power over Ethernet) 스위치를 포함하는 복수의 IP 카메라;
상기 IP 카메라로부터 수집된 정보를 기초로 하여 장애 발생 여부를 판단하고, 장애 발생의 복구 과정을 원격으로 제어하는 관리서버를 포함하되,
상기 관리서버는,
상기 PoE 스위치에 따라 상기 IP 카메라를 재부팅(rebooting) 할 때, 상기 관리서버로 자동 접속하는 제1 프로토콜; 및 상기 IP 카메라의 영상 정보를 수집하고, 상기 IP 카메라의 네트워크 접속상태 및 영상정보전송상태를 실시간으로 모니터링하는 제2 프로토콜을 포함하는 것을 특징으로 하는 네트워크 기반의 카메라 제어장치.a plurality of IP cameras including a Power over Ethernet (PoE) switch capable of receiving power and Ethernet input at the same time and transferring the input to a single line;
A management server that determines whether a failure has occurred based on the information collected from the IP camera and remotely controls the recovery process of the failure,
The management server,
a first protocol for automatically connecting to the management server when the IP camera is rebooted according to the PoE switch; and a second protocol for collecting video information of the IP camera and monitoring a network connection state and image information transmission state of the IP camera in real time. 제 1 항에 있어서,
상기 제1 프로토콜은 UPnP(universal plug and play)인 네트워크 기반의 카메라 제어장치.The method of claim 1,
The first protocol is a UPnP (universal plug and play) network-based camera control apparatus. 제 1 항에 있어서,
상기 제2 프로토콜은 SNMP(Simple network management protocol)인 네트워크 기반의 카메라 제어장치.The method of claim 1,
The second protocol is a simple network management protocol (SNMP) network-based camera control device. 하나 이상의 PoE(Power over Ethernet) IP 카메라:
전원과 이더넷을 동시에 상기 PoE IP 카메라로 전달하는 PoE 모듈; 및
상기 PoE 모듈을 통해 PoE IP 카메라를 원격 제어하면서 UDP/IP 인터넷 프로토콜을 통하여 접속된 상기 PoE IP 카메라들의 네트워크 접속 및 영상정보 전송상태를 SNMP(Simple network management protocol)을 이용하여 모니터링하고, 장애 발생한 PoE IP 카메라에 대한 장애 복구 절차를 수행하는 관리서버를 포함하는 네트워크 기반의 카메라 제어장치.One or more Power over Ethernet (PoE) IP cameras:
a PoE module that simultaneously transmits power and Ethernet to the PoE IP camera; and
While remotely controlling the PoE IP camera through the PoE module, the network connection and image information transmission status of the PoE IP cameras connected through the UDP/IP Internet protocol are monitored using SNMP (Simple network management protocol), A network-based camera control device including a management server that performs a disaster recovery procedure for an IP camera. 제 4 항에 있어서,
상기 장애 복구가 완료된 PoE IP 카메라가 재부팅(rebooting) 되면,
상기 PoE IP 카메라는 UPnP(universal plug and play)을 기반으로 상기 관리서버에 자동 접속하고, 자신이 제공 가능한 서비스의 종류와 기능을 통보하고 등록하는 네트워크 기반의 카메라 제어장치.5. The method of claim 4,
When the PoE IP camera that has completed the failure recovery is rebooted,
The PoE IP camera automatically accesses the management server based on UPnP (universal plug and play), and notifies and registers the type and function of the service it can provide. 제 4 항에 있어서,
상기 관리서버는 장애발생 및 복구과정을 관리자용 단말로 안내하는 네트워크 기반의 카메라 제어장치.5. The method of claim 4,
The management server is a network-based camera control device for guiding the failure occurrence and recovery process to a terminal for an administrator. 제 4 항에 있어서,
상기 PoE 모듈은,
전원과 이더넷을 동시에 입력받아 하나의 PoE 케이블로 공급하기 위한 적어도 하나의 PoE 스위치,
상기 PoE 케이블에서 전원과 데이터를 분리하여 일반 카메라(Non-PoE camera)를 지원하기 위한 PoE 스플리터(splitter); 및
주전원 차단 시 보조전원을 공급하기 위한 전원부(UPS)을 포함하여 구성되는 네트워크 기반의 카메라 제어장치.5. The method of claim 4,
The PoE module is
At least one PoE switch for receiving power and Ethernet at the same time and supplying it with one PoE cable;
a PoE splitter for supporting a general camera (Non-PoE camera) by separating power and data from the PoE cable; and
A network-based camera control device that includes a power supply unit (UPS) to supply auxiliary power when the main power is cut off. 관리서버가 UDP/IP 인터넷 프로토콜을 통하여 접속된 적어도 하나의 PoE IP 카메라의 네트워크 접속 및 영상정보 전송상태를 모니터링하는 모니터링 단계;
모니터링 결과 PoE IP 카메라의 장애 발생을 판단하는 판단 단계;
상기 장애 발생한 PoE IP 카메라가 장애 발생 이벤트를 생성하여 상기 관리서버로 보고하는 보고 단계;
상기 관리서버가 상기 장애 발생 이벤트에 포함된 장애 종류에 따라 대응하는 복구 처리방안을 적용하여 장애 복구를 진행하는 복구 진행 단계;
상기 장애 복구가 완료된 PoE IP 카메라가 재부팅된 후 관리서버와 접속하는 접속단계; 및
접속된 상기 PoE IP 카메라가 자신이 수행할 수 있는 서비스의 종류와 기능을 관리서버에 통보하는 통보 단계를 포함하는 네트워크 기반의 카메라 원격 제어방법.a monitoring step in which the management server monitors the network connection and image information transmission status of at least one PoE IP camera connected through the UDP/IP Internet protocol;
A determination step of determining the occurrence of a failure of the PoE IP camera as a result of monitoring;
a reporting step of generating a failure occurrence event by the PoE IP camera and reporting it to the management server;
a recovery proceeding step in which the management server performs failure recovery by applying a corresponding recovery processing method according to the type of failure included in the failure occurrence event;
a connection step of connecting the PoE IP camera to a management server after the failure recovery is completed; and
and a notification step of notifying a management server of the type and function of the service that the connected PoE IP camera can perform. 제 8 항에 있어서,
상기 모니터링 단계는 SNMP(Simple network management protocol)에 따라 진행되는 네트워크 기반의 카메라 제어방법.9. The method of claim 8,
The monitoring step is a network-based camera control method performed according to SNMP (Simple network management protocol). 제 8 항에 있어서,
상기 접속단계는, UPnP(universal plug and play) 프로토콜에 따라 수행되는 네트워크 기반의 카메라 제어방법.9. The method of claim 8,
The access step is a network-based camera control method performed according to a universal plug and play (UPnP) protocol. 제 8 항에 있어서,
상기 서비스 종류와 기능은 재부팅마다 변경될 수 있는 네트워크 기반의 카메라 제어방법.9. The method of claim 8,
The service type and function are network-based camera control method that can be changed every reboot.
KR1020200008282A 2020-01-22 2020-01-22 Network based camera control apparatus and method KR102301767B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200008282A KR102301767B1 (en) 2020-01-22 2020-01-22 Network based camera control apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200008282A KR102301767B1 (en) 2020-01-22 2020-01-22 Network based camera control apparatus and method

Publications (2)

Publication Number Publication Date
KR20210094726A true KR20210094726A (en) 2021-07-30
KR102301767B1 KR102301767B1 (en) 2021-09-14

Family

ID=77148386

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200008282A KR102301767B1 (en) 2020-01-22 2020-01-22 Network based camera control apparatus and method

Country Status (1)

Country Link
KR (1) KR102301767B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060110972A (en) * 2005-04-21 2006-10-26 에스케이 텔레콤주식회사 Method and system for displaying surveillance scene on mobile communication terminal
KR101751251B1 (en) * 2016-05-12 2017-07-07 주식회사 아이티지 A integrated control monitoring system of closed circuit television local equipment for crime prevention

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060110972A (en) * 2005-04-21 2006-10-26 에스케이 텔레콤주식회사 Method and system for displaying surveillance scene on mobile communication terminal
KR101751251B1 (en) * 2016-05-12 2017-07-07 주식회사 아이티지 A integrated control monitoring system of closed circuit television local equipment for crime prevention

Also Published As

Publication number Publication date
KR102301767B1 (en) 2021-09-14

Similar Documents

Publication Publication Date Title
CN101390336B (en) Disaster recovery architecture
US9792188B2 (en) Remote cable access point reset
US6904458B1 (en) System and method for remote management
EP2109827B1 (en) Distributed network management system and method
US8108504B2 (en) Non-centralized network device management using console communications apparatus
US20080313319A1 (en) System and method for providing multi-protocol access to remote computers
US7436291B2 (en) Protection of devices in a redundant configuration
US10721135B1 (en) Edge computing system for monitoring and maintaining data center operations
JP3653335B2 (en) Computer management system
JP2007233586A (en) Duplex controller and duplex control method
KR102301767B1 (en) Network based camera control apparatus and method
US8677323B2 (en) Recording medium storing monitoring program, monitoring method, and monitoring system
EP1282953B1 (en) Communications system
JP6555721B2 (en) Disaster recovery system and method
JP5005425B2 (en) Control device return system
KR101672970B1 (en) Video surveillance system having function of reliability
KR100858787B1 (en) System for monitering optical network unit and method for monitering the optical network unit
KR101214651B1 (en) Apparatus for sending sms when ups fails
JP2005115716A (en) Remote control system
JP2008204113A (en) Network monitoring system
JP2016200961A (en) Server failure monitoring system
CN111897681A (en) Message forwarding method and device, computing equipment and storage medium
JP3794358B2 (en) Power control method
JP2003150407A (en) Automatic obstacle restoration system and device thereof
JP2003244150A (en) Network restoration system

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant