KR102251777B1 - Intelligent image surveillance apparatus supporting proxy function and driving method thereof - Google Patents

Intelligent image surveillance apparatus supporting proxy function and driving method thereof Download PDF

Info

Publication number
KR102251777B1
KR102251777B1 KR1020200116995A KR20200116995A KR102251777B1 KR 102251777 B1 KR102251777 B1 KR 102251777B1 KR 1020200116995 A KR1020200116995 A KR 1020200116995A KR 20200116995 A KR20200116995 A KR 20200116995A KR 102251777 B1 KR102251777 B1 KR 102251777B1
Authority
KR
South Korea
Prior art keywords
monitoring device
video monitoring
intelligent
intelligent video
image
Prior art date
Application number
KR1020200116995A
Other languages
Korean (ko)
Inventor
김종훈
Original Assignee
주식회사 세연테크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 세연테크 filed Critical 주식회사 세연테크
Priority to KR1020200116995A priority Critical patent/KR102251777B1/en
Application granted granted Critical
Publication of KR102251777B1 publication Critical patent/KR102251777B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/222—Secondary servers, e.g. proxy server, cable television Head-end

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

The present invention relates to an intelligent image monitoring apparatus supporting a proxy function and a driving method thereof and to an intelligent image monitoring apparatus supporting a proxy function and a driving method thereof, wherein an intelligent engine is mounted on a specific image monitoring apparatus, which performs the proxy function, to form the intelligent image monitoring apparatus, an intelligent image process including object recognition and object analysis is performed with respect to images taken by the intelligent image monitoring apparatus or images received from one or more image monitoring apparatuses to be registered in the intelligent image monitoring apparatus, and the performed intelligent image process result is transmitted to an external client terminal, other image monitoring apparatuses or a control server through a network together with the images taken by the intelligent image monitoring apparatus or the images taken by each image monitoring apparatus. The present invention allows the control server or the client terminal to use each image monitoring apparatus as an intelligent image monitoring apparatus.

Description

프록시 기능을 지원하는 지능형 영상 감시 장치 및 그 구동방법{INTELLIGENT IMAGE SURVEILLANCE APPARATUS SUPPORTING PROXY FUNCTION AND DRIVING METHOD THEREOF}Intelligent video surveillance device supporting proxy function and its driving method {INTELLIGENT IMAGE SURVEILLANCE APPARATUS SUPPORTING PROXY FUNCTION AND DRIVING METHOD THEREOF}

본 발명은 프록시 기능을 지원하는 지능형 영상 감시 장치 및 그 구동방법에 관한 것으로, 더욱 상세하게는 프록시 기능을 수행하는 특정 영상 감시 장치에 지능형 엔진을 탑재하여 지능형 영상 감시 장치를 구성하고, 상기 지능형 영상 감시 장치에서 촬영한 영상이나 상기 지능형 영상 감시 장치에 등록된 적어도 하나 이상의 영상 감시 장치로부터 수신한 영상에 대해서 객체인식 및 객체분석을 포함한 지능형 영상처리를 수행하며, 상기 수행한 지능형 영상처리 결과를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 각 영상 감시 장치에서 촬영한 영상과 함께 네트워크를 통해서 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하도록 하는 프록시 기능을 지원하는 지능형 영상 감시 장치 및 그 구동방법에 관한 것이다.The present invention relates to an intelligent video monitoring device supporting a proxy function and a driving method thereof, and more particularly, to a specific video monitoring device that performs a proxy function, by mounting an intelligent engine to configure an intelligent video monitoring device, and the intelligent video monitoring device. Intelligent image processing including object recognition and object analysis is performed on an image captured by a monitoring device or an image received from at least one image monitoring device registered in the intelligent image monitoring device, and the performed intelligent image processing result is displayed in the An intelligent video surveillance device that supports a proxy function that transmits the video captured by the intelligent video surveillance device or the video captured by each video surveillance device to an external client terminal, another video surveillance device, or a control server through a network, and the same It relates to the driving method.

통상적인 CCTV 시스템은 카메라에서 획득된 영상데이터를 동축 케이블을 통해 전송하여 DVR(Digital Video Recorder)에 저장하도록 하는 구조로 되어 있거나, 이미 DVR에 저장되어 있던 영상데이터를 중앙의 관제서버에 별도로 전송, 저장 및 관리하는 구조로 되어 있다.A typical CCTV system has a structure that transmits the image data acquired from the camera through a coaxial cable and stores it in a DVR (Digital Video Recorder), or separately transmits the image data already stored in the DVR to the central control server. It is structured to store and manage.

하지만 유무선 네트워크 환경이 광대역화 되어 가고 있고 멀티미디어 압축 기술이 발달하면서, 범죄를 예방하거나 상태 모니터링을 위해서 카메라에서 촬영한 영상을 부호화하여 IP 패킷으로 변환한 후 네트워크를 통해 전송하여 저장하는 영상 감시 장치 기반의 CCTV 시스템이 각광을 받고 있다. 즉 네트워크의 성능이 고도화됨에 따라 영상 감시 장치를 유무선 인터넷에 접속하고, 영상, 음성 및 데이터를 포함한 감시데이터를 로컬은 물론이고 원격으로 관제서버로 전송함으로써, 상기 관제서버에서 저장(recording), 실시간 모니터링(realtime monitoring) 및 재생(playback)하는 것이 가능하게 된 것이다.However, as the wired/wireless network environment is becoming broader and multimedia compression technology is developing, video surveillance devices based on video surveillance devices that encode the video captured by the camera and convert it into IP packets to prevent crime or monitor the condition, and then transmit and store through the network. CCTV system is in the spotlight. That is, as the performance of the network is advanced, the video monitoring device is connected to the wired and wireless Internet, and monitoring data including video, audio, and data is transmitted locally as well as remotely to the control server. It has become possible to monitor (realtime monitoring) and playback (playback).

그러나, 기존의 영상 감시 장치 기반의 CCTV 시스템은, 외부에서 각 영상 감시 장치로 접속할 때 부가적인 네트워크 노드가 필요할 수 있고, 복잡한 설정과정이 필요하여 그 적용에 많은 어려움이 있는 실정이다.However, the conventional CCTV system based on the video surveillance device may require an additional network node when connecting to each video surveillance device from the outside, and a complicated setup process is required, so there is a lot of difficulty in its application.

따라서 본 발명에서는 지능형 엔진을 탑재한 지능형 영상 감시 장치에서 촬영한 영상이나 상기 지능형 영상 감시 장치에 등록된 타 영상 감시 장치로부터 수신한 영상에 대해서 사람, 자동차 등의 객체인식과 번호판 검출, 안면 검출 등의 객체분석을 수행하며, 상기 수행한 객체인식이나 객체분석 정보를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 각 영상 감시 장치에서 촬영한 영상과 함께 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송함으로써, 지능형 영상 감시 장치에 등록된 각 영상 감시 장치에 객체인식이나 객체분석의 지능 기능을 지원하여, 각 영상 감시 장치를 지능형 영상 감시 장치로 활용할 수 있는 방안을 제시하고자 한다.Therefore, in the present invention, object recognition, license plate detection, face detection, etc. for images captured by an intelligent video monitoring device equipped with an intelligent engine or received from another video monitoring device registered in the intelligent video monitoring device. Object analysis, and the performed object recognition or object analysis information together with an image captured by the intelligent video monitoring device or an image captured by each video monitoring device, along with an external client terminal, other video monitoring device, or a control server It is intended to propose a method for using each video surveillance device as an intelligent video surveillance device by supporting the intelligent function of object recognition or object analysis to each video surveillance device registered in the intelligent video surveillance device by sending it to the video surveillance device.

특히, 본 발명은 상기 객체인식이나 객체분석한 결과를 영상과 함께 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송할 때, 지능형 영상 감시 장치에 내장된 지능형 엔진을 이용하여, 프록시하는 타 영상 감시 장치의 지능형 분석을 같이하여, 해당 지능형 분석정보와 영상을 전송한다. 즉 지능형 영상 감시 장치와 타 영상 감시 장치의 영상 분석을 위해 지능형 엔진의 자원을 성능이 허락하는 범위내에서 시간적으로 시분할하여 사용할 수 있도록 하는 것이다. 또한, 본 발명은 역으로 지능형 정보를 타 영상 감시 장치로 전송하여, 해당 영상 감시 장치에서 영상과 함께 전송할 수 있도록 한다.Particularly, the present invention uses an intelligent engine built in the intelligent video monitoring device to proxy another when transmitting the object recognition or object analysis result together with an image to an external client terminal, another video monitoring device, or a control server. It performs intelligent analysis of the video surveillance device together, and transmits the corresponding intelligent analysis information and video. In other words, for the video analysis of the intelligent video monitoring device and other video monitoring devices, the resources of the intelligent engine can be time-divided and used within the range allowed by the performance. In addition, the present invention conversely transmits intelligent information to another video surveillance device, so that the video surveillance device can transmit it together with the video.

다음으로 본 발명의 기술분야에 존재하는 선행기술에 대하여 간단하게 설명하고, 이어서 본 발명이 상기 선행기술에 비해서 차별적으로 이루고자 하는 기술적 사항에 대해서 기술하고자 한다.Next, the prior art existing in the technical field of the present invention will be briefly described, and then the technical matters that the present invention intends to achieve differently compared to the prior art will be described.

먼저 한국등록특허 제1672780호(2016.11.04.)는 어린이 보호 구역 내의 지능형 영상감시 시스템에 관한 것으로, 어린이 보호 구역으로 지정된 도로 구간을 진입 및 진출하는 차량에 대한 실시간 영상 분석을 통하여 어린이 보호 구역 내에서의 주, 정차 위반 또는 제한속도 위반 등을 단속할 수 있는 어린이 보호 구역 내의 지능형 영상감시 시스템에 관한 것이다.First, Korean Patent No. 1672780 (2016.11.04.) relates to an intelligent video surveillance system within a child protection zone, through real-time video analysis of vehicles entering and exiting the road section designated as a child protection zone. It relates to an intelligent video surveillance system in a child protection zone that can crack down on violations of parking, stop violations, or speed limits in the city.

즉, 상기 선행기술은 어린이 보호 구역으로 지정된 도로 구간의 진입로와 진출로에 각각 카메라를 설치하여 진입차량과 진출차량에 대한 영상을 수집하도록 하며, 수집된 영상을 비교 분석하여 차량번호와 함께 어린이 보호 구역을 통과하는 차량에 대하여 선택적으로 주,정차 위반 또는 과속 위반을 단속하는 시스템에 대해 기재하고 있다.In other words, the above prior art installs cameras on the entrance and exit roads of the road section designated as a child protection zone to collect images of the vehicle entering and exiting the vehicle, and the collected images are compared and analyzed to protect children along with the vehicle number. It describes a system that selectively detects parking and stopping violations or speeding violations for vehicles passing through the area.

하지만, 본 발명은 지능형 엔진을 탑재한 지능형 영상 감시 장치에서 촬영한 영상이나 상기 지능형 영상 감시 장치에 등록된 영상 감시 장치로부터 수신한 영상을 토대로 사람, 자동차 등의 객체를 인식하고, 번호판 검출, 안면 검출 등을 분석을 수행하며, 상기 인식하거나 분석한 객체에 대한 정보를 해당 영상과 함께 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하거나, 상기 분석한 지능형 정보를 타 영상 감시 장치로 전송하여 해당 영상 감시 장치에서 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 영상과 함께 전송할 수 있도록 하는 것이므로, 상기 선행기술과 본 발명은 현저한 구성상 차이점이 있다.However, the present invention recognizes an object such as a person or a vehicle based on an image captured by an intelligent video monitoring device equipped with an intelligent engine or an image received from an image monitoring device registered in the intelligent video monitoring device, and detects a license plate. It analyzes detection, etc., and transmits the information on the recognized or analyzed object together with the image to an external client terminal, other video monitoring device, or control server, or transmits the analyzed intelligent information to another video monitoring device. Since it is transmitted so that the video can be transmitted together with the video from the video monitoring device to an external client terminal, another video monitoring device, or a control server, there is a significant difference between the prior art and the present invention.

또한 한국공개특허 제2011-0060342호(2011.06.08.)는 위치기반 서비스를 이용한 CCTV 카메라 장치와 안전관제 센터 서버, 그를 포함한 지능형 보안 시스템 및 그 방법에 관한 것으로, 위험상황이나 긴급사고 등의 발생 시, 가입자의 위치와 상황을 정확하고 빠르게 알 수 있고, 이를 근거로 가입자의 안전을 지키기 위한 조속한 조치를 취할 수 있도록 하는 위치기반 서비스를 이용한 CCTV 카메라 장치와 안전관제 센터 서버, 그를 포함한 지능형 보안 시스템 및 그 방법에 관한 것이다.In addition, Korean Patent Publication No. 2011-0060342 (2011.06.08.) relates to a CCTV camera device using a location-based service, a safety control center server, an intelligent security system including the same, and a method thereof. A CCTV camera device and safety control center server using a location-based service that enables you to accurately and quickly know the location and situation of a subscriber in the city, and take prompt action to protect the safety of the subscriber based on this, and an intelligent security system including the same. And to the method.

즉, 상기 선행기술은 위치기반 서비스를 활용하여 가입자의 위치정보를 안전관제 센터에 전송하고, 전송된 위치정보를 CCTV의 영상데이터와 동기화하여 해당 위치의 CCTV를 자동으로 제어함으로써 가입자의 위치와 해당 위치에서 발생하는 사건의 영상을 저장/추적하며, 이를 연락대상자(보호자나 현장에 출동하는 담당자)의 단말에 실시간으로 전송하는 시스템 및 그 방법을 기재하고 있다.That is, the prior art transmits the subscriber's location information to the safety control center using a location-based service, synchronizes the transmitted location information with the video data of the CCTV, and automatically controls the CCTV at the corresponding location to correspond to the location of the subscriber. It describes a system and method that stores/tracks video of an event occurring at a location and transmits it to the terminal of the contactee (guardian or person in charge who dispatches to the field) in real time.

반면에 본 발명은, 지능형 영상 감시 장치에서 지능형 엔진을 통해 자체적으로 촬영한 영상이나 다른 영상 감시 장치로부터 수신한 영상으로부터 사람, 자동차 등의 객체인식이나 번호판 검출, 안면 검출 등의 객체분석을 수행하고, 그 결과에 대한 정보를 해당 영상과 함께 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하거나, 상기 분석한 지능형 정보를 타 영상 감시 장치로 전송하여 해당 영상 감시 장치에서 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 영상과 함께 전송할 수 있도록 하는 것이므로, 상기 선행기술과 본 발명은 기술적 구성의 차이점이 분명하다.On the other hand, the present invention performs object analysis such as object recognition such as a person, automobile, license plate detection, face detection, etc. from images captured by the intelligent image monitoring device itself through an intelligent engine or images received from other image monitoring devices. , The information on the result is transmitted to an external client terminal, other video monitoring device, or control server together with the video, or by transmitting the analyzed intelligent information to another video monitoring device, and from the video monitoring device to an external client terminal. , Since it is to be able to transmit the video together with the video to another video monitoring device, or the control server, the difference between the technical configuration of the prior art and the present invention is obvious.

본 발명은 상기와 같은 문제점을 해결하기 위해 창작된 것으로서, 프록시 기능을 수행하는 특정 영상 감시 장치에 지능형 엔진을 탑재하여 지능형 영상 감시 장치를 구성한 것을 목적으로 한다.The present invention has been created to solve the above problems, and an object of the present invention is to construct an intelligent video surveillance device by mounting an intelligent engine in a specific video surveillance device that performs a proxy function.

또한 본 발명은 지능형 엔진을 탑재한 지능형 영상 감시 장치에 내부망 또는 외부망으로 접속된 적어도 하나 이상의 영상 감시 장치의 IP를 등록하여 카메라 네트워크를 구성하고, 상기 지능형 영상 감시 장치에 접속한 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 상기 지능형 영상 감시 장치에서 촬영한 영상이나 각 영상 감시 장치에서 촬영한 영상에 대하여 프록시 릴레이를 수행할 수 있는 것을 다른 목적으로 한다.In addition, the present invention configures a camera network by registering IPs of at least one video monitoring device connected to an internal network or an external network to an intelligent video monitoring device equipped with an intelligent engine, and an external client connected to the intelligent video monitoring device. Another object is to be able to perform proxy relay on the video captured by the intelligent video surveillance device or the video captured by each video surveillance device by a terminal, another video surveillance device, or a control server.

또한 본 발명은 지능형 영상 감시 장치 및 상기 지능형 영상 감시 장치에 등록된 각 영상 감시 장치를 네트워크 모듈화하여 구성함으로써, 데이터 수신, 전송, 검색 등을 수행하는 각각의 모듈 간은 물론이고 인접한 다른 영상 감시 장치에 구비된 모듈과 IP기반 통신(TCP/IP(Transmission Control Protocol/Internet Protocol)을 수행하고, 하나의 영상 감시 장치 내에서 각 모듈의 설정 및 제어를 위한 데이터 통신은 IPC(InterProcess Communication)를 통해서 수행할 수 있는 것을 또 다른 목적으로 한다.In addition, the present invention comprises an intelligent video surveillance device and each video surveillance device registered in the intelligent video surveillance device as a network module, so that not only between each module performing data reception, transmission, search, etc., but also other adjacent video surveillance devices. IP-based communication (TCP/IP (Transmission Control Protocol/Internet Protocol)) with the module provided in the video surveillance device, and data communication for setting and controlling each module within one video monitoring device is performed through IPC (InterProcess Communication). Do what you can do for another purpose.

또한 본 발명은 지능형 엔진을 통해 지능형 영상 감시 장치에서 직접 촬영한 영상이나 상기 지능형 영상 감시 장치에 등록되어 있는 적어도 하나 이상의 영상 감시 장치에서 수신한 영상으로부터 사람, 자동차, 동물 등의 객체인식을 수행하고, 상기 객체인식한 정보를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 각 영상 감시 장치에서 촬영한 영상과 함께 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송할 수 있는 것을 또 다른 목적으로 한다.In addition, the present invention performs object recognition, such as a person, a car, or an animal, from an image directly captured by an intelligent video monitoring device or an image received by at least one video monitoring device registered in the intelligent video monitoring device through an intelligent engine. Another object is to be able to transmit the object-recognized information to an external client terminal, another video monitoring device, or a control server together with the image captured by the intelligent video monitoring device or the video captured by each video monitoring device. .

또한 본 발명은 지능형 엔진을 통해 지능형 영상 감시 장치에서 직접 촬영한 영상이나 상기 지능형 영상 감시 장치에 등록되어 있는 적어도 하나 이상의 영상 감시 장치에서 수신한 영상으로부터 번호판 검출, 안면 검출, 불꽃이나 연기 검출, 행동 패턴 검출 등의 객체분석을 수행하고, 상기 객체분석한 정보를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 각 영상 감시 장치에서 촬영한 영상과 함꼐 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송할 수 있는 것을 또 다른 목적으로 한다.In addition, the present invention is a license plate detection, face detection, flame or smoke detection, behavior from images directly captured by an intelligent video surveillance device through an intelligent engine or images received from at least one video surveillance device registered in the intelligent video surveillance device. Object analysis such as pattern detection is performed, and the object-analyzed information is transferred to an external client terminal, other video monitoring device, or a control server along with the image captured by the intelligent video monitoring device or the video captured by each video monitoring device. Another purpose is what can be transmitted.

특히, 본 발명은 지능형 영상 감시 장치에 내장된 지능형 엔진의 리소스를 상기 지능형 영상 감시 장치에 등록된 타 영상 감시 장치와 공유하여 객체인식이나 객체분석을 같이 수행할 수 있는 시간적 멀티플렉싱 개념을 적용할 수 있도록 한다. 즉 타 영상 감시 장치에서 상기 지능형 영상 감시 장치에 구비된 지능형 엔진을 공유하여, 지능형 영상 감시 장치로 활용할 수 있도록 하는 것이다. 이때 상기 객체인식이나 객체분석한 결과를 영상과 함께 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송할 때, 상기 지능형 영상 감시 장치는 각 영상 감시 장치의 상기 객체인식이나 객체분석한 결과와 영상을 지능형 영상 감시 장치의 접속채널로 전송할 수 있다.In particular, the present invention can apply the concept of temporal multiplexing that can perform object recognition or object analysis by sharing the resources of the intelligent engine built into the intelligent video monitoring device with other video monitoring devices registered in the intelligent video monitoring device. To be there. That is, other video surveillance devices share the intelligent engine provided in the intelligent video surveillance device so that it can be used as an intelligent video surveillance device. At this time, when transmitting the object recognition or object analysis result together with the image to an external client terminal, other video monitoring device, or a control server, the intelligent video monitoring device is configured with the object recognition or object analysis result of each video monitoring device. The video can be transmitted to the access channel of the intelligent video monitoring device.

또한 본 발명은 지능형 영상 감시 장치에서 타 영상 감시 장치로부터 수신한 영상을 토대로 수행한 객체인식 및 객체분석에 대한 정보를 상기 타 영상 감시 장치로도 제공함으로써, 상기 타 영상 감시 장치에서 자체적으로 상기 객체인식 및 객체분석에 대한 정보를 영상과 함께 주변의 다른 영상 감시 장치, 외부의 클라이언트 단말, 또는 관제서버로 전송할 수 있도록 하는 것을 또 다른 목적으로 한다.In addition, the present invention provides information on object recognition and object analysis performed by an intelligent video monitoring device based on an image received from another video monitoring device to the other video monitoring device. Another object is to allow information on recognition and object analysis to be transmitted to other video surveillance devices, external client terminals, or control servers along with images.

본 발명의 일 실시예에 따른 프록시 기능을 지원하는 지능형 영상 감시 장치는, 프록시 기능을 지원하는 지능형 영상 감시 장치에 있어서, 상기 지능형 영상 감시 장치가 프록시 기능을 수행하도록 네트워크 설정을 수행하는 네트워크 설정모듈; 영상에 대해서 객체인식을 포함한 지능형 영상처리를 수행하는 지능형 엔진; 및 상기 객체인식의 결과를 네트워크를 통해서 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 전송모듈;을 포함하는 것을 특징으로 한다.An intelligent video monitoring device supporting a proxy function according to an embodiment of the present invention, in the intelligent video monitoring device supporting a proxy function, is a network setting module that performs network configuration so that the intelligent video monitoring device performs a proxy function. ; An intelligent engine that performs intelligent image processing including object recognition on an image; And a transmission module for transmitting the result of object recognition to an external client terminal, another video monitoring device, or a control server through a network.

또한 상기 네트워크 설정모듈은, 내부 네트워크, 외부 네트워크 또는 이들의 조합을 통해 접속된 적어도 하나 이상의 영상 감시 장치를 등록하여 멀티채널을 구성하는 것을 더 포함하는 것을 특징으로 한다.In addition, the network setting module may further include configuring a multi-channel by registering at least one video monitoring device connected through an internal network, an external network, or a combination thereof.

또한 상기 지능형 영상 감시 장치는, 상기 지능형 엔진을 이용하여, 프록시하는 적어도 하나 이상의 타 영상 감시 장치의 영상에 대해서 객체인식을 포함한 지능형 영상처리를 수행하고, 상기 수행한 지능형 영상처리에 대한 결과와 영상을 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 것을 더 포함하는 것을 특징으로 한다.In addition, the intelligent video monitoring device, using the intelligent engine, performs intelligent image processing including object recognition on images of at least one other video monitoring device to be proxied, and results and images of the performed intelligent video processing It characterized in that it further comprises transmitting to an external client terminal, another video monitoring device, or a control server.

또한 상기 지능형 엔진은, 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치에서 촬영한 영상을 토대로 사람, 자동차 및 동물을 포함한 객체인식을 수행하고, 상기 수행한 객체인식의 결과에 따른 객체인식정보를 생성하는 것을 더 포함하며, 상기 객체인식은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며, 상기 전송모듈은, 상기 생성한 객체인식정보를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 한다.In addition, the intelligent engine performs object recognition including people, cars, and animals based on the image captured by the intelligent video monitoring device or the image captured by at least one video surveillance device, and according to the result of the performed object recognition. It further comprises generating object recognition information, wherein the object recognition is performed through artificial intelligence using a preset learning model, and the transmission module captures the generated object recognition information by the intelligent video monitoring device. It characterized in that it further comprises proxy relaying to an external client terminal, another video monitoring device, or a control server together with the video or the video captured by the at least one video monitoring device.

또한 상기 지능형 엔진은, 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치로부터 수신한 영상을 토대로 번호판 검출, 안면 검출, 불꽃이나 연기 검출 및 행동 패턴 검출을 포함한 객체분석을 수행하고, 상기 수행한 결과에 따른 객체분석정보를 생성하는 것을 더 포함하며, 상기 객체분석은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며, 상기 전송모듈은, 상기 생성한 객체분석정보를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 한다.In addition, the intelligent engine performs object analysis, including license plate detection, face detection, flame or smoke detection, and behavior pattern detection, based on images captured by the intelligent video monitoring device or images received from at least one video monitoring device, Further comprising generating object analysis information according to the result of the execution, wherein the object analysis is performed through artificial intelligence using a pre-set learning model, and the transmission module, the generated object analysis information It characterized in that it further comprises proxy relaying to an external client terminal, another video monitoring device, or a control server together with the image captured by the video monitoring device or the video captured by the at least one video monitoring device.

또한 상기 지능형 영상 감시 장치는, 타 영상 감시 장치로부터 수신한 영상에 대해서 지능형 영상처리를 수행한 결과를 상기 타 영상 감시 장치에 전송함으로써, 상기 타 영상 감시 장치에서 개별적으로 상기 지능형 영상처리를 수행한 결과를 해당 영상과 함께, 주변의 타 영상 감시 장치, 외부의 클라이언트 단말, 또는 관제서버로 직접 제공할 수 있도록 하는 것을 더 포함하는 것을 특징으로 한다.In addition, the intelligent video monitoring device transmits the result of performing the intelligent video processing on the image received from the other video monitoring device to the other video monitoring device, thereby individually performing the intelligent video processing in the other video monitoring device. It characterized in that it further comprises allowing the result to be directly provided to another video monitoring device, an external client terminal, or a control server together with the corresponding image.

또한 상기 지능형 영상 감시 장치는, 적어도 하나 이상의 영상 감시 장치로부터 IP 패킷 혹은 로우 데이터의 영상을 수신하는 수신모듈; 상기 수신한 영상을 압축하고, 상기 IP 패킷을 포함한 데이터를 저장수단에 저장하는 저장모듈; 및 네트워크를 통해 접속된 클라이언트 단말, 타 영상 감시 장치 또는 관제서버에서 상기 저장수단에 저장된 감시데이터를 검색하고, 상기 검색한 감시데이터를 상기 클라이언트 단말, 타 영상 감시 장치 또는 관제서버로 제공하는 검색모듈;을 더 포함하며, 상기 IP 패킷의 출발지와 목적지는 상기 네트워크 설정모듈을 통해서 독립적으로 정해지는 것을 특징으로 한다.In addition, the intelligent video monitoring device may include: a receiving module for receiving an IP packet or raw data video from at least one video monitoring device; A storage module for compressing the received image and storing data including the IP packet in a storage means; And a search module that searches for monitoring data stored in the storage means from a client terminal, other video monitoring device, or control server connected through a network, and provides the searched monitoring data to the client terminal, other video monitoring device, or control server. It further includes;, characterized in that the source and destination of the IP packet are independently determined through the network configuration module.

아울러, 본 발명의 일 실시예에 따른 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법은, 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법에 있어서, 상기 지능형 영상 감시 장치가 프록시 기능을 수행하도록 네트워크 설정을 수행하는 단계; 상기 지능형 영상 감시 장치에서, 영상에 대해서 객체인식을 포함한 지능형 영상처리를 수행하는 단계; 및 상기 지능형 영상 감시 장치에서, 상기 객체인식의 결과를 네트워크를 통해서 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 단계;를 포함하는 것을 특징으로 한다.In addition, in the driving method of an intelligent video monitoring device supporting a proxy function according to an embodiment of the present invention, in the driving method of an intelligent video monitoring device supporting a proxy function, a network is set so that the intelligent video monitoring device performs a proxy function. Performing; Performing intelligent image processing including object recognition on the image by the intelligent image monitoring device; And transmitting, by the intelligent video monitoring device, the result of object recognition to an external client terminal, another video monitoring device, or a control server through a network.

또한 상기 지능형 영상 감시 장치 구동방법은, 상기 지능형 영상 감시 장치에서, 내부 네트워크, 외부 네트워크 또는 이들의 조합을 통해 접속된 적어도 하나 이상의 영상 감시 장치를 등록하여 멀티채널을 구성하는 단계;를 더 포함하는 것을 특징으로 한다.In addition, the intelligent video monitoring device driving method further includes, in the intelligent video monitoring device, registering at least one video monitoring device connected through an internal network, an external network, or a combination thereof to configure a multi-channel; It is characterized by that.

또한 상기 지능형 영상 감시 장치 구동방법은, 상기 지능형 영상 감시 장치에서, 내장된 지능형 엔진을 이용하여, 프록시하는 적어도 하나 이상의 타 영상 감시 장치의 영상에 대해서 객체인식을 포함한 지능형 영상처리를 수행하고, 상기 수행한 지능형 영상처리에 대한 결과와 영상을 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 단계;를 더 포함하는 것을 특징으로 한다.In addition, the intelligent video monitoring device driving method includes, in the intelligent video monitoring device, performing intelligent image processing including object recognition on images of at least one other video monitoring device to be proxied using a built-in intelligent engine, and the It characterized in that it further comprises a; transmitting the result of the performed intelligent image processing and the image to an external client terminal, another video monitoring device, or a control server.

또한 상기 지능형 영상 감시 장치 구동방법은, 상기 지능형 영상 감시 장치에서, 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치에서 촬영한 영상을 토대로 사람, 자동차 및 동물을 포함한 객체인식을 수행하고, 상기 수행한 객체인식의 결과에 따른 객체인식정보를 생성하는 단계;를 더 포함하며, 상기 객체인식은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며, 상기 지능형 영상 감시 장치에서, 상기 생성한 객체인식정보를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 한다.In addition, in the intelligent video monitoring device driving method, in the intelligent video monitoring device, object recognition including people, cars, and animals is performed based on an image captured by the intelligent video monitoring device or an image captured by at least one video monitoring device. And generating object recognition information according to a result of the performed object recognition; further comprising, wherein the object recognition is performed through artificial intelligence using a preset learning model, and in the intelligent video monitoring device, Further comprising proxy relaying the generated object recognition information to an external client terminal, another video monitoring device, or a control server together with an image captured by the intelligent video monitoring device or an image captured by at least one video monitoring device. Characterized in that.

또한 상기 지능형 영상 감시 장치 구동방법은, 상기 지능형 영상 감시 장치에서, 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치로부터 수신한 영상을 토대로 번호판 검출, 안면 검출, 불꽃이나 연기 검출 및 행동 패턴 검출을 포함한 객체분석을 수행하고, 상기 수행한 결과에 따른 객체분석정보를 생성하는 단계;를 더 포함하며, 상기 객체분석은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며, 상기 지능형 영상 감시 장치에서, 상기 생성한 객체분석정보를 상기 지능형 영상 감시 장치에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 한다.In addition, the intelligent video monitoring device driving method includes, in the intelligent video monitoring device, license plate detection, face detection, flame or smoke detection, and Performing object analysis including behavior pattern detection, and generating object analysis information according to the result of the execution; further comprising, wherein the object analysis is performed through artificial intelligence using a pre-set learning model, and the In the intelligent video monitoring device, the generated object analysis information is transferred to an external client terminal, another video monitoring device, or a control server together with an image captured by the intelligent video monitoring device or an image captured by at least one video monitoring device. It characterized in that it further comprises a proxy relay.

또한 상기 지능형 영상 감시 장치 구동방법은, 상기 지능형 영상 감시 장치에서, 타 영상 감시 장치로부터 수신한 영상에 대해서 지능형 영상처리를 수행한 결과를 상기 타 영상 감시 장치에 전송함으로써, 상기 타 영상 감시 장치에서 개별적으로 상기 지능형 영상처리를 수행한 결과를 해당 영상과 함께, 주변의 타 영상 감시 장치, 외부의 클라이언트 단말, 또는 관제서버로 직접 제공할 수 있도록 하는 것을 더 포함하는 것을 특징으로 한다.In addition, the intelligent video monitoring device driving method includes, in the intelligent video monitoring device, the result of performing the intelligent image processing on the image received from the other video monitoring device to the other video monitoring device. It characterized in that it further comprises allowing the result of individually performing the intelligent image processing together with the corresponding image to be directly provided to another video monitoring device in the vicinity, an external client terminal, or a control server.

또한 상기 지능형 영상 감시 장치 구동방법은, 상기 지능형 영상 감시 장치의 수신모듈에서, 적어도 하나 이상의 영상 감시 장치로부터 IP 패킷 혹은 로우 데이터의 영상을 수신하는 단계; 상기 지능형 영상 감시 장치의 저장모듈에서, 상기 수신한 영상을 압축하고, 상기 IP 패킷을 포함한 데이터를 저장수단에 저장하는 단계; 및 상기 지능형 영상 감시 장치의 검색모듈에서, 네트워크를 통해 접속된 클라이언트 단말, 타 영상 감시 장치 또는 관제서버에서 상기 저장수단에 저장된 감시데이터를 검색하고, 상기 검색한 감시데이터를 상기 클라이언트 단말, 타 영상 감시 장치 또는 관제서버로 제공하는 단계;를 더 포함하며, 상기 IP 패킷의 출발지와 목적지는 네트워크 설정모듈을 통해서 독립적으로 정해지는 것을 특징으로 한다.In addition, the method of driving the intelligent video monitoring device may include receiving, in a receiving module of the intelligent video monitoring device, an image of an IP packet or raw data from at least one video monitoring device; Compressing the received image in a storage module of the intelligent video monitoring device and storing data including the IP packet in a storage means; And a search module of the intelligent video monitoring device, a client terminal connected through a network, another video monitoring device, or a control server to search for monitoring data stored in the storage means, and the searched monitoring data to the client terminal and other video Providing to a monitoring device or a control server; further comprising, the source and destination of the IP packet is characterized in that it is independently determined through a network configuration module.

이상에서와 같이 본 발명의 프록시 기능을 지원하는 지능형 영상 감시 장치 및 그 구동방법에 따르면, 지능형 엔진이 탑재된 지능형 영상 감시 장치에서 촬영한 영상이나, 내부망 또는 외부망으로 접속된 영상 감시 장치로부터 수신한 영상에 대해서 사람, 자동차, 동물 등의 객체를 인식하고, 번호판 검출, 안면 검출, 불꽃이나 연기 검출, 행동 패턴 검출 등의 객체를 분석하며, 상기 인식결과나 분석결과에 대한 정보와 해당 영상을 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송함으로써, 상기 지능형 영상 감시 장치에 내장된 지능형 엔진의 리소스를 타 영상 감시 장치와 공유하는 시간적 멀티플렉싱 개념을 통해서 각 영상 감시 장치에 객체인식이나 객체분석의 지능 기능을 지원할 수 있으며, 이를 통해 관제서버나 클라이언트 단말에서 각 영상 감시 장치를 지능형 영상 감시 장치로 활용할 수 있는 효과가 있다.As described above, according to the intelligent video monitoring device supporting the proxy function of the present invention and the driving method thereof, an image captured by an intelligent video monitoring device equipped with an intelligent engine, or from a video monitoring device connected to an internal network or an external network. Recognizes objects such as people, automobiles, and animals for the received image, analyzes objects such as license plate detection, face detection, flame or smoke detection, and behavior pattern detection, and information on the recognition or analysis result and the image Recognize objects to each video surveillance device through a temporal multiplexing concept that shares the resources of the intelligent engine built into the intelligent video surveillance device with other video surveillance devices by transmitting the data to an external client terminal, another video surveillance device, or a control server. In addition, the intelligent function of object analysis can be supported, and through this, there is an effect that each video monitoring device can be used as an intelligent video monitoring device in a control server or a client terminal.

또한 본 발명은 상기 지능형 영상 감시 장치에서 상기 객체인식이나 객체분석한 결과를 포함한 영상을 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송할 때, 상기 객체인식이나 객체분석한 결과를 해당 영상과 함께 지능형 영상 감시 장치의 접속채널을 통해 전송할 수 있는 효과가 있다.In addition, when the intelligent video monitoring device transmits an image including the object recognition or object analysis result to an external client terminal, another video monitoring device, or a control server, the object recognition or object analysis result is converted to the corresponding image. In addition, there is an effect that it can be transmitted through an access channel of an intelligent video surveillance device.

또한 본 발명은 외부의 클라이언트 단말 또는 관제서버에서 상기 지능형 영상 감시 장치에 등록된 각 영상 감시 장치에 직접적으로 접속하는 것을 불가능하게 하여 보안을 크게 강화할 수도 있으며, 하나의 지능형 영상 감시 장치와 적어도 하나 이상의 영상 감시 장치를 그룹핑하여 카메라 네트워크를 설정할 수 있으므로 영상 감시 장치의 관리를 용이하게 수행할 수 있는 효과가 있다.In addition, the present invention may greatly enhance security by making it impossible to directly access each video monitoring device registered in the intelligent video monitoring device from an external client terminal or a control server. Since the camera network can be set by grouping the video surveillance devices, there is an effect that it is possible to easily manage the video surveillance devices.

또한 본 발명은 상기 지능형 영상 감시 장치와 상기 지능형 영상 감시 장치에 등록된 각 영상 감시 장치를 네트워크 모듈화하여 구성함으로써, 각각의 모듈 간은 물론이고 인접한 다른 영상 감시 장치에 구비된 모듈과 데이터 수신, 전송, 검색 등을 용이하게 수행할 수 있는 효과가 있다.In addition, the present invention comprises the intelligent video surveillance device and each video surveillance device registered in the intelligent video surveillance device by configuring a network module, as well as between each module and the module provided in another adjacent video surveillance device and data reception and transmission. , There is an effect of being able to easily perform a search, etc.

또한 본 발명은 상기 지능형 영상 감시 장치에 내부망을 통해 연결된 영상 감시 장치를 등록하여 사용하는 것 이외에, 물리적으로 떨어져 있는 외부망의 영상 감시 장치의 경우에도 상기 지능형 영상 감시 장치에 등록하여 사용할 수 있기 때문에, 카메라 네트워크 구축의 유연성을 넓힐 수 있는 효과가 있다.In addition, the present invention can register and use the intelligent video monitoring device in the case of a video surveillance device of an external network that is physically separated from the intelligent video surveillance device in addition to registering and using the video surveillance device connected through the internal network. Therefore, there is an effect of increasing the flexibility of building a camera network.

도 1은 본 발명의 일 실시예에 따른 프록시 기능을 지원하는 지능형 영상 감시 장치의 전체 구성을 개략적으로 나타낸 도면이다.
도 2는 본 발명에 적용된 내부 네트워크나 외부 네트워크로 연결된 각 영상 감시 장치의 지능형 영상 감시 장치의 등록을 설명하기 위한 도면이다.
도 3은 본 발명의 일 실시예에 따른 프록시 기능을 지원하는 지능형 영상 감시 장치 구동과정을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따른 지능형 영상 감시 장치의 구성을 상세하게 나타낸 도면이다.
도 5는 본 발명의 일 실시예에 따른 지능형 영상 감시 장치의 네트워크 설정모듈의 구성을 상세하게 나타낸 도면이다.
도 6은 본 발명의 일 실시예에 따른 본 발명의 일 실시예에 따른 지능형 영상 감시 장치 구동방법의 동작과정을 상세하게 나타낸 순서도이다.1 is a diagram schematically showing the overall configuration of an intelligent video surveillance apparatus supporting a proxy function according to an embodiment of the present invention.
FIG. 2 is a diagram for explaining registration of an intelligent video surveillance device of each video surveillance device connected to an internal network or an external network applied to the present invention.
3 is a diagram illustrating a driving process of an intelligent video monitoring device supporting a proxy function according to an embodiment of the present invention.
4 is a diagram showing in detail the configuration of an intelligent video monitoring device according to an embodiment of the present invention.
5 is a diagram showing in detail the configuration of a network setting module of an intelligent video monitoring device according to an embodiment of the present invention.
6 is a flow chart showing in detail an operation process of a method of driving an intelligent video monitoring device according to an embodiment of the present invention according to an embodiment of the present invention.

이하, 첨부한 도면을 참조하여 본 발명의 프록시 기능을 지원하는 지능형 영상 감시 장치 및 그 구동방법에 대한 바람직한 실시 예를 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다. 또한 본 발명의 실시 예들에 대해서 특정한 구조적 내지 기능적 설명들은 단지 본 발명에 따른 실시 예를 설명하기 위한 목적으로 예시된 것으로, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는 것이 바람직하다.Hereinafter, a preferred embodiment of an intelligent video surveillance apparatus supporting a proxy function of the present invention and a driving method thereof will be described in detail with reference to the accompanying drawings. The same reference numerals shown in each drawing indicate the same members. In addition, specific structural or functional descriptions of the embodiments of the present invention are exemplified only for the purpose of describing the embodiments according to the present invention, and unless otherwise defined, all terms used herein including technical or scientific terms They have the same meaning as commonly understood by those of ordinary skill in the art to which the present invention belongs. Terms as defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and should not be interpreted as an ideal or excessively formal meaning unless explicitly defined in the present specification. It is desirable not to.

여기서, 본 발명에서는 영상 감시 장치를 IP 카메라를 예로하여 설명하지만, IP 이외의 다른 프로토콜을 사용할 수 있고, 일부 카메라가 시리얼이나 패럴렐 인터페이스를 구비할 수도 있으므로, 카메라가 네트워크에 접속되기만 하면 동작이 가능하다. 또한 다양한 종류의 인터페이스를 가진 네트워크에 직접 접속될 수 있는 네트워크 카메라와, 네트워크에 간접 접속될 수 있는 인터페이스를 구비한 카메라 및 IP 비디오 재전송기(IP비디오 브리지, IP비디오 리피터, IP비디오 데이터를 받아서 재전송하는 기기)를 포함할 수 있다.Here, in the present invention, the video surveillance device is described using an IP camera as an example, but other protocols other than IP may be used, and some cameras may have a serial or parallel interface, so that operation is possible as long as the camera is connected to the network. Do. In addition, a network camera that can be directly connected to a network with various types of interfaces, a camera with an interface that can be indirectly connected to the network, and an IP video retransmitter (IP video bridge, IP video repeater, receive and retransmit IP video data) Device).

또한 본 발명에서는 지능형 영상 감시 장치나 각 영상 감시 장치에서 촬영한 영상에 대해서 설명하고 있으나, 실제 각 영상 감시 장치에서 수집되는 감시데이터는 영상 이외에, 음향(음성, 음악(사운드) 포함), 텍스트 또는 이들의 조합을 포함할 수 있다. 즉 감시환경에 따라서 영상, 음향, 텍스트 중 어느 하나만을 대상으로 양방향 통신과 해당 감시데이터를 릴레이할 수도 있다. 상기 텍스트는 영상에 포함하여 송수신할 수 있고, 별도의 패킷으로 송수신하는 것도 가능하고, 영상이나 음향에 대한 메타데이터일 수도 있으며, 감시하고 있는 현장에서 송신되는 텍스트 메시지일 수도 있다.In addition, although the present invention describes an image captured by an intelligent video surveillance device or each video surveillance device, the surveillance data actually collected by each video surveillance device includes sound (including audio, music (sound)), text, or Combinations of these may be included. That is, depending on the monitoring environment, two-way communication and corresponding monitoring data may be relayed for only any one of video, sound, and text. The text may be included in an image and transmitted/received, may be transmitted/received in a separate packet, may be metadata about an image or sound, or may be a text message transmitted from a site being monitored.

도 1은 본 발명의 일 실시예에 따른 프록시 기능을 지원하는 지능형 영상 감시 장치의 전체 구성을 개략적으로 나타낸 도면이다.1 is a diagram schematically showing the overall configuration of an intelligent video surveillance apparatus supporting a proxy function according to an embodiment of the present invention.

도 1a에 도시된 바와 같이, 본 발명은 프록시 기능을 수행하는 지능형 영상 감시 장치(100)(이하 지능형 영상 감시 장치로 약칭함), 적어도 하나 이상의 영상 감시 장치(200), 관제서버(300), 분석서버(310), 클라이언트 단말(400), 데이터베이스(500)를 포함하여 구성된다.As shown in Fig. 1A, the present invention provides an intelligent video monitoring device 100 (hereinafter abbreviated as an intelligent video monitoring device), at least one video monitoring device 200, a control server 300, which performs a proxy function. It is configured to include an analysis server 310, a client terminal 400, and a database 500.

상기 지능형 영상 감시 장치(100)는 IP기반 통신을 지원하는 카메라로서, 지능형 엔진을 탑재하고 있다. 이때 상기 지능형 영상 감시 장치(100)는 자체적으로 구비된 카메라 센서를 통해 촬영한 영상을 압축하며, 상기 압축한 IP 패킷을 네트워크를 통해 원격지의 관제서버(300)나 클라이언트 단말(400)로 전송하는 기능을 갖출 수 있다.The intelligent video monitoring device 100 is a camera supporting IP-based communication and is equipped with an intelligent engine. At this time, the intelligent video monitoring device 100 compresses the image captured through a camera sensor provided by itself, and transmits the compressed IP packet to the remote control server 300 or the client terminal 400 through a network. You can have a function.

또한 상기 지능형 영상 감시 장치(100)는 내부 네트워크에 위치한 영상 감시 장치(210)는 물론, 외부 네트워크에 위치한 영상 감시 장치(220, 230)를 등록하여 멀티채널을 구성하고, 네트워크를 통해 상기 지능형 영상 감시 장치(100)에 접속한 상기 관제서버(300)나 클라이언트 단말(400)로 자체적으로 촬영한 영상은 물론, 상기 각 영상 감시 장치(200)에서 촬영한 영상에 대하여 프록시 릴레이를 수행할 수 있다. 이때 상기 지능형 영상 감시 장치(100)는 등록된 영상 감시 장치(200)에 대한 카메라 제어명령 및 카메라의 영상품질을 포함한 처리 조건(예: 해상도, 타겟비트율, 프레임율 등을 포함한 감시데이터를 처리하는데 필요한 파라미터 등) 등에 대한 제어명령을 송신하여 관리할 수 있다.In addition, the intelligent video surveillance device 100 registers the video surveillance device 210 located in the internal network as well as the video surveillance devices 220 and 230 located in the external network to configure a multi-channel, and configures a multi-channel through the network. It is possible to perform proxy relay on images captured by each of the video monitoring devices 200 as well as images captured by the control server 300 or the client terminal 400 connected to the monitoring device 100 by itself. . At this time, the intelligent video monitoring device 100 processes the monitoring data including the camera control command for the registered video monitoring device 200 and the processing conditions including the image quality of the camera (eg, resolution, target bit rate, frame rate, etc.). You can manage by sending control commands for necessary parameters, etc.).

즉 상기 지능형 영상 감시 장치(100)는 대표카메라로 지정된 것으로서, 하위 혹은 주변의 다른 영상 감시 장치(200)들이 상기 지능형 영상 감시 장치(100)에 등록되어, 상기 지능형 영상 감시 장치(100)에 탑재된 지능형 엔진의 리소스를 공유하는 시간적 멀티플렉싱 개념을 통해 객체인식이나 객체분석을 지원할 수 있도록 한 것이다.That is, the intelligent video surveillance device 100 is designated as a representative camera, and other video surveillance devices 200 below or in the vicinity are registered in the intelligent video surveillance device 100 and mounted on the intelligent video surveillance device 100 This is to support object recognition or object analysis through the concept of temporal multiplexing that shares the resources of the intelligent engine.

이는 본 발명의 핵심적인 특징 중 하나로서, 상기 관제서버(300)나 클라이언트 단말(400)에서 상기 지능형 영상 감시 장치(100)에 접속하여, 상기 지능형 영상 감시 장치(100)는 물론 상기 지능형 영상 감시 장치(100)에 등록된 모든 영상 감시 장치(100)를 복수 채널의 지능형 카메라로 활용할 수 있게 된다.This is one of the core features of the present invention, by accessing the intelligent video monitoring device 100 from the control server 300 or the client terminal 400, and monitoring the intelligent video as well as the intelligent video monitoring device 100 All the video monitoring devices 100 registered in the device 100 can be used as intelligent cameras of multiple channels.

보다 구체적으로, 상기 지능형 영상 감시 장치(100)는 상기 지능형 엔진을 통해 상기 지능형 영상 감시 장치(100)로 직접 촬영한 영상이나 상기 지능형 영상 감시 장치(100)에 등록되어 있는 각 영상 감시 장치(200)에서 수신한 영상으로부터 사람, 자동차, 동물 등의 객체인식이나, 번호판 검출, 안면 검출, 불꽃이나 연기 검출, 행동 패턴 검출 등의 객체분석을 수행하고, 상기 수행한 결과에 따라 생성된 객체인식정보나 객체분석정보를 해당 영상과 함께 상기 관제서버(300)나 클라이언트 단말(400)로 전송할 수 있다. 또한 상기 객체인식정보나 객체분석정보, 해당 영상은 상기 지능형 영상 감시 장치(100)에 저장되어, 추후 검색에 활용할 수도 있다.More specifically, the intelligent video monitoring device 100 includes an image directly captured by the intelligent video monitoring device 100 through the intelligent engine or each video monitoring device 200 registered in the intelligent video monitoring device 100. ), object recognition such as people, automobiles, animals, etc., object recognition such as license plate detection, face detection, flame or smoke detection, behavior pattern detection, etc., from the image received from the image, and object recognition information generated according to the results B. Object analysis information may be transmitted to the control server 300 or the client terminal 400 together with the corresponding image. In addition, the object recognition information, object analysis information, and the corresponding image may be stored in the intelligent video monitoring device 100 and used for a later search.

이때 상기 객체인식이나 객체분석은 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하는 것이 바람직하다.In this case, the object recognition or object analysis is preferably performed through artificial intelligence using a pre-set learning model.

즉 상기 지능형 영상 감시 장치(100)는 복수의 영상을 입력으로 학습을 수행하여, 사람, 자동차, 동물 등의 객체를 인식하기 위한 객체인식 학습모델을 생성하거나, 번호판 검출, 안면 검출, 불꽃이나 연기 검출, 행동패턴 검출 등의 객체를 분석하기 위한 객체분석 학습모델을 생성하며, 상기 생성한 각 학습모델을 저장하여 관리한다. 또한 상기 지능형 영상 감시 장치(100)는 자체적으로 촬영한 영상이나 상기 각 영상 감시 장치(200)에서 수신한 영상을 상기 생성한 각 학습모델에 입력하여 객체인식이나 객체분석을 수행한다. 상기 학습은 CNN(convolution neural network) 방식을 사용하는 것이 바람직하다. 그러나 이에 한정되지 않으며, 지도학습, 강화학습, 비지도학습 등의 다양한 학습방법을 적용할 수 있다.That is, the intelligent video monitoring device 100 performs learning by inputting a plurality of images to generate an object recognition learning model for recognizing objects such as people, cars, animals, or license plate detection, face detection, flame or smoke. An object analysis learning model for analyzing objects such as detection and behavior pattern detection is created, and each of the generated learning models is stored and managed. In addition, the intelligent video monitoring device 100 performs object recognition or object analysis by inputting an image captured by itself or an image received by each of the video monitoring devices 200 into each of the generated learning models. It is preferable to use a convolution neural network (CNN) method for the learning. However, it is not limited thereto, and various learning methods such as supervised learning, reinforcement learning, and unsupervised learning can be applied.

여기서, 상기 객체인식이나 객체분석은 인공지능을 이용한 방식에 한정되지 않으며, 사전에 마련된 프로그램에 영상을 적용하여 객체를 구체화하는 방식이나, 사전에 구축된 복수의 데이터와 매핑하는 방식 등을 이용하는 것이 가능하다.Here, the object recognition or object analysis is not limited to a method using artificial intelligence, and a method of specifying an object by applying an image to a program prepared in advance, or a method of mapping with a plurality of previously constructed data is used. It is possible.

또한 상기 지능형 영상 감시 장치(100)는 상기 객체인식이나 객체분석을 수행할 때, 상기 지능형 엔진을 통해서 자체적으로 처리하는 방식 이외에, 네트워크를 통해 상기 분석서버(310)로 영상을 제공하여 객체인식이나 객체분석을 요청하고, 상기 분석서버(310)에서 처리한 객체인식이나 객체분석에 대한 결과를 제공받을 수 있다. 이때 상기 분석서버(310)는 상기 관제서버(300)와 일체로 구비하거나 독립적인 형태로 구성할 수 있다.In addition, when performing the object recognition or object analysis, the intelligent video monitoring device 100 provides an image to the analysis server 310 through a network, in addition to a method of self-processing through the intelligent engine. An object analysis may be requested, and a result of object recognition or object analysis processed by the analysis server 310 may be provided. In this case, the analysis server 310 may be provided integrally with the control server 300 or may be configured in an independent form.

또한 상기 지능형 영상 감시 장치(100)는 상기 객체인식정보나 객체분석정보를 해당 영상과 함께 상기 관제서버(300)나 클라이언트 단말(400)로 전송할 때, 지능형 엔진 감시 장치의 접속채널(예: IP주소, URL 등)를 통해 전송할 수 있다.In addition, when the intelligent video monitoring device 100 transmits the object recognition information or object analysis information together with the corresponding video to the control server 300 or the client terminal 400, an access channel of the intelligent engine monitoring device (e.g., IP Address, URL, etc.).

한편, 상기 지능형 영상 감시 장치(100)는 도 1b에 도시된 바와 같이, 특정 영상 감시 장치(200)로부터 수신한 영상을 토대로 객체인식 및 객체분석을 수행하고, 상기 수행한 결과에 따라 생성한 객체인식정보 및 객체분석정보를 상기 특정 영상 감시 장치(200)로 제공할 수도 있다. 이 경우, 상기 특정 영상 감시 장치(200)는 상기 지능형 영상 감시 장치(100)로부터 제공받은 상기 객체인식정보 및 객체분석정보를 해당 영상과 함께 상기 관제서버(300)나 클라이언트 단말(400), 또는 다른 영상 감시 장치로 직접 전송할 수 있다.Meanwhile, the intelligent video monitoring device 100 performs object recognition and object analysis based on the image received from the specific video monitoring device 200, as shown in FIG. 1B, and an object created according to the result of the execution. Recognition information and object analysis information may be provided to the specific image monitoring device 200. In this case, the specific video monitoring device 200 uses the object recognition information and object analysis information provided from the intelligent video monitoring device 100 together with the corresponding image to the control server 300 or the client terminal 400, or It can be transmitted directly to other video surveillance devices.

상기 영상 감시 장치(200)는 상기 지능형 영상 감시 장치(100)의 내부 네트워크에 위치하여 상기 지능형 영상 감시 장치(100)에 등록되거나, 외부 네트워크에 위치하여 네트워크를 통해서 상기 지능형 영상 감시 장치(100)에 등록된다. 이를 도 2를 참조하여 상세하게 설명하면 다음과 같다.The video monitoring device 200 is located in the internal network of the intelligent video monitoring device 100 and registered with the intelligent video monitoring device 100, or is located in an external network and the intelligent video monitoring device 100 Is registered on. This will be described in detail with reference to FIG. 2 as follows.

도 2는 본 발명에 적용된 내부 네트워크나 외부 네트워크로 연결된 각 영상 감시 장치의 지능형 영상 감시 장치의 등록을 설명하기 위한 도면이다.FIG. 2 is a diagram for explaining registration of an intelligent video surveillance device of each video surveillance device connected to an internal network or an external network applied to the present invention.

도 2의 (a)에 도시된 바와 같이, 적어도 하나 이상의 영상 감시 장치(210)가 내부 네트워크를 통해 상기 지능형 영상 감시 장치(100)와 연결된 경우, 상기 영상 감시 장치(210)는 자신의 정보(예: IP 주소(고정된 것이 아닌 동적으로 할당되어도 무방함), MAC 주소, 상기 감시데이터의 처리 조건(파라미터), 위치 등)를 등록한 상기 지능형 영상 감시 장치(100)로 감시대상 영역을 촬영한 영상을 IP 패킷화하여 전송할 수 있다. 이때 상기 내부 네트워크는 상기 지능형 영상 감시 장치(100)에 접속된 적어도 하나 이상의 영상 감시 장치(210)를 포함하는 네트워크로서 유무선 근거리통신망(LAN)일 수 있다.As shown in (a) of FIG. 2, when at least one video surveillance device 210 is connected to the intelligent video surveillance device 100 through an internal network, the video surveillance device 210 provides its own information ( Example: IP address (not fixed but dynamically allocated), MAC address, the processing conditions (parameters) of the monitoring data, location, etc.) Video can be transmitted through IP packetization. In this case, the internal network may be a wired/wireless local area network (LAN) as a network including at least one video monitoring device 210 connected to the intelligent video monitoring device 100.

또한 상기 영상 감시 장치(210)는 상기 지능형 영상 감시 장치(100)로 지속적인 영상을 IP 패킷화하여 전송할 수 있으며, 상기 지능형 영상 감시 장치(100)에서 영상의 전송을 요구하는 경우에만 상기 지능형 영상 감시 장치(100)로 영상을 IP 패킷화하여 전송할 수도 있다.In addition, the video monitoring device 210 may transmit a continuous video to the intelligent video monitoring device 100 by converting it into an IP packet, and the intelligent video monitoring only when the intelligent video monitoring device 100 requests transmission of an image. The video may be IP packetized and transmitted to the device 100.

또한 상기 영상 감시 장치(210)는 상기 지능형 영상 감시 장치(100)에 의해 원격에서 연결제어뿐만 아니라 영상품질에 대한 제어를 받을 수 있다.In addition, the image monitoring device 210 may receive control of the image quality as well as connection control from a remote location by the intelligent image monitoring device 100.

또한 도 2의 (b)에 도시된 바와 같이, 적어도 하나 이상의 영상 감시 장치(220, 230)가 외부 네트워크를 통해 상기 지능형 영상 감시 장치(100)와 연결된 경우, 상기 영상 감시 장치(220, 230)는 자신의 정보를 등록한 상기 지능형 영상 감시 장치(100)로 감시대상 영역을 촬영한 영상을 IP 패킷화하여 지속적으로 전송하거나, 또는 상기 지능형 영상 감시 장치(100)에서 영상의 전송을 요구하는 경우에만 상기 지능형 영상 감시 장치(100)로 촬영한 영상을 IP 패킷화하여 전송할 수 있다. 이때 상기 외부 네트워크는 상기 지능형 영상 감시 장치(100)의 외부에 속한 스위치나 라우터를 사용하는 유무선 네트워크로서, 다른 내부 네트워크나 인터넷을 말한다.In addition, as shown in (b) of FIG. 2, when at least one video monitoring device 220, 230 is connected to the intelligent video monitoring device 100 through an external network, the video monitoring device 220, 230 Is, only when the intelligent video monitoring device 100 registered its own information and continuously transmits the video captured by the area to be monitored into an IP packet, or when the intelligent video monitoring device 100 requests transmission of the video. The image captured by the intelligent video monitoring device 100 may be converted into an IP packet and transmitted. In this case, the external network is a wired/wireless network using a switch or router belonging to the outside of the intelligent video monitoring device 100, and refers to another internal network or the Internet.

또한 외부 네트워크에 위치한 상기 영상 감시 장치(220, 230)도 상기 내부 네트워크에 위치한 영상 감시 장치(210)와 마찬가지로 상기 지능형 영상 감시 장치(100)에 의해 원격에서 연결제어와 영상품질에 대한 제어를 받을 수 있다.In addition, the video monitoring devices 220 and 230 located in the external network can receive connection control and control of the video quality remotely by the intelligent video monitoring device 100, similar to the video monitoring device 210 located in the internal network. I can.

다시 도 1을 참조하면, 상기 지능형 영상 감시 장치(100)는 네트워크 모듈화하여, 감시데이터에 대한 수신, 저장, 전송, 검색 등의 다양한 기능을 독립적으로 네트워킹할 수 있도록 구성할 수 있다.Referring back to FIG. 1, the intelligent video monitoring device 100 may be configured to be able to independently network various functions such as reception, storage, transmission, and search for monitoring data by modularizing a network.

이는 본 발명의 핵심적인 특징 중 하나로서, 데이터 수신, 전송, 검색 등을 수행하는 각각의 모듈 간은 물론, 인접한 하위 혹은 주변의 다른 영상 감시 장치에 구비된 모듈과 IP기반 통신(TCP/IP(Transmission Control Protocol/Internet Protocol)을 수행할 수 있도록 구성할 수 있는 것이다. 이때 상기 지능형 영상 감시 장치(100) 내에서 각 모듈의 설정 및 제어를 위한 데이터 통신은 IPC(InterProcess Communication)를 통해서 수행하도록 구성할 수 있다. 또한 각 영상 감시 장치(200)도 네트워크 모듈화하여 구성할 수 있다. 이에 대한 상세한 설명은 하기 도 4에서 설명하기로 한다.This is one of the key features of the present invention, as well as between each module that performs data reception, transmission, search, etc., as well as IP-based communication (TCP/IP (TCP/IP) Transmission Control Protocol/Internet Protocol), in which data communication for setting and controlling each module in the intelligent video monitoring device 100 is performed through IPC (InterProcess Communication). In addition, each video monitoring device 200 may be configured by making a network module, and a detailed description thereof will be described in FIG. 4 below.

상기 관제서버(300)나 클라이언트 단말(400)은 네트워크를 통해서 상기 지능형 영상 감시 장치(100)에 접속하여 각 영상 감시 장치(200)의 영상을 모니터링할 수 있는 장치로서, IP 주소 또는 URL로 상기 지능형 영상 감시 장치(100)에 접속이 가능하다.The control server 300 or the client terminal 400 is a device capable of monitoring the image of each video monitoring device 200 by accessing the intelligent video monitoring device 100 through a network, and the IP address or URL It is possible to connect to the intelligent video monitoring device 100.

예를 들어, 상기 관제서버(300)나 클라이언트 단말(400)은 상기 지능형 영상 감시 장치(100)로부터 영상을 전송받아 데이터베이스(500)에 저장하거나 디스플레이할 수 있다. 이때 상기 클라이언트 단말(400)은 스마트폰, 태블릿 PC, 컴퓨터, PDA 뿐만 아니라, 영상 플레이어를 탑재한 네트워크에 접속 가능한 모든 종류의 디바이스를 포함할 수 있으며, 네트워크를 통해서 직접적으로 상기 지능형 영상 감시 장치(100)에 접속하거나 상기 관제서버(300)를 경유하여 접속하는 것이 가능하다.For example, the control server 300 or the client terminal 400 may receive an image from the intelligent video monitoring device 100 and store or display the image in the database 500. At this time, the client terminal 400 may include not only a smart phone, a tablet PC, a computer, and a PDA, but also all types of devices capable of accessing a network equipped with a video player, and the intelligent video monitoring device ( It is possible to access 100) or via the control server 300.

또한 상기 관제서버(300)나 클라이언트 단말(400)은 상기 지능형 영상 감시 장치(100)에 등록되어 있는 각 영상 감시 장치(200)에서 촬영한 영상(즉 감시데이터)을 제공받거나 상기 등록된 각 영상 감시 장치(200)에 제어정보를 전달할 수도 있다.In addition, the control server 300 or the client terminal 400 is provided with an image (that is, monitoring data) captured by each video monitoring device 200 registered in the intelligent video monitoring device 100 or the registered video Control information may be transmitted to the monitoring device 200.

또한 상기 관제서버(300)나 클라이언트 단말(400)은 상기 지능형 영상 감시 장치(100)에 접속할 때, 사용자 인증을 거쳐 사용자 권한에 따라 상기 지능형 영상 감시 장치(100)로부터 제공받을 수 있는 각 영상 감시 장치(200)의 목록을 확인할 수 있으며, 상기 목록에 등록된 영상 감시 장치(200) 중 획득하고자 하는 적어도 하나 이상을 선택하여 상기 지능형 영상 감시 장치(100)로부터 해당 영상 감시 장치(200)의 영상을 프록시 릴레이로 수신할 수 있다.In addition, when the control server 300 or the client terminal 400 accesses the intelligent video monitoring device 100, each video that can be provided from the intelligent video monitoring device 100 according to the user's authority through user authentication is monitored. You can check the list of devices 200, and select at least one or more of the video monitoring devices 200 registered in the list to obtain an image of the corresponding video monitoring device 200 from the intelligent video monitoring device 100 Can be received by proxy relay.

또한 상기 관제서버(300)나 클라이언트 단말(400)은 상기 지능형 영상 감시 장치(100)로부터 수신한 상기 지능형 영상 감시 장치(100)에서 직접 촬영한 영상이나 적어도 하나 이상의 각 영상 감시 장치(200)의 영상을 디스플레이할 수 있다. 이때 상기 관제서버(300)나 클라이언트 단말(400)은 상기 영상을 복원하여 공간적으로 분할된 화면을 통해 디스플레이할 수 있다.In addition, the control server 300 or the client terminal 400 is a video directly captured by the intelligent video monitoring device 100 received from the intelligent video monitoring device 100 or at least one of each of the video monitoring device 200 Images can be displayed. At this time, the control server 300 or the client terminal 400 may restore the image and display it through a spatially divided screen.

이러한 프록시 기능을 지원하는 지능형 영상 감시 장치의 구동과정을 도 3을 참조하여 설명하면 다음과 같다.A driving process of an intelligent video monitoring device supporting such a proxy function will be described with reference to FIG. 3 as follows.

도 3은 본 발명의 일 실시예에 따른 프록시 기능을 지원하는 지능형 영상 감시 장치 구동과정을 설명하기 위한 도면이다.3 is a diagram illustrating a driving process of an intelligent video monitoring device supporting a proxy function according to an embodiment of the present invention.

먼저, 상기 지능형 영상 감시 장치(100)는 상기 도 2에 나타낸 바와 같이 내부 네트워크, 외부 네트워크 또는 이들의 조합을 통해 접속된 적어도 하나 이상의 영상 감시 장치(200)를 등록하여 멀티채널을 구성한다(①).First, as shown in FIG. 2, the intelligent video surveillance device 100 registers at least one video surveillance device 200 connected through an internal network, an external network, or a combination thereof to configure a multi-channel (①). ).

또한 상기 지능형 영상 감시 장치(100)는 사전에 등록된 적어도 하나 이상의 영상 감시 장치(200)로부터 감시데이터(즉 촬영 영상, 음향, 영상이나 음향에 대한 메타데이터 등)를 수신한다(②).In addition, the intelligent video monitoring device 100 receives monitoring data (ie, a captured image, sound, metadata about video or sound, etc.) from at least one video monitoring device 200 registered in advance (②).

상기 적어도 하나 이상의 영상 감시 장치(200)로부터 감시데이터가 수신되면, 상기 지능형 영상 감시 장치(100)는 상기 지능형 엔진을 통해 상기 수신한 영상으로부터 사람, 자동차, 동물 등의 객체인식을 수행하거나, 번호판 검출, 안면 검출, 불꽃이나 연기 검출, 행동 패턴 검출 등의 객체분석을 수행한다(③). 즉 상기 지능형 영상 감시 장치(100)에 탑재된 지능형 엔진의 리소스를 상기 지능형 영상 감시 장치(100)에 등록된 타 영상 감시 장치(200)와 공유하여 객체인식이나 객체분석을 같이 수행할 수 있는 것이다.When monitoring data is received from the at least one video monitoring device 200, the intelligent video monitoring device 100 performs object recognition such as a person, a vehicle, or an animal from the received image through the intelligent engine, or a license plate Object analysis such as detection, face detection, flame or smoke detection, and behavior pattern detection is performed (③). That is, the resource of the intelligent engine mounted in the intelligent video monitoring device 100 can be shared with other video monitoring devices 200 registered in the intelligent video monitoring device 100 to perform object recognition or object analysis together. .

이때 상기 객체인식과 객체분석은 상기 지능형 엔진의 구성에 따라서 2가지 모두를 수행하거나 2가지 중 어느 하나만을 수행할 수 있다.At this time, the object recognition and object analysis may perform both or only one of the two depending on the configuration of the intelligent engine.

또한 상기 지능형 영상 감시 장치(100)는 자체적으로 구비된 카메라 센서로 직접 촬영한 영상을 상기 지능형 엔진을 통해서 객체인식이나 객체분석을 수행할 수도 있다.In addition, the intelligent video monitoring device 100 may perform object recognition or object analysis through the intelligent engine on an image directly captured by a camera sensor provided therein.

또한 상기 지능형 영상 감시 장치(100)는 상기 객체인식과 객체분석의 수행한 결과를 토대로 객체인식정보나 객체분석정보를 생성한다(④).In addition, the intelligent video monitoring device 100 generates object recognition information or object analysis information based on the result of performing the object recognition and object analysis (④).

이어서, 상기 지능형 영상 감시 장치(100)는 상기 객체인식정보나 객체분석정보와 해당 영상을 지능형 영상 감시 장치의 접속채널을 통해 상기 관제서버(300)나 클라이언트 단말(400)로 전송한다(⑤).Subsequently, the intelligent video monitoring device 100 transmits the object recognition information or object analysis information and the corresponding video to the control server 300 or the client terminal 400 through an access channel of the intelligent video monitoring device (⑤). .

이때 상기 지능형 영상 감시 장치(100)는 상기 객체인식정보나 객체분석정보를 해당 영상을 촬영한 특정 영상 감시 장치(200)로 제공함으로써, 상기 특정 영상 감시 장치(200)에서 직접 상기 객체인식정보나 객체분석정보를 해당 영상과 함께 상기 관제서버(300)나 클라이언트 단말(400), 또는 다른 영상 감시 장치로 전송하도록 할 수 있다.At this time, the intelligent image monitoring device 100 provides the object recognition information or object analysis information to the specific image monitoring device 200 that has captured the corresponding image, so that the object recognition information or the object recognition information directly from the specific image monitoring device 200 The object analysis information may be transmitted to the control server 300, the client terminal 400, or another video monitoring device together with the corresponding image.

도 4는 본 발명의 일 실시예에 따른 지능형 영상 감시 장치의 구성을 상세하게 나타낸 도면이다.4 is a diagram showing in detail the configuration of an intelligent video monitoring device according to an embodiment of the present invention.

도 4에 도시된 바와 같이, 상기 지능형 영상 감시 장치(100)는 수신모듈(110), 저장모듈(120), 저장수단(130), 지능형 엔진(140), 전송모듈(150), 검색모듈(160), 네트워크 설정모듈(170)을 포함하여 구성된다.As shown in Fig. 4, the intelligent video monitoring device 100 includes a receiving module 110, a storage module 120, a storage means 130, an intelligent engine 140, a transmission module 150, and a search module ( 160), and a network configuration module 170.

또한 상기 지능형 영상 감시 장치(100)는 도면에 도시하지는 않았지만, 각 구성 부분에 동작전원을 공급하는 전원부, 각종 설정이나 제어명령에 대한 데이터 송수신을 위한 통신부, 각종 동작프로그램의 업데이트를 관리하는 업데이트 관리부 등을 추가로 포함할 수 있다.In addition, although not shown in the drawing, the intelligent video monitoring device 100 includes a power supply unit for supplying operation power to each component, a communication unit for transmitting and receiving data for various settings or control commands, and an update management unit for managing updates of various operation programs. And the like may additionally be included.

이때 상기 수신모듈(110), 저장모듈(120), 지능형 엔진(140), 전송모듈(150) 및 검색모듈(160)의 각 모듈은 상호간은 물론, 네트워크로 연결된 적어도 하나 이상의 타 영상 감시 장치와 TCP/IP, UDP 등의 IP 통신을 수행하며, 상기 네트워크 설정모듈(170)과 상기 수신모듈(110), 저장모듈(120), 지능형 엔진(140), 전송모듈(150) 및 검색모듈(160)은 프로세스 간 통신(InterProcess Communication)을 수행한다. 이때 상기 수신모듈(110), 저장모듈(120), 지능형 엔진(140), 전송모듈(150) 및 검색모듈(160)의 각 모듈은 IP 주소를 기반으로 출발지(source)로부터 입력받은 정보를 독립적으로 처리하고 그 결과를 다시 목적지(destination)로 출력하는 것을 예로 하여 설명하지만, IP 주소 이외에 디바이스 ID, URI(Universal Resource Identifier) 또는 URL(Universal Resource Locator), 포트정보 등을 이용할 수도 있다.At this time, each module of the receiving module 110, the storage module 120, the intelligent engine 140, the transmission module 150, and the search module 160 may be connected to each other as well as at least one other video monitoring device connected through a network. IP communication such as TCP/IP, UDP, etc. is performed, and the network setting module 170, the receiving module 110, the storage module 120, the intelligent engine 140, the transmission module 150, and the search module 160 ) Performs InterProcess Communication. At this time, each module of the receiving module 110, the storage module 120, the intelligent engine 140, the transmission module 150, and the search module 160 independently receives the information input from the source based on the IP address. As an example, a device ID, a universal resource identifier (URI) or a universal resource locator (URL), port information, etc. may be used in addition to the IP address.

또한 상기 수신모듈(110), 저장모듈(120), 지능형 엔진(140), 전송모듈(150) 및 검색모듈(160)의 각 모듈은 식별할 수 있는 IP 정보(IP주소, 도메인 네임, 포트번호 등)를 가지고 있으며, 상기 네트워크 설정모듈(170)에서 제공하는 각 모듈의 IP 주소에 따라 영상, 음성, 데이터 또는 이들의 조합을 포함한 감시데이터의 흐름이 제어된다. 이에 따라 각 모듈별 IP 정보를 기반으로 각 모듈 간에 이루어지는 감시데이터의 저장, 스트리밍 등을 수행할 수 있게 되며, 상기 관제서버(300)나 클라이언트 단말(400), 또는 다른 영상 감시 장치에서 IP 정보를 기반으로 상기 검색모듈(160)로 접속하여 기 저장되어 있는 특정 감시데이터에 대한 검색 및 전송을 요청할 수도 있다.In addition, each module of the receiving module 110, the storage module 120, the intelligent engine 140, the transmission module 150, and the search module 160 can identify IP information (IP address, domain name, port number). Etc.), and the flow of monitoring data including video, audio, data, or a combination thereof is controlled according to the IP address of each module provided by the network setting module 170. Accordingly, it is possible to perform storage, streaming, etc. of monitoring data between each module based on the IP information of each module, and the control server 300, the client terminal 400, or other video monitoring device can transmit the IP information. Based on the connection to the search module 160, it is possible to request search and transmission of previously stored specific monitoring data.

한편 상기 지능형 엔진(140), 전송모듈(150), 검색모듈(160) 및 네트워크 설정모듈(170)은 웹서버를 통해서 설정, 전송, 검색에 대한 기능을 지원하도록 구성할 수 있다. 상기 웹서버는 적어도 하나 이상의 사용자 단말에서 웹으로 접속할 수 있는 수단을 제공하는 것으로서, 상기 관제서버(300)나 클라이언트 단말(400)이 상기 웹서버에 사용자 계정이 있는 상태에서 접속(즉 로그인)하면, 내부 구성정보가 나타나고(즉 사용자 인터페이스), 상기 사용자 인터페이스를 통해 각각의 모듈에 대한 정보의 확인이 가능하며, 이에 대한 설정 변경이 가능하다.Meanwhile, the intelligent engine 140, the transmission module 150, the search module 160, and the network setting module 170 may be configured to support functions for setting, transmission, and search through a web server. The web server provides a means for accessing the web from at least one user terminal, and when the control server 300 or the client terminal 400 accesses (i.e., logs in) the web server with a user account , Internal configuration information is displayed (ie, a user interface), and information on each module can be checked through the user interface, and settings can be changed.

또한 본 발명에 사용되는 영상, 음성, 데이터 또는 이들의 조합을 포함한 감시데이터에 대해서 각각 공통된 포맷이나 규격을 사용함으로써, 데이터 수신, 전송, 검색 등을 수행함에 있어서 데이터의 압축, 복호화 처리를 용이하게 수행하고, 각 영상 감시 장치 간의 호환성을 높일 수 있도록 하는 것이 바람직하다.In addition, by using a common format or standard for monitoring data including video, audio, data, or a combination thereof used in the present invention, it is easy to compress and decode data in performing data reception, transmission, and search. And it is desirable to improve the compatibility between each video monitoring device.

상기 수신모듈(110)은 적어도 하나 이상의 영상 감시 장치(200)로부터 입력되는 해당 감시대상영역의 영상, 음성, 데이터 또는 이들의 조합을 포함한 감시데이터를 IP 패킷 혹은 로우 데이터로 수신하고, 상기 IP 패킷 혹은 로우 데이터로 수신한 영상을 압축하고, 상기 압축한 데이터를 전송 스트림으로 변환한 다음 특정 목적지로 향하는 IP 패킷을 생성하여 출력하는 기능을 수행한다.The receiving module 110 receives monitoring data including video, audio, data, or a combination of the video, audio, data, or a combination of a corresponding monitoring target region input from at least one video monitoring device 200 as an IP packet or raw data, and the IP packet Alternatively, the video received as raw data is compressed, the compressed data is converted into a transport stream, and an IP packet destined for a specific destination is generated and output.

이때 상기 수신모듈(110)은 상기 영상 감시 장치(200)로부터 로우 데이터가 수신되면, 상기 로우 데이터를 특정 표준에 따라 압축 및 인코딩하여 상기 저장수단(130)에 저장하거나, 상기 전송모듈(150)을 통해 상기 관제서버(300)나 클라이언트 단말(400), 또는 다른 영상 감시 장치로 전송한다. 또한 상기 수신모듈(110)은 상기 영상 감시 장치(200)로부터 수신한 감시데이터를 그대로 상기 관제서버(300)나 클라이언트 단말(400), 또는 다른 영상 감시 장치로 전송하거나, 상기 저장수단(130)에 저장할 수도 있다.At this time, when raw data is received from the video monitoring device 200, the receiving module 110 compresses and encodes the raw data according to a specific standard and stores it in the storage unit 130, or the transmission module 150 Through the control server 300, the client terminal 400, or transmits to another video surveillance device. In addition, the receiving module 110 transmits the monitoring data received from the video monitoring device 200 as it is to the control server 300 or the client terminal 400, or to another video monitoring device, or the storage means 130 You can also save it.

상기 저장모듈(120)은 상기 수신모듈(110)로부터 상기 IP 패킷을 수신하고 상기 수신한 IP 패킷으로부터 압축 데이터인 레코딩 데이터를 추출하여 상기 저장수단(130)에 저장한다.The storage module 120 receives the IP packet from the receiving module 110, extracts recorded data, which is compressed data, from the received IP packet, and stores it in the storage unit 130.

상기 저장수단(130)은 상기 지능형 영상 감시 장치(100)에 구비된 로컬 스토리지 혹은 클라우드 상의 스토리지로서, 메모리, HDD(Hard Disk Drive), SD(Secure Digital) 카드, USB(Universal Serial Bus) 메모리 또는 이들의 조합으로 구성될 수 있으며, 상기 저장모듈(120)의 제어에 따라 인코딩된 영상, 음성, 데이터 또는 이들의 조합을 포함한 감시데이터를 저장한다. 또한 상기 IP 정보는 상기 인코딩된 영상, 음성, 데이터 또는 이들의 조합에 대한 구별을 위한 인덱스 역할을 할 수도 있다. 이때 상기 저장수단(130)은 상기 지능형 엔진(140)에서 수행한 결과에 따른 지능형 정보(즉 객체인식정보나 객체분석정보)를 저장할 수 있다.The storage means 130 is a local storage or cloud storage provided in the intelligent video monitoring device 100, a memory, a hard disk drive (HDD), a secure digital (SD) card, a universal serial bus (USB) memory, or It may be composed of a combination of these, and stores monitoring data including encoded video, audio, data, or a combination thereof under the control of the storage module 120. In addition, the IP information may serve as an index for distinguishing the encoded video, audio, data, or a combination thereof. In this case, the storage means 130 may store intelligent information (ie, object recognition information or object analysis information) according to a result performed by the intelligent engine 140.

상기 지능형 엔진(140)은 상기 지능형 영상 감시 장치(100)에서 직접 촬영한 영상이나, 상기 수신모듈(110)을 통해 적어도 하나 이상의 영상 감시 장치(200)로부터 수신한 영상에 대해서 객체인식이나 객체분석을 포함한 지능형 영상처리를 수행한다.The intelligent engine 140 recognizes an object or analyzes an object for an image directly captured by the intelligent image monitoring device 100 or an image received from at least one image monitoring device 200 through the receiving module 110. It performs intelligent image processing including.

즉 상기 지능형 엔진(140)은 상기 지능형 영상 감시 장치(100)에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치(200)에서 촬영한 영상을 토대로 사람, 자동차 및 동물을 포함한 객체인식을 수행하고, 상기 수행한 객체인식의 결과에 따른 객체인식정보를 생성한다. 그리고 상기 생성한 객체인식정보를 상기 지능형 영상 감시 장치(100)에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치(200)에서 촬영한 영상과 결합한 다음, 상기 전송모듈(150)을 통해 상기 관제서버(300)나 클라이언트 단말(400)로 전송한다. 이때 상기 객체인식은 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하는 것이 바람직하다.That is, the intelligent engine 140 performs object recognition including people, cars, and animals based on an image captured by the intelligent image monitoring device 100 or an image captured by at least one image monitoring device 200, and the Object recognition information is generated according to the result of object recognition performed. Then, the generated object recognition information is combined with an image captured by the intelligent video monitoring device 100 or an image captured by at least one video monitoring device 200, and then the control server ( 300) or the client terminal 400. In this case, the object recognition is preferably performed through artificial intelligence using a pre-set learning model.

또한 상기 지능형 엔진(140)은 상기 객체인식 이외에, 상기 지능형 영상 감시 장치(100)에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치(200)로부터 수신한 영상을 토대로 번호판 검출, 안면 검출, 불꽃이나 연기 검출 및 행동 패턴 검출을 포함한 객체분석을 수행하고, 상기 수행한 결과에 따른 객체분석정보를 생성한다. 그리고 상기 생성한 객체분석정보를 상기 지능형 영상 감시 장치(100)에서 촬영한 영상이나 적어도 하나 이상의 영상 감시 장치(200)에서 촬영한 영상과 결합한 후, 상기 전송모듈(150)을 통해 상기 관제서버(300)나 클라이언트 단말(400)로 전송한다. 이때 상기 객체분석은 상기 객체인식에서와 마찬가지로 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하는 것이 바람직하다.In addition to the object recognition, the intelligent engine 140 detects a license plate, detects a face, flame or smoke based on an image captured by the intelligent image monitoring device 100 or an image received from at least one image monitoring device 200. Object analysis including detection and behavior pattern detection is performed, and object analysis information is generated according to the result of the execution. Then, the generated object analysis information is combined with an image captured by the intelligent video monitoring device 100 or an image captured by at least one video monitoring device 200, and then the control server ( 300) or the client terminal 400. In this case, the object analysis is preferably performed through artificial intelligence using a learning model set in advance, as in the object recognition.

상기 전송모듈(150)은 상기 지능형 엔진(140)을 통해 수행한 객체인식이나 객체분석의 결과를 상기 지능형 영상 감시 장치(100)와 적어도 하나 이상의 영상 감시 장치(200)에서 촬영한 영상과 함께 지능형 영상 감시 장치의 접속채널로 상기 관제서버(300)나 클라이언트 단말(400)로 전송(즉 프록시 릴레이)할 수 있다.The transmission module 150 provides the result of object recognition or object analysis performed through the intelligent engine 140 together with images captured by the intelligent video monitoring device 100 and at least one video monitoring device 200. The access channel of the video monitoring device may be transmitted to the control server 300 or the client terminal 400 (ie, proxy relay).

한편 상기 전송모듈(150)은 특정 영상 감시 장치로부터 수신한 영상에 대해서 지능형 영상처리를 수행한 결과(즉 객체인식정보나 객체분석정보)를 상기 특정 영상 감시 장치에 전송하여, 상기 특정 영상 감시 장치에서 개별적으로 상기 지능형 영상처리를 수행한 결과를 포함한 영상을 상기 관제서버(300), 클라이언트 단말(400), 또는 주변의 타 영상 감시 장치로 직접 제공하도록 할 수도 있다.Meanwhile, the transmission module 150 transmits the result of performing intelligent image processing on the image received from the specific image monitoring device (ie, object recognition information or object analysis information) to the specific image monitoring device, and the specific image monitoring device In addition, an image including a result of individually performing the intelligent image processing may be directly provided to the control server 300, the client terminal 400, or other video monitoring devices in the vicinity.

상기 검색모듈(160)은 네트워크를 통해 접속된 상기 관제서버(300), 클라이언트 단말, 또는 타 영상 감시 장치의 요청에 따라 상기 저장수단(130)에 저장된 감시데이터를 검색하고, 상기 검색한 감시데이터를 상기 관제서버(300), 클라이언트 단말, 또는 타 영상 감시 장치로 전송한다. 이때 상기 검색된 감시데이터는 IP 패킷 형태로 출력되는데, 상기 IP 패킷의 출발지와 목적지는 상기 네트워크 설정모듈(170)을 통해서 독립적으로 정해진다.The search module 160 searches for monitoring data stored in the storage means 130 at the request of the control server 300, a client terminal, or another video monitoring device connected through a network, and the searched monitoring data Is transmitted to the control server 300, a client terminal, or another video monitoring device. At this time, the searched monitoring data is output in the form of an IP packet, and the source and destination of the IP packet are independently determined through the network setting module 170.

상기 네트워크 설정모듈(170)은 상기 지능형 영상 감시 장치(100)가 프록시 기능을 수행하도록 네트워크 설정을 수행한다.The network setting module 170 performs network setting so that the intelligent video monitoring device 100 performs a proxy function.

즉 상기 지능형 엔진(140)에서 수행한 객체인식정보나 객체분석정보를 상기 지능형 영상 감시 장치(100)나 적어도 하나 이상의 영상 감시 장치(200)에서 촬영한 영상과 함께 상기 전송모듈(150)을 통해서 상기 관제서버(300)나 클라이언트 단말(400)로 전송하도록 제어하는 것은 물론, 상기 관제서버(300)나 클라이언트 단말(400)로부터 입력받거나 기 저장된 설정정보를 토대로 상기 수신모듈(110), 저장모듈(120), 지능형 엔진(140), 전송모듈(150) 및 검색모듈(160)에 대한 제어명령을 생성하여, 각 모듈의 설정을 제어하는 것이다.That is, object recognition information or object analysis information performed by the intelligent engine 140 together with an image captured by the intelligent video monitoring device 100 or at least one video monitoring device 200 through the transmission module 150 In addition to controlling the transmission to the control server 300 or the client terminal 400, the receiving module 110, the storage module based on the input or pre-stored setting information from the control server 300 or the client terminal 400 By generating control commands for 120, the intelligent engine 140, the transmission module 150, and the search module 160, the settings of each module are controlled.

예를 들어, 상기 네트워크 설정모듈(170)은 영상, 음성, 데이터 또는 이들의 조합을 포함한 감시데이터의 저장, 스트리밍 등의 처리를 지원하기 위한 출발지 및 목적지 정보를 저장하고 있으며, 이에 대한 정보를 IPC를 통해 각각의 모듈로 출력하여 설정을 제어한다.For example, the network setting module 170 stores source and destination information to support processing such as storage and streaming of monitoring data including video, audio, data, or a combination thereof, and IPC It outputs to each module through and controls the setting.

또한 상기 네트워크 설정모듈(170)은 상기 등록한 적어도 하나 이상의 영상 감시 장치(200)에 대한 카메라 제어명령 및 영상품질을 포함한 처리 조건에 대한 제어명령을 생성하여 상기 적어도 하나 이상의 영상 감시 장치(200)의 동작을 관리할 수 있다.In addition, the network setting module 170 generates a camera control command for the registered at least one video monitoring device 200 and a control command for processing conditions including image quality, You can manage the operation.

도 5는 본 발명의 일 실시예에 따른 지능형 영상 감시 장치의 네트워크 설정모듈의 구성을 상세하게 나타낸 도면이다.5 is a diagram showing in detail the configuration of a network setting module of an intelligent video monitoring device according to an embodiment of the present invention.

도 5에 도시된 바와 같이, 상기 네트워크 설정모듈(170)은 멀티채널 등록부(171), 멀티채널 생성부(172), 설정 제어부(173), 영상 감시 장치 제어부(174)를 포함하여 구성된다.As shown in FIG. 5, the network setting module 170 includes a multi-channel registration unit 171, a multi-channel generation unit 172, a setting control unit 173, and a video monitoring device control unit 174.

상기 멀티채널 등록부(171)는 내부 네트워크, 외부 네트워크 또는 이들의 조합을 통해 접속된 적어도 하나 이상의 영상 감시 장치(200)를 등록한다.The multi-channel registration unit 171 registers at least one video monitoring device 200 connected through an internal network, an external network, or a combination thereof.

이때 상기 멀티채널 등록부(171)는 상기 등록한 각 영상 감시 장치(200)의 IP 주소, 감시데이터의 처리 조건, 위치 또는 이들의 조합을 포함한 정보를 등록하여 관리할 수 있다.At this time, the multi-channel registration unit 171 may register and manage information including an IP address, a processing condition of the monitoring data, a location, or a combination of each of the registered video monitoring devices 200.

상기 멀티채널 생성부(172)는 상기 지능형 영상 감시 장치(100)와 상기 멀티채널 등록부(171)에 등록한 적어도 하나 이상의 영상 감시 장치(200)를 포함하여 멀티채널을 구성한다.The multi-channel generation unit 172 configures a multi-channel including the intelligent video monitoring device 100 and at least one video monitoring device 200 registered in the multi-channel registration unit 171.

상기 설정 제어부(173)는 상기 수신모듈(110), 저장모듈(120), 지능형 엔진(140), 전송모듈(150) 및 검색모듈(160)의 설정을 제어한다.The setting control unit 173 controls the settings of the receiving module 110, the storage module 120, the intelligent engine 140, the transmission module 150, and the search module 160.

또한 상기 설정 제어부(173)는 사용자 권한에 따라 제공 가능한 상기 영상 감시 장치(200)의 목록과 각 영상 감시 장치(200)의 감시조건을 설정할 수 있으며, 상기 목록과 감시조건에 따라 상기 멀티채널 생성부(172)를 통해서 멀티채널을 구성할 수 있다.In addition, the setting control unit 173 can set the list of the video monitoring devices 200 that can be provided according to the user authority and the monitoring conditions of each video monitoring device 200, and generate the multi-channel according to the list and monitoring conditions. Multi-channel can be configured through the unit 172.

상기 영상 감시 장치 제어부(174)는 상기 멀티채널 등록부(171)에 등록된 조건, 상기 관제서버(300)나 클라이언트 단말(400)에서 제공된 조건 또는 이들의 조합에 따라 해당 영상 감시 장치(200)의 구동을 제어한다.The video monitoring device control unit 174 is the condition registered in the multi-channel registration unit 171, the condition provided by the control server 300 or the client terminal 400, or a combination of the video monitoring device 200 Control the drive.

다음에는, 이와 같이 구성된 본 발명에 따른 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법의 일 실시예를 도 6을 참조하여 상세하게 설명한다. 이때 본 발명의 방법에 따른 각 단계는 사용 환경이나 당업자에 의해 순서가 변경될 수 있다.Next, an embodiment of a method of driving an intelligent video monitoring device supporting a proxy function according to the present invention configured as described above will be described in detail with reference to FIG. 6. At this time, the order of each step according to the method of the present invention may be changed by a use environment or a person skilled in the art.

도 6은 본 발명의 일 실시예에 따른 본 발명의 일 실시예에 따른 지능형 영상 감시 장치 구동방법의 동작과정을 상세하게 나타낸 순서도이다.6 is a flowchart illustrating in detail an operation process of a method of driving an intelligent video monitoring device according to an embodiment of the present invention according to an embodiment of the present invention.

우선, 지능형 영상 감시 장치(100)는 프록시 기능을 수행하기 위하여 네트워크 설정을 수행하는 단계를 수행한다. 즉 상기 지능형 영상 감시 장치(100)에 구비된 지능형 엔진(140)을 통해 수행한 객체인식정보나 객체분석정보를 상기 지능형 영상 감시 장치(100)나 적어도 하나 이상의 영상 감시 장치(200)에서 촬영한 영상과 결합하고, 이를 네트워크를 관제서버(300)나 클라이언트 단말(400)로 프록시 릴레이하고, 상기 관제서버(300)나 클라이언트 단말(400)로부터 입력받거나 기 저장된 설정정보를 토대로 상기 지능형 영상 감시 장치(100)의 각 모듈에 대한 설정을 수행하는 것이다.First, the intelligent video monitoring apparatus 100 performs a step of performing a network setting in order to perform a proxy function. That is, object recognition information or object analysis information performed through the intelligent engine 140 provided in the intelligent video monitoring device 100 is captured by the intelligent video monitoring device 100 or at least one video monitoring device 200. The intelligent video monitoring device is combined with an image, and proxy relays the network to the control server 300 or the client terminal 400, and is input from the control server 300 or the client terminal 400, or based on pre-stored setting information. It is to perform the setting for each module of (100).

이처럼 상기 지능형 영상 감시 장치(100)를 프록시 기능을 수행하기 위한 네트워크 설정을 수행한 이후, 상기 지능형 영상 감시 장치(100)는 내부 네트워크, 외부 네트워크 또는 이들의 조합을 통해 접속된 적어도 하나 이상의 영상 감시 장치(200)를 등록하여 멀티채널을 구성하는 단계를 수행한다(S100).After performing the network setting for performing the proxy function of the intelligent video monitoring device 100 as described above, the intelligent video monitoring device 100 monitors at least one video connected through an internal network, an external network, or a combination thereof. A step of configuring a multi-channel by registering the device 200 is performed (S100).

이어서 상기 지능형 영상 감시 장치(100)는 상기 등록한 적어도 하나 이상의 영상 감시 장치(200)로부터 영상, 음성, 텍스트 또는 이들의 조합을 포함한 감시데이터를 수신한다(S200).Subsequently, the intelligent video surveillance device 100 receives surveillance data including video, audio, text, or a combination thereof from the registered at least one video surveillance device 200 (S200).

즉 상기 지능형 영상 감시 장치(100)의 수신모듈(110)을 통해 적어도 하나 이상의 영상 감시 장치(200)로부터 IP 패킷 혹은 로우 데이터로 수신한 영상을 압축하고, 상기 압축한 데이터를 전송 스트림으로 변환한 다음 특정 목적지로 향하는 IP 패킷을 생성하여 출력하는 것이다. 이때 상기 지능형 영상 감시 장치(100)는 저장모듈(120)을 통해 상기 수신모듈(110)로부터 상기 IP 패킷을 수신하고 상기 수신한 IP 패킷으로부터 압축 데이터인 레코딩 데이터를 추출하여 저장수단(130)에 저장할 수 있다.That is, an image received as an IP packet or raw data from at least one video monitoring device 200 through the receiving module 110 of the intelligent video monitoring device 100 is compressed, and the compressed data is converted into a transport stream. Next, an IP packet destined for a specific destination is generated and output. At this time, the intelligent video monitoring device 100 receives the IP packet from the receiving module 110 through the storage module 120, extracts the compressed data recorded data from the received IP packet, and stores it in the storage unit 130. Can be saved.

상기 S200 단계를 통해 상기 영상 감시 장치(200)로부터 영상, 음성, 텍스트 또는 이들의 조합을 포함한 감시데이터를 수신한 이후, 상기 지능형 영상 감시 장치(100)는 상기 수신한 상기 영상 감시 장치(200)에서 촬영한 영상이나 상기 지능형 영상 감시 장치(100)에서 직접 촬영한 영상에 대해서 객체인식을 포함한 지능형 영상처리를 수행하는 단계를 수행한다(S300). 즉 상기 지능형 영상 감시 장치(100)의 지능형 엔진(140)에서 사전에 설정된 학습모델을 이용한 인공지능을 통해서 상기 영상에서 사람, 자동차 및 동물을 포함한 객체인식을 수행하는 것이다.After receiving the monitoring data including video, audio, text, or a combination thereof from the video monitoring device 200 through the step S200, the intelligent video monitoring device 100 is the received video monitoring device 200 A step of performing intelligent image processing including object recognition is performed on the image captured in the image or the image directly captured by the intelligent image monitoring device 100 (S300). That is, the intelligent engine 140 of the intelligent image monitoring device 100 performs object recognition including a person, a vehicle, and an animal in the image through artificial intelligence using a pre-set learning model.

또한 상기 지능형 영상 감시 장치(100)는 상기 S200 단계를 통해 수신한 상기 영상 감시 장치(200)에서 촬영한 영상이나 상기 지능형 영상 감시 장치(100)에서 직접 촬영한 영상에 대해서 객체분석을 포함한 지능형 영상처리를 수행하는 단계를 수행한다(S400). 즉 상기 지능형 영상 감시 장치(100)의 지능형 엔진(140)에서 사전에 설정된 학습모델을 이용한 인공지능을 통해서 상기 영상에서 번호판 검출, 안면 검출, 불꽃이나 연기 검출 및 행동 패턴 검출을 포함한 객체분석을 수행하는 것이다.In addition, the intelligent video monitoring device 100 is an intelligent video including object analysis for an image captured by the video monitoring device 200 received through the step S200 or an image directly captured by the intelligent video monitoring device 100. A step of performing processing is performed (S400). That is, the intelligent engine 140 of the intelligent video monitoring device 100 performs object analysis including license plate detection, face detection, flame or smoke detection, and behavior pattern detection in the image through artificial intelligence using a pre-set learning model. It is to do.

이때 상기 지능형 영상 감시 장치(100)는 상기 S300 단계와 S400 단계에서 생성한 객체인식정보와 객체분석정보를 저장수단에 저장할 수 있다.In this case, the intelligent video monitoring device 100 may store the object recognition information and object analysis information generated in the steps S300 and S400 in a storage means.

이어서, 상기 지능형 영상 감시 장치(100)는 상기 S300 단계와 S400 단계에서 수행한 결과에 따른 객체인식정보와 객체분석정보를 생성한다(S500).Subsequently, the intelligent video monitoring apparatus 100 generates object recognition information and object analysis information according to the results performed in steps S300 and S400 (S500).

또한 상기 지능형 영상 감시 장치(100)는 상기 S500 단계에서 생성한 객체인식정보와 객체분석정보를 상기 지능형 영상 감시 장치(100)나 상기 적어도 하나 이상의 영상 감시 장치(200)에서 촬영한 영상과 함께 지능형 영상 감시 장치의 접속채널을 통해 상기 관제서버(300)나 클라이언트 단말(400)로 전송한다(S600).In addition, the intelligent video monitoring device 100 provides the object recognition information and object analysis information generated in the step S500 together with the image captured by the intelligent video monitoring device 100 or the at least one video monitoring device 200. It is transmitted to the control server 300 or the client terminal 400 through the access channel of the video monitoring device (S600).

즉 외부의 상기 관제서버(300)나 클라이언트 단말(400)에서 상기 지능형 영상 감시 장치(100)의 하부나 주변에 연결된 영상 감시 장치(200)에 직접 접속할 필요없이, 상기 지능형 영상 감시 장치(100)와 접속하는 것만으로 프록시 릴레이를 통해 원하는 영상 감시 장치(200)에서 촬영한 영상에 대한 객체인식정보와 객체분석정보가 포함된 감시데이터를 제공받을 수 있는 것이다.That is, the intelligent video monitoring device 100 without the need to directly access the video monitoring device 200 connected to the lower or surrounding of the intelligent video monitoring device 100 from the external control server 300 or the client terminal 400 It is possible to receive monitoring data including object recognition information and object analysis information for an image captured by the desired video monitoring device 200 through a proxy relay by simply connecting with.

한편, 도면에 도시하지는 않았지만, 상기 지능형 영상 감시 장치(100)는 상기 S300 단계와 S400 단계에서 수행한 객체인식정보와 객체분석정보를 영상을 제공한 하위나 주변의 특정 영상 감시 장치(200)로 직접 전송함으로써, 상기 특정 영상 감시 장치(200)에서 개별적으로 상기 객체인식정보와 객체분석정보를 해당 영상과 함께, 상기 관제서버(300), 클라이언트 단말(400), 또는 주변의 타 영상 감시 장치로 직접 제공하도록 할 수 있다.On the other hand, although not shown in the drawing, the intelligent video monitoring device 100 is the object recognition information and object analysis information performed in the steps S300 and S400 to the lower or surrounding specific video monitoring device 200 that provided the image. By direct transmission, the object recognition information and object analysis information are individually transmitted from the specific video monitoring device 200 together with the corresponding video to the control server 300, the client terminal 400, or other video monitoring devices in the vicinity. You can give it yourself.

또한 상기 지능형 영상 감시 장치(100)는 검색모듈(160)을 통해 네트워크를 통해 접속된 상기 관제서버(300), 클라이언트 단말(400), 또는 주변의 타 영상 감시 장치의 요청에 따라 상기 저장수단(130)에 저장된 감시데이터를 검색하고, 상기 검색한 감시데이터를 상기 관제서버(300), 클라이언트 단말(400), 또는 주변의 타 영상 감시 장치로 전송하도록 할 수 있다.In addition, the intelligent video monitoring device 100 is connected to the control server 300 through the network through the search module 160, the client terminal 400, or the storage means ( 130), and the searched monitoring data may be transmitted to the control server 300, the client terminal 400, or other video monitoring devices in the vicinity.

이처럼, 본 발명은 지능형 영상 감시 장치에 내장된 지능형 엔진의 리소스를 타 영상 감시 장치와 공유하는 시간적 멀티플렉싱 개념을 통해서 각 영상 감시 장치에 객체인식이나 객체분석의 지능 기능을 지원할 수 있으며, 이를 통해 관제서버나 클라이언트 단말에서 각 영상 감시 장치를 지능형 영상 감시 장치로 활용할 수 있다.As described above, the present invention can support the intelligent function of object recognition or object analysis to each video monitoring device through the concept of temporal multiplexing in which the resource of the intelligent engine built in the intelligent video monitoring device is shared with other video monitoring devices. Each video surveillance device can be used as an intelligent video surveillance device in a server or a client terminal.

또한 본 발명은 상기 지능형 영상 감시 장치에서 상기 객체인식이나 객체분석한 결과를 영상과 함께 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송할 때, 상기 객체인식이나 객체분석한 결과를 해당 영상과 함께 지능형 영상 감시 장치의 접속채널로 전송할 수 있는 효과가 있다.In addition, when the intelligent video monitoring device transmits the object recognition or object analysis result together with an image to an external client terminal, another video monitoring device, or a control server, the object recognition or object analysis result is transmitted to the corresponding image. In addition, there is an effect that it can be transmitted to the access channel of the intelligent video monitoring device.

또한 본 발명은 외부의 클라이언트 단말 또는 관제서버에서 상기 지능형 영상 감시 장치에 등록된 각 영상 감시 장치에 직접적으로 접속하는 것을 불가능하게 하여 보안을 크게 강화할 수도 있으며, 하나의 지능형 영상 감시 장치와 적어도 하나 이상의 영상 감시 장치를 그룹핑하여 카메라 네트워크를 설정할 수 있으므로 영상 감시 장치의 관리를 용이하게 수행할 수 있다.In addition, the present invention may greatly enhance security by making it impossible to directly access each video monitoring device registered in the intelligent video monitoring device from an external client terminal or a control server. Since the camera network can be set by grouping the video surveillance devices, it is possible to easily manage the video surveillance devices.

또한 본 발명은 상기 지능형 영상 감시 장치와 상기 지능형 영상 감시 장치에 등록된 각 영상 감시 장치를 네트워크 모듈화하여 구성할 수 있으므로, 각각의 모듈 간은 물론이고 인접한 다른 영상 감시 장치에 구비된 모듈과 데이터 수신, 전송, 검색 등을 용이하게 수행할 수 있다.In addition, in the present invention, since the intelligent video surveillance device and each video surveillance device registered in the intelligent video surveillance device can be configured as a network module, modules and data provided in other adjacent video surveillance devices as well as between each module are received. , Transfer, search, etc. can be easily performed.

이상에서와 같이 본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 판단되어야 할 것이다.As described above, the present invention has been described with reference to the embodiments shown in the drawings, but this is only exemplary, and various modifications and equivalent other embodiments are provided from those of ordinary skill in the field to which the technology pertains. You will understand that it is possible. Therefore, the technical protection scope of the present invention should be determined by the following claims.

100 : 지능형 영상 감시 장치 110 : 수신모듈
120 : 저장모듈 130 : 저장수단
140 : 지능형 엔진 150 : 전송모듈
160 : 검색모듈 170 : 네트워크 설정모듈
171 : 멀티채널 등록부 172 : 멀티채널 생성부
173 : 설정 제어부 174 : 영상 감시 장치 제어부
200 : 영상 감시 장치 300 : 관제서버
310 : 분석서버 400 : 클라이언트 단말
500 : 데이터베이스100: intelligent video monitoring device 110: receiving module
120: storage module 130: storage means
140: intelligent engine 150: transmission module
160: search module 170: network setting module
171: multi-channel registration unit 172: multi-channel generation unit
173: setting control unit 174: video monitoring device control unit
200: video monitoring device 300: control server
310: analysis server 400: client terminal
500: database

Claims (14)

프록시 기능을 지원하는 지능형 영상 감시 장치에 있어서,
상기 지능형 영상 감시 장치가 프록시 기능을 수행하도록 네트워크 설정을 수행하는 네트워크 설정모듈;
상기 지능형 영상 감시 장치에서 촬영하거나 타 영상 감시 장치에서 촬영한 영상에 대해서 지능형 영상처리를 수행하는 지능형 엔진; 및
상기 지능형 영상처리를 수행한 결과를 상기 프록시 기능을 수행하도록 설정된 네트워크를 통해 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 전송모듈;을 포함하며,
상기 지능형 영상 감시 장치는, 상기 타 영상 감시 장치의 요청에 따라 상기 타 영상 감시 장치로부터 수신한 영상에 대해서 지능형 영상처리를 수행한 결과를 상기 타 영상 감시 장치로 전송하는 것을 더 포함하며,
상기 지능형 영상 감시 장치에 내장된 지능형 엔진의 리소스를 상기 타 영상 감시 장치에서 공유하여 상기 지능형 영상처리를 수행하도록 함으로써, 상기 타 영상 감시 장치를 지능형 영상 감시 장치로 활용할 수 있도록 하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치.In the intelligent video surveillance device supporting a proxy function,
A network setting module configured to configure a network so that the intelligent video monitoring device performs a proxy function;
An intelligent engine that performs intelligent image processing on the image captured by the intelligent video monitoring device or by another video surveillance device; And
And a transmission module that transmits the result of performing the intelligent image processing to an external client terminal, another video monitoring device, or a control server through a network configured to perform the proxy function,
The intelligent video monitoring device further comprises transmitting a result of performing intelligent image processing on the image received from the other video monitoring device to the other video monitoring device according to the request of the other video monitoring device,
A proxy, characterized in that the other video monitoring device can use the other video monitoring device as an intelligent video monitoring device by sharing the resource of the intelligent engine built into the intelligent video monitoring device with the other video monitoring device to perform the intelligent video processing. Intelligent video surveillance device supporting functions. 청구항 1에 있어서,
상기 네트워크 설정모듈은,
내부 네트워크, 외부 네트워크 또는 이들의 조합을 통해 접속된 상기 타 영상 감시 장치를 등록하여 멀티채널을 구성하는 것을 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치.The method according to claim 1,
The network setting module,
The intelligent video monitoring device supporting a proxy function, further comprising registering the other video monitoring device connected through an internal network, an external network, or a combination thereof to configure a multi-channel. 청구항 1에 있어서,
상기 지능형 영상 감시 장치는,
상기 지능형 엔진을 이용하여, 프록시하는 상기 타 영상 감시 장치의 영상에 대해서 객체인식을 포함한 지능형 영상처리를 수행하고, 상기 지능형 영상처리를 수행한 결과와 영상을 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 것을 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치.The method according to claim 1,
The intelligent video monitoring device,
Using the intelligent engine, intelligent image processing including object recognition is performed on the image of the other image monitoring device to be proxied, and the result of the intelligent image processing and the image are transmitted to an external client terminal, another image monitoring device, Or, an intelligent video surveillance device supporting a proxy function, further comprising transmitting to a control server. 청구항 1에 있어서,
상기 지능형 엔진은,
상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상을 토대로 사람, 자동차 및 동물을 포함한 객체인식을 수행하고, 상기 수행한 객체인식의 결과에 따른 객체인식정보를 생성하는 것을 더 포함하며,
상기 객체인식은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며,
상기 전송모듈은,
상기 생성한 객체인식정보를 상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치.The method according to claim 1,
The intelligent engine,
Further comprising performing object recognition including humans, automobiles, and animals based on images photographed by the intelligent video monitoring device or captured by the other video monitoring device, and generating object recognition information according to a result of the performed object recognition. And
The object recognition is performed through artificial intelligence using a pre-set learning model,
The transmission module,
Further comprising proxy relaying the generated object recognition information to an external client terminal, another video monitoring device, or a control server together with the image captured by the intelligent video monitoring device or the other video monitoring device. An intelligent video surveillance device that supports a proxy function. 청구항 4에 있어서,
상기 지능형 엔진은,
상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상을 토대로 번호판 검출, 안면 검출, 불꽃이나 연기 검출 및 행동 패턴 검출을 포함한 객체분석을 수행하고, 상기 수행한 객체분석의 결과에 따른 객체분석정보를 생성하는 것을 더 포함하며,
상기 객체분석은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며,
상기 전송모듈은,
상기 생성한 객체분석정보를 상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치.The method of claim 4,
The intelligent engine,
Object analysis including license plate detection, face detection, flame or smoke detection, and behavior pattern detection is performed based on the image captured by the intelligent video monitoring device or captured by the other video monitoring device, and according to the result of the performed object analysis. Further comprising generating object analysis information,
The object analysis is performed through artificial intelligence using a pre-set learning model,
The transmission module,
Further comprising proxy relaying the generated object analysis information to an external client terminal, another video monitoring device, or a control server together with the image captured by the intelligent video monitoring device or the other video monitoring device. An intelligent video surveillance device that supports a proxy function. 삭제delete 청구항 1에 있어서,
상기 지능형 영상 감시 장치는,
상기 타 영상 감시 장치로부터 IP 패킷 혹은 로우 데이터의 영상을 수신하는 수신모듈;
상기 IP 패킷을 포함한 데이터를 저장수단에 저장하는 저장모듈; 및
네트워크를 통해 접속된 클라이언트 단말, 타 영상 감시 장치 또는 관제서버에서 상기 저장수단에 저장된 감시데이터를 검색하고, 상기 검색한 감시데이터를 상기 클라이언트 단말, 타 영상 감시 장치 또는 관제서버로 제공하는 검색모듈;을 더 포함하며,
상기 IP 패킷의 출발지와 목적지는 상기 네트워크 설정모듈을 통해서 독립적으로 정해지는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치.The method according to claim 1,
The intelligent video monitoring device,
A receiving module for receiving an image of an IP packet or raw data from the other video monitoring device;
A storage module for storing data including the IP packet in a storage means; And
A search module for searching monitoring data stored in the storage means from a client terminal, another video monitoring device, or a control server connected through a network, and providing the searched monitoring data to the client terminal, another video monitoring device, or a control server; It further includes,
An intelligent video monitoring device supporting a proxy function, wherein the source and destination of the IP packet are independently determined through the network setting module. 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법에 있어서,
상기 지능형 영상 감시 장치가 프록시 기능을 수행하도록 네트워크 설정을 수행하는 단계;
상기 지능형 영상 감시 장치에서 촬영하거나 타 영상 감시 장치에서 촬영한 영상에 대해서 지능형 영상처리를 수행하는 단계; 및
상기 지능형 영상처리를 수행한 결과를 상기 프록시 기능을 수행하도록 설정된 네트워크를 통해 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 단계;를 포함하며,
상기 지능형 영상 감시 장치에서, 상기 타 영상 감시 장치의 요청에 따라 상기 타 영상 감시 장치로부터 수신한 영상에 대해서 지능형 영상처리를 수행한 결과를 상기 타 영상 감시 장치로 전송하는 것을 더 포함하며,
상기 지능형 영상 감시 장치에 내장된 지능형 엔진의 리소스를 상기 타 영상 감시 장치에서 공유하여 지능형 영상처리를 수행하도록 함으로써, 상기 타 영상 감시 장치를 지능형 영상 감시 장치로 활용할 수 있도록 하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법.In the method of driving an intelligent video monitoring device supporting a proxy function,
Performing a network setting so that the intelligent video monitoring device performs a proxy function;
Performing intelligent image processing on the image captured by the intelligent video monitoring device or by another video monitoring device; And
Transmitting the result of performing the intelligent image processing to an external client terminal, another video monitoring device, or a control server through a network configured to perform the proxy function; and
The intelligent video monitoring device further comprises transmitting a result of performing intelligent image processing on the image received from the other video monitoring device to the other video monitoring device according to the request of the other video monitoring device,
A proxy function, characterized in that the resource of the intelligent engine built into the intelligent video monitoring device is shared by the other video monitoring device to perform intelligent video processing, so that the other video monitoring device can be used as an intelligent video monitoring device. An intelligent video monitoring device driving method that supports. 청구항 8에 있어서,
상기 지능형 영상 감시 장치 구동방법은,
상기 지능형 영상 감시 장치에서, 내부 네트워크, 외부 네트워크 또는 이들의 조합을 통해 접속된 상기 타 영상 감시 장치를 등록하여 멀티채널을 구성하는 단계;를 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치 구동 방법.The method of claim 8,
The intelligent video monitoring device driving method,
In the intelligent video monitoring device, registering the other video monitoring device connected through an internal network, an external network, or a combination thereof to configure a multi-channel; intelligent video supporting a proxy function further comprising How to drive a monitoring device. 청구항 8에 있어서,
상기 지능형 영상 감시 장치 구동방법은,
상기 지능형 영상 감시 장치에서, 내장된 지능형 엔진을 이용하여, 프록시하는 상기 타 영상 감시 장치의 영상에 대해서 객체인식을 포함한 지능형 영상처리를 수행하고, 상기 지능형 영상처리를 수행한 결과와 영상을 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 전송하는 단계;를 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법.The method of claim 8,
The intelligent video monitoring device driving method,
In the intelligent video monitoring device, using a built-in intelligent engine, intelligent image processing including object recognition is performed on the image of the other video monitoring device to be proxied, and the result of the intelligent image processing and the image are externally processed. Transmitting to a client terminal, another video monitoring device, or a control server; intelligent video monitoring device driving method for supporting a proxy function further comprising. 청구항 8에 있어서,
상기 지능형 영상 감시 장치 구동방법은,
상기 지능형 영상 감시 장치에서, 상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상을 토대로 사람, 자동차 및 동물을 포함한 객체인식을 수행하고, 상기 수행한 객체인식의 결과에 따른 객체인식정보를 생성하는 단계;를 더 포함하며,
상기 객체인식은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며,
상기 지능형 영상 감시 장치에서, 상기 생성한 객체인식정보를 상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법.The method of claim 8,
The intelligent video monitoring device driving method,
In the intelligent video monitoring device, object recognition including people, cars, and animals is performed based on an image photographed by the intelligent video monitoring device or by the other video monitoring device, and object recognition according to the result of the performed object recognition Generating information; further includes,
The object recognition is performed through artificial intelligence using a pre-set learning model,
In the intelligent video monitoring device, the generated object recognition information is captured by the intelligent video monitoring device or together with the video captured by the other video monitoring device, and a proxy relay to an external client terminal, another video monitoring device, or a control server Driving method of an intelligent video monitoring device supporting a proxy function, characterized in that it further comprises. 청구항 11에 있어서,
상기 지능형 영상 감시 장치 구동방법은,
상기 지능형 영상 감시 장치에서, 상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상을 토대로 번호판 검출, 안면 검출, 불꽃이나 연기 검출 및 행동 패턴 검출을 포함한 객체분석을 수행하고, 상기 수행한 객체분석의 결과에 따른 객체분석정보를 생성하는 단계;를 더 포함하며,
상기 객체분석은, 사전에 설정된 학습모델을 이용한 인공지능을 통해서 수행하며,
상기 생성한 객체분석정보를 상기 지능형 영상 감시 장치에서 촬영하거나 상기 타 영상 감시 장치에서 촬영한 영상과 함께, 외부의 클라이언트 단말, 타 영상 감시 장치, 또는 관제서버로 프록시 릴레이하는 것을 더 포함하는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법.The method of claim 11,
The intelligent video monitoring device driving method,
In the intelligent video monitoring device, object analysis including license plate detection, face detection, flame or smoke detection, and behavior pattern detection is performed based on the image photographed by the intelligent video monitoring device or captured by the other video monitoring device, and the execution Further comprising; generating object analysis information according to the result of one object analysis,
The object analysis is performed through artificial intelligence using a pre-set learning model,
Further comprising proxy relaying the generated object analysis information to an external client terminal, another video monitoring device, or a control server together with the image captured by the intelligent video monitoring device or the other video monitoring device. An intelligent video surveillance device driving method that supports a proxy function. 삭제delete 청구항 8에 있어서,
상기 지능형 영상 감시 장치 구동방법은,
상기 지능형 영상 감시 장치의 수신모듈에서, 상기 타 영상 감시 장치로부터 IP 패킷 혹은 로우 데이터의 영상을 수신하는 단계;
상기 지능형 영상 감시 장치의 저장모듈에서, 상기 IP 패킷을 포함한 데이터를 저장수단에 저장하는 단계; 및
상기 지능형 영상 감시 장치의 검색모듈에서, 네트워크를 통해 접속된 클라이언트 단말, 타 영상 감시 장치 또는 관제서버에서 상기 저장수단에 저장된 감시 데이터를 검색하고, 상기 검색한 감시데이터를 상기 클라이언트 단말, 타 영상 감시 장치 또는 관제서버로 제공하는 단계;를 더 포함하며,
상기 IP 패킷의 출발지와 목적지는 네트워크 설정모듈을 통해서 독립적으로 정해지는 것을 특징으로 하는 프록시 기능을 지원하는 지능형 영상 감시 장치 구동방법.The method of claim 8,
The intelligent video monitoring device driving method,
Receiving, by a receiving module of the intelligent video monitoring device, an image of an IP packet or raw data from the other video monitoring device;
Storing, in a storage module of the intelligent video monitoring device, data including the IP packet in a storage means; And
In the search module of the intelligent video monitoring device, a client terminal connected through a network, another video monitoring device, or a control server searches for monitoring data stored in the storage means, and the searched monitoring data is used to monitor the client terminal and other video. Further comprising; providing a device or a control server;
A method of driving an intelligent video monitoring device supporting a proxy function, characterized in that the source and destination of the IP packet are independently determined through a network configuration module.
KR1020200116995A 2020-09-11 2020-09-11 Intelligent image surveillance apparatus supporting proxy function and driving method thereof KR102251777B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200116995A KR102251777B1 (en) 2020-09-11 2020-09-11 Intelligent image surveillance apparatus supporting proxy function and driving method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200116995A KR102251777B1 (en) 2020-09-11 2020-09-11 Intelligent image surveillance apparatus supporting proxy function and driving method thereof

Publications (1)

Publication Number Publication Date
KR102251777B1 true KR102251777B1 (en) 2021-05-13

Family

ID=75913297

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200116995A KR102251777B1 (en) 2020-09-11 2020-09-11 Intelligent image surveillance apparatus supporting proxy function and driving method thereof

Country Status (1)

Country Link
KR (1) KR102251777B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114124498A (en) * 2021-11-12 2022-03-01 中国建设银行股份有限公司 Monitoring equipment registration method and device, electronic equipment and storage medium
KR20220162351A (en) * 2021-06-01 2022-12-08 주식회사 인포쉐어 Intelligent CCTV And Surveillance System Using It

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180104968A (en) * 2017-03-14 2018-09-27 주식회사 세연테크 A multi-channel proxy based ip-camera and the video surveillance system by using the same
KR101921868B1 (en) * 2018-06-26 2018-11-23 장승현 Intelligent video mornitoring system and method thereof
KR102119721B1 (en) * 2019-10-23 2020-06-05 주식회사 넥스트케이 Intellectual Edge Device and Driving Method Thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180104968A (en) * 2017-03-14 2018-09-27 주식회사 세연테크 A multi-channel proxy based ip-camera and the video surveillance system by using the same
KR101921868B1 (en) * 2018-06-26 2018-11-23 장승현 Intelligent video mornitoring system and method thereof
KR102119721B1 (en) * 2019-10-23 2020-06-05 주식회사 넥스트케이 Intellectual Edge Device and Driving Method Thereof

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220162351A (en) * 2021-06-01 2022-12-08 주식회사 인포쉐어 Intelligent CCTV And Surveillance System Using It
KR102555845B1 (en) 2021-06-01 2023-07-17 주식회사 인포쉐어 Intelligent CCTV And Surveillance System Using It
CN114124498A (en) * 2021-11-12 2022-03-01 中国建设银行股份有限公司 Monitoring equipment registration method and device, electronic equipment and storage medium
CN114124498B (en) * 2021-11-12 2024-04-26 中国建设银行股份有限公司 Monitoring equipment registration method and device, electronic equipment and storage medium

Similar Documents

Publication Publication Date Title
US11210501B2 (en) Camera enhanced ride sharing
KR102251777B1 (en) Intelligent image surveillance apparatus supporting proxy function and driving method thereof
CN105897573A (en) Smart home gateway system supporting multiple protocols and multiple services
EP3534257B1 (en) System for updating software in moving body using vehicle-mounted gateway
CN109080669A (en) A kind of city rail vehicle monitoring device and system based on mobile Private Virtual Network
KR101260167B1 (en) Method and Apparatus for Distributing Video under Multi-channel, Video Management System Using The Same
CN102196248A (en) Mobile video monitoring system and method
CN106131486A (en) The system and method that can carry out video monitoring at any time based on vehicular communication networks
WO2022052412A1 (en) Violation data identification method and apparatus, and electronic device
CN111143658A (en) Method and device for inquiring vehicle state information and vehicle
CN115665111B (en) Real-time Communication System Based on Law Enforcement Recorder
KR20180089039A (en) Security System With IP Camera And Network Video Recorder
WO2022017192A1 (en) Edge computing device, and edge computing method and system
KR100727420B1 (en) Multi-Guardian Service System Using Data communication protocol
CN108768969B (en) Network penetration system
JP2002328851A (en) Control method and transmitter
KR20010016030A (en) System and method for controlling robot using internet
CN116866631B (en) Integrated traffic video management method and system
CN112202786B (en) Illegal data identification method and device and electronic equipment
KR102099120B1 (en) Video transmission method using wireless network and mobile terminal
CN112163538B (en) Illegal data identification method and device and electronic equipment
CN112201046B (en) Illegal data identification method and device and electronic equipment
CN117041500B (en) Video access method applied to field highway engineering
KR102199388B1 (en) Apparatus for video surveillance with network module structure and constructing method thereof
KR101846791B1 (en) Method and system for remote management of monorail using mobile communication network

Legal Events

Date Code Title Description
GRNT Written decision to grant