KR101921868B1 - 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 - Google Patents
고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 Download PDFInfo
- Publication number
- KR101921868B1 KR101921868B1 KR1020180073060A KR20180073060A KR101921868B1 KR 101921868 B1 KR101921868 B1 KR 101921868B1 KR 1020180073060 A KR1020180073060 A KR 1020180073060A KR 20180073060 A KR20180073060 A KR 20180073060A KR 101921868 B1 KR101921868 B1 KR 101921868B1
- Authority
- KR
- South Korea
- Prior art keywords
- resolution
- information
- image
- network camera
- metadata
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G06F17/3079—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G06K9/6267—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
본 발명은 지능형 영상 감시 시스템 및 그 방법에 관한 것이다. 지능형 영상 감시 시스템은 고해상도의 네트워크 카메라, 객체 분류기, 이벤트 스토리지, 객체 인식 서버 및 검색 단말기를 포함한다. 객체 분류기는 네트워크 카메라로부터 전송된 저해상도 영상 정보로부터 객체를 추출하고, 객체 정보를 생성하여 네트워크 카메라로 전송한다. 네트워크 카메라는 객체 분류기로부터 전송된 객체 정보와, 객체가 포함된 고해상도 정지 영상을 이벤트 스토리지로 전송한다. 이벤트 스토리지는 객체 정보와 고해상도 정지 영상을 객체의 카테고리별로 저장한다. 객체 인식 서버는 객체 정보를 통해 메타데이터를 생성 저장한다. 본 발명에 의하면, 고해상도의 네트워크 카메라를 이용하여 고해상도 영상 정보 또는 저해상도 영상 정보를 용도에 따라 객체 분류기, 이벤트 스토리지에 선택적으로 제공하고, 이벤트 발생 시, 고해상도 영상 정보를 이용하여 객체에 대한 정확한 인식이 가능하고, 필요에 따라 원하는 객체를 실시간 검색이 가능하다.
Description
본 발명은 지능형 영상 감시 시스템에 관한 것으로, 좀 더 구체적으로 고해상도의 네트워크 카메라를 이용하여 고해상도 영상 정보를 획득하고, 평소에는 저해상도 영상 정보를 이용하여 영상을 모니터링하도록 제공하고, 객체가 검지되면, 고해상도 영상 정보로부터 고해상도 정지 영상이나 고해상도 동영상의 일부분을 추출하여 객체를 인식 및 모니터링하도록 별도의 저장 장치에 저장하고, 이를 통해 검지된 객체의 메타데이터를 생성하여 객체에 대한 실시간 검색이 가능하도록 제공하여 이벤트 발생에 따른 객체 식별의 정확성을 향상시키고, 객체의 상태, 이동 경로를 파악하거나 모니터링이 용이하도록 하는 지능형 영상 감시 시스템 및 그 방법에 관한 것이다.
인명이나 차량 사고, 사유 재산 및 공공 재산에 대한 보호의 필요성이 증대됨에 따라 범죄에 대한 예방, 증거 확보 또는 사고 예방 활동 등을 위한 다양한 형태의 감시 카메라, 폐쇄회로 카메라 등이 설치되고, 이를 시스템적으로 활용하는 기술들이 널리 개발 및 적용되고 있다.
통상적으로 이러한 감시 카메라와 이를 활용하는 감시 시스템 또는 방범 시스템에서는 특정 지역 내지 공간을 촬영하고 촬영된 영상을 특정 기간(예를 들어, 30일) 동안 보관하는 방식이 가장 일반적이라고 할 수 있다. 이러한 방식은 특정 사건이나 사고 등이 발생한 후, 사건이나 사고의 경위 내지 피의자 등을 확인하거나 식별하기 위한 목적으로 활용되고 있다. 이러한 종래의 방식은 사고나 사건 등이 발생되고 난 후, 증거 확인 등을 위하여 활용되도록 비디오 영상 등을 단순히 보관하는 방법이므로 사후적 후행 방법이라고 할 수 있다.
이러한 감시 시스템, 방범 시스템은 설치되는 환경, 감시 내지 감지의 중요도 등에 따라 다양하게 설계 가능하지만, 보다 선명하고 정확한 영상을 확보하기 위해서 예를 들어, 사건 내지 사고의 주요 대상인 객체를 보다 선명하고 정확하게 촬영하기 위해서는 점차 높은 해상도 및 사양의 카메라 모듈을 이용한다. 그러나, 고해상도 및 고사양의 카메라 설치에 따른 경제적 측면은 물론, 사건 내지 사고 발생 빈도 등을 고려할 때, 무조건적으로 고해상도 및 고사양의 카메라 모듈을 이용하는 것이 효율적이라고 단정하기는 어렵다고 할 수 있다.
예컨대, 높은 사양의 카메라 모듈을 이용하는 경우, 복수 개의 카메라 모듈들을 각각 지속적으로 고해상도의 영상을 감시 시스템, 방범 시스템 등의 관제 시스템으로 전송하므로 데이터 트래픽이 증가하고, 엄청난 크기의 저장 용량과 데이터 처리를 위한 하드웨어 리소스가 뒷받침되어야 하므로, 처리 속도가 저하됨은 물론, 데이터 보관 내지 관리 등에서 비효율적이다. 예컨대, 네트워크 부하 및 저장용량이 부족해지는 문제점이 있을 뿐만 아니라, 촬영되는 영상 내에 사람이나 동물 또는 차량 등과 같은 객체의 인식률 및 시인성도 매우 떨어지며, 네트워크 장애, 카메라 모듈이나 시스템 동작 이상으로 인한 고장 증상이 발생하게 되면, 유지보수가 어렵다는 문제점이 발생될 수 있다.
또한, 종래 대부분의 방범 시스템은 사람이 전체 영상 화면을 육안으로 관찰하거나 저장된 영상 데이터를 사후적으로 확인하는 방법 등으로 이용되고 있는데 이러한 방법은 기본적으로 인적 인프라에 의존적인 방법에 기초하는 것이므로 자원의 효율적 활용이 상당히 낮으며 상황 인식을 객관적이고 정확하게 구현하기 어려움은 물론, 복합적인 행동 패턴을 인식하는 데에는 한계가 있다고 할 수 있다.
상술한 바와 같이, 기존의 방범 또는 감시 시스템에 지능형 카메라 및 시스템이 도입이 되어 여러 방향성을 가지고 개발 및 운영되고 있다. 예를 들어, 기존의 방범 또는 감시 시스템 중 지능형 방식은 영상에 나오는 여러 객체를 인식하여 객체에 대한 정보를 저장하고, 추후 검색 시 세분화된 정보를 빠르게 도출하고자 도입된 방식으로, 현재 2M CCTV 카메라를 통해 지능형 객체 인식 후 사후 검색 시 객체에 대한 이미지 인식이 부정확하여 고화질 카메라를 통한 이미지 표출 정확성을 높일 필요성이 있으나, 현재 CCTV 영상 시스템에서는 고화질(4K)의 카메라를 통해 운영 시, 네트워크 부하, 운영 시스템의 호환성 부족 및 저장 공간의 부족 등 환경적인 문제로 인해 도입이 어려운 상황이다.
본 발명의 목적은 네트워크 카메라로부터 설치 장소에 대한 고해상도 영상을 촬영하고, 이를 통해 객체를 보다 정확하게 식별하고 객체에 대한 메타데이터를 생성, 저장하여 원하는 객체를 실시간 검색 및 모니터링하기 위한 지능형 영상 감시 시스템 및 그 방법을 제공하는 것이다.
본 발명의 다른 목적은 네트워크 카메라를 이용하여 평소에는 저해상도의 영상을 이용하여 모니터링하도록 하고, 이벤트 발생 시, 고해상도의 영상을 이용하여 이벤트 발생된 객체를 보다 정확하게 인식 및 모니터링하기 위한 지능형 영상 감시 시스템 및 그 방법을 제공하는 것이다.
본 발명의 또 다른 목적은 고화질의 정지 영상을 활용하여 이벤트 발생된 객체 정보를 저장하고, 사후 검색(Deep Running)을 통해 필요한 객체에 대한 검색이 가능하도록 하여, 저장 공간 절감, 네트워크 부하 절감 및 정확한 데이터 도출이 가능한 지능형 영상 감시 시스템 및 그 방법을 제공하는 것이다.
상기 목적들을 달성하기 위한, 본 발명의 지능형 영상 감시 시스템은 고해상도의 네트워크 카메라로부터 설치 장소에 대한 여러 가지 해상도의 영상을 동시에 생성하도록 하고, 저해상도의 영상으로부터 객체를 검지하고, 객체가 검지된 동일한 순간에 대한 동시에 생성된 고해상도의 영상을 별도로 전송받아 객체를 구체적으로 인식하는데 그 한 특징이 있다. 이와 같은 본 발명의 지능형 영상 감시 시스템은 객체를 구체적으로 인식하기 위해 고해상도 영상을 필요한 순간에만 별도로 전송받아 구체적인 객체의 인식이 가능하게 한다.
이 특징에 따른 본 발명의 지능형 영상 감시 시스템은, 설치 장소에 대한 고해상도 영상 정보와 저해상도 영상 정보를 생성하는 네트워크 카메라; 상기 네트워크 카메라로부터 저해상도 영상 정보를 받아서 저해상도 영상 정보에 포함된 객체를 검지하고, 검지된 객체에 대한 객체 정보를 카테고리별로 분류하고, 상기 네트워크 카메라로 객체 정보를 제공하는 객체 분류기; 상기 객체 분류기로부터 객체 정보가 상기 네트워크 카메라로 제공되면, 상기 네트워크 카메라로부터 객체가 검지된 고해상도 정지 영상 또는 일부 시간 구간의 고해상도 동영상을 받아서 객체의 카테고리별로 저장하는 이벤트 스토리지; 상기 이벤트 스토리지에 저장된 고해상도 정지 영상 또는 일부 시간 구간의 고해상도 동영상으로부터 이벤트가 발생된 객체를 인식하고, 인식된 객체의 객체 정보를 이용하여 객체의 메타데이터를 생성, 저장하여, 메타데이터를 이용하여 원하는 객체를 검색하도록 하는 객체 인식 서버; 및 상기 객체 인식 서버로 원하는 객체에 대한 검색 정보를 입력하여 검색된 객체 정보에 대응하는 객체를 모니터링하는 검색 단말기;를 포함한다.
이 특징의 한 실시예에 있어서, 상기 지능형 영상 감시 시스템은, 상기 객체 분류기로부터 전송되는 저해상도 영상 정보와, 상기 이벤트 스토리지로부터 제공되는 고해상도 정지 영상 또는 고해상도 동영상을 받아서 관리하는 영상 관리 시스템; 및 상기 영상 관리 시스템 및 상기 객체 인식 서버 중 어느 하나로부터 고해상도 영상 정보, 저해상도 영상 정보를 받아서 표시하고, 상기 검색 단말기가 검색한 객체를 모니터링하도록 표시하는 영상 표시 장치;를 더 포함한다.
다른 실시예에 있어서, 상기 객체 인식 서버는, 상기 검색 단말기로부터 원하는 객체를 검색하기 위한 검색 정보가 입력되면, 메타데이터를 이용하여 검색 정보에 대응하는 객체를 추출하여, 검색된 객체가 포함된 고해상도 정지 영상 또는 고해상도 동영상을 상기 검색 단말기 또는 상기 영상 표시 장치에 표시되도록 제공한다.
또 다른 실시예에 있어서, 상기 객체 인식 서버는, 상기 이벤트 스토리지에 저장된 고해상도 정지 영상 또는 고해상도 동영상에서 검지된 객체를 인식하고, 상기 이벤트 스토리지로부터 인식된 객체에 대한 객체 정보를 받아들이는 객체 인식부; 상기 객체 인식부로부터 객체 정보를 받아서 검지된 객체에 대한 메타데이터를 생성하는 메타데이터 생성부; 상기 메타데이터 생성부에 의해 생성된 메타데이터를 저장, 관리하는 메타데이터 저장부; 및 상기 객체 인식 서버로 원하는 객체를 검색하기 위한 검색 정보가 입력되면, 상기 메터데이터 저장부에 저장된 메타데이터를 이용하여 검색 정보에 대응하는 객체를 검색하고, 검색된 객체를 모니터링하도록 상기 이벤트 스토리지로부터 검색 결과에 따라 객체가 포함된 고해상도 정지 영상 또는 고해상도 동영상을 추출하여 제공하는 객체 검색 처리부;를 포함한다.
또 다른 실시예에 있어서, 상기 객체 분류기는; 상기 네트워크 카메라의 내부에 구비된다.
본 발명의 다른 특징에 따르면, 지능형 영상 감시 시스템의 처리 방법이 제공된다.
이 특징에 따른 지능형 영상 감시 시스템의 처리 방법은, 고해상도의 네트워크 카메라를 이용하여 설치 장소에 대한 고해상도 영상 정보와 저해상도 영상 정보를 생성하고, 저해상도 영상 정보를 객체 분류기로 전송하는 단계; 상기 객체 분류기가 상기 네트워크 카메라로부터 전송된 저해상도 영상 정보에서 객체를 검지하고, 검지된 객체에 대한 객체 정보를 생성하여 카테고리별로 분류하며, 상기 네트워크 카메라로 객체 정보를 전송하는 단계; 상기 네트워크 카메라가 객체 정보를 받아서 객체가 포함된 고해상도 정지 영상 또는 일정 시간 구간의 고해상도 동영상을 추출하여 객체 정보와 함께 이벤트 스토리지로 전송하는 단계; 상기 이벤트 스토리지가 상기 네트워크 카메라로부터 전송된 객체 정보와 고해상도 정지 영상 또는 고해상도 동영상을 객체의 카테고리별로 저장하는 단계; 및 객체 인식 서버가 상기 이벤트 스토리지에 저장된 객체 정보를 이용하여 객체를 인식하고, 인식된 객체에 대한 메타데이터를 생성, 저장하는 단계;를 포함한다.
이 특징의 한 실시예에 있어서, 상기 처리 방법은, 상기 객체 인식 서버가 검색 단말기로부터 원하는 객체에 대한 검색 정보가 입력되면, 메타데이터를 이용하여 객체를 추출하여, 추출된 객체가 포함된 고해상도 정지 영상 또는 고해상도 동영상을 실시간으로 확인 및 모니터링하도록 상기 검색 단말기로 제공하는 단계;를 더 포함한다.
다른 실시예에 있어서, 상기 객체 분류기에서 객체를 검지 및 분류하는 것은; 상기 객체 분류기가 상기 네트워크 카메라의 내부에 구비되어, 저해상도 영상 정보에서 객체를 검지 및 분류한다.
상술한 바와 같이, 본 발명의 지능형 영상 감시 시스템은 고해상도 카메라를 이용하여 설치 장소에 대한 고해상도 영상 정보를 획득하고, 고해상도 영상 정보로부터 객체를 인식함으로써, 객체에 대한 정확한 지능형 검색이 가능하다.
또 본 발명의 지능형 영상 감시 시스템은 고해상도 영상 정보로부터 객체를 인식 및 분류하여, 객체에 대한 메타데이터를 생성, 저장함으로써, 필요에 따라 원하는 객체를 실시간 검색이 가능하다.
또한 본 발명의 지능형 영상 감시 시스템은 평소에는 저해상도 영상 정보를 이용하고, 이벤트 발생 시에는 고해상도 영상 정보를 이용함으로써, 영상 저장 공간 및 네트워크 부하를 줄일 수 있으며, 이벤트 발생에 따른 객체 식별의 정확성을 향상시키고, 이를 통해 객체의 상태, 이동 경로 등을 파악하거나 모니터링하는데 용이하다.
뿐만 아니라, 본 발명의 지능형 영상 감시 시스템은 객체가 포함된 고해상도의 정지 영상 또는 고해상도 동영상의 일부를 이용하여 객체를 인식하도록 함으로써, 저장 공간에 대한 효율성이 높고, 이를 통해 저장 기간을 기존에 비해 길게 하여 사고나 사건 등의 이벤트에 대한 근거 확보 기간을 증가시킬 수 있으며, 네트워크 부하를 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따른 지능형 영상 감시 시스템의 네트워크 구성을 도시한 블럭도,
도 2는 본 발명의 다른 실시예에 따른 지능형 영상 감시 시스템의 네트워크 구성을 도시한 블럭도,
도 3은 본 발명에 따른 지능형 영상 감시 시스템의 처리 수순을 도시한 흐름도,
도 4는 도 1에 도시된 지능형 영상 감시 시스템의 구체적인 구성을 나타내는 블럭도, 그리고
도 5는 도 4에 도시된 객체 인식 서버의 구성을 나타내는 블럭도이다.
도 2는 본 발명의 다른 실시예에 따른 지능형 영상 감시 시스템의 네트워크 구성을 도시한 블럭도,
도 3은 본 발명에 따른 지능형 영상 감시 시스템의 처리 수순을 도시한 흐름도,
도 4는 도 1에 도시된 지능형 영상 감시 시스템의 구체적인 구성을 나타내는 블럭도, 그리고
도 5는 도 4에 도시된 객체 인식 서버의 구성을 나타내는 블럭도이다.
본 발명의 실시예는 여러 가지 형태로 변형될 수 있으며, 본 발명의 범위가 아래에서 서술하는 실시예로 인해 한정되어지는 것으로 해석되어서는 안된다. 본 실시예는 당업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서 도면에서의 구성 요소의 형상 등은 보다 명확한 설명을 강조하기 위해서 과장되어진 것이다.
이하 첨부된 도 1 내지 도 5를 참조하여 본 발명의 실시예를 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 지능형 영상 감시 시스템의 네트워크 구성을 도시한 블럭도이다.
도 1을 참조하면, 본 발명의 지능형 영상 감시 시스템(2)은 고해상도의 네트워크 카메라(200)를 이용하여 실시간으로 서로 다른 해상도를 갖는 영상을 생성한다. 이 실시예에서 네트워크 카메라(200)는 고해상도 영상 정보(즉, 고해상도 동영상)를 획득하고, 고해상도 영상 정보를 압축하여 서로 다른 저해상도 영상 정보를 생성하여 용도에 따라 고해상도 영상 정보 또는 저해상도 영상 정보를 제공한다. 또 본 발명의 지능형 영상 감시 시스템(2)은 저해상도 영상 정보에서 객체가 검지되면, 고해상도 영상 정보를 통해 검지된 객체가 포함되는 고해상도 정지 영상 또는 일부 구간의 고해상도 동영상을 별도의 저장 장치에 저장하고, 저장된 고해상도 정지 영상 또는 고해상도 동영상으로부터 객체에 대한 메타데이터를 생성, 저장하며, 이를 통해 원하는 객체를 실시간 검색 및 모니터링 가능하도록 제공한다.
이러한 본 발명의 지능형 영상 감시 시스템(2)은 평소에는 저해상도 영상 정보를 이용하여 설치 장소에 대한 영상을 모니터링하도록 하고, 저해상도 영상 정보에서 이벤트 즉, 객체가 검지되면, 고해상도 영상 정보를 이용하여 객체 인식 및 모니터링 하도록 하여, 이벤트 발생 시에만 고해상도 영상 정보를 저장하게 함으로써, 영상 저장 공간의 용량 절감, 네트워크 부하 절감 효과를 제공할 수 있으며, 이벤트 발생에 따른 객체 식별의 정확성 향상과, 객체의 상태, 이동 경로 등을 파악하거나 모니터링하는데 용이하다.
이를 위해 본 발명의 지능형 영상 감시 시스템(2)은 복수 개의 네트워크 카메라(200)와, 객체 분류기(110)와, 이벤트 스토리지(120)와, 객체 인식 서버(100) 및 검색 단말기(300)를 포함한다. 본 발명의 지능형 영상 감시 시스템(2)은 각 구성요소들 간에 데이터 통신을 위하여 범용 네트워크 또는 내부 네트워크 등 사용자에 의해 기설정된 네트워크 환경을 통하여 데이터들을 송수신 가능하게 연결된다. 예컨데, 네트워크는 본 발명의 지능형 영상 감시 시스템(2)의 각 구성요소들 간의 데이터 통신이 가능하게 연결해주는 통신망(Network)으로서, 유무선 통신망, 이동 통신망, 근거리 통신망 등으로 구비되고, 이들 각각의 단일 통신망 또는 혼합된 통신망으로 제공될 수 있다.
구체적으로, 네트워크 카메라(200)는 복수 개가 서로 다른 설치 장소들 각각에 설치되고, 설치 장소를 촬영하여 고해상도의 동영상 정보를 획득한다. 네트워크 카메라(200)는 예컨대, 4K 고화질의 CCTV 카메라, IP 카메라 등으로 구비되어, 기존의 방범 및 감시 시스템에 적용되는 저해상도의 CCTV 카메라로부터 획득되는 영상 정보(예를 들어, 약 1M 내지 3M 픽셀의 영상 정보) 보다 높은 해상도의 영상 정보(예를 들어, 12 M 픽셀의 영상 정보)를 획득한다.
또 네트워크 카메라(200)는 내부의 엔코더, 압축 코덱 등을 이용하여 획득된 고해상도 영상 정보를 서로 다른 압축률로 압축시켜서 서로 다른 해상도를 갖는 저해상도 영상 정보를 동시에 생성한다. 이 실시예에서 저해상도 영상 정보는 예컨대, H.264 압축 코덱 기준으로 D1(NTSC, PAL) 급(640 × 480)의 동영상으로 제공되고, 고해상도 영상 정보는 예컨대, 12 M 픽셀의 동영상으로 제공된다.
이러한 네트워크 카메라(200)는 복수 개(예를 들어, 5 ~ 10 개)의 유저(user)가 영상을 모니터링 할 수 있도록 용도에 따라 영상의 해상도를 달리하여, 유저에게 고해상도 영상 정보를 제공하거나, 저해상도 영상 정보를 제공할 수 있다. 여기서 네트워크 카메라(200)의 유저는 객체 분류기(110), 이벤트 스토리지(120) 및 영상 관리 시스템(Video Management System : VMS)(도 4의 130) 등이 해당되며, 예컨대, 네트워크 카메라(200)는 평소에 객체 분류기(110)로 저해상도 영상 정보를 제공하고, 이벤트 발생 시, 이벤트 스토리지(120)로 고해상도 영상 정보를 제공한다. 또 네트워크 카메라(200)는 고해상도 및 저해상도 영상 정보를 영상 관리 시스템(130)으로 제공한다. 따라서 네트워크 카메라(200)는 유저별로 서로 다른 해상도의 영상 정보를 제공할 수 있으며, 이를 통해 용도에 맞는 해상도의 영상을 모니터링하거나 관리할 수 있다.
또 네트워크 카메라(200)는 객체 분류기(110)로부터 저해상도 영상 정보에서 이벤트가 발생되면 즉, 객체가 검지되면, 이에 대응하여 이벤트 스토리지(120)로 이벤트가 발생된 객체에 대한 객체 정보와, 이벤트가 발생된 시간대의 고해상도 정지 영상을 복수 개 제공하거나, 또는 일정 시간 구간의 고해상도 동영상을 제공한다.
객체 분류기(110)는 복수 개의 네트워크 카메라(200)들 각각으로부터 저해상도 영상 정보를 받는다. 객체 분류기(110)는 저해상도 영상 정보를 영상 처리하여 객체에 대한 형상, 크기 등의 특징을 이용하여 객체 유무, 객체 종류 등을 판별하여 객체를 검지하고, 검지된 객체들을 카테고리별로 분류한다. 여기서 검지된 객체는 특정인, 차량 번호 등이 될 수 있다. 객체 분류기(110)는 분류된 객체들 각각에 대한 객체 정보를 생성한다. 여기서 카테고리는 이동 또는 움직임 가능한 대상물들로, 예컨대 사람, 차량, 이륜차 등 객체의 종류별로 분류된다. 객체 정보에는 예를 들어, 객체의 종류, 크기, 색상, 속도, 위치, 이동 방향 및 움직임 경로 등에 대한 정보와, 타임 스탬프(time stamp), 객체에 대한 영상 획득 시각, 영상 내의 객체 위치(좌표), 객체가 포함된 영상 구간 등에 대한 정보가 포함된다. 예를 들어, 객체 정보에는 객체가 사람인 경우, 사람에 대한 식별 정보(남, 여, 노, 소 등)가 더 포함될 수 있으며, 차량이나 이륜차인 경우에는 차량 번호가 더 포함될 수 있다.
객체 분류기(110)는 저해상도 영상 정보로부터 이벤트 즉, 객체가 검지되면, 검지된 객체의 객체 정보로부터 네트워크 카메라(200)를 식별하여 해당 객체의 객체 정보를 식별된 네트워크 카메라(200)로 제공한다. 이에 해당 네트워크 카메라(200)는 객체 분류기(110)로부터 객체 정보를 받아서 객체 정보에 대응되는 복수 개의 고해상도 정지 영상 또는 일정 시간 구간의 고해상도 동영상을 이벤트 스토리지(120)로 제공한다.
이벤트 스토리지(120)는 네트워크 카메라(200)로부터 이벤트가 발생된 객체에 대한 객체 정보와, 복수 개의 고해상도 정지 영상 또는 일정 시간 구간의 고해상도 동영상을 받아서 객체 분류기(110)에 의해 분류된 객체에 따른 영상 정보와 객체 정보를 카테고리별로 저장한다.
객체 인식 서버(100)는 이벤트 스토리지(120)에 카테고리별로 저장된 객체 정보를 통해 객체를 인식하고, 인식된 객체들에 대한 메타데이터를 생성, 저장한다. 객체 인식 서버(100)는 검색 단말기(300)로부터 원하는 객체에 대한 검색 정보가 입력되면, 메터데이터를 통해 해당 객체를 검색하고, 검색된 객체에 대한 객체 정보와 이벤트 스토리지(120)에 저장된 고해상도 정지 영상 또는 일정 시간 구간의 고해상도 동영상 검색 단말기(300)로 제공하여 해당 객체를 모니터링하도록 처리한다.
그리고 검색 단말기(300)는 검색용 콘솔(console)로서, 지능형 영상 감시 시스템(2)의 관리자, 담당자 등에 의해 필요에 따라, 원하는 객체에 대한 검색 정보를 입력받아서 객체 인식 서버(100)로부터 객체를 실시간으로 검색한다. 따라서 검색 단말기(300)는 검색된 객체를 실시간으로 확인 및 모니터링할 수 있다. 예를 들어, 검색 단말기(300)는 차량 번호를 입력받아서 검색하거나, 사진 입력으로 검색하는 등 객체의 검색을 용이하게 하는 유저 인터페이스를 제공하고, 이를 통해 객체 인식, 객체의 위치 및 상태 확인, 객체의 신속한 이동 경로 파악 등을 지원할 수 있다.
따라서 본 발명의 지능형 영상 감시 시스템(2)은 고해상도 영상 정보의 객체에 대한 메타데이터를 저장하고, 이를 통해 고해상도 영상 정보에서의 객체를 실시간 검색이 가능하도록 제공하여, 이벤트 발생에 따른 객체 식별의 정확성을 향상시키고, 객체의 상태, 이동 경로 등을 파악하거나 모니터링할 수 있다.
도 2는 본 발명의 다른 실시예에 따른 지능형 영상 감시 시스템의 네트워크 구성을 도시한 블럭도이다.
도 2를 참조하면, 이 실시예의 지능형 영상 감시 시스템(2a)은 도 1의 실시예(2)와는 달리 객체 분류기(210)가 네트워크 카메라(200a)의 내부에 구비되며, 다른 구성들 각각은 도 1의 실시예(2)의 구성과 그 기능이 대체로 동일하거나 유사하게 구비된다. 따라서 여기서는 도 1의 실시예와 차이점을 중점으로 상세히 설명하고, 동일한 기능의 구성에 대한 설명은 생략한다.
즉, 네트워크 카메라(200a)는 고해상도 영상 정보를 획득하고, 획득된 고해상도 영상 정보를 압축하여 저해상도 영상 정보를 생성하고, 생성된 저해상도 영상 정보를 내부의 객체 분류기(210)로 제공한다.
객체 분류기(210)는 저해상도 영상 정보로부터 객체(예를 들어, 특정인, 차량 번호 등)를 검지하고, 객체가 검지되면, 검지된 객체에 대한 객체 정보를 생성하여 네트워크 카메라(200a)로 제공한다. 객체 분류기(210)는 객체가 검지되면, 검지된 객체에 대한 객체 정보를 카테고리별로 분류하여 저장한다.
네트워크 카메라(200a)는 객체 분류기(210)로부터 객체 정보를 받아서 고해상도 영상 정보로부터 복수 개의 고해상도 정지 영상 또는 일정 시간 구간의 고해상도 동영상을 추출하고, 객체 정보와 추출된 고해상도 정지 영상 또는 고해상도 동영상을 이벤트 스토리지(120)로 전송하여 이벤트 스토리지(120)에 카테고리별로 저장시킨다.
따라서 객체 인식 서버(100)는 이벤트 스토리지(120)로부터 객체 정보를 읽어와서 이벤트가 발생된 객체를 인식하고, 인식된 객체들에 대한 메타데이터를 생성, 저장하여 검색 단말기(300)가 객체를 검색하도록 제공한다.
도 3은 본 발명에 따른 지능형 영상 감시 시스템의 처리 수순을 도시한 흐름도이다.
도 3을 참조하면, 본 발명의 지능형 영상 감시 시스템(2, 2a)은 단계 S400에서 고해상도의 네트워크 카메라(200, 200a)를 이용하여 설치 장소에 대한 고해상도 영상 정보를 실시간으로 획득한다.
단계 S410에서 네트워크 카메라(200, 200a)는 획득된 고해상도 영상 정보를 서로 다른 압축률로 압축하여 서로 다른 해상도를 갖는 저해상도 영상 정보를 생성하고, 생성된 저해상도 영상 정보를 객체 분류기(110, 210)로 전송한다.
단계 S420에서 객체 분류기(110, 210)는 네트워크 카메라(200, 200a)로부터 전송된 저해상도 영상 정보에서 객체의 유무, 객체의 종류 등을 판별하여 객체를 검지하고, 검지된 객체에 대한 객체 정보를 생성하여 객체에 대한 카테고리별로 저장한다.
단계 S430에서 객체 분류기(110, 210)가 저해상도 영상 정보에서 객체를 검지하여 이벤트가 발생되면, 단계 S440으로 진행하여 검지된 객체에 대한 객체 정보를 네트워크 카메라(200, 200a)로 전송한다. 그러나 단계 S430에서 객체가 검지되지 않으면, 객체 분류기(110, 210)는 저해상도 영상 정보를 이용하여 영상을 실시간으로 모니터링하도록 단계 S490으로 진행한다.
단계 S450에서 네트워크 카메라(200, 200a)는 객체 분류기(110, 210)로부터 객체 정보가 전송되면, 고해상도 영상 정보로부터 전송된 객체 정보에 대응되는 객체가 포함된 복수 개의 고해상도 정지 영상 또는 일정 시간 구간의 고해상도 동영상을 추출하여 객체 정보와 함께 이벤트 스토리지(120)로 전송한다.
단계 S460에서 이벤트 스토리지(120)는 전송된 객체 정보와, 고해상도 정지 영상 또는 고해상도 동영상을 카테고리별로 저장한다. 이 때, 고해상도 정지 영상 또는 고해상도 동영상은 객체를 모니터링 할 수 있도록 단계 S490으로 진행된다.
단계 S470에서 객체 인식 서버(100)는 이벤트 스토리지(120)로부터 객체 정보를 읽어와서 객체에 대한 메타데이터를 생성 및 저장한다.
단계 S480에서 객체 인식 서버(100)는 검색 단말기(300)로부터 검색 정보가 입력되면, 메터데이터를 이용하여 원하는 객체를 검색하여 이벤트 스토리지(120)로부터 추출하고, 단계 S490에서 검색 단말기(300)가 추출된 객체에 대한 객체 정보와 고해상도 정지 영상 또는 고해상도 동영상을 출력시켜서 검색된 객체를 실시간으로 확인 및 모니터링하도록 한다.
구체적으로 본 발명의 지능형 영상 감시 시스템의 실시예에 따른 구성 및 기능을 설명한다.
도 4는 도 1에 도시된 지능형 영상 감시 시스템의 구체적인 구성을 나타내는 블럭도이고, 도 5는 도 4에 도시된 객체 인식 서버의 구성을 나타내는 블럭도이다.
도 4 및 도 5를 참조하면, 이 실시예의 지능형 영상 감시 시스템(2)은 네트워크 부하 및 저장 용량을 절감하면서 영상 내에 객체의 인식 정확도를 향상시킬 수 있도록 하기 위하여, 설치 장소들 각각에 대해, 고해상도 영상 정보를 획득하는 복수 개의 네트워크 카메라(200)와, 객체 분류기(110)와, 이벤트 스토리지(120)와, 영상 관리 시스템(130)과, 영상 표시 장치(140)와, 객체 인식 서버(100) 및 검색 단말기(300)를 포함한다. 객체 분류기(110)와, 이벤트 스토리지(120)와, 영상 관리 시스템(130)과, 영상 표시 장치(140)와, 객체 인식 서버(100) 및 검색 단말기(300)들은 영상 감시 센터, 방범 센터, 관제 센터 등에 구비된다.
구체적으로, 네트워크 카메라(200)는 예컨대, 4K 고화질(4K Ultra High Definition : 4K UHD) CCTV 카메라로 구비된다. 네트워크 카메라(200)는 예컨대, 기존의 저해상도 CCTV 카메라로부터 획득되는 영상 정보(예를 들어, 2M 픽셀의 영상 정보) 보다 높은 해상도의 영상 정보(예를 들어, 12M 픽셀의 영상 정보)를 획득한다. 복수 개의 네트워크 카메라(200)들은 지역 단위 또는 그룹별로 하나의 객체 분류기(110)와 네트워크를 통해 연결된다. 또 복수 개의 네트워크 카메라(200)들은 네트워크를 통해 적어도 하나의 이벤트 스토리지(120)와 연결된다. 또 네트워크 카메라(200)들은 네트워크를 통해 영상 관리 시스템(130)과 연결될 수도 있다.
이러한 네트워크 카메라(200)는 획득된 고해상도 영상 정보를 서로 다른 압축률로 압축하여 서로 다른 해상도를 갖는 저해상도 영상 정보를 생성할 수 있다. 또 네트워크 카메라(200)는 용도에 따라 고해상도 영상 정보나 저해상도 영상 정보를 제공할 수 있다. 즉, 네트워크 카메라(200)는 객체 분류기(110)로 예컨대, H.264 압축 코덱 기준으로 D1 급의 저해상도 영상 정보를 전송하고, 이벤트 스토리지(120)로 예컨대, 12 M 픽셀의 고해상도 영상 정보를 전송한다. 또 네트워크 카메라(200)는 영상 관리 시스템(130)으로 고해상도 및 저해상도 영상 정보를 전송할 수도 있다.
객체 분류기(110)는 네트워크 카메라(200)로부터 전송된 저해상도 영상 정보에서 객체를 검지하고, 검지된 객체에 대한 객체 정보를 생성하여 객체에 대한 카테고리별(예를 들어, 사람, 차량, 이륜차 등)로 저장한다. 따라서 객체 분류기(110)는 D1 급의 저해상도 동영상으로부터 객체를 검지할 수 있도록 영상 처리하여 객체 정보를 생성하고, 생성된 객체 정보를 네트워크 카메라(200)로 전송한다.
이에 네트워크 카메라(200)는 객체 분류기(110)로부터 객체 정보가 전송되면, 이벤트가 발생된 것으로 보고, 해당 이벤트가 발생된 객체에 대한 객체 정보와, 객체가 포함되는 고해상도 영상 정보를 이벤트 스토리지(120)로 전송한다. 이 때, 이벤트 스토리지(120)로 전송되는 고해상도 영상 정보는 12M 픽셀의 고해상도 영상 정보로부터 추출된 고해상도 정지 영상이나 이벤트가 발생된 객체가 포함된 일정 시간 구간의 고해상도 동영상이 될 수 있다. 예를 들어, 고해상도 정지 영상은 고해상도 영상 정보로부터 추출된 어느 하나의 영상 프레임 등으로 구비되는 고해상도 스틸 컷으로 제공되며, 고해상도 스틸 컷에는 객체가 포함된다. 이러한 객체 분류기(110)는 네크워크 카메라(200)와 통신망을 통해 연결되거나, 네트워크 카메라(200)의 내부 모듈로 구비될 수 있다.
이벤트 스토리지(120)는 적어도 하나의 저장 장치로 구비되고, 네트워크 카메라(200)로부터 전송된 객체 정보, 고해상도 정지 영상 또는 고해상도 동영상을 객체의 카테고리별로 저장한다. 여기서 객체 정보에는 예를 들어, 객체의 종류, 크기, 색상, 속도, 위치, 이동 방향 및 움직임 경로 등에 대한 정보와, 타임 스탬프(time stamp), 객체에 대한 영상 획득 시각, 영상 내의 객체 위치(좌표), 객체가 포함된 영상 구간 등에 대한 정보가 포함된다.
객체 인식 서버(100)는 예컨대, 영상 감시 센터, 방범 센터, 관제 센터 등에 구비되는 지능형 영상 감시 서버, 방범 서버 등으로 구비되고, 전형적인 컴퓨터 시스템의 하드웨어 및 소프트웨어 구성을 갖는다. 객체 인식 서버(100)는 이벤트 스토리지(120)에 카테고리별로 저장된 객체의 객체 정보를 통해 객체를 인식하여 객체들에 대한 메타데이터를 생성, 저장한다.
객체 인식 서버(100)는 검색 단말기(300)가 객체를 용이하게 검색할 수 있도록 객체와 메타데이터를 매칭시켜서 관리한다. 여기서 메타데이터는 네트워크 카메라(200)의 위치, 객체의 종류, 크기, 색상, 속도, 위치, 이동 방향 및 움직임 경로 등에 대한 정보와, 타임 스탬프(time stamp), 객체에 대한 영상 획득 시각, 영상 내의 객체 위치(좌표), 객체가 포함된 영상 구간 등에 대한 정보가 포함될 수 있다. 따라서 객체 인식 서버(100)는 이벤트가 발생된 객체들에 대해 메타데이터를 이용하여 검색 단말기(300)가 원하는 객체를 검색 및 모니터링 가능하도록 제공된다.
이 실시예의 객체 인식 서버(100)는 도 5에 도시된 바와 같이, 객체 인식부(102), 메타데이터 생성부(104), 메타데이터 저장부(106) 및 객체 검색 처리부(108)로 구성된다.
객체 인식부(102)는 이벤트 스토리지(120)에 저장된 고해상도 정지 영상(또는 고해상도 동영상)에서 이벤트가 발생된 객체를 추출하여 인식하고, 이벤트 스토리지(120)로부터 인식된 객체에 대한 객체 정보를 받아들인다. 객체 인식부(102)는 객체 정보를 메타데이터 생성부(104)로 제공한다. 객체 인식부(102)는 객체 인식 모듈 예컨대, 얼굴 인식 모듈, 차량 인식 모듈, 차량번호 인식 모듈 등으로 구비될 수 있으며, 12 M 픽셀의 고해상도 정지 영상 또는 고해상도 동영상으로부터 객체를 추출, 인식한다. 메타데이터 생성부(104)는 객체 인식부(102)로부터 제공된 객체에 대한 객체 정보를 이용하여 해당 객체에 대한 메타데이터를 생성한다. 메타데이터 저장부(106)는 메타데이터 생성부(104)에 의해 생성된 메타데이터를 저장, 관리한다. 그리고 객체 검색 처리부(108)는 검색 단말기(300)로부터 원하는 객체를 검색하기 위한 검색 정보가 입력되면, 해당 검색 정보에 대응하는 객체와 객체 정보를 메타데이터 저장부(106)에 저장된 메타데이터를 이용하여 추출하여, 검색 결과를 검색 단말기(300)로 전송하여 해당 객체가 포함된 고해상도 정지 영상 및 고해상도 동영상이 표시되도록 제공하거나, 검색 결과가 영상 표시 장치(140)에 표시되도록 제공할 수 있다.
다시 도 4를 참조하면, 영상 관리 시스템(Video Management System : VMS)(130)은 예컨대, 영상 정보의 효율적인 관리를 위한 장치로, 객체 분류기(110)로부터 저해상도 영상 정보를 받아서 영상 표시 장치(140)로 표시되도록 전송하거나, 이벤트 스토리지(120)에 저장된 고해상도 영상 정보 즉, 고해상도 정지 영상 또는 고해상도 동영상을 영상 표시 장치(140)로 전송하여 표시되도록 한다. 또 영상 관리 시스템(130)은 네트워크 카메라(200)들로부터 고해상도 및 저해상도 영상 정보를 전송받아서 영상 표시 장치(140)에 표시되도록 할 수 있다.
그리고 영상 표시 장치(140)는 예컨대, 멀티 비젼, 대형 멀티 스크린 등의 디스플레이 장치로 구비되고, 영상 관리 시스템(130)으로부터 저해상도 및 고해상도 영상 정보를 받아서 표시되도록 출력하고, 객체 인식 서버(100)로부터 이벤트가 발생된 객체에 대한 고해상도 정지 영상과 고해상도 동영상이 표시되도록 출력한다. 또 영상 표시 장치(140)는 검색 단말기(300)로부터 원하는 객체가 검색되면, 객체 인식 서버(100)의 제어를 받아서 해당 객체와 객체 정보가 포함된 고해상도 정지 영상 및 고해상도 동영상을 표시한다. 이러한 영상 표시 장치(140)는 각 분할된 스크린들의 테두리(경계면)에 구애받지 않고 스크린 전체 또는 일부에 영상 정보들을 표시하여 운용을 효율적으로 관리할 수 있도록 하는 통합 영상 표출 장치(IP WALL)로 제공될 수 있으며, 영상 관리 시스템(130)와 객체 인식 서버(100)로부터 전송되는 데이터들과 정보들을 영상으로 표시할 수 있도록 형성되는 다양한 형태의 공지된 디스플레이 장치라면 어느 것이든지 적용이 가능하다.
상술한 본 발명의 실시예에 따른 지능형 영상 감시 시스템의 구성을 이용하여 객체 인식, 검색 및 모니터링을 위한 처리 과정을 설명하면 다음과 같다.
본 발명의 실시예에 따른 지능형 영상 감시 시스템(2)은 평소에는 네트워크 카메라(200)가 저해상도 영상 정보를 객체 분류기(110)로 전송하면, 객체 분류기(110)가 저해상도 영상 정보에서 객체가 검지되는지 즉, 이벤트가 발생되는지를 판별한다. 객체 분류기(110)에서 이벤트가 발생되지 않으면, 영상 표시 장치(140)로 저해상도 영상 정보를 전송하여 영상을 실시간 모니터링하도록 표시한다.
그러나 객체 분류기(110)가 객체를 검지하면, 이벤트가 발생된 것으로, 객체 분류기(110)는 검지된 객체에 대한 객체 정보를 생성하여 네트워크 카메라(200)로 전송한다. 이에 네트워크 카메라(200)는 객체 분류기(110)로부터 전송된 객체 정보와, 고해상도 영상 정보로부터 검지된 객체가 포함되는 복수 개의 고해상도 정지 영상이나, 검지된 객체가 포함되고 일정 시간 구간의 고해상도 동영상을 추출하여 이벤트 스토리지(120)로 전송한다. 이벤트 스토리지(120)는 네트워크 카메라(200)로부터 전송된 객체 정보와 고해상도 정지 영상 또는 고해상도 동영상을 객체의 카테고리별로 분류하여 저장한다. 따라서 영상 관리 시스템(130)은 이벤트 스토리지(120)에 저장된 고해상도 정지 영상 또는 고해상도 동영상을 영상 표시 장치(140)로 출력시켜서 객체를 모니터링하도록 한다.
또 객체 인식 서버(100)는 이벤트 스토리지(120)에 저장된 객체 정보를 통해 고해상도 정지 영상 또는 고해상도 동영상에서 객체를 인식하고, 인식된 객체의 객체 정보로부터 메타데이터를 생성, 저장한다. 객체 인식 서버(100)는 메타데이터를 이용하여 검색 단말기(300)가 원하는 객체를 검색하여 모니터링할 수 있도록 제공된다. 이에 검색 단말기(300)가 원하는 객체에 대한 검색 정보를 입력하면, 해당 객체를 검색하여 이벤트 스토리지(120)에 저장된 고해상도 정지 영상 또는 고해상도 동영상으로부터 해당 객체가 포함된 영상을 추출하여 검색 단말기(300) 또는 영상 표시 장치(140)로 출력하도록 전송한다.
현재의 CCTV 영상 감시 시스템, 방범 시스템 등에서는 저해상도 카메라 예컨대, 2M CCTV 카메라를 통해 지능형 객체 인식 후, 사후 검색 시 객체에 대한 이미지 인식이 부정확하여 고화질 카메라를 통한 이미지 표출 정확성을 높일 필요성이 있다. 그러나, 고화질(4K)의 카메라를 통한 시스템 운영 시, 네트워크 부하, 운영 시스템의 호환성 부족 및 저장 공간의 부족 등 환경적인 문제로 인해 도입이 어려운 상황 등의 문제점이 있다.
따라서 이를 해결하기 위하여, 본 발명의 지능형 영상 감시 시스템(2, 2a)은 고화질의 카메라의 장점과 지능형 영상 감시 시스템의 장점을 활용하여 시스템 개발의 필요성을 인지하고, 이를 통해 고화질 카메라를 이용하여 고해상도의 동영상이 아닌 객체가 검지된 고해상도의 정지 영상 또는 고해상도의 동영상 일부분을 추출, 저장하고, 해당 정지 영상 또는 동영상에 포함되는 객체를 인지하여 지능형으로 객체 인식, 이벤트 인식, 분석 및 모니터링하는 시스템으로 개발될 수 있다.
이상에서, 본 발명에 따른 지능형 영상 감시 시스템의 구성 및 작용을 상세한 설명과 도면에 따라 도시하였지만, 이는 실시예를 들어 설명한 것에 불과하며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다.
2, 2a : 지능형 영상 감시 시스템
100 : 객체 인식 서버
110, 210 : 객체 분류기
120 : 이벤트 스토리지
130 : 영상 관리 시스템
140 : 영상 표시 장치
200, 200a : 카메라
300 : 검색 단말기
100 : 객체 인식 서버
110, 210 : 객체 분류기
120 : 이벤트 스토리지
130 : 영상 관리 시스템
140 : 영상 표시 장치
200, 200a : 카메라
300 : 검색 단말기
Claims (8)
- 지능형 영상 감시 시스템에 있어서:
설치 장소에 대한 고해상도 영상 정보와 저해상도 영상 정보를 생성하는 네트워크 카메라;
상기 네트워크 카메라로부터 저해상도 영상 정보를 받아서 저해상도 영상 정보에 포함된 객체를 검지하고, 검지된 객체에 대한 객체 정보를 카테고리별로 분류하고, 상기 네트워크 카메라로 객체 정보를 제공하는 객체 분류기;
상기 객체 분류기로부터 객체 정보가 상기 네트워크 카메라로 제공되면, 상기 네트워크 카메라로부터 객체가 검지된 고해상도 정지 영상 또는 일부 시간 구간의 고해상도 동영상을 받아서 객체의 카테고리별로 저장하는 이벤트 스토리지;
상기 이벤트 스토리지에 저장된 고해상도 정지 영상 또는 일부 시간 구간의 고해상도 동영상으로부터 이벤트가 발생된 객체를 인식하고, 인식된 객체의 객체 정보를 이용하여 객체의 메타데이터를 생성, 저장하여, 메타데이터를 이용하여 원하는 객체를 검색하도록 하는 객체 인식 서버;
상기 객체 인식 서버로 원하는 객체에 대한 검색 정보를 입력하여 검색된 객체 정보에 대응하는 객체를 모니터링하는 검색 단말기;
상기 객체 분류기로부터 전송되는 저해상도 영상 정보와, 상기 이벤트 스토리지로부터 제공되는 고해상도 정지 영상 또는 고해상도 동영상을 받아서 관리하는 영상 관리 시스템; 및
상기 영상 관리 시스템 및 상기 객체 인식 서버 중 어느 하나로부터 고해상도 영상 정보, 저해상도 영상 정보를 받아서 표시하고, 상기 검색 단말기가 검색한 객체를 모니터링하도록 표시하는 영상 표시 장치;를 포함하되,
상기 객체 인식 서버는,
상기 검색 단말기로부터 원하는 객체를 검색하기 위한 검색 정보가 입력되면, 메타데이터를 이용하여 검색 정보에 대응하는 객체를 추출하여, 검색된 객체가 포함된 고해상도 정지 영상 또는 고해상도 동영상을 상기 검색 단말기 또는 상기 영상 표시 장치에 표시되도록 제공하는 것을 특징으로 하는 지능형 영상 감시 시스템.
- 삭제
- 삭제
- 청구항 1에 있어서,
상기 객체 인식 서버는,
상기 이벤트 스토리지에 저장된 고해상도 정지 영상 또는 고해상도 동영상에서 검지된 객체를 인식하고, 상기 이벤트 스토리지로부터 인식된 객체에 대한 객체 정보를 받아들이는 객체 인식부;
상기 객체 인식부로부터 객체 정보를 받아서 검지된 객체에 대한 메타데이터를 생성하는 메타데이터 생성부;
상기 메타데이터 생성부에 의해 생성된 메타데이터를 저장, 관리하는 메타데이터 저장부; 및
상기 객체 인식 서버로 원하는 객체를 검색하기 위한 검색 정보가 입력되면, 상기 메터데이터 저장부에 저장된 메타데이터를 이용하여 검색 정보에 대응하는 객체를 검색하고, 검색된 객체를 모니터링하도록 상기 이벤트 스토리지로부터 검색 결과에 따라 객체가 포함된 고해상도 정지 영상 또는 고해상도 동영상을 추출하여 제공하는 객체 검색 처리부;를 포함하는 것을 특징으로 하는 지능형 영상 감시 시스템.
- 청구항 1 또는 청구항 4에 있어서,
상기 객체 분류기는;
상기 네트워크 카메라의 내부에 구비되는 것을 특징으로 하는 지능형 영상 감시 시스템.
- 지능형 영상 감시 시스템의 처리 방법에 있어서:
고해상도의 네트워크 카메라를 이용하여 설치 장소에 대한 고해상도 영상 정보와 저해상도 영상 정보를 생성하고, 저해상도 영상 정보를 객체 분류기로 전송하는 단계;
상기 객체 분류기가 상기 네트워크 카메라로부터 전송된 저해상도 영상 정보에서 객체를 검지하고, 검지된 객체에 대한 객체 정보를 생성하여 카테고리별로 분류하며, 상기 네트워크 카메라로 객체 정보를 전송하는 단계;
상기 네트워크 카메라가 객체 정보를 받아서 객체가 포함된 고해상도 정지 영상 또는 일정 시간 구간의 고해상도 동영상을 추출하여 객체 정보와 함께 이벤트 스토리지로 전송하는 단계;
상기 이벤트 스토리지가 상기 네트워크 카메라로부터 전송된 객체 정보와 고해상도 정지 영상 또는 고해상도 동영상을 객체의 카테고리별로 저장하는 단계;
객체 인식 서버가 상기 이벤트 스토리지에 저장된 객체 정보를 이용하여 객체를 인식하고, 인식된 객체에 대한 메타데이터를 생성, 저장하는 단계; 및
상기 객체 인식 서버가 검색 단말기로부터 원하는 객체에 대한 검색 정보가 입력되면, 메타데이터를 이용하여 객체를 추출하여, 추출된 객체가 포함된 고해상도 정지 영상 또는 고해상도 동영상을 실시간으로 확인 및 모니터링하도록 상기 검색 단말기로 제공하는 단계;를 포함하는 것을 특징으로 하는 지능형 영상 감시 시스템의 처리 방법.
- 삭제
- 청구항 6에 있어서,
상기 객체 분류기에서 객체를 검지 및 분류하는 것은;
상기 객체 분류기가 상기 네트워크 카메라의 내부에 구비되어, 저해상도 영상 정보에서 객체를 검지 및 분류하는 것을 특징으로 하는 지능형 영상 감시 시스템의 처리 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180073060A KR101921868B1 (ko) | 2018-06-26 | 2018-06-26 | 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180073060A KR101921868B1 (ko) | 2018-06-26 | 2018-06-26 | 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101921868B1 true KR101921868B1 (ko) | 2018-11-23 |
Family
ID=64565526
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180073060A KR101921868B1 (ko) | 2018-06-26 | 2018-06-26 | 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101921868B1 (ko) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102251777B1 (ko) * | 2020-09-11 | 2021-05-13 | 주식회사 세연테크 | 프록시 기능을 지원하는 지능형 영상 감시 장치 및 그 구동방법 |
KR102550117B1 (ko) * | 2022-11-18 | 2023-06-30 | 주식회사 인텔리빅스 | 객체 검출 추적에 기반한 비디오 인코딩 방법, 그리고 그 시스템 |
US11900722B2 (en) | 2019-11-19 | 2024-02-13 | Samsung Electronics Co., Ltd. | Electronic apparatus and control method thereof |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002165210A (ja) * | 2000-08-04 | 2002-06-07 | Matsushita Electric Ind Co Ltd | データ送信端末及びデータ送受信装置 |
KR100883632B1 (ko) * | 2008-08-13 | 2009-02-12 | 주식회사 일리시스 | 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 |
KR101733321B1 (ko) * | 2015-12-30 | 2017-05-08 | 인하대학교 산학협력단 | 다중 카메라 환경에서 이벤트 인식을 위한 컴포넌트 기반 통합 실시간 감시 시스템 |
-
2018
- 2018-06-26 KR KR1020180073060A patent/KR101921868B1/ko active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002165210A (ja) * | 2000-08-04 | 2002-06-07 | Matsushita Electric Ind Co Ltd | データ送信端末及びデータ送受信装置 |
KR100883632B1 (ko) * | 2008-08-13 | 2009-02-12 | 주식회사 일리시스 | 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 |
KR101733321B1 (ko) * | 2015-12-30 | 2017-05-08 | 인하대학교 산학협력단 | 다중 카메라 환경에서 이벤트 인식을 위한 컴포넌트 기반 통합 실시간 감시 시스템 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11900722B2 (en) | 2019-11-19 | 2024-02-13 | Samsung Electronics Co., Ltd. | Electronic apparatus and control method thereof |
KR102251777B1 (ko) * | 2020-09-11 | 2021-05-13 | 주식회사 세연테크 | 프록시 기능을 지원하는 지능형 영상 감시 장치 및 그 구동방법 |
KR102550117B1 (ko) * | 2022-11-18 | 2023-06-30 | 주식회사 인텔리빅스 | 객체 검출 추적에 기반한 비디오 인코딩 방법, 그리고 그 시스템 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101937272B1 (ko) | 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법 | |
US11082668B2 (en) | System and method for electronic surveillance | |
KR102039277B1 (ko) | 보행자 얼굴 인식 시스템 및 그 방법 | |
KR100862398B1 (ko) | 다중 카메라를 이용한 방범용 씨씨티브이 기능을 갖는 불법주정차 무인 자동 단속방법 및 그 시스템 | |
KR101215948B1 (ko) | 신체정보 및 얼굴인식에 기반한 감시 시스템의 영상정보 마스킹 방법 | |
KR102011226B1 (ko) | 얼굴 인식을 이용한 보안 관리 시스템 및 그 방법 | |
KR101921868B1 (ko) | 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법 | |
KR102039279B1 (ko) | 영상 인식을 이용한 경찰 업무 지원 시스템 및 그 방법 | |
KR101492473B1 (ko) | 사용자 기반 상황 인지형 씨씨티비 통합관제시스템 | |
US20150085114A1 (en) | Method for Displaying Video Data on a Personal Device | |
KR101084914B1 (ko) | 차량번호 및 사람 이미지의 인덱싱 관리시스템 | |
KR101964683B1 (ko) | 스마트 영상처리장치 및 그 장치의 구동방법 | |
KR102159786B1 (ko) | 지능형 영상 분석에 의한 실영상 및 녹화영상 검색 시스템 | |
KR102181355B1 (ko) | 인공지능 기반 차량 검색 시스템 | |
KR101985711B1 (ko) | 증강현실 cctv 시스템 및 그 제어방법 | |
KR20080044812A (ko) | 컴퓨터 영상 분석기술을 이용한 범죄 및 사고예방 자동경비 시스템 | |
JP2008092279A (ja) | 監視システム及び監視方法 | |
KR101621822B1 (ko) | 하이브리드 이미지 전송 기반의 방범겸용 차량번호 인식 장치, 그리고 이를 이용한 차량번호 인식 및 제공 방법 | |
KR20190041704A (ko) | Cctv 분할 운영시스템 및 그 운영방법 | |
KR101485512B1 (ko) | 객체 행동패턴의 해마 신경망 학습을 이용한 미래범죄 발생확률 우선순위 이벤트 cctv 영상처리 방법 | |
US20230088660A1 (en) | Identity-concealing motion detection and portraying device | |
KR101547255B1 (ko) | 지능형 감시 시스템의 객체기반 검색방법 | |
KR20060119078A (ko) | 불법주차 모니터링 시스템 및 방법 | |
KR101436283B1 (ko) | 영상분석 서버를 통한 미래 발생범죄 예측 시스템 | |
CN110519562B (zh) | 移动侦测方法、装置和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |