KR101928220B1 - 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법 - Google Patents

적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법 Download PDF

Info

Publication number
KR101928220B1
KR101928220B1 KR1020170162036A KR20170162036A KR101928220B1 KR 101928220 B1 KR101928220 B1 KR 101928220B1 KR 1020170162036 A KR1020170162036 A KR 1020170162036A KR 20170162036 A KR20170162036 A KR 20170162036A KR 101928220 B1 KR101928220 B1 KR 101928220B1
Authority
KR
South Korea
Prior art keywords
image
traffic
frame
module
cameras
Prior art date
Application number
KR1020170162036A
Other languages
English (en)
Inventor
박윤하
전선민
최정필
Original Assignee
주식회사우경정보기술
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사우경정보기술 filed Critical 주식회사우경정보기술
Priority to KR1020170162036A priority Critical patent/KR101928220B1/ko
Application granted granted Critical
Publication of KR101928220B1 publication Critical patent/KR101928220B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템은, 상기 카메라에서 촬영된 영상 트래픽을 미러링하는 영상수집모듈과, 그리고 상기 카메라에서 촬영된 영상을 분석하는 영상분석모듈을 포함할 수 있다. 상기 영상분석모듈은, 상기 미러링된 영상 트래픽을 수신하는 트래픽 수신부와, 상기 수신된 영상 트래픽을 리어셈블리하여 영상 프레임을 생성하는 영상생성부와, 그리고 상기 영상 프레임을 분석하는 영상분석부를 포함할 수 있다. 이로써, 카메라에서 유입되는 정보를 실시간으로 처리할 수 있는 영상처리시스템, 및 이를 이용하는 영상처리방법이 제공된다.

Description

적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법{CAMERA IMAGE PROCESSING SYSTEM AND IMAGE PROCESSING METHOD USING THE SAME}
본 발명은 영상처리시스템, 및 이를 이용하는 영상처리방법에 관한 것으로, 보다 상세하게는 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법에 관한 것이다.
일반적으로, 도시를 관리하기 위한 목적이나 각종 범죄에 대한 증거자료 확보 및 대응을 하기 위하여 다수의 카메라들이 차도나 인도에 설치되고 있다. 설치되는 카메라의 일종으로서 폐쇄 회로 티브이(CCTV)가 대표적이다.
관제 센터(또는, 통합 관제 시스템)는 도시 곳곳에 설치된 CCTV들로부터 촬영된 영상을 수신하고 이를 재생함으로써 모니터링에 의한 감시 동작을 수행할 수 있다.
CCTV들로부터 촬영된 영상이 수신되면, 수신된 영상은 통합 관제 시스템 내부에 구비될 수 있는 영상 저장서버에 저장될 수 있다. 매우 많은 수의 CCTV들로부터 영상이 실시간으로 수신됨에 따라 영상 저장서버에 저장되는 영상의 양 역시 매우 방대할 수 있다.
촬영된 영상에 대한 모니터링이 수행될 경우, 저장되어 있는 영상으로 접근하여 사용자 요청에 따른 영상 분석 또는 판단이 이루어질 수 있다.
이런 경우, 촬영되는 영상의 양은 증가하지만 기존 시스템의 하드웨어 구성은 한정되어 있고, 이런 시스템에 접근하여 영상을 분석 및 판단하는 것에는 많은 로드가 발생하고, 영상의 실시간 분석이 어려울 수 있다.
본 발명이 해결하고자 하는 과제는, 기존 장비의 자원을 활용하지 않음으로써 장비의 추가 로드를 발생시키지 않고 영상을 분석하는 영상처리시스템, 및 이를 이용하는 영상처리방법을 제공하는 것이다.
또한 본 발명이 해결하고자 하는 과제는, 영상 분석에 있어 트래픽 리어셈블리가 용이한 영상처리시스템, 및 이를 이용하는 영상처리방법을 제공하는 것이다.
또한 본 발명이 해결하고자 하는 과제는, CCTV(Closed Circuit Television)에서 유입되는 정보를 실시간으로 처리할 수 있는 영상처리시스템, 및 이를 이용하는 영상처리방법을 제공하는 것이다.
본 발명의 일 실시예인 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템은 상기 카메라에서 촬영된 영상 트래픽을 미러링하는 영상수집모듈과, 그리고 상기 카메라에서 촬영된 영상을 분석하는 영상분석모듈을 포함하고, 상기 영상분석모듈은, 상기 미러링된 영상 트래픽을 수신하는 트래픽 수신부와; 상기 수신된 영상 트래픽을 리어셈블리하여 영상 프레임을 생성하는 영상생성부와; 그리고 상기 영상 프레임을 분석하는 영상분석부를 포함할 수 있다.
상기 영상생성부는, 상기 리어셈블리된 영상 프레임 중 기설정된 개수의 영상 프레임을 추출하는 프레임 샘플링부를 포함하고, 상기 영상분석부는 상기 추출된 영상 프레임을 분석할 수 있다.
상기 촬영된 영상은 기설정된 전송 크기로 분해된 영상 트래픽으로 수신되고, 상기 영상생성부는, 상기 영상 트래픽을 전체 영상 및 프레임 단위의 정보로 리어셈블리 하는 리어셈블리부와; 상기 프레임 단위의 정보 중 영상에 대한 정보를 추출하여 상기 영상 프레임을 생성하는 영상 추출부를 더 포함할 수 있다.
한편, 영상처리시스템은 상기 카메라에서 촬영된 영상을 일시적으로 분배하고 저장하는 영상관리모듈과; 상기 영상관리모듈에서 출력된 영상을 저장하는 저장모듈을 더 포함하고, 상기 영상수집모듈은 상기 영상관리모듈로 입력되기 전의 영상 트래픽을 미러링할 수 있다.
또는 다른 실시예에 따르면, 상기 영상수집모듈은 상기 영상관리모듈에서 상기 저장모듈로 입력되는 영상 트래픽을 미러링할 수 있다.
본 발명의 다른 실시예에 따른 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리방법은, 상기 촬영된 영상에 대한 영상 트래픽을 미러링하는 단계와; 그리고 상기 미러링된 영상 트래픽을 리어셈블리하여 영상 프레임을 생성하는 단계와; 상기 영상 프레임을 분석하는 단계를 포함할 수 있다.
상기 영상 프레임을 생성하는 단계는, 상기 리어셈블리된 영상 프레임 중 기설정된 개수의 영상 프레임을 추출하는 단계를 포함하고, 상기 영상 프레임을 분석하는 단계는 상기 추출된 영상 프레임을 분석할 수 있다.
상기 촬영된 영상은 기설정된 전송 크기로 분해된 영상 트래픽으로 미러링되고, 상기 영상 프레임을 생성하는 단계는, 상기 영상 트래픽을 전체 영상 및 프레임 단위의 정보로 리어셈블리 하는 단계와; 상기 프레임 단위의 정보 중 영상에 대한 정보를 추출하여 상기 영상 프레임을 생성하는 단계를 더 포함할 수 있다.
영상처리방법은 상기 카메라에서 촬영된 영상을 일시적으로 분배하고 저장하는 단계와; 상기 분배된 영상을 소정의 저장모듈에 저장하는 단계를 더 포함하고, 상기 영상 트래픽을 미러링하는 단계는 상기 영상을 일시적으로 분배하고 저장하는 단계 이전에 수행될 수 있다.
또는, 다른 실시예에 따르면, 상기 영상 트래픽을 미러링하는 단계는 상기 분배된 영상을 상기 저장모듈에 저장하는 단계 이전에 수행될 수 있다.
본 발명의 실시예에 따르면, 기존 장비의 자원을 활용하지 않음으로써 장비의 추가 로드를 발생시키지 않고 영상을 분석하는 영상처리시스템, 및 이를 이용하는 영상처리방법이 제공될 수 있다.
본 발명의 실시예에 따르면, 영상 분석에 있어 트래픽 리어셈블리가 용이한 영상처리시스템, 및 이를 이용하는 영상처리방법이 제공될 수 있다.
또한, 본 발명의 실시예에 따르면, CCTV(Closed Circuit Television)에서 유입되는 정보를 실시간으로 처리할 수 있는 영상처리시스템, 및 이를 이용하는 영상처리방법이 제공될 수 있다.
도 1은 본 발명의 일 실시예에 따른 영상처리시스템의 제어블록도이고,
도 2는 본 발명의 일 실시예에 따른 영상분석모듈의 제어블록도이고,
도 3은 본 발명의 일 실시예에 따른 영상처리방법을 설명하기 위한 제어흐름도이고,
도 4는 본 발명의 일 실시예에 따른 영상생성 및 분석을 설명하기 위한 제어흐름도이고,
도 5는 본 발명의 다른 실시예에 따른 영상처리시스템의 제어블록도이고,
도 6은 본 발명의 다른 실시예에 따른 영상처리방법을 설명하기 위한 제어흐름도이다.
이하, 도면을 참조하여 본 발명의 실시 형태에 대하여 구체적으로 설명한다. 본 명세서의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
본 발명에서 특정 구성을 "포함"한다고 기술하는 내용은 해당 구성 이외의 구성을 배제하는 것이 아니며, 추가적인 구성이 본 발명의 실시 또는 본 발명의 기술적 사상의 범위에 포함될 수 있음을 의미한다.
또한 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 포함한 것으로 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있고 이러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리범위에 포함된다.
또한, 일부의 구성 요소는 본 발명에서 본질적인 기능을 수행하는 필수적인 구성 요소는 아니고 단지 성능을 향상시키기 위한 선택적 구성 요소일 수 있다. 본 발명은 단지 성능 향상을 위해 사용되는 구성 요소를 제외한 본 발명의 본질을 구현하는데 필수적인 구성부만을 포함하여 구현될 수 있고, 단지 성능 향상을 위해 사용되는 선택적 구성 요소를 제외한 필수 구성 요소만을 포함한 구조도 본 발명의 권리범위에 포함된다.
도 1은 본 발명의 일 실시예에 따른 영상처리시스템의 제어블록도이다.
도 1에 도시된 바와 같이, 본 실시예에 따른 영상처리시스템(1)은 적어도 하나의 CCTV(100), CCTV(100)에서 촬영된 영상을 관리하는 영상관리모듈(400), 촬영된 영상을 저장하는 저장모듈(500)을 포함하고, 영상관리모듈(400)로 입력되는 영상에 대한 영상 트래픽을 미러링하는 영상수집모듈(200), 미러링된 영상 트래픽을 처리 및 분석하는 영상분석모듈(300)을 포함할 수 있다. 본 발명에서 미러링되는 "영상 트래픽"이란 CCTV(100)에서 촬영된 영상에 대한 정보를 포함하는 트래픽일 수 있다. 즉 영상에 대한 정보뿐만아니라 신호의 송수신 및 처리에 관련된 또는 기기간 필요한 통신 정보를 포함하는 것으로 영상에 대한 정보만을 의미하는 것은 아니며 이하에서는 설명의 용이함을 위하여 이런 모든 정보의 트래픽은 영상 트래픽으로 지칭될 수 있다.
영상처리시스템(1)은 CCTV(100)를 통하여 입력되는 영상을 수집, 저장 및 분석하여 CCTV(100)가 설치된 지역을 모니터링하는 관제 시스템일 수 있다. 영상처리시스템(1)은 복수의 영상관리모듈(400) 및 저장모듈(500)을 포함할 수 있으며, 복수의 CCTV(100)들이 하나 또는 복수의 영상관리모듈(400)에 연결될 수 있고, 하나의 영상관리모듈(400)이 복수의 저장모듈(500)과 연결될 수 있다.
또한, 영상처리시스템(1)은 도시하지 않은 적어도 하나 이상의 마스터 서버 등을 더 포함할 수 있고, 클라이언트 서버와 통신할 수 있는 스위치와 같은 인터페이스를 더 포함할 수 있다.
영상처리시스템(1)에 포함되어 있는 개별적인 모듈은 그 명칭에 한정되지 않으며 각각 제어부와 저장부 등을 포함하여 다른 모듈과 통신할 수 있는 서버 또는 시스템으로 구성될 수 있다.
CCTV(100)는 적어도 하나가 설치될 수 있으며, 본 실시예에서는 복수의 CCTV(100)로부터 영상이 촬영되는 것을 도시하고 있다. CCTV(100)들은 관제 시스템에 의하여 관리 서비스가 제공되는 지역에 설치될 수 있으며, CCTV(100)들의 패닝, 틸즈, 줌 등은 사용자의 요청에 따라 제어될 수 있다. 영상처리시스템(1)은 CCTV(100)들의 패닝, 틸즈, 줌 등을 제어하기 위한 CCTV 서버를 더 포함할 수 있다. 본 발명에서는 CCTV(100)는 카메라로 지칭될 수 있다.
통상적으로 CCTV(100)를 통하여 입력된 영상 트래픽은 영상관리모듈(400)로 입력된 후 파일 형태로 생성되고, 다시 오랜 시간 저장되기 위하여 저장모듈(500)로 입력된다.
영상관리모듈(400)은 통상적인 비디오 관리시스템(Video Management System, VMS) 또는 네트워크 비디오 레코드(network video record, NVR)로 구현될 수 있으며, 둘을 모두 포함하는 구성으로 구현될 수도 있다. 영상관리모듈(400)은 카메라에서 촬영된 영상을 동시적으로 관리하고 저장모듈에 저장한다.
영상관리모듈(400)은 복수의 CCTV(100)로부터 입력된 영상을 저장모듈(500)에 저장하기 위하여 일시적으로 영상을 파일화하여 저장하고, 이를 저장모듈(500)로 분배한다. 복수의 CCTV(100)로부터 입력된 영상은 영상관리모듈(400)에서 집중화된 뒤 저장모듈(500)에 저장되므로, 영상관리모듈(400)은 집중화모듈로 명명될 수 있다.
저장모듈(500)은 영상관리모듈(400)에서 분배된 영상을 저장하고, 사용자의 요청에 따라 특정 시간 또는 특정 장소에 대한 영상을 출력할 수 있다. 저장모듈(500)로 입력되는 것은 영상관리모듈(400)에서 파일화된 영상 트래픽이다.
영상수집모듈(200)은 영상관리모듈(400)로 입력되기 전의 영상 트래픽을 미러링한다. 미러링은 TAP(test access port) 장비나 네트워크 장비의 미러링 포트 기능을 설정하여 네트워크 트래픽의 복사본을 모니터링하는 것으로, 본 실시예에 따른 영상수집모듈(200)은 TAP 장비로 구현될 수 있다. TAP 장비는 네트워크 트래픽에 영향을 주지 않으면서 네트워크 상의 한 구간에 이동하는 패킷 데이터를 복사하여 이를 모니터링하는 장비로 보내주는 역할을 하며, 기본적인 TAP, UTP TAP, FIBER TAP, WAN용 TAP 등이 있다.
한편, 영상수집모듈(200)은 도시된 바와 같이 개별적인 CCTV(100)에 연결될 수 있다. 또는 영상수집모듈(200)은 개별적인 IP에 대응하여 구비될 수도 있고, 복수의 CCTV(100)를 제어하는 CCTV 서버에 연결될 수도 있다.
영상분석모듈(audio video traffic analysis server, 300)은 CCTV(100) 즉, 카메라에서 촬영된 영상을 분석하는 구성으로 본 발명에 따른 영상분석모듈(300)은 미러링된 영상 트래픽을 수신하여 분석한다.
CCTV를 이용한 관제 시스템의 경우, 촬영된 영상이 집중화되어 저장 서버에 저장되고, 영상에 대한 분석 및 판단은 저장 서버에 저장된 영상을 이용하여 수행되는 것이 통상적이다. 촬영된 영상이 저장 서버에 저장되는 이러한 과정에서 가장 큰 로드가 발생하고 영상 처리에 가장 많은 시간이 소요된다. 따라서, 저장 서버에 저장된 영상을 이용하는 경우 CCTV 영상을 실시간으로 분석 및 판단하는 데는 한계가 존재한다.
한편, 본 실시예에 따를 경우, 촬영된 영상이 저장모듈(500)에 저장되기 전에 CCTV(100)에서 유입되는 영상 트래픽을 광학적으로 분리 및 복제하여 바로 처리함으로써, 실시간 영상 분석이 가능해진다.
또한, 본 실시예에 따를 경우, 저장 서버에 저장되어 있는 영상을 이용하는 것, 즉 기존 장비가 포함하고 있는 자원을 활용하는 것이 아니기 때문에 기존 장비의 버전 또는 영상관리모듈이나 저장 서버의 개수 등에 무관하게 영상을 처리할 수 있는 장점이 있다.
후술한 영상 분석의 경우 최근에는 비약적인 발전으로 얼굴 분석, 객체 추적 또는 상황 인식 등과 같은 다양한 분석 기술이 사용되고 있다. 하지만 이러한 영상 분석 기술은 시스템의 자원 소모가 커 기존의 CCTV 시스템에 적용하기 쉽지 않을 수 있다. 기존의 CCTV 시스템의 경우 영상 분석보다 물리적인 기계의 관리 목적으로 한정되어 있어 영상 분석을 위한 가용 자원이 크지 않기 때문이다. 본 발명에 따를 경우 시스템의 추가 로드 없이 영상의 미러링을 통하여 영상 분석이 가능하기 때문에 기존의 CCTV 시스템의 하드웨어 및 소프트 웨어에 적용할 수 있다, 이를 통하여 비용 절감 및 영상 분석 시스템의 활용도를 확장시킬 수 있는 이점이 있다.
영상분석모듈(300)은 미러링된 영상 트래픽을 처리 및 분석하며, 도 2는 본 발명의 일 실시예에 따른 영상분석모듈의 제어블록도를 도시하고 있다. 도 2를 참조하여 영상분석모듈(300)을 설명하면 다음과 같다.
본 실시예에 따른 영상분석모듈(300)은 미러링된 영상 트래픽을 수신하는 트래픽 수신부(310), 영상생성부(320), 영상분석부(330)를 포함하고, 영상생성부(320)는 리어셈블리부(321), 영상추출부(323) 및 프레임 샘플링부(325)를 포함할 수 있다.
영상생성부(320)는 수신된 영상 트래픽을 리어셈블리하여 영상 프레임을 생성하는 구성으로 영상 트래픽을 영상 파일로 재생한다.
리어셈블리부(321)는 영상 트래픽을 전체 영상 및 프레임 단위의 정보로 리어셈블리 한다. 촬영된 영상은 기설정된 전송 크기, 예를 들어 최대전송유닛(maximum transmission unit, MTU)로 분해되어 수신되며, 리어셈블리부(321)는 분해된 영상 트래픽을 전체 정보로 재조립한다. 이 때, 리어셈블리부(321)는 개별적인 영상 프레임 단위로 영상 트래픽을 리어셈블리할 수 있다.
또한, 본 실시예에 따를 경우, 각 CCTV(100)에 연결되어 있는 개별적인 영상수집모듈(200)에서 영상 트래픽이 미러링되므로, 영상 트래픽의 리어셈블리가 용이한 효과가 있다. 종래와 같이, 저장서버에 저장된 영상을 이용할 경우, 복수의 CCTV에서 촬영된 영상이 머지되어 있으므로 영상의 리어셈블리 과정이 복잡하고 많은 시간이 소요될 수 있다.
영상추출부(323)는 리어셈블리부(321)에서 재조립된 프레임 단위의 정보 중 영상에 대한 정보를 추출하여 영상 프레임을 생성한다.
프레임 샘플링부(325)는 영상추출부(323)에서 리어셈블리된 영상 프레임 중 기설정된 개수의 영상 프레임을 추출한다. 이는 전체 프레임 정보에서 특정 프레임만을 추출하는 것으로, 예컨대, 30fps 영상 정보에서 1번째 영상 프레임과 15번째 영상 프레임, 30번째 영상 프레임만을 추출할 수 있다. 짧은 시간의 영상 프레임 간에는 객체의 큰 변화가 없으므로 전체 프레임이 아닌 일부 영상 프레임만으로 영상 분석이 가능하다.
기존의 영상분석의 경우, 전체 프레임 정보를 특정 어플리케이션에 입력하여 분석하지만, 본 실시예에 따를 경우 일부 영상 프레임만으로 영상 분석을 수행하므로 영상 분석 속도를 증가시킬 수 있다.
영상분석부(330)는 추출된 특정 영상 프레임을 분석 및 판단한다. 영상분석부(330)는 특정 이벤트 또는 사용자의 요청에 따라, 기설정된 조건에 대응하여 영상을 분석할 수 있다. 또한, 사용자가 설정한 조건에 따라 분석된 영상의 오류, 비정상, 특정 상황 등을 판단하여 이를 사용자에게 피드백할 수 있다. 따라서, 영상분석부(330)의 분석 결과 및 판단 결과는 사용자의 단말 또는 사용자 인터페이스로 출력될 수 있다.
영상 분석 및 판단에 대한 신호 처리는 공지되어 있는 다양한 방법들이 적용될 수 있으며, 특정 어플리케이션 또는 방법에 한정되지 않는다.
본 발명의 다른 실시예에 따르면, 전체 영상 프레임에서 일부 영상 프레임을 추출하는 프레임 샘플링부는 생략될 수 있고, 이 경우 영상분석부(330)는 전체 영상 프레임을 이용하여 영상 분석을 수행할 수 있다.
도 3은 본 발명의 일 실시예에 따른 영상처리방법을 설명하기 위한 제어흐름도이다.
도 3을 참조하면, CCTV(100)에서 촬영된 영상에 대한 영상 트래픽은 영상관리모듈(400)로 입력되기 전에 영상수집모듈(200)에 의하여 미러링 된다(S100).
영상분석모듈(300)로 입력된 미러링된 영상 트래픽은 리어셈블리되어 영상 프레임으로 생성될 수 있고(S200), CCTV(100)에서 출력된 영상 트래픽은 영상관리모듈(400)로 입력되어 일시적으로 저장 및 분배된다(S400).
영상관리모듈(400)에서 파일화된 영상은 저장모듈(500)에 저장된다(S500).
본 실시예에 따를 경우, 영상 트래픽을 미러링하는 단계(S100)는 영상을 일시적으로 저장하고 분배하는 단계(S200) 이전에 수행되며, 이로써, 기존 시스템의 자원을 활용하지 않으면서도 실시간으로 영상을 분석 및 판단할 수 있다.
영상분석모듈(300)로 입력된 영상 트래픽은 리어셈블리되어 영상 프레임으로 생성되고(S200), 영상 프레임은 영상분석부(330)에 의하여 분석 및 판단될 수 있다(S300).
도 4는 본 발명의 일 실시예에 따른 영상생성 및 분석을 설명하기 위한 제어흐름도이다. 도 4를 이용하여 도 3의 영상 프레임의 생성 단계(S200) 및 영상 프레임의 분석 단계(S300)를 구체적으로 설명하면 다음과 같다.
우선, 영상 트래픽이 미러링되면(S100), 트래픽 수신부(310)로 영상 트래픽이 수신된다(S210).
촬영된 영상은 기설정된 전송 크기로 분해된 영상 트래픽으로 미러링되므로, 수신된 영상 트래픽은 전체 영상 및 프레임 단위의 정보로 리어셈블리된다(S220).
그런 후, 영상추출부(323)는 프레임 단위의 정보 중 영상에 대한 정보를 추출하여 영상 프레임을 생성한다(S230).
생성된 전체의 영상 프레임이 영상 분석에 활용될 수도 있지만, 본 실시예에 따를 경우, 프레임 샘플링부(325)는 리어셈블리된 영상 프레임 중 기설정된 개수의 영상 프레임을 추출한다(S240).
적은 프레임을 활용하여 영상을 분석하게 되므로 영상 분석 및 판단에 대한 처리 속도가 증가하는 장점이 있다. 즉, 영상 분석 및 판단에 대한 실시간성이 보장될 수 있다.
만약, 사용자로부터 영상 분석 및 판단에 대한 요청 신호가 수신되면(S310), 영상분석부(330)는 영상 프레임을 분석하여 사용자가 원하는 결과를 출력한다(S320).
도 5는 본 발명의 다른 실시예에 따른 영상처리시스템의 제어블록도이다.
도시된 바와 같이, 영상수집모듈(200)은 영상관리모듈(400)에서 저장모듈(500)로 입력되는 영상 트래픽을 미러링한다. 나머지 영상관리모듈(400), 저장모듈(500) 및 영상분석모듈(300)에 대한 구성은 도 1 및 도 2과 대동 소이하다.
본 실시예에 따를 경우, 영상수집모듈(200)이 영상관리모듈(400)의 뒷단에서 영상 트래픽을 미러링함으로써 영상처리시스템은 도 1 내지 도 4의 실시예에서보다 적은 개수의 영상수집모듈(200)을 포함할 수 있다.
통상적으로 CCTV(100)의 개수보다 훨씬 적은 영상관리모듈(400)이 구비되기 때문에 본 실시예에 따르면 영상 분석을 위하여 영상관리모듈(400)의 개수에 대응하는 영상수집모듈(200)만이 필요하다. 즉, 적은 개수의 영상수집모듈(200)을 사용하면서도 거의 실시간으로 촬영된 영상을 분석할 수 있다.
또한, 기존에 존재했던 영상관리모듈(400)과 저장모듈(500) 사이의 트래픽을 미러링하는 것이므로 영상이 입력되는 망구조와 상관 없이 거의 모든 망구조에서 본 발명을 적용할 수 있는 장점도 있다. 즉, 거의 모든 망구조에 적용할 수 있으면서도 기존의 저장된 자원을 활용하는 것이 아니므로 기존 시스템에 로드를 발생시키지 않는다. 또한, CCTV(100)에서 촬영된 영상이 영상관리모듈(400)로 출력되는 것은 촬영 이후 최대 3~5초가 소요되므로 거의 실시간으로 영상을 분석 및 판단할 수 있는 효과가 있다.
도 6은 본 발명의 다른 실시예에 따른 영상처리방법을 설명하기 위한 제어흐름도이다. 도 6을 참고하여 본 실시예에 따른 영상처리방법을 설명하면 다음과 같다.
상술한 바와 같이, 본 실시예는 이전에 설명된 실시예와 영상 트래픽을 미러링하는 포인트에서 차이가 있으므로, 나머지 영상처리단계는 도 3과 유사하다.
우선, 촬영된 영상은 집중화를 위하여 영상관리모듈(400)로 수신되고, 영상은 일시적으로 저장되고 분배되도록 제어된다(S400a).
영상관리모듈(400)에서 파일화된 영상 프레임은 저장모듈(500)로 입력되기 위하여 패킷화 되고, 이러한 영상 트래픽은 영상수집모듈(200)에 의하여 미러링된다(S100a).
물론 영상관리모듈(400)에서 출력된 영상 트래픽은 저장모듈(500)로 입력되어 장기적으로 저장될 수 있다(S500).
미러링된 영상 트래픽은 영상분석모듈(300)의 영상생성부(320)에서 영상 프레임으로 생성되고(S200), 사용자의 요청 또는 특정 이벤트에 따라 분석 및 판단될 수 있다(S300).
한편, 본 실시예에 따른 영상생성 및 분석 과정은 도 4를 참조하여 설명된 것과 대동 소이하다.
이와 같이, 본 발명은 기존의 관제 시스템에 저장된 자원을 활용하지 않으므로 추가적인 업무 로드나 기존의 구성의 변형 없이 실시간으로 영상을 분석할 수 있는 영상처리시스템, 및 이를 이용하는 영상처리방법을 제공한다.
상술한 실시예에서, 방법들은 일련의 단계 또는 블록으로서 순서도를 기초로 설명되고 있으나, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 발생할 수 있다. 또한, 당해 기술 분야에서 통상의 지식을 가진 자라면 순서도에 나타난 단계들이 배타적이지 않고, 다른 단계가 포함되거나, 순서도의 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수 있음을 이해할 수 있을 것이다.
상술한 실시예는 다양한 양태의 예시들을 포함한다. 다양한 양태들을 나타내기 위한 모든 가능한 조합을 기술할 수는 없지만, 해당 기술 분야의 통상의 지식을 가진 자는 다른 조합이 가능함을 인식할 수 있을 것이다. 따라서, 본 발명은 이하의 특허청구범위 내에 속하는 모든 다른 교체, 수정 및 변경을 포함한다고 할 것이다.

Claims (10)

  1. 복수의 카메라에서 촬영된 영상을 처리하는 영상처리시스템에 있어서,
    상기 복수의 카메라로부터 영상 트래픽을 입력 받고, 상기 입력된 영상 트래픽을 관리하는 영상관리모듈;
    상기 복수의 카메라에서 촬영된 영상을 저장하는 저장모듈;
    상기 복수의 카메라에서 촬영된 영상을 분석하는 영상분석모듈; 및
    상기 복수의 카메라 각각으로부터 상기 영상관리모듈로 이동하는 것으로서 상기 영상관리모듈로 입력되기 전의 영상 트래픽을 복사하여 상기 영상분석모듈로 미러링하는 영상수집모듈;을 포함하고,
    상기 영상분석모듈은,
    상기 미러링된 영상 트래픽을 수신하는 트래픽 수신부;
    상기 수신된 영상 트래픽을 프레임 단위로 리어셈블리하여 영상 프레임을 생성하는 영상생성부; 및
    상기 영상 프레임을 분석하는 영상분석부를 포함하며,
    상기 영상수집모듈은 상기 복수의 카메라 각각에 연결된 탭(TAP; Test Access Port)을 포함하고,
    상기 영상관리모듈은, 상기 복수의 카메라로부터 입력된 영상 트래픽을 파일 형태로 생성하고, 상기 생성된 파일을 상기 저장 모듈로 분배하는 것을 특징으로 하는 영상처리시스템.
  2. 제1항에 있어서,
    상기 영상생성부는,
    상기 리어셈블리된 영상 프레임 중 기설정된 개수의 영상 프레임을 추출하는 프레임 샘플링부를 포함하고,
    상기 영상분석부는 상기 추출된 영상 프레임을 분석하는 것을 특징으로 하는 영상처리시스템.
  3. 제2항에 있어서,
    상기 촬영된 영상은 기설정된 전송 크기로 분해된 영상 트래픽으로 수신되고,
    상기 영상생성부는,
    상기 프레임 단위의 정보 중 영상에 대한 정보를 추출하여 상기 영상 프레임을 생성하는 영상 추출부를 더 포함하는 것을 특징으로 하는 영상처리시스템.
  4. 삭제
  5. 삭제
  6. 복수의 카메라에서 촬영된 영상을 처리하는 영상처리방법에 있어서,
    영상수집모듈에서, 상기 복수의 카메라 각각으로부터 영상관리모듈로 이동하는 것으로서 상기 영상관리모듈로 입력되기 전의 영상 트래픽을 복사하여 영상분석모듈로 미러링하는 단계;
    상기 영상분석모듈에서, 상기 미러링된 영상 트래픽을 수신하고, 상기 수신된 영상 트래픽을 프레임 단위로 리어셈블리하여 영상 프레임을 생성하며, 상기 영상 프레임을 분석하는 단계; 및
    상기 영상관리모듈에서, 상기 복수의 카메라로부터 입력된 영상 트래픽을 파일 형태로 생성하고, 상기 생성된 파일을 저장 모듈로 분배하는 단계;를 포함하고,
    상기 영상수집모듈은 상기 복수의 카메라 각각에 연결된 탭(TAP; Test Access Port)을 포함하는 것을 특징으로 하는 영상처리방법.
  7. 제6항에 있어서,
    상기 영상 프레임을 생성하는 단계는,
    상기 리어셈블리된 영상 프레임 중 기설정된 개수의 영상 프레임을 추출하는 단계를 포함하고,
    상기 영상 프레임을 분석하는 단계는 상기 추출된 영상 프레임을 분석하는 것을 특징으로 하는 영상처리방법.
  8. 제7항에 있어서,
    상기 촬영된 영상은 기설정된 전송 크기로 분해된 영상 트래픽으로 미러링되고,
    상기 영상 프레임을 생성하는 단계는,
    상기 프레임 단위의 정보 중 영상에 대한 정보를 추출하여 상기 영상 프레임을 생성하는 단계를 더 포함하는 것을 특징으로 하는 영상처리방법.
  9. 제6항에 있어서,
    상기 탭은 유티피(UTP) 탭 및 파이버(fiber) 탭 중 적어도 하나를 포함하는 것을 특징으로 하는 영상처리방법.
  10. 삭제
KR1020170162036A 2017-11-29 2017-11-29 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법 KR101928220B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170162036A KR101928220B1 (ko) 2017-11-29 2017-11-29 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170162036A KR101928220B1 (ko) 2017-11-29 2017-11-29 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법

Publications (1)

Publication Number Publication Date
KR101928220B1 true KR101928220B1 (ko) 2018-12-12

Family

ID=64669991

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170162036A KR101928220B1 (ko) 2017-11-29 2017-11-29 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법

Country Status (1)

Country Link
KR (1) KR101928220B1 (ko)

Similar Documents

Publication Publication Date Title
CN101860731B (zh) 视频信息处理方法、系统及服务器
EP2688296B1 (en) Video monitoring system and method
US10923157B2 (en) System and method for event data collection and video alignment
CN101646067B (zh) 数字化全空间智能监控系统及方法
EP3420544B1 (en) A method and apparatus for conducting surveillance
AU2022246412A2 (en) A method and apparatus for conducting surveillance
US10990840B2 (en) Configuring data pipelines with image understanding
JP2008016895A (ja) 監視システム、監視システム用サーバ及び監視方法
KR20110132884A (ko) 다중 동영상 색인 및 검색이 가능한 지능형 영상 정보 검색 장치 및 방법
US20110255590A1 (en) Data transmission apparatus and method, network data transmission system and method using the same
CN111565298A (zh) 视频处理方法、装置、设备及计算机可读存储介质
CN114666554A (zh) 一种边缘网关云服务管理系统
KR102077632B1 (ko) 로컬 영상분석과 클라우드 서비스를 활용하는 하이브리드 지능형 침입감시 시스템
CN114490053A (zh) 基于边缘计算和监督学习方法的情景感知策略推荐系统
KR101928220B1 (ko) 적어도 하나의 카메라에서 촬영된 영상을 처리하는 영상처리시스템, 및 이를 이용하는 영상처리방법
JP2009200757A (ja) 映像データ処理装置、プログラム及び方法
US9870518B2 (en) Data processing system
CN113660540B (zh) 图像信息处理方法、系统、显示方法、装置及存储介质
Dao et al. Management of video surveillance for smart cities
US11398091B1 (en) Repairing missing frames in recorded video with machine learning
CN111147821A (zh) 机车车载视频智能监控方法及其装置
KR20200108525A (ko) 인공 지능 카메라를 이용한 감시 시스템
KR102588729B1 (ko) 하이브리드 인공지능 영상분석 시스템
CN111787418B (zh) 基于人工智能ai的音视频流的对接处理方法及相关设备
KR101960530B1 (ko) 영상과 센서 데이터 병합 저장 및 재생 시스템

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant