KR101863727B1 - 영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ｃｃｔｖ 시스템 및 그 객체 검색방법 - Google Patents

영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ｃｃｔｖ 시스템 및 그 객체 검색방법 Download PDF

Info

Publication number
KR101863727B1
KR101863727B1 KR1020160117423A KR20160117423A KR101863727B1 KR 101863727 B1 KR101863727 B1 KR 101863727B1 KR 1020160117423 A KR1020160117423 A KR 1020160117423A KR 20160117423 A KR20160117423 A KR 20160117423A KR 101863727 B1 KR101863727 B1 KR 101863727B1
Authority
KR
South Korea
Prior art keywords
camera
zone
search condition
moving direction
intersection
Prior art date
Application number
KR1020160117423A
Other languages
English (en)
Other versions
KR20180029466A (ko
Inventor
김은주
Original Assignee
(주)서림정보통신
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)서림정보통신 filed Critical (주)서림정보통신
Priority to KR1020160117423A priority Critical patent/KR101863727B1/ko
Publication of KR20180029466A publication Critical patent/KR20180029466A/ko
Application granted granted Critical
Publication of KR101863727B1 publication Critical patent/KR101863727B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/738—Presentation of query results
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06K9/00624—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/292—Multi-camera tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명은 다중 조건 검색을 가능하게 하는 CCTV 시스템 및 그 검색방법에 관한 것이다. 본 발명의 방범용 CCTV 시스템은 복수 개 카메라에서 입력되는 영상을 하나의 화면에 구역을 나누어 표시할 수 있으며, 영상으로부터 객체를 검색할 수 있을 뿐만 아니라, 객체의 이동방향과 같은 다양한 검색조건을 설정하고, 그 검색조건에 부합하는 객체를 검색하여 표시할 수 있다.

Description

영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ＣＣＴＶ 시스템 및 그 객체 검색방법{CCTV System Capable of Searching Objects Complied with Multiple Terms from Image and Searching Method thereof}
본 발명은 적어도 하나의 카메라로부터 입력되는 영상으로부터 복수의 조건에 해당하는 객체를 검색하여 표시할 수 있는 CCTV 시스템 및 그 객체 검색방법에 관한 것이다.
CCTV 시스템은 감시나 관찰 등의 목적으로 도로나 공간에 카메라를 설치하고 카메라 영상을 제공받아 저장하고 사용자에게 표시하는 시스템이다. 최근에 카메라는 아이피 망(IP Network)에 연결할 수 있는 형태의 아이피 카메라가 널리 사용되고 있어서 아이피 망이 구축된 곳이면 몇 개의 카메라라도 연결하여 설치할 수 있다. 다만, 카메라를 아무리 많이 설치하더라도 카메라 영상을 받아서 저장하고 관리하기 위한 시스템이 충분히 뒷받침하지 못하면 카메라의 확정에 제한이 생길 수밖에 없다.
CCTV 시스템의 경우, 최근에는 카메라 영상을 녹화하고 재생하기 위하여 엔브이알(NVR: Network Video Recorder)이 널리 사용된다. 초기의 디브이알(DVR)은 아날로그 영상을 영상 케이블을 통해 전달받아 디지털 영상으로 변환하여 내장 하드 디스크 등에 디지털 포맷으로 저장하였으나, 최근의 엔브이알은 아이피 카메라로부터 직접 디지털 영상을 제공받는다. 시스템 내에 저장되는 영상이 디지털 포맷이기 때문에, 디지털 영상 처리기술을 이용한 다양한 영상처리가 가능해지고, 영상으로부터 원하는 것을 검출해 내는 기술이 발달하게 되었다.
영상으로부터 차량 번호와 같은 문자나 숫자를 인식하는 것은 대표적인 디지털 영상 처리기술 중 하나이다. 더불어, 디지털 영상 처리기술로 최근에 주목을 받고 있는 것은 영상으로부터 특정 객체를 검색하거나 추적하는 것이다. 영상 내에서 객체란 배경과 분리된 것을 의미하는데 일반적으로 영상 내에서 움직이는 사람, 자동차 또는 동물들이 해당한다. 객체를 단순히 인식하는 가장 간단한 방법은 일정한 프레임 속도로 연속적으로 입력되는 영상 프레임에 대해 상호 뺄셈 연산을 수행하는 것이다. 뺄셈 연산은 두 개 영상으로부터 배경을 인식하고 움직이는 부분을 추출한다.
최근의 기술은 움직이는 부분을 추출하는 것을 넘어서, 해당 검출된 임의의 객체를 형태적으로 파악하여 기설정된 템플릿과 비교함으로써 해당 객체가 사람인지 자동차인지 여부까지 확인할 수 있다. 또한 특정 색상의 객체를 검색하는 것도 가능하다.
최근에 보급되는 제품들은 객체 검색과 관련하여 다양한 검색조건에 기초한 검색을 제공하지만 한 번에 한 개의 검색조건을 입력할 수 있는 정도이다. 그러나 더 정밀한 검색을 하려면, 복수 개의 검색조건을 동시에 적용하여 복수 의 검색조건에 부합하는 객체를 빠른 시간에 검색할 수 있어야 하며 본 발명은 그러한 목적을 위한 것이다.
본 발명의 목적은, 적어도 하나의 카메라로부터 입력되는 영상으로부터 복수의 조건에 해당하는 객체를 검색하여 표시할 수 있는 CCTV 시스템 및 그 객체 검색방법을 제공하는 것이다.
상기 목적을 달성하기 위한 본 발명에 따라, 복수 개의 카메라로부터 제공되는 복수 개의 영상으로부터 타깃 객체를 검색하는 CCTV 시스템의 상기 객체 검색방법은, 영상처리부가 표시장치의 화면을 복수 개의 구역으로 나누어 상기 복수 개의 영상을 표시하는 제1 단계와, 검색조건부가 사용자로부터 상기 타깃 객체의 대표 색상, 상기 타깃 객체의 종류, 상기 타깃 객체의 이동 방향 및 이동 시간 중 적어도 하나를 포함하는 검색 조건을 입력받는 제2 단계와, 객체검출부가 상기 영상에서 객체를 인식한 후, 인식된 객체 중에서 상기 검색조건에 해당하는 객체를 상기 타깃 객체로 판단하여 마스킹하는 제3 단계를 포함한다. 여기서, 상기 객체의 종류는 사람 또는 자동차이고, 상기 이동 방향은 상기 화면상에서의 방향이다.
실시 예에 따라, 상기 제2 단계에서 상기 복수 개의 구역 중에서 제1 카메라가 표시되는 제1 구역에서의 이동방향을 상기 검색조건으로 지정한 경우에, 나머지 구역에서의 이동방향 조건은, 상기 검색조건부가 상기 제1 카메라와 나머지 카메라의 설치 위치 및 방향 사이의 연결관계로부터 자동으로 지정할 수 있다.
다른 실시 예에 따라, 상기 복수 개의 구역 중에서 촬영지역이 상기 제1 구역과 연결된 구역 사이의 교점이 설정된 경우에, 상기 제1 구역에서의 이동방향에서 상기 교점이 시작점으로 설정된 경우에 상기 연결된 구역에서의 이동방향은 상기 교점이 종착점이 되도록 설정되는 것이 바람직하다. 마찬가지로, 상기 제1 구역에서의 이동방향에서 상기 교점이 종착점으로 설정된 경우에 상기 연결된 구역에서의 이동방향은 상기 교점이 시작점이 되도록 설정되는 것이 바람직하다.
나아가, 상기 제2 단계에서 상기 제1 구역에서의 이동방향과 함께 상기 제1 구역에서의 이동시간을 상기 검색조건으로 동시에 지정한 경우에, 상기 검색조건부가 상기 제1 구역에서의 이동방향에서 상기 교점이 시작점으로 설정된 경우에 상기 연결된 구역에서의 이동시간은 상기 제1 구역에 설정된 이동시간보다 앞선 시간으로 설정하는 것이 바람직하다. 마찬가지로, 상기 제1 구역에서의 이동방향에서 상기 교점이 종착점으로 설정된 경우에 상기 연결된 구역에서의 이동시간은 상기 제1 구역에 설정된 이동시간보다 늦은 시간으로 설정하는 것이 바람직하다.
실시 예에 따라, 상기 이동방향은 상기 표시장치의 화면상에서의 방향으로 화살표를 이용하여 설정할 수 있다.
본 발명은 이상의 동작을 수행하는 영상처리부, 검색조건부 및 객체검출부를 포함하는 cctv 시스템에도 미친다.
본 발명의 방범용 CCTV 시스템은 복수 개의 검색조건에 부합하는 객체를 영상으로부터 검색할 수 있다.
만약 각각의 촬영범위가 상호 연결되도록 복수 개의 카메라가 배치된 경우라면, 그 중 한 개 카메라 영상에서의 객체의 이동방향이 검색조건으로 설정되면 나머지 연결관계에 있는 카메라에서의 객체의 이동방향도 자동으로 설정함으로써 복수 개 카메라에서 상호 연관된 검색을 할 수 있다.
또한, 하나의 카메라 영상으로부터 복수 개의 검색조건에 부합하는 객체를 검색할 수 있다. 이 경우에도, 한 개 카메라 영상을 가상의 세부구역으로 나누어 세부구역별 객체의 이동방향을 검색조건으로 설정할 수 있다. 이에 따라 본 발명의 CCTV 시스템은 한 개 카메라 영상에서 다양한 이동 경로를 가지는 객체를 검출할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 방범용 CCTV 시스템의 블록도.
도 2는 도 1의 본체의 블록도,
도 3은 본 발명의 일 실시 예에 따른 복수 개 카메라의 배치 예를 도시한 도면,
도 4는 복수 개의 카메라 영상을 하나의 화면에 표시한 예, 그리고
도 5는 하나의 카메라 영상을 세부 구역으로 나누어 화면에 표시한 예를 도시한 도면이다.
이하 도면을 참조하여 본 발명을 더욱 상세히 설명한다.
도 1 및 도 2를 참조하면, 본 발명의 CCTV 시스템(100)은 본체(110)와 표시장치(130)를 포함하며, 복수 개의 카메라(11, 13, 15, 17)와 연결되어 카메라(11, 13, 15, 17)가 제공하는 영상을 표시장치(130)에 표시할 수 있다. 본체(110)는 복수 개의 카메라(11, 13, 15, 17)와 아이피 망(IP Network) 등을 통해 연결되고, 표시장치(130)는 본체(110)가 제공하는 영상을 표시한다.
본체(110)는 네트워크 인터페이스(201), 저장매체(203), 영상수신부(205), 영상출력부(207), 입력부(209) 및 제어부(210)를 포함하며, 표시장치(130)의 영상표시창(131) 내에 복수 개 카메라(11, 13, 15, 17)의 영상 모두를 동시에 또는 그 중에서 선택된 영상을 표시할 수 있다. 도 4는 제1 내지 제4 카메라(11, 13, 15, 17)로부터 영상을 제공받아 영상표시창(131)에 동시에 표시하기 위하여 영상표시창(131)을 4개 구역(401a ~ 401d)으로 나눈 경우를 예시적으로 도시하고 있다. 표시장치(130)는 영상표시창(131)과 함께, 각종 설정 메뉴나 카메라 정보 등이 표시되는 정보창(133)이 표시된다.
네트워크 인터페이스(201)는 본체(110)와 카메라(11, 13, 15, 17)를 연결하고, 저장매체(203)에는 영상이 저장된다. 영상수신부(205)는 네트워크 인터페이스(201)를 통해 전달되는 디지털 영상신호를 프레임 단위로 추출하여 일정한 영상 저장 포맷으로 저장매체(203)에 저장하고 프레임 단위로 제어부(210)에게 제공한다. 영상출력부(207)는 제어부(210)의 제어에 따라 표시장치(130)로 영상을 출력하고, 입력부(209)는 각종 제어명령을 사용자로부터 입력받아 제어부(210)에게 제공한다.
제어부(210)는 본체(110)의 전반적인 동작을 제어하며, 특히 영상이 표시되는 중에 디지털 영상처리를 수행하여 영상에 포함된 특정 객체(Object)를 검색한다. 여기서, 객체는 영상 내에서 배경을 제거한 것으로서, 자동차 또는 사람이 해당한다. 제어부(210)는 다양한 기능부를 포함할 수 있지만, 특별히 본 발명의 동작을 위해 영상처리부(211), 검색조건부(213) 및 객체검출부(215)를 포함한다.
영상처리부(211)는 표시장치(130)의 영상표시창(131)에 복수 개의 카메라(11, 13, 15, 17)로부터 입력되는 영상 중 하나를 표시할 수도 있고, 복수 개의 구역으로 나누어 복수 개의 카메라 영상을 동시에 표시할 수도 있다. 영상표시창(131)은 최대 본체(110)에 연결된 카메라의 수만큼 분할될 수 있으며, 크기도 균일하게 분할될 필요가 없이 사용자의 요청에 따라 필요한 크기로 분할될 수 있다. 앞서 설명한 것처럼, 도 4는 영상표시창(131)을 균일한 크기의 제1 내지 제4 구역(401a ~ 401d)으로 나누어 제1 내지 제4 카메라(11, 13, 15, 17)의 영상을 동시에 표시한 예이다. 영상처리부(211)의 영상 표시방법은 종래에 알려진 방법을 사용할 수 있다.
검색조건부(213)는 영상에서 검색할 객체에 대한 정보인 '검색조건'을 사용자로부터 입력받는다. 따라서 검색 조건에는 객체의 종류, 객체의 이동 방향, 이동시간 및 객체의 대표 색상 중 적어도 하나를 포함한다. 복수 개의 검색조건이 입력되면 해당 복수 개의 검색조건을 동시에 적용하여 객체를 검색한다.
여기서 객체의 종류는 검색할 객체의 종류로서, 사람 또는 자동차 등이 해당할 수 있다. 객체인식에 사용되는 템플릿의 종류가 다양할수록 다양한 종류를 검색할 수 있다. 여기서는 사람과 자동차를 기준으로 설명한다.
객체의 이동방향은 영상표시창(131) 상에서의 방향으로 설정하며, 각 구역(401a ~ 401d)마다 별도로 설정할 수 있다. 이를 위해, 검색조건부(213)는 영상표시창(131) 상에 화살표(403a, 403b, 403c, 403d)를 표시한다. 화살표(403a, 403b, 403c, 403d)는 해당 구역(401a ~ 401d)의 검색조건으로 설정된 이동방향을 나타낸다. 화살표는 사용자가 입력부(209)를 이용하여 이동방향을 직접 설정한 것도 있고, 검색조건부(213)가 자동으로 표시하는 것일 수도 있다. 사용자는 특정 구역에서의 화살표의 방향을 지정하는 방법으로 이동방향을 검색조건으로 입력할 수 있다.
만약, 도 3 및 도 4의 경우에, 제1 구역(401a)에서의 이동방향을 (↓) 방향으로 설정하였다면, 제1 카메라(11)의 설치 위치를 고려할 때 a'→a 방향으로 이동하는 객체를 검색하는 것이다.
이동시간은 제1 내지 제4 카메라(11, 13, 15, 17)로부터 이미 제공받아 저장매체(203)에 저장해 둔 녹화영상으로부터 객체를 검색할 경우에 사용된다.
객체의 색상은 해당 검색 대상이 되는 객체의 주된 색상을 의미한다. 여기서 주된 색상은 인식된 객체의 영상표시창(131) 상 크기의 기설정된 비율 이상을 차지하면 된다. 비율(예컨대 20%) 설정에 따라서는 하나의 객체 내에 복수 개의 주된 색상이 있을 수 있다.
영상표시창(131)이 복수 개의 구역으로 분할된 경우에 검색조건은 각 구역별로 설정할 수 있다. 다만, 검색조건 중에서, 객체의 종류 및 객체의 대표 색상은 전체 구역에 대해 동일하게 적용하는 것이 바람직하고, 이동시간 또는 이동방향은 각 구역별로 설정할 수도 있다.
객체검출부(215)는 제1 내지 제4 카메라(11, 13, 15, 17)에서 입력되는 영상에 대해 객체인식을 수행하여 객체를 인식하고, 인식된 객체 중에서 검색조건부(213)가 입력받은 검색조건에 맞는 객체인 '타깃 객체'를 최종 추출한다. 객체검출부(215)는 타깃 객체가 검출되면, 해당 타깃 객체를 마스킹하여 영상표시창(131)에 표시함으로써 사용자가 객체를 확인할 수 있도록 하며, 그 검출정보를 저장한다. 여기서, 검출정보에는 타깃 객체가 검출된 카메라에 대한 정보, 그 녹화(또는 촬영) 시간에 대한 정보, 그리고 검색 조건 등이 포함된다.
객체검출부(215)의 객체 인식방법은 종래에 알려진 방법을 그대로 사용할 수 있다. 예컨대, 새로운 객체를 인식하는 가장 기본적인 방법으로는 이전 프레임의 영상과 새로운 프레임의 영상의 뺄셈 연산이 있다.
객체검출부(215)는 검출된 타깃 객체를 마스킹하여 표시함과 동시에, 제1 내지 제4 카메라(11, 13, 15, 17)로부터 제공되는 영상 내에서 본 발명이 제시하는 방법으로 추적(Tracking)할 수 있다.
이하에서는 도 3을 참조하여, 객체검출부(215)의 동작을 중심으로 하는 본 발명의 검색방법을 설명한다. 우선 본 발명의 방법은 도 3에서처럼, 복수 개의 카메라(11, 13, 15, 17)의 촬영 범위가 지리적으로 상호 연결될 것을 전제로 한다. 여기서, 촬영 지역의 연결은 단절없는 연결을 의미하는 것이 아니며, 검색 대상이 되는 객체의 평균 이동속도로 기설정한 시간(예컨대 수 초 내지 수 분) 이내에 연결될 수 있는 정도이면 족하다.
예컨대 도 3과 같은 사거리에서 제1 카메라(11)의 제1 촬영지역(a-a'), 제2 카메라(13)의 제2 촬영지역(b-b'), 제3 카메라(15)의 제3 촬영지역(c-c') 및 제4 카메라(17)의 제4 촬영지역(d-d')은 비록 단절없이 연결된 것은 아니지만, 사람 또는 차량의 평균 이동 속도로 5초 내지 1분이면 연결될 수 있는 거리 정도만 단절됨으로써 서로 연결된 상태이다. 그런 측면에서 제1 내지 제4 카메라(11, 13, 15, 17)의 촬영 범위는 a', b, c, d에서 상호 연결된다. 이하에서는 a', b, c, d를 '교점'이라 한다.
실시 예 1: 복수 개 구역에서의 검색조건을 동시에 만족하는 객체 검출
검색조건이 만약 제1 구역(401a)에서의 이동방향이 (↓)(즉, a'→a 방향)이면서, 제2 구역(401b)에서의 이동방향이 (↓)(즉, b' →b 방향)인 객체로 지정된 것으로 가정한다. 객체검출부(215)는 (1) 제1 구역(401a)에서 검출되는 객체 중에서 화면상에서 아래 방향(↓)으로 이동 중인 객체를 우선 찾고, (2) 그 객체들 중에서 제2 구역(401b)에서도 검출되면서 화면상에서 아래 방향(↓)으로 이동하는 객체를 찾는다.
동일한 객체가 제1 구역(401a)과 제2 구역(401b)에서 동일한 시간에 동시에 검출되는 것은 당연히 불가능하다. 다만, 제1 구역에서의 이동방향과 제2 구역에서의 이동방향 사이에 선후를 검색조건으로 입력한 경우가 아니라면, 제1 구역(401a)에서의 검출이 반드시 제2 구역(401b)에서의 검출보다 시간적으로 선행할 필요도 없다. 따라서 객체검출부(215)는 영상수신부()로부터 연속적으로 입력되는 제1 카메라(11)의 영상 프레임으로부터 (↓) 방향으로 이동한 객체를 검색하고 제2 카메라(13)의 영상 프레임으로부터 (↓)방향으로 이동한 객체를 검색하여 상호 겹치는 객체를 최종 타깃 객체로 판단하고 마스킹하여 표시한다.
실시 예2: 복수 개 구역 중 선택된 한 개 구역에서의 이동방향에 기초한 연관 검색
실시 예에 의하면, 검색조건부(213)는 사용자에 의해 특정 한 개 구역의 검색조건으로 이동방향이 설정된 경우에, 해당 이동방향에 기초하여, 사용자의 설정이 없더라도 나머지 구역에 대해서도 이동방향을 검색조건으로 자동 설정할 수 있다.
우선, 검색조건으로 객체의 종류, 이동방향, 이동시간 및 색상 중에서 선택된 복수 개의 조건이 동시에 검색조건으로 지정되었지만, 이동방향과 관련하여서는 한 개 구역에서의 이동방향만 지정된 경우를 가정한다.
예를 들어, 도 4와 같이, 객체의 종류는 사람이고, 객체의 색상은 적색, 그리고 제1 카메라(11)의 영상이 표시되는 제1 구역(401a)에서의 이동방향이 검색조건으로 사용자에 의해 지정된 경우이다. 도 4에서 제1 구역(401a)의 이동방향 (↓)은 제1 카메라(11)에서 먼 쪽에서 카메라 쪽으로 접근하는 것에 해당하므로, 도 3에서 a' → a 방향이다.
검색조건부(213)는 우선 해당 검색조건을 모두 제1 구역(401a)의 영상에서 객체를 검출하는 검색조건으로 판단하고, 나머지 제2 내지 제4 구역(401b 내지 401d)에서의 검색조건은 연관하여 설정한다. 앞서 설명한 것처럼, 객체의 종류, 색상은 모든 구역에 동일하게 적용되므로, 이동 방향만 제1 구역(401a)의 설정에 연관하여 설정하면 된다.
동물이나 사람과 같은 객체의 이동은 공간을 따라 이루어지므로, 실제 공간의 연결관계와 그 공간에 설치된 카메라의 배치방향으로부터 기설정된 각 구역의 연관정보가 사용된다.
도 3의 예에서, 제1 내지 제4 카메라(11, 13, 15, 17)의 촬영지역, 즉 제1 내지 제4 구역(401a 내지 401d)의 촬영지역은 상호 연결관계에 있다. 그 연결관계는 제1 내지 제4 구역(401a 내지 401d)이 대략 동일한 연결지점(교점)을 가진다는 것이다. 도 3 에서, 도 4의 제1 내지 제4 구역(401a 내지 401d)의 촬영지역을 나타내는 a-a', b-b', c-c' 및 d-d'에서 교점들은 a', b, c, d로서 대략 동일한 영역이다.
동물이나 사람과 같은 객체의 이동은 공간을 따라 이루어지고 연속된 시간 진행에서 공간을 띄어 넘을 수 없다. 하나의 구역(또는 그 카메라)의 검색조건으로 이동방향이 설정된 경우, 검색조건으로 설정된 이동방향에서 교점이 시작점이면 나머지 카메라의 교점은 종착점이 되고, 검색조건으로 설정된 이동방향에서의 교점이 종착점이면 나머지 카메라의 교점은 시작점이 되는 것이, 실제 공간의 연결관계와 그 공간에 설치된 카메라의 배치방향의 관계에서 논리적이다.
따라서 제1 구역(401a)에서 (a→a')으로 이동한 객체를 검색하는 경우, 검색조건으로 제시된 제1 구역(401a)에서의 이동방향 (↑)에서 교점 a'은 종착점이 되므로, 나머지 구역에서 교점인 b, c, d는 시작점이 된다. 따라서 제2 내지 제4 구역(401b 내지 401d)에서는 (b→b'), (c→c') 또는 (d→d') 중 하나로 이동한 객체를 검색하면 된다.
만약 (b→b')가 검색조건으로 설정되면, 교점 b는 시작점이므로, 다른 교점 a', c, d는 종착점이 된다. 따라서 (a→a'), (c'→c) 또는 (d'→d) 중 하나로 이동한 객체를 검색하면 된다. .
따라서, 제1 구역(401a)의 방향이 설정되면, 나머지 구역의 방향은 다음의 표 1과 같이 연동하여 설정된다.
구역 1
(설정구역)		 구역 2
(연동구역)		 구역 3
(연동구역)		 구역 4
(연동구역)
↑ (a→a') ↑ (b→b') ↑ (c→c') ↑ (d→d')
↓ (a'→a) ↓ (b'→b) ↓ (c'→c) ↓ (d'→d)
표 1에 의하면, 도 4에서처럼 사용자가 제1 구역(401a)에서의 검색조건으로 이동방향을 (↓)로 설정하였다면, 나머지 제2 내지 제4 구역(401b 내지 401d)에서의 이동방향도 자동으로 (↓)로 설정된다.
만약, 사용자가 제2 구역(401b)의 방향을 설정하였다면, 나머지 구역의 방향은 다음의 표 2와 같이 연동하여 설정된다.
구역 1
(연동구역)		 구역 2
(설정구역)		 구역 3
(연동구역)		 구역 4
(연동구역)
↑ (a→a') ↑ (b→b') ↓ (c'→c) ↓ (d'→d)
↓ (a'→a) ↓ (b'→b) ↑ (c→c') ↑ (d→d')
더 나아가, 검색조건부(213)는 제1 구역(401a)에서의 이동방향과 함께 제1 구역에서의 시간을 검색조건으로 동시에 지정하였다면, 표 1의 연결관계로부터 나머지 제2 내지 제4 구역(401b 내지 401d)에서의 검색시간을 자동으로 지정할 수 있다. 검색조건으로 설정된 제1 구역(401a)에서의 이동방향에서 교점이 시작점이면 나머지 제2 내지 제4 구역(401b 내지 401d)에서의 교점은 종착점이 되므로, 검색조건부(213)는 적어도 제1 구역(401a)에서의 검색시간보다 이른 시간으로 제2 내지 제4 구역(401b 내지 401d)에서의 검색시간을 설정한다.
검색조건으로 설정된 제1 구역(401a)에서의 이동방향에서의 교점이 종착점이면 나머지 제2 내지 제4 구역(401b 내지 401d)의 교점은 시작점이 되므로, 검색조건부(213)는 적어도 제1 구역(401a)에서의 검색시간보다 늦은 시간으로 제2 내지 제4 구역(401b 내지 401d)에서의 검색시간을 설정한다.
하나의 화면에서의 복수의 이동방향 지정
실시 예에 따라, 도 5에서처럼, 하나의 카메라 영상이 영상표시창(131) 전체에 표시되고, 그 영상표시창(131)에서의 객체 검색을 위해 동일한 방식의 검색조건이 설정될 수 있다. 객체검출부(215)는 그 검색조건에 따라 지정된 한 개 카메라에 포착된 영상에서 특정 객체를 검색하게 된다.
도 5의 예는 영상표시창(131)에 특정 카메라에서 제공되는 영상이 표시된 경우이다. 검색조건부(213)는 객체의 이동방향과 관련된 검색조건 입력을 위해 영상표시창(131)을 4개의 세부구역(501a, 501b, 501c, 501d)으로 나눌 수 있다. 세부구역(501a, 501b, 501c, 501d)은 도 4에서의 구역(401a, 401b, 401c, 401d)과는 다르다. 도 4에서의 구역(401a, 401b, 401c, 401d)은 각각 제1 내지 제4 카메라(11, 13, 15, 17)의 영상에 대응되지만, 도 5에서의 세부구역(501a, 501b, 501c, 501d)은 하나의 카메라 영상을 영역별로 나눈 것이다.
검색조건부(213)는 사용자로부터 객체의 이동방향과 관련하여 적어도 2개의 세부구역에서의 이동방향을 검색조건으로 입력받을 수 있다. 이때, 적어도 2개의 세부구역에서의 이동방향에는 어느 것이 먼저인지 함께 설정되어야 한다. 도 5에서는 제1 세부구역(501a)과 제4 세부구역(501d)에서의 객체의 이동방향을 검색조건으로 입력받은 상태를 도시하고 있으며, 제1 세부구역(501a)에서의 이동방향이 먼저 결정되고 제4 세부구역(501d)에서의 객체의 이동방향이 후순위로 결정된 상태이다.
이에 따라, 객체검출부(215)는 적어도 2개의 세부구역에 대해 검색조건으로 설정된 이동방향에 부합하는 객체를 검출한다. 객체 인식 및 추적 기술이 사용된다. 다시 말해, 해당 카메라에서 일정한 속도로 입력되는 영상 프레임 각각에서 객체를 인식하고, 해당 동일한 객체에 태그(Tag)를 달아 인식한 각 객체의 이동을 추적한다. 이러한 추적을 기초로 적어도 2개의 세부구역에 대해 검색조건으로 설정된 이동방향에 부합하는 객체를 추출할 수 있다.
도 5의 예에서, 제1 세부구역(501a)에서의 객체의 이동방향을 (↓)로 설정하고, 제4 세부구역(501d)에서의 객체의 이동방향을 (↘)로 설정하였다. 도 5의 (a)는 t1 시점의 영상 프레임이고, 도 5의 (b)는 t2 시점의 영상 프레임이다. 여기서, t1<t2 이다.
객체검출부(215)는 제1 세부구역(501a)에서의 (↓) 방향으로 이동하는 객체(x1, x2)를 검출하게 된다. 우선, 이동방향 이외에 나머지 검색조건은 설정되지 않았거나 나머지 검색조건이 설정되었더라도 객체 x1과 x2가 나머지 검색조건에도 부합한 객체라면, 제1 세부구역(501a)에서는 두 개의 객체(x1, x2)가 모두 검색되어 추적된다. 그러나 이후 프레임에서 제4 세부구역(501d)에서 (↘)방향으로 이동하는 객체는 x2뿐이다. 따라서 객체검출부(215)는 x2를 최종적으로 타깃 객체로 판단하여 마스킹함으로써 사용자에게 표시한다.
이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.

Claims (8)

  1. 제1 카메라와 제2 카메라를 포함하는 복수 개의 카메라로부터 제공되는 복수 개의 영상으로부터 타깃 객체를 검색하는 CCTV 시스템의 상기 타깃 객체 검색방법에 있어서,
    영상처리부가 표시장치의 화면을 복수 개의 구역으로 나누어 상기 복수 개의 영상을 동시에 표시하는 제1 단계;
    검색조건부가 사용자로부터 상기 타깃 객체의 대표 색상, 상기 타깃 객체의 종류(상기 종류는 사람 또는 자동차 중 하나임), 상기 타깃 객체의 이동 방향(상기 이동 방향은 상기 화면 상에서의 방향임) 및 이동 시간 중 적어도 하나를 포함하는 검색 조건을 입력받는 제2 단계; 및
    객체검출부가 상기 영상에서 객체를 인식한 후, 인식된 객체 중에서 상기 검색조건에 해당하는 객체를 상기 타깃 객체로 마스킹하는 제3 단계를 포함하고,
    상기 제2 단계는,
    상기 복수 개의 구역 중에서 상기 제1 카메라가 표시되는 제1 구역에서의 이동방향을 상기 검색조건으로 지정한 경우에, 나머지 구역에서의 이동방향 조건은, 상기 검색조건부가 상기 제1 카메라와 나머지 카메라의 설치 위치 및 방향 사이의 연결관계로부터 지정하되,
    상기 제1 카메라와 제2 카메라의 촬영지역이 서로 연결되면서 상기 제1 카메라와 제2 카메라의 촬영지역 사이에 교점이 설정된 경우에, 상기 제1 구역에서 상기 교점이 이동방향의 시작점으로 설정되면 상기 제2 카메라가 표시되는 제2 구역에서의 이동방향은 상기 교점이 종착점이 되도록 설정되고, 상기 제1 구역에서 상기 교점이 이동방향의 종착점으로 설정되면 상기 제2 구역에서의 이동방향은 상기 교점이 시작점이 되도록 설정되는 것을 특징으로 하는 CCTV 시스템의 객체 검색방법.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 제1 구역에서 상기 교점이 이동방향의 시작점으로 설정되면 상기 제2 구역에서의 이동시간은 상기 제1 구역에 설정된 이동시간보다 앞선 시간으로 설정하고,
    상기 제1 구역에서 상기 교점이 이동방향의 종착점으로 설정되면 상기 제2 구역에서의 이동시간은 상기 제1 구역에 설정된 이동시간보다 늦은 시간으로 설정하는 것을 특징으로 하는 CCTV 시스템의 객체 검색방법.
  5. 제1항에 있어서,
    상기 이동방향은 상기 표시장치의 화면상에서의 방향으로 설정하되 화살표를 이용하여 설정하는 것을 특징으로 하는 CCTV 시스템의 객체 검색방법.
  6. 제1 카메라와 제2 카메라를 포함하는 복수 개의 카메라로부터 제공되는 복수 개의 영상으로부터 타깃 객체를 검색하는 CCTV 시스템에 있어서,
    표시장치의 화면을 복수 개의 구역으로 나누어 상기 복수 개의 영상을 동시에 표시하는 영상처리부;
    사용자로부터 상기 타깃 객체의 대표 색상, 상기 타깃 객체의 종류(상기 종류는 사람 또는 자동차 중 하나 임), 상기 타깃 객체의 이동 방향(상기 이동 방향은 상기 화면 상에서의 방향임) 및 이동 시간 중 적어도 하나를 포함하는 검색 조건을 입력받는 검색조건부; 및
    상기 영상에서 객체를 인식한 후, 인식된 객체 중에서 상기 검색조건에 해당하는 객체를 상기 타깃 객체로 마스킹하는 객체검출부를 포함하고,
    상기 검색조건부는,
    상기 복수 개의 구역 중에서 상기 제1 카메라가 표시되는 제1 구역에서의 이동방향이 상기 검색조건으로 사용자에 의해 지정된 경우에, 상기 제1 카메라와 나머지 카메라의 설치 위치 및 방향 사이의 연결관계로부터 나머지 구역에서의 이동방향을 검색조건으로 지정하되,
    상기 제1 카메라와 제2 카메라의 촬영지역이 서로 연결되면서 상기 제1 카메라와 제2 카메라의 촬영지역 사이에 교점이 설정된 경우에, 상기 제1 구역에서 상기 교점이 이동방향의 시작점으로 설정되면 상기 제2 카메라가 표시되는 제2 구역에서의 이동방향은 상기 교점이 종착점이 되도록 설정하고, 상기 제1 구역에서의 이동방향에서 상기 교점이 종착점으로 설정되었으면 상기 제2 구역에서의 이동방향은 상기 교점이 시작점이 되도록 설정하는 것을 특징으로 하는 CCTV 시스템.
  7. 삭제
  8. 삭제
KR1020160117423A 2016-09-12 2016-09-12 영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ｃｃｔｖ 시스템 및 그 객체 검색방법 KR101863727B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160117423A KR101863727B1 (ko) 2016-09-12 2016-09-12 영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ｃｃｔｖ 시스템 및 그 객체 검색방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160117423A KR101863727B1 (ko) 2016-09-12 2016-09-12 영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ｃｃｔｖ 시스템 및 그 객체 검색방법

Publications (2)

Publication Number Publication Date
KR20180029466A KR20180029466A (ko) 2018-03-21
KR101863727B1 true KR101863727B1 (ko) 2018-06-04

Family

ID=61900602

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160117423A KR101863727B1 (ko) 2016-09-12 2016-09-12 영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ｃｃｔｖ 시스템 및 그 객체 검색방법

Country Status (1)

Country Link
KR (1) KR101863727B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101972428B1 (ko) 2018-10-11 2019-04-25 주식회사 사라다 개인 정보 보호를 위한 모드 설정이 가능한 영상 처리 장치 및 방법
KR102376479B1 (ko) * 2021-11-26 2022-03-18 (주)혜성에스앤피 인공지능 기반 객체 자동 인식을 위한 cctv 제어 방법, 장치 및 시스템
US11663801B2 (en) 2020-06-24 2023-05-30 Korea Institute Of Science And Technology Method for determining search region using region information and object information and system performing the same

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102522399B1 (ko) * 2019-07-09 2023-04-14 주식회사 케이티 객체 확인 방법 및 이를 위한 시스템
KR102270858B1 (ko) * 2021-04-08 2021-06-29 주식회사 코앨 객체 추적을 위한 cctv 카메라 시스템
KR102589573B1 (ko) * 2023-03-24 2023-10-16 주식회사 아로텍 촬영 구역을 결정하기 위한 방법 및 장치
KR102589574B1 (ko) * 2023-03-24 2023-10-16 주식회사 아로텍 카메라를 이용한 순찰 방법 및 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101025133B1 (ko) * 2009-06-24 2011-03-25 주식회사 대덕지에스 영상감시 시스템 및 그 시스템의 영상감시방법
KR101404153B1 (ko) * 2014-01-07 2014-06-09 주식회사 다이나맥스 지능형 cctv 통합관제시스템

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140103046A (ko) * 2013-02-15 2014-08-25 삼성전자주식회사 객체 추적 방법 및 이를 지원하는 전자 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101025133B1 (ko) * 2009-06-24 2011-03-25 주식회사 대덕지에스 영상감시 시스템 및 그 시스템의 영상감시방법
KR101404153B1 (ko) * 2014-01-07 2014-06-09 주식회사 다이나맥스 지능형 cctv 통합관제시스템

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101972428B1 (ko) 2018-10-11 2019-04-25 주식회사 사라다 개인 정보 보호를 위한 모드 설정이 가능한 영상 처리 장치 및 방법
US11663801B2 (en) 2020-06-24 2023-05-30 Korea Institute Of Science And Technology Method for determining search region using region information and object information and system performing the same
KR102376479B1 (ko) * 2021-11-26 2022-03-18 (주)혜성에스앤피 인공지능 기반 객체 자동 인식을 위한 cctv 제어 방법, 장치 및 시스템

Also Published As

Publication number Publication date
KR20180029466A (ko) 2018-03-21

Similar Documents

Publication Publication Date Title
KR101863727B1 (ko) 영상으로부터 다중 조건에 따른 객체 검색을 가능하게 하는 ｃｃｔｖ 시스템 및 그 객체 검색방법
JP3781370B2 (ja) 移動装置
JP4984728B2 (ja) 被写体照合装置および被写体照合方法
EP1635573A2 (en) Imaging system and imaging method
US20220406065A1 (en) Tracking system capable of tracking a movement path of an object
KR101960667B1 (ko) 저장 영상에서 용의자 추적 장치 및 방법
JPWO2016157327A1 (ja) 映像監視システム及び映像監視方法
KR101645959B1 (ko) 복수의 오버헤드 카메라와 사이트 맵에 기반한 객체 추적 장치 및 그 방법
KR100326203B1 (ko) 피부색 및 움직임 자동 추적에 의한 얼굴 촬영/인식방법과 그장치
KR20110034545A (ko) 화상 처리 장치 및 화상 처리 방법
KR100777199B1 (ko) 이동 객체 추적 장치 및 그 방법
JP2005227957A (ja) 最適顔画像記録装置及び最適顔画像記録方法
KR101404153B1 (ko) 지능형 cctv 통합관제시스템
JP6013923B2 (ja) ビデオエピソードの閲覧及び検索のためのシステム及び方法
US20200145623A1 (en) Method and System for Initiating a Video Stream
US10373015B2 (en) System and method of detecting moving objects
US10122984B2 (en) Pan/tilt/zoom camera based video playing method and apparatus
KR20160093253A (ko) 영상 기반 이상 흐름 감지 방법 및 그 시스템
WO2022009944A1 (ja) 映像解析装置、広域監視システム及びカメラの選定方法
JPH11150676A (ja) 画像処理装置及び追尾装置
JP5349367B2 (ja) 移動物体追跡装置
KR101904425B1 (ko) 대량의 cctv 영상 분석을 위한 객체 데이터 조회 방법
JP6405606B2 (ja) 画像処理装置、画像処理方法、および画像処理プログラム
US11995915B2 (en) Systems and methods for collecting video clip evidence from a plurality of video streams of a video surveillance system
EP3413268B1 (en) Counter-flow detection in compressed video

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant