KR20140039927A - 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법 - Google Patents

복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법 Download PDF

Info

Publication number
KR20140039927A
KR20140039927A KR1020120106797A KR20120106797A KR20140039927A KR 20140039927 A KR20140039927 A KR 20140039927A KR 1020120106797 A KR1020120106797 A KR 1020120106797A KR 20120106797 A KR20120106797 A KR 20120106797A KR 20140039927 A KR20140039927 A KR 20140039927A
Authority
KR
South Korea
Prior art keywords
event
rule
interest
image
event rule
Prior art date
Application number
KR1020120106797A
Other languages
English (en)
Other versions
KR101937272B1 (ko
Inventor
조영관
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020120106797A priority Critical patent/KR101937272B1/ko
Priority to EP13840942.0A priority patent/EP2903261B1/en
Priority to PCT/KR2013/008592 priority patent/WO2014051337A1/ko
Priority to CN201380049910.2A priority patent/CN104704816B/zh
Publication of KR20140039927A publication Critical patent/KR20140039927A/ko
Priority to US14/667,552 priority patent/US9639937B2/en
Application granted granted Critical
Publication of KR101937272B1 publication Critical patent/KR101937272B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/292—Multi-camera tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/254—Analysis of motion involving subtraction of images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/12—Bounding box
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19641—Multiple cameras having overlapping views on a single scene

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)

Abstract

복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법를 개시한다.
복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신부; 상기 복수 개의 촬영영상을 상기 카메라의 좌표계에 대응되는 변환함수를 이용하여 하나의 메인영상으로 합성하는 영상 합성부; 상기 메인영상에 대한 이벤트룰을 획득하는 이벤트룰 획득부; 상기 이벤트룰을 상기 변환함수를 이용하여 각각의 상기 카메라에 대응되는 개별 이벤트룰로 변환하는 개별 이벤트룰 생성부; 및 변환된 상기 개별 이벤트룰을 이벤트를 검출하기 위해 전송하는 룰 전송부를 포함하는 것을 특징으로 하는 개별 이벤트룰 생성장치를 제공한다.

Description

복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법{Method and Apparatus for Detecting Event from Multiple Image}
본 실시예는 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법에 관한 것이다. 더욱 상세하게는, 복수 개의 촬영영상이 합성된 합성영상에 대한 하나의 이벤트룰을 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 개별 이벤트룰로 변환하고, 개별 이벤트룰에 근거하여 판단된 복수 개의 개별 이벤트를 소정의 변환함수를 이용하여 하나의 이벤트로 검출하는 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법에 관한 것이다.
이 부분에 기술된 내용은 단순히 본 실시예에 대한 배경 정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.
종래의 영상보안 시스템은 기 설치된 카메라마다 이벤트룰을 설정하고, 설정된 이벤트룰에 근거하여 각각의 이벤트를 검출함으로써, 실제 하나의 객체에 따른 이벤트라도 복수 개의 이벤트로 검출될 수 있고, 이러한 불필요한 검출로 인해 복수 개의 이벤트가 동일한 이벤트인 것을 판단하기 위한 프로세스 및 처리시간이 증가한다는 문제점이 있다.
본 실시예는, 복수 개의 촬영영상이 합성된 합성영상에 대한 하나의 이벤트룰을 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 개별 이벤트룰로 변환하고, 개별 이벤트룰에 근거하여 판단된 복수 개의 개별 이벤트를 소정의 변환함수를 이용하여 하나의 이벤트로 검출하는 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법을 제공하는 데 주된 목적이 있다.
본 실시예의 일 측면에 의하면, 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신부; 상기 복수 개의 촬영영상을 상기 카메라의 좌표계에 대응되는 변환함수를 이용하여 하나의 메인영상으로 합성하는 영상 합성부; 상기 메인영상에 대한 이벤트룰을 획득하는 이벤트룰 획득부; 상기 이벤트룰을 상기 변환함수를 이용하여 각각의 상기 카메라에 대응되는 개별 이벤트룰로 변환하는 개별 이벤트룰 생성부; 및 변환된 상기 개별 이벤트룰을 이벤트를 검출하기 위해 전송하는 룰 전송부를 포함하는 것을 특징으로 하는 개별 이벤트룰 생성장치를 제공한다.
본 실시예의 다른 측면에 의하면, 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신부; 상기 복수 개의 촬영영상의 합성영상에 대한 소정 이벤트의 발생 여부를 판단하는 이벤트룰 및 상기 이벤트룰이 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 변환된 개별 이벤트룰을 수신하는 룰 수신부; 상기 촬영영상으로부터 관심객체를 추출하는 관심객체 추출부; 상기 개별 이벤트룰에 근거하여 상기 관심객체의 궤적정보가 개별 이벤트에 해당하는지 여부를 판단하는 개별 이벤트 판단부; 상기 관심객체의 궤적정보를 상기 변환함수를 이용하여 역변환 궤적정보를 생성하고, 복수 개의 상기 역변환 궤적정보가 상기 이벤트룰을 만족하면 하나의 이벤트로 판단하여 검출하는 이벤트 검출부; 및 상기 검출된 이벤트에 따라 출력정보를 생성하는 이벤트 출력부를 포함하는 것을 특징으로 하는 이벤트 검출장치를 제공한다.
본 실시예의 다른 측면에 의하면, 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신과정; 상기 복수 개의 촬영영상을 상기 카메라의 좌표계에 대응되는 변환함수를 이용하여 하나의 메인영상으로 합성하는 영상 합성과정; 상기 메인영상에 대한 이벤트룰을 획득하는 이벤트룰 획득과정; 상기 이벤트룰을 상기 변환함수를 이용하여 각각의 상기 카메라에 대응되는 개별 이벤트룰로 변환하는 개별 이벤트룰 생성과정; 및 변환된 상기 개별 이벤트룰을 이벤트를 검출하기 위해 전송하는 룰 전송과정을 포함하는 것을 특징으로 하는 개별 이벤트룰 생성방법을 제공한다.
본 실시예의 다른 측면에 의하면, 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신과정; 상기 복수 개의 촬영영상의 합성영상에 대한 소정 이벤트의 발생 여부를 판단하는 이벤트룰 및 상기 이벤트룰이 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 변환된 개별 이벤트룰을 수신하는 룰 수신과정; 상기 촬영영상으로부터 관심객체를 추출하는 관심객체 추출과정; 상기 개별 이벤트룰에 근거하여 상기 관심객체의 궤적정보가 개별 이벤트에 해당하는지 여부를 판단하는 개별 이벤트 판단과정; 상기 관심객체의 궤적정보를 상기 변환함수를 이용하여 역변환 궤적정보를 생성하고, 복수 개의 상기 역변환 궤적정보가 상기 이벤트룰을 만족하면 하나의 이벤트로 판단하여 검출하는 이벤트 검출과정; 및 상기 검출된 이벤트에 따라 출력정보를 생성하는 이벤트 출력과정을 포함하는 것을 특징으로 하는 이벤트 검출방법을 제공한다.
이상에서 설명한 바와 같이 본 실시예에 의하면, 복수 개의 촬영영상이 합성된 합성영상에 대한 하나의 이벤트룰을 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 개별 이벤트룰로 변환하고, 개별 이벤트룰에 근거하여 판단된 복수 개의 개별 이벤트를 소정의 변환함수를 이용하여 하나의 이벤트로 검출함으로써, 복수 개의 이벤트룰을 설정할 필요가 없고, 중복되는 이벤트를 검출하지 않으며 이벤트의 저장, 검색 및 관리가 용이한 효과가 있다. 또한, 복수 개의 카메라에 하나의 이벤트룰이 설정됨으로 검출장치의 수를 감소시킬 수 있는 효과가 있다.
도 1은 본 실시예에 따른 이벤트 검출시스템을 개략적으로 나타낸 블록 구성도이다.
도 2는 본 실시예에 따른 개별 이벤트룰 생성장치를 개략적으로 나타낸 블록 구성도이다.
도 3은 본 실시예에 따른 이벤트 검출장치를 개략적으로 나타낸 블록 구성도이다.
도 4는 본 실시예에 따른 이벤트 검출장치가 이벤트를 검출하는 방법을 설명하기 위한 순서도이다.
도 5는 본 실시예에 따른 개별 이벤트룰 생성장치가 개별 이벤트룰을 생성하는 방법을 설명하기 위한 순서도이다.
이하, 본 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. 각 도면의 구성요소들에 참조부를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
또한, 본 발명의 구성 요소를 설명하는 데 있어서, 제1, 제2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 어떤 구성 요소가 다른 구성요소에 "연결", "결합" 또는 "접속"된다고 기재된 경우, 그 구성 요소는 그 다른 구성요소에 직접적으로 연결되거나 또는 접속될 수 있지만, 각 구성 요소 사이에 또 다른 구성 요소가 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다.
도 1은 본 실시예에 따른 이벤트 검출시스템을 개략적으로 나타낸 블록 구성도이다.
본 실시예에 따른 이벤트 검출시스템은 영상 촬영장치(110), 영상 전송장치(120), 네트워크망(130), 개별 이벤트룰 생성장치(140) 및 이벤트 검출장치(150)를 포함한다. 여기서, 영상 촬영장치(110)는 제1 카메라(112) 및 제2 카메라(114)를 포함한다.
영상 촬영장치(110)는 촬영영상을 촬영하는 장치를 말하며, 본 실시예에 따른 영상 촬영장치(110)는 객체의 이동, 침입, 이탈, 도난 및 방치 등의 이벤트를 감시하기 위해 촬영영상을 촬영할 수 있는 CCTV용 카메라, 감시 카메라 등으로 구현되는 것이 바람직하다. 여기서, 촬영영상은 복수 개의 카메라(112, 114)에서 촬영된 복수 개의 프레임을 포함할 수 있다.
영상 촬영장치(110)는 제1 카메라(112) 및 제2 카메라(114)와 같이 복수 개의 카메라로 구성되며, 각각의 카메라는 서로 다른 방향에서 동일한 위치의 전체 또는 일부를 촬영한다. 예컨대, 영상 촬영장치(110)가 운동장을 촬영하는 경우, 제1 카메라(112)는 운동장의 좌측 부분을 촬영하고, 제2 카메라(112)는 운동장의 우측부분을 촬영하는 카메라일 수 있으며, 복수 개의 카메라(112, 114)는 중복해서 촬영되는 영상의 영역이 존재할 수 있다.
영상 전송장치(120)는 복수 개의 카메라가 포함된 영상 촬영장치(110)에서 촬영된 촬영영상을 개별 이벤트룰 생성장치(140) 및 이벤트룰 검출장치(150)에 전송한다. 여기서, 영상 전송장치(120)는 네트워크망(130)을 경유하여 영상 및 룰에 대한 데이터를 송수신하는 것으로 나타내고 있으나 반드시 이에 한정되는 것은 아니며, 근거리 통신망 또는 소정의 기업에서 설치한 통신기지국에 따른 통신망과 같이 영상 및 룰에 대한 데이터를 송수신할 수 있다면 그 어떤 망으로도 구현될 수 있다.
개별 이벤트룰 생성장치(140)는 영상 전송장치(120)로부터 촬영영상을 수신하고, 촬영영상을 소정의 변환함수를 이용하여 합성된 메인영상을 생성하고, 메인영상에 기 생성된 이벤트룰을 설정한다. 또한, 이벤트룰이 생성된 메인영상을 소정의 변환함수를 이용하여 복수 개의 개별 룰 영상을 생성하여, 이벤트룰 및 개별 이벤트룰을 이벤트 검출장치(150)에 전송한다.
개별 이벤트룰 생성장치(140)는 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 복수 개의 촬영영상을 하나의 메인영상으로 합성한다. 여기서, 소정의 변환함수는 좌표계를 이용하여 왜곡된 영상을 보정하기 위한 호모그래피(Homograghy) 및 캘리브레이션(Calibration) 등과 같은 방식의 함수일 수 있다. 개별 이벤트룰 생성장치(140)는 합성된 메인영상에 대한 이벤트룰을 획득한다. 여기서, 이벤트룰은 촬영영상이 합성된 메인영상에 관리자의 조작을 통해 설정된 규칙으로서 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 생성된 관심영역을 관심객체가 통과하는 동작을 이벤트로 인지하는 조건정보을 의미한다. 여기서, 이벤트룰에 대한 자세한 설명은 도 2에서 하도록 한다.
또한, 개별 이벤트룰 생성장치(140)는 메인영상에 대한 이벤트룰을 각각의 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 각 카메라에 대응되는 개별 이벤트룰로 변환한다. 예컨대, 개별 이벤트룰 생성장치(140)는 메인영상에 원 형태의 관심영역으로 설정된 이벤트룰이 획득되면, 제1 카메라(112)에 대응되는 변환함수를 이용하여 관심영역의 좌측 반원을 제1 개별 이벤트룰로 변환하고, 제2 카메라(114)에 대응되는 변환함수를 이용하여 관심영역의 우측 반원을 제2 개별 이벤트룰로 변환할 수 있다. 또 다른 예를 들어, 개별 이벤트룰 생성장치(140)는 '┳' 형태의 관심영역이 이벤트룰로 설정된 메인영상에서 제1 카메라(112)에 대응되는 변환함수를 이용하여 관심영역의 좌측 '┓' 부분을 제1 개별 이벤트룰 변환하고, 제2 카메라(114)에 대응되는 변환함수를 이용하여 관심영역의 우측 '┏' 부분을 제2 개별 이벤트룰로 변환할 수 있다.
이벤트 검출장치(150)는 개별 이벤트룰 생성장치(140)로부터 이벤트룰 및 개별 이벤트룰을 수신하여 이벤트에 해당하는 관심객체를 검출하는 장치를 말한다.
본 실시예에 따른 이벤트 검출장치(150)는 영상 전송장치(120)와 연결되어 촬영영상을 수신하고, 개별 이벤트룰 생성장치(140)로부터 이벤트룰 및 개별 이벤트룰을 수신한다. 여기서, 이벤트룰은 개별 이벤트룰 생성장치(140)에서 소정의 변환함수를 이용하여 생성된 메인영상에 대한 이벤트룰을 의미하고, 개별 이벤트룰은 개별 이벤트룰 생성장치(140)에서 이벤트룰을 각각의 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 변환된 각 카메라에 대응되는 룰을 의미한다.
이벤트 검출장치(150)는 기 저장된 배경영상과 촬영영상을 비교하여 차이가 있는 부분을 움직이는 관심객체로 판단하여 관심객체에 대한 궤적정보를 추출한다. 여기서, 궤적정보는 관심객체가 위치한 좌표값(예컨대, (x, y))으로 표현되는 것이 바람직하나 반드시 이에 한정되는 것은 아니며, 소정의 기준으로부터의 거리값이될 수도 있다. 또한, 기 저장된 배경영상은 복수 개의 카메라를 통해 기 촬영된 배경영상으로서, 촬영된 영상 내에서 움직이는 관심객체가 아닌 소정의 시간동안 정지된 배경을 나타내는 영상을 의미한다.
이벤트 검출장치(150)는 개별 이벤트룰 생성장치(140)로부터 수신된 개별 이벤트룰에 근거하여 관심객체의 궤적정보의 부호값이 변경되면 관심객체가 개별 이벤트룰에 따른 관심영역을 통과하는 개별 이벤트로 판단한다. 여기서, 개별 이벤트는 관심객체가 개별 이벤트룰에 따른 관심영역의 경계선을 통과하는 개별 이벤트일 수 있으나 반드시 이에 한정되는 것은 아니며, 관심영역의 경계영역을 침입 또는 이탈에 대한 개별 이벤트일 수도 있다.
이벤트 검출장치(150)는 객체 이벤트로 판단된 관심객체의 궤적정보를 소정의 변환함수를 이용하여 역변환 궤적정보를 생성하고, 각각의 카메라에 대응되는 복수 개의 역변환 궤적정보가 이벤트룰에 해당되면 하나의 이벤트로 판단하여 검출한다. 여기서, 개별 이벤트로 판단된 관심객체의 궤적정보는 카메라의 좌표계를 이용하여 왜곡된 영상을 보정하기 위한 호모그래피 및 캘리브레이션 등과 변환함수를 역변환하여 역변환 궤적정보를 생성할 수 있다.
이벤트 검출장치(150)는 검출된 이벤트에 대한 출력정보를 디스플레이 및 알림을 통하여 이벤트를 모니터링하는 동작을 수행한다. 또한, 이벤트 검출장치(150)는 검출된 이벤트에 대한 출력정보를 이용하여 이벤트에 대한 통계정보를 산출할 수 있다. 여기서, 통계정보는 관심객체가 관심영역을 통과, 침입 및 이탈 등과 같은 이벤트가 발생한 수를 파악하여 산출된 정보를 의미한다.
도 2는 본 실시예에 따른 개별 이벤트룰 생성장치를 개략적으로 나타낸 블록 구성도이다.
본 실시예에 따른 개별 이벤트룰 생성장치(140)는 영상 수신부(210), 영상 합성부(222), 이벤트룰 획득부(224), 개별 이벤트룰 생성부(226), 이벤트룰 생성부(230) 및 룰 전송부(240)를 포함한다.
영상 수신부(210) 영상 전송장치(120)와 연결되어 촬영영상을 수신하는 동작을 수행한다. 여기서, 촬영영상은 영상 촬영장치(110)에 포함된 복수 개의 카메라를 통해 촬영된 영상으로서 각각의 카메라에 대한 촬영영상을 의미한다. 또한, 촬영영상은 캡쳐된 하나의 프레임인 것이 바람직하나 반드시 이에 한정되는 것은 아니며 복수 개의 프레임이 결합된 영상일 수도 있다.
영상 합성부(222)는 소정의 변환함수를 이용하여 복수 개의 촬영영상을 합성하여 하나의 메인영상을 생성하는 동작을 수행한다.
본 실시예에 따른 영상 합성부(222)는 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 복수 개의 촬영영상을 하나의 메인영상으로 합성한다. 여기서, 소정의 변환함수는 좌표계를 이용하여 왜곡된 영상을 보정하기 위한 호모그래피 및 캘리브레이션 등과 같은 방식의 함수일 수 있다. 예컨대, 서로 다른 방향에서 동일한 위치를 촬영하는 제1 카메라(112) 및 제2 카메라(114)의 경우, 영상 합성부(222)는 제1 카메라(112)로부터 영상의 좌측에 행인이 존재하는 촬영영상을 수신하고, 제2 카메라(114)로부터 영상의 우측에 행인이 존재하는 촬영영상을 수신하여 소정의 변환함수를 이용하여 행인이 중앙에 위치한 메인영상을 생성한다.
이벤트룰 획득부(224)는 이벤트룰 생성부(230)로부터 메인영상에 대한 이벤트룰을 획득한다. 여기서, 이벤트룰은 촬영영상이 합성된 메인영상에 관리자의 조작을 통해 설정된 규칙으로서 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 생성된 관심영역을 관심객체가 통과하는 동작을 이벤트로 인지하는 조건정보을 의미한다.
이벤트룰 획득부(224)는 영상 합성부(222)에서 처음으로 합성된 메인영상에 대한 이벤트룰을 획득하는 경우, 이벤트룰 생성부(230)에서 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 생성된 이벤트룰을 획득하는 것이 바람직하다. 또한, 이벤트룰 획득부(224)는 영상 합성부(222)에서 두 번째 이후 합성된 메인영상에 대한 이벤트룰을 획득하는 경우, 이벤트룰 생성부(230)에 기 저장된 처음으로 합성된 메인영상에 대한 이벤트룰을 획득할 수 있다. 예컨대, 행인이 가운데 존재하는 메인영상이 처음 생성되면, 이벤트룰 획득부(224)는 관리자가 인터페이스 화면에 행인 주변을 원 형태로 관심영역 및 소정의 경계 기준값을 설정한 이벤트룰을 획득하고, 이러한 동작 이후로 생성되는 메인영상에 대해서는 기 설정된 이벤트룰을 획득한다. 한편, 이벤트룰 획득부(224)는 이벤트룰에 대한 관심영역 또는 경계 기준값이 변경 또는 삭제되는 경우, 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 생성된 이벤트룰을 획득할 수도 있다.
한편, 이벤트룰 획득부(224)는 이벤트룰 생성부(230)에서 이벤트룰을 획득하여 동작하는 별개의 모듈인 것으로 기재하고 있으나 반드시 이에 한정되는 것은 아니며 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 이벤트룰을 생성하고 저장하는 것과 같이 하나의 모듈로 구현될 수도 있다.
개별 이벤트룰 생성부(226)는 메인영상에 대한 이벤트룰을 소정의 변환함수를 이용하여 개별 이벤트룰로 변환하는 동작을 수행한다. 더 자세히 설명하자면, 이벤트룰 획득부(224)에서 획득한 메인영상에 대한 이벤트룰을 각각의 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 각 카메라에 대응되는 개별 이벤트룰로 변환한다. 예컨대, 이벤트룰 획득부(224)에서 메인영상에 원 형태의 관심영역으로 설정된 이벤트룰이 획득되면, 개별 이벤트룰 생성부(226)는 제1 카메라(112)에 대응되는 변환함수를 이용하여 관심영역의 좌측 반원을 제1 개별 이벤트룰로 변환하고, 제2 카메라(114)에 대응되는 변환함수를 이용하여 관심영역의 우측 반원을 제2 개별 이벤트룰로 변환할 수 있다.
이벤트룰 생성부(230)는 움직이는 객체를 검출하기 위한 이벤트룰을 생성하고, 생성된 이벤트룰을 이벤트룰 획득부(224)에 전송하는 동작을 수행한다. 여기서, 이벤트룰은 관리자의 조작을 통해 설정된 규칙으로서 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 생성된 관심영역을 관심객체가 통과하는 동작을 이벤트로 인지하는 조건정보를 의미한다.
본 실시예에 따른 이벤트룰 생성부(230)는 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 생성된 관심영역과 관심영역을 기준으로 설정된 거리값, 부호값 등의 경계 기준값를 이용하여 이벤트룰을 생성한다. 여기서, 이벤트룰 생성부(230)는 관리자의 설정명령을 통하여 이벤트룰을 영상 합성부(222)에서 메인영상이 처음 생성될 때 한 번만 생성하고, 처음 이후에 합성되는 메인영상에 대해서는 기 생성된 이벤트룰을 이벤트룰 획득부(224)에 제공한다. 한편, 이벤트룰 생성부(224)는 이벤트룰에 대한 관심영역 또는 경계 기준값이 변경 또는 삭제에 대한 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령이 입력되는 경우, 새로운 이벤트룰을 생성할 수도 있다.
이벤트룰 생성부(230)는 이벤트를 검출하기 위한 관심영역 및 경계 기준값을 생성한다. 여기서, 관심영역은 이벤트를 검출하기 위한 영역으로서 선분, 곡선 및 폐곡선으로 이루어진 도형을 의미하고, 경계 기준값은 관심영역을 기준으로 설정된 거리값 및 부호값을 의미한다. 여기서, 거리값은 관심영역의 경계를 0으로 설정하고, 관심영역의 경계에서 소정의 거리만큼 멀어짐에 따라 거리값을 1씩 증가하도록 설정될 수 있다. 또한, 부호값은 관심객체가 관심영역를 통과하였는지를 확인하기 위한 값으로서, 부호값은 '+' 및 '-' 인 것이 바람직하나 반드시 이에 한정되는 것은 아니다. 예컨대, 도로의 교통량에 대한 이벤트를 감시하는 데 있어서, 관심영역의 왼쪽에서 오른쪽으로 통과하는 차량에 대한 이벤트를 감시하는 경우, 관심영역의 왼쪽 부분의 부호값을 '+'로 설정하고, 오른쪽 부분의 부호값을 '-'로 설정하여 '+'에서 '-', 또는 '-'에서 '+'로 부호값이 변경되는 차량에 대한 이벤트를 검출할 수 있다.
이벤트룰 생성부(230)는 관리자의 조작을 통해 감시하고자 하는 이벤트의 특성에 따라 이벤트룰의 변경이 가능하다. 예를 들어, 이벤트룰 생성부(230)는 관리자의 입력을 통해 관심영역을 설정하고, 설정된 관심영역을 통과하는 모든 이벤트를 검출하기 위한 이벤트룰을 생성하는 경우, 기 생성된 관심영역 및 경계 기준값에 근거하여 관심객체의 거리값이 소정의 임계값 이상이고 부호값이 '+'에서 '-' 또는 '-'에서 '+' 로 변경되면 이벤트인 것으로 판단하는 이벤트룰을 설정할 수 있다. 한편, 이벤트룰은 객체의 거리값이 소정의 임계값 이하이면 부호값의 변화와 관계없이 이벤트가 아닌 것으로 설정될 수 있다. 이러한 이벤트룰은 객체가 관심영역의 소정의 거리 내에 근접하여 관심영역을 넘나드는 경우를 이벤트로 판단되는 것을 방지하기 위해 설정된다. 여기서, 이벤트룰은 기 설정된 거리값 및 부호값을 모두 이용하여 이벤트에 해당하는 관심객체를 검출하는 것으로 기재하고 있으나 반드시 이에 한정되는 것은 아니며, 부호값의 변화만을 가지고 이벤트를 검출할 수도 있다.
룰 전송부(240)는 이벤트룰 획득부(224)에서 획득한 메인영상에 대한 이벤트룰과 개별 이벤트룰 생성부(226)에서 생성된 개별 이벤트룰을 이벤트 검출장치(150)에 전송하여, 개별 이벤트룰에 해당하는 관심객체를 검출할 수 있도록 하고, 이벤트룰에 근거하여 동일한 이벤트에 대한 관심객체인지를 판단한다.
도 3은 본 실시예에 따른 이벤트 검출장치를 개략적으로 나타낸 블록 구성도이다.
본 실시예에 따른 이벤트 검출장치(150)는 촬영영상 수신부(310), 룰 수신부(320), 관심객체 추출부(330), 개별 이벤트 판단부(340), 이벤트 검출부(350) 및 모니터링부(360)를 포함한다.
촬영영상 수신부(310)는 영상 전송장치(120)와 연결되어 촬영영상을 수신하는 동작을 수행한다. 여기서, 촬영영상은 영상 촬영장치(110)에 포함된 복수 개의 카메라를 통해 촬영된 영상으로서 각각의 카메라에 대한 촬영영상을 의미한다. 또한, 촬영영상은 캡쳐된 하나의 프레임인 것이 바람직하나 반드시 이에 한정되는 것은 아니며 복수 개의 프레임이 결합된 영상일 수도 있다.
룰 수신부(320)는 개별 이벤트룰 생성장치(140)로부터 이벤트룰 및 개별 이벤트룰을 수신한다. 여기서, 이벤트룰은 개별 이벤트룰 생성장치(140)에서 소정의 변환함수를 이용하여 생성된 메인영상에 대한 이벤트룰을 의미하고, 개별 이벤트룰은 개별 이벤트룰 생성장치(140)에서 이벤트룰을 각각의 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 변환된 각 카메라에 대응되는 룰을 의미한다.
관심객체 추출부(330)는 기 저장된 배경영상과 촬영영상을 비교하여 차이가 있는 부분을 움직이는 관심객체로 판단하여 관심객체에 대한 궤적정보를 추출한다. 여기서, 궤적정보는 관심객체가 위치한 좌표값(예컨대, (x, y))으로 표현되는 것이 바람직하나 반드시 이에 한정되는 것은 아니며, 소정의 기준으로부터의 거리값이될 수도 있다. 여기서, 배경영상은 복수 개의 카메라를 통해 기 촬영된 배경영상으로서, 촬영된 영상 내에서 움직이는 관심객체가 아닌 소정의 시간동안 정지된 배경을 나타내는 영상을 의미한다. 관심객체 추출부(330)에서 추출된 관심객체의 궤적정보는 개별 이벤트룰에 근거하여 개별 이벤트 판단부(340)에서 관심객체가 개별 이벤트에 해당하는지 여부를 판단하는 데 이용된다.
개별 이벤트 판단부(340)는 개별 이벤트룰에 근거하여 관심객체 추출부(330)에서 추출된 관심객체가 개별 이벤트에 해당하는지 여부를 판단한다. 더 자세히 설명하자면, 개별 이벤트 판단부(340)는 개별 이벤트룰에 근거하여 관심객체의 궤적정보의 부호값 변경여부를 확인하여 관심객체가 개별 이벤트룰에 따른 관심영역을 통과하는 개별 이벤트를 발생하였는지 판단한다. 여기서, 개별 이벤트는 관심객체가 개별 이벤트룰에 따른 관심영역의 경계선을 통과하는 개별 이벤트일 수 있으나 반드시 이에 한정되는 것은 아니며, 관심영역의 경계영역을 침입 또는 이탈에 대한 개별 이벤트일 수도 있다. 예컨대, 개별 이벤트룰에 대한 관심영역이 영상의 중앙에 세로 경계선으로 설정되고, 부호값이 세로 경계선을 기준으로 경계선의 좌측은 '+'값, 우측은 '-'값으로 설정되어 개별 이벤트룰이 경계선의 좌측에서 우측으로 통과하는 관심객체를 개별 이벤트로 인지하는 룰일 경우, 촬영영상으로부터 움직이는 관심객체의 궤적정보를 추출하여, 궤적정보에 대한 부호값이 '+'에서 '-'로 변경된 관심객체를 개별 이벤트로 판단할 수 있다.
이벤트 검출부(350)는 개별 이벤트 판단부(340)에서 개별 이벤트로 판단된 관심객체의 궤적정보를 소정의 변환함수를 이용하여 역변환 궤적정보를 생성하고, 각각의 카메라에 대응되는 복수 개의 역변환 궤적정보가 이벤트룰에 해당되면 하나의 이벤트로 판단하여 검출한다. 여기서, 개별 이벤트로 판단된 관심객체의 궤적정보는 카메라의 좌표계를 이용하여 왜곡된 영상을 보정하기 위한 호모그래피 및 캘리브레이션 등과 변환함수를 역변환하여 역변환 궤적정보를 생성할 수 있다.
예를 들어, 제1 카메라(112)에서 '┓'의 관심영역을 가지는 제1 개별 이벤트룰에 근거하여 판단된 제1 관심객체와 제2 카메라(114)에서 '┏'의 관심영역을 가지는 제2 개별 이벤트룰에 근거하여 판단된 제2 관심객체가 개별 이벤트 판단부(340)에서 판단된 경우, 이벤트 검출부(350)는 제1 관심객체에 대한 궤적정보를 소정의 변환함수를 이용하여 제1 역변환 궤적정보를 생성하고, 제2 관심객체에 대한 궤적정보를 소정의 변환함수를 이용하여 제2 역변환 궤적정보를 생성하고, '┳'의 관심영역을 가지는 이벤트룰에 근거하여 제1 역변환 궤적정보 및 제2 역변환 궤적정보가 해당됨으로 하나의 이벤트로 판단하여 검출한다.
모니터링부(360)는 이벤트 검출부(350)에서 검출된 이벤트에 대한 출력정보를 디스플레이 및 알림을 통하여 이벤트를 모니터링하는 동작을 수행한다. 한편, 도 3에서 모니터링부(360)는 이벤트 검출장치(150) 내에 포함된 것으로 나타내고 있으나 반드시 이에 한정되는 것은 아니며, 이동객체 검출장치(150)와 무선랜 신호 또는 블루투스(Bluetooth), 지그비(Zigbee) 등과 같은 근거리 통신을 이용하여 연결된 별도의 장치로 구현될 수도 있다.
또한, 모니터링부(360)는 검출된 이벤트에 대한 출력정보를 이용하여 이벤트에 대한 통계정보를 산출할 수 있다. 여기서, 통계정보는 관심객체가 관심영역을 통과, 침입 및 이탈 등과 같은 이벤트가 발생한 수를 파악하여 산출된 정보를 의미한다. 예컨대, 모니터링부(360)는 매장을 출입하는 손님의 수, 도로를 통과하는 자동차의 교통량 및 소정의 구역을 통과하는 사람의 수 등과 같은 이벤트에 대한 통계정보를 산출할 수 있다.
도 4는 본 실시예에 따른 이벤트 검출장치가 이벤트를 검출하는 방법을 설명하기 위한 순서도이다.
이벤트 검출장치(150)는 영상 촬영장치(110)에서 촬영된 촬영영상을 영상 전송장치(120)로부터 수신한다(S410). 여기서, 영상 촬영장치(110)는 복수 개의 카메라로 구현되는 것이 바람직하며, 이벤트 검출장치(150)는 각각의 카메라로부터 촬영된 복수 개의 촬영영상을 획득한다.
이벤트 검출장치(150)는 개별 이벤트룰 생성장치(140)로부터 이벤트룰 및 개별 이벤트룰을 수신한다(S420). 여기서, 이벤트룰은 개별 이벤트룰 생성장치(140)에서 소정의 변환함수를 이용하여 생성된 메인영상에 대한 이벤트룰을 의미하고, 개별 이벤트룰은 개별 이벤트룰 생성장치(140)에서 이벤트룰을 각각의 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 변환된 각 카메라에 대응되는 룰을 의미한다.
이벤트 검출장치(150)는 촬영영상으로부터 관심객체를 추출한다(S430). 이벤트 검출장치(150)는 기 저장된 배경영상과 촬영영상을 비교하여 차이가 있는 부분을 움직이는 관심객체로 판단하여 관심객체에 대한 궤적정보를 추출한다. 여기서, 궤적정보는 관심객체가 위치한 좌표값(예컨대, (x, y))으로 표현되는 것이 바람직하나 반드시 이에 한정되는 것은 아니며, 소정의 기준으로부터의 거리값이될 수도 있다. 여기서, 배경영상은 복수 개의 카메라를 통해 기 촬영된 배경영상으로서, 촬영된 영상 내에서 움직이는 관심객체가 아닌 소정의 시간동안 정지된 배경을 나타내는 영상을 의미한다.
이벤트 검출장치(150)는 단계 S420에서 수신된 개별 이벤트룰에 근거하여 관심객체가 개별 이벤트에 해당하는지 여부를 판단한다(S440). 개별 이벤트룰에 근거하여 관심객체의 궤적정보의 부호값 변경여부를 확인하여 관심객체가 개별 이벤트룰에 따른 관심영역을 통과하는 개별 이벤트를 발생하였는지 판단한다. 예컨대, 개별 이벤트룰에 대한 관심영역이 영상의 중앙에 세로 경계선으로 설정되고, 부호값이 세로 경계선을 기준으로 경계선의 좌측은 '+'값, 우측은 '-'값으로 설정되어 개별 이벤트룰이 경계선의 좌측에서 우측으로 통과하는 관심객체를 개별 이벤트로 인지하는 룰일 경우, 촬영영상으로부터 움직이는 관심객체의 궤적정보를 추출하여, 궤적정보에 대한 부호값이 '+'에서 '-'로 변경된 관심객체를 개별 이벤트로 판단할 수 있다.
이벤트 검출장치(150)는 관심객체가 개별 이벤트에 해당하는 경우, 관심객체의 궤적정보를 소정의 변환함수를 이용하여 역변환 궤적정보를 생성한다(S450). 여기서, 개별 이벤트로 해당하는 관심객체의 궤적정보는 카메라의 좌표계를 이용하여 왜곡된 영상을 보정하기 위한 호모그래피 및 캘리브레이션 등과 변환함수를 역변환하여 역변환 궤적정보를 생성할 수 있다.
이벤트 검출장치(150)는 복수 개의 역변환 궤적정보가 단계 S420에서 수신된 이벤트룰에 만족하면 하나의 이벤트로 판단하여 검출한다(S460). 소정의 관심영역 및 부호값이 기 설정된 이벤트룰에 근거하여 역변환 궤적정보가 관심영역에 포함되고, 부호값이 변경된 것으로 확인되면 관심객체를 이벤트로 판단할 수 있다.
이벤트 검출장치(150)는 검출된 이벤트에 대한 출력정보를 디스플레이 및 알림을 통하여 모니터링을 수행한다(S470).
도 4에서는 단계 S410 내지 단계 S470을 순차적으로 실행하는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 일 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 일 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 도 4에 기재된 순서를 변경하여 실행하거나 단계 S410 내지 단계 S470 중 하나 이상의 단계를 병렬적으로 실행하는 것으로 다양하게 수정 및 변형하여 적용 가능할 것이므로, 도 4은 시계열적인 순서로 한정되는 것은 아니다.
도 5는 본 실시예에 따른 개별 이벤트룰 생성장치가 개별 이벤트룰을 생성하는 방법을 설명하기 위한 순서도이다.
개별 이벤트룰 생성장치(140)는 영상 촬영장치(110)에서 촬영된 촬영영상을 영상 전송장치(120)로부터 수신한다(S510). 여기서, 영상 촬영장치(110)는 복수 개의 카메라로 구현되는 것이 바람직하며, 개별 이벤트룰 생성장치(140)는 각각의 카메라로부터 촬영된 복수 개의 촬영영상을 획득한다.
개별 이벤트룰 생성장치(140)는 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 복수 개의 촬영영상을 하나의 메인영상으로 합성한다(S520). 여기서, 소정의 변환함수는 좌표계를 이용하여 왜곡된 영상을 보정하기 위한 호모그래피 및 캘리브레이션 등과 같은 방식의 함수인 것이 바람직하다.
개별 이벤트룰 생성장치(140)는 메인영상에 대한 이벤트룰을 획득한다(S530). 기서, 이벤트룰은 촬영영상이 합성된 메인영상에 관리자의 조작을 통해 설정된 규칙으로서 관리자의 인터페이스 조작 또는 좌표입력과 같은 설정명령을 통해 생성된 관심영역을 관심객체가 통과하는 동작을 이벤트로 인지하는 조건정보을 의미한다.
개별 이벤트룰 생성장치(140)는 메인영상에 대한 이벤트룰을 카메라의 좌표계에 대응되는 소정의 변환함수를 이용하여 각각의 카메라에 대응되는 개별 이벤트룰로 변환한다(S540). 예컨대, 개별 이벤트룰 생성장치(140)는 메인영상에 원 형태의 관심영역으로 설정된 이벤트룰이 획득되면, 제1 카메라(112)에 대응되는 변환함수를 이용하여 관심영역의 좌측 반원을 제1 개별 이벤트룰로 변환하고, 제2 카메라(114)에 대응되는 변환함수를 이용하여 관심영역의 우측 반원을 제2 개별 이벤트룰로 변환할 수 있다.
개별 이벤트룰 생성장치(140)는 메인영상에 대한 이벤트룰 및 생성된 개별 이벤트룰을 이벤트에 해당하는 관심객체를 검출하기 위해 이벤트 검출장치(150)로 전송한다(S550).
도 5에서는 단계 S510 내지 단계 S550을 순차적으로 실행하는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 일 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 일 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 도 5에 기재된 순서를 변경하여 실행하거나 단계 S510 내지 단계 S550 중 하나 이상의 단계를 병렬적으로 실행하는 것으로 다양하게 수정 및 변형하여 적용 가능할 것이므로, 도 5은 시계열적인 순서로 한정되는 것은 아니다.
이상의 설명은 본 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 실시예들은 본 실시예의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 실시예의 기술 사상의 범위가 한정되는 것은 아니다. 본 실시예의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 실시예의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
이상에서 설명한 바와 같이 본 실시예은 분야에 적용되어, 복수 개의 촬영영상이 합성된 합성영상에 대한 하나의 이벤트룰을 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 개별 이벤트룰로 변환하고, 개별 이벤트룰에 근거하여 판단된 복수 개의 개별 이벤트를 소정의 변환함수를 이용하여 하나의 이벤트로 검출함으로써, 복수 개의 이벤트룰을 설정할 필요가 없고, 중복되는 이벤트를 검출하지 않으며 이벤트의 저장, 검색 및 관리가 용이한 효과를 발생하는 유용한 발명이다.
110: 영상 촬영장치 112: 제1 카메라
114: 제2 카메라 120: 영상 전송장치
130: 네트워크망 140: 개별 이벤트룰 생성장치
150: 이벤트 검출장치 210: 영상 수신부
222: 영상 합성부 224: 이벤트룰 획득부
226: 개별 이벤트룰 생성부 230: 이벤트룰 생성부
240: 룰 전송부 310: 촬영영상 수신부
320: 룰 수신부 330: 관심객체 추출부
340: 개별 이벤트 판단부 350: 이벤트 검출부
360: 모니터링부

Claims (13)

  1. 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신부;
    상기 복수 개의 촬영영상을 상기 카메라의 좌표계에 대응되는 변환함수를 이용하여 하나의 메인영상으로 합성하는 영상 합성부;
    상기 메인영상에 대한 이벤트룰을 획득하는 이벤트룰 획득부;
    상기 이벤트룰을 상기 변환함수를 이용하여 각각의 상기 카메라에 대응되는 개별 이벤트룰로 변환하는 개별 이벤트룰 생성부; 및
    변환된 상기 개별 이벤트룰을 이벤트를 검출하기 위해 전송하는 룰 전송부
    를 포함하는 것을 특징으로 하는 개별 이벤트룰 생성장치.
  2. 제 1 항에 있어서,
    상기 이벤트룰 획득부는,
    상기 메인영상에 대한 소정의 도형을 관심영역으로 생성하고, 상기 관심영역을 기준으로 거리값 및 부호값을 설정하여 생성된 상기 이벤트룰을 획득하는 것을 특징으로 하는 개별 이벤트룰 생성장치.
  3. 제 2 항에 있어서,
    상기 이벤트룰은,
    상기 관심객체의 위치를 확인하여, 상기 관심객체의 거리값이 소정의 임계값 이상이고, 부호값이 변경되면 상기 관심객체가 상기 관심영역을 통과한 상기 이벤트인 것으로 판단하기 위한 조건정보인 것을 특징으로 하는 개별 이벤트룰 생성장치.
  4. 제 1 항에 있어서,
    상기 영상 합성부는,
    호모그래피(Homograghy), 캘리브레이션(Calibration) 중 적어도 하나 이상의 상기 변환함수를 이용하여 상기 메인영상을 생성하는 것을 특징으로 하는 개별 이벤트룰 생성장치.
  5. 제 1 항에 있어서,
    상기 개별 이벤트룰 생성부는,
    상기 이벤트룰을 변환하여 각 카메라마다 소정의 차이가 있는 상기 개별 이벤트룰을 생성하는 것을 특징으로 하는 개별 이벤트룰 생성장치.
  6. 제 1 항에 있어서,
    상기 룰 전송부는,
    상기 개별 이벤트룰을 이벤트 검출장치에 전송하여, 개별 이벤트에 해당하는 관심객체를 판단하고, 판단된 관심객체에 대한 역변환 궤적정보를 생성하여, 상기 역변환 궤적정보가 상기 이벤트룰에 해당하면 상기 관심객체를 이벤트로 검출하도록 하는 것을 특징으로 하는 개별 이벤트룰 생성장치.
  7. 제 1 항에 있어서,
    상기 촬영영상은,
    상기 복수 개의 카메라가 서로 다른 소정의 방향에서 동일한 위치의 전체 또는 일부를 촬영한 영상인 것을 특징으로 하는 개별 이벤트룰 생성장치.
  8. 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신부;
    상기 복수 개의 촬영영상의 합성영상에 대한 소정 이벤트의 발생 여부를 판단하는 이벤트룰 및 상기 이벤트룰이 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 변환된 개별 이벤트룰을 수신하는 룰 수신부;
    상기 촬영영상으로부터 관심객체를 추출하는 관심객체 추출부;
    상기 개별 이벤트룰에 근거하여 상기 관심객체의 궤적정보가 개별 이벤트에 해당하는지 여부를 판단하는 개별 이벤트 판단부;
    상기 관심객체의 궤적정보를 상기 변환함수를 이용하여 역변환 궤적정보를 생성하고, 복수 개의 상기 역변환 궤적정보가 상기 이벤트룰을 만족하면 하나의 이벤트로 판단하여 검출하는 이벤트 검출부; 및
    상기 검출된 이벤트에 따라 출력정보를 생성하는 이벤트 출력부
    를 포함하는 것을 특징으로 하는 이벤트 검출장치.
  9. 제 8 항에 있어서,
    상기 관심객체 추출부는,
    상기 복수 개의 카메라를 통해 기 촬영된 배경영상과 상기 촬영영상을 비교하여 상기 관심객체를 추출하는 것을 특징으로 하는 이벤트 검출장치.
  10. 제 8 항에 있어서,
    상기 개별 이벤트 판단부는,
    상기 이벤트룰을 변환하여 각각의 상기 복수 개의 카메라마다 소정의 차이가 있는 상기 개별 이벤트룰을 이용하여 상기 관심객체를 검출하되, 상기 궤적정보가 의 부호값이 변경되면 개별 이벤트로 판단하는 것을 특징으로 하는 이벤트 검출장치.
  11. 제 8 항에 있어서,
    상기 이벤트 검출부는,
    소정의 관심영역 및 부호값이 기 설정된 상기 이벤트룰에 근거하여, 상기 역변환 궤적정보의 부호값이 변경되면 상기 관심객체가 상기 소정의 관심영역을 통과한 이벤트로 판단하여 검출하는 것을 특징으로 하는 이벤트 검출장치.
  12. 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신과정;
    상기 복수 개의 촬영영상을 상기 카메라의 좌표계에 대응되는 변환함수를 이용하여 하나의 메인영상으로 합성하는 영상 합성과정;
    상기 메인영상에 대한 이벤트룰을 획득하는 이벤트룰 획득과정;
    상기 이벤트룰을 상기 변환함수를 이용하여 각각의 상기 카메라에 대응되는 개별 이벤트룰로 변환하는 개별 이벤트룰 생성과정; 및
    변환된 상기 개별 이벤트룰을 이벤트를 검출하기 위해 전송하는 룰 전송과정
    을 포함하는 것을 특징으로 하는 개별 이벤트룰 생성방법.
  13. 복수 개의 카메라를 통해 촬영된 촬영영상을 수신하는 영상 수신과정;
    상기 복수 개의 촬영영상의 합성영상에 대한 소정 이벤트의 발생 여부를 판단하는 이벤트룰 및 상기 이벤트룰이 상기 복수 개의 카메라의 좌표계에 대응되는 변환함수를 이용하여 변환된 개별 이벤트룰을 수신하는 룰 수신과정;
    상기 촬영영상으로부터 관심객체를 추출하는 관심객체 추출과정;
    상기 개별 이벤트룰에 근거하여 상기 관심객체의 궤적정보가 개별 이벤트에 해당하는지 여부를 판단하는 개별 이벤트 판단과정;
    상기 관심객체의 궤적정보를 상기 변환함수를 이용하여 역변환 궤적정보를 생성하고, 복수 개의 상기 역변환 궤적정보가 상기 이벤트룰을 만족하면 하나의 이벤트로 판단하여 검출하는 이벤트 검출과정; 및
    상기 검출된 이벤트에 따라 출력정보를 생성하는 이벤트 출력과정
    을 포함하는 것을 특징으로 하는 이벤트 검출방법.
KR1020120106797A 2012-09-25 2012-09-25 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법 KR101937272B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020120106797A KR101937272B1 (ko) 2012-09-25 2012-09-25 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법
EP13840942.0A EP2903261B1 (en) 2012-09-25 2013-09-25 Apparatus and method for detecting event from plurality of photographed images
PCT/KR2013/008592 WO2014051337A1 (ko) 2012-09-25 2013-09-25 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법
CN201380049910.2A CN104704816B (zh) 2012-09-25 2013-09-25 从多个拍摄图像检测事件的设备和方法
US14/667,552 US9639937B2 (en) 2012-09-25 2015-03-24 Apparatus and method for detecting event from plurality of photographed images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120106797A KR101937272B1 (ko) 2012-09-25 2012-09-25 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20140039927A true KR20140039927A (ko) 2014-04-02
KR101937272B1 KR101937272B1 (ko) 2019-04-09

Family

ID=50388638

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120106797A KR101937272B1 (ko) 2012-09-25 2012-09-25 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법

Country Status (5)

Country Link
US (1) US9639937B2 (ko)
EP (1) EP2903261B1 (ko)
KR (1) KR101937272B1 (ko)
CN (1) CN104704816B (ko)
WO (1) WO2014051337A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101632198B1 (ko) * 2015-02-10 2016-07-01 주식회사 일리시스 객체 이동 시간 기반 관심 영역 이벤트 발생 감지 방법
WO2018101605A1 (ko) * 2016-11-30 2018-06-07 한화테크윈 주식회사 이벤트 정보를 표시하는 영상 감시 장치

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014051262A1 (ko) * 2012-09-25 2014-04-03 에스케이텔레콤 주식회사 이벤트 룰 설정방법 및 이를 이용한 이벤트 감시장치
EP3159853B1 (en) * 2015-10-23 2019-03-27 Harman International Industries, Incorporated Systems and methods for advanced driver assistance analytics
TWI633497B (zh) 2016-10-14 2018-08-21 群暉科技股份有限公司 用來藉助於多個攝影機進行協同式計數之方法與裝置
US10592749B2 (en) * 2016-11-14 2020-03-17 General Electric Company Systems and methods for analyzing turns at an airport
JP6844503B2 (ja) * 2017-11-06 2021-03-17 京セラドキュメントソリューションズ株式会社 監視システム
CN109974667B (zh) * 2017-12-27 2021-07-23 宁波方太厨具有限公司 一种室内人体定位方法
JP6915575B2 (ja) * 2018-03-29 2021-08-04 京セラドキュメントソリューションズ株式会社 制御装置及び監視システム
CN109872483B (zh) * 2019-02-22 2020-09-29 华中光电技术研究所（中国船舶重工集团有限公司第七一七研究所） 一种入侵警戒光电监测系统及方法
KR102247359B1 (ko) * 2019-07-31 2021-05-04 (주)유디피 원격 모니터링을 위한 영상 분석 시스템 및 방법
CN113099173A (zh) * 2021-03-25 2021-07-09 湖南桥康智能科技有限公司 一种具有物体位移测量计算功能的智能网络摄像机
CN112797900B (zh) * 2021-04-07 2021-07-06 中科慧远视觉技术(北京)有限公司 多相机板材尺寸测量方法
CN114170752A (zh) * 2021-12-08 2022-03-11 潍坊欣龙生物材料有限公司 周界安防的监视方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009065654A (ja) * 1997-07-15 2009-03-26 Silverbrook Research Pty Ltd 画像変換装置のためのユーザインターフェイス
KR20090116215A (ko) * 2008-05-06 2009-11-11 (주) 티앤엑스시스템즈 지능형 영상 감시 시스템
KR20110136907A (ko) * 2010-06-16 2011-12-22 주식회사 영국전자 광역 감시 시스템 및 이에 있어서의 감시 데이터 처리 방법
KR20120025718A (ko) * 2010-09-08 2012-03-16 중앙대학교 산학협력단 이상행위 검출장치 및 방법

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8564661B2 (en) * 2000-10-24 2013-10-22 Objectvideo, Inc. Video analytic rule detection system and method
KR100940237B1 (ko) * 2003-03-06 2010-02-04 삼성테크윈 주식회사 이벤트 발생과 연동하여 모니터링 및 레코딩 제어가가능한 감시시스템 및 그 제어방법
WO2006022630A1 (en) * 2004-07-26 2006-03-02 Silicon Optix, Inc. Panoramic vision system and method
KR100872878B1 (ko) * 2006-09-29 2008-12-10 (주)로그시스 감시 카메라의 이벤트 검출 촬영시스템
KR101187908B1 (ko) * 2007-09-11 2012-10-05 삼성테크윈 주식회사 복수의 이벤트 영상을 표시하는 통합 감시 시스템 및 이를이용한 복수의 이벤트 영상 표시 방법
CN101119482B (zh) * 2007-09-28 2011-07-20 北京智安邦科技有限公司 一种全景监控方法及设备
KR20090035379A (ko) * 2007-10-05 2009-04-09 주식회사 케이티 주차장내 영상감지를 이용한 지능형 보안방범 시스템 및 그제어방법
KR100924580B1 (ko) * 2007-12-26 2009-10-30 (주)네스테크놀로지 영상신호 감시용 신호변환기 통합 영상 감시 시스템
US20090195382A1 (en) * 2008-01-31 2009-08-06 Sensormatic Electronics Corporation Video sensor and alarm system and method with object and event classification
US8570376B1 (en) * 2008-11-19 2013-10-29 Videomining Corporation Method and system for efficient sampling of videos using spatiotemporal constraints for statistical behavior analysis
US8416296B2 (en) * 2009-04-14 2013-04-09 Behavioral Recognition Systems, Inc. Mapper component for multiple art networks in a video analysis system
US8503539B2 (en) * 2010-02-26 2013-08-06 Bao Tran High definition personal computer (PC) cam
CN102045544A (zh) * 2010-11-10 2011-05-04 无锡中星微电子有限公司 一种视频监控系统及其视频数据的传输方法
CN102510482A (zh) * 2011-11-29 2012-06-20 蔡棽 一种提高能见度和可视距离的图像拼接重建及全局监控方法
US9247211B2 (en) * 2012-01-17 2016-01-26 Avigilon Fortress Corporation System and method for video content analysis using depth sensing
JP6148480B2 (ja) * 2012-04-06 2017-06-14 キヤノン株式会社 画像処理装置、画像処理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009065654A (ja) * 1997-07-15 2009-03-26 Silverbrook Research Pty Ltd 画像変換装置のためのユーザインターフェイス
KR20090116215A (ko) * 2008-05-06 2009-11-11 (주) 티앤엑스시스템즈 지능형 영상 감시 시스템
KR20110136907A (ko) * 2010-06-16 2011-12-22 주식회사 영국전자 광역 감시 시스템 및 이에 있어서의 감시 데이터 처리 방법
KR20120025718A (ko) * 2010-09-08 2012-03-16 중앙대학교 산학협력단 이상행위 검출장치 및 방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Multi-camera networks : principles and applications *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101632198B1 (ko) * 2015-02-10 2016-07-01 주식회사 일리시스 객체 이동 시간 기반 관심 영역 이벤트 발생 감지 방법
WO2018101605A1 (ko) * 2016-11-30 2018-06-07 한화테크윈 주식회사 이벤트 정보를 표시하는 영상 감시 장치
US10979675B2 (en) 2016-11-30 2021-04-13 Hanwha Techwin Co., Ltd. Video monitoring apparatus for displaying event information

Also Published As

Publication number Publication date
EP2903261A1 (en) 2015-08-05
WO2014051337A1 (ko) 2014-04-03
US20150199815A1 (en) 2015-07-16
CN104704816A (zh) 2015-06-10
CN104704816B (zh) 2018-06-01
EP2903261A4 (en) 2016-10-26
US9639937B2 (en) 2017-05-02
KR101937272B1 (ko) 2019-04-09
EP2903261B1 (en) 2020-11-25

Similar Documents

Publication Publication Date Title
KR101937272B1 (ko) 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법
US20210400200A1 (en) Video surveillance system and video surveillance method
KR100862398B1 (ko) 다중 카메라를 이용한 방범용 씨씨티브이 기능을 갖는 불법주정차 무인 자동 단속방법 및 그 시스템
US11082668B2 (en) System and method for electronic surveillance
JP6403687B2 (ja) 監視システム
US20200175838A1 (en) Eyeglasses-type wearable terminal, control method thereof, and control program
KR101397453B1 (ko) 영상 감시 시스템 및 그 방법
KR101492473B1 (ko) 사용자 기반 상황 인지형 씨씨티비 통합관제시스템
KR20150112713A (ko) 영상분석 서버를 통한 미래 발생범죄 예측 시스템
KR101084914B1 (ko) 차량번호 및 사람 이미지의 인덱싱 관리시스템
KR101985711B1 (ko) 증강현실 ｃｃｔｖ 시스템 및 그 제어방법
KR102682052B1 (ko) 밀집도 알림 장치 및 방법
US20220189038A1 (en) Object tracking apparatus, control method, and program
JP2019008474A (ja) 監視支援システム及び監視支援方法
KR101921868B1 (ko) 고해상도 카메라를 이용한 지능형 영상 감시 시스템 및 그 방법
KR101485512B1 (ko) 객체 행동패턴의 해마 신경망 학습을 이용한 미래범죄 발생확률 우선순위 이벤트 cctv 영상처리 방법
CN113361364B (zh) 目标行为检测方法、装置、设备及存储介质
CN109741224A (zh) 布控方法及相关产品
KR101736431B1 (ko) 다중영상을 이용한 교통정보 스마트 모니터링 시스템 및 방법
JP2006285399A (ja) 交差点における車両の動きを監視するための映像監視方法及び装置
KR101615243B1 (ko) 지능형 방범 영상 감시장치 및 영상 감시방법
KR101436283B1 (ko) 영상분석 서버를 통한 미래 발생범죄 예측 시스템
KR20140052744A (ko) 영상 내에 발생한 이벤트를 탐색하는 장치 및 방법
KR101462269B1 (ko) 고화질 카메라의 부분 저장장치 및 방법
KR101970129B1 (ko) 이벤트 룰 설정방법 및 이를 이용한 이벤트 감시장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right