KR102066939B1 - 영상 감시 시스템 - Google Patents

영상 감시 시스템 Download PDF

Info

Publication number
KR102066939B1
KR102066939B1 KR1020130115708A KR20130115708A KR102066939B1 KR 102066939 B1 KR102066939 B1 KR 102066939B1 KR 1020130115708 A KR1020130115708 A KR 1020130115708A KR 20130115708 A KR20130115708 A KR 20130115708A KR 102066939 B1 KR102066939 B1 KR 102066939B1
Authority
KR
South Korea
Prior art keywords
image
sound source
abnormal
metadata
alarm information
Prior art date
Application number
KR1020130115708A
Other languages
English (en)
Other versions
KR20150035322A (ko
Inventor
신동학
전기용
Original Assignee
한화테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화테크윈 주식회사 filed Critical 한화테크윈 주식회사
Priority to KR1020130115708A priority Critical patent/KR102066939B1/ko
Priority to US14/480,750 priority patent/US10204275B2/en
Priority to CN201410508503.XA priority patent/CN104519318B/zh
Publication of KR20150035322A publication Critical patent/KR20150035322A/ko
Application granted granted Critical
Publication of KR102066939B1 publication Critical patent/KR102066939B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8211—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a sound signal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/44—Event detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

본 발명은 영상/음원 분석을 통하여 비정상적인 상황에 대한 메타데이터를 생성, 저장 및 표시할 수 있는 영상 감시 시스템에 관한 것이다. 영상 감시 시스템은, 입력되는 영상/음원의 분석에 따라 비정상적인 영상의 존재, 비정상적인 음원의 존재 또는 비정상적인 영상 및 음원의 동시 존재를 판단하여 메타데이터 및 알람정보를 생성하는 카메라, 카메라로부터 영상, 메타데이터 및 알람정보를 수신 및 저장하고, 알람정보 디스플레이 처리를 수행하는 영상 녹화 장치 및 영상, 메타데이터 및 알람정보를 디스플레이 하는 디스플레이 장치를 포함한다.

Description

영상 감시 시스템{IMAGE MONITORING SYSTEM}
본 발명은 영상/음원 분석을 통하여 비정상적인 상황에 대한 메타데이터를 생성, 저장 및 표시할 수 있는 영상 감시 시스템에 관한 것이다.
영상 감시 시스템에서는 감시 카메라 및 감시 카메라와 연결된 영상 녹화 장치(NVR 또는 DVR)로 구성되어 있으며, 영상 분석 기능을 통해 영상을 분석하여 각 정의된 룰에 따라 감시 장면의 이상 유무를 감지하고 있다.
영상 감시 시스템은 동시에 운용되는 감시 카메라의 수가 증가함에 따라 인력이 실시간으로 모든 감시 장면의 이상 유무를 체크하기가 어렵다. 또한 영상 분석을 통해서는 이동 물체의 감지는 가능하나 비정상적인 상황을 탐지하기는 어려우며, 설사 영상 분석을 통해 비정상적인 상황이 탐지되더라도 허위 정보일 확률이 높다.
일본 공개특허공보 제2004-070564호
본 발명이 해결하고자 하는 기술적인 과제는 영상/음원 분석을 통하여 비정상적인 상황에 대한 메타데이터를 생성, 저장 및 표시함으로써 감시 효율을 증대시킬 수 있는 영상 감시 시스템을 제공하는데 있다.
본 발명이 이루고자 하는 기술적인 과제를 해결하기 위한 영상 감시 시스템은, 입력되는 영상/음원의 분석에 따라 비정상적인 영상의 존재, 비정상적인 음원의 존재 또는 비정상적인 영상 및 음원의 동시 존재를 판단하여 메타데이터 및 알람정보를 생성하는 카메라; 상기 카메라로부터 상기 영상, 메타데이터 및 알람정보를 수신 및 저장하고, 상기 알람정보 디스플레이 처리를 수행하는 영상 녹화 장치; 및 상기 영상, 메타데이터 및 알람정보를 디스플레이 하는 디스플레이 장치;를 포함하는 것을 특징으로 한다.
본 발명에 있어서, 상기 카메라는 입력되는 영상을 분석하는 영상 분석부; 상기 영상에 포함되거나, 입력되는 음원을 분석하는 음원 분석부; 상기 영상 분석 결과 및/또는 상기 음원 분석 결과에 따라 상기 비정상적인 영상의 존재 여부, 상기 비정상적인 음원의 존재 여부 또는 상기 비정상적인 영상 및 음원의 동시 존재 여부를 판단하는 판단부; 상기 판단부의 판단 결과를 참조하여 상기 비정상적인 영상 및/또는 음원의 발생시간, 상기 비정상적인 영상 및/또는 음원의 분석 결과 및 종류, 상기 비정상적인 영상 및/또는 음원에 포함된 이벤트 발생 개수, 상기 비정상적인 음원이 상기 비정상적인 영상 내에 존재하는지 여부 및 상기 비정상적인 영상 및 음원이 동일한 이벤트에서 발생했는지 여부를 포함하는 상기 메타데이터를 생성하는 메타데이터 생성부; 및 상기 판단부의 판단 결과 및 메타데이터를 참조하여 상기 비정상적인 영상 및/또는 음원에 대하여 알람정보를 생성하는 알람정보 생성부;를 포함하는 것을 특징으로 한다.
본 발명에 있어서, 상기 판단부는, 상기 비정상적인 영상 및 음원의 동시에 존재하는 경우, 상기 비정상적인 음원이 상기 비정상적인 영상 내에 존재하는지, 또는 상기 비정상적인 음원이 상기 비정상적인 영상 외에 존재하는지 여부를 판단하는 것을 특징으로 한다.
본 발명에 있어서, 상기 비정상적인 음원이 상기 비정상적인 영상 내에 존재하는 경우, 상기 판단부는 상기 비정상적인 영상 및 음원이 동일한 이벤트에서 발생하였는지 여부를 판단하고, 상기 판단결과 비정상적인 영상 및 음원이 동일한 이벤트에서 발생한 경우, 상기 메타데이터 생성부는 상기 메타데이터로부터 상기 이벤트 발생 개수를 차감하는 것을 특징으로 한다.
본 발명에 있어서, 상기 판단결과, 상기 비정상적인 음원 및 영상이 다른 이벤트에서 발생한 경우, 상기 메타데이터 생성부는 상기 비정상적인 영상 및 음원 각각에 대하여 상기 메타데이터를 생성하는 것을 특징으로 한다.
본 발명에 있어서, 상기 비정상적인 음원이 상기 비정상적인 영상 외에 존재하는 경우, 상기 메타데이터 생성부는 상기 비정상적인 영상 및 음원 각각에 대하여 상기 메타데이터를 생성하는 것을 특징으로 한다.
상술한 바와 같이 본 발명에 따르면, 영상/음원 분석을 통하여 비정상적인 상황에 대한 메타데이터를 생성, 저장 및 표시함으로써 감시 효율을 증대시킬 수 있다. 또한 메타데이터 생성에 따라 카메라 사각지대에서 발생하는 비정상적인 상황의 파악이 가능해 지고, 사후 검색이 용이하게 된다. 더 나아가 메타데이터 생성 시에 비정상적인 음원이 비정상적인 영상 내에 존재하는지 여부 및 비정상적인 영상 및 음원이 동일한 이벤트에서 발생했는지 여부를 판단함으로써 중복 또는 허위 알람을 저감할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 영상 감시 시스템을 보이는 블록도 이다.
도 2는 도 1 중 감시 카메라의 내부 상세 블록도이다.
도 3은 도 1 중 감시 카메라가 생성하는 메타데이터의 일 예를 보이는 도면이다.
도 4는 본 발명의 일 실시 예에 따른 영상 감시 시스템의 동작 방법을 보이는 흐름도 이다.
이하, 본 발명의 실시 예를 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 본 발명의 일 실시 예에 따른 영상 감시 시스템을 보이는 블록도 이다.
도 1을 참조하면, 영상 감시 시스템은, 감시 카메라(100), 마이크(200), 영상 녹화 장치(300) 및 디스플레이 장치(400)를 포함할 수 있다.
감시 카메라(100)는 고정렌즈가 구비되어 촬영 범위가 고정된 단일 고정식 카메라로 구성될 수 있고, 또는 촬영 범위가 가변적인 PTZ(pan-tilt-zoom) 카메라로 구성될 수 있다. 여기서 PTZ 카메라는 수평 방향으로 회전되는 팬(pan) 동작과 수직 방향으로 회전되는 틸트(tilt) 동작 및 줌인/줌아웃(zoom in/zoom out) 동작에 의해 한 대의 카메라로 다양한 감시 영역을 용이하게 변경시킬 수 있다. PTZ 카메라는 단일 고정식 카메라에 비해 수평, 수직, 회전이 가능하므로 전 방향을 감지할 수 있고 균일한 해상도를 가진다는 장점을 가지고 있다. 이러한 감시 카메라(100)는 영상 녹화 장치(300)와 연결되는데, 이때 영상 녹화 장치(300)는 디지털 비디오 레코더일 수 있다. 또한 감시 카메라(100)가 네트워크 카메라인 경우 감시 카메라(100)는 네트워크를 통하여 영상 녹화 장치(300)에 연결될 수 있으며, 이때 영상 녹화 장치는 네트워크 비디오 레코더 일 수 있다.
본 실시 예에서 감시 카메라(100)는 적어도 하나 이상 구비되며, 입력되는 영상으로부터 영상/음원의 분석에 따라 비정상적인 영상의 존재, 비정상적인 음원의 존재 또는 비정상적인 영상 및 음원의 동시 존재를 판단하여 메타데이터 및 알람정보를 생성한다. 여기서 음원은 감시 카메라(100)가 촬영한 영상에 포함될 수 있거나, 마이크(200)를 통해서 감시 카메라(100)로 직접 입력될 수 있다. 감시 카메라(100)의 상세한 설명은 도 2를 참조하여 하기에 설명하기로 한다.
영상 녹화 장치(300)는 감시 카메라(100)로부터 영상, 메타데이터 및 알람정보를 수신 및 저장하고, 알람정보의 디스플레이 처리를 수행한다. 여기서, 알람정보의 디스플레이 처리라 함은, 디스플레이 장치(400)에 표시되는 영상 또는 메타데이터 상에 화면 깜빡임 또는 하이라이트와 같은 처리를 수행하는 것을 나타낸다. 영상 녹화 장치(300)는 감시 카메라(100)의 종류에 따라 디지털 비디오 레코더 또는 네트워크 비디오 레코더 일 수 있다.
디스플레이 장치(400)는 영상 녹화 장치(300)에서 출력되는 영상, 메타데이터 및 처리된 알람정보를 디스플레이 한다. 디스플레이 장치(400)는 감시 카메라(100) 개수만큼 화면을 분할하고 영상 녹화 장치(300)를 통하여 각 감시 카메라(100)에서 촬영한 영상을 디스플레이 할 수 있다.
이하, 도 2를 참조하여 감시 카메라(100)를 상세히 설명하기로 한다. 도 2는 도 1 중 감시 카메라(100)의 상세 블록도로서, 도 2를 참조하면, 감시 카메라(100)는 이미지 센서(110), 영상 분석부(120), 음원 분석부(130), 판단부(140), 메타데이터 생성부(150) 및 알람정보 생성부(160)를 포함한다.
이미지 센서(110)는 감시 카메라(100)의 렌즈(미도시)를 통해 통과한 피사체의 광신호를 전기적 신호(영상 신호)로 변환하여 출력하며, COMS(complementary metal-oxide semiconductor) 모듈 또는 CCD(charge coupled device) 모듈을 포함할 수 있다.
이미지 센서(110)로부터 출력된 이미지는 하기와 같은 영상 처리를 수행할 수 있으며, 영상 처리는 영상 분석부(120)에서 수행될 수 있거나 또는 다른 모듈에 의해 수행될 수 있다. 본 실시 예에서는 설명의 편의상 영상 분석부(120)에서 영상 처리가 수행된다고 가정하고 설명하기로 한다.
영상 분석부(120)는 이미지 센서(110)로부터 출력되는 영상신호에 대해 노이즈를 저감하고, 감마 보정(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등의 화질 개선을 위한 영상 신호 처리를 수행할 수 있다. 또한 영상 분석부(120)는 이미지 센서(110)로부터 출력되는 영상신호에 대해 기능적으로 색채 처리, 블러 처리, 에지 강조 처리, 영상 해석 처리, 영상 인식 처리, 영상 이펙트 처리 등도 행해질 수 있다. 영상 인식 처리로 얼굴 인식, 장면 인식 처리 등을 행할 수 있다. 예를 들어, 휘도 레벨 조정, 색 보정, 콘트라스트 조정, 윤곽 강조 조정, 화면 분할 처리, 캐릭터 영상 등 생성 및 영상의 합성 처리 등을 행할 수 있다.
또한 영상 분석부(120)는 이미지 센서(110)로부터 출력되는 영상신호로부터 영상 분석을 수행하여 설정된 이벤트 발생 조건에 만족하는 경우 이벤트를 발생시킨다. 여기서, 영상 분석은 화면 내에서 물체의 사라짐, 등장, 사용자가 입력한 특정 이미지와 비슷한 대상에 대한 영상 추적, 물체의 움직임 감지, 영상 꺼짐 등과 같은 영상 분석을 통해 이벤트 발생 조건에 만족하는 경우, 비정상적인 영상이 분석되었으므로 이벤트를 발생시킨다.
음원 분석부(130)는 이미지 센서(110)로부터 출력되는 영상신호에 포함되거나, 마이크(200)를 통하여 직접 입력된 음원으로부터 음원 분석을 수행하여 이벤트 발생 조건에 만족하는 경우 이벤트를 발생시킨다. 여기서, 음원 분석은 음원의 크기가 사용자가 지정한 임계값 이상인 음원 또는 사용자가 특정한 음원 등과 같은 음원 분석을 통해 이벤트를 발생시킨다. 더 나아가 여러 가지 비정상적인 음원을 데이터베이스화 하고, 분석된 음원과 데이터베이스에 저장된 음원을 비교하여 일치하는 경우 이벤트를 발생할 수도 있다.
여기서, 영상 및 음원 분석에 이용되는 이벤트 발생 조건이라 함은, 영상의 경우에 물체의 출현, 사용자가 특정한 이미지(예를 들어 얼굴 인식이 불가능한 얼굴 등장) 발생, 화면 색깔이 바뀌는 경우, 설정된 영역에서 움직임 발생한 경우 등으로 사전 설정이 가능하며, 음원의 경우에 비정상적인 음원(자동차 타이어 마찰음(스키드), 유리 깨지는 소리, 경보음, 충돌음 등) 발생, 사용자가 특정한 음원(예를 들어 남자 고함, 여자 비명, 아이 울음 소리 등) 발생, 임계값 이상의 음성이 발생한 경우 등으로 역시 사전 설정이 가능하다.
판단부(140)는 영상 분석 결과 및/또는 음원 분석 결과에 따라 비정상적인 영상이 존재하는지 여부를 판단하거나, 비정상적인 음원이 존재하는지 여부를 판단하거나, 또는 비정상적인 영상 및 음원의 동시 존재하는지 여부를 판단할 수 있다. 특히, 판단부(140)는 비정상적인 영상 및 음원의 동시 존재한다고 판단한 경우, 비정상적인 음원이 비정상적인 영상 내에 존재하는지, 또는 비정상적인 음원이 비정상적인 영상 외에 존재하는지 여부를 판단한다. 더 나아가 판단부(140)는 비정상적인 음원이 비정상적인 영상 내에 존재하는 경우, 비정상적인 영상 및 음원이 동일한 이벤트에서 발생하였는지, 비정상적인 영상 및 음원이 동일한 이벤트에서 발생하였는지 여부를 판단한다. 이러한 판단부(140)의 다중 판단의 이유는 판단부(140)의 판단 결과에 따라 생성되는 메타데이터의 결과가 달라지기 때문이다.
메타데이터 생성부(150)는 판단부(140)의 판단 결과를 참조하여 비정상적인 영상에 대한 메타데이터, 비정상적인 음원에 대한 메타데이터, 비정상적인 영상 및 음원에 대한 메타데이터를 생성한다. 여기서, 메타데이터(metadata)는 원래의 데이터(영상 또는 음원 또는 영상 및 음원)에 대한 정보를 제공하는 데이터로, 다른 데이터를 설명해주는 데이터를 말한다. 본 실시 예에서 메타데이터 생성부(150)는 예를 들어, 판단부(140)의 판단 결과를 참조하여 비정상적인 영상 및/또는 음원의 발생시간, 비정상적인 영상 및/또는 음원의 분석 결과 및 종류, 비정상적인 영상 및/또는 음원에 포함된 이벤트 발생 개수, 비정상적인 음원이 비정상적인 영상 내에 존재하는지 여부 및 비정상적인 영상 및 음원이 동일한 이벤트에서 발생했는지 여부를 포함하는 메타데이터를 생성한다.
도 3에는 메타데이터 생성부(150)에서 생성한 메타데이터의 일 예가 도시되어 있다. 도 3을 참조하면, 메타데이터는 발생시간, 비정상적인 음원의 종류, 비정상적인 영상의 종류, 크로스 체크(cross check), 이벤트 발생 개수 및 멀티 디텍션(multi detection) 항목으로 구분되어 있다. 여기서 멀티 디텍션은 비정상적인 음원이 비정상적인 영상 내에 존재하는지 여부의 판단 결과를 나타내고, 크로스 체크는 비정상적인 영상 및 음원이 동일한 이벤트에서 발생했는지 여부의 판단 결과를 나타낸다.
판단부(140)의 판단결과, 비정상적인 음원이 비정상적인 영상 내에 존재하고, 비정상적인 영상 및 음원이 동일한 이벤트에서 발생한 경우, 메타데이터 생성부(150)는 생성한 메타데이터로부터 이벤트 발생 개수를 차감한다. 도 3의 310을 참조하면, 비정상적인 음원 및 영상의 종류가 동일한 이벤트에서 발생하였으므로 이벤트 발생 개수가 차감되었다. 도 3의 320을 참조하면, 비정상적인 음원 및 영상의 종류가 다른 이벤트에서 발생하였으므로 이벤트의 발생 개수가 유지되고 있다.
그러나 판단부(140)의 판단결과, 비정상적인 영상 및 음원이 다르게 존재하는 경우, 비정상적인 음원이 비정상적인 영상 외에 존재하는 경우, 및 비정상적인 음원 및 영상이 다른 이벤트에서 발생한 경우, 메타데이터 생성부(150)는 비정상적인 영상 및 음원 각각에 대하여 메타데이터를 생성한다.
알람정보 생성부(160)는 판단부(140)의 판단 결과 및 생성된 메타데이터를 참조하여 비정상적인 영상 및/또는 음원에 대하여 알람정보를 생성한다. 알람정보 생성부(160)는 예를 들어 이벤트 개수가 더 많이 존재하는 비정상적인 영상 및/또는 음원에 대하여 알람정보 생성하거나, 특정한 비정상적인 영상(예를 들어 충돌 등) 또는 특정한 비정상적인 음원(예를 들어, 여자 비명 등)에 대하여 알람정보를 생성할 수 있다.
감시 카메라(100)에서 생성된 영상, 메타데이터 및 알람정보는 영상 녹화 장치(300)를 통하여 디스플레이 장치(400)에 디스플레이 된다. 여기서 영상 녹화 장치(300)는 알람정보의 디스플레이를 위한 처리를 수행한다.
이와 같이 영상/음원의 분석을 통하여 비정상적인 상황에 대한 메타데이터를 생성, 저장 및 표시함으로써 감시 효율을 증대시킬 수 있다. 또한 메타데이터 생성에 따라 감시 카메라(100)의 사각지대에서 발생하는 비정상적인 상황의 파악이 가능해 지고, 사후 검색이 용이하게 된다. 더 나아가 메타데이터 생성 시에 비정상적인 음원이 비정상적인 영상 내에 존재하는지 여부 및 비정상적인 영상 및 음원이 동일한 이벤트에서 발생했는지 여부를 판단함으로써 중복 또는 허위 알람을 저감할 수 있다.
도 4는 본 발명의 일 실시 예에 따른 영상 감시 시스템의 동작 방법을 보이는 흐름도 이다. 이하의 설명에서, 도 1 내지 도 3에 대한 설명과 중복되는 부분은 그 설명을 생략하기로 한다.
도 4를 참조하면, 감시 카메라(100)는 입력되는 영상 및/또는 마이크(200)를 통하여 입력되는 음원의 분석에 따라, 비정상적인 영상이 존재하는지 여부를 판단하거나, 비정상적인 음원이 존재하는지 여부를 판단하거나, 또는 비정상적인 영상 및 음원의 동시 존재하는지 여부를 판단하는 단계를 수행한다(S410).
비정상적인 영상 및 비정상적인 음원 각각이 존재하는 경우(S420), 감시 카메라(100)는 비정상적인 영상 및 비정상적인 음원 각각에 대해 메타데이터를 생성하는 단계(S430)를 수행한다.
그러나, 비정상적인 영상 및 음원의 동시 존재하는 경우, 감시 카메라(100)는 비정상적인 음원이 비정상적인 영상 내에 존재하는지 판단하는 단계(S440)를 수행한다.
판단결과, 비정상적인 음원이 비정상적인 영상 외에 존재하는 경우, 감시 카메라(100)는 비정상적인 영상 및 비정상적인 음원 각각에 대해 메타데이터를 생성하는 S430 단계를 수행한다.
그러나, 비정상적인 음원이 비정상적인 영상 내에 존재하는 경우, 감시 카메라(100)는 비정상적인 영상 및 음원이 동일한 이벤트에서 발생하였는지 판단하는 단계(S450)를 수행한다.
판단 결과, 비정상적인 영상 및 음원이 다른 이벤트에서 발생한 경우, 감시 카메라(100)는 비정상적인 영상 및 비정상적인 음원 각각에 대해 메타데이터를 생성하는 S430 단계를 수행한다.
그러나, 비정상적인 영상 및 음원이 동일한 이벤트에서 발생한 경우, 감시카메라(100)는 메타데이터 생성 시에 이벤트 발생 개수를 차감하는 단계(S450)를 수행한다.
메타데이터 생성이 완료되면, 감시 카메라(100)는 상기 판단결과 및 메타데이터를 참조하여 알람정보를 생성하는 단계(S470)를 수행한다.
이후, 영상 녹화 장치(300)는 감시 카메라(100)로부터 영상, 메타데이터 및 알람정보를 수신하여 저장하고, 알람정보의 디스플레이를 위한 처리를 수행한 후 디스플레이 장치(400)에 디스플레이 하는 단계(S480)를 수행한다.
이제까지 본 발명에 대하여 바람직한 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.
100: 감시 카메라
110: 이미지 센서
120: 영상 분석부
130: 음원 분석부
140: 판단부
150: 메타데이터 생성부
160: 알람정보 생성부
200: 마이크
300: 영상 녹화 장치
400: 디스플레이 장치

Claims (6)

  1. 입력되는 영상/음원의 분석에 따라 비정상적인 영상의 존재, 비정상적인 음원의 존재 또는 비정상적인 영상 및 음원의 동시 존재를 판단하여 메타데이터 및 알람정보를 생성하는 카메라;
    상기 카메라로부터 상기 영상, 메타데이터 및 알람정보를 수신 및 저장하고, 상기 알람정보 디스플레이 처리를 수행하는 영상 녹화 장치; 및
    상기 영상, 메타데이터 및 알람정보를 디스플레이 하는 디스플레이 장치;를 포함하고,
    상기 메타데이터는, 상기 비정상적인 음원이 상기 비정상적인 영상 내에 존재하는지 여부의 판단 결과 및 상기 비정상적인 영상 및 상기 비정상적인 음원이 동일한 이벤트에서 발생했는지 여부의 판단 결과를 포함하는 것을 특징으로 하는 영상 감시 시스템.
  2. 제 1항에 있어서, 상기 카메라는
    입력되는 영상을 분석하는 영상 분석부;
    상기 영상에 포함되거나, 입력되는 음원을 분석하는 음원 분석부;
    상기 영상 분석 결과 및/또는 상기 음원 분석 결과에 따라 상기 비정상적인 영상의 존재 여부, 상기 비정상적인 음원의 존재 여부 또는 상기 비정상적인 영상 및 음원의 동시 존재 여부를 판단하는 판단부;
    상기 판단부의 판단 결과를 참조하여 상기 비정상적인 영상 및/또는 음원의 발생시간, 상기 비정상적인 영상 및/또는 음원의 분석 결과 및 종류, 상기 비정상적인 영상 및/또는 음원에 포함된 이벤트 발생 개수, 상기 비정상적인 음원이 상기 비정상적인 영상 내에 존재하는지 여부 및 상기 비정상적인 영상 및 음원이 동일한 이벤트에서 발생했는지 여부를 포함하는 상기 메타데이터를 생성하는 메타데이터 생성부; 및
    상기 판단부의 판단 결과 및 메타데이터를 참조하여 상기 비정상적인 영상 및/또는 음원에 대하여 알람정보를 생성하는 알람정보 생성부;를 포함하는 것을 특징으로 하는 영상 감시 시스템.
  3. 제 2항에 있어서, 상기 판단부는,
    상기 비정상적인 영상 및 음원의 동시에 존재하는 경우, 상기 비정상적인 음원이 상기 비정상적인 영상 내에 존재하는지, 또는 상기 비정상적인 음원이 상기 비정상적인 영상 외에 존재하는지 여부를 판단하는 것을 특징으로 하는 영상 감시 시스템.
  4. 삭제
  5. 삭제
  6. 삭제
KR1020130115708A 2013-09-27 2013-09-27 영상 감시 시스템 KR102066939B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130115708A KR102066939B1 (ko) 2013-09-27 2013-09-27 영상 감시 시스템
US14/480,750 US10204275B2 (en) 2013-09-27 2014-09-09 Image monitoring system and surveillance camera
CN201410508503.XA CN104519318B (zh) 2013-09-27 2014-09-28 图像监控系统和监视摄像机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130115708A KR102066939B1 (ko) 2013-09-27 2013-09-27 영상 감시 시스템

Publications (2)

Publication Number Publication Date
KR20150035322A KR20150035322A (ko) 2015-04-06
KR102066939B1 true KR102066939B1 (ko) 2020-01-16

Family

ID=52739776

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130115708A KR102066939B1 (ko) 2013-09-27 2013-09-27 영상 감시 시스템

Country Status (3)

Country Link
US (1) US10204275B2 (ko)
KR (1) KR102066939B1 (ko)
CN (1) CN104519318B (ko)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104700536B (zh) * 2015-04-07 2017-05-31 泉州东行贸易有限公司 一种户外重要设施安全防护装置
KR20170006210A (ko) * 2015-07-07 2017-01-17 한화테크윈 주식회사 감시 방법
KR102361088B1 (ko) * 2015-11-27 2022-02-09 한화테크윈 주식회사 영상 공유 방법
JP6622581B2 (ja) * 2015-12-11 2019-12-18 キヤノン株式会社 情報提示方法及び装置
US10665071B2 (en) 2016-03-22 2020-05-26 Sensormatic Electronics, LLC System and method for deadzone detection in surveillance camera network
US10733231B2 (en) 2016-03-22 2020-08-04 Sensormatic Electronics, LLC Method and system for modeling image of interest to users
US10318836B2 (en) 2016-03-22 2019-06-11 Sensormatic Electronics, LLC System and method for designating surveillance camera regions of interest
US9965680B2 (en) * 2016-03-22 2018-05-08 Sensormatic Electronics, LLC Method and system for conveying data from monitored scene via surveillance cameras
US10475315B2 (en) 2016-03-22 2019-11-12 Sensormatic Electronics, LLC System and method for configuring surveillance cameras using mobile computing devices
US11216847B2 (en) 2016-03-22 2022-01-04 Sensormatic Electronics, LLC System and method for retail customer tracking in surveillance camera network
US10192414B2 (en) 2016-03-22 2019-01-29 Sensormatic Electronics, LLC System and method for overlap detection in surveillance camera network
US11601583B2 (en) 2016-03-22 2023-03-07 Johnson Controls Tyco IP Holdings LLP System and method for controlling surveillance cameras
US10764539B2 (en) 2016-03-22 2020-09-01 Sensormatic Electronics, LLC System and method for using mobile device of zone and correlated motion detection
US10347102B2 (en) 2016-03-22 2019-07-09 Sensormatic Electronics, LLC Method and system for surveillance camera arbitration of uplink consumption
CN107347145A (zh) * 2016-05-06 2017-11-14 杭州萤石网络有限公司 一种视频监控方法及云台网络摄像机
US10913533B2 (en) * 2016-12-12 2021-02-09 Optim Corporation Remote control system, remote control method and program
KR20180086662A (ko) 2017-01-23 2018-08-01 한화에어로스페이스 주식회사 모니터링 장치 및 시스템
CN107040742B (zh) * 2017-03-10 2019-10-18 浙江宇视科技有限公司 一种异常检测方法及网络硬盘录像机nvr及视频服务器
CN110494861B (zh) * 2017-03-31 2023-09-22 横河电机株式会社 基于图像的异常检测方法和系统
WO2019076076A1 (zh) * 2017-10-20 2019-04-25 杭州海康威视数字技术股份有限公司 模拟摄像机、服务器、监控系统和数据传输、处理方法
CN109698895A (zh) * 2017-10-20 2019-04-30 杭州海康威视数字技术股份有限公司 一种模拟摄像机、监控系统及数据发送方法
WO2019104681A1 (zh) 2017-11-30 2019-06-06 深圳市大疆创新科技有限公司 拍摄方法和装置
CN110062198B (zh) * 2018-01-18 2022-04-05 杭州海康威视数字技术股份有限公司 一种监控取证方法、装置、系统、电子设备及存储介质
CN109300471B (zh) * 2018-10-23 2021-09-14 中冶东方工程技术有限公司 融合声音采集识别的场区智能视频监控方法、装置及系统
CN109559477A (zh) * 2018-12-24 2019-04-02 绿瘦健康产业集团有限公司 无人健身房室内智能监管方法、装置、终端设备及介质
WO2023238721A1 (ja) * 2022-06-08 2023-12-14 富士フイルム株式会社 情報作成方法、及び情報作成装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6028626A (en) * 1995-01-03 2000-02-22 Arc Incorporated Abnormality detection and surveillance system
JP2004070564A (ja) 2002-08-05 2004-03-04 Nippon Denka:Kk セキュリティシステム
KR100473758B1 (ko) 2002-08-14 2005-03-10 엘지전자 주식회사 감시용 디지털 비디오 레코더에서의 오디오 이벤트검출방법
FR2861245B1 (fr) * 2003-10-16 2006-05-05 Canon Europa Nv Procede de video surveillance, dispositif, systeme et programme d'ordinateur correspondant
KR100876494B1 (ko) * 2007-04-18 2008-12-31 한국정보통신대학교 산학협력단 멀티비디오 및 메타데이터로 구성된 통합 파일 포맷 구조및 이를 기반으로 하는 멀티비디오 관리 시스템 및 그 방법
KR101008060B1 (ko) 2008-11-05 2011-01-13 한국과학기술연구원 실시간 음원 방향 감지 장치 및 그 방법
JP5189536B2 (ja) 2009-03-26 2013-04-24 池上通信機株式会社 監視装置
KR100999655B1 (ko) * 2009-05-18 2010-12-13 윤재민 디지털 비디오 레코더 시스템 및 그것의 운용방법
KR20110095113A (ko) 2010-02-16 2011-08-24 윤재민 음장인식 디지털 비디오 레코더 시스템 및 그것의 운용 방법
JP5917270B2 (ja) * 2011-05-27 2016-05-11 キヤノン株式会社 音検出装置及びその制御方法、プログラム

Also Published As

Publication number Publication date
CN104519318A (zh) 2015-04-15
US20150092052A1 (en) 2015-04-02
CN104519318B (zh) 2019-03-29
KR20150035322A (ko) 2015-04-06
US10204275B2 (en) 2019-02-12

Similar Documents

Publication Publication Date Title
KR102066939B1 (ko) 영상 감시 시스템
US10070053B2 (en) Method and camera for determining an image adjustment parameter
CN107223332B (zh) 基于声学相机的音频视觉场景分析
US8964030B2 (en) Surveillance camera system having camera malfunction detection function to detect types of failure via block and entire image processing
US11165994B2 (en) Analytics-driven summary views for surveillance networks
US10412345B2 (en) Video surveillance method, apparatus and system
US20080024610A1 (en) Monitoring Apparatus, Monitoring System, Monitoring Method and Program
US8159538B2 (en) Monitoring apparatus, filter calibration method, and filter calibration program
KR20140033414A (ko) 고해상도 멀티스펙트럼 이미지 캡처 기법
EP1444831B1 (en) Security system and warning method using edge detection of image signal
KR101212082B1 (ko) 영상인식장치 및 그 영상 감시방법
JP2008035096A (ja) 監視装置、監視方法及びプログラム
CN101494770A (zh) 用于控制监控照相机的屏蔽的颜色的装置和方法
JP5710230B2 (ja) 監視システムおよび監視方法
KR100994418B1 (ko) 건물의 침입 감지를 위한 촬영 이미지 처리 시스템 및 방법
KR101706221B1 (ko) 감시카메라 및 그 감시카메라의 대상 식별을 통한 알람 제어 방법
TW201426664A (zh) 攝影機異常種類辨識方法及可偵測攝影異常的監視主機
KR101272631B1 (ko) 이동물체 감지장치 및 방법
KR20240018569A (ko) 이미지 캡처를 위한 노출 제어
JP2011123562A (ja) 画像処理装置、画像処理方法及びプログラム
WO2023134850A1 (en) Image capturing apparatus and method for combining data from a digital camera and an event camera
KR20160061706A (ko) 카메라 장치 및 카메라 제어 시스템
JP2023137620A (ja) 画像処理方法、装置、電子機器及び読み取り可能な記憶媒体
JPH0981714A (ja) 画像処理装置及びその方法
JP2003319384A (ja) 自動調整レンズ絞り及び物体移動等検出の二重機能をもつデジタル映像監視システム

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right