KR102261439B1

KR102261439B1 - 이벤트 발생 감지 방법

Info

Publication number: KR102261439B1
Application number: KR1020140122867A
Authority: KR
Inventors: 곽진욱
Original assignee: 삼성에스디에스 주식회사
Priority date: 2014-09-16
Filing date: 2014-09-16
Publication date: 2021-06-04
Also published as: KR20160032561A

Abstract

이벤트 발생 감지 방법이 개시된다. 본 발명의 일 실시예에 따른 이벤트 발생 감지 방법은 관심 영역에 대한 기본 색상값을 설정하는 단계, 기본 색상값으로부터 기 설정된 임계값을 초과하는 색상값의 변화가 있는 경우 관심 영역에 변화가 발생된 것으로 결정하는 단계 및 관심 영역에 변화가 발생된 것으로 결정되고, 기 설정된 이벤트 발생 조건을 충족하면 알림 신호를 생성하는 단계를 포함한다.

Description

이벤트 발생 감지 방법{METHOD OF SENSING AN EVENT}

본 발명은 이벤트 발생 감지 방법에 관한 것으로, 보다 상세하게는 배경화면의 여러 영역정보의 변화값 및 시간 정보를 복합적으로 활용하여 화면 내 이벤트 발생을 감지할 수 있는 이벤트 발생 감지 방법에 관한 것이다.

일반 주택을 비롯하여 백화점, 은행, 전시장, 공장 등의 실내외에 구비되는 감시 카메라(CCTV : Closed Circuit Televisions)는 감시 영역 내에서 발생될 수 있는 다양한 사항을 관찰하고 그에 적절한 대응을 하기 위한 수단으로 널리 이용되고 있다.

특히, 감시 카메라를 활용한 감시영상 분석(Video Analysis)을 통해 영상 내 객체의 크기 및 움직임을 감지하여 이벤트 발생을 감지하고, 그에 따른 관제를 수행할 수 있었다.

그러나, 종래기술에 따른 감시 카메라의 경우 화면 내에 존재하는 사람 또는 자동차와 같은 움직이는 물체를 대상으로만 이벤트 발생을 감지하였을 뿐, 배경화면의 변화를 고려하지 않음에 따라 감지의 정확도가 떨어지고 오 경보율이 높아진다는 문제점이 있었다.

이에, 배경화면의 미세한 변화까지 고려하여 이벤트 발생여부를 감지하는 감시 카메라의 이벤트 발생 감지 방법의 필요성이 대두되었다.

미국 등록특허 7801328호

본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 본 발명의 목적은 모니터링의 대상이 되는 움직이는 물체뿐만 아니라 사용자가 지정한 배경화면의 변화도 함께 고려하여 오경보 발생을 줄일 수 있는 이벤트 발생 감지 방법을 제공하는데 있다.

본 발명의 또 다른 목적은 관심 영역 내의 절대적인 색상값의 변화를 통해 화면 변화를 감지함으로써, 화면 내의 미세한 변화까지 감지할 수 있는 이벤트 발생 감지 방법을 제공하는데 있다.

본 발명의 또 다른 목적은 배경화면의 변화에 따라 이벤트 발생 조건을 지정함으로써 이벤트 발생 조건을 정교화하고, 다양한 필터링 조건 설정을 통해 오경보 발생을 억제할 수 있는 이벤트 발생 감지 방법을 제공하는데 있다.

본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속한 기술분야의 통상의 기술자에게 명확하게 이해될 수 있을 것이다.

상술한 본 발명의 일 실시예에 따른 이벤트 발생 감지 방법은 관심 영역에 대한 기본 색상값을 설정하는 단계, 상기 기본 색상값으로부터 기 설정된 임계값을 초과하는 색상값의 변화가 있는 경우 상기 관심 영역에 변화가 발생된 것으로 결정하는 단계 및 상기 관심 영역에 변화가 발생된 것으로 결정되고, 기 설정된 이벤트 발생 조건을 충족하면 알림 신호를 생성하는 단계를 포함한다.

본 발명의 일 실시예에 따르면, 상기 기 설정된 임계값은 상기 색상값을 구성하는 각 성분 정보 각각에 대하여 설정될 수 있다.

본 발명의 일 실시예에 따르면, 상기 기 설정된 임계값은, 상기 색상값을 구성하는 성분 정보 각각에 대하여 상이한 값으로 설정될 수 있다.

본 발명의 일 실시예에 따르면, 상기 이벤트 발생 조건은, 계절 정보, 시간 정보, 요일 정보 중 적어도 하나를 포함하고, 상기 알림 신호를 생성하는 단계는, 기 설정된 계절, 시간 또는 요일에 상기 관심 영역에서 화면 변화가 발생된 것으로 결정되면 상기 알림 신호를 생성할 수 있다.

본 발명의 일 실시예에 따르면, 상기 알림 신호를 생성하는 단계는, 임의의 시점을 기준으로 기 설정된 시간 전후의 프레임을 비교하여 상기 화면 내 객체의 움직임을 검출하는 단계; 및 상기 화면 내 객체의 움직임이 검출되면 상기 기 설정된 이벤트 발생 조건을 충족한 것으로 판단하고 상기 알림 신호를 생성하는 단계를 포함할 수 있다.

본 발명의 일 실시예에 따르면, 상기 관심 영역에 변화가 발생된 것으로 결정하는 단계는, 상기 기 설정된 임계값을 초과하는 색상값의 변화가 기 설정된 시간 이상 동안 유지되면 상기 관심 영역에 변화가 발생된 것으로 결정하는 단계를 포함할 수 있다.

본 발명의 일 실시예에 따르면, 외부로부터 날씨 정보를 수신하는 단계를 더 포함하고, 상기 알림 신호를 생성하는 단계는, 기 설정된 날씨에 화면 변화가 발생된 것으로 결정되면 상기 알림 신호를 생성하는 단계를 포함할 수 있다.

본 발명의 또 다른 실시예에 따른 감시 장치는 관심 영역 설정을 입력 받기 위한 UI(User Interface)를 생성하고 사용자 입력에 따라 화면에서 관심 영역을 설정하는 관심 영역 설정부, 상기 관심 영역의 기본 색상값으로부터 기 설정된 임계값을 초과하는 변화가 있는 경우 상기 관심 영역에 변화가 발생된 것으로 결정하는 변화 발생 감지부 상기 관심 영역에 변화가 발생된 것으로 결정되고, 기 설정된 이벤트 발생 조건을 충족하면 알림 신호를 생성하는 알림 생성부; 상기 UI를 전송하여 관심 영역 설정 입력을 수신하고, 상기 알림 생성부에서 생성된 알림 신호를 전송하는 통신부를 포함한다.

본 발명의 일 실시예에 따르면, 상기 기 설정된 임계값은 색상값을 구성하는 성분 정보 각각에 대하여 설정될 수 있다.

본 발명의 일 실시예에 따르면, 상기 이벤트 발생 조건은, 계절 정보, 시간 정보, 요일 정보 중 적어도 하나를 포함하고, 상기 알림 생성부는, 상기 기 설정된 계절, 시간 또는 요일에 상기 관심 영역에서 화면 변화가 발생된 것으로 결정되면 상기 알림 신호를 생성할 수 있다.

본 발명의 일 실시예에 따르면, 상기 알림 생성부는, 임의의 시점을 기준으로 기 설정된 시간 전후의 프레임을 비교하여 화면 내 객체의 움직임이 검출되면 기 설정된 이벤트 발생 조건을 충족한 것으로 판단하고 상기 알림 신호를 생성할 수 있다.

본 발명의 일 실시예에 따르면, 상기 변화 발생 감지부는, 상기 기 설정된 임계값을 초과하는 색상값의 변화가 기 설정된 시간 이상 동안 유지되면 상기 관심 영역에 변화가 발생된 것으로 결정할 수 있다.

본 발명의 또 다른 실시예에 따른 서버 장치는 감시 장치로부터 촬영 영상을 수신하는 통신부, 상기 촬영 영상에 대해 관심 영역을 설정하기 위한 UI를 생성하여 사용자로의 관심 영역 설정 입력에 따라 관심 영역을 설정하는 관심 영역 설정부, 상기 관심 영역의 기본 색상값으로부터 기 설정된 임계값을 초과하는 변화가 있는 경우 상기 관심 영역에 변화가 발생된 것으로 결정하는 변화 발생 감지부 및 상기 관심 영역에 변화가 발생된 것으로 결정되고, 기 설정된 이벤트 발생 조건을 충족하면 알림 신호를 생성하는 알림 생성부를 포함한다.

상술한 바와 같이 관심 영역에 대한 기본 색상값을 설정하고 임계값을 초과하는 색상값의 변화가 있는 경우 화면 변화가 발생한 것으로 결정함으로써, 배경 영역상의 미세한 화면 변화까지도 감지할 수 있다는 효과를 달성할 수 있게 된다.

또한, 관심 영역의 색상값 변화를 통해 배경화면의 변화를 감지하고, 이를 복합적인 이벤트 발생 조건과 결합시킴으로써 오경보 발생을 억제할 수 있다는 효과를 달성할 수 있다.

그리고, 이벤트 알림 신호 발생 조건에 타이머 조건을 부합시킴으로써, 관심 영역의 색상이 일시적으로 변화함에 따라 사용자가 의도하지 않은 상황에 알림 신호가 생성되는 경우를 방지할 수 있다는 효과를 달성할 수 있다.

도 1은 본 발명의 일 실시예에 따라 관심 영역을 지정하는 과정을 설명하기 위한 도면이다.
도 2는 본 발명의 일 실시예에 따른 관심 영역의 화면 변화를 결정하는 방법을 설명하기 위한 도면이다.
도 3은 본 발명의 일 실시예에 따라 관심 영역의 화면 변화를 결정하기 위해 하나의 성분 정보에 임계값을 설정하는 방법을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따른 화면 변화 감지 방법과 이벤트 발생 조건을 결합하여 알림 신호를 생성하는 방법을 설명하기 위한 흐름도이다.
도 5는 본 발명의 일 실시예에 따라 타이머 조건을 추가하여 이벤트 발생을 감지하는 방법을 설명하기 위한 흐름도이다.
도 6은 본 발명의 일 실시예에 따라 복수의 영상 프레임을 비교하여 영상 내 객체의 움직임을 검출하는 방법과 관심 영역에서의 색상값 변화를 통해 화면 변화를 결정하는 방법을 결합하여 이벤트 발생을 감지하는 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따른 감시 장치를 설명하기 위한 블록도이다.
도 8은 본 발명의 일 실시예에 따른 서버 장치를 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시예에 따른 감시 장치(900)를 설명하기 위한 도면이다.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다. 본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 게시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 게시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.

또한, 본 명세서에서 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함될 수 있다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.

도 1은 본 발명의 일 실시예에 따라 관심 영역을 지정하는 과정을 설명하기 위한 도면이다.

사용자는 감시 카메라로 촬영되는 영역 중 화면 변화를 감지하고자 하는 영역을 관심 영역으로 설정할 수 있다. 예를 들어, 사용자가 도 1에 도시된 구성 중 도로 부분의 색상변화를 감지하고자 하는 경우가 있을 수 있다. 즉, 도로의 노면 상태를 관리하기 위해 눈이 쌓이거나 비가 내리는 경우를 감지하고자 하는 경우 도로에 해당하는 영역을 관심 영역으로 설정할 수 있다.

또는 하나의 감시 화면에서 복수의 영역을 관심 영역으로 설정할 수도 있다. 도 1에서 도로 부분을 관심 영역으로 설정하는 것 이외에 신호등 부분 중 적색등이 점멸되는 부분을 관심 영역으로 설정하면, 그 영역에 붉은 색으로 변함에 따라 신호등이 적색으로 변경되었음을 감지할 수 있게 된다.

상술한 바와 같이, 사용자가 변화를 감지하고자 하는 부분을 관심 영역으로 설정하면 그 영역에서의 색상값 변화를 통해 화면 변화가 있음을 결정할 수 있게 된다.

도 2는 본 발명의 일 실시예에 따른 관심 영역의 화면 변화를 결정하는 방법을 설명하기 위한 도면이다.

화면을 구성하는 기본 단위인 픽셀이 표시하는 색은 색상값을 구성하는 성분 정보의 조합에 의해 결정된다. 예를 들어, 색상값을 구성하는 성분 정보가 R(Red), G(Green), B(Blue)인 경우 이들의 조합에 의해 픽셀이 표시하는 색상이 결정된다.

구체적으로, R, G, B 각각은 0~255 레벨 중 하나의 값을 가질 수 있으며, 높은 레벨을 가질수록 그에 해당하는 색상의 농도가 짙어진다. 예를 들어, R과 G가 255 레벨의 값을 갖고 B가 0인 경우, R과 G가 황색이 표시되며 R과 B가 255 레벨의 값을 갖고 G가 0인 경우 분홍색이 표시된다.

한편, RGB 방식 이외에 H(Hue), S(Saturation), L(Lightness) 의 조합에 의해 픽셀이 표시하는 색상을 결정할 수도 있다.

H(Hue)는 가시광선 스펙트럼을 고리모양으로 배치한 색상환에서 가장 파장이 긴 빨강을 0˚로 하였을 때 상대적인 배치 각도를 의미한다. 따라서, H값은 0˚~360˚의 범위를 갖고 360˚와 0˚는 같은 색상인 적색을 가리킨다.

S(Saturation)은 채도를 의미하며, 특정한 색상의 가장 진한 상태를 100%로 하였을 때 진하기의 정도를 나타낸다. 따라서, 채도값 0%는 같은 명도의 무채색을 나타낸다.

L(Lightness)는 명도를 의미하며, 흰색을 100%, 검정을 0%로 하였을 때, 밝기의 정도를 나타낸다.

따라서, 본 발명의 일 실시예에 따르면 관심 영역의 픽셀이 표시하는 색상은 H, S, L로 구성되는 성분 정보의 조합으로 나타낼 수 있다.

한편, 사용자가 관심 영역을 설정한 경우, 관심 영역에 포함된 픽셀의 현재 색상을 기본 색상값으로 설정할 수 있다. 예를 들어, 사용자가 화면에서의 도로 부분을 관심 영역으로 설정하면 도로의 색상인 흑색이 관심 영역을 구성하는 픽셀들의 기본 색상값으로 설정된다. 또는, 사용자가 신호등에서 적색이 표시되는 부분을 적색등이 소등된 상태에서 관심 영역으로 설정하면, 흑색이 관심 영역의 기본 색상값으로 설정된다.

구체적으로, 사용자가 선택한 관심 영역을 구성하는 픽셀의 좌표 정보와 그 픽셀의 현재 색상을 구성하는 R, G, B 값이 기본 색상값으로 저장된다.

상술한 실시예에서는 사용자가 선택한 관심 영역의 현재 색상이 기본 색상값으로 설정되는 것을 예로 들었으나, 이에 한정되지 않으며 사용자가 관심 영역을 설정하고 관심 영역에 포함된 픽셀들의 기본 색상값을 임의로 설정하도록 구현할 수도 있다.

또는 관심 영역에 포함된 픽셀들의 기본 색상값을 지정함에 있어서, 픽셀의 평균값 또는 대표값을 사용할 수도 있다. 여기에서 대표값이란 관심 영역에 포함된 픽셀 중 가장 많은 픽셀이 표시하고 있는 색상값을 의미한다.

또한, 픽셀의 색상을 결정하는 성분 정보가 R, G, B인 것으로 설명하였으나 이에 한정되지 않으며, 성분 정보가 상술한 H(Hue), S(Saturation), L(Lightness)인 경우, 이들의 조합을 기본 색상값으로 저장할 수도 있다.

관심 영역을 구성하는 픽셀들의 기본 색상값이 설정된 상태에서 기 설정된 임계값을 초과하는 색상값의 변화가 있는 경우 그 관심 영역에 변화가 발생된 것으로 결정된다.

예를 들어, 사용자가 도로 부분을 관심 영역으로 설정하면 현재 도로의 색상을 나타내는 R값 x(210), G값 y(220), B값 z(230)이 기본 색상값으로 저장된다. 이후, 사용자는 도로에 눈이 쌓인 상태를 감지하기 위해 변화 임계값 ΔR, ΔG 및 ΔB 값을 설정할 수 있다.

구체적으로, 도로에 눈이 쌓여 도로의 색상이 백색으로 변화함에 따라 R(210), G(220), B(230) 값이 높아지게 되므로 각각의 변화 임계값을 100으로 설정하면, R값이 x+100(240), G값이 y+100(250), B값이 z+100(260)이 된 경우 관심 영역인 도로에 변화가 발생한 것으로 결정할 수 있다.

한편, 본 실시예에서는 색상값이 높아짐에 따라 관심 영역에 변화가 발생된 것으로 결정하는 경우를 예로 들었으나 색상값이 낮아지는 경우 관심 영역에 변화가 발생된 것으로 결정할 수도 있다.

예를 들어, 화면 상의 하늘 부분을 관심 영역으로 설정하면, 현재 하늘의 색상을 나타내는 R값 x’, G값 y’ B값 z’이 기본 색상값으로 저장된다. 이후, 사용자는 하늘이 흐려지는 상태를 감지하기 위해 변화 임계값 ΔR’, ΔG’ 및 ΔB’ 값을 설정할 수 있다.

이때, 변화 임계값이 음의 값을 갖도록 설정할 수도 있다. 즉, 하늘이 흐려짐에 따라 R값 x’, G값 y’ 및 B값 z’값이 낮아지게 되므로, 이를 감지하기 위해서는 음의 값으로 변화 임계값을 설정해야 한다.

이 경우, 하늘이 흐려짐에 따라 관심 영역인 하늘의 색상이 어두워지게 되고, R, G, B가 변화 임계값의 절대값을 초과할 정도로 낮아지면 관심 영역인 하늘에 변화가 있는 것으로 결정된다.

상술한 바와 같이, 관심 영역에 대한 기본 색상값을 설정하고 임계값을 초과하는 색상값의 변화가 있는 경우 화면 변화가 발생한 것으로 결정하면, 배경 영역상의 미세한 화면 변화까지도 감지할 수 있다는 효과를 달성할 수 있게 된다.

한편, 상술한 실시예에서는 기본 색상값을 구성하는 성분 정보 각각에 임계값이 설정되는 것으로 도시하였으나, 사용자가 관심 있는 하나의 성분 정보에만 임계값을 설정하도록 구현할 수도 있다.

도 3은 본 발명의 일 실시예에 따라 관심 영역의 화면 변화를 결정하기 위해 하나의 성분 정보에 임계값을 설정하는 방법을 설명하기 위한 도면이다.

이하에서는 관심 영역을 구성하는 픽셀의 색상이 R, G, B에 의해 결정되는 것으로 설명하나 이에 한정되지 않으며, H, S, L 등 다양한 방법으로 픽셀의 색상을 결정하는데 적용할 수도 있다.

사용자가 화면 상에서 신호등의 변화를 감지하고 하는 경우 신호등이 위치한 부분을 관심 영역으로 설정할 수 있다. 구체적으로, 사용자가 적색등이 점등된 상태를 감지하고자 하는 경우, 적색등이 소등된 상태의 색상값을 기본 색상값으로 설정할 수 있다.

적색등이 소등된 상태에서 사용자가 설정한 관심 영역의 기본 색상값은 R값 x˝ (310), G값 y˝ (320), B값 z˝ (330)으로 저장된다. 이때, 사용자가 관심있는 색상은 적색의 변화량이므로 R값에 대해서만 변화 임계값이 설정될 수 있다.

적색등이 소등된 상태에서 점등 상태로 변경되면 관심 영역의 색상값을 구성하는 성분 정보 중 R값이 높아지게 되므로, R값에 대해서만 임계값을 설정하여 설정된 임계값을 초과하는 변화가 있는 경우 화면 변화가 있는 것으로 감지할 수 있다.

즉, 도 3에 도시된 바와 같이 R값의 변화 임계값을 ΔR˝(340)으로 설정하고, 적색등이 점등되어 사용자가 설정한 관심 영역의 색상값 중 R값이 x+ΔR˝을 초과하면 그 영역에 변화가 발생된 것으로 결정할 수 있다.

한편, 본 실시예에서는 R값에 대해서만 변화 임계값이 설정되는 것으로 도시하였으나, 이에 한정되지 않으며 다른 성분 정보에만 변화 임계값을 설정할 수도 있다.

예를 들어, 사용자가 신호등의 녹색 신호등이 점등되는 상황을 감지하고자 하는 경우, 신호등의 녹색등 영역을 관심 영역으로 지정하고 G값에 대해서만 변화 임계값을 설정할 수 있다.

이후, 사용자가 관심 영역을 설정한 녹색등 영역이 소등 상태에서 점등 상태로 변경되면 G값이 높아지게 되므로 사용자가 기 설정한 임계값을 초과하는 변화가 발생하게 된다. 따라서, 사용자는 관심 영역인 녹색 신호등 부분에 녹색등이 점등되었음을 알 수 있게 된다.

상술한 실시예에서는 관심 영역의 색상값을 구성하는 하나의 성분 정보에 임계값이 설정되는 것으로 도시하였으나, 복수개의 성분 정보를 조합하여 임계값을 설정하도록 구현할 수도 있다.

예를들어, 사용자가 관심 영역에서 황색의 변화를 감지하고자 하는 경우, 황색을 구성하는 색상의 성분 정보인 R 및 G값에 임계값을 설정하고, R 및 G에 임계값을 초과하는 변화가 있는 경우 화면 변화가 있음을 감지할 수 있게 된다.

상술한 바와 같이, 관심 영역의 색상값을 구성하는 성분 정보에 임계값을 설정하고, 임계값을 초과하는 성분 정보의 변화가 있는 경우 화면 변화가 있는 것으로 결정하면 복수의 화면 프레임을 비교하지 않고 하나의 화면 프레임만을 이용하여 사용자가 원하는 화면 변화를 검출할 수 있다는 효과를 달성할 수 있게 된다.

또한, 상술한 실시예에서는 본 발명의 이해를 돕기 위해 특정 픽셀의 R, G, B값의 변화량을 이용하여 화면 변화를 검출하는 것으로 기재하였으나, 실제 영상에서는 사용자가 지정한 관심 영역이 복수의 픽셀을 포함하게 되므로, 관심 영역에 포함된 각 픽셀의 기본 색상값 및 임계값을 지정함에 있어 픽셀의 집합에 대한 평균값 또는 대표값을 이용하는 것으로 발명을 구현할 수도 있다.

또한, 사용자로 하여금 관심 영역에 포함되어 있는 픽셀들의 색상 평균값 또는 대표값으로 기본 색상값 및 임계값을 지정하도록 하는 경우 그 평균값 또는 대표값을 화면에 표시하여, 사용자로 하여금 사용자가 지정한 관심영역의 평균 색상 또는 대표 색상을 용이하게 확인하도록 할 수도 있다.

도 4는 본 발명의 일 실시예에 따른 화면 변화 감지 방법과 이벤트 발생 조건을 결합하여 알림 신호를 생성하는 방법을 설명하기 위한 흐름도이다.

관심 영역의 색상 변화만을 감지하여 화면 변화를 결정하고 알림 신호를 생성하면 오경보율이 높아지게 된다.

예를 들어, 사용자가 노면에 눈이 쌓인 상태를 감지하기 위해 도로 부분을 관심 영역으로 설정(S410)하고 관심 영역의 색상값을 구성하는 성분 정보 각각에 임계값을 설정할 수 있다. 구체적으로, 관심 영역이 백색으로 변경되는 것을 감지하기 위한 임계값을 설정할 수 있다. 그리고, 노면에 눈이 쌓여 백색으로 변경되었다고 결정되면(S420) 사용자에게 알림 신호를 생성하도록 설정해둘 수 있다.

그러나, 환경의 변화에 따라 노면에 눈이 쌓이지 않았음에도 노면의 색상이 백색으로 변경되어 오경보가 발생되는 경우가 생길 수 있다. 예를 들어, 노면에 비추는 조명의 조도가 밝아져 백색으로 변경되거나, 노면을 통행하는 차량 또는 사람에 의해 백색이 감지되어 경보가 발생될 수 있다.

따라서, 본 발명의 일 실시예에 따르면, 이벤트 발생 조건을 추가하여 사용자가 기 설정한 화면 영역의 색상 변화와 이벤트 발생 조건을 모두 충족하는 경우(S430)에만 알림 신호가 생성되도록 구현할 수 있다(S440).

사용자는 계절 정보, 시간 정보, 요일 정보와 같은 정보를 이벤트 발생 조건으로 설정할 수 있다. 상술한 예에서, 사용자가 노면에 눈이 쌓인 상태를 감지하고자 하는 경우, 계절 또는 시간 정보에 겨울과 관련된 정보를 설정할 수 있다.

즉, 하절기에는 노면에 눈이 쌓인 상황이 발생하지 않으므로 사용자가 관심 영역으로 지정한 도로가 백색으로 변경되었다고 결정되더라도 기 설정된 계절 정보에 부합하지 않아 알림 신호가 발생하지 않게 된다.

또는 야간에 차량의 전조등에 의해 일시적으로 노면이 백색으로 변경됨에 따라 알림 신호가 생성되는 경우를 방지하기 위해 이벤트 발생 조건에 주간에만 알림 신호가 생성되도록 하면 차량 불빛에 의해 노면이 백색으로 변경되어 알림 신호가 생성되는 상황을 피할 수 있게 된다.

또한, 상술한 실시예에서는 사용자가 지정할 있는 이벤트 발생 조건이 계절 정보, 시간 정보, 요일 정보 등인 것으로 설명하였으나 이에 한정되지 않으며 사용자가 알림 신호를 제공받기 원하는 상황을 고려하여 다양하게 설정할 수 있음은 물론이다.

도 5는 본 발명의 일 실시예에 따라 타이머 조건을 추가하여 이벤트 발생을 감지하는 방법을 설명하기 위한 흐름도이다.

사용자가 관심 영역을 지정한 후 지정된 관심 영역을 관찰하는 도중(S510) 관심 영역을 구성하는 픽셀들에 기 설정된 임계값을 초과하는 색상값의 변화가 생기면 관심 영역에 화면 변화가 있는 것으로 결정된다(S520).

다만, 해당 영역에 일시적인 색상 변화가 있었음에도 불구하고 결정된 화면 변화를 기초로 알림 신호를 생성하면 오경보율이 높아질 수 있다.

예를 들어, 사용자가 신호등의 적색등 부분을 관심 영역으로 지정하고, 그 부분에 R 값의 변화량이 임계값을 초과한 경우 화면 변화가 생긴 것으로 결정되도록 한 경우, 실제 신호등의 적색등이 점등되지 않았음에도 주변광 등으로 인해 일시적으로 관심 영역의 R 값이 높아지는 경우가 발생할 수 있다.

또 다른 예로, 사용자가 도로변의 가로수 부분을 관심 영역으로 지정하고 그 부분의 G 값이 높아지면 화면 변화가 결정되도록 하여 계절 변화를 감지하고자 하는 경우, 가로수의 나뭇잎 색상이 녹색으로 변화하지 않았음에도 도로의 보행자 또는 주변광으로 인해 G 값이 높아져 알림 신호가 생성되는 경우가 발생할 수 있다.

따라서, 본 발명의 일 실시예에 따르면 타이머 조건을 추가하여 관심 영역의 화면 변화가 기 설정된 시간 이상동안 지속되는 경우 알림 신호가 생성되도록 구현할 수 있다.

예를 들어, 도로변의 가로수 부분을 관심 영역으로 설정하여 계절 변화를 감지하고자 하는 경우 관심 영역의 G값이 높아져 화면 변화가 있는 것으로 결정된 상태가 장시간 지속되는 경우 계절 변화가 있는 것으로 판단하여 사용자에게 알림 신호를 생성할 수 있다.

또는 도로 부분을 관심 영역으로 설정한 후 백색을 나타내는 색상값 성분 정보가 임계값을 초과하여 변화하면 노면에 눈이 쌓인 것으로 판단하고자 하는 경우, 주변광 또는 차량의 전조등에 의해 일시적으로 백색값이 증가하여 알림 신호가 잘못 생성되는 것을 방지하기 위해 화면이 변화된 것으로 결정된 상태가 30분 또는 1시간 이상 지속되는 경우에 한하여 알림 신호가 생성되도록 구현할 수도 있다.

한편, 도 5에서는 관심 영역에 화면 변화가 있는 것으로 결정되고 그 상태가 기 설정된 시간 이상동안 지속되는 경우 알림 신호가 생성되는 것으로 도시하였으나, 도 4에 도시한 바와 같이 이벤트 발생 조건을 추가하여 3가지 조건을 모두 만족하는 경우 알림 신호가 생성되도록 구현할 수도 있다.

예를 들어, 노면에 눈이 쌓인 상태를 감지하고자 하는 경우 ① 사용자가 설정한 관심 영역에 임계값을 초과하는 변화가 발생하여 화면 변화가 있는 것으로 결정되고, ② 촬영 시점이 사용자가 기 설정한 계절 조건인 겨울과 부합되며 ③ 그 상태가 기설정된 시간 예를 들어, 30분 또는 1시간 이상 지속되는 경우 노면에 눈이 쌓여 있다는 알림 신호가 생성되도록 구현할 수 있다.

상술한 바와 같이 이벤트 알림 신호 발생 조건에 타이머 조건을 부합하면, 관심 영역의 색상이 일시적으로 변화함에 따라 사용자가 의도하지 않은 상황에 알림 신호가 생성되는 경우를 방지할 수 있다는 효과를 달성할 수 있다.

한편, 본 발명에 따른 화면 변화 결정 방법과 복수의 프레임을 비교하여 영상 내 객체의 움직임을 감지하는 방법을 결합하여 알림 신호가 생성되도록 구현할 수도 있다.

도 6은 본 발명의 일 실시예에 따라 복수의 영상 프레임을 비교하여 영상 내 객체의 움직임을 검출하는 방법과 관심 영역에서의 색상값 변화를 통해 화면 변화를 결정하는 방법을 결합하여 이벤트 발생을 감지하는 방법을 설명하기 위한 도면이다.

화면 영역 중 배경 화면에 해당하는 부분의 변화와 보행자 또는 차량과 같은 객체의 움직임을 결합한 이벤트 발생 조건 설정이 필요한 경우가 있을 수 있다.

예를 들어, 화면 영역 내 신호등의 적색등이 점등된 상태를 감지하고, 적색등이 점등된 상태에서 차량이나 보행자의 움직임이 검출되면 알림 신호를 생성하는 경우가 이에 해당한다.

신호등의 변화는 관심 영역에 대한 색상값 변화를 통해 결정할 수 있다. 구체적으로, 화면 내에서 신호등이 있는 부분(640)을 관심 영역으로 설정하고, R값에 임계값을 초과하는 변화가 발생된 경우 적색등이 점등된 것으로 결정할 수 있다.

한편, 화면 내 객체의 움직임은 복수의 영상 프레임(610, 620, 630)을 상호 비교하는 방법으로 검출할 수 있다. 구체적으로, 임의의 시점을 기준으로 기 설정된 시간 전후의 프레임을 비교하여 픽셀의 색상값이 변경되는 부분에 객체의 움직임이 있는 것으로 검출할 수 있다.

예를 들어, 도 6에 도시된 바와 같이 차량이 움직이는 부분의 픽셀 색상값은 기 설정된 시간 이내의 프레임에서 급격하게 변화한다. 따라서, 복수의 영상 프레임을 상호 비교하고 각 영상 프레임에서 픽셀의 색상값이 상대적으로 많이 변화하는 부분을 검출하면 그 부분에 움직이는 객체가 있음을 결정할 수 있다.

상술한 화면 영역 내 객체의 움직임을 하나의 이벤트 발생 조건으로 설정하면 신호위반 하는 차량을 검출하거나, 출입이 제한된 영역에 거수자가 침입한 이벤트 등을 탐지할 수 있다는 효과를 달성할 수 있다.

한편, 상술한 실시예에서는 신호위반 탐지 등을 예로 설명하였으나 이에 한정되지 않으며 객체의 움직임 검출이 필요한 다양한 상황에 적용할 수 있다.

도 7은 본 발명의 일 실시예에 따른 감시 장치를 설명하기 위한 블록도이다.

도 7에 도시된 감시 장치(700)에는 본 실시예와 관련된 구성요소들만이 도시되어 있다. 따라서, 본 실시예와 관련된 기술분야에서 통상의 지식을 가진 자라면 도 7에 도시된 구성요소들 외에 다른 범용적인 구성요소들이 더 포함될 수 있음을 알 수 있다.

도 7에 도시된 감시 장치(700)는 관심 영역 설정부(710), 변화 발생 감지부(720) 및 알림 발생부(730) 및 통신부(740)를 포함한다.

본 발명의 일 실시예에 따른 감시 장치(700)는 관제 센터와 유/무선의 네트워크를 통해 연결될 수 있고, 기 설정된 조건을 충족하면 알림 신호를 관제 센터에 송신하도록 구현될 수 있다.

관심 영역 설정부(710)는 사용자로부터 관심 영역 설정을 입력 받기 위한 UI를 생성하고, 사용자의 입력에 따라 화면 내에서의 관심 영역을 설정한다. 생성된 UI는 유/무선 네트워크를 통해 연결된 관제 센터에 제공되며, 사용자로 하여금 관심 영역을 설정할 수 있도록 한다.

여기에서, 관심 영역이란, 화면 내에서 사용자가 변화가 있는 곳을 감지하고자 하는 영역을 의미한다. 따라서, 한 화면 내에서 사용자가 변화를 감지하고자 하는 복수의 영역이 관심 영역으로 설정될 수도 있다.

변화 발생 감지부(720)는 기본 색상값으로부터 기 설정된 임계값을 초과하는 변화가 있는 경우 사용자가 기 설정한 관심 영역 내에서 변화가 발생된 것으로 결정한다.

기본 색상값은 사용자가 관심 영역을 설정한 경우, 관심 영역에 포함된 픽셀의 현재 색상으로 설정될 수 있다. 예를 들어, 사용자가 화면에서의 도로 부분을 관심 영역으로 설정하면 도로의 색상인 흑색이 관심 영역을 구성하는 픽셀들의 기본 색상값으로 설정된다. 또는, 사용자가 신호등에서 적색이 표시되는 부분을 적색등이 소등된 상태에서 관심 영역으로 설정하면, 흑색이 관심 영역의 기본 색상값으로 설정된다.

이후, 관심 영역에 포함된 픽셀의 색상을 결정하는 R, G, B와 같은 성분 정보가 사용자가 기 설정한 임계값을 초과하여 변화하면 변화 발생 감지부(720)는 그 영역에 변화가 발생된 것으로 결정한다. 이때, 임계값은 사용자가 검출하고자 하는 대상에 따라 색상값을 구성하는 성분 정보별로 다르게 설정될 수 있다.

예를 들어, 신호등의 적색등 점등을 감지하고자 하는 경우 R 값에 대해서만 변화 임계값을 설정할 수 있고, 노면에 눈이 쌓여 백색으로 변화한 것을 감지하기 위해 R, G, B 값 각각에 임계값을 설정할 수도 있다.

알림 발생부(730)는 사용자가 기 설정한 관심 영역에 변화가 발생된 것으로 결정되고 기 설정된 이벤트 발생 조건을 충족하면 이벤트 발생 알림 신호를 생성한다.

통신부(740)는 관심 영역 설정부(710)에서 생성된 관심 영역 설정 UI를 외부에 송신하고, 사용자가 설정한 관심 영역 정보를 수신하며, 알림 발생부(730)에서 생성된 알림 신호를 외부에 송신한다.

감시 장치(700)가 관심 영역에서의 화면 변화를 결정하고, 기 설정된 이벤트 발생 조건과 결합하여 사용자에게 알림 신호를 제공하는 구체적인 방법은 이미 기재한 내용과 동일하므로 중복되는 설명은 생략한다.

상술한 바와 같이 관심 영역의 색상값 변화를 통해 배경화면의 변화를 감지하고, 이를 복합적인 이벤트 발생 조건과 결합시킴으로써 오경보 발생을 억제할 수 있다는 효과를 달성할 수 있다.

도 8은 본 발명의 일 실시예에 따른 서버 장치를 설명하기 위한 도면이다.

본 발명의 일 실시예에 따른 서버 장치(800)는 감시 장치(700)로부터 촬영 영상을 수신하고, 영상 내에서 화면 변화를 검출하여 이벤트 발생 여부를 감지할 수 있다.

상술한 동작을 수행하기 위한 본 발명의 일 실시예에 따른 서버 장치(800)는 통신부, 관심 영역 설정부, 감지부 및 알림 생성부를 포함한다.

서버 장치(800)에 포함된 구성 중 도 7에 도시된 구성과 중복되는 구성은 동일한 동작을 수행한다. 도 8에 도시한 감시 장치(700)의 경우 단순히 감시 영역에 대한 촬영 영상을 서버 장치(800)로 전송하며, 촬영된 영상에서 이벤트를 검출하는 동작은 서버 장치(800)에서 이루어지도록 구현할 수도 있다.본 실시예에서는 하나의 감시 장치(700)로부터 촬영 영상을 수신하는 것으로 도시하였으나, 이에 한정되지 않으며 복수의 감시 장치로부터 촬영 영상을 수신 받아 이벤트 발생을 감지하도록 구현할 수도 있다.

도 9는 본 발명의 일 실시예에 따른 감시 장치(900)를 설명하기 위한 도면이다.

본 발명의 일 실시예에 따른 감시 장치(900)는 도 9에 도시된 구성을 포함할 수 있다.

구체적으로, 감시 장치(900)는 명령어를 수행하는 프로세서(910), 메모리(920), 이벤트 감지 방법을 실행하기 위한 프로그램을 저장하는 저장 장치(930), 및 감시 장치(900)와 연결된 장치와 데이터 송수신을 하기 위한 네트워크 인터페이스(NIC)(940)을 포함할 수 있다.

저장 장치(930)에는 관심 영역에 대한 기본 색상값을 설정하는 단계, 상기 기본 색상값으로부터 기 설정된 임계값을 초과하는 색상값의 변화가 있는 경우 상기 관심 영역에 변화가 발생된 것으로 결정하는 단계 및 상기 관심 영역에 변화가 발생된 것으로 결정되고, 기 설정된 이벤트 발생 조건을 충족하면 알림 신호를 생성하는 단계를 수행할 수 있는 프로그램이 저장될 수 있으며, 상술한 프로그램이 메모리(920)에 로드된 후 프로세서(910)를 통해 수행될 수 있다.

도 9에 도시된 실시예에서는 이벤트 감지 방법을 수행하는 주체가 감시 장치인 것으로 설명하였으나, 감시 장치가 단순히 감시 영역에 대한 촬영 영상만을 획득하고, 획득된 영상을 서버 장치에 전송하여 서버 장치에서 이벤트 감지 방법이 수행되도록 구현하는 경우, 서버 장치가 도 9에 도시된 구성을 포함하도록 구현할 수도 있다.

마찬가지로, 서버 장치가 도 9에 도시된 구성을 포함하는 경우 각 구성은 상술한 기능을 수행하게 된다.

한편, 상술한 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 또한, 상술한 방법에서 사용된 데이터의 구조는 컴퓨터로 읽을 수 있는 기록매체에 여러 수단을 통하여 기록될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드 디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.

본 실시예와 관련된 기술 분야에서 통상의 지식을 가진 자는 상기된 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 방법들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims

화면에 표시되는 영상의 배경 영역과 객체를 감지하는 단계;
상기 영상의 복수의 프레임 간 차이를 이용하여 상기 영상 내 객체의 움직임을 검출하는 단계;
상기 배경 영역 중 일부를 관심 영역으로 설정하는 단계;
상기 관심 영역에 대한 기본 색상값을 설정하는 단계;
상기 기본 색상값으로부터 기 설정된 임계값을 초과하는 색상값의 변화가 있는 경우 상기 관심 영역에 변화가 발생된 것으로 결정하는 단계; 및
상기 관심 영역에 발생된 변화와 상기 검출된 객체의 움직임이 기 설정된 이벤트 발생 조건을 충족하는 경우에 한하여 알림 신호를 생성함으로써 오경보 발생을 억제하는 단계를 포함하는 이벤트 발생 감지 방법.
제1항에 있어서,
상기 기 설정된 임계값은 상기 색상값을 구성하는 각 성분 정보 각각에 대하여 설정되는 이벤트 발생 감지 방법.
제2항에 있어서,
상기 기 설정된 임계값은,
상기 색상값을 구성하는 성분 정보 각각에 대하여 상이한 값으로 설정되는 이벤트 발생 감지 방법.
제1항에 있어서,
상기 기본 색상값 및 기 설정된 임계값은 상기 관심 영역에 포함된 픽셀 집합에 대한 평균 색상값 또는 대표 색상값으로 설정되는 이벤트 발생 감지 방법.
제1항에 있어서,
상기 이벤트 발생 조건은,
계절 정보, 시간 정보, 요일 정보 중 적어도 하나를 포함하고,
상기 알림 신호를 생성하는 단계는,
기 설정된 계절, 시간 또는 요일에 상기 관심 영역에서 화면 변화가 발생된 것으로 결정되면 상기 알림 신호를 생성하는 이벤트 발생 감지 방법.
제1항에 있어서,
상기 알림 신호를 생성함으로써 오경보 발생을 억제하는 단계는,
임의의 시점을 기준으로 기 설정된 시간 전후의 프레임을 비교하여 화면 내 객체의 움직임을 검출하는 단계; 및
상기 화면 내 객체의 움직임이 검출되면 상기 기 설정된 이벤트 발생 조건을 충족한 것으로 판단하고 상기 알림 신호를 생성하는 단계를 포함하는 이벤트 발생 감지 방법.
제1항에 있어서,
상기 관심 영역에 변화가 발생된 것으로 결정하는 단계는,
상기 기 설정된 임계값을 초과하는 색상값의 변화가 기 설정된 시간 이상 동안 유지되면 상기 관심 영역에 변화가 발생된 것으로 결정하는 단계를 포함하는 이벤트 발생 감지 방법.
제1항에 있어서,
외부로부터 날씨 정보를 수신하는 단계를 더 포함하고,
상기 알림 신호를 생성함으로써 오경보 발생을 억제하는 단계는,
기 설정된 날씨에 화면 변화가 발생된 것으로 결정되면 상기 알림 신호를 생성하는 단계를 포함하는 이벤트 발생 감지 방법.
화면에 표시되는 영상의 배경 영역과 객체가 감지되면, 상기 배경 영역 중 일부를 관심 영역으로 설정하기 위한 UI(User Interface)를 생성하고 사용자 입력에 따라 관심 영역을 설정하는 관심 영역 설정부;
상기 관심 영역의 기본 색상값으로부터 기 설정된 임계값을 초과하는 변화가 있는 경우 상기 관심 영역에 변화가 발생된 것으로 결정하는 변화 발생 감지부;
상기 영상의 복수의 프레임 간 차이를 이용하여 검출되는 상기 영상 내 객체의 움직임과 상기 관심 영역에 발생된 변화가 기 설정된 이벤트 발생 조건을 충족하는 경우에 한하여 알림 신호를 생성함으로써 오경보 발생을 억제하는 알림 생성부; 및
상기 UI를 전송하여 관심 영역 설정 입력을 수신하고, 상기 알림 생성부에서 생성된 알림 신호를 전송하는 통신부를 포함하는 감시 장치.
제9항에 있어서,
상기 기 설정된 임계값은 색상 값을 구성하는 성분 정보 각각에 대하여 설정되는 감시 장치.
제10항에 있어서,
상기 기 설정된 임계값은,
상기 색상값을 구성하는 성분 정보 각각에 대하여 상이한 값으로 설정되는 감시 장치.
제9항에 있어서,
상기 이벤트 발생 조건은,
계절 정보, 시간 정보, 요일 정보 중 적어도 하나를 포함하고,
상기 알림 생성부는,
상기 기 설정된 계절, 시간 또는 요일에 상기 관심 영역에서 화면 변화가 발생된 것으로 결정되면 상기 알림 신호를 생성하는 감시 장치.
제9항에 있어서,
상기 알림 생성부는,
임의의 시점을 기준으로 기 설정된 시간 전후의 프레임을 비교하여 화면 내 객체의 움직임이 검출되면 기 설정된 이벤트 발생 조건을 충족한 것으로 판단하고 상기 알림 신호를 생성하는 감시 장치.
제9항에 있어서,
상기 변화 발생 감지부는,
상기 기 설정된 임계값을 초과하는 색상값의 변화가 기 설정된 시간 이상 동안 유지되면 상기 관심 영역에 변화가 발생된 것으로 결정하는 감시 장치.
감시 장치로부터 영상을 수신하는 통신부;
화면에 표시되는 상기 영상의 배경 영역과 객체가 감지되면, 상기 배경 영역 중 일부를 관심 영역으로 설정하기 위한 UI를 생성하여 사용자 입력에 따라 관심 영역을 설정하는 관심 영역 설정부;
상기 관심 영역의 기본 색상값으로부터 기 설정된 임계값을 초과하는 변화가 있는 경우 상기 관심 영역에 변화가 발생된 것으로 결정하는 변화 발생 감지부; 및
상기 영상의 복수의 프레임 간 차이를 이용하여 검출되는 상기 영상 내 객체의 움직임과 상기 관심 영역에 발생된 변화가 기 설정된 이벤트 발생 조건을 충족하면 알림 신호를 생성함으로써 오경보 발생을 억제하는 알림 생성부;를 포함하는 서버 장치.