KR102428127B1 - 움직임 영역 검출 장치 및 방법 - Google Patents

Abstract

본 발명의 일 실시예는 입력 영상 프레임을 축소시켜 축소 영상 프레임을 생성하는 영상 처리부; 상기 축소 영상 프레임의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전 축소 영상 프레임의 대응 픽셀에 대한 관계값과 비교함으로써 제1 움직임 영역을 검출하는 제1 움직임 영역 검출부; 상기 축소 영상 프레임과 상기 이전 축소 영상 프레임 간의 차분을 기초로 제2 움직임 영역을 검출하는 제2 움직임 영역 검출부; 및 상기 제1 움직임 영역과 상기 제2 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성하는 움직임 영역 생성부;를 포함하는 움직임 영역 검출 장치를 개시한다.

Description

움직임 영역 검출 장치 및 방법{Apparatus and method detecting motion mask}

본 발명의 실시예는 움직임 영역 검출 장치 및 방법에 관한 것이다.

일반적인 영상 처리 장치의 영상 취득/표현 밝기 범위는 사람의 시각으로 실제 자연 영상을 볼 때 인지하는 밝기 범위에 비해 제한적인 범위를 가진다. 따라서 디지털 영상 처리 장치로 영상을 취득하거나 재생하는 경우 한정적인 범위 내에서 화소의 밝기 및 컬러를 나타낼 수 밖에 없다. 특히, 영상 취득 환경이 역광이나 어두운 실내의 일부분에 밝은 광원이 존재하는 등과 같이 밝은 영역과 어두운 영역이 동시에 있을 경우, 피사체의 정보 및 계조나 컬러가 손상된다. 이를 개선하기 위해 사용되는 디지털 화상 처리 기법이 광역 다이나믹 레인지 이미징이다.

광역 다이내믹 레인지 영상은 여러 장의 로우 다이내믹 레인지 영상에 가중치를 두어 영상을 융합함으로써 획득된다. 그러나, 로우 다이내믹 영상을 취득하는 과정에서 피사체의 움직임이나 배경의 변화 등으로 인해 상겹침 현상 즉 움직임이 발생할 수 있다. 따라서 상겹침 현상의 원인이 되는 로우 다이내믹 레인지 영상 사이에서의 피사체 움직임, 배경 변화의 검출 및 보상이 필요하다.

광역 다이내믹 레인지 이미징 시에 상겹침 현상 제거를 위한 종래의 방법은 분산 기법의 움직임 검출, 엔트로피 기반의 움직임 검출, 히스토그램 기반의 움직임 검출 방법 등이 있다.

본 발명의 실시예들은 움직임 영역 검출 장치 및 방법을 제공한다. 본 실시예들이 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 이하의 실시예들로부터 또 다른 기술적 과제들이 유추될 수 있다.

본 발명의 실시예에 따른 움직임 영역 검출 장치는 입력 영상 프레임을 축소시켜 축소 영상 프레임을 생성하는 영상 처리부; 상기 축소 영상 프레임의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전 축소 영상 프레임의 대응 픽셀에 대한 관계값과 비교함으로써 제1 움직임 영역을 검출하는 제1 움직임 영역 검출부; 상기 축소 영상 프레임과 상기 이전 축소 영상 프레임 간의 차분을 기초로 제2 움직임 영역을 검출하는 제2 움직임 영역 검출부; 및 상기 제1 움직임 영역과 상기 제2 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성하는 움직임 영역 생성부;를 포함할 수 있다.

본 실시예에서, 상기 제1 움직임 영역 검출부는 상기 주변 픽셀들의 최대 픽셀값과 최소 픽셀값의 차이가 기 설정된 임계값을 초과하는 픽셀을 상기 제1 움직임 영역에서 제외시킬 수 있다.

본 실시예에서, 상기 제1 움직임 영역 검출부는 각 픽셀에 대한 복수의 관계값들과 상기 대응 픽셀에 대한 복수의 관계값들의 일치 개수가 기 설정된 임계값 이하인 픽셀들의 집합을 상기 제1 움직임 영역으로 검출할 수 있다.

본 실시예에서 상기 제2 움직임 영역 검출부는 상기 차분이 기 설정된 임계값 이상인 픽셀들의 집합 영역을 제2 움직임 영역으로 검출할 수 있다.

본 실시예에서 상기 움직임 영역 생성부는 상기 제1 움직임 영역과 상기 제2 움직임 영역 간의 공통된 영역 또는 상기 제1 움직임 영역과 상기 제2 움직임 영역을 모두 포함하는 영역을 최종 움직임 영역으로 생성할 수 있다.

본 실시예에서 상기 영상 처리부는 서로 다른 노출로 획득된 대응하는 복수의 입력 영상 프레임들을 축소시켜 복수의 축소 영상 프레임들을 생성하고, 상기 제1 움직임 영역 검출부는, 상기 복수의 축소 영상 프레임들 각각에 대해 제1 움직임 영역을 검출하고, 상기 2 움직임 영역 검출부는, 상기 복수의 축소 영상 프레임들 각각에 대해 제2 움직임 영역을 검출하고, 상기 움직임 영역 생성부는 상기 복수의 축소 영상 프레임들 각각에 대해 제3 움직임 영역을 생성하고, 상기 복수의 축소 영상 프레임들의 제3 움직임 영역들 중 적어도 일부를 포함하는 최종 움직임 영역을 생성할 수 있다.

본 실시예에서 상기 복수의 입력 영상 프레임들은 제1 노출로 촬영된 제1 영상 프레임 및 제2 노출로 촬영된 제2 영상 프레임을 포함하고, 상기 움직임 영역 검출 장치는 상기 제1 영상 프레임에 대해 생성된 제3 움직임 영역 및 상기 제2 영상 프레임에 대해 생성된 제3 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성할 수 있다.

본 발명의 실시예에 따른 움직임 영역 검출 방법은 입력 영상 프레임을 축소시켜 축소 영상 프레임을 생성하는 단계; 상기 축소 영상 프레임의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전 축소 영상 프레임의 대응 픽셀에 대한 관계값과 비교함으로써 제1 움직임 영역을 검출하는 단계; 상기 축소 영상 프레임과 상기 이전 축소 영상 프레임 간의 차분을 기초로 제2 움직임 영역을 검출하는 단계; 및 상기 제1 움직임 영역과 상기 제2 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성하는 단계;를 포함할 수 있다.

본 실시예에서 상기 제1 움직임 영역 검출 단계는 상기 주변 픽셀들의 최대 픽셀값과 최소 픽셀값의 차이가 기 설정된 임계값을 초과하는 픽셀을 상기 제1 움직임 영역에서 제외시키는 단계;를 포함할 수 있다.

본 실시예에서 상기 제1 움직임 영역 검출 단계는 각 픽셀에 대한 복수의 관계값들과 상기 대응 픽셀에 대한 복수의 관계값들의 일치 개수가 기 설정된 임계값 이하인 픽셀들의 집합을 상기 제1 움직임 영역으로 검출하는 단계;를 포함할 수 있다.

본 실시예에서 상기 제2 움직임 영역 검출 단계는 상기 차분이 기 설정된 임계값 이상인 픽셀들의 집합 영역을 제2 움직임 영역으로 검출하는 단계;를 포함할 수 있다.

본 실시예에서 상기 움직임 영역 생성 단계는 상기 제1 움직임 영역과 상기 제2 움직임 영역 간의 공통된 영역 또는 상기 제1 움직임 영역과 상기 제2 움직임 영역을 모두 포함하는 영역을 최종 움직임 영역으로 생성하는 단계;를 포함할 수 있다.

본 실시예에서 상기 영상 처리 단계는 서로 다른 노출로 획득된 대응하는 복수의 입력 영상 프레임들을 축소 시켜 복수의 축소 영상 프레임들을 생성하는 단계를 포함하고, 상기 제1 움직임 영역 검출 단계는 상기 복수의 축소 영상 프레임들 각각에 대해 제1 움직임 영역을 검출하는 단계를 포함하고, 상기 제2 움직임 영역 검출 단계는 상기 복수의 축소 영상 프레임들 각각에 대해 제2 움직임 영역을 검출하는 단계를 포함하고, 상기 움직임 영역 생성 단계는 상기 복수의 축소 영상 프레임들 각각에 대해 제3 움직임 영역을 생성하고, 상기 복수의 축소 영상 프레임들의 제3 움직임 영역 들 중 적어도 일부를 최종 움직임 영역을 생성하는 단계;를 포함할 수 있다.

본 실시예에서 상기 복수의 입력 영상 프레임들은 제1 노출 정도로 촬영된 제1 영상 프레임 및 제2 노출 정도로 촬영된 제2 영상 프레임을 포함하고, 상기 움직임 영역 생성 단계는 상기 제1 영상 프레임에 대해 생성된 제3 움직임 영역 및 상기 제2 영상 프레임에 대해 생성된 제3 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성하는 단계;를 포함할 수 있다.

이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체가 더 제공된다.

전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해 질 것이다.

본 발명의 실시예들은 움직임 영역 검출 장치 및 방법은 콘트라스트가 크지 않은 영역에 존재하는 움직임 영역을 더 잘 검출할 수 있고, 고스트 현상(ghost artifact)없는 영상을 생성할 수 있다.

도 1은 본 발명의 일 실시예에 따른 감시 시스템을 개략적으로 도시한 것이다.
도 2는 도 1의 서버(20)에 구비될 수 있는 움직임 영역 검출 장치(100)의 구성을 나타낸 블록도이다.
도 3은 도 1의 서버(20)에 구비될 수 있는 움직임 영역 검출 장치(200)의 구성을 나타낸 블록도이다.
도 4 및 도 5는 본 발명의 실시예에 따른 움직임 영역 검출 방법을 나타내는 흐름도이다.
도 6는 고스트 현상(ghost artifact)이 발생한 영상 프레임의 일 예이다.
도 7은 본 발명의 실시예에 따른 움직임 영역 검출 방법을 설명하기 위한 도면이다.
도 8a는 본 발명의 실시예에 따른 움직임 영역 검출 장치(200)에 의해 검출된 움직임 영역의 일 예이다.
도 8b 및 도 8c는 움직임 영역 생성부(140, 240)에 의해 생성된 움직임 영역의 일 예이다.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다.

이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.

이하의 실시예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다.

이하의 실시예에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는한, 복수의 표현을 포함한다.

이하의 실시예에서, 포함하다 또는 가지다 등의 용어는 명세서 상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징을 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다.

어떤 실시예가 달리 구현 가능한 경우에 특정한 공정 순서는 설명되는 순서와 다르게 수행될 수도 있다. 예를 들어, 연속하여 설명되는 두 공정이 실질적으로 동시에 수행될 수도 있고, 설명되는 순서와 반대의 순서로 진행될 수 있다.

도 1은 본 발명의 일 실시예에 따른 감시 시스템을 개략적으로 도시한 것이다.

도 1을 참조하면, 본 발명의 일 실시예에 따른 감시 시스템(1)은 카메라(10), 서버(20), 저장장치(30) 및 단말(40)을 포함한다. 본 실시예의 특징이 흐려지는 것을 방지하기 위하여 도 1에는 본 실시예와 관련된 구성요소들만을 도시하였다. 따라서, 도 1에 도시된 구성요소들 외에 다른 범용적인 구성요소들이 더 포함될 수 있음을 본 실시예와 관련된 기술분야에서 통상의 지식을 가진 자라면 이해할 수 있다.

도 1을 참조하면, 카메라(10)는 감시지역에 대한 영상을 촬영하여 서버(20)에 전송하고, 서버(20)는 수신한 영상을 저장 장치(30)에 기록하거나 단말(40)에 전송한다. 단말(40)은 저장 장치(30)로부터 영상을 수신할 수도 있다. 카메라(10), 서버(20), 저장 장치(30), 및 단말(40)은 네트워크를 통해 연결될 수 있다.

한편, 본 발명의 일 실시예에 따른 카메라(10)는 저장 장치(30)에 직접 연결될 수도 있다. 예를 들어, 카메라(10)에 의해 촬영된 영상은 유선 또는 무선 네트워크를 통해 저장 장치(30)에 직접 전송될 수 있고, 저장 장치(30)는 수신한 영상을 저장할 수 있다. 또는, 카메라(10)는 저장 장치(30)로부터 저장 장치(30)에 저장된 데이터를 획득할 수 있다.

본 발명의 일 실시예에 따른 카메라(10)는 소정의 노출 정도로 촬영하고자 하는 영역에 대한 영상 신호를 획득한다. 카메라(10)는 감시 또는 보안의 목적으로 촬영 영역을 실시간으로 촬영하는 감시 카메라일 수 있다. 카메라(10)는 팬틸트(pan-tilt) 장비가 부착되어 패닝(panning)과 틸팅(tilting)이 가능하며 렌즈의 줌 배율의 조절이 가능한 PTZ 카메라일 수 있다. 도 1에는 카메라(10)가 1대만 도시되었으나 이는 설명의 편의를 위한 것이며, 본 발명의 일 실시예에 다른 감시 시스템은 복수의 카메라를 포함할 수 있고, 각 카메라는 각각 소정의 노출 정도로 동일한 감시 영역을 촬영할 수 있다.

본 발명의 일 실시예에 따른 서버(20)는 카메라(10)로부터 영상을 수신하고, 수신된 영상을 출력하고, 수신된 영상에 대한 헤더(header)를 생성하고, 단말(40)의 요청에 따라 카메라(10) 또는 저장 장치(30)를 제어하는 등의 각종 제어를 수행할 수 있다. 서버(20)와 관련한 내용은 도 2 및 도 3을 참조하여 상세히 설명할 것이다.

저장 장치(30)는 영상을 저장할 수 있는 장치로, 하드디스크 또는 SSD(Solid State Disc) 중 하나일 수 있다. 그러나 본 발명의 실시예들이 이에 한정되지 않으며, 저장 장치(30)는 하드디스크 또는 SSD 외에 데이터를 저장할 수 있는 다른 저장매체일 수도 있음은 당업자에게 자명하다 할 것이다.

단말(40)은 유무선 통신 환경에서 서버(20) 및/또는 저장 장치(30)와 데이터를 주고받을 수 있는 장치를 의미한다. 단말(40)은 사용자의 퍼스널 컴퓨터일 수도 있고, 휴대용 단말일 수도 있다. 도 1에서는 단말(40)이 퍼스널 컴퓨터로 도시되었지만, 본 발명의 사상은 이에 제한되지 아니하며, 데이터 통신이 가능한 인터페이스를 탑재한 단말은 제한 없이 차용될 수 있다. 단말(40)은 화면을 표시하는 표시부 및 사용자로부터 데이터를 입력받는 입력 장치를 구비한다. 입력 장치는 예를 들어, 키보드, 마우스, 트랙볼, 마이크, 버튼, 터치패널 등을 포함할 수 있으나, 이에 한정하지 않는다.

도 2는 도 1의 서버(20)에 구비될 수 있는 움직임 영역 검출 장치(100)의 구성을 나타낸 블록도이다.

본 발명의 일 실시예에 따른 움직임 영역 검출 장치(100)는 적어도 하나 이상의 프로세서에 해당하거나, 적어도 하나 이상의 프로세서를 포함할 수 있다. 이에 따라, 움직임 영역 검출 장치(100)는 마이크로 프로세서나 범용 컴퓨터 시스템과 같은 다른 하드웨어 장치에 포함된 형태로 구동될 수 있고, 서버에 탑재될 수 있다.

도 2를 참조하면, 본 발명의 일 실시예에 따른 움직임 영역 검출 장치(100)는 영상 처리부(110), 제1 움직임 영역 검출부(120), 제2 움직임 영역 검출부(130), 움직임 영역 생성부(140), 영상 생성부(미도시)를 포함할 수 있다.

영상 처리부(110)는 카메라를 통해 순차적으로 입력되는 영상 프레임을 축소 시켜 축소 영상 프레임을 생성한다. 영상 처리부(110)는 프레임 메모리(미도시) 등에 영상 프레임을 저장할 수 있다.

제1 움직임 영역 검출부(120)는 현재 영상 프레임 내의 전체 또는 일부 픽셀들 간의 픽셀값 관계를 나타내는 관계값을 실시간으로 산출하고, 현재 영상 프레임의 관계값과 이전 영상 프레임의 관계값을 비교하여 서로 상이한 관계값을 가지는 영역을 움직임 영역으로 검출할 수 있다. 제1 움직임 영역 검출부(120)는 현재 축소 영상 프레임의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계 또는 각 픽셀의 주변 픽셀들 간의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전 축소 영상 프레임의 대응 픽셀에 대한 관계값과 비교함으로써 제1 움직임 영역을 검출할 수 있다. 제1 움직임 영역 검출부(120)는 현재 영상 프레임에 포함된 픽셀값에 대해서 다양한 방법으로 픽셀값 관계를 산출할 수 있다.

여기서, 현재 축소 영상 프레임은 시간상으로 현재 입력된 영상 프레임을 축소시킨 영상 프레임이고, 이전 축소 영상 프레임은 시간상으로 이전에 입력된 영상 프레임 중 하나를 축소 시킨 영상 프레임을 말하고, 관계값은 영상 프레임 내의 일부 영역 또는 전체 영역에 포함된 픽셀들의 픽셀값 사이의 관계를 나타내는 값으로, 상기 영역에 포함된 픽셀 중에서 하나의 대표 픽셀의 픽셀값과 상기 대표 픽셀의 주변 픽셀들의 픽셀값 사이의 증감 여부, 증감 정도, 또는 대표 픽셀의 픽셀값에 대한 주변 픽셀들의 비율일 수 있다. 또한 대응 픽셀은 영상 프레임 내에서 동일한 위치에 위치한 픽셀을 말한다.

또한 제1 움직임 영역 검출부(120)는 현재 축소 영상 프레임에서 대표 픽셀의 주변 픽셀들의 픽셀값들 중에서 최대 픽셀값과 최소 픽셀값의 차이가 기 설정된 임계값을 초과하는지 여부를 판단함으로써 유효하지 않은 픽셀값을 가지는 픽셀을 검출할 수 있으며, 판단 결과, 초과하는 경우, 해당 대표 픽셀을 제1 움직임 영역에서 제외 시킬수 있다.

관계값을 산출하는 동작을 좀더 자세히 설명하면, 다음과 같다. 제1 움직임 영역 검출부(120)는 현재 축소 영상 프레임에 포함된 대표 픽셀을 중심으로 하여 좌우방향 및 상하방향의 픽셀들을 주변 픽셀로 선택하고, 선택된 4개의 주변 픽셀들 중 랜덤하게 2개의 픽셀을 선택하여, 선택된 픽셀의 픽셀값의 차이를 산출할 수 있다. 4개의 주변 픽셀들 중에서 2개의 주변 픽셀의 조합을 선택하는 경우의 수는 총 6 (6=4X3/2)이므로, 상기의 과정을 통해 6개의 관계값이 산출될 수 있다. 이전 축소 영상 프레임에 대해서도 동일한 과정을 수행하여 이전 축소 영상 프레임에 대해서도 6개의 관계값이 산출되게 된다. 이렇게 산출된 현재 축소 영상 프레임의 대표 픽셀의 관계값을 이전 축소 영상 프레임의 대응 픽셀의 관계값과 비교한 결과, 상이한 경우, 상기 대표 픽셀을 움직임 영역에 포함시킬 수 있다. 다른 실시예에서, 제1 움직임 영역 검출부(120)는 관계값들의 일치 개수가 기 설정된 임계값 이하인 경우 대표 픽셀을 움직임 영역에 포함시킬 수 있다. 제1 움직임 영역 검출부(120)는 현재 축소 영상 프레임에 포함되는 모든 픽셀에 대해서 상기와 같은 과정을 수행함으로써 현재 축소 영상 프레임에 포함된 움직임 영역을 검출할 수 있다.

다른 실시예에서, 제1 움직임 영역 검출부(120)는 현재 영상 프레임에 포함된 픽셀들의 픽셀값 간의 차이를 관계값으로 산출하거나 현재 영상 프레임에 포함된 픽셀들의 픽셀값 크기 순서를 관계값으로 산출할 수도 있다.

제2 움직임 영역 검출부(130)는 현재 축소 영상 프레임과 이전 축소 영상 프레임 간의 차분을 기초로 제2 움직임 영역을 검출할 수 있다. 제2 움직임 영역 검출부(130)는 현재 축소 영상 프레임과 이전 축소 영상 프레임 간의 차분이 0이 아니거나, 기 설정된 임계값 이상인 픽셀을 제2 움직임 영역으로 검출할 수 있다.

이와 같이 움직이는 객체는 이전 영상 프레임 내에서의 해당 객체의 위치와 현재 영상 프레임 내에서의 해당 객체의 위치가 변경되므로, 움직이는 객체에 대한 영역을 검출하기 위해서 제1 움직임 영역 검출부(120) 및 제2 움직임 영역 검출부(130)는 현재 입력된 영상 프레임과 이전에 입력된 영상 프레임 간을 비교하여 상이한 픽셀값을 가지는 영역을 움직임 영역으로 검출할 수 있다. 움직임 영역 생성부(140)는 인접된 축소 영상 프레임에 포함된 픽셀들의 픽셀값 관계를 나타내는 관계값을 이용하여 검출된 제1 움직임 영역과 인접된 축소 영상 프레임들 간의 차분을 이용하여 검출된 제2 움직임 영역 중 적어도 일부를 포함하는 움직임 영역을 최종 움직임 영역으로 생성할 수 있다. 움직임 영역 생성부(140)는 제1 움직임 영역과 제2 움직임 영역을 모두 포함하는 영역을 최종 움직임 영역으로 생성하거나, 제1 움직임 영역과 제2 움직임 영역의 공통된 영역을 최종 움직임 영역으로 생성할 수 있다. 움직임 영역 생성부(140)는 제1 움직임 영역과 제2 움직임 영역에 각각 가중치를 두어 합한 움직임 영역을 최종 움직임 영역으로 생성할 수도 있다. 여기서, 움직임 영역 생성부(140)를 통해 제1 움직임 영역과 제2 움직임 영역을 모두 포함하는 영역을 최종 움직임 영역으로 생성함으로써, 누락됨이없이 움직임 영역을 검출할 수 있게 된다.

영상 생성부(미도시)는 최종 움직임 영역을 배경 영상에 융합하여 최종 영상 프레임을 생성할 수 있다. 배경 영상은 최종 움직임 영역을 생성하기 위해 이용된 복수의 영상 프레임들 중 선택된 하나의 영상 프레임일 수 있다. 영상 생성부는 최종 움직임 영역을 배경 영상의 해상도 또는 영상 사이즈로 변환한 후 배경 영상과 융합할 수 있다. 상기 최종 움직임 영역 내의 픽셀값을 상기 복수의 영상 프레임들의 동일 영역 내의 픽셀값들과 융합한 픽셀값으로 대체함으로써, 최종 영상 프레임을 생성할 수 있다. 영상 생성부(미도시)는 검출된 움직임 영역에 대해서 시인성이 높아질 수 있도록 획득된 복수의 영상 프레임들의 동일 영역에 대한 픽셀값을 융합하게 된다. 영상 생성부(미도시)는 복수의 영상 프레임 각각에 포함되는 각 픽셀의 명도(lumiosity), 채도(saturation), 대비(contrast)에 가중치를 부여한 값을 계산하고 계산된 값에 가중치를 부여한 값으로 움직임 영역의 데이터를 대체함으로써, 움직임 영역의 시인성을 높일 수 있다. 이 외에도 가장 시인성이 좋은 영상 프레임을 생성하는 방법은 다양하게 구현될 수 있는데, 당업자라면 충분히 알 수 있는 공지의 기술이므로, 상세한 설명을 생략하겠다.

움직임 검출 장치가 오직 영상 프레임 간의 차분만을 이용하여 움직임 영역을 검출하는 경우, 촬영 시점이 다름으로 인해 상이한 픽셀값을 가지는 픽셀을 단순히 움직임이 있는 영역으로 검출하는 문제점이 있었다. 이러한 문제점을 해결하기 위해서, 본 발명의 일 실시예에 따른 움직임 영역 검출 장치(100)는 영상 프레임에 포함된 픽셀들의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전 영상 프레임의 대응 픽셀에 대한 관계값과 비교하여 상이한 관계값을 가지는 픽셀을 움직임 영역으로 검출하는 과정을 더 수행하고, 픽셀값이 상이한 영역 뿐만 아니라 상기 관계값의 비교를 통한 움직임 영역을 고려한 움직임 영역을 최종 움직임 영역으로 검출하게 된다.

또한, 본 발명의 일 실시예에 따른 움직임 영역 검출 장치(100)는 영상 프레임을 축소 시킨 축소 영상 프레임들을 통해 움직임 영역을 검출하는데, 이러한 구성을 통해, 영상 프레임에 포함된 노이즈를 제거할 수 있으며, 관계값의 산출 및 비교의 횟수가 줄어 들게 되고, 관계값의 산출 및 비교를 위해서 필요한 시간 및 자원이 줄어 들게 된다.

도 3은 도 1의 서버(20)에 구비될 수 있는 움직임 영역 검출 장치(200)의 구성을 나타낸 블록도이다. 본 발명의 다른 일 실시예에 따른 움직임 영역 검출 장치(200)는 도 2의 움직임 영역 검출 장치(100)와 달리 동일한 감시 영역에 대해서 노출 정도가 다른 복수의 영상 프레임들을 획득하여 상기 복수의 영상 프레임들 각각에 대하여 움직임 영역을 검출함으로써, 최종 움직임 영역을 검출할 수 있다.

도 3을 참조하면, 본 발명의 다른 일 실시예에 따른 움직임 영역 검출 장치(200)는 제1 영상 처리부(210), 제2 영상 처리부(211), 제1 움직임 영역 검출부(220), 제2 움직임 영역 검출부(230), 움직임 영역 생성부(240), 영상 생성부(미도시)를 포함할 수 있다.

제1 영상 처리부(220)는 제1 노출로 촬영되어 순차적으로 입력되는 영상 프레임을 축소 시켜 축소 영상 프레임을 생성한다. 제2 영상 처리부(211)는 제2 노출로 촬영되어 순차적으로 입력되는 영상 프레임을 축소 시켜 축소 영상 프레임을 생성한다.

설명의 편의를 위해서, 제1 노출로 촬영된 영상 프레임을 제1 영상 프레임, 및 제1 영상 처리부(220)를 통해 생성된 축소 영상 프레임을 제1 축소 영상 프레임이라 하고, 제2 노출로 촬영된 영상 프레임을 제2 영상 프레임 및 제2 영상 처리부(221)를 통해 생성된 축소 영상 프레임을 제2 축소 영상 프레임이라 한다. 제1 및 제2는 서로 다른 노출로 촬영된 영상을 구분하기 위한 것이다.

제1 움직임 영역 검출부(220)는 상기 제1 영상 처리부 및 제2 영상 처리부를 통해 생성된 복수의 축소 영상 프레임들 각각에 대해 제1 움직임 영역을 검출한다. 제1 움직임 영역 검출부(220)는 현재 입력된 제1 영상 프레임(이하, ‘제1 현재 영상 프레임’이라 함)을 축소한 축소 영상 프레임(이하, ‘제1 현재 축소 영상 프레임’이라 함)의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전에 입력된 제1 영상 프레임(이하, ‘제1 이전 영상 프레임’이라 함)을 축소한 축소 영상 프레임(이하, ‘제1 이전 축소 영상 프레임’이라 함)의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값과 비교함으로써, 제1 노출에 대한 제1 움직임 영역을 검출한다. 제1 움직임 영역 검출부(220)는 현재 입력된 제2 영상 프레임(이하, ‘제2 현재 영상 프레임’이라 함)을 축소한 축소 영상 프레임(이하, 제2 현재 축소 영상 프레임’이라 함)의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전에 입력된 제2 영상 프레임(이하, ‘제2 이전 영상 프레임’이라 함)을 축소한 축소 영상 프레임(이하, ‘제2 이전 축소 영상 프레임’이라 함)의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값과 비교함으로써, 제2 노출에 대한 제1 움직임 영역을 검출한다.

도 7은 제1 움직임 영역 검출부(220), 제2 움직임 영역 검출부(230), 움직임 영역 생성부(240)의 일 예를 개략적으로 도시한 블록도이다.

도 7과 함께 제1 움직임 영역 검출부(220)의 동작을 설명하면, 다음과 같다. 제1 움직임 영역 검출부(220)는 제1 노출로 촬영된 영상 프레임에 대한 움직임 영역을 검출하는 제1 검출부(701)와 제2 노출로 촬영된 영상 프레임에 대한 움직임 영역을 검출하는 제2 검출부(702)를 포함할 수 있다. 여기서, 제1 검출부(701)와 제2 검출부(702)는 별도로 표현되었지만 하나의 장치에 구비될 수 있다. 제1 검출부(701)는 제1 현재 축소 영상 프레임(A2)을 입력 받아 각 픽셀의 주변 픽셀들과의 픽셀값 관계를 산출하고, 제1 이전 축소 영상 프레임(A1)을 입력 받아 A1의 대응 픽셀에 대한 관계값과 비교함으로써, AM1을 움직임 영역으로 검출한다. 제2 검출부(702)는 제2 현재 축소 영상 프레임(B2)을 입력 받아 각 픽셀의 주변 픽셀들과의 픽셀값 관계를 산출하고, 제2 이전 축소 영상 프레임(B1)을 입력 받아 B1의 대응 픽셀에 대한 관계값과 비교함으로써, BM1을 움직임 영역으로 검출한다.

픽셀값 관계를 나타내는 관계값을 산출하는 방법은 전술하였으므로, 상세한 설명을 생략한다.

제2 움직임 영역 검출부(230)는 상기 복수의 축소 영상 프레임들 각각에 대해 제2 움직임 영역을 검출한다. 제2 움직임 영역 검출부(230)는 제1 현재 축소 영상 프레임과 제1 이전 축소 영상 프레임 간의 차분을 산출하고, 차분이 0이 아니거나 기 설정된 임계값 이상인 영역을 제1 노출 영상에 대한 제2 움직임 영역으로 검출한다. 제2 움직임 영역 검출부(230)는 제2 현재 축소 영상 프레임과 제2 이전 축소 영상 프레임 간의 차분을 산출하고, 차분이 0이 아니거나 기 설정된 임계값 이상인 영역을 제2 노출 영상에 대한 제2 움직임 영역으로 검출할 수 있다.

도 7과 함께 제2 움직임 영역 검출부(230)의 동작을 설명하면, 다음과 같다. 제2 움직임 영역 검출부(230)는 제1 현재 축소 영상 프레임(A2)과 제1 이전 축소 영상 프레임(A1) 간의 차분을 산출하고, 산출된 차분이 0이 아니거나 기 설정된 임계값 이상인 영역인 AM2를 움직임 영역으로 검출한다. 또한, 제2 움직임 영역 검출부(703)는 제2 현재 축소 영상 프레임(B2)과 제2 이전 축소 영상 프레임(B1) 간의 차분을 산출하고, 산출된 차분이 0이 아니거나 기 설정된 임계값 이상인 영역인 BM2를 움직임 영역으로 검출한다.

축소 영상 프레임 간의 차분을 고려한 움직임 영역 검출 방법은 전술하였으므로, 상세한 설명을 생략한다.

움직임 영역 생성부(240)는 제1 움직임 영역과 제2 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성한다. 움직임 영역 생성부(240)는 제1 노출로 촬영된 영상 프레임으로부터 검출된 제1 움직임 영역과 제2 움직임 영역 중 적어도 일부를 포함하는 제3 움직임 영역을 생성한다. 움직임 영역 생성부(240)는 제2 노출로 촬영된 영상 프레임으로부터 검출된 제1 움직임 영역과 제2 움직임 영역 중 적어도 일부를 포함하는 제3 움직임 영역을 생성한다. 움직임 영역 생성부(240)는 제1 노출 영상 프레임에 대한 제3 움직임 영역과 제2 노출 영상 프레임에 대한 제3 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성할 수도 있다.

도 7과 함께 움직임 영역 생성부(240)의 동작을 설명하면, 다음과 같다. 움직임 영역 생성부(240)는 제1 노출로 촬영된 영상 프레임으로부터 제3 움직임 영역을 생성하는 제1 생성부(704)와 제2 노출로 촬영된 영상 프레임으로부터 제3 움직임 영역을 생성하는 제2 생성부(705)를 포함할 수 있다. 여기서, 제1 생성부(704)및 제2 생성부(705)는 별도로 도시되었지만 이에 한정됨이 없이 하나의 장치에 포함될 수 있다. 제1 생성부(704)는 제1 이전 축소 영상 프레임(A1) 및 제1 현재 축소 영상 프레임(A2)을 통해 검출된 제1 움직임 영역(AM1) 및 제2 움직임 영역(AM2) 중 적어도 일부를 포함하는 제3 움직임 영역(AM3)을 생성하고, 제2 생성부(705)는 제2 이전 축소 영상 프레임(B1) 및 제2 현재 축소 영상 프레임(B2)를 통해 검출된 제1 움직임 영역(BM1) 및 제2 움직임 영역(BM2) 중 적어도 일부를 포함하는 제3 움직임 영역(BM3)을 생성할 수 있다. 움직임 영역 생성부(240)는 최종적으로 제1 노출에 대한 제3 움직임 영역(AM3) 및 제2 노출에 대한 제3 움직임 영역(BM3) 중 적어도 일부를 포함하는 움직임 영역을 최종 움직임 영역으로 생성한다. 본 발명의 실시예에 따른 움직임 영역 검출 장치는 영상 생성부를 더 포함할 수 있는데, 영상 생성부(미도시)는 감시 영역을 촬영한 영상 프레임의 시인성을 높이기 위해서 상기 제3 움직임 영역 내의 픽셀값을 상기 복수의 영상 프레임들의 동일 영역 내의 픽셀값들과 융합한 픽셀값으로 대체함으로써 최종 영상 프레임을 생성할 수 있다. 여기서, 영상 생성부(미도시)에 의해 복수의 영상 프레임 중 하나의 영상 프레임을 선택하는 방법은 전술하였으므로, 상세한 설명을 생략하겠다.

본 발명의 실시예는 복수의 노출 정도로 촬영된 영상을 융합하는 하이 다이나믹 레인지 기술에 적용할 수 있다. 동일한 감시 영역에 대해서 복수 개의 노출 설정으로 촬영 한 후, 촬영된 복수 개의 영상 프레임을 합쳐서 하나의 영상 프레임을 제공하게 되는데, 이러한 과정에서 촬영된 복수 개의 영상 프레임에 포함된 동일한 객체가 다른 객체로 인식되면서 도 6에 도시된 바와 같이 합성, 변형된 영상이라는 오해를 불러 일으킬 수 있는 고스트 현상(ghost artifact)이 존재할 수 있다.

본 발명의 실시예에 따른 움직임 영역 검출 장치(200)는 각각의 노출로 촬영된 영상 프레임으로부터 인접된 영상 프레임 간의 픽셀간의 픽셀값 관계 비교 및 인접된 영상 프레임 간의 차분을 이용하여 움직이는 객체를 좀더 정확하게 검출할 수 있고, 움직임이 있는 영역이 누락되지 않도록 할 수 있다.

도 3의 실시예에서는 제1 영상 처리부(210)와 제2 영상 처리부(211)를 분리하여 설명하였으나, 제1 영상 처리부(210)와 제2 영상 처리부(211)가 통합되어 구현된 하나의 영상 처리부가 복수의 노출 영상 프레임에 대해 병렬로 또는 순차로 영상 축소를 수행할 수도 있다.

또한 도 3의 실시예에서는 두 개의 노출이 다른 영상 프레임으로부터 움직임 영역을 검출하는 예를 설명하였으나, 본 발명의 실시예는 이에 한정되지 않고, 둘 이상의 복수의 서로 다른 노출 영상 프레임들, 예를 들어, 4개의 서로 다른 노출 영상 프레임들 각각으로부터 제1 움직임 영역과 제2 움직임 영역을 검출하여 제3 움직임 영역을 생성하고, 4개의 제3 움직임 영역들을 기초로 최종 움직임 영역을 검출할 수 있다.

도 4는 본 발명의 실시예에 따른 움직임 영역 검출 방법을 나타내는 흐름도이다.

도 4를 참조하면, 본 발명의 실시예에 따른 움직임 영역 검출 방법은 영상 처리 단계(S110), 제1 움직임 영역 검출 단계(S120), 제2 움직임 영역 검출 단계(S130), 최종 움직임 영역 생성 단계(S140)를 포함할 수 있다.

영상 처리 단계(S110)에서는 장치는 소정의 노출로 촬영된 입력 영상 프레임들을 축소 시켜 축소 영상 프레임들을 생성한다.

제1 움직임 영역 검출 단계(S120)에서는 장치는 영상 처리 단계(S110)를 통해 생성된 현재 축소 영상 프레임의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 영상 처리 단계(S110)를 통해 생성된 이전 축소 영상 프레임의 대응 픽셀에 대한 관계값과 비교함으로써, 제1 움직임 영역을 검출한다. 픽셀값 관계를 나타내는 관계값을 산출하는 방법은 전술하였으므로, 상세한 설명을 생략한다.

제2 움직임 영역 검출 단계(S130)에서는 장치는 영상 처리 단계(S110)를 통해 생성된 현재 축소 영상 프레임 및 이전 축소 영상 프레임 간의 차분을 산출하고, 산출된 차분이 0이 아니거나 기 설정된 임계값 이상인 영역을 제2 움직임 영역으로 검출한다.

최종 움직임 영역 생성 단계(S140)에서는 현재 축소 영상 프레임으로부터 검출된 제1 움직임 영역과 제2 움직임 영역 중 적어도 일부를 포함하는 움직임 영역을 최종 움직임 영역으로 검출한다.

도 5는 본 발명의 다른 실시예에 따른 움직임 영역 검출 방법을 나타내는 흐름도이다.

도 5를 참조하면, 본 발명의 실시예에 따른 움직임 영역 검출 방법은 제1 영상 처리 단계(S210), 제2 영상 처리 단계(S211), 제1-1 움직임 영역 검출 단계(S220), 제1-2 움직임 영역 검출 단계(S221), 제2-1 움직임 영역 검출 단계(S230), 제2-2 움직임 영역 검출 단계(S231), 제3-1 움직임 영역 생성 단계(S240), 제3-2 움직임 영역 생성 단계(S241), 최종 움직임 영역 생성 단계(S242)를 포함할 수 있다.

제1 영상 처리 단계(S210)에서는 장치는 제1 노출로 촬영된 현재 입력 영상 프레임을 축소 시켜 제1 현재 축소 영상 프레임을 생성한다. 제2 영상 처리 단계(S211)에서는 장치는 제2 노출로 촬영된 현재 입력 영상 프레임을 축소 시켜 제2 현재 축소 영상 프레임을 생성한다.

제1-1 움직임 영역 검출 단계(S220)에서는 장치는 제1 현재 축소 영상 프레임의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 제1 이전 축소 영상 프레임의 대응 픽셀에 대한 관계값과 비교함으로써, 제1-1 움직임 영역을 검출한다. 픽셀값 관계를 나타내는 관계값을 산출하는 방법은 전술하였으므로, 상세한 설명을 생략한다.

제1-2 움직임 영역 검출 단계(S221)에서는 장치는 제2 현재 축소 영상 프레임의 각 픽셀에 대해 주변 픽셀들과의 픽셀값 관계를 나타내는 관계값을 산출하고, 제제2 이전 축소 영상 프레임의 대응 픽셀에 대한 관계값과 비교함으로써, 제1-2 움직임 영역을 검출한다.

제2-1 움직임 영역 검출 단계(S230)에서는 장치는 제1 현재 축소 영상 프레임 및 제1 이전 축소 영상 프레임 간의 차분을 산출하고, 산출된 차분이 0이 아니거나 기 설정된 임계값 이상인 영역을 제2-1 움직임 영역으로 검출한다.

제2-2 움직임 영역 검출 단계(S231)에서는 장치는 제2 현재 축소 영상 프레임 및 제2 이전 축소 영상 프레임 간의 차분을 산출하고, 산출된 차분이 0이 아니거나 기 설정된 임계값 이상인 영역을 제2-2 움직임 영역으로 검출한다.

제3-1 움직임 영역 생성 단계(S240)에서는 제1 현재 축소 영상 프레임으로부터 검출된 제1-1 움직임 영역과 제2-1 움직임 영역 중 적어도 일부를 포함하는 움직임 영역을 제3-1 움직임 영역으로 검출한다.

제3-2 움직임 영역 생성 단계(S241)에서는 제2 현재 영상 프레임으로부터 검출된 제1-2 움직임 영역과 제2-2 움직임 영역 중 적어도 일부를 포함하는 움직임 영역을 제3-2 움직임 영역으로 검출한다.

최종 움직임 영역 생성 단계(S242)에서는 제1 현재 축소 영상 프레임을 통해 검출된 제3-1 움직임 영역과 제2 현재 축소 영상 프레임을 통해 검출된 제3-2 움직임 영역 중 적어도 일부를 포함하는 움직임 영역을 최종 움직임 영역으로 검출한다.

본 발명의 실시예에 따른 움직임 영역 검출 방법은 영상 생성 단계(미도시)를 더 포함하여, 최종 움직임 영역 내의 영상 데이터를 복수의 노출 정도로 촬영된 복수의 영상 프레임들을 시인성을 높이도록 부분적으로 융합하여 최종 영상 프레임을 생성할 수 있다.

본 발명의 실시예들에 따른 움직임 영역 검출 장치 및 방법은 카메라로부터 서로 다른 밝기로 촬영된 영상들을 획득하고, 각각의 밝기로 연속 촬영된 2장의 영상 프레임들을 차분함으로써, 움직임 영역(motion mask)을 검출한다. 또한 픽셀 간의 관계값(local feature)을 사용하여 관계값(local feature) 간의 차이가 있는지 여부를 관찰함으로써 움직임 영역(motion mask)을 검출할 수도 있다. 상기의 인접된 영상 프레임들 간의 차분을 이용한 움직임 영역 검출 방법과 관계값을 이용한 움직임 영역 검출 방법을 동시에 적용하면 콘트라스트(contrast) 값이 크지 않은 영역을 포함하는 영상에 대해서도 영상 차이(image difference) 및 관계값(local feature) 분석에 의한 강건한(robust) 움직임 영역(motion mask) 탐지가 가능하게 된다.

도 8은 움직임 영역 검출 장치(200)을 통해 검출 및 생성된 움직임 영역의 일예이다.

움직임 영역 검출 장치(200)는 제1 노출로 촬영된 복수의 영상 프레임들로부터 각 픽셀의 픽셀값 관계를 나타내는 관계값을 산출하고 이전 영상 프레임에 대한 관계값과 비교함으로써, 801과 같은 제1 움직임 영역을 검출하고, 제1 노출로 촬영된 복수의 영상 프레임들 간의 차분을 이용하여 803과 같은 제2 움직임 영역을 검출할 수 있다. 움직임 영역 검출 장치(200)는 801 및 803를 모두 포함하는 805를 제3 움직임 영역으로 생성한다. 움직임 영역 검출 장치(200)는 제2 노출로 촬영된 복수의 영상 프레임들로부터 각 픽셀의 픽셀값 관계를 나타내는 관계값을 산출하고, 이전 영상 프레임에 대한 관계값과 비교함으로써, 802와 같은 제1 움직임 영역을 검출하고, 제2 노출로 촬영된 복수의 영상 프레임들 간의 차분을 이용하여 804와 같은 제2 움직임 영역을 검출할 수 있다. 움직임 영역 검출 장치(200)는 802 및 804를 모두 포함하는 806을 제3 움직임 영역으로 생성한다. 최종적으로 움직임 영역 검출 장치(200)은 805 및 806 중 적어도 일부를 포함하는 영역을 최종 움직임 영역으로 생성하게 된다.

본 발명의 실시예들에 따른 움직임 영역 검출 장치 및 방법은 배경 영역이 밝은 경우에도 객체 사이의 영역과 움직임이 좀더 잘 분리되며, 서로 다른 밝기의 영상 프레임들을 획득하는 구성, 상기 영상 프레임들 간의 차분을 산출하는 구성, 관계값(local feature)를 산출하는 구성이 포함될 수 있다.

본 발명의 실시예는 복수의 노출 정도로 촬영된 영상을 융합하는 하이 다이나믹 레인지 기술에 적용할 수 있다. 본 발명의 실시예에 따른 움직임 영역 검출 장치 및 방법은 서로 다른 노출로 촬영된 대응하는 영상 프레임들에 대해 복수의 움직임 검출 알고리즘들을 적용하여 움직이는 객체를 좀더 정확하게 검출할 수 있고, 움직임이 있는 영역이 누락되지 않도록 할 수 있다.

이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.

본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.

본 발명의 명세서(특히 특허청구범위에서)에서 “상기”의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.

100: 움직임 영역 검출 장치
110: 영상 처리부
120: 제1 움직임 영역 검출부
130: 제2 움직임 영역 검출부
140: 움직임 영역 생성부

Claims (5)

1. 현재 영상 프레임의 각 픽셀에 대해 산출된 관계값을 이전 영상 프레임의 대응 픽셀에 대한 관계값과 비교하여 서로 상이한 관계값을 갖는 픽셀들을 기초로 상기 현재 영상 프레임의 제1 움직임 영역을 검출하는 제1 움직임 영역 검출부;
   상기 현재 영상 프레임과 상기 이전 영상 프레임 간의 차분을 기초로 상기 현재 영상 프레임의 제2 움직임 영역을 검출하는 제2 움직임 영역 검출부; 및
   상기 제1 움직임 영역과 상기 제2 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성하는 움직임 영역 생성부;를 포함하고,
   상기 관계값은 각 픽셀과 주변 픽셀들의 픽셀값들의 크기 순서인, 움직임 영역 검출 장치.
2. 제1항에 있어서,
   상기 제1 움직임 영역 검출부는
   상기 주변 픽셀들의 최대 픽셀값과 최소 픽셀값의 차이가 기 설정된 임계값을 초과하는 픽셀을 상기 제1 움직임 영역에서 제외시키는, 움직임 영역 검출 장치.
3. 제1항에 있어서,
   상기 제2 움직임 영역 검출부는
   상기 차분이 기 설정된 임계값 이상인 픽셀들의 집합 영역을 제2 움직임 영역으로 검출하는, 움직임 영역 검출 장치.
4. 제1항에 있어서,
   상기 움직임 영역 생성부는
   상기 제1 움직임 영역과 상기 제2 움직임 영역 간의 공통된 영역 또는 상기 제1 움직임 영역과 상기 제2 움직임 영역을 모두 포함하는 영역을 최종 움직임 영역으로 생성하는, 움직임 영역 검출 장치.
5. 제1항에 있어서,
   상기 제1 움직임 영역 검출부는,
   제1노출로 촬영된 제1 현재 영상 프레임과 제1 이전 영상 프레임의 관계값 비교를 기초로 상기 제1 현재 영상 프레임의 제1 움직임 영역을 검출하고,
   제2노출로 촬영된 제2 현재 영상 프레임과 제2 이전 영상 프레임의 관계값 비교를 기초로 상기 제2 현재 영상 프레임의 제1 움직임 영역을 검출하고,
   상기 제2 움직임 영역 검출부는,
   상기 제1 현재 영상 프레임과 상기 제1 이전 영상 프레임의 차분을 기초로 상기 제1 현재 영상 프레임의 제2 움직임 영역을 검출하고,
   상기 제2 현재 영상 프레임과 상기 제2 이전 영상 프레임의 차분을 기초로 상기 제2 현재 영상 프레임의 제2 움직임 영역을 검출하고,
   상기 움직임 영역 생성부는,
   상기 제1 현재 영상 프레임으로부터 검출된 제1 움직임 영역과 제2 움직임 영역 중 적어도 일부를 포함하는 제3 움직임 영역을 생성하고,
   상기 제2 현재 영상 프레임으로부터 검출된 제1 움직임 영역과 제2 움직임 영역 중 적어도 일부를 포함하는 제3 움직임 영역을 생성하고,
   상기 제1 현재 영상 프레임의 제3 움직임 영역과 상기 제2 현재 영상 프레임의 제3 움직임 영역 중 적어도 일부를 포함하는 최종 움직임 영역을 생성하는, 움직임 영역 검출 장치.

Images