KR100347058B1 - 얼굴 촬영/인식방법 - Google Patents

Abstract

본 발명은 카메라에 포착되는 물체의 움직임과 얼굴구성요소를 검출하여 정확한 얼굴 영상을 촬영하고 인식할 수 있는 방법에 관한 것이다.

이를 위하여 본 발명 방법은 카메라를 통해 포착되는 화상신호에 대한 다수의 검사 후보영역을 선정하여 해당 검사후보영역 내의 얼굴구성요소를 검출하여 얼굴 여부를 판단하면서 피사체의 얼굴을 따라 카메라의 방향을 조절하는 과정; 상기 얼굴 여부 판단결과, 검사 후보영역 내에 얼굴이 존재하는 화상신호에 대하여는 특징점을 검출하여 이미지를 재배열하고, 상기 재배열된 이미지간의 변위정보로 3차원 정보를 생성하고, 그 3차원 정보로 피사체의 얼굴 마스크를 합성해내는 과정; 상기 합성된 얼굴 마스크를 데이터 베이스에 미리 구축되어 있는 개인별 등록 마스크들로부터 탐색하여 특정 개인에 대한 이미지 등록 여부를 판단하는 과정을 포함하여; 얼굴 인식 시스템을 이용하고자 하는 사용자가 카메라를 정면으로 바라보고 있지 않아도 정확한 얼굴 영상을 촬영 및 인식할 수 있는 효과를 제공한다.

Description

얼굴 촬영/인식방법{METHOD FOR PHOTOGRAPHING AND RECOGNIZING A FACE}

본 발명은 피사체의 얼굴 이미지에 대한 3차원 정보를 이용하여 피사체를 인식하는 시스템에 관한 것으로서, 특히 카메라를 통해 입력되는 화상신호를 3차원 인식방식에 따라 인식하여 카메라를 통해 촬상된 대상체가 등록된 마스크임을 인식하는 얼굴 촬영/인식방법에 관한 것이다.

현대 사회는 고도의 정보화 사회가 되어감에 따라 다양한 고객관리 및 정보 보안에 대한 소비자의 욕구가 증대되고 있다. 따라서 방문자나 컴퓨터 관리자를 확인하는 보안절차에 대해 보다 신뢰성 있는 정보 관리 및 그에 대한 보안 시스템이 필요한 실정이다.

상기의 보안 시스템은 개인의 신분 확인을 위하여, ID 카드나 암호에 의한 방법이 널리 사용되고 있으나, 이들 방법은 도용 가능성이 높다. 또한 홍체 인식에 의한 개인 식별 시스템이나 지문 감식에 의한 개인 식별 시스템은 별도의 추가장비와 실행의 번거로움으로 인하여 꼭 필요한 부분에만 한정적으로 적용되고 있다.

따라서 대부분 시스템에서는 별다른 보안 체계를 이용하지 않고 있는 실정이므로, 이런 분야에 대한 얼굴 인식 시스템은 그 활용분야가 넓다고 할 수 있다.

상술한 얼굴 인식 시스템은 타 비젼 프로젝트에 비하여 입력 자료의 크기가 크고, 이미지의 공통점을 인식하는 패턴화 작업의 어려움이 있기 때문에, 그 어떤 분야보다도 강력한 데이터 베이스화가 중요한 분야이다.

일반적으로 얼굴 인식 시스템은 이미지를 그레이 레벨(gray level)로 변환하여 경계선 검출 및 윤곽 추출 알고리즘을 이용하여 얼굴 윤곽이나 눈을 검색한 후얼굴만을 일정한 크기로 구분하여 그림자 제거, 시각 보정 등을 통하여 패턴을 인식한다. 이러한 경계선 검출 및 윤곽선 검출 알고리즘을 이용한 얼굴인식 시스템은 개인 인식 및 성별 판별, 표정인식 등 다양한 분야에 이용되고 있다.

상술한 얼굴 인식 시스템은 사무실 보안, 열쇠없이 얼굴확인 절차만으로 문을 여는 시스템, 경찰의 범인 검문시 휴대용 카메라를 이용한 정확한 검문, 야간은행의 보안, 아파트 경비, 대형 매장에서의 체계적 고객관리, 공항의 테러방지, 개인신변보호, 무인 자판대, 교도소 관리, 창고관리, 도서관 이용자 관리 등 단순한 이용자 얼굴 검색분야 뿐만 아니라 컴퓨터의 정보처리능력과 인터넷 등 광범위 통신망을 이용한 다양한 분야에 활용되고 있다.

그러나 상술한 얼굴 인식 시스템은 대부분 2차원으로 인식하는 시스템이므로, 인식하고자 하는 대상체가 인식 시스템의 정면으로 지정된 거리에 위치해서 촬영되어야만 정확한 인식이 가능하다. 따라서 얼굴 인식 시스템을 이용하고자 하는 경우는 촬영 대상체를 인식 시스템에 구비된 카메라에 정면으로 위치하도록 안내하는 별도의 안내수단을 필요로 하는 등의 문제점이 있었다.

본 발명은 상기의 문제점을 해결하기 위해 안출한 것으로서, 본 발명은 카메라를 통해 입력되는 화상신호로부터 피사체의 얼굴 구성요소 및 움직임을 추출하여 상기 카메라가 피사체의 얼굴 및 움직임을 추적할 수 있게 하고, 상기 피사체의 얼굴 및 움직임 추적에 의해 촬상되는 화상신호로부터 피사체의 얼굴을 인식할 수 있도록 한 얼굴 촬영/인식방법을 제공함에 목적이 있다.

상기의 목적을 달성하기 위하여 본 발명의 일 실시예에서는, 카메라를 통해 포착되는 화상신호로부터 다수의 검사 후보영역을 선정하고, 해당 검사 후보영역 내의 얼굴 구성요소 검사에 의한 얼굴 가능영역을 검출하여, 상기 선정된 얼굴 가능영역에 대해 특징점을 검출하고, 그 특징점을 이용하여 이미지를 재배열시킨 후 얼굴 존재여부를 판단하는 과정, 상기 얼굴 존재여부 판단결과, 상기 해당 검사 후보영역 내에 얼굴이 존재하지 않는 화상신호에 대하여는 상기 선택된 해당 후보영역의 피사체의 움직임을 따라 카메라의 방향을 조절하는 과정; 상기 얼굴 존재여부 판단결과, 상기 해당 검사 후보영역 내에 얼굴이 존재하는 화상신호에 대하여는 상기 재배열된 이미지간의 변위정보로 3차원 정보를 생성하고, 그 3차원 정보로 피사체의 얼굴 마스크를 합성해내는 과정; 상기 합성된 얼굴 마스크를 데이터 베이스에 미리 구축되어 있는 개인별 등록 마스크들로부터 탐색하여 특정 개인에 대한 이미지 등록 여부를 판단하는 과정을 포함하는 것을 특징으로 하는 얼굴 촬영/인식방법을 제공한다.

상기의 목적을 달성하기 위하여 본 발명의 다른 실시예에서는, 카메라를 통해 입력되는 화상신호로부터 피부색 데이터와 움직임 데이터를 각각 추출하여 다수의 검사 후보영역을 선정하고, 해당 검사 후보영역 내의 화상신호에 대한 얼굴 구성요소 검사에 의한 얼굴 가능영역을 검출하여 특정 후보영역을 선택하고 특징점을 검출하여 이미지를 재배열한 후, 재배열된 이미지를 이용하여 얼굴 유/무를 확인하면서 상기 선택된 해당 후보영역의 피사체의 움직임을 따라 카메라의 위치를 조절하는 과정; 상기 검사 후보영역 내에 얼굴이 존재하는 화상신호에 대하여는 다시 이미지를 재배열한 후, 상기 재배열된 이미지간의 변위정보를 이용하여 3차원 정보를 생성하고, 상기 3차원 정보를 기준 마스크와 비교하여 개인별 얼굴 마스크를 합성해내는 과정; 상기 합성된 얼굴 마스크를 데이터 베이스에 미리 구축되어 있는 개인별 등록 마스크들로부터 탐색하여 특정 개인에 대한 이미지 등록 여부를 확인하는 과정으로 이루어진 것을 특징으로 하는 얼굴 촬영/인식방법을 제공한다.

도 1은 본 발명에 따른 얼굴 촬영/인식방법이 실행될 수 있도록 구현된 화상인식시스템의 구성을 나타내는 블록도

도 2는 본 발명에 따른 얼굴 촬영/인식방법의 일 실시예를 설명하기 위한 동작 흐름도

도 3은 본 발명에 따른 얼굴 촬영/인식방법의 다른 실시예를 설명하기 위한 동작 흐름도

<도면의 주요 부분에 대한 부호의 설명>

10 : 화상 입력부 11 : CCD 카메라

12 : 영상 캡쳐부 13 : 카메라 구동 제어부

14 : 카메라 구동부 20 : 전처리부

30 : 특징점 검출부 40 : 3차원 정보 추출부

50 : 마스크 생성부 60 : 데이터 베이스부

70 : 형상 인식부 80 : 메모리

이하에서, 본 발명에 따른 얼굴 촬영/인식방법의 각 실시예를 첨부된 도면을 참고하여 상세히 설명한다.

도 1은 본 발명에 따른 얼굴 촬영/인식방법이 실행될 수 있도록 구현된 화상인식시스템의 구성을 나타내는 블록도로서, 그 구성은 다음과 같다.

화상 입력부(10)는 소정의 방향에 설치되는 다수의 카메라를 통해 피사체를 촬영하는 것으로, 일반적으로 CCD 카메라(11)가 이용되며, 적어도 2대 이상이 설치된다.

전처리부(20)는 상기 화상 입력부(10)로부터 화상신호를 입력받아 잡음을 제거하고, 그 화상신호에 대한 윤곽선을 추출한다.

특징점 추출부(30)는 상기 전처리부(20)에서 입력되는 화상신호의 윤곽선을 기준으로 그 화상신호에 대한 특징점을 추출한다.

3차원 정보 추출부(40)는 상기 특징점 추출부(30)에서 추출된 특징점을 이용하여 전처리부(20)에서 입력되는 화상신호를 회전, 줌 및 이동시켜 이미지를 재배열한 후, 재배열된 이미지간의 변위정보를 이용하여 3차원 정보를 추출한다.

마스크 생성부(50)는 상기 3차원 정보 추출부(30)에서 추출된 3차원 정보를 내부에 미리 설정되어 있는 기준 마스크와 비교하여, 각 개인마다 특징있는 새로운 마스크를 생성한다.

데이터 베이스부(60)는 정당한 사용자의 화상신호로부터 얻을 수 있는 다수의 이미지 데이터를 마스킹 데이터로 갖는다.

형상 인식부(70)는 일반적으로 중앙처리시스템으로서, 상기 마스크 생성부(50)에서 생성된 새로운 마스크를 상기 데이터 베이스부(60)의 마스킹 데이터와 비교하여, 동일한 마스크인지의 여부를 판단한다. 이때 새로운 마스크와 동일한 마스크가 데이터 베이스부(60)에 존재하는 경우 현재 카메라를 통해 촬상된 형상이 이미 등록되어 있는 마스크임을 인식하여 정당한 사용자로 분류하고, 그렇지 않은 경우 미등록된 마스크임을 인식하여 부적당한 사용자로 분류한다.

저장매체(80)는 전체 시스템의 구동 프로그램 및 3차원 마스킹법에 의한 형상 인식을 위한 다수의 프로그램이 저장되어 있으며, 상기 형상 인식부(70)의 제어신호에 따라 저장된 데이터를 형상 인식부(70)로 출력한다. 상술한 저장매체(80)는 반도체 메모리를 갖는 카드, 하드 디스크, 광디스크 등과 같이 다양하게 적용할 수 있다.

상술한 화상 입력부(10)는 대상체를 촬상하는 CCD 카메라(11)와, 상기 CCD 카메라의 촬상에 따라 입력되는 신호를 지정된 형식으로 디스플레이될 수 있도록 캡쳐하는 영상 캡쳐부(12)와, 상기 특징점 검출부(30)에서 선정된 검사 후보영역을 이용하여 현재 CCD 카메라의 회전범위를 연산하여 카메라 구동 제어신호를 출력하는 카메라 구동 제어부(13)와, 상기 카메라 구동 제어부(13)의 카메라 구동 제어신호에 따라 카메라 소정 방형으로 회전할 수 있도록 하는 카메라 구동부(14)로 구성될 수 있다.

도 2는 본 발명에 따른 피부색 및 움직임 추적에 의한 얼굴인식방법의 일 실시예를 설명하기 위한 동작 흐름도로서, 카메라를 통해 포착되는 화상신호의 검사 후보영역을 선정하고, 해당 영역 내에서 특징점을 검출하고 이미지를 재배열하여 얼굴 구성요소 검사에 의한 얼굴 가능영역을 검출하고, 상기 얼굴 가능영역에 대해 특징점 추출 및 검사를 수행하여 얼굴 존재여부를 판단하면서 피사체의 움직임을 따라 카메라의 방향을 조절하는 과정(S200-S250)과; 상기 얼굴 존재여부 판단결과, 검사 후보영역 내에 얼굴이 존재하는 화상신호에 대하여는 상기 재배열된 이미지를 기설정된 특징점에 의해 다시 한 번 재배열한 후, 재배열된 이미지간의 변위정보로 3차원 정보를 생성하고, 그 3차원 정보로 피사체의 얼굴 마스크를 합성해내는 과정(S260)과; 상기 합성된 얼굴 마스크를 데이터 베이스에 미리 구축되어 있는 개인별 등록 마스크들로부터 탐색하여 특정 개인에 대한 이미지 등록 여부를 판단하는 과정(S270)을 포함하여 이루어진다.

도 3은 본 발명에 따른 피부색 및 움직임 추적에 의한 얼굴인식방법의 다른 실시예를 설명하기 위한 동작 흐름도로서, 카메라를 통해 입력되는 화상신호로부터 피부색 데이터와 움직임 데이터를 각각 추출하여 하나 이상의 검사 후보영역을 선정하고, 해당 영역 내의 명도차를 이용한 얼굴 구성요소의 템플레이트 매칭작업을 수행하여, 검사 대상 얼굴의 존재여부를 확인한 후 카메라의 위치를 조정하는과정(S300-S340)과; 상기 선정된 얼굴 영역내의 재배열된 이미지 확인 결과, 해당 영역내에 얼굴이 존재하는 화상신호에 대하여는 다시 이미지를 재배열한 후, 상기 재배열된 이미지간의 변위정보를 이용하여 3차원 정보를 생성하고, 상기 3차원 정보를 기준 마스크와 비교하여 개인별 얼굴 마스크를 합성해내는 과정(S350-S370)과; 상기 합성된 얼굴 마스크를 데이터 베이스에 미리 구축되어 있는 개인별 등록 마스크들로부터 탐색하여 특정 개인에 대한 이미지 등록 여부를 확인하는 과정(S380-S400)을 포함하여 이루어진다.

이상과 같이 구성되는 본 발명의 각 실시예들에 대한 동작을 설명하면 다음과 같다.

먼저, 도 2의 본 발명 방법의 일 실시예에 대한 동작을 도 1의 블록도와의 상호작용을 참조하여 설명한다.

먼저, 화상입력부(10)에서는 CCD 카메라(11) 및 영상 캡쳐부(12)에 의해 촬상되는 화상신호를 입력받고, 하나의 화면을 구성할 수 있도록 전처리부(20)를 통해 잡음 제거한 후, 윤곽선 보정 및 필터링을 하게 된다.

이렇게 신호처리된 화상신호는 특징점 검출부(30)로 입력된다. 이 특징점 추출부(30)에서는 화상신호의 이전 화면과 현재 화면을 비교하는 동작으로 피사체의 움직임을 검출하여 움직임 데이터를 생성하게 되며, 또한 색구성요소(예를 들어 R(적), G(녹), B(청)나 YUV)의 비율로 구성되는 피부색의 범위를 갖는 부분을 검출하여 피부색 데이터를 생성하게 된다.

또한 상기 특징점 검출부(30)에서는 상술한 바와 같이 생성된 피부색 데이터와 움직임 데이터를 이용하여, 화상 입력부(10) 및 전처리부(20)를 통해 입력되는 한 필드의 화상신호로부터 다수의 검사 후보영역을 선정(S210)하며, 이 검사 후보영역으로부터 얼굴 구성요소 확인에 의해 얼굴 존재영역을 선정(S210-1)한다. 이 후 선정된 얼굴영역에 대해 특징점을 검출하고, 그 특징점을 이용하여 CCD 카메라(11) 및 전처리부(20)에 의해 입력된 이미지를 재배열(S220)시킨다.상기 재배열된 이미지의 특징점을 기설정된 특징점과 비교하여, 검사 후보영역 내에 얼굴이 존재하는지의 여부를 판단(S250)한 후, 상기와 같이 생성된 검사 후보영역에 대한 움직임 데이터 및 피부색 데이터, 검출된 특징점, 재배열된 이미지 데이터는 3차원 정보 추출부(40)와 카메라 구동 제어부(13)로 각각 입력된다.

상기 판단결과, 정확한 얼굴이 존재하지 않는 경우, 상기 선택된 해당 후보영역의 피사체의 움직임에 따라 카메라의 방향을 조절하기 위하여, 상술한 것과 같이 생성된 검사 후보영역에 대한 피부색 데이터 및 움직임 데이터, 검출된 특징점, 재배열된 이미지 데이터를 입력받은 카메라 구동 제어부(13)는 바로 전에 입력받아 상술한 과정을 따라 처리된 검사 후보영역 데이터와 비교한다.

카메라 구동 제어부(13)는 상술한 것과 같이 두 개의 검사 후보영역의 데이터를 비교함으로써, 검사 후보영역의 이동거리를 연산(S230)할 수 있으며, 그 이동된 거리만큼 CCD 카메라(11)를 회전시켜, 대상체를 재촬영할 수 있도록 그 회전방향 및 회전각도를 결정하게 된다.

이렇게 결정된 CCD 카메라(11)의 회전방향 및 회전각도는 카메라 구동 제어신호로서 카메라 구동부(14)로 입력되고, 이러한 카메라 구동 제어신호를 입력받은 카메라 구동부(14)는 상기 회전각도 만큼 CCD 카메라(11)를 소정 방향으로 회전(S240)시킨다. 이러한 카메라 제어동작은 새로운 피사체가 검출될때마다 매번반복적으로 수행된다.

한편, 상기 얼굴 존재여부 판단결과, 상기 해당 검사 후보영역 내에 얼굴이 존재하는 화상신호에 대하여는, 상기 특징점 검출부(30)에서 생성된 검사 후보영역의 피부색 데이터 및 움직임 데이터, 특징점, 재배열된 이미지 데이터를 입력받은 3차원 정보 추출부(40)에서 상기 검출된 특징점을 이용하여 다시 한 번 이미지를 재배열시키고, 다수의 이미지 상호간의 변위정보를 이용하여 3차원 정보를 생성하며, 생성된 3차원 정보를 마스크 생성부(50)에 구비된 기준 마스크와 비교하여 개인별로 다른 새로운 마스크를 생성(S260)한다.

이렇게 생성된 새로운 마스크를 데이터 베이스부(60)에 저장되어 있는 마스크 데이터와 비교하여 존재하는지를 판단하고, 판단 결과 동일한 마스크 데이터가 데이터 베이스부(60)에 존재하는 경우, 등록된 마스크임을 인식하여 현재 카메라를 통해 포착된 피사체를 정당한 사용자로 분류한다. 상기 판단 결과 새로운 마스크와 동일한 마스크 데이터가 데이터 베이스부(60)에 존재하지 않는 경우 등록되지 않은 마스크임을 인식(S270)하여 부당한 사용자로 분류한다.

다음으로, 도 3의 본 발명 방법의 다른 실시예에 대한 동작을 도 1의 블록도와의 상호작용을 참조하여 설명한다.

화상 입력부(10)의 CCD 카메라(11)와 영상 캡쳐부(12) 및 전처리부(20)를 통해 화상신호가 입력되면, 특징점 검출부(30)에서는 그 입력신호를 체크(S300)하여,화상신호의 이전 화면과 현재 화면을 비교하는 동작으로 피사체의 움직임을 검출하여 움직임 데이터를 생성하게 되며, 또한 색구성요소(예를 들어 R(적), G(녹), B(청)나 YUV)의 비율로 구성되는 피부색의 범위를 갖는 부분을 검출하여 피부색 데이터를 생성(S310)한다.

또한 특징점 검출부(30)에서는 상술한 단계에서 생성된 피부색 데이터와 움직임 데이터를 이용하여 한 필드의 화상신호로부터 검사 후보영역을 선정(S320)한다.

상기 검사 후보영역이 선정되면, 얼굴구성요소 검사에 의한 얼굴 가능 영역을 검출(S320-1)하여, 해당 영역내에 추적 대상체를 가려낸다. 이후 상기 특징점 검출부(30)에 의해 검출된 특징점에 의해 이미지를 재배열(S330)시키고, 상기 재배열된 이미지의 특징점을 기설정된 특징점과 비교하여, 검사 후보영역 내에 얼굴이 존재하는지의 여부를 판단(S340)한다.상기 판단 결과, 정확한 얼굴이 존재하지 않는 경우, 현재의 카메라 위치로부터 움직여야 할 카메라 구동치를 연산하여 카메라가 정상적인 위치(평상시의 촬영위치)로 복귀하도록 카메라의 위치를 조절(S341)한 후, 화상신호를 입력받아 피부색 데이터 및 움직임 데이터를 생성하는 단계(S310)부터 동작을 재수행한다.한편 상기 얼굴 존재여부 판단결과, 상기 재배열된 이미지로부터 해당 영역내에 추적 대상체가 되는 얼굴이 존재하면, 해당 영역내에 얼굴이 존재하는 화상신호에 대하여는 카메라 촬상신호의 중앙에 얼굴이 위치하도록 카메라를 미세 조절(도면상에는 도시되지 않음)한 후, 이미지를 재배열(S350)시키고, 다수의 이미지 상호간의 변위정보를 이용하여 3차원 정보를 생성(S360)하며, 상기 생성된 3차원 정보를 마스크 생성부(50)에 구비된 기준 마스크와 비교하여 개인별로 각각 다른 새로운 마스크를 생성(S370)한다.

이렇게 생성된 새로운 마스크를 데이터 베이스부(60)에 저장되어 있는 마스크 데이터와 비교하여, 새로 생성된 마스크가 데이터 베이스에 존재하는지를 판단(S380)하고, 판단 결과 동일한 마스크가 데이터 베이스부(60)에 존재하는 경우 등록된 마스크임을 인식(S390)하여 현재 카메라에 포착된 피사체를 정당한 사용자로 분류하고, 판단 결과 동일한 마스크가 데이터 베이스부에 존재하지 않는 경우 등록되지 않은 마스크임을 인식하여 현재 카메라에 포착된 피사체를 부당한 사용자로 분류한다.

따라서 상술한 바와 같이 본 발명은 입력되는 화상신호에서 피부색 정보 및 움직임 정보를 추출하여 사람의 얼굴임을 인식하게 되는데, 이때 정확한 얼굴형상이 인식되지 않는 경우 사람의 얼굴을 정확하게 인식할 수 있도록 카메라를 일정 방향만큼 회전시켜 완전한 얼굴형상을 인식할때까지 카메라의 위치를 반복 조절함으로써, 인식 시스템을 이용하고자 하는 이용자가 지정된 위치로 움직이지 않아도 정확한 얼굴 형상을 지능적으로 촬영할 수 있게 되는 이점이 있다.

Claims (2)

1. 카메라를 통해 포착되는 화상신호로부터 다수의 검사 후보영역을 선정하고, 해당 검사 후보영역 내의 얼굴 구성요소 검사에 의한 얼굴 가능영역을 검출하여, 상기 선정된 얼굴 가능영역에 대해 특징점을 검출하고, 그 특징점을 이용하여 이미지를 재배열시킨 후 얼굴 존재여부를 판단하는 과정,

   상기 얼굴 존재여부 판단결과, 상기 해당 검사 후보영역 내에 얼굴이 존재하지 않는 화상신호에 대하여는 상기 선택된 해당 후보영역의 피사체의 움직임을 따라 카메라의 방향을 조절하는 과정;

   상기 얼굴 존재여부 판단결과, 상기 해당 검사 후보영역 내에 얼굴이 존재하는 화상신호에 대하여는 상기 재배열된 이미지간의 변위정보로 3차원 정보를 생성하고, 그 3차원 정보로 피사체의 얼굴 마스크를 합성해내는 과정;

   상기 합성된 얼굴 마스크를 데이터 베이스에 미리 구축되어 있는 개인별 등록 마스크들로부터 탐색하여 특정 개인에 대한 이미지 등록 여부를 판단하는 과정을 포함하는 것을 특징으로 하는 얼굴 촬영/인식방법.
2. 카메라를 통해 입력되는 화상신호로부터 피부색 데이터와 움직임 데이터를 각각 추출하여 다수의 검사 후보영역을 선정하고, 해당 검사 후보영역 내의 화상신호에 대한 얼굴 구성요소 검사에 의한 얼굴 가능영역을 검출하여 특정 후보영역을 선택하고 특징점을 검출하여 이미지를 재배열한 후, 재배열된 이미지를 이용하여 얼굴 유/무를 확인하면서 상기 선택된 해당 후보영역의 피사체의 움직임을 따라 카메라의 위치를 조절하는 과정;

   상기 검사 후보영역 내에 얼굴이 존재하는 화상신호에 대하여는 다시 이미지를 재배열한 후, 상기 재배열된 이미지간의 변위정보를 이용하여 3차원 정보를 생성하고, 상기 3차원 정보를 기준 마스크와 비교하여 개인별 얼굴 마스크를 합성해내는 과정;

   상기 합성된 얼굴 마스크를 데이터 베이스에 미리 구축되어 있는 개인별 등록 마스크들로부터 탐색하여 특정 개인에 대한 이미지 등록 여부를 확인하는 과정으로 이루어진 것을 특징으로 하는 얼굴 촬영/인식방법.