KR100590570B1 - 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치 - Google Patents

레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치 Download PDF

Info

Publication number
KR100590570B1
KR100590570B1 KR1020040099029A KR20040099029A KR100590570B1 KR 100590570 B1 KR100590570 B1 KR 100590570B1 KR 1020040099029 A KR1020040099029 A KR 1020040099029A KR 20040099029 A KR20040099029 A KR 20040099029A KR 100590570 B1 KR100590570 B1 KR 100590570B1
Authority
KR
South Korea
Prior art keywords
shape
model
initial
detected
boundary point
Prior art date
Application number
KR1020040099029A
Other languages
English (en)
Other versions
KR20060060139A (ko
Inventor
기석철
왕대준
자오지아리
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020040099029A priority Critical patent/KR100590570B1/ko
Priority to US11/288,267 priority patent/US7697736B2/en
Publication of KR20060060139A publication Critical patent/KR20060060139A/ko
Application granted granted Critical
Publication of KR100590570B1 publication Critical patent/KR100590570B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/40Analysis of texture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/754Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries involving a deformation of the sample pattern or of the reference pattern; Elastic matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/24Character recognition characterised by the processing or recognition method
    • G06V30/248Character recognition characterised by the processing or recognition method involving plural approaches, e.g. verification by template match; Resolving confusion among similar patterns, e.g. "O" versus "Q"
    • G06V30/2504Coarse or fine approaches, e.g. resolution of ambiguities or multiscale approaches

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • Geometry (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치가 개시된다. 이 방법은 (a) 정면을 향하는 제1 초기 형상 모델을 얼굴 주변에 배치시키는 단계, (b) 제1 초기 형상 모델을 기준으로 하여, 레벨 셋 방식을 이용해 형상 곡선을 진화시키는 단계, (c) 진화된 형상 곡선에 근접하는 제1 초기 형상 모델의 제1 내지 제M(여기서, M은 1보다 큰 양의 정수) 초기 경계점들에 이웃하는 제1 내지 제M 이웃 경계점들을 검출하는 단계, (d) 검출된 제1 내지 제M 이웃 경계점들에 대응하는 수정 형상 모델을 상기 얼굴 주변에 배치시키는 단계, (e) 수정 형상 모델의 모델 각도를 검출하는 단계, (f) 검출된 모델 각도가 소정 각도 범위를 초과하는가를 조사하는 단계 및 (g) 검출된 모델 각도가 소정 각도의 범위를 초과한다면, 초과되는 각도 범위에 따라 좌측으로 회전된 제2 초기 형상 모델 또는 우측으로 회전된 제3 초기 형상 모델을 상기 얼굴 주변에 배치시키고 상기 (c) 단계로 진행하는 단계를 구비하는 것을 특징으로 한다. 따라서, 본 발명에 따르면, 화상처리장치에서 사람의 얼굴 형상을 검출하고자 할 때, 종래와 달리 사람의 눈을 검출하지 않고서도 얼굴 형상을 검출할 수 있고, 사람의 얼굴이 정면을 향하지 않더라도 얼굴 형상을 용이하게 검출할 수 있도록 한다.

Description

레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치{Method and apparatus for detecting a face shape using level set method}
도 1은 본 발명에 따른 레벨 셋 방식을 이용한 얼굴 형상 검출방법을 설명하기 위한 일 실시예의 플로차트이다.
도 2a 및 도 2b는 레벨 셋 방식에 의해 형상 곡선이 형성되는 일 예를 나타내는 도면이다.
도 3은 레벨 셋 방식에 의해 형성된 초기의 형상 곡선 및 진화된 형상 곡선의 일 예를 나타내는 도면이다.
도 4는 도 1에 도시된 제14 단계를 설명하기 위한 일 실시예의 플로차트이다.
도 5a 및 도 5b는 각각 제2 초기 형상 모델 및 제3 초기 형상 모델의 일 예를 나타내는 도면이다.
도 6a 내지 도 6c는 정면을 향하는 얼굴에 대한 본 발명의 얼굴 형상 검출 능력을 종래의 기술과 비교하기 위해 얼굴을 도시한 일 예의 도면이다.
도 7a 내지 도 7c는 좌측으로 회전된 얼굴에 대한 본 발명의 얼굴 형상 검출 능력을 종래의 기술과 비교하기 위해 도시한 일 예의 도면이다.
도 8은 본 발명의 얼굴 형상 검출 능력을 종래의 기술과 비교하기 위해 그래 프로 비교한 일 예의 도면이다.
도 9는 본 발명의 얼굴 형상 검출 능력 중 눈 위치의 검출을 종래의 기술과 비교하기 위해 그래프로 비교한 일 예의 도면이다.
도 10은 본 발명에 따른 레벨 셋 방식을 이용한 얼굴 형상 검출장치를 설명하기 위한 일 실시예의 블록도이다.
도 11은 도 10에 도시된 이웃 경계점 검출 제어부를 설명하기 위한 일 실시예의 블록도이다.
〈도면의 주요 부호에 대한 간단한 설명〉
100: 형상 모델 배치 제어부 110: 형상 곡선 진화 제어부
120: 이웃 경계점 검출 제어부 130: 모델 각도 검출부
140: 각도 범위 조사부 200: 이웃 경계점 검출부
210: 이웃 경계점 위치 조사부 220: 이웃 경계점 설정부
230: 이웃 경계점 검출여부 조사부
본 발명은 디지털 카메라 등의 화상처리장치에 관한 것으로, 보다 상세하게는 얼굴의 형상을 신속히 검출할 수 있는 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치에 관한 것이다.
화상처리장치에서 사람의 얼굴을 검출하기 위해서 주성분 분석기법(PCA: Principal Component Analysis)을 사용한다. 주성분 분석기법이란, 학습 영상의 통계적 특성을 이용하여 학습 영상의 전체적 특성을 표현하는 고유 영상으로 분해하고, 고유 영상의 선형 조합으로 임의의 영상을 표현하는 기법이다.
즉, 주성분 분석 기법은 고유값(Eigenvalue)과 고유 벡터(eigenvector)를 이용한 임의의 입력 데이터를 주성분별로 분석하는 방법으로, 현재 가장 보편적으로 쓰이는 얼굴 형상 검출방법이다.
그런데, 이러한 얼굴 검출방법을 사용하면, 사람 얼굴의 위치 변화와 조명 화에 취약한 문제점을 가지고 있다. 즉, 사람이 고개를 좌우로 돌리거나, 위 아래로 움직일 경우에 대한 얼굴 형상의 검출에 있어서 많은 에러 율을 나타낸다. 또한, 조명이 갑자기 변화하게 되면, 조명에 따른 얼굴 형상의 검출 능력이 종래 기술에 의하면 저하되는 문제점이 있다.
본 발명이 이루고자 하는 기술적 과제는, 레벨 셋 방식을 이용한 얼굴 형상 검출방법을 제공하는데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는, 레벨 셋 방식을 이용한 얼굴 형상 검출장치를 제공하는데 있다.
상기의 과제를 이루기 위해, 본 발명에 따른 레벨 셋 방식을 이용한 얼굴 형상 검출방법은 (a) 정면을 향하는 제1 초기 형상 모델을 얼굴 주변에 배치시키는 단계, (b) 제1 초기 형상 모델을 기준으로 하여, 레벨 셋 방식을 이용해 형상 곡선 을 진화시키는 단계, (c) 진화된 형상 곡선에 근접하는 제1 초기 형상 모델의 제1 내지 제M(여기서, M은 1보다 큰 양의 정수) 초기 경계점들에 이웃하는 제1 내지 제M 이웃 경계점들을 검출하는 단계, (d) 검출된 제1 내지 제M 이웃 경계점들에 대응하는 수정 형상 모델을 상기 얼굴 주변에 배치시키는 단계, (e) 수정 형상 모델의 모델 각도를 검출하는 단계, (f) 검출된 모델 각도가 소정 각도 범위를 초과하는가를 조사하는 단계 및 (g) 검출된 모델 각도가 소정 각도의 범위를 초과한다면, 초과되는 각도 범위에 따라 좌측으로 회전된 제2 초기 형상 모델 또는 우측으로 회전된 제3 초기 형상 모델을 상기 얼굴 주변에 배치시키고 상기 (c) 단계로 진행하는 단계를 구비하는 것을 특징으로 한다.
상기의 다른 과제를 이루기 위해, 본 발명에 따른 레벨 셋 방식을 이용한 얼굴 형상 검출장치는 정면을 향하는 제1 초기 형상 모델을 기준으로 하여, 레벨 셋 방식을 이용해 형상 곡선을 진화시키는 형상 곡선 진화 제어부, 진화된 형상 곡선에 근접하는 제1 초기 형상 모델의 제1 내지 제M(여기서, M은 1보다 큰 양의 정수) 초기 경계점들에 이웃하는 제1 내지 제M 이웃 경계점들을 검출하는 이웃 경계점 검출 제어부, 수정 형상 모델의 모델 각도를 검출하는 모델 각도 검출부, 검출된 모델 각도가 소정 각도 범위를 초과하는가를 조사하는 각도 범위 조사부 및 제1 초기 형상 모델, 검출된 제1 내지 제M 이웃 경계점들에 대응하는 수정 형상 모델, 좌측으로 회전된 제2 초기 형상 모델 및 우측으로 회전된 제3 초기 형상 모델 중 어느 하나를 얼굴 주변에 배치시키는 형상 모델 배치 제어부를 구비하는 것을 특징으로 한다.
이하, 본 발명에 의한 레벨 셋 방식을 이용한 얼굴 형상 검출방법을 첨부된 도면을 참조하여 다음과 같이 설명한다.
도 1은 본 발명에 의한 레벨 셋 방식을 이용한 얼굴 형상 검출방법을 설명하기 위한 일 실시예의 플로차트이다.
먼저, 정면을 향하는 제1 초기 형상 모델을 얼굴 주변에 배치시킨다(제10 단계). 제1 초기 형상 모델은 얼굴 크기에 따라 모델의 크기 등이 조정되어, 검출하고자 하는 얼굴 주변에 배치시킨다.
제10 단계 후에, 제1 초기 형상 모델을 기준으로 하여, 레벨 셋 방식을 이용해 형상 곡선을 진화시킨다(제12 단계). 레벨 셋 방식이란, 레벨 셋으로 표현된 곡선을 진화시키는 수학적 방법이다.
[수학식 1]
Figure 112004056137639-pat00001
Figure 112004056137639-pat00002
는 레벨 함수이다.
컨투어(C)는 제로 레벨 셋(zero level set)으로 표현한다.
[수학식 2]
Figure 112004056137639-pat00003
컨투어(C)를 속도 (F)만큼 법선 방향으로 진화시킨다.
[수학식 3]
Figure 112004056137639-pat00004
수학식 3은 초기 컨투어를 나타낸다.
[수학식 4]
NBW(narrow band with)=min{
Figure 112004056137639-pat00005
∈skeleton}
여기서, NBW는 후술할 형상 곡선이 진화되는 소정 범위를 나타낸다.
전술한 수학식 1, 2, 3 및 4를 이용해 형상 곡선을 진화시킨다.
도 2a 및 도 2b는 레벨 셋 방식에 의해 형상 곡선이 형성되는 일 예를 나타내는 도면이다. 도 2a 및 도 2b에 보는 바와 같이, 형상 곡선이 진화되면서 얼굴 형상에 유사한 형상 곡선이 만들어진다.
제12 단계는 제1 초기 형상 모델의 기하학적 정보 및 모델 각도에 의해 정해진 지점을 기준으로 하여 형상 곡선을 진화시키는 것을 특징으로 한다. 예를 들어, 제1 초기 형상 모델의 눈 형상을 기준으로 제1 초기 형상 모델의 모델 각도에 따라 형상 곡선을 진화시킬 수 있다.
도 3은 레벨 셋 방식에 의해 형성된 초기의 형상 곡선 및 진화된 형상 곡선의 일 예를 나타내는 도면이다. 도 3에서 보는 바와 같이, 제1 초기 형상 모델의 눈 형상을 기준으로 초기의 형상 곡선이 위치하고 있으며, 이런 초기의 형상 곡선이 진화되게 된다.
제12 단계 후에, 진화된 형상 곡선에 근접하는 제1 초기 형상 모델의 제1 내 지 제M(여기서, M은 1보다 큰 양의 정수) 초기 경계점들에 이웃하는 제1 내지 제M 이웃 경계점들을 검출한다(제14 단계). 제1 초기 형상 모델을 표현하는 초기 경계점들의 숫자가 "M"이라 할 때, 제14 단계는 제1 내지 제M 초기 경계점들에 이웃하는 각각의 제1 내지 제M 이웃 경계점들을 검출한다.
도 4는 도 1에 도시된 제14 단계를 설명하기 위한 일 실시예의 플로차트이다.
먼저, 제1 내지 제M 초기 경계점들 중 제K(여기서, K는 1 이상이고, M 이하인 양의 정수) 초기 경계점에 이웃하는 제K 이웃 경계점을 검출한다(제30 단계).
제30 단계 후에, 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함되는가를 조사한다(제32 단계). 형상 곡선의 소정 범위라 함은, 도 3에 도시된 바와 같이, 형상 곡선에 대해 일정 거리만큼의 폭을 의미한다. 이러한 소정 곡선은 사전에 정해진다. 만일, 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함된다면, 제36 단계로 진행한다. 제K 이웃 경계점이 형상 곡선의 소정 범위 내에 포함된다는 것은 제K 초기 경계점에 대응하는 제K 이웃 경계점이 얼굴 형상을 검출하기에 적절한 경계점으로서 적절히 선택되었다는 것을 의미한다.
그러나, 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함되지 않는다면, 제K 초기 경계점을 제K 이웃 경계점으로서 설정한다(제34 단계). 제K 이웃 경계점이 형상 곡선의 소정 범위 내에 포함되지 않는다는 것은 제K 초기 경계점에 대응하는 제K 이웃 경계점이 얼굴 형상을 검출하기 위한 적절한 이웃 경계점이 아니라는 것을 의미한다. 따라서, 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함되지 않는다면, 검출된 제K 이웃 경계점은 의미 없는 이웃 경계점으로 취급하고, 대신에 제K 초기 경계점 그 자체를 제K 이웃 경계점으로서 설정한다.
제34 단계 후에, 제1 내지 제M 이웃 경계점들 모두가 검출되었는가를 조사한다(제36 단계). 또한, 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함된다면, 제1 내지 제M 이웃 경계점들 모두가 검출되었는가를 조사한다. 제1 초기 형상 모델의 제1 내지 제M 초기 경계점들 각각에 대한 제1 내지 제M 이웃 경계점들이 모두 검출되었는가를 조사하는 것이다.
만일, 제1 내지 제M 이웃 경계점들 모두가 검출되지 않았다면, 검출되지 아니한 이웃 경계점들을 검출하기 위해 제30 단계로 진행하고, 전술한 제30 내지 제36 단계를 반복한다.
한편, 제14 단계 후에, 검출된 제1 내지 제M 이웃 경계점들에 대응하는 수정 형상 모델을 얼굴 주변에 배치시킨다(제16 단계). 수정 형상 모델은 제1 초기 형상 모델에 비해 얼굴 형상에 보다 유사한 모델로서, 검출된 제1 내지 제M 이웃 경계점들에 대응하는 모델이다.
제16 단계 후에, 수정 형상 모델의 모델 각도를 검출한다(제18 단계). 얼굴 형상에 배치된 수정 형상 모델의 모델 각도는 수정 형상 모델의 입 형상에 대한 가로 중심 좌표, 좌우 눈 형상 중 어느 하나에 대한 가로 중심 좌표 및 좌우 눈 사이의 거리를 이용하여 검출하는 것을 특징으로 한다. 다음의 수학식 5는 모델 각도를 구하기 위한 식이다.
[수학식 5]
A=tan-1(2*(d-2*(m-i)/(d*(5-s)))
여기서, A는 모델 각도를 의미하고, d는 양 눈 사이의 거리를 의미하고, m은 입 형상에 대한 가운데의 가로 중심 좌표를 의미하고, i는 우측 눈의 가운데 가로 중심 좌표를 의미한다. (m-i)는 입의 중심과 오른쪽 눈의 중심을 기준으로 두 눈사이의 절반값을 계산한고, 이를 2배하여 정면에서의 두눈의 길이와 비교하여 계산된 차이값으로 얼굴이 회전된 각도를 계산하는 것을 의미한다. 여기서 입의 중심위치는 얼굴이 정면에 있든 회전하든 상관없이 항상 두눈의 중간에 있다고 가정한다. 또한, 얼굴모양을 실린더 형태라고 가정할 때, s는 학습에 의해 만들어진 실린더 얼굴 모델의 평균 크기를 의미한다.
제18 단계 후에, 검출된 모델 각도가 소정 각도 범위를 초과하는가를 조사한다(제20 단계). 소정 각도 범위는 초기 형상 모델을 대체하기 위해 기준이 되는 임계 각도이다. 예를 들어, 소정 각도 범위가 "-5"도 내지 "5"도 사이라면, 검출된 모델 각도가 "-5"도 내지 "5"도 사이에 속하는가 여부를 조사한다.
만일, 검출된 모델 각도가 소정 각도의 범위를 초과한다면, 초과되는 각도 범위에 따라 좌측으로 회전된 제2 초기 형상 모델 또는 우측으로 회전된 제3 초기 형상 모델을 얼굴 주변에 배치시키고 상기 제14 단계로 진행한다(제22 단계). 예를 들어, 소정 각도 범위가 "-5"도 내지 "5"도라 하고, 검출된 모델 각도의 크기가 "5"보다 크다면, 초기 형상 모델이 좌측으로 회전된 제2 초기 형상 모델을 얼굴 주 변에 배치시키고, 검출된 모델 각도의 크기가 "-5"보다 작다면, 초기 형상 모델이 우측으로 회전된 제3 초기 형상 모델을 얼굴 주변에 배치시킨다.
도 5a 및 도 5b는 각각 제2 초기 형상 모델 및 제3 초기 형상 모델의 일 예를 나타내는 도면이다. 도 5a는 좌측으로 회전된 제2 초기 형상 모델의 일 예를 나타내고 있으며, 도 5b는 우측으로 회전된 제3 초기 형상 모델의 일 예를 나타내고 있다.
제2 초기 형상 모델 또는 제3 초기 형상 모델이 얼굴 주변에 배치되면, 전술한 제14 단계 내지 제22 단계를 반복하면서, 적절한 얼굴 형상을 검출한다.
도 6a 내지 도 6c는 정면을 향하는 얼굴에 대한 본 발명의 얼굴 형상 검출 능력을 종래의 기술과 비교하기 위해 얼굴을 도시한 일 예의 도면이다. 도 6a는 정면을 향하는 얼굴 형상에 제1 초기 형상 모델을 배치시킨 상태를 나타낸 것이고, 도 6b는 종래 기술에 의해 얼굴 형상을 검출한 상태를 나타낸 것이고, 도 6c는 본 발명인 레벨 셋 방식을 이용한 얼굴 형상 검출방법에 의해 얼굴 형상을 검출한 상태를 나타낸 것이다. 도 6b 및 도 6c를 비교하여 보면, 본 발명에 의해 에러 율이 적은 얼굴 형상을 검출할 수 있음을 알 수 있다.
도 7a 내지 도 7c는 좌측으로 회전된 얼굴에 대한 본 발명의 얼굴 형상 검출 능력을 종래의 기술과 비교하기 위해 얼굴을 도시한 일 예의 도면이다. 도 7a는 좌측으로 회전된 얼굴 형상에 제1 초기 형상 모델을 배치시킨 상태를 나타낸 것이고, 도 7b는 종래 기술에 의해 얼굴 형상을 검출한 상태를 나타낸 것이고, 도 7c는 본 발명인 레벨 셋 방식을 이용한 얼굴 형상 검출방법에 의해 얼굴 형상을 검출한 상 태를 나타낸 것이다. 도 7b 및 도 7c를 비교하여 보면, 좌우측으로 회전된 얼굴 형상에 대하여 본 발명에 의해 에러 율이 적은 얼굴 형상을 검출할 수 있음을 알 수 있다.
도 8은 본 발명의 얼굴 형상 검출 능력을 종래의 기술과 비교하기 위해 그래프로 비교한 일 예의 도면이다. 도 8에서 보는 바와 같이, 종래 기술과 본 발명의 얼굴 형상 검출 능력을 비교해 보면, 본 발명에 의해 에러 율이 적은 얼굴 형상을 검출할 수 있음을 알 수 있다.
도 9는 본 발명의 얼굴 형상 검출 능력 중 눈 위치의 검출을 종래의 기술과 비교하기 위해 그래프로 비교한 일 예의 도면이다. 도 9에서도 보는 바와 같이, 종래 기술과 본 발명의 얼굴 형상 중 눈 위치의 검출 능력을 비교해 보면, 본 발명에 의해 에러 율이 적은 눈 위치의 검출 능력을 확인할 수 있다.
이하, 본 발명에 의한 레벨 셋 방식을 이용한 얼굴 형상 검출장치를 첨부된 도면을 참조하여 다음과 같이 설명한다.
도 10은 본 발명에 의한 레벨 셋 방식을 이용한 얼굴 형상 검출장치를 설명하기 위한 일 실시예의 블록도로서, 형상 모델 배치 제어부(100), 형상 곡선 진화 제어부(110), 이웃 경계점 검출 제어부(120), 모델 각도 검출부(130) 및 각도 범위 조사부(140)로 구성된다.
형상 모델 배치 제어부(100)는 얼굴 형상을 검출하라는 제어명령을 입력단자 IN1을 통해 입력받으면, 제1 초기 형상 모델을 얼굴 주변에 배치시키고, 배치시킨 결과를 형상 곡선 진화 제어부(110)로 출력한다. 형상 모델 배치 제어부(100)는 얼 굴 크기에 따라 제1 초기 형상 모델의 크기 등을 조정하여, 얼굴 주변에 배치시킨다.
형상 곡선 진화 제어부(110)는 정면을 향하는 제1 초기 형상 모델을 기준으로 하여, 레벨 셋 방식을 이용해 형상 곡선을 진화시키고, 진화시킨 결과를 이웃 경계점 검출 제어부(120)로 출력한다.
형상 곡선 진화 제어부(110)는 제1 초기 형상 모델의 기하학적 정보 및 모델 각도에 의해 정해진 지점을 기준으로 하여 형상 곡선을 진화시키는 것을 특징으로 한다.
이웃 경계점 검출 제어부(120)는 진화된 형상 곡선에 근접하는 제1 초기 형상 모델의 제1 내지 제M(여기서, M은 1보다 큰 양의 정수) 초기 경계점들에 이웃하는 제1 내지 제M 이웃 경계점들을 검출하고, 검출한 결과를 형상 모델 배치 제어부(100)로 출력한다.
도 11은 도 10에 도시된 이웃 경계점 검출 제어부(120)를 설명하기 위한 일 실시예의 블록도로서, 이웃 경계점 검출부(200), 이웃 경계점 위치 조사부(210), 이웃 경계점 설정부(220) 및 이웃 경계점 검출여부 조사부(230)로 구성된다.
이웃 경계점 검출부(200)는 제1 내지 제M 초기 경계점들 중 제K(여기서, K는 1 이상이고, M 이하인 양의 정수) 초기 경계점에 이웃하는 제K 이웃 경계점을 검출하고, 검출한 결과를 이웃 경계점 위치 조사부(210)로 출력한다.
이웃 경계점 위치 조사부(210)는 이웃 경계점 검출부(200)로부터 수신된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함되는가를 조사하고, 조사한 결과를 이웃 경계점 서정부(220) 및 이웃 경계점 검출여부 조사부(230)로 출력한다.
이웃 경계점 설정부(220)는 이웃 경계점 위치 조사부(210)의 조사된 결과에 응답하여, 제K 초기 경계점을 제K 이웃 경계점으로서 설정한다. 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함되지 않는다는 조사결과를 이웃 경계점 위치 조사부(210)로부터 입력받으면, 이웃 경계점 설정부(220)는 제K 초기 경계점을 제K 이웃 경계점으로서 설정하고, 설정한 결과를 이웃 경계점 검출여부 조사부(230)로 출력한다. 제K 이웃 경계점이 형상 곡선의 소정 범위 내에 포함되지 않는다는 것은 제K 초기 경계점에 대응하는 제K 이웃 경계점이 얼굴 형상을 검출하기 위한 적절한 이웃 경계점이 아니라는 것을 의미한다. 따라서, 이웃 경계점 설정부(220)는 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함되지 않는다면, 검출된 제K 이웃 경계점은 의미 없는 이웃 경계점으로 취급하고, 대신에 제K 초기 경계점 그 자체를 제K 이웃 경계점으로서 설정한다.
이웃 경계점 검출여부 조사부(230)는 제1 내지 제M 이웃 경계점들 모두가 검출되었는가를 조사한다. 검출된 제K 이웃 경계점이 진화된 형상 곡선의 소정 범위 내에 포함된다는 조사결과를 이웃 경계점 위치 조사부(210)로부터 입력받으면, 이웃 경계점 검출여부 조사부(230)는 제1 내지 제M 이웃 경계점들 모두가 검출되었는가를 조사한다. 또한, 이웃 경계점 검출여부 조사부(230)는 이웃 경계점 설정부(220)의 설정된 결과에 응답하여, 제1 내지 제M 이웃 경계점들 모두가 검출되었는가를 조사한다.
제K 이웃 경계점이 형상 곡선의 소정 범위 내에 포함된다는 것은 제K 초기 경계점에 대응하는 제K 이웃 경계점이 얼굴 형상을 검출하기에 적절한 경계점으로서 적절히 선택되었다는 것을 의미한다.
형상 모델 배치 제어부(100)는 이웃 경계점 검출 제어부(120)의 검출된 결과에 응답하여, 검출된 제1 내지 제M 이웃 경계점들에 대응하는 수정 형상 모델을 얼굴 주변에 배치시키고, 배치시킨 결과를 모델 각도 검출부(130)로 출력한다.
모델 각도 검출부(130)는 수정 형상 모델의 모델 각도를 검출하고, 검출한 결과를 각도 범위 조사부(140)로 출력한다.
모델 각도 검출부(130)는 수정 형상 모델의 입 형상에 대한 가로 중심 좌표, 좌우 눈 형상 중 어느 하나에 대한 가로 중심 좌표 및 양 눈 사이의 거리를 이용하여 수정 형상 모델의 모델 각도를 검출하는 것을 특징으로 한다. 모델 각도 검출부(130)는 모델 각도의 검출을 위해 전술한 수학식 4를 이용한다.
각도 범위 조사부(140)는 모델 각도 검출부(130)에서 검출된 모델 각도가 소정 각도 범위를 초과하는가를 조사하고, 조사한 결과를 형상 모델 배치 제어부(100)로 출력한다.
형상 모델 배치 제어부(100)는 좌측으로 회전된 제2 초기 형상 모델 및 우측으로 회전된 제3 초기 형상 모델 중 어느 하나를 얼굴 주변에 배치시킨다. 각도 범위 조사부(140)로부터 모델 각도가 소정 각도 범위를 초과한다는 조사 결과를 입력받으면, 형상 모델 배치 제어부(100)는 소정 각도 범위를 벗어난 모델 각도의 크기에 따라 좌측으로 회전된 제2 초기 형상 모델 및 우측으로 회전된 제3 초기 형상 모델 중 어느 하나를 얼굴 주변에 배치시킨다.
제2 초기 형상 모델 또는 제3 초기 형상 모델형상 모델의 배치된 결과는 이웃 경계점 검출 제어부(120)로 출력되어, 이웃 경계점 검출 제어부(120)는 다시 제2 초기 형상 모델 또는 제3 초기 형상 모델의 초기 경계점들에 이웃하는 이웃 경계점들을 검출한다.
이러한, 과정을 반복함으로써, 최적의 얼굴 형상을 검출할 수 있다.
이러한 본원 발명인 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치는 이해를 돕기 위하여 도면에 도시된 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 분야에서 통상적 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위에 의해 정해져야 할 것이다.
이상에서 설명한 바와 같이, 본 발명에 의한 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치는 화상처리장치에서 사람의 얼굴 형상을 검출하고자 할 때, 종래와 달리 사람의 눈을 검출하지 않고서도 얼굴 형상을 검출할 수 있고, 사람의 얼굴이 정면을 향하지 않더라도 얼굴 형상을 용이하게 검출할 수 있는 효과가 있다.
또한, 본 발명에 의한 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치는 얼굴 형상을 검출할 때에 종래에 비해 에러 율을 최소화할 수 있는 장점이 있다.

Claims (8)

  1. (a) 정면을 향하는 제1 초기 형상 모델을 얼굴 주변에 배치시키는 단계;
    (b) 상기 제1 초기 형상 모델을 기준으로 하여, 레벨 셋 방식을 이용해 형상 곡선을 진화시키는 단계;
    (c) 상기 진화된 형상 곡선에 근접하는 상기 제1 초기 형상 모델의 제1 내지 제M(여기서, M은 1보다 큰 양의 정수) 초기 경계점들에 이웃하는 제1 내지 제M 이웃 경계점들을 검출하는 단계;
    (d) 상기 검출된 제1 내지 제M 이웃 경계점들에 대응하는 수정 형상 모델을 상기 얼굴 주변에 배치시키는 단계;
    (e) 상기 수정 형상 모델의 모델 각도를 검출하는 단계;
    (f) 상기 검출된 모델 각도가 소정 각도 범위를 초과하는가를 조사하는 단계; 및
    (g) 상기 검출된 모델 각도가 소정 각도의 범위를 초과한다면, 초과되는 각도 범위에 따라 좌측으로 회전된 제2 초기 형상 모델 또는 우측으로 회전된 제3 초기 형상 모델을 상기 얼굴 주변에 배치시키고 상기 (c) 단계로 진행하는 단계를 구비하는 것을 특징으로 하는 레벨 셋 방식을 이용한 얼굴 형상 검출방법.
  2. 제1 항에 있어서, 상기 (b) 단계는
    상기 제1 초기 형상 모델의 기하학적 정보 및 모델 각도에 의해 정해진 지점을 기준으로 하여 상기 형상 곡선을 진화시키는 것을 특징으로 하는 레벨 셋 방식 을 이용한 얼굴 형상 검출방법.
  3. 제1 항에 있어서, 상기 (c) 단계는
    (c1) 상기 제1 내지 제M 초기 경계점들 중 제K(여기서, K는 1 이상이고, M 이하인 양의 정수) 초기 경계점에 이웃하는 제K 이웃 경계점을 검출하는 단계;
    (c2) 상기 검출된 제K 이웃 경계점이 상기 진화된 형상 곡선의 소정 범위 내에 포함되는가를 조사하는 단계;
    (c3) 상기 검출된 제K 이웃 경계점이 상기 진화된 형상 곡선의 상기 소정 범위 내에 포함되지 않는다면, 상기 제K 초기 경계점을 상기 제K 이웃 경계점으로서 설정하는 단계;
    (c4) 상기 제1 내지 제M 이웃 경계점들 모두가 검출되었는가를 조사하는 단계를 구비하고,
    상기 (c3) 단계에서 상기 검출된 제K 이웃 경계점이 상기 진화된 형상 곡선의 상기 소정 범위 내에 포함된다면, 상기 (c4) 단계로 진행하고, 상기 (c4) 단계에서 상기 제1 내지 제M 이웃 경계점들 모두가 검출되지 않았다면, 상기 (c1) 단계로 진행하는 것을 특징으로 하는 레벨 셋 방식을 이용한 얼굴 형상 검출방법.
  4. 제1 항에 있어서, 상기 (e) 단계는
    상기 수정 형상 모델의 입 형상에 대한 가로 중심 좌표, 좌우 눈 형상 중 어느 하나에 대한 가로 중심 좌표 및 좌우 눈 사이의 거리를 이용하여 상기 수정 형 상 모델의 상기 모델 각도를 검출하는 것을 특징으로 하는 레벨 셋 방식을 이용한 얼굴 형상 검출방법.
  5. 정면을 향하는 제1 초기 형상 모델을 기준으로 하여, 레벨 셋 방식을 이용해 형상 곡선을 진화시키는 형상 곡선 진화 제어부;
    상기 진화된 형상 곡선에 근접하는 상기 제1 초기 형상 모델의 제1 내지 제M(여기서, M은 1보다 큰 양의 정수) 초기 경계점들에 이웃하는 제1 내지 제M 이웃 경계점들을 검출하는 이웃 경계점 검출 제어부;
    상기 수정 형상 모델의 모델 각도를 검출하는 모델 각도 검출부;
    상기 검출된 모델 각도가 소정 각도 범위를 초과하는가를 조사하는 각도 범위 조사부; 및
    상기 제1 초기 형상 모델, 상기 검출된 제1 내지 제M 이웃 경계점들에 대응하는 수정 형상 모델, 좌측으로 회전된 제2 초기 형상 모델 및 우측으로 회전된 제3 초기 형상 모델 중 어느 하나를 얼굴 주변에 배치시키는 형상 모델 배치 제어부를 구비하는 것을 특징으로 하는 레벨 셋 방식을 이용한 얼굴 형상 검출장치.
  6. 제5 항에 있어서, 상기 형상 곡선 진화 제어부는
    상기 제1 초기 형상 모델의 기하학적 정보 및 모델 각도에 의해 정해진 지점을 기준으로 하여 상기 형상 곡선을 진화시키는 것을 특징으로 하는 레벨 셋 방식을 이용한 얼굴 형상 검출장치.
  7. 제5 항에 있어서, 상기 이웃 경계점 검출 제어부는
    상기 제1 내지 제M 초기 경계점들 중 제K(여기서, K는 1 이상이고, M 이하인 양의 정수) 초기 경계점에 이웃하는 제K 이웃 경계점을 검출하는 이웃 경계점 검출부;
    상기 검출된 제K 이웃 경계점이 상기 진화된 형상 곡선의 소정 범위 내에 포함되는가를 조사하는 이웃 경계점 위치 조사부;
    상기 이웃 경계점 위치 조사부의 조사된 결과에 응답하여, 상기 제K 초기 경계점을 상기 제K 이웃 경계점으로서 설정하는 이웃 경계점 설정부;
    상기 제1 내지 제M 이웃 경계점들 모두가 검출되었는가를 조사하는 이웃 경계점 검출여부 조사부를 구비하는 것을 특징으로 하는 레벨 셋 방식을 이용한 얼굴 형상 검출장치.
  8. 제5 항에 있어서, 상기 모델 각도 검출부는
    상기 수정 형상 모델의 입 형상에 대한 가로 중심 좌표, 좌우 눈 형상 중 어느 하나에 대한 가로 중심 좌표 및 좌우 눈 사이의 거리를 이용하여 상기 수정 형상 모델의 상기 모델 각도를 검출하는 것을 특징으로 하는 레벨 셋 방식을 이용한 얼굴 형상 검출장치.
KR1020040099029A 2004-11-30 2004-11-30 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치 KR100590570B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020040099029A KR100590570B1 (ko) 2004-11-30 2004-11-30 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치
US11/288,267 US7697736B2 (en) 2004-11-30 2005-11-29 Face detection method and apparatus using level-set method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040099029A KR100590570B1 (ko) 2004-11-30 2004-11-30 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치

Publications (2)

Publication Number Publication Date
KR20060060139A KR20060060139A (ko) 2006-06-05
KR100590570B1 true KR100590570B1 (ko) 2006-06-19

Family

ID=36567452

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040099029A KR100590570B1 (ko) 2004-11-30 2004-11-30 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치

Country Status (2)

Country Link
US (1) US7697736B2 (ko)
KR (1) KR100590570B1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8106968B1 (en) * 2008-02-20 2012-01-31 Cognitech, Inc. System and method for pattern detection and camera calibration
US9348339B2 (en) 2010-09-29 2016-05-24 Mks Instruments, Inc. Method and apparatus for multiple-channel pulse gas delivery system
US9111130B2 (en) 2011-07-08 2015-08-18 Microsoft Technology Licensing, Llc Facilitating face detection with user input
US8983203B2 (en) * 2011-10-14 2015-03-17 Ulsee Inc. Face-tracking method with high accuracy
KR102290301B1 (ko) * 2015-05-06 2021-08-17 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR20180065135A (ko) * 2016-12-07 2018-06-18 삼성전자주식회사 셀프 구조 분석을 이용한 구조 잡음 감소 방법 및 장치
CN111105400B (zh) * 2019-12-20 2023-09-19 中国医学科学院阜外医院 瓣膜图像处理方法、瓣膜图像处理装置及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000044789A (ko) * 1998-12-30 2000-07-15 전주범 표준 얼굴 윤곽 패턴을 이용한 얼굴 윤곽선 근사화 방법
KR20030040680A (ko) * 2001-11-15 2003-05-23 삼성에스디에스 주식회사 얼굴 검출 방법 및 그 장치
KR20040040826A (ko) * 2002-11-08 2004-05-13 한국전자통신연구원 Svm을 이용한 얼굴 영역 검출 방법

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4975969A (en) * 1987-10-22 1990-12-04 Peter Tal Method and apparatus for uniquely identifying individuals by particular physical characteristics and security system utilizing the same
JP3279913B2 (ja) * 1996-03-18 2002-04-30 株式会社東芝 人物認証装置、特徴点抽出装置及び特徴点抽出方法
US6044168A (en) * 1996-11-25 2000-03-28 Texas Instruments Incorporated Model based faced coding and decoding using feature detection and eigenface coding
CA2312315A1 (en) * 1997-12-01 1999-06-10 Arsev H. Eraslan Three-dimensional face identification system
WO2002056241A1 (en) * 2001-01-12 2002-07-18 University Of Florida Computational algorithms for image registration
US7177471B2 (en) * 2002-02-01 2007-02-13 Siemens Corporate Research, Inc. Shape priors for level set representations
US7277582B2 (en) * 2002-12-06 2007-10-02 Siemens Corporate Research, Inc. User interactive level set methods for image segmentation
US7469370B2 (en) * 2002-12-23 2008-12-23 Hewlett-Packard Development Company, L.P. Enabling multiple testing devices
GB2399245B (en) * 2003-03-03 2005-07-27 Motorola Inc Method for segmenting an image and an image transmission system and image transmission unit therefor
US7191164B2 (en) * 2003-08-19 2007-03-13 Intel Corporation Searching for object images with reduced computation
US7317816B2 (en) * 2003-08-19 2008-01-08 Intel Corporation Enabling content-based search of objects in an image database with reduced matching
US7483553B2 (en) * 2004-03-29 2009-01-27 Microsoft Corporation Caricature exaggeration
US7589720B2 (en) * 2004-08-04 2009-09-15 Microsoft Corporation Mesh editing with gradient field manipulation and user interactive tools for object merging

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000044789A (ko) * 1998-12-30 2000-07-15 전주범 표준 얼굴 윤곽 패턴을 이용한 얼굴 윤곽선 근사화 방법
KR20030040680A (ko) * 2001-11-15 2003-05-23 삼성에스디에스 주식회사 얼굴 검출 방법 및 그 장치
KR20040040826A (ko) * 2002-11-08 2004-05-13 한국전자통신연구원 Svm을 이용한 얼굴 영역 검출 방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
논문

Also Published As

Publication number Publication date
US20060115161A1 (en) 2006-06-01
US7697736B2 (en) 2010-04-13
KR20060060139A (ko) 2006-06-05

Similar Documents

Publication Publication Date Title
US7689034B2 (en) Learning method for detectors, face detection method, face detection apparatus, and face detection program
CN105023010B (zh) 一种人脸活体检测方法及系统
EP2596746B1 (en) Pupil detection device and pupil detection method
KR101247147B1 (ko) 디지털 영상 획득 장치에서의 얼굴 탐색 및 검출
CN107506693B (zh) 畸变人脸图像校正方法、装置、计算机设备和存储介质
US11423699B2 (en) Action recognition method and apparatus and electronic equipment
US20110075933A1 (en) Method for determining frontal face pose
KR101235791B1 (ko) 방위 독립적인 얼굴 검출기를 제공하는 방법, 장치 및 컴퓨터 프로그램 제품
CN107145870B (zh) 一种视频中人脸的识别系统
KR101761586B1 (ko) 홍채와 공막의 경계선 검출 방법
US10869617B2 (en) Gait pathology detection and monitoring system, and method
KR100590570B1 (ko) 레벨 셋 방식을 이용한 얼굴 형상 검출방법 및 장치
US20150023606A1 (en) Reliability acquiring apparatus, reliability acquiring method, and reliability acquiring program
US20220237817A1 (en) Systems and methods for artificial intelligence based image analysis for placement of surgical appliance
US11222439B2 (en) Image processing apparatus with learners for detecting orientation and position of feature points of a facial image
WO2012121137A1 (ja) 画像処理装置および画像処理プログラム
CN114495241A (zh) 一种图像识别方法及装置、电子设备、存储介质
CN113168693A (zh) 人检测装置以及人检测方法
WO2016106617A1 (zh) 人眼定位方法及装置
CN107346544B (zh) 一种图像处理方法和电子设备
CN108446639A (zh) 低功耗增强现实设备
EP3663716A1 (en) Method and system for determining existence of magnetic disturbances
JP2004054442A (ja) 顔検出装置、顔検出方法および顔検出プログラム
KR20180072517A (ko) 홍채와 공막의 경계선 검출 방법
CN111968141A (zh) 基于多尺度叠加的非经典感受野轮廓检测方法

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130522

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140522

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20150522

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20160520

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20170518

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20180517

Year of fee payment: 13

FPAY Annual fee payment

Payment date: 20190520

Year of fee payment: 14