KR101937323B1 - 위장 얼굴 판별 장치 및 방법 - Google Patents

위장 얼굴 판별 장치 및 방법 Download PDF

Info

Publication number
KR101937323B1
KR101937323B1 KR1020120103375A KR20120103375A KR101937323B1 KR 101937323 B1 KR101937323 B1 KR 101937323B1 KR 1020120103375 A KR1020120103375 A KR 1020120103375A KR 20120103375 A KR20120103375 A KR 20120103375A KR 101937323 B1 KR101937323 B1 KR 101937323B1
Authority
KR
South Korea
Prior art keywords
face
camouflaged
skin color
region
signal sources
Prior art date
Application number
KR1020120103375A
Other languages
English (en)
Other versions
KR20140036803A (ko
Inventor
윤호섭
박찬규
김계경
김도형
김재홍
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020120103375A priority Critical patent/KR101937323B1/ko
Priority to US14/016,740 priority patent/US8965068B2/en
Publication of KR20140036803A publication Critical patent/KR20140036803A/ko
Application granted granted Critical
Publication of KR101937323B1 publication Critical patent/KR101937323B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176Recognition of faces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40Spoof detection, e.g. liveness detection
    • G06V40/45Detection of the body part being alive

Abstract

본 발명은 얼굴 영역에서 피부색 영역만을 추출하고, 추출된 피부색 영역의 맥박 성분 존재 여부를 통해 위장 얼굴 여부를 판별할 수 있는 장치 및 방법에 관한 것이다.
이를 위하여 본 발명의 실시 예에 따른 위장 얼굴 판별 장치는 외부로부터 입력된 입력 영상에서 얼굴 영역을 검출하는 얼굴 영역 검출부와, 얼굴 영역에서 피부색 영역을 검출하는 피부색 모델링부와, 피부색 영역에 대한 신호에서 맥박 성분이 존재하는지의 여부를 통해 입력 영상 내 얼굴이 위장 얼굴인지를 판별하는 위장 얼굴 판별부를 포함할 수 있다.

Description

위장 얼굴 판별 장치 및 방법{SYSTEM FOR GENERATING SIGNCRIPTION OF WIRELESS MOBIE COMMUNICATION}
본 발명은 위장 얼굴 판별에 관한 것으로, 더욱 상세하게는 피부색 영역 내 맥박 성분 존재 여부를 기반으로 위장 얼굴을 판별할 수 있는 위장 얼굴 판별 장치 및 방법에 관한 것이다.
얼굴 영상 인식 기술은 이용한 보안시스템이나, ATM 출금 시스템 등에 활용될 수 있다. 이러한 얼굴 영상 인식의 대표적인 예로 단일 카메라를 이용한 얼굴 인식 시스템이 있다. 이러한 얼굴 인식 시스템은 카메라를 통해 범죄자나 나쁜 의도를 가진 사람의 사진 영상이 입력될 때, 사진 영상이 내 얼굴이 위장 얼굴인지 일반 얼굴 인지로 판별하는데 있어 어려움을 격어 왔다.
이러한 문제점을 해결하기 위해 종래의 기술로는 3차원 거리센서나 두 개의 카메라를 이용해 이용해 얼굴에 굴곡이 있는지 확인하여 위장 얼굴과 일반 얼굴을 판별하는 방법이 있다. 그러나, 3차원 거리 센서를 이용한 방법은 비교적 고가이며, 외부 환경의 자연광에서는 작동이 되지 않는 단점이 존재하였고, 두 개의 카메라를 이용하는 방법은 기존의 장비에 설치가 어려우며, 성능도 만족할만하지 못하였다. 또한, 하나의 카메라를 이용해 사진인지를 판별하는 기술은 사진 주변의 테두리를 찾아서 검증하는 방법을 사용하기도 하였으나, 사진을 얼굴 형태에 맞춰 오렸을 경우 해결할 수 있는 방법이 제한된다. 이외에도 얼굴과 유사한 가면을 쓰거나, 실리콘 피부로 변장했을 때에는 위장 얼굴 판별이 어렵다.
대한민국 등록특허 10-1015646호에는 피부색 영역의 검출 통해 얼굴을 검출하기 위한 기술에 대해 기재되어 있다.
상기와 같은 문제점들을 해결하기 위해 안출된 것으로서, 본 발명의 목적은 얼굴 영역에서 피부색 영역만을 추출하고, 추출된 피부색 영역의 맥박 성분 존재 여부를 통해 위장 얼굴 여부를 판별할 수 있는 장치 및 방법을 제공하는데 있다.
본 발명의 일 관점에 따르면, 본 발명의 실시 예에 따른 위장 얼굴 판별 장치는 외부로부터 입력된 입력 영상에서 얼굴 영역을 검출하는 얼굴 영역 검출부와, 상기 얼굴 영역에서 피부색 영역을 검출하는 피부색 모델링부와, 상기 피부색 영역에 대한 신호에서 맥박 성분이 존재하는지의 여부를 통해 상기 입력 영상 내 얼굴이 위장 얼굴인지를 판별하는 위장 얼굴 판별부를 포함할 수 있다.
본 발명의 실시 예에 따른 위장 얼굴 판별 장치에서 상기 피부색 모델링부는, 상기 얼굴 영역 영상의 좌표계를 변환하는 변환부와, 상기 좌표계가 변환된 영상을 이용하여 임계치를 추출하는 임계치 추출부와, 상기 임계치를 이용하여 상기 피부색 영역을 검출하는 모델링부를 포함할 수 있다.
본 발명의 실시 예에 따른 위장 얼굴 판별 장치에서 상기 모델링부는, 상기 검출된 피부색 영역에 대해 이진화를 수행하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 장치는 상기 이진화된 피부색 영역 내 R, G, B 신호의 평균을 계산하는 신호 계산부와, 상기 산출된 R, G, B 신호의 평균을 누적 저장하는 버퍼를 포함하며, 상기 위장 얼굴 판별부는, 기 설정된 시간 동안 상기 버퍼에 저장된 평균을 이용하여 상기 맥박 성분의 존재 여부를 판단하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 장치는 상기 버퍼에 저장된 상기 R, G, B 신호의 평균을 필터링하여 신호원 1, 2, 3을 추출하는 신호 처리부를 포함하며, 상기 위장 얼굴 판별부는, 상기 신호원 1, 2, 3의 주파수 특성을 분석하여 주기성 정도를 추출하며, 상기 추출된 주기성 정도에 의거하여 상기 맥박 성분 존재 여부를 판별하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 장치에서 상기 위장 얼굴 판별부는, 상기 신호원 1, 2, 3에 대해 FFT, MFCC(Mel-scale Frequency Cepstral Cofficient) 및 피치(pitch)를 적용하여 특징을 추출하며, 상기 추출된 특징을 SVM(Support Vector Machine) 신경망 학습기를 이용해 학습을 수행하여 상기 맥박 성분 존재 여부를 판별하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 장치에서 상기 변환부는, 상기 얼굴 영역의 R, G, B영상을 HSV 또는 YIQ 영상으로 변환하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 장치에서 상기 임계치 추출부는, 상기 얼굴 영역의 RGB영상이 HSV 영상으로 변환된 경우 H, S, V 채널에 대한 히스토그램을 계산하고, 상기 히스토그램 각각의 피크 위치로부터 좌우 누적된 화소 카운트들의 합이 기 설정된 값이 되는 지점을 상기 H, S 및 V 채널의 임계치로 추출하는 것을 특징으로 한다.
본 발명의 다른 측면에 따르면, 본 발명의 실시 예에 따른 위장 얼굴 판별 방법은 외부로부터 입력된 입력 영상에서 얼굴 영역을 검출하는 단계와, 상기 얼굴 영역에서 피부색 영역을 검출하는 단계와, 상기 피부색 영역에 대한 신호에서 맥박 성분 존재 여부를 판단하는 단계와, 상기 맥박 성분의 존재 여부에 따라 상기 얼굴 영역 내 얼굴의 위장 여부를 판별하는 단계를 포함할 수 있다.
본 발명의 실시 예에 따른 위장 얼굴 판별 방법에서 상기 피부색 영역을 검출하는 단계는, 상기 얼굴 영역 영상의 좌표계를 변환하는 단계와, 상기 좌표계가 변환된 영상을 이용하여 임계치를 추출하는 단계와, 상기 임계치를 이용하여 상기 얼굴 영역에서 상기 피부색 영역을 검출하는 단계를 포함할 수 있다.
본 발명의 실시 예에 따른 위장 얼굴 판별 방법은 상기 피부색 영역에 대한 이진화를 수행하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 방법은 상기 이진화된 피부색 영역 내 R, G, B 신호의 평균을 산출하는 단계와, 상기 산출된 R, G, B 신호의 평균을 버퍼에 저장하는 단계를 포함하며, 상기 맥박 성분 존재 여부를 판단하는 단계는, 기 설정된 시간 동안 상기 버퍼에 저장된 평균을 이용하여 상기 맥박 성분의 존재 여부를 판단하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 방법은 상기 버퍼에 저장된 상기 R, G, B 신호의 평균을 필터링하여 신호원 1, 2, 3을 추출하는 단계를 포함하며, 상기 맥박 성분의 존재 여부를 판단하는 단계는, 상기 위장 얼굴 판별부는, 상기 신호원 1, 2, 3의 주파수 특성을 분석하여 주기성 정도를 추출하며, 상기 추출된 주기성 정도에 의거하여 상기 맥박 성분 존재 여부를 판단하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 방법에서 상기 좌표계를 변환하는 단계는, 상기 얼굴 영역의 RGB영상에서 밝기 정도가 분리된 HSV 또는 YIQ 영상으로 변환하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 위장 얼굴 판별 방법에서 상기 임계치를 추출하는 단계는, 상기 얼굴 영역의 RGB영상이 HSV 영상으로 변환된 경우 H, S, V 채널에 대한 히스토그램을 계산하는 단계와, 상기 H, S, V 채널 각각의 히스토그램에서 상기 임계치를 추출하는 단계를 포함할 수 있다.
본 발명의 실시 예에 따른 위장 얼굴 판별 방법에서 상기 히스토그램에서 상기 임계치를 추출하는 단계는, 상기 H, S, V 채널 각각의 히스토그램의 피크 위치로부터 좌우 누적된 화소 카운트들의 합이 기 설정된 값이 되는 지점을 상기 H, S 및 V 채널의 임계치로 추출하는 것을 특징으로 한다.
본 발명에 따르면, 피부색 영역의 신호 변화를 기반으로 맥박 성분을 추출하여 위장 얼굴을 판별함으로써, 위장 얼굴 판별의 신뢰성을 향상시킬 수 있다.
또한, 본 발명은 검출된 얼굴 전체 영역에서 피부색이 아닌 부분을 피부색 모델링을 통해 제거한 후 맥박 성분을 추출함으로써, 실제 맥박 정보와 보다 유사한 맥박 정보를 제공할 수 있을 뿐만 아니라 위장 얼굴 판별의 속도 향상을 기대할 수 있다.
도 1은 본 발명의 실시 예에 따른 위장 얼굴 판별 장치를 도시한 블록도,
도 2a 내지 도 2c는 본 발명의 실시 예에서 임계치 추출 과정을 설명하기 위한 도면,
도 3은 본 발명의 실시 예에 따라 모델링 과정의 결과를 도시한 예시도,
도 4a내지 도 4c는 본 발명의 실시 예에 따라 버퍼에 저장된 누적된 RGB 신호의 예시도,
도 5a 내지 도 5c는 누적된 RGB 신호를 기반으로 생성된 분리된 신호원1,2,3의 예시도,
도 6은 본 발명의 실시 예에 따른 위장 얼굴 판별 장치에서 맥박 성분 검출 과정을 설명하기 위한 도면,
도 7은 본 발명의 실시 예에 따른 위장 얼굴 판별 과정을 도시한 흐름도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 발명의 실시 예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명의 실시 예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이하, 첨부된 도면을 참조하여 위장 얼굴을 판별할 수 있는 장치 및 방법에 대해 설명한다.
도 1은 본 발명의 실시 예에 따른 위장 얼굴 판별 장치를 도시한 블록도이다.
도 1에 도시된 바와 같이, 본 발명의 실시 예에 따른 위장 얼굴 판별 장치(100)는 얼굴 영역 검출부(110), 피부색 모델링부(120), 신호 계산부(130), 버퍼(135), 신호 처리부(140) 및 위장 얼굴 판별부(150)로 구성될 수 있다.
얼굴 영역 검출부(110)는 외부로부터 입력된 입력 영상에서 얼굴 영역을 검출할 수 있다. 얼굴 영역을 검출하는 방법은 당업자에 의해 널리 알려진 기술로서, 이에 대한 설명은 생략한다. 이러한 얼굴 영역에는 피부색 영역뿐만 아니라 다양한 영역, 예컨대 눈, 입술, 콧구멍, 수염 등이 존재할 수 있다.
피부색 모델링부(120)는 피부색 모델링 과정을 통해 검출된 얼굴 영역에서 피부색 영역을 검출할 수 있다. 즉, 피부색 모델링부(120)는 시간의 경과에 따라 피부색 밝기 변화를 감지하지 위한 피부색 모델링 및 이진화를 수행할 수 있다.
이러한 피부색 모델링부(120)는 변환부(122), 임계치 추출부(124) 및 모델링부(126) 등을 포함할 수 있다.
변환부(122)는 조명에 영향을 많이 받는 입력 영상, 즉 RGB 영상을 밝기 정보가 분리된 영상으로 변환할 수 있다. 즉, 변환부(122)는 RGB 영상을 HSV 또는 YIQ 영상으로 변환하여 모델링을 수행할 수 있다.
본 발명의 실시 예에서는 RGB 영상을 HSV 영상으로 변환하는 것을 예로 들어 설명하기로 한다.
임계치 추출부(124)는 변환된 HSV 영상을 기반으로 임계치를 계산할 수 있다. 즉, 임계치 추출부(124)는 검출된 얼굴 영역에 대해 RGB 채널을 HSV 변환하고, 각 3채널에 대해 도 2a 내지 도 2c에 도시된 바와 같은 히스토램을 산출한 후 각 히스토그램의 피크(peak) 위치로부터 좌우로 누적된 화소 카운트들의 합이 95%가 되는 지점, 즉 Hth1, Hth2, Sth1, Sth2, Vth1, Vth2 값을 검색하여 각 H, S, V 채널에 대한 임계치를 추출할 수 있다. 이렇게 추출된 각 채널에 대한 임계치는 모델링부(126)에 제공된다.
모델링부(126)는 임계치를 이용한 이진화 과정을 통해 얼굴에서 피부색과 다른 정보를 갖는 눈, 입술, 콧구멍, 수염 등의 영역이 제외된 순수한 피부색 영역만을 추출하여 모델링한 후 모델링된 영역을 이진화할 수 있다. 예를 들어, 모델링부(126)는 도 3에 도시된 바와 같이, 피부색 영역만을 모델링한 후 모델링 영역(300)에 대한 이진화를 수행할 수 있다.
신호 계산부(130)는 이진화된 모델링 영역(300)에서 R, G, B 신호의 평균 값을 계산한 후 버퍼(135)에 저장할 수 있다.
얼굴 영역 검출부(110), 피부색 모델링부(120) 및 신호 계산부(130)는 매 프레임에 대해 얼굴 영역을 검출한 후 검출된 얼굴 영역에서 피부색 영역을 추출하며, 추출된 피부색 영역에서 R, G, B 신호를 추출한 후 버퍼(135)에 저장할 수 있다.
버퍼(135)에는 기 설정된 시간 동안 해당 R, G, B 신호를 누적 저장한 후 이를 신호 처리부(140)에 제공할 수 있다. 예를 들어, 도 4a 내지 도 4c에 도시된 바와 같이, 3-30초 동안 누적된 R, G, B 신호를 신호 처리부(140)에 제공할 수 있다.
신호 처리부(140)는 도 4a내지 도 4c에 도시된 R, G, B 신호에 적응적 필터링을 수행하여 분리된 신호원, 즉 맥박 신호인지의 여부를 판별하기 위한 신호원을 출력한다. 다시 말해서, 도 5a 내지 도 5c에 도시된 바와 같이, 신호 처리부(140)는 R 신호를 필터링하여 분리된 신호원 1을 출력하며, G 신호를 필터링하여 분리된 신호원 2를 출력하며, B 신호를 필터링하여 분리된 신호원 3을 출력할 수 있다.
이러한 신호 처리부(140)의 예로는 ICA(Independent Component Analysis, 이하, 'ICA'라고 함)를 들 수 있으나, 이에 한정하지는 않는다.
위장 얼굴 판별부(150)는 분리된 신호원 1, 2, 3으로부터 주파수 특성을 분석하여 주기성 정도를 추출하며, 추출된 주기성 정도에 따라 분리된 신호원 1, 2, 3이 맥박 신호인지를 판단할 수 있다. 분리된 신호원 1, 2, 3에 맥박 성분이 존재하는 지의 여부를 판단하는 방법으로는, 도 6에 도시된 바와 같이, 분리된 신호원 1, 2, 3의 주파수에 대한 정규화된 전력(normalized Lomb periodgram)을 계산한 후 전력이 최대인 지점의 주파수(fpeak)에서 전력과 기 설정된 임계치(threshold value)간의 비교를 통해 맥박 성분의 존재 여부를 판단할 수 있다.
위장 얼굴 판별부(150)는 맥박 성분의 존재 여부에 따라 얼굴 영역 내 위장인지의 여부를 판별할 수 있다.
상기의 같이 본 발명의 실시 예에서는 'normalized Lomb periodgram'을 이용하여 맥박 성분 존재 여부를 판별하는 것으로 예를 들어 설명하였지만, 다른 방법으로 FFT, MFCC, 피치(pitch) 등을 이용하여 신호 처리부(140)를 통해 출력된 분리된 신호원 1,2,3에서 특징 정보를 추출한 후 추출된 특징 정보를 SVM 신경망 등의 학습기를 이용해 학습하며, 학습한 결과를 통해 맥박 신호인지를 판별할 수 있다.
상기와 같은 구성을 갖는 위장 얼굴 판별 장치가 동작하는 과정에 대해 도 7을 참조하여 설명한다.
도 7은 본 발명의 실시 예에 따라 입력 영상 내 얼굴이 위장 얼굴인지의 여부를 판별하는 과정을 도시한 흐름도이다.
도 7에 도시된 바와 같이, 먼저 카메라 등에 의해 촬영된 영상이 입력되거나, 외부로부터 영상이 입력되면(S200), 얼굴 영역 검출부(110)는 입력된 영상에서 얼굴 영역을 검출한다(S202). 검출된 얼굴 영역에 대응되는 부분은 피부색 모델링부(120)에 입력될 수 있다.
피부색 모델링부(120)는 변환부(122)를 통해 얼굴 영역의 RGB 영상의 좌표계를 변환하는데, 예를 들어 RGB 영상을 HSV로 변환한다(S204).
이후, 임계치 추출부(124)는 피부색 모델링 과정을 통해 3개 채널, 즉 H, S, V 채널의 히스토그램을 생성한다(S206).
그리고 나서, 임계치 추출부(124)는 3채널의 히스토그램에서 임계치를 각각 추출(S208)한 후 이를 모델링부(126)에 제공한다.
모델링부(126)는 추출된 임계치를 이용하여 이진화를 수행하여 피부색과 다른 정보를 갖는 영역, 예컨대 눈, 입술, 콧구멍, 수염 등의 영역을 제외한 피부색 영역만을 추출하여 모델링한 후 모델링된 피부색 영역에 대한 이진화를 수행한다 (S210).
그리고 나서, 신호 계산부(130)는 이진화된 모델링 영역에 대한 R, G, B 신호의 평균 값을 계산한 후 버퍼(135)에 저장한다(S212).
이후, 신호 계산부(130)는 기 설정된 시간, 예컨대 30초가 경과되었는지를 판단한다(S214).
S214의 판단 결과, 기 설정된 시간이 경과되지 않은 경우 S200으로 진행하여 이후 단계를 수행한다. 즉, 30초 동안 입력 영상의 얼굴 영역에서 피부색 영역만의 R, G, B신호의 평균 값을 계산한 후 버퍼(135)에 저장한다.
S214의 판단 결과, 기 설정된 시간이 경과한 경우 신호 처리부(140)는 버퍼(135)에 누적 저장된 R, G, B 신호 각각에 대한 필터링을 수행하여 분리된 신호원 1, 2, 3을 생성한다(S216).
그리고 나서, 위장 얼굴 판별부(150)는 분리된 신호원 1, 2, 3으로부터 주파수 특성을 분석하여 주기성 정도를 추출(S218)하며, 추출된 주기성 정도에 따라 분리된 신호원 1, 2, 3에 맥박 성분이 존재하는지를 판단한다(S220).
S220의 판단 결과, 맥박 성분이 존재하는 경우 위장 얼굴 판별부(150)는 입력되는 영상 내 얼굴을 실제 얼굴로 판별하며(S222), 그렇지 않을 경우 위장 얼굴로 판별한다(S224).
한편 상술한 본 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시될 수 있다. 따라서 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위에 의해 정하여져야 한다.
100 : 위장 얼굴 판별 장치 110 : 얼굴 영역 검출부
120 : 피부색 모델링부 130 : 신호 계산부
135 : 버퍼부 140 : 신호 처리부
150 : 위장 얼굴 판별부

Claims (18)

  1. 위장 얼굴 판별 장치에 있어서
    외부로부터 입력된 입력 영상에서 얼굴 영역을 검출하는 얼굴 영역 검출부와,
    상기 얼굴 영역에서 피부색 영역을 검출하는 피부색 모델링부와,
    상기 피부색 영역에 대한 신호에서 맥박 성분이 존재하는지의 여부를 통해 상기 입력 영상 내 얼굴이 위장 얼굴인지를 판별하는 위장 얼굴 판별부를 포함하되,
    상기 검출된 피부색 영역에 대한 신호에서 신호원들을 추출하여 상기 신호원들에 대한 주파수 주기성 정보를 획득하고,
    상기 맥박 성분은 상기 신호원들로부터 획득한 주파수 주기성 정보에 기초하여 존재 여부가 판단되는 것을 특징으로 하는
    위장 얼굴 판별 장치.
  2. 제 1 항에 있어서,
    상기 피부색 모델링부는,
    상기 얼굴 영역 영상의 좌표계를 변환하는 변환부와,
    상기 좌표계가 변환된 영상을 이용하여 임계치를 추출하는 임계치 추출부와,
    상기 임계치를 이용하여 상기 피부색 영역을 검출하는 모델링부를 포함하는
    위장 얼굴 판별 장치.
  3. 제 2 항에 있어서,
    상기 모델링부는,
    상기 검출된 피부색 영역에 대해 이진화를 수행하는 것을 특징으로 하는
    위장 얼굴 판별 장치.
  4. 제 3항에 있어서,
    상기 이진화된 피부색 영역 내 R, G, B 신호의 평균을 계산하는 신호 계산부와,

    상기 산출된 R, G, B 신호의 평균을 누적 저장하는 버퍼를 포함하며,
    상기 위장 얼굴 판별부는,
    기 설정된 시간 동안 상기 버퍼에 저장된 평균을 이용하여 상기 맥박 성분의 존재 여부를 판단하는 것을 특징으로 하는
    위장 얼굴 판별 장치.
  5. 제 4 항에 있어서,
    상기 기 설정된 시간은, 3-30초인 것을 특징으로 하는
    위장 얼굴 판별 장치.
  6. 제 4 항에 있어서,
    상기 신호원들은 신호원 1, 2, 3으로 구성되고,
    상기 버퍼에 저장된 상기 R, G, B 신호의 평균을 필터링하여 상기 신호원 1, 2, 3을 추출하는 신호 처리부를 포함하며,
    상기 위장 얼굴 판별부는, 상기 신호원 1, 2, 3의 주파수 특성을 분석하여 주기성 정도를 추출하며, 상기 추출된 주기성 정도에 의거하여 상기 맥박 성분 존재 여부를 판별하는 것을 특징으로 하는
    위장 얼굴 판별 장치.
  7. 제 6 항에 있어서,
    상기 위장 얼굴 판별부는, 상기 신호원 1, 2, 3에 대해 FFT, MFCC(Mel-scale Frequency Cepstral Cofficient) 및 피치(pitch)를 적용하여 특징을 추출하며, 상기 추출된 특징을 SVM(Support Vector Machine) 신경망 학습기를 이용해 학습을 수행하여 상기 맥박 성분 존재 여부를 판별하는 것을 특징으로 하는
    위장 얼굴 판별 장치.
  8. 제 2 항에 있어서,
    상기 변환부는,
    상기 얼굴 영역의 R, G, B영상을 HSV 또는 YIQ 영상으로 변환하는 것을 특징으로 하는
    위장 얼굴 판별 장치.
  9. 제 2 항에 있어서,
    상기 임계치 추출부는,
    상기 얼굴 영역의 RGB영상이 HSV 영상으로 변환된 경우 H, S, V 채널에 대한 히스토그램을 계산하고, 상기 히스토그램 각각의 피크 위치로부터 좌우 누적된 화소 카운트들의 합이 기 설정된 값이 되는 지점을 상기 H, S 및 V 채널의 임계치로 추출하는 것을 특징으로 하는
    위장 얼굴 판별 장치.
  10. 위장 얼굴 판별 방법에 있어서
    외부로부터 입력된 입력 영상에서 얼굴 영역을 검출하는 단계와,
    상기 얼굴 영역에서 피부색 영역을 검출하는 단계와,
    상기 피부색 영역에 대한 신호에서 맥박 성분 존재 여부를 판단하는 단계와,
    상기 맥박 성분의 존재 여부에 따라 상기 얼굴 영역 내 얼굴의 위장 여부를 판별하는 단계를 포함하되,
    상기 검출된 피부색 영역에 대한 신호에서 신호원들을 추출하여 상기 신호원들에 대한 주파수 주기성 정보를 획득하고,
    상기 맥박 성분은 상기 신호원들로부터 획득한 주파수 주기성 정보에 기초하여 존재 여부가 판단되는 것을 특징으로 하는 위장 얼굴 판별 방법.
  11. 제 10 항에 있어서,
    상기 피부색 영역을 검출하는 단계는,
    상기 얼굴 영역 영상의 좌표계를 변환하는 단계와,
    상기 좌표계가 변환된 영상을 이용하여 임계치를 추출하는 단계와,
    상기 임계치를 이용하여 상기 얼굴 영역에서 상기 피부색 영역을 검출하는 단계를 포함하는
    위장 얼굴 판별 방법.
  12. 제 11 항에 있어서,
    상기 피부색 영역에 대한 이진화를 수행하는 단계를 더 포함하는 것을 특징으로 하는
    위장 얼굴 판별 방법.
  13. 제 12 항에 있어서,
    상기 이진화된 피부색 영역 내 R, G, B 신호의 평균을 산출하는 단계와,
    상기 산출된 R, G, B 신호의 평균을 버퍼에 저장하는 단계를 포함하며,
    상기 맥박 성분 존재 여부를 판단하는 단계는,
    기 설정된 시간 동안 상기 버퍼에 저장된 평균을 이용하여 상기 맥박 성분의 존재 여부를 판단하는 것을 특징으로 하는
    위장 얼굴 판별 방법.
  14. 제 13 항에 있어서,
    상기 기 설정된 시간은, 3-30초인 것을 특징으로 하는
    위장 얼굴 판별 방법.
  15. 제 14 항에 있어서,
    상기 신호원들은 신호원 1, 2, 3으로 구성되고,
    상기 버퍼에 저장된 상기 R, G, B 신호의 평균을 필터링하여 상기 신호원 1, 2, 3을 추출하는 단계를 포함하며,
    상기 맥박 성분의 존재 여부를 판단하는 단계는,
    상기 신호원 1, 2, 3의 주파수 특성을 분석하여 주기성 정도를 추출하며, 상기 추출된 주기성 정도에 의거하여 상기 맥박 성분 존재 여부를 판단하는 것을 특징으로 하는
    위장 얼굴 판별 방법.
  16. 제 11 항에 있어서,
    상기 좌표계를 변환하는 단계는,
    상기 얼굴 영역의 RGB영상에서 밝기 정도가 분리된 HSV 또는 YIQ 영상으로 변환하는 것을 특징으로 하는
    위장 얼굴 판별 방법.
  17. 제 16 항에 있어서,
    상기 임계치를 추출하는 단계는,
    상기 얼굴 영역의 RGB영상이 HSV 영상으로 변환된 경우 H, S, V 채널에 대한 히스토그램을 계산하는 단계와,
    상기 H, S, V 채널 각각의 히스토그램에서 상기 임계치를 추출하는 단계를 포함하는
    위장 얼굴 판별 방법.
  18. 제 17 항에 있어서,
    상기 히스토그램에서 상기 임계치를 추출하는 단계는,
    상기 H, S, V 채널 각각의 히스토그램의 피크 위치로부터 좌우 누적된 화소 카운트들의 합이 기 설정된 값이 되는 지점을 상기 H, S 및 V 채널의 임계치로 추출하는 것을 특징으로 하는
    위장 얼굴 판별 방법.
KR1020120103375A 2012-09-18 2012-09-18 위장 얼굴 판별 장치 및 방법 KR101937323B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120103375A KR101937323B1 (ko) 2012-09-18 2012-09-18 위장 얼굴 판별 장치 및 방법
US14/016,740 US8965068B2 (en) 2012-09-18 2013-09-03 Apparatus and method for discriminating disguised face

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120103375A KR101937323B1 (ko) 2012-09-18 2012-09-18 위장 얼굴 판별 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20140036803A KR20140036803A (ko) 2014-03-26
KR101937323B1 true KR101937323B1 (ko) 2019-01-11

Family

ID=50274521

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120103375A KR101937323B1 (ko) 2012-09-18 2012-09-18 위장 얼굴 판별 장치 및 방법

Country Status (2)

Country Link
US (1) US8965068B2 (ko)
KR (1) KR101937323B1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3270354B1 (en) * 2015-03-13 2022-10-26 Nec Corporation Living body detection device, living body detection method, and recording medium
KR102291039B1 (ko) 2015-03-25 2021-08-19 한국전자통신연구원 사용자 맞춤형 운동 서비스 제공 방법 및 장치
JP6308161B2 (ja) 2015-03-31 2018-04-11 株式会社エクォス・リサーチ 脈波検出装置、及び脈波検出プログラム
WO2016159150A1 (ja) * 2015-03-31 2016-10-06 株式会社エクォス・リサーチ 脈波検出装置、及び脈波検出プログラム
KR102477190B1 (ko) 2015-08-10 2022-12-13 삼성전자주식회사 얼굴 인식 방법 및 장치
US10339410B1 (en) * 2016-01-13 2019-07-02 Snap Inc. Color extraction of a video stream
KR101870226B1 (ko) * 2016-09-01 2018-06-25 상명대학교산학협력단 위조 바이오 정보 검출 장치 및 방법
US11721090B2 (en) * 2017-07-21 2023-08-08 Samsung Electronics Co., Ltd. Adversarial method and system for generating user preferred contents
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
KR102530240B1 (ko) * 2021-11-24 2023-05-10 (주)씨유박스 비접촉 ppg 기반의 얼굴 영상 위변조 판별 방법 및 분석장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007043328A1 (ja) * 2005-10-12 2007-04-19 Konica Minolta Holdings, Inc. データ検出装置及びデータ検出方法
JP2007157115A (ja) * 2005-11-14 2007-06-21 Omron Corp 認証装置及び携帯端末

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7076088B2 (en) * 1999-09-03 2006-07-11 Honeywell International Inc. Near-infrared disguise detection
US20040223629A1 (en) * 2003-05-06 2004-11-11 Viswis, Inc. Facial surveillance system and method
KR100715323B1 (ko) 2004-10-11 2007-05-07 (주)버뮤다정보기술 얼굴인식기술을 이용한 전자금융 부정 거래 방지 장치 및방법
US7809163B2 (en) * 2004-12-27 2010-10-05 Southern Taiwan University Method for prohibiting a person with a facial mask to operate an automatic teller machine
JP4696610B2 (ja) * 2005-03-15 2011-06-08 オムロン株式会社 被写体認証装置、顔認証装置、携帯電話、及び被写体認証方法
KR101303877B1 (ko) * 2005-08-05 2013-09-04 삼성전자주식회사 얼굴 검출과 피부 영역 검출을 적용하여 피부의 선호색변환을 수행하는 방법 및 장치
US20080019575A1 (en) * 2006-07-20 2008-01-24 Anthony Scalise Digital image cropping using a blended map
KR100851981B1 (ko) * 2007-02-14 2008-08-12 삼성전자주식회사 비디오 영상에서 실 객체 판별 방법 및 장치
US8315441B2 (en) * 2007-06-29 2012-11-20 Nec Corporation Masquerade detection system, masquerade detection method and masquerade detection program
US8538092B2 (en) * 2007-09-14 2013-09-17 Canon Kabushiki Kaisha Image processing apparatus
CN102197412B (zh) * 2008-10-28 2014-01-08 日本电气株式会社 伪装检测系统和伪装检测方法
KR20100073191A (ko) * 2008-12-22 2010-07-01 한국전자통신연구원 거리 정보를 이용한 위조 얼굴 검출 방법 및 장치
US8295557B2 (en) * 2009-01-12 2012-10-23 Arcsoft Hangzhou Co., Ltd. Face image processing method
KR101015646B1 (ko) 2009-03-11 2011-02-22 삼성전기주식회사 얼굴검출장치 및 이를 이용한 얼굴검출방법
RU2431190C2 (ru) * 2009-06-22 2011-10-10 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ и устройство распознавания рельефности лица
KR101700595B1 (ko) * 2010-01-05 2017-01-31 삼성전자주식회사 얼굴 인식 장치 및 그 방법
KR101877981B1 (ko) * 2011-12-21 2018-07-12 한국전자통신연구원 가버 특징과 svm 분류기를 이용하여 위변조 얼굴을 인식하기 위한 시스템 및 그 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007043328A1 (ja) * 2005-10-12 2007-04-19 Konica Minolta Holdings, Inc. データ検出装置及びデータ検出方法
JP2007157115A (ja) * 2005-11-14 2007-06-21 Omron Corp 認証装置及び携帯端末

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
PPG 측정에 의한 개인 인증 방법
위조 생체 검출 기술의 현황과 전망

Also Published As

Publication number Publication date
US20140079295A1 (en) 2014-03-20
US8965068B2 (en) 2015-02-24
KR20140036803A (ko) 2014-03-26

Similar Documents

Publication Publication Date Title
KR101937323B1 (ko) 위장 얼굴 판별 장치 및 방법
CN108182409B (zh) 活体检测方法、装置、设备及存储介质
KR101901591B1 (ko) 얼굴 인식 장치 및 그 제어방법
JP4241763B2 (ja) 人物認識装置及びその方法
JP3279913B2 (ja) 人物認証装置、特徴点抽出装置及び特徴点抽出方法
CN109145742B (zh) 一种行人识别方法及系统
CN106485191B (zh) 一种驾驶员疲劳状态检测方法及系统
RU2431190C2 (ru) Способ и устройство распознавания рельефности лица
KR20170006355A (ko) 모션벡터 및 특징벡터 기반 위조 얼굴 검출 방법 및 장치
CN108171138B (zh) 一种生物特征信息获取方法和装置
US9412029B2 (en) Apparatus for recognizing iris and operating method thereof
JP5061563B2 (ja) 検出装置、生体判定方法、およびプログラム
KR101187600B1 (ko) 스테레오 카메라 기반의 3차원 실시간 입술 특징점 추출을 이용한 음성 인식 장치 및 음성 인식 방법
EP2299388A2 (en) Apparatus and method for detecting face
KR20140078163A (ko) 영상에서의 휴먼 인지 장치 및 방법
CN108875488B (zh) 对象跟踪方法、对象跟踪装置以及计算机可读存储介质
Das et al. Human face detection in color images using HSV color histogram and WLD
JP2003317084A (ja) 顔画像からの目検出システム、目検出方法および目検出用プログラム
KR20080073598A (ko) 실시간 얼굴 인식을 위한 방법 및 장치
KR20160115119A (ko) 영상 기반의 운전자 졸음 인식 시스템 및 그 인식 방법
EP2998928A1 (en) Apparatus and method for extracting high watermark image from continuously photographed images
KR101703690B1 (ko) 홍채 인식 장치 및 그 동작 방법
EP4120184A1 (en) Information processing device, information processing method, and program
KR101087250B1 (ko) 피부색 영역 검출을 이용한 얼굴 검출 장치
KR102389066B1 (ko) 얼굴 인식을 위한 얼굴영상 생성 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right