KR20080046490A - 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치 - Google Patents
몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치 Download PDFInfo
- Publication number
- KR20080046490A KR20080046490A KR1020060116016A KR20060116016A KR20080046490A KR 20080046490 A KR20080046490 A KR 20080046490A KR 1020060116016 A KR1020060116016 A KR 1020060116016A KR 20060116016 A KR20060116016 A KR 20060116016A KR 20080046490 A KR20080046490 A KR 20080046490A
- Authority
- KR
- South Korea
- Prior art keywords
- face image
- montage
- feature vector
- face
- similar
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Collating Specific Patterns (AREA)
- Processing Or Creating Images (AREA)
Abstract
본 발명에 의한 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치는 유사 몽타주 얼굴의 특징 벡터로 이루어지는 데이터베이스를 구성하는 단계; 및 입력되는 유사 몽타주 얼굴 영상의 특징 벡터를 추출하여 상기 데이터베이스내의 특징 벡터와 유사도를 비교하여 인식을 수행하는 단계;를 포함하는 것을 특징으로 하며, 몽타주 얼굴 영상의 재현 특성을 적절히 반영하는 스케치 오퍼레이터를 이용하여 특징 벡터를 추출하여 활용함으로써, 자동화된 몽타주 인식 및 이에 기반한 범죄자 얼굴 검색과 같은 얼굴 검색을 가능하게 한다.
몽타주(Montage), 몽타주 인식(Montage Recognition), 얼굴 인식(Face Recognition), 얼굴 검색(Face Identification), 특징 추출(Feature extraction)
Description
도 1은 본 발명에 따는 몽타주 얼굴 영상을 등록하는 방법의 과정을 보여주는 흐름도이다.
도 2는 본 발명에 따른 몽타주 얼굴 영상을 이용한 얼굴 인식 방법의 과정을 보여주는 흐름도이다.
도 3은 몽타주 얼굴 영상을 이용한 얼굴 인식 장치의 구성을 보여주는 블록도이다.
도 4는 스케치 오퍼레이터를 이용하여 생성된 유사 몽타주 얼굴 영상의 예를 보여주는 도면이다.
본 발명은 몽타주 얼굴 영상에 대하여 얼굴 인식 기법을 적용하여 검색 대상의 얼굴을 자동 검색하는 방법 및 그 장치에 관한 것이다.
몽타주 얼굴 영상의 인식을 위해서는, 입력되는 몽타주 얼굴 영상과 유사한 몽타주 얼굴 영상 데이터베이스가 필요하나, 현실적으로 이러한 데이터베이스의 생 성이 용이치 않아 몽타주 인식이 어려운 측면이 있어 그 대안의 필요성이 제기되고 있다.
본 발명에서는 이러한 문제를 해결하기 위하여, 일반적인 얼굴 영상 DB로부터 몽타주 얼굴 영상의 특성을 재현하기 위한 스케치 오퍼레이터를 활용하여 유사 몽타주 얼굴 영상을 생성하여, 이러한 몽타주 얼굴 영상들로부터 특징 벡터를 추출하여 몽타주 얼굴 인식을 수행함으로써, 범죄자 얼굴 검색등의 분야에서 얼굴 검색을 용이하게 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치를 제공하는데 있다.
상기의 기술적 과제를 이루기 위하여 본 발명에 의한 몽타주 얼굴 영상을 이용한 얼굴 인식 방법은 유사 몽타주 얼굴의 특징 벡터로 이루어지는 데이터베이스를 구성하는 단계; 및 입력되는 유사 몽타주 얼굴 영상의 특징 벡터를 추출하여 상기 데이터베이스내의 특징 벡터와 유사도를 비교하여 인식을 수행하는 단계;를 포함하는 것을 특징으로 한다.
상기의 기술적 과제를 이루기 위하여 본 발명에 의한 몽타주 얼굴 영상을 이용한 얼굴 인식 장치는 유사 몽타주 얼굴 영상으로부터 특징 벡터를 추출하여 저장하는 특징 벡터 저장부; 인증 대상인 얼굴 영상을 입력받아 특징 벡터를 추출한 후 상기 특징 벡터 저장부내의 특징 벡터와 유사도를 비교하여 인증을 수행하는 인증부;를 포함하는 것을 특징으로 한다.
이하, 첨부된 도면을 참조하면서 본 발명의 바람직한 일실시 예를 상세하게 설명하도록 한다. 도 1은 본 발명에 따는 몽타주 얼굴 영상을 등록하는 방법의 과정을 보여주는 흐름도이고, 도 2는 본 발명에 따른 몽타주 얼굴 영상을 이용한 얼굴 인식 방법의 과정을 보여주는 흐름도이다. 한편 도 3은 몽타주 얼굴 영상을 이용한 얼굴 인식 장치의 구성을 보여주는 블록도이며, 도 4는 스케치 오퍼레이터를 이용하여 생성된 유사 몽타주 얼굴 영상의 예를 보여주는 도면이다. 설명의 편의를 위하여 본 발명에 의한 방법과 장치를 함께 서술하도록 한다.
먼저, 특징 벡터 저장부(310)의 제1생성부(311)는 검색 대상인 얼굴 데이터베이스(320)를 액세스한 후, 스케치 오퍼레이터를 이용하여 스케치 얼굴 영상 생성 과정을 수행하여 유사 몽타주 얼굴 영성을 생성한다(S110단계). 이때 사용되는 스케치 오퍼레이터는 DIP(Difference of Inverse Probability), BDIP(Block Difference of Inverse Probability), 모폴러지 필터(Morphological Filter)등 스케치 영상을 재현할 수 있는 여타의 방법들이 사용될 수 있다. 이 스케치 오퍼레이터는 본 발명이 속하는 분야에서 통상의 지식을 가진 자에게는 자명한 기술이므로 설명을 생략한다. 다음으로 제1추출부(313)는 이러한 스케치 오퍼레이터에 의해 생성되어 제1생성부가 출력하는 유사 몽타주 영상에 대하여 특징 벡터를 추출한다(S120 단계). 이러한 특징 벡터 추출은 PCA(Principal Component Analysis), LDA(Linear Discriminant Analysis)등 전역적인 특징 추출 방법뿐만 아니라, 얼굴의 구조적인 특성을 활용하는 방법까지 다양한 방법들이 활용될 수 있다. 벡터 추출 방법들도 본 발명이 속하는 분야에서 통상의 지식을 가진 자에게는 자명한 기술 이므로 설명을 생략한다. 얼굴특징 데이터베이스(340)는 이렇게 추출된 특징 벡터를 인증부(320)가 수행하는 얼굴 인식 과정에 제공하게 된다(S130 단계).
이제, 입력 영상에 대하여 인증을 수행하는 인증부(320)의 동작을 설명한다.
입력되는 얼굴 영상은 실제 얼굴 검색을 위한 사진 또는 몽타주 얼굴 영상으로서, 후술하는 바와 같이 사진의 경우에는 유사 몽타주 얼굴 생성 과정을 통해 유사 몽타주얼굴을 생성하여 활용하고, 몽타주 얼굴 영상은 사전에 스케치된 몽타주 얼굴 영상을 활용한다. 제2생성부(321)는 상기 입력된 얼굴 영상에서 유사 몽타주 얼굴 영상으로 변환하여 출력한다(S210 단계). 이 때 제2생성부는 제1생성부와 마찬가지로 DIP, BDIP, 모폴러지 필터를 포함하는 스케치 오퍼레이션 중 하나를 적용하여 상기 얼굴 영상을 유사 몽타주 영상으로 변환하여 생성한다. 제2추출부(323)는 상기 제2생성부가 출력하는 유사 몽타주 얼굴 영상에서 특징 벡터를 추출하는데, 역시 상기 유사 몽타주 얼굴 영상에 대하여 PCA, LDA를 포함하는 전역적인 특징 추출 방법을 적용하여 추출한다(S220 단계).
다음으로 유사도 비교부(333)는 상기 제1추출부가 추출한 특징 벡터와 상기 제2추출부가 추출한 특징 벡터를 비교하여 유사도를 평가(S230 단계)하는데, 그 결과 유사도의 크기순으로 정렬하여 출력한다(S240 단계).
정리하면, 본 발명은 크게 검색 대상인 얼굴 데이터베이스로부터 유사 몽타주 얼굴 영상을 생성하여 특징벡터를 추출/저장하는 단계와, 입력된 몽타주 얼굴 영상의 특징을 추출하여 특징 벡터 데이터베이스의 특징 벡터들과의 유사도 비교를 통해 얼굴을 검색하는 단계로 구성됨을 알 수 있다.
도 4는 스케치 오퍼레이터를 이용하여 생성된 유사 몽타주 얼굴 영상의 예를 나타낸다. 원본 얼굴 영상(410)이 스케치 오퍼레이터에 의하여 상이한 유사 몽타주 얼굴 영상(420, 430)으로 변환되었음을 알 수 있다.
본 발명에 의한 몽타주 얼굴 영상을 이용한 얼굴 인식 방법은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현되는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드 디스크, 플로피 디스크, 플래쉬 메모리, 광 데이타 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들면 인터넷을 통한 전송)의 형태로 구현되는 것도 포함된다. 또한 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 통신망으로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 읽을 수 있는 코드로서 저장되고 실행될 수 있다. 또한 본 발명에 의한 폰트 롬 데이터구조도 컴퓨터로 읽을 수 있는 ROM, RAM, CD-ROM, 자기 테이프, 하드 디스크, 플로피 디스크, 플래쉬 메모리, 광 데이터 저장장치등과 같은 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현되는 것이 가능하다.
이상과 같이 본 발명은 양호한 실시 예에 근거하여 설명하였지만, 이러한 실시 예는 이 발명을 제한하려는 것이 아니라 예시하려는 것으로, 본 발명이 속하는 기술 분야의 숙련자라면 이 발명의 기술사상을 벗어남이 없이 위 실시 예에 대한 다양한 변화나 변경 또는 조절이 가능함이 자명할 것이다. 그러므로, 이 발명의 보호범위는 첨부된 청구범위에 의해서만 한정될 것이며, 위와 같은 변화예나 변경예 또는 조절 예를 모두 포함하는 것으로 해석되어야 할 것이다.
상술한 바와 같이, 본 발명에 의한 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치는 몽타주 얼굴 영상의 재현 특성을 적절히 반영하는 스케치 오퍼레이터를 이용하여 특징 벡터를 추출하여 활용함으로써, 자동화된 몽타주 인식 및 이에 기반한 범죄자 얼굴 검색과 같은 얼굴 검색을 가능하게 한다.
Claims (17)
- (a) 유사 몽타주 얼굴의 특징 벡터로 이루어지는 데이터베이스를 구성하는 단계; 및(b) 입력되는 유사 몽타주 얼굴 영상의 특징 벡터를 추출하여 상기 데이터베이스내의 특징 벡터와 유사도를 비교하여 인식을 수행하는 단계;를 포함하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 제1항에 있어서, 상기 (a)단계는(a1) 검색 대상인 얼굴 데이터베이스로부터 유사 몽타주 얼굴 영상을 생성하는 단계; 및(a2) 상기 생성된 유사 몽타주 얼굴 영상으로부터 특징 벡터를 추출하여 상기 데이터베이스에 저장하는 단계;를 포함하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 제2항에 있어서, 상기 (a1)단계는DIP, BDIP, 모폴러지 필터를 포함하는 스케치 오퍼레이션 중 하나를 적용하여 상기 유사 몽타주 영상을 생성하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 제1항에 있어서, 상기 특징 벡터는상기 유사 몽타주 얼굴 영상에 대하여 PCA, LDA를 포함하는 전역적인 특징 추출 방법을 적용하여 생성되는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 제1항에 있어서, 상기 특징 벡터는얼굴의 구조적 또는 기하학적 특징을 기초로 생성되는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 제1항에 있어서, 상기 (b)단계는(b1) 얼굴 검색을 위해 입력된 사진으로부터 유사 몽타주 얼굴 영상을 생성하는 단계;(b2) 상기 (b1)단계에서 생성된 유사 몽타주 얼굴 영상 또는 새롭게 입력된 개인의 몽타주 얼굴 영상으로부터 특징을 추출하는 단계; 및(b3) 상기 (b2)단계에서 추출된 특징 벡터와 상기 데이터 베이스내의 특징 벡터를 포함하는 정보의 유사도를 비교하는 단계;를 포함하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 제6항에 있어서, 상기 (b3)단계는상기 유사도를 비교한 후 그 유사도의 크기순으로 정렬하는 단계;를 더 포함 하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 제1내지 제4항, 또는 제5항중 하나의 항에 있어서,상기 유사 몽타주 얼굴 영상은 얼굴 영상에 대한 스케치 영상인 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 방법.
- 유사 몽타주 얼굴 영상으로부터 특징 벡터를 추출하여 저장하는 특징 벡터 저장부; 및인증 대상인 얼굴 영상을 입력받아 특징 벡터를 추출한 후 상기 특징 벡터 저장부내의 특징 벡터와 유사도를 비교하여 인증을 수행하는 인증부;를 포함하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
- 제9항에 있어서, 상기 특징 벡터 저장부는얼굴 영상을 입력받아 상기 유사 몽타주 얼굴 영상으로 변환하는 제1생성부;상기 유사 몽타주 얼굴 영상에서 상기 특징 벡터를 추출하는 제1추출부;를 포함하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
- 제10항에 있어서, 상기 제1추출부는상기 특징벡터를 상기 유사 몽타주 얼굴 영상에 대하여 PCA, LDA를 포함하는 전역적인 특징 추출 방법을 적용하여 추출하는 것을 특징으로 하는 몽타주 얼굴 영 상을 이용한 얼굴 인식 장치.
- 제11항에 있어서, 상기 제1추출부는상기 특징 벡터를 얼굴의 구조적 또는 기하학적 특징을 기초로 생성하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
- 제10항에 있어서, 상기 제1생성부는DIP, BDIP, 모폴러지 필터를 포함하는 스케치 오퍼레이션 중 하나를 적용하여 상기 얼굴 영상을 유사 몽타주 영상으로 변환하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
- 제9항에 있어서, 상기 인증부는상기 입력된 얼굴 영상에서 유사 몽타주 얼굴 영상으로 변환하는 제2생성부;상기 제2생성부가 출력하는 유사 몽타주 얼굴 영상에서 특징 벡터를 추출하는 제2추출부;상기 제1추출부가 추출한 특징 벡터와 상기 제2추출부가 추출한 특징 벡터를 비교하여 유사도를 평가하는 유사도 비교부;를 포함하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
- 제14항에 있어서, 상기 제2생성부는DIP, BDIP, 모폴러지 필터를 포함하는 스케치 오퍼레이션 중 하나를 적용하여 상기 얼굴 영상을 유사 몽타주 영상으로 변환하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
- 제14항에 있어서, 상기 제2추출부는상기 특징벡터를 상기 유사 몽타주 얼굴 영상에 대하여 PCA, LDA를 포함하는 전역적인 특징 추출 방법을 적용하여 추출하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
- 제14항에 있어서, 상기 제2추출부는상기 특징 벡터를 얼굴의 구조적 또는 기하학적 특징을 기초로 생성하는 것을 특징으로 하는 몽타주 얼굴 영상을 이용한 얼굴 인식 장치.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020060116016A KR20080046490A (ko) | 2006-11-22 | 2006-11-22 | 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020060116016A KR20080046490A (ko) | 2006-11-22 | 2006-11-22 | 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20080046490A true KR20080046490A (ko) | 2008-05-27 |
Family
ID=39663422
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020060116016A KR20080046490A (ko) | 2006-11-22 | 2006-11-22 | 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20080046490A (ko) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012030514A1 (en) * | 2010-08-31 | 2012-03-08 | Microsoft Corporation | Sketch-based image search |
| KR101385599B1 (ko) * | 2012-09-26 | 2014-04-16 | 한국과학기술연구원 | 몽타주 추론 방법 및 장치 |
| US9147125B2 (en) | 2013-05-03 | 2015-09-29 | Microsoft Technology Licensing, Llc | Hand-drawn sketch recognition |
| KR101943433B1 (ko) * | 2018-08-24 | 2019-01-29 | 전북대학교산학협력단 | 몽타주 인식을 통한 실시간 수배자 검출 시스템 |
| KR102103557B1 (ko) | 2019-05-03 | 2020-04-22 | 주식회사 페이스테그 | 얼굴 인식 방법, 얼굴 인식 장치, 이를 위한 컴퓨터 프로그램 |
| KR20220120929A (ko) * | 2021-02-24 | 2022-08-31 | 군산대학교산학협력단 | 몽타주 생성 장치 및 방법 |
-
2006
- 2006-11-22 KR KR1020060116016A patent/KR20080046490A/ko not_active Application Discontinuation
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012030514A1 (en) * | 2010-08-31 | 2012-03-08 | Microsoft Corporation | Sketch-based image search |
| US9449026B2 (en) | 2010-08-31 | 2016-09-20 | Microsoft Technology Licensing, Llc | Sketch-based image search |
| KR101385599B1 (ko) * | 2012-09-26 | 2014-04-16 | 한국과학기술연구원 | 몽타주 추론 방법 및 장치 |
| US9691132B2 (en) | 2012-09-26 | 2017-06-27 | Korea Institute Of Science And Technology | Method and apparatus for inferring facial composite |
| US9147125B2 (en) | 2013-05-03 | 2015-09-29 | Microsoft Technology Licensing, Llc | Hand-drawn sketch recognition |
| US9870516B2 (en) | 2013-05-03 | 2018-01-16 | Microsoft Technology Licensing, Llc | Hand-drawn sketch recognition |
| KR101943433B1 (ko) * | 2018-08-24 | 2019-01-29 | 전북대학교산학협력단 | 몽타주 인식을 통한 실시간 수배자 검출 시스템 |
| KR102103557B1 (ko) | 2019-05-03 | 2020-04-22 | 주식회사 페이스테그 | 얼굴 인식 방법, 얼굴 인식 장치, 이를 위한 컴퓨터 프로그램 |
| KR20220120929A (ko) * | 2021-02-24 | 2022-08-31 | 군산대학교산학협력단 | 몽타주 생성 장치 및 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109117777B (zh) | 生成信息的方法和装置 | |
| CN111046235B (zh) | 基于人脸识别的声像档案搜索方法、系统、设备及介质 | |
| US9355330B2 (en) | In-video product annotation with web information mining | |
| US8971641B2 (en) | Spatial image index and associated updating functionality | |
| US20230376527A1 (en) | Generating congruous metadata for multimedia | |
| CN110675433A (zh) | 视频处理方法、装置、电子设备及存储介质 | |
| CN106126617A (zh) | 一种视频检测方法及服务器 | |
| CN103198293A (zh) | 用于指纹识别视频的系统和方法 | |
| US20180239986A1 (en) | Image Clustering Method, Image Clustering System, And Image Clustering Server | |
| KR20160011916A (ko) | 얼굴 인식을 통한 사용자 식별 방법 및 장치 | |
| US11531839B2 (en) | Label assigning device, label assigning method, and computer program product | |
| KR20080046490A (ko) | 몽타주 얼굴 영상을 이용한 얼굴 인식 방법 및 그 장치 | |
| Saracoglu et al. | Content based copy detection with coarse audio-visual fingerprints | |
| CN110348392B (zh) | 车辆匹配方法及设备 | |
| KR100819027B1 (ko) | 얼굴 영상을 이용한 사용자 인증 방법 및 장치 | |
| CN117251598A (zh) | 视频检索方法 | |
| KR101805437B1 (ko) | 배경 화자 데이터를 이용한 화자 인증 방법 및 화자 인증 시스템 | |
| Jeysudha et al. | Real Time Video Copy Detection using Hadoop | |
| KR101800975B1 (ko) | 필기체가 인식되어 생성된 전자문서의 공유 방법 및 그 장치 | |
| KR20220055648A (ko) | 영상 각본 생성 방법 및 장치 | |
| KR101494309B1 (ko) | 디지털 컨텐츠를 위한 비대칭형 핑거프린트 정합 시스템 및 그 제공방법 | |
| CN113609315A (zh) | 一种媒资相似度的判定方法、装置、电子设备和存储介质 | |
| JP5791666B2 (ja) | ビジュアルキーワードの動的生成装置 | |
| JP5275376B2 (ja) | 情報処理装置及び情報処理プログラム | |
| JP4768358B2 (ja) | 画像検索方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E601 | Decision to refuse application |