KR20030017436A - 개인인식장치 - Google Patents

개인인식장치 Download PDF

Info

Publication number
KR20030017436A
KR20030017436A KR1020020050314A KR20020050314A KR20030017436A KR 20030017436 A KR20030017436 A KR 20030017436A KR 1020020050314 A KR1020020050314 A KR 1020020050314A KR 20020050314 A KR20020050314 A KR 20020050314A KR 20030017436 A KR20030017436 A KR 20030017436A
Authority
KR
South Korea
Prior art keywords
unit
face
image
face image
user
Prior art date
Application number
KR1020020050314A
Other languages
English (en)
Other versions
KR100495516B1 (ko
Inventor
스케가와히로시
요코이겐타로
도바시히로노리
오가타준
사토도시오
오카자키아키오
Original Assignee
가부시끼가이샤 도시바
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2001254774A external-priority patent/JP2003067744A/ja
Priority claimed from JP2001335842A external-priority patent/JP3974375B2/ja
Priority claimed from JP2001341040A external-priority patent/JP4153691B2/ja
Application filed by 가부시끼가이샤 도시바 filed Critical 가부시끼가이샤 도시바
Publication of KR20030017436A publication Critical patent/KR20030017436A/ko
Application granted granted Critical
Publication of KR100495516B1 publication Critical patent/KR100495516B1/ko

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/28Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Collating Specific Patterns (AREA)

Abstract

본 발명은 개인인식장치에 관한 것으로, 피인증자(O)의 인증데이터를 사전 데이터로서 등록했을 때 피인증자로부터 인증 데이터를 취득하고, 취득한 인증데이터와 등록한 상기 사전 데이터의 대조확인을 실시하여, 상기 대조확인결과에 따라서 상기 사전 데이터의 갱신처리를 실시하는 것을 특징으로 한다.

Description

개인인식장치{PERSON RECOGNITION APPARATUS}
본 발명은 예를 들어 얼굴화상 등의 인증데이터를 사용하여 피인증자를 인식하는 개인인식장치, 및 상기 개인인식장치를 사용한 통행제어장치에 관한 것이다.
최근, 예를 들어 키, 자기카드, IC카드 등의 물리적 매체에 기록된 인증 데이터, 또는 지문, 망막, 홍채, 손바닥의 형태, 얼굴화상 등의 생체정보를 기초로 피인증자를 인식하는 개인인식장치(개인인증장치)가 개발되어 있다. 예들 들어, 얼굴화상을 사용하여 개인인증을 실시하는 개인인식장치에서는, 피인증자의 얼굴화상을 수집하여, 미리 사전에 기억(이후, 등록이라고도 함)되어 있는 얼굴화상과 피인증자의 안면화상의 대조확인을 실시함으로써 피인증자가 누구인지를 인식한다.
상기와 같은 개인인식장치에서는 인증용 사전을 기억한 사전기억부를 구비하고 있다. 이와 같은 개인인식장치에서는 상기 사전기억부내의 사전을 사용하여 피인증자를 인식하도록 이루어져 있다. 종래의 개인인식장치에서는 피인증자로부터 복수의 인증 데이터를 취득하고, 이들의 복수의 인증 데이터에 기초하여 등록용 사전 데이터를 작성하고, 작성한 사전 데이터를 사전에 등록하도록 이루어져 있다. 이 때문에, 피인증자는 사전의 등록시에 사전 데이터용 인증 데이터의 입력작업을복수회 실시하고 있다. 또한, 사전에 등록이 끝난 사전 데이터의 갱신처리는 관리자 또는 피인증자에 의한 갱신처리의 지시에 따라서 실행하고 있다.
상기와 같이 종래의 개인인식장치에서는 사용자가 사전의 등록시, 또는 사전의 갱신시에 번잡함을 느끼게 하는 경우가 있다.
또한, 종래의 개인인식장치에서는 예를 들어 서 있는 위치 또는 자세 등의 피인증자의 상태에 따라서 인물 인식율이 저하되는 경우가 있다. 예를 들어 일본 특개평11-316836호 공보, 또는 일본 특개평11-191856호 공보에는 피인증자의 상태에 의한 인물인식율의 저하를 감소시키기 위한 기술이 제안되어 있다.
상기 일본 특개평11-316836호 공보에서는 인식시의 인물의 방향이 미리 등록되어 있는 인물의 방향과 다른 경우에 피인증자를 촬영하는 카메라의 방향을 바꾸는 기술에 대해서 개시되어 있다. 또한, 상기 일본 특개평11-191856호 공보에는 소정의 위치에 피인증자의 시선을 유도시키는 기술에 대해서 개시되어 있다.
그러나, 상기 일본 특개평11-316836호 공보, 또는 상기 일본 특개평11-191856호 공보에 기재되어 있는 방법에서는 피인증자를 촬영하는 카메라의 방향을 제어하는 제어회로, 또는 피인증자의 시선을 유도시키는 시선유도장치를 새롭게 설치할 필요가 있다.
또한, 종래의 안면 화상을 사용한 개인인식장치에서는 쌍동이나 형제 등의 유사한 얼굴의 사용자가 복수 존재하는 경우가 있다. 또한, 안경의 유무 등에 의해 한 사람에 대해서 복수의 사전 데이터가 필요해지는 경우가 있다. 이와 같이 사전에 등록되는 사전 데이터가 많아지면, 인증처리의 시간이 증가함과 동시에 인식율이 저하되는 경우가 있다.
본 발명은 사용자에게 사전 등록 및 사전갱신의 번잡함을 느끼게 하지 않고, 안전하게 사전의 갱신 처리를 실시할 수 있는 개인인식장치를 제공하는 것을 목적으로 한다.
또한, 본 발명은 안정적으로 고정밀하게 인식할 수 있는 개인인식장치 및 통행제어장치를 제공하는 것을 목적으로 한다.
또한, 본 발명은 사용자에 대해서 편리성이 높고, 인증정밀도 및 보안(security) 레벨을 향상시킬 수 있는 얼굴화상 대조확인장치, 얼굴화상 대조확인 시스템 및 안면화상 대조확인방법을 제공하는 것을 목적으로 하고 있다.
도 1은 제 1 실시예에 관한 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 2는 제 1 실시예에 관한 개인인식장치의 사전등록처리의 흐름에 대해서 설명하는 플로우차트,
도 3은 제 2 실시예에 관한 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 4는 제 2 실시예에 관한 개인인식장치의 개인인증과 사전갱신처리의 흐름에 대해서 설명하는 플로우차트,
도 5는 제 2 실시예에서의 인증결과와 사전갱신이력의 표시예를 나타낸 도면,
도 6은 제 2 실시예에서의 인증결과와 사전갱신이력의 다른 표시예를 나타낸 도면,
도 7은 제 2 실시예에서의 인증결과와 사전갱신이력의 또 다른 표시예를 나타낸 도면,
도 8은 제 2 실시예에서의 인증부로서 얼굴화상에 의한 인증기술을 사용한 경우의 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 9는 제 2 실시예에 관한 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 10은 제 3 실시예에서 사용하는 관리권한정보의 일례를 나타낸 도면,
도 11은 제 3 실시예에서의 인증결과와 사전갱신이력의 표시예를 나타낸 도면,
도 12는 제 4 실시예에 관한 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 13은 제 4 실시예에 관한 개인인식장치의 개인인증과 사전갱신처리의 흐름에 대해서 설명하는 플로우차트,
도 14는 네트워크 접속된 복수의 개인인식장치 등으로 구성되는 개인인증시스템의 구성예를 나타낸 도면,
도 15는 제 4 실시예를 적용한 복수의 개인인식장치에 의해 구성되는 개인인증 시스템의 구성예를 나타낸 도면,
도 16은 제 5 실시예에 관한 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 17은 제 5 실시예에 관한 개인인식장치의 개인인증과 사전갱신처리의 흐름에 대해서 설명하는 플로우차트,
도 18은 제 5 실시예에서의 사전갱신 선택화면의 표시예를 나타낸 도면,
도 19는 제 6 실시예에 관한 개인인식장치에서의 패스워드 인증시의 사전 갱신처리의 흐름의 예에 대해서 설명하는 플로우차트,
도 20은 제 7 실시예에 관한 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 21은 얼굴 검출부의 처리를 설명하기 위한 도면,
도 22는 특징량 추출부의 처리를 설명하기 위한 도면,
도 23은 인식부의 인식처리의 흐름을 설명하기 위한 플로우차트,
도 24∼도 26은 등록시의 얼굴의 상태와 입력된 화상의 표시예를 나타낸 도면,
도 27은 입력화상에 대한 유사도와 임계값의 예를 나타낸 도면,
도 28∼도 50은 표시부에서의 표시예를 나타낸 도면,
도 51은 본 발명의 제 9 실시예에 관한 개인인식장치의 구성을 개략적으로 나타낸 블럭도,
도 52는 자동인식개시 판정부의 처리의 흐름을 설명하기 위한 플로우차트,
도 53은 제 10 실시예에 관한 통행제어장치의 구성을 개략적으로 나타낸 블럭도,
도 54는 제 11 실시예에 관한 통행제어장치의 구성을 개략적으로 나타낸 블럭도,
도 55 및 도 56은 제 12∼제 17 실시예에 관한 얼굴화상 대조장치의 사용자 인터페이스부의 외관 구성예를 나타낸 정면도,
도 57 및 도 58은 얼굴화상 대조확인장치의 설치예를 나타낸 측면도,
도 59는 도어 등에 사용자 인터페이스부가 설치되는 경우의 구성예를 나타낸블럭도,
도 60은 얼굴화상 대조확인장치의 제어계통으로서의 전체 구성을 나타낸 도면,
도 61은 처리 프로세서가 실시하는 얼굴화상의 등록처리의 흐름을 나타낸 플로우차트,
도 62는 처리 프로세서가 실시하는 얼굴화상의 대조확인처리를 설명하기 위한 플로우차트,
도 63은 1:N 대조확인모드의 동작을 설명하기 위한 플로우차트,
도 64는 제 12 실시예로서의 사전의 등록처리에 대해서 설명하기 위한 플로우차트,
도 65는 유사한 얼굴 패턴의 조합을 설명하기 위한 도면,
도 66은 유사한 얼굴 패턴의 조합을 설명하기 위한 도면,
도 67은 도 64의 등록처리에 의해 사전에 등록된 얼굴 데이터에 대한 대조확인처리에 대해서 설명하기 위한 플로우차트,
도 68은 제 12 실시예에 관한 변형예를 설명하기 위한 플로우차트,
도 69는 사전에 동일 사용자의 얼굴 패턴을 추가할 때의 처리의 흐름을 설명하기 위한 플로우차트,
도 70은 멀티엔트리 사전에 대한 대조확인처리의 흐름을 설명하기 위한 플로우차트,
도 71은 제 13 실시예에 관한 변형예를 설명하기 위한 플로우차트,
도 72는 제 14 실시예에 관한 얼굴화상 대조확인장치의 구성예를 개략적으로 나타낸 도면,
도 73은 이력 데이터 베이스에 이력 데이터를 기억하는 처리를 설명하기 위한 플로우차트,
도 74는 알람 출력용 특수사전에 의한 대조확인처리를 추가한 경우의 대조확인처리의 흐름을 설명하기 위한 플로우차트,
도 75는 입퇴출 관리 시스템에서의 입퇴출시의 대조확인처리를 설명하기 위한 플로우차트,
도 76은 1:N 대조확인모드를 우선시키면서 1:1 대조확인모드에서의 대조확인처리를 실시하는 경우의 동작예를 설명하기 위한 플로우차트,
도 77은 각 사용자가 인터넷 등의 네트워크를 통하여 얼굴화상을 사전으로 등록하기 위한 얼굴화상 등록시스템의 구성예를 나타낸 도면,
도 78은 제 17 실시예에 관한 얼굴화상 등록시스템의 동작예를 설명하기 위한 플로우차트,
도 79는 WWW 브라우저의 표시예를 나타낸 도면,
도 80은 사전작성 프로그램에 의한 메뉴 화면이 표시예를 나타낸 도면,
도 81은 사전작성 프로그램의 동작예를 설명하기 위한 플로우차트,
*도면의 주요 부분에 대한 부호의 설명
0: 피인증자 1: 사전 기억부
2: 인증부 3: 인증 데이터 입력부
4: 사전등록·갱신부 5: 표시부
6: 사전 등록 선택부 7: 도어 제어부
8: 도어
본 발명의 개인인식장치는 인증데이터를 취득하는 인증데이터 입력부와, 인증용 사전 데이터가 기억되는 사전기억부를 구비하고, 상기 인증데이터 입력부에 의해 피인증자로부터 취득한 인증데이터와 상기 사전기억부에 기억되어 있는 사전데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 것으로, 상기 인증데이터 입력부에 의해 취득한 인증 데이터를 기초로 인증용의 신규의 사전 데이터를 작성하는 사전 작성부와, 상기 사전 작성부에 의해 상기 사전 데이터를 작성한 후, 다시 상기 인증 데이터 입력부에 의해 인증 데이터를 취득하고, 상기 인증 데이터 입력부에 의해 취득한 인증 데이터와 상기 사전 작성부에 의해 작성된 상기 사전 데이터를 대조확인하는 인증부와, 상기 인증부에 의한 대조확인이 성공한 경우 상기 사전 작성부에 의해 상기 사전 데이터를 작성한 후에 상기 인증 데이터 입력부에 의해 취득한 인증 데이터를 사용하여 상기 사전 데이터를 갱신하는 사전 갱신부를 구비한다.
본 발명의 개인인식장치는 인증 데이터를 취득하는 인증 데이터 입력부와, 인증용 사전 데이터가 기억되는 사전 기억부와, 상기 인증 데이터 입력부에 의해 피인증자로부터 취득한 인증 데이터와 상기 사전 기억부에 기억되어 있는 사전 데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 인증부를 구비한 것으로, 상기 인증부에 의해 피인증자가 인증되었을 때, 상기 사전 기억부에 기억되어 있는 사전 데이터를 갱신해야할지의 여부를 판정하는 판정부와, 상기 판정부에 의해 갱신해야 하는 것으로 판정된 상기 사전 데이터를 상기 인증 데이터 입력부에 의해 취득한 인증 데이터에 기초하여 갱신하는 사전 갱신부와, 상기 사전 갱신부에 의해 상기 데이터를 갱신한 내용을 나타내는 사전갱신이력을 기억하는 사전 갱신이력 기억부와, 상기 인증부에 의해 피인증자가 인증되었을 때 당해 인증결과 및 상기 사전갱신이력 기억부에 기억되어 있는 전회의 사전 갱신시의 사전갱신이력을 표시하는 표시부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로 인물의 적어도 얼굴을 포함하는 화상을 입력하는 화상 입력부와, 상기 화상입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴 영역을 검출하는 얼굴 검출부와, 상기 얼굴 검출부에 의한 검출결과에 기초하여 상기 인물의 특징량을 추출하는 특징량 추출부, 상기 화상 입력부에 의해 등록 대상의 화상이 입력된 경우 상기 특징량 추출부에 의해 추출된 특징량을 당해 인물의 등록정보로서 유지하는 등록정보 유지부, 상기 화상 입력부에 의해 인식대상의 화상이 입력된 경우 상기 특징량 추출부에 의해 추출된 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인 함으로써 상기 피인증자에 대한 인식처리를 실시하는 인식부, 상기 인식부에 의해 인식처리를 실시하는 경우에 상기 인식대상의 화상에서의 얼굴의 상태를 나타내는 정보, 및 상기 등록정보 유지부에 유지되어 있는 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에 표시하는 표시부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로 인물 중 적어도 얼굴을 포함하는 화상을 입력하는 화상입력부, 상기 화상입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴영역을 검출하는 얼굴 검출부, 상기 얼굴 검출부에 의한 검출 결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 특징량 추출부, 상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우 상기 특징량 추출부에 의해 추출된 특징량을 당해 인물의 등록정보로서 유지하는 등록정보 유지부, 상기 화상 입력부에 의해 인식대상의 화상이 입력된 경우 상기 특징량 추출부에 의해 추출된 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 인식부, 상기 화상 입력부에 의해 등록대상의 화상이 입력되는 경우 상기 등록대상의 화상을 어떠한 상태에서 입력하면 좋을지를 나타내는 안내정보, 및 상기 화상 입력부에서 입력되어 있는 화상에서의 얼굴의 상태를 나타내는 정보를 동일한 화면상에서 표시하는 표시부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로, 인물 중 적어도 얼굴을 포함하는 화상을 입력하는 화상 입력부, 상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴의 영역을 검출하는 얼굴 검출부, 상기 얼굴 검출부에 의한 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 특징량 추출부, 상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량을 당해 인물의 등록정보로서 유지하는 등록정보 유지부, 상기 화상 입력부에 의해 연속적으로 화상을 입력하고 상기 얼굴 검출부에 의해 검출되는 얼굴 영역의 시간적 변화에 기초하여 피인증자가 존재하는지의 여부를 판정하는 판정부, 및 상기 판정부에 의해 피인증자가 존재하는것으로 판정한 경우 상기 화상 입력부에 의해 입력되는 화상으로부터 상기 특징량 추출부에 의해 추출한 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를대조확인함으로써 상기 피인증자에 대한 인식 처리를 실시하는 인식부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로 이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 대응하여 기억되고, 또한 유사한 얼굴화상이 존재하는 얼굴화상에는 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 기억되어 있는 기억부, 이용자의 식별정보가 입력되는 입력부, 상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부, 상기 입력부에 의해 입력된 식별 정보에 대응하는 얼굴화상에 대해서 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 상기 기억부에 기억되어 있지 않은 경우,상기 촬영부에 의해 촬영된 얼굴 화상과 상기 입력부에 의해 입력된 식별정보에 대응한 상기 기억부에 기억되어 있는 얼굴화상의 대조확인을 실시하는 제 1 얼굴 대조확인부, 및 상기 입력부에 의해 입력된 식별정보에 대응하는 얼굴화상에 대해서 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 상기 기억부에 기억되어 있는 경우 상기 제 1 얼굴 대조확인부와는 다른 대조확인 처리에 의해 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응하는 상기 기억부에 기억되어 있는 얼굴화상의 대조확인을 실시하는 제 2 얼굴 대조확인부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로 이용자의 얼굴화상에 식별정보를 대응시켜 기억하는 기억부, 상기 기억부에 기억하는 얼굴 화상과 상기 기억부에 이미 기억되어 있는 다른 얼굴화상의 대조확인도를 판정하는 판정부, 상기 판정부에 의해 판정한 당해 얼굴화상과 다른 얼굴화상의 대조확인도에 기초하여, 당해 얼굴화상에 대한 임계값을 설정하는 설정부, 이용자의 식별정보가 입력되는 입력부, 상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부, 및 상기 촬영부에 의해 촬영한 이용자의 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응하는 상기 기억부에 등록되어 있는 얼굴화상의 대조확인도가 상기 설정부에 의해 설정된 임계값 이상인지의 여부에 의해 대조확인의 가부를 판단하는 대조확인 처리를 실시하는 대조확인부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로, 이용자의 얼굴화상과 각 이용자마다 부여되어 있는 식별정보가 대응하여 기억되어 있는기억부, 상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 식별정보에 대응시켜 상기 기억부에 기억하는 등록부, 이용자의 식별정보와 부가정보가 입력되는 입력부, 상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부, 및 상기 입력부에 의해 입력된 식별정보와 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인 처리를 실시하는 얼굴 대조확인부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로서, 정당한 이용자의 얼굴화상이 기억되어 있는 제 1 기억부, 수상한 자의 얼굴화상이 기억되어 있는 제 2 기억부, 이용자의 얼굴화상을 촬영하는 촬영부, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 1 기억부에 기억되어 있는 얼굴 화상의 대조확인 처리를 실시하는 제 1 얼굴 대조확인부, 상기 제 1 얼굴 대조확인부에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 1 기억부에 기억되어 있는 얼굴화상과 대조확인하지 않았던 경우 상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 2 기억부에 기억되어 있는 얼굴화상의 대조확인 처리를 실시하는 제 2 얼굴 대조확인부, 및 상기 제 2 얼굴 대조확인부에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 2 기억부에 기억되어 있는 얼굴화상과 대조확인한 경우 경보를 발하는 경보부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로, 이용자의 얼굴화상이 기억되어 있는 제 1 기억부, 소정 영역내에 존재하는 이용자를 나타낸 정보를 기억하는 제 2 기억부, 상기 소정 영역내로 입장하는 이용자의 얼굴화상을 촬영하는 촬영부, 상기 촬영부에 의해 얼굴화상이 촬영되었을 때에 상기 제 2 기억부의 기억내용에 기초하여 상기 소정 영역내에 존재하는 사람을 특정하고 상기 촬영부에 의해 촬영된 얼굴화상, 상기 제 1 기억부에 기억되고 상기 제 2 기억부에 기억되어 있는 이용자 이외의 얼굴화상과의 대조확인 처리를 실시하는 얼굴 대조확인부, 상기 얼굴 대조확인부에 의해 상기 소정 영역내에 존재하는 이용자 이외의 얼굴화상과 대조확인한 경우에 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 허가하는 허가부, 및 상기 얼굴 대조확인부에 의해 상기 소정 영역내에 존재하는 이용자 이외의 얼굴화상과 대조확인하지 않았던 경우에 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 불허가로 하는 불허가부를 구비한다.
본 발명의 개인인식장치는 얼굴화상에 의해 인물을 인식하는 것으로, 이용자의 얼굴화상과 각 이용자에 부여되어 있는 식별정보가 대응하여 기억되어 있는 기억부, 이용자의 얼굴화상을 촬영하는 촬영부, 상기 촬영부에 의해 촬영 가능한 이용자의 존재를 검지하는 검지부, 상기 검지부에 의해 이용자의 존재가 검지되었을 때 상기 촬영부에 의해 이용자의 얼굴화상을 촬영하고 그 촬영한 얼굴화상과 상기 기억부에 기억되어 있는 모든 얼굴화상과의 대조확인 처리를 실시하는 제 1 얼굴 대조확인부, 이용자의 식별정보가 입력되는 입력부, 및 상기 제 1 얼굴 대조확인부에 의해 대조확인 처리중에 상기 입력부에 의해 식별정보가 입력된 경우 상기 제 1 얼굴 대조확인부에 의한 대조확인처리를 중지하고 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 얼굴화상의 대조확인 처리를실시하는 제 2 얼굴 대조확인부를 구비한다.
본 발명의 개인인식시스템은 이용자의 얼굴화상을 촬영하고 촬영한 얼굴화상과 미리 대조확인용 사전에 기억되어 있는 얼굴화상과의 대조확인처리를 실시하는 얼굴화상 대조확인장치, 상기 얼굴화상 대조확인장치에 접속되는 서버장치, 및 상기 서버장치에 접속 가능한 정보단말을 구비한 시스템에 있어서, 상기 정보단말은 이용자의 얼굴화상을 촬영하는 촬영부, 상기 촬영부에 의해 촬영한 얼굴화상에 기초하여 개인사전을 작성하는 개인사전 작성부, 상기 작성부에 의해 작성한 개인 사전을 상기 서버로 송신하는 송신부를 구비하고 상기 서버장치는 상기 정보단말로부터 송신된 개인사전을 수신하고, 복수의 정보단말로부터 수신한 개인사전을 통합함으로써 상기 얼굴화상 대조확인장치에서 이용되는 사전을 작성하는 대조확인용 사전작성부를 구비한다.
본 발명의 추가적인 목적과 잇점 등에 대해서는 후술하기로 한다. 본 발명의 목적과 잇점 등은 후술하는 수단에 의해 실현 가능하다.
이하, 본 발명의 실시예에 대해서 도면을 참조하여 설명한다.
우선, 제 1 실시예에 대해서 설명한다.
도 1은 제 1 실시예에 관한 개인인식장치(개인인증장치)(A1)의 구성을 거의 개략적으로 나타낸 것이다. 상기 개인인식장치(A1)는 예를 들어 피인증자(O)가 본인인지의 여부를 인증하고, 그 인증결과에 기초하여 보안을 중시하는 건물이나 방에 대한 입실관리를 실시하는 장치이다. 상기 개인인식장치(A1)는 도 1에 나타낸 바와 같이, 제어부, 사전 기억부(1), 인증부(2), 인증 데이터 입력부(3), 사전등록·갱신부(4), 표시부(5), 사전 등록 선택부(6), 도어(8) 및 도어 제어부(7)로 구성되어 있다.
상기 제어부는 각 부의 동작을 제어함으로써 개인인식장치 전체의 제어를 한다. 상기 사전 기억부(1)는 인증용 사전으로서의 데이터 등이 인식된다. 상기 사전 기억부(1)는 하드디스크 장치 등의 기억장치로 구성된다. 상기 인증부(2)는 피인증자(O)로부터 취득하는 인증 데이터와 상기 사전 기억부(1)의 사전에 등록되어 있는 데이터에 기초하여 피인증자(O)가 본인인지의 여부를 인증하는 것이다.
상기 인증 데이터는 물리적 매체에 기록된 데이터이어도 좋고, 피인증자(O)로부터 취득 가능한 생체 정보이어도 좋다. 예를 들어, 물리적 매체에 기록된 데이터를 인증 데이터로 하는 경우 각 피인증자(O)의 인증 데이터는 각 피인증자(O)가 소지하는 키나 자기 카드, IC카드 등에 기록된다. 또한, 생체정보를 인증 데이터로 하는 경우에, 각 피인증자(O)의 인증 데이터는 지문, 망막, 홍채, 손바닥 형태, 얼굴화상 등의 신체적인 특징량으로서의 생체정보가 피인증자(O)로부터 취득된다. 상기 인증부(2)는 CPU 및 제어 프로그램이 기억된 메모리 등으로 구성된다.
상기 인증 데이터 입력부(3)는 피인증자(O)로부터 인증 데이터나 사전 데이터 등을 취득하는 것이다. 상기 인증데이터 입력부(3)는 피인증자(O)로부터 취득하는 인증 데이터에 따른 입력장치로 구성된다. 예를 들어, 인증 데이터로서 얼굴화상을 사용하는 경우, 상기 인증 데이터 입력부(3)는 화상을 촬영하는 카메라 및 카메라에서 촬영한 화상을 수집하는 화상 인터페이스 등으로 구성된다. 상기 사전 등록·갱신부(4)는 사전의 작성, 등록, 갱신 등을 실시하는 것이다. 상기표시부(5)는 입력 데이터나 인증결과 등을 피인증자(O)에 대해서 표시하는 것이다. 상기 표시부(5)는 디스플레이 장치 등으로 구성된다.
상기 사전 등록 선택부(6)는 상기 표시부(5)에 표시된 데이터의 적절함을 피인증자(O)가 판단하고, 사전으로의 데이터 등록을 실시할지의 여부를 선택하는 것이다. 상기 사전 등록 선택부(6)는 예를 들어, 텐 키나 터치패널 등으로 구성된다. 상기 도어 제어부(7)는 상기 인증부(1)의 인증 결과에 기초하여 입실관리를 실시하는 방의 도어(8)를 폐쇄 제어하는 것이다.
다음에, 상기와 같은 개인인식장치(A1)에서의 사전의 등록처리에 대해서 도 2에 나타낸 플로우차트를 참조하여 설명한다.
우선, 인증 데이터 입력부(3)는 피인증자(O)로부터 사전에 등록하는 데이터(사전 데이터)(Data-dic)를 취득한다(단계(S1)). 상기 사전 데이터(Data-dic)는 예를 들어 인증부(2)가 지문에 의한 개인인증을 실시하는 경우에는 피인증자(O)의 지문 데이터이고, 인증부(2)가 성문(聲紋)에 의한 개인인증을 실시하는 경우에는 피인증자(O)의 성문 데이터이고, 인증부(2)가 사인에 의한 개인인증을 실시하는 경우는 피인증자(O)의 사인 데이터이고, 인증부(2)가 얼굴화상에 의한 개인인증을 실시하는 경우에는 피인증자(O)의 얼굴화상 데이터이다. 상기 인증 데이터 입력부(3)에 의해 입력된 사전 데이터(Data-dic)는 표시부(5)에 표시된다(단계(S2)).
여기에서, 특히 사전 데이터(Data-dic)가 얼굴화상 데이터인 경우, 피인증자(O)는 표시부(5)의 표시된 사전 데이터(Data-dic)로서의 얼굴화상에 기초하여 입력한 사전 데이터(Data-dic)의 적절함을 판단한다. 예를 들어, 사전 데이터(Data-dic)가 얼굴화상 데이터인 경우, 피인증자(O)는 표시부(5)에 표시된 얼굴화상에 의해 얼굴의 잘라내기 위치의 정확함, 얼굴방향의 적절함, 표정의 적절함, 조명의 적절함 등을 용이하게 판단할 수 있다.
상기 단계(S3)에서 피인증자(O)가 표시부(5)에 표시된 사전 데이터(Data-dic)가 적절하지 않다고 판단한 경우, 피인증자(O)는 상기 사전 등록 선택부(6)에 의해 당해 사전 데이터(Data-dic)를 등록하지 않은 것을 선택 지시한다. 상기 사전 등록 선택부(6)에 등록하지 않는 것이 선택 지시된 경우, 상기 인증 데이터 입력부(3)는 상기 단계(S1)로 되돌아가고, 사전 데이터(Data-dic)의 취득처리를 다시 한다.
상기 단계(S3)에서 피인증자(O)가 표시부(5)에 표시된 사전 데이터(Data-dic)가 적절하다고 판단한 경우, 피인증자(O)는 상기 사전 등록 선택부(6)에 의해 당해 사전 데이터(Data-dic)를 등록하는 것을 선택 지시한다. 상기 사전 등록 선택부(6)에 등록하는 것이 선택 지시된 경우, 상기 사전 등록·갱신부(4)는 상기 인증 데이터 입력부(3)에 의해 취득한 사전 데이터(Data-dic)를 기초로 사전(Dic1)를 작성하고, 상기 작성한 사전(Dic1)를 사전 기억부(1)에 기억(등록)한다(단계(S4)).
상기 사전 기억부(1)에 새로운 사전(Dic1)가 등록되면, 개인인식장치(A)에서는 피인증자(O)에 인증 테스트(인증의 시행)을 실시함으로써 등록한 사전(Dic1)가 타당한 것인지의 여부를 체크하는 동작을 실시한다.
즉, 상기 인증 데이터 입력부(3)는 피인증자(O)로부터 인증 데이터(인증 테스트용 데이터)(Data-test)를 취득한다(단계(S5)). 상기 인증 데이터 입력부(3)에서 취득한 인증 테스트용 데이터(Data-test)는 인증부(2)에 보내어진다. 상기 인증부(2)는 상기 인증 데이터 입력부(3)로부터의 인증 데이터와 사전 기억부(1)내의 사전(Dic1)를 대조확인하는 대조확인처리(인증처리)를 실시한다(단계(S6)). 상기 대조확인처리에 의한 대조확인결과에 기초하여 인증부(2)는 피인증자(O)가 본인인지의 여부를 판정한다(단계(S7)).
상기 단계(S7))에서 본인인 것을 인증할 수 없었던 경우, 상기 인증부(2)는 상기 인증 데이터 입력부(3)에서 취득한 인증 테스트용 데이터(Data-test) 또는 사전 데이터(Data-Dic)의 질이 충분하지 않은 것을 판단한다. 즉, 본인인 것이 인증되지 않은 경우, 상기 인증부(2)는 다시 상기 단계(S1)의 사전 데이터 취득처리, 또는 상기 단계(S5)의 인증 테스트용 데이터의 취득처리로부터 재시도한다.
상기 단계(S6, S7)에서 본인인 것이 인증할 수 있었던 경우, 상기 인증부(2)는 상기 인증 데이터 입력부(3)에서 취득한 사전 데이터(Data-dic)와 인증 테스트용 데이터(Data-test)의 질이 충분한 것을 판단한다. 또한, 본인인 것을 인증할 수 있었던 경우, 상기 표시부(5)에는 상기 단계(S2)와 동일하게 상기 인증 데이터 입력부(3)에서 입력한 인증 테스트용 데이터(Data-test)가 표시된다(단계(S8)).
상기 단계(S9)에서 상기 피인증자(O)가 표시부(5)에 표시된 인증 테스트용 데이터(Data-test)가 적절하지 않다고 판단한 경우, 상기 피인증자(O)는 상기 사전 등록 선택부(6)에 의해 당해 인증 테스트용 데이터(Data-test)를 상기 사전 기억부(1)에 재등록하지 않을 것을 선택 지시한다. 상기 사전 등록 선택부(6)에 의해 당해 인증 테스트용 데이터(Data-test)를 재등록하지 않는 것이 선택 지시된경우, 상기 사전 등록·갱신부(4)는 상기 단계(S5)로 돌아가, 상기 인증 데이터 입력부(3)에 의한 인증 테스트용 데이터(Data-test)의 취득처리로부터 재시도한다.
상기 단계(S9)에서 상기 피인증자(O)가 표시부(5)에 표시된 인증 테스트용 데이터(Data-test)가 적절하다고 판단한 경우, 상기 피인증자(O)는 상기 사전등록 선택부(6)에 의해 당해 인증 테스트용 데이터(Data-test)를 상기 사전 기억부(1)에 재등록하는 것을 선택 지시한다. 상기 사전 등록 선택부(6)에 의해 당해 인증 테스트용 데이터(Data-test)를 재등록하는 것이 선택 지시된 경우, 상기 사전 등록·갱신부(4)는 이미 상기 사전 기억부(1)에 사전(Dic1)로서 기억되어 있는 사전 데이터((Data-dic)와 상기 인증 테스트용 데이터(Data-test)를 사용하여 새로운 사전(Dic2)를 다시 작성(단계(S10)), 상기 사전(Dic2)을 사전 기억부(1)에 기억한다.
상기 사전 기억부(1)에 사전(Dic2)을 등록하면 상기 사전 등록·갱신부(4)는 상기 사전 기억부(1)에 기억한 사전(Dic2)이 충분한 학습을 실시한 사전(정식사전)인지의 여부를 판단한다. 정식사전인지의 여부의 판단은 예를 들어 사전의 학습을 위해 사용한 데이터(인증 테스트용 데이터(Data-test))의 양이 소정의 임계값을 초과하고 있는지의 여부에 의해 판단된다. 또한, 정식사전인지의 여부의 판단은 상기 단계(S6)에서의 대조확인 처리에 의해 산출되는 대조확인도(스코어)가 소정의 임계값을 초과하고 있는지의 여부에 의해 판단하도록 해도 좋다.
상기 판단에 의해 상기 사전 기억부(1)에 등록된 사전이 정식사전라고 판단된 경우(단계(S11), 예), 개인인식장치(A)는 사전등록처리를 종료한다. 또한, 상기 판단에 의해 상기 사전 기억부(1)에 등록된 사전이 정식사전이 아니라고 판단된 경우(단계(S11), 아니오), 상기 사전 등록·갱신부(4)는 다시 단계(S5)로 돌아가, 상기 인증 데이터 입력부(3)에 의한 인증 테스트용 데이터(Data-test)의 취득 처리부터 재시도한다. 상기 단계(S5∼S11)의 처리에 의해 상기 사전 등록·갱신부(4)는 상기 사전 기억부에 정식이라 판단된 사전이 등록될 때까지 충분한 사전 학습을 실시한다.
상기와 같은 사전의 등록처리에 의하면 사전의 등록시에, 우선 사전 데이터를 수집하여 사전을 작성하고, 또한 인증 테스트용 데이터를 상기 사전에 대한 충분한 학습 처리가 완료될 때까지 반복하여 취득하도록 한 것이다. 이에 의해, 피인증자(O)가 인증 데이터를 입력하는 것만으로, 사전의 등록 작업시에 사전 데이터의 등록, 인증 테스트 및 사전 학습 등을 실현할 수 있다. 즉, 사전의 등록작업시에 인증 테스트 또는 사전 학습 등의 처리를 피인증자(O)에게 의식시키지 않고 실행시킬 수 있고, 피인증자(O)에게 있어서의 사전 등록 작업의 번거로움을 감소시킬 수 있다. 또한, 사전의 등록시의 많은 인증 테스트용 데이터를 사용하여 사전 학습을 실시함으로써 많은 변화를 포함한 인증 정밀도가 높은 사전을 작성하여 등록할 수 있다.
이상 설명한 바와 같이, 상기 제 1 실시예에 의하면 사전 데이터의 초기 등록시에 올바르게 인증할 수 있는지를 확인하는 인증 테스트를 피인증자에 인식시키지 않고 실시할 수 있다. 또한, 사전 데이터의 초기 등록시에 사전의 학습 데이터를 취득할 수 있으므로, 학습 데이터로서의 샘플 데이터를 얻기 위한 작업을 감소시킬 수 있다. 또한, 피인증자에게는 인증 테스트를 사전 등록 작업을 인식시키지 않으므로, 개인인식장치의 초기 도입시에서의 작업의 번잡함을 감소시킬 수 있다.
다음에, 제 2 실시예에 대해서 설명한다.
도 3은 제 2 실시예에 관한 개인인식장치(A2)의 구성을 개략적으로 나타낸 것이다. 도 3에 나타낸 제 2 실시예의 개인인식장치(A2)는 도 1에 나타낸 제 1 실시예의 개인인식장치(A1)의 구성에, 화상입력부(9) 및 인증이력 기억부(10)가 추가되어 있다. 또한, 이하의 제 2 실시예의 설명에서는 도 1에 나타낸 제 1 실시예와 동일한 구성에 대해서는 동일한 부분에 동일한 부호를 붙여 설명을 생략한다.
상기 화상 입력부(9)는 피인증자(O)의 적어도 얼굴화상을 취득하는 것이다. 상기 화상 입력부(9)는 화상을 촬영하는 카메라 및 카메라로 촬영한 화상을 수집하는 화상 인터페이스 등으로 구성된다. 상기 인증이력 기억부(10)는 상기 사전 기억부(1)내의 사전을 갱신했을 때, 그 사전의 갱신 결과를 포함하는 사전갱신이력을 기억하는 것이다. 상기 인증이력기억부(10)는 예를 들어 하드디스크 드라이브 등의 기억장치로 구성된다. 또한, 인증 데이터로서의 얼굴화상만을 사용하는 경우, 상기 화상 입력부(9)와 상기 인증 데이터 입력부(3)는 하나의 화상 입력부(9)로 구성하도록 해도 좋다. 이 경우의 구성에 대해서 후술한다.
이하, 개인인식장치(A2)에 의한 인식처리와 사전 갱신처리의 흐름에 대해서 도 4에 나타낸 플로우차트를 참조하여 설명한다.
우선, 상기 화상 입력부(9)는 인증 대상으로 하는 피인증자(O)의 화상(얼굴화상을 포함)을 취득한다(단계(S20)). 또한, 상기 인증 데이터 입력부(3)는 피인증자(O)로부터 인증 데이터를 취득한다(단계(S21)). 또한, 인증 데이터로서 얼굴화상을 사용하는 경우, 상기 화상 입력부(9)가 취득한 얼굴화상을 인증 데이터로 하도록 해도 좋다.
한편, 상기 인증부(2)는 상기 인증 데이터 입력부(3)에 의해 취득한 인증 데이터와 상기 사전 기억부(1)에 기억되어 있는 사전에 기초하여 대조확인처리(인증처리)를 실시한다(단계(S22)).
또한, 얼굴화상에 의한 인증처리를 실시하는 경우, 상기 인증부(2)가 실행하는 인증처리에는 예를 들어 「坂野 銳, 中村 逸一 인증기술의 현재와 미래」. 정보처리, vol.41, No7, pp.816-822, July 2000」(문헌 1). 또는 「Alex Pentland Tanzeem Choudhury. "Face Recognition for Smart Environments". IEEE Computer Magazine, Vol.49, No.2,pp.555, February 2000.」(문헌 2)에 기재되어 있는 인증방법이 적용 가능하다.
또한, 얼굴화상 이외의 지문, 망막, 홍채, 손바닥 형태, 얼굴화상 등의 생체 정보에 의한 대조확인처리를 실시하는 경우, 상기 인증부(2)는 상기 인증 데이터 입력부(3)에서 취득한 생체정보에 기초하여 대조확인처리를 실시한다. 또한, 피인증자(O)가 소지하는 자기카드나 IC카드에 의한 대조확인처리를 실시하는 경우, 상기 인증부(2)는 상기 인증 데이터 입력부(3)에서 입력되는 피인증자(O)가 소지하는 자기카드나 IC카드에 기록되어 있는 데이터와 상기 사전 기억부에 기억되어 있는 데이터의 대조확인처리를 실시한다. 또한, 피인증자(O)가 소지하는 키에 의한 대조확인처리를 실시하는 경우, 상기 인증부(2)는 상기 인증 데이터 입력부(3)에서입력되는 피인증자(O)가 소지하는 키의 패턴과 상기 사전 기억부(1)에 기억되어 있는 자물쇠의 패턴의 대조확인처리(적합 체크)를 실시한다.
상기 단계(S22))에서, 피인증자(O)가 본인이라는 것을 인증할 수 없없던 경우(단계(S23), 아니오), 상기 표시부(5)는 인증이 실패했다는 취지를 인증결과로서 표시한다(단계S24).
상기 단계(S22)에서, 피인증자(O)가 본인인 것을 인증할 수 있었던 경우(단계(S23), 예), 상기 사전등록·갱신부(4)는 상기 사전 기억부(1)에 기억되어 있는 당해 피인증자(O)의 사전의 갱신처리를 실시할지의 여부를 판정한다(단계(S25)). 예를 들어 상기 사전갱신처리는 소정 기간마다 또는 소정의 횟수마다 또는 대조확인결과로서의 유사도(인증 스코어)가 소정의 임계값을 하회한 경우 등에서 실시된다.
상기 단계(S25)에서 당해 피인증자(O)의 사전을 갱신해야 하는 것으로 판정한 경우(단계(S25), 예), 상기 사전등록·갱신부(4)는 상기 단계(S21)에서 당해 피인증자(O)로부터 취득한 인증 데이터에 기초하여 사전갱신처리를 실시한다. 이에 의해, 상기 사전등록·갱신부(4)는 사전 기억부(1)에 기억되어 있는 당해 피인증자(O)의 사전을 갱신한다(단계(S26)).
또한, 사전갱신처리를 실시했을 때, 상기 사전갱신이력 기억부(10)는 상기 화상 입력부(9)에 의해 취득한 피인증자(O)의 얼굴화상 및 당해 사전갱신의 결과 등으로 이루어진 사전갱신 이력정보를 기억한다(단계(S27)). 또한, 상기 사전갱신 처리를 실시한 경우, 상기 표시부(5)는 당해 인증결과 및 사전갱신이력 기억부(10)에 기억되어 있는 전회 사전 갱신시의 사전갱신이력 등을 표시한다(단계(S28)).
도 5는 표시부(5)에 표시되는 화면의 예를 나타낸 도면이다. 도 5에 나타낸 화면의 예에서는 이번회의 인증결과와 전회의 사전갱신이력이 표시되어 있다. 도 5에 나타낸 바와 같이 이번회의 인증결과(화상입력부(9)에서 입력된 피인증자(O)의 얼굴화상(B)을 포함한다)(A)를 표시함과 동시에 전회의 사전갱신이력(C)을 표시한다. 또한, 전회의 사전갱신이력으로서는 사전갱신의 일시, 사전갱신장소 및 사전갱신시의 피인증자의 얼굴화상 등을 표시하면 좋다.
상기 단계(S28)까지의 사전갱신처리가 완료되면, 상기 도어제어부(7)는 상기 도어(8)를 개방함으로써(단계(S29)), 당해 피인증자의 통행을 허가하여 처리를 종료한다.
상기 단계(S25)에서 당해 피인증자(O)의 사전을 갱신할 필요가 없다고 판정한 경우(단계(S25), 예), 상기 사전갱신이력 기억부(10)는 상기 표시부(5)에 전회 사전갱신시의 사전갱신이력(전회의 사전갱신이력)을 보낸다. 이에 의해, 상기 표시부(5)는 전회의 사전갱신이력과 인증결과를 표시한다(단계(S28)). 또한, 상기 표시부(5)에 의해 전회의 사전갱신이력과 인증결과가 표시되면, 상기 도어 제어부(7)는 상기 도어(8)를 개방함으로써(단계(S29)), 당해 피인증자의 통행을 허가하여 처리를 종료한다.
상기와 같이, 사전갱신처리를 실시한 경우 과거의 사전갱신이력정보를 기억하거나 사전의 갱신을 나타내는 정보를 표시하도록 이루어져 있다. 이에 의해, 누군가가 자신이 되어(또는 자신이라고 오인증되어) 사전갱신이 실시되는 경우에도,과거에 실시된 사전갱신의 상황을 판단할 수 있다. 또한, 진짜 피인증자(등록자)가 인증을 받았을 때에, 전회 실시한 사전 갱신의 내용이 그 사전갱신의 이력으로서 표시된다. 이 때문에, 본인이 알지 못하는 사이에 실시된 사전갱신 등을 피인증자 자신이 조기에 발견할 수 있다. 반대로, 전회 사전갱신이 실시된 결과가 확실히 등록자 자신의 것이면 「전회의 인증으로부터 이번회의 인증까지 타인에 의한 사전갱신은 일체 없었다」라는 것을 확인할 수 있다. 따라서, 등록자는 당해 시스템을 안심하고 확신을 가지고 사용할 수 있는 이점이 있다. 또한, 사전갱신을 실시했을 때의 피인증자의 얼굴화상 등 화상정보가 표시되므로, 등록자는 타인이 자신의 행세를 하는 등의 이상을 알아차리기 쉬워진다.
또한, 자동적으로 사전갱신을 실시하는 시스템의 경우, 등록자는 타인에 의한 사전갱신을 염려한다. 이 때문에 상기와 같이 타인의 데이터에 의한 사전갱신의 내용을 피인증자 자신이 용이하게 확인할 수 있도록 하는 것은 피인증자의 만족도와 안심감을 크게 향상시킨다. 또한, 제 3 자에 의한 사전갱신이 발각되기 쉬워지므로, 그와 같은 행위를 억제하는 효과도 크다.
또한, 상기 단계(S28)에서는 도 6에 나타낸 바와 같이 사전갱신이력(C)을 복수 표시하도록 해도 좋다. 이 경우, 사전갱신이력의 수, 이력정보, 또는 그 표시형식 등의 표시내용은 등록자 또는 관리자 또는 그 양자가 설정할 수 있는 것이다. 도 6에 나타낸 예에서는 C1은 사전을 갱신했을 때의 상황을 나타낸 정보이고, C2는 사전갱신시에 촬영된 피인증자의 얼굴화상이다.
또한, 상기 단계(S28)에서는 도 7에 나타낸 바와 같이 사전갱신시의 얼굴화상(C2)를 골라내어 나열하여 표시하거나, 복수의 화상입력부에서 입력된 피인증자(O)의 화상을 표시하도록 해도 좋다. 이 경우, 복수의 화상입력부는 여러가지 각도 또는 여러가지 크기로 피인증자(O)를 촬영하도록 설치된다.
또한, 본 제 2 실시예에서 상기 인증부(2)가 얼굴화상에 의한 인증을 실시하는 경우, 개인인식장치(A2)의 전체적인 구성은 도 8에 나타낸 바와 같이 된다. 도 8에 나타낸 구성에서는 화상입력부(9)가 인증 데이터 입력부(3)를 겸하고 있으므로, 도 4에 나타낸 구성과 같이 사람 데이터 입력부(3) 외에 따로 화상입력부(9)를 구비할 필요는 없다. 따라서, 도 8에 나타낸 구성의 개인인식장치(A2)에서는 상기 인증부(2)가 상기 화상 입력부(9)에서 입력된 얼굴화상과 사전 기억부(1)내의 사전과 대조확인함으로써 피인증자(O)가 본인인지의 여부를 인증한다.
다음에, 제 3 실시예에 대해서 설명한다.
도 9는 제 3 실시예에 관한 개인인식장치(A3)의 구성을 개략적으로 나타낸 것이다. 도 9에 나타낸 개인인식장치(A3)의 구성은 상술한 도 8의 개인인식장치(A2)의 구성에, 관리권한 기억부(11)가 추가된 점이 다르다. 도 9에 나타낸 개인인식장치(A3)에서의 상기 관리권한 기억부(11) 이외의 구성은 도 8에 나타낸 개인인식장치(A2)의 구성과 동일하므로, 동일한 부분에 동일한 부호를 붙여 상세한 설명을 생략한다.
상기 관리권한 기억부(11)는 각 등록자(이용자)가 관리권한을 갖고 있는 등록자를 나타내는 정보가 기억된다. 관리권한 기억부(11)에는 예를 들어 도 10에 나타낸 바와 같이 각 등록자를 나타내는 정보(이용자 ID)에 대응하여 각 등록자가관리권을 갖고 있는 등록자를 나타내는 정보(관리대상 ID)가 기억된다. 도 10에 나타낸 예에서는 예를 들어, 이용자 ID가 3인 등록자는 이용자 ID가 6, 7인 등록자에 대해서 관리권을 갖고 있는 것을 나타내고 있다.
등록자가 인증을 받은 경우, 상기 표시부(5)는 상기 관리권한 기억부(11)에 기억되어 있는 관리정보에 기초하여 본인의 사전갱신이력 뿐만 아니라, 관리권한을 구비하는 등록자의 사전갱신이력도 표시한다. 예를 들어, 관리권한 기억부(11)에 도 10에 나타낸 바와 같은 관리정보가 기억되어 있는 경우, 이용자 ID가 3인 등록자가 인증을 받았을 때, 상기 표시부(5)는 도 11에 나타낸 바와 같이 이용자 ID가 3인 본인의 사전갱신이력(C3)뿐만 아니라, 이용자 ID가 6 및 7인 등록자의 사전갱신이력(C4)도 동시에 표시한다.
예를 들어, 상기와 같은 개인인식장치(A3)를 일반주택의 입구에 적용하는 경우 양친이 자녀에 대해서 관리권을 갖도록 설정하면, 부모가 인증을 받을 때마다 표시부는 자녀의 사전갱신이력을 표시한다. 이에 의해, 부모가 자녀의 사전의 갱신상황을 항상적으로 용이하게 확인할 수 있게 된다.
또한, 상기와 같은 개인인식장치(A3)를 오피스의 기밀이 높은 방의 입구에 적용한 경우, 관리자나 상사가 다른 등록자에 대해서 관리권을 갖도록 설정하면, 관리자가 인증을 받을 때마다 표시부는 다른 등록자의 사전에 대한 갱신이력을 표시한다. 이에 의해, 관리자가 다른 등록자의 사전에 대한 갱신상황을 항상적으로 용이하게 확인할 수 있게 된다.
다음에, 제 4 실시예에 대해서 설명한다.
도 12는 제 4 실시예에 관한 개인인식장치(A4)의 구성을 개략적으로 나타낸 것이다. 도 12에 나타낸 제 4 실시예에 관한 개인인식장치(A4)의 구성은 상술한 도 8의 개인인식장치(A2)의 구성에, 매체기록부(13) 및 매체판독부(14)를 추가하고, 또한 사전갱신이력 기억부(10)가 사전갱신이력 처리부(15)에 치환된 점이 다르다. 그 밖의 구성은 도 8에 나타낸 구성과 동일하므로 동일한 부분에는 동일한 부호를 붙여 상세한 설명을 생략한다. 또한, 제 4 실시예에서는 도 12에는 나타낸 바와 같이 각 등록자에게 개인정보 기록매체(12)가 부여되어 있다. 이 개인정보 인증기록매체(12)는 예를 들어 자기카드, IC카드, 휴대전화 또는 휴대정보단말 등의 휴대 가능한 정보기록매체로 구성된다.
상기 매체 판독부(14)는 각 등록자(O)가 소지하는 개인인증정보 기록매체(12)에 대해서 과거(전회)의 사전갱신이력 등의 정보를 기록한다. 상기 매체 기록부(13)는 개인인증정보 기록매체(12)에 기록되어 있는 인증 데이터나 사전갱신이력 등의 정보를 판독하는 것이다. 상기 사전갱신이력 처리부(15)는 상기 개인인증정보 기록매체(12)에 기록하는 사전갱신이력을 생성하는 것이다.
즉, 본 제 4 실시예에서는 등록자는 본인의 생체정보(예를 들어, 얼굴화상, 지문, 홍채 등) 등의 인증데이터가 기록되어 있는 개인인증정보 기록매체(12)를 소지하고 있다. 상기 개인인식장치(A4)는 각 등록자가 소지하는 개인인증정보 기록매체(12)에 기록되어 있는 인증 데이터에 의해 인증처리를 실시한다. 또한, 상기 개인인식장치(A4)는 인증처리시에 사용한 개인인증정보 기록매체(12)에 과거의 사전갱신이력을 기록한다.
즉, 상기 매체판독부(14)는 피인증자(O)가 제시하는 개인인증정보 기록매체(12)로부터 인증데이터나 과거의 인증이력을 판독하고, 사전갱신이력 처리부(15)에 보낸다. 상기 매체 기록부(13)는 사전갱신이력 처리부(15)로부터 보내어지는 피인증자(O)의 얼굴화상을 포함하는 사전갱신의 내용(이번회의 사전갱신결과)를 사전갱신이력으로서 개인인증정보 기록매체(12)에 기록한다.
이하, 상기 개인인식장치(A4)에 의한 인증처리와 사전갱신처리의 흐름에 대해서 도 13에 나타낸 플로우차트를 참조하여 설명한다. 또한, 도 13에 나타낸 처리의 기본적인 흐름은 도 4에 나타낸 처리와 거의 동일하다.
우선, 화상입력부(9)는 인증대상으로서의 피인증자(O)의 얼굴화상 등의 화상을 취득한다(단계(S40)). 상기 피인증자(O)의 화상을 취득함과 동시에, 상기 개인인식장치(A4)에서는 피인증자(O)가 소지하는 개인인증정보 기록매체(12)로부터 인증데이터를 취득한다(단계(S41)).
즉, 피인증자(O)는 개인인증정보 기록매체(12)를 매체 판독부(14)에 삽입한다. 상기 매체 판독부(14)는 피인증자(O)로부터 제시된 개인인증정보 기록매체(12)로부터 인증데이터로서의 얼굴화상을 판독하고, 사전갱신이력 처리부(15)에 보낸다(단계(S42)). 상기 사전갱신이력 처리부(15)는 개인인증정보 기록매체(12)로부터 판독한 얼굴화상을 인증부(2)로 보낸다. 인증부(2)는 예를 들어, 개인인증정보 기록매체(12)로부터 판독한 인증 데이터와 사전 기억부(1)내의 사전에 기억되어 있는 사전 데이터를 대조확인하는 대조확인처리(인증처리)를 실시한다(단계(S43)). 상기 인증처리에 의해 피인증자(O)가 본인인지의 여부를 인증한경우, 상기 인증부(2)는 인증처리의 결과를 사전갱신이력 처리부(15)로 보낸다(단계(S44)).
또한, 상기 단계(S43)에서 상기 인증부(2)는 상기 개인인증정보 기록매체(12)에 기록되어 있는 인증 데이터만으로 개인인증을 실시해도 좋고, 상기 개인정보 기록매체(12)에 기록되어 있는 인증 데이터에 의한 인증처리와, 피인증자(O)로부터 취득되는 상기 이증 데이터 이외의 생체정보에 기초하는 인증처리를 병용하도록 해도 좋다.
상기 피인증자(O)가 본인이라고 인증되지 않은 경우(단계(S44), 아니오), 상기 표시부(5)는 인증이 실패한 취지를 인증결과로서 표시한다(단계(S45)).
상기 피인증자(O)가 본인이라고 인증된 경우(단계(S44), 예), 사전등록·갱신부(4)는 사전을 갱신해야할지의 여부를 판정한다(단계(S46)). 상기 판정에 의해 갱신해야 하는 것으로 판정한 경우, 사전등록·갱신부(4)는 단계(S42)에서 취득한 인증 데이터에 기초하여 상기 사전 기록부(1)의 사전을 갱신한다(단계(S47)).
사전을 갱신하면, 사전갱신이력 처리부(15)는 상기 화상입력부(9)에 의해 취득한 피인증자(O)의 화상 및 당해 사전의 갱신내용(갱신시간, 갱신장소 등)으로 이루어진 사전갱신이력을 매체기록부(13)로 보낸다. 이에 의해, 상기 매체기록부(13)는 상기 사전갱신이력을 개인인증정보 기록매체(12)로 기록한다(단계(S48)).
또한, 상기 사전갱신이력 처리부(15)는 상기 매체 판독부(14)가 당해 개인인증정보 기록매체(12)로부터 판독된 전회의 사전갱신이력과, 상기 인증부(2)가 실시한 인증처리의 결과(이번회의 인증결과)를 표시부(5)로 보낸다. 이에 의해, 상기 표시부(5)는 전회의 사전갱신이력과 인증결과를 표시한다(단계(S49)). 또한, 상기 피인증자(O)가 본인이라고 인증되었을 때, 상기 도어 제어부(7)는 도어(8)를 개방하도록 이루어져 있다(단계(S50)).
또한, 상기 단계(S46)의 판정에 의해 사전갱신할 필요가 없다고 판정한 경우(단계(S46), 아니오), 상기 사전갱신이력 처리부(15)는 상기 매체판독부(14)가 당해 개인인증정보 기록매체(12)로부터 판독된 전회의 사전갱신이력과, 상기 인증부(2)가 실시한 인증처리의 결과(이번회의 인증결과)를 표시부(5)로 보낸다. 이에 의해, 상기 표시부(5)는 전회의 사전갱신이력과 인증결과를 표시한다(단계(S49)). 또한, 상기 피인증자(O)가 본인이라고 인증되었을 때, 상기 도어 제어부(7)는 도어(8)를 개방하도록 이루어져 있다(단계(S50)).
상기와 같이, 제 4 실시예에서는 개인인증정보 기록매체(12)에 사전갱신이력을 기록한다. 이에 의해, 개인인식장치측에서 사전갱신이력을 유지할 필요가 없다는 이점이 있다.
따라서, 복수의 개인인식장치를 설치하는 경우, 제 4 실시예에 의하면 모든 개인인식장치간에서 모든 등록자에 대한 사전의 갱신이력을 공유할 필요가 없어진다는 이점이 있다. 예를 들어, 복수의 개인인식장치에서 개인인증을 실시하는 개인인증 시스템에 대해서 생각할 수 있다. 개인인증정보 기록매체(12)를 사용하지 않는 경우, 복수의 개인인식장치가 사전갱신이력정보를 공유하는 수단을 설치할 필요가 있다. 예를 들어, 도 14에 나타낸 개인인증 시스템에서는 개인인식장치(A41)와 개인인식장치(A42)를 설치하는 경우, 사전갱신이력정보를 기억하는 사전갱신이력 기억부(33)를 각 개인인식장치(A41, A42)와 접속하는 유선 또는 무선의 네트워크를 구축할 필요가 있다.
이에 대해서, 제 4 실시예와 같이 개인인증정보 기록매체(12)를 사용하는 경우, 복수의 개인인식장치가 사전갱신이력정보를 공유하는 수단을 설치할 필요가 없다. 예를 들어, 도 15에 나타낸 개인인증 시스템에서는 각 개인인식장치(A43) 및 개인인식장치(A44)가 개인인증정보 기록매체(12)에 기록되는 사전갱신이력정보를 처리할 수 있다.
즉, 본 제 4 실시예에 의하면 복수의 개인인식장치를 설치하는 경우에 있어서도 개인인증 시스템 전체를 저렴하게 구축할 수 있다. 또한, 개인인식장치를 증설하는 경우에도 간단하고 저렴하게 개인인식장치를 증설할 수 있다.
다음에, 제 5 실시예에 대해서 설명한다.
도 16은 제 5 실시예에 관한 개인인식장치(A5)의 구성을 개략적으로 나타낸 것이다.
도 16에 나타낸 개인인식장치(A5)의 구성은 상술한 도 3에 나타낸 개인인식장치(A2)의 구성에, 상기 사전갱신선택부(16)가 추가되어 있다. 상기 사전갱신선택부(16)는 피인증자가 사전갱신을 실시할지의 여부를 선택 지시하는 입력장치이다. 상기 사전갱신 선택부(16)는 예를 들어 터치패널이나 텐 키, 음성 등의 사용자 인터페이스로 구성된다. 예를 들어, 상기 사전갱신 선택부(16)와 상기 표시부(5)는 터치패널 내장의 표시장치에 의해 일체적으로 구성된다. 또한, 도 16에 나타낸 개인인식장치(A5)의 사전갱신 선택부(16) 이외의 구성은 도 3에 나타낸 개인인식장치(A2)의 구성과 동일하므로, 동일한 부분에 동일한 부호를 붙여 상세한 설명을 생략한다.
이하, 개인인식장치(A5)에서의 인증처리와 사전갱신처리의 흐름에 대해서 도 17에 나타낸 플로우차트를 참조하여 설명한다.
우선, 상기 화상입력부(9)는 인증대상으로 하는 피인증자(O)의 얼굴화상 등의 화상을 취득한다(단계(S60)). 또한, 상기 인증데이터 입력부(3)는 인증대상으로 하는 피인증자(O)로부터 인증 데이터를 취득하고(단계(S61)), 인증부(2)로 인증 데이터를 공급한다. 또한, 얼굴화상을 인증 데이터로 하는 경우, 상기 화상입력부(9)에 의해 입력한 얼굴화상이 인증 데이터로서 상기 인증부(2)로 공급되도록 해도 좋다.
상기 인증 데이터를 수신하면, 상기 인증부(2)는 수신한 인증 데이터에 기초하여 인증처리를 실시한다. 예를 들어, 인증 데이터로서 얼굴화상을 사용하는 경우 상기 인증부(2)는 피인증자(O)의 얼굴화상에 기초하는 인증처리를 실시한다(단계(S62)). 상기 인증부(2)에 의해 피인증자(O)가 등록자인 것이 인증되지 않은 경우(단계(S63), 예), 표시부(5)는 피인증자(O)가 등록자인 것을 인증할 수 없었던 취지를 인증결과로서 표시한다(단계(S64)).
상기 인증부(2)에 의해 피인증자(O)가 등록자라고 인증된 경우, 도어 제어부(7)는 도어(8)를 개방하고(단계(S65)), 피인증자(O)의 통행을 허가한다. 또한, 상기 인증부(2)에 의해 피인증자(O)가 등록자라고 인증된 경우, 표시부(5)는사전갱신을 실시할지의 여부를 피인증자(O)에게 선택하게 하는 도 18에 나타낸 바와 같은 사전갱신 선택화면을 표시한다(단계(S66)).
상기 표시에 대해서 피인증자(O)는 사전의 갱신을 실시할지의 여부를 사전갱신 선택부(16)에 의해 선택한다(단계(S67)). 상기 인증부(2)에 의해 등록자라고 인증된 피인증자(O)가 상기 사전갱신 선택부(16)에서 「사전을 갱신한다」를 선택한 경우(단계(S68), 예), 사전등록·갱신부(4)는 당해 등록자의 사전의 갱신처리를 실시한다(단계(S69)). 또한, 상기 사전갱신 선택부(16)에서 「사전을 갱신하지 않는다」가 선택된 경우, 사전등록·갱신부(4)는 사전의 갱신처리를 실시하지 않는다. 또한, 단계(S67)에서 상기 사전갱신 선택부(16)에서 소정시간 내에 아무것도 선택하지 않은 경우, 또는 상기 인증부(2)에 의해 등록자라고 인증된 피인증자(O)가 아닌 자가 상기 사전갱신 선택부(16)에 어떤 것을 입력한 경우에도, 상기 사전등록·갱신부(4)는 사전의 갱신처리를 실시하지 않는다.
상기와 같이, 인증이 성공할 때마다 도 18에 나타낸 바와 같이 사전갱신 선택화면이 표시되지만, 사전의 갱신이 필요 없으면 피인증자(O)는 반드시 선택지시를 입력할 필요는 없다. 이 때문에, 피인증자(O)는 번잡함을 느끼지 않아도 된다.
또한, 상기 단계(S68)에서는 상기 사전갱신 선택부(16)에서 「갱신한다」를 선택한 인물이 상기 단계(S62)의 인증처리에서 등록자라고 인증된 인물인지의 여부를 확인하고 있다. 이것은, 인증을 받은 인물이 선택하지 않고 서 있다 간 후에, 제 3 자가 인증을 받은 인물의 사전을 갱신하는 것을 방지하는 것이다.
상기 단계(S68)에서는 예를 들어 인증이 성공하고 나서 상기 사전갱신 선택부(16)에서 「갱신한다」가 선택될 때까지의 시간이 어느 임계값 이하인 경우에 사전의 갱신처리를 실시하도록 한다.
또한, 상기 단계(S68)에서는 피인증자의 얼굴 영역이 올바르게 계속 검출되고 있는 동안에 「갱신한다」가 선택된 경우에 사전의 갱신처리를 실시하도록 해도 좋다. 이 경우, 상기 화상입력부(9)는 인증이 성공하고 나서 상기 사전갱신 선택부(16)에서 선택 입력될 때가지의 피인증자(O)의 화상을 연속적으로 취득한다. 또한, 상기 화상입력부(9) 또는 상기 인증부(2)는 상기 화상 입력부(9)가 연속적으로 취득하는 화상으로부터 얼굴 영역을 검출하는 얼굴 영역의 검출처리를 반복하여 실시한다. 따라서, 인증이 성공하고 나서 상기 사전갱신 선택부(16)에서 선택입력이 실시될 때까지의 사이에, 인증된 피인증자가 서 있다 간 것인지를 확인할 수 있다.
또한, 상기 단계(S67)에서 피인증자(O)가 「갱신한다」를 선택하지 않아도, 어느 일정 기간마다, 또는 어느 일정 이용횟수다마 사전갱신을 실시하도록 해도 좋다. 이것은 사전갱신이 실시되지 않은 상태가 계속되는 것이 바람직하지 않은 경우, 피인증자(O)가 아무것도 하지 않아도 일정 기간, 또는 일정 이용횟수마다 사전의 갱신을 자동적으로 실시하도록 하는 것이다. 이에 의해, 피인증자(O)가 아무 것도 하지 않아도 일정기간, 또는 일정의 이용횟수마다 사전을 갱신할 수 있어 사전이 오래된 상태로 이용되는 것을 방지할 수 있다.
상기와 같이 제 5 실시예에 의하면 피인증자를 등록자라고 인증한 경우에, 인증처리시에 취득한 인증 데이터에서 사전을 갱신할지의 여부를 피인증자에게 선택하게 할 수 있도록 한 것이다. 이에 의해, 피인증자의 의사에 기초하여 사전의갱신처리를 실시할 수 있다. 또한, 피인증자가 아무것도 지시하지 않는 경우에는 사전의 갱신이 선택되지 않은 것으로서 처리한다. 이 때문에, 사전의 갱신을 불필요한 것으로 하는 피인증자는 아무것도 지시하지 않아도 좋으므로, 피인증자의 조작의 수고를 덜 수 있다.
다음에, 제 6 실시예에 대해서 설명한다.
또한, 얼굴화상 등의 생체정보를 사용한 인증처리(제 1 인증방법)를 실시하는 개인인식장치에서는 피인증자(O)의 생성정보의 변화가 원인으로 인증할 수 없게 되는 경우가 있다. 이와 같은 개인인식장치는 생체정보에서 인증이 불가능했던 경우에도, 패스워드(암증번호 또는 ID번호 등) 등의 다른 인증방법(제 2 인증방법)에 의해 피인증자(O)가 정당한 등록자인지의 여부를 인증하는 것이 있다. 제 6 실시예에서는 생체정보에서 인증이 불가능했던 경우에도 패스워드(암증번호 또는 ID번호 등) 등의 다른 인증방법에 의해 피인증자(O)가 정당한 등록자인지의 여부를 인증하는 개인인식장치에 대해서 설명한다.
또한, 제 6 실시예에 관한 개인인식장치는 도 1, 도 3 또는 도 16에 나타낸 바와 같은 구성이 된다. 또한, 제 6 실시예에 관한 개인인식장치에서는 상기 화상입력부(9)가 피인증자로부터의 생체정보로서의 얼굴화상을 취득하고, 상기 인증데이터 입력부(3)가 피인증자로부터 생체정보 이외의 인증 데이터로서의 패스워드를 취득하는 것으로 한다. 또한, 제 6 실시예에 관한 개인인식장치의 사전 기억부(1) 내의 사전에는 각 등록자의 생성정보(제 1 인증데이터)로서의 얼굴화상과 함께 각 등록자의 제 2 인증방법에 사용하는 제 2 인증 데이터로서의 패스워드가 등록되어있는 것으로 한다. 또한, 상기 인증부(2)는 생체정보(얼굴화상)에 의한 인증처리(제 1 인증방법)와, 제 2 인증데이터(패스워드)에 의한 인증처리(제 2 인증방법)를 실시하는 것으로 한다.
이하, 제 6 실시예에 관한 개인인식장치에서의 사전갱신처리에 대해서 도 18에 나타낸 플로우차트를 참조하여 설명한다.
우선, 상기 화상 입력부(9)는 인증 데이터를 사용하는 피인증자(O)의 얼굴화상을 취득한다(단계(S71)). 한편, 인증부(2)는 상기 화상 입력부(9)에 의해 취득한 피인증자(O)의 얼굴화상과 상기 사전 기억부(1)에 기억되어 있는 사전에 기초하여 인증처리를 실시한다(단계(S72)). 상기 얼굴화상에 의한 인증처리에서 피인증자(0)가 등록자라고 인증된 경우(단계(S73), 예), 도어 제어부(7)는 도어(8)를 개방한다(단계(S74)). 또한, 표시부(5)는 인증결과를 표시한다(단계(S75)).
상기 얼굴화상에 의한 인증처리에서 피인증자(O)가 등록자라고 인증되지 않은 경우(단계(S73), 아니오), 인증 데이터 입력부(3)는 피인증자(O)로부터의 패스워드의 입력을 접수한다. 상기 인증 데이터 입력부(3)가 피인증자(O)로부터의 패스워드를 취득하면(단계(S76)), 상기 인증부(2)는 패스워드에 의한 인증처리를 실시한다(단계(S77)). 상기 패스워드에 의한 인증에서 피인증자(O)가 등록자라고 인증되지 않았던 경우(단계(S77) 아니오), 표시부(5)는 피인증자(O)가 등록자라고 인증되지 않았던 취지의 인증결과를 표시한다(단계(S75)).
또한, 상기 단계(S77)의 패스워드에 의한 인증에서 피인증자(O)가 등록자라고 인증된 경우(단계(S77), 예), 상기 사전등록·갱신부(4)는 패스워드에 의한 인증이, 전회의 사전갱신 이후에 몇회 이루어졌는지의 여부를 체크한다(단계(S78)). 또한, 패스워드에 의한 인증에서 피인증자(O)가 등록자라고 인증된 경우에, 상기 사전등록·갱신부(4)는 전회의 사전갱신 이후에 패스워드에서 인증된 횟수를 등록자마다 상기 사전 기억부(1)에 기억하는 것으로 한다.
상기 단계(S78)의 체크의 결과 당해 피인증자(등록자)(O)가 패스워드로 인증된 횟수가 미리 설정되는 소정의 임계값 이상이 아니었던 경우(단계(S78), 아니오), 상기 도어 제어부(7)는 도어(8)를 개방하고, 피인증자(O)의 통행을 허가한다(단계(S74). 이 때, 표시부(5)는 인증결과로서 패스워드에서 인증된 취지를 표시한다(단계(S75)).
상기 단계(S78)에서의 체크결과, 당해 피인증자(등록자)(O)가 패스워드에서 인증된 횟수가 미리 설정되는 소정의 임계값 이상이었던 경우(단계(S78), 예), 상기 사전등록·갱신부(4)는 당해 등록자의 사전의 갱신처리를 실시한다(단계(S79)). 즉, 정당한 등록자가 소정 횟수 이상 생체정보에서 인증받을 수 없었던 경우에, 당해 등록자의 사전에 등록되어 있는 생체정보를 갱신하는 것이다. 상기 사전등록·갱신부(4)에 의해 사전이 갱신되면, 상기 도어 제어부(7)는 도어(8)를 개방하여 당해 피인증자(O)의 통행을 허가한다(단계(S74)). 이 때, 표시부(5)는 인증결과로서 패스워드에서 인증된 취지와 생체정보(얼굴화상)의 사전을 갱신한 취지를 표시한다(단계(S75)).
상기와 같이, 상기 제 6 실시예의 개인인식장치에서는 소정 횟수이상, 생체정보 이외의 인증방법으로 인증된 경우, 당해 피인증자의 생체정보의 사전을 갱신하도록 한 것이다. 이에 의해, 생체정보에 변화가 발생한 경우에도 간단하게 사전을 갱신할 수 있다.
이상 상술한 바와 같이 제 1∼제 6 실시예에 의하면 피인증자에 부담을 주지 않고 피인증자의 사전 데이터의 등록 또는 갱신할 수 있다. 또한, 특히 도입시에 사전 데이터의 기초등록 등의 번잡함을 피인증자에게 느끼지 않게 하는 개인인식장치 및 개인인증방법을 제공할 수 있다. 또한, 제 1∼제 6 실시예에 의하면 피인증자가 안심하고, 또한 확신을 갖고 자동사전 갱신기능을 사용할 수 있는 개인인식장치 및 개인인증방법을 제공할 수 있다.
다음에, 제 7∼제 11 실시예에 대해서 도면을 참조하여 설명한다.
우선, 제 7 실시예에 대해서 설명한다.
도 20은 제 7 실시예에 관한 개인인식장치(인물인식장치)의 구성을 개략적으로 나타낸 것이다. 상기 개인인식장치는 카메라(101), 조명부(102), 표시부(104), 및 처리부(105) 등으로 구성되어 있다.
상기 카메라(101)는 인식(인증) 대상자(이하, 인물이라고도 함)(O)의 얼굴화상(적어도 얼굴을 포함하고 있는 화상)을 촬상하여 입력하는 것이다. 상기 조명부(102)는 카메라(101)의 근방(예를 들어 우측 상방 또는 좌측 상방)으로부터 인식대상자(O)의 적어도 얼굴을 향하여 일정한 조도로 빛을 조사하는 것이다. 상기 표시부(104)는 인식대상자(O)에 대하여 입력된 얼굴화상이나 각종 안내를 표시한다. 상기 처리부(105)는 카메라(101)로부터 입력된 얼굴화상이나 각종 안내를 표시한다. 상기 처리부(105)는 카메라(101)로부터 입력된 얼굴화상을 처리하여 얼굴화상의 인식처리 등을 실시한다.
또한, 이하의 제 7 실시예∼제 11 실시예의 설명에서는 화상입력데이터, 추출한 특징량, 부분공간, 부분공간을 구성하기 위한 고유 벡터, 상관행렬, 등록 시각, 일시, 장소 등의 상황정보, 암증번호, ID코드 등의 개인정보의 각 정보가 등장한다. 또한, 인식 데이터는 부분공간 또는 부분공간을 구성하기 위한 고유 벡터를 포함하는 것으로 한다. 또한, 등록정보는 화상입력데이터, 추출한 특징량, 부분공간, 부분공간을 구성하기 위한 고유 벡터, 상관행렬, 상황정보, 개인정보를 포함하는 것으로 한다. 따라서, 상기 인식데이터는 상기 등록정보에 포함되는 것으로 한다.
상기 카메라(101)는 예를 들어 CCD 센서 등의 촬상소자를 사용한 텔레비젼 카메라로 구성되어 있다. 상기 카메라(101)에서는 인식대상자(O)의 얼굴화상을 촬상하여 입력한다.
상기 조명부(102)는 예를 들어, 형광등 등의 조명기구로 구성된다. 상기 조명부(102)는 상기 카메라(101)의 근방(예를 들어, 우측 상방 또는 좌측 상방)으로부터 인식대상자(O)의 얼굴을 향하여 일정한 조도로 빛을 조사하도록 설치된다.
상기 표시부(104)는 표시장치로 구성된다. 상기 표시부(104)는 상기 카메라(101)에서 촬영되고 있는 인식대상자(O)의 얼굴화상, 각종 가이던스 또는 처리결과 등을 표시한다.
상기 처리부(105)는 주제어부(105a), 화상입력부(106), 얼굴 검출부(107), 특징량 추출부(108), 등록정보 유지부(109), 인식부(110) 및 표시 제어부(111) 등으로 구성되어 있다.
상기 주제어부(105a)는 처리부(105) 전체의 제어를 담당하는 것이다. 상기 화상입력부(106)는 상기 카메라(101)에 접속된다. 상기 화상 입력부(106)는 A/D 변환기 등으로 이루어진 화상 입력 인터페이스 등으로 구성된다. 즉, 상기 화상입력부(106)는 카메라(101)로부터의 얼굴화상을 입력하고, A/D변환하여 디지털화한 후, 얼굴 검출부(107)로 보낸다.
상기 얼굴 검출부(107)는 상기 화상 입력부(101)가 취득한 화상으로부터 인물의 얼굴화상을 검출한다. 상기 얼굴 검출부(107)는 상기 화상 입력부(101)가 취득한 화상과, 미리 준비된 패턴 사전과의 대조확인으로 얼굴 및 눈, 코 등의 얼굴 부분의 위치를 검출한다.
상기 특징량 추출부(108)는 상기 얼굴 검출부(107)로부터의 얼굴의 검출결과게 기초하여 얼굴화상의 특징량을 추출하는 것이다. 상기 특징량 추출부(108)에서는 얼굴화상의 특징량으로서 예를 들어 농담정보, 또는 부분공간정보 등의 정보를 추출한다.
상기 등록정보 유지부(109)는 기록장치 등으로 구성된다. 상기, 등록정보 유지부(109)는 상기 특징량 추출부(108)에서 추출한 특징량을 당해 인물의 인식(인증)데이터(등록정보)로서 유지한다.
상기 인식부(110)는 상기 특징량 추출부(108)에서 추출한 특징량과 상기 등록정보 유지부(109)에 등록되어 있는 인식 데이터의 대조확인 처리를 실시한다. 상기 인식부(110)는 상기 대조확인처리에 의해 인식대상자(피인증자)(O)를 인식(인증)한다. 상기 표시제어부(111)는 상기 표시부(110)에 접속된다. 상기 표시 제어부(111)는 상기 표시부(104)에서의 표시내용을 제어한다.
얼굴 검출부(107)는 우선, 화상 입력부(106)에서 입력된 얼굴화상으로부터 인식대상자(O)의 얼굴의 영역을 검출한다. 예를 들어, 미리 준비된 템플릿과 화상중을 이동시키면서 상관값을 구함으로써 가장 높은 상관값을 가진 장소를 얼굴 영역으로 한다. 또한, 그 밖에 고유공간법이나 부분공간법을 이용한 얼굴 영역 추출법 등의 얼굴검출수단이어도 좋다.
또한, 상기 얼굴 검출부(107)에 의한 눈, 코, 입 등의 얼굴부분 검출하는 검출방법은 예를 들어 福井 和廣, 山口 修: 「형상추출과 패턴 대조확인의 조합에 의한 얼굴 특징점 추출」, 전자정보통신학회 논문지(D), vol.J80-D-Ⅱ, No.8, pp2170-2177(1997)(문헌1)에 기재되어 있는 검출방법이 적용 가능하다.
또한, 얼굴검출부(107)에서는 얼굴의 방향을 조사하는 것이 가능하다. 얼굴의 방향은 얼굴 전체 영역에서의, 눈, 코 등의 얼굴부분의 상대위치에 의해 검출할 수 있다. 상기 얼굴 검출부(107)에서는 눈, 코 등의 얼굴부분의 위치를 좌표로 검출하도록 이루어져 있다. 예를 들어, 도 21에 나타낸 바와 같이, 얼굴의 중심좌표(fx, fy), 얼굴의 크기를 (fw, fh), 왼쪽눈의 좌표를 (EyeLx, EyeLy), 오른쪽 눈의 좌표를 (EyeRx, EyeRy), 왼쪽 콧구멍의 좌표를 (NoseLx, NoseLy), 오른쪽 콧구멍의 좌표를 (NosRx, NoseRy)로 하면, 이하의 방법에서 얼굴의 방향을 판단할 수 있다.
이들 좌표의 원점이 화면 좌측 상방이라고 하면, X방향 및 Y방향의 값은 얼굴이 우측 하방을 향할수록 커진다.
상기 특징량 추출부(108)는 상기 얼굴 검출부(107)에서 검출된 얼굴부분의 위치를 기초로, 얼굴 영역을 일정한 크기, 형상으로 잘라 내고 그 농담정보를 특징량으로 하여 사용한다. 예를 들어, m픽셀×n픽셀의 영역의 농담값을 그대로 농담정보로서 사용한다. 따라서, m×n차원의 정보로 이루어진 특징 벡터가 특징량으로서 사용된다.
도 22는 입력화상을 특징량 추출부(108)에 의해 처리하여 얻어진 시계열의 얼굴화상 데이터이다. 이들의 얼굴화상 데이터에 대해서 상기 특징량 추출부(108)는 특징 벡터의 상관행렬을 구하고, 또한 주지의 K-L전개에 의한 정규직교 벡터를 구함으로써 부분공간을 산출한다. 즉, 부분공간은 특징벡터의 상관행렬(또는 공분산 행렬)을 구하고, 또한 상기 상관행렬의 K-L전개에 의한 정규직교 벡터(고유 벡터)를 구함으로써 산출된다. 상기 부분 공간은 고유값에 대응하는 고유벡터를, 고유값이 큰 차례로 k개 선택하여 그 고유벡터 집합을 사용하여 표현한다.
본 실시예에서는 상관행렬(Cd)을 특징벡터로부터 구하여 상관행렬
로 대각화하여 고유 벡터의 Φ를 구한다. 상기 부분공간은 인물의 동정을 실시하기 위한 인식사전으로서 이용한다. 상기 정보를 미리 등록해 두고 그것을사전으로서 등록해 두면 좋다.
또한, 뒤에서 설명하는 바와 같이 인식을 실시하기 위한 인증(입력)데이터로서 부분공간을 이용하도록 해도 좋다. 따라서, 부분공간을 산출한 결과는 인식부(110) 및 등록정보 유지부(109)에 보내어진다.
상기 등록정보 유지부(109)는 등록정보(사전 데이터)에 대응하여 등록자를 나타내는 정보 및 상황정보(등록시의 시각, 일시, 장소 등)이 기록된다. 또한, 상기 등록정보 유지부(109)에는 인식부(110)가 실시하는 인식방법에 따라서 부분공간, 상관행렬 등이 등록정보로서 등록된다. 또한, 등록정보로서는 당해 인물(등록자)의 얼굴화상 데이터, 또는 상기 특징량 추출부(108)에 의해 추출되는 특징량 등이어도 좋다.
상기 인식부(110)는 등록정보 유지부(109)에 축적된 인식(사전) 데이터(부분공간)와 특징량 추출부(108)에서 얻어진 특징량(농담정보 또는 부분공간정보)를 대조확인(비교)한다. 예를 들어, 상기 카메라(101)에서 찍은 인식대상자(O)가 누구이지를 인식(인식처리)하는 경우, 상기 인식부(110)는 인식대상자로부터 얻어진 입력 데이터와 상기 등록정보 유지부(108)에 등록되어 있는 모든 사전 데이터와의 도를 산출하고, 최대 유사도가 되는 사전 데이터의 인물을 인식결과로 한다. 이에 의해, 상기 인식 대상자(O)가 사전에 등록되어 있는 어떤 인물에 가장 유사한지 판정할 수 있다.
또한, 피인증자가 특정(대조확인대상)의 인물인지의 여부를 판정(동정처리)하는 경우, 상기 인식부(110)는 당해 피인증자(O)의 입력 데이터와 상기 등록정보유지부(109)에 등록되어 있는 대조확인대상의 인물에 대응하는 사전 데이터의 유사도를 산출한다. 이에 의해, 상기 인식부(110)는 산출한 유사도에 기초하여 당해 피인증자(O)가 확실히 대조확인대상의 인물인지의 여부를 인증(동정)한다. 예를 들어, 상기 동정처리에서는 개인정보에 의해 개인을 특정하고, 특정한 개인정보에 대응하는 얼굴화상과 피인증자의 얼굴화상의 대조확인처리를 실시한다. 이 경우, 상기 대조확인처리의 결과는 유사도로 주어진다. 따라서, 상기 동정처리에서는 대조확인처리에 의해 얻어진 유사도가 소정의 임계값을 초과하면, 동정된 것으로 판단하도록 이루어져 있다. 또한, 상기 개인정보는 피인증자가 입력하는 등록번호 또는 암증번호에 기초하여 판별된다. 이 경우, 개인인식장치에서는 등록번호나 암증번호를 피인증자가 입력하기 위한 키 입력수단을 설치한다. 또한, 상기 개인정보는 피인증자가 소지하는 휴대가능한 기억매체(IC 카드, ID카드, 무선카드 등의 카드)에 기록되어 있는 정보에 기초하여 판별되는 것이어도 좋다. 이 경우, 개인인식장치에서는 카드에 기록되어 있는 정보를 판독하는 카드리더가 설치된다. 또한, 상기 개인정보는 피인증자가 소지하는 키의 패턴 등에 기초하여 판별되는 것이어도 좋다. 이 경우, 개인인식장치에서는 키의 패턴을 판별하는 키 처리부가 설치된다.
또한, 상기 인식부(110)는 부분공간법이나 복합유사도법 등의 방법을 인식방법으로서 사용한다. 이들의 인식방법은 상기 특징량 추출부(108)에서 추출되는 특징량의 정보를 사용하여 실시된다. 예를 들어, 상기 인식부(110)에서는 前田賢一, 渡邊 貞一: 「국소적 구조를 도입한 패턴·매칭법」, 전자정보통신학회 논문지(D),vol.J68-D, No.3,pp345-352(1985)(문헌 2)에 기재되어 있는 공지의 인식방법이 사용된다. 또한, 상기 문헌 2에서는 상호부분공간법을 사용한 인식방법에 대해서 기재되어 있다.
상기 상호부분공간법에서는 미리 축적된 등록정보로서의 인식 데이터도, 입력되는 입력 데이터로서의 인식 데이터도 부분공간으로서 표현된다. 상기 상호부분 공간방법에서는 등록정보와 입력 데이터의 2개의 부분공간이 이루는 「각도」를 유사도로서 정의하고, 입력되는 부분공간을 입력부분공간으로 한다. 입력데이터열에 대하여 동일하게 상관행렬(Cin)을 구하고,
로 대각화하여, 고유벡터 (φin)를 구한다. 2개의 φin, φd로 나타나는 부분공간의 부분공간 유사도(0.0∼1.0)을 구하고 그것을 유사도로 한다.
도 23은 상기 인식부(110)의 동작을 설명하기 위한 플로우차트이다.
우선, 상기 인식부(110)는 인식처리를 실시할 것인지, 동정처리를 실시할 것인지에 따라 동작이 다르다(단계(S101)).
동정처리를 실시하는 경우(단계(S101), 동정), 상기 인식부(110)는 피인증자(O)로부터 ID코드(개인정보)를 취득한다(단계(S102)). ID코드를 취득하면, 상기 인식부(110)는 읽어들인 ID 모드에 대응하는 등록정보(부분공간)를 등록정보 유지부(109)로부터 판독한다(단계(S103)).
상기 등록정보 유지부(109)로부터 당해 ID코드에 대응하는 등록정보를 판독하면, 상기 인식부(110)는 상기 특징량 추출부(108)가 추출한 입력 데이터의 특징량과 상기 등록정보의 유사도를 산출한다(단계(S104)). 예를 들어 상술한 부분공간법에 의해 인식처리를 실시하는 경우, 인식부(11)는 입력부분공간과 등록정보의 부분공간의 유사도를 계산한다. 유사도를 산출하면 인식부(110)는 산출한 유사도와 미리 설정되어 있는 임계값과 비교한다(단계(S105)).
상기 비교에 의해 산출한 유사도가 상기 임계값보다 크다고 판단한 경우(단계(S106), 예), 인식부(110)는 동정한 취지를 인식결과로서 출력한다(단계(S107)). 또한, 상기 비교에 의해 산출한 유사도가 상기 임계값보다 크지 않다고 판단한 경우(단계(S106), 아니오), 인식부(110)는 인식이 실패한 취지를 인식결과로서 출력한다(단계(S113)).
또한, 인식처리를 실시하는 경우(단계(S101), 인식), 인식부(110)는 인식대상이 되는 모든 등록정보를 등록정보 유지부(109)로부터 판독한다(단계(S108)). 인식대상이 되는 모든 등록정보를 판독하면, 상기 인식부(110)는 상기 특징량 추출부(108)가 추출한 입력 데이터의 특징량에 대해서 각 등록정보와의 유사도를 각각 산출한다(단계(S109)).
모든 등록정보에 대한 유사도를 산출하면, 인식부(110)는 산출한 모든 유사도 중 최대의 유사도(최대 유사도)를 인식결과로서 선택한다(단계(S110)). 최대유사도를 선택하면, 인식부(110)는 인식결과로서 최대유사도가 된 등록정보에 대응하는 인물을 인식하여 출력한다(단계(S112)).
또한, 도 23의 파선으로 둘러싼 단계(S111)와 같이, 상기 단계(S110)에서 선택한 최대유사도의 크기에 기초하여 인식결과가 올바른지의 여부를 판정하도록 해도 좋다. 이 경우, 인식부(110)는 상기 단계(S110)에서 선택한 최대유사도와 소정의 임계값을 비교한다. 상기 비교에 의해 산출한 유사도가 상기 임계값보다 크다고 판단한 경우, 인식부(110)는 최대유사도가 된 등록정보에 대응하는 인물을 인식결과로서 출력한다(단계(S112)). 또한, 상기 비교에 의해 산출한 유사도가 상기 임계값보다 크지 않다고 판단한 경우, 인식부(110)는 인식이 실패한 취지를 인식결과로서 출력한다(단계(S113)).
이상까지의 처리에서 기본적이 인물인식의 동작을 실시하는 것이 가능해진다. 그러나, 얼굴화상을 촬영할 때의 피인증자의 서 있는 위치의 변화, 자세의 변화, 또는 얼굴의 경시변화에 의해 인식율의 저하를 일으키는 경우가 있다. 도 24, 25, 26은 인식처리시에 피인증자로부터 취득한 얼굴화상(입력 데이터)의 예를 나타낸 도면이다. 또한, 도 27은 유사도와 임계값의 관계예를 나타낸 도면이다. 도 24, 25, 26에서는 등록시의 얼굴의 크기(얼굴 사이즈)를 파선으로 나타낸 틀(a)로 나타내고 있다.
예를 들어, 도 24는 등록시에 피인증자의 얼굴을 촬영한 촬영조건(상태)과 가까운 촬영조건에서 촬영된 얼굴화상의 예를 나타낸 도면이다. 등록시의 상태와 가까운 상태에서 촬영한 도 24에 나타낸 바와 같이 얼굴화상을 사용하여 인증처리를 실시하면, 도 27에 나타낸 유사도(r1)와 같은 높은 유사도가 얻어진다. 즉, 등록시의 상태와 가까운 상태에서 피인증자의 얼굴을 촬영하면, 등록시에 취득한 얼굴화상과 거의 동일한 얼굴화상을 취득할 수 있다. 따라서, 등록시의 상태에 가까운 상태에서 피인증자의 얼굴화상을 취득하면, 상기 특징량 추출부(108)는 등록시에 추출한 특징량과 유사한 특징량을 추출하므로 유사도가 높아진다.
이에 대해서, 도 25는 등록시보다 얼굴이 크게 촬영된 얼굴화상의 예를 나타낸 도면이다. 도 26은 등록시보다 얼굴이 작게 촬영된 얼굴화상의 예를 나타낸 도면이다. 예를 들어, 도 25에 나타낸 바와 같은 등록시보다 얼굴이 크게 촬영된 화상을 취득하면 도 27에 나타낸 유사도(r2 또는 r3)와 같이, 인식처리에 의한 유사도가 낮아진다. 또한, 도 26에 나타낸 바와 같은 등록시보다 얼굴이 작게 촬영된 화상을 취득하면 도 27에 나타낸 유사도(r3 또는 r2)와 같이, 유사도가 낮아진다. 또한, 등록시에 촬영한 얼굴의 방향과 인식시에 촬영한 얼굴의 방향이 다른 경우에도 유사도가 낮아진다.
즉, 등록시에 피인증자를 촬영한 상태와 인증시에 피촬영자를 촬영하는 상태가 가까우면 가까울수록, 높은 유사도가 얻어진다. 이 때문에, 제 7 실시예에서는 인식시에 피촬영자에 대해서 가능한 등록시와 동일한 상태가 되도록 안내를 실시한다.
예를 들어, 도 28은 상기 표시부(104)의 표시예를 나타낸 도면이다. 도 28에 나타낸 표시예에서는 촬영한 얼굴화상과 함께, 등록시에 검출한 얼굴의 위치, 얼굴의 크기, 얼굴의 방향 등을 나타낸 틀(원, 또는 타원)(b)과 촬영한 화상으로부터 검출한 얼굴의 위치, 얼굴의 크기, 얼굴의 방향 등을 나타낸 틀(원, 또는 타원)(c)이 동시에 표시되어 있다. 즉, 도 28에 나타낸 표시예에서는 인식대상자(O)에 대해서 어떠한 상태에서 자신의 얼굴을 촬영하면 인식율이 높아지는지를 알기 쉽게 안내표시하고 있다. 이에 의해, 올바르게 얼굴이 촬영되어 있지 않은 상태인 것을 피인증자가 알 수 없는 상태로 인식처리가 종료되는 것을 방지할 수 있다.
도 28에 나타낸 바와 같이 등록시에 검출한 얼굴의 위치, 얼굴의 크기, 얼굴의 방향을 나타낸 틀(b)을 표시하기 위해, 상기 등록정보 유지부(109)에는 등록시에 등록자의 얼굴화상으로부터 검출된 얼굴의 크기, 얼굴의 위치, 얼굴의 방향 등을 나타낸 정보(얼굴의 특징량)도 유지되어 있다. 상기 얼굴의 특징량은 얼굴의 특징점의 좌표값 등으로 표시된다. 상기 얼굴의 특징점은 예를 들어 왼쪽 눈의 중심점, 오른쪽 눈의 중심점, 왼쪽 콧구멍의 중심점, 오른쪽 콧구멍의 중심점 등이다. 또한, 등록시에 등록자의 복수의 얼굴화상을 취득하는 경우, 상기 등록정보 유지부(109)에 유지되는 얼굴의 특징량은 각 얼굴화상으로부터 얻어지는 특징량의 평균값이어도 좋고 최대값 또는 최소값이어도 좋다. 또한, 상기 등록정보 유지부(109)에는 등록에 사용된 각 화상으로부터 얻어지는 특징량의 평균값, 최대값, 최소값 등의 정보를 유지하도록 해도 좋다.
예를 들어, 도 28에 나타낸 표시예에서는 얼굴의 중심위치를 중심으로 하는 원에 의해 얼굴의 위치와 크기를 나타내고 있다. 따라서, 중심 좌표와 반경이 얻어지면 얼굴의 위치와 크기를 나타내는 원을 묘화할 수 있다.
예를 들어, 얼굴의 위치와 크기를 나타내는 원의 중심좌표는 좌우 눈 및 좌우 콧구멍의 4점의 중심으로 하고, 얼굴의 위치와 크기를 나타낸 원의 반경은 상기 중심위치와 각 4점과의 거리의 평균값으로 한다.
이 경우, 원의 중심좌표로서의 상기 4점의 중심위치좌표는 왼쪽눈의 중심위치, 오른쪽 눈의 중심위치, 왼쪽 콧구멍의 중심위치 및 왼쪽 콧구멍의 중심위치를 나타내는 4점의 좌표로부터 산출된다. 또한, 원의 반경은 상기 4점의 좌표와 상기 4점의 중심위치좌표의 거리의 평균값으로서 산출된다. 즉, 상기 중심과 왼쪽눈의 거리는 상기 중심위치좌표와 왼쪽눈의 중심위치좌표에 기초하여 산출된다. 또한, 상기 중심과 오른쪽 눈의 거리는, 상기 중심위치좌표와 오른쪽 눈의 중심위치좌표에 기초하여 산출된다. 상기 중심과 왼쪽 콧구멍의 거리는 상기 중심위치좌표와 왼쪽 콧구멍의 중심위치좌표에 기초하여 산출된다. 상기 중심과 오른쪽 콧구멍의 거리는 상기 중심위치좌표와 오른쪽 콧구멍의 중심위치좌표에 기초하여 산출된다. 상기 4점의 좌표와 상기 4점의 중심위치좌표의 거리의 평균값은 상기 중심과 왼쪽눈의 거리, 상기 중심과 오른쪽 눈의 거리, 상기 중심과 왼쪽 콧구멍의 거리 및 상기 중심과 오른쪽 콧구멍의 거리를 평균함으로써 산출된다.
또한, 도 28에 나타낸 바와 같이 등록되어 있는 얼굴의 상태(위치 및 크기 등)을 나타낸 원(b)과 인식처리를 실시할 때 촬영한 화상으로부터 검출된 얼굴의 상태(위치 및 크기 등)을 나타내는 원(c)은 선의 두께, 색, 종류 등을 바꾸어 동일한 화면상에 표시된다. 이에 의해, 피인증자(O)는 등록시의 상태와 현재(인식처리시)의 상태의 차이를 용이하게 인식할 수 있다.
도 29는 등록되어 있는 얼굴의 상태를 나타낸 원(b)과 인식처리시에 입력화상으로부터 검출된 얼굴의 상태를 원(c)을 동시에 표시시킨 표시예를 나타낸 것이다. 도 29에 나타낸 표시예에서는 등록되어 있는 얼굴의 상태를 나타낸 원(b)은파선으로 묘화되어 인식처리시의 입력화상으로부터 검출된 얼굴의 상태를 나타낸 원(c)은 실선으로 묘화되어 있다. 이에 의해, 피인증자(O)는 등록시의 상태와 인증시의 입력화상에서의 얼굴의 상태의 차이를 용이하게 확인할 수 있다. 또한, 도 29에 나타낸 표시예에서는 원(b,c)만이 표시되어 있지만, 실제로는 원(b,c)의 배경에 입력화상(촬영된 피인증자의 얼굴화상)이 표시된다. 도 29에서는 원(b,c)을 알기 쉽게 나타내기 위해 입력화상이 생략되어 있다.
또한, 도 30은 얼굴의 위치 및 크기와 함께 얼굴의 방향을 나타낸 표시예이다. 도 30에 나타낸 표시예에서는 도 29에 나타낸 표시예에 더하여, 얼굴의 방향을 곡선(d1,d2,e1,e2)으로 나타내고 있다. 도 30에 나타낸 바와 같이 곡선(d1,d2)은 원(b)내에 묘화되어, 곡선(e1,e2)는 원(c)내에 묘화된다. 또한, 도 30에 나타낸 표시예에서는 파선으로 나타낸 곡선(d1,d2)은 등록시의 얼굴의 방향을 나타내고, 실선으로 나타낸 곡선(e1,e2)는 인식시의 얼굴의 방향을 나타내고 있다. 또한, 곡선(d1,e1)은 얼굴의 상하방향의 중심선을 나타내고 곡선(d1,e1)은 얼굴의 좌우방향의 중심선을 나타내고 있다. 따라서, 곡선(d1,d2)의 교점, 및 곡선(e1,e2)의 교점은 얼굴의 중심위치를 나타내고 있다.
또한, 얼굴의 방향이 완전히 정면(상하방향 및 좌우방향 모두 정면방향)이면 곡선(d1,d2,e1,e2)는 얼굴의 중심위치를 교점으로 하는 직선으로 표시된다.
예를 들어, 얼굴의 방향이 정면 보다도 중심위치를 교점으로 하는 직선으로표시된다.
예를 들어, 얼굴의 방향이 정면보다 상방을 향하고 있으면, 상방측이 볼록이 되도록 곡선(d1,e1)의 곡률이 커진다. 또한, 얼굴의 방향이 정면보다 하방을 향하고 있으면, 하방측이 볼록이 되도록 곡선(d1,e1)의 곡률이 커진다. 또한, 얼굴의 방향이 정면보다 우측방향을 향하고 있으면 우측방향측이 볼록이 되도록 곡선(d2,e2)의 곡률이 커진다. 또한, 얼굴의 방향이 정면보다 좌측방향을 향하고 있으면 좌측방향측이 볼록이 되도록 곡선(d2,e2)의 곡률이 커진다.
즉, 곡선(d1,d2,e1,e2)은 얼굴 방향이 정면 방향으로부터 어긋나면 어긋날 수록(상하 또는 좌우로 얼굴의 방향이 움직이면 움직일수록), 얼굴이 향하고 있는 방향측이 볼록이 되도록 곡률이 커진다. 도 30에 나타낸 바와 같은 표시에 의해, 피인증자(O)은 얼굴의 크기 및 위치뿐만 아니라, 얼굴의 방향을 용이하게 확인할 수 있다.
도 31은 얼굴의 중심위치를 X방향, Y방향의 교차점(f,g)으로 나타낸 표시예이다. 상기 교차점(f)은 등록되어 있는 얼굴의 중심위치를 나타내고 있다. 상기 교차점(f)은 원(b)내에 파선으로 표시된다. 상기 교차점(g)은 인식처리시에 입력된 화상으로부터 검출된 얼굴의 중심위치를 나타내고 있다. 상기 교차점(g)은 원(c) 내에 실선으로 표시된다. 이들과 같은 교차점(f,g)에 의해 피인증자(O)는 등록시 및 인증처리시의 얼굴의 방향을 용이하게 확인할 수 있다.
도 32는 얼굴의 방향을 화살표(h,i)로 나타낸 표시예이다. 상기 화살표(h)는 등록되어 있는 얼굴의 방향을 나타내고 있다. 상기 화살표(h)는 원(b)내에 흰색으로 칠해진 도형 또는 파선 등으로 표시된다. 상기 화살표(i)는 등록되어 있는 얼굴의 방향을 나타내고 있다. 상기 화살표(i)는 원(c)내에 검은색으로 칠해진 도형 또는 실선 등으로 표시된다.
또한, 도 29에 나타낸 표시예에서는 등록시의 얼굴의 크기, 위치, 방향 등을 나타낸 하나의 틀(원)(b)이 표시되어 있다. 도 29에 나타낸 원(b)은 상기 등록정보 유지부(109)에 유지되어 있는 정보에 기초하여 중심위치 및 크기가 결정된다.
예를 들어, 등록시에 복수의 얼굴화상으로부터 얻어지는 복수의 특징량의 평균값을 상기 등록정보 유지부(109)에 유지하고 있는 경우, 도 29에 나타낸 표시예에서는 등록시에 사용한 복수의 얼굴화상으로부터 얻어지는 평균적인 값에 기초하여 하나의 틀(원)(b)의 위치 및 크기가 결정된다.
이에 대해서, 등록시에 복수의 얼굴화상으로부터 얻어지는 복수의 특징량의 최대값 및 최소값을 상기 등록정보 유지부(109)에 유지하고 있는 경우, 상기 표시부(104)에는 등록시의 얼굴의 상태를 나타낸 정보로서 상기 최대값에 기초한 틀과 상기 최소값에 기초한 틀을 표시하도록 해도 좋다.
도 33은 등록에 사용한 복수의 화상으로부터 검출된 얼굴의 영역의 최대값과 최소값을 나타낸 표시예이다. 도 33에 나타낸 표시예에서는 등록시의 얼굴의 상태를 나타낸 정보로서, 상기 등록정보 유지부(109)에 유지되어 있는 특징량의 최대값에 기초한 틀(원)(b1)과 최소값에 기초한 틀(b2)을 동일 화면상에 표시하고 있다.도 33에 나타낸 표시예에서는 등록시의 얼굴의 크기의 최대값과 최소값을 각각 2개의 동심원(b1,b2)으로 나타내고 있다. 도 33에 나타낸 표시예에 의하면 피인증자(O)는 등록시의 얼굴의 크기의 최대값과 최소값을 용이하게 확인할 수 있고, 상기 카메라(101)에서 촬영하는 얼굴화상의 크기를 맞추기 쉽다.
도 34는 등록에 사용한 복수의 화상으로부터 검출된 얼굴의 중심위치의 최대값과 최소값을 나타낸 표시예이다. 도 34에 나타낸 표시예에서는 등록시의 얼굴의 상태를 나타낸 정보로서, 상기 등록정보 유지부(109)에 유지되어 있는 얼굴의 중심위치의 최대값과 최소값을 동일 화면상에 표시하고 있다. 도 34는 등록시의 얼굴의 중심좌표의 최대값(또는 최소값)이 A점이고, 최소값(또는 최대값)이 B점인 경우의 표시예이다.
즉, 도 34에 나타낸 표시예에서는 등록시에 얼굴의 중심좌표가 A점부터 B점 상태에서 상하방향으로 이동한 것을 나타내고 있다. 또한, 도 34에 나타낸 표시예에서는 등록에 사용되는 복수의 화상으로부터 검출한 얼굴의 평균적 크기를 나타내는 원의 중심점을 A점과 B 사이에서 이동시킨 경우의 영역(외접 폐곡선)(j)를 표시하고 있다. 도 34에 나타낸 바와 같은 표시예에 의하면 피인증자(O)는 등록에 사용한 복수의 화상에서의 얼굴의 위치의 이동범위를 용이하게 확인할 수 있고, 카메라(101)에서 촬영하는 얼굴의 위치를 맞추기 쉽다.
도 35는 등록에 사용한 복수의 화상으로부터 검출된 얼굴 방향의 최대값과 최소값을 나타낸 표시예이다. 도 35에 나타낸 표시예에서는 등록시의 얼굴의 상태를 나타낸 정보로서, 상기 등록시 유지부(109)에 유지되어 있는 얼굴의 방향의 최대값과 최소값을 동일 화면상에 표시하고 있다. 도 35는 도 30과 동일하게 얼굴의 방향을 곡선으로 나타내고 있다.
즉, 도 35에 나타낸 표시예에서는 등록에 사용한 복수의 화상 중 가장 아래를 향했을 때의 얼굴의 방향을 나타낸 곡선(d1min), 가장 위를 향했을 때의 얼굴의 방향을 나타낸 곡선(d1max), 가장 좌측을 향했을 때의 얼굴의 방향을 나타낸 곡선(d2max), 가장 우측을 향했을 때의 얼굴의 방향을 나타낸 곡선(d2min)이 동일화면상에 표시되어 있다. 도 35에 나타낸 표시예에 의하면, 등록에 사용한 복수의 화상에서의 얼굴의 방향의 범위를 용이하게 확인할 수 있고, 카메라(101)에서 촬영하는 얼굴의 방향을 맞추기 쉽다.
또한, 등록시의 얼굴의 상태를 나타낸 정보로서 얼굴의 위치, 크기, 방향 등을 등록에 사용한 복수의 얼굴화상으로부터 얻어지는 복수의 특징량의 최대값 및 최소값을 사용하여 표시하는 방법은 도 33, 34, 35에 나타낸 표시예에 한정되지 않는다.
또한, 얼굴의 상태를 나타낸 정보를 나타낸 방법은 원 또는 타원 등의 도형을 사용하여 표시하는 것에 한정되지 않는다. 예를 들어, 도 36에 나타낸 바와 같은 직사각형(다각형)을 사용하여 얼굴의 상태를 나타내도록 해도 좋다. 또한, 도 37에 나타낸 바와 같은 십자의 선 패턴을 사용하여 얼굴의 상태를 나타내도록 해도 좋다. 도 36은 등록시에 얼굴이 존재한 평균적인 위치, 크기를 나타낸 직사각형 패턴(k)을 표시한 표시예를 나타내고 있다. 또한, 도 37은 등록시에 얼굴이 존재하고 있었던 영역(상하방향과 좌우방향)을 나타낸 십자의 선 패턴(1)을 표시한 표시예를 나타내고 있다.
또한, 도 16에 나타낸 바와같이, 등록시에 얼굴이 존재한 얼굴 영역(m)에만, 상기 카메라(101)에서 촬영한 화상을 표시하도록 해도 좋다. 도 16에 나타낸 표시예에서는 등록시에 얼굴이 존재한 얼굴 영역(m) 이외의 영역(n)에는 상기 카메라(101)에서 촬영한 화상을 표시하지 않고, 등록시에 얼굴이 존재한 얼굴 영역(m)에만 상기 카메라(101)에서 촬영한 화상을 표시하고 있다. 도 16에 나타낸 표시예에 의하면, 피인증자(O)는 상기 표시부에 얼굴을 표시하게 함으로써 간단하게 상기 카메라(101)에서 촬영하는 얼굴의 상태를 등록시의 얼굴의 상태에 맞출 수 있다.
또한, 상술한 예 이외이어도, 등록시의 얼굴의 상태와 상기 카메라(101)에서 촬영하는 얼굴의 상태를 나타낼 수 있는 것이면 좋다.
상기와 같이, 제 7 실시예에서는 등록시의 얼굴에 관한 정보와 인식시의 입력된 얼굴에 관한 정보를 동시에 표시하도록 한 것이다. 이에 의해, 피인증자에게 어떻게 하면 올바르게 인식되기 쉬운지의 좌표를 나타낼 수 있어, 인식이 실패하여 인식처리를 재시행하는 부담을 감소시키는 것이 가능해진다.
또한, 음성에 의해 예를 들어 「조금 더 얼굴을 카메라로부터 멀리해 주십시오.」나 「조금 더 얼굴을 카메라에 가까이 해 주십시오.」라는 가이던스나, 유사의 내용을 화면에 표시하는 등에 의해 더 유효성을 증가시킬 수 있다.
또한, 상기 부분공간에서 인식처리를 실시하는 경우, 상기 등록정보 유지부(109)는 부분공간을 유지할 뿐만 아니라 부분공간을 계산하기 위한 전단계의상관행렬도 유지한다. 상기 등록정보 유지부(109)는 하나의 인물, 또는 하나의 ID 코드에 대응하여, 하나 또는 복수의 인식 데이터로서의 얼굴의 특징량(부분공간 또는 상관행렬 등)을 유지한다. 상기 등록정보 유지부(109)에는 얼굴의 특징량과 함께 얼굴의 특징량을 취득한 시간 등의 부대정보가 기억된다. 또한, 상기 등록정보 유지부(109)에 하나의 인물(또는 하나의 ID코드)에 대해서 복수의 인식 데이터로서의 부분공간이 유지되는 경우, 인식부(11)는 한사람의 인물에 대응한 복수의 부분공간에 기초하여 인식처리를 실시할 수 있다.
이상 설명한 바와 같이, 제 7 실시예에 의하면 등록처리에 사용된 화상으로부터 검출되는 얼굴의 상태를 나타낸 정보와 인식대상으로 하는 화상에서의 얼굴의 상태를 일정범위 내에 유지하도록, 피인증자에 대한 안내를 실시하도록 한 것이다. 이에 의해, 제 7 실시예에 의하면, 피인증자의 얼굴에 조사하는 조명이 각도 또는 등록시의 얼굴의 상태(얼굴의 크기, 위치, 방향 등)과 인식시의 얼굴의 상태(얼굴의 크기, 위치, 방향 등)의 차이 등에 의한 인식률의 저하를 감소시킬 수 있고, 고정밀도의 인물의 인식이 가능해진다.
다음에, 제 8 실시예에 대해서 설명한다.
상기 제 8 실시예에 관한 개인인식장치의 구성 및 기본적인 동작 등은 상술한 제 7 실시예와 동일하므로, 여기에서는 설명을 생략한다.
상기 제 8 실시예에서는 변화 풍부한 얼굴화상을 수집함으로써 인식 정밀도를 향상시키는 것이 가능한 사전을 작성하는 것을 목적으로 하고 있다. 제 8 실시예에서는 등록용 얼굴화상으로서 여러가지 얼굴화상을 취득하기 위해, 얼굴화상을등록하는 인물(피등록자)에 대해서 안내를 실시하는 것이다. 예를 들어, 등록용 얼굴화상을 상기 카메라(101)에서 촬영할 때, 상기 표시부(104)에 얼굴의 위치, 얼굴로부터 카메라까지의 거리 및 얼굴의 방향 등을, 어떻게 할지를 표시부(104)에 가이던스 표시한다. 이와 같은 안내를 실시하여 피등록자의 얼굴화상을 취득함으로서 제 8 실시예에서는 특정 상태의 얼굴화상뿐만 아니라, 변화 풍부한 얼굴화상을 수집한다.
즉, 제 8 실시예에서는 등록해야할 얼굴의 상태(얼굴의 위치, 크기, 방향 등)과 상기 카메라(101)에서 촬영하고 있는 화상에서의 얼굴의 상태를 상기 표시부(104)에 의해 안재 표시한다. 예를 들어, 등록해야 할 얼굴의 상태와 상기 카메라(101)에서 촬영하고 있는 화상에서의 얼굴의 상태는 예를 들어 도 28∼도 38에 나타낸 바와 같은 표시화면에 의해 표시된다. 도 28∼도 38에 나타낸 표시예에 있어서, 상기 제 7 실시예에서는 등록시의 얼굴의 상태를 표시함과 동시에, 상기 카메라(101)에서 촬영하고 있는 얼굴의 상태를 안내 표시하고 있다. 이에 대해서, 제 8 실시예에서는 등록시의 얼굴의 상태로 바꾸어 등록용 화상으로서 취득하고 싶은 얼굴의 상태(피등록자에게 요망하는 얼굴의 상태(바람직한 얼굴의 상태))를 표시함과 동시에, 상기 카메라(101)에서 촬영하고 있는 얼굴의 상태를 표시한다. 이에 의해, 피등록자에 대해서는 「이 위치에 얼굴을 가져와 주십시오」라는 안내를 표시하는 것이 가능해진다.
도 39 및 도 40은 피등록자에게 요망하는 얼굴의 상태를 나타낸 정보와, 상기 카메라(101)에서 촬영하고 있는 얼굴의 상태를 나타낸 정보를 원(q,p)으로 표시한 경우의 표시예를 나타내고 있다. 도 39 및 도 40에 나타낸 표시예에서는 피등록자에게 요망하는 얼굴의 상태를 나타낸 정보로서의 원(p)을 파선으로 표시하고, 상기 카메라(101)에서 촬영하고 있는 얼굴의 상태를 나타낸 정보로서의 원(p)을 실선으로 표시하고 있다. 또한, 도 39에 나타낸 표시예에서는 상기 카메라(101)에서 촬영하고 있는 화상을 동시에 표시하고 있다.
또한, 피등록자에게게 요망되는 얼굴의 상태와 상기 카메라(101)에서 촬영하고 있는 얼굴의 상태의 차이점에 기초하여 피등록자에게 어떠한 얼굴을 어떠한 상태로 하면 좋을지를 안내하도록 해도 좋다.
예를 들어, 피등록자에 요망하는 얼굴의 위치와 상기 카메라(101)에서 촬영하고 있는 얼굴의 위치의 차이를 판단하고, 상기 카메라(101)에서 촬영하고 있는 얼굴의 위치가 피등록자에게 요망하는 얼굴의 위치가 되는 안내를 실시한다. 즉, 상기 카메라(101)에서 촬영하고 있는 얼굴의 위치가 피등록자에에 요망하는 얼굴의 위치보다 좌측에 존재하는 경우, 「조금 더 우측으로 다가 서 주십시오」라는 취지의 안내를 표시부(104)에 표시한다. 상기 카메라(101)에서 촬영하고 있는 얼굴의 위치가 피등록자에게 요망하는 얼굴의 위치보다 우측에 존재하는 경우 「조금 더 좌측으로 다가 서 주십시오」라는 취지의 안내를 표시부(104)에 표시한다. 상기 카메라(101)에서 촬영하고 있는 얼굴의 위치가 피등록자에게 요망하는 얼굴의 위치보다 위쪽에 존재하는 경우, 「조금 더 얼굴의 위치를 아래쪽으로 해 주십시오」라는 취지의 안내를 표시부(104)에 표시한다. 상기 카메라(101)에서 촬영하고 있는 얼굴의 위치가 피등록자에게 요망하는 얼굴의 위치보다 아래쪽에 존재하는 경우,「조금 더 얼굴의 위치를 위쪽으로 해 주십시오」라는 취지의 안내를 표시부(104)에 표시한다.
또한, 피등록자에게 요망되는 얼굴의 크기와 상기 카메라(101)에서 촬영하고 있는 얼굴의 크기의 차이를 판단하여, 상기 카메라(101)에서 촬영하고 있는 얼굴의 크기가 피등록자에게 요망되는 얼굴의 크기가 되는 안내를 실시한다. 즉, 상기 카메라(101)에서 촬영하고 있는 얼굴의 크기가 피등록자에게 요망하는 얼굴의 크기보다 큰 경우, 「조금 더 카메라로부터 떨어져 주십시오」라는 취지의 안내를 표시부(104)에 표시한다. 상기 카메라(101)에서 촬영하고 있는 얼굴의 크기가 피등록자에게 요망되는 얼굴의 크기보다 작은 경우, 「조금 더 카메라에 다가와 주십시오」라는 취지의 안내를 표시부(104)에 표시한다.
또한, 피등록자에게 요망되는 얼굴의 방향과 상기 카메라(101)에서 촬영하고 있는 얼굴의 방향의 차이를 판단하여, 상기 카메라(101)에서 촬영하고 있는 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향이 되는 안내를 실시한다. 즉, 상기 카메라(101)에서 촬영하고 있는 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향보다 아래 방향인 경우, 「얼굴을 약간 위쪽을 향하도록 해 주십시오」라는 취지의 안내를 표시부(104)에 표시한다. 상기 카메라(101)에서 촬영하고 있는 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향보다 윗방향인 경우, 「얼굴을 약간 아래쪽을 향해 주십시오」라는 취지의 안내를 표시부(104)에 표시한다.
또한, 상기와 같은 안내는 화면에 표시하는 것에 한정되지 않고, 음성에 의한 메세지를 취득하도록 해도 좋다.
또한, 얼굴 방향은 도 41∼도 45 또는 도 46∼도 50에 나타낸 바와 같이, 얼굴의 방향을 화살표나 원 등에 의해 안내하도록 해도 좋다. 예를 들어, 도 41∼도 45는 상기 카메라(101)에서 촬영하고 있는 화상과 함께, 얼굴의 방향을 나타낸 화살표를 표시한 표시예이다. 또한, 도 46∼도 50은 상기 카메라(101)에서 촬영하고 있는 화상과 함께 얼굴의 방향을 얼굴의 중심위치를 나타낸 표시(원)에 의해 표시한 표시예이다.
도 41 및 도 46에 나타낸 표시예는 상기 카메라(101)에서 촬영하고 있는 화상에서의 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향과 일치하는 경우의 표시예이다. 또한, 도 42 및 도 47은 상기 카메라(101)에서 촬영하고 있는 화상에서의 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향보다 좌측방향인 경우의 표시예이다. 즉, 도 42 또는 도 47에서는 화살표 또는 얼굴의 중심위치를 나타내는 표시에 의해 피등록자에 대해서 얼굴을 우측을 향하도록 안내하고 있다.
또한, 도 43 및 도 48은 상기 카메라(101)에서 촬영하고 있는 화상에서의 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향보다 우측방향인 경우의 표시예이다. 즉, 도 43 또는 도 48에서는 화살표 또는 얼굴의 중심위치를 나타낸 표시에 의해 피등록자에 대해서 얼굴을 좌측을 향하도록 안내하고 있다.
또한, 도 44 및 도 49는 상기 카메라(101)에서 촬영하고 있는 화상에서의 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향보다 아래방향인 경우의 표시예이다. 즉, 도 44 또는 도 49에서는 화살표 또는 얼굴의 중심위치를 나타내는 표시에 의해 피등록자에 대해서 얼굴을 위를 향하도록 안내하고 있다.
또한, 도 45 및 도 50은 상기 카메라(101)에서 촬영하고 있는 화상에서의 얼굴의 방향이 피등록자에게 요망되는 얼굴의 방향보다 위쪽을 향하는 경우의 표시예이다. 즉, 도 45 또는 도 50에서는 화살표 또는 얼굴의 중심위치를 나타내는 표시에 의해 피등록자에 대해서 얼굴을 아래를 향하도록 안내하고 있다.
도 41∼도 45 또는 도 46∼도 50에 나타낸 예에 한정되지 않고, 피등록자에게 얼굴 방향을 변경시키는 안내를 실시하는 것이면, 다른 도형, 메세지, 또는 음성 등을 이용하여 안내를 실시하도록 해도 좋다.
이상 설명한 바와 같이, 제 8 실시예에 의하면 여러가지 화상을 사용하여 인식 정밀도가 높은 사전, 즉 많은 변화의 얼굴화상에 의해 학습한 사전을 용이하게 작성할 수 있다. 이와 같은 사전에 의하면 인증처리시에 피인증자가 서 있는 위치, 얼굴의 방향 또는 자세 등에 구속받지 않고 정밀도 좋은 인식을 실시하는 것이 가능해진다. 또한, 여러가지 방향, 크기(거리), 위치 등의 여러가지 얼굴화상을 취득할 때, 피등록자에 대해서 알기 쉬운 안내를 실시할 수 있다.
다음에, 제 9 실시예에 대해서 설명한다.
도 51은 제 9 실시에에 관한 개인인식장치의 구성을 개략적으로 나타낸 것이다. 제 9 실시예에 관한 개인인식장치는 상술한 제 7 실시예에 관한 개인인식장치에 대해서, 인식동작의 개시를 판정하는 기능을 갖는 것이다. 즉, 제 9 실시예에 관한 개인인식장치의 구성은 도 51에 나타낸 바와 같이 도 20에 나타낸 제 7 실시예에 관한 개인인식장치의 구성에 자동인식개시 판정부(112)를 추가한 구성으로 되어 있다. 또한, 도 51에 나타낸 개인인식장치의 구성에 있어서, 상기 자동인식개시 판정부(112) 이외의 구성은 도 20에 나타낸 개인인식장치와 동일하므로, 동일한 부분에 동일한 부호를 붙여 상세한 설명을 생략한다.
상기 자동인식개시 판정수단으로서의 자동인식개시 판정부(112)가 추가된 점이 다르고, 그 밖에는 제 1 실시예와 동일하므로 설명은 생략한다.
자동인식개시 판정부(112)는 카메라(101)의 앞에서 인식대상으로 하는 피인증자(O)의 얼굴이 존재하는 것을 검출(판정)하고, 피인증자(O)의 얼굴이 검출되었을 때 자동적으로 인식동작을 개시하게 하는 제어를 실시하는 것이다. 상기 자동인식개시 판정부(112)는 상기 카메라(101)에서 촬영되는 화상으로부터 상기 얼굴 검출부(107)의 얼굴 검출 결과에 기초하여 「인물의 얼굴이 검출되었는지」의 여부를 판정한다. 또한, 상기 자동인식개시 판정부(112)는 상기 판정에 의해 인물의 얼굴이 검출되었다고 판정했을 때, 자동적으로 인식동작을 개시시킨다.
가령, 하나의 화상(1프레임 화상)으로부터 얼굴이 검출되었는지의 여부를 판정하도록 한 경우, 상기 자동인식개시 판정부(112)는 인물이 존재하지 않아도 인식동작할 가능성이 있다. 예를 들어, 상기 카메라(101)의 시야범위에 인물의 얼굴이 인쇄된 포스터 등이 존재한 경우, 상기 얼굴 검출부(107)가 하나의 화상으로부터 얼굴을 검출하므로, 상기 자동인식개시 판정부(112)는 인물이 존재하지 않음에도 불구하고 인식동작을 개시할 가능성이 있다.
그 때문에, 상기 자동인식개시 판정부(112)에서는 상기 카메라(101)가 촬영하는 복수 프레임의 화상으로부터의 얼굴의 검출결과에 기초하여 인물의 유무를 판단한다. 즉, 상기 자동인식개시 판정부(112)는 1프레임의 화상에 대한 얼굴검출결과만을 이용하는 것이 아니라, 복수 프레임의 화상간에서의 얼굴 검출결과의 변화에 기초하여 인물의 존재의 유무를 판정한다. 이에 의해, 예를 들어 얼굴 사진이 들어간 포스터라는 것이 있었던 경우에도, 당해 개인인식장치가 잘못하여 인식동작을 개시하는 일이 없어진다.
또한, 상기 얼굴 검출부(107)에서는 도 21에 나타낸 바와 같이, 얼굴의 크기, 얼굴의 중심좌표, 좌우의 눈, 코의 검출좌표라는 정보를 검출한다. 이 때문에, 자동인식개시 판정부(112)는 도 52에 나타낸 플로우차트와 같은 처리의 흐름에 의해 인물의 검출처리 및 인식동작의 개시처리를 실시한다. 즉, 당해 개인인식장치에서는 「소정의 프레임수 연속하여 얼굴이 검출되고 얼굴의 움직임에 의한 변동량이 검출된 경우」에만 자동적으로 인식동작을 개시하도록 이루어져 있다. 또한, 상기 자동인식개시 판정부(112)는 얼굴이 검출된 프레임의 수를 기억하는 얼굴 검출 카운터(112a)를 구비하고 있는 것으로 한다. 또한, 상기 카메라(101)는 연속적으로 화상을 촬영하고 있고, 상기 카메라(101)가 촬영한 화상은 차례로 화상입력부(106)에 의해 처리부(105)에 수집되는 것으로 한다.
이하, 도 52에 나타낸 플로우차트에 기초하는 처리의 흐름에 대해서 설명한다.
우선, 자동인식개시 판정부(112)는 자동인식개시 판정부(112)내에 설치되어 있는 얼굴 검출 카운터(112a)를 「0」으로 설정하고(단계(ST121)), 얼굴 검출부(107)의 검출결과에 기초하는 인물의 얼굴 검출처리를 실시한다(단계(ST122)). 상기 얼굴검출처리에서 상기 자동인식개시 판정부(112)는현재의 프레임의 화상으로부터 얼굴이 검출되어 있고 있는지의 여부를 판정한다(단계(S123)). 상기 판정에 의해 현재의 화상으로부터 얼굴이 검출되어 있지 않다고 판정한 경우, 상기 자동인식개시 판정부(112)는 얼굴 검출 카운더(112a)를 「0」으로 설정하여(단계(ST124)), 상기 단계(ST122)로 되돌아간다.
상기 단계(ST123)의 판정에 의해 현재의 프레임의 화상으로부터 얼굴이 검출되어 있다고 판정된 경우 자동인식개시 판정부(112)는 현재의 프레임의 화상으로부터 얼굴이 검출된 것을 나타내는 정보와 현재의 프레임의 화상(또는 현재의 프레임의 화상으로부터 검출된 얼굴의 특징량)을 도시하지 않는 메모리에 기록한다. 또한, 현재 프레임의 화상으로부터 얼굴이 검출되어 있다고 판정한 경우, 자동인식개시 판정부(112)는 앞의 프레임의 화상으로부터도 얼굴이 검출되어 있는지의 여부를 판정한다(단계(ST124)). 상기 판정에 의해 앞의 프레임의 화상으로부터 얼굴이 검출되어 있지 않은 경우, 자동인식개시 판정부(112)는 얼굴 검출 카운터(112a)를 「0」으로 설정하여(단계(ST124)), 단계(ST122)로 돌아간다.
상기 단계(ST125)의 판정에 의해 앞의 프레임의 화상으로부터도 얼굴이 검출되어 있는 경우, 자동인식개시 판정부(112)는 현재의 프레임의 화상과 앞의 프레임의 화상의 변동량이 소정 임계값 이상인지의 여부를 판정한다(단계(ST126)). 상기 판정에 의해 r변동량이 소정 임계값 이상이 아니라고 판정한 경우, 자동인식개시 판정부(112)는 상기 얼굴 검출 카운터를 「0」으로 설정하여(단계(ST124)), 단계(ST122)로 돌아간다.
상기 단계(ST126)의 판정에 의해 변동량이 소정 임계값 이상이라고 판정한경우, 자동인식개시 판정부(112)는 상기 얼굴 검출 카운터(112a)의 값이 소정 임계값 이상인지의 여부를 판정한다(단계(ST127)). 상기 판정에 의해 얼굴 검출 카운터(112a)의 값이 소정 임계값 이상이 아니라고 판정한 경우, 자동인식개시 판정부(112)는, 상기 얼굴 검출 카운터(112a)를 「+1」하여 (단계(ST128)), 단계(ST122)로 돌아간다.
단계(ST127)의 판정에 의해 얼굴 검출 카운터(112a)의 값이 소정 임계값 이상이라고 판정한 경우, 자동인식 개시판정부(112)는 상기 카메라(101)에서 인물의 얼굴을 촬영하고 있다고 판단하고, 상기 인식부(110)에 의한 인식처리를 개시시킨다.
여기에서, 얼굴의 움직임을 나타낸 변동량의 평가방법에 대해서 설명한다. 여기에서는 얼굴의 중심위치를 나타낸 정보로서 검출된 좌표의 변위량을 예로 들어 설명한다. 도 21에서 나타낸 바와 같이 현재의 프레임의 화상으로부터 얼굴의 중심좌표를 (fx,fy)로 하고, 그 하나 전의 프레임으로부터 검출된 얼굴의 중심좌표를 (pfx,pfy)로 한 경우, 2개의 프레임의 화상간의 변동량(Diff)은 이하와 같은 식에 의해 산출된다. 이와 같은 변동량(Diff)에 의해, 자동인식개시 판정부(112)는 인물의 얼굴의 움직임(즉 실제 인물인지의 여부)를 검출하는 것이 가능하다.
따라서, 변동량(Diff)는 앞의 프레임의 화상 및 현재 프레임의 화상 중 어느 한쪽에서도 얼굴이 검출되지 않는 경우에는 영으로 하고, 연속하여 얼굴이 검출된 경우에 영 이상의 값을 갖는 값으로 한다. 상기 변동량(Diff)가 소정의임계값(Th)보다 큰 경우, 자동동작개시 판정부(112)는 「움직이고 있는 얼굴이 존재하고 있다」는 것을 판단하기 위한 얼굴 검출 카운더(112a)의 값을 증가시키고, 상기 조건을 만족하지 않는 경우에는 모든 얼굴 검출 카운터를 「0」으로 되돌린다.
상기 얼굴 검출 카운터(112a)가 소정의 임계값(ThCount) 이상이 된 경우, 자동동작개시 판정부(112)는 「연속된 프레임에서 동작하고 있는 얼굴이 존재하고 있다」고 판정할 수 있고, 자동적으로 인식처리를 개시시켜도 좋다고 판정한다.
또한, 눈, 코 등의 얼굴 부분의 위치를 나타내는 좌표에 대한 변위량의 절대값의 합계값에 기초하여 인물의 존재를 판정하도록 해도 좋다. 또한, 얼굴의 영역의 면적(얼굴의 사이즈)에 대한 차분의 절대값에 기초하여 인물의 존재를 판정하도록 해도 좋다. 또한, 검출된 얼굴의 중심좌표(fx,fy)를 중심으로 하여 가로폭 ±fw/2, 세로폭 ±fh/2로 나타나는 직사각형 영역에서의 앞 프레임의 화상과 현재의 프레임의 화상의 차분량, 또는 상관값 등의 평가량에 기초하여 인물의 존재를 판정하도록 해도 좋다. 즉, 연속하는 프레임의 화상간에서의 얼굴의 특징량의 변동량 그 변동량에 대응하는 임계값을 설정함으로써 인물의 존재를 판정하는 것이 가능하다.
이상 설명한 바와 같이 제 9 실시예에 관한 개인인식장치에서는 카메라(101)가 화상을 연속적으로 상기 카메라(101)가 촬영한 연속하는 화상으로부터 검출되는 얼굴의 특징량의 변동량에 기초하여 인물의 존재를 판정하고, 인물이 존재하는 것을 판정한 경우에 인식처리를 개시하도록 한 것이다. 이에 의해, 카메라가 촬영한화상으로부터 인물의 얼굴 같은 것이 검출되었다고 해도 얼굴의 움직임이 검출되지 않으면 인식처리를 개시시키는 일이 없다. 따라서, 상기 카메라가 인물의 얼굴이 인쇄된 포스터 등의 인물의 얼굴과 오검출되기 쉬운 물체를 촬영한 경우에도 인물의 존재를 오검출하여 인식작동을 개시할(오동작할) 우려가 없다.
다음에, 제 10 실시예 대해서 설명한다.
제 10 실시예는 제 7 실시예(또는 제 8 실시예)에서 설명한 개인인식장치에 의한 통행자의 인식결과에 기초하여 통행자의 통행을 제어하는 통행제어장치이다. 즉, 제 10 실시예에서는 제 7 실시예(또는 제 8 실시예)에서 설명한 개인인식장치를 통행제어장치에 적용한 경우의 예이다.
도 53은 제 10 실시예에 관한 통행제어장치의 구성을 개략적으로 나타낸 것이다. 상기 통행제어장치는 예를 들어 중요설비(보안 중시의 방 등)으로의 입퇴실 관리를 실시하는 것이다. 상기 통행제어장치는 이용자(통행자)의 얼굴화상을 인식하여 그 인식결과에 기초하여 중요설비의 입퇴실용 도어의 개폐제어를 실시한다. 도 53에 나타낸 바와 같이, 통행제어부 장치는 카메라(101), 조명부(102), 표시부(104), 처리부(105) 및 인식부(110)의 인식결과에 따라서 중요시설(201)의 입퇴실용 도어(202)의 개폐제어를 실시하는 도어 제어부(113)으로 구성되어 있다.
또한, 도 53에서 도어 제어부(113) 이외에는 도 20에 나타낸 개인인식장치와 동일한 구성이므로 도 20에 나타낸 개인인증장치와 동일한 부분은 동일한 부분에 동일한 부호를 붙여 설명을 생략한다.
상기 인식부(110)는 예를 들어 도 23의 단계(S106)에서 구한 유사도가 임계값보다 컸던 경우, 또는 도 23의 단계(S111)에서 구한 유사도가 임계값보다 컸던 경우, 도어 제어부(113)에 「도어 개방」의 신호를 출력한다. 또한, 도 23의 단계(111)에서 구한 유사도가 임계값보다 작았던 경우, 상기 인식부(110)는 도어 제어부(113)에 「도어 폐쇄」의 신호를 출력한다.
도어 제어부(113)는 인식부(110)로부터 「도어 개방」의 신호를 수취하면, 입퇴실용 도어(202)를 개방 상태로 제어하고, 인식대상자(이 경우에는 통행자)(O)의 입실을 허가한다. 또한, 도어 제어부(113)는 인식부(110)로부터 「도어 폐쇄」의 신호를 수취하면, 입퇴실용 도어(202)를 폐쇄 상태로 유지하고, 통행자(O)의 입실을 거부한다.
이와 같이, 제 10 실시예에 의하면 제 7 실시예(또는 제 8 실시예)에서 설명한 개인인식장치를 사용하여 통행자의 통행을 제어할 수 있다.
또한, 상기 제 10 실시예에서는 제 7 실시예(또는 제 8 실시예)에서 설명한 개인인식장치를 적용한 경우에 대해서 설명했지만, 제 9 실시예에서 설명한 개인인식장치를 적용하는 것도 가능하다. 제 9 실시예에서 설명한 개인인장치를 적용한 경우를 제 11 실시예로서 그 구성을 도 54에 나타낸다. 도 54에 나타낸 제 11 실시예에 관한 통행제어장치는 상기 제 9 실시예에 관한 개인인증장치를 적용한 것이다. 제 11 실시예는 통행자에 대한 인증처리에 대해서는 제 9 실시예에서 설명한 동작과 동일하고, 통행자의 통행을 제어하는 동작에 대해서는 상기 제 10 실시예와 동일하므로, 상세한 설명을 생략한다.
이상 상술한 바와 같이, 제 7∼제 11 실시예에 의하면 인물에 대한 조명의각도나 얼굴화상의 크기의 차이 등에 의한 인물인식율의 저하를 감소시킬 수 있고, 고정밀도의 인식이 가능해지는 개인인식장치 및 통행제어장치를 제공할 수 있다.
또한, 제 7∼제 11 실시예에 의하면 인식시의 자세나 서 있는 자세, 얼굴의 방향 등에 구속되지 않고 안정된 고정밀도의 인식을 실시하는 것도 가능해지고, 인물인식율의 향상을 도모할 수 있는 개인인식장치 및 통행제어장치를 제공할 수 있다.
또한, 제 7∼제 11 실시예에 의하면 화상입력부로서의 카메라의 시야범위에 인물의 얼굴이 찍힌 포스터 등이 있어도 오검출, 오동작하기 어려운 개인인식장치 및 통행제어장치를 제공할 수 있다.
다음에, 본 발명의 제 12∼제 17 실시예에 대해서 도면을 참조하여 설명한다.
도 55 및 도 56은 제 12∼제 17 실시예에 관한 개인인식장치로서의 얼굴화상 대조확인장치의 사용자 인터페이스부(210)의 외관 구성예를 나타낸 정면도이다. 도 55에 나타낸 얼굴화상 대조확인장치의 구성예에서는 사용자 인터페이스부(210)에 표시부(201), 카메라(202), 선광원(203) 및 선광원(204)이 설치되어 있다. 또한, 도 56에 나타낸 얼굴화상 대조확인장치의 구성예에서는 사용자 인터페이스부(210)에 표시부(201), 카메라(202), 선광원(203) 및 선광원(204)에 더하여 조작부(205)가 설치되어 있다.
상기 표시부(201)는 상기 카메라(202)가 촬영중의 화상을 표시하거나 이용자(피인증자)에 대한 안내 등을 표시한다. 상기 카메라(202)는 동화상 또는연속화상을 촬영하는 것이다. 상기 카메라(202)는 표시부(201)의 아래쪽에 설치되고, 표시부(201)를 보고 있는 이용자의 얼굴을 약간 하측으로부터 촬영하도록 이루어져 있다.
상기 선광원(203)은 카메라(202)의 정면에 위치하는 이용자의 얼굴에 대해서 옆방향으로부터 광을 조사하는 것이다. 상기 선광원(204)은 카메라(202)의 정면에 위치하는 이용자의 얼굴에 대해서 대각선 아래 방향으로부터 광을 조사하는 것이다. 또한, 상기 선광원(203) 및 선광원(204) 등의 조명은 얼굴화상 조명장치의 설치장소의 조명환경이 양호한 경우 불필요하다.
또한, 도 56에 나타낸 얼굴화상 대조확인장치에서는 표시부(201), 카메라(202), 선광원(203) 및 선광원(204)에 더하여, 조작부(205)가 설치되어 있다. 상기 조작부(205)는 텐키 등으로 구성된다. 상기 조작부(205)는 예를 들어 이용자가 개인을 특정하기 위해 각 이용자마다 부여되어 있는 식별정보로서의 ID코드 또는 후술하는 패스워드 등을 입력하는 것이다.
도 57 및 도 58은 얼굴화상 대조확인장치의 설치예를 나타낸 측면도이다.
도 57은 벽걸이 타입의 사용자 인터페이스부(210)를 구비한 얼굴화상 대조확인장치의 설치예를 나타낸 측면도이다. 도 57에서는 도 55 또는 도 56에 나타낸 바와 같이 구성된 사용자 인터페이스부(210)가 벽에 걸어 설치되어 있다. 상기 사용자 인터페이스부(210)의 정면에서 이용자(H)의 얼굴은 아래쪽으로부터 카메라(202)에 의해 촬영되도록 이루어져 있다.
도 58은 거치(据置) 타입의 사용자 인터페이스부(210)를 갖는 얼굴화상 대조확인장치의 설치예를 나타낸 측면도이다. 도 58에서는 사용자 인터페이스부(210)의 정면에 서 있는 이용자(H)에 대해서 비스듬히 아래쪽에 카메라(202)가 설치된다. 이에 의해, 이용자(H)는 카메라(202)를 위에서 들여다 보도록 이루어져 있다. 또한, 도 58에 나타낸 설치예에서는 도 55 또는 도 56에 나타낸 바와 같이 구성되는 얼굴화상 대조확인장치의 사용자 인터페이스부(210)가 케이블(211)로 접속되는 처리부(212)에 접속되어 있다.
도 59는 도어(223, 224) 등의 복수 부분에 사용자 인터페이스부(210)가 설치되는 경우의 구성예를 나타낸 블럭도이다. 도 59에 나타낸 구성예에서는 도어(223) 및 도어(224)에 설치된 사용자 인터페이스부(210)가 처리부(221)에 접속되어 있다. 또한, 상기 처리부(221)에는 보수용 퍼스널 컴퓨터(보수 컴퓨터)(22)가 통신 케이블을 통하여 접속되어 있다. 또한, 보수 퍼스널 컴퓨터가 얼굴화상 대조확인장치에 접속되는 구성에 대해서는 후술하는 제 14 실시예에서 상세히 설명한다.
도 60은 얼굴화상 대조확인장치의 제어계통으로서의 전체 구성을 나타낸 도면이다.
도 60에 나타낸 바와 같이 얼굴화상 대조확인장치의 처리부(230)(212, 221)은 처리프로세서(231), 워크메모리(232), 프로그램 메모리(233), 화상 메모리(234), 캡쳐보드(238), 기록장치 인터페이스(236), 얼굴대조확인용 사전(237), 기록장치(238), 표시제어부(239) 및 조명제어부(40)를 구비하고 있다.
상기 처리 프로세서(231)는 얼굴화상 대조확인장치 전체의 제어를 실시한다.또한, 상기 처리 프로세서(231)는 도 55 또는 도 56에 나타낸 사용자 인터페이스부(210)에 설치되는 표시부(201), 카메라(202), 선광원(203) 및 선광원(204) 등이 접속되고, 이들의 제어를 실시하도록 이루어져 있다. 또한, 도 56에 나타낸 바와 같이 사용자 인터페이스부(210)에 조작부(205)가 설치되는 경우, 조작부(205)는 처리 프로세서(231)에 접속된다. 상기 조작부(205)에서 입력된 정보는 처리 프로세서(231)에 공급되도록 이루어져 있다.
상기 워크 메모리(232)는 처리중의 화상 등을 일시적으로 기억하는 메모리이다. 상기 프로그램 메모리(233)는 제어용 프로그램 등이 기억되는 메모리이다. 상기 화상 메모리(234)는 화상 데이터를 기억하는 메모리이다. 상기 화상 메모리(234)는 예를 들어 카메라(202)에서 촬영되고, 상기 캡쳐 보드(235)를 통하여 처리부(230)내에 공급된 얼굴화상을 기억한다. 상기 캡쳐보드(235)는 상기 카메라(202)에서 촬영된 화상을 처리부(230)내에 수집할 때의 인터페이스이다.
상기 기록장치 인터페이스(236)는 상기 얼굴대조확인용 사전(사전)(237) 및 상기 기록장치(238)의 데이터의 판독, 입력을 실시하는 것이다. 상기 얼굴 대조확인용 사전(사전)(237)는 상기 카메라(202)에서 촬영한 얼굴화상과의 대조확인용 데이터이 기억되는 것이다. 또한, 상기 사전(237)에는 대조확인용 데이터로서 얼굴화상, 사용자 정보 및 얼굴의 특징량으로서의 얼굴의 특징 패턴(얼굴 패턴)이 각 사용자마다 등록된다.
이하의 설명에서는 사전(237)에 등록된 각 사용자분의 데이터를 얼굴 데이터라고도 칭하는 것으로 한다. 상기 기록장치(238)는 이력 데이터로서 얼굴화상이나이력정보를 기록하는 것이다. 또한, 상기 얼굴 대조확인용 사전(237) 및 기록장치(238)는 처리부(230)의 밖에 설치되도록 해도 좋고, 인터페이스를 통하여 통신 가능한 네트워크 상의 다른 외부기기에 설치되도록 해도 좋다.
상기 표시제어부(239)는 표시부(디스플레이)(201)의 표시화면을 제어하는 것이다. 또한, 상기 표시부(201)를 터치 패널 내장의 표시장치로 구성하는 경우, 상기 표시 제어부(239)는 표시부(201)에 표시하는 표시화면을 제어함과 동시에, 터치 패널에 의해 사용자가 입력한 내용을 상기 처리 프로세서(231)로 공급하는 기능을 갖는 것이 된다. 상기 조명 제어부(240)는 광원(203,204)을 제어하는 것으로, 상기 광원(203,204)에서 발광시키는 광을 제어하는 것이다.
여기에서, 상기 카메라(202)는 CCD 또는 CMOS 이미지 센서를 사용한 모노크로의 비디오 카메라를 사용하는 것으로 한다. 또한, 상기 카메라(202)로서 칼라 카메라를 사용하는 경우, 칼라화상으로부터 모노크로 화상으로 변환하는 처리가 추가된다. 상기 캡쳐보드(235)는 비디오 신호(아날로그 데이터)를 디지털 데이터로 변환하여(A/D 변환) 화상 메모리(234)에 보낸다(버퍼링). 이에 의해, 화상 메모리(234)에 축적된 화상 데이터에 대해서는 처리 프로세서(231)가 워크 메모리(232)를 사용하면서 화상 데이터를 차례로 수집하여 여러가지의 처리를 실시한다.
또한, 상기 카메라(202)가 USB(유니버설 시리얼 버스) 인터페이스를 구비하고 있는 경우, 상기 캡쳐보드(235)에는 A/D 변환회로가 불필요하고, USB 인터페이스를 가지게 하면 좋다. 또한, 상기 카메라(202)가 IEEE1394 등의 다른 디지털 인터페이스를 구비하고 있는 경우도 동일하게 상기 캡쳐보드(235)에는 대응하는 인터페이스를 가지게 하면 좋다.
또한, 이하의 설명에서는 카메라(202)가 촬영하는 하나의 얼굴화상(정지화면)를 처리 대상으로 하여 설명하지만 이에 한정되지 않고, 카메라(202)가 촬영하는 복수의 얼굴화상을 처리대상으로 해도 좋다. 이것은 피촬영자의 위치나 동작, 또는 조명 등의 환경변동에 의한 촬영조건의 변동을 고려하여 복수의 얼굴화상으로부터 양호한 데이터를 얻고자 하는 것이다. 복수의 얼굴화상은 예를 들어 일정 시간 간격으로 연속된 얼굴화상(동화상)을 수집하여 도 56의 캡쳐보드의 화상 메모리에 버퍼링하도록 한다.
또한, 이와 같은 동화상은, 얼굴화상의 등록처리에만 사용하는 경우와, 얼굴화상의 등록처리와 대조확인처리의 양쪽에서 사용하는 경우, 2가지가 가능하다. 또한, 동화상을 처리대상으로 하는 경우, 얼굴화상의 등록처리 또는 대조확인처리의 흐름으로서는 복수의 얼굴화상으로부터 얻어지는 복수의 특징벡터(후술)로부터 주성분 분석 등의 통계적 처리를 실시하여 이용자의 얼굴 패턴(후술)을 생성하고, 상기 얼굴패턴을 등록·대조확인하도록 한다. 상기 복수의 얼굴화상으로부터의 얼굴패턴의 추출방법은 예를 들어 문헌 2에 나타나 있는 방법으로 좋다.
또한, 도 59에 나타낸 바와 같이 사용자 인터페이스부(210)가 도어에 설치되는 경우, 처리부(230)에는 상기 도어의 개폐 또는 도어의 자물쇠를 개폐하는 도어제어기구가 설치되어, 상기 도어제어기구가 처리 프로세서(231)에 접속된다. 이에 의해, 얼굴화상 대조확인장치를 도어를 개폐를 제어하는 입퇴출관리 시스템에 적용하는 것이 가능해진다.
다음에, 상기와 같이 구성되는 얼굴화상 대조확인장치의 기본적인 얼굴화상의 등록처리 및 인증처리에 대해서 설명한다.
도 61은 처리 프로세서(231)가 실시하는 얼굴화상의 등록처리의 흐름을 나타낸 플로우차트이다. 도 61에 나타낸 바와 같이, 우선 얼굴화상 대조확인장치에서는 관리자 등의 조작원이 도시하지 않은 키보드 등의 조작부에 의해 사용자의 ID코드와 사용자의 패스워드의 입력을 실시한다(단계(S211)). 또한, 통상 ID코드는 장치의 관리자측이 제공하고 패스워드는 사용자가 자유롭게 설정하도록 이루어져 있는 것으로 한다.
ID코드 및 패스워드가 입력되면 얼굴화상 대조확인장치의 처리 프로세서(231)는 사용자의 얼굴화상의 입력처리를 실시한다(단계(S212)). 상기 얼굴화상의 입력처리에서는 처리 프로세서(231)의 제어에 의해 카메라(202)가 사용자의 얼굴화상을 촬영하고, 촬영한 화상을 캡쳐보드(235)에 의해 수집된다. 촬영한 얼굴화상을 수집하면 처리 프로세서(231)는 수집된 화상 전체로부터 얼굴화상의 영역을 탐색한다(단계(S213)).
이 때, 얼굴화상의 영역을 검출할 수 없었던 경우, 처리 프로세서(231)는 얼굴화상의 입력처리로 돌아가고, 다시 얼굴화상영역의 검출처리를 실시한다. 얼굴화상영역을 검출하면, 처리 프로세서(231)는 검출한 얼굴화상영역으로부터 특징점의 추출처리를 실시한다(단계(S214)). 이 특징점의 추출처리는 우선 검출된 얼굴화상영역내에서 거의 원형영역만으로 형성하는 눈동자 영역과 콧구멍 영역을 검출하고, 이들의 검출한 영역의 중심위치를 얼굴화상의 특징점으로서 추출하는 처리이다.
상기 특징점을 추출하면, 처리 프로세서(231)는 차례로 특징점의 위치를 기준으로 한 대조확인영역의 잘라내기를 실시한다(단계(S215)). 이에 의해 대조확인영역을 잘라내면, 처리 프로세서(231)는 각 대조확인영역에 대해서 기하보정에 의한 크기의 정규화를 실시한다(단계(S216)). 또한, 처리 프로세서(231)는 각 대조확인영역에 대해서 농도 보정에 의한 농도분포의 정규화를 실시한다(단계(S217)). 이들의 처리가 완료되면, 처리 프로세서(231)는 추출된 특징점에 기초하여 얼굴의 특징량으로서의 특징 벡터(얼굴 패턴)을 산출(생성)한다(단계(S218)). 특징 벡터를 산출하면 처리 프로세서(231)는 산출한 특징 벡터를 얼굴화상 및 사용자 정보 등에 대응시켜 얼굴대조확인용 사전(237)에 등록한다(단계(S219)). 이상의 처리에 의해 사용자 1인분의 등록처리가 완료되고, 상기의 처리를 각 사용자만큼 실시함으로써 등록작업이 모두 완료된다.
다음에, 얼굴화상의 대조확인처리에 대해서 설명한다.
도 62는 처리 프로세서가 실시하는 얼굴화상의 대조확인처리를 설명하기 위한 플로우차트이다. 또한, 상기 대조확인처리는 도 62에 나타낸 바와 같이 등록처리와 유사하고 도 61의 단계(S212∼S218)의 처리와 도 62의 단계(S222∼S228)의 처리는 동일하게 처리할 수 있으므로 상세한 설명을 생략한다. 또한, 여기에서는 사용자가 ID코드에 의해 지정하는 사전(237)내의 얼굴 데이터와의 대조확인을 실시하는 1 대 1의 대조확인모드(이하의 설명에서는 단순히 「1 대 1 대조확인모드」라고부른다)의 동작에 대해서 설명한다.
즉, 사용자는 우선 조작부(205)에 의해 ID코드를 입력한다(단계(S221)). 이에 의해, 처리 프로세서(231)는 입력된 ID코드에 대응하는 사전(237)내에 등록되어 있는 얼굴화상을 특정한다. ID코드가 입력되면, 처리 프로세서(231)는 단계(S222∼S228)의 처리로서 ID코드를 입력한 사용자의 얼굴화상을 촬영하고 상기 촬영한 얼굴화상으로부터 얼굴화상의 특징량으로서의 특징벡터(얼굴패턴)을 생성한다. 촬영한 얼굴화상으로부터 얼굴패턴을 생성하면, 처리 프로세서(231)는 사전(237)와의 대조확인처리를 실시한다(단계(S229)).
상기 대조확인처리에서는 우선 처리 프로세서(231)가 상기 단계(S228)에서 생성한 특징 벡터와 상기 단계(S221)에서 입력된 ID코드에 대응하는 얼굴화상의 특징벡터와의 대조확인도(유사도)를 산출한다. 상기 산출한 대조확인도가 소정의 임계값보다 큰 경우, 처리 프로세서(231)는 「대조확인성공」로 하고, 그 이외의 경우에는 「대조확인실패」로 한다. 또한, 대조확인이 실패한 경우, 상기 얼굴화상 대조확인장치에서는 패스워드의 대조확인 등의 대체수단으로 사용자의 인증처리를 실시하는 것으로 한다. 또한, 얼굴화상이 대조확인의 가부를 판정하는 임계값은 프로그램 상에서 고정하도록 해도 좋고, 사전(237)내에서 각 얼굴 패턴에 대응시켜 기억해 두도록 해도 좋다.
다음에, ID코드 입력을 실시하지 않는 대조확인처리에 대해서 설명한다. 즉, 여기에서는 사용자가 ID코드에 의해 사전내의 얼굴화상을 지정하지 않고, 촬영한 얼굴화상과 사전내의 모든 얼굴화상(여기에서는 사전(237)내에 등록되어 있는얼굴화상의 갯수를 N으로 한다)과의 대조확인을 실시하는 1대 N의 대조확인모드(이하의 설명에서는 단지 「1 대 N대조확인모드」라고 함)의 동작에 대해서 설명한다.
도 63는 1:N 대조확인모드의 동작을 설명하기 위한 플로우차트이다. 도 63에 나타낸 바와 같이 우선 얼굴화상 대조확인장치에서는 도시하지 않은 인간검지센서에 의해 사용자의 존재를 검출했을 때에(단계(S231), 예), 사용자의 얼굴화상의 촬영을 개시한다. 이하, 촬영한 화상을 수집하여 얼굴패턴을 생성할 때까지의 처리는 상기 단계(S222∼S228)와 동일하다(단계(S232∼S238)). 촬영한 얼굴화상으로부터 얼굴패턴을 생성하면, 처리 프로세서(231)는 촬영한 얼굴화상으로부터의 얼굴패턴과 사전(237)내에 등록된 모든 얼굴패턴(총수를 N으로 한다)과의 제비뽑기로 대조확인처리를 실시한다.
상기 대조확인처리의 결과에 기초하여 처리 프로세서(231)는 촬영한 얼굴화상과의 대조확인도가 최대가 되고, 또한 이때의 대조확인도가 소정 임계값 이상인 경우 대조확인성공으로 하고, 최대의 대조확인도가 된 얼굴패턴의 ID코드를 출력한다. 이 이외의 경우 처리 프로세서(231)는 대조확인실패로 한다. 또한, 대조확인이 실패한 경우 상기 얼굴화상 대조확인장치에서는 ID코드 및 패스워드의 입력을 접수하여 본인인지의 여부를 인증하는 등의 대체수단으로 인증처리를 실시한다.
또한, 상기 도 62 및 도 63에 나타낸 동작예에서는 1 대 1 대조확인모드와 1 대 N대조확인모드의 동작예에 대해서 설명했지만, 이들 대조확인모드의 중간적인 모드로서 「그룹대조확인모드」가 있다. 상기 「그룹대조확인모드」에서는 얼굴화상의 등록시에, 몇개의 그룹마다 사전을 작성해 두거나, 각 얼굴화상이 어떤 그룹에 속하는지를 나타내는 식별정보를 부여해 둔다. 그리고, 대조확인처리시의 최초의 단계에서 개인의 ID코드가 아니고 그룹ID 코드를 입력하고, 처리 프로세서(231)가 대조확인대상으로 하는 얼굴화상을 좁힌다. 그리고, 처리 프로세서(231)는 촬영한 얼굴화상과 좁힌 얼굴화상의 제비뽑기 대조확인을 실행한다. 이에 의해, 그룹 대조확인모드에서는 등록되는 얼굴화상이 아무리 많아도, 대조확인대상으로 하는 얼굴화상을 좁히는 것이 가능해지므로, 일정한 대조확인정밀도를 유지하는 것이 가능해진다.
이하, 상기와 같이 구성되는 얼굴화상 대조확인장치를 사용한 제 12∼제 17 실시예에 대해서 설명한다.
우선, 제 12 실시예에 대해서 설명한다.
상기 제 12 실시예에서는 사전등록 및 사전대조확인의 처리에 특징이 있고 그 상세한 처리의 흐름을 도 64에 나타낸다. 이하, 제 12 실시예로서의 사전의 등록처리에 대해서 도 64에 나타낸 플로우차트를 참조하면서 설명한다. 또한, 사전 237로의 등록처리는 기본적으로는 도 61에 나타낸 순서로 이루어지는 것으로 하고, 상기 도 64를 사용하여 설명하는 처리는, 도 61의 단계(S219)에 대응하는 처리이다.
즉, 상기 처리 프로세서(231)는 상기 단계(S211∼S218)에서의 처리에 의해 얻어진, ID코드, 패스워드 및 얼굴화상의 특징 벡터를 하나의 조로서 사전(237)에 입력한다(단계(S241)). 이에 의해, 사용자 1인분(또는 하나의 얼굴화상분)의 사전(237)로의 등록이 실시된다. 처리 프로세서(231)는 모든 등록자에 대한사전(237)로의 등록이 완료된 것을 판단할 때까지(단계(S242), 아니오), 상기 단계(S211)로 되돌아가고 다른 미등록 사용자에 대한 등록처리를 반복실시한다.
모든 등록자에 대한 사전(237)로의 등록처리가 완료되었다고 판단한 경우(단계(S242), 예), 처리 프로세서(231)는 사전(237) 내에 등록되어 있는 모든 얼굴패턴끼리의 대조확인도를 판정한다(단계(S243)). 상기 판정처리에 의한 판정결과에 기초하여 처리 프로세서(231)는 소정의 임계값 이상의 대조확인도가 존재하는지의 여부를 판단한다.
상기 판단에 의해 소정의 임계값 이상의 대조확인도가 존재하는 것으로 판단한 경우, 소정의 임계값 이상의 대조확인도가 된 얼굴패턴 끼리를 페어로서 대조확인시켜 간다(단계(S244)). 소정의 임계값 이상의 대조확인도가 된 얼굴패턴의 페어를 모두 추출하면 처리 프로세서(231)는 또한 얼굴패턴이 겹치는 페어끼리를 그룹으로서 정리함으로써 유사한 얼굴패턴의 그룹을 추출한다(단계(S245)).
예를 들어 도 65 및 도 66에 나타낸 바와 같이, 사전(237)에 등록된 복수의 얼굴 데이터로서 A, B, C, D, E, F, …라는 얼굴 데이터를 상정한다. 이들 얼굴 데이터의 얼굴패턴에 대해서 처리 프로세서(231)가 도 65에 나타낸 바와 같이 소정의 임계값 이상의 대조확인도의 페어로서 A와 B, B와 C, D와 E, E와 F를 각각 추출했다고 한다(단계(S244)). 그렇게 하면 처리 프로세서(231)는 도 66에 나타낸 바와 같이 (A, B, C)의 그룹과, (D, E, F)의 그룹을 유사그룹으로서 추출한다(단계(S245)).
이와 같이, 유사그룹을 추출하면, 처리 프로세서(231)는 각 유사그룹에 대해서 ID번호(유사얼굴패턴이 갖는 것을 나타내는 정보)를 발행한다. 각 유사 그룹에 대한 ID번호를 발행하면, 처리 프로세서(231)는 각 유사그룹에 대한 ID번호를 각 얼굴데이터에 부여하여 등록처리를 종료한다(단계(S246)). 또한, 어떤 유사그룹에도 속하지 않는 얼굴 데이터에 대해서는 유사한 얼굴 데이터가 없는 것을 나타내는 정보를 부여하도록 해도 좋다.
또한, 여기에서는 모든 사용자에 대한 등록작업이 모두 완료된 후에 얼굴 패턴이 유사한 유사그룹을 추출하도록 했지만, 이에 한정되지 않고 상기와 같이 유사 그룹의 추출과 등록은 어떤 타이밍으로 실시하도록 해도 좋다. 예를 들어, 일정기간마다 적절, 유사그룹을 추출하여 등록하는 처리를 실시하도록 해도 좋다.
다음에, 도 64에 나타낸 바와 같이 등록처리에 의해 사전(237)에 등록된 얼굴 데이터에 대한 대조확인처리에 대해서 도 67에 나타낸 플로우차트를 참조하면서 설명한다.
여기에서 설명하는 촬영한 얼굴 데이터와 사전(237)에 등록되어 있는 얼굴 데이터의 대조확인처리는 상기 단계(S229)에 대응하는 처리인 것으로 한다. 즉, 상기 처리 프로세서(231)는 상기 단계(S221)에서 사용자에 의해 입력된 ID코드에 대응하는 얼굴 패턴을 사전(237)로부터 판독한다. 그리고, 처리 프로세서(231)는 상기 단계(S222∼S228)의 처리에 의해, 촬영한 얼굴화상으로부터 얻어진 얼굴패턴과, 사전(237)로부터 판독한 얼굴 패턴의 대조확인도를 산출한다(단계(S251)).
대조확인도를 산출하면 처리 프로세서(231)는 사용자가 입력한 ID코드에 대응하는 얼굴패턴에 유사한 다른 얼굴패턴이 사전(237)내에 존재하는지의 여부를판단한다(단계(S252)). 상기 판단은 각 얼굴패턴에 부여되어 있는 유사 패턴이 갖는 것을 나타내는 정보의 유무에 의해 판단되는 것이다. 상기 판단에 의해 유사한 얼굴패턴이 존재하지 않는다고 판단한 경우(단계(S252), 아니오), 처리 프로세서(231)는 통상의 대조확인처리(제 1 대조확인처리)를 실시한다.
상기 통상의 대조확인처리에서 처리 프로세서(231)는 산출한 대조확인도가 소정의 임계값 이상인지의 여부를 판단한다(단계(S253)). 상기 판단에 의해 산출한 대조확인도가 소정의 임계값 이상이라고 판단한 경우, 처리 프로세서(231)는 대조확인이 성공한 것으로 하고, 사용자가 본인인 것을 인증한다(단계(S254)).
또한, 산출한 대조확인도가 소정의 임계값 이상이 아니라고 판단한 경우, 처리 프로세서(231)는 대조확인이 실패했다고 판단한다. 대조확인이 실패했다고 판단한 처리 프로세서(231)는 얼굴대조확인처리의 대체수단으로서, 사용자에 패스워드의 입력을 재촉하고, 사용자로부터의 패스워드 입력을 접수한다(단계(S255)). 이에 의해, 사용자가 패스워드를 입력하면 처리 프로세서(231)는 입력된 패스워드가 ID코드에 대응하여 미리 설정되어 있는 패스워드와 일치하는지의 여부를 판단한다(단계(S256)). 상기 판단에 의해 패스워드가 일치한다고 판단한 경우, 처리 프로세서(231)는 사용자 본인인 것을 인증한다(단계(S254)). 또한, 패스워드가 일치하지 않다고 판단한 경우, 처리 프로세서(231)는 사용자가 본인이라는 것을 인증할 수 없었던 것으로 한다(단계(S257)).
또한, 상기 단계(S252))에서 유사 패턴이 존재한다고 판단한 경우, 처리 프로세서(231)는 통상의 대조확인처리와는 다른 특별처리(제 2 대조확인처리)를 실시한다. 상기 특별처리는 유사한 얼굴패턴이 사전(237)내에 존재하는 얼굴패턴에 대한 특별한 처리이다. 상기 도 67에 나타낸 예에서는 상기 특별처리로서 이하와 같은 처리를 실시한다.
즉, 상기 단계(S252)에서 유사 패턴이 존재한다고 판단한 경우, 처리 프로세서(231)는 유사한 얼굴 패턴이 갖는 것을 나타낸 ID 정보에 기초하여 당해 얼굴패턴과 동일한 유사 그룹에 속하는 모든 얼굴 패턴을 검색한다. 처리 프로세서(231)는 검색한 유사 그룹에 속하는 모든 얼굴패턴과 당해 얼굴 패턴의 대조확인도를 각각 산출한다(단계(S258)).
상기 산출결과에 기초하여 처리 프로세서(231)는 사용자가 입력한 ID 코드에 대응하는 얼굴 패턴과의 대조확인도가 최대이고, 또한 상기 대조확인도와 다음으로 대조확인도가 높았던 얼굴패턴(제 2 위)의 대조확인도의 차가 소정의 임계값 이상인지의 여부를 판단한다(단계(S259)). 상기 판단에 의해 당해 얼굴패턴과의 대조확인도가 최대이고 또한 제 2 위의 대조확인도의 차가 소정의 임계값 이상이었던 경우, 처리 프로세서(231)는 대조확인이 성공한 것으로 하여, 사용자가 본인인 것을 인증한다(단계(S254)).
상기 예에서는 1 대 1 대조확인모드에서의 동작예에 대해서 설명했지만, 1 대 N 대조확인모드에도 응용 가능하다. 예들 들어, 1 대 N 대조확인모드의 경우, 처리 프로세서(231)은 사전(237)내의 모든 얼굴 패턴의 대조확인도를 각각 산출하고, 이들 대조확인도 중 최대 대조확인도가 된 얼굴 패턴을 판정한다. 상기 최대 대조확인도가 된 얼굴 패턴에 대하여 유사 패턴이 있음이 설정되어 있는 경우, 처리 프로세서(231)는 상기와 같은 특별처리를 실시하도록 한다. 이에 의해, 1:N 대조확인모드이어도 1:1 대조확인모드의 경우와 동일하게 특별처리를 포함한 대조확인처리가 가능해진다.
상기와 같이 제 12 실시예에 의하면 유사한 얼굴 패턴이 사전에 복수 등록되어 있는 경우, 유사한 얼굴패턴끼리를 유사 그룹으로서 그룹을 나누고, 유사 그룹에 속하는 얼굴 패턴에 대해서는 통상의 대조확인처리와는 다른 특별처리에 의해 대조확인의 가부를 판단하도록 한 것이다. 이에 의해, 사전내에 유사한 얼굴 패턴이 존재하는 경우에도, 일정한 대조확인성능 및 보안레벨을 유지하는 것이 가능해진다.
다음에, 제 12 실시예의 변형예에 대해서 설명한다.
상기의 도 67을 사용하여 설명한 동작예에서는 특별처리로서 유사얼굴 패턴이 존재하는 경우 당해 얼굴패턴과의 대조확인도가 최대이고, 또한 당해 얼굴패턴과의 대조확인도와 제 2 위의 얼굴패턴의 대조확인도의 차이가 소정의 임계값 이상인지의 여부를 판단하도록 했지만, 특별처리는 상기예에 한정되는 것은 아니다. 예를 들어, 유사 패턴이 존재하지 않는 경우의 대조확인처리에 사용되는 통상의 임계값보다 높은 임계값을 설정해 두고, 유사 패턴이 존재하는 경우 특별처리로서 당해 얼굴패턴과의 대조확인도가 상기 통상의 임계값보다 높은 임계값 이상인지의 여부를 판단하도록 해도 좋다. 또한, 반대로 다른 어떤 얼굴패턴과의 대조확인도도 낮은 경우(유사얼굴패턴이 존재하지 않는 경우)에, 통상의 임계값보다 낮은 임계값과의 비교를 실시하도록 해도 좋다.
즉, 상기 변형예에서는 유사패턴의 존재의 유무에 따라서 대조확인처리의 임계값을 변경하는 것이다. 상기 변형예에서는 사전(237)에 등록하고 있는 각 얼굴 패턴에 대해서 다른 얼굴 패턴과의 대조확인도의 차에 따라서 각 얼굴 패턴마다 대조확인처리의 임계값이 설정되는 경우의 동작예에 대해서 설명한다.
도 68는 상기 변형예의 동작을 설명하기 위한 플로우차트이다. 상기 도 68에 나타낸 동작예에서는 통상의 임계값과는 다른 임계값에서 대조확인을 실시하는 얼굴패턴에 대해서 임계값을 설정해 두고, 통상의 임계값과는 다른 임계값이 설정되어 있는 얼굴패턴에 대해서는 설정된 임계값에서 대조확인처리를 실시하도록 한 것이다. 또한, 도 68의 단계(S261 및 S263∼S267)은 도 67의 단계(S251) 및 단계(S253∼S257)와 동일한 것을 설명을 생략한다.
즉, 도 68에 나타낸 바와 같이 ID코드에 대응하는 사전(237)내의 얼굴 패턴에 통상의 임계값과는 다른 임계값이 설정되어 있는 경우(단계(S262), 예), 처리 프로세서(231)는 특별처리를 실시한다. 여기에서의 특별처리로서는 우선 처리 프로세서(231)가 당해 얼굴패턴에 대해서 설정되어 있는 임계값을 판독한다(단계(S268)).
그리고, 처리 프로세서(231)는 촬영한 사용자의 얼굴패턴과 ID코드에 대응하는 사전(237)내의 얼굴패턴과의 대조확인도가 당해 얼굴패턴에 대하여 설정되어 있는 임계값 이상인지의 여부를 판단한다(단계(S269)). 상기 판단에 의해 임계값 이상이라고 판단한 경우, 처리 프로세서(231)는 대조확인성공하고 사용자가 인증된 것으로 한다(단계(S264). 또한, 상기 판단에 의해 임계값 이상이라고 판단하지 않았던 경우, 처리 프로세서(231)는 대조확인을 실패하고 단계(S265)로 진행한다.
상기와 같이 제 12 실시예의 변형예에서는 얼굴패턴을 등록할 때 사전내의 다른 얼굴패턴과의 유사도의 차이에 기초하여 각 얼굴패턴에 대해서 각각 대조확인도의 임계값을 설정하도록 했으므로, 일정한 대조확인성능을 유지하면서 효율이 좋은 대조확인처리를 실시하는 것이 가능해진다.
다음에, 제 13 실시예에 대해서 설명한다.
상기 제 13 실시예에서는 동일 사용자에 대해서 얼굴 패턴을 사전(237)내에 복수 등록(추가)하는 것을 특징으로 하고 있다. 이와 같은 사전(237)를 이하에서는 「멀티엔트리 사전」라고 불리는 것으로 한다. 상기 멀티엔트리 사전에는 동일하 사용자에 대해서 복수의 얼굴 데이터를 등록하므로, ID코드 외에 부가 코드를 사용자 정보로서 등록한다. 상기 부가 코드는 각 얼굴 데이터에 각각 부여되는 정보이고, 얼굴 데이터를 특정하기 위해 사용된다.
도 69는 사전(237)에 동일 사용자의 얼굴 패턴을 추가할 때의 처리의 흐름을 설명하기 위한 플로우차트이다. 우선, 얼굴화상 대조확인장치(230)에서는 관리자 등의 조작원이 도시하지 않은 키보드 등의 조작부에 의해 ID코드, 패스워드 및 부가코드 등의 사용자 정보를 입력한다(단계(S271)). 이 때, 부가코드 이외의 ID코드와 패스워드는 사용자가 동일 인물이므로 초기 등록시에 입력한 것(이미 등록이 끝난 데이터)과 동일할 필요가 있다. 또한, 부가 ID코드는 사용자는 자유롭게 결정해도 좋고 관리자가 결정해도 좋다. 부가 코드로서는 예를 들어 안경 유(有)의 경우에 「안경」과 같이 미리 정해 두도록 해도 좋다.
ID코드, 부가코드 및 패스워드 등의 사용자 정보가 입력되면, 얼굴화상 대조확인장치(230)는 상기 단계(S212∼S218)와 동일하게 사용자의 얼굴화상의 입력처리(단계(S272), 얼굴화상의 영역을 탐색(단계(S273)), 특징점의 추출처리(단계(S274)), 대조확인영역의 잘라내기(단계(S275)), 크기의 규격화(단계(S276)), 농도분포의 정규화(단계(S277)), 특징벡터의 생성(단계(S278)) 등의 처리를 실시한다. 특징 벡터(얼굴패턴)를 생성하면 처리 프로세서(231)는 생성한 얼굴패턴과 상기 사용자 정보를 대응시켜 얼굴 대조확인용 사전(237)에 추가 등록한다(단계(S279)). 이상의 처리에 의해 동일한 사용자에 대한 얼굴패턴이 추가된다. 즉, 상기와 추가등록에 의해 사전(237)에는 동일한 사용자에 대해서 복수의 얼굴 데이터가 등록된다.
도 70은 멀티엔트리 사전에 대한 대조확인처리의 흐름을 설명하기 위한 플로우차트이다. 도 70에 나타낸 바와 같이 우선 최초로, 사용자는 조작부(205)에 의해 ID코드와 부가코드를 입력한다(단계(S281)). 이에 의해, 처리 프로세서(231)는 입력된 ID코드와 부가코드에 대응하는 사전(237) 내에 등록되어 있는 얼굴패턴을 특정한다.
사전(237) 내의 얼굴패턴이 특정되면, 처리 프로세서(231)는 상기 단계(S212∼S218) 또는 상기 단계(S222∼S228)의 처리와 동일하게 ID코드 및 부가코드를 입력한 사용자의 얼굴화상을 촬영하고, 상기 촬영한 얼굴화상으로부터 특징벡터(얼굴패턴)을 생성한다. 촬영한 얼굴화상으로부터 얼굴패턴을 생성하면, 처리 프로세서(231)는 상기 단계(S281)에서 입력된 ID코드 및 부가코드에서 특정되는 사전(237)내의 얼굴패턴과의 대조확인처리를 실시한다(단계(S289)).
또한, 동일한 사용자에 대해서 복수의 얼굴 데이터를 등록하는 경우, 각 사용자에 대해서 디폴트로 사용하는 얼굴 데이터를 미리 설정하도록 해도 좋다. 예를 들어, 상기 단계(S281)에서 부가코드가 입력되지 않았던 경우, 처리 프로세서(231)는 디폴트로서 초기등록된 얼굴 패턴을 선택하도록 하는 것으로 한다. 또한, ID코드에 대해서 디폴트로서 사용되는 얼굴 패턴은 사전(237)내에 등록된 얼굴패턴에 대한 변경처리, 삭제처리 등에 의해 용이하게 변경할 수 있는 것으로 한다. 또한, 동일한 사용자에 대해서 복수의 얼굴 패턴이 등록되어 있는 경우, 어떠한 얼굴패턴을 디폴트로 사용할지를 설정할 수 있도록 해도 좋다.
또한, 상기 예에서는 1:1대조확인모드에서의 처리에 대해서 설명했지만, 1;N대조확인모드이어도 사전(237)내에 등록되어 있는 모든 얼굴 패턴에 대해서 대조확인처리를 실시함으로써 동일한 사용자에 대해서 복수의 얼굴 패턴을 등록하는 것이 가능하다.
상기와 같이 ID코드에 추가하여 부가코드를 부여함으로써 동일 사용자에 대해서 복수의 얼굴 패턴을 추가 등록하고, 대조확인처리시에 ID코드와 함께 부가코드를 지정함으로써 사전(237)내의 얼굴패턴을 일의(一意)로 특정하고, 촬영한 사용자의 얼굴화상으로부터 생성되는 얼굴 패턴과의 1 대 1의 대조확인을 실시한다. 이에 의해 예를 들어 안경의 유무, 안경의 종류 등의 외적인 요인에 의해 사용자의 얼굴패턴이 변동되는 것에도 대응할 수 있고 각 사용자에 대한 대조확인성능 및 보안 레벨 등을 일정하게 유지하는 것이 가능해진다.
다음에, 제 13 실시예의 변형예에 대해서 설명한다.
제 13 실시예에서는 동일한 사용자에 대해서 복수의 얼굴 패턴을 등록하는 것이 큰 특징이다. 사전으로의 얼굴패턴의 등록은 사용자 및 관리자의 편리성을 고려하면, 가능한한 간단하게 실시할 수 있는 것이 바람직하다. 특히, 동일한 사용자의 얼굴 패턴을 추가 등록하는 경우, 실제로 운용되고 있는 중에서 사용자 또는 관리자가 특히 의식하지 않고 추가등록되는 것이 바람직하다. 이하에 설명하는 변형예에서는 얼굴화상 대조확인장치의 운용중(대조확인처리중)에 사용자의 얼굴패턴을 추가 등록하는 처리를 설명한다.
도 71은 제 13 실시예의 변형예를 설명하기 위한 플로우차트이다. 또한, 여기에서 설명하는 촬영한 얼굴화상과 사전(237)과의 대조확인처리는 예를 들어 도 71의 상기 단계(S289)에 대응하는 처리인 것으로 한다. 우선, 상기 처리 프로세서(231)는 상기 단계(S281)에서 사용자에 의해 입력된 ID코드 및 부가코드에 대응하는 얼굴패턴이 사전(237)에 존재하는지의 여부를 판단한다(단계(S290)). 여기에서는 ID코드가 존재하지 않는 경우, 리젝트되어 ID코드는 존재하지만 부가코드가 존재하지 않는 경우에 단계(S294)로 진행되는 것으로 한다.
상기 단계(S290)의 판단에 의해 사용자에 의해 입력된 ID코드 및 부가코드가 존재하는 것으로 판단했을 때, 상기 처리 프로세서(231)는 상기 단계(S281)에서 사용자에 의해 입력된 ID코드 및 부가코드에 대응하는 얼굴 패턴을 사전(237)로부터 판독한다. 그리고, 처리 프로세서(231)는 상기 단계(S282∼288)의 처리에 의해, 촬영한 얼굴화상으로부터 얻어진 얼굴패턴과, 사전(237)으로부터 판독한 얼굴 패턴의 대조확인도를 산출한다(단계(S291)).
대조확인도를 산출하면 처리 프로세서(231)는 산출한 대조확인도가 소정의 임계값 이상인지의 여부를 판단한다(단계(S292)). 상기 판단에 의해 산출한 대조확인도가 소정의 임계값 이상이라고 판단한 경우, 처리 프로세서(231)는 대조확인이 성공한 것으로서 사용자가 본인인 것을 인증한다(단계(S293)).
또한, 산출한 대조확인도가 소정의 임계값 이상이 아니라고 판단한 경우, 처리 프로세서(231)는 대조확인이 실패했다고 판단한다. 대조확인이 실패했다고 판단한 처리 프로세서(231)는 얼굴 대조확인처리의 대체수단으로서 사용자에 패스워드의 입력을 재촉하고 사용자로부터의 패스워드 입력을 접수한다(단계(S294)). 이에 의해, 사용자가 패스워드를 입력하면 처리 프로세서(231)는 입력된 패스워드가 ID코드에 대응하여 미리 설정되어 있는 패스워드와 일치하는지의 여부를 판단한다(단계(S295)).
상기 판단에 의해 패스워드가 일치하지 않는다고 판단한 경우, 처리 프로세서(231)는 사용자가 본인인 것을 인증할 수 없었던 것으로 한다(단계(S296)). 또한, 상기 판단에 의해 패스워드가 일치한다고 판단한 경우, 처리 프로세서(231)는 상기 단계(S290)에서 부가 코드가 존재한다고 판단되어 있으면 당해 ID코드 및 부가코드에 대응하는 사전(237) 내의 얼굴패턴의 갱신처리를 실시함과 동시에(단계(S297)), 사용자가 본인인 것을 인증한다(단계(S293)).
또한, 상기 단계(S290)에서 ID코드는 존재하지만 부가코드가 존재하지 않는다고 판단한 경우, 상기 동일, 사용자로부터의 패스워드 입력을 접수하고(단계S294)) 입력된 패스워드가 ID코드에 대응하여 미리 설정되어 있는 패스워드와 일치할지의 여부를 판단한다(단계(S295)). 상기 판단에 의해 패스워드가 일치하지 않는다고 판단한 경우, 처리 프로세서(231)는 사용자가 본인인 것을 인증할 수 없었던 것으로 한다(단계(S296)). 또한, 패스워드가 일치한다고 판단한 경우, 처리 프로세서(231)는 상기 단계(S290)에서 ID코드는 존재하지만 부가코드가 존재하지 않는다고 판단되어 있으면, 촬영한 얼굴화상으로부터 생성한 얼굴 패턴을, 입력된 부가코드에 대응하는 얼굴 데이터로서 사전(237)에 추가등록함과 동시에(단계(S297)), 사용자가 본인인 것을 인증한다(단계(S293)).
다음에, 상기 단계(S297)에서의 사전의 갱신처리에 대해서 상세하게 설명한다. 사전(237)내의 얼굴패턴의 갱신처리는 예를 들어, 촬영한 얼굴화상의 얼굴패턴을 사전에 등록을 마친 얼굴패턴에 머지(융합)함으로써 갱신용 얼굴패턴을 생성하고 사전(237)내의 얼굴패턴을 재작성한다. 즉, 촬영한 얼굴화상의 얼굴패턴을 패턴(i)으로 하고 사전에 등록을 마친 얼굴패턴을 패턴(d)으로 하면, 갱신용 얼굴패턴(d')은 d'=αi+βd(0≤α, β≤1, 또한 α+ β=1)이 된다. 여기에서, α 및 β의 값은 갱신용 얼굴패턴에 대해서 촬영한 얼굴화상의 얼굴패턴과 사전에 등록을 마친 얼굴패턴을 어떻게 반영시킬지를 결정하는 것이다.
상기와 같은 갱신용 얼굴패턴(d')은 α의 값을 β의 값보다 크게 하면 촬영한 얼굴화상의 얼굴패턴(i)의 영향이 강해지고, β의 값을 α의 값보다 크게 하면 사전에 등록이 끝난 얼굴패턴(d)의 영향이 강해지는 것이다. 따라서, α 및 β의 값을 1/2로하면, 얼굴패턴(i)과 얼굴패턴(d)과 평균적인 갱신용 얼굴패턴(d')이 얻어지므로 사전(237)내에는 얼굴패턴(i)과 얼굴패턴(d)의 평균적인 얼굴패턴으로 재작성된다. 또한, α의 값을 1로 하고 β의 값을 0으로 하면, i=d'가 되므로 사전(237)내에는 얼굴 패턴(i)으로 재작성된다.
또한, 상기 변형예에서는 1 대 1 대조확인 모드에서의 처리에 대해서 설명했지만, 1 대 N 대조확인모드에도 응용 가능하다. 예를 들어 1 대 N 대조확인모드의 경우, 처리 프로세서(231)는 우선 1:N 대조확인모드에서의 대조확인처리를 실시하고 상기 대조확인처리의 결과 사용자가 인증할 수 없었던 경우, ID코드와 패스워드에 의한 인증처리를 실시한다. 상기 ID코드와 패스워드에 의한 인증을 할 수 있었던 경우, 처리 프로세서(231)는 입력된 ID코드의 얼굴패턴에 대한 사전의 갱신처리를 실시하도록 한다. 이에 의해, 1:N 대조확인모드이어도 1:1 대조확인모드의 경우와 동일하게 대조확인처리의 흐름 중에서 사전의 갱신처리가 가능해진다.
상기와 같이 상기 제 13 실시예의 변형예에서는 얼굴화상에 의한 사전대조확인이 실패가 되고 인증처리의 대체수단으로서의 패스워드 입력에 의해 인증된 경우, 얼굴대조확인용 사전의 얼굴 데이터의 갱신 또는 추가등록을 실시하는 것이다. 이에 의해, 사용자 또는 관리자가 의식하지 않고 사전에 등록이 끝난 얼굴패턴의 갱신처리 또는 등록을 마친 얼굴 패턴과는 다른 동일한 사용자의 다른 얼굴 패턴의 추가등록을 용이하게 실시할 수 있다.
다음에, 제 14 실시예에 대해서 설명한다.
상기 제 14 실시예에서는 특정의 부정 액세스자(미등록자)에 대한 알람 등의 경고를 발하도록 하는 것이다. 이것은 얼굴화상 대조확인장치가 입퇴출 관리 시스템에 적용되는 경우 등에 사용되는 것이다. 이하의 설명에서는 입퇴실을 실시하는 도어 등에 얼굴화상 대조확인장치가 설치되어 있는 경우를 상정하는 것으로 한다.
상기 제 14 실시예에 관한 얼굴화상 대조확인장치의 구성은 도 72에 나타낸 바와 같이 도 60에 나타낸 얼굴화상 대조확인장치의 구성에, 이력 데이터 베이스(238a), 특수사전(238b), 스피커(241), 무선통신보드(242) 및 LAN 보드(243)가 추가된 것이다. 또한, 상기 LAN보드(243)를 통하여 접속되는 LAN에는 보수용 퍼스널 컴퓨터(보수용 PC)(244)가 설치되는 것으로 한다. 상기 이력 데이터베이스(238a) 및 특수사전(238b)는 하드 디스크 드라이브(HDD) 등으로 구성되는 기록장치(238)내에 설치된다. 또한, 상기 이외의 구성은 도 60에 나타낸 얼굴화상 대조확인장치와 동일하므로 동일한 부호를 붙여 설명을 생략한다.
상기 이력 데이터 베이스(238a)에는 대조확인이 실패했을 때 촬영한 얼굴화상, 촬영한 얼굴화상으로부터 추출한 얼굴패턴 및 장소나 일시 등의 속성 데이터가 이력 데이터로서 기억된다. 또한, 상기 특수사전(238b)에는 사전(237)에 등록되어 있지 않은 특정의 인물의 얼굴화상으로부터 추출된 얼굴패턴이 등록된다. 상기 스피커(241)는 상기 처리 프로세서(231)로부터의 지시에 따라서 알람 등을 발하는 것이다.
상기 무선통신보드(242)는 관리자가 소지하는 무선단말 등의 정보단말로의 경보 등을 알리기 위한 무선통신기능을 구비하고 있다. 상기 LAN보드(243)는 LAN 등을 통하여 유지용 PC(244)와 접속하는 것이다. 상기 유지용 PC(244)는 디스플레이(224a) 등을 구비하고, 얼굴화상 대조확인장치의 보수 및 관리를 실시하는 단말기기이다. 상기 보수용 PC(244)는 예를 들어 관리센서 등에 설치되고, 관리자(감시원)이 얼굴화상 대조확인장치를 제어하거나, 처리상황이나 동작상태 등을 감시하도록 이루어져 있다.
도 73은 이력 데이터 베이스(238a)에 이력 데이터를 기억하는 처리를 설명하기 위한 플로우차트이다. 또한, 도 73에 나타낸 단계(S301∼S305)의 처리는 도 71에 나타낸 단계(S291∼S295)와 동일하므로 상세한 설명을 생략한다.
즉, 얼굴화상에 의한 대조확인이 실패하고, 또한 패스워드도 일치하지 않았던 경우(단계(S305), 아니오), 처리 프로세서(231)는 촬영한 얼굴화상, 촬영한 얼굴화상으로부터 추출된 얼굴패턴 및 일시 등의 이력 데이터를 하나의 조로서 이력 데이터 베이스(238a)에 기억한다(단계(S306)). 이 경우, 처리 프로세서(231)는 당해 사용자가 인증되지 않았던 것으로 한다(단계(S307)).
여기에서는 촬영한 얼굴화상으로부터의 특징벡터(얼굴패턴)의 생성처리가 성공한 경우를 전제로 하고 있지만, 실제로는 얼굴패턴을 생성할 때까지의 단계에서 처리에 실패하는 경우가 있다. 이와 같은 경우, 예를 들어 이하에 나타낸 3개의 처리를 실시한다.
(1)얼굴화상영역의 검출에 실패한 경우, 얼굴화상 및 얼굴패턴이 없으므로, 이력을 기억하지 않는다.
(2)얼굴화상영역의 검출이 성공하여 특징점의 검출의 단계에서 실패한 경우, 얼굴패턴은 없는 것으로 하고 검출된 얼굴화상만을 이력으로서 기억한다.
(3)얼굴패턴의 생성에 성공한 경우, 그 얼굴패턴과 특징점 검출이 성공한 얼굴화상의 양쪽을 이력 데이터로 한다.
또한, 상기예에서는 패스워드에 의한 인증이 성공하지 못한 경우에만 이력데이터를 남기도록 하고 있지만, 성공시에도 이력 데이터를 남기도록 해도 좋다. 또한, 패스워드의 입력시에 서 있다 가버릴 가능성이 있으므로 조회가 실패한 시점에서 바로 이력데이터를 기록하도록 해도 좋다. 또한, 얼굴조회에서는 얼굴영역의 검지 또는 얼굴화상으로부터의 특징점의 추출을 대조확인의 전단계에서 실시하고 있으므로, 이들의 처리가 실패한 경우에 패스워드의 입력 조차도 접수하지 않도록 함으로써 보안 레벨을 높이는 것도 가능하다.
다음에, 알람 출력용 특수사전(238b)의 작성에 대해서 설명한다. 상기와 같은 처리에 의해 이력 데이터 베이스(238a)에 기억된 이력 데이터로부터 알람 출력용 특수사전는 작성된다. 즉, 알람 출력용 사전의 작성은 보수용 PC(244) 디스플레이(244a)에 이력 데이터에 기초하는 얼굴화상을 표시하게 하고, 관리자가 수장한 자나 부정 액세스 상습자를 선별함으로써 작성된다.
이것은, 통상의 사전등록과 동일한 처리를 관리자가 수동으로 실행시킴으로써 실현 가능하다. 또한, 보수용 PC(244)가 이력 데이터에 기초하는 얼굴패턴끼리의 대조확인처리를 실시하여, 몇번이고 이력으로서 기록되어 있는 자를 보수용 PC(244)가 판단하고, 상기 판단결과에 기초하여 보수용 PC(244))가 특수사전(238b)에 등록해야할 인물을 선별하도록 해도 좋다. 또한, 특정사전(238b)로의 등록은 보수용 PC(244)를 사용하지 않고, 얼굴화상 대조확인장치에서 실시하는 것도 가능하다.
도 74는 알람 출력용 특수사전(238b)에 의한 대조확인처리를 추가한 경우의 대조확인처리의 흐름을 설명하기 위한 플로우차트이다. 즉, 상기 처리프로세서(231)는 사용자에 의해 입력된 ID코드에 대응하는 얼굴 패턴을 사전(237)로부터 판독하고, 촬영한 얼굴화상으로부터의 얼굴패턴(입력얼굴패턴)과의 대조확인도를 산출한다(단계(S311)).
대조확인도를 산출하면, 처리 프로세서(231)는 산출한 대조확인도가 소정의 임계값 이상인지의 여부를 판단한다(단계(S312)). 상기 판단에 의해 대조확인도가 소정의 임계값 이상이라고 판단한 경우, 처리 프로세서(231)는 대조확인이 성공한 것으로 하여 사용자가 본인인 것을 인증한다(단계(S313)).
또한, 대조확인도가 소정의 임계값 이상이 아니라고 판단한 경우, 처리 프로세서(231)는 입력얼굴패턴과, 알람 출력용 특수사전(238b) 내의 모든 얼굴패턴과의 대조확인도를 산출한다(단계(S314)). 특수사전(238b) 내의 각 얼굴 패턴과의 대조확인도를 산출하면, 처리 프로세서(231)는 소정의 임계값 이상의 얼굴패턴이 특수사전(238b) 내에 존재하는지의 여부를 판단한다(단계(S315)).
상기 판단에 의해 소정의 임계값 이상의 얼굴 패턴이 존재하지 않는다고 판단한 경우, 처리 프로세서(231)는 얼굴대조확인처리의 대체수단으로서 상기 단계(S255, S256)와 동일하게 패스워드에 의한 인증처리를 실시한다(단계(S316, S317)). 또한, 상기 판단에 의해 소정의 임계값 이상의 얼굴패턴이 존재하는 것으로 판단한 경우, 처리 프로세서(231)는 사용자가 인증할 수 없었던 것으로 하고(단계(S318)), 스피커(241)에 의해 알람을 발함과 동시에, 디스플레이(244a)에 사용자에 대한 경고문을 표시한다(단계(S319)).
또한, 상기 예에서는 스피커(241)에 의한 알람과 동시에, 디스플레이(244a)에 사용자에 대한 경고문을 표시하도록 했지만, 상기 무선통신보드(242) 또는 상기 LAN보드(243)를 통하여 다른 장소에 있는 관리자에게 부정 액세스인 취지를 알리도록 해도 좋다. 예를 들어, 보수용 PC(244))에서 관리자에게 부정 액세스를 알리는 경우, LAN을 통하여 보수용 PC(244)에 부정 액세스인 취지와 촬영한 얼굴화상을 송신하고 디스플레이(244a)상에 표시하게 한다. 이에 의해 보수용 PC(244)를 감시하고 있는 관리자가 있는 경우에는 바로 관리자에게 부정 액세스를 알릴 수 있다. 또한, 상기 무선통신보드(242)를 통하여 관리자에게 부정 액세스를 알리는 경우, 처리 프로세서(231)는 무선통신보드(242)에 의해 휴대전화 등 무선단말로 부정 액세스인 취지와 촬영한 얼굴화상과 송신하도록 한다. 이에 의해, 관리자가 특정의 장소에 있지 않아도 원격 관리자에 대해서 부정 액세스를 알릴 수 있다.
또한, 상기 예에서는 알람 출력용 특수사전(238b)와의 대조확인결과에 기초하여 부정액세스를 알리도록 했지만, 얼굴대조확인용 사전(237)에 등록되어 있는 모든 얼굴패턴과의 대조확인에 실패한 경우에 관리자에게 알리도록 해도 좋다. 이 경우, 알람 출력용 특수사전(238b)를 통상의 얼굴대조확인용 사전(237)과 별도로 작성할 필요가 없으므로, 얼굴화상 대조확인장치 전체로서의 처리를 감소시키는 것이 가능해진다.
또한, 상기 예에서는 통상의 얼굴 대조확인용 사전(237)에 등록되어 있는 얼굴패턴과의 대조확인처리가 실패한 경우에, 알람 출력용 특수사전(238b)와의 대조확인을 실시하도록 했지만, 변형예로서 처리 프로세서(231)를 2대 설치하고, 통상의 얼굴 대조확인용 사전(237)에 의한 대조확인처리와, 알람 출력용 특수사전(238b)에 의한 대조확인처리를 병행하여 실시하도록 해도 좋다. 이 경우, 장치의 기본 구성을 단순화하거나 처리 시간의 단축을 도모하는 것이 가능해진다.
또한, 상기 예에서는 부정 액세스를 검출하기 위한 특수사전(238b)를 작성하여 부정 액세스를 알리도록 했지만, 다른 용도에서 특정 인물을 얼굴화상으로 검색하도록 해도 좋다. 예를 들어, 얼굴화상 대조확인장치에서의 이용에 유효기한이 설정되어 있는 경우, 유효기한종료, 또는 유효기한종료가 임박한 인물의 얼굴패턴을 특수사전(238b)에 등록해 두고, 유효기한종료(또는 유효기한종료 임박)의 인물이 검출되었을 때, 디스플레이(244a)에 유효기한종료(유효기한종료가 임박)인 취지를 알리도록 해도 좋다. 이에 의해, 사용자가 유효기한종료(또는 유효기한종료임박)인 것을 용이하게 인식할 수 있게 된다.
상기와 같이 제 14 실시예에서는 통상의 얼굴 대조확인용 사전과는 다른 특수사전을 작성하고, 대조확인처리시에 상기 특수사전에 등록되어 있는 인물이 검출된 경우, 당해 인물 또는 관리자에게 소정의 메시지를 알리도록 한 것이다. 이에 의해, 등록자 이외의 인물에 의한 부정 액세스 등을 관리자나 당해 인물에게 알릴 수 있고, 수상한 자에 대한 신속한 대응 등이 가능해져, 보안레벨을 향상시킬 수 있다.
다음에, 제 15 실시예에 대해서 설명한다.
상기 제 15 실시예에서는 도 59에 나타낸 바와 같이 얼굴화상 대조확인장치를 입퇴실 관리 시스템에 적용하는 경우, 입퇴실 관리와 얼굴화상의 대조확인처리를 연동시켜 대조확인성능 및 보안 레벨의 향상을 실현하는 것이다.
상기 제 15 실시예에서는 도 59에 나타낸 바와 같이 입퇴실 관리를 실시하는 하나의 도어에 대해서 영역 외측과 영역 내측의 양면에 얼굴화상 대조확인장치가 설치된 입퇴실 관리 시스템을 상정하는 것으로 한다. 상기 입퇴실 관리 시스템에서는 영역 밖으로부터의 사용자에 대해서 입실의 관리를 실시하고, 영역내로부터의 사용자에 대해서 퇴실의 관리를 실시한다. 또한, 이와 같은 입퇴실 관리에 기초하여 재실자를 나타내는 재실자 리스트(250)가, 예를 들어 워크 메모리(232), 사전(237) 또는 기억장치(238)내에 작성되는 것으로 한다. 상기 재실자 리스트(250)는 사용자의 입퇴실이 있을 때마다 갱신되는 것으로 한다.
또한, 입퇴실 관리 시스템을 이용하는 사용자는 영역밖에 설치된 얼굴화상 대조확인장치 또는 영역내에 설치되어 얼굴화상 대조확인장치 중 어떤 것에서 등록을 실시한다. 또한, 얼굴패턴의 사전(237)로의 등록처리는 예를 들어 도 61에 나타낸 바와 같이 통상의 등록처리로 사전(237)에 사용자의 얼굴패턴이 등록되는 것으로 한다.
도 75는 상기와 같은 입퇴출 관리 시스템에서의 입퇴출시의 대조확인처리를 설명하기 위한 플로우차트이다. 여기에서는 1대 N 대조확인 모드에서의 대조확인처리에 대해서 설명한다. 또한, 상기 대조확인처리는 도 63에 나타낸 바와 같은 1:N 대조확인모드에서의 사전과의 대조확인처리에 대응하는 것이고, 사용자의 얼굴화상을 촬영하고, 촬영한 얼굴화상으로부터 얼굴패턴을 생성할 때까지의 처리는 도63과 동일하므로 설명을 생략한다.
즉, 도 75에 나타낸 바와 같이 처리 프로세서(231)는 입실시의 대조확인처리의 대조확인대상 및 퇴출시의 대조확인처리의 대조확인대상을 상기 재실자 리스트(250)에 기초하여 좁히는 것이다. 예를 들어, 입실의 경우(단계(S321)), 처리 프로세서(231)는 상기 재실재 리스트(250)에 기초하여 재실자 이외의 얼굴패턴을 모두 대조확인대상으로 하여 검색한다(단계(S322)). 또한, 퇴실의 경우(단계(S321)), 처리 프로세서(231)는 재실자만을 대조확인대상으로 하고 재실자의 얼굴 패턴을 모두 검색한다(단계(S323)).
이와 같은 검색처리에 의해 대조확인대상을 모두 추출하면, 처리 프로세서(231)는 수집한 얼굴화상으로부터의 얼굴패턴과 모든 대조확인대상의 얼굴패턴의 대조확인도를 산출한다(단계(S324)). 모든 대조확인대상과의 대조확인도를 산출하면, 처리 프로세서(231)는 최대의 대조확인도가 소정의 임계값 이상인지의 여부를 판단한다(단계(S325), 예), 처리 프로세서(231)는 얼굴대조확인이 성공했다고 판정하고, 사용자의 입실 또는 퇴실을 허가한다(단계(S329)).
또한, 상기 판단에 의해 최대의 대조확인도가 소정의 임계값을 만족하지 않는 것으로 판단한 경우(단계(S325), 아니오)), 처리 프로세서(231)는 얼굴대조확인이 실패라고 판정하고 대체수단으로의 패스워드입력을 접수한다(단계(S326)). 사용자에 의해 패스워드가 입력되면 처리 프로세서(231)는 상기 검색처리에 의해 검색한 대조확인대상 중에, 입력된 패스워드와 일치하는 패스워드가 존재하는지의 여부를 판단한다(단계(S327)).
상기 판단에 의해 일치하는 패스워드가 존재하지 않았던 경우(단계(S327), 아니오), 처리 프로세서(231)는 사용자가 인증할 수 없었던 것으로 하여 사용자의 입실을 불가로 한다(단계(S328)). 또한, 상기 판단에 의해 일치하는 패스워드가 존재하는 것으로 판단한 경우(단계(S327), 예), 처리 프로세서(231)는 사용자를 인증하고, 당해 사용자의 입실 또는 퇴실을 허가한다(단계(S329)).
사용자의 입실 또는 퇴실을 허가하면, 처리 프로세서(231)는 도시하지 않은 검지 센서에서 실제로 사용자가 입실 또는 퇴실했는지의 여부를 감시하고, 사용자의 입퇴실을 검지했을 때, 상기 재질자 리스트(250)를 변경한다(단계S330)). 예를 들어, 사용자가 입실한 경우 처리 프로세서(231)는 당해 사용자를 재실자에 추가함으로써 재실자 리스트(250)를 변경한다. 또한, 사용자가 퇴실한 경우, 처리 프로세서(231)는 당해 사용자를 재실자로부터 삭제함으로써 재실자 리스트(250)를 변경한다.
또한, 상기 예에서는 하나의 도어에 대해서 입퇴실 관리를 실시하는 예에 대해서 설명했지만, 어느 영역으로의 출입구가 복수 있는 경우에, 각 출입구에 각각 얼굴화상 대조확인장치를 설치하고, 이들의 얼굴화상 대조확인장치를 LAN 등으로 네트워크 접속하여 하나의 재질자 리스트에서 당해 영역의 입퇴실을 관리하는 것도 가능하다.
또한, 상기 예에서는 1 대 N 대조확인모드의 경우의 동작에 대해서 설명했지만, 1 대 1 대조확인모드이어도 동일하게 실현할 수 있다. 이 경우, 사용자가 ID 코드를 입력한 시점에서, ID 코드에 기초하여 사용자가 대조확인대상인지의 여부를판단할 수 있다. 즉, 입실시에 사용자가 입력한 ID코드가 이미 재실하고 있는 자의 ID코드이면 입실을 불가로 하고, 퇴실시에 사용자가 입력한 ID코드가 재실자의 ID코드가 아니면 퇴실을 불가로 할 수 있다. 이와 같이 1:1 대조확인모드에서는 ID코드가 입력된 시점에서 사용자가 대조확인대상이 아니라고 판단되는 경우, 당해 사용자에 대한 얼굴대조확인을 실시하지 않고 입실 또는 퇴실을 불가로 하는 것이 가능해진다.
또한, 상기 예에서는 입실과 퇴실의 양쪽에 얼굴화상 대조확인장치를 설치했지만, 한쪽을 무선 ID 카드리더 등의 다른 개인인식장치로 하는 것도 가능하다. 예를 들어 입실시에 ID 카드 등의 얼굴대조확인 이외의 개인인증을 실시하고 퇴출시에 얼굴대조확인에 의한 개인인증을 실시하도록 하면, 퇴출시에 대조확인대상이 되는 얼굴패턴을 대폭 좁히는 것이 가능해지고, 얼굴대조확인처리를 효율적으로 실시하는 것이 가능해진다. 또한, 이와 같은 시스템을 ID카드 등에 의해 입실만을 체크하고 있는 관리 시스템에 적용하면 사용자의 편리성을 저하시키지 않고 보안 레벨을 향상시킬 수 있다.
상기와 같이 관리하는 영역 내의 입퇴실 상황을 나타낸 정보에 기초하여 입실시 또는 퇴실시의 대조확인대상으로 하는 얼굴패턴을 좁혀 대조확인처리를 실시하도록 한 것이다. 이에 의해, 사전과 대조확인할 때의 대상수를 한정할 수 있고, 얼굴대조확인처리의 효율화 및 보안 레벨의 향상화를 도모할 수 있다.
다음에, 제 16 실시예에 대해서 설명한다.
상기 제 16 실시예에서는 1:1 대조확인모드와 1:N 대조확인모드를 혼재시키는 경우의 동작예를 나타낸 것이다. 여기에서는 1:N 대조확인모드를 우선시키면서, 1:1 대조확인모드 또는 그룹대조확인 모드를 실시하는 것에 대해서 설명한다.
도 76은 1:N 대조확인모드를 우선시키면서 1:1 대조확인모드에서의 대조확인처리를 실시하는 경우의 동작예를 설명하기 위한 플로우차트이다. 도 76에 나타낸 바와 같이, 우선 처리 프로세서(231)는 1:N 대조확인모드에서 동작하고 지정키가 눌러진 경우(단계(S341)), 또는 1:N대조확인모드에서의 대조확인이 실패한 경우(단계(S345), 아니오), 1:N 대조확인모드로부터 1:1대조확인모드로 이행하도록 이루어져 있다.
즉, 처리 프로세서(231)는 도시하지 않은 검지 센서에 의해 카메라 앞의 인간(사용자)를 검지하면 사용자의 얼굴화상을 촬영한다 처리 프로세서(231)는 상기 카메라가 촬영한 화상으로부터 얼굴화상의 영역이 검출되면 검출한 얼굴화상으로부터 얼굴패턴(입력얼굴패턴)을 생성한다. 입력얼굴패턴을 생성하면 처리 프로세서(231)는 1:1 대조확인으로의 이행을 지정하는 지정키가 눌러질 때까지 1:N 대조확인모드에서 동작한다.
즉, 상기 지정키가 눌러지지 않으면 처리 프로세서(231)는 사전(237)에 등록하고 있는 얼굴패턴(등록얼굴패턴)을 하나씩 추출하여 추출한 등록얼굴패턴과 상기 입력얼굴패턴의 대조확인도를 산출한다(단계(S342)). 상기 지정키가 눌러지지 않고, 모든 등록얼굴패턴과 입력얼굴패턴의 대조확인도의 산출처리가 완료되면(단계(S343), 예), 처리 프로세서(231)는 산출한 대조확인도 중 최대대조확인도가 1:N 대조확인용 소정의 임계값 이상인지의 여부를 판단한다(단계(S344)).상기 판단에 의해 최대 대조확인도가 1:N 대조확인용 임계값 이상이라고 판단하면, 처리 프로세서(231)는 사용자가 인증된 것으로 한다(단계(S345)).
또한, 상기 단계(S344))에서 최대 대조확인도가 1:N 대조확인용의 임계값 이상이 아니라고 판단한 경우(단계(S344), 아니오), 또는 모든 등록얼굴패턴과의 대조확인이 완료되기 전에 상기 지정키가 눌러진 경우(단계(S341), 예), 처리 프로세서(231)는 1:1 대조확인모드로 이행한다. 1:1 대조확인모드로 이행하면, 처리 프로세서(231)는 우선 사용자에 의한 ID코드의 입력을 접수한다(단계(S346)). 사용자에 의해 ID코드가 입력되면 처리 프로세서(231)는 사전(237)로부터 ID코드에 대응하는 등록얼굴 패턴을 검색하고 입력얼굴패턴과 ID코드에 대응하는 등록얼굴패턴의 대조확인도를 산출한다(단계(S347)).
입력얼굴패턴과 ID코드에 대응하는 등록얼굴패턴의 대조확인도를 산출하면, 처리 프로세서(231)는 산출한 대조확인도가 1:1 대조확인용 소정의 임계값 이상인지의 여부를 판단한다(단계(S348)). 여기에서 ID코드에 대응하는 등록얼굴패턴이 1:N대조확인모드이어도 대조확인대상이 되어 있었다면, 1:1 대조확인모드에서의 대조확인도의 산출방식 및 임계값이 1:N 대조확인모드와 동일해서는 대조확인결과가 동일하게 된다.
따라서, 예를 들어 1:1 대조확인용 임계값을 상기 1:N 대조확인용 임계값 보다 낮게 하거나 1:1 대조확인모드에서의 대조확인도의 산출방법을 1:N대조확인의 경우와는 다른 방법으로 실시하는 것으로 한다. 또한, 후술하도록 ID코드에 대응하는 등록얼굴패턴이 1:N 대조확인모드에서는 대조확인대상이 되지 않는 경우에는1:1대조확인모드에서의 대조확인도의 산출방법 및 임계값이 1:N 대조확인모드와 동일해도 좋다.
상기 단계(S348)에서 산출한 대조확인도가 1:1 대조확인용 소정의 임계값 이상이라고 판단하면, 처리 프로세서(231)는 사용자가 인증된 것으로 한다. 또한, 상기 단계(S348)에서 산출한 대조확인도가 1:1 대조확인용 소정의 임계값 이상이 아니라고 판단하면, 처리 프로세서(231)는 얼굴대조확인에 의한 사용자 인증이 실패한 것으로 하고, 얼굴 대조확인의 대체수단으로서의 패스워드에 의한 인증처리를 실시한다(단계(S349, S350)). 이에 의해, 처리 프로세서(231)는 패스워드에 의해 인증된 경우 사용자를 인증하고, 패스워드로 인증되지 않았던 경우 사용자가 인증할 수 없었던 것으로 판정한다.
상기와 같이 1:N대조확인모드를 우선하면서 지정키가 눌러진 경우 또는 1:N대조확인모드에서 대조확인이 실패한 경우에 1:1 대조확인모드 또는 그룹대조확인모드로 이행하여 대조확인처리를 실시하도록 한 것이다. 이에 의해, 복수의 대조확인모드를 혼재할 수 있고, 보안 레벨을 유지하면서 편리성을 향상시키는 것이 가능해진다.
또한, 상기 예에서는 1 대 N 대조확인모드를 우선시키면서, 1 대 1 대조확인 모드로 이행하는 것에 대해서 설명했지만, 1 대 N 대조확인모드를 우선시키면서 그룹 대조확인모드로 이행하는 것도 동일하게 실시하는 것이 가능하다. 이 경우, 1 대 N 대조확인용의 하나의 사전(상기 사전도 하나의 그룹대조확인용 사전이고, 디폴트 사전으로 간주한다)과, 복수의 그룹마다의 복수의 사전을 미리 등록해 둔다.
그리고, 각 그룹의 사용자에게는 그룹을 나타내는 ID코드(그룹코드)를 부여한다. 이에 의해, 그룹대조확인모드에서는 1:1 대조확인모드시에 사용자에게 부여되는 ID코드(사용자 모드) 대신 그룹마다 부여되는 ID코드(그룹코드)에 의해 사용자가 어떤 그룹인지를 특정하도록 한다.
또한, 그룹대조확인모드로 전환한 후, 대조확인에 실패한 경우에는 사용 패스워드이어도 좋지만, 동일한 그룹내에서 동일한 그룹패스워드의 일치 판정을 실시하도록 실시할 수 있다. 또한, 지정키를 그룹 ID와 대응시켜둠으로써 그룹 ID코드의 입력의 수고를 생략해도 좋다. 또한, 지정키로서는 전환하는 모드가 일의인 경우, 임의의 키이어도 좋다.
또한, 1:N 대조확인모드에서 대조확인처리를 실시하는 사용자와, 1:1 대조확인모드에서 대조확인처리를 실시하는 사용자를 나누어 관리하도록 해도 좋다. 이 경우, 1:N 대조확인용 사전과 1:1 대조확인용 사전을 설치하고 1:N대조확인용 사전에 1:N 대조확인모드에서 대조확인처리를 실시하는 사용자의 얼굴패턴을 등록해 두고, 또한 1:1 대조확인용 사전에 1:1 대조확인모드에서 대조확인처리를 실시하는 사용자의 얼굴패턴을 등록해 둔다.
이에 의해, 얼굴화상 대조확인장치는 1:N 대조확인모드에서 기동하고 1:N 대조확인모드에서 대조확인할 수 없었던 사용자에 대해서는 1:1 대조확인모드에서 대조확인처리를 실시하게 된다. 즉, 1:N대조확인모드에서 대조확인처리를 실시하는 사용자는 1:N 대조확인모드에서 대조확인되지만, 1:1대조확인모드에서 대조확인처리를 실시하는 사용자는 1:N 대조확인모드에서 대조확인이 실패했을 때, 또는 1:N대조확인모드의 실행중에 지정키를 눌렀을 때 1:1 대조확인모드에서 대조확인되도록 이루어진다.
예를 들어, 얼굴대조확인처리를 입퇴실 관리 시스템에 적용하는 경우, 관리자, 또는 일상적으로 이용하는 사용자를 1:N대조확인모드에서 대조확인처리를 실시하도록 하고, 입퇴실의 권한은 갖지만 일상적으로 이용하지 않는 사용자를 1:1대조확인모드에서 대조확인처리를 실시하도록 한다. 이에 의해, 관리자 또는 일상적으로 이용하는 사용자에 대해서는 키 등을 접촉하지 않고 소위 얼굴패스로 입퇴실을 실시할 수 있고, 또한 일상적으로 이용하지 않는 사용자에 대해서는 1:1 대조확인에 의한 고정밀도의 대조확인처리를 실시할 수 있게 된다.
다음에, 제 17 실시예에 대해서 설명한다.
상기 제 17 실시예에서는 각 사용자가 사용 가능한 퍼스널 컴퓨터 또는 휴대전화 등의 정보단말에서 얼굴화상대조확인장치에서 이용하는 사전으로 등록하는 얼굴화상이나 얼굴패턴을 작성하는 것을 특징으로 한다. 즉, 상기 제 17 실시예에서는 각 사용자가 자신의 얼굴화상을 인터넷 등을 통하여 원격지로부터 사전으로 등록하는 것에 특징이 있다.
도 77은 각 사용자가 인터넷 등의 네트워크를 통하여 얼굴화상을 사전으로 등록하기 위한 얼굴화상 등록시스템(60)의 구성예를 나타낸 도면이다.
도 77에 나타낸 바와 같이, 얼굴화상 등록시스템(60)은 각 등록자(사용자)가 이용 가능한 복수의 정보단말(퍼스널 컴퓨터, PC1, PC2, PC3, …)(261), …, 등록서버(262), 보수용 PC(244) 및 얼굴화상 대조확인장치(230)로 구성되어 있다.
상기 정보단말(261)은 사용자에게 조작 안내 등을 표시하는 디스플레이(261a), 사용자에 의한 조작을 접수하는 조작부(261b) 및 사용자의 얼굴화상을 촬영하는 카메라(261c)를 구비하고, 인터넷에 접속하는 기능 및 후술하는 사전작성 프로그램이 동작하는 것이면 좋다.
이하의 설명에서는 정보단말(261)이 자택이나 오피스의 책상 등에 설치된 카메라 부착 퍼스널 컴퓨터인 것으로서 설명하지만, 카메라와 인터넷 접속기능을 갖는 것이면 휴대용 퍼스널 컴퓨터, 휴대전화 또는 휴대단말 등의 정보단말이어도 좋다.
또한, 카메라 부착 퍼스널 컴퓨터나 휴대정보기기는 사용자가 소유하는 것이 아니라, 사전 작성용으로 렌탈된 것이어도 좋다. 예를 들어, 퍼스널 컴퓨터에 접속 가능한 카메라 등으로 이루어진 얼굴화상 수집 시스템 일식을 렌탈하는 경우도 있을 수 있다.
또한, 얼굴화상을 촬영하기 위한 카메라(261c)는 피촬영 화상과의 상대적인 거리, 높이 및 방향 등은 실제 장치에서의 것과 가능한 동일하게 설정하고, 얼굴화상 대조확인장치의 운용시에 촬영하는 얼굴화상과 가능한 기하학적 관계가 동등해지도록 매뉴얼 등으로 사용자에 지도하는 것으로 한다.
상기 등록서버(262)는 WWW(World Wide Web) 서버 또는 FTP(File Trasfer Protocol) 서버 등의 서버 컴퓨터이다. 상기 등록서버(262)는 인터넷을 통하여 전송되는 얼굴화상 및 얼굴패턴 등의 얼굴 데이터를 기억하는 기억부를 구비하고 있다. 상기 보수용 PC(244)는 예를 들어 도 72에 나타낸 보수용 PC(244)와 동일하게구성되고, 상기 등록서버(262)에 기억된 얼굴 데이터로부터 사전을 작성하고 편집하는 것이다.
또한, 상기 퍼스널 컴퓨터(261)와 등록 서버(262)의 데이터 통신시, 보안성을 보다 높게 하기 위해 PKI(Public Key Infrastructure)를 병용하거나 전용의 회선을 이용하도록 해도 좋다.
다음에, 상기와 같이 구성되는 얼굴화상 등록시스템에서의 동작에 대해서 설명한다.
도 78은 얼굴화상 등록시스템의 동작예를 설명하기 위한 플로우차트이다. 우선, 사용자는 등록서버(262)로부터 얼굴데이터의 초기등록, 대조확인 및 갱신을 실시하는 프로그램(이하, 사전작성 프로그램이라 함)을 자신의 퍼스널 컴퓨터(261)에 다운로드한다(단계(S361)). 이 때, 사용자는 자신의 퍼스널 컴퓨터(261)에서 WWW 브라우저를 기동하고, WWW 브라우저를 통하여 상기 등록서버(262)에 의해 WWW상에 공개되는 상기 사전작성 프로그램을 다운로드하도록 이루어져 있다.
또한, 여기에서는 프로그램의 송부 및 인스톨을 인터넷을 통하여 사용자의 퍼스널 컴퓨터에 송신하도록 했지만, 물리적으로 CD등의 기록매체에 저장하고, 각 등록자에 송부되도록 해도 좋다.
상기 사전작성 프로그램을 다운로드할 때, 사용자의 퍼스널 컴퓨터(261)의 디스플레이(261a)에는 도 79에 나타낸 바와 같은 WWW 브라우저의 화면이 표시된다. 상기 화면에서는 ID번호(ID코드), 성명, 연령, 성별, 신장, 안경의 유무, 패스워드 및 기타 등의 사용자 정보를 사용자가 입력되도록 이루어져 있다.
또한, 이하의 설명에서는 하나의 얼굴 패턴을 등록하는 것으로서 설명하지만, 상기 제 13 실시예와 같이 예를 들어 안경 유/무를 선택함으로써 사용자의 얼굴패턴을 복수 등록하도록 해도 좋다. 이 경우, 상기 제 13 실시예와 동일한 방법에 의해 멀티엔트리 사전으로서 사용자 사전을 작성한다. 또한, 상기 ID코드는 등록서버(262)가 제공하는 것이어도 좋고, 사용자가 임의의 ID코드를 입력하여 사용자가 입력한 ID코드를 등록서버(262)가 승인되도록 해도 좋다.
상기와 같은 사용자 정보를 입력한 후에, 사용자가 프로그램의 다운로드를 지시하는 키(271)를 선택함으로써 사전작성 프로그램이 다운로드되도록 이루어져 있다. 또한, 상기와 같은 사용자 정보의 입력은 사용자의 퍼스널 컴퓨터에서 작성한 사전을 업로드할 때에만 실시하도록 해도 좋다.
상기 사전작성 프로그램을 다운로드하면, 사용자는 퍼스널 컴퓨터(261)에서 상기 사전작성 프로그램을 기동시켜 사용자의 얼굴 데이터(사용자 사전)를 작성한다(단계(S362)). 상기 사전작성 프로그램이 기동하면 퍼스널 컴퓨터(261)는 예를 들어 도 80에 나타낸 바와 같은 메뉴 화면의 키 선택에 의한 사용자와의 대화형식으로 여러가지 처리를 실행한다.
즉, 퍼스널 컴퓨터(261)의 제어부는 초기 사전의 등록처리(단계(S363)), 대조확인처리의 시행(단계(S364)), 사전의 변경처리(단계(S365))를 실시하여 일정기간내에 등록서버(262)로 등록하기 위한 사용자의 얼굴 데이터(사용자 사전)를 작성한다.
상기 사전작성 프로그램에서는 일정기간 내에서 얼굴대조확인을 반복 실시하고, 그 대조확인결과에 기초하여 사전의 갱신을 반복한다. 이것은 대조확인처리를 반복 실시하여 사전의 갱신을 반복함으로써 안정된 대조확인이 가능한 대조확인용 얼굴 데이터가 생성되기 때문이다.. 따라서, 사용자가 안정된 대조확인을 실시할 수 있게 되었다고 판단하면, 도 80에 나타낸 바와 같은 사용자 사전의 작성을 종료하는 키(284)를 누름으로써 사용자 사전의 작성을 완료시킨다.
또한, 사용자 사전이 안정된 대조확인이 가능한지의 여부는 사전작성 프로그램에 기초하여 퍼스널 컴퓨터(261)의 제어부에서의 판정하도록 해도 좋다. 이 경우, 사용자 사전에 대해서 안정된 대조확인이 가능한지의 여부를 판단하는 기준으로서는 일정 기간 이상, 일정 빈도로 계속하여 시행하는 것을 전제로 하고, 대조확인실패율(얼굴대조확인의 실패횟수/시행횟수)가 일정값 이하가 되었는지의 여부를 판단하도록 한다. 또한, 대조확인도가 일정값 이상이 되고, 그것이 소정기간(또는 소정횟수) 계속되었는지 여부에 의해 사용자 사전의 안정성을 판단하도록 해도 좋다.
사용자 사전의 작성이 완료되면 사용자는 도 79에 나타낸 바와 같이 화면에서 사용자 사전의 업로드를 지시하는 키(272)를 누른다. 이에 의해 퍼스널 컴퓨터(261)의 제어부는 WWW 브라우저를 통하여 작성한 사용자 사전을 상기 등록서버(262)로 업로드한다(단계(S366)). 또한, 사용자 사전의 작성이 완료된 시점에서, 사용자에 의한 지시가 없어도 퍼스널 컴퓨터(261)의 제어부가 사전작성 프로그램에 기초하여 사용자 사전의 업로드를 실시하도록 해도 좋다.
상기 등록서버(262)에서는 퍼스널 컴퓨터로부터 업로드된 사용자 사전을, 그사용자 정보와 함께 사전 파일로서 기억부에 축적한다. 이에 의해 등록서버(262)에는 각 사용자로부터의 얼굴 데이터와 사용자 정보로 이루어진 사전 파일이 기억부에 축적된다. 등록 서버(262)에서는 기억부에 축적한 각 사전 파일을 통합하여 사전을 생성한다. 모든 사용자로부터의 사용자 사전을 통합한 사전을 생성했을 때, 등록 서버(262)는 최종의 사전을 LAN을 통하여 보수용 PC(244)에 보낸다. 상기 보수용 PC(244)는 도 72의 보수용 PC(244)와 동일한 구성을 갖는 것이다.
여기에서는 모든 사용자의 사전을 수집할 수 있었던 시점에서 일괄하여 보수용 퍼스널 컴퓨터에 전송하도록 했지만, 사용자의 일부가 경시적, 경년적으로 변화하는 경우, 그 때마다 보수용 퍼스널 컴퓨터에 추가하여 퍼스널 컴퓨터 상에서 사전 편집을 실시하도록 하면 좋다.
다음에, 사전작성 프로그램에 의한 사용자 사전의 작성처리에 대해서 상세하게 설명한다.
도 81은 사용자의 퍼스널 컴퓨터(261)에 의한 사용자 사전의 작성처리를 설명하기 위한 플로우차트이다. 도 81에 나타낸 바와 같이, 퍼스널 컴퓨터(261)에 사전 작성 프로그램을 다운로드한 후, 사용자는 사전작성 프로그램을 기동시킨다. 상기 사전 작성 프로그램에서는 사용자의 얼굴 데이터의 초기등록을 실시하는 초기등록 프로그램 얼굴 대조확인의 시행을 실시하는 얼굴대조확인 프로그램, 사전의 갱신을 실시하는 사전갱신 프로그램 등이 포함되어 있고, 사용자의 선택에 따라서 각 프로그램이 기동하도록 이루어져 있다.
상기 사전작성 프로그램이 기동하면, 퍼스널 컴퓨터(261)의디스플레이(261a)에는, 예를 들어 도 80에 나타낸 바와 같은 메뉴 화면이 표시된다(단계(S373)). 상기 메뉴화면에서는 사전의 초기등록을 지정하는 키(81), 얼굴대조확인의 시행을 지정하는 키(282), 사전의 갱신을 지정하는 키(283) 및 사용자 사전의 작성종료를 지정하는 키(284) 등이 표시되어 있다.
예를 들어 상기와 같은 메뉴가 화면에서 사용자가 사전의 초기등록을 지시하는 키(281)를 선택하면, 퍼스널 컴퓨터(261)의 제어부는 사용자 사전으로의 얼굴패턴의 초기등록 프로그램을 기동시킨다(단계(S374)). 초기등록 프로그램이 기동하면, 퍼스널 컴퓨터(261)의 제어부는 사용자의 얼굴 데이터의 사용자 사전으로의 초기등록처리를 실시한다(단계(S375)). 상기 초기등록처리는 퍼스널 컴퓨터(261)의 제어부의 제어에 기초하여 실시된다. 즉, 초기등록처리에서는 카메라(261c)에서 사용자의 얼굴화상을 촬영하고, 상기 촬영한 얼굴화상으로부터 얼굴패턴을 생성하고, 퍼스널 컴퓨터(261)내의 기억부에 사용자 사전을 작성하여 등록하는 것이다. 상기 초기등록처리는 도 61에 나타낸 등록처리와 동일하므로, 상세한 설명은 생략한다.
또한, 초기등록처리는 사전작성 프로그램의 최초로 실시해야 할 처리이므로, 다운로드할 사전작성 프로그램을 최초로 기동시켰을 때 자동적으로 초기등록 프로그램이 기동하도록 해도 좋다. 이 경우, 초기등록이 완료되지 않으면 메뉴 화면이 표시되지 않고, 다른 처리가 이루어지지 않도록 하면 좋다. 예를 들어, 도 81에 나타낸 바와 같이 초기등록종료가 완료되어 있으면(단계(S371), 아니오), 초기등록의 안내를 표시하고(단계(S372)), 사용자 사전의 초기등록을 실시하도록 한다.
상기 메뉴화면으로부터 사용자가 얼굴대조확인의 시행을 지정하는 키(282)를 선택하면 퍼스널 컴퓨터(261)의 제어부는 얼굴대조확인 프로그램을 기동시킨다(단계(S376)). 상기 얼굴대조확인 프로그램이 기동하면, 퍼스널 컴퓨터(261)의 제어부는 기억부내에 기억하고 있는 사용자 사전의 얼굴대조확인 처리를 실시한다(단계(S377)). 상기 얼굴 대조확인 처리는 퍼스널 컴퓨터(261)의 제어부의 제어에 기초하여 실시된다. 즉, 얼굴 대조확인 처리에서는 카메라(261c)에서 사용자의 얼굴화상을 촬영하고, 상기 촬영한 얼굴화상으로부터 얼굴 패턴을 생성하고, 촬영한 얼굴화상으로부터 생성된 얼굴패턴과 패턴내의 기억부에 등록되어 있는 사용자 사전의 얼굴패턴의 대조확인도를 판정하는 것이다. 상기 얼굴대조확인처리는 도 62에 나타낸 대조확인처리로부터 단계(S221)의 ID코드입력을 생략한 것과 동일하므로 상세한 설명은 생략한다.
또한, 얼굴대조확인처리를 실시했을 때, 대조확인결과에 기초하여 안내표시를 실시해도 좋다. 즉, 얼굴대조확인처리는 일정기간내에서 안정된 대조확인결과가 얻어지는 사용자 사전을 작성하기 위해 반복하여 실시되므로, 대조확인결과에 기초하여 사전의 갱신 또는 사용자 사전의 작성종료를 안내하도록 한다.
예를 들어, 도 81에 나타낸 바와 같이 얼굴대조확인처리를 실시할 때마다, 사용자 사전의 안정성을 판단하고(단계(S378)), 사용자 사전이 안정될 때까지 사용자 사전의 갱신안내를 표시하고(단계(S379)), 사용자 사전이 안정되면 사용자 사전의 작성종료를 안내한다(단계(S380)). 또한, 사용자 사전의 안정성은 상술한 바와 같이 대조확인 실패율(얼굴 대조확인의 실패횟수/시행횟수), 또는 소정값 이상의대조확인도의 계속성에 기초하여 판단된다.
상기 메뉴화면에서 사용자가 사전의 갱신을 지시하는 키(283)를 선택하면, 퍼스널 컴퓨터(261)의 제어부는 사전 갱신 프로그램을 기동시킨다(단계(S381)). 상기 사전갱신 프로그램이 기동되면, 퍼스널 컴퓨터(261)의 제어부는 기억부내에 기억되어 있는 사용자 사전의 갱신처리를 실시한다(단계(S382)). 상기 사전갱신처리는 퍼스널 컴퓨터(261)의 제어부의 제어에 기초하여 실시된다.
예를 들어, 대조확인처리의 결과가 대조확인실패한 경우에, 퍼스널 컴퓨터(261)의 제어부는 디스플레이(261a)에 사전 갱신을 재촉하는 취지의 메세지를 표시한다. 상기 메세지를 보고 사용자는 사전의 갱신을 실시할지의 여부를 판단한다. 사용자가 사전의 갱신을 실시한다고 판단한 경우, 사용자는 사용갱신의 개시를 지시하는 키(283)를 누른다. 이에 의해, 퍼스널 컴퓨터(261)의 제어부는 사전갱신 프로그램이 기동된다.
또한, 대조확인이 실패했을 때 사전갱신 메세지를 표시하는 대신, 자동적으로 사전갱신을 실행시키도록 실시할 수도 있다. 이 경우, 대조확인결과에 기초하여 사전갱신 프로그램을 기동시키는 기능을 얼굴대조확인 프로그램에 편성한다. 이에 의해, 사용자가 아무것도 하지 않아도 대조확인결과에 기초하여 사전이 갱신된다.
사전갱신처리에서는 상기 얼굴대조확인처리의 결과에 기초하여 사용자가 사용자 사전에 등록하고 있는 사전을 갱신하는 것으로 판단한 경우에 대조확인처리시에 촬영한 얼굴화상으로부터 생성한 얼굴패턴에 기초하여 사전을 갱신하는 것이다.상기 사전의 갱신처리는 예를 들어 상기 제 13 실시예의 다른 예에서 설명한 갱신방법이 사용된다. 따라서, 사전의 갱신처리에 대해서 도 71의 단계(S297)에서 설명한 갱신처리와 동일하므로, 상세한 설명은 생략한다.
상기 메뉴화면에서 사용자가 사전작성의 종료를 지시하는 키(284)를 선택하면, 퍼스널 컴퓨터(261)의 제어부는 사용자 사전의 작성을 종료하고, 사용자 사전의 작성종료안내나 사용자 사전의 등록서버(262)의 업로드의 안내를 표시한다(단계(S383)). 이와 같은 안내에 따라서 사용자는 작성한 사용자 사전의 업로드를 실시하도록 이루어져 있다.
또한, 도 81에 나타낸 바와 같은 동작에서는 사전등록, 대조확인, 사전갱신 및 사전의 업로드 등의 모든 기능이 통합된 사전작성 프로그램의 동작에 대해서 설명하고 있지만, 대조확인 프로그램 및 사전갱신 프로그램을 절리하여, 예를 들어 스크린 세이버의 잠금 해제 등의 응용 프로그램으로서 실현하도록 해도 좋다. 이에 의하면, 대조확인처리를 시행하는 사용자의 수고를 덜고 일정한 빈도로 대조확인처리를 시행하는 것이 용이해진다.
또한, 사용자 사전는 정보단말(261) 또는 등록서버(262)에 접속되는 네트워크상의 어디에 설치해도 좋다. 즉, 정보단말(261)에서 사용자의 얼굴화상의 수집처리를 실시하고, 등록서버(262)에서는 각 사용자 사전의 통합 및 편집을 실시하는 것이면 대조확인이나 사전의 갱신 등의 처리는 네트워크 상의 어떤 장치가 실시하도록 해도 좋다. 따라서, 사서등록 시스템의 구성은 네트워크를 구성하는 각 기기의 처리능력, 또는 네트워크 회선의 통신능력 등에 기초하여 통합적으로 설계되는것이 바람직하다.
예를 들어, 정보단말(261)로서 휴대전화와 같은 처리능력이 낮은 것을 사용하는 경우, 사용자 사전과의 대조확인, 사용자 사전의 갱신, 등록 서버로의 사용자 사전의 업로드 등의 처리를 휴대전화에서 실시하는 것으로 하면, 휴대전화에 큰 부하가 걸린다. 이 때문에, 휴대전화가 얼굴화상의 수집만을 실시하고, 화상압축처리를 부가하여 등록서버(262)에 화상을 전송하고, 이후 처리는 등록서버(262)측에서 실시하도록 해도 좋다.
이 경우, 사용자 사전는 항상 등록서버(262)측에 놓여진다. 휴대전화에는 얼굴화상의 수집 프로그램이 등록서버(262)로부터 다운로드된다. 얼굴화상의 수집 프로그램을 다운로드한 휴대전화측에서는 사용자의 얼굴화상을 수집할 때마다, 얼굴화상만을 등록서버(262)에 송신한다. 휴대전화로부터 얼굴화상이 송신되면 등록서버(262)는 사용자 사전과의 대조확인처리를 실시하고, 대조확인결과 등의 메세지만을 휴대전화로 반송한다. 이 경우, 사전의 갱신처리는 등록서버(262)를 실시한다. 상기 결과, 휴대전화에서의 대조확인처리 및 등록서버(262)로의 사용자 사전의 업로드 처리도 생략된다. 이와 같은 처리를 실시함으로써 휴대전화 등의 처리능력이 낮은 정보단말이어도 사용자 사전의 작성 및 등록 등의 처리를 효율적으로 실시할 수 있다.
상기와 같이 각 사용자의 사용자 사전을 작성하기 위한 프로그램을 공급하고, 각 사용자가 작성된 사용자 사전에 기초하여 얼굴화상 대조확인장치에 사용하는 사전을 작성하도록 한 것이다. 이에 의해, 등록자수가 다수인 경우에도 효율적이고 저비용으로 사전대조확인을 실시할 수 있다. 또한, 장치를 설치하기 이전에 사전등록이 완료되고 있으므로 곧 운용개시를 실시할 수 있다.
또한, 각 사용자가 작성한 사용자 사전을 네트워크를 통하여 수집하고, 각 사용자로부터의 사용자 사전을 등록용 서버에서 통합하고, 보수 PC등을 통하여 얼굴화상 대조확인장치에서 이용하는 사전으로서 등록하도록 한 것이다. 이에 의해, 얼굴화상 대조확인장치의 관리자측 또는 운용자측에서는 사전의 등록에 수고가 들지 않고 효율적인 사전의 작성이 가능해진다.
또한, 상기 제 12∼제 17 실시예는 각각이 독립된 기능 및 효과도 갖지만, 서로 조합하여 실시 가능한 것은 물론이다.
이상 설명한 바와 같이 상기 제 12∼제 17 실시예에 의하면 사용자에게 부담이 매우 작고 편리성이 높다는 얼굴대조확인에 의한 인증처리의 장점을 손상시키지 않고 대조확인성능 및 보안 레벨을 향상시키고 편리성을 한층 향상시키는 것이 가능한 얼굴화상 대조확인장치 및 얼굴화상 대조확인 시스템을 제공할 수 있다.
본 발명과 관련되는 기술분야에서 익숙한 경우 본 발명의 범위 내에서 변형시키는 것도 가능하다. 그러므로, 상세한 본 발명에 대한 세부적인 설명과 실시예에만 본 발명이 제한되지 않고, 본 발명의 범위 내에서 여러 형태로 변형 가능하다.
상기한 바와 같이 본 발명에 의하면 피인증자에게 부담을 주지 않고 피인증자의 사전 데이터의 등록 또는 갱신할 수 있고, 도입시에 사전 데이터의 기초등록등의 번잡함을 피인증자에게 느끼지 않게 하는 개인인식장치 및 개인인증방법을 제공할 수 있으며, 피인증자가 안심하고, 또한 확신을 갖고 자동사전갱신 기능을 사용할 수 있는 개인인식장치 및 개인인증방법을 제공할 수 있고,
인물에 대한 조명의 각도나 얼굴화상의 크기의 차이 등에 의한 인물인식율의 저하를 감소시킬 수 있고, 고정밀도의 인식이 가능해지는 개인인식장치 및 통행제어장치를 제공할 수 있으며, 인식시의 자세나 서 있는 자세, 얼굴의 방향 등에 구속되지 않고 안정된 고정밀도의 인식을 실시하는 것도 가능해지고, 인물 인식율의 향상을 도모할 수 있는 개인인식장치 및 통행제어장치를 제공할 수 있고,
화상 입력부로서의 카메라의 시야범위에 인물의 얼굴이 찍힌 포스터 등이 있어도 오검출, 오동작하기 어려운 개인인식장치 및 통행제어장치를 제공할 수 있으며,
사용자에게 부담이 매우 작고 편리성이 높다는 얼굴대조확인에 의한 인증처리의 장점을 손상시키지 않고 대조확인성능 및 보안레벨을 향상시키고 편리성을 한층 향상시키는 것이 가능한 얼굴화상 대조확인장치 및 얼굴화상 대조확인 시스템을 제공할 수 있다.

Claims (73)

  1. 인증 데이터를 취득하는 인증 데이터 입력부와, 인증용 사전 데이터가 기억되는 사전 기억부를 구비하고, 상기 인증 데이터 입력부에 의해 피인증자로부터 취득한 인증 데이터와 상기 사전 기억부에 기억되어 있는 사전 데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 개인인식장치에 있어서,
    상기 인증 데이터 입력부에 의해 취득한 인증 데이터를 기초로 인증용 신규 사전 데이터를 작성하는 사전 작성부,
    상기 사전 작성부에 의해 상기 사전 데이터를 작성한 후, 다시 상기 인증 데이터 입력부에 의해 인증 데이터를 취득하고, 상기 인증 데이터 입력부로부터 다시 취득한 인증 데이터와 상기 사전 작성부에 의해 작성된 상기 사전 데이터를 대조확인하는 인증부, 및
    상기 인증부에 의한 대조확인이 성공한 경우, 상기 사전 작성부에 의해 상기 사전 데이터를 작성한 후 상기 인증 데이터 입력부에 의해 취득한 인증 데이터를 사용하여 상기 사전 데이터를 갱신하는 사전 갱신부를 구비하는 것을 특징으로 하는 개인인식장치.
  2. 제 1 항에 있어서,
    상기 인증부에 의한 대조확인이 실패한 경우, 다시 상기 인증 데이터 입력부에 의해 상기 피인증자로부터 인증 데이터를 취득하고, 상기 인증부에 의한 대조확인처리를 실시하는 것을 특징으로 하는 개인인식장치.
  3. 제 1 항에 있어서,
    상기 인증 데이터 입력부에 의해 취득한 인증 데이터를 피인증자에 대해서 표시하는 표시부,
    상기 표시부에 표시된 인증 데이터에 기초하여 상기 피인증자의 사전 데이터의 작성을 실시할지의 여부를 선택하는 선택부를 구비하고,
    상기 사전 작성부는 상기 선택부에 의해 상기 사전 데이터의 작성이 선택된 경우에 상기 표시부에 표시된 인증 데이터에 기초하는 신규 사전 데이터를 작성하는 것을 특징으로 하는 개인인식장치.
  4. 인증 데이터를 취득하는 인증 데이터 입력부, 인증용 사전 데이터가 기억되는 사전 기억부, 및 상기 인증 데이터 입력부에 의해 피인증자로부터 취득한 인증 데이터와 상기 사전 기억부에 기억되어 있는 사전 데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 인증부를 구비한 개인인식장치에 있어서,
    상기 인증부에 의해 피인증자가 인증된 경우, 상기 사전 기억부에 기억되어 있는 사전 데이터를 갱신할지의 여부를 판정하는 판정부,
    상기 판정부에 의해 갱신되어야 할 것으로 판정된 상기 사전 데이터를 상기 인증 데이터 입력부에 의해 취득된 인증 데이터에 기초하여 갱신하는 사전 갱신부,
    상기 사전 갱신부에 의해 갱신된 상기 사전 데이터 내용을 나타내는 사전갱신이력을 기억하는 사전갱신이력 기억부, 및
    상기 인증부에 의해 피인증자가 인증된 경우, 당해 인증결과 및 상기 사전갱신이력 기억부에 기억되어 있는 최종 사전갱신시의 사전갱신이력을 표시하는 표시부를 구비한 것을 특징으로 하는 개인인식장치.
  5. 제 4 항에 있어서,
    상기 사전갱신부에 의해 사전 데이터가 갱신된 당해 피인증자의 적어도 얼굴화상을 취득하는 화상입력부를 구비하고,
    상기 사전갱신이력 기억부는 상기 화상입력부에 의해 취득된, 사전 데이터가 갱신된 피인증자의 얼굴화상을 포함하는 사전갱신이력을 기억하는 것을 특징으로 하는 개인인식장치.
  6. 제 5 항에 있어서,
    상기 사전갱신이력은 사전데이터가 갱신된 피인증자의 얼굴화상, 상기 사전 데이터의 갱신일시를 나타내는 정보, 및 상기 사전 데이터 갱신위치를 나타내는 정보를 포함하는 것을 특징으로 하는 개인인식장치.
  7. 제 5 항에 있어서,
    상기 표시부는 상기 화상입력부에 의해 취득된 당해 피인증자의 얼굴화상을 포함하는 당해 인증결과, 및 상기 사전갱신이력 기억부에 기억되어 있고 미리 설정되어 있는 그룹에 속하는 인물의 얼굴화상을 포함하는 사전갱신이력을 표시하는 것을 특징으로 하는 개인인식장치.
  8. 제 4 항에 있어서,
    상기 사전갱신이력 기억부는 피인증자가 소지하는 휴대형 정보기억매체에 상기 갱신이력을 기억하는 것을 특징으로 하는 개인인식장치.
  9. 제 8 항에 있어서,
    상기 선택부에 의해 상기 사전 데이터의 갱신을 선택한 인물이 상기 인증부에 의해 인증된 피인증자인지의 여부를 확인하는 확인부를 구비하고,
    상기 사전 갱신부는 상기 선택부에 의해 상기 사전 데이터의 갱신을 선택한 인물이 상기 인증부에 의해 인증된 피인증자인 것이 상기 확인부에 의해 확인된 경우에, 상기 사전 데이터의 갱신을 실시하는 것을 특징으로 하는 개인인식장치.
  10. 제 4 항에 있어서,
    상기 인증부에 의해 상기 피인증자가 인증되지 않은 경우에 상기 인증 데이터와는 다른 제 2 인증 데이터를 당해 피인증자로부터 취득하는 제 2 인증 데이터 입력부, 및
    상기 제 2 인증 데이터 입력부에 의해 취득한 상기 제 2 인증 데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 제 2 인증부를 구비하고,
    상기 사전 갱신부는 상기 제 2 인증부에 의해 상기 피인증자가 인증되고, 상기 피인증자가 상기 제 2 인증부에서 인증된 횟수가 미리 설정되는 소정값 이상인 경우, 상기 인증 데이터 입력부에 의해 입력된 인증 데이터에 기초하여 상기 사전 기억부에 기억되어 있는 상기 피인증자의 사전 데이터를 갱신하는 것을 특징으로 하는 개인인식장치.
  11. 인증 데이터를 취득하는 인증 데이터 입력부와, 인증용 사전 데이터가 기억되는 사전 기억부, 및 상기 인증 데이터 입력부에 의해 피인증자로부터 취득한 인증 데이터와 상기 사전 기억부에 기억되어 있는 상기 사전 데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 인증부를 구비한 개인인식장치에 사용되는 인증용 사전 데이터의 작성방법에 있어서,
    상기 인증 데이터 입력부에 의해 취득한 인증 데이터를 기초로 인증용 신규 사전 데이터를 작성하는 단계,
    상기 사전 데이터를 작성한 후, 다시 상기 인증 데이터 입력부에 의해 인증 데이터를 취득하고, 상기 인증 데이터 입력부로부터 취득한 인증 데이터와 상기 작성된 상기 사전 데이터를 대조확인하는 단계, 및
    상기 대조확인이 성공한 경우, 상기 사전 데이터를 작성한 후에 상기 인증 데이터 입력부에 의해 취득한 상기 인증 데이터를 사용하여 상기 사전 데이터를 갱신하는 단계를 구비하는 것을 특징으로 하는 인증용 사전 데이터의 작성방법.
  12. 인증 데이터를 취득하는 인증 데이터 입력부, 인증용 사전 데이터가 기억되는 사전 기억부, 및 상기 인증 데이터 입력부에 의해 피인증자로부터 취득한 인증 데이터와 상기 사전 기억부에 기억되어 있는 사전 데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 인증부를 구비하는 개인인식장치에 사용되는 인증용 사전 데이터의 갱신방법에 있어서,
    상기 인증부에 의해 피인증자가 인증되는 경우, 상기 사전 기억부에 기억되어 있는 사전 데이터를 갱신할 것인지의 여부를 판정하는 단계,
    상기 판정에 의해 갱신해야할 것으로 판정받은 상기 사전 데이터를 상기 인증 데이터 입력부에 의해 취득한 상기 인증 데이터에 기초하여 갱신하는 단계,
    상기 사전 데이터의 갱신 내용을 나타내는 사전갱신이력을 기억장치에 기억하는 단계, 및
    상기 인증부에 의해 피인증자가 인증되는 경우, 상기 인증결과 및 상기 기억장치에 기억되어 있는 최종 사전 갱신시의 사전갱신이력을 표시부에 표시하는 단계를 구비하는 것을 특징으로 하는 개인인식장치에 사용되는 인증용 사전 데이터의 갱신방법.
  13. 제 12 항에 있어서,
    상기 인증부에 의해 상기 피인증자가 인증되지 않은 경우에 상기 인증 데이터와는 다른 제 2 인증 데이터를 상기 피인증자로부터 취득하는 단계, 및
    상기 피인증자로부터 취득한 상기 제 2 인증 데이터에 기초하여 상기 피인증자에 대한 인증처리를 실시하는 단계를 구비하고,
    상기 사전 데이터를 갱신하는 단계는 상기 제 2 인증 데이터에 의해 상기 피인증자가 인증되고, 상기 피인증자가 상기 제 2 인증 데이터에 의해 인증된 횟수가 미리 설정되는 소정값 이상인 경우, 상기 인증 데이터에 기초하여 상기 사전 기억부에 기억되어 있는 당해 피인증자의 사전 데이터를 갱신하는 단계를 구비하는 것을 특징으로 하는 개인인식장치에 사용되는 인증용 사전 데이터의 갱신방법.
  14. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 입력하는 화상 입력부,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴영역을 검출하는 얼굴 검출부,
    상기 얼굴 검출부에 의한 검출결과에 기초하여 상기 인물의 얼굴의 특징량을추출하는 특징량 추출부,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량을 상기 인물의 등록정보로서 유지하는 등록정보 유지부,
    상기 화상 입력부에 의해 인식대상의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 인식부, 및
    상기 인식부에 의해 인식처리를 실시하는 경우, 상기 인식대상의 화상에서의 얼굴의 상태를 나타낸 정보와, 상기 등록정보 유지부에 유지되어 있고 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에 표시하는 표시부를 구비하는 것을 특징으로 하는 개인인식장치.
  15. 제 14 항에 있어서,
    상기 표시부는 상기 화상입력부에 의해 입력되는 상기 인식대상의 화상도 동일 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  16. 제 14 항에 있어서,
    상기 표시부는 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 크기 및 위치를 나타내는 정보와, 상기 인식대상의 화상에서의 얼굴의 크기 및 위치를 나타내는 정보를 각각 다른 종류의 선의 틀로 동일 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  17. 제 14 항에 있어서,
    상기 표시부는 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 크기 및 위치를 나타낸 정보와, 상기 인식대상의 화상에서의 얼굴의 크기 및 위치를 나타낸 정보를, 각각 다른 종류의 선 중 적어도 1 이상의 직선 또는 곡선으로 동일한 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  18. 제 14 항에 있어서,
    상기 표시부는 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 크기 및 위치에만 상기 화상입력부에서 입력된 화상을 표시하고, 또한 상기 인식대상의 화상에서의 얼굴의 크기 및 위치를 나타낸 정보를 동일 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  19. 제 14 항에 있어서,
    상기 표시부는 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 크기 및 위치에만 상기 화상 입력부에서 입력된 화상을 표시하고, 또한 상기 인식대상의 화상에서의 얼굴의 크기 및 위치를 나타내는 정보를 적어도 하나 이상의 직선 또는 곡선으로 동일 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  20. 제 14 항에 있어서,
    상기 표시부는 또한 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 방향을 나타내는 정보와, 상기 인식대상의 화상에서의 얼굴의 방향을 나타내는 정보를 동일 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  21. 제 14 항에 있어서,
    상기 표시부는 또한 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 방향을 나타내는 정보와, 상기 인식대상의 화상에서의 얼굴의 방향을나타내는 정보를 얼굴이 향하고 있는 방향으로 볼록이 되는 곡선으로 동일 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  22. 제 14 항에 있어서,
    상기 표시부는 또한 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 크기 및 얼굴 중심위치를 나타내는 정보와, 상기 인식대상의 화상에서의 얼굴의 크기 및 얼굴의 중심위치를 나타내는 정보를 동일 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  23. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 입력하는 화상 입력부,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴영역을 검출하는 얼굴 검출부,
    상기 얼굴 검출부에 의한 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 특징량 추출부,
    상기 화상입력부에 의해 등록대상의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량을 상기 인물의 등록정보로서 유지하는 등록정보 유지부,
    상기 화상 입력부에 의해 인식대상의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 인식부, 및
    상기 화상입력부에 의해 등록대상의 화상이 입력되는 경우, 상기 등록대상의 화상을 어떠한 상태에서 입력하면 좋을지를 나타내는 안내정보와, 상기 화상입력부에서 입력되는 화상에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에 표시하는 표시부를 구비한 것을 특징으로 하는 개인인식장치.
  24. 제 23 항에 있어서,
    상기 표시부는 상기 화상 입력부에 의해 등록대상의 화상이 입력되는 경우, 상기 등록대상의 화상으로서 바람직한 얼굴의 위치 및 크기를 나타내는 제 1 원 패턴과, 상기 화상 입력부에서 입력되는 화상에서의 얼굴의 위치 및 크기를 나타내는 제 2 원 패턴을 동일한 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  25. 제 23 항에 있어서,
    상기 표시부는 상기 화상 입력부에 의해 등록대상의 화상이 입력되는 경우, 상기 등록대상의 화상으로서 바람직한 얼굴의 방향을 나타내는 패턴과, 상기 화상 입력부에서 입력되는 화상을 동일한 화면상에 표시하는 것을 특징으로 하는 개인인식장치.
  26. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    인물 중 적어도 얼굴을 포함하는 화상을 입력하는 화상입력부,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴 영역을 검출하는 얼굴 검출부,
    상기 얼굴 검출부에 의한 검출결과에 기초하여 상기 인물의 얼굴 특징량을 추출하는 특징량 추출부,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량을 상기 인물의 등록정보로서 유지하는 등록정보 유지부,
    상기 화상 입력부에 의해 연속적으로 화상을 입력하고 상기 얼굴 검출부에 의해 검출되는 얼굴의 영역의 시간적 변화에 기초하여 피인증자가 존재하는지의 여부를 판정하는 판정부, 및
    상기 판정부에 의해 피인증자가 존재하는 것으로 판정한 경우, 상기 화상 입력부에 의해 입력되는 화상으로부터 상기 특징량 추출부에 의해 추출된 특징량과 상기 등록 정보 유지부에 의해 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 인식부를 구비하는 것을 특징으로 하는 개인인식장치.
  27. 제 26 항에 있어서,
    상기 판정부는 상기 얼굴 검출부에 의해 검출되는 얼굴의 중심좌표의 시간적 변화에 기초하여 상기 개인인식장치에 의한 인식동작을 개시하는 것을 특징으로 하는 개인인식장치.
  28. 제 26 항에 있어서,
    상기 판정부는 상기 얼굴 검출부에 의해 검출되는 얼굴의 크기의 시간적 변화에 기초하여 상기 개인인식장치에 의한 인식동작을 개시하는 것을 특징으로 하는 개인인식장치.
  29. 제 26 항에 있어서,
    상기 판정부는 상기 얼굴 검출부에 의해 검출되는 얼굴의 특징점의 위치의 시간적 변화에 기초하여 상기 개인인식장치에 의한 인식동작을 개시하는 것을 특징으로 하는 개인인식장치.
  30. 제 26 항에 있어서,
    상기 판정부는 상기 얼굴 검출부에 의해 검출되는 얼굴의 영역내의 화상간의 시간적인 차분량에 기초하여 상기 개인인식장치의 인식동작을 개시하는 것을 특징으로 하는 개인인식장치.
  31. 제 26 항에 있어서,
    상기 판정부는 상기 얼굴 검출부에 의해 검출되는 얼굴의 영역내의 화상에 관한 시간적인 상관치가 소정의 임계값 이상인 상태가 소정 프레임수 동안 계속된 경우에 상기 개인인식장치에 의한 인식동작을 개시하는 것을 특징으로 하는 개인인식장치.
  32. 통행자를 인식하여 상기 통행자의 통행을 제어하는 통행제어장치에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 입력하는 화상 입력부,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴의 영역을 검출하는 얼굴 검출부,
    상기 얼굴 검출부에 의한 검출 결과에 기초하여 상기 인물의 특징량을 추출하는 특징량 추출부,
    상기 화상 입력부에 의해 등록대상의 인물의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량을 상기 인물의 등록정보로서 유지하는 등록정보 유지부,
    상기 화상 입력부에 의해 통행자의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 통행자에 대한 인식처리를 실시하는 인식부,
    상기 인식부에 의해 인식처리를 실시하는 경우에, 상기 인식대상으로 하는 상기 통행자의 화상에서의 얼굴의 상태를 나타내는 정보와, 상기 등록정보 유지부에 유지되어 있고 상기 인식대상인 상기 통행자의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에 표시하는 표시부, 및
    상기 인식부에 의한 인식결과에 따라서 상기 통행자의 통행을 제어하는 통행제어 수단을 구비한 것을 특징으로 하는 통행제어장치.
  33. 통행자를 인식하여 상기 통행자의 통행을 제어하는 통행제어장치에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 입력하는 화상 입력부,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴영역을 검출하는 얼굴 검출부,
    상기 얼굴 검출부에 의한 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 특징량 추출부,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량을 상기 인물의 등록정보로서 유지하는 등록정보 유지부,
    상기 화상 입력부에 의해 통행자의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 통행자에 대한 인식처리를 실시하는 인식부,
    상기 인식부에 의한 인식결과에 따라서 상기 통행자의 통행을 제어하는 통행제어수단, 및
    상기 화상 입력부에 의해 등록대상의 인물의 화상이 입력되는 경우, 상기 등록대상의 인물의 화상을 어떠한 상태에서 입력하면 좋은지를 나타내는 안내정보, 상기 화상 입력부에서 입력되는 화상에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에 표시하는 표시부를 구비한 것을 특징으로 하는 통행제어장치.
  34. 통행자를 인식하여 상기 통행자의 통행을 제어하는 통행제어장치에 있어서,
    인물 중 적어도 얼굴을 포함하는 화상을 입력하는 화상 입력부,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴영역을 검출하는 얼굴 검출부,
    상기 얼굴 검출부에 의한 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 특징량 추출부,
    상기 화상 입력부에 의해 등록대상의 인물의 화상이 입력된 경우, 상기 특징량 추출부에 의해 추출된 특징량을 상기 인물의 등록정보로서 유지하는 등록정보 유지부,
    상기 화상 입력부에 의해 연속적으로 화상을 입력하고 상기 얼굴 검출부에 의 검출되는 얼굴의 영역의 시간적 변화에 기초하여 통행자의 존재 여부를 판정하는 판정부,
    상기 판정부에 의해 통행자가 존재하는 것으로 판정한 경우, 상기 화상 입력부에 의해 입력되는 화상으로부터 상기 특징량 추출부에 의해 추출한 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 통행자에 대한 인식처리를 실시하는 인식부, 및
    상기 인식부의 인식결과에 따라서 상기 통행자의 통행을 제어하는 통행제어수단을 구비한 것을 특징으로 하는 통행제어장치.
  35. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인증방법에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 화상입력부에 의해 입력하는 단계,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴의 영역을검출하는 단계,
    상기 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 단계,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 등록대상의 화상으로부터 추출되는 특징량을 당해 인물의 등록정보로서 등록정보 유지부에 유지하는 단계,
    상기 화상 입력부에 의해 인식대상의 화상이 입력된 경우, 상기 인식대상의 화상으로부터 추출되는 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 단계,
    상기 인식처리를 실시하는 경우에, 상기 인식대상의 화상에서의 얼굴의 상태를 나타내는 정보와, 상기 등록정보 유지부에 유지되어 있는 상기 인식대상의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에 표시하는 단계를 구비하는 것을 특징으로 하는 개인인식장치에 사용되는 개인인증방법.
  36. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인증방법에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 화상 입력부에 의해 입력하는 단계,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴영역을 검출하는 단계,
    상기 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 단계,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 등록대상의 화상으로부터 추출되는 특징량을 당해 인물의 등록정보로서 등록정보 유지부에 유지하는 단계,
    상기 화상입력부에 의해 인식대상의 화상이 입력된 경우, 상기 인식대상의 화상으로부터 추출되는 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 단계,
    상기 화상 입력부에 의해 등록대상의 화상이 입력되는 경우, 상기 등록대상의 화상을 어떠한 상태에서 입력하면 좋을지를 나타내는 안내정보와, 상기 화상 입력부에서 입력되어 있는 화상에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에 표시하는 단계를 구비하는 것을 특징으로 하는 개인인식장치에 사용되는 개인인증방법.
  37. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인증방법에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 화상 입력부에 의해 입력하는 단계,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴의 영역을 검출하는 단계,
    상기 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 단계,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 등록대상의 화상으로부터 추출되는 특징량을 당해 인물의 등록정보로서 등록정보 유지부에 유지하는 단계,
    상기 화상 입력부에 의해 입력되는 연속된 화상으로부터 검출되는 얼굴의 영역의 시간적 변화에 기초하여 피인증자가 존재하는지의 여부를 판정하는 단계, 및
    상기 판정에 의해 피인증자가 존재하는 것으로 판정한 경우, 상기 화상 입력부에 의해 입력되는 인식대상의 화상으로부터 추출되는 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 단계를 구비하는 것을 특징으로 하는 개인인식장치에 사용되는 개인인증방법.
  38. 통행자를 인식하여 상기 통행자의 통행을 제어하는 통행제어장치에 사용되는 통행제어방법에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 화상입력부에 의해 입력하는 단계,
    상기 화상입력부에 의해 입력되는 화상으로부터 상기 인물의 얼굴의 영역을 검출하는 단계,
    상기 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 단계,
    상기 화상입력부에 의해 등록대상의 화상이 입력된 경우, 상기 등록대상의 화상으로부터 추출되는 특징량을 당해 인물의 등록정보로서 등록정보 유지부에 유지하는 단계,
    상기 화상 입력부에 의해 통행자의 화상이 입력된 경우, 상기 통행자의 화상으로부터 추출되는 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 통행자에 대한 인식처리를 실시하는 단계,
    상기 인식처리를 실시하는 경우에, 상기 통행자의 화상에서의 얼굴의 상태를 나타낸 정보와, 상기 등록정보 유지부에 유지되어 있는 상기 통행자의 화상과 대조확인되는 상기 등록정보에서의 얼굴의 상태를 나타낸 정보를 동일한 화면상에 표시하는 단계, 및
    상기 인식처리에 의한 인식결과에 따라서 상기 통행자의 통행을 제어하는 단계를 구비하는 것을 특징으로 하는 통행제어방법.
  39. 통행자를 인식하여 상기 통행자의 통행을 제어하는 통행제어장치에 사용되는 통행제어방법에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 화상 입력부에 의해 입력하는 단계,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴의 영역을 검출하는 단계,
    상기 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 단계,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 등록대상의 화상으로부터 추출되는 특징량을 당해 인물의 등록정보로서 등록정보 유지부에 유지하는 단계,
    상기 화상 입력부에 의해 등록대상의 화상이 입력되는 경우, 상기 등록대상의 화상을 어떠한 상태에서 입력하면 좋을지를 나타내는 안내정보와 상기 화상입력부에서 입력되어 있는 화상에서의 얼굴의 상태를 나타내는 정보를 동일 화면상에표시하는 단계,
    상기 화상 입력부에 의해 통행자의 화상이 입력된 경우, 상기 통행자의 화상으로부터 추출되는 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 통행자에 대한 인식처리를 실시하는 단계, 및
    상기 인식처리에 의한 인식결과에 따라서 상기 통행자의 통행을 제어하는 단계를 구비하는 것을 특징으로 하는 통행제어방법.
  40. 통행자를 인식하여 상기 통행자의 통행을 제어하는 통행제어장치에 사용되는 통행제어방법에 있어서,
    인물의 적어도 얼굴을 포함하는 화상을 화상 입력부에 의해 입력하는 단계,
    상기 화상 입력부에 의해 입력된 화상으로부터 상기 인물의 얼굴의 영역을 검출하는 단계,
    상기 검출결과에 기초하여 상기 인물의 얼굴의 특징량을 추출하는 단계,
    상기 화상 입력부에 의해 등록대상의 화상이 입력된 경우, 상기 등록대상의 화상으로부터 추출되는 특징량을 당해 인물의 등록정보로서 등록정보 유지부에 유지하는 단계,
    상기 화상 입력부에 의해 입력되는 연속된 화상으로부터 검출되는 얼굴영역의 시간적 변화에 기초하여 피인증자가 존재하는지의 여부를 판정하는 단계,
    상기 판정에 의해 피인증자가 존재하는 것으로 판정한 경우, 상기 화상입력부에 의해 입력되는 인식대상의 화상으로부터 추출되는 특징량과 상기 등록정보 유지부에 유지되어 있는 등록정보를 대조확인함으로써 상기 피인증자에 대한 인식처리를 실시하는 단계, 및
    상기 인식처리에 의한 인식결과에 따라서 상기 통행자의 통행을 제어하는 단계를 포함하는 것을 특징으로 하는 통행제어방법.
  41. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되고, 또한 유사한 얼굴화상이 존재하는 얼굴화상에는 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 기억되어 있는 기억부,
    이용자의 식별정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 얼굴화상에 대해서 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 상기 기억부에 기억되어 있지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 상기 기억부에 기억되어 있는 얼굴화상과의 대조확인을 실시하는 제 1 얼굴 대조확인부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 얼굴화상에 대해서 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 상기 기억부에 기억되어 있는 경우, 상기 제 1 얼굴 대조확인부와는 다른 대조확인처리에 의해 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응하는 상기 기억부에 기억되어 있는 얼굴화상과의 대조확인을 실시하는 제 2 얼굴 대조확인부를 구비한 것을 특징으로 하는 개인인식장치.
  42. 제 41 항에 있어서,
    상기 제 1 얼굴 대조확인부는 상기 촬영부에 의해 촬영된 얼굴화상과 상기 식별정보에 대응한 얼굴화상과의 대조확인도가 제 1 임계값 이상인지의 여부에 의해 대조확인의 가부를 판정하고,
    상기 제 2 얼굴 대조확인부는 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 얼굴화상과의 대조확인도가 제 1 임계값보다 높은 제 2 임계값 이상인지의 여부에 의해 대조확인의 가부를 판정하는 것을 특징으로 하는 개인인식장치.
  43. 제 41 항에 있어서,
    상기 제 1 얼굴 대조확인부는 상기 촬영부에 의해 촬영된 얼굴화상과 상기 식별정보에 대응한 얼굴화상과의 대조확인도가 소정의 임계값 이상인지의 여부에 의해 대조확인의 가부를 판정하고,
    상기 제 2 얼굴 대조확인부는 상기 촬영부에 의해 촬영된 얼굴화상과 상기 기억부에 기억되어 있는 모든 얼굴화상과의 대조확인도를 산출하고, 상기 식별정보에 대응한 얼굴화상과의 대조확인도가 최대이고, 또한 다음에 큰 대조확인도와의차가 소정값 이상인지의 여부에 의해 대조확인의 가부를 판정하는 것을 특징으로 하는 개인인식장치.
  44. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    상기 기억부에 기억되어 있는 얼굴화상 끼리의 대조확인도를 판정하고, 소정값 이상의 대조확인도가 존재한 경우에, 그것들의 얼굴화상에 대해서 유사한 얼굴화상이 존재하는 것을 나타내는 정보를 부여하는 정보 부여부,
    이용자의 식별정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 상기 기억부에 기억되어 있는 얼굴화상에 대하여 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 부여되어 있지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 상기 기억부에 기억되어 있는 얼굴화상의 대조확인을 실시하는 제 1 얼굴 대조확인부, 및
    상기 입력부에 의해 입력된 식별정보에 대응하는 상기 기억부에 기억되어 있는 얼굴화상에 대해서 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 부여되어 있는 경우, 상기 제 1 얼굴 대조확인부와는 다른 대조확인처리에 의해 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응하는 상기 기억부에 기억되어 있는 얼굴화상의 대조확인을 실시하는 제 2 얼굴대조확인부를 구비한 것을 특징으로 하는 개인인식장치.
  45. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상이 기억되고, 또한 유사한 얼굴화상이 존재한 얼굴화상에는 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 대응하여 기억되어 있는 기억부,
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영된 얼굴화상과 상기 기억부에 기억되어 있는 복수의 얼굴화상의 대조확인처리를 실시하는 제 1 얼굴 대조확인부, 및
    상기 제 1 얼굴 대조확인부에 의해 대조확인한 얼굴화상에 대하여 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 상기 기억부에 의해 기억되어 있는 경우, 상기 제 1 얼굴 대조확인부와는 다른 대조확인처리에 의해 얼굴화상의 대조확인을 실시하는 제 2 얼굴 대조확인부를 구비한 것을 특징으로 하는 개인인식장치.
  46. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상에 식별정보를 일대일 대응시켜 기억하는 기억부,
    상기 기억부에 기억되는 얼굴화상과 상기 기억부에 이미 기억되어 있는 다른 얼굴화상의 대조확인도를 판정하는 판정부,
    상기 판정부에 의해 판정한 당해 얼굴화상과 다른 얼굴화상의 대조확인도에 기초하여 당해 상기 기억부에 기억되는 얼굴화상에 대한 임계값을 설정하는 설정부,
    이용자의 식별정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영한 이용자의 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응하는 상기 기억부에 등록되어 있는 얼굴화상과의 대조확인도가 상기 설정부에 의해 설정된 임계값 이상인지의 여부에 의해 대조확인의 가부를 판단하는 대조확인처리를 실시하는 대조확인부를 구비한 것을 특징으로 하는 개인인식장치.
  47. 제 46 항에 있어서,
    상기 설정부는 상기 판정부에 의해 대조확인도가 소정값 이상의 얼굴화상이 따로 존재하는 것으로 판정된 얼굴화상에 대해서는 대조확인도가 소정값 이상의 얼굴화상이 따로 존재하지 않는 얼굴화상보다 임계값을 높게 설정하는 것을 특징으로 하는 개인인식장치.
  48. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자마다 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을, 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 이용자의 식별정보를 일대일 대응시켜 상기 기억부에 기억하는 등록부,
    이용자의 식별정보와 부가정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부, 및
    상기 입력부에 의해 입력된 식별정보와 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부를 갖는 것을 특징으로 하는 개인인식장치.
  49. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을, 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 이용자의 식별정보를 일대일 대응시켜 상기 기억수단에 기억하고, 또한 각 식별정보에 대응하는 이용자의 얼굴화상 중 디폴트로 사용하는 얼굴화상을 설정해 두는 등록부,
    적어도 식별정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 입력부에 의해 식별정보와 함께 부가정보가 입력된 경우, 상기 입력부에 의해 입력된 식별정보와 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인처리를 실시하는 제 1 얼굴 대조확인부, 및
    상기 입력부에 의해 식별정보만이 입력된 경우, 상기 입력부에 의해 입력된 식별정보에 대하여 디폴트로서 설정되어 있는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인처리를 실시하는 제 2 얼굴 대조확인부를 구비한 것을 특징으로 하는 개인인식장치.
  50. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과의 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을, 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 이용자의 식별정보를 일대일 대응시켜 상기 기억부에 기억하는 등록부,
    이용자의 식별정보와 대조확인대상으로 하는 얼굴화상의 부가정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부, 및
    상기 입력부에 의해 입력된 식별정보와 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 대조확인되지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상에 기초하여, 상기 기억부에 기억되어 있는 상기 식별정보 및 부가정보에 대응하는 얼굴화상을 갱신하는 갱신부를 구비한 것을 특징으로 하는 개인인식장치.
  51. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을, 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 이용자의 식별정보를 일대일 대응시켜 상기 기억부에 기억하는 등록부,
    이용자의 식별정보와 대조확인대상으로 하는 얼굴화상의 부가정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 입력부에 의해 입력된 식별정보와 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상과의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 대조확인되지 않은 경우, 상기 촬영부에 의해 촬영된 이용자가 상기 입력부에 의해 입력된 식별정보에 대응하는 이용자인지의 여부를 인증하는 인증부,
    상기 인증부에 의해 이용자라고 인증된 경우, 상기 촬영부에 의해 촬영된 얼굴화상에 기초하여, 상기 기억부에 기억되어 있는 상기 식별정보 및 부가정보에 대응하는 얼굴화상을 갱신하는 갱신부를 구비한 것을 특징으로 하는 개인인식장치.
  52. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을, 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 이용자의 식별정보를 일대일 대응시켜 상기 기억부에 의 기억하는 등록부,
    이용자의 식별정보와 대조확인대상으로 하는 얼굴화상의 부가정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 입력부에 의해 입력된 식별정보와 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부, 및
    상기 얼굴 대조확인부에 의해 대조확인되지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상에 부가정보를 부여하고, 상기 식별정보에 일대일 대응시켜 상기얼굴화상을 상기 기억부에 기억하는 추가 등록부를 구비한 것을 특징으로 하는 개인인식장치.
  53. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을, 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 이용자의 식별정보를 일대일 대응시켜 상기 기억부에 기억하는 등록부,
    이용자의 식별정보와 대조확인대상으로 하는 얼굴화상의 부가정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 입력부에 의해 입력된 식별정보와 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 대조확인되지 않은 경우, 상기 촬영부에 의해 촬영된 이용자가 상기 입력부에 의해 입력된 식별정보에 대응하는 이용자인지의 여부를 인증하는 인증부, 및
    상기 인증부에 의해 이용자라고 인증된 경우, 상기 촬영부에 의해 촬영된 얼굴화상에 부가정보를 부여하고 상기 식별정보에 일대일 대응시켜 상기 얼굴화상을상기 기억부에 기억하는 추가등록부를 구비한 것을 특징으로 하는 개인인식장치.
  54. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    정당한 이용자의 얼굴화상이 기억되어 있는 제 1 기억부,
    수상한 자의 얼굴화상이 기억되어 있는 제 2 기억부,
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 1 기억부에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 제 1 얼굴 대조확인부,
    상기 제 1 얼굴 대조확인부에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 1 기억부에 기억되어 있는 얼굴화상과 일치하지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 2 기억부에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 제 2 얼굴 대조확인부, 및
    상기 제 2 얼굴 대조확인부에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 2 기억부에 기억되어 있는 얼굴화상과 일치하는 경우, 경보를 발하는 경보부를 구비한 것을 특징으로 하는 개인인식장치.
  55. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    정당한 이용자의 얼굴화상이 기억되어 있는 제 1 기억부,
    수상한 자의 얼굴화상이 기억되어 있는 제 2 기억부,
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 1 기억부에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 제 1 얼굴대조확인부,
    상기 제 1 얼굴 대조확인부에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 1 기억부에 기억되어 있는 얼굴화상과 대조확인하지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 2 기억부에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 제 2 얼굴 대조확인부,
    상기 제 2 얼굴 대조확인부에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 2 기억부에 기억되어 있는 얼굴화상과 대조확인한 경우, 경보를 발하는 경보부,
    상기 제 2 얼굴 대조확인부에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 2 기억부에 기억되어 있는 얼굴화상과 대조확인하지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상을 기억하는 제 3 기억부, 및
    상기 제 3 기억부에 의해 기억된 얼굴화상으로부터 선별된 수상한 자의 얼굴화상을 상기 제 2 기억부에 기억하는 등록부를 구비한 것을 특징으로 하는 개인인식장치.
  56. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상이 기억되어 있는 제 1 기억부,
    소정 영역내에 존재하는 이용자를 나타내는 정보를 기억하는 제 2 기억부,
    상기 소정 영역내로 입장하는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 얼굴화상이 촬영되었을 때, 상기 제 2 기억부에 기억내용에 기초하여 상기 소정 영역내에 존재하는 사람을 특정하고, 상기 촬영부에 의해 촬영된 얼굴화상과, 상기 제 1 기억부에 기억되고 또한 상기 제 2 기억부에 기억되어 있는 이용자 이외의 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 상기 소정 영역내에 존재하는 이용자 이외의 얼굴화상과 대조확인한 경우에, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 허가하는 허가부, 및
    상기 얼굴 대조확인부에 의해 상기 소정 영역내에 존재하는 이용자 이외의 얼굴화상과 대조확인하지 않은 경우, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 불허가하는 불허가부를 구비한 것을 특징으로 하는 개인인식장치.
  57. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    소정 영역내로의 입장이 허가되어 있는 이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 제 1 기억부,
    상기 소정 영역내에 존재하는 이용자를 나타내는 정보를 기억하는 제 2 기억부,
    상기 소정 영역내로 입장하는 이용자의 식별정보가 입력되는 입력부,
    상기 입력부에 의해 입력된 식별정보에 대응하는 자가 상기 제 2 기억부에 상기 소정 영역내에 존재하는 이용자로서 기억되어 있지 않은 경우, 상기 입력부에 의해 식별정보를 입력한 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 상기 제 1 기억부에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 얼굴화상이 대조확인된 경우, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 허가하는 허가부, 및
    상기 얼굴 대조확인부에 의해 얼굴화상이 대조확인되지 않은 경우, 또는 상기 입력부에 의해 식별정보를 입력한 이용자가 상기 제 2 기억부에 상기 소정 영역내에 존재하는 이용자로서 기억되어 있지 않은 경우, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 불허가로 하는 불허가부를 구비한 것을 특징으로 하는 개인인식장치.
  58. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상이 기억되어 있는 제 1 기억부,
    소정 영역내에 존재하는 이용자를 나타내는 정보를 기억하는 제 2 기억부,
    상기 소정 영역내로부터 밖으로 나가는 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 얼굴화상이 촬영되었을 때, 상기 제 2 기억부의 기억내용에 기초하여 상기 소정 영역내에 존재하는 이용자를 특정하고, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 1 기억부에 기억되어 있는 상기 소정 영역내에 존재하는 이용자의 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 상기 소정 영역내에 존재하는 이용자의 얼굴화상과 대조확인한 경우에 상기 촬영부에 의해 얼굴화상을 촬영한 이용자가 밖으로 나가는 것을 허가하는 허가부, 및
    상기 얼굴 대조확인부에 의해 상기 소정 영역내에 존재하는 이용자의 얼굴화상과 대조확인하지 않은 경우, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자가 밖으로 나가는 것을 허가하지 않는 불허가부를 구비한 것을 특징으로 하는 개인인식장치.
  59. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    소정 영역내로의 입장이 허가되어 있는 이용자의 얼굴화상과 각 이용자마다 부여되어 있는 식별정보가 대응하여 기억되어 있는 제 1 기억부,
    상기 소정 영역내에 존재하는 이용자를 나타내는 정보를 기억하는 제 2 기억부,
    상기 소정 영역내로부터 밖을 나가는 이용자의 식별정보가 입력되는 입력부,
    상기 입력부에 의해 식별정보를 입력한 이용자가 상기 제 2 기억부에 상기 소정 영역내에 존재하는 이용자로서 기억되어 있는 경우, 상기 입력부에 의해 식별정보를 입력한 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영된 얼굴화상과, 상기 제 1 기억부에 기억되어 있는 상기 입력부에 의해 입력된 식별정보에 일대일 대응하는 얼굴화상의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 얼굴화상이 대조확인된 경우, 상기 촬영부에의해 얼굴화상을 촬영한 이용자가 밖으로 나가는 것을 허가하는 허가부, 및
    상기 얼굴대조확인부에 의해 얼굴화상이 대조확인되지 않은 경우, 또는 상기 입력부에 의해 식별정보를 입력한 이용자가 상기 제 2 기억부에 상기 소정 영역내에 존재하는 이용자로서 기억되어 있지 않은 경우, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자가 밖으로 나가는 것을 허가하지 않는 불허가부를 구비한 것을 특징으로 하는 개인인식장치.
  60. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영 가능한 이용자의 존재를 검지하는 검지부,
    상기 검지부에 의해 이용자의 존재가 검지되었을 때, 상기 촬영부에 의해 이용자의 얼굴화상을 촬영하고, 상기 촬영한 얼굴화상과 상기 기억부에 기억되어 있는 모든 얼굴화상의 대조확인처리를 실시하는 제 1 얼굴 대조확인부,
    이용자의 식별정보가 입력되는 입력부, 및
    상기 제 1 얼굴 대조확인부에 의한 대조확인처리 중에 상기 입력부에 의해 식별정보가 입력된 경우, 상기 제 1 얼굴 대조확인부에 의한 대조확인처리를 중지하고, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 얼굴화상의 대조확인처리를 실시하는 제 2 얼굴 대조확인부를 구비한 것을 특징으로 하는 개인인식장치.
  61. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보가 일대일 대응하여 기억되어 있는 기억부,
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영 가능한 이용자의 존재를 검지하는 검지부,
    상기 검지부에 의해 이용자의 존재가 검지되었을 때, 상기 촬영부에 의해 이용자의 얼굴화상을 촬영하고, 상기 촬영한 얼굴화상과 상기 기억부에 기억되어 있는 모든 얼굴화상의 대조확인처리를 실시하는 제 1 얼굴 대조확인부,
    상기 제 1 얼굴 대조확인부에 의해 대조확인이 실패했을 때, 이용자의 식별정보가 입력되는 입력부, 및
    상기 입력부에 의해 식별정보가 입력된 경우, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 얼굴화상의 대조확인처리를 실시하는 제 2 얼굴 대조확인부를 구비한 것을 특징으로 하는 개인인식장치.
  62. 제 61 항에 있어서,
    상기 기억부에는 상기 제 1 얼굴 대조확인부의 대조확인 처리의 대상이 되는 이용자의 얼굴화상, 및
    상기 제 2 얼굴 대조확인부의 대조확인처리의 대상이 되는 이용자의 얼굴화상이 구별되어 기억되고,
    상기 제 1 얼굴 대조확인부는 상기 기억부에 기억되어 있는 대조확인대상이 되는 얼굴화상과의 대조확인처리를 실시하는 것을 특징으로 하는 개인인식장치.
  63. 이용자의 얼굴화상을 촬영한 얼굴화상과 미리 대조확인용 사전에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 얼굴화상 대조확인장치와, 상기 얼굴화상 대조확인장치에 접속되는 서버장치와, 상기 서버장치에 접속 가능한 정보단말을 구비한 개인인식 시스템에 있어서,
    상기 정보단말은
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영한 얼굴화상에 기초하여 개인사전을 작성하는 개인사전 작성부, 및
    상기 작성부에 의해 작성한 개인사전을 상기 서버로 송신하는 송신부를 구비하고,
    상기 서버장치는
    상기 정보단말로부터 송신된 개인사전을 수신하고, 복수의 정보단말로부터 송신된 개인사전을 통합함으로써 상기 얼굴화상 대조확인장치에서 이용되는 사전을 작성하는 대조확인용 사전 작성부를 구비한 것을 특징으로 하는 개인인식시스템.
  64. 이용자의 얼굴화상을 촬영하고 촬영한 얼굴화상과 미리 대조확인용 사전에기억되어 있는 얼굴화상과의 대조확인처리를 실시하는 얼굴화상 대조확인장치, 상기 얼굴화상 대조확인장치에 접속되는 서버장치, 및 상기 서버장치에 접속 가능한 정보단말을 구비한 개인인식 시스템에 있어서,
    상기 정보단말은
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 서버장치로부터 개인사전 작성용 프로그램을 수신하는 수신부,
    상기 수신부에 의해 수신한 개인사전 작성용 프로그램을 기동시키고 상기 촬영부에 의해 촬영한 얼굴화상에 기초하여 개인사전을 작성하는 개인사전 작성부, 및
    상기 개인사전 작성부에 의해 작성한 개인사전을 상기 서버장치로 송신하는 송신부를 구비하고,
    상기 서버장치는
    상기 정보단말로부터 송신된 개인사전을 수신하고, 복수의 정보단말로부터 송신된 개인사전을 통합함으로써 상기 얼굴화상 대조확인장치에서 이용되는 사전을 작성하는 대조확인용 사전 작성부를 구비한 것을 특징으로 하는 개인인식시스템.
  65. 이용자의 얼굴화상을 촬영하고 촬영한 얼굴화상과 미리 대조확인용 사전에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 얼굴화상 대조확인장치, 상기 얼굴화상 대조확인장치에 접속되는 서버장치, 및 상기 서버장치에 접속 가능한 정보단말을 구비한 개인인식 시스템에 있어서,
    상기 정보단말은
    이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영한 얼굴화상에 기초하여 개인사전에 얼굴화상을 등록하는 등록부,
    상기 촬영부에 의해 촬영한 얼굴화상과 상기 개인사전에 등록되어 있는 얼굴화상과의 대조확인처리를 실시하는 얼굴 대조확인부,
    상기 얼굴 대조확인부에 의해 얼굴 대조확인을 실시했을 때, 이용자의 지시에 따라서 상기 촬영부에 의해 촬영한 얼굴화상에 기초하는 개인사전의 갱신을 실시하는 갱신부, 및
    상기 개인사전을 상기 서버장치로 송신하는 송신부를 구비하고
    상기 서버장치는
    상기 정보 단말로부터 송신된 개인사전을 수신하고, 복수의 정보단말로부터 송신된 개인사전을 통합함으로써 상기 얼굴화상 대조확인장치에서 이용되는 사전을 작성하는 대조확인용 사전 작성부를 구비한 것을 특징으로 하는 개인인식시스템.
  66. 이용자의 얼굴화상을 촬영하고 촬영한 얼굴화상과 미리 대조확인용 사전에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 얼굴화상 대조확인장치, 상기 얼굴화상 대조확인장치에 접속되는 서버장치, 및 상기 서버장치에 접속 가능한 정보단말을 구비한 개인인식 시스템에 있어서,
    상기 정보단말은 이용자의 얼굴화상을 촬영하는 촬영부,
    상기 촬영부에 의해 촬영한 얼굴화상에 기초하여 개인사전에 얼굴화상을 등록하는 등록부,
    상기 촬영부에 의해 촬영한 얼굴화상과 상기 개인사전에 등록되어 있는 얼굴화상의 대조확인처리를 실시하는 얼굴대조확인부,
    상기 얼굴 대조확인부에 의한 얼굴 대조확인 결과에 기초하여 상기 개인사전에 등록되어 있는 얼굴화상에 의한 얼굴 대조확인이 안정되었는지의 여부를 판단하는 판단부,
    상기 판단부에 의해 상기 개인사전에 등록되어 있는 얼굴화상에 의한 얼굴대조확인이 안정되어 있지 않다고 판단한 경우에, 상기 촬영부에 의해 촬영한 얼굴화상에 기초하는 개인사전의 갱신을 실시하는 갱신부, 및
    상기 판단부에 의해 상기 개인사전에 등록되어 있는 얼굴화상에 의한 얼굴대조확인이 안정되었다고 판단한 경우에, 상기 개인사전을 상기 서버장치로 송신하는 송신부를 구비하고,
    상기 서버장치는
    상기 정보단말로부터 송신된 개인사전을 수신하고, 복수의 정보단말로부터 송신된 개인사전을 통합함으로써 상기 얼굴화상 대조확인장치에서 이용되는 사전을 작성하는 대조확인용 사전 작성부를 구비한 것을 특징으로 하는 개인인식시스템.
  67. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인식방법에 있어서,
    이용자의 얼굴화상에 대응하는 각 이용자에 부여되어 있는 식별정보와, 또한 유사한 얼굴화상이 존재하는 이용자의 얼굴화상에는 유사한 얼굴화상이 존재하는 것을 나타내는 정보를 기억부에 기억하는 단계,
    이용자의 식별정보를 입력부에 의해 입력하는 단계,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영부에 의해 촬영하는 단계,
    상기 입력부에 의해 입력된 식별정보에 대응하는 얼굴화상에 대하여 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 상기 기억부에 기억되어 있지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 기억부에 기억되어 있는 상기 이용자의 식별정보에 대응하는 얼굴화상을 제 1 대조확인방법에 의해 대조확인하는 단계, 및
    상기 입력부에 의해 입력된 식별정보에 대응하는 얼굴화상에 대하여 유사한 얼굴화상이 존재하는 것을 나타내는 정보가 상기 기억부에 기억되어 있는 경우, 제 2 대조확인방법에 의해 상기 촬영부에 의해 촬영된 얼굴화상과 상기 기억부에 기억되어 있는 상기 이용자의 식별정보에 대응하는 얼굴화상의 대조확인을 실시하는 단계를 구비하는 것을 특징으로 하는 개인인식방법.
  68. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인식방법에 있어서,
    이용자의 얼굴화상에 식별정보를 일대일 대응시켜 기억부에 기억시키는 단계,
    상기 기억부에 기억된 얼굴화상과 상기 기억부에 이미 기억되어 있는 다른 얼굴화상의 대조확인도를 판정하는 단계,
    상기 얼굴화상과 다른 얼굴화상의 대조확인도에 기초하여, 상기 기억부에 기억된 상기 얼굴화상에 대한 임계값을 설정하는 단계,
    이용자의 식별정보가 입력부에 의해 입력되는 단계,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영부에 의해 촬영하는 단계, 및
    상기 촬영부에 의해 촬영한 이용자의 얼굴화상과 상기 기억부에 기억되어 있는 상기 이용자의 식별정보에 대응하는 얼굴화상의 대조확인도가 상기 임계값 이상인지의 여부에 의해 대조확인의 가부를 판단하는 대조확인처리를 실시하는 단계를 구비하는 것을 특징으로 하는 개인인식방법.
  69. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인식방법에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보를 일대일 대응시켜 기억부에 기억하는 단계,
    상기 기억부에 얼굴화상이 기억되어 있는 이용자의 다른 얼굴화상을, 당해 이용자의 각 얼굴화상에 대응하는 부가정보와 식별정보에 일대일 대응시켜 상기 기억부에 기억하는 단계,
    이용자의 식별정보와 부가정보를 입력부에 의해 입력하는 단계,
    상기 입력부에 의해 입력된 식별정보에 대응하는 이용자의 얼굴화상을 촬영부에 의해 촬영하는 단계, 및
    상기 입력부에 의해 입력된 식별정보 및 부가정보에 대응하는 얼굴화상과 상기 촬영부에 의해 촬영된 얼굴화상의 대조확인처리를 실시하는 단계를 구비하는 것을 특징으로 하는 개인인식방법.
  70. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인식방법에 있어서,
    정당한 이용자의 얼굴화상을 제 1 기억부에 기억하는 단계,
    수상한 자의 얼굴화상을 제 2 기억부에 기억하는 단계,
    이용자의 얼굴화상을 촬영부에 의해 촬영하는 단계,
    상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 1 기억부에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 단계,
    상기 대조확인처리에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 1 기억부에 기억되어 있는 얼굴화상과 대조확인하지 않은 경우, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 제 2 기억부에 기억되어 있는 얼굴화상이 대조확인처리를 실시하는 단계, 및
    상기 대조확인처리에 의해 상기 촬영부에서 촬영된 얼굴화상이 상기 제 2 기억부에 기억되어 있는 얼굴화상과 대조확인한 경우에 경보를 발하는 단계를 구비하는 것을 특징으로 하는 개인인식방법.
  71. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인식방법에 있어서,
    이용자의 얼굴화상을 제 1 기억부에 기억하는 단계,
    소정 영역내에 존재하는 이용자를 나타내는 정보를 제 2 기억부에 기억하는 단계,
    상기 소정 영역내로 입장하는 이용자의 얼굴화상을 촬영부에 의해 촬영하는 단계,
    상기 촬영부에 의해 얼굴화상이 촬영되었을 때, 상기 제 2 기억부의 기억내용에 기초하여 상기 소정 영역내에 존재하는 자를 특정하고, 상기 촬영부에 의해 촬영된 얼굴화상과, 상기 제 1 기억부에 기억되고 또한 상기 제 2 기억부에 기억되어 있는 이용자 이외의 얼굴화상의 대조확인처리를 실시하는 단계,
    상기 대조확인처리에 의해 상기 소정 영역내에 존재하는 이용자 이외의 얼굴화상과 대조확인한 경우에, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 허가하는 단계, 및
    상기 대조확인처리에 의해 상기 소정 영역내에 존재하는 이용자 이외의 얼굴화상과 대조확인하지 않은 경우에, 상기 촬영부에 의해 얼굴화상을 촬영한 이용자의 입장을 거절하는 단계를 구비하는 것을 특징으로 하는 개인인식방법.
  72. 얼굴화상에 의해 인물을 인식하는 개인인식장치에 사용되는 개인인식방법에 있어서,
    이용자의 얼굴화상과 각 이용자에게 부여되어 있는 식별정보를 일대일 대응시켜 기억부에 기억하는 단계,
    촬영부에 의해 촬영 가능한 이용자의 존재를 검지하는 단계,
    이용자의 얼굴화상을 상기 촬영부에 의해 촬영하는 단계,
    상기 촬영한 얼굴화상과 상기 기억부에 기억되어 있는 모든 얼굴화상과의 대조확인처리를 실시하는 단계, 및
    상기 대조확인처리에 의한 대조확인처리 중에 상기 입력부에 의해 식별정보가 입력된 경우, 상기 대조확인처리에 의한 대조확인처리를 중지하고, 상기 촬영부에 의해 촬영된 얼굴화상과 상기 입력부에 의해 입력된 식별정보에 대응한 얼굴화상의 대조확인처리를 실시하는 단계를 구비하는 것을 특징으로 하는 개인인식방법.
  73. 이용자의 얼굴화상을 촬영하고, 촬영한 얼굴화상과 미리 대조확인용 사전에 기억되어 있는 얼굴화상의 대조확인처리를 실시하는 얼굴화상 대조확인장치와, 상기 얼굴화상 대조확인장치에 접속되는 서버장치와, 상기 서버장치에 접속 가능한 정보단말을 구비한 개인인식 시스템에 사용되는 개인인식방법에 있어서,
    상기 정보단말이 이용자의 얼굴화상을 촬영부에 의해 촬영하는 단계,
    상기 촬영부에 의해 촬영한 얼굴화상에 기초하여 개인사전을 작성하는 단계,
    상기 작성한 개인사전을 상기 서버장치로 송신하는 단계, 및
    상기 서버장치가 상기 정보단말로부터 송신된 개인사전을 수신하고, 복수의 정보단말로부터 수신한 개인사전을 통합함으로써 상기 얼굴화상 대조확인장치에서 이용되는 사전을 작성하는 단계를 구비하는 것을 특징으로 하는 개인인식방법.
KR10-2002-0050314A 2001-08-24 2002-08-24 개인인식장치 KR100495516B1 (ko)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JPJP-P-2001-00254774 2001-08-24
JP2001254774A JP2003067744A (ja) 2001-08-24 2001-08-24 個人認証装置および個人認証方法
JPJP-P-2001-00335842 2001-10-31
JP2001335842A JP3974375B2 (ja) 2001-10-31 2001-10-31 人物認識装置、人物認識方法および通行制御装置
JP2001341040A JP4153691B2 (ja) 2001-11-06 2001-11-06 顔画像照合装置及び顔画像照合方法
JPJP-P-2001-00341040 2001-11-06

Publications (2)

Publication Number Publication Date
KR20030017436A true KR20030017436A (ko) 2003-03-03
KR100495516B1 KR100495516B1 (ko) 2005-06-16

Family

ID=27347376

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2002-0050314A KR100495516B1 (ko) 2001-08-24 2002-08-24 개인인식장치

Country Status (5)

Country Link
US (2) US7120278B2 (ko)
EP (1) EP1291807B1 (ko)
KR (1) KR100495516B1 (ko)
DE (1) DE60217597T2 (ko)
TW (2) TWI299471B (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100901231B1 (ko) * 2006-09-06 2009-06-08 야마하 가부시키가이샤 생체 인증 장치, 생체 인증 방법 및 프로그램 명령어를포함하는 기계 판독가능 매체
US8417001B2 (en) 2008-09-05 2013-04-09 Fujitsu Limited Biometric authentication device, fake body judgment device, and biometric authentication method where biometric information value range is updated when subject is living body
KR101710200B1 (ko) * 2015-11-05 2017-02-24 광운대학교 산학협력단 얼굴 인식을 사용한 자동 출석관리 시스템 및 방법
KR20190038053A (ko) * 2017-09-29 2019-04-08 삼성전자주식회사 입력된 정보와 관련된 이미지를 제공하기 위한 전자 장치 및 그의 동작 방법
KR20200139015A (ko) * 2019-06-03 2020-12-11 계명대학교 산학협력단 Tprl 알고리즘을 이용하여 얼굴 이미지로부터 신원을 확인하는 시스템 및 그 구동 방법
JP2022123030A (ja) * 2020-10-28 2022-08-23 キヤノンマーケティングジャパン株式会社 情報処理装置、その制御方法とプログラム

Families Citing this family (229)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040190688A1 (en) * 2003-03-31 2004-09-30 Timmins Timothy A. Communications methods and systems using voiceprints
JP4177598B2 (ja) * 2001-05-25 2008-11-05 株式会社東芝 顔画像記録装置、情報管理システム、顔画像記録方法、及び情報管理方法
TWI299471B (en) * 2001-08-24 2008-08-01 Toshiba Kk Person recognition apparatus
JP2003296711A (ja) * 2002-03-29 2003-10-17 Nec Corp 顔画像識別方法、装置およびプログラム
US20060057550A1 (en) * 2002-09-27 2006-03-16 Nozomu Sahashi Remote education system, course attendance check method, and course attendance check program
JP2004118627A (ja) * 2002-09-27 2004-04-15 Toshiba Corp 人物認証装置および人物認証方法
JP4365189B2 (ja) * 2003-02-05 2009-11-18 富士フイルム株式会社 認証装置
JP3860552B2 (ja) * 2003-03-25 2006-12-20 富士通株式会社 撮影装置
US20050223003A1 (en) * 2003-03-31 2005-10-06 Fujitsu Limited Collator and register
EP1615420B1 (en) * 2003-04-15 2009-08-19 Fujitsu Limited Code recognizing method and device
EP1636733B1 (en) 2003-06-23 2018-01-24 Sony Pictures Entertainment Inc. Fingerprinting of data
JP4085924B2 (ja) * 2003-08-04 2008-05-14 ソニー株式会社 音声処理装置
JP2005084980A (ja) * 2003-09-09 2005-03-31 Fuji Photo Film Co Ltd 顔画像付きカード用データ生成装置および方法並びにプログラム
JP4615272B2 (ja) * 2003-09-29 2011-01-19 富士フイルム株式会社 認証システム、プログラム、及び建築物
WO2005040023A1 (ja) * 2003-10-24 2005-05-06 Toshiba Elevator Kabushiki Kaisha エレベータのセキュリティシステム
JP2005151282A (ja) * 2003-11-18 2005-06-09 Fuji Xerox Co Ltd 画像処理装置、画像処理方法、およびプログラム
US20050109350A1 (en) * 2003-11-25 2005-05-26 Michael Luloh Method and system for biometric surgical confirmation
JP4121026B2 (ja) * 2004-01-21 2008-07-16 富士フイルム株式会社 撮像装置および方法並びにプログラム
JP2005242775A (ja) * 2004-02-27 2005-09-08 Omron Corp ゲートシステム
JP2007528524A (ja) * 2004-03-10 2007-10-11 松下電器産業株式会社 認証システム及び認証装置
JP4023469B2 (ja) * 2004-04-09 2007-12-19 村田機械株式会社 方向指示装置
US8358198B2 (en) * 2004-11-17 2013-01-22 Stanley Black & Decker, Inc. Portal system for a controlled space
US7337963B2 (en) * 2004-04-23 2008-03-04 Winware, Inc. Portal system for a controlled space
US7859417B2 (en) * 2004-04-23 2010-12-28 Winware, Inc. Object tracking in an enclosure
JP4424057B2 (ja) * 2004-05-10 2010-03-03 富士ゼロックス株式会社 学習装置およびプログラム
US7889381B2 (en) * 2004-05-28 2011-02-15 Fujifilm Corporation Photo service system
JP4606779B2 (ja) * 2004-06-07 2011-01-05 グローリー株式会社 画像認識装置、画像認識方法およびその方法をコンピュータに実行させるプログラム
EP1612716B1 (en) * 2004-06-28 2008-08-13 Fujitsu Limited User interface for image input in a biometric authentication device; corresponding biometric authentication device, method and program
JP4515850B2 (ja) 2004-07-30 2010-08-04 富士通株式会社 生体認証装置の誘導画面制御方法、生体認証装置及びそのプログラム
JP4459788B2 (ja) * 2004-11-16 2010-04-28 パナソニック株式会社 顔特徴照合装置、顔特徴照合方法、及びプログラム
US7593603B1 (en) * 2004-11-30 2009-09-22 Adobe Systems Incorporated Multi-behavior image correction tool
EP1840832A4 (en) * 2005-01-19 2013-02-06 Nec Corp PRINTING INFORMATION RECORDING APPARATUS, METHOD AND PROGRAM THEREOF, FILTERING SYSTEM
US20060170956A1 (en) * 2005-01-31 2006-08-03 Jung Edward K Shared image devices
US9910341B2 (en) * 2005-01-31 2018-03-06 The Invention Science Fund I, Llc Shared image device designation
US9124729B2 (en) * 2005-01-31 2015-09-01 The Invention Science Fund I, Llc Shared image device synchronization or designation
US20060174203A1 (en) * 2005-01-31 2006-08-03 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Viewfinder for shared image device
US20060187230A1 (en) * 2005-01-31 2006-08-24 Searete Llc Peripheral shared image device sharing
US9489717B2 (en) * 2005-01-31 2016-11-08 Invention Science Fund I, Llc Shared image device
US8902320B2 (en) * 2005-01-31 2014-12-02 The Invention Science Fund I, Llc Shared image device synchronization or designation
US9082456B2 (en) * 2005-01-31 2015-07-14 The Invention Science Fund I Llc Shared image device designation
US8606383B2 (en) * 2005-01-31 2013-12-10 The Invention Science Fund I, Llc Audio sharing
JP2006236244A (ja) * 2005-02-28 2006-09-07 Toshiba Corp 顔認証装置および入退場管理装置
JP4267584B2 (ja) * 2005-02-28 2009-05-27 株式会社東芝 機器制御装置及びその方法
US7693306B2 (en) * 2005-03-08 2010-04-06 Konami Gaming, Inc. System and method for capturing images from mobile devices for use with patron tracking system
JPWO2006098053A1 (ja) * 2005-03-15 2008-08-21 シャープ株式会社 携帯端末装置、携帯端末装置の画像情報照合方法、画像情報照合プログラムおよび記録媒体
US20090144391A1 (en) * 2007-11-30 2009-06-04 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Audio sharing
US9819490B2 (en) 2005-05-04 2017-11-14 Invention Science Fund I, Llc Regional proximity for shared image device(s)
US10003762B2 (en) 2005-04-26 2018-06-19 Invention Science Fund I, Llc Shared image devices
US9001215B2 (en) * 2005-06-02 2015-04-07 The Invention Science Fund I, Llc Estimating shared image device operational capabilities or resources
JP4772379B2 (ja) 2005-05-26 2011-09-14 株式会社東芝 人物検索装置、人物検索方法および入退場管理システム
JP4967259B2 (ja) * 2005-06-14 2012-07-04 船井電機株式会社 制御装置及び被制御機器
US8370639B2 (en) * 2005-06-16 2013-02-05 Sensible Vision, Inc. System and method for providing secure access to an electronic device using continuous facial biometrics
US20070009139A1 (en) * 2005-07-11 2007-01-11 Agere Systems Inc. Facial recognition device for a handheld electronic device and a method of using the same
JP2007072703A (ja) * 2005-09-06 2007-03-22 Fujifilm Corp コンテンツ提供装置、コンテンツ提供方法及びコンテンツ提供プログラム
JP4553138B2 (ja) * 2005-09-28 2010-09-29 株式会社デンソー 顔画像認証装置
US8369570B2 (en) 2005-09-28 2013-02-05 Facedouble, Inc. Method and system for tagging an image of an individual in a plurality of photos
US7450740B2 (en) 2005-09-28 2008-11-11 Facedouble, Inc. Image classification and information retrieval over wireless digital networks and the internet
US8311294B2 (en) * 2009-09-08 2012-11-13 Facedouble, Inc. Image classification and information retrieval over wireless digital networks and the internet
JP4645411B2 (ja) * 2005-10-28 2011-03-09 コニカミノルタホールディングス株式会社 認証システム、登録システム及びプログラム
KR100684456B1 (ko) 2005-10-28 2007-02-22 퍼스텍주식회사 유저인터페이스기능이 구현된 일체형 화상인증시스템 및방법
US8218080B2 (en) * 2005-12-05 2012-07-10 Samsung Electronics Co., Ltd. Personal settings, parental control, and energy saving control of television with digital video camera
US8848057B2 (en) * 2005-12-05 2014-09-30 Samsung Electronics Co., Ltd. Home security applications for television with digital video cameras
JP2007206941A (ja) * 2006-02-01 2007-08-16 Konica Minolta Business Technologies Inc 生体認証装置、生体認証システム及び生体データ管理方法
US7653221B2 (en) * 2006-01-31 2010-01-26 Fujifilm Corporation Method and apparatus for automatic eyeglasses detection and removal
DE602007010523D1 (de) * 2006-02-15 2010-12-30 Toshiba Kk Vorrichtung und Verfahren zur Personenidentifizierung
US8290220B2 (en) * 2006-03-01 2012-10-16 Nec Corporation Face authenticating apparatus, face authenticating method, and program
JP4725377B2 (ja) * 2006-03-15 2011-07-13 オムロン株式会社 顔画像登録装置、顔画像登録方法、顔画像登録プログラム、および記録媒体
JP4762805B2 (ja) * 2006-06-29 2011-08-31 富士通株式会社 生体認証方法及び生体認証システム
JP4745207B2 (ja) * 2006-12-08 2011-08-10 株式会社東芝 顔特徴点検出装置及びその方法
JP5018071B2 (ja) * 2006-12-20 2012-09-05 ソニー株式会社 照合方法、登録装置、照合装置及びプログラム
KR100795160B1 (ko) * 2007-03-22 2008-01-16 주식회사 아트닉스 얼굴영역검출장치 및 검출방법
WO2008120380A1 (ja) * 2007-03-29 2008-10-09 Fujitsu Limited 撮影制御装置、そのプログラム及び方法、撮影装置
JP5012247B2 (ja) * 2007-06-21 2012-08-29 ソニー株式会社 認証装置、入場管理装置、入退場管理装置、入場管理システム、入退場管理システム、認証処理方法およびプログラム
WO2009008074A1 (ja) * 2007-07-11 2009-01-15 Fujitsu Limited 利用者認証装置、利用者認証方法および利用者認証プログラム
US7882340B2 (en) * 2007-07-31 2011-02-01 Hewlett-Packard Development Company, L.P. Fingerprint reader remotely resetting system and method
KR101094051B1 (ko) * 2007-08-23 2011-12-19 후지쯔 가부시끼가이샤 생체 인증 시스템 및 컴퓨터 판독 가능한 기록 매체
JP2009089174A (ja) * 2007-10-01 2009-04-23 Fujifilm Corp デジタルカメラおよびその撮影方法
JP2009104599A (ja) * 2007-10-04 2009-05-14 Toshiba Corp 顔認証装置、顔認証方法、及び顔認証システム
JP4440294B2 (ja) * 2007-10-16 2010-03-24 シャープ株式会社 画像処理システム及び画像形成装置
JP4906685B2 (ja) * 2007-11-14 2012-03-28 キヤノン株式会社 撮像装置、その制御方法及びプログラム
JP3139277U (ja) * 2007-11-26 2008-02-07 株式会社Srj バーチャルスクールシステムおよびスクールシティシステム
US8558663B2 (en) * 2007-11-30 2013-10-15 Bank Of America Corporation Integration of facial recognition into cross channel authentication
JP5167791B2 (ja) * 2007-12-05 2013-03-21 日本電気株式会社 監視装置、監視方法、及び、監視プログラム
WO2009082814A1 (en) 2007-12-31 2009-07-09 Ray Ganong Method, system, and computer program for identification and sharing of digital images with face signatures
US9639740B2 (en) 2007-12-31 2017-05-02 Applied Recognition Inc. Face detection and recognition
US9721148B2 (en) 2007-12-31 2017-08-01 Applied Recognition Inc. Face detection and recognition
US10015449B2 (en) 2013-10-11 2018-07-03 Stmicroelectronics, Inc. Method and apparatus for managing provisioning of an imaging system
JP4448178B2 (ja) * 2008-01-24 2010-04-07 東芝テック株式会社 商品販売データ処理装置
US8090904B2 (en) * 2008-02-01 2012-01-03 Cru Acquisition Group, Llc Reduced hard-drive-capacity detection device
JP2009223523A (ja) * 2008-03-14 2009-10-01 Seiko Epson Corp 画像処理装置、画像処理方法、画像処理のためのコンピュータプログラム
JP2009223524A (ja) * 2008-03-14 2009-10-01 Seiko Epson Corp 画像処理装置、画像処理方法、画像処理のためのコンピュータプログラム
JP2009223527A (ja) * 2008-03-14 2009-10-01 Seiko Epson Corp 画像処理装置、画像処理方法、画像処理のためのコンピュータプログラム
JP5211797B2 (ja) * 2008-03-26 2013-06-12 日本電気株式会社 認証システム、認証方法および認証用プログラム
JP4991621B2 (ja) * 2008-04-17 2012-08-01 キヤノン株式会社 撮像装置
JP5251547B2 (ja) * 2008-06-06 2013-07-31 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
US9405968B2 (en) * 2008-07-21 2016-08-02 Facefirst, Inc Managed notification system
KR20100010860A (ko) * 2008-07-23 2010-02-02 엘지전자 주식회사 이동 단말기 및 그의 이벤트 제어방법
US20100088746A1 (en) * 2008-10-08 2010-04-08 Sony Corporation Secure ebook techniques
JP2010113458A (ja) * 2008-11-05 2010-05-20 Konica Minolta Business Technologies Inc プログラム、画像処理システムおよび画像処理装置
PT2382605T (pt) 2009-01-07 2020-10-12 Magnetic Autocontrol Gmbh Dispositivo para verificar a passagem de pessoas
KR100925971B1 (ko) * 2009-01-23 2009-11-09 허익준 중앙접근제어유닛
JP2010231350A (ja) * 2009-03-26 2010-10-14 Toshiba Corp 人物識別装置、そのプログラム、及び、その方法
US8380004B1 (en) * 2009-06-03 2013-02-19 Google Inc. Object image matching and applications thereof
JP2010286937A (ja) * 2009-06-10 2010-12-24 Hitachi Ltd 生体認証方法、及び、生体認証に用いるクライアント端末、認証サーバ
JP5304509B2 (ja) * 2009-07-23 2013-10-02 コニカミノルタ株式会社 認証方法、認証装置および認証処理プログラム
US8352561B1 (en) 2009-07-24 2013-01-08 Google Inc. Electronic communication reminder technology
JP5382127B2 (ja) * 2009-09-11 2014-01-08 富士通株式会社 生体認証装置、生体認証システム、及び生体認証方法
US8131848B1 (en) 2009-09-29 2012-03-06 Jason Adam Denise Image analysis and communication device control technology
US8286085B1 (en) 2009-10-04 2012-10-09 Jason Adam Denise Attachment suggestion technology
KR101634247B1 (ko) * 2009-12-04 2016-07-08 삼성전자주식회사 피사체 인식을 알리는 디지털 촬영 장치, 상기 디지털 촬영 장치의 제어 방법
JP2011124819A (ja) * 2009-12-11 2011-06-23 Sanyo Electric Co Ltd 電子カメラ
JP2011130043A (ja) * 2009-12-16 2011-06-30 Sanyo Electric Co Ltd 電子カメラ
CN102137077A (zh) * 2010-01-26 2011-07-27 凹凸电子(武汉)有限公司 访问控制系统和采用计算机系统控制访问权限的方法
US8532343B1 (en) * 2010-04-16 2013-09-10 Steven Jay Freedman System for non-repudiable registration of an online identity
JP5669082B2 (ja) * 2010-04-19 2015-02-12 パナソニックIpマネジメント株式会社 照合装置
TWI405117B (zh) * 2010-07-21 2013-08-11 Mitac Int Corp 手持式移動裝置及其快速顯示網路社群好友圖像方法
US9202091B2 (en) * 2010-09-02 2015-12-01 Intelleflex Corporation RFID reader with camera, video, and/or audio capture device
WO2012036692A1 (en) * 2010-09-17 2012-03-22 Utc Fire & Security Corporation Security device with security image update capability
TWI427544B (zh) * 2010-09-20 2014-02-21 Egis Technology Inc 具智能學習功能之生物特徵辨識裝置及其方法
US20120076368A1 (en) * 2010-09-27 2012-03-29 David Staudacher Face identification based on facial feature changes
TW201216107A (en) * 2010-10-14 2012-04-16 Hon Hai Prec Ind Co Ltd Electronic device and method for obtaining information of an illegal user of the electronic device
CN103221984B (zh) * 2010-11-19 2016-10-05 株式会社尼康 引导装置、检测装置以及姿势状态判定装置
KR101058592B1 (ko) * 2010-12-14 2011-08-23 주식회사 포드림 영상정보 오남용 감사 시스템
JP5730000B2 (ja) * 2010-12-17 2015-06-03 グローリー株式会社 顔照合システム、顔照合装置及び顔照合方法
JP5794410B2 (ja) * 2010-12-20 2015-10-14 日本電気株式会社 認証カード、認証システム、ガイダンス方法及びプログラム
US9047464B2 (en) * 2011-04-11 2015-06-02 NSS Lab Works LLC Continuous monitoring of computer user and computer activities
US9552376B2 (en) 2011-06-09 2017-01-24 MemoryWeb, LLC Method and apparatus for managing digital files
KR101880450B1 (ko) * 2011-06-22 2018-07-23 삼성전자주식회사 티브이에서 휴대용 단말을 이용한 서비스 제공 방법 및 장치
TWI493475B (zh) * 2011-07-27 2015-07-21 Icp Electronics Inc 判斷凸多邊形影像物件之方法
US8548207B2 (en) 2011-08-15 2013-10-01 Daon Holdings Limited Method of host-directed illumination and system for conducting host-directed illumination
DE102012216191A1 (de) * 2011-09-14 2013-03-14 Hitachi Information & Communication Engineering, Ltd. Authentifizierungssystem
KR101381439B1 (ko) * 2011-09-15 2014-04-04 가부시끼가이샤 도시바 얼굴 인식 장치 및 얼굴 인식 방법
JP6161271B2 (ja) * 2011-12-22 2017-07-12 キヤノン株式会社 情報処理装置、その制御方法、及びプログラム
US9519769B2 (en) * 2012-01-09 2016-12-13 Sensible Vision, Inc. System and method for disabling secure access to an electronic device using detection of a predetermined device orientation
US9202105B1 (en) 2012-01-13 2015-12-01 Amazon Technologies, Inc. Image analysis for user authentication
JP6003124B2 (ja) 2012-03-15 2016-10-05 オムロン株式会社 認証装置、認証装置の制御方法、制御プログラム、および記録媒体
US9179982B2 (en) * 2012-03-20 2015-11-10 Varian Medical Systems, Inc. Method and system for automatic patient identification
US8792677B2 (en) * 2012-04-19 2014-07-29 Intelligence Based Integrated Security Systems, Inc. Large venue security method
RS54229B1 (en) 2012-06-14 2015-12-31 Vlatacom D.O.O. BIOMETRIC ACCESS CONTROL SYSTEM AND PROCEDURE
US10002297B2 (en) * 2012-06-20 2018-06-19 Imprivata, Inc. Active presence detection with depth sensing
JP6016489B2 (ja) 2012-07-09 2016-10-26 キヤノン株式会社 画像処理装置、画像処理装置の制御方法、プログラム
JP6074182B2 (ja) * 2012-07-09 2017-02-01 キヤノン株式会社 画像処理装置及び画像処理方法、プログラム
JP5553866B2 (ja) * 2012-07-23 2014-07-16 東芝テック株式会社 商品認識装置及び認識辞書追加プログラム
JP6132490B2 (ja) * 2012-08-20 2017-05-24 キヤノン株式会社 認証装置、認証方法、およびプログラム
US20140067679A1 (en) * 2012-08-28 2014-03-06 Solink Corporation Transaction Verification System
KR20140033701A (ko) * 2012-09-10 2014-03-19 엘에스산전 주식회사 운전자 생체정보를 이용한 열차 제어 시스템
JP5805040B2 (ja) * 2012-09-25 2015-11-04 ビッグローブ株式会社 人物認証用辞書更新方法、人物認証用辞書更新装置、人物認証用辞書更新プログラム及び人物認証システム
JP5668042B2 (ja) * 2012-10-31 2015-02-12 東芝テック株式会社 商品読取装置、商品販売データ処理装置および商品読取プログラム
JP5747014B2 (ja) * 2012-11-05 2015-07-08 東芝テック株式会社 商品認識装置及び商品認識プログラム
JP5707375B2 (ja) * 2012-11-05 2015-04-30 東芝テック株式会社 商品認識装置及び商品認識プログラム
JP6021937B2 (ja) * 2012-11-13 2016-11-09 三菱電機株式会社 空気調和システム及び中央管理装置
US20150325091A1 (en) * 2012-11-27 2015-11-12 Security Solutions & Management Llc Identification acquisition device for reducing the likelihood of incidence of a lapse in proper discharge of a security procedure
KR101443021B1 (ko) * 2013-03-08 2014-09-22 주식회사 슈프리마 얼굴 등록 장치, 방법, 포즈 변화 유도 장치 및 얼굴 인식 장치
KR102057947B1 (ko) 2013-04-01 2019-12-20 삼성전자주식회사 사용자 인증을 수행하는 디스플레이 장치 및 그 사용자 인증 방법
JP2014215877A (ja) * 2013-04-26 2014-11-17 株式会社デンソー 物体検出装置
US20140341444A1 (en) * 2013-05-14 2014-11-20 Tencent Technology (Shenzhen) Company Limited Systems and Methods for User Login
TWI508057B (zh) * 2013-07-15 2015-11-11 Chunghwa Picture Tubes Ltd 語音辨識系統以及方法
JP5826800B2 (ja) * 2013-07-17 2015-12-02 東芝テック株式会社 認識辞書評価装置及び認識辞書評価プログラム
JP6481249B2 (ja) * 2013-07-29 2019-03-13 オムロン株式会社 プログラマブル表示器、制御方法、およびプログラム
JP6307807B2 (ja) * 2013-07-29 2018-04-11 オムロン株式会社 プログラマブル表示器、表示制御方法、およびプログラム
JP6295534B2 (ja) * 2013-07-29 2018-03-20 オムロン株式会社 プログラマブル表示器、制御方法、およびプログラム
CN105339926A (zh) * 2013-08-06 2016-02-17 英特尔公司 情绪相关的查询处理
US9047504B1 (en) * 2013-08-19 2015-06-02 Amazon Technologies, Inc. Combined cues for face detection in computing devices
CN104462891A (zh) * 2013-09-17 2015-03-25 联想(北京)有限公司 一种信息处理的方法和设备
JP6132719B2 (ja) 2013-09-18 2017-05-24 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置
US9367939B2 (en) * 2013-10-22 2016-06-14 Nokia Technologies Oy Relevance based visual media item modification
EP4057215A1 (en) * 2013-10-22 2022-09-14 Eyenuk, Inc. Systems and methods for automated analysis of retinal images
JP6000929B2 (ja) 2013-11-07 2016-10-05 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置
KR20150071038A (ko) * 2013-12-17 2015-06-26 삼성전자주식회사 전자 장치를 이용한 소셜 네트워크 서비스 제공 방법 및 이를 구현한 장치
US10068149B2 (en) * 2013-12-27 2018-09-04 Intel Corporation Image processing utilizing reference images
US10741041B2 (en) * 2014-01-06 2020-08-11 Binatone Electronics International Limited Dual mode baby monitoring
JP6141208B2 (ja) * 2014-01-08 2017-06-07 東芝テック株式会社 情報処理装置及びプログラム
KR102197098B1 (ko) * 2014-02-07 2020-12-30 삼성전자주식회사 콘텐츠 추천 방법 및 장치
EP2919142B1 (en) * 2014-03-14 2023-02-22 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing health status information
KR102200950B1 (ko) * 2014-03-14 2021-01-12 삼성전자주식회사 오브젝트 인식 장치 및 그 제어 방법
EP3158500A1 (en) * 2014-06-23 2017-04-26 British Telecommunications Public Limited Company Biometric identification
EP3158503B1 (en) 2014-06-23 2023-05-24 British Telecommunications public limited company Biometric identification
US10803160B2 (en) 2014-08-28 2020-10-13 Facetec, Inc. Method to verify and identify blockchain with user question data
US10698995B2 (en) 2014-08-28 2020-06-30 Facetec, Inc. Method to verify identity using a previously collected biometric image/data
US10614204B2 (en) 2014-08-28 2020-04-07 Facetec, Inc. Facial recognition authentication system including path parameters
US10915618B2 (en) 2014-08-28 2021-02-09 Facetec, Inc. Method to add remotely collected biometric images / templates to a database record of personal information
CA2902093C (en) 2014-08-28 2023-03-07 Kevin Alan Tussy Facial recognition authentication system including path parameters
US11256792B2 (en) 2014-08-28 2022-02-22 Facetec, Inc. Method and apparatus for creation and use of digital identification
TWI584146B (zh) * 2014-08-29 2017-05-21 鴻海精密工業股份有限公司 基於人臉識別的整合登錄系統及方法
US9456070B2 (en) 2014-09-11 2016-09-27 Ebay Inc. Methods and systems for recalling second party interactions with mobile devices
CN105893920B (zh) * 2015-01-26 2019-12-27 阿里巴巴集团控股有限公司 一种人脸活体检测方法和装置
JP6459059B2 (ja) * 2015-03-30 2019-01-30 パナソニックIpマネジメント株式会社 カメラ制御方法及びカメラ制御システム
US9881205B2 (en) * 2015-05-29 2018-01-30 Aware, Inc. Facial identification techniques
CN108027883A (zh) * 2015-06-30 2018-05-11 美国日本电气公司 面部识别系统
CN105069425A (zh) * 2015-07-31 2015-11-18 小米科技有限责任公司 视频异常信息提醒方法及装置
US20170046507A1 (en) * 2015-08-10 2017-02-16 International Business Machines Corporation Continuous facial recognition for adaptive data restriction
CN105631996B (zh) * 2015-12-25 2018-02-16 成都比善科技开发有限公司 动态更新生物特征信息的智能门禁系统及方法
JPWO2017146161A1 (ja) * 2016-02-26 2018-12-27 日本電気株式会社 顔照合システム、顔照合装置、顔照合方法、及び記録媒体
JP6787391B2 (ja) * 2016-02-26 2020-11-18 日本電気株式会社 顔照合システム、顔照合方法、及びプログラム
US10339367B2 (en) * 2016-03-29 2019-07-02 Microsoft Technology Licensing, Llc Recognizing a face and providing feedback on the face-recognition process
USD987653S1 (en) 2016-04-26 2023-05-30 Facetec, Inc. Display screen or portion thereof with graphical user interface
JP2018045309A (ja) * 2016-09-12 2018-03-22 株式会社東芝 特徴量抽出装置および認証システム
JP6773493B2 (ja) 2016-09-14 2020-10-21 株式会社東芝 検出装置、検出方法、および検出プログラム
JP6725381B2 (ja) 2016-09-20 2020-07-15 株式会社東芝 画像照合装置および画像照合方法
EP3312762B1 (en) * 2016-10-18 2023-03-01 Axis AB Method and system for tracking an object in a defined area
JP6434480B2 (ja) * 2016-12-19 2018-12-05 ファナック株式会社 制御装置
TWI639760B (zh) * 2017-01-26 2018-11-01 一德金屬工業股份有限公司 Access control system
US10824703B1 (en) * 2017-02-01 2020-11-03 United Services Automobile Association (Usaa) Authentication based on motion and biometric data
CN109145679B (zh) * 2017-06-15 2020-05-12 杭州海康威视数字技术股份有限公司 一种发出预警信息的方法、装置及系统
CN107491674B (zh) 2017-07-27 2020-04-07 阿里巴巴集团控股有限公司 基于特征信息进行用户验证的方法及装置
CN108429782B (zh) * 2017-09-12 2020-11-06 腾讯科技(深圳)有限公司 信息推送方法、装置、终端及服务器
JP6409929B1 (ja) 2017-09-19 2018-10-24 日本電気株式会社 照合システム
JP6544404B2 (ja) * 2017-09-19 2019-07-17 日本電気株式会社 照合システム
JP6921694B2 (ja) * 2017-09-21 2021-08-18 株式会社東芝 監視システム
CN107665361A (zh) * 2017-09-30 2018-02-06 珠海芯桥科技有限公司 一种基于人脸识别的客流计数方法
CN109841140B (zh) * 2017-11-28 2021-04-27 合肥欣奕华智能机器有限公司 示教器及其操作方法、计算装置和计算机可读介质
US11030221B2 (en) * 2017-12-22 2021-06-08 Permutive Limited System for fast and secure content provision
JP6981265B2 (ja) * 2018-01-11 2021-12-15 富士通株式会社 生体認証装置、生体認証方法、および生体認証プログラム
FR3077658B1 (fr) * 2018-02-06 2020-07-17 Idemia Identity And Security Procede d'authentification d'un visage
US10685251B2 (en) 2018-03-13 2020-06-16 Daon Holdings Limited Methods and systems for detecting user liveness
CN110490026A (zh) * 2018-05-14 2019-11-22 阿里巴巴集团控股有限公司 验证对象的方法、装置和系统
US10748006B1 (en) * 2018-08-27 2020-08-18 Facebook, Inc. Storylines: group generation based on facial recognition
US10990654B1 (en) * 2018-09-26 2021-04-27 NortonLifeLock, Inc. Age-based app lock
JP7115551B2 (ja) * 2018-10-12 2022-08-09 日本電気株式会社 装置、方法及びプログラム
WO2020079318A1 (en) * 2018-10-16 2020-04-23 Kone Corporation A transportation infrastructure device
US11275819B2 (en) 2018-12-05 2022-03-15 Bank Of America Corporation Generative adversarial network training and feature extraction for biometric authentication
CN109671001A (zh) * 2018-12-11 2019-04-23 上海东冠通信建设有限公司 智慧社区安全监控系统及安全监控方法
US10936178B2 (en) 2019-01-07 2021-03-02 MemoryWeb, LLC Systems and methods for analyzing and organizing digital photos and videos
KR20200100481A (ko) * 2019-02-18 2020-08-26 삼성전자주식회사 생체 정보를 인증하기 위한 전자 장치 및 그의 동작 방법
JP7032350B2 (ja) 2019-04-15 2022-03-08 パナソニックi-PROセンシングソリューションズ株式会社 人物監視システムおよび人物監視方法
CN110209453B (zh) * 2019-05-28 2022-04-22 深圳市雷赛软件技术有限公司 基于驱动器的多对象自动刷新及显示方法及相关产品
JP7342606B2 (ja) * 2019-10-23 2023-09-12 日本電気株式会社 情報処理装置、アクセス制御方法及びアクセス制御プログラム
JP2021111201A (ja) * 2020-01-14 2021-08-02 パナソニックi−PROセンシングソリューションズ株式会社 顔認証システムおよび顔認証方法
CN112686800B (zh) * 2020-12-29 2023-07-07 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备及存储介质

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6488781A (en) 1987-09-30 1989-04-03 Toshiba Corp Individual certifying device
GB8926739D0 (en) * 1989-11-27 1990-01-17 De La Rue Syst Improvements relating to verification or authentication processing
JP2949555B2 (ja) * 1994-03-31 1999-09-13 富士通電装株式会社 指紋認識用辞書登録更新方法
JP3119558B2 (ja) 1994-05-16 2000-12-25 ホーユーテック株式会社 顔画像データ取り込み方法および装置並びにシステム
JPH0896128A (ja) * 1994-09-21 1996-04-12 Fujitsu Denso Ltd 指紋認識装置における辞書画像の更新方式
JP2964221B2 (ja) * 1995-10-05 1999-10-18 富士通電装株式会社 指紋登録方法及び指紋照合入退室管理システム
US6430307B1 (en) * 1996-06-18 2002-08-06 Matsushita Electric Industrial Co., Ltd. Feature extraction system and face image recognition system
JPH10134188A (ja) 1996-11-01 1998-05-22 Yamatake Honeywell Co Ltd 顔画像照合装置
US6118888A (en) * 1997-02-28 2000-09-12 Kabushiki Kaisha Toshiba Multi-modal interface apparatus and method
JP3564984B2 (ja) 1997-12-02 2004-09-15 オムロン株式会社 本人特定装置及び本人特定方法
JP3621245B2 (ja) 1997-12-12 2005-02-16 株式会社東芝 人物認識装置、人物認識方法、および、人物認識プログラムの記録媒体
JPH11191856A (ja) 1997-12-25 1999-07-13 Canon Inc 撮像装置および撮像方法
EP0944018B1 (en) * 1998-03-19 2011-08-24 Panasonic Corporation Method and apparatus for recognizing image pattern, method and apparatus for judging identity of image patterns, recording medium for recording the pattern recognizing method and recording medium for recording the pattern identity judging method
JP3580129B2 (ja) 1998-05-06 2004-10-20 オムロン株式会社 本人識別装置
JP4085470B2 (ja) 1998-05-29 2008-05-14 オムロン株式会社 個人識別装置、個人識別方法および個人識別プログラムを記録した記録媒体
JP4255999B2 (ja) 1998-10-20 2009-04-22 三菱電機株式会社 指紋照合装置
US6700998B1 (en) * 1999-04-23 2004-03-02 Oki Electric Industry Co, Ltd. Iris registration unit
JP2001005836A (ja) * 1999-04-23 2001-01-12 Oki Electric Ind Co Ltd アイリス登録システム
JP2001117877A (ja) 1999-10-19 2001-04-27 Yis Corporation Co Ltd 画像照合ログインシステム
JP2001266153A (ja) 2000-03-22 2001-09-28 Toshiba Corp 顔画像認識装置および通行制御装置
EP1136937B1 (en) * 2000-03-22 2006-05-10 Kabushiki Kaisha Toshiba Facial image forming recognition apparatus and a pass control apparatus
JP3575679B2 (ja) * 2000-03-31 2004-10-13 日本電気株式会社 顔照合方法と該照合方法を格納した記録媒体と顔照合装置
JP3481565B2 (ja) * 2000-07-10 2003-12-22 エヌイーシーコンピュータテクノ株式会社 運転免許証真贋チェック装置及び該装置を備えた自動現金取引機並びにプログラム記録媒体
JP4167390B2 (ja) * 2000-11-20 2008-10-15 日本電気株式会社 物体照合方法,物体照合装置,およびそのプログラムを記録した記録媒体
JP2002259980A (ja) * 2001-03-05 2002-09-13 Omron Corp 生体照合装置、生体照合システム、生体照合方法および登録データ更新方法
JP4177598B2 (ja) * 2001-05-25 2008-11-05 株式会社東芝 顔画像記録装置、情報管理システム、顔画像記録方法、及び情報管理方法
US20020178610A1 (en) * 2001-06-04 2002-12-05 Taiwan Paiho Limited Composite fabric sheet for use on sports shoes
JP2003108984A (ja) * 2001-07-27 2003-04-11 Toshiba Corp 顔画像認識装置、通行制御装置、顔画像認識方法、及び通行制御方法
TWI299471B (en) * 2001-08-24 2008-08-01 Toshiba Kk Person recognition apparatus
JP2003346149A (ja) * 2002-05-24 2003-12-05 Omron Corp 顔照合装置および生体情報照合装置
JP4013684B2 (ja) * 2002-07-23 2007-11-28 オムロン株式会社 個人認証システムにおける不正登録防止装置
JP4314016B2 (ja) * 2002-11-01 2009-08-12 株式会社東芝 人物認識装置および通行制御装置
JP2007148987A (ja) * 2005-11-30 2007-06-14 Toshiba Corp 顔認証システムおよび入退場管理システム
DE602007010523D1 (de) * 2006-02-15 2010-12-30 Toshiba Kk Vorrichtung und Verfahren zur Personenidentifizierung
JP2007249556A (ja) * 2006-03-15 2007-09-27 Fujitsu Ltd 生体情報を用いた個人認証システム,方法およびプログラム

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100901231B1 (ko) * 2006-09-06 2009-06-08 야마하 가부시키가이샤 생체 인증 장치, 생체 인증 방법 및 프로그램 명령어를포함하는 기계 판독가능 매체
US8417001B2 (en) 2008-09-05 2013-04-09 Fujitsu Limited Biometric authentication device, fake body judgment device, and biometric authentication method where biometric information value range is updated when subject is living body
KR101710200B1 (ko) * 2015-11-05 2017-02-24 광운대학교 산학협력단 얼굴 인식을 사용한 자동 출석관리 시스템 및 방법
KR20190038053A (ko) * 2017-09-29 2019-04-08 삼성전자주식회사 입력된 정보와 관련된 이미지를 제공하기 위한 전자 장치 및 그의 동작 방법
KR20200139015A (ko) * 2019-06-03 2020-12-11 계명대학교 산학협력단 Tprl 알고리즘을 이용하여 얼굴 이미지로부터 신원을 확인하는 시스템 및 그 구동 방법
JP2022123030A (ja) * 2020-10-28 2022-08-23 キヤノンマーケティングジャパン株式会社 情報処理装置、その制御方法とプログラム
JP7356060B2 (ja) 2020-10-28 2023-10-04 キヤノンマーケティングジャパン株式会社 情報処理装置、その制御方法とプログラム

Also Published As

Publication number Publication date
TW200723132A (en) 2007-06-16
US7454041B2 (en) 2008-11-18
TWI299471B (en) 2008-08-01
US20030039380A1 (en) 2003-02-27
EP1291807A2 (en) 2003-03-12
EP1291807A3 (en) 2004-03-03
EP1291807B1 (en) 2007-01-17
DE60217597T2 (de) 2007-10-18
US20070031010A1 (en) 2007-02-08
US7120278B2 (en) 2006-10-10
KR100495516B1 (ko) 2005-06-16
TWI278782B (en) 2007-04-11
DE60217597D1 (de) 2007-03-08

Similar Documents

Publication Publication Date Title
KR100495516B1 (ko) 개인인식장치
US7158657B2 (en) Face image recording system
JP4153691B2 (ja) 顔画像照合装置及び顔画像照合方法
TWI282941B (en) Entrance management apparatus and entrance management method by using face features identification
JP3469031B2 (ja) 顔画像登録装置及びその方法
JP2008071366A (ja) 顔画像照合装置、顔画像照合システム及び顔画像照合方法
JP4760049B2 (ja) 顔認証装置、その顔認証方法、その顔認証装置を組み込んだ電子機器およびその顔認証プログラムを記録した記録媒体
JP2008305400A (ja) 顔画像記録装置、及び顔画像記録方法
US11716330B2 (en) Mobile enrollment using a known biometric
JP2009064140A (ja) 個人認証装置及び個人認証管理システム
JP4521086B2 (ja) 顔画像認識装置及び顔画像認識方法
JP2004126813A (ja) 個人認証装置、個人認証方法、入退出管理装置及び入退出管理方法
JP2010009389A (ja) 辞書情報登録装置、辞書情報登録方法、顔認証装置および入退場管理システム
JPH09319877A (ja) 本人確認方法、本人確認装置及び入退室管理システム
JP2004078686A (ja) 個人認証装置、個人認証方法、通行制御装置および通行制御方法
JP2006099486A (ja) 入室管理システム
JP2005292994A (ja) 人物認識装置と通行制御装置
JP2005259158A (ja) 生体情報入力装置
JP2005063173A (ja) 生体認証装置および通行制御装置
JP2005107588A (ja) 人物照合システムおよび入退室管理システム
JP2004145395A (ja) 個人認証方法、及び個人認証システム
KR102538649B1 (ko) 탑승자 인증 기반 주차관리 방법 및 장치
JP2002279424A (ja) 個人認証装置および個人認証方法
JP2007304763A (ja) 顔画像照合装置
JP2010026809A (ja) 認証装置、及び認証装置への生体情報登録方法。

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130520

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20140502

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20150430

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20160509

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20170522

Year of fee payment: 13

FPAY Annual fee payment

Payment date: 20180516

Year of fee payment: 14

FPAY Annual fee payment

Payment date: 20190515

Year of fee payment: 15