KR100601963B1 - 시선을 이용한 인증 장치 및 그 방법 - Google Patents

시선을 이용한 인증 장치 및 그 방법 Download PDF

Info

Publication number
KR100601963B1
KR100601963B1 KR1020040066398A KR20040066398A KR100601963B1 KR 100601963 B1 KR100601963 B1 KR 100601963B1 KR 1020040066398 A KR1020040066398 A KR 1020040066398A KR 20040066398 A KR20040066398 A KR 20040066398A KR 100601963 B1 KR100601963 B1 KR 100601963B1
Authority
KR
South Korea
Prior art keywords
trajectory
pupil
image
photographing
axis
Prior art date
Application number
KR1020040066398A
Other languages
English (en)
Other versions
KR20060018063A (ko
Inventor
소병석
박태서
김윤상
이상국
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020040066398A priority Critical patent/KR100601963B1/ko
Priority to US11/206,076 priority patent/US20060039686A1/en
Publication of KR20060018063A publication Critical patent/KR20060018063A/ko
Application granted granted Critical
Publication of KR100601963B1 publication Critical patent/KR100601963B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/254—Analysis of motion involving subtraction of images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

시선을 이용한 인증 장치 및 그 방법이 개시된다. 촬영 축과 동일 축 상에서 발생하는 제1 조명을 기초로 눈동자를 촬영하여 제1 영상을 생성하고 촬영 축과 상이한 축 상에서 발생하는 제2 조명을 기초로 눈동자를 촬영하여 제2 영상을 생성한다. 그리고, 제1 영상 및 상기 제2 영상을 기초로 눈동자의 움직임을 추적하여 움직임에 의해 생성되는 궤적을 파악한 후 파악된 궤적과 인증용으로 미리 저장된 인증용 궤적의 동일성을 판단한다. 이로써, 비접촉식으로 동작하고 제3자에 의한 도용을 방지하는 인증 장치 및 방법을 구현할 수 있다.
적외선, 차영상, 궤적, 눈동자

Description

시선을 이용한 인증 장치 및 그 방법{Authentication apparatus and method using eye gaze}
도 1은 본 발명에 따른 시선을 이용한 인증 장치의 일 실시예의 구성을 도시한 도면,
도 2는 본 발명에 따른 카메라 및 적외선 발생부의 배치를 도시한 도면,
도 3a 내지 도 3c는 서로 다른 축에 위치한 적외선들을 조명으로 이용하여 눈동자를 촬영한 영상들 및 그 영상들의 차 영상을 도시한 도면,
도 4a 내지 도 4c는 본 발명에 따른 시선을 이용한 인증 장치의 적용 예를 도시한 도면,
도 5는 본 발명에 따른 시선을 이용한 인증 방법의 일 실시예의 흐름을 도시한 흐름도,
도 6은 본 발명에 따른 시선을 이용한 인증 방법의 다른 실시예의 흐름을 도시한 흐름도, 그리고,
도 7은 눈동자의 구조를 도시한 도면이다.
본 발명은 인증 장치 및 그 방법에 관한 것으로, 보다 상세하게는, 눈동자의 움직임을 이용한 인증 장치 및 그 방법에 관한 것이다.
일반 가정의 현관문, 연구소나 기업의 출입문, 금고, ATM(Automated-teller Machine) 기기 등 우리 주변에는 정당한 사용자만이 출입하고 이용하도록 하는 다양한 장치들이 있다. 따라서, 출입문, ATM 기기 등은 정당한 사용자를 인증하기 위한 인증 장치들을 포함하며, 종래의 일반적인 인증 장치들로는 키를 이용한 인증 장치, 비밀 번호를 이용한 인증 장치, 생체 인식을 이용한 인증 장치 등이 있다.
키를 이용한 인증 장치는 일반적으로 출입문 등에 사용되며, 사용자는 언제가 키를 휴대하고 있어야 하는 불편함이 있다. 또한, 키를 잃어버린 경우는 만능키를 이용하여 하며, 키를 도난당한 경우에는 제3자에 의해 침입될 우려가 있다.
비밀번호를 이용한 인증 장치는 키를 휴대하지 않아도 되는 장점은 있으나 비밀번호 입력시 제3자에 의해 파악될 위험이 있으며, 비밀번호 입력 판에 비밀번호 입력의 흔적이 남게되어 제3자가 흔적이 있는 몇 개의 번호의 조합을 통해 비밀번호를 유추할 위험성이 있다.
생체 인식을 이용한 인증 장치는 사용자의 생체 정보를 미리 입력받아 등록하여야 하는 불편함이 있으며, 특히, ATM 기기처럼 다수의 사람이 사용하는 경우에는 모든 사람들로부터 생체 정보를 등록 받아야 하는 불편함이 매우 크다.
본 발명이 이루고자 하는 기술적 과제는, 인증을 위한 암호가 제3자에 의해 도용되는 것을 방지하고, 사용자마다 고유한 암호를 사용할 수 있으며, 비접촉식으 로 인증과정을 수행하는 눈동자의 움직임을 이용한 인증 장치 및 그 방법을 제공하는 데 있다.
상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 시선을 이용한 인증 장치의 일 실시예는, 촬영 축과 동일 축 상에서 발생하는 제1 조명을 기초로 눈동자를 촬영하여 제1 영상을 생성하고 상기 촬영 축과 상이한 축 상에서 발생하는 제2 조명을 기초로 눈동자를 촬영하여 제2 영상을 생성하는 촬영부; 상기 제1 영상 및 상기 제2 영상을 기초로 상기 눈동자의 움직임을 추적하여 상기 움직임에 의해 생성되는 궤적을 파악하는 궤적 파악부; 및 상기 파악된 궤적과 인증용으로 미리 저장된 인증용 궤적의 동일성을 판단하는 동일성 판단부;를 포함한다.
상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 시선을 이용한 인증 방법의 일 실시예는, 촬영 축과 동일 축 상에서 발생하는 제1 조명을 기초로 눈동자를 촬영하여 제1 영상을 생성하고 상기 촬영 축과 상이한 축 상에서 발생하는 제2 조명을 기초로 눈동자를 촬영하여 제2 영상을 생성하는 단계; 상기 제1 영상 및 상기 제2 영상을 기초로 상기 눈동자의 움직임을 추적하여 상기 움직임에 의해 생성되는 궤적을 파악하는 단계; 및 상기 파악된 궤적과 인증용으로 미리 저장된 인증용 궤적의 동일성을 판단하는 단계;를 포함한다.
이로써, 비접촉식으로 동작하고 제3자에 의한 도용을 방지하는 인증 장치 및 방법을 구현할 수 있다.
이하에서, 첨부된 도면들을 참조하여 본 발명에 따른 시선을 이용한 인증 장 치 및 그 방법에 대해 상세히 설명한다.
도 1은 본 발명에 따른 시선을 이용한 인증 장치의 일 실시예의 구성을 도시한 도면이다.
도 1을 참조하면, 시선을 이용한 인증 장치는 촬영부(100), 궤적 파악부(110), 동일성 판단부(120), 데이터 베이스(130), 인증부(140) 및 표시부(150)로 구성된다.
촬영부(100)는 소정 촬영 영역 내에 사람의 눈동자가 위치하면 눈동자를 촬영하기 위하여 제1 적외선 발생부(102), 제2 적외선 발생부(104), 적외선 발생 제어부(106) 및 카메라(108)를 포함한다. 이하에서, 촬영부(100)의 각각의 구성을 살펴본다.
제1 적외선 발생부(102)는 카메라(108)의 촬영 축과 동일 축 상에 위치하고 카메라의 조명으로 사용되는 제1 적외선을 발생한다. 제2 적외선 발생부(104)는 카메라(108)의 촬영 축과 상이한 축 상에 위치하고 카메라의 조명으로 사용되는 제2 적외선을 발생한다. 카메라(108), 제1 적외선 발생부(102) 및 제2 적외선 발생부(104)의 배치에 대하여는 도 2를 참조하여 상세히 설명한다.
적외선 발생 제어부(106)는 제1 적외선 발생부(102) 및 제2 적외선 발생부(104)가 번갈아 가면서 제1 적외선 및 제2 적외선을 발생하도록 제어한다. 예를 들어, 아날로그 카메라로 눈동자를 촬영할 경우를 살펴보면, 적외선 발생 제어부(106)는 화면의 홀수 필드(odd field) 영상이 생성될 때에는 카메라 조명으로 제1 적외선 발생부(102)의 제1 적외선이 발생되도록 제어하고, 짝수 필드(even field) 영상이 생성될 때에는 카메라 조명으로 제2 적외선 발생부(104)의 제2 적외선이 발생되도록 제어한다. 그리고, CCD를 이용한 디지털 카메라로 촬영하는 경우를 살펴보면, 적외선 발생 제어부(106)는 셔터의 주기와 동기하여 제1 적외선 및 제2 적외선이 번갈아 가면서 발생되도록 제1 적외선 발생부(102) 및 제2 적외선 발생부(104)를 제어한다.
카메라(108)는 소정의 촬영 영역 내에 눈동자가 위치하면 CCD(Charge Coupled Device)를 이용한 디지털 카메라 또는 아날로그 카메라를 이용하여 눈동자를 촬영한다. 이 때 카메라(108)는 조명으로 제1 적외선 발생부(102) 및 제2 적외선 발생부(104)에 의해 발생한 제1 적외선 및 제2 적외선을 번갈아 가면서 이용한다. 카메라(108)의 촬영 영역은 1m 내로 설정하는 것이 바람직하며, 촬영 영역 내에 촬영 대상이 진입하였는지를 판단하기 위해 초음파, 적외선 또는 레이저를 이용한 거리센서(근접센서)를 이용한다.
카메라(108)는 제1 적외선을 조명으로 사용하여 눈동자를 촬영하여 제1 영상을 생성하고 제2 적외선을 조명으로 사용하여 눈동자를 촬영하여 제2 영상을 생성한다. 카메라(108)의 촬영 축과 동일 축 상에서 발생하는 제1 적외선을 이용하여 생성된 제1 영상의 동공 부분은 동공을 지나 망막에서 반사된 제1 적외선 때문에 밝게 보인다. 그러나, 카메라의 촬영 축과 상이한 축 상에서 발생하는 제2 적외선을 이용하여 생성된 제2 영상의 동공 부분은 제2 적외선이 각막에서 반사될 뿐 동공을 지나 망막에서 반사되지 않으므로 어둡게 보인다.
궤적 파악부(110)는 촬영부(100)에 의해 생성된 제1 영상 및 제2 영상을 기 초로 눈동자의 움직임에 의해 생성되는 궤적을 파악한다. 구체적으로, 궤적 파악부(110)는 차 영상 생성부(112), 눈동자 파악부(114) 및 궤적 추적부(116)로 구성된다.
차 영상 생성부(112)는 제1 영상과 제2 영상의 차로부터 차 영상을 생성한다. 위에서 살핀 바와 같이, 카메라 조명으로 사용한 적외선이 카메라의 촬영 축과 동일 축 상에 존재하는지의 여부에 따라 동공의 밝기에 차이가 생긴다. 따라서, 제1 영상과 제2 영상의 차를 구하면 동일한 밝기를 가지는 배경이 제거되고 밝기 차이가 나는 동공이 존재하는 영상을 얻을 수 있다. 차 영상 생성에 대하여는 도 3a 내지 도 3c를 참조하여 상세히 설명한다.
눈동자 파악부(114)는 차 영상 생성부(112)에 의해 생성된 차 영상으로부터 영상 처리 기술의 일종인 경계 추출(edge detection) 방법을 이용하여 밝게 빛나는 눈동자의 동공을 파악한다. 영상에서 소정 영역을 구분하는 영상 처리 기술은 경계 추출 이외의 방법도 존재하며 이러한 영상 처리 기술들은 현재 널리 알려진 기술이므로 여기서 자세한 설명은 생략한다. 다만, 본 발명은 현재의 영상 처리 기술을 이용한 경계 추출에서 정확성을 더 높이기 위하여 차 영상을 이용한다.
궤적 추적부(110)는 차 영상으로부터 파악된 동공의 움직임(즉, 시선의 움직임)이 만들어 내는 궤적을 추적한다. 궤적의 시작점과 끝점은 눈의 깜빡임, 소정 시간의 경과 등으로 파악할 수 있다. 또한, 궤적의 시작점은 눈동자가 촬영부(100)의 촬영 영역 내에 위치하고 소정 시간동안 움직임이 없으면 현재 눈동자의 위치를 궤적의 시작점으로 파악한다. 영상에서 파악된 소정 영역의 대상이 영상 내에서 움 직이는 것을 추적하는 영상 처리 기술은 현재의 기술분야에서 잘 알려진 기술이므로 여기서 상세한 설명은 생략한다.
예를 들어, 궤적 파악부(110)는 사용자가 촬영부(100)의 촬영 영역 내에 진입하여 카메라를 응시한 후 소정 시간 움직이지 않고 있는 경우(즉, 한 곳만을 응시하고 있는 경우)를 궤적 추적의 시작점으로 인식하고 이 후 일정 시간 동안 눈동자의 움직임을 추적하여 궤적을 파악한다. 또는, 궤적 파악부(110)는 사용자가 카메라를 응시한 후 눈을 깜빡이면 궤적 추적의 시작점으로 인식하고, 그 후 다시 한 번 눈을 깜빡이면 궤적 추적의 끝점으로 인식한다. 또 다른 방법으로, 사용자가 소정 스위치를 누름으로써 궤적 파악부(110)가 궤적 추적의 시작점 및 끝점을 구분하도록 할 수 있다.
동일성 판단부(120)는 궤적 파악부(110)에 의해 파악된 궤적과 인증용으로 데이터베이스(130)에 미리 저장된 인증용 궤적의 동일성을 판단한다. 예를 들어, 데이터베이스(130)에 저장된 인증용 궤적이 '좌측상단 -> 우측상단 -> 좌측하단 -> 우측하단 -> 좌측상단'의 패턴을 나타낸다고 가정하면, 동일성 판단부는 궤적 파악부에 의해 파악된 눈동자의 궤적(즉, 시선이 움직인 궤적)이 '좌측상단 -> 우측상단 -> 좌측하단 -> 우측하단 -> 좌측상단'의 패턴으로 움직였는지를 판단한다.
인증부(140)는 동일성 판단부(120)에 의해 판단된 동일성이 일정 임계치 이상이면 인증 성공으로, 그렇지 않으면 인증 실패로 판단한다.
표시부(150)는 사용자로 하여금 눈동자의 궤적 추적의 시작 및 끝(즉, 암호 입력의 시작 및 끝), 인증 성공 여부 등을 음성 또는 LED 등을 통해 표시한다.
도 2는 본 발명에 따른 카메라 및 적외선 발생부의 배치를 도시한 도면이다.
도 2를 참조하면, 본 발명에 따른 촬영부(100)는 카메라(200), 제1 적외선 발생부(210), 제2 적외선 발생부(220)를 포함한다. 제1 적외선 발생부(210)는 적외선을 발생하는 다수의 램프들로 구성되며 램프들은 카메라의 촬영 축과 동일 축 상에 위치하도록 카메라 렌즈의 둘레에 원형으로 배치된다. 제2 적외선 발생부(220)는 적외선을 발생하는 다수의 램프들로 구성되며 램프들은 카메라의 촬영 축과 상이한 축에 위치하기 위하여 카메라 렌즈와 소정 거리 떨어진 양옆에 배치된다.
도 3a 내지 도 3c는 서로 다른 축에 위치한 적외선들을 조명으로 이용하여 눈동자를 촬영한 영상들 및 그 영상들의 차 영상을 도시한 도면이다. 그리고, 도 7은 눈동자의 구조를 도시한 도면이다. 이하에서, 도 7을 함께 참조하여 설명한다.
도 3a는 카메라(108,200)의 촬영 축과 동일 축 상에 존재하는 제1 적외선 발생부(102,210)에 의해 발생한 제1 적외선을 조명으로 하여 눈동자를 촬영한 영상 및 그 영상의 밝기 스펙트럼을 도시한 도면이다. 제1 적외선 발생부(102,210)에서 발생하는 제1 적외선은 눈동자의 각막(710)에서 반사될 뿐만 아니라 동공(700)을 통과한 제1 적외선이 망막(720)에서 반사된다. 따라서, 제1 적외선을 이용한 눈동자의 영상에 대한 밝기 스펙트럼에는 각막(710)에 의해 반사되는 반짝임(glint)(302) 뿐만 아니라 동공에 의해 밝아지는 현상(bright eye)(304)이 발생한다.
도 3b는 카메라(108,200)의 촬영 축과 상이한 축 상에 존재하는 제2 적외선 발생부(104,220)에 의해 발생하는 제2 적외선을 조명으로 하여 눈동자를 촬영한 영 상 및 그 영상의 밝기 스펙트럼을 도시한 도면이다. 제2 적외선(104,220)은 카메라(108,200)의 촬영 축과 상이한 방향에 위치함으로 인해 눈동자의 각막(710)에서만 반사될 뿐 동공(700)을 지나 망막(720)에서 반사되지 않는다. 따라서, 제2 적외선을 이용하여 촬영한 눈동자에 대한 밝기 스펙트럼에서는 각막에 의한 반짝임(glint)(302)만 나타날 뿐 동공에 의해 밝아지는 현상(bright eye)은 발생하지 않는다(306).
도 3a 및 도 3b의 영상은 번갈아 가면서 생성된다. 예를 들어, 아날로그 영상의 경우 짝수 필드 영상 및 홀수 필드 영상이 생성되므로 짝수 필드 영상의 경우에는 제1 적외선을 조명으로 촬영하고, 홀수 필드 영상의 경우에는 제2 적외선을 조명으로 촬영한다.
도 3c는 도 3a의 영상과 도 3b의 영상의 차를 통해 구해진 차 영상(difference image)을 도시한 도면이다. 도 3a의 영상과 도 3b의 영상의 차이는 위에서 살핀 바와 같이 동공에 의해 밝아지는 현상(bright eye)(304)에서만 차이가 있을 뿐 나머지 부분의 밝기 스펙트럼은 동일하다. 따라서, 도 3a의 영상과 도 3b의 영상의 차이를 구하면 밝기의 차이가 있는 동공이 나타나는 차 영상이 구해진다. 그리고, 이러한 차 영상으로부터 동공을 경계 추출(edge detection) 방법을 이용하여 용이하게 파악할 수 있다. 즉, 차 영상에서 소정 임계값(threshold)을 초과하는 부분(즉, 동공 부분)을 파악하고 그 부분의 움직임을 추적하여 눈동자의 궤적을 파악할 수 있다.
도 4a 내지 도 4c는 본 발명에 따른 시선을 이용한 인증 장치의 적용 예를 도시한 도면이다.
도 4a를 참조하면, 시선을 이용한 인증 장치는 출입문에 적용되면, 사용자는 출입문에 설치된 카메라를 바라보면서 눈동자를 일정한 궤적으로 움직인다. 그러면, 인증 장치는 눈동자의 움직임에 의해 파악된 궤적과 미리 저장된 인증용 궤적의 동일성을 조사하여, 양자가 동일하다면 문이 열리도록 한다.
도 4b 및 도 4c를 참조하면, 사용자의 궤적 암기를 용이하게 하고 눈동자의 움직임이 보다 명확하도록 하기 위하여 인증 장치의 외부에 번호판 또는 소정의 표식을 부착한다. 사용자는 번호판의 소정의 숫자 배열 또는 소정의 표식을 따라 눈동자를 움직인다.
이 외에 본 발명에 따른 시선을 이용한 인증 장치는 핸드폰, PDA 등의 잠금 장치 및 ATM 기기의 인증 장치로 사용될 수 있다.
도 5는 본 발명에 따른 시선을 이용한 인증 방법의 일 실시예의 흐름을 도시한 흐름도이다.
도 1 및 도 5를 참조하면, 촬영부(100)는 사용자가 촬영 영역 내에 위치하면 촬영 축과 동일한 축에서 발생한 제1 적외선을 이용하여 촬영한 제1 영상을 생성하고, 촬영 축과 상이한 축에서 발생한 제2 적외선을 이용하여 촬영한 제2 영상을 생성한다(S500).
궤적 파악부(110)는 제1 영상과 제2 영상간의 차로부터 차 영상을 구하고, 동공에 의해 밝아지는 현상(bright eye)를 이용하여 차 영상으로부터 소정 임계값 이상의 밝기는 가지는 동공을 파악한다(S510). 그리고, 궤적 파악부(110)는 동공의 움직임에 의해 생성되는 궤적을 추적한다(S510).
동일성 판단부(120)는 인증을 위해 미리 저장된 인증용 궤적과 궤적 파악부(110)에 의해 파악된 궤적의 동일성을 판단한다(S520). 인증부(140)는 동일성 판단부(120)에 의해 인증용 궤적과 궤적 파악부(110)에 의해 파악된 궤적의 동일성이 소정 임계치 이상이면 인증 성공으로 판단하고, 그렇지 않으면 인증 실패로 판단한다(S550).
도 6은 본 발명에 따른 시선을 이용한 인증 방법의 다른 실시예의 흐름을 도시한 흐름도이다.
도 1 및 도 6을 참조하면, 촬영부(100)는 사용자가 촬영 영역 내에 진입하면 촬영을 시작한다(S600). 사용자가 촬영 내에 진입하였는가는 초음파, 적외선 또는 레이저 등으로 구성된 근접 센서를 이용하여 판단할 수 있다. 그리고, 촬영부(100)는 촬영 축과 동일 축에서 발생하는 제1 적외선 및 촬영 축과 상이한 축에서 발생하는 제2 적외선을 각각 조명으로 사용하여 촬영한 영상으로부터 눈동자를 파악한다(S605).
눈동자가 소정 시간동안 움직이지 않으면(S610), 눈동자가 현재 위치한 곳을 궤적의 시작점으로 하고, 그 사실을 소리 또는 불빛을 통해 사용자가 인지하도록 표시한다(S615). 그리고, 궤적 파악부(110)는 눈동자의 움직임을 추적하여 궤적을 파악한다(S620).
일정 시간이 경과하면 동일성 판단부(120)는 궤적 파악부(110)에 의해 파악된 눈동자의 궤적과 미리 인증용으로 저장된 인증용 궤적이 소정 임계치 이상으로 동일한지를 파악한다(S625). 그리고, 인증부(140)는 양 궤적이 소정 임계치 이상으로 동일하면 인증 성공으로 판단하고(S630), 그렇지 않으면 인증 실패로 판단한다(S635).
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
본 발명은, 눈동자의 궤적을 인증을 위한 암호로 이용함으로써, 제3자에 의한 인증 암호의 도용을 방지할 수 있다. 또한, 비접촉식으로 동작하므로 짐을 들고 있는 경우 짐을 바닥에 내려놓을 필요가 없으며, 암호로 이용할 수 있는 궤적의 패턴이 매우 많다.

Claims (15)

  1. 촬영 축과 동일 축 상에서 발생하는 제1 조명을 기초로 눈동자를 촬영하여 제1 영상을 생성하고 상기 촬영 축과 상이한 축 상에서 발생하는 제2 조명을 기초로 상기 눈동자를 촬영하여 제2 영상을 생성하는 촬영부;
    상기 제1 영상 및 상기 제2 영상의 차 영상을 기초로 상기 눈동자의 움직임을 추적하여 상기 움직임에 의해 생성되는 궤적을 파악하는 궤적 파악부; 및
    상기 파악된 궤적과 인증용으로 미리 저장된 인증용 궤적의 동일성을 판단하는 동일성 판단부;를 포함하는 것을 특징으로 하는 시선을 이용한 인증 장치.
  2. 제 1항에 있어서, 상기 촬영부는,
    상기 카메라의 촬영 축과 동일 축에 위치하여 상기 제1 조명으로 제1 적외선을 발생하는 제1 적외선 발생부;
    상기 카메라의 촬영 축과 다른 축에 위치하여 상기 제2 조명으로 제2 적외선을 발생하는 제2 적외선 발생부;
    상기 제1 적외선 발생부 및 상기 제2 적외선 발생부가 번갈아 가면서 상기 제1 적외선 및 상기 제2 적외선을 발생하도록 제어하는 적외선 발생 제어부; 및
    상기 제1 적외선 및 상기 제2 적외선을 기초로 상기 눈동자를 촬영하여 상기 제1 영상 및 상기 제2 영상을 생성하는 카메라;를 포함하는 것을 특징으로 하는 시선을 이용한 인증 장치.
  3. 제 2항에 있어서,
    상기 제1 적외선 발생부는 제1 적외선을 발생하는 다수의 제1 램프들을 포함하고, 상기 제1 램프들은 상기 카메라의 렌즈 주위에 카메라의 촬영 축과 일치하도록 원형으로 배치되고,
    상기 제2 적외선 발생부는 제2 적외선을 발생하는 다수의 제2 램프들을 포함하고, 상기 제2 램프들은 카메라 렌즈와 소정 거리가 떨어진 곳에 위치하여 상기 카메라의 촬영 축과 상이한 축에 배치되는 것을 특징으로 하는 시선을 이용한 인증 장치.
  4. 제 1항에 있어서, 상기 궤적 파악부는,
    상기 제1 영상 및 상기 제2 영상을 기초로 차 영상을 생성하는 차 영상 생성부;
    상기 차 영상으로부터 눈의 동공을 파악하는 눈동자 파악부;
    상기 눈의 동공이 움직이는 궤적을 추적하는 궤적 추적부;를 포함하는 것을 특징으로 하는 시선을 이용한 인증 장치.
  5. 제 1항에 있어서, 상기 궤적 파악부는,
    상기 촬영부의 촬영 영역 내에 위치한 눈동자가 소정 시간 움직임이 없으면 상기 눈동자의 현재 위치를 궤적의 시작점으로 인식하는 것을 특징으로 하는 시선을 이용한 인증 장치.
  6. 제 1항에 있어서, 상기 궤적 파악부는
    눈동자의 깜빡임, 소정 시간의 경과 또는 외부 스위치를 통한 입력을 기초로 눈동자의 궤적 추적을 위한 시작점 및 끝점을 인식하는 것을 특징으로 하는 시선을 이용한 인증 장치.
  7. 제 1항에 있어서,
    상기 궤적 파악부에 의해 파악된 궤적과 상기 인증용 궤적의 동일성이 인정되면 인증 성공으로 판단하는 인증부;를 더 포함하는 것을 특징으로 하는 시선을 이용한 인증 장치.
  8. 제 1항에 있어서,
    상기 궤적 추적의 시작, 궤적 추적 완료 및 인증 성공 여부를 시각 또는 청각을 통해 인지할 수 있도록 표시하는 표시부;를 더 포함하는 것을 특징으로 하는 시선을 이용한 인증 장치.
  9. 촬영 축과 동일 축 상에서 발생하는 제1 조명을 기초로 눈동자를 촬영하여 제1 영상을 생성하고 상기 촬영 축과 상이한 축 상에서 발생하는 제2 조명을 기초로 상기 눈동자를 촬영하여 제2 영상을 생성하는 단계;
    상기 제1 영상 및 상기 제2 영상의 차 영상을 기초로 상기 눈동자의 움직임을 추적하여 상기 움직임에 의해 생성되는 궤적을 파악하는 단계; 및
    상기 파악된 궤적과 인증용으로 미리 저장된 인증용 궤적의 동일성을 판단하는 단계;를 포함하는 것을 특징으로 하는 시선을 이용한 인증 방법.
  10. 제 9항에 있어서, 상기 영상 생성 단계는,
    카메라의 촬영 축과 동일 축에서 발생하는 제1 적외선 및 상기 카메라의 촬영 축과 상이한 축에서 발생하는 제2 적외선이 번갈아 가면서 발생하도록 제어하는 단계;
    상기 제1 적외선을 상기 제1 조명으로 이용하여 눈동자를 촬영하여 제1 영상을 생성하는 단계; 및
    상기 제2 적외선을 상기 제2 조명으로 이용하여 눈동자를 촬영하여 제2 영상을 생성하는 단계;를 포함하는 것을 특징으로 하는 시선을 이용한 인증 방법.
  11. 제 9항에 있어서, 상기 궤적 파악 단계는,
    상기 제1 영상 및 상기 제2 영상을 기초로 차 영상을 생성하는 단계;
    상기 차 영상으로부터 눈의 동공을 파악하는 단계; 및
    상기 눈의 동공이 움직이는 궤적을 추적하는 단계;를 포함하는 것을 특징으로 하는 시선을 이용한 인증 방법.
  12. 제 9항에 있어서, 상기 궤적 파악 단계는,
    상기 눈동자가 소정 시간 움직임이 없으면 상기 눈동자의 현재 위치를 궤적의 시작점으로 인식하는 단계를 포함하는 것을 특징으로 하는 시선을 이용한 인증 방법.
  13. 제 9항에 있어서, 상기 궤적 파악 단계는,
    눈동자의 깜빡임, 소정 시간의 경과 또는 외부 스위치를 통한 입력을 기초로 눈동자의 궤적 추적을 위한 시작점 및 끝점을 인식하는 단계를 포함하는 것을 특징으로 하는 시선을 이용한 인증 방법.
  14. 제 9항에 있어서,
    상기 파악된 궤적과 상기 인증용 궤적의 동일성이 인정되면 인증 성공으로 판단하는 단계;를 더 포함하는 것을 특징으로 하는 시선을 이용한 인증 방법.
  15. 제 9항에 있어서,
    상기 궤적 추적의 시작, 궤적 추적 완료 및 인증 성공 여부를 시각 또는 청각을 통해 인지할 수 있도록 표시하는 단계;를 더 포함하는 것을 특징으로 하는 시선을 이용한 인증 방법.
KR1020040066398A 2004-08-23 2004-08-23 시선을 이용한 인증 장치 및 그 방법 KR100601963B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020040066398A KR100601963B1 (ko) 2004-08-23 2004-08-23 시선을 이용한 인증 장치 및 그 방법
US11/206,076 US20060039686A1 (en) 2004-08-23 2005-08-18 Line-of-sight-based authentication apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040066398A KR100601963B1 (ko) 2004-08-23 2004-08-23 시선을 이용한 인증 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20060018063A KR20060018063A (ko) 2006-02-28
KR100601963B1 true KR100601963B1 (ko) 2006-07-14

Family

ID=35909734

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040066398A KR100601963B1 (ko) 2004-08-23 2004-08-23 시선을 이용한 인증 장치 및 그 방법

Country Status (2)

Country Link
US (1) US20060039686A1 (ko)
KR (1) KR100601963B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180027957A (ko) * 2016-09-07 2018-03-15 주식회사 케이티 사용자 인증 방법, 사용자 인증 장치, 그리고 사용자 인증 프로그램

Families Citing this family (67)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7853563B2 (en) * 2005-08-01 2010-12-14 Seven Networks, Inc. Universal data aggregation
US8782775B2 (en) * 2007-09-24 2014-07-15 Apple Inc. Embedded authentication systems in an electronic device
US8600120B2 (en) 2008-01-03 2013-12-03 Apple Inc. Personal computing device control using face detection and recognition
US10757308B2 (en) 2009-03-02 2020-08-25 Flir Systems, Inc. Techniques for device attachment with dual band imaging sensor
US9473681B2 (en) 2011-06-10 2016-10-18 Flir Systems, Inc. Infrared camera system housing with metalized surface
US9517679B2 (en) 2009-03-02 2016-12-13 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9208542B2 (en) 2009-03-02 2015-12-08 Flir Systems, Inc. Pixel-wise noise reduction in thermal images
US9843742B2 (en) 2009-03-02 2017-12-12 Flir Systems, Inc. Thermal image frame capture using de-aligned sensor array
US10244190B2 (en) 2009-03-02 2019-03-26 Flir Systems, Inc. Compact multi-spectrum imaging with fusion
US9948872B2 (en) 2009-03-02 2018-04-17 Flir Systems, Inc. Monitor and control systems and methods for occupant safety and energy efficiency of structures
US9451183B2 (en) 2009-03-02 2016-09-20 Flir Systems, Inc. Time spaced infrared image enhancement
US9756264B2 (en) 2009-03-02 2017-09-05 Flir Systems, Inc. Anomalous pixel detection
USD765081S1 (en) 2012-05-25 2016-08-30 Flir Systems, Inc. Mobile communications device attachment with camera
US9235876B2 (en) 2009-03-02 2016-01-12 Flir Systems, Inc. Row and column noise reduction in thermal images
US9998697B2 (en) 2009-03-02 2018-06-12 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9674458B2 (en) 2009-06-03 2017-06-06 Flir Systems, Inc. Smart surveillance camera systems and methods
US9986175B2 (en) 2009-03-02 2018-05-29 Flir Systems, Inc. Device attachment with infrared imaging sensor
US9635285B2 (en) 2009-03-02 2017-04-25 Flir Systems, Inc. Infrared imaging enhancement with fusion
US9292909B2 (en) 2009-06-03 2016-03-22 Flir Systems, Inc. Selective image correction for infrared imaging devices
US9716843B2 (en) 2009-06-03 2017-07-25 Flir Systems, Inc. Measurement device for electrical installations and related methods
US9843743B2 (en) 2009-06-03 2017-12-12 Flir Systems, Inc. Infant monitoring systems and methods using thermal imaging
US9756262B2 (en) 2009-06-03 2017-09-05 Flir Systems, Inc. Systems and methods for monitoring power systems
US10091439B2 (en) 2009-06-03 2018-10-02 Flir Systems, Inc. Imager with array of multiple infrared imaging modules
US9819880B2 (en) 2009-06-03 2017-11-14 Flir Systems, Inc. Systems and methods of suppressing sky regions in images
US9207708B2 (en) 2010-04-23 2015-12-08 Flir Systems, Inc. Abnormal clock rate detection in imaging sensor arrays
US9918023B2 (en) 2010-04-23 2018-03-13 Flir Systems, Inc. Segmented focal plane array architecture
US9848134B2 (en) 2010-04-23 2017-12-19 Flir Systems, Inc. Infrared imager with integrated metal layers
US9706138B2 (en) 2010-04-23 2017-07-11 Flir Systems, Inc. Hybrid infrared sensor array having heterogeneous infrared sensors
US9706137B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Electrical cabinet infrared monitor
KR101778353B1 (ko) 2011-06-10 2017-09-13 플리어 시스템즈, 인크. 적외선 이미징 장치용 불균일성 교정 기술
CN103828343B (zh) 2011-06-10 2017-07-11 菲力尔系统公司 基于行的图像处理和柔性存储系统
US10841508B2 (en) 2011-06-10 2020-11-17 Flir Systems, Inc. Electrical cabinet infrared monitor systems and methods
CN103748867B (zh) 2011-06-10 2019-01-18 菲力尔系统公司 低功耗和小形状因子红外成像
US10389953B2 (en) 2011-06-10 2019-08-20 Flir Systems, Inc. Infrared imaging device having a shutter
US9143703B2 (en) 2011-06-10 2015-09-22 Flir Systems, Inc. Infrared camera calibration techniques
US10169666B2 (en) 2011-06-10 2019-01-01 Flir Systems, Inc. Image-assisted remote control vehicle systems and methods
US9900526B2 (en) 2011-06-10 2018-02-20 Flir Systems, Inc. Techniques to compensate for calibration drifts in infrared imaging devices
US9509924B2 (en) 2011-06-10 2016-11-29 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
US10079982B2 (en) 2011-06-10 2018-09-18 Flir Systems, Inc. Determination of an absolute radiometric value using blocked infrared sensors
US9961277B2 (en) 2011-06-10 2018-05-01 Flir Systems, Inc. Infrared focal plane array heat spreaders
US9235023B2 (en) 2011-06-10 2016-01-12 Flir Systems, Inc. Variable lens sleeve spacer
US9058653B1 (en) 2011-06-10 2015-06-16 Flir Systems, Inc. Alignment of visible light sources based on thermal images
US10051210B2 (en) 2011-06-10 2018-08-14 Flir Systems, Inc. Infrared detector array with selectable pixel binning systems and methods
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
WO2013095626A1 (en) 2011-12-23 2013-06-27 Intel Corporation Eye movement based knowledge demonstration
HK1160574A2 (en) * 2012-04-13 2012-07-13 King Hei Francis Kwong Secure electronic payment system and process
US9811884B2 (en) 2012-07-16 2017-11-07 Flir Systems, Inc. Methods and systems for suppressing atmospheric turbulence in images
US9635220B2 (en) 2012-07-16 2017-04-25 Flir Systems, Inc. Methods and systems for suppressing noise in images
KR102003818B1 (ko) * 2012-10-16 2019-07-25 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
US9746915B1 (en) * 2012-10-22 2017-08-29 Google Inc. Methods and systems for calibrating a device
JP2014206932A (ja) * 2013-04-15 2014-10-30 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体
KR101487801B1 (ko) * 2013-05-30 2015-02-05 여태운 졸음 검출 방법
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
US9973692B2 (en) 2013-10-03 2018-05-15 Flir Systems, Inc. Situational awareness by compressed display of panoramic views
US11297264B2 (en) 2014-01-05 2022-04-05 Teledyne Fur, Llc Device attachment with dual band imaging sensor
KR102227284B1 (ko) * 2014-01-16 2021-03-12 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10482461B2 (en) 2014-05-29 2019-11-19 Apple Inc. User interface for payments
KR102471916B1 (ko) * 2016-06-03 2022-11-29 엘지전자 주식회사 모바일 디바이스 및 그 제어 방법
JP6376246B2 (ja) * 2017-05-11 2018-08-22 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体
US11321433B2 (en) * 2017-09-01 2022-05-03 Eyethenticate, Llc Neurologically based encryption system and method of use
KR102301599B1 (ko) 2017-09-09 2021-09-10 애플 인크. 생체측정 인증의 구현
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
CN110046546B (zh) * 2019-03-05 2021-06-15 成都旷视金智科技有限公司 一种自适应视线追踪方法、装置、系统及存储介质
WO2022196476A1 (ja) * 2021-03-16 2022-09-22 富士フイルム株式会社 電子機器、電子機器の制御方法及び電子機器の制御プログラム
KR200494836Y1 (ko) * 2021-03-24 2022-01-11 주식회사 넥스파시스템 비접촉 터치스크린을 구비한 주차요금 무인정산 시스템

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5572596A (en) * 1994-09-02 1996-11-05 David Sarnoff Research Center, Inc. Automated, non-invasive iris recognition system and method
US7206435B2 (en) * 2002-03-26 2007-04-17 Honda Giken Kogyo Kabushiki Kaisha Real-time eye detection and tracking under various light conditions
US7280678B2 (en) * 2003-02-28 2007-10-09 Avago Technologies General Ip Pte Ltd Apparatus and method for detecting pupils

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180027957A (ko) * 2016-09-07 2018-03-15 주식회사 케이티 사용자 인증 방법, 사용자 인증 장치, 그리고 사용자 인증 프로그램
KR102158320B1 (ko) 2016-09-07 2020-10-23 주식회사 케이티 사용자 인증 방법, 사용자 인증 장치, 그리고 사용자 인증 프로그램

Also Published As

Publication number Publication date
KR20060018063A (ko) 2006-02-28
US20060039686A1 (en) 2006-02-23

Similar Documents

Publication Publication Date Title
KR100601963B1 (ko) 시선을 이용한 인증 장치 및 그 방법
JP5609970B2 (ja) 無線端末の機能への制御アクセス
Niinuma et al. Soft biometric traits for continuous user authentication
Gafurov et al. Robustness of biometric gait authentication against impersonation attack
JP6148064B2 (ja) 顔認証システム
US11651624B2 (en) Iris authentication device, iris authentication method, and recording medium
JP2006235718A (ja) 顔認証装置、その顔認証方法、その顔認証装置を組み込んだ電子機器およびその顔認証プログラムを記録した記録媒体
JP2006212185A (ja) 生体判別装置および認証装置ならびに生体判別方法
KR102160137B1 (ko) 특징점 변동을 이용한 위조 얼굴 판별장치 및 그 방법
WO2020065851A1 (ja) 虹彩認証装置、虹彩認証方法および記憶媒体
JP4862518B2 (ja) 顔登録装置、顔認証装置および顔登録方法
WO2020065954A1 (ja) 認証装置、認証方法および記憶媒体
WO2009110323A1 (ja) 生体判定システム、生体判定方法および生体判定用プログラム
JP2009015518A (ja) 眼画像撮影装置及び認証装置
JP2007328571A (ja) マルチモーダル生体認証装置
JP2004280277A (ja) 撮像装置、および顔認証装置
JP2005292994A (ja) 人物認識装置と通行制御装置
JP2004086320A (ja) 個人認証装置、個人認証システム、携帯端末、個人認証用プログラム
JP2006251983A (ja) 生体判別装置および認証装置ならびに生体判別方法
JP2006099615A (ja) 顔認証装置および入退場管理装置
KR20030070183A (ko) 홍채 인식 시스템의 위조 판별을 위한 등록 및 인식방법
JP2007058525A (ja) 個人認証装置および個人認証表示方法
KR101767367B1 (ko) 사용자의 시선 이동시 인증 절차를 수행하는 시스템 및 그 방법
KR20020038162A (ko) 양쪽 눈의 홍채를 동시에 이용하는 홍채 인식 방법
KR20050103562A (ko) 홍채 인식 시스템의 눈맞춤 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee