KR101839860B1 - 동적 키보드 및 터치스크린 생체 측정 - Google Patents

동적 키보드 및 터치스크린 생체 측정 Download PDF

Info

Publication number
KR101839860B1
KR101839860B1 KR1020167023176A KR20167023176A KR101839860B1 KR 101839860 B1 KR101839860 B1 KR 101839860B1 KR 1020167023176 A KR1020167023176 A KR 1020167023176A KR 20167023176 A KR20167023176 A KR 20167023176A KR 101839860 B1 KR101839860 B1 KR 101839860B1
Authority
KR
South Korea
Prior art keywords
user
electronic device
biometric
images
image
Prior art date
Application number
KR1020167023176A
Other languages
English (en)
Other versions
KR20160114108A (ko
Inventor
로버트 스코트 타르츠
리차드 올리버 팔리
존 키이스 슈나이더
버지니아 왈커 키팅
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20160114108A publication Critical patent/KR20160114108A/ko
Application granted granted Critical
Publication of KR101839860B1 publication Critical patent/KR101839860B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82—Protecting input, output or interconnection devices
    • G06F21/83—Protecting input, output or interconnection devices input devices, e.g. keyboards, mice or controllers thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Input From Keyboards Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 실시예들은 생체 측정 데이터를 사용하여 진행 중인 인증을 제공하는 것에 관련된다. 지문들 및/또는 다른 생체 측정 데이터는, 키보드를 타이핑하는 것과 같은 전자 디바이스의 정상 사용 동안 캡처될 수 있으며, 전자 디바이스가 사용되는 동안 진행 중인 인증을 애플리케이션에 제공하기 위해서 연관된 참조 생체 측정과 비교될 수 있다. 비교 결과들은 다수의 생체 측정 입력들 및/또는 타입들을 포함하는 인증 레벨을 결정하기 위해서 추가적인 생리적 또는 행동적 생체 측정과 추가로 결합될 수 있다.

Description

동적 키보드 및 터치스크린 생체 측정{DYNAMIC KEYBOARD AND TOUCHSCREEN BIOMETRICS}
[0001] 전자 디바이스들(예를 들어, 스마트폰들, 태블릿들 등)이 점점 더 개인용/개인 데이터를 저장하고 이에 액세스함에 따라, 이러한 디바이스들 및 데이터의 보호가 더 중요해지고 있다. 현재 보안 수단들(measures)(예를 들어, ID 및 패스워드 또는 PIN)은 이들이 종종 재사용되고 해킹되거나, 도용되거나 또는 잊어버릴 수 있기 때문에 제한된 보호를 제공한다. 생리적 생체 측정(biometrics)(예를 들어, 지문들, 홍채 스캔들 등)을 수반하는 보안 수단들은 증가된 보안을 제공하지만, 모든 보안 리스크들을 제거하지 않는다. 예를 들어, 초기 인증 이후, 디바이스가 분실되었거나 또는 도용된 경우 또는 사용자가 인증을 강요받은 경우 또 다른 개인은 디바이스를 부정하게 사용할 수 있다.
[0002] 본 발명의 실시예들은 생체 측정 데이터를 사용하여 진행 중인(ongoing) 인증을 제공하는 것에 관련된다. 지문들 및/또는 다른 생체 측정 데이터는, 키보드를 타이핑하는 것과 같은 전자 디바이스의 정상 사용 동안 캡처될 수 있으며, 전자 디바이스가 사용되는 동안 진행 중인 인증을 애플리케이션에 제공하기 위해서 연관된 참조 생체 측정과 비교될 수 있다. 비교 결과들은 다수의 생체 측정 입력들 및/또는 타입들을 포함하는 인증 레벨을 결정하기 위해서 추가적인 생리적(physiological) 또는 행동적(behavioral) 생체 측정과 추가로 결합될 수 있다.
[0003] 본 개시 내용에 따른, 전자 디바이스에 대한 인증의 예시적 방법은, 사용자가 비-인증 동작을 위한 사용자 데이터를 입력하기 위해서 전자 디바이스의 사용자 인터페이스와 상호작용하는 동안 복수의 생체 측정 이미지들을 캡처하도록 구성되는 하나 또는 그 초과의 센서들을 통해 일정 기간의 시간 동안 연속적으로 복수의 생체 측정 이미지들을 캡처하는 단계를 포함한다. 방법은 복수의 생체 측정 이미지들의 각각의 이미지에 대해, 이미지의 캡처와 연관된 사용자 인터페이스의 키를 결정하는 단계, 및 연관된 키에 기초하여, 이미지를 적어도 하나의 참조 이미지와 비교하는 단계를 더 포함한다. 방법은 또한, 비교들의 결과를 표시하는 정보를 제공하는 단계를 포함한다.
[0004] 방법은 다음의 특징들 중 하나 또는 그 초과의 특징들을 포함할 수 있다. 결과를 표시하는 정보는 인증 결정, 레벨 신뢰도, 또는 바이너리 결과 중 적어도 하나를 표시하는 정보를 포함한다. 결과를 표시하는 정보는 전자 디바이스에 의해 실행되는 애플리케이션에 제공되거나, 인증을 결정하는데 사용되거나, 또는 둘 다가 수행될 수 있다. 사용자 인터페이스는 전자 디바이스의 터치스크린 상에 가상 키보드를 포함할 수 있다. 사용자 인터페이스는 물리적 키보드를 포함할 수 있다. 복수의 생체 측정 이미지들의 각각의 이미지를 적어도 하나의 참조 이미지와 비교하는 단계는 복수의 비교들을 초래할 수 있고, 방법은 복수의 비교들의 결과들을 단일 결과로 결합시키는 단계를 더 포함한다. 이미지를 적어도 하나의 참조 이미지와 비교하는 단계는 복수의 생체 측정 이미지들 중 적어도 하나의 다른 생체 측정 이미지와 이미지를 합성 이미지로 결합시키는 단계, 및 합성 이미지를 적어도 하나의 참조 이미지와 비교하는 단계를 포함할 수 있다. 방법은 행동적 생체 측정 데이터를 캡처하는 단계, 및 캡처된 행동적 생체 측정 데이터를 저장된 행동적 생체 측정 데이터와 비교하는 단계를 더 포함하고, 비교의 결과를 표시하는 정보는 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 표시하는 정보를 더 포함할 수 있고, 여기서, 비교의 결과를 표시하는 정보는 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 표시하는 정보를 더 포함한다. 방법은 결합된 비교 스코어를 생성하기 위해서 (i) 적어도 하나의 참조 이미지와 복수의 생체 측정 이미지들의 각각의 이미지의 비교에 관한 정보와 (ii) 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 결합시키는 단계를 더 포함할 수 있다. 복수의 생체 측정 이미지들을 캡처하는 단계는 전자 디바이스를 사용하는 초기 인증 이후 발생한다.
[0005] 본 개시 내용에 따른 예시적 디바이스는 사용자 인터페이스, 사용자가 비-인증 동작을 위해서 사용되는 사용자 데이터를 입력하기 위해서 사용자 인터페이스와 상호작용하는 동안 일정 기간의 시간 동안 연속적으로 복수의 생체 측정 이미지들을 캡처하도록 구성되는 하나 또는 그 초과의 센서들, 및 하나 또는 그 초과의 센서들과 통신가능하게 커플링된 프로세싱 유닛을 포함할 수 있다. 프로세싱 유닛은 복수의 생체 측정 이미지들의 각각의 이미지에 대해, 이미지의 캡처와 연관된 사용자 인터페이스의 키를 결정하고, 그리고 연관된 키에 기초하여, 이미지를 적어도 하나의 참조 이미지와 비교하도록 구성될 수 있다. 프로세싱 유닛은 비교들의 결과를 표시하는 정보를 제공하도록 추가로 구성될 수 있다.
[0006] 예시적 디바이스는 다음의 특징들 중 하나 또는 그 초과의 특징들을 더 포함할 수 있다. 디바이스는 터치스크린을 더 포함할 수 있고, 여기서, 사용자 인터페이스는 터치스크린 상의 가상 키보드를 포함한다. 프로세싱 유닛은 적어도 하나의 참조 이미지와 복수의 생체 측정 이미지들의 각각의 이미지의 비교에 의해 복수의 비교들을 수행하고, 그리고 복수의 비교들의 결과들을 단일 결과로 결합시키도록 추가로 구성될 수 있다. 프로세싱 유닛은 복수의 생체 측정 이미지들 중 적어도 하나의 다른 생체 측정 이미지와 이미지를 합성 이미지로 결합시키고, 그리고 합성 이미지를 적어도 하나의 참조 이미지와 비교함으로써, 이미지를 적어도 하나의 참조 이미지와 비교하도록 구성될 수 있다. 프로세싱 유닛은 행동적 생체 측정 데이터를 캡처하고, 그리고 캡처된 행동적 생체 측정 데이터를 저장된 행동적 생체 측정 데이터와 비교하도록 추가로 구성될 수 있고, 여기서, 비교의 결과를 표시하는 정보는 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 표시하는 정보를 더 포함할 수 있다. 프로세싱 유닛은 결합된 비교 스코어를 생성하기 위해서 (i) 적어도 하나의 참조 이미지와 복수의 생체 측정 이미지들의 각각의 이미지의 비교에 관한 정보와 (ii) 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 결합시키도록 구성될 수 있다. 프로세싱 유닛은 하나 또는 그 초과의 센서들로 하여금 디바이스가 초기 인증을 수행한 이후 복수의 생체 측정 이미지들을 캡처하게 하도록 구성될 수 있다.
[0007] 본 개시 내용에 따른 예시적 비-일시적 컴퓨터 판독가능한 저장 매체에는 전자 디바이스에 대한 인증을 제공하기 위한 명령들이 임베딩된다. 명령들은, 사용자가 비-인증 동작을 위해서 사용되는 사용자 데이터를 입력하기 위해서 전자 디바이스의 키보드와 상호작용하는 동안 복수의 생체 측정 이미지들을 캡처하도록 구성되는 하나 또는 그 초과의 센서들을 통해 일정 기간의 시간 동안 연속적으로 복수의 생체 측정 이미지들을 캡처하기 위한 컴퓨터 코드, 복수의 생체 측정 이미지들의 각각의 이미지에 대해, 이미지의 캡처와 연관된 사용자 인터페이스의 키를 결정하기 위한 컴퓨터 코드, 및 연관된 키에 기초하여, 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 컴퓨터 코드를 포함할 수 있다. 명령들은 비교들의 결과를 표시하는 정보를 제공하기 위한 컴퓨터 코드를 더 포함할 수 있다.
[0008] 예시적 비-일시적 컴퓨터 판독가능한 저장 매체는 다음의 특징들 중 하나 또는 그 초과의 특징들을 더 포함할 수 있다. 여기서, 사용자 인터페이스는 전자 디바이스의 터치스크린 상에 가상 키보드를 포함하고, 명령들은 가상 키보드를 디스플레이하기 위한 컴퓨터 코드를 더 포함할 수 있다. 복수의 생체 측정 이미지들의 각각의 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 컴퓨터 코드는 복수의 비교들을 초래할 수 있고, 명령들은 복수의 비교들의 결과들을 단일 결과로 결합시키기 위한 컴퓨터 코드를 더 포함할 수 있다. 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 컴퓨터 코드는, 복수의 생체 측정 이미지들 중 적어도 하나의 다른 생체 측정 이미지와 이미지를 합성 이미지로 결합시키기 위한 컴퓨터 코드, 및 합성 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 컴퓨터 코드를 포함할 수 있다. 명령들은 행동적 생체 측정 데이터를 캡처하기 위한 컴퓨터 코드, 및 캡처된 행동적 생체 측정 데이터를 저장된 행동적 생체 측정 데이터와 비교하기 위한 컴퓨터 코드를 더 포함할 수 있고, 여기서, 비교의 결과를 표시하는 정보는 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 표시하는 정보를 더 포함한다. 비-일시적 컴퓨터 판독가능한 저장 매체는 결합된 비교 스코어를 생성하기 위해서 (i) 적어도 하나의 참조 이미지와 복수의 생체 측정 이미지들의 각각의 이미지의 비교에 관한 정보와 (ii) 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 결합시키기 위한 컴퓨터 코드를 더 포함할 수 있다. 비-일시적 컴퓨터-판독가능한 저장 매체는 인증의 임계 레벨이 충족되는지 여부에 대한 표시를 제공하기 위한 컴퓨터 코드를 포함하는 비교의 결과를 표시하는 정보를 제공하기 위한 컴퓨터 코드를 더 포함할 수 있다. 비-일시적 컴퓨터 판독가능한 저장 매체는 전자 디바이스를 사용하는 초기 인증 이후 발생하는 복수의 생체 측정 이미지들을 캡처하기 위한 컴퓨터 코드를 더 포함할 수 있다.
[0009] 본 개시 내용에 따른 예시적 장치는 사용자가 비-인증 동작을 위해서 사용되는 사용자 데이터를 입력하기 위해서 장치의 사용자 인터페이스와 상호작용하는 동안 복수의 생체 측정 이미지들을 캡처하도록 구성되는 하나 또는 그 초과의 센서들을 통해 일정 기간의 시간 동안 연속적으로 복수의 생체 측정 이미지들을 캡처하기 위한 수단을 포함할 수 있다. 장치는, 복수의 생체 측정 이미지들의 각각의 이미지에 대해, 이미지의 캡처와 연관된 사용자 인터페이스의 키를 결정하기 위한 수단; 및 연관된 키에 기초하여, 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 수단을 더 포함할 수 있다. 장치는 비교들의 결과를 표시하는 정보를 제공하기 위한 수단을 더 포함할 수 있다.
[0010] 장치는 다음의 특징들 중 하나 또는 그 초과의 특징들을 더 포함할 수 있다. 사용자 인터페이스는 가상 키보드를 포함할 수 있으며, 장치는 가상 키보드를 디스플레이하기 위한 수단을 더 포함한다. 복수의 생체 측정 이미지들의 각각의 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 수단은 복수의 비교들을 야기하도록 구성되고, 장치는 복수의 비교들의 결과들을 단일 결과로 결합시키기 위한 수단을 더 포함한다. 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 수단은 복수의 생체 측정 이미지들 중 적어도 하나의 다른 생체 측정 이미지와 이미지를 합성 이미지로 결합시키기 위한 수단, 및 합성 이미지를 적어도 하나의 참조 이미지와 비교하기 위한 수단을 포함할 수 있다. 장치는 행동적 생체 측정 데이터를 캡처하기 위한 수단, 및 캡처된 행동적 생체 측정 데이터를 저장된 행동적 생체 측정 데이터와 비교하기 위한 수단을 더 포함할 수 있고, 여기서, 비교의 결과를 표시하는 정보는 저장된 행동적 생체 측정 데이터와 캡처된 행동적 생체 측정 데이터의 비교를 표시하는 정보를 더 포함한다.
[0011] 본원에서 설명되는 아이템들 및/또는 기법들은 다음의 능력들뿐만 아니라 언급되지 않은 다른 능력들 중 하나 또는 그 초과의 능력들을 제공할 수 있다. 기법들은 진행 중인 인증, 보안의 증가 및/또는 현재 인증 방식들의 대체를 제공할 수 있다. 이것은 애플리케이션 제공자들이 인증을 전자 디바이스에 아웃소싱(outsource)하게 할 수 있다. 또한, 생체 측정 데이터 캡처 및 인증 결정이 전자 디바이스의 자연적인(natural) 사용 동안 발생할 수 있기 때문에, 그것은 또한 애플리케이션 사용자들의 추가 인증 문의들(inquiries)에 응답하는 시간 및 불편(hassle)을 덜 수 있다. 이러한 그리고 다른 이점들 및 특징들은 아래의 텍스트 및 첨부된 도면들과 함께 더 상세하게 설명된다.
[0012] 다양한 실시예들의 특성 및 이점들의 추가적인 이해가 다음의 도면들에 대한 참조에 의해 실현될 수 있다. 첨부된 도면들에서, 유사한 컴포넌트들 또는 특징들은 동일한 참조 라벨을 가질 수 있다. 추가로, 동일한 타입의 다양한 컴포넌트들은 참조 라벨 다음에 대시기호 및 유사한 컴포넌트들 사이를 구별하는 제 2 라벨에 의해 구별될 수 있다. 단지 제 1 참조 라벨만이 본 명세서에서 사용된다면, 본 설명은 제 2 참조 라벨과 관계없이 동일한 제 1 참조 라벨을 갖는 유사한 컴포넌트들 중 임의의 하나의 컴포넌트에 적용가능하다.
[0013] 도 1은 본원에서 설명되는 기법들을 활용할 수 있는 전자 디바이스들의 예들의 예시이다.
[0014] 도 2는 하나의 실시예에 따른, 본원에서 개시되는 기법들에서 활용될 수 있는 입력 소스들 및 다른 특징들을 예시하는 블록도이다.
[0015] 도 3a는 하나의 실시예에 따른, 사용자의 손에 들려진 터치스크린 디바이스의 도면이다.
[0016] 도 3b는 하나의 실시예에 따른, 등록 프로세스 동안 캡처되고 인증 동안 사용될 수 있는 참조 이미지를 예시한다.
[0017] 도 4는 가로 방향(landscape orientation)으로 들려진 터치스크린 디바이스의 도면이다.
[0018] 도 5는 하나의 실시예에 따른, 도 2의 생체 측정 분석 모듈의 컴포넌트들을 예시하는 블록도이다.
[0019] 도 6a 및 도 6b는 생체 측정 분석의 상이한 방법들을 예시한다.
[0020] 도 7은 전자 디바이스에 대한 인증 방법의 실시예를 예시한다.
[0021] 도 8은 전자 디바이스의 실시예의 컴포넌트들을 예시한다.
[0022] 다음의 설명은 도면들을 참조하여 제공되고, 여기서, 동일한 참조 번호들은 본원의 전반에 걸쳐 동일한 엘리먼트들을 지칭하는데 사용된다. 하나 또는 그 초과의 기법들의 다양한 세부사항들이 본원에서 설명되지만, 다른 기법들도 또한 가능하다. 일부 경우들에서, 구조들 및 디바이스들은 다양한 기법들의 설명을 가능하게 하기 위해서 블록도 형태로 도시된다.
[0023] 본 발명의 실시예들은 생체 측정 데이터를 캡처함으로써 전자 디바이스의 정상 사용 동안 진행 중인 인증을 제공하는 것에 관련된다. 생리적 그리고/또는 행동적 데이터와 같은 생체 측정 데이터는 등록 또는 등록 프로세스 동안 센서 데이터로부터 추출되고, 인증 시 사용을 위해서 저장될 수 있다. 추후 시점에서 사용자를 인증하기 위해서, 저장된 생체 측정 데이터는 새롭게 캡처되는 생체 측정 데이터가 저장된 생체 측정 데이터와 매칭하는 신뢰도의 레벨을 표시하는 비교 결과 또는 "스코어"를 제공하도록 새롭게 캡처되는 생체 측정 데이터와 비교될 수 있다. 이 결과는 인증 결정 시 사용될 수 있다. 일부 실시예들에서, 비교 결과들은 다수의 생체 측정 입력들 및/또는 타입들을 포함하는 인증 레벨을 결정하기 위해서 추가 생체 측정 및/또는 다른 정보와 결합될 수 있다.
[0024] 본원에서 설명되는 인증을 위한 기법들은 아주 다양한 전자 디바이스들에서 활용될 수 있다. 일부 이러한 디바이스들은 개인용 컴퓨터들, 태블릿들, 모바일 폰들, 개인용 미디어 플레이어들, 비디오 게임 시스템들 등과 같은 개인용 전자 디바이스들을 포함할 수 있다. 더욱이, 실시예들은 본원에서 개시되는 기법들의 차이 양상들을 수행하는 복수의 상호연결된 디바이스들을 활용할 수 있다. 예를 들어, 인증은 디바이스에 국부적으로 저장되는 데이터 및/또는 별개의 디바이스로부터 디바이스로 통신되는 데이터를 활용할 수 있다. 기법들은 또한, 관리용(government), 상업용 및/또는 다른 타입들의 전자 디바이스들에 적용될 수 있다. 예들은 ATM(Automatic Teller Machine)들 및/또는 다른 키오스크들을 포함한다.
[0025] 도 1은 본원에서 설명되는 기법들을 활용할 수 있는 전자 디바이스들(110)의 예들을 예시한다. 특히, 전자 디바이스들(110)은 개인용 컴퓨터(110-1) 및 모바일 폰(110-2)을 포함한다. 이 전자 디바이스들(110)은 다양한 소프트웨어 애플리케이션들, 운영 시스템들 및 다른 소프트웨어 및/또는 하드웨어 특징들 중 임의의 것을 사용할 수 있다.
[0026] 전자 디바이스들(110)은 사용자들이 정보를 전자 디바이스들(110)에 제공할 수 있게 하는 다양한 메커니즘들을 가질 수 있다. 이 입력 메커니즘들(120)은 다른 인자들 사이에서, 디바이스의 원하는 기능에 따라 형태 및 기능이 다를 수 있다. 공통 입력 메커니즘들은 물리적 키보드(120-1), 마우스(120-2), 터치스크린(120-3)(이는 가상 키보드와 같은 GUI(graphical user interface)를 포함할 수 있음), 스타일러스(120-4), 카메라(120-5) 등을 포함한다. 본 발명의 실시예들은 하나 또는 그 초과의 입력 메커니즘들(120)을 활용하여, 생체 측정 정보를 수집하고, 전자 디바이스(110)의 자연적인 사용 동안 (즉, 사용자가 비-인증 목적 및/또는 동작을 위한 데이터를 입력하기 위해서 입력 메커니즘들을 사용하는 동안) 인증 레벨을 결정할 수 있다.
[0027] 일부 실시예들에서, 예를 들어, 손가락 스캐닝 센서들은 물리적 키보드(120-1)의 하나 또는 그 초과의 키들에 그리고/또는 마우스(120-2), 스타일러스(120-4), 및/또는 터치스크린(120-3)의 표면 근처에 임베딩될 수 있다. 원하는 기능에 따라, 하나 또는 그 초과의 손가락 스캐닝 센서들은 디바이스의 특정 표면 내에 임베딩될 수 있다. 예를 들어, 모바일 폰(110-2)에서, 복수의 손가락 스캐닝 센서들은 터치스크린(120-3) 전부 또는 그 일부분 내에 임베딩될 수 있어서, 사용자가 터치스크린(120-3)과 상호작용할 때 사용자의 지문들의 스캐닝을 가능하게 한다. 손가락 스캐닝 센서들은 마우스(120-2), 스타일러스(120-4), 또는 다른 입력 메커니즘(120) 및/또는 전자 디바이스(110)의 표면들 ― 이 입력 메커니즘들(120) 및/또는 전자 디바이스들(110) 중 임의의 것의 파워 또는 온/오프 스위치를 포함함 ― 내에 또는 그 아래에 유사하게 임베딩될 수 있다.
[0028] 이러한 손가락 스캐닝 센서들에서 활용되는 기술들은 원하는 기능, 제조 비용들 및 다른 관심사들에 따라 달라질 수 있다. 손가락 스캐닝 센서들은, 예를 들어, 그 중에서도, 초음파, 적외선 및/또는 RF(radio frequency) 지문 스캐너 기술을 이용할 수 있다.
[0029] 카메라(120-5)(이는 또한 모바일 폰(110-2) 외의 전자 디바이스들에서 활용될 수 있음)는 인증을 위해서 생체 측정 정보 역시 캡처할 수 있다. 전방(front-facing) 카메라는, 예를 들어, 사용자가 전자 디바이스(110)와 상호작용하고 있을 때 사용자의 이미지들을 캡처할 수 있다. 이 이미지들은 얼굴 인식, 홍채 스캔 등을 수행하기 위해서 참조 이미지들과 비교될 수 있다. 아래에서 더 상세하게 표시되는 바와 같이, 카메라로부터의 생체 측정 정보는 인증을 위해서 지문 및/또는 다른 생체 측정 데이터와 결합될 수 있다.
[0030] 본원에서 설명되는 실시예들은 종종 "키보드"(물리적 또는 가상적)를 활용하지만, 실시예들이 그러한 것으로 제한되는 것은 아니라는 점이 주목될 수 있다. 허가 기법들은 도 1에 도시되는 것들과 같은 다양한 입력 메커니즘들(120) 중 임의의 것에 의해 활용될 수 있다.
[0031] 도 2는 하나의 실시예에 따른, 본원에서 개시되는 기법들에서 활용될 수 있는 입력 소스들, 생체 측정 및 다른 특징들을 예시하는 블록도이다. 도시되는 블록들이 예로서 제공되는 것이 이해될 것이다. 다른 실시예들은 블록들을 생략, 추가 및/또는 대체할 수 있다. 당업자는 많은 변화들을 인식할 것이다. 도 2에 도시되는 컴포넌트들은 전자 디바이스(110)와 통신가능하게 커플링되고 그리고/또는 이에 통합되는 다양한 소프트웨어 및/또는 하드웨어를 사용하여 구현될 수 있다. 이러한 소프트웨어 및/또는 하드웨어의 예는 아래의 도 8에 대해 더 상세하게 설명된다.
[0032] 일반적으로 말하자면, 기법들은 하나 또는 그 초과의 입력 소스들(250)을 사용하여 전자 디바이스(110)의 사용자의 자연적인 사용 동안 생체 측정 정보를 캡처하는 것, 및 참조 생체 측정 데이터와 캡처된 생체 측정 정보의 비교들에 기초하여 인증 정보를 제공하는 것을 포함한다. 아래에서 더 상세하게 설명되는 바와 같이, 참조 생체 측정 데이터는 초기 등록 프로세스에서 획득된다. 인증 정보는 전자 디바이스(110)에 의해 실행되는 애플리케이션에 제공될 수 있고, 이는 그 다음, 인증이 그 애플리케이션에 대한 원하는 임계치를 충족시키는지(또는 초과하는지) 여부를 결정할 수 있다. 만약 그렇지 않다면, 애플리케이션은, 예를 들어, 추가 인증 정보에 입력하도록 사용자에게 요구하거나 또는 특정 기능으로의 액세스를 제한함으로써 응답할 수 있다. 따라서, 패스워드 또는 일부 다른 초기 인증과 더불어 또는 이에 대한 대안으로서, 본원에서 제공되는 기법들은 전자 디바이스가 사용 중인 동안 추가적인 비간섭적(unobtrusive) 인증을 제공할 수 있다. 일부 경우들에서, 예를 들어, 애플리케이션은 초기 허가(이를테면, 패스워드의 입력)를 요청하고, 그 다음, 본원에서 설명되는 기법들을 활용하여 전자 디바이스로부터 후속하는 진행 중인 인증을 획득할 수 있다.
[0033] 생체 측정 정보는 다양한 입력 소스들(150)로부터의 정보를 사용하여 캡처될 수 있다. 도 2에 예시되는 바와 같이, 입력 소스들(250)은 하나 또는 그 초과의 손가락 스캐너들(251)(이를테면, 초음파, 적외선 및/또는 RF(radio frequency) 지문 스캐너 기술을 활용하는 스캐너들), 카메라들(252), 키보드들(253)(물리적 그리고 터치 스크린 키보드들을 포함함), 모션/방향 센서들(254)(이를테면, 자이로스코프들, 가속도계들, 자력계들 등), 터치 스크린들/압력 센서들(255) 및/또는 마이크로폰들(256)을 포함할 수 있지만, 이들에 제한되는 것은 아니다. 그러나, 도 2의 입력 소스들(250)은 특정 생체 측정 정보를 결정하기 위한 정보를 제공하는 것으로서 표시되지만, 다른 실시예들이 다양한 입력 소스들(250)로부터의 정보를 상이하게 활용할 수 있다는 점이 주목될 수 있다. 당업자는 많은 변화들을 인식할 것이다.
[0034] 생체 측정 정보는 생리적 생체 측정(210) 및 행동적 생체 측정(220)으로서 카테고리화될 수 있다. 생리적 생체 측정(210)은 사용자의 변화하지 않는(또는 비교적 변화하지 않는) 물리적 특성들에 기초하는 생체 측정을 포함할 수 있다. 도시되는 바와 같이, 생리적 생체 측정(210)은 지문(211), 홍채 스캔들(213), 얼굴 인식(215) 등을 포함할 수 있다. 생리적 생체 측정(210)은 전자 디바이스(110)와 통신가능하게 연결되고 그리고/또는 이에 통합되는 센서들 및/또는 디바이스들을 포함하는 하나 또는 그 초과의 입력 소스들(250)로부터의 정보를 사용함으로써 캡처될 수 있다. 이 입력 소스들(250)은 그들이 전자 디바이스의 자연적인 사용 동안(예를 들어, 사용자가 디스플레이를 보거나 또는 비-인증 목적을 위한 데이터를 입력하기 위해서 전자 디바이스의 입력 메커니즘(120)을 사용하는 동안) 생체 측정 데이터를 캡처할 수 있도록 디바이스로 통합될 수 있다.
[0035] 행동적 생체 측정(220)은 사용자의 아이덴티티를 결정하기 위해서 사용될 수 있는 사용자의 행동들에 기초하여 생체 측정을 포함할 수 있다. 키스트로크(221)는 사용자가 물리적 또는 가상적 키보드, 키패드 또는 버튼들을 갖는 다른 사용자 인터페이스 상의 키들 및/또는 다른 버튼들과 어떻게 상호작용하는지에 기초하는 행동적 생체 측정이다. 키스트로크(221)는 연속적 키스트로크들 사이의 레이턴시들, 키스트로크 듀레이션들, 키들 상에서 적용되는 압력, 타이핑 속도 등 중 하나 또는 그 초과를 고려할 수 있다. 추가적으로 또는 대안적으로, 아래에서 더 상세하게 설명되는 바와 같이, 키스트로크(221)는 키들을 누를 때 어떤 손가락들이 사용되는지에 대한 결정을 포함할 수 있다. 터치스크린들을 갖는 전자 디바이스들에 있어서, 터치에 기초하는 행동적 생체 측정은 사용자가 터치스크린을 통해 수행하는 터치-기반 상호작용의 유사한 양상들을 포함할 수 있다. 키스트로크(221)는, 예를 들어, 터치 및/또는 압력 센서들로부터의 출력뿐만 아니라, 이러한 출력의 타이밍 및/또는 사용자의 손가락들의 하나 또는 그 초과의 참조 이미지들에 기초할 수 있다.
[0036] 디바이스 방향(223)은 사용자에 의해 들려진 전자 디바이스들(110) 및/또는 입력 메커니즘들(120)에 대한 행동적 생체 측정이다. 예를 들어, 상이한 사용자들은 상이한 각도들로 특정 전자 디바이스(110)(예를 들어, 모바일 폰)를 들고 있을 수 있다. 이 각도들은, 예를 들어, 전자 디바이스(110) 및/또는 입력 메커니즘(120)의 모션/방향 센서(들)(254)(예를 들어, 가속도계들, 자력계들 등)에 의해 측정될 수 있다. 따라서, 디바이스 방향(223)은 인증 시 사용되는 행동적 생체 측정일 수 있다.
[0037] 디바이스 움직임(225)은 사용자의 식별 시 또한 사용될 수 있는 행동적 생체 측정이다. 예를 들어, 모바일 디바이스의 모션/방향 센서(들)(254)(예를 들어, 가속도계, 자이로스코프들, 자력계들 등)는 사용자가 걷고 있거나 또는 또 다른 활동에 관여되는 때 움직임 패턴을 결정하는데 사용될 수 있다. 이 패턴은 사용자의 아이덴티티를 결정하기 위해서 하나 또는 그 초과의 참조 패턴들과 비교될 수 있다. 따라서, 디바이스 움직임(225)은 인증 시 사용되는 행동적 생체 측정일 수 있다.
[0038] 서명(227) 및 음성(229)은 인증을 위해서 사용될 수 있는 다른 행동적 생체 측정이다. 서명(227)은 전자 디바이스의 터치스크린 또는 터치패드를 포함하는 터치 스크린들/압력 센서들(255)에 의해 캡처될 수 있다. 음성(229)은 마이크로폰(들)(256)에 의해 캡처될 수 있다.
[0039] 생리적 생체 측정(210) 및/또는 행동적 생체 측정(220) 전부 또는 그 일부분으로부터의 데이터는 분석을 위해서 생체 측정 분석 모듈(230)에 제공될 수 있다. 분석은 대응하는 참조 데이터와 생체 측정 데이터의 비교를 수반할 수 있다. 참조 데이터는 등록 프로세스 동안 사용자로부터 이전에 캡처된 생체 측정 데이터를 포함할 수 있다.
[0040] 생체 측정 정보의 등록은 전자 디바이스의 원하는 기능, 능력들 및/또는 다른 인자들에 따라 달라질 수 있다. 등록 프로세스는 인증 시 추후 사용을 위한 참조 데이터를 설정하기 위해서 전자 디바이스 상에서 실행되는 애플리케이션에 의해 개시될 수 있다. 예를 들어, 디바이스가 사용자가 전형적으로 모든 10개의 손가락들을 사용하여 타이핑하는 표준-사이즈의 물리적 키보드를 가진다면, 등록 프로세스는 사용자가 각각의 손가락을 스캐닝함으로써 모든 10개의 손가락들을 "등록"하는 것을 가능하게 할 수 있다. 사용자가 단지 둘 모두의 검지들 또는 둘 모두의 엄지들만을 사용하여 타이핑하거나 또는 단지 하나의 검지 또는 하나의 엄지만을 사용하여 타이핑한다면(또는 그렇지 않으면 전자 디바이스(110) 및/또는 입력 메커니즘(120)과 상호작용한다면), 그 사용은 단지 그 손가락들만을 등록할 수 있다. 손가락들의 등록은 지문의 임의의 부분이 식별을 위해서 추후 사용될 수 있도록 네일-투-네일로 롤링된 지문(nail-to-nail rolled print)을 사용할 수 있다. 추가적으로 또는 대안적으로, 손가락들의 등록은 (예를 들어, 사용자가 타이핑하는 동안의 등록 프로세스 동안) 후속하는 식별을 위해서 사용되는 참조 이미지를 형성하기 위해서 함께 "스티칭(stitch)"되는 부분적 지문의 다수의 이미지들을 캡처하는 것을 수반할 수 있다. 유사하게, 홍채 스캔(213) 및/또는 얼굴 인식(215)의 등록은 사용자의 눈들 및/또는 얼굴의 참조 이미지들을 캡처하는 것을 수반할 수 있다.
[0041] 행동적 생체 측정(220)의 등록은 전자 디바이스(110)를 자연적인 방법으로 사용하도록 사용자에게 요청하는 것을 포함할 수 있고, 그에 의해, 추후 인증이 수행될 수 있는 조건들을 모방한다. 예를 들어, 등록 프로세스는 구 또는 문장을 타이핑하도록 사용자에게 요청하고, 사용자가 타이핑하고 있는 동안 키스트로크, 디바이스 방향 및/또는 디바이스 움직임 데이터를 캡처할 수 있다. (사용자는 데이터가 정확하다는 보장을 돕기 위해서 구 또는 문장을 다수 회 타이핑하도록 요청받을 수 있다.) 유사하게, 사용자는 자신의 서명을 입력하고 그리고/또는 등록 동안 서명 및/또는 음성 데이터를 수집하기 위해서 구를 말하도록 요청받을 수 있다.
[0042] 등록은 또한, 상이한 생체 측정 사이의 연관성들을 결정하는데 사용될 수 있다. 예를 들어, 사용자는 어떠한 상호작용 없이 전자 디바이스(110)를 단순히 들고 있는 경우 이외에 디바이스의 터치스크린과 상호작용하는 경우 전자 디바이스(110)를 상이하게 들고 있을 수 있다. 이 연관성은 등록 프로세스 동안 결정되고, 후속하는 인증 시 사용될 수 있다. 유사하게, 지문들은 특정 키를 누를 때 사용자가 어떤 손가락들을 사용하고 그리고/또는 손가락의 어떤 부분들을 사용하는지를 결정하기 위해서 사용자가 등록 동안 구 또는 문장을 타이핑하는 동안 캡처될 수 있다. 도 3a-4는 이러한 점의 추가적인 예시를 돕는다.
[0043] 도 3a는 사용자의 손(310)에 들려진 터치스크린 디바이스(110-3)의 도면이다. 여기서, 사용자는 사용자의 오른손 엄지의 부분을 통해 가상 키보드(120-3)의 키를 터치함으로써 터치스크린 디바이스(110-3)의 가상 키보드(120-3)와 상호작용한다. 디바이스(110-3)의 터치스크린 아래에 임베딩된 지문 스캐닝 디바이스는 키를 터치한 사용자의 오른손 엄지의 부분의 이미지를 캡처할 수 있다. 등록 프로세스 동안, 키와 접촉하는 사용자의 오른손 엄지 및/또는 사용자의 오른손 엄지의 부분은 그 키와 연관될 수 있다. 이것은 어떤 손가락들이 특정 키들을 선택하는데 사용되는지에 기초하여 인증을 가능하게 할 수 있다. 또한, 손가락들의 하나 또는 그 초과의 이미지들은 그 전체가, 참조를 위해서 캡처 및 저장될 수 있다.
[0044] 도 3b는 하나의 실시예에 따른, 캡처되거나 또는 그렇지 않으면 등록 프로세스 동안 획득되고, 후속하는 인증 동안 사용될 수 있는 참조 이미지(320)를 예시한다. 예를 들어, 인증 동안, 전자 디바이스(110)는 사용자의 손가락들의 이미지들을 캡처하고, 캡처된 이미지들이 참조 이미지(320)와 얼마나 가깝게 매칭하는지를 결정하기 위해서 캡처된 이미지들을 이전에 획득된 참조 이미지와 비교할 수 있다. 이 비교는 전자 디바이스(110)의 소프트웨어 및/또는 하드웨어 컴포넌트들, 이를테면, 도 2의 생체 측정 분석 모듈(230)을 사용하여 수행될 수 있다.
[0045] 이 예에서의 참조 이미지(320)는 사용자의 오른 손바닥의 이미지를 포함하지만, 실시예들은 원하는 기능에 따라 달라질 수 있다. 예를 들어, 개별 손가락들 및/또는 손가락들의 부분들의 하나 또는 그 초과의 이미지들은 참조 이미지들로서 사용될 수 있다. 일부 실시예들에서, 참조 이미지들은 다른 디바이스들로부터 수신할 수 있고, 따라서, 참조 이미지들은 터치스크린 디바이스(110-3)의 이미지-캡처링 능력들에 반드시 제한되는 것은 아닐 것이다. 더욱이, 실시예들은 "이미지들"을 사용하는 것으로서 설명되지만, 실시예들은 그러한 것으로 제한되는 것은 아니다. 실시예들은 이미지들 외의 데이터(예를 들어, 이미지로부터 추출되는 데이터)를 캡처, 저장 및/또는 비교할 수 있다.
[0046] 원하는 기능에 따라, 참조 이미지(320)는 캡처된 이미지와 특징들(예를 들어, 상세사항(minutia))의 비교 시 사용될 수 있을뿐만 아니라, 또한 캡처된 이미지가 캡처되었을 때 어떤 손가락 그리고 손가락의 어떤 부분이 사용되었는지를 결정하는데 사용될 수 있다. 예를 들어, 사용자가 도 3a에 도시되는 바와 같이, 자신의 오른손 엄지의 바깥 부분을 사용하여 키를 누르면, 터치스크린 디바이스(110-3)는 오른손 엄지의 대응하는 부분(330)의 이미지를 캡처하고, 그 키를 누르는데 어떤 손가락 및/또는 손가락의 부분이 사용되었는지를 결정하기 위해서 그 이미지를 참조 이미지(320)와 비교할 수 있다. 추가적으로 또는 대안적으로, 이것은 비교 결과를 생성하기 위해서 등록 프로세스 동안 그 키와 연관된 손가락 및/또는 손가락의 부분에 관한 정보와 비교될 수 있다. 아래에서 더 상세하게 논의되는 바와 같이, 이 비교 결과는 인증 레벨을 설정하기 위해서 다른 생체 측정 비교 결과들과 "퓨징(fuse)"되거나 또는 그렇지 않으면 결합될 수 있다.
[0047] 도 3a 및 도 3b와 관련하여 설명되는 실시예들이 가상 키보드(120-3)를 갖는 모바일 디바이스를 참조하지만, 다른 실시예들은 그러한 것으로 제한되는 것은 아니다. 도 3a 및 도 3b와 관련하여 설명되는 기법들은 다른 입력 메커니즘들(120)을 갖는 다른 전자 디바이스들(110), 이를테면, 물리적 키보드(120-1)를 갖는 개인용 컴퓨터 또는 태블릿, 가상 키보드(120-3) 외의 그래픽 사용자 인터페이스를 갖는 터치스크린 디바이스 등에 적용될 수 있다.
[0048] 실시예들은 하나 초과의 동작 모드를 갖는 전자 디바이스들(110) 및/또는 입력 메커니즘들(120)을 추가로 허용할 수 있다. 예를 들어, 도 3a의 터치스크린 디바이스(110-3)는 도 4에 도시되는 바와 같이, "가로" 방향으로 자신의 측면에서 동작하는 경우 자신의 인터페이스를 변경할 수 있어서, 도 3a에 예시되는 가상 키보드(120-3)보다는 확장된 가상 키보드(120-4)를 제공한다. 이것은 사용자가 터치스크린 디바이스(110-3)와 상호작용하는 방식을 변경할 수 있기 때문이다(예를 들어, "정상" 가상 키보드(120-3)에 대한 것이라기 보다는 확장된 가상 키보드(120-4)에 대한 상이한 손가락-키 연관성들이 존재함). 따라서, 터치스크린 디바이스(110-3)는 터치스크린 디바이스가 가로 방향으로 동작하고 있는 경우 별개의 등록 프로세스(및 대응적으로, 인증 프로세스에서 사용되는 참조 데이터의 상이한 세트)를 가질 수 있다.
[0049] 다시 도 2를 참조하면, 생리적 생체 측정(210) 및/또는 행동적 생체 측정(220) 전부 또는 그 일부분으로부터의 데이터는 앞서 표시된 바와 같이, 분석을 위해서 생체 측정 분석 모듈(230)에 제공될 수 있다. 분석은 비교 결과를 제공하기 위해서 대응하는 참조 데이터와 생체 측정 데이터의 비교를 수반할 수 있다. 그 다음, 생체 측정 분석 모듈은 비교 결과를 표시하는 인증 출력(240)을 제공할 수 있다. 인증 출력(240)은 캡처된 생체 측정 데이터가 참조 생체 측정 데이터와 매칭하는 신뢰도의 정도(measure)일 수 있다. 추가적으로 또는 대안적으로, 인증 출력(240)은 사용자가 매칭들(또는 그것의 결여)에 기초하여 식별되는 신뢰도의 정도를 포함할 수 있다. 일부 실시예들에서, 생체 측정 분석 모듈(230)은 전자 디바이스(110)의 고유 특징으로서 디바이스 레벨에서 동작할 수 있어서, 인증 출력(240)을 전자 디바이스(110)의 애플리케이션 레이어(예를 들어, 운영 시스템, 소프트웨어 애플리케이션 등)에 제공한다.
[0050] 도 5는 하나의 실시예에 따른 생체 측정 분석 모듈(230)의 컴포넌트들을 예시하는 블록도이다. 본원에서의 다른 특징들에 있어서, 생체 측정 분석 모듈의 실시예들은 컴포넌트들을 추가, 생략, 재배열 및/또는 대체함으로써 도 5와는 다를 수 있다. 예를 들어, 컴포넌트들은 상이한 순서로 나타나고, 여전히 동일하거나 또는 유사한 목표(end) 기능을 달성할 수 있다. 당업자는 많은 변화들을 인식할 것이다. 도 2에 있어서, 도 5에 도시되는 컴포넌트들은 전자 디바이스(110)에 통신가능하게 커플링되고 그리고/또는 이에 통합되는 다양한 소프트웨어 및/또는 하드웨어 수단을 사용하여 구현될 수 있다. 이러한 수단의 예들은 아래의 도 8에 대해 더 상세하게 설명된다.
[0051] 이 실시예에서, 하나 또는 그 초과의 센서(들)(510)는 센서 데이터를 생체 측정 분석 모듈(230)의 추출 모듈(520)에 제공한다. 이러한 센서(들)는, 예를 들어, 도 2와 관련하여 설명되는 입력 소스들(250)을 포함할 수 있고, 이들은 전자 디바이스(110)와 통신가능하게 커플링되고 그리고/또는 이에 통합될 수 있다. 그 다음, 추출 모듈(520)은 센서 데이터로부터 생체 측정 데이터(예를 들어, 도 2에 도시되는 바와 같은 생리적 생체 측정(210) 및/또는 행동적 생체 측정(220))를 추출할 수 있다. 즉, 센서(들)(510)에 의해 제공되는 로(raw) 센서 데이터는 생리적 및/또는 행동적 생체 측정을 표시하는 데이터의 특징들을 추출 및/또는 결정하기 위해서 프로세싱될 수 있다. (예를 들어, 센서들(510)로부터의 지문 데이터는, 예를 들어, 상세사항으로서 프로세싱 및 저장될 수 있다.) 등록 프로세스 동안, 추출된 생체 측정 데이터는 참조 데이터로서의 사용을 위해서 데이터 저장소에 전송될 수 있다. 저장된 데이터는 임의의 타입의 데이터 구조, 이를테면, 데이터베이스, 파일 시스템 등을 사용하여 저장될 수 있고, 이들은 아래에서 더 상세하게 설명되는 데이터 저장소(570)에 저장될 수 있다. 인증 동안, 추출 모듈(520)은 참조 데이터와의 비교를 위해서 새롭게 캡처되는 센서 데이터로부터 생체 측정 데이터를 추출할 수 있다.
[0052] 실시예들은 생체 측정 데이터의 다수의 샘플들이 참조 데이터와의 비교 전에 결합되는 스티칭 모듈을 선택적으로 활용할 수 있다. 예를 들어, 부분적 지문의 다수의 캡처된 이미지들은 참조 이미지와 비교될 수 있는 지문의 합성 이미지를 형성하기 위해서 함께 "스티칭"될 수 있다.
[0053] 사용자가 보통 10개의 손가락들을 통해 타이핑할 수 있는 표준 풀 사이즈 키보드는, 예를 들어, 다음과 같이 결정되는 손가락/키 연관성들을 가질 수 있다:
1) 오른손 검지가 키들과 연관될 수 있다: YUHJNM
2) 오른손 중지가 키들과 연관될 수 있다: IK,
3) 오른손 약지가 키들과 연관될 수 있다: OL.
4) 오른손 소지가 키들과 연관될 수 있다: P;/
5) 왼손 검지가 키들과 연관될 수 있다: RTFGYB
6) 왼손 중지가 키들과 연관될 수 있다: EDC
7) 왼손 약지가 키들과 연관될 수 있다: WSX
8) 왼손 소지가 키들과 연관될 수 있다: QAZ
[0054] YUHJNM 키들에서 이미지 스캐너들에 의해 취해지는 이미지들은, 예를 들어, 오른손 검지 지문의 합성 이미지를 생성하기 위해서 함께 스티칭(즉, 합병)되고, 오른손 검지의 참조 이미지에 대해 인증을 위해서 사용될 수 있다. 다른 키들로부터의 이미지들은 다른 손가락들에 대해 유사한 방식으로 결합될 수 있다.
[0055] 도 3a-4에 도시되는 바와 같이, 키들이 보통 2개의 엄지들을 통해 타이핑되는 디바이스 키보드 상에서, 손가락/키 연관성들은 다음과 같이 결정될 수 있다.
1) 오른손 엄지가 키들과 연관될 수 있다: YUIOPHJKLBNM.
2) 왼손 엄지가 키들과 연관될 수 있다: QWERTASDFGZXCV
[0056] 다시, 특정 엄지와 연관된 키들로부터 캡처된 이미지들은 인증을 위해서 사용할 합성 이미지를 생성하기 위해서 함께 스티칭될 수 있다. 도 4에 대해 위에서 서술된 바와 같이, 상이한 동작 모드들은 상이한 키 손가락/키 연관성들을 가질 수 있다. 게다가, 다수의 사용자들에 의해 사용되는 디바이스들에 대해, 상이한 사용자들은 상이한 손가락/키 연관성들을 가질 수 있다. 이러한 스티칭에 관한 추가 세부사항들은 도 6a 및 도 6b에 대해 아래에서 제공된다.
[0057] 매칭 모듈(540)은 추출 모듈(520)(또는 스티칭 모듈(530))로부터 수신되는 캡처된 생체 측정 데이터를 데이터 저장소(570)에 저장되는 참조 생체 측정 데이터와 비교하기 위해서 인증 동안 활용된다. 예를 들어, 매칭 모듈(540)은 매칭이 존재하는지 아니면 존재하지 않는지에 관한 신뢰도의 레벨 및/또는 매칭이 존재하는지 아니면 존재하지 않는지를 결정하기 위해서 상세사항 및/또는 전통적 이미지 프로세싱 기법들의 비교를 사용하여 지문의 캡처된 이미지를 지문의 참조 이미지와 비교할 수 있다. 신뢰도의 레벨 및/또는 매칭이 존재하는지 아니면 매칭이 존재하지 않는지에 대한 표시는 애플리케이션 레이어(560)에 인증의 측정으로서(예를 들어, 특정된 범위 내의 수, 바이너리 표시자, 인덱싱된 변수 등으로서) 제공될 수 있다. 선택적으로, 그것은 먼저 퓨전 모듈(550)에 제공될 수 있다.
[0058] 퓨전 모듈(550)은 다수의 비교 결과들을 결합하도록 구성되는 모듈이다. 사용되는 기법들에 따라, 퓨전 모듈(550)은 단일 타입의 생체 측정 입력의 다수의 비교 결과들을 결합(예를 들어, 동일한 그리고/또는 상이한 손가락들의 지문들을 포함할 수 있는 다수의 지문들(211)의 비교 결과들을 결합)할 수 있거나, 몇몇 타입들의 생체 측정 입력의 비교 결과들을 결합(예를 들어, 지문들(211), 키스트로크(221) 및 디바이스 방향(223)의 비교 결과들을 결합)할 수 있거나, 둘 다를 수행할 수 있다.
[0059] 다수의 비교 결과들을 결합하기 위한 기법들은 다를 수 있으며, 결합된 비교 결과들의 타입, 원하는 인증 정확도 및/또는 다른 인자들에 의존할 수 있다. 기법들은, 예를 들어, 가중된 또는 가중되지 않은 평균화, 스코어-기반 결합, Boolean 결합 로직(예를 들어, Boolean AND, OR 등) 등을 포함할 수 있다. 더 정교한(sophisticated) 수단은 최적화된 방식으로 랜덤한 통계 이벤트들을 결합시키기 위한 Neyman-Pearson 기법들 및 변형들을 포함할 수 있다. 추가적으로 또는 대안적으로, 실시예들은 직교적 그리고/또는 비-직교적 통계 이벤트들을 결합시키기 위한 최적화된 멀티-모달 퓨전 기법들을 활용할 수 있다. 이러한 멀티-모달 퓨전의 예들은 "Multimodal Fusion Decision Logic System"이라는 명칭의 미국 특허 출원 번호 제7,287,013호, "Multimodal Fusion Decision Logic System"이라는 명칭의 미국 특허 출원 번호 제8,190,540호, "Multimodal Authorization Method, System And Device"라는 명칭의 미국 특허 출원 번호 제7,440,929호, 및 "Multimodal Fusion Decision Logic System Using Copula Model"라는 명칭의 미국 특허 출원 번호 제7,558,765호에서 제공되고, 이들 전부는 본원에 인용에 의해 포함된다.
[0060] 매칭 모듈(540) 또는 퓨전 모듈(550)에 의해 제공되는 생체 측정 분석 모듈(230)의 출력(예를 들어, 도 2의 인증 출력(240))은 센서(들)(510)로부터 추출되는 생체 측정 데이터의 신뢰도의 표시 및/또는 인증 레벨을 포함할 수 있다. 이것은 전자 디바이스(110)에 의해 실행되는 운영 시스템, 소프트웨어 애플리케이션 또는 다른 프로그램과 같은 전자 디바이스(110)의 애플리케이션 레이어(560)에 제공될 수 있다. 달성된 인증 레벨에 기초하여, 애플리케이션 레이어(560)는 어떻게 응답할 것인지를 결정할 수 있다. 예를 들어, 생체 측정 분석 모듈(230)에 의해 표시되는 인증 레벨이 특정 임계치 미만이면, 애플리케이션 레이어(560)는 애플리케이션의 특정 기능들로의 액세스를 제한하고, 추가 입력(예를 들어, 패스워드, 서명, 손가락 또는 아이 스캔(eye scan) 등)을 요구할 수 있다.
[0061] 앞서 표시된 바와 같이, 본원에서 제공되는 기법들은 비-인증 동작을 위해서 사용되는 사용자 데이터를 입력하도록 전자 디바이스의 자연적인 사용 동안 구현될 수 있다. 따라서, 센서(들)(510)에 의해 캡처된 센서 데이터 및 생체 측정 분석 모듈(230)에 의해 제공된 결과적 인증 출력은 사용자가 전자 디바이스를 사용 중일 때 배경 함수들로서 발생할 수 있다. 애플리케이션 레이어(560)에서 실행되는 애플리케이션은
인증 정보뿐만 아니라 원하는 인증 레벨을 얼마나 자주 활용할 것인지를 결정할 수 있다. 예를 들어, 전자 디바이스(110)에 의해 실행되는 뱅킹 애플리케이션은 사용자로부터의 로그인 및 패스워드 정보를 초기에 요청한 이후, 본원에서 논의되는 기법들을 사용하여 제공될 수 있는 후속하는 인증을 요구할 수 있다. 따라서, 주기적 그리고/또는 이벤트-구동을 기반으로, 뱅킹 애플리케이션은 최소 인증 레벨이 유지되는지 여부를 결정하기 위해서 생체 측정 분석 모듈(230)로부터 인증 정보를 수신할 수 있다. 인증의 최소 임계치는 에플리케이션 및/또는 애플리케이션 내에서의 기능에 따라 달라질 수 있다. 예를 들어, 뱅킹 애플리케이션은 쇼핑 애플리케이션보다 더 높은 인증 레벨을 요구할 수 있다. 게다가, 뱅킹 애플리케이션은 사용자가 $10,000를 전달하기를 원하는 경우보다 사용자가 $10를 전달하기를 원하는 경우 인증의 더 낮은 임계치를 요구할 수 있다.
[0062] 도 6a 및 도 6b는 스티칭의 개념의 예시를 돕는 흐름도들이다. 도 6a는 스티칭을 이용하지 않는 생체 측정 분석의 방법(600-1)의 흐름도이다. 방법(600-1)은 도 5에 도시되는 컴포넌트들 중 하나 또는 그 초과의 컴포넌트들을 포함할 수 있는 전자 디바이스에 의해 구현될 수 있다.
[0063] 블록(610)에서, 특정 지문의 복수의 이미지들(예를 들어, 지문들)이 캡처된다. 이미지들은, 예를 들어, 물리적 또는 가상적 키보드의 "h" 키를 누르는 검지의 이미지 캡처들을 포함할 수 있다. 도 5에 표시되는 바와 같이, 이미지 캡처들은 물리적 또는 가상적 키보드에 임베딩된 하나 또는 그 초과의 센서(들)(510)로부터의 센서 데이터로부터 추출될 수 있다. 각각의 새로운 캡처된 이미지를 통해 업데이트될 수 있는 캡처된 이미지들의 "윈도우"를 사용하여(예를 들어, 손가락의 마지막 5개의 캡처된 지문들을 사용하여) 이미지 비교가 수행되도록 복수의 이미지들이 롤링(rolling)을 기반으로 캡처될 수 있다는 점이 추가로 서술될 수 있다. 따라서, 단일 이미지는 하나 초과의 이미지 비교 시 사용될 수 있다. (예를 들어, 마지막 5개의 캡처된 지문들의 윈도우는 이전 이미지 비교 시 사용되는 4개의 지문들 및 새롭게 캡처되는 지문을 포함할 수 있다.) (예를 들어, 마지막 5개의 캡처된 지문들의 윈도우는 이전 이미지 비교 시 사용되는 4개의 지문들 및 새롭게 캡처되는 지문을 포함할 수 있다.) 추가적으로 또는 대안적으로, 일부 실시예들은 롤링을 기반으로 하지 않는 이미지 캡처(예를 들어, 하나의 이미지 비교 이후, 다음 이미지 비교를 위한 5개의 새로운 이미지들을 캡처함)를 이용할 수 있다.
[0064] 블록(620)에서, 각각의 캡처된 이미지는 참조 이미지와 비교된다. 비교는, 예를 들어, 도 5에 도시되는 매칭 모듈(540)과 같은 매칭 모듈에 의해 이루어질 수 있다. 또한, 참조 이미지들은 도 5의 데이터 저장소(570)와 같은 메모리에 저장될 수 있다. 이 방법(600-1)에서, 이미지들은 많은 식별가능한 특징들이 결여된 경우에도 참조 이미지와 비교될 수 있다. 따라서, 부분적 지문들을 포함하는 이미지들은 참조 이미지들과 비교될 수 있다. 부분적 지문이 완전한 지문보다 덜 식별가능한 특징들(예를 들어, 상세사항들)을 가질 수 있기 때문에, 부분적 지문이 참조 지문과 매칭하는 신뢰도의 대응하는 레벨은 더 낮아질 수 있다.
[0065] 블록(630)에서, 복수의 비교들에 기초하는 인증 레벨이 결정된다. 인증 레벨은 캡처된 이미지들이 참조 이미지와 매칭하는 신뢰도의 레벨을 포함할 수 있어서, 다양한 결합 기법들(예를 들어, 평균화, Boolean 결합, Neyman-Pearson 기법들, 멀티-모달 퓨전 등) 중 임의의 것을 사용하여 그들을 결합함으로써 복수의 비교들의 결과를 설명한다.
[0066] 도 6b는 스티칭을 활용하는 생체 측정 분석의 또 다른 방법(600-2)의 흐름도이다. 도 6a의 방법(600-1)에 있어서, 방법(600-2)은 도 5에 도시되는 컴포넌트들 중 하나 또는 그 초과의 컴포넌트들을 포함할 수 있는 전자 디바이스에 의해 구현될 수 있다.
[0067] 블록(610)은 방법(600-1)의 블록(610)을 에코(echo)한다. 즉, 특정 지문의 복수의 이미지들이 캡처된다. 여기서, 그러나, 이미지들은 블록(640)에서, 합성 이미지를 생성하기 위해서 함께 스티칭되고, 이들은 그 다음, 블록(650)에서 참조 이미지와 비교된다. 앞서 표시된 바와 같이, 실시예들은 또한 등록 단계 동안 유사한 스티칭 프로세스를 사용하여 참조 이미지를 생성할 수 있다.
[0068] 스티칭의 방법들은 원하는 기능에 따라 달라질 수 있다. 예를 들어, 제 2 캡처된 이미지가 제 1 이미지에 포함되지 않는 특징들(예를 들어, 상세사항들)을 포함한다고 결정되는 경우, 제 2 캡처된 이미지는 합성 이미지를 생성하기 위해서 제 1 캡처된 이미지로 "스티칭"될 수 있다. 후속적으로 캡처되는 이미지들은 그들이 현재 합성 이미지에서 발견되지 않는 특징들을 포함한다고 결정되는 경우 합성 이미지로 유사하게 스티칭될 수 있다. 이를테면, 합성 이미지가 임계 수의 상세사항들 또는 다른 특징들을 포함한다고 결정되는 경우, (블록(650)에서의) 참조 이미지와 합성 이미지의 비교는 주기적으로 그리고/또는 트리거링 이벤트들에 기초하여 발생할 수 있다. 마지막으로, 블록(660)에서, 참조 이미지와 합성 이미지의 비교에 기초하는 인증 레벨이 결정된다.
[0069] 본원에서 설명되는 다른 방법들에 있어서, 대안적 실시예들은 도 6a 및 도 6b에 도시되는 실시예들에 대한 변경들을 포함할 수 있다. 방법들(600)의 컴포넌트들은, 특정 순서로 예시되지만, 상이한 실시예들에 따라 상이한 순서로 그리고/또는 동시에 수행될 수 있다. 게다가, 도 6a 및 도 6b에 도시되는 방법들(600)과 관련하여 논의되는 실시예들은 지문 이미지들의 스티칭 및/또는 매칭을 논의하였지만, 실시예들은 다른 타입들의 데이터 및/또는 생체 측정으로 확장될 수 있다. 당업자는 많은 추가들, 생략들 및/또는 다른 변화들을 인식할 것이다.
[0070] 도 7은 전자 디바이스에 대한 인증 방법 중 방법(700)의 실시예를 예시한다. 방법(700)의 컴포넌트들 중 하나 또는 그 초과의 컴포넌트들을 수행하기 위한 수단은 도 8과 관련하여 더 상세하게 설명되는 하드웨어 및/또는 소프트웨어 수단을 포함할 수 있는데, 이는 또한 도 2 및 도 5에 도시되는 바와 같이 설명된 기능일 수 있다. 대안적 실시예들은 도시되는 실시예들에 대한 변경들을 포함할 수 있다. 방법(700)의 컴포넌트들은, 특정 순서로 예시되지만, 상이한 실시예들에 따라 상이한 순서로 그리고/또는 동시에 수행될 수 있다. 더욱이, 당업자는 많은 추가들, 생략들 및/또는 다른 변화들을 인식할 것이다.
[0071] 블록(710)에서, 복수의 생체 측정 이미지들은 일정 기간의 시간 동안 연속적으로 캡처된다. 사용자가 전자 디바이스의 키보드와 상호작용하는 동안, 생체 측정 이미지들은, 예를 들어, 복수의 생체 측정 이미지들을 캡처하도록 구성되는 하나 또는 그 초과의 센서들에 의해 일정 기간의 시간 동안 캡처되는 지문들을 포함할 수 있다. 사용자의 상호작용은 특정 인증 프로그램의 부분이 아닌 전자 디바이스의 사용자의 자연적인 사용의 부분일 수 있다. 즉, 복수의 생체 측정 이미지들은 전자 디바이스의 "배경" 특징으로서 캡처될 수 있다.
[0072] 블록(720)에서, 각각의 이미지의 캡처와 연관된 키보드의 키가 결정된다. 이것은 이미지-캡처링 센서의 위치에 기초할 수 있다. 예를 들어, 물리적 키보드 상에서, 각각의 키는 하나 또는 그 초과의 이미지-캡처링 센서들을 가질 수 있다. 가상적 키보드 상에서, 하나 또는 그 초과의 센서들은 특정 키를 예시하는 터치스크린의 일부분 아래에 로케이팅될 수 있다.
[0073] 블록(730)에서, 복수의 생체 측정 이미지들의 각각의 생체 측정 이미지는 적어도 하나의 참조 이미지와 비교된다. 일부 실시예들에서, 이 비교는 연관된 키에 기초한다. 이것은 전자 디바이스가 키와 연관된 손가락의 참조 지문과 지문에 대한 그것의 비교에 포커싱하게 한다. 위에서 상설된 바와 같이, 키보드의 상이한 키들(및/또는 입력 메커니즘 또는 사용자 인터페이스의 다른 버튼들 또는 특징들)은 등록 프로세스 동안 사용자의 손가락과 연관될 수 있다. 엄지들이 타이핑하는데 사용되는 하나의 예에서, 오른손 엄지는 키들 YUIOPHJKLBNM과 연관될 수 있고, 왼손 엄지는 키들 QWERTASDFGZXCV와 연관될 수 있다. 이 연관성들은, 인증 동안 블록(730)에 도시되는 바와 같이, 특정 키와 연관된 캡처된 이미지가 그 키와 연관된 손가락의 참조 이미지와 비교될 수 있도록 저장될 수 있다. 이 방식으로, 비교는 생리적 생체 측정(지문) 및 행동적 생체 측정(키와 손가락의 연관성) 둘 다를 측정할 수 있다.
[0074] 앞서 표시된 바와 같이, 각각의 생체 측정 이미지를 참조 이미지와 비교하는 것은 이미지들을 참조 이미지와 개별적으로 비교하는 것, 또는 참조 이미지와 비교되는 합성 이미지를 생성하기 위해서 그들을 "스티칭"하는 것을 포함할 수 있다. 엄지들이 타이핑하는데 사용되는 예에서, 예를 들어, 키들 YUIOPHJKLBNM 중 임의의 것으로부터의 이미지 캡처들은 오른손 엄지의 참조 이미지와 개별적으로 비교될 수 있거나, 또는 이후에 참조 이미지와 비교될 수 있는 오른손 엄지의 합성 이미지를 생성하기 위해서 결합될 수 있다.
[0075] 블록(740)에서, 비교의 결과를 표시하는 정보는 애플리케이션에 제공된다. 앞서 표시된 바와 같이, 참조 이미지와 캡처된 이미지의 비교는 2개의 이미지들이 매칭하고 그리고/또는 사용자의 아이덴티티가 검증되는 신뢰도의 정도일 수 있는 비교 결과를 제공할 수 있다. 결과의 표시는 (예를 들어, 인증의 정량화가능한 메트릭으로서) 애플리케이션에 제공된다. 이러한 인증의 정도에 있어서, 애플리케이션은 따라서, 예를 들어, 인증이 원하는 임계치를 충족시키는 것을 실패하는 경우 전자 디바이스의 사용자가 애플리케이션의 특정 기능들에 액세스하는 것을 방지하고, 사용자로부터의 추가 인증을 요청(예를 들어, 패스워드를 입력하도록 사용자에게 요청)하는 식으로써 그의 기능을 변경할 수 있다.
[0076] 원하는 기능에 따라, 도 7의 방법(700)은 광범위한 변화들을 포함할 수 있다. 예를 들어, 방법은 도 2에 도시된 행동적 생체 측정(220) 중 임의의 것과 같은 행동적 생체 측정 데이터를 개별적으로 캡처하는 단계, 캡처된 행동적 생체 측정 데이터를 저장된 행동적 생체 측정 데이터와 비교하는 단계 및 블록(740)에서 제공되는 비교의 결과를 표시하는 정보에서 이 비교를 설명하는 단계를 포함할 수 있다. 비교의 결과를 표시하는 정보는 방법(700)의 이미지 비교에 대한 별개의 인증 메트릭들 및 별개의 행동적 생체 측정을 포함할 수 있거나, 또는 그것은 (예를 들어, 결합된 비교 스코어로서) 비교 결과들의 결합을 포함할 수 있다. 상이한 생체 측정의 결합은 본원에서 설명되는 기법들(예를 들어, Boolean 결합, Neyman-Pearson 기법들, 멀티-모달 퓨전 등)을 사용하여 이루어질 수 있다.
[0077] 추가적으로 또는 대안적으로, 블록(740)에서 제공되는 비교의 결과를 표시하는 정보는 인증의 임계 레벨이 충족되는지 여부에 대한 표시를 포함할 수 있다. 즉, 애플리케이션이 사용할 수 있는 인증 레벨을 애플리케이션에 제공하는 대신에, 본원에서 제공되는 기능은 인증의 임계 레벨이 충족되었는지 여부를 결정하는 단계를 더 포함할 수 있다. 이러한 경우들에서, 애플리케이션은 그 다음, 인증의 임계 레벨이 충족되었는지 여부를 단순히 문의하고, 전자 디바이스로부터 바이너리 응답을 수신할 수 있다.
[0078] 선택적으로, 위에서 제안된 바와 같이, 도 7의 방법(700)은 초기 인증이 전자 디바이스를 사용하여 발생한 이후 활용될 수 있다. 예를 들어, 애플리케이션은 초기에, 패스워드, 서명 또는 다른 인증 생체 측정을 입력하도록 사용자에게 요구할 수 있다. 이 초기 인증이 발생한 이후, 애플리케이션은 그 다음, 진행 중인 인증 정보에 대한 도 7의 방법(700)에 의해 제공되는 인증에 의존할 수 있다.
[0079] 도 8은 하나의 실시예에 따른 전자 디바이스(110)의 컴포넌트들을 예시하며, 이들은 도 2 및 도 5에 예시되는 컴포넌트들뿐만 아니라 도 6a-7에서 설명되는 방법들을 포함하는 본원에서 논의되는 인증 기법들을 구현할 수 있다. 도 8은 단지 다양한 컴포넌트들 － 이들 중 임의의 것 또는 이들 전부가 적절하게 활용될 수 있음 － 의 일반화된 예시를 제공하는 것으로 의미된다는 점이 주목되어야 한다. 더욱이, 시스템 엘리먼트들은 상대적으로 분리된 또는 상대적으로 더 통합된 방식으로 구현될 수 있다.
[0080] 버스(805)를 통해 전기적으로 커플링될 수 있는(또는 그렇지 않으면, 적절하게 통신할 수 있는) 하드웨어 엘리먼트들을 포함하는 전자 디바이스(110)가 도시된다. 하드웨어 엘리먼트들은, (제한없이, 하나 또는 그 초과의 범용 프로세서들, 및/또는 하나 또는 그 초과의 특수 목적 프로세서들(이를테면, 디지털 신호 프로세싱 칩들, 그래픽 가속 프로세서들 등)을 포함하는) 프로세싱 유닛(810)을 포함할 수 있고, 하나 또는 그 초과의 입력 디바이스들(815)은 도 1에 예시되는 바와 같은 입력 메커니즘들(120)을 포함할 수 있다. 이것은, 제한없이, 카메라(들), 터치스크린, 터치 패드, 마이크로폰, 키보드, 마우스, 버튼(들), 다이얼(들), 스위치(들) 등을 포함할 수 있고, 하나 또는 그 초과의 출력 디바이스들(820)은, 제한없이, 디스플레이 디바이스, 프린터, 디스플레이, LED(light emitting diode), 스피커들 등을 포함할 수 있다.
[0081] 입력 디바이스들(815)은 하나 또는 그 초과의 센서들(이를테면, 도 5의 센서(들)(510))을 더 포함할 수 있다. 이러한 센서들은, 제한없이, 하나 또는 그 초과의 가속도계(들), 자이로스코프(들), 카메라(들), 자력계(들), 고도계(들), 마이크로폰(들), 근접 센서(들), 광 센서(들) 등을 포함할 수 있다. 이 센서들은 생체 측정 데이터(생리적 및/또는 행동적)가 추출될 수 있는 데이터를 캡처할 수 있는 것과 같은 이러한 방식으로 다른 입력 디바이스들(815)(예를 들어, 도 1의 입력 메커니즘들(120)) 및/또는 전자 디바이스(110)의 부분들로 통합될 수 있다.
[0082] 전자 디바이스(110)는 (제한없이, 로컬 및/또는 네트워크 액세스가능한 저장소를 포함하고 그리고/또는 제한없이, 프로그래밍가능하고, 플래시-업데이트 가능한 식일 수 있는 디스크 드라이브, 드라이브 어레이, 광학 저장 디바이스, 고체-상태 저장 디바이스, 이를테면, "RAM"(random access memory) 및/또는 "ROM"(read-only memory)을 포함할 수 있는) 하나 또는 그 초과의 비-일시적 저장 디바이스들(825)을 더 포함할 수 있다(그리고/또는 이들과 통신할 수 있다). 이러한 저장 디바이스들은, (제한없이, 다양한 파일 시스템들, 데이터베이스 구조들 등을 포함하는) 임의의 적절한 데이터 저장소들을 구현하도록 구성될 수 있다. 예를 들어, 비-일시적 저장 디바이스들(825)은 도 5의 데이터 저장소(570)를 구현하는데 사용될 수 있다.
[0083] 전자 디바이스(110)는 또한, (제한없이, 모뎀, 네트워크 카드(무선 또는 유선), 적외선 통신 디바이스, 무선 통신 디바이스, 및/또는 칩셋(이를테면, Bluetooth™ 디바이스, 802.11 디바이스, WiFi 디바이스, WiMax 디바이스, 셀룰러 통신 설비들 등) 등을 포함할 수 있는) 통신 인터페이스(830)를 포함할 수 있다. 인터페이스의 서브컴포넌트들은 전자 디바이스(110)(예를 들어, 모바일 폰, 개인용 컴퓨터 등)의 타입에 따라 달라질 수 있다. 통신 인터페이스(830)는 데이터가 데이터 네트워크, 다른 컴퓨터 시스템들, 및/또는 본원에서 설명되는 임의의 다른 디바이스들과 교환되게 허용할 수 있다.
[0084] 전자 디바이스(110)가 모바일 디바이스인 실시예들은 또한, 하나 또는 그 초과의 SPS 위성들로부터 신호들을 수신할 수 있는 GPS(Global Positioning System)와 같은 SPS(Satellite Positioning System) 수신기(도시되지 않음)를 포함할 수 있다. 이러한 포지셔닝은 본원에서 설명되는 기법들을 보완하고 그리고/또는 통합시키는데 활용될 수 있다. SPS는 하나 또는 그 초과의 세계적(global) 그리고/또는 지역적(regional) 네비게이션 위성 시스템들 및/또는 증대 시스템들의 임의의 결합을 포함할 수 있고, SPS 신호들은 SPS, SPS-유사 그리고/또는 이러한 하나 또는 그 초과의 SPS와 연관된 다른 신호들을 포함할 수 있다는 점이 주목될 수 있다.
[0085] 많은 실시예들에서, 전자 디바이스(110)는 위에서 설명된 바와 같이, RAM 또는 ROM 디바이스를 포함할 수 있는 작업 메모리(835)를 더 포함할 것이다. 작업 메모리(835) 내에 현재 로케이팅되는 것으로 도시되는 소프트웨어 엘리먼트들은, 운영 시스템(840), 디바이스 드라이버들, 실행가능한 라이브러리들 및/또는 다른 코드, 이를테면, 다양한 실시예들에 의해 제공되는 소프트웨어 프로그램들을 포함할 수 있고 그리고/또는 본원에서 설명되는 바와 같이, 도 2 및 도 5에 도시되는 컴포넌트들뿐만 아니라 도 6a-7에 도시되는 방법들 전부 또는 그들 중 일부와 같은, 다른 실시예들에 의해 제공되는 방법들을 구현하고 그리고/또는 시스템들을 구성하도록 설계될 수 있는 하나 또는 그 초과의 애플리케이션 프로그램들(845)을 포함할 수 있다. 단지 예로서, 위에서 논의된 방법(들)에 대해 설명되는 하나 또는 그 초과의 프로시저들은 컴퓨터(및/또는 컴퓨터 내의 프로세서)에 의해 실행가능한 코드 및/또는 명령들로서 구현될 수 있고, 양상에서, 그 다음, 이러한 코드 및/또는 명령들은 설명되는 방법들에 따라 하나 또는 그 초과의 동작들을 수행하도록 범용 컴퓨터(또는 다른 디바이스)를 구성시키고 그리고/또는 적응시키기 위해서 사용될 수 있다.
[0086] 이 명령들 및/또는 코드의 세트는, 위에서 설명된 비-일시적 저장 디바이스(들)(825)와 같은 비-일시적 컴퓨터 판독가능한 저장 매체 상에 저장될 수 있다. 일부 경우들에서, 저장 매체는 컴퓨터 시스템, 이를테면, 전자 디바이스(110) 내에 포함될 수 있다. 다른 실시예들에서, 저장 매체는 컴퓨터 시스템(예를 들어, 탈착식(removable) 매체, 이를테면, 플래시 드라이브)과 별개일 수 있고, 그리고/또는 저장 매체가 저장 매체 상에 저장된 명령들/코드로 범용 컴퓨터를 프로그래밍하고, 구성하고 그리고/또는 적응시키는데 사용될 수 있도록 설치 패키지로 제공될 수 있다. 이 명령들은 전자 디바이스(110)에 의해 실행가능한 실행가능 코드의 형태를 취할 수 있고 그리고/또는 (그 다음, 전자 디바이스(110) 상에서의 컴파일(compilation) 및/또는 설치(installation) 시, (예를 들어, 다양한 일반적으로 이용가능한 컴파일러들, 설치 프로그램들, 압축/압축해제 유틸리티들 등 중 임의의 것을 사용하여) 실행가능한 코드의 형태를 취하는) 소스 및/또는 설치가능한 코드의 형태를 취할 수 있다.
[0087] 특정 요건들에 따라 실질적 변화들이 이루어질 수 있다는 것이 당업자들에게 명백할 것이다. 예를 들어, 커스터마이징된 하드웨어가 또한 사용될 수 있고 그리고/또는 특정 엘리먼트들이 하드웨어, 소프트웨어(애플릿들과 같은 휴대용 소프트웨어 등을 포함함) 또는 둘 다로 구현될 수 있다. 추가로, 네트워크 입력/출력 디바이스들과 같은 다른 컴퓨팅 디바이스들로의 연결이 이용될 수 있다.
[0088] 위에서 언급된 바와 같이, 하나의 양상에서, 일부 실시예들은 본 발명의 다양한 실시예들에 따라 방법들을 수행하기 위해서 컴퓨터 시스템(이를테면, 전자 디바이스(110))을 이용할 수 있다. 한 세트의 실시예들에 따라, 프로세싱 유닛(810)이 작업 메모리(835)에 포함되는 하나 또는 그 초과의 명령들(애플리케이션 프로그램(845)과 같은 운영 시스템(840) 및/또는 다른 코드로 통합될 수 있음)의 하나 또는 그 초과의 시퀀스들을 실행하는 것에 응답하여, 이러한 방법들의 프로시저들 전부 또는 그들 중 일부가 전자 디바이스(110)에 의해 수행된다. 이러한 명령들은 또 다른 컴퓨터 판독가능한 매체, 이를테면, 비-일시적 저장 디바이스(들)(825) 중 하나 또는 그 초과의 저장 디바이스(들)로부터 작업 메모리(835)로 판독될 수 있다. 단지 예로서, 작업 메모리(835)에 포함되는 명령들의 시퀀스들의 실행은, 프로세싱 유닛(810)으로 하여금 본원에서 설명되는 방법들의 하나 또는 그 초과의 프로시저들을 수행하게 할 수 있다.
[0089] 본원에서 사용되는 바와 같은 "머신 판독가능한 매체" 및 "컴퓨터 판독가능한 매체"라는 용어들은, 머신으로 하여금 특정 방식으로 동작하게 하는 데이터를 제공하는데 참여하는 임의의 매체를 지칭한다. 전자 디바이스(110)를 사용하여 구현되는 실시예에서, 다양한 컴퓨터 판독가능한 매체들이, 실행을 위한 명령들/코드를 프로세싱 유닛(810)에 제공하는데 수반될 수 있고, 그리고/또는 이러한 명령들/코드를 저장 및/또는 전달하는데 사용될 수 있다. 많은 구현들에서, 컴퓨터 판독가능한 매체는 물리적 그리고/또는 유형의 저장 매체이다. 이러한 매체는 비-휘발성 매체들 또는 휘발성 매체들의 형태를 취할 수 있다. 비-휘발성 매체들은, 예를 들어, 광학 그리고/또는 자기 디스크들, 이를테면, 비-일시적 저장 디바이스(들)(825)를 포함한다. 휘발성 매체들은, 제한없이, 동적 메모리, 이를테면, 작업 메모리(835)를 포함한다.
[0090] 다양한 형태들의 컴퓨터 판독가능한 매체들은 실행을 위한 하나 또는 그 초과의 명령들의 하나 또는 그 초과의 시퀀스들을 프로세싱 유닛(810)에 전달하는데 수반될 수 있다. 단지 예로서, 명령들은 초기에, 원격 컴퓨터의 자기 디스크 및/또는 광학 디스크 상에서 전달될 수 있다. 원격 컴퓨터는 그것의 동적 메모리에 명령들을 로딩하고, 전자 디바이스(110)에 의해 수신 및/또는 실행되도록 송신 매체 상에서 신호들로서 명령들을 전송할 수 있다.
[0091] 통신 인터페이스(830)(및/또는 이것의 컴포넌트들)는 일반적으로 신호들을 수신할 것이고, 그 다음, 버스(805)는 신호들(및/또는 신호들에 의해 전달되는 데이터, 명령들 등)을 작업 메모리(835)에 전달할 수 있고, 프로세싱 유닛(810)은 이러한 작업 메모리(835)로부터의 명령들을 리트리브하고 실행한다. 작업 메모리(835)에 의해 수신되는 명령들은 프로세싱 유닛(810)에 의한 실행 이전에 또는 그 이후에 비-일시적 저장 디바이스(825) 상에 선택적으로 저장될 수 있다.
[0092] 특정 요건들에 따라 실질적 변화들이 이루어질 수 있다는 것이 당업자들에게 명백할 것이다. 예를 들어, 커스터마이징된 하드웨어가 또한 사용될 수 있고 그리고/또는 특정 엘리먼트들이 하드웨어, 소프트웨어(애플릿들과 같은 휴대용 소프트웨어 등을 포함함) 또는 둘 다로 구현될 수 있다. 추가로, 네트워크 입력/출력 디바이스들과 같은 다른 컴퓨팅 디바이스들로의 연결이 이용될 수 있다.
[0093] 위에서 논의된 방법들, 시스템들 및 디바이스들은 예들이다. 다양한 구성들은 적절하게 다양한 프로시저들 또는 컴포넌트들을 생략, 대체 또는 부가할 수 있다. 예를 들어, 대안적 구성들에서, 방법들은 설명되는 것과 상이한 순서로 수행될 수 있고, 그리고/또는 다양한 스테이지들이 추가, 생략 및/또는 결합될 수 있다. 또한, 특정 구성들에 대해 설명되는 특징들은 다양한 다른 구성들에서 결합될 수 있다. 구성들의 상이한 양상들 및 엘리먼트들은 유사한 방식으로 결합될 수 있다. 또한, 기술은 진화하고, 따라서, 엘리먼트들 중 다수가 이러한 특정 예들이며, 본 개시 내용 또는 청구항들의 범위를 제한하지 않는다.
[0094] 본원에서 사용되는 바와 같은 "및", 그리고 "또는"이라는 용어들은, 이러한 용어들이 사용되는 맥락에 적어도 부분적으로 의존하는 것으로 또한 예상되는 다양한 의미들을 포함할 수 있다. 전형적으로, "또는"은, A, B 또는 C와 같이 리스트를 연관시키는데 사용되면, 포괄적 의미로 여기서 사용되는 A, B, 및 C 뿐만 아니라 배타적 의미로 여기서 사용되는 A, B 또는 C를 의미하는 것으로 의도된다. 또한, 본원에서 사용되는 바와 같은 "하나 또는 그 초과"라는 용어는 단수형으로 임의의 특징, 구조 또는 특성을 설명하는데 사용될 수 있거나, 또는 특징들, 구조들 또는 특성들의 몇몇 결합을 설명하는데 사용될 수 있다. 그러나, 이것은 단지 예시적 예이고, 청구되는 청구 대상은 이 예에 제한되는 것이 아니라는 점이 주목되어야 한다. 게다가, "~ 중 적어도 하나"는 A, B 또는 C와 같은 리스트를 연관시키는데 사용되면, A, AB, AA, AAB, AABBCCC 등과 같이 A, B 및/또는 C의 임의의 결합을 의미하는 것으로 해석될 수 있다.
[0095] 몇몇 예시적 구성들을 설명하였지만, 다양한 수정들, 대안적 구조들 및 등가물들이 본 개시 내용의 사상으로부터 벗어나지 않고 사용될 수 있다. 예를 들어, 위의 엘리먼트들은 더 큰 시스템의 컴포넌트일 수 있고, 여기서 다른 규정들은 본 발명의 애플리케이션보다 우선권을 얻거나, 또는 그렇지 않으면 본 발명의 애플리케이션을 수정할 수 있다. 또한, 다수의 단계들이 위의 엘리먼트들이 고려되기 전에, 그 동안 또는 그 이후 착수될 수 있다. 따라서, 위의 설명은 청구항들의 범위를 한정하지 않는다.

Claims (38)

  1. 전자 디바이스의 사용자를 인증하는 방법으로서,
    상기 전자 디바이스의 하나 또는 그 초과의 센서들에 의해, 상기 사용자가 비-인증 동작에 대한 사용자 데이터를 입력하기 위해 상기 전자 디바이스의 사용자 인터페이스와 상호작용하고 있는 동안 일정 시간 기간에 걸쳐 연속하여 복수의 생체 이미지들을 캡처하는 단계;
    상기 복수의 생체 이미지들의 각각의 이미지에 대해: (1) 상기 전자 디바이스의 프로세서에 의해, 상기 사용자 인터페이스의 키(key)를 결정하고 ― 상기 키는 상기 사용자 인터페이스와 상호작용하는 동안 상기 사용자에 의해 선택되고, 상기 키는 상기 이미지의 캡처와 연관됨 ―; 그리고 (2) 상기 전자 디바이스의 상기 프로세서에 의해, 상기 사용자 인터페이스의 상기 키에 대응하는 손가락을 결정하는 단계;
    상기 프로세서에 의해, 상기 복수의 생체 이미지들이 상기 사용자의 단일 손가락에 대응하는지 여부를 결정하는 단계;
    상기 복수의 생체 이미지들이 상기 사용자의 상기 단일 손가락에 대응한다고 결정하는 것에 응답하여, 상기 전자 디바이스의 상기 프로세서에 의해, 복수의 캡처된 이미지들과의 비교를 위해, 상기 복수의 생체 이미지들에 대응하는 상기 사용자의 상기 단일 손가락에 기초하여 복수의 참조 이미지들로부터 적어도 하나의 참조 이미지를 선택하는 단계;
    상기 전자 디바이스의 상기 프로세서에 의해, 상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하는 단계; 및
    상기 비교하는 것에 기초하여 상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하는 단계를 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  2. 제 1 항에 있어서,
    상기 사용자 인터페이스는 상기 전자 디바이스의 터치스크린 상의 가상 키보드를 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  3. 제 1 항에 있어서,
    상기 사용자 인터페이스는 물리적 키보드를 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  4. 제 1 항에 있어서,
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하는 것은 복수의 비교들을 야기하고,
    상기 방법은 상기 복수의 비교들의 결과들을 단일 결과로 결합하는 단계를 더 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  5. 제 1 항에 있어서,
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하는 단계는:
    상기 복수의 생체 이미지들을 합성 이미지로 결합하는 단계; 및
    상기 합성 이미지를 상기 적어도 하나의 선택된 참조 이미지와 비교하는 단계를 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  6. 제 5 항에 있어서,
    상기 복수의 생체 이미지들을 합성 이미지로 결합하는 단계는 지문의 상기 합성 이미지를 형성하기 위해 함께 상기 복수의 생체 이미지들을 스티칭(stitch)하는 단계를 더 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  7. 제 6 항에 있어서,
    상기 캡처된 복수의 생체 이미지들 중 적어도 두 개의 이미지들은 상기 사용자 인터페이스의 상이한 키와 각각 연관되는,
    전자 디바이스의 사용자를 인증하는 방법.
  8. 제 1 항에 있어서,
    행동적(behavioral) 생체 데이터를 캡처하는 단계; 및
    상기 캡처된 행동적 생체 데이터를 저장된 행동적 생체 데이터와 비교하는 단계를 더 포함하고,
    상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하는 것은 상기 캡처된 행동적 생체 데이터를 상기 저장된 행동적 생체 데이터와 비교하는 것에 추가로 기초하는,
    전자 디바이스의 사용자를 인증하는 방법.
  9. 제 8 항에 있어서,
    결합된 비교 스코어를 생성하기 위해서 (i) 상기 복수의 생체 이미지들의 상기 적어도 하나의 선택된 참조 이미지와의 비교에 관한 정보 및 (ii) 상기 캡처된 행동적 생체 데이터의 상기 저장된 행동적 생체 데이터의 결과들과의 비교의 결과들을 결합하는 단계를 더 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  10. 제 1 항에 있어서,
    상기 복수의 생체 이미지들을 캡처하는 단계는 상기 전자 디바이스를 사용하는 초기 인증 이후에 발생하는,
    전자 디바이스의 사용자를 인증하는 방법.
  11. 제 1 항에 있어서,
    제공되는 정보는 상기 사용자의 애플리케이션의 기능(functionality)을 결정하기 위해 사용되는,
    전자 디바이스의 사용자를 인증하는 방법.
  12. 제 1 항에 있어서,
    상기 복수의 캡처된 이미지들과의 비교를 위해 상기 복수의 참조 이미지들로부터 상기 적어도 하나의 참조 이미지를 선택하는 것은 상기 사용자가 상기 사용자 인터페이스와 상호작용하고 있을 때 상기 전자 디바이스의 배향(orientation)에 기초하는,
    전자 디바이스의 사용자를 인증하는 방법.
  13. 제 1 항에 있어서,
    상기 사용자 인터페이스의 상기 키에 대응하는 손가락을 결정하는 단계는 복수의 손가락들로부터 상기 키와 연관된 손가락을 선택하는 단계를 포함하는,
    전자 디바이스의 사용자를 인증하는 방법.
  14. 제 13 항에 있어서,
    상기 복수의 손가락들의 각각의 손가락은 상기 복수의 참조 이미지들 중 적어도 하나의 상이한 참조 이미지와 연관되는,
    전자 디바이스의 사용자를 인증하는 방법.
  15. 제 1 항에 있어서,
    상기 사용자 인터페이스의 상기 키에 대응하는 손가락을 결정하는 것은 상기 사용자 인터페이스의 상기 키와 상기 손가락 간의 맵핑(mapping)에 기초하는,
    전자 디바이스의 사용자를 인증하는 방법.
  16. 제 15 항에 있어서,
    상기 사용자 인터페이스의 각각의 키는 상기 사용자의 적어도 하나의 손가락에 맵핑되고 그리고 사용자 인터페이스들의 적어도 두 개의 키들은 상기 사용자의 하나의 손가락에 맵핑되는,
    전자 디바이스의 사용자를 인증하는 방법.
  17. 디바이스로서,
    사용자 인터페이스;
    사용자가 비-인증 동작에 대해 사용되는 사용자 데이터를 입력하기 위해 상기 사용자 인터페이스와 상호작용하고 있는 동안 일정 시간 기간에 걸쳐 연속하여 복수의 생체 이미지들을 캡처하도록 구성된 하나 또는 그 초과의 센서들; 및
    상기 하나 또는 그 초과의 센서들과 통신가능하게 커플링된 프로세싱 유닛을 포함하고,
    상기 프로세싱 유닛은:
    상기 복수의 생체 이미지들의 각각의 이미지에 대해: (1) 상기 사용자 인터페이스의 키를 결정하고 ― 상기 키는 상기 사용자 인터페이스와 상호작용하는 동안 상기 사용자에 의해 선택되고, 상기 키는 상기 이미지의 캡처와 연관됨 ―; 그리고 (2) 상기 사용자 인터페이스의 상기 키에 대응하는 손가락을 결정하고;
    상기 복수의 생체 이미지들이 상기 사용자의 단일 손가락에 대응하는지 여부를 결정하고;
    상기 복수의 생체 이미지들이 상기 사용자의 상기 단일 손가락에 대응한다고 결정하는 것에 응답하여, 복수의 캡처된 이미지들과의 비교를 위해, 상기 복수의 생체 이미지들에 대응하는 상기 사용자의 상기 단일 손가락에 기초하여 복수의 참조 이미지들로부터 적어도 하나의 참조 이미지를 선택하고;
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하고; 그리고
    상기 비교하는 것에 기초하여 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하도록
    구성되는,
    디바이스.
  18. 제 17 항에 있어서,
    터치스크린을 더 포함하고,
    상기 사용자 인터페이스는 상기 터치스크린 상의 가상 키보드를 포함하는,
    디바이스.
  19. 제 17 항에 있어서,
    상기 프로세싱 유닛은 추가로:
    상기 복수의 생체 이미지들의 각각의 이미지를 상기 적어도 하나의 선택된 참조 이미지와 비교함으로써 복수의 비교들을 수행하고, 그리고
    상기 복수의 비교들의 결과들을 단일 결과로 결합하도록
    구성되는,
    디바이스.
  20. 제 17 항에 있어서,
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하는 것은:
    상기 복수의 생체 이미지들을 합성 이미지로 결합하는 것; 및
    상기 합성 이미지를 상기 적어도 하나의 선택된 참조 이미지와 비교하는 것을 포함하는,
    디바이스.
  21. 제 17 항에 있어서,
    상기 프로세싱 유닛은 추가로:
    행동적 생체 데이터를 캡처하고; 그리고
    상기 캡처된 행동적 생체 데이터를 저장된 행동적 생체 데이터와 비교하도록
    구성되고,
    상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하는 것은 상기 캡처된 행동적 생체 데이터를 상기 저장된 행동적 생체 데이터와 비교하는 것에 추가로 기초하는,
    디바이스.
  22. 제 21 항에 있어서,
    상기 프로세싱 유닛은 추가로, 결합된 비교 스코어를 생성하기 위해서 (i) 상기 복수의 생체 이미지들의 상기 적어도 하나의 선택된 참조 이미지와의 비교에 관한 정보 및 (ii) 상기 캡처된 행동적 생체 데이터의 상기 저장된 행동적 생체 데이터의 결과들과의 비교의 결과들을 결합하도록 구성되는,
    디바이스.
  23. 제 17 항에 있어서,
    상기 프로세싱 유닛은 추가로, 상기 하나 또는 그 초과의 센서들로 하여금 상기 디바이스가 초기 인증을 수행한 후에 상기 복수의 생체 이미지들을 캡처하게 하도록 구성되는,
    디바이스.
  24. 제 17 항에 있어서,
    제공되는 정보는 상기 사용자의 애플리케이션의 기능을 결정하기 위해 사용되는,
    디바이스.
  25. 전자 디바이스의 사용자를 인증하기 위해 임베딩된 명령들을 갖는 비-일시적 컴퓨터-판독가능 저장 매체로서,
    상기 명령들은, 상기 전자 디바이스의 하나 또는 그 초과의 프로세서들에 의해 실행될 때, 상기 하나 또는 그 초과의 프로세서들로 하여금:
    상기 전자 디바이스의 하나 또는 그 초과의 센서들에 의해, 상기 사용자가 비-인증 동작에 대해 사용되는 사용자 데이터를 입력하기 위해 상기 전자 디바이스의 사용자 인터페이스와 상호작용하고 있는 동안 일정 시간 기간에 걸쳐 연속하여 복수의 생체 이미지들을 캡처하게 하고;
    상기 복수의 생체 이미지들의 각각의 이미지에 대해: (1) 상기 사용자 인터페이스의 키를 결정하게 하고 ― 상기 키는 상기 사용자 인터페이스와 상호작용하는 동안 상기 사용자에 의해 선택되고, 상기 키는 상기 이미지의 캡처와 연관됨 ―; 그리고 (2) 상기 전자 디바이스의 프로세서에 의해, 상기 사용자 인터페이스의 상기 키에 대응하는 손가락을 결정하게 하고;
    상기 복수의 생체 이미지들이 상기 사용자의 단일 손가락에 대응하는지 여부를 결정하게 하고;
    상기 키에 대응하는 손가락을 결정하는 것에 응답하여, 캡처된 이미지와의 비교를 위해, 상기 사용자 인터페이스의 상기 키에 대응하는 손가락에 기초하여 복수의 참조 이미지들로부터 적어도 하나의 참조 이미지를 선택하게 하고 ― 상기 복수의 참조 이미지들은 상기 사용자 인터페이스의 몇몇 키들과 연관됨 ―;
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하게 하고; 그리고
    상기 비교하는 것에 기초하여 상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하게 하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  26. 제 25 항에 있어서,
    상기 사용자 인터페이스는 상기 전자 디바이스의 터치스크린 상의 가상 키보드를 포함하고, 상기 명령들은 추가로 상기 하나 또는 그 초과의 프로세서들로 하여금, 상기 가상 키보드를 디스플레이하게 하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  27. 제 25 항에 있어서,
    상기 복수의 생체 이미지들의 각각의 이미지를 상기 적어도 하나의 선택된 참조 이미지와 비교하기 위한 컴퓨터 코드는 복수의 비교들을 야기하고, 상기 명령들은 상기 하나 또는 그 초과의 프로세서들로 하여금, 상기 복수의 비교들의 결과들을 단일 결과로 결합하게 하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  28. 제 25 항에 있어서,
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하는 것은:
    상기 복수의 생체 이미지들을 합성 이미지로 결합하는 것; 및
    상기 합성 이미지를 상기 적어도 하나의 참조 이미지와 비교하는 것을 포함하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  29. 제 25 항에 있어서,
    상기 명령들은 추가로 상기 하나 또는 그 초과의 프로세서들로 하여금:
    행동적 생체 데이터를 캡처하게 하고; 그리고
    상기 캡처된 행동적 생체 데이터를 저장된 행동적 생체 데이터와 비교하게 하고,
    상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하는 것은 상기 캡처된 행동적 생체 데이터를 상기 저장된 행동적 생체 데이터와 비교하는 것에 추가로 기초하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  30. 제 29 항에 있어서,
    상기 명령들은 추가로 상기 하나 또는 그 초과의 프로세서들로 하여금, 결합된 비교 스코어를 생성하기 위해서 (i) 상기 복수의 생체 이미지들의 상기 적어도 하나의 선택된 참조 이미지와의 비교에 관한 정보 및 (ii) 상기 캡처된 행동적 생체 데이터의 상기 저장된 행동적 생체 데이터의 결과들과의 비교의 결과들을 결합하게 하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  31. 제 25 항에 있어서,
    상기 명령들은 추가로 상기 하나 또는 그 초과의 프로세서들로 하여금, 상기 비교하는 것에 기초하여 인증의 임계 레벨이 충족되는지 여부를 결정하게 하고, 상기 인증의 임계 레벨이 충족된다고 결정할 시에 상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  32. 제 25 항에 있어서,
    상기 명령들은 추가로 상기 하나 또는 그 초과의 프로세서들로 하여금, 상기 전자 디바이스를 사용하는 초기 인증 이후에 상기 복수의 생체 이미지들을 캡처하게 하는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  33. 제 25 항에 있어서,
    제공되는 정보는 상기 사용자의 애플리케이션의 기능을 결정하기 위해 사용되는,
    비-일시적 컴퓨터-판독가능 저장 매체.
  34. 장치로서,
    사용자가 비-인증 동작에 대해 사용되는 사용자 데이터를 입력하기 위해 상기 장치의 사용자 인터페이스와 상호작용하고 있는 동안 하나 또는 그 초과의 센서들을 이용하여 일정 시간 기간에 걸쳐 연속하여 복수의 생체 이미지들을 캡처하기 위한 수단;
    상기 복수의 생체 이미지들의 각각의 이미지에 대해: (1) 상기 사용자 인터페이스의 키를 결정하고 ― 상기 키는 상기 사용자 인터페이스와 상호작용하는 동안 상기 사용자에 의해 선택되고, 상기 키는 상기 이미지의 캡처와 연관됨 ―; 그리고 (2) 상기 사용자 인터페이스의 상기 키에 대응하는 손가락을 결정하기 위한 수단;
    상기 복수의 생체 이미지들이 상기 사용자의 단일 손가락에 대응하는지 여부를 결정하기 위한 수단;
    상기 복수의 생체 이미지들이 상기 사용자의 상기 단일 손가락에 대응한다고 결정하는 것에 응답하여, 전자 디바이스의 프로세서에 의해, 복수의 캡처된 이미지들과의 비교를 위해, 상기 복수의 생체 이미지들에 대응하는 상기 사용자의 상기 단일 손가락에 기초하여 복수의 참조 이미지들로부터 적어도 하나의 참조 이미지를 선택하기 위한 수단;
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하기 위한 수단; 및
    상기 비교하는 것에 기초하여 상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하기 위한 수단을 포함하는,
    장치.
  35. 제 34 항에 있어서,
    상기 사용자 인터페이스는 가상 키보드를 포함하고, 그리고 상기 장치는 상기 가상 키보드를 디스플레이하기 위한 수단을 더 포함하는,
    장치.
  36. 제 34 항에 있어서,
    상기 복수의 생체 이미지들의 각각의 이미지를 상기 적어도 하나의 선택된 참조 이미지와 비교하기 위한 수단은 복수의 비교들을 야기하도록 구성되고, 그리고 상기 장치는 상기 복수의 비교들의 결과들을 단일 결과로 결합하기 위한 수단을 더 포함하는,
    장치.
  37. 제 34 항에 있어서,
    상기 복수의 생체 이미지들을 상기 적어도 하나의 선택된 참조 이미지와 비교하기 위한 수단은:
    상기 복수의 생체 이미지들을 합성 이미지로 결합하고; 그리고
    상기 합성 이미지를 상기 적어도 하나의 참조 이미지와 비교하기 위한
    수단을 포함하는,
    장치.
  38. 제 34 항에 있어서,
    행동적 생체 데이터를 캡처하고; 그리고
    상기 캡처된 행동적 생체 데이터를 저장된 행동적 생체 데이터와 비교하기 위한
    수단을 더 포함하고,
    상기 전자 디바이스에 대한 액세스를 위해 상기 사용자를 인증하는 것은 상기 캡처된 행동적 생체 데이터를 상기 저장된 행동적 생체 데이터와 비교하는 것에 추가로 기초하는,
    장치.
KR1020167023176A 2014-01-30 2015-01-15 동적 키보드 및 터치스크린 생체 측정 KR101839860B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/169,007 US9747428B2 (en) 2014-01-30 2014-01-30 Dynamic keyboard and touchscreen biometrics
US14/169,007 2014-01-30
PCT/US2015/011609 WO2015116403A1 (en) 2014-01-30 2015-01-15 Dynamic keyboard and touchscreen biometrics

Publications (2)

Publication Number Publication Date
KR20160114108A KR20160114108A (ko) 2016-10-04
KR101839860B1 true KR101839860B1 (ko) 2018-03-20

Family

ID=52450597

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167023176A KR101839860B1 (ko) 2014-01-30 2015-01-15 동적 키보드 및 터치스크린 생체 측정

Country Status (6)

Country Link
US (1) US9747428B2 (ko)
EP (1) EP3100194B1 (ko)
JP (1) JP6397036B2 (ko)
KR (1) KR101839860B1 (ko)
CN (1) CN106415570B (ko)
WO (1) WO2015116403A1 (ko)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11223619B2 (en) 2010-11-29 2022-01-11 Biocatch Ltd. Device, system, and method of user authentication based on user-specific characteristics of task performance
US10834590B2 (en) 2010-11-29 2020-11-10 Biocatch Ltd. Method, device, and system of differentiating between a cyber-attacker and a legitimate user
US10621585B2 (en) 2010-11-29 2020-04-14 Biocatch Ltd. Contextual mapping of web-pages, and generation of fraud-relatedness score-values
US10728761B2 (en) 2010-11-29 2020-07-28 Biocatch Ltd. Method, device, and system of detecting a lie of a user who inputs data
US10949514B2 (en) 2010-11-29 2021-03-16 Biocatch Ltd. Device, system, and method of differentiating among users based on detection of hardware components
US11210674B2 (en) 2010-11-29 2021-12-28 Biocatch Ltd. Method, device, and system of detecting mule accounts and accounts used for money laundering
US10917431B2 (en) 2010-11-29 2021-02-09 Biocatch Ltd. System, method, and device of authenticating a user based on selfie image or selfie video
US20190158535A1 (en) * 2017-11-21 2019-05-23 Biocatch Ltd. Device, System, and Method of Detecting Vishing Attacks
US10069837B2 (en) 2015-07-09 2018-09-04 Biocatch Ltd. Detection of proxy server
US9582127B2 (en) * 2014-04-04 2017-02-28 Synaptics Incorporated Large feature biometrics using capacitive touchscreens
US9710629B2 (en) * 2014-05-13 2017-07-18 Google Technology Holdings LLC Electronic device with method for controlling access to same
US9686275B2 (en) * 2014-07-07 2017-06-20 International Business Machines Corporation Correlating cognitive biometrics for continuous identify verification
US9754093B2 (en) * 2014-08-28 2017-09-05 Ncr Corporation Methods and a system for automated authentication confidence
US9349034B2 (en) * 2014-10-28 2016-05-24 Rovi Guides, Inc. Methods and systems for invoking functions based on whether a partial print or an entire print is detected
US20160180078A1 (en) * 2014-12-23 2016-06-23 Jasmeet Chhabra Technologies for enhanced user authentication using advanced sensor monitoring
US9628477B2 (en) * 2014-12-23 2017-04-18 Intel Corporation User profile selection using contextual authentication
US10572639B2 (en) * 2015-03-17 2020-02-25 Microsoft Technology Licensing, Llc Selectively providing personal information and access to functionality on lock screen based on biometric user authentication
GB2539705B (en) 2015-06-25 2017-10-25 Aimbrain Solutions Ltd Conditional behavioural biometrics
US9392460B1 (en) * 2016-01-02 2016-07-12 International Business Machines Corporation Continuous user authentication tool for mobile device communications
NO344910B1 (en) * 2016-01-12 2020-06-29 Kk88 No As Device for verifying the identity of a person
US10719232B2 (en) * 2016-06-08 2020-07-21 Qualcomm Incorporated Providing virtual buttons in a handheld device
GB2552152B (en) * 2016-07-08 2019-07-03 Aimbrain Solutions Ltd Obscuring data
GB2552032B (en) 2016-07-08 2019-05-22 Aimbrain Solutions Ltd Step-up authentication
US20180055485A1 (en) * 2016-08-23 2018-03-01 Carestream Health, Inc. User interface and display for an ultrasound system
US10685131B1 (en) * 2017-02-03 2020-06-16 Rockloans Marketplace Llc User authentication
WO2018222866A1 (en) * 2017-06-02 2018-12-06 Summerlin William Christopher Touch input device for user authentication and systems using the same
CN107450712B (zh) * 2017-08-02 2019-06-18 西安易朴通讯技术有限公司 移动终端及其射频指纹识别装置和方法
KR102367761B1 (ko) * 2017-10-25 2022-02-24 시냅틱스 인코포레이티드 바이오메트릭 인식을 위한 시스템들 및 방법들
KR102401506B1 (ko) 2017-12-08 2022-05-25 삼성전자주식회사 전자 장치 및 그 제어 방법
US11514142B2 (en) 2018-04-26 2022-11-29 ID R&D, Inc. System and method for multi-modal continuous biometric authentication for messengers and virtual assistants
US11658964B2 (en) 2020-08-26 2023-05-23 Bank Of America Corporation System and method for providing a continuous authentication on an open authentication system using user's behavior analysis
CN113032769B (zh) * 2021-04-02 2022-10-04 西安电子科技大学 基于上下文的自适应持续认证方法
KR20230173684A (ko) * 2021-04-22 2023-12-27 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기 및 전자 기기의 인증 방법
US11606353B2 (en) 2021-07-22 2023-03-14 Biocatch Ltd. System, device, and method of generating and utilizing one-time passwords

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7486810B1 (en) 2008-04-24 2009-02-03 International Business Machines Corporation On-type biometrics fingerprint soft keyboard
US20090189791A1 (en) 2008-01-29 2009-07-30 Brinton Michael D Font or keystroke biometrics

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3394457B2 (ja) * 1998-10-15 2003-04-07 日本電気株式会社 キーボード
JP2002304230A (ja) * 2001-04-05 2002-10-18 Nippon Telegr & Teleph Corp <Ntt> 本人認証システム及び入力装置
US20040221171A1 (en) 2003-05-02 2004-11-04 Ahmed Ahmed Awad E. Intrusion detector based on mouse dynamics analysis
JP2006085559A (ja) * 2004-09-17 2006-03-30 Canon Inc 個人認証装置および個人認証方法および記憶媒体
WO2006078343A2 (en) 2005-01-14 2006-07-27 Ultra-Scan Corporation Multimodal fusion decision logic system
US7440929B2 (en) 2005-01-14 2008-10-21 Ultra-Scan Corporation Multimodal authorization method, system and device
US8190540B2 (en) 2005-01-14 2012-05-29 Ultra-Scan Corporation Multimodal fusion decision logic system for determining whether to accept a specimen
US7558765B2 (en) 2005-01-14 2009-07-07 Ultra-Scan Corporation Multimodal fusion decision logic system using copula model
TWI345179B (en) * 2006-07-14 2011-07-11 Egis Technology Inc System and method for registering a fingerprint, setting a login method of an application, and logining in the application
JP4403426B2 (ja) * 2007-01-09 2010-01-27 サイレックス・テクノロジー株式会社 生体認証装置及び生体認証プログラム
JP4644689B2 (ja) * 2007-02-14 2011-03-02 ヤフー株式会社 電気機器及び電気機器の制御方法
JP2009009332A (ja) * 2007-06-27 2009-01-15 Sharp Corp 利用者認証システムおよびそれを備えた画像処理システム
JP5119801B2 (ja) * 2007-08-20 2013-01-16 日本電気株式会社 携帯情報端末、携帯情報端末認証方法、および携帯情報端末認証プログラム
US8736587B2 (en) * 2008-07-10 2014-05-27 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device
US8627454B2 (en) 2009-04-01 2014-01-07 Verizon Patent And Licensing Inc. Dynamic quota-based entertainment manager
US8792683B2 (en) * 2010-06-04 2014-07-29 Blackberry Limited Fingerprint scanning with optical navigation
US20120313754A1 (en) 2011-06-13 2012-12-13 X-Card Holdings, Llc Biometric smart card reader
US8832798B2 (en) 2011-09-08 2014-09-09 International Business Machines Corporation Transaction authentication management including authentication confidence testing
US9066125B2 (en) 2012-02-10 2015-06-23 Advanced Biometric Controls, Llc Secure display
US9582843B2 (en) * 2012-08-20 2017-02-28 Tautachrome, Inc. Authentication and validation of smartphone imagery
US8983207B1 (en) * 2013-01-10 2015-03-17 Intuit Inc. Mitigating replay attacks using multiple-image authentication
IN2013MU01148A (ko) * 2013-03-26 2015-04-24 Tata Consultancy Services Ltd
US9036876B2 (en) * 2013-05-01 2015-05-19 Mitsubishi Electric Research Laboratories, Inc. Method and system for authenticating biometric data
US9721175B2 (en) * 2013-05-08 2017-08-01 Jpmorgan Chase Bank, N.A. Systems and methods for high fidelity multi-modal out-of-band biometric authentication through vector-based multi-profile storage

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090189791A1 (en) 2008-01-29 2009-07-30 Brinton Michael D Font or keystroke biometrics
US7486810B1 (en) 2008-04-24 2009-02-03 International Business Machines Corporation On-type biometrics fingerprint soft keyboard

Also Published As

Publication number Publication date
KR20160114108A (ko) 2016-10-04
EP3100194B1 (en) 2019-09-04
JP2017511912A (ja) 2017-04-27
EP3100194A1 (en) 2016-12-07
CN106415570B (zh) 2019-08-20
US20150213245A1 (en) 2015-07-30
JP6397036B2 (ja) 2018-09-26
CN106415570A (zh) 2017-02-15
US9747428B2 (en) 2017-08-29
WO2015116403A1 (en) 2015-08-06

Similar Documents

Publication Publication Date Title
KR101839860B1 (ko) 동적 키보드 및 터치스크린 생체 측정
US9710632B2 (en) User-authentication gestures
US8754745B2 (en) Method and electronic apparatus for creating biological feature data
US9965608B2 (en) Biometrics-based authentication method and apparatus
KR102180226B1 (ko) 복합 생체 정보를 이용한 보안을 제공하는 전자 장치 및 방법
CN105474223B (zh) 用于改变电子设备的设置的用户验证
GB2552152B (en) Obscuring data
CN107223254B (zh) 用于隐藏设置处理的方法、用户装置和存储介质
US20140118520A1 (en) Seamless authorized access to an electronic device
KR102166041B1 (ko) 생체인식 기반 인증 방법 및 장치
WO2019151368A1 (ja) 生体認証装置、システム、方法および記録媒体
US10536852B2 (en) Electronic apparatus, method for authenticating the same, and recording medium
JP2005100063A (ja) 認証装置および認証方法
JPWO2015189967A1 (ja) 情報処理装置、アプリケーションソフトウェア起動システム及びアプリケーションソフトウェア起動方法
US20190080065A1 (en) Dynamic interface for camera-based authentication
US11068690B2 (en) Detection device, information processing device, and information processing method
CN108475306B (zh) 用于移动装置的用户接口
EP3906499B1 (en) User authentication using pose-based facial recognition
JP2013105222A (ja) 生体認証装置およびそれを備えた自動取引装置
JP2016081071A (ja) 生体認証装置、生体認証方法及びプログラム
JP2016071598A (ja) 認証装置、認証システムおよびプログラム
Mahfouz et al. M2auth: A multimodal behavioral biometric authentication using feature-level fusion

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right