KR20140034088A - 제스쳐-및 표현-기반 인증 - Google Patents

제스쳐-및 표현-기반 인증 Download PDF

Info

Publication number
KR20140034088A
KR20140034088A KR20130108346A KR20130108346A KR20140034088A KR 20140034088 A KR20140034088 A KR 20140034088A KR 20130108346 A KR20130108346 A KR 20130108346A KR 20130108346 A KR20130108346 A KR 20130108346A KR 20140034088 A KR20140034088 A KR 20140034088A
Authority
KR
South Korea
Prior art keywords
input
user
computer
processor
image
Prior art date
Application number
KR20130108346A
Other languages
English (en)
Inventor
스리람 삼파쓰쿠마란
에릭 얌
헬뮤트 노이만
승욱 홍
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20140034088A publication Critical patent/KR20140034088A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231—Biological data, e.g. fingerprint, voice or retina

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Collating Specific Patterns (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

사용자는 컴퓨터를 잠금해제하거나 또는 다른 컴퓨터 동작을 통제하기 위한 인증 프로토콜을 설정하기 위해 개별 입력 값으로 제스쳐-기반 입력 모드를 정의할 수 있다. 대안으로서 또는 추가적으로, 사용자는 인증을 위해 실제 사람이 이미징됨을 보장하기 위한 임계값을 만족시키는 IR 감지가 플러스된 얼굴 인식, 및/또는 미소 또는 윙크와 같은 특정 표정 플러스 얼굴 인식에 기초하여 제2 입력 모드를 정의할 수 있다.

Description

제스쳐-및 표현-기반 인증{GESTURE-AND EXPRESSION-BASED AUTHENTICATION}
본 발명은 일반적으로 가시 및/또는 IR 스펙트럼에서 감지되는, 제스쳐-및 표현-기반 인증에 관한 것이다.
패스워드와 같은 사용자 입력 시퀀스들은 컴퓨팅 디바이스 동작들 및 제어들을 잠금해제하기 위해 사용된다. 예들은 동작을 위한 컴퓨팅 디바이스의 잠금해제를 포함한다. 통상적으로, 오직 하나의 입력 모드가 사용되는데, 예를 들어, 오직 텍스트 엔트리만이, 또는 오직 생체 입력만이 컴퓨터를 잠금해제하기 위해 사용된다.
여기서 이해되는 바와 같이, 얼굴 인식이 패스워드 타입 메커니즘으로서 사용될 수 있지만, 또한 여기서 이해되는 바와 같이, 얼굴 인식의 사용은, 자동 허가가 발생하는 것을 원하지 않을 수 있는 인증된 사용자들이 존재할 시에, 원치 않는 자동-로그인을 초래할 수 있다. 또한, 사용자의 부재 시에 액세스를 획득하기 위해 미허가된 사람에 의해 사용자의 사진이 사용될 수 있다.
따라서, 컴퓨터는 프로세서, 및 프로세서에 액세스 가능하며, 사용자가 연관된 제1 입력 파라미터로 적어도 제1 입력 모드를 선택하게 하는 것을 포함하는 로직을 구현하는 명령어들을 내포하는 컴퓨터 판독가능한 저장 매체를 포함한다. 제1 입력 파라미터는 적외선(IR) 감지와 관련된 얼굴 인식, 사용자-정의된 표정과 관련된 얼굴 인식, 사용자에 의해 설정된 물리적 제스쳐의 이미지, 또는 이들의 조합이다. 컴퓨터의 동작은 오직 제1 입력 파라미터의 적어도 하나의 후속적인 입력이 인증으로서 수신되는 경우에만 실행된다.
일부 예들에서, 제1 입력 파라미터는 적외선(IR) 감지와 관련된 얼굴 인식이고, 컴퓨터의 동작은 오직 얼굴 조합에 매칭하는 이미지의 수신 및 크기(magnitude)에서 임계 크기와 적어도 동일한 IR 신호를 감지하는 것에만 응답하여 실행된다. 다른 예들에서, 제1 입력 파라미터는 사용자-정의된 표정과 관련된 얼굴 인식이고, 컴퓨터의 동작은 오직 얼굴 조합에 매칭하고 또한 표정에 매칭하는 이미지를 수신하는 것에만 응답하여 실행된다. 또다른 예들에서, 제1 입력 파라미터는 사용자에 의해 설정된 물리적 제스쳐의 이미지이고, 컴퓨터의 동작은 오직 물리적 제스쳐의 이미지에 매칭하는 이미지를 수신하는 것에만 응답하여 실행된다.
원하는 경우, 명령어들은 사용자가 연관된 제2 입력 파라미터로 제2 입력 모드를 선택하게 하는 것을 더 포함할 수 있고, 제1 입력 모드는 제2 입력 모드와는 상이하다. 컴퓨터의 동작은 오직 제1 입력 파라미터와 제2 입력 파라미터 중 적어도 하나의 후속적인 입력이 사용자에 의해 특정된 순서로 제1 및 제2 입력 모드들에서 수신되는 경우에만 실행된다. 사용자는 동작을 선택하게 될 수 있다.
또다른 양상에서, 방법은, 컴퓨터 디스플레이 상에, 사용자로 하여금 컴퓨터 동작을 인에이블하도록 인증 프로토콜을 설정하기 위해 개별 제1 입력 값으로 적어도 제1 입력 모드를 정의하게 하기 위해 사용자 인터페이스들의 시퀀스를 표시하는 단계를 포함한다. 방법은 입력 값이 수신되는 경우에만 컴퓨터 동작을 실행한다. 제1 입력 값은 적외선(IR) 감지와 관련된 얼굴 인식, 사용자-정의된 표정과 관련된 얼굴 인식, 사용자에 의해 설정된 물리적 제스쳐, 또는 이들의 조합이다.
또다른 양상에서, 컴퓨팅 디바이스는 프로세서, 프로세서에 연결된 디스플레이, 및 서로 상이한 유형인 프로세서에 연결된 제1 및 제2 입력 디바이스들을 갖는다. 프로세서는 제1 입력 디바이스로부터의 제1 입력 모드 값 및 제2 입력 디바이스로부터의 제2 입력 모드 값을 수신한다. 프로세서는 이후 제1 및 제2 값들이 사용자-정의된 값들에 매칭하는지의 여부를 결정하고, 오직 매치가 발견되는 경우에만 컴퓨터 동작을 실행한다. 적어도 하나의 입력 모드 값은 제스쳐의 이미지, 및/또는 인증을 위해 실제 사람이 이미징됨을 보장하기 위한 임계 값을 만족하는 IR 감지가 플러스된 얼굴 인식, 및/또는 특정 표정 플러스 얼굴 인식에 의해 설정된다.
본 발명의 상세항목들은, 그 구조 및 동작 모두에 대해, 동일한 참조 번호들이 동일한 부분들을 참조하는 첨부 도면들을 참조하여 최상으로 이해될 수 있다.
도 1은 본 발명의 원리들을 채택할 수 있는 컴퓨팅 디바이스의 개략적 투시도이다.
도 2는 예시적인 전체 로직의 흐름도이다.
도 3은 사용자로 하여금 멀티-모드 입력 시퀀스를 정의하게 하기 위해 컴퓨팅 디바이스 상에 표시될 수 있는 예시적인 사용자 인터페이스들을 예시하는 스크린샷들의 시퀀스를 도시하는 도면이다.
도 4는 사용자로 하여금 어느 컴퓨터 동작이 멀티-모드 입력 시퀀스에 의해 통제되는지를 정의하게 하는 사용자 인터페이스의 예시적인 스크린샷이다.
먼저 도 1을 참조하면, 도시된 일 실시예에서 휴대용 경량의 하우징(12)을 포함하는 디바이스(10)는 터치스크린 디스플레이와 같은 디스플레이(14) 및 키패드와 같은 키 입력 디바이스(16)를 갖는다. 일부 실시예들에서, 적외선(IR) 센서(18)가 또한 하우징(12)에 제공될 수 있다.
디바이스(10)는 스마트폰에 의해 일 예시적인 실시예로 구현될 수 있다. 다른 실시예들에서, 디바이스(10)는 TV, 태블릿 컴퓨터, 랩탑 컴퓨터, 또는 문을 동작시키고, 조명 및 음악 등에 대한 설정을 수행하기 위해 사람의 존재를 감지하는 홈 자동화 컴퓨터 등일 수 있다. 또한, 디바이스(10)는 의료용 병원 응용예들을 위한 또는 방위 산업 보안 액세스를 위한 액세스 도어일 수 있다. 실제로, 디바이스(10)는 ATM, 거래 키오스크, 모바일 폰 리필 스테이션 등과 같은, 그러나 이에 제한되지 않는 뱅킹 컴퓨터에 의해 설정될 수 있다.
키 입력 디바이스(16) 및 IR 센서(18)는 하우징(12) 내의 하나 이상의 프로세서들(20)(도시된 단 하나의 프로세서)에 입력 신호들을 통상적으로 제공한다. 프로세서(20)는 요구된 이미지를 표시하도록 디스플레이(14)에 제어하고, 디스플레이(14)가 터치 스크린 디스플레이인 경우, 프로세서(20)는 디스플레이(14)로부터 입력을 수신한다.
프로세서(20)는 데이터를 판독하고 기록하기 위해 그리고 저장된 로직을 실행하기 위해 하나 이상의 유형의(tangible) 컴퓨터 판독가능한 저장 매체(22)에 액세스할 수 있다. 도 1에 도시된 매체(22)는 디스크 저장소, 고체 상태 저장소 등에 의해 구현될 수 있다.
도 1은 하우징(12) 상에서 지원될 수 있는 프로세서(20)에 대한 입력 신호들의 다양한 추가적인 소스들을 도시한다. 예를 들어, 마이크로폰(24)은 프로세서(20)에 음성 입력을 제공할 수 있는 반면, 카메라(26)는 프로세서(20)에 스틸 및/또는 동영상 이미지 입력을 제공할 수 있다.
디바이스(10)가 스마트 폰으로서 구현되는 경우, 무선 텔레포니 트랜시버(28)는 음성 및/또는 데이터 호출들이 디바이스(10)를 사용하여 이루어질 수 있게 하기 위해 하우징(12) 상에서 지원될 수 있다. 텔레포니 트랜시버(28)는, 제한 없이, 모바일 통신용 글로벌 시스템(GSM) 트랜시버 또는 코드 분할 다중 액세스(CDMA) 트랜시버 또는 직교 주파수 분할 멀티플렉싱(OFDM) 트랜시버 또는 위성 폰 트랜시버 또는 이들의 변형물들일 수 있다.
원하는 경우, 무선 네트워크 트랜시버(30)는 또한 디바이스(10)를 사용하여 네트워크 통신을 허용하기 위해 하우징(12) 상에 제공될 수 있다. 트랜시버(30)는, 제한 없이, 블루투스 트랜시버, WiFi 트랜시버, 또는 다른 적절한 트랜시버일 수 있다.
도 2는 프로세서(20)에 의해 구현될 수 있는 예시적인 로직을 도시한다. 어느 특정 입력 모드들 및 이와 연관된 값들이 하기에 논의되는 목적들로 사용될 것인지를 정의하도록 사용자가 선택하게 하기 위해 블록(36)에서 셋업 스크린이 디스플레이(14) 상에 표시될 수 있다. 블록(38)에서, 모드들 및 값들을 정의하기 위한 사용자의 선택이 수신된다. 블록(40)에서, 프로세서(20)는, 디스플레이(14)로 하여금 디스플레이(14) 상에, 그 예가 하기에 논의되는, 사용자 인터페이스를 표시하게 하여, 사용자로 하여금 사용자-선택 컴퓨터 동작을 인에이블시키기 위한 대응하는 멀티-값 프로토콜로 멀티-모드를 선택하게 한다. 이러한 동작은 후속적으로 블록(42)에서 잠금해제되며, 오직 사용자-정의된 프로토콜만이 사용자에 의해 특정되는 바와 같은 입력인 경우, 즉, 오직 입력 모드 값들이 사용자-정의된 값들에 매치하는 경우에만, 이와 같이 오직 매치가 발견되는 경우에만, 컴퓨터 동작이 잠금해제된다.
도 3은 도 2의 블록(40)의 로직에서 디스플레이(14) 상에 표시될 수 있는 사용자 인터페이스 스크린들의 예시적인 세트를 제공한다. 스크린(44)은 제1 모드를 선택하도록 사용자에게 명령한다. 도시된 예에서, 제1 모드는 잠재적으로 대응하는 억양을 갖는 음성 인식, 키패드 엔트리, 제스쳐 엔트리, 및 잠재적으로 하기에 추가로 논의되는 IR 및/또는 표현 확대를 갖는 이미지 엔트리를 포함하는 리스트로부터 선택될 수 있다.
사용자가 음성 인식을 선택한다고 가정하면, 스크린(46)이 표시될 수 있고, 여기서, 사용자는 음성 모드 컴포넌트의 원하는 값 또는 파라미터, 예를 들어, 워드 또는 워드 스트링을 마이크로폰(24)으로 말하도록 명령 받는다. 파라미터들은 특정 워드들 및/또는 억양, 타이밍, 및/또는 더 개선된 음성 인식 파라미터들, 예컨대, 성문, 음성-대-텍스트 인식 등을 포함할 수 있다.
프로세서(20)는 마이크로폰으로부터의 신호를 매체(22) 상에 저장되는 데이터 값들로 변환하기 위해 음성 인식 소프트웨어를 실행할 수 있다. 이 값들은 "음성 모드"와, 즉, 이 값들이 마이크로폰(24)으로부터 후속적으로 수신되어야 한다는 요건과 연관된다.
다수의 모드들이 정의될 수 있으므로, 제2 모드를 선택하도록 사용자에게 명령하는 스크린(48)이 다음으로 디스플레이(14) 상에 표시될 수 있다. 제1 모드로서 선택된 모드(이 예에서, 음성 입력)가 스크린(48) 상에 나타날 필요가 없으며, 오직 나머지 가용 모드들만이 나타날 필요가 있다는 점에 유의한다. 사용자가 "키패드"를 선택한다고 가정하면, 키패드 모드에 대한 대응하는 값들로서 원하는 키 시퀀스를 입력하도록 사용자에게 명령하는 스크린(50)이 나타날 수 있다. 값들은 매체(22) 상에 저장되고 키패드(16)와 상관된다.
원하는 경우, 사용자에게는 2개 초과의 모드들을 선택하기 위한 기회가 주어질 수 있다. 또는 사용자는 초기에 "제스쳐" 또는 "얼굴"을 선택했을 수 있다. 어느 경우든, 추가적인 스크린(52)이 제3 모드의 선택을 위해 표시된다. 사용자가 44, 48, 또는 52에서 "제스쳐"를 선택하는 경우, 제스쳐, 예를 들어, 손 흔들기, 수신호, 또는 다른 제스쳐/모션을 취하도록 사용자에게 명령하기 위한 UI(54)가 표시된다. 제스쳐의 이미지는 카메라(26)에 의해 포착되어, 이를 매체(22) 상에 저장하는 프로세서(20)에 송신된다.
스크린(56)은, 메모리에 저장되며 카메라(26)와 연관되는 원하는 이미지, 예를 들어, 사용자의 얼굴 사진을 찍도록 사용자에게 명령하는 사용자 선택, 즉, 44, 48, 또는 52로부터의 "얼굴 인식"에 응답하여 표시될 수 있다. 이미지는 스틸 이미지들(패턴, 광학 특성 인식 등), 비디오 이미지 인식(이는 움직임 포착, 컬러 패턴 분석 등을 포함할 수 있음)을 포함할 수 있다. 사용자에게는 또한 도시된 실시예에서 토글 선택을 사용하여 IR 검출을 턴온 또는 턴오프하는 옵션이 제공된다. 또한, 사용자에게는 인증 모드와 같은 사용자의 얼굴 인식 뿐만 아니라 또한 사용자의 얼굴에서의 특정 표정의 인식을 가지도록 선택하는 옵션이 주어질 수 있다.
IR 검출이 턴온되는 경우, 이는, 후속적인 인증이 카메라의 수 피트 내의 실제 사람의 존재를 표시하기 위해 실험적으로 설정된 임계값을 만족하는 IR 센서(18)에 의해 감지된 IR 레벨 및 얼굴 인식 매치 모두에 의해서만 표시됨을 의미한다. 이는 사용자가 달리 부재중인 경우, 카메라의 정면에서 사용자의 사진을 유지한다는 전술된 문제점을 회피하기 위한 것이다.
추가적으로, "표현"이 선택되는 경우, 예를 들어, 카메라에 의해 이미징되는 바와 같은 다음의 수 초 내에 사용자의 얼굴 상에서의 표현은 인증을 위해 사용되도록 의도되는 사용자의 후속적인 이미지에서의 표현과 매치해야 한다. 예를 들어, 사용자는 표현-기반 얼굴 인식 패스워드로서 미소짓고 한쪽 눈을 감을 수 있고, 인증을 위해 의도되는 사용자의 얼굴의 후속적인 이미지들은 그 후속적인 이미지들이 사용자가 미소짓고 한쪽 눈을 감는(또는 어떤 표현이 원래 설정되었든 간에 반복하는) 것을 보여주는 경우에만 성공적인 인증이 된다. 표현들의 다른 예들은 왼쪽 또는 오른쪽 또는 위 또는 아래를 보는 눈, 찌푸리고 감은 눈, 찡그리기, 혀 내밀기 등을 포함한다.
모드 시퀀스 및 값들이 사용자에 의해 정의된 경우, 도 4는 정의된 모드 시퀀스 및 값들의 후속적인 입력이 사용될 목적을 사용자가 정의하게 하기 위해 스크린(58)이 표시될 수 있음을 도시한다. 예를 들어, 사용자는 컴퓨터에 로그온하거나 또는 네트워크에 접속하기 위해 정의된 프로토콜의 입력을 요구하도록 선택할 수 있다. 사용자-정의된 멀티-모드 프로토콜의 입력시에만 불러올 수 있는 다른 컴퓨터 동작들은 연계된 보안 디바이스 잠금을 통한 저전력 소비 휴지(hibernation) 모드를 갖는 디바이스 상태로부터 응용 소프트웨어 또는 네트워크 서비스 액세스 기능들의 활성적 사용을 갖는 또다른 상태로의 트랜지션을 포함한다.
사용자-정의된 컴퓨터 동작들을 잠금해제하기 위해 사용될 수 있는 입력 시퀀스들의 예로서, 마이크로폰(24)로부터의 단순한 음성(오디오) 신호가 먼저 요구될 수 있고, 입력 신호가 도 2의 블록(40)으로부터의 사용자-정의된 값에 매칭하는 경우, 제2 모드가 트리거링된다. 제2 모드가 이미지 검출인 경우, 카메라(26)는 이후 활성화되고, 카메라로부터의 입력이 도 2의 블록(40)에서 저장된 사용자-정의된 이미지 값에 대해 테스트된다. 이는 내장된 카메라를 활성화함으로써 이루어질 수 있다. 멀티-모드 프로토콜과 연관된 사용자-정의된 동작은 입력 모드 값들이 블록(40)에서 설정된 사용자-정의된 값들에 매치하는 경우에만 인에이블된다.
특정한 제스쳐-및 표현-기반 인증이 여기서 도시되고 상세히 기술되었지만, 본 발명에 의해 포함되는 발명 대상은 오직 청구항들에 의해서만 한정된다는 점을 이해해야 한다.

Claims (19)

  1. 컴퓨터로서,
    프로세서;
    상기 프로세서에 액세스 가능하고 로직을 구현하는 명령어들을 내포하는 컴퓨터 판독가능한 저장 매체
    를 포함하고, 상기 로직은:
    사용자로 하여금 연관된 제1 입력 파라미터로 적어도 제1 입력 모드를 선택하게 하는 것 - 상기 제1 입력 파라미터는 적외선(IR) 감지와 관련된 얼굴 인식, 사용자-정의된 표정과 관련된 얼굴 인식, 사용자에 의해 설정된 물리적 제스쳐의 이미지, 또는 이들의 조합임 - ; 및
    상기 제1 입력 파라미터의 적어도 하나의 후속적인 입력이 인증으로서 수신되는 경우에만 상기 컴퓨터의 동작을 실행하는 것을 포함하는 컴퓨터.
  2. 제1항에 있어서,
    상기 제1 입력 파라미터는 적외선(IR) 감지와 관련된 얼굴 인식이고, 상기 컴퓨터의 동작은 오직 얼굴 조합에 매칭하는 이미지를 수신하고, 크기(magnitude)에서 임계 크기와 적어도 동일한 IR 신호를 감지하는 것에만 응답하여 실행되는 컴퓨터.
  3. 제1항에 있어서,
    상기 제1 입력 파라미터는 사용자-정의된 표정과 관련된 얼굴 인식이고, 상기 컴퓨터의 동작은 오직 얼굴 조합과 매칭하고 또한 상기 표정에 매칭하는 이미지를 수신하는 것에 응답하여 실행되는 컴퓨터.
  4. 제1항에 있어서,
    상기 제1 입력 파라미터는 상기 사용자에 의해 설정된 물리적 제스쳐의 이미지이고, 상기 컴퓨터의 동작은 오직 물리적 제스쳐의 이미지에 매칭하는 이미지를 수신하는 것에만 응답하여 실행되는 컴퓨터.
  5. 제1항에 있어서,
    상기 명령어들은:
    상기 사용자로 하여금 연관된 제2 입력 파라미터로 제2 입력 모드를 선택하게 하는 것 - 상기 제1 입력 모드는 상기 제2 입력 모드와 상이함 - ; 및
    오직 상기 제1 입력 파라미터와 제2 입력 파라미터 중 적어도 하나의 후속적인 입력이 상기 사용자에 의해 특정된 순서로 상기 제1 및 제2 입력 모드들에서 수신되는 경우에만 상기 컴퓨터의 동작을 실행하는 것
    을 포함하는 로직을 추가로 구현하는 컴퓨터.
  6. 제1항에 있어서,
    상기 로직은 사용자로 하여금 상기 동작을 선택하게 하는 것을 더 포함하는 컴퓨터.
  7. 컴퓨터 디스플레이 상에서, 컴퓨터 동작을 인에이블하도록 인증 프로토콜을 설정하기 위해 사용자로 하여금 개별 제1 입력 값으로 적어도 제1 입력 모드를 정의하게 하기 위해 사용자 인터페이스들의 시퀀스를 표시하는 단계; 및
    상기 제1 입력 값이 수신된 경우에만 상기 컴퓨터 동작을 실행하는 단계
    를 포함하고,
    상기 제1 입력 값은 적외선(IR) 감지와 관련된 얼굴 인식, 사용자-정의된 표정과 관련된 얼굴 인식, 사용자에 의해 설정된 물리적 제스쳐, 또는 이들의 조합인 방법.
  8. 제7항에 있어서,
    상기 제1 입력 값은 적외선(IR) 감지와 관련된 얼굴 인식인 방법.
  9. 제7항에 있어서,
    상기 제1 입력 값은 사용자-정의된 표정과 관련된 얼굴 인식인 방법.
  10. 제7항에 있어서,
    상기 제1 입력 값은 상기 사용자에 의해 설정된 물리적 제스쳐의 이미지인 방법.
  11. 제7항에 있어서,
    상기 사용자로 하여금 연관된 제2 입력 값으로 제2 입력 모드를 선택하게 하는 단계 - 상기 제1 입력 모드는 상기 제2 입력 모드와 상이함 - ; 및
    오직 상기 제1 입력 값과 제2 입력 값 중 적어도 하나의 후속적인 입력이 상기 사용자에 의해 특정된 순서로 상기 제1 및 제2 입력 모드들에서 수신되는 경우에만 상기 컴퓨터의 동작을 실행하는 단계를 포함하는 방법.
  12. 제7항에 있어서,
    사용자로 하여금 상기 동작을 선택하게 하는 단계를 포함하는 방법.
  13. 제7항에 있어서,
    상기 사용자 인터페이스들은 사용자로 하여금 특정 이미지에 선행하여 특정 음성 인식 패턴을 설정하게 하고, 상기 사용자 인터페이스들과 연관된 컴퓨터에 대한 후속적인 로그온들은 음성 인식 패턴이 상기 컴퓨터로의 상기 이미지의 표시에 선행하여 상기 컴퓨터에 말해지는 경우에만 허용되는 방법.
  14. 컴퓨팅 디바이스로서,
    프로세서;
    상기 프로세서에 연결되는 디스플레이;
    상기 프로세서에 연결되는 제1 입력 디바이스;
    상기 프로세서에 연결되는 제2 입력 디바이스 - 상기 제2 입력 디바이스는 상기 제1 입력 디바이스와는 상이한 유형의 입력 디바이스임 -
    를 포함하고,
    상기 프로세서는 상기 제1 입력 디바이스로부터 제1 입력 모드 값을 수신하고;
    상기 프로세서는 상기 제2 입력 디바이스로부터 제2 입력 모드 값을 수신하고;
    상기 프로세서는 상기 제1 및 제2 값들이 사용자-정의된 값들에 매치하는지의 여부를 결정하고, 매치가 발견된 경우에만 컴퓨터 동작을 실행하고;
    적어도 하나의 입력 모드 값은 제스쳐의 이미지, 및/또는 인증을 위해 실제 사람(live person)이 이미징됨을 보장하기 위한 임계값을 만족시키는 IR 감지가 플러스된 얼굴 인식, 및/또는 특정 표정이 플러스된 얼굴 인식에 의해 설정되는 컴퓨팅 디바이스.
  15. 제14항에 있어서,
    상기 프로세서는 사용자로 하여금 상기 컴퓨터 동작을 선택하게 하는 컴퓨팅 디바이스.
  16. 제14항에 있어서,
    상기 컴퓨터 동작은 전체 사용을 위해 상기 컴퓨터를 잠금해제하는 것인 컴퓨팅 디바이스.
  17. 제14항에 있어서,
    적어도 하나의 입력 모드 값은 특정 표정이 플러스된 얼굴 인식에 의해 설정되는 컴퓨팅 디바이스.
  18. 제14항에 있어서,
    상기 적어도 하나의 입력 모드 값은 제스쳐에 의해 설정되는 컴퓨팅 디바이스.
  19. 제14항에 있어서,
    적어도 하나의 입력 모드 값은 인증을 위해 실제 사람이 이미징됨을 보장하기 위한 임계값을 만족하는 IR 감지가 플러스된 얼굴 인식에 의해 설정되는 컴퓨팅 디바이스.
KR20130108346A 2012-09-11 2013-09-10 제스쳐-및 표현-기반 인증 KR20140034088A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/609,510 US9032510B2 (en) 2012-09-11 2012-09-11 Gesture- and expression-based authentication
US13/609,510 2012-09-11

Publications (1)

Publication Number Publication Date
KR20140034088A true KR20140034088A (ko) 2014-03-19

Family

ID=49123742

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130108346A KR20140034088A (ko) 2012-09-11 2013-09-10 제스쳐-및 표현-기반 인증

Country Status (5)

Country Link
US (2) US9032510B2 (ko)
EP (1) EP2709031B1 (ko)
JP (1) JP2014056576A (ko)
KR (1) KR20140034088A (ko)
CN (1) CN103678968A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170000128A (ko) * 2015-06-23 2017-01-02 주식회사 아이온커뮤니케이션즈 다중 생체 인증을 통한 모바일 전자 문서 시스템
US10120455B2 (en) 2016-12-28 2018-11-06 Industrial Technology Research Institute Control device and control method
KR20220087163A (ko) * 2020-12-17 2022-06-24 단국대학교 산학협력단 Qr코드를 기반으로 한 비밀취급인가 인증체계 시스템

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104331649A (zh) * 2013-07-22 2015-02-04 鸿富锦精密工业(武汉)有限公司 基于网络连接的身份识别系统及方法
CN104683302A (zh) * 2013-11-29 2015-06-03 国际商业机器公司 认证方法、认证装置、终端设备、认证服务器及系统
US9710629B2 (en) * 2014-05-13 2017-07-18 Google Technology Holdings LLC Electronic device with method for controlling access to same
US20150347732A1 (en) * 2014-05-29 2015-12-03 Google Technology Holdings LLC Electronic Device and Method for Controlling Access to Same
US20170039359A1 (en) * 2014-06-10 2017-02-09 Mediatek Inc. Electronic device controlling and user registration method
JP6369543B2 (ja) * 2014-06-19 2018-08-08 日本電気株式会社 認証装置、認証システム、認証方法およびコンピュータプログラム
CN107004076A (zh) * 2014-09-05 2017-08-01 Utc 消防及保安公司 用于访问认证的系统和方法
CN104270253A (zh) * 2014-10-21 2015-01-07 中国建设银行股份有限公司 一种用户身份认证的方法、装置及系统
US9811649B2 (en) 2014-11-13 2017-11-07 Intel Corporation System and method for feature-based authentication
CN105868599A (zh) * 2015-01-22 2016-08-17 中兴通讯股份有限公司 终端解锁方法、装置及终端
WO2016132480A1 (ja) * 2015-02-18 2016-08-25 日立マクセル株式会社 映像表示装置及び映像表示方法
JP6293372B2 (ja) * 2015-05-20 2018-03-14 三菱電機株式会社 情報処理装置及びインタロック制御方法
US10546183B2 (en) 2015-08-10 2020-01-28 Yoti Holding Limited Liveness detection
US9794260B2 (en) 2015-08-10 2017-10-17 Yoti Ltd Liveness detection
KR102354586B1 (ko) * 2015-08-11 2022-01-24 삼성전자주식회사 전자 장치 상태에 따른 제어 방법 및 그 장치
US10552593B2 (en) * 2015-10-31 2020-02-04 Huawei Technologies Co., Ltd. Face verification method and electronic device
US9923930B2 (en) 2015-11-19 2018-03-20 Bank Of America Corporation Selectively enabling and disabling biometric authentication based on mobile device state information
CN105528703A (zh) * 2015-12-26 2016-04-27 上海孩子国科教设备有限公司 通过表情实现支付确认操作的方法及系统
US10445481B1 (en) * 2016-03-10 2019-10-15 Symantec Corporation Systems and methods for performing human-verification procedures
US9948479B2 (en) * 2016-04-05 2018-04-17 Vivint, Inc. Identification graph theory
KR101728635B1 (ko) 2016-05-31 2017-04-20 연세대학교 산학협력단 표정을 인식하기 위한 장치 및 방법
US10346605B2 (en) 2016-06-28 2019-07-09 Paypal, Inc. Visual data processing of response images for authentication
CN106126995A (zh) * 2016-06-30 2016-11-16 宇龙计算机通信科技(深圳)有限公司 解锁方法、解锁装置和终端
US10515393B2 (en) * 2016-06-30 2019-12-24 Paypal, Inc. Image data detection for micro-expression analysis and targeted data services
WO2018023634A1 (zh) * 2016-08-04 2018-02-08 汤隆初 一种解锁方法和门锁
WO2018023606A1 (zh) * 2016-08-04 2018-02-08 汤隆初 一种根据表情开锁时的技术信息提示方法和门锁
US10970681B2 (en) 2016-09-29 2021-04-06 Walmart Apollo, Llc Camera gesture clock in
US10282530B2 (en) 2016-10-03 2019-05-07 Microsoft Technology Licensing, Llc Verifying identity based on facial dynamics
GB2561537B (en) 2017-02-27 2022-10-12 Emteq Ltd Optical expression detection
JP7004379B2 (ja) * 2017-03-31 2022-01-21 Ｎｅｃプラットフォームズ株式会社 認証装置、認証方法、および認証プログラム
CN107169427B (zh) * 2017-04-27 2020-03-17 深圳信息职业技术学院 一种适用于心理学的面部识别方法及装置
US11810667B2 (en) 2017-06-27 2023-11-07 Stryker Corporation Patient support systems and methods for assisting caregivers with patient care
US11202729B2 (en) 2017-06-27 2021-12-21 Stryker Corporation Patient support apparatus user interfaces
US11096850B2 (en) 2017-06-27 2021-08-24 Stryker Corporation Patient support apparatus control systems
US11337872B2 (en) 2017-06-27 2022-05-24 Stryker Corporation Patient support systems and methods for assisting caregivers with patient care
CN107368727A (zh) * 2017-06-27 2017-11-21 上海斐讯数据通信技术有限公司 一种锁屏解锁方法及系统
US11484451B1 (en) 2017-06-27 2022-11-01 Stryker Corporation Patient support apparatus user interfaces
US10811136B2 (en) 2017-06-27 2020-10-20 Stryker Corporation Access systems for use with patient support apparatuses
US11382812B2 (en) 2017-06-27 2022-07-12 Stryker Corporation Patient support systems and methods for assisting caregivers with patient care
US10719692B2 (en) * 2017-09-09 2020-07-21 Apple Inc. Vein matching for difficult biometric authentication cases
JP6996922B2 (ja) * 2017-09-28 2022-01-17 株式会社日本総合研究所 認証システム、物品及びプログラム
US10594690B2 (en) * 2017-11-16 2020-03-17 Bank Of America Corporation Authenticating access to a computing resource using facial recognition based on involuntary facial movement
GB2569794A (en) 2017-12-21 2019-07-03 Yoti Holding Ltd Biometric user authentication
CN107958234A (zh) * 2017-12-26 2018-04-24 深圳云天励飞技术有限公司 基于客户端的人脸识别方法、装置、客户端及存储介质
CN108388389B (zh) * 2018-01-31 2021-09-07 努比亚技术有限公司 一种交互界面控制方法、移动终端及计算机存储介质
US11100204B2 (en) * 2018-07-19 2021-08-24 Motorola Mobility Llc Methods and devices for granting increasing operational access with increasing authentication factors
CN109818924A (zh) * 2018-12-21 2019-05-28 深圳科安达电子科技股份有限公司 一种基于人脸识别的登录铁路专用系统的装置
CN109886697B (zh) * 2018-12-26 2023-09-08 巽腾(广东)科技有限公司 基于表情组别的操作确定方法、装置及电子设备
CN109976513B (zh) * 2019-02-20 2020-03-03 方科峰 一种系统界面设计方法
US11475118B2 (en) * 2019-08-21 2022-10-18 Truist Bank Direct access authentication using gestures
US11695758B2 (en) * 2020-02-24 2023-07-04 International Business Machines Corporation Second factor authentication of electronic devices

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000155177A (ja) * 1998-11-20 2000-06-06 Nikon Corp 人体検知装置および人体検知方法
US6389542B1 (en) 1999-10-27 2002-05-14 Terence T. Flyntz Multi-level secure computer with token-based access control
WO2001056213A1 (en) 2000-01-26 2001-08-02 Citicorp Development Center, Inc. System and method for user authentication
JP2003050783A (ja) * 2001-05-30 2003-02-21 Fujitsu Ltd 複合認証システム
JP2004046697A (ja) 2002-07-15 2004-02-12 Omron Corp 個人認証装置
US6947579B2 (en) * 2002-10-07 2005-09-20 Technion Research & Development Foundation Ltd. Three-dimensional face recognition
GB0311097D0 (en) 2003-05-14 2003-06-18 Oracle Int Corp Authentication system
AU2003902422A0 (en) 2003-05-19 2003-06-05 Intellirad Solutions Pty. Ltd Access security system
US8207816B2 (en) 2005-07-18 2012-06-26 Law Enforcement Intelligent Devices, Llc Biometric access control system
US8191161B2 (en) * 2005-12-13 2012-05-29 Microsoft Corporation Wireless authentication
CN101021898A (zh) * 2006-02-13 2007-08-22 斯马特维尔雷斯有限公司 红外面部认证设备及包括该设备的便携式终端和安全设备
KR20070081773A (ko) 2006-02-13 2007-08-17 스마트 와이어레스 가부시키가이샤 적외선 얼굴 인증장치, 이를 구비하는 휴대 단말기 및보안장치
US7929733B1 (en) 2006-02-17 2011-04-19 Verizon Patent And Licensing Inc. Biometric identification and analysis
JP4957016B2 (ja) 2006-03-02 2012-06-20 日本電気株式会社 情報処理装置及びキーロック解除方法並びにプログラム
JP4185533B2 (ja) 2006-06-15 2008-11-26 株式会社カシオ日立モバイルコミュニケーションズ 認証機能付き携帯端末装置及びプログラム
US20080126260A1 (en) 2006-07-12 2008-05-29 Cox Mark A Point Of Sale Transaction Device With Magnetic Stripe Emulator And Biometric Authentication
US7996674B2 (en) 2006-10-19 2011-08-09 International Business Machines Corporation LDAP user authentication
US8424079B2 (en) 2008-01-25 2013-04-16 Research In Motion Limited Method, system and mobile device employing enhanced user authentication
US8536976B2 (en) 2008-06-11 2013-09-17 Veritrix, Inc. Single-channel multi-factor authentication
US8370640B2 (en) 2008-12-01 2013-02-05 Research In Motion Limited Simplified multi-factor authentication
US8116453B2 (en) 2008-12-29 2012-02-14 Bank Of America Corporation Gaming console-specific user authentication
US20100199323A1 (en) 2009-02-04 2010-08-05 Greg Salyards System for Dynamically Turning On or Off Log On Methods Used for Access to PC or Network Based Systems
US8316436B2 (en) 2009-03-27 2012-11-20 Sony Corporation User-defined multiple input mode authentication
CN102404510B (zh) 2009-06-16 2015-07-01 英特尔公司 手持装置中的摄像机应用
US8756661B2 (en) 2009-08-24 2014-06-17 Ufp Identity, Inc. Dynamic user authentication for access to online services
CN101793562B (zh) * 2010-01-29 2013-04-24 中山大学 一种红外热图像序列的人脸检测与跟踪的算法
US8693726B2 (en) * 2011-06-29 2014-04-08 Amazon Technologies, Inc. User identification by gesture recognition
US9389681B2 (en) * 2011-12-19 2016-07-12 Microsoft Technology Licensing, Llc Sensor fusion interface for multiple sensor input
CN102622588B (zh) * 2012-03-08 2013-10-09 无锡中科奥森科技有限公司 双验证人脸防伪方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170000128A (ko) * 2015-06-23 2017-01-02 주식회사 아이온커뮤니케이션즈 다중 생체 인증을 통한 모바일 전자 문서 시스템
US10120455B2 (en) 2016-12-28 2018-11-06 Industrial Technology Research Institute Control device and control method
KR20220087163A (ko) * 2020-12-17 2022-06-24 단국대학교 산학협력단 Qr코드를 기반으로 한 비밀취급인가 인증체계 시스템

Also Published As

Publication number Publication date
JP2014056576A (ja) 2014-03-27
US20140075548A1 (en) 2014-03-13
US9032510B2 (en) 2015-05-12
EP2709031A1 (en) 2014-03-19
US20150244719A1 (en) 2015-08-27
EP2709031B1 (en) 2020-03-25
CN103678968A (zh) 2014-03-26

Similar Documents

Publication Publication Date Title
KR20140034088A (ko) 제스쳐-및 표현-기반 인증
US11314851B2 (en) Method for protecting private information and terminal device
US10129044B2 (en) Method and apparatus for controlling smart device
US10075445B2 (en) Methods and devices for permission management
US10242237B2 (en) Contemporaneous facial gesture and keyboard entry authentication
US8316436B2 (en) User-defined multiple input mode authentication
EP3331226B1 (en) Method and device for reading messages
US9286482B1 (en) Privacy control based on user recognition
US9904774B2 (en) Method and device for locking file
CN104937603B (zh) 终端、解锁方法和程序
KR101688168B1 (ko) 이동 단말기 및 그 제어방법
US10425403B2 (en) Method and device for accessing smart camera
US20170293387A1 (en) Input circuitry, terminal, and touch response method and device
CN104067525B (zh) 在移动终端中在各阶段解锁的方法及其移动终端
CN106156561B (zh) 应用加锁方法、应用解锁方法和装置
CN110515533B (zh) 电子设备快捷操作方法、装置、电子设备及存储介质
CN106681717B (zh) 一种终端应用程序管理方法、装置及电子设备
WO2016165245A1 (zh) 一种用户界面控制方法及终端
CN106097494A (zh) 智能锁的开锁方法及装置
US20160294823A1 (en) Displaying content based on device orientation
CN107205198B (zh) 麦克风的解锁方法和装置
US11301118B2 (en) Method for disguising a computer system's login interface
WO2017148138A1 (zh) 指纹验证方法及装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL NUMBER: 2015101006474; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20151030

Effective date: 20170224