KR102347567B1

KR102347567B1 - Method and apparatus for personal authentication based on fingertip gesture recognition and fake pattern identification

Info

Publication number: KR102347567B1
Application number: KR1020170114070A
Authority: KR
Inventors: 유장희; 문기영; 임영재; 정교일
Original assignee: 한국전자통신연구원
Priority date: 2016-12-01
Filing date: 2017-09-06
Publication date: 2022-01-10
Also published as: KR20180062937A

Abstract

손끝 제스처를 통해 사용자를 인식하기 위한 방법 및 장치가 제공된다. 인식 장치는 사용자의 손 모양 또는 손 크기의 기하학적 정보에 기반하여 생성된 패턴을 디스플레이하고, 패턴에 대한 사용자와의 상호작용을 통한 손끝 제스처를 인식할 수 있다. 인식 장치는 인식된 손끝 제스처를 사용하여 사용자에 대한 인증을 수행할 수 있다. 패턴은 제스처 유도/관련 패턴 및 페이크 패턴을 포함할 수 있다. 손끝 제스처는 손끝 제스처의 정보는 손끝 제스처의 손끝 터치 위치들, 손끝 터치 위치들의 터치 순서 및 손끝 터치 위치들의 이동 방향을 포함할 수 있다.A method and apparatus are provided for recognizing a user through a fingertip gesture. The recognition device may display a pattern generated based on geometric information of the user's hand shape or hand size, and recognize a fingertip gesture through interaction with the user with respect to the pattern. The recognition device may authenticate the user using the recognized fingertip gesture. The patterns may include gesture inducement/related patterns and fake patterns. In the fingertip gesture, the information of the fingertip gesture may include fingertip touch positions of the fingertip gesture, a touch order of the fingertip touch positions, and a movement direction of the fingertip touch positions.

Description

METHOD AND APPARATUS FOR PERSONAL AUTHENTICATION BASED ON FINGERTIP GESTURE RECOGNITION AND FAKE PATTERN IDENTIFICATION

아래의 실시예들은 개인 인증을 하기 위한 방법 및 장치에 관한 것으로 보다 상세히는 손끝 제스처 인식 및 거짓 패턴 식별에 기반한 개인 인증을 위한 방법 및 장치가 개시된다.The following embodiments relate to a method and apparatus for personal authentication, and in more detail, a method and apparatus for personal authentication based on fingertip gesture recognition and false pattern identification are disclosed.

개인 식별 및 개인 인증을 위한 다양한 방법들이 개발되었고, 다양한 방법들이 사용되고 있다.Various methods for personal identification and personal authentication have been developed, and various methods are being used.

중요한 자산을 보다 안전하게 보호하기 위하여 개인 인증에 있어서 보안성을 향상시키려는 노력이 이루어지고 있으며, 보안성과 함께 용이성을 향상시키려는 노력이 개인 인증의 기술 분야에 있어서 중요한 이슈가 되고 있다.Efforts are being made to improve security in personal authentication in order to more safely protect important assets, and efforts to improve easiness along with security are becoming an important issue in the technical field of personal authentication.

개인 인증은 스마트 기기의 사용 통제 및 건물 등에 대한 출입 통제와 같은 목적을 위해 사용되고 있다.Personal authentication is being used for purposes such as controlling the use of smart devices and controlling access to buildings.

이러한 사용 통제 및 출입 통제에 대하여, 개인을 인증하는 기존의 다양한 방법들로서, 패스워드, 숫자 패드 기반의 패턴 락(pattern lock), 랜덤 키보드(random keyboard), 핀(Personal Identification Number; PIN) 및 스마트 카드(smart card) 등이 사용되고 있다.With respect to the use control and access control, as various existing methods for authenticating an individual, a password, a pattern lock based on a number pad, a random keyboard, a PIN (Personal Identification Number; PIN), and a smart card (smart card), etc. are being used.

개인 인증을 위한 패스워드, 패턴 락 및 PIN 등은 사용자가 망각하기 쉽거나, 쉽게 유출될 수 있다는 단점을 가지고 있다.Passwords, pattern locks, and PINs for personal authentication have disadvantages that users can easily forget or leak.

모바일 기기에서 주로 사용되는 정적 패턴 락 및 랜덤 키보드 또한 숄더 서핑(Shoulder Surfing) 등에 의하여 쉽게 유출될 수 있다.Static pattern locks and random keyboards mainly used in mobile devices can also be easily leaked by shoulder surfing or the like.

이러한 방법들이 가지고 있는 여러 문제들을 극복하기 위한 보다 진보된 방식으로서 지문, 홍채, 얼굴, 지정맥, 손등 혈관 및 손 모양(hand geometry) 등과 같은 다양한 생체 정보들을 개인 인증을 위해 활용하는 생체 인식 기술이 사용되고 있다.As a more advanced method to overcome the various problems of these methods, biometric technology that utilizes various biometric information such as fingerprints, iris, face, finger veins, blood vessels on the back of the hand and hand geometry for personal authentication has been developed. is being used

생체 인식 기술은 강력한 개인 인증의 수단 중 하나일 수 있다. 그러나, 생체 정보를 사용하는 개인 인증은 일반적으로 생체 정보를 안정적으로 획득하기 위한 추가의 센서를 요구한다. 또한, 생체 정보는 평생 불변이며 모든 사람들에 대해 서로 상이하다는 특징을 갖기 때문에, 개인의 생체 정보가 유출되더라도 삭제, 변경 및 재발급이 될 수 없다. 또한, 생체 정보의 유출에 대해 기술적으로 대응하기 어렵다는 문제가 있다.Biometric technology may be one of the means of strong personal authentication. However, personal authentication using biometric information generally requires an additional sensor for stably acquiring biometric information. In addition, since biometric information is permanent and has a characteristic that it is different for all people, even if an individual's biometric information is leaked, it cannot be deleted, changed, or reissued. In addition, there is a problem in that it is difficult to technically respond to the leakage of biometric information.

이러한 문제를 해결하기 위해서는, 소프트 생체 인식(softbiometric) 또는 세미 생체 인식에 기반하는 개인 인증과, 이러한 개인 인증의 보안성을 강화하는 메커니즘이 요구된다.In order to solve this problem, personal authentication based on soft biometric or semi-biometric and a mechanism for strengthening the security of such personal authentication are required.

한국 공개 특허 제1020130072606호, 2013년 7월 2일 공개 (명칭: 입력 인터페이스 제공 장치 및 그 동작 방법)Korean Patent Laid-Open Patent No. 1020130072606, published on July 2, 2013 (Title: Input interface providing device and operating method thereof)

일 실시예는 터치스크린을 통해 손 모양 및/또는 손 크기의 생체 정보가 등록되면 손 모양 및/또는 손 크기의 기하학적 범위에 기반하여 사용자와의 상호작용을 가능하게 하는 패턴을 제공하는 장치 및 방법을 제공할 수 있다.An embodiment provides an apparatus and method for providing a pattern enabling interaction with a user based on a geometric range of a hand shape and/or hand size when biometric information of a hand shape and/or hand size is registered through a touch screen can provide

일 실시예는 패턴 및 손끝 제스처의 연속적인 상호작용을 통해 사용자를 인증하는 장치 및 방법을 제공할 수 있다.One embodiment may provide an apparatus and method for authenticating a user through the continuous interaction of patterns and fingertip gestures.

일 실시예는 기정의된 순서 또는 무작위로 디스플레이되는 제스처 유도/관련 패턴 및 페이크 패턴을 사용하여 사용자를 인증하는 장치 및 방법을 제공할 수 있다.One embodiment may provide an apparatus and method for authenticating a user using a predefined sequence or randomly displayed gesture induction/related patterns and fake patterns.

일 실시예는 개인을 식별하기에는 고유성이 부족한 손 모양 및/또는 손 모양의 생체 정보와, 상기의 생체 정보를 보완할 수 있는 손끝 제스처를 동시에 사용하여 사용자를 인증하는 장치 및 방법을 제공할 수 있다.An embodiment may provide an apparatus and method for authenticating a user by simultaneously using hand shape and/or hand shape biometric information that is insufficient to identify an individual and a fingertip gesture that can supplement the biometric information. .

일 실시예는 상기의 동시 사용을 통해 기존의 패스워드 및 핀(PIN) 등의 개인 인증 방법이 가지고 있는 사용의 용이성 및 기존의 생체 인식 방법이 가지고 있는 보안성의 장점들을 동시에 제공하는 장치 및 방법을 제공할 수 있다.An embodiment provides an apparatus and method that simultaneously provide advantages of ease of use of existing personal authentication methods such as password and PIN and security of existing biometric methods through the simultaneous use can do.

일 실시예는 손 모양 및/또는 손 크기의 생체 정보를 사용하는 소프트 생체 인식에 기반하여, 안전성 및 보안성의 강화를 위해 재발급 및 재생성이 가능한 다양한 손끝 제스처들을 연속적으로 인식하는 장치 및 방법을 제공할 수 있다.An embodiment provides an apparatus and method for continuously recognizing various fingertip gestures that can be reissued and regenerated to enhance safety and security, based on soft biometric recognition using biometric information of a hand shape and/or hand size. can

일 실시예는 소프트 생체 인식 및 손끝 제스처의 인식을 통해 보다 안전하고 효율적으로 사용자를 인식하는 장치 및 방법을 제공할 수 있다.An embodiment may provide an apparatus and method for more safely and efficiently recognizing a user through soft biometric recognition and recognition of fingertip gestures.

일 실시예는 다양한 제품, 기술 및 응용에서 사용되는 터치스크린을 그대로 사용함으로써, 추가의 센서를 사용하지 않고 사용자를 인증하는 장치 및 방법을 제공할 수 있다.An embodiment may provide an apparatus and method for authenticating a user without using an additional sensor by using a touch screen used in various products, technologies, and applications as it is.

일 실시예는 터치스크린을 사용하는 기존의 스마트 기기, 컴퓨터 시스템, 에이티엠(ATM) 장치 및 출입 통제 시스템에 있어서 하드웨어의 변경 및 추가 없이도 구현될 수 있는 사용자를 인증하는 장치 및 방법을 제공할 수 있다.An embodiment can provide an apparatus and method for authenticating a user that can be implemented without changing or adding hardware in an existing smart device, computer system, ATM device, and access control system using a touch screen. have.

일 측에 있어서, 사용자를 식별하는 단계; 상기 식별된 사용자의 손 모양 또는 손 크기의 기하학적 정보에 기반하여 생성된 패턴을 디스플레이하는 단계; 상기 패턴에 대한 상기 사용자와의 상호 작용을 통한 손끝 제스처를 인식하는 단계; 및 상기 인식된 손끝 제스처를 사용하여 상기 사용자에 대한 인증을 수행하는 단계를 포함하는 인증 방법이 제공된다.In one aspect, the method comprising: identifying a user; displaying a pattern generated based on geometric information of the identified user's hand shape or hand size; recognizing a fingertip gesture through interaction with the user with respect to the pattern; and performing authentication for the user using the recognized fingertip gesture.

상기 식별하는 단계에서, 사용자 ID 또는 입력된 손의 정보를 사용하여, 사용자 ID 또는 상기 손의 정보에 대응하는 상기 후보 사용자 정보가 검색될 수 있다.In the identifying step, the candidate user information corresponding to the user ID or the hand information may be searched using the user ID or the input hand information.

상기 손의 정보는 손 모양 또는 손 형태의 기하학적 정보를 포함할 수 있다.The hand information may include hand shape or hand shape geometric information.

상기 패턴은 제스처 유도/관련 패턴일 수 있다.The pattern may be a gesture inducing/related pattern.

상기 제스처 유도/관련 패턴은 상기 사용자에 의해 등록된 손끝 제스처를 획득하기 위한 패턴일 수 있다.The gesture induction/related pattern may be a pattern for acquiring a fingertip gesture registered by the user.

상기 손끝 제스처를 인식하는 단계는, 입력된 손끝 제스처의 손끝 터치 위치들을 감지하는 단계; 상기 손끝 터치 위치들의 이동 방향을 감지하는 단계; 및 상기 입력된 손끝 제스처의 정보 및 상기 등록된 손끝 제스처의 정보 간의 유사도 비교를 통해 상기 입력된 손끝 제스처가 상기 제스처 유도/관련 패턴에 대해 성공한 제스처인지 여부를 판단하는 단계를 포함할 수 있다.Recognizing the fingertip gesture may include: detecting fingertip touch positions of the input fingertip gesture; detecting a movement direction of the fingertip touch positions; and determining whether the inputted fingertip gesture is a successful gesture with respect to the gesture induction/related pattern through a similarity comparison between the inputted fingertip gesture information and the registered fingertip gesture information.

상기 입력된 손끝 제스처의 정보는 상기 손끝 터치 위치들 및 상기 이동 방향을 포함할 수 있다.The input information of the fingertip gesture may include the fingertip touch locations and the movement direction.

상기 입력된 손끝 제스처의 정보 및 상기 등록된 손끝 제스처의 정보에 대하여 산출된 정량적 유사도 비교 결과가 기정의된 기준 값 이상인 경우 상기 입력된 손끝 제스처가 성공한 것으로 판단될 수 있다.When a quantitative similarity comparison result calculated with respect to the input fingertip gesture information and the registered fingertip gesture information is equal to or greater than a predefined reference value, it may be determined that the input fingertip gesture has been successful.

상기 입력된 손끝 제스처의 정보는 상기 손끝 터치 위치들의 터치 순서를 더 포함할 수 있다.The inputted fingertip gesture information may further include a touch order of the fingertip touch locations.

상기 제스처 유도/관련 패턴과 함께 특정 개체가 배경으로 디스플레이될 수 있다.A specific object may be displayed as a background together with the gesture induction/related pattern.

상기 개체는 하나 이상의 지점들을 나타낼 수 있다.The entity may represent one or more points.

상기 하나 이상의 지점들의 각 지점은 상기 개체 내에서 구분되어 식별될 수 있는 영역일 수 있다.Each of the one or more points may be a region that can be distinguished and identified within the entity.

상기 하나 이상의 지점들은 상기 사용자의 손 모양 또는 손 크기의 기하학적 정보에 기반하여 생성될 수 있다.The one or more points may be generated based on geometric information of the user's hand shape or hand size.

상기 하나 이상의 지점들은 상기 사용자의 손 모양 또는 손 크기의 기하학적 정보에 따른 상기 사용자의 손가락들의 끝들의 위치들에 대응할 수 있다.The one or more points may correspond to positions of the tips of the user's fingers according to geometric information of the user's hand shape or hand size.

상기 패턴은 상기 손끝 제스처가 터치된 순간에 감춰지거나 상기 손끝 제스처의 터치 후 기정의된 시간이 경과하면 감춰질 수 있다.The pattern may be hidden at the moment the fingertip gesture is touched, or may be hidden when a predetermined time elapses after the fingertip gesture is touched.

상기 패턴은 페이크 패턴일 수 있다.The pattern may be a fake pattern.

상기 페이크 패턴은 기정의된 손끝 제스처를 획득하기 위한 패턴일 수 있다.The fake pattern may be a pattern for obtaining a predefined fingertip gesture.

다른 일 측에 있어서, 사용자의 식별을 위한 정보를 등록하는 단계; 및 사용자의 손끝 제스처를 등록하는 단계를 포함하고, 상기 사용자의 식별을 위한 정보는 상기 사용자의 손 모양 또는 손 크기의 기하학적 정보를 포함하는 인증 정보의 등록 방법이 제공된다.In the other side, the step of registering information for user identification; and registering a user's fingertip gesture, wherein the information for identification of the user includes the user's hand shape or hand size geometric information.

상기 인증 정보의 등록 방법은 상기 손끝 제스처의 등록 정보의 종류를 선택하는 단계를 더 포함할 수 있다.The method of registering the authentication information may further include selecting a type of registration information for the fingertip gesture.

상기 등록 정보는 배경 기반 등록 정보 또는 무 배경의 손끝 점 기반 등록 정보일 수 있다.The registration information may be background-based registration information or non-background fingertip-based registration information.

상기 손끝 제스처를 등록하는 단계는, 배경 및 상기 손끝 제스처의 손끝 터치 위치를 등록하는 단계; 및 상기 손끝 터치 위치들의 이동 방향을 등록하는 단계를 포함할 수 있다.The registering of the fingertip gesture may include: registering a background and a fingertip touch position of the fingertip gesture; and registering the movement directions of the fingertip touch locations.

상기 손끝 터치 위치를 등록하는 단계에서, 상기 배경의 개체의 하나 이상의 지점들이 디스플레이되면, 상기 하나 이상의 지점들 중에서 하나 이상의 손끝 터치 위치가 선택 및 등록될 수 있다.In the step of registering the fingertip touch location, if one or more points of the object of the background are displayed, one or more fingertip touch locations among the one or more points may be selected and registered.

상기 개체의 크기 또는 모양은 상기 사용자의 손 모양 또는 손 크기의 기하학적 정보에 기반하여 생성 또는 조정될 수 있다.The size or shape of the object may be generated or adjusted based on the user's hand shape or geometric information of the hand size.

상기 손끝 터치 위치를 등록하는 단계에서, 상기 손끝 제스처의 하나 이상의 손끝 터치 위치들의 터치 순서가 등록될 수 있다.In the step of registering the fingertip touch position, a touch order of one or more fingertip touch positions of the fingertip gesture may be registered.

상기 손끝 제스처를 등록하는 단계는, 상기 손끝 제스처의 손끝 터치 위치를 등록하는 단계; 및 상기 손끝 터치 위치들의 이동 방향을 등록하는 단계를 포함할 수 있다.The registering of the fingertip gesture may include: registering a fingertip touch position of the fingertip gesture; and registering the movement directions of the fingertip touch locations.

상기 손끝 터치 위치를 등록하는 단계에서, 하나 이상의 지점들이 디스플레이될 수 있고, 상기 하나 이상의 지점들 중에서 하나 이상의 손끝 터치 위치가 선택 및 등록될 수 있다.In the step of registering the fingertip touch location, one or more points may be displayed, and one or more fingertip touch locations may be selected and registered among the one or more points.

상기 하나 이상의 지점들의 위치들은 상기 사용자의 손 모양 또는 크기의 기하학적 정보에 의해 생성 또는 조정될 수 있다.The positions of the one or more points may be generated or adjusted by geometric information of the user's hand shape or size.

또 다른 일 측에 있어서, 사용자의 손 모양 또는 손 크기의 기하학적 정보에 기반하여 생성된 패턴을 출력하는 디스플레이; 및 상기 패턴에 대한 상기 사용자와의 상호작용을 통한 손끝 제스처를 인식하고, 상기 인식된 손끝 제스처를 사용하여 사용자에 대한 인증을 수행하는 프로세서를 포함하는 인증 장치가 제공된다.In another aspect, the display for outputting a pattern generated based on the geometric information of the user's hand shape or hand size; and a processor for recognizing a fingertip gesture through interaction with the user with respect to the pattern, and authenticating the user using the recognized fingertip gesture.

이 외에도, 본 발명을 구현하기 위한 다른 방법, 장치, 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하기 위한 컴퓨터 판독 가능한 기록 매체가 더 제공된다.In addition to this, another method, apparatus, system for implementing the present invention, and a computer-readable recording medium for recording a computer program for executing the method are further provided.

터치스크린을 통해 손 모양 및/또는 손 크기의 생체 정보가 등록되면 손 모양 및/또는 손 크기의 기하학적 범위에 기반하여 사용자와의 상호작용을 가능하게 하는 패턴을 제공하는 장치 및 방법이 제공된다.Provided are an apparatus and method for providing a pattern enabling interaction with a user based on a geometric range of a hand shape and/or hand size when biometric information of a hand shape and/or hand size is registered through a touch screen.

패턴 및 손끝 제스처의 연속적인 상호작용을 통해 사용자를 인증하는 장치 및 방법이 제공된다.An apparatus and method are provided for authenticating a user through the continuous interaction of patterns and fingertip gestures.

기정의된 순서 또는 무작위로 디스플레이되는 제스처 유도/관련 패턴 및 페이크 패턴을 사용하여 사용자를 인증하는 장치 및 방법이 제공된다.An apparatus and method are provided for authenticating a user using a predefined sequence or randomly displayed gesture induced/associated pattern and fake pattern.

개인을 식별하기에는 고유성이 부족한 손 모양 및/또는 손 모양의 생체 정보와, 상기의 생체 정보를 보완할 수 있는 손끝 제스처를 동시에 사용하여 사용자를 인증하는 장치 및 방법이 제공된다.Provided are an apparatus and method for authenticating a user by simultaneously using hand shape and/or hand shape biometric information that is insufficient to identify an individual and a fingertip gesture capable of supplementing the biometric information.

상기의 동시 사용을 통해 기존의 패스워드 및 핀(PIN) 등의 개인 인증 방법이 가지고 있는 사용의 용이성 및 기존의 생체 인식 방법이 가지고 있는 보안성의 장점들을 동시에 제공하는 장치 및 방법이 제공된다.An apparatus and method are provided that simultaneously provide advantages of the ease of use of the existing personal authentication methods such as password and PIN and the security of the existing biometric recognition method through the simultaneous use.

손 모양 및/또는 손 크기의 생체 정보를 사용하는 소프트 생체 인식에 기반하여, 안전성 및 보안성의 강화를 위해 재발급 및 재생성이 가능한 다양한 손끝 제스처들을 연속적으로 인식하는 장치 및 방법이 제공된다.Provided are an apparatus and method for continuously recognizing various fingertip gestures that can be reissued and regenerated to enhance safety and security based on soft biometric recognition using biometric information of a hand shape and/or hand size.

소프트 생체 인식 및 손끝 제스처의 인식을 통해 보다 안전하고 효율적으로 사용자를 인식하는 장치 및 방법이 제공된다.An apparatus and method for more safely and efficiently recognizing a user through soft biometric recognition and recognition of fingertip gestures are provided.

다양한 제품, 기술 및 응용에서 사용되는 터치스크린을 그대로 사용함으로써, 추가의 센서를 사용하지 않고 사용자를 인증하는 장치 및 방법이 제공된다.An apparatus and method for authenticating a user without using an additional sensor by using a touch screen used in various products, technologies and applications as they are are provided.

터치스크린을 사용하는 기존의 스마트 기기, 컴퓨터 시스템, 에이티엠(ATM) 장치 및 출입 통제 시스템에 있어서 하드웨어의 변경 및 추가 없이도 구현될 수 있는 사용자를 인증하는 장치 및 방법이 제공된다.An apparatus and method for authenticating a user that can be implemented without changing or adding hardware in an existing smart device, computer system, ATM device, and access control system using a touch screen are provided.

도 1은 일 실시예에 따른 인증 장치의 구조도이다.
도 2는 일 예에 따른 프로세서의 기능을 나타낸다.
도 3은 일 예에 따른 터치스크린에 기반하여 손 모양 및/또는 손 크기의 생체 정보 및 손끝 제스처를 활용하는 개인 인증을 예시한다.
도 4는 일 실시예에 따른 터치스크린 환경에서 손 모양 및 손끝 제스처의 인식에 기반하는 개인 인증 시스템의 구성도이다.
도 5는 일 실시예에 따른 인증 방법의 흐름도이다.
도 6은 일 예에 따른 인증 정보의 등록 방법의 흐름도이다.
도 7은 일 예에 따른 배경 기반 등록 정보의 등록 방법의 흐름도이다.
도 8은 일 예에 따른 무 배경의 손끝 점 기반 등록 정보의 등록 방법의 흐름도이다.
도 9는 일 예에 따른 사용자에 대한 인증 방법의 흐름도이다.
도 10은 일 예에 따른 사용자의 식별 방법의 흐름도이다.
도 11은 일 예에 따른 제스처 유도/관련 패턴에 대한 손끝 제스처의 인식 방법의 흐름도이다.
도 12는 일 예에 따른 페이크 패턴에 대한 손끝 제스처의 인식 방법의 흐름도이다.1 is a structural diagram of an authentication apparatus according to an embodiment.
2 illustrates a function of a processor according to an example.
3 exemplifies personal authentication using biometric information of a hand shape and/or hand size and a fingertip gesture based on a touch screen according to an example.
4 is a block diagram of a personal authentication system based on recognition of a hand shape and a fingertip gesture in a touch screen environment according to an exemplary embodiment.
5 is a flowchart of an authentication method according to an embodiment.
6 is a flowchart of a method of registering authentication information according to an example.
7 is a flowchart of a method of registering background-based registration information according to an example.
8 is a flowchart of a method of registering fingertip point-based registration information without a background according to an example.
9 is a flowchart of an authentication method for a user according to an example.
10 is a flowchart of a user identification method according to an example.
11 is a flowchart of a method for recognizing a fingertip gesture with respect to a gesture induction/related pattern according to an example.
12 is a flowchart of a method of recognizing a fingertip gesture with respect to a fake pattern according to an example.

후술하는 예시적 실시예들에 대한 상세한 설명은, 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 실시예를 실시할 수 있기에 충분하도록 상세히 설명된다. 다양한 실시예들은 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 실시예의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 예시적 실시예들의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0010] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0010] Reference is made to the accompanying drawings, which illustrate specific embodiments by way of example. These embodiments are described in sufficient detail to enable those skilled in the art to practice the embodiments. It should be understood that various embodiments are different, but need not be mutually exclusive. For example, certain shapes, structures, and characteristics described herein with respect to one embodiment may be implemented in other embodiments without departing from the spirit and scope of the invention. In addition, it should be understood that the location or arrangement of individual components within each disclosed embodiment may be changed without departing from the spirit and scope of the embodiment. Accordingly, the detailed description set forth below is not intended to be taken in a limiting sense, and the scope of exemplary embodiments, if properly described, is limited only by the appended claims, along with all scope equivalents to those as claimed.

도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다. 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.Like reference numerals in the drawings refer to the same or similar functions throughout the various aspects. The shapes and sizes of elements in the drawings may be exaggerated for clearer description.

실시예에서 사용된 용어는 실시예를 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 실시예에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않으며, 추가적인 구성이 예시적 실시예들의 실시 또는 예시적 실시예들의 기술적 사상의 범위에 포함될 수 있음을 의미한다. 어떤 구성요소(component)가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기의 2개의 구성요소들이 서로 간에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있으나, 상기의 2개의 구성요소들의 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.The terms used in the examples are for describing the examples and are not intended to limit the present invention. In embodiments, the singular also includes the plural unless the phrase specifically dictates otherwise. As used herein, "comprises" and/or "comprising" refers to the presence of one or more other components, steps, operations and/or elements mentioned. Or addition is not excluded, and it means that an additional configuration may be included in the practice of the exemplary embodiments or the scope of the technical spirit of the exemplary embodiments. When a component is referred to as being “connected” or “connected” to another component, the two components may be directly connected or connected to each other, but in the above 2 It should be understood that other components may exist in the middle of the components.

제1 및 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기의 구성요소들은 상기의 용어들에 의해 한정되어서는 안 된다. 상기의 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하여 지칭하기 위해서 사용된다. 예를 들어, 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.Terms such as first and second may be used to describe various components, but the above components should not be limited by the above terms. The above terms are used to distinguish one component from another component. For example, without departing from the scope of rights, a first component may be referred to as a second component, and similarly, a second component may also be referred to as a first component.

또한, 실시예들에 나타나는 구성요소들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성요소가 분리된 하드웨어나 하나의 소프트웨어 구성 단위로만 이루어짐을 의미하지 않는다. 즉, 각 구성요소는 설명의 편의상 각각의 구성요소로 나열된 것이다. 예를 들면, 구성요소들 중 적어도 두 개의 구성요소들이 하나의 구성요소로 합쳐질 수 있다. 또한, 하나의 구성요소가 복수의 구성요소들로 나뉠 수 있다. 이러한 각 구성요소의 통합된 실시예 및 분리된 실시예 또한 본질에서 벗어나지 않는 한 권리범위에 포함된다.In addition, components shown in the embodiments are shown independently to represent different characteristic functions, and it does not mean that each component is made of separate hardware or only one software component unit. That is, each component is listed as each component for convenience of description. For example, at least two components among the components may be combined into one component. Also, one component may be divided into a plurality of components. Integrated embodiments and separate embodiments of each of these components are also included in the scope of rights without departing from the essence.

또한, 일부의 구성요소는 본질적인 기능을 수행하는 필수적인 구성요소는 아니고 단지 성능을 향상시키기 위한 선택적 구성요소일 수 있다. 실시예들은 실시예의 본질을 구현하는데 필수적인 구성부만을 포함하여 구현될 수 있고, 예를 들면, 단지 성능 향상을 위해 사용되는 구성요소와 같은, 선택적 구성요소가 제외된 구조 또한 권리 범위에 포함된다.In addition, some of the components are not essential components to perform essential functions, but may be optional components only to improve performance. Embodiments may be implemented including only components essential for implementing the essence of the embodiment, and for example, structures in which optional components are excluded, such as components used only for performance improvement, are also included in the scope of rights.

이하에서는, 기술분야에서 통상의 지식을 가진 자가 실시예들을 용이하게 실시할 수 있도록 하기 위하여, 첨부된 도면을 참조하여 실시예들을 상세히 설명하기로 한다. 실시예들을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
Hereinafter, the embodiments will be described in detail with reference to the accompanying drawings in order to enable those of ordinary skill in the art to easily implement the embodiments. In describing the embodiments, if it is determined that a detailed description of a related known configuration or function may obscure the gist of the present specification, the detailed description thereof will be omitted.

아래의 실시예에서는, 전술된 종래의 기술에 따른 개인 인증과 관련된 다양한 문제들을 극복하기 위하여, 연속적인 손끝 제스처 인식에 기반한 개인 인증의 방법 및 장치가 제공된다. 여기에서, 연속적인 손끝 제스처 인식은 손끝 제스처의 손끝 터치 위치들, 손끝 터치 위치들의 터치 순서 및 손끝 터치 위치들의 이동 방향들을 인식하는 것을 의미할 수 있다.In the following embodiments, in order to overcome various problems related to personal authentication according to the above-described prior art, a method and apparatus for personal authentication based on continuous fingertip gesture recognition are provided. Here, the continuous fingertip gesture recognition may mean recognizing fingertip touch positions of the fingertip gesture, a touch order of the fingertip touch positions, and movement directions of the fingertip touch positions.

최근 들어, 모바일 기기는 물론 컴퓨터 및 출입 통제 장치와 같은 다양한 시스템들에서 터치스크린(touchscreen)이 사용되고 있다.Recently, touch screens are being used in various systems such as computers and access control devices as well as mobile devices.

아래의 실시예에서는, 터치스크린이 제공되는 터치스크린 환경에서 손 모양 및/또는 손 크기의 생체 정보에 기반한 손끝 제스처(fingertip gesture)에 기반하는 개인 인증의 방법 및 장치가 제공될 수 있다. 손끝 제스처는 장치와의 상호작용을 통해 장치에서 의해 연속적으로 인식될 수 있다. 손끝 제스처 및 장치 간의 상호작용은 손 모양 및/또는 손 크기의 생체 정보에 기반하여 이루어질 수 있다.In the following embodiment, a method and apparatus for personal authentication based on a fingertip gesture based on biometric information of a hand shape and/or hand size in a touch screen environment in which a touch screen is provided may be provided. Fingertip gestures may be continuously recognized by the device through interaction with the device. The fingertip gesture and the interaction between the device may be made based on biometric information of a hand shape and/or hand size.

연속적인 손끝 제스처 인식에 기반한 개인 인증은 터치스크린 환경에서 추가의 센서 없이 사용자 및 손 모양 및/또는 손 크기의 생체 정보를 사용하는 인증 시스템 간의 상호작용(interaction)을 통해 수행될 수 있다.Personal authentication based on continuous fingertip gesture recognition may be performed through interaction between a user and an authentication system using biometric information of a hand shape and/or hand size without an additional sensor in a touch screen environment.

예를 들면, 터치스크린을 통해 손 모양 및/또는 손 크기의 생체 정보가 입력되면, 인증 장치는 손 모양 및/또는 손 크기의 기하학적 범위에 기반하여 터치스크린에 사용자와 상호작용 할 수 있는 패턴을 제시할 수 있다. 제시된 패턴에 대하여 사용자가 행한 손끝 제스처의 연속적이고 올바른 상호작용을 통하여 개인 인증이 수행될 수 있다.For example, when biometric information of a hand shape and/or hand size is input through the touch screen, the authentication device displays a pattern on the touch screen that allows the user to interact based on the geometric range of the hand shape and/or hand size. can present Personal authentication may be performed through continuous and correct interaction of fingertip gestures performed by the user with respect to the presented pattern.

생체 정보를 사용하는 개인 인증은 기존의 다른 방식의 개인 인증에 비해 한층 진보된 방식일 수 있다. 생체 정보를 사용하는 개인 인증은 보안성의 측면에서는 매우 우수한 기술일 수 있으나, 사용의 용이성에 있어서는 다소 부족한 기술일 수 있다. 반면, 다른 방식의 개인 인증은 사용의 용이성에 있어서는 우수한 기술이나 보안성의 측면에서는 다소 부족한 기술일 수 있다.Personal authentication using biometric information may be a more advanced method compared to other existing personal authentication methods. Personal authentication using biometric information may be a very good technology in terms of security, but may be somewhat insufficient in terms of ease of use. On the other hand, other methods of personal authentication may be an excellent technology in terms of ease of use, but somewhat insufficient in terms of security.

아래의 실시예에서는 기존의 다른 방식의 개인 인증이 갖는 사용의 용이성의 측면에서의 장점 및 생체 정보를 사용하는 개인 인증이 갖는 보안성의 측면에서의 장점을 동시에 살리기 위한 개인 인증을 위한 방법 및 장치가 설명된다. 방법 및 장치는, 소프트 생체 정보에 기반하여 안정성 및 보안성을 강화하기 위하여, 재발급 및 재생성이 가능한 다양한 손끝 제스처의 연속적인 인식을 통하여 보다 안전하고 효율적으로 개인을 인증할 수 있다.
In the embodiment below, a method and apparatus for personal authentication are provided to simultaneously utilize the advantages of ease of use of other existing personal authentication methods and the advantages of security of personal authentication using biometric information. explained. The method and apparatus can more safely and efficiently authenticate an individual through continuous recognition of various reissue and reproducible fingertip gestures in order to enhance stability and security based on soft biometric information.

도 1은 일 실시예에 따른 인증 장치의 구조도이다.1 is a structural diagram of an authentication apparatus according to an embodiment.

인증 장치(100)는 터치스크린 환경에서, 사용자에 대한 인증을 수행할 수 있다. 인증 장치(100)는 손 모양 생체 정보에 기반하여 사용자에 대한 인증을 수행할 수 있다. 또한, 인증 장치(100)는 손 모양 생체 정보에 기반하여 기하학적인 위치 및/또는 범위 내에서의 인증 장치(100)와의 상호작용을 통한 사용자의 손끝 제스처의 연속적인 인식에 기반하여 사용자에 대한 인증을 수행할 수 있다.The authentication apparatus 100 may perform authentication for a user in a touch screen environment. The authentication apparatus 100 may authenticate the user based on hand shape biometric information. In addition, the authentication device 100 authenticates the user based on continuous recognition of the user's fingertip gesture through interaction with the authentication device 100 within a geometric position and/or range based on hand shape biometric information. can be performed.

인증 장치(100)는 센서(110), 인터페이스(120), 디스플레이(130) 및 프로세서(140)를 포함할 수 있다.The authentication apparatus 100 may include a sensor 110 , an interface 120 , a display 130 , and a processor 140 .

센서(110)는 터치스크린과 같은 입력 센싱 장치일 수 있다. 센서(110)는 멀티 터치 입력을 수신할 수 있다. 센서(110) 또는 프로세서(140)는 획득된 멀티 터치 입력을 통해 사용자의 손 모양, 손 형태 및 손끝 제스처를 인식할 수 있다.The sensor 110 may be an input sensing device such as a touch screen. The sensor 110 may receive a multi-touch input. The sensor 110 or the processor 140 may recognize the user's hand shape, hand shape, and fingertip gesture through the obtained multi-touch input.

인터페이스(120)는 멀티 터치 입력에 의해 센싱된 데이터를 프로세서(140)로 전송할 수 있다.The interface 120 may transmit data sensed by the multi-touch input to the processor 140 .

인터페이스(120)는 유에스비(Universal Serial Bus; USB), 아이트리플이1394(IEEE 1394), 랜(Local Area Network; LAN), 와이파이(WiFi), 블루투스(Bluetooth) 및 기타 비 표준의 고유 인터페이스 등의 다양한 종류의 인터페이스 기능을 제공할 수 있다.Interface 120 is a USB (Universal Serial Bus; USB), i-triple 1394 (IEEE 1394), LAN (Local Area Network; LAN), Wi-Fi (WiFi), Bluetooth (Bluetooth) and other non-standard native interfaces such as Various types of interface functions can be provided.

센서(110), 인터페이스(120) 및 디스플레이(130)는 터치스크린 디스플레이를 구성할 수 있다. 말하자면, 인증 장치(100)는 터치스크린 디스플레이 및 프로세서(140)를 포함할 수 있다. 이하에서, 센서(110), 인터페이스(120) 및 디스플레이(130)에 의해 수행되는 것으로 설명된 동작 및 기능은 터치스크린 디스플레이에 의해 수행되는 것으로 간주될 수 있다.The sensor 110 , the interface 120 , and the display 130 may constitute a touch screen display. In other words, the authentication device 100 may include a touch screen display and a processor 140 . Hereinafter, the operations and functions described as being performed by the sensor 110 , the interface 120 , and the display 130 may be considered to be performed by the touchscreen display.

디스플레이(130)는 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 기반하여 생성된 패턴을 출력할 수 있다.The display 130 may output a pattern generated based on geometric information of the user's hand shape and/or hand size.

디스플레이(130)는 사용자 및 센서(110) 간의 상호작용을 위해 프로세서(140)에 의해 생성된 손끝 제스처 인식을 위한 제스처 유도/관련 패턴을 출력할 수 있다. 사용자는 출력된 제스처 유도/관련 패턴을 인식할 수 있고, 제스처 유도/관련 패턴에 대응하는 손끝 제스처를 센서(110)에 입력할 수 있다.The display 130 may output a gesture induction/related pattern for fingertip gesture recognition generated by the processor 140 for interaction between the user and the sensor 110 . The user may recognize the output gesture induction/related pattern, and may input a fingertip gesture corresponding to the gesture induction/related pattern to the sensor 110 .

제스처 유도/관련 패턴은 사용자의 손 모양 및/또는 손 크기의 기하학적 범위 내에서 사용자의 손끝 제스처를 유도하는 패턴일 수 있다. 예를 들면, 제스처 유도/관련 패턴은 사용자의 손의 손가락들이 터치될 수 있는 하나 이상 또는 5 개의 지점들을 나타낼 수 있다. 지점들은 사용자의 손 모양 및/또는 손 크기에 따라서 결정될 수 있다.The gesture inducing/related pattern may be a pattern that induces a user's fingertip gesture within a geometric range of the user's hand shape and/or hand size. For example, the gesture inducement/association pattern may indicate one or more or five points at which the fingers of the user's hand may be touched. The points may be determined according to the user's hand shape and/or hand size.

제스처 유도/관련 패턴에 대한 사용자의 상호작용을 통해 손끝 제스처가 인식될 수 있다.Fingertip gestures may be recognized through user interaction with gesture induction/related patterns.

프로세서(140)는 사용자의 인증을 위해 사용되는 인증 정보의 등록을 수행할 수 있고, 사용자의 인증에 대한 제어를 수행할 수 있다.The processor 140 may register authentication information used for user authentication, and may control user authentication.

프로세서(140)는 패턴에 대한 사용자의 손끝 제스처를 인식할 수 있고, 인식된 손끝 제스처를 사용하여 사용자에 대한 인증을 수행할 수 있다. 프로세서(140)는 패턴에 대한 사용자와의 상호작용을 통한 손끝 제스처를 인식할 수 있다.The processor 140 may recognize the user's fingertip gesture with respect to the pattern, and may perform authentication for the user using the recognized fingertip gesture. The processor 140 may recognize a fingertip gesture through interaction with the user with respect to the pattern.

프로세서(140)의 기능에 대해서는 아래에서 도 2를 참조하여 설명된다.
The function of the processor 140 is described below with reference to FIG. 2 .

도 2는 일 예에 따른 프로세서의 기능을 나타낸다.2 illustrates a function of a processor according to an example.

프로세서(140)는 등록 관리, 손끝 제스처 관리, 손끝 제스처 정합 및 인증 관리의 기능들을 수행할 수 있다. 예를 들면, 프로세서(140)는 등록 관리 모듈, 손끝 제스처 관리 모듈, 손끝 제스처 정합 모듈 및 인증 관리 모듈을 포함할 수 있다.The processor 140 may perform functions of registration management, fingertip gesture management, fingertip gesture matching, and authentication management. For example, the processor 140 may include a registration management module, a fingertip gesture management module, a fingertip gesture matching module, and an authentication management module.

등록 관리 모듈은 사용자의 등록 및 사용자에 대한 인증 정보의 등록을 수행할 수 있다. 등록 관리 모듈은 사용자에 대해 등록된 인증 정보를 안전하고 효율적으로 관리할 수 있다.The registration management module may perform user registration and user authentication information registration. The registration management module may safely and efficiently manage authentication information registered for the user.

인증 관리 모듈은 사용자에 대한 인증의 여부를 판단할 수 있다. 인증 관리 모듈은 손끝 제스처에 기반하여 등록된 인증 정보와의 연동 및 제스처 정합 등을 통해 사용자에 대한 인증의 여부를 판단할 수 있다.The authentication management module may determine whether the user is authenticated. The authentication management module may determine whether the user is authenticated based on the fingertip gesture through interworking with registered authentication information and gesture matching.

손끝 제스처 관리 모듈은 손 모양 및/또는 손 크기의 기하학적 정보에 기반하여 사용자의 등록 및 사용자에 대한 인증을 위한 패턴을 생성할 수 있다. 또한, 손끝 제스처 관리 모듈은 손끝 제스처 인식의 상호작용을 처리할 수 있다.The fingertip gesture management module may generate a pattern for user registration and user authentication based on geometric information of a hand shape and/or hand size. In addition, the fingertip gesture management module may process the interaction of fingertip gesture recognition.

손끝 제스처 정합 모듈은 손끝 터치 위치 및 손끝 터치 위치의 이동 방향 등 다양한 손끝 제스처들의 정합을 관장할 수 있다.
The fingertip gesture matching module may manage matching of various fingertip gestures, such as a fingertip touch position and a movement direction of the fingertip touch position.

도 3은 일 예에 따른 터치스크린에 기반하여 손 모양 및/또는 손 크기의 생체 정보 및 손끝 제스처를 활용하는 개인 인증을 예시한다.3 illustrates personal authentication using biometric information of a hand shape and/or hand size and a fingertip gesture based on a touch screen according to an example.

사용자의 손가락이 센서(110) 또는 터치스크린에 근접하거나, 센서(110) 또는 터치스크린을 터치하면 사용자의 사용자 ID를 입력하는 사용자 ID 입력 화면(310) 또는 손 모양의 터치를 유도하는 손 모양 입력 화면(320)이 디스플레이 될 수 있다.When the user's finger approaches the sensor 110 or the touch screen, or touches the sensor 110 or the touch screen, the user ID input screen 310 for inputting the user's user ID or a hand shape input that induces a hand touch A screen 320 may be displayed.

예를 들면, 손 모양 입력 화면(320)은 사용자의 손 모양 및/또는 손 크기의 정보에 따라 생성된 손 모양의 외곽선을 포함할 수 있다.For example, the hand shape input screen 320 may include an outline of the hand shape generated according to the user's hand shape and/or hand size information.

인증 장치(100)가 사용자 ID 입력 화면(310)를 디스플레이하면, 사용자는 등록된 사용자 ID를 터치스크린에 입력할 수 있다.When the authentication apparatus 100 displays the user ID input screen 310 , the user may input the registered user ID into the touch screen.

인증 장치(100)가 손 모양의 터치를 유도하는 손 모양 입력 화면(320)을 디스플레이하면 사용자는 디스플레이된 손 모양 입력 화면(320)의 유도에 따라 손 모양의 생체 정보를 입력할 수 있다.When the authentication device 100 displays the hand shape input screen 320 that induces a hand touch, the user may input biometric information of the hand shape according to the guidance of the displayed hand shape input screen 320 .

예를 들면, 사용자는 손 모양의 외곽선 내에 자신의 손을 놓을 수 있다.For example, the user may place their hand within the outline of the hand shape.

또한, 필요에 따라서는, 인증 장치(100)는 사용자 ID 입력 화면(310) 및 손 모양 입력 화면(320)을 통해 사용자의 기본 정보를 획득할 수 있다. 사용자는 사용자 ID 입력 화면(310)을 통하여 사용자 ID를 입력한 후 손 모양 입력 화면(320)을 통하여 손 모양의 생체 정보도 입력할 수 있다.Also, if necessary, the authentication apparatus 100 may acquire basic information of the user through the user ID input screen 310 and the hand shape input screen 320 . After inputting the user ID through the user ID input screen 310 , the user may also input biometric information of the hand shape through the hand shape input screen 320 .

전술된 것과 같이, 사전 등록된 사용자의 기본 정보가 입력되면 사용자를 인증하기 위하여 손끝 제스처 인식 과정이 진행되어야 할 수 있다.As described above, when basic information of a pre-registered user is input, a fingertip gesture recognition process may have to be performed in order to authenticate the user.

사용자의 인증을 위해, 인증 장치(100)는 사용자에 의해 사전 등록된 손끝 제스처에 대응하는 손끝 제스처를 획득하기 위해 제스처 유도/관련 패턴(330)을 디스플레이할 수 있다.For user authentication, the authentication apparatus 100 may display a gesture induction/related pattern 330 to obtain a fingertip gesture corresponding to a fingertip gesture pre-registered by the user.

사용자는 제스처 유도/관련 패턴이 디스플레이된 디스플레이 또는 터치스크린 상에 사전 등록된 하나 이상의 손끝 위치들을 터치할 수 있다. 하나 이상의 터치된 손끝 위치들은 입력 패턴을 구성할 수 있다. 또한, 사용자는, 하나 이상의 손끝 위치들이 터치된 채 하나 이상의 손끝 위치들을 사전 등록된 방향에 따라서 움직일 수 있다.The user may touch one or more pre-registered fingertip positions on a display or touchscreen on which a gesture guidance/related pattern is displayed. One or more touched fingertip locations may constitute an input pattern. In addition, the user may move one or more fingertip positions according to a pre-registered direction while the one or more fingertip positions are being touched.

예를 들면, 입력 패턴 및 하나 이상의 손끝 위치들의 이동 방향이 사전 등록된 손끝 제스처의 정보에 일치하면, 인증 장치(100)는 제스처 유도/관련 패턴에 대한 입력이 성공한 것으로 판단할 수 있다. 입력 패턴 및 하나 이상의 손끝 위치들의 이동 방향 중 적어도 하나가 사전 등록된 손끝 제스처의 정보에 일치하지 않으면, 인증 장치(100)는 제스처 유도/관련 패턴에 대한 사용자의 입력이 실패한 것으로 판단할 수 있다.For example, if the input pattern and the movement direction of one or more fingertip positions match the pre-registered fingertip gesture information, the authentication apparatus 100 may determine that the input for the gesture induction/related pattern is successful. If at least one of the input pattern and the movement direction of one or more fingertip positions does not match the pre-registered fingertip gesture information, the authentication apparatus 100 may determine that the user's input to the gesture induction/related pattern has failed.

사용자에 대한 인증은 복수의 단계들로 구성될 수 있다. 복수의 단계의 각 단계 별로 제스처 유도/관련 패턴에 대한 사용자의 입력이 성공 또는 실패로 판단될 수 있다.Authentication for the user may consist of a plurality of steps. For each step of the plurality of steps, the user's input to the gesture induction/related pattern may be determined as success or failure.

입력 패턴 및 하나 이상의 손끝 위치들의 이동 방향이 사전 등록된 손끝 제스처의 정보에 일치하면, 인증 장치(100)는 다음 단계의 제스처 유도/관련 패턴을 디스플레이 할 수 있다.If the input pattern and the movement direction of one or more fingertip positions match the pre-registered fingertip gesture information, the authentication apparatus 100 may display the gesture induction/related pattern of the next step.

말하자면, 제스처 유도/관련 패턴은 연속적인 복수의 단계들일 수 있다. 복수의 단계들의 제스처 유도/관련 패턴들의 각 제스처 유도/관련 패턴에 대해 손끝 제스처의 정보가 등록될 수 있다. 복수의 제스처 유도/관련 패턴들은 손끝 제스처의 정보의 등록 순서와 무관하게 무작위로 생성 및 디스플레이될 수 있다.In other words, the gesture inducement/association pattern may be a plurality of consecutive steps. Fingertip gesture information may be registered for each gesture induction/related pattern of the gesture induction/related patterns of a plurality of steps. The plurality of gesture induction/related patterns may be randomly generated and displayed regardless of the registration order of fingertip gesture information.

사용자가 본인의 제스처를 손쉽게 기억할 수 있도록, 사전에 등록되었거나, 사전에 등록된 것과 유사한 배경 정보 또는 개체가 제스처 유도/관련 패턴과 함께 디스플레이될 수 있다. 배경 정보 또는 개체를 통해 사용자는 제스처 유도/관련 패턴에 대해 어떠한 손끝 제스처가 입력되어야 하는지를 식별할 수 있다.In order for the user to easily memorize his or her gesture, background information or objects that have been previously registered or similar to those previously registered may be displayed together with gesture induction/related patterns. Through the background information or the object, the user can identify which fingertip gesture should be input for the gesture induction/related pattern.

도 3에서는 3 개의 배경 정보들(340, 350 및 370)이 도시되었다. 배경 정보는 사용자의 하나 이상의 손끝 위치들이 터치되는 지점에 특정된 형태가 표시된 특정된 그림 또는 사진일 수 있다.In FIG. 3 , three pieces of background information 340 , 350 and 370 are shown. The background information may be a specific picture or photo in which a specific shape is displayed at a point where one or more fingertip positions of the user are touched.

배경 정보는, 사용자가 손끝 제스처를 입력함이 있어서, 손끝 터치 위치들, 손끝 터치 위치들의 터치 순서 및/또는 손끝 터치 위치들의 이동 방향을 기억 또는 입력하는데 힌트 또는 도움이 될 수 있는 정보일 수 있다.The background information may be information that can be hints or helpful in memorizing or inputting fingertip touch locations, a touch order of fingertip touch locations, and/or a movement direction of the fingertip touch locations, as the user inputs a fingertip gesture. .

예를 들면, 배경 정보들(340, 350 및 370)은 개체를 포함할 수 있다. 여기에서, 개체는 동물 또는 케릭터일 수 있다.For example, the background information 340 , 350 , and 370 may include an entity. Here, the subject may be an animal or a character.

개체는 하나 이상의 지점들을 나타낼 수 있다. 하나 이상의 지점들의 각 지점은 개체 내에서 구분되어 식별될 수 있는 영역일 수 있으며, 터치의 대상일 수 있다.An entity may represent one or more points. Each of the one or more points may be a region that can be distinguished and identified within the object, and may be a target of a touch.

예를 들면, 동물의 눈들, 코, 입 및 귀들 중 적어도 일부의 각각이 하나의 지점일 수 있다.For example, each of at least some of the animal's eyes, nose, mouth and ears may be a single point.

예를 들면, 제1 배경 정보(340)는 코알라의 그림 또는 사진이고, 하나 이상의 손끝 위치들이 터치되는 지점은 코알라의 귀들일 수 있다. 말하자면, 사용자는 제스처 유도/관련 패턴의 배경 정보로서 코알라가 디스플레이된 경우, 자신이 코알라의 양 귀들을 손가락들로 각각 터치하고, 터치된 손가락들을 아래의 방향으로 이동해야 한다는 것을 인식할 수 있다.For example, the first background information 340 may be a picture or a picture of a koala, and points where one or more fingertip positions are touched may be ears of a koala. In other words, when a koala is displayed as the background information of the gesture induction/related pattern, the user may recognize that he/she should touch both ears of the koala with fingers and move the touched fingers in a downward direction.

예를 들면, 제2 배경 정보(350)는 호랑이의 얼굴의 그림 또는 사진이고, 하나 이상의 손끝 위치들이 터치되는 지점은 호랑이의 얼굴의 치아들일 수 있다. 말하자면, 사용자는 제스처 유도/관련 패턴의 배경 정보로서 호랑이의 얼굴이 디스플레이된 경우, 자신이 호랑이의 얼굴의 치아들을 손가락들로 각각 터치하고, 터치된 손가락들을 좌측의 방향으로 이동해야 한다는 것을 인식할 수 있다.For example, the second background information 350 may be a picture or photo of a tiger's face, and points where one or more fingertip positions are touched may be teeth of the tiger's face. In other words, when the tiger's face is displayed as the background information of the gesture induction/related pattern, the user may recognize that he/she should touch the teeth of the tiger's face with his/her fingers and move the touched fingers in the left direction. can

예를 들면, 제4 배경 정보(370)는 호랑이의 전신의 그림 또는 사진이고, 하나 이상의 손끝 위치들이 터치되는 지점은 호랑이의 앞발들 및 꼬리 끝일 수 있다. 말하자면, 사용자는 제스처 유도/관련 패턴의 배경 정보로서 호랑이의 전신이 디스플레이된 경우, 자신이 호랑이의 앞발들 및 꼬리 끝을 손가락들로 각각 터치하고, 터치된 손가락들을 좌측의 방향으로 이동해야 한다는 것을 인지하고 있어야할 수 있다.For example, the fourth background information 370 may be a drawing or photograph of a tiger's whole body, and a point where one or more fingertip positions are touched may be the front paws and tail tip of the tiger. In other words, when the tiger's whole body is displayed as the background information of the gesture induction/related pattern, the user knows that he should touch the front paws and tail tip of the tiger with his fingers, and move the touched fingers in the left direction. You may need to be aware

복수의 단계들에 대하여 사용자의 입력들이 계속적으로 정확하게 입력되는 경우, 인증을 위해 요구되는 복수의 단계들의 개수가 감소될 수 있다. 또는, 복수의 단계들 중 하나의 단계에 대한 사용자의 입력이 실패한 경우 추가의 단계가 요구될 수 있다.When the user's inputs for a plurality of steps are continuously and accurately inputted, the number of a plurality of steps required for authentication may be reduced. Alternatively, an additional step may be required when the user's input for one of the plurality of steps fails.

개인 인증을 위해 여러 단계들을 거쳐야 한다는 문제에 대한 보완을 위해서, 사용자의 입력이 등록된 손끝 제스처의 정보의 일부 또는 정보와 불일치하는 경우에도, 제스처 유도/관련 패턴이 다시 생성될 수 있다. 사용자는 다시 생성된 제스처 유도/관련 패턴에 대해 다시 손끝 제스처를 입력할 수 있다. 여기에서, 재생성된 제스처 유도/관련 패턴은 일반적인 제스처 유도/관련 패턴에 대해 높은 난이도를 갖거나, 보통의 난이도를 가질 수 있다.In order to compensate for the problem of having to go through several steps for personal authentication, even when a user's input does not match part or information of a registered fingertip gesture, a gesture induction/related pattern may be regenerated. The user may input a fingertip gesture again for the regenerated gesture induction/related pattern. Here, the regenerated gesture induction/related pattern may have a high difficulty or a normal difficulty with respect to a general gesture induction/related pattern.

제스처 유도/관련 패턴의 생성에 있어서, 경우에 따라 기정의된 조건에 따라 또는 무작위로 페이크 패턴(fake pattern)(360)이 생성될 수 있다.In the gesture induction/generation of the related pattern, a fake pattern 360 may be generated randomly or according to a predefined condition in some cases.

페이크 패턴에 대해서, 사용자는 페이크 패턴에 대한 기정의된 손끝 제스처를 입력할 수 있다. 말하자면, 페이크 패턴은 사용자에 의해 등록된 손끝 제스처가 아닌 페이크 패턴임을 인식하기 위해 기정의된 손끝 제스처가 입력되어야 하는 경우일 수 있다.For the fake pattern, the user may input a predefined fingertip gesture for the fake pattern. In other words, the fake pattern may be a case in which a predefined fingertip gesture must be input in order to recognize that it is a fake pattern rather than a fingertip gesture registered by the user.

페이크 패턴은 사용자가 페이크 패턴임을 식별할 수 있게 하는 배경 정보 또는 개체 등과 함께 디스플레이될 수 있다. 또는, 페이크 패턴은 사용자가 페이크 패턴임을 식별할 수 있게 하는 기정의된 배경색, 기정의된 메시지, 기정의된 기호 및 기정의된 효과음 등과 함께 디스플레이될 수 있다. 또는, 페이크 패턴으로서, 사용자가 사전에 보지 못한 무작위의 패턴이 디스플레이 될 수 있다.The fake pattern may be displayed together with background information or an object that allows the user to identify the fake pattern. Alternatively, the fake pattern may be displayed together with a predefined background color, a predefined message, predefined symbols, predefined sound effects, and the like that allow the user to identify the fake pattern. Alternatively, as a fake pattern, a random pattern that the user has not seen in advance may be displayed.

전술된 것과 같이, 복수의 단계들에서 디스플레이된 제스처 유도/관련 패턴들 및 페이크 패턴들에 대해, 사용자가 복수의 손끝 제스처들을 무작위로 또는 순서에 따라 입력하게 함으로써, 환경에 따라 각기 다른 단계들을 통해 개인 인증이 이루어질 수 있다.As described above, with respect to the gesture induction/related patterns and fake patterns displayed in the plurality of steps, the user may input a plurality of fingertip gestures randomly or in sequence, so that through different steps according to the environment Personal authentication may be achieved.

배경 정보 또는 개체의 크기 및 하나 이상의 지점들은 사전에 입력된 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 기반하여 생성될 수 있다. 예를 들면, 배경 정보 또는 개체의 크기에 의해 결정되는 하나 이상의 지점들은 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 따른 사용자의 손가락들의 끝들의 위치들에 대응할 수 있다.The background information or the size of the object and one or more points may be generated based on previously input geometric information of the user's hand shape and/or hand size. For example, the one or more points determined by the background information or the size of the object may correspond to positions of the tips of the user's fingers according to the user's hand shape and/or geometric information of the hand size.

터치스크린에 사용자의 손끝이 터치될 때, 디스플레이된 패턴은 손끝 제스처가 터치된 순간에 감춰지거나, 손끝 제스처의 터치 후 기정의된 시간이 경과하면 감춰질 수 있다. When the user's fingertip is touched on the touch screen, the displayed pattern may be hidden at the moment the fingertip gesture is touched, or may be hidden when a predetermined time elapses after the fingertip gesture is touched.

패턴들이 생성되는 순서, 배경 정보 및 개체 등은 손끝 제스처 및 장치 간의 상호작용의 시간이나 손끝의 터치의 순서 등에 따라서 다르게 생성될 수 있다.
The order in which the patterns are generated, background information, and an object may be generated differently depending on a fingertip gesture and an interaction time between devices or an order of fingertip touches.

도 4는 일 실시예에 따른 터치스크린 환경에서 손 모양 및 손끝 제스처의 인식에 기반하는 개인 인증 시스템의 구성도이다.4 is a block diagram of a personal authentication system based on recognition of a hand shape and a fingertip gesture in a touch screen environment according to an exemplary embodiment.

센싱부(405), 인터페이스부(410) 및 디스플레이부(480)는 각각 전술된 센서(110), 인터페이스(120) 및 디스플레이(130)에 각각 대응할 수 있다.The sensing unit 405 , the interface unit 410 , and the display unit 480 may respectively correspond to the sensor 110 , the interface 120 , and the display 130 described above.

손 정보 입력부(415), 제스처 검출부(420), 손끝 점 감지부(425), 손끝 방향 감지부(430), ID 입력부(435), 등록 관리부(440), ID 관리부(445), 등록 정보 데이터베이스(DataBase; DB)(450), 제스처 관리부(455), 제스처 정합부(460), 인증 관리부(465), 페이크 패턴 생성부(470) 및 패턴 생성부(475)는 프로세서(140)에 의해 실행되는 프로그램 모듈들일 수 있다. 프로그램 모듈들에 의해 수행되는 것으로 설명된 기능 또는 동작은 프로세서(140)에 의해 수행되는 것으로 간주될 수 있다. 또는, 프로세서(140)는 손 정보 입력부(415), 제스처 검출부(420), 손끝 점 감지부(425), 손끝 방향 감지부(430), ID 입력부(435), 등록 관리부(440), ID 관리부(445), 등록 정보 데이터베이스(DataBase; DB)(450), 제스처 관리부(455), 제스처 정합부(460), 인증 관리부(465), 페이크 패턴 생성부(470) 및 패턴 생성부(475)를 포함할 수 있다.Hand information input unit 415, gesture detection unit 420, fingertip point detection unit 425, fingertip direction detection unit 430, ID input unit 435, registration management unit 440, ID management unit 445, registration information database (DataBase; DB) 450 , gesture management unit 455 , gesture matching unit 460 , authentication management unit 465 , fake pattern generation unit 470 , and pattern generation unit 475 are executed by the processor 140 . It may be program modules that become A function or operation described as being performed by the program modules may be considered to be performed by the processor 140 . Alternatively, the processor 140 may include a hand information input unit 415 , a gesture detection unit 420 , a fingertip point detection unit 425 , a fingertip direction detection unit 430 , an ID input unit 435 , a registration management unit 440 , an ID management unit 445 , a registration information database (DataBase; DB) 450 , a gesture management unit 455 , a gesture matching unit 460 , an authentication management unit 465 , a fake pattern generation unit 470 , and a pattern generation unit 475 . may include

사용자의 손끝 제스처는 센싱부(405)를 통해 입력될 수 있다.The user's fingertip gesture may be input through the sensing unit 405 .

입력된 손끝 제스처의 정보는 인터페이스부(410)를 통하여 손 정보 입력부(415)로 전달될 수 있다.The inputted fingertip gesture information may be transmitted to the hand information input unit 415 through the interface unit 410 .

ID 입력 화면(310)을 통해 사용자의 사용자 ID가 입력되는 경우, ID 입력부(435)는 사용자 ID로서 입력된 문자열 및 입력의 완료 여부 등에 대한 검증 및 처리를 수행할 수 있다. 입력된 문자열은 ID 관리부(445)로 전달될 수 있다.When a user ID of a user is input through the ID input screen 310 , the ID input unit 435 may verify and process the character string input as the user ID and whether the input is completed or the like. The input character string may be transmitted to the ID management unit 445 .

사용자 ID를 등록하는 경우, 등록 관리부(440)는 등록이 요청된 사용자 ID가 유효한지 여부를 확인할 수 있고, 등록이 요청된 사용자 ID가 등록 정보 DB(450)에 기 등록된 ID와 중복되는지 여부를 확인할 수 있다.When registering a user ID, the registration management unit 440 may check whether the user ID requested to be registered is valid, and whether the user ID requested to be registered overlaps with an ID previously registered in the registration information DB 450 . can be checked.

ID 관리부(445)는 사용자 ID의 입력, 사용자 ID의 등록 및 등록 정보 DB(450) 등을 관리할 수 있다.The ID management unit 445 may manage input of a user ID, registration of a user ID, and the registration information DB 450 .

ID 관리부(445)는 사용자의 손끝 제스처의 정보 등을 제스처 관리부(455)에 전달할 수 있다.The ID management unit 445 may transmit information on the user's fingertip gesture to the gesture management unit 455 .

손 정보 입력부(415)는 센서(110) 또는 터치스크린을 통해 사용자의 손에 대한 정보가 입력되는 경우 손 모양 및/또는 손 형태의 기하학적 정보를 생성할 수 있다.The hand information input unit 415 may generate hand shape and/or hand shape geometric information when information about the user's hand is input through the sensor 110 or the touch screen.

손 정보 입력부(415)는 센서(110) 또는 터치스크린의 접촉 면에 대한 분석 및 사용자의 손의 손 모양 및/또는 손 형태에 대한 검증 과정을 통해하여 사용자의 손이 터치스크린에 접촉되어 사용자의 손에 대한 정보가 입력되는지 여부를 판단할 수 있다. The hand information input unit 415 performs an analysis of the contact surface of the sensor 110 or the touch screen and a verification process for the hand shape and/or hand shape of the user's hand so that the user's hand is in contact with the touch screen. It may be determined whether information about the hand is input.

손 정보 입력부(415)는 손에 대한 정보가 입력되는 경우가 아니면 제스처 검출부(420)가 수행되게 할 수 있다.The hand information input unit 415 may cause the gesture detection unit 420 to be performed unless information about a hand is input.

제스처 검출부(420)는 손끝의 터치 면에 대한 분석 등을 통하여, 손끝 제스처의 입력 여부를 검증할 수 있다.The gesture detection unit 420 may verify whether a fingertip gesture is input through analysis of the touch surface of the fingertip or the like.

손끝 제스처의 입력이 확인되면, 손끝 점 감지부(425)는 입력된 손끝 제스처에 대해서 손끝 터치 위치들 및 손끝 터치 위치들의 터치 순서 등을 감지할 수 있다.When the input of the fingertip gesture is confirmed, the fingertip point detection unit 425 may detect fingertip touch positions and a touch sequence of the fingertip touch positions with respect to the input fingertip gesture.

또한, 손끝 제스처의 입력이 확인되면, 손끝 방향 감지부(430)는 손끝 터치 위치들의 이동 방향을 감지할 수 있다.Also, when the input of the fingertip gesture is confirmed, the fingertip direction sensing unit 430 may detect movement directions of fingertip touch locations.

손끝 제스처의 정보는 손끝 점 감지부(425)에서 감지된 선택적 손끝 터치 위치들 및 손끝 터치 위치들의 터치 순서와, 손끝 방향 감지부(430)에서 감지된 손끝 터치 위치들의 이동 방향을 포함할 수 있다.The information of the fingertip gesture may include a touch order of selective fingertip touch positions and fingertip touch positions detected by the fingertip point detection unit 425 and a movement direction of the fingertip touch positions detected by the fingertip direction sensing unit 430. .

제스처 관리부(455)는 입력된 손끝 제스처의 정보 및 등록된 사용자의 손끝 제스처의 정보 간의 유사도 비교 항목 등에 대한 분석 및 처리를 수행할 수 있다. ID 관리부(445)는 등록 정보 DB(450)에서 등록된 사용자의 손끝 제스처의 정보를 검색할 수 있다. 유사도 비교 항목 등에 대한 분석 및 처리에 의해 사용자의 손끝 제스처가 등록된 사용자의 손끝 제스처에 대응하는지 여부가 효율적으로 비교될 수 있다.The gesture manager 455 may analyze and process a similarity comparison item between the input fingertip gesture information and the registered user's fingertip gesture information. The ID management unit 445 may search for information on the user's fingertip gesture registered in the registration information DB 450 . Whether the user's fingertip gesture corresponds to the registered user's fingertip gesture can be efficiently compared by analyzing and processing the similarity comparison item and the like.

제스처 정합부(460)는 유사도 비교 항목에 대한 정합을 통하여 정량적 유사도 비교 결과를 산출할 수 있다.The gesture matching unit 460 may calculate a quantitative similarity comparison result by matching the similarity comparison items.

인증 관리부(465)는 산출된 정량적 유사도 비교 결과에 따라서 다음의 단계를 수행할 수 있다. 다음의 단계는 인증의 완료, 제스처 유도/관련 패턴을 사용하는 (추가의) 인증 또는 페이크 패턴을 사용하는 (추가의) 인증일 수 있다.The authentication manager 465 may perform the following steps according to the calculated quantitative similarity comparison result. The next step may be completion of authentication, (additional) authentication using gesture induced/related patterns, or (further) authentication using fake patterns.

예를 들면, 인증 관리부(465)는 산출된 정량적 유사도 비교 결과가 기정의된 기준 값의 이상인 경우 입력된 손끝 제스처가 성공한 것으로 판단할 수 있다. 인증 관리부(465)는 산출된 정량적 유사도 비교 결과가 기정의된 기준 값보다 더 작은 경우 입력된 손끝 제스처가 실패한 것으로 판단할 수 있다.For example, when the calculated quantitative similarity comparison result is greater than or equal to a predefined reference value, the authentication manager 465 may determine that the input fingertip gesture is successful. When the calculated quantitative similarity comparison result is smaller than a predefined reference value, the authentication manager 465 may determine that the input fingertip gesture has failed.

예를 들면, 인증 관리부(465)는 입력된 손끝 제스처가 성공한 경우 인증을 완료할 수 있다.For example, the authentication manager 465 may complete authentication when the input fingertip gesture succeeds.

예를 들면, 인증 관리부(465)는 기정의된 하나 이상의 단계들이 수행되었고, 입력된 손끝 제스처가 성공한 경우 인증을 완료할 수 있다.For example, the authentication manager 465 may complete authentication when one or more predefined steps have been performed and the input fingertip gesture is successful.

예를 들면, 인증 관리부(465)는 입력된 손끝 제스처가 성공한 경우 다음의 단계로서 다음의 제스처 유도/관련 패턴을 사용하는 인증을 진행할 수 있다.For example, when the input fingertip gesture is successful, the authentication manager 465 may proceed with authentication using the following gesture induction/related pattern as a next step.

예를 들면, 인증 관리부(465)는 입력된 손끝 제스처가 실패한 경우 다음의 단계로서 다음의 제스처 유도/관련 패턴을 사용하는 인증을 진행할 수 있다.For example, when the input fingertip gesture fails, the authentication manager 465 may proceed with authentication using the following gesture induction/related pattern as a next step.

예를 들면, 인증 관리부(465)는 입력된 손끝 제스처가 성공한 경우 다음의 단계로서 페이크 패턴을 생성할 수 있고, 페이크 패턴을 사용하는 인증을 진행할 수 있다.For example, when the input fingertip gesture succeeds, the authentication manager 465 may generate a fake pattern as a next step, and may perform authentication using the fake pattern.

예를 들면, 인증 관리부(465)는 입력된 손끝 제스처가 실패한 경우 다음의 단계로서 페이크 패턴을 생성할 수 있고, 페이크 패턴을 사용하는 인증을 진행할 수 있다.For example, when the input fingertip gesture fails, the authentication manager 465 may generate a fake pattern as a next step, and may perform authentication using the fake pattern.

페이크 패턴을 사용하는 인증이 진행되는 경우, 페이크 패턴 생성부(470)는 페이크 패턴을 생성할 수 있다. 페이크 패턴 생성부(470)는 무작위로 다양한 난이도들에 따른 페이크 패턴을 생성할 수 있다.When authentication using a fake pattern is in progress, the fake pattern generator 470 may generate a fake pattern. The fake pattern generator 470 may randomly generate fake patterns according to various levels of difficulty.

제스처 유도/관련 패턴을 사용하는 인증이 진행되는 경우, 패턴 생성부(475)는 제스처 유도/관련 패턴을 생성할 수 있다.When authentication using a gesture induction/related pattern is in progress, the pattern generator 475 may generate a gesture induction/related pattern.

페이크 패턴 또는 제스처 유도/관련 패턴이 생성되면, 디스플레이부(480)는 페이크 패턴 또는 제스처 유도/관련 패턴을 출력할 수 있고, 센싱부(405), 인터페이스부(410) 및 손 정보 입력부(415) 등에 의한 동작이 다시 반복될 수 있다.
When the fake pattern or the gesture induction/related pattern is generated, the display unit 480 may output the fake pattern or the gesture induction/related pattern, and the sensing unit 405, the interface unit 410, and the hand information input unit 415 The operation may be repeated again.

도 5는 일 실시예에 따른 인증 방법의 흐름도이다.5 is a flowchart of an authentication method according to an embodiment.

단계(510)에서, 인증 장치(100)는 사용자의 인증을 위한 인증 정보를 등록할 수 있다. 인증 정보는 손끝 제스처의 정보를 포함할 수 있다.In operation 510 , the authentication apparatus 100 may register authentication information for user authentication. The authentication information may include fingertip gesture information.

단계(520)에서, 인증 장치(100)는 사용자에 대한 인증을 수행할 수 있다.In operation 520 , the authentication apparatus 100 may authenticate the user.

인증 장치(100)는 손 모양 및/또는 손 크기의 인식, 손끝 제스처의 인식및 페이크 패턴의 식별 등에 기반하여 사용자에 대한 인증을 수행할 수 있다.
The authentication apparatus 100 may perform authentication for the user based on recognition of a hand shape and/or a size of a hand, recognition of a fingertip gesture, and identification of a fake pattern.

도 6은 일 예에 따른 인증 정보의 등록 방법의 흐름도이다.6 is a flowchart of a method of registering authentication information according to an example.

도 5를 참조하여 전술된 단계(510)는 후술될 단계들(610, 620, 630 및 640)을 포함할 수 있다.Step 510 described above with reference to FIG. 5 may include steps 610 , 620 , 630 and 640 to be described later.

단계들(610 및 620)에서, 인증 장치(100)는 사용자의 식별을 위한 정보를 등록할 수 있다.In steps 610 and 620 , the authentication apparatus 100 may register information for user identification.

사용자의 식별을 위한 정보는 사용자의 사용자 ID 및 사용자의 손 정보를 포함할 수 있다.The information for identification of the user may include a user ID of the user and hand information of the user.

사용자의 손 정보는 사용자의 손 모양 및/또는 손 크기의 기하학적 정보를 포함할 수 있다.The user's hand information may include geometrical information of the user's hand shape and/or hand size.

단계(610)에서, 인증 장치(100)는 사용자의 사용자 ID를 등록할 수 있다.In operation 610, the authentication apparatus 100 may register a user ID of the user.

단계(620)에서, 인증 장치(100)는 사용자의 손 정보를 등록 할 수 있다.In step 620, the authentication apparatus 100 may register the user's hand information.

단계(630)에서, 인증 장치(100)는 손끝 제스처의 등록 정보의 종류를 선택할 수 있다.In operation 630, the authentication apparatus 100 may select a type of registration information of a fingertip gesture.

등록 정보는 배경 기반 등록 정보 또는 무 배경의 손끝 점 기반 등록 정보일 수 있다. 배경은 사진 또는 그림일 수 있다. 사용자 또는 인증 장치(100)에 의해 등록 정보의 종류가 선택될 수 있다.The registration information may be background-based registration information or non-background fingertip-based registration information. The background can be a photo or a drawing. The type of registration information may be selected by the user or the authentication device 100 .

단계(640)에서, 인증 장치(100)는 인증 장치(100)는 손끝 제스처를 등록할 수 있다. 손끝 제스처의 등록의 구체적인 방법은 선택된 등록 정보의 종류에 따라 다를 수 있다.In operation 640 , the authentication device 100 may register a fingertip gesture. A specific method of registering a fingertip gesture may vary depending on the type of selected registration information.

배경 기반 등록 정보가 등록되는 경우에 대해서 도 7을 참조하여 후술된다. 무 배경의 손끝 점 기반 등록 정보가 등록되는 경우에 대해서 도 8을 참조하여 후술된다.A case in which background-based registration information is registered will be described later with reference to FIG. 7 . A case in which fingertip point-based registration information with no background is registered will be described later with reference to FIG. 8 .

단계들(630 및 640)는 인증 장치(100)에 의해 요구되는 만큼 반복될 수 있으며, 단계들(630 및 640)의 반복 후 등록의 과정이 종료할 수 있다.
Steps 630 and 640 may be repeated as many times as required by the authentication apparatus 100 , and after the repetition of steps 630 and 640 , the process of registration may end.

도 7은 일 예에 따른 배경 기반 등록 정보의 등록 방법의 흐름도이다.7 is a flowchart of a method of registering background-based registration information according to an example.

도 6을 참조하여 전술된 단계(640)는 후술될 단계들(710 및 720)을 포함할 수 있다.Step 640 described above with reference to FIG. 6 may include steps 710 and 720 to be described later.

단계(710)에서, 인증 장치(100)는 배경 및 손끝 터치 위치를 등록할 수 있다.In step 710 , the authentication device 100 may register a background and a fingertip touch location.

터치스크린은 배경의 사진들 및 그림들을 디스플레이할 수 있다. 사용자 또는 인증 장치(100)에 의해 배경의 사진 또는 그림이 선택될 수 있으며, 사진 또는 그림의 개체가 선택될 수 있다.The touchscreen may display pictures and pictures of the background. A picture or picture of the background may be selected by the user or the authentication device 100 , and an object of the picture or picture may be selected.

개체가 선택되면, 터치스크린은 배경의 개체의 하나 이상의 지점들을 디스플레이할 수 있다. 사용자 또는 인증 장치(100)에 의해 개체의 하나 이상의 지점들 중에서 하나 이상의 손끝 터치 위치가 선택 및 등록될 수 있다. 말하자면, 패턴의 하나 이상의 지점들 중 손끝 제스처에 의해 터치되어야 하는 지점들은 상기의 하나 이상의 지점들 중 일부일 수 있다. 사용자는 패턴의 하나 이상의 지점들 중 일부의 지점(들)을 터치할 수 있고, 터치된 일부의 지점(들)이 패턴에 대한 손끝 제스처의 일부로서 등록될 수 있다.Once the object is selected, the touchscreen may display one or more points of the object in the background. One or more fingertip touch positions among one or more points of an object may be selected and registered by the user or the authentication device 100 . That is, points to be touched by a fingertip gesture among one or more points of the pattern may be some of the one or more points. The user may touch some point(s) of one or more points of the pattern, and the touched partial point(s) may be registered as part of a fingertip gesture for the pattern.

또한, 사용자 또는 인증 장치(100)에 의해 하나 이상의 손끝 터치 위치들의 터치 순서가 선택 및 등록될 수 있다.Also, a touch order of one or more fingertip touch locations may be selected and registered by the user or the authentication device 100 .

패턴은 하나 이상의 지점들을 나타내는 표시를 포함할 수 있다. 예를 들면, 패턴은 하나 이상의 지점들을 중심으로 갖는 하나 이상의 원들을 포함할 수 있다.The pattern may include indicia indicating one or more points. For example, the pattern may include one or more circles centered on one or more points.

터치스크린에 개체의 하나 이상의 지점들이 디스플레이될 때, 동물 또는 케릭터 등과 같은 개체의 크기 및/또는 모양은 초기에 입력된 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 기반하여 생성 또는 조정될 수 있다. 또한, 터치스크린에 개체의 하나 이상의 지점들이 디스플레이될 때, 동물 또는 케릭터 등과 같은 개체의 하나 이상의 지점들의 위치들은 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 의해 결정 및 조정될 수 있다. 따라서, 개체의 하나 이상의 지점들의 위치들은 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 의해 자동으로 조정될 수 있다.When one or more points of the object are displayed on the touchscreen, the size and/or shape of the object, such as an animal or character, etc. may be created or adjusted based on initially input geometric information of the user's hand shape and/or hand size. . Further, when one or more points of the object are displayed on the touch screen, the positions of the one or more points of the object, such as an animal or a character, may be determined and adjusted by geometric information of the user's hand shape and/or hand size. Accordingly, the positions of one or more points of the object may be automatically adjusted by geometric information of the user's hand shape and/or hand size.

단계(720)에서, 손끝 터치 위치들이 결정되면, 다음으로 사용자 또는 인증 장치(100)는 손끝 터치 위치들의 이동 방향을 선택 및 등록할 수 있다.In step 720 , when the fingertip touch locations are determined, the user or the authentication device 100 may select and register a movement direction of the fingertip touch locations.

하나 이상의 손끝 터치 위치들의 이동 방향들은 서로 다를 수 있다. 예를 들면, 하나 이상의 손끝 터치 위치들의 이동 방향은 특정한 기준 점으로부터 멀어지는 방향 또는 상기의 특정한 기준 점으로 가까워지는 방향일 수 있다.
Movement directions of one or more fingertip touch locations may be different from each other. For example, the moving direction of the one or more fingertip touch locations may be a direction away from a specific reference point or a direction approaching the specific reference point.

도 8은 일 예에 따른 무 배경의 손끝 점 기반 등록 정보의 등록 방법의 흐름도이다.8 is a flowchart of a method of registering fingertip point-based registration information without a background according to an example.

도 6을 참조하여 전술된 단계(640)는 후술될 단계들(810 및 820)을 포함할 수 있다.Step 640 described above with reference to FIG. 6 may include steps 810 and 820 to be described later.

무 배경 손끝 점 기반 등록 정보도 전술된 배경 기반 등록 정보와 유사한 방식으로 등록될 수 있다.The non-background fingertip point-based registration information may also be registered in a manner similar to the background-based registration information described above.

단계(810)에서, 인증 장치(100)는 손끝 터치 위치를 등록할 수 있다.In operation 810 , the authentication apparatus 100 may register a fingertip touch location.

터치스크린은 하나 이상의 지점들을 디스플레이할 수 있다. 예를 들면, 지점은 원의 형태를 가질 수 있다. 사용자 또는 인증 장치(100)에 의해 하나 이상의 지점들 중에서 하나 이상의 손끝 터치 위치가 선택 및 등록될 수 있다. 또한, 사용자 또는 인증 장치(100)에 의해 하나 이상의 손끝 터치 위치들의 터치 순서가 선택 및 등록될 수 있다.The touchscreen may display one or more points. For example, a point may have the shape of a circle. One or more fingertip touch locations among one or more points may be selected and registered by the user or the authentication device 100 . Also, a touch order of one or more fingertip touch locations may be selected and registered by the user or the authentication device 100 .

터치스크린에 하나 이상의 지점들이 디스플레이될 때, 하나 이상의 지점들의 위치들은 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 의해 생성 및/또는 조정될 수 있다. When one or more points are displayed on the touchscreen, the positions of the one or more points may be generated and/or adjusted by geometric information of the user's hand shape and/or hand size.

예를 들면, 사용자의 손이 클수록 하나 이상의 지점들의 위치들의 간격들은 더 벌어질 수 있다.For example, the larger the user's hand, the wider the spacing of the positions of one or more points may be.

예를 들면, 하나 이상의 지점들의 위치들은 사용자가 손을 터치가 가능할 정도로 적정하게 펼쳤을 때의 사용자의 손의 손끝들의 위치들에 대응할 수 있다. 따라서, 하나 이상의 지점들의 위치들은 사용자의 손 모양 및 크기의 기하학적 정보에 의해 자동으로 조정될 수 있다.For example, the positions of the one or more points may correspond to positions of the fingertips of the user's hand when the user properly spreads the hand to enable touch. Accordingly, the positions of one or more points may be automatically adjusted according to the geometric information of the user's hand shape and size.

단계(820)에서, 손끝 터치 위치들이 결정되면, 다음으로 사용자 또는 인증 장치(100)는 손끝 터치 위치들의 이동 방향을 선택 및 등록할 수 있다.In step 820 , when the fingertip touch locations are determined, the user or the authentication apparatus 100 may select and register the movement direction of the fingertip touch locations.

도 7을 참조하여 전술된 실시예에 대한 내용은 배경의 디스플레이에 관련된 것을 제외하고는 본 실시예에도 적용될 수 있다.
The contents of the embodiment described above with reference to FIG. 7 may be applied to the present embodiment except for the background display.

도 9는 일 예에 따른 사용자에 대한 인증 방법의 흐름도이다.9 is a flowchart of an authentication method for a user according to an example.

도 5를 참조하여 전술된 단계(520)는 후술될 단계들(910, 920, 930 및 940)을 포함할 수 있다.Step 520 described above with reference to FIG. 5 may include steps 910 , 920 , 930 , and 940 to be described later.

단계(910)에서, 인증 장치(100)는 사용자를 식별할 수 있다.In operation 910 , the authentication apparatus 100 may identify a user.

사용자의 식별에 대해서, 아래에서 도 10을 참조하여 설명된다.The identification of the user is described below with reference to FIG. 10 .

인증 장치(100)는 사용자의 식별을 통해 후술될 단계(920)에서의 사용자의 검색의 범위를 축소할 수 있고, 다음의 단계들(920, 930 및 940)에서 순차적으로 사용자에 대한 인증을 수행할 수 있다.The authentication apparatus 100 may reduce the scope of the user's search in step 920 to be described later through identification of the user, and sequentially perform authentication for the user in the following steps 920 , 930 , and 940 . can do.

사용자가 식별되면, 식별된 사용자의 등록된 손끝 제스처의 정보가 검색될 수 있다. 인증 장치(100)는 등록된 손끝 제스처의 정보를 검색하기 위해 등록 정보 DB(450)를 검색할 수 있다.When the user is identified, information of the identified user's registered fingertip gesture may be retrieved. The authentication device 100 may search the registration information DB 450 to search for information on registered fingertip gestures.

단계(920)에서, 사용자에 대한 인증을 위한 손끝 제스처를 수신하기 위해, 인증 장치(100)는 패턴을 생성할 수 있고, 생성된 패턴을 디스플레이할 수 있다.In operation 920 , in order to receive a fingertip gesture for authentication of the user, the authentication apparatus 100 may generate a pattern and display the generated pattern.

패턴은 제스처 유도/관련 패턴 또는 페이크 패턴일 수 있다.The pattern may be a gesture inducement/related pattern or a fake pattern.

패턴은 식별된 사용자의 손 모양 및/또는 손 크기의 기하학적 정보에 기반하여 생성될 수 있다.The pattern may be generated based on the identified user's hand shape and/or hand size geometric information.

제스처 유도/관련 패턴은 사용자에 의해 등록된 손끝 제스처를 획득하기 위한 패턴일 수 있다. 페이크 패턴은 기정의된 손끝 제스처를 획득하기 위한 패턴일 수 있다. 말하자면, 제스처 유도/관련 패턴은 "(사용자의 인증에 대하여 사용자에 의해) 등록된 패턴"일 수 있고, 페이크 패턴은 "비등록된 패턴" 또는 "(전체의 사용자들에 대하여) 기정의된 패턴"일 수 있다.The gesture induction/related pattern may be a pattern for obtaining a fingertip gesture registered by a user. The fake pattern may be a pattern for obtaining a predefined fingertip gesture. In other words, the gesture induction/related pattern may be "a pattern registered (by the user for authentication of the user)", and the fake pattern may be a "unregistered pattern" or "a predefined pattern (for all users)" "It could be

단계(930)에서, 인증 장치(100)는 패턴에 대한 사용자의 손끝 제스처를 인식할 수 있다. 인증 장치(100)는 패턴에 대한 사용자와의 상호작용을 통한 손끝 제스처를 인식할 수 있다.In operation 930 , the authentication apparatus 100 may recognize the user's fingertip gesture with respect to the pattern. The authentication apparatus 100 may recognize a fingertip gesture through interaction with the user for the pattern.

제스처 유도/관련 패턴에 대한 손끝 제스처의 인식에 대해서 도 11을 참조하여 후술된다.Recognition of fingertip gestures for gesture induction/related patterns will be described below with reference to FIG. 11 .

페이크 패턴에 대한 손끝 제스처의 인식에 대해서 도 12를 참조하여 후술된다.Recognition of the fingertip gesture with respect to the fake pattern will be described later with reference to FIG. 12 .

단계(940)에서, 인증 장치(100)는 인식된 손끝 제스처를 사용하여 사용자에 대한 인증을 수행할 수 있다.In operation 940 , the authentication apparatus 100 may authenticate the user using the recognized fingertip gesture.

예를 들면, 인증 장치(100)는 입력된 손끝 제스처가 성공한 경우 사용자에 대한 인증이 성공하였음을 결정할 수 있다. 인증 장치(100)는 입력된 손끝 제스처가 실패한 경우 사용자에 대한 인증이 실패하였음을 결정할 수 있다.For example, when the input fingertip gesture is successful, the authentication apparatus 100 may determine that authentication of the user has been successful. When the input fingertip gesture fails, the authentication apparatus 100 may determine that authentication for the user has failed.

단계들(920, 930 및 940)은 반복해서 수행될 수 있다. 인증 장치(100)는 소정의 횟수에 대해 사용자에 대한 인증이 성공한 경우, 사용자에 대한 인증을 최종적으로 완료할 수 있다.
Steps 920 , 930 , and 940 may be performed repeatedly. The authentication apparatus 100 may finally complete the authentication of the user when authentication of the user is successful for a predetermined number of times.

도 10은 일 예에 따른 사용자의 식별 방법의 흐름도이다.10 is a flowchart of a user identification method according to an example.

도 9를 참조하여 전술된 단계(910)는 후술될 단계들(1010, 1020 및 1030)을 포함할 수 있다.Step 910 described above with reference to FIG. 9 may include steps 1010 , 1020 , and 1030 to be described later.

단계(1010)에서, 사용자에 의해 사용자 ID가 인증 장치(100)에 입력될 수 있다. 인증 장치(100)는 입력된 사용자 ID를 사용하여 등록 정보 DB(450)를 검색함으로써 사용자를 식별할 수 있다.In operation 1010 , a user ID may be input to the authentication apparatus 100 by a user. The authentication apparatus 100 may identify the user by searching the registration information DB 450 using the input user ID.

단계(1020)에서, 사용자에 의해 사용자의 손의 정보가 인증 장치(100)에 입력될 수 있다. 인증 장치(100)는 입력된 손의 정보를 사용하여 등록 정보 DB(450)를 검색함으로써 사용자를 식별할 수 있다.In operation 1020 , information on the user's hand may be input to the authentication apparatus 100 by the user. The authentication apparatus 100 may identify the user by searching the registration information DB 450 using the input hand information.

단계(1010) 및 단계(1020)는 선택적일 수 있다. 예를 들면, 사용자 ID의 입력은 생략될 수도 있다. 또는, 사용자 ID 및 사용자의 손의 정보가 인증 장치(100)에 입력될 수 있다.Steps 1010 and 1020 may be optional. For example, input of a user ID may be omitted. Alternatively, the user ID and the user's hand information may be input to the authentication apparatus 100 .

손의 정보는 손 모양 및/또는 손 형태의 기하학적 정보를 포함할 수 있다.The hand information may include hand shape and/or hand shape geometric information.

단계(1030)에서, 인증 장치(100)는 입력된 사용자 ID 및/또는 입력된 손의 정보를 사용하여 등록 정보 DB(450)에서 입력된 사용자 ID 및 입력된 손의 정보에 대응하는 후보 사용자 정보를 검색할 수 있다. 후보 사용자 정보의 검색에 의해 사용자가 식별될 수 있다. 등록 정보 DB(450)에 등록된 사용자들 중 검색된 사용자가 현재의 인증 장치(100)의 사용자로서 식별될 수 있다.In step 1030 , the authentication apparatus 100 uses the input user ID and/or the input hand information to obtain candidate user information corresponding to the user ID inputted from the registration information DB 450 and the input hand information. can be searched for. A user may be identified by retrieval of candidate user information. A searched user among users registered in the registration information DB 450 may be identified as a current user of the authentication apparatus 100 .

인증 장치(100)는 사용자의 식별을 통해 후술될 단계(920)에서의 사용자의 검색의 범위를 축소할 수 있고, 다음의 단계들(920, 930 및 940)에서 순차적으로 사용자에 대한 인증을 수행할 수 있다.
The authentication apparatus 100 may reduce the scope of the user's search in step 920 to be described later through identification of the user, and sequentially authenticate the user in the following steps 920 , 930 , and 940 . can do.

도 11은 일 예에 따른 제스처 유도/관련 패턴에 대한 손끝 제스처의 인식 방법의 흐름도이다.11 is a flowchart of a method for recognizing a fingertip gesture with respect to a gesture induction/related pattern according to an example.

도 9를 참조하여 전술된 단계(930)는 후술될 단계들(1110, 1120 및 1130)을 포함할 수 있다.Step 930 described above with reference to FIG. 9 may include steps 1110 , 1120 , and 1130 to be described later.

제스처 유도/관련 패턴에 대해 사용자의 손끝 제스처가 입력되면 단계들(1110, 1120 및 1130)이 수행될 수 있다.Steps 1110 , 1120 , and 1130 may be performed when a user's fingertip gesture is input with respect to the gesture induction/related pattern.

단계(1110)에서, 인증 장치(100)는 입력된 손끝 제스처에 대해서 선택적 손끝 터치 위치들 및 손끝 터치 위치들의 터치 순서 등을 감지할 수 있다.In operation 1110 , the authentication apparatus 100 may detect selective fingertip touch locations and a touch sequence of fingertip touch locations with respect to the input fingertip gesture.

단계(1120)에서, 인증 장치(100)는 손끝 터치 위치들의 이동 방향을 감지할 수 있다.In operation 1120 , the authentication apparatus 100 may detect movement directions of fingertip touch locations.

손끝 제스처의 정보는 선택적 손끝 터치 위치들, 손끝 터치 위치들의 터치 순서 및 손끝 터치 위치들의 이동 방향을 포함할 수 있다.The information of the fingertip gesture may include selective fingertip touch locations, a touch order of the fingertip touch locations, and a movement direction of the fingertip touch locations.

단계(1130)에서, 인증 장치(100)는 제스처 유도/관련 패턴에 대한 손끝 제스처를 인식할 수 있다.In operation 1130 , the authentication device 100 may recognize a fingertip gesture for a gesture induction/related pattern.

인증 장치(100)는 입력된 손끝 제스처의 정보 및 검색된 사용자의 손끝 제스처의 정보 간의 유사도 비교 항목 등에 대한 유사도 분석 및 처리를 수행할 수 있다.The authentication apparatus 100 may perform similarity analysis and processing on a similarity comparison item between the inputted fingertip gesture information and the searched user's fingertip gesture information.

인증 장치(100)는 등록 정보 DB(450)에서 등록된 사용자의 손끝 제스처의 정보를 검색할 수 있다. 유사도 비교 항목 등에 대한 분석 및 처리에 의해 입력된 손끝 제스처가 검색된 사용자의 손끝 제스처에 대응하는지 여부가 효율적으로 비교될 수 있다.The authentication apparatus 100 may search for information on a fingertip gesture of a registered user in the registration information DB 450 . Whether an inputted fingertip gesture corresponds to a searched user's fingertip gesture can be efficiently compared by analyzing and processing similarity comparison items and the like.

인증 장치(100)는 유사도 비교 항목에 대한 정합을 통하여 정량적 유사도 비교 결과를 산출할 수 있다.The authentication apparatus 100 may calculate a quantitative similarity comparison result by matching the similarity comparison items.

인증 장치(100)는 입력된 손끝 제스처의 정보 및 등록된 사용자의 손끝 제스처의 정보 간의 유사도 비교를 통해 입력된 손끝 제스처가 제스처 유도/관련 패턴에 대해 성공한 제스처인지 또는 실패한 제스처인지 여부를 판단할 수 있다.The authentication device 100 can determine whether the input fingertip gesture is a successful gesture or a failed gesture with respect to the gesture induction/related pattern through a similarity comparison between the inputted fingertip gesture information and the registered user's fingertip gesture information. have.

예를 들면, 인증 장치(100)는 입력된 손끝 제스처의 정보 및 등록된 사용자의 손끝 제스처의 정보에 대하여 산출된 정량적 유사도 비교 결과가 기정의된 기준 값의 이상인 경우 입력된 손끝 제스처가 성공한 것으로 판단할 수 있다. 인증 장치(100)는 산출된 정량적 유사도 비교 결과가 기정의된 기준 값보다 더 작은 경우 입력된 손끝 제스처가 실패한 것으로 판단할 수 있다.
For example, the authentication device 100 determines that the input fingertip gesture is successful when the quantitative similarity comparison result calculated with respect to the input fingertip gesture information and the registered user fingertip gesture information is greater than or equal to a predefined reference value. can do. When the calculated quantitative similarity comparison result is smaller than a predefined reference value, the authentication apparatus 100 may determine that the input fingertip gesture has failed.

도 12는 일 예에 따른 페이크 패턴에 대한 손끝 제스처의 인식 방법의 흐름도이다.12 is a flowchart of a method of recognizing a fingertip gesture with respect to a fake pattern according to an example.

도 9를 참조하여 전술된 단계(930)는 후술될 단계들(1210, 1220 및 1230)을 포함할 수 있다.Step 930 described above with reference to FIG. 9 may include steps 1210 , 1220 , and 1230 to be described later.

페이크 패턴에 대해 사용자의 손끝 제스처가 입력되면 단계들(1210, 1220 및 1230)이 수행될 수 있다.When a user's fingertip gesture is input with respect to the fake pattern, steps 1210 , 1220 , and 1230 may be performed.

단계(1210)에서, 인증 장치(100)는 입력된 손끝 제스처에 대해서 선택적 손끝 터치 위치들 및 손끝 터치 위치들의 터치 순서 등을 감지할 수 있다.In operation 1210 , the authentication apparatus 100 may detect selective fingertip touch positions and a touch order of the fingertip touch positions with respect to the input fingertip gesture.

단계(1220)에서, 인증 장치(100)는 손끝 터치 위치들의 이동 방향을 감지할 수 있다.In operation 1220 , the authentication apparatus 100 may detect movement directions of fingertip touch locations.

단계(1230)에서, 인증 장치(100)는 페이크 패턴에 대한 손끝 제스처를 인식할 수 있다.In operation 1230 , the authentication apparatus 100 may recognize a fingertip gesture with respect to the fake pattern.

인증 장치(100)는 입력된 손끝 제스처의 정보 및 페이크 패턴에 대한 기정의된 손끝 제스처의 정보 간의 유사도 비교 항목 등에 대한 유사도 분석 및 처리를 수행할 수 있다. 인증 장치(100)는 입력된 손끝 제스처가 페이크 패턴에 대한 기정의된 손끝 제스처에 대응하는지 여부를 판단할 수 있다.The authentication apparatus 100 may perform similarity analysis and processing on a similarity comparison item between inputted fingertip gesture information and predefined fingertip gesture information with respect to a fake pattern. The authentication apparatus 100 may determine whether the input fingertip gesture corresponds to a predefined fingertip gesture with respect to a fake pattern.

유사도 비교 항목 등에 대한 분석 및 처리에 의해 입력된 손끝 제스처가 페이크 패턴에 대한 기정의된 손끝 제스처에 대응하는지 여부가 효율적으로 비교될 수 있다.Whether an input fingertip gesture corresponds to a predefined fingertip gesture with respect to a fake pattern can be efficiently compared by analyzing and processing the similarity comparison item or the like.

예를 들면, 인증 장치(100)는 산출된 정량적 유사도 비교 결과가 기정의된 기준 값의 이상인 경우 입력된 손끝 제스처가 성공한 것으로 판단할 수 있다. 인증 장치(100)는 산출된 정량적 유사도 비교 결과가 기정의된 기준 값보다 더 작은 경우 입력된 손끝 제스처가 실패한 것으로 판단할 수 있다.
For example, when the calculated quantitative similarity comparison result is greater than or equal to a predefined reference value, the authentication apparatus 100 may determine that the input fingertip gesture is successful. When the calculated quantitative similarity comparison result is smaller than a predefined reference value, the authentication apparatus 100 may determine that the input fingertip gesture has failed.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The device described above may be implemented as a hardware component, a software component, and/or a combination of the hardware component and the software component. For example, devices and components described in the embodiments may include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable array (FPA), It may be implemented using one or more general purpose or special purpose computers, such as a programmable logic unit (PLU), microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. A processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For convenience of understanding, although one processing device is sometimes described as being used, one of ordinary skill in the art will recognize that the processing device includes a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that can include For example, the processing device may include a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as parallel processors.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.Software may comprise a computer program, code, instructions, or a combination of one or more thereof, which configures a processing device to operate as desired or is independently or collectively processed You can command the device. The software and/or data may be any kind of machine, component, physical device, virtual equipment, computer storage medium or apparatus, to be interpreted by or to provide instructions or data to the processing device. , or may be permanently or temporarily embody in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored in one or more computer-readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CDROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기광 매체(magnetooptical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and available to those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CDROMs and DVDs, and magneto-optical media such as floppy disks. (magnetooptical media), and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with reference to the limited embodiments and drawings, various modifications and variations are possible from the above description by those skilled in the art. For example, the described techniques are performed in an order different from the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result.

100: 인증 장치
110: 센서
120: 인터페이스
130: 디스플레이
140: 프로세서100: authentication device
110: sensor
120: interface
130: display
140: processor

Claims

performed by the authentication device;
identifying a user;
displaying on a touch screen display a pattern generated based on the identified user's hand shape or hand size geometric information;
recognizing a fingertip gesture through interaction with the user with respect to the pattern through the touch screen display; and
performing authentication for the user using the recognized fingertip gesture
authentication method including

According to claim 1,
In the identifying step, candidate user information corresponding to the hand information is retrieved using the input hand information,
The hand information is an authentication method comprising a hand shape or geometric information of the hand shape.

According to claim 1,
The pattern is a gesture induction/related pattern,
The gesture induction/related pattern is a pattern for acquiring a fingertip gesture registered by the user.

4. The method of claim 3,
Recognizing the fingertip gesture comprises:
detecting fingertip touch positions of the input fingertip gesture;
detecting a movement direction of the fingertip touch positions; and
determining whether the inputted fingertip gesture is a successful gesture with respect to the gesture induction/related pattern through a similarity comparison between the input fingertip gesture information and the registered fingertip gesture information;
including,
The information of the input fingertip gesture includes the fingertip touch locations and the movement direction.

5. The method of claim 4,
An authentication method in which the input fingertip gesture is determined to be successful when a quantitative similarity comparison result calculated with respect to the input fingertip gesture information and the registered fingertip gesture information is greater than or equal to a predefined reference value.

5. The method of claim 4,
The information of the input fingertip gesture further includes a touch order of the fingertip touch positions.

5. The method of claim 4,
an object is displayed in the background along with the gesture inducement/related pattern,
the entity represents one or more points,
Each point of the one or more points is an area that can be distinguished and identified within the entity.

8. The method of claim 7,
The one or more points are generated based on geometric information of the user's hand shape or hand size.

9. The method of claim 8,
The one or more points correspond to positions of the tips of the user's fingers according to geometrical information of the user's hand shape or hand size.

According to claim 1,
The pattern is hidden at the moment the fingertip gesture is touched, or is hidden when a predetermined time elapses after the fingertip gesture is touched.

According to claim 1,
The pattern is a fake pattern,
The fake pattern is an authentication method that is a pattern for obtaining a predefined fingertip gesture.

performed by the authentication device;
registering information for user identification; and
Registering the user's fingertip gestures using the touchscreen display
including,
The information for identification of the user is a method of registering authentication information including geometric information of the user's hand shape or hand size.

13. The method of claim 12,
selecting a type of registration information for the fingertip gesture
further comprising,
The registration information is background-based registration information or non-background fingertip point-based registration information of a method of registering authentication information.

13. The method of claim 12,
The step of registering the fingertip gesture comprises:
registering a fingertip touch position of the background displayed on the touchscreen display and the fingertip gesture through the touchscreen display; and
Registering the movement direction of the fingertip touch locations through the touch screen display
A method of registering authentication information that includes.

15. The method of claim 14,
In the step of registering the fingertip touch location, when one or more points of the object of the background are displayed on the touch screen display, one or more fingertip touch locations among the one or more points are selected and registered.

16. The method of claim 15,
The size or shape of the object is generated or adjusted based on the user's hand shape or geometric information of the hand size.

15. The method of claim 14,
In the step of registering the fingertip touch position, a method of registering authentication information in which a touch order of one or more fingertip touch positions of the fingertip gesture is registered.

13. The method of claim 12,
The step of registering the fingertip gesture comprises:
registering a fingertip touch position of the fingertip gesture; and
Registering the movement directions of the fingertip touch locations
including,
In the step of registering the fingertip touch location, one or more points are displayed, and one or more fingertip touch locations are selected and registered among the one or more points.

19. The method of claim 18,
The method of registering authentication information, wherein the positions of the one or more points are generated or adjusted by geometric information of a shape or size of the user's hand.

a touch screen display for outputting a pattern generated based on geometric information of a user's hand shape or hand size; and
Processor for recognizing a fingertip gesture through interaction with the user with respect to the pattern through the touch screen display, and authenticating the user using the recognized fingertip gesture
An authentication device comprising a.