KR20220048724A - Apparatus and method for verifying liveness of facial recognition biometric information - Google Patents
Apparatus and method for verifying liveness of facial recognition biometric information Download PDFInfo
- Publication number
- KR20220048724A KR20220048724A KR1020200131941A KR20200131941A KR20220048724A KR 20220048724 A KR20220048724 A KR 20220048724A KR 1020200131941 A KR1020200131941 A KR 1020200131941A KR 20200131941 A KR20200131941 A KR 20200131941A KR 20220048724 A KR20220048724 A KR 20220048724A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- bio
- identifier
- face
- information
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/45—Structures or tools for the administration of authentication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Collating Specific Patterns (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
Description
본 발명은 안면인식 바이오 정보 기반의 인증 기술에 관한 것으로, 보다 상세하게는 안면인식 바이오 정보 기반의 인증을 활용한 인증서 발급, 전자서명 생성 및 전자서명 검증에 활용되는 바이오 정보의 라이브니스 검증 기술에 관한 것이다.The present invention relates to a facial recognition bio-information-based authentication technology, and more particularly, to the bio-information liveness verification technology used for certificate issuance, electronic signature generation, and electronic signature verification using facial recognition bio-information-based authentication. it's about
비대면 운영 환경에서 사용자 인증, 인증서 발급 및 전자서명 생성/검증 등을 실시해야 하는 가운데, 특정 사용자에 대한 인증 및 해당 사용자만이 허가 받은 전자서명 수단을 사용할 수 있도록 하기 위해 타인 무단 사용 방지를 위한 사용자 인증, 전자서명 수단 발급 및 바이오 정보 라이브니스 검증 기술 개발이 요구되고 있다.In the non-face-to-face operating environment, while user authentication, certificate issuance, and creation/verification of digital signatures must be performed, in order to authenticate a specific user and allow only that user to use the authorized digital signature method, There is a demand for user authentication, issuance of digital signature means, and development of bio-information liveness verification technology.
특히, 금융거래, 전자상거래, 신용카드 발급 및 이용, 법적 소송, 국가행정처리 및 온라인 환경에서 서비스 제공 등에 관한 근거 법령에 따라 인증 정보 제공 주체의 변화 필요성, 인증 정보 익명성 보장 필요성 및 관련 법제도 상으로 신원 확인의 필요성이 요구되고 있으며, 관련 법제도에 의거하여 본인 확인을 위해 새로운 사용자 인증 및 전자서명 수단 도입을 추진하고 있는 실정이다.In particular, in accordance with the relevant laws and regulations on financial transactions, e-commerce, credit card issuance and use, legal litigation, national administrative processing, and provision of services in an online environment, the need to change the subject of authentication information, the need to ensure anonymity of authentication information, and related legal systems As a result, the need for identification is required, and the introduction of new user authentication and electronic signature methods is being promoted for identification in accordance with the relevant legal system.
한편, 한국공개특허 제 10-2018-0061168 호“무선 바이오메트릭 인증 시스템 및 방법”는 무선 통신 기술을 통해 개인을 안전하게 인증하기 위해 바이오메트릭 템플릿을 이용하는 무선 바이오매트릭 인증 시스템 및 방법에 관하여 개시하고 있다.Meanwhile, Korean Patent Laid-Open No. 10-2018-0061168 “Wireless biometric authentication system and method” discloses a wireless biometric authentication system and method using a biometric template to securely authenticate an individual through wireless communication technology. .
본 발명은 타인이 전자서명 수단을 무단으로 사용하는 것을 방지할 수 있도록 안면인식 바이오 정보 기반의 비대면 사용자 인증, 전자서명의 생성 및 검증을 제공하는 것을 목적으로 한다. An object of the present invention is to provide non-face-to-face user authentication based on facial recognition bio-information, and creation and verification of electronic signatures so that others can prevent unauthorized use of electronic signature means.
또한, 본 발명은 인증, 인증서 발급 및 전자서명 생성/검증 등에 사용하는 안면인식 바이오 정보가 실제가 아닌 허위로 제작된 안면인식 바이오 정보(예, 사진, 동영상 등)를 사용할 수 없도록 지원하는 바이오 정보 라이브니스 검증을 통해 바이오 정보의 인증 정확도를 향상시키고, 특정 사용자가 소유하고 있는 전자서명 수단의 타인 무단 사용 방지를 지원하는 것을 목적으로 한다.In addition, the present invention provides bio-information supporting that facial recognition bio-information used for authentication, certificate issuance, and creation/verification of electronic signatures is not real but fake face recognition bio-information (eg, photo, video, etc.) cannot be used. The purpose of this is to improve the authentication accuracy of bio-information through liveness verification and to support the prevention of unauthorized use of electronic signature means owned by a specific user.
상기한 목적을 달성하기 위한 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 장치는 사용자 단말 장치로부터 요청 받은 안면인식 바이오 정보 생성 요청에 따라 사용자의 안면과 상기 사용자의 손 동작 및 손 위치손 동작 및 손 위치의 인식 결과에 기반하여 안면인식 바이오 정보를 생성하는 바이오 정보 생성부; 상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자를 생성하는 바이오 식별자 생성부 및 상기 사용자 단말 장치로부터 요청 받은 바이오 식별자 인증 요청에 따라 상기 바이오 식별자를 이용하여 상기 사용자 단말 장치로부터 수신한 인증 요청 바이오 식별자를 검증하는 바이오 식별자 검증부를 포함한다.The face recognition bio information liveness verification apparatus according to an embodiment of the present invention for achieving the above object is a user's face and the user's hand motion and hand position in response to a face recognition bio information generation request received from a user terminal device a bio-information generating unit that generates facial recognition bio-information based on a result of recognition of a hand motion and a hand position; A bio-identifier generating unit that generates a bio-identifier using the facial recognition bio-information and the user's personal information, and the bio-identifier received from the user terminal device using the bio-identifier in response to a bio-identifier authentication request requested from the user terminal device and a bio-identifier verification unit that verifies the authentication-requested bio-identifier.
이 때, 상기 바이오 정보 생성부는 상기 사용자 단말 장치에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 수신하고, 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 상기 사용자 단말 장치에게 송신할 수 있다.In this case, the bio-information generating unit receives the result of recognizing the user's face photographed by the camera mounted on the user terminal device, and on the interface in which the user's face is recognized based on the result of recognizing the face Coordinate information for inducing an action of a user may be transmitted to the user terminal device.
이 때, 상기 좌표 정보는 상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함할 수 있다.In this case, the coordinate information may include coordinates and guidelines for positioning the user's face and hand on the screen on which the user's face is recognized.
이 때, 상기 가이드 라인들은 상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함할 수 있다.In this case, the guide lines may include a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
이 때, 상기 제1 가이드 라인은 기설정된 얼굴 각도에 상응하도록 결정될 수 있다.In this case, the first guide line may be determined to correspond to a preset face angle.
이 때, 상기 제2 가이드 라인은 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may be determined to correspond to any one of the palm showing operation and the back of the hand showing operation.
이 때, 상기 제2 가이드 라인은 왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may include at least one of a left hand guide line and a right hand guide line, and each of the left hand guide line and the right hand guide line may be determined to correspond to any one of the palm showing operation and the back hand showing operation. there is.
이 때, 상기 바이오 식별자 생성부는 상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고, 상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성할 수 있다.In this case, the bio-identifier generator generates a user identifier from a hash value of the components included in the user's personal information, extracts feature values from the facial recognition bio-information, and generates a biometric identifier from the feature values. can create
이 때, 상기 바이오 식별자 생성부는 상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성할 수 있다.In this case, the bio-identifier generator may generate the bio-identifier by combining the user identifier and the bio-metric identifier.
이 때, 상기 바이오 식별자 생성부는 상기 특징값들을 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성할 수 있다.In this case, the bio-identifier generator may generate a hash domain using a hashing technique preset for the feature values, and may generate the bio-metric identifier based on the hash domain.
또한, 상기한 목적을 달성하기 위한 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법은 안면인식 바이오 정보 라이브니스 검증 장치의 안면인식 바이오 정보 라이브니스 검증 방법에 있어서, 사용자 단말 장치로부터 요청 받은 바이오 정보 생성 요청에 따라 사용자의 안면과 상기 사용자의 손 동작 및 손 위치의 인식 결과에 기반하여 안면인식 바이오 정보를 생성하는 단계; 상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자를 생성하는 단계 및 상기 사용자 단말 장치로부터 요청 받은 바이오 식별자 인증 요청에 따라 상기 바이오 식별자를 이용하여 상기 사용자 단말 장치로부터 수신한 인증 요청 바이오 식별자를 검증하는 단계를 포함할 수 있다.In addition, the face recognition bio information liveness verification method according to an embodiment of the present invention for achieving the above object is the face recognition bio information liveness verification method of the face recognition bio information liveness verification apparatus, from the user terminal device generating facial recognition bioinformation based on a result of recognizing a user's face and a user's hand motion and hand position in response to the requested bioinformation generation request; generating a bio-identifier by using the facial recognition bio-information and the user's personal information; It may include verifying the identifier.
이 때, 상기 안면인식 바이오 정보를 생성하는 단계는 상기 사용자 단말 장치에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 수신하고, 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 상기 사용자 단말 장치에게 송신할 수 있다.In this case, the generating of the facial recognition bio-information includes receiving a result of recognizing the user's face photographed by a camera mounted on the user terminal device, and detecting the user's face based on the result of recognizing the face Coordinate information for inducing the user's action on the recognized interface may be transmitted to the user terminal device.
이 때, 상기 좌표 정보는 상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함할 수 있다.In this case, the coordinate information may include coordinates and guidelines for positioning the user's face and hand on the screen on which the user's face is recognized.
이 때, 상기 가이드 라인들은 상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함할 수 있다.In this case, the guide lines may include a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
이 때, 상기 제1 가이드 라인은 기설정된 얼굴 각도에 상응하도록 결정될 수 있다.In this case, the first guide line may be determined to correspond to a preset face angle.
이 때, 상기 제2 가이드 라인은 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may be determined to correspond to any one of the palm showing operation and the back of the hand showing operation.
이 때, 상기 제2 가이드 라인은 왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may include at least one of a left hand guide line and a right hand guide line, and each of the left hand guide line and the right hand guide line may be determined to correspond to any one of the palm showing operation and the back hand showing operation. there is.
이 때, 상기 바이오 식별자를 생성하는 단계는 상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고, 상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성할 수 있다.In this case, the generating of the bio-identifier may include generating a user identifier from a value obtained by hashing components included in the user's personal information, extracting feature values from the facial recognition bio-information, and biometric values from the feature values. You can create a metric identifier.
이 때, 상기 바이오 식별자를 생성하는 단계는 상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성할 수 있다.In this case, the generating of the bio-identifier may generate the bio-identifier by combining the user identifier and the biometric identifier.
이 때, 상기 바이오 식별자를 생성하는 단계는 상기 특징값들을 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성할 수 있다.In this case, in the generating of the bio-identifier, a hash domain may be generated using a hashing technique preset for the feature values, and the bio-metric identifier may be generated based on the hash domain.
본 발명은 전자서명 수단을 무단으로 사용하는 것을 방지할 수 있도록 안면인식 바이오 정보 기반의 비대면 사용자 인증, 전자서명의 생성, 발급 및 검증을 제공할 수 있다.The present invention can provide facial recognition bio-information-based non-face-to-face user authentication, creation, issuance and verification of electronic signatures to prevent unauthorized use of electronic signature means.
또한, 본 발명은 인증, 인증서 발급 및 전자서명 생성/검증 등에 사용하는 안면인식 바이오 정보가 실제가 아닌 허위로 제작된 안면인식 바이오 정보(예, 사진, 동영상 등)를 사용할 수 없도록 지원하는 바이오 정보 라이브니스 검증을 통해 바이오 정보의 인증 정확도를 향상시키고, 특정 사용자가 소유하고 있는 전자서명 수단의 타인 무단 사용 방지를 지원할 수 있다.In addition, the present invention provides bio-information supporting that facial recognition bio-information used for authentication, certificate issuance, and creation/verification of electronic signatures is not real but fake face recognition bio-information (eg, photo, video, etc.) cannot be used. Through liveness verification, it is possible to improve the authentication accuracy of bio-information and to support the prevention of unauthorized use of electronic signature means owned by a specific user.
도 1은 대면을 통해 사용자를 확인하고 전자서명 인증서 발급을 실시하는 일실시예에 따른 사용자 인증 시스템을 나타낸 도면이다.
도 2는 본 발명의 일실시예에 따른 비대면을 통해 사용자를 확인하고 전자서명 인증서 발급을 실시하는 안면인식 바이오 정보 인증 시스템을 나타낸 블록도이다.
도 3은 본 발명의 일실시예에 따른 전자서명용 개인키를 사용하고 전자서명 생성 및 검증을 실시하는 가운데 안면인식 바이오 정보 라이브니스 검증이 적용되는 과정을 나타낸 도면이다.
도 4는 본 발명의 일실시예에 따른 사용자 단말 장치를 나타낸 블록도이다.
도 5는 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 장치를 나타낸 블록도이다.
도 6은 도 5에 도시된 본인 확인부의 일 예를 세부적으로 나타낸 블록도이다.
도 7은 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법을 나타낸 동작흐름도이다.
도 8은 도 7에 도시된 인증서 발급 단계의 일 예를 세부적으로 나타낸 도면이다.
도 9는 도 7에 도시된 본인 확인 단계의 일 예를 세부적으로 나타낸 도면이다.
도 10 및 도 11은 본 발명의 일실시예에 따른 안면인식 바이오 정보 생성 과정을 나타낸 도면이다.
도 12는 본 발명의 일실시예에 따른 지문을 이용한 바이오 정보 인식 과정을 나타낸 도면이다.
도 13은 본 발명의 일실시예에 따른 정맥을 이용한 바이오 정보 인식 과정을 나타낸 도면이다.
도 14는 본 발명의 일실시예에 따른 바이오 식별자 생성 과정을 나타낸 도면이다.
도 15는 본 발명의 일실시예에 따른 바이오 메트릭 식별자에서 해시 도메인 추출 과정을 나타낸 도면이다.
도 16은 도 7에 도시된 바이오 정보 인증 단계의 일 예를 세부적으로 나타낸 도면이다.
도 17은 도 7에 도시된 전자서명 생성 단계의 일 예를 세부적으로 나타낸 도면이다.
도 18은 도 7에 도시된 전자서명 검증 단계의 일 예를 세부적으로 나타낸 도면이다.
도 19는 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.1 is a diagram illustrating a user authentication system according to an embodiment of confirming a user through face-to-face and issuing a digital signature certificate.
2 is a block diagram illustrating a facial recognition bioinformation authentication system for confirming a user through non-face-to-face and issuing a digital signature certificate according to an embodiment of the present invention.
3 is a diagram illustrating a process in which facial recognition bioinformation liveness verification is applied while digital signature generation and verification are performed using a private key for digital signature according to an embodiment of the present invention.
4 is a block diagram illustrating a user terminal device according to an embodiment of the present invention.
5 is a block diagram illustrating an apparatus for verifying facial recognition bio-information liveness according to an embodiment of the present invention.
6 is a detailed block diagram illustrating an example of the identity verification unit shown in FIG. 5 .
7 is an operation flowchart illustrating a method for verifying liveness of facial recognition bio information according to an embodiment of the present invention.
FIG. 8 is a diagram illustrating in detail an example of the step of issuing a certificate shown in FIG. 7 .
9 is a diagram illustrating in detail an example of an identity verification step shown in FIG. 7 .
10 and 11 are diagrams illustrating a face recognition bio-information generation process according to an embodiment of the present invention.
12 is a diagram illustrating a bioinformation recognition process using a fingerprint according to an embodiment of the present invention.
13 is a diagram illustrating a bioinformation recognition process using a vein according to an embodiment of the present invention.
14 is a diagram illustrating a bio-identifier generation process according to an embodiment of the present invention.
15 is a diagram illustrating a process of extracting a hash domain from a biometric identifier according to an embodiment of the present invention.
FIG. 16 is a view showing in detail an example of the bioinformation authentication step shown in FIG. 7 .
FIG. 17 is a view showing in detail an example of the digital signature generation step shown in FIG. 7 .
18 is a view showing in detail an example of the digital signature verification step shown in FIG. 7 .
19 is a diagram illustrating a computer system according to an embodiment of the present invention.
본 발명을 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다. 여기서, 반복되는 설명, 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능, 및 구성에 대한 상세한 설명은 생략한다. 본 발명의 실시형태는 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.The present invention will be described in detail with reference to the accompanying drawings as follows. Here, repeated descriptions, well-known functions that may unnecessarily obscure the gist of the present invention, and detailed descriptions of configurations will be omitted. The embodiments of the present invention are provided in order to more completely explain the present invention to those of ordinary skill in the art. Accordingly, the shapes and sizes of elements in the drawings may be exaggerated for clearer description.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part "includes" a certain element, it means that other elements may be further included, rather than excluding other elements, unless otherwise stated.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.
도 1은 대면을 통해 사용자를 확인하고 전자서명 인증서 발급을 실시하는 일실시예에 따른 사용자 인증 시스템을 나타낸 도면이다.1 is a diagram illustrating a user authentication system according to an embodiment of confirming a user through face-to-face and issuing a digital signature certificate.
도 1을 참조하면, 대면을 통해 사용자를 확인하고 전자서명 인증서 발급을 실시하는 일실시예에 따른 사용자 인증 시스템을 나타낸 것을 알 수 있다. 사용자 인증 시스템은 먼저 사용자가 등록 기관에 방문하여 사용자 정보를 제공하면(1), 등록기관이 인증기관에 사용자 정보를 등록하여(2) 사용자 신원(본인 여부)를 확인하고, 인증코드를 사용자에게 전달할 수 있다(3).Referring to FIG. 1 , it can be seen that a user authentication system according to an embodiment is shown for confirming a user through face-to-face and issuing a digital signature certificate. In the user authentication system, when the user first visits the registration authority and provides user information (1), the registration authority registers the user information with the certification authority (2) to confirm the user identity (whether it is the person or not), and provides an authorization code to the user. can be transmitted (3).
사용자는 컴퓨팅 장치 또는 단말 장치를 통해 제공받은 인증코드를 이용하여 키쌍을 생성하고(4), 인증 기관에 인증서 발급 신청 및 인증 코드를 제출할 수 있다(5).The user may generate a key pair using the authentication code provided through the computing device or the terminal device (4), and submit an application for issuance of a certificate and the authentication code to the certification authority (5).
이 때, 인증 기관은 인증 코드에 기반하여 인증서를 사용자에게 발급할 수 있다(6).In this case, the certification authority may issue a certificate to the user based on the authentication code (6).
도 2는 본 발명의 일실시예에 따른 비대면을 통해 사용자를 확인하고 전자서명 인증서 발급을 실시하는 안면인식 바이오 정보 인증 시스템을 나타낸 블록도이다. 도 3은 본 발명의 일실시예에 따른 전자서명용 개인키를 사용하고 전자서명 생성 및 검증을 실시하는 가운데 안면인식 바이오 정보 라이브니스 검증이 적용되는 과정을 나타낸 도면이다.2 is a block diagram illustrating a facial recognition bioinformation authentication system for confirming a user through non-face-to-face and issuing a digital signature certificate according to an embodiment of the present invention. 3 is a diagram illustrating a process in which facial recognition bio-information liveness verification is applied using a private key for digital signature and performing digital signature generation and verification according to an embodiment of the present invention.
도 2를 참조하면, 본 발명의 일실시예에 따른 안면인식 바이오 정보 인증 시스템은 사용자 단말 장치(10), 인증 서버(20) 및 안면인식 바이오 정보 라이브니스 검증 장치(100)를 포함할 수 있다.Referring to FIG. 2 , the face recognition bio information authentication system according to an embodiment of the present invention may include a
사용자 단말 장치(10)는 바이오 정보를 이용하여 인증 서버(20)로부터 인증서를 발급받을 수 있다.The
이 때, 사용자 단말 장치(10)는 바이오 정보를 이용하여 안면인식 바이오 정보 라이브니스 검증 장치(100)에게 본인 확인, 전자서명 생성 및 전자서명 검증을 요청할 수 있다.In this case, the
안면인식 바이오 정보 라이브니스 검증 장치(100)는 사용자 단말 장치(10)의 요청에 따라 사용자 본인 확인을 수행하고, 전자서명을 생성하여 안면인식 바이오 정보에 기반한 전자 서명 생성 및 검증을 수행할 수 있다.The facial recognition bio-information
도 3을 참조하면, 사용자 단말 장치(10)는 개인키를 이용한 인증서의 전자서명을 수행하고, 전자서명에 대한 검증을 안면인식 바이오 정보 라이브니스 검증 장치(100)에게 요청할 수 있다.Referring to FIG. 3 , the
이 때, 안면인식 바이오 정보 라이브니스 검증 장치(100)는 안면인식 바이오 정보를 이용하여 사용자 단말 장치(10)의 본인 확인을 수행하고, 이로부터 전자서명이 본인에 의해 수행된 것인지 검증할 수 있다.At this time, the facial recognition bio-information
도 4는 본 발명의 일실시예에 따른 사용자 단말 장치를 나타낸 블록도이다.4 is a block diagram illustrating a user terminal device according to an embodiment of the present invention.
도 4를 참조하면, 본 발명의 일실시예에 따른 사용자 단말 장치(10)는 단말 바이오 정보 생성부(11) 및 단말 바이오 식별자 생성부(12)를 포함한다.Referring to FIG. 4 , the
단말 바이오 정보 생성부(11)는 카메라를 이용하여 사용자를 촬영하고 사용자의 안면과 상기 사용자의 손 동작 및 손 위치의 인식 결과에 기반하여 안면인식 바이오 정보를 생성할 수 있다.The terminal
이 때, 단말 바이오 정보 생성부(11)는 상기 사용자 단말 장치에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 안면인식 바이오 정보 라이브니스 검증 장치(100)에게 전송할 수 있다.In this case, the terminal
이 때, 단말 바이오 정보 생성부(11)는 안면인식 바이오 정보 라이브니스 검증 장치(100)로부터 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 수신할 수 있다.At this time, the terminal
이 때, 상기 좌표 정보는 상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함할 수 있다.In this case, the coordinate information may include coordinates and guidelines for positioning the user's face and hand on the screen on which the user's face is recognized.
이 때, 상기 가이드 라인들은 상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함할 수 있다.In this case, the guide lines may include a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
이 때, 상기 제1 가이드 라인은 기설정된 얼굴 각도에 상응하도록 결정될 수 있다.In this case, the first guide line may be determined to correspond to a preset face angle.
이 때, 제1 가이드 라인으로 사용자의 얼굴이 위, 아래, 좌, 우를 바라보는 방향을 향하도록 안면 가이드라인이 생성될 수도 있고, 정면을 응시하되 좌, 우로 고개를 회전시킨 가이드라인이 생성될 수도 있으며 얼굴 각도를 취할 수 있는 기설정된 한도(15도, 30도, 45도 및 90도 등) 내에서 다양한 얼굴 각도의 가이드라인이 제공될 수도 있다.At this time, as the first guideline, a facial guideline may be generated such that the user's face faces up, down, left, and right as the first guideline, and a guideline in which the user's face is turned to the left and right while staring at the front is generated In addition, guidelines for various facial angles may be provided within preset limits (15 degrees, 30 degrees, 45 degrees, and 90 degrees, etc.) that can take a facial angle.
이 때, 상기 제2 가이드 라인은 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may be determined to correspond to any one of the palm showing operation and the back of the hand showing operation.
이 때, 상기 제2 가이드 라인은 왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may include at least one of a left hand guide line and a right hand guide line, and each of the left hand guide line and the right hand guide line may be determined to correspond to any one of the palm showing operation and the back hand showing operation. there is.
예를 들어, 제2 가이드 라인으로 화면 상에 왼손 가이드라인 및 오른손 가이드 라인 중 적어도 하나가 기설정된 좌표에 표시될 수 있고, 기설정된 좌표에서는 손바닥을 보이거나 손등을 보이는 등의 동작을 유도하는 형상이나 메시지가 출력되면서 제2 가이드 라인이 표시될 수 있다.For example, as the second guide line, at least one of a left hand guideline and a right hand guide line may be displayed at preset coordinates on the screen, and a shape inducing motion such as showing the palm or the back of the hand at the preset coordinates However, as the message is output, the second guide line may be displayed.
이 때, 단말 바이오 정보 생성부(11)는 안면인식 바이오 정보를 이용하여 바이오 인증 템플릿을 생성하고, 바이오 암호키를 이용하여 바이오 인증 템플릿을 암호화할 수 있다.In this case, the terminal
이 때, 단말 바이오 정보 생성부(11)는 암호화된 바이오 인증 템플릿을 안면인식 바이오 정보 라이브니스 검증 장치(100)에게 전송하여 바이오 인증을 요청할 수 있다.In this case, the terminal
단말 바이오 식별자 생성부(12)는 상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자를 생성할 수 있다.The terminal
이 때, 단말 바이오 식별자 생성부(12)는 상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고, 상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성할 수 있다.At this time, the terminal
이 때, 안면인식 바이오 정보로부터 추출되는 특징값들은 안면인식, 지문인식 및 정맥인식 등 다양한 생체 정보로부터 추출된 특징값들을 포함할 수 있다.In this case, the feature values extracted from the facial recognition bio-information may include feature values extracted from various bio-information such as facial recognition, fingerprint recognition, and vein recognition.
사용자의 개인 정보는 성명, 성별, 생년월일, 주민등록번호, 전화번호, 주소 등 다양한 개인정보를 포함할 수 있다.The user's personal information may include various personal information such as name, gender, date of birth, resident registration number, phone number, and address.
이 때, 단말 바이오 식별자 생성부(12)는 상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성할 수 있다.In this case, the terminal
이 때, 단말 바이오 식별자 생성부(12)는 상기 특징값들을 INDEX-OF-MAX 등과 같은 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성할 수 있다.In this case, the terminal
이 때, 특징값들로부터 해시 도메인은 생성하는 해싱 기법은 다양한 해싱 기법들이 사용될 수 있다.In this case, various hashing techniques may be used as a hashing technique for generating a hash domain from the feature values.
이 때, 단말 바이오 식별자 생성부(12)는 생성된 바이오 식별자, 공개키 및 개인키 소유증명값 등을 이용하여 인증서버(20)에 인증서 발급을 요청할 수 있다.In this case, the terminal
도 5는 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 장치를 나타낸 블록도이다. 도 6은 도 5에 도시된 본인 확인부의 일 예를 세부적으로 나타낸 블록도이다.5 is a block diagram illustrating an apparatus for verifying facial recognition bio-information liveness according to an embodiment of the present invention. 6 is a detailed block diagram illustrating an example of the identity verification unit shown in FIG. 5 .
도 5를 참조하면, 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 장치(100)는 본인 확인부(110), 바이오 정보 인증부(120), 전자서명 생성부(130) 및 전자서명 검증부(140)를 포함하는 바이오 정보 인증 장치에 상응할 수 있다.Referring to FIG. 5 , the facial recognition bio-information
본인 확인부(110)는 사용자 단말 장치(10)로부터 수신한 안면인식 바이오 정보를 이용하여 상기 사용자 단말 장치(10)의 본인 확인을 수행할 수 있다.The
바이오 정보 인증부(120)는 상기 안면인식 바이오 정보로부터 생성된 바이오 템플릿과 사용자 단말 장치(10)로부터 수신한 바이오 템플릿을 비교하여 상기 안면인식 바이오 정보를 인증할 수 있다.The
전자서명 생성부(130)는 상기 본인 확인을 수행한 결과와 상기 안면인식 바이오 정보를 인증한 결과에 기반하여 전자서명을 생성할 수 있다.The electronic
전자서명 검증부(130)는 사용자의 전자서명된 문서(전자서명문)의 검증 요청에 따라 상기 전자서명문의 전자서명 값과 상기 전자서명문에 포함된 인증서의 유효성을 검증하여 상기 전자서명문을 검증할 수 있다.The digital
도 6을 참조하면, 본인 확인부(110)는 바이오 정보 생성부(111), 바이오 식별자 생성부(112) 및 바이오 식별자 검증부(113)를 포함한다.Referring to FIG. 6 , the
이 때, 안면인식 바이오 정보 라이브니스 검증 장치(100)는 바이오 정보 생성부(111), 바이오 식별자 생성부(112) 및 바이오 식별자 검증부(113)를 포함하여 안면인식 바이오 정보와 안면인식 기반 바이오 식별자를 생성 및 검증하는 컴퓨팅 장치에 상응할 수도 있고, 상기 바이오 정보 인증 장치에 포함될 수도 있고, 상기 바이오 정보 인증 장치와 연결되어 안면인식 바이오 정보와 안면인식 기반 바이오 식별자를 생성 및 검증하는 기능을 제공할 수도 있다.At this time, the facial recognition bioinformation
바이오 정보 생성부(111)는 사용자 단말 장치(10)로부터 요청 받은 바이오 정보 생성 요청에 따라 사용자의 안면과 상기 사용자의 손 동작 및 손 위치의 인식 결과에 기반하여 안면인식 바이오 정보를 생성할 수 있다.The
이 때, 상기 바이오 정보 생성부(111)는 상기 사용자 단말 장치(10)에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 수신하고, 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 상기 사용자 단말 장치(10)에게 송신할 수 있다.In this case, the
이 때, 상기 좌표 정보는 상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함할 수 있다.In this case, the coordinate information may include coordinates and guidelines for positioning the user's face and hand on the screen on which the user's face is recognized.
이 때, 상기 가이드 라인들은 상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함할 수 있다.In this case, the guide lines may include a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
이 때, 상기 제1 가이드 라인은 기설정된 얼굴 각도에 상응하도록 결정될 수 있다.In this case, the first guide line may be determined to correspond to a preset face angle.
이 때, 제1 가이드 라인으로 사용자의 얼굴이 위, 아래, 좌, 우를 바라보는 방향을 향하도록 안면 가이드라인이 생성될 수도 있고, 정면을 응시하되 좌, 우로 고개를 회전시킨 가이드라인이 생성될 수도 있으며 얼굴 각도를 취할 수 있는 기설정된 한도(15도, 30도, 45도 및 90도 등) 내에서 다양한 얼굴 각도의 가이드라인이 제공될 수도 있다.At this time, as the first guideline, a facial guideline may be generated such that the user's face faces up, down, left, and right as the first guideline, and a guideline in which the user's face is turned to the left and right while staring at the front is generated In addition, guidelines for various facial angles may be provided within preset limits (15 degrees, 30 degrees, 45 degrees, and 90 degrees, etc.) that can take a facial angle.
이 때, 상기 제2 가이드 라인은 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may be determined to correspond to any one of the palm showing operation and the back of the hand showing operation.
이 때, 상기 제2 가이드 라인은 왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may include at least one of a left hand guide line and a right hand guide line, and each of the left hand guide line and the right hand guide line may be determined to correspond to any one of the palm showing operation and the back hand showing operation. there is.
예를 들어, 제2 가이드 라인으로 화면 상에 왼손 가이드라인 및 오른손 가이드 라인 중 적어도 하나가 기설정된 좌표에 표시될 수 있고, 기설정된 좌표에서는 손바닥을 보이거나 손등을 보이는 등의 동작을 유도하는 형상이나 메시지가 출력되면서 제2 가이드 라인이 표시될 수 있다.For example, as the second guide line, at least one of a left hand guideline and a right hand guide line may be displayed at preset coordinates on the screen, and a shape inducing motion such as showing the palm or the back of the hand at the preset coordinates However, as the message is output, the second guide line may be displayed.
바이오 식별자 생성부(112)는 상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자를 생성할 수 있다.The
이 때, 상기 바이오 식별자 생성부(112)는 상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고, 상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성할 수 있다.At this time, the
이 때, 안면인식 바이오 정보로부터 추출되는 특징값들은 안면인식, 지문인식 및 정맥인식 등 다양한 생체 정보로부터 추출된 특징값들을 포함할 수 있다.In this case, the feature values extracted from the facial recognition bio-information may include feature values extracted from various bio-information such as facial recognition, fingerprint recognition, and vein recognition.
사용자의 개인 정보는 성명, 성별, 생년월일, 주민등록번호, 전화번호, 주소 등 다양한 개인정보를 포함할 수 있다.The user's personal information may include various personal information such as name, gender, date of birth, resident registration number, phone number, and address.
이 때, 상기 바이오 식별자 생성부(112)는 상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성할 수 있다.In this case, the
이 때, 상기 바이오 식별자 생성부(112)는 상기 특징값들을 INDEX-OF-MAX 등과 같은 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성할 수 있다.In this case, the
이 때, 특징값들로부터 해시 도메인은 생성하는 해싱 기법은 다양한 해싱 기법들이 사용될 수 있다.In this case, various hashing techniques may be used as a hashing technique for generating a hash domain from the feature values.
바이오 식별자 검증부(113)는 상기 사용자 단말 장치로부터 요청 받은 바이오 식별자 인증 요청에 따라 상기 바이오 식별자를 이용하여 상기 사용자 단말 장치로부터 수신한 인증 요청 바이오 식별자를 검증할 수 있다.The
도 7은 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법을 나타낸 동작흐름도이다. 도 8은 도 7에 도시된 인증서 발급 단계의 일 예를 세부적으로 나타낸 도면이다. 도 9는 도 7에 도시된 본인 확인 단계의 일 예를 세부적으로 나타낸 도면이다. 도 10 및 도 11은 본 발명의 일실시예에 따른 안면인식 바이오 정보 생성 과정을 나타낸 도면이다. 도 12는 본 발명의 일실시예에 따른 지문을 이용한 바이오 정보 인식 과정을 나타낸 도면이다. 도 13은 본 발명의 일실시예에 따른 정맥을 이용한 바이오 정보 인식 과정을 나타낸 도면이다. 도 14는 본 발명의 일실시예에 따른 바이오 식별자 생성 과정을 나타낸 도면이다. 도 15는 본 발명의 일실시예에 따른 바이오 메트릭 식별자에서 해시 도메인 추출 과정을 나타낸 도면이다. 도 16은 도 7에 도시된 바이오 정보 인증 단계의 일 예를 세부적으로 나타낸 도면이다. 도 17은 도 7에 도시된 전자서명 생성 단계의 일 예를 세부적으로 나타낸 도면이다. 도 18은 도 7에 도시된 전자서명 검증 단계의 일 예를 세부적으로 나타낸 도면이다.7 is an operation flowchart illustrating a method for verifying facial recognition bio information liveness according to an embodiment of the present invention. FIG. 8 is a diagram illustrating in detail an example of the step of issuing a certificate shown in FIG. 7 . 9 is a diagram illustrating in detail an example of an identity verification step shown in FIG. 7 . 10 and 11 are diagrams illustrating a face recognition bio-information generation process according to an embodiment of the present invention. 12 is a diagram illustrating a bioinformation recognition process using a fingerprint according to an embodiment of the present invention. 13 is a diagram illustrating a bioinformation recognition process using a vein according to an embodiment of the present invention. 14 is a diagram illustrating a bio-identifier generation process according to an embodiment of the present invention. 15 is a diagram illustrating a process of extracting a hash domain from a biometric identifier according to an embodiment of the present invention. FIG. 16 is a view showing in detail an example of the bioinformation authentication step shown in FIG. 7 . FIG. 17 is a view showing in detail an example of the digital signature generation step shown in FIG. 7 . 18 is a view showing in detail an example of the digital signature verification step shown in FIG. 7 .
도 7을 참조하면, 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법은 먼저 인증서를 발급할 수 있다(S210).Referring to FIG. 7 , the face recognition bio information liveness verification method according to an embodiment of the present invention may first issue a certificate ( S210 ).
즉, 단계(S210)는 사용자 단말 장치(10)가 인증 서버(20)에 인증서 발급을 요청하여 인증서를 발급받고, 안면인식 바이오 정보를 이용하여 암호화된 바이오 템플릿을 생성할 수 있다.That is, in step S210 , the
사용자 단말 장치(10)는 먼저 안면인식 바이오 정보를 이용하여 바이오 인증 템플릿을 생성할 수 있다(S211).The
즉, 단계(S211)는 카메라를 이용하여 사용자를 촬영하고 사용자의 안면과 상기 사용자의 손 동작 및 손 위치의 인식 결과에 기반하여 안면인식 바이오 정보를 생성할 수 있다.That is, in step S211, the user may be photographed using a camera, and facial recognition bio-information may be generated based on the recognition result of the user's face and the user's hand motion and hand position.
이 때, 단계(S211)는 상기 사용자 단말 장치(10)에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 안면인식 바이오 정보 라이브니스 검증 장치(100)에게 전송할 수 있다.In this case, in step S211 , the result of recognizing the user's face photographed by the camera mounted on the
이 때, 단계(S211)는 안면인식 바이오 정보 라이브니스 검증 장치(100)로부터 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 수신할 수 있다.At this time, in step S211, coordinate information for inducing the user's action on the interface in which the user's face is recognized based on the result of recognizing the face from the face recognition bioinformation
이 때, 상기 좌표 정보는 상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함할 수 있다.In this case, the coordinate information may include coordinates and guidelines for positioning the user's face and hand on the screen on which the user's face is recognized.
이 때, 상기 가이드 라인들은 상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함할 수 있다.In this case, the guide lines may include a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
이 때, 상기 제1 가이드 라인은 기설정된 얼굴 각도에 상응하도록 결정될 수 있다.In this case, the first guide line may be determined to correspond to a preset face angle.
이 때, 제1 가이드 라인으로 사용자의 얼굴이 위, 아래, 좌, 우를 바라보는 방향을 향하도록 안면 가이드라인이 생성될 수도 있고, 정면을 응시하되 좌, 우로 고개를 회전시킨 가이드라인이 생성될 수도 있으며 얼굴 각도를 취할 수 있는 기설정된 한도(15도, 30도, 45도 및 90도 등) 내에서 다양한 얼굴 각도의 가이드라인이 제공될 수도 있다.At this time, as the first guideline, a facial guideline may be generated such that the user's face faces up, down, left, and right as the first guideline, and a guideline in which the user's face is turned to the left and right while staring at the front is generated In addition, guidelines for various facial angles may be provided within preset limits (15 degrees, 30 degrees, 45 degrees, and 90 degrees, etc.) that can take a facial angle.
이 때, 상기 제2 가이드 라인은 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may be determined to correspond to any one of the palm showing operation and the back of the hand showing operation.
이 때, 상기 제2 가이드 라인은 왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may include at least one of a left hand guide line and a right hand guide line, and each of the left hand guide line and the right hand guide line may be determined to correspond to any one of the palm showing operation and the back hand showing operation. there is.
예를 들어, 제2 가이드 라인으로 화면 상에 왼손 가이드라인 및 오른손 가이드 라인 중 적어도 하나가 기설정된 좌표에 표시될 수 있고, 기설정된 좌표에서는 손바닥을 보이거나 손등을 보이는 등의 동작을 유도하는 형상이나 메시지가 출력되면서 제2 가이드 라인이 표시될 수 있다.For example, as the second guide line, at least one of a left hand guideline and a right hand guide line may be displayed at preset coordinates on the screen, and a shape inducing motion such as showing the palm or the back of the hand at the preset coordinates However, as the message is output, the second guide line may be displayed.
이 때, 단계(S211)는 안면인식 바이오 정보를 이용하여 바이오 인증 템플릿을 생성할 수 있다.In this case, in step S211, a bio-authentication template may be generated using the facial recognition bio-information.
단계(S212)는 기저장된 장치키로 암호화된 바이오 암호키를 복호화할 수 있다.Step S212 may decrypt the bio-encryption key encrypted with the pre-stored device key.
단계(S213)는 바이오 암호키를 이용하여 바이오 인증 템플릿을 암호화할 수 있다.In step S213, the bio-authentication template may be encrypted using the bio-encryption key.
단계(S214)는 암호화된 바이오 인증 템플릿을 안면인식 바이오 정보 라이브니스 검증 장치(100)에게 전송하여 바이오 인증을 요청할 수 있다.In step S214, the encrypted bio-authentication template may be transmitted to the facial recognition bio-information
단계(S215)는 상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자(ID)를 생성할 수 있다.In step S215, a bio-identifier (ID) may be generated using the facial recognition bio-information and the user's personal information.
이 때, 단계(S215)는 상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고, 상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성할 수 있다.At this time, step S215 generates a user identifier from a hash value of the components included in the user's personal information, extracts feature values from the facial recognition bio-information, and obtains a biometric identifier from the feature values. can create
이 때, 안면인식 바이오 정보로부터 추출되는 특징값들은 안면인식, 지문인식 및 정맥인식 등 다양한 생체 정보로부터 추출된 특징값들을 포함할 수 있다.In this case, the feature values extracted from the facial recognition bio-information may include feature values extracted from various bio-information such as facial recognition, fingerprint recognition, and vein recognition.
사용자의 개인 정보는 성명, 성별, 생년월일, 주민등록번호, 전화번호, 주소 등 다양한 개인정보를 포함할 수 있다.The user's personal information may include various personal information such as name, gender, date of birth, resident registration number, phone number, and address.
이 때, 단계(S215)는 상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성할 수 있다.In this case, in step S215, the bio-identifier may be generated by combining the user identifier and the biometric identifier.
이 때, 단계(S215)는 상기 특징값들을 INDEX-OF-MAX 등과 같은 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성할 수 있다.In this case, in step S215, a hash domain may be generated using a preset hashing technique such as INDEX-OF-MAX, and the biometric identifier may be generated based on the hash domain.
이 때, 특징값들로부터 해시 도메인은 생성하는 해싱 기법은 다양한 해싱 기법들이 사용될 수 있다.In this case, various hashing techniques may be used as a hashing technique for generating a hash domain from the feature values.
이 때, 단계(S215)는 생성된 바이오 식별자, 공개키 및 개인키 소유증명값 등을 이용하여 인증서버(20)에 인증서 발급을 요청할 수 있다.In this case, step S215 may request the
단계(S216)는 인증 서버(20)가 바이오 식별자에 기반하여 생성된 인증서를 사용자 단말 장치(10)에게 발급할 수 있다.In step S216 , the
또한, 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법은 본인 확인을 수행할 수 있다(S220).In addition, the face recognition bio-information liveness verification method according to an embodiment of the present invention may perform identity verification ( S220 ).
즉, 단계(S220)는 사용자 단말 장치(10)로부터 수신한 안면인식 바이오 정보를 이용하여 상기 사용자 단말 장치(10)의 본인 확인을 수행할 수 있다.That is, in step S220 , identity verification of the
도 9를 참조하면, 단계(S221)는 사용자 단말 장치(10)로부터 요청 받은 바이오 정보 생성 요청에 따라 사용자의 안면과 상기 사용자의 손 동작 및 손 위치의 인식 결과에 기반하여 안면인식 바이오 정보를 생성할 수 있다.Referring to FIG. 9 , in step S221 , in response to a bio-information generation request received from the
이 때, 단계(S221)는 상기 사용자 단말 장치(10)에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 수신하고, 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 상기 사용자 단말 장치(10)에게 송신할 수 있다.In this case, in step S221, a result of recognizing the user's face photographed by the camera mounted on the
도 10을 참조하면, 사용자 단말 장치(10)로부터 카메라를 통해 촬영된 사용자의 안면 인식 결과를 수신할 수 있고, 안면인식 바이오 정보 라이브니스 검증 장치(100)가 손 동작 및 손 위치를 위치시킬 좌표를 무작위로 선택할 수 있고, 기설정된 위치 중 적어도 하나를 선택할 수 있다.Referring to FIG. 10 , the user's face recognition result captured through the camera may be received from the
도 10에 도시된 바와 같이, 다섯 개의 기설정된 좌표들 중 하나에서 두 개를 선택할 수 있다. 두 개가 선택된 경우 양손을 모두 위치시키는 좌표들에 상응할 수 있다.As shown in FIG. 10 , two may be selected from one of five preset coordinates. When two are selected, they may correspond to coordinates for positioning both hands.
이 때, 상기 좌표 정보는 상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함할 수 있다.In this case, the coordinate information may include coordinates and guidelines for positioning the user's face and hand on the screen on which the user's face is recognized.
이 때, 상기 가이드 라인들은 상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함할 수 있다.In this case, the guide lines may include a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
이 때, 상기 제1 가이드 라인은 기설정된 얼굴 각도에 상응하도록 결정될 수 있다.In this case, the first guide line may be determined to correspond to a preset face angle.
이 때, 제1 가이드 라인으로 사용자의 얼굴이 위, 아래, 좌, 우를 바라보는 방향을 향하도록 안면 가이드라인이 생성될 수도 있고, 정면을 응시하되 좌, 우로 고개를 회전시킨 가이드라인이 생성될 수도 있으며 얼굴 각도를 취할 수 있는 기설정된 한도(15도, 30도, 45도 및 90도 등) 내에서 다양한 얼굴 각도의 가이드라인이 제공될 수도 있다.At this time, as the first guideline, a facial guideline may be generated such that the user's face faces up, down, left, and right as the first guideline, and a guideline in which the user's face is turned to the left and right while staring at the front is generated In addition, guidelines for various facial angles may be provided within preset limits (15 degrees, 30 degrees, 45 degrees, and 90 degrees, etc.) that can take a facial angle.
이 때, 상기 제2 가이드 라인은 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may be determined to correspond to any one of the palm showing operation and the back of the hand showing operation.
이 때, 상기 제2 가이드 라인은 왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정될 수 있다.In this case, the second guide line may include at least one of a left hand guide line and a right hand guide line, and each of the left hand guide line and the right hand guide line may be determined to correspond to any one of the palm display operation and the back hand display operation. there is.
예를 들어, 제2 가이드 라인으로 화면 상에 왼손 가이드라인 및 오른손 가이드 라인 중 적어도 하나가 기설정된 좌표에 표시될 수 있고, 기설정된 좌표에서는 손바닥을 보이거나 손등을 보이는 등의 동작을 유도하는 형상이나 메시지가 출력되면서 제2 가이드 라인이 표시될 수 있다.For example, as the second guide line, at least one of a left hand guideline and a right hand guide line may be displayed at preset coordinates on the screen, and a shape inducing motion such as showing the palm or the back of the hand at the preset coordinates However, as the message is output, the second guide line may be displayed.
도 11을 참조하면, 사용자의 안면에 상응하는 제1 가이드 라인이 사용자 단말 장치(10)의 인터페이스에 표시되고, 사용자의 손바닥에 상응하는 제2 가이드 라인이 사용자 단말 장치(10)의 인터페이스에 표시된 것을 알 수 있다.Referring to FIG. 11 , a first guide line corresponding to the user's face is displayed on the interface of the
이 때, 제1 가이드 라인으로 사용자의 얼굴이 위, 아래, 좌, 우를 바라보는 방향을 향하도록 안면 가이드라인이 생성될 수도 있고, 정면을 응시하되 좌, 우로 고개를 회전시킨 가이드라인이 생성될 수도 있으며 얼굴 각도를 취할 수 있는 기설정된 한도(15도, 30도, 45도 및 90도 등) 내에서 다양한 얼굴 각도의 가이드라인이 제공될 수도 있다.At this time, as the first guideline, a facial guideline may be generated such that the user's face faces up, down, left, and right as the first guideline, and a guideline in which the user's face is turned to the left and right while staring at the front is generated In addition, guidelines for various face angles may be provided within preset limits (15 degrees, 30 degrees, 45 degrees, and 90 degrees, etc.) that can take the angle of the face.
이 때, 제2 가이드 라인으로 왼손 손바닥과 오른손 손바닥 가이드 라인이 모두 표시된 것을 알 수 있고, 안면인식 기반 라이브니스 검증 장치(100)는 오른쪽 손바닥 보이기 가이드라인, 왼쪽 손바닥 보이기 가이드라인, 양쪽 손바닥 보이기 가이드 라인 외에도, 오른쪽 손등 보이기 가이드라인, 왼쪽 손등 보이기 가이드라인, 양쪽 손등 보이기 가이드 라인을 제공할 수도 있고, 다양한 손 동작 및 손 위치(OK 동작, 가위, 바위, 보, 두 손을 마주잡은 동작, 가리키는 동작 등등)에 상응하는 가이드라인을 제공할 수도 있다.At this time, it can be seen that both the left palm and the right palm guide line are displayed as the second guide line, and the face recognition-based
예를 들어, 제2 가이드 라인으로 화면 상에 왼손 가이드라인 및 오른손 가이드 라인 중 적어도 하나가 기설정된 좌표에 표시될 수 있고, 기설정된 좌표에서는 손바닥을 보이거나 손등을 보이는 등의 동작을 유도하는 형상이나 메시지가 출력되면서 제2 가이드 라인이 표시될 수 있다.For example, as the second guide line, at least one of a left hand guideline and a right hand guide line may be displayed at preset coordinates on the screen, and a shape inducing motion such as showing the palm or the back of the hand at the preset coordinates However, as the message is output, the second guide line may be displayed.
도 12 및 도 13을 참조하면, 안면인식 기반 라이브니스 검증 장치(100)는 지문 바이오 정보와 정맥 바이오 정보를 사용자 단말 장치(100)로부터 추가로 제공 받아 안면인식 바이오 정보에 포함시켜 사용할 수 있고, 사용자 단말 장치(100)도 지문 바이오 정보와 정맥 바이오 정보를 포함시킨 안면인식 바이오 정보를 생성할 수 있다.12 and 13, the face recognition-based
도 12에 도시된 바와 같이, 사용자 단말 장치(10)는 지문 인식 결과로부터 방향성분을 추출하고, 이진화 및 세션화 과정을 통해 특징값을 추출할 수 있다.As shown in FIG. 12 , the
도 13에 도시된 바와 같이, 사용자 단말 장치(10)는 정맥을 촬영한 사진으로부터 정맥 부분만 추출하고, 이진화 고정을 통해 특징값을 추출할 수 있다.As shown in FIG. 13 , the
또한, 단계(S222)는 상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자를 생성할 수 있다.Also, in step S222, a bio-identifier may be generated using the facial recognition bio-information and the user's personal information.
이 때, 단계(S222)는 상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고, 상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성할 수 있다.At this time, in step S222, a user identifier is generated from a value obtained by hashing components included in the user's personal information, feature values are extracted from the facial recognition bio-information, and a biometric identifier is obtained from the feature values. can create
이 때, 상기 안면인식 바이오 정보로부터 추출된 특징값들은 손 동작 및 손 위치를 포함한 안면인식 결과뿐만 아니라 도 12 및 도 13에서 설명한 지문 및 정맥으로부터 추출된 특징값들을 더 포함할 수도 있다.In this case, the feature values extracted from the facial recognition bio-information may further include feature values extracted from fingerprints and veins described in FIGS. 12 and 13 as well as facial recognition results including hand motion and hand position.
또한, 사용자의 개인 정보는 성명, 성별, 생년월일, 주민등록번호, 전화번호, 주소 등 다양한 개인정보를 포함할 수 있다.In addition, the user's personal information may include various personal information such as name, gender, date of birth, resident registration number, phone number, and address.
이 때, 단계(S222)는 사용자 단말 장치(10)로부터 사전에 사용자 등록을 통해 사용자의 개인 정보를 등록 받을 수도 있고, 인증 서버(20)를 통해 사용자의 개인 정보를 제공받을 수도 있다. In this case, in step S222 , the user's personal information may be registered from the
이 때, 단계(S222)는 사용자 단말 장치(10)로부터 인증 코드를 수신하고, 인증 코드를 이용하여 인증 서버(20)로부터 사용자의 개인 정보를 제공받을 수 있다.In this case, in step S222 , an authentication code may be received from the
이 때, 단계(S222)는 사용자 단말 장치(10)로부터 사용자의 개인 정보를 제공 받기 위한 공유키를 수신하고, 인증 코드를 이용하여 인증 서버(20)로부터 제공받은 암호화된 사용자의 개인 정보를 상기 공유키를 이용하여 복호화하고, 사용자의 개인 정보를 획득할 수도 있다.At this time, step S222 receives the shared key for receiving the user's personal information from the
또한, 단계(S222)는 상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성할 수 있다.Also, in step S222, the bio-identifier may be generated by combining the user identifier and the biometric identifier.
도 14를 참조하면, 안면인식 바이오 정보 라이브니스 검증 장치(100)는 사용자의 개인정보에서 성명, 생년월일, 전화번호를 해시한 값으로부터 개인 정보 식별자(PERSONAL INFO ID)를 생성하고, 안면인식, 지문인식 및 정맥인식 등을 포함하는 안면인식 바이오 정보에서 추출된 특징값들로부터 바이오 메트릭 식별자(BIOMETRIC ID)를 생성하는 것을 알 수 있다.Referring to FIG. 14 , the facial recognition bioinformation
이 때, 단계(S222)는 상기 특징값들을 INDEX-OF-MAX 등과 같은 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성할 수 있다.In this case, in step S222, a hash domain may be generated using a preset hashing technique such as INDEX-OF-MAX for the feature values, and the biometric identifier may be generated based on the hash domain.
이 때, 특징값들로부터 해시 도메인은 생성하는 해싱 기법은 다양한 해싱 기법들이 사용될 수 있다.In this case, various hashing techniques may be used as a hashing technique for generating a hash domain from the feature values.
이 때, 안면인식 바이오 정보 라이브니스 검증 장치(100)는 상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성하는 것을 알 수 있다.In this case, the facial recognition bio-information
도 15를 참조하면, 안면인식 바이오 정보 라이브니스 검증 장치(100)는 유사한 얼굴 정보들인 안면인식 바이오 정보(얼굴 1, 얼굴 2)로부터 INDEX-OF-MAX 해싱 기법을 이용하여 RANDOM PROJECTION 을 적용하고, 다중의 RANDOM GAUSSAIN PROJECTION MATRIX를 적용하여 특징값들을 추출하는 것을 알 수 있다.15, the face recognition bio information
이 때, 안면인식 바이오 정보 라이브니스 검증 장치(100)는 안면인식 바이오 정보(얼굴 1, 얼굴 2)의 동일한 WINDOW 에서 유사도가 높은 입력 특징값들은 해시 도메인에서 충돌확률이 높고, 유사도가 낮은 입력 특징값들은 해시 도메인에서 충돌확률이 낮도록 설계하여 특징값들에 대한 해시 도메인을 생성하고, 이로부터 두 개의 얼굴 1과 얼굴 2에 대한 해시 도메인들을 비교하여 동일 여부를 판단할 수 있는 것을 알 수 있다.At this time, the facial recognition bio-information
단계(S223)는 상기 사용자 단말 장치(10)로부터 요청 받은 바이오 식별자 인증 요청에 따라 상기 바이오 식별자를 이용하여 상기 사용자 단말 장치로부터 수신한 인증 요청 바이오 식별자를 포함하는 인증서를 검증할 수 있다.In step S223 , according to the bio-identifier authentication request received from the
이 때, 단계(S223)는 기생성된 바이오 식별자와 인증서에 포함된 인증 요청 바이오 식별자를 비교하여 바이오 식별자를 검증할 수 있다.In this case, in step S223, the bio-identifier may be verified by comparing the pre-generated bio-identifier with the authentication-requested bio-identifier included in the certificate.
단계(S224)는 안면인식 바이오 정보로부터 바이오 템플릿을 생성할 수 있다.In step S224, a bio template may be generated from the facial recognition bio information.
또한, 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법은 안면인식 바이오 정보 인증을 수행할 수 있다(S230).In addition, the face recognition bio information liveness verification method according to an embodiment of the present invention may perform facial recognition bio information authentication (S230).
즉, 단계(S230)는 상기 안면인식 바이오 정보로부터 생성된 바이오 템플릿과 사용자 단말 장치(10)로부터 수신한 바이오 템플릿을 비교하여 상기 안면인식 바이오 정보를 인증할 수 있다.That is, in step S230, the bio-template generated from the face-recognition bio-information may be compared with the bio-template received from the
도 16을 참조하면, 기저장된 바이오 암호키를 복호화하여 바이오 암호키를 복호화하고(S231), 사용자 단말 장치(10)로부터 단계(S214)에서 수신한 암호화된 바이오 인증 템플릿을 복호화할 수 있다(S232).Referring to FIG. 16 , the bio-encryption key may be decrypted by decrypting the pre-stored bio-encryption key (S231), and the encrypted bio-authentication template received from the
이 때, 바이오 암호키는 사용자 단말 장치(10)와 안면인식 바이오 정보 라이브니스 검증 장치(100)가 사전에 공유하고 있을 수 있다.In this case, the bio-encryption key may be shared in advance by the
단계(S233)는 복호화된 바이오 인증 템플릿과, 단계(S224)에서 생성된 바이오 템플릿을 비교하여 바이오 템플릿을 인증할 수 있다.In step S233, the bio-template may be authenticated by comparing the decrypted bio-authentication template with the bio-template generated in step S224.
또한, 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법은 전자서명을 생성할 수 있다(S240).In addition, the facial recognition bio-information liveness verification method according to an embodiment of the present invention may generate an electronic signature (S240).
즉, 단계(S240)는 상기 본인 확인을 수행한 결과와 상기 안면인식 바이오 정보를 인증한 결과에 기반하여 전자서명을 생성할 수 있다.That is, in step S240, an electronic signature may be generated based on a result of performing the identity verification and a result of authenticating the facial recognition bio-information.
도 17을 참조하면, 단계(S240)는 단계(S242)는 단계(S223)의 바이오 식별자 검증 결과와 단계(S234)의 바이오 템플릿 검증 결과가 모두 성공인 경우, 사전에 저장된 암호화된 개인키를 복호화하고, 개인키를 이용하여 전자서명을 생성할 수 있다.Referring to FIG. 17 , in step S240, in step S242, if both the bio-identifier verification result of step S223 and the bio-template verification result of step S234 are successful, the previously stored encrypted private key is decrypted and generate a digital signature using the private key.
또한, 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 방법은 전자서명을 검증할 수 있다(S250).In addition, the facial recognition bio-information liveness verification method according to an embodiment of the present invention can verify the digital signature (S250).
즉, 단계(S250)는 사용자의 전자서명된 문서(전자서명문)의 검증 요청에 따라 상기 전자서명문의 전자서명 값과 상기 전자서명문에 포함된 인증서의 유효성을 검증하여 상기 전자서명문을 검증할 수 있다.That is, step S250 verifies the digital signature by verifying the digital signature value of the digital signature and the validity of the certificate included in the digital signature according to the user's request for verification of the digitally signed document (digital signature). can do.
도 18을 참조하면, 단계(S250)는 전자서명문의 전자서명 검증 요청을 수신할 수 있다(S251).Referring to FIG. 18 , in step S250, a digital signature verification request of the digital signature may be received (S251).
전자서명문은 문서, 전자서명 값 및 바이오 식별자가 포함된 인증서를 포함할 수 있다.The digital signature may include a document, a digital signature value, and a certificate including a bio-identifier.
이 때, 단계(S252)는 인증서에 포함된 공개키를 이용하여 전자 서명 값을 복호화할 수 있다.In this case, in step S252, the digital signature value may be decrypted using the public key included in the certificate.
이 때, 단계(S253)은 복호화된 전자서명 값을 해시한 값과 문서를 해시한 값을 비교하여 전자서명 값을 비교 검증할 수 있다.In this case, step S253 may compare and verify the digital signature value by comparing the hashed value of the decrypted digital signature value with the hashed value of the document.
이 때, 단계(S254)는 전자서명 값이 참인 경우, 인증서의 전자서명 값을 검증할 수 있다.At this time, in step S254, if the digital signature value is true, the digital signature value of the certificate may be verified.
이 때, 단계(S255)는 인증서의 유효성을 검증할 수 있다.In this case, step S255 may verify the validity of the certificate.
이 때, 단계(S256)는 전자서명 값의 검증 결과와 인증서의 유효성 검증 결과에 기반하여 문서를 검증할 수 있다.In this case, step S256 may verify the document based on the verification result of the digital signature value and the verification result of the certificate validity.
도 19는 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.19 is a diagram illustrating a computer system according to an embodiment of the present invention.
도 19를 참조하면, 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 장치(100), 사용자 단말 장치(10) 및 인증 서버(20)는 컴퓨터로 읽을 수 있는 기록매체와 같은 컴퓨터 시스템(1100)에서 구현될 수 있다. 도 19에 도시된 바와 같이, 컴퓨터 시스템(1100)은 버스(1120)를 통하여 서로 통신하는 하나 이상의 프로세서(1110), 메모리(1130), 사용자 인터페이스 입력 장치(1140), 사용자 인터페이스 출력 장치(1150) 및 스토리지(1160)를 포함할 수 있다. 또한, 컴퓨터 시스템(1100)은 네트워크(1180)에 연결되는 네트워크 인터페이스(1170)를 더 포함할 수 있다. 프로세서(1110)는 중앙 처리 장치 또는 메모리(1130)나 스토리지(1160)에 저장된 프로세싱 인스트럭션들을 실행하는 반도체 장치일 수 있다. 메모리(1130) 및 스토리지(1160)는 다양한 형태의 휘발성 또는 비휘발성 저장 매체일 수 있다. 예를 들어, 메모리는 ROM(1131)이나 RAM(1132)을 포함할 수 있다.Referring to FIG. 19 , the facial recognition bioinformation
이상에서와 같이 본 발명의 일실시예에 따른 안면인식 바이오 정보 라이브니스 검증 장치 및 방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.As described above, in the face recognition bioinformation liveness verification apparatus and method according to an embodiment of the present invention, the configuration and method of the embodiments described above are not limitedly applicable, but the embodiments are subject to various modifications. All or part of each of the embodiments may be selectively combined and configured to achieve this.
10: 사용자 단말 장치
11: 단말 바이오 정보 생성부
12: 단말 바이오 식별자 생성부
20: 인증 서버
100: 안면인식 바이오 정보 라이브니스 검증 장치
110: 본인 확인부
111: 바이오 정보 생성부
112: 바이오 식별자 생성부
113: 바이오 식별자 검증부
120: 바이오 정보 인증부
130: 전자 서명 생성부
140: 전자서명 검증부
1100: 컴퓨터 시스템
1110: 프로세서
1120: 버스
1130: 메모리
1131: 롬
1132: 램
1140: 사용자 인터페이스 입력 장치
1150: 사용자 인터페이스 출력 장치
1160: 스토리지
1170: 네트워크 인터페이스
1180: 네트워크10: user terminal device 11: terminal bio information generating unit
12: terminal bio-identifier generator 20: authentication server
100: face recognition bio information liveness verification device
110: identity verification unit 111: bio information generation unit
112: bio-identifier generator 113: bio-identifier verification unit
120: bio information authentication unit 130: electronic signature generation unit
140: digital signature verification unit
1100: computer system 1110: processor
1120: bus 1130: memory
1131: rom 1132: ram
1140: user interface input device
1150: user interface output device
1160: storage 1170: network interface
1180: network
Claims (20)
상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자를 생성하는 바이오 식별자 생성부; 및
상기 사용자 단말 장치로부터 요청 받은 바이오 식별자 인증 요청에 따라 상기 바이오 식별자를 이용하여 상기 사용자 단말 장치로부터 수신한 인증 요청 바이오 식별자를 검증하는 바이오 식별자 검증부;
를 포함하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.a bioinformation generating unit that generates facial recognition bioinformation based on a result of recognition of a user's face and a user's hand motion and hand position in response to a bioinformation generation request requested from the user terminal device;
a bio-identifier generating unit that generates a bio-identifier by using the facial recognition bio-information and the user's personal information; and
a bio-identifier verification unit that verifies the authentication-requested bio-identifier received from the user terminal device by using the bio-identifier according to the bio-identifier authentication request requested from the user terminal device;
Facial recognition bio-information liveness verification device comprising a.
상기 바이오 정보 생성부는
상기 사용자 단말 장치에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 수신하고, 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 상기 사용자 단말 장치에게 송신하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.The method according to claim 1,
The bio-information generating unit
Coordinates for receiving a result of recognizing the user's face photographed by a camera mounted on the user terminal device, and inducing an action of the user on an interface in which the user's face is recognized based on the result of recognizing the face Facial recognition bioinformation liveness verification apparatus, characterized in that it transmits information to the user terminal device.
상기 좌표 정보는
상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.3. The method according to claim 2,
The coordinate information is
and coordinates and guidelines for locating the user's face and hand on the screen on which the user's face is recognized.
상기 가이드 라인들은
상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.4. The method according to claim 3,
The guidelines are
and a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
상기 제1 가이드 라인은
기설정된 얼굴 각도에 상응하도록 결정되는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.5. The method according to claim 4,
The first guideline is
Face recognition bioinformation liveness verification apparatus, characterized in that it is determined to correspond to a preset face angle.
상기 제2 가이드 라인은
손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정되는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.5. The method according to claim 4,
The second guideline is
An apparatus for verifying liveness of facial recognition bioinformation, characterized in that it is determined to correspond to any one of a palm display operation and a back hand display operation.
상기 제2 가이드 라인은
왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정되는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.7. The method of claim 6,
The second guideline is
Face recognition bioinformation live, comprising at least one of a left hand guide line and a right hand guide line, wherein each of the left hand guide line and the right hand guide line is determined to correspond to any one of the palm showing action and the back hand showing action Nice Verification Device.
상기 바이오 식별자 생성부는
상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고,
상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.The method according to claim 1,
The bio-identifier generating unit
Generate a user identifier from a hash value of the components included in the user's personal information,
The facial recognition bioinformation liveness verification apparatus, characterized in that extracting feature values from the facial recognition bioinformation and generating a biometric identifier from the feature values.
상기 바이오 식별자 생성부는
상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.9. The method of claim 8,
The bio-identifier generating unit
The facial recognition bioinformation liveness verification apparatus, characterized in that the biometric identifier is generated by combining the user identifier and the biometric identifier.
상기 바이오 식별자 생성부는
상기 특징값들을 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 장치.10. The method of claim 9,
The bio-identifier generating unit
The facial recognition bioinformation liveness verification apparatus, characterized in that the feature values generate a hash domain using a preset hashing technique, and generate the biometric identifier based on the hash domain.
사용자 단말 장치로부터 요청 받은 바이오 정보 생성 요청에 따라 사용자의 안면과 상기 사용자의 손 동작 및 손 위치의 인식 결과에 기반하여 안면인식 바이오 정보를 생성하는 단계;
상기 안면인식 바이오 정보와 상기 사용자의 개인 정보를 이용하여 바이오 식별자를 생성하는 단계; 및
상기 사용자 단말 장치로부터 요청 받은 바이오 식별자 인증 요청에 따라 상기 바이오 식별자를 이용하여 상기 사용자 단말 장치로부터 수신한 인증 요청 바이오 식별자를 검증하는 단계;
를 포함하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.In the face recognition bio information liveness verification method of the face recognition bio information liveness verification device,
generating facial recognition bioinformation based on a result of recognition of a user's face and a user's hand motion and hand position in response to a bioinformation generation request received from a user terminal device;
generating a bio-identifier using the facial recognition bio-information and the user's personal information; and
verifying the authentication request bio-identifier received from the user terminal device using the bio-identifier according to the bio-identifier authentication request requested from the user terminal device;
Facial recognition bio-information liveness verification method comprising a.
상기 안면인식 바이오 정보를 생성하는 단계는
상기 사용자 단말 장치에 장착된 카메라가 촬영한 상기 사용자의 안면을 인식한 결과를 수신하고, 상기 안면을 인식한 결과에 기반하여 상기 사용자의 안면이 인식된 인터페이스 상에서 상기 사용자의 행위를 유도하기 위한 좌표 정보를 상기 사용자 단말 장치에게 송신하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.12. The method of claim 11,
The step of generating the facial recognition bio-information is
Coordinates for receiving a result of recognizing the user's face photographed by a camera mounted on the user terminal device, and inducing an action of the user on an interface in which the user's face is recognized based on the result of recognizing the face Facial recognition bioinformation liveness verification method, characterized in that transmitting the information to the user terminal device.
상기 좌표 정보는
상기 사용자의 안면이 인식된 화면 상에서 상기 사용자의 안면 및 손을 위치시키기 위한 좌표들과 가이드라인들을 포함하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.13. The method of claim 12,
The coordinate information is
The face recognition bioinformation liveness verification method, characterized in that it includes coordinates and guidelines for positioning the user's face and hand on the screen on which the user's face is recognized.
상기 가이드 라인들은
상기 사용자의 안면에 상응하는 제1 가이드 라인과, 상기 사용자의 손 동작 및 손 위치에 상응하는 제2 가이드 라인을 포함하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.14. The method of claim 13,
The guidelines are
and a first guide line corresponding to the user's face and a second guide line corresponding to the user's hand motion and hand position.
상기 제1 가이드 라인은
기설정된 얼굴 각도에 상응하도록 결정되는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.15. The method of claim 14,
The first guideline is
Face recognition bioinformation liveness verification method, characterized in that it is determined to correspond to a preset face angle.
상기 제2 가이드 라인은
손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정되는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.15. The method of claim 14,
The second guideline is
A method for verifying liveness of facial recognition bioinformation, characterized in that the determination is made to correspond to any one of a palm showing action and a hand back showing motion.
상기 제2 가이드 라인은
왼손 가이드 라인과 오른손 가이드 라인 중 적어도 하나를 포함하고, 상기 왼손 가이드 라인과 상기 오른손 가이드 라인 각각은 상기 손바닥 보이기 동작 및 손등 보이기 동작 중 어느 하나에 상응하도록 결정되는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.17. The method of claim 16,
The second guideline is
Face recognition bioinformation live, comprising at least one of a left hand guide line and a right hand guide line, wherein each of the left hand guide line and the right hand guide line is determined to correspond to any one of the palm showing action and the back hand showing action Nice verification method.
상기 바이오 식별자를 생성하는 단계는
상기 사용자의 개인 정보에 포함된 구성 요소들을 해시한 값으로부터 사용자 식별자를 생성하고,
상기 안면인식 바이오 정보로부터 특징값들을 추출하고, 상기 특징값들로부터 바이오 메트릭 식별자를 생성하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.12. The method of claim 11,
The step of generating the bio-identifier is
Generate a user identifier from a hash value of the components included in the user's personal information,
The facial recognition bioinformation liveness verification method, characterized in that extracting feature values from the facial recognition bioinformation and generating a biometric identifier from the feature values.
상기 바이오 식별자를 생성하는 단계는
상기 사용자 식별자와 상기 바이오 메트릭 식별자를 결합하여 상기 바이오 식별자를 생성하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.19. The method of claim 18,
The step of generating the bio-identifier is
The face recognition bioinformation liveness verification method, characterized in that the biometric identifier is generated by combining the user identifier and the biometric identifier.
상기 바이오 식별자를 생성하는 단계는
상기 특징값들을 기설정된 해싱 기법을 이용하여 해시 도메인을 생성하고, 상기 해시 도메인에 기반하여 상기 바이오 메트릭 식별자를 생성하는 것을 특징으로 하는 안면인식 바이오 정보 라이브니스 검증 방법.20. The method of claim 19,
The step of generating the bio-identifier is
The face recognition bioinformation liveness verification method, characterized in that generating a hash domain using a hashing technique preset for the feature values, and generating the biometric identifier based on the hash domain.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200131941A KR102389587B1 (en) | 2020-10-13 | 2020-10-13 | Apparatus and method for verifying liveness of facial recognition biometric information |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200131941A KR102389587B1 (en) | 2020-10-13 | 2020-10-13 | Apparatus and method for verifying liveness of facial recognition biometric information |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220048724A true KR20220048724A (en) | 2022-04-20 |
| KR102389587B1 KR102389587B1 (en) | 2022-04-25 |
Family
ID=81402547
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200131941A KR102389587B1 (en) | 2020-10-13 | 2020-10-13 | Apparatus and method for verifying liveness of facial recognition biometric information |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102389587B1 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150064063A (en) * | 2012-10-05 | 2015-06-10 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | Secure identification of computing device and secure identification methods |
| KR20180017056A (en) * | 2015-06-10 | 2018-02-20 | 알리바바 그룹 홀딩 리미티드 | Liveiness detection method and device, and identity authentication method and device |
| KR20180067183A (en) * | 2016-12-12 | 2018-06-20 | 주식회사 케이티 | System and Method for Creating and Disposal of Identification associated with User Bio Information |
| JP2018156520A (en) * | 2017-03-21 | 2018-10-04 | 富士通株式会社 | Biometric authentication apparatus, organism authentication method, and organism authentication program |
-
2020
- 2020-10-13 KR KR1020200131941A patent/KR102389587B1/en active IP Right Grant
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20150064063A (en) * | 2012-10-05 | 2015-06-10 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | Secure identification of computing device and secure identification methods |
| KR20180017056A (en) * | 2015-06-10 | 2018-02-20 | 알리바바 그룹 홀딩 리미티드 | Liveiness detection method and device, and identity authentication method and device |
| KR20180067183A (en) * | 2016-12-12 | 2018-06-20 | 주식회사 케이티 | System and Method for Creating and Disposal of Identification associated with User Bio Information |
| JP2018156520A (en) * | 2017-03-21 | 2018-10-04 | 富士通株式会社 | Biometric authentication apparatus, organism authentication method, and organism authentication program |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102389587B1 (en) | 2022-04-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11449598B2 (en) | Method and system for securing user access, data at rest, and sensitive transactions using biometrics for mobile devices with protected local templates | |
| KR101226651B1 (en) | User authentication method based on the utilization of biometric identification techniques and related architecture | |
| US9384338B2 (en) | Architectures for privacy protection of biometric templates | |
| US9152779B2 (en) | Protecting codes, keys and user credentials with identity and patterns | |
| US8775809B2 (en) | Fuzzy biometrics based signatures | |
| JPWO2007094165A1 (en) | Identification system and program, and identification method | |
| JP2000242750A (en) | Personal authentication system, and portable device and storage medium used for the same | |
| JP2008512760A (en) | Feature extraction algorithm for automatic ear reconstruction | |
| CN111541713A (en) | Identity authentication method and device based on block chain and user signature | |
| JP2008167107A (en) | Challenge response authentication method using public key infrastructure | |
| CN108075894B (en) | Identity authentication online processing method and system | |
| JP2006262333A (en) | Living body authentication system | |
| KR102389587B1 (en) | Apparatus and method for verifying liveness of facial recognition biometric information | |
| KR100546775B1 (en) | Method for issuing a note of authentication and identification of MOC user using human features | |
| US11496469B2 (en) | Apparatus and method for registering biometric information, apparatus and method for biometric authentication | |
| WO2023022584A1 (en) | System and method for decentralising digital identification | |
| EP3937037A1 (en) | A system and method for digital identity authentication based on biometric data | |
| KR100715651B1 (en) | System and method for the third party's authentication by the user's password made from the asymmetric function based on the facial-image | |
| WO2024038630A1 (en) | Authentication system and authentication method | |
| JP2004272551A (en) | Certificate for authentication and terminal equipment | |
| JP2003323116A (en) | Method and device for generating key, method and device for verifying identity, and key registering method | |
| CN118487880A (en) | Method for authenticating identity of vehicle user and vehicle-mounted device | |
| JP2007249629A (en) | Biological information registration system | |
| Mohammadi et al. | Enhancement of security via real time authentication with biometric methods in e-commerce transactions | |
| JP2001265738A (en) | Internet personal authentication method and information terminal equipment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |