KR20180051742A - Face recognition system and method - Google Patents

Face recognition system and method Download PDF

Info

Publication number
KR20180051742A
KR20180051742A KR1020160148305A KR20160148305A KR20180051742A KR 20180051742 A KR20180051742 A KR 20180051742A KR 1020160148305 A KR1020160148305 A KR 1020160148305A KR 20160148305 A KR20160148305 A KR 20160148305A KR 20180051742 A KR20180051742 A KR 20180051742A
Authority
KR
South Korea
Prior art keywords
information
face
user
requestor
recognition
Prior art date
Application number
KR1020160148305A
Other languages
Korean (ko)
Other versions
KR101988365B1 (en
Inventor
오선호
김건우
한승완
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020160148305A priority Critical patent/KR101988365B1/en
Publication of KR20180051742A publication Critical patent/KR20180051742A/en
Application granted granted Critical
Publication of KR101988365B1 publication Critical patent/KR101988365B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45—Structures or tools for the administration of authentication
    • G06K9/00228—
    • G06K9/00288—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3236—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using cryptographic hash functions

Abstract

A face recognition system and a method thereof are disclosed. The face recognition system according to an embodiment of the present invention includes an information collection unit for collecting face information and secret information for the face recognition of a requestor, a face recognition unit for generating the changed face information of the requestor by changing the face information using the secret information, a database unit for storing changed face information of a user which is previously registered, and a control unit for determining a user recognition result according to a matching state by matching the changed face information of the user with the changed face information of the requestor. Accordingly, the present invention can improve recognition performance and security.

Description

얼굴 인식 시스템 및 그 방법{FACE RECOGNITION SYSTEM AND METHOD}[0001] FACE RECOGNITION SYSTEM AND METHOD [0002]

본 발명은 얼굴 인식 시스템 및 그 방법에 관한 것으로서, 보다 상세하게는 사용자의 비밀정보를 이용하여 보완성이 강화된 얼굴 인식 시스템 및 그 방법에 관한 것이다.The present invention relates to a face recognition system and a method thereof, and more particularly, to a face recognition system and its method with enhanced complement using user's secret information.

일반적으로 스마트폰이나 컴퓨터와 같은 개인 정보통신 단말기, 게이트 출입 시스템, 클라이언트 서버간 네트워크 시스템 및 온라인 결제 등에는 정당한 사용자의 인증을 위한 다양한 인식기술이 사용되고 있다.In general, various recognition technologies are used for authentication of legitimate users in a personal information communication terminal such as a smart phone or a computer, a gateway access system, a network system between a client server and an online settlement.

기존의 인증과 이를 위한 인식 기술은 개인정보 유출에 취약한 사용자 아이디/패스워드(ID/PW), 주민등록번호, 휴대폰 번호 등을 보완하기 위하여 휴대폰 인증, 카드(예; 난수 카드, RF 태그, 신용카드) 인증 및 OTP(One Time Password) 인증을 병행하여 사용자 인증절차를 강화하고 있다.Conventional authentication and recognition technology for this purpose require mobile phone authentication, card (eg, random card, RF tag, credit card) certification to supplement user ID / password (ID / PW), resident registration number, And OTP (One Time Password) authentication.

그러나, 위와 같이 강화된 인증절차를 수행하기 위해서는 복잡한 인터넷 환경 및 모바일 환경의 인증 프로그램을 설치해야 하고, 복잡한 인증절차를 수행해야 하는 불편과 인증을 위해 카드나 OTP 단말을 반드시 소지해야만 하는 단점이 있다.However, in order to perform the authentication procedure as described above, it is necessary to install an authentication program of a complicated internet environment and a mobile environment, inconvenience of complicated authentication procedure, and a disadvantage that a card or an OTP terminal must be possessed for authentication .

또한, 기존의 ID/PW 등의 인증정보는 해킹 등으로 인한 외부의 공격으로 유출시 악의적으로 도용될 수 있는 문제가 있다.In addition, existing authentication information such as ID / PW has a problem that it can be spoofed maliciously when leaked due to an external attack due to hacking or the like.

한편, 이러한 문제를 해결하고자 사용자의 고유한 지문, 음성 및 얼굴 등을 인식하는 생체 인식기술이 개발되고 있으나, 지문은 복제로 도용 가능하고 음성은 화자의 발화로 인한 유출과 녹음으로의 도용이 가능한 단점이 지적되고 있다.In order to solve such a problem, a biometrics technique for recognizing a user's unique fingerprint, voice, and face has been developed. However, fingerprints can be used for copying, while voice can be used for spilling and recording Disadvantages are pointed out.

특히 기존 얼굴인식 기술은 얼굴의 특징을 추출해서 패턴화함으로써 사용자를 유일하게 식별할 수 있는 인증기술로 개발되고 있다. In particular, existing face recognition technology is being developed as an authentication technology that uniquely identifies a user by extracting facial features and patterning them.

예컨대, 2D 얼굴인식인 경우 2차원 평면 얼굴의 특징 정보를 분석하고, 3차원 얼굴인식은 깊이 정보를 추가로 분석하는 것으로 개발되고 있다. 그러나 아직까지 산업에서 요구하는 수준의 인식 성능을 보여주지 못하고 있다. For example, in the case of 2D face recognition, feature information of a two-dimensional plane face is analyzed, and three-dimensional face recognition is being developed to further analyze depth information. However, it still does not show the recognition performance required by the industry.

이에, 최근에는 신경망 기법을 이용한 얼굴 인식 방식이 널리 연구되고 있으나 아직 얼굴인식 시스템이 운용되는 환경에 따라 신뢰할 수 있는 성능을 보여주지 못하고 있는 실정이다. 또한, 얼굴인식도 지문 및 음성과 마찬가지로 사진 등을 통해서 외부에서 쉽게 복제 및 도용할 수 있기 때문에 보안성에 문제점이 있다.Recently, although face recognition method using neural network technique has been widely studied, it is not yet possible to show reliable performance depending on the environment in which the face recognition system is operated. In addition, face recognition can be copied and smuggled easily from the outside through photographs as well as fingerprints and voice, thus posing a problem in security.

따라서, 사용자의 이용에 불편 없이 인증절차를 수행할 수 있으면서도 보안성이 강화된 얼굴 인식방안이 요구된다.Accordingly, there is a need for a face recognition method that can perform an authentication procedure without inconvenience of user's use, but has enhanced security.

특허문헌 1 : 한국등록특허 제1087698호 (2011.11.30. 공고)Patent Document 1: Korean Registered Patent No. 1087698 (issued on November 30, 2011)

본 발명의 실시 예는 사용자만 인식하고 있는 비밀정보를 이용하여 변형된 얼굴정보를 사용자 인식정보로 등록하고 이를 통한 사용자 인식을 수행함으로써 상기 비밀정보에 의해 보안성이 강화된 얼굴 인식 시스템 및 그 방법을 제공하는 것을 목적으로 한다.The embodiment of the present invention is a face recognition system in which security is enhanced by the secret information by registering modified face information as user recognition information using secret information recognized only by the user and performing user recognition through the same, And to provide the above objects.

또한, 본 발명의 실시 예는 별도의 저장이 필요 없는 사용자의 비밀정보를 통해 변형된 얼굴정보를 인식정보로 활용하여 외부 유출에 의한 프라이버시 침해 및 도용을 방지할 수 있는 얼굴 인식 시스템 및 그 방법을 제공하고자 한다.In addition, the embodiment of the present invention provides a face recognition system and method for preventing privacy infringement and theft by using the modified face information as identification information through secret information of a user that does not require additional storage .

본 발명의 일 측면에 따르면, 얼굴 인식 시스템은, 요청자의 얼굴 인식을 위한 얼굴정보와 비밀정보를 수집하는 정보 수집부; 상기 비밀정보를 이용하여 상기 얼굴정보를 변형시켜 요청자의 변형된 얼굴정보를 생성하는 얼굴 인식부; 사전에 등록된 사용자의 변환된 얼굴정보를 저장하는 데이터베이스부; 및 상기 사용자의 변형된 얼굴정보와 상기 요청자의 변형된 얼굴정보를 매칭하여 일치 여부에 따른 사용자 인식결과를 판단하는 제어부를 포함한다.According to an aspect of the present invention, a face recognition system includes an information collection unit for collecting face information and secret information for face recognition of a requestor; A facial recognition unit for modifying the face information using the secret information to generate modified face information of a requestor; A database unit for storing converted face information of a user registered in advance; And a controller for matching the modified face information of the user with the modified face information of the requestor to determine a user recognition result according to the matching.

또한, 상기 정보 수집부는, 다양한 인터페이스를 통해 상기 사용자의 패스워드, 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나의 비밀정보를 수집 하며, 상기 비밀정보는 단독 또는 복합적으로 사용할 수 있다.The information collecting unit collects secret information of at least one of the user's password, pattern information, voice recognition information, behavior pattern, and token through various interfaces, and the secret information may be used alone or in combination.

또한, 상기 얼굴 인식부는, 상기 비밀정보를 해시 및 암호화 중 적어도 하나의 변환 과정을 거쳐 사용할 수 있다.In addition, the face recognizing unit may use at least one of the hashing and encryption of the secret information.

또한, 상기 얼굴 인식부는, 상기 사용자의 비밀정보를 이용하여 얼굴정보를 변형시켜 상기 사용자의 변형된 얼굴정보를 등록할 수 있다.In addition, the face recognition unit may modify the face information using the secret information of the user to register the modified face information of the user.

또한, 상기 얼굴 인식부는, 상기 비밀정보를 이용하여 상기 얼굴정보를 치환, 변경, 왜곡, 삭제, 추가 중 적어도 하나의 패턴으로 변형할 수 있다.In addition, the face recognition unit may transform the face information into at least one of replacement, modification, distortion, deletion, and addition using the secret information.

또한, 상기 얼굴 인식부는, 상기 비밀정보의 종류와 입력 값에 따라서 다양한 상기 패턴의 고유한 얼굴 특징이 나타나도록 상기 변형된 얼굴정보를 생성할 수 있다.The face recognition unit may generate the modified face information so that unique face characteristics of various patterns are displayed according to the type of secret information and the input value.

또한, 상기 제어부는, 상기 요청자의 얼굴 인식을 위한 사용자 입력메뉴를 제공하여 상기 요청자 비밀정보와 얼굴정보를 입력 받고, 상기 요청자의 변형된 얼굴 특징 검출에 따라 변형된 요청자 얼굴정보를 검출할 수 있다.In addition, the control unit may receive the requestor's secret information and face information by providing a user input menu for face recognition of the requestor, and detect the modified requestor face information according to the modified face feature detection of the requestor .

또한, 상기 제어부는, 등록된 상기 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보가 소정 비율 초과로 일치하면 사용자 인증에 성공한 것으로 판단하고, 상기 소정 비율 이하로 불일치하면 사용자 인증에 실패한 것으로 판단할 수 있다.The control unit may determine that the user authentication is successful if the modified face information of the requestor matches the modified face information of the registered user, exceeds a predetermined ratio, and if the mismatch is less than the predetermined ratio, .

한편, 본 발명의 일 측면에 따른, 단말기의 얼굴 인식 방법은, 요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수집하는 단계; 상기 요청자 얼굴정보를 요청자 비밀정보를 이용하여 변형시켜 요청자의 변형된 얼굴정보를 생성하는 단계; 및 사전에 등록된 사용자의 변형된 얼굴정보와 상기 요청자의 변형된 얼굴정보를 매칭하여 일치 여부에 따른 사용자 인식결과를 판단하는 단계를 포함한다.According to an aspect of the present invention, a method for recognizing a face of a terminal includes collecting requestor face information and secret information for face recognition of a requestor; Generating modified face information of a requestor by modifying the requestor face information using requestor secret information; And a step of matching the modified face information of the user registered in advance with the modified face information of the requestor to determine the user recognition result according to the matching.

또한, 상기 수집하는 단계 이전에는, 사용자 인식정보 등록을 위한 사용자 얼굴정보와 사용자 비밀정보를 수집하는 단계; 상기 사용자 얼굴정보를 상기 사용자 비밀정보를 이용하여 변형시켜 사용자의 변형된 얼굴정보를 생성하는 단계; 및 상기 사용자의 변환된 얼굴정보를 등록하는 단계를 더 포함할 수 있다.Before the step of collecting, collecting user face information and user secret information for user recognition information registration; Generating modified face information of a user by modifying the user face information using the user secret information; And registering the converted face information of the user.

또한, 상기 등록하는 단계는, 상기 사용자의 변환된 얼굴정보를 사용자 인식정보로 신규 등록하거나 기존에 등록된 상기 사용자 인식정보가 존재하는 경우 사용자 설정에 따라 상기 사용자의 변환된 얼굴정보로 변경하여 재등록 할 수 있다.In addition, the registering step may include registering the converted face information of the user as the user recognition information, or changing the face information converted by the user according to the user setting if the user recognition information registered in advance exists You can register.

또한, 상기 변형된 얼굴정보를 생성하는 단계는, 상기 얼굴정보를 상기 비밀정보로 입력된 패스워드, 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형할 수 있다.The generating of the modified face information may be performed by using at least one of the password, the pattern information, the voice recognition information, the behavior pattern, and the token input by the face information as the secret information, either singly or in combination .

또한, 상기 사용자 인식결과를 판단하는 단계는, 상기 요청자 비밀정보를 이용하여 변형된 얼굴패턴을 인식하고, 상기 변형된 얼굴패턴에 따른 요청자의 변형된 얼굴 특징을 검출하는 단계를 포함할 수 있다.The step of determining the user recognition result may include recognizing a modified face pattern using the requestor's secret information, and detecting a modified face feature of the requestor according to the modified face pattern.

또한, 상기 사용자 인식결과를 판단하는 단계는, 상기 등록된 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보의 유사도가 소정 비율을 초과하면 사용자 인식에 성공한 것으로 판단하고, 상기 소정 비율 이하이면 사용자 인식에 실패한 것으로 판단할 수 있다.The determining of the user recognition result may include determining that the user recognition is successful if the degree of similarity of the changed face information of the requester with respect to the modified face information of the registered user exceeds a predetermined ratio, It can be determined that the user recognition has failed.

또한, 상기 수집하는 단계는, 상기 요청자의 타 단말기로부터 상기 요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수신하는 단계를 포함하고, 상기 사용자 인식결과를 판단하는 단계는, 상기 사용자 인식결과를 상기 타 단말기로 전송하는 단계를 포함할 수 있다.The collecting may further include receiving requestor face information and secret information for face recognition of the requestor from the other terminal of the requestor, and the step of determining the user recognition result may include: To the other terminal.

한편, 본 발명의 다른 일 측면에 따른 단말기의 얼굴 인식 방법은, 요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수집하는 단계; 상기 요청자 얼굴정보에서 추출한 얼굴 특징을 요청자 비밀정보를 이용하여 변형시켜 요청자의 변형된 얼굴정보를 생성하는 단계; 및 사전에 등록된 사용자의 변형된 얼굴정보와 상기 요청자의 변형된 얼굴정보를 매칭하여 일치 여부에 따른 사용자 인식결과를 판단하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method of recognizing a face of a terminal, comprising: collecting requestor face information and secret information for face recognition of a requestor; Generating modified face information of the requestor by modifying the face feature extracted from the requestor face information using the requestor's secret information; And a step of matching the modified face information of the user registered in advance with the modified face information of the requestor to determine the user recognition result according to the matching.

또한, 상기 수집하는 단계 이전에는, 사용자 인식정보 등록을 위한 사용자 얼굴정보와 사용자 비밀정보를 수집하는 단계; 상기 사용자 얼굴정보에서 추출한 얼굴 특징을 상기 사용자 비밀정보를 이용하여 변형시켜 사용자의 변형된 얼굴정보를 생성하는 단계; 및 상기 사용자의 변환된 얼굴정보를 등록하는 단계를 더 포함할 수 있다.Before the step of collecting, collecting user face information and user secret information for user recognition information registration; Generating modified face information of the user by modifying the face feature extracted from the user face information using the user secret information; And registering the converted face information of the user.

또한, 상기 변형된 얼굴정보를 생성하는 단계는, 상기 얼굴 특징을 상기 요청자 비밀정보로 입력된 패스워드, 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형할 수 있다.The generating of the modified face information may be performed by using at least one of the password, the pattern information, the voice recognition information, the behavior pattern, and the token input as the requestor's secret information, either singly or in combination. have.

또한, 상기 사용자 인식결과를 판단하는 단계는, 상기 등록된 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보의 유사도가 소정 비율을 초과하면 사용자 인식 성공으로 판단하고, 상기 소정 비율 이하이면 사용자 인식 실패로 판단할 수 있다.The determining of the user recognition result may include determining that the user recognition is successful if the degree of similarity of the deformed face information of the requester with respect to the modified face information of the registered user exceeds a predetermined ratio, It can be determined that the user recognition has failed.

또한, 상기 수집하는 단계는, 상기 요청자의 타 단말기로부터 상기 요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수신하는 단계를 포함하고, 상기 사용자 인식결과를 판단하는 단계는, 상기 사용자 인식결과를 상기 타 단말기로 전송하는 단계를 포함할 수 있다.The collecting may further include receiving requestor face information and secret information for face recognition of the requestor from the other terminal of the requestor, and the step of determining the user recognition result may include: To the other terminal.

본 발명의 실시 예에 따르면, 사용자만의 비밀정보를 얼굴 인식 기술과 융합하여 인식성능과 보안성이 향상된 얼굴 인식기술을 제공할 수 있다.According to the embodiment of the present invention, it is possible to provide a face recognition technology with improved recognition performance and security by combining confidential information of only a user with face recognition technology.

또한, 사용자의 비밀정보를 사용하여 사용자만이 고유하게 변경할 수 있는 변형된 얼굴정보를 얼굴 인식정보로 활용함으로써 사진을 통한 복제 및 도용을 방지하고 보안성을 강화할 수 있다.In addition, by using the secret information of the user, the modified face information which can be changed uniquely by the user can be used as the face recognition information, thereby preventing duplication and theft through the picture and enhancing the security.

그리고, 사용자가 인증을 위해 별도로 소지해야 하는 물건과 복잡한 절차 없이 간단한 비밀정보와 얼굴정보 입력 만으로도 보안성이 강화된 사용자 인증기술을 제공할 수 있다.Further, it is possible to provide a user authentication technique with enhanced security even by inputting simple secret information and facial information without a complicated procedure and objects to be separately owned by the user for authentication.

도 1은 본 발명의 실시 예에 따른 얼굴 인식 시스템이 적용 가능한 네트워크 구성도이다.
도 2는 본 발명의 실시 예에 따른 얼굴 인식 시스템의 구성을 개략적으로 나타낸 블록도이다.
도 3은 본 발명의 실시 예에 따른 비밀정보에 따라서 변형된 얼굴정보의 예시를 보여준다.
도 4는 본 발명의 제1 실시 예에 따른 보안성이 강화된 얼굴 인식 방법을 개략적으로 나타낸 흐름도이다.
도 5는 본 발명의 제2 실시 예에 따른 보안성이 강화된 얼굴 인식 방법을 개략적으로 나타낸 흐름도이다.
도 6은 본 발명의 제3 실시 예에 따른 사용자 단말기와 서버의 연동에 따른 보안성이 강화된 얼굴 인식 방법을 개략적으로 나타낸 흐름도이다.1 is a network configuration diagram to which a face recognition system according to an embodiment of the present invention is applicable.
2 is a block diagram schematically illustrating a configuration of a face recognition system according to an embodiment of the present invention.
FIG. 3 shows an example of modified face information according to secret information according to an embodiment of the present invention.
4 is a flowchart schematically illustrating a security-enhanced face recognition method according to the first embodiment of the present invention.
5 is a flowchart schematically illustrating a security-enhanced face recognition method according to a second embodiment of the present invention.
FIG. 6 is a flowchart schematically illustrating a security-enhanced face recognition method according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In order to clearly illustrate the present invention, parts not related to the description are omitted, and similar parts are denoted by like reference characters throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.Throughout the specification, when an element is referred to as "comprising ", it means that it can include other elements as well, without excluding other elements unless specifically stated otherwise. Also, the terms " part, "" module," and " module ", etc. in the specification mean a unit for processing at least one function or operation and may be implemented by hardware or software or a combination of hardware and software have.

명세서 전체에서, 사용자 인식정보는 정당한 사용자의 인증을 위한 정보로써 인증정보와 동일한 의미로 사용될 수 있다.Throughout the specification, the user identification information can be used in the same meaning as the authentication information as information for authenticating a legitimate user.

명세서 전체에서, '사용자'는 정당한 사용자를 의미하고, '요청자'는 사용자 인증을 받기 위한 얼굴 인식 요청자로써 정당한 사용자 여부가 인증되지 않은 인간을 의미한다. In the entire specification, 'user' means a legitimate user, and 'requester' means a face recognition requester for receiving user authentication, and a legitimate user is not authenticated.

따라서, 이하 동일인이라도 사용자 인식정보 등록 과정에서는 '사용자'로 명명하고, 사용자 인식/인증을 요청하는 과정에서는 '요청자'로 명명하며, 상기 '요청자'가 정당한 사용자로 인증 받은 후에는 '사용자'로 명명한다.Therefore, even if the same user is the same person, the user identification information is registered as 'user' in the process of registering the user identification information and is referred to as a 'requestor' in the process of requesting user recognition / authentication, and after the 'requestor' is authenticated as a legitimate user, Named.

이제 본 발명의 실시 예에 따른 얼굴 인식 시스템 및 그 방법에 대하여 도면을 참조로 하여 상세하게 설명한다.Now, a face recognition system and method according to an embodiment of the present invention will be described in detail with reference to the drawings.

앞선 배경기술 부분에서 설명한 것과 같이, 얼굴인식 기술은 사용자 친화적인 측면에서 바이오 인식 기술 중 차세대 기술로 각광받고 있지만, 아직 단독 인증 모듈로 사용되기에는 성능적인 측면에서 산업의 요구사항을 만족시키지 못하고 있다. As described in the background section, the face recognition technology is regarded as the next generation technology among the biometric recognition technologies in terms of the user-friendly aspect. However, since it is used as a single authentication module, the face recognition technology does not satisfy the requirements of the industry in terms of performance .

따라서, 이하 본 발명의 실시 예에서는 기존에 검증된 다른 인증기술과 융합된 얼굴 인식기술을 통해 사용자 편리성을 최대한 보장하면서 고성능을 제공할 수 있는 방안에 대해 설명한다.Therefore, in the embodiment of the present invention, a description will be given of a method for providing high performance while ensuring maximum user convenience through face recognition technology fused with other authentication technologies that have been verified.

도 1은 본 발명의 실시 예에 따른 얼굴 인식 시스템이 적용 가능한 네트워크 구성도이다.1 is a network configuration diagram to which a face recognition system according to an embodiment of the present invention is applicable.

첨부된 도 1을 참조하면, 본 발명의 실시 예에 따른 얼굴 인식 시스템(100)은 사용자만이 인식하고 있는 비밀정보를 사용하여 변형된 얼굴정보를 사용자 인식정보로 등록하고, 등록된 상기 인식정보를 사용하여 정당한 사용자를 인식한다.1, a face recognition system 100 according to an embodiment of the present invention registers modified face information as user recognition information using confidential information recognized only by a user, To recognize legitimate users.

얼굴 인식 시스템(100)은 사용자 단말기(10), 서비스 서버(20) 및 인증 서버(30)에 적용될 수 있으며, 그 실시 및 서비스 형태에 따라 전체 또는 일부 기능이 상호 연동되도록 설치될 수 있다.The face recognition system 100 may be applied to the user terminal 10, the service server 20, and the authentication server 30, and all or some of the functions may be interlocked with each other depending on the implementation and service type.

예를 들면, 사용자 단말기(10)는 스마트폰, 휴대폰, 컴퓨터, 노트북, 테블릿, 웨어러블 단말기 등과 같은 개인화된 정보통신 단말기일 수 있으며, 여기에 탑재된 얼굴 인식 시스템(100)은 해당 정보통신 단말기의 사용을 위한 사용자 인식을 수행할 수 있다.For example, the user terminal 10 may be a personalized information communication terminal such as a smart phone, a mobile phone, a computer, a notebook, a tablet, a wearable terminal, and the like. Lt; RTI ID = 0.0 > user < / RTI >

또한, 서비스 서버(20)는 네트워크를 통해 클라이언트 기반 서비스를 제공하는 정보통신 단말기일 수 있다.In addition, the service server 20 may be an information communication terminal that provides a client-based service through a network.

서비스 서버(20)는 사용자 단말기(10)와 연동하여 접속 및 해당 서비스 제공을 위한 사용자 비밀정보를 이용하여 변형된 얼굴정보를 인식정보로 등록하고, 상기 등록된 인식정보를 사용하여 사용자 단말기(10)의 사용자 인식(인증)을 수행할 수 있다.The service server 20 registers the modified face information as recognition information by using the user secret information for connection and service provision in cooperation with the user terminal 10 and transmits the modified face information to the user terminal 10 (Authentication) of the user.

또한, 인증 서버(30)는 사용자 비밀정보를 이용하여 변형된 얼굴정보를 인식정보로 등록하고, 상기 등록된 인식정보를 사용하여 사용자 단말기(10)와 서비스 서버(20)간의 접속 및 서비스 제공을 위한 사용자 인증을 수행할 수 있다.Also, the authentication server 30 registers the modified face information as recognition information using the user secret information, and provides connection and service provision between the user terminal 10 and the service server 20 using the registered recognition information Lt; / RTI >

한편, 아래의 도 2를 통하여 얼굴 인식 시스템(100)의 구성을 설명하되, 설명의 편의와 이해를 돕기 위해 특별한 기재가 없는 한 사용자 단말기(10)에 적용된 것을 위주로 설명한다.The configuration of the face recognition system 100 will be described with reference to FIG. 2 below. However, in order to facilitate the understanding and understanding of the present invention, the description will be focused on the application to the user terminal 10 unless otherwise specified.

도 2는 본 발명의 실시 예에 따른 얼굴 인식 시스템의 구성을 개략적으로 나타낸 블록도이다.2 is a block diagram schematically illustrating a configuration of a face recognition system according to an embodiment of the present invention.

첨부된 도 2을 참조하면, 본 발명의 실시 예에 따른 얼굴 인식 시스템(100)은 정보 수집부(110), 얼굴 인식부(120), 데이터베이스부(130) 및 제어부(140)를 포함한다.2, the face recognition system 100 includes an information collecting unit 110, a face recognizing unit 120, a database unit 130, and a controller 140.

정보 수집부(110)는 사용자 단말기(10)에 구비된 다양한 인터페이스를 통해 사용자 인식정보 등록을 위한 비밀정보와 얼굴정보를 수집한다. The information collecting unit 110 collects confidential information and face information for user identification information registration through various interfaces provided in the user terminal 10.

또한, 정보 수집부(110)는 얼굴 인식 과정에서의 얼굴 인식 요청자(이하, 요청자라 명명함)를 인식하기 위한 비밀정보와 얼굴정보를 수집할 수 있다.Also, the information collecting unit 110 may collect confidential information and face information for recognizing a face recognition requester (hereinafter referred to as a requesting person) in the face recognition process.

상기 다양한 인터페이스는 터치스크린, 키보드(키패드), 음성인식 수단, 카메라 및 통신 인터페이스 등을 포함하여 상기 비밀정보를 안전한 방식으로 입력한다. The various interfaces include a touch screen, a keyboard (keypad), a voice recognition means, a camera and a communication interface, etc., to input the secret information in a secure manner.

상기 안전한 방식으로 입력되는 비밀정보는 상기 다양한 인터페이스를 통해 입력된 사용자의 패스워드(PW), 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 포함하며, 단독 또는 복합적으로 사용될 수 있다.The secret information input in the secure manner includes at least one of a user's password (PW), pattern information, voice recognition information, an action pattern, and a token input through the various interfaces, and may be used singly or in combination.

정보 수집부(110)는 카메라를 통해 촬영된 사용자의 얼굴정보(얼굴 이미지)를 수집한다.The information collecting unit 110 collects the face information (face image) of the user photographed through the camera.

서비스 서버(20) 및 인증 서버(30)의 경우에는 사용자 단말기(10)를 통해 입력된 비밀정보 및 얼굴정보를 수신하여 취득할 수 있다.In the case of the service server 20 and the authentication server 30, secret information and face information input through the user terminal 10 can be received and acquired.

한편, 얼굴 인식부(120)는 정보 수집부(110)에서 수집된 비밀정보를 이용하여 얼굴정보를 변형시켜 변형된 얼굴정보를 생성한다.On the other hand, the face recognition unit 120 generates modified face information by modifying the face information using the secret information collected by the information collection unit 110.

이 때, 얼굴 인식부(120)는 사용자 인식정보 등록과정에서 사용자 비밀정보를 이용하여 사용자 얼굴정보를 치환, 변경(왜곡), 삭제, 추가 중 적어도 하나의 방법으로 변형함으로써 사용자의 변형된 얼굴정보를 등록할 수 있다.At this time, the face recognition unit 120 transforms the user's face information into at least one of replacement, modification (distortion), deletion, and addition using the user secret information in the process of registering the user recognition information, Can be registered.

또한, 얼굴 인식부(120)는 위와 같은 방식으로 얼굴인식 요청자의 인식 과정에서 요청자 비밀정보를 이용하여 요청자 얼굴정보를 변형함으로써 요청자의 변형된 얼굴정보를 생성할 수 있다. In addition, the face recognition unit 120 may generate the modified face information of the requestor by modifying the requestor face information using the requestor's secret information in the recognition process of the face recognition requester.

예컨대, 도 3은 본 발명의 실시 예에 따른 비밀정보에 따라서 변형된 얼굴정보의 예시를 보여준다.For example, FIG. 3 shows an example of modified face information according to secret information according to an embodiment of the present invention.

첨부된 도 3을 참조하면, 본 발명의 실시 예에 따른 얼굴 인식부(120)가 사용자 또는 요청자의 얼굴정보를 해당 비밀정보를 이용하여 다양하게 변형시킨 예를 나타낸다. 3, an example in which the face recognition unit 120 according to an embodiment of the present invention variously modifies face information of a user or a requestor using the secret information.

얼굴 인식부(120)는 상기 얼굴정보를 상기 비밀정보로 입력되는 패스워드(PW), 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 등을 단독 또는 복합적으로 사용하여 변형할 수 있다.The face recognizing unit 120 can modify the face information using a password PW, pattern information, voice recognition information, an action pattern, a token, etc., which are input as the secret information, singly or in combination.

예컨대, 변형된 얼굴정보#1의 경우 상기 얼굴정보를 가로 세로의 복수의 영역으로 구획하여 분할하고, 분할된 이미지들의 위치를 치환하여 변형된 패턴의 얼굴정보가 생성될 수 있다.For example, in the case of the modified face information # 1, the face information may be divided into a plurality of areas in the horizontal and vertical directions, and the face information of the modified pattern may be generated by replacing the positions of the divided images.

또한, 변형된 얼굴정보#2의 경우 상기 얼굴정보를 상하로 구획하여 치환하되, 일부 구획된 이미지가 복사되어 추가되거나 삭제하여 복합적으로 변형된 패턴의 얼굴정보가 생성될 수 있다.In the case of the modified face information # 2, the face information may be generated by patterning the face information by vertically dividing the face information into a plurality of divided images.

또한, 변형된 얼굴정보#n의 경우 상기 얼굴정보의 일부 특징부를 왜곡하여 변환하고, 일부 특징부를 삭제하거나 다른 위치에 추가하여 복합적으로 변형된 패턴의 얼굴정보가 생성될 수 있다.In the case of the modified face information #n, the face information of a complexly modified pattern can be generated by distorting and converting some feature parts of the face information and deleting some feature parts or adding them to other positions.

이와 같이, 얼굴 인식부(120)의 얼굴정보에 대한 변형은 상기 비밀정보의 종류와 입력 값의 변수에 따라서 다양한 패턴의 고유한 얼굴 특징이 나타나도록 변형될 수 있다.As described above, the modification of the face information of the face recognition unit 120 can be modified so that unique facial features of various patterns are displayed according to the types of the secret information and the input value variables.

즉, 사용자가 얼굴정보를 비밀정보를 1, 2, 3, 4의 P/W로 입력했을 경우의 변형된 얼굴정보와 상기 비밀정보를 5, 6, 7, 8의 P/W로 입력했을 경우의 변형된 얼굴정보를 서로 다르게 생성할 수 있다. That is, when the user inputs the face information and the modified face information when the confidential information is input by the P / W of 1, 2, 3, 4 and the secret information by P / W of 5, 6, 7 and 8 The modified face information can be generated differently.

또한, 사용자가 얼굴정보를 비밀정보를 1, 2, 3, 4의 P/W로 입력했을 경우의 변형된 얼굴정보와 비밀정보를 1, 2, 3, 4의 P/W와 이외의 다른 비밀정보를 복합적으로 사용했을 경우의 변형된 얼굴정보를 서로 다르게 생성할 수 있다. In addition, when the user inputs the face information and the modified face information and secret information in the case of inputting the confidential information with P / W of 1, 2, 3, 4, P / W of 1, 2, 3, It is possible to generate modified face information differently when information is used in combination.

얼굴 인식부(120)는 상기 얼굴정보 변형에 사용되는 비밀정보를 사용자가 입력한 그대로 활용하거나 해시, 치환, 암호화를 통해 별도의 변환 과정을 거쳐 사용할 수 있다.The face recognition unit 120 may utilize the secret information used for transforming the face information as it is input by the user or may be used after being subjected to another conversion process through hash, substitution, and encryption.

데이터베이스부(130)는 본 발명의 실시 예에 따른 보안성이 강화된 얼굴 인식 시스템(100)의 운용을 위한 각종 프로그램 및 정보를 저장하고, 그 운용에 따라 생성되는 정보를 저장한다. The database unit 130 stores various programs and information for operating the security-enhanced face recognition system 100 according to an embodiment of the present invention, and stores information generated according to the operation.

데이터베이스부(130)는 얼굴 인식부(120)에서 처리된 사용자의 변환된 얼굴정보를 저장하고, 해당 사용자의 얼굴 인증 요청 시 사용자 인식정보로 제공할 수 있다.The database unit 130 stores the converted face information of the user processed by the face recognition unit 120 and provides the converted face recognition information when the face authentication request of the user is requested.

제어부(140)는 본 발명의 실시 예에 따른 보안성이 강화된 얼굴 인식을 위한 상기 각부의 전반적인 동작을 제어하며, 등록된 상기 사용자의 인식정보를 사용하여 사용자 인식을 수행한다.The control unit 140 controls the overall operation of each part for enhanced face recognition according to the embodiment of the present invention and performs user recognition using the registered recognition information of the user.

제어부(140)는 얼굴 인식 시스템(100)이 탑재된 정보통신 단말기의 중앙 처리 장치일 수 있으며, 각부의 동작을 위해 마련된 하드웨어와 프로그램을 실행하여 실질적인 그 동작을 제어할 수 있다.The control unit 140 may be a central processing unit of the information communication terminal on which the face recognition system 100 is mounted. The control unit 140 may execute the hardware and the program for the operation of each unit to control the operation thereof.

제어부(140)는 보안성이 강화된 얼굴 인식 등록을 위한 사용자 입력메뉴를 제공하여 사용자 비밀정보와 얼굴정보를 입력 받고, 사용자의 변형된 얼굴 특징 검출에 따라 변형된 얼굴정보로 등록할 수 있다.The control unit 140 receives the user secret information and the face information by providing a user input menu for security-enhanced face recognition registration, and registers the modified face information according to the user's modified face feature detection.

또한, 제어부(140)는 요청자의 얼굴 인식을 위한 사용자 입력메뉴를 제공하여 요청자 비밀정보와 얼굴정보를 입력 받고, 요청자의 변형된 얼굴 특징 검출에 따라 요청자의 변형된 얼굴정보를 검출한다.In addition, the control unit 140 provides a user input menu for face recognition of the requestor, receives the requestor's secret information and face information, and detects the modified face information of the requestor according to the modified face feature detection of the requestor.

그리고, 제어부(140)는 등록된 사용자의 변형된 얼굴정보와 요청자의 변형된 얼굴정보를 매칭하여 일치 여부에 따른 인식결과를 판단할 수 있다.The control unit 140 may match the modified face information of the registered user with the modified face information of the requester to determine the recognition result according to the match.

예컨대, 제어부(140)는 등록된 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보가 소정 비율(예; 80%)을 초과하면 일치하여 사용자 인증에 성공한 것으로 판단하고, 상기 소정 비율 이하이면 불일치하여 사용자 인증에 실패한 것으로 판단할 수 있다.For example, when the modified face information of the requestor for the modified face information of the registered user exceeds a predetermined ratio (e.g., 80%), the control unit 140 determines that the user authentication is successful, It can be determined that the user authentication has failed.

한편, 전술한 얼굴 인식 시스템(100)의 구성을 바탕으로 하는 본 발명의 실시 예에 따른 보안성이 강화된 얼굴 인식 방법을 다음의 도 5를 통해 설명한다. A method for enhancing the security of the face according to an embodiment of the present invention based on the configuration of the face recognition system 100 will be described with reference to FIG.

다만, 얼굴 인식 시스템(100)의 각 구성은 그 기능에 따라 세부적으로 더 분리되거나 하나의 시스템으로 통합될 수 있으므로, 이하 보안성이 강화된 얼굴 인식 방법을 설명에 있어서의 그 주체를 얼굴 인식 시스템(100)으로하여 설명한다.However, since each configuration of the face recognition system 100 can be further separated or integrated into one system according to its function, the subject of the explanation of the face recognition method with enhanced security will be referred to as a face recognition system (100).

[제1 실시 예][First Embodiment]

도 4는 본 발명의 제1 실시 예에 따른 보안성이 강화된 얼굴 인식 방법을 개략적으로 나타낸 흐름도이다.4 is a flowchart schematically illustrating a security-enhanced face recognition method according to the first embodiment of the present invention.

첨부된 도 4를 참조하면, 본 발명의 실시 예에 따른 얼굴 인식 방법은 크게 사용자의 변형된 얼굴정보 등록과정과 요청자의 변형된 얼굴정보 인식과정으로 구분하여 설명할 수 있다.Referring to FIG. 4, a face recognition method according to an exemplary embodiment of the present invention can be roughly divided into a user's modified face information registration process and a requestor's modified face information recognition process.

먼저, 상기 등록과정을 살펴보면, 얼굴 인식 시스템(100)은 카메라 촬영모드를 이용한 사용자의 얼굴정보 입력메뉴를 화면에 표시하여 사용자 얼굴정보를 입력 받는다(S101).First, in the registration process, the face recognition system 100 displays the user's face information input menu using the camera photographing mode on the screen, and receives user face information (S101).

또한, 얼굴 인식 시스템(100)은 비밀정보 입력메뉴를 화면에 표시하여 다양한 인터페이스를 통한 사용자 비밀정보를 입력 받는다(S102). In addition, the face recognition system 100 displays a secret information input menu on the screen and receives user secret information through various interfaces (S102).

이 때, 얼굴 인식 시스템(100)은 사용자 얼굴정보 입력 메뉴와 비밀정보 입력 메뉴를 각각의 화면에 단계적으로 표시하거나 분할된 한 화면에 표시하여 동시에 입력 받을 수 있다.At this time, the face recognition system 100 can display the user face information input menu and the secret information input menu on the respective screens step by step or on a divided screen, and receive them simultaneously.

얼굴 인식 시스템(100)은 사용자 얼굴정보를 입력된 비밀정보를 이용하여 변형한다(S103). The face recognition system 100 transforms the user's face information using the inputted secret information (S103).

이 때, 얼굴 인식 시스템(100)은 상기 사용자 얼굴정보를 상기 비밀정보로 입력된 패스워드(PW), 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형할 수 있다.At this time, the face recognition system 100 can modify the user face information by using at least one of the password (PW), pattern information, speech recognition information, action pattern, and token input as the secret information, have.

얼굴 인식 시스템(100)은 상기 변형된 얼굴정보를 분석하여 사용자의 변형된 얼굴 특징을 검출한다(S104). 얼굴 인식 시스템(100)은 상기 사용자 비밀정보를 이용하여 변형된 얼굴패턴을 인식하고, 상기 변형된 얼굴패턴에 따라 사용자의 변형된 얼굴 특징을 검출할 수 있다.The face recognition system 100 analyzes the deformed face information and detects the deformed facial features of the user (S104). The face recognition system 100 recognizes the modified face pattern using the user secret information, and can detect the user's modified face characteristics according to the modified face pattern.

얼굴 인식 시스템(100)은 상기 변형된 얼굴 특징에 따른 사용자의 변형된 얼굴정보를 사용자 인식정보로 데이터베이스부(130)에 등록한다(S105).The face recognition system 100 registers the modified face information of the user according to the modified face feature as user recognition information in the database unit 130 (S105).

이 때, 얼굴 인식 시스템(100)은 상기 사용자 인식정보를 신규로 등록할 수 있으며, 기존에 등록된 사용자 인식정보가 존재하는 경우 사용자 설정에 따라 상기 변형된 얼굴정보로 변경하여 재등록 및 유효날짜를 갱신 할 수 있다.At this time, the face recognition system 100 can newly register the user recognition information. If existing user recognition information exists, the face recognition system 100 changes the modified face information according to the user setting, Can be updated.

한편, 위와 같이 사전에 사용자의 변형된 얼굴정보를 사용자 인식정보로 등록된 이후에 요청자의 인식과정을 살펴보면, 얼굴 인식 시스템(100)은 카메라 촬영모드를 이용한 요청자의 얼굴정보 입력메뉴를 화면에 표시하여 요청자 얼굴정보를 입력 받는다(S106).If the user's modified face information is registered in advance as user recognition information, the face recognition system 100 displays the face information input menu of the requestor using the camera shooting mode on the screen And receives the requestor's face information (S106).

또한, 얼굴 인식 시스템(100)은 비밀정보 입력메뉴를 화면에 표시하여 다양한 인터페이스를 통한 요청자 비밀정보를 입력 받는다(S107). In addition, the face recognition system 100 displays a secret information input menu on the screen and receives requestor secret information through various interfaces (S107).

얼굴 인식 시스템(100)은 상기 요청자 얼굴정보를 상기 요청자 비밀정보를 이용하여 변형한다(S108). The face recognition system 100 modifies the requestor's face information using the requestor's secret information (S108).

이때도 마찬가지로, 얼굴 인식 시스템(100)은 상기 요청자 얼굴정보를 상기 요청자 비밀정보로 입력된 패스워드(PW), 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형할 수 있다.At this time, the face recognition system 100 may also use the requestor's face information, such as a password (PW), pattern information, speech recognition information, a behavior pattern, and a token input as the requestor's secret information, can do.

얼굴 인식 시스템(100)은 상기 요청자의 변형된 얼굴정보를 분석하여 요청자의 변형된 얼굴 특징을 검출한다(S109). The face recognition system 100 analyzes the deformed face information of the requester and detects the deformed facial features of the requester (S109).

얼굴 인식 시스템(100)은 상기 요청자 비밀정보를 이용하여 변형된 얼굴패턴을 인식하고, 상기 변형된 얼굴패턴에 따라 요청자의 변형된 얼굴 특징을 검출할 수 있다.The face recognition system 100 recognizes the modified face pattern using the requestor's secret information, and can detect the modified face feature of the requestor according to the modified face pattern.

얼굴 인식 시스템(100)은 상기 변형된 얼굴 특징에 따른 요청자의 변형된 얼굴정보를 등록된 사용자의 변형된 얼굴정보와 매칭하여 일치 여부에 따른 사용자 인식을 수행한다(S110).The face recognition system 100 matches the deformed face information of the requestor according to the modified face feature with the modified face information of the registered user to perform user recognition according to whether the face information is identical or not (S110).

이 때, 얼굴 인식 시스템(100)은 상기 등록된 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보의 유사도가 소정 비율을 초과하면 사용자 인식(인증)에 성공한 것으로 판단하고, 상기 소정 비율 이하이면 사용자 인식(인증)에 실패한 것으로 판단할 수 있다.At this time, the face recognition system 100 determines that the user recognition (authentication) is successful when the degree of similarity of the deformed face information of the requester with respect to the modified face information of the registered user exceeds a predetermined ratio, Or less, it can be determined that the user recognition (authentication) has failed.

[제2 실시 예][Second Embodiment]

이상에서는 본 발명의 제1 실시 예에 따른 얼굴 인식 방법에 대하여 설명하였으나, 본 발명은 이에 한정되는 것은 아니며 그 외의 다양한 변경이 가능하다.Although the face recognition method according to the first embodiment of the present invention has been described above, the present invention is not limited thereto, and various other modifications are possible.

예를 들면, 앞서 설명된 본 발명의 제1 실시 예에서의 변형된 얼굴정보는 사용자 또는 요청자의 입력으로 주어진 얼굴정보를 비밀정보를 사용하여 변형하는 것으로 설명하였다. For example, the modified face information in the first embodiment of the present invention described above is described as modifying facial information given by the user or requester's input using confidential information.

그러나, 본 발명은 이에 한정되지 않으며, 얼굴 인식 시스템(100)의 얼굴 인식부(120)는 상기 입력으로 주어진 얼굴정보에서 추출한 얼굴 특징을 상기 비밀정보를 사용하여 변형함으로써 사용자 및 요청자의 상기 얼굴 특징이 변형된 얼굴정보를 검출할 수 있다.However, the present invention is not limited to this, and the face recognition unit 120 of the face recognition system 100 may modify the face feature extracted from the face information given as the input using the secret information, This modified face information can be detected.

예컨대, 도 5는 본 발명의 제2 실시 예에 따른 보안성이 강화된 얼굴 인식 방법을 개략적으로 나타낸 흐름도이다.For example, FIG. 5 is a flowchart schematically illustrating a security-enhanced face recognition method according to a second embodiment of the present invention.

첨부된 도 5를 참조하면, 등록과정에서, 얼굴 인식 시스템(100)은 카메라 촬영모드를 이용한 사용자 입력메뉴를 화면에 표시하여 사용자 얼굴정보를 입력 받는다(S201). 이 때, 얼굴 인식 시스템(100)은 사용자 비밀정보를 입력 받을 수 있다.Referring to FIG. 5, in the registration process, the face recognition system 100 displays a user input menu using a camera photographing mode on the screen to receive user face information (S201). At this time, the face recognition system 100 can receive user secret information.

얼굴 인식 시스템(100)은 상기 사용자 얼굴정보를 분석하여 사용자의 얼굴 특징을 검출하고(S202), 검출된 상기 사용자의 얼굴 특징을 입력된 사용자 비밀정보를 이용하여 변형한다(S203, S204). The face recognition system 100 analyzes the face information of the user to detect the face feature of the user (S202), and transforms the detected face feature of the user using the inputted user secret information (S203, S204).

즉, 본 발명의 제2 실시 예는 사용자 얼굴정보를 비밀정보를 사용하여 변형하는 것이 아니라, 사용자 얼굴정보로부터 추출한 얼굴 특징을 상기 비밀정보를 사용하여 변형하는 점에서 상기 제1 실시 예와 다르다.That is, the second embodiment of the present invention differs from the first embodiment in that the face information extracted from the user's face information is transformed using the secret information, instead of modifying the user's face information using confidential information.

이 때, 얼굴 인식 시스템(100)은 상기 사용자 얼굴 특징을 상기 비밀정보로 입력된 패스워드(PW), 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형할 수 있다.At this time, the face recognition system 100 can modify the user's face feature using at least one of the password PW, pattern information, speech recognition information, action pattern, and token input as the secret information, have.

얼굴 인식 시스템(100)은 상기 얼굴 특징이 변형된 것에 따른 사용자의 변형된 얼굴정보를 사용자 인식정보로 데이터베이스부(130)에 등록한다(S205).The face recognition system 100 registers the modified face information of the user according to the modification of the face feature in the database unit 130 as user recognition information (S205).

이 때, 얼굴 인식 시스템(100)은 상기 사용자 인식정보를 신규로 등록할 수 있으며, 기존에 등록된 사용자 인식정보가 존재하는 경우 사용자 설정에 따라 상기 변형된 얼굴정보로 변경하여 재등록 및 유효날짜를 갱신 할 수 있다.At this time, the face recognition system 100 can newly register the user recognition information. If existing user recognition information exists, the face recognition system 100 changes the modified face information according to the user setting, Can be updated.

한편, 위와 같이 사전에 사용자의 변형된 얼굴정보를 사용자 인식정보로 등록된 이후에 요청자의 인식과정을 살펴보면, 얼굴 인식 시스템(100)은 카메라 촬영모드를 이용한 요청자의 얼굴정보 입력메뉴를 화면에 표시하여 요청자 얼굴정보를 입력 받는다(S206). 이 때, 얼굴 인식 시스템(100)은 요청자 비밀정보를 입력 받을 수 있다.If the user's modified face information is registered in advance as user recognition information, the face recognition system 100 displays the face information input menu of the requestor using the camera shooting mode on the screen And receives the requestor's face information (S206). At this time, the face recognition system 100 can receive the requestor's secret information.

얼굴 인식 시스템(100)은 상기 요청자 얼굴정보를 분석하여 요청자의 얼굴 특징을 검출하고(S207), 검출된 상기 요청자의 얼굴 특징을 입력된 요청자 비밀정보를 이용하여 변형한다(S208, S209).The face recognition system 100 analyzes the face information of the requestor to detect the face feature of the requestor (S207), and transforms the detected face feature of the requestor using the inputted requestor secret information (S208, S209).

이때도 마찬가지로, 얼굴 인식 시스템(100)은 상기 요청자 얼굴 특징을 상기 요청자 비밀정보로 입력된 패스워드(PW), 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형할 수 있다.At this time, the face recognition system 100 may also use the face feature of the requestor, such as the password (PW), pattern information, speech recognition information, action pattern, and token input as the requestor secret information, can do.

얼굴 인식 시스템(100)은 상기 얼굴 특징이 변형된 것에 따른 요청자의 변형된 얼굴정보를 등록된 사용자의 변형된 얼굴정보와 매칭하여 일치 여부에 따른 사용자 인식을 수행한다(S210).The face recognition system 100 matches the deformed face information of the requester with the deformed face information of the registered user according to the modification of the facial feature to perform user recognition according to the matching (S210).

이 때, 얼굴 인식 시스템(100)은 상기 등록된 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보의 유사도가 소정 비율을 초과하면 사용자 인식(인증)에 성공한 것으로 판단하고, 상기 소정 비율 이하이면 사용자 인식(인증)에 실패한 것으로 판단할 수 있다.At this time, the face recognition system 100 determines that the user recognition (authentication) is successful when the degree of similarity of the deformed face information of the requester with respect to the modified face information of the registered user exceeds a predetermined ratio, Or less, it can be determined that the user recognition (authentication) has failed.

[제3 실시 예][Third Embodiment]

한편, 이상의 도 4 및 5를 통해 설명된 본 발명의 실시 예에 따른 얼굴 인식 방법은 하나의 정보통신 단말기에 탑재된 얼굴 인식 시스템(100)에서 동작하는 것으로 설명하였으나, 이에 한정되지 않으며 사용자 단말기(10)와 서버(20, 30)간의 연동되는 서비스 형태로 보안성이 강화된 얼굴 인식을 수행할 수 있다.Meanwhile, although the face recognition method according to the embodiment of the present invention described above with reference to FIGS. 4 and 5 operates in the face recognition system 100 mounted on one information communication terminal, the present invention is not limited thereto, 10 and the server 20, 30 in a service type in which security is enhanced.

예컨대, 도 6은 본 발명의 제3 실시 예에 따른 사용자 단말기와 서버의 연동에 따른 보안성이 강화된 얼굴 인식 방법을 개략적으로 나타낸 흐름도이다.For example, FIG. 6 is a flowchart schematically illustrating a security-enhanced face recognition method according to an embodiment of the present invention.

첨부된 도 6을 참조하면, 하나의 실시 예로 사용자 단말기(10)와 서버(40)가 연동하여 사용자의 얼굴정보를 등록하고, 그에 따른 얼굴정보를 인증하는 흐름을 나타내고 있으며, 그 과정에서의 앞선 도 4 및 도 5를 통해 이미 설명된 부분은 생략한다. 6, the user terminal 10 and the server 40 interact with each other to register face information of the user and authenticate the corresponding face information. In this process, The portions already described with reference to Figs. 4 and 5 are omitted.

여기서, 서버(40)는 상기 얼굴 인식정보를 등록하고 서비스를 제공하는 서비스 서버(20)이거나 상기 서비스를 제공하기 위해 연동하여 사용자 인증을 관리하는 인증 서버(30)일 수 있다.Here, the server 40 may be a service server 20 that registers the face recognition information and provides a service, or an authentication server 30 that manages user authentication by interlocking with the service to provide the service.

먼저, 사용자 얼굴 등록과정을 살펴보면, 사용자 단말기(10)는 사용자의 얼굴 인식정보 등록을 요청하며, 이를 위해 해당 사용자의 얼굴정보와 비밀정보를 입력하여 서버(40)로 전송한다(S301).First, in step S301, the user terminal 10 requests registration of the user's face recognition information, and inputs the face information and the secret information of the user to the server 40.

서버(40)는 사용자 단말기(10, 즉, 타 단말기)로부터 상기 얼굴 인식정보 등록 요청을 수신하면, 수신된 상기 사용자 얼굴정보 또는 상기 사용자 얼굴정보로부터 추출한 얼굴 특징을 사용자 비밀정보를 통해 변형하여 사용자의 변형된 얼굴정보를 검출한다(S302). When the server 40 receives the face recognition information registration request from the user terminal 10 (i.e., another terminal), the server 40 modifies the face feature extracted from the received face information or the user face information through user secret information, The modified face information is detected (S302).

서버(40)는 상기 사용자의 변경된 얼굴정보를 사용자 인식정보로 신규 등록하거나 기존 등록된 사용자 인식정보를 변경할 수 있다(S303). The server 40 may newly register the changed face information of the user as the user recognition information or change the existing registered user recognition information (S303).

그리고, 서버(40)는 얼굴 인식정보 등록 완료를 사용자 단말기(10)에 통보함으로써 등록과정을 완료한다(S304).Then, the server 40 notifies the user terminal 10 of the completion of the registration of the face recognition information, thereby completing the registration process (S304).

한편, 요청자 얼굴 인식과정을 살펴보면, 사용자 단말기(10)는 요청자 얼굴 인식 요청을 위한 상기 요청자 얼굴정보와 비밀정보를 입력하여 서버(40)로 전송한다(S305).Meanwhile, referring to the requestor's face recognition process, the user terminal 10 inputs the requestor's face information and secret information for the requestor's face recognition request to the server 40 (S305).

이 때, 사용자 단말기(10)는 서버(40)로의 서비스 접속 및 온라인 결제 등의 이유로 사용자 인증이 요구되면, 해당 정보를 입력하여 사용자의 얼굴 인증을 요청할 수 있다.At this time, the user terminal 10 can request the face authentication of the user by inputting the information when the user authentication is requested due to service connection to the server 40, online settlement, or the like.

서버(40)는 상기 요청자 얼굴 인식 요청을 수신하면, 수신된 상기 요청자 얼굴정보 또는 상기 요청자 얼굴정보로부터 추출한 얼굴 특징을 상기 요청자 비밀정보를 통해 변형하여 요청자의 변형된 얼굴정보를 검출한다(S306).Upon receiving the requestor's face recognition request, the server 40 transforms the face information extracted from the received requestor face information or the requestor face information through the requestor's secret information to detect the modified face information of the requestor (S306) .

서버(40)는 상기 요청자의 변형된 얼굴정보를 등록된 사용자의 변형된 얼굴정보와 비교하여 일치 여부에 따른 사용자 인식을 수행한다(S307).The server 40 compares the modified face information of the requestor with the modified face information of the registered user to perform user recognition according to whether the face information is identical or not (S307).

그리고, 서버(40)는 상기 비교결과 소정 유사도에 따른 인증성공 또는 인증실패의 사용자 얼굴 인식 결과를 사용자 단말기(10)에 통보한다(S308).Then, the server 40 notifies the user terminal 10 of the user's face recognition result of the authentication success or the authentication failure according to the predetermined similarity as a result of the comparison (S308).

이러한 인식 과정을 통해, 사용자는 상기 인증성공에 따른 서비스 접속, 온라인 결제, 특정 기능 실행, 인식정보 변경 및 게이트 출입 등의 서비스를 이용하거나 상기 인증실패에 따른 재인식 요청을 시도할 수 있다.Through this recognition process, the user can use services such as service connection, online settlement, execution of a specific function, change of recognition information and gate entrance according to the success of the authentication, or may attempt to request re-recognition according to the authentication failure.

이와 같이, 본 발명의 실시 예에 따르면, 사용자의 비밀정보를 얼굴 인식 기술과 융합하여 인식 성능과 보안성이 향상된 얼굴 인식기술을 제공할 수 있는 효과가 있다.As described above, according to the embodiment of the present invention, there is an effect that the confidential information of the user is merged with the face recognition technology, and the face recognition technology with improved recognition performance and security is provided.

또한, 사용자의 비밀정보를 사용하여 사용자만이 고유하게 변경할 수 있는 변형된 얼굴정보를 인식정보로 활용함으로써 사진을 통한 복제 및 도용을 방지하고 보안성을 강화할 수 있는 효과가 있다.In addition, the modified face information, which can be changed uniquely by the user using the secret information of the user, is used as recognition information, thereby preventing duplication and theft through pictures and enhancing security.

그리고, 사용자가 인증을 위해 별도로 소지해야 하는 물건과 복잡한 절차 없이 간단한 비밀정보와 얼굴정보 입력 만으로도 보안성이 강화된 사용자 인증기술을 제공할 수 있는 효과가 있다.Also, there is an effect that it is possible to provide a user authentication technique with enhanced security even if only a simple secret information and facial information input are required without a complicated procedure and objects to be separately owned by the user for authentication.

본 발명의 실시 예는 이상에서 설명한 장치 및/또는 방법을 통해서만 구현이 되는 것은 아니며, 본 발명의 실시 예의 구성에 대응하는 기능을 실현하기 위한 프로그램, 그 프로그램이 기록된 기록 매체 등을 통해 구현될 수도 있으며, 이러한 구현은 앞서 설명한 실시 예의 기재로부터 본 발명이 속하는 기술분야의 전문가라면 쉽게 구현할 수 있는 것이다.The embodiments of the present invention are not limited to the above-described apparatuses and / or methods, but may be implemented through a program for realizing functions corresponding to the configuration of the embodiment of the present invention, a recording medium on which the program is recorded And such an embodiment can be easily implemented by those skilled in the art from the description of the embodiments described above.

이상에서 본 발명의 실시 예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, It belongs to the scope of right.

10: 사용자 단말기 20: 서비스 서버
30: 인증 서버 100: 얼굴 인식 시스템
110: 정보 수집부 120: 얼굴 인식부
130: 데이터베이스부 140: 제어부10: user terminal 20: service server
30: authentication server 100: face recognition system
110: information collecting unit 120: face recognizing unit
130: Database part 140: Control part

Claims (20)

요청자의 얼굴 인식을 위한 얼굴정보와 비밀정보를 수집하는 정보 수집부;
상기 비밀정보를 이용하여 상기 얼굴정보를 변형시켜 요청자의 변형된 얼굴정보를 생성하는 얼굴 인식부;
사전에 등록된 사용자의 변환된 얼굴정보를 저장하는 데이터베이스부; 및
상기 사용자의 변형된 얼굴정보와 상기 요청자의 변형된 얼굴정보를 매칭하여 일치 여부에 따른 사용자 인식결과를 판단하는 제어부
를 포함하는 얼굴 인식 시스템.An information collecting unit for collecting face information and secret information for face recognition of a requestor;
A facial recognition unit for modifying the face information using the secret information to generate modified face information of a requestor;
A database unit for storing converted face information of a user registered in advance; And
A controller for matching the modified face information of the user with the deformed face information of the requestor to determine a user recognition result according to the match,
And a face recognition system. 제 1 항에 있어서,
상기 정보 수집부는,
다양한 인터페이스를 통해 상기 사용자의 패스워드, 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나의 비밀정보를 수집 하며, 상기 비밀정보는 단독 또는 복합적으로 사용되는 얼굴 인식 시스템.The method according to claim 1,
The information collecting unit,
Wherein the secret information collecting unit collects secret information of at least one of the user's password, pattern information, voice recognition information, behavior pattern, and token through various interfaces, and the secret information is used singly or in combination. 제 1 항에 있어서,
상기 얼굴 인식부는,
상기 비밀정보를 해시 및 암호화 중 적어도 하나의 변환 과정을 거쳐 사용하는 얼굴 인식 시스템.The method according to claim 1,
Wherein the face recognizing unit comprises:
And the secret information is subjected to at least one of conversion, hashing and encryption. 제 1 항에 있어서,
상기 얼굴 인식부는,
상기 사용자의 비밀정보를 이용하여 얼굴정보를 변형시켜 상기 사용자의 변형된 얼굴정보를 등록하는 얼굴 인식 시스템.The method according to claim 1,
Wherein the face recognizing unit comprises:
And modifying the face information using the secret information of the user to register the modified face information of the user. 제 1 항에 있어서,
상기 얼굴 인식부는,
상기 비밀정보를 이용하여 상기 얼굴정보를 치환, 변경, 왜곡, 삭제, 추가 중 적어도 하나의 패턴으로 변형하는 얼굴 인식 시스템.The method according to claim 1,
Wherein the face recognizing unit comprises:
Wherein the facial information is transformed into at least one of a permutation, a modification, a distortion, a deletion, and an addition using the confidential information. 제 5 항 에있어서,
상기 얼굴 인식부는,
상기 비밀정보의 종류와 입력 값에 따라서 다양한 상기 패턴의 고유한 얼굴 특징이 나타나도록 상기 변형된 얼굴정보를 생성하는 얼굴 인식 시스템.6. The method of claim 5,
Wherein the face recognizing unit comprises:
And generating the modified face information so that unique face characteristics of the various patterns are displayed according to the type of secret information and the input value. 제 1 항에 있어서,
상기 제어부는,
상기 요청자의 얼굴 인식을 위한 사용자 입력메뉴를 제공하여 상기 요청자 비밀정보와 얼굴정보를 입력 받고, 상기 요청자의 변형된 얼굴 특징 검출에 따라 변형된 요청자 얼굴정보를 검출하는 얼굴 인식 시스템.The method according to claim 1,
Wherein,
A face recognition system for receiving the requestor's confidential information and face information by providing a user input menu for face recognition of the requestor and detecting the modified requestor face information according to the modified face feature detection of the requestor. 제 1 항에 있어서,
상기 제어부는,
등록된 상기 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보가 소정 비율 초과로 일치하면 사용자 인증에 성공한 것으로 판단하고, 상기 소정 비율 이하로 불일치하면 사용자 인증에 실패한 것으로 판단하는 얼굴 인식 시스템.The method according to claim 1,
Wherein,
Wherein the face recognition system determines that the user authentication is successful when the modified face information of the requestor matches the modified face information of the registered face information of the registered user and determines that the user authentication fails if the face information is not equal to or less than the predetermined ratio, . 단말기의 얼굴 인식 방법에 있어서,
요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수집하는 단계;
상기 요청자 얼굴정보를 요청자 비밀정보를 이용하여 변형시켜 요청자의 변형된 얼굴정보를 생성하는 단계; 및
사전에 등록된 사용자의 변형된 얼굴정보와 상기 요청자의 변형된 얼굴정보를 매칭하여 일치 여부에 따른 사용자 인식결과를 판단하는 단계
를 포함하는 얼굴 인식 방법.A method of recognizing a face of a terminal,
Collecting requestor face information and secret information for face recognition of a requestor;
Generating modified face information of a requestor by modifying the requestor face information using requestor secret information; And
A step of matching the modified face information of the user registered in advance with the modified face information of the requestor and judging the user recognition result according to the match
And a face recognition unit. 제 9 항에 있어서,
상기 수집하는 단계 이전에는,
사용자 인식정보 등록을 위한 사용자 얼굴정보와 사용자 비밀정보를 수집하는 단계;
상기 사용자 얼굴정보를 상기 사용자 비밀정보를 이용하여 변형시켜 사용자의 변형된 얼굴정보를 생성하는 단계; 및
상기 사용자의 변환된 얼굴정보를 등록하는 단계를 더 포함하는 얼굴 인식 방법.10. The method of claim 9,
Prior to the collecting step,
Collecting user face information and user secret information for user identification information registration;
Generating modified face information of a user by modifying the user face information using the user secret information; And
And registering the converted face information of the user. 제 10 항에 있어서,
상기 등록하는 단계는,
상기 사용자의 변환된 얼굴정보를 사용자 인식정보로 신규 등록하거나 기존에 등록된 상기 사용자 인식정보가 존재하는 경우 사용자 설정에 따라 상기 사용자의 변환된 얼굴정보로 변경하여 재등록 하는 얼굴 인식 방법.11. The method of claim 10,
Wherein the registering step comprises:
Wherein the converted face information of the user is newly registered as the user recognition information or if the existing user recognition information exists, the converted face information is changed and re-registered according to the user setting. 제 9 항에 있어서,
상기 변형된 얼굴정보를 생성하는 단계는,
상기 얼굴정보를 상기 비밀정보로 입력된 패스워드, 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형하는 얼굴 인식 방법.10. The method of claim 9,
Wherein the generating the modified face information comprises:
Wherein the face information is transformed using at least one of a password, pattern information, speech recognition information, an action pattern, and a token inputted as the secret information, either singly or in combination. 제 9 항에 있어서,
상기 사용자 인식결과를 판단하는 단계는,
상기 요청자 비밀정보를 이용하여 변형된 얼굴패턴을 인식하고, 상기 변형된 얼굴패턴에 따른 요청자의 변형된 얼굴 특징을 검출하는 단계를 포함하는 얼굴 인식 방법.10. The method of claim 9,
Wherein the step of determining the user recognition result comprises:
Recognizing a modified face pattern using the requestor's secret information, and detecting a modified face feature of the requestor according to the modified face pattern. 제 9 항에 있어서,
상기 사용자 인식결과를 판단하는 단계는,
상기 등록된 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보의 유사도가 소정 비율을 초과하면 사용자 인식에 성공한 것으로 판단하고, 상기 소정 비율 이하이면 사용자 인식에 실패한 것으로 판단하는 얼굴 인식 방법.10. The method of claim 9,
Wherein the step of determining the user recognition result comprises:
If the degree of similarity of the face information of the requester with respect to the modified face information of the registered user exceeds a predetermined ratio, it is determined that the user recognition is successful; 제 9 항에 있어서,
상기 수집하는 단계는, 상기 요청자의 타 단말기로부터 상기 요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수신하는 단계를 포함하고,
상기 사용자 인식결과를 판단하는 단계는, 상기 사용자 인식결과를 상기 타 단말기로 전송하는 단계를 포함하는 얼굴 인식 방법.10. The method of claim 9,
Wherein the collecting includes receiving requestor face information and secret information for face recognition of the requestor from another terminal of the requestor,
Wherein the determining the user recognition result comprises transmitting the user recognition result to the other terminal. 단말기의 얼굴 인식 방법에 있어서,
요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수집하는 단계;
상기 요청자 얼굴정보에서 추출한 얼굴 특징을 요청자 비밀정보를 이용하여 변형시켜 요청자의 변형된 얼굴정보를 생성하는 단계; 및
사전에 등록된 사용자의 변형된 얼굴정보와 상기 요청자의 변형된 얼굴정보를 매칭하여 일치 여부에 따른 사용자 인식결과를 판단하는 단계
를 포함하는 얼굴 인식 방법.A method of recognizing a face of a terminal,
Collecting requestor face information and secret information for face recognition of a requestor;
Generating modified face information of the requestor by modifying the face feature extracted from the requestor face information using the requestor's secret information; And
A step of matching the modified face information of the user registered in advance with the modified face information of the requestor and judging the user recognition result according to the match
And a face recognition unit. 제 16 항에 있어서,
상기 수집하는 단계 이전에는,
사용자 인식정보 등록을 위한 사용자 얼굴정보와 사용자 비밀정보를 수집하는 단계;
상기 사용자 얼굴정보에서 추출한 얼굴 특징을 상기 사용자 비밀정보를 이용하여 변형시켜 사용자의 변형된 얼굴정보를 생성하는 단계; 및
상기 사용자의 변환된 얼굴정보를 등록하는 단계를 더 포함하는 얼굴 인식 방법.17. The method of claim 16,
Prior to the collecting step,
Collecting user face information and user secret information for user identification information registration;
Generating modified face information of the user by modifying the face feature extracted from the user face information using the user secret information; And
And registering the converted face information of the user. 제 16 항에 있어서,
상기 변형된 얼굴정보를 생성하는 단계는,
상기 얼굴 특징을 상기 요청자 비밀정보로 입력된 패스워드, 패턴정보, 음성 인식 정보, 행위 패턴, 토큰 중 적어도 하나를 단독 또는 복합적으로 사용하여 변형하는 얼굴 인식 방법.17. The method of claim 16,
Wherein the generating the modified face information comprises:
Wherein the facial feature is modified by using at least one of a password, pattern information, speech recognition information, an action pattern, and a token input as the requestor secret information, either singly or in combination. 제 16 항에 있어서,
상기 사용자 인식결과를 판단하는 단계는,
상기 등록된 사용자의 변형된 얼굴정보에 대한 상기 요청자의 변형된 얼굴정보의 유사도가 소정 비율을 초과하면 사용자 인식 성공으로 판단하고, 상기 소정 비율 이하이면 사용자 인식 실패로 판단하는 얼굴의 인식 방법.17. The method of claim 16,
Wherein the step of determining the user recognition result comprises:
Determining that the user recognition is successful if the degree of similarity of the requestor's modified face information with respect to the registered face information of the registered user exceeds a predetermined ratio; 제 16 항에 있어서,
상기 수집하는 단계는, 상기 요청자의 타 단말기로부터 상기 요청자의 얼굴 인식을 위한 요청자 얼굴정보와 비밀정보를 수신하는 단계를 포함하고,
상기 사용자 인식결과를 판단하는 단계는, 상기 사용자 인식결과를 상기 타 단말기로 전송하는 단계를 포함하는 얼굴 인식 방법.

17. The method of claim 16,
Wherein the collecting includes receiving requestor face information and secret information for face recognition of the requestor from another terminal of the requestor,
Wherein the determining the user recognition result comprises transmitting the user recognition result to the other terminal.

KR1020160148305A 2016-11-08 2016-11-08 Face recognition system and method KR101988365B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160148305A KR101988365B1 (en) 2016-11-08 2016-11-08 Face recognition system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160148305A KR101988365B1 (en) 2016-11-08 2016-11-08 Face recognition system and method

Publications (2)

Publication Number Publication Date
KR20180051742A true KR20180051742A (en) 2018-05-17
KR101988365B1 KR101988365B1 (en) 2019-06-13

Family

ID=62486276

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160148305A KR101988365B1 (en) 2016-11-08 2016-11-08 Face recognition system and method

Country Status (1)

Country Link
KR (1) KR101988365B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11688403B2 (en) 2019-03-15 2023-06-27 Samsung Electronics Co., Ltd. Authentication method and apparatus with transformation model

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101087698B1 (en) 2011-07-25 2011-11-30 주식회사 그린정보기술 Method for authenticating security of smart-phone
KR20150115049A (en) * 2014-04-02 2015-10-14 인하대학교 산학협력단 Method and system for enhancing security of ATM by using face recognition

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101087698B1 (en) 2011-07-25 2011-11-30 주식회사 그린정보기술 Method for authenticating security of smart-phone
KR20150115049A (en) * 2014-04-02 2015-10-14 인하대학교 산학협력단 Method and system for enhancing security of ATM by using face recognition

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11688403B2 (en) 2019-03-15 2023-06-27 Samsung Electronics Co., Ltd. Authentication method and apparatus with transformation model

Also Published As

Publication number Publication date
KR101988365B1 (en) 2019-06-13

Similar Documents

Publication Publication Date Title
KR102371997B1 (en) Information processing terminal, method, and system including information processing terminal
US10681025B2 (en) Systems and methods for securely managing biometric data
KR102369228B1 (en) Risk analysis apparatus and method for risk based authentication
US9064257B2 (en) Mobile device transaction using multi-factor authentication
AU2015280802B2 (en) User authentication method and system using variable keypad and biometric identification
US8550339B1 (en) Utilization of digit sequences for biometric authentication
US10592653B2 (en) Encoding methods and systems
US20230262057A1 (en) Systems and methods for authenticating users within a computing or access control environment
US10963552B2 (en) Method and electronic device for authenticating a user
US10437971B2 (en) Secure authentication of a user of a device during a session with a connected server
Kwon et al. CCTV-based multi-factor authentication system
KR101639404B1 (en) Fingerprint segmentation recognition based user authentication apparatus and method
Verma et al. A novel model to enhance the data security in cloud environment
KR101988365B1 (en) Face recognition system and method
KR101654797B1 (en) Interactive CAPTCHA System Resilient to Phishing Attacks
US20210365531A1 (en) Method and electronic device for authenticating a user
JP2015064818A (en) Confidential biometric server authentication
JP7344071B2 (en) Authentication system and authentication method
Ninassi et al. Privacy Compliant Multi-biometric Authentication on Smartphones.
KR101986244B1 (en) Method of telebiometric authentication based on mobile devices
KR20220131583A (en) Face identification apparatus using background object and method thereof
Mulla et al. Advanced User Authentication System on Mobile for Signing Digital Transactions
Jayakumar Providing Authentication by Using Biometric Multimodal Framework for Cloud Computing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant