KR20150065529A - Method and apparatus for authenticating biometric by using face/hand recognizing - Google Patents

Method and apparatus for authenticating biometric by using face/hand recognizing Download PDF

Info

Publication number
KR20150065529A
KR20150065529A KR1020130150951A KR20130150951A KR20150065529A KR 20150065529 A KR20150065529 A KR 20150065529A KR 1020130150951 A KR1020130150951 A KR 1020130150951A KR 20130150951 A KR20130150951 A KR 20130150951A KR 20150065529 A KR20150065529 A KR 20150065529A
Authority
KR
South Korea
Prior art keywords
hand
face
authentication
information
region
Prior art date
Application number
KR1020130150951A
Other languages
Korean (ko)
Other versions
KR101561817B1 (en
Inventor
이기덕
박보건
신호철
송봉섭
이재원
Original Assignee
주식회사 슈프리마
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 슈프리마 filed Critical 주식회사 슈프리마
Priority to KR1020130150951A priority Critical patent/KR101561817B1/en
Publication of KR20150065529A publication Critical patent/KR20150065529A/en
Application granted granted Critical
Publication of KR101561817B1 publication Critical patent/KR101561817B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints

Abstract

The present invention relates to a biometric authentication apparatus and a method using recognition of a face and a hand. The biometric authentication apparatus includes: an image acquisition unit which acquires an image by photographing a subject; a face image analysis unit which detects a face area by analyzing the acquired image and extracts information to be used for authenticating a face; a hand image analysis unit which detects a hand area by analyzing the acquired image and extracts information to be used for authenticating a hand; a face authentication unit which authenticates the face by comparing the extracted information of a face area with pre-registered biometric information of the face; a hand authentication unit which authenticates the hand by comparing the extracted information of a hand area with pre-registered biometric information of the hand; a biometric authentication unit which executes biometric authentication with respect to the subject according to at least one from a face authentication result and a hand authentication result; and an output unit which outputs the results of biometric authentication. Therefore, costs of the biometric authentication apparatus are substantially reduced when compared to a case wherein a biometric apparatus for face recognition and a biometric apparatus for finger print recognition are independently installed in one place. A user can expect reliability of biometric authentication by a multi-modal method while executing similar processes of face authentication and hand authentication at the same time.

Description

얼굴과 손 인식을 이용한 생체 인증 장치 및 방법{METHOD AND APPARATUS FOR AUTHENTICATING BIOMETRIC BY USING FACE/HAND RECOGNIZING}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a biometric authentication device,

본 발명은 생체 인증 장치 및 방법에 관한 것이다. 더욱 상세하게는 얼굴 인식과 손 인식의 결과를 조합하여 생체 인증을 처리하는 생체 인증 장치 및 방법에 관한 것이다.
The present invention relates to a biometric authentication apparatus and method. And more particularly, to a biometric authentication apparatus and method for processing biometric authentication by combining face recognition and hand recognition results.

주지하는 바와 같이, 현재 생체 인증 시스템에 사용되는 특징으로는 얼굴, 음성, 손 모양, 홍채, 정맥, 지문 등이 있으며, 각각의 특징에 대한 연구가 활발히 진행되고 있다.As is well known, features that are currently used in biometric authentication systems include face, voice, hand shape, iris, vein, and fingerprint, and research on each feature has been actively conducted.

이러한 생체 인증 기술들 중에서 얼굴 인식을 이용하는 얼굴 인식 장치(단말기)는 사용의 편의성과 빠른 인증 속도를 제공하는 장점이 있어서 그 점유율이 점차 높아지고 있다.Of these biometric authentication techniques, a face recognition apparatus (terminal) using face recognition has advantages of providing ease of use and fast authentication speed, and its occupation rate is gradually increasing.

그런데, 다수의 유저를 위한 생체 인증 장치는 FAR(False Acceptance Rate)가 낮은 우수한 인증 성능이 요구되지만, 얼굴 인식을 이용하는 생체 인증 장치는 얼굴 정보량의 한계로 인하여 매우 많은 유저(예컨대, 1,000명 이상)가 사용하는 경우에 만족할만한 인증 성능을 발휘하지 못한다.However, the biometric authentication device for a large number of users is required to have excellent authentication performance with a low False Acceptance Rate (FAR). However, since the biometric authentication device using face recognition has a large number of users (for example, 1,000 or more) The authentication performance can not be satisfactorily satisfactory.

이에, 멀티 모달(Multi-modal) 방식을 이용하여 얼굴 인증의 한계를 극복하고자 하는 연구가 진행 중이다.Therefore, research is underway to overcome the limitation of face authentication using a multi-modal method.

종래 기술에 따라 멀티 모달 방식이 적용된 생체 인증 기술로는 얼굴 인식과 지문 인식을 함께 이용하는 예가 있으며, 상관관계(correlation)가 낮은 얼굴과 지문의 특성을 이용하기 때문에 인증 성능을 크게 향상시킬 수 있다.According to the related art, the biometric authentication technique using the multimodal method has an example of using the face recognition and the fingerprint recognition together, and the authentication performance can be greatly improved because the face and fingerprint characteristics having low correlation are used.

그러나, 얼굴 인식을 위해 영상을 촬영하는 카메라와 지문 인식을 위한 스캐너는 전혀 다른 하드웨어적인 특성을 가지며, 얼굴 인식과 지문 인식은 그 인증 절차가 매우 상이하기 때문에, 하드웨어적인 측면은 물론이고 인증 처리 과정에 있어서도 결합도가 매우 낮다. 즉, 얼굴 인식 생체 인증 장치와 지문 인식 생체 인증 장치를 한 곳에 각각 설치한 경우와 비교할 때에 별반 다를 게 없다고 할 수도 있다.However, since a camera that captures an image for face recognition and a scanner for fingerprint recognition have completely different hardware characteristics, and the authentication procedure of face recognition and fingerprint recognition is very different, The bonding strength is very low. In other words, it can be said that there is no difference when compared with the case where the face recognition biometric authentication device and the fingerprint recognition biometric authentication device are respectively installed in one place.

따라서, 얼굴 인식을 이용하는 생체 인증 장치에 지문 인식 기술을 결합시켜서 멀티 모달 방식으로 구현하기 위해서는 코스트(cost)가 대폭 증가하는 문제점이 있었다.Accordingly, there has been a problem in that cost increases significantly when a biometric authentication device using face recognition is combined with a fingerprint recognition technology and implemented in a multimodal manner.

또, 인증을 수행하는 이용자 측면에서는 얼굴 인증을 위한 절차와 지문 인증을 위한 절차를 각각 빠짐없이 별도로 수행하여야 하는 이용상의 불편함을 감수하여야만 하였다.
In addition, in the aspect of the user who performs the authentication, the user has to take the inconvenience of using the facial authentication procedure and the fingerprint authentication procedure separately.

미국 공개특허 2006/0210119, 공개일자 2006년 09월 21일.U.S. Published Patent Application 2006/0210119, published on September 21, 2006.

본 발명의 실시예에 따르면, 얼굴 인식과 손 인식의 결과를 조합하여 생체 인증을 처리하는 생체 인증 장치 및 방법을 제공한다.According to the embodiment of the present invention, a biometric authentication apparatus and method for processing biometric authentication by combining the results of face recognition and hand recognition are provided.

본 발명의 해결하고자 하는 과제는 이상에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또 다른 해결하고자 하는 과제는 아래의 기재로부터 본 발명이 속하는 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
The problems to be solved by the present invention are not limited to those mentioned above, and another problem to be solved can be clearly understood by those skilled in the art from the following description.

본 발명의 일 관점에 따른 생체 인증 장치는, 피사체를 촬영하여 영상을 획득하는 영상 획득부와, 획득된 상기 영상에 대한 분석을 통해 얼굴 영역을 파악하여 얼굴 인증에 이용할 정보를 추출하는 얼굴 영상 분석부와, 획득된 상기 영상에 대한 분석을 통해 손 영역을 파악하여 손 인증에 이용할 정보를 추출하는 손 영상 분석부와, 추출된 상기 얼굴 영역의 정보와 기 등록된 얼굴 생체 정보를 비교하여 얼굴 인증을 처리하는 얼굴 인증부와, 추출된 상기 손 영역의 정보와 기 등록된 손 생체 정보를 비교하여 손 인증을 처리하는 손 인증부와, 상기 얼굴 인증의 처리 결과와 상기 손 인증의 처리 결과 중에서 적어도 하나 이상의 처리 결과에 따라 상기 피사체에 대한 생체 인증을 처리하는 생체 인증부와, 상기 생체 인증의 처리 결과를 출력하는 출력부를 포함할 수 있다.A biometric authentication apparatus according to one aspect of the present invention includes an image acquiring unit that acquires an image by capturing an image of a subject; a facial image analyzing unit that grasps a face area through analysis of the acquired image, A hand image analyzing unit for recognizing a hand region through analysis of the obtained image and extracting information to be used for hand authentication; and a face authentication unit for comparing the extracted face region information with previously registered face biometric information, A hand authenticating unit for comparing the extracted hand region information with previously registered hand biometric information to process hand authentication; and a hand authentication unit for comparing at least one of the processing result of the face authentication and the processing result of the hand authentication A biometric authentication unit for processing the biometric authentication for the subject according to one or more processing results; and an output unit for outputting the biometric authentication result .

여기서, 상기 얼굴 영역과 상기 손 영역의 위치 또는 상호간의 중첩도에 따라 상기 피사체의 촬영 자세를 안내하는 촬영 자세 정보를 생성하여 상기 출력부를 통해 출력되도록 하는 안내 정보 생성부를 더 포함할 수 있다.The information processing apparatus may further include a guide information generating unit for generating photographing posture information for guiding the photographing posture of the subject according to the position of the face area and the hand area or the degree of overlap between the face area and the hand area and outputting the photographing posture information through the output unit.

상기 얼굴 영상 분석부는, 양안의 위치를 검출한 후에 상기 양안의 위치를 기준으로 하여 상기 얼굴 영역을 추정할 수 있다.The face image analyzing unit may estimate the face region based on the position of the binocular after detecting the position of both eyes.

상기 얼굴 영상 분석부는, 상기 양안을 연결하는 가상선의 기울기를 산출한 후에 추정된 상기 얼굴 영역을 상기 기울기에 대응하는 각도만큼 회전시켜서 상기 얼굴 영역의 정보를 추출할 수 있다.The facial image analyzing unit may extract the information of the facial region by calculating the slope of the virtual line connecting the both eyes, and then rotating the estimated facial region by an angle corresponding to the inclination.

상기 손 영상 분석부는, 상기 얼굴 영역을 제외한 상기 영상에서 주변보다 상대적으로 밝은 화소가 모여있는 덩어리를 검출한 후에 상기 덩어리 내에서 상기 손 영역을 파악할 수 있다.The hand image analyzing unit may detect the hand region in the lump after detecting a lump in which the relatively bright pixels are gathered from the surroundings in the image except for the face region.

상기 손 영상 분석부는, 상기 손 영역 중에서 손바닥 영역과 손가락 영역을 분리하여 손의 방향을 파악한 후에 일정 방향을 향하도록 회전시켜서 상기 손 영역의 정보를 추출할 수 있다.
The hand image analyzing unit may extract the information of the hand region by separating the hand region and the finger region from the hand region and rotating the hand region toward a certain direction after grasping the direction of the hand.

본 발명의 다른 관점에 따른 생체 인증 방법은, 피사체의 촬영 영상을 분석하여 얼굴 영역과 손 영역을 파악하는 단계와, 파악된 상기 얼굴 영역에서 얼굴 인증에 이용할 정보를 추출하는 단계와, 파악된 상기 손 영역에서 손 인증에 이용할 정보를 추출하는 단계와, 추출된 상기 얼굴 영역의 정보와 기 등록된 얼굴 생체 정보를 비교하여 얼굴 인증을 처리하는 단계와, 추출된 상기 손 영역의 정보와 기 등록된 손 생체 정보를 비교하여 손 인증을 처리하는 단계와, 상기 얼굴 인증의 처리 결과와 상기 손 인증의 처리 결과 중에서 적어도 하나 이상의 처리 결과에 따라 상기 피사체에 대한 생체 인증을 처리하는 단계와, 상기 생체 인증의 처리 결과를 출력하는 단계를 포함할 수 있다.According to another aspect of the present invention, there is provided a biometric authentication method including the steps of: analyzing a photographed image of a subject to determine a face area and a hand area; extracting information to be used for face authentication in the detected face area; Extracting information to be used for hand authentication in a hand region, processing face authentication by comparing the information of the extracted face region with previously registered face biometric information, A step of processing hand authentication by comparing hand biometric information; processing the biometric authentication with respect to the subject according to at least one process result of the face authentication process result and the hand authentication process result; And outputting the result of the processing of FIG.

여기서, 상기 얼굴 영역과 상기 손 영역의 위치 또는 상호간의 중첩도에 따라 상기 피사체의 촬영 자세를 안내하는 촬영 자세 정보를 생성하여 출력하는 단계를 더 포함할 수 있다.The method may further include generating and outputting photographing posture information for guiding the photographing posture of the subject according to the position of the face area and the hand area or the overlapping degree between the face area and the hand area.

상기 얼굴 영역과 손 영역을 파악하는 단계는, 양안의 위치를 검출한 후에 상기 양안의 위치를 기준으로 하여 상기 얼굴 영역을 추정할 수 있다.The step of recognizing the face area and the hand area may estimate the face area based on the position of the binocular after detecting the position of the binocular.

상기 얼굴 인증에 이용할 정보를 추출하는 단계는, 상기 양안을 연결하는 가상선의 기울기를 산출한 후에 추정된 상기 얼굴 영역을 상기 기울기에 대응하는 각도만큼 회전시켜서 상기 얼굴 영역의 정보를 추출할 수 있다.The step of extracting the information to be used for face authentication may include extracting information of the face area by calculating the slope of the virtual line connecting the two eyes and then rotating the estimated face area by an angle corresponding to the slope.

상기 얼굴 영역과 손 영역을 파악하는 단계는, 상기 얼굴 영역을 제외한 상기 영상에서 주변보다 상대적으로 밝은 화소가 모여있는 덩어리를 검출한 후에 상기 덩어리 내에서 상기 손 영역을 파악할 수 있다.The step of recognizing the face area and the hand area may detect the hand area in the lump after detecting a lump in which pixels relatively bright compared to the surroundings are detected in the image except for the face area.

상기 손 인증에 이용할 정보를 추출하는 단계는, 상기 손 영역 중에서 손바닥 영역과 손가락 영역을 분리하여 손의 방향을 파악한 후에 일정 방향을 향하도록 회전시켜서 상기 손 영역의 정보를 추출할 수 있다.
The step of extracting the information to be used for the hand authentication may extract the information of the hand region by separating the palm area and the finger area from the hand area and rotating the hand area toward a certain direction after grasping the direction of the hand.

본 발명의 실시예에 의하면, 얼굴 인식과 손 인식의 결과를 조합하여 생체 인증을 처리한다.According to the embodiment of the present invention, biometric authentication is performed by combining the results of face recognition and hand recognition.

이러한 멀티 모달 방식의 생체 인증 기술은 얼굴 인식을 위해 영상을 촬영하는 영상 획득수단과 손 인식을 위한 영상을 촬영하는 영상 획득수단을 공유할 수 있을 뿐만 아니라 생체 인증 장치에 일체로 구비되거나 별도로 설치될 수 있는 영상 촬영을 위한 적외선 광원 또한 공유할 수 있기 때문에 하드웨어적인 측면에서 결합도가 매우 높다. 따라서, 얼굴 인식 생체 인증 장치와 지문 인식 생체 인증 장치를 한 곳에 각각 설치하는 경우와 비교할 때에 코스트가 대폭 절감된다.Such a multimodal biometric authentication technique can share image acquiring means for acquiring images for face recognition and image acquiring means for acquiring images for hand recognition, as well as being integrally or separately installed in the biometric authentication apparatus Since the infrared light source for image capture can be also shared, the degree of coupling is very high in terms of hardware. Therefore, the cost is significantly reduced in comparison with the case where the face recognition biometric authentication device and the fingerprint recognition biometric authentication device are respectively installed in one place.

또, 얼굴 인증 처리와 손 인증 처리 시에 유사한 영상 분석 절차를 이용하기 때문에, 인증 처리 과정에 있어서도 결합도가 매우 높다. 따라서, 인증을 수행하는 이용자 측면에서는 얼굴 인증과 손 인증의 유사한 절차를 한꺼번에 수행하면서도 멀티 모달 방식에 의한 생체 인증의 신뢰성을 기대할 수 있다. 더욱이, 손 인증의 경우에는 생체 내부의 정맥을 이용할 수 있기 때문에 내위조성이 우수하여 얼굴 인증을 단독으로 수행할 때와 비교할 때에 인증 성능을 비약적으로 향상시킨다.In addition, since similar image analysis procedures are used in the face authentication process and the hand authentication process, the degree of coupling is very high in the authentication process. Therefore, in the aspect of the user performing the authentication, the reliability of the biometric authentication by the multimodal method can be expected while the similar procedures of the face authentication and the hand authentication are performed at the same time. Further, in the case of hand authentication, since the intravenous vein can be used, the authentication performance is dramatically improved in comparison with the case where the face authentication is performed singly, because the internal composition is excellent.

나아가, 실시예에 따르면 촬영된 영상으로부터 분석된 얼굴 영역과 손 영역의 중첩도에 따라 피사체의 올바른 촬영 자세를 안내하는 촬영 자세 정보를 제공하여, 촬영된 영상으로부터 양질의 생체 정보를 추출하기 때문에 변별력이 향상되어 FAR(False Acceptance Rate)가 낮은 우수한 인증 성능을 제공하는 효과가 있다.
Further, according to the embodiment, since the photographing posture information for guiding the correct photographing posture of the subject is provided according to the overlap degree of the face area and the hand area analyzed from the photographed image, and the good biometric information is extracted from the photographed image, Has an effect of providing excellent authentication performance with a low False Acceptance Rate (FAR).

도 1은 본 발명의 실시예에 따른 얼굴과 손 인식을 이용한 생체 인증 장치의 블록 구성도이다.
도 2는 본 발명의 실시예에 따른 얼굴과 손 인식을 이용한 생체 인증 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 실시예에 따라 생체 인증을 위해 획득한 영상을 분석하여 인증하는 과정을 설명하기 위한 예시도이다.
1 is a block diagram of a biometric authentication device using face and hand recognition according to an embodiment of the present invention.
2 is a flowchart illustrating a biometric authentication method using face and hand recognition according to an embodiment of the present invention.
3 is an exemplary diagram illustrating a process of analyzing and authenticating an image acquired for biometric authentication according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.BRIEF DESCRIPTION OF THE DRAWINGS The advantages and features of the present invention and the manner of achieving them will become apparent with reference to the embodiments described in detail below with reference to the accompanying drawings. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, and will fully convey the scope of the invention to those skilled in the art. To fully disclose the scope of the invention to those skilled in the art, and the invention is only defined by the scope of the claims.

본 발명의 실시예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명의 실시예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear. The following terms are defined in consideration of the functions in the embodiments of the present invention, which may vary depending on the intention of the user, the intention or the custom of the operator. Therefore, the definition should be based on the contents throughout this specification.

도 1은 본 발명의 실시예에 따른 얼굴과 손 인식을 이용한 생체 인증 장치의 블록 구성도이다.1 is a block diagram of a biometric authentication device using face and hand recognition according to an embodiment of the present invention.

이에 나타낸 바와 같이 본 발명의 실시예에 따른 생체 인증 장치(100)는, 영상 획득부(110), 근접 센싱부(120), 적외선 발생부(130), 정보 입력부(140), 제어부(150), 정보 저장부(160), 출력부(170), 인증 연동부(180) 등을 포함한다. 제어부(150)는 얼굴 영상 분석부(151), 손 영상 분석부(152), 얼굴 인증부(153), 손 인증부(155), 생체 인증부(157), 안내 정보 생성부(159) 등을 포함한다.The biometric authentication apparatus 100 includes an image acquisition unit 110, a proximity sensing unit 120, an infrared ray generation unit 130, an information input unit 140, a control unit 150, An information storage unit 160, an output unit 170, an authentication interlocking unit 180, and the like. The control unit 150 includes a facial image analysis unit 151, a hand image analysis unit 152, a face authentication unit 153, a hand authentication unit 155, a biometric authentication unit 157, a guide information generation unit 159, .

적외선 발생부(130)는 도 1에 예시한 바와 같이 생체 인증 장치(100)에 일체로 구비될 수도 있으며, 생체 인증 장치(100)와는 분리된 위치에 별도로 설치될 수 있다. 이러한 적외선 발생부(130)는 생체 인증 장치(100)의 영상 획득부(110)가 생체 인증을 위한 영상을 촬영할 수 있도록 적외선 광을 발생시키는 광원의 역할을 한다.1, the infrared ray generator 130 may be provided integrally with the biometric authentication device 100 or separately from the biometric authentication device 100. [ The infrared ray generator 130 serves as a light source that generates infrared light so that the image acquisition unit 110 of the biometric authentication apparatus 100 can capture images for biometric authentication.

근접 센싱부(120)는 피사체가 센싱 유효범위 내로 근접하는 것을 감지한다. 예컨대, 근접 센싱부(120)는 적외선 신호를 송출한 후에 피사체에 의해 반사되는 적외선 신호의 수신값에 따라 피사체의 근접을 감지할 수 있다.The proximity sensing unit 120 senses that the subject is approaching the sensing effective range. For example, the proximity sensing unit 120 may sense the proximity of the subject in accordance with the received value of the infrared signal reflected by the subject after transmitting the infrared signal.

영상 획득부(110)는 피사체를 촬영하여 영상을 획득한다. 적외선 발생부(130)에서 발생된 적외선 광에 대해 피사체가 그 일부는 흡수하고 일부는 반사하며, 영상 획득부(110)는 피사체에 의해 반사된 적외선 광을 수광하여 피사체의 영상을 획득한다. 여기서, 영상 획득부(110)는 일반적인 얼굴 인식 생체 인증 장치에 이용되는 카메라 등으로 구현할 수 있으며, 카메라에 의한 유효 근접 촬영범위에 피사체의 얼굴과 함께 손을 위치시키면 얼굴 인증과 손 인증에 모두 이용할 수 있는 인증용 영상을 획득할 수 있다. 또, 적외선 광은 형광등과 같은 주변광의 영향을 최소화하기 위해 사용되며, 정맥의 헤모글로빈이 적외선 광을 반사하지 않는 성질을 이용하여 피사체의 손(손바닥)에 형성된 정맥의 패턴을 인식할 수 있다.The image acquiring unit 110 acquires an image by photographing a subject. A part of the subject is absorbed and a part of the infrared light is reflected by the infrared ray generator 130. The image obtaining unit 110 receives the infrared ray reflected by the subject and acquires an image of the subject. Here, the image obtaining unit 110 may be implemented by a camera used in a general facial recognition biometric authentication device, and may be used for both face authentication and hand authentication when a hand is positioned with a face of a subject in an effective close- It is possible to obtain an image for authentication. In addition, the infrared light is used to minimize the influence of ambient light such as a fluorescent lamp, and the vein pattern formed on the hand (palm) of the subject can be recognized using the property that the vein hemoglobin does not reflect infrared light.

정보 입력부(140)는 사용자가 각종 명령이나 데이터를 입력할 수 있는 인터페이스이다. 예컨대, 생체 인증 장치(100)의 외부에 일체로 마련된 키패드 등으로 구현할 수 있다.The information input unit 140 is an interface through which a user can input various commands and data. For example, it can be realized by a keypad integrally provided outside the biometric authentication device 100.

얼굴 영상 분석부(151)는 영상 획득부(110)에 의해 획득된 영상에 대한 분석을 통해 얼굴 영역을 파악하며, 파악된 얼굴 영역으로부터 얼굴 인증에 이용할 정보를 추출한다. 이러한 영상 분석부(151)는 영상 획득부(110)에 의해 획득된 영상을 분석하여 얼굴 요소 중의 하나인 양안의 위치를 검출한 후에 양안의 위치를 기준으로 얼굴 영역을 추정할 수 있다. 또, 얼굴 영상 분석부(151)는 양안을 연결하는 가상선의 기울기를 산출한 후에 추정된 얼굴 영역을 기울기에 대응하는 각도만큼 회전시켜서 얼굴 인증에 이용할 정보를 추출할 수 있다.The facial image analyzing unit 151 analyzes the image obtained by the image obtaining unit 110, and extracts information to be used for face authentication from the detected facial region. The image analyzing unit 151 may analyze the image obtained by the image obtaining unit 110 to detect the position of one eye, which is one of the face elements, and then estimate the face area based on the positions of the two eyes. In addition, the facial image analyzing unit 151 can extract the information to be used for face authentication by calculating the slope of the virtual line connecting both eyes, and then rotating the estimated face region by an angle corresponding to the inclination.

손 영상 분석부(152)는 영상 획득부(110)에 의해 획득된 영상에 대한 분석을 통해 손 영역을 파악하며, 파악된 손 영역으로부터 손 인증에 이용할 정보를 추출한다. 이러한 손 영상 분석부(152)는 얼굴 영상 분석부(151)에 의해 추정된 얼굴 영역을 제외한 나머지 영역 중에서 주변보다 상대적으로 밝은 화소가 모여있는 덩어리를 검출한 후에 덩어리 내에서 손 영역을 파악할 수 있다. 또, 손 영상 분석부(152)는 파악된 손 영역 중에서 손바닥 영역과 손가락 영역을 분리하여 손의 방향을 파악한 후에 일정 방향을 향하도록 회전시켜서 손 인증에 이용할 정보를 추출할 수 있다. 예컨대, 손 영상 분석부(152)는 손 인증에 이용할 정보로서, 정맥 패턴, 손 모양, 손금 패턴 등을 추출할 수 있다. 정맥 패턴의 경우에, 손이나 손바닥 내부에 형성된 정맥을 통해 흐르는 혈액에 포함되어 있는 헤모글로빈은 적외선 광을 반사하지 않고 흡수하기 때문에, 손 영상 분석부(152)는 손 영역 내에서 주변보다 상대적으로 어두운 화소를 모아서 정맥 패턴을 추출할 수 있다.The hand image analyzing unit 152 grasps the hand region by analyzing the image obtained by the image obtaining unit 110 and extracts information to be used for hand authentication from the hand region. The hand image analyzing unit 152 can detect a hand region within a lump after detecting a lump in which relatively bright pixels are gathered from the rest of the regions excluding the face region estimated by the facial image analyzing unit 151 . In addition, the hand image analyzing unit 152 can extract information to be used for hand authentication by separating the palm area and the finger area from the detected hand area and rotating the hand area toward a certain direction after grasping the direction of the hand. For example, the hand image analyzing unit 152 can extract a vein pattern, a hand pattern, a palm pattern, and the like as information to be used for hand authentication. In the case of the vein pattern, since the hemoglobin contained in the blood flowing through the vein formed in the palm of the hand or the palm of the hand absorbs the infrared light without reflecting it, the hand image analyzing section 152 is relatively dark It is possible to collect the pixels and extract the vein pattern.

얼굴 인증부(153)는 영상 분석부(151)에 의해 추출된 얼굴 영역의 정보와 정보 저장부(160)에 기 등록된 얼굴 생체 정보를 비교하여 그 일치 여부 또는 유사도에 따라 얼굴 인증을 처리한다.The face authentication unit 153 compares the information of the face region extracted by the image analysis unit 151 with the previously registered face biometric information in the information storage unit 160 and processes the face authentication according to the matching or similarity .

손 인증부(155)는 영상 분석부(151)에 의해 추출된 손 영역의 정보와 정보 저장부(160)에 기 등록된 손 생체 정보를 비교하여 그 일치 여부 또는 유사도에 따라 손 인증을 처리한다.The hand authentication unit 155 compares the hand region information extracted by the image analysis unit 151 with previously registered hand biometric information in the information storage unit 160 and processes hand authentication according to the matching or similarity .

생체 인증부(159)는 얼굴 인증부(153)에 의한 얼굴 인증의 처리 결과와 손 인증부(155)에 의한 손 인증의 처리 결과 중에서 적어도 하나 이상의 처리 결과에 따라 피사체에 대한 생체 인증을 처리한다. 이러한 생체 인증부(159)는 얼굴 인증의 처리 결과와 손 인증의 처리 결과를 조합하여 피사체에 대한 생체 인증을 최종적으로 처리할 수 있으며, 얼굴 인증과 손 인증 중에서 어느 하나만 정상적으로 인증 처리된 경우라 할지라도 일치도에 비례하는 인증점수가 기 설정된 기준점수보다 높을 경우에는 피사체에 대한 최종적인 인증 결과를 정상으로 판정할 수 있다. 또는, 얼굴 인증부(153)에 의한 인증점수와 손 인증부(155)에 의한 인증점수의 평균점수나 합계점수 등과 기 설정된 기준점수를 비교하며, 기준점수보다 평균점수 또는 합계점수가 더 클 때에 최종적인 인증 결과를 정상으로 판정할 수도 있다. 한편, 얼굴 인증부(153)에 의한 인증점수와 손 인증부(155)에 의한 인증점수를 각각의 기준점수와 비교하여 두 개의 인증점수가 각각의 기준점수보다 모두 더 클 때에만 최종적인 인증 결과를 정상으로 판정하면 FAR를 줄일 수 있다.The biometric authentication unit 159 processes the biometric authentication for the subject according to at least one of the processing results of the face authentication processing by the face authentication unit 153 and the hand authentication processing by the hand authentication unit 155 . The biometric authentication unit 159 can finally process the biometric authentication for the subject by combining the processing result of the face authentication and the processing result of the hand authentication, and only one of the face authentication and the hand authentication is normally authenticated If the authentication score proportional to the match degree is higher than the predetermined reference score, the final authentication result for the subject can be determined as normal. Alternatively, an authentication score obtained by the face authentication unit 153, an average score or a total score of the authentication score obtained by the hand authentication unit 155, and the like are compared with a predetermined reference score, and when the average score or the total score is larger than the reference score The final authentication result may be determined to be normal. On the other hand, when the authentication score by the face authentication unit 153 and the authentication score by the hand authentication unit 155 are compared with the respective reference scores, only when the two authentication scores are greater than the respective reference scores, Is determined to be normal, the FAR can be reduced.

안내 정보 생성부(159)는 영상 분석부(151)에 의해 파악된 얼굴 영역과 손 영역의 위치 또는 상호간의 중첩도에 따라 피사체의 촬영 자세를 안내하는 촬영 자세 정보를 생성하여 출력부(170)를 통해 출력되도록 한다. 예컨대, 얼굴 영역과 손 영역의 위치가 기 설정된 영역, 예컨대 중앙 영역을 벗어나면 인증을 위한 정보를 제대로 추출할 수 없는 경우라 할 수 있다. 이때, 피사체가 얼굴과 손의 위치를 변경할 수 있도록 안내하는 촬영 자세 정보를 생성하여 제공하는 것이다. 또는, 얼굴 영역과 손 영역의 상호간 중첩도가 기 설정된 기준값보다 높을 경우에는 손이 얼굴을 지나치게 많이 가리고 있는 자세라고 판정하며, 얼굴 영역의 정보를 제대로 추출할 수 없는 경우라 할 수 있다. 이때, 피사체가 얼굴과 손의 중첩도를 낮추거나 서로 분리시킬 수 있도록 안내하는 촬영 자세 정보를 생성하여 제공하는 것이다.The guide information generating unit 159 generates the photographing posture information for guiding the photographing posture of the subject according to the position of the face area and the hand area or the degree of mutual overlap between the images captured by the image analyzing unit 151, . For example, if the position of the face area and the hand area deviate from a preset area, for example, a central area, information for authentication can not be extracted properly. At this time, the photographing posture information for guiding the subject to change the position of the face and the hand is generated and provided. Alternatively, when the mutual overlap between the face area and the hand area is higher than the preset reference value, it is determined that the hand is an attitude that faces the face excessively, and the information of the face area can not be extracted properly. At this time, the photographing posture information for guiding the subject to lower the degree of overlap between the face and the hand or to separate them from each other is generated and provided.

정보 저장부(160)에는 얼굴 인증부(153)의 얼굴 인증에 필요한 얼굴 생체 정보와 손 인증부(155)의 손 인증에 필요한 손 생체 정보가 등록 및 저장된다. 이외에도, 정보 저장부(160)에는 영상 분석 및 인증 과정에서 필요한 각종 기준값이나 데이터가 저장될 수 있다.The face biometric information required for the face authentication of the face authentication unit 153 and the hand biometric information necessary for the hand authentication of the hand authentication unit 155 are registered and stored in the information storage unit 160. [ In addition, various reference values and data necessary for the image analysis and authentication process may be stored in the information storage unit 160.

출력부(170)는 생체 인증부(157)에 의한 생체 인증의 처리 결과와 안내 정보 생성부(159)에 의한 촬영 자세 정보를 외부에 화상이나 음성 등으로 출력하여 사용자가 인지할 수 있도록 한다. 이외에도, 출력부(170)는 영상 획득부(110)에 의한 촬영 시에 실시간으로 획득되는 영상을 표시할 수 있다.The output unit 170 outputs the processing result of the biometric authentication by the biometric authentication unit 157 and the photographing posture information by the guide information generating unit 159 to the outside through an image or voice to allow the user to recognize the image. In addition, the output unit 170 may display an image obtained in real time at the time of photographing by the image obtaining unit 110.

인증 연동부(180)는 생체 인증부(157)에 의한 생체 인증 결과에 따라 연동하는 각종의 부하물로 구현될 수 있다. 예컨대, 생체 인증 장치(100)가 출입 통제 시스템을 구축한 경우라면 생체 인증 결과에 따라 출입문을 개폐하는 액추에이터(actuator)로 구현될 수 있다.
The authentication interlocking unit 180 can be implemented with various loads linked to each other according to the biometric authentication result by the biometric authentication unit 157. [ For example, if the biometric authentication device 100 is constructed as an access control system, it may be implemented as an actuator that opens and closes a door according to a biometric authentication result.

도 2는 본 발명의 실시예에 따른 얼굴과 손 인식을 이용한 생체 인증 방법을 설명하기 위한 흐름도이다.2 is a flowchart illustrating a biometric authentication method using face and hand recognition according to an embodiment of the present invention.

이에 나타낸 바와 같이 실시예에 따른 생체 인증 방법은, 근접된 피사체의 영상을 촬영 및 분석하여 얼굴 영역과 손 영역을 파악하는 단계(S201 내지 S209)를 포함한다.As described above, the biometric authentication method according to the embodiment includes steps (S201 to S209) of capturing and analyzing an image of a nearby subject and grasping a face area and a hand area.

그리고, 파악된 얼굴 영역과 손 영역의 위치 또는 상호간의 중첩도에 따라 피사체의 촬영 자세를 안내하는 촬영 자세 정보를 생성하여 출력하는 단계(S211 내지 S215)를 더 포함한다.The method further includes steps (S211 to S215) of generating and outputting photographing posture information for guiding the photographing posture of the subject in accordance with the detected position of the face area and the hand area or the overlapping degree of each other.

또, 파악된 얼굴 영역의 정보와 기 등록된 얼굴 생체 정보를 비교하여 얼굴 인증을 처리하는 단계(S217 내지 S225)를 더 포함한다.The method further includes a step (S217 to S225) of processing the face authentication by comparing the information of the detected face area with the previously registered face biometric information.

아울러, 파악된 손 영역의 정보와 기 등록된 손 생체 정보를 비교하여 손 인증을 처리하는 단계(S227 내지 S237)를 더 포함한다.The method further includes a step (S227 to S237) of comparing the information of the hand region thus identified with the previously registered hand biometric information to process the hand authentication.

또한, 얼굴 인증의 처리 결과와 손 인증의 처리 결과 중에서 적어도 하나 이상의 처리 결과에 따라 피사체에 대한 생체 인증을 처리하는 단계(S239)를 더 포함한다.
The method further includes a step (S239) of processing the biometric authentication for the subject according to at least one of the processing result of the face authentication and the processing result of the hand authentication.

이하, 도 1 내지 도 3을 참조하여 본 발명의 실시예에 따른 생체 인증 장치가 얼굴과 손 인식을 이용하여 피사체에 대해 생체 인증을 수행하는 과정에 대해 더 자세히 살펴보기로 한다.Hereinafter, a biometric authentication apparatus according to an exemplary embodiment of the present invention performs biometric authentication on a subject using face and hand recognition will be described in more detail with reference to FIGS. 1 to 3. FIG.

먼저, 근접 센싱부(120)는 적외선 신호를 송출한 후에 피사체에 의해 반사되는 적외선 신호의 수신값에 따라 피사체가 센싱 유효범위 내로 근접하는 것을 감지한다(S201).First, the proximity sensing unit 120 senses that the subject approaches the sensing effective range according to the reception value of the infrared signal reflected by the subject after transmitting the infrared signal (S201).

그리고, 근접 센싱부(120)에 의해 피사체의 근접이 감지되면 제어부(150)의 제어에 따라 적외선 발생부(130)는 적외선 광을 발생시켜서 영상 획득부(110)에 의해 영상이 용이하게 촬영될 수 있도록 한다(S203).When the proximity sensing unit 120 senses the proximity of the subject, the infrared ray generator 130 generates infrared light under the control of the controller 150 and the image is easily captured by the image acquisition unit 110 (S203).

그러면, 영상 획득부(110)는 피사체를 촬영하여 영상을 획득한다. 여기서, 적외선 발생부(130)에서 발생된 적외선 광에 대해 피사체가 그 일부는 흡수하고 일부는 반사하며, 영상 획득부(110)는 피사체에 의해 반사된 적외선 광을 수광하여 피사체의 영상을 획득한다(S205).Then, the image acquiring unit 110 acquires an image by photographing a subject. Here, the infrared ray generated by the infrared ray generator 130 is partially absorbed and partially reflected by the object, and the image acquisition unit 110 receives the infrared ray reflected by the object to acquire an image of the object (S205).

이때, 피사체가 생체 인증을 수행하려는 사용자라면 사전에 약속된 규칙에 의거하여 도 3에 예시한 바와 같이 손바닥을 외부로 향하게 한 상태에서 얼굴 근처에 위치시켜서 영상 획득부(110)가 얼굴 인증과 손 인증에 모두 이용할 수 있는 인증용 영상을 획득할 수 있도록 한다.In this case, if the subject is a user who intends to perform biometric authentication, the image acquisition unit 110 places the hand in the vicinity of the face with the palm facing outward as exemplified in Fig. 3 based on predetermined rules, So that it is possible to acquire authentication images that can be used for authentication.

이렇게, 영상 획득부(110)에 의해 획득된 피사체의 영상은 얼굴 영상 분석부(151)와 손 영상 분석부(152)로 제공되며, 얼굴 영상 분석부(151)는 획득된 영상에 대한 분석을 통해 얼굴 영역을 파악하고, 손 영상 분석부(152)는 획득된 영상에 대한 분석을 통해 손 영역을 파악한다(S207 및 S209).In this way, the image of the object acquired by the image acquisition unit 110 is provided to the facial image analysis unit 151 and the hand image analysis unit 152, and the facial image analysis unit 151 analyzes the acquired image The hand image analyzing unit 152 identifies the hand region through analysis of the obtained image (S207 and S209).

여기서, 얼굴 영상 분석부(151)는 영상 획득부(110)에 의해 획득된 영상을 분석하여 얼굴 요소 중의 하나인 양안의 위치를 먼저 검출한다. 예컨대, 도 3에 예시된 영상에서 공지의 아다부스트(adaboost) 알고리즘 등을 이용하여 양안(301, 303)의 위치를 검출할 수 있다. 이어서, 양안의 위치를 기준으로 얼굴 영역을 추정한다. 예컨대, 얼굴 영역을 사각 형태(305)로 추정할 수 있다.Here, the facial image analyzing unit 151 analyzes the image acquired by the image acquiring unit 110 and detects the position of one of the facial elements. For example, the positions of the eyes 301 and 303 can be detected using a known adaboost algorithm or the like in the image illustrated in FIG. Then, the face region is estimated based on the positions of both eyes. For example, the face region can be estimated to be a rectangular shape 305.

아울러, 얼굴 영상 분석부(151)가 얼굴 영역을 먼저 검출한 후에 손 영상 분석부(152)가 나중에 손 영역을 검출하는 경우라면, 획득된 영상에 대해 얼굴 영역을 제외한 나머지 영역 중에서 주변보다 상대적으로 밝은 화소가 모여있는 덩어리(blob)를 검출한 후에 덩어리 내에서 손 영역을 파악하면 좀 더 정확하고 신속하게 손 영역을 파악할 수 있다.If the hand image analyzing unit 152 detects the hand region later after the face image analyzing unit 151 first detects the face region, it is preferable that the remaining region excluding the face region is relatively After detecting a blob in which bright pixels are gathered, it is possible to grasp the hand area more accurately and quickly by grasping the hand area in the chunk.

여기서, 안내 정보 생성부(159)는 영상 분석부(151)에 의해 파악된 얼굴 영역과 손 영역의 위치 또는 상호간의 중첩도에 따라 피사체의 촬영 자세를 안내하는 촬영 자세 정보를 생성한다.Here, the guide information generating unit 159 generates the photographing posture information for guiding the photographing posture of the subject in accordance with the position of the face area and the hand area or the degree of overlap between them, which is grasped by the image analyzing unit 151. [

예컨대, 안내 정보 생성부(159)는 얼굴 영역과 손 영역의 위치를 파악하며(S211), 얼굴 영역과 손 영역 중에서 어느 하나라도 기 설정된 영역, 예컨대 중앙 영역을 벗어나면 인증을 위한 정보를 제대로 추출할 수 없는 경우라고 판정할 수 있다(S213). 이때, 피사체가 얼굴과 손의 위치를 변경할 수 있도록 안내하는 촬영 자세 정보를 생성하는 것이다.For example, the guidance information generation unit 159 determines the position of the face area and the hand area (S211). If any of the face area and the hand area is out of a predetermined area, for example, the central area, (S213). ≪ / RTI > At this time, the photographing posture information for guiding the subject to change the position of the face and the hand is generated.

또는, 안내 정보 생성부(159)는 얼굴 영역과 손 영역의 상호간 중첩도를 계산하며(S211), 계산된 중첩도와 기 설정된 기준값을 비교하여 피사체가 생체 인증을 위한 정 자세를 취하고 있는지를 판정한다(S213). 예컨대, 얼굴 영역과 손 영역의 중첩도가 기 설정된 기준값보다 높을 경우에는 손이 얼굴을 지나치게 많이 가리고 있는 자세라고 판정하며, 얼굴 영역의 정보를 제대로 추출할 수 없는 경우라 할 수 있기에, 피사체가 얼굴과 손의 중첩도를 낮추거나 서로 분리시킬 수 있도록 안내하는 촬영 자세 정보를 생성한다.Alternatively, the guide information generation unit 159 calculates the overlap degree between the face area and the hand area (S211), compares the calculated overlap and the preset reference value, and determines whether the subject is in a positive posture for biometric authentication (S213). For example, when the overlap degree between the face area and the hand area is higher than the preset reference value, it is determined that the hand is an attitude that overshoots the face excessively, and the information of the face area can not be extracted properly. And the photographing posture information for guiding the degree of overlap of the hand to be lowered or separated from each other.

그러면, 출력부(170)가 안내 정보 생성부(159)에 의해 생성된 촬영 자세 정보를 화면이나 음성 등을 통해 출력하여 피사체, 즉 생체 인증을 수행하는 사용자가 인지할 수 있도록 하여 피사체가 생체 인증을 위한 정 자세를 취할 수 있도록 유도한다(S215).Then, the output unit 170 outputs the photographing posture information generated by the guide information generating unit 159 through a screen, a voice, or the like so that a subject, that is, a user who performs biometric authentication can recognize the subject, (Step S215).

다음으로, 피사체가 생체 인증을 위한 정 자세를 취하고 있는 것으로 판정되면, 얼굴 영상 분석부(151)는 파악된 얼굴 영상에 대해 양안을 연결하는 가상선의 기울기를 산출하며(S217), 추정된 얼굴 영역을 산출된 기울기에 대응하는 각도만큼 회전시켜서 정보 저장부(160)에 기 등록된 얼굴 생체 정보와 비교하기 위한 얼굴 영역의 정보를 추출한다(S221). 여기서, 얼굴 인증부(153)가 얼굴 영역을 회전시킨 후에 인증을 위한 정보를 추출하는 것은 피사체의 고개가 기울어진 상태로 촬영된 영상으로부터 추출된 생체 정보는 정확도가 떨어질 수 있기 때문이다. 즉, 이처럼 얼굴 영역의 각도를 보정한 후에 인증을 위한 정보를 추출하면 생체 정보의 정확도가 향상되기 때문에 그만큼 인증의 신뢰성도 향상된다.Next, if it is determined that the subject is in a correct posture for biometric authentication, the facial image analysis unit 151 calculates the slope of the virtual line connecting the binarized face image (S217) (Step S221). The face area information is compared with the face biometric information registered in the information storage unit 160 (step S221). Here, the fact that the face authentication unit 153 rotates the face area and then extracts the information for authentication is because the accuracy of the biometric information extracted from the image photographed in a state where the head of the subject is inclined can be lowered. That is, if the information for authentication is extracted after correcting the angle of the face region, the accuracy of the biometric information is improved and the authentication reliability is improved accordingly.

아울러, 손 영상 분석부(152)는 손 영역 중에서 손바닥 영역과 손가락 영역을 분리하여 손의 방향을 파악한 후에 일정 방향을 향하도록 회전시킨 후, 정보 저장부(160)에 기 등록된 손 생체 정보와 비교하기 위한 손 영역의 정보를 추출한다(S227 내지 S233).In addition, the hand image analyzing unit 152 separates the palm area and the finger area from the hand area, rotates the hand area toward a predetermined direction after grasping the direction of the hand, And extracts the information of the hand region for comparison (S227 to S233).

여기서, 손 영상 분석부(152)가 손 영상을 일정 방향으로 회전시키는 것은 다수의 사용자가 항상 같은 방향으로 손을 위치시키지 않기 때문에 이를 보정하여 항상 정확한 정보만을 추출하기 위함이다. 즉, 이처럼 손의 각도를 보정한 후에 인증을 위한 정보를 추출하면 생체 정보의 정확도가 향상되기 때문에 그만큼 인증의 신뢰성도 향상된다.Here, the hand image analyzing unit 152 rotates the hand image in a certain direction in order to extract only the correct information at all times since the plurality of users do not always place the hand in the same direction. That is, if the information for authentication is extracted after correcting the angle of the hand as described above, the accuracy of the biometric information is improved and the reliability of the authentication is improved accordingly.

예컨대, 손 영상 분석부(152)는 손 인증에 이용할 정보로서, 정맥 패턴, 손 모양, 손금 패턴 등을 추출할 수 있다. 즉, 손이나 손바닥의 형상 정보를 추출하거나 인체 속에 형성된 정맥 패턴 정보를 추출할 수 있다. 정맥 패턴의 경우에, 손이나 손바닥 내부에 형성된 정맥을 통해 흐르는 혈액에 포함되어 있는 헤모글로빈은 적외선 광을 반사하지 않고 흡수하기 때문에, 손 영상 분석부(152)는 손 영역 내에서 주변보다 상대적으로 어두운 화소를 모아서 정맥 패턴을 추출할 수 있다.For example, the hand image analyzing unit 152 can extract a vein pattern, a hand pattern, a palm pattern, and the like as information to be used for hand authentication. That is, it is possible to extract shape information of a hand or a palm or to extract vein pattern information formed in the human body. In the case of the vein pattern, since the hemoglobin contained in the blood flowing through the vein formed in the palm of the hand or the palm of the hand absorbs the infrared light without reflecting it, the hand image analyzing section 152 is relatively dark It is possible to collect the pixels and extract the vein pattern.

또, 손 영상 분석부(152)는 영상 획득부(110)에 의해 획득된 영상을 대상으로 하여 공지의 ASM(Active Shape Model) 알고리즘 등을 이용해 분석하여 손 요소인 손바닥(307)과 손가락(309)을 검출한다. 여기서, 얼굴 영상 분석부(151)가 얼굴 영역에 대한 검출을 먼저 완료한 경우라면, 손 영상 분석부(152)는 획득된 피사체의 영상으로부터 얼굴 영역을 제외한 나머지 영역 중에서 주변보다 상대적으로 밝은 화소가 모여있는 덩어리(blob)를 검출한 후에 덩어리 내에서 손 영역을 파악하면 좀 더 정확하고 신속하게 손 영역을 파악할 수 있다.The hand image analyzing unit 152 analyzes the image obtained by the image acquiring unit 110 using a known ASM (Active Shape Model) algorithm or the like to calculate the hand image of the palm 307 and the finger 309 ). If the facial image analyzing unit 151 has already completed the detection of the facial region, the hand image analyzing unit 152 extracts a relatively bright pixel from the obtained image of the subject, excluding the face region, Once the gathered blobs are detected, the hand area can be grasped more accurately and quickly in the chunk.

이어서, 얼굴 인증부(153)는 얼굴 영상 분석부(151)에 의해 추출된 얼굴 영역의 정보와 정보 저장부(160)에 기 등록된 얼굴 생체 정보를 비교하여 그 일치 여부 또는 유사도에 따라 얼굴 인증을 처리한다(S223 및 S225).Then, the face authentication unit 153 compares the information of the face region extracted by the face image analysis unit 151 with the previously registered face biometric information in the information storage unit 160 and, based on the matching or similarity, (S223 and S225).

아울러, 손 인증부(155)는 손 영상 분석부(152)에 의해 추출된 손 영역의 정보와 정보 저장부(160)에 기 등록된 손 생체 정보를 비교하여 그 일치 여부 또는 유사도에 따라 손 인증을 처리한다(S235 및 S237).The hand authentication unit 155 compares the information of the hand region extracted by the hand image analyzing unit 152 with previously registered hand biometric information in the information storage unit 160, (S235 and S237).

다음으로, 얼굴 인증부(153)에 의한 얼굴 인증 결과와 손 인증부(155)가 생체 인증부(157)로 제공되며, 생체 인증부(159)는 얼굴 인증부(153)에 의한 얼굴 인증의 처리 결과와 손 인증부(155)에 의한 손 인증의 처리 결과 중에서 적어도 하나 이상의 처리 결과에 따라 피사체에 대한 생체 인증을 처리한다.Next, the face authentication result by the face authentication unit 153 and the hand authentication unit 155 are provided to the biometrics authentication unit 157, and the biometrics authentication unit 159 receives the face authentication result from the face authentication unit 153 And processes the biometric authentication of the subject according to at least one of the processing results and the hand authentication processing result by the hand authentication unit 155. [

이러한 생체 인증부(159)는 얼굴 인증의 처리 결과와 손 인증의 처리 결과를 조합하여 피사체에 대한 생체 인증을 최종적으로 처리할 수 있으며, 얼굴 인증과 손 인증 중에서 어느 하나만 정상적으로 인증 처리된 경우라 할지라도 일치도에 비례하는 인증점수가 기 설정된 기준점수보다 높을 경우에는 피사체에 대한 최종적인 인증 결과를 정상으로 판정할 수 있다. 또는, 얼굴 인증부(153)에 의한 인증점수와 손 인증부(155)에 의한 인증점수의 평균점수나 합계점수 등과 기 설정된 기준점수를 비교하며, 기준점수보다 평균점수 또는 합계점수가 더 클 때에 최종적인 인증 결과를 정상으로 판정할 수도 있다.The biometric authentication unit 159 can finally process the biometric authentication for the subject by combining the processing result of the face authentication and the processing result of the hand authentication, and only one of the face authentication and the hand authentication is normally authenticated If the authentication score proportional to the match degree is higher than the predetermined reference score, the final authentication result for the subject can be determined as normal. Alternatively, an authentication score obtained by the face authentication unit 153, an average score or a total score of the authentication score obtained by the hand authentication unit 155, and the like are compared with a predetermined reference score, and when the average score or the total score is larger than the reference score The final authentication result may be determined to be normal.

한편, 생체 인증부(157)가 얼굴 인증부(153)에 의한 인증점수와 손 인증부(155)에 의한 인증점수를 각각의 기준점수와 비교하여 두 개의 인증점수가 각각의 기준점수보다 모두 더 클 때에만 최종적인 인증 결과를 정상으로 판정하면 FAR를 줄일 수 있다(S239).On the other hand, when the biometric authentication unit 157 compares the authentication score by the face authentication unit 153 and the authentication score by the hand authentication unit 155 with the respective reference scores, the two authentication scores are all more than the respective reference scores If the final authentication result is determined to be normal only when it is large, the FAR can be reduced (S239).

이렇게, 제어부(150)의 생체 인증부(157)에 의해 판정된 생체 인증 결과는 출력부(170)를 통해 화상이나 음성 등으로 출력되어 사용자가 인지할 수 있도록 한다.In this way, the biometric authentication result determined by the biometric authentication unit 157 of the control unit 150 is outputted through the output unit 170 as an image or voice so that the user can recognize the biometric authentication result.

또, 인증 연동부(180)는 생체 인증부(157)에 의한 생체 인증 결과에 따라 각종의 부하물을 연동시킬 수 있다. 예컨대, 생체 인증 장치(100)가 출입 통제 시스템을 구축한 경우라면 생체 인증 결과에 따라 액추에이터를 구동시켜서 출입문을 개폐할 수 있다.
In addition, the authentication interlocking unit 180 can interlock various loads according to the biometric authentication result by the biometric authentication unit 157. [ For example, if the biometric authentication device 100 has constructed the access control system, the access door can be opened and closed by driving the actuator according to the biometric authentication result.

지금까지 설명한 바와 같이, 얼굴 인식과 손 인식을 결합한 멀티 모달 방식의 생체 인증 기술은 얼굴 인식을 위해 영상과 손 인식을 위한 영상을 단일의 영상 획득수단, 즉 카메라 등으로 촬영할 수 있을 뿐만 아니라 생체 인증 장치에 일체로 구비되거나 별도로 설치될 수 있는 영상 촬영을 위한 적외선 광원 또한 공유할 수 있기 때문에 하드웨어적인 측면에서 결합도가 매우 높다. 따라서, 얼굴 인식 생체 인증 장치와 지문 인식 생체 인증 장치를 한 곳에 각각 설치하는 경우와 비교할 때에 코스트가 대폭 절감된다.As described above, the multimodal biometric authentication technology that combines face recognition and hand recognition can capture an image for image recognition and hand recognition by a single image acquisition means, that is, a camera or the like, Since the IR light source for image capture, which can be installed integrally with the apparatus or can be installed separately, can also be shared, the degree of coupling is very high in terms of hardware. Therefore, the cost is significantly reduced in comparison with the case where the face recognition biometric authentication device and the fingerprint recognition biometric authentication device are respectively installed in one place.

또, 얼굴 인증 처리와 손 인증 처리 시에 유사한 영상 분석 절차를 이용하기 때문에, 인증 처리 과정에 있어서도 결합도가 매우 높다. 따라서, 인증을 수행하는 이용자 측면에서는 얼굴 인증과 손 인증의 유사한 절차를 한꺼번에 수행하면서도 멀티 모달 방식에 의한 생체 인증의 신뢰성을 기대할 수 있다. 더욱이, 손 인증의 경우에는 생체 내부의 정맥을 이용할 수 있기 때문에 내위조성이 우수하여 얼굴 인증을 단독으로 수행할 때와 비교할 때에 인증 성능을 비약적으로 향상시킨다.
In addition, since similar image analysis procedures are used in the face authentication process and the hand authentication process, the degree of coupling is very high in the authentication process. Therefore, in the aspect of the user performing the authentication, the reliability of the biometric authentication by the multimodal method can be expected while the similar procedures of the face authentication and the hand authentication are performed at the same time. Further, in the case of hand authentication, since the intravenous vein can be used, the authentication performance is dramatically improved in comparison with the case where the face authentication is performed singly, because the internal composition is excellent.

본 발명에 첨부된 각 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도의 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다. Combinations of the steps of each flowchart attached to the present invention may be performed by computer program instructions. These computer program instructions may be loaded into a processor of a general purpose computer, special purpose computer, or other programmable data processing apparatus so that the instructions, which are executed via a processor of a computer or other programmable data processing apparatus, Lt; / RTI > These computer program instructions may also be stored in a computer usable or computer readable memory capable of directing a computer or other programmable data processing apparatus to implement the functionality in a particular manner so that the computer usable or computer readable memory It is also possible to produce manufacturing items that contain instruction means for performing the functions described in each step of the flowchart. Computer program instructions may also be stored on a computer or other programmable data processing equipment so that a series of operating steps may be performed on a computer or other programmable data processing equipment to create a computer- It is also possible for the instructions to perform the processing equipment to provide steps for executing the functions described in each step of the flowchart.

또한, 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시예들에서는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.In addition, each step may represent a module, segment, or portion of code that includes one or more executable instructions for executing the specified logical function (s). It should also be noted that in some alternative embodiments, the functions mentioned in the steps may occur out of order. For example, the two steps shown in succession may in fact be performed substantially concurrently, or the steps may sometimes be performed in reverse order according to the corresponding function.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
The foregoing description is merely illustrative of the technical idea of the present invention and various changes and modifications may be made by those skilled in the art without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents should be construed as falling within the scope of the present invention.

110 : 영상 획득부 120 : 근접 센싱부
130 : 적외선 발생부 140 : 정보 입력부
150 : 제어부 151 : 얼굴 영상 분석부
152 : 손 영상 분석부 153 : 얼굴 인증부
155 : 손 인증부 157 : 생체 인증부
159 : 안내 정보 생성부 160 : 정보 저장부
170 : 출력부 180 : 인증 연동부
110: image acquiring unit 120: proximity sensing unit
130: infrared ray generator 140: information input unit
150: control unit 151: facial image analysis unit
152: hand image analysis unit 153: face authentication unit
155: hand authentication unit 157: biometrics authentication unit
159: Guide information generating unit 160: Information storing unit
170: output unit 180: authentication interlocking unit

Claims (12)

피사체를 촬영하여 영상을 획득하는 영상 획득부와,
획득된 상기 영상에 대한 분석을 통해 얼굴 영역을 파악하여 얼굴 인증에 이용할 정보를 추출하는 얼굴 영상 분석부와,
획득된 상기 영상에 대한 분석을 통해 손 영역을 파악하여 손 인증에 이용할 정보를 추출하는 손 영상 분석부와,
추출된 상기 얼굴 영역의 정보와 기 등록된 얼굴 생체 정보를 비교하여 얼굴 인증을 처리하는 얼굴 인증부와,
추출된 상기 손 영역의 정보와 기 등록된 손 생체 정보를 비교하여 손 인증을 처리하는 손 인증부와,
상기 얼굴 인증의 처리 결과와 상기 손 인증의 처리 결과 중에서 적어도 하나 이상의 처리 결과에 따라 상기 피사체에 대한 생체 인증을 처리하는 생체 인증부와,
상기 생체 인증의 처리 결과를 출력하는 출력부를 포함하는 생체 인증 장치.
An image acquiring unit that acquires an image by photographing a subject;
A face image analyzing unit for recognizing a face region through analysis of the obtained image and extracting information to be used for face authentication,
A hand image analyzing unit for recognizing a hand region through analysis of the obtained image and extracting information to be used for hand authentication;
A face authentication unit for comparing face information of the extracted face region with previously registered face biometric information to process face authentication,
A hand authentication unit for comparing the extracted hand region information with previously registered hand biometric information to process hand authentication;
A biometric authentication unit for processing the biometric authentication for the subject according to at least one result of the processing result of the face authentication and the processing result of the hand authentication;
And an output unit outputting a result of the biometric authentication process.
제 1 항에 있어서,
상기 얼굴 영역과 상기 손 영역의 위치 또는 상호간의 중첩도에 따라 상기 피사체의 촬영 자세를 안내하는 촬영 자세 정보를 생성하여 상기 출력부를 통해 출력되도록 하는 안내 정보 생성부를 더 포함하는 생체 인증 장치.
The method according to claim 1,
Further comprising: a guide information generating unit for generating photographing posture information for guiding the photographing posture of the subject in accordance with the position of the face area and the hand area or the overlapping degree between the face area and the hand area, and outputting the photographing posture information through the output unit.
제 1 항에 있어서,
상기 얼굴 영상 분석부는, 양안의 위치를 검출한 후에 상기 양안의 위치를 기준으로 하여 상기 얼굴 영역을 추정하는 생체 인증 장치.
The method according to claim 1,
Wherein the face image analyzing unit estimates the face region based on a position of both eyes after detecting a position of both eyes.
제 3 항에 있어서,
상기 얼굴 영상 분석부는, 상기 양안을 연결하는 가상선의 기울기를 산출한 후에 추정된 상기 얼굴 영역을 상기 기울기에 대응하는 각도만큼 회전시켜서 상기 얼굴 영역의 정보를 추출하는 생체 인증 장치.
The method of claim 3,
Wherein the face image analyzing unit calculates the slope of the virtual line connecting the two eyes and then rotates the estimated face area by an angle corresponding to the slope to extract the information of the face area.
제 1 항에 있어서,
상기 손 영상 분석부는, 상기 얼굴 영역을 제외한 상기 영상에서 주변보다 상대적으로 밝은 화소가 모여있는 덩어리를 검출한 후에 상기 덩어리 내에서 상기 손 영역을 파악하는 생체 인증 장치.
The method according to claim 1,
Wherein the hand image analyzing unit grasps the hand region in the lump after detecting a lump in which pixels relatively bright compared to the surroundings are detected in the image excluding the face region.
제 1 항에 있어서,
상기 손 영상 분석부는, 상기 손 영역 중에서 손바닥 영역과 손가락 영역을 분리하여 손의 방향을 파악한 후에 일정 방향을 향하도록 회전시켜서 상기 손 영역의 정보를 추출하는 생체 인증 장치.
The method according to claim 1,
Wherein the hand image analyzing unit extracts information of the hand region by separating the hand region and the finger region from the hand region and rotating the hand region toward a predetermined direction after grasping the direction of the hand.
피사체의 촬영 영상을 분석하여 얼굴 영역과 손 영역을 파악하는 단계와,
파악된 상기 얼굴 영역에서 얼굴 인증에 이용할 정보를 추출하는 단계와,
파악된 상기 손 영역에서 손 인증에 이용할 정보를 추출하는 단계와,
추출된 상기 얼굴 영역의 정보와 기 등록된 얼굴 생체 정보를 비교하여 얼굴 인증을 처리하는 단계와,
추출된 상기 손 영역의 정보와 기 등록된 손 생체 정보를 비교하여 손 인증을 처리하는 단계와,
상기 얼굴 인증의 처리 결과와 상기 손 인증의 처리 결과 중에서 적어도 하나 이상의 처리 결과에 따라 상기 피사체에 대한 생체 인증을 처리하는 단계와,
상기 생체 인증의 처리 결과를 출력하는 단계를 포함하는 생체 인증 방법.
Analyzing a photographed image of a subject to grasp a face region and a hand region;
Extracting information to be used for face authentication in the identified face area;
Extracting information to be used for hand authentication in the identified hand region,
Processing the face authentication by comparing the information of the extracted face region with previously registered face biometric information,
Processing the hand authentication by comparing the extracted hand region information with previously registered hand biometric information,
Processing the biometric authentication for the subject according to at least one process result of the face authentication process result and the hand authentication process result;
And outputting the processing result of the biometric authentication.
제 7 항에 있어서,
상기 얼굴 영역과 상기 손 영역의 위치 또는 상호간의 중첩도에 따라 상기 피사체의 촬영 자세를 안내하는 촬영 자세 정보를 생성하여 출력하는 단계를 더 포함하는 생체 인증 방법.
8. The method of claim 7,
Further comprising the step of generating and outputting photographing posture information for guiding the photographing posture of the subject according to the position of the face area and the hand area or the overlapping degree of each other.
제 7 항에 있어서,
상기 얼굴 영역과 손 영역을 파악하는 단계는, 양안의 위치를 검출한 후에 상기 양안의 위치를 기준으로 하여 상기 얼굴 영역을 추정하는 생체 인증 방법.
8. The method of claim 7,
Wherein the step of recognizing the face region and the hand region estimates the face region based on the position of the binocular after detecting the position of both eyes.
제 9 항에 있어서,
상기 얼굴 인증에 이용할 정보를 추출하는 단계는, 상기 양안을 연결하는 가상선의 기울기를 산출한 후에 추정된 상기 얼굴 영역을 상기 기울기에 대응하는 각도만큼 회전시켜서 상기 얼굴 영역의 정보를 추출하는 생체 인증 방법.
10. The method of claim 9,
Wherein the step of extracting the information to be used for face authentication includes a step of calculating a slope of a virtual line connecting the two eyes and then rotating the estimated face area by an angle corresponding to the slope to extract information of the face area .
제 7 항에 있어서,
상기 얼굴 영역과 손 영역을 파악하는 단계는, 상기 얼굴 영역을 제외한 상기 영상에서 주변보다 상대적으로 밝은 화소가 모여있는 덩어리를 검출한 후에 상기 덩어리 내에서 상기 손 영역을 파악하는 생체 인증 방법.
8. The method of claim 7,
Wherein the step of recognizing the face region and the hand region grasps the hand region in the lump after detecting a lump in which pixels relatively bright compared to the surroundings are detected in the image excluding the face region.
제 7 항에 있어서,
상기 손 인증에 이용할 정보를 추출하는 단계는, 상기 손 영역 중에서 손바닥 영역과 손가락 영역을 분리하여 손의 방향을 파악한 후에 일정 방향을 향하도록 회전시켜서 상기 손 영역의 정보를 추출하는 생체 인증 방법.

8. The method of claim 7,
Wherein the step of extracting the information to be used for the hand authentication includes extracting information of the hand region by separating the palm area and the finger area from the hand area and rotating the hand area toward a certain direction after grasping the direction of the hand.

KR1020130150951A 2013-12-05 2013-12-05 Method and apparatus for authenticating biometric by using face/hand recognizing KR101561817B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130150951A KR101561817B1 (en) 2013-12-05 2013-12-05 Method and apparatus for authenticating biometric by using face/hand recognizing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130150951A KR101561817B1 (en) 2013-12-05 2013-12-05 Method and apparatus for authenticating biometric by using face/hand recognizing

Publications (2)

Publication Number Publication Date
KR20150065529A true KR20150065529A (en) 2015-06-15
KR101561817B1 KR101561817B1 (en) 2015-11-11

Family

ID=53504422

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130150951A KR101561817B1 (en) 2013-12-05 2013-12-05 Method and apparatus for authenticating biometric by using face/hand recognizing

Country Status (1)

Country Link
KR (1) KR101561817B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230010158A (en) * 2021-07-09 2023-01-18 주식회사 에스원 Dispersion Certifying Method of Body Data collecting at Gate and System thereof
WO2023177125A1 (en) * 2022-03-14 2023-09-21 삼성전자 주식회사 Electronic device for controlling biometric signal-based operation, and operating method therefor

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3558025B2 (en) 2000-09-06 2004-08-25 株式会社日立製作所 Personal authentication device and method
JP2006146359A (en) 2004-11-16 2006-06-08 Omron Corp Personal identification device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230010158A (en) * 2021-07-09 2023-01-18 주식회사 에스원 Dispersion Certifying Method of Body Data collecting at Gate and System thereof
WO2023177125A1 (en) * 2022-03-14 2023-09-21 삼성전자 주식회사 Electronic device for controlling biometric signal-based operation, and operating method therefor

Also Published As

Publication number Publication date
KR101561817B1 (en) 2015-11-11

Similar Documents

Publication Publication Date Title
KR101598771B1 (en) Method and apparatus for authenticating biometric by using face recognizing
KR100850402B1 (en) Apparatus for personal authenticating
WO2019080578A1 (en) 3d face identity authentication method and apparatus
WO2019080580A1 (en) 3d face identity authentication method and apparatus
WO2019080579A1 (en) 3d face identity authentication method and apparatus
US20130129164A1 (en) Identity recognition system and method based on hybrid biometrics
US20170308763A1 (en) Multi-modality biometric identification
US11756338B2 (en) Authentication device, authentication method, and recording medium
KR101561817B1 (en) Method and apparatus for authenticating biometric by using face/hand recognizing
JP4251067B2 (en) Personal authentication device and blood vessel pattern extraction device for personal authentication
KR101703690B1 (en) Apparatus for recognizing iris and operating method thereof
JP6759065B2 (en) Blood vessel imaging device and personal authentication system
JP5134655B2 (en) Personal authentication system, personal authentication device, and blood vessel image capturing device
JP5789691B2 (en) Personal authentication device and blood vessel image capturing device
JP2004102993A (en) Personal identification device and method
JP2012128868A (en) Feature image photographing device and personal identification device
JP2004171577A (en) Personal identification device and method for the same
JP6082766B2 (en) Blood vessel imaging device
JP4603609B2 (en) Personal authentication device
JP4603610B2 (en) Entrance / exit management system
JP4961492B2 (en) Personal authentication apparatus and method
JP2013168171A (en) Biological imaging device
JP2013168170A (en) Biological imaging device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
FPAY Annual fee payment

Payment date: 20180905

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20191008

Year of fee payment: 5