KR101302661B1 - Apparatus and method for recognizing identity - Google Patents

Apparatus and method for recognizing identity Download PDF

Info

Publication number
KR101302661B1
KR101302661B1 KR1020120066166A KR20120066166A KR101302661B1 KR 101302661 B1 KR101302661 B1 KR 101302661B1 KR 1020120066166 A KR1020120066166 A KR 1020120066166A KR 20120066166 A KR20120066166 A KR 20120066166A KR 101302661 B1 KR101302661 B1 KR 101302661B1
Authority
KR
South Korea
Prior art keywords
user
registered
identity
iris
face image
Prior art date
Application number
KR1020120066166A
Other languages
Korean (ko)
Other versions
KR20130011913A (en
Inventor
이의철
박강령
김영곤
신광용
Original Assignee
한국기초과학지원연구원
동국대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국기초과학지원연구원, 동국대학교 산학협력단 filed Critical 한국기초과학지원연구원
Publication of KR20130011913A publication Critical patent/KR20130011913A/en
Application granted granted Critical
Publication of KR101302661B1 publication Critical patent/KR101302661B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Collating Specific Patterns (AREA)

Abstract

신원 인식 장치는 사용자 별 등록 홍채 영상 및 등록 얼굴 영상을 저장하는 저장부; 사용자의 얼굴 촬영에 따른 얼굴 영상과 상기 등록 얼굴 영상 간의 유클리디안 거리(Euclidian distance)를 산출하는 얼굴 인식부; 상기 사용자의 홍채 촬영에 따른 홍채 영상과 상기 등록 홍채 영상 간의 해밍 거리(Hamming distance) 중 하나 이상을 산출하는 홍채 인식부; 및 상기 유클리디안 거리 및 상기 해밍 거리 중 하나 이상에 따라 상기 사용자의 신원을 인식하는 신원 인식부를 포함한다.The identity recognition device may include a storage configured to store a registered iris image and a registered face image for each user; A face recognition unit configured to calculate an Euclidian distance between a face image according to a face shot of a user and the registered face image; An iris recognition unit configured to calculate at least one of a hamming distance between the iris image and the registered iris image according to the iris photographing of the user; And an identity recognizer configured to recognize an identity of the user according to at least one of the Euclidean distance and the Hamming distance.

Description

신원 인식 장치 및 방법{APPARATUS AND METHOD FOR RECOGNIZING IDENTITY}Identity recognition device and method {APPARATUS AND METHOD FOR RECOGNIZING IDENTITY}

본 발명은 신원 인식에 관한 기술에 관한 것으로, 복수의 카메라를 이용하여 얼굴 및 홍채 인식을 이용한 신원 인식 기술에 관한 것이다.
The present invention relates to a technology related to identity recognition, and more particularly to an identity recognition technology using face and iris recognition using a plurality of cameras.

본 발명의 배경기술로써는 "How Iris Recognition Works, IEEE Transactions on circuits and systems for video technology, vol.14, no.1, January 2004, John Daugman"가 있다.
Background art of the present invention is "How Iris Recognition Works, IEEE Transactions on circuits and systems for video technology, vol. 14, no. 1, January 2004, John Daugman".

본 발명의 해결하고자 하는 과제는 각 사용자에게 적합한 신원 인식 방법을 이용하는 신원 인식 장치를 제공함에 있다.An object of the present invention is to provide an identity recognition apparatus using an identity recognition method suitable for each user.

본 발명의 해결하고자 하는 과제는 엘리베이터의 목적지를 신원 인식 내용에 따라 설정하여 운행할 수 있는 신원 인식 장치를 제공함에 있다.
An object of the present invention is to provide an identity recognition apparatus capable of operating by setting the destination of the elevator in accordance with the identity recognition content.

본 발명의 일 측면에 따르면, 사용자 별 등록 홍채 영상 및 등록 얼굴 영상을 저장하는 저장부; 사용자의 얼굴 촬영에 따른 얼굴 영상과 상기 등록 얼굴 영상 간의 유클리디안 거리(Euclidian distance)를 산출하는 얼굴 인식부; 상기 사용자의 홍채 촬영에 따른 홍채 영상과 상기 등록 홍채 영상 간의 해밍 거리(Hamming distance)를 산출하는 홍채 인식부; 및 상기 유클리디안 거리 및 상기 해밍 거리 중 하나 이상에 따라 상기 사용자의 신원을 인식하는 신원 인식부를 포함하는 신원 인식 장치가 제공된다.According to an aspect of the invention, the storage unit for storing the registered iris image and the registered face image for each user; A face recognition unit configured to calculate an Euclidian distance between a face image according to a face shot of a user and the registered face image; An iris recognition unit configured to calculate a hamming distance between the iris image and the registered iris image according to the iris photographing of the user; And an identity recognizer configured to recognize an identity of the user according to at least one of the Euclidean distance and the Hamming distance.

신원 인식 장치는 상기 사용자의 일측 안구에 상응하는 홍채 영상을 생성하는 제1 카메라; 상기 사용자의 타측 안구에 상응하는 홍채 영상을 생성하는 제2 카메라; 상기 얼굴 영상을 생성하는 제3 카메라; 및 상기 제1 카메라와 상기 제2 카메라의 사이에 위치하여 근적외선을 투사하는 근적외선 투사부를 더 포함할 수 있다.The apparatus for identifying an identity may include a first camera configured to generate an iris image corresponding to one eye of the user; A second camera generating an iris image corresponding to the other eye of the user; A third camera generating the face image; And a near-infrared projection unit positioned between the first camera and the second camera to project near-infrared rays.

상기 신원 인식부는 상기 유클리디안 거리 중 최소값이 지정된 범위 내에 속하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는지 확인하고 상기 홍채 인식부는 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상과 상기 홍채 영상 간의 해밍 거리를 산출할 수 있다.When the minimum value of the Euclidean distance is within a specified range, the identity recognition unit checks whether the registered iris image matched with the registered face image corresponding to the minimum value exists, and the iris recognition unit registers the registration value corresponding to the minimum value. When the registered iris image matched with the face image exists, a hamming distance between the registered iris image matched with the registered face image corresponding to the minimum value and the iris image may be calculated.

상기 신원 인식부는 상기 유클리디안 거리가 지정됨 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식할 수 있다.The identity recognition unit may recognize the user as a user corresponding to the registered iris image and the registered face image when the Euclidean distance is within a specified range.

상기 신원 인식부는 상기 유클리디안 거리 및 상기 해밍 거리에 미리 지정된 가중치를 곱한 값들을 합하여 합산 스코어를 산출하고, 상기 합산 스코어가 미리 지정된 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식할 수 있다.The identity recognition unit calculates a sum score by adding the multiplied values of the Euclidean distance and the Hamming distance by a predetermined weight, and when the sum score falls within a predetermined range, the user recognizes the registered iris image and the registered face. It may be recognized as a user corresponding to the image.

상기 신원 인식부는 상기 사용자의 신원을 인식한 경우, 상기 신원에 상응하는 부가 정보를 외부로 출력할 수 있다.The identity recognition unit may output additional information corresponding to the identity to the outside when the identity of the user is recognized.

상기 부가 정보는 상기 사용자가 엘리베이터를 타고 이동할 층 수를 포함할 수 있다.
The additional information may include the number of floors to which the user moves in an elevator.

본 발명의 다른 측면에 따르면, 사용자 별 등록 홍채 영상 및 등록 얼굴 영상을 저장하는 신원 인식 장치가 신원을 인식하는 방법에 있어서, 사용자의 얼굴 촬영에 따른 얼굴 영상과 상기 등록 얼굴 영상 간의 유클리디안 거리(Euclidian distance)를 산출하는 단계; 상기 사용자의 홍채 촬영에 따른 홍채 영상과 상기 등록 홍채 영상 간의 해밍 거리(Hamming distance) 중 하나 이상을 산출하는 단계; 및 상기 유클리디안 거리 및 상기 해밍 거리 중 하나 이상에 따라 상기 사용자의 신원을 인식하는 단계를 포함하는 신원 인식 방법이 제공된다.According to another aspect of the present invention, a method for recognizing an identity by an identity recognition device storing a registered iris image and a registered face image for each user, the Euclidean distance between the face image according to the user's face shooting and the registered face image Calculating an Euclidian distance; Calculating at least one of a hamming distance between the iris image and the registered iris image according to the iris photographing of the user; And recognizing an identity of the user according to at least one of the Euclidean distance and the Hamming distance.

상기 해밍 거리를 산출하는 단계는 상기 유클리디안 거리 중 최소값이 지정된 범위 내에 속하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는지 확인하는 단계; 및 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상과 상기 홍채 영상 간의 해밍 거리를 산출하는 단계를 포함할 수 있다.The calculating of the hamming distance may include determining whether the registered iris image matched to the registered face image corresponding to the minimum value when the minimum value of the Euclidean distance falls within a specified range; And calculating a hamming distance between the registered iris image and the iris image matched with the registered face image corresponding to the minimum value when the registered iris image matching the registered face image exists. It may include.

상기 사용자의 신원을 인식하는 단계는 상기 해밍 거리가 지정됨 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 것일 수 있다.Recognizing the identity of the user may be to recognize the user as a user corresponding to the registered iris image and the registered face image when the hamming distance is within a specified range.

상기 사용자의 신원을 인식하는 단계는 상기 유클리디안 거리 및 상기 해밍 거리에 미리 지정된 가중치를 곱한 값들을 합하여 합산 스코어를 산출하는 단계; 및 상기 합산 스코어가 미리 지정된 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 단계를 포함할 수 있다.Recognizing the identity of the user comprises the steps of: calculating the sum score by adding the value of the Euclidean distance and the Hamming distance multiplied by a predetermined weight; And when the sum score is within a predetermined range, recognizing the user as a user corresponding to the registered iris image and the registered face image.

상기 신원 인식 방법은 상기 사용자의 신원을 인식한 경우, 상기 신원에 상응하는 부가 정보를 외부로 출력하는 단계를 더 포함할 수 있다.The identity recognition method may further include outputting additional information corresponding to the identity to the outside when the identity of the user is recognized.

상기 부가 정보는 상기 사용자가 엘리베이터를 타고 이동할 층 수를 포함할 수 있다.
The additional information may include the number of floors to which the user moves in an elevator.

본 발명의 실시예에 따르면, 사용자 별 생체 인식의 성공 확률이 생체 인식 방법에 따라 상이하여 발생하는 인식 실패의 확률을 낮출 수 있다.According to an embodiment of the present invention, the probability of recognition failure that occurs differently according to the biometric recognition method may be lowered according to the biometric recognition method for each user.

본 발명의 실시예에 따르면, 신원 인식에 따른 사용자의 목적지를 엘리베이터로 제공할 수 있다.
According to an embodiment of the present invention, the destination of the user according to the identification recognition may be provided to the elevator.

도 1은 신원 인식 장치를 간략히 나타낸 블록도.
도 2는 신원 인식 장치의 제1 카메라 내지 제3 카메라 및 근적외선 투사부를 예시한 도면.
도 3은 본 발명의 제1 실시예에 따른 신원 인식 장치가 신원을 인식하는 과정을 예시한 순서도.
도 4는 본 발명의 제2 실시예에 따른 신원 인식 장치가 신원을 인식하는 과정을 예시한 순서도.
도 5는 신원 인식 장치가 엘리베이터에 설치되어 동작하는 과정을 예시한 도면.
1 is a block diagram schematically showing an identity recognition device.
2 is a diagram illustrating a first camera to a third camera and a near infrared ray projector of an identity recognition device.
3 is a flowchart illustrating a process of recognizing an identity by the apparatus for recognizing identity according to the first embodiment of the present invention.
4 is a flowchart illustrating a process of recognizing an identity by the apparatus for recognizing identity according to the second embodiment of the present invention.
5 is a view illustrating a process in which the identity recognition device is installed and operated in an elevator.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 이를 상세한 설명을 통해 상세히 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.While the present invention has been described in connection with certain exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, is intended to cover various modifications and similarities. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention.

또한, 본 명세서에서, 일 구성요소가 다른 구성요소로 신호를 “전송한다”로 언급된 때에는, 상기 일 구성요소가 상기 다른 구성요소와 직접 연결되어 신호를 전송할 수 있지만, 특별히 반대되는 기재가 존재하지 않는 이상, 중간에 또 다른 구성요소를 매개하여 신호를 전송할 수도 있다고 이해되어야 할 것이다.
Further, in this specification, when an element is referred to as " transmitting " a signal to another element, the element can be directly connected to the other element to transmit a signal, It should be understood that the signal may be transmitted by mediating another component in the middle.

도 1은 신원 인식 장치를 간략히 나타낸 블록도이다.1 is a block diagram briefly showing an identity recognition device.

도 1을 참조하면, 신원 인식 장치는 근적외선 투사부(101), 제1 카메라(110), 제2 카메라(120), 홍채 인식부(130), 제3 카메라(140), 얼굴 인식부(150), 등록부(160) 및 신원 인식부(170)를 포함한다.Referring to FIG. 1, the identity recognition device may include a near infrared ray projector 101, a first camera 110, a second camera 120, an iris recognition unit 130, a third camera 140, and a face recognition unit 150. ), The registration unit 160 and the identity recognition unit 170.

근적외선 투사부(101)는 홍채 인식부(130)로부터 수신한 근적외선 투사 요청에 따라 근적외선을 투사한다. 근적외선 투사부(101)는 미리 지정된 조사각을 이루는 36개의 근적외선 LED를 포함할 수 있다. 근적외선 투사부(101)는 근적외선 투사 요청을 수신하는 경우, 근적외선 LED를 통해 근적외선을 미리 지정된 조사각에 따라 투사한다.The near infrared projection unit 101 projects the near infrared ray in response to the near infrared projection request received from the iris recognition unit 130. The near infrared projection unit 101 may include 36 near infrared LEDs that form a predetermined irradiation angle. When receiving the near-infrared projection request, the near-infrared projection unit 101 projects the near-infrared according to a predetermined irradiation angle through the near-infrared LED.

제1 카메라(110)는 근적외선 투사부(101)의 일측에 위치하여 사용자의 양안 중 어느 하나를 촬영하여 홍채 영상을 생성한다.The first camera 110 is located at one side of the near-infrared projection unit 101 to generate an iris image by photographing any one of both eyes of the user.

제2 카메라(120)는 근적외선 투사부(101)의 타측에 위칭하여 사용자의 양안 중 어느 하나를 촬영하여 홍채 영상을 생성한다. The second camera 120 is positioned on the other side of the near-infrared projection unit 101 to generate an iris image by photographing any one of both eyes of the user.

이 때, 제1 카메라(110) 및 제2 카메라(120)는 근적외선 투과 필터를 부착한 카메라일 수 있다. 또한, 제1 카메라(110) 및 제2 카메라(120)는 원거리에 위치한 사용자의 홍채 영상을 취득하기 위해 고정 초점 줌 렌즈를 포함하는 카메라일 수 있다. 또한 제2 카메라(120) 및 제2 카메라(120)는 홍채 영상을 홍채 인식부(130)로 전송한다.In this case, the first camera 110 and the second camera 120 may be a camera with a near infrared transmission filter. In addition, the first camera 110 and the second camera 120 may be a camera including a fixed focus zoom lens to acquire an iris image of a user located at a far distance. In addition, the second camera 120 and the second camera 120 transmits the iris image to the iris recognition unit 130.

홍채 인식부(130)는 홍채 영상과 등록부(160)에 저장된 각 홍채 영상(이하 등록 홍채 영상이라 지칭)과의 해밍 거리(Hamming distance)를 각각 산출하여 신원 인식부(170)로 전송한다.The iris recognition unit 130 calculates a Hamming distance between the iris image and each iris image (hereinafter referred to as a registered iris image) stored in the registration unit 160 and transmits the Hamming distance to the identity recognition unit 170.

제3 카메라(140)는 사용자의 얼굴을 촬영하여 얼굴 영상을 생성한다. 제3 카메라(140)는 얼굴 영상을 얼굴 인식부(150)로 전송한다.The third camera 140 generates a face image by photographing the face of the user. The third camera 140 transmits a face image to the face recognition unit 150.

얼굴 인식부(150)는 제3 카메라(140)로부터 수신한 얼굴 영상과 등록부(160)에 저장된 각 얼굴 영상(이하 등록 얼굴 영상이라 지칭) 간의 유클리디안 거리(Euclidean distance)를 각각 산출하여 신원 인식부(170)로 전송한다. The face recognizer 150 calculates an Euclidean distance between a face image received from the third camera 140 and each face image (hereinafter, referred to as a registered face image) stored in the register 160, thereby identifying an identity. Transmission to the recognition unit 170.

등록부(160)는 사용자 별 홍채 영상 및 얼굴 영상을 저장한다. 이 때, 등록부(160)는 각 사용자에 대한 식별 정보, 각 사용자에 대한 신원 정보, 사용자 별 신원 인식 방법, 사용자 별 엘리베이터가 이동할 층 수를 나타내는 정보(이하 부가 정보) 중 하나 이상을 더 저장할 수 있다.The register 160 stores an iris image and a face image for each user. In this case, the registration unit 160 may further store one or more of identification information for each user, identity information for each user, an identification method for each user, and information (hereinafter, additional information) indicating the number of floors to which an elevator for each user moves. have.

신원 인식부(170)는 사용자로부터 신원 인식을 요청하는 입력을 받을 수 있다. 신원 인식부(170)는 얼굴 인식부(150)로부터 유클리디안 거리를 수신한다. 신원 인식부(170)는 유클리디안 거리 중 최소값을 가지는 하나를 선정한다. 신원 인식부(170)는 선정된 유클리디안 거리가 미리 지정된 범위 내에 속하는 수치인지 판단한다. 신원 인식부(170)는 유클리디안 거리가 미리 지정된 범위 내에 속하는 경우, 해당 유클리디안 거리에 대한 등록 얼굴 영상과 매칭된 등록 홍채 영상과 신원 인식을 요청한 사용자의 홍채 영상 간의 해밍 거리의 산출을 홍채 인식부(130)로 요청한다. 신원 인식부(170)는 홍채 인식부(130)로부터 해밍 거리를 수신하고 해밍 거리 및 유클리디안 거리 각각에 대해 미리 지정된 가중치를 각 가중치를 해밍 거리 또는 유클리디안 거리와 곱한다. 신원 인식부(170)는 해밍 거리 및 유클리디안 거리와 해당 거리에 상응하는 가중치를 곱한 값들의 합(이하 합산 스코어라 지칭)을 산출한다. The identity recognition unit 170 may receive an input for requesting identity recognition from the user. The identity recognition unit 170 receives the Euclidean distance from the face recognition unit 150. The identity recognition unit 170 selects one having the minimum value of the Euclidean distance. The identity recognition unit 170 determines whether the selected Euclidean distance is within a predetermined range. When the Euclidean distance is within a predetermined range, the identification recognizer 170 calculates a hamming distance between the registered iris image matched with the registered face image of the Euclidean distance and the iris image of the user who requested the identity recognition. Request to the iris recognition unit 130. The identity recognizer 170 receives a hamming distance from the iris recognizer 130 and multiplies each weight by a predetermined weight for each of the hamming distance and the Euclidean distance, by the Hamming distance or the Euclidean distance. The identity recognizer 170 calculates a sum (hereinafter, referred to as a sum score) of values obtained by multiplying the Hamming distance, the Euclidean distance, and the weight corresponding to the corresponding distance.

이 때, 상술한 신원 인식부(170)는 유클리디안 거리에 따른 등록 얼굴 영상에 매칭된 등록 홍채 영상의 존재 여부에 따라 홍채 인식을 수행하는 것으로 설명하였으나, 구현 방법에 따라 홍채 인식을 먼저 수행하는 것으로 변경될 수 있다. 예를 들어, 신원 인식부(170)는 홍채 인식부(130)로부터 해밍 거리를 수신하고, 해밍 거리 중 최소값을 가지는 하나를 선정한다. 신원 인식부(170)는 선정된 해밍 거리가 미리 지정된 범위 내에 속하는 수치인지 판단한다. 신원 인식부(170)는 해밍 거리가 미리 지정된 범위 내에 속하는경우, 해당 해밍 거리에 대한 등록 홍채 영상과 매칭된 등록 얼굴 영상과, 신원 인식을 요청한 사용자의 얼굴 영상 간의 유클리디안 거리의 산출을 얼굴 인식부(150)로 요청한다. 신원 인식부(170)는 얼굴 인식부(150)로부터 유클리디안 거리를 수신하고 해밍 거리 및 유클리디안 거리 각각에 대해 미리 지정된 가중치를 각 가중치를 해밍 거리 또는 유클리디안 거리와 곱한다. 신원 인식부(170)는 합산 스코어를 산출한다. In this case, the above-described identity recognition unit 170 is described as performing the iris recognition according to the presence or absence of the registered iris image matched to the registered face image according to the Euclidean distance, but first performs the iris recognition according to the implementation method Can be changed. For example, the identity recognition unit 170 receives a hamming distance from the iris recognition unit 130 and selects one having a minimum value among the hamming distances. The identity recognition unit 170 determines whether the selected hamming distance is within a predetermined range. When the hamming distance is within a predetermined range, the identity recognition unit 170 calculates the Euclidean distance between the registered face image matched with the registered iris image for the corresponding hamming distance and the face image of the user who requested the identification recognition. Request to the recognition unit 150. The identity recognition unit 170 receives the Euclidean distance from the face recognition unit 150 and multiplies each weight by a predetermined weight for the Hamming distance and the Euclidean distance, respectively, by the Hamming distance or the Euclidean distance. The identity recognition unit 170 calculates a sum score.

신원 인식부(170)는 합산 스코어가 미리 지정된 범위 내의 수치인지 판단한다. 신원 인식부(170)는 합산 스코어가 미리 지정된 범위 내에 해당하는 경우, 현재 신원 인식을 시도하는 사용자가 합산 스코어에 상응하는 등록 홍채 영상 및 등록 얼굴 영상에 대한 사용자인 것으로 인식한다. 즉, 신원 인식부(170)는 해당 사용자의 식별 정보를 외부로 출력한다. 이 때, 신원 인식부(170)는 해당 사용자에 상응하는 부가 정보를 외부로 추가 전송할 수 있다. 예를 들어, 신원 인식부(170)는 해당 사용자의 인식이 완료된 후, 해당 사용자의 식별 정보 및 해당 사용자의 부가 정보를 엘리베이터로 전송할 수 있다. 이에 따라 엘리베이터는 해당 사용자의 부가 정보에 따른 층으로 이동하도록 설정될 수 있다. 따라서, 본 발명의 일 실시에에 따른 신원 인식 장치를 설치한 엘리베이터는 사용자가 신원 인식을 함에 따라 자동으로 목적 층수를 설정할 수 있다. The identity recognition unit 170 determines whether the sum score is a numerical value within a predetermined range. When the sum score falls within a predetermined range, the identity recognition unit 170 recognizes that the user who is currently trying to recognize the identity is a user for the registered iris image and the registered face image corresponding to the sum score. That is, the identity recognition unit 170 outputs the identification information of the user to the outside. At this time, the identity recognition unit 170 may additionally transmit additional information corresponding to the user to the outside. For example, the identity recognition unit 170 may transmit identification information of the user and additional information of the user to the elevator after recognition of the user is completed. Accordingly, the elevator may be set to move to the floor according to the additional information of the user. Therefore, the elevator installed with the identity recognition device according to an embodiment of the present invention can automatically set the target floor number as the user recognizes the identity.

또한 신원 인식부(170)는 합산 스코어가 미리 지정된 범위 내에 해당하지 않는 경우, 인증 시도 회수를 1 증가시킨다. 이 때, 신원 인식부(170)는 인증 시도 회수의 초기값을 0으로 설정할 수 있고, 특정 사용자의 신원 인식을 성공하는 경우, 인증 시도 회수를 0으로 초기화할 수 있다. 신원 인식부(170)는 합산 스코어가 증가되어 미리 지정된 수치를 초과하게 되는 경우, 신원 인식을 요청한 사용자의 얼굴 영상 및 홍채 영상을 저장한다. 이 때, 저장된 얼굴 영상 및 홍채 영상은 보안 문제가 발생하였을 때, 용의자에 대한 참조 자료로 이용될 수 있다.
In addition, the identity recognition unit 170 increases the number of authentication attempts by one when the sum score does not fall within a predetermined range. At this time, the identity recognition unit 170 may set the initial value of the number of authentication attempts to zero, and if the identification of a specific user is successful, may initialize the number of authentication attempts to zero. The identity recognition unit 170 stores the face image and the iris image of the user who requested the identity recognition when the sum score increases to exceed the predetermined value. In this case, the stored face image and the iris image may be used as reference data for the suspect when a security problem occurs.

상술한 신원 인식부(170)는 합산 스코어를 산출하여 사용자의 신원을 인식하지만, 구현 방법에 따라 상이한 방법으로 사용자의 신원을 인식할 수 있다. 이하, 상술한 합산 스코어를 산출하는 신원 인식 과정과는 상이한 과정을 수행하는 신원 인식부(170)를 설명하도록 한다.The above-described identity recognition unit 170 recognizes the user's identity by calculating the sum score, but may recognize the user's identity in different ways depending on the implementation method. Hereinafter, the identity recognition unit 170 performing a different process from the identity recognition process of calculating the sum score described above will be described.

신원 인식부(170)는 얼굴 인식부(150) 및 홍채 인식부(130)로부터 각각 해밍 거리 및 유클리디안 거리를 수신한다. 신원 인식부(170)는 유클리디안 거리 중 최소값을 선정하고, 선정된 유클리디안 거리가 미리 지정된 범위 내에 해당하는 수치인지 판단한다. 선정된 유클리디안 거리가 미리 지정된 범위 내에 해당하는 경우, 신원 인식부(170)는 해당 유클리디안 거리에 상응하는 사용자의 등록 홍채 영상과 신원 인식을 요청한 사용자의 홍채 영상 간의 해밍 거리가 미리 지정된 범위 내에 해당하는지 판단한다. 신원 인식부(170)는 해밍 거리가 미리 지정된 범위 내에 해당하는 경우, 신원 인식을 요청하는 사용자를 해당 홍채 영상에 상응하는 사용자로 인식한다. 즉, 신원 인식부(170)는 해당 홍채 영상에 상응하는 사용자에 대한 식별 정보를 외부로 출력한다. 이 때, 신원 인식부(170)는 해당 사용자에 대한 부가 정보를 부가적으로 외부로 출력할 수 있다. 이 때, 외부는 엘리베이터 장치이거나 엘리베이터를 제어하는 시스템일 수 있다.The identity recognition unit 170 receives the hamming distance and the Euclidean distance from the face recognition unit 150 and the iris recognition unit 130, respectively. The identity recognition unit 170 selects the minimum value of the Euclidean distance, and determines whether the selected Euclidean distance is a numerical value within a predetermined range. If the selected Euclidean distance falls within a predetermined range, the identity recognition unit 170 may predetermine a hamming distance between the registered iris image corresponding to the Euclidean distance and the iris image of the user who requested the identification. Determine if it is within the range. When the hamming distance falls within a predetermined range, the identification recognizer 170 recognizes the user requesting identification as a user corresponding to the iris image. That is, the identity recognition unit 170 outputs identification information about the user corresponding to the corresponding iris image to the outside. At this time, the identity recognition unit 170 may additionally output additional information on the user. At this time, the outside may be an elevator device or a system for controlling the elevator.

이 때, 상술한 신원 인식부(170)는 유클리디안 거리에 따른 등록 얼굴 영상에 매칭된 등록 홍채 영상의 존재 여부에 따라 홍채 인식을 수행하는 것으로 설명하였으나, 구현 방법에 따라 홍채 인식을 먼저 수행하는 것으로 변경될 수 있다. 예를 들어, 신원 인식부(170)는 얼굴 인식부(150) 및 홍채 인식부(130)로부터 각각 해밍 거리 및 유클리디안 거리를 수신한다. 신원 인식부(170)는 해밍 거리 중 최소값을 선정하고, 선정된 해밍 거리가 미리 지정된 범위 내에 해당하는 수치인지 판단한다. 선정된 해밍 거리가 미리 지정된 범위 내에 해당하는 경우, 신원 인식부(170)는 해당 해밍 거리에 상응하는 사용자의 등록 얼굴 영상과 신원 인식을 요청한 사용자의 얼굴 영상 간의 유클리디안 거리가 미리 지정된 범위 내에 해당하는지 판단한다. 신원 인식부(170)는 유클리디안 거리가 미리 지정된 범위 내에 해당하는 경우, 신원 인식을 요청하는 사용자를 해당 얼굴 영상에 상응하는 사용자로 인식한다. 즉, 신원 인식부(170)는 해당 얼굴 영상에 상응하는 사용자에 대한 식별 정보를 외부로 출력한다. In this case, the above-described identity recognition unit 170 is described as performing the iris recognition according to the presence or absence of the registered iris image matched to the registered face image according to the Euclidean distance, but first performs the iris recognition according to the implementation method Can be changed. For example, the identity recognition unit 170 receives a hamming distance and an Euclidean distance from the face recognition unit 150 and the iris recognition unit 130, respectively. The identity recognition unit 170 selects a minimum value of the hamming distances, and determines whether the selected hamming distances are within a predetermined range. When the selected hamming distance falls within a predetermined range, the identity recognition unit 170 may determine that the Euclidean distance between the registered face image of the user corresponding to the hamming distance and the face image of the user who requested the identification is within a predetermined range. Determine if applicable. When the Euclidean distance falls within a predetermined range, the identification recognizer 170 recognizes the user requesting identification as a user corresponding to the face image. That is, the identity recognition unit 170 outputs identification information about the user corresponding to the face image to the outside.

이 때, 신원 인식부(170)는 유클리디안 거리 또는 해밍 거리가 미리 지정된 범위 내에 해당하지 않는 경우, 인증 시도 회수를 1 증가시킬 수 있다. 신원 인식부(170)는 상술한 바와 같이 인증 시도 외수가 미리 지정된 회수를 초과하는 경우, 해당 사용자의 얼굴 영상 및 홍채 영상을 저장할 수 있다.
At this time, the identity recognition unit 170 may increase the number of authentication attempts by one when the Euclidean distance or the Hamming distance does not fall within a predetermined range. As described above, the identity recognition unit 170 may store the face image and the iris image of the user when the number of authentication attempts exceeds a predetermined number.

표시부(180)는 신원 인식부(170)의 제어에 따라 신원 인식에 대한 메시지를 표시할 수 있다. 예를 들어, 신원 인식부(170)는 유클리디안 거리 및 해밍 거리에 따라 사용자의 신원을 인식할 수 없는 경우, 표시부(180)를 통해 신원 인식을 위해 카메라 앞에 다시 위치해달라고 요청하는 메시지를 표시할 수 있다. 또한, 신원 인식부(170)는 신원의 인식이 완료된 경우, 인식된 신원에 대한 정보를 표시부(180)가 표시하도록 할 수 있다.
The display unit 180 may display a message about identity recognition under the control of the identity recognition unit 170. For example, if the identity recognition unit 170 cannot recognize the user's identity according to the Euclidean distance and the Hamming distance, the identity recognition unit 170 displays a message requesting to be located in front of the camera for identity recognition through the display unit 180. can do. In addition, when the recognition of the identity is completed, the identity recognition unit 170 may cause the display unit 180 to display information about the recognized identity.

도 2는 신원 인식 장치의 제1 카메라 내지 제3 카메라 및 근적외선 투사부를 예시한 도면이다.2 is a diagram illustrating first to third cameras and a near-infrared projection unit of an identity recognition device.

도 2를 참조하면, 제1 카메라(110) 및 제2 카메라(120)는 동일 높이 상에 나란히 위치하고, 제1 카메라(0 및 제2 카메라(120) 사이에 근적외선 투사부(101)가 위치한다. 제3 카메라(140)는 근적외선 투사부(101)의 하단에 위치할 수 있다. 따라서, 근적외선 투사부(101)에서 투사한 적외선이 사용자의 홍채에 의해 반사되고, 제1 카메라(110) 및 제2 카메라(120)는 각각 홍채로부터 반사된 적외선을 감지하여 홍채 영상을 생성할 수 있다.
Referring to FIG. 2, the first camera 110 and the second camera 120 are positioned side by side on the same height, and the near-infrared projection unit 101 is positioned between the first camera 0 and the second camera 120. The third camera 140 may be located at the lower end of the near infrared projection unit 101. Therefore, the infrared rays projected by the near infrared projection unit 101 are reflected by the iris of the user, and the first camera 110 and The second camera 120 may generate an iris image by sensing infrared rays reflected from the iris, respectively.

도 3은 본 발명의 제1 실시예에 따른 신원 인식 장치가 신원을 인식하는 과정을 예시한 순서도이다. 이하, 도 3에서 예시한 과정은 신원 인식 장치의 각 기능부를 통해 수행되는 과정이지만, 발명의 간결하고 명확한 설명을 위해 주체를 신원 인식 장치로 통칭하여 설명하도록 한다.3 is a flowchart illustrating a process of recognizing an identity by the apparatus for recognizing identity according to the first embodiment of the present invention. Hereinafter, the process illustrated in FIG. 3 is a process performed through each functional unit of the identity recognition device, but the subject is collectively described as an identity recognition device for the purpose of concise and clear description of the invention.

단계 310에서 신원 인식 장치는 사용자를 촬영하여 얼굴 영상을 생성한다.In operation 310, the ID recognition apparatus photographs the user to generate a face image.

단계 325에서 신원 인식 장치는 단계 310에서 생성한 얼굴 영상과 미리 저장된 등록 얼굴 영상 간의 유클리디안 거리를 산출하고, 산출된 유클리디안 거리 중 최소값을 선정한다. In operation 325, the apparatus for recognizing identity calculates a Euclidean distance between the face image generated in operation 310 and a pre-stored registered face image, and selects a minimum value among the calculated Euclidean distances.

단계 330에서 신원 인식 장치는 단계 325에서 선정된 유클리디안 거리가 미리 지정된 범위에 해당하는지 판단한다.In operation 330, the apparatus for recognizing identity determines whether the Euclidean distance selected in operation 325 falls within a predetermined range.

단계 330에서 유클리디안 거리가 미리 지정된 범위에 해당하지 않는 경우, 단계 335에서 신원 인식 장치는 인증 시도 회수를 1만큼 증가시킨다. If the Euclidean distance does not fall within the predetermined range in step 330, the identity recognition device increases the number of authentication attempts by one in step 335.

단계 337에서 신원 인식 장치는 인증 시도 회수가 미리 지정된 수치 N 초과하는지 판단한다. 이 때, N은 0 이상의 정수일 수 있고, 인증 시도 회수의 초기값은 0일 수 있다.In step 337, the identity recognition device determines whether the number of authentication attempts exceeds a predetermined value N. In this case, N may be an integer greater than or equal to zero, and the initial value of the number of authentication attempts may be zero.

단계 337에서 인증 시도 회수가 N 이하인 경우, 신원 인식 장치는 단계 310부터의 과정을 반복 수행한다.If the number of authentication attempts is less than or equal to N in step 337, the identity recognition device repeats the process from step 310.

단계 337에서 인증 시도 회수가 N 초과인 경우, 단계 375에서 신원 인식 장치는 얼굴 영상을 기록한다.If the number of authentication attempts is greater than N in step 337, the identity recognition device records a face image in step 375.

단계 330에서 유클리디안 거리가 미리 지정된 범위에 해당하는 경우, 단계 340에서 신원 인식 장치는 현재 신원 인식을 하는 사용자에 대한 홍채 인식을 수행할 지 판단한다. 예를 들어, 신원 인식 장치는 단계 310에서 생성한 얼굴 영상과 유클리디언 거리가 최소인 등록 얼굴 영상과 매칭된 등록 홍채 영상이 존재하는지 판단한다.If the Euclidean distance falls within a predetermined range in step 330, in step 340, the identity recognition device determines whether to perform iris recognition for the user currently recognized. For example, the identification apparatus determines whether there is a registered iris image matching the face image generated in step 310 and the registered face image having a minimum Euclidean distance.

단계 340에서 홍채 인식을 수행하지 않는 것으로 판단되는 경우, 신원 인식 장치는 단계 345에서 엘리베이터가 이동할 층을 나타내는 부가 정보를 외부로 출력한다.If it is determined in step 340 that the iris recognition is not performed, the identity recognition device outputs additional information indicating the floor to which the elevator moves to outside.

단계 340에서 홍채 인식을 수행하는 것으로 판단되는 경우, 단계 345에서 신원 인식 장치는 사용자를 촬영하여 홍채 영상을 생성한다.If it is determined in step 340 that iris recognition is performed, in step 345 the identity recognition device photographs the user to generate an iris image.

신원 인식 장치는 단계 350에서 신원 인식 장치는 단계 315에서 선정한 유클리디안 거리에 대한 등록 얼굴 영상에 매칭된 등록 홍채 영상과 단계 340에서 생성한 홍채 영상 간의 해밍 거리를 산출한다.In operation 350, the identification apparatus calculates a hamming distance between the registered iris image matched with the registered face image of the Euclidean distance selected in step 315 and the iris image generated in step 340.

단계 355에서 신원 인식 장치는 단계 350에서 산출한 해밍 거리가 미리 지정된 범위에 해당하는 수치인지 판단한다.In operation 355, the identification apparatus determines whether the hamming distance calculated in operation 350 corresponds to a predetermined range.

단계 355에서 해밍 거리가 미리 지정된 범위에 해당하지 않는 경우, 단계 360에서 신원 인식 장치는 인증 시도 회수를 1 증가시킨다.If the hamming distance does not fall within the predetermined range in step 355, the identity recognition device increases the number of authentication attempts by one in step 360.

단계 370에서 신원 인식 장치는 인증 시도 회수가 미리 지정된 수 M을 초과하는지 판단한다. 이 때, M은 0 이상의 정수일 수 있다.In step 370, the identity recognition device determines whether the number of authentication attempts exceeds a predetermined number M. In this case, M may be an integer of 0 or more.

단계 370에서 인증 시도 회수가 M을 초과하는 경우, 단계 375에서 신원 인식 장치는 얼굴 영상을 저장한다.If the number of authentication attempts in step 370 exceeds M, in step 375 the identity recognition device stores a face image.

단계 370에서 인증 시도 회수가 미리 지정된 수 이하인 경우, 신원 인식 장치는 단계 347부터의 과정을 반복 수행한다.If the number of authentication attempts is less than or equal to the predetermined number in step 370, the identity recognition apparatus repeats the process from step 347.

단계 355에서 해밍 거리가 미리 지정된 범위에 해당하는 경우, 단계 345의 과정을 수행한다.
If the hamming distance corresponds to a predetermined range in step 355, the process of step 345 is performed.

도 3을 참조하여 상술한 과정은 단계 310 내지 단계 330의 과정을 먼저 수행하고, 단계 347 내지 단계 370의 과정을 수행하는 것으로 설명하였으나, 단계 347 내지 단계 370의 과정을 먼저 수행한 이후 단계 310 내지 단계 330 과정을 수행하도록 변경될 수 있다. 즉, 본 발명의 일 실시예로서, 도 3을 참조하여 얼굴 영상을 이용한 사용자 인증 후 홍채 영상을 이용한 사용자 인증을 하는 것으로 설명하였으나, 본 발명의 다른 실시예로서 홍채 영상을 이용한 사용자 인증 후 얼굴 영상을 이용한 사용자 인증을 하는 것으로 변경될 수 있다. 이 때, 단계 350은 단계 347에서 생성한 홍채 영상과 미리 저장된 하나 이상의 등록 홍채 영상 간의 해밍 거리를 각각 산출하고, 해밍 거리 중 최소값을 선정하는 것으로 변경될 수 있다. 또한 단계 325는 단계 350에서 선정된 해밍 거리에 상응하는 등록 홍채 영상과 매칭된 등록 얼굴 영상과 단계 310에서 생성한 얼굴 영상 간의 유클리디안 거리를 산출하는 것으로 변경될 수 있다. 또한 단계 340은 단계 350에서 선정된 해밍 거리에 상응하는 등록 홍채 영상과 매칭된 등록 얼굴 영상이 존재하는 여부에 따라 얼굴 인식 여부를 판단하는 것으로 변경될 수 있다.
The process described above with reference to FIG. 3 is described as first performing the processes of steps 310 to 330 and performing the processes of steps 347 to 370, but after performing the processes of steps 347 to 370 first and then performing steps 310 to 370. Step 330 may be changed to perform the process. That is, as an embodiment of the present invention, the user authentication using the iris image is described after the user authentication using the face image with reference to FIG. 3, but the face image after user authentication using the iris image as another embodiment of the present invention. It can be changed to the user authentication using. In this case, operation 350 may be changed by calculating a hamming distance between the iris image generated in operation 347 and one or more registered iris images stored in advance and selecting a minimum value of the hamming distances. In addition, step 325 may be changed to calculating the Euclidean distance between the registered face image matched with the registered iris image corresponding to the hamming distance selected in step 350 and the face image generated in step 310. In addition, step 340 may be changed to determine whether a face is recognized according to whether a registered face image matched with a registered iris image corresponding to the hamming distance selected in step 350 exists.

도 4는 본 발명의 제2 실시예에 따른 신원 인식 장치가 신원을 인식하는 과정을 예시한 순서도이다.4 is a flowchart illustrating a process of recognizing an identity by the apparatus for recognizing identity according to the second embodiment of the present invention.

단계 410에서 신원 인식 장치는 사용자를 촬영하여 얼굴 영상 및 홍채 영상을 생성한다.In step 410, the identification recognition device photographs the user to generate a face image and an iris image.

단계 415에서 신원 인식 장치는 인증 시도 회수가 미리 지정된 수 이상인지 판단한다.In step 415, the identity recognition device determines whether the number of authentication attempts is more than a predetermined number.

단계 415에서 인증 시도 회수가 미리 지정된 수 초과인 경우, 단계 420에서 신원 인식 장치는 사용자의 얼굴 영상을 저장한다.If the number of authentication attempts in step 415 exceeds a predetermined number, in step 420 the identity recognition device stores the face image of the user.

단계 415에서 인증 시도 회수가 미리 지정된 수 이하인 경우, 단계 425에서 신원 인식 장치는 단계 410에서 생성한 얼굴 영상과 미리 저장된 등록 얼굴 영상 간의 유클리디안 거리를 산출하고, 산출된 유클리디안 거리 중 최소값을 선정한다. If the number of authentication attempts is less than or equal to a predetermined number in step 415, in step 425, the identity recognition device calculates a Euclidean distance between the face image generated in step 410 and the pre-stored registered face image, and the minimum value of the calculated Euclidean distances. Select.

단계 430에서 신원 인식 장치는 단계 425에서 선정된 유클리디안 거리가 미리 지정된 범위에 해당하는지 판단한다.In step 430, the identity recognition device determines whether the Euclidean distance selected in step 425 falls within a predetermined range.

단계 430에서 유클리디안 거리가 미리 지정된 범위에 해당하지 않는 경우, 단계 435에서 신원 인식 장치는 인증 시도 회수를 1만큼 증가시킨다. 이후 신원 인식 장치는 단계 410부터의 과정을 반복 수행한다.If the Euclidean distance does not fall within the predetermined range in step 430, in step 435 the identity recognition device increases the number of authentication attempts by one. Thereafter, the identity recognition device repeats the process from step 410.

단계 430에서 유클리디안 거리가 미리 지정된 범위에 해당하는 경우, 단계 440에서 신원 인식 장치는 선택 입력이 홍채 인식을 수행하도록 요청하는 것인지 판단한다.If the Euclidean distance falls within a predetermined range in step 430, in step 440, the identity recognition device determines whether the selection input requests to perform iris recognition.

단계 440에서 선택 입력이 홍채 인식을 수행하지 않도록 요청하는 것인 경우, 신원 인식 장치는 단계 445에서 엘리베이터가 이동할 층을 나타내는 부가 정보를 외부로 출력한다.If the selection input in step 440 is to request not to perform iris recognition, in step 445 the identity recognition device outputs additional information indicating the floor to which the elevator will move to the outside.

단계 440에서 선택 입력이 홍채 인식을 수행하도록 요청하는 것인 경우, 신원 인식 장치는 단계 450에서 신원 인식 장치는 단계 415에서 선정한 유클리디안 거리에 대한 등록 얼굴 영상에 상응하는 등록 홍채 영상과 단계 410에서 생성한 홍채 영상 간의 해밍 거리를 산출한다.If the selection input in step 440 is to request to perform iris recognition, the identity recognition device in step 450 the registration iris image corresponding to the registered face image for the Euclidean distance selected in step 415 and step 410 The Hamming distance between the iris images generated by

단계 455에서 신원 인식 장치는 유클리디안 거리 및 해밍 거리 각각에 상응하는 미리 지정된 가중치를 곱하고, 곱한 값을 합하여 합산 스코어를 산출한다.In step 455, the identity recognition device multiplies a predetermined weight corresponding to each of the Euclidean distance and the Hamming distance, and adds the multiplied values to calculate a sum score.

단계 460에서 신원 인식 장치는 합산 스코어가 미리 지정된 범위 내에 해당하는 여부를 판단한다.In step 460, the identity recognition device determines whether the sum score falls within a predetermined range.

단계 460에서 합산 스코어가 미리 지정된 범위 내에 해당하지 않는 경우, 신원 인식 장치는 상술한 단계 435부터의 과정을 수행한다.If the sum score does not fall within the predetermined range in step 460, the apparatus for identifying an identity performs the process from step 435 described above.

단계 460에서 합산 스코어가 미리 지정된 범위 내에 해당하는 경우, 신원 인식 장치는 상술한 단계 445를 수행한다.
In step 460, if the sum score falls within a predetermined range, the apparatus for recognizing identity performs step 445 described above.

상술한 단계 425와 단계 450은 구현방법 상 수행되는 순서가 서로 바뀔 수 있다. 예를 들어, 단계 450은 단계 415 이후 단계 410에서 생성한 홍채 영상과 미리 저장된 하나 이상의 등록 홍채 영상 간의 해밍 거리를 각각 산출하고, 산출된 해밍 거리 중 최소값을 선정하는 것으로 변경될 수 있다. 또한 단계 425는 단계 440 이후, 단계 450에서 선정한 해밍 거리에 대한 등록 홍채 영상에 매칭되는 등록 얼굴 영상과 단계 410에서 생성한 얼굴 영상 간의 유클리디안 거리를 산출하는 것으로 변경될 수 있다. 또한, 단계 440은 단계 450에서 선정한 해밍 거리에 대한 등록 홍채 영상에 매칭되는 등록 얼굴 영상이 존재하는 여부에 따라 얼굴 인식을 진행할지 여부를 판단하는 것으로 변경될 수 있다.
The above-described steps 425 and 450 may be reversed in the order of implementation. For example, step 450 may be changed to calculate a hamming distance between the iris image generated in step 410 and one or more registered iris images stored in step 410 after step 415, and to select a minimum value among the calculated hamming distances. In operation 440, the method may be performed to calculate the Euclidean distance between the registered face image matching the registered iris image for the hamming distance selected in step 450 and the face image generated in step 410. In operation 440, the method may be configured to determine whether to perform face recognition according to whether a registered face image matching the registered iris image for the hamming distance selected in step 450 exists.

도 3 및 도 4를 참조하여 상술한 신원 인식 방법에 따르면, 사용자가 등록 얼굴 영상 및 등록 홍채 영상 중 하나 이상을 등록한 여부에 따라 신원 인식 과정을 적응적으로 수행할 수 있다. 즉, 본 발명의 실시예들에 따른 신원 인식 장치는 신체적 특징으로 인해 얼굴 영상을 이용한 얼굴 인식의 성공률이 높지 않은 사용자는 등록 홍채 영상만을 등록함으로써 홍채 인식 과정만을 수행할 수 있다. 따라서, 본 발명의 실시예들에 따른 신원 인식 장치는 고정적으로 얼굴 인식 및 홍채 인식을 수행하는 방식으로 인해 신원 인식이 불가한 사용자들에 대해 적응적으로 신원 인식 방법을 적용하여 신원 인식이 불가한 경우를 줄일 수 있다.
According to the identification recognition method described above with reference to FIGS. 3 and 4, an identification recognition process may be adaptively performed according to whether the user registers at least one of a registered face image and a registered iris image. That is, in the identity recognition apparatus according to the embodiments of the present invention, a user who does not have a high success rate of face recognition using a face image due to physical characteristics may perform only an iris recognition process by registering only a registered iris image. Therefore, the apparatus for recognizing identity according to the embodiments of the present invention may not be able to recognize the identity by adaptively applying the identification recognition method to users who cannot recognize the identity due to the method of performing face recognition and iris recognition. The case can be reduced.

도 5는 신원 인식 장치가 엘리베이터에 설치되어 동작하는 과정을 예시한 도면이다.5 is a diagram illustrating a process in which the identity recognition device is installed and operated in an elevator.

도 5를 참조하면, 신원 인식 장치는 엘리베이터의 조작부(510)에 설치될 수 있다. 사용자는 조작부(510)의 정면에 Z-거리 범위(30cm~70cm) 내에 설 수 있다. 신원 인식 장치는 사용자가 Z-거리 범위에 위치함에 따라 사용자의 얼굴 영상 및 홍채 영상을 촬영하여 상술한 과정에 따라 신원 인식 과정을 수행할 수 있다. 또한, 신원 인식 장치는 신원 인식의 완료에 따라 인식된 사용자에 대한 부가 정보를 엘리베이터로 전송하여, 엘리베이터가 부가 정보에 포함된 사용자가 이동하고자 하는 층수로 이동하도록 목적지를 설정하도록 할 수 있다.
Referring to FIG. 5, the identity recognition device may be installed in the operation unit 510 of the elevator. The user may stand in the Z-distance range (30 cm to 70 cm) in front of the operation unit 510. As the user is located in the Z-distance range, the identity recognition device may photograph the face image and the iris image of the user and perform the identity recognition process according to the above-described process. In addition, the identity recognition device may transmit the additional information about the recognized user to the elevator according to the completion of the identity recognition, so that the elevator may set the destination to move to the number of floors that the user included in the additional information wants to move.

이제까지 본 발명에 대하여 그 실시 예를 중심으로 살펴보았다. 전술한 실시 예 외의 많은 실시 예들이 본 발명의 특허청구범위 내에 존재한다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예는 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.The present invention has been described above with reference to the embodiments thereof. Many embodiments other than the above-described embodiments are within the scope of the claims of the present invention. It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. The disclosed embodiments should, therefore, be considered in an illustrative rather than a restrictive sense. The scope of the present invention is defined by the appended claims rather than by the foregoing description, and all differences within the scope of equivalents thereof should be construed as being included in the present invention.

Claims (16)

사용자 별 등록 홍채 영상 및 등록 얼굴 영상을 저장하는 저장부;
사용자의 얼굴 촬영에 따른 얼굴 영상과 상기 등록 얼굴 영상 간의 유클리디안 거리(Euclidian distance)를 산출하는 얼굴 인식부;
상기 사용자의 홍채 촬영에 따른 홍채 영상과 상기 등록 홍채 영상 간의 해밍 거리(Hamming distance)를 산출하는 홍채 인식부; 및
상기 유클리디안 거리 및 상기 해밍 거리 중 하나 이상에 따라 상기 사용자의 신원을 인식하는 신원 인식부
를 포함하되,
상기 신원 인식부는 상기 유클리디안 거리 중 최소값이 지정된 범위 내에 속하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는지 확인하고
상기 홍채 인식부는 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상과 상기 홍채 영상 간의 해밍 거리를 산출하는 것을 특징으로 하는 신원 인식 장치.
A storage unit which stores a registered iris image and a registered face image for each user;
A face recognition unit configured to calculate an Euclidian distance between a face image according to a face shot of a user and the registered face image;
An iris recognition unit configured to calculate a hamming distance between the iris image and the registered iris image according to the iris photographing of the user; And
Identity recognition unit for recognizing the identity of the user according to at least one of the Euclidean distance and the Hamming distance
Including but not limited to:
If the minimum value of the Euclidean distance is within a specified range, the identity recognition unit determines whether the registered iris image matched with the registered face image corresponding to the minimum value exists.
The iris recognition unit calculates a hamming distance between the registered iris image and the iris image matched with the registered face image corresponding to the minimum value when there is the registered iris image matching the registered face image corresponding to the minimum value. Identity recognition device, characterized in that.
제1 항에 있어서,
상기 사용자의 일측 안구에 상응하는 홍채 영상을 생성하는 제1 카메라;
상기 사용자의 타측 안구에 상응하는 홍채 영상을 생성하는 제2 카메라;
상기 얼굴 영상을 생성하는 제3 카메라; 및
상기 제1 카메라와 상기 제2 카메라의 사이에 위치하여 근적외선을 투사하는 근적외선 투사부
를 더 포함하는 신원 인식 장치.
The method according to claim 1,
A first camera generating an iris image corresponding to one eye of the user;
A second camera generating an iris image corresponding to the other eye of the user;
A third camera generating the face image; And
A near-infrared projection unit positioned between the first camera and the second camera to project a near infrared ray
Identity recognition device further comprising.
삭제delete 제1 항에 있어서,
상기 신원 인식부는 상기 해밍 거리가 지정됨 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 것을 특징으로 하는 신원 인식 장치.
The method according to claim 1,
And the identity recognizing unit recognizes the user as a user corresponding to the registered iris image and the registered face image when the hamming distance is within a specified range.
제1 항에 있어서,
상기 신원 인식부는 상기 유클리디안 거리 및 상기 해밍 거리에 미리 지정된 가중치를 곱한 값들을 합하여 합산 스코어를 산출하고,
상기 합산 스코어가 미리 지정된 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 것을 특징으로 하는 신원 인식 장치.
The method according to claim 1,
The identity recognition unit calculates a sum score by adding up values obtained by multiplying the Euclidean distance and the Hamming distance by a predetermined weight,
And the user is recognized as a user corresponding to the registered iris image and the registered face image when the sum score falls within a predetermined range.
사용자 별 등록 홍채 영상 및 등록 얼굴 영상을 저장하는 저장부;
사용자의 얼굴 촬영에 따른 얼굴 영상과 상기 등록 얼굴 영상 간의 유클리디안 거리(Euclidian distance)를 산출하는 얼굴 인식부;
상기 사용자의 홍채 촬영에 따른 홍채 영상과 상기 등록 홍채 영상 간의 해밍 거리(Hamming distance)를 산출하는 홍채 인식부; 및
상기 유클리디안 거리 및 상기 해밍 거리 중 하나 이상에 따라 상기 사용자의 신원을 인식하는 신원 인식부
를 포함하되,
상기 신원 인식부는 상기 해밍 거리 중 최소값이 지정된 범위 내에 속하는 경우, 상기 최소값에 상응하는 상기 등록 홍채 영상에 매칭된 상기 등록 얼굴 영상이 존재하는지 확인하고
상기 홍채 인식부는 상기 최소값에 상응하는 상기 등록 홍채 영상에 매칭된 상기 등록 얼굴 영상이 존재하는 경우, 상기 최소값에 상응하는 상기 홍채 얼굴 영상에 매칭된 상기 등록 얼굴 영상과 상기 얼굴 영상 간의 유클리디안 거리를 산출하는 것을 특징으로 하는 신원 인식 장치.
A storage unit which stores a registered iris image and a registered face image for each user;
A face recognition unit configured to calculate an Euclidian distance between a face image according to a face shot of a user and the registered face image;
An iris recognition unit configured to calculate a hamming distance between the iris image and the registered iris image according to the iris photographing of the user; And
Identity recognition unit for recognizing the identity of the user according to at least one of the Euclidean distance and the Hamming distance
Including but not limited to:
If the minimum value of the hamming distance is within a specified range, the identity recognition unit checks whether the registered face image matched with the registered iris image corresponding to the minimum value exists.
The iris recognition unit, when there is the registered face image matched to the registered iris image corresponding to the minimum value, the Euclidean distance between the registered face image matched to the iris face image corresponding to the minimum value and the face image Identity recognition device, characterized in that for calculating.
제6 항에 있어서,
상기 신원 인식부는 상기 유클리디안 거리가 지정됨 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 것을 특징으로 하는 신원 인식 장치.
The method of claim 6,
And the identity recognizing unit recognizes the user as a user corresponding to the registered iris image and the registered face image when the Euclidean distance is within a specified range.
제6 항에 있어서,
상기 신원 인식부는 상기 유클리디안 거리 및 상기 해밍 거리에 미리 지정된 가중치를 곱한 값들을 합하여 합산 스코어를 산출하고,
상기 합산 스코어가 미리 지정된 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 것을 특징으로 하는 신원 인식 장치.
The method of claim 6,
The identity recognition unit calculates a sum score by adding up values obtained by multiplying the Euclidean distance and the Hamming distance by a predetermined weight,
And the user is recognized as a user corresponding to the registered iris image and the registered face image when the sum score falls within a predetermined range.
제1 항에 있어서,
상기 신원 인식부는 상기 사용자의 신원을 인식한 경우, 상기 신원에 상응하는 부가 정보를 외부로 출력하는 것을 특징으로 하는 신원 인식 장치.
The method according to claim 1,
And the identity recognizing unit outputs additional information corresponding to the identity to the outside when recognizing the identity of the user.
제9 항에 있어서,
상기 부가 정보는 상기 사용자가 엘리베이터를 타고 이동할 층 수를 포함하는 것을 특징으로 하는 신원 인식 장치.
10. The method of claim 9,
And the additional information includes the number of floors to which the user moves in an elevator.
사용자 별 등록 홍채 영상 및 등록 얼굴 영상을 저장하는 신원 인식 장치가 신원을 인식하는 방법에 있어서,
사용자의 얼굴 촬영에 따른 얼굴 영상과 상기 등록 얼굴 영상 간의 유클리디안 거리(Euclidian distance)를 산출하는 단계;
상기 사용자의 홍채 촬영에 따른 홍채 영상과 상기 등록 홍채 영상 간의 해밍 거리(Hamming distance)를 산출하는 단계; 및
상기 유클리디안 거리 및 상기 해밍 거리 중 하나 이상에 따라 상기 사용자의 신원을 인식하는 단계
를 포함하되,
상기 해밍 거리를 산출하는 단계는
상기 유클리디안 거리 중 최소값이 지정된 범위 내에 속하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는지 확인하는 단계; 및
상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상이 존재하는 경우, 상기 최소값에 상응하는 상기 등록 얼굴 영상에 매칭된 상기 등록 홍채 영상과 상기 홍채 영상 간의 해밍 거리를 산출하는 단계
를 포함하는 것을 특징으로 하는 신원 인식 방법.
In the identification recognition device for storing the registered iris image and the registered face image for each user in the recognition of the identity,
Calculating an Euclidian distance between a face image according to a face shot of a user and the registered face image;
Calculating a Hamming distance between the iris image and the registered iris image according to the iris photographing of the user; And
Recognizing the identity of the user according to one or more of the Euclidean distance and the Hamming distance
Including but not limited to:
Calculating the Hamming Distance
If the minimum value of the Euclidean distance falls within a specified range, checking whether the registered iris image matched with the registered face image corresponding to the minimum value exists; And
Calculating a hamming distance between the registered iris image and the iris image matched with the registered face image corresponding to the minimum value when there is the registered iris image matching the registered face image corresponding to the minimum value
Identity recognition method comprising a.
삭제delete 제11 항에 있어서,
상기 사용자의 신원을 인식하는 단계는
상기 해밍 거리가 지정됨 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 것을 특징으로 하는 신원 인식 방법.
12. The method of claim 11,
Recognizing the identity of the user
And recognizing the user as a user corresponding to the registered iris image and the registered face image when the hamming distance is within a specified range.
제11 항에 있어서,
상기 사용자의 신원을 인식하는 단계는
상기 유클리디안 거리 및 상기 해밍 거리에 미리 지정된 가중치를 곱한 값들을 합하여 합산 스코어를 산출하는 단계; 및
상기 합산 스코어가 미리 지정된 범위 내에 속하는 경우, 상기 사용자를 상기 등록 홍채 영상 및 상기 등록 얼굴 영상에 상응하는 사용자로 인식하는 단계
를 포함하는 신원 인식 방법.
12. The method of claim 11,
Recognizing the identity of the user
Calculating a sum score by summing values obtained by multiplying the Euclidean distance and the Hamming distance by a predetermined weight; And
Recognizing the user as a user corresponding to the registered iris image and the registered face image when the sum score falls within a predetermined range.
Identity recognition method comprising a.
제11 항에 있어서,
상기 사용자의 신원을 인식한 경우, 상기 신원에 상응하는 부가 정보를 외부로 출력하는 단계를 더 포함하는 것을 특징으로 하는 신원 인식 방법.
12. The method of claim 11,
And recognizing additional information corresponding to the identity to the outside when recognizing the identity of the user.
제15 항에 있어서,
상기 부가 정보는 상기 사용자가 엘리베이터를 타고 이동할 층 수를 포함하는 것을 특징으로 하는 신원 인식 방법.
The method of claim 15,
And the additional information includes the number of floors to which the user moves in an elevator.
KR1020120066166A 2011-07-20 2012-06-20 Apparatus and method for recognizing identity KR101302661B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020110072057 2011-07-20
KR20110072057 2011-07-20

Publications (2)

Publication Number Publication Date
KR20130011913A KR20130011913A (en) 2013-01-30
KR101302661B1 true KR101302661B1 (en) 2013-09-03

Family

ID=47840779

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120066166A KR101302661B1 (en) 2011-07-20 2012-06-20 Apparatus and method for recognizing identity

Country Status (1)

Country Link
KR (1) KR101302661B1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101661556B1 (en) 2014-09-30 2016-10-04 넥시스 주식회사 Method and program for confirmation of identity by wearable glass device
KR101887756B1 (en) * 2016-09-13 2018-08-13 주식회사 네오시큐 System for detecting human using the projected figure for eye
WO2019103520A1 (en) * 2017-11-24 2019-05-31 삼성전자 주식회사 Device and method for user authentication on basis of iris recognition
RU2670798C9 (en) 2017-11-24 2018-11-26 Самсунг Электроникс Ко., Лтд. Method of iris authentication of user and device therefor

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000102524A (en) 1998-09-29 2000-04-11 Oki Electric Ind Co Ltd Individual identifying device
KR20050102445A (en) * 2004-04-22 2005-10-26 노성렬 Multiple biological recognition method and system
KR20060099310A (en) * 2005-03-11 2006-09-19 한국조폐공사 Border control system and its control method using biometric passport of match-on-card

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000102524A (en) 1998-09-29 2000-04-11 Oki Electric Ind Co Ltd Individual identifying device
KR20050102445A (en) * 2004-04-22 2005-10-26 노성렬 Multiple biological recognition method and system
KR20060099310A (en) * 2005-03-11 2006-09-19 한국조폐공사 Border control system and its control method using biometric passport of match-on-card

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
박강령 외 3명, ‘양 눈 홍채 및 얼굴인식이 결합된 엘리베이터 환경에서의 거주자 인증 시스템’, 한국산업응용수학회, pp. 73-76, (2011.05)
박강령 외 3명, '양 눈 홍채 및 얼굴인식이 결합된 엘리베이터 환경에서의 거주자 인증 시스템', 한국산업응용수학회, pp. 73-76, (2011.05) *

Also Published As

Publication number Publication date
KR20130011913A (en) 2013-01-30

Similar Documents

Publication Publication Date Title
JP6610906B2 (en) Activity detection method and device, and identity authentication method and device
US11023757B2 (en) Method and apparatus with liveness verification
US9524421B2 (en) Differentiating real faces from representations
US20200279120A1 (en) Method, apparatus and system for liveness detection, electronic device, and storage medium
WO2017043314A1 (en) Guidance acquisition device, guidance acquisition method, and program
EP2842075A1 (en) Three-dimensional face recognition for mobile devices
JP2019500670A (en) Two-dimensional code processing method and apparatus
WO2018042996A1 (en) Lifeform sensing device
CN108924428A (en) A kind of Atomatic focusing method, device and electronic equipment
KR101302661B1 (en) Apparatus and method for recognizing identity
KR101444538B1 (en) 3d face recognition system and method for face recognition of thterof
KR20190089912A (en) Virtual Reality Devices Using Eye Physiology Features for User Identity Authentication
TWI752937B (en) Recognition method, device, mobile terminal and camera for photographed objects
JP2007241402A (en) Pretense decision device in face authentication and face authentication device using it
CN108174108A (en) The method and apparatus and mobile terminal for effect of taking pictures are adjusted in the terminal
US11245707B2 (en) Communication terminal, communication system, communication control method, and recording medium
CN105515777B (en) A kind of double authentication system and method for USBKEY equipment
CN113688744A (en) Height-adaptive face recognition method and device
JP2020505705A (en) Method and device for learning feature image and user authentication method
US11244182B2 (en) Spoof detection by estimating subject motion from captured image frames
US20230386256A1 (en) Techniques for detecting a three-dimensional face in facial recognition
KR20080085353A (en) Mobile communication terminal with user authentication function and method of user authentication the same
KR102248344B1 (en) Vehicle number recognition apparatus performing recognition of vehicle number by analyzing a plurality of frames constituting a license plate video
CN113191197B (en) Image restoration method and device
KR102483647B1 (en) Method and device to verify liveness

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160802

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170802

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190801

Year of fee payment: 7