KR20210145593A - Apparatus and method for generating iris image - Google Patents
Apparatus and method for generating iris image Download PDFInfo
- Publication number
- KR20210145593A KR20210145593A KR1020200062663A KR20200062663A KR20210145593A KR 20210145593 A KR20210145593 A KR 20210145593A KR 1020200062663 A KR1020200062663 A KR 1020200062663A KR 20200062663 A KR20200062663 A KR 20200062663A KR 20210145593 A KR20210145593 A KR 20210145593A
- Authority
- KR
- South Korea
- Prior art keywords
- iris
- image
- region
- eyelid
- points
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 210000000744 eyelid Anatomy 0.000 claims abstract description 140
- 210000001747 pupil Anatomy 0.000 claims abstract description 52
- 238000010586 diagram Methods 0.000 description 26
- 239000011521 glass Substances 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 239000000284 extract Substances 0.000 description 6
- 230000000873 masking effect Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 3
- 238000012656 cationic ring opening polymerization Methods 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 238000003064 k means clustering Methods 0.000 description 2
- 235000011034 Rubus glaucus Nutrition 0.000 description 1
- 244000235659 Rubus idaeus Species 0.000 description 1
- 235000009122 Rubus idaeus Nutrition 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G06K9/00597—
-
- G06K9/4661—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Geometry (AREA)
- Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Collating Specific Patterns (AREA)
- Eye Examination Apparatus (AREA)
Abstract
Description
본 발명은 홍채 이미지 생성 기술에 관한 것으로, 보다 상세하게는 경량화된 시스템에서 이용 가능한 압축된 홍채 이미지 생성 기술에 관한 것이다.The present invention relates to a technology for generating an iris image, and more particularly, to a technology for generating a compressed iris image usable in a lightweight system.
최근 출입통제시스템, 컴퓨터보안시스템 등을 중심으로 인간의 신체적 특징을 이용하여 개인의 신원을 확인하는 생체인식기술을 적용하는 경우가 크게 늘어나고 있으며, 생체인식기술의 범위도 종래에는 지문인식이 주류를 이루었으나 최근에는 홍채인식, 음성인식, 정맥인식 등과 같이 그 범위가 점차 확대되고 있다.Recently, the application of biometric technology to verify the identity of an individual using human physical characteristics is increasing mainly in access control systems and computer security systems. However, in recent years, the scope has been gradually expanded such as iris recognition, voice recognition, and vein recognition.
특히 눈의 동공을 둘러싸는 홍채는 일란성 쌍둥이도 완전히 다른 패턴을 가질 정도로 개인별 특성이 뚜렷하고 지문에 비해 훨씬 인식정확도가 뛰어난 것으로 알려져 있어, 홍채인식기술을 적용하는 사례가 크게 늘어나고 있다.In particular, the iris surrounding the pupil of the eye is known to have distinct individual characteristics to the extent that even identical twins have completely different patterns, and is known to have superior recognition accuracy compared to fingerprints.
홍채인식을 위해서는 광학계를 이용하여 홍채의 영상을 획득하는 과정과, 홍채의 영상데이터로부터 특징을 추출하여 홍채코드를 생성하는 과정, 생성된 홍채코드를 저장된 홍채코드와 대비하여 일치 여부를 확인하는 과정 등을 거치게 된다.For iris recognition, the process of acquiring an image of the iris by using an optical system, the process of extracting features from the image data of the iris to generate an iris code, and the process of comparing the generated iris code with the stored iris code and checking whether or not they match going through the back.
한편 홍채영상을 소프트웨어적으로 처리하여 특징을 정확히 추출하기 위해서는 홍채의 직경이 10~11mm, 물체거리가 300mm라고 할 때, 카메라모듈의 이미지센서에 맺히는 상이 통상 세로방향으로 200픽셀 이상 되어야 하는 것으로 알려져 있다.On the other hand, in order to accurately extract features by processing the iris image in software, it is known that when the diameter of the iris is 10 to 11 mm and the object distance is 300 mm, the image formed on the image sensor of the camera module should be 200 pixels or more in the vertical direction. have.
그러나, 상기 조건을 소형의 휴대용 홍채 인식기 등에 적용하기에는 어려움이 있다.However, it is difficult to apply the above conditions to a small portable iris recognizer or the like.
또한, 사무실에 홍채인식 근태관리 및 출입통제용 시스템을 구축할 때 서버에 홍채인식알고리즘을 두고, 각 단말기는 압축된 홍채 이미지를 전송하여 사용자 인증을 수행하기에는 홍채 이미지의 압축과 홍채 이미지 처리 속도 개선이 필요하다.In addition, when building a system for iris recognition time and attendance management and access control in the office, an iris recognition algorithm is placed on the server, and each terminal transmits a compressed iris image to perform user authentication. I need this.
한편, 한국공개특허 제 10-2019-0011055 호“ 하나의 이미지 센서를 이용한 홍채인식 장치 및 방법”는 하나의 이미지 센서를 이용하여 두 눈의 홍채를 인식하는 장치 및 방법에 관하여 개시하고 있다.Meanwhile, Korean Patent Application Laid-Open No. 10-2019-0011055 “Apparatus and method for iris recognition using one image sensor” discloses an apparatus and method for recognizing the iris of both eyes using one image sensor.
본 발명은 안경 착용자의 반사광으로 인한 홍채 인식 성능 저하를 방지하는 것을 목적으로 한다.An object of the present invention is to prevent deterioration of iris recognition performance due to reflected light of a wearer of glasses.
또한, 본 발명은 임베디드 시스템에서 동작이 가능한 경량화된 홍채 이미지 압축 및 생성을 제공하는 것을 목적으로 한다.Another object of the present invention is to provide a lightweight iris image compression and generation that can be operated in an embedded system.
상기한 목적을 달성하기 위한 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 LED 모듈을 이용하여 현재 홍채 인식 상태 변화를 상기 LED 모듈의 발광색을 변화시켜 표시하는 지시부; 두 개의 적외선 LED 모듈들을 이용하여 사용자의 홍채에 적외선을 조사하는 조사부; 카메라 모듈을 이용하여 상기 적외선이 조사된 홍채를 인식하는 인식부 및 반사체를 이용하여 상기 사용자의 홍채의 모습을 반사하는 미러부를 포함한다.An iris image generating apparatus according to an embodiment of the present invention for achieving the above object includes: an indicator for displaying a change in a current iris recognition state by changing an emission color of the LED module using an LED module; an irradiator for irradiating infrared rays to the user's iris using two infrared LED modules; It includes a recognition unit that recognizes the iris irradiated with infrared light using a camera module, and a mirror unit that reflects the shape of the user's iris using a reflector.
이 때, 상기 반사체는 상기 두 개의 적외선 LED 모듈들이 배치되고, 상기 두개의 적외선 LED 모듈듈 사이의 일직선 상에 상기 카메라 모듈이 배치될 수 있다.In this case, in the reflector, the two infrared LED modules may be disposed, and the camera module may be disposed on a straight line between the two infrared LED module modules.
이 때, 상기 두 개의 적외선 LED 모듈들 사이의 상기 일직선 상의 거리는 20 mm 이하 인 것일 수 있다.In this case, the distance on the straight line between the two infrared LED modules may be 20 mm or less.
이 때, 상기 반사체는 중심원과, 상기 중심원을 포함하는 동심원이 표시되어 있고, 상기 중심원의 내부에는 상기 카메라 모듈이 배치되고, 상기 중심원의 외부 영역이며, 상기 동심원의 내부 영역에는 상기 카메라 모듈을 중심으로 양 옆의 상기 일직선 상에 상기 두 개의 적외선 LED 모듈이 배치될 수 있다.At this time, the reflector is marked with a central circle and a concentric circle including the central circle, the camera module is disposed inside the central circle, an outer region of the central circle, and an inner region of the concentric circle The two infrared LED modules may be disposed on the straight line on both sides of the camera module.
이 때, 상기 인식부는 상기 적외선에 상응하는 반사광을 인식하고, 상기 지시부는 상기 반사광의 인식 여부에 기초하여, 상기 LED 모듈의 발광색을 변화시킬 수 있다.In this case, the recognition unit may recognize the reflected light corresponding to the infrared light, and the indicator may change the emission color of the LED module based on whether the reflected light is recognized.
이 때, 상기 인식부는 기설정된 홍채 인식 영역 내에 상기 반사광이 포함되는 경우, 상기 홍채를 인식하지 못하는 상태임을 판단하고, 상기 지시부는 상기 홍채를 인식하지 못하는 상태에 상응하도록 상기 LED 모듈의 발광색을 제어할 수 있다.In this case, the recognition unit determines that the iris is not recognized when the reflected light is included in the preset iris recognition area, and the indicator controls the emission color of the LED module to correspond to the state in which the iris is not recognized. can do.
이 때, 상기 인식부는 상기 기설정된 홍채 인식 영역 내에 포함된 반사광이 상기 기설정된 홍채 인식 영역 밖으로 이동된 것을 인식하고, 상기 기설정된 홍채 인식 영역 내에 상기 홍채가 인식된 경우, 상기 홍채로부터 이미지를 생성할 수 있다.In this case, the recognition unit recognizes that the reflected light included in the preset iris recognition area is moved out of the preset iris recognition area, and generates an image from the iris when the iris is recognized in the preset iris recognition area can do.
또한, 상기의 목적을 달성하기 위한 본 발명의 일실시예에 따른 홍채 이미지 생성 방법은 홍채 이미지 생성 장치의 홍채 이미지 생성 방법에 있어서, LED 모듈을 이용하여 현재 홍채 인식 상태 변화를 상기 LED 모듈의 발광색을 변화시켜 표시하는 단계; 반사체를 이용하여 상기 사용자의 홍채의 모습을 반사하는 단계; 두 개의 적외선 LED 모듈들을 이용하여 사용자의 홍채에 적외선을 조사하는 단계 및 카메라 모듈을 이용하여 상기 적외선이 조사된 홍채를 인식하는 단계를 포함한다.In addition, in the iris image generating method according to an embodiment of the present invention for achieving the above object, in the iris image generating method of the iris image generating apparatus, a change in the current iris recognition state using an LED module is detected by the emission color of the LED module. changing and displaying; using a reflector to reflect the shape of the user's iris; It includes the steps of irradiating infrared rays to the user's iris using two infrared LED modules and recognizing the iris irradiated with infrared rays using a camera module.
이 때, 상기 반사체는 상기 두 개의 적외선 LED 모듈들이 배치되고, 상기 두개의 적외선 LED 모듈듈 사이의 일직선 상에 상기 카메라 모듈이 배치될 수 있다.In this case, in the reflector, the two infrared LED modules may be disposed, and the camera module may be disposed on a straight line between the two infrared LED module modules.
이 때, 상기 두 개의 적외선 LED 모듈들 사이의 상기 일직선 상의 거리는 20 mm 이하 인 것일 수 있다.In this case, the distance on the straight line between the two infrared LED modules may be 20 mm or less.
이 때, 상기 반사체는 중심원과, 상기 중심원을 포함하는 동심원이 표시되어 있고, 상기 중심원의 내부에는 상기 카메라 모듈이 배치되고, 상기 중심원의 외부 영역이며, 상기 동심원의 내부 영역에는 상기 카메라 모듈을 중심으로 양 옆의 상기 일직선 상에 상기 두 개의 적외선 LED 모듈이 배치될 수 있다.At this time, the reflector is marked with a central circle and a concentric circle including the central circle, the camera module is disposed inside the central circle, an outer region of the central circle, and an inner region of the concentric circle The two infrared LED modules may be disposed on the straight line on both sides of the camera module.
이 때, 상기 인식하는 단계는 상기 적외선에 상응하는 반사광을 인식하고, 상기 반사광의 인식 여부에 기초하여, 상기 LED 모듈의 발광색을 변화시킬 수 있다.In this case, in the recognizing step, the reflected light corresponding to the infrared light may be recognized, and the emission color of the LED module may be changed based on whether the reflected light is recognized.
이 때, 상기 인식하는 단계는 기설정된 홍채 인식 영역 내에 상기 반사광이 포함되는 경우, 상기 홍채를 인식하지 못하는 상태인 것으로 판단하고, 상기 홍채를 인식하지 못하는 상태에 상응하도록 상기 LED 모듈의 발광색을 제어할 수 있다.In this case, in the recognizing step, when the reflected light is included in a preset iris recognition area, it is determined that the iris is not recognized, and the emission color of the LED module is controlled to correspond to the state in which the iris is not recognized. can do.
이 때, 상기 인식하는 단계는 상기 기설정된 홍채 인식 영역 내에 포함된 반사광이 상기 기설정된 홍채 인식 영역 밖으로 이동된 것을 인식하고, 상기 기설정된 홍채 인식 영역 내에 상기 홍채가 인식된 경우, 상기 홍채로부터 이미지를 생성할 수 있다.In this case, the recognizing may include recognizing that the reflected light included in the preset iris recognition region has moved out of the preset iris recognition region, and when the iris is recognized in the preset iris recognition region, an image from the iris can create
상기의 목적을 달성하기 위한 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 카메라 모듈로부터 적외선이 조사된 사용자의 눈을 촬영한 눈 이미지를 입력 받는 이미지 입력부; 상기 눈 이미지를 기설정된 크기로 잘라내고, 상기 기설정된 크기로 잘라낸눈 이미지에서 동공을 탐색하는 이미지 크롭핑부; 상기 동공에 기초하여 상기 눈 이미지에서 눈꺼풀 클러스터 영역을 생성하고, 상기 동공에 기초하여 홍채 영역을 축출하는 이미지 스케일링부 및 상기 눈꺼풀 클러스터 영역과 상기 홍채 영역을 이용하여 눈꺼풀 영역을 설정하고, 상기 눈꺼풀 영역을 이용하여 압축된 홍채 이미지를 생성하는 이미지 생성부를 포함한다.According to an embodiment of the present invention, there is provided an iris image generating apparatus comprising: an image input unit for receiving an eye image obtained by photographing an eye of a user irradiated with infrared light from a camera module; an image cropping unit that crops the eye image to a predetermined size and searches for a pupil in the eye image cropped to the predetermined size; An image scaling unit that generates an eyelid cluster region from the eye image based on the pupil, extracts an iris region based on the pupil, and sets an eyelid region using the eyelid cluster region and the iris region, and sets the eyelid region and an image generator for generating a compressed iris image using
이 때, 상기 이미지 크롭핑부는 상기 기설정된 크기로 잘라낸 눈 이미지를 이진화하고, 기저장된 동공의 특징 정보에 기초하여 상기 이진화된 눈 이미지에서 상기 동공의 반사광을 탐색할 수 있다.In this case, the image cropping unit may binarize the eye image cut to the predetermined size, and search the reflected light of the pupil in the binarized eye image based on pre-stored pupil characteristic information.
이 때, 상기 이미지 스케일링부는 상기 동공의 위치에 기초하여 홍채의 중심과 홍채의 반지름을 산출하고, 상기 홍채의 반지름을 이용하여 상기 홍채 영역에 상응하는 원 이미지를 생성할 수 있다.In this case, the image scaling unit may calculate a center of the iris and a radius of the iris based on the position of the pupil, and generate an original image corresponding to the iris region using the radius of the iris.
이 때, 상기 이미지 스케일링부는 상기 홍채의 중심에 기초하여 상기 홍채 영역에 상응하는 원 이미지와 상기 눈 이미지를 and 연산하여 상기 눈 이미지에서 상기 홍채 영역을 축출할 수 있다.In this case, the image scaling unit may extract the iris region from the eye image by performing an and operation on the original image corresponding to the iris region and the eye image based on the center of the iris.
이 때, 상기 이미지 생성부는 상기 홍채의 중심을 기준으로 상기 눈꺼풀 영역 클러스터의 윗 눈꺼풀 클러스터 영역과 아래 눈꺼풀 클러스터 영역을 통과하는 적어도 하나의 사선을 그어, 상기 윗 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제1 포인트들을 설정하고, 상기 아래 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제2 포인트들을 설정할 수 있다.In this case, the image generator draws at least one oblique line passing through the upper eyelid cluster area and the lower eyelid cluster area of the eyelid area cluster based on the center of the iris, so that the upper eyelid cluster area and the at least one oblique line are First intersecting points may be set, and second points at which the lower eyelid cluster region and the at least one oblique line intersect may be set.
이 때, 상기 이미지 생성부는 상기 제1 포인트들을 연결하여 윗 눈꺼풀 영역선을 생성하고, 상기 제2 포인트들을 연결하여 아래 눈꺼풀 영역선을 생성하고, 상기 윗 눈꺼풀 영역선과 상기 아래 눈꺼풀 영역선이 교차하는 두 지점들을 제3 포인트들로 설정할 수 있다.In this case, the image generator connects the first points to generate an upper eyelid region line, connects the second points to generate a lower eyelid region line, and the upper lid region line and the lower lid region line intersect Two points may be set as third points.
이 때, 상기 이미지 생성부는 상기 제1 포인트들, 상기 제2 포인트들 및 상기 제3 포인트들로부터 상기 홍채 영역을 포함하는 상기 눈꺼풀 영역을 설정할 수 있다.In this case, the image generator may set the eyelid area including the iris area from the first points, the second points, and the third points.
이 때, 상기 이미지 생성부는 상기 눈꺼풀 영역의 외부 영역을 기설정된 그레이스케일 값으로 변환하여 상기 압축된 홍채 이미지를 생성할 수 있다.In this case, the image generator may generate the compressed iris image by converting the outer region of the eyelid region into a preset grayscale value.
또한, 상기의 목적을 달성하기 위한 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성 방법은 홍채 이미지 생성 장치의 홍채 이미지 생성 방법에 있어서, 카메라 모듈로부터 적외선이 조사된 사용자의 눈을 촬영한 눈 이미지를 입력 받는 단계; 상기 눈 이미지를 기설정된 크기로 잘라내고, 상기 기설정된 크기로 잘라낸눈 이미지에서 동공을 탐색하는 단계; 상기 동공에 기초하여 상기 눈 이미지에서 눈꺼풀 클러스터 영역을 생성하고, 상기 동공에 기초하여 홍채 영역을 축출하는 단계 및 상기 눈꺼풀 클러스터 영역과 상기 홍채 영역을 이용하여 눈꺼풀 영역을 설정하고, 상기 눈꺼풀 영역을 이용하여 압축된 홍채 이미지를 생성하는 단계를 포함한다.In addition, in the iris image generating method of the iris image generating apparatus according to an embodiment of the present invention for achieving the above object, in the iris image generating method of the iris image generating apparatus, the user's eyes irradiated with infrared light from a camera module are receiving an input of a photographed eye image; cutting the eye image to a predetermined size, and searching for a pupil in the eye image cropped to the predetermined size; generating an eyelid cluster region in the eye image based on the pupil, extracting an iris region based on the pupil, and setting an eyelid region using the eyelid cluster region and the iris region, and using the eyelid region and generating a compressed iris image.
이 때, 상기 동공을 탐색하는 단계는 상기 기설정된 크기로 잘라낸 눈 이미지를 이진화하고, 기저장된 동공의 특징 정보에 기초하여 상기 이진화된 눈 이미지에서 상기 동공의 반사광을 탐색할 수 있다.In this case, the step of searching for the pupil may include binarizing the eye image cut to the preset size, and searching for the reflected light of the pupil in the binarized eye image based on pre-stored pupil characteristic information.
이 때, 상기 홍채 영역을 축출하는 단계는 상기 동공의 위치에 기초하여 홍채의 중심과 홍채의 반지름을 산출하고, 상기 홍채의 반지름을 이용하여 상기 홍채 영역에 상응하는 원 이미지를 생성할 수 있다.In this case, the extracting of the iris region may include calculating a center of the iris and a radius of the iris based on the position of the pupil, and generating an original image corresponding to the iris region using the radius of the iris.
이 때, 상기 홍채 영역을 축출하는 단계는 상기 홍채의 중심에 기초하여 상기 홍채 영역에 상응하는 원 이미지와 상기 눈 이미지를 and 연산하여 상기 눈 이미지에서 상기 홍채 영역을 축출할 수 있다.In this case, the extracting of the iris region may include and calculating an original image corresponding to the iris region and the eye image based on the center of the iris to extract the iris region from the eye image.
이 때, 상기 압축된 홍채 이미지를 생성하는 단계는 상기 홍채의 중심을 기준으로 상기 눈꺼풀 영역 클러스터의 윗 눈꺼풀 클러스터 영역과 아래 눈꺼풀 클러스터 영역을 통과하는 적어도 하나의 사선을 그어, 상기 윗 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제1 포인트들을 설정하고, 상기 아래 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제2 포인트들을 설정할 수 있다.In this case, the generating of the compressed iris image includes drawing at least one oblique line passing through the upper eyelid cluster region and the lower eyelid cluster region of the eyelid region cluster based on the center of the iris, so that the upper eyelid cluster region and the First points at which the at least one oblique line intersect may be set, and second points at which the lower eyelid cluster region and the at least one oblique line intersect may be set.
이 때, 상기 압축된 홍채 이미지를 생성하는 단계는 상기 제1 포인트들을 연결하여 윗 눈꺼풀 영역선을 생성하고, 상기 제2 포인트들을 연결하여 아래 눈꺼풀 영역선을 생성하고, 상기 윗 눈꺼풀 영역선과 상기 아래 눈꺼풀 영역선이 교차하는 두 지점들을 제3 포인트들로 설정할 수 있다.In this case, the generating of the compressed iris image includes connecting the first points to generate an upper eyelid region line, connecting the second points to create a lower lid region line, and connecting the upper eyelid region line and the lower eyelid region line. Two points where the eyelid region line intersects may be set as third points.
이 때, 상기 압축된 홍채 이미지를 생성하는 단계는 상기 제1 포인트들, 상기 제2 포인트들 및 상기 제3 포인트들로부터 상기 홍채 영역을 포함하는 상기 눈꺼풀 영역을 설정할 수 있다.In this case, the generating of the compressed iris image may include setting the eyelid region including the iris region from the first points, the second points, and the third points.
이 때, 상기 압축된 홍채 이미지를 생성하는 단계는 상기 눈꺼풀 영역의 외부 영역을 기설정된 그레이스케일 값으로 변환하여 상기 압축된 홍채 이미지를 생성할 수 있다.In this case, the generating of the compressed iris image may include converting the outer region of the eyelid region into a preset grayscale value to generate the compressed iris image.
본 발명은 안경 착용자의 반사광으로 인한 홍채 인식 성능 저하를 방지할 수 있다.The present invention can prevent deterioration of iris recognition performance due to reflected light of a wearer of glasses.
또한, 본 발명은 임베디드 시스템에서 동작이 가능한 경량화된 홍채 이미지 압축 및 생성을 제공할 수 있다.In addition, the present invention may provide a lightweight iris image compression and generation capable of operation in an embedded system.
도 1 및 도 2는 본 발명의 일실시예에 따른 안경 착용자의 반사광을 나타낸 도면이다.
도 3은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 나타낸 도면이다.
도 4는 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 나타낸 블록도이다.
도 5는 본 발명의 일실시예에 따른 홍채 이미지 생성 방법을 나타낸 동작흐름도이다.
도 6 및 도 7은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 이용할 때 안경 착용자의 반사광을 나타낸 도면이다.
도 8은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 휴대용으로 사용한 예를 나타낸 도면이다.
도 9는 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 거치형으로 사용한 예를 나타낸 도면이다.
도 10은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성을 위한 사용자 유도를 나타낸 도면이다.
도 11은 도 4에 도시된 인식부의 일 예를 세부적으로 나타낸 블록도이다.
도 12는 본 발명의 일실시예에 따른 이미지 처리 과정을 나타낸 도면이다.
도 13은 본 발명의 일실시예에 따른 이미지 리사이징을 나타낸 도면이다.
도 14 내지 도 17은 본 발명의 일실시예에 따른 홍채 축출 과정에서 생성되는 이미지들을 나타낸 도면이다.
도 18은 본 발명의 일실시예에 따른 눈꺼풀 인식 과정을 나타낸 도면이다.
도 19는 본 발명의 일실시예에 따른 이미지 마스킹을 나타낸 도면이다.
도 20은 본 발명의 일실시예에 따른 이미지 압축을 나타낸 도면이다.
도 21은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성 방법을 나타낸 동작흐름도이다.
도 22는 도 21에 도시된 이미지 크롭핑 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.
도 23은 도 21에 도시된 이미지 생성 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.
도 24는 도 21에 도시된 이미지 생성 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.
도 25은 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.1 and 2 are views showing reflected light of a wearer of glasses according to an embodiment of the present invention.
3 is a diagram illustrating an iris image generating apparatus according to an embodiment of the present invention.
4 is a block diagram illustrating an iris image generating apparatus according to an embodiment of the present invention.
5 is an operation flowchart illustrating a method for generating an iris image according to an embodiment of the present invention.
6 and 7 are views illustrating reflected light of a wearer of glasses when using the iris image generating apparatus according to an embodiment of the present invention.
8 is a diagram illustrating an example of using the iris image generating apparatus as a portable device according to an embodiment of the present invention.
9 is a diagram illustrating an example in which the iris image generating apparatus according to an embodiment of the present invention is used as a stationary type.
10 is a diagram illustrating a user guidance for generating an iris image of an iris image generating apparatus according to an embodiment of the present invention.
11 is a detailed block diagram illustrating an example of the recognition unit illustrated in FIG. 4 .
12 is a diagram illustrating an image processing process according to an embodiment of the present invention.
13 is a diagram illustrating image resizing according to an embodiment of the present invention.
14 to 17 are diagrams illustrating images generated in an iris extraction process according to an embodiment of the present invention.
18 is a diagram illustrating an eyelid recognition process according to an embodiment of the present invention.
19 is a diagram illustrating image masking according to an embodiment of the present invention.
20 is a diagram illustrating image compression according to an embodiment of the present invention.
21 is an operation flowchart illustrating a method of generating an iris image by an apparatus for generating an iris image according to an embodiment of the present invention.
22 is a detailed operation flowchart illustrating an example of the image cropping step shown in FIG. 21 .
23 is a detailed operation flowchart illustrating an example of the image generating step shown in FIG. 21 .
24 is a detailed operation flowchart illustrating an example of the image generating step shown in FIG. 21 .
25 is a diagram illustrating a computer system according to an embodiment of the present invention.
본 발명을 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다. 여기서, 반복되는 설명, 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능, 및 구성에 대한 상세한 설명은 생략한다. 본 발명의 실시형태는 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.The present invention will be described in detail with reference to the accompanying drawings as follows. Here, repeated descriptions, well-known functions that may unnecessarily obscure the gist of the present invention, and detailed descriptions of configurations will be omitted. Embodiments of the present invention are provided in order to more completely explain the present invention to those of ordinary skill in the art. Accordingly, the shapes and sizes of elements in the drawings may be exaggerated for clearer description.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part "includes" a certain element, it means that other elements may be further included, rather than excluding other elements, unless otherwise stated.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.
도 1 및 도 2는 본 발명의 일실시예에 따른 안경 착용자의 반사광을 나타낸 도면이다.1 and 2 are views showing reflected light of a wearer of glasses according to an embodiment of the present invention.
도 1 및 도 2를 참조하면, 홍채 인식을 위해 안경 착용자의 홍채에 적외선이조사되고, 이로인해 기설정된 홍채 인식 영역(1)에 반사광이 인식된 것을 알 수 있다. 안경 착용자의 안경에 IR-LED이 조사되면, 반사광(SPECULAR)이 생성되어 기설정된 홍채 인식 영역(1)에서 홍채를 가리기 때문에 홍채 인식이 저하될 수 있다. 홍채 인식은 홍채의 패턴을 카메라로 촬영하기 위해서 IR-LED (700-900nm)의 적외선이 필요하고, 가시광선은 눈물을 투과하지 못하기 때문에 칼라 카메라로 홍채의 패턴을 촬영할 수 없다.1 and 2 , it can be seen that infrared rays are irradiated to the iris of the glasses wearer for iris recognition, and thus reflected light is recognized in the preset
이 때, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 IR-LED의 적외선을 약 22 도 이상의 기울기로 조사하면, 반사광이 홍채 영역을 가리는 현상을 피할 수 있다.In this case, in the iris image generating apparatus according to an embodiment of the present invention, when the infrared rays of the IR-LED are irradiated with an inclination of about 22 degrees or more, the phenomenon in which the reflected light blocks the iris region can be avoided.
도 3은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 나타낸 도면이다. 도 4는 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 나타낸 블록도이다.3 is a diagram illustrating an iris image generating apparatus according to an embodiment of the present invention. 4 is a block diagram illustrating an iris image generating apparatus according to an embodiment of the present invention.
도 3을 참조하면, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치(100)는 1개의 카메라 모듈과 2개의 IR-LED를 포함할 수 있다.Referring to FIG. 3 , the iris
본 발명의 일실시예에 따른 홍채 이미지 생성 장치(100)는 무게 32g, 사이즈 89x50x14 mm 에 상응할 수 있다.The iris
본 발명의 일실시예에 따른 홍채 이미지 생성 장치(100)는 홍채 이미지를 컴퓨터(일반 피씨, 노트북, 테블렛, 스마트폰, 기타 AP보드 등)로 전송하기 위해서 USB3.0을 이용할 수 있다.The iris
컴퓨터에 연결되는 USB3.0 케이불은 C-type to A-type 콘넥터로 구성될 수 있다. C-type 은 휴대용 단안홍채인식기 쪽이고 A-type은 컴퓨터 쪽에 이용될 수 있다.A USB3.0 cable connected to a computer can be configured as a C-type to A-type connector. C-type is for portable monocular iris recognizer and A-type can be used for computer.
이 때, 본 발명의 일실시예에 따른 카메라 모듈은 5MP(Mega Pixel), 단 초점 fixed focus, B&W, 30fps, 수평화각 22°, F#는 2.65이며, 사이즈 6.23x6.23x8.0 mm 에 상응할 수 있다.At this time, the camera module according to an embodiment of the present invention is 5MP (Mega Pixel), short focus fixed focus, B&W, 30fps, horizontal angle of
이 때, 본 발명의 일실시예에 따른 카메라 모듈은 30cm거리에서 1cm지름의 홍채를 260화소로 capture 할 수 있다.In this case, the camera module according to an embodiment of the present invention may capture an iris having a diameter of 1 cm at a distance of 30 cm and 260 pixels.
도 4를 참조하면, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치(100)는 지시부(110), 조사부(120), 미러부(130) 및 인식부(140)를 포함한다.Referring to FIG. 4 , the iris
지시부(110)는 LED 모듈을 이용하여 현재 홍채 인식 상태 변화를 상기 LED 모듈의 발광색을 변화시켜 표시할 수 있다.The
예를 들어, 지시부(110)는 홍채인식을 시작하면 LED 모듈을 오렌지색으로 발광시킬 수 있고, 홍채인식이 끝나면 빨간색으로 발광시킬 수 있다. 빨간색은 동작하지 않는 상태인 standby/idle 상태를 표시할 수도 있다.For example, the
조사부(120)는 두 개의 적외선 LED 모듈들을 이용하여 사용자의 홍채에 적외선을 조사할 수 있다.The
미러부(130)는 반사체를 이용하여 상기 사용자의 홍채의 모습을 반사할 수 있다.The
이 때, 상기 반사체는 상기 두 개의 적외선 LED 모듈들이 배치되고, 상기 두개의 적외선 LED 모듈듈 사이의 일직선 상에 상기 카메라 모듈이 배치될 수 있다.In this case, in the reflector, the two infrared LED modules may be disposed, and the camera module may be disposed on a straight line between the two infrared LED module modules.
이 때, 상기 반사체는 중심원과, 상기 중심원을 포함하는 동심원이 표시되어 있고, 상기 중심원의 내부에는 상기 카메라 모듈이 배치되고, 상기 중심원의 외부 영역이며, 상기 동심원의 내부 영역에는 상기 카메라 모듈을 중심으로 양 옆의 상기 일직선 상에 상기 두 개의 적외선 LED 모듈이 배치될 수 있다.At this time, the reflector is marked with a central circle and a concentric circle including the central circle, the camera module is disposed inside the central circle, an outer region of the central circle, and an inner region of the concentric circle The two infrared LED modules may be disposed on the straight line on both sides of the camera module.
이 때, 상기 두 개의 적외선 LED 모듈들 사이의 상기 일직선 상의 거리는 20 mm 이하 인 것일 수 있다.In this case, the distance on the straight line between the two infrared LED modules may be 20 mm or less.
인식부(140)는 카메라 모듈을 이용하여 상기 적외선이 조사된 홍채를 인식할 수 있다.The
이 때, 인식부(140)는 상기 적외선에 상응하는 반사광을 인식하고, 상기 반사광의 인식 여부에 기초하여, 지시부(110)는 상기 LED 모듈의 발광색을 변화시킬 수 있다.At this time, the
이 때, 인식부(140)는 기설정된 홍채 인식 영역 내에 상기 반사광이 포함되는 경우, 상기 홍채를 인식하지 못하는 상태임을 판단하고, 지시부(110)는 상기 홍채를 인식하지 못하는 상태에 상응하도록 상기 LED 모듈의 발광색을 제어할 수 있다.At this time, when the reflected light is included in the preset iris recognition area, the
이 때, 인식부(140)는 상기 기설정된 홍채 인식 영역 내에 포함된 반사광이 상기 기설정된 홍채 인식 영역 밖으로 이동된 것을 인식하고, 상기 기설정된 홍채 인식 영역 내에 상기 홍채가 인식된 경우, 상기 홍채로부터 이미지를 생성할 수 있다.In this case, the
이 때, 홍채 이미지는 홍채등록/인식/식별/인증용으로 홍채인식 개인화서비스솔루션에 제공될 수 있다.In this case, the iris image may be provided to the iris recognition personalization service solution for iris registration/recognition/identification/authentication.
이 때, 홍채 이미지는 ISO/IEC19794-6을 만족하고 Kind7 조건을 만족할 수 있다.In this case, the iris image may satisfy ISO/IEC19794-6 and the Kind7 condition.
예를 들어, 안경을 착용한 사용자가 홍채 인식 장치를 바라볼 때, 사용자 눈높이보다 홍채 인식 장치가 지표면에서 가깝고, 사용자와 홍채 인식 장치의 거리가 25~30cm 이고, 사용자가 지표면과 수직한 선을 기준으로 지표면을 바라보는 아래쪽 방향으로 22° 이상의 각도로 홍채 인식 장치를 바라보면, 반사광이 상기 기설정된 홍채 인식 영역을 피해갈 수 있고, 홍채를 정확하게 인식할 수 있다.For example, when a user wearing glasses looks at the iris recognition device, the iris recognition device is closer to the ground than at the user's eye level, the distance between the user and the iris recognition device is 25 to 30 cm, and the user draws a line perpendicular to the ground. When the iris recognition apparatus is viewed at an angle of 22° or more in a downward direction facing the ground as a reference, the reflected light may avoid the preset iris recognition area and the iris may be accurately recognized.
도 5는 본 발명의 일실시예에 따른 홍채 이미지 생성 방법을 나타낸 동작흐름도이다.5 is an operation flowchart illustrating a method for generating an iris image according to an embodiment of the present invention.
도 5를 참조하면, 본 발명의 일실시예에 따른 홍채 이미지 생성 방법은 먼저 홍채 인식 상태를 안내할 수 있다(S210).Referring to FIG. 5 , the method for generating an iris image according to an embodiment of the present invention may first guide an iris recognition state ( S210 ).
즉, 단계(S210)는 LED 모듈을 이용하여 현재 홍채 인식 상태 변화를 상기 LED 모듈의 발광색을 변화시켜 표시할 수 있다.That is, in step S210, a change in the current iris recognition state may be displayed by changing the emission color of the LED module using the LED module.
이 때, 단계(S210)는 LED 모듈을 이용하여 현재 홍채 인식 상태 변화를 상기 LED 모듈의 발광색을 변화시켜 표시할 수 있다.In this case, in step S210, a change in the current iris recognition state may be displayed by changing the emission color of the LED module using the LED module.
예를 들어, 이 때, 단계(S210)는 홍채인식을 시작하면 LED 모듈을 오렌지색으로 발광시킬 수 있고, 홍채인식이 끝나면 빨간색으로 발광시킬 수 있다. 빨간색은 동작하지 않는 상태인 standby/idle 상태를 표시할 수도 있다.For example, in step S210 , the LED module may emit light in orange when iris recognition is started, and in red when iris recognition is finished. Red may indicate standby/idle status, which is a non-operational status.
본 발명의 일실시예에 따른 홍채 이미지 생성 방법은 적외선을 조사할 수 있다(S220).In the method of generating an iris image according to an embodiment of the present invention, infrared rays may be irradiated (S220).
즉, 단계(S220)는 두 개의 적외선 LED 모듈들을 이용하여 사용자의 홍채에 적외선을 조사할 수 있다.That is, in step S220, infrared rays may be irradiated to the user's iris using two infrared LED modules.
이 때, 단계(S220)는 반사체를 이용하여 상기 사용자의 홍채의 모습을 반사할 수 있다.In this case, in step S220, the shape of the user's iris may be reflected using a reflector.
이 때, 상기 반사체는 상기 두 개의 적외선 LED 모듈들이 배치되고, 상기 두개의 적외선 LED 모듈듈 사이의 일직선 상에 상기 카메라 모듈이 배치될 수 있다.In this case, in the reflector, the two infrared LED modules may be disposed, and the camera module may be disposed on a straight line between the two infrared LED module modules.
이 때, 상기 두 개의 적외선 LED 모듈들 사이의 상기 일직선 상의 거리는 20 mm 이하 인 것일 수 있다.In this case, the distance on the straight line between the two infrared LED modules may be 20 mm or less.
이 때, 상기 반사체는 중심원과, 상기 중심원을 포함하는 동심원이 표시되어 있고, 상기 중심원의 내부에는 상기 카메라 모듈이 배치되고, 상기 중심원의 외부 영역이며, 상기 동심원의 내부 영역에는 상기 카메라 모듈을 중심으로 양 옆의 상기 일직선 상에 상기 두 개의 적외선 LED 모듈이 배치될 수 있다.At this time, the reflector is marked with a central circle and a concentric circle including the central circle, the camera module is disposed inside the central circle, an outer region of the central circle, and an inner region of the concentric circle The two infrared LED modules may be disposed on the straight line on both sides of the camera module.
이 때, 단계(S220)는 두 개의 적외선 LED 모듈들을 이용하여 사용자의 홍채에 적외선을 조사할 수 있다.In this case, in step S220, infrared rays may be irradiated to the user's iris using two infrared LED modules.
본 발명의 일실시예에 따른 홍채 이미지 생성 방법은 홍채를 인식할 수 있다(S230).The method for generating an iris image according to an embodiment of the present invention may recognize the iris (S230).
즉, 단계(S230)는 카메라 모듈을 이용하여 상기 적외선이 조사된 홍채를 인식할 수 있다.That is, in step S230, the iris irradiated with the infrared rays may be recognized using the camera module.
이 때, 단계(S230)는 상기 적외선에 상응하는 반사광을 인식하고, 상기 반사광의 인식 여부에 기초하여, 상기 LED 모듈의 발광색을 변화시킬 수 있다.In this case, in step S230, the reflected light corresponding to the infrared light may be recognized, and the emission color of the LED module may be changed based on whether the reflected light is recognized.
이 때, 단계(S230)는 기설정된 홍채 인식 영역 내에 상기 반사광이 포함되는 경우, 상기 홍채를 인식하지 못하는 상태임을 판단하고, 상기 홍채를 인식하지 못하는 상태에 상응하도록 상기 LED 모듈의 발광색을 제어할 수 있다.At this time, in step S230, when the reflected light is included in the preset iris recognition region, it is determined that the iris is not recognized, and the emission color of the LED module is controlled to correspond to the state in which the iris is not recognized. can
이 때, 단계(S230)는 상기 기설정된 홍채 인식 영역 내에 포함된 반사광이 상기 기설정된 홍채 인식 영역 밖으로 이동된 것을 인식하고, 상기 기설정된 홍채 인식 영역 내에 상기 홍채가 인식된 경우, 상기 홍채로부터 이미지를 생성할 수 있다.In this case, in step S230, it is recognized that the reflected light included in the preset iris recognition area is moved out of the preset iris recognition area, and when the iris is recognized in the preset iris recognition area, an image from the iris can create
이 때, 홍채 이미지는 홍채등록/인식/식별/인증용으로 홍채인식 개인화서비스솔루션에 제공될 수 있다.In this case, the iris image may be provided to the iris recognition personalization service solution for iris registration/recognition/identification/authentication.
이 때, 홍채 이미지는 ISO/IEC19794-6을 만족하고 Kind7 조건을 만족할 수 있다.In this case, the iris image may satisfy ISO/IEC19794-6 and the Kind7 condition.
예를 들어, 사용자 눈높이보다 홍채 인식 장치가 지표면에서 가깝고, 사용자와 홍채 인식 장치의 거리가 25~30cm 이고, 사용자가 지표면과 수직한 선을 기준으로 지표면을 바라보는 아래쪽 방향으로 22° 이상의 각도로 홍채 인식 장치를 바라보면, 반사광이 상기 기설정된 홍채 인식 영역을 피해갈 수 있고, 홍채를 정확하게 인식할 수 있다.For example, the iris recognition device is closer to the ground than the user's eye level, the distance between the user and the iris recognition device is 25 to 30 cm, and the user faces the ground based on a line perpendicular to the ground at an angle of 22° or more in the downward direction. When looking at the iris recognition apparatus, the reflected light may avoid the preset iris recognition area, and the iris may be accurately recognized.
도 6 및 도 7은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 이용할 때 안경 착용자의 반사광을 나타낸 도면이다.6 and 7 are views illustrating reflected light of a wearer of glasses when using the iris image generating apparatus according to an embodiment of the present invention.
도 6 및 도 7을 참조하면, 안경을 착용한 사용자가 홍채 이미지 생성 장치(100)를 사용함으로써, 기설정된 홍채 인식 영역(1)에 반사광이 포함되지 않고 홍채를 정확하게 인식하는 것을 알 수 있다.6 and 7 , it can be seen that, when a user wearing glasses uses the iris
즉, 사용자 눈높이보다 홍채 인식 장치(100)가 지표면에서 가깝고, 사용자와 홍채 인식 장치(100)의 거리가 25~30cm 이고, 사용자가 지표면과 수직한 선을 기준으로 지표면을 바라보는 아래쪽 방향으로 22° 이상의 각도로 홍채 인식 장치(100)를 바라보면, 반사광이 상기 기설정된 홍채 인식 영역을 피해갈 수 있고, 홍채를 정확하게 인식할 수 있다.That is, the
도 8은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 휴대용으로 사용한 예를 나타낸 도면이다.8 is a diagram illustrating an example of using the iris image generating apparatus as a portable device according to an embodiment of the present invention.
도 8을 참조하면, 사용자가 휴대용인 홍채 이미지 생성 장치(100)를 이용하여 홍채를 인식하는 것을 알 수 있다.Referring to FIG. 8 , it can be seen that the user recognizes the iris by using the portable iris
즉, 사용자 눈높이보다 홍채 인식 장치가 지표면에서 가깝고, 사용자와 홍채 인식 장치의 거리가 25~30cm 이고, 사용자가 지표면과 수직한 선을 기준으로 지표면을 바라보는 아래쪽 방향으로 22° 이상의 각도로 홍채 인식 장치를 바라보면, 반사광이 상기 기설정된 홍채 인식 영역을 피해갈 수 있고, 홍채를 정확하게 인식할 수 있다.That is, the iris recognition device is closer to the ground than the user's eye level, the distance between the user and the iris recognition device is 25 to 30 cm, and the iris is recognized at an angle of 22° or more in the downward direction where the user faces the ground based on a line perpendicular to the ground. Looking at the device, the reflected light may avoid the preset iris recognition area, and the iris may be accurately recognized.
도 9는 본 발명의 일실시예에 따른 홍채 이미지 생성 장치를 거치형으로 사용한 예를 나타낸 도면이다.9 is a diagram illustrating an example in which the iris image generating apparatus according to an embodiment of the present invention is used as a stationary type.
도 9를 참조하면, built-in된 거치형의 홍채 이미지 생성 장치(100)를 이용하여 사용자의 홍채를 인식하는 것을 알 수 있다.Referring to FIG. 9 , it can be seen that the user's iris is recognized using the built-in stationary iris
즉, 사용자 눈높이보다 홍채 인식 장치가 지표면에서 가깝고, 사용자와 built-in된 거치형의 홍채 인식 장치(100)의 거리가 25~30cm 이고, 사용자가 지표면과 수직한 선을 기준으로 지표면을 바라보는 아래쪽 방향으로 22° 이상의 각도로 built-in된 거치형의 홍채 인식 장치(100)를 바라보면, 반사광이 상기 기설정된 홍채 인식 영역을 피해갈 수 있고, 홍채를 정확하게 인식할 수 있다.That is, the iris recognition device is closer to the ground than at the user's eye level, the distance between the user and the built-in stationary
도 10은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성을 위한 사용자 유도를 나타낸 도면이다.10 is a diagram illustrating a user guidance for generating an iris image of an iris image generating apparatus according to an embodiment of the present invention.
도 10을 참조하면, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치(100)의 미러부(130)에서 반사되는 눈 이미지를 사용자가 확인하고, 사용자가 눈을 반사체에 표시된 중심원에 위치시키면 홍채 인식을 수행할 수 있다.Referring to FIG. 10 , when the user checks the eye image reflected by the
도 11은 도 4에 도시된 인식부의 일 예를 세부적으로 나타낸 블록도이다. 도 12는 본 발명의 일실시예에 따른 이미지 처리 과정을 나타낸 도면이다. 도 13은 본 발명의 일실시예에 따른 이미지 리사이징을 나타낸 도면이다. 도 14 내지 도 17은 본 발명의 일실시예에 따른 홍채 축출 과정에서 생성되는 이미지들을 나타낸 도면이다. 도 18은 본 발명의 일실시예에 따른 눈꺼풀 인식 과정을 나타낸 도면이다. 도 19는 본 발명의 일실시예에 따른 이미지 마스킹을 나타낸 도면이다. 도 20은 본 발명의 일실시예에 따른 이미지 압축을 나타낸 도면이다.11 is a detailed block diagram illustrating an example of the recognition unit illustrated in FIG. 4 . 12 is a diagram illustrating an image processing process according to an embodiment of the present invention. 13 is a diagram illustrating image resizing according to an embodiment of the present invention. 14 to 17 are diagrams illustrating images generated during an iris extraction process according to an embodiment of the present invention. 18 is a diagram illustrating an eyelid recognition process according to an embodiment of the present invention. 19 is a diagram illustrating image masking according to an embodiment of the present invention. 20 is a diagram illustrating image compression according to an embodiment of the present invention.
도 11을 참조하면, 인식부(140)는 이미지 입력부(141), 이미지 크롭핑부(142) 및 이미지 스케일링부(143) 및 이미지 생성부(144)를 포함한다.Referring to FIG. 11 , the
이 때, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 이미지 입력부(141), 이미지 크롭핑부(142) 및 이미지 스케일링부(143) 및 이미지 생성부(144)를 포함하는 컴퓨터 장치에 상응할 수도 있다.In this case, the iris image generating apparatus according to an embodiment of the present invention may correspond to a computer device including an
도 12를 참조하면, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 홍채 이미지를 인식한 RAW 이미지를 크롭핑한 CROP 이미지를 생성하고, CROP 이미지에 마스킹과 블러 처리를 수행하여 MASK & BLUR 이미지를 생성하고, MASK & BLUR 이미지를 압축하여 JPEG2000 포맷의 홍채 이미지를 생성하는 것을 알 수 있다.12 , the iris image generating apparatus according to an embodiment of the present invention generates a CROP image by cropping a RAW image that has recognized an iris image, and performs masking and blurring on the CROP image to perform masking and blurring. It can be seen that the iris image in JPEG2000 format is created by creating .
이미지 입력부(141)는 카메라 모듈로부터 적외선이 조사된 사용자의 눈을 촬영한 눈 이미지를 입력 받을 수 있다.The
이 때, 눈 이미지는 그레이스케일의 5MP(Mega Pixel) 이미지에 상응할 수 있다.In this case, the eye image may correspond to a grayscale 5MP (Mega Pixel) image.
이 때, 이미지 입력부(141)는 반사체에 표시된 동심원에 눈이 위치할 수 있도록 지시부(110)의 LED 모듈의 발광색을 제어할 수 있다.In this case, the
이미지 입력부(141)는 기본 Thread로 메모리 할당하고, 스레드 초기화, 기타 IO 초기화를 수행할 수 있다.The
이미지 크롭핑부(142)는 상기 눈 이미지를 기설정된 크기로 잘라내고, 상기 기설정된 크기로 잘라낸눈 이미지에서 동공을 탐색할 수 있다.The
예를 들어, 이미지 크롭핑부(142)는 옵션#1의 1280x720 및 옵션#2의 800x600 중 기설정된 해상도 설정에 따라 눈 이미지를 잘라내고, 눈 이미지를 메모리에 저장할 수 있다.For example, the
이미지 크롭핑부(142)는 상기 해상도 설정에 따라 잘라낸 눈 이미지를 기설정된 크기로 리사이즈할 수 있다.The
도 13을 참조하면, 기설정된 해상도 설정에 따른 크기(10)로 눈 이미지를 잘라내고, 분 이미지를 기설정된 리사이즈 크기(20)로 리사이즈하는 것을 알 수 있다.Referring to FIG. 13 , it can be seen that the eye image is cut out to a
이 때, 이미지 크롭핑부(142)는 상기 기설정된 크기로 잘라낸 눈 이미지를 이진화하고, 기저장된 동공의 특징 정보에 기초하여 상기 이진화된 눈 이미지에서 상기 동공의 반사광을 탐색할 수 있다.In this case, the
예를 들어, 이미지 크롭핑부(142)는 리사이즈된 눈 이미지에서 그레이 스케일 값이 255인 경우 0xff(또는 0x1)값으로 변경할 수 있고, 다른 모든 그레이 스케일 값은 0x0으로 변경할 수 있다.For example, when the gray scale value is 255 in the resized eye image, the
이 때, 이미지 크롭핑부(142)는 0xff(또는 0x1)의 point들을 Rect(Rectangle)로 라벨링한 벡터(vector)를 저장할 수 있다.In this case, the
이 때, 이미지 크롭핑부(142)는 라벨링한 벡터에서 기저장된 동공의 특징 정보와 기저장된 알고리즘을 이용하여 동공의 반사광(Specular)을 탐색할 수 있다.In this case, the
이 때, 기저장된 동공의 특징 정보는 반사광의 모양, 반사광의 크기, 반사광의 중심위치, 반사광 주변의 Rect과의 중첩 여부 등에 관한 정보를 포함할 수 있다.In this case, the pre-stored pupil characteristic information may include information on the shape of the reflected light, the size of the reflected light, the central position of the reflected light, and whether or not it overlaps with the Rect around the reflected light.
이미지 스케일링부(143)는 상기 동공에 기초하여 상기 눈 이미지에서 눈꺼풀 클러스터 영역을 생성하고, 홍채 영역을 축출할 수 있다.The
이 때, 이미지 스케일링부(143)는 홍채 프레임을 탐색하고, 홍채 프레임에서 홍채의 엣지를 탐색할 수 있다. In this case, the
이 때, 이미지 스케일링부(143)는 크롭핑된 눈 이미지의 평균과 리사이즈된눈 이미지의 평균으로부터 3x3 블록을 기준으로 gradient enhancement 기법을 이용하여 음영 처리를 수행할 수 있다.In this case, the
이 때, 이미지 스케일링부(143)는 리사이즈된 눈 이미지의 전체영역과 3x3 블록에 대한 표준편차를 각각 구해서 더한 값으로 홍채의 엣지 성분을 탐색할 수 있다.In this case, the
이 때, 이미지 스케일링부(143)는 최적의 홍채 프레임을 식별하기 위해서 홍채인식 매칭 알고리즘이 처리하는 시간 동안의 홍채 프레임들을 저장하고, 홍채 프레임들을 정렬(sort)하여 가장 큰 표준 편차 값의 홍채 프레임을 선택할 수도 있다.In this case, the
이 때, 이미지 스케일링부(143)는 크롭핑된 눈 이미지를 1/4 사이즈로 리사이즈하고, 1/4 사이즈로 리사이즈된 눈 이미지에서 눈꺼풀 영역에 대한 클러스터를 생성할 수 있다.In this case, the
이 때, 이미지 스케일링부(143)는 openCV을 이용하여 BGR 또는 GRAY형태로 메모리에 저장된 눈 이미지를 관리할 수 있다.In this case, the
이 때, 이미지 스케일링부(143)는 k-means 클러스터링 기법을 이용하여 상기 클러스터를 생성할 수 있다.In this case, the
이 때, 이미지 스케일링부(143)는 상기 홍채의 엣지에 기초하여 윗 눈꺼풀 영역의 제1 클러스터와 아래 눈꺼풀 영역의 제2 클러스터를 생성할 수 있다.In this case, the
이 때, 이미지 스케일링부(143)는 상기 동공의 위치에 기초하여 홍채의 중심과 홍채의 반지름을 산출하고, 상기 홍채의 반지름을 이용하여 상기 홍채에 상응하는 흰색 원 이미지를 생성할 수 있다.In this case, the
이 때, 이미지 스케일링부(143)는 상기 홍채의 중심에 기초하여 상기 흰색 원 이미지와 상기 눈 이미지를 and 연산하여 상기 홍채 영역을 축출할 수 있다.In this case, the
도 14를 참조하면, 이미지 스케일링부(143)는 리사이즈된 눈 이미지(11)에서 홍채의 중심과 홍채의 반지름에 기초한 영역(21)을 설정한 것을 알 수 있다.Referring to FIG. 14 , it can be seen that the
도 15를 참조하면, 이미지 스케일링부(143)는 상기 홍채의 반지름을 이용하여 상기 홍채에 상응하는 흰색 원 이미지를 생성한 것을 알 수 있다.Referring to FIG. 15 , it can be seen that the
도 16을 참조하면, 이미지 스케일링부(143)는 상기 홍채의 중심에 기초하여 상기 흰색 원 이미지와 상기 눈 이미지를 and 연산하는 과정을 나타낸 것을 알 수 있다.Referring to FIG. 16 , it can be seen that the
도 17을 참조하면, 상기 흰색 원 이미지와 상기 눈 이미지를 and 연산한 결과로 상기 눈 이미지에서 상기 홍채 영역이 축출된 이미지를 나타낸 것을 알 수 있다.Referring to FIG. 17 , it can be seen that the iris region is extracted from the eye image as a result of and operation on the white circle image and the eye image.
이미지 생성부(144)는 상기 눈꺼풀 클러스터 영역과 상기 홍채 영역을 이용하여 눈꺼풀 영역을 설정하고, 상기 눈꺼풀 영역을 이용하여 압축된 홍채 이미지를 생성할 수 있다.The
이 때, 이미지 생성부(144)는 기저장된 gsl 라이브러리의 2차방정식 함수를 이용하여 상기 클러스터로부터 상기 눈꺼풀 영역을 탐색할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 사용자들의 눈 이미지를 촬영하여 획득한 이미지에서, 기저장된 소프트웨어 툴을 이용하여 윗 눈꺼풀과 아래 눈꺼풀에 해당하는 포인트들을 학습할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 기저장된 dlib 라이브러리 함수를 이용하여 학습결과로부터 윗 눈꺼풀 영역과 아래 눈꺼풀 영역의 최적의 포인트들을 탐색할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 상기 홍채의 중심에서 사선을 그었을 때, 윗 눈꺼풀 영역과 아래 눈꺼풀 영역을 통과하는 포인트들을 설정할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 상기 홍채의 중심을 기준으로 상기 눈꺼풀 영역 클러스터의 윗 눈꺼풀 클러스터 영역과 아래 눈꺼풀 클러스터 영역을 통과하는 적어도 하나의 사선을 그어, 상기 윗 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제1 포인트들을 설정하고, 상기 아래 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제2 포인트들을 설정할 수 있다.At this time, the
이 때, 이미지 생성부(144)는 상기 제1 포인트들을 연결하여 윗 눈꺼풀 영역선을 생성하고, 상기 제2 포인트들을 연결하여 아래 눈꺼풀 영역선을 생성하고, 상기 윗 눈꺼풀 영역선과 상기 아래 눈꺼풀 영역선이 교차하는 두 지점들을 제3 포인트들로 설정할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 설정된 포인트들에서 수평성분에 해당하는 기울기를 찾아 눈꺼풀의 나머지 포인트들을 탐색할 수도 있다.In this case, the
이 때, 이미지 생성부(144)는 gsl 라이브러리의 2차방정식 함수를 이용하여 포인트들로부터 윗 눈꺼풀 영역선과 아래 눈꺼풀 영역선을 생성할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 상기 제1 포인트들, 상기 제2 포인트들 및 상기 제3 포인트들로부터 상기 홍채 영역을 포함하는 상기 눈꺼풀 영역을 설정할 수 있다.In this case, the
도 18을 참조하면, 눈 이미지에서 홍채의 중심으로 사선(50)을 그어 포인트들(40)이 설정되고, 포인트들(40)을 연결하여 눈꺼풀 영역선(30)이 생성되고, 눈꺼풀 영역선들(30)으로부터 눈꺼풀 영역이 설정되는 것을 알 수 있다.Referring to FIG. 18 , points 40 are set by drawing an
이 때, 이미지 생성부(144)는 상기 눈꺼풀 영역의 외부 영역을 기설정된 그레이스케일 값으로 변환하여 상기 압축된 홍채 이미지를 생성할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 홍채를 축출한 이미지 메모리는 gray scale 200값의 바탕위에 홍채 이미지를 올려 놓았으므로 윗 눈꺼풀 영역선과 아래 눈꺼풀 영역선을 기준으로 홍채가 포함된 영역 이외의 영역은 수학식 1과 같이 gray scale 128로 채울 수 있다.At this time, since the
도 19를 참조하면, 눈꺼풀 영역의 외부 영역은 하나의 그레이스케일 값으로 변환된 것을 알 수 있다.Referring to FIG. 19 , it can be seen that the area outside the eyelid area is converted into one grayscale value.
이 때, 이미지 생성부(144)는 수학식 2와 같이 홍채 이미지를 블러처리할 수 있다.In this case, the
이 때, 이미지 생성부(144)는 openCV의 jpeg200 라이브러리를 이용하여 홍채 이미지를 3.5KB 의 홍채이미지로 압축할 수 있다.In this case, the
즉, 이미지 생성부(144)는 15fps, 800x600x8 raw 이미지 사이즈 동영상을 35kb 사이즈로 동영상 압축 처리할 수 있다.That is, the
이 때, 인식부(140)는 압축된 홍채 이미지를 이용하여 홍채 인식을 수행할 수 있다.In this case, the
도 20을 참조하면, 도 19에 도시된 홍채이미지가 3.5KB 의 jpeg2000 홍채이미지로 압축된 것을 알 수 있다.Referring to FIG. 20 , it can be seen that the iris image shown in FIG. 19 is compressed into a jpeg2000 iris image of 3.5 KB.
도 21은 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성 방법을 나타낸 동작흐름도이다. 도 22는 도 21에 도시된 이미지 크롭핑 단계의 일 예를 세부적으로 나타낸 동작흐름도이다. 도 23은 도 21에 도시된 이미지 생성 단계의 일 예를 세부적으로 나타낸 동작흐름도이다. 도 24는 도 21에 도시된 이미지 생성 단계의 일 예를 세부적으로 나타낸 동작흐름도이다.21 is an operation flowchart illustrating a method of generating an iris image by an apparatus for generating an iris image according to an embodiment of the present invention. 22 is a detailed operation flowchart illustrating an example of the image cropping step shown in FIG. 21 . 23 is a detailed operation flowchart illustrating an example of the image generating step shown in FIG. 21 . 24 is a detailed operation flowchart illustrating an example of the image generating step shown in FIG. 21 .
도 21에 도시된, 단계(S310) 내지 단계(S340)의 홍채 이미지 생성 과정은 상기에서 설명한 본 발명의 일실시예에 따른 홍채 이미지 생성 방법의 홍채 인식 단계(S230)에 포함될 수 있다.The iris image generating process of steps S310 to S340 shown in FIG. 21 may be included in the iris recognition step S230 of the iris image generating method according to the embodiment of the present invention described above.
도 21을 참조하면, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성 방법은 먼저 이미지를 입력 받을 수 있다(S310).Referring to FIG. 21 , in the iris image generating method of the iris image generating apparatus according to an embodiment of the present invention, an image may be first received ( S310 ).
즉, 단계(S310)는 카메라 모듈로부터 적외선이 조사된 사용자의 눈을 촬영한 눈 이미지를 입력 받을 수 있다.That is, in step S310, an eye image obtained by photographing the user's eyes irradiated with infrared rays from the camera module may be received.
이 때, 눈 이미지는 그레이스케일의 5MP(Mega Pixel) 이미지에 상응할 수 있다.In this case, the eye image may correspond to a grayscale 5MP (Mega Pixel) image.
이 때, 단계(S310)는 반사체에 표시된 동심원에 눈이 위치할 수 있도록 지시부(110)의 LED 모듈의 발광색을 제어할 수 있다.In this case, step S310 may control the emission color of the LED module of the
이 때, 단계(S310)는 기본 Thread로 메모리 할당하고, 스레드 초기화, 기타 IO 초기화를 수행할 수 있다.In this case, in step S310, memory may be allocated as a basic thread, and thread initialization and other IO initialization may be performed.
또한, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성 방법은 이미지 크롭핑을 수행할 수 있다(S320).In addition, the iris image generating method of the iris image generating apparatus according to an embodiment of the present invention may perform image cropping ( S320 ).
즉, 단계(S320)는 상기 눈 이미지를 기설정된 크기로 잘라내고, 상기 기설정된 크기로 잘라낸눈 이미지에서 동공을 탐색할 수 있다.That is, in step S320, the eye image may be cut out to a preset size, and a pupil may be searched for in the eye image cut out to the preset size.
예를 들어, 이미지 크롭핑부(142)는 옵션#1의 1280x720 및 옵션#2의 800x600 중 기설정된 해상도 설정에 따라 눈 이미지를 잘라내고, 눈 이미지를 메모리에 저장할 수 있다.For example, the
도 22를 참조하면, 단계(S320)는 리사이즈를 수행할 수 있다(S321).Referring to FIG. 22 , in step S320 , resizing may be performed ( S321 ).
즉, 단계(S321)는 상기 해상도 설정에 따라 잘라낸 눈 이미지를 기설정된 크기로 리사이즈할 수 있다.That is, in step S321, the cut-out eye image may be resized to a preset size according to the resolution setting.
도 13을 참조하면, 기설정된 해상도 설정에 따른 크기(10)로 눈 이미지를 잘라내고, 분 이미지를 기설정된 리사이즈 크기(20)로 리사이즈하는 것을 알 수 있다.Referring to FIG. 13 , it can be seen that the eye image is cut out to a
또한, 단계(S320)는 이진화를 수행할 수 있다(S322).Also, in step S320, binarization may be performed (S322).
즉, 단계(S322)는 상기 기설정된 크기로 잘라낸 눈 이미지를 이진화할 수 있다.That is, in step S322, the eye image cut out to the preset size may be binarized.
예를 들어, 단계(S322)는 리사이즈된 눈 이미지에서 그레이 스케일 값이 255인 경우 0xff(또는 0x1)값으로 변경할 수 있고, 다른 모든 그레이 스케일 값은 0x0으로 변경할 수 있다.For example, in step S322, when the gray scale value is 255 in the resized eye image, it may be changed to a value of 0xff (or 0x1), and all other gray scale values may be changed to 0x0.
또한, 단계(S320)는 라벨링을 수행할 수 있다(S323).Also, in step S320, labeling may be performed (S323).
즉, 단계(S323)는 0xff(또는 0x1)의 point들을 Rect(Rectangle)로 라벨링한 벡터(vector)를 저장할 수 있다.That is, in step S323, a vector in which points of 0xff (or 0x1) are labeled as Rect (Rectangle) may be stored.
또한, 단계(S320)는 반사광을 탐색할 수 있다(S324).Also, in step S320, the reflected light may be searched for (S324).
즉, 단계(S324)는 기저장된 동공의 특징 정보에 기초하여 상기 이진화된 눈 이미지에서 상기 동공의 반사광을 탐색할 수 있다.That is, in operation S324, the reflected light of the pupil may be searched for in the binarized eye image based on the pre-stored pupil characteristic information.
이 때, 단계(S324)는 라벨링한 벡터에서 기저장된 동공의 특징 정보와 기저장된 알고리즘을 이용하여 동공의 반사광(Specular)을 탐색할 수 있다.In this case, in step S324, the pupil specular may be searched for by using pre-stored pupil feature information and a pre-stored algorithm in the labeled vector.
이 때, 기저장된 동공의 특징 정보는 반사광의 모양, 반사광의 크기, 반사광의 중심위치, 반사광 주변의 Rect과의 중첩 여부 등에 관한 정보를 포함할 수 있다.In this case, the pre-stored pupil characteristic information may include information on the shape of the reflected light, the size of the reflected light, the central position of the reflected light, and whether or not it overlaps with the Rect around the reflected light.
또한, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성 방법은 이미지 스케일링을 수행할 수 있다(S330).In addition, the iris image generating method of the iris image generating apparatus according to an embodiment of the present invention may perform image scaling ( S330 ).
즉, 단계(S330)는 상기 동공에 기초하여 상기 눈 이미지에서 눈꺼풀 클러스터 영역을 생성하고, 홍채 영역을 축출할 수 있다.That is, in step S330 , an eyelid cluster region may be generated in the eye image based on the pupil, and the iris region may be extracted.
도 23을 참조하면, 단계(S330)는 먼저 홍채 프레임을 탐색할 수 있다(S331).Referring to FIG. 23 , in step S330 , an iris frame may be searched for ( S331 ).
즉, 단계(S331)는 홍채 프레임을 탐색하고, 홍채 프레임에서 홍채의 엣지를 탐색할 수 있다. That is, in operation S331, the iris frame may be searched and the iris edge may be searched for in the iris frame.
이 때, 단계(S331)는 크롭핑된 눈 이미지의 평균과 리사이즈된눈 이미지의 평균으로부터 3x3 블록을 기준으로 gradient enhancement 기법을 이용하여 음영 처리를 수행할 수 있다.In this case, in step S331, shading may be performed using a gradient enhancement technique based on a 3x3 block from the average of the cropped eye image and the average of the resized eye image.
이 때, 단계(S331)는 리사이즈된 눈 이미지의 전체영역과 3x3 블록에 대한 표준편차를 각각 구해서 더한 값으로 홍채의 엣지 성분을 탐색할 수 있다.In this case, in step S331, the standard deviation of the 3x3 block and the entire area of the resized eye image may be obtained, and the edge component of the iris may be searched for as a value added thereto.
또한, 단계(S330)는 최적 프레임을 식별할 수 있다(S332).Also, in step S330, an optimal frame may be identified (S332).
즉, 단계(S332)는 최적의 홍채 프레임을 식별하기 위해서 홍채인식 매칭 알고리즘이 처리하는 시간 동안의 홍채 프레임들을 저장하고, 홍채 프레임들을 정렬(sort)하여 가장 큰 표준 편차 값의 홍채 프레임을 선택할 수도 있다.That is, in step S332, the iris frames for the time processed by the iris recognition matching algorithm are stored to identify the optimal iris frame, and the iris frames are sorted to select the iris frame with the largest standard deviation value. have.
또한, 단계(S330)는 리사이징을 수행할 수 있다(S333).Also, in step S330, resizing may be performed (S333).
즉, 단계(S333)는 크롭핑된 눈 이미지를 1/4 사이즈로 리사이즈할 수 있다.That is, in step S333, the cropped eye image may be resized to 1/4 size.
또한, 단계(S330)는 클러스터를 생성할 수 있다(S334).Also, in step S330, a cluster may be created (S334).
즉, 단계(S334)는 1/4 사이즈로 리사이즈된 눈 이미지에서 눈꺼풀 영역에 대한 클러스터를 생성할 수 있다.That is, step S334 may generate a cluster for the eyelid region in the eye image resized to 1/4 size.
이 때, 단계(S334)는 openCV을 이용하여 BGR 또는 GRAY형태로 메모리에 저장된 눈 이미지를 관리할 수 있다.In this case, in step S334, the eye image stored in the memory in the form of BGR or GRAY may be managed using openCV.
이 때, 단계(S334)는 k-means 클러스터링 기법을 이용하여 상기 클러스터를 생성할 수 있다.In this case, in step S334, the cluster may be generated using a k-means clustering technique.
이 때, 단계(S334)는 상기 홍채의 엣지에 기초하여 윗 눈꺼풀 영역의 제1 클러스터와 아래 눈꺼풀 영역의 제2 클러스터를 생성할 수 있다.In this case, in operation S334, a first cluster of the upper eyelid region and a second cluster of the lower eyelid region may be generated based on the edge of the iris.
또한, 단계(S330)는 홍채 영역을 축출할 수 있다(S335).Also, in step S330 , the iris region may be evicted ( S335 ).
즉, 단계(S335)는 상기 동공의 위치에 기초하여 홍채의 중심과 홍채의 반지름을 산출하고, 상기 홍채의 반지름을 이용하여 상기 홍채에 상응하는 흰색 원 이미지를 생성할 수 있다.That is, in step S335, the center of the iris and the radius of the iris may be calculated based on the position of the pupil, and a white circle image corresponding to the iris may be generated using the radius of the iris.
이 때, 단계(S335)는 상기 홍채의 중심에 기초하여 상기 흰색 원 이미지와 상기 눈 이미지를 and 연산하여 상기 홍채 영역을 축출할 수 있다.In this case, in step S335, the iris region may be extracted by calculating and calculating the white circle image and the eye image based on the center of the iris.
도 14를 참조하면, 리사이즈된 눈 이미지(11)에서 홍채의 중심과 홍채의 반지름에 기초한 영역(21)을 설정한 것을 알 수 있다.Referring to FIG. 14 , it can be seen that the
도 15를 참조하면, 상기 홍채의 반지름을 이용하여 상기 홍채에 상응하는 흰색 원 이미지를 생성한 것을 알 수 있다.Referring to FIG. 15 , it can be seen that a white circle image corresponding to the iris is generated using the radius of the iris.
도 16을 참조하면, 상기 홍채의 중심에 기초하여 상기 흰색 원 이미지와 상기 눈 이미지를 and 연산하는 과정을 나타낸 것을 알 수 있다.Referring to FIG. 16 , it can be seen that the process of calculating and calculating the white circle image and the eye image based on the center of the iris is shown.
도 17을 참조하면, 상기 흰색 원 이미지와 상기 눈 이미지를 and 연산한 결과로 상기 눈 이미지에서 상기 홍채 영역이 축출된 이미지를 나타낸 것을 알 수 있다.Referring to FIG. 17 , it can be seen that the iris region is extracted from the eye image as a result of and operation on the white circle image and the eye image.
또한, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 홍채 이미지 생성 방법은 홍채 이미지를 생성할 수 있다(S340).Also, the iris image generating method of the iris image generating apparatus according to an embodiment of the present invention may generate an iris image ( S340 ).
즉, 단계(S340)는 상기 눈꺼풀 클러스터 영역과 상기 홍채 영역을 이용하여 눈꺼풀 영역을 설정하고, 상기 눈꺼풀 영역을 이용하여 압축된 홍채 이미지를 생성할 수 있다.That is, in operation S340, an eyelid region may be set using the eyelid cluster region and the iris region, and a compressed iris image may be generated using the eyelid region.
도 24를 참조하면, 단계(S340)는 눈꺼풀을 탐색할 수 있다(S341).Referring to FIG. 24 , in step S340 , an eyelid may be searched ( S341 ).
즉, 단계(S341)는 기저장된 gsl 라이브러리의 2차방정식 함수를 이용하여 상기 클러스터로부터 상기 눈꺼풀 영역을 탐색할 수 있다.That is, in step S341, the eyelid region may be searched from the cluster using a quadratic equation function of the pre-stored gsl library.
이 때, 단계(S341)는 사용자들의 눈 이미지를 촬영하여 획득한 이미지에서, 기저장된 소프트웨어 툴을 이용하여 윗 눈꺼풀과 아래 눈꺼풀에 해당하는 포인트들을 학습할 수 있다.In this case, in step S341, points corresponding to the upper and lower eyelids may be learned from the images obtained by photographing the user's eye images by using a pre-stored software tool.
이 때, 단계(S341)는 기저장된 dlib 라이브러리 함수를 이용하여 학습결과로부터 윗 눈꺼풀 영역과 아래 눈꺼풀 영역의 최적의 포인트들을 탐색할 수 있다.In this case, in step S341, the optimal points of the upper eyelid region and the lower eyelid region may be searched from the learning result using the pre-stored dlib library function.
이 때, 단계(S341)는 상기 홍채의 중심에서 사선을 그었을 때, 윗 눈꺼풀 영역과 아래 눈꺼풀 영역을 통과하는 포인트들을 설정할 수 있다.In this case, in step S341, when an oblique line is drawn from the center of the iris, points passing through the upper eyelid area and the lower eyelid area may be set.
이 때, 단계(S341)는 상기 홍채의 중심을 기준으로 상기 눈꺼풀 영역 클러스터의 윗 눈꺼풀 클러스터 영역과 아래 눈꺼풀 클러스터 영역을 통과하는 적어도 하나의 사선을 그어, 상기 윗 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제1 포인트들을 설정하고, 상기 아래 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제2 포인트들을 설정할 수 있다.At this time, in step S341, at least one diagonal line passing through the upper eyelid cluster region and the lower eyelid cluster region of the eyelid region cluster is drawn based on the center of the iris, so that the upper eyelid cluster region and the at least one oblique line are drawn. The first intersecting points may be set, and second points at which the lower eyelid cluster region and the at least one oblique line intersect may be set.
이 때, 단계(S341)는 상기 제1 포인트들을 연결하여 윗 눈꺼풀 영역선을 생성하고, 상기 제2 포인트들을 연결하여 아래 눈꺼풀 영역선을 생성하고, 상기 윗 눈꺼풀 영역선과 상기 아래 눈꺼풀 영역선이 교차하는 두 지점들을 제3 포인트들로 설정할 수 있다.In this case, in step S341, an upper eyelid region line is created by connecting the first points, and a lower eyelid region line is created by connecting the second points, and the upper eyelid region line and the lower eyelid region line intersect Two points to be used may be set as third points.
이 때, 단계(S341)는 설정된 포인트들에서 수평성분에 해당하는 기울기를 찾아 눈꺼풀의 나머지 포인트들을 탐색할 수도 있다.In this case, in step S341, the remaining points of the eyelids may be searched for by finding the slope corresponding to the horizontal component from the set points.
이 때, 단계(S341)는 gsl 라이브러리의 2차방정식 함수를 이용하여 포인트들로부터 윗 눈꺼풀 영역선과 아래 눈꺼풀 영역선을 생성할 수 있다.In this case, in step S341, an upper eyelid region line and a lower eyelid region line may be generated from the points using a quadratic equation function of the gsl library.
이 때, 단계(S341)는 상기 제1 포인트들, 상기 제2 포인트들 및 상기 제3 포인트들로부터 상기 홍채 영역을 포함하는 상기 눈꺼풀 영역을 설정할 수 있다.In this case, in step S341, the eyelid area including the iris area may be set from the first points, the second points, and the third points.
도 18을 참조하면, 눈 이미지에서 홍채의 중심으로 사선(50)을 그어 포인트들(40)이 설정되고, 포인트들(40)을 연결하여 눈꺼풀 영역선(30)이 생성되고, 눈꺼풀 영역선들(30)으로부터 눈꺼풀 영역이 설정되는 것을 알 수 있다.Referring to FIG. 18 , points 40 are set by drawing an
또한, 단계(S340)는 마스킹을 수행할 수 있다.Also, in step S340, masking may be performed.
즉, 단계(S342)는 상기 눈꺼풀 영역의 외부 영역을 기설정된 그레이스케일 값으로 변환하여 상기 압축된 홍채 이미지를 생성할 수 있다.That is, in operation S342, the compressed iris image may be generated by converting the outer region of the eyelid region into a preset grayscale value.
이 때, 단계(S342)는 홍채를 축출한 이미지 메모리는 gray scale 200값의 바탕위에 홍채 이미지를 올려 놓았으므로 윗 눈꺼풀 영역선과 아래 눈꺼풀 영역선을 기준으로 홍채가 포함된 영역 이외의 영역은 수학식 1과 같이 gray scale 128로 채울 수 있다.At this time, in step S342, the image memory from which the iris is extracted puts the iris image on the gray scale value of 200, so the area other than the area including the iris is calculated based on the upper and lower eyelid line lines You can fill it with gray scale 128, such as 1.
도 19를 참조하면, 눈꺼풀 영역의 외부 영역은 하나의 그레이스케일 값으로 변환된 것을 알 수 있다.Referring to FIG. 19 , it can be seen that the area outside the eyelid area is converted into one grayscale value.
또한, 단계(S340)는 블러 처리를 수행할 수 있다(S343).Also, in step S340, blur processing may be performed (S343).
즉, 단계(S343)는 수학식 2와 같이 홍채 이미지를 블러 처리할 수 있다.That is, in step S343, the iris image may be blurred as in Equation (2).
또한, 단계(S340)는 압축된 홍채 이미지를 생성할 수 있다(S344).Also, in step S340, a compressed iris image may be generated (S344).
즉, 단계(S344)는 openCV의 jpeg200 라이브러리를 이용하여 홍채 이미지를 3.5KB 의 홍채이미지로 압축할 수 있다.That is, in step S344, the iris image can be compressed into an iris image of 3.5 KB using the jpeg200 library of openCV.
이 때, 단계(S344)는 15fps, 800x600x8 raw 이미지 사이즈 동영상을 35kb 사이즈로 동영상 압축 처리할 수 있다.In this case, in step S344, a video with a 15 fps, 800x600x8 raw image size may be compressed to a size of 35 kb.
이 때, 상기에서 설명한 단계(S230)는 단계(S310) 내지 단계(S340)을 수행하여 생성된 홍채 이미지를 이용하여 홍채 인식을 수행할 수 있다.In this case, in step S230 described above, iris recognition may be performed using the iris image generated by performing steps S310 to S340.
도 20을 참조하면, 도 19에 도시된 홍채이미지가 3.5KB 의 jpeg2000 홍채이미지로 압축된 것을 알 수 있다.Referring to FIG. 20 , it can be seen that the iris image shown in FIG. 19 is compressed into a jpeg2000 iris image of 3.5 KB.
도 25는 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.25 is a diagram illustrating a computer system according to an embodiment of the present invention.
도 25를 참조하면, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 컴퓨터로 읽을 수 있는 기록매체와 같은 컴퓨터 시스템(1100)에서 구현될 수 있다. 도 25에 도시된 바와 같이, 컴퓨터 시스템(1100)은 버스(1120)를 통하여 서로 통신하는 하나 이상의 프로세서(1110), 메모리(1130), 사용자 인터페이스 입력 장치(1140), 사용자 인터페이스 출력 장치(1150) 및 스토리지(1160)를 포함할 수 있다. 또한, 컴퓨터 시스템(1100)은 네트워크(1180)에 연결되는 네트워크 인터페이스(1170)를 더 포함할 수 있다. 프로세서(1110)는 중앙 처리 장치 또는 메모리(1130)나 스토리지(1160)에 저장된 프로세싱 인스트럭션들을 실행하는 반도체 장치일 수 있다. 메모리(1130) 및 스토리지(1160)는 다양한 형태의 휘발성 또는 비휘발성 저장 매체일 수 있다. 예를 들어, 메모리는 ROM(1131)이나 RAM(1132)을 포함할 수 있다.Referring to FIG. 25 , the apparatus for generating an iris image according to an embodiment of the present invention may be implemented in a
본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 하나 이상의 프로세서(1110); 및 상기 하나 이상의 프로세서(1110)에 의해 실행되는 적어도 하나 이상의 프로그램을 저장하는 실행메모리(1130)를 포함하고, 상기 적어도 하나 이상의 프로그램은 LED 모듈을 이용하여 현재 홍채 인식 상태 변화를 상기 LED 모듈의 발광색을 변화시켜 표시하고, 두 개의 적외선 LED 모듈들을 이용하여 사용자의 홍채에 적외선을 조사하고, 카메라 모듈을 이용하여 상기 적외선이 조사된 홍채를 인식하고, 반사체를 이용하여 상기 사용자의 홍채의 모습을 반사할 수 있다.An iris image generating apparatus according to an embodiment of the present invention includes one or
이 때, 상기 반사체는 상기 두 개의 적외선 LED 모듈들이 배치되고, 상기 두개의 적외선 LED 모듈듈 사이의 일직선 상에 상기 카메라 모듈이 배치될 수 있다.In this case, in the reflector, the two infrared LED modules may be disposed, and the camera module may be disposed on a straight line between the two infrared LED module modules.
이 때, 상기 두 개의 적외선 LED 모듈들 사이의 상기 일직선 상의 거리는 20 mm 이하 인 것일 수 있다.In this case, the distance on the straight line between the two infrared LED modules may be 20 mm or less.
이 때, 상기 반사체는 중심원과, 상기 중심원을 포함하는 동심원이 표시되어 있고, 상기 중심원의 내부에는 상기 카메라 모듈이 배치되고, 상기 중심원의 외부 영역이며, 상기 동심원의 내부 영역에는 상기 카메라 모듈을 중심으로 양 옆의 상기 일직선 상에 상기 두 개의 적외선 LED 모듈이 배치될 수 있다.At this time, the reflector is marked with a central circle and a concentric circle including the central circle, the camera module is disposed inside the central circle, an outer region of the central circle, and an inner region of the concentric circle The two infrared LED modules may be disposed on the straight line on both sides of the camera module.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 적외선에 상응하는 반사광을 인식하고, 상기 반사광의 인식 여부에 기초하여, 상기 LED 모듈의 발광색을 변화시킬 수 있다.In this case, the at least one program may recognize the reflected light corresponding to the infrared light and change the emission color of the LED module based on whether the reflected light is recognized.
이 때, 상기 적어도 하나 이상의 프로그램은 기설정된 홍채 인식 영역 내에 상기 반사광이 포함되는 경우, 상기 홍채를 인식하지 못하는 상태임을 판단하고, 상기 홍채를 인식하지 못하는 상태에 상응하도록 상기 LED 모듈의 발광색을 제어할 수 있다.In this case, when the reflected light is included in a preset iris recognition area, the at least one program determines that the iris is not recognized and controls the emission color of the LED module to correspond to the state in which the iris is not recognized. can do.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 기설정된 홍채 인식 영역 내에 포함된 반사광이 상기 기설정된 홍채 인식 영역 밖으로 이동된 것을 인식하고, 상기 기설정된 홍채 인식 영역 내에 상기 홍채가 인식된 경우, 상기 홍채로부터 이미지를 생성할 수 있다.In this case, the at least one program recognizes that the reflected light included in the preset iris recognition area has moved out of the preset iris recognition area, and when the iris is recognized in the preset iris recognition area, You can create an image.
이 때, 상기 적어도 하나 이상의 프로그램은 카메라 모듈로부터 적외선이 조사된 사용자의 눈을 촬영한 눈 이미지를 입력 받고, 상기 눈 이미지를 기설정된 크기로 잘라내고, 상기 기설정된 크기로 잘라낸눈 이미지에서 동공을 탐색하고, 상기 동공에 기초하여 상기 눈 이미지에서 눈꺼풀 클러스터 영역을 생성하고, 상기 동공에 기초하여 홍채 영역을 축출하고, 상기 눈꺼풀 클러스터 영역과 상기 홍채 영역을 이용하여 눈꺼풀 영역을 설정하고, 상기 눈꺼풀 영역을 이용하여 압축된 홍채 이미지를 생성할 수 있다.In this case, the at least one program receives an eye image obtained by photographing the user's eye irradiated with infrared light from the camera module, cuts the eye image to a predetermined size, and removes the pupil from the eye image cut to the predetermined size. searching, generating an eyelid cluster region in the eye image based on the pupil, extracting an iris region based on the pupil, setting an eyelid region using the eyelid cluster region and the iris region, and the eyelid region can be used to generate a compressed iris image.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 기설정된 크기로 잘라낸 눈 이미지를 이진화하고, 기저장된 동공의 특징 정보에 기초하여 상기 이진화된 눈 이미지에서 상기 동공의 반사광을 탐색할 수 있다.In this case, the at least one program may binarize the eye image cut to the preset size, and search for the reflected light of the pupil in the binarized eye image based on pre-stored pupil characteristic information.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 동공의 위치에 기초하여 홍채의 중심과 홍채의 반지름을 산출하고, 상기 홍채의 반지름을 이용하여 상기 홍채 영역에 상응하는 원 이미지를 생성할 수 있다.In this case, the at least one program may calculate the center of the iris and the radius of the iris based on the position of the pupil, and generate an original image corresponding to the iris region using the radius of the iris.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 홍채의 중심에 기초하여 상기 홍채 영역에 상응하는 원 이미지와 상기 눈 이미지를 and 연산하여 상기 눈 이미지에서 상기 홍채 영역을 축출할 수 있다.In this case, the at least one program may extract the iris region from the eye image by performing an and operation on the original image corresponding to the iris region and the eye image based on the center of the iris.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 홍채의 중심을 기준으로 상기 눈꺼풀 영역 클러스터의 윗 눈꺼풀 클러스터 영역과 아래 눈꺼풀 클러스터 영역을 통과하는 적어도 하나의 사선을 그어, 상기 윗 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제1 포인트들을 설정하고, 상기 아래 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제2 포인트들을 설정할 수 있다.In this case, the at least one program draws at least one diagonal line passing through the upper eyelid cluster area and the lower eyelid cluster area of the eyelid area cluster based on the center of the iris, so that the upper eyelid cluster area and the at least one First points at which an oblique line intersect may be set, and second points at which the lower eyelid cluster region and the at least one oblique line intersect may be set.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 제1 포인트들을 연결하여 윗 눈꺼풀 영역선을 생성하고, 상기 제2 포인트들을 연결하여 아래 눈꺼풀 영역선을 생성하고, 상기 윗 눈꺼풀 영역선과 상기 아래 눈꺼풀 영역선이 교차하는 두 지점들을 제3 포인트들로 설정할 수 있다.In this case, the at least one program connects the first points to generate an upper eyelid region line, connects the second points to generate a lower eyelid region line, and the upper eyelid region line and the lower lid region line are Two intersecting points may be set as third points.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 제1 포인트들, 상기 제2 포인트들 및 상기 제3 포인트들로부터 상기 홍채 영역을 포함하는 상기 눈꺼풀 영역을 설정할 수 있다.In this case, the at least one program may set the eyelid area including the iris area from the first points, the second points, and the third points.
이 때, 상기 적어도 하나 이상의 프로그램은 상기 눈꺼풀 영역의 외부 영역을 기설정된 그레이스케일 값으로 변환하여 상기 압축된 홍채 이미지를 생성할 수 있다.In this case, the at least one program may generate the compressed iris image by converting the outer region of the eyelid region into a preset grayscale value.
또한, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 ARM 기반 1.5GHz, Quad-Core(Dual-Core 이상) 프로세서, 최소 1GB 이상의 시스템 메모리, USB3.0 port의 카메라 인터페이스를 포함하는 컴퓨터 장치에 상응할 수 있다.In addition, the iris image generating apparatus according to an embodiment of the present invention is an ARM-based 1.5 GHz, Quad-Core (Dual-Core or higher) processor, at least 1 GB of system memory, and a computer device including a USB3.0 port camera interface. can correspond.
본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 시스템 아키텍처는 입력 Gray Scale(Raw Image)의 크기는 5MP 이므로, 시스템 부하와 frame 단위로 처리하기 위해 스레드 방식을 이용하여 pipe line로 구현할 수 있다.Since the size of the input Gray Scale (Raw Image) is 5MP in the system architecture of the iris image generating apparatus according to an embodiment of the present invention, it can be implemented with a pipe line using a thread method to process the system load and frame units.
본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 시스템 아키텍처는 전체 시스템 메모리는 C++ 11 버전 이상에서 지원하는 shared_ptr 으로 메모리 누수를 제거하여 메모리를 관리할 수 있다.In the system architecture of the iris image generating apparatus according to an embodiment of the present invention, the entire system memory is shared_ptr that is supported by C++11 version or higher, and the memory can be managed by removing the memory leak.
본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 메모리 관리 방식으로 C/C++은 동적으로 할당한 메모리를 사용한 후 해제하지 않으면 '메모리 누수(Memory Leak)가 발생하여 시간이 지난 후 프로그램 실행에 큰 문제를 일으킬 수 있다. 작은 프로그램에서는 프로그래머가 실수 없이 할당과 해제를 잘하므로 메모리 누수가 거의 발생하지 않지만 동적 메모리 할당을 자주 사용하고 코드가 복잡한 대형 프로젝트에서는 필연적으로 발생한다.In the memory management method of the iris image generating device according to an embodiment of the present invention, if C/C++ does not release the dynamically allocated memory after using it, a 'memory leak occurs and the program execution becomes large after a period of time has elapsed. It can cause problems. In small programs, memory leaks are rare because programmers are good at allocating and freeing without mistakes, but it is inevitable in large projects that use dynamic memory allocation frequently and have complex code.
이런 문제를 해결하기 위해, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 C++11에서는 사용하지 않는 메모리를 자동으로 해제 시켜주는 'shared_ptr'라이브러리를 제공할 수 있다. 'shared_ptr'라이브러리는 동적으로 할당한 메모리 해제를 자동으로 관리해주는 '스마트 포인터(Smart Pointer)에 상응할 수 있다.To solve this problem, the apparatus for generating an iris image according to an embodiment of the present invention may provide a 'shared_ptr' library that automatically releases unused memory in C++11. The 'shared_ptr' library can correspond to a 'Smart Pointer' that automatically manages the freeing of dynamically allocated memory.
본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 여러 개의 스레드가 메모리를 소유하므로, 객체의 수명을 효과적으로 관리하고, 스마트 포인터를 사용하기 때문에 성능 측면에서는 손해가 거의 없으면서도 메모리 관리의 편리함을 얻을 수 있다.The device for generating an iris image according to an embodiment of the present invention effectively manages the lifetime of an object because multiple threads own memory, and uses a smart pointer, so there is little loss in performance and convenience of memory management is obtained. can
이 때, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 이미지처리는 cv::Mat을 이용하고 C++ 11 버전 이상의 개발 언어가 사용될 수 있다.In this case, the image processing of the iris image generating apparatus according to an embodiment of the present invention uses cv::Mat, and a development language of C++11 version or higher may be used.
이 때, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치의 라이브러리 및 개발툴은 OpenCV 함수, GSL, dLib, 소프트웨어 툴, C++ 11 표준라이브러리가 사용될 수 있다.In this case, an OpenCV function, GSL, dLib, a software tool, and a C++11 standard library may be used as the library and development tool of the iris image generating apparatus according to an embodiment of the present invention.
이 때, 본 발명의 일실시예에 따른 홍채 이미지 생성 장치는 입력 Gray Scale(Raw Image)에서 부터 Jpeg2000 단계까지의 kind7을 포함한 전 과정을 Raspberry Pi-4 보드 급과 같은 성능 시스템에서도 동작할 수 있도록 경량화 된 이미지 프로세싱의 알고리즘을 제공할 수 있다.At this time, the iris image generating device according to an embodiment of the present invention can operate the entire process including kind7 from the input Gray Scale (Raw Image) to the Jpeg2000 stage in a performance system such as Raspberry Pi-4 board level. A lightweight image processing algorithm can be provided.
이상에서와 같이 본 발명의 일실시예에 따른 홍채 이미지 생성 장치 및 방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.As described above, in the apparatus and method for generating an iris image according to an embodiment of the present invention, the configuration and method of the above-described embodiments are not limitedly applicable, but the embodiments are provided so that various modifications can be made. All or part of each embodiment may be selectively combined and configured.
100: 홍채 이미지 생성 장치
110: 지시부
120: 조사부
130: 미러부
140: 인식부
141: 이미지 입력부
142: 이미지 크롭핑부
143: 이미지 스케일링부
144: 이미지 생성부
1100: 컴퓨터 시스템
1110: 프로세서
1120: 버스
1130: 메모리
1131: 롬
1132: 램
1140: 사용자 인터페이스 입력 장치
1150: 사용자 인터페이스 출력 장치
1160: 스토리지
1170: 네트워크 인터페이스
1180: 네트워크100: iris image generating device
110: instruction unit 120: irradiation unit
130: mirror unit 140: recognition unit
141: image input unit 142: image cropping unit
143: image scaling unit 144: image generating unit
1100: computer system 1110: processor
1120: bus 1130: memory
1131: rom 1132: ram
1140: user interface input device
1150: user interface output device
1160: storage 1170: network interface
1180: network
Claims (16)
상기 눈 이미지를 기설정된 크기로 잘라내고, 상기 기설정된 크기로 잘라낸눈 이미지에서 동공을 탐색하는 이미지 크롭핑부;
상기 동공에 기초하여 상기 눈 이미지에서 눈꺼풀 클러스터 영역을 생성하고, 상기 동공에 기초하여 홍채 영역을 축출하는 이미지 스케일링부; 및
상기 눈꺼풀 클러스터 영역과 상기 홍채 영역을 이용하여 눈꺼풀 영역을 설정하고, 상기 눈꺼풀 영역을 이용하여 압축된 홍채 이미지를 생성하는 이미지 생성부;
를 포함하는 것을 특징으로 하는 홍채 이미지 생성 장치.an image input unit for receiving an eye image obtained by photographing the user's eyes irradiated with infrared light from the camera module;
an image cropping unit that crops the eye image to a predetermined size and searches for a pupil in the eye image cropped to the predetermined size;
an image scaling unit generating an eyelid cluster region in the eye image based on the pupil, and extracting an iris region based on the pupil; and
an image generator configured to set an eyelid region using the eyelid cluster region and the iris region, and generate a compressed iris image using the eyelid region;
An iris image generating device comprising a.
상기 이미지 크롭핑부는
상기 기설정된 크기로 잘라낸 눈 이미지를 이진화하고, 기저장된 동공의 특징 정보에 기초하여 상기 이진화된 눈 이미지에서 상기 동공의 반사광을 탐색하는 것을 특징으로 하는 홍채 이미지 생성 장치.The method according to claim 1,
The image cropping unit
The apparatus for generating an iris image, wherein the eye image cut to the predetermined size is binarized and the reflected light of the pupil is searched for in the binarized eye image based on previously stored characteristic information of the pupil.
상기 이미지 스케일링부는
상기 동공의 위치에 기초하여 홍채의 중심과 홍채의 반지름을 산출하고, 상기 홍채의 반지름을 이용하여 상기 홍채 영역에 상응하는 원 이미지를 생성하는 것을 특징으로 하는 홍채 이미지 생성 장치.3. The method according to claim 2,
The image scaling unit
The iris image generating apparatus of claim 1, wherein the center of the iris and the radius of the iris are calculated based on the position of the pupil, and an original image corresponding to the iris region is generated using the radius of the iris.
상기 이미지 스케일링부는
상기 홍채의 중심에 기초하여 상기 홍채 영역에 상응하는 원 이미지와 상기 눈 이미지를 and 연산하여 상기 눈 이미지에서 상기 홍채 영역을 축출하는 것을 특징으로 하는 홍채 이미지 생성 장치.4. The method according to claim 3,
The image scaling unit
The iris image generating apparatus according to claim 1, wherein the iris region is extracted from the eye image by performing an and operation on the original image corresponding to the iris region and the eye image based on the center of the iris.
상기 이미지 생성부는
상기 홍채의 중심을 기준으로 상기 눈꺼풀 영역 클러스터의 윗 눈꺼풀 클러스터 영역과 아래 눈꺼풀 클러스터 영역을 통과하는 적어도 하나의 사선을 그어, 상기 윗 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제1 포인트들을 설정하고, 상기 아래 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제2 포인트들을 설정하는 것을 특징으로 하는 홍채 이미지 생성 장치.4. The method according to claim 3,
The image generator
At least one oblique line passing through the upper eyelid cluster area and the lower eyelid cluster area of the eyelid cluster area is drawn based on the center of the iris to set first points where the upper eyelid cluster area and the at least one diagonal line intersect and setting second points at which the lower eyelid cluster region and the at least one oblique line intersect.
상기 이미지 생성부는
상기 제1 포인트들을 연결하여 윗 눈꺼풀 영역선을 생성하고,
상기 제2 포인트들을 연결하여 아래 눈꺼풀 영역선을 생성하고,
상기 윗 눈꺼풀 영역선과 상기 아래 눈꺼풀 영역선이 교차하는 두 지점들을 제3 포인트들로 설정하는 것을 특징으로 하는 홍채 이미지 생성 장치.6. The method of claim 5,
The image generator
Connecting the first points to create an upper eyelid region line,
Connecting the second points to create a lower eyelid area line,
and setting two points where the upper eyelid region line and the lower eyelid region line intersect as third points.
상기 이미지 생성부는
상기 제1 포인트들, 상기 제2 포인트들 및 상기 제3 포인트들로부터 상기 홍채 영역을 포함하는 상기 눈꺼풀 영역을 설정하는 것을 특징으로 하는 홍채 이미지 생성 장치.7. The method of claim 6,
The image generator
and setting the eyelid region including the iris region from the first points, the second points, and the third points.
상기 이미지 생성부는
상기 눈꺼풀 영역의 외부 영역을 기설정된 그레이스케일 값으로 변환하여 상기 압축된 홍채 이미지를 생성하는 것을 특징으로 하는 홍채 이미지 생성 장치.8. The method of claim 7,
The image generator
and generating the compressed iris image by converting an outer region of the eyelid region into a preset grayscale value.
카메라 모듈로부터 적외선이 조사된 사용자의 눈을 촬영한 눈 이미지를 입력 받는 단계;
상기 눈 이미지를 기설정된 크기로 잘라내고, 상기 기설정된 크기로 잘라낸눈 이미지에서 동공을 탐색하는 단계;
상기 동공에 기초하여 상기 눈 이미지에서 눈꺼풀 클러스터 영역을 생성하고, 상기 동공에 기초하여 홍채 영역을 축출하는 단계; 및
상기 눈꺼풀 클러스터 영역과 상기 홍채 영역을 이용하여 눈꺼풀 영역을 설정하고, 상기 눈꺼풀 영역을 이용하여 압축된 홍채 이미지를 생성하는 단계;
를 포함하는 것을 특징으로 하는 홍채 이미지 생성 방법.A method for generating an iris image by an iris image generating apparatus, the method comprising:
receiving an eye image obtained by photographing the user's eyes irradiated with infrared light from a camera module;
cutting the eye image to a predetermined size, and searching for a pupil in the eye image cropped to the predetermined size;
generating an eyelid cluster region in the eye image based on the pupil, and extracting an iris region based on the pupil; and
setting an eyelid region using the eyelid cluster region and the iris region, and generating a compressed iris image using the eyelid region;
An iris image generating method comprising a.
상기 동공을 탐색하는 단계는
상기 기설정된 크기로 잘라낸 눈 이미지를 이진화하고, 기저장된 동공의 특징 정보에 기초하여 상기 이진화된 눈 이미지에서 상기 동공의 반사광을 탐색하는 것을 특징으로 하는 홍채 이미지 생성 방법.10. The method of claim 9,
The step of exploring the pupil is
The method for generating an iris image, characterized in that binarizing the eye image cut to the predetermined size, and searching for reflected light of the pupil in the binarized eye image based on previously stored characteristic information of the pupil.
상기 홍채 영역을 축출하는 단계는
상기 동공의 위치에 기초하여 홍채의 중심과 홍채의 반지름을 산출하고, 상기 홍채의 반지름을 이용하여 상기 홍채 영역에 상응하는 원 이미지를 생성하는 것을 특징으로 하는 홍채 이미지 생성 방법.11. The method of claim 10,
The step of extracting the iris region comprises:
The method of claim 1, wherein the center of the iris and the radius of the iris are calculated based on the position of the pupil, and an original image corresponding to the iris region is generated using the radius of the iris.
상기 홍채 영역을 축출하는 단계는
상기 홍채의 중심에 기초하여 상기 홍채 영역에 상응하는 원 이미지와 상기 눈 이미지를 and 연산하여 상기 눈 이미지에서 상기 홍채 영역을 축출하는 것을 특징으로 하는 홍채 이미지 생성 방법.12. The method of claim 11,
The step of extracting the iris region comprises:
and extracting the iris region from the eye image by calculating and calculating an original image corresponding to the iris region and the eye image based on the center of the iris.
상기 압축된 홍채 이미지를 생성하는 단계는
상기 홍채의 중심을 기준으로 상기 눈꺼풀 영역 클러스터의 윗 눈꺼풀 클러스터 영역과 아래 눈꺼풀 클러스터 영역을 통과하는 적어도 하나의 사선을 그어, 상기 윗 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제1 포인트들을 설정하고, 상기 아래 눈꺼풀 클러스터 영역과 상기 적어도 하나의 사선이 교차하는 제2 포인트들을 설정하는 것을 특징으로 하는 홍채 이미지 생성 방법.12. The method of claim 11,
The step of generating the compressed iris image
At least one oblique line passing through the upper eyelid cluster area and the lower eyelid cluster area of the eyelid cluster area is drawn based on the center of the iris to set first points where the upper eyelid cluster area and the at least one diagonal line intersect and setting second points at which the lower eyelid cluster region and the at least one oblique line intersect.
상기 압축된 홍채 이미지를 생성하는 단계는
상기 제1 포인트들을 연결하여 윗 눈꺼풀 영역선을 생성하고, 상기 제2 포인트들을 연결하여 아래 눈꺼풀 영역선을 생성하고, 상기 윗 눈꺼풀 영역선과 상기 아래 눈꺼풀 영역선이 교차하는 두 지점들을 제3 포인트들로 설정하는 것을 특징으로 하는 홍채 이미지 생성 방법.14. The method of claim 13,
The step of generating the compressed iris image includes:
connecting the first points to create an upper eyelid region line, connecting the second points to create a lower eyelid region line, and defining two points where the upper lid region line and the lower lid region line intersect as third points An iris image creation method, characterized in that set to.
상기 압축된 홍채 이미지를 생성하는 단계는
상기 제1 포인트들, 상기 제2 포인트들 및 상기 제3 포인트들로부터 상기 홍채 영역을 포함하는 상기 눈꺼풀 영역을 설정하는 것을 특징으로 하는 홍채 이미지 생성 방법.15. The method of claim 14,
The step of generating the compressed iris image
and setting the eyelid region including the iris region from the first points, the second points, and the third points.
상기 압축된 홍채 이미지를 생성하는 단계는
상기 눈꺼풀 영역의 외부 영역을 기설정된 그레이스케일 값으로 변환하여 상기 압축된 홍채 이미지를 생성하는 것을 특징으로 하는 홍채 이미지 생성 방법.16. The method of claim 15,
The step of generating the compressed iris image
and converting an outer region of the eyelid region into a preset grayscale value to generate the compressed iris image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200062663A KR102498438B1 (en) | 2020-05-25 | 2020-05-25 | Apparatus and method for generating iris image |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200062663A KR102498438B1 (en) | 2020-05-25 | 2020-05-25 | Apparatus and method for generating iris image |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20210145593A true KR20210145593A (en) | 2021-12-02 |
KR102498438B1 KR102498438B1 (en) | 2023-02-13 |
Family
ID=78867191
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200062663A KR102498438B1 (en) | 2020-05-25 | 2020-05-25 | Apparatus and method for generating iris image |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102498438B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023075234A1 (en) | 2021-10-28 | 2023-05-04 | 주식회사 케이티앤지 | Aerosol generating device including a plurality of cartridges |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20160127206A (en) * | 2015-04-23 | 2016-11-03 | 가천대학교 산학협력단 | System and method for removing eyelashes in iris region |
KR20180053108A (en) * | 2016-11-11 | 2018-05-21 | 삼성전자주식회사 | Method and apparatus for extracting iris region |
-
2020
- 2020-05-25 KR KR1020200062663A patent/KR102498438B1/en active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20160127206A (en) * | 2015-04-23 | 2016-11-03 | 가천대학교 산학협력단 | System and method for removing eyelashes in iris region |
KR20180053108A (en) * | 2016-11-11 | 2018-05-21 | 삼성전자주식회사 | Method and apparatus for extracting iris region |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023075234A1 (en) | 2021-10-28 | 2023-05-04 | 주식회사 케이티앤지 | Aerosol generating device including a plurality of cartridges |
Also Published As
Publication number | Publication date |
---|---|
KR102498438B1 (en) | 2023-02-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110728255B (en) | Image processing method, image processing device, electronic equipment and storage medium | |
CN106850648B (en) | Identity verification method, client and service platform | |
US6215891B1 (en) | Eye image recognition method eye image selection method and system therefor | |
US20190095701A1 (en) | Living-body detection method, device and storage medium | |
US20170091550A1 (en) | Multispectral eye analysis for identity authentication | |
US20160019420A1 (en) | Multispectral eye analysis for identity authentication | |
EP3719699B1 (en) | Living body detection method, apparatus and device | |
JP2013504114A (en) | Eye state detection apparatus and method | |
JP5361524B2 (en) | Pattern recognition system and pattern recognition method | |
CN112232155B (en) | Non-contact fingerprint identification method and device, terminal and storage medium | |
WO2006087581A1 (en) | Method for facial features detection | |
EP4033458A2 (en) | Method and apparatus of face anti-spoofing, device, storage medium, and computer program product | |
US20230351809A1 (en) | Iris authentication device, iris authentication method, and recording medium | |
CN112232163B (en) | Fingerprint acquisition method and device, fingerprint comparison method and device, and equipment | |
CN112016525A (en) | Non-contact fingerprint acquisition method and device | |
CN108140114A (en) | Iris recognition | |
CN112818722A (en) | Modular dynamically configurable living body face recognition system | |
CN112232159B (en) | Fingerprint identification method, device, terminal and storage medium | |
KR102498438B1 (en) | Apparatus and method for generating iris image | |
CN113515975A (en) | Face and iris image acquisition method and device, readable storage medium and equipment | |
CN112232157B (en) | Fingerprint area detection method, device, equipment and storage medium | |
CN114255494A (en) | Image processing method, device, equipment and storage medium | |
CN112668539A (en) | Biological characteristic acquisition and identification system and method, terminal equipment and storage medium | |
CN108875472B (en) | Image acquisition device and face identity verification method based on image acquisition device | |
CN112232152B (en) | Non-contact fingerprint identification method and device, terminal and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |