KR20150019393A - 홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치 - Google Patents

홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치 Download PDF

Info

Publication number
KR20150019393A
KR20150019393A KR20130096190A KR20130096190A KR20150019393A KR 20150019393 A KR20150019393 A KR 20150019393A KR 20130096190 A KR20130096190 A KR 20130096190A KR 20130096190 A KR20130096190 A KR 20130096190A KR 20150019393 A KR20150019393 A KR 20150019393A
Authority
KR
South Korea
Prior art keywords
eye
region
iris
image
center
Prior art date
Application number
KR20130096190A
Other languages
English (en)
Other versions
KR102037417B1 (ko
Inventor
손병준
손주영
홍태화
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130096190A priority Critical patent/KR102037417B1/ko
Priority to PCT/KR2014/007208 priority patent/WO2015023076A1/en
Priority to US14/458,758 priority patent/US9684829B2/en
Publication of KR20150019393A publication Critical patent/KR20150019393A/ko
Priority to US15/624,268 priority patent/US9922250B2/en
Application granted granted Critical
Publication of KR102037417B1 publication Critical patent/KR102037417B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/30Noise filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/67Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Ophthalmology & Optometry (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Studio Devices (AREA)
  • Eye Examination Apparatus (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

일 실시 예에 따르면, 영상을 수신하는 단계; 상기 수신된 영상에서 눈 영역을 검출하는 단계; 상기 눈 영역에서 눈의 중심을 결정하는 단계; 상기 눈 영역에서 반사 영역을 검출하는 단계; 상기 검출된 반사 영역의 형상을 결정하는 단계; 상기 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력하는 단계를 포함하는 홍채 영상 촬영을 위한 안내 정보 제공 방법을 개시한다.

Description

홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치 {Method of capturing an iris image, Computer readable storage medium of recording the method and an iris image capture device}
본 발명은 홍채 영상 촬영을 위한 안내 정보 제공 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치에 관한 것이다.
최근 들어 스마트 폰 등과 같은 휴대 단말의 수요가 급증하고 있다. 이에 따라 상기 휴대 단말에 저장되는 개인 정보에 대한 보안의 중요성이 강조되고 있는 바, 휴대 단말에서도 사용자의 생체 인식의 방법으로 사용자의 인증을 하고자 하는 필요성이 높아지고 있다.
종래 홍채 인식 기기는 고품질의 홍채 영상을 촬영하기 위하여 오토포커스(Auto Focus), 줌 인/아웃(Zoom In/Out) 기능이 제공되는 카메라를 사용하고 모션 블러링을 최소화할 수 있는 고사양의 카메라를 사용하였다.
다만, 스마트 폰과 같이 두께가 얇은 기기의 전면 카메라에서는 오토포커스, 줌 인/아웃 기능을 제공하고 있지 않으므로, 홍채 인식을 위하여 종래의 기술에서 사용된 오토포커스, 줌 인/아웃 기능을 휴대 단말에 탑재하기 위해서는, 휴대 단말의 두께가 두꺼워 질 수밖에 없으며 비용도 상승하게 되는 문제가 있다.
일 실시 예에 따른 홍채 영상 촬영 방법은, 카메라에서 획득한 영상 중에서 반사광이 없고 눈의 움직임이 안정화된 영상을 획득하는 방법을 제공한다.
일 실시 예에 따른 홍채 영상 촬영 방법은, 영상을 수신하는 단계; 상기 수신된 영상에서 눈 영역을 검출하는 단계; 상기 눈 영역에서 눈의 중심을 결정하는 단계; 상기 눈 영역에서 반사 영역을 검출하는 단계; 상기 검출된 반사 영역의 형상을 결정하는 단계; 및 상기 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력하는 단계를 포함하는 홍채 영상 촬영 방법을 제공한다.
일 실시 예에 따른 안내 정보는 시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나일 수 있다.
일 실시 예에 따른 홍채 영상 촬영 방법은, 안내 정보를 출력하는 단계는,
비정형의 반사 영역이 결정되면, 사용자에게 카메라의 렌즈 또는 안경 렌즈 부위의 오염 물질을 제거하기 위한 상기 안내 정보를 출력하는 단계를 포함하는 것을 특징으로 하는 홍채 영상 촬영 방법을 제공한다.
일 실시 예에 따른 홍채 영상 촬영 방법은, 안내 정보를 출력하는 단계는, 정형의 반사 영역이 결정되면, 상기 눈의 중심을 기준으로 상기 반사 영역과 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 상기 안내 정보를 출력하는 단계를 더 포함하는 것을 특징으로 하는 홍채 영상 촬영 방법을 제공한다.
일 실시 예에 따른 홍채 영상 촬영 방법은, 상기 눈 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여 눈의 움직임 정보를 획득하는 단계; 및 상기 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하는 단계를 더 포함하는 것을 특징으로 하는, 홍채 영상 촬영 방법을 제공한다.
일 실시 예에 따른 눈의 움직임 정보는 상기 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 분산, 표준편차와 같이 중심 좌표의 변화 정도를 알 수 있는 값일 수 있다.
일 실시 예에 따른 홍채 영상 촬영 방법은, 수신된 영상에서 눈 영역을 검출하는 단계는 상기 눈 영역에서 홍채 영역을 검출하는 단계를 포함하는 영상 촬영 방법을 제공할 수 있으며, 일 실시 예에 따른 눈의 중심은 상기 홍채 영역의 홍채의 중심이며, 상기 눈의 움직임 정보는 상기 홍채 영역의 홍채의 움직임 정보일 수 있다.
일 실시 예에 따른 홍채 영상 촬영 장치는, 영상을 수신하는 영상 수신
상기 수신된 영상에서 눈 영역을 검출하는 눈 영역 검출부; 상기 눈 영역에서 눈의 중심을 결정하는 눈의 중심 결정부; 상기 눈 영역에서 반사 영역을 검출하는 반사 영역 검출부; 상기 검출된 반사 영역의 형상을 결정하는 형상 결정부; 및 상기 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력하는 안내 정보 출력부를 포함할 수 있다.
일 실시 예에 따른 안내 정보는 시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나일 수 있다.
일 실시 예에 따른 홍채 영상 촬영 장치에서 안내 정보 출력부는 상기 형상 결정부에서 비정형의 반사 영역이 결정되면, 사용자에게 카메라의 렌즈 부위의 오염 물질을 제거하기 위한 상기 안내 정보를 출력할 수 있다.
일 실시 예에 따른 홍채 영상 촬영 장치에서 안내 정보 출력부는 상기 형상 결정부에서 정형의 반사 영역이 결정되면, 상기 눈의 중심을 기준으로 상기 반사 영역과 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 상기 안내 정보를 출력할 수 있다.
일 실시 예에 따른 홍채 영상 촬영 장치는 눈의 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여, 눈의 움직임 정보를 획득하는 움직임 정보 획득부를 더 포함하고, 상기 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하는 카메라를 더 포함할 수 있다.
일 실시 예에 따른 눈의 움직임 정보는 상기 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 분산, 표준편차와 같이 중심 좌표의 변화 정도를 알 수 있는 값일 수 있다.
일 실시 예에 따른 홍채 영상 촬영 장치는 눈 영역에서 홍채 영역을 검출하는 홍채 영역 검출부를 더 포함할 수 있으며, 일 실시 예에 따른 눈의 중심은 상기 홍채 영역의 홍채의 중심이며, 상기 눈의 움직임 정보는 상기 홍채 영역의 홍채의 중심 움직임 정보일 수 있다.
일 실시 예에 따른 프로세서에 의해 도출되어 실행되었을 때, 홍채 영상 촬영을 위한 안내 정보 제공 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 저장매체에 있어서, 상기 홍채 영상 촬영 방법은, 영상을 수신하는 단계; 상기 수신된 영상에서 눈 영역을 검출하는 단계; 상기 눈 영역에서 눈의 중심을 결정하는 단계; 상기 눈 영역에서 반사 영역을 검출하는 단계; 상기 검출된 반사 영역의 형상을 결정하는 단계; 및 상기 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력하는 단계를 포함하는 홍채 영상 촬영방법을 제공한다.
일 실시 예에 따른 프로세서에 의해 도출되어 실행되었을 때, 홍채 영상 촬영을 위한 안내 정보 제공 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 저장매체에 있어서, 상기 홍채 영상 촬영 방법은 눈 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여 눈의 움직임 정보를 획득하는 단계; 및 상기 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하는 단계를 더 포함하는 홍채 영상 촬영 방법을 제공한다.
도1 은 일 실시 예에 따른 안내 정보를 제공하는 홍채 영상 촬영 장치의 블록도이다.
도2 는 일 실시 예에 따른 안내 정보를 제공하는 홍채 영상 촬영 방법의 흐름도이다.
도3은 일 실시 예에 따른 눈의 움직임이 안정화된 영상을 촬영하는 홍채 영상 촬영 장치의 블록도이다.
도4 은 일 실시 예에 따른 눈의 움직임이 안정화된 영상을 촬영하는 홍채 영상 촬영 방법의 흐름도이다.
도5a 내지 도5b 는 홍채 영상 촬영 장치가 결정한 비정형의 반사 영역의 다양한 예를 도시한 도면이다.
도6 은 홍채 영상 촬영 장치가 비정형의 반사 영역에 기초하여, 반사 영역을 피하기 위한 안내 정보를 출력하는 일 예를 도시한 도면이다.
도7a 내지 도7b 는 홍채 영상 촬영 장치가 결정한 정형의 반사 영역의 다양한 예를 도시한 도면이다.
도8a 내지 도8c 는 홍채 영상 촬영 장치가 정형의 반사 영역에 기초하여, 반사 영역을 피하기 위한 안내 정보를 출력하는 일 예를 도시한 도면이다.
도9 는 홍채 영상 촬영 장치가 눈 영역에서 눈의 움직임을 감지하여 눈의 움직임 정보를 획득하는 일 예를 도시한 도면이다.
본 발명은 다양한 변형을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 다양한 실시 예들은 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도1 은 일 실시 예에 따른 안내 정보를 제공하는 홍채 영상 촬영 장치(100a)의 블록도이다.
상기 홍채 영상 촬영 장치(100a) 는 영상 수신부(10), 눈 영역 검출부(20), 눈의 중심 결정부(30), 반사 영역 검출부(40), 형상 결정부(50) 및 안내 정보 출력부(60)를 포함할 수 있다.
이하 상기 구성요소들에 대해 차례로 살펴본다.
일 실시 예에 따른 영상 수신부(10)는 카메라로부터 획득된 영상을 수신할 수 있다. 예를 들면, 일 실시 예에 따른 영상은 카메라로부터 획득한 입력 영상일 수 있다.
일 실시 예에 따른 눈 영역 검출부(20)는 영상 수신부(10)에서 수신한 영상에서 눈 영역을 검출할 수 있다.
예를 들면, 입력 영상으로부터 눈을 검출하는 방법은 업계에서 통용되는 학습에 의한 방법 또는 마스크를 이용하는 방법 등 다양한 방법들이 있으므로, 입력 영상으로부터 눈을 검출하는 방법이 특정 방법으로 한정되지 않음을 유의하여야 한다.
일 실시 예에 따른 눈의 중심 결정부(30)는 눈 영역 검출부(20)에서 검출된 눈 영역에서 눈의 중심을 결정할 수 있다.
예를 들면, 일 실시 예에 따른 눈의 중심점은 눈 영역의 중심점 일 수 있다.
또한, 다른 실시 예에 따른 눈의 중심점은 눈 영역에서 픽셀의 계조 값이 기 설정된 임계 값 이하인 영역의 중심 좌표일 수 있다. 또한, 눈 영역에서 홍채 영역을 검출한 경우, 눈의 중심은 홍채의 중심이 될 수 있다. 또한 동공 영역의 중심점이 눈의 중심점일 수 있다.
일 실시 예에 따른 반사 영역 검출부(40)는 눈 영역 검출부(20)에서 검출된 눈 영역에서 반사 영역을 검출할 수 있다.
픽셀의 계조 값은, 픽셀의 세기를 0부터 255의 수치로 표현될 수 있다.
예를 들면, 일 실시 예에 따른 반사 영역은 눈 영역에서 픽셀의 계조 값이 기 설정된 임계 값 이상인 영역일 수 있다.
일 실시 예에 따른 형상 결정부(50)는 반사 영역 검출부(40)에서 검출된 반사 영역의 형상을 결정할 수 있다.
예를 들면, 일 실시 예에 따른 반사 영역은 상기 눈 영상에서 픽셀의 계조 값이 일정 임계 값 이상을 가진 영역일 수 있다. 따라서 일 실시 예에 따르면, 픽셀의 계조 값의 변화가 큰 인접의 픽셀들의 경계선이 반사 영역의 형상으로 검출될 수 있다.
일 실시 예에 따른 반사 영역의 형상은 반사 영역의 모양, 크기, 위치, 개수 등에 의하여 결정될 수 있다. 예를 들면, 사용자가 착용한 안경으로 인해 발생하는 반사 영역의 형상의 일 예로는 도7a 내지 7b와 같은 타원형 또는 원형의 반사 영역의 형상이 있을 수 있다. 또한, 카메라의 렌즈의 오염으로 인해 발생하는 반사 영역의 형상은 도 5a 내지 도 5b와 같은 비정형의 반사 영역의 형상이 있을 수 있다.
일 실시 예에 따른 안내 정보 출력부(60)는 형상 결정부(50)에서 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력할 수 있다.
예를 들면, 일 실시 예에 따른 홍채 영상 촬영 장치(100a)는 눈 영역에 반사 영역이 검출되면, 반사 영역을 피하기 위한 안내 정보를 출력할 수 있다. 반면, 홍채 영상 촬영 장치(100b)는 눈의 영역에서 반사 영역이 검출되지 않은 경우, 눈의 움직임이 안정화된 영상을 촬영할 수 있다.
예를 들면, 카메라의 렌즈의 오염으로 인해 발생하는 반사 영역의 형상과, 사용자가 착용한 안경으로 인해 발생하는 반사 영역의 형상은 구별될 수 있다.
예를 들면, 카메라의 렌즈의 오염으로 인해 발생하는 반사 영역의 형상의 경우 출력되는 안내 정보에 관하여는 도6를 참조하여 자세하게 설명하기로 한다.
또한, 사용자가 착용한 안경으로 인해 발생하는 반사 영역의 형상의 경우 출력되는 안내 정보에 관하여는 도 8a 내지 도 8c를 참조하여 자세하게 설명하기로 한다.
또한, 일 실시 예에 따른 안내 정보는 시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나를 포함할 수 있다. 예를 들면, 일 실시 예에 따른 안내 정보 출력부(60)는, 오디오 신호를 출력하는 음향 출력부(미도시), 비디오 신호를 출력하는 디스플레이부(미도시) 또는 진동 신호를 출력하는 진동 모터(미도시) 등이 포함될 수 있다.
홍채 영상 촬영 장치(100a)의 동작들을 순서대로 상술한다.
도 2 는 일 실시 예에 따른 안내 정보를 제공하는 홍채 영상 촬영 방법의 흐름도이다.
단계 100에서 홍채 영상 촬영 장치(100a)는 영상을 수신할 수 있다.
예를 들면, 일 실시 예에 따른 영상은 카메라로부터 획득한 눈 영역이 포함된 영상일 수 있다.
단계 110에서 홍채 영상 촬영 장치(100a)는 수신된 영상에서 눈 영역을 검출할 수 있다.
이 경우, 입력 영상으로부터 눈을 검출하는 방법은 업계에서 통용되는 학습에 의한 방법 또는 마스크를 이용하는 방법 등 다양한 방법들이 있으므로, 입력 영상으로부터 눈을 검출하는 방법이 특정 방법으로 한정되지 않음을 유의하여야 한다.
단계 120에서 홍채 영상 촬영 장치(100a)는 검출된 눈 영역에서 눈의 중심을 결정할 수 있다.
예를 들면, 일 실시 예에 따른 눈의 중심점은 눈 영역의 중심점 일 수 있다.
또한, 다른 실시 예에 따른 눈의 중심점은 눈 영역에서 픽셀의 계조 값이 기 설정된 임계 값 이하인 영역의 중심 좌표일 수 있다. 또한 동공 영역의 중심점이 눈의 중심점일 수 있다.
단계 130에서 홍채 영상 촬영 장치(100a)는 검출된 눈 영역에서 반사 영역을 검출할 수 있다.
픽셀의 계조 값은, 픽셀의 세기를 0부터 255의 수치로 표현될 수 있다.
예를 들면, 일 실시 예에 따른 반사 영역은 눈 영역에서 픽셀의 계조 값이 일정 임계 값 이상을 가진 영역일 수 있다
상기 눈 영역은 동공, 홍채, 공막을 포함하는 영역을 말하며, 눈 영역에서 반사 영역이 검출되지 않은 경우는 반사 영역을 피하기 위한 안내 정보를 출력하지 않을 수 있다.
단계 140에서 홍채 영상 촬영 장치(100a)는 반사 영역의 형상을 결정할 수 있다.
일 실시 예에 따른 반사 영역의 형상이 결정될 수 있다. 이 경우, 픽셀의 계조 값의 변화가 큰 인접의 픽셀들의 경계선이 반사 영역의 형상으로 검출될 수 있다.
일 실시 예에 따른 반사 영역의 형상은 반사 영역의 모양, 크기, 위치, 개수 등에 의하여 결정될 수 있다. 예를 들면, 사용자가 착용한 안경으로 인해 발생하는 반사 영역의 형상의 일 예로는 도 7a 내지 7b와 같은 타원형 또는 원형의 반사 영역의 형상이 있을 수 있다. 또한, 카메라의 렌즈의 오염으로 인해 발생하는 반사 영역의 형상은 도 5a 내지 도5b와 같은 비정형의 반사 영역의 형상이 있을 수 있다.
단계 150에서 홍채 영상 촬영 장치(100a)는 반사 영역의 형상이 정형인지 비정형인지 판단할 수 있다.
일 실시 예에 따른 반사 영역의 형상이 정형인 경우는, 도7a 와 같이 타원형 또는 원형의 반사 영역(120c)이 독립적으로 존재하는 경우를 포함할 수 있다. 또는 도7b와 같이 타원형의 반사 영역(120d)과 원형의 반사 영역(120c)이 겹쳐져 발생하는 경우도 포함될 수 있다.
일 실시 예에 따른 반사 영역의 형상이 비정형인 경우는, 도 5a 와 같이 원형 또는 타원형의 반사광을 중심으로 직선 형태의 반사 영역(120a)이 눈 영역(110a)을 가로질러 분포하는 형상이 발생하는 경우를 포함할 수 있다. 또한, 도 5b 와 같이 원형 또는 타원형의 형상이 아닌 비정형 형상의 반사 영역(120c)이 눈 영역(110a)와 중첩되어 발생하는 경우를 포함할 수 있다.
반사 영역의 형상에 기초하여, 반사 영역을 피하기 위한 안내 정보가 출력될 수 있다. 예를 들면, 안내 정보는 시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나가 포함될 수 있다.
단계 150에서 비정형의 반사 영역이 결정되면, 단계 160에서 홍채 영상 촬영 장치(100a)는 사용자에게 카메라의 렌즈 부위의 오염 물질을 제거하기 위한 상기 안내 정보를 출력할 수 있다.
일 실시 예에 따르면, 휴대 단말을 사용하여 홍채 영상 촬영 방법을 제공하는 경우에 사용자의 터치에 의하여 카메라 렌즈 부분에 지문이나 이물질이 묻는 경우, 휴대 단말의 카메라의 렌즈의 오염 물질은 휴대 단말을 이용한 홍채 영상 촬영에 방해가 될 수 있다. 카메라의 렌즈 또는 안경 렌즈의 오염 물질 때문에, 눈 영역에서 비정형의 반사 영역이 검출될 수 있다.
이때, 반사 영역이 제거된 영상을 이용하여 홍채 영상을 촬영하기 위해 시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나를 포함하는 안내 정보를 출력될 수 있다. 이에 관하여는 도 6을 참조하여 자세히 설명하기로 한다.
단계 150에서 정형의 반사 영역이 결정되면, 단계 170에서 홍채 영상 촬영 장치(100a)는 상기 눈의 중심을 기준으로 상기 반사 영역과 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 상기 안내 정보를 출력할 수 있다.
정형의 반사 영역이 결정되면, 눈의 중심의 위치와 반사 영역의 위치가 획득될 수 있다. 이때, 눈의 중심의 위치를 기준으로 반사 영역의 위치와 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 안내 정보가 출력될 수 있다.
일 실시 예에 따른 눈의 중심의 위치는 눈 영역에 따라 달라질 수 있다. 예를 들면, 홍채 또는 동공 영역의 중심점이 눈의 중심의 위치가 될 수 있다.
또한, 일 실시 예에 따른 반사 영역의 위치는 반사 영역의 형상, 개수, 크기 중 적어도 하나에 따라 달라질 수 있다. 예를 들면, 반사 영역의 형상이 하나의 원형 또는 타원형인 경우, 원형 또는 타원형의 중심점이 반사 영역의 위치로 결정될 수 있다. 또한, 반사 영역의 형상이 복수의 원형 또는 타원형인 경우, 원형 또는 타원형 중에서 가장 큰 면적을 차지하는 원형 또는 타원형의 중심점이 반사 영역의 위치로 결정될 수 있다.
반면, 반사 영역의 형상이 복수의 원형 또는 타원형이 겹친 형상인 경우, 원형의 중심점과 타원형의 중심점의 중간 지점이 반사 영역의 위치로 결정될 수 있다. 상기 다양한 실시 예에 따라, 반사 영역의 위치를 결정하는 방법은 상기 기재에 한정되는 것은 아니다.
일 실시 예에 따른 안내 정보는 시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나를 포함할 수 있다. 예를 들면, 눈의 이동할 위치를 알려주는 포인터UI 화면 또는 눈의 가이드 라인 UI화면이 휴대 단말의 디스플레이부(미도시) 에 출력될 수 있다. 이에 관하여는 도 8a 내지 도 8c를 참조하여 자세히 설명하기로 한다.
도 3은 일 실시 예에 따른 눈의 움직임이 안정화된 영상을 촬영하는 홍채 영상 촬영 장치(100b)의 블록도이다.
일 실시 예에 따른 홍채 영상 촬영 장치(100b)는 움직임 정보 획득부(70), 촬영 제어부(80) 및 홍채 영역 검출부(21)를 더 포함할 수 있다.
일 실시 예에 따른 홍채 영역 결정부(21)는 눈 영역 검출부(20)에서 검출된 눈 영역에서 홍채 영역을 검출할 수 있다.
일 실시 예에 따른 홍채의 영역은 홍채를 포함하는 영역으로 카메라에 의해 획득된 영상에서 검출된 눈 영역에 기초하여 검출될 수 있다. 이 경우, 일 실시 예에 따르면 사용자와 카메라의 거리에 기초하여 눈 영역에서 홍채 직경이 달라진다. 따라서, 사용자와 카메라의 거리에 기초하여 홍채 직경이 달라진다. 이에 따라 홍채 직경이 달라지면 홍채 영역이 다르게 검출될 수 있다.
따라서, 다양한 실시 예에 따른 홍채 영역은 기 설정된 홍채의 직경에 기초하여, 카메라로부터 수신된 영상에서 검출된 눈 영역에서 결정될 수 있다. 예를 들면, 영상을 촬영하는 카메라의 렌즈와 사용자의 눈과의 거리가 15cm인 경우, 홍채의 직경이 200픽셀을 가지고, 카메라 렌즈와 눈과의 거리가 25cm인 경우, 홍채의 직경이 130 픽셀을 가질 수 있다.
이 경우, 눈 영역으로부터 홍채 영역을 검출하는 방법은 업계에서 통용되는 학습에 의한 방법 또는 마스크를 이용하는 방법 등 다양한 방법들이 있으므로, 눈 영역으로부터 홍채 영역을 검출하는 방법이 특정 방법으로 한정되지 않음을 유의하여야 한다.
일 실시 예에 따른 움직임 정보 획득부(70)는 눈 영역 검출부(20)에서 검출된 눈의 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여, 눈의 움직임 정보를 획득할 수 있다. 또한, 다른 실시 예에 따른 움직임 정보 획득부(70)는 홍채 영역 결정부(21)에서 검출된 홍채 영역에서 홍채의 움직임을 감지하여, 홍채의 움직임 정보를 획득할 수 있다.
일 실시 예에 따른 홍채 영상 촬영 방법에서 감지된 눈의 움직임을 이용하여, 영상을 촬영 시 모션에 의한 블러 발생이 있는 지 판단될 수 있다.
예를 들면, 일 실시 예에서 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 분산, 표준편차와 같이 중심 좌표의 변화 정도를 알 수 있는 값이 눈의 움직임 정보로 획득될 수 있다. 또한, 다른 실시 예에서 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 범위가 연속적으로 일정 범위 이내(L< x<R, B< y<T)의 영역에서 결정되는 경우, 복수의 영상 프레임의 수가 눈의 움직임 정보로 획득될 수 있다. 이때, 일정 범위에서 L은 x축의 가장 작은 값이고 R은 가장 큰 값일 수 있으며, 또한 B 는 y축의 가장 작은 값이고 T는 가장 큰 값일 수 있다. 이 경우, L, R, B 또는T의 값은 해상도, 카메라와 사용자의 거리, 초당 프레임 수에 따라 변할 수 있으나, 이에 한정되는 것은 아니다. 이에 관하여는 도9a 내지 도9b를 참조하여 후에 자세히 살펴보기로 한다.
일 실시 예에 따른 촬영 제어부(80)는 움직임 정보 획득부(70)에서 획득된 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하도록 할 수 있다. 또한 다른 예에 따른 촬영 제어부(80)는 움직임 정보 획득부(70)에서 획득된 홍채의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하도록 할 수 있다.
홍채 영상 촬영 장치(100b)의 동작들을 순서대로 상술한다.
도 4는 일 실시 예에 따른 눈의 움직임이 안정화된 영상을 촬영하는 홍채 영상 촬영 방법의 흐름도이다.
단계 200 내지 단계 270은 도 1의 단계 100 내지 단계 170과 대응하므로 구체적인 설명은 생략한다.
단계 280은 눈 영역에서 반사 영역이 검출되지 않은 경우, 눈의 영역에서 눈의 움직임을 감지하여 눈의 움직임 정보를 획득할 수 있다.
눈 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여 눈의 움직임 정보를 획득할 수 있다. 또한, 상기 눈의 영역에서 반사 영역이 검출되는 경우는, 눈의 중심을 기준으로 반사 영역과 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 상기 안내 정보를 출력하고, 상기 안내 정보에 따라 사용자가 눈을 이동한 경우를 포함할 수 있다.
일 실시 예에 따른 눈의 움직임은, 카메라로부터 획득한 복수의 영상 프레임에서 눈의 중심점의 위치 변화일 수 있다. 이때 동영상으로부터 복수의 영상 프레임이 입력되고, 입력된 프레임들로부터 눈의 움직임이 감지될 수 있다. 또한, 다른 실시 예에 따른 눈의 움직임은 카메라로부터 획득한 복수의 정지 영상에서 눈의 중심점의 위치 변화일 수 있다.
예를 들면, 일 실시 예에서 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 분산, 표준편차와 같이 중심 좌표의 변화 정도를 알 수 있는 값이 눈의 움직임 정보로 획득될 수 있다. 또한, 다른 실시 예에서 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 범위가 연속적으로 일정 범위 이내(L< x<R, B< y<T)의 영역에서 결정되는 경우, 복수의 영상 프레임의 수가 눈의 움직임 정보로 획득될 수 있다. 이때, 일정 범위에서 L은 x축의 가장 작은 값이고 R은 가장 큰 값일 수 있으며, 또한 B 는 y축의 가장 작은 값이고 T는 가장 큰 값일 수 있다. 이 경우, L, R, B 또는T의 값은 해상도, 카메라와 사용자의 거리, 초당 프레임 수에 따라 변할 수 있으나, 이에 한정되는 것은 아니다.
단계 290 은 눈의 움직임 정보가 미리 결정된 임계 값 이하인지 판단할 수 있다.
예를 들면, 다양한 실시 예에 따라 미리 결정된 임계 값은 임계 분산 값, 표준 편차 값 또는 임계 프레임의 수 중 적어도 하나를 포함할 수 있다.
단계 290에서 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 눈의 움직임이 안정화된 영상이라 결정될 수 있다.
단계 290에서, 눈의 움직임 정보가 미리 결정된 임계 값 보다 큰 경우, 단계 200으로 회귀 된다. 따라서, 눈의 움직임이 안정화된 영상이 획득될 때까지 카메라로부터 획득된 영상을 수신하여, 눈의 움직임 정보가 분석될 수 있다.
단계 290에서 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 단계 300 은 영상을 촬영할 수 있다.
도 5a 내지 도 5b 는 홍채 영상 촬영 장치가 결정한 비정형의 반사 영역의 다양한 예를 도시한 도면이다.
일 실시 예에 따른 홍채 영상 촬영 장치(100a)는, 휴대폰, 디지털 카메라, 캠코더 등과 같은 카메라(1100)가 탑재된 휴대 단말(1000)에 포함될 수 있다.
예를 들면, 도5a 와 같이 원형 또는 타원형의 반사광을 중심으로 직선 형태의 반사 영역(120a)이 눈 영역(110a)을 가로질러 분포하는 형상이 발생 될 수 있다. 또한, 도 5b 와 같이 원형 또는 타원형의 형상이 아닌 비정형 형상의 반사 영역(120c)이 눈 영역(110a)과 중첩되어 발생 될 수 있다.
도 6 은 홍채 영상 촬영 장치가 비정형의 반사 영역에 기초하여, 반사 영역을 피하기 위한 안내 정보를 출력하는 일 예를 도시한 도면이다.
일 실시 예에 따른 홍채 영상 촬영 장치(100a)는, 휴대폰, 디지털 카메라, 캠코더 등과 같은 카메라(1100)가 탑재된 휴대 단말(1000)에 포함될 수 있다.
예를 들면, 일 실시 예에 따른 비정형의 반사 영역(120a)은 눈 영역(110a)에서 검출될 수 있다. 이 경우, 사용자에게 카메라의 렌즈 또는 안경의 렌즈 부위의 오염 물질을 제거하기 위한 안내 정보로써 “렌즈를 닦아 주세요” 라는 안내 정보(200) 가 휴대 단말의 디스플레이부(미도시)에 표시될 수 있다.
도 7a 내지 도 7b 는 홍채 영상 촬영 장치가 결정한 정형의 반사 영역의 다양한 예를 도시한 도면이다.
일 실시 예에 따른 홍채 영상 촬영 장치(100a)는, 휴대폰, 디지털 카메라, 캠코더 등과 같은 카메라(1100)가 탑재된 휴대 단말(1000)에 포함될 수 있다.
예를 들면, 도7a 와 같이 타원형 또는 원형의 반사 영역(120c)이 독립적으로 존재할 수 있다. 또는 도7b와 같이 타원형의 반사 영역(120d)과 원형의 반사 영역(120c)이 겹쳐져 발생할 수 있다.
도 8a 내지 도 8c 는 홍채 영상 촬영 장치가 정형의 반사 영역에 기초하여, 반사 영역을 피하기 위한 안내 정보를 출력하는 일 예를 도시한 도면이다.
일 실시 예에 따른 홍채 영상 촬영 장치(100a)는, 휴대폰, 디지털 카메라, 캠코더 등과 같은 카메라(1100)가 탑재된 휴대 단말(1000)에 포함될 수 있다.
도 8a에서 도시한 바와 같이 일 실시 예에 따라 눈 영역(110a)에 정형의 반사 영역(120c)이 검출되는 경우, 눈의 중심의 위치와 반사 영역의 위치가 획득될 수 있다.
이 때, 눈의 중심의 위치를 기준으로 반사 영역의 위치와 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 안내 정보가 출력될 수 있다. 예를 들면, 도8b에서 도시한 바와 같이 눈 영역(110a)에 정형의 반사 영역(120c)이 검출되는 경우, 눈의 중심의 위치(130a)를 기준으로 반사 영역의 위치와 반대 방향으로 눈이 이동할 위치를 알려주는 포인터 UI 화면(140a)이 휴대 단말의 디스플레이부(미도시)에 출력될 수 있다.
이때, 눈의 이동할 위치를 알려주는 포인터UI 화면(140a) 은, 휴대 단말(1000)의 디스플레이부(미도시) 상에서, 눈의 중심의 위치(130a)를 기준으로 눈의 중심의 위치(130a)와 반사 영역의 위치와의 거리와 반대되는 거리의 지점에, 출력될 수 있다.
또한, 도 8c에서 도시한 바와 같이 제1 눈의 가이드 라인 UI화면(140b)의 내부에 위치한 눈 영역(110a)에 정형의 반사 영역(120c)이 검출되는 경우, 눈의 중심의 위치(130a)를 기준으로 반사 영역의 위치와 반대 방향으로 이동하는 제2 눈의 가이드 라인 UI화면(140c)이 휴대 단말(1000)의 디스플레이부(미도시)에 출력될 수 있다.
이때, 제2 눈의 가이드 라인 UI화면(140c)은, 휴대 단말(1000)의 디스플레이부(미도시) 상에서, 제1눈의 가이드 라인 UI화면(140b)을 기준으로 눈의 중심의 위치(130a)와 반사 영역의 위치와의 거리와 반대되는 거리의 지점에, 출력될 수 있다.
도 9 는 홍채 영상 촬영 장치가 눈 영역에서 눈의 움직임을 감지하여 눈의 움직임 정보를 획득하는 일 예를 도시한 도면이다.
일 실시 예에 따른 홍채 영상 촬영 장치(100b)는, 휴대폰, 디지털 카메라, 캠코더 등과 같은 카메라(1100)가 탑재된 휴대 단말(1000)에 포함될 수 있다.
눈의 움직임은 카메라(1100)로부터 획득한 복수의 영상 프레임(110b, 110c)에서 눈의 중심점(130b, 130c)의 위치 변화일 수 있다. 이때 동영상으로부터 복수의 영상 프레임이 입력되고, 입력된 프레임들로부터 홍채의 움직임이 감지될 수 있다. 또한, 다른 실시 예에 따른 눈의 움직임은 카메라(1100)로부터 획득한 복수의 정지 영상에서 눈의 중심점(130b, 130c)의 위치 변화일 수 있다.
예를 들면, 일 실시 예에서 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 분산, 표준편차와 같이 중심 좌표의 변화 정도를 알 수 있는 값이 눈의 움직임 정보로 획득될 수 있다. 또한, 다른 실시 예에서 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 범위가 연속적으로 일정 범위 이내(L< x<R, B< y<T)의 영역에서 결정되는 경우, 복수의 영상 프레임의 수가 눈의 움직임 정보로 획득될 수 있다. 이때, 일정 범위에서 L은 x축의 가장 작은 값이고 R은 가장 큰 값일 수 있으며, 또한 B 는 y축의 가장 작은 값이고 T는 가장 큰 값일 수 있다. 이 경우, L, R, B 또는T의 값은 해상도, 카메라와 사용자의 거리, 초당 프레임 수에 따라 변할 수 있으나, 이에 한정되는 것은 아니다.
한편, 도 9a 내지 도 9b에 도시한 바와 같이, 두 개의 영상 프레임에서 눈의 중심점의 위치 변화로써, 눈의 움직임이 감지될 수 있으나, 영상 프레임의 수가 한정되는 것은 아니다.
다양한 실시 예에 따른 장치는 프로세서, 프로그램 데이터를 저장하고 실행하는 메모리, 디스크 드라이브와 같은 영구 메모리(permanent storage), 터치 패널, 키(key), 버튼 등과 같은 사용자 인터페이스 장치 등을 포함할 수 있다.
소프트웨어 모듈 또는 알고리즘으로 구현되는 방법들은 상기 프로세서상에서 실행 가능한 컴퓨터가 읽을 수 있는 코드들 또는 프로그램 명령들로서 컴퓨터가 읽을 수 있는 저장 매체 상에 저장될 수 있다. 여기서 컴퓨터가 읽을 수 있는 기록 매체로 마그네틱 저장 매체(예컨대, ROM(read-only memory), RAM(random-access memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc)) 등이 있다. 컴퓨터가 읽을 수 있는 저장 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 매체는 컴퓨터에 의해 판독가능하며, 프로세서에서 실행될 수 있다.
본 발명에서 인용하는 공개 문헌, 특허 출원, 특허 등을 포함하는 모든 문헌들은 각 인용 문헌이 개별적으로 및 구체적으로 병합하여 나타내는 것 또는 에서 전체적으로 병합하여 나타낸 것과 동일하게 에 병합될 수 있다.
본 발명의 이해를 위하여, 도면에 도시된 바람직한 실시 예들에서 참조 부호를 기재하였으며, 본 발명의 실시 예들을 설명하기 위하여 특정 용어들을 사용하였으나, 특정 용어에 의해 이 한정되는 것은 아니며, 본 발명은 당업자에 있어서 통상적으로 생각할 수 있는 모든 구성 요소들을 포함할 수 있다.
본 발명은 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 발명은 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩 업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 에의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있는 것과 유사하게, 은 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 발명은 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. “매커니즘”, “요소”, “수단”, “구성”과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.
본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.
본 발명의 명세서(특히 특허청구범위에서)에서 “상기”의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.
100a, 100b: 홍채 영상 촬영 장치
10: 영상 수신부 20: 눈 영역 검출부
21: 홍채 영역 검출부 30: 눈의 중심 결정부
40: 반사 영역 검출부 50: 형상 결정부
60: 안내 정보 출력부 70: 움직임 정보 획득부
80: 촬영 제어부

Claims (16)

  1. 영상을 수신하는 단계;
    상기 수신된 영상에서 눈 영역을 검출하는 단계;
    상기 눈 영역에서 눈의 중심을 결정하는 단계;
    상기 눈 영역에서 반사 영역을 검출하는 단계;
    상기 검출된 반사 영역의 형상을 결정하는 단계; 및
    상기 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력하는 단계를 포함하는 홍채 영상 촬영 방법.
  2. 제1 항에 있어서, 상기 안내 정보는
    시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나를 포함하는 것을 특징으로 하는, 홍채 영상 촬영 방법.
  3. 제1 항에 있어서, 상기 안내 정보를 출력하는 단계는,
    비정형의 반사 영역이 결정되면, 사용자에게 카메라의 렌즈 또는 안경 렌즈 부위의 오염 물질을 제거하기 위한 상기 안내 정보를 출력하는 단계를 포함하는 것을 특징으로 하는, 홍채 영상 촬영 방법.
  4. 제1 항에 있어서, 상기 안내 정보를 출력하는 단계는,
    정형의 반사 영역이 결정되면, 상기 눈의 중심을 기준으로 상기 반사 영역과 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 상기 안내 정보를 출력하는 단계를 더 포함하는 것을 특징으로 하는, 홍채 영상 촬영 방법.
  5. 제1 항에 있어서, 홍채 영상 촬영 방법은
    상기 눈 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여 눈의 움직임 정보를 획득하는 단계; 및
    상기 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하는 단계를 더 포함하는 것을 특징으로 하는, 홍채 영상 촬영 방법.
  6. 제5 항에 있어서, 상기 눈의 움직임 정보는
    상기 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 분산, 표준편차와 같이 중심 좌표의 변화 정도를 알 수 있는 값인 것을 특징으로 하는, 홍채 영상 촬영 방법.
  7. 제1 항에 있어서, 수신된 영상에서 눈 영역을 검출하는 단계는
    상기 눈 영역에서 홍채 영역을 검출하는 단계를 포함하고,
    상기 눈의 중심은 상기 홍채 영역의 홍채의 중심이며,
    상기 눈의 움직임 정보는 상기 홍채 영역의 홍채의 중심 움직임 정보인 것을 특징으로 하는, 홍채 영상 촬영 방법.
  8. 영상을 수신하는 영상 수신부;
    상기 수신된 영상에서 눈 영역을 검출하는 눈 영역 검출부;
    상기 눈 영역에서 눈의 중심을 결정하는 눈의 중심 결정부;
    상기 눈 영역에서 반사 영역을 검출하는 반사 영역 검출부;
    상기 검출된 반사 영역의 형상을 결정하는 형상 결정부; 및
    상기 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력하는 안내 정보 출력부; 를 포함하는 홍채 영상 촬영 장치.
  9. 제 8 항에 있어서, 상기 안내 정보는
    시각적 정보, 청각적 정보 또는 진동 정보 중 적어도 하나를 포함하는 것을 특징으로 하는, 홍채 영상 촬영 장치.
  10. 제8 항에 있어서, 상기 안내 정보 출력부는
    상기 형상 결정부에서 비정형의 반사 영역이 결정되면, 사용자에게 카메라의 렌즈 부위 또는 안경 렌즈의 오염 물질을 제거하기 위한 상기 안내 정보를 출력하는 것을 특징으로 하는, 홍채 영상 촬영 장치.
  11. 제8 항에 있어서, 상기 안내 정보 출력부는
    상기 형상 결정부에서 정형의 반사 영역이 결정되면, 상기 눈의 중심을 기준으로 상기 반사 영역과 반대 방향으로 눈이 이동할 위치를 가이드 하기 위한 상기 안내 정보를 출력하는 것을 특징으로 하는, 홍채 영상 촬영 장치.
  12. 제8 항에 있어서, 상기 홍채 영상 촬영 장치는
    상기 눈의 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여, 눈의 움직임 정보를 획득하는 움직임 정보 획득부를 더 포함하고,
    상기 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하도록 하는 촬영 제어부를 더 포함하는 것을 특징으로 하는, 홍채 영상 촬영 장치.
  13. 제12 항에 있어서, 상기 눈의 움직임 정보는
    상기 영상 수신부에서 수신된 영상의 연속적인 복수의 영상 프레임에서 각각 획득된 복수의 눈의 중심 좌표들의 분산, 표준편차와 같이 중심 좌표의 변화 정도를 알 수 있는 값인 것을 특징으로 하는, 홍채 영상 촬영 장치.
  14. 제8 항에 있어서, 상기 홍채 영상 촬영 장치는
    상기 눈 영역에서 홍채 영역을 검출하는 홍채 영역 검출부를 더 포함하고,
    상기 눈의 중심은 상기 홍채 영역의 홍채의 중심이며,
    상기 눈의 움직임 정보는 상기 홍채 영역의 홍채의 중심 움직임 정보인 것을 특징으로 하는, 홍채 영상 촬영 장치.
  15. 프로세서에 의해 도출되어 실행되었을 때, 홍채 영상 촬영을 위한 안내 정보 제공 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 저장매체에 있어서,
    상기 홍채 영상 촬영방법은,
    영상을 수신하는 단계;
    상기 수신된 영상에서 눈 영역을 검출하는 단계;
    상기 눈 영역에서 눈의 중심을 결정하는 단계;
    상기 눈 영역에서 반사 영역을 검출하는 단계;
    상기 검출된 반사 영역의 형상을 결정하는 단계; 및
    상기 결정된 반사 영역의 형상에 기초하여, 상기 반사 영역을 피하기 위한 안내 정보를 출력하는 단계를 포함하는 컴퓨터 판독가능 저장매체.
  16. 제15 항에 있어서, 홍채 영상 촬영 방법은
    상기 눈 영역에서 반사 영역이 검출되지 않은 경우, 상기 눈의 움직임을 감지하여 눈의 움직임 정보를 획득하는 단계; 및
    상기 눈의 움직임 정보가 미리 결정된 임계 값 이하인 경우, 상기 영상을 촬영하는 단계를 더 포함하는 것을 특징으로 하는, 컴퓨터 판독가능 저장매체.

KR1020130096190A 2013-08-13 2013-08-13 홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치 KR102037417B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020130096190A KR102037417B1 (ko) 2013-08-13 2013-08-13 홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치
PCT/KR2014/007208 WO2015023076A1 (en) 2013-08-13 2014-08-05 Method of capturing iris image, computer-readable recording medium storing the method, and iris image capturing apparatus
US14/458,758 US9684829B2 (en) 2013-08-13 2014-08-13 Method of capturing iris image, computer-readable recording medium storing the method, and iris image capturing apparatus
US15/624,268 US9922250B2 (en) 2013-08-13 2017-06-15 Method of capturing iris image, computer-readable recording medium storing the method, and iris image capturing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130096190A KR102037417B1 (ko) 2013-08-13 2013-08-13 홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치

Publications (2)

Publication Number Publication Date
KR20150019393A true KR20150019393A (ko) 2015-02-25
KR102037417B1 KR102037417B1 (ko) 2019-10-28

Family

ID=52466557

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130096190A KR102037417B1 (ko) 2013-08-13 2013-08-13 홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치

Country Status (3)

Country Link
US (2) US9684829B2 (ko)
KR (1) KR102037417B1 (ko)
WO (1) WO2015023076A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014088125A1 (ko) * 2012-12-04 2014-06-12 엘지전자 주식회사 영상 촬영 장치 및 그 방법
US9020213B1 (en) * 2013-10-17 2015-04-28 Daon Holdings Limited Methods and systems for detecting biometric characteristics in an image
US20170061210A1 (en) * 2015-08-26 2017-03-02 Intel Corporation Infrared lamp control for use with iris recognition authentication
CN109478227B (zh) * 2016-06-28 2024-01-05 英特尔公司 计算设备上的虹膜或其他身体部位识别
KR102525126B1 (ko) * 2016-07-29 2023-04-25 삼성전자주식회사 홍채 카메라를 포함하는 전자 장치
CN109002796B (zh) * 2018-07-16 2020-08-04 阿里巴巴集团控股有限公司 一种图像采集方法、装置和系统以及电子设备
CN109101110A (zh) * 2018-08-10 2018-12-28 北京七鑫易维信息技术有限公司 一种操作指令执行方法、装置、用户终端及存储介质
CN113132608B (zh) * 2019-12-30 2023-05-12 深圳云天励飞技术有限公司 图像处理方法及相关装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010016241A (ko) * 2000-11-27 2001-03-05 김재희 자동 눈 영상 획득방법
KR20120049605A (ko) * 2010-11-09 2012-05-17 한국전자통신연구원 동공 중심 검출 장치 및 방법

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6714665B1 (en) * 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
US6289113B1 (en) * 1998-11-25 2001-09-11 Iridian Technologies, Inc. Handheld iris imaging apparatus and method
JP3401502B2 (ja) * 2000-07-13 2003-04-28 松下電器産業株式会社 目画像撮像装置
EP1600898B1 (en) * 2002-02-05 2018-10-17 Panasonic Intellectual Property Management Co., Ltd. Personal authentication method, personal authentication apparatus and image capturing device
KR20030077126A (ko) 2002-03-25 2003-10-01 엘지전자 주식회사 Pc용 홍채 인식 시스템의 안경반사 대처를 위한 장치 및방법
JP4148700B2 (ja) * 2002-05-30 2008-09-10 松下電器産業株式会社 目画像撮像装置
US7418115B2 (en) * 2004-12-07 2008-08-26 Aoptix Technologies, Inc. Iris imaging using reflection from the eye
US8260008B2 (en) * 2005-11-11 2012-09-04 Eyelock, Inc. Methods for performing biometric recognition of a human eye and corroboration of same
US9036871B2 (en) * 2007-09-01 2015-05-19 Eyelock, Inc. Mobility identity platform
US8189879B2 (en) * 2008-02-14 2012-05-29 Iristrac, Llc System and method for animal identification using IRIS images
US8538044B2 (en) * 2008-09-26 2013-09-17 Panasonic Corporation Line-of-sight direction determination device and line-of-sight direction determination method
WO2010056542A1 (en) * 2008-10-29 2010-05-20 Cross Match Technologies, Inc. Apparatus for iris capture
US8317325B2 (en) * 2008-10-31 2012-11-27 Cross Match Technologies, Inc. Apparatus and method for two eye imaging for iris identification
ES2746378T3 (es) * 2009-07-16 2020-03-05 Tobii Ab Unidad de detección ocular que usa flujo de datos paralelo
JP5816257B2 (ja) * 2010-03-22 2015-11-18 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 観察者の視線を追跡するシステム及び方法
JP5387557B2 (ja) * 2010-12-27 2014-01-15 カシオ計算機株式会社 情報処理装置及び方法、並びにプログラム
US9256720B2 (en) * 2011-05-18 2016-02-09 Nextgenid, Inc. Enrollment kiosk including biometric enrollment and verification, face recognition and fingerprint matching systems
US20150042776A1 (en) * 2011-06-18 2015-02-12 Morpho Trust USA,LLC Systems And Methods For Detecting A Specular Reflection Pattern For Biometric Analysis
US20130088583A1 (en) * 2011-10-07 2013-04-11 Aoptix Technologies, Inc. Handheld Iris Imager
FI125445B (fi) * 2012-09-12 2015-10-15 Trividi Oy Katseenohjausjärjestely
US9058519B2 (en) * 2012-12-17 2015-06-16 Qualcomm Incorporated System and method for passive live person verification using real-time eye reflection

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010016241A (ko) * 2000-11-27 2001-03-05 김재희 자동 눈 영상 획득방법
KR20120049605A (ko) * 2010-11-09 2012-05-17 한국전자통신연구원 동공 중심 검출 장치 및 방법

Also Published As

Publication number Publication date
US9684829B2 (en) 2017-06-20
KR102037417B1 (ko) 2019-10-28
WO2015023076A1 (en) 2015-02-19
US20170286770A1 (en) 2017-10-05
US9922250B2 (en) 2018-03-20
US20150049179A1 (en) 2015-02-19

Similar Documents

Publication Publication Date Title
KR102037417B1 (ko) 홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치
US10855894B2 (en) Mobile device case and techniques for multi-view imaging
US9823331B2 (en) Object detecting apparatus, image capturing apparatus, method for controlling object detecting apparatus, and storage medium
US11050915B2 (en) Method for zooming by switching between dual cameras, mobile terminal, and storage apparatus
CN107258077B (zh) 用于连续自动聚焦(caf)的系统和方法
US20190130533A1 (en) Method for image-processing and mobile terminal using dual cameras
US9438785B2 (en) Electronic device and focus adjustment method thereof
JP5429358B2 (ja) ゴースト検出装置およびそれを用いる撮像装置、ゴースト検出方法、および、ゴースト除去方法
JP2012118817A (ja) 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体
US9600871B2 (en) Image correcting apparatus, image correcting method and computer readable recording medium recording program thereon
JP2008205774A (ja) 撮影操作誘導システム、撮影操作誘導方法および撮影操作誘導プログラム
JP2012034024A (ja) 画像処理装置、画像処理方法及びプログラム
CN108259769B (zh) 图像处理方法、装置、存储介质及电子设备
KR102216505B1 (ko) 안면 추적 카메라 모듈 및 방법
JP2005182745A (ja) 画像処理方法および装置並びにプログラム
JP6645711B2 (ja) 画像処理装置、画像処理方法、プログラム
JP2012235257A (ja) 撮影装置
US11822714B2 (en) Electronic device and control method for capturing an image of an eye
JP4151624B2 (ja) 瞳孔検出装置、虹彩認証装置及び瞳孔検出方法
JP4793459B2 (ja) シンボル読取装置、及びプログラム
KR20130123316A (ko) 사용자의 얼굴 분석 결과에 따라 이동 단말을 제어하는 장치 및 방법
JP2014068280A (ja) 撮像装置
CN117994542A (zh) 异物检测方法、装置以及系统
JP5440532B2 (ja) 画像撮像装置及びプログラム
JP2014013986A (ja) 撮像装置

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant