KR101053197B1 - 카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법 - Google Patents

카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법 Download PDF

Info

Publication number
KR101053197B1
KR101053197B1 KR1020090038480A KR20090038480A KR101053197B1 KR 101053197 B1 KR101053197 B1 KR 101053197B1 KR 1020090038480 A KR1020090038480 A KR 1020090038480A KR 20090038480 A KR20090038480 A KR 20090038480A KR 101053197 B1 KR101053197 B1 KR 101053197B1
Authority
KR
South Korea
Prior art keywords
fingerprint
image
camera
fingerprint recognition
portable terminal
Prior art date
Application number
KR1020090038480A
Other languages
English (en)
Other versions
KR20100119390A (ko
Inventor
김광태
김형표
Original Assignee
경북대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경북대학교 산학협력단 filed Critical 경북대학교 산학협력단
Priority to KR1020090038480A priority Critical patent/KR101053197B1/ko
Priority to PCT/KR2009/002323 priority patent/WO2010126190A1/ko
Publication of KR20100119390A publication Critical patent/KR20100119390A/ko
Application granted granted Critical
Publication of KR101053197B1 publication Critical patent/KR101053197B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/66Substation equipment, e.g. for use by subscribers with means for preventing unauthorised or fraudulent calling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/32Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/52Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Biology (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephone Function (AREA)
  • Collating Specific Patterns (AREA)
  • Image Input (AREA)

Abstract

본 발명은 카메라가 장착된 휴대용 단말기를 이용한 지문 인식과 이를 통한 상기 단말기의 보안 방법에 관한 것이다.
이를 위해 본 발명은, 카메라가 장착된 휴대용 단말기에 있어서, 사용자의 손가락 지문을 인식하기 위한 지문 인식부와, 상기 지문 인식부의 지문 이미지를 캡쳐하는 상기 카메라와, 상기 카메라를 통해 켭쳐된 지문 이미지와 이미 등록된 지문 이미지와 이미지 매칭을 행하는 이미지 매칭부를 포함하고; 상기 이미지 매칭부에서 이미지가 매칭되면 상기 휴대용 단말기의 사용을 위한 인증 또는 잠금 해제를 행하고, 그렇지 않으면 사용자 잠금 기능을 설정하는 것을 특징으로 하는 휴대용 단말기 및 이를 이용한 보안 방법을 제공한다.
Figure R1020090038480
지문 인식, 카메라폰, 지문 매칭

Description

카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법{Portable terminal having Camera and Security Method at the same}
본 발명은 카메라가 장착된 휴대폰 등 휴대용 단말기에 관한 것으로, 보다 상세하게는 장착된 카메라를 이용하여 별도의 지문인식 장치를 구비함 없이 지문 인식을 하고 이를 통해 휴대폰의 인증 또는 사용이 가능하게 하는 휴대용 단말기 및 이를 이용한 보안방법에 관한 것이다.
휴대폰의 다양한 기능 중 카메라에 대한 국내 사용자의 사랑은 각별하다. 이러한 휴대폰에서 통화, 문자 메시지 다음 많이 사용하는 기능으로 카메라 기능을 꼽을 수 있는데, 이제 더 이상 카메라 기능이 없는 휴대폰을 찾기는 어려울 정도이다. 이처럼 카메라가 장착된 휴대폰(이하, 카메라폰이라 함)은 음성 및 문자 메시지로 개인 고유의 개성을 잘 나타내면서도 여기에 수시로 사진 촬영을 통해 이미지화하고 싶은 젊은 층의 요구와 잘어울려 결과적으로 융합화하는 기술 추세에 가장 성공적인 유형으로 볼 수 있다.
최근 국내 휴대폰 메이커들은 이러한 추세를 반영하여 2004년에 500만 화소 카메라폰을 출시했고, 이듬해에는 700만 화소, 다시 2006년에는 1,000만 화소의 카 메라폰까지 출시하여, 휴대폰이 고해상도를 갖는 정밀 광학 기계로 변모되고 있는 상황이다.
이에 따라 일상의 기록, 생활 사진 촬영 등에서 디지털 카메라를 대체하고 있을 뿐만 아니라 메모리 성능의 향상, 초고속 인터넷 기술의 발달과 함께 휴대폰의 기능은 거의 PC화 되고 있어 개인정보 미디어의 총아로 자리잡게 하고 있다.
휴대성과 편의성에서 큰 장점을 가진 휴대폰은 전술한 다양한 기능에 따라 각 개인 정보를 가장 많이 담고 있으며, 모바일 뱅킹 등 휴대폰을 이용한 금융 서비스도 제공되므로, 분실 및 도난에 따른 개인정보 유출의 위험성이 높아 휴대폰의 보안에 대한 중요성은 날로 증대되고 있다.
본 발명은 전술한 바와 휴대폰의 보안에 대한 중요성에 따라 휴대폰에 장착된 카메라를 이용하여 별도의 지문인식 장치를 구비함 없이 지문 인식을 하고 이를 통해 휴대폰의 인증 또는 사용이 가능하게 하는 휴대용 단말기 및 이를 이용한 보안방법을 제공하는 것을 목적으로 한다.
전술한 과제를 해결하기 위하여 본 발명은, 카메라가 장착된 휴대용 단말기에 있어서, 사용자의 손가락 지문을 인식하기 위한 지문 인식부와, 상기 지문 인식부의 지문 이미지를 캡쳐하는 상기 카메라와, 상기 카메라를 통해 켭쳐된 지문 이미지와 이미 등록된 지문 이미지와 이미지 매칭을 행하는 이미지 매칭부를 포함하 고; 상기 이미지 매칭부에서 이미지가 매칭되면 상기 휴대용 단말기의 사용 인증 또는 잠금 해제를 행하고, 그렇지 않으면 사용자 잠금 기능을 설정하는 것을 특징으로 하는 휴대용 단말기를 제공한다.
또한, 상기 지문 인식부는 소정의 간격을 두고 상기 카메라의 상부에 형성되어 상기 사용자 손가락을 얹을 수 있게 하는 지문 인식창과, 일반 카메라 촬영 모드시에는 상기 지문 인식창을 개방시키고 지문 인식 모드시에는 상기 지문 인식창을 폐쇄시켜 상기 지문 인식창의 개폐를 조절하는 지문 인식창 개폐부를 포함하는 것을 특징으로 한다.
또한, 상기 지문 인식창은 강화유리인 것을 특징으로 한다.
또한, 상기 지문 인식창에 빛이 분산되는 것을 방지하고 빛의 집광을 좋게 하는 광학필름이 형성되는 것을 특징으로 한다.
또한, 상기 카메라와 마주보는 상기 지문 인식창의 하부면에 홀로그램막을 형성하는 것을 특징으로 한다.
또한, 상기 카메라에 플래시를 형성하는 것을 특징으로 한다.
또한, 상기 카메라를 통해 캡쳐된 지문 이미지를 표시창에서 나타내기 위해 임시적으로 저장하는 제2 메모리부와, 상기 카메라를 통해 캡쳐된 지문 이미지를 압축포맷으로 변환하고 소정 비율로 압축하여 저장하는 제1 메모리부와, 상기 휴대용 단말기의 사용에 대한 정당한 권원이 있는 자의 지문 이미지를 저장하는 제3 메모리부를 포함하는 것을 특징으로 한다.
또한, 상기 제3 메모리부에 저장되는 지문 이미지는 삭제, 추가할 수 있는 것을 특징으로 한다.
또한, 상기 제1 메모리부의 저장된 지문 이미지의 특징 추출은 융선을 이용하는 방법 또는 특징점을 이용하는 방법인 것을 특징으로 한다.
본 발명의 다른 실시예는, 카메라가 장착된 휴대용 단말기에서, 사용자가 지문인식 모드를 선택하는 단계와, 상기 카메라를 통해 사용자의 지문 이미지를 캡쳐하는 단계와, 상기 카메라를 통해 켭쳐된 지문 이미지와 이미 등록된 지문 이미지와 이미지 매칭을 행하는 단계와, 상기 이미지가 매칭 단계에서 매칭되면 상기 휴대용 단말기의 잠금을 해제하고, 그렇지 않으면 상기 휴대용 단말기 잠금 기능을 설정하는 단계를 포함하는 휴대용 단말기의 보안 방법을 제공한다.
또한, 상기 지문 인식 모드 선택시에는 상기 카메라의 상부에 설치된 지문 인식창이 닫히고 닫힌 지문 인식창에 사용자의 손가락을 얹어 지문 인식이 가능하게 하는 것을 특징으로 한다.
또한, 제1 메모리부를 통해 상기 카메라를 통해 캡쳐된 지문 이미지를 압축포맷으로 변환하고 소정 비율로 압축하여 저장하는 단계와, 상기 저장전에 제2 메모리부를 통해 상기 카메라를 통해 캡쳐된 지문 이미지를 표시창에서 나타내기 위해 임시적으로 저장하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 캡쳐된 지문 이미지의 특징을 추출하는 단계를 더 포함하고, 지문 이미지 특징 추출은 지문의 융선을 이용하는 방법 또는 지문의 특징점을 이용하는 방법 중의 어느 하나를 사용하는 것을 특징으로 한다.
또한, 상기 이미 등록된 지문 이미지를 삭제하거나 새로운 지문 이미지를 더 추가하는 단계를 더 포함하는 것을 특징으로 한다.
또한, 상기 이미지 매칭 단계는 일대일 형태로 등록된 지문 이미지와 캡쳐된 지문 이미지를 비교 판단하는 단계와, 일대 다수의 형태로 복수의 등록된 지문 이미지와 캡쳐된 지문 이미지를 비교 판단하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 휴대폰 잠금 기능은 사용자 선택에 따라 각 기능에 따라 개별적으로 설정되는 것을 특징으로 한다.
또한, 사용자 인증 과정을 상기 아이디 및 패스워드를 입력하지 않고 상기 지문 매칭 과정으로 대체하는 것을 특징으로 한다.
본 발명에 따른 휴대용 단말기는 별도의 지문 인식 장치를 구비함 없이 장착된 카메라를 이용하여 지문 인식을 행할 수 있으므로 추가적인 비용이 소모가 필요없이 저렴한 지문 인식 휴대용 단말기를 구비할 수 있다.
또한, 아이디 또는 패스워드가 아닌 지문 인식에 의하므로 보안성 및 안전성을 배가할 수 있는 장점이 있다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 따른 휴대폰을 설명한다.
도 1은 본 발명의 바람직한 실시예에 따른 지문인식형 카메라폰(170)을 나타낸 도면이다.
도 1을 참조하면, 본 발명에 따른 카메라폰(170)은 사용자의 지문을 인식하 기 위한 지문 인식부(160)와, 상기 지문 인식부(160)의 사용자 지문 이미지를 캡쳐(capture)하기 위한 카메라부(100)와, 휴대폰 고유의 음성 통화 또는 상기 지문 이미지 송수신을 하기 위한 휴대폰부(102)와, 상기 지문 이미지 및 문자를 표시하는 표시 장치(106)와, 상기 표시부(106)에 상기 지문 이미지 및 문자를 표시하게 하기 위한 인터페이스부(104)로 구성된다.
카메라부(100)는 렌즈부(108), 이미지 센서(110), ADC(Analog Digital Converter)(112), DSP(Digital Signal Processor)(114), 이미지 압축부(116), 제1메로리부(118), 카메라제어부(120)로 구성되어 있다.
상기 사용자의 지문 이미지는 렌즈부(108)를 통하여 이미지 센서(110)로 제공되는데, 렌즈부(108)는 줌 렌즈(zoom lens), 포커스 렌즈(focus lens) 및 조리개(iris) 등이 포함될 수 있다.
이미지 센서(110)는 렌즈부(108)를 통과한 지문 이미지의 광신호를 전기적 신호(촬상영상신호)로 변환출력하며, 카메라가 가지는 노출, 감마, 이득조정, 화이트 밸런스, 컬러 매트릭스 등의 기능을 수행한다. 이러한 이미지 센서(110)는 씨모스(CMOS; Complementary Metal-Oxide-Semiconductor) 센서 또는 CCD(Charge Coupled Device) 센서 등이 사용될 수 있으며, 지문 인식의 정확도를 높이기 위해 800만 화소 이상의 고화소 센서를 사용하는 것이 바람직하다.
카메라 제어부(120)는 CPU(Central Processing Unit)으로 구현되며, 카메라부(100)의 전반적인 동작을 제어한다.
제2 메모리부(124)는 렌즈부(108)를 통해 입력된 지문 이미지를 임시적으로 저장하기 위해 복수개의 버퍼로서, 통상 DRAM(Dynamic Random Access Memory)로 구현될 수 있다.
사용자의 키입력부(132)를 통한 지문인식 모드에서 카메라 셔터가 눌러지지 않은 상황에서는 DSP(114)에서 출력된 이미지 신호는 카메라 제어부(120)를 통해 제2 메모리부(124)에 일정시간 복수개의 간격을 갖는 이미지 프레임으로 지문 이미지가 임시 저장되었다가 카메라제어부(120), DSP(114), 멀티플렉서(MUX)(144), 표시장치(106)의 구동부(148)의 경로를 거쳐서 표시부(150)상에 차례로 표시된다. 이때, 표시부(150)를 통해 렌즈부(108)로 들어오는 지문 이미지를 사용자에 의해 확인할 수 있으며, 미설명부분 146, 138, 142는 각각 COMP 단자, OSD(D/A), 엔코더이다.
ADC(112)는 이미지 센서(110)에서 이득조절된 지문 이미지 신호를 디지털신호로 변환하여 DSP(114)로 출력한다.
DSP(114)는 디지털 변환된 지문 이미지 신호를 고속으로 처리할 수 있게 하며, 휴대폰 제어부(128)의 제어하에 상기 이미지신호를 이미지 압축부(116)로 보낸다.
사용자의 키입력부(132)를 통한 지문인식 모드에서 카메라 셔터가 눌러지면, 이미지 압축부(116)는 카메라제어부(120)의 제어하에 DSP(114)에서 제공되는 디지털 변환된 지문 이미지 신호를 압축포맷(JPEG 포맷 등)으로 변환하고 소정 비율로 압축하여 제1 메모리부(118)에 저장시킨다.
제1 메모리부(118)는 이미지압축부(116)에서 출력된 압축 이미지를 저장하기 위한 메모리로서 플래시 메모리(flash memory)로 구현되며, 메모리 용량에 따라서 촬영된 이미지의 양이 조절된다.
그런 다음, 카메라제어부(120)의 제어에 의해 제1 메모리부(118)에 저장된 압축 지문 이미지를 압축 해제하여 DSP(114)로 제공한다.
또한, 휴대폰부(102)에 구비된 휴대폰 제어부(128)의 제어하에 휴대폰부(102)의 키입력부(132)로부터 입력되는 각종 키에 대응된 신호가 휴대폰 제어부(128)의 제어에 의거하여 전달되면 그에 따른 각종 동작을 수행한다. 여기서, 미설명 부분 126, 130, 136은 각각 RF부, 오디오부, 인터페이스이다.
한편, 상기에서 카메라 제어부(120)와 휴대폰 제어부(128)는 별도로 구성되는 것으로 도시하였으나, 하나의 CPU를 사용하여 단일 칩으로 구현 가능하다.
제3 메모리부(134)는 휴대폰 기능 구현을 위한 각종 동작을 수행하기 위한 프로그램뿐만 아니라 휴대폰 사용에 대한 정당한 권원이 있는 자(예를 들면, 휴대폰 주인 또는 휴대폰 주인으로부터 휴대폰 사용에 대한 권한을 위임받은 자)의 지문 정보를 저장한다. 여기서, 휴대폰 주인에 대한 지문 정보는 기본 포맷으로 저장되나 휴대폰 주인으로부터 휴대폰 사용에 대한 권한을 위임받은 자의 지문 정보는 삭제, 변경, 입력이 가능하여 정보가 변경될 수 있게 한다.
도 2 및 도 3은 도 1의 카메라폰(170)에서 지문 인식부(160)를 나타낸 도면이다.
도 2 및 도 3을 참조하면, 지문 인식부(160)는 사용자의 지문을 인식할 수 있게 소정의 간격을 두고 카메라부(170)의 상부에 형성되어 사용자 엄지 손가락을 얹을 수 있게 하는 지문 인식창(161)과, 일반 카메라 촬영 모드시에는 지문 인식창(161)을 개방시키고 지문 인식 모드시에는 지문 인식창(161)을 폐쇄시켜 지문 인식창(161)의 개폐를 조절하는 지문 인식창(161) 개폐부(162)를 구비한다. 이때, 상기 지문 인식창(161)의 개폐는 휴대폰의 밧데리(138)를 통해 소형 서버 모터(미도시)를 이용하는 전기구동 방식이나 기계구동 방식으로 구현될 수 있다. 또한, 지문 인식창(161)은 빛을 반사시킬 수 있는 투명유리로 내구성을 고려하여 강화유리가 바람직하다. 미설명 부분 111은 플래시(Flash)이다.
지문 인식창(161)이 카메라부(170)를 마주보는 지문 인식창 내면에는 빛이 분산되는 것을 방지하고 빛의 집광을 좋게 하는 광학필름(미도시)이 도포 또는 증착될 수 있다. 이때, 광학필름으로는 편광필름 등이 사용될 수 있으며, 빛의 반사를 이용하는 카메라부(170)를 통해 지문 인식할 때 외부 조명등의 외부 환경의 영향에 벗어나서 지문 인식률을 좋게 한다.
도 2는 지문 인식창(161)이 열려서 통상적인 카메라 촬영을 위한 경우를 나타낸 도면이고, 도 3은 지문 인식창(161)이 닫히고 닫힌 지문 인식창(161)에 사용자의 엄지손가락을 얹어 지문 인식이 가능하게 한 상태를 나타낸 도면이다.
도 4는 도 1의 지문 인식 카메라폰(170)을 이용하여 지문 인식 과정을 나타낸 흐름도이다.
도 4를 참조하면, 사용자가 키입력부(132)를 통해 지문인식 모드를 선택하면 지문 인식창(161)이 닫히게 되고(S201), 사용자는 지문 인식창(161)에 손가락 지문을 얹어 지문 이미지를 입력하게 된다(S202).
이후, 렌즈부(108)를 통해 입력된 지문 이미지는 제2 메모리부(124)에 임시 저장되고(S203), 사용자는 임시 저장된 지문 이미지를 표시부 LCD(150)에 표시된 것을 보면서(S205), 지문 이미지가 정확히 사각창에 들어 왔을 경우 카메라 셔터를 누르게 된다(S204).
이후, 카메라 셔터가 눌러지면 제1 메모리부(118)에 지문 이미지를 저장하게 되면서 지문 이미지의 획득 과정이 이루어진다(S206).
이처럼 카메라부(100)는 지문 인식창(161)에 놓인 손가락의 지문에서 반사되어져 나온 이미지를 렌즈부(108)를 통해 획득한다. 이때, 상기 지문 인식창(161) 아래에 홀로그램막(미도시)를 형성하여 지문 인식창(161)에 놓인 손가락의 지문에서 반사되어져 나온 이미지를 홀로그램막에 투영하여 이미지를 획득하는 홀로그램(Hologram) 방식으로 구현될 수 있다. 또는 지문 인식창(161)이 프리즘 역할을 행하여 프리즘에 입사된 빛의 전반사를 이용하여 지문을 획득하는 프리즘(Prism) 방식으로 구현할 수도 있다. 여기서, 광원은 햇빛 등의 외부 광원을 이용하거나 필요에 따라 내부에 LED 등의 내부 광원이 부가될 수 있다. 상기 LED 등의 내부광원은 플래시(111)를 이용할 수 있다.
카메라 제어부(120)는 제1 메모리부(124)의 저장된 지문 이미지의 특징을 추출하게 된다. 이때, 지문 이미지 특징 추출은 융선을 이용하는 방법과 특징점을 이용하는 방식이 사용될 수 있다. 융섬은 이용하는 인식방법에서는 융선의 방향에 따른 흐름 정도를 수치화하여 특징으로 사용하고, 특징점을 이용하는 인식방법에서는 끝점과 분기점을 특징으로 사용한다. 이를 도 5 내지 도 7을 참조하여 설명하면 다 음과 같다.
도 5는 지문의 형태적 특징을 나타낸 도면이다.
도 5를 참조하면, 지문에 나타나는 여러가지 형태의 선의 흐름을 융선(Ridge)이라 하고, 융선과 융선 사이의 공간을 골(Valley, Furrow)이라 한다. 융선들 사이의 다양한 형태는 여러가지 특징점(Minutiae)을 형성하는데, 그 중 융선이 부드럽게 흐르다가 끊어지는 점을 끝점(Ending point)이라하고, 융선이 부드럽게 흐르다가 두갈래로 갈라지는 점을 분기점(Bifurcation point)이라 한다.
도 6a 내지 도 6f는 융선을 이용하여 지문 이미지의 특징을 추출하는 과정을 나타낸 도면이다.
먼저 도 6a와 같은 지문 이미지가 입력되면 이미지 내에서 곡률이 가장 큰 점을 찾는다. 이점을 중심점이라 하며, 도 6b와 같이 표시한다. 표시된 중심점을 기준으로 융선의 흐름을 계산할 큰 영역을 도 6d와 같이 설정하고, 큰 영역을 일정거리와 방향간격으로 나누어 도 6c와 같이 작은 영역들로 나눈다. 각각의 영역에 대해서 도 6e와 같이 미리 정해놓은 여러방향에 대해 융선의 흐름 정도를 계산하고, 도 6f와 같은 형태로 그 크기를 작은 영역별로 기록하여 특징으로 사용한다.
도 7은 특징점을 사용하여 지문 이미지의 특징을 추출하는 과정을 나타낸 도면이다. 도 7을 참조하면, 입력지문영상을 융선추출에 적합하도록 질을 향상시키는 전처리 과정과 각 융선의 방향성분을 찾아내는 과정, 그리고 융선과 골을 잘 구분하여 이 진화하는 과정과 최종적으로 특징점을 추출하기 위하여 각 융선의 굵기를 1화소(pixel) 두께의 선으로 세선화하는 과정으로 구분된다.
이와 같이 지문 이미지의 특징을 추출한 후, 추출된 이미지를 제3 메모리부에 데이터베이스화된 휴대폰 사용 권한을 갖는자의 지문 이미지와 두 지문 사이의 유사도(similarity)를 측정하는 지문 매칭 과정을 거치게 되는데, 이러한 지문 매칭 과정은 도 8 내지 도 10을 참조하여 설명한다(S208).
도 8은 유선의 흐름을 특징으로 하는 지문 매칭 과정을 나타낸 도면으로, 융선의 흐름을 특징으로 하는 정합에서는 미리 제3 메모리부(134)에 저장된 지문 특징 이미지 정보와 제1 메모리부(134)에 저장된 지문 이미지에서 추출된 지문 특징 이미지 정보의 차이를 비교하여 정합점수로 나타내게 된다.
도 9는 특징점을 특징으로 하는 지문 매칭 과정을 나타낸 도면으로, 미리 제3 메모리부(134)에 저장된 지문 특징 이미지 정보(여기서는 저장된 특징점 정보)와 제1 메모리부(134)에서 저장된 지문 이미지에서 추출된 지문 특징 이미지 정보(여기서는 추출된 특징점 정보)의 각 특징점들의 일치 정도를 점수로 계산하게 된다.
지문 매칭시 시스템 성능을 평가하는 대표적인 방법으로는 타인 수락율(FAR: False Acceptance Ratio)과 본인 거부율(FRR: False Rejection Ratio)이 있다. 여기서, 타인 수락은 등록된 사용자의 지문과는 다른 사용자의 지문이 입력되었음에도 불구하고 동일한 사용자의 지문으로 잘못 판정하는 것이고, 반대로 본인 거부는 등록된 사용자의 지문과 같은 사용자의 지문이 입력되었음에도 불구하고 타인이라 잘못 판정하는 것이다.
도 10은 지문 정합 점수 분포를 나타낸 도면이다.
도 10을 참조하면, 지문 정합 점수분포와 같이 동일인과 타인을 적절히 구분 해내지 못하는 부분이 존재하며, 하나의 임계값을 사용할 경우에는 이부분들이 타인 수락과 본인 거부가 되어 전체 지문인식 성능을 악화시키게 된다. 이경우 이 범위에 대한 판정을 거부함으로써 지문인식 성능을 높일 수 있다.
여기서, 제3 메모리부에 등록된 휴대폰 사용에 대한 정당한 권원이 있는 자가, 예를 들면, 휴대폰 주인의 경우와 같이, 일대일(One-to-One) 형태로 등록된 지문 정보와 입력된 지문 정보을 비교 판단하는 경우를 설명하였다.
이외에도 휴대폰 사용에 대한 정당한 권원이 있는 자는 여러명 있을 수 있다. 따라서, 이경우에는 제3 메모리부(134)에 휴대폰 사용에 대한 정당한 권원이 있는 자, 예를 들면 휴대폰 주인으로부터 휴대폰 사용에 대한 권한을 위임받은 자, 의 지문 정보를 신규 저장하거나, 기존 위임 관계가 끝났을 경우 삭제하거나 변경할 수 있으며, 복수의 위임받은자가 있는 경우 복수개의 정당한 권원이 있는 지문 정보가 저장되게 된다.
이 때에는 지문 인식부(160)를 통해 사용자의 지문 정보를 입력받아 제3 메모리부(134)에 저장된 다수의 정당한 권원이 있는 자의 등록 지문 정보와 일대 다수(One-to-many)의 비교가 이루어지는데, 이는 전술한 일대일 형태의 비교가 순차적으로 복수개 이루어지는 형태로 구현될 수 있다.
이러한 지문 매칭 과정에 따라 동일인 범위내의 지문 정합 점수분포에 있으면 휴대폰 잠금 기능을 해제하여 사용가능하게 하고(S209), 그렇지 않으면 중요 사용기능에 잠금(lock) 기능이 설정되게 된다(S210).
여기서, 휴대폰 락기능은 사용자가 중요하다고 보는 개인 정보들, 가량 문자 메시지 정보, 모바일 뱅킹 관련 인증 정보, 통화 내역 정보 등 각 기능에 대해 개별적으로 설정될 수 있다.
또한, 상기 지문 매칭 과정은 휴대폰 락기능 뿐만 아니라 아이디 및 패스워드를 통한 사용자 인증과정를 거치지 않고 지문 매칭과정으로 대체할 수 있다.
또한, 휴대폰을 중심으로 설명하였으나, 이에 한정되는 것은 아니며 지문인식이 가능할 정도의 고화소 카메라를 장착한 PDA, 게임기 등 휴대용 단말 디바이스에 폭넓게 적용될 수 있다.
이상의 설명에서 본 발명은 특정의 실시 예와 관련하여 도시 및 설명하였지만, 특허청구범위에 의해 발명의 사상 및 영역으로부터 벗어나지 않는 한도내에서 다양한 개조 및 변화가 가능하다는 것을 당 업계에서 통상의 지식을 가진자라면 누구나 쉽게 알 수 있을 것이다.
도 1은 본 발명의 바람직한 실시예에 따른 지문인식형 카메라폰을 나타낸 도면이다.
도 2 및 도 3은 도 1의 카메라폰에서 지문 인식부를 나타낸 도면이다.
도 4는 도 1의 지문 인식 카메라폰을 이용하여 지문 인식 과정을 나타낸 흐름도이다.
도 5는 지문의 형태적 특징을 나타낸 도면이다.
도 6a 내지 도 6f는 융선을 이용하여 지문 이미지의 특징을 추출하는 과정을 나타낸 도면이다.
도 7은 특징점을 사용하여 지문 이미지의 특징을 추출하는 과정을 나타낸 도면이다.
도 8은 유선의 흐름을 특징으로 하는 지문 매칭 과정을 나타낸 도면이다.
도 9는 특징점을 특징으로 하는 지문 매칭 과정을 나타낸 도면이다.
도 10은 지문 정합 점수 분포를 나타낸 도면이다.

Claims (17)

  1. 카메라가 장착된 휴대용 단말기에 있어서,
    소정의 간격을 두고 상기 카메라의 상부에 형성되어 사용자 손가락을 얹을수 있게 하는 지문 인식창과, 일반 카메라 촬영 모드시에는 상기 지문 인식창을 개방시키고, 지문 인식 모드시에는 상기 지문 인식창을 폐쇄시켜 상기 지문 인식창의 개폐를 조절하는 지문 인식창 개폐부로 이루어지는 지문 인식부와,
    상기 지문 인식부의 지문 이미지를 캡쳐하는 상기 카메라와,
    상기 카메라를 통해 켭쳐된 지문 이미지와 이미 등록된 지문 이미지와 이미지 매칭을 행하는 이미지 매칭부를 포함하고;
    상기 이미지 매칭부에서 이미지가 매칭되면 상기 휴대용 단말기의 사용 인증 또는 잠금 해제를 행하고, 그렇지 않으면 사용자 잠금 기능을 설정하는 것을 특징으로 하는 휴대용 단말기.
  2. 삭제
  3. 제1항에 있어서,
    상기 지문 인식창은 강화유리인 것을 특징으로 하는 휴대용 단말기.
  4. 제1항에 있어서,
    상기 지문 인식창에 빛이 분산되는 것을 방지하고 빛의 집광을 좋게 하는 광학필름이 형성되는 것을 특징으로 하는 휴대용 단말기.
  5. 제1항에 있어서,
    상기 카메라와 마주보는 상기 지문 인식창의 하부면에 홀로그램막을 형성하는 것을 특징으로 하는 휴대용 단말기.
  6. 제1항에 있어서,
    상기 카메라에 플래시를 형성하는 것을 특징으로 하는 휴대용 단말기.
  7. 제1항에 있어서,
    상기 카메라를 통해 캡쳐된 지문 이미지를 표시창에서 나타내기 위해 임시적으로 저장하는 제2 메모리부와,
    상기 카메라를 통해 캡쳐된 지문 이미지를 압축포맷으로 변환하고 소정 비율로 압축하여 저장하는 제1 메모리부와,
    상기 휴대용 단말기의 사용에 대한 정당한 권원이 있는 자의 지문 이미지를 저장하는 제3 메모리부를 포함하는 것을 특징으로 하는 휴대용 단말기.
  8. 제7항에 있어서,
    상기 제3 메모리부에 저장되는 지문 이미지는 삭제, 추가할 수 있는 것을 특징으로 하는 휴대용 단말기.
  9. 제7항에 있어서,
    상기 제1 메모리부의 저장된 지문 이미지의 특징 추출은 융선을 이용하는 방법 또는 특징점을 이용하는 방법인 것을 특징으로 하는 휴대용 단말기.
  10. 카메라가 장착된 휴대용 단말기에서,
    (a) 상기 카메라의 상부에 설치된 지문 인식창이 닫히고 닫힌 지문 인식창에 사용자의 손가락을 얹어 지문 인식이 가능하게 하여 상기 사용자가 지문인식 모드를 선택하는 단계와,
    (b) 상기 카메라를 통해 사용자의 지문 이미지를 캡쳐하는 단계와,
    (c) 상기 카메라를 통해 켭쳐된 지문 이미지와 이미 등록된 지문 이미지와 이미지 매칭을 행하는 단계와,
    (d) 상기 이미지가 매칭 단계에서 매칭되면 상기 휴대용 단말기의 잠금을 해제하고, 그렇지 않으면 상기 휴대용 단말기의 잠금 기능을 설정하는 단계를 포함하는 것을 특징으로 하는 휴대용 단말기의 보안 방법.
  11. 삭제
  12. 제10항에 있어서,
    제1 메모리부를 통해 상기 카메라를 통해 캡쳐된 지문 이미지를 압축포맷으로 변환하고 소정 비율로 압축하여 저장하는 단계와,
    상기 저장전에 제2 메모리부를 통해 상기 카메라를 통해 캡쳐된 지문 이미지를 표시창에서 나타내기 위해 임시적으로 저장하는 단계
    를 더 포함하는 것을 특징으로 하는 휴대용 단말기의 보안 방법.
  13. 제10항에 있어서,
    상기 캡쳐된 지문 이미지의 특징을 추출하는 단계를 더 포함하고, 지문 이미지 특징 추출은 지문의 융선을 이용하는 방법 또는 지문의 특징점을 이용하는 방법 중의 어느 하나를 사용하는 것을 특징으로 하는 휴대용 단말기의 보안 방법.
  14. 제10항에 있어서,
    상기 이미 등록된 지문 이미지를 삭제하거나 새로운 지문 이미지를 더 추가하는 단계를 더 포함하는 것을 특징으로 하는 휴대용 단말기의 보안 방법.
  15. 제14항에 있어서,
    상기 이미지 매칭 단계는 일대일 형태로 등록된 지문 이미지와 캡쳐된 지문 이미지를 비교 판단하는 단계와,
    일대 다수의 형태로 복수의 등록된 지문 이미지와 캡쳐된 지문 이미지를 비교 판단하는 단계를 포함하는 것을 특징으로하는 휴대용 단말기의 보안 방법.
  16. 제10항에 있어서,
    상기 (d) 단계에서 휴대용 단말기의 잠금 기능은 사용자 선택에 따라 각 기능에 따라 개별적으로 설정되는 것을 특징으로 하는 휴대용 단말기의 보안 방법.
  17. 제10항에 있어서,
    사용자 인증 과정을 아이디 및 패스워드를 입력하지 않고 상기 (c) 단계의 지문 매칭 과정으로 대체하는 것을 특징으로 하는 휴대용 단말기의 보안 방법.
KR1020090038480A 2009-04-30 2009-04-30 카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법 KR101053197B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090038480A KR101053197B1 (ko) 2009-04-30 2009-04-30 카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법
PCT/KR2009/002323 WO2010126190A1 (ko) 2009-04-30 2009-05-01 카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090038480A KR101053197B1 (ko) 2009-04-30 2009-04-30 카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법

Publications (2)

Publication Number Publication Date
KR20100119390A KR20100119390A (ko) 2010-11-09
KR101053197B1 true KR101053197B1 (ko) 2011-08-01

Family

ID=43032321

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090038480A KR101053197B1 (ko) 2009-04-30 2009-04-30 카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법

Country Status (2)

Country Link
KR (1) KR101053197B1 (ko)
WO (1) WO2010126190A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102158696B1 (ko) * 2014-05-09 2020-09-22 엘지전자 주식회사 디스플레이 장치 및 제어 방법
CN106471457B (zh) 2014-09-26 2020-07-17 深圳市汇顶科技股份有限公司 指纹传感器
CN106790808A (zh) * 2016-12-22 2017-05-31 上海摩软通讯技术有限公司 一种具有摄像模组的终端及其指纹识别方法
KR20190051409A (ko) * 2017-11-07 2019-05-15 주식회사 엘지화학 시트 및 광학식 지문 인식 장치
CN108681716B (zh) * 2018-05-18 2020-10-13 北京小米移动软件有限公司 指纹解锁方法及装置
CN108595935B (zh) * 2018-05-18 2021-08-31 北京小米移动软件有限公司 指纹解锁方法及装置
CN108334769B (zh) * 2018-05-18 2021-08-31 北京小米移动软件有限公司 指纹解锁方法及装置
CN110930154A (zh) * 2018-09-19 2020-03-27 珠海格力电器股份有限公司 身份验证方法和装置
CN110490038A (zh) * 2019-05-30 2019-11-22 福建知鱼科技有限公司 一种智能屏人像采集系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005115961A (ja) 2004-11-15 2005-04-28 Mizobe Tatsuji 携帯個人認証装置及び同装置によりアクセスが許可される電子システム
KR100674441B1 (ko) 2004-11-25 2007-01-25 삼성전자주식회사 휴대용 무선단말기에서 지문인식을 이용한 문자 입력 장치및 방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100615540B1 (ko) * 2003-03-14 2006-08-25 (주)니트 젠 지문영상 취득장치를 구비한 정보단말기
KR101143786B1 (ko) * 2005-06-16 2012-05-11 엘지전자 주식회사 지문인식 입력장치를 구비하는 휴대용 정보 단말기 및그의 제어방법
KR20070071848A (ko) * 2005-12-30 2007-07-04 브이케이 주식회사 카메라가 구비된 이동통신 단말기의 보안 방법
KR101270379B1 (ko) * 2006-10-18 2013-06-05 삼성전자주식회사 잠금 장치를 구비한 휴대용 단말기의 기능실행 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005115961A (ja) 2004-11-15 2005-04-28 Mizobe Tatsuji 携帯個人認証装置及び同装置によりアクセスが許可される電子システム
KR100674441B1 (ko) 2004-11-25 2007-01-25 삼성전자주식회사 휴대용 무선단말기에서 지문인식을 이용한 문자 입력 장치및 방법

Also Published As

Publication number Publication date
WO2010126190A1 (ko) 2010-11-04
KR20100119390A (ko) 2010-11-09

Similar Documents

Publication Publication Date Title
KR101053197B1 (ko) 카메라가 장착된 휴대용 단말기 및 이를 이용한 보안 방법
RU2644076C1 (ru) Способ передачи численных значений, терминал и облачный сервер
JP4387643B2 (ja) 個人認識機能付き処理装置
Derawi et al. Fingerprint recognition with embedded cameras on mobile phones
US10423772B2 (en) Electronic devices with improved iris recognition and methods thereof
US8224128B2 (en) Portable information terminal device
KR100910289B1 (ko) 휴대 정보 단말 장치
US7519281B2 (en) Electronic device with camera and fingerprint security function
WO2019214201A1 (zh) 活体检测方法及装置、系统、电子设备、存储介质
US20030228883A1 (en) Information device
CN106934320B (zh) 指纹识别方法及装置
JPWO2007119818A1 (ja) 機能ロック解除システム、機能ロック解除方法、および機能ロック解除用プログラム
JP2007135149A (ja) 移動携帯端末
JP2005288178A (ja) 指紋画像の焦点調整方法及び指紋検出装置
JP2003317100A (ja) 情報端末装置、認証システム、及び登録・認証方法
KR100674441B1 (ko) 휴대용 무선단말기에서 지문인식을 이용한 문자 입력 장치및 방법
US20080080751A1 (en) Method of capturing fingerprint image
KR20150003501A (ko) 전자 디바이스 및 전자 디바이스에서 지문을 이용한 인증 방법
KR20040048114A (ko) 휴대용 단말기에서 다중생체인식을 통한 인증 장치 및 방법
KR101588225B1 (ko) 이동 통신 단말기의 카메라에서의 홍채 데이터 등록 및 인증 장치와 그 방법
KR101000130B1 (ko) 얼굴인식 가능한 단말기 및 그의 얼굴인식 방법
CN108830194B (zh) 生物特征识别方法及装置
CN107301404A (zh) 指纹录入方法及装置
JP2007249985A (ja) 操作機器
JP7379213B2 (ja) 画像照合装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140710

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150703

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160715

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180725

Year of fee payment: 8