KR102555192B1 - 지문 이미지의 손상 데이터 억제 - Google Patents

지문 이미지의 손상 데이터 억제 Download PDF

Info

Publication number
KR102555192B1
KR102555192B1 KR1020197021982A KR20197021982A KR102555192B1 KR 102555192 B1 KR102555192 B1 KR 102555192B1 KR 1020197021982 A KR1020197021982 A KR 1020197021982A KR 20197021982 A KR20197021982 A KR 20197021982A KR 102555192 B1 KR102555192 B1 KR 102555192B1
Authority
KR
South Korea
Prior art keywords
fingerprint
data
image
captured
captured image
Prior art date
Application number
KR1020197021982A
Other languages
English (en)
Other versions
KR20190126296A (ko
Inventor
모르텐 한센
미카엘 사스 한센
안 후스트
Original Assignee
핑거프린트 카드즈 아나카툼 아이피 에이비
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 핑거프린트 카드즈 아나카툼 아이피 에이비 filed Critical 핑거프린트 카드즈 아나카툼 아이피 에이비
Publication of KR20190126296A publication Critical patent/KR20190126296A/ko
Application granted granted Critical
Publication of KR102555192B1 publication Critical patent/KR102555192B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/30—Noise filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G06V40/1306—Sensors therefor non-optical, e.g. ultrasonic or capacitive sensing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Quality & Reliability (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Input (AREA)
  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 지문 감지 시스템의 지문 센서(102)에 의해 캡쳐 이미지에 있는 손상 데이터(120)를 억제할 수 있는 지문 감지 시스템(101)의 방법 및 상기 방법을 수행하는 지문 감지 시스템(101)에 관한 것이다.

Description

지문 이미지의 손상 데이터 억제
본 발명은 지문 감지 시스템의 지문 센서에 의해 캡쳐 이미지 내에 있는 손상 데이터를 억제하는 지문 감지 시스템의 방법 및 상기 방법을 수행하는 지문 감지 시스템에 관한 것이다.
스마트 폰, 랩톱, 리모트 컨트롤, 태블릿, 스마트 카드 등과 같은 전자 장치는 지문 인식을 이용해, 가령, 사용자가 장치에 액세스하거나, 전자 장치를 사용하여 수행된 트랜잭션을 승인하거나, 전자 장치를 통해 서비스에 액세스하기 위해 사용자를 승인할 수 있다.
따라서, 예를 들어, 스마트 폰인 전자 장치에는 센서가 지문의 이미지를 캡쳐하여 기록된 지문을 미리 저장된, 인증된 지문 템플레이트와 비교하기 위해 사용자가 손가락을 대는 지문 센서가 설비되어 있다. 기록된 지문이 미리 저장된 템플레이트와 일치하면, 사용자는 인증되고 스마트 폰은 잠금 모드에서 사용자가 스마트 폰에 액세스할 수 있는 잠금 해제 모드로 전환하는 것과 같은 적절한 조치를 수행한다.
지문 센서의 경우, 사용자의 손가락과 센서의 (픽셀로 알려진) 지문 감지소자 사이에 있는 재료에 대한 요구사항은 두께의 정확도 및 가령 정전용량 센서에 대한 유전체 동질성과 같은 재료적 특성 측면에서 높다. 정전용량 센서의 경우, 사용자가 (예를 들어, 유리 또는 세라믹으로 덮인) 스마트 폰의 지문 감지 영역을 터치하면, 지문 감지 영역의 표면과 스마트 폰 내부에 배치된 지문 센서 사이에 커패시터가 형성된다. 사용자가 접촉한 표면과 각 픽셀에서의 센서 사이의 정전용량을 측정함으로써, 사용자 손가락의 지문 센서에 의해 캡쳐 이미지로부터 사용자의 지문을 도출할 수 있다.
그러나, 여러 가지 이유로 인해, 준-정적 노이즈(quasi-stationary noise)의 형태로 손상 데이터가 지문 센서에 의해 캡쳐 이미지에 있을 수 있으며, 이는 캡쳐 이미지로부터 지문을 도출하는 것을 더 어렵게 만든다.
정전용량 센서의 경우, 이러한 유형의 노이즈를 용량성 노이즈라고 하며, 예를 들어, 지문 감지 영역의 표면과 지문 센서 사이의 재료 적층 높이, 가령 스크래치의 형태의 지문 감지 영역의 손상된 표면, 또는 적층물과 감지 영역 사이의 재료 접착제 내의 불순물과 같은 재료 특성에 있어 센서 뒤틀림 또는 불완전성으로 인한 손상으로 인해 발생할 수 있고, 캡쳐 이미지에 반복적인 노이즈 패턴을 초래할 수 있다. 용량성 노이즈를 제거하기 위해, μm 미만의 정밀도와 극도로 순수한 재료가 필요할 수 있다. 실제 시나리오에서, 재료의 이와 같은 정밀도는 달성하기가 어렵다.
본 발명의 목적은 당업계의 이러한 문제점을 해결하거나 적어도 완화하여, 지문 센서에 의해 캡쳐 이미지내 손상 데이터를 적어도 부분적으로 억제하는 개선된 방법을 제공하는 것이다.
이 목적은 본 발명의 제 1 태양에서 지문 감지 시스템의 지문 센서에 의해 캡쳐된 이미지에 있는 손상 데이터를 억제하는 지문 감지 시스템의 방법에 의해 달성된다. 상기 방법은 상기 지문 센서가 받은 손상에 의해 야기된 손상 데이터를 포함한, 상기 지문 센서와 접촉한 물체의 적어도 하나의 이미지를 캡쳐하는 단계; 상기 손상 데이터를 포함하는 상기 캡쳐 이미지를 저장하는 단계; 상기 지문 센서와 접촉한 손가락 지문의 적어도 하나의 추가 이미지를 캡쳐하는 단계; 및 지문의 상기 추가 캡쳐 이미지에서 상기 손상 데이터를 적어도 부분적으로 억제하기 위해 상기 손상 데이터를 포함하는 저장된 캡쳐 이미지로 지문의 추가 캡쳐 이미지를 처리하는 단계를 포함한다.
이 목적은 지문 센서 및 처리 유닛을 포함하는 지문 감지 시스템의 방법에 의해 본 발명의 제 2 태양에서 달성된다. 지문 감지 시스템은 상기 지문 감지 시스템의 지문 센서에 의해 캡쳐된 이미지에 있는 손상 데이터를 억제하도록 구성된다. 지문 센서는 상기 지문 센서와 접촉하는 물체의 적어도 하나의 이미지를 캡쳐하도록 구성되며, 상기 이미지는 지문 센서가 겪게되는 손상으로 인한 손상 데이터를 포함한다. 처리 유닛은 손상 데이터를 포함하는 캡쳐 이미지를 저장하고, 지문 센서와 접촉하는 손가락의 지문의 적어도 하나의 추가 이미지를 캡쳐하며, 상기 지문의 추가 캡쳐 이미지에서 상기 손상 데이터를 적어도 부분적으로 억제하기 위해 지문의 추가 캡쳐 이미지를 손상 데이터를 포함하는 저장된 캡쳐 이미지로 처리하도록 구성된다.
상술한 바와 같이, 준-정적 노이즈 형태의 손상 데이터는 지문 센서에 의해 캡쳐 이미지에 있을 수 있으며, 이는 캡쳐 이미지로부터의 지문의 도출을 더 어렵게 만든다.
본 발명은 센서에 접촉하는 물체의 이미지를 지문 센서가 캡쳐함으로써 캡쳐 이미지에 있는 그러한 손상 데이터를 유리하게 억제한다. 물체는 소위 고무 스탬프 형태의 인공 손가락이거나 사용자의 실제 손가락일 수 있다. 이하에서, 물체는 사용자의 실제 손가락으로 예시될 것이다.
여러 이미지가 캡쳐될 수 있으며, 이러한 이미지가 결합되어 손상 데이터를 나타내는 단일 이미지를 생성하는 것에 유의해야 한다.
이어서, 지문 시스템이 배치된 전자 장치의 사용자가 예를 들어 스마트 폰인 전자 장치와, 가령 지문 센서가 스마트 폰의 잠금을 해제하도록 배열된 스마트 폰의 홈 버튼에 엄지 손가락을 가압함으로써, 인증 프로세스를 수행하기를 원할 때, 지문 센서는 사용자의 지문의 추가 이미지를 캡쳐한다.
손상 데이터를 포함하는 이전에 저장된 이미지가 메모리로부터 인출되고, 처리 유닛은 추가 캡쳐 이미지로부터 손상 데이터를 억제 또는 심지어 삭제하기 위해 손상 데이터를 포함하는 고무 스탬프의 저장된 캡쳐 이미지를 처리한다.
이점적으로, 지문이 손상되지 않으면서, 추가 캡쳐 이미지에 있는 손상 데이터가 억제된다.
일 실시예에서, 고무 스탬프는 손상 데이터를 포함하는 단일 이미지를 생성하고 저장하기 위해 사용된다. 이는 지문 센서의 제조 및 테스트 중에 수행될 수 있다.
그러나, 손상 데이터를 포함하는 단일 이미지를 생성하기 위해 사용자의 손가락이 이용되는 실시예에서, 많은 이점을 얻는다.
첫째, 사용자의 손가락을 이용한 등록 프로세스를 적용함으로써, 스탬프를 이용한 "오프라인" 제조 테스트를 수행할 필요가 없다; 손상 데이터를 포함하는 이미지의 캡쳐는 센서가 배치된 전자 장치의 구성시 또는 추후에 사용자에 의해 언제든지 수행될 수 있다.
예를 들어, 사용자가 센서의 감지 영역의 표면을 터치할 때마다, 예를 들어 사용자가 가령 스마트 폰인 전자 장치를 잠금 해제하고자 할 때 하나 또는 두 개의 이미지가 캡쳐되고, 충분한 개수의 이미지들이 캡쳐되었다고 지문 시스템의 처리 유닛이 판단할 때, 단일 이미지가 생성되어 저장되는 것이 고려될 수 있다. 이점적으로, 사용자는 손상 데이터를 포함하는 이미지를 생성하기 위해 지루한 등록 프로세스에 관여할 필요가 없을 것이다.
둘째, "온라인" 손가락 등록 프로세스는 유리하게도 저장된 이미지의 업데이트를 용이하게 한다. 전자 장치는 예를 들어 센서를 덮는 커버 유리에 흠집이나 균열 형태의 마모를 받기 때문에, 센서가 받는 손상은 시간에 따라 변할 수 있다.
이는 새로운 손상 데이터를 포함하는 단일 이미지를 생성하고 저장하기 위한 새로운 이미지 세트를 캡쳐함으로써 극복될 수 있다. 대안으로, 새로운 이미지가 저장된 단일 이미지와 결합되는 전자 장치의 정상적인 사용자 동작 중에 새로운 이미지가 반복적으로 캡쳐되고, 저장된 이미지는 센서가 받는 변화하는 손상을 반영하여 시간에 따라 변한다.
따라서, 지문 감지 시스템을 구현하는 전자 장치의 정상 동작 동안 사용자의 손가락의 이미지를 캡쳐하는 큰 이점은 (임의의 미세 조정이 가능한 경우) 손상 데이터의 평가가 시간이 지남에 따라 점차 개선될 수 있다는 것이다. 또한, 이러한 접근법의 또 다른 이점은 시간이 지남에 따라 변화하는 손상(즉, 사용자가 스마트 폰의 커버 글래스를 파손하는 손상)이 보상될 수 있다는 것이다.
또한, 일 실시예에서, 이미지 픽셀과 관련된 신뢰 메트릭이 계산되어 저장된 단일 이미지에 이용되는 것으로 고려될 수 있다. 저장된 이미지가 특정 영역에서 충분히 신뢰할만한 것으로 고려되지 않은 경우, 즉 특정 영역에 대한 신뢰도가 낮 으면, 추가 캡쳐 이미지의 손상 데이터를 억제할 때 해당 영역이 사용되지 않는다. 신뢰 메트릭은 픽셀별로 또는 픽셀 클러스터에 대해 계산될 수 있다. 전체 저장된 이미지에 대해 전체 신뢰 메트릭이 계산되는 것도 또한 고려될 수 있다.
여전히 일 실시예에서, 지문 감지 시스템은 손상 데이터가 억제된 지문의 추가 캡쳐 이미지로부터 지문을 추출하고, 캡쳐 이미지의 지문을 하나 이상의 인가된 사전 저장된 지문 템플레이트와 비교하며, 캡쳐 이미지의 추출된 지문이 하나 이상의 인가된 사전 저장된 지문 템플레이트와 일치하는 것으로 간주되는 경우 사용자를 인증한다.
또 다른 태양으로, 본 명세서에 기재된 지문 감지 시스템을 포함하는 전자 장치가 제공된다. 전자 장치는 예를 들어 스마트 폰, 랩탑, 리모트 컨트롤, 태블릿, 스마트 카드, 스마트 워치(smart watch) 등의 형태 또는 지문 감지를 이용하는 임의의 다른 유형의 현재 또는 미래의 유사하게 구성된 장치일 수 있다.
지문 인식 시스템에 포함된 처리 유닛에서 컴퓨터 실행 가능 명령어가 실행될 때, 지문 인식 시스템이 상기 기술된 방법을 수행하게 하는 컴퓨터 실행 가능 명령어를 포함하는 컴퓨터 프로그램이 더 제공된다.
또한, 상기 컴퓨터 프로그램이 구현된 컴퓨터 판독가능 매체를 포함하는 컴퓨터 프로그램 제품이 더 제공된다.
본 발명의 다른 실시예가 상세한 설명에서 설명될 것이다.
일반적으로 청구 범위에서 사용된 모든 용어는 달리 명시적으로 정의되지 않는 한, 기술 분야에서의 통상적인 의미에 따라 해석되어야 한다. "a/an/요소, 장치, 구성 요소, 수단, 단계 등"에 대한 모든 언급은 달리 명시되지 않는 한, 구성 요소, 장치, 수단, 단계 등의 적어도 하나의 예를 언급하는 것으로 공개적으로 해석되어야 한다. 본원에 개시된 임의의 방법의 단계들은 명시적으로 언급되지 않는 한, 개시된 순서대로 수행될 필요는 없다.
본 발명의 내용에 포함됨.
첨부 도면을 참조로 본 발명을 예로서 설명한다.
도 1은 본 발명이 구현될 수 있는 스마트 폰 형태의 전자 장치를 도시한 것이다.
도 2는 사용자가 손가락을 놓는 지문 센서의 도면을 도시한 것이다.
도 3은 일 실시예에 따른 지문 감지 시스템의 일부인 지문 센서를 도시한 것이다.
도 4는 용량성 지문 감지의 원리를 도시한 것이다.
도 5는 센서에 접촉하는 물체가 고무 스탬프인 지문 센서에 의해 캡쳐 이미지를 도시한 것이다.
도 6a 내지 도 6c는 여러 가지로 손상된 지문 센서의 상이한 개인들에 의해 캡쳐 이미지를 예시한 것이다.
도 7은 도 5의 캡쳐 이미지를 도시한 것이나, 여기서 이미지는 손상 데이터를 더 포함한다.
도 8은 본 발명의 실시예에 따라 캡쳐 이미지내 손상 데이터를 억제하는 방법의 흐름도를 도시한 것이다.
도 9는 본 발명의 다른 실시예에 따라 캡쳐 이미지내 손상 데이터를 억제하는 방법의 흐름도를 도시한 것이다.
도 10a 내지 도 10d는 손상 데이터를 포함하는 4개의 캡쳐 이미지를 도시한 것이다.
도 11은 도 10a 내지 도 10d의 복수의 캡쳐된 지문 이미지가 결합되어 단일 이미지를 생성하는 것을 도시한 것이다.
도 12는 손상 데이터가 제거된 도 11의 캡쳐된 지문을 도시한 것이다.
도 13은 본 발명의 다른 실시예에 따라 캡쳐 이미지내 손상 데이터를 억제하는 방법의 흐름도를 도시한 것이다.
도 14는 본 발명의 또 다른 실시예에 따라 캡쳐 이미지내 손상 데이터를 억제하는 방법의 흐름도를 도시한 것이다.
이하, 본 발명의 특정 실시예가 도시된 첨부 도면을 참조로, 본 발명을 보다 상세하게 설명한다. 그러나, 본 발명은 많은 상이한 형태로 구현될 수 있으며, 본 명세서에 나타낸 실시예에 한정되는 것으로 해석되어서는 안되며; 오히려, 이들 실시예는 본 개시가 철저하고 완전하며 당업자에게 본 발명의 범위를 충분히 전달할 수 있도록 예로서 제공된다. 동일한 번호는 명세서 전반에 걸쳐 동일한 요소를 나타낸다.
도 1은 본 발명이 구현될 수 있는 스마트 폰(100) 형태의 전자 장치를 도시한 것이다. 스마트 폰(100)에는 지문 센서(102) 및 터치 스크린 인터페이스(106)를 갖는 디스플레이 유닛(104)이 설비되어 있다. 지문 센서(102)는, 예를 들어, 이동 전화(100)의 잠금 해제 및/또는 이동 전화(100)를 이용해 수행되는 트랜잭션을 승인하는 등에 사용될 수 있다. 지문 센서(102)는 대안으로 이동 전화(100)의 배면에 배치될 수 있다. 지문 센서(102)는 디스플레이 유닛/터치 스크린에 통합되거나 스마트 폰 홈 버튼의 일부를 형성할 수 있다 .
본 발명의 실시예에 따른 지문 센서(102)는 랩탑, 리모트 컨트롤, 태블릿, 스마트 카드, 스마트 워치 등과 같은 다른 유형의 전자 장치, 또는 지문 감지를 이용한 현재 또는 미래의 임의의 다른 유형의 유사하게 구성된 장치에 구현될 수 있음이 이해된다.
도 2는 사용자가 손가락(201)을 두는 지문 센서(102)의 다소 확대된 도면을 도시한 것이다. 용량성 감지 기술을 사용하는 경우, 지문 센서(102)는 복수의 감지소자를 포함하도록 구성된다. (또한 픽셀로 표시되는) 단일 감지 소자는 도 2에 참조 번호 202로 표시된다.
본 발명은, 예를 들어, 광학 또는 초음파 감지와 같은 다른 지문 감지 기술에도 동일하게 적용될 수 있음이 주목된다.
도 3은 지문 감지 시스템(101)의 일부인 지문 센서(102)를 도시한 것이다. 지문 감지 시스템(101)은 지문 센서(102) 및 상기 지문 센서(102)를 제어하고 캡쳐된 지문을 분석하기 위한 마이크로 프로세서와 같은 처리 유닛(103)을 포함한다. 지문 감지 시스템(101)은 메모리(105)를 더 포함한다. 지문 감지 시스템(101)은 일반적으로 도 1에 예시된 바와 같이 전자 장치(100)의 일부를 형성한다. OTP(One-Time Programmable) 메모리, 플래시 메모리 또는 랜덤 액세스 메모리(RAM)와 같은 로컬 메모리(108)가 센서 다이에 내장될 수 있다.
이제, 지문 센서(102)와 접촉하는 물체에, 센서(102)는 캡쳐된 지문을 메모리(105)에 사전 저장된 하나 이상의 인증된 지문 템플레이트와 비교함으로써 물체가 인증된 사용자의 지문인지 여부를 처리 유닛(103)이 판단하도록 물체의 이미지를 캡쳐할 것이다.
지문 센서(102)는 예를 들어 용량성, 광학, 초음파 또는 열 감지 기술을 포함하는 임의의 종류의 현재 또는 장래 지문 감지 원리를 이용하여 구현될 수 있다. 현재, 용량성 감지는 크기 및 전력 소비가 중요한 응용 분야에서 가장 일반적으로 사용된다. 용량성 지문 센서는 지문 센서(102)의 표면 상에 배치된 다수의 감지 소자(202)와 손가락(201) 사이의 커패시턴스의 지표를 제공한다(도 2 참조). 지문 이미지의 획득은 전형적으로 2차원 방식으로 배열된 복수의 감지 소자(202)를 포함한 지문 센서(102)를 이용해 수행된다.
일반적인 인증 프로세스에서, 사용자는 센서가 사용자의 지문 이미지를 캡쳐하기 위해 센서(102) 상에 손가락(201)을 올린다. 처리 유닛(103)은 캡쳐된 지문을 평가하고 메모리(105)에 저장된 하나 이상의 인증된 지문 템플레이트과 비교한다. 기록된 지문이 미리 저장된 템플레이트과 일치하면, 사용자는 인증되고 처리 유닛(103)은 일반적으로 잠금 모드에서 사용자가 스마트 폰(100)에 대한 액세스가 허용되는 잠금 해제 모드로의 전환과 같은 적절한 동작을 스마트 폰(100)이 수행하도록 명령할 것이다.
도 3을 다시 참조하면, 지문 감지 시스템(101)에 의해 수행되는 방법의 단계들은 실제로 RAM(Random Access Memory), 플래시 메모리 또는 하드 디스크 드라이브와 같은 마이크로 프로세서와 관련된 저장 매체(105)에 다운로드된 컴퓨터 프로그램(107)을 실행하도록 구성된 하나 이상의 마이크로 프로세서의 형태로 구현된 처리 유닛(103)에 의해 수행된다. 처리 유닛(103)은 컴퓨터 실행 가능한 명령어들을 포함하는 적절한 컴퓨터 프로그램(107)이 저장 매체(105)에 다운로드되고 처리 유닛(103)에 의해 실행될 때 지문 감지 시스템(101)이 실시예들에 따른 방법을 수행하게 하도록 구성된다. 대안으로, 컴퓨터 프로그램(107)은 DVD(Digital Versatile Disc) 또는 메모리 스틱(memory stick)과 같은 적절한 컴퓨터 프로그램 제품에 의해 저장 매체(105)로 전송될 수 있다. 또 다른 대안으로서, 컴퓨터 프로그램(107)은 네트워크를 통해 저장 매체(105)에 다운로드될 수 있다. 처리 유닛(103)은 대안으로 디지털 신호 프로세서(DSP), 주문형 집적 회로(ASIC), 필드 프로그래머블 게이트 어레이(FPGA), 복합 프로그래머블 로직 디바이스(CPLD) 등의 형태로 구현될 수 있다. 처리 유닛(103)에 의해 제공되는 기능의 전부 또는 일부가 지문 센서(102)와 적어도 부분적으로 통합될 수 있음을 이해해야 한다.
도 4는 이전에 논의된 바와 같이 용량성 지문 감지의 원리를 보여준다. 사용자가 손가락(201)으로 스마트 폰의 지문 감지 영역의 표면(110)을 접촉하면(통상적으로 홈 버튼을 접촉하면), 지문 감지 영역의 표면(110)과 스마트폰 내부에 배치된 지문 센서(102) 사이에 커패시터(C)가 형성된다. 표면(110)과 지문 센서(102) 사이의 재료(111)는, 예를 들어, 유리 또는 세라믹으로 구성될 수 있다.
사용자에 의해 접촉된 표면(110)과 센서(102) 사이의 커패시턴스를 측정함으로써, 사용자의 지문은 사용자의 지문(201)의 지문 센서(102)에 의해 캡쳐 이미지로부터 도출될 수 있다.
지문 감지 영역의 표면(110)과 지문 센서(102) 사이의 재료(111)의 적층 높이의 변화, 손상된 표면(110), 센서 뒤틀림, 재료(111)의 속성에 있어 일반적인 불완전성과 같은 다양한 손상으로 인해, 지문 센서(102)에 의해 캡쳐 이미지에 준-정적 노이즈가 있게 되어 캡쳐 이미지로부터 지문을 도출하는 것을 더 어렵게 한다. 유사한 잡음이 또한 광학 또는 초음파 지문 감지 기술을 사용하는 경우에도 나타난다.
캡쳐한 이미지에서 이러한 노이즈 또는 손상 데이터를 제거하는 것이 바람직하다.
도 4를 다시 참조하면, 지문 센서(102)의 제조 및 테스트 동안, 통상 (평평한) 고무 스탬프라고 하는 물체가 실제 손가락 대신에 스마트 폰의 지문 감지 영역의 표면(110)에 적용될 수 있다. 이러한 고무 스탬프는 전형적으로 영역(110) 및 그에 대응하여 지문 센서(102)의 모든 픽셀을 완전히 덮는다. 이러한 고무 스탬프는 센서(102)에 적절하게 높은 커패시턴스를 제공하기 위해 전형적으로 전기 전도성이고 접지에 연결된다. 바람직하게는, 고무 스탬프에 의해 생성된 총 커패시턴스는 일반적인 인간 손가락의 경우와 동일해야 한다.
도 5를 참조하면, "완벽한" 센서(102), 표면(110) 및 재료(111)에 대해, 그러한 고무 스탬프의 센서(102)에 의해 캡쳐 이미지는 이미지 내에 있는 인공물 또는 노이즈 형태의 어떠한 손상 데이터도 없이 균일하게 블랙/그레이인 반면, 센서(102), 표면(110) 및 재료(111)가 손상을 입는 실제에서는, 어떤 유형의 패턴을 형성하는 손상 데이터가 종종 캡쳐 이미지에 존재한다.
그러나, 실제로, 도 6a-c를 참조하면, 지문 센서의 상이한 개개인들은 상이한 손상을 받게 되고, 그 결과 캡쳐된 고무 스탬프 이미지의 상이한 모습을 나타낼 것이다.
도 7은 원형 또는 타원형 패턴으로 배열된 더 명백한 손상 데이터의 형태로 캡쳐 이미지에 있는 손상 데이터(120)의 또 다른 예를 도시한 것이다. 이는 지문 감지 영역의 표면(110)과 지문 센서(102) 사이의 유리/세라믹 물질(111)에서 생성된 에어 포켓 또는 센서와 커버 유리 사이의 접착제 내의 불순물의 결과일 수 있는 패턴이다.
캡쳐 이미지에 있는 손상 데이터의 정확한 외관과 상관없이, 어떠한 손상 데이터는 캡쳐 이미지로부터의 지문 추출을 더욱 어렵게 할 것이다.
도 8은 캡쳐 이미지에 있는 손상 데이터를 억제함으로써이 문제점을 해결하는 본 발명의 일 실시예에 따른 방법의 흐름도를 도시한 것이다. 도 3의 지문 감지 시스템(101)을 또한 참조한다.
제 1 단계(S101)에서, 지문 센서(102)는 센서(102)와 접촉하는 물체의 이미지를 캡쳐한다. 다음으로, 도 5 및 도 7을 참조로, 물체를 고무 스탬프 형태로 예시할 것이며, 그 이미지가 도 5에 도시되어 있다. 여러 개의 이미지가 캡쳐될 수 있고, 이들 이미지가 결합되어 고무 스탬프를 나타내는 단일 이미지(또는 반복된 손가락 접촉의 결합된 결과)를 생성하는 것을 유의해야 한다. 이 이미지는 스마트 폰과 같은 의도된 전자장치(100)에 장착된 지문 시스템(101)의 제조 테스트 중에 캡쳐될 수 있다.
이 예시적인 실시예에서, 캡쳐 이미지는, 도 7에 도시된 외관을 갖는, 즉, 타원형의 손상 데이터(120)를 포함하는 것으로 가정한다.
그 후, 단계(S102)에서, 손상 데이터를 포함하는 캡쳐 이미지(들)는 지문 시스템(101), 예를 들어 센서 다이에 내장된 OTP 메모리(108) 또는 전자 장치(100)의 호스트 메모리에 저장된다. 캡쳐 이미지(들)는 저장되기 전에 다운샘플링되거나 압축된다는 것이 예상된다.
계속해서, 지문 시스템(101)이 배치되어 있는 전자 장치(100)의 사용자가, 예를 들면, 지문 센서(102)가 스마트 폰(100)을 잠금 해제하도록 배치된 스마트 폰의 홈 버튼에 엄지 손가락을 가압함으로써, 가령, 스마트 폰인 전자 장치와 함께 인증 처리를 행하고 싶을 때, 지문 센서(102)는 단계 S103에서 사용자의 지문 이미지를 캡쳐한다.
따라서, 손상 데이터를 포함하는 이전에 저장된 이미지는 처리 유닛(103)에 의해 OTP 메모리(108)로부터 인출된다.
또한, 단계 S104에서, 처리 유닛(103)은 손상 데이터를 포함하는 고무 스탬프의 저장된 캡쳐 이미지로 지문의 캡쳐 이미지를 처리하여 상기 추가 캡쳐 이미지로부터 손상 데이터를 억제하거나 심지어 상쇄한다.
일 실시예에서, 캡쳐된 지문 이미지는 단계 S104에서 손상 데이터(120)를 포함하는 저장된 캡쳐 이미지를 사용하여 처리되며, 여기서 이전에 저장된 고무 스탬프 이미지의 손상 데이터(120)는 캡쳐된 지문 이미지에 있는 대응하는 손상 데이터를 제거하는 반면, 실제 스탬프와 관련된 이미지의 일부는 지문에 영향을 받지 않는다.
처리는 다양한 방법으로 수행될 수 있다: 가령, (a) 손상 데이터(120)를 포함한 저장된 캡쳐 이미지가 캡쳐된 지문 이미지로부터 빼지고, (b) 손상 데이터를 포함하는 저장된 이미지와 캡쳐된 지문 이미지의 선형(또는 비선형) 조합이 수행된다, (c) 손상 데이터에 기초한 지문 데이터의 선형(또는 비선형) 데이터 피팅이 수행되거나, (d) 손상 데이터를 포함하는 저장된 이미지 및 캡쳐 이미지에 기초한 지문의 데이터 모델링이 수행된다.
따라서,이 실시예는 캡쳐 이미지에 있는 손상 데이터를 유리하게 제거하여, 캡쳐된 지문을 미리 저장된 지문 템플레이트과 매칭시키기 위해 캡쳐 이미지로부터 후속 지문 특징 추출을 향상시키는데 크게 도움을 준다.
도 9는 캡쳐 이미지에 있는 손상 데이터를 억제하거나 심지어 상쇄함으로써 상기 주어진 문제를 해결하는 본 발명의 실시예에 따른 또 다른 방법의 흐름도를 도시한 것이다. 도 3의 지문 감지 시스템(101)을 또한 참조한다.
이 특정 실시예에서, 사용되는 물체는 고무 스탬프가 아니라, 예를 들어, 스마트 폰인 전자 장치(100)의 사용자의 실제 손가락이다.
제 1 단계 S101에서, 지문 센서(102)는 센서(102)와 접촉하는 사용자의 손가락의 복수의 이미지를 캡쳐하고, 그 중 4 개가 도 10 a-d에 도시되어 있다.
도 10a-d에서 알 수 있는 바와 같이, 사용자의 실제 지문과 관련하여, 사용자가 모든 캡쳐 이미지에 대해 동일한 방식으로 감지 면적의 표면에 대해 손가락을 누르지 않기 때문에, 이미지가 전혀 서로 동일하지 않을 것이다. 따라서, 도 10a-d에 도시된 4개의 이미지에서, 사용자의 지문은 다르게 위치된 반면, 전자 장치(100) 또는 센서(102) 자체에 의해 야기된 손상 데이터(120)는 캡쳐 이미지에 일정하게 위치된 채 남아 있다.
다시 도 9를 참조하면, 단계 S101에서 사용자의 지문 이미지가 복수 캡쳐된 후, 복수의 이미지 중에서 하나의 이미지가 단계 S101a에서 생성된다. 실제로는, 수십 개의 이미지가 캡쳐되거나 심지어 수백 개까지 캡쳐될 수 있다.
일 실시예에서, 단일 이미지는 복수의 이미지를 조합함으로써 생성된다. 예를 들어, 단일 이미지는 복수의 캡쳐된 지문 이미지를 평균함으로써 생성될 수 있다.
도 11은 복수의 캡쳐된 지문 이미지가 평균화되어 단일 이미지를 생성할 때 단일 이미지가 어떻게 보이는지를 도시한 것이다. 상술한 바와 같이, 복수의 캡쳐 이미지에 대하여, 지문을 나타내는 각각의 캡쳐 이미지의 부분은 이미지마다 상이 할 것이다. 따라서, 평균화 처리는 복수의 이미지에 필터링 효과를 가지며, 고무 스탬프 이미지와 유사한 이미지, 즉 복수의 이미지 전체에 걸쳐 일정하게 유지되는 손상 데이터(120)를 제외하고 균일하게 회색인 이미지를 생성할 것이다. 이것이 중요하다; 단일 이미지를 생성할 때 사용자의 실제 지문과 관련된 이미지의 일부가 "희미하게" 표시되지 않으면, 손상 데이터가 올바르게 억제되지 않고 이후에 캡쳐된 지문 이미지에 한층 더 손상 데이터가 도입될 위험이 있다.
생성된 이미지는 이후의 사용을 위해 단계 S103에서 저장된다.
이제까지 논의된 바와 같이, 지문 시스템(101)이 배치된 전자 장치(100)의 사용자가 전자 장치(100)와 인증 프로세스를 수행하기를 원할 때, 지문 센서(102)는 단계 S103에서 사용자의 지문 이미지의 추가 이미지를 캡쳐한다.
결합되는 복수의 캡쳐된 지문 이미지로부터 생성된 손상 데이터를 포함하는 이전에 저장된 이미지는 처리 유닛(103)에 의해 OTP 메모리(108) 또는 호스트 메모리로부터 인출된다.
그 다음, 단계 S104에서, 처리 유닛(103)은 이 특정 전자 장치(100)를 사용하여 모든 캡쳐 이미지에 존재할 수 있는 손상 데이터를 포함하는 저장된 생성 이미지로 지문의 추가 캡쳐 이미지를 처리하여, 상기 추가 캡쳐 이미지에서 손상 데이터를 억제시킨다.
이 예시적인 실시예에서, 단계 S104에서 처리 유닛(103)에 의한 처리는 추가 캡쳐된 지문 이미지로부터 손상 데이터(120)를 포함하는 캡쳐 이미지를 빼는 것을 포함한다.
다시 - 실제 지문에 속하는 이미지의 일부가 손상 데이터를 나타내는 단일 이미지의 일부가 아니기 때문에 - 이전에 생성되고 저장된 지문 이미지의 손상 데이터(120)는 캡쳐 이미지에 있는 해당 손상 데이터를 제거하는 반면, 지문 이미지에서 실제 지문은 영향을 받지 않는다.
손상 데이터(120)를 포함하는 도 11의 저장된 이미지가 예를 들어 도 10a에 도시된 외관을 갖는 캡쳐 이미지로부터 빼진 후에, 손상 데이터(120)가 유리하게 완전히 삭제된 도 12에 도시된 바와 같이 깨끗한 지문 이미지가 얻어진다.
센서(102)가 겪게되는 손상에 의해 손상 데이터가 있는 이미지의 "온라인" 등록을 위해 사용자의 손가락을 이용하는 이러한 실시예는 고무 스탬프(또는 지문 센서의 감지 영역에 적용되는 적절한 테스트 패턴을 갖는 임의의 다른 테스트 장치)를 사용한 앞서 기술된 "오프라인" 접근법에 비해 많은 이점을 갖는다.
첫째, 도 9의 온라인 손가락 등록 프로세스를 이용함으로써, 도 8을 참조하여 기술된 고무 스탬프를 이용해 오프라인 제조 테스트를 수행할 필요가 전혀 없다; 손상 데이터를 포함하는 이미지의 캡쳐는 센서(102)가 배치된 전자 장치(100)의 구성시 또는 이후에 사용자에 의해 언제든지 수행될 수 있다.
예를 들어, 사용자가 센서(102)의 감지 영역의 표면(100)을 터치할 때마다, 하나 또는 두 개의 이미지가 캡쳐되고, 예를 들어 사용자가 가령 스마트 폰인 전자 장치(100)를 잠금 해제하고자 할 때, 그리고 처리 유닛(103)이 충분한 개수의 이미지를 캡쳐한 것으로 판단한 경우, 단일 이미지가 생성되고 저장되는 것이 고려될 수 있다. 바람직하게는, 사용자는 손상 데이터를 포함하는 이미지를 생성하기 위해 지루한 등록 프로세스에 관여할 필요가 없다.
이러한 맥락에서, 전자 장치(100)는 사용자에게 지문 센서(102)의 감지 영역의 표면(110)에 손가락을 대는 방법을 시각적 및/또는 청각적으로 사용자에게 지시하는 것이 고려될 수 있다.
둘째, 온라인 손가락 등록 프로세스는 유리하게도 저장된 이미지의 업데이트를 용이하게 한다. 전자 장치는, 예를 들어, 센서(102)를 덮는 커버 글래스의 스크래치 및 균열의 형태의 마를 받기 때문에, 센서(102)가 받는 손상은 시간에 따라 변한다.
이는 새로운 손상 데이터를 포함하는 단일 이미지를 생성하고 저장하기 위한 새로운 이미지의 큰 세트를 캡쳐함으로써 극복될 수 있다. 대안으로, 새로운 이미지는 전자 장치(100)의 정상적인 사용자 동작 중에 반복적으로 캡쳐되고, 이 새로운 이미지는 예를 들어 저장된 단일 이미지와 조합, 가령, 평균화되며, 저장된 이미지는 센서가 받는 변화하는 장애를 반영하여 시간에 따라 변한다.
도 13은 이 실시예에 따른 방법의 흐름도를 도시한 것이다. 따라서, 도 9의 처리가 수행되고, 깨끗한 캡쳐 이미지가 단계(S104)에서 얻어진다.
이제, 지문 센서(102)가 변경되는 손상으로, 바람직하게는 전자 장치(100)의 정상적인 사용자 조작 중에 사용자의 지문의 새로운 이미지가 단계 S105에서 반복적으로 캡쳐된다.
그 다음, 이러한 새로운 이미지 또는 이들 이미지로부터의 선택된 정보는 단계 S106a로 표시된 바와 같이 저장된 단일 이미지와 결합되고, 상기 결합에 의해 생성된 업데이트된 단일 이미지가 단계 S106b에서 다시 저장된다.
그 후, 단계 S104에서, 업데이트된 단일 이미지가 캡쳐 이미지의 손상 데이터를 억제하기 위해 사용된다.
따라서, 지문 감지 시스템을 구현하는 전자 장치의 정상 동작 동안 사용자의 손가락의 이미지를 캡쳐하는 큰 이점은 (임의의 미세 조정이 가능하다면) 손상 데이터의 평가가 시간이 지남에 따라 점차 개선될 수 있다는 것이다. 또한, 이러한 접근법의 부가적인 이점은 시간에 따라 변하는 손상(즉, 사용자가 지문 센서를 덮는 유리를 손상시키는 것이)이 보상될 수 있다는 것이다.
또한, 상기 및 상술한 실시예에서, 이미지 픽셀과 관련된 신뢰 메트릭이 단계 S101b에서 계산되고 저장된 단일 이미지를 위해 이용되는 것으로 고려될 수 있다. 저장된 이미지가 단계 S101c에 저장된 신뢰도 메트릭에 의해 표시된 바와 같이 특정 영역에서 충분히 신뢰할만한 것으로 간주되지 않는 경우, 즉 신뢰 메트릭이 특정 영역에 대해 낮으면; 그 영역은 단계 S104에서 캡쳐 이미지의 손상 데이터를 억제할 때 사용되지 않는다. 신뢰는 픽셀별로 또는 픽셀 클러스터에 대해 계산될 수 있다. 전체 저장된 이미지에 대해 전체 신뢰 메트릭이 계산되는 것도 고려될 수 있다.
단계 S105로 나타낸 바와 같이 복수의 새로운 이미지가 캡쳐되면, 이러한 새로운 이미지 또는 이들 이미지로부터의 선택된 정보는 단계 S106c로 나타낸 바와 같이 저장된 신뢰 메트릭을 업데이트하는데 사용되고, 업데이트된 신뢰 메트릭은 단계 S104의 손상 데이터의 억제에서 차후의 사용을 위해 다시 단계 S106d에서 저장된다.
또한, 일 실시예에서, 손상 데이터를 억제하는데 사용되는 저장된 이미지를 더 개선시키기 위해 이미지가 캡쳐되기 전에 적은 양의 유체가 센서의 감지 영역(110)의 표면 및/또는 사용자의 손가락에 도포되는 것이 고려된다. 상기 유체로, 지문의 융선과 골 사이의 구별이 흐려지면서, 손상 데이터가 남아있게 되는데, 이는 차후에 캡쳐 이미지에 있는 손상 데이터를 억제하기 위해 생성되고 사용되는 이미지의 이점이다.
또한, 사용자가 캡쳐 이미지상에 손가락으로 스와이프 및/또는 회전 운동을 수행하는 것으로 고려된다; 이미지의 움직이는 부분은 손가락으로 식별될 수 있는 반면, 이미지의 정지된 부분은 손상 데이터로 식별된다.
도 14는 본 발명의 일 실시예에 따라 손상 데이터가 억제된 후에 사용자가 인증되는 흐름도를 도시한 것이다. 단계 S104까지의 프로세스의 설명을 위해, 단계 S103에서 캡쳐 이미지로부터 손상 데이터가 제거되는 경우, 도 9를 참조한다.
따라서, 단계 104에서 깨끗한 이미지가 달성된 후, 처리 유닛(103)은 단계 S107에서 강화된 캡쳐 이미지로부터 지문을 추출하고, 메모리(105)에 저장된 하나 이상의 이전에 등록된 지문 템플레이트과 비교한다. 추출된 지문이 단계 S108에서 미리 저장된 템플레이트과 일치하면, 사용자는 인증되고 처리 유닛(103)은 전형적으로 스마트 폰(100)인 전자 장치(100)에 지시해 잠김 모드에서 사용자가 스마트 폰(100)에 대한 액세스를 허용하는 잠금 해제 모드로의 전환과 같은 적절한 동작을 수행하게 할 것이다.
일 실시예에서, 손상 데이터를 억제하기 위해 이용되는 이미지가 지문 감지 시스템(101)의 메모리(105)에 저장되며, 메모리는 다(센서(102)와 온칩(on-chip)인 OTP(108)와는 대조적으로) 실제 센서(102)로부터 외부에 있다 바람직하게는, 더 큰 저장 용량을 제공하는 것 외에, 외부 메모리(105)를 사용하는 것은 생성된 이미지를 호스트 장치에 저장하는 것을 방지한다. 또한, 지문 센서(102)를 새로운 센서로 대체할 필요가 있는 상황에서, 새로운 센서를 메모리에 연결시 이미 생성된 이미지가 외부 메모리로부터 획득될 수 있기 때문에, 손상 데이터를 포함하는 저장된 이미지는 추가 테스트를 수행함으로써 다시 도출될 필요가 없다. 그러나, 또한 새 이미지가 캡쳐되고 새 센서에 저장해야 할 수 있다.
상술한 바와 같이, 손상 데이터가 부가적인 타입인 경우, 처리 유닛(103)은 손상 데이터를 포함하는 저장된 이미지의 스케일 버전을 캡쳐 이미지로부터 빼고, 여기서 캡쳐 이미지에 있는 손상 데이터는 억제되거나 심지어 삭제된다.
다른 실시예에서, 손상 데이터가 곱셈 타입인 경우, 처리 유닛(103)은 캡쳐 이미지에 있는 손상 데이터를 단일 저장된 이미지의 손상 데이터로 분할하고, 여기서 캡쳐 이미지에 있는 손상 데이터는 억제되거나 심지어 삭제된다.
또한, 손상 데이터는 덧셈 및 곱셈임이 예상될 수 있다.
본 발명은 몇몇 실시예를 참조로 주로 설명되었다. 그러나, 당업자에 의해 용이하게 이해되는 바와 같이, 첨부된 청구 범위에 의해 정의된 바와 같이, 상술한 것 이외의 다른 실시예도 본 발명의 범위 내에서 동일하게 가능하다.

Claims (30)

  1. 지문 감지 시스템(101)의 지문 센서(102)에 의해 캡쳐된 이미지에 있는 손상 데이터(120)를 억제하는 지문 감지 시스템(101)의 방법으로서,
    상기 지문 센서(102)가 겪게되는 손상에 의해 초래된 손상 데이터(120)를 포함한, 상기 지문 센서(102)에 접촉하는 물체의 적어도 하나의 이미지를 캡쳐하는 단계(S101);
    상기 손상 데이터를 포함하는 캡쳐 이미지를 저장하는 단계(S102);
    상기 지문 센서(102)와 접촉하는 손가락의 지문의 적어도 하나의 다른 이미지를 캡쳐하는 단계(S103); 및
    지문의 추가 캡쳐 이미지에서 상기 손상 데이터를 적어도 부분적으로 억제하기 위해 상기 손상 데이터를 포함하는 저장된 캡쳐 이미지로 상기 지문의 추가 캡쳐 이미지를 처리하는 단계(S104)를 포함하고,
    상기 물체는 손가락이며, 상기 지문 센서(102)와 접촉하는 물체의 적어도 하나의 이미지를 캡쳐하는 단계(S101)는:
    상기 지문 센서(102)가 겪게되는 손상으로 인해 야기된 손상 데이터(120)를 포함하는, 상기 손가락 지문의 복수의 이미지를 캡쳐하는 단계; 및
    상기 손상 데이터(120)를 포함하는 이미지를, 상기 지문의 복수의 캡쳐 이미지로부터 생성하는 단계(S101a)를 더 포함하고,
    상기 캡쳐 이미지(120)를 저장하는 단계(S102)는 상기 손상 데이터를 포함하는 상기 생성된 이미지를 저장하는 단계를 포함하고,
    상기 복수의 이미지는 상기 지문 감지 시스템(101)이 배치된 전자 장치(100)의 정상적인 사용자 조작 중에 캡쳐되고,
    손상 데이터(120)를 포함하는 지문의 새로운 이미지를 캡쳐하는 단계(S105);
    상기 캡쳐된 새로운 이미지들 및 상기 손상 데이터를 포함하는 이전에 저장된 이미지로부터, 상기 손상 데이터를 포함하는 업데이트된 이미지를 생성하는 단계(S106a);
    상기 손상 데이터를 포함하는 상기 업데이트된 이미지를 저장하는 단계(S106b)를 더 포함하고,
    상기 지문의 추가 캡쳐 이미지를 처리하는 단계(S104)는 지문의 상기 추가 캡쳐 이미지에 있는 상기 손상 데이터를 적어도 부분적으로 억제하기 위해 상기 손상 데이터를 포함하는 상기 저장된 업데이트된 이미지를 사용하여 수행되는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 제 1 항에 있어서,
    상기 전자 장치(100)의 정상적인 사용자 조작 중에 상기 지문 센서(102)에 접촉시 하나 이상의 이미지가 반복적으로 캡쳐되고, 상기 지문의 복수의 캡쳐 이미지로부터 생성된 이미지는 충분한 수의 지문 이미지가 캡쳐된 후 생성되고 저장되는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  6. 삭제
  7. 제 1 항에 있어서,
    상기 손상 데이터를 포함하는 상기 저장된 캡쳐 이미지를 갖는 지문의 추가 캡쳐 이미지를 처리하는 단계(S104)는:
    상기 지문의 추가 캡쳐 이미지로부터 손상 데이터를 포함하는 저장된 캡쳐 이미지를 빼는 단계를 포함하는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  8. 제 1 항에 있어서,
    상기 손상 데이터를 포함하는 상기 저장된 캡쳐 이미지를 갖는 지문의 추가 캡쳐 이미지를 처리하는 단계(S104)는:
    상기 캡쳐 이미지에 있는 손상 데이터를 상기 저장된 이미지의 손상 데이터로 나누는 단계를 더 포함하는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  9. 제 1 항에 있어서,
    상기 지문의 복수의 캡쳐 이미지로부터 손상 데이터(120)를 포함하는 이미지를 생성하는 단계(S101a)는:
    상기 복수의 캡쳐 이미지들을 상기 손상 데이터(120)를 포함하는 단일 이미지로 결합하는 단계를 더 포함하는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  10. 제 9 항에 있어서,
    상기 복수의 캡쳐 이미지들을 상기 손상 데이터(120)를 포함하는 단일 이미지로 결합하는 단계는:
    상기 손상 데이터(120)를 포함하는 이미지를 생성하기 위해 상기 복수의 캡쳐 이미지를 평균하는 단계를 더 포함하는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  11. 제 1 항에 있어서,
    이미지가 캡쳐되기 전에 사용자의 손가락에 또는 지문 센서(102)의 감지 영역의 표면(110) 상에 소량의 유체를 도포하는 단계를 더 포함하는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  12. 제 1 항에 있어서,
    상기 손상 데이터가 억제된 지문의 상기 추가 캡쳐 이미지로부터 지문을 추출하는 단계(S107);
    상기 손가락의 캡쳐 이미지의 지문을 하나 이상의 인가된 사전 저장된 지문 템플레이트과 비교하는 단계(S108); 및
    상기 캡쳐 이미지의 상기 추출된 지문이 상기 하나 이상의 인가된 사전 저장된 지문 템플레이트과 매치하는 것으로 고려되는 경우 사용자를 인증하는 단계를 더 포함하는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  13. 제 1 항에 있어서,
    상기 손상 데이터를 포함하는 상기 저장된 캡쳐 이미지에 대한 신뢰 메트릭을 계산하는 단계(S101b)를 더 포함하고, 상기 저장된 캡쳐 이미지의 적어도 일부가 상기 계산된 신뢰 메트릭에 의해 표시되는 것과 같이 신뢰할 수 없다고 간주되는 경우, 상기 일부는 지문의 추가 캡쳐 이미지에 있는 손상 데이터를 억제하는 데 이용되지 않는 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  14. 제 13 항에 있어서,
    상기 지문의 캡쳐된 새로운 이미지에 기초하여 업데이트된 신뢰 메트릭을 계산하는 단계(S106c); 및
    상기 업데이트된 신뢰도 메트릭을 저장하는 단계(S106d)를 더 포함하고;
    상기 저장된 업데이트된 신뢰 메트릭은 연이어 상기 지문의 캡쳐 이미지에 있는 손상 데이터를 억제할 때 고려되는, 손상 데이터를 억제하는 지문 감지 시스템의 방법.
  15. 지문 센서(102) 및 처리 유닛(103)을 포함하고, 지문 감지 시스템(101)의 지문 센서(102)에 의해 캡쳐 이미지에 있는 손상 데이터(120)를 억제하도록 구성된 지문 감지 시스템(101)으로서,
    상기 지문 센서(102)는:
    상기 지문 센서(102)가 겪게되는 손상에 의해 초래된 손상 데이터(120)를 포함한, 상기 지문 센서(102)에 접촉하는 물체의 적어도 하나의 이미지를 캡쳐하도록 구성되고,
    상기 처리 유닛(103)은:
    상기 손상 데이터를 포함하는 캡쳐 이미지를 저장하고,
    상기 지문 센서(102)와 접촉하는 지문의 적어도 하나의 추가 이미지를 캡쳐하며,
    지문의 추가 캡쳐 이미지에서 상기 손상 데이터를 적어도 부분적으로 억제하기 위해 상기 손상 데이터를 포함하는 저장된 캡쳐 이미지로 상기 지문의 추가 캡쳐 이미지를 처리하도록 구성되고,
    상기 물체는 손가락이고,
    상기 지문 센서(102)는:
    상기 지문 센서(102)가 겪게되는 손상으로 인한 손상 데이터(120)를 포함하는, 손가락 지문의 복수의 이미지를 캡쳐하도록 구성되고,
    상기 처리 유닛(103)은:
    상기 지문의 복수의 캡쳐 이미지들로부터, 상기 손상 데이터(120)를 포함하는 이미지를 생성하고,
    손상 데이터를 포함하는 생성된 이미지를 저장하도록 구성되고,
    상기 복수의 이미지는 상기 지문 감지 시스템(101)이 배치된 전자 장치(100)의 정상적인 사용자 조작 중에 캡쳐되고,
    상기 지문 센서(102)는 손상 데이터(120)를 포함하는 지문의 새로운 이미지를 반복적으로 캡쳐하도록 구성되고,
    상기 처리 유닛(103)은 상기 캡쳐된 새로운 이미지 및 상기 손상 데이터를 포함하는 이전에 저장된 이미지로부터 상기 손상 데이터를 포함하는 업데이트된 이미지를 생성하고, 손상 데이터를 포함하는 업데이트된 이미지를 저장하도록 구성되며,
    지문의 추가 캡쳐 이미지의 처리는 지문의 상기 추가 캡쳐 이미지에 있는 손상 데이터를 적어도 부분적으로 억제하기 위해 손상 데이터를 포함하는 저장된 업데이트 이미지를 사용하여 수행되는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  16. 삭제
  17. 삭제
  18. 삭제
  19. 제 15 항에 있어서,
    상기 전자 장치(100)의 정상적인 사용자 동작 중에 사용자가 상기 지문 센서(102)에 접촉할 때 하나 이상의 이미지가 반복적으로 캡쳐되고, 상기 복수의 캡쳐 이미지들로부터 생성된 이미지는 충분한 수의 지문 이미지가 캡쳐된 후에 생성 및 저장되는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  20. 삭제
  21. 제 15 항에 있어서,
    상기 처리 유닛(103)은, 상기 손상 데이터를 포함하는 상기 저장된 캡쳐 이미지로 지문의 추가 캡쳐 이미지를 처리 할 때,
    지문의 추가 캡쳐 이미지로부터 손상 데이터를 포함하는 저장된 캡쳐 이미지를 빼도록 구성되는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  22. 제 15 항에 있어서,
    상기 처리 유닛(103)은, 상기 손상 데이터를 포함하는 상기 저장된 캡쳐 이미지로 지문의 추가 캡쳐 이미지를 처리할 때,
    캡쳐 이미지에 있는 손상 데이터를 저장된 이미지의 손상 데이터로 나누도록 구성되는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  23. 제 15 항에 있어서,
    상기 처리 유닛(103)은, 상기 지문의 복수의 캡쳐 이미지로부터 상기 손상 데이터(120)를 포함하는 이미지를 생성할 때,
    상기 복수의 캡쳐 이미지들을 상기 손상 데이터(120)를 포함하는 단일 이미지로 결합하도록 구성된 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  24. 제 23 항에 있어서,
    상기 처리 유닛(103)은, 상기 복수의 캡쳐 이미지들을 상기 손상 데이터(120)를 포함하는 단일 이미지로 결합할 때,
    손상 데이터(120)를 포함하는 이미지를 생성하기 위해 복수의 캡쳐 이미지를 평균하도록 구성되는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  25. 제 15 항에 있어서,
    상기 처리 유닛(103)은,
    상기 손상 데이터가 억제된 상기 지문의 상기 추가 캡쳐 이미지로부터 지문을 추출하고;
    상기 손가락의 캡쳐 이미지의 지문을 하나 이상의 인가된 사전 저장된 지문 템플레이트과 비교하며,
    캡쳐 이미지의 추출된 지문이 하나 이상의 인가된 사전 저장된 지문 템플레이트와 일치하는 것으로 간주되는 경우 사용자를 승인하도록 더 구성되는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  26. 제 15 항에 있어서,
    상기 처리 유닛(103)은 상기 손상 데이터를 포함하는 상기 저장된 캡쳐 이미지에 대한 신뢰 메트릭을 계산하도록 구성되고,
    상기 저장된 캡쳐 이미지의 적어도 일부가 상기 계산된 신뢰 메트릭에 의해 표시되는 것과 같이 신뢰할 수 없다고 간주되는 경우, 상기 일부는 상기 추가 캡쳐된 지문 이미지에 있는 손상 데이터를 억제하는데 이용되지 않는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  27. 제 15 항에 있어서,
    상기 처리 유닛(103)은 상기 지문의 캡쳐된 새로운 이미지에 기초하여 업데이트된 신뢰도 메트릭을 계산하고, 업데이트된 신뢰 메트릭을 저장하도록 더 구성되며,
    지문의 추가 캡쳐 이미지에 있는 손상 데이터를 억제할 경우, 저장된 업데이이트된 신뢰 메트릭이 연이어 고려되는 손상 데이터를 억제하도록 구성된 지문 감지 시스템(101).
  28. 제 15 항, 제 19 항, 제 21 항 내지 제 27 항 중 어느 한 항에 따른 지문 감지 시스템(101)을 포함한 전자장치(100).
  29. 지문 감지 시스템(101)에 포함된 처리 유닛(103) 상에 컴퓨터 실행가능 명령어가 실행될 때 지문 감지 시스템(101)이 제 1 항, 제 5 항, 제 7 항 내지 제 14 항 중 어느 한 항에 따른 단계를 수행하게 하는 컴퓨터 실행가능 명령어를 포함하는 컴퓨터 프로그램(107).
  30. 삭제
KR1020197021982A 2017-03-10 2018-03-05 지문 이미지의 손상 데이터 억제 KR102555192B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
SE1750270 2017-03-10
SE1750270-9 2017-03-10
PCT/SE2018/050205 WO2018164625A1 (en) 2017-03-10 2018-03-05 Suppressing impairment data in fingerprint images

Publications (2)

Publication Number Publication Date
KR20190126296A KR20190126296A (ko) 2019-11-11
KR102555192B1 true KR102555192B1 (ko) 2023-07-13

Family

ID=63447866

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197021982A KR102555192B1 (ko) 2017-03-10 2018-03-05 지문 이미지의 손상 데이터 억제

Country Status (6)

Country Link
US (1) US11232274B2 (ko)
EP (1) EP3593278A4 (ko)
JP (1) JP7291080B2 (ko)
KR (1) KR102555192B1 (ko)
CN (1) CN109074493B (ko)
WO (1) WO2018164625A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116229525B (zh) * 2023-03-31 2023-08-01 深圳市皇家金盾智能科技有限公司 针对破损指纹的指纹门锁解锁方法，装置，介质及指纹门锁

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060056700A1 (en) * 2003-05-15 2006-03-16 Fujitsu Limited Biological information detecting device
US20150071502A1 (en) * 2013-09-08 2015-03-12 Apple Inc. Noise Reduction in Biometric Images
US20150325014A1 (en) * 2013-01-21 2015-11-12 Kowa Company, Ltd. Image processing device, image processing method, image processing program, and recording medium storing said program

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6125192A (en) * 1997-04-21 2000-09-26 Digital Persona, Inc. Fingerprint recognition system
US6330345B1 (en) * 1997-11-17 2001-12-11 Veridicom, Inc. Automatic adjustment processing for sensor devices
JP2000020719A (ja) 1998-06-29 2000-01-21 Mitsubishi Electric Corp 指紋照合装置
US6535622B1 (en) * 1999-04-26 2003-03-18 Veridicom, Inc. Method for imaging fingerprints and concealing latent fingerprints
US7079672B2 (en) * 2000-01-28 2006-07-18 Chuo Hatsujo Kabushiki Kaisha Fingerprint image evaluating method and fingerprint matching device
DE50015267D1 (de) 2000-04-05 2008-08-28 Infineon Technologies Ag Verfahren zur störanteilsfreien Bilderfassung mittels eines elektronischen Sensors
WO2004026139A1 (ja) * 2002-09-17 2004-04-01 Fujitsu Limited 生体情報取得装置および生体情報による認証装置
US8131026B2 (en) * 2004-04-16 2012-03-06 Validity Sensors, Inc. Method and apparatus for fingerprint image reconstruction
US7423633B2 (en) 2004-09-01 2008-09-09 Avago Technologies Ec Buip Pte Ltd Apparatus for controlling the position of a screen pointer with low sensitivity to fixed pattern noise
US7496216B2 (en) 2005-06-21 2009-02-24 Hewlett-Packard Development Company, L.P. Fingerprint capture
JP2009077279A (ja) * 2007-09-21 2009-04-09 Fujitsu Ten Ltd 画像認識装置、車載用画像認識装置および車載用画像認識方法
CN102395995B (zh) * 2009-04-13 2014-04-23 富士通株式会社 活体信息登记装置、活体信息登记方法、活体认证装置、活体认证方法
CN101776487B (zh) * 2009-12-31 2011-05-18 华中科技大学 一种红外焦平面非均匀性指纹提取及图像校正方法
JP5541099B2 (ja) 2010-11-05 2014-07-09 株式会社デンソー 道路区画線認識装置
CN103294987A (zh) * 2012-03-05 2013-09-11 天津华威智信科技发展有限公司 指纹匹配方法与实现方式
JP2013207611A (ja) * 2012-03-29 2013-10-07 Nikon Corp 撮像装置
US9519819B2 (en) * 2014-07-14 2016-12-13 Fingerprint Cards Ab Method and electronic device for noise mitigation
JP6598466B2 (ja) 2015-01-30 2019-10-30 キヤノン株式会社 断層撮像装置、断層撮像方法、およびプログラム
SE1551049A1 (en) * 2015-07-29 2017-01-30 Fingerprint Cards Ab Acquisition of a fingerprint image
CN105303173A (zh) * 2015-10-19 2016-02-03 广东欧珀移动通信有限公司 一种降低误识别率的方法和装置
CN105373786A (zh) * 2015-11-30 2016-03-02 东莞酷派软件技术有限公司 一种指纹采集方法、装置及电子设备
SE1551641A1 (en) * 2015-12-14 2017-06-15 Fingerprint Cards Ab Method and fingerprint sensing system for acquiring a fingerprint image
CN106164933B (zh) * 2016-03-22 2019-06-07 深圳市汇顶科技股份有限公司 指纹图像的校正方法、装置和终端
CN105956535A (zh) 2016-04-25 2016-09-21 广东欧珀移动通信有限公司 指纹识别控制方法、指纹识别控制装置及电子装置
CN106203365B (zh) * 2016-07-14 2019-02-12 浙江赢视科技有限公司 增益调节处理的指纹成像方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060056700A1 (en) * 2003-05-15 2006-03-16 Fujitsu Limited Biological information detecting device
US20150325014A1 (en) * 2013-01-21 2015-11-12 Kowa Company, Ltd. Image processing device, image processing method, image processing program, and recording medium storing said program
US20150071502A1 (en) * 2013-09-08 2015-03-12 Apple Inc. Noise Reduction in Biometric Images

Also Published As

Publication number Publication date
WO2018164625A1 (en) 2018-09-13
CN109074493B (zh) 2020-06-02
EP3593278A1 (en) 2020-01-15
JP2020511712A (ja) 2020-04-16
CN109074493A (zh) 2018-12-21
JP7291080B2 (ja) 2023-06-14
US11232274B2 (en) 2022-01-25
EP3593278A4 (en) 2021-04-21
US20210097248A1 (en) 2021-04-01
KR20190126296A (ko) 2019-11-11

Similar Documents

Publication Publication Date Title
CN107454963B (zh) 指纹图像处理方法及光学指纹辨识系统
CN110770751B (zh) 使得能够基于指纹数据进行用户认证的指纹感测系统的方法
CN107251052B (zh) 用于形成指纹图像的方法及指纹感测系统
US11580775B2 (en) Differentiating between live and spoof fingers in fingerprint analysis by machine learning
US20170091521A1 (en) Secure visual feedback for fingerprint sensing
WO2018141119A1 (zh) 一种指纹采集的方法、装置及终端
US10572749B1 (en) Systems and methods for detecting and managing fingerprint sensor artifacts
CN107408208B (zh) 用于对用户的生物测量进行分析的方法和指纹感测系统
US10089546B2 (en) Correction and detection of defective capacitive sensor elements of a fingerprint sensor
KR102555192B1 (ko) 지문 이미지의 손상 데이터 억제
US11288487B2 (en) Cancelling out impairment data in fingerprint images
CN110574038B (zh) 从指纹图像中提取指纹特征数据
CN110612532B (zh) 验证后指纹图像捕获
WO2018151646A1 (en) Enabling identification of fingerprints from captured images using contour points

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant