KR101923320B1 - User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint - Google Patents

User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint Download PDF

Info

Publication number
KR101923320B1
KR101923320B1 KR1020170123199A KR20170123199A KR101923320B1 KR 101923320 B1 KR101923320 B1 KR 101923320B1 KR 1020170123199 A KR1020170123199 A KR 1020170123199A KR 20170123199 A KR20170123199 A KR 20170123199A KR 101923320 B1 KR101923320 B1 KR 101923320B1
Authority
KR
South Korea
Prior art keywords
light emitting
fingerprint
region
activated
divided
Prior art date
Application number
KR1020170123199A
Other languages
Korean (ko)
Inventor
김상우
김정현
김병준
한건희
백종덕
Original Assignee
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단 filed Critical 연세대학교 산학협력단
Priority to KR1020170123199A priority Critical patent/KR101923320B1/en
Application granted granted Critical
Publication of KR101923320B1 publication Critical patent/KR101923320B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1318Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
    • G06K9/0004
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B1/00Optical elements characterised by the material of which they are made; Optical coatings for optical elements
    • G06K9/00067
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1347Preprocessing; Feature extraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Input (AREA)

Abstract

The present invention relates to a user terminal enabling fingerprint recognition on a display unit and a fingerprint recognition method thereof. The user terminal includes: multiple light emitting elements and multiple light detection elements coupled to a display circuit board; a fingerprint contact area sensing unit which senses a contact area when a user′s finger comes in contact with the display unit for fingerprint recognition; a light emitting element control unit which controls the light emitting elements to be activated for obtaining specific division area images in the fingerprint contact area; a light detection element control unit which controls the light detection elements to be activated based on the total reflection angle range of the light emitting elements to be activated; and a fingerprint feature information generating unit which obtains the division area images from the activated light detection elements and uses the obtained division area images to generate fingerprint feature information. The terminal and method can be used to recognize fingerprints on the display unit of the terminal while using an optical system with a high-resolution scheme for fingerprint recognition.

Description

디스플레이에서의 지문 인식이 가능한 사용자 단말기 및 지문 인식 방법{User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint}Technical Field [0001] The present invention relates to a user terminal capable of fingerprint recognition on a display,

본 발명의 실시예들은 사용자 단말기를 이용한 지문 인식 장치 및 방법에 관한 것으로서, 더욱 상세하게는 디스플레이에서의 지문 인식이 가능한 사용자 단말기에 관한 것이다. Embodiments of the present invention relate to a fingerprint recognition apparatus and method using a user terminal, and more particularly, to a user terminal capable of fingerprint recognition on a display.

생체 인식을 통한 개인정보 보안과 결제 등의 기능이 스마트폰과 같은 휴대용 단말기에 도입되면서 생체인식센서 시장이 급격히 커지고 있다. 그 중 가장 큰 비중을 차지하는 지문인식은 가장 간단하면서도 보안성이 높은 생체인식 방식으로써 크게 각광받고 있다. 그러나 현재 휴대용 단말기에 사용되는 지문인식 센서는 capacitive 어레이 방식의 센서로, 그 해상도가 낮고 (500dpi) 단말기 상에 센서를 위한 공간을 따로 필요로 하여 보안성과 디자인에 제약을 받고 있다. 땀샘과 같은 지문의 세부 형태를 볼 수 있다면 보안성이 크게 향상되어 금융거래나 정보보안에도 문제없이 사용될 수 있을 것이나, 이에 필요한 해상도는 1000dpi 이상으로 알려져 있어 현재보다 더 높은 해상도를 달성하기 위한 기술이 요구된다. As the functions of personal information security and payment through biometrics are introduced into portable terminals such as smart phones, the biometric sensor market is rapidly growing. Fingerprint recognition, which occupies the largest portion among them, is widely regarded as the most simple and highly secure biometric method. However, the fingerprint sensor used in the portable terminal is a capacitive array type sensor, and its resolution is low (500 dpi). If the details of the fingerprint such as sweat glands can be seen, the security will be greatly improved and it will be able to be used without any problems in financial transaction or information security. However, since the resolution required is known to be higher than 1000 dpi, Is required.

한편, 광학계를 이용하여 단말기의 디스플레이상에서 지문을 인식하려는 시도가 이루어지고 있다. 디스플레이는 내재된 광원이 있으므로 이 광원에서 나온 빛을 지문 상에서 반사 시켜 지문의 형태를 이미지센서로 읽어내고자 하는 방식이다. 그러나, 광학계를 이용한 방식도 빛의 산란으로 인해 빛의 집광을 위한 마이크로 렌즈 등을 필요로 하고 복잡한 영상 복원 알고리즘을 요구하는 이유로 여전히 한계가 있는 문제가 있다. On the other hand, attempts have been made to recognize fingerprints on a display of a terminal using an optical system. Since the display has an internal light source, the light from the light source is reflected on the fingerprint and the form of the fingerprint is read by the image sensor. However, a system using an optical system also requires a microlens or the like for condensing light due to scattering of light, and there is still a problem in that it requires a complicated image restoration algorithm.

본 발명의 목적은 디스플레이상에서 지문을 인식할 수 있는 사용자 단말기 및 지문 인식 방법을 제안하는 것이다. It is an object of the present invention to propose a user terminal and a fingerprint recognition method capable of recognizing a fingerprint on a display.

또한, 본 발명은 높은 해상도로 집광렌즈나 거울을 사용하지 않고 지문을 인식할 수 있는 사용자 단말기 및 지문 인식 방법을 제안한다. Also, the present invention proposes a user terminal and a fingerprint recognition method capable of recognizing a fingerprint without using a condensing lens or a mirror at a high resolution.

본 발명의 일 측면에 따르면, 디스플레이 회로 기판에 결합되는 다수의 발광 소자 및 다수의 광 검출 소자; 지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 지문 접촉 영역 감지부; 상기 지문 접촉 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 발광 소자 제어부; 상기 활성화될 발광 소자의 전반사 각도 범위에 기초하여 활성화될 광 검출 소자를 제어하는 광 검출 소자 제어부; 및 상기 활성화된 광 검출 소자로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 지문 특징 정보 생성부를 포함하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기가 제공된다. According to an aspect of the present invention, there is provided a display device including: a plurality of light emitting elements and a plurality of light detecting elements coupled to a display circuit board; A fingerprint contact area sensing unit for sensing a contact area when a user's finger touches the display for fingerprint recognition; A light emitting element controller for controlling a light emitting element to be activated for acquiring a specific divided region image among the fingerprint contacting regions; A photodetector element control unit for controlling a photodetector element to be activated based on a total reflection angle range of the light emitting element to be activated; And a fingerprint feature information generating unit for obtaining a fingerprint feature information from the activated photodetector and using the obtained fingerprint feature images, and a user terminal capable of fingerprint recognition in a display.

상기 사용자 단말기는 상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 영역 분할부를 더 포함한다. The user terminal further includes a region division unit that divides the fingerprint contact region into a plurality of divided regions based on a total reflection angle range of the plurality of light emitting devices.

상기 지문 접촉 영역 감지부는 터치 모듈의 압력 정보를 이용하여 지문 접촉 영역을 감지한다. The fingerprint contact region sensing unit senses a fingerprint contact region using pressure information of the touch module.

상기 영역 분할부에 의해 설정되는 다수의 분할 영역들은 소정 부분에서 중첩되도록 설정된다. The plurality of divided areas set by the area dividing unit are set to overlap in a predetermined portion.

상기 발광 소자 제어부는 상기 특정 분할 영역에 대해 전반사 특성을 가지는 단일의 발광 소자 또는 서로 인접해 있는 복수의 발광 소자를 활성화시킨다. The light emitting element controller activates a single light emitting element having a total reflection characteristic or a plurality of light emitting elements adjacent to each other for the specific divided region.

상기 발광 소자 제어부는 제1 내지 제N 분할 영역 이미지의 획득을 위해 순차적으로 각 분할 영역에 상응하는 발광 소자를 활성화시키며, 상기 광 검출 소자 제어부는 상기 순차적으로 활성화되는 발광 소자에 기초하여 광 검출 소자들을 활성화시킨다. Wherein the light emitting element control unit sequentially activates light emitting elements corresponding to each of the divided regions to acquire the first through Nth divided region images, wherein the light detecting element control unit controls the light emitting elements based on the sequentially activated light emitting elements, Lt; / RTI >

상기 지문 특징 정보 생성부는 상기 분할 영역 이미지들을 합성하여 지문 이미지를 생성하고, 상기 생성된 지문 이미지로부터 상기 지문 특징 정보를 생성한다. The fingerprint feature information generating unit generates a fingerprint image by combining the divided region images, and generates the fingerprint feature information from the generated fingerprint image.

상기 사용자 단말기는 상기 디스플레이 회로 기판 상부에 적층되는 버퍼 레이어를 더 포함하고, 상기 버퍼 레이어는 디스플레이 글래스와 다른 굴절율을 가지는 물질로 형성된다. The user terminal further includes a buffer layer stacked on the display circuit board, and the buffer layer is formed of a material having a refractive index different from that of the display glass.

본 발명의 다른 측면에 따르면, 디스플레이 회로 기판에 결합되는 다수의 발광 소자 및 다수의 광 검출 소자; 지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 지문 접촉 영역 감지부; 상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 영역 분할부 상기 지문 접촉 영역 및 상기 다수의 발광 소자의 전반사 각도 범위에 기초하여 활성화될 발광 소자를 제어하는 발광 소자 제어부; 상기 활성화되는 발광 소자에 기초하여 활성화될 광 검출 소자를 제어하는 광 검출 소자 제어부; 및 상기 광 검출 소자에서 수신하는 광 정보를 이용하여 지문 특징 정보를 생성하는 지문 특징 정보 생성부를 포함하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기가 제공된다. According to another aspect of the present invention, there is provided a display device comprising: a plurality of light emitting elements and a plurality of light detecting elements coupled to a display circuit board; A fingerprint contact area sensing unit for sensing a contact area when a user's finger touches the display for fingerprint recognition; An area dividing unit dividing the fingerprint contacting area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices, and a light emitting device to be activated based on the total reflection angle range of the plurality of light emitting devices A light emitting element control unit A photodetector element control unit for controlling a photodetector element to be activated based on the light emitting element to be activated; And a fingerprint feature information generating unit for generating fingerprint feature information using the optical information received by the optical detecting device.

본 발명의 또 다른 측면에 따르면, 디스플레이 회로 기판에 결합되는 다수의 발광 소자 및 다수의 광 검출 소자; 지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 지문 접촉 영역 감지부; 상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 영역 분할부; 상기 다수의 분할 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 발광 소자 제어부; 및 광 검출 소자들로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 지문 특징 정보 생성부를 포함하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기가 제공된다. According to another aspect of the present invention, there is provided a display device comprising: a plurality of light emitting elements and a plurality of light detecting elements coupled to a display circuit board; A fingerprint contact area sensing unit for sensing a contact area when a user's finger touches the display for fingerprint recognition; An area dividing unit dividing the fingerprint contacting area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices; A light emitting element controller for controlling a light emitting element to be activated for obtaining a specific divided region image among the plurality of divided regions; And a fingerprint feature information generation unit that obtains a segment region image from the light detection elements and generates finger feature information using the obtained segment region images.

본 발명의 또 다른 측면에 따르면, 디스플레이 회로 기판에 다수의 발광 소자 및 다수의 광 검출 소자가 결합된 단말기 디스플레이에서의 지문 인식 방법으로서, 지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 지문 접촉 영역을 감지하는 단계(a); 상기 지문 접촉 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 단계(b); 상기 활성화될 발광 소자의 전반사 각도 범위에 기초하여 활성화될 광 검출 소자를 제어하는 단계(c); 및 상기 활성화된 광 검출 소자로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 단계(d)를 포함하는 지문 인식 방법이 제공된다. According to another aspect of the present invention, there is provided a fingerprint recognition method in a terminal display in which a plurality of light emitting elements and a plurality of light detecting elements are combined on a display circuit board, (A) detecting an area; (B) controlling a light emitting element to be activated for acquisition of a specific one of the fingerprint contact areas; (C) controlling a light detecting element to be activated based on a total reflection angle range of the light emitting element to be activated; And a step (d) of obtaining a divided area image from the activated light detecting element and generating fingerprint characteristic information using the obtained divided area images.

상기 지문 인식 방법은 상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 단계를 더 포함한다. The fingerprint recognition method further includes dividing the fingerprint contact area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices.

본 발명의 또 다른 측면에 따르면, 디스플레이 회로 기판에 다수의 발광 소자 및 다수의 광 검출 소자가 결합된 단말기 디스플레이에서의 지문 인식 방법으로서, 지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 단계(a); 상기 지문 접촉 영역 및 상기 다수의 발광 소자의 전반사 각도 범위에 기초하여 활성화될 발광 소자를 제어하는 단계(b); 상기 활성화되는 발광 소자에 기초하여 활성화될 광 검출 소자를 제어하는 단계(c); 및 상기 광 검출 소자에서 수신하는 광 정보를 이용하여 지문 특징 정보를 생성하는 단계(d)를 포함하는 지문 인식 방법이 제공된다. According to another aspect of the present invention, there is provided a fingerprint recognition method in a terminal display in which a plurality of light emitting elements and a plurality of photodetecting elements are combined on a display circuit board, (A); (B) controlling a light emitting element to be activated based on the fingerprint contact area and the total reflection angle range of the plurality of light emitting elements; (C) controlling a light detecting element to be activated based on the light emitting element to be activated; And (d) generating fingerprint feature information using optical information received by the optical detection element.

본 발명의 또 다른 측면에 따르면, 디스플레이 회로 기판에 다수의 발광 소자 및 다수의 광 검출 소자가 결합된 단말기 디스플레이에서의 지문 인식 방법으로서, 지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 단계(a); 상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 단계(b); 상기 다수의 분할 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 단계(c); 및 광 검출 소자들로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 단계(d)를 포함하는 지문 인식 방법이 제공된다. According to another aspect of the present invention, there is provided a fingerprint recognition method in a terminal display in which a plurality of light emitting elements and a plurality of photodetecting elements are combined on a display circuit board, (A); (B) dividing the fingerprint contact area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices; (C) controlling a light emitting element to be activated for acquiring a specific divided region image among the plurality of divided regions; And a step (d) of obtaining a segmented region image from the photodetector elements and generating fingerprint feature information using the obtained segmented region images.

본 발명에 의하면, 단말기의 디스플레이상에서 지문을 인식할 수 있는 장점이 있다. According to the present invention, the fingerprint can be recognized on the display of the terminal.

또한, 본 발명은 높은 해상도로 집광렌즈나 거울을 이용하지 않고 지문을 인식할 수 있는 장점이 있다. In addition, the present invention has an advantage that a fingerprint can be recognized without using a condensing lens or a mirror at a high resolution.

도 1은 본 발명의 일 실시예에 따른 지문 인식이 가능한 사용자 단말기에서의 지문 인식 구조를 설명하기 위한 도면.
도 2는 본 발명의 일 실시예에 따른 디스플레이에서의 지문 인식이 가능한 사용자 단말기의 구성을 도시한 블록도.
도 3은 단일 발광 소자에서 전반사가 가능한 영역을 2차원으로 나타낸 도면.
도 4는 본 발명의 일 실시예에 따라 디스플레이에서 지문 접촉이 인지될 경우 분할 영역을 설정하는 일례를 나타낸 도면.
도 5는 본 발명의 일 실시예에 따라 광 검출 소자의 활성화 영역을 설정하는 일례를 설명하기 위한 도면.
도 6은 본 발명의 일 실시예에 따른 지문 특징 정보 생성부의 구조를 도시한 블록도.
도 7은 본 발명의 일 실시예에 따른 디스플레이에서의 지문 인식 방법의 전체적인 흐름을 도시한 순서도.
도 8은 본 발명의 다른 실시예에 따른 지문 인식 장치가 적용되는 단말기의 구조를 도시한 도면.
BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a view for explaining a fingerprint recognition structure in a user terminal capable of fingerprint recognition according to an embodiment of the present invention; FIG.
2 is a block diagram illustrating a configuration of a user terminal capable of fingerprint recognition in a display according to an embodiment of the present invention;
Fig. 3 is a two-dimensional view of a region capable of total internal reflection in a single light emitting device. Fig.
4 is a diagram illustrating an example of setting a divided area when fingerprint contact is recognized in a display according to an embodiment of the present invention.
5 is a view for explaining an example of setting an active region of a light detecting element according to an embodiment of the present invention;
6 is a block diagram showing the structure of a fingerprint feature information generating unit according to an embodiment of the present invention;
FIG. 7 is a flowchart showing an overall flow of a fingerprint recognition method in a display according to an embodiment of the present invention; FIG.
8 is a diagram illustrating a structure of a terminal to which a fingerprint recognition device according to another embodiment of the present invention is applied.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. While the invention is susceptible to various modifications and alternative forms, specific embodiments thereof are shown by way of example in the drawings and will herein be described in detail. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention. Like reference numerals are used for like elements in describing each drawing.

이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 지문 인식이 가능한 사용자 단말기에서의 지문 인식 구조를 설명하기 위한 도면이다. 1 is a view for explaining a fingerprint recognition structure in a user terminal capable of fingerprint recognition according to an embodiment of the present invention.

본 발명은 사용자가 스마트폰과 같은 단말기의 디스플레이상에 지문을 접촉시켰을 경우, 지문이 디스플레이의 어떠한 위치에 접촉하더라도 지문을 인식할 수 있는 구조를 제안한다. 도 1은 본 발명의 일 실시예에 따른 지문 인식 장치 및 방법이 적용되는 단말기의 단면도를 나타낸 도면이고, 도 1을 참조하여 본 발명의 지문 인식 원리를 설명한다. The present invention proposes a structure in which, when a user touches a fingerprint on a display of a terminal such as a smart phone, the fingerprint can be recognized even if the fingerprint touches any position of the display. FIG. 1 is a sectional view of a terminal to which a fingerprint recognition apparatus and method according to an embodiment of the present invention is applied, and a fingerprint recognition principle of the present invention will be described with reference to FIG.

도 1을 참조하면, 본 발명의 지문 인식 장치 및 방법이 적용되는 단말기는 디스플레이 회로 기판(100) 및 디스플레이 글래스(110)를 포함한다. 디스플레이 회로 기판(100)에는 디스플레이를 위한 다수의 발광 소자(102)가 결합되며, 발광 소자와 함께 광 검출 소자(104)가 디스플레이 회로 기판(100)에 결합된다. Referring to FIG. 1, a terminal to which the fingerprint recognition apparatus and method of the present invention is applied includes a display circuit board 100 and a display glass 110. A plurality of light emitting devices 102 for display are coupled to the display circuit board 100 and the light detecting devices 104 are coupled to the display circuit board 100 together with the light emitting devices.

도 1의 도시된 다수의 발광 소자(102) 중 특정 발광 소자가 활성화(ON)되고, 다른 발광 소자는 비활성화되었다고 가정한다. 한편, 활성화된 발광 소자(102)에서 반사되는 광의 각도가

Figure 112017093150718-pat00001
이상일 경우 전반사가 발생하고
Figure 112017093150718-pat00002
이하일 경우 전반사가 발생하지 않는다고 가정한다. 본 발명은 디스플레이를 위해 단말기에 이미 구비되어 있는 발광 소자(102)를 지문 인식을 위해 이용하는 것이다. 여기서, 발광 소자는 LED, OLED와 같은 알려진 다양한 발광 소자를 모두 포함할 수 있다는 점은 당업자에게 있어 자명할 것이다. It is assumed that a specific light emitting element among the plurality of light emitting elements 102 shown in FIG. 1 is turned on and the other light emitting element is inactivated. On the other hand, when the angle of the light reflected by the activated light emitting element 102 is
Figure 112017093150718-pat00001
Total reflection occurs.
Figure 112017093150718-pat00002
The total reflection does not occur. The present invention uses a light emitting element 102 already provided in a terminal for display for fingerprint recognition. It will be apparent to those skilled in the art that the light emitting device may include various known light emitting devices such as LEDs and OLEDs.

디스플레이 글래스(110)에는 사용자의 지문이 접촉되는데, 지문은 돌출되는 돌출부와 홈 영역인 그루브로 이루어진다. 본 발명은 발광 소자에 발생되는 광의 반사파를 광 검출 소자(104)가 검출하여 지문 인식을 수행하며, 이를 위해 통상적인 단말기와는 달리 다수의 광 검출 소자(104)가 디스플레이 회로 기판에 구비되는 것이다. 광 검출 소자(104)로는 포토 다이오드(Photo Diode) 등과 같은 알려진 다양한 소자가 사용될 수 있다. The fingerprint of the user is brought into contact with the display glass 110, and the fingerprint is made up of protruding portions and grooves as a groove region. In the present invention, the photodetector element 104 detects the reflected wave of light generated in the light emitting element to perform fingerprint recognition. Unlike a conventional terminal, a plurality of photodetector elements 104 are provided on a display circuit board . As the photodetector element 104, various known elements such as a photodiode and the like can be used.

도 1에서, 활성화된 발광 소자(102)에 의해 조사되는 광이 3개의 종류로 표시되어 있다. 제1 경로 광은 전반사 범위 영역 외로 조사되는 광이고, 제2 경로 광은 전반사 범위 영역 내로 조사되면서 지문과 직접 접촉하지 않는 영역(지문의 그루브 영역)으로 조사되는 광이며, 제3 경로 광은 전반사 범위 영역 내로 조사되면서 지문과 접촉하는 영역(지문의 돌출부 영역)으로 조사되는 광이다.  In Fig. 1, light irradiated by the activated light emitting element 102 is indicated by three kinds. The first path light is light irradiated outside the total reflection range and the second path light is the light irradiated into the total reflection range and irradiated to the area (groove area of the fingerprint) not in direct contact with the fingerprint, (The protruding region of the fingerprint) that is irradiated in the range region and is in contact with the fingerprint.

활성화된 발광 소자(102)에서 조사되는 제1 경로 광은 지문과의 직접 접촉 유무와는 관계없이 반사, 투과 및 굴절을 일으키게 되는데, 제1 경로 광은 유리의 경계면에서 실질적으로 대부분 산란되며 따라서 제1 경로 광의 반사파는 광 검출 소자(104)에는 매우 약하게 입력되어 실질적으로 노이즈로 작용하게 된다. The first path light emitted from the activated light emitting element 102 causes reflection, transmission and refraction irrespective of whether there is direct contact with the fingerprint. The first path light is substantially scattered substantially at the interface of the glass, The reflected wave of the one-path light is input very weakly to the photodetector element 104 and substantially acts as noise.

전반사 범위 영역 내의 제2 경로 광은 지문의 돌출부와 직접 접촉하지 않기에 제2 경로 광에 대해서는 전반사가 이루어지며 광 검출 소자(104)는 전반사되는 제2 경로 광을 입력받게 된다. The second path light in the total reflection range region does not directly contact the protruding portion of the fingerprint, so that the total path loss is performed for the second path light and the second path light for total reflection is received.

전반사 범위 영역 내의 제3 경로 광은 지문과 직접 접촉하는 영역으로 조사되는데, 이 경우 반사광의 양상은 제2 경로 광과는 상이하다. 유리-공기 매질에서 유리-피부 매질로 변화되면서 전반사 각도의 변화가 발생하면서 난반사가 일어나게 된다. 즉, 제2 경로 광의 반사광은 전반사로 인해 대응되는 광 검출 소자(104a)에서 밝게 검출되나 제3 경로 광의 반사광은 대응되는 광 검출 소자(104b)에서 어둡게 검출된다. The third path light in the total reflection range region is irradiated to an area directly in contact with the fingerprint. In this case, the aspect of the reflected light is different from the second path light. As the glass-air medium changes into the glass-skin medium, the total reflection angle changes and diffuse reflection occurs. That is, the reflected light of the second path light is detected brightly by the corresponding photodetector element 104a due to total reflection, but the reflected light of the third path light is detected darkly by the corresponding photodetector element 104b.

본 발명의 발명자들은 발광 소자(102)의 전반사 범위 영역 내로 조사되는 광이 지문과 직접 접촉하는 영역으로 조사되는 경우와 지문과 직접 접촉하지 않는 영역으로 조사되는 경우에 서로 다른 양상으로 반사가 일어난다는 점을 발견하였으며, 본 발명은 이에 기반하여 디스플레이상에서 지문을 인식할 수 있는 장치 및 방법의 구조를 제안한다. The inventors of the present invention have found that reflection occurs in different directions when the light irradiated into the total reflection range of the light emitting element 102 is irradiated to a region directly contacting the fingerprint and when irradiated to a region not directly contacting the fingerprint And the present invention proposes a structure of an apparatus and a method for recognizing fingerprints on a display based thereon.

한편, 위 도 1에서 디스플레이 상의 거리 A가 광검출영역에서 거리 A’로 확대된다는 것을 확인할 수 있다. On the other hand, in Fig. 1, it can be seen that the distance A on the display expands to the distance A 'from the light detection area.

도 2는 본 발명의 일 실시예에 따른 디스플레이에서의 지문 인식이 가능한 사용자 단말기의 구성을 도시한 블록도이다. 2 is a block diagram illustrating a configuration of a user terminal capable of fingerprint recognition in a display according to an exemplary embodiment of the present invention.

도 2를 참조하면, 본 발명의 일 실시예에 따른 사용자 단말기는 접촉 영역 감지부(200), 영역 분할부(210), 발광 소자 활성화 제어부(220), 광 검출 소자 활성화 제어부(230) 및 지문 특징 정보 생성부(240)를 포함한다. 2, a user terminal according to an exemplary embodiment of the present invention includes a contact area sensing unit 200, an area dividing unit 210, a light emitting device activation control unit 220, a light detecting device activation control unit 230, And a feature information generating unit 240.

접촉 영역 감지부(200)는 사용자가 지문 인식을 위해 지문을 디스플레이상에 접촉시킨 영역을 감지한다. 일례로, 지문 접촉 영역은 단말기의 터치 모듈에서 감지하는 압력 정보를 이용하여 감지할 수 있을 것이다. 물론, 이외에도 다양한 방법으로 지문 접촉 영역을 감지할 수 있다는 점은 당업자에게 있어 자명할 것이다. The contact area sensing unit 200 senses an area where the user touches the display on the display for fingerprint recognition. For example, the fingerprint contact area may be sensed using pressure information sensed by the touch module of the terminal. Of course, it will be apparent to those skilled in the art that fingerprint contact areas can also be detected in various ways.

지문 접촉 영역이 감지되면, 영역 분할부(210)는 지문 접촉 영역을 다수의 분할 영역으로 분할한다. 앞서 설명한 바와 같이, 본 발명은 발광 소자(102)의 전반사 범위 영역 내에서 발생하는 반사 현상을 이용하여 지문 이미지를 획득한다. 하나의 발광 소자(102)의 전반사 범위는 제한적이므로 하나의 발광 소자로부터 적절한 지문 이미지를 획득할 수 있는 영역 역시 제한적이다. When the fingerprint contact area is detected, the area dividing unit 210 divides the fingerprint contact area into a plurality of divided areas. As described above, the present invention obtains a fingerprint image by using reflection phenomenon occurring within the total reflection range region of the light emitting element 102. [ Since the total reflection range of one light emitting element 102 is limited, a region in which a proper fingerprint image can be obtained from one light emitting element is also limited.

영역 분할부(210)는 발광 소자(102)의 전반사 범위에 기초하여 지문 접촉 영역을 분할하며, 광 검출 소자(104)들의 지문 이미지 획득은 분할 영역 단위로 이루어진다. The area dividing section 210 divides the fingerprint contact area based on the total reflection range of the light emitting element 102, and the fingerprint image acquisition of the light detecting elements 104 is performed in a divided area unit.

도 3은 발광 소자에서 전반사가 가능한 영역을 2차원으로 나타낸 도면이다. FIG. 3 is a view showing in two dimensions the region capable of total internal reflection in the light emitting device. FIG.

도 3에 도시된 바와 같이, 지문 접촉 영역 관점에서 볼 때 하나의 발광 소자가 전반사가 가능한 영역은 중앙에 홀이 형성된 도넛 형태를 가진다. 전반사 범위가

Figure 112017093150718-pat00003
내지
Figure 112017093150718-pat00004
일 경우, 홀이 형성된 영역은
Figure 112017093150718-pat00005
보다 각도가 작은 영역에 해당된다. As shown in FIG. 3, the region where one light emitting element can be totally reflected from the viewpoint of the fingerprint contact region has a donut shape in which a hole is formed at the center. The total reflection range
Figure 112017093150718-pat00003
To
Figure 112017093150718-pat00004
, The region where the holes are formed
Figure 112017093150718-pat00005
And corresponds to a region having a smaller angle.

특정 발광 소자가 활성화될 때 도 3에 도시된 전반사가 가능한 영역에서 적절한 지문 영상을 획득할 수 있는 것이며, 분할 영역은 도 3에 도시된 전 반사가 가능한 영역에 기초하여 설정된다. It is possible to obtain an appropriate fingerprint image in the total reflection possible region shown in FIG. 3 when a specific light emitting element is activated, and the divided region is set based on the region capable of total reflection shown in FIG.

도 3을 참조하면, 하나의 분할 영역(전반사가 가능한 영역)에는 홀 영역이 포함되기에 홀 영역에서도 적절한 지문 영상이 획득되려면 분할 영역은 중첩되도록 설정된다. Referring to FIG. 3, since a hole region is included in one divided region (total reflection possible region), the divided region is set to overlap so that a proper fingerprint image can be obtained even in the hole region.

도 4는 본 발명의 일 실시예에 따라 디스플레이에서 지문 접촉이 인지될 경우 분할 영역을 설정하는 일례를 나타낸 도면이다. 4 is a diagram illustrating an example of setting a divided area when fingerprint contact is recognized in a display according to an embodiment of the present invention.

도 4를 참조하면, 다수의 분할 영역이 지문 접촉 영역에 대해 설정되며, 각 분할 영역에서의 지문 영상 정보를 이용하여 최종적인 지문 영상을 생성하게 된다. 도 4에서, 제1 분할 영역(400)은 중앙에 홀이 형성되어 있으며, 제1 분할 영역의 홀에 상응하는 영역의 지문 영상이 획득될 수 있도록 제2 분할 영역 내지 제4 분할 영역(402, 404, 406, 408)이 제1 분할 영역(400)과 중첩되어 설정된다. Referring to FIG. 4, a plurality of divided regions are set for the fingerprint contact region, and the final fingerprint image is generated using the fingerprint image information in each divided region. 4, a hole is formed in the center of the first division area 400, and a fingerprint image of a region corresponding to the hole of the first division area is obtained. The fingerprint image of the second division area to the fourth division area 402, 404, 406, and 408 are overlapped with the first partition 400 and set.

결국, 영역 분할부(210)는 도 4와 같은 방식으로 지문 접촉 영역에 대해 다수의 분할 영역을 설정하게 된다. As a result, the region dividing section 210 sets a plurality of divided regions for the fingerprint contact region in the same manner as in Fig.

영역 분할부(210)에 의해 분할 영역이 설정되면, 분할 영역의 지문 이미지를 획득하기 위해 설정된 분할 영역에 대응되는 발광 소자(102)를 활성화할 필요가 있으며, 발광 소자 활성화 제어부(220)는 지문 이미지를 획득하기 위한 발광 소자를 활성화한다. When the divided area is set by the area dividing unit 210, it is necessary to activate the light emitting element 102 corresponding to the divided area set for acquiring the fingerprint image of the divided area, Thereby activating a light emitting element for acquiring an image.

본 발명은 각 분할 영역의 영상을 순차적으로 획득하는데, 예를 들어 도 4에서 제1 분할 영역(400)의 지문 영상을 획득하고자 할 경우, 발광 소자 활성화 제어부(220)는 제1 분할 영역(400)에서 전반사를 발생시키는 발광 소자를 활성화시킨다. 여기서 활성화되는 발광 소자는 단일 발광 소자인 것이 바람직하나 필요에 따라 인접한 복수의 발광 소자가 동시에 활성화될 수도 있다는 점은 당업자에게 있어 자명할 것이다. For example, in FIG. 4, in order to acquire a fingerprint image of the first partition 400, the light emitting device activation controller 220 controls the first partition 400 ) Activates the light emitting element that causes total reflection. The light emitting element activated here is preferably a single light emitting element, but it will be apparent to those skilled in the art that a plurality of adjacent light emitting elements may be simultaneously activated if necessary.

제1 분할 영역(400)의 지문 이미지가 획득되면, 발광 소자 활성화 제어부(220)는 제2 분할 영역(402)의 지문 이미지를 획득하기 위한 발광 소자를 활성화시킨다. 이와 같은 방식으로 필요한 모든 분할 영역의 지문 이미지를 획득하게 된다. When the fingerprint image of the first partition 400 is acquired, the light emitting element activation controller 220 activates the light emitting element for acquiring the fingerprint image of the second partition 402. In this way, a fingerprint image of all necessary divided areas is acquired.

광 검출 소자 활성화 제어부(230)는 발광 소자의 활성화에 기초하여 발광 소자의 전반사에 의한 광을 수신할 광 검출 소자들의 활성화를 제어한다. 발광 소자의 경우와는 활성화된 발광 소자의 전반사 영역에 해당되는 복수의 광 검출 소자가 활성화된다. The photodetecting element activation control unit 230 controls the activation of the photodetecting elements to receive light by total internal reflection of the light emitting element based on activation of the light emitting element. In the case of the light emitting element, a plurality of light detecting elements corresponding to the total reflection region of the activated light emitting element are activated.

도 5는 본 발명의 일 실시예에 따라 광 검출 소자의 활성화 영역을 설정하는 일례를 설명하기 위한 도면이다. 5 is a diagram for explaining an example of setting an active region of a light detecting element according to an embodiment of the present invention.

도 5를 참조하면,

Figure 112017093150718-pat00006
내지
Figure 112017093150718-pat00007
가 활성화된 발광 소자의 전반사 각도이며, 이 경우,
Figure 112017093150718-pat00008
에 따른 반사파의 도달 거리는 L1으로 표현되며,
Figure 112017093150718-pat00009
에 따른 반사파의 도달 거리는 L2로 표현된다. Referring to Figure 5,
Figure 112017093150718-pat00006
To
Figure 112017093150718-pat00007
Is the total reflection angle of the light emitting element in which the light emitting element is activated,
Figure 112017093150718-pat00008
The arrival distance of the reflected wave according to < RTI ID = 0.0 >
Figure 112017093150718-pat00009
Is represented by L2.

이 경우, 광 검출 소자 활성화 제어부(230)는 활성화되는 발광 소자로부터 L1 내지 L2 거리에 있는 광 검출 소자가 활성화되도록 제어 동작을 수행한다. 활성화되는 광 검출 소자는 도 5의 우측에 동심원의 형태로 표시되어 있다. In this case, the photodetecting element activation controller 230 performs a control operation to activate the photodetecting elements at the L1 to L2 distances from the activated light emitting element. The photodetecting elements to be activated are indicated by concentric circles on the right side of Fig.

물론, 활성화된 발광 소자로부터 L1 내지 L2 거리에 있는 광 검출 소자 전부가 아니라 지문 접촉 영역과 연관된 일부의 광 검출 소자만이 활성화될 수도 있다는 점은 당업자에게 있어 자명할 것이다. Of course, it will be apparent to those skilled in the art that not all of the light detecting elements at the L1 to L2 distances from the activated light emitting element but only some of the light detecting elements associated with the fingerprint contacting area may be activated.

결국, 본 발명은 다수의 분할 영역이 설정된 후, 제1 분할 영역에 대한 지문 이미지를 획득하고자 할 경우, 제1 분할 영역에 대응되는 단일 또는 다수의 발광 소자가 활성화되고, 활성화된 발광 소자에 대응하는 다수의 광 검출 소자가 활성화되며, 활성화된 다수의 광 검출 소자의 광 수신 정보를 이용하여 제1 분할 영역에 대한 지문 이미지를 획득하도록 동작하는 것이다. 이와 같은 동작 원리는 모든 분할 영역에 대해 동일하게 적용된다. As a result, when a plurality of divided regions are set and a fingerprint image for the first divided region is to be obtained, a single or a plurality of light emitting elements corresponding to the first divided region are activated and corresponding to the activated light emitting elements A plurality of photodetecting elements for activating the plurality of photodetecting elements are activated and operate to obtain a fingerprint image for the first divided region using the light receiving information of the plurality of photodetecting elements that are activated. This same operating principle applies equally to all the divided areas.

한편, 본 발명의 다른 실시예에 따르면, 특별히 광 검출 소자의 활성화는 이루어지지 않고 전체 광 검출 소자가 활성화되어 지문 이미지를 획득한 후 활성화된 발광 소자의 전반사 각도 범위에 해당되는 유효 이미지 영역만을 후처리에 의해 선택할 수도 있을 것이다. According to another embodiment of the present invention, the light detecting element is not particularly activated but the entire light detecting element is activated to acquire the fingerprint image, and then only the effective image region corresponding to the total reflection angle range of the activated light emitting element It may be selected by processing.

지문 특징 정보 생성부(240)는 각 분할 영역의 지문 이미지를 이용하여 최종적인 지문 이미지를 생성하고, 생성된 지문 이미지로부터 지문 특징 정보를 생성한다. 앞서 설명한 바와 같이, 다수의 분할 영역은 중첩되어 있으며, 중첩된 부분을 고려하여 최종적인 지문 이미지를 생성한다. The fingerprint feature information generation unit 240 generates a final fingerprint image using the fingerprint image of each of the divided regions, and generates fingerprint feature information from the generated fingerprint image. As described above, a plurality of divided regions are overlapped, and a final fingerprint image is generated in consideration of overlapping portions.

도 6은 본 발명의 일 실시예에 따른 지문 특징 정보 생성부의 구조를 도시한 블록도이다. 6 is a block diagram illustrating the structure of a fingerprint feature information generation unit according to an embodiment of the present invention.

도 6을 참조하면, 본 발명의 일 실시예에 따른 지문 특징 정보 생성부(240)는 분할 영역 이미지 획득부(600), 좌표 보정부(610), 지문 이미지 생성부(620), 후처리부(630) 및 특징 정보 생성부(640)를 포함한다. 6, a fingerprint feature information generating unit 240 according to an exemplary embodiment of the present invention includes a divided region image obtaining unit 600, a coordinate correcting unit 610, a fingerprint image generating unit 620, 630, and a feature information generation unit 640.

분할 영역 이미지 획득부(600)는 광 검출 소자의 광 수신 정보를 이용하여 각 분할 영역별로 분할 영역 이미지를 획득한다. The divided region image obtaining unit 600 obtains the divided region image for each divided region using the light receiving information of the light detecting element.

좌표 설정부(610)는 각 분할 영역 이미지를 이용하여 최종적인 지문 이미지를 생성하기 위해 각 분할 영역 이미지의 합성 위치를 설정하기 위한 좌표를 정한다. The coordinate setting unit 610 sets coordinates for setting a composite position of each divided region image to generate a final fingerprint image using each divided region image.

각 분할 영역 이미지의 합성을 위한 좌표가 정해지면, 지문 이미지 생성부(620)는 분할 영역 이미지들의 합성을 통해 최종적인 지문 이미지를 생성한다. 앞서 설명한 바와 같이, 분할 영역 이미지들은 특정 영역에서 중첩된다. 본 발명의 일 실시예에 따르면, 중첩 영역에서는 각 분할 영역 이미지들의 픽셀값을 합산한 후 평균을 구하는 방식에 의해 중첩 영역의 픽셀값을 결정할 수 있을 것이다. When the coordinates for synthesizing the respective divided region images are determined, the fingerprint image generating unit 620 generates the final fingerprint image through synthesis of the divided region images. As described above, the divided area images overlap in a specific area. According to an embodiment of the present invention, in the overlap region, the pixel values of the overlap region may be determined by summing up the pixel values of the divided region images and obtaining an average.

지문 이미지 생성부(620)에 의해 지문 이미지가 생성되면, 후처리부(630)는 지문 영상의 퀄리티를 향상시키기 위한 후처리를 수행하며, 다양한 방식의 후처리가 적용될 수 있다는 점은 당업자에게 있어 자명할 것이다. When a fingerprint image is generated by the fingerprint image generating unit 620, the post-processing unit 630 performs post-processing for improving the quality of the fingerprint image, and various methods of post-processing can be applied to those skilled in the art something to do.

특징 정보 생성부(640)는 지문 이미지로부터 특징 정보를 추출한다. 특징점 및 특징 좌표를 지문 영상으로부터 추출할 수 있을 것이다. The feature information generation unit 640 extracts feature information from the fingerprint image. Feature points and feature coordinates from the fingerprint image.

도 7은 본 발명의 일 실시예에 따른 디스플레이에서의 지문 인식 방법의 전체적인 흐름을 도시한 순서도이다. 7 is a flowchart illustrating an overall flow of a fingerprint recognition method in a display according to an embodiment of the present invention.

도 7을 참조하면, 사용자가 지문 인식을 위해 단말기의 디스플레이상에 지문을 접촉시킬 경우, 사용자의 지문 접촉 영역을 감지한다(단계 700). Referring to FIG. 7, when the user touches the fingerprint on the display of the terminal for fingerprint recognition, the user's fingerprint contact area is sensed (step 700).

지문 접촉 영역이 감지되면, 지문 접촉 영역에 대한 N개의 분할 영역을 설정한다(단계 702). N개의 분할 영역은 발광 소자의 전반사 각도 범위에 기초하여 설정된다. If a fingerprint contact area is detected, N divided areas for the fingerprint contact area are set (step 702). The N divided areas are set based on the total reflection angle range of the light emitting element.

분할 영역의 설정이 완료되면, 제1 분할 영역에서 전반사 특성을 가지는 발광 소자를 활성화한다(단계 704). 단일의 발광 소자를 활성화시키는 것이 바람직하나 제1 분할 영역에서 전반사 특성을 가지면서 인접해 있는 다수의 발광 소자가 활성화될 수도 있을 것이다. When the setting of the divided area is completed, the light emitting element having the total reflection characteristic in the first divided area is activated (step 704). It is preferable to activate a single light emitting element, but a plurality of adjacent light emitting elements having total internal reflection characteristics in the first division region may be activated.

제1 분할 영역과 연관된 발광 소자의 활성화와 함께 활성화된 발광 소자의 전반사에 의한 광을 수신할 광 검출 소자들을 활성화시킨다(단계 706). 활성화된 광 검출 소자들 역시 활성화된 발광 소자의 전반사 특성에 기초하여 결정된다. Activating photodetecting elements to receive light by total reflection of the activated light emitting element with activation of the light emitting element associated with the first partition (step 706). The activated light detecting elements are also determined based on the total reflection characteristic of the activated light emitting element.

활성화된 광 검출 소자들의 광 수신 정보를 이용하여 제1 분할 영역 이미지를 획득한다(단계 708). A first segmented image is obtained using the light receiving information of the activated light detecting elements (step 708).

단계 702 내지 단계 706의 과정은 제2 분할 영역 및 제N 분할 영역에 대해 동일하게 적용된다. Steps 702 to 706 are applied to the second and the Nth divided areas in the same manner.

제1 내지 제N 분할 영역 이미지가 획득되면, 분할 영역 이미지들의 합성을 통해 지문 이미지를 생성한다(단계 710). 앞서 설명한 바와 같이, 각 분할 영역은 중첩되어 있기에 중첩 영역에서는 각 분할 영역 이미지의 평균값을 픽셀 값으로 설정할 수 있을 것이다. 물론, 평균이 아닌 가중치 평균과 같은 다른 방식이 적용될 수도 있을 것이다. Once the first through N < th > segment images are acquired, a fingerprint image is generated through synthesis of segment images (step 710). As described above, since each divided area is overlapped, the average value of each divided area image in the overlapping area may be set as the pixel value. Of course, other approaches such as weighted averaging may be applied.

지문 이미지가 획득되면, 지문 이미지로부터 특징점 정보 및 특징점 좌표를 포함하는 특징 정보를 생성한다(단계 712). Once the fingerprint image is obtained, feature information including the feature point information and the feature point coordinates is generated from the fingerprint image (step 712).

도 8은 본 발명의 다른 실시예에 따른 지문 인식 장치가 적용되는 단말기의 구조를 도시한 도면이다. FIG. 8 is a diagram illustrating a structure of a terminal to which a fingerprint recognition apparatus according to another embodiment of the present invention is applied.

도 8을 참조하면, 도 1의 실시예와 비교할 때 디스플레이 회로 기판(800)과 디스플레이 글래스(810) 사이에 버퍼 레이어(805)가 형성될 수 있다. 이때, 버퍼 레이어를 구성하는 물질은 유리와 다른 굴절률을 가지는 물질이다. Referring to FIG. 8, a buffer layer 805 may be formed between the display circuit board 800 and the display glass 810 as compared with the embodiment of FIG. At this time, the material constituting the buffer layer is a material having a refractive index different from that of glass.

본 발명의 일 실시예에 따르면, 버퍼 레이어(805)를 구성하는 물질은 UV 경화 접착제를 포함할 수 있을 것이다. According to one embodiment of the present invention, the material constituting the buffer layer 805 may comprise a UV curable adhesive.

앞서 설명한 바와 같이, 발광 소자의 전반사 각도 범위에 기초하여 분할 영역이 결정된다. 전반사 각도 범위가 증가된다면, 더 작은 수의 분할 영역이 요구될 것이며, 이를 통해 전체적인 지문 인식 시간을 줄일 수 있을 것이다. As described above, the divided area is determined based on the total reflection angle range of the light emitting element. If the total reflection angle range is increased, a smaller number of divided areas would be required, thereby reducing the overall fingerprint recognition time.

버퍼 레이어(805)는 전반사 각도 범위의 확대를 위해 디스플레이 회로 기판(800) 및 디스플레이 글래스(810) 사이에 형성되며, 실질적인 전반사 각도 범위의 증가를 위해 유리와 다른 굴절율을 가지는 물질로 버퍼 레이어를 형성하도록 한다. The buffer layer 805 is formed between the display circuit board 800 and the display glass 810 for enlarging the total reflection angle range and forms a buffer layer with a material having a refractive index different from that of glass .

한편, 전반사 각도 범위 확대를 위한 다양한 구조가 단말기에 채용될 수도 있을 것이다. 예를 들어, 도 1에는 디스플레이 회로 기판이 수평 구조인 경우가 도시되어 있으나, 디스플레이 회로 기판을 적절히 절곡시킨다면 전반사 각도 범위를 확대시킬 수 있을 것이다. Meanwhile, various structures for increasing the total reflection angle range may be employed in the terminal. For example, FIG. 1 shows a case in which the display circuit board has a horizontal structure, but if the display circuit board is appropriately bent, the total reflection angle range can be enlarged.

이상에서 설명한 바와 같은 본 발명은 마이크로 렌즈와 같은 별도의 기구를 사용하지 않고 복잡한 영상 복원 알고리즘을 요구하지 않으면서 디스플레이상에서 지문 인식이 가능하다. 또한, 본 발명은 높은 해상도로 지문 인식이 가능하여 지문 형상뿐만 아니라 땀샘과 같은 지문 특징 정보를 효과적으로 인식하는 것이 가능하다. The present invention as described above enables fingerprint recognition on a display without requiring a complicated image restoration algorithm without using a separate mechanism such as a microlens. In addition, the present invention enables fingerprint recognition at a high resolution, so that fingerprint feature information such as sweat glands as well as fingerprint features can be effectively recognized.

이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.As described above, the present invention has been described with reference to particular embodiments, such as specific elements, and specific embodiments and drawings. However, it should be understood that the present invention is not limited to the above- And various modifications and changes may be made thereto by those skilled in the art to which the present invention pertains. Accordingly, the spirit of the present invention should not be construed as being limited to the embodiments described, and all of the equivalents or equivalents of the claims, as well as the following claims, belong to the scope of the present invention .

Claims (20)

디스플레이 회로 기판에 결합되는 다수의 발광 소자 및 다수의 광 검출 소자;
지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 지문 접촉 영역 감지부;
상기 지문 접촉 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 발광 소자 제어부;
상기 활성화될 발광 소자의 전반사 각도 범위에 기초하여 활성화될 광 검출 소자를 제어하는 광 검출 소자 제어부;
상기 활성화된 광 검출 소자로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 지문 특징 정보 생성부; 및
상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 영역 분할부를 포함하되,
상기 광 검출 소자 제어부는 상기 활성화될 발광 소자의 전반사 각도 범위 내에 위치하는 광 검출 소자들을 활성화하도록 제어하고, 상기 영역 분할부에 의해 설정되는 상기 다수의 분할 영역들은 중앙에 홀이 형성된 도넛 형태를 가지고, 상기 홀 영역에서의 적절한 지문 영상이 획득되도록 상기 다수의 분할 영역들은 소정 부분에서 중첩되도록 설정되는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
A plurality of light emitting elements and a plurality of light detecting elements coupled to the display circuit board;
A fingerprint contact area sensing unit for sensing a contact area when a user's finger touches the display for fingerprint recognition;
A light emitting element controller for controlling a light emitting element to be activated for acquiring a specific divided region image among the fingerprint contacting regions;
A photodetector element control unit for controlling a photodetector element to be activated based on a total reflection angle range of the light emitting element to be activated;
A fingerprint feature information generating unit for obtaining a divided region image from the activated photodetector and generating fingerprint feature information using the obtained divided region images; And
And a region dividing unit dividing the fingerprint contact region into a plurality of divided regions based on a total reflection angle range of the plurality of light emitting devices,
The light detecting element control unit controls to activate the light detecting elements located within the total reflection angle range of the light emitting element to be activated, and the plurality of divided regions set by the region dividing unit have a donut shape in which a hole is formed at the center Wherein the plurality of divided regions are set to overlap at a predetermined portion so that an appropriate fingerprint image in the hole region is obtained.
삭제delete 제1항에 있어서,
상기 지문 접촉 영역 감지부는 터치 모듈의 압력 정보를 이용하여 지문 접촉 영역을 감지하는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
The method according to claim 1,
Wherein the fingerprint contact area sensing unit senses a fingerprint contact area using pressure information of the touch module.
삭제delete 제1항에 있어서,
상기 발광 소자 제어부는 상기 특정 분할 영역에 대해 전반사 특성을 가지는 단일의 발광 소자 또는 서로 인접해 있는 복수의 발광 소자를 활성화시키는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
The method according to claim 1,
Wherein the light emitting element control unit activates a single light emitting element having a total internal reflection characteristic or a plurality of light emitting elements adjacent to each other for the specific divided region.
제5항에 있어서,
상기 발광 소자 제어부는 제1 내지 제N 분할 영역 이미지의 획득을 위해 순차적으로 각 분할 영역에 상응하는 발광 소자를 활성화시키며, 상기 광 검출 소자 제어부는 상기 순차적으로 활성화되는 발광 소자에 기초하여 광 검출 소자들을 활성화시키는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
6. The method of claim 5,
Wherein the light emitting element control unit sequentially activates light emitting elements corresponding to each of the divided regions to acquire the first through Nth divided region images, wherein the light detecting element control unit controls the light emitting elements based on the sequentially activated light emitting elements, The user terminal being capable of fingerprint recognition in the display.
제1항에 있어서,
상기 지문 특징 정보 생성부는 상기 분할 영역 이미지들을 합성하여 지문 이미지를 생성하고, 상기 생성된 지문 이미지로부터 상기 지문 특징 정보를 생성하는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
The method according to claim 1,
Wherein the fingerprint feature information generating unit generates a fingerprint image by synthesizing the divided region images, and generates the fingerprint feature information from the generated fingerprint image.
제1항에 있어서,
상기 디스플레이 회로 기판 상부에 적층되는 버퍼 레이어를 더 포함하고, 상기 버퍼 레이어는 디스플레이 글래스와 다른 굴절율을 가지는 물질로 형성되는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
The method according to claim 1,
Further comprising a buffer layer laminated on the display circuit board, wherein the buffer layer is formed of a material having a refractive index different from that of the display glass.
디스플레이 회로 기판에 결합되는 다수의 발광 소자 및 다수의 광 검출 소자;
지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 지문 접촉 영역 감지부;
상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 영역 분할부
상기 지문 접촉 영역 및 상기 다수의 발광 소자의 전반사 각도 범위에 기초하여 활성화될 발광 소자를 제어하는 발광 소자 제어부;
상기 활성화되는 발광 소자에 기초하여 활성화될 광 검출 소자를 제어하는 광 검출 소자 제어부; 및
상기 광 검출 소자에서 수신하는 광 정보를 이용하여 지문 특징 정보를 생성하는 지문 특징 정보 생성부를 포함하되,
상기 영역 분할부는 상기 다수의 발광 소자 각각의 전반사 각도 범위에 해당되는 영역을 분할 영역으로 설정하고, 상기 다수의 분할 영역들은 중앙에 홀이 형성된 도넛 형태를 가지고, 상기 홀 영역에서의 적절한 지문 영상이 획득되도록 상기 다수의 분할 영역들은 소정 부분에서 중첩되도록 설정되는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
A plurality of light emitting elements and a plurality of light detecting elements coupled to the display circuit board;
A fingerprint contact area sensing unit for sensing a contact area when a user's finger touches the display for fingerprint recognition;
And an area dividing section dividing the fingerprint contacting area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices.
A light emitting element controller for controlling the light emitting element to be activated based on the fingerprint contact area and the total reflection angle range of the plurality of light emitting elements;
A photodetector element control unit for controlling a photodetector element to be activated based on the light emitting element to be activated; And
And a fingerprint feature information generation unit that generates fingerprint feature information using the optical information received by the optical detection element,
Wherein the region dividing section sets a region corresponding to a total reflection angle range of each of the plurality of light emitting elements as a divided region, the plurality of divided regions have a donut shape in which a hole is formed at the center, Wherein the plurality of divided regions are set so as to overlap at a predetermined portion so as to be obtained.
디스플레이 회로 기판에 결합되는 다수의 발광 소자 및 다수의 광 검출 소자;
지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 지문 접촉 영역 감지부;
상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 영역 분할부;
상기 다수의 분할 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 발광 소자 제어부; 및
광 검출 소자들로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 지문 특징 정보 생성부를 포함하되,
상기 영역 분할부는 상기 다수의 발광 소자 각각의 전반사 각도 범위에 해당되는 영역을 분할 영역으로 설정하고, 상기 다수의 분할 영역들은 중앙에 홀이 형성된 도넛 형태를 가지고, 상기 홀 영역에서의 적절한 지문 영상이 획득되도록 상기 다수의 분할 영역들은 소정 부분에서 중첩되도록 설정되는 것을 특징으로 하는 디스플레이에서의 지문 인식이 가능한 사용자 단말기.
A plurality of light emitting elements and a plurality of light detecting elements coupled to the display circuit board;
A fingerprint contact area sensing unit for sensing a contact area when a user's finger touches the display for fingerprint recognition;
An area dividing unit dividing the fingerprint contacting area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices;
A light emitting element controller for controlling a light emitting element to be activated for obtaining a specific divided region image among the plurality of divided regions; And
A fingerprint feature information generation unit that obtains a segment region image from the photodetector elements and generates fingerprint feature information using the obtained segment region images,
Wherein the region dividing section sets a region corresponding to a total reflection angle range of each of the plurality of light emitting elements as a divided region, the plurality of divided regions have a donut shape in which a hole is formed at the center, Wherein the plurality of divided regions are set so as to overlap at a predetermined portion so as to be obtained.
디스플레이 회로 기판에 다수의 발광 소자 및 다수의 광 검출 소자가 결합된 단말기 디스플레이에서의 지문 인식 방법으로서,
지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 지문 접촉 영역을 감지하는 단계(a);
상기 지문 접촉 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 단계(b);
상기 활성화될 발광 소자의 전반사 각도 범위에 기초하여 활성화될 광 검출 소자를 제어하는 단계(c); 및
상기 활성화된 광 검출 소자로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 단계(d)를 포함하되,
상기 단계(c)는 상기 활성화될 발광 소자의 전반사 각도 범위 내에 있는 광 검출 소자들을 활성화하도록 제어하고,
상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 단계를 더 포함하며,
상기 다수의 분할 영역들은 중앙에 홀이 형성된 도넛 형태를 가지고, 상기 홀 영역에서의 적절한 지문 영상이 획득되도록 상기 다수의 분할 영역들은 소정 부분에서 중첩되도록 설정되는 것을 특징으로 하는 지문 인식 방법.
A fingerprint recognition method in a terminal display in which a plurality of light emitting elements and a plurality of light detecting elements are combined on a display circuit board,
(A) detecting a fingerprint contact area when a user's finger touches the display for fingerprint recognition;
(B) controlling a light emitting element to be activated for acquisition of a specific one of the fingerprint contact areas;
(C) controlling a light detecting element to be activated based on a total reflection angle range of the light emitting element to be activated; And
(D) obtaining a segmented region image from the activated photodetecting device and generating fingerprint feature information using the obtained segmented region images,
Wherein the step (c) controls to activate the light detecting elements within the total reflection angle range of the light emitting element to be activated,
Further comprising dividing the fingerprint contact area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices,
Wherein the plurality of divided regions have a donut shape in which a hole is formed at a center, and the plurality of divided regions are set to overlap at a predetermined portion so that a proper fingerprint image is obtained in the hole region.
삭제delete 제11항에 있어서,
상기 단계(a)는 터치 모듈의 압력 정보를 이용하여 지문 접촉 영역을 감지하는 것을 특징으로 하는 지문 인식 방법.
12. The method of claim 11,
Wherein the step (a) detects the fingerprint contact area using the pressure information of the touch module.
삭제delete 제11항에 있어서,
상기 단계(c)는 상기 특정 분할 영역에 대해 전반사 특성을 가지는 단일의 발광 소자 또는 서로 인접해 있는 복수의 발광 소자를 활성화시키는 것을 특징으로 하는 지문 인식 방법.
12. The method of claim 11,
Wherein the step (c) activates a single light emitting element having a total reflection characteristic for the specific divided region or a plurality of light emitting elements adjacent to each other.
제15항에 있어서,
상기 단계(c)는 제1 내지 제N 분할 영역 이미지의 획득을 위해 순차적으로 각 분할 영역에 상응하는 발광 소자를 활성화시키며, 상기 단계(d)는 상기 순차적으로 활성화되는 발광 소자에 기초하여 광 검출 소자들을 활성화시키는 것을 특징으로 하는 지문 인식 방법.
16. The method of claim 15,
Wherein the step (c) activates a light emitting element corresponding to each of the divided areas in order to acquire the first through Nth divided area images, wherein the step (d) And activating the devices.
제11항에 있어서,
상기 단계(d)는 상기 분할 영역 이미지들을 합성하여 지문 이미지를 생성하고, 상기 생성된 지문 이미지로부터 상기 지문 특징 정보를 생성하는 것을 특징으로 하는 지문 인식 방법.
12. The method of claim 11,
Wherein the step (d) generates a fingerprint image by synthesizing the divided region images, and generates the fingerprint feature information from the generated fingerprint image.
삭제delete 디스플레이 회로 기판에 다수의 발광 소자 및 다수의 광 검출 소자가 결합된 단말기 디스플레이에서의 지문 인식 방법으로서,
지문 인식을 위해 사용자의 손가락이 디스플레이에 접촉될 경우 접촉 영역을 감지하는 단계(a);
상기 다수의 발광 소자의 전반사 각도 범위의 기초하여 상기 지문 접촉 영역을 다수의 분할 영역으로 분할하는 단계(b);
상기 다수의 분할 영역 중 특정 분할 영역 이미지의 획득을 위해 활성화될 발광 소자를 제어하는 단계(c); 및
광 검출 소자들로부터 분할 영역 이미지를 획득하고, 획득된 분할 영역 이미지들을 이용하여 지문 특징 정보를 생성하는 단계(d)를 포함하되,
상기 단계(b)는 다수의 발광 소자 각각의 전반사 각도 범위에 해당되는 영역을 분할 영역으로 설정하고, 상기 다수의 분할 영역들은 중앙에 홀이 형성된 도넛 형태를 가지고, 상기 홀 영역에서의 적절한 지문 영상이 획득되도록 상기 다수의 분할 영역들은 소정 부분에서 중첩되도록 설정되는 것을 특징으로 하는 지문 인식 방법.
A fingerprint recognition method in a terminal display in which a plurality of light emitting elements and a plurality of light detecting elements are combined on a display circuit board,
(A) detecting a contact area when a user's finger touches the display for fingerprint recognition;
(B) dividing the fingerprint contact area into a plurality of divided areas based on a total reflection angle range of the plurality of light emitting devices;
(C) controlling a light emitting element to be activated for acquiring a specific divided region image among the plurality of divided regions; And
(D) obtaining a segmented region image from the light detecting elements, and generating fingerprint feature information using the obtained segmented regions images,
Wherein the step (b) sets a region corresponding to a total reflection angle range of each of the plurality of light emitting devices as a divided region, the plurality of divided regions have a donut shape in which a hole is formed at the center, Wherein the plurality of divided regions are set so as to overlap each other at a predetermined portion.
제11항 및 제19항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록되어 있으며 컴퓨터에 의한 판독 가능한 프로그램이 기록된 기록 매체.







A recording medium on which a program for executing the method of any one of claims 11 to 19 is recorded and a program that can be read by a computer is recorded.







KR1020170123199A 2017-09-25 2017-09-25 User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint KR101923320B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170123199A KR101923320B1 (en) 2017-09-25 2017-09-25 User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170123199A KR101923320B1 (en) 2017-09-25 2017-09-25 User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint

Publications (1)

Publication Number Publication Date
KR101923320B1 true KR101923320B1 (en) 2018-11-28

Family

ID=64561580

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170123199A KR101923320B1 (en) 2017-09-25 2017-09-25 User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint

Country Status (1)

Country Link
KR (1) KR101923320B1 (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110707140A (en) * 2019-11-11 2020-01-17 北京迈格威科技有限公司 OLED display device and fingerprint identification method
CN111339896A (en) * 2020-02-21 2020-06-26 武汉华星光电技术有限公司 Fingerprint identification structure and display panel
WO2020141662A1 (en) * 2018-12-31 2020-07-09 엘지디스플레이 주식회사 Optical-type fingerprint recognition display and operation method thereof
KR20200085632A (en) 2019-01-07 2020-07-15 (주)화이트스톤 Screen protector for an electronic device having a display including a fingerprint recognition sensor
CN111626262A (en) * 2020-06-05 2020-09-04 无锡睿勤科技有限公司 Terminal and control method thereof
WO2020220305A1 (en) * 2019-04-30 2020-11-05 深圳市汇顶科技股份有限公司 Under-screen fingerprint identification apparatus and electronic device
US11080507B2 (en) 2019-08-27 2021-08-03 Samsung Display Co., Ltd. Fingerprint sensing method, fingerprint sensor, and display device including the same
US11106886B2 (en) 2019-12-03 2021-08-31 Samsung Electronics Co., Ltd. Combined fingerprint recognition touch sensor, electronic apparatus including the same, and fingerprint enrollment method
WO2023234517A1 (en) * 2022-05-31 2023-12-07 삼성전자 주식회사 Method for obtaining fingerprint by using display and optical sensor, and electronic device therefor
KR20240039254A (en) 2022-09-19 2024-03-26 경희대학교 산학협력단 Display apparatus for recognizing finger print and operating method thereof

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11705036B2 (en) 2018-12-31 2023-07-18 Lg Display Co., Ltd. Optical-type fingerprint recognition display and operation method thereof
WO2020141662A1 (en) * 2018-12-31 2020-07-09 엘지디스플레이 주식회사 Optical-type fingerprint recognition display and operation method thereof
KR20200085632A (en) 2019-01-07 2020-07-15 (주)화이트스톤 Screen protector for an electronic device having a display including a fingerprint recognition sensor
WO2020220305A1 (en) * 2019-04-30 2020-11-05 深圳市汇顶科技股份有限公司 Under-screen fingerprint identification apparatus and electronic device
US11488412B2 (en) 2019-08-27 2022-11-01 Samsung Display Co., Ltd. Fingerprint sensing method, fingerprint sensor, and display device including the same
US11080507B2 (en) 2019-08-27 2021-08-03 Samsung Display Co., Ltd. Fingerprint sensing method, fingerprint sensor, and display device including the same
CN110707140A (en) * 2019-11-11 2020-01-17 北京迈格威科技有限公司 OLED display device and fingerprint identification method
US11106886B2 (en) 2019-12-03 2021-08-31 Samsung Electronics Co., Ltd. Combined fingerprint recognition touch sensor, electronic apparatus including the same, and fingerprint enrollment method
WO2021164089A1 (en) * 2020-02-21 2021-08-26 武汉华星光电技术有限公司 Fingerprint identification structure and display panel
CN111339896B (en) * 2020-02-21 2021-09-24 武汉华星光电技术有限公司 Fingerprint identification structure and display panel
US11502211B2 (en) 2020-02-21 2022-11-15 Wuhan China Star Optoelectronics Technology Co., Ltd. Fingerprint identification structure and display panel
CN111339896A (en) * 2020-02-21 2020-06-26 武汉华星光电技术有限公司 Fingerprint identification structure and display panel
CN111626262A (en) * 2020-06-05 2020-09-04 无锡睿勤科技有限公司 Terminal and control method thereof
CN111626262B (en) * 2020-06-05 2023-10-31 无锡睿勤科技有限公司 Terminal and control method thereof
WO2023234517A1 (en) * 2022-05-31 2023-12-07 삼성전자 주식회사 Method for obtaining fingerprint by using display and optical sensor, and electronic device therefor
KR20240039254A (en) 2022-09-19 2024-03-26 경희대학교 산학협력단 Display apparatus for recognizing finger print and operating method thereof

Similar Documents

Publication Publication Date Title
KR101923320B1 (en) User Terminal which is able to Detect Fingerprint on Display and Method for Detecting Fingerprint
US10963671B2 (en) Multifunction fingerprint sensor having optical sensing capability
US11892710B2 (en) Eyewear device with fingerprint sensor for user input
US10438046B2 (en) Multifunction fingerprint sensor having optical sensing against fingerprint spoofing
US9646193B2 (en) Fingerprint authentication using touch sensor data
CN108694379B (en) Device for recording an imprint of a body part
US7274808B2 (en) Imaging system and apparatus for combining finger recognition and finger navigation
US7158659B2 (en) System and method for multiplexing illumination in combined finger recognition and finger navigation module
WO2019061535A1 (en) Fingerprint recognition method, fingerprint recognition device and terminal equipment
US7164782B2 (en) System and method for time-space multiplexing in finger-imaging applications
JP2006517311A (en) Pointing device having fingerprint authentication function, fingerprint authentication and pointing method thereof, and service providing method of portable terminal using the fingerprint authentication
US20110122099A1 (en) Multiple-input touch panel and method for gesture recognition
US7631811B1 (en) Optical headset user interface
CN112199981A (en) Method for registering fingerprint, method for performing fingerprint identification, and electronic device
US10726232B2 (en) Flat panel display having optical sensor
KR101898067B1 (en) Optical sensor module and optical sensing method
CN110192201B (en) Method and device for calibrating image and electronic equipment
TWI631935B (en) Biometric identification apparatus
US20210334495A1 (en) Display device including a fingerprint sensor and a method of driving the same
CN109564624B (en) Method and device for identifying fingerprint Logo and electronic equipment
US11398110B2 (en) Biometric imaging device
KR100629410B1 (en) A Pointing Device and Pointing Method having the Fingerprint Image Recognition Function, and Mobile Terminal Device therefor
KR100586958B1 (en) Optical Finger-Print Certification System Having Wide Finger-Print Contact Area
CN109032430B (en) Optical touch panel device
TWM552619U (en) Biometric identification apparatus

Legal Events

Date Code Title Description
AMND Amendment
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant