KR20180100941A - Display device for electronic device and authentication method - Google Patents

Display device for electronic device and authentication method Download PDF

Info

Publication number
KR20180100941A
KR20180100941A KR1020170027484A KR20170027484A KR20180100941A KR 20180100941 A KR20180100941 A KR 20180100941A KR 1020170027484 A KR1020170027484 A KR 1020170027484A KR 20170027484 A KR20170027484 A KR 20170027484A KR 20180100941 A KR20180100941 A KR 20180100941A
Authority
KR
South Korea
Prior art keywords
user
fingerprint
signal
electronic device
lower electrode
Prior art date
Application number
KR1020170027484A
Other languages
Korean (ko)
Other versions
KR102007255B1 (en
Inventor
유승협
이현우
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020170027484A priority Critical patent/KR102007255B1/en
Publication of KR20180100941A publication Critical patent/KR20180100941A/en
Application granted granted Critical
Publication of KR102007255B1 publication Critical patent/KR102007255B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H10SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10KORGANIC ELECTRIC SOLID-STATE DEVICES
    • H10K59/00Integrated devices, or assemblies of multiple devices, comprising at least one organic light-emitting element covered by group H10K50/00
    • H10K59/10OLED displays
    • H10K59/12Active-matrix OLED [AMOLED] displays
    • H10K59/121Active-matrix OLED [AMOLED] displays characterised by the geometry or disposition of pixel elements
    • H10K59/1216Active-matrix OLED [AMOLED] displays characterised by the geometry or disposition of pixel elements the pixel elements being capacitors
    • H01L27/3227
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G06K9/00013
    • G06K9/00885
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/02Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components specially adapted for rectifying, oscillating, amplifying or switching and having at least one potential-jump barrier or surface barrier; including integrated passive circuit elements with at least one potential-jump barrier or surface barrier
    • H01L27/12Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components specially adapted for rectifying, oscillating, amplifying or switching and having at least one potential-jump barrier or surface barrier; including integrated passive circuit elements with at least one potential-jump barrier or surface barrier the substrate being other than a semiconductor body, e.g. an insulating body
    • H01L27/1214Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components specially adapted for rectifying, oscillating, amplifying or switching and having at least one potential-jump barrier or surface barrier; including integrated passive circuit elements with at least one potential-jump barrier or surface barrier the substrate being other than a semiconductor body, e.g. an insulating body comprising a plurality of TFTs formed on a non-semiconducting substrate, e.g. driving circuits for AMLCDs
    • H01L27/1255Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components specially adapted for rectifying, oscillating, amplifying or switching and having at least one potential-jump barrier or surface barrier; including integrated passive circuit elements with at least one potential-jump barrier or surface barrier the substrate being other than a semiconductor body, e.g. an insulating body comprising a plurality of TFTs formed on a non-semiconducting substrate, e.g. driving circuits for AMLCDs integrated with passive devices, e.g. auxiliary capacitors
    • H01L27/3265
    • HELECTRICITY
    • H10SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10KORGANIC ELECTRIC SOLID-STATE DEVICES
    • H10K59/00Integrated devices, or assemblies of multiple devices, comprising at least one organic light-emitting element covered by group H10K50/00
    • H10K59/60OLEDs integrated with inorganic light-sensitive elements, e.g. with inorganic solar cells or inorganic photodiodes

Abstract

A display device for an electronic device, capable of extracting a bio-signal of a user of an electronic device, comprises an organic light emitting element and a backplane. The backplane includes a drive thin film transistor driving the organic light emitting element, a capacitor positioned between the drive thin film transistor and the organic light emitting element, and a photo detector including a first upper electrode, a first lower electrode, and a light absorbing layer positioned between the first upper electrode and the first lower electrode. The capacitor and the photo detector are formed on the same layer.

Description

전자 장치용 디스플레이 장치 및 인증 방법{DISPLAY DEVICE FOR ELECTRONIC DEVICE AND AUTHENTICATION METHOD}TECHNICAL FIELD [0001] The present invention relates to a display device and an authentication method for an electronic device,

본 발명은 전자 장치용 디스플레이 장치 및 인증 방법에 관한 것이다.
The present invention relates to a display device for an electronic device and an authentication method.

최근, 단순한 통화 기능 외에, 예를 들어, 사진 또는 동영상 촬영, 인터넷 통신 등과 같은 다양한 기능들을 더 포함하는 전자 장치들이 개발되고 있다. 이렇게 전자 장치들이 다양한 기능들을 포함하게 됨에 따라 개인정보 보안에 대한 중요성이 더욱 대두되고 있다. 특히, 인터넷을 이용한 금융 결제와 같이, 타인에 의해 도용될 경우 매우 심각한 피해를 초래할 수 있는 기능들을 포함하는 전자 장치에서의 개인 정보 보안은 매우 중요하다.In recent years, electronic devices including various functions such as photographing or moving pictures, Internet communication, and the like have been developed in addition to a simple communication function. As such electronic devices include various functions, personal information security is becoming more important. In particular, personal information security in electronic devices including functions that may cause very serious damage when stolen by others, such as financial settlement using the Internet, is very important.

이를 위해, 최근에는 생체 정보를 이용한 보안 방법들이 제안되고 있다. 생체 정보를 이용한 보안 방법은 타인과 구별되는 개인 특유의 생체 정보를 이용하여 사용자를 인증하는 것이므로, 그 안정성이 매우 높다. 생체 정보를 이용한 보안 방법의 대표적인 예로서 지문을 이용한 보안 방법이 있다. 지문은 개개인마다 각기 다르기 때문에 보안 시스템에서 가장 먼저 채택된 생체 조직이다. 지문을 이용한 보안 방법은 지문 인식 장치에 의한 지문 인식률이 높고, 사용자가 쉽게 사용할 수 있기 때문에 가장 폭넓게 사용되고 있다.Recently, security methods using biometric information have been proposed. Since the security method using the biometric information authenticates the user by using the biometric information unique to the individual different from the other, the stability is very high. As a representative example of a security method using biometric information, there is a security method using a fingerprint. Since the fingerprints are different for each individual, it is the first biometrics adopted in the security system. The security method using the fingerprint is the most widely used because the fingerprint recognition rate by the fingerprint recognition device is high and the user can easily use it.

이러한 지문 인식을 이용하여 인증을 수행하는 기술은 공개실용신안공보 20-2015-0004413, 공개특허공보 10-2016-0072682에 개시되어 있다.A technique for performing authentication using such a fingerprint recognition is disclosed in Published Utility Model Publication No. 20-2015-0004413, Publication No. 10-2016-0072682.

그러나, 지문은 실리콘 등의 재질로 위조하는 것이 가능하다. 즉, 실리콘으로 만든 페이크 지문으로 보안 시스템을 뚫는 것이 가능하여 이러한 페이크 지문에 대한 대책이 시급한 실정이다.
However, fingerprints can be forged with materials such as silicon. In other words, it is possible to penetrate the security system with a fake fingerprint made of silicone, and measures against such fake fingerprint are urgent.

KR 20-2015-0004413KR 20-2015-0004413 KR 10-2016-0072682KR 10-2016-0072682

본 발명의 실시예들은 전자 장치용 디스플레이 장치 및 인증 방법을 제공한다.
Embodiments of the present invention provide a display device for an electronic device and an authentication method.

본 발명의 일 실시예에 따라, 전자 장치용 디스플레이 장치는 유기발광소자 및 백플레인을 포함하며, 상기 백플레인은 상기 유기발광소자를 구동하는 구동 박막트랜지스터(Thin Film Transistor); 상기 구동 박막트랜지스터와 상기 유기발광소자 사이에 위치하는 커패시터; 제1 상부전극, 제1 하부전극 및 상기 제1 상부전극과 상기 제1 하부전극 사이에 위치된 광 흡수층을 포함하는 포토 디텍터를 포함하며, 상기 커패시터와 상기 포토 디텍터는 동일한 층에 형성된다. According to an embodiment of the present invention, a display device for an electronic device includes an organic light emitting diode and a backplane, and the backplane includes a driving thin film transistor (Thin Film Transistor) driving the organic light emitting diode; A capacitor located between the driving thin film transistor and the organic light emitting device; And a photodetector including a first upper electrode, a first lower electrode, and a light absorbing layer positioned between the first upper electrode and the first lower electrode, wherein the capacitor and the photodetector are formed on the same layer.

상기 커패시터는 제2 상부전극, 제2 하부전극, 및 상기 제2 상부전극과 상기 제2 하부전극 사이에 위치한 절연층을 포함할 수 있다.The capacitor may include a second upper electrode, a second lower electrode, and an insulating layer disposed between the second upper electrode and the second lower electrode.

상기 포토 디텍터의 제1 상부전극과 제1 하부전극은 상기 커패시터의 제2 상부전극과 제2 하부전극과 동일한 재료로 형성될 수 있다.The first upper electrode and the first lower electrode of the photodetector may be formed of the same material as the second upper electrode and the second lower electrode of the capacitor.

상기 커패시터의 제2 하부전극은 상기 구동 박막트랜지스터의 소스 또는 드레인 전극과 동일한 층에 위치할 수 있다. The second lower electrode of the capacitor may be located on the same layer as the source or drain electrode of the driving thin film transistor.

본 발명의 다른 실시예에 따라, 전자 장치에서의 인증 방법은 사용자의 인증요청이 있으면, 상기 사용자의 지문의 이미지를 추출하는 단계; 상기 사용자의 지문이 유효한 지문인 지를 판단하는 단계; 상기 사용자의 지문이 유효한 지문이면 상기 사용자의 생체 신호를 추출하는 단계; 상기 사용자의 생체 신호를 추출하면 상기 사용자의 지문이 정당하게 입력된 것으로 판단하는 단계; 및 상기 사용자의 지문이 정당하게 입력된 것으로 판단하면, 인증 성공에 따른 처리를 수행하는 단계를 포함한다. According to another embodiment of the present invention, there is provided an authentication method in an electronic device, comprising: extracting an image of the fingerprint of the user when an authentication request of the user exists; Determining whether the fingerprint of the user is a valid fingerprint; Extracting a biometric signal of the user if the fingerprint of the user is a valid fingerprint; Determining that the fingerprint of the user is legitimately input if the user's biological signal is extracted; And if the fingerprint of the user is judged to have been properly input, performing a process according to the authentication success.

전자 장치에서의 인증 방법은 상기 사용자의 생체 신호를 추출하지 못하면, 상기 사용자의 지문이 정당하지 않게 입력된 것으로 판단하는 단계; 및 상기 사용자의 지문이 정당하지 않게 입력된 것으로 판단하면, 인증 실패에 따른 처리를 수행하는 단계를 포함할 수 있다. The authentication method in the electronic device includes: determining that the fingerprint of the user is improperly input if the user's biological signal can not be extracted; And performing a process according to the authentication failure if it is determined that the fingerprint of the user is not input correctly.

본 발명의 또 다른 실시예에 따라, 전자 장치에서의 인증 방법은 사용자의 인증요청이 있으면, 상기 사용자의 지문의 이미지를 추출하는 단계; 상기 사용자의 지문이 유효한 지문인 지를 판단하는 단계; 상기 사용자의 지문이 유효한 지문이면 상기 사용자의 생체 신호를 추출하는 단계; 상기 사용자의 생체 신호를 추출하면 상기 생체 신호의 적어도 하나의 특징을 추출하는 단계; 상기 적어도 하나의 특징이 미리 결정된 범위 이내인 지를 판단하는 단계; 및 상기 적어도 하나의 특징이 미리 결정된 범위 이내이면, 상기 사용자의 지문이 정당하게 입력된 것으로 판단하고, 인증 성공에 따른 처리를 수행하는 단계를 포함한다.According to another embodiment of the present invention, there is provided an authentication method in an electronic device, comprising: extracting an image of the fingerprint of the user when an authentication request of the user exists; Determining whether the fingerprint of the user is a valid fingerprint; Extracting a biometric signal of the user if the fingerprint of the user is a valid fingerprint; Extracting at least one characteristic of the bio-signal when the bio-signal of the user is extracted; Determining whether the at least one characteristic is within a predetermined range; And if the at least one feature is within a predetermined range, determining that the fingerprint of the user is legitimately input, and performing a process according to the authentication success.

상기 생체 신호는 심박 신호 및 산소 포화도 신호를 포함할 수 있다.
The bio-signal may include a heartbeat signal and an oxygen saturation signal.

이와 같이, 본 발명에 따르면 디스플레이 장치에 포토 디텍터를 내장하여 전자 장치의 사용자의 생체 신호를 추출할 수 있다. 그리고 페이크 지문을 검출하여 종래의 지문 보안에 따른 문제점을 해결할 수 있다.
As described above, according to the present invention, a bio-signal of a user of an electronic device can be extracted by incorporating a photo detector in a display device. In addition, a fake fingerprint can be detected to solve a problem due to security of a conventional fingerprint.

도 1은 본 발명의 일 실시예에 따른 디스플레이 장치를 갖는 전자 장치의 외관을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 전자 장치의 블록 구성도를 도시한다.
도 3은 도 2의 생체 신호 추출부에서 추출한 심장 박동 신호를 나타낸 그래프이다.
도 4는 본 발명의 일 실시예에 따른 디스플레이 장치에 포함된 각 픽셀의 구조를 나타낸 도면이다.
도 5는 도 4의 디스플레이 장치의 각 픽셀을 나타낸 회로도이다.
도 6은 본 발명의 일 실시예에 따른 전자 장치에서 지문 인증을 수행하는 방법의 흐름도를 나타낸다.
도 7은 본 발명의 다른 실시예에 따른 전자 장치에서 지문 인증을 수행하는 방법의 흐름도를 나타낸다.
1 is a view showing an appearance of an electronic device having a display device according to an embodiment of the present invention.
2 shows a block diagram of an electronic device according to an embodiment of the present invention.
FIG. 3 is a graph showing a heartbeat signal extracted by the bio-signal extracting unit of FIG. 2. FIG.
4 is a diagram illustrating the structure of each pixel included in a display device according to an embodiment of the present invention.
5 is a circuit diagram showing each pixel of the display device of FIG.
6 shows a flowchart of a method of performing fingerprint authentication in an electronic device according to an embodiment of the present invention.
7 shows a flowchart of a method of performing fingerprint authentication in an electronic device according to another embodiment of the present invention.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.The following detailed description of the invention refers to the accompanying drawings, which illustrate, by way of illustration, specific embodiments in which the invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, certain features, structures, and characteristics described herein may be implemented in other embodiments without departing from the spirit and scope of the invention in connection with an embodiment. It is also to be understood that the position or arrangement of the individual components within each disclosed embodiment may be varied without departing from the spirit and scope of the invention. In the drawings, like reference numerals refer to the same or similar functions throughout the several views.

도 1은 본 발명의 일 실시예에 따른 디스플레이 장치를 갖는 전자 장치의 외관을 나타낸 도면이다.1 is a view showing an appearance of an electronic device having a display device according to an embodiment of the present invention.

도 1을 참조하면, 전자 장치(100)는 각종 데이터 및 이미지를 표시하는 디스플레이 장치(110)를 포함한다. 디스플레이 장치(110)는 OLED(Organic Light Emitting Diode) 방식의 디스플레이 장치로서, AMOLED(Active Matrix OLED: 능동형 유기 발광 다이오드) 발광 방식을 채용하고 있다. AMOLED는 발광 소자마다 박막 트랜지스터(TFT: Thin Film Transistor)를 내장하여 각 소자의 발광 여부를 개별적으로 제어할 수 있다.Referring to FIG. 1, an electronic device 100 includes a display device 110 that displays various data and images. The display device 110 is an OLED (Organic Light Emitting Diode) type display device and adopts an AMOLED (Active Matrix OLED) method. The AMOLED incorporates a thin film transistor (TFT) for each light emitting device so that the light emission of each device can be individually controlled.

전자 장치(100)는 본 발명의 일 실시예에 따라, 사용자를 인증하는 경우, 사용자의 지문을 이용한다. 이 경우, 전자 장치(100)는 사용자의 지문을 디스플레이 장치(110)을 통해 인식할 수 있다. 구체적으로, 전자 장치(100)는 디스플레이 장치(110)의 일부 영역 상에 사용자가 손가락을 대면, 지문 이미지를 획득할 수 있다. 이 경우, 지문 이미지를 이용하여 사용자 인증을 수행하면, 페이크 지문을 검출할 방법이 없었다. The electronic device 100, in accordance with one embodiment of the present invention, uses the fingerprint of the user when authenticating the user. In this case, the electronic device 100 can recognize the fingerprint of the user through the display device 110. [ Specifically, the electronic device 100 can acquire a fingerprint image when a user touches a finger on a partial area of the display device 110. [ In this case, when the user authentication is performed using the fingerprint image, there is no way to detect the fake fingerprint.

본 발명의 실시예들에 따라, 전자 장치(100)는 사용자가 디스플레이 장치(110)에 손가락을 대면 사용자의 지문이 페이크 지문인지 아닌 지를 판단할 수 있다. 이를 위해 전자 장치(100)는 사용자의 지문이 페이크 지문인지 아닌지를 판단할 수 있도록 디스플레이 장치(110)의 미리 정해진 영역(112)에 포토디텍터를 내장하여 사용자의 심박 신호 또는 산소 포화도 신호와 같은 생체 신호를 추출한다.According to embodiments of the present invention, the electronic device 100 may determine whether the user's fingerprint is a fake fingerprint when the user touches the display device 110 with a finger. To this end, the electronic device 100 incorporates a photodetector in a predetermined area 112 of the display device 110 so as to determine whether the user's fingerprint is a fake fingerprint or not, thereby detecting a user's heartbeat signal or oxygen saturation signal, Extract the signal.

이를 위해 전자 장치는 도 2에 도시된 바와 같은 블록 구성도를 갖는다. To this end, the electronic device has a block diagram as shown in Fig.

도 2는 본 발명의 일 실시예에 따른 전자 장치의 블록 구성도를 도시한다. 2 shows a block diagram of an electronic device according to an embodiment of the present invention.

도 2를 참조하면, 전자 장치(100)는 버스(102), 디스플레이 장치(110), 생체 신호 추출부(120), 프로세서(130), 메모리(140), 입출력 인터페이스(150)를 포함할 수 있다. 2, the electronic device 100 may include a bus 102, a display device 110, a bio-signal extractor 120, a processor 130, a memory 140, and an input / output interface 150 have.

버스(102)는 전자 장치(100)의 구성요소들을 서로 연결하고, 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다. 프로세서(130)는, 예를 들면, 버스(102)를 통해 다른 구성요소들(예를 들어 메모리(140), 입출력 인터페이스(150), 디스플레이 장치(110), 생체 신호 추출부(120) 등)으로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독명령에 따른 연산이나 데이터 처리를 실행할 수 있다.The bus 102 may be a circuit that couples the components of the electronic device 100 to one another and communicates (e.g., a control message) between the components. The processor 130 is connected to other components (e.g., the memory 140, the input / output interface 150, the display device 110, the biological signal extractor 120, etc.) via the bus 102, , Decrypts the received command, and can execute an operation or data processing according to the decryption command.

메모리(140)는, 프로세서(130) 또는 다른 구성요소들(예: 입출력 인터페이스(150), 디스플레이 장치(110), 생체 신호 추출부(120) 등)로부터 수신되거나 프로세서(130) 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 메모리(140)는, 예를 들면, 커널(141), 미들웨어(142), 어플리케이션 프로그래밍 인터페이스(API: application programming interface)(143) 또는 어플리케이션(144) 등의 프로그래밍 모듈들을 포함할 수 있다. 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.The memory 140 may be received from the processor 130 or other components (e.g., the input / output interface 150, the display device 110, the bio-signal extractor 120, Lt; RTI ID = 0.0 > and / or < / RTI > The memory 140 may include programming modules such as, for example, a kernel 141, a middleware 142, an application programming interface (API) 143, or an application 144. Each of the programming modules may be comprised of software, firmware, hardware, or a combination of at least two of them.

커널(141)은 나머지 다른 프로그래밍 모듈들, 예를 들면, 미들웨어(142), API(143) 또는 어플리케이션(144)에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스(102), 프로세서(130) 또는 메모리(140) 등)을 제어 또는 관리할 수 있다. 또한, 커널(141)은 미들웨어(142), API(143) 또는 어플리케이션(144)에서 전자 장치(10)의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.The kernel 141 may include system resources (e.g., bus 102 (e.g., a bus), etc.) used to execute an operation or function implemented in the rest of the programming modules, e.g., middleware 142, API 143, (E.g., processor 130, memory 140, etc.). The kernel 141 may also provide an interface through which middleware 142, API 143 or application 144 may access or control or manage the individual components of the electronic device 10.

미들웨어(142)는 API(143) 또는 어플리케이션(144)이 커널(141)과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 미들웨어(142)는 어플리케이션(144)으로부터 수신된 작업 요청들과 관련하여, 예를 들면, 어플리케이션(144) 중 적어도 하나의 어플리케이션에 전자 장치(10)의 시스템 리소스(예: 버스(102), 프로세서(130) 또는 메모리(140) 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)를 수행할 수 있다.The middleware 142 can act as an intermediary for the API 143 or the application 144 to communicate with the kernel 141 to exchange data. The middleware 142 may also be configured to communicate system resources (e.g., bus 102) of the electronic device 10 to at least one application of the application 144, for example in connection with work requests received from the application 144. [ (E.g., scheduling or load balancing) of a work request using a method such as assigning a priority that can be used by a processor (e.g., processor 130, memory 140, etc.).

API(143)는 어플리케이션(144)이 커널(141) 또는 미들웨어(142)에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.The API 143 is an interface for the application 144 to control the functions provided by the kernel 141 or the middleware 142 and may include at least one Interface or function (e.g., command).

다양한 실시예에 따르면, 어플리케이션(144)은 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 어플리케이션(144)은 전자 장치(100)와 외부 전자 장치 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 정보 교환과 관련된 어플리케이션은, 예를 들어, 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.According to various embodiments, the application 144 may be an SMS / MMS application, an email application, a calendar application, an alarm application, a health care application (e.g., an application that measures momentum or blood glucose) : An application that provides atmospheric pressure, humidity, or temperature information, etc.). Additionally or alternatively, the application 144 may be an application related to the exchange of information between the electronic device 100 and an external electronic device. Applications associated with information exchange may include, for example, a notification relay application for communicating specific information to an external electronic device, or a device management application for managing an external electronic device.

다양한 실시예에 따르면, 어플리케이션(144)은 외부 전자 장치의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 어플리케이션(144)은 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 어플리케이션(144)은 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 어플리케이션(144)은 전자 장치(100)에 지정된 어플리케이션 또는 외부 전자 장치로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.According to various embodiments, the application 144 may include an application specified in accordance with an attribute of the external electronic device (e.g., the type of electronic device). For example, if the external electronic device is an MP3 player, the application 144 may include an application related to music playback. Similarly, if the external electronic device is a mobile medical device, the application 144 may include applications related to healthcare. According to one embodiment, the application 144 may include at least one of an application specified in the electronic device 100 or an application received from an external electronic device.

입출력 인터페이스(150)는, 입출력 장치(예: 센서, 키보드 또는 터치 스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 버스(102)를 통해 프로세서(130), 메모리(140)에 전달할 수 있다. 예를 들면, 입출력 인터페이스(140)는 터치 스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 프로세서(130)로 제공할 수 있다. 입출력 인터페이스(150)는, 예를 들면, 버스(102)를 통해 프로세서(130), 메모리(140)로부터 수신된 명령 또는 데이터를 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 입출력 인터페이스(150)는 오디오 모듈을 포함할 수 있다.The input / output interface 150 is connected to the processor 130 and the memory 140 via a bus 102, for example, via a bus 102, commands or data input from a user via an input / output device (e.g., . For example, the input / output interface 140 may provide the processor 130 with data on the user's touch input via the touch screen. The input / output interface 150 can output commands or data received from the processor 130 and the memory 140 via an input / output device (e.g., a speaker or a display) via the bus 102, for example. The input / output interface 150 may include an audio module.

디스플레이 장치(110)는 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다. 디스플레이 장치(110)는 표시 영역에 매트릭스 형태로 배열된 복수개의 픽셀들을 포함한다. 복수개의 픽셀들은 각각 유기발광 소자를 포함한다. The display device 110 may display various information (e.g., multimedia data or text data) to the user. The display device 110 includes a plurality of pixels arranged in a matrix form in a display area. Each of the plurality of pixels includes an organic light emitting element.

또한, 디스플레이 장치(110)는 포토 디텍터(114)를 포함한다. 포토 디텍터(114)는 픽셀 내에서 백플레인(210)의 일부 영역(예컨대, 도 1의 112)에 형성될 수 있다. 상기 포토 디텍터(114)는 광을 수신한다. In addition, the display device 110 includes a photodetector 114. The photodetector 114 may be formed in a portion of the backplane 210 in the pixel (e.g., 112 in FIG. 1). The photodetector 114 receives light.

사용자의 손가락이 지문 인증을 위해 디스플레이 장치(110)의 일부 영역에 놓이면, 디스플레이 장치(110)의 유기발광소자로부터 광이 사용자의 손가락에 쏘여지고, 사용자의 손가락으로부터 반사된 광은 포토 디텍터(114)로 수신된다. 포토 디텍터(114)는 수신된 광 신호를 전류로 변환할 수 있다. 손가락 혈관으로부터 반사된 광은 포토 디텍터(114)에 의해 수신된다. When the user's finger is placed in a partial area of the display device 110 for fingerprint authentication, light is emitted from the organic light emitting element of the display device 110 to the user's finger and the light reflected from the user's finger is reflected by the photodetector 114 ). The photodetector 114 may convert the received optical signal into a current. The light reflected from the finger blood vessel is received by the photodetector 114.

심장이 혈액을 온몸으로 순환시키기 위해 심장 근육을 수축 및 이완하면, 사용자의 손가락의 혈관의 부피 즉, 용적이 변화하여, 손가락의 혈관으로부터 반사되는 광량이 변환한다. 그에 따라, 손가락 혈관으로부터 반사되는 광량에 기초하여 심박 신호 등을 추출할 수 있다. When the heart contracts and relaxes the heart muscle to circulate the blood whole body, the volume or volume of the blood vessel of the user's finger changes, and the amount of light reflected from the blood vessel of the finger changes. Accordingly, the heartbeat signal or the like can be extracted based on the amount of light reflected from the finger vein.

혈액 속의 헤모글로빈이 산소를 포함하고 있는 지의 여부에 따라 광의 파장에 대해 다른 경향의 흡수계수, 즉 다른 흡광계수를 나타내므로, 서로 다른 파장의 광이 인체에서 반응된 광량들을 비교하여 산소 포화도 신호를 추출할 수 있다.Since the hemoglobin in the blood exhibits different absorption coefficients, that is, different extinction coefficients, depending on whether or not the hemoglobin in the blood contains oxygen, light of different wavelengths is compared with the amounts of light reacted in the human body to extract the oxygen saturation signal can do.

포토 디텍터(114)로부터 수신되는 광은 생체 신호 추출부(120)에 제공된다. 생체 신호 추출부(120)는 신호 처리를 수행하는 IC 칩 형태로 구현될 수 있다. 생체 신호 추출부(120)는 포토 디텍터(114)로부터 수신한 광에 따른 전류 신호를 신호 처리하여 생체 신호를 추출한다. 상기 생체 신호는 심장 박동 신호 및 산소 포화도 신호를 포함할 수 있다. 상기 심장 박동 신호는 광용적맥파 신호(photoplethysmogram)가 될 수 있다. The light received from the photodetector 114 is provided to the biological signal extraction unit 120. The biological signal extracting unit 120 may be implemented in the form of an IC chip for performing signal processing. The bio-signal extractor 120 processes the current signal corresponding to the light received from the photodetector 114 to extract a bio-signal. The bio-signal may include a heartbeat signal and an oxygen saturation signal. The heartbeat signal may be a photoplethysmogram signal.

일 실시예에 따라, 포토 디텍터(114)에 수신되는 광의 광량은 심장 박동에 따라 변화하므로, 생체 신호 추출부(120)는 포토 디텍터(114)로부터 수신되는 광의 광량으로부터 심장 박동 신호를 추출할 수 있다.According to one embodiment, the amount of light received by the photodetector 114 varies with heartbeat, so that the bio-signal extractor 120 can extract the heartbeat signal from the light amount of the light received from the photodetector 114 have.

생체 신호 추출부(120)에서 추출한 심장 박동 신호는 도 3에 도시되어 있다.The heartbeat signal extracted by the bio-signal extracting unit 120 is shown in Fig.

도 3은 도 2의 생체 신호 추출부에서 추출한 심장 박동 신호를 나타낸 그래프이다. 도 3에는 포토 디텍터(114)로부터 광에 따른 전류를 시간에 따라 나타낸 그래프가 도시되어 있다. 도 3의 그래프에 나타난 바와 같이, 포토 디텍터(114)로부터의 전류 신호로부터 심장 박동 신호를 추출할 수 있다. FIG. 3 is a graph showing a heartbeat signal extracted by the bio-signal extracting unit of FIG. 2. FIG. 3 is a graph showing the current according to light from the photodetector 114 over time. The heartbeat signal can be extracted from the current signal from the photodetector 114 as shown in the graph of FIG.

다른 실시예에 따라, 포토 디텍터(114)에 수신되는 광은 혈액 속의 헤모글로빈이 산소를 포함하고 있는 지의 여부에 따라 광의 파장에 대해 다른 경향의 흡수계수를 나타내므로, 생체 신호 추출부(120)는 서로 다른 파장의 광이 인체에서 반응된 광량들을 비교하여 산소 포화도 신호를 추출할 수 있다. According to another embodiment, since the light received by the photodetector 114 exhibits absorption coefficients having different tendencies with respect to the wavelength of light depending on whether or not hemoglobin in the blood contains oxygen, the biological signal extracting unit 120 extracts The oxygen saturation signal can be extracted by comparing the amounts of light reacted by light of different wavelengths in the human body.

이하, 포토 디텍터(114)가 포함된 픽셀의 구조를 도 4를 참조하여 설명한다.Hereinafter, the structure of the pixel including the photodetector 114 will be described with reference to FIG.

도 4는 본 발명의 일 실시예에 따른 디스플레이 장치에 포함된 각 픽셀의 구조를 나타낸 도면이다.4 is a diagram illustrating the structure of each pixel included in a display device according to an embodiment of the present invention.

도 4를 참조하면, 각 픽셀은 백플레인(210) 및 유기발광소자(220)를 포함한다. 백플레인(210)은 기판 상에 형성된 적어도 하나의 박막트랜지스터(TFT)(211)을 포함한다. 박막트랜지스터(211)는 유기발광소자(210)를 구동하기 위한 스위칭 소자이다. 박막트랜지스터(211)는 게이트 전극, 소스 전극, 드레인 전극을 포함한다. 본 발명의 일 실시예에 의한 박막트랜지스터(TFT)는 바텀게이트(bottom-gate) 타입 박막트랜지스터 또는 탑 컨택(top-comtact) 박막트랜지스터 타입일 수 있다.Referring to FIG. 4, each pixel includes a backplane 210 and an organic light emitting diode 220. The backplane 210 includes at least one thin film transistor (TFT) 211 formed on a substrate. The thin film transistor 211 is a switching element for driving the organic light emitting element 210. The thin film transistor 211 includes a gate electrode, a source electrode, and a drain electrode. The thin film transistor (TFT) according to an embodiment of the present invention may be a bottom-gate type thin film transistor or a top-top thin film transistor type.

유기발광소자(220)는 박막트랜지스터(TFT)의 소스전극 또는 드레인전극 중 하나와 접속된 화소전극(221), 화소전극(221)과 마주보도록 형성된 대향전극(224) 및 그 사이에 개재된 유기 발광층(223)으로 구성된다. 또한, 유기발광소자(220)는 화소전극(221)과 유기 발광층(223) 사이에 형성된 제1 절연층(222)를 포함한다. 절연층(222)는 화소전극(221)이 형성된 층을 평탄하게 하는 평탄화막 또는 박막트랜지스터(TFT)를 보호하는 패시베이션막(passivation layer)의 기능을 수행할 수 있다.The organic light emitting diode 220 includes a pixel electrode 221 connected to one of a source electrode and a drain electrode of the thin film transistor TFT, an opposite electrode 224 formed to face the pixel electrode 221, And a light emitting layer 223. The organic light emitting diode 220 includes a first insulating layer 222 formed between the pixel electrode 221 and the organic light emitting layer 223. The insulating layer 222 may function as a planarization layer for flattening the layer on which the pixel electrode 221 is formed or a passivation layer for protecting the thin film transistor (TFT).

제1 절연층(222)은 폴리이미드, 폴리아마이드, 아크릴 수지, 벤조사이클로부텐 및 페놀 수지로 이루어진 군에서 선택되는 하나 이상의 유기 절연 물질로 스핀 코팅 등의 방법으로 형성될 수 있다. 한편, 제1 절연층(222)은 유기 절연 물질뿐만 아니라, 이산화규소(silicon dioxide)(SiO2), 질화규소(silicon nitride)(SiNx), 산화 알루미늄(aluminium oxide)(Al2O3), 산화 구리(copper oxide)(CuOx), 산화 테르븀(terbium oxide)(Tb4O7), 산화 이트륨(yttrium oxide) (Y2O3), 산화 니오브(niobium oxide)(Nb2O5), 및 산화 프라세오디뮴(praseodymium oxide)(Pr2O3) 등에서 선택된 무기 절연 물질로 형성될 수 있음은 물론이다. 또한 제1 절연층(222)은 유기 절연 물질과 무기 절연 물질이 교번하는 다층 구조로 형성될 수도 있다.The first insulating layer 222 may be formed by a method such as spin coating with one or more organic insulating materials selected from the group consisting of polyimide, polyamide, acrylic resin, benzocyclobutene, and phenol resin. The first insulating layer 222 may be formed of an insulating material such as silicon dioxide (SiO2), silicon nitride (SiNx), aluminum oxide (Al2O3), copper oxide An inorganic insulating material selected from CuOx, Tb4O7, Yttrium oxide Y2O3, Niobium oxide Nb2O5, and Praseodymium oxide Pr2O3. As shown in FIG. Also, the first insulating layer 222 may be formed in a multi-layer structure in which an organic insulating material and an inorganic insulating material are alternated.

또한, 각 픽셀은 커패시터(218)를 포함한다. 커패시터(218)는 하부전극(212) 및 상부전극(214)으로 이루어지며, 이들 사이에 제2 절연층(213)이 개재된다. 여기서, 하부전극(212)은 박막트랜지스터(TFT)의 소스/드레인 전극과 동일한 층에 위치하고 또한, 동일한 물질로 형성될 수 있다.In addition, each pixel includes a capacitor 218. The capacitor 218 includes a lower electrode 212 and an upper electrode 214, and a second insulating layer 213 is interposed therebetween. Here, the lower electrode 212 is located on the same layer as the source / drain electrode of the thin film transistor (TFT) and may be formed of the same material.

또한, 각 픽셀은 포토 디텍터(114)를 포함할 수 있다. 포토 디텍터(114)는 유기발광소자(220)로부터의 광을 수신한다. 이를 위해, 포토 디텍터(114)는 하부전극(215), 상부전극(217), 및 하부전극(215)과 상부전극(217) 사이에 위치되는 광 흡수층(216)을 포함할 수 있다. 이러한 포토 디텍터(114)의 구조 및 동작은 종래에 공지된 기술이므로, 그 상세한 설명을 생략한다. In addition, each pixel may include a photodetector 114. The photodetector 114 receives light from the organic light emitting element 220. The photodetector 114 may include a lower electrode 215, an upper electrode 217 and a light absorbing layer 216 positioned between the lower electrode 215 and the upper electrode 217. Since the structure and operation of the photodetector 114 are well known in the art, a detailed description thereof will be omitted.

한편, 포토 디텍터(114)는 기존 AMOLED 디스플레이의 각 픽셀의 구조에서 백플레인(210)의 여분 공간에 내장되는 것이 바람직하다. 또한, 포토 디텍터(114)의 하부전극(215) 및 상부전극(217)은 커패시터(218)의 하부전극(212) 및 상부전극(214)과 동일한 재료와 동일한 공정에 의해 형성될 수 있으므로, 기존 디스플레이 장치(110)의 제조 공정 및 설비로도 용이하게 제조할 수 있다. Meanwhile, the photodetector 114 is preferably embedded in the extra space of the backplane 210 in the structure of each pixel of the existing AMOLED display. The lower electrode 215 and the upper electrode 217 of the photodetector 114 can be formed by the same process as the material of the lower electrode 212 and the upper electrode 214 of the capacitor 218, And can be easily manufactured as a manufacturing process and equipment of the display device 110.

또한, 포토 디덱터(114)는 전술한 바와 같이, 표시 영역의 일부(도 1의 112)에 위치하는 적어도 하나의 픽셀에 형성될 수 있다. 또한, 포토 디텍터(114)는 픽셀 내에서 백플레인(210)의 일부 영역에 형성될 수 있다. In addition, the photodiode 114 may be formed in at least one pixel located in a part of the display area (112 in FIG. 1), as described above. In addition, the photodetector 114 may be formed in a part of the backplane 210 in the pixel.

도 5는 도 4의 디스플레이 장치(110)의 각 픽셀을 나타낸 회로도이다. 5 is a circuit diagram showing each pixel of the display device 110 of Fig.

디스플레이 장치(110)는 복수개의 선택 라인(Select line) 및 데이터 라인(Data line)이 교차하여 정의되는 화소 영역을 매트릭스 상으로 가진다. 화소 영역에는 스위칭 박막트랜지스터(Switch TFT), 스위칭 박막 트랜지스터와 연결된 구동 박막트랜지스터(Driving TFT), 및 구동 박막 트랜지스터에 접속된 유기발광소자(OLED)를 포함한다. 스위칭 박막트랜지스터는 선택 라인(Select line)과 데이터 라인(Data line)이 교차하는 영역에 형성되어, 화소를 선택하는 기능을 한다. 그리고, 스토리지 커패시터(Cap)는 구동 박막트랜지스터의 게이트 전극과 유기 발광소자(OLED) 사이에 위치한다. 스토리지 커패시터(Cap)는 구동 트랜지스터의 게이트 단자와 함께 노드에 연결되어 한 프레임의 데이터를 저장한다.The display device 110 has a pixel region defined by intersecting a plurality of select lines and a data line in a matrix form. The pixel region includes a switching TFT, a driving TFT connected with a switching thin film transistor, and an organic light emitting diode OLED connected to the driving thin film transistor. The switching thin film transistor is formed in a region where a select line and a data line cross each other and functions to select a pixel. The storage capacitor Cap is located between the gate electrode of the driving thin film transistor and the organic light emitting diode OLED. The storage capacitor Cap is connected to the node together with the gate terminal of the driving transistor to store data of one frame.

그리고, 구동 박막트랜지스터는 스위칭 박막 트랜지스터에 의해 선택된 화소의 유기발광소자(OLED)를 구동한다. 이를 위해 구동 박막트랜지스터는 유기발광 소자를 발광시키기 위한 구동 전류를 생성한다.Then, the driving thin film transistor drives the organic light emitting element OLED of the pixel selected by the switching thin film transistor. To this end, the driving thin film transistor generates a driving current for causing the organic light emitting element to emit light.

포토 디텍터(114)는 생체 신호 추출부(120)에 연결되어 있다. 생체 신호 추출부(120)는 포토 디텍터(114)로부터의 신호를 수신하여 생체 신호를 추출할 수 있다.The photodetector 114 is connected to the biological signal extracting unit 120. The biological signal extracting unit 120 can extract a biological signal by receiving a signal from the photodetector 114. [

도 6은 본 발명의 일 실시예에 따른 전자 장치에서 지문 인증을 수행하는 방법의 흐름도를 나타낸다. 6 shows a flowchart of a method of performing fingerprint authentication in an electronic device according to an embodiment of the present invention.

도 6을 참조하면, 전자 장치(100)는 단계 310에서 사용자의 인증 요청이 있으면, 단계 320으로 진행한다. 예컨대, 전자 장치(100)의 사용자는 전자 장치(100)를 사용하거나 또는 다른 인증이 필요한 경우, 디스플레이 장치(110)에 자신의 손가락을 미리 정해진 영역에 놓음으로써 인증 요청을 발생시킬 수 있다.Referring to FIG. 6, if the electronic device 100 has requested the user's authentication in step 310, the process proceeds to step 320. For example, a user of the electronic device 100 may generate an authentication request by using the electronic device 100 or by placing his or her finger in the predetermined area on the display device 110 when another authentication is required.

전자 장치(100)는 단계 320에서 사용자의 인증 요청이 발생하면, 단계 320에서 상기 사용자의 지문의 이미지를 추출한다. 전자 장치(100)는 단계 330에서 추출한 상기 사용자의 지문의 이미지에 기초하여 상기 사용자의 지문이 유효한 지문인지를 판단한다. 이어서, 전자 장치(100)는 상기 사용자의 지문이 유효한 지문이면 단계 340에서 사용자의 생체 신호가 추출되는 지를 판단한다. The electronic device 100 extracts an image of the fingerprint of the user at step 320 when the authentication request of the user occurs at step 320. [ The electronic device 100 determines whether the fingerprint of the user is a valid fingerprint based on the image of the fingerprint of the user extracted in step 330. [ Then, if the fingerprint of the user is a valid fingerprint, the electronic device 100 determines whether the user's biometric signal is extracted at step 340.

전술한 바와 같이, 전자 장치(100)의 사용자가 페이크 지문을 사용한다면, 사용자의 생체 신호를 추출할 수 없다. 그러므로 전자 장치(100)는 단계 340에서 사용자의 생체 신호가 추출되었다면, 정당하게 지문이 입력된 것으로 판단한다. 이 경우, 전자 장치(100)는 단계 350으로 진행하여 인증 성공에 따른 처리를 수행한다. 예컨대, 인증 요청이 전자 장치(100)의 사용을 위한 것이면, 전자 장치(100)는 사용자가 전자 장치(100)를 사용하는 것을 허용하고, 인증 요청이 예컨대, 결제나 이체를 위한 것이면, 결제나 이체를 실행한다. As described above, if the user of the electronic device 100 uses the fake fingerprint, the user's biological signal can not be extracted. Therefore, if the biometric signal of the user is extracted in step 340, the electronic device 100 judges that the fingerprint is legitimately input. In this case, the electronic device 100 proceeds to step 350 to perform processing in accordance with the authentication success. For example, if the authentication request is for use of the electronic device 100, the electronic device 100 allows the user to use the electronic device 100, and if the authentication request is for payment or transfer, Execute the transfer.

만약, 사용자가 페이크 지문을 사용하였다면, 전자 장치(100)는 단계 340에서 생체 신호를 추출하지 못한다. 전자 장치(100)는 생체 신호를 추출하지 못하면, 정당하지 않게 지문이 입력된 것으로 판단한다. 전자 장치(100)는 단계 332로 진행하여 인증 실패에 따른 처리를 수행한다.If the user has used a fake fingerprint, the electronic device 100 fails to extract the bio-signal at step 340. If the electronic device 100 can not extract the biological signal, it is judged that the fingerprint is not inputted correctly. The electronic device 100 proceeds to step 332 to perform processing in accordance with the authentication failure.

상기한 본 발명의 일 실시예에 따르면 디스플레이 장치(110)에 포토 디텍터를 내장하여 전자 장치의 사용자의 생체 신호를 추출할 수 있다. 그에 따라, 입력 지문이 정당한 지문으로 판별되는 경우라도, 생체 신호가 추출되지 않으면 입력 지문을 페이크 지문으로 판별하여 종래의 지문 보안에 따른 문제점을 해결할 수 있다. According to an embodiment of the present invention, a photodetector is built in the display device 110 to extract a user's bio-signal of the electronic device. Accordingly, even if the input fingerprint is determined as a legitimate fingerprint, if the biometric signal is not extracted, the input fingerprint can be discriminated as a fake fingerprint, thereby solving the problem of the conventional fingerprint security.

한편, 페이크 지문이 투명 또는 반투명의 실리콘으로 제조될 수도 있다. 이러한 투명 또는 반투명의 실리콘 등으로 이루어진 페이크 지문을 디스플레이에 접촉하는 경우, 예컨대, 디스플레이 상에 페이크 지문(실리콘)을 끼운 손가락이 위치하게 된다면 심박 신호가 검출될 수도 있다. 다시 말해, 페이크 지문이 반투명 혹은 투명의 재질로 만들어졌다면 광이 페이크 지문을 통과하여 손가락 내부의 혈관으로부터 반사되는 광이 있을 수 있기 때문에 심박 신호가 추출될 가능성이 있다. 이러한 경우의 지문 인증을 수행하는 방법을 도 7을 참조하여 설명한다.On the other hand, the fake fingerprint may be made of transparent or translucent silicon. When a fake fingerprint made of such transparent or translucent silicone is brought into contact with the display, for example, a heartbeat signal may be detected if a finger with a fake fingerprint (silicon) is placed on the display. In other words, if the fake fingerprint is made of translucent or transparent material, there is a possibility that the heartbeat signal may be extracted because the light may pass through the fake fingerprint and be reflected from the blood vessel inside the finger. A method of performing fingerprint authentication in such a case will be described with reference to FIG.

도 7은 본 발명의 일 실시예에 따른 전자 장치에서 지문 인증을 수행하는 방법의 흐름도를 나타낸다. 7 shows a flowchart of a method of performing fingerprint authentication in an electronic device according to an embodiment of the present invention.

도 7을 참조하면, 전자 장치(100)는 단계 410에서 사용자의 인증 요청이 있으면, 단계 420으로 진행한다. 예컨대, 전자 장치(100)의 사용자는 전자 장치(100)를 사용하거나 또는 다른 인증이 필요한 경우, 디스플레이 장치(110)에 자신의 손가락을 미리 정해진 영역에 놓음으로써 인증 요청을 발생시킬 수 있다.Referring to FIG. 7, if the electronic device 100 has a user authentication request at step 410, the process proceeds to step 420. For example, a user of the electronic device 100 may generate an authentication request by using the electronic device 100 or by placing his or her finger in the predetermined area on the display device 110 when another authentication is required.

전자 장치(100)는 단계 420에서 사용자의 인증 요청이 발생하면, 단계 420에서 상기 사용자의 지문의 이미지를 추출한다. 전자 장치(100)는 단계 430에서 추출한 상기 사용자의 지문의 이미지에 기초하여 상기 사용자의 지문이 유효한 지문인지를 판단한다. The electronic device 100 extracts the image of the fingerprint of the user in step 420 when the authentication request of the user occurs in step 420. [ The electronic device 100 determines whether the user's fingerprint is a valid fingerprint based on the image of the fingerprint of the user extracted in step 430. [

이어서, 전자 장치(100)는 상기 사용자의 지문이 유효한 지문이면 단계 440에서 사용자의 생체 신호가 추출되는 지를 판단한다. 만약 사용자의 생체 신호가 추출되지 않으면 단계 432에서 지문 인증 실패에 따른 처리를 수행한다. 그리고, 사용자의 생체 신호가 추출되면 전자 장치(100)는 단계 450으로 진행한다.If the fingerprint of the user is a valid fingerprint, the electronic device 100 determines whether the user's biometric signal is extracted in step 440. If the user's biometric signal is not extracted, the process according to the fingerprint authentication failure is performed in step 432. When the user's bio-signal is extracted, the electronic device 100 proceeds to step 450.

전술한 바와 같이, 전자 장치(100)의 사용자가 페이크 지문을 사용하더라도 페이크 지문이 투명 또는 불투명 재질로 만들어졌다면, 사용자의 생체 신호를 추출할 수도 있다. As described above, even if the user of the electronic device 100 uses a fake fingerprint, the user's biological signal may be extracted if the fingerprint is made of a transparent or opaque material.

그러나, 페이크 지문을 통해 사용자의 손가락으로부터 반사된 광에 기초하여 추출된 생체 신호는 페이크 지문이 없이 디스플레이 상에 바로 직접적으로 접촉한 경우 추출된 생체 신호와 다를 수 있다. 예컨대, 광이 페이크 지문을 통해 손가락으로 입사되면, 페이크 지문에 의해 손가락으로 입사되는 광 및 손가락으로부터 반사되는 광이 감쇄한다. 그에 따라, 페이크 지문을 통해 수신한 광의 크기도 손가락이 직접적으로 디스플레이에 접촉한 경우에 수신된 광의 크기보다 작게 된다. 따라서, 광의 크기에 기초하여 입력 지문이 페이크 지문인지를 판단할 수 있다.However, the bio-signal extracted based on the light reflected from the user's finger through the fake fingerprint may be different from the extracted bio-signal when directly contacting the display without a fake fingerprint. For example, when light is incident on a finger through a fake fingerprint, light incident on the finger and light reflected from the finger are attenuated by the fake fingerprint. Accordingly, the size of the light received via the fake fingerprint is smaller than the size of the received light when the finger directly touches the display. Therefore, it is possible to judge whether the input fingerprint is a fake fingerprint based on the size of the light.

또한, 손가락으로부터 반사된 광의 반사율도 손가락이 직접적으로 디스플레이 접촉한 경우의 광의 반사율보다 작게 된다. 따라서, 광의 반사율에 기초하여 입력 지문이 페이크 지문인지를 판단할 수 있다. Also, the reflectance of the light reflected from the finger is smaller than the reflectance of light when the finger directly touches the display. Therefore, it is possible to judge whether the input fingerprint is a fake fingerprint based on the reflectance of light.

이와 같이, 페이크 지문에 의해 변형되는 생체 신호의 특징들 중 적어도 하나의 특징을 추출하여 해당 특징에 기초하여 입력 지문이 페이크 지문인지를 판단할 수 있다. In this manner, at least one feature of the biometric signal that is transformed by the fake fingerprint can be extracted and it can be determined whether the input fingerprint is a fake fingerprint based on the feature.

따라서, 전자 장치(100)는 사용자의 생체 신호를 추출하면, 단계 450에서 생체 신호로부터 적어도 하나의 특징을 추출한다. 일 실시예에 따라, 적어도 하나의 특징은 생체 신호의 크기일 수 있다. 이어서, 전자 장치(100)는 단계 460에서 추출된 생체 신호의 특징이 미리 결정된 범위 이내인 지를 판단한다. 추출된 생체 신호의 특징이 미리 결정된 범위 이내 이면, 전자 장치(100)는 단계 4700으로 진행하여 인증 성공에 따른 처리를 수행한다. 예컨대, 인증 요청이 전자 장치(100)의 사용을 위한 것이면, 전자 장치(100)는 사용자가 전자 장치(100)를 사용하는 것을 허용하고, 인증 요청이 예컨대, 결제나 이체를 위한 것이면, 결제나 이체를 실행한다. Accordingly, when the electronic device 100 extracts the user's bio-signal, it extracts at least one feature from the bio-signal in step 450. According to one embodiment, at least one feature may be the magnitude of the biological signal. Then, the electronic device 100 determines whether the characteristic of the bio-signal extracted in step 460 is within a predetermined range. If the characteristic of the extracted bio-signal is within a predetermined range, the electronic device 100 proceeds to step 4700 to perform processing according to the authentication success. For example, if the authentication request is for use of the electronic device 100, the electronic device 100 allows the user to use the electronic device 100, and if the authentication request is for payment or transfer, Execute the transfer.

만약, 추출된 생체 신호의 특징이 미리 결정된 범위를 벗어났으면, 정당하지 않게 지문이 입력된 것으로 판단한다. 이 경우 전자 장치(100)는 단계 432로 진행하여 인증 실패에 따른 처리를 수행한다.If the characteristic of the extracted bio-signal is out of the predetermined range, it is judged that the fingerprint is inputted unjustly. In this case, the electronic device 100 proceeds to step 432 to perform processing in accordance with the authentication failure.

상기 본 발명의 다른 실시예에 따르면 디스플레이 장치(110)에 포토 디텍터를 내장하여 전자 장치의 사용자의 생체 신호를 추출할 수 있다. 또한, 페이크 지문에 의한 생체 신호를 판별하여 종래의 지문 보안에 따른 문제점을 해결할 수 있다.
According to another embodiment of the present invention, a bio-signal of a user of the electronic device can be extracted by incorporating a photodetector in the display device 110. In addition, biometric signals based on the fake fingerprint can be discriminated, thereby solving the problem of the conventional fingerprint security.

110: 디스플레이 장치
114: 포토 디텍터
120: 생체 신호 추출부
130: 프로세서
140: 메모리
150: 입출력 인터페이스
110: display device
114: Photo detector
120: biological signal extracting unit
130: Processor
140: Memory
150: Input / output interface

Claims (9)

전자 장치용 디스플레이 장치에 있어서,
유기발광소자 및 백플레인을 포함하며,
상기 백플레인은
상기 유기발광소자를 구동하는 구동 박막트랜지스터(Thin Film Transistor);
상기 구동 박막트랜지스터와 상기 유기발광소자 사이에 위치하는 커패시터; 및
제1 상부전극, 제1 하부전극 및 상기 제1 상부전극과 상기 제1 하부전극 사이에 위치된 광 흡수층을 포함하는 포토 디텍터를 포함하며,
상기 커패시터와 상기 포토 디텍터는 동일한 층에 형성된 것을 특징으로 하는 디스플레이 장치.
A display device for an electronic device,
An organic light emitting element and a backplane,
The backplane
A driving thin film transistor (Thin Film Transistor) driving the organic light emitting element;
A capacitor located between the driving thin film transistor and the organic light emitting device; And
And a photodetector including a first upper electrode, a first lower electrode, and a light absorbing layer positioned between the first upper electrode and the first lower electrode,
Wherein the capacitor and the photodetector are formed on the same layer.
청구항 1에 있어서,
상기 커패시터는 제2 상부전극, 제2 하부전극, 및 상기 제2 상부전극과 상기 제2 하부전극 사이에 위치한 절연층을 포함하는 디스플레이 장치.
The method according to claim 1,
Wherein the capacitor comprises a second upper electrode, a second lower electrode, and an insulating layer positioned between the second upper electrode and the second lower electrode.
청구항 2에 있어서,
상기 포토 디텍터의 제1 상부전극과 제1 하부전극은 상기 커패시터의 제2 상부전극과 제2 하부전극과 동일한 재료로 형성된 디스플레이 장치.
The method of claim 2,
Wherein the first upper electrode and the first lower electrode of the photodetector are formed of the same material as the second upper electrode and the second lower electrode of the capacitor.
청구항 2에 있어서,
상기 커패시터의 제2 하부전극은 상기 구동 박막트랜지스터의 소스 또는 드레인 전극과 동일한 층에 위치하는 디스플레이 장치.
The method of claim 2,
Wherein the second lower electrode of the capacitor is located on the same layer as the source or drain electrode of the driving thin film transistor.
전자 장치에서의 인증 방법에 있어서,
사용자의 인증요청이 있으면, 상기 사용자의 지문의 이미지를 추출하는 단계;
상기 사용자의 지문이 유효한 지문인 지를 판단하는 단계;
상기 사용자의 지문이 유효한 지문이면 상기 사용자의 생체 신호를 추출하는 단계;
상기 사용자의 생체 신호를 추출하면 상기 사용자의 지문이 정당하게 입력된 것으로 판단하는 단계; 및
상기 사용자의 지문이 정당하게 입력된 것으로 판단하면, 인증 성공에 따른 처리를 수행하는 단계를 포함하는 인증 방법.
In an authentication method in an electronic device,
Extracting an image of the fingerprint of the user in response to a user authentication request;
Determining whether the fingerprint of the user is a valid fingerprint;
Extracting a biometric signal of the user if the fingerprint of the user is a valid fingerprint;
Determining that the fingerprint of the user is legitimately input if the user's biological signal is extracted; And
And if the fingerprint of the user is determined to have been properly input, performing a process in accordance with the authentication success.
청구항 5에 있어서,
상기 사용자의 생체 신호를 추출하지 못하면, 상기 사용자의 지문이 정당하지 않게 입력된 것으로 판단하는 단계; 및
상기 사용자의 지문이 정당하지 않게 입력된 것으로 판단하면, 인증 실패에 따른 처리를 수행하는 단계를 포함하는 인증 방법.
The method of claim 5,
Determining that the user's fingerprint is incorrectly input if the user's biological signal can not be extracted; And
And performing a process according to an authentication failure if it is determined that the fingerprint of the user is not correctly input.
청구항 5에 있어서,
상기 생체 신호는 심박 신호 및 산소 포화도 신호를 포함하는 인증 방법.
The method of claim 5,
Wherein the bio-signal comprises a heartbeat signal and an oxygen saturation signal.
전자 장치에서의 인증 방법에 있어서,
사용자의 인증요청이 있으면, 상기 사용자의 지문의 이미지를 추출하는 단계;
상기 사용자의 지문이 유효한 지문인 지를 판단하는 단계;
상기 사용자의 지문이 유효한 지문이면 상기 사용자의 생체 신호를 추출하는 단계;
상기 사용자의 생체 신호를 추출하면 상기 생체 신호의 적어도 하나의 특징을 추출하는 단계;
상기 적어도 하나의 특징이 미리 결정된 범위 이내인 지를 판단하는 단계; 및
상기 적어도 하나의 특징이 미리 결정된 범위 이내이면, 상기 사용자의 지문이 정당하게 입력된 것으로 판단하고, 인증 성공에 따른 처리를 수행하는 단계를 포함하는 인증 방법.
In an authentication method in an electronic device,
Extracting an image of the fingerprint of the user in response to a user authentication request;
Determining whether the fingerprint of the user is a valid fingerprint;
Extracting a biometric signal of the user if the fingerprint of the user is a valid fingerprint;
Extracting at least one characteristic of the bio-signal when the bio-signal of the user is extracted;
Determining whether the at least one characteristic is within a predetermined range; And
And if the at least one feature is within a predetermined range, determining that the fingerprint of the user is legitimately input, and performing a process in accordance with the authentication success.
청구항 8에 있어서,
상기 생체 신호는 심박 신호 및 산소 포화도 신호를 포함하는 인증 방법.
The method of claim 8,
Wherein the bio-signal comprises a heartbeat signal and an oxygen saturation signal.
KR1020170027484A 2017-03-03 2017-03-03 Display device for electronic device and authentication method KR102007255B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170027484A KR102007255B1 (en) 2017-03-03 2017-03-03 Display device for electronic device and authentication method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170027484A KR102007255B1 (en) 2017-03-03 2017-03-03 Display device for electronic device and authentication method

Publications (2)

Publication Number Publication Date
KR20180100941A true KR20180100941A (en) 2018-09-12
KR102007255B1 KR102007255B1 (en) 2019-08-06

Family

ID=63593063

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170027484A KR102007255B1 (en) 2017-03-03 2017-03-03 Display device for electronic device and authentication method

Country Status (1)

Country Link
KR (1) KR102007255B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080107221A (en) * 2007-06-05 2008-12-10 삼성모바일디스플레이주식회사 Organic light emmiting display apparatus
JP2012238186A (en) * 2011-05-12 2012-12-06 Dainippon Printing Co Ltd Portable storage device
KR20150004413U (en) 2014-05-29 2015-12-09 애플 인크. User interface for payments
KR20160027562A (en) * 2014-09-01 2016-03-10 삼성디스플레이 주식회사 organic light emitting diode display
KR20160072682A (en) 2014-12-15 2016-06-23 삼성전자주식회사 Authentication method using biometric information and the electronic device therefor

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080107221A (en) * 2007-06-05 2008-12-10 삼성모바일디스플레이주식회사 Organic light emmiting display apparatus
JP2012238186A (en) * 2011-05-12 2012-12-06 Dainippon Printing Co Ltd Portable storage device
KR20150004413U (en) 2014-05-29 2015-12-09 애플 인크. User interface for payments
KR20160027562A (en) * 2014-09-01 2016-03-10 삼성디스플레이 주식회사 organic light emitting diode display
KR20160072682A (en) 2014-12-15 2016-06-23 삼성전자주식회사 Authentication method using biometric information and the electronic device therefor

Also Published As

Publication number Publication date
KR102007255B1 (en) 2019-08-06

Similar Documents

Publication Publication Date Title
US11100481B2 (en) Image authentication and security system and method
KR102251987B1 (en) Electronic device for supporting the fingerprint verification and operating method thereof
KR102419624B1 (en) Arrangement structure of sensor of electronic apparatus
JP4501161B2 (en) Image reading device
CN107408168B (en) Iris authentication method and apparatus using display information
US11263417B2 (en) Electronic apparatus having fingerprint recognition function
CN111630832B (en) Display having infrared element arranged such that at least a portion thereof overlaps with pixel and electronic device including the same
US10956734B2 (en) Electronic device providing iris recognition based on proximity and operating method thereof
US20190012555A1 (en) Image sensor including light-shielding member for blocking interference between plurality of light-receiving sensors and electronic device including the same
US7986816B1 (en) Methods and systems for multiple factor authentication using gaze tracking and iris scanning
US11605145B2 (en) Electronic device and authentication method thereof
JP2019525290A (en) Integrated light emitting display and sensor for sensing biological properties
US11211433B2 (en) In-display sensors and viewing angle adjustment microassemblies
US10282626B2 (en) Identity recognition device and method for manufacturing the same, and identity recognition method
KR20160072705A (en) Method for updating biometric feature pattern and the electronic device therefor
US20160148037A1 (en) Method for registering and authenticating fingerprint and electronic device implementing the same
WO2019006738A1 (en) Electronic terminal, and apparatus with biometric feature recognition function
WO2020186481A1 (en) Fingerprint collection method and system, and electronic device
KR20180013208A (en) Apparatus and Method for Processing Differential Beauty Effect
US11847248B2 (en) Automated viewpoint detection and screen obfuscation of secure content
KR102579895B1 (en) Electronic device and a method for measuring heart rate based on an infrared rays sensor using the same
KR101196759B1 (en) Portable terminal and method for changing owner mode automatically thereof
KR20180109328A (en) Electronic device and method for measuring biometric information
KR102007255B1 (en) Display device for electronic device and authentication method
KR20170094895A (en) Method and electronic device for verifying fingerprint

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant