KR20190027495A - Display device, mobile informaion terminal including the display device and fingerprint recognition method using the display panel - Google Patents

Display device, mobile informaion terminal including the display device and fingerprint recognition method using the display panel Download PDF

Info

Publication number
KR20190027495A
KR20190027495A KR1020170114325A KR20170114325A KR20190027495A KR 20190027495 A KR20190027495 A KR 20190027495A KR 1020170114325 A KR1020170114325 A KR 1020170114325A KR 20170114325 A KR20170114325 A KR 20170114325A KR 20190027495 A KR20190027495 A KR 20190027495A
Authority
KR
South Korea
Prior art keywords
screen
fingerprint
display panel
image sensor
fingerprint recognition
Prior art date
Application number
KR1020170114325A
Other languages
Korean (ko)
Other versions
KR102517161B1 (en
Inventor
이정훈
Original Assignee
엘지디스플레이 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지디스플레이 주식회사 filed Critical 엘지디스플레이 주식회사
Priority to KR1020170114325A priority Critical patent/KR102517161B1/en
Publication of KR20190027495A publication Critical patent/KR20190027495A/en
Application granted granted Critical
Publication of KR102517161B1 publication Critical patent/KR102517161B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1318Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
    • G06K9/0004
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0686Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Image Input (AREA)

Abstract

The present invention relates to a display device which comprises: a display panel driving only pixels within a partial area of a screen capable of fingerprint recognition in a specific driving mode; an image sensor facing the partial area of the screen; and a display panel driving circuit driving the pixels of the display panel. The brightness of the partial area of the screen is increased in the certain driving mode and a fingerprint on the partial area is recognized when the image sensor is driven.

Description

표시장치, 표시장치를 포함한 모바일 정보 단말기와 지문 인식 방법{DISPLAY DEVICE, MOBILE INFORMAION TERMINAL INCLUDING THE DISPLAY DEVICE AND FINGERPRINT RECOGNITION METHOD USING THE DISPLAY PANEL}TECHNICAL FIELD [0001] The present invention relates to a mobile information terminal including a display device and a display device, and a fingerprint recognition method using the mobile information terminal and the fingerprint recognition method. BACKGROUND ART < RTI ID = 0.0 >

본 발명은 화면 상에서 지문 인식이 가능한 표시장치와, 이 표시장치를 포함한 모바일 정보 단말기와 지문 인식 방법에 관한 것이다. The present invention relates to a display device capable of fingerprint recognition on the screen, a mobile information terminal including the display device, and a fingerprint recognition method.

전계 발광 표시장치는 발광층의 재료에 따라 무기발광 표시장치와 유기 발광 표시장치로 대별된다. 액티브 매트릭스 타입(active matrix type)의 유기 발광 표시장치는 스스로 발광하는 유기 발광 다이오드(Organic Light Emitting Diode: 이하, "OLED"라 함)를 포함하며, 응답속도가 빠르고 발광효율, 휘도 및 시야각이 큰 장점이 있다. An electroluminescent display device is classified into an inorganic light emitting display device and an organic light emitting display device depending on the material of the light emitting layer. An active matrix type organic light emitting display device includes an organic light emitting diode (OLED) which emits light by itself, and has a high response speed, a high luminous efficiency, a high brightness and a wide viewing angle There are advantages.

유기 발광 표시장치의 OLED는 애노드 및 캐소드와, 이들 사이에 형성된 유기 화합물층을 포함한다. 유기 화합물층은 정공주입층(Hole Injection layer, HIL), 정공수송층(Hole transport layer, HTL), 발광층(Emission layer, EML), 전자수송층(Electron transport layer, ETL) 및 전자주입층(Electron Injection layer, EIL)으로 이루어진다. 애노드와 캐소드에 전원이 인가되면 정공수송층(HTL)을 통과한 정공과 전자수송층(ETL)을 통과한 전자가 발광층(EML)으로 이동되어 여기자를 형성하고, 그 결과 발광층(EML)이 가시광을 발생하게 된다. An OLED of an organic light emitting display includes an anode and a cathode, and an organic compound layer formed therebetween. The organic compound layer includes a hole injection layer (HIL), a hole transport layer (HTL), an emission layer (EML), an electron transport layer (ETL), and an electron injection layer EIL). When power is applied to the anode and the cathode, electrons passing through the hole transport layer (HTL) and the electron transport layer (ETL) move to the emission layer (EML) to form excitons. As a result, the emission layer (EML) .

지문 센서는 홈 버튼(Home button)과 같은 화면 밖의 특정 위치에 배치되고 있다. 지문 센서 배치 방법은 화면 밖의 베젤(bezel) 영역에 배치될 수 있는데, 이 경우에 베젤 영역이 커진다. 표시 패널에 지문 센서를 배치하기 위하여, 표시 패널의 구조가 변경될 수 있다. The fingerprint sensor is disposed at a specific position outside the screen such as a home button. The fingerprint sensor placement method can be placed in a bezel area outside the screen, in which case the bezel area becomes larger. In order to arrange the fingerprint sensor on the display panel, the structure of the display panel may be changed.

액정표시장치(Liquid Crystal Display Device: LCD)에 지문 센서가 배치될 수 있는데, 화면 영역에서 표시 패널과 백라이트 유닛(Back light Unit, BLU) 사이에 지문 센서를 배치하면 지문 센서가 보이게 된다. 백라이트 유닛(BLU)의 프리즘 시트(prism sheet)는 그 구조 상 공기층(air gap)이 많다. 공기층으로 인하여 지문센서의 수신 효율이 낮아지기 때문에 액정표시장치의 화면 영역 아래에 지문 센서가 배치될 수 없다. A fingerprint sensor may be disposed on a liquid crystal display device (LCD). When a fingerprint sensor is disposed between a display panel and a backlight unit (BLU) in the screen area, a fingerprint sensor is displayed. The prism sheet of the backlight unit (BLU) has many air gaps in its structure. The reception efficiency of the fingerprint sensor is lowered due to the air layer, so that the fingerprint sensor can not be disposed under the screen area of the liquid crystal display device.

본 발명은 화면 상에서 지문 인식이 가능하고 화면의 일부에 해당하는 AOD(Always-on-display) 구동 모드에서 지문을 빠르고 정확하게 인식할 수 있는 표시장치, 표시장치를 포함한 모바일 정보 단말기와 지문 인식 방법을 제공한다.The present invention relates to a mobile information terminal including a display device and a display device capable of recognizing fingerprints on a screen and capable of quickly and accurately recognizing fingerprints in an always-on-display (AOD) to provide.

본 발명의 표시장치는 화면 상에 입력 영상을 표시하고 특정 구동 모드에서 지문 인식이 가능한 화면의 일부 영역 내의 픽셀들만 구동되는 표시패널, 상기 화면의 일부 영역과 대향하는 이미지 센서, 및 상기 표시패널의 픽셀들을 구동하는 표시패널 구동회로를 구비한다. 상기 특정 구동 모드에서 상기 화면의 일부 영역의 휘도가 높아지고 상기 이미지 센서가 구동될 때 상기 화면의 일부 영역 상의 지문이 인식된다.A display device of the present invention includes a display panel that displays an input image on a screen and drives only pixels within a partial area of a screen capable of fingerprint recognition in a specific drive mode, an image sensor that faces a part of the screen, And a display panel drive circuit for driving the pixels. A fingerprint on a partial area of the screen is recognized when the luminance of a part of the screen is increased in the specific driving mode and the image sensor is driven.

본 발명의 모바일 정보 단말기는 화면 상에 입력 영상을 표시하고 특정 구동 모드에서 지문 인식이 가능한 화면의 일부 영역 내의 픽셀들만 구동되는 표시패널, 상기 화면의 일부 영역과 대향하는 이미지 센서, 상기 표시패널의 픽셀들을 구동하는 표시패널 구동회로, 및 상기 특정 구동 모드에서 상기 일부 영역 근방에 위치한 터치 센서, 이미지 센서 및 압력 센서 중 어느 하나를 이용하여 지문 인식 이벤트를 감지할 때 상기 화면의 일부 영역에서 휘도를 높이고 상기 이미지 센서로부터 출력되는 이미지의 지문 패턴과 미리 저장한 사용자의 지문 패턴을 비교하여 지문 인증을 수행하는 호스트 시스템을 구비한다. The mobile information terminal of the present invention includes a display panel displaying an input image on a screen and driving only pixels in a partial area of a screen capable of fingerprint recognition in a specific driving mode, an image sensor facing a part of the screen, A display panel driving circuit for driving the pixels; and a display panel driving circuit for driving the pixels in a certain area of the screen when sensing a fingerprint recognition event using any one of a touch sensor, an image sensor, And a host system for performing fingerprint authentication by comparing a fingerprint pattern of an image output from the image sensor with a fingerprint pattern of a user stored in advance.

본 발명의 지문 인식 방법은 특정 구동 모드에서 화면 상에 지문 인식이 가능한 일부 영역 내의 픽셀들만 구동하는 단계, 상기 특정 구동 모드에서 상기 일부 영역 근방에 위치한 터치 센서, 이미지 센서 및 압력 센서 중 어느 하나를 이용하여 지문 인식 이벤트를 감지하는 단계, 상기 화면의 일부 영역에서 휘도를 높이는 단계, 및 상기 화면의 일부 영역과 대향하는 이미지 센서를 구동하여 상기 이미지 센서로부터 출력되는 이미지의 지문 패턴과 미리 저장한 사용자의 지문 패턴을 비교하여 지문 인증을 수행하는 단계를 포함한다.According to the present invention, there is provided a fingerprint recognition method comprising: driving only pixels in a fingerprint-recognizable area on a screen in a specific driving mode; selecting one of a touch sensor, an image sensor and a pressure sensor, The method comprising the steps of: sensing a fingerprint recognition event using the image sensor; increasing a brightness of a portion of the screen; driving a plurality of image sensors opposed to a part of the screen to generate a fingerprint pattern of the image output from the image sensor; And fingerprint authentication is performed by comparing the fingerprint patterns of the fingerprint authentication device.

본 발명은 픽셀들로부터의 빛이 화면 상의 지문 패턴에서 반사될 때 그 빛을 이미지 센서로 감지하여 화면 상에서 지문을 감지할 수 있다. 특히, 본 발명은 화면의 일부 영역만 구동되는 AOD(Always-on-display) 구동 모드에서 AOD 영역을 지문 인식 가능한 영역에 설정하여 AOD 구동 모드에서 지문을 빠르고 정확하게 인식할 수 있다. 본 발명은 영상이 표시되는 화면 상에서 지문이 센싱될 수 있기 때문에 화면 상에서 지문 인증이 필요한 어플리케이션 또는 콘텐츠(contents)의 아이콘이나 실행/재생 파일이 사용자의 손가락이 화면 상에 터치될 때 사용자 인증 후 해당 어플리케이션, 콘텐츠, 파일에 대하여 억세스 권한을 부여할 수 있다 In the present invention, when light from pixels is reflected on a fingerprint pattern on the screen, the light can be detected by the image sensor and the fingerprint can be detected on the screen. In particular, the present invention can quickly and accurately recognize a fingerprint in the AOD drive mode by setting the AOD area in a fingerprint recognizable area in an always-on-display (AOD) driving mode in which only a part of the screen is driven. Since the fingerprint can be sensed on the screen on which the image is displayed, the icon of the application or the contents requiring the fingerprint authentication on the screen, or the execution / playback file, Access rights to applications, content, and files can be granted

본 발명은 표시패널의 배면에 이미지 센서를 배치함으로써 표시패널의 구조나 제조 공정 변경 없이 지문 센서 일체형 전계 발광 표시장치를 구현할 수 있다. 본 발명은 화면 밖의 베젤 영역이나 홈 버튼에 지문 센서를 설치할 필요가 없으므로 전계 발광 표시장치의 베젤(Bezel) 축소 설계, 방수 설계, 디자인 자유도 등에서 유리하다. According to the present invention, a fingerprint sensor integrated type electroluminescence display device can be implemented without disposing the image sensor on the back surface of the display panel and without changing the structure of the display panel or manufacturing process. Since the present invention does not require a fingerprint sensor on a bezel area or a groove button on the outside of the screen, it is advantageous in designing bezel reduction, waterproofing, and design freedom of the electroluminescence display device.

본 발명은 화면 상에서 지문 인식이 가능한 영역에 AOD 를 표시하고, AOD 상에서 지문을 감지할 수 있다. 본 발명은 AOD 영역에서 픽셀들을 광원으로 이용하여 별도의 광원 없이 지문을 감지할 수 있다. The present invention can display an AOD in an area capable of fingerprint recognition on the screen and detect a fingerprint on the AOD. The present invention can detect fingerprints without using a separate light source by using pixels in the AOD area as a light source.

도 1은 본 발명의 실시예에 따른 표시장치를 보여 주는 블록도이다.
도 2는 본 발명의 지문 센서 일체형 표시패널의 단면 구조를 보여 주는 단면도이다.
도 3은 모바일 정보 단말기의 화면 상에서 지문 인식이 가능한 AOD 영역의 예를 보여 주는 도면들이다.
도 4는 지문 인식 이벤트가 감지될 때 AOD 영역이 발광되는 예를 보여 주는 도면이다.
도 5는 본 발명의 실시예에 따른 지문 인식 방법을 보여 주는 흐름도이다.
1 is a block diagram showing a display device according to an embodiment of the present invention.
2 is a cross-sectional view showing a cross-sectional structure of a fingerprint sensor integrated type display panel according to the present invention.
3 is a diagram illustrating an example of an AOD area in which fingerprint recognition is possible on the screen of the mobile information terminal.
4 is a diagram illustrating an example in which an AOD area is emitted when a fingerprint recognition event is detected.
5 is a flowchart illustrating a fingerprint recognition method according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다는 것에 주의하여야 한다. 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이다. 본 발명은 특허청구범위에 의해 정의된다. BRIEF DESCRIPTION OF THE DRAWINGS The advantages and features of the present invention, and the manner of achieving them, will be apparent from and elucidated with reference to the embodiments described hereinafter in conjunction with the accompanying drawings. It should be noted that the present invention is not limited to the embodiments disclosed below, but may be implemented in various forms. These embodiments are provided so that the disclosure of the present invention is complete and that those skilled in the art will fully understand the scope of the present invention. The invention is defined by the claims.

본 발명의 실시예를 설명하기 위한 도면에 개시된 형상, 크기, 비율, 각도, 개수 등은 예시적인 것이므로 본 발명이 도시된 사항에 한정되는 것은 아니다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다. The shapes, sizes, ratios, angles, numbers, and the like disclosed in the drawings for describing the embodiments of the present invention are illustrative, and thus the present invention is not limited thereto. Like reference numerals refer to like elements throughout the specification.

본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다. 본 명세서 상에서 언급된 '포함한다', '갖는다', '이루어진다' 등이 사용되는 경우 ' ~ 만'이 사용되지 않는 이상 다른 부분이 추가될 수 있다. 구성 요소를 단수로 표현한 경우에 특별히 명시적인 기재 사항이 없는 한 복수를 포함하는 경우를 포함한다. In the following description of the present invention, detailed description of known related arts will be omitted when it is determined that the gist of the present invention may be unnecessarily obscured by the present invention. Where the terms "comprises", "having", "done", and the like are used in this specification, other portions may be added unless "only" is used. Unless the context clearly dictates otherwise, including the plural unless the context clearly dictates otherwise.

구성 요소를 해석함에 있어서, 별도의 명시적 기재가 없더라도 오차 범위를 포함하는 것으로 해석한다.In interpreting the constituent elements, it is construed to include the error range even if there is no separate description.

위치 관계에 대한 설명일 경우, 예를 들어, ' ~ 상에', ' ~ 상부에', ' ~ 하부에', ' ~ 옆에' 등으로 두 부분의 위치 관계가 설명되는 경우, '바로' 또는 '직접'이 사용되지 않는 이상 두 부분 사이에 하나 이상의 다른 부분이 위치할 수도 있다. In the case of a description of the positional relationship, for example, if the positional relationship between two parts is described as 'on', 'on top', 'under', and 'next to' Or " direct " is not used, one or more other portions may be located between the two portions.

실시에 설명에서, 제1, 제2 등이 다양한 구성 요소들을 서술하기 위해서 사용되지만, 이들 구성 요소들은 이들 용어에 의해 제한되지 않는다. 이들 용어들은 단지 하나의 구성 요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. In the description of the embodiments, the first, second, etc. are used to describe various components, but these components are not limited by these terms. These terms are used only to distinguish one component from another.

본 발명의 여러 실시예들의 각각 특징들이 부분적으로 또는 전체적으로 서로 결합 또는 조합 가능하며, 기술적으로 다양한 연동 및 구동이 가능하며, 각 실시예들이 서로에 대하여 독립적으로 실시 가능할 수도 있고 연관 관계로 함께 실시 가능할 수도 있다.It is to be understood that each of the features of the various embodiments of the present invention may be combined or combined with each other partially or wholly and technically various interlocking and driving are possible and that the embodiments may be practiced independently of each other, It is possible.

본 발명의 표시장치는 모바일 정보 단말기에 적용될 수 있다. 모바일 정보 단말기는 휴대폰, 스마트폰, 태블릿 컴퓨터, 노트북 컴퓨터, 웨어리블(wearable) 기기 등을 포함한다. 모바일 정보 단말기는 대기 모드(또는 sleep mode) 또는 잠금 상태에서 소비 전력을 줄이기 위하여, 표시장치의 구동을 멈추어 소비 전력을 줄이고 있다. 그런데 사용자는 시계와 같이 단순한 정보를 볼 때 모바일 정보 단말기를 재가동(restart)하기 때문에 모바일 정보 단말기의 온/오프를 빈번하게 반복하여 불편함을 느낄 수 있다. 이러한 사용자의 불편함을 줄이기 위하여, 대기 모드 또는 잠금 상태에서 화면의 일부 영역에 존재하는 픽셀들만 구동하여 날짜, 시계 등의 정보를 표시해 주는 AOD 기능이 모바일 정보 단말기에 설정되고 있다. 모바일 정보 단말기는 AOD 기능이 활성화될 때 화면 전체를 구동하지 않고 화면 상에서 일부 픽셀들만 구동(partial display)하여 날짜, 시계 등 간단한 AOD 정보를 항상 표시한다. AOD 정보가 항상 같은 위치의 픽셀들에 표시되면 그 픽셀들의 열화가 다른 픽셀들에 비하여 더 빨리 진행되어 잔상이 보일 수 있다. 이를 개선하기 위하여, 화면 상에서 AOD 영역이 지문 인식이 가능한 영역 내에서 이동될 수 있다. 본 발명은 화면 상에서 지문 인식이 가능한 위치에 AOD 정보를 표시하고, AOD 영역에 지문 입력을 안내하는 이미지, 기호, 문자 등을 표시한다. 사용자는 지문 인식률이 높은 AOD 영역 상에서 지문을 입력하여 모바일 정보 단말기의 대기 모드 또는 잠금 상태를 해제할 수 있다. 따라서, 본 발명은 화면의 일부 영역만 구동되는 AOD 구동 모드에서 AOD 영역을 지문 인식 가능한 영역에 설정하여 AOD 구동 모드에서 지문을 빠르고 정확하게 인식할 수 있다.The display device of the present invention can be applied to a mobile information terminal. The mobile information terminal includes a mobile phone, a smart phone, a tablet computer, a notebook computer, and a wearable device. In order to reduce the power consumption in the standby mode (or sleep mode) or the locked state, the mobile information terminal stops driving the display device to reduce the power consumption. However, since the user restarts the mobile information terminal when viewing simple information such as a clock, it can be inconvenient to repeatedly turn on / off the mobile information terminal frequently. In order to reduce the inconvenience of the user, an AOD function for displaying information such as a date, a clock, and the like by driving only pixels located in a partial area of the screen in a standby mode or a locked state is set in the mobile information terminal. When the AOD function is activated, the mobile information terminal drives partial pixels only on the screen without displaying the entire screen, and always displays simple AOD information such as a date and a clock. If the AOD information is always displayed on the pixels at the same position, the deterioration of the pixels may proceed faster than the other pixels, and the afterimage may be seen. To improve this, the AOD area on the screen can be moved within a fingerprint recognition area. The present invention displays AOD information at a position where fingerprint recognition is possible on the screen, and displays images, symbols, characters, and the like, which guide the input of a fingerprint in the AOD area. The user can release the standby mode or the locked state of the mobile information terminal by inputting the fingerprint on the AOD area having a high fingerprint recognition rate. Therefore, according to the present invention, in the AOD driving mode in which only a part of the screen is driven, the AOD area can be set in the fingerprint recognizable area, and the fingerprint can be recognized quickly and accurately in the AOD driving mode.

이하의 실시예에서 “AOD 구동 모드”는 표시장치의 화면에서 지문 인식이 가능한 일부 영역의 픽셀들만 구동되고 나머지 화면 영역의 픽셀들은 구동되지 않는 동작 상태를 의미한다. 이하에서, “지문 인식 이벤트(event)”는 사용자가 지문 인식을 시도하는 상황을 의미한다. In the following embodiments, the " AOD drive mode " means an operation state in which only pixels of a certain area capable of fingerprint recognition are driven on the screen of the display device, and pixels of the remaining screen area are not driven. Hereinafter, the " fingerprint recognition event " means a situation where the user attempts fingerprint recognition.

이하, 첨부된 도면을 참조하여 본 발명의 다양한 실시예들을 상세히 설명한다. 이하의 실시예들에서, 전계 발광 표시장치는 유기 발광 물질을 포함한 유기 발광 표시장치를 중심으로 설명한다. 하지만, 본 발명의 기술적 사상은 유기 발광 표시장치에 국한되지 않고, 무기발광 물질을 포함한 무기 발광 표시장치에도 적용될 수 있음에 주의하여야 한다. Various embodiments of the present invention will now be described in detail with reference to the accompanying drawings. In the following embodiments, an electroluminescent display device will be described mainly with respect to an organic light emitting display device including an organic light emitting material. However, it should be noted that the technical idea of the present invention is not limited to the organic light emitting display, but can also be applied to an inorganic light emitting display device including an inorganic light emitting material.

도 1은 본 발명의 실시예에 따른 표시장치를 보여 주는 블록도이다.1 is a block diagram showing a display device according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 표시장치는 표시 패널(100)과, 표시패널 구동 회로, 지문 센서 등을 구비한다. 1, the display device of the present invention includes a display panel 100, a display panel drive circuit, a fingerprint sensor, and the like.

표시 패널(100)은 화면(AA) 상에서 입력 영상을 표시하는 픽셀 어레이를 포함한다. 픽셀 어레이는 다수의 데이터 라인들(102), 데이터 라인들(102)과 교차되는 다수의 게이트 라인들(104), 및 매트릭스 형태로 배치되는 픽셀들을 포함한다. 픽셀들 각각은 컬러 구현을 위하여 적색 서브 픽셀, 녹색 서브 픽셀, 청색 서브 픽셀로 나뉘어질 수 있다. 픽셀들 각각은 백색 서브 픽셀을 더 포함할 수 있다. 서브 픽셀들(101) 각각은 픽셀 회로를 포함한다. The display panel 100 includes a pixel array for displaying an input image on a screen AA. The pixel array includes a plurality of data lines 102, a plurality of gate lines 104 intersecting the data lines 102, and pixels arranged in a matrix. Each of the pixels may be divided into a red subpixel, a green subpixel, and a blue subpixel for color implementation. Each of the pixels may further include a white subpixel. Each of the subpixels 101 includes a pixel circuit.

표시 패널(100) 상에 터치 센서들이 배치될 수 있다. 터치 입력은 별도의 터치 센서들을 이용하여 센싱되거나 픽셀들을 통해 센싱될 수 있다. 터치 센서들은 온-셀(On-cell type) 또는 애드 온 타입(Add on type)으로 표시 패널의 화면 상에 배치되거나 픽셀 어레이에 내장되는 인-셀(In-cell type) 터치 센서들로 구현될 수 있다. Touch sensors may be disposed on the display panel 100. The touch input may be sensed using separate touch sensors or may be sensed through pixels. The touch sensors may be implemented as in-cell type touch sensors disposed on the screen of a display panel or embedded in a pixel array as an on-cell type or an add-on type .

표시패널(100)의 화면(AA) 상에서 지문을 감지할 수 있도록 표시패널(100)은 도 2에 도시된 바와 같이 지문 센서 일체형 구조를 갖는다. 지문 센서는 표시패널(100)의 화면(AA) 상에서 AOD 영역 내에서 존재하는 픽셀들과, AOD 영역과 대향하도록 표시패널(100)의 아래에 배치된 이미지 센서(300)를 포함한다. AOD 영역은 이미지 센서(300)의 광 수광면과 대향하여 화면(AA) 상에서 지문 인식이 가능한 위치로 설정된다. AOD가 화면(AA) 상에 표시될 때 AOD 영역 내의 픽셀들이 활성화되는 반면, AOD 영역 이외의 다른 영역의 픽셀들은 비활성화된다. 따라서, 화면 상에 AOD가 표시되면 AOD 영역 내의 픽셀들만 구동된다. The display panel 100 has a fingerprint sensor integrated structure as shown in FIG. 2 so that the fingerprint can be detected on the screen AA of the display panel 100. The fingerprint sensor includes pixels existing in the AOD region on the screen AA of the display panel 100 and an image sensor 300 disposed below the display panel 100 to face the AOD region. The AOD area is set at a position where fingerprint recognition is possible on the screen AA, opposite to the light receiving surface of the image sensor 300. [ When the AOD is displayed on the screen AA, the pixels in the AOD region are activated, while the pixels in the other regions other than the AOD region are inactivated. Accordingly, when the AOD is displayed on the screen, only the pixels within the AOD area are driven.

본 발명의 표시장치는 압력 센서(310)를 더 포함할 수 있다. 압력 센서(310)는 AOD 영역에 접촉되는 손가락의 압력을 감지하기 위하여 도 2에 도시된 바와 같이 이미지 센서(300) 근방에 설치될 수 있다. The display device of the present invention may further include a pressure sensor (310). The pressure sensor 310 may be installed in the vicinity of the image sensor 300 as shown in FIG. 2 to sense the pressure of the finger contacting the AOD region.

표시 패널 구동 회로는 노말(Normal) 구동 모드에서 화면(AA) 전체의 픽셀들을 활성화하여 입력 영상의 픽셀 데이터를 기입하여 표시 패널(100)의 화면 상에 입력 영상을 표시한다. 표시 패널(100)의 픽셀들은 자발광 소자 예를 들어, 유기 발광 다이오드(Organic Light Emitting Diode: 이하, "OLED"라 함)를 포함한다. OLED는 애노드 및 캐소드와, 이 전극들 사이에 형성된 유기 화합물층을 포함한다. 유기 화합물층은 정공주입층(Hole Injection layer, HIL), 정공수송층(Hole transport layer, HTL), 발광층(Emission layer, EML), 전자수송층(Electron transport layer, ETL) 및 전자주입층(Electron Injection layer, EIL)을 포함할 수 있으나 이에 한정되지 않는다. The display panel driving circuit activates the pixels of the entire screen AA in the normal driving mode to write the pixel data of the input image and displays the input image on the screen of the display panel 100. [ The pixels of the display panel 100 include a self-luminous element, for example, an organic light-emitting diode (OLED). The OLED includes an anode and a cathode, and an organic compound layer formed between the electrodes. The organic compound layer includes a hole injection layer (HIL), a hole transport layer (HTL), an emission layer (EML), an electron transport layer (ETL), and an electron injection layer EIL). ≪ / RTI >

표시패널 구동회로는 타이밍 콘트롤러(Timing controller, TCON)(130)의 제어 하에 AOD 구동 모드에서 AOD 영역의 픽셀들만 구동하여 AOD 영역 내의 픽셀들에 미리 설정된 AOD 정보의 데이터를 표시한다. 따라서, AOD 구동 모드에서 AOD 영역의 픽셀들만 활성화되고, AOD 영역 이외의 픽셀들은 구동되지 않기 때문에 비활성화 상태이다. The display panel driving circuit drives only pixels in the AOD area in the AOD driving mode under the control of the timing controller (TCON) 130 to display data of AOD information preset in the pixels in the AOD area. Therefore, only the pixels in the AOD region are activated in the AOD driving mode, and the pixels other than the AOD region are inactive because they are not driven.

표시 패널 구동 회로는 데이터 구동부(110)와 게이트 구동부(120)를 구비한다. 데이터 구동부(110)와 데이터 라인들(102) 사이에 디멀티플렉서(112)가 배치될 수 있다. 표시 패널 구동 회로는 터치 센서들을 구동하기 위한 터치 센서 구동부를 더 구비할 수 있다. 터치 센서 구동부는 도 1에서 생략되어 있다. 모바일 기기에서 표시 패널 구동 회로, 타이밍 콘트롤러(130) 그리고 도시하지 않은 전원 회로는 하나의 드라이브 IC 내에 집적될 수 있다. The display panel drive circuit includes a data driver 110 and a gate driver 120. A demultiplexer 112 may be disposed between the data driver 110 and the data lines 102. The display panel drive circuit may further include a touch sensor driver for driving the touch sensors. The touch sensor driving unit is omitted in Fig. In the mobile device, the display panel drive circuit, the timing controller 130, and the power supply circuit (not shown) can be integrated in one drive IC.

데이터 구동부(110)는 디지털-아날로그 변환기(Digital to Analog converter, 이하 DAC라 함)를 이용하여 매 프레임 기간마다 타이밍 콘트롤러(130)로부터 수신되는 입력 영상의 디지털 데이터를 아날로그 감마 보상 전압으로 변환하여 데이터 전압을 출력한다. 데이터 전압은 디멀티플렉서(112)와 데이터 라인(102)을 통해 픽셀들에 인가된다. 디멀티플렉서(112)는 다수의 스위치 소자들을 이용하여 데이터 구동부(110)와 데이터 라인들(102) 사이에 배치되어 데이터 구동부(110)로부터 출력되는 데이터 전압을 데이터 라인들(102)로 분배한다. 디멀티플렉서(112)에 의해 데이터 구동부(110)의 한 채널이 다수의 데이터 라인들에 시분할 연결되기 때문에 데이터 라인들(102)의 개수가 감소될 수 있다.The data driver 110 converts digital data of an input image received from the timing controller 130 into an analog gamma compensation voltage every frame period using a digital-to-analog converter (DAC) And outputs a voltage. The data voltage is applied to the pixels through the demultiplexer 112 and the data line 102. The demultiplexer 112 is disposed between the data driver 110 and the data lines 102 using a plurality of switch elements and distributes the data voltages output from the data driver 110 to the data lines 102. The number of data lines 102 can be reduced because one channel of the data driver 110 is time-division-connected to the plurality of data lines by the demultiplexer 112.

게이트 구동부(120)는 픽셀 어레이의 TFT(Thin film transistors) 및 배선들과 함께 표시 패널(100) 상의 베젤(bezel) 영역 상에 직접 형성되는 GIP(Gate in panel) 회로로 구현될 수 있다. 게이트 구동부(120)는 타이밍 콘트롤러(130)의 제어 하에 게이트 신호를 게이트 라인들(104)로 출력한다. 게이트 구동부(120)는 시프트 레지스터(Shift register)를 이용하여 게이트 신호를 시프트시킴으로써 그 신호들을 게이트 라인들(104)에 순차적으로 공급할 수 있다. 게이트 신호는 도시하지 않은 스캔 신호와 발광 신호 등을 포함할 수 있다. 스캔 신호는 데이터 신호와 동기된다. 발광 신호는 픽셀들의 발광 시간을 정의한다. The gate driver 120 may be implemented as a gate in panel (GIP) circuit formed directly on a bezel region on the display panel 100 together with TFTs (thin film transistors) and wirings of the pixel array. The gate driver 120 outputs a gate signal to the gate lines 104 under the control of the timing controller 130. The gate driver 120 may sequentially shift the gate signals to the gate lines 104 by shifting the gate signals using a shift register. The gate signal may include a scan signal, an emission signal, and the like, which are not shown. The scan signal is synchronized with the data signal. The emission signal defines the emission time of the pixels.

타이밍 콘트롤러(130)는 호스트 시스템(200)으로부터 입력 영상의 디지털 비디오 데이터(DATA)와, 그와 동기되는 타이밍 신호를 수신한다. 타이밍 신호는 수직 동기신호(Vsync), 수평 동기신호(Hsync), 클럭 및 데이터 인에이블신호(Data Enable, DE) 등을 포함할 수 있다. The timing controller 130 receives digital video data (DATA) of an input image from the host system 200 and a timing signal synchronized with the digital video data (DATA). The timing signal may include a vertical synchronization signal Vsync, a horizontal synchronization signal Hsync, a clock and a data enable signal DE.

호스트 시스템(200)은 입력 영상의 픽셀 데이터와 타이밍 신호를 타이밍 콘트롤러(130)에 전송한다. 호스트 시스템(200)은 모바일 정보 단말기의 AP(Application Processor)일 수 있으나 이에 한정되지 않는다. 호스트 시스템(200)에는 각종 센서가 연결될 수 있다. 예를 들어, 호스트 시스템(200)은 근접 센서(320)에 연결될 수 있고 또한, 도시하지 않은 조도 센서, 자이로 센서 등에 연결될 수 있다. The host system 200 transmits the pixel data and the timing signal of the input image to the timing controller 130. The host system 200 may be an AP (Application Processor) of the mobile information terminal, but is not limited thereto. Various sensors may be connected to the host system 200. For example, the host system 200 may be connected to the proximity sensor 320 and may be connected to an illuminance sensor, a gyro sensor, etc., not shown.

타이밍 콘트롤러(130)는 호스트 시스템(200)으로부터 수신된 타이밍 신호(Vsync, Hsync, DE)를 바탕으로 데이터 구동부(110)의 동작 타이밍을 제어하기 위한 데이터 타이밍 제어신호, 디멀티플렉서(112)의 동작 타이밍을 제어하기 위한 스위치 제어신호, 게이트 구동부(120)의 동작 타이밍을 제어하기 위한 게이트 타이밍 제어신호를 발생하여 표시 패널 구동 회로(100)의 동작 타이밍을 제어한다. 타이밍 콘트롤러(130)로부터 출력된 게이트 타이밍 제어신호는 도 1에서 생략된 레벨 시프터(Level shifter)를 통해 게이트 구동부(120)에 공급될 수 있다. 레벨 시프터는 게이트 타이밍 제어신호의 로우 레벨 전압(low level voltage)을 게이트 로우 전압(VGL)으로 변환하고, 게이트 타이밍 제어신호의 하이 레벨 전압(high level voltage)을 게이트 하이 전압(VGH)으로 변환한다. The timing controller 130 generates a data timing control signal for controlling the operation timing of the data driver 110 based on the timing signals Vsync, Hsync and DE received from the host system 200, the operation timing of the demultiplexer 112 And a gate timing control signal for controlling the operation timing of the gate driver 120 to control the operation timing of the display panel drive circuit 100. [ The gate timing control signal output from the timing controller 130 may be supplied to the gate driver 120 through a level shifter omitted in FIG. The level shifter converts the low level voltage of the gate timing control signal to the gate low voltage VGL and converts the high level voltage of the gate timing control signal to the gate high voltage VGH .

도 2는 본 발명의 지문 센서 일체형 표시패널의 단면 구조를 보여 주는 단면도이다. 2 is a cross-sectional view showing a cross-sectional structure of a fingerprint sensor integrated type display panel according to the present invention.

도 2를 참조하면, 표시패널(100)의 전면에 투명 기판(110)이 덮여질 수 있다. 투명 기판(110)는 커버 글라스(cover glass)일 수 있다. 사용자의 지문은 표시패널(100)의 화면 상에서 투명 기판(110) 상에 접촉될 수 있다. Referring to FIG. 2, the transparent substrate 110 may be covered on the entire surface of the display panel 100. The transparent substrate 110 may be a cover glass. The fingerprint of the user can be contacted on the transparent substrate 110 on the screen of the display panel 100. [

표시패널(100)의 배면에 이미지 센서(300)와 압력 센서(310)가 배치될 수 있다. 압력 센서(310)는 이미지 센서(300)의 근방에 배치될 수 있다. 호스트 시스템(200)은 AOD 영역이나 그 근처에 배치된 압력 센서(310), 터치 센서, 이미지 센서를 이용하여 지문 인식 이벤트(event)를 판단할 수 있다. 예를 들어, AOD 구동 모드에서 AOD 영역이 터치되거나 AOD 영역의 조도가 낮아질 때 또는, AOD 영역이 손가락으로 눌려질 때 이 상황이 지문 인식 이벤트로 판단될 수 있다. 호스트 시스템(200)은 터치 센서로 AOD 영역의 터치 입력을 판단하고, 압력 센서(310)로 AOD 영역의 압력 변화를 판단할 수 있다. 이미지 센서(300)에 의해 AOD 영역 상의 조도 변화가 감지될 수 있다. 따라서, 호스트 시스템(200)은 AOD 구동 모드에서 이미지 센서(300)로 AOD 영역의 조도를 판단할 수 있다. AOD 구동 모드에서 AOD 영역 상에 사용자의 손가락이 가까이 접근하면 이미지 센서(300)의 수광량이 낮아지기 때문에 AOD 영역의 조도가 낮아지는 것을 알 수 있다. 호스트 시스템(200)은 지문 인식 이벤트가 감지될 때 이미지 센서(300)로부터 수신된 지문 패턴 이미지와 미리 저장된 사용자의 지문 패턴을 비교하여 지문 인증 처리를 실시한다. The image sensor 300 and the pressure sensor 310 may be disposed on the back surface of the display panel 100. [ The pressure sensor 310 may be disposed in the vicinity of the image sensor 300. The host system 200 can determine the fingerprint recognition event using the pressure sensor 310, the touch sensor, and the image sensor disposed in the AOD area or the vicinity thereof. For example, when the AOD area is touched or the illuminance of the AOD area is lowered in the AOD driving mode, or when the AOD area is pressed by the finger, this situation can be determined as a fingerprint recognition event. The host system 200 can determine the touch input of the AOD area with the touch sensor and determine the pressure change of the AOD area with the pressure sensor 310. [ A change in illumination on the AOD area can be detected by the image sensor 300. [ Accordingly, the host system 200 can determine the illuminance of the AOD area by the image sensor 300 in the AOD drive mode. In the AOD driving mode, when the user's finger approaches the AOD area, the light received by the image sensor 300 is lowered, so that the illuminance of the AOD area is lowered. The host system 200 compares the fingerprint pattern image received from the image sensor 300 with the fingerprint pattern of the user stored in advance when the fingerprint recognition event is detected and performs the fingerprint authentication process.

화면(AA) 상에서 AOD 영역은 이미지 센서(300) 위에서 소정 크기로 설정되어 지문 인식이 가능한 영역이다. 이미지 센서(300)는 화면(AA) 상에서 AOD 영역의 픽셀들과 대향한다. 지문 인식 이벤트가 감지되면, 표시패널 구동회로는 지문 패턴이 접촉된 AOD 영역의 픽셀들을 발광시켜 지문 패턴을 감지한다. 이 때, AOD 영역의 픽셀들은 고휘도의 백색광, 녹색광 또는 청색광으로 발광하여 AOD 영역할 수 있다. 따라서, AOD 구동 모드에서 지문 인식 이벤트가 발생될 때 AOD 영역의 픽셀들은 지문 패턴을 감지하기 위한 광원으로 동작한다. 지문 인식 이벤트가 감지될 때, AOD 영역 이외의 다른 픽셀들은 비활성화 상태를 유지하여 구동되지 않기 때문에 화면(AA)에서 AOD 영역을 제외한 나머지 영역이 검게 보인다. On the screen AA, the AOD area is set to a predetermined size on the image sensor 300 to enable fingerprint recognition. The image sensor 300 faces the pixels of the AOD region on the screen AA. When the fingerprint recognition event is detected, the display panel driving circuit detects the fingerprint pattern by emitting pixels of the AOD area in which the fingerprint pattern is in contact. At this time, the pixels of the AOD region can emit light of a high-luminance white light, green light, or blue light to be AOD regions. Therefore, when a fingerprint recognition event is generated in the AOD driving mode, the pixels in the AOD region operate as a light source for sensing a fingerprint pattern. When a fingerprint recognition event is detected, pixels other than the AOD area remain inactive and are not driven, so that the remaining area except for the AOD area on the screen AA is black.

이미지 센서(300)는 표시패널(100)의 기판 배면에 접착제(301)로 접착될 수 있다. 접착제(301)는 광 투과율이 높은 OCA(Optical clear Adhesive)으로 선택될 수 있다. 표시패널(100)의 기판 배면에 폼 패드(Foam pad) 및 금속층(111)이 더 접착될 수 있다. 이미지 센서(300)의 광 수신 효율을 높이고 표시장치의 두께를 줄이기 위하여, 이미지 센서(300)는 폼 패드 및 금속층(111)의 홀(hole)에 의해 노출된 표시패널(100)의 배면에 직접 접착될 수 있다. The image sensor 300 may be adhered to the back surface of the display panel 100 with an adhesive 301. The adhesive 301 can be selected as OCA (Optical Clear Adhesive) having high light transmittance. A foam pad and a metal layer 111 may further be adhered to the back surface of the substrate of the display panel 100. [ The image sensor 300 is mounted on the rear surface of the display panel 100 exposed by the holes of the foam pad and the metal layer 111 in order to increase the light receiving efficiency of the image sensor 300 and reduce the thickness of the display device. Can be adhered.

지문 인식 이벤트가 감지될 때, AOD 영역의 픽셀들이 발광되면 픽셀들로부터의 빛이 지문의 융선(Ridge, R)으로부터 반사되어 이미지 센서(300)의 포토 센서 픽셀들에 수광되는 반면, 지문의 골(Valley, V)에서 빛이 통과되어 거의 반사되지 않는다. 이미지 센서(300)의 포토 센서 픽셀들 각각은 빛을 전기적인 신호로 변환하는 포토 센서를 이용하여 지문의 골(R)로부터 반사된 빛을 전압으로 변환하고 그 전압을 증폭하여 디지털 데이터로 변환한다. 호스트 시스템(200)은 이미지 센서(300)에 의해 실시간 감지된 지문 패턴 데이터를 미리 저장된 사용자 지문 패턴과 비교하여 매칭 여부를 판단하는 지문 인증 절차를 수행한다. 이러한 지문 인증 절차를 통해 실시간 감지된 지문이 억세스가 허용된 사용자의 지문인지 결정된다. When the fingerprint recognition event is detected, when the pixels of the AOD region are lit, the light from the pixels is reflected from the ridge R of the fingerprint and is received by the photosensor pixels of the image sensor 300, (Valley, V). Each of the photosensor pixels of the image sensor 300 converts light reflected from the ridge R of the fingerprint into a voltage using a photosensor that converts light into an electrical signal, amplifies the voltage, and converts the amplified voltage into digital data . The host system 200 compares the fingerprint pattern data detected in real time with the user fingerprint pattern stored in advance by the image sensor 300, and performs a fingerprint authentication process for determining whether the fingerprint pattern matches or not. Through this fingerprint authentication procedure, it is determined whether the fingerprint that is detected in real time is the fingerprint of the user who is permitted to access.

이미지 센서(300)는 AOD 구동 모드에서 소비 전력이 증가되지 않도록 절전 모드로 동작하는 것이 바람직하다. 이미지 센서(300)의 절전 모드는 공지된 다양한 방법이 있으므로 이에 대한 상세한 설명을 생략한다. 지문 인식 이벤트가 감지될 때 호스트 시스템(200)은 AOD 영역의 픽셀들과 이미지 센서(300)의 휘도를 노말 구동 모드 상태로 높이기 위하여 인터럽트 신호(Interrupt)를 발생할 수 있다. 표시패널 구동회로는 호스트 시스템(200)으로부터 인터럽트 신호가 수신될 때 웨이크 업(wake up)되어 노말 구동 모드로 동작하여 AOD 영역의 픽셀 휘도를 높인다. 이미지 센서(300)는 호스트 시스템(200)으로부터의 인터럽트 신호에 응답하여 웨이크업되어 노말 구동 모드로 동작한다. 이미지 센서(300)가 노말 구동 모드로 동작하면 절전 모드에 비하여 소비 전력이 상승될 수 있다. The image sensor 300 preferably operates in the power saving mode so that power consumption is not increased in the AOD driving mode. Since the power saving mode of the image sensor 300 is various known methods, a detailed description thereof will be omitted. When a fingerprint recognition event is detected, the host system 200 may generate an interrupt signal to increase the brightness of the pixels of the AOD area and the brightness of the image sensor 300 to the normal driving mode. The display panel driving circuit wakes up when an interrupt signal is received from the host system 200 and operates in the normal driving mode to increase the pixel brightness of the AOD area. The image sensor 300 wakes up in response to an interrupt signal from the host system 200 and operates in the normal drive mode. When the image sensor 300 operates in the normal driving mode, the power consumption may be increased as compared with the power saving mode.

본 발명의 표시장치는 도 3 및 도 4의 예와 같이 모바일 정보 단말기의 화면을 구현할 수 있다. The display device of the present invention can implement a screen of a mobile information terminal as in the example of FIG. 3 and FIG.

도 3은 모바일 정보 단말기의 화면 상에서 지문 인식이 가능한 AOD 영역의 예를 보여 주는 도면들이다. 3 is a diagram illustrating an example of an AOD area in which fingerprint recognition is possible on the screen of the mobile information terminal.

도 3은 본 발명의 모바일 정보 단말기는 AOD 구동 모드에서 AOD 영역(150)에 미리 설정된 AOD 정보를 표시하고 AOD 영역(150) 이외의 나머지 화면에서 픽셀들을 비활성화 상태로 제어한다. 따라서, 모바일 정보 단말기의 표시장치는 AOD 구동 모드에서 AOD 영역(150)에 AOD 정보를 표시하면서 소비 전력을 줄일 수 있다. 3, the mobile information terminal of the present invention displays AOD information set in advance in the AOD area 150 in the AOD driving mode and controls the pixels in the inactive state in other screens than the AOD area 150. [ Accordingly, the display device of the mobile information terminal can reduce the power consumption while displaying the AOD information in the AOD area 150 in the AOD driving mode.

AOD 영역(150)은 화면(AA) 상에서 이미지 센서(300)와 중첩되는 지문 인식이 가능한 위치에 지정된다. 화면(AA) 상에서 AOD 영역(150)만 구동될 때 그 AOD 영역(150) 상에 사용자가 지문을 올려 놓을 수 있도록 AOD 영역에 지문 인식 위치를 직관적으로 알려 주는 이미지, 기호, 문자 등이 표시되는 것이 바람직하다. 지문 접촉을 안내하는 이미지는 아이콘 형태의 이미지일 수 있으나 이에 한정되지 않는다. AOD 영역(150)의 위치는 픽셀들의 열화를 분산하거나 그 이외의 다른 목적으로 이동될 수 있으나 지문 인식이 가능한 영역 내에서 이동된다. AOD 영역(150)은 미리 설정된 소정 시간 주기마다 이동될 수 있다. The AOD area 150 is assigned a fingerprint-recognizable position overlapping the image sensor 300 on the screen AA. An image, a symbol, and a character that intuitively notifies the fingerprint recognition position are displayed in the AOD area so that the user can place the fingerprint on the AOD area 150 when the AOD area 150 is driven on the screen AA . The image that guides the fingerprint contact may be an image in the form of an icon, but is not limited thereto. The position of the AOD region 150 may be moved for other purposes or to disperse the deterioration of the pixels, but is moved within a fingerprint-recognizable region. The AOD area 150 may be moved every predetermined time period.

도 4는 지문 인식 이벤트가 감지될 때 AOD 영역이 발광되는 예를 보여 주는 도면이다. 4 is a diagram illustrating an example in which an AOD area is emitted when a fingerprint recognition event is detected.

AOD 구동 모드에서 AOD 영역(150) 상에 터치 입력, 조도 변화, 압력 변화가 발생할 때, 호스트 시스템(200)은 지문 인식 이벤트를 감지한다. 호스트 시스템(200)은 지문 인식 이벤트가 감지될 때 AOD 영역(150) 내에서 픽셀들을 미리 설정된 휘도로 발광하여 지문 패턴을 감지한다. 이 때, 발광되는 픽셀들은 AOD 영역 내의 모든 픽셀들이거나 AOD 영역 내에서 지문 인식 영역으로 미리 설정된 국부 영역 내의 모든 픽셀들일 수 있다. When the touch input, the illumination change, and the pressure change occur in the AOD area 150 in the AOD driving mode, the host system 200 detects the fingerprint recognition event. When the fingerprint recognition event is detected, the host system 200 emits the pixels in the AOD area 150 with predetermined brightness to detect the fingerprint pattern. At this time, the pixels to be emitted may be all the pixels in the AOD region or all the pixels in the local region preset in the AOD region as the fingerprint recognition region.

도 5는 본 발명의 실시예에 따른 지문 인식 방법을 보여 주는 흐름도이다.5 is a flowchart illustrating a fingerprint recognition method according to an embodiment of the present invention.

도 5를 참조하면, 모바일 정보 단말기는 화면(AA)의 AOD 영역(150)에서 터치 입력이 발생하거나 압력 변화가 발생하거나 혹은, 조도가 변경될 때 지문 인식 이벤트를 감지한다(S1). Referring to FIG. 5, the mobile information terminal detects a fingerprint recognition event when a touch input occurs, a pressure change occurs, or illumination changes in the AOD area 150 of the screen AA (S1).

모바일 정보 단말기는 지문 인식 이벤트가 감지될 때 모바일 정보 단말기의 현재 구동 상태가 AOD 구동 모드인지 확인한다. 이는 단순히 지문 인식 이벤트로 추정될 때 모바일 정보 단말기의 오동작과 불필요한 소비 전력을 방지하기 위함이다. 예를 들어, 휴대폰 또는 스마트폰이 사용자의 주머니 속에 들어갈 때 지문 인식 이벤트로 감지될 수 있다. 이러한 상황에서 지문 인식 동작을 하지 않도록 모바일 정보 단말기의 현재 구동 상태가 AOD 구동 상태인지 확인할 필요가 있다. The mobile information terminal confirms whether the current driving state of the mobile information terminal is the AOD driving mode when the fingerprint recognition event is detected. This is to prevent erroneous operation of the mobile information terminal and unnecessary power consumption when it is estimated as a fingerprint recognition event. For example, a fingerprint recognition event can be detected when a mobile phone or a smartphone enters a user's pocket. In such a situation, it is necessary to check whether the current driving state of the mobile information terminal is the AOD driving state so as not to perform the fingerprint recognition operation.

호스트 시스템(200)은 근접 센서(320)를 이용하여 모바일 정보 단말기의 현재 상태가 AOD 구동 상태인지 확인할 수 있다(S2). 모바일 정보 단말기의 화면 상에서 물체가 소정의 거리 이하로 근접하면 모바일 정보 단말기는 AOD 구동 모드로 동작하지 않고 화면의 모든 서브 픽셀들이 비활성화될 수 있다. 이러한 상황은 사용자가 통화하기 위하여 스마트 폰을 뺨에 가까이하거나 주머니 또는 가방에 스마트 폰을 넣을 때 발생할 수 있다. 호스트 시스템(200)은 지문 인식 이벤트가 감지되면 근접 센서(320)의 신호를 분석하여 모바일 정보 단말기의 AOD 구동 여부를 체크한다. 모바일 정보 단말기의 화면에 물체가 근접하면, 호스트 시스템(200)은 지문 인식을 시작하지 않고 현재의 AOD 구동 모드를 유지한다.The host system 200 can use the proximity sensor 320 to check whether the current state of the mobile information terminal is the AOD driving state (S2). When the object approaches the predetermined distance or less on the screen of the mobile information terminal, the mobile information terminal does not operate in the AOD driving mode and all subpixels on the screen can be inactivated. This situation can occur when a user places a smartphone near the cheek or puts a smartphone in a pocket or bag to make a call. The host system 200 analyzes the signal of the proximity sensor 320 when the fingerprint recognition event is detected, and checks whether the AOD of the mobile information terminal is driven. When the object approaches the screen of the mobile information terminal, the host system 200 does not start the fingerprint recognition but maintains the current AOD drive mode.

AOD 구동 모드 상태에서 지문 인식이 시작되기 전까지 AOD 영역(150)의 픽셀들은 고휘도로 발광하지 않고 저휘도로 AOD 정보를 표시하고 이미지 센서(300)는 절전 모드로 동작한다. 따라서, AOD 구동 모드에서 표시장치는 절전 모드로 동자하여 그 소비 전력이 낮게 유지된다. The pixels in the AOD area 150 do not emit light at a high luminance but display the AOD information at a low luminance until the fingerprint recognition starts in the AOD drive mode, and the image sensor 300 operates in the power saving mode. Therefore, in the AOD driving mode, the display device operates in the power saving mode and its power consumption is kept low.

S2 단계에서 지문 인식 이벤트가 AOD 구동 모드에서 발생된 것으로 확인되면, AOD 영역(150)의 픽셀들이 고휘도로 발광되고, 이미지 센서(300)가 노말 구동 모드로 동작하여 지문 센서가 동작한다(S3 및 S4). When it is determined in S2 that the fingerprint recognition event is generated in the AOD driving mode, the pixels in the AOD area 150 emit with high brightness, the image sensor 300 operates in the normal driving mode and the fingerprint sensor operates (S3 and S4) S4).

호스트 시스템(200)은 이미지 센서(300)로부터 출력되는 이미지의 지문 패턴과 미리 저장된 사용자의 지문 패턴을 비교하여 지문 인증을 실시한다. 표시패널의 지문 센서에 의해 실시간 감지된 지문 패턴이 미리 설정된 사용자의 지문 패턴과 동일할 때 모바일 정보 단말기의 대기 모드 또는 잠금 상태를 해제한다(S6). 반면에, 표시패널의 지문 센서에 의해 실시간 감지된 지문 패턴이 미리 설정된 사용자의 지문 패턴과 다르면 인증을 거부하고 AOD 구동 모드를 재개하여 S1 단계로 이행한다(S7). The host system 200 compares a fingerprint pattern of an image output from the image sensor 300 with a fingerprint pattern of a user stored in advance and performs fingerprint authentication. When the fingerprint pattern detected in real time by the fingerprint sensor of the display panel is the same as the preset fingerprint pattern of the user, the standby mode or the locked state of the mobile information terminal is released (S6). On the other hand, if the fingerprint pattern sensed in real time by the fingerprint sensor of the display panel differs from the fingerprint pattern of the user, the authentication is refused and the AOD drive mode is resumed.

이상 설명한 내용을 통해 당업자라면 본 발명의 기술사상을 일탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다. 따라서, 본 발명의 기술적 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허 청구의 범위에 의해 정하여져야만 할 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. Therefore, the technical scope of the present invention should not be limited to the contents described in the detailed description of the specification, but should be defined by the claims.

100 : 표시패널 AA : 표시패널의 화면
150 : AOD 영역 300 : 이미지 센서
310 : 압력 센서 320 : 근접 센서
100: display panel AA: display panel screen
150: AOD area 300: Image sensor
310: pressure sensor 320: proximity sensor

Claims (11)

화면 상에 입력 영상을 표시하고 특정 구동 모드에서 지문 인식이 가능한 화면의 일부 영역 내의 픽셀들만 구동되는 표시패널;
상기 화면의 일부 영역과 대향하는 이미지 센서; 및
상기 표시패널의 픽셀들을 구동하는 표시패널 구동회로를 구비하고,
상기 특정 구동 모드에서 상기 화면의 일부 영역의 휘도가 높아지고, 상기 이미지 센서가 구동될 때 상기 화면의 일부 영역 상의 지문이 인식되는 표시장치.
A display panel that displays an input image on a screen and drives only pixels within a partial area of a screen capable of fingerprint recognition in a specific drive mode;
An image sensor facing a part of the screen; And
And a display panel drive circuit for driving the pixels of the display panel,
Wherein a luminance of a partial area of the screen is increased in the specific driving mode and a fingerprint on a partial area of the screen is recognized when the image sensor is driven.
제 1 항에 있어서,
상기 화면의 일부 영역이 지문 인식 가능 영역 내에서 이동되는 표시장치.
The method according to claim 1,
Wherein a part of the screen is moved within the fingerprint recognizable area.
제 1 항에 있어서,
상기 특정 구동 모드에서 상기 이미지 센서가 절전 모드로 동작하고 상기 화면의 일부 영역에서 휘도가 높아질 때 노말 구동 모드로 동작하는 표시장치.
The method according to claim 1,
Wherein the normal mode is operated when the image sensor operates in a power saving mode in a specific driving mode and brightness is increased in a part of the screen.
제 1 항에 있어서,
상기 특정 구동 모드에서 상기 화면의 일부 영역에 사용자의 지문 접촉을 안내하는 이미지, 기호, 문자 중 어느 하나가 표시되는 표시장치.
The method according to claim 1,
Wherein one of an image, a symbol, and a character that guides a user's fingerprint contact is displayed on a part of the screen in the specific drive mode.
화면 상에 입력 영상을 표시하고 특정 구동 모드에서 지문 인식이 가능한 화면의 일부 영역 내의 픽셀들만 구동되는 표시패널;
상기 화면의 일부 영역과 대향하는 이미지 센서;
상기 표시패널의 픽셀들을 구동하는 표시패널 구동회로; 및
상기 특정 구동 모드에서 상기 일부 영역 근방에 위치한 터치 센서, 이미지 센서 및 압력 센서 중 어느 하나를 이용하여 지문 인식 이벤트를 감지할 때 상기 화면의 일부 영역에서 휘도를 높이고 상기 이미지 센서로부터 출력되는 이미지의 지문 패턴과 미리 저장한 사용자의 지문 패턴을 비교하여 지문 인증을 수행하는 호스트 시스템을 구비하는 모바일 정보 단말기.
A display panel that displays an input image on a screen and drives only pixels within a partial area of a screen capable of fingerprint recognition in a specific drive mode;
An image sensor facing a part of the screen;
A display panel driving circuit for driving the pixels of the display panel; And
When detecting a fingerprint recognition event using any one of a touch sensor, an image sensor, and a pressure sensor located in the vicinity of the partial region in the specific driving mode, brightness is increased in a partial area of the screen, And a host system for performing fingerprint authentication by comparing a pattern and a fingerprint pattern of a user stored in advance.
제 5 항에 있어서,
상기 화면의 일부 영역이 지문 인식 가능 영역 내에서 이동되는 모바일 정보 단말기.
6. The method of claim 5,
Wherein a part of the screen is moved within the fingerprint recognizable area.
제 5 항에 있어서,
상기 호스트 시스템이,
상기 지문 인식 이벤트가 감지될 때 근접 센서를 이용하여 상기 화면이 특정 구동 모드로 동작하는지 확인하고,
상기 지문 인식 이벤트가 감지될 때 상기 특정 구동 모드로 화면이 구동되면 확인될 때 인터럽트 신호를 발생하여 상기 화면의 일부 영역에서 휘도를 변경하고 상기 이미지 센서의 구동 모드를 전환하는 모바일 정보 단말기.
6. The method of claim 5,
The host system comprising:
When the fingerprint recognition event is detected, the proximity sensor is used to check whether the screen operates in a specific driving mode,
When the fingerprint recognition event is detected, when the screen is driven in the specific driving mode, an interrupt signal is generated to change the brightness in a part of the screen and switch the driving mode of the image sensor.
제 7 항에 있어서,
상기 표시패널 구동회로는 상기 인터럽트 신호에 응답하여 상기 화면의 일부 영역에 존재하는 픽셀들의 휘도를 높이고,
상기 이미지 센서는 상기 인터럽트 신호에 응답하여 절전 모드로부터 노말 구동 모드로 전환되는 모바일 정보 단말기.
8. The method of claim 7,
Wherein the display panel driving circuit raises the brightness of pixels existing in a part of the screen in response to the interrupt signal,
Wherein the image sensor switches from the power saving mode to the normal drive mode in response to the interrupt signal.
제 5 항에 있어서,
상기 특정 구동 모드에서 상기 화면의 일부 영역에 사용자의 지문 접촉을 안내하는 이미지, 기호, 문자 중 어느 하나가 표시되는 모바일 정보 단말기.
6. The method of claim 5,
Wherein one of an image, a symbol, and a character that guides a user's fingerprint contact is displayed on a part of the screen in the specific driving mode.
특정 구동 모드에서 화면 상에 지문 인식이 가능한 일부 영역 내의 픽셀들만 구동하는 단계;
상기 특정 구동 모드에서 상기 일부 영역 근방에 위치한 터치 센서, 이미지 센서 및 압력 센서 중 어느 하나를 이용하여 지문 인식 이벤트를 감지하는 단계;
상기 화면의 일부 영역에서 휘도를 높이는 단계; 및
상기 화면의 일부 영역과 대향하는 이미지 센서를 구동하여 상기 이미지 센서로부터 출력되는 이미지의 지문 패턴과 미리 저장한 사용자의 지문 패턴을 비교하여 지문 인증을 수행하는 단계를 포함하는 지문 인식 방법.
Driving only pixels within a certain area of the fingerprint recognition area on the screen in the specific driving mode;
Sensing a fingerprint recognition event using any one of a touch sensor, an image sensor, and a pressure sensor located near the partial region in the specific driving mode;
Increasing brightness in a part of the screen; And
And performing a fingerprint authentication by driving an image sensor facing a part of the screen to compare a fingerprint pattern of an image output from the image sensor with a fingerprint pattern of a user stored in advance.
제 10 항에 있어서,
상기 지문 인식 이벤트가 감지될 때 근접 센서를 이용하여 상기 특정 구동 모드 여부를 확인하는 단계를 더 포함하는 지문 인식 방법.
11. The method of claim 10,
Further comprising checking whether the fingerprint recognition event is detected using the proximity sensor when the fingerprint recognition event is detected.
KR1020170114325A 2017-09-07 2017-09-07 Display device, mobile informaion terminal including the display device and fingerprint recognition method using the display panel KR102517161B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170114325A KR102517161B1 (en) 2017-09-07 2017-09-07 Display device, mobile informaion terminal including the display device and fingerprint recognition method using the display panel

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170114325A KR102517161B1 (en) 2017-09-07 2017-09-07 Display device, mobile informaion terminal including the display device and fingerprint recognition method using the display panel

Publications (2)

Publication Number Publication Date
KR20190027495A true KR20190027495A (en) 2019-03-15
KR102517161B1 KR102517161B1 (en) 2023-04-03

Family

ID=65762584

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170114325A KR102517161B1 (en) 2017-09-07 2017-09-07 Display device, mobile informaion terminal including the display device and fingerprint recognition method using the display panel

Country Status (1)

Country Link
KR (1) KR102517161B1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112016541A (en) * 2019-05-30 2020-12-01 北京小米移动软件有限公司 Electronic equipment and fingerprint identification image acquisition method
WO2020259627A1 (en) * 2019-06-28 2020-12-30 京东方科技集团股份有限公司 Display device
US11138937B2 (en) 2019-07-11 2021-10-05 Samsung Electronics Co., Ltd. Display driving circuit, display device including the same, and method of operating the display driving circuit
CN113767413A (en) * 2019-05-09 2021-12-07 住友化学株式会社 Display device including fingerprint authentication sensor and laminate used therein
EP4350537A4 (en) * 2021-06-30 2024-09-11 Huawei Tech Co Ltd Display method and electronic device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160029697A (en) * 2014-09-04 2016-03-15 크루셜텍 (주) Display apparatus being capable of sensing image
KR20160096390A (en) * 2015-02-05 2016-08-16 삼성전자주식회사 Touch sensor, electronic device therewith and driving method thereof
KR20170098111A (en) * 2016-02-19 2017-08-29 삼성전자주식회사 Method for controlling display using sensor data and electronic device thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160029697A (en) * 2014-09-04 2016-03-15 크루셜텍 (주) Display apparatus being capable of sensing image
KR20160096390A (en) * 2015-02-05 2016-08-16 삼성전자주식회사 Touch sensor, electronic device therewith and driving method thereof
KR20170098111A (en) * 2016-02-19 2017-08-29 삼성전자주식회사 Method for controlling display using sensor data and electronic device thereof

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113767413A (en) * 2019-05-09 2021-12-07 住友化学株式会社 Display device including fingerprint authentication sensor and laminate used therein
CN112016541A (en) * 2019-05-30 2020-12-01 北京小米移动软件有限公司 Electronic equipment and fingerprint identification image acquisition method
WO2020259627A1 (en) * 2019-06-28 2020-12-30 京东方科技集团股份有限公司 Display device
US11543894B2 (en) 2019-06-28 2023-01-03 Beijing Boe Technology Development Co., Ltd. Display apparatus
US11138937B2 (en) 2019-07-11 2021-10-05 Samsung Electronics Co., Ltd. Display driving circuit, display device including the same, and method of operating the display driving circuit
US11594181B2 (en) 2019-07-11 2023-02-28 Samsung Electronics Co., Ltd. Display driving circuit and display device including the same
EP4350537A4 (en) * 2021-06-30 2024-09-11 Huawei Tech Co Ltd Display method and electronic device

Also Published As

Publication number Publication date
KR102517161B1 (en) 2023-04-03

Similar Documents

Publication Publication Date Title
KR102517161B1 (en) Display device, mobile informaion terminal including the display device and fingerprint recognition method using the display panel
US20180349669A1 (en) Operating method of optical fingerprint sensor, operating method of electronic device including the optical fingerprint sensor, and display device including the optical fingerprint sensor
CN108664895B (en) Display device and fingerprint identification method thereof
US8665223B2 (en) Display device and method providing display contact information based on an amount of received light
TWI534683B (en) Touch panel, display device, and electronic device
US9740327B2 (en) Display device with integrated touch screen
US20200004368A1 (en) Touch display panel and touch display device
JP2018206351A (en) Touch display device and method for driving touch display device
US10846500B2 (en) Display device with display panel comprising force sensor and fingerprint sensor and method driving the display device
KR102350727B1 (en) Touch screen display device including fingerprint sensor
US8411059B2 (en) Integrated electromagnetic type input flat panel display apparatus
US11353733B2 (en) Display apparatus including transmissive light source
KR20010039930A (en) Coordinate input apparatus
JP2006517681A (en) Interactive display system
US20130027355A1 (en) Input display device, input device, and control method of input device
US10923026B2 (en) Keyboard backlights via display surfaces
US9904413B2 (en) Optical touch device, and light source assembly and display module thereof
JP4826174B2 (en) Display device
US11836318B1 (en) Display flicker reduction
CN116209304A (en) Display panel and display device including the same
US20210043146A1 (en) Electronic device and display control method therefor
KR101818474B1 (en) Portable image display device available optical sensing and method for driving the same
KR20160055379A (en) Display Device and Driving Method thereof
KR102601644B1 (en) Display device and driving method using the same
US11995267B2 (en) Touchscreen displays

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant