KR20200113638A - Method of managing bio-signal information and electronic device performing the same - Google Patents

Method of managing bio-signal information and electronic device performing the same Download PDF

Info

Publication number
KR20200113638A
KR20200113638A KR1020190034135A KR20190034135A KR20200113638A KR 20200113638 A KR20200113638 A KR 20200113638A KR 1020190034135 A KR1020190034135 A KR 1020190034135A KR 20190034135 A KR20190034135 A KR 20190034135A KR 20200113638 A KR20200113638 A KR 20200113638A
Authority
KR
South Korea
Prior art keywords
unit
data
pressure
sensor unit
sensing
Prior art date
Application number
KR1020190034135A
Other languages
Korean (ko)
Other versions
KR102389902B1 (en
Inventor
김태원
김용환
Original Assignee
(주)파트론
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)파트론 filed Critical (주)파트론
Priority to KR1020190034135A priority Critical patent/KR102389902B1/en
Publication of KR20200113638A publication Critical patent/KR20200113638A/en
Application granted granted Critical
Publication of KR102389902B1 publication Critical patent/KR102389902B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1172Identification of persons based on the shapes or appearances of their bodies or parts thereof using fingerprinting
    • G06K9/00006
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0247Pressure sensors

Abstract

The present invention provides an electronic device. An objective of the present invention is to provide a method which derives accurate biosignal information from an optical fingerprint sensor and a pressure sensor and can manage the biosignal information. To achieve the objective, according to an embodiment of the present invention, the electronic device comprises: an optical fingerprint sensor which includes a light-emitting unit and a light-receiving unit, and senses the reflection of light generated by the light-emitting unit from a living body positioned on a sensing unit by the light-receiving unit to recognize the pattern of a fingerprint; a pressure sensor unit positioned adjacent to the optical fingerprint sensor unit to measure the pressure applied to the sensing unit by the living body; and a control unit to receive a measurement result from the pressure sensor to control the operation of the optical fingerprint sensor unit. The optical fingerprint sensor unit can recognize biodata for obtaining bioinformation as well as the fingerprint pattern. The pressure sensor unit measures the pressure applied to the sensing unit while the optical fingerprint sensor unit recognizes the biodata. The control unit determines whether the measured pressure corresponds to a predetermined pressure range.

Description

생체신호정보 관리 방법 및 이를 수행하는 전자 장치{Method of managing bio-signal information and electronic device performing the same}Method of managing bio-signal information and electronic device performing the same

본 발명은 생체신호정보 관리 방법 및 이를 수행하는 전자 장치에 관한 것으로, 보다 상세하게는 생체신호정보를 관리하는 어플리케이션이 포함된 시스템이 생체신호정보를 관리하는 방법과, 시스템 내 전자 장치에 관한 것이다.The present invention relates to a method for managing biosignal information and an electronic device that performs the same, and more particularly, to a method for a system including an application for managing biosignal information to manage biosignal information, and to an electronic device in the system. .

휴대 전화나 태블릿 등과 같은 휴대용 전자장치를 중심으로 지문센서 및 압력센서를 장착한 전자장치의 종류와 수가 증가하고 있다. 지문센서가 탑재된 전자장치에 관한 배경 내용은 대한민국 공개특허공보 제10-2018-0005588호에 기재되어 있다.The types and numbers of electronic devices equipped with fingerprint sensors and pressure sensors are increasing, centering on portable electronic devices such as mobile phones and tablets. Background information on an electronic device equipped with a fingerprint sensor is described in Korean Laid-Open Patent Publication No. 10-2018-0005588.

한편, 최근의 생체신호와 지문을 동시 수신하여 사용자에 관한 사용자 인증을 수행할 수 있는 휴대용 전자장치가 제공되고 있다.Meanwhile, a portable electronic device capable of performing user authentication on a user by simultaneously receiving a biometric signal and a fingerprint has been provided.

대한민국 공개특허공보 제10-2018-0005588호Republic of Korea Patent Publication No. 10-2018-0005588

"All-organic optoelectronic sensor for pulse oximetry", Nature Communications 5, Article number: 5745, DOI: 10.1038/ncomms6745 (Dec. 10, 2014)"All-organic optoelectronic sensor for pulse oximetry", Nature Communications 5, Article number: 5745, DOI: 10.1038/ncomms6745 (Dec. 10, 2014)

본 발명이 해결하려는 과제는, 광학식 지문센서로부터 일부 생체신호정보에 관한 데이터를 수집하여, 다른 생체신호정보를 도출할 수 있는 생체신호정보 관리 방법을 제공하고자 하는 것이다.It is an object to be solved by the present invention to provide a biosignal information management method capable of deriving other biosignal information by collecting data on some biosignal information from an optical fingerprint sensor.

본 발명이 해결하려는 다른 과제는, 광학식 지문센서와 압력센서로부터 정확한 생체신호정보를 도출하고, 이를 관리할 수 있는 방법을 제공하고자 하는 것이다.Another problem to be solved by the present invention is to provide a method for deriving and managing accurate biosignal information from an optical fingerprint sensor and a pressure sensor.

본 발명의 과제들은 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems of the present invention are not limited to the technical problems mentioned above, and other technical problems that are not mentioned will be clearly understood by those skilled in the art from the following description.

상기 과제를 해결하기 위한 본 발명의 일 실시예에 따른 전자 장치는, 발광부 및 수광부를 포함하고, 상기 발광부에서 발생한 빛이 감지부에 위치한 생체에서 반사된 것을 상기 수광부에서 감지하여 지문의 패턴을 인식하는 광학식 지문센서부, 상기 광학식 지문센서부에 인접하게 위치하여 상기 생체가 상기 감지부에 가하는 압력을 측정하는 압력센서부, 및 상기 압력센서부의 측정 결과를 수신하여 상기 광학식 지문센서부의 동작을 제어하는 제어부를 포함하는 전자 장치에 있어서, 상기 광학식 지문센서부는, 상기 지문의 패턴뿐만 아니라 상기 생체의 생체정보를 얻기 위한 생체 데이터를 인식할 수 있고, 상기 압력센서부는, 상기 광학식 지문센서부가 상기 생체 데이터를 인식하는 동안 상기 감지부에 가해진 압력을 측정하고, 상기 제어부는, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하는지 판단한다.An electronic device according to an embodiment of the present invention for solving the above problem includes a light emitting unit and a light receiving unit, and the light receiving unit detects that the light generated from the light emitting unit is reflected from a living body located in the sensing unit, An optical fingerprint sensor unit that recognizes, a pressure sensor unit positioned adjacent to the optical fingerprint sensor unit to measure the pressure applied by the living body to the sensing unit, and an operation of the optical fingerprint sensor unit by receiving a measurement result of the pressure sensor unit In the electronic device comprising a control unit for controlling, wherein the optical fingerprint sensor unit can recognize not only the pattern of the fingerprint, but also biometric data for obtaining biometric information of the living body, and the pressure sensor unit includes the optical fingerprint sensor unit While recognizing the biometric data, the pressure applied to the sensing unit is measured, and the controller determines whether the measured pressure falls within a predetermined pressure range.

상기 압력센서부는, 타겟 메탈, 상기 타겟 메탈과 대향하는 코일, 및 상기 타겟 메탈과 상기 코일 사이의 거리가 변함에 따라 상기 코일의 인덕턴스 변화량을 감지하는 센싱부재를 포함할 수 있다.The pressure sensor unit may include a target metal, a coil facing the target metal, and a sensing member that detects a change in inductance of the coil as a distance between the target metal and the coil changes.

상기 압력센서부는, 상기 타겟 메탈과 상기 코일 사이에 위치하는 간격재를 더 포함할 수 있다.The pressure sensor unit may further include a spacer positioned between the target metal and the coil.

상기 코일는 상기 광학식 지문센서부를 둘러싸도록 형성될 수 있다.The coil may be formed to surround the optical fingerprint sensor unit.

상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면, 상기 광학식 지문센서부는, 상기 생체 데이터를 다시 인식하기 위한 준비 동작을 수행하도록 할 수 있다.When the controller determines that the measured pressure does not correspond to a predetermined pressure range, the optical fingerprint sensor unit may perform a preparation operation for recognizing the biometric data.

상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면, 상기 제어부는 상기 미리 정해진 압력 범위에 해당하는 압력을 가하기 위한 가이드 메시지 데이터를 생성할 수 있다.When the controller determines that the measured pressure does not correspond to a predetermined pressure range, the controller may generate guide message data for applying a pressure corresponding to the predetermined pressure range.

상기 제어부는, 상기 광학식 지문센서부가 상기 측정된 압력에서 인식한 생체 데이터가 상기 생체정보를 얻기에 적합한지 여부에 따라 상기 압력 범위를 변경할 수 있다.The control unit may change the pressure range according to whether the biometric data recognized by the optical fingerprint sensor unit is suitable for obtaining the biometric information.

상기 과제를 해결하기 위한 본 발명의 다른 실시예에 따른 전자 장치는, 상기 전자 장치에서 생체 인식 어플리케이션이 실행되고, 상기 생체 인식 어플리케이션은, 상기 광학식 지문센서부로부터 인식한 상기 생체 데이터를 수신하는 단계, 상기 생체 데이터 또는 상기 생체 데이터를 가공한 가공 데이터를 분석 서버로 전송하는 단계, 상기 분석 서버로부터 상기 분석 서버가 상기 생체 데이터 또는 상기 가공 데이터에 기반하여 생성한 생체정보를 수신하는 단계, 및 상기 생체정보에 기반한 표시데이터를 표시부로 전송하는 단계를 수행한다.In an electronic device according to another embodiment of the present invention for solving the above problem, a biometric recognition application is executed on the electronic device, and the biometric recognition application receives the biometric data recognized from the optical fingerprint sensor unit. , Transmitting the biometric data or processed data processed by the biometric data to an analysis server, receiving the biometric data or biometric information generated by the analysis server based on the processed data from the analysis server, and the A step of transmitting display data based on the biometric information to the display unit is performed.

상기 어플리케이션은, 상기 광학식 지문센서부의 센싱 조건을 제어할 수 있다.The application may control a sensing condition of the optical fingerprint sensor unit.

상기 센싱 조건은 상기 광학식 지문센서부의 샘플링 주파수, 파장 대역 및 광량 중 적어도 어느 하나일 수 있다.The sensing condition may be at least one of a sampling frequency, a wavelength band, and an amount of light of the optical fingerprint sensor unit.

상기 광학식 지문센서부는 상기 전자 장치의 표시 패널의 하부에 위치하고, 상기 발광부는 상기 표시 패널의 발광부를 겸할 수 있다.The optical fingerprint sensor part is located under the display panel of the electronic device, and the light emitting part may also serve as a light emitting part of the display panel.

기타 실시예의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Details of other embodiments are included in the detailed description and drawings.

본 발명의 실시예들에 의하면, 지문센서로부터 곧바로 수집될 수 없는 생체신호정보를 얻을 수 있고, 이를 관리할 수 있다.According to embodiments of the present invention, biosignal information that cannot be immediately collected from a fingerprint sensor can be obtained and managed.

또한, 압력센서로부터 정확한 생체신호정보를 얻을 수 있고, 이를 관리할 수 있다.In addition, accurate bio-signal information can be obtained from the pressure sensor, and it can be managed.

본 발명의 실시예들에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.Effects according to the embodiments of the present invention are not limited by the contents illustrated above, and more various effects are included in the present specification.

도 1은 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 사시도이다.
도 2는 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 블록도이다.
도 3은 도 1의 Ⅰ?-Ⅰ'선을 따라 자른 스마트폰의 단면을 개략적으로 도시한 단면도이다.
도 4는 본 발명의 몇몇 실시예에 따른 터치 압력 센서의 개념적인 단면도이다.
도 5는 다른 몇몇 실시예에 따른 스마트폰의 터치 압력 센서와 광학식 지문 센서(수광부)를 나타낸 분해 사시도이다.
도 6은 도 5의 Ⅱ?-Ⅱ'선을 따라 터치 압력 센서와 광학식 지문 센서(수광부)를 자른 단면도이다.
도 7은 일 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다.
도 8은 도 7의 생체신호정보 관리 시스템에서, 센싱조건을 제어하는 단계 및 센싱 데이터를 수신하는 단계를 나타낸 블록도이다.
도 9는 도 7의 가공 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다.
도 10는 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 생성하는 단계를 나타낸 블록도이다.
도 11은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 분석하는 단계를 나타낸 블록도이다.
도 12는 도 11의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다.
도 13은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다.
도 14는 도 7의 생체신호정보 관리 시스템에서, 생체신호정보로 변환하는 단계 및 생체신호정보를 제공받는 단계를 나타낸 블록도이다.
도 15는 PPG 및 SDPPG 파형을 나타낸 그래프이다.
도 16은 도 7의 생체신호정보 관리 시스템에서, 생체신호정보를 저장하고 표시하는 단계를 나타낸 블록도이다.
도 17은 도 16의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다.
도 18은 다른 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다.
도 19는 도 18의 센싱 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다.
도 20은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 분석하는 단계를 나타낸 블록도이다.
도 21은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다.
도 22는 도 18의 생체신호정보 관리 시스템에서, 생체신호정보로 가공 및 변환하는 단계를 나타낸 블록도이다.
1 is a perspective view schematically showing a biosignal information management system according to an embodiment.
2 is a block diagram schematically illustrating a biosignal information management system according to an embodiment.
FIG. 3 is a schematic cross-sectional view of a smartphone taken along line I?-I' of FIG. 1.
4 is a conceptual cross-sectional view of a touch pressure sensor according to some embodiments of the present invention.
5 is an exploded perspective view illustrating a touch pressure sensor and an optical fingerprint sensor (a light receiving unit) of a smartphone according to some other exemplary embodiments.
6 is a cross-sectional view of a touch pressure sensor and an optical fingerprint sensor (light receiving unit) taken along line II?-II' of FIG. 5.
7 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to an exemplary embodiment.
FIG. 8 is a block diagram illustrating a step of controlling a sensing condition and a step of receiving sensing data in the biosignal information management system of FIG. 7.
9 is a flow chart showing in more detail the step of analyzing the processed data of FIG. 7.
10 is a block diagram showing a step of generating processed data in the biosignal information management system of FIG. 7.
11 is a block diagram showing a step of analyzing processed data in the biosignal information management system of FIG. 7.
12 is a plan view exemplarily illustrating a state of a display area in the step of FIG. 11.
13 is a block diagram showing in more detail the step of transmitting processed data in the biosignal information management system of FIG. 7.
FIG. 14 is a block diagram illustrating a step of converting into biosignal information and receiving biosignal information in the biosignal information management system of FIG. 7.
15 is a graph showing PPG and SDPPG waveforms.
FIG. 16 is a block diagram showing steps of storing and displaying biosignal information in the biosignal information management system of FIG. 7.
17 is a plan view illustrating a state of a display area in the step of FIG. 16 by way of example.
18 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to another embodiment.
FIG. 19 is a flow chart showing the steps of analyzing the sensing data of FIG. 18 in more detail.
20 is a block diagram illustrating a step of analyzing sensing data in the biosignal information management system of FIG. 18.
21 is a block diagram showing in more detail the step of transmitting sensing data in the biosignal information management system of FIG. 18.
22 is a block diagram showing steps of processing and converting bio-signal information into bio-signal information in the bio-signal information management system of FIG. 18;

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. Advantages and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but will be implemented in various forms different from each other, and only these embodiments make the disclosure of the present invention complete, and common knowledge in the art to which the present invention pertains. It is provided to completely inform the scope of the invention to those who have it, and the invention is only defined by the scope of the claims.

소자(elements) 또는 층이 다른 소자 또는 층의 "위(on)" 또는 "상(on)"으로 지칭되는 것은 다른 소자 또는 층의 바로 위뿐만 아니라 중간에 다른 층 또는 다른 소자를 개재한 경우를 모두 포함한다. 반면, 소자가 "직접 위(directly on)" 또는 "바로 위"로 지칭되는 것은 중간에 다른 소자 또는 층을 개재하지 않은 것을 나타낸다.When an element or layer is referred to as “on” or “on” of another element or layer, it is possible to interpose another layer or other element in the middle as well as directly above the other element or layer. All inclusive. On the other hand, when a device is referred to as "directly on" or "directly on", it indicates that no other device or layer is interposed therebetween.

비록 제1, 제2 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한 "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는다.Although the first, second, and the like are used to describe various components, it goes without saying that these components are not limited by these terms. These terms are only used to distinguish one component from another component. Therefore, it goes without saying that the first component mentioned below may be the second component within the technical idea of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In addition, terms such as "comprises" or "have" are intended to designate the presence of features, numbers, steps, actions, components, parts, or combinations thereof described in the specification, but one or more other features or numbers, The possibility of the presence or addition of steps, actions, components, parts, or combinations thereof is not precluded.

이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명한다. 도면상의 동일한 구성 요소에 대해서는 동일하거나 유사한 참조 부호를 사용한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The same or similar reference numerals are used for the same components in the drawings.

도 1은 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 사시도이다. 도 2는 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 블록도이다.1 is a perspective view schematically showing a biosignal information management system according to an embodiment. 2 is a block diagram schematically illustrating a biosignal information management system according to an embodiment.

도 1을 참조하면, 생체신호정보 관리 시스템(1)은 전자장치 및 서버(2000)를 포함한다. 생체신호정보 관리 시스템(1)은 전자장치에 사용자로부터 입력된 정보를 서버(2000)를 통해 생체신호정보를 수집하고 관리한다.Referring to FIG. 1, the biosignal information management system 1 includes an electronic device and a server 2000. The biosignal information management system 1 collects and manages biosignal information through the server 2000 for information input from a user to an electronic device.

전자장치와 서버(2000)는 일체로 구성되거나 독립적으로 구성될 수 있다. 일 실시예로 전자장치와 서버(2000)는 네트워크를 통해 서로 연결될 수 있다. 여기서 네트워크는 유선, 무선, 유무선 네트워크 중 적어도 하나를 포함할 수 있다. The electronic device and the server 2000 may be configured integrally or may be independently configured. In an embodiment, the electronic device and the server 2000 may be connected to each other through a network. Here, the network may include at least one of wired, wireless, and wired/wireless networks.

이하에서는 전자장치로서 유기발광 표시패널을 포함하는 스마트폰(1000)을 예로 들어 설명하기로 한다. 다만, 이에 제한되지 않고 발명의 사상을 변경하지 않는 한 표시패널을 포함하는 전자장치로서 노트북, 모니터, TV, 휴대폰, MP3 플레이어, 의료측정기기 및 웨어러블 디바이스와 HMD를 포함하는 각종 스마트 기기 등의 형태로 구현될 수 있다. 또한, 표시패널(210)은 유기발광 표시패널에 한정하지 않고, 액정 표시패널, 전계 방출 표시패널, 전기영동 표시패널, 양자점 발광 표시패널 또는 마이크로 LED 표시패널과 같은 다른 표시패널이 적용될 수 있다.Hereinafter, a smartphone 1000 including an organic light emitting display panel as an electronic device will be described as an example. However, the form of electronic devices including a display panel, such as notebooks, monitors, TVs, mobile phones, MP3 players, medical measuring devices, wearable devices, and various smart devices including HMDs, are not limited thereto, and the spirit of the invention is not changed. Can be implemented as In addition, the display panel 210 is not limited to an organic light-emitting display panel, and other display panels such as a liquid crystal display panel, a field emission display panel, an electrophoretic display panel, a quantum dot emission display panel, or a micro LED display panel may be applied.

스마트폰(1000)은 표시 영역(DA)과 비표시 영역(NDA)을 포함한다.The smartphone 1000 includes a display area DA and a non-display area NDA.

표시 영역(DA)은 화상을 표시하는 영역으로 정의된다. 또한, 표시 영역(DA)은 외부 환경을 검출하기 위한 검출 부재로도 사용될 수 있다. 예를 들어, 표시 영역(DA)의 적어도 일부 영역과 중첩하여 위치하는 지문 센싱 영역(SA)을 포함할 수 있다. 즉, 표시 영역(DA)은 영상을 표시하거나, 또는 지문 센싱 영역(SA)을 통해 사용자의 지문을 인식하는 영역으로 사용될 수 있다. The display area DA is defined as an area for displaying an image. Also, the display area DA may be used as a detection member for detecting an external environment. For example, a fingerprint sensing area SA positioned to overlap at least a partial area of the display area DA may be included. That is, the display area DA may be used as an area for displaying an image or for recognizing a user's fingerprint through the fingerprint sensing area SA.

비표시 영역(NDA)은 표시 영역(DA)의 외측에 배치되되, 화상이 표시되지 않는 영역으로 정의된다. 일 실시예로, 비표시 영역(NDA)에는 스피커 모듈, 카메라 모듈 및 센서 모듈 등이 배치될 수 있다. 여기서, 센서 모듈은 일 실시예로, 조도 센서, 근접 센서, 적외선 센서, 초음파 센서 중 적어도 하나를 포함할 수 있다.The non-display area NDA is disposed outside the display area DA, but is defined as an area in which an image is not displayed. In an embodiment, a speaker module, a camera module, and a sensor module may be disposed in the non-display area NDA. Here, as an example, the sensor module may include at least one of an illuminance sensor, a proximity sensor, an infrared sensor, and an ultrasonic sensor.

지문 센싱 영역(SA)은 지문 센서(222, 도 3 참조)와 중첩하는 영역으로 정의된다. 본 명세서에서, "제1 구성 및 제2 구성이 중첩된다"라고 표현하면, 제1 구성과 제2 구성이 스마트폰(1000)의 두께 방향으로 중첩되는 것을 의미한다. 도면상, 지문 센싱 영역(SA)은 표시 영역(DA)의 적어도 일부와 겹치도록 위치하는 것으로 도시하였으나, 이에 제한되는 것은 아니다. 예를 들어, 다른 실시예에서, 지문 센싱 영역(SA)은 비표시 영역(NDA)과 겹치도록 위치할 수도 있다.The fingerprint sensing area SA is defined as an area overlapping the fingerprint sensor 222 (refer to FIG. 3). In this specification, when expressed as "the first configuration and the second configuration overlap", it means that the first configuration and the second configuration are overlapped in the thickness direction of the smartphone 1000. In the drawing, the fingerprint sensing area SA is shown to be positioned to overlap at least a portion of the display area DA, but is not limited thereto. For example, in another embodiment, the fingerprint sensing area SA may be positioned to overlap the non-display area NDA.

도 2를 참조하면, 스마트폰(1000)은 어플리케이션(10), 표시부(20), 지문센서부(50), 통신부(30), 및 저장부(40)를 포함한다.Referring to FIG. 2, the smartphone 1000 includes an application 10, a display unit 20, a fingerprint sensor unit 50, a communication unit 30, and a storage unit 40.

어플리케이션(10)은 표시부(20), 지문센서부(50), 통신부(30) 및 저장부(40)를 제어하는 제어부(미도시)를 포함할 수 있다. 상기 제어부는 표시부(20), 지문센서부(50), 통신부(30) 및 저장부(40)를 제어를 제어하기 위한 명령어들을 포함할 수 있다.The application 10 may include a control unit (not shown) that controls the display unit 20, the fingerprint sensor unit 50, the communication unit 30, and the storage unit 40. The control unit may include commands for controlling the display unit 20, the fingerprint sensor unit 50, the communication unit 30, and the storage unit 40.

표시부(20)는 어플리케이션(10)이 제공하는 표시데이터 신호, 주사 신호 및 전원 신호에 의해 작동할 수 있다. 표시부(20)는 어플리케이션(10)이 제공하는 결과물에 기반한 표시데이터 신호를 사용자가 시각적으로 인식할 수 있도록 유기발광 표시장치의 표시영역에 표시하는 기능을 수행할 수 있다. The display unit 20 may be operated by a display data signal, a scan signal, and a power signal provided by the application 10. The display unit 20 may perform a function of displaying a display data signal based on a result provided by the application 10 on a display area of the organic light emitting display device so that a user can visually recognize it.

지문센서부(50)는 사용자의 지문의 형상을 인식하고, 이를 디지털 신호로 변환한 센싱 데이터를 어플리케이션(10)에 제공할 수 있다. 뿐만 아니라, 지문센서부(50)는 생체의 생체정보를 얻기위한 생체 관련 원시 데이터를 인식할 수 있다. 지문센서부(50)는 발광부(발광 유닛(211), 도 3 참조) 및 수광부(광학식 지문센서(222), 도 3 참조)를 포함한다. 일 실시예로, 지문센서(222)는 광학식 지문센서(optical fingerprint sensor)일 수 있다. 광학식 지문센서에 관한 설명은 대한민국 공개특허공보 제10-2018-0005588호가 참조될 수 있다.The fingerprint sensor unit 50 may recognize the shape of a user's fingerprint and provide sensing data converted into a digital signal to the application 10. In addition, the fingerprint sensor unit 50 may recognize raw biometric data for obtaining biometric information of a living body. The fingerprint sensor unit 50 includes a light emitting unit (light emitting unit 211, see FIG. 3) and a light receiving unit (optical fingerprint sensor 222, see FIG. 3). In one embodiment, the fingerprint sensor 222 may be an optical fingerprint sensor. For a description of the optical fingerprint sensor, Korean Laid-Open Patent Publication No. 10-2018-0005588 may be referred to.

압력센서부(60)는 외부로부터 가해지는 압력을 감지할 수 있다. 일 실시예로, 압력센서부(60)는 복수의 감지 전극을 포함할 수 있으며, 상기 복수의 감지 전극을 통해 획득되는 감지 신호를 기초로 외부의 터치 압력 크기를 산출할 수 있다.The pressure sensor unit 60 may sense a pressure applied from the outside. In an embodiment, the pressure sensor unit 60 may include a plurality of sensing electrodes, and an external touch pressure level may be calculated based on sensing signals acquired through the plurality of sensing electrodes.

일 실시예로, 압력센서부(60)는 지문센서부가 상기 생체 데이터를 인식하는 동안 상기 감지부에 가해진 압력을 측정해 이를 어플리케이션(10)에 제공할 수 있다. 이를 바탕으로 어플리케이션(10)은 측정된 압력이 미리 정해진 압력 범위에 해당하는지 판단할 수 있다.In one embodiment, the pressure sensor unit 60 may measure the pressure applied to the sensing unit while the fingerprint sensor unit recognizes the biometric data and provide the measured pressure to the application 10. Based on this, the application 10 may determine whether the measured pressure falls within a predetermined pressure range.

통신부(30)는 어플리케이션(10)의 제어에 따라 어플리케이션(10)이 제공하는 정보를 서버(2000)로 전송하고, 서버(2000)가 전송한 데이터를 수신하여 어플리케이션(10)에 전송할 수 있다. 통신부(30)는 LAN, WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), Wi-Fi(Wireless Fidelity) Direct 과 같은 통신 모듈 및/또는 블루투스, NFC나, RFID와 같은 근거리 통신 모듈을 포함할 수 있다. 일 실시예에서, 통신부(30)는 상술한 통신 모듈 중 적어도 하나를 통해 네트워크에 연결되고, 궁극적으로 서버(2000)와 통신할 수 있다.The communication unit 30 may transmit information provided by the application 10 to the server 2000 under the control of the application 10, receive data transmitted by the server 2000, and transmit the data to the application 10. The communication unit 30 includes a communication module such as LAN, Wireless LAN (WLAN), Wireless-Fidelity (Wi-Fi), and Wireless Fidelity (Wi-Fi) Direct and/or a short-range communication module such as Bluetooth, NFC or RFID. can do. In one embodiment, the communication unit 30 is connected to the network through at least one of the above-described communication modules, and may ultimately communicate with the server 2000.

저장부(40)는 어플리케이션(10)의 제어에 따라 데이터를 저장한다. 저장부(40)는 저장 장치로서, 하드 디스크 드라이브(HDD, Hard Disk Drive)와 같이 자기 디스크에 데이터를 저장하는 장치, 솔리드 스테이트 드라이브(SSD, Solid State Drive), 메모리 카드 등과 같이 반도체 메모리, 특히 불휘발성 메모리에 데이터를 저장하는 장치를 포함할 수 있다.The storage unit 40 stores data under the control of the application 10. The storage unit 40 is a storage device that stores data on a magnetic disk such as a hard disk drive (HDD), a solid state drive (SSD), a semiconductor memory such as a memory card, etc. A device for storing data in a nonvolatile memory may be included.

도시하진 않았지만, 스마트폰(1000)은 프로세서 및 전원부 등을 더 포함할 수 있고, 이들은 어플리케이션(10)에 의해 제어될 수 있다.Although not shown, the smartphone 1000 may further include a processor and a power supply unit, and these may be controlled by the application 10.

서버(2000)는 스마트폰(1000)이 제공하는 데이터를 저장하고 분석한다. 일 실시예로, 서버(2000)는 생체신호정보를 분석하는 분석 서버(2000)일 수 있다. 명확하게 도시하진 않았지만, 서버(2000)는 스마트폰(1000)과 별도로 통신부와 저장부를 포함할 수 있다.The server 2000 stores and analyzes data provided by the smartphone 1000. In an embodiment, the server 2000 may be an analysis server 2000 that analyzes biosignal information. Although not clearly shown, the server 2000 may include a communication unit and a storage unit separately from the smartphone 1000.

일 실시예로, 서버(2000)는 스마트폰(1000)이 제공하는 데이터를 가지고 적어도 하나의 생체신호정보를 도출할 수 있다. 또한, 서버(2000)는 도출된 생체신호정보를 서버(2000)의 저장부에 저장할 수 있고, 서버(2000)의 통신부와 네트워크를 통해 생세신호정보를 스마트폰(1000)에 제공할 수 있다. 서버(2000)는 스마트폰(1000)과 별도의 공간에서 실시될 수 있다. 예를 들어, 서버(2000)는 어플리케이션(10) 서비스를 제공하는 제공자의 의도에 따른 장소에서 실시될 수 있다. 몇몇 실시예에서, 스마트폰(1000)의 사용자와 서버(2000)를 제공하는 자는 서로 다를 수 있지만, 이에 제한되는 것은 아니다.In an embodiment, the server 2000 may derive at least one biosignal information from data provided by the smartphone 1000. In addition, the server 2000 may store the derived bio-signal information in the storage unit of the server 2000 and may provide the living signal information to the smart phone 1000 through a communication unit of the server 2000 and a network. The server 2000 may be implemented in a space separate from the smartphone 1000. For example, the server 2000 may be implemented in a place according to the intention of a provider providing the application 10 service. In some embodiments, a user of the smartphone 1000 and a person providing the server 2000 may be different from each other, but are not limited thereto.

설명의 편의상, 도면에서 서버(2000)를 하나의 서버(2000) 형태로 이루어지는 것으로 도시하였으나, 이에 의해 본 발명이 한정되는 것은 아니며, 서버(2000)는 각 두개 이상의 서버(2000) 군 형태로 실시되는 것이 가능하며, 상기 유추 가능한 모든 실시 방법을 포함하여 이루어질 수 있다. 또한, 서버(2000)는 별도의 중계 서버(2000)를 통해 스마트폰(1000)과 통신할 수도 있다.For convenience of explanation, the server 2000 is illustrated as being configured in the form of one server 2000 in the drawings, but the present invention is not limited thereto, and the server 2000 is implemented in the form of a group of two or more servers 2000 respectively. It is possible, and can be made including all possible implementation methods described above. In addition, the server 2000 may communicate with the smartphone 1000 through a separate relay server 2000.

다음으로, 도 3을 결부하여, 스마트폰(1000)의 구성 및 배치관계에 관하여 설명한다.Next, referring to FIG. 3, a configuration and arrangement relationship of the smartphone 1000 will be described.

도 3은 도 1의 Ⅰ?-Ⅰ'선을 따라 자른 스마트폰의 단면을 개략적으로 도시한 단면도이다.FIG. 3 is a schematic cross-sectional view of a smartphone taken along line I?-I' of FIG. 1.

도 3을 참조하면, 스마트폰(1000)은 발광 유닛(211), 터치 감지 유닛(212), 커버 글래스(213), 터치 압력 센서(221) 및 광학식 지문센서(222)를 포함한다. Referring to FIG. 3, the smartphone 1000 includes a light emitting unit 211, a touch sensing unit 212, a cover glass 213, a touch pressure sensor 221, and an optical fingerprint sensor 222.

발광 유닛(211), 터치 감지 유닛(212), 커버 글래스(213) 및 터치 압력 센서(221) 중 적어도 일부는 각각 다른 구성과 연속공정을 통해 형성되거나, 다른 구성과 접착부재를 통해 결합된 구성일 수 있다. 예를 들어, 발광 유닛(211), 터치 감지 유닛(212), 커버 글래스(213) 및 터치 압력 센서(221) 중 다른 구성과 접착부재를 통해 결합된 구성은 베이스면을 제공하는 베이스층, 예컨대 합성수지 필름, 복합재료 필름, 유리 기판 등을 포함하지만, 다른 구성과 연속공정을 통해 형성된 구성은 상기 베이스층이 생략될 수 있다.At least some of the light emitting unit 211, the touch sensing unit 212, the cover glass 213, and the touch pressure sensor 221 are formed through different configurations and continuous processes, or are combined with other configurations and an adhesive member. Can be For example, the configuration of the light emitting unit 211, the touch sensing unit 212, the cover glass 213, and the touch pressure sensor 221 combined through an adhesive member is a base layer that provides a base surface, for example It includes a synthetic resin film, a composite material film, a glass substrate, and the like, but the base layer may be omitted for other configurations and configurations formed through a continuous process.

발광 유닛(211)은 명확히 도시하진 않았지만, 투명 베이스 기판, TFT 회로층 및 발광 소자층이 차례로 적층된 구조일 수 있다.The light-emitting unit 211 is not clearly illustrated, but may have a structure in which a transparent base substrate, a TFT circuit layer, and a light-emitting element layer are sequentially stacked.

상기 발광 소자층은 복수의 발광 소자를 포함한다. 일 실시예에서, 발광 소자는 유기발광 다이오드일 수 있다. 예를 들어, 복수의 발광 소자는 적색 광을 발광하는 적색의 유기발광 다이오드, 녹색 광을 발광하는 녹색의 유기발광 다이오드 및 청색광을 발광하는 청색의 유기발광 다이오드를 포함할 수 있다. 이러한 발광 소자는 후술할 지문센서부의 발광부를 겸하는 것일 수 있다.The light emitting device layer includes a plurality of light emitting devices. In one embodiment, the light emitting device may be an organic light emitting diode. For example, the plurality of light emitting devices may include a red organic light emitting diode emitting red light, a green organic light emitting diode emitting green light, and a blue organic light emitting diode emitting blue light. This light-emitting device may also serve as a light-emitting part of the fingerprint sensor unit to be described later.

발광 유닛(211)의 일면 상에 터치 감지 유닛(212)이 배치된다. 터치 감지 유닛(212)은 복수의 감지전극을 포함한다. 감지전극은 몰리브덴(Mo), ITO(indium tin oxide), IZO(indium zinc oxide), ZnO(zinc oxide), ITZO(indium tin zinc oxide) 등과 같은 투명한 도전성 산화물을 포함할 수 있다. 터치 감지 유닛(212)은 셀프 캡(self-cap) 또는 뮤추얼 캡(mutual-cap)방식으로 터치 인식을 감지할 수 있다.The touch sensing unit 212 is disposed on one surface of the light emitting unit 211. The touch sensing unit 212 includes a plurality of sensing electrodes. The sensing electrode may include a transparent conductive oxide such as molybdenum (Mo), indium tin oxide (ITO), indium zinc oxide (IZO), zinc oxide (ZnO), and indium tin zinc oxide (ITZO). The touch sensing unit 212 may detect touch recognition in a self-cap or a mutual-cap method.

터치 감지 유닛(212) 상에 커버 글래스(213)가 배치된다. 몇몇 실시예에서, 스마트폰(1000)은 터치 감지 유닛(212)과 커버 글래스(213) 사이에 개재된 편광자 또는 컬러필터를 더 포함할 수 있다.A cover glass 213 is disposed on the touch sensing unit 212. In some embodiments, the smartphone 1000 may further include a polarizer or a color filter interposed between the touch sensing unit 212 and the cover glass 213.

커버 글래스(213)는 외부의 스크래치 등으로부터 발광 유닛(211)의 발광 소자층이나 TFT 회로층 및 터치 감지 유닛(212)을 보호할 수 있다. 사용자는 커버 글래스(213)에 손가락(3000) 등을 터치하여 스마트폰(1000)에 명령을 입력할 수 있다.The cover glass 213 may protect the light emitting element layer or the TFT circuit layer and the touch sensing unit 212 of the light emitting unit 211 from external scratches. A user may input a command to the smartphone 1000 by touching a finger 3000 or the like on the cover glass 213.

일 실시예로, 발광 유닛(211), 터치 감지 유닛(212) 및 커버 글래스(213)는 스마트폰(1000)의 유기발광 표시패널을 구성할 수 있다.In one embodiment, the light emitting unit 211, the touch sensing unit 212, and the cover glass 213 may constitute an organic light emitting display panel of the smartphone 1000.

발광 유닛(211)의 하부에 광학식 지문센서(222)가 배치될 수 있다.An optical fingerprint sensor 222 may be disposed under the light emitting unit 211.

광학식 지문센서(222)는 지문센서부(50)의 일 구성요소에 해당한다. 광학식 지문센서(222)는 표시패널(210)의 하부에 위치할 수 있다. The optical fingerprint sensor 222 corresponds to a component of the fingerprint sensor unit 50. The optical fingerprint sensor 222 may be located under the display panel 210.

일 실시예로, 광학식 지문센서(222)는 발광부(예를 들어, 발광 유닛(211)의 유기발광 다이오드)에서 발광되어 생체에서 반사된 광을 센싱하는 수광부일 수 있다. 예를 들어, 광학식 지문센서(222)는 손가락(3000) 지문의 융선과 융선 사이의 골에 의해 반사된 광을 센싱할 수 있다. 광학식 지문센서(222)는 광 감지 엘리먼트들를 통해 센싱함으로써 지문을 인식할 수 있는 지문 데이터를 제공할 수 있다.In one embodiment, the optical fingerprint sensor 222 may be a light receiving unit that is emitted from a light emitting unit (eg, an organic light emitting diode of the light emitting unit 211) and senses light reflected from a living body. For example, the optical fingerprint sensor 222 may sense light reflected by a ridge of the finger 3000 and a valley between the ridges. The optical fingerprint sensor 222 may provide fingerprint data capable of recognizing a fingerprint by sensing through light sensing elements.

명확히 도시하진 않았지만, 광학식 지문센서(222)는 복수의 광-차단 구조물들 및 복수의 광 감지 엘리먼트들을 포함한다. Although not clearly shown, the optical fingerprint sensor 222 includes a plurality of light-blocking structures and a plurality of light sensing elements.

광학식 지문센서(222)는 반도체 칩 또는 반도체 패키지로 구현되어 투명 기판에 부착될 수 있다. 일 실시예로, 광 감지 엘리먼트는 다수의 광전 변환 소자(예컨대, 포토 다이오드, 포토트랜지스터, 포토 게이트 및 핀드 포토 다이오드 등)들이 형성된 반도체 층(Layer) 또는 반도체 칩으로 구현될 수 있다. 일 실시예에 따라, 광 감지 엘리먼트는 CIS(CMOS Image Sensor) 또는 CCD(Charge Coupled Device)와 같은 이미지 센서가 구현된 반도체 레이어일 수 있다.The optical fingerprint sensor 222 may be implemented as a semiconductor chip or a semiconductor package and attached to a transparent substrate. In one embodiment, the photo-sensing element may be implemented as a semiconductor layer or a semiconductor chip in which a plurality of photoelectric conversion elements (eg, photodiode, phototransistor, photogate, pinned photodiode, etc.) are formed. According to an embodiment, the photo-sensing element may be a semiconductor layer in which an image sensor such as a CMOS image sensor (CIS) or a charge coupled device (CCD) is implemented.

한편, 광학식 지문센서(222)는 지문을 인식할 수 있는 데이터를 센싱할 수 있을 뿐만 아니라, 생체정보가 도출될 수 있는 데이터를 센싱할 수 있다. 지문을 인식할 수 있는 데이터와 생체정보가 도출될 수 있는 데이터는 광학식 지문센서(222)가 센싱하는 지문센싱 데이터에 포함될 수 있다. 예를 들어, 지문센싱 데이터는 광용적맥파(Photoplethysmography, 이하 PPG) 파형뿐만 아니라 지문형태 등이 도출될 수 있는 다양한 원시 데이터(RAW DATA)를 포함할 수 있다.Meanwhile, the optical fingerprint sensor 222 may sense data capable of recognizing a fingerprint as well as sensing data from which biometric information can be derived. Data capable of recognizing a fingerprint and data from which biometric information can be derived may be included in the fingerprint sensing data sensed by the optical fingerprint sensor 222. For example, the fingerprint sensing data may include not only a photoplethysmography (PPG) waveform, but also various raw data (RAW DATA) from which a fingerprint shape can be derived.

특히, 지문센싱 데이터는 유기발광 다이오드로부터 출사하는 적색 광, 녹색 광 또는 청색 광이 손가락의 혈관에 반사되는 빛을 광학식 지문센서(222)가 센싱하여 얻을 수 있다. 예를 들어, PPG데이터는 사용자의 심장박동 시 혈류가 증가하면 유기발광 다이오드로부터 출사된 녹색 광이 손가락의 혈관으로부터 반사되는 빛의 양이 줄어드는 점을 이용해서 측정할 수 있고, 광학식 지문센서(222)는 이와 관련된 지문센싱 데이터를 얻을 수 있다.In particular, the fingerprint sensing data may be obtained by sensing the light reflected from the red light, green light, or blue light emitted from the organic light-emitting diode to the blood vessel of the finger, by the optical fingerprint sensor 222. For example, PPG data can be measured by using the point that when blood flow increases when the user's heartbeat increases, the amount of light reflected from the blood vessels of the finger of green light emitted from the organic light-emitting diode decreases, and the optical fingerprint sensor 222 ) Can obtain fingerprint sensing data related to this.

발광 유닛(211) 및 광학식 지문센서(222)의 하부에 터치 압력 센서(221)가 배치될 수 있다. 터치 압력 센서(221)는 외부로부터 가해지는 압력을 감지할 수 있다. 터치 압력 센서(221)는 압력센서부(60)의 일 구성요소에 해당한다. 터치 압력 센서(221)는 외부로부터 가해지는 압력의 크기를 산출하기위한 압력센싱 데이터를 센싱할 수 있다. 압력센싱 데이터는 압력의 크기가 산출되도록 하는 다양한 원시 데이터(RAW DATA)를 포함할 수 있다.The touch pressure sensor 221 may be disposed under the light emitting unit 211 and the optical fingerprint sensor 222. The touch pressure sensor 221 may sense a pressure applied from the outside. The touch pressure sensor 221 corresponds to a component of the pressure sensor unit 60. The touch pressure sensor 221 may sense pressure sensing data for calculating the amount of pressure applied from the outside. The pressure sensing data may include various raw data for calculating the size of the pressure.

터치 압력 센서(221)는 다양한 방식으로 압력을 측정할 수 있다. 예를 들어, 터치 압력 센서(221)는 두 전극 사이의 커패시턴스의 변화량을 감지하여 압력을 측정할 수 있다. 또한, 터치 압력 센서(221)는 타겟 전극와 코일 사이의 인덕턴스 변화량을 감지하여 압력을 측정할 수 있다.The touch pressure sensor 221 may measure pressure in various ways. For example, the touch pressure sensor 221 may measure pressure by detecting a change in capacitance between two electrodes. In addition, the touch pressure sensor 221 may measure pressure by sensing a change in inductance between the target electrode and the coil.

압력을 감지할 수 있는 압력 감지 영역은 지문 감지 영역(SA)과 동일한 영역에 위치할 수 있다. 다만, 이에 제한되는 것은 아니며, 다른 실시예에서, 상기 압력 감지 영역은 표시 영역(DA)과 서로 중첩하며, 스마트폰(1000)의 표시 영역(DA)과 동일한 영역에 위치할 수도 있다.The pressure sensing region capable of sensing pressure may be located in the same region as the fingerprint sensing region SA. However, the present invention is not limited thereto, and in another embodiment, the pressure sensing area may overlap the display area DA and may be located in the same area as the display area DA of the smartphone 1000.

다음으로, 도 4 내지 도 6을 결부하여 터치 압력 센서로서 적용 가능한 실시예들에 대해 설명한다.Next, embodiments applicable as a touch pressure sensor will be described with reference to FIGS. 4 to 6.

도 4는 본 발명의 몇몇 실시예에 따른 터치 압력 센서의 개념적인 단면도이다. 도 4를 참조하여, 본 발명의 터치 압력 센서에 대해 대략적으로 설명하도록 한다.4 is a conceptual cross-sectional view of a touch pressure sensor according to some embodiments of the present invention. With reference to FIG. 4, the touch pressure sensor of the present invention will be described in outline.

도 4를 참조하면, 터치 압력 센서(221)는 맨 하부에 위치하는 하부막(111), 하부막(111) 위에 위치하고 코일(1122)이 위치하는 코일층(112), 코일층(112) 위에 위치하는 타겟 메탈(113), 그리고 코일층(112)과 타겟 메탈(113) 사이에 위치하는 간격재(114)를 구비한다.Referring to FIG. 4, the touch pressure sensor 221 is positioned on the lower layer 111 and the lower layer 111 and on the coil layer 112 and the coil layer 112 on which the coil 1122 is positioned. A target metal 113 is disposed, and a spacer 114 disposed between the coil layer 112 and the target metal 113 is provided.

하부막(111)과 타겟 메탈(113)은 각각 판 형태로 이루어져 있고, 코일층(112)을 사이에 두고 서로 반대편에서 대응되게 위치하고 있다.The lower layer 111 and the target metal 113 are each formed in a plate shape, and are positioned to correspond to each other from opposite sides with the coil layer 112 interposed therebetween.

이때, 하부막(111)은 전도성이 높은 물질이나 전도성이 낮고 유전율 이 높은 물질로 이루어져 있다.At this time, the lower layer 111 is made of a material having high conductivity or a material having low conductivity and high dielectric constant.

이때, 전도성이 높은 물질은 알루미늄(Al)이나 구리(Cu)와 같은 금속일 수 있다. 또한, 전도성이 낮고 유전율이 높은 물질은 폴리이미드(polyimid), PET(polyethylene terephthalate) 또는 EMI(Electro Magnetic Interference) 차폐를 위해 사용되는 물질일 수 있다. In this case, the material having high conductivity may be a metal such as aluminum (Al) or copper (Cu). In addition, a material having low conductivity and high dielectric constant may be a material used for shielding polyimide, polyethylene terephthalate (PET), or electromagnetic interference (EMI).

경우에 따라, 하부막(111)은 복수의 슬릿 등이 형성되어 이격된 형태로 형성되어 와전류의 발생이 억제될 수 있다. 이러한 하부막(111)은 필요에 따라 생략될 수 있다.In some cases, the lower layer 111 may be formed in a form spaced apart by forming a plurality of slits, so that the generation of eddy currents may be suppressed. The lower layer 111 may be omitted if necessary.

또한, 타겟 메탈(113)은 알루미늄(Al)이나 구리(Cu)와 같은 금속으로 이루어지는 도전막일 수 있다.In addition, the target metal 113 may be a conductive film made of a metal such as aluminum (Al) or copper (Cu).

코일층(112)에 위치한 코일(1122)로 교류 전류가 인가되어 발생하는 자기장에 따라 하부막(111)과 타겟 메탈(113)에는 와전류인 유도 전류가 발생한다. 그러나 상술한 것과 같이, 하부막(111)에 발생하는 와전류는 최대한 억제될 수 있다.An induced current, which is an eddy current, is generated in the lower layer 111 and the target metal 113 according to a magnetic field generated by applying an alternating current to the coil 1122 located on the coil layer 112. However, as described above, the eddy current generated in the lower layer 111 can be suppressed as much as possible.

따라서, 본 예의 터치 압력 센서(221)는 이러한 유도 전류의 세기 변화를 이용한 것으로서, 인덕턴스 포스 센서(inductive force sensor)의 동작 개념을 사용할 수 있다.Accordingly, the touch pressure sensor 221 of the present example uses the change in the intensity of the induced current, and can use the concept of operation of an inductive force sensor.

타겟 메탈(113)은 간격재(114)에 의해 간격재(114)의 두께만큼 하부에 위치한 코일층(112)의 해당 코일(1122)과 이격되어 있다. 간격재(114) 역시 자신의 하부면과 상부면에 도포된 접착체 등을 통해 이들과 각각 접하는 코일층(112) 및 타겟 메탈(113)의 해당 부분에 안정적으로 위치할 수 있다.The target metal 113 is spaced apart from the corresponding coil 1122 of the coil layer 112 located below the thickness of the spacer 114 by the spacer 114. The spacer 114 may also be stably positioned on a corresponding portion of the coil layer 112 and the target metal 113 in contact with them through an adhesive applied to the lower and upper surfaces thereof.

코일층(112)의 상부에 위치하는 타겟 메탈(113)은 코일(1122)과 대향하는 타겟 메탈을 포함할 수 있다. 타겟 메탈은 금속 물질뿐만 아니라 ITO와 같은 도전성 물질로도 이루어질 수 있다. 타겟 메탈(113)은 도 6과 같이, 하부에 위치하고 있는 코일층(112) 전체를 덮고 있는 판 형태로 이루어질 수 있다.The target metal 113 positioned on the coil layer 112 may include a target metal facing the coil 1122. The target metal may be made of a metal material as well as a conductive material such as ITO. The target metal 113 may be formed in the form of a plate covering the entire coil layer 112 positioned below, as shown in FIG. 6.

이러한 타겟 메탈(113)은 상부에 위치하는 유기발광 표시패널과 터치 압력 센서(221)를 구분하며, 유기발광 표시패널의 터치 동작에 따라 인가되는 물리적인 힘에 비례하게 휘어진다. 따라서, 터치 지점에서 타겟 메탈(113)과 코일층(112) 간의 이격 거리가 감소하여 코일(1122)의 인덕턴스가 변한다. The target metal 113 separates the organic light emitting display panel and the touch pressure sensor 221 positioned thereon, and is bent in proportion to a physical force applied according to a touch operation of the organic light emitting display panel. Accordingly, the distance between the target metal 113 and the coil layer 112 at the touch point decreases, so that the inductance of the coil 1122 changes.

따라서, 본 예의 터치 압력 센서(221)는 유기발광 표시패널로 인가되는 물리적인 힘과 비례하여 변하는 인덕턴스의 크기를 감지해 Z축 방향으로의 터치 정도를 판정한다.Accordingly, the touch pressure sensor 221 of the present example detects the magnitude of the inductance that changes in proportion to the physical force applied to the organic light emitting display panel and determines the degree of touch in the Z-axis direction.

하부막(111)과 타겟 메탈(113) 사이에 위치하는 코일층(112)은 기판(1121)과 기판(1121)의 상부면과 하부면에 위치하는 코일(1122)을 구비한다.The coil layer 112 positioned between the lower layer 111 and the target metal 113 includes a substrate 1121 and a coil 1122 positioned on upper and lower surfaces of the substrate 1121.

기판(1121)의 상부면과 하부면에 위치하고 있는 코일(1122)은 사각형과 같은 다각형 형태로 배치되어 있고, 외부로부터 교류 전류를 인가받는다.The coils 1122 located on the upper and lower surfaces of the substrate 1121 are arranged in a polygonal shape such as a square, and receive an AC current from the outside.

코일(1122)은 서로 연결되어 있는 입력단과 출력단을 갖고 있고 금속과 같은 도전 물질로 이루어져 있는 하나의 긴 선(line)이다.The coil 1122 has an input terminal and an output terminal connected to each other, and is a single long line made of a conductive material such as metal.

이러한 코일(1122)은, 이미 기술한 것처럼, 기판(1121)의 하부면과 상부면 각각의 해당 위치에 정해진 형상으로 배치된다.As described above, the coil 1122 is arranged in a predetermined shape at corresponding positions on the lower and upper surfaces of the substrate 1121.

도 5는 다른 몇몇 실시예에 따른 스마트폰의 터치 압력 센서와 광학식 지문 센서(수광부)를 나타낸 분해 사시도이다. 도 6은 도 5의 Ⅱ-Ⅱ'선을 따라 터치 압력 센서와 광학식 지문 센서(수광부)를 자른 단면도이다.5 is an exploded perspective view illustrating a touch pressure sensor and an optical fingerprint sensor (a light receiving unit) of a smartphone according to some other exemplary embodiments. 6 is a cross-sectional view of a touch pressure sensor and an optical fingerprint sensor (a light receiving unit) taken along line II-II' of FIG. 5.

도 5 및 도 6을 참조하면, 본 예에 따른 터치 압력 센서(221)는 인덕턴스 포스 터치 센서(inductive force touch sensor)의 개념을 이용하는 터치센서 모듈이다.5 and 6, the touch pressure sensor 221 according to the present example is a touch sensor module using the concept of an inductive force touch sensor.

인덕턴스 포스 터치 센서는 나선형으로 감겨 있는 나선형 코일과 금속 등으로 이루어져 있고 코일 위에 위치하는 도전체 사이의 간격 변화에 따라 변하는 인덕턴스(inductance)를 이용하여 터치 지점에 발생하는 압력(즉 터치 여부)을 감지하는 촉각 센서이다. 터치 압력 센서(221)는 인덕턴스의 변화를 감지하는 센싱부재(미도시)를 포함할 수 있다.The inductance force touch sensor is composed of a spiral coil wound in a spiral form and metal, and detects the pressure (that is, whether or not it is touched) generated at the touch point by using inductance that changes according to the change in the distance between the conductors located on the coil. It is a tactile sensor. The touch pressure sensor 221 may include a sensing member (not shown) that senses a change in inductance.

터치 압력 센서(221)는 적어도 하나의 코일(1122), 코일(1122) 위에 위치하는 간격재(114), 그리고 간격재(114) 위에 위치하는 타겟 메탈(113)을 구비할 수 있다. The touch pressure sensor 221 may include at least one coil 1122, a spacer 114 positioned on the coil 1122, and a target metal 113 positioned on the spacer 114.

일 실시예로, 터치 압력 센서(221)는 광학식 지문 센서 위에 배치될 수 있다. 이 경우, 코일(1122)은 광학식 지문 센서(222)의 지문 센싱 기판(120) 상에 배치될 수 있다. 지문 센싱 기판은 터치 압력 센서(221)의 하부막의 기능을 수행할 수도 있다.In an embodiment, the touch pressure sensor 221 may be disposed on the optical fingerprint sensor. In this case, the coil 1122 may be disposed on the fingerprint sensing substrate 120 of the optical fingerprint sensor 222. The fingerprint sensing substrate may function as a lower layer of the touch pressure sensor 221.

광학식 지문 센서(222)는 지문 센싱 기판(120) 상에 배치되는 지문 센서(수광부, 120)을 포함할 수 있다. 지문 센서(120)는 터치 압력 센서(221)의 코일(1122)에 의해 둘러싸이도록 형성될 수 있다. The optical fingerprint sensor 222 may include a fingerprint sensor (a light receiving unit) 120 disposed on the fingerprint sensing substrate 120. The fingerprint sensor 120 may be formed to be surrounded by the coil 1122 of the touch pressure sensor 221.

이하, 도 7 내지 도 17을 결부하여 생체신호정보 관리 시스템(1)이 생체신호정보를 관리하는 방법에 대해 설명한다.Hereinafter, a method by which the biosignal information management system 1 manages biosignal information will be described with reference to FIGS. 7 to 17.

도 7은 일 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다. 도 8은 도 7의 생체신호정보 관리 시스템에서, 센싱조건을 제어하는 단계 및 센싱 데이터를 수신하는 단계를 나타낸 블록도이다. 도 9는 도 7의 가공 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다. 도 10은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 생성하는 단계를 나타낸 블록도이다. 도 11은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 분석하는 단계를 나타낸 블록도이다. 도 12는 도 11의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다. 도 13은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다. 도 14는 도 7의 생체신호정보 관리 시스템에서, 생체신호정보로 변환하는 단계 및 생체신호정보를 제공받는 단계를 나타낸 블록도이다. 도 15는 PPG 및 SDPPG 파형을 나타낸 그래프이다. 도 16은 도 7의 생체신호정보 관리 시스템에서, 생체신호정보를 저장하고 표시하는 단계를 나타낸 블록도이다. 도 17은 도 16의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다.7 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to an exemplary embodiment. FIG. 8 is a block diagram illustrating a step of controlling a sensing condition and a step of receiving sensing data in the biosignal information management system of FIG. 7. 9 is a flow chart showing in more detail the step of analyzing the processed data of FIG. 7. 10 is a block diagram illustrating a step of generating processed data in the biosignal information management system of FIG. 7. 11 is a block diagram showing a step of analyzing processed data in the biosignal information management system of FIG. 7. 12 is a plan view exemplarily illustrating a state of a display area in the step of FIG. 11. 13 is a block diagram showing in more detail the step of transmitting processed data in the biosignal information management system of FIG. 7. FIG. 14 is a block diagram illustrating a step of converting into biosignal information and receiving biosignal information in the biosignal information management system of FIG. 7. 15 is a graph showing PPG and SDPPG waveforms. FIG. 16 is a block diagram showing steps of storing and displaying biosignal information in the biosignal information management system of FIG. 7. 17 is a plan view illustrating a state of a display area in the step of FIG. 16 by way of example.

도 7을 참조하면, 생체신호정보 관리 시스템(1)이 생체신호정보를 관리하는 방법은 센싱조건을 제어하는 단계(S100), 센싱 데이터를 수신하는 단계(S200), 가공 데이터를 생성하는 단계(S300), 가공 데이터를 분석하는 단계(S400), 가공 데이터를 전송하는 단계(S500), 생체신호정보로 변환하는 단계(S600), 생체신호정보를 제공받는 단계(S700) 및 생체신호정보를 저장하고 표시하는 단계(S800)를 포함한다. Referring to FIG. 7, the method of managing the biosignal information by the biosignal information management system 1 includes controlling a sensing condition (S100), receiving sensing data (S200), and generating processed data ( S300), analyzing the processed data (S400), transmitting the processed data (S500), converting into biosignal information (S600), receiving biosignal information (S700), and storing the biosignal information And displaying (S800).

본 명세서에서, 순서도에 따라 각 단계가 차례로 수행되는 것으로 설명하지만, 발명의 사상을 변경하지 않는 한, 각 단계의 순서가 변경되거나, 일부 단계가 생략되거나 또는 각 단계사이에 다른 단계가 더 포함될 수 있음은 자명하다.In this specification, it is described that each step is performed sequentially according to a flow chart, but the order of each step is changed, some steps are omitted, or other steps may be further included between each step unless the spirit of the invention is changed. It is self-evident.

먼저, 도 8을 참조하여, 생체신호정보 관리 시스템(1)에서, 센싱조건을 제어하는 단계(S100) 및 센싱 데이터를 수신하는 단계(S200)에 대해 설명한다.First, with reference to FIG. 8, in the biosignal information management system 1, the step of controlling the sensing condition (S100) and the step of receiving the sensing data (S200) will be described.

센싱조건을 제어하는 단계(S100)는 어플리케이션(10)이 지문센서부(50) 및 압력센서부(60)의 센싱조건을 제어하는 단계(S100)에 해당한다. The step of controlling the sensing condition (S100) corresponds to the step (S100) of controlling the sensing conditions of the fingerprint sensor unit 50 and the pressure sensor unit 60 by the application 10.

센싱조건을 제어하는 단계(S100)에서, 어플리케이션(10)은 생체정보가 도출될 수 있는 지문센싱 데이터와 압력센싱 데이터를 수집하기 위해 지문센서부(50)와 압력센서부(60)를 제어할 수 있다. 예를 들어, 어플리케이션(10)은 구동시간 제어과정, 샘플링 주파수 제어과정, 파장 대역 제어과정 및 광량 제어과정 중 적어도 하나를 포함하는 제어 방법을 포함할 수 있다.In the step of controlling the sensing condition (S100), the application 10 controls the fingerprint sensor unit 50 and the pressure sensor unit 60 to collect fingerprint sensing data and pressure sensing data from which biometric information can be derived. I can. For example, the application 10 may include a control method including at least one of a driving time control process, a sampling frequency control process, a wavelength band control process, and a light quantity control process.

지문센서부(50)가 지문만을 인식하기 위해, 지문센싱 데이터를 수집에 비교적 짧은 시구간이 요구될 수 있다. 한편, 어플리케이션(10)이 생체정보를 얻기 위해서, 지문센서부(50)가 보다 긴 시구간 동안 지문센싱 데이터를 수집하도록 하기 위해 구동시간을 제어할 수 있다.In order for the fingerprint sensor unit 50 to recognize only a fingerprint, a relatively short period of time may be required to collect fingerprint sensing data. Meanwhile, in order for the application 10 to obtain biometric information, the driving time may be controlled so that the fingerprint sensor unit 50 collects fingerprint sensing data for a longer time period.

어플리케이션(10)은 생체정보의 종류마다 인식하기 위한 광 주파수 대역이 다를 수 있기 때문에, 지문센서부(50)가 센싱하고자 하는 샘플링 주파수를 제어할 수 있다. 예를 들어, PPG(Photoplethysmography) 관련 데이터 등이 도출되도록 하는 주파수 대역에 맞추어 지문센서부(50)의 샘플링 주파수를 제어할 수 있다.Since the application 10 may have a different optical frequency band for recognition for each type of biometric information, the fingerprint sensor unit 50 may control the sampling frequency to be sensed. For example, the sampling frequency of the fingerprint sensor unit 50 may be controlled according to a frequency band through which data related to PPG (Photoplethysmography) is derived.

마찬가지로, 어플리케이션(10)은 생체정보의 종류마다 인식하기 위한 광의 파장 대역 및 광량이 다를 수 있기 때문에, 지문센서부(50)가 센싱하고자 하는 파장 대역과 광량을 제어할 수 있다. 예를 들어, PPG(Photoplethysmography) 파형 등이 도출되도록 하는 파장 대역 및 광량에 맞추어 지문센서부(50)의 파장 대역 및 광량을 제어할 수 있다.Likewise, the application 10 may control the wavelength band and the amount of light to be sensed by the fingerprint sensor unit 50 because the wavelength band and the amount of light to be recognized may be different for each type of biometric information. For example, a wavelength band and an amount of light of the fingerprint sensor unit 50 may be controlled according to a wavelength band and an amount of light through which a PPG (Photoplethysmography) waveform is derived.

한편, 사람마다 손가락 표피의 두께가 다르고, 사람마다 터치의 세기가 다르므로, 정확한 PPG관련 데이터를 얻기 위해 적정한 세기의 터치 압력이 요구될 수 있다. 예를 들어, 터치의 압력이 센 사용자의 경우, 손가락 터치 부위의 혈류량이 기준값보다 낮을 수 있고, 터치의 압력이 약한 사용자의 경우, 손가락 터치 부위의 혈류량이 기준값보다 높거나 데이터 측정이 어려울 수 있다.Meanwhile, since the thickness of the skin of the finger is different for each person and the intensity of the touch is different for each person, a touch pressure of an appropriate intensity may be required to obtain accurate PPG-related data. For example, in the case of a user with a strong touch pressure, the blood flow at the finger touch region may be lower than the reference value, and in the case of a user with a weak touch pressure, the blood flow at the finger touch region may be higher than the reference value or it may be difficult to measure data. .

어플리케이션(10)은 압력센서부(60)를 제어하여 사용자로부터 적정한 세기의 터치 압력을 유도하여 정확한 PPG관련 데이터를 얻을 수 있다. 따라서, 센싱조건을 제어하는 단계(S100)에서, 어플리케이션(10)은 지문센서부(50)가 압력센싱 데이터를 수집하도록 압력센서부(60)의 센싱조건을 제어할 수 있다.The application 10 controls the pressure sensor unit 60 to induce a touch pressure of an appropriate intensity from the user to obtain accurate PPG related data. Therefore, in the step of controlling the sensing condition (S100), the application 10 may control the sensing condition of the pressure sensor unit 60 so that the fingerprint sensor unit 50 collects pressure sensing data.

센싱 데이터를 수신하는 단계(S200)는 어플리케이션(10)이 지문센서부(50) 및 압력센서부(60)로부터 각각 지문센싱 데이터 및 압력센싱 데이터를 수신하는 단계(S200)에 해당한다. 센싱 데이터를 수신하는 단계(S200)에서, 어플리케이션(10)은 지문센서부(50)가 수집한 지문센싱 데이터와 압력센서부(60)가 수집한 압력센싱 데이터를 어플리케이션(10)으로 전송하도록 하고 이를 수신할 수 있다.The step of receiving sensing data (S200) corresponds to a step (S200) of receiving, by the application 10, fingerprint sensing data and pressure sensing data from the fingerprint sensor unit 50 and the pressure sensor unit 60, respectively. In the step of receiving the sensing data (S200), the application 10 transmits the fingerprint sensing data collected by the fingerprint sensor unit 50 and the pressure sensing data collected by the pressure sensor unit 60 to the application 10 You can receive it.

다음으로, 도 9 내지 도 12를 참조하여, 가공 데이터를 생성하는 단계(S300) 및 가공 데이터를 분석하는 단계(S400)에 대해 설명한다.Next, with reference to FIGS. 9 to 12, the step of generating the processed data (S300) and the step of analyzing the processed data (S400) will be described.

가공 데이터를 생성하는 단계(S300)는 어플리케이션(10)이 지문센싱 데이터 및 압력센싱 데이터를 가공하여 지문가공 데이터와 압력가공 데이터를 생성하는 단계에 해당한다.The step of generating the processed data (S300) corresponds to a step in which the application 10 processes the fingerprint sensing data and the pressure sensing data to generate the fingerprint processing data and the pressure processing data.

가공 데이터를 생성하는 단계(S300)에서, 어플리케이션(10)은 지문센싱 데이터를 가공하여 생체정보 도출과 직접 관련된 지문가공 데이터를 얻을 수 있다. 어플리케이션(10)은 압력센싱 데이터를 가공하여 지문가공 데이터를 신뢰할 수 있는지 판단하도록 하는 압력가공 데이터를 얻을 수 있다. 예를 들어, 어플리케이션(10)은 원시 데이터 중 필요한 데이터만을 남기고 필터링 하고 이를 지문가공 데이터나 압력가공 데이터로 가공할 수 있다. 지문가공 데이터와 압력가공 데이터는 생체정보와 관련된 아날로그 신호 또는 디지털 신호를 포함할 수 있다.In the step of generating the processed data (S300), the application 10 may process the fingerprint sensing data to obtain fingerprint processing data directly related to derivation of biometric information. The application 10 may process pressure sensing data to obtain pressure processing data to determine whether the fingerprint processing data is reliable. For example, the application 10 may filter while leaving only necessary data among raw data and process it into fingerprint processing data or pressure processing data. The fingerprint processing data and the pressure processing data may include analog signals or digital signals related to biometric information.

가공 데이터를 분석하는 단계(S400)는 어플리케이션(10)이 지문가공 데이터와 압력가공 데이터를 분석하는 단계에 해당한다.Analyzing the processing data (S400) corresponds to a step in which the application 10 analyzes the fingerprint processing data and the pressure processing data.

가공 데이터를 분석하는 단계(S400)는 어플리케이션(10)이 가공된 지문가공 데이터가 신뢰할 수 있는지 판단하는 단계일 수 있다. 어플리케이션(10)은 지문가공 데이터가 생체신호정보로 변환할 수 있는 데이터들을 포함하고 있는지를 판단할 수 있다. 어플리케이션(10)은 터치의 세기가 얼마만큼인지, 압력이 가해진 면적이 어떠한지 등의 정보가 담긴 압력가공 데이터로부터 지문가공 데이터를 신뢰할 수 있는지 판단할 수 있다. The step of analyzing the processed data (S400) may be a step of determining whether the fingerprint processed data processed by the application 10 is reliable. The application 10 may determine whether the fingerprint processing data includes data that can be converted into biometric signal information. The application 10 may determine whether the fingerprint processing data is reliable from the pressure processing data containing information such as how much the intensity of the touch is and the area to which the pressure is applied.

한편, 가공 데이터를 분석하는 단계(S400)는 복수의 세부단계를 포함할 수 있다. 가공 데이터를 분석하는 단계(S400)는 제1차 가공 데이터를 분석하는 단계(S410), 지문인식 재요청을 표시하는 단계(S420), 제2차 센싱조건을 제어하는 단계(S430), 제2차 센싱 데이터를 수신하는 단계(S440) 및 제2차 가공 데이터를 생성하는 단계(S450)를 포함할 수 있다.Meanwhile, the step S400 of analyzing the processed data may include a plurality of detailed steps. Analyzing the processed data (S400) includes analyzing the first processed data (S410), displaying a fingerprint recognition re-request (S420), controlling the second sensing condition (S430), and the second It may include receiving the difference sensing data (S440) and generating the second processing data (S450).

제1차 가공 데이터를 분석하는 단계(S410)는 어플리케이션(10)이 제1차 지문가공 데이터 및 제1차 압력가공 데이터를 분석하는 단계에 해당한다. 제1차 가공 데이터를 분석하는 단계(S410)에서 앞서 상술한 1차로 어플리케이션(10)이 가공된 지문가공 데이터가 신뢰할 수 있는지 판단하는 단계일 수 있다.Analyzing the first processing data (S410) corresponds to a step in which the application 10 analyzes the first fingerprint processing data and the first pressure processing data. In the step S410 of analyzing the first processing data, it may be a step of determining whether the fingerprint processing data processed by the first application 10 described above is reliable.

지문인식 재요청을 표시하는 단계(S420)는 어플리케이션(10)이 표시부(20)를 통해 지문인식 재요청을 표시하는 단계(S420)에 해당한다.The step (S420) of displaying the fingerprint recognition re-request corresponds to the step (S420) of displaying the fingerprint re-request by the application 10 through the display unit 20.

지문인식 재요청을 표시하는 단계(S420)에서, 어플리케이션(10)은 제1차 지문가공 데이터가 신뢰할 수 없다고 판단되면, 사용자에게 지문인식을 재요청할 수 있다. 이때, 어플리케이션(10)은 사용자에게 지문인식을 다시 요청하는 표시 데이터를 표시부(20)에 전송하고, 표시부(20)는 이를 표시할 수 있다.In the step of displaying the fingerprint recognition re-request (S420), if the application 10 determines that the first fingerprint processing data is unreliable, the application 10 may re-request the user for fingerprint recognition. In this case, the application 10 transmits, to the display unit 20, display data requesting the user to recognize a fingerprint again, and the display unit 20 may display it.

제2차 센싱조건을 제어하는 단계(S430)는 어플리케이션(10)이 제2차로 지문센서부(50) 및 압력센서부(60)의 센싱조건을 제어하는 단계에 해당한다.The step of controlling the second sensing condition (S430) corresponds to a step in which the application 10 controls the sensing conditions of the fingerprint sensor unit 50 and the pressure sensor unit 60 in the second order.

제2차 센싱조건을 제어하는 단계(S430)에서, 어플리케이션(10)이 사용자의 터치압력이 기준 값보다 약한 경우에 수집되는 데이터들이 제1차 지문가공 데이터 및 제1차 압력 가공 데이터에 포함된 경우, 도 12의 (a)와 같이 표시부(20)에 표시하도록 표시부(20)를 제어할 수 있다. In the step of controlling the second sensing condition (S430), the data collected when the user's touch pressure is weaker than the reference value are included in the first fingerprint processing data and the first pressure processing data. In this case, the display unit 20 may be controlled to be displayed on the display unit 20 as shown in FIG. 12A.

또한, 어플리케이션(10)이 사용자의 터치압력이 기준 값보다 강한 경우에 수집되는 데이터들이 제1차 지문가공 데이터 및 제1차 압력 가공 데이터에 포함된 경우, 도 12의 (b)와 같이 표시부(20)에 표시하도록 표시부(20)를 제어할 수 있다.In addition, when the application 10 includes data collected when the user's touch pressure is stronger than the reference value is included in the first fingerprint processing data and the first pressure processing data, the display unit ( The display unit 20 can be controlled to display on 20).

즉, 어플리케이션(10)은 신뢰할 수 있는 지문가공 데이터를 얻도록, 사용자로 하여금 터치의 세기를 세게 또는 약하게 하도록 유도할 수 있다.That is, the application 10 may induce the user to increase or decrease the intensity of the touch so as to obtain reliable fingerprint processing data.

한편, 제2차 센싱조건을 제어하는 단계(S430)는 상술한 방법에 의해 압력센서부(60)의 센싱조건을 제어하는 것에 한정되지는 않는다.Meanwhile, the step of controlling the second sensing condition (S430) is not limited to controlling the sensing condition of the pressure sensor unit 60 by the above-described method.

몇몇 실시예의 제2차 센싱조건을 제어하는 단계(S430)에서, 어플리케이션(10)이 압력센서부(60)가 터치 압력의 센싱 범위를 조절하도록 제어할 수 있다.In the step S430 of controlling the second sensing condition of some embodiments, the application 10 may control the pressure sensor unit 60 to adjust the sensing range of the touch pressure.

예를 들어, 과거 데이터들에 의해 평가된 일반적인 사용자의 터치 압력 센싱 범위와 다른 범위를 갖도록, 어플리케이션(10)이 압력센서부(60)가 터치 압력의 센싱 범위를 조절할 수 있다. 몇몇 실시예에서, 제1차 압력가공 데이터를 기반으로 수집된 제1차 지문 가공데이터가 생체신호정보를 얻을 수 있는 데이터를 포함하고 있지 않을 수 있다. 이 경우, 어플리케이션(10)은 제2차 압력가공 데이터를 얻기 위해 압력센서부(60)를 제어하고, 어플리케이션(10)이 압력센서부(60)가 기존과 다른 터치 압력의 센싱 범위를 갖도록 변경하여, 제2차 압력가공 데이터와 제2차 지문가공 데이터를 수집할 수 있다.For example, the application 10 may adjust the sensing range of the touch pressure by the pressure sensor unit 60 so as to have a range different from that of a general user's touch pressure sensing range evaluated based on past data. In some embodiments, the first fingerprint processing data collected based on the first pressure processing data may not include data for obtaining biosignal information. In this case, the application 10 controls the pressure sensor unit 60 to obtain the second pressure processing data, and the application 10 changes the pressure sensor unit 60 to have a sensing range of a touch pressure different from the conventional one. Thus, it is possible to collect the second pressure processing data and the second fingerprint processing data.

제2차 센싱 데이터를 수신하는 단계(S440)는 어플리케이션(10)이 지문센서부(50) 및 압력센서부(60)로부터 각각 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 수신하는 단계에 해당한다. In the step of receiving the second sensing data (S440), the application 10 receives the second fingerprint sensing data and the second pressure sensing data from the fingerprint sensor unit 50 and the pressure sensor unit 60, respectively. Corresponds to.

제2차 센싱 데이터를 수신하는 단계(S440)에서 어플리케이션(10)은 지문센서부(50) 및 압력센서부(60)로부터 각각 새로 센싱한 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 수신할 수 있다.In the step of receiving the second sensing data (S440), the application 10 receives the second fingerprint sensing data and the second pressure sensing data newly sensed from the fingerprint sensor unit 50 and the pressure sensor unit 60, respectively. Can receive.

제2차 가공 데이터를 생성하는 단계(S450)는 어플리케이션(10)이 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 가공하여 제2차 지문가공 데이터와 제2차 압력가공 데이터를 생성하는 단계에 해당한다.In the step of generating the second processing data (S450), the application 10 processes the second fingerprint sensing data and the second pressure sensing data to generate the second fingerprint processing data and the second pressure processing data. Corresponds to the stage.

제2차 가공 데이터를 생성하는 단계(S450)에서 어플리케이션(10)은 새로 전송받은 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 가공하여 제2차 지문가공 데이터와 제2차 압력가공 데이터를 생성하는 단계(S300)에 해당한다.In the step of generating the second processing data (S450), the application 10 processes the newly transmitted second fingerprint sensing data and the second pressure sensing data to process the second fingerprint processing data and the second pressure processing data. It corresponds to the step of generating (S300).

다음으로, 도 13을 참조하여 가공 데이터를 전송하는 단계(S500)에 대해 설명한다. Next, referring to FIG. 13, the step of transmitting the processed data (S500) will be described.

데이터를 전송하는 단계는 어플리케이션(10)이 서버(2000)로부터 통신부(30)를 통해 지문가공 데이터를 전송하는 단계(S500)에 해당한다.The step of transmitting data corresponds to a step S500 of transmitting, by the application 10, the fingerprint processing data from the server 2000 through the communication unit 30.

여기서, 지문가공 데이터는 제1차 지문가공 데이터 또는 제2차 지문가공 데이터일 수 있다. Here, the fingerprint processing data may be the first fingerprint processing data or the second fingerprint processing data.

가공 데이터를 전송하는 단계(S500)는 어플리케이션(10)이 통신부(30)로 지문가공 데이터를 전송하는 단계, 및 통신부(30)가 서버(2000)로 어플리케이션(10)으로부터 수신한 지문가공 데이터를 전송하는 단계를 포함할 수 있다. 즉, 어플리케이션(10)은 통신부(30)를 통해, 스마트폰(1000)에서 서버(2000)로 지문가공 데이터와 압력가공 데이터를 전송할 수 있다.In the step of transmitting the processed data (S500), the application 10 transmits the fingerprint processing data to the communication unit 30, and the communication unit 30 transmits the fingerprint processing data received from the application 10 to the server 2000. It may include the step of transmitting. That is, the application 10 may transmit fingerprint processing data and pressure processing data from the smartphone 1000 to the server 2000 through the communication unit 30.

다만, 이에 제한되는 것은 아니고, 다른 실시예에서 어플리케이션(10)은 압력가공 데이터의 전송은 생략된 채, 지문가공 데이터만을 서버(2000)로 전송할 수도 있다.However, the present invention is not limited thereto, and in another embodiment, the application 10 may transmit only the fingerprint processing data to the server 2000 while omitting the transmission of the pressure processing data.

가공 데이터를 전송하는 단계(S500)에서 어플리케이션(10)은 스마트폰(1000) 내 저장부(40)로 전송할 수 있다. 저장부(40)는 지문가공 데이터와 압력가공 데이터를 저장하고, 빅데이터를 구축할 수 있다.In the step of transmitting the processed data (S500), the application 10 may be transmitted to the storage unit 40 in the smartphone 1000. The storage unit 40 may store fingerprint processing data and pressure processing data, and build big data.

다만, 본 단계에서 지문가공 데이터만이 전송되는 것으로 도시하였지만, 이에 제한되는 것은 아니다. 다른 실시예에서, 압력가공 데이터 또한 서버(2000)로 전송될 수도 있다. 여기서, 압력가공 데이터는 제1차 압력가공 데이터 또는 제2차 압력가공 데이터일 수 있다.However, although it is shown that only fingerprint processing data is transmitted in this step, it is not limited thereto. In another embodiment, pressure processing data may also be transmitted to the server 2000. Here, the pressure processing data may be the first pressure processing data or the second pressure processing data.

다음으로, 도 14 및 도 15를 참조하여, 생체신호정보로 변환하는 단계(S600) 및 생체신호정보를 제공받는 단계(S700)에 대해 설명한다.Next, referring to FIGS. 14 and 15, a step of converting into biometric signal information (S600) and a step of receiving biosignal information (S700) will be described.

생체신호정보로 변환하는 단계(S600)는 서버(2000)가 지문가공 데이터를 생체신호정보로 변환하는 단계(S600)에 해당한다.The step of converting the biosignal information (S600) corresponds to the step (S600) of converting the fingerprint processing data into the biosignal information by the server 2000.

서버(2000)는 지문가공 데이터를 이용하여 특정 생체신호정보로 변환할 수 있다. 예를 들어, 서버(2000)는 지문가공 데이터를 혈압 추정 알고리즘을 이용하여 혈압 정보를 얻을 수 있다. 일 실시예에서, 혈압 추정 알고리즘으로서, 형태 데이터(Morphology)와 머신러닝(Machine Learning)을 활용하여, 가공 데이터를 혈압 정보로 추출할 수 있다. 우선, 형태 데이터(Morphology)와 머신러닝(Machine Learning) 기법을 활용하여, 가공 데이터를 혈압 정보로 추출하는 과정에 대해 설명한다.The server 2000 may convert the fingerprint processing data into specific biosignal information. For example, the server 2000 may obtain blood pressure information from the fingerprint processing data using a blood pressure estimation algorithm. In an embodiment, as a blood pressure estimation algorithm, processed data may be extracted as blood pressure information by utilizing shape data (Morphology) and machine learning (Machine Learning). First, the process of extracting processed data as blood pressure information using Morphology and Machine Learning techniques will be described.

형태 데이터(Morphology)는 PPG 파형의 변곡점을 추출한 방식 등을 이용한 프로그램을 활성화시켜 저장된 파형의 낮은 값에서의 모양 변화(Morphological Change)가 일어나는 시점을 검출하여 얻을 수 있다. 형태 데이터는 상관함수(Correlation Function)을 이용한 불연속점의 감지하는 방법을 통해 얻을 수 있다.Morphology can be obtained by activating a program using a method of extracting the inflection point of the PPG waveform, and detecting the point at which a Morphological Change occurs at a low value of the stored waveform. Shape data can be obtained through a method of detecting discontinuities using a correlation function.

PPG 파형의 분석은 PPG 신호의 2차 미분된 PPG 파형(SDPPG)으로 쉽게 정량화되어 원래의 PPG 신호보다 명확하게 정의된 특징점(피크 값)에 의해 혈압을 해석할 수 있다. 도 15와 같이, 혈압 해석은 SDPPG 파형에서 "a"(초기 수축기 양성 파), "b"(초기 수축기 음영 파), "c"(후기 수축기 재진입 파), "d"(수축기 후반 감소 파) 및 "e"(초기 이완기 양성 파)를 이용하여 해석할 수 있다.The analysis of the PPG waveform is easily quantified as a second-order differentiated PPG waveform (SDPPG) of the PPG signal, so that the blood pressure can be analyzed by more clearly defined feature points (peak values) than the original PPG signal. As shown in Fig. 15, the blood pressure analysis is "a" (initially systolic positive wave), "b" (early systolic shading wave), "c" (late systolic reentry wave), and "d" (late systolic decrease wave) And "e" (early diastolic positive wave) can be used for interpretation.

머신러닝 기법은 인공지능을 이용한 기법에 해당한다. 머신러닝은 혈압에 대한 경험적 데이터를 기반으로 학습을 하고 사용자의 혈압 예측을 수행하는 기법에 해당한다.Machine learning techniques correspond to techniques using artificial intelligence. Machine learning is a technique that learns based on empirical data on blood pressure and predicts the user's blood pressure.

몇몇 다른 실시예에서, 서버(2000)는 생체신호정보를 수집을 위해 압력가공 데이터를 추가로 이용할 수 있다. 예를 들어, 서버(2000)가 혈압을 추정을 하기위해, 지문 센싱 영역(SA)에 터치되는 손가락으로부터 일정 압력이 요구될 수 있다. 서버(2000)는 혈압을 추정하기 위해 터치의 세기에 관한 인자를 이용할 수 있다.In some other embodiments, the server 2000 may additionally use pressure processing data to collect biometric signal information. For example, in order for the server 2000 to estimate the blood pressure, a certain pressure may be required from a finger touching the fingerprint sensing area SA. The server 2000 may use a factor related to the intensity of a touch to estimate the blood pressure.

서버(2000)가 혈압을 추정하는 알고리즘은 상술한 것에 한정되지 않고 다양한 알고리즘에 의해 서버(2000)가 혈압을 추정할 수 있다. 예를 들어, 오실로메트릭 방식, 토노메트릭 방식, W. Abraham 알고리즘, 또는 캘리브레이션 방식을 통해, 서버(2000)가 혈압을 추정할 수 있다.The algorithm for estimating the blood pressure by the server 2000 is not limited to the above-described one, and the server 2000 may estimate the blood pressure by various algorithms. For example, the server 2000 may estimate the blood pressure through an oscillometric method, a tonometric method, a W. Abraham algorithm, or a calibration method.

생체신호정보를 제공받는 단계(S700)는 어플리케이션(10)이 서버(2000)로부터 통신부(30)를 통해 생체신호정보를 제공받는 단계(S700)에 해당한다. The step of receiving biosignal information (S700) corresponds to a step (S700) of receiving, by the application 10, the biosignal information from the server 2000 through the communication unit 30.

생체신호정보를 제공받는 단계(S700)에서, 어플리케이션(10)은 서버(2000)로부터 생체신호정보를 수신할 수 있다. 이 때, 생채신호정보는 PPG(Photoplethysmography) 관련 데이터뿐만 아니라 추정된 혈압정보가 더 포함될 수 있다. In step S700 of receiving the biosignal information, the application 10 may receive biosignal information from the server 2000. In this case, the biosignal information may further include estimated blood pressure information as well as PPG (Photoplethysmography) related data.

다음으로, 도 16 및 도 17을 참조하여, 생체신호정보를 저장하고 표시하는 단계(S800)에 대해 설명한다.Next, with reference to FIGS. 16 and 17, a step of storing and displaying bio-signal information (S800) will be described.

생체신호정보를 저장하고 표시하는 단계(S800)는, 어플리케이션(10)이 생체신호정보를 저장부(40)에 저장하고 표시부(20)를 통해 표시하는 단계에 해당한다. The storing and displaying of the biosignal information (S800) corresponds to a step in which the application 10 stores the biosignal information in the storage unit 40 and displays the biosignal information through the display unit 20.

어플리케이션(10)은 생체신호정보가 담긴 표시데이터를 표시부(20)에 전송할 수 있다. 표시부(20)는 표시데이터를 기반으로 생채신호정보를 사용자가 확인할 수 있도록 스마트폰(1000)의 표시 영역(DA)에 표시할 수 있다. 예컨대, 스마트폰(1000)에 생체신호정보가 표시되는 방식은 도 17와 같을 수 있다.The application 10 may transmit display data containing biometric signal information to the display unit 20. The display unit 20 may display the biosignal information on the display area DA of the smartphone 1000 so that the user can check the biosignal information based on the display data. For example, a method of displaying biosignal information on the smartphone 1000 may be as shown in FIG. 17.

어플리케이션(10)은 생체신호정보를 저장부(40)에 전송할 수 있다. 저장부(40)는 생체신호정보를 저장할 수 있다. 어플리케이션(10)은 저장부(40)에 저장된 생체신호정보를 이용하여, 생체신호정보에 관한 빅데이터를 구축할 수 있다.The application 10 may transmit the biosignal information to the storage unit 40. The storage unit 40 may store bio-signal information. The application 10 may construct big data related to the biosignal information by using the biosignal information stored in the storage unit 40.

저장부(40)는 생체신호정보, 각 센싱 데이터들, 각 가공 데이터들을 저장하고, 사용자별 데이터를 구축할 수 있다. 또한, 어플리케이션(10)이 스마트폰(1000)의 사용자에 대한 적정 터치 압력 데이터를 수집하여 저장할 수 있다. The storage unit 40 may store bio-signal information, sensing data, and processing data, and build user-specific data. In addition, the application 10 may collect and store appropriate touch pressure data for the user of the smartphone 1000.

어플리케이션(10)이 표시부(20)로 생체신호정보에 기반한 표시데이터를 전송하는 단계와 어플리케이션(10)이 저장부(40)로 생체신호정보를 전송하는 단계는 순서에 제한되지는 어플리케이션(10)이 표시부(20)로 생체신호정보에 기반한 표시데이터를 전송하는 단계와 어플리케이션(10)이 저장부(40)로 생체신호정보를 전송하는 단계는 동시 또는 이시에 수행될 수 있다.The steps in which the application 10 transmits the display data based on the bio-signal information to the display unit 20 and the step of the application 10 to transmit the bio-signal information to the storage unit 40 are not limited to the order of the application 10 The step of transmitting the display data based on the biosignal information to the display unit 20 and the step of transmitting the biosignal information to the storage unit 40 by the application 10 may be performed simultaneously or at the same time.

다음으로, 다른 실시예에 따른 생체신호정보 관리 방법에 대해 설명하기로 한다. 이하, 도 1 내지 도 17와 도면상의 동일한 구성 요소에 대해서는 설명을 생략하고, 동일하거나 유사한 참조 부호를 사용하였다.Next, a method of managing biosignal information according to another embodiment will be described. Hereinafter, descriptions of the same components in FIGS. 1 to 17 and in the drawings are omitted, and the same or similar reference numerals are used.

도 18은 다른 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다. 도 19는 도 18의 센싱 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다. 도 20은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 분석하는 단계를 나타낸 블록도이다. 도 21은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다. 도 22는 도 18의 생체신호정보 관리 시스템에서, 생체신호정보로 가공 및 변환하는 단계를 나타낸 블록도이다.18 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to another embodiment. FIG. 19 is a flow chart showing the steps of analyzing the sensing data of FIG. 18 in more detail. 20 is a block diagram illustrating a step of analyzing sensing data in the biosignal information management system of FIG. 18. 21 is a block diagram showing in more detail the step of transmitting sensing data in the biosignal information management system of FIG. 18. 22 is a block diagram showing steps of processing and converting bio-signal information into bio-signal information in the bio-signal information management system of FIG. 18;

도 18 내지 도 22를 참조하면, 본 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법은 도 7, 도 9, 도 13 및 도 14의 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법 대비, 어플리케이션(10)이 센싱 데이터를 가공하여 가공 데이터를 생성하지 않고, 바로 센싱 데이터를 서버(2000)로 전송하는 점 및 서버(2000)가 센싱 데이터를 가공 및 변환하여 생체신호정보를 추출하는 점에서 그 차이가 있다.18 to 22, the method of managing the biosignal information by the biosignal information management system according to the present embodiment is the biosignal information management system of Figs. 7, 9, 13, and 14. In contrast to the management method, the application 10 does not process sensing data to generate processed data, but directly transmits the sensing data to the server 2000, and the server 2000 processes and converts the sensing data to provide biosignal information. There is a difference in that it extracts.

생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법은 센싱조건을 제어하는 단계(S100), 센싱 데이터를 수신하는 단계(S200), 센싱 데이터를 분석하는 단계(S401), 센싱 데이터를 전송하는 단계(S501), 생체신호정보로 가공 및 변환하는 단계(S601), 생체신호정보를 제공받는 단계(S700) 및 생체신호정보를 저장하고 표시하는 단계(S800)를 포함한다.The method of managing the biosignal information by the biosignal information management system includes controlling the sensing condition (S100), receiving the sensing data (S200), analyzing the sensing data (S401), and transmitting the sensing data. (S501), processing and converting the biosignal information (S601), receiving biosignal information (S700), and storing and displaying biosignal information (S800).

센싱 데이터를 분석하는 단계(S401)는 어플리케이션(10)이 지문센싱 데이터 및 압력센싱 데이터를 분석하는 단계에 해당한다.The step of analyzing the sensing data (S401) corresponds to a step in which the application 10 analyzes the fingerprint sensing data and the pressure sensing data.

센싱 데이터를 분석하는 단계(S401)는 복수의 세부단계를 포함할 수 있다. 센싱 데이터를 분석하는 단계(S401)는 제1차 센싱 데이터를 분석하는 단계(S411), 지문인식 재요청을 표시하는 단계(S420), 제2차 센싱조건을 제어하는 단계(S430) 및 제2차 센싱 데이터를 수신하는 단계(S440)를 포함할 수 있다.Analyzing the sensing data (S401) may include a plurality of detailed steps. Analyzing the sensing data (S401) includes analyzing the first sensing data (S411), displaying a fingerprint recognition re-request (S420), controlling the second sensing condition (S430), and the second It may include the step of receiving the difference sensing data (S440).

제1차 센싱 데이터를 분석하는 단계(S411)는 어플리케이션(10)이 제1차 지문센싱 데이터 및 제1차 압력센싱 데이터를 분석하는 단계에 해당한다. 이는, 1차로 어플리케이션(10)이 지문센싱 데이터가 신뢰할 수 있는지 판단하는 단계일 수 있다.Analyzing the first sensing data (S411) corresponds to a step in which the application 10 analyzes the first fingerprint sensing data and the first pressure sensing data. This may be a step in which the application 10 first determines whether the fingerprint sensing data is reliable.

센싱 데이터를 전송하는 단계(S501)는 어플리케이션(10)이 서버(2000)로 지문센싱 데이터 및 압력센싱 데이터를 전송하는 단계 해당한다. 어플리케이션(10)은 지문센서부(50)와 압력센서부(60)로부터 각각 수신한 지문센싱 데이터와 압력센싱 데이터를 곧바로 서버(2000)로 전송할 수 있다. 지문센싱 데이터와 압력센싱 데이터는 어플리케이션(10)에서 스마트폰(1000)의 통신부(30)로 전송되고, 스마트폰(1000)의 통신부(30)에서 서버(2000)로 전송될 수 있다.The step of transmitting the sensing data (S501) corresponds to a step in which the application 10 transmits the fingerprint sensing data and the pressure sensing data to the server 2000. The application 10 may directly transmit the fingerprint sensing data and pressure sensing data received from the fingerprint sensor unit 50 and the pressure sensor unit 60 to the server 2000. The fingerprint sensing data and the pressure sensing data may be transmitted from the application 10 to the communication unit 30 of the smartphone 1000, and may be transmitted from the communication unit 30 of the smartphone 1000 to the server 2000.

생체신호정보로 가공 및 변환하는 단계(S601)는 서버(2000)가 지문센싱 데이터 및 압력센싱 데이터를 생체신호정보로 변환하는 단계에 해당한다. 서버(2000)는 어플리케이션(10)으로부터 수신한 지문센싱 데이터 및 압력센싱 데이터를 필터링 하여, PPG(Photoplethysmography) 관련 데이터 등의 가공데이터를 추출할 수 있다. 또한, 서버(2000)는 가공데이터를 기반으로 혈압과 같은 생체신호정보를 얻을 수 있다. 서버(2000)는 생체신호정보를 다시 어플리케이션(10)으로 전송하며, 이 때, 어플리케이션(10)이 수신하는 생체신호정보는 PPG(Photoplethysmography) 관련 데이터 및 혈압 중 적어도 하나일 수 있다.The step of processing and converting biosignal information (S601) corresponds to a step of converting the fingerprint sensing data and pressure sensing data into biosignal information by the server 2000. The server 2000 may filter fingerprint sensing data and pressure sensing data received from the application 10 to extract processed data such as photoplethysmography (PPG) related data. In addition, the server 2000 may obtain biosignal information such as blood pressure based on the processed data. The server 2000 transmits the bio-signal information back to the application 10, and in this case, the bio-signal information received by the application 10 may be at least one of photoplethysmography (PPG)-related data and blood pressure.

이상 첨부된 도면을 참조하여 본 발명의 실시예들을 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.Embodiments of the present invention have been described above with reference to the accompanying drawings, but those of ordinary skill in the art to which the present invention pertains can be implemented in other specific forms without changing the technical spirit or essential features of the present invention. You can understand. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not limiting.

1: 생체신호정보 관리 시스템
10: 어플리케이션
20: 표시부
30: 통신부
40: 저장부
50: 지문센서부
60: 압력센서부
211: 발광 유닛
212: 터치 감지 유닛
213: 커버 글래스
221: 압력 감지 유닛
222: 지문 센서
1000: 스마트폰
2000: 서버
3000: 손가락
1: Bio-signal information management system
10: Application
20: display
30: communication department
40: storage
50: fingerprint sensor unit
60: pressure sensor unit
211: light-emitting unit
212: touch sensing unit
213: cover glass
221: pressure sensing unit
222: fingerprint sensor
1000: smartphone
2000: server
3000: finger

Claims (11)

발광부 및 수광부를 포함하고, 상기 발광부에서 발생한 빛이 감지부에 위치한 생체에서 반사된 것을 상기 수광부에서 감지하여 지문의 패턴을 인식하는 광학식 지문센서부;
상기 광학식 지문센서부에 인접하게 위치하여 상기 생체가 상기 감지부에 가하는 압력을 측정하는 압력센서부; 및
상기 압력센서부의 측정 결과를 수신하여 상기 광학식 지문센서부의 동작을 제어하는 제어부를 포함하는 전자 장치에 있어서,
상기 광학식 지문센서부는, 상기 지문의 패턴뿐만 아니라 상기 생체의 생체정보를 얻기 위한 생체 데이터를 인식할 수 있고,
상기 압력센서부는, 상기 광학식 지문센서부가 상기 생체 데이터를 인식하는 동안 상기 감지부에 가해진 압력을 측정하고,
상기 제어부는, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하는지 판단하는 전자 장치.
An optical fingerprint sensor unit including a light-emitting unit and a light-receiving unit, wherein the light-receiving unit detects that the light generated by the light-emitting unit is reflected from a living body located in the sensing unit to recognize a fingerprint pattern;
A pressure sensor unit positioned adjacent to the optical fingerprint sensor unit to measure the pressure applied by the living body to the sensing unit; And
In the electronic device comprising a control unit for receiving the measurement result of the pressure sensor unit to control the operation of the optical fingerprint sensor unit,
The optical fingerprint sensor unit may recognize not only the pattern of the fingerprint, but also biometric data for obtaining biometric information of the living body,
The pressure sensor unit measures a pressure applied to the sensing unit while the optical fingerprint sensor unit recognizes the biometric data,
The controller determines whether the measured pressure falls within a predetermined pressure range.
제1 항에 있어서,
상기 압력센서부는,
타겟 메탈;
상기 타겟 메탈과 대향하는 코일; 및
상기 타겟 메탈과 상기 코일 사이의 거리가 변함에 따라 상기 코일의 인덕턴스 변화량을 감지하는 센싱부재를 포함하는 전자 장치.
The method of claim 1,
The pressure sensor unit,
Target metal;
A coil facing the target metal; And
An electronic device comprising a sensing member that senses a change in inductance of the coil as the distance between the target metal and the coil changes.
제2 항에 있어서,
상기 압력센서부는,
상기 타겟 메탈과 상기 코일 사이에 위치하는 간격재를 더 포함하는 전자 장치.
The method of claim 2,
The pressure sensor unit,
An electronic device further comprising a spacer positioned between the target metal and the coil.
제2 항에 있어서,
상기 코일는 상기 광학식 지문센서부를 둘러싸도록 형성되는 전자 장치.
The method of claim 2,
The coil is formed to surround the optical fingerprint sensor unit.
제1 항에 있어서,
상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면,
상기 광학식 지문센서부는, 상기 생체 데이터를 다시 인식하기 위한 준비 동작을 수행하는 전자 장치.
The method of claim 1,
When the control unit determines that the measured pressure does not fall within a predetermined pressure range,
The optical fingerprint sensor unit performs a preparation operation for recognizing the biometric data.
제1 항에 있어서,
상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면,
상기 제어부는 상기 미리 정해진 압력 범위에 해당하는 압력을 가하기 위한 가이드 메시지 데이터를 생성하는 전자 장치.
The method of claim 1,
When the control unit determines that the measured pressure does not fall within a predetermined pressure range,
The control unit generates guide message data for applying a pressure corresponding to the predetermined pressure range.
제1 항에 있어서,
상기 제어부는, 상기 광학식 지문센서부가 상기 측정된 압력에서 인식한 생체 데이터가 상기 생체정보를 얻기에 적합한지 여부에 따라 상기 압력 범위를 변경하는 전자 장치.
The method of claim 1,
The control unit is an electronic device that changes the pressure range according to whether the biometric data recognized by the optical fingerprint sensor unit is suitable for obtaining the biometric information.
제1 항에 있어서,
상기 전자 장치에서 생체 인식 어플리케이션이 실행되고,
상기 생체 인식 어플리케이션은,
상기 광학식 지문센서부로부터 인식한 상기 생체 데이터를 수신하는 단계;
상기 생체 데이터 또는 상기 생체 데이터를 가공한 가공 데이터를 분석 서버로 전송하는 단계;
상기 분석 서버로부터 상기 분석 서버가 상기 생체 데이터 또는 상기 가공 데이터에 기반하여 생성한 생체정보를 수신하는 단계; 및
상기 생체정보에 기반한 표시데이터를 표시부로 전송하는 단계를 수행하는 전자 장치.
The method of claim 1,
A biometric application is executed in the electronic device,
The biometric recognition application,
Receiving the biometric data recognized from the optical fingerprint sensor unit;
Transmitting the biometric data or processed data obtained by processing the biometric data to an analysis server;
Receiving, by the analysis server, biometric information generated based on the biometric data or the processed data from the analysis server; And
An electronic device that transmits display data based on the biometric information to a display unit.
제8 항에 있어서,
상기 어플리케이션은,
상기 광학식 지문센서부의 센싱 조건을 제어하는 전자 장치.
The method of claim 8,
The above application,
An electronic device that controls the sensing condition of the optical fingerprint sensor unit.
제9 항에 있어서,
상기 센싱 조건은 상기 광학식 지문센서부의 샘플링 주파수, 파장 대역 및 광량 중 적어도 어느 하나인 전자 장치.
The method of claim 9,
The sensing condition is at least one of a sampling frequency, a wavelength band, and an amount of light of the optical fingerprint sensor unit.
제1 항에 있어서,
상기 광학식 지문센서부는 상기 전자 장치의 표시 패널의 하부에 위치하고,
상기 발광부는 상기 표시 패널의 발광부를 겸하는 전자 장치.
The method of claim 1,
The optical fingerprint sensor unit is located under the display panel of the electronic device,
The light emitting part also serves as a light emitting part of the display panel.
KR1020190034135A 2019-03-26 2019-03-26 Method of managing bio-signal information and electronic device performing the same KR102389902B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190034135A KR102389902B1 (en) 2019-03-26 2019-03-26 Method of managing bio-signal information and electronic device performing the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190034135A KR102389902B1 (en) 2019-03-26 2019-03-26 Method of managing bio-signal information and electronic device performing the same

Publications (2)

Publication Number Publication Date
KR20200113638A true KR20200113638A (en) 2020-10-07
KR102389902B1 KR102389902B1 (en) 2022-04-22

Family

ID=72883400

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190034135A KR102389902B1 (en) 2019-03-26 2019-03-26 Method of managing bio-signal information and electronic device performing the same

Country Status (1)

Country Link
KR (1) KR102389902B1 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040087295A (en) * 2004-09-02 2004-10-13 김용수 A fingerprint recognition system and method using correcting position and presure
KR20150082045A (en) * 2014-01-07 2015-07-15 삼성전자주식회사 Electronic device and photoplethysmography method
KR20170095709A (en) * 2016-02-15 2017-08-23 크루셜텍 (주) Sensor package
KR20180005588A (en) 2016-07-06 2018-01-16 삼성전자주식회사 Fingerprint Sensor, Fingerprint Sensor Package and Fingerprint Sensing System using light sources of display panel
KR20180138004A (en) * 2017-06-20 2018-12-28 엘지전자 주식회사 Mobile terminal
KR20190020958A (en) * 2017-08-22 2019-03-05 삼성전자주식회사 Method for obtaining biometric information using a light source corresponding to biometric information and electronic device thereof

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040087295A (en) * 2004-09-02 2004-10-13 김용수 A fingerprint recognition system and method using correcting position and presure
KR20150082045A (en) * 2014-01-07 2015-07-15 삼성전자주식회사 Electronic device and photoplethysmography method
KR20170095709A (en) * 2016-02-15 2017-08-23 크루셜텍 (주) Sensor package
KR20180005588A (en) 2016-07-06 2018-01-16 삼성전자주식회사 Fingerprint Sensor, Fingerprint Sensor Package and Fingerprint Sensing System using light sources of display panel
KR20180138004A (en) * 2017-06-20 2018-12-28 엘지전자 주식회사 Mobile terminal
KR20190020958A (en) * 2017-08-22 2019-03-05 삼성전자주식회사 Method for obtaining biometric information using a light source corresponding to biometric information and electronic device thereof

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"All-organic optoelectronic sensor for pulse oximetry", Nature Communications 5, Article number: 5745, DOI: 10.1038/ncomms6745 (Dec. 10, 2014)

Also Published As

Publication number Publication date
KR102389902B1 (en) 2022-04-22

Similar Documents

Publication Publication Date Title
US11341764B2 (en) Integrated light emitting display, IR light source, and sensors for detecting biologic characteristics
KR102457710B1 (en) Optical fingerprint sensor under the display
CN107580709B (en) Multifunctional fingerprint sensor with optical sensing capability
KR102410175B1 (en) Method for obtaining biometric information using a light source corresponding to biometric information and electronic device thereof
US20220167864A1 (en) Concentric Architecture for Optical Sensing
KR102202342B1 (en) All-in-one light-emitting display and sensor to detect biological properties
CN104423767B (en) Detection applies pressure on the touch surface and provides feedback
CN108369438A (en) Flexible electronic devices and its operating method
CN108236460A (en) Touch type blood pressure measurement device and method
JP2019521734A (en) Light emitters and sensors for detecting biological properties
US10216978B2 (en) Fingerprint identification device and fingerprint identification method
KR102505234B1 (en) Method for detecting biometric information using spatial litht modulators
US20150335293A1 (en) Systems and techniques to determine whether a signal is associated with a periodic biologic function
US20210093211A1 (en) Cardiovascular health monitoring
KR102389902B1 (en) Method of managing bio-signal information and electronic device performing the same
KR101898067B1 (en) Optical sensor module and optical sensing method
KR20200097556A (en) Method of managing bio-signal information
EP4023145B1 (en) Apparatus and method for estimating bio-information
US20240032802A1 (en) Electronic device, and biological detection control method and apparatus
KR20240001777A (en) Display device and blood pressure measurement method using the same
CN111221411A (en) Painted screen

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant