KR20200113638A - Method of managing bio-signal information and electronic device performing the same - Google Patents
Method of managing bio-signal information and electronic device performing the same Download PDFInfo
- Publication number
- KR20200113638A KR20200113638A KR1020190034135A KR20190034135A KR20200113638A KR 20200113638 A KR20200113638 A KR 20200113638A KR 1020190034135 A KR1020190034135 A KR 1020190034135A KR 20190034135 A KR20190034135 A KR 20190034135A KR 20200113638 A KR20200113638 A KR 20200113638A
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- data
- pressure
- sensor unit
- sensing
- Prior art date
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/117—Identification of persons
- A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
- A61B5/1172—Identification of persons based on the shapes or appearances of their bodies or parts thereof using fingerprinting
-
- G06K9/00006—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/12—Fingerprints or palmprints
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0247—Pressure sensors
Abstract
Description
본 발명은 생체신호정보 관리 방법 및 이를 수행하는 전자 장치에 관한 것으로, 보다 상세하게는 생체신호정보를 관리하는 어플리케이션이 포함된 시스템이 생체신호정보를 관리하는 방법과, 시스템 내 전자 장치에 관한 것이다.The present invention relates to a method for managing biosignal information and an electronic device that performs the same, and more particularly, to a method for a system including an application for managing biosignal information to manage biosignal information, and to an electronic device in the system. .
휴대 전화나 태블릿 등과 같은 휴대용 전자장치를 중심으로 지문센서 및 압력센서를 장착한 전자장치의 종류와 수가 증가하고 있다. 지문센서가 탑재된 전자장치에 관한 배경 내용은 대한민국 공개특허공보 제10-2018-0005588호에 기재되어 있다.The types and numbers of electronic devices equipped with fingerprint sensors and pressure sensors are increasing, centering on portable electronic devices such as mobile phones and tablets. Background information on an electronic device equipped with a fingerprint sensor is described in Korean Laid-Open Patent Publication No. 10-2018-0005588.
한편, 최근의 생체신호와 지문을 동시 수신하여 사용자에 관한 사용자 인증을 수행할 수 있는 휴대용 전자장치가 제공되고 있다.Meanwhile, a portable electronic device capable of performing user authentication on a user by simultaneously receiving a biometric signal and a fingerprint has been provided.
본 발명이 해결하려는 과제는, 광학식 지문센서로부터 일부 생체신호정보에 관한 데이터를 수집하여, 다른 생체신호정보를 도출할 수 있는 생체신호정보 관리 방법을 제공하고자 하는 것이다.It is an object to be solved by the present invention to provide a biosignal information management method capable of deriving other biosignal information by collecting data on some biosignal information from an optical fingerprint sensor.
본 발명이 해결하려는 다른 과제는, 광학식 지문센서와 압력센서로부터 정확한 생체신호정보를 도출하고, 이를 관리할 수 있는 방법을 제공하고자 하는 것이다.Another problem to be solved by the present invention is to provide a method for deriving and managing accurate biosignal information from an optical fingerprint sensor and a pressure sensor.
본 발명의 과제들은 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems of the present invention are not limited to the technical problems mentioned above, and other technical problems that are not mentioned will be clearly understood by those skilled in the art from the following description.
상기 과제를 해결하기 위한 본 발명의 일 실시예에 따른 전자 장치는, 발광부 및 수광부를 포함하고, 상기 발광부에서 발생한 빛이 감지부에 위치한 생체에서 반사된 것을 상기 수광부에서 감지하여 지문의 패턴을 인식하는 광학식 지문센서부, 상기 광학식 지문센서부에 인접하게 위치하여 상기 생체가 상기 감지부에 가하는 압력을 측정하는 압력센서부, 및 상기 압력센서부의 측정 결과를 수신하여 상기 광학식 지문센서부의 동작을 제어하는 제어부를 포함하는 전자 장치에 있어서, 상기 광학식 지문센서부는, 상기 지문의 패턴뿐만 아니라 상기 생체의 생체정보를 얻기 위한 생체 데이터를 인식할 수 있고, 상기 압력센서부는, 상기 광학식 지문센서부가 상기 생체 데이터를 인식하는 동안 상기 감지부에 가해진 압력을 측정하고, 상기 제어부는, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하는지 판단한다.An electronic device according to an embodiment of the present invention for solving the above problem includes a light emitting unit and a light receiving unit, and the light receiving unit detects that the light generated from the light emitting unit is reflected from a living body located in the sensing unit, An optical fingerprint sensor unit that recognizes, a pressure sensor unit positioned adjacent to the optical fingerprint sensor unit to measure the pressure applied by the living body to the sensing unit, and an operation of the optical fingerprint sensor unit by receiving a measurement result of the pressure sensor unit In the electronic device comprising a control unit for controlling, wherein the optical fingerprint sensor unit can recognize not only the pattern of the fingerprint, but also biometric data for obtaining biometric information of the living body, and the pressure sensor unit includes the optical fingerprint sensor unit While recognizing the biometric data, the pressure applied to the sensing unit is measured, and the controller determines whether the measured pressure falls within a predetermined pressure range.
상기 압력센서부는, 타겟 메탈, 상기 타겟 메탈과 대향하는 코일, 및 상기 타겟 메탈과 상기 코일 사이의 거리가 변함에 따라 상기 코일의 인덕턴스 변화량을 감지하는 센싱부재를 포함할 수 있다.The pressure sensor unit may include a target metal, a coil facing the target metal, and a sensing member that detects a change in inductance of the coil as a distance between the target metal and the coil changes.
상기 압력센서부는, 상기 타겟 메탈과 상기 코일 사이에 위치하는 간격재를 더 포함할 수 있다.The pressure sensor unit may further include a spacer positioned between the target metal and the coil.
상기 코일는 상기 광학식 지문센서부를 둘러싸도록 형성될 수 있다.The coil may be formed to surround the optical fingerprint sensor unit.
상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면, 상기 광학식 지문센서부는, 상기 생체 데이터를 다시 인식하기 위한 준비 동작을 수행하도록 할 수 있다.When the controller determines that the measured pressure does not correspond to a predetermined pressure range, the optical fingerprint sensor unit may perform a preparation operation for recognizing the biometric data.
상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면, 상기 제어부는 상기 미리 정해진 압력 범위에 해당하는 압력을 가하기 위한 가이드 메시지 데이터를 생성할 수 있다.When the controller determines that the measured pressure does not correspond to a predetermined pressure range, the controller may generate guide message data for applying a pressure corresponding to the predetermined pressure range.
상기 제어부는, 상기 광학식 지문센서부가 상기 측정된 압력에서 인식한 생체 데이터가 상기 생체정보를 얻기에 적합한지 여부에 따라 상기 압력 범위를 변경할 수 있다.The control unit may change the pressure range according to whether the biometric data recognized by the optical fingerprint sensor unit is suitable for obtaining the biometric information.
상기 과제를 해결하기 위한 본 발명의 다른 실시예에 따른 전자 장치는, 상기 전자 장치에서 생체 인식 어플리케이션이 실행되고, 상기 생체 인식 어플리케이션은, 상기 광학식 지문센서부로부터 인식한 상기 생체 데이터를 수신하는 단계, 상기 생체 데이터 또는 상기 생체 데이터를 가공한 가공 데이터를 분석 서버로 전송하는 단계, 상기 분석 서버로부터 상기 분석 서버가 상기 생체 데이터 또는 상기 가공 데이터에 기반하여 생성한 생체정보를 수신하는 단계, 및 상기 생체정보에 기반한 표시데이터를 표시부로 전송하는 단계를 수행한다.In an electronic device according to another embodiment of the present invention for solving the above problem, a biometric recognition application is executed on the electronic device, and the biometric recognition application receives the biometric data recognized from the optical fingerprint sensor unit. , Transmitting the biometric data or processed data processed by the biometric data to an analysis server, receiving the biometric data or biometric information generated by the analysis server based on the processed data from the analysis server, and the A step of transmitting display data based on the biometric information to the display unit is performed.
상기 어플리케이션은, 상기 광학식 지문센서부의 센싱 조건을 제어할 수 있다.The application may control a sensing condition of the optical fingerprint sensor unit.
상기 센싱 조건은 상기 광학식 지문센서부의 샘플링 주파수, 파장 대역 및 광량 중 적어도 어느 하나일 수 있다.The sensing condition may be at least one of a sampling frequency, a wavelength band, and an amount of light of the optical fingerprint sensor unit.
상기 광학식 지문센서부는 상기 전자 장치의 표시 패널의 하부에 위치하고, 상기 발광부는 상기 표시 패널의 발광부를 겸할 수 있다.The optical fingerprint sensor part is located under the display panel of the electronic device, and the light emitting part may also serve as a light emitting part of the display panel.
기타 실시예의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Details of other embodiments are included in the detailed description and drawings.
본 발명의 실시예들에 의하면, 지문센서로부터 곧바로 수집될 수 없는 생체신호정보를 얻을 수 있고, 이를 관리할 수 있다.According to embodiments of the present invention, biosignal information that cannot be immediately collected from a fingerprint sensor can be obtained and managed.
또한, 압력센서로부터 정확한 생체신호정보를 얻을 수 있고, 이를 관리할 수 있다.In addition, accurate bio-signal information can be obtained from the pressure sensor, and it can be managed.
본 발명의 실시예들에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.Effects according to the embodiments of the present invention are not limited by the contents illustrated above, and more various effects are included in the present specification.
도 1은 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 사시도이다.
도 2는 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 블록도이다.
도 3은 도 1의 Ⅰ?-Ⅰ'선을 따라 자른 스마트폰의 단면을 개략적으로 도시한 단면도이다.
도 4는 본 발명의 몇몇 실시예에 따른 터치 압력 센서의 개념적인 단면도이다.
도 5는 다른 몇몇 실시예에 따른 스마트폰의 터치 압력 센서와 광학식 지문 센서(수광부)를 나타낸 분해 사시도이다.
도 6은 도 5의 Ⅱ?-Ⅱ'선을 따라 터치 압력 센서와 광학식 지문 센서(수광부)를 자른 단면도이다.
도 7은 일 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다.
도 8은 도 7의 생체신호정보 관리 시스템에서, 센싱조건을 제어하는 단계 및 센싱 데이터를 수신하는 단계를 나타낸 블록도이다.
도 9는 도 7의 가공 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다.
도 10는 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 생성하는 단계를 나타낸 블록도이다.
도 11은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 분석하는 단계를 나타낸 블록도이다.
도 12는 도 11의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다.
도 13은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다.
도 14는 도 7의 생체신호정보 관리 시스템에서, 생체신호정보로 변환하는 단계 및 생체신호정보를 제공받는 단계를 나타낸 블록도이다.
도 15는 PPG 및 SDPPG 파형을 나타낸 그래프이다.
도 16은 도 7의 생체신호정보 관리 시스템에서, 생체신호정보를 저장하고 표시하는 단계를 나타낸 블록도이다.
도 17은 도 16의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다.
도 18은 다른 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다.
도 19는 도 18의 센싱 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다.
도 20은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 분석하는 단계를 나타낸 블록도이다.
도 21은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다.
도 22는 도 18의 생체신호정보 관리 시스템에서, 생체신호정보로 가공 및 변환하는 단계를 나타낸 블록도이다.1 is a perspective view schematically showing a biosignal information management system according to an embodiment.
2 is a block diagram schematically illustrating a biosignal information management system according to an embodiment.
FIG. 3 is a schematic cross-sectional view of a smartphone taken along line I?-I' of FIG. 1.
4 is a conceptual cross-sectional view of a touch pressure sensor according to some embodiments of the present invention.
5 is an exploded perspective view illustrating a touch pressure sensor and an optical fingerprint sensor (a light receiving unit) of a smartphone according to some other exemplary embodiments.
6 is a cross-sectional view of a touch pressure sensor and an optical fingerprint sensor (light receiving unit) taken along line II?-II' of FIG. 5.
7 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to an exemplary embodiment.
FIG. 8 is a block diagram illustrating a step of controlling a sensing condition and a step of receiving sensing data in the biosignal information management system of FIG. 7.
9 is a flow chart showing in more detail the step of analyzing the processed data of FIG. 7.
10 is a block diagram showing a step of generating processed data in the biosignal information management system of FIG. 7.
11 is a block diagram showing a step of analyzing processed data in the biosignal information management system of FIG. 7.
12 is a plan view exemplarily illustrating a state of a display area in the step of FIG. 11.
13 is a block diagram showing in more detail the step of transmitting processed data in the biosignal information management system of FIG. 7.
FIG. 14 is a block diagram illustrating a step of converting into biosignal information and receiving biosignal information in the biosignal information management system of FIG. 7.
15 is a graph showing PPG and SDPPG waveforms.
FIG. 16 is a block diagram showing steps of storing and displaying biosignal information in the biosignal information management system of FIG. 7.
17 is a plan view illustrating a state of a display area in the step of FIG. 16 by way of example.
18 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to another embodiment.
FIG. 19 is a flow chart showing the steps of analyzing the sensing data of FIG. 18 in more detail.
20 is a block diagram illustrating a step of analyzing sensing data in the biosignal information management system of FIG. 18.
21 is a block diagram showing in more detail the step of transmitting sensing data in the biosignal information management system of FIG. 18.
22 is a block diagram showing steps of processing and converting bio-signal information into bio-signal information in the bio-signal information management system of FIG. 18;
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. Advantages and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but will be implemented in various forms different from each other, and only these embodiments make the disclosure of the present invention complete, and common knowledge in the art to which the present invention pertains. It is provided to completely inform the scope of the invention to those who have it, and the invention is only defined by the scope of the claims.
소자(elements) 또는 층이 다른 소자 또는 층의 "위(on)" 또는 "상(on)"으로 지칭되는 것은 다른 소자 또는 층의 바로 위뿐만 아니라 중간에 다른 층 또는 다른 소자를 개재한 경우를 모두 포함한다. 반면, 소자가 "직접 위(directly on)" 또는 "바로 위"로 지칭되는 것은 중간에 다른 소자 또는 층을 개재하지 않은 것을 나타낸다.When an element or layer is referred to as “on” or “on” of another element or layer, it is possible to interpose another layer or other element in the middle as well as directly above the other element or layer. All inclusive. On the other hand, when a device is referred to as "directly on" or "directly on", it indicates that no other device or layer is interposed therebetween.
비록 제1, 제2 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한 "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는다.Although the first, second, and the like are used to describe various components, it goes without saying that these components are not limited by these terms. These terms are only used to distinguish one component from another component. Therefore, it goes without saying that the first component mentioned below may be the second component within the technical idea of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In addition, terms such as "comprises" or "have" are intended to designate the presence of features, numbers, steps, actions, components, parts, or combinations thereof described in the specification, but one or more other features or numbers, The possibility of the presence or addition of steps, actions, components, parts, or combinations thereof is not precluded.
이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명한다. 도면상의 동일한 구성 요소에 대해서는 동일하거나 유사한 참조 부호를 사용한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The same or similar reference numerals are used for the same components in the drawings.
도 1은 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 사시도이다. 도 2는 일 실시예에 따른 생체신호정보 관리 시스템을 개략적으로 도시한 블록도이다.1 is a perspective view schematically showing a biosignal information management system according to an embodiment. 2 is a block diagram schematically illustrating a biosignal information management system according to an embodiment.
도 1을 참조하면, 생체신호정보 관리 시스템(1)은 전자장치 및 서버(2000)를 포함한다. 생체신호정보 관리 시스템(1)은 전자장치에 사용자로부터 입력된 정보를 서버(2000)를 통해 생체신호정보를 수집하고 관리한다.Referring to FIG. 1, the biosignal
전자장치와 서버(2000)는 일체로 구성되거나 독립적으로 구성될 수 있다. 일 실시예로 전자장치와 서버(2000)는 네트워크를 통해 서로 연결될 수 있다. 여기서 네트워크는 유선, 무선, 유무선 네트워크 중 적어도 하나를 포함할 수 있다. The electronic device and the
이하에서는 전자장치로서 유기발광 표시패널을 포함하는 스마트폰(1000)을 예로 들어 설명하기로 한다. 다만, 이에 제한되지 않고 발명의 사상을 변경하지 않는 한 표시패널을 포함하는 전자장치로서 노트북, 모니터, TV, 휴대폰, MP3 플레이어, 의료측정기기 및 웨어러블 디바이스와 HMD를 포함하는 각종 스마트 기기 등의 형태로 구현될 수 있다. 또한, 표시패널(210)은 유기발광 표시패널에 한정하지 않고, 액정 표시패널, 전계 방출 표시패널, 전기영동 표시패널, 양자점 발광 표시패널 또는 마이크로 LED 표시패널과 같은 다른 표시패널이 적용될 수 있다.Hereinafter, a
스마트폰(1000)은 표시 영역(DA)과 비표시 영역(NDA)을 포함한다.The
표시 영역(DA)은 화상을 표시하는 영역으로 정의된다. 또한, 표시 영역(DA)은 외부 환경을 검출하기 위한 검출 부재로도 사용될 수 있다. 예를 들어, 표시 영역(DA)의 적어도 일부 영역과 중첩하여 위치하는 지문 센싱 영역(SA)을 포함할 수 있다. 즉, 표시 영역(DA)은 영상을 표시하거나, 또는 지문 센싱 영역(SA)을 통해 사용자의 지문을 인식하는 영역으로 사용될 수 있다. The display area DA is defined as an area for displaying an image. Also, the display area DA may be used as a detection member for detecting an external environment. For example, a fingerprint sensing area SA positioned to overlap at least a partial area of the display area DA may be included. That is, the display area DA may be used as an area for displaying an image or for recognizing a user's fingerprint through the fingerprint sensing area SA.
비표시 영역(NDA)은 표시 영역(DA)의 외측에 배치되되, 화상이 표시되지 않는 영역으로 정의된다. 일 실시예로, 비표시 영역(NDA)에는 스피커 모듈, 카메라 모듈 및 센서 모듈 등이 배치될 수 있다. 여기서, 센서 모듈은 일 실시예로, 조도 센서, 근접 센서, 적외선 센서, 초음파 센서 중 적어도 하나를 포함할 수 있다.The non-display area NDA is disposed outside the display area DA, but is defined as an area in which an image is not displayed. In an embodiment, a speaker module, a camera module, and a sensor module may be disposed in the non-display area NDA. Here, as an example, the sensor module may include at least one of an illuminance sensor, a proximity sensor, an infrared sensor, and an ultrasonic sensor.
지문 센싱 영역(SA)은 지문 센서(222, 도 3 참조)와 중첩하는 영역으로 정의된다. 본 명세서에서, "제1 구성 및 제2 구성이 중첩된다"라고 표현하면, 제1 구성과 제2 구성이 스마트폰(1000)의 두께 방향으로 중첩되는 것을 의미한다. 도면상, 지문 센싱 영역(SA)은 표시 영역(DA)의 적어도 일부와 겹치도록 위치하는 것으로 도시하였으나, 이에 제한되는 것은 아니다. 예를 들어, 다른 실시예에서, 지문 센싱 영역(SA)은 비표시 영역(NDA)과 겹치도록 위치할 수도 있다.The fingerprint sensing area SA is defined as an area overlapping the fingerprint sensor 222 (refer to FIG. 3). In this specification, when expressed as "the first configuration and the second configuration overlap", it means that the first configuration and the second configuration are overlapped in the thickness direction of the
도 2를 참조하면, 스마트폰(1000)은 어플리케이션(10), 표시부(20), 지문센서부(50), 통신부(30), 및 저장부(40)를 포함한다.Referring to FIG. 2, the
어플리케이션(10)은 표시부(20), 지문센서부(50), 통신부(30) 및 저장부(40)를 제어하는 제어부(미도시)를 포함할 수 있다. 상기 제어부는 표시부(20), 지문센서부(50), 통신부(30) 및 저장부(40)를 제어를 제어하기 위한 명령어들을 포함할 수 있다.The
표시부(20)는 어플리케이션(10)이 제공하는 표시데이터 신호, 주사 신호 및 전원 신호에 의해 작동할 수 있다. 표시부(20)는 어플리케이션(10)이 제공하는 결과물에 기반한 표시데이터 신호를 사용자가 시각적으로 인식할 수 있도록 유기발광 표시장치의 표시영역에 표시하는 기능을 수행할 수 있다. The
지문센서부(50)는 사용자의 지문의 형상을 인식하고, 이를 디지털 신호로 변환한 센싱 데이터를 어플리케이션(10)에 제공할 수 있다. 뿐만 아니라, 지문센서부(50)는 생체의 생체정보를 얻기위한 생체 관련 원시 데이터를 인식할 수 있다. 지문센서부(50)는 발광부(발광 유닛(211), 도 3 참조) 및 수광부(광학식 지문센서(222), 도 3 참조)를 포함한다. 일 실시예로, 지문센서(222)는 광학식 지문센서(optical fingerprint sensor)일 수 있다. 광학식 지문센서에 관한 설명은 대한민국 공개특허공보 제10-2018-0005588호가 참조될 수 있다.The
압력센서부(60)는 외부로부터 가해지는 압력을 감지할 수 있다. 일 실시예로, 압력센서부(60)는 복수의 감지 전극을 포함할 수 있으며, 상기 복수의 감지 전극을 통해 획득되는 감지 신호를 기초로 외부의 터치 압력 크기를 산출할 수 있다.The
일 실시예로, 압력센서부(60)는 지문센서부가 상기 생체 데이터를 인식하는 동안 상기 감지부에 가해진 압력을 측정해 이를 어플리케이션(10)에 제공할 수 있다. 이를 바탕으로 어플리케이션(10)은 측정된 압력이 미리 정해진 압력 범위에 해당하는지 판단할 수 있다.In one embodiment, the
통신부(30)는 어플리케이션(10)의 제어에 따라 어플리케이션(10)이 제공하는 정보를 서버(2000)로 전송하고, 서버(2000)가 전송한 데이터를 수신하여 어플리케이션(10)에 전송할 수 있다. 통신부(30)는 LAN, WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), Wi-Fi(Wireless Fidelity) Direct 과 같은 통신 모듈 및/또는 블루투스, NFC나, RFID와 같은 근거리 통신 모듈을 포함할 수 있다. 일 실시예에서, 통신부(30)는 상술한 통신 모듈 중 적어도 하나를 통해 네트워크에 연결되고, 궁극적으로 서버(2000)와 통신할 수 있다.The
저장부(40)는 어플리케이션(10)의 제어에 따라 데이터를 저장한다. 저장부(40)는 저장 장치로서, 하드 디스크 드라이브(HDD, Hard Disk Drive)와 같이 자기 디스크에 데이터를 저장하는 장치, 솔리드 스테이트 드라이브(SSD, Solid State Drive), 메모리 카드 등과 같이 반도체 메모리, 특히 불휘발성 메모리에 데이터를 저장하는 장치를 포함할 수 있다.The
도시하진 않았지만, 스마트폰(1000)은 프로세서 및 전원부 등을 더 포함할 수 있고, 이들은 어플리케이션(10)에 의해 제어될 수 있다.Although not shown, the
서버(2000)는 스마트폰(1000)이 제공하는 데이터를 저장하고 분석한다. 일 실시예로, 서버(2000)는 생체신호정보를 분석하는 분석 서버(2000)일 수 있다. 명확하게 도시하진 않았지만, 서버(2000)는 스마트폰(1000)과 별도로 통신부와 저장부를 포함할 수 있다.The
일 실시예로, 서버(2000)는 스마트폰(1000)이 제공하는 데이터를 가지고 적어도 하나의 생체신호정보를 도출할 수 있다. 또한, 서버(2000)는 도출된 생체신호정보를 서버(2000)의 저장부에 저장할 수 있고, 서버(2000)의 통신부와 네트워크를 통해 생세신호정보를 스마트폰(1000)에 제공할 수 있다. 서버(2000)는 스마트폰(1000)과 별도의 공간에서 실시될 수 있다. 예를 들어, 서버(2000)는 어플리케이션(10) 서비스를 제공하는 제공자의 의도에 따른 장소에서 실시될 수 있다. 몇몇 실시예에서, 스마트폰(1000)의 사용자와 서버(2000)를 제공하는 자는 서로 다를 수 있지만, 이에 제한되는 것은 아니다.In an embodiment, the
설명의 편의상, 도면에서 서버(2000)를 하나의 서버(2000) 형태로 이루어지는 것으로 도시하였으나, 이에 의해 본 발명이 한정되는 것은 아니며, 서버(2000)는 각 두개 이상의 서버(2000) 군 형태로 실시되는 것이 가능하며, 상기 유추 가능한 모든 실시 방법을 포함하여 이루어질 수 있다. 또한, 서버(2000)는 별도의 중계 서버(2000)를 통해 스마트폰(1000)과 통신할 수도 있다.For convenience of explanation, the
다음으로, 도 3을 결부하여, 스마트폰(1000)의 구성 및 배치관계에 관하여 설명한다.Next, referring to FIG. 3, a configuration and arrangement relationship of the
도 3은 도 1의 Ⅰ?-Ⅰ'선을 따라 자른 스마트폰의 단면을 개략적으로 도시한 단면도이다.FIG. 3 is a schematic cross-sectional view of a smartphone taken along line I?-I' of FIG. 1.
도 3을 참조하면, 스마트폰(1000)은 발광 유닛(211), 터치 감지 유닛(212), 커버 글래스(213), 터치 압력 센서(221) 및 광학식 지문센서(222)를 포함한다. Referring to FIG. 3, the
발광 유닛(211), 터치 감지 유닛(212), 커버 글래스(213) 및 터치 압력 센서(221) 중 적어도 일부는 각각 다른 구성과 연속공정을 통해 형성되거나, 다른 구성과 접착부재를 통해 결합된 구성일 수 있다. 예를 들어, 발광 유닛(211), 터치 감지 유닛(212), 커버 글래스(213) 및 터치 압력 센서(221) 중 다른 구성과 접착부재를 통해 결합된 구성은 베이스면을 제공하는 베이스층, 예컨대 합성수지 필름, 복합재료 필름, 유리 기판 등을 포함하지만, 다른 구성과 연속공정을 통해 형성된 구성은 상기 베이스층이 생략될 수 있다.At least some of the
발광 유닛(211)은 명확히 도시하진 않았지만, 투명 베이스 기판, TFT 회로층 및 발광 소자층이 차례로 적층된 구조일 수 있다.The light-emitting
상기 발광 소자층은 복수의 발광 소자를 포함한다. 일 실시예에서, 발광 소자는 유기발광 다이오드일 수 있다. 예를 들어, 복수의 발광 소자는 적색 광을 발광하는 적색의 유기발광 다이오드, 녹색 광을 발광하는 녹색의 유기발광 다이오드 및 청색광을 발광하는 청색의 유기발광 다이오드를 포함할 수 있다. 이러한 발광 소자는 후술할 지문센서부의 발광부를 겸하는 것일 수 있다.The light emitting device layer includes a plurality of light emitting devices. In one embodiment, the light emitting device may be an organic light emitting diode. For example, the plurality of light emitting devices may include a red organic light emitting diode emitting red light, a green organic light emitting diode emitting green light, and a blue organic light emitting diode emitting blue light. This light-emitting device may also serve as a light-emitting part of the fingerprint sensor unit to be described later.
발광 유닛(211)의 일면 상에 터치 감지 유닛(212)이 배치된다. 터치 감지 유닛(212)은 복수의 감지전극을 포함한다. 감지전극은 몰리브덴(Mo), ITO(indium tin oxide), IZO(indium zinc oxide), ZnO(zinc oxide), ITZO(indium tin zinc oxide) 등과 같은 투명한 도전성 산화물을 포함할 수 있다. 터치 감지 유닛(212)은 셀프 캡(self-cap) 또는 뮤추얼 캡(mutual-cap)방식으로 터치 인식을 감지할 수 있다.The touch sensing unit 212 is disposed on one surface of the
터치 감지 유닛(212) 상에 커버 글래스(213)가 배치된다. 몇몇 실시예에서, 스마트폰(1000)은 터치 감지 유닛(212)과 커버 글래스(213) 사이에 개재된 편광자 또는 컬러필터를 더 포함할 수 있다.A
커버 글래스(213)는 외부의 스크래치 등으로부터 발광 유닛(211)의 발광 소자층이나 TFT 회로층 및 터치 감지 유닛(212)을 보호할 수 있다. 사용자는 커버 글래스(213)에 손가락(3000) 등을 터치하여 스마트폰(1000)에 명령을 입력할 수 있다.The
일 실시예로, 발광 유닛(211), 터치 감지 유닛(212) 및 커버 글래스(213)는 스마트폰(1000)의 유기발광 표시패널을 구성할 수 있다.In one embodiment, the
발광 유닛(211)의 하부에 광학식 지문센서(222)가 배치될 수 있다.An
광학식 지문센서(222)는 지문센서부(50)의 일 구성요소에 해당한다. 광학식 지문센서(222)는 표시패널(210)의 하부에 위치할 수 있다. The
일 실시예로, 광학식 지문센서(222)는 발광부(예를 들어, 발광 유닛(211)의 유기발광 다이오드)에서 발광되어 생체에서 반사된 광을 센싱하는 수광부일 수 있다. 예를 들어, 광학식 지문센서(222)는 손가락(3000) 지문의 융선과 융선 사이의 골에 의해 반사된 광을 센싱할 수 있다. 광학식 지문센서(222)는 광 감지 엘리먼트들를 통해 센싱함으로써 지문을 인식할 수 있는 지문 데이터를 제공할 수 있다.In one embodiment, the
명확히 도시하진 않았지만, 광학식 지문센서(222)는 복수의 광-차단 구조물들 및 복수의 광 감지 엘리먼트들을 포함한다. Although not clearly shown, the
광학식 지문센서(222)는 반도체 칩 또는 반도체 패키지로 구현되어 투명 기판에 부착될 수 있다. 일 실시예로, 광 감지 엘리먼트는 다수의 광전 변환 소자(예컨대, 포토 다이오드, 포토트랜지스터, 포토 게이트 및 핀드 포토 다이오드 등)들이 형성된 반도체 층(Layer) 또는 반도체 칩으로 구현될 수 있다. 일 실시예에 따라, 광 감지 엘리먼트는 CIS(CMOS Image Sensor) 또는 CCD(Charge Coupled Device)와 같은 이미지 센서가 구현된 반도체 레이어일 수 있다.The
한편, 광학식 지문센서(222)는 지문을 인식할 수 있는 데이터를 센싱할 수 있을 뿐만 아니라, 생체정보가 도출될 수 있는 데이터를 센싱할 수 있다. 지문을 인식할 수 있는 데이터와 생체정보가 도출될 수 있는 데이터는 광학식 지문센서(222)가 센싱하는 지문센싱 데이터에 포함될 수 있다. 예를 들어, 지문센싱 데이터는 광용적맥파(Photoplethysmography, 이하 PPG) 파형뿐만 아니라 지문형태 등이 도출될 수 있는 다양한 원시 데이터(RAW DATA)를 포함할 수 있다.Meanwhile, the
특히, 지문센싱 데이터는 유기발광 다이오드로부터 출사하는 적색 광, 녹색 광 또는 청색 광이 손가락의 혈관에 반사되는 빛을 광학식 지문센서(222)가 센싱하여 얻을 수 있다. 예를 들어, PPG데이터는 사용자의 심장박동 시 혈류가 증가하면 유기발광 다이오드로부터 출사된 녹색 광이 손가락의 혈관으로부터 반사되는 빛의 양이 줄어드는 점을 이용해서 측정할 수 있고, 광학식 지문센서(222)는 이와 관련된 지문센싱 데이터를 얻을 수 있다.In particular, the fingerprint sensing data may be obtained by sensing the light reflected from the red light, green light, or blue light emitted from the organic light-emitting diode to the blood vessel of the finger, by the
발광 유닛(211) 및 광학식 지문센서(222)의 하부에 터치 압력 센서(221)가 배치될 수 있다. 터치 압력 센서(221)는 외부로부터 가해지는 압력을 감지할 수 있다. 터치 압력 센서(221)는 압력센서부(60)의 일 구성요소에 해당한다. 터치 압력 센서(221)는 외부로부터 가해지는 압력의 크기를 산출하기위한 압력센싱 데이터를 센싱할 수 있다. 압력센싱 데이터는 압력의 크기가 산출되도록 하는 다양한 원시 데이터(RAW DATA)를 포함할 수 있다.The
터치 압력 센서(221)는 다양한 방식으로 압력을 측정할 수 있다. 예를 들어, 터치 압력 센서(221)는 두 전극 사이의 커패시턴스의 변화량을 감지하여 압력을 측정할 수 있다. 또한, 터치 압력 센서(221)는 타겟 전극와 코일 사이의 인덕턴스 변화량을 감지하여 압력을 측정할 수 있다.The
압력을 감지할 수 있는 압력 감지 영역은 지문 감지 영역(SA)과 동일한 영역에 위치할 수 있다. 다만, 이에 제한되는 것은 아니며, 다른 실시예에서, 상기 압력 감지 영역은 표시 영역(DA)과 서로 중첩하며, 스마트폰(1000)의 표시 영역(DA)과 동일한 영역에 위치할 수도 있다.The pressure sensing region capable of sensing pressure may be located in the same region as the fingerprint sensing region SA. However, the present invention is not limited thereto, and in another embodiment, the pressure sensing area may overlap the display area DA and may be located in the same area as the display area DA of the
다음으로, 도 4 내지 도 6을 결부하여 터치 압력 센서로서 적용 가능한 실시예들에 대해 설명한다.Next, embodiments applicable as a touch pressure sensor will be described with reference to FIGS. 4 to 6.
도 4는 본 발명의 몇몇 실시예에 따른 터치 압력 센서의 개념적인 단면도이다. 도 4를 참조하여, 본 발명의 터치 압력 센서에 대해 대략적으로 설명하도록 한다.4 is a conceptual cross-sectional view of a touch pressure sensor according to some embodiments of the present invention. With reference to FIG. 4, the touch pressure sensor of the present invention will be described in outline.
도 4를 참조하면, 터치 압력 센서(221)는 맨 하부에 위치하는 하부막(111), 하부막(111) 위에 위치하고 코일(1122)이 위치하는 코일층(112), 코일층(112) 위에 위치하는 타겟 메탈(113), 그리고 코일층(112)과 타겟 메탈(113) 사이에 위치하는 간격재(114)를 구비한다.Referring to FIG. 4, the
하부막(111)과 타겟 메탈(113)은 각각 판 형태로 이루어져 있고, 코일층(112)을 사이에 두고 서로 반대편에서 대응되게 위치하고 있다.The
이때, 하부막(111)은 전도성이 높은 물질이나 전도성이 낮고 유전율 이 높은 물질로 이루어져 있다.At this time, the
이때, 전도성이 높은 물질은 알루미늄(Al)이나 구리(Cu)와 같은 금속일 수 있다. 또한, 전도성이 낮고 유전율이 높은 물질은 폴리이미드(polyimid), PET(polyethylene terephthalate) 또는 EMI(Electro Magnetic Interference) 차폐를 위해 사용되는 물질일 수 있다. In this case, the material having high conductivity may be a metal such as aluminum (Al) or copper (Cu). In addition, a material having low conductivity and high dielectric constant may be a material used for shielding polyimide, polyethylene terephthalate (PET), or electromagnetic interference (EMI).
경우에 따라, 하부막(111)은 복수의 슬릿 등이 형성되어 이격된 형태로 형성되어 와전류의 발생이 억제될 수 있다. 이러한 하부막(111)은 필요에 따라 생략될 수 있다.In some cases, the
또한, 타겟 메탈(113)은 알루미늄(Al)이나 구리(Cu)와 같은 금속으로 이루어지는 도전막일 수 있다.In addition, the
코일층(112)에 위치한 코일(1122)로 교류 전류가 인가되어 발생하는 자기장에 따라 하부막(111)과 타겟 메탈(113)에는 와전류인 유도 전류가 발생한다. 그러나 상술한 것과 같이, 하부막(111)에 발생하는 와전류는 최대한 억제될 수 있다.An induced current, which is an eddy current, is generated in the
따라서, 본 예의 터치 압력 센서(221)는 이러한 유도 전류의 세기 변화를 이용한 것으로서, 인덕턴스 포스 센서(inductive force sensor)의 동작 개념을 사용할 수 있다.Accordingly, the
타겟 메탈(113)은 간격재(114)에 의해 간격재(114)의 두께만큼 하부에 위치한 코일층(112)의 해당 코일(1122)과 이격되어 있다. 간격재(114) 역시 자신의 하부면과 상부면에 도포된 접착체 등을 통해 이들과 각각 접하는 코일층(112) 및 타겟 메탈(113)의 해당 부분에 안정적으로 위치할 수 있다.The
코일층(112)의 상부에 위치하는 타겟 메탈(113)은 코일(1122)과 대향하는 타겟 메탈을 포함할 수 있다. 타겟 메탈은 금속 물질뿐만 아니라 ITO와 같은 도전성 물질로도 이루어질 수 있다. 타겟 메탈(113)은 도 6과 같이, 하부에 위치하고 있는 코일층(112) 전체를 덮고 있는 판 형태로 이루어질 수 있다.The
이러한 타겟 메탈(113)은 상부에 위치하는 유기발광 표시패널과 터치 압력 센서(221)를 구분하며, 유기발광 표시패널의 터치 동작에 따라 인가되는 물리적인 힘에 비례하게 휘어진다. 따라서, 터치 지점에서 타겟 메탈(113)과 코일층(112) 간의 이격 거리가 감소하여 코일(1122)의 인덕턴스가 변한다. The
따라서, 본 예의 터치 압력 센서(221)는 유기발광 표시패널로 인가되는 물리적인 힘과 비례하여 변하는 인덕턴스의 크기를 감지해 Z축 방향으로의 터치 정도를 판정한다.Accordingly, the
하부막(111)과 타겟 메탈(113) 사이에 위치하는 코일층(112)은 기판(1121)과 기판(1121)의 상부면과 하부면에 위치하는 코일(1122)을 구비한다.The
기판(1121)의 상부면과 하부면에 위치하고 있는 코일(1122)은 사각형과 같은 다각형 형태로 배치되어 있고, 외부로부터 교류 전류를 인가받는다.The
코일(1122)은 서로 연결되어 있는 입력단과 출력단을 갖고 있고 금속과 같은 도전 물질로 이루어져 있는 하나의 긴 선(line)이다.The
이러한 코일(1122)은, 이미 기술한 것처럼, 기판(1121)의 하부면과 상부면 각각의 해당 위치에 정해진 형상으로 배치된다.As described above, the
도 5는 다른 몇몇 실시예에 따른 스마트폰의 터치 압력 센서와 광학식 지문 센서(수광부)를 나타낸 분해 사시도이다. 도 6은 도 5의 Ⅱ-Ⅱ'선을 따라 터치 압력 센서와 광학식 지문 센서(수광부)를 자른 단면도이다.5 is an exploded perspective view illustrating a touch pressure sensor and an optical fingerprint sensor (a light receiving unit) of a smartphone according to some other exemplary embodiments. 6 is a cross-sectional view of a touch pressure sensor and an optical fingerprint sensor (a light receiving unit) taken along line II-II' of FIG. 5.
도 5 및 도 6을 참조하면, 본 예에 따른 터치 압력 센서(221)는 인덕턴스 포스 터치 센서(inductive force touch sensor)의 개념을 이용하는 터치센서 모듈이다.5 and 6, the
인덕턴스 포스 터치 센서는 나선형으로 감겨 있는 나선형 코일과 금속 등으로 이루어져 있고 코일 위에 위치하는 도전체 사이의 간격 변화에 따라 변하는 인덕턴스(inductance)를 이용하여 터치 지점에 발생하는 압력(즉 터치 여부)을 감지하는 촉각 센서이다. 터치 압력 센서(221)는 인덕턴스의 변화를 감지하는 센싱부재(미도시)를 포함할 수 있다.The inductance force touch sensor is composed of a spiral coil wound in a spiral form and metal, and detects the pressure (that is, whether or not it is touched) generated at the touch point by using inductance that changes according to the change in the distance between the conductors located on the coil. It is a tactile sensor. The
터치 압력 센서(221)는 적어도 하나의 코일(1122), 코일(1122) 위에 위치하는 간격재(114), 그리고 간격재(114) 위에 위치하는 타겟 메탈(113)을 구비할 수 있다. The
일 실시예로, 터치 압력 센서(221)는 광학식 지문 센서 위에 배치될 수 있다. 이 경우, 코일(1122)은 광학식 지문 센서(222)의 지문 센싱 기판(120) 상에 배치될 수 있다. 지문 센싱 기판은 터치 압력 센서(221)의 하부막의 기능을 수행할 수도 있다.In an embodiment, the
광학식 지문 센서(222)는 지문 센싱 기판(120) 상에 배치되는 지문 센서(수광부, 120)을 포함할 수 있다. 지문 센서(120)는 터치 압력 센서(221)의 코일(1122)에 의해 둘러싸이도록 형성될 수 있다. The
이하, 도 7 내지 도 17을 결부하여 생체신호정보 관리 시스템(1)이 생체신호정보를 관리하는 방법에 대해 설명한다.Hereinafter, a method by which the biosignal
도 7은 일 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다. 도 8은 도 7의 생체신호정보 관리 시스템에서, 센싱조건을 제어하는 단계 및 센싱 데이터를 수신하는 단계를 나타낸 블록도이다. 도 9는 도 7의 가공 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다. 도 10은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 생성하는 단계를 나타낸 블록도이다. 도 11은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 분석하는 단계를 나타낸 블록도이다. 도 12는 도 11의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다. 도 13은 도 7의 생체신호정보 관리 시스템에서, 가공 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다. 도 14는 도 7의 생체신호정보 관리 시스템에서, 생체신호정보로 변환하는 단계 및 생체신호정보를 제공받는 단계를 나타낸 블록도이다. 도 15는 PPG 및 SDPPG 파형을 나타낸 그래프이다. 도 16은 도 7의 생체신호정보 관리 시스템에서, 생체신호정보를 저장하고 표시하는 단계를 나타낸 블록도이다. 도 17은 도 16의 단계에서 표시 영역의 상태를 예시적으로 도시한 평면도이다.7 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to an exemplary embodiment. FIG. 8 is a block diagram illustrating a step of controlling a sensing condition and a step of receiving sensing data in the biosignal information management system of FIG. 7. 9 is a flow chart showing in more detail the step of analyzing the processed data of FIG. 7. 10 is a block diagram illustrating a step of generating processed data in the biosignal information management system of FIG. 7. 11 is a block diagram showing a step of analyzing processed data in the biosignal information management system of FIG. 7. 12 is a plan view exemplarily illustrating a state of a display area in the step of FIG. 11. 13 is a block diagram showing in more detail the step of transmitting processed data in the biosignal information management system of FIG. 7. FIG. 14 is a block diagram illustrating a step of converting into biosignal information and receiving biosignal information in the biosignal information management system of FIG. 7. 15 is a graph showing PPG and SDPPG waveforms. FIG. 16 is a block diagram showing steps of storing and displaying biosignal information in the biosignal information management system of FIG. 7. 17 is a plan view illustrating a state of a display area in the step of FIG. 16 by way of example.
도 7을 참조하면, 생체신호정보 관리 시스템(1)이 생체신호정보를 관리하는 방법은 센싱조건을 제어하는 단계(S100), 센싱 데이터를 수신하는 단계(S200), 가공 데이터를 생성하는 단계(S300), 가공 데이터를 분석하는 단계(S400), 가공 데이터를 전송하는 단계(S500), 생체신호정보로 변환하는 단계(S600), 생체신호정보를 제공받는 단계(S700) 및 생체신호정보를 저장하고 표시하는 단계(S800)를 포함한다. Referring to FIG. 7, the method of managing the biosignal information by the biosignal
본 명세서에서, 순서도에 따라 각 단계가 차례로 수행되는 것으로 설명하지만, 발명의 사상을 변경하지 않는 한, 각 단계의 순서가 변경되거나, 일부 단계가 생략되거나 또는 각 단계사이에 다른 단계가 더 포함될 수 있음은 자명하다.In this specification, it is described that each step is performed sequentially according to a flow chart, but the order of each step is changed, some steps are omitted, or other steps may be further included between each step unless the spirit of the invention is changed. It is self-evident.
먼저, 도 8을 참조하여, 생체신호정보 관리 시스템(1)에서, 센싱조건을 제어하는 단계(S100) 및 센싱 데이터를 수신하는 단계(S200)에 대해 설명한다.First, with reference to FIG. 8, in the biosignal
센싱조건을 제어하는 단계(S100)는 어플리케이션(10)이 지문센서부(50) 및 압력센서부(60)의 센싱조건을 제어하는 단계(S100)에 해당한다. The step of controlling the sensing condition (S100) corresponds to the step (S100) of controlling the sensing conditions of the
센싱조건을 제어하는 단계(S100)에서, 어플리케이션(10)은 생체정보가 도출될 수 있는 지문센싱 데이터와 압력센싱 데이터를 수집하기 위해 지문센서부(50)와 압력센서부(60)를 제어할 수 있다. 예를 들어, 어플리케이션(10)은 구동시간 제어과정, 샘플링 주파수 제어과정, 파장 대역 제어과정 및 광량 제어과정 중 적어도 하나를 포함하는 제어 방법을 포함할 수 있다.In the step of controlling the sensing condition (S100), the
지문센서부(50)가 지문만을 인식하기 위해, 지문센싱 데이터를 수집에 비교적 짧은 시구간이 요구될 수 있다. 한편, 어플리케이션(10)이 생체정보를 얻기 위해서, 지문센서부(50)가 보다 긴 시구간 동안 지문센싱 데이터를 수집하도록 하기 위해 구동시간을 제어할 수 있다.In order for the
어플리케이션(10)은 생체정보의 종류마다 인식하기 위한 광 주파수 대역이 다를 수 있기 때문에, 지문센서부(50)가 센싱하고자 하는 샘플링 주파수를 제어할 수 있다. 예를 들어, PPG(Photoplethysmography) 관련 데이터 등이 도출되도록 하는 주파수 대역에 맞추어 지문센서부(50)의 샘플링 주파수를 제어할 수 있다.Since the
마찬가지로, 어플리케이션(10)은 생체정보의 종류마다 인식하기 위한 광의 파장 대역 및 광량이 다를 수 있기 때문에, 지문센서부(50)가 센싱하고자 하는 파장 대역과 광량을 제어할 수 있다. 예를 들어, PPG(Photoplethysmography) 파형 등이 도출되도록 하는 파장 대역 및 광량에 맞추어 지문센서부(50)의 파장 대역 및 광량을 제어할 수 있다.Likewise, the
한편, 사람마다 손가락 표피의 두께가 다르고, 사람마다 터치의 세기가 다르므로, 정확한 PPG관련 데이터를 얻기 위해 적정한 세기의 터치 압력이 요구될 수 있다. 예를 들어, 터치의 압력이 센 사용자의 경우, 손가락 터치 부위의 혈류량이 기준값보다 낮을 수 있고, 터치의 압력이 약한 사용자의 경우, 손가락 터치 부위의 혈류량이 기준값보다 높거나 데이터 측정이 어려울 수 있다.Meanwhile, since the thickness of the skin of the finger is different for each person and the intensity of the touch is different for each person, a touch pressure of an appropriate intensity may be required to obtain accurate PPG-related data. For example, in the case of a user with a strong touch pressure, the blood flow at the finger touch region may be lower than the reference value, and in the case of a user with a weak touch pressure, the blood flow at the finger touch region may be higher than the reference value or it may be difficult to measure data. .
어플리케이션(10)은 압력센서부(60)를 제어하여 사용자로부터 적정한 세기의 터치 압력을 유도하여 정확한 PPG관련 데이터를 얻을 수 있다. 따라서, 센싱조건을 제어하는 단계(S100)에서, 어플리케이션(10)은 지문센서부(50)가 압력센싱 데이터를 수집하도록 압력센서부(60)의 센싱조건을 제어할 수 있다.The
센싱 데이터를 수신하는 단계(S200)는 어플리케이션(10)이 지문센서부(50) 및 압력센서부(60)로부터 각각 지문센싱 데이터 및 압력센싱 데이터를 수신하는 단계(S200)에 해당한다. 센싱 데이터를 수신하는 단계(S200)에서, 어플리케이션(10)은 지문센서부(50)가 수집한 지문센싱 데이터와 압력센서부(60)가 수집한 압력센싱 데이터를 어플리케이션(10)으로 전송하도록 하고 이를 수신할 수 있다.The step of receiving sensing data (S200) corresponds to a step (S200) of receiving, by the
다음으로, 도 9 내지 도 12를 참조하여, 가공 데이터를 생성하는 단계(S300) 및 가공 데이터를 분석하는 단계(S400)에 대해 설명한다.Next, with reference to FIGS. 9 to 12, the step of generating the processed data (S300) and the step of analyzing the processed data (S400) will be described.
가공 데이터를 생성하는 단계(S300)는 어플리케이션(10)이 지문센싱 데이터 및 압력센싱 데이터를 가공하여 지문가공 데이터와 압력가공 데이터를 생성하는 단계에 해당한다.The step of generating the processed data (S300) corresponds to a step in which the
가공 데이터를 생성하는 단계(S300)에서, 어플리케이션(10)은 지문센싱 데이터를 가공하여 생체정보 도출과 직접 관련된 지문가공 데이터를 얻을 수 있다. 어플리케이션(10)은 압력센싱 데이터를 가공하여 지문가공 데이터를 신뢰할 수 있는지 판단하도록 하는 압력가공 데이터를 얻을 수 있다. 예를 들어, 어플리케이션(10)은 원시 데이터 중 필요한 데이터만을 남기고 필터링 하고 이를 지문가공 데이터나 압력가공 데이터로 가공할 수 있다. 지문가공 데이터와 압력가공 데이터는 생체정보와 관련된 아날로그 신호 또는 디지털 신호를 포함할 수 있다.In the step of generating the processed data (S300), the
가공 데이터를 분석하는 단계(S400)는 어플리케이션(10)이 지문가공 데이터와 압력가공 데이터를 분석하는 단계에 해당한다.Analyzing the processing data (S400) corresponds to a step in which the
가공 데이터를 분석하는 단계(S400)는 어플리케이션(10)이 가공된 지문가공 데이터가 신뢰할 수 있는지 판단하는 단계일 수 있다. 어플리케이션(10)은 지문가공 데이터가 생체신호정보로 변환할 수 있는 데이터들을 포함하고 있는지를 판단할 수 있다. 어플리케이션(10)은 터치의 세기가 얼마만큼인지, 압력이 가해진 면적이 어떠한지 등의 정보가 담긴 압력가공 데이터로부터 지문가공 데이터를 신뢰할 수 있는지 판단할 수 있다. The step of analyzing the processed data (S400) may be a step of determining whether the fingerprint processed data processed by the
한편, 가공 데이터를 분석하는 단계(S400)는 복수의 세부단계를 포함할 수 있다. 가공 데이터를 분석하는 단계(S400)는 제1차 가공 데이터를 분석하는 단계(S410), 지문인식 재요청을 표시하는 단계(S420), 제2차 센싱조건을 제어하는 단계(S430), 제2차 센싱 데이터를 수신하는 단계(S440) 및 제2차 가공 데이터를 생성하는 단계(S450)를 포함할 수 있다.Meanwhile, the step S400 of analyzing the processed data may include a plurality of detailed steps. Analyzing the processed data (S400) includes analyzing the first processed data (S410), displaying a fingerprint recognition re-request (S420), controlling the second sensing condition (S430), and the second It may include receiving the difference sensing data (S440) and generating the second processing data (S450).
제1차 가공 데이터를 분석하는 단계(S410)는 어플리케이션(10)이 제1차 지문가공 데이터 및 제1차 압력가공 데이터를 분석하는 단계에 해당한다. 제1차 가공 데이터를 분석하는 단계(S410)에서 앞서 상술한 1차로 어플리케이션(10)이 가공된 지문가공 데이터가 신뢰할 수 있는지 판단하는 단계일 수 있다.Analyzing the first processing data (S410) corresponds to a step in which the
지문인식 재요청을 표시하는 단계(S420)는 어플리케이션(10)이 표시부(20)를 통해 지문인식 재요청을 표시하는 단계(S420)에 해당한다.The step (S420) of displaying the fingerprint recognition re-request corresponds to the step (S420) of displaying the fingerprint re-request by the
지문인식 재요청을 표시하는 단계(S420)에서, 어플리케이션(10)은 제1차 지문가공 데이터가 신뢰할 수 없다고 판단되면, 사용자에게 지문인식을 재요청할 수 있다. 이때, 어플리케이션(10)은 사용자에게 지문인식을 다시 요청하는 표시 데이터를 표시부(20)에 전송하고, 표시부(20)는 이를 표시할 수 있다.In the step of displaying the fingerprint recognition re-request (S420), if the
제2차 센싱조건을 제어하는 단계(S430)는 어플리케이션(10)이 제2차로 지문센서부(50) 및 압력센서부(60)의 센싱조건을 제어하는 단계에 해당한다.The step of controlling the second sensing condition (S430) corresponds to a step in which the
제2차 센싱조건을 제어하는 단계(S430)에서, 어플리케이션(10)이 사용자의 터치압력이 기준 값보다 약한 경우에 수집되는 데이터들이 제1차 지문가공 데이터 및 제1차 압력 가공 데이터에 포함된 경우, 도 12의 (a)와 같이 표시부(20)에 표시하도록 표시부(20)를 제어할 수 있다. In the step of controlling the second sensing condition (S430), the data collected when the user's touch pressure is weaker than the reference value are included in the first fingerprint processing data and the first pressure processing data. In this case, the
또한, 어플리케이션(10)이 사용자의 터치압력이 기준 값보다 강한 경우에 수집되는 데이터들이 제1차 지문가공 데이터 및 제1차 압력 가공 데이터에 포함된 경우, 도 12의 (b)와 같이 표시부(20)에 표시하도록 표시부(20)를 제어할 수 있다.In addition, when the
즉, 어플리케이션(10)은 신뢰할 수 있는 지문가공 데이터를 얻도록, 사용자로 하여금 터치의 세기를 세게 또는 약하게 하도록 유도할 수 있다.That is, the
한편, 제2차 센싱조건을 제어하는 단계(S430)는 상술한 방법에 의해 압력센서부(60)의 센싱조건을 제어하는 것에 한정되지는 않는다.Meanwhile, the step of controlling the second sensing condition (S430) is not limited to controlling the sensing condition of the
몇몇 실시예의 제2차 센싱조건을 제어하는 단계(S430)에서, 어플리케이션(10)이 압력센서부(60)가 터치 압력의 센싱 범위를 조절하도록 제어할 수 있다.In the step S430 of controlling the second sensing condition of some embodiments, the
예를 들어, 과거 데이터들에 의해 평가된 일반적인 사용자의 터치 압력 센싱 범위와 다른 범위를 갖도록, 어플리케이션(10)이 압력센서부(60)가 터치 압력의 센싱 범위를 조절할 수 있다. 몇몇 실시예에서, 제1차 압력가공 데이터를 기반으로 수집된 제1차 지문 가공데이터가 생체신호정보를 얻을 수 있는 데이터를 포함하고 있지 않을 수 있다. 이 경우, 어플리케이션(10)은 제2차 압력가공 데이터를 얻기 위해 압력센서부(60)를 제어하고, 어플리케이션(10)이 압력센서부(60)가 기존과 다른 터치 압력의 센싱 범위를 갖도록 변경하여, 제2차 압력가공 데이터와 제2차 지문가공 데이터를 수집할 수 있다.For example, the
제2차 센싱 데이터를 수신하는 단계(S440)는 어플리케이션(10)이 지문센서부(50) 및 압력센서부(60)로부터 각각 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 수신하는 단계에 해당한다. In the step of receiving the second sensing data (S440), the
제2차 센싱 데이터를 수신하는 단계(S440)에서 어플리케이션(10)은 지문센서부(50) 및 압력센서부(60)로부터 각각 새로 센싱한 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 수신할 수 있다.In the step of receiving the second sensing data (S440), the
제2차 가공 데이터를 생성하는 단계(S450)는 어플리케이션(10)이 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 가공하여 제2차 지문가공 데이터와 제2차 압력가공 데이터를 생성하는 단계에 해당한다.In the step of generating the second processing data (S450), the
제2차 가공 데이터를 생성하는 단계(S450)에서 어플리케이션(10)은 새로 전송받은 제2차 지문센싱 데이터 및 제2차 압력센싱 데이터를 가공하여 제2차 지문가공 데이터와 제2차 압력가공 데이터를 생성하는 단계(S300)에 해당한다.In the step of generating the second processing data (S450), the
다음으로, 도 13을 참조하여 가공 데이터를 전송하는 단계(S500)에 대해 설명한다. Next, referring to FIG. 13, the step of transmitting the processed data (S500) will be described.
데이터를 전송하는 단계는 어플리케이션(10)이 서버(2000)로부터 통신부(30)를 통해 지문가공 데이터를 전송하는 단계(S500)에 해당한다.The step of transmitting data corresponds to a step S500 of transmitting, by the
여기서, 지문가공 데이터는 제1차 지문가공 데이터 또는 제2차 지문가공 데이터일 수 있다. Here, the fingerprint processing data may be the first fingerprint processing data or the second fingerprint processing data.
가공 데이터를 전송하는 단계(S500)는 어플리케이션(10)이 통신부(30)로 지문가공 데이터를 전송하는 단계, 및 통신부(30)가 서버(2000)로 어플리케이션(10)으로부터 수신한 지문가공 데이터를 전송하는 단계를 포함할 수 있다. 즉, 어플리케이션(10)은 통신부(30)를 통해, 스마트폰(1000)에서 서버(2000)로 지문가공 데이터와 압력가공 데이터를 전송할 수 있다.In the step of transmitting the processed data (S500), the
다만, 이에 제한되는 것은 아니고, 다른 실시예에서 어플리케이션(10)은 압력가공 데이터의 전송은 생략된 채, 지문가공 데이터만을 서버(2000)로 전송할 수도 있다.However, the present invention is not limited thereto, and in another embodiment, the
가공 데이터를 전송하는 단계(S500)에서 어플리케이션(10)은 스마트폰(1000) 내 저장부(40)로 전송할 수 있다. 저장부(40)는 지문가공 데이터와 압력가공 데이터를 저장하고, 빅데이터를 구축할 수 있다.In the step of transmitting the processed data (S500), the
다만, 본 단계에서 지문가공 데이터만이 전송되는 것으로 도시하였지만, 이에 제한되는 것은 아니다. 다른 실시예에서, 압력가공 데이터 또한 서버(2000)로 전송될 수도 있다. 여기서, 압력가공 데이터는 제1차 압력가공 데이터 또는 제2차 압력가공 데이터일 수 있다.However, although it is shown that only fingerprint processing data is transmitted in this step, it is not limited thereto. In another embodiment, pressure processing data may also be transmitted to the
다음으로, 도 14 및 도 15를 참조하여, 생체신호정보로 변환하는 단계(S600) 및 생체신호정보를 제공받는 단계(S700)에 대해 설명한다.Next, referring to FIGS. 14 and 15, a step of converting into biometric signal information (S600) and a step of receiving biosignal information (S700) will be described.
생체신호정보로 변환하는 단계(S600)는 서버(2000)가 지문가공 데이터를 생체신호정보로 변환하는 단계(S600)에 해당한다.The step of converting the biosignal information (S600) corresponds to the step (S600) of converting the fingerprint processing data into the biosignal information by the
서버(2000)는 지문가공 데이터를 이용하여 특정 생체신호정보로 변환할 수 있다. 예를 들어, 서버(2000)는 지문가공 데이터를 혈압 추정 알고리즘을 이용하여 혈압 정보를 얻을 수 있다. 일 실시예에서, 혈압 추정 알고리즘으로서, 형태 데이터(Morphology)와 머신러닝(Machine Learning)을 활용하여, 가공 데이터를 혈압 정보로 추출할 수 있다. 우선, 형태 데이터(Morphology)와 머신러닝(Machine Learning) 기법을 활용하여, 가공 데이터를 혈압 정보로 추출하는 과정에 대해 설명한다.The
형태 데이터(Morphology)는 PPG 파형의 변곡점을 추출한 방식 등을 이용한 프로그램을 활성화시켜 저장된 파형의 낮은 값에서의 모양 변화(Morphological Change)가 일어나는 시점을 검출하여 얻을 수 있다. 형태 데이터는 상관함수(Correlation Function)을 이용한 불연속점의 감지하는 방법을 통해 얻을 수 있다.Morphology can be obtained by activating a program using a method of extracting the inflection point of the PPG waveform, and detecting the point at which a Morphological Change occurs at a low value of the stored waveform. Shape data can be obtained through a method of detecting discontinuities using a correlation function.
PPG 파형의 분석은 PPG 신호의 2차 미분된 PPG 파형(SDPPG)으로 쉽게 정량화되어 원래의 PPG 신호보다 명확하게 정의된 특징점(피크 값)에 의해 혈압을 해석할 수 있다. 도 15와 같이, 혈압 해석은 SDPPG 파형에서 "a"(초기 수축기 양성 파), "b"(초기 수축기 음영 파), "c"(후기 수축기 재진입 파), "d"(수축기 후반 감소 파) 및 "e"(초기 이완기 양성 파)를 이용하여 해석할 수 있다.The analysis of the PPG waveform is easily quantified as a second-order differentiated PPG waveform (SDPPG) of the PPG signal, so that the blood pressure can be analyzed by more clearly defined feature points (peak values) than the original PPG signal. As shown in Fig. 15, the blood pressure analysis is "a" (initially systolic positive wave), "b" (early systolic shading wave), "c" (late systolic reentry wave), and "d" (late systolic decrease wave) And "e" (early diastolic positive wave) can be used for interpretation.
머신러닝 기법은 인공지능을 이용한 기법에 해당한다. 머신러닝은 혈압에 대한 경험적 데이터를 기반으로 학습을 하고 사용자의 혈압 예측을 수행하는 기법에 해당한다.Machine learning techniques correspond to techniques using artificial intelligence. Machine learning is a technique that learns based on empirical data on blood pressure and predicts the user's blood pressure.
몇몇 다른 실시예에서, 서버(2000)는 생체신호정보를 수집을 위해 압력가공 데이터를 추가로 이용할 수 있다. 예를 들어, 서버(2000)가 혈압을 추정을 하기위해, 지문 센싱 영역(SA)에 터치되는 손가락으로부터 일정 압력이 요구될 수 있다. 서버(2000)는 혈압을 추정하기 위해 터치의 세기에 관한 인자를 이용할 수 있다.In some other embodiments, the
서버(2000)가 혈압을 추정하는 알고리즘은 상술한 것에 한정되지 않고 다양한 알고리즘에 의해 서버(2000)가 혈압을 추정할 수 있다. 예를 들어, 오실로메트릭 방식, 토노메트릭 방식, W. Abraham 알고리즘, 또는 캘리브레이션 방식을 통해, 서버(2000)가 혈압을 추정할 수 있다.The algorithm for estimating the blood pressure by the
생체신호정보를 제공받는 단계(S700)는 어플리케이션(10)이 서버(2000)로부터 통신부(30)를 통해 생체신호정보를 제공받는 단계(S700)에 해당한다. The step of receiving biosignal information (S700) corresponds to a step (S700) of receiving, by the
생체신호정보를 제공받는 단계(S700)에서, 어플리케이션(10)은 서버(2000)로부터 생체신호정보를 수신할 수 있다. 이 때, 생채신호정보는 PPG(Photoplethysmography) 관련 데이터뿐만 아니라 추정된 혈압정보가 더 포함될 수 있다. In step S700 of receiving the biosignal information, the
다음으로, 도 16 및 도 17을 참조하여, 생체신호정보를 저장하고 표시하는 단계(S800)에 대해 설명한다.Next, with reference to FIGS. 16 and 17, a step of storing and displaying bio-signal information (S800) will be described.
생체신호정보를 저장하고 표시하는 단계(S800)는, 어플리케이션(10)이 생체신호정보를 저장부(40)에 저장하고 표시부(20)를 통해 표시하는 단계에 해당한다. The storing and displaying of the biosignal information (S800) corresponds to a step in which the
어플리케이션(10)은 생체신호정보가 담긴 표시데이터를 표시부(20)에 전송할 수 있다. 표시부(20)는 표시데이터를 기반으로 생채신호정보를 사용자가 확인할 수 있도록 스마트폰(1000)의 표시 영역(DA)에 표시할 수 있다. 예컨대, 스마트폰(1000)에 생체신호정보가 표시되는 방식은 도 17와 같을 수 있다.The
어플리케이션(10)은 생체신호정보를 저장부(40)에 전송할 수 있다. 저장부(40)는 생체신호정보를 저장할 수 있다. 어플리케이션(10)은 저장부(40)에 저장된 생체신호정보를 이용하여, 생체신호정보에 관한 빅데이터를 구축할 수 있다.The
저장부(40)는 생체신호정보, 각 센싱 데이터들, 각 가공 데이터들을 저장하고, 사용자별 데이터를 구축할 수 있다. 또한, 어플리케이션(10)이 스마트폰(1000)의 사용자에 대한 적정 터치 압력 데이터를 수집하여 저장할 수 있다. The
어플리케이션(10)이 표시부(20)로 생체신호정보에 기반한 표시데이터를 전송하는 단계와 어플리케이션(10)이 저장부(40)로 생체신호정보를 전송하는 단계는 순서에 제한되지는 어플리케이션(10)이 표시부(20)로 생체신호정보에 기반한 표시데이터를 전송하는 단계와 어플리케이션(10)이 저장부(40)로 생체신호정보를 전송하는 단계는 동시 또는 이시에 수행될 수 있다.The steps in which the
다음으로, 다른 실시예에 따른 생체신호정보 관리 방법에 대해 설명하기로 한다. 이하, 도 1 내지 도 17와 도면상의 동일한 구성 요소에 대해서는 설명을 생략하고, 동일하거나 유사한 참조 부호를 사용하였다.Next, a method of managing biosignal information according to another embodiment will be described. Hereinafter, descriptions of the same components in FIGS. 1 to 17 and in the drawings are omitted, and the same or similar reference numerals are used.
도 18은 다른 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법을 개략적으로 나타낸 순서도이다. 도 19는 도 18의 센싱 데이터를 분석하는 단계를 좀더 자세하게 나타낸 순서도이다. 도 20은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 분석하는 단계를 나타낸 블록도이다. 도 21은 도 18의 생체신호정보 관리 시스템에서, 센싱 데이터를 전송하는 단계를 좀더 자세하게 나타낸 블록도이다. 도 22는 도 18의 생체신호정보 관리 시스템에서, 생체신호정보로 가공 및 변환하는 단계를 나타낸 블록도이다.18 is a flowchart schematically illustrating a method of managing biosignal information by a biosignal information management system according to another embodiment. FIG. 19 is a flow chart showing the steps of analyzing the sensing data of FIG. 18 in more detail. 20 is a block diagram illustrating a step of analyzing sensing data in the biosignal information management system of FIG. 18. 21 is a block diagram showing in more detail the step of transmitting sensing data in the biosignal information management system of FIG. 18. 22 is a block diagram showing steps of processing and converting bio-signal information into bio-signal information in the bio-signal information management system of FIG. 18;
도 18 내지 도 22를 참조하면, 본 실시예에 따른 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법은 도 7, 도 9, 도 13 및 도 14의 생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법 대비, 어플리케이션(10)이 센싱 데이터를 가공하여 가공 데이터를 생성하지 않고, 바로 센싱 데이터를 서버(2000)로 전송하는 점 및 서버(2000)가 센싱 데이터를 가공 및 변환하여 생체신호정보를 추출하는 점에서 그 차이가 있다.18 to 22, the method of managing the biosignal information by the biosignal information management system according to the present embodiment is the biosignal information management system of Figs. 7, 9, 13, and 14. In contrast to the management method, the
생체신호정보 관리 시스템이 생체신호정보를 관리하는 방법은 센싱조건을 제어하는 단계(S100), 센싱 데이터를 수신하는 단계(S200), 센싱 데이터를 분석하는 단계(S401), 센싱 데이터를 전송하는 단계(S501), 생체신호정보로 가공 및 변환하는 단계(S601), 생체신호정보를 제공받는 단계(S700) 및 생체신호정보를 저장하고 표시하는 단계(S800)를 포함한다.The method of managing the biosignal information by the biosignal information management system includes controlling the sensing condition (S100), receiving the sensing data (S200), analyzing the sensing data (S401), and transmitting the sensing data. (S501), processing and converting the biosignal information (S601), receiving biosignal information (S700), and storing and displaying biosignal information (S800).
센싱 데이터를 분석하는 단계(S401)는 어플리케이션(10)이 지문센싱 데이터 및 압력센싱 데이터를 분석하는 단계에 해당한다.The step of analyzing the sensing data (S401) corresponds to a step in which the
센싱 데이터를 분석하는 단계(S401)는 복수의 세부단계를 포함할 수 있다. 센싱 데이터를 분석하는 단계(S401)는 제1차 센싱 데이터를 분석하는 단계(S411), 지문인식 재요청을 표시하는 단계(S420), 제2차 센싱조건을 제어하는 단계(S430) 및 제2차 센싱 데이터를 수신하는 단계(S440)를 포함할 수 있다.Analyzing the sensing data (S401) may include a plurality of detailed steps. Analyzing the sensing data (S401) includes analyzing the first sensing data (S411), displaying a fingerprint recognition re-request (S420), controlling the second sensing condition (S430), and the second It may include the step of receiving the difference sensing data (S440).
제1차 센싱 데이터를 분석하는 단계(S411)는 어플리케이션(10)이 제1차 지문센싱 데이터 및 제1차 압력센싱 데이터를 분석하는 단계에 해당한다. 이는, 1차로 어플리케이션(10)이 지문센싱 데이터가 신뢰할 수 있는지 판단하는 단계일 수 있다.Analyzing the first sensing data (S411) corresponds to a step in which the
센싱 데이터를 전송하는 단계(S501)는 어플리케이션(10)이 서버(2000)로 지문센싱 데이터 및 압력센싱 데이터를 전송하는 단계 해당한다. 어플리케이션(10)은 지문센서부(50)와 압력센서부(60)로부터 각각 수신한 지문센싱 데이터와 압력센싱 데이터를 곧바로 서버(2000)로 전송할 수 있다. 지문센싱 데이터와 압력센싱 데이터는 어플리케이션(10)에서 스마트폰(1000)의 통신부(30)로 전송되고, 스마트폰(1000)의 통신부(30)에서 서버(2000)로 전송될 수 있다.The step of transmitting the sensing data (S501) corresponds to a step in which the
생체신호정보로 가공 및 변환하는 단계(S601)는 서버(2000)가 지문센싱 데이터 및 압력센싱 데이터를 생체신호정보로 변환하는 단계에 해당한다. 서버(2000)는 어플리케이션(10)으로부터 수신한 지문센싱 데이터 및 압력센싱 데이터를 필터링 하여, PPG(Photoplethysmography) 관련 데이터 등의 가공데이터를 추출할 수 있다. 또한, 서버(2000)는 가공데이터를 기반으로 혈압과 같은 생체신호정보를 얻을 수 있다. 서버(2000)는 생체신호정보를 다시 어플리케이션(10)으로 전송하며, 이 때, 어플리케이션(10)이 수신하는 생체신호정보는 PPG(Photoplethysmography) 관련 데이터 및 혈압 중 적어도 하나일 수 있다.The step of processing and converting biosignal information (S601) corresponds to a step of converting the fingerprint sensing data and pressure sensing data into biosignal information by the
이상 첨부된 도면을 참조하여 본 발명의 실시예들을 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.Embodiments of the present invention have been described above with reference to the accompanying drawings, but those of ordinary skill in the art to which the present invention pertains can be implemented in other specific forms without changing the technical spirit or essential features of the present invention. You can understand. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not limiting.
1: 생체신호정보 관리 시스템
10: 어플리케이션
20: 표시부
30: 통신부
40: 저장부
50: 지문센서부
60: 압력센서부
211: 발광 유닛
212: 터치 감지 유닛
213: 커버 글래스
221: 압력 감지 유닛
222: 지문 센서
1000: 스마트폰
2000: 서버
3000: 손가락 1: Bio-signal information management system
10: Application
20: display
30: communication department
40: storage
50: fingerprint sensor unit
60: pressure sensor unit
211: light-emitting unit
212: touch sensing unit
213: cover glass
221: pressure sensing unit
222: fingerprint sensor
1000: smartphone
2000: server
3000: finger
Claims (11)
상기 광학식 지문센서부에 인접하게 위치하여 상기 생체가 상기 감지부에 가하는 압력을 측정하는 압력센서부; 및
상기 압력센서부의 측정 결과를 수신하여 상기 광학식 지문센서부의 동작을 제어하는 제어부를 포함하는 전자 장치에 있어서,
상기 광학식 지문센서부는, 상기 지문의 패턴뿐만 아니라 상기 생체의 생체정보를 얻기 위한 생체 데이터를 인식할 수 있고,
상기 압력센서부는, 상기 광학식 지문센서부가 상기 생체 데이터를 인식하는 동안 상기 감지부에 가해진 압력을 측정하고,
상기 제어부는, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하는지 판단하는 전자 장치.An optical fingerprint sensor unit including a light-emitting unit and a light-receiving unit, wherein the light-receiving unit detects that the light generated by the light-emitting unit is reflected from a living body located in the sensing unit to recognize a fingerprint pattern;
A pressure sensor unit positioned adjacent to the optical fingerprint sensor unit to measure the pressure applied by the living body to the sensing unit; And
In the electronic device comprising a control unit for receiving the measurement result of the pressure sensor unit to control the operation of the optical fingerprint sensor unit,
The optical fingerprint sensor unit may recognize not only the pattern of the fingerprint, but also biometric data for obtaining biometric information of the living body,
The pressure sensor unit measures a pressure applied to the sensing unit while the optical fingerprint sensor unit recognizes the biometric data,
The controller determines whether the measured pressure falls within a predetermined pressure range.
상기 압력센서부는,
타겟 메탈;
상기 타겟 메탈과 대향하는 코일; 및
상기 타겟 메탈과 상기 코일 사이의 거리가 변함에 따라 상기 코일의 인덕턴스 변화량을 감지하는 센싱부재를 포함하는 전자 장치.The method of claim 1,
The pressure sensor unit,
Target metal;
A coil facing the target metal; And
An electronic device comprising a sensing member that senses a change in inductance of the coil as the distance between the target metal and the coil changes.
상기 압력센서부는,
상기 타겟 메탈과 상기 코일 사이에 위치하는 간격재를 더 포함하는 전자 장치.The method of claim 2,
The pressure sensor unit,
An electronic device further comprising a spacer positioned between the target metal and the coil.
상기 코일는 상기 광학식 지문센서부를 둘러싸도록 형성되는 전자 장치.The method of claim 2,
The coil is formed to surround the optical fingerprint sensor unit.
상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면,
상기 광학식 지문센서부는, 상기 생체 데이터를 다시 인식하기 위한 준비 동작을 수행하는 전자 장치.The method of claim 1,
When the control unit determines that the measured pressure does not fall within a predetermined pressure range,
The optical fingerprint sensor unit performs a preparation operation for recognizing the biometric data.
상기 제어부가, 상기 측정된 압력이 미리 정해진 압력 범위에 해당하지 않는다고 판단하면,
상기 제어부는 상기 미리 정해진 압력 범위에 해당하는 압력을 가하기 위한 가이드 메시지 데이터를 생성하는 전자 장치.The method of claim 1,
When the control unit determines that the measured pressure does not fall within a predetermined pressure range,
The control unit generates guide message data for applying a pressure corresponding to the predetermined pressure range.
상기 제어부는, 상기 광학식 지문센서부가 상기 측정된 압력에서 인식한 생체 데이터가 상기 생체정보를 얻기에 적합한지 여부에 따라 상기 압력 범위를 변경하는 전자 장치.The method of claim 1,
The control unit is an electronic device that changes the pressure range according to whether the biometric data recognized by the optical fingerprint sensor unit is suitable for obtaining the biometric information.
상기 전자 장치에서 생체 인식 어플리케이션이 실행되고,
상기 생체 인식 어플리케이션은,
상기 광학식 지문센서부로부터 인식한 상기 생체 데이터를 수신하는 단계;
상기 생체 데이터 또는 상기 생체 데이터를 가공한 가공 데이터를 분석 서버로 전송하는 단계;
상기 분석 서버로부터 상기 분석 서버가 상기 생체 데이터 또는 상기 가공 데이터에 기반하여 생성한 생체정보를 수신하는 단계; 및
상기 생체정보에 기반한 표시데이터를 표시부로 전송하는 단계를 수행하는 전자 장치.The method of claim 1,
A biometric application is executed in the electronic device,
The biometric recognition application,
Receiving the biometric data recognized from the optical fingerprint sensor unit;
Transmitting the biometric data or processed data obtained by processing the biometric data to an analysis server;
Receiving, by the analysis server, biometric information generated based on the biometric data or the processed data from the analysis server; And
An electronic device that transmits display data based on the biometric information to a display unit.
상기 어플리케이션은,
상기 광학식 지문센서부의 센싱 조건을 제어하는 전자 장치.The method of claim 8,
The above application,
An electronic device that controls the sensing condition of the optical fingerprint sensor unit.
상기 센싱 조건은 상기 광학식 지문센서부의 샘플링 주파수, 파장 대역 및 광량 중 적어도 어느 하나인 전자 장치.The method of claim 9,
The sensing condition is at least one of a sampling frequency, a wavelength band, and an amount of light of the optical fingerprint sensor unit.
상기 광학식 지문센서부는 상기 전자 장치의 표시 패널의 하부에 위치하고,
상기 발광부는 상기 표시 패널의 발광부를 겸하는 전자 장치.The method of claim 1,
The optical fingerprint sensor unit is located under the display panel of the electronic device,
The light emitting part also serves as a light emitting part of the display panel.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190034135A KR102389902B1 (en) | 2019-03-26 | 2019-03-26 | Method of managing bio-signal information and electronic device performing the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190034135A KR102389902B1 (en) | 2019-03-26 | 2019-03-26 | Method of managing bio-signal information and electronic device performing the same |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200113638A true KR20200113638A (en) | 2020-10-07 |
KR102389902B1 KR102389902B1 (en) | 2022-04-22 |
Family
ID=72883400
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190034135A KR102389902B1 (en) | 2019-03-26 | 2019-03-26 | Method of managing bio-signal information and electronic device performing the same |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102389902B1 (en) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20040087295A (en) * | 2004-09-02 | 2004-10-13 | 김용수 | A fingerprint recognition system and method using correcting position and presure |
KR20150082045A (en) * | 2014-01-07 | 2015-07-15 | 삼성전자주식회사 | Electronic device and photoplethysmography method |
KR20170095709A (en) * | 2016-02-15 | 2017-08-23 | 크루셜텍 (주) | Sensor package |
KR20180005588A (en) | 2016-07-06 | 2018-01-16 | 삼성전자주식회사 | Fingerprint Sensor, Fingerprint Sensor Package and Fingerprint Sensing System using light sources of display panel |
KR20180138004A (en) * | 2017-06-20 | 2018-12-28 | 엘지전자 주식회사 | Mobile terminal |
KR20190020958A (en) * | 2017-08-22 | 2019-03-05 | 삼성전자주식회사 | Method for obtaining biometric information using a light source corresponding to biometric information and electronic device thereof |
-
2019
- 2019-03-26 KR KR1020190034135A patent/KR102389902B1/en active IP Right Grant
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20040087295A (en) * | 2004-09-02 | 2004-10-13 | 김용수 | A fingerprint recognition system and method using correcting position and presure |
KR20150082045A (en) * | 2014-01-07 | 2015-07-15 | 삼성전자주식회사 | Electronic device and photoplethysmography method |
KR20170095709A (en) * | 2016-02-15 | 2017-08-23 | 크루셜텍 (주) | Sensor package |
KR20180005588A (en) | 2016-07-06 | 2018-01-16 | 삼성전자주식회사 | Fingerprint Sensor, Fingerprint Sensor Package and Fingerprint Sensing System using light sources of display panel |
KR20180138004A (en) * | 2017-06-20 | 2018-12-28 | 엘지전자 주식회사 | Mobile terminal |
KR20190020958A (en) * | 2017-08-22 | 2019-03-05 | 삼성전자주식회사 | Method for obtaining biometric information using a light source corresponding to biometric information and electronic device thereof |
Non-Patent Citations (1)
Title |
---|
"All-organic optoelectronic sensor for pulse oximetry", Nature Communications 5, Article number: 5745, DOI: 10.1038/ncomms6745 (Dec. 10, 2014) |
Also Published As
Publication number | Publication date |
---|---|
KR102389902B1 (en) | 2022-04-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11341764B2 (en) | Integrated light emitting display, IR light source, and sensors for detecting biologic characteristics | |
KR102457710B1 (en) | Optical fingerprint sensor under the display | |
CN107580709B (en) | Multifunctional fingerprint sensor with optical sensing capability | |
KR102410175B1 (en) | Method for obtaining biometric information using a light source corresponding to biometric information and electronic device thereof | |
US20220167864A1 (en) | Concentric Architecture for Optical Sensing | |
KR102202342B1 (en) | All-in-one light-emitting display and sensor to detect biological properties | |
CN104423767B (en) | Detection applies pressure on the touch surface and provides feedback | |
CN108369438A (en) | Flexible electronic devices and its operating method | |
CN108236460A (en) | Touch type blood pressure measurement device and method | |
JP2019521734A (en) | Light emitters and sensors for detecting biological properties | |
US10216978B2 (en) | Fingerprint identification device and fingerprint identification method | |
KR102505234B1 (en) | Method for detecting biometric information using spatial litht modulators | |
US20150335293A1 (en) | Systems and techniques to determine whether a signal is associated with a periodic biologic function | |
US20210093211A1 (en) | Cardiovascular health monitoring | |
KR102389902B1 (en) | Method of managing bio-signal information and electronic device performing the same | |
KR101898067B1 (en) | Optical sensor module and optical sensing method | |
KR20200097556A (en) | Method of managing bio-signal information | |
EP4023145B1 (en) | Apparatus and method for estimating bio-information | |
US20240032802A1 (en) | Electronic device, and biological detection control method and apparatus | |
KR20240001777A (en) | Display device and blood pressure measurement method using the same | |
CN111221411A (en) | Painted screen |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |