KR20210045869A - Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same - Google Patents

Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same Download PDF

Info

Publication number
KR20210045869A
KR20210045869A KR1020190129409A KR20190129409A KR20210045869A KR 20210045869 A KR20210045869 A KR 20210045869A KR 1020190129409 A KR1020190129409 A KR 1020190129409A KR 20190129409 A KR20190129409 A KR 20190129409A KR 20210045869 A KR20210045869 A KR 20210045869A
Authority
KR
South Korea
Prior art keywords
jaundice
patch
user
image
area
Prior art date
Application number
KR1020190129409A
Other languages
Korean (ko)
Other versions
KR102388714B1 (en
Inventor
선우명훈
안기조
Original Assignee
아주대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아주대학교산학협력단 filed Critical 아주대학교산학협력단
Priority to KR1020190129409A priority Critical patent/KR102388714B1/en
Priority to US17/071,477 priority patent/US20210113147A1/en
Publication of KR20210045869A publication Critical patent/KR20210045869A/en
Application granted granted Critical
Publication of KR102388714B1 publication Critical patent/KR102388714B1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1032—Determining colour for diagnostic purposes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813—Specially adapted to be attached to a specific body part
    • A61B5/6814—Head
    • A61B5/6821—Eye
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/683—Means for maintaining contact with the body
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/90—Identification means for patients or instruments, e.g. tags
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/90—Identification means for patients or instruments, e.g. tags
    • A61B90/92—Identification means for patients or instruments, e.g. tags coded with colour
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/90—Identification means for patients or instruments, e.g. tags
    • A61B90/94—Identification means for patients or instruments, e.g. tags coded with symbols, e.g. text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02—Operational features
    • A61B2560/0242—Operational features adapted to measure environmental factors, e.g. temperature, pollution
    • A61B2560/0247—Operational features adapted to measure environmental factors, e.g. temperature, pollution for compensation or correction of the measured physiological value
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/04—Constructional details of apparatus
    • A61B2560/0487—Special user inputs or interfaces
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14546—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring analytes not otherwise provided for, e.g. ions, cytochromes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/42—Detecting, measuring or recording for evaluating the gastrointestinal, the endocrine or the exocrine systems
    • A61B5/4222—Evaluating particular parts, e.g. particular organs
    • A61B5/4244—Evaluating particular parts, e.g. particular organs liver
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/42—Detecting, measuring or recording for evaluating the gastrointestinal, the endocrine or the exocrine systems
    • A61B5/4261—Evaluating exocrine secretion production
    • A61B5/4283—Evaluating exocrine secretion production gastrointestinal secretions, e.g. bile production
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7221—Determining signal validity, reliability or quality
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271—Specific aspects of physiological measurement analysis
    • A61B5/7285—Specific aspects of physiological measurement analysis for synchronising or triggering a physiological measurement or image acquisition with a physiological event or waveform, e.g. an ECG signal

Abstract

The present invention relates to a method for diagnosing, by a jaundice diagnosis device, jaundice of a user based on an image which acquires a diagnosis standard device for jaundice divided into a first area and a second area and a jaundice diagnosis image photographed including the user's specific body part located in the first area. The identification information of a jaundice diagnosis reference device inserted in the second area is extracted, and validation authentication of the identification information is requested by the interworking authentication system. Upon receiving the validation authentication success message from the authentication system, whether or not the user has jaundice is diagnosed based on the image of a specific body part located in the first area and the jaundice diagnosis comparison image included in the second area.

Description

황달 진단 패치, 패치 인증 시스템 및 이를 이용한 황달 진단 방법{Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same}Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same}

본 발명은 황달 진단 패치, 패치 인증 시스템 및 이를 이용한 황달 진단 방법에 관한 것이다.The present invention relates to a jaundice diagnosis patch, a patch authentication system, and a jaundice diagnosis method using the same.

황달은 혈색소(헤모글로빈)와 같이 철분을 포함하고 있는 특수 단백질이 체내에서 분해되는 과정에서 생성되는 황색의 담즙색소(빌리루빈)가, 몸에 필요 이상으로 과다하게 쌓여 눈의 횐자위(공막)나 피부, 점막 등에 노랗게 착색되는 것을 말한다. 황달을 이학적 소견(Scientific View)이나 혈청학적 검사를 기반으로 진단하는 기존 진단법의 경우 몇 가지 문제점이 있다. Jaundice is caused by excessive accumulation of yellow bile pigments (bilirubin), which are produced in the process of decomposing special proteins containing iron in the body, such as hemoglobin (hemoglobin). , It refers to the yellow color of the mucous membrane. Existing diagnostic methods for diagnosing jaundice based on a scientific view or serological examination have several problems.

황달을 맨눈으로 진단하는 이학적 검사인 시진(視診)을 통하여 황달을 진단하는 경우에는 주관적이며 객관적인 진단을 하지 못한다는 문제가 있다. 따라서 황달의 확진을 위해서는 환자의 혈액을 채취하여 혈중 빌리루빈치를 측정해야 한다.In the case of diagnosing jaundice through examination, which is a physical examination for diagnosing jaundice with the naked eye, there is a problem that a subjective and objective diagnosis cannot be made. Therefore, to confirm the diagnosis of jaundice, it is necessary to collect blood from the patient and measure the bilirubin level in the blood.

이 경우, 황달 의심환자가 혈중 빌리루빈치를 측정할 수 있는 기기를 갖춘 의료기관을 방문하여야만 확진이 가능하고, 채혈 후 검사결과치를 얻기까지 시간이 지체된다는 단점이 있다.In this case, there is a disadvantage that it is possible to confirm the diagnosis only when a patient suspected of jaundice visits a medical institution equipped with a device capable of measuring the blood bilirubin level, and it takes time to obtain the test result after blood collection.

이와 같은 번거로움을 해소하기 위해, 황달 의심환자가 황달을 자가 진단할 수 있도록 패치가 보급되고 있다. 이미지 기반 황달 진단 시스템에서는 패치를 통하여 주변의 광원에 따른 색감의 변화를 최소화하는데 목적을 두고 있다. To alleviate such hassle, patches are being distributed so that suspected jaundice patients can self-diagnose jaundice. The image-based jaundice diagnosis system aims to minimize the change in color according to the surrounding light source through the patch.

하지만, 현재의 패치를 이용한 황달 진단 시스템은 패치를 잘 인식하지 못하는 단점이 있다. 황달 진단 시스템이 패치를 인식하지 못하는 문제는 색상왜곡을 복원하기 위한 화이트밸런스 기능에 큰 문제를 일으켜, 황달 진단 시스템이 정상 작동하지 못하는 원인이 된다. However, the current jaundice diagnosis system using a patch has a disadvantage in that it does not recognize the patch well. The problem that the jaundice diagnosis system does not recognize the patch causes a big problem in the white balance function for restoring color distortion, which causes the jaundice diagnosis system to fail to operate normally.

이 외에도 사용자가 눈의 공막을 직접 찾아서 황달 진단 시스템에 입력해야 하는 불편함이 있어, 사용자 경험 측면에서 만족감을 주기 힘들다는 단점이 있다.In addition, there is a disadvantage in that it is difficult to give a feeling of satisfaction in terms of user experience because the user has to find the sclera of the eye and input it into the jaundice diagnosis system.

현재의 황달 진단 시스템은 사용자 개인 디바이스를 통해 환자를 구분하며, 패치 역시 한번 구입하면 계속해서 사용할 수는 있다. 그러나, 사용자 개인 디바이스에 설치된 어플리케이션에서는 환자 개인이 로그인 한 ID에 따라서 개인의 데이터와 히스토리를 관리하기 때문에, 다른 사람의 ID로 로그인하여 촬영할 경우 데이터와 히스토리의 개인관리가 되지 않는다.The current jaundice diagnosis system identifies patients through the user's personal device, and the patch can be used continuously once purchased. However, since the application installed on the user's personal device manages personal data and history according to the ID to which the patient logs in, personal management of data and history is not performed when recording by logging in with another person's ID.

따라서, 본 발명은 개선된 색상 보정 패치와 개인을 식별할 수 있는 생체정보 등을 이용하여 시스템 사용자를 본인으로 제한할 수 있는 황달 진단 패치, 패치 인증 시스템 및 이를 이용한 황달 진단 방법을 제공한다.Accordingly, the present invention provides a jaundice diagnosis patch, a patch authentication system, and a jaundice diagnosis method using the same, which can limit a system user to the user by using an improved color correction patch and biometric information that can identify an individual.

상기 본 발명의 기술적 과제를 달성하기 위한 본 발명의 하나의 특징인 이미지 기반으로 사용자의 황달을 진단하는 황달 진단 장치로서,As a jaundice diagnosis device for diagnosing jaundice of a user based on an image, which is one characteristic of the present invention for achieving the technical problem of the present invention

제1 영역과 제2 영역으로 구분된 황달 진단 기준 장치와 상기 제1 영역에 위치한 상기 사용자의 특정 신체 부위를 황달 진단 이미지로 촬영하는 촬영부, 상기 황달 진단 기준 장치의 유효성 인증을 위해, 상기 황달 진단 이미지에서 추출된 식별 정보를 패치 인증 시스템으로 전송하는 인터페이스, 상기 황달 진단 이미지에서 상기 제2 영역을 인식하여 상기 식별 정보를 추출하고, 상기 패치 인증 시스템에서 상기 황달 진단 기준 장치의 유효성 인증 신호를 수신하면 상기 제1 영역에서 상기 특정 신체 부위의 이미지를 추출하며, 추출한 특정 신체 부위 이미지와 상기 제2 영역의 이미지를 토대로 상기 사용자의 황달을 진단하는 프로세서를 포함한다.A jaundice diagnosis reference device divided into a first area and a second area, a photographing unit for photographing a specific body part of the user located in the first area as a jaundice diagnosis image, and for validity authentication of the jaundice diagnosis reference device, the jaundice An interface for transmitting identification information extracted from a diagnosis image to a patch authentication system, extracting the identification information by recognizing the second area from the jaundice diagnosis image, and receiving a validity authentication signal of the jaundice diagnosis reference device in the patch authentication system Upon reception, a processor for extracting the image of the specific body part from the first region and diagnosing jaundice of the user based on the extracted specific body part image and the image of the second region.

상기 사용자의 상기 생체 정보를 수집하는 입력 수단을 더 포함하고, 상기 프로세서는, 상기 인터페이스를 통해 상기 수집한 생체 정보를 상기 패치 인증 시스템에 전송하여 상기 사용자에 대한 인증을 요청할 수 있다.An input means for collecting the biometric information of the user may be further included, and the processor may request authentication for the user by transmitting the collected biometric information to the patch authentication system through the interface.

상기 프로세서는, 특정 색상의 제1 패턴 영역, 흰색의 제2 패턴 영역, 그리고 상기 특정 색상의 제3 패턴 영역이 교차로 배치되어 있는 상기 제2 영역에서, 상기 식별 정보가 삽입된 상기 제3 패턴 영역으로부터 상기 식별 정보를 추출할 수 있다.The processor may include the third pattern area into which the identification information is inserted in the second area in which the first pattern area of a specific color, the second pattern area of white, and the third pattern area of the specific color are intersected. The identification information can be extracted from.

상기 프로세서는, 상기 황달 진단 이미지의 왜곡된 색상을 보정하여 보정 이미지를 생성하고, 생성한 보정 이미지로부터 상기 특정 신체 부위의 이미지를 추출할 수 있다.The processor may generate a corrected image by correcting a distorted color of the jaundice diagnosis image, and extract an image of the specific body part from the generated corrected image.

상기 본 발명의 기술적 과제를 달성하기 위한 본 발명의 또 다른 특징인 황달 진단 장치가 이미지 기반으로 사용자의 황달을 진단하는 방법으로서,As a method for diagnosing jaundice of a user based on an image in the jaundice diagnosis apparatus, which is another feature of the present invention for achieving the technical problem of the present invention,

제1 영역과 제2 영역으로 구분된 황달 진단 기준 장치와 상기 제1 영역에 위치한 상기 사용자의 특정 신체 부위를 포함하여 촬영된 황달 진단 이미지를 획득하는 단계, 상기 제2 영역에 삽입된 상기 황달 진단 기준 장치의 식별 정보를 추출하고, 연동한 인증 시스템으로 상기 식별 정보의 유효성 인증을 요청하는 단계, 그리고 상기 인증 시스템으로부터 유효성 인증 성공 메시지를 수신하면, 상기 제1 영역에 위치한 상기 특정 신체 부위의 이미지와 상기 제2 영역에 포함된 황달 진단 비교 이미지를 토대로, 상기 사용자의 황달 여부를 진단하는 단계를 포함한다.Acquiring a jaundice diagnosis image, including a jaundice diagnosis reference device divided into a first area and a second area, and a specific body part of the user located in the first area, and diagnosis of the jaundice inserted in the second area Extracting the identification information of the reference device, requesting validity authentication of the identification information through an interlocked authentication system, and upon receiving a validity authentication success message from the authentication system, an image of the specific body part located in the first area And diagnosing whether the user has jaundice based on the jaundice diagnosis comparison image included in the second area.

상기 제2 영역은 특정 색상의 제1 패턴 영역, 흰색의 제2 패턴 영역, 그리고 상기 특정 색상의 제3 패턴 영역이 교차로 배치되고, 상기 유효성 인증을 요청하는 단계는, 상기 식별 정보가 삽입된 상기 제3 패턴 영역으로부터 상기 식별 정보를 추출하는 단계, 그리고 상기 황달 진단 이미지가 촬영된 촬영 날짜 정보와 상기 식별 정보를 상기 인증 시스템으로 전송하는 단계를 포함할 수 있다.In the second area, a first pattern area of a specific color, a second pattern area of white, and a third pattern area of the specific color are arranged at intersections, and the requesting the validation may include the identification information being inserted. Extracting the identification information from the third pattern area, and transmitting information on a photographing date at which the jaundice diagnosis image was captured and the identification information to the authentication system.

상기 황달 여부를 진단하는 단계는, 상기 황달 진단 이미지의 왜곡된 색상을 보정하여 보정 이미지를 생성하는 단계, 그리고 생성한 보정 이미지로부터 상기 특정 신체 부위의 이미지를 추출하고, 상기 제2 패턴 영역의 이미지와 비교하여 황달 여부를 진단하는 단계를 포함할 수 있다.The step of diagnosing jaundice may include generating a corrected image by correcting a distorted color of the jaundice diagnosis image, extracting an image of the specific body part from the generated corrected image, and an image of the second pattern area It may include the step of diagnosing whether or not jaundice compared to.

상기 황달 진단 이미지를 획득하는 단계 이전에, 상기 사용자의 황달 진단을 위한 애플리케이션 구동 입력 신호를 수신하는 단계, 상기 애플리케이션을 구동한 상기 사용자의 생체 정보를 수집하는 단계, 그리고 상기 생체 정보를 상기 인증 시스템으로 전송하여, 상기 사용자에 대한 사용자 인증을 요청하는 단계를 포함할 수 있다.Prior to the step of acquiring the jaundice diagnosis image, receiving an application driving input signal for diagnosing jaundice of the user, collecting biometric information of the user who has driven the application, and storing the biometric information in the authentication system And requesting user authentication for the user.

상기 본 발명의 기술적 과제를 달성하기 위한 본 발명의 또 다른 특징인 이미지 기반으로 사용자의 황달 여부를 진단하는 황달 진단 기준 장치로서,As a jaundice diagnosis reference device for diagnosing whether a user has jaundice based on an image, which is another feature of the present invention for achieving the technical problem of the present invention,

제1 위치에 미리 설정된 크기로 뚫린 관심 영역이 형성되고, 상기 관심 영역에 위치한 상기 사용자의 특정 신체 부위가 노출되는 신체 부위 노출부, 그리고 상기 제1 위치에서 일정 간격 이격된 제2 위치에 형성되며, 패턴이 형성되어 있는 패치 확인부를 포함한다.An ROI is formed in a first position with a predetermined size, a body part exposed part to which the specific body part of the user located in the ROI is exposed, and a second position spaced apart from the first position by a predetermined distance, , And a patch confirmation portion in which the pattern is formed.

상기 패치 확인부는, 특정 색상의 제1 패턴 영역, 흰색의 제2 패턴 영역, 그리고 상기 특정 색상의 제3 패턴 영역이 교차로 배치되며, 상기 제3 패턴 영역에는 상기 황달 진단 기준 장치의 식별 정보가 삽입될 수 있다.The patch checking unit is arranged in a crosswise arrangement of a first pattern area of a specific color, a second pattern area of white, and a third pattern area of the specific color, and the identification information of the jaundice diagnosis reference device is inserted into the third pattern area. Can be.

상기 식별 정보는 QR(Quick Response) 코드 또는 바코드 형태로 상기 제3 패턴 영역에 삽입될 수 있다.The identification information may be inserted into the third pattern area in the form of a quick response (QR) code or a barcode.

본 발명에 따르면, 황달 진단 시스템의 정확도와 사용자 경험을 향상시킬 수 있다. According to the present invention, it is possible to improve the accuracy and user experience of the jaundice diagnosis system.

또한, 황달 진단 시스템의 운용 및 색상 보정 패치의 제작 등 금전적으로 사용되는 비용을 수익모델 창출로 해결할 수 있다. In addition, financial costs such as operation of a jaundice diagnosis system and production of color correction patches can be solved by creating a profit model.

또한, 환자의 경우 더욱 강화된 개인 식별 기능을 통하여, 자신의 데이터와 히스토리를 보호하고 오진율을 더욱 낮출 수 있다.In addition, in the case of patients, through the enhanced personal identification function, their data and history can be protected and the false diagnosis rate can be further lowered.

도 1은 본 발명의 실시예에 따른 황달 자가 진단이 가능한 환경의 예시도이다.
도 2는 본 발명의 실시예에 따른 황달 진단 패치의 예시도이다.
도 3은 본 발명의 실시예에 따른 단말의 구조도이다.
도 4는 본 발명의 실시예에 따른 패치 인증 시스템의 구조도이다.
도 5는 본 발명의 실시예에 따른 황달 자가 진단 방법에 대한 흐름도이다.
도 6은 본 발명의 실시예에 따른 황달 자가 진단 방법에 대한 예시도이다.1 is an exemplary diagram of an environment in which jaundice self-diagnosis is possible according to an embodiment of the present invention.
2 is an exemplary diagram of a jaundice diagnostic patch according to an embodiment of the present invention.
3 is a structural diagram of a terminal according to an embodiment of the present invention.
4 is a structural diagram of a patch authentication system according to an embodiment of the present invention.
5 is a flowchart of a method for self-diagnosing jaundice according to an embodiment of the present invention.
6 is an exemplary diagram for a method for self-diagnosing jaundice according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art may easily implement the present invention. However, the present invention may be implemented in various different forms and is not limited to the embodiments described herein. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and similar reference numerals are attached to similar parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. Throughout the specification, when a part "includes" a certain component, it means that other components may be further included rather than excluding other components unless specifically stated to the contrary.

본 명세서에서 단말(terminal)은, 모바일, 스마트폰, 태블릿 등의 다양한 형태의 단말을 지칭할 수 있다.In the present specification, a terminal may refer to various types of terminals such as mobile, smart phone, and tablet.

이하, 도면을 참조로 하여, 본 발명의 실시예에 따른 황달 진단 패치, 패치 인증 시스템 및 이를 이용한 황달 진단 방법을 설명한다.Hereinafter, a jaundice diagnosis patch, a patch authentication system, and a jaundice diagnosis method using the same according to an embodiment of the present invention will be described with reference to the drawings.

도 1은 본 발명의 실시예에 따른 황달 자가 진단이 가능한 환경의 예시도이다.1 is an exemplary diagram of an environment in which jaundice self-diagnosis is possible according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 사용자는 황달 진단 패치(100)와 단말(또는, '황달 진단 시스템'이라고도 지칭함)(200)을 소지하고, 황달 진단 패치(100)와 단말(200)을 이용하여 황달 여부를 자가 진단할 수 있다. 그리고 단말(200)은 패치 인증 시스템(300)과 연동한다.As shown in FIG. 1, the user possesses a jaundice diagnosis patch 100 and a terminal (or, also referred to as a'jaundice diagnosis system') 200, and uses the jaundice diagnosis patch 100 and the terminal 200. You can self-diagnose jaundice. In addition, the terminal 200 interworks with the patch authentication system 300.

단말(200)에는 황달 진단을 위한 어플리케이션이 설치되어 있다. 사용자가 황달 진단 패치(100)를 안구에 가까이 대고 단말(200)에 설치된 어플리케이션을 실행하면, 어플리케이션은 단말(200)에 삽입된 카메라를 활성화하여 사용자의 얼굴을 촬영한다. In the terminal 200, an application for diagnosing jaundice is installed. When the user places the jaundice diagnosis patch 100 close to the eye and executes an application installed in the terminal 200, the application activates the camera inserted in the terminal 200 to take a picture of the user's face.

단말(200)의 어플리케이션은 사용자 얼굴이 촬영된 이미지로부터 황달 진단 패치(100)가 있는지 확인한다. 어플리케이션은 황달 진단 패치(100)에 형성된 패턴을 토대로, 황달 진단 패치 여부를 확인한다. 그리고, 단말(200)은 황달 진단 패치의 이미지가 사용자 얼굴이 촬영된 이미지에 나타나 있으면, 사용자의 안구를 인식하여 황달 여부를 진단한다. The application of the terminal 200 checks whether there is a jaundice diagnosis patch 100 from an image of a user's face. The application checks whether the jaundice diagnosis patch is based on the pattern formed on the jaundice diagnosis patch 100. In addition, if the image of the jaundice diagnosis patch is shown in the image of the user's face, the terminal 200 recognizes the user's eyeball and diagnoses whether or not jaundice has occurred.

패치 인증 시스템(300)은 단말(200)에 설치된 황달 진단 어플리케이션과 연동하여, 어플리케이션을 실행하는 사용자에 대한 인증, 그리고 황달 진단 패치(100)의 유효성을 검사한다.The patch authentication system 300 interlocks with a jaundice diagnosis application installed in the terminal 200 to authenticate a user who runs the application and checks the validity of the jaundice diagnosis patch 100.

여기서, 황달 진단 패치(100)에 대해 도 2를 참조로 설명한다. 본 발명의 실시예에서는 황달 진단 패치(100)라 지칭하나, 황달 진단 기준 장치라고도 지칭할 수 있다.Here, the jaundice diagnosis patch 100 will be described with reference to FIG. 2. In the embodiment of the present invention, it is referred to as the jaundice diagnostic patch 100, but may also be referred to as a jaundice diagnostic reference device.

도 2는 본 발명의 실시예에 따른 황달 진단 패치의 예시도이다.2 is an exemplary diagram of a jaundice diagnostic patch according to an embodiment of the present invention.

도 2에 도시된 바와 같이, 황달 진단 패치(100)는 제1 위치에 사용자 안구 위치 영역(110)이 형성되어 있고, 제1 위치의 하단인 제2 위치에 패치 확인 구역(120)으로 구분된다. 황달 진단 패치(100)를 황달 진단 기준 장치라 지칭할 경우, 안구 위치 영역(110)은 안구 위치부로, 패치 확인 구역(120)은 패치 확인부로 지칭할 수도 있다.As shown in FIG. 2, the jaundice diagnosis patch 100 has a user eye location region 110 formed at a first position, and is divided into a patch confirmation region 120 at a second position that is a lower end of the first position. . When the jaundice diagnosis patch 100 is referred to as a jaundice diagnosis reference device, the eyeball location area 110 may be referred to as an eyeball location unit, and the patch confirmation area 120 may be referred to as a patch check unit.

사용자 안구 위치 영역(110)은 황달 진단 패치(100)의 상단에 형성되며, 사용자가 황달 진단 패치(100)를 얼굴에 가까이 위치시킬 때 사용자의 안구를 확인할 수 있도록 일정 크기로 뚫려 있다. 여기서, 본 발명의 실시예에서는 뚫린 부분을 ‘관심 영역’이라 지칭한다.The user's eyeball location area 110 is formed on the top of the jaundice diagnosis patch 100, and is punctured in a predetermined size so that the user's eyeball can be checked when the user places the jaundice diagnosis patch 100 close to the face. Here, in the embodiment of the present invention, the punctured portion is referred to as a “region of interest”.

사용자의 특정 신체 부위(안구)가 관심 영역 내에서 어느 영역에 위치되더라도, 어플리케이션은 사용자 안구로부터 눈동자를 인식하고 공막의 색상을 토대로 황달 여부를 진단할 수 있다. No matter where the user's specific body part (eye) is located in the region of interest, the application can recognize the pupil from the user's eye and diagnose whether or not jaundice is based on the color of the sclera.

패치 확인 구역(120)은 황달 진단 어플리케이션이 이미지에서 사용자의 얼굴에 위치한 패치가 황달 진단 패치(100)임을 확인할 수 있도록 패턴이 형성되어 있다. 패턴은 제1 패치 영역(121), 제2 패치 영역(122), 제3 패치 영역(123)으로 구분되된다. The patch confirmation area 120 has a pattern so that the jaundice diagnosis application can confirm that the patch located on the user's face in the image is the jaundice diagnosis patch 100. The pattern is divided into a first patch area 121, a second patch area 122, and a third patch area 123.

본 발명의 실시예에서는 패턴이 외곽 검정 영역인 제1 패치 영역(121)과 내부 검정 영역인 제3 패치 영역(123) 사이에 중간 흰 영역인 제2 패치 영역(122)이 위치하는 것을 예로 하여 설명한다. 각 패치 영역(121~123)들의 두께는 어느 하나의 수치로 한정되는 것은 아니다.In the embodiment of the present invention, as an example, the second patch area 122, which is an intermediate white area, is located between the first patch area 121, which is an outer black area, and the third patch area 123, which is an inner black area. Explain. The thickness of each of the patch regions 121 to 123 is not limited to any one value.

그리고 제3 패치 영역(123)에는 황달 진단 패치(100)의 유효성 검증을 위해 패치 ID가 삽입되어 있다. 본 발명의 실시예에서는 패치 ID가 QR(Quick Response) 코드나 바코드 형태로 제3 패치 영역(123)에 삽입되어 있는 것을 예로 하여 설명하나, 반드시 이와 같이 한정되는 것은 아니다.In addition, a patch ID is inserted in the third patch area 123 to verify the validity of the jaundice diagnosis patch 100. In the embodiment of the present invention, the patch ID is inserted into the third patch area 123 in the form of a quick response (QR) code or a barcode as an example, but is not limited as such.

황달 진단 패치(100)의 하단에는 사용자가 황달 진단 패치(100)를 쉽게 얼굴에 댈 수 있도록 손잡이(130)가 구비되어 있다. 그러나, 반드시 이와 같이 한정되는 것은 아니며, 사용자가 얼굴에 착용할 수 있는 안대 등의 형태로 구현될 수도 있다.A handle 130 is provided at the bottom of the jaundice diagnosis patch 100 so that the user can easily place the jaundice diagnosis patch 100 on the face. However, it is not necessarily limited as described above, and may be implemented in the form of an eye patch that can be worn by the user on the face.

한편, 황달 진단 패치(100)를 인식하여 사용자의 황달 여부를 진단하는 단말(200)의 구조에 대해 도 3을 참조로 설명한다. 본 발명의 실시예에서는 설명의 편의를 위하여 황달 진단 어플리케이션이 설치된 단말(200)이 사용자의 황달 여부를 진단하는 것으로 설명하나, 황달 진단 어플리케이션에서 이를 수행한다.On the other hand, the structure of the terminal 200 for diagnosing the user's jaundice by recognizing the jaundice diagnosis patch 100 will be described with reference to FIG. 3. In the embodiment of the present invention, for convenience of explanation, the terminal 200 on which the jaundice diagnosis application is installed diagnoses whether the user has jaundice, but the jaundice diagnosis application performs this.

도 3은 본 발명의 실시예에 따른 단말의 구조도이다.3 is a structural diagram of a terminal according to an embodiment of the present invention.

도 3에 도시된 바와 같이, 단말(200)은 카메라(210), 프로세서(220), 인터페이스(230), 메모리(240), 그리고 입력 수단(250)을 포함한다.As shown in FIG. 3, the terminal 200 includes a camera 210, a processor 220, an interface 230, a memory 240, and an input means 250.

카메라(210)는 황달 진단 어플리케이션이 실행되면 프로세서(220)의 제어에 따라 활성 상태가 되어 황달 진단 패치(100)와 사용자 얼굴을 촬영한다. 카메라(210)가 촬영한 황달 진단 패치(100)가 중첩된 사용자 얼굴 이미지를 ‘패치 이미지’라 지칭한다. When the jaundice diagnosis application is executed, the camera 210 becomes active under the control of the processor 220 to capture the jaundice diagnosis patch 100 and the user's face. The image of the user's face in which the jaundice diagnosis patch 100 photographed by the camera 210 is overlapped is referred to as a “patch image”.

또한, 카메라(210)는 사용자 인증을 위해 홍채 정보를 이용할 경우, 사용자 홍채 이미지를 촬영할 수도 있다.In addition, when using iris information for user authentication, the camera 210 may capture a user iris image.

프로세서(220)는 입력 수단(250)을 통해 입력되는 사용자의 개인 식별 정보(이하, ‘입력 사용자 정보’라 지칭함)를 수신한다. 여기서, 입력 사용자 정보는 사용자의 홍채 정보나 지문 정보를 의미한다.The processor 220 receives the user's personal identification information (hereinafter referred to as “input user information”) input through the input means 250. Here, the input user information means iris information or fingerprint information of the user.

프로세서(220)는 메모리(240)에 저장된 사용자의 개인 식별 정보(이하, ‘저장 사용자 정보’라 지칭함)와 입력 수단(250)을 통해 수신한 입력 사용자 정보를 비교한다. 그리고 단말(200)에 설치된 황달 진단 어플리케이션을 실행한 사용자를 인증한다. 여기서, 프로세서(220)는 사용자 인증을 위해 수신한 입력 사용자 정보를 패치 인증 시스템(300)으로 전달하여, 패치 인증 시스템(300)에서 사용자 인증을 실행할 수도 있다.The processor 220 compares the user's personal identification information (hereinafter referred to as “storage user information”) stored in the memory 240 with input user information received through the input means 250. In addition, the user who has executed the jaundice diagnosis application installed in the terminal 200 is authenticated. Here, the processor 220 may transmit the input user information received for user authentication to the patch authentication system 300 to perform user authentication in the patch authentication system 300.

프로세서(220)는 황달 진단 어플리케이션을 실행시킨 사용자의 인증에 성공하거나 패치 인증 시스템(300)으로부터 사용자 인증 성공 신호를 수신하면, 카메라(210)를 구동할 제어 신호를 생성한다. 생성한 제어 신호는 카메라(210)로 전달된다.The processor 220 generates a control signal to drive the camera 210 when the user who has executed the jaundice diagnosis application succeeds in authentication or receives a user authentication success signal from the patch authentication system 300. The generated control signal is transmitted to the camera 210.

프로세서(220)는 카메라(210)가 촬영한 패치 이미지로부터 패치 확인 구역을 추출한다. 프로세서(220)는 추출한 패치 확인 구역에서 패턴을 확인하고, 패치 이미지에 중첩된 패치가 황달 진단 패치(100)인지 확인한다.The processor 220 extracts a patch confirmation area from the patch image captured by the camera 210. The processor 220 checks the pattern in the extracted patch confirmation area, and checks whether the patch superimposed on the patch image is the jaundice diagnosis patch 100.

프로세서(220)는 패치 이미지로부터 황달 진단 패치(100)를 확인하면, 제3 패치 영역(123)에 삽입된 패치 ID를 추출한다. 프로세서(220)는 추출한 패치 ID를 인터페이스(230)를 통해 패치 인증 시스템(300)으로 전송한다.When the processor 220 checks the jaundice diagnosis patch 100 from the patch image, the processor 220 extracts the patch ID inserted into the third patch area 123. The processor 220 transmits the extracted patch ID to the patch authentication system 300 through the interface 230.

프로세서(220)는 패치 인증 시스템(300)으로부터 황달 진단 패치(100)의 유효성 확인 정보를 수신하면, 사용자 안구 위치 영역(110)에서 촬영된 사용자 안구의 공막 이미지를 추출한다. 프로세서(220)는 사용자 안구의 이미지에 화이트밸런싱 처리하고, 가장 밝은 영역을 공막으로 추출한다. 여기서, 프로세서(220)가 사용자 안구에서 공막 이미지를 추출하는 방법은 다양한 방법으로 수행되므로, 본 발명의 실시예에서는 어느 하나의 방법으로 한정하지 않는다.When the processor 220 receives the validity confirmation information of the jaundice diagnosis patch 100 from the patch authentication system 300, the processor 220 extracts a sclera image of the user's eye photographed in the user's eye location area 110. The processor 220 performs white balancing on the image of the user's eye, and extracts the brightest area into the sclera. Here, since the method of extracting the sclera image from the user's eye by the processor 220 is performed in various ways, the embodiment of the present invention is not limited to any one method.

프로세서(220)는 추출한 공막 이미지와 제2 패치 영역(122)을 비교하여, 사용자가 황달인지 여부를 분석한다. 프로세서(220)가 공막 이미지와 제2 패치 영역(122)을 이용하여 황달 여부를 분석하는 방법은 다양한 방법으로 수행할 수 있으므로, 본 발명의 본 발명의 실시예에서는 어느 하나의 방법으로 한정하지 않는다.The processor 220 compares the extracted scleral image and the second patch area 122 to analyze whether the user has jaundice. Since the method of analyzing the presence of jaundice by the processor 220 using the scleral image and the second patch area 122 can be performed in various ways, it is not limited to any one method in the embodiment of the present invention. .

인터페이스(230)는 패치 인증 시스템(300)과 연동하여 패치 ID를 전송하고, 패치 인증 시스템(300)으로부터 전송되는 유효성 확인 정보를 수신한다. The interface 230 transmits a patch ID by interworking with the patch authentication system 300 and receives validity check information transmitted from the patch authentication system 300.

메모리(240)는 단말(200)에서 황달 진단 어플리케이션을 구동하기 위한 어플리케이션 실행 파일을 저장한다. 또한, 메모리(240)는 프로세서(220)에서 분석한 황달 여부 정보를 저장한다. 또한, 메모리(240)는 단말(200)을 구동하기 위해 필요한 다양한 프로그램들을 저장한다.The memory 240 stores an application execution file for driving the jaundice diagnosis application in the terminal 200. In addition, the memory 240 stores information about whether or not jaundice analyzed by the processor 220. In addition, the memory 240 stores various programs required to drive the terminal 200.

입력 수단(250)은 사용자의 지문 등 사용자 인증을 위한 인증 정보를 수집한다. 입력 수단(250)이 지문을 수집하는 방법은 다양하므로, 본 발명의 실시예에서는 어느 하나의 방법으로 한정하지 않는다.The input means 250 collects authentication information for user authentication, such as a user's fingerprint. Since the method of collecting the fingerprint by the input means 250 is various, it is not limited to any one method in the embodiment of the present invention.

다음은 단말(200)과 연동하여 황달 패치의 유효성을 인증하거나 사용자를 인증하는 패치 인증 시스템에 대해 도 4를 참조로 설명한다.Next, a patch authentication system for authenticating the validity of a jaundice patch or authenticating a user in connection with the terminal 200 will be described with reference to FIG. 4.

도 4는 본 발명의 실시예에 따른 패치 인증 시스템의 구조도이다.4 is a structural diagram of a patch authentication system according to an embodiment of the present invention.

도 4에 도시된 바와 같이 패치 인증 시스템(300)은 인터페이스(310), 사용자 인증부(320), 사용자 정보 저장부(330), 황달 패치 유효성 인증부(340), 그리고 황달 패치 정보 저장부(350)를 포함한다.As shown in Fig. 4, the patch authentication system 300 includes an interface 310, a user authentication unit 320, a user information storage unit 330, a jaundice patch validity authentication unit 340, and a jaundice patch information storage unit ( 350).

인터페이스(310)는 단말(200)로부터 전송되는 사용자 정보를 수신한다. The interface 310 receives user information transmitted from the terminal 200.

인터페이스(310)를 통해 사용자의 개인 식별 정보를 단말(200)로부터 수신하면, 사용자 인증부(320)는 사용자 정보 저장부(330)에 저장된 개인 식별 정보와 비교한다. 비교 결과를 토대로, 사용자 인증부(320)는 황달 진단 어플리케이션을 실행하는 사용자가 승인된 사용자인지 확인한다.When the user's personal identification information is received from the terminal 200 through the interface 310, the user authentication unit 320 compares the personal identification information stored in the user information storage unit 330 with the personal identification information. Based on the comparison result, the user authentication unit 320 checks whether the user executing the jaundice diagnosis application is an approved user.

본 발명의 실시예에서는 황달 진단 어플리케이션이 실행되면, 사용자의 지문이나 홍채 등의 생체 정보를 입력으로 받아, 사용자 정보 저장부(330)에 기 저장된 생체 정보와 비교함으로써, 사용자가 승인된 사용자인지 확인하는 것을 예로 하여 설명한다. 그러나, 반드시 이와 같이 한정되는 것은 아니다.In an embodiment of the present invention, when the jaundice diagnosis application is executed, biometric information such as a user's fingerprint or iris is received as an input and compared with biometric information previously stored in the user information storage unit 330 to determine whether the user is an approved user. This will be explained by taking an example. However, it is not necessarily so limited.

사용자 인증부(320)는 사용자 인증에 성공한 경우에는 인증 성공 신호를 생성하여 인터페이스(310)를 통해 단말(200)로 전송한다. 그러나, 사용자 인증에 실패한 경우, 사용자 인증부(320)는 사용자가 황달 진단 어플리케이션을 사용할 수 없음을 알리는 사용 불가 메시지를 생성하여 단말(200)에 제공하거나, 인증 실패 신호를 생성하여 단말(200)로 전송한다.When user authentication is successful, the user authentication unit 320 generates an authentication success signal and transmits it to the terminal 200 through the interface 310. However, if the user authentication fails, the user authentication unit 320 generates an unusable message notifying that the user cannot use the jaundice diagnosis application and provides it to the terminal 200 or generates an authentication failure signal to the terminal 200 Transfer to.

또한, 인터페이스(310)는 단말(200)로부터 전송되는 황달 패치 식별 정보를 수신한다. 황달 패치 유효성 인증부(340)는 황달 패치 정보 저장부(350)에 등록된 황달 패치 식별 정보에 대응하는 유효 정보를 확인한다. In addition, the interface 310 receives the jaundice patch identification information transmitted from the terminal 200. The jaundice patch effectiveness authentication unit 340 checks valid information corresponding to the jaundice patch identification information registered in the jaundice patch information storage unit 350.

여기서, 사용자가 황달 진단 패치(100)를 이용하여 처음 황달 여부의 진단을 시도할 경우, 단말(200)은 황달 진단 패치(100)의 황달 패치 식별 정보와 황달 패치 식별 정보를 수집한 날짜 정보를 패치 인증 시스템(300)으로 전송한다. 모든 황달 진단 패치(100)들은 사전에 결정된 사용 기간이 정해져 있으므로, 처음 황달 진단 패치(100)가 사용된 시점의 날짜 정보 수집이 필요하다.Here, when the user first attempts to diagnose jaundice using the jaundice diagnosis patch 100, the terminal 200 stores the jaundice patch identification information of the jaundice diagnosis patch 100 and the date information on which the jaundice patch identification information was collected. It transmits to the patch authentication system 300. Since all the jaundice diagnosis patches 100 have a predetermined period of use, it is necessary to collect date information at the time when the jaundice diagnosis patch 100 is first used.

황달 패치 유효성 인증부(340)는 황달 진단 패치(100)의 유효 기간이 남아 있는 것으로 확인하면, 유효성 확인 성공 신호를 생성하여 단말(200)로 전송한다. 반면, 황달 패치 유효성 인증부(340)는 황달 진단 패치(100)의 유효 기간이 만료된 것으로 확인하면, 유효성 확인 실패 신호와 함께 새로운 황달 진단 패치(100)를 구매하도록 유도하는 유효 기간 만료 신호를 생성하여 단말(200)로 전송한다. If the jaundice patch validity authentication unit 340 determines that the validity period of the jaundice diagnosis patch 100 remains, generates a validity check success signal and transmits it to the terminal 200. On the other hand, if the jaundice patch validity authentication unit 340 determines that the validity period of the jaundice diagnosis patch 100 has expired, the validity period expiration signal for inducing the purchase of a new jaundice diagnosis patch 100 together with a validity check failure signal is generated. It is generated and transmitted to the terminal 200.

이상에서 설명한 황달 진단 패치(100)의 패치 유효성을 확인하고, 황달 진단 패치(100)를 이용하여 황달 여부를 진단하는 방법에 대해 도 5를 참조로 설명한다.A method of checking the patch effectiveness of the jaundice diagnosis patch 100 described above and diagnosing whether or not jaundice by using the jaundice diagnosis patch 100 will be described with reference to FIG. 5.

도 5는 본 발명의 실시예에 따른 황달 자가 진단 방법에 대한 흐름도이다.5 is a flowchart of a method for self-diagnosing jaundice according to an embodiment of the present invention.

도 5에 도시된 바와 같이, 단말(200)은 기 설치된 황달 진단 어플리케이션의 실행을 요청하는 입력 신호를 수신하면(S100), 어플리케이션을 실행한 사용자 정보를 수집한다. 단말(200)은 황달 진단 어플리케이션이 실행됨과 동시에 사용자의 생체 정보를 수집하고, 수집한 사용자 정보를 패치 인증 시스템(300)에 전송한다(S101).As shown in FIG. 5, when the terminal 200 receives an input signal requesting execution of a pre-installed jaundice diagnosis application (S100), the terminal 200 collects user information who has executed the application. When the jaundice diagnosis application is executed, the terminal 200 collects the user's biometric information and transmits the collected user information to the patch authentication system 300 (S101).

본 발명의 실시예에서는 사용자 정보로 지문을 수집하는 것을 예로 하여 설명하나, 사용자의 홍채 정보나 얼굴 인식 정보를 이용할 수도 있다. 단말(200)이 사용자의 생체 정보를 수집하는 방법은 이미 알려진 것으로, 본 발명의 실시예에서는 어느 하나의 방법으로 한정하지 않는다.In the embodiment of the present invention, a fingerprint is collected as user information as an example, but iris information or face recognition information of the user may be used. The method of collecting the user's biometric information by the terminal 200 is already known, and the embodiment of the present invention is not limited to any one method.

패치 인증 시스템(300)은 S101 단계에서 수신한 입력 사용자 정보를, 기 저장된 저장 사용자 정보와 비교하여 사용자를 인증한다(S102). 패치 인증 시스템(300)은 수신한 입력 사용자 정보와 기 저장된 저장 사용자 정보를 비교하고, 비교 결과에 따라 사용자 인증에 성공하였는지 확인한다(S103).The patch authentication system 300 compares the input user information received in step S101 with pre-stored user information to authenticate the user (S102). The patch authentication system 300 compares the received input user information with pre-stored user information, and checks whether user authentication is successful according to the comparison result (S103).

사용자 인증에 실패하였다면, 패치 인증 시스템(300)은 단말(200)로 사용자 인증에 실패하였음을 알리는 메시지를 전송한다(S104). 전송된 메시지는 단말(200)을 통해 사용자에게 디스플레이된다.If the user authentication has failed, the patch authentication system 300 transmits a message indicating that the user authentication has failed to the terminal 200 (S104). The transmitted message is displayed to the user through the terminal 200.

반면 S103 단계에서 확인한 결과 사용자 인증에 성공하였다면, 패치 인증 시스템(300)은 인증 성공 신호를 단말(200)에 제공한다(S105). 단말(200)은 패치 인증 시스템(300)으로부터 인증 성공 신호를 수신하면, 단말(200)은 카메라를 활성화한다(S106). 인증 성공 신호를 수신한 단말(200)이 카메라를 활성화하는 방법은 다양하게 구현될 수 있으므로, 본 발명의 실시예에서는 어느 하나의 방법으로 한정하지 않는다.On the other hand, if the user authentication is successful as a result of checking in step S103, the patch authentication system 300 provides an authentication success signal to the terminal 200 (S105). When the terminal 200 receives an authentication success signal from the patch authentication system 300, the terminal 200 activates the camera (S106). Since the method of activating the camera by the terminal 200 receiving the authentication success signal can be implemented in various ways, the embodiment of the present invention is not limited to any one method.

단말(200)은 활성화된 카메라(210)로부터 사용자 얼굴 이미지를 수집한다(S107). 여기서, 사용자 얼굴 이미지는 사용자가 소지한 황달 진단 패치(100)를 얼굴의 일정 부분에 위치시킨 촬영 이미지를 의미하며, 사용자의 양쪽 안구 중 어느 한쪽의 안구가 황달 진단 패치(100)의 사용자 안구 위치 영역(110)에 위치하는 형태로 촬영된 이미지이다.The terminal 200 collects the user's face image from the activated camera 210 (S107). Here, the user's face image refers to a photographed image in which the jaundice diagnosis patch 100 held by the user is positioned on a certain part of the face, and either eyeball of the user's both eyes is the user's eyeball position of the jaundice diagnosis patch 100 This is an image photographed in a shape positioned in the area 110.

단말(200)은 S107 단계에서 수집한 사용자 얼굴 이미지 중 미리 설정된 위치의 이미지로부터 사용자 얼굴 이미지에 황달 진단 패치(100)의 패턴이 삽입되어 있는지 확인하기 위하여 패치 확인 구역을 추출한다(S108). 황달 진단 패치(100)의 패치 확인 구역은 검정색의 제1 패치 영역(121)과 제3 패치 영역(123) 사이에 흰색의 제2 패치 영역(122)이 배치되는 형태를 예로 하여 설명한다.The terminal 200 extracts a patch check area to check whether the pattern of the jaundice diagnosis patch 100 is inserted in the user face image from the image at a preset position among the user face images collected in step S107 (S108). The patch confirmation area of the jaundice diagnosis patch 100 will be described based on an example in which a white second patch area 122 is disposed between the black first patch area 121 and the third patch area 123.

여기서, 제1 패치 영역(121) 및 제3 패치 영역(123)은 초점이 맞는 이미지를 획득하기 위해 이용되고, 제2 패치 영역(122)은 황달 진단 이미지의 색상을 보정하기 위한 기준으로 이용될 수 있다. 본 발명의 실시예에서는 상기 도 2에 나타낸 바와 같이, 황달 진단 패치(100)와 사용자의 다른 신체부위(예를 들어, 안구)의 식별이 용이하도록, 제1 패치 영역(121)과 제3 패치 영역(123)이 제2 패치 영역(122)을 사이에 두고 교차 배치된 색 영역을 가지는 것을 예로 하여 도시하였으나, 황달 진단 패치(100)의 색 영역은 다양한 형태로 구성될 수 있다.Here, the first patch area 121 and the third patch area 123 are used to obtain an image in focus, and the second patch area 122 is used as a reference for correcting the color of the jaundice diagnosis image. I can. In an embodiment of the present invention, as shown in FIG. 2, the first patch area 121 and the third patch are used to facilitate identification of the jaundice diagnosis patch 100 and other body parts (eg, the eyeball) of the user. Although the region 123 is illustrated as having color regions cross-arranged with the second patch region 122 therebetween, the color region of the jaundice diagnosis patch 100 may be configured in various forms.

즉, 단말(100)은 이미지 촬영 전에 카메라(210)를 통해 촬영되는 이미지를 실시간으로 분석하고, 에지 검출 알고리즘을 이용하여 제1 패치 영역(121)과 제3 패치 영역(123)의 에지를 검출한다. 이때, 에지 검출 알고리즘은 캐니 에지 검출(canny edge detector) 알고리즘, 로버츠(Roberts) 에지 검출 알고리즘, 소벨(Sobel) 에지 검출 알고리즘, 프리윗(Prewitt) 에지 검출 알고리즘 등 다양한 알고리즘이 사용될 수 있으며, 본 발명의 실시예에서는 어느 하나의 알고리즘으로 한정하지 않는다.That is, the terminal 100 analyzes the image captured by the camera 210 in real time before image capturing, and detects the edges of the first patch area 121 and the third patch area 123 using an edge detection algorithm. do. In this case, various algorithms such as a canny edge detector algorithm, a Roberts edge detection algorithm, a Sobel edge detection algorithm, and a Prewitt edge detection algorithm may be used as the edge detection algorithm. In the embodiment of, it is not limited to any one algorithm.

제1 패치 영역(121)과 제3 패치 영역(123)의 에지가 검출되면, 단말(100)은 초점이 맞는 이미지라고 판단하고, 카메라(210)에 의해 촬영된 이미지에 황달 진단 패치(100)의 이미지가 포함된 것으로 확인한다. When the edges of the first patch area 121 and the third patch area 123 are detected, the terminal 100 determines that the image is in focus, and the jaundice diagnosis patch 100 is applied to the image captured by the camera 210. Confirm that the image of is included.

이때, 단말(100)은 음성을 통해 촬영 가이드라인을 제공하여, 초점이 맞춰진 이미지를 촬영할 수 있도록 할 수도 있다. 예를 들어, 단말(100)은 사용자가 너무 가까이 있으면 조금 뒤로 물러나라는 메시지를 출력할 수 있고, 사용자의 안구(400)가 작아 식별이 힘들면 눈을 크게 뜨라는 메시지를 출력할 수도 있다. In this case, the terminal 100 may provide a photographing guideline through voice, so that a focused image can be photographed. For example, if the user is too close, the terminal 100 may output a message to step back a little, and if the user's eyeball 400 is small and difficult to identify, the terminal 100 may output a message to open the eyes wide.

또한, 단말(100)은 제1 패치 영역(121)의 일부분이 잘린 상태로 검출되면, 제1 패치 영역(121) 및 제3 패치 영역(123)의 에지가 모두 검출될 수 있는 방향으로 움직이라는 메시지를 출력할 수도 있다. In addition, when the terminal 100 detects that a part of the first patch area 121 is cut off, the terminal 100 is asked to move in a direction in which both the edges of the first patch area 121 and the third patch area 123 can be detected. You can also print a message.

한편, 상기 S108 단계에서 추출한 패치 확인 구역을 토대로 사용자 얼굴 이미지에 황달 진단 패치(100)가 없는 것으로 확인하면, 단말(200)은 S106 단계 이후의 절차를 반복 실행한다. On the other hand, if it is determined that there is no jaundice diagnosis patch 100 in the user's face image based on the patch confirmation area extracted in step S108, the terminal 200 repeats the procedure after step S106.

한편, S108 단계에서 사용자 얼굴 이미지에 황달 진단 패치(100)가 위치한 것으로 확인하면, 단말(200)은 패치 확인 구역 중 제3 패치 영역(123)에 삽입된 패치 식별 정보를 추출한다(S110). 본 발명의 실시예에서는 제3 패치 영역(123)에 패치 식별 정보가 QR 코드, 바코드 등 다양한 형태로 삽입되어 있으며, 패치 식별 정보를 삽입하는 방법을 어느 하나로 한정하지 않는다.On the other hand, if it is confirmed that the jaundice diagnosis patch 100 is located in the user's face image in step S108, the terminal 200 extracts the patch identification information inserted into the third patch area 123 of the patch confirmation area (S110). In the embodiment of the present invention, the patch identification information is inserted into the third patch area 123 in various forms such as a QR code and a barcode, and the method of inserting the patch identification information is not limited to any one.

단말(100)은 S110 단계에서 추출한 패치 식별 정보를, 사용자 얼굴 이미지를 수집한 날짜 정보와 함께 패치 인증 시스템(300)으로 전송한다(S111). 패치 인증 시스템(300)은 S111 단계에서 수신한 패치 식별 정보와 날짜 정보를 토대로, 황달 진단 패치(100)의 유효성을 인증한다(S112).The terminal 100 transmits the patch identification information extracted in step S110 to the patch authentication system 300 together with the date information on which the user's face image was collected (S111). The patch authentication system 300 authenticates the validity of the jaundice diagnosis patch 100 based on the patch identification information and date information received in step S111 (S112).

예를 들어, 모든 황달 진단 패치(100)에 패치 사용 후 1년의 유효 기간이 부여된다고 가정한다. 그리고 사용자가 최초 황달 진단 패치(100)를 사용하여 황달 자가 진단을 시작했을 때의 날짜 정보가 패치 인증 시스템(300)으로 전달되어 저장된다.For example, it is assumed that a valid period of 1 year is given to all the jaundice diagnostic patches 100 after use of the patch. In addition, date information when the user starts self-diagnosis of jaundice using the first jaundice diagnosis patch 100 is transmitted to and stored in the patch authentication system 300.

패치 인증 시스템(300)은 복수의 패치 식별 정보들과 각각의 최초 사용 날짜 정보를 일대 일 매핑하여 저장해 둔다. 그리고, 단말(100)로부터 패치 식별 정보를 수신하면, 해당 패치 식별 정보에 대응하는 날짜 정보가 저장되어 있는지 확인한다.The patch authentication system 300 stores a one-to-one mapping of a plurality of patch identification information and each first use date information. And, upon receiving the patch identification information from the terminal 100, it is checked whether date information corresponding to the patch identification information is stored.

만약, S112 단계에서 패치 유효성 인증을 위해 기 저장된 패치들의 패치 식별 정보 중 S111 단계에서 수신한 패치 식별 정보가 있는지 확인한다. 만약 패치 식별 정보가 존재하지 않으면, S111 단계에서 수신한 패치 식별 정보와 날짜 정보를 일대 일 매핑하여 저장한다. 그리고 황달 진단 패치(100)가 유효한 패치임을 단말(100)에 알린다. If, in step S112, it is checked whether there is patch identification information received in step S111 among patch identification information of patches previously stored for patch validity authentication. If the patch identification information does not exist, the patch identification information and the date information received in step S111 are mapped and stored one-to-one. And it notifies the terminal 100 that the jaundice diagnosis patch 100 is a valid patch.

그러나, 수신한 패치 식별 정보에 대응하는 정보가 저장되어 있다면, 해당 패치 식별 정보를 토대로 최초 실행된 날짜 정보를 확인한다. 그리고 확인한 날짜로부터 S111 단계에서 수신한 날짜가 유효 기간 내에 해당하는지 확인한다(S113).However, if information corresponding to the received patch identification information is stored, first execution date information is checked based on the patch identification information. And it is checked whether the date received in step S111 from the checked date falls within the validity period (S113).

만약 유효 기간이 지났다면, 패치 인증 시스템(300)은 단말(100)로 황달 진단 패치(100)의 유효 기간 만료를 알리며, 새로운 황달 진단 패치(100)의 구매를 유도한다(S114). 새로운 황달 진단 패치(100) 구매 유도를 위해, 황달 진단 패치(100)를 판매하는 판매 사이트의 URL 정보 등을 제공할 수 있다.If the validity period has passed, the patch authentication system 300 notifies the terminal 100 of the expiration of the validity period of the jaundice diagnosis patch 100 and induces the purchase of a new jaundice diagnosis patch 100 (S114). In order to induce purchase of the new jaundice diagnosis patch 100, URL information of a sales site that sells the jaundice diagnosis patch 100 may be provided.

그러나, S113 단계에서 확인한 황달 진단 패치(100)의 유효 기간이 만료 전이면, 패치 유효 알림 메시지를 단말(100)로 전송한다(S115). 단말(100)은 패치 유효 알림 메시지를 수신하면, S107 단계에서 수집한 이미지로부터 사용자의 황달 여부를 진단한다(S116). However, if the validity period of the jaundice diagnosis patch 100 checked in step S113 is before the expiration, the patch validity notification message is transmitted to the terminal 100 (S115). When receiving the patch validity notification message, the terminal 100 diagnoses whether the user has jaundice from the image collected in step S107 (S116).

이상에서 설명한 방법을 통해 황달을 자가 진단하는 실시예에 대해 도 6을 참조로 설명한다.An embodiment of self-diagnosing jaundice through the method described above will be described with reference to FIG. 6.

도 6은 본 발명의 실시예에 따른 황달 자가 진단 방법에 대한 예시도이다.6 is an exemplary diagram for a method for self-diagnosing jaundice according to an embodiment of the present invention.

도 6의 (a)에 도시된 바와 같이, 사용자가 단말(100)에 설치된 황달 진단 어플리케이션을 실행하면, (b)에 도시된 바와 같이 사용자 정보를 인증하기 위해 본인 인증을 위한 생체 정보 수집 화면을 디스플레이한다. 본 발명의 실시예에서는 여러 생체 정보 중 지문을 통해 사용자를 인증하는 것을 예로 하여 설명한다.As shown in (a) of FIG. 6, when the user executes the jaundice diagnosis application installed in the terminal 100, a biometric information collection screen for self-authentication is displayed to authenticate user information, as shown in (b). Display. In the embodiment of the present invention, among various biometric information, authentication of a user through a fingerprint will be described as an example.

이를 위해, 사용자가 처음 단말(100)에 황달 진단 어플리케이션을 설치할 때, 사용자의 생체 정보(예를 들어, 지문, 얼굴, 홍채 등)를 입력해 패치 인증 시스템(300)에 등록한다. (b)에 도시된 생체 정보 인식 창(①)을 통해 사용자가 지문을 입력하면, 패치 인증 시스템(300)으로 사용자가 입력한 지문 정보가 전송된다.To this end, when the user first installs the jaundice diagnosis application on the terminal 100, the user's biometric information (eg, fingerprint, face, iris, etc.) is input and registered in the patch authentication system 300. When a user inputs a fingerprint through the biometric information recognition window (①) shown in (b), the fingerprint information input by the user is transmitted to the patch authentication system 300.

패치 인증 시스템(300)은 등록된 사용자의 생체 정보와 수집한 생체 정보가 일치하면, 인증 성공 신호를 단말(100)로 전달한다. 그러면 황달 진단 어플리케이션은 도 6의 (c)에 도시한 바와 같이, 사용자가 선택할 메뉴들을 제공한다.When the biometric information of the registered user and the collected biometric information match, the patch authentication system 300 transmits an authentication success signal to the terminal 100. Then, the jaundice diagnosis application provides menus to be selected by the user, as shown in (c) of FIG. 6.

본 발명의 실시예에서는 선택 메뉴로 촬영(②), 분석(③), 설정(④) 메뉴를 예로 하여 설명하나, 반드시 이와 같이 한정되는 것은 아니다. 사용자가 촬영(②) 메뉴를 선택하면, 도 6의 (d)에 나타낸 바와 같이 사용자의 사용자 얼굴 이미지를 촬영할 수 있도록 단말(100)의 카메라가 활성화된다.In the exemplary embodiment of the present invention, a photographing (②), an analysis (③), and a setting (④) menu are described as examples of the selection menu, but are not necessarily limited as such. When the user selects the photographing (②) menu, the camera of the terminal 100 is activated so that the user's face image can be photographed as shown in (d) of FIG. 6.

단말(100)은 먼저 촬영한 사용자 얼굴 이미지에서 에지 검출 알고리즘을 이용하여 제1 패치 영역(121)과 제3 패치 영역(123)의 에지를 검출한다. 그리고 제1 패치 영역(121)과 제3 패치 영역(123)의 에지를 검출하면 사용자 얼굴 이미지에 황달 진단 패치(300)의 이미지가 포함된 것으로 확인하고, 제3 패치 영역(123)에 삽입된 패치 식별 정보를 수집한다.The terminal 100 detects the edges of the first patch area 121 and the third patch area 123 using an edge detection algorithm from the user's face image captured first. And when the edges of the first patch area 121 and the third patch area 123 are detected, it is determined that the image of the jaundice diagnosis patch 300 is included in the user's face image, and inserted into the third patch area 123. Collect patch identification information.

수집한 패치 식별 정보를 이용하여 패치 유효성을 인증한 패치 인증 시스템(300)으로부터, 도 6의 (e) 또는 (f)와 같은 패치 유효성 인증 메시지를 수신한다. 만약, 황달 진단 패치(100)의 유효 기간이 남아 있는 경우라면, 도 6의 (e)와 같이 패치가 유효함을 나타내는 메시지와 함께 패치 유효 기간을 표시하여 준다.A patch validity authentication message as shown in (e) or (f) of FIG. 6 is received from the patch authentication system 300 that authenticates the validity of the patch using the collected patch identification information. If the valid period of the jaundice diagnosis patch 100 remains, as shown in (e) of FIG. 6, the valid period of the patch is displayed along with a message indicating that the patch is valid.

그러나, 황달 진단 패치(100)의 유효 기간이 지난 경우라면, 황달 진단 패치(100)의 유효 기간이 만료되었음을 알리는 정보와 함께, 새로운 황달 진단 패치를 구매할 수 있도록 정보를 제공한다. 본 발명의 실시예에서는 구매하기 버튼을 추가로 디스플레이하였으나, 황달 진단 패치(100)를 구매할 수 있는 구매 사이트의 URL, 또는 구매 사이트로 자동 연결 등을 이용할 수도 있다.However, if the validity period of the jaundice diagnosis patch 100 has passed, information notifying that the validity period of the jaundice diagnosis patch 100 has expired and information so that a new jaundice diagnosis patch can be purchased is provided. In the embodiment of the present invention, a purchase button is additionally displayed, but the URL of the purchase site where the jaundice diagnosis patch 100 can be purchased, or an automatic link to the purchase site may be used.

한편, 황달 진단 패치(100)의 유효성이 검증되면, 도 6의 (g)와 같이 사용자의 황달 여부를 진단하여 이미지와 함께 제공한다. 즉, 단말(100)은 사용자 얼굴 이미지를 화이트 밸런싱 처리한 후, 화이트 밸런싱된 보정 이미지에서 눈동자를 인식한다.On the other hand, when the validity of the jaundice diagnosis patch 100 is verified, it diagnoses whether the user has jaundice as shown in (g) of FIG. 6 and provides it with an image. That is, after white-balancing the user's face image, the terminal 100 recognizes the pupils from the white-balanced corrected image.

단말(100)은 인식한 눈동자 중 공막 영역의 RGB 화소값과 황달 진단 패치(100)의 제2 패치 영역(122)의 RGB 화소 값을 비교하여, 사용자의 황달 여부를 진단한다. 단말(100)이 보정 이미지로부터 사용자의 황달 여부를 진단하는 방법은 다양하게 실행할 수 있다.The terminal 100 compares the RGB pixel value of the sclera region among the recognized pupils with the RGB pixel value of the second patch region 122 of the jaundice diagnosis patch 100 to diagnose whether the user has jaundice. The terminal 100 may perform various methods of diagnosing whether or not the user has jaundice from the corrected image.

그리고 진단 결과를 도 6의 (g)와 같이 디스플레이한다. 이때, 황달 자가 진단한 날짜와 시간 정보, 황달 여부에 대한 정보 등을 보정 이미지와 함께 제공할 수 있다. 사용자가 황달인 것으로 판정하면, 단말(100)은 연동한 의료 기관의 서버(도면 미도시)로 사용자 정보와 함께 황달 여부를 나타내는 정보를 전송할 수도 있다.And the diagnosis result is displayed as shown in Fig. 6(g). At this time, the date and time information on which the jaundice was diagnosed, information on whether or not jaundice, etc. may be provided together with the corrected image. If it is determined that the user has jaundice, the terminal 100 may transmit information indicating whether the user has jaundice together with the user information to a server (not shown) of an interworking medical institution.

한편, 도 6의 (c)에 나타낸 메뉴들 중 분석(③) 메뉴가 선택되면, 사용자가 그동안 자가 진단했던 황달 진단 결과 정보들을 디스플레이한다. On the other hand, when the analysis (③) menu is selected among the menus shown in (c) of FIG. 6, information on the result of jaundice diagnosis that the user has self-diagnosed is displayed.

이와 같이, 패치 인증 시스템(300)을 통해 최초 사용자 등록 시에 등록한 사용자 정보와 현재 사용하고 있는 실제 사용자의 사용자 정보가 맞는지 확인하는 과정을 통해 황달 인증 애플리케이션을 사용하고 있는 사용자를 인증함으로써, 황달 진단 애플리케이션을 등록된 사용자 본인으로 제한할 수 있다. 이를 토대로, 개인의 데이터와 히스토리에 대한 보안을 강화할 수 있다. In this way, through the patch authentication system 300, the user who is using the jaundice authentication application is authenticated through the process of checking whether the user information registered at the time of initial user registration and the user information of the actual user currently being used are correct, thereby diagnosing jaundice. Applications can be restricted to registered users themselves. Based on this, the security of personal data and history can be strengthened.

또한, 황달 진단 패치의 패치 ID를 인식할 수 있는 바코드, QR 코드 등의 수단을 통해, 사용자가 황달 진단 패치를 사용하기 시작한 날짜로부터 사용 가능한 기간을 제한할 수 있다. 이를 통해 사용 기간이 종료되면 황달 진단 패치의 재구매를 유도하거나, 패치 인증 시스템(300)에서 사용 기간별 이용권 구매 또는 황달 진단 패치의 재구매를 유도함으로써, 수익을 창출할 수 있다. In addition, it is possible to limit the usable period from the date the user starts using the jaundice diagnosis patch through means such as a barcode or QR code capable of recognizing the patch ID of the jaundice diagnosis patch. Through this, when the period of use is over, it is possible to generate revenue by inducing a repurchase of the jaundice diagnosis patch, or by inducing the purchase of a subscription for each period of use or repurchase of the jaundice diagnosis patch in the patch authentication system 300.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements by those skilled in the art using the basic concept of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

Claims (11)

이미지 기반으로 사용자의 황달을 진단하는 황달 진단 장치로서,
제1 영역과 제2 영역으로 구분된 황달 진단 기준 장치와 상기 제1 영역에 위치한 상기 사용자의 특정 신체 부위를 황달 진단 이미지로 촬영하는 촬영부,
상기 황달 진단 기준 장치의 유효성 인증을 위해, 상기 황달 진단 이미지에서 추출된 식별 정보를 패치 인증 시스템으로 전송하는 인터페이스,
상기 황달 진단 이미지에서 상기 제2 영역을 인식하여 상기 식별 정보를 추출하고, 상기 패치 인증 시스템에서 상기 황달 진단 기준 장치의 유효성 인증 신호를 수신하면 상기 제1 영역에서 상기 특정 신체 부위의 이미지를 추출하며, 추출한 특정 신체 부위 이미지와 상기 제2 영역의 이미지를 토대로 상기 사용자의 황달을 진단하는 프로세서
를 포함하는 황달 진단 장치.As a jaundice diagnosis device that diagnoses a user's jaundice based on an image,
A jaundice diagnosis reference device divided into a first area and a second area, and a photographing unit for photographing a specific body part of the user located in the first area as a jaundice diagnosis image,
An interface for transmitting identification information extracted from the jaundice diagnosis image to a patch authentication system for validity authentication of the jaundice diagnosis reference device,
Recognizing the second region from the jaundice diagnosis image to extract the identification information, and when receiving a validity authentication signal of the jaundice diagnosis reference device in the patch authentication system, extracts the image of the specific body part from the first region, and , Processor for diagnosing jaundice of the user based on the extracted specific body part image and the image of the second region
Jaundice diagnosis device comprising a. 제1항에 있어서,
상기 사용자의 상기 생체 정보를 수집하는 입력 수단
을 더 포함하고,
상기 프로세서는, 상기 인터페이스를 통해 상기 수집한 생체 정보를 상기 패치 인증 시스템에 전송하여 상기 사용자에 대한 인증을 요청하는 황달 진단 장치.The method of claim 1,
Input means for collecting the biometric information of the user
Including more,
The processor, a jaundice diagnosis apparatus for requesting authentication for the user by transmitting the collected biometric information to the patch authentication system through the interface. 제2항에 있어서,
상기 프로세서는,
특정 색상의 제1 패턴 영역, 흰색의 제2 패턴 영역, 그리고 상기 특정 색상의 제3 패턴 영역이 교차로 배치되어 있는 상기 제2 영역에서, 상기 식별 정보가 삽입된 상기 제3 패턴 영역으로부터 상기 식별 정보를 추출하는 황달 진단 장치.The method of claim 2,
The processor,
The identification information from the third pattern area into which the identification information is inserted in the second area in which the first pattern area of a specific color, the second pattern area of white, and the third pattern area of the specific color are intersected Jaundice diagnosis device to extract. 제3항에 있어서,
상기 프로세서는,
상기 황달 진단 이미지의 왜곡된 색상을 보정하여 보정 이미지를 생성하고, 생성한 보정 이미지로부터 상기 특정 신체 부위의 이미지를 추출하는 황달 진단 장치.The method of claim 3,
The processor,
Jaundice diagnosis apparatus for generating a corrected image by correcting the distorted color of the jaundice diagnosis image, and extracting an image of the specific body part from the generated corrected image. 황달 진단 장치가 이미지 기반으로 사용자의 황달을 진단하는 방법으로서,
제1 영역과 제2 영역으로 구분된 황달 진단 기준 장치와 상기 제1 영역에 위치한 상기 사용자의 특정 신체 부위를 포함하여 촬영된 황달 진단 이미지를 획득하는 단계,
상기 제2 영역에 삽입된 상기 황달 진단 기준 장치의 식별 정보를 추출하고, 연동한 인증 시스템으로 상기 식별 정보의 유효성 인증을 요청하는 단계, 그리고
상기 인증 시스템으로부터 유효성 인증 성공 메시지를 수신하면, 상기 제1 영역에 위치한 상기 특정 신체 부위의 이미지와 상기 제2 영역에 포함된 황달 진단 비교 이미지를 토대로, 상기 사용자의 황달 여부를 진단하는 단계
를 포함하는 황달 진단 방법.As a method for diagnosing jaundice of a user based on an image by a jaundice diagnosis device,
Obtaining a jaundice diagnosis image, including a jaundice diagnosis reference device divided into a first area and a second area, and a specific body part of the user located in the first area,
Extracting the identification information of the jaundice diagnosis reference device inserted in the second area, and requesting validity authentication of the identification information through an interlocked authentication system, and
When receiving a validity authentication success message from the authentication system, diagnosing whether the user has jaundice based on an image of the specific body part located in the first area and a comparison image for diagnosing jaundice included in the second area.
Jaundice diagnosis method comprising a. 제5항에 있어서,
상기 제2 영역은 특정 색상의 제1 패턴 영역, 흰색의 제2 패턴 영역, 그리고 상기 특정 색상의 제3 패턴 영역이 교차로 배치되고,
상기 유효성 인증을 요청하는 단계는,
상기 식별 정보가 삽입된 상기 제3 패턴 영역으로부터 상기 식별 정보를 추출하는 단계, 그리고
상기 황달 진단 이미지가 촬영된 촬영 날짜 정보와 상기 식별 정보를 상기 인증 시스템으로 전송하는 단계
를 포함하는 황달 진단 방법.The method of claim 5,
In the second area, a first pattern area of a specific color, a second pattern area of white, and a third pattern area of the specific color are arranged at intersections,
The step of requesting the validity authentication,
Extracting the identification information from the third pattern area into which the identification information is inserted, and
Transmitting the photographing date information on which the jaundice diagnosis image was taken and the identification information to the authentication system
Jaundice diagnosis method comprising a. 제6항에 있어서,
상기 황달 여부를 진단하는 단계는,
상기 황달 진단 이미지의 왜곡된 색상을 보정하여 보정 이미지를 생성하는 단계, 그리고
생성한 보정 이미지로부터 상기 특정 신체 부위의 이미지를 추출하고, 상기 제2 패턴 영역의 이미지와 비교하여 황달 여부를 진단하는 단계
를 포함하는 황달 진단 방법.The method of claim 6,
The step of diagnosing whether or not jaundice,
Generating a corrected image by correcting the distorted color of the jaundice diagnosis image, and
Extracting the image of the specific body part from the generated correction image and comparing the image with the second pattern area to diagnose jaundice
Jaundice diagnosis method comprising a. 제5항에 있어서,
상기 황달 진단 이미지를 획득하는 단계 이전에,
상기 사용자의 황달 진단을 위한 애플리케이션 구동 입력 신호를 수신하는 단계,
상기 애플리케이션을 구동한 상기 사용자의 생체 정보를 수집하는 단계, 그리고
상기 생체 정보를 상기 인증 시스템으로 전송하여, 상기 사용자에 대한 사용자 인증을 요청하는 단계
를 포함하는 황달 진단 방법.The method of claim 5,
Prior to the step of obtaining the jaundice diagnosis image,
Receiving an application driving input signal for diagnosing jaundice of the user,
Collecting biometric information of the user who has driven the application, and
Transmitting the biometric information to the authentication system to request user authentication for the user
Jaundice diagnosis method comprising a. 이미지 기반으로 사용자의 황달 여부를 진단하는 황달 진단 기준 장치로서,
제1 위치에 미리 설정된 크기로 뚫린 관심 영역이 형성되고, 상기 관심 영역에 위치한 상기 사용자의 특정 신체 부위가 노출되는 신체 부위 노출부, 그리고
상기 제1 위치에서 일정 간격 이격된 제2 위치에 형성되며, 패턴이 형성되어 있는 패치 확인부
를 포함하는 황달 진단 기준 장치.As a jaundice diagnosis reference device that diagnoses whether a user has jaundice based on an image,
A body part exposed part in which a region of interest pierced with a preset size is formed at a first position, and a specific body part of the user located in the region of interest is exposed, and
A patch confirmation unit formed at a second position spaced apart from the first position by a predetermined interval and having a pattern formed thereon
Jaundice diagnosis reference device comprising a. 제9항에 있어서,
상기 패치 확인부는,
특정 색상의 제1 패턴 영역, 흰색의 제2 패턴 영역, 그리고 상기 특정 색상의 제3 패턴 영역이 교차로 배치되며,
상기 제3 패턴 영역에는 상기 황달 진단 기준 장치의 식별 정보가 삽입되어 있는 황달 진단 기준 장치.The method of claim 9,
The patch confirmation unit,
A first pattern area of a specific color, a second pattern area of white, and a third pattern area of the specific color are arranged at intersections,
The jaundice diagnosis reference device in which the identification information of the jaundice diagnosis reference device is inserted in the third pattern area. 제10항에 있어서,
상기 식별 정보는 QR(Quick Response) 코드 또는 바코드 형태로 상기 제3 패턴 영역에 삽입되어 있는 황달 진단 기준 장치.The method of claim 10,
The identification information is inserted into the third pattern area in the form of a quick response (QR) code or barcode.
KR1020190129409A 2019-10-17 2019-10-17 Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same KR102388714B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020190129409A KR102388714B1 (en) 2019-10-17 2019-10-17 Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same
US17/071,477 US20210113147A1 (en) 2019-10-17 2020-10-15 Jaundice diagnosis patch, patch authentication system, and jaundice diagnosis method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190129409A KR102388714B1 (en) 2019-10-17 2019-10-17 Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same

Publications (2)

Publication Number Publication Date
KR20210045869A true KR20210045869A (en) 2021-04-27
KR102388714B1 KR102388714B1 (en) 2022-04-19

Family

ID=75492721

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190129409A KR102388714B1 (en) 2019-10-17 2019-10-17 Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same

Country Status (2)

Country Link
US (1) US20210113147A1 (en)
KR (1) KR102388714B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130003648A (en) * 2011-06-30 2013-01-09 (주) 레몬봇 Method for generating barcodes and judging a validity of the bar-codes, bar-code generating device, and system having the same
JP2016518885A (en) * 2013-03-19 2016-06-30 シュナイダー ハーラルト Evaluation method of erythema
KR20180045118A (en) 2016-10-24 2018-05-04 (주)오상헬스케어 Patch type health managing apparatus
KR20190041818A (en) 2017-10-13 2019-04-23 아주대학교산학협력단 Method and Apparatus for jaundice diagnosis based on an image
KR20190048340A (en) * 2017-10-31 2019-05-09 삼성전자주식회사 Electronic device and method for determining hyperemia grade of eye using the same

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11581090B2 (en) * 2017-12-22 2023-02-14 Electrocore, Inc. Technologies for initial provisioning and refilling of medical devices
US10945637B2 (en) * 2016-12-28 2021-03-16 Ajou University Industry-Academic Cooperation Foundation Image based jaundice diagnosing method and apparatus and image based jaundice diagnosis assisting apparatus
CA3089330A1 (en) * 2018-01-26 2019-08-01 Universitat De Barcelona Colour correction
US11348257B2 (en) * 2018-01-29 2022-05-31 Philipp K. Lang Augmented reality guidance for orthopedic and other surgical procedures
US11621062B2 (en) * 2019-07-26 2023-04-04 The Aga Khan University Secure medical alert and medical referral delivery using a cloud computing server in an online/offline mode

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130003648A (en) * 2011-06-30 2013-01-09 (주) 레몬봇 Method for generating barcodes and judging a validity of the bar-codes, bar-code generating device, and system having the same
JP2016518885A (en) * 2013-03-19 2016-06-30 シュナイダー ハーラルト Evaluation method of erythema
KR20180045118A (en) 2016-10-24 2018-05-04 (주)오상헬스케어 Patch type health managing apparatus
KR20190041818A (en) 2017-10-13 2019-04-23 아주대학교산학협력단 Method and Apparatus for jaundice diagnosis based on an image
KR20190048340A (en) * 2017-10-31 2019-05-09 삼성전자주식회사 Electronic device and method for determining hyperemia grade of eye using the same

Also Published As

Publication number Publication date
US20210113147A1 (en) 2021-04-22
KR102388714B1 (en) 2022-04-19

Similar Documents

Publication Publication Date Title
US10678897B2 (en) Identification, authentication, and/or guiding of a user using gaze information
JP6762380B2 (en) Identification method and equipment
US10192109B2 (en) Identification and/or authentication of a user using gaze information
US11244315B2 (en) Authentication system for controlling access and use based on heartbeat shape
EP2677490B1 (en) Authentication device, authentication program, and authentication method
US9659206B2 (en) Station for acquiring biometric and biographic data
KR101998595B1 (en) Method and Apparatus for jaundice diagnosis based on an image
WO2018125563A1 (en) Identification, authentication, and/or guiding of a user using gaze information
JP6265592B2 (en) Facial feature extraction apparatus and face authentication system
CN108921125A (en) A kind of sitting posture detecting method and wearable device
KR102354510B1 (en) Kiosk system for managing attendance of employee based on drinking measurement and method thereof
CN111481165A (en) Full-automatic intelligent fundus disease diagnosis system
KR101057720B1 (en) User Authentication System and Method
KR102388714B1 (en) Jaundice diagnostic patch, patch authentication system and method for jaundice diagnostic using the same
CN210277126U (en) Full-automatic intelligent fundus disease diagnosis system
CN115944266A (en) Visual function determination method and device based on eye movement tracking technology
CN110889356A (en) Method and device for unlocking AR glasses based on infrared camera and AR glasses
JP2007207043A (en) Biometrics system
JP2007257040A (en) Biometrics authentication device and biometrics authentication system
CN111557639A (en) Fundus inspection system
CN112022084A (en) Fundus inspection system
JP5975828B2 (en) Facial feature extraction apparatus and face authentication system
JP5417583B2 (en) Biometric authentication system
US20220130535A1 (en) System and method for remote authenticated testing applications
KR20230017454A (en) Method, Device and Computer Program For Preventing Cheating In Non-face-to-face Evaluation

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant