WO2020235939A2 - 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템 - Google Patents

이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템 Download PDF

Info

Publication number
WO2020235939A2
WO2020235939A2 PCT/KR2020/006626 KR2020006626W WO2020235939A2 WO 2020235939 A2 WO2020235939 A2 WO 2020235939A2 KR 2020006626 W KR2020006626 W KR 2020006626W WO 2020235939 A2 WO2020235939 A2 WO 2020235939A2
Authority
WO
WIPO (PCT)
Prior art keywords
mobile communication
communication terminal
eyeball
depth camera
changed
Prior art date
Application number
PCT/KR2020/006626
Other languages
English (en)
French (fr)
Other versions
WO2020235939A3 (ko
Inventor
한지상
Original Assignee
(의) 삼성의료재단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (의) 삼성의료재단 filed Critical (의) 삼성의료재단
Publication of WO2020235939A2 publication Critical patent/WO2020235939A2/ko
Publication of WO2020235939A3 publication Critical patent/WO2020235939A3/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271—Specific aspects of physiological measurement analysis
    • A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0024—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system for multiple sensor units attached to the patient, e.g. using a body or personal area network
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions

Definitions

  • the present invention relates to a related disease monitoring technology using a facial recognition function in a mobile communication terminal.
  • Various diseases throughout the body including the face and orbit, are accompanied by changes in the appearance of the face. Examples include orbital tumors, head and neck tumors, thyroid ophthalmopathy, ptosis, orbital inflammation, orbital fractures, obesity, and kidney disease.
  • the present invention has been devised to solve the above problems, and an object thereof is to provide a method and system for monitoring related diseases using a facial recognition function of a mobile communication terminal.
  • another object of the present invention is to provide a mobile communication terminal capable of notifying related diseases by measuring changes in the face using a 3D camera.
  • the mobile communication terminal of the present invention for achieving the above object includes a 3D depth camera, a storage unit for storing images captured by the 3D depth camera, a wireless communication unit for wireless communication with an external device through a wireless communication network, and a security function.
  • a control unit that compares the face images stored in the database to determine whether the face shape has changed, and when it is determined that the face shape has changed, expresses a related disease that may occur for each changed face shape.
  • the control unit calculates the eyeball protrusion degree representing the degree of protrusion of the eyeball from the face image stored in the storage unit and stores it in a database, determines whether the eyeball protrusion degree has changed sequentially, and when it is determined that the eyeball protrusion degree has changed, Possible related diseases can be expressed according to the changed ocular protrusion.
  • the control unit may calculate the ocular protrusion by calculating a distance to a corneal apex based on a lateral orbital rim in the eyeball image captured by the 3D depth camera.
  • the control unit measures a first distance from the 3D depth camera to the lateral orbital edge and a second distance from the 3D depth camera to the corneal vertex, and calculates a difference between the second distance from the first distance to protrude the eyeball. Degree can be calculated.
  • the controller may display medical information including medical staff information related to the related disease.
  • the control unit in a state in which a security function is applied to the mobile communication terminal, the control unit is configured from an image captured by the 3D depth camera.
  • an authentication step of comparing the recognized face image with a pre-stored user's face image.
  • the control unit determines that the recognized face image and the pre-stored user's face image are the same and the authentication is successful.
  • control unit converting the face image successfully authenticated into a database and storing it in a storage unit, the control unit sequentially converting the face image into a database in the storage unit and comparing the stored face image to see if the face shape is changed And determining, and the controller, when it is determined that the face shape has changed, expressing a related disease that may occur for each changed face shape.
  • the control unit calculates the eyeball protrusion degree representing the degree of protrusion of the eyeball from the face image stored in the storage unit and stores it in a database, determines whether the eyeball protrusion degree has changed sequentially, and when it is determined that the eyeball protrusion degree has changed, Possible related diseases can be expressed according to the changed ocular protrusion.
  • the control unit may calculate the ocular protrusion by calculating a distance to a corneal apex based on a lateral orbital rim in the eyeball image captured by the 3D depth camera.
  • the control unit measures a first distance from the 3D depth camera to the lateral orbital edge and a second distance from the 3D depth camera to the corneal vertex, and calculates a difference between the second distance from the first distance to protrude the eyeball. Degree can be calculated.
  • the controller may display medical information including medical staff information related to the related disease.
  • a 3D depth camera, a wireless communication unit for wireless communication with an external device through a wireless communication network, and a face image captured by the 3D depth camera are stored in advance. If it is determined that the face image is the same, the mobile communication terminal including a control unit for releasing the security function, the database and the wireless communication network communicate with the mobile communication terminal, and the security function through face recognition is released in the mobile communication terminal.
  • the face image is stored in the database
  • the face images sequentially stored in the database are compared to determine whether the face shape has changed, and if it is determined that the face shape has changed, related diseases that can occur for each changed face shape And a server for transmitting to the mobile communication terminal.
  • the server calculates and stores the eyeball protrusion indicating the degree of protrusion of the eyeball from the face image stored in the database, determines whether or not the eyeball protrusion has changed in sequence, and if it is determined that the eyeball protrusion has changed, the changed eyeball protrusion A related disease that may occur according to may be transmitted to the mobile communication terminal.
  • the server may calculate the eye protrusion by calculating a distance to a corneal apex based on a Lateral Orbital Rim in the eyeball image captured by the 3D depth camera.
  • the server measures a first distance from the 3D depth camera to the lateral orbital edge and a second distance from the 3D depth camera to the corneal vertex, and calculates the difference between the second distance from the first distance to protrude the eyeball. Degree can be calculated.
  • the server may transmit medical information including medical staff information related to the related disease to the mobile communication terminal.
  • the server may transmit user information stored in the mobile communication terminal and the related disease information to a user terminal possessed by a medical staff related to the related disease.
  • the server may provide a video chat between the user terminal and the mobile communication terminal.
  • a related disease can be diagnosed early by using a 3D depth camera provided in a mobile communication terminal such as a smart phone.
  • a mobile communication terminal such as a smart phone used in daily life.
  • a wide range of healthcare services is provided by providing information on medical staff related to related diseases, or by providing a function such as video chat to directly connect with medical staff. It works.
  • FIG. 1 is a diagram illustrating a state in which a user uses a mobile communication terminal according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing the internal configuration of a mobile communication terminal according to an embodiment of the present invention.
  • FIG. 3 is a diagram showing the configuration of a related disease monitoring system using facial recognition according to an embodiment of the present invention.
  • FIG. 4 is a flowchart illustrating a method for monitoring related diseases using facial recognition in a mobile communication terminal according to an embodiment of the present invention.
  • FIG. 5 is a diagram illustrating related diseases corresponding to a change in a face shape according to an embodiment of the present invention.
  • FIG. 6 is a view showing the lateral orbital edges and corneal vertices on an actual human eye.
  • FIG. 7 is a diagram showing a method of measuring eye protrusion using a 3D depth camera according to an embodiment of the present invention.
  • the mobile communication terminal of the present invention includes a 3D depth camera, a storage unit for storing images captured by the 3D depth camera, a wireless communication unit for wireless communication with an external device through a wireless communication network, and the 3D depth camera in a state in which a security function is applied. If it is determined that the face image captured in is the same by comparing the face image of the user previously stored, the security function is released, the face image is stored in the storage unit, and the stored face image is sequentially converted into a database in the storage unit. It compares and determines whether or not the face shape has changed, and when it is determined that the face shape has changed, a control unit for expressing a related disease that may occur for each changed face shape is included.
  • the control unit in a state in which a security function is applied to the mobile communication terminal, the control unit is configured from an image captured by the 3D depth camera.
  • an authentication step of comparing the recognized face image with a pre-stored user's face image.
  • the control unit determines that the recognized face image and the pre-stored user's face image are the same and the authentication is successful.
  • control unit converting the face image successfully authenticated into a database and storing it in a storage unit, the control unit sequentially converting the face image into a database in the storage unit and comparing the stored face image to see if the face shape is changed And determining, and the controller, when it is determined that the face shape has changed, expressing a related disease that may occur for each changed face shape.
  • a 3D depth camera, a wireless communication unit for wireless communication with an external device through a wireless communication network, and a face image captured by the 3D depth camera are stored in advance. If it is determined that the face image is the same, the mobile communication terminal including a control unit for releasing the security function, the database and the wireless communication network communicate with the mobile communication terminal, and the security function through face recognition is released in the mobile communication terminal.
  • the face image is stored in the database
  • the face images sequentially stored in the database are compared to determine whether the face shape has changed, and if it is determined that the face shape has changed, related diseases that can occur for each changed face shape And a server for transmitting to the mobile communication terminal.
  • FIG. 1 is a diagram illustrating a state in which a user uses a mobile communication terminal according to an embodiment of the present invention.
  • FIG. 1 a state in which a user holds and uses a mobile communication terminal 100 in his or her hand is shown.
  • the mobile communication terminal 100 is a concept generically referring to a terminal that performs a mobile communication function including a smart phone and a tablet PC.
  • the mobile communication terminal 100 may be driven by installing various applications.
  • security functions such as a lock function are set for security from others, and the security function can be canceled with body information such as fingerprints, and recently, the user's face is recognized using a built-in camera. You can enable and disable the security function.
  • FIG. 2 is a block diagram showing the internal configuration of a mobile communication terminal according to an embodiment of the present invention.
  • the mobile communication terminal 100 of the present invention includes a 3D depth camera 110, a storage unit 120, a wireless communication unit 130, and a control unit 140.
  • the 3D depth camera 110 is a camera capable of measuring the depth of a pixel in a captured image. In the present invention, it serves to photograph a user's face.
  • the storage unit 120 serves to store an image captured by the 3D depth camera 110.
  • the storage unit 120 may be implemented as a memory device.
  • the wireless communication unit 130 serves to wirelessly communicate with an external device through a wireless communication network.
  • the controller 140 compares the face image captured by the 3D depth camera 110 with the previously stored face image of the user in a state in which the security function is applied, and when it is determined that the face image is identical, cancels the security function. Then, the face image is stored in the storage unit 120. Then, the face images stored in the storage unit 120 are sequentially converted into a database to determine whether or not the face shape has changed through time-series comparison of the stored face images, and if it is determined that the face shape has changed, related diseases that may occur for each changed face shape Express.
  • control unit 140 may display related diseases that may occur for each changed face shape in various ways, such as displaying a related disease on a screen through a display unit or by expressing a voice through a speaker.
  • control unit 140 calculates the degree of protrusion of the eyeball from the face image stored in the storage unit 120, converts it into a database, and stores it. Then, a change in the protrusion of the eyeball is sequentially tracked, and when it is determined that the protrusion of the eyeball has changed, a related disease that may occur according to the changed protrusion of the eyeball is expressed.
  • the control unit 140 may calculate the eye protrusion by calculating a distance to a corneal apex based on a lateral orbital rim in an eyeball image captured by a 3D depth camera.
  • FIG. 6 is a view showing the lateral orbital edges and corneal vertices on an actual human eye.
  • lateral orbital rims 610 and 630 and corneal apex 620 and 640 which are points that are a reference point for measuring eye protrusion, are shown.
  • the controller 140 is the distance from the eyeball image captured by the 3D depth camera 110 to the corneal apex 620, 640 based on the lateral orbital rims 610, 630.
  • the eyeball protrusion is calculated by calculating
  • FIG. 7 is a diagram showing a method of measuring eye protrusion using a 3D depth camera according to an embodiment of the present invention.
  • the controller 140 includes a first distance b from the 3D depth camera 710 to the lateral orbital edge 610 and the corneal vertex 620 from the 3D depth camera 710.
  • the eyeball protrusion may be calculated by measuring the second distance (b) to and by calculating the difference between the second distance (a) from the first distance (b).
  • the controller 140 may display medical information including information about medical staff related to the related disease.
  • the medical information may be information including the name, contact information, and career of a professional doctor in charge of a related disease, and may be information about a hospital nearby based on the location where the user is located.
  • FIG. 3 is a diagram showing the configuration of a related disease monitoring system using facial recognition according to an embodiment of the present invention.
  • a related disease monitoring system using facial recognition of the present invention includes a mobile communication terminal 100, a server 200, and a database (DB) 210.
  • DB database
  • the mobile communication terminal 100 compares the face image captured by the 3D depth camera with a 3D depth camera, a wireless communication unit for wireless communication with an external device through a wireless communication network, and a security function applied to the previously stored user's face image. If it is determined that it includes a control unit for releasing the security function.
  • the server 200 communicates with the mobile communication terminal 100 through a wireless communication network, and stores a face image in the database 210 whenever the security function through face recognition is released in the mobile communication terminal 100. Then, the stored face images are sequentially stored in the database 210 to determine whether the face shape has changed through time-series comparison of the stored face images, and if it is determined that the face shape has changed, related diseases that can occur for each changed face shape are identified. It transmits to the mobile communication terminal 100.
  • the server 200 calculates and stores the eyeball protrusion representing the degree of protrusion of the eyeball from the face image stored in the database 210, determines whether the eyeball protrusion has changed in sequence, and when it is determined that the eyeball protrusion has changed, Related diseases that may occur according to the changed eye protrusion are transmitted to the mobile communication terminal 100.
  • the server 200 may calculate the eye protrusion by calculating the distance to the corneal apex based on the Lateral Orbital Rim in the eyeball image captured by the 3D depth camera.
  • the server 200 measures the first distance from the 3D depth camera to the lateral orbital edge and the second distance from the 3D depth camera to the corneal vertex, and calculates the eyeball protrusion by calculating the difference between the second distance from the first distance. can do.
  • the server 200 may transmit medical information including medical staff information related to the related disease to the mobile communication terminal 100.
  • the server 200 may transmit user information stored in the mobile communication terminal 100 and related disease information to the user terminal 300 possessed by medical staff related to the related disease.
  • the server 200 may provide video chat between the user terminal 300 and the mobile communication terminal 100 when there is a request from the mobile communication terminal 100.
  • FIG. 4 is a flowchart illustrating a method for monitoring related diseases using facial recognition in a mobile communication terminal according to an embodiment of the present invention.
  • the controller 140 in a method for monitoring related diseases using facial recognition in a mobile communication terminal equipped with a 3D depth camera and a controller, in a state in which a security function is applied to the mobile communication terminal 100, the controller 140 provides a 3D depth
  • a face image is recognized from an image captured by the camera 110 (S601)
  • an authentication step S603 of comparing the recognized face image with a previously stored user's face image is performed.
  • the controller 140 determines that the recognized face image and the previously stored user's face image are the same, and if authentication is successful, the security function is canceled (S605).
  • control unit 140 converts and stores the face image, which is successfully authenticated, into a database in the storage unit 120 (S607).
  • the controller 140 compares the face images stored by sequentially converting into a database in the storage unit 120, and measures the first distance to the lateral orbital edge and the second distance from the 3D depth camera 110 to the corneal vertex. Do (S609).
  • control unit 130 calculates the degree of protrusion of the eyeball by calculating the difference between the first distance and the second distance (S611).
  • the controller 130 diagnoses that there is a related disease and displays an alarm (S615, S617).
  • the alarm may be expressed as an image through the display unit, as an audio signal through a speaker, or may be expressed as an image and audio together.
  • control unit 140 calculates the ocular protrusion by calculating the distance to the corneal apex based on the lateral orbital rim in the eyeball image captured by the 3D depth camera 110. can do.
  • the controller 140 may display medical information including medical staff information related to the related disease.
  • FIG. 5 is a diagram illustrating related diseases corresponding to a change in a face shape according to an embodiment of the present invention.
  • related diseases when diagnosed as unilateral protrusion, related diseases include orbital tumors, thyroid ophthalmopathy, and idiopathic orbititis. And, when diagnosed as bilateral protrusion, related diseases include thyroid ophthalmopathy and idiopathic ophthalmitis. And, when diagnosed as sagging of the eyelids, related diseases include ptosis, myasthenia and myopathy. And, when diagnosed with blepharolysis, there is thyroid ophthalmopathy as a related disease. And, when diagnosed as a change in the shape of the face, related diseases include head and neck cancer, weight gain, and weight loss. And, when diagnosed with facial edema, related diseases include kidney disease and head and neck cancer. And, when diagnosed as unilateral blepharoscopic edema, related diseases include stye, orbititis, blepharitis, thyroid ophthalmopathy, and orbital coordination.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Psychiatry (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Alarm Systems (AREA)
  • Collating Specific Patterns (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

본 발명의 이동통신 단말기는 3D 심도 카메라, 상기 3D 심도 카메라에서 촬영된 이미지를 저장하기 위한 저장부, 무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부 및 보안 기능이 적용된 상태에서 상기 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하고, 상기 얼굴 이미지를 상기 저장부에 저장하며, 상기 저장부에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출하는 제어부를 포함한다. 본 발명에 의하면, 스마트 폰 등의 이동통신 단말기에 구비된 3D 심도 카메라를 이용하여 관련 질환을 조기에 진단할 수 있다는 효과가 있다.

Description

이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템
본 발명은 이동통신 단말기에서의 안면 인식 기능을 이용한 관련 질환 모니터링 기술에 관한 것이다.
안면, 안와를 비롯한 전신에 걸친 다양한 질환은 얼굴의 외형 변화를 동반한다. 그 예로, 안와종양, 두경부종양, 갑상샘눈병증, 안검하수, 안와염증, 안와골절, 비만, 신장질환 등이 있다.
하지만 이러한 신체의 변화가 매우 서서히 나타나기 때문에 환자가 잘 인지를 못하는 경우가 많다.
그래서, 이전에 찍은 얼굴사진과 최근 얼굴사진을 비교하여 그 변화를 인지할 수도 있으나, 보통 사진을 찍을 때마다 각도가 다르고, 원근도 다르기 때문에, 진단에 활용하기 어려운 경우가 많으며, 2차원적인 얼굴 사진으로는 진단에 한계가 있는 경우가 많다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 이동통신 단말기의 안면인식 기능을 이용하여 관련 질환을 모니터링하는 방법 및 시스템을 제공하는데 그 목적이 있다.
또한, 본 발명은 3D 카메라를 이용하여 안면의 변화를 측정하여 관련 질환을 알릴 수 있는 이동통신 단말기를 제공하는데 그 다른 목적이 있다.
본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
이와 같은 목적을 달성하기 위한 본 발명의 이동통신 단말기는 3D 심도 카메라, 상기 3D 심도 카메라에서 촬영된 이미지를 저장하기 위한 저장부, 무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부 및 보안 기능이 적용된 상태에서 상기 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하고, 상기 얼굴 이미지를 상기 저장부에 저장하며, 상기 저장부에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출하는 제어부를 포함한다.
상기 제어부는 상기 저장부에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 데이터베이스화하여 저장하고, 순차적인 안구 돌출도의 변화 여부를 판단하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따른 발생 가능한 관련 질환을 표출할 수 있다.
상기 제어부는 상기 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출할 수 있다.
상기 제어부는 상기 3D 심도 카메라로부터 상기 측면 안와 가장자리까지의 제1 거리와 상기 3D 심도 카메라로부터 상기 각막 꼭지점까지의 제2 거리를 측정하고, 상기 제1 거리에서 제2 거리의 차이를 계산하여 안구 돌출도를 산출할 수 있다.
상기 제어부는 관련 질환을 표출한 후, 상기 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 표출할 수 있다.
본 발명의 3D 심도 카메라와 제어부가 구비된 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법에서, 상기 이동통신 단말기에 보안 기능이 적용된 상태에서, 상기 제어부는 상기 3D 심도 카메라에서 촬영된 이미지에서 얼굴 이미지가 인식되면, 인식된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하는 인증 단계, 상기 인증 단계에서 상기 제어부는 인식된 얼굴 이미지와 미리 저장된 사용자의 얼굴 이미지가 동일한 것으로 판단되어 인증에 성공하면 보안 기능을 해제하는 단계, 상기 제어부는 상기 인증에 성공한 얼굴 이미지를 저장부에 데이터베이스화하여 저장하는 단계, 상기 제어부는 상기 저장부에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하는 단계 및 상기 제어부는 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출하는 단계를 포함한다.
상기 제어부는 상기 저장부에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 데이터베이스화하여 저장하고, 순차적인 안구 돌출도의 변화 여부를 판단하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따른 발생 가능한 관련 질환을 표출할 수 있다.
상기 제어부는 상기 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출할 수 있다.
상기 제어부는 상기 3D 심도 카메라로부터 상기 측면 안와 가장자리까지의 제1 거리와 상기 3D 심도 카메라로부터 상기 각막 꼭지점까지의 제2 거리를 측정하고, 상기 제1 거리에서 제2 거리의 차이를 계산하여 안구 돌출도를 산출할 수 있다.
상기 제어부는 관련 질환을 표출한 후, 상기 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 표출할 수 있다.
본 발명의 안면 인식을 이용한 관련 질환 모니터링 시스템에서 3D 심도 카메라, 무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부 및 보안 기능이 적용된 상태에서 상기 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하는 제어부를 포함하는 이동통신 단말기, 데이터베이스 및 무선통신망을 통해 상기 이동통신 단말기와 통신하며, 상기 이동통신 단말기에서 안면 인식을 통한 보안 기능이 해제될 때마다 그때의 얼굴 이미지를 상기 데이터베이스에 저장하고, 상기 데이터베이스에 순차적으로 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 상기 이동통신 단말기에 전송하는 서버를 포함한다.
상기 서버는 상기 데이터베이스에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 저장하고, 순차적인 안구 돌출도의 변화 여부를 판단하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따른 발생 가능한 관련 질환을 상기 이동통신 단말기에 전송할 수 있다.
상기 서버는 상기 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출할 수 있다.
상기 서버는 상기 3D 심도 카메라로부터 상기 측면 안와 가장자리까지의 제1 거리와 상기 3D 심도 카메라로부터 상기 각막 꼭지점까지의 제2 거리를 측정하고, 상기 제1 거리에서 제2 거리의 차이를 계산하여 안구 돌출도를 산출할 수 있다.
상기 서버는 관련 질환을 상기 이동통신 단말기에 전송한 후, 상기 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 상기 이동통신 단말기에 전송할 수 있다.
상기 서버는 상기 관련 질환에 연관된 의료진이 소지한 사용자 단말에 상기 이동통신 단말기에 저장된 사용자 정보와 상기 관련 질환 정보를 전송할 수 있다.
상기 서버는 상기 이동통신 단말기로부터 요청이 있으면, 상기 사용자 단말과 상기 이동통신 단말기 간에 화상채팅이 이루어지도록 제공할 수 있다.
본 발명에 의하면, 스마트 폰 등의 이동통신 단말기에 구비된 3D 심도 카메라를 이용하여 관련 질환을 조기에 진단할 수 있다는 효과가 있다.
또한, 본 발명에 의하면, 일상에서 사용하는 스마트 폰 등의 이동통신 단말기를 이용하여 질환 발생 여부를 용이하고 신속하게 진단할 수 있는 효과가 있다.
또한, 본 발명에 의하면, 보안 기능을 위해 사용되는 안면 인식 기능을 활용하여 관련 질환을 진단함으로써, 별도의 장비나 기기를 추가하지 않아도 되므로, 추가적인 구현 비용이 거의 발생하지 않아서 경제적이라는 장점이 있다.
또한, 본 발명에 의하면, 관련 질환에 연관된 전문의 등의 의료진 정보를 제공하거나, 화상 채팅 등의 기능을 제공하여 의료진과 직접 연결하는 기능을 제공함으로써, 폭넓은 헬스케어(healthcare) 서비스를 제공한다는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 사용자가 이동통신 단말기를 사용하는 모습을 도시한 것이다.
도 2는 본 발명의 일 실시예에 따른 이동통신 단말기의 내부 구성을 보여주는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 안면 인식을 이용한 관련 질환 모니터링 시스템의 구성을 보여주는 도면이다.
도 4는 본 발명의 일 실시예에 따른 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법을 보여주는 흐름도이다.
도 5는 본 발명의 일 실시예에 따른 얼굴 형태의 변화에 대응하는 관련 질환을 예시한 도표이다.
도 6은 실제 사람의 눈 부위에 측면 안와 가장자리와 각막 꼭지점을 표기한 도면이다.
도 7은 본 발명의 일 실시예에 따른 3D 심도 카메라를 이용한 안구 돌출도 측정 방식을 보여주는 도면이다.
본 발명의 이동통신 단말기는 3D 심도 카메라, 상기 3D 심도 카메라에서 촬영된 이미지를 저장하기 위한 저장부, 무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부 및 보안 기능이 적용된 상태에서 상기 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하고, 상기 얼굴 이미지를 상기 저장부에 저장하며, 상기 저장부에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출하는 제어부를 포함한다.
본 발명의 3D 심도 카메라와 제어부가 구비된 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법에서, 상기 이동통신 단말기에 보안 기능이 적용된 상태에서, 상기 제어부는 상기 3D 심도 카메라에서 촬영된 이미지에서 얼굴 이미지가 인식되면, 인식된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하는 인증 단계, 상기 인증 단계에서 상기 제어부는 인식된 얼굴 이미지와 미리 저장된 사용자의 얼굴 이미지가 동일한 것으로 판단되어 인증에 성공하면 보안 기능을 해제하는 단계, 상기 제어부는 상기 인증에 성공한 얼굴 이미지를 저장부에 데이터베이스화하여 저장하는 단계, 상기 제어부는 상기 저장부에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하는 단계 및 상기 제어부는 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출하는 단계를 포함한다.
본 발명의 안면 인식을 이용한 관련 질환 모니터링 시스템에서 3D 심도 카메라, 무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부 및 보안 기능이 적용된 상태에서 상기 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하는 제어부를 포함하는 이동통신 단말기, 데이터베이스 및 무선통신망을 통해 상기 이동통신 단말기와 통신하며, 상기 이동통신 단말기에서 안면 인식을 통한 보안 기능이 해제될 때마다 그때의 얼굴 이미지를 상기 데이터베이스에 저장하고, 상기 데이터베이스에 순차적으로 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 상기 이동통신 단말기에 전송하는 서버를 포함한다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 갖고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 갖는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조 부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
도 1은 본 발명의 일 실시예에 따른 사용자가 이동통신 단말기를 사용하는 모습을 도시한 것이다.
도 1을 참조하면, 사용자가 이동통신 단말기(100)를 손에 들고 사용하는 모습이 도시되어 있다.
본 발명에서 이동통신 단말기(100)는 스마트폰, 태블릿 PC 등을 포함하는 이동통신 기능을 수행하는 단말기를 총칭하는 개념이다. 본 발명에서 이동통신 단말기(100)는 다양한 어플리케이션(application)이 설치되어 구동될 수 있다.
이동통신 단말기(100)에는 타인으로부터 보안을 위해 잠금 기능 등의 보안 기능이 설정되어 있으며, 지문 등의 신체정보로 보안 기능을 해제할 수 있고, 최근에는 내장된 카메라를 이용하여 사용자의 얼굴을 인식하여 보안 기능을 설정하고 해제할 수 있다.
도 2는 본 발명의 일 실시예에 따른 이동통신 단말기의 내부 구성을 보여주는 블록도이다.
도 2를 참조하면, 본 발명의 이동통신 단말기(100)는 3D 심도 카메라(3-Dimension depth camera)(110), 저장부(120), 무선통신부(130), 제어부(140)를 포함한다.
3D 심도 카메라(110)는 촬영한 이미지에서 픽셀의 깊이를 측정할 수 있는 카메라로서, 본 발명에서는 사용자의 얼굴을 촬영하는 역할을 한다.
저장부(120)는 3D 심도 카메라(110)에서 촬영된 이미지를 저장하는 역할을 한다. 예를 들어, 저장부(120)는 메모리 소자로 구현될 수 있다.
무선통신부(130)는 무선통신망을 통해 외부 기기와 무선 통신하는 역할을 한다.
제어부(140)는 보안 기능이 적용된 상태에서 3D 심도 카메라(110)에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제한다. 그리고, 얼굴 이미지를 저장부(120)에 저장한다. 그리고, 저장부(120)에 저장된 얼굴 이미지를 순차적으로 데이터베이스화하여 저장된 얼굴 이미지의 시계열적 비교를 통해 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출한다.
예를 들어, 제어부(140)는 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 디스플레이부를 통해 화면으로 표출하거나, 스피커를 통해 음성으로 표출하는 등, 다양한 방식으로 이를 표출할 수 있다.
본 발명에서 제어부(140)는 저장부(120)에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 데이터베이스화하여 저장한다. 그리고, 순차적인 안구 돌출도의 변화를 추적하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따른 발생 가능한 관련 질환을 표출한다.
제어부(140)는 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출할 수 있다.
도 6은 실제 사람의 눈 부위에 측면 안와 가장자리와 각막 꼭지점을 표기한 도면이다.
도 6을 참조하면, 안구 돌출도를 측정하는데 기준이 되는 지점인 측면 안와 가장자리(Lateral Orbital Rim)(610, 630)와, 각막 꼭지점(corneal apex)(620, 640)이 도시되어 있다.
본 발명에서 제어부(140)는 3D 심도 카메라(110)에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)(610, 630)를 기준으로 각막 꼭지점(Corneal apex)(620, 640)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출한다.
도 7은 본 발명의 일 실시예에 따른 3D 심도 카메라를 이용한 안구 돌출도 측정 방식을 보여주는 도면이다.
도 7을 참조하여 보다 상세하게 설명하면, 제어부(140)는 3D 심도 카메라(710)로부터 측면 안와 가장자리(610)까지의 제1 거리(b)와 3D 심도 카메라(710)로부터 각막 꼭지점(620)까지의 제2 거리(b)를 측정하고, 제1 거리(b)에서 제2 거리(a)의 차이를 계산하여 안구 돌출도를 산출할 수 있다.
즉, 제어부(140)는 '안구 돌출도=제2거리(b)-제1거리(a)'로 안구 돌출도를 산출할 수 있다.
본 발명의 일 실시예에서 제어부(140)는 관련 질환을 표출한 후, 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 표출할 수 있다. 예를 들어, 의료 정보는 관련 질환을 담당하는 전문 의사의 이름, 연락처, 경력을 포함하는 정보일 수 있고, 사용자가 위치한 곳을 기준으로 근처에 있는 병원 정보일 수 있다.
도 3은 본 발명의 일 실시예에 따른 안면 인식을 이용한 관련 질환 모니터링 시스템의 구성을 보여주는 도면이다.
도 3을 참조하면, 본 발명의 안면 인식을 이용한 관련 질환 모니터링 시스템은 이동통신 단말기(100), 서버(200), 데이터베이스(Database, DB)(210)를 포함한다.
이동통신 단말기(100)는 3D 심도 카메라, 무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부 및 보안 기능이 적용된 상태에서 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하는 제어부를 포함한다.
서버(200)는 무선통신망을 통해 이동통신 단말기(100)와 통신하며, 이동통신 단말기(100)에서 안면 인식을 통한 보안 기능이 해제될 때마다 그때의 얼굴 이미지를 데이터베이스(210)에 저장한다. 그리고, 저장된 얼굴 이미지를 순차적으로 데이터베이스(210)에 저장하여 저장된 얼굴 이미지의 시계열적 비교를 통해 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 이동통신 단말기(100)에 전송한다.
서버(200)는 데이터베이스(210)에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 저장하고, 순차적인 안구 돌출도의 변화 여부를 판단하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따라 발생 가능한 관련 질환을 이동통신 단말기(100)에 전송한다.
서버(200)는 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출할 수 있다.
서버(200)는 3D 심도 카메라로부터 측면 안와 가장자리까지의 제1 거리와 3D 심도 카메라로부터 각막 꼭지점까지의 제2 거리를 측정하고, 제1 거리에서 제2 거리의 차이를 계산하여 안구 돌출도를 산출할 수 있다.
서버(200)는 관련 질환을 이동통신 단말기(100)에 전송한 후, 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 이동통신 단말기(100)에 전송할 수 있다.
서버(200)는 관련 질환에 연관된 의료진이 소지한 사용자 단말(300)에 이동통신 단말기(100)에 저장된 사용자 정보와 관련 질환 정보를 전송할 수 있다.
서버(200)는 이동통신 단말기(100)로부터 요청이 있으면, 사용자 단말(300)과 이동통신 단말기(100) 간에 화상채팅이 이루어지도록 제공할 수 있다.
도 4는 본 발명의 일 실시예에 따른 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법을 보여주는 흐름도이다.
도 4를 참조하면, 3D 심도 카메라와 제어부가 구비된 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법에서, 이동통신 단말기(100)에 보안 기능이 적용된 상태에서, 제어부(140)는 3D 심도 카메라(110)에서 촬영된 이미지에서 얼굴 이미지가 인식되면(S601), 인식된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하는 인증 단계(S603)를 수행한다.
그리고, 인증 단계(S603)에서 제어부(140)는 인식된 얼굴 이미지와 미리 저장된 사용자의 얼굴 이미지가 동일한 것으로 판단되어 인증에 성공하면 보안 기능을 해제한다(S605).
그리고, 제어부(140)는 인증에 성공한 얼굴 이미지를 저장부(120)에 데이터베이스화하여 저장한다(S607).
그리고, 제어부(140)는 저장부(120)에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여, 측면 안와 가장자리까지의 제1 거리와 3D 심도 카메라(110)로부터 각막 꼭지점까지의 제2 거리를 측정한다(S609).
그리고, 제어부(130)는 제1 거리에서 제2 거리의 차이를 계산하여 안구의 돌출 정도를 나타내는 안구 돌출도를 산출한다(S611).
그리고, 제어부(130)는 안구 돌출도의 변화가 미리 정해진 기준치를 초과하면(S613), 관련 질환이 있는 것으로 진단하고 알람을 표출한다(S615, S617). 이 때 알람은 디스플레이부를 통해 영상으로 표출될 수도 있고, 스피커를 통해 음성으로 표출될 수도 있고, 영상과 음성이 함께 표출될 수도 있다.
본 발명에서 제어부(140)는 3D 심도 카메라(110)에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출할 수 있다.
제어부(140)는 관련 질환을 표출한 후, 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 표출할 수 있다.
도 5는 본 발명의 일 실시예에 따른 얼굴 형태의 변화에 대응하는 관련 질환을 예시한 도표이다.
도 5의 예시에서, 단안 돌출로 진단되면, 관련 질병으로 안와종양, 갑상샘 눈병증, 특발성 안와염이 있다.. 그리고, 양안 돌출로 진단되면, 관련 질병으로 갑상샘 눈병증, 특발성 안와염이 있다. 그리고, 안검 처짐으로 진단되면, 관련 질병으로 안검하수, 근무력증, 근병증이 있다. 그리고, 안검 퇴축으로 진단되면, 관련 질병으로 갑상샘 눈병증이 있다. 그리고, 안면부 형태 변화로 진단되면, 관련 질병으로 두경부암, 체중증가, 체증감소가 있다. 그리고, 안면부 부종으로 진단되면, 관련 질병으로 신장질환, 두경부암이 있다. 그리고, 단안 안검 부종으로 진단되면, 관련 질병으로 다래끼, 안와염, 안검염, 갑상샘 눈병증, 안와조양이 있다.
이상 본 발명을 몇 가지 바람직한 실시예를 사용하여 설명하였으나, 이들 실시예는 예시적인 것이며 한정적인 것이 아니다. 본 발명이 속하는 기술분야에서 통상의 지식을 지닌 자라면 본 발명의 사상과 첨부된 특허청구범위에 제시된 권리범위에서 벗어나지 않으면서 다양한 변화와 수정을 가할 수 있음을 이해할 것이다.

Claims (17)

  1. 3D 심도 카메라;
    상기 3D 심도 카메라에서 촬영된 이미지를 저장하기 위한 저장부;
    무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부; 및
    보안 기능이 적용된 상태에서 상기 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하고, 상기 얼굴 이미지를 상기 저장부에 저장하며, 상기 저장부에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출하는 제어부
    를 포함하는 이동통신 단말기.
  2. 청구항 1에 있어서,
    상기 제어부는 상기 저장부에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 데이터베이스화하여 저장하고, 순차적인 안구 돌출도의 변화 여부를 판단하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따른 발생 가능한 관련 질환을 표출하는 것을 특징으로 하는 이동통신 단말기.
  3. 청구항 2에 있어서,
    상기 제어부는 상기 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출하는 것을 특징으로 하는 이동통신 단말기.
  4. 청구항 3에 있어서,
    상기 제어부는 상기 3D 심도 카메라로부터 상기 측면 안와 가장자리까지의 제1 거리와 상기 3D 심도 카메라로부터 상기 각막 꼭지점까지의 제2 거리를 측정하고, 상기 제1 거리에서 제2 거리의 차이를 계산하여 안구 돌출도를 산출하는 것을 특징으로 하는 이동통신 단말기.
  5. 청구항 1에 있어서,
    상기 제어부는 관련 질환을 표출한 후, 상기 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 표출하는 것을 특징으로 하는 이동통신 단말기.
  6. 3D 심도 카메라와 제어부가 구비된 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법에서,
    상기 이동통신 단말기에 보안 기능이 적용된 상태에서, 상기 제어부는 상기 3D 심도 카메라에서 촬영된 이미지에서 얼굴 이미지가 인식되면, 인식된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하는 인증 단계;
    상기 인증 단계에서 상기 제어부는 인식된 얼굴 이미지와 미리 저장된 사용자의 얼굴 이미지가 동일한 것으로 판단되어 인증에 성공하면 보안 기능을 해제하는 단계;
    상기 제어부는 상기 인증에 성공한 얼굴 이미지를 저장부에 데이터베이스화하여 저장하는 단계;
    상기 제어부는 상기 저장부에 순차적으로 데이터베이스화하여 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하는 단계; 및
    상기 제어부는 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 표출하는 단계
    를 포함하는 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법.
  7. 청구항 6에 있어서,
    상기 제어부는 상기 저장부에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 데이터베이스화하여 저장하고, 순차적인 안구 돌출도의 변화 여부를 판단하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따른 발생 가능한 관련 질환을 표출하는 것을 특징으로 하는 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법.
  8. 청구항 7에 있어서,
    상기 제어부는 상기 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출하는 것을 특징으로 하는 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법.
  9. 청구항 8에 있어서,
    상기 제어부는 상기 3D 심도 카메라로부터 상기 측면 안와 가장자리까지의 제1 거리와 상기 3D 심도 카메라로부터 상기 각막 꼭지점까지의 제2 거리를 측정하고, 상기 제1 거리에서 제2 거리의 차이를 계산하여 안구 돌출도를 산출하는 것을 특징으로 하는 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법.
  10. 청구항 6에 있어서,
    상기 제어부는 관련 질환을 표출한 후, 상기 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 표출하는 것을 특징으로 하는 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법.
  11. 3D 심도 카메라, 무선통신망을 통해 외부 기기와 무선 통신하기 위한 무선통신부 및 보안 기능이 적용된 상태에서 상기 3D 심도 카메라에서 촬영된 얼굴 이미지를 미리 저장된 사용자의 얼굴 이미지와 비교하여 동일한 것으로 판단되면, 보안 기능을 해제하는 제어부를 포함하는 이동통신 단말기;
    데이터베이스; 및
    무선통신망을 통해 상기 이동통신 단말기와 통신하며, 상기 이동통신 단말기에서 안면 인식을 통한 보안 기능이 해제될 때마다 그때의 얼굴 이미지를 상기 데이터베이스에 저장하고, 상기 데이터베이스에 순차적으로 저장된 얼굴 이미지를 비교하여 얼굴 형태의 변화 여부를 판단하고, 얼굴 형태가 변화된 것으로 판단되면, 변화된 얼굴 형태 별로 발생 가능한 관련 질환을 상기 이동통신 단말기에 전송하는 서버
    를 포함하는 안면 인식을 이용한 관련 질환 모니터링 시스템.
  12. 청구항 11에 있어서,
    상기 서버는 상기 데이터베이스에 저장된 얼굴 이미지에서 안구의 돌출 정도를 나타내는 안구 돌출도를 산출하여 저장하고, 순차적인 안구 돌출도의 변화 여부를 판단하고, 안구 돌출도가 변화된 것으로 판단되면, 변화된 안구 돌출도에 따른 발생 가능한 관련 질환을 상기 이동통신 단말기에 전송하는 것을 특징으로 하는 안면 인식을 이용한 관련 질환 모니터링 시스템.
  13. 청구항 12에 있어서,
    상기 서버는 상기 3D 심도 카메라에서 촬영된 안구 이미지에서 측면 안와 가장자리(Lateral Orbital Rim)를 기준으로 각막 꼭지점(Corneal apex)까지의 거리를 계산하는 방식으로 안구 돌출도를 산출하는 것을 특징으로 하는 안면 인식을 이용한 관련 질환 모니터링 시스템.
  14. 청구항 13에 있어서,
    상기 서버는 상기 3D 심도 카메라로부터 상기 측면 안와 가장자리까지의 제1 거리와 상기 3D 심도 카메라로부터 상기 각막 꼭지점까지의 제2 거리를 측정하고, 상기 제1 거리에서 제2 거리의 차이를 계산하여 안구 돌출도를 산출하는 것을 특징으로 하는 안면 인식을 이용한 관련 질환 모니터링 시스템.
  15. 청구항 11에 있어서,
    상기 서버는 관련 질환을 상기 이동통신 단말기에 전송한 후, 상기 관련 질환에 연관된 의료진 정보를 포함하는 의료 정보를 상기 이동통신 단말기에 전송하는 것을 특징으로 하는 안면 인식을 이용한 관련 질환 모니터링 시스템.
  16. 청구항 15에 있어서,
    상기 서버는 상기 관련 질환에 연관된 의료진이 소지한 사용자 단말에 상기 이동통신 단말기에 저장된 사용자 정보와 상기 관련 질환 정보를 전송하는 것을 특징으로 하는 안면 인식을 이용한 관련 질환 모니터링 시스템.
  17. 청구항 16에 있어서,
    상기 서버는 상기 이동통신 단말기로부터 요청이 있으면, 상기 사용자 단말과 상기 이동통신 단말기 간에 화상채팅이 이루어지도록 제공하는 것을 특징으로 하는 안면 인식을 이용한 관련 질환 모니터링 시스템.
PCT/KR2020/006626 2019-05-21 2020-05-21 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템 WO2020235939A2 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190059217A KR102293824B1 (ko) 2019-05-21 2019-05-21 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템
KR10-2019-0059217 2019-05-21

Publications (2)

Publication Number Publication Date
WO2020235939A2 true WO2020235939A2 (ko) 2020-11-26
WO2020235939A3 WO2020235939A3 (ko) 2021-02-04

Family

ID=73458161

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/006626 WO2020235939A2 (ko) 2019-05-21 2020-05-21 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템

Country Status (2)

Country Link
KR (1) KR102293824B1 (ko)
WO (1) WO2020235939A2 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022018271A1 (en) * 2020-07-24 2022-01-27 Universität Zürich Method for determining a coronal position of an eye relative to the head
CN115067872A (zh) * 2022-08-18 2022-09-20 上海佰翊医疗科技有限公司 一种眼部参数评估装置
EP4134981A4 (en) * 2021-06-30 2023-11-08 Thyroscope Inc. LATERAL IMAGE ACQUISITION METHOD FOR ANALYSIS OF EYE PROTRUSION, IMAGE CAPTURE DEVICE FOR IMPLEMENTATION AND RECORDING MEDIUM
US12033432B2 (en) 2021-05-03 2024-07-09 NeuraLight Ltd. Determining digital markers indicative of a neurological condition

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102477699B1 (ko) * 2022-06-28 2022-12-14 주식회사 타이로스코프 안구의 돌출도 분석을 위한 측면 이미지를 획득하는 방법, 이를 수행하는 촬영 장치 및 기록 매체
JP7521748B1 (ja) * 2021-06-30 2024-07-24 サイロスコープ インコーポレイテッド 眼球突出の度合いの分析のための側方画像を取得するための方法及び撮影デバイス、及びそのための記録媒体
WO2023277589A1 (ko) 2021-06-30 2023-01-05 주식회사 타이로스코프 활동성 갑상선 눈병증 진료를 위한 내원 안내 방법 및 이를 수행하는 시스템
JP7513239B2 (ja) 2021-06-30 2024-07-09 サイロスコープ インコーポレイテッド 活動性甲状腺眼症の医学的治療のための病院訪問ガイダンスのための方法、及びこれを実行するためのシステム
WO2024035131A1 (ko) * 2022-08-09 2024-02-15 주식회사 타이로스코프 갑상선 안질환 상태 모니터링 방법 및 이를 수행하는 시스템

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101141425B1 (ko) * 2010-04-08 2012-05-04 국립암센터 온라인을 통한 개인 맞춤형 건강관리와 진료방법 및 온라인 건강관리와 의료서비스 제공 서버장치
KR101157866B1 (ko) * 2011-10-28 2012-06-22 이후동 Ｕ-의료센터를 이용한 원격의료시스템
KR20140108417A (ko) * 2013-02-27 2014-09-11 김민준 영상정보를 이용한 건강 진단 시스템
KR20150017535A (ko) 2013-08-07 2015-02-17 유동근 안구 훈련 장치 및 방법
KR102420100B1 (ko) * 2014-03-14 2022-07-13 삼성전자주식회사 건강 상태 정보를 제공하는 전자 장치, 그 제어 방법, 및 컴퓨터 판독가능 저장매체
JP7030317B2 (ja) * 2016-12-19 2022-03-07 国立大学法人静岡大学 瞳孔検出装置及び瞳孔検出方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022018271A1 (en) * 2020-07-24 2022-01-27 Universität Zürich Method for determining a coronal position of an eye relative to the head
US12033432B2 (en) 2021-05-03 2024-07-09 NeuraLight Ltd. Determining digital markers indicative of a neurological condition
US12118825B2 (en) 2021-05-03 2024-10-15 NeuraLight Ltd. Obtaining high-resolution oculometric parameters
EP4134981A4 (en) * 2021-06-30 2023-11-08 Thyroscope Inc. LATERAL IMAGE ACQUISITION METHOD FOR ANALYSIS OF EYE PROTRUSION, IMAGE CAPTURE DEVICE FOR IMPLEMENTATION AND RECORDING MEDIUM
CN115067872A (zh) * 2022-08-18 2022-09-20 上海佰翊医疗科技有限公司 一种眼部参数评估装置
CN115067872B (zh) * 2022-08-18 2022-11-29 上海佰翊医疗科技有限公司 一种眼部参数评估装置
WO2024036784A1 (zh) * 2022-08-18 2024-02-22 上海佰翊医疗科技有限公司 一种眼部参数评估装置

Also Published As

Publication number Publication date
KR102293824B1 (ko) 2021-08-24
WO2020235939A3 (ko) 2021-02-04
KR20200133923A (ko) 2020-12-01

Similar Documents

Publication Publication Date Title
WO2020235939A2 (ko) 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템
WO2016032206A2 (en) Authentication method and apparatus using biometric information and context information
WO2015099357A1 (en) User terminal for a telemedicine image service and control method thereof
WO2020251217A1 (ko) 사용자 맞춤형 피부 진단 시스템 및 방법
WO2015186930A1 (ko) 의료 영상 및 정보 실시간 상호전송 및 원격 지원 장치
WO2017175997A1 (ko) 전자 장치 및 그 제어 방법
WO2018012928A1 (ko) 얼굴 인식을 이용한 사용자 인증 방법 및 그 장치
WO2018182130A1 (ko) Ar을 이용한 셀프 뷰티앱 플랫폼 시스템 및 제공 방법
WO2018174493A1 (ko) 피부에 해당하는 이미지 처리 영역을 보정하는 방법 및 전자 장치
WO2019088610A1 (ko) 도어의 개폐 상태를 감지하기 위한 센싱 장치 및 그 센싱 장치를 제어하는 방법
JP6579411B1 (ja) 介護設備又は病院用の監視システム及び監視方法
WO2012141435A2 (ko) 의료 영상 데이터 공유 장치, 의료 영상 데이터 공유 시스템 및 의료 영상 데이터 공유 방법
KR102302207B1 (ko) 비대면 진료서비스 제공방법 및 장치
CN114359953A (zh) 指示听诊位置的方法及设备
WO2020230908A1 (ko) 사시진단어플리케이션 및 이를 갖는 사시진단장치
WO2019156531A1 (ko) 실시간 객체추적을 이용한 내시경 진료정보 공유 방법
JP2023054062A5 (ko)
WO2022039373A1 (ko) 개인 위험 상태 감지 기반 상황 정보 획득 장치
WO2019164326A1 (ko) 실시간 콘텐트 데이터를 공유하는 전자 장치
Ruscelli et al. A medical tele-tutoring system for the Emergency Service
WO2023038172A1 (ko) 멀티 모달 센서를 이용한 심박수 측정이 가능한 출입 통제 인증 시스템 및 방법
WO2017204598A1 (ko) 촬영된 영상에 관한 데이터 프로토콜을 설정하는 단말기 및 방법
WO2021204036A1 (zh) 睡眠风险监测方法、电子设备及存储介质
WO2021107394A1 (ko) 다양한 상태의 눈을 위한 동공 추적 방법 및 이를 이용한 건강 진단 시스템
WO2017061658A1 (ko) 이동통신 단말기를 이용한 원격 의료정보 통신 방법 및 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20809304

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20809304

Country of ref document: EP

Kind code of ref document: A2