KR20210120333A - System for sinus diagnosis and method for using the same - Google Patents

System for sinus diagnosis and method for using the same Download PDF

Info

Publication number
KR20210120333A
KR20210120333A KR1020200036916A KR20200036916A KR20210120333A KR 20210120333 A KR20210120333 A KR 20210120333A KR 1020200036916 A KR1020200036916 A KR 1020200036916A KR 20200036916 A KR20200036916 A KR 20200036916A KR 20210120333 A KR20210120333 A KR 20210120333A
Authority
KR
South Korea
Prior art keywords
score
sinus
point
infrared
index
Prior art date
Application number
KR1020200036916A
Other languages
Korean (ko)
Other versions
KR102363308B1 (en
Inventor
김양석
장희돈
박병훈
김정석
Original Assignee
주식회사 유투메드텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 유투메드텍 filed Critical 주식회사 유투메드텍
Priority to KR1020200036916A priority Critical patent/KR102363308B1/en
Priority to PCT/KR2020/004269 priority patent/WO2021193997A1/en
Publication of KR20210120333A publication Critical patent/KR20210120333A/en
Application granted granted Critical
Publication of KR102363308B1 publication Critical patent/KR102363308B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Detecting, measuring or recording devices for evaluating the respiratory organs
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/41Detecting, measuring or recording for evaluating the immune or lymphatic systems
    • A61B5/412Detecting or monitoring sepsis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6814Head
    • A61B5/682Mouth, e.g., oral cavity; tongue; Lips; Teeth
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6844Monitoring or controlling distance between sensor and tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7221Determining signal validity, reliability or quality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Pulmonology (AREA)
  • Quality & Reliability (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Immunology (AREA)
  • Vascular Medicine (AREA)
  • Artificial Intelligence (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

The present invention relates to a system and a method for sinus diagnosis. The present invention includes: a step of obtaining a reference picture by imaging a measurement object's face with a near infrared camera of a sinus measuring device with the measurement object biting an oral illumination mouthpiece; a step of obtaining near infrared pictures by changing the exposure time of the near infrared camera with an LED on the light illumination module emitting light; a step of calculating the inclination of the reference picture from the measurement object's face in the reference picture; a step of horizontally correcting the near infrared pictures by rotating the near infrared pictures by the measured inclination; a step of setting a pair of first to third points (P1 to P3) on the left and right sides of each of the corrected near infrared pictures; a step of calculating an evaluation index with respect to the measurement object's posture using each of the near infrared pictures; a step of selecting at least one near infrared picture in which the pixel value at the first point is within a predetermined range among the near infrared pictures in which the evaluation index is equal to or greater than a reference value and selecting the near infrared picture with the largest pixel value among the one or more selected near infrared pictures; and a step of calculating left and right sinus indices with respect to the selected near infrared picture.

Description

부비동 진단 시스템 및 그것을 이용한 부비동 진단 방법{SYSTEM FOR SINUS DIAGNOSIS AND METHOD FOR USING THE SAME}Sinus diagnosis system and sinus diagnosis method using the same

본 발명은 부비동 진단 시스템 및 그것을 이용한 부비동 진단 방법에 관한 것으로, 근적외선을 이용하여 측정 대상자의 부비동의 상태를 진단하는 부비동 진단 시스템 및 그것을 이용한 부비동 진단 방법에 관한 것이다.The present invention relates to a sinus diagnosis system and a sinus diagnosis method using the same, and to a sinus diagnosis system for diagnosing the state of the sinus of a subject using near infrared rays and a sinus diagnosis method using the same.

현재 미세 먼지 등 대기 오염 등으로 인한 축농증(부비동염) 환자는 지속적으로 늘고 있으며, 2016년 기준으로 이미 660만명을 넘어서고 있다(축농증 건강보험 진료환자 현황, 국민건강보험공단).Currently, the number of patients with sinusitis (sinusitis) due to air pollution such as fine dust is continuously increasing, and as of 2016, it has already exceeded 6.6 million (Status of Sinusitis Health Insurance Patients, National Health Insurance Corporation).

축농증은 부비동에 축적된 비루(비루)의 점도에 따라 수양성 비루(점도 낮음), 점액성 비루(점도 중간), 화농성 비루(점도 높음)로 분류될 수 있으며, 이에 따라 세척, 항생제 처방, 수술 등 여러 형태의 치료 방법을 적용할 수 있다.Sinusitis can be classified into watery rhinorrhea (low viscosity), mucinous rhinorrhea (medium viscosity), and purulent rhinorrhea (high viscosity) according to the viscosity of rhinorrhea (nasal drip) accumulated in the sinuses. Several types of treatment methods can be applied.

하지만, 현재 비루의 농도를 정확히 측정 할 수 있는 방법이 없어 간접적인 방법으로 환자에 대한 문진과 X-ray, CT 등의 광학 장비를 이용하여 부비동내의 농의 양을 측정하는 방법을 사용하고 있다.However, there is currently no way to accurately measure the concentration of rhinorrhea, so an indirect method is used to measure the amount of pus in the sinuses using optical equipment such as X-ray and CT and an indirect method.

이로 인하여 정확한 진단의 부재로 인한 부비동염에 대한 항생제 남용은 지속적인 사회의 이슈가 되고 있으며, 간접적인 진단을 위한 X-ray, CT 등의 장비의 활용도 축농증 환자의 30%가 9세 이하의 어린이인 것을 고려할 때 방사선 노출에 의한 심각한 피해가 발생할 수 있다는 문제가 있다.Due to this, the abuse of antibiotics for sinusitis due to the absence of an accurate diagnosis is a continuous social issue, and the use of equipment such as X-ray and CT for indirect diagnosis shows that 30% of sinusitis patients are children under 9 years of age. Considering that, there is a problem that serious damage due to radiation exposure may occur.

이러한 문제점을 해결하고자 핀란드의 Mediq Suomi는 초음파의 반향을 이용한 부비동 내의 막힘을 진단하는 제품을 제안하였지만, 초음파를 이용하기 때문에 측정기의 위치에 따라 결과의 일관성이 부족하며, 체계적인 데이터 해석이 불가능 하다는 단점이 있다.To solve this problem, Finnish Mediq Suomi proposed a product for diagnosing blockage in the sinuses using the echo of ultrasound, but because ultrasound is used, the results are inconsistent depending on the location of the measuring device, and systematic data interpretation is not possible. There is this.

따라서, X-ray, CT와 같은 광학장비를 이용하지 않고 일관적으로 데이터를 해석하여 정확하게 부비동염을 측정할 수 있는 기술이 필요하게 되었다.Therefore, there is a need for a technology that can accurately measure sinusitis by consistently interpreting data without using optical equipment such as X-ray and CT.

본 발명의 배경이 되는 기술은 대한민국 등록특허 제10- 1653180호(2016.09.01. 공고)에 개시되어 있다.The technology that is the background of the present invention is disclosed in Republic of Korea Patent Registration No. 10-1653180 (2016.09.01. Announcement).

본 발명이 이루고자 하는 기술적 과제는 근적외선을 이용하여 측정 대상자의 부비동의 상태를 진단하는 부비동 진단 시스템 및 그것을 이용한 부비동 진단 방법을 제공하기 위한 것이다.An object of the present invention is to provide a sinus diagnosis system for diagnosing the state of the sinuses of a subject to be measured using near-infrared rays, and a sinus diagnosis method using the same.

이러한 기술적 과제를 이루기 위한 본 발명의 실시예에 따르면, 부비동 진단 시스템을 이용한 부비동 진단 방법에 있어서, 측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 부비동 측정 장치에 포함된 근적외선 카메라를 통해 상기 측정 대상자의 얼굴을 촬영하여 기준 사진을 획득하는 단계, 상기 구강 조사용 마우스피스에 부착된 LED를 발광시킨 상태에서 상기 근적외선 카메라의 노출시간을 변화시켜 복수의 근적외선 사진을 획득하는 단계, 상기 기준 사진에 촬영된 측정 대상자의 얼굴로부터 상기 기준 사진의 기울기를 측정하는 단계, 상기 복수의 근적외선 사진을 상기 측정된 기울기의 크기만큼 회전시켜 상기 복수의 근적외선 사진을 수평으로 보정하는 단계, 상기 보정된 복수의 근적외선 사진 각각에 대하여 좌측과 우측에 한쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 단계, 상기 복수의 근적외선 사진 각각을 이용하여 상기 측정 대상자의 자세에 대하여 평가 지수를 산출하는 단계, 상기 평가 지수가 기준값 이상인 복수의 근적외선 사진 중에서 제1 포인트(P1)에서의 픽셀 값이 일정범위에 존재하는 하나 이상의 근적외선 사진을 선택하고, 선택된 하나 이상의 근적외선 사진 중에서 가장 큰 픽셀 값을 가지는 근적외선 사진을 선택하는 단계, 그리고 상기 선택된 근적외선 사진에 대하여 좌측과 우측의 부비동 지수를 각각 연산하는 단계를 포함한다.According to an embodiment of the present invention for achieving this technical problem, in a sinus diagnosis method using a sinus diagnosis system, a measurement target uses a near-infrared camera included in the sinus measuring device in a state in which a mouthpiece for oral examination is in his mouth. acquiring a reference picture by photographing the face of the subject to be measured; acquiring a plurality of near-infrared photos by changing the exposure time of the near-infrared camera while emitting an LED attached to the mouthpiece for oral irradiation; the reference Measuring the inclination of the reference photo from the face of the measurement subject photographed in the photo, horizontally correcting the plurality of near-infrared photos by rotating the plurality of near-infrared photos by the magnitude of the measured inclination, the corrected plurality setting a pair of first points (P1), second points (P2) and third points (P3) on the left and right for each near-infrared photograph of Calculating an evaluation index for the posture, selecting one or more near-infrared photographs having a pixel value in a predetermined range from among a plurality of near-infrared photographs having the evaluation index equal to or greater than a reference value, and selecting the selected one or more near-infrared photographs selecting a near-infrared photograph having the largest pixel value from among them, and calculating left and right sinus indices for the selected near-infrared photograph, respectively.

상기 기준 사진의 기울기를 측정하는 단계는, 상기 기준 사진에서의 양쪽 눈동자의 중심을 연결하는 가상의 선을 설정하는 단계, 그리고 상기 기준 사진의 수평선 대비 상기 가상의 선이 기울어진 정도를 측정하는 단계를 포함할 수 있다.The step of measuring the inclination of the reference photo includes setting a virtual line connecting the centers of both pupils in the reference photo, and measuring the degree of inclination of the virtual line with respect to the horizontal line of the reference photo. may include.

상기 제1 포인트(P1)는, 상기 근적외선 카메라를 통해 촬영된 사진에서 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제1 및 제2 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점이고, 상기 제2 포인트(P2)는, 상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점이고, 상기 제3 포인트(P3)는, 상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점일 수 있다.The first point P1 is a virtual first and second vertical line passing through each of the inner and outer points of the eye in the picture taken through the near-infrared camera, and the virtual second passing through each of the tip of the lips and the tip of the nose. It is a point having the largest pixel value in an area where the first and second horizontal lines intersect, and the second point P2 is the center point of the first and second vertical lines and the second horizontal line and the pupil in the photographed picture. A point having the largest pixel value in an area where a fourth horizontal line passing through a center between the passing virtual third horizontal lines intersects, and the third point P3 is the first and second vertical lines in the photographed picture. , a point having the largest pixel value in an area where the third horizontal line and the fourth horizontal line intersect.

상기 평가 지수를 산출하는 단계는, 다음의 수학식과 같이 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)의 합산하여 평가 지수(T_score)를 산출할 수 있다.In the calculating of the evaluation index, the evaluation index T_score may be calculated by summing the distance score D_score, the slope score A_score, and the pixel score P_score as shown in the following equation.

T_score = D_score + A_score + P_score T_score = D_score + A_score + P_score

상기 거리 점수(D_score)는, 다음의 수학식을 이용하여 산출될 수 있다.The distance score D_score may be calculated using the following equation.

D_score = 40 - A * t-distD_score = 40 - A * t-dist

여기서, A는 거리 계수, t-dist는 상기 근적외선 사진의 중심선으로부터 좌측 및 우측 각각의 눈동자의 중심까지의 픽셀개수의 차이다.Here, A is the distance coefficient, and t-dist is the difference in the number of pixels from the center line of the near-infrared image to the center of each pupil on the left and right.

상기 기울기 점수(A_score)는, 다음의 수학식을 이용하여 산출될 수 있다.The slope score A_score may be calculated using the following equation.

A_score = 20 - B * angleA_score = 20 - B * angle

여기서, B는 기울기 계수, angle은 상기 기준 사진의 기울기 각도이다.Here, B is the inclination coefficient, and angle is the inclination angle of the reference photo.

상기 픽셀 점수(P_score)는, 다음의 수학식을 이용하여 산출될 수 있다.The pixel score P_score may be calculated using the following equation.

P_score = 40 - C * p_diffP_score = 40 - C * p_diff

여기서, C는 픽셀 계수, p_diff는 연산된 상기 좌측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 일정 범위 안에 존재하는 픽셀값들의 평균과 우측의 제1 포인트(P1)와 제2 포인트(P2)를 잇는 선을 기준으로 일정 범위 안에 존재하는 픽셀값들의 평균의 차이값이다.Here, C is a pixel coefficient, p_diff is the average of pixel values existing within a predetermined range based on the calculated line connecting the first point P1 and the second point P2 on the left side and the first point P1 on the right side ) and the second point P2, which is a difference value of the average of pixel values existing within a predetermined range.

상기 산출된 평가 지수가 기준 값보다 작으면 재촬영을 요청하거나 평가불가로 판단하는 단계를 더 포함할 수 있다.When the calculated evaluation index is less than the reference value, the method may further include requesting re-photography or determining that evaluation is impossible.

상기 부비동 지수를 각각 연산하는 단계는, 상기 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)에서의 픽셀 값을 아래의 수학식에 적용하여 상기 선택된 근적외선 사진의 좌측과 우측 각각의 부비동 지수를 연산할 수 있다.In the step of calculating the sinus index, respectively, the pixel values at the first point (P1), the second point (P2), and the third point (P3) are applied to the following equation to the left side of the selected near-infrared photograph and You can calculate the index of each sinus on the right.

Figure pat00001
Figure pat00001

Figure pat00002
Figure pat00002

여기서, X, Y, Z 및 F는 계수이다.where X, Y, Z and F are coefficients.

상기 연산된 부비동지수를 표시하는 단계를 더 포함하며, 상기 연산된 부비동지수를 표시하는 단계는, 상기 연산된 부비동지수를 수치 형태로 표시하거나 상기 부비동지수를 정규화하여 정규화된 값에 따라 음영 영역 형태로 표시할 수 있다.The method further includes displaying the calculated sinus index, wherein the displaying of the calculated sinus index includes displaying the calculated sinus index in numerical form or normalizing the sinus index to form a shaded area according to a normalized value can be displayed as

본 발명의 다른 실시예에 따르면, 부비동 진단을 위한 부비동 진단 시스템에 있어서, 측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 부비동 측정 장치에 포함된 근적외선 카메라를 통해 상기 측정 대상자의 얼굴을 촬영하여 기준 사진을 획득하고, 상기 구강 조사용 마우스피스에 부착된 LED를 발광시킨 상태에서 상기 근적외선 카메라의 노출시간을 변화시켜 복수의 근적외선 사진을 획득하는 촬영부, 상기 기준 사진에 촬영된 측정 대상자의 얼굴로부터 상기 기준 사진의 기울기를 측정하는 기울기 측정부, 상기 복수의 근적외선 사진을 상기 측정된 기울기의 크기만큼 회전시켜 상기 복수의 근적외선 사진을 수평으로 보정하는 보정부, 상기 보정된 복수의 근적외선 사진 각각에 대하여 좌측과 우측에 한쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 설정부, 상기 복수의 근적외선 사진 각각을 이용하여 상기 측정 대상자의 자세에 대하여 평가 지수를 산출하는 산출부, 상기 평가 지수가 기준값 이상인 복수의 근적외선 사진 중에서 제1 포인트(P1)에서의 픽셀 값이 일정범위에 존재하는 하나 이상의 근적외선 사진을 선택하고, 선택된 하나 이상의 근적외선 사진 중에서 가장 큰 픽셀 값을 가지는 근적외선 사진을 선택하는 선택부, 그리고 상기 선택된 근적외선 사진에 대하여 좌측과 우측의 부비동 지수를 각각 연산하는 연산부를 포함한다.According to another embodiment of the present invention, in the sinus diagnosis system for diagnosing sinuses, the face of the subject to be measured is measured through the near-infrared camera included in the sinus measuring device in a state in which the subject to be measured has a mouthpiece for oral examination in his mouth. A photographing unit that acquires a reference photograph by photographing, and obtains a plurality of near-infrared photographs by changing the exposure time of the near-infrared camera in a state in which the LED attached to the mouthpiece for oral irradiation emits light; A tilt measuring unit for measuring the inclination of the reference photo from the face of a correcting unit for horizontally correcting the plurality of near-infrared photos by rotating the plurality of near-infrared photos by the magnitude of the measured inclination, the corrected plurality of near-infrared photos A setting unit that sets a pair of first points (P1), second points (P2) and third points (P3) on the left and right sides for each, using each of the plurality of near-infrared photos to determine the posture of the subject to be measured a calculation unit for calculating an evaluation index with respect to each other, selects one or more near-infrared photos having a pixel value in a predetermined range at the first point P1 from among a plurality of near-infrared photos having the evaluation index equal to or greater than a reference value, and selects one or more near-infrared photos from the selected one or more near-infrared photos and a selection unit for selecting a near-infrared photograph having the largest pixel value, and a calculating unit for calculating left and right sinus indices with respect to the selected near-infrared photograph, respectively.

이와 같이 본 발명에 따르면, 기존의 X-ray 및 CT와 같은 광학 장비를 이용하지 않으면서 짧은 시간 동안 측정하기 때문에 측정자나 측정 대상자에게 부담 없이 적용이 가능하다.As described above, according to the present invention, since measurement is performed for a short time without using optical equipment such as conventional X-ray and CT, it can be applied without burden to a person measuring or to be measured.

또한, 측정 대상자마다 가진 신체적 특성과 자세를 분석하여 반영하기 때문에 부비동 염 진단의 오차율을 낮출 수 있다.In addition, since the physical characteristics and postures of each subject are analyzed and reflected, the error rate in the diagnosis of sinusitis can be reduced.

도 1은 본 발명의 실시예에 따른 부비동 진단 시스템을 설명하기 위한 도면이다.
도 2a 내지 도 2c는 본 발명의 실시예에 따른 구강 조사용 마우스피스의 외관을 나타낸 도면이다.
도 3은 본 발명의 실시예에 따른 부비동 측정장치의 구성을 설명하기 위한 도면이다.
도 4는 본 발명의 실시예에 따른 부비동 진단 방법을 설명하기 위한 순서도이다.
도 5는 본 발명의 실시예에 따른 기준 사진을 설명하기 위한 예시도이다.
도 6은 도 4의 S430단계를 설명하기 위한 순서도이다.
도 7은 본 발명의 실시예에 따른 기준 사진의 기울기를 측정하는 과정을 설명하기 위한 예시도이다.
도 8은 본 발명의 실시예에 따른 제1 분할 영역 내지 제3 분할 영역을 설명하기 위한 도면이다.
도 9는 본 발명의 실시예에 따른 설정된 제1 포인트 내지 제3 포인트를 나타낸 예시도이다.
도 10a 및 도 10b는 본 발명의 실시예에 따른 부비동 진단 결과를 제공하는 예시도이다.
1 is a view for explaining a sinus diagnosis system according to an embodiment of the present invention.
Figures 2a to 2c is a view showing the appearance of the mouthpiece for oral irradiation according to an embodiment of the present invention.
3 is a view for explaining the configuration of a sinus measuring apparatus according to an embodiment of the present invention.
4 is a flowchart illustrating a sinus diagnosis method according to an embodiment of the present invention.
5 is an exemplary view for explaining a reference photo according to an embodiment of the present invention.
6 is a flowchart for explaining step S430 of FIG. 4 .
7 is an exemplary diagram for explaining a process of measuring the inclination of a reference photo according to an embodiment of the present invention.
8 is a view for explaining a first divided area to a third divided area according to an embodiment of the present invention.
9 is an exemplary diagram illustrating first to third points set according to an embodiment of the present invention.
10A and 10B are exemplary views providing a sinus diagnosis result according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시 예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art can easily carry out the present invention. However, the present invention may be embodied in many different forms and is not limited to the embodiments described herein. And in order to clearly explain the present invention in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part "includes" a certain element, it means that other elements may be further included, rather than excluding other elements, unless otherwise stated.

그러면 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.Then, with reference to the accompanying drawings, embodiments of the present invention will be described in detail so that those of ordinary skill in the art to which the present invention pertains can easily implement them.

이하에서는 도 1 내지 도 3을 이용하여 본 발명의 실시예에 따른 부비동 진단 시스템에 대하여 설명한다.Hereinafter, a sinus diagnosis system according to an embodiment of the present invention will be described with reference to FIGS. 1 to 3 .

도 1은 본 발명의 실시예에 따른 부비동 진단 시스템을 설명하기 위한 도면이고, 도 2a 내지 도 2c는 본 발명의 실시예에 따른 구강 조사용 마우스피스의 외관을 나타낸 도면이다.1 is a view for explaining a sinus diagnosis system according to an embodiment of the present invention, Figures 2a to 2c is a view showing the appearance of the mouthpiece for oral examination according to the embodiment of the present invention.

도 1에서 나타낸 것처럼, 본 발명의 실시예에 따른 부비동 진단 시스템은 구강 조사용 마우스피스(100) 및 부비동 측정장치(200)를 포함한다. As shown in FIG. 1 , the sinus diagnosis system according to an embodiment of the present invention includes a mouthpiece 100 for oral examination and a sinus measuring device 200 .

여기서, 본 발명의 실시예에 따른 부비동 진단 시스템은 근적외선을 이용하여 촬영한 사진을 분석하고, 분석한 결과를 토대로 측정 대상자의 부비동 지수를 분석한다.Here, the sinus diagnosis system according to an embodiment of the present invention analyzes a photograph taken using near-infrared rays, and analyzes the sinus index of the subject to be measured based on the analysis result.

먼저, 본 발명의 실시예에 따른 구강 조사용 마우스피스(100)는 마우스피스 형태로 구현되며, 측정 대상자의 구강 내부에 LED를 이용하여 근적외선을 조사한다.First, the mouthpiece 100 for oral irradiation according to an embodiment of the present invention is implemented in the form of a mouthpiece, and irradiates near-infrared rays using an LED in the oral cavity of the subject to be measured.

또한, 부비동 측정장치(200)는 근적외선을 조사한 상태에서 복수의 근적외선 사진을 획득하고, 획득한 사진을 이용하여 측정 대상자의 부비동 지수를 분석한다.In addition, the sinus measuring apparatus 200 acquires a plurality of near-infrared photos in a state of irradiating near-infrared rays, and analyzes the sinus index of the subject to be measured by using the acquired photos.

도 1에서 나타낸 것처럼, 측정 대상자는 구강 조사용 마우스피스(100)를 입에 문 상태로 부비동 측정장치(200)에 얼굴을 밀착시키면, 부비동 측정장치(200)는 측정 대상자를 촬영하여 일반 사진과 근적외선 사진을 촬영할 수 있다. 그러면, 부비동 측정장치(200)는 구강 조사용 마우스피스(100)의 LED 점등 여부에 따라 기준 사진과 근적외선 사진의 두 종류의 사진을 촬영할 수 있다.As shown in Fig. 1, when the subject to be measured puts his or her face in close contact with the sinus measuring device 200 with the mouthpiece 100 for oral irradiation in the mouth, the sinus measuring device 200 takes the subject to be measured and shows a general picture and You can take near-infrared photos. Then, the sinus measuring device 200 may take two types of pictures, a reference picture and a near-infrared picture, depending on whether the LED of the mouthpiece 100 for oral irradiation is turned on.

도 2a 내지 도 2c에서 나타낸 것처럼, 구강 조사용 마우스피스(100)는 외측부(110), 내측부(120) 및 지지부(130)를 포함한다. As shown in FIGS. 2A to 2C , the mouthpiece 100 for oral irradiation includes an outer portion 110 , an inner portion 120 , and a support portion 130 .

외측부(110)는 내부에 배터리가 포함되어 있어 구강 조사용 마우스피스(100)에 전원을 공급한다. The outer part 110 supplies power to the mouthpiece 100 for oral irradiation because a battery is included therein.

내측부(120)는 측정 대상자의 구강에 삽입되는 부분으로서, 내부에는 복수의 LED(140)가 포함되며, 도 2a와 같이 복수의 LED(140)는 내측부의 중심으로 양 측면에 대칭적으로 배치된다. 또한, 도 2b에서 보는 바와 같이, 내측부(120)는 측면으로 경사가 진 상태로 구현되므로, 측정 대상자가 용이하게 구강에 삽입할 수 있도록 한다. The inner portion 120 is a portion to be inserted into the oral cavity of the measurement subject, and a plurality of LEDs 140 are included therein, and as shown in FIG. 2a , the plurality of LEDs 140 are symmetrically disposed on both sides as the center of the inner portion. . In addition, as shown in Figure 2b, the inner portion 120 is implemented in a state inclined to the side, so that the measurement target can be easily inserted into the oral cavity.

복수의 LED(140)는 제1 LED(140a), 제2 LED(140b) 및 제3 LED(140c)를 포함하며, 측정 대상자가 구강 조사용 마우스피스(100)의 내측부(120)를 입에 물게 될 경우, 제1 LED(140a)가 측정 대상자의 구강의 가장 안쪽부분에 위치되며, 제3 LED(140c)는 측정 대상자의 구강의 가장 바깥쪽부분에 위치하게 된다. The plurality of LEDs 140 includes a first LED 140a, a second LED 140b, and a third LED 140c, and the measurement target puts the inner part 120 of the mouthpiece 100 for oral irradiation into the mouth. When biting, the first LED (140a) is located in the innermost portion of the mouth of the measurement subject, the third LED (140c) is located in the outermost portion of the mouth of the measurement subject.

또한, 지지부(130)는 외측부(110)와 내측부(120) 사이에 위치하며, 측정 대상자의 입술이 닿는 부위에 해당한다. 지지부(130)는 곡선형으로 구현되어 구강 대상자가 용이하게 밀착시킬 수 있도록 한다. In addition, the support 130 is located between the outer part 110 and the inner part 120, and corresponds to the part where the lips of the measurement subject touch. The support 130 is implemented in a curved shape so that the oral subject can easily adhere to it.

도 2c에서 나타낸 것처럼, 지지부(130)의 바깥 방향에는 우측 및 좌측에 각각 1개씩 인식마크(150a, 150b)가 부착된다.As shown in FIG. 2C , identification marks 150a and 150b are attached to the right side and the left side, respectively, in the outer direction of the support unit 130 .

부비동 측정장치(200)는 근적외선 사진에 나타난 좌우측의 인식마크(150a, 150b)의 평형성 여부를 통하여 측정 대상자가 구강 조사용 마우스피스(100)를 정확하게 입에 물고 있는지 여부를 판단할 수 있다. 즉, 부비동 측정장치(200)는 서로 이격된 지점에 위치하는 좌측과 우측의 인식마크(150a, 150b)의 평형성을 측정하여 측정 대상자가 입에 물고 있는 구강 조사용 마우스피스(100)의 정위치 여부를 판단할 수 있다.The sinus measuring apparatus 200 may determine whether the subject to be measured is accurately biting the mouthpiece 100 for oral examination through the balance of the left and right recognition marks 150a and 150b shown in the near-infrared photograph. That is, the sinus measuring device 200 measures the balance of the left and right recognition marks 150a and 150b located at a point spaced apart from each other to measure the exact position of the mouthpiece 100 for oral examination held by the subject to be measured. can determine whether

이때, 도 2a 내지 도 2c에서는 LED(140)의 개수는 3개(140a, 140b, 140c)로 이루어진 2개의 쌍 형태로 표현하였지만, LED의 개수 및 설치 위치는 측정 대상자의 구강 구조에 따라 변경될 수 있으며, 대칭되는 좌우측의 LED는 동일한 크기의 파장을 방출하고, 이웃하는 LED는 서로 다른 파장을 방출할 수 있다.At this time, in FIGS. 2a to 2c, the number of LEDs 140 is expressed in the form of two pairs of three (140a, 140b, 140c), but the number and installation position of the LEDs are to be changed according to the oral structure of the subject to be measured. The symmetrical left and right LEDs may emit wavelengths of the same size, and neighboring LEDs may emit different wavelengths.

도 3은 본 발명의 실시예에 따른 부비동 측정장치의 구성을 설명하기 위한 도면이다.3 is a view for explaining the configuration of a sinus measuring apparatus according to an embodiment of the present invention.

도 3에서 나타낸 것처럼, 본 발명의 실시예에 따른 부비동 측정장치(200)는 촬영부(210), 기울기 측정부(220), 보정부(230), 설정부(240), 산출부(250), 선택부(260), 연산부(270), 판단부(280) 및 표시부(290)를 포함한다. As shown in FIG. 3 , the sinus measuring apparatus 200 according to an embodiment of the present invention includes a photographing unit 210 , a tilt measuring unit 220 , a correcting unit 230 , a setting unit 240 , and a calculating unit 250 . , a selection unit 260 , an operation unit 270 , a determination unit 280 , and a display unit 290 .

먼저, 촬영부(210)는 측정 대상자의 얼굴을 촬영하기 위한 근적외선 카메라를 포함한다.First, the photographing unit 210 includes a near-infrared camera for photographing the face of the measurement target.

도 1에서 나타낸 것처럼, 촬영부(210)는 측정 대상자의 얼굴을 암실에서 정확한 사진을 촬영하기 위해 근적외선 카메라를 이용한다.As shown in FIG. 1 , the photographing unit 210 uses a near-infrared camera to take an accurate picture of the subject's face in a dark room.

이때, 촬영부(210)는 측정 대상자가 구강 조사용 마우스피스(100)를 입에 문 상태에서, 근적외선 카메라를 통해 측정 대상자의 얼굴을 촬영하여 기준 사진을 획득한다.At this time, the photographing unit 210 acquires a reference picture by photographing the subject's face through a near-infrared camera in a state in which the subject to be measured holds the mouthpiece 100 for oral irradiation in his/her mouth.

즉, 기준 사진은 구강 조사용 마우스피스(100)의 LED를 소등한 상태에서 근적외선 카메라를 통해 측정 대상자의 얼굴을 촬영한 사진이다.That is, the reference photograph is a photograph of the face of the subject to be measured through the near-infrared camera in a state in which the LED of the mouthpiece 100 for oral irradiation is turned off.

또한, 촬영부(210)는 구강 조사용 마우스피스(100)에 부착된 LED를 발광시킨 상태에서 근적외선 카메라의 노출시간을 변화시켜 복수의 근적외선 사진을 획득한다.In addition, the photographing unit 210 acquires a plurality of near-infrared photos by changing the exposure time of the near-infrared camera in a state in which the LED attached to the mouthpiece 100 for oral irradiation is emitted.

다음으로, 기울기 측정부(220)는 기준 사진에 촬영된 측정 대상자의 얼굴로부터 기준 사진의 기울기를 측정한다.Next, the slope measuring unit 220 measures the slope of the reference picture from the face of the measurement target photographed in the reference picture.

여기서, 기울기 측정부(220)는 기준 사진에서의 양쪽 눈동자의 중심을 연결하는 가상의 선을 설정하고, 기준 사진의 수평선 대비 설정된 가상의 선이 기울어진 정도를 측정한다.Here, the tilt measuring unit 220 sets a virtual line connecting the centers of both pupils in the reference photo, and measures the degree of inclination of the set virtual line with respect to the horizontal line of the reference photo.

다음으로, 보정부(230)는 복수의 근적외선 사진을 측정된 기울기의 크기만큼 회전시켜 복수의 근적외선 사진을 수평으로 보정한다.Next, the corrector 230 horizontally corrects the plurality of near-infrared photos by rotating the plurality of near-infrared photos as much as the measured inclinations.

즉, 보정부(230)는 기울어진 방향의 반대 방향으로 기울기 측정부(220)로부터 측정된 기울기 값만큼 회전시켜 사진을 수평으로 보정한다.That is, the correction unit 230 horizontally corrects the picture by rotating the inclination value measured by the inclination measurement unit 220 in the opposite direction to the inclination direction.

다음으로, 설정부(240)는 보정된 복수의 근적외선 사진 각각에 대하여 좌측과 우측에 한 쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정한다. 여기서, 한 쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)는 측정 대상자의 얼굴의 형태 및 크기에 따라 변경될 수 있다.Next, the setting unit 240 sets a pair of first points P1, second points P2, and third points P3 on the left and right sides for each of the plurality of corrected near-infrared photos. Here, the pair of first point P1 , second point P2 , and third point P3 may be changed according to the shape and size of the face of the measurement target.

다음으로, 산출부(250)는 복수의 근적외선 사진 각각을 이용하여 측정 대상자의 자세에 대하여 평가 지수를 산출한다. 이때, 산출부(250)는 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)의 합산한 값으로 평가 지수(T_score)를 연산한다.Next, the calculator 250 calculates an evaluation index with respect to the posture of the subject to be measured by using each of the plurality of near-infrared photographs. In this case, the calculator 250 calculates the evaluation index T_score as the sum of the distance score D_score, the slope score A_score, and the pixel score P_score.

다음으로, 선택부(260)는 평가 지수가 기준값 이상인 복수의 근적외선 사진 중에서 제1 포인트(P1)에서의 픽셀 값이 일정범위에 존재하는 하나 이상의 근적외선 사진을 선택하고, 선택된 하나 이상의 근적외선 사진 중에서 가장 큰 픽셀 값을 가지는 근적외선 사진을 선택한다.Next, the selection unit 260 selects one or more near-infrared photos in which the pixel value at the first point P1 exists in a certain range from among a plurality of near-infrared photos having an evaluation index equal to or greater than the reference value, and selects the most Select near-infrared photos with large pixel values.

다음으로, 연산부(270)는 선택된 근적외선 사진에 대하여 좌측과 우측의 부비동 지수를 각각 연산한다.Next, the calculator 270 calculates the left and right sinus indices for the selected near-infrared photograph, respectively.

다음으로, 판단부(280)는 산출된 평가 지수가 기준 값보다 작으면 재촬영을 요청하거나 평가불가로 판단한다.Next, if the calculated evaluation index is less than the reference value, the determination unit 280 requests re-photography or determines that evaluation is impossible.

그리고, 표시부(290)는 연산된 부비동지수를 표시하며, 부비동지수를 수치 형태로 표시하거나 부비동지수를 정규화하여 정규화된 값에 따라 음영 영역 형태로 표시한다.The display unit 290 displays the calculated sinus index, and displays the sinus index in numerical form or in the form of a shaded area according to the normalized value by normalizing the sinus index.

이하에서는 도 4 내지 도 10b를 이용하여 본 발명의 실시예에 따른 부비동 진단 시스템을 이용한 부비동 진단 방법을 설명한다.Hereinafter, a sinus diagnosis method using the sinus diagnosis system according to an embodiment of the present invention will be described with reference to FIGS. 4 to 10B .

도 4는 본 발명의 실시예에 따른 부비동 진단 방법을 설명하기 위한 순서도이다.4 is a flowchart illustrating a sinus diagnosis method according to an embodiment of the present invention.

먼저, 측정 대상자가 구강 조사용 마우스피스(100)를 입에 문 상태에서, 부비동 측정 장치(200)는 근적외선 카메라를 통해 측정 대상자의 얼굴을 촬영하여 기준 사진을 획득한다(S410).First, in a state in which the subject to be measured holds the mouthpiece 100 for oral examination in his mouth, the sinus measuring device 200 acquires a reference picture by photographing the subject's face through a near-infrared camera (S410).

도 5는 본 발명의 실시예에 따른 기준 사진을 설명하기 위한 예시도이다.5 is an exemplary view for explaining a reference photo according to an embodiment of the present invention.

도 5에서 나타낸 것처럼, 부비동 측정 장치(200)는 측정 대상자의 얼굴에 근적외선을 조사한 상태에서 측정 대상자의 얼굴을 촬영한다. As shown in FIG. 5 , the sinus measuring apparatus 200 captures the face of the subject to be measured in a state in which near-infrared rays are irradiated to the face of the subject to be measured.

부비동 측정 장치(200)는 기준 사진을 획득하기 위해 구강 조사용 마우스피스(100)에 존재하는 복수의 LED를 소등시킨 상태에서 측정 대상자의 얼굴을 촬영한다.The sinus measuring device 200 photographs the face of the subject to be measured in a state in which a plurality of LEDs present in the mouthpiece 100 for oral irradiation are turned off to obtain a reference picture.

이때, 도 5와 같이, 부비동 측정 장치(200)는 얼굴의 영역을 명확하게 구분하기 위하여 기준 사진에서 우측 눈의 바깥쪽지점(E1), 우측 눈의 안쪽지점(E2), 좌측 눈의 안쪽지점(E3), 좌측 눈의 바깥쪽지점(E4)을 선택한다. At this time, as shown in FIG. 5 , the sinus measuring apparatus 200 provides an outer point ( E1 ) of the right eye, an inner point ( E2 ) of the right eye, and an inner point of the left eye in the reference photo in order to clearly distinguish the area of the face. (E3), select the outer point of the left eye (E4).

또한, 부비동 측정 장치(200)는 코의 우측 끝점(N1), 코의 좌측 끝점(N2), 입술의 우측 끝점(M1), 입술의 좌측 끝점(M2)도 선택한다. Also, the sinus measuring apparatus 200 selects the right end point N1 of the nose, the left end point N2 of the nose, the right end point M1 of the lips, and the left end point M2 of the lips.

다음으로, 구강 조사용 마우스피스(100)에 부착된 LED가 발광되는 상태에서, 부비동 측정 장치(200)는 근적외선 카메라의 노출시간을 변환시켜가면서 측정 대상자의 얼굴을 연속 촬영함으로써, 복수개의 근적외선 사진을 획득한다(S420).Next, in a state in which the LED attached to the mouthpiece 100 for oral irradiation is emitting light, the sinus measuring device 200 continuously shoots the face of the subject to be measured while changing the exposure time of the near-infrared camera, so that a plurality of near-infrared photos is obtained (S420).

여기서, 설명의 편의상 3개의 근적외선 사진을 획득하는 것으로 예시한다. Here, for convenience of description, it is exemplified as acquiring three near-infrared photos.

부비동 측정 장치(200)는 근적외선 카메라의 조리개의 크기를 조절하거나 셔터의 스피드를 이용하여 노출시간을 변환시켜 3개의 근적외선 사진을 획득한다.The sinus measuring apparatus 200 acquires three near-infrared photos by adjusting the size of the aperture of the near-infrared camera or changing the exposure time by using the shutter speed.

다음으로, 부비동 측정 장치(200)는 기준 사진에 촬영된 측정 대상자의 얼굴을 이용하여 기준 사진의 기울기를 측정한다(S430).Next, the sinus measuring apparatus 200 measures the inclination of the reference photograph by using the face of the measurement subject photographed in the reference photograph (S430).

기준 사진의 기울기를 측정하기 위해서, 부비동 측정 장치(200)는 기준 사진에서 측정 대상자의 좌측 눈동자의 중심점(T1)과 우측 눈동자의 중심점(T2)을 선정한다.In order to measure the inclination of the reference picture, the sinus measuring apparatus 200 selects the center point T1 of the left pupil and the center point T2 of the right pupil of the measurement subject in the reference picture.

도 6은 도 4의 S430단계를 설명하기 위한 순서도이고, 도 7은 본 발명의 실시예에 따른 기준 사진의 기울기를 측정하는 과정을 설명하기 위한 예시도이다.6 is a flowchart for explaining step S430 of FIG. 4 , and FIG. 7 is an exemplary view for explaining a process of measuring the inclination of a reference photo according to an embodiment of the present invention.

먼저, 부비동 측정 장치(200)는 기준 사진에서의 양쪽 눈동자의 중심점(T1, T2)을 연결하는 가상의 선(C1)을 설정한다(S431).First, the sinus measuring apparatus 200 sets an imaginary line C1 connecting the center points T1 and T2 of both pupils in the reference picture ( S431 ).

그리고, 부비동 측정 장치(200)는 기준 사진의 수평선(C2) 대비 가상의 선(C1)이 기울어진 정도를 측정한다(S432).Then, the sinus measuring apparatus 200 measures the degree of inclination of the virtual line C1 with respect to the horizontal line C2 of the reference picture (S432).

즉, 부비동 측정 장치(200)는 도 7에서 나타낸 가상의 선(C1)과 기준 사진의 수평선(C2)을 대조하여 기준 사진이 기울어진 정도를 측정한다.That is, the sinus measuring apparatus 200 compares the virtual line C1 shown in FIG. 7 with the horizontal line C2 of the reference photograph to measure the degree of inclination of the reference photograph.

예를 들어, 기준 사진의 수평선(C2)에 대비하여 가상의 선(C1)이 4°기울어져 있으면, 부비동 측정 장치(200)는 해당 기준 사진이 4°만큼 기울어진 것으로 판단한다.For example, if the virtual line C1 is inclined by 4° with respect to the horizontal line C2 of the reference picture, the sinus measuring apparatus 200 determines that the corresponding reference picture is inclined by 4°.

다음으로, 부비동 측정 장치(200)는 복수의 근적외선 사진을 측정된 기울기의 크기만큼 회전시켜 복수의 근적외선 사진의 수평을 보정한다(S440).Next, the sinus measuring apparatus 200 corrects the horizontality of the plurality of near-infrared photos by rotating the plurality of near-infrared photos by the magnitude of the measured inclination ( S440 ).

즉, 부비동 측정 장치(200)는 S430단계에서 측정된 기울어진 기울기(4°)만큼 3장의 근적외선 사진 각각을 회전시켜 복수의 근적외선 사진이 수평 상태가 되도록 보정한다.That is, the sinus measuring apparatus 200 rotates each of the three near-infrared photos by the inclined inclination (4°) measured in step S430 to correct the plurality of near-infrared photos to be in a horizontal state.

즉, 부비동 측정 장치(200)는 정확한 부비동의 부비동 지수를 연산하기 위하여 3장의 근적외선 사진이 수평이 되도록 보정한다.That is, the sinus measuring apparatus 200 corrects the three near-infrared photographs to be horizontal in order to calculate the correct sinus index of the sinuses.

다음으로, 부비동 측정 장치(200)는 보정된 3장의 근적외선 사진 각각에 대하여 좌측과 우측에 한 쌍의 제1 포인트, 제2 포인트 및 제3 포인트를 설정한다(S450). Next, the sinus measuring apparatus 200 sets a pair of first points, second points, and third points on the left and right sides for each of the three corrected near-infrared photos ( S450 ).

이하에서는 도 8 및 도 9를 이용하여 S450 단계에서 제1 포인트, 제2 포인트 및 제3 포인트를 설정하는 과정에 대하여 설명한다. Hereinafter, a process of setting the first point, the second point, and the third point in step S450 will be described with reference to FIGS. 8 and 9 .

부비동 측정 장치(200)는 각각의 포인트를 설정하기 위하여 먼저 보정된 3장의 근적외선 사진 각각에 대하여 복수의 분할 영역으로 구분한다. The sinus measuring apparatus 200 divides each of the three corrected near-infrared images into a plurality of divided regions in order to set each point.

도 8은 본 발명의 실시예에 따른 제1 분할 영역 내지 제3 분할 영역을 설명하기 위한 도면이다.8 is a view for explaining a first divided area to a third divided area according to an embodiment of the present invention.

도 8과 같이 부비동 측정 장치(200)는 제1 분할 영역 내지 제3 분할 영역을 구분하기 위하여 각각의 근적외선 사진에 수직과 수평 방향으로 복수의 가상의 선을 설정한다. As shown in FIG. 8 , the sinus measuring apparatus 200 sets a plurality of virtual lines in vertical and horizontal directions in each near-infrared photograph to distinguish the first to third divided areas.

제1 수직선(V1), 제2 수직선(V2), 제3 수직선(V3) 및 제4 수직선(V4)은 근적외선 카메라를 통해 촬영된 3장의 사진에 대하여 우측 눈의 바깥쪽지점(E1), 우측 눈의 안쪽지점(E2), 좌측 눈의 안쪽지점(E3), 좌측 눈의 바깥쪽지점(E4) 각각을 지나는 가상의 선을 나타낸다.The first vertical line (V1), the second vertical line (V2), the third vertical line (V3), and the fourth vertical line (V4) are the outer point of the right eye (E1), the right side of the three pictures taken through the near-infrared camera. An imaginary line passing through the inner point of the eye (E2), the inner point of the left eye (E3), and the outer point of the left eye (E4) is shown.

그리고, 제1 수평선(H1) 및 제2 수평선(H2)은 근적외선 카메라를 통해 촬영된 사진에서의 입술 끝점(M1, M2)과 코 끝점(N1, N2)을 각각 지나는 가상의 선을 나타낸다.In addition, the first horizontal line H1 and the second horizontal line H2 represent virtual lines passing through the lip end points M1 and M2 and the nose end points N1 and N2, respectively, in a picture taken through a near-infrared camera.

또한, 제3 수평선(H3)은 근적외선 카메라를 통해 촬영된 사진에서의 눈동자의 중심점(T1, T2)을 지나는 가상의 선이며, 제4 수평선(H4)은 제2 수평선(H2)과 제3 수평선(H3) 사이의 중심을 통과하는 가상의 선을 나타낸다.In addition, the third horizontal line H3 is an imaginary line passing through the center points T1 and T2 of the pupil in the picture taken through the near-infrared camera, and the fourth horizontal line H4 is the second horizontal line H2 and the third horizontal line (H3) represents an imaginary line passing through the center between

이와 같이 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H1, H2, H3, H4)을 설정하면, 각각의 교차되는 선에 의하여 복수의 분할 영역이 생성된다. When the plurality of virtual vertical lines V1, V2, V3, and V4 and the plurality of virtual horizontal lines H1, H2, H3, and H4 are set in this way, a plurality of divided regions are generated by the intersecting lines.

즉, 도 8에서 나타낸 것처럼, 제1 분할 영역은 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H1, H2)이 교차되는 영역에 존재하고, 제2 분할 영역은 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H2, H4)이 교차되는 영역에 존재하며, 제3 분할 영역은 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H3, H4)이 교차되는 영역에 존재한다. That is, as shown in FIG. 8 , the first divided area exists in an area where the plurality of virtual vertical lines V1 , V2 , V3 and V4 and the plurality of virtual horizontal lines H1 and H2 intersect, and the second divided area is present in a region where the plurality of virtual vertical lines V1, V2, V3, and V4 and the plurality of virtual horizontal lines H2 and H4 intersect, and the third division region includes the plurality of virtual vertical lines V1, V2, V3 , V4) and the plurality of imaginary horizontal lines H3 and H4 intersect each other.

도 8과 같이, 복수의 분할 영역이 설정되면, 부비동 측정 장치(200)는 각각의 분할 영역에 대하여 각각의 포인트를 설정한다. As shown in FIG. 8 , when a plurality of divided regions are set, the sinus measuring apparatus 200 sets each point for each divided region.

도 9는 본 발명의 실시예에 따른 설정된 제1 포인트 내지 제3 포인트를 나타낸 예시도이다.9 is an exemplary diagram illustrating first to third points set according to an embodiment of the present invention.

도 9에서 나타낸 것처럼, 제1 포인트 내지 제3 포인트는 3장의 근적외선 사진 각각에 대하여 설정되며, 각각의 근적외선 사진에서 얼굴의 좌측 및 우측에 설정된다.As shown in FIG. 9 , the first to third points are set for each of the three near-infrared photos, and are set on the left and right sides of the face in each of the near-infrared photos.

도 9에 나타낸 것처럼, 부비동 측정 장치(200)는 제1 분할 영역에서 가장 큰 픽셀 값을 가지는 제1 포인트(LP1, RP1)를 설정하고, 제2 분할 영역에서 가장 큰 픽셀 값을 가지는 제2 포인트(LP2, RP2)를 설정하며, 제3 분할 영역에서 가장 큰 픽셀 값을 가지는 제3 포인트(LP3, RP3)를 설정한다.As shown in FIG. 9 , the sinus measuring apparatus 200 sets first points LP1 and RP1 having the largest pixel value in the first divided region, and the second point having the largest pixel value in the second divided region. (LP2, RP2) is set, and the third point (LP3, RP3) having the largest pixel value in the third divided area is set.

또한, 좌측과 우측에 각각 설정된 제1 포인트 내지 제3 포인트는 서로 대칭되는 위치에 설정될 수도 있고 서로 다른 위치에 각각 설정될 수 있다.In addition, the first to third points respectively set on the left and right sides may be set at positions symmetrical to each other or set at different positions, respectively.

다음으로, 부비동 측정 장치(200)는 복수의 근적외선 사진 각각에 대하여 측정 대상자의 자세에 대한 평가 지수를 산출한다(S460).Next, the sinus measuring apparatus 200 calculates an evaluation index for the posture of the measurement subject for each of the plurality of near-infrared photographs (S460).

여기서, 부비동 측정 장치(200)는 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)를 아래의 수학식 1을 이용하여 측정 대상자의 자세에 대한 평가 지수(T_score)를 산출한다.Here, the sinus measuring apparatus 200 calculates an evaluation index (T_score) for the posture of the subject to be measured by using Equation 1 below for the distance score (D_score), the slope score (A_score), and the pixel score (P_score).

Figure pat00003
Figure pat00003

여기서, 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)는 아래의 수학식 2 내지 수학식 4를 이용하여 연산된다.Here, the distance score (D_score), the slope score (A_score), and the pixel score (P_score) are calculated using Equations 2 to 4 below.

먼저, 부비동 측정 장치(200)는 근적외선 사진에서의 중앙으로부터 좌측 및 우측 각각의 눈동자의 중심까지의 픽셀 개수를 아래의 수학식에 적용하여 거리 점수를 연산한다.First, the sinus measuring apparatus 200 calculates a distance score by applying the number of pixels from the center to the center of each of the left and right pupils in the near-infrared photograph to the following equation.

Figure pat00004
Figure pat00004

여기서, A는 거리 계수, t-dist는 사진의 중앙에서부터 좌측 및 우측 각각의 눈동자의 중심(T1, T2)까지의 픽셀개수의 차이다.Here, A is the distance coefficient, and t-dist is the difference in the number of pixels from the center of the photo to the center (T1, T2) of each of the left and right pupils.

이때, 거리 점수(D_score)의 최대 값은 40으로 설정된다.In this case, the maximum value of the distance score D_score is set to 40.

예를 들어, t-dist가 40이고, A가 0.2라고 하면, 거리 점수(D_score)는 32로 연산된다.For example, if t-dist is 40 and A is 0.2, the distance score D_score is calculated as 32.

다음으로, 부비동 측정 장치(200)는 S410단계에서 획득한 기준 사진의 기울기를 아래의 수학식 3에 적용하여 기울기 점수(A_score)를 연산한다.Next, the sinus measuring apparatus 200 calculates a slope score (A_score) by applying the slope of the reference photo obtained in step S410 to Equation 3 below.

Figure pat00005
Figure pat00005

여기서, B는 기울기 계수, angle은 기준 사진의 기울기 각도이다.Here, B is the inclination coefficient, and angle is the inclination angle of the reference photo.

이때, 기울기 점수(A_score)의 최대 값은 20으로 설정된다.In this case, the maximum value of the slope score A_score is set to 20.

예를 들어, 기준 사진의 기울기 각도가 4°이고, B의 값이 1.5라고 하면, 수학식 3에 의하여 기울기 점수(A_score)는 14로 연산된다.For example, if the inclination angle of the reference photo is 4° and the value of B is 1.5, the inclination score (A_score) is calculated as 14 by Equation (3).

다음으로, 부비동 측정 장치(200)는 아래의 수학식 4를 이용하여 픽셀 점수(P_score)를 연산한다.Next, the sinus measuring apparatus 200 calculates a pixel score P_score using Equation 4 below.

Figure pat00006
Figure pat00006

여기서, C는 픽셀 계수, p_diff는 좌측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 양측 1cm씩 범위 안에 있는 픽셀값의 평균과 우측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 양측 1cm씩(총2cm) 범위 안에 있는 픽셀값의 평균값의 차이값이다.Here, C is the pixel coefficient, p_diff is the average of pixel values within the range of 1 cm on both sides of the line connecting the first point P1 and the second point P2 on the left, and the first point P1 on the right and It is the difference value of the average value of the pixel values within the range of 1 cm on both sides (total of 2 cm) based on the line connecting the second point P2.

이때, 픽셀 점수(P_score)의 최대 값은 40으로 설정된다.In this case, the maximum value of the pixel score P_score is set to 40.

예를 들어, p_diff 값이 30이고, C의 값이 0.2라고 하면, 수학식 4에 의하여 픽셀 점수(P_score)는 34로 연산된다.For example, if the p_diff value is 30 and the value of C is 0.2, the pixel score P_score is calculated as 34 according to Equation (4).

이때, 수학식 2 내지 4를 통해 알 수 있듯이, 거리 점수(D_score), 기울기 점수(A_score) 및 픽셀 점수(P_score) 각각의 최대 값이 40, 20 및 40점이므로, 수학식 1에 의하여 평가 지수(T_score)의 최대 값은 100점으로 설정된다.At this time, as can be seen from Equations 2 to 4, since the maximum values of the distance score (D_score), the slope score (A_score), and the pixel score (P_score) are 40, 20, and 40, the evaluation index by Equation 1 The maximum value of (T_score) is set to 100 points.

다음으로, 부비동 측정 장치(200)는 수학식 1에 의해 연산된 복수의 근적외선 사진 각각에 대하여 평가 지수가 기준 값 이상인지 여부를 판단한다(S470).Next, the sinus measuring apparatus 200 determines whether an evaluation index is equal to or greater than a reference value for each of the plurality of near-infrared photographs calculated by Equation 1 ( S470 ).

이때, 3장의 근적외선 사진 중에서 평가 지수가 기준 값 보다 작은 것으로 연산된 근적외선 사진이 존재하면, 부비동 측정 장치(200)는 해당되는 근적외선 사진에 대하여 재촬영을 요청하거나 평가불가로 판단한다(S480).At this time, if there is a near-infrared photograph in which the evaluation index is calculated to be smaller than the reference value among the three near-infrared photographs, the sinus measuring apparatus 200 requests re-photography for the corresponding near-infrared photograph or determines that evaluation is impossible (S480).

반면에, 3장의 근적외선 사진 중에서 평가 지수가 기준 값 이상으로 연산된 근적외선 사진이 존재하면, 부비동 측정 장치(200)는 해당되는 근적외선 사진 중에서 가장 큰 픽셀 값을 가지는 근적외선 사진을 선택한다(S490).On the other hand, if there is a near-infrared photograph in which the evaluation index is calculated to be greater than or equal to the reference value among the three near-infrared photographs, the sinus measuring apparatus 200 selects the near-infrared photograph having the largest pixel value among the corresponding near-infrared photographs (S490).

여기서, 기준 값은 부비동 측정 장치(200)에서 설정된 값이거나 사용자에 의해 설정된 값일 수 있다.Here, the reference value may be a value set by the sinus measuring apparatus 200 or a value set by a user.

그러면, 부비동 측정 장치(200)는 선택된 1장의 근적외선 사진을 이용하여 좌측 및 우측 각각의 부비동 지수를 연산한다(S500).Then, the sinus measuring apparatus 200 calculates each of the left and right sinus indices by using the selected one near-infrared photograph (S500).

즉, 부비동 측정 장치(200)는 선택된 근적외선 사진에서의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)에서의 픽셀 값을 아래의 수학식 5에 적용하여 선택된 근적외선 사진의 좌측과 우측 각각의 부비동 지수를 연산한다.That is, the sinus measuring apparatus 200 applies the pixel values at the first point P1, the second point P2, and the third point P3 in the selected near-infrared photograph to Equation 5 below to obtain the selected near-infrared photograph. Calculate the left and right sinus indices of each.

Figure pat00007
Figure pat00007

Figure pat00008
Figure pat00008

여기서, X, Y, Z는 픽셀 계수이고, F는 부비동 계수이다.where X, Y, and Z are pixel coefficients and F is the sinus coefficient.

이때, 부비동 지수는 부비동 내부에 존재하는 농의 양을 의미한다.At this time, the sinus index refers to the amount of pus present in the sinuses.

S500 단계에서 측정 대상자의 좌측 및 우측 각각의 부비동 지수가 연산되면, 부비동 측정 장치(200)는 연산된 부비동 지수를 표시한다(S510).When each of the left and right sinus indices of the measurement subject are calculated in step S500, the sinus measuring apparatus 200 displays the calculated sinus indices (S510).

이때, 부비동 측정 장치(200)는 연산된 부비동 지수를 수치 형태로 화면상에 표시하거나 부비동지수를 정규화하여 정규화된 값에 따라 음영 영역 형태로 화면상에 표시한다.At this time, the sinus measuring apparatus 200 displays the calculated sinus index on the screen in a numerical form or normalizes the sinus index and displays it on the screen in the form of a shaded area according to the normalized value.

도 10a 및 도 10b는 본 발명의 실시예에 따른 부비동 진단 결과를 제공하는 예시도이다.10A and 10B are exemplary views providing a sinus diagnosis result according to an embodiment of the present invention.

도 10a은 측정 대상자의 부비동 지수가 0인 경우에 따른 진단결과를 제공하는 예시도이고, 도 10b는 측정 대상지의 부비동 지수가 좌측과 우측 각각 93점, 78점인 경우에 따른 진단 결과를 제공하는 예시도이다.10A is an exemplary view providing a diagnosis result according to a case in which the sinus index of the subject to be measured is 0, and FIG. 10B is an example of providing a diagnosis result according to the case where the sinus index of the subject to be measured is 93 points and 78 points on the left and right, respectively. It is also

즉, 도 10a에서 나타낸 것과 같이 부비동 지수가 0인 경우, 부비동 내에 농이 없기 때문에 부비동 측정 장치(200)는 음영이 칠해지지 않은 채로 진단 결과를 제공한다.That is, when the sinus index is 0 as shown in FIG. 10A , since there is no pus in the sinuses, the sinus measuring apparatus 200 provides the diagnosis result without being shaded.

반면에, 도 10b에서 나타낸 것과 같이 부비동 지수가 좌측과 우측 각각 93점, 78점이면, 부비동 측정 장치(200)는 부비동 지수에 따른 색을 달리하여 진단 결과를 제공한다On the other hand, if the sinus index is 93 points and 78 points on the left and right sides, respectively, as shown in FIG. 10B , the sinus measuring apparatus 200 provides a diagnostic result by changing colors according to the sinus index

즉, 도 10b에서 나타낸 것과 같이 부비동 지수가 0점 이상 40점 미만이면, 부비동 측정 장치(200)는 음영의 색을 녹색으로 나타내고, 부비동 지수가 40이상 70점 미만이면, 부비동 측정 장치(200)는 음영의 색을 주황색으로 나타내며, 부비동 지수가 70점이상 100점 이하이면, 부비동 측정 장치(200)는 음영의 색을 붉은색으로 나타낸다.That is, as shown in Figure 10b, if the sinus index is 0 or more and less than 40 points, the sinus measuring device 200 shows the color of the shade in green, and if the sinus index is 40 or more and less than 70 points, the sinus measuring device 200 indicates the color of the shade in orange, and when the sinus index is 70 or more and 100 or less, the sinus measuring apparatus 200 indicates the color of the shade in red.

또한, 부비동 측정 장치(200)는 얼굴 좌측과 우측 각각에 해당하는 부비동 지수를 수치화하여 디스플레이할 수 있다.Also, the sinus measuring apparatus 200 may numerically display the sinus index corresponding to each of the left and right sides of the face.

그리고, 부비동 측정 장치(200)는 좌측 및 우측 각각의 부비동 지수에 따른 종합의견을 제공한다.And, the sinus measurement device 200 provides a comprehensive opinion according to each of the left and right sinus indices.

이와 같이 본 발명의 실시예에 따르면, 기존의 X-ray 및 CT와 같은 광학 장비를 이용하지 않으면서 짧은 시간 동안 측정하기 때문에 측정자나 측정 대상자에게 부담 없이 적용이 가능하다.As described above, according to an embodiment of the present invention, since the measurement is performed for a short time without using optical equipment such as X-ray and CT, it can be applied without burden to a person measuring or to be measured.

또한, 측정 대상자마다 가진 신체적 특성과 자세를 분석하여 반영하기 때문에 부비동 염 진단의 오차율을 낮출 수 있다.In addition, since the physical characteristics and postures of each subject are analyzed and reflected, the error rate in the diagnosis of sinusitis can be reduced.

본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것이 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.Although the present invention has been described with reference to the embodiment shown in the drawings, which is merely exemplary, those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. Accordingly, the true technical protection scope of the present invention should be determined by the technical spirit of the appended claims.

100: 구강 조사용 마우스피스, 110: 외측부,
120: 내측부, 130: 지지부,
140a, 140b, 140c: LED, 150a, 150b: 인식마크,
200: 부비동 측정 장치, 210: 촬영부,
220: 기울기 측정부, 230: 보정부,
240: 설정부, 250: 산출부,
260: 선택부. 270: 연산부,
280: 판단부, 290: 표시부
100: mouthpiece for oral irradiation, 110: outer part,
120: inner portion, 130: support portion,
140a, 140b, 140c: LED, 150a, 150b: recognition mark,
200: sinus measurement device, 210: recording unit,
220: slope measuring unit, 230: compensating unit,
240: setting unit, 250: calculating unit,
260: selection unit. 270: arithmetic unit,
280: judgment unit, 290: display unit

Claims (20)

부비동 진단 시스템을 이용한 부비동 진단 방법에 있어서,
측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 부비동 측정 장치에 포함된 근적외선 카메라를 통해 상기 측정 대상자의 얼굴을 촬영하여 기준 사진을 획득하는 단계,
상기 구강 조사용 마우스피스에 부착된 LED를 발광시킨 상태에서 상기 근적외선 카메라의 노출시간을 변화시켜 복수의 근적외선 사진을 획득하는 단계,
상기 기준 사진에 촬영된 측정 대상자의 얼굴로부터 상기 기준 사진의 기울기를 측정하는 단계,
상기 복수의 근적외선 사진을 상기 측정된 기울기의 크기만큼 회전시켜 상기 복수의 근적외선 사진을 수평으로 보정하는 단계,
상기 보정된 복수의 근적외선 사진 각각에 대하여 좌측과 우측에 한쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 선택하는 단계,
상기 복수의 근적외선 사진 각각을 이용하여 상기 측정 대상자의 자세에 대하여 평가 지수를 산출하는 단계,
상기 평가 지수가 기준값 이상인 복수의 근적외선 사진 중에서 제1 포인트(P1)에서의 픽셀 값이 일정범위에 존재하는 하나 이상의 근적외선 사진을 선택하고, 선택된 하나 이상의 근적외선 사진 중에서 가장 큰 픽셀 값을 가지는 근적외선 사진을 선택하는 단계, 그리고
상기 선택된 근적외선 사진에 대하여 좌측과 우측의 부비동 지수를 각각 연산하는 단계를 포함하는 부비동 진단 방법.
In the sinus diagnosis method using the sinus diagnosis system,
obtaining a reference picture by photographing the subject's face through a near-infrared camera included in a sinus measuring device in a state in which the subject to be measured has a mouthpiece for oral examination in his/her mouth;
obtaining a plurality of near-infrared photos by changing the exposure time of the near-infrared camera in a state in which an LED attached to the mouthpiece for oral irradiation is emitted;
Measuring the inclination of the reference picture from the face of the measurement subject taken in the reference picture;
horizontally correcting the plurality of near-infrared photos by rotating the plurality of near-infrared photos by the magnitude of the measured inclination;
selecting a pair of first points (P1), second points (P2) and third points (P3) on the left and right sides for each of the plurality of corrected near-infrared photos;
calculating an evaluation index for the posture of the subject to be measured using each of the plurality of near-infrared photographs;
One or more near-infrared photos having a pixel value at the first point P1 are selected from among a plurality of near-infrared photos having the evaluation index equal to or greater than a reference value, and a near-infrared photo having the largest pixel value among the selected one or more near-infrared photos. selection step, and
and calculating left and right sinus indices for the selected near-infrared image, respectively.
제1항에 있어서,
상기 기준 사진의 기울기를 측정하는 단계는,
상기 기준 사진에서의 양쪽 눈동자의 중심을 연결하는 가상의 선을 설정하는 단계, 그리고
상기 기준 사진의 수평선 대비 상기 가상의 선이 기울어진 정도를 측정하는 단계를 포함하는 부비동 진단 방법.
According to claim 1,
Measuring the slope of the reference photo is,
setting an imaginary line connecting the centers of both pupils in the reference photo, and
and measuring a degree of inclination of the virtual line with respect to the horizontal line of the reference photo.
제1항에 있어서,
상기 제1 포인트(P1)는,
상기 근적외선 카메라를 통해 촬영된 사진에서 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제1 및 제2 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점이고,
상기 제2 포인트(P2)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점이고,
상기 제3 포인트(P3)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점인 부비동 진단 방법.
According to claim 1,
The first point (P1) is,
In the picture taken through the near-infrared camera, the first and second virtual lines passing through the inner and outer corners of the eye, and the first and second virtual horizontal lines passing through the lip and nose, respectively, intersect The point with the largest pixel value in
The second point P2 is,
A point having the largest pixel value in an area where the first and second vertical lines, the second horizontal line, and the fourth horizontal line passing through the center of the virtual third horizontal line passing through the center point of the pupil intersect in the photographed picture; ,
The third point P3 is,
The sinus diagnosis method is a point having the largest pixel value in an area where the first and second vertical lines, the third horizontal line, and the fourth horizontal line intersect in the photographed picture.
제1항에 있어서,
상기 평가 지수를 산출하는 단계는,
다음의 수학식과 같이 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)의 합산하여 평가 지수(T_score)를 산출하는 부비동 진단 방법.
T_score = D_score + A_score + P_score
According to claim 1,
The step of calculating the evaluation index,
A sinus diagnosis method that calculates an evaluation index (T_score) by adding up a distance score (D_score), a slope score (A_score), and a pixel score (P_score) as shown in the following equation.
T_score = D_score + A_score + P_score
제4항에 있어서,
상기 거리 점수(D_score)는,
다음의 수학식을 이용하여 산출되는 부비동 진단 방법:
D_score = 40 - A * t-dist
여기서, A는 거리 계수, t-dist는 상기 근적외선 사진의 중심선으로부터 좌측 및 우측 각각의 눈동자의 중심까지의 픽셀개수의 차이다.
5. The method of claim 4,
The distance score (D_score) is,
A sinus diagnosis method calculated using the following equation:
D_score = 40 - A * t-dist
Here, A is the distance coefficient, and t-dist is the difference in the number of pixels from the center line of the near-infrared image to the center of each pupil on the left and right.
제4항에 있어서,
상기 기울기 점수(A_score)는,
다음의 수학식을 이용하여 산출되는 부비동 진단 방법:
A_score = 20 - B * angle
여기서, B는 기울기 계수, angle은 상기 기준 사진의 기울기 각도이다.
5. The method of claim 4,
The slope score (A_score) is,
A sinus diagnosis method calculated using the following equation:
A_score = 20 - B * angle
Here, B is the inclination coefficient, and angle is the inclination angle of the reference photo.
제4항에 있어서,
상기 픽셀 점수(P_score)는,
다음의 수학식을 이용하여 산출되는 부비동 진단 방법:
P_score = 40 - C * p_diff
여기서, C는 픽셀 계수, p_diff는 연산된 상기 좌측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 일정 범위 안에 존재하는 픽셀값들의 평균과 우측의 제1 포인트(P1)와 제2 포인트(P2)를 잇는 선을 기준으로 일정 범위 안에 존재하는 픽셀값들의 평균의 차이값이다.
5. The method of claim 4,
The pixel score (P_score) is,
A sinus diagnosis method calculated using the following equation:
P_score = 40 - C * p_diff
Here, C is a pixel coefficient, p_diff is the average of pixel values existing within a predetermined range based on the calculated line connecting the first point P1 and the second point P2 on the left side and the first point P1 on the right side ) and the second point P2, which is a difference value of the average of pixel values existing within a predetermined range.
제1항에 있어서,
상기 산출된 평가 지수가 기준 값보다 작으면 재촬영을 요청하거나 평가불가로 판단하는 단계를 더 포함하는 부비동 진단 방법.
According to claim 1,
If the calculated evaluation index is less than the reference value, the sinus diagnosis method further comprising the step of requesting a re-photography or determining that evaluation is impossible.
제3항에 있어서,
상기 부비동 지수를 각각 연산하는 단계는,
상기 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)에서의 픽셀 값을 아래의 수학식에 적용하여 상기 선택된 근적외선 사진의 좌측과 우측 각각의 부비동 지수를 연산하는 부비동 진단 방법:
Figure pat00009

Figure pat00010

여기서, X, Y, Z 및 F는 계수이다.
4. The method of claim 3,
The step of calculating the sinus index, respectively,
Sinus diagnosis for calculating the left and right sinus indices of the selected near-infrared photograph by applying the pixel values at the first point P1, the second point P2, and the third point P3 to the following equation Way:
Figure pat00009

Figure pat00010

where X, Y, Z and F are coefficients.
제1항에 있어서,
상기 연산된 부비동지수를 표시하는 단계를 더 포함하며,
상기 연산된 부비동지수를 표시하는 단계는,
상기 연산된 부비동지수를 수치 형태로 표시하거나 상기 부비동지수를 정규화하여 정규화된 값에 따라 음영 영역 형태로 표시하는 부비동 진단 방법.
According to claim 1,
Further comprising the step of displaying the calculated sinus index,
The step of displaying the calculated sinus index is,
A sinus diagnosis method for displaying the calculated sinus index in a numerical form or by normalizing the sinus index and displaying the calculated sinus index in the form of a shaded area according to a normalized value.
부비동 진단을 위한 부비동 진단 시스템에 있어서,
측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 부비동 측정 장치에 포함된 근적외선 카메라를 통해 상기 측정 대상자의 얼굴을 촬영하여 기준 사진을 획득하고, 상기 구강 조사용 마우스피스에 부착된 LED를 발광시킨 상태에서 상기 근적외선 카메라의 노출시간을 변화시켜 복수의 근적외선 사진을 획득하는 촬영부,
상기 기준 사진에 촬영된 측정 대상자의 얼굴로부터 상기 기준 사진의 기울기를 측정하는 기울기 측정부,
상기 복수의 근적외선 사진을 상기 측정된 기울기의 크기만큼 회전시켜 상기 복수의 근적외선 사진을 수평으로 보정하는 보정부,
상기 보정된 복수의 근적외선 사진 각각에 대하여 좌측과 우측에 한쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 설정부,
상기 복수의 근적외선 사진 각각을 이용하여 상기 측정 대상자의 자세에 대하여 평가 지수를 산출하는 산출부,
상기 평가 지수가 기준값 이상인 복수의 근적외선 사진 중에서 제1 포인트(P1)에서의 픽셀 값이 일정범위에 존재하는 하나 이상의 근적외선 사진을 선택하고, 선택된 하나 이상의 근적외선 사진 중에서 가장 큰 픽셀 값을 가지는 근적외선 사진을 선택하는 선택부, 그리고
상기 선택된 근적외선 사진에 대하여 좌측과 우측의 부비동 지수를 각각 연산하는 연산부를 포함하는 부비동 진단 시스템.
In the sinus diagnosis system for sinus diagnosis,
In a state in which the subject to be measured holds the mouthpiece for oral examination in his mouth, the face of the subject to be measured is taken through the near-infrared camera included in the sinus measuring device to obtain a reference photo, and the LED attached to the mouthpiece for oral irradiation is used. A photographing unit for obtaining a plurality of near-infrared photos by changing the exposure time of the near-infrared camera in a state in which light is emitted;
A slope measuring unit for measuring the slope of the reference picture from the face of the measurement subject taken in the reference picture,
a correction unit for horizontally correcting the plurality of near-infrared photos by rotating the plurality of near-infrared photos by the magnitude of the measured inclination;
a setting unit for setting a pair of first points (P1), second points (P2), and third points (P3) on the left and right sides for each of the plurality of corrected near-infrared photos;
a calculation unit for calculating an evaluation index for the posture of the subject to be measured by using each of the plurality of near-infrared photographs;
One or more near-infrared photos having a pixel value at the first point P1 are selected from among a plurality of near-infrared photos having the evaluation index equal to or greater than a reference value, and a near-infrared photo having the largest pixel value among the selected one or more near-infrared photos. selection section to choose, and
The sinus diagnosis system including a calculator for calculating left and right sinus indices with respect to the selected near-infrared image.
제11항에 있어서,
상기 기울기 측정부는,
상기 기준 사진에서의 양쪽 눈동자의 중심을 연결하는 가상의 선을 설정하고, 상기 기준 사진의 수평선 대비 상기 가상의 선이 기울어진 정도를 측정하는 부비동 진단 시스템.
12. The method of claim 11,
The slope measuring unit,
A sinus diagnosis system for setting a virtual line connecting the centers of both pupils in the reference photograph, and measuring the degree of inclination of the virtual line with respect to the horizontal line of the reference photograph.
제11항에 있어서,
상기 제1 포인트(P1)는,
상기 근적외선 카메라를 통해 촬영된 사진에서 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제1 및 제2 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점이고,
상기 제2 포인트(P2)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점이고,
상기 제3 포인트(P3)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점인 부비동 진단 시스템.
12. The method of claim 11,
The first point (P1) is,
In the picture taken through the near-infrared camera, the first and second virtual lines passing through the inner and outer corners of the eye, and the first and second virtual horizontal lines passing through the lip and nose, respectively, intersect The point with the largest pixel value in
The second point P2 is,
A point having the largest pixel value in an area where the first and second vertical lines, the second horizontal line, and the fourth horizontal line passing through the center of the virtual third horizontal line passing through the center point of the pupil intersect in the photographed picture; ,
The third point P3 is,
The sinus diagnosis system is a point having the largest pixel value in an area where the first and second vertical lines, the third horizontal line, and the fourth horizontal line intersect in the taken picture.
제11항에 있어서,
상기 산출부는,
다음의 수학식과 같이 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)를 합산하여 평가 지수(T_score)를 산출하는 부비동 진단 시스템.
T_score = D_score + A_score + P_score
12. The method of claim 11,
The calculation unit,
A sinus diagnosis system that calculates an evaluation index (T_score) by adding up a distance score (D_score), a slope score (A_score), and a pixel score (P_score) as shown in the following equation.
T_score = D_score + A_score + P_score
제14항에 있어서,
상기 산출부는,
다음의 수학식을 이용하여 상기 거리 점수(D_score)를 산출하는 부비동 진단 시스템:
D_score = 40 - A * t-dist
여기서, A는 거리 계수, t-dist는 사진의 중심선으로부터 좌측 및 우측 각각의 눈동자의 중심까지의 픽셀개수의 차이다.
15. The method of claim 14,
The calculation unit,
A sinus diagnosis system that calculates the distance score (D_score) using the following equation:
D_score = 40 - A * t-dist
Here, A is the distance coefficient, and t-dist is the difference in the number of pixels from the center line of the photograph to the center of each pupil on the left and right.
제14항에 있어서,
상기 산출부는,
다음의 수학식을 이용하여 상기 기울기 점수(A_score)를 산출하는 부비동 진단 시스템:
A_score = 20 - B * angle
여기서, B는 기울기 계수, angle은 상기 기준 사진의 기울기 각도이다.
15. The method of claim 14,
The calculation unit,
A sinus diagnosis system that calculates the slope score (A_score) using the following equation:
A_score = 20 - B * angle
Here, B is the inclination coefficient, and angle is the inclination angle of the reference photo.
제14항에 있어서,
상기 산출부는,
다음의 수학식을 이용하여 상기 픽셀 점수(P_score)를 산출하는 부비동 진단 시스템:
P_score = 40 - C * p_diff
여기서, C는 픽셀 계수, p_diff는 연산된 상기 좌측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 일정 범위 안에 존재하는 픽셀값들의 평균과 우측의 제1 포인트(P1)와 제2 포인트(P2)를 잇는 선을 기준으로 일정 범위 안에 존재하는 픽셀값들의 평균의 차이값이다.
15. The method of claim 14,
The calculation unit,
A sinus diagnosis system that calculates the pixel score (P_score) using the following equation:
P_score = 40 - C * p_diff
Here, C is a pixel coefficient, p_diff is the average of pixel values existing within a predetermined range based on the calculated line connecting the first point P1 and the second point P2 on the left side and the first point P1 on the right side ) and the second point P2, which is a difference value of the average of pixel values existing within a predetermined range.
제11항에 있어서,
상기 산출된 평가 지수가 기준 값보다 작으면 재촬영을 요청하거나 평가불가로 판단하는 판단부를 더 포함하는 부비동 진단 시스템.
12. The method of claim 11,
The sinus diagnosis system further comprising a determination unit that requests re-photography or determines that evaluation is impossible when the calculated evaluation index is less than the reference value.
제13항에 있어서,
상기 연산부는,
상기 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)에서의 픽셀 값을 아래의 수학식에 적용하여 상기 선택된 근적외선 사진의 좌측과 우측 각각의 부비동 지수를 연산하는 부비동 진단 시스템:
Figure pat00011

Figure pat00012

여기서, X, Y, Z 및 F는 계수이다.
14. The method of claim 13,
The calculation unit,
Sinus diagnosis for calculating the left and right sinus indices of the selected near-infrared photograph by applying the pixel values at the first point P1, the second point P2, and the third point P3 to the following equation system:
Figure pat00011

Figure pat00012

where X, Y, Z and F are coefficients.
제11항에 있어서,
상기 연산된 부비동지수를 표시하는 표시부를 더 포함하며,
상기 표시부는,
상기 연산된 부비동지수를 수치 형태로 표시하거나 상기 부비동지수를 정규화하여 정규화된 값에 따라 음영 영역 형태로 표시하는 부비동 진단 시스템.
12. The method of claim 11,
Further comprising a display unit for displaying the calculated sinus index,
The display unit,
A sinus diagnosis system for displaying the calculated sinus index in a numerical form or by normalizing the sinus index and displaying the calculated sinus index in the form of a shaded area according to the normalized value.
KR1020200036916A 2020-03-26 2020-03-26 System for sinus diagnosis and method for performed by the same KR102363308B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020200036916A KR102363308B1 (en) 2020-03-26 2020-03-26 System for sinus diagnosis and method for performed by the same
PCT/KR2020/004269 WO2021193997A1 (en) 2020-03-26 2020-03-27 System for diagnosing sinus and method for diagnosing sinus using same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200036916A KR102363308B1 (en) 2020-03-26 2020-03-26 System for sinus diagnosis and method for performed by the same

Publications (2)

Publication Number Publication Date
KR20210120333A true KR20210120333A (en) 2021-10-07
KR102363308B1 KR102363308B1 (en) 2022-02-16

Family

ID=77892407

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200036916A KR102363308B1 (en) 2020-03-26 2020-03-26 System for sinus diagnosis and method for performed by the same

Country Status (2)

Country Link
KR (1) KR102363308B1 (en)
WO (1) WO2021193997A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140221843A1 (en) * 2013-02-02 2014-08-07 The Regents Of The University Of California Near-infrared imaging for diagnosis of sinusitis
KR101653180B1 (en) * 2008-07-30 2016-09-01 아클라런트, 인코포레이션 Paranasal ostium finder devices and methods
JP2017192767A (en) * 2017-06-21 2017-10-26 株式会社 資生堂 Image analysis method, image analysis device, and image analysis program
KR101900786B1 (en) * 2017-06-23 2018-11-02 울산과학기술원 Method and System for measuring fluid dynamics in maxillary sinus using near infrared
KR20200058089A (en) * 2018-11-19 2020-05-27 울산과학기술원 A mouthpiece using a near-infrared light source to observe the sinus

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101216154B1 (en) * 2012-06-21 2012-12-27 강영주 Medical mouthpiece
KR101499649B1 (en) * 2013-08-20 2015-03-06 조현재 Tray for taking image inside oral cavity, apparatus comprising tray for the same and intraoral imaging system
KR101942641B1 (en) * 2017-03-07 2019-01-25 동아대학교 산학협력단 mouthpiece shaped oral scanner

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101653180B1 (en) * 2008-07-30 2016-09-01 아클라런트, 인코포레이션 Paranasal ostium finder devices and methods
US20140221843A1 (en) * 2013-02-02 2014-08-07 The Regents Of The University Of California Near-infrared imaging for diagnosis of sinusitis
JP2017192767A (en) * 2017-06-21 2017-10-26 株式会社 資生堂 Image analysis method, image analysis device, and image analysis program
KR101900786B1 (en) * 2017-06-23 2018-11-02 울산과학기술원 Method and System for measuring fluid dynamics in maxillary sinus using near infrared
KR20200058089A (en) * 2018-11-19 2020-05-27 울산과학기술원 A mouthpiece using a near-infrared light source to observe the sinus

Also Published As

Publication number Publication date
KR102363308B1 (en) 2022-02-16
WO2021193997A1 (en) 2021-09-30

Similar Documents

Publication Publication Date Title
US9323075B2 (en) System for the measurement of the interpupillary distance using a device equipped with a screen and a camera
JP4517049B2 (en) Gaze detection method and gaze detection apparatus
TWI694809B (en) Method for detecting eyeball movement, program thereof, storage media for the program and device for detecting eyeball movement
US20140285768A1 (en) System and Method for Identifying Eye Conditions
US20230068727A1 (en) Intraoral scanner real time and post scan visualizations
ES2754310T3 (en) Aid procedure for determining the vision parameters of a subject
JP2017151468A (en) Method of selecting progressive ophthalmic lenses
US20220139044A1 (en) Method and system for proposing and visualizing dental treatments
JP2017111746A (en) Sight line detection device and sight line detection method
JP6245093B2 (en) Diagnosis support apparatus and diagnosis support method
US20200121228A1 (en) Bilirubin estimation using sclera color and accessories therefor
KR102363308B1 (en) System for sinus diagnosis and method for performed by the same
JP3711053B2 (en) Line-of-sight measurement device and method, line-of-sight measurement program, and recording medium recording the program
JP2016095584A (en) Pupil detection device, pupil detection method, and pupil detection program
KR102363306B1 (en) System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same
KR100865275B1 (en) Method for photographing image of tongue
US9020192B2 (en) Human submental profile measurement
KR102363307B1 (en) System for sinus diagnosis and method for position determination of oral illumination appartus using the same
US20220125297A1 (en) Device calibration via a projective transform matrix
KR20210120335A (en) System for sinus diagnosis and optimal near-infrared image acquisition method using the same
US20160228054A1 (en) Organ imaging device
KR20210120332A (en) System for sinus diagnosis and method of determining sinus state using the same
KR20210120334A (en) System for sinus diagnosis and method of synchroniz near-infrared image using the same
US20230386682A1 (en) Systems and methods to chronologically image orthodontic treatment progress
JP6187347B2 (en) Detection apparatus and detection method

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right