KR102363306B1 - System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same - Google Patents

System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same Download PDF

Info

Publication number
KR102363306B1
KR102363306B1 KR1020200036913A KR20200036913A KR102363306B1 KR 102363306 B1 KR102363306 B1 KR 102363306B1 KR 1020200036913 A KR1020200036913 A KR 1020200036913A KR 20200036913 A KR20200036913 A KR 20200036913A KR 102363306 B1 KR102363306 B1 KR 102363306B1
Authority
KR
South Korea
Prior art keywords
led
mouthpiece
points
oral
sinus
Prior art date
Application number
KR1020200036913A
Other languages
Korean (ko)
Other versions
KR20210120330A (en
Inventor
김양석
장희돈
박병훈
김정석
Original Assignee
주식회사 유투메드텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 유투메드텍 filed Critical 주식회사 유투메드텍
Priority to KR1020200036913A priority Critical patent/KR102363306B1/en
Publication of KR20210120330A publication Critical patent/KR20210120330A/en
Application granted granted Critical
Publication of KR102363306B1 publication Critical patent/KR102363306B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Detecting, measuring or recording devices for evaluating the respiratory organs
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/41Detecting, measuring or recording for evaluating the immune or lymphatic systems
    • A61B5/412Detecting or monitoring sepsis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6814Head
    • A61B5/682Mouth, e.g., oral cavity; tongue; Lips; Teeth
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physiology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Immunology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Pulmonology (AREA)
  • Vascular Medicine (AREA)
  • Artificial Intelligence (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Endoscopes (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)

Abstract

본 발명은 부비동 진단 시스템 및 그것을 이용한 구강 조사용 마우스피스의 LED 제어 방법에 관한 것이다.
본 발명에 따르면 부비동 진단 시스템을 이용한 구강 조사용 마우스피스의 제어 방법에 있어서, 측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 상기 구강 조사용 마우스피스에 부착된 복수의 LED를 모두 발광시켜 상기 측정 대상자의 구강 내부에 광을 조사하는 단계, 부비동 측정 장치에 포함된 근적외선 카메라를 통하여 상기 측정 대상자의 얼굴을 촬영하고, 상기 얼굴에 좌측과 우측에 한 쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 단계, 상기 구강 조사용 마우스피스에 부착된 복수의 LED 각각이 조사하는 광의 비율을 조절하면서 상기 측정 대상자의 얼굴을 각각 촬영하는 단계, 상기 촬영을 할 때마다 촬영된 사진에 대하여 상기 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출하는 단계, 그리고 상기 제1 내지 제3 포인트 사이의 픽셀 값의 비율들을 이용하여 LED의 광 조합 비율을 선택하는 단계를 포함한다.
이와 같이 본 발명에 따르면, 적은 수의 근적외선 LED를 사용하여 발광부를 구현함으로써, 부비동 내에 정확한 빛의 조사가 가능하다.
The present invention relates to a sinus diagnosis system and a method for controlling an LED of a mouthpiece for oral irradiation using the same.
According to the present invention, in the method of controlling a mouthpiece for oral irradiation using a sinus diagnosis system, all of the plurality of LEDs attached to the mouthpiece for oral examination are lighted in a state in which the subject to be measured holds the mouthpiece for oral examination in his/her mouth irradiating light into the oral cavity of the subject to be measured, photographing the subject's face through a near-infrared camera included in the sinus measuring device, and a pair of first points (P1) on the left and right sides of the face, Setting the second point (P2) and the third point (P3), each of the plurality of LEDs attached to the mouthpiece for oral irradiation while adjusting the ratio of light irradiated by each of the steps of photographing the face of the measurement subject, Extracting each pixel value for each of the first to third points with respect to the photograph taken every time the photographing is performed, and the light combination ratio of the LED using the ratios of the pixel values between the first to third points including the step of selecting
As described above, according to the present invention, by implementing the light emitting unit using a small number of near-infrared LEDs, it is possible to accurately irradiate light into the sinuses.

Description

부비동 진단 시스템 및 그것을 이용한 구강 조사용 마우스피스의 LED 제어 방법{SYSTEM FOR SINUS DIAGNOSIS AND METHOD FOR CONTROLLING LED INCLUDE ORAL ILLUMINATION APPARATUS USING THE SAME}Sinus diagnosis system and LED control method of mouthpiece for oral examination using the same

본 발명은 부비동 진단 시스템 및 그것을 이용한 구강 조사용 마우스피스의 LED 제어 방법에 관한 것으로, 구강 조사용 마우스피스의 LED의 조사비율을 달리하여 부비동에 조사하는 LED의 조사비율을 설정하는 부비동 진단 시스템 및 그것을 이용한 구강 조사용 마우스피스의 LED 제어 방법에 관한 것이다.The present invention relates to a sinus diagnosis system and a method for controlling an LED of a mouthpiece for oral irradiation using the same. It relates to an LED control method of a mouthpiece for oral irradiation using the same.

현재 미세 먼지 등 대기 오염 등으로 인한 축농증(부비동염) 환자는 지속적으로 늘고 있으며, 2016년 기준으로 이미 660만명을 넘어서고 있다(축농증 건강보험 진료환자 현황, 국민건강보험공단).Currently, the number of patients with sinusitis (sinusitis) due to air pollution such as fine dust is continuously increasing, and as of 2016, it has already exceeded 6.6 million (Status of Sinusitis Health Insurance Patients, National Health Insurance Corporation).

축농증은 부비동에 축적된 비루(비루)의 점도에 따라 수양성 비루(점도 낮음), 점액성 비루(점도 중간), 화농성 비루(점도 높음)로 분류될 수 있으며, 이에 따라 세척, 항생제 처방, 수술 등 여러 형태의 치료 방법을 적용할 수 있다.Sinusitis can be classified into watery rhinorrhea (low viscosity), mucinous rhinorrhea (medium viscosity), and purulent rhinorrhea (high viscosity) according to the viscosity of rhinorrhea (nasal drip) accumulated in the sinuses. Several types of treatment methods can be applied.

하지만, 현재 비루의 농도를 정확히 측정할 수 있는 방법이 없어 간접적인 방법으로 환자에 대한 문진과 X-ray, CT 등의 광학 장비를 이용하여 부비동 내의 농의 양을 측정하는 방법을 사용하고 있다.However, there is currently no method that can accurately measure the concentration of rhinorrhea, so an indirect method is used to measure the amount of pus in the sinuses using optical equipment such as X-ray and CT and an indirect method.

이로 인하여 정확한 진단의 부재로 인한 부비동염에 대한 항생제 남용은 지속적인 사회의 이슈가 되고 있으며, 간접적인 진단을 위한 X-ray, CT 등의 장비의 활용도 축농증 환자의 30%가 9세 이하의 어린이인 것을 고려할 때 방사선 노출에 의한 심각한 피해가 발생할 수 있다는 문제가 있다.Due to this, the abuse of antibiotics for sinusitis due to the absence of an accurate diagnosis is a continuous social issue, and the use of equipment such as X-ray and CT for indirect diagnosis also shows that 30% of sinusitis patients are children under 9 years of age. Considering that, there is a problem that serious damage due to radiation exposure may occur.

이러한 문제점을 해결하고자 핀란드의 Mediq Suomi는 초음파의 반향을 이용한 부비동 내의 막힘을 진단하는 제품을 제안하였지만, 초음파를 이용하기 때문에 측정기의 위치에 따라 결과의 일관성이 부족하며, 체계적인 데이터 해석이 불가능 하다는 단점이 있다.To solve this problem, Finnish Mediq Suomi proposed a product for diagnosing blockage in the sinuses using the echo of ultrasound. There is this.

이러한 단점을 제거하여 X-ray, CT와 같은 광학장비를 이용하지 않고 일관적으로 데이터를 해석하여 정확하게 부비동염을 측정할 수 있는 기술이 필요하게 되었다.To eliminate these shortcomings, there is a need for a technology that can accurately measure sinusitis by consistently interpreting data without using optical equipment such as X-ray and CT.

하지만, 측정 대상자 별로 얼굴 구조가 다르기 때문에 동일한 근적외선 조사 방식을 이용해서 정확한 부비동염을 측정하기는 힘들다는 단점이 있다.However, there is a disadvantage in that it is difficult to accurately measure sinusitis using the same near-infrared irradiation method because the face structure is different for each measurement target.

따라서, 측정 대상자 별로 최적의 부비동 내에 조사하는 근적외선의 위치 및 조사량을 판단하기 위한 방법이 필요하게 되었다.Therefore, there is a need for a method for determining the location and amount of irradiation of near-infrared rays irradiated in the optimal sinus for each measurement subject.

본 발명의 배경이 되는 기술은 대한민국 등록특허 제10- 1653180호(2016.09.01. 공고)에 개시되어 있다.The technology that is the background of the present invention is disclosed in Republic of Korea Patent Registration No. 10-1653180 (2016.09.01. Announcement).

본 발명이 이루고자 하는 기술적 과제는 구강 조사용 마우스피스의 LED의 조사비율을 달리하여 부비동에 조사하는 LED의 조사비율을 설정하는 부비동 진단 시스템 및 그것을 이용한 구강 조사용 마우스피스의 LED 제어 방법을 제공하기 위한 것이다.The technical problem to be achieved by the present invention is to provide a sinus diagnosis system for setting the irradiation rate of the LED irradiated to the sinuses by varying the irradiation rate of the LED of the mouthpiece for oral irradiation, and a method for controlling the LED of the mouthpiece for oral irradiation using the same it is for

이러한 기술적 과제를 이루기 위한 본 발명의 실시예에 따르면, 부비동 진단 시스템을 이용한 구강 조사용 마우스피스의 제어 방법에 있어서, 측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 상기 구강 조사용 마우스피스에 부착된 복수의 LED를 모두 발광시켜 상기 측정 대상자의 구강 내부에 광을 조사하는 단계, 부비동 측정 장치에 포함된 근적외선 카메라를 통하여 상기 측정 대상자의 얼굴을 촬영하고, 상기 얼굴에 좌측과 우측에 한 쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 단계, 상기 구강 조사용 마우스피스에 부착된 복수의 LED 각각이 조사하는 광의 비율을 조절하면서 상기 측정 대상자의 얼굴을 각각 촬영하는 단계, 상기 촬영을 할 때마다 촬영된 사진에 대하여 상기 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출하는 단계, 그리고 상기 제1 내지 제3 포인트 사이의 픽셀 값의 비율들을 이용하여 LED의 광 조합 비율을 선택하는 단계를 포함한다.According to an embodiment of the present invention for achieving this technical problem, in the method of controlling a mouthpiece for oral examination using a sinus diagnosis system, in a state in which the subject to be measured holds the mouthpiece for oral examination in his mouth, the mouse for oral examination The step of irradiating light to the inside of the oral cavity of the measurement target by emitting all of the plurality of LEDs attached to the piece, photographing the measurement target's face through the near-infrared camera included in the sinus measuring device, and on the left and right sides of the face Setting a pair of the first point (P1), the second point (P2) and the third point (P3), while adjusting the ratio of the light irradiated by each of the plurality of LEDs attached to the mouthpiece for oral irradiation photographing the face of the subject to be measured, extracting respective pixel values for each of the first to third points with respect to the photograph taken each time the photographing is performed, and a pixel value between the first and third points and selecting a light combination ratio of the LED using the ratios of .

상기 한 쌍의 제1 포인트(P1)는, 상기 근적외선 카메라를 통해 촬영된 사진에서 우측 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제1 및 제2 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 좌측 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제3 및 제4 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하고, 상기 한 쌍의 제2 포인트(P2)는, 상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 상기 제3 및 제4 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하며, 상기 한 쌍의 제3 포인트(P3)는, 상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 상기 제3 및 제4 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함할 수 있다. The pair of first points P1 is the first and second virtual lines passing through each of the inner and outer points of the right eye in the photo taken through the near-infrared camera, and the tip of the lips and the tip of the nose, respectively. The point having the largest pixel value within the area where the first and second imaginary horizontal lines passing through intersect, and the third and fourth imaginary vertical lines passing through the inner and outer points of the left eye, respectively, and the tip of the lips and the tip of the nose A point having the largest pixel value is included in an area where the first and second virtual horizontal lines passing through each intersect, and the pair of second points P2 are the first and second points in the photographed picture. A point having the largest pixel value in an area where a vertical line, a fourth horizontal line passing through the center intersect between the second horizontal line and an imaginary third horizontal line passing through the center point of the pupil, and the third and fourth vertical lines, the third horizontal line 2 Including a point having the largest pixel value in an area where the fourth horizontal line passing through the center intersects between the second horizontal line and the virtual third horizontal line passing through the center point of the pupil, the pair of third points P3 is a point having the largest pixel value in an area where the first and second vertical lines, the third horizontal line, and the fourth horizontal line intersect in the photographed picture, and the third and fourth vertical lines and the third horizontal line; and a point having the largest pixel value within an area where the fourth horizontal line intersects.

상기 구강 조사용 마우스피스는, 중앙을 중심으로 좌측 및 우측에 복수의 LED가 각각 대칭적으로 장착될 수 있다.The mouthpiece for oral irradiation, a plurality of LEDs may be symmetrically mounted on the left and right sides of the center, respectively.

상기 복수의 LED는, 3개 이상의 쌍으로 구성될 수 있다.The plurality of LEDs may be configured in three or more pairs.

상기 측정 대상자의 얼굴을 촬영하는 단계는, 상기 구강 조사용 마우스피스의 좌측 또는 우측에 위치하는 제1 LED와 인접한 제2 LED만을 턴온시킨 상태에서, 상기 제1 LED와 상기 제2 LED 사이의 광 조합 비율을 달리하면서 상기 측정 대상자의 얼굴을 촬영하는 단계, 그리고 상기 제2 LED와 인접한 제3 LED만을 턴온시킨 상태에서, 상기 제2 LED와 상기 제3 LED 사이의 광 조합 비율을 달리하면서 상기 측정 대상자의 얼굴을 촬영하는 단계를 포함할 수 있다.In the step of photographing the face of the subject to be measured, in a state in which only the second LED adjacent to the first LED located on the left or right side of the mouthpiece for oral irradiation is turned on, the light between the first LED and the second LED photographing the face of the subject to be measured while varying the combination ratio, and in a state in which only the third LED adjacent to the second LED is turned on, the measurement while varying the light combination ratio between the second LED and the third LED It may include the step of photographing the subject's face.

상기 LED의 광 조합 비율을 선택하는 단계는, 상기 제1 내지 제3 포인트 사이의 픽셀 값을 이용하여 밝기 지수를 연산하는 단계, 그리고 상기 밝기 지수가 가장 높은 경우의 LED의 광 조합 비율을 선택하는 단계를 포함할 수 있다.The step of selecting the light combination ratio of the LED includes calculating a brightness index using the pixel values between the first to third points, and selecting the light combination ratio of the LED when the brightness index is the highest. may include steps.

상기 밝기 지수를 연산하는 단계는, 다음의 수학식을 이용하여 연산할 수 있다.The calculating of the brightness index may be performed using the following equation.

Figure 112020031814463-pat00001
Figure 112020031814463-pat00001

여기서, U 및 V는 계수이다.where U and V are coefficients.

상기 측정 대상자 별로 선택된 상기 LED의 광 조합 비율을 매칭하여 저장하는 단계를 더 포함할 수 있다.The method may further include matching and storing the light combination ratio of the LED selected for each measurement target.

본 발명의 다른 실시예에 따르면, 구강 조사용 마우스피스를 제어하기 위한 부비동 진단 시스템에 있어서, 측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 상기 구강 조사용 마우스피스에 부착된 복수의 LED를 모두 발광시켜 상기 측정 대상자의 구강 내부에 광을 조사하도록 제어하는 제어부, 상기 제어부가 상기 구강 조사용 마우스피스에 부착된 복수의 LED 각각이 조사하는 광의 비율을 조절하면, 근적외선 카메라를 통하여 상기 측정 대상자의 얼굴을 각각 촬영하는 촬영부, 상기 얼굴에 좌측과 우측에 한쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 설정부, 그리고 상기 촬영을 할 때마다 촬영된 사진에 대하여 상기 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출하고, 상기 제1 내지 제3 포인트 사이의 픽셀 값의 비율들을 이용하여 LED의 광 조합 비율을 선택하는 선택부를 포함한다.According to another embodiment of the present invention, in a sinus diagnosis system for controlling a mouthpiece for oral irradiation, in a state in which a subject to be measured holds the mouthpiece for oral examination in his mouth, a plurality of A control unit for controlling all LEDs to emit light to irradiate light into the oral cavity of the subject to be measured, and when the control unit adjusts the ratio of light irradiated by each of a plurality of LEDs attached to the mouthpiece for oral irradiation, the near-infrared camera A photographing unit for photographing the face of the subject to be measured, a setting unit for setting a pair of first points (P1), second points (P2), and third points (P3) on the left and right sides of the face, and the photographing A selection unit that extracts each pixel value for each of the first to third points with respect to the photograph taken each time, and selects the light combination ratio of the LED using the ratios of the pixel values between the first and third points include

이와 같이 본 발명에 따르면, 적은 수의 근적외선 LED를 사용하여 발광부를 구현하여도 부비동 내에 정확한 빛의 조사가 가능하다.As described above, according to the present invention, it is possible to accurately irradiate light into the sinuses even when a light emitting unit is implemented using a small number of near-infrared LEDs.

또한, 측정 대상자의 구강 내부 골격 구조에 따라 최적의 광 조합 비율을 획득하여 부비동 상태를 정확하게 측정할 수 있다.In addition, it is possible to accurately measure the sinus state by obtaining an optimal light combination ratio according to the internal skeletal structure of the oral cavity of the subject to be measured.

도 1은 본 발명의 실시예에 따른 부비동 진단 시스템을 설명하기 위한 도면이다.
도 2a 내지 도 2c는 본 발명의 실시예에 따른 구강 조사용 마우스피스의 외관을 나타낸 도면이다.
도 3은 본 발명의 실시예에 따른 부비동 측정장치의 구성을 설명하기 위한 도면이다.
도 4는 본 발명의 실시예에 따른 부비동 진단 방법을 설명하기 위한 순서도이다.
도 5는 도 4의 S420단계를 설명하기 위한 순서도이다.
도 6은 본 발명의 실시예에 따른 제1 분할 영역 내지 제3 분할 영역을 설명하기 위한 도면이다.
도 7은 본 발명의 실시예에 따른 설정된 제1 포인트 내지 제3 포인트를 나타낸 예시도이다.
도 8은 S425 단계를 설명하기 위한 도면이다.
도 9는 도 4의 S430단계를 설명하기 위한 순서도이다.
도 10은 본 발명의 실시예에 따른 기준 사진의 기울기를 측정하는 과정을 설명하기 위한 예시도이다.
도 11a 및 도 11b는 본 발명의 실시예에 따른 부비동 진단 결과를 제공하는 예시도이다.
1 is a view for explaining a sinus diagnosis system according to an embodiment of the present invention.
Figures 2a to 2c is a view showing the appearance of the mouthpiece for oral irradiation according to an embodiment of the present invention.
3 is a view for explaining the configuration of a sinus measuring apparatus according to an embodiment of the present invention.
4 is a flowchart illustrating a sinus diagnosis method according to an embodiment of the present invention.
FIG. 5 is a flowchart for explaining step S420 of FIG. 4 .
6 is a view for explaining a first divided area to a third divided area according to an embodiment of the present invention.
7 is an exemplary diagram illustrating first to third points set according to an embodiment of the present invention.
8 is a diagram for explaining step S425.
9 is a flowchart for explaining step S430 of FIG. 4 .
10 is an exemplary view for explaining a process of measuring the inclination of a reference photo according to an embodiment of the present invention.
11A and 11B are exemplary views providing a sinus diagnosis result according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시 예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art can easily carry out the present invention. However, the present invention may be embodied in several different forms and is not limited to the embodiments described herein. And in order to clearly explain the present invention in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part "includes" a certain element, it means that other elements may be further included, rather than excluding other elements, unless otherwise stated.

그러면 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.Then, with reference to the accompanying drawings, embodiments of the present invention will be described in detail so that those of ordinary skill in the art to which the present invention pertains can easily implement them.

이하에서는 도 1 내지 도 3을 이용하여 본 발명의 실시예에 따른 부비동 진단 시스템에 대하여 설명한다.Hereinafter, a sinus diagnosis system according to an embodiment of the present invention will be described with reference to FIGS. 1 to 3 .

도 1은 본 발명의 실시예에 따른 부비동 진단 시스템을 설명하기 위한 도면이고, 도 2a 내지 도 2c는 본 발명의 실시예에 따른 구강 조사용 마우스피스의 외관을 나타낸 도면이다.1 is a view for explaining a sinus diagnosis system according to an embodiment of the present invention, and FIGS. 2A to 2C are views showing the appearance of a mouthpiece for oral examination according to an embodiment of the present invention.

도 1에서 나타낸 것처럼, 본 발명의 실시예에 따른 부비동 진단 시스템은 구강 조사용 마우스피스(100) 및 부비동 측정장치(200)를 포함한다. As shown in FIG. 1 , the sinus diagnosis system according to an embodiment of the present invention includes a mouthpiece 100 for oral examination and a sinus measuring device 200 .

여기서, 본 발명의 실시예에 따른 부비동 진단 시스템은 근적외선을 이용하여 촬영한 사진을 분석하고, 분석한 결과를 토대로 측정 대상자의 부비동 지수를 분석한다.Here, the sinus diagnosis system according to an embodiment of the present invention analyzes a photograph taken using near-infrared rays, and analyzes the sinus index of the subject to be measured based on the analysis result.

먼저, 본 발명의 실시예에 따른 구강 조사용 마우스피스(100)는 마우스피스 형태로 구현되며, 측정 대상자의 구강 내부에 LED를 이용하여 근적외선을 조사한다.First, the mouthpiece 100 for oral irradiation according to an embodiment of the present invention is implemented in the form of a mouthpiece, and irradiates near-infrared rays using an LED in the mouth of a subject to be measured.

또한, 부비동 측정장치(200)는 근적외선을 조사한 상태에서 복수의 근적외선 사진을 획득하고, 획득한 사진을 이용하여 측정 대상자의 부비동 지수를 분석한다.In addition, the sinus measuring apparatus 200 acquires a plurality of near-infrared photos in a state of irradiating near-infrared rays, and analyzes the sinus index of the subject to be measured by using the acquired photos.

도 1에서 나타낸 것처럼, 측정 대상자는 구강 조사용 마우스피스(100)를 입에 문 상태로 부비동 측정장치(200)에 얼굴을 밀착시키면, 부비동 측정장치(200)는 측정 대상자를 촬영하여 일반 사진과 근적외선 사진을 촬영할 수 있다. 그러면, 부비동 측정장치(200)는 구강 조사용 마우스피스(100)의 LED 점등 여부에 따라 기준 사진과 근적외선 사진의 두 종류의 사진을 촬영할 수 있다.As shown in Fig. 1, when the subject to be measured puts his or her face in close contact with the sinus measuring device 200 with the mouthpiece 100 for oral irradiation in the mouth, the sinus measuring device 200 takes the subject to be measured and shows a general photo and You can take near-infrared photos. Then, the sinus measuring device 200 may take two types of pictures, a reference picture and a near-infrared picture, depending on whether the LED of the mouthpiece 100 for oral irradiation is turned on.

도 2a 내지 도 2c에서 나타낸 것처럼, 구강 조사용 마우스피스(100)는 외측부(110), 내측부(120) 및 지지부(130)를 포함한다. As shown in FIGS. 2A to 2C , the mouthpiece 100 for oral irradiation includes an outer portion 110 , an inner portion 120 and a support portion 130 .

외측부(110)는 내부에 배터리가 포함되어 있어 구강 조사용 마우스피스(100)에 전원을 공급한다. The outer part 110 supplies power to the mouthpiece 100 for oral irradiation because a battery is included therein.

내측부(120)는 측정 대상자의 구강에 삽입되는 부분으로서, 내부에는 복수의 LED(140)가 포함되며, 도 2a와 같이 복수의 LED(140)는 내측부의 중심으로 양 측면에 대칭적으로 배치된다. 또한, 도 2b에서 보는 바와 같이, 내측부(120)는 측면으로 경사가 진 상태로 구현되므로, 측정 대상자가 용이하게 구강에 삽입할 수 있도록 한다. The inner portion 120 is a portion inserted into the oral cavity of the subject to be measured, and a plurality of LEDs 140 are included therein, and as shown in FIG. 2a , the plurality of LEDs 140 are symmetrically disposed on both sides as the center of the inner portion. . In addition, as shown in Figure 2b, the inner portion 120 is implemented in a state inclined to the side, so that the measurement target can be easily inserted into the oral cavity.

복수의 LED(140)는 제1 LED(140a), 제2 LED(140b) 및 제3 LED(140c)를 포함하며, 측정 대상자가 구강 조사용 마우스피스(100)의 내측부(120)를 입에 물게 될 경우, 제1 LED(140a)가 측정 대상자의 구강의 가장 안쪽부분에 위치되며, 제3 LED(140c)는 측정 대상자의 구강의 가장 바깥쪽부분에 위치하게 된다. The plurality of LEDs 140 includes a first LED 140a, a second LED 140b, and a third LED 140c, and the measurement target puts the inner part 120 of the mouthpiece 100 for oral irradiation into the mouth. When bitten, the first LED (140a) is located in the innermost portion of the mouth of the measurement subject, the third LED (140c) is located in the outermost portion of the mouth of the measurement subject.

또한, 지지부(130)는 외측부(110)와 내측부(120) 사이에 위치하며, 측정 대상자의 입술이 닿는 부위에 해당한다. 지지부(130)는 곡선형으로 구현되어 구강 대상자가 용이하게 밀착시킬 수 있도록 한다. In addition, the support part 130 is located between the outer part 110 and the inner part 120, and corresponds to the part where the lips of the measurement subject touch. The support 130 is implemented in a curved shape so that the oral subject can easily adhere to it.

도 2c에서 나타낸 것처럼, 지지부(130)의 바깥 방향에는 우측 및 좌측에 각각 1개씩 인식마크(150a, 150b)가 부착된다.As shown in FIG. 2C , identification marks 150a and 150b are attached to the right side and the left side, respectively, in the outer direction of the support unit 130 .

부비동 측정장치(200)는 근적외선 사진에 나타난 좌우측의 인식마크(150a, 150b)의 평형성 여부를 통하여 측정 대상자가 구강 조사용 마우스피스(100)를 정확하게 입에 물고 있는지 여부를 판단할 수 있다. 즉, 부비동 측정장치(200)는 서로 이격된 지점에 위치하는 좌측과 우측의 인식마크(150a, 150b)의 평형성을 측정하여 측정 대상자가 입에 물고 있는 구강 조사용 마우스피스(100)의 정위치 여부를 판단할 수 있다.The sinus measuring apparatus 200 may determine whether the subject to be measured is accurately biting the mouthpiece 100 for oral examination through the balance of the left and right recognition marks 150a and 150b shown in the near-infrared photograph. That is, the sinus measuring device 200 measures the balance of the left and right recognition marks 150a and 150b located at points spaced apart from each other, and the position of the mouthpiece 100 for oral examination held by the subject to be measured in the mouth. can determine whether

이때, 도 2a 내지 도 2c에서는 LED(140)의 개수는 3개(140a, 140b, 140c)로 이루어진 2개의 쌍 형태로 표현하였지만, LED의 개수 및 설치 위치는 측정 대상자의 구강 구조에 따라 변경될 수 있으며, 대칭되는 좌우측의 LED는 동일한 크기의 파장을 방출하고, 이웃하는 LED는 서로 다른 파장을 방출할 수 있다.At this time, in FIGS. 2a to 2c, the number of LEDs 140 is expressed in the form of two pairs of three (140a, 140b, 140c), but the number and installation position of the LEDs are to be changed according to the oral structure of the subject to be measured. The symmetrical left and right LEDs may emit wavelengths of the same size, and neighboring LEDs may emit different wavelengths.

도 3은 본 발명의 실시예에 따른 부비동 측정장치의 구성을 설명하기 위한 도면이다.3 is a view for explaining the configuration of a sinus measuring apparatus according to an embodiment of the present invention.

도 3에서 나타낸 것처럼, 본 발명의 실시예에 따른 부비동 측정 장치(200)는 제어부(210), 촬영부(220), 영역 설정부(230), 선택부(240) 및 데이터베이스(250)를 포함한다.As shown in FIG. 3 , the sinus measuring apparatus 200 according to an embodiment of the present invention includes a control unit 210 , a photographing unit 220 , a region setting unit 230 , a selection unit 240 , and a database 250 . do.

먼저, 제어부(210)는 구강 조사용 마우스피스(100)에 부착된 복수의 LED를 모두 발광시켜 측정 대상자의 구강 내부에 광을 조사하도록 제어한다.First, the control unit 210 controls all of the plurality of LEDs attached to the mouthpiece 100 for oral irradiation to emit light to irradiate light into the oral cavity of the subject to be measured.

또한, 제어부(210)는 구강 조사용 마우스피스(100)에 부착된 복수의 LED 각각이 조사하는 광의 비율을 조절할 수 있다.In addition, the control unit 210 may adjust the ratio of the light irradiated by each of the plurality of LEDs attached to the mouthpiece 100 for oral irradiation.

그리고, 촬영부(220)는 근적외선 카메라를 통하여 측정 대상자의 얼굴을 촬영한다.Then, the photographing unit 220 photographs the face of the subject to be measured through the near-infrared camera.

즉, 제어부(210)가 구강 조사용 마우스피스(100)의 좌측 또는 우측에 위치하는 제1 LED(140a)와 인접한 제2 LED(140b)만을 턴온시킨 상태에서, 제1 LED(140a)와 상기 제2 LED(140b) 사이의 광 조합 비율을 달리하면, 촬영부(22)는 측정 대상자의 얼굴을 촬영한다.That is, in a state in which the control unit 210 turns on only the second LED 140b adjacent to the first LED 140a located on the left or right side of the mouthpiece 100 for oral irradiation, the first LED 140a and the If the light combination ratio between the second LEDs 140b is different, the photographing unit 22 captures the face of the subject to be measured.

또한, 제어부(210)가 제2 LED(140b)와 인접한 제3 LED(140c)만을 턴온시킨 상태에서, 상기 제2 LED(140b)와 상기 제3 LED(140c) 사이의 광 조합 비율을 달리하면, 촬영부(220)는 측정 대상자의 얼굴을 촬영한다.In addition, in a state in which the controller 210 turns on only the third LED 140c adjacent to the second LED 140b, if the light combination ratio between the second LED 140b and the third LED 140c is changed, , the photographing unit 220 photographs the face of the subject to be measured.

다음으로, 설정부(230)는 촬영된 측정 대상자의 얼굴에 좌측과 우측에 한쌍의 제1 포인트, 제2 포인트 및 제3 포인트를 설정한다.Next, the setting unit 230 sets a pair of first points, second points, and third points on the left and right sides of the photographed face of the subject to be measured.

선택부(240)는 촬영을 할 때마다 촬영된 사진에 대하여 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출하고, 제1 내지 제3 포인트 사이의 픽셀 값의 비율들을 이용하여 LED의 광 조합 비율을 선택한다.The selector 240 extracts each pixel value for each of the first to third points from the photographed picture whenever a photograph is taken, and uses the ratios of the pixel values between the first to third points to combine the light of the LED. Choose a ratio.

다음으로, 데이터베이스(S250)는 측정 대상자 별로 선택된 LED의 광 조합 비율을 매칭하여 저장한다.Next, the database S250 matches and stores the light combination ratio of the LED selected for each measurement target.

이하에서는 도 4 내지 도 11b를 이용하여 본 발명의 실시예에 따른 부비동 진단 시스템의 구강 조사용 마우스피스(100)의 제어 방법에 대하여 설명한다.Hereinafter, a method of controlling the mouthpiece 100 for oral examination of the sinus diagnosis system according to an embodiment of the present invention will be described with reference to FIGS. 4 to 11B .

도 4는 본 발명의 실시예에 따른 부비동 진단 방법을 설명하기 위한 순서도이다.4 is a flowchart illustrating a sinus diagnosis method according to an embodiment of the present invention.

먼저, 측정 대상자가 구강 조사용 마우스피스(100)를 입에 문 상태에서, 부비동 측정 장치(200)는 근적외선 카메라를 통해 측정 대상자의 얼굴을 촬영하여 기준 사진을 획득한다(S410).First, in a state in which the subject to be measured holds the mouthpiece 100 for oral examination in his mouth, the sinus measuring device 200 acquires a reference picture by photographing the subject's face through a near-infrared camera (S410).

부비동 측정 장치(200)는 측정 대상자의 얼굴에 근적외선을 조사한 상태에서 측정 대상자의 얼굴을 촬영한다. The sinus measuring device 200 photographs the face of the subject to be measured in a state in which near-infrared rays are irradiated to the face of the subject to be measured.

부비동 측정 장치(200)는 기준 사진을 획득하기 위해 구강 조사용 마우스피스(100)에 존재하는 복수의 LED를 소등시킨 상태에서 측정 대상자의 얼굴을 촬영한다.The sinus measuring device 200 photographs the face of the subject to be measured in a state in which a plurality of LEDs present in the mouthpiece 100 for oral irradiation are turned off to obtain a reference picture.

다음으로, 부비동 측정 장치(200)는 구강 조사용 마우스피스(100)에 부착된 LED(140a, 140b, 140c)의 조합 비율을 변경시키면서 촬영하여 최적의 LED 광의 조합 비율을 선택한다(S420).Next, the sinus measuring device 200 selects an optimal combination ratio of LED light by photographing while changing the combination ratio of the LEDs 140a, 140b, 140c attached to the mouthpiece 100 for oral irradiation (S420).

이하에서는 S420에 대하여 도 5 내지 도 8을 이용하여 상세하게 설명한다. Hereinafter, S420 will be described in detail with reference to FIGS. 5 to 8 .

도 5는 도 4에 나타낸 S420 단계를 설명하기 위한 순서도이다.FIG. 5 is a flowchart for explaining step S420 shown in FIG. 4 .

먼저, 부비동 측정 장치(200)는 구강 조사용 마우스피스(100)에 부착된 복수의 LED를 모두 발광시켜 측정 대상자의 구강 내부에 광을 조사하고, 근적외선 카메라를 이용하여 측정 대상자의 얼굴을 촬영한다(S421).First, the sinus measuring device 200 emits all of the plurality of LEDs attached to the mouthpiece 100 for oral irradiation to irradiate light into the inside of the subject's oral cavity, and uses a near-infrared camera to photograph the subject's face. (S421).

이때, 도 1에서 나타낸 것처럼, 측정 대상자는 구강 조사용 마우스피스(100)를 입에 문 상태에서 부비동 측정 장치(200)에 얼굴을 밀착시킨 상태에서 부비동 측정 장치(200)에 포함된 근적외선 카메라를 통하여 얼굴을 촬영한다.At this time, as shown in FIG. 1 , the subject to be measured uses the near-infrared camera included in the sinus measuring device 200 in a state in which the face is in close contact with the sinus measuring device 200 with the mouthpiece 100 for oral irradiation in the mouth. Take a picture of your face through

다음으로, 부비동 측정 장치(200)는 촬영된 측정 대상자의 얼굴 사진의 좌측과 우측에 한 쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정한다(S422).Next, the sinus measuring apparatus 200 sets a pair of first points P1, second points P2, and third points P3 on the left and right sides of the photographed face photo of the subject (S422) ).

이하에서는 도 6 및 도 7을 이용하여 S422 단계에서 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 과정에 대하여 설명한다. Hereinafter, a process of setting the first point P1, the second point P2, and the third point P3 in step S422 using FIGS. 6 and 7 will be described.

먼저, 부비동 측정 장치(200)는 각각의 포인트를 설정하기 위하여 먼저 근적외선 사진으로 촬영된 얼굴에 대하여 복수의 분할 영역으로 구분한다. First, the sinus measuring apparatus 200 divides a face photographed by a near-infrared photograph into a plurality of divided regions in order to set each point.

도 6은 본 발명의 실시예에 따른 제1 분할 영역 내지 제3 분할 영역을 설명하기 위한 도면이다.6 is a view for explaining a first divided area to a third divided area according to an embodiment of the present invention.

도 6과 같이 부비동 측정 장치(200)는 제1 분할 영역 내지 제3 분할 영역을 구분하기 위하여 각각의 근적외선 사진에 수직과 수평 방향으로 복수의 가상의 선을 설정한다. As shown in FIG. 6 , the sinus measuring apparatus 200 sets a plurality of virtual lines in vertical and horizontal directions in each near-infrared photograph to distinguish the first to third divided areas.

제1 수직선(V1), 제2 수직선(V2), 제3 수직선(V3) 및 제4 수직선(V4)은 각각 근적외선 카메라를 통해 촬영된 얼굴 사진에 대하여 우측 눈의 바깥쪽지점(E1), 우측 눈의 안쪽지점(E2), 좌측 눈의 안쪽지점(E3), 좌측 눈의 바깥쪽지점(E4) 각각을 지나는 가상의 선을 나타낸다.The first vertical line (V1), the second vertical line (V2), the third vertical line (V3), and the fourth vertical line (V4) are the outer point (E1) of the right eye, the right An imaginary line passing through the inner point of the eye (E2), the inner point of the left eye (E3), and the outer point of the left eye (E4) is shown.

그리고, 제1 수평선(H1) 및 제2 수평선(H2)은 각각 근적외선 카메라를 통해 촬영된 사진에서의 입술 끝점(M1, M2)과 코 끝점(N1, N2)을 각각 지나는 가상의 선을 나타낸다.In addition, the first horizontal line H1 and the second horizontal line H2 represent virtual lines passing through the lip end points M1 and M2 and the nose end points N1 and N2, respectively, in a picture taken through a near-infrared camera, respectively.

또한, 제3 수평선(H3)은 근적외선 카메라를 통해 촬영된 사진에서의 눈동자의 중심점(T1, T2)을 지나는 가상의 선이며, 제4 수평선(H4)은 제2 수평선(H2)과 제3 수평선(H3) 사이의 중심을 통과하는 가상의 선을 나타낸다.In addition, the third horizontal line H3 is an imaginary line passing through the center points T1 and T2 of the pupil in the picture taken through the near-infrared camera, and the fourth horizontal line H4 is the second horizontal line H2 and the third horizontal line (H3) represents an imaginary line passing through the center between

이와 같이 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H1, H2, H3, H4)이 설정되면, 각각의 교차되는 선에 의하여 복수의 분할 영역이 생성된다. When the plurality of virtual vertical lines V1, V2, V3, and V4 and the plurality of virtual horizontal lines H1, H2, H3, and H4 are set in this way, a plurality of divided regions are generated by the intersecting lines.

즉, 도 6에서 나타낸 것처럼, 제1 분할 영역은 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H1, H2)이 교차되는 영역에 해당하고, 제2 분할 영역은 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H2, H4)이 교차되는 영역에 해당하며, 제3 분할 영역은 복수의 가상의 수직선(V1, V2, V3, V4)과 복수의 가상의 수평선(H3, H4)이 교차되는 영역에 해당한다. That is, as shown in FIG. 6 , the first divided area corresponds to an area where a plurality of virtual vertical lines V1 , V2 , V3 and V4 and a plurality of virtual horizontal lines H1 and H2 intersect, and the second divided area corresponds to an area in which the plurality of virtual vertical lines V1, V2, V3, and V4 and the plurality of virtual horizontal lines H2 and H4 intersect, and the third division area includes the plurality of virtual vertical lines V1, V2, V3 , V4) and the plurality of virtual horizontal lines H3 and H4 intersect each other.

도 6과 같이 복수의 분할 영역이 설정되면, 부비동 측정 장치(200)는 각각의 분할 영역의 특정 지점에 대하여 각각의 포인트를 설정한다. When a plurality of divided regions are set as shown in FIG. 6 , the sinus measuring apparatus 200 sets each point with respect to a specific point of each divided region.

도 7은 본 발명의 실시예에 따른 설정된 제1 포인트 내지 제3 포인트를 나타낸 예시도이다.7 is an exemplary diagram illustrating first to third points set according to an embodiment of the present invention.

도 7에서 나타낸 것처럼, 제1 포인트 내지 제3 포인트는 3장의 근적외선 사진 각각에 대하여 설정되며, 각각의 근적외선 사진에서 얼굴의 좌측 및 우측에 설정된다.As shown in FIG. 7 , the first to third points are set for each of the three near-infrared photos, and are set on the left and right sides of the face in each of the near-infrared photos.

도 7에 나타낸 것처럼, 부비동 측정 장치(200)는 제1 분할 영역에서 가장 큰 픽셀 값을 가지는 제1 포인트(LP1, RP1)를 설정하고, 제2 분할 영역에서 가장 큰 픽셀 값을 가지는 제2 포인트(LP2, RP2)를 설정하며, 제3 분할 영역에서 가장 큰 픽셀 값을 가지는 제3 포인트(LP3, RP3)를 설정한다.As shown in FIG. 7 , the sinus measuring apparatus 200 sets first points LP1 and RP1 having the largest pixel value in the first divided area, and the second point having the largest pixel value in the second divided area. (LP2, RP2) is set, and the third point (LP3, RP3) having the largest pixel value in the third divided area is set.

또한, 좌측과 우측에 각각 설정된 제1 포인트 내지 제3 포인트는 서로 대칭되는 위치에 설정될 수도 있고 서로 다른 위치에 각각 설정될 수 있다.In addition, the first to third points respectively set on the left and right sides may be set at positions symmetrical to each other or set at different positions, respectively.

다음으로, 부비동 측정 장치(200)는 구강 조사용 마우스피스(100)의 좌측 또는 우측에 위치하는 제1 LED(140a)와 제2 LED(140b)만을 턴온시킨 상태에서, 제1 LED(140a)와 제2 LED(140b) 사이의 광 조합 비율을 달리하면서 측정 대상자의 얼굴을 촬영한다(S423).Next, the sinus measuring device 200 is a first LED (140a) in a state in which only the first LED (140a) and the second LED (140b) positioned on the left or right side of the mouthpiece 100 for oral irradiation are turned on. The face of the subject to be measured is photographed while varying the light combination ratio between the and the second LED 140b (S423).

예를 들어, 부비동 측정 장치(200)는 좌측 및 우측의 제1 LED(140a)와 제2 LED(140b)의 광 조합 비율을 100:0, 67:33, 50:50, 33:67, 0:100으로 달리하면서 측정 대상자의 얼굴을 각각 촬영한다.For example, the sinus measurement device 200 may measure the light combination ratio of the left and right first LEDs 140a and second LEDs 140b to 100:0, 67:33, 50:50, 33:67, 0 While changing to :100, take pictures of each subject's face.

다음으로, 부비동 측정 장치(200)는 제2 LED(140b)와 제3 LED(140c)만을 턴온시킨 상태에서, 제2 LED(140b)와 제3 LED(140c) 사이의 광 조합 비율을 달리하면서 상기 측정 대상자의 얼굴을 촬영한다(S424).Next, the sinus measuring device 200 while only the second LED (140b) and the third LED (140c) is turned on, while varying the light combination ratio between the second LED (140b) and the third LED (140c) The face of the subject to be measured is photographed (S424).

예를 들어, 부비동 측정 장치(200)는 좌측 및 우측의 제2 LED(140b)의 제3 LED(140c)의 광 조합 비율을 67:33, 50:50, 33:67 및 0:100으로 달리하면서 측정 대상자의 얼굴을 각각 촬영한다.For example, the sinus measuring device 200 sets the light combination ratio of the third LED 140c of the left and right second LED 140b to 67:33, 50:50, 33:67, and 0:100. while taking pictures of each subject's face.

본 발명에서는 좌측 및 우측의 3개의 LED에 대하여 광 조합 비율을 상기와 같이 변경하였으나, 구강 조사용 마우스피스(100)에 부착된 LED의 개수에 따라 광 조합 비율은 다른 방식으로 변경될 수 있다.In the present invention, the light combination ratio for the three LEDs on the left and right is changed as described above, but the light combination ratio can be changed in other ways depending on the number of LEDs attached to the mouthpiece 100 for oral irradiation.

다음으로, 다양한 조합 비율로 촬영된 각각의 사진에 대하여 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출한다(S425).Next, for each picture taken at various combination ratios, each pixel value is extracted for each first to third point ( S425 ).

도 8은 S425 단계를 설명하기 위한 도면이다. 8 is a diagram for explaining step S425.

도 8에서 나타낸 것과 같이, 부비동 측정 장치(200)는 S423단계 및 S424단계의 예에서 촬영된 사진을 이용하여 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출한다.As shown in FIG. 8 , the sinus measuring apparatus 200 extracts each pixel value for each of the first to third points using the photos taken in the examples of steps S423 and S424.

즉, 부비동 측정 장치(200)는 제1 LED(140a), 제2 LED(140b)의 제3 LED(140c)의 광 조합 비율을 100:0:0, 67:33:0, 50:50:0, 33:67:0, 0:100:0, 0:67:33, 0:50:50, 0:33:67 및 0:0:100과 같이 달리하며 촬영한 사진으로부터 각각 제1 포인트 내지 제3 포인트의 픽셀 값을 추출한다. That is, the sinus measuring device 200 is 100:0:0, 67:33:0, 50:50: the light combination ratio of the third LED (140c) of the first LED (140a), the second LED (140b): 0, 33:67:0, 0:100:0, 0:67:33, 0:50:50, 0:33:67 and 0:0:100 The pixel value of the third point is extracted.

이때, 픽셀 값은 0 내지 255사이의 값으로 추출된다.At this time, the pixel value is extracted as a value between 0 and 255.

도 8에서 나타낸 것처럼, 부비동 측정 장치(200)는 제1 내지 제3 포인트 사이의 픽셀 값을 이용하여 각 조합 비율에 대하여 밝기 지수를 연산한다(S426).As shown in FIG. 8 , the sinus measuring apparatus 200 calculates a brightness index for each combination ratio using pixel values between the first to third points ( S426 ).

이때, 부비동 측정 장치(200)는 아래의 수학식 1을 이용하여 각 조합 비율에 대하여 밝기 지수를 각각 연산한다.At this time, the sinus measuring apparatus 200 calculates the brightness index for each combination ratio by using Equation 1 below.

Figure 112020031814463-pat00002
Figure 112020031814463-pat00002

여기서, U 및 V는 계수이다.where U and V are coefficients.

그러면 부비동 측정 장치(200)는 수학식 1을 이용하여 제1 LED(140a) 내지 제3 LED(140c)의 조합 비율에 따른 밝기 지수를 연산하면 도 8과 같은 밝기 지수 결과를 획득할 수 있다.Then, the sinus measuring apparatus 200 may obtain a brightness index result as shown in FIG. 8 by calculating the brightness index according to the combination ratio of the first LED 140a to the third LED 140c using Equation 1 .

그러면, 부비동 측정 장치(200)는 밝기 지수가 가장 높은 경우의 LED 광 조합 비율을 선택하고, 해당 측정 대상자 별로 LED의 조합 비율을 매칭하여 저장한다(S427). Then, the sinus measuring apparatus 200 selects the LED light combination ratio when the brightness index is the highest, matches the LED combination ratio for each measurement target and stores it (S427).

예를 들어, 도 8에서 나타낸 것처럼, 각각의 조합 비율별로 밝기 지수를 획득한 후, 부비동 측정 장치(200)는 가장 큰 밝기 지수인 5.45의 값을 가지는 제1 LED(140c) 내지 제3 LED(140c)의 조합 비율인 0:67:33을 선택한다. For example, as shown in FIG. 8, after obtaining the brightness index for each combination ratio, the sinus measuring device 200 has the largest brightness index of 5.45, the first LED 140c to the third LED ( 140c), which is the combination ratio of 0:67:33.

그러면, 부비동 측정 장치(200)는 선택된 밝기 비율인 0:33:67을 해당 측정 대상자의 LED의 광 조사비율로 매칭하여 저장한다.Then, the sinus measurement device 200 matches the selected brightness ratio of 0:33:67 with the light irradiation ratio of the LED of the corresponding measurement target and stores it.

이와 같이, S420 단계를 통하여 부비동 측정 장치(200)는 구강 조사용 마우스피스(100)에 부착된 복수의 LED에 대하여 최적의 LED 광의 조합 비율을 선택한다.As such, through the step S420, the sinus measuring device 200 selects an optimal combination ratio of LED light for a plurality of LEDs attached to the mouthpiece 100 for oral irradiation.

그러면, 부비동 측정 장치(200)는 S420단계에서 선택된 LED의 조합 비율을 구강 조사용 마우스피스(100)에 적용하고, 근적외선 카메라의 노출시간을 변환시켜가면서 측정 대상자의 얼굴을 연속 촬영함으로써, 복수개의 근적외선 사진을 획득한다(S430).Then, the sinus measuring device 200 applies the combination ratio of the LED selected in step S420 to the mouthpiece 100 for oral irradiation, and continuously shoots the face of the subject to be measured while changing the exposure time of the near-infrared camera. A near-infrared image is acquired (S430).

만일, LED의 광 조합 비율이 기 저장되어 있는 측정 대상자의 경우, 부비동 측정 장치(200)는 S421단계 내지 S427단계를 실행하지 않고 매칭된 LED의 광 조합비율을 이용하여 해당 측정 대상자의 구강 내부에 빛을 조사한다.If, in the case of a subject whose light combination ratio of LEDs is stored in advance, the sinus measuring device 200 does not execute steps S421 to S427, but uses the matched light combination ratio of the LEDs inside the mouth of the subject to be measured. irradiate the light

여기서, 설명의 편의상 3개의 근적외선 사진을 획득하는 것으로 예시한다. Here, for convenience of description, it is exemplified as acquiring three near-infrared photos.

그러면, 부비동 측정 장치(200)는 근적외선 카메라의 조리개의 크기를 조절하거나 셔터의 스피드를 이용하여 노출시간을 변환시켜가면서 촬영하여 3개의 근적외선 사진을 획득한다.Then, the sinus measuring apparatus 200 acquires three near-infrared photos by adjusting the size of the aperture of the near-infrared camera or changing the exposure time by using the shutter speed.

다음으로, 부비동 측정 장치(200)는 기준 사진에 촬영된 측정 대상자의 얼굴을 이용하여 기준 사진의 기울기를 측정한다(S440).Next, the sinus measuring apparatus 200 measures the inclination of the reference photograph using the face of the measurement subject photographed in the reference photograph (S440).

기준 사진의 기울기를 측정하기 위해서, 부비동 측정 장치(200)는 기준 사진에서 측정 대상자의 좌측 눈동자의 중심점(T1)과 우측 눈동자의 중심점(T2)을 선정한다.In order to measure the inclination of the reference photo, the sinus measuring apparatus 200 selects the center point T1 of the left pupil and the center point T2 of the right pupil of the measurement subject in the reference photograph.

도 9는 도 4의 S440단계를 설명하기 위한 순서도이고, 도 10은 본 발명의 실시예에 따른 기준 사진의 기울기를 측정하는 과정을 설명하기 위한 예시도이다.9 is a flowchart for explaining step S440 of FIG. 4 , and FIG. 10 is an exemplary view for explaining a process of measuring the inclination of a reference photo according to an embodiment of the present invention.

먼저, 부비동 측정 장치(200)는 기준 사진에서의 양쪽 눈동자의 중심점(T1, T2)을 연결하는 가상의 선(C1)을 설정한다(S441).First, the sinus measuring apparatus 200 sets an imaginary line C1 connecting the center points T1 and T2 of both pupils in the reference picture ( S441 ).

그리고, 부비동 측정 장치(200)는 기준 사진의 수평선(C2) 대비 가상의 선(C1)이 기울어진 정도를 측정한다(S442).Then, the sinus measuring apparatus 200 measures the degree of inclination of the virtual line C1 with respect to the horizontal line C2 of the reference picture (S442).

즉, 부비동 측정 장치(200)는 도 13에서 나타낸 가상의 선(C1)과 기준 사진의 수평선(C2)을 대조하여 기준 사진이 기울어진 정도를 측정한다.That is, the sinus measuring apparatus 200 compares the virtual line C1 shown in FIG. 13 with the horizontal line C2 of the reference photograph to measure the degree of inclination of the reference photograph.

예를 들어, 기준 사진의 수평선(C2)에 대비하여 가상의 선(C1)이 4°기울어져 있으면, 부비동 측정 장치(200)는 해당 기준 사진이 4°만큼 기울어진 것으로 판단한다.For example, if the virtual line C1 is inclined by 4° with respect to the horizontal line C2 of the reference picture, the sinus measuring apparatus 200 determines that the corresponding reference picture is inclined by 4°.

다음으로, 부비동 측정 장치(200)는 복수의 근적외선 사진을 측정된 기울기의 크기만큼 회전시켜 복수의 근적외선 사진의 수평을 보정한다(S450).Next, the sinus measuring apparatus 200 corrects the horizontality of the plurality of near-infrared photos by rotating the plurality of near-infrared photos by the magnitude of the measured inclination (S450).

즉, 부비동 측정 장치(200)는 S430단계에서 측정된 기울어진 기울기(4°)만큼 3장의 근적외선 사진 각각을 회전시켜 복수의 근적외선 사진이 수평 상태가 되도록 보정한다.That is, the sinus measuring apparatus 200 rotates each of the three near-infrared photos by the inclined inclination (4°) measured in step S430 to correct the plurality of near-infrared photos to be in a horizontal state.

즉, 부비동 측정 장치(200)는 정확한 부비동의 부비동 지수를 연산하기 위하여 3장의 근적외선 사진이 수평이 되도록 보정한다.That is, the sinus measuring apparatus 200 corrects the three near-infrared photos to be horizontal in order to calculate the correct sinus index of the sinuses.

다음으로, 부비동 측정 장치(200)는 보정된 3장의 근적외선 사진 각각에 대하여 좌측과 우측에 한 쌍의 제1 포인트, 제2 포인트 및 제3 포인트를 설정한다(S460). Next, the sinus measuring apparatus 200 sets a pair of first points, second points, and third points on the left and right sides for each of the three corrected near-infrared photos ( S460 ).

이때, 부비동 측정 장치(200)는 S421단계와 동일한 방법으로 제1 포인트, 제2 포인트 및 제3 포인트를 설정한다.At this time, the sinus measuring apparatus 200 sets the first point, the second point, and the third point in the same manner as in step S421.

다음으로, 부비동 측정 장치(200)는 복수의 근적외선 사진 각각에 대하여 측정 대상자의 자세에 대한 평가 지수를 산출한다(S470).Next, the sinus measuring apparatus 200 calculates an evaluation index for the posture of the measurement subject for each of the plurality of near-infrared photographs (S470).

여기서, 부비동 측정 장치(200)는 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)를 아래의 수학식 1을 이용하여 측정 대상자의 자세에 대한 평가 지수(T_score)를 산출한다.Here, the sinus measuring apparatus 200 calculates an evaluation index (T_score) for the posture of the measurement subject using Equation 1 below for the distance score (D_score), the slope score (A_score), and the pixel score (P_score).

Figure 112020031814463-pat00003
Figure 112020031814463-pat00003

여기서, 거리 점수(D_score), 기울기 점수(A_score), 픽셀 점수(P_score)는 아래의 수학식 3 내지 수학식 5를 이용하여 연산된다.Here, the distance score (D_score), the slope score (A_score), and the pixel score (P_score) are calculated using Equations 3 to 5 below.

먼저, 부비동 측정 장치(200)는 근적외선 사진에서의 중앙으로부터 좌측 및 우측 각각의 눈동자의 중심까지의 픽셀 개수를 아래의 수학식에 적용하여 거리 점수(D_score)를 연산한다.First, the sinus measuring apparatus 200 calculates a distance score (D_score) by applying the number of pixels from the center to the center of each of the left and right pupils in the near-infrared photograph to the following equation.

Figure 112020031814463-pat00004
Figure 112020031814463-pat00004

여기서, A는 거리 계수, t-dist는 사진의 중앙에서부터 좌측 및 우측 각각의 눈동자의 중심(T1, T2)까지의 픽셀개수의 차이다.Here, A is the distance coefficient, and t-dist is the difference in the number of pixels from the center of the photo to the center (T1, T2) of each of the left and right pupils.

이때, 거리 점수(D_score)의 최대 값은 40으로 설정된다.In this case, the maximum value of the distance score D_score is set to 40.

예를 들어, t-dist가 40이고, A가 0.2라고 하면, 거리 점수(D_score)는 32로 연산된다.For example, if t-dist is 40 and A is 0.2, the distance score (D_score) is calculated as 32.

다음으로, 부비동 측정 장치(200)는 S410단계에서 획득한 기준 사진의 기울기를 아래의 수학식 4에 적용하여 기울기 점수(A_score)를 연산한다.Next, the sinus measuring apparatus 200 calculates a slope score (A_score) by applying the slope of the reference picture obtained in step S410 to Equation 4 below.

Figure 112020031814463-pat00005
Figure 112020031814463-pat00005

여기서, B는 기울기 계수, angle은 기준 사진의 기울기 각도이다.Here, B is the inclination coefficient, and angle is the inclination angle of the reference photo.

이때, 기울기 점수(A_score)의 최대 값은 20으로 설정된다.In this case, the maximum value of the slope score A_score is set to 20.

예를 들어, 기준 사진의 기울기 각도가 4°이고, B의 값이 1.5라고 하면, 수학식 3에 의하여 기울기 점수(A_score)는 14로 연산된다.For example, if the inclination angle of the reference photo is 4° and the value of B is 1.5, the inclination score (A_score) is calculated as 14 according to Equation (3).

다음으로, 부비동 측정 장치(200)는 좌측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 양측 1cm씩 범위 안에 있는 픽셀값의 평균과 우측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 양측 1cm씩(총2cm) 범위 안에 있는 픽셀값의 평균값을 아래의 수학식 4에 적용하여 픽셀 점수(P_score)를 연산한다.Next, the sinus measuring device 200 is the average of the pixel values within the range of 1 cm on both sides based on the line connecting the first point P1 and the second point P2 on the left side and the first point P1 on the right side A pixel score (P_score) is calculated by applying the average value of the pixel values within the range of 1 cm on each side (total of 2 cm) to the line connecting the second point P2 and the second point P2 to Equation 4 below.

Figure 112020031814463-pat00006
Figure 112020031814463-pat00006

여기서, C는 픽셀 계수, p_diff는 연산된 좌측 및 우측의 픽셀 좌측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 양측 1cm씩 범위 안에 있는 픽셀값의 평균과 우측의 제1 포인트(P1)과 제2 포인트(P2)를 잇는 선을 기준으로 양측 1cm씩(총2cm) 범위 안에 있는 픽셀값의 평균값의 차이값이다.Here, C is the pixel coefficient, p_diff is the average of the pixel values within the range of 1 cm on both sides based on the line connecting the first point P1 and the second point P2 on the left side of the calculated left and right pixels It is the difference value of the average value of the pixel values within the range of 1 cm on each side (total of 2 cm) based on the line connecting the first point P1 and the second point P2.

이때, 픽셀 점수(P_score)의 최대 값은 40으로 설정된다.In this case, the maximum value of the pixel score P_score is set to 40.

예를 들어, p_diff 값이 30이고, C의 값이 0.2라고 하면, 수학식 4에 의하여 픽셀 점수(P_score)는 34로 연산된다.For example, if the p_diff value is 30 and the value of C is 0.2, the pixel score P_score is calculated as 34 according to Equation (4).

이때, 수학식 3 내지 5를 통해 알 수 있듯이, 거리 점수(D_score), 기울기 점수(A_score) 및 픽셀 점수(P_score) 각각의 최대 값이 40, 20 및 40점이므로, 수학식 1에 의하여 평가 지수(T_score)의 최대 값은 100점으로 설정된다.At this time, as can be seen from Equations 3 to 5, since the maximum values of the distance score (D_score), the slope score (A_score), and the pixel score (P_score) are 40, 20 and 40 points, the evaluation index by Equation 1 The maximum value of (T_score) is set to 100 points.

다음으로, 부비동 측정 장치(200)는 수학식 1에 의해 연산된 복수의 근적외선 사진 각각에 대하여 평가 지수가 기준 값 이상인지 여부를 판단한다(S480).Next, the sinus measuring apparatus 200 determines whether the evaluation index is equal to or greater than a reference value for each of the plurality of near-infrared photos calculated by Equation 1 (S480).

이때, 3장의 근적외선 사진 중에서 평가 지수가 기준 값 보다 작은 것으로 연산된 근적외선 사진이 존재하면, 부비동 측정 장치(200)는 해당되는 근적외선 사진에 대하여 재촬영을 요청하거나 평가불가로 판단한다(S490).At this time, if there is a near-infrared photograph in which the evaluation index is calculated to be smaller than the reference value among the three near-infrared photographs, the sinus measuring apparatus 200 requests re-photography for the corresponding near-infrared photograph or determines that evaluation is impossible (S490).

반면에, 3장의 근적외선 사진 중에서 평가 지수가 기준 값 이상으로 연산된 근적외선 사진이 존재하면, 부비동 측정 장치(200)는 해당되는 근적외선 사진 중에서 가장 큰 픽셀 값을 가지는 근적외선 사진을 선택한다(S500).On the other hand, if there is a near-infrared photograph in which the evaluation index is calculated to be greater than or equal to the reference value among the three near-infrared photographs, the sinus measuring apparatus 200 selects the near-infrared photograph having the largest pixel value among the corresponding near-infrared photographs (S500).

여기서, 기준 값은 부비동 측정 장치(200)에서 설정된 값이거나 사용자에 의해 설정된 값일 수 있다.Here, the reference value may be a value set by the sinus measuring apparatus 200 or a value set by a user.

그러면, 부비동 측정 장치(200)는 선택된 1장의 근적외선 사진을 이용하여 좌측 및 우측 각각의 부비동 지수를 연산한다(S510).Then, the sinus measuring apparatus 200 calculates each of the left and right sinus indices by using the selected near-infrared photograph (S510).

즉, 부비동 측정 장치(200)는 선택된 근적외선 사진에서의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)에서의 픽셀 값을 아래의 수학식 6에 적용하여 선택된 근적외선 사진의 좌측과 우측 각각의 부비동 지수를 연산한다.That is, the sinus measuring apparatus 200 applies the pixel values at the first point P1, the second point P2, and the third point P3 in the selected near-infrared photograph to Equation 6 below to obtain the selected near-infrared photograph. Calculate the left and right sinus indices of each.

Figure 112020031814463-pat00007
Figure 112020031814463-pat00007

Figure 112020031814463-pat00008
Figure 112020031814463-pat00008

여기서, X, Y, Z는 픽셀 계수이고, F는 부비동 계수이다.where X, Y, and Z are pixel coefficients and F is the sinus coefficient.

이때, 부비동 지수는 부비동 내부에 존재하는 농의 양을 의미한다.At this time, the sinus index refers to the amount of pus present in the sinuses.

S500 단계에서 측정 대상자의 좌측 및 우측 각각의 부비동 지수가 연산되면, 부비동 측정 장치(200)는 연산된 부비동 지수를 표시한다(S520).When each of the left and right sinus indices of the subject to be measured are calculated in step S500, the sinus measuring apparatus 200 displays the calculated sinus indices (S520).

이때, 부비동 측정 장치(200)는 연산된 부비동 지수를 수치 형태로 화면상에 표시하거나 부비동지수를 정규화하여 정규화된 값에 따라 음영 영역 형태로 화면상에 표시한다.At this time, the sinus measuring apparatus 200 displays the calculated sinus index on the screen in numerical form or normalizes the sinus index and displays it on the screen in the form of a shaded area according to the normalized value.

도 11a 및 도 11b는 본 발명의 실시예에 따른 부비동 진단 결과를 제공하는 예시도이다.11A and 11B are exemplary views providing a sinus diagnosis result according to an embodiment of the present invention.

도 11a은 측정 대상자의 부비동 지수가 0인 경우에 따른 진단결과를 제공하는 예시도이고, 도 10b는 측정 대상지의 부비동 지수가 좌측과 우측 각각 93점, 78점인 경우에 따른 진단 결과를 제공하는 예시도이다.11A is an exemplary view providing a diagnosis result according to a case in which the sinus index of the subject to be measured is 0, and FIG. 10B is an example of providing a diagnosis result according to the case where the sinus index of the subject to be measured is 93 points and 78 points on the left and right, respectively. It is also

즉, 도 11a에서 나타낸 것과 같이 부비동 지수가 0인 경우, 부비동 내에 농이 없기 때문에 부비동 측정 장치(200)는 음영이 칠해지지 않은 채로 진단 결과를 제공한다.That is, when the sinus index is 0 as shown in FIG. 11A , since there is no pus in the sinuses, the sinus measuring apparatus 200 provides the diagnosis result without being shaded.

반면에, 도 11b에서 나타낸 것과 같이 부비동 지수가 좌측과 우측 각각 93점, 78점이면, 부비동 측정 장치(200)는 부비동 지수에 따른 색을 달리하여 진단 결과를 제공한다On the other hand, if the sinus index is 93 points and 78 points on the left and right sides, respectively, as shown in FIG. 11B , the sinus measuring apparatus 200 provides a diagnostic result by changing colors according to the sinus index

즉, 도 11b에서 나타낸 것과 같이 부비동 지수가 0점 이상 40점 미만이면, 부비동 측정 장치(200)는 음영의 색을 녹색으로 나타내고, 부비동 지수가 40이상 70점 미만이면, 부비동 측정 장치(200)는 음영의 색을 주황색으로 나타내며, 부비동 지수가 70점이상 100점 이하이면, 부비동 측정 장치(200)는 음영의 색을 붉은색으로 나타낸다.That is, as shown in Figure 11b, if the sinus index is 0 or more and less than 40 points, the sinus measuring device 200 shows the color of the shade in green, and if the sinus index is 40 or more and less than 70 points, the sinus measuring device 200 represents the color of the shade in orange, and when the sinus index is greater than or equal to 70 and less than or equal to 100, the sinus measuring apparatus 200 represents the color of the shade in red.

또한, 부비동 측정 장치(200)는 얼굴 좌측과 우측 각각에 해당하는 부비동 지수를 수치화하여 디스플레이할 수 있다.Also, the sinus measuring apparatus 200 may numerically display the sinus index corresponding to each of the left and right sides of the face.

그리고, 부비동 측정 장치(200)는 좌측 및 우측 각각의 부비동 지수에 따른 종합의견을 제공한다.And, the sinus measurement device 200 provides a comprehensive opinion according to each of the left and right sinus index.

이와 같이 본 발명에 따르면, 적은 수의 근적외선 LED를 사용하여 발광부를 구현하여도 부비동 내에 정확한 빛의 조사가 가능하다.As described above, according to the present invention, even when a light emitting unit is implemented using a small number of near-infrared LEDs, it is possible to accurately irradiate light into the sinuses.

또한, 측정 대상자의 구강 내부 골격 구조에 따라 최적의 광 조합 비율을 획득하여 부비동 상태를 정확하게 측정할 수 있다.In addition, it is possible to accurately measure the sinus state by obtaining an optimal light combination ratio according to the internal skeletal structure of the oral cavity of the subject to be measured.

본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것이 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.Although the present invention has been described with reference to the embodiment shown in the drawings, which is only exemplary, those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. Accordingly, the true technical protection scope of the present invention should be determined by the technical spirit of the appended claims.

100: 구강 조사용 마우스피스, 110: 외측부,
120: 내측부, 130: 지지부,
140a, 140b, 140c: LED, 200: 부비동 측정 장치,
210: 제어부, 220: 촬영부,
230: 영역 설정부, 240: 선택부,
250: 데이터베이스
100: mouthpiece for oral irradiation, 110: outer part,
120: inner portion, 130: support portion,
140a, 140b, 140c: LED, 200: sinus measuring device;
210: control unit, 220: photographing unit,
230: area setting unit, 240: selection unit,
250: database

Claims (16)

부비동 진단 시스템을 이용한 구강 조사용 마우스피스의 LED 제어 방법에 있어서,
측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 상기 구강 조사용 마우스피스에 부착된 복수의 LED를 모두 발광시켜 상기 측정 대상자의 구강 내부에 광을 조사하는 단계,
부비동 측정 장치에 포함된 근적외선 카메라를 통하여 상기 측정 대상자의 얼굴을 촬영하고, 상기 얼굴에 좌측과 우측에 한 쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)를 설정하는 단계,
상기 구강 조사용 마우스피스에 부착된 복수의 LED 각각이 조사하는 광의 조합 비율을 조절하면서 상기 측정 대상자의 얼굴을 각각 촬영하는 단계,
상기 촬영을 할 때마다 촬영된 사진에 대하여 상기 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출하는 단계, 그리고
상기 제1 내지 제3 포인트 사이의 픽셀 값의 비율들을 이용하여 LED의 광 조합 비율을 선택하는 단계를 포함하는 구강 조사용 마우스피스의 LED 제어 방법.
In the LED control method of the mouthpiece for oral irradiation using a sinus diagnosis system,
A step of irradiating light into the oral cavity of the subject to be measured by emitting all of the plurality of LEDs attached to the mouthpiece for oral irradiation in a state in which the subject to be measured holds the mouthpiece for oral irradiation in his/her mouth;
The face of the subject to be measured is photographed through the near-infrared camera included in the sinus measuring device, and a pair of first points (P1), second points (P2), and third points (P3) are located on the left and right sides of the face. steps to set up,
Taking each of the face of the measurement subject while adjusting the combination ratio of the light irradiated by each of the plurality of LEDs attached to the mouthpiece for oral irradiation;
extracting each pixel value for each of the first to third points with respect to the photograph taken whenever the photographing is performed, and
Using the ratios of pixel values between the first to third points, the LED control method of a mouthpiece for oral irradiation comprising the step of selecting a light combination ratio of the LED.
제1항에 있어서,
상기 한 쌍의 제1 포인트(P1)는,
상기 근적외선 카메라를 통해 촬영된 사진에서 우측 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제1 및 제2 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 좌측 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제3 및 제4 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하고,
상기 한 쌍의 제2 포인트(P2)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 상기 제3 및 제4 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하며,
상기 한 쌍의 제3 포인트(P3)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 상기 제3 및 제4 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하는 구강 조사용 마우스피스의 LED 제어 방법.
According to claim 1,
The pair of first points (P1) is,
In the photo taken through the near-infrared camera, virtual first and second virtual lines passing through each of the inner and outer points of the right eye, and virtual first and second horizontal lines passing through each of the tip of the lips and the end of the nose intersect The point having the largest pixel value in the region, and imaginary third and fourth vertical lines passing through the inner and outer corners of the left eye, respectively, and imaginary first and second horizontal lines passing through the lip and nose end points, respectively Including the point having the largest pixel value within the intersecting area,
The pair of second points (P2) is,
A point having the largest pixel value in an area where the first and second vertical lines in the photographed picture intersect a fourth horizontal line passing through the center between the second horizontal line and a virtual third horizontal line passing through the center point of the pupil; and a point having the largest pixel value in an area where the third and fourth vertical lines and a fourth horizontal line passing through the center between the second horizontal line and a virtual third horizontal line passing through the center point of the pupil intersect,
The pair of third points P3 is,
A point having the largest pixel value in an area where the first and second vertical lines, the third horizontal line, and the fourth horizontal line intersect in the photographed picture, and the third and fourth vertical lines and the third horizontal line; And LED control method of the mouthpiece for oral irradiation comprising a point having the largest pixel value in the area where the fourth horizontal line intersects.
제1항에 있어서,
상기 구강 조사용 마우스피스는,
중앙을 중심으로 좌측 및 우측에 복수의 LED가 각각 대칭적으로 장착되는 구강 조사용 마우스피스의 LED 제어 방법.
According to claim 1,
The mouthpiece for oral irradiation,
LED control method of a mouthpiece for oral irradiation in which a plurality of LEDs are symmetrically mounted on the left and right sides of the center.
제3항에 있어서,
상기 복수의 LED는,
좌측과 우측에 각각 3개 이상으로 나열되는 구강 조사용 마우스피스의 LED 제어 방법.
4. The method of claim 3,
The plurality of LEDs,
LED control method of mouthpiece for oral irradiation, which is listed in three or more on the left and right sides, respectively.
제3항에 있어서,
상기 측정 대상자의 얼굴을 촬영하는 단계는,
상기 구강 조사용 마우스피스의 좌측 또는 우측에 위치하는 제1 LED와 인접한 제2 LED만을 턴온시킨 상태에서, 상기 제1 LED와 상기 제2 LED 사이의 광 조합 비율을 달리하면서 상기 측정 대상자의 얼굴을 촬영하는 단계, 그리고
상기 제2 LED와 인접한 제3 LED만을 턴온시킨 상태에서, 상기 제2 LED와 상기 제3 LED 사이의 광 조합 비율을 달리하면서 상기 측정 대상자의 얼굴을 촬영하는 단계를 포함하는 구강 조사용 마우스피스의 LED 제어 방법.
4. The method of claim 3,
The step of photographing the face of the subject to be measured,
In a state in which only the second LED adjacent to the first LED positioned on the left or right side of the mouthpiece for oral irradiation is turned on, the face of the measurement subject is measured while varying the light combination ratio between the first LED and the second LED filming, and
In a state in which only the third LED adjacent to the second LED is turned on, while varying the light combination ratio between the second LED and the third LED, the mouthpiece for oral irradiation comprising the step of photographing the face of the subject to be measured LED control method.
제5항에 있어서,
상기 LED의 광 조합 비율을 선택하는 단계는,
상기 제1 내지 제3 포인트 사이의 픽셀 값을 이용하여 밝기 지수를 연산하는 단계, 그리고
상기 밝기 지수가 가장 높은 경우의 LED의 광 조합 비율을 선택하는 단계를 포함하는 구강 조사용 마우스피스의 LED 제어 방법.
6. The method of claim 5,
The step of selecting the light combination ratio of the LED,
calculating a brightness index using pixel values between the first and third points; and
LED control method of the mouthpiece for oral irradiation comprising the step of selecting the light combination ratio of the LED when the brightness index is the highest.
제6항에 있어서,
상기 밝기 지수를 연산하는 단계는,
다음의 수학식을 이용하여 연산하는 구강 조사용 마우스피스의 LED 제어 방법.
Figure 112020031814463-pat00009

여기서, U 및 V는 계수이다.
7. The method of claim 6,
Calculating the brightness index comprises:
LED control method of the mouthpiece for oral irradiation calculated using the following equation.
Figure 112020031814463-pat00009

where U and V are coefficients.
제1항에 있어서,
상기 측정 대상자 별로 선택된 상기 LED의 광 조합 비율을 매칭하여 저장하는 단계를 더 포함하는 구강 조사용 마우스피스의 LED 제어 방법.
According to claim 1,
LED control method of the mouthpiece for oral irradiation further comprising the step of matching and storing the light combination ratio of the LED selected for each measurement target.
구강 조사용 마우스피스를 제어하기 위한 부비동 진단 시스템에 있어서,
측정 대상자가 구강 조사용 마우스피스를 입에 문 상태에서, 상기 구강 조사용 마우스피스에 부착된 복수의 LED를 모두 발광시켜 상기 측정 대상자의 구강 내부에 광을 조사하도록 제어하는 제어부,
상기 제어부가 상기 구강 조사용 마우스피스에 부착된 복수의 LED 각각이 조사하는 광의 비율을 조절하면, 근적외선 카메라를 통하여 상기 측정 대상자의 얼굴을 각각 촬영하는 촬영부,
상기 얼굴에 좌측과 우측에 한쌍의 제1 포인트(P1), 제2 포인트(P2) 및 제3 포인트(P3)을 설정하는 설정부, 그리고
상기 촬영을 할 때마다 촬영된 사진에 대하여 상기 제1 내지 제3 포인트별로 각각의 픽셀 값을 추출하고, 상기 제1 내지 제3 포인트 사이의 픽셀 값의 비율들을 이용하여 LED의 광 조합 비율을 선택하는 선택부를 포함하는 부비동 진단 시스템.
In the sinus diagnosis system for controlling a mouthpiece for oral examination,
A control unit that controls to irradiate light into the oral cavity of the subject by emitting all of the plurality of LEDs attached to the mouthpiece for oral irradiation in a state where the subject to be measured holds the mouthpiece for oral irradiation in his/her mouth,
When the control unit adjusts the ratio of the light irradiated by each of the plurality of LEDs attached to the mouthpiece for oral irradiation, a photographing unit for photographing the face of the measurement subject through a near-infrared camera,
A setting unit for setting a pair of first points (P1), second points (P2) and third points (P3) on the left and right sides of the face, and
Each time a photograph is taken, each pixel value is extracted for each of the first to third points, and a light combination ratio of the LED is selected using the ratios of the pixel values between the first to third points. A sinus diagnosis system comprising a selection unit to:
제9항에 있어서,
상기 제1 포인트(P1)는,
상기 한 쌍의 제1 포인트(P1)는,
상기 근적외선 카메라를 통해 촬영된 사진에서 우측 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제1 및 제2 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 좌측 눈의 안쪽지점 및 바깥쪽지점 각각을 지나는 가상의 제3 및 제4 수직선, 및 입술 끝점과 코 끝점 각각을 지나는 가상의 제1 및 제2 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하고,
상기 한 쌍의 제2 포인트(P2)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 상기 제3 및 제4 수직선, 상기 제2 수평선과 눈동자의 중심점을 지나는 가상의 제3 수평선 사이의 중심을 통과하는 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하며,
상기 한 쌍의 제3 포인트(P3)는,
상기 촬영된 사진에서 상기 제1 및 제2 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점, 및 상기 제3 및 제4 수직선, 상기 제3 수평선, 및 상기 제4 수평선이 교차되는 영역 내에 가장 큰 픽셀 값을 가지는 지점을 포함하는 부비동 진단 시스템.
10. The method of claim 9,
The first point (P1) is,
The pair of first points (P1) is,
In the photo taken through the near-infrared camera, virtual first and second virtual lines passing through each of the inner and outer points of the right eye, and virtual first and second horizontal lines passing through each of the tip of the lips and the end of the nose intersect The point having the largest pixel value in the region, and imaginary third and fourth vertical lines passing through the inner and outer corners of the left eye, respectively, and imaginary first and second horizontal lines passing through the lip and nose end points, respectively Including the point having the largest pixel value within the intersecting area,
The pair of second points (P2) is,
A point having the largest pixel value in an area where the first and second vertical lines in the photographed picture intersect a fourth horizontal line passing through the center between the second horizontal line and a virtual third horizontal line passing through the center point of the pupil; and a point having the largest pixel value in an area where the third and fourth vertical lines and a fourth horizontal line passing through the center between the second horizontal line and a virtual third horizontal line passing through the center point of the pupil intersect,
The pair of third points P3 is,
A point having the largest pixel value in an area where the first and second vertical lines, the third horizontal line, and the fourth horizontal line intersect in the photographed picture, and the third and fourth vertical lines and the third horizontal line; and a point having a largest pixel value within an area where the fourth horizontal line intersects.
제9항에 있어서,
상기 구강 조사용 마우스피스는,
중앙을 중심으로 좌측 및 우측에 복수의 LED가 각각 대칭적으로 장착되는 부비동 진단 시스템.
10. The method of claim 9,
The mouthpiece for oral irradiation,
A sinus diagnosis system in which a plurality of LEDs are symmetrically mounted on the left and right sides of the center, respectively.
제11항에 있어서,
상기 복수의 LED는,
좌측과 우측에 각각 3개 이상으로 나열되는 부비동 진단 시스템.
12. The method of claim 11,
The plurality of LEDs,
Sinus diagnostic system, listed as three or more each on the left and right.
제11항에 있어서,
상기 제어부는,
상기 구강 조사용 마우스피스의 좌측 또는 우측에 위치하는 제1 LED와 인접한 제2 LED만을 턴온시킨 상태에서, 상기 제1 LED와 상기 제2 LED 사이의 광 조합 비율을 달리하면서 상기 측정 대상자의 얼굴을 촬영하도록 하고,
상기 제2 LED와 인접한 제3 LED만을 턴온시킨 상태에서, 상기 제2 LED와 상기 제3 LED 사이의 광 조합 비율을 달리하면서 상기 측정 대상자의 얼굴을 촬영하도록 하는 부비동 진단 시스템.
12. The method of claim 11,
The control unit is
In a state in which only the second LED adjacent to the first LED positioned on the left or right side of the mouthpiece for oral irradiation is turned on, the face of the measurement subject is measured while varying the light combination ratio between the first LED and the second LED to shoot,
In a state in which only the third LED adjacent to the second LED is turned on, the sinus diagnosis system is configured to photograph the face of the subject to be measured while varying the light combination ratio between the second LED and the third LED.
제13항에 있어서,
상기 선택부는,
상기 제1 내지 제3 포인트 사이의 픽셀 값을 이용하여 밝기 지수를 연산하고, 상기 밝기 지수가 가장 높은 경우의 LED의 광 조합 비율을 선택하는 부비동 진단 시스템.
14. The method of claim 13,
The selection unit,
A sinus diagnosis system for calculating a brightness index using the pixel values between the first to third points, and selecting a light combination ratio of the LED when the brightness index is the highest.
제14항에 있어서,
상기 밝기 지수는,
다음의 수학식을 이용하여 연산하는 부비동 진단 시스템:
Figure 112020031814463-pat00010

여기서, U 및 V는 계수이다.
15. The method of claim 14,
The brightness index is
A sinus diagnosis system that calculates using the following equation:
Figure 112020031814463-pat00010

where U and V are coefficients.
제9항에 있어서,
상기 측정 대상자 별로 상기 LED의 광 조합 비율을 매칭하여 저장하는 데이터베이스를 더 포함하는 부비동 진단 시스템.
10. The method of claim 9,
Sinus diagnosis system further comprising a database for matching and storing the light combination ratio of the LED for each measurement target.
KR1020200036913A 2020-03-26 2020-03-26 System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same KR102363306B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200036913A KR102363306B1 (en) 2020-03-26 2020-03-26 System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200036913A KR102363306B1 (en) 2020-03-26 2020-03-26 System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same

Publications (2)

Publication Number Publication Date
KR20210120330A KR20210120330A (en) 2021-10-07
KR102363306B1 true KR102363306B1 (en) 2022-02-16

Family

ID=78114924

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200036913A KR102363306B1 (en) 2020-03-26 2020-03-26 System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same

Country Status (1)

Country Link
KR (1) KR102363306B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140221843A1 (en) 2013-02-02 2014-08-07 The Regents Of The University Of California Near-infrared imaging for diagnosis of sinusitis
KR101653180B1 (en) 2008-07-30 2016-09-01 아클라런트, 인코포레이션 Paranasal ostium finder devices and methods

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102281196B1 (en) * 2018-11-19 2021-07-22 울산과학기술원 A mouthpiece using a near-infrared light source to observe the sinus

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101653180B1 (en) 2008-07-30 2016-09-01 아클라런트, 인코포레이션 Paranasal ostium finder devices and methods
US20140221843A1 (en) 2013-02-02 2014-08-07 The Regents Of The University Of California Near-infrared imaging for diagnosis of sinusitis

Also Published As

Publication number Publication date
KR20210120330A (en) 2021-10-07

Similar Documents

Publication Publication Date Title
US20200178780A1 (en) Video Laryngoscope Systems
ES2901406T3 (en) Meibomian Gland Imaging Eyelid Illumination Systems and Methods for Meibomian Gland Analysis
US7845797B2 (en) Custom eyeglass manufacturing method
US11051716B2 (en) Method and apparatus for jaundice diagnosis based on an image
US20170311872A1 (en) Organ image capture device and method for capturing organ image
CN106714651B (en) Evaluate value calculation apparatus and electronic endoscope system
WO2017223208A1 (en) Wide field fundus camera with auto-montage at a single alignment
CN112351723B (en) Electronic endoscope system and data processing device
CN106773080A (en) 3 d display device and display methods
KR102363306B1 (en) System for sinus diagnosis and method for controlling led include oral illumination apparatus using the same
KR20200089204A (en) Eye tracking system for mild cognitive impairment
CN112930136B (en) Electronic endoscope system and data processing device
JP2006305332A (en) Image processor and endoscope using the same
JP3711053B2 (en) Line-of-sight measurement device and method, line-of-sight measurement program, and recording medium recording the program
KR102363308B1 (en) System for sinus diagnosis and method for performed by the same
CN112888356A (en) Electronic endoscope system and data processing device
KR20210120334A (en) System for sinus diagnosis and method of synchroniz near-infrared image using the same
KR102363307B1 (en) System for sinus diagnosis and method for position determination of oral illumination appartus using the same
WO2022009285A1 (en) Processing device, processing program, processing method, and processing system
US20130272571A1 (en) Human submental profile measurement
KR20210120335A (en) System for sinus diagnosis and optimal near-infrared image acquisition method using the same
KR102406999B1 (en) System for sinus diagnosis and method for determining sinus status performed by the same
US20160228054A1 (en) Organ imaging device
US20230386682A1 (en) Systems and methods to chronologically image orthodontic treatment progress
KR20120058388A (en) Apparatus for self-photographing a face image

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right