WO2023090828A1 - Perfusion imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법 - Google Patents
Perfusion imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법 Download PDFInfo
- Publication number
- WO2023090828A1 WO2023090828A1 PCT/KR2022/018025 KR2022018025W WO2023090828A1 WO 2023090828 A1 WO2023090828 A1 WO 2023090828A1 KR 2022018025 W KR2022018025 W KR 2022018025W WO 2023090828 A1 WO2023090828 A1 WO 2023090828A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- dimensional
- bio
- measurement
- contact
- light source
- Prior art date
Links
- 238000005259 measurement Methods 0.000 title claims abstract description 135
- 230000010412 perfusion Effects 0.000 title claims abstract description 72
- 238000003384 imaging method Methods 0.000 title claims abstract description 65
- 230000004044 response Effects 0.000 title claims abstract description 65
- 210000003403 autonomic nervous system Anatomy 0.000 title claims abstract description 64
- 238000000034 method Methods 0.000 title claims abstract description 48
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 claims abstract description 59
- 229910052760 oxygen Inorganic materials 0.000 claims abstract description 59
- 239000001301 oxygen Substances 0.000 claims abstract description 59
- 230000036772 blood pressure Effects 0.000 claims abstract description 50
- 238000012545 processing Methods 0.000 claims abstract description 43
- 238000003745 diagnosis Methods 0.000 claims abstract description 39
- 230000017531 blood circulation Effects 0.000 claims abstract description 31
- 230000001678 irradiating effect Effects 0.000 claims abstract description 11
- 238000000691 measurement method Methods 0.000 claims description 13
- 230000003902 lesion Effects 0.000 claims description 11
- 230000008859 change Effects 0.000 claims description 8
- 238000013528 artificial neural network Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 30
- 238000009530 blood pressure measurement Methods 0.000 description 10
- 238000009792 diffusion process Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 238000013399 early diagnosis Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 208000004210 Pressure Ulcer Diseases 0.000 description 3
- 239000008280 blood Substances 0.000 description 3
- 210000004369 blood Anatomy 0.000 description 3
- 238000009532 heart rate measurement Methods 0.000 description 3
- 102000001554 Hemoglobins Human genes 0.000 description 2
- 108010054147 Hemoglobins Proteins 0.000 description 2
- 206010052428 Wound Diseases 0.000 description 2
- 208000027418 Wounds and injury Diseases 0.000 description 2
- 230000003321 amplification Effects 0.000 description 2
- 230000008081 blood perfusion Effects 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000031700 light absorption Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 206010011985 Decubitus ulcer Diseases 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000000653 nervous system Anatomy 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000010561 standard procedure Methods 0.000 description 1
- 230000009385 viral infection Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/021—Measuring pressure in heart or blood vessels
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/026—Measuring blood flow
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/026—Measuring blood flow
- A61B5/0261—Measuring blood flow using optical means, e.g. infrared light
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
- A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
Definitions
- the present invention relates to a multidimensional biosignal measurement system and method, and more particularly, to a perfusion imaging based non-contact autonomic nervous system response multidimensional biosignal measurement system and method.
- existing non-contact biometric systems individually measure a single biosignal, and most systems are designed to measure heart rate.
- the multi-biometric signal measuring system also measures within the visible region using a general camera, it is sensitive to noise and has low accuracy, and there are limitations in that feature points are often lost during bio-signal measurement.
- the existing system uses a channel separation method to measure oxygen saturation in the visible ray region, and this method uses the difference in light absorption wavelength between oxidized hemoglobin and hemoglobin.
- an amplification process is required to calculate it, and many estimates are included in this process, resulting in poor accuracy.
- the present invention has been proposed to solve the above problems of previously proposed methods, and includes a light source unit that irradiates a light source outside the visible light region for measuring multi-dimensional bio-signals in a non-contact manner, and amplification reflected after being irradiated by the light source unit.
- Heart rate, oxygen saturation, blood flow per second and
- By including a measurement and diagnosis unit that measures blood pressure it overcomes the limitations of existing individual bio-signal measurement systems, increases the accuracy of bio-signal measurement and diagnosis through image processing excluding noise observed in the visible area, and multi-dimensional accordingly. Its purpose is to provide a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional biosignal measurement system and method that further improves the efficiency and convenience of biosignal measurement.
- the present invention measures non-contact bio signals using a multi-dimensional multi-spectral camera capable of reducing visible light noise, and configures such that heart rate, oxygen saturation, blood flow per second, and blood pressure can be sequentially measured.
- Another object is to provide a perfusion imaging-based non-contact autonomic nervous system response multidimensional bio-signal measurement system and method that enable early diagnosis of lesions that are difficult to measure quantitatively using signals.
- a light source unit irradiating a light source outside the visible light region for measuring multi-dimensional bio-signals in a non-contact manner
- a multi-dimensional multi-spectral camera for photographing the amplified reflected light emitted from the light source unit and then reflected, and generating an image sequence of a biosignal according to the amplified light
- It is characterized in that it includes a measurement diagnostic unit for measuring heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of an image sequence of biosignals generated by taking pictures from the multi-dimensional multispectral camera.
- the light source unit Preferably, the light source unit, the light source unit, and
- a light source outside the visible light region for measuring multidimensional bio-signals in a non-contact manner may be irradiated, but two light sources having different wavelengths may be irradiated.
- the light source unit More preferably, the light source unit,
- Two light sources having different wavelengths outside the visible light range for non-contact measurement of multi-dimensional bio-signals may be composed of a red LED emitting red light and an infrared LED emitting infrared light.
- the multi-dimensional multispectral camera Preferably, the multi-dimensional multispectral camera,
- It may be composed of an infrared camera that generates an image sequence of a biosignal by capturing the amplified reflected light emitted from the light source unit 110 and then reflected.
- the measurement diagnosis unit Preferably, the measurement diagnosis unit, the measurement diagnosis unit, and
- Heart rate, oxygen saturation, blood flow per second, and blood pressure are measured through image processing of the image sequence of biosignals generated by taking pictures from the multi-dimensional multispectral camera, and Heart rate can be measured by extracting effective pixels by clustering.
- the measurement diagnosis unit More preferably, the measurement diagnosis unit,
- Oxygen saturation may be measured by receiving an image sequence of amplified reflected light that is reflected by alternately emitting light from the red LED and the infrared LED of the light source unit from the multi-dimensional multi-spectral camera.
- the measurement diagnosis unit Even more preferably, the measurement diagnosis unit,
- Blood pressure can be measured without physical contact using the measured heart rate and oxygen saturation and the change in blood flow per second measured through the deep neural network based on the measured amount of reflected light.
- the measurement diagnosis unit Even more preferably, the measurement diagnosis unit,
- an image processing unit for signal-processing an image of an image sequence of a biosignal generated by photographing from the multi-dimensional multispectral camera
- a bio-signal measurer for measuring heart rate, oxygen saturation, and blood pressure using the signal-processed image from the image processor
- a diagnostic unit for diagnosing lesions using the heart rate, oxygen saturation, and blood pressure measured through the bio-signal measuring unit may be included.
- the measurement diagnostic unit includes the step of measuring heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of the image sequence of the biosignal generated by photographing from the multi-dimensional multispectral camera. .
- the light source unit Preferably, the light source unit, the light source unit, and
- a light source outside the visible light region for measuring multidimensional bio-signals in a non-contact manner may be irradiated, but two light sources having different wavelengths may be irradiated.
- the light source unit More preferably, the light source unit,
- Two light sources having different wavelengths outside the visible light range for non-contact measurement of multi-dimensional bio-signals may be composed of a red LED emitting red light and an infrared LED emitting infrared light.
- the multi-dimensional multispectral camera Preferably, the multi-dimensional multispectral camera,
- It may be composed of an infrared camera that generates an image sequence of a biosignal by capturing the amplified reflected light emitted from the light source unit 110 and then reflected.
- the measurement diagnosis unit Preferably, the measurement diagnosis unit, the measurement diagnosis unit, and
- Heart rate, oxygen saturation, blood flow per second, and blood pressure are measured through image processing of the image sequence of biosignals generated by taking pictures from the multi-dimensional multispectral camera, and Heart rate can be measured by extracting effective pixels by clustering.
- the measurement diagnosis unit More preferably, the measurement diagnosis unit,
- Oxygen saturation may be measured by receiving an image sequence of amplified reflected light that is reflected by alternately emitting light from the red LED and the infrared LED of the light source unit from the multi-dimensional multi-spectral camera.
- the measurement diagnosis unit Even more preferably, the measurement diagnosis unit,
- Blood pressure can be measured without physical contact using the measured heart rate and oxygen saturation and the change in blood flow per second measured through the deep neural network based on the measured amount of reflected light.
- the measurement diagnosis unit Even more preferably, the measurement diagnosis unit,
- an image processing unit for signal-processing an image of an image sequence of a biosignal generated by photographing from the multi-dimensional multispectral camera
- a bio-signal measurer for measuring heart rate, oxygen saturation, and blood pressure using the signal-processed image from the image processor
- a diagnostic unit for diagnosing lesions using the heart rate, oxygen saturation, and blood pressure measured through the bio-signal measuring unit may be included.
- a light source unit irradiating a light source outside the visible light region for measuring multi-dimensional bio-signals in a non-contact manner, and reflection after being irradiated by the light source unit heart rate, oxygen saturation, and blood flow per second through image processing of a multi-dimensional multi-spectral camera that photographs the amplified reflected light and generates an image sequence of bio-signals accordingly, and image sequences of bio-signals generated by taking pictures from the multi-dimensional multi-spectral camera , and a measurement and diagnosis unit for measuring blood pressure, thereby overcoming the limitations of existing individual bio-signal measurement systems and increasing the accuracy of bio-signal measurement and diagnosis through image processing excluding noise observed in the visible region.
- Efficiency and convenience of multidimensional bio-signal measurement according to the present invention can be further improved.
- a non-contact bio-signal is measured using a multi-dimensional multi-spectral camera capable of reducing visible light noise, so that heart rate, oxygen saturation, blood flow per second, and blood pressure measurement can be sequentially measured, so that it is possible to early diagnose lesions that are difficult to measure quantitatively using multi-dimensional complex bio-signals.
- FIG. 1 is a diagram showing the configuration of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system in functional blocks according to an embodiment of the present invention.
- FIG. 2 is a diagram showing the configuration of a light source unit of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measuring system according to an embodiment of the present invention in functional blocks.
- FIG. 3 is a diagram showing the configuration of a measurement diagnosis unit of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system in functional blocks according to an embodiment of the present invention.
- FIG. 4 is a diagram showing the concept of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 5 is a diagram showing a configuration for extracting effective pixels by clustering in image processing of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 6 is a diagram showing the configuration of oxygen saturation measurement of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 7 is a diagram showing a perfusion measurement configuration of a non-contact autonomic nervous system response multidimensional biosignal measurement system based on perfusion imaging according to an embodiment of the present invention.
- FIG. 8 is a diagram showing the configuration of multi-frame high-resolution image processing of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 9 is a diagram showing a configuration for measuring diffusion time by changing the position of a feature point in an image sequence of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 10 is a diagram illustrating heart rate measurement results of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional biosignal measurement system according to an embodiment of the present invention.
- FIG. 11 is a diagram showing oxygen saturation measurement of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 12 is a diagram showing oxygen saturation measurement results of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 13 is a view showing the feature point loss test results of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 14 is a diagram showing blood pressure measurement test results of a perfusion imaging-based non-contact autonomic nervous system response multidimensional biosignal measurement system according to an embodiment of the present invention.
- FIG. 15 is a diagram showing the skin conditions of pressure sores in stages in the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional biosignal measurement system according to an embodiment of the present invention.
- 16 is a diagram showing the flow of a non-contact autonomic nervous system response multidimensional bio-signal measurement method based on Perfusion Imaging according to an embodiment of the present invention.
- S120 A multi-dimensional multi-spectral camera photographing the reflected light emitted from the light source unit and then reflected, and generating an image sequence of the biosignal accordingly.
- S130 measuring heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of an image sequence of a biosignal generated by a measurement diagnostic unit photographed from a multi-dimensional multispectral camera
- FIG. 1 is a diagram showing the configuration of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional biosignal measurement system in functional blocks according to an embodiment of the present invention
- FIG. 2 is a non-contact autonomous autonomous system based on perfusion imaging according to an embodiment of the present invention.
- Figure 3 is a diagram showing the configuration of the light source unit of the nervous system response multidimensional biosignal measurement system in functional blocks
- FIG. 4 is a diagram showing the concept of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention. As shown in FIGS.
- the Perfusion Imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measuring system 100 is a visible light region for measuring multi-dimensional bio-signals in a non-contact manner.
- a light source unit 110 that irradiates an external light source, a multi-dimensional multi-spectral camera 120 that photographs the amplified reflected light emitted from the light source unit 110 and then reflected, and generates an image sequence of bio-signals accordingly, and a multi-dimensional multi-spectral camera.
- It may be configured to include a measurement diagnostic unit 130 that measures heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of an image sequence of bio-signals generated by photographing from the camera 120 .
- a specific configuration of a perfusion imaging-based non-contact autonomic nervous system response multidimensional bio-signal measurement system according to an embodiment of the present invention will be described with reference to the accompanying drawings.
- FIG. 5 is a diagram showing a configuration for extracting effective pixels by clustering in image processing of a perfusion imaging-based non-contact autonomic nervous system response multidimensional biosignal measurement system according to an embodiment of the present invention.
- FIG. It is a diagram showing the configuration of oxygen saturation measurement of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment
- FIG. 7 is perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement according to an embodiment 8 is a diagram showing the configuration of a perfusion measurement system
- FIG. 8 is a diagram showing the configuration of multi-frame high-resolution image processing of a perfusion imaging-based non-contact autonomic nervous system response multidimensional biosignal measurement system according to an embodiment of the present invention.
- the light source unit 110 is a component that irradiates a light source outside the visible light region for measuring multi-dimensional bio-signals in a non-contact manner.
- the light source unit 110 may irradiate a light source outside the visible light region for measuring multi-dimensional bio signals in a non-contact manner, but may irradiate two light sources having different wavelengths.
- the light source unit 110 is two light sources having different wavelengths outside of the visible light region for measuring multidimensional bio signals in a non-contact manner, and includes a red LED 111 emitting red light and an infrared LED 112 emitting infrared light. can be configured.
- the light source unit 110 may be composed of 765 nm and 880 nm LEDs. As shown in FIG. 6 , the light source unit 110 may have a structure in which a red LED 111 and an infrared LED 112 are arranged in alignment.
- the multi-dimensional multi-spectral camera 120 is a camera component that captures amplified reflected light emitted from the light source unit 110 and then reflected, and generates an image sequence of a biosignal based on the amplified light.
- the multi-dimensional multi-spectral camera 120 may be configured as an infrared camera that generates an image sequence of a biosignal by capturing amplified reflected light emitted from the light source unit 110 and then reflected.
- the image sequence of the bio-signal captured through the multi-dimensional multi-spectral camera 120 is a perfusion image of the subject.
- the multi-dimensional multispectral camera 120 is a camera configuration that reduces visible light noise and measures the amplified reflected light of the light source irradiated through the light source unit 110, and is physically separated from the measurement diagnosis unit 130. can be configured,
- the measurement diagnosis unit 130 is a component that measures heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of an image sequence of biosignals generated by taking pictures from the multi-dimensional multispectral camera 120 .
- the measurement diagnosis unit 130 measures heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of an image sequence of biosignals generated by taking pictures from the multi-dimensional multispectral camera 120, as shown in FIG.
- the heart rate can be measured by extracting valid pixels by clustering from the image sequence of the biosignal generated by taking pictures from the multi-dimensional multispectral camera 120 .
- the measurement diagnostic unit 130 alternately emits light from the red LED 111 and the infrared LED 112 of the light source unit 110 from the multi-dimensional multi-spectral camera 120 and reflects the light. Oxygen saturation can be measured by receiving an image sequence in which the amplified reflected light is photographed.
- the measurement diagnosis unit 130 may measure blood pressure without physical contact by using the measured heart rate and oxygen saturation and the change in blood flow per second measured through the deep neural network based on the measured amount of reflected light.
- such blood pressure measurement can be made into a high-resolution image by overlapping low-resolution images, and blood pressure can be measured through the diffusion of feature points in the high-resolution image. That is, the blood pressure measurement calculates the blood pressure based on the blood flow rate and blood volume that affect the blood pressure, and in detail, the regression model calculates the blood pressure using the calculated diffusion vector mean, heart rate, oxygen saturation, and perfusion amplitude. Perfusion diffusion time can be measured by tracking contour feature points.
- the measurement diagnosis unit 130 includes an image processing unit 131 that processes an image of an image sequence of a biosignal generated by taking a picture from the multi-dimensional multispectral camera 120, and a signal-processed image from the image processing unit 131.
- a biosignal measurement unit 132 for measuring heart rate, oxygen saturation, and blood pressure using the biosignal measurement unit 132 and a diagnosis unit 133 for diagnosing lesions using the heart rate, oxygen saturation, and blood pressure measured through the biosignal measurement unit 132 It can be configured including.
- the measurement diagnosis unit 130 uses a linkage technology using a statistical method, ensemble learning, and deep learning technology based on the advancement of key element technologies of biosignals, image processing, and clinical information, and measured multidimensional complex biosignals. It can function to enable early diagnosis of lesions that are difficult to measure quantitatively.
- FIG. 9 is a diagram showing a configuration for measuring diffusion time by changing the position of a feature point in an image sequence of a perfusion imaging-based non-contact autonomic nervous system response multidimensional bio-signal measurement system according to an embodiment of the present invention.
- FIG. 10 is a diagram illustrating heart rate measurement results of a perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention. As shown in FIG. 10, the difference between the actual heart rate and the measured data value captured by the camera was confirmed. The HRV value measured using the image sequence and the PPG pulse measured with the Biopac MP150 were compared. As can be seen from the results, the average accuracy error of the previous method was 0.96% and the method according to the present invention was 0.63%.
- FIG. 11 is a diagram illustrating oxygen saturation measurement of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- the heart rate was calculated by changing the oxygen saturation contour (contour) value captured by the IR camera.
- image sequences to measure pulse oximeters with a non-contact method, select border areas showing ranges of fluctuations in oxygen saturation, track changes in pixel values after selection, and average the values with BioPac and conventional methods. compared.
- FIG. 12 is a diagram showing oxygen saturation measurement results of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- the average accuracy error of the existing method is 1.30%, and the method according to the present invention shows 0.53%.
- each standard deviation value is 1.1 in the case of the existing method and 0.5 in the case of the method according to the present invention.
- FIG. 13 is a diagram showing the feature point loss test results of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention. As shown in FIG. 13, the number of feature points over time in the original image and the super-resolution image was compared. The feature point loss rate of the original image is 8.23% per 100 frames, and the loss rate of the super-resolution image is 4.04%.
- FIG. 14 is a diagram illustrating test results of blood pressure measurement of the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention.
- the cuff-based method which is a standard method in the medical field, and the visual camera-based method were compared, and the average error of blood pressure was 2.07%, indicating an improvement of 3.86% compared to the existing method.
- FIG. 15 is a diagram illustrating skin conditions of pressure ulcers in stages in the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional biosignal measurement system according to an embodiment of the present invention. As shown in FIG. 15 , when a wound occurs, a change in blood perfusion occurs due to a change in skin density or blood volume, and thus, wounds and bedsores can be detected.
- FIG. 16 shows the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system according to an embodiment of the present invention uses a multi-spectral camera to overcome the limitations of the existing non-contact system and detects noise observed in the visible region. excluded, and blood perfusion was measured to improve the accuracy of biosignal measurement. In addition, clustering and super-resolution techniques were used to overcome the limitations of measurement sites. As a result, the heart rate measurement error rate was 0.63% and the oxygen saturation measurement error rate was 0.53%, which was improved compared to the existing method, and the average error in blood pressure measurement was 0.207%. values, and it was found that bio-signal measurement was improved by 50-60% compared to the existing method.
- the light source irradiates a light source other than the visible light region for measuring multi-dimensional bio-signals in a non-contact manner.
- step S110 the light source unit 110 irradiates a light source outside the visible light region for measuring multi-dimensional bio-signals in a non-contact manner.
- the light source unit 110 may irradiate a light source outside the visible light region for measuring multidimensional bio-signals in a non-contact manner, but may irradiate two light sources having different wavelengths.
- the light source unit 110 is two light sources having different wavelengths outside of the visible light region for measuring multidimensional bio signals in a non-contact manner, and includes a red LED 111 emitting red light and an infrared LED 112 emitting infrared light. can be configured.
- the light source unit 110 may be composed of 765 nm and 880 nm LEDs. As shown in FIG. 6 , the light source unit 110 may have a structure in which a red LED 111 and an infrared LED 112 are arranged in alignment.
- the multi-dimensional multispectral camera 120 captures the reflected light emitted from the light source unit 110 and reflected, and generates an image sequence of the biosignal accordingly.
- the multi-dimensional multi-spectral camera 120 in step S120 may be configured as an infrared camera that generates an image sequence of a biosignal by photographing amplified reflected light emitted from the light source unit 110 and then reflected.
- the image sequence of the bio-signal captured through the multi-dimensional multi-spectral camera 120 is a perfusion image of the subject.
- the multi-dimensional multispectral camera 120 is a camera configuration that reduces visible light noise and measures the amplified reflected light of the light source irradiated through the light source unit 110, and is physically separated from the measurement diagnosis unit 130. can be configured,
- step S130 the measurement diagnostic unit 130 measures the heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of the image sequence of the bio-signals generated by taking pictures from the multi-dimensional multispectral camera 120.
- the measurement diagnosis unit 130 measures the heart rate, oxygen saturation, blood flow per second, and blood pressure through image processing of the image sequence of the biosignal generated by photographing from the multi-dimensional multispectral camera 120, but FIG. As shown in , the heart rate can be measured by extracting valid pixels by clustering from an image sequence of biosignals generated by taking pictures from the multi-dimensional multispectral camera 120 .
- the measurement diagnostic unit 130 alternately emits light from the red LED 111 and the infrared LED 112 of the light source unit 110 from the multi-dimensional multi-spectral camera 120 and reflects the light. Oxygen saturation can be measured by receiving an image sequence in which the amplified reflected light is photographed.
- the measurement diagnosis unit 130 may measure blood pressure without physical contact by using the measured heart rate and oxygen saturation and the change in blood flow per second measured through the deep neural network based on the measured amount of reflected light. As shown in FIG. 8 , such blood pressure measurement can be made into a high-resolution image by overlapping low-resolution images, and blood pressure can be measured through the diffusion of feature points in the high-resolution image. That is, the blood pressure measurement calculates the blood pressure based on the blood flow rate and blood volume that affect the blood pressure, and in detail, the regression model calculates the blood pressure using the calculated diffusion vector mean, heart rate, oxygen saturation, and perfusion amplitude.
- the measurement diagnosis unit 130 includes an image processing unit 131 that processes an image of an image sequence of a biosignal generated by taking a picture from the multi-dimensional multispectral camera 120, and a signal-processed image from the image processing unit 131.
- a biosignal measurement unit 132 for measuring heart rate, oxygen saturation, and blood pressure using the biosignal measurement unit 132 and a diagnosis unit 133 for diagnosing lesions using the heart rate, oxygen saturation, and blood pressure measured through the biosignal measurement unit 132 It can be configured including. That is, the measurement diagnosis unit 130 uses a statistical method, ensemble learning, and deep learning technology based on the advancement of key element technologies of biosignals, image processing, and clinical information, and measured multidimensional composite biosignals. It can function to enable early diagnosis of lesions that are difficult to measure quantitatively.
- the perfusion imaging-based non-contact autonomic nervous system response multi-dimensional bio-signal measurement system and method include a light source unit for irradiating a light source other than the visible light region for measuring multi-dimensional bio-signals in a non-contact manner; A multi-dimensional multi-spectral camera that captures the amplified reflected light emitted from the light source and then reflected and generates an image sequence of bio-signals accordingly, and heart rate through image processing of the image sequence of bio-signals generated by taking pictures from the multi-dimensional multi-spectrum camera.
- Oxygen saturation, blood flow per second, and blood pressure are included, thereby overcoming the limitations of existing individual bio-signal measurement systems and measuring and diagnosing bio-signals through image processing excluding noise observed in the visible region. It can improve the accuracy of multi-dimensional bio-signal measurement, and the efficiency and convenience of multi-dimensional bio-signal measurement can be further improved. By configuring saturation, blood flow per second, and blood pressure to be sequentially measured, it is possible to perform early diagnosis of lesions that are difficult to measure quantitatively using multi-dimensional complex bio-signals.
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Cardiology (AREA)
- Pathology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Biophysics (AREA)
- Physiology (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Optics & Photonics (AREA)
- Hematology (AREA)
- Vascular Medicine (AREA)
- Pulmonology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
본 발명에서 제안하고 있는 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법에 따르면, 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 광원부와, 광원부에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 다차원 멀티스펙트럼 카메라와, 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 측정 진단부를 포함하여 구성함으로써, 기존의 개별 생체신호 측정 시스템의 한계점을 극복하고, 가시 영역에서 관찰되는 노이즈를 배제한 영상 처리를 통한 생체신호 측정 및 진단의 정확도를 높이며, 그에 따른 다차원 생체신호 측정의 효율성 및 편의성이 더욱 향상될 수 있도록 할 수 있다.
Description
본 발명은 다차원 바이오신호 측정 시스템 및 방법에 관한 것으로서, 보다 구체적으로는 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법에 관한 것이다.
최근 들어 신종 바이러스 감염증으로 인하여 원격진료와 디지털 치료제와 같이 데이터를 기반으로 소프트웨어를 사용하여 질병을 예방하고, 관리 치료하는 비대면 의료 시스템의 필요성이 강조되고 있다. 이러한 경향에 맞춰 전통적인 센서를 통한 생체신호 계측을 대신한 다양한 방법들에 관한 연구가 진행되고 있다. 기존의 부착형 센서를 대신하기 위하여 개발된 시스템들은 가시광선 영역의 영상을 기반으로 생체신호등을 예측하고 있다.
하지만 이러한 방식은 다양한 한계점을 가지고 있다. 비대면 의료 시스템의 효과를 극대화하기 위해서는 다양한 환경에서 다수의 생체신호를 한 번에 정확하게 측정해야 하지만 기존의 비접촉 생체계측 시스템들은 대부분 심박수, 산소포화도 또는 혈압 등의 단일 생체신호를 측정할 수 있게 되어 있으며, 외부 조명등과 같은 외부요인에 의해 정확도에 많은 영향을 받는다. 또한, 혈압 측정 방식의 경우 대부분 혈류속도에 기반 하여 계산하며 이에 따라 완벽한 비접촉 시스템 구현이 어려운 실정이다.
이와 같이, 기존의 비접촉식 생체측정 시스템은, 개별로 단일 생체 신호를 측정하고, 대부분의 시스템은 심박수를 측정하도록 설계된다. 또한, 다중 생체 신호 측정 시스템도 일반 카메라를 사용하여 가시 영역 내에서 측정하므로 노이즈에 민감하고 정확도가 낮으며, 생체 신호 측정 시 특징점의 손실이 자주 발생하는 한계가 있었다. 특히, 산소포화도의 경우 기존 시스템은 채널 분리 방식을 사용하여 가시광선 영역의 산소포화도를 측정하는데, 이 방법은 산화된 헤모글로빈과 헤모글로빈 사이의 빛 흡수 파장의 차이를 이용한다. 그러나 가시광선 영역에서의 광흡수 량의 차이가 작기 때문에 이를 계산하기 위해 증폭과정을 거치게 되고, 이 과정에 많은 추정치가 포함되어 정확도가 떨어지게 된다.
기존 시스템에서는 생체 신호 측정 영역이 전체 해상도보다 작은 경우 특징점의 손실로 인해 생체 신호 측정이 불가능한 경우가 많다. 또한, 기존의 혈압 측정은 심장에서 맥박이 발생한 후 말초까지 걸리는 시간을 통해 혈압을 추정하는 방식인 PTT를 이용하여 측정하였다. 따라서 두 영역에서 펄스를 측정해야 하며, 이를 해결하기 위한 방법으로 기존 시스템은 부분 접촉하도록 설계되는 한계가 따르는 문제가 있었다. 대한민국 등록특허공보 제10-1752560호, 공개특허공보 제10-2007-0056925호가 선행기술 문헌으로 개시되고 있다.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 광원부와, 광원부에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 다차원 멀티스펙트럼 카메라와, 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 측정 진단부를 포함하여 구성함으로써, 기존의 개별 생체신호 측정 시스템의 한계점을 극복하고, 가시 영역에서 관찰되는 노이즈를 배제한 영상 처리를 통한 생체신호 측정 및 진단의 정확도를 높이며, 그에 따른 다차원 생체신호 측정의 효율성 및 편의성이 더욱 향상될 수 있도록 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법을 제공하는 것을 그 목적으로 한다.
또한, 본 발명은, 가시광 노이즈를 줄일 수 있는 다차원 멀티스펙트럼 카메라를 사용하여 비접촉 생체신호를 측정하여, 심박수, 산소포화도, 초당 혈류량, 및 혈압 측정이 순차로 측정될 수 있도록 구성함으로써, 다차원 복합 생체신호를 사용하여 정략적 측정이 어려운 병변의 조기진단이 가능하도록 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법을 제공하는 것을 또 다른 목적으로 한다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템은,
Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템으로서,
비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 광원부;
상기 광원부에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 다차원 멀티스펙트럼 카메라; 및
상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 측정 진단부를 포함하는 것을 그 구성상의 특징으로 한다.
바람직하게는, 상기 광원부는,
비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하되, 파장이 다른 2개의 광원을 조사할 수 있다.
더욱 바람직하게는, 상기 광원부는,
비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 파장이 다른 2개의 광원으로, 적색 광을 조사하는 적색 LED와 적외선을 조사하는 적외선 LED로 구성될 수 있다.
바람직하게는, 상기 다차원 멀티스펙트럼 카메라는,
상기 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하여 생체신호의 이미지 시퀀스를 생성하는 적외선 카메라로 구성될 수 있다.
바람직하게는, 상기 측정 진단부는,
상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하되, 상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스에서 클러스터링에 의한 유효한 픽셀을 추출하여 심박수를 측정할 수 있다.
더욱 바람직하게는, 상기 측정 진단부는,
상기 다차원 멀티스펙트러 카메라로부터 상기 광원부의 적색 LED와 적외선 LED에서 교대로 빛을 방출하여 반사되는 증폭된 반사광을 촬영한 이미지 시퀀스를 제공받아 산소포화도를 측정할 수 있다.
더욱 더 바람직하게는, 상기 측정 진단부는,
측정된 심박수 및 산소포화도와, 측정된 반사 광량 기반 딥 뉴럴 네트워크를 통해 측정된 초당 혈류량의 변화를 이용하여 신체접촉 없이 혈압을 측정할 수 있다.
더더욱 바람직하게는, 상기 측정 진단부는,
상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상을 신호 처리하는 영상 처리부;
상기 영상 처리부로부터 신호 처리된 영상을 이용하여 심박수, 산소포화도, 및 혈압을 측정하는 바이오신호 측정부; 및
상기 바이오신호 측정부를 통해 측정된 심박수, 산소포화도, 및 혈압을 이용한 병변을 진단하는 진단부를 포함하여 구성할 수 있다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법은,
Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법으로서,
(1) 광원부가 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 단계;
(2) 다차원 멀티스펙트럼 카메라가 상기 광원부에서 조사된 후 반사되는 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 단계;
(3) 측정 진단부가 상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.
바람직하게는, 상기 광원부는,
비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하되, 파장이 다른 2개의 광원을 조사할 수 있다.
더욱 바람직하게는, 상기 광원부는,
비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 파장이 다른 2개의 광원으로, 적색 광을 조사하는 적색 LED와 적외선을 조사하는 적외선 LED로 구성될 수 있다.
바람직하게는, 상기 다차원 멀티스펙트럼 카메라는,
상기 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하여 생체신호의 이미지 시퀀스를 생성하는 적외선 카메라로 구성될 수 있다.
바람직하게는, 상기 측정 진단부는,
상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하되, 상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스에서 클러스터링에 의한 유효한 픽셀을 추출하여 심박수를 측정할 수 있다.
더욱 바람직하게는, 상기 측정 진단부는,
상기 다차원 멀티스펙트러 카메라로부터 상기 광원부의 적색 LED와 적외선 LED에서 교대로 빛을 방출하여 반사되는 증폭된 반사광을 촬영한 이미지 시퀀스를 제공받아 산소포화도를 측정할 수 있다.
더욱 더 바람직하게는, 상기 측정 진단부는,
측정된 심박수 및 산소포화도와, 측정된 반사 광량 기반 딥 뉴럴 네트워크를 통해 측정된 초당 혈류량의 변화를 이용하여 신체접촉 없이 혈압을 측정할 수 있다.
더더욱 바람직하게는, 상기 측정 진단부는,
상기 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상을 신호 처리하는 영상 처리부;
상기 영상 처리부로부터 신호 처리된 영상을 이용하여 심박수, 산소포화도, 및 혈압을 측정하는 바이오신호 측정부; 및
상기 바이오신호 측정부를 통해 측정된 심박수, 산소포화도, 및 혈압을 이용한 병변을 진단하는 진단부를 포함하여 구성할 수 있다.
본 발명에서 제안하고 있는 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법에 따르면, 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 광원부와, 광원부에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 다차원 멀티스펙트럼 카메라와, 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 측정 진단부를 포함하여 구성함으로써, 기존의 개별 생체신호 측정 시스템의 한계점을 극복하고, 가시 영역에서 관찰되는 노이즈를 배제한 영상 처리를 통한 생체신호 측정 및 진단의 정확도를 높이며, 그에 따른 다차원 생체신호 측정의 효율성 및 편의성이 더욱 향상될 수 있도록 할 수 있다.
또한, 본 발명의 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법에 따르면, 가시광 노이즈를 줄일 수 있는 다차원 멀티스펙트럼 카메라를 사용하여 비접촉 생체신호를 측정하여, 심박수, 산소포화도, 초당 혈류량, 및 혈압 측정이 순차로 측정될 수 있도록 구성함으로써, 다차원 복합 생체신호를 사용하여 정략적 측정이 어려운 병변의 조기진단이 가능하도록 할 수 있다.
도 1은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 구성을 기능블록으로 도시한 도면.
도 2는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 광원부의 구성을 기능블록으로 도시한 도면.
도 3은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 측정 진단부의 구성을 기능블록으로 도시한 도면.
도 4는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 개념을 도시한 도면.
도 5는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 이미지 처리에서, 클러스터링에 의한 유효한 픽셀을 추출하는 구성을 도시한 도면.
도 6은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 산소포화도 측정의 구성을 도시한 도면.
도 7은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 관류 측정 구성을 도시한 도면.
도 8은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 멀티 프레임 고해상도 이미지 처리의 구성을 도시한 도면.
도 9는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 이미지 시퀀스에서 특징점의 위치를 변경하여 확산 시간을 측정하는 구성을 도시한 도면.
도 10은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 심박 측정 결과를 도시한 도면.
도 11은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 산소포화도 측정을 도시한 도면.
도 12는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 산소포화도 측정 결과를 도시한 도면.
도 13은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 특징점 손실 테스트 결과를 도시한 도면.
도 14는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 혈압 측정 테스트 결과를 도시한 도면.
도 15는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 욕창의 단계별 피부 상태를 도시한 도면.
도 16은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법의 흐름을 도시한 도면.
<부호의 설명>
100: 본 발명의 다차원 바이오신호 측정 시스템
110: 광원부
111: 적색 LED
112: 적외선 LED
120: 다차원 멀티스펙트럼 카메라
130: 측정 진단부
131: 영상 처리부
132: 바이오신호 측정부
133: 진단부
S110: 광원부가 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 단계
S120: 다차원 멀티스펙트럼 카메라가 광원부에서 조사된 후 반사되는 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 단계
S130: 측정 진단부가 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 단계
이하, 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일한 부호를 사용한다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’ 되어 있다고 할 때, 이는 ‘직접적으로 연결’ 되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’ 되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’ 한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
도 1은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 구성을 기능블록으로 도시한 도면이고, 도 2는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 광원부의 구성을 기능블록으로 도시한 도면이며, 도 3은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 측정 진단부의 구성을 기능블록으로 도시한 도면이고, 도 4는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 개념을 도시한 도면이다. 도 1 내지 도 4에 각각 도시된 바와 같이, 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템(100)은, 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 광원부(110)와, 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 다차원 멀티스펙트럼 카메라(120)와, 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 측정 진단부(130)를 포함하여 구성될 수 있다. 이하에서는 첨부된 도면을 참조하여 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 구체적인 구성에 대해 설명하기로 한다.
도 5는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 이미지 처리에서, 클러스터링에 의한 유효한 픽셀을 추출하는 구성을 도시한 도면이고, 도 6은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 산소포화도 측정의 구성을 도시한 도면이며, 도 7은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 관류 측정 구성을 도시한 도면이고, 도 8은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 멀티 프레임 고해상도 이미지 처리의 구성을 도시한 도면이다.
광원부(110)는, 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 구성이다. 이러한 광원부(110)는 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하되, 파장이 다른 2개의 광원을 조사할 수 있다.
또한, 광원부(110)는 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 파장이 다른 2개의 광원으로, 적색 광을 조사하는 적색 LED(111)와 적외선을 조사하는 적외선 LED(112)로 구성될 수 있다. 이러한 광원부(110)는 765㎚와, 880㎚의 LED로 구성될 수 있다. 여기서, 광원부(110)는 도 6에 도시된 바와 같이, 적색 LED(111)와 적외선 LED(112)가 정렬 배치되는 구조로 구성될 수 있다.
다차원 멀티스펙트럼 카메라(120)는, 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 카메라의 구성이다. 이러한 다차원 멀티스펙트럼 카메라(120)는 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하여 생체신호의 이미지 시퀀스를 생성하는 적외선 카메라로 구성될 수 있다. 여기서, 다차원 멀티스펙트러 카메라(120)를 통해 촬영되는 생체신호의 이미지 시퀀스는 피검체의 관류(Perfusion) 이미지이다.
또한, 다차원 멀티스펙트럼 카메라(120)는 가시광 노이즈를 줄이고, 광원부(110)를 통해 조사된 광원의 증폭된 반사광을 측정하는 카메라 구성으로, 측정 진단부(130)와는 물리적으로 분리된 장소로 구분되어 구성될 수 있다,
측정 진단부(130)는, 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 구성이다. 이러한 측정 진단부(130)는 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하되, 도 5에 도시된 바와 같이, 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스에서 클러스터링에 의한 유효한 픽셀을 추출하여 심박수를 측정할 수 있다.
또한, 측정 진단부(130)는 도 6에 도시된 바와 같이, 다차원 멀티스펙트러 카메라(120)로부터 광원부(110)의 적색 LED(111)와 적외선 LED(112)에서 교대로 빛을 방출하여 반사되는 증폭된 반사광을 촬영한 이미지 시퀀스를 제공받아 산소포화도를 측정할 수 있다.
또한, 측정 진단부(130)는 측정된 심박수 및 산소포화도와, 측정된 반사 광량 기반 딥 뉴럴 네트워크를 통해 측정된 초당 혈류량의 변화를 이용하여 신체접촉 없이 혈압을 측정할 수 있다. 이러한 혈압 측정은 도 8에 도시된 바와 같이, 저해상도 이미지를 중첩하여 고해상도 이미지로 만들 수 있으며, 고해상도 이미지에서 특징점의 확산을 통해 혈압을 측정할 수 있게 된다. 즉, 혈압 측정은 혈압에 영향을 미치는 혈류 속도와 혈액량을 기반으로 혈압을 계산하고, 구체적으로, 회귀 모델은 계산된 확산 벡터 평균, 심박수, 산소 포화도 및 관류 진폭을 사용하여 혈압을 계산한다. 등고선 특징점을 추적하여 관류 확산 시간을 측정할 수 있다.
또한, 측정 진단부(130)는 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상을 신호 처리하는 영상 처리부(131)와, 영상 처리부(131)로부터 신호 처리된 영상을 이용하여 심박수, 산소포화도, 및 혈압을 측정하는 바이오신호 측정부(132)와, 바이오신호 측정부(132)를 통해 측정된 심박수, 산소포화도, 및 혈압을 이용한 병변을 진단하는 진단부(133)를 포함하여 구성할 수 있다. 여기서, 측정 진단부(130)는 생체신호, 영상처리, 임상 정보의 핵심 요소 기술의 고도화를 기반으로 통계적 방식, 앙상블 러닝, 딥러닝 기술을 활용한 연계 기술과 측정된 다차원 복합 생체신호를 사용하여 정략적 측정이 어려운 병변의 조기진단이 가능하도록 기능할 수 있다.
도 9는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 이미지 시퀀스에서 특징점의 위치를 변경하여 확산 시간을 측정하는 구성을 도시한 도면이다.
도 10은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 심박 측정 결과를 도시한 도면이다. 도 10에 도시된 바와 같이, 실제 심박수와 카메라로 촬영한 측정 데이터 값의 차이를 확인하였다. 이미지 시퀀스를 이용하여 측정한 HRV 값과 Biopac MP150으로 측정된 PPG 펄스를 비교하였는바, 결과에서 알 수 있듯이 이전 방법의 평균 정확도 오차는 0.96%이고, 본 발명에 따른 방법은 0.63%를 나타내고 있다.
도 11은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 산소포화도 측정을 도시한 도면이다. 도 11에 도시된 바와 같이, IR 카메라로 촬영한 산소 포화도 등고선(윤곽) 값을 변경하여 심박수를 계산하였다. 우리는 비접촉 방법으로 맥박 산소 측정기를 측정하기 위해 이미지 시퀀스를 사용하였으며, 산소 포화도의 변동 범위를 보여주는 경계 영역을 선택하고, 선택 후 픽셀 값의 변화를 추적하며, 값의 평균을 BioPac 및 기존 방법과 비교하였다.
도 12는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 산소포화도 측정 결과를 도시한 도면이다. 도 12에 도시된 바와 같이, 기존 방법의 평균 정확도 오차는 1.30%이고, 본 발명에 따른 방법은 0.53%를 나타내고 있다. 또한, 각 표준편차 값은 기존 방법의 경우 1.1이고 본 발명에 따른 방법의 경우 0.5를 나타내고 있다.
도 13은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 특징점 손실 테스트 결과를 도시한 도면이다. 도 13에 도시된 바와 같이, 원본 이미지와 초해상도 이미지에서 시간 경과에 따른 특징점 수를 비교하였다. 원본 영상의 특징점 손실률은 100 프레임 당 8.23%이고, 초해상도 영상의 손실률은 4.04%를 나타내고 있다.
도 14는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 혈압 측정 테스트 결과를 도시한 도면이다. 도 14에 도시된 바와 같이, 의료분야의 표준 방법인 커프 기반 방법과 실화상 카메라 기반 방법과 비교하였으며, 혈압의 평균 오차는 2.07%로 기존 방법보다 3.86% 개선된 상태를 나타내고 있다.
도 15는 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템의 욕창의 단계별 피부 상태를 도시한 도면이다. 도 15에 도시된 바와 같이, 상처가 생겼을 때 피부 밀도나 혈액량의 변화 등의 이유로 혈액 관류에 변화가 일어나고, 그에 따른 상처 및 욕창을 감지할 수 있다.
이와 같이, 도 16은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템은 기존의 비접촉식 시스템의 한계를 극복하기 위해 다중 스펙트럼 카메라를 사용하여 가시 영역에서 관찰되는 노이즈를 배제하고, 혈액 관류를 측정하여 생체 신호 측정의 정확도를 향상시켰다. 또한 측정 부위의 한계를 극복하기 위해 클러스터링 및 초해상도 기법을 사용하였으며, 그 결과 심박수 측정 오류율을 0.63%, 산소포화도 측정 오류율은 0.53%로 기존 방식에 비해 개선되었으며, 혈압 측정에서는 평균 0.207%의 오차값을 보였으며, 생체신호 측정은 기존 방법에 비해 50~60% 향상됨을 알 수 있었다.
도 16은 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법의 흐름을 도시한 도면이다. 도 16에 도시된 바와 같이, 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법은, 광원부가 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 단계(S110), 다차원 멀티스펙트럼 카메라가 광원부에서 조사된 후 반사되는 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 단계(S120), 및 측정 진단부가 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 단계(S130)를 포함하여 구현될 수 있다.
단계 S110에서는, 광원부(110)가 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사한다. 이러한 단계 S110에서의 이러한 광원부(110)는 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하되, 파장이 다른 2개의 광원을 조사할 수 있다.
또한, 광원부(110)는 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 파장이 다른 2개의 광원으로, 적색 광을 조사하는 적색 LED(111)와 적외선을 조사하는 적외선 LED(112)로 구성될 수 있다. 이러한 광원부(110)는 765㎚와, 880㎚의 LED로 구성될 수 있다. 여기서, 광원부(110)는 도 6에 도시된 바와 같이, 적색 LED(111)와 적외선 LED(112)가 정렬 배치되는 구조로 구성될 수 있다.
단계 S120에서는, 다차원 멀티스펙트럼 카메라(120)가 광원부(110)에서 조사된 후 반사되는 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성한다. 이러한 단계 S120에서의 다차원 멀티스펙트럼 카메라(120)는 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하여 생체신호의 이미지 시퀀스를 생성하는 적외선 카메라로 구성될 수 있다. 여기서, 다차원 멀티스펙트러 카메라(120)를 통해 촬영되는 생체신호의 이미지 시퀀스는 피검체의 관류(Perfusion) 이미지이다.
또한, 다차원 멀티스펙트럼 카메라(120)는 가시광 노이즈를 줄이고, 광원부(110)를 통해 조사된 광원의 증폭된 반사광을 측정하는 카메라 구성으로, 측정 진단부(130)와는 물리적으로 분리된 장소로 구분되어 구성될 수 있다,
단계 S130에서는, 측정 진단부(130)가 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정한다. 이러한 단계 S130에서의 측정 진단부(130)는 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하되, 도 5에 도시된 바와 같이, 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스에서 클러스터링에 의한 유효한 픽셀을 추출하여 심박수를 측정할 수 있다.
또한, 측정 진단부(130)는 도 6에 도시된 바와 같이, 다차원 멀티스펙트러 카메라(120)로부터 광원부(110)의 적색 LED(111)와 적외선 LED(112)에서 교대로 빛을 방출하여 반사되는 증폭된 반사광을 촬영한 이미지 시퀀스를 제공받아 산소포화도를 측정할 수 있다.
또한, 측정 진단부(130)는 측정된 심박수 및 산소포화도와, 측정된 반사 광량 기반 딥 뉴럴 네트워크를 통해 측정된 초당 혈류량의 변화를 이용하여 신체접촉 없이 혈압을 측정할 수 있다. 이러한 혈압 측정은 도 8에 도시된 바와 같이, 저해상도 이미지를 중첩하여 고해상도 이미지로 만들 수 있으며, 고해상도 이미지에서 특징점의 확산을 통해 혈압을 측정할 수 있게 된다. 즉, 혈압 측정은 혈압에 영향을 미치는 혈류 속도와 혈액량을 기반으로 혈압을 계산하고, 구체적으로, 회귀 모델은 계산된 확산 벡터 평균, 심박수, 산소 포화도 및 관류 진폭을 사용하여 혈압을 계산한다.
또한, 측정 진단부(130)는 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상을 신호 처리하는 영상 처리부(131)와, 영상 처리부(131)로부터 신호 처리된 영상을 이용하여 심박수, 산소포화도, 및 혈압을 측정하는 바이오신호 측정부(132)와, 바이오신호 측정부(132)를 통해 측정된 심박수, 산소포화도, 및 혈압을 이용한 병변을 진단하는 진단부(133)를 포함하여 구성할 수 있다. 즉, 측정 진단부(130)는 생체신호, 영상처리, 임상 정보의 핵심 요소 기술의 고도화를 기반으로 통계적 방식, 앙상블 러닝, 딥러닝 기술을 활용한 연계 기술과 측정된 다차원 복합 생체신호를 사용하여 정략적 측정이 어려운 병변의 조기진단이 가능하도록 기능할 수 있다.
상술한 바와 같이, 본 발명의 일실시예에 따른 Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법은, 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 광원부와, 광원부에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 다차원 멀티스펙트럼 카메라와, 다차원 멀티스펙트럼 카메라로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 측정 진단부를 포함하여 구성함으로써, 기존의 개별 생체신호 측정 시스템의 한계점을 극복하고, 가시 영역에서 관찰되는 노이즈를 배제한 영상 처리를 통한 생체신호 측정 및 진단의 정확도를 높이며, 그에 따른 다차원 생체신호 측정의 효율성 및 편의성이 더욱 향상될 수 있도록 할 수 있으며, 특히, 가시광 노이즈를 줄일 수 있는 다차원 멀티스펙트럼 카메라를 사용하여 비접촉 생체신호를 측정하여, 심박수, 산소포화도, 초당 혈류량, 및 혈압 측정이 순차로 측정될 수 있도록 구성함으로써, 다차원 복합 생체신호를 사용하여 정략적 측정이 어려운 병변의 조기진단이 가능하도록 할 수 있게 된다.
이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.
Claims (16)
- Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템(100)으로서,비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 광원부(110);상기 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 다차원 멀티스펙트럼 카메라(120); 및상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 측정 진단부(130)를 포함하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- 제1항에 있어서, 상기 광원부(110)는,비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하되, 파장이 다른 2개의 광원을 조사하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- 제2항에 있어서, 상기 광원부(110)는,비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 파장이 다른 2개의 광원으로, 적색 광을 조사하는 적색 LED(111)와 적외선을 조사하는 적외선 LED(112)로 구성되는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- 제1항에 있어서, 상기 다차원 멀티스펙트럼 카메라(120)는,상기 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하여 생체신호의 이미지 시퀀스를 생성하는 적외선 카메라로 구성되는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- 제1항 내지 제4항 중 어느 한 항에 있어서, 상기 측정 진단부(130)는,상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하되, 상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스에서 클러스터링에 의한 유효한 픽셀을 추출하여 심박수를 측정하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- 제5항에 있어서, 상기 측정 진단부(130)는,상기 다차원 멀티스펙트러 카메라(120)로부터 상기 광원부(110)의 적색 LED(111)와 적외선 LED(112)에서 교대로 빛을 방출하여 반사되는 증폭된 반사광을 촬영한 이미지 시퀀스를 제공받아 산소포화도를 측정하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- 제6항에 있어서, 상기 측정 진단부(130)는,측정된 심박수 및 산소포화도와, 측정된 반사 광량 기반 딥 뉴럴 네트워크를 통해 측정된 초당 혈류량의 변화를 이용하여 신체접촉 없이 혈압을 측정하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- 제7항에 있어서, 상기 측정 진단부(130)는,상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상을 신호 처리하는 영상 처리부(131);상기 영상 처리부(131)로부터 신호 처리된 영상을 이용하여 심박수, 산소포화도, 및 혈압을 측정하는 바이오신호 측정부(132); 및상기 바이오신호 측정부(132)를 통해 측정된 심박수, 산소포화도, 및 혈압을 이용한 병변을 진단하는 진단부(133)를 포함하여 구성하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템.
- Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법으로서,(1) 광원부(110)가 비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하는 단계;(2) 다차원 멀티스펙트럼 카메라(120)가 상기 광원부(110)에서 조사된 후 반사되는 반사광을 촬영하고, 그에 따른 생체신호의 이미지 시퀀스를 생성하는 단계;(3) 측정 진단부(130)가 상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하는 단계를 포함하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
- 제9항에 있어서, 상기 광원부(110)는,비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 광원을 조사하되, 파장이 다른 2개의 광원을 조사하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
- 제10항에 있어서, 상기 광원부(110)는,비접촉 방식으로 다차원의 바이오 신호를 측정하기 위한 가시광 영역 외의 파장이 다른 2개의 광원으로, 적색 광을 조사하는 적색 LED(111)와 적외선을 조사하는 적외선 LED(112)로 구성되는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
- 제9항에 있어서, 상기 다차원 멀티스펙트럼 카메라(120)는,상기 광원부(110)에서 조사된 후 반사되는 증폭된 반사광을 촬영하여 생체신호의 이미지 시퀀스를 생성하는 적외선 카메라로 구성되는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
- 제9항 내지 제12항 중 어느 한 항에 있어서, 상기 측정 진단부(130)는,상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상 처리를 통해 심박수, 산소포화도, 초당 혈류량, 및 혈압을 측정하되, 상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스에서 클러스터링에 의한 유효한 픽셀을 추출하여 심박수를 측정하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
- 제13항에 있어서, 상기 측정 진단부(130)는,상기 다차원 멀티스펙트러 카메라(120)로부터 상기 광원부(110)의 적색 LED(111)와 적외선 LED(112)에서 교대로 빛을 방출하여 반사되는 증폭된 반사광을 촬영한 이미지 시퀀스를 제공받아 산소포화도를 측정하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
- 제14항에 있어서, 상기 측정 진단부(130)는,측정된 심박수 및 산소포화도와, 측정된 반사 광량 기반 딥 뉴럴 네트워크를 통해 측정된 초당 혈류량의 변화를 이용하여 신체접촉 없이 혈압을 측정하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
- 제15항에 있어서, 상기 측정 진단부(130)는,상기 다차원 멀티스펙트럼 카메라(120)로부터 촬영하여 생성된 생체신호의 이미지 시퀀스의 영상을 신호 처리하는 영상 처리부(131);상기 영상 처리부(131)로부터 신호 처리된 영상을 이용하여 심박수, 산소포화도, 및 혈압을 측정하는 바이오신호 측정부(132); 및상기 바이오신호 측정부(132)를 통해 측정된 심박수, 산소포화도, 및 혈압을 이용한 병변을 진단하는 진단부(133)를 포함하여 구성하는 것을 특징으로 하는, Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 방법.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210158956A KR102597139B1 (ko) | 2021-11-17 | 2021-11-17 | Perfusion Imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법 |
| KR10-2021-0158956 | 2021-11-17 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2023090828A1 true WO2023090828A1 (ko) | 2023-05-25 |
Family
ID=86397530
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/KR2022/018025 WO2023090828A1 (ko) | 2021-11-17 | 2022-11-15 | Perfusion imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법 |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR102597139B1 (ko) |
| WO (1) | WO2023090828A1 (ko) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015527909A (ja) * | 2012-07-10 | 2015-09-24 | アイマゴ ソシエテ アノニムＡｉｍａｇｏ Ｓ．Ａ． | 灌流評価マルチモダリティ光学医用デバイス |
| JP2019505263A (ja) * | 2016-01-15 | 2019-02-28 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 対象のバイタルサイン情報を含むフォトプレチスモグラフ画像を生成するデバイス、システム、及び方法 |
| KR20200001911A (ko) * | 2018-06-28 | 2020-01-07 | 계명대학교 산학협력단 | 사용자의 신원 파악이 가능한 혈압 모니터링 방법 및 시스템 |
| KR20200144893A (ko) * | 2019-06-19 | 2020-12-30 | 주식회사 라이즈 | 이미지를 이용한 비접촉 산소포화도 측정 시스템 및 그 구동 방법 |
| KR20210085867A (ko) * | 2019-12-31 | 2021-07-08 | 광운대학교 산학협력단 | 사용자의 혈압을 추정하기 위한 장치 및 방법 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200129409A (ko) * | 2019-05-08 | 2020-11-18 | 삼성전자주식회사 | 광 센서, 생체 정보 추정 장치 및 방법 |
-
2021
- 2021-11-17 KR KR1020210158956A patent/KR102597139B1/ko active IP Right Grant
-
2022
- 2022-11-15 WO PCT/KR2022/018025 patent/WO2023090828A1/ko unknown
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015527909A (ja) * | 2012-07-10 | 2015-09-24 | アイマゴ ソシエテ アノニムＡｉｍａｇｏ Ｓ．Ａ． | 灌流評価マルチモダリティ光学医用デバイス |
| JP2019505263A (ja) * | 2016-01-15 | 2019-02-28 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 対象のバイタルサイン情報を含むフォトプレチスモグラフ画像を生成するデバイス、システム、及び方法 |
| KR20200001911A (ko) * | 2018-06-28 | 2020-01-07 | 계명대학교 산학협력단 | 사용자의 신원 파악이 가능한 혈압 모니터링 방법 및 시스템 |
| KR20200144893A (ko) * | 2019-06-19 | 2020-12-30 | 주식회사 라이즈 | 이미지를 이용한 비접촉 산소포화도 측정 시스템 및 그 구동 방법 |
| KR20210085867A (ko) * | 2019-12-31 | 2021-07-08 | 광운대학교 산학협력단 | 사용자의 혈압을 추정하기 위한 장치 및 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20230072339A (ko) | 2023-05-24 |
| KR102597139B1 (ko) | 2023-11-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2020242239A1 (ko) | 앙상블 학습 알고리즘을 이용한 인공지능 기반 진단 보조 시스템 | |
| KR101729327B1 (ko) | 듀얼 카메라를 이용한 체온 추적 모니터링 시스템 | |
| WO2012067422A9 (ko) | 적외선 어레이 센서를 이용한 온도측정장치 및 온도측정방법 | |
| KR101806400B1 (ko) | 흑체를 이용한 듀얼 카메라 기반 체온 감시 시스템 | |
| WO2016159523A1 (ko) | 생체 정보 획득 방법 및 이를 위한 장치 | |
| WO2015041451A1 (ko) | 촉각 영상 및 근적외선 영상의 정합을 이용한 유방촬영용 영상진단기기 및 유방조직 영상획득방법 | |
| WO2019088769A1 (ko) | 개방형 api 기반 의료 정보 제공 방법 및 시스템 | |
| EP3247261A1 (en) | Device, system and method for skin detection | |
| WO2016159710A1 (ko) | 모바일 다중 분광 이미징 디바이스, 다중 분광 이미지 획득용 사용자 단말, 분광 이미지 분석 서버 및 그 방법 | |
| WO2018164361A1 (ko) | 적외선 카메라를 이용한 비디오 안진 검사 장치 및 방법 | |
| WO2019045385A1 (ko) | 영상 얼라인먼트 방법 및 그 장치 | |
| WO2023090828A1 (ko) | Perfusion imaging 기반 비접촉 자율신경계 반응 다차원 바이오신호 측정 시스템 및 방법 | |
| WO2017215354A1 (zh) | 测量仪数据存储方法和装置 | |
| JP2000020684A (ja) | 指紋像入力装置 | |
| Negishi et al. | Stable contactless sensing of vital signs using RGB-thermal image fusion system with facial tracking for infection screening | |
| WO2019103186A1 (ko) | 뇌파 분석을 통한 뇌 나이 추정 방법 및 시스템 | |
| WO2022149836A1 (ko) | 실시간 영상을 통해 획득되는 병변 판단 시스템의 제어 방법, 장치 및 프로그램 | |
| CN112924035B (zh) | 基于热成像传感器的体温和呼吸率提取方法及应用 | |
| WO2019103188A1 (ko) | 뇌파 분석을 통한 외상성 뇌손상 평가 시스템 및 방법 | |
| JPH02268722A (ja) | 電子内視鏡装置 | |
| WO2020256319A1 (ko) | 이미지를 이용한 비접촉 산소포화도 측정 시스템 및 그 구동 방법 | |
| WO2019132115A1 (ko) | 혈압 모니터링을 위한 이어폰 및 이를 이용한 혈압 모니터링 방법 | |
| WO2018056726A2 (en) | Optical coherence tomography device | |
| WO2018101623A1 (ko) | 광단층 영상을 이용한 비초점 광음향 영상 왜곡 보정 방법 및 장치 | |
| WO2024101708A1 (ko) | 적외선 카메라를 이용하여 수면무호흡을 진단하기 위한 시스템 및 그 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 22896034 Country of ref document: EP Kind code of ref document: A1 |