KR20170024196A - Respiratory monitoring system and method thereof - Google Patents

Respiratory monitoring system and method thereof Download PDF

Info

Publication number
KR20170024196A
KR20170024196A KR1020150118758A KR20150118758A KR20170024196A KR 20170024196 A KR20170024196 A KR 20170024196A KR 1020150118758 A KR1020150118758 A KR 1020150118758A KR 20150118758 A KR20150118758 A KR 20150118758A KR 20170024196 A KR20170024196 A KR 20170024196A
Authority
KR
South Korea
Prior art keywords
marker
respiration
real
time position
direction axis
Prior art date
Application number
KR1020150118758A
Other languages
Korean (ko)
Other versions
KR101725654B1 (en
Inventor
김남국
배명수
이상민
서준범
Original Assignee
울산대학교 산학협력단
재단법인 아산사회복지재단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 울산대학교 산학협력단, 재단법인 아산사회복지재단 filed Critical 울산대학교 산학협력단
Priority to KR1020150118758A priority Critical patent/KR101725654B1/en
Publication of KR20170024196A publication Critical patent/KR20170024196A/en
Application granted granted Critical
Publication of KR101725654B1 publication Critical patent/KR101725654B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/113Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb occurring during breathing
    • A61B5/1135Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb occurring during breathing by monitoring thoracic expansion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Detecting, measuring or recording devices for evaluating the respiratory organs
    • A61B5/082Evaluation by breath analysis, e.g. determination of the chemical composition of exhaled breath
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1127Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using markers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Physiology (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Pulmonology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

The present invention relates to a respiratory monitoring system and a method thereof. According to the present invention, the respiratory monitoring method comprises: a step of receiving an input of sensing information from a sensor unit, detecting a marker which is attached to the body of a subject to be measured, and acquiring the real-time position of the marker; a step of calculating a respiratory motion direction axis by using the real-time position of the marker, projecting the real-time position of the marker on the respiratory motion direction axis, and extracting a plurality of projection points which correspond to the real-time position of the marker; a step of extracting the terminal points on both sides among the plurality of projection points, extracting the middle point of the terminal points on both sides, and calculating the respiratory depth of the subject to be measured by using one or more of the plurality of projection points, the terminal points on both sides, and the middle point; and a step of generating and outputting the respiratory monitoring result of the subject to be measured by using the respiratory depth. According to the present invention, the system of the present invention is able to use a low-cost multi sensor, to incur a low cost, to be non-invasive, and to be highly portable. In addition, the system of the present invention is able to precisely track the respiratory motion by using a marker, which comprises: a passive marker; and a plate with colors, to classify a variety of respiratory motion measuring situations, and to automatically remeasure the respiratory motion even after the patient makes a sudden movement.

Description

호흡 모니터링 장치 및 그 방법{RESPIRATORY MONITORING SYSTEM AND METHOD THEREOF}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a respiration monitoring apparatus,

본 발명은 호흡 모니터링 장치 및 그 방법에 관한 것으로서, 더욱 상세하게는 센서장치 및 패시브 마커를 이용하여 환자의 호흡을 측정하는 호흡 모니터링 장치 및 그 방법에 관한 것이다.The present invention relates to a respiration monitoring apparatus and a method thereof, and more particularly, to a respiration monitoring apparatus and method for measuring respiration of a patient using a sensor apparatus and a passive marker.

대부분의 병원에서는 환자의 신체를 측정하기 위하여 CT, MRI 및 X-Ray와 같은 신체 촬영 측정 기기를 사용한다. 그리고 이러한 측정 기기를 통해 수집한 의료 정보들은 환자의 병세를 판단하거나 수술을 위한 사전 자료로 활용된다.Most hospitals use body imaging measurement devices such as CT, MRI, and X-Ray to measure the patient's body. The medical information collected through these measuring devices is used as a preliminary data for judging the patient's condition or for the operation.

하지만 이러한 신체 측정 장비는 환자의 호흡을 상황에 맞게 조절해야 정확한 신체 측정 정보를 획득할 수 있으며, 환자의 호흡이 제대로 조절되지 않은 경우 부정확한 신체 측정 정보를 획득함으로써, 예기치 않은 의료사고 등이 발생할 수 있다.However, these physical measuring instruments need to adjust the patient's breathing to the situation to obtain accurate physical measurement information, and if the patient's breathing is not properly controlled, obtain incorrect physical measurement information and cause unexpected medical accidents .

그러나 대부분의 병원은 신체 측정 장비를 운용하는 인력이 부족하여 촬영시 환자의 호흡을 지속적으로 관리하기 어렵다. 이러한 문제점을 해결하기 위해 압력 센서 등을 이용한 호흡 모니터링 시스템들이 사용되고 있으나, 환자의 자세에 따라 부정확한 모니터링 결과를 출력하거나, 정확한 호흡 모니터링 결과를 출력하더라도 장비 자체가 매우 고가에 형성되어 있어 운영상에 어려움이 따르는 실정이다.However, most hospitals lack the manpower to operate the body measurement equipment, making it difficult to manage patient's breathing continuously. In order to solve these problems, respiratory monitoring systems using pressure sensors and the like have been used. However, even if the monitoring result is outputted inaccurate according to the patient's attitude or the accurate breath monitoring result is outputted, the equipment itself is very expensive, .

본 발명의 배경이 되는 기술은 한국공개특허 제10-2008-0039919호(2008.05.07공개)에 개시되어 있다.The technology of the background of the present invention is disclosed in Korean Patent Laid-Open No. 10-2008-0039919 (published on May.05, 2008).

본 발명이 이루고자 하는 기술적 과제는 센서장치 및 패시브 마커를 이용하여 환자의 호흡을 측정하는 호흡 모니터링 장치 및 그 방법을 제공하기 위한 것이다.SUMMARY OF THE INVENTION The present invention provides a respiration monitoring apparatus and method for measuring respiration of a patient using a sensor device and a passive marker.

이러한 기술적 과제를 이루기 위한 본 발명의 실시예에 따르면, 호흡 모니터링 장치를 이용하는 호흡 모니터링 방법에 있어서, 센서 장치로부터 센싱 정보를 입력받아, 측정 대상자의 신체에 부착된 마커를 탐지하고, 상기 마커의 실시간 위치를 획득하는 단계, 상기 마커의 실시간 위치를 이용하여 호흡 모션 방향 축을 연산하고, 상기 호흡 모션 방향 축에 상기 마커의 실시간 위치를 투영하여 상기 마커의 실시간 위치에 대응하는 복수의 프로젝션 포인트를 추출하는 단계, 상기 복수의 프로젝션 포인트 중에서 양측 종단점을 추출하고, 상기 양측 종단점의 중간지점을 추출하며, 상기 복수의 프로젝션 포인트, 상기 양측 종단점 및 상기 중간지점 중 적어도 어느 하나를 이용하여 상기 측정 대상자의 호흡깊이를 연산하는 단계, 그리고 상기 호흡깊이를 이용하여 상기 측정 대상자의 호흡 모니터링 결과를 생성하여 출력하는 단계를 포함한다.According to an aspect of the present invention, there is provided a breathing monitoring method using a respiration monitoring apparatus, comprising: sensing information from a sensor device to detect a marker attached to a body of a measurement subject; Obtaining a plurality of projection points corresponding to a real-time position of the marker by projecting a real-time position of the marker on the breathing motion direction axis, calculating a breathing motion direction axis using the real-time position of the marker, Extracting both endpoints from the plurality of projection points, extracting an intermediate point between the two endpoints, and calculating a respiration depth of the measurement target person using at least one of the plurality of projection points, the two endpoints, , And calculating the breathing depth And generating and outputting a respiration monitoring result of the measurement subject.

상기 마커는, 패시브 마커(Passive Marker)와 플레이트(Plate)를 포함할 수 있다.The marker may include a passive marker and a plate.

상기 마커의 실시간 위치를 수집하는 단계는, 상기 센싱 정보 및 기 저장된 상기 마커의 형상 정보를 이용하여 상기 패시브 마커의 후보 영역 및 상기 플레이트의 후보 영역을 검출하는 단계, 그리고 상기 패시브 마커의 후보 영역과 상기 플레이트의 후보 영역을 매칭하여 상기 마커를 탐지하는 단계를 포함할 수 있다.The step of collecting the real-time position of the marker includes the steps of: detecting the candidate region of the passive marker and the candidate region of the plate using the sensing information and the shape information of the previously stored marker; And detecting the marker by matching a candidate region of the plate.

상기 센싱 정보는, 컬러 이미지 정보, 적외선(IR) 이미지 정보, 거리 정보 및 깊이 정보 중 적어도 하나를 포함할 수 있다.The sensing information may include at least one of color image information, infrared (IR) image information, distance information, and depth information.

상기 측정 대상자의 호흡깊이를 연산하는 단계는, 상기 중간지점으로부터 상기 프로젝션 포인트까지의 거리를 호흡 깊이로 판단하여 연산할 수 있다.The step of calculating the breathing depth of the measurement subject may calculate the breathing depth by determining the distance from the intermediate point to the projection point as the breathing depth.

상기 마커의 탐지 여부, 상기 호흡깊이, 상기 마커의 실시간 위치 및 상기 호흡 모션 방향 축 중 적어도 어느 하나를 이용하여 상기 측정 대상자의 호흡 모니터링 상황을 판단하는 단계를 더 포함할 수 있다.Determining a respiration monitoring status of the measurement subject using at least one of the detection of the marker, the breath depth, the real-time position of the marker, and the respiration motion direction axis.

상기 호흡 모니터링 상황을 판단하는 단계는, 상기 호흡 모션 방향 축과 상기 마커의 실시간 위치 사이의 거리를 측정하는 단계, 상기 플레이트에 수직하고 상기 마커의 중심을 통과하는 단위 벡터를 생성하고, 상기 단위 백터와 상기 호흡 모션 방향 축 사이의 각도를 측정하는 단계, 그리고 상기 호흡 모션 방향 축과 상기 마커의 위치들 사이의 거리 또는 상기 각도 중 적어도 어느 하나가 기 설정된 각각의 임계값보다 큰 경우, 호흡 모니터링을 정지하거나 상기 호흡 모션 방향 축을 재연산하도록 판단하는 단계를 포함할 수 있다.Wherein the step of determining the respiration monitoring status comprises: measuring a distance between the breathing motion direction axis and a real-time position of the marker; generating a unit vector that is perpendicular to the plate and passes through the center of the marker, And at least one of the distance between the respiratory motion direction axis and the positions of the marker or the angle is greater than a predetermined threshold value, respiration monitoring is performed Stopping or recalculating the breathing motion directional axis.

본 발명의 다른 실시예에 따른 호흡 모니터링 장치는 센서 장치로부터 센싱 정보를 입력받는 입력부, 측정 대상자의 신체에 부착된 마커를 탐지하고, 상기 마커의 실시간 위치를 획득하는 트래킹부, 상기 마커의 실시간 위치를 이용하여 호흡 모션 방향 축을 연산하고, 상기 호흡 모션 방향 축에 상기 마커의 실시간 위치를 투영하여 상기 마커의 실시간 위치에 대응하는 복수의 프로젝션 포인트를 추출하며, 상기 복수의 프로젝션 포인트 중에서 양측 종단점을 추출하고, 상기 양측 종단점의 중간지점을 추출하며, 상기 프로젝션 포인트, 상기 양측 종단점 및 상기 중간지점 중 적어도 어느 하나를 이용하여 상기 측정 대상자의 호흡깊이를 연산하는 연산부, 그리고 상기 호흡깊이를 이용하여 상기 측정 대상자의 호흡 모니터링 결과를 생성하여 출력하는 출력부를 포함한다.A breathing monitoring apparatus according to another embodiment of the present invention includes an input unit for inputting sensing information from a sensor device, a tracking unit for detecting a marker attached to the body of the measurement subject and obtaining a real time position of the marker, Extracting a plurality of projection points corresponding to a real-time position of the marker by projecting a real-time position of the marker on the breathing motion direction axis using the breathing motion direction axis, extracting both end points from the plurality of projection points, A calculation unit for extracting a midpoint between the two endpoints and calculating a respiration depth of the measurement target person using at least one of the projection point, the two endpoints and the intermediate point, The respiration monitoring result of the subject is generated and output And an output unit.

이와 같이 본 발명에 따르면, 저가의 멀티 센서를 이용할 수 있어 비용이 저렴하고, 비침습적(non-invasive)이며 휴대성이 높다. 또한 패시브 마커와 색상이 있는 플레이트를 포함하는 마커를 이용하여 호흡 모션의 트래킹이 정확히 이루어지며, 다양한 호흡 모션 측정 상황의 분류가 가능하고, 환자의 갑작스런 움직임이 있더라도 이후 호흡 모션을 자동으로 재측정이 가능하게 된다.As described above, according to the present invention, a low-cost multi-sensor can be used, which is inexpensive, non-invasive and highly portable. In addition, the tracking of respiratory motion is accurately performed by using a marker including a passive marker and a plate with a color, and it is possible to classify various breathing motion measurement situations, and even if the patient suddenly moves, the breathing motion is automatically remeasured .

도 1은 본 발명의 실시예에 따른 호흡 모니터링 장치를 이용한 시스템을 나타낸 도면이다.
도 2는 본 발명의 실시예에 따른 마커를 설명하기 위한 도면이다.
도 3은 본 발명의 실시예에 따른 호흡 모니터링 장치의 구성도이다.
도 4는 본 발명의 실시예에 따른 호흡 모니터링 방법의 순서도이다.
도 5는 본 발명의 실시예에 따른 S410단계의 순서도이다.
도 6은 본 발명의 실시예에 따른 패시브 마커 후보 영역 검출 과정을 설명하기 위한 도면이다.
도 7은 본 발명의 실시예에 따른 플레이트 후보 영역 및 마커 탐지 과정을 설명하기 위한 도면이다.
도 8은 본 발명의 실시예에 따른 호흡 모션 방향 축 연산 과정을 설명하기 위한 도면이다.
도 9는 본 발명의 실시예에 따른 프로젝션 포인트 연산 과정을 설명하기 위한 도면이다.
도 10는 본 발명의 실시예에 따른 모니터링 상황 판단 과정의 순서도이다.
도 11은 본 발명의 실시예에 따른 호흡 모니터링 결과 출력을 나타낸 도면이다.
1 illustrates a system using a respiration monitoring apparatus according to an embodiment of the present invention.
2 is a view for explaining a marker according to an embodiment of the present invention.
3 is a configuration diagram of a respiration monitoring apparatus according to an embodiment of the present invention.
4 is a flowchart of a respiration monitoring method according to an embodiment of the present invention.
FIG. 5 is a flow chart of step S410 according to an embodiment of the present invention.
6 is a diagram for explaining a passive marker candidate region detecting process according to an embodiment of the present invention.
7 is a view for explaining a plate candidate region and a marker detection process according to an embodiment of the present invention.
8 is a view for explaining a breathing motion direction axis calculation process according to an embodiment of the present invention.
9 is a diagram for explaining a projection point calculation process according to an embodiment of the present invention.
FIG. 10 is a flowchart of a monitoring situation determination process according to an embodiment of the present invention.
11 is a view showing an output of respiration monitoring result according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In order to clearly illustrate the present invention, parts not related to the description are omitted, and similar parts are denoted by like reference characters throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.Throughout the specification, when an element is referred to as "comprising ", it means that it can include other elements as well, without excluding other elements unless specifically stated otherwise.

그러면 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention.

우선, 도 1을 통해 본 발명의 실시예에 따른 호흡 모니터링 시스템에 대하여 살펴본다. 도 1은 본 발명의 실시예에 따른 호흡 모니터링 장치를 이용한 시스템을 나타낸 도면이다.First, a respiration monitoring system according to an embodiment of the present invention will be described with reference to FIG. 1 illustrates a system using a respiration monitoring apparatus according to an embodiment of the present invention.

도 1에서 보는 바와 같이, 호흡 모니터링 장치(100)를 이용한 호흡 모니터링 시스템은 센서 장치(200)가 마커(50)를 부착한 측정 대상자를 측정하여 센싱 정보를 생성하면, 호흡 모니터링 장치(100)는 센싱 정보를 입력받아 호흡 모니터링 결과를 생성한다.1, the respiratory monitoring system using the respiration monitoring apparatus 100 may be configured such that when the sensor device 200 measures the measurement subject to which the marker 50 is attached and generates sensing information, The sensing information is input to generate a respiration monitoring result.

도 2는 본 발명의 실시예에 따른 마커를 설명하기 위한 도면으로서, 도 2를 통해 마커의 형상에 대하여 구체적으로 살펴보면, 마커(50)는 도 2에서와 같이 플레이트(52)와 패시브 마커(51)를 포함한다.2, the marker 50 includes a plate 52 and a passive marker 51, as shown in FIG. 2. The marker 52 has a shape corresponding to that of the marker 52, ).

이때 마커(50)가 플레이트(52)를 포함하는 이유는 마커(50) 탐지의 정확성을 높이기 위함이며, 플레이트(52)의 형태는 원형, 사각형, 삼각형 등을 포함하고, 플레이트(52)의 색상은 노란색, 파랑색, 녹색 등을 포함한다. The reason that the marker 50 includes the plate 52 at this time is to increase the accuracy of the detection of the marker 50. The shape of the plate 52 includes a circular shape, a square shape, a triangle shape, Includes yellow, blue, green, and the like.

그리고 패시브 마커(51)의 형태는 구형 등을 포함한다. 여기서 패시브 마커(51)는 외부로부터 빛을 흡수하여 발산하는 형태의 수동 마커를 의미하며, 빛은 적외선 등을 포함한다.The shape of the passive marker 51 includes a sphere or the like. Here, the passive marker 51 means a passive marker that absorbs light from the outside and emits light, and the light includes infrared rays and the like.

다음으로, 호흡 모니터링 장치(100)는 센서 장치(200)로부터 센싱 정보를 입력받는다. 그리고 입력받은 센싱 정보를 이용하여 호흡깊이를 연산하고 호흡 모니터링 결과를 생성하여 출력한다. 호흡 모니터링 장치(100)는 아래에서 구성도를 통해 구체적으로 살펴보도록 한다.Next, the respiration monitoring apparatus 100 receives sensing information from the sensor apparatus 200. FIG. Then, the breathing depth is calculated using the sensing information input, and the respiration monitoring result is generated and output. The respiration monitoring apparatus 100 will be described in detail below with reference to the block diagram.

다음으로, 센서 장치(200)는 측정 대상자를 측정하여, 측정 대상자를 측정한 센싱 정보를 유무선 통신을 통해 호흡 모니터링 장치(100)로 전송한다. 여기서 센서 장치(200)는 IR 센서, 카메라, 깊이 센서, 초음파 센서, 압력 센서, 자이로 센서 등을 포함한다.Next, the sensor device 200 measures a person to be measured, and transmits sensed information, which is obtained by measuring the person to be measured, to the respiration monitoring device 100 through wired / wireless communication. Here, the sensor device 200 includes an IR sensor, a camera, a depth sensor, an ultrasonic sensor, a pressure sensor, a gyro sensor, and the like.

그러면, 도 3을 통해 본 발명의 실시예에 따른 호흡 모니터링 장치(100)에 대하여 살펴본다. 도 3은 본 발명의 실시예에 따른 호흡 모니터링 장치의 구성도이다.The respiration monitoring apparatus 100 according to an embodiment of the present invention will now be described with reference to FIG. 3 is a configuration diagram of a respiration monitoring apparatus according to an embodiment of the present invention.

우선, 호흡 모니터링 장치(100)는 입력부(110), 트래킹부(120), 연산부(130) 및 출력부(140)를 포함하며, 판단부(150)를 더 포함할 수 있다.First, the respiration monitoring apparatus 100 includes an input unit 110, a tracking unit 120, an operation unit 130, and an output unit 140, and may further include a determination unit 150.

호흡 모니터링 장치(100)에 대하여 구체적으로 살펴보면, 입력부(110)는 센서 장치(200)로부터 센싱 정보를 입력받는다. 여기서 입력부(110)는 센서 장치(200)와 유무선 통신을 통해 연결되어 센싱 정보를 수신한다. 그리고 센싱 정보는 센서 장치(200)를 이용하여 측정한 데이터로서, 센싱 정보는 컬러 이미지 정보, 적외선 이미지 정보, 거리 정보 및 깊이 정보 중 적어도 하나를 포함한다.Specifically, the input unit 110 receives sensing information from the sensor device 200. Here, the input unit 110 is connected to the sensor device 200 via wired / wireless communication to receive sensing information. The sensing information is data measured using the sensor device 200, and the sensing information includes at least one of color image information, infrared image information, distance information, and depth information.

다음으로, 트래킹부(120)는 센싱 정보를 이용하여 측정 대상자의 신체에 부착된 마커(50)를 탐지한다. 이때, 마커(50)는 패시브 마커(Passive Marker, 51)와 플레이트(Plate, 52)를 포함한다.Next, the tracking unit 120 detects the marker 50 attached to the body of the measurement subject using the sensing information. At this time, the marker 50 includes a passive marker 51 and a plate 52.

구체적으로 트래킹부(120)는 센싱 정보와 기 저장된 마커(50)의 형상 정보를 이용하여 패시브 마커(51)의 후보 영역 및 플레이트(52)의 후보 영역을 각각 검출한다. 그리고 트래킹부(120)는 각각 검출된 패시브 마커(51)의 후보 영역과 플레이트(52)의 후보 영역에 대한 데이터를 매칭하여 마커를 탐지한다. 여기서, 마커(50)의 형상 정보는 패시브 마커(51)의 형태 및 크기 등에 대한 정보와 플레이트(52)의 형태, 크기 및 색상 등에 대한 정보를 포함한다. Specifically, the tracking unit 120 detects the candidate region of the passive marker 51 and the candidate region of the plate 52 using the sensing information and the shape information of the previously stored marker 50, respectively. The tracking unit 120 detects the marker by matching the candidate region of the detected passive marker 51 and the candidate region of the plate 52 with each other. The shape information of the marker 50 includes information on the shape and size of the passive marker 51 and information on the shape, size, and color of the plate 52.

또한, 트래킹부(120)는 마커(50)의 실시간 위치를 수집한다. 트래킹부(120)는 마커(50)의 실시간 움직임을 트래킹하여 위치를 수집하며, 이때 마커(50)의 중심점을 마커(50)의 위치로 판단하여 마커(50)의 실시간 위치를 수집할 수 있다.In addition, the tracking unit 120 collects the real-time position of the marker 50. The tracking unit 120 may collect the position of the marker 50 by tracking the real time movement of the marker 50 and determining the center point of the marker 50 as the position of the marker 50 .

그리고, 트래킹부(120)는 칼만 필터를 이용하여 센싱 정보에 포함된 측정 대상자의 호흡 모션에 따른 노이즈를 제거할 수 있다. 구체적으로, 트래킹부(120)는 마커(50)의 실시간 위치에 칼만 필터를 적용하여 노이즈를 제거한다. 또한 트래킹부(120)는 기 저장된 파라미터로부터 노이즈의 정도 또는 호흡깊이의 평균에 대응하는 파라미터를 선택하여 칼만 필터의 파라미터를 선정할 수 있다.The tracking unit 120 may remove noise due to the breathing motion of the measurement subject included in the sensing information using the Kalman filter. Specifically, the tracking unit 120 applies a Kalman filter to the real-time position of the marker 50 to remove noise. In addition, the tracking unit 120 may select a parameter of the Kalman filter from a previously stored parameter by selecting a parameter corresponding to the average of the degree of noise or the breathing depth.

다음으로, 연산부(130)는 마커(50)의 실시간 위치를 이용하여 측정 대상자의 호흡 모션 방향 축을 연산한다. 예를 들어 연산부(130)는 주성분 분석(Principal Component Analysis, PCA)를 이용하여 마커(50)의 실시간 위치들로부터 측정 대상자의 호흡 모션 방향 축을 연산할 수 있다. 여기서, 호흡 모션 방향 축이란 측정 대상자가 호흡을 하는 경우 마커(50)가 움직이는 방향 축을 의미한다.Next, the operation unit 130 calculates the breathing motion direction axis of the measurement subject using the real-time position of the marker 50. [ For example, the operation unit 130 may calculate the respiratory motion direction axis of the measurement subject from the real-time positions of the marker 50 using Principal Component Analysis (PCA). Here, the breathing motion direction axis means a direction axis in which the marker 50 moves when the measurement subject breathes.

또한, 연산부(130)는 호흡 모션 방향 축에 마커(50)의 실시간 위치를 투영하여 마커의 실시간 위치에 대응하는 복수의 프로젝션 포인트를 연산하고, 복수의 프로젝션 포인트 중에서 양측 종단점에 해당하는 프로젝션 포인트와 및 양측 종단점의 중간지점을 추출한다.The arithmetic unit 130 calculates a plurality of projection points corresponding to the real-time position of the marker by projecting the real-time position of the marker 50 on the respiratory motion direction axis, and calculates projection points corresponding to both end points of the plurality of projection points And an intermediate point between both end points is extracted.

그러면, 연산부(130)는 복수의 프로젝션 포인트, 양측 종단점 및 중간지점 중 적어도 어느 하나를 이용하여 측정 대상자의 호흡깊이를 연산한다. 이때 호흡 깊이는 프로젝션 포인트와 중간지점 사이의 거리를 의미하며, 프로젝션 포인트는 복수이므로 각각의 프로젝션 포인트에 대응하여 복수의 호흡깊이가 연산된다.Then, the calculation unit 130 calculates the respiration depth of the measurement target person using at least one of the plurality of projection points, both endpoints and the intermediate point. In this case, the breathing depth means a distance between the projection point and the intermediate point, and since there are a plurality of projection points, a plurality of breathing depths are calculated corresponding to the respective projection points.

또한, 양측 종단점은 지면으로부터 가장 가까운 거리에 위치한 최소점과 지면으로부터 가장 먼 거리에 위치한 최대점을 포함하며, 연산부(130)는 프로젝션 포인트가 최소점과 중간지점 사이에 위치한 경우와 최대점과 중간지점 사이에 위치한 경우, 각기 다른 부호를 가지도록 하여 호흡깊이를 연산할 수 있다.In addition, the both endpoints include a minimum point located the shortest distance from the ground and a maximum point located the farthest from the ground, and the calculation unit 130 calculates the distance between the minimum point and the midpoint, If they are located between points, you can calculate respiration depths with different signs.

다음으로, 출력부(140)는 호흡깊이를 이용하여 측정 대상자의 호흡 모니터링 결과를 생성하여 출력한다. 구체적으로 출력부(140)는 X축을 시간축으로 하고 Y축을 호흡깊이로 하는 2차원 좌표상에 호흡 모션 그래프를 생성하여 출력할 수 있다. 또한, 출력부(140)는 판단부(150)의 호흡 모니터링 상황 판단 결과에 대응하는 호흡 측정 상황 그래프를 생성하여 출력할 수 있다.Next, the output unit 140 generates and outputs a respiration monitoring result of the measurement subject using the respiration depth. Specifically, the output unit 140 can generate and output a breathing motion graph on a two-dimensional coordinate having the X axis as a time axis and the Y axis as a breathing depth. Also, the output unit 140 may generate and output a respiration measurement status graph corresponding to the respiration monitoring status determination result of the determination unit 150.

다음으로, 판단부(150)는 측정 대상자의 호흡 모니터링 상황을 판단한다. 구체적으로 판단부(150)는 마커(50)의 탐지 여부, 호흡깊이, 마커(50)의 실시간 위치 및 호흡 모션 방향 축 중 적어도 어느 하나를 이용하여 측정 대상자의 호흡 모니터링 상황을 판단한다. 이때, 호흡 모니터링 상황은 준비단계, 정상모션, 호흡중지, 일시적 가림, 측정불가 및 갑작스런 움직임 등을 포함할 수 있다.Next, the determination unit 150 determines the respiration monitoring status of the measurement subject. Specifically, the determination unit 150 determines the respiratory monitoring status of the measurement subject using at least one of the detection of the marker 50, the breath depth, the real-time position of the marker 50, and the respiration motion direction axis. At this time, the respiration monitoring situation may include preparatory stage, normal motion, respiratory arrest, temporary occlusion, unmeasurable and sudden movement.

그리고, 판단부(150)는 호흡 모션 방향 축과 마커(50)의 실시간 위치 사이의 거리를 측정하고, 플레이트(52)에 수직하고 마커(50)의 중심을 통과하는 단위 벡터를 생성하여 단위 벡터와 호흡 모션 방향 축 사이의 각도를 측정할 수 있다. 또한, 측정된 거리 및 각도가 각각의 임계값보다 큰 경우 호흡 모니터링을 정지하거나 호흡 모션 방향 축을 재연산하도록 판단할 수 있다.The determination unit 150 measures the distance between the breathing motion direction axis and the real time position of the marker 50 and generates a unit vector that is perpendicular to the plate 52 and passes through the center of the marker 50, And the breathing motion direction axis. Also, if the measured distance and angle are greater than respective threshold values, it can be judged to stop respiratory monitoring or recompute the breathing motion direction axis.

이하에서는 도 4 내지 도 11을 통해 본 발명의 실시예에 따른 호흡 모니터링 장치를 이용한 호흡 모니터링 방법에 대하여 살펴본다. 도 4는 본 발명의 실시예에 따른 호흡 모니터링 방법의 순서도이다.Hereinafter, a respiration monitoring method using a respiration monitoring apparatus according to an embodiment of the present invention will be described with reference to FIG. 4 through FIG. 4 is a flowchart of a respiration monitoring method according to an embodiment of the present invention.

먼저, 호흡 모니터링 장치(100)는 센서 장치(200)로부터 센싱 정보를 입력받아, 마커(50)를 탐지하고, 마커(50)의 실시간 위치를 획득한다(S410). 이때, 센싱 정보는 센서 장치(200)가 측정 대상자를 측정한 정보로서, 컬러 이미지 정보, 적외선 이미지 정보, 거리 정보 및 깊이 정보 중 적어도 하나를 포함한다. First, the respiration monitoring apparatus 100 receives the sensing information from the sensor device 200, detects the marker 50, and acquires the real-time position of the marker 50 (S410). At this time, the sensing information includes at least one of color image information, infrared image information, distance information, and depth information as the information on the measurement object of the sensor device 200.

그리고 호흡 모니터링 장치(100)는 칼만 필터를 이용하여 센싱 정보에 포함된 측정 대상자의 호흡 모션에 따른 노이즈를 제거할 수 있다. 구체적으로, 호흡 모니터링 장치(100)는 마커(50)의 실시간 위치에 칼만 필터를 적용하여 노이즈를 제거한다. 또한, 호흡 모니터링 장치(100)는 기 저장된 파라미터로부터 노이즈의 정도 또는 호흡깊이의 평균에 대응하는 파라미터를 선택하여 칼만 필터의 파라미터를 선정할 수 있다.The respiration monitoring apparatus 100 can remove noise due to the breathing motion of the measurement subject included in the sensing information by using the Kalman filter. Specifically, the breath monitoring apparatus 100 applies a Kalman filter to the real-time position of the marker 50 to remove noise. In addition, the respiration monitoring apparatus 100 can select a parameter of the Kalman filter from a previously stored parameter by selecting a parameter corresponding to the average of the degree of noise or the breathing depth.

그러면 도 5 내지 도 7을 통해 S410 단계에 대하여 구체적으로 살펴본다. 도 5은 본 발명의 실시예에 따른 S410단계의 순서도이며, 도 6은 본 발명의 실시예에 따른 패시브 마커 후보 영역 검출 과정을 설명하기 위한 도면이고, 도 7은 본 발명의 실시예에 따른 플레이트 후보 영역 및 마커 탐지 과정을 설명하기 위한 도면이다.The steps S410 through S57 will be described in detail. 6 is a view for explaining a process of detecting a passive marker candidate region according to an embodiment of the present invention, and FIG. 7 is a view for explaining a passive marker candidate region detecting process according to an embodiment of the present invention. Candidate regions and marker detection processes.

호흡 모니터링 장치(100)는 센싱 정보 및 기 저장된 마커(50)의 형상 정보를 이용하여 패시브 마커(51)의 후보 영역 및 플레이트(52)의 후보 영역을 검출한다(S412). 이때, 마커(50)의 형상 정보는 패시브 마커(51) 및 플레이트(52)의 형태, 크기, 색상 정보 중 적어도 어느 하나를 포함한다.The respiratory monitoring apparatus 100 detects candidate regions of the passive marker 51 and the candidate regions of the plate 52 using the sensing information and the shape information of the stored marker 50 in operation S412. At this time, the shape information of the marker 50 includes at least one of the shape, size, and color information of the passive marker 51 and the plate 52.

우선, 호흡 모니터링 장치(100)는 센서 장치(200)로부터 입력받은 센싱 정보 중 적외선 이미지 정보를 이용하여 패시브 마커(51)의 후보 영역을 검출한다. 구체적으로 호흡 모니터링 장치(100)는 도 6의 (A)와 같이 적외선 이미지를 임계값을 이용하여 필터링한다. 즉, 적외선 이미지 내에서 임계값보다 밝게 측정되는 부분을 필터링하여 표시한다. First, the respiration monitoring apparatus 100 detects a candidate region of the passive marker 51 using infrared image information among the sensing information received from the sensor apparatus 200. Specifically, the respiration monitoring apparatus 100 filters the infrared image using a threshold value as shown in FIG. 6 (A). That is, a portion of the infrared image that is measured brighter than the threshold value is filtered and displayed.

그리고, 호흡 모니터링 장치(100)는 도 6의 (B)와 같이 필터링된 영역으로부터 기 저장된 패시브 마커(51)의 형상 정보에 대응하는 영역을 선택하여 패시브 마커(51)의 후보 영역을 검출한다. 이때 패시브 마커(51)의 후보 영역은 복수일 수 있다. Then, the respiration monitoring apparatus 100 detects a candidate region of the passive marker 51 by selecting an area corresponding to the shape information of the previously stored passive marker 51 from the filtered region as shown in FIG. 6B. At this time, the passive marker 51 may have a plurality of candidate regions.

그러면, 호흡 모니터링 장치(100)는 센서 장치로부터 입력받은 센싱 정보 중 컬러 이미지 정보를 이용하여 플레이트(52)의 후보 영역을 검출한다. 구체적으로 호흡 모니터링 장치(100)는 도 7의 (A)와 같이 컬러 이미지로부터 기 저장된 플레이트(52)의 색상 정보에 대응하는 영역을 검출할 수 있다. 또한, 깊이 정보를 이용하여 이미지에 나타난 객체의 크기 및 형태를 획득한 후, 이로부터 기 저장된 플레이트(52)의 크기 및 형태 정보에 대응하는 영역을 검출할 수 있다. 그리고 호흡 모니터링 장치(100)는 검출된 플레이트(52)의 색상 정보에 대응하는 영역 및 검출된 플레이트(52)의 크기 및 형태 정보에 대응하는 영역을 매칭하여 플레이트(52)의 후보 영역을 검출한다. 이때 플레이트(52)의 후보 영역은 복수일 수 있다.Then, the respiration monitoring apparatus 100 detects the candidate region of the plate 52 using the color image information among the sensing information received from the sensor device. Specifically, the breath monitoring apparatus 100 can detect an area corresponding to color information of the previously stored plate 52 from the color image as shown in FIG. 7 (A). In addition, it is possible to acquire the size and shape of the object shown in the image using the depth information, and then to detect the area corresponding to the size and shape information of the previously stored plate 52. The respiration monitoring apparatus 100 detects a candidate region of the plate 52 by matching an area corresponding to the color information of the detected plate 52 and an area corresponding to the size and shape information of the detected plate 52 . At this time, the candidate region of the plate 52 may be plural.

그러면, 호흡 모니터링 장치(100)는 패시브 마커(51) 후보 영역과 플레이트(52) 후보 영역을 매칭하여 마커(50)를 탐지한다(S414). Then, the respiration monitoring apparatus 100 detects the marker 50 by matching the candidate region of the passive marker 51 with the candidate region of the plate 52 (S414).

구체적으로, 호흡 모니터링 장치(100)는 패시브 마커(51) 후보 영역과 플레이트(52) 후보 영역을 매칭하여 도 6의 (B)와 같이 패시브 마커(52) 후보 영역과 플레이트(52) 후보 영역이 겹치는 영역을 마커(50)로 탐지한다.Specifically, the respiration monitoring apparatus 100 matches the candidate region of the passive marker 51 with the candidate region of the plate 52 to determine whether the candidate region of the passive marker 52 and the candidate region of the plate 52 The overlapping area is detected by the marker 50.

마커를 탐지한 후, 호흡 모니터링 장치(100)는 마커(50)의 위치를 실시간으로 획득한다. 이때 호흡 모니터링 장치(100)는 탐지된 마커(50)의 중심점을 마커(50)의 위치로 판단하여 마커(50)의 실시간 위치를 획득할 수 있다.After detecting the marker, the respiratory monitoring device 100 acquires the position of the marker 50 in real time. At this time, the respiration monitoring apparatus 100 can obtain the real-time position of the marker 50 by determining the center point of the detected marker 50 as the position of the marker 50.

S410 단계에서 마커(50)의 실시간 위치를 획득한 다음, 호흡 모니터링 장치(100)는 마커(50)의 실시간 위치를 이용하여 호흡 모션 방향 축을 연산한다(S420). 도 8은 본 발명의 실시예에 따른 호흡 모션 방향 축 연산 과정을 설명하기 위한 도면으로, 이하에서는 도 8을 통해 호흡 모션 방향 축 연산 과정을 살펴본다.After acquiring the real-time position of the marker 50 in step S410, the breathing monitoring apparatus 100 calculates the breathing motion direction axis using the real-time position of the marker 50 (S420). FIG. 8 is a view for explaining a breathing motion direction axis calculation process according to an embodiment of the present invention. Hereinafter, a breathing motion direction axis calculation process will be described with reference to FIG.

먼저, 호흡 모니터링 장치(100)는 도 8의 (A)와 같이 획득된 마커(50)의 실시간 위치를 분석하여 도 8의 (B)와 같이 측정 대상자의 호흡 모션 방향 축을 연산한다. First, the respiration monitoring apparatus 100 analyzes the real-time position of the obtained marker 50 as shown in FIG. 8A, and calculates the breathing motion direction axis of the measurement subject as shown in FIG. 8B.

이때, 측정 대상자의 호흡 모션 방향 축을 연산하기 위해, 호흡 모니터링 장치(100)는 주성분분석(Principal Component Analysis, PCA)을 이용하여 마커(50)의 실시간 위치로부터 호흡 모션 방향 축을 연산한다. 또한, 호흡 모니터링 장치(100)는 기 설정된 시간동안 획득한 마커(50)의 실시간 위치를 이용하여 호흡 모션 방향 축을 연산할 수 있으며, 이때, 호흡 모션 방향 축과 기 설정된 시간동안 획득된 마커(50)의 실시간 위치들의 거리의 평균이 기 설정된 임계값 이상인 경우, 기 설정된 시간동안 마커(50)의 실시간 위치를 재수집하고 호흡 모션 방향축을 재연산할 수 있다.At this time, in order to calculate the respiration motion direction axis of the measurement subject, the respiration monitoring apparatus 100 calculates the respiratory motion direction axis from the real time position of the marker 50 using Principal Component Analysis (PCA). In addition, the breathing monitoring apparatus 100 can calculate the respiratory motion direction axis using the real-time position of the marker 50 acquired for a predetermined time. At this time, the breathing motion direction axis and the marker 50 , The real-time position of the marker 50 may be recollected and the breathing motion direction axis may be recalculated for a predetermined period of time if the average of the distances of the real-time positions of the marker 50 is greater than or equal to the predetermined threshold.

그러면, 호흡모니터링 장치(100)는 호흡 모션 방향 축에 마커(50)의 실시간 위치를 투영하여 마커의 실시간 위치에 대응하는 복수의 프로젝션 포인트를 추출한다(S430). 도 9은 본 발명의 실시예에 따른 프로젝션 포인트 연산 과정을 설명하기 위한 도면으로서, 이하에서는 도 9를 통해 프로젝션 포인트 연산 과정을 살펴본다. 도 9에서는 설명의 편의상 5개의 실시간 마커(50) 위치를 이용하여 5개의 프로젝션 포인트를 추출하는 것으로 가정한다.Then, the respiration monitoring apparatus 100 projects a real-time position of the marker 50 on the breathing motion direction axis to extract a plurality of projection points corresponding to the real-time position of the marker (S430). FIG. 9 is a view for explaining a projection point calculation process according to an embodiment of the present invention. Hereinafter, a projection point calculation process will be described with reference to FIG. In FIG. 9, it is assumed that five projection points are extracted using the positions of five real-time markers 50 for convenience of explanation.

도 9에 나타난 바와 같이, 중간의 세로 직선은 호흡 모션 방향 축을 의미하고, 호흡 모션 방향 축 외곽의 점은 마커(50)의 실시간 위치를 의미하며, 축 위에 있는 점은 마커(50)의 실시간 3차원 위치가 투영된 프로젝션 포인트를 의미한다. 즉 호흡 모니터링 장치(100)는 도 9와 같이 호흡 모션 방향 축에 실시간 마커(50) 위치를 수직으로 투영하여 복수의 프로젝션 포인트를 추출한다.9, the middle vertical line represents the respiratory motion direction axis, the point outside the breathing motion direction axis represents the real time position of the marker 50, and the point on the axis represents the real time 3 Means a projection point on which a dimension position is projected. That is, the respiration monitoring apparatus 100 extracts a plurality of projection points by vertically projecting the position of the real-time marker 50 on the breathing motion direction axis as shown in FIG.

그리고, 호흡 모니터링 장치(100)는 복수의 프로젝션 포인트 중에서 양측 종단점 및 양측 종단점의 중간지점을 추출한다(S440). 도 8에 나타난 바와 같이, 양측 종단점(MAX, MIN)은 지면으로부터 가장 가까운 거리에 위치한 최소점(MIN)과 지면으로부터 가장 먼 거리에 위치한 최대점(MAX)을 포함한다. 즉, 호흡 모니터링 장치(100)는 복수의 프로젝션 포인트 중에서 양측 종단점에 해당하는 프로젝션 포인트(MAX, MIN)와 양측 종단점의 가운데 지점인 중간지점(MID)을 추출한다. Then, the respiratory monitoring apparatus 100 extracts the midpoints of both endpoints and both endpoints from among the plurality of projection points (S440). As shown in Fig. 8, both end points MAX and MIN include a minimum point MIN located closest to the ground and a maximum point MAX located the greatest distance from the ground. That is, the respiration monitoring apparatus 100 extracts projection points (MAX, MIN) corresponding to both endpoints from the plurality of projection points and an intermediate point (MID) which is the middle point of both endpoints.

본 발명의 실시예에 따르면 호흡 모니터링 장치(100)는 기 설정된 시간 동안 획득한 마커(50)의 실시간 위치를 이용하여 양측 종단점(MAX, MIN) 및 양측 종단점의 중간지점(MID)을 추출할 수 있으며, 이때 호흡 모션 방향 축을 연산하는데 이용된 마커의 실시간 위치가 이용될 수 있다.According to the embodiment of the present invention, the respiration monitoring apparatus 100 can extract the midpoints (MIDs) of both endpoints MAX and MIN and both endpoints using the real-time position of the marker 50 acquired during a predetermined time Where the real-time position of the marker used to calculate the breathing motion directional axis can be used.

다음으로, 호흡 모니터링 장치(100)는 프로젝션 포인트, 양측 종단점 및 중간지점을 이용하여 측정 대상자의 호흡깊이를 연산한다(S450). Next, the respiration monitoring apparatus 100 calculates the respiration depth of the measurement subject using the projection point, both endpoints and the intermediate point (S450).

호흡깊이를 연산하는 과정을 구체적으로 살펴보면, 호흡 모니터링 장치(100)는 중간지점(MID)으로부터 현재 시점에서의 프로젝션 포인트까지의 거리를 호흡깊이로 판단하여 연산할 수 있으며, 프로젝션 포인트가 중간지점(MID)과 최대점(MAX) 사이에 있는 경우와 프로젝션 포인트가 중간지점(MID)과 최소점(MIN) 사이에 있는 경우의 부호를 달리하여 호흡깊이를 연산할 수 있다.Specifically, the breathing monitoring apparatus 100 can calculate the distance from the midpoint (MID) to the projection point at the current point as a breathing depth, and calculate the distance between the projection point and the midpoint MID) and the maximum point (MAX), and when the projection point is between the midpoint (MID) and the minimum point (MIN).

예를 들어, 프로젝션 포인트가 중간지점(MID)과 최대점(MAX) 사이에 있는 경우, 프로젝션 포인트와 중간지점(MID) 사이의 거리를 4라고 한다면, 호흡깊이는 4가 된다. 하지만 프로젝션 포인트가 중간지점(MID)과 최소지점(MIN) 사이에 있는 경우, 프로젝션 포인트와 중간지점(MID) 사이의 거리를 3이라 한다면, 호흡깊이는 -3이 된다. For example, if the projection point is between the midpoint (MID) and the maximum point (MAX), if the distance between the projection point and the midpoint (MID) is 4, then the breath depth is 4. However, if the projection point is between the midpoint (MID) and the minimum point (MIN), if the distance between the projection point and the midpoint (MID) is 3, the breathing depth is -3.

그리고, 호흡 모니터링 장치(100)는 측정 대상자의 호흡 모니터링 상황을 판단할 수 있다(S460). 구체적으로, 호흡 모니터링 장치는 마커(50)의 탐지 여부, 호흡깊이, 마커(50)의 실시간 위치 및 호흡 모션 방향 축 중 적어도 어느 하나를 이용하여 호흡 모니터링 상황을 판단할 수 있다.Then, the respiration monitoring apparatus 100 can determine the respiration monitoring status of the measurement subject (S460). Specifically, the respiration monitoring device can determine the respiration monitoring status using at least one of the detection of the marker 50, the depth of breath, the real-time position of the marker 50, and the direction of the respiration motion direction.

본 발명의 일 실시예에 따르면, 호흡 모니터링 상황은 준비 단계(Initialization), 정상 모션(Normal), 호흡중지(Breath-Hold), 일시적 가림(Hiding), 측정불가(Undetected) 및 갑작스런 움직임(Moving)을 포함할 수 있다. According to one embodiment of the present invention, the respiration monitoring situation may include an initialization, a normal motion, a breathing-hold, a temporary hiding, an undetected and a sudden movement, . ≪ / RTI >

각 호흡 모니터링 상황의 판단 방법에 대하여 구체적으로 살펴보면, 우선, 준비단계는 호흡 모니터링 장치(100)가 S410 내지 S440단계를 수행하고 있는 경우로서, 호흡 모니터링 장치(100)는 S410 내지 S440 단계를 수행 중으로 판단되면 호흡 모니터링 상황을 준비단계로 판단할 수 있다.In detail, the preparation step is a step in which the respiration monitoring apparatus 100 performs steps S410 to S440, and the respiration monitoring apparatus 100 is performing steps S410 to S440 If it is judged, the respiration monitoring situation can be judged as the preparation stage.

다음으로, 정상 모션은 측정 대상자의 마커 탐지, 트래킹 및 호흡 깊이 연산 등이 진행되어 측정 대상자의 호흡 모니터링 결과가 출력되고 있는 경우로서, 예를 들어 호흡 모니터링 장치(100)가 마커(50)를 탐지하고 최대 호흡 깊이와 최소 호흡 깊이의 차이가 기 설정된 값보다 높은 상황에서 호흡 깊이를 연산하여 호흡 모니터링 결과를 출력하고 있다면 호흡 모니터링 상황을 정상 모션으로 판단할 수 있다.Next, the normal motion is a case in which the respiration monitoring result of the measurement subject is outputted by progressing the marker detection, tracking and breath depth calculation of the measurement subject, and for example, when the respiration monitoring apparatus 100 detects the marker 50 And if the difference between the maximum respiration depth and the minimum respiration depth is higher than a preset value, then the respiration monitoring result can be determined as normal motion if the respiration depth is calculated and the respiration monitoring result is outputted.

그리고, 호흡중지는 측정 대상자가 호흡을 멈추고 있는 경우로서, 예를 들어 실시간 호흡깊이가 싸인파형으로 나타나는 경우, 한 주기의 호흡깊이 중 최대 호흡 깊이와 최소 호흡 깊이의 차이가 기 설정된 값보다 작거나 같은 경우 호흡 모니터링 장치는 호흡 모니터링 상황을 호흡중지로 판단할 수 있다.The respiratory arrest is a case where the subject stops breathing. For example, when the respiration depth of the respiration depth of one cycle is smaller than the predetermined value, the difference between the maximum respiration depth and the minimum respiration depth In the same case, the respiration monitoring device may determine that the respiration monitoring situation is stopped.

다음으로, 일시적 가림은 측정 대상자와 측정 장치 사이에 제 3의 물체가 일시적으로 존재하는 경우로서, 마커(50)가 탐지되는 않는 상황에서 센싱 정보를 통해 제3의 물체가 감지된다면 호흡 모니터링 장치(100)는 호흡 모니터링 상황을 일시적 가림으로 판단할 수 있다.Next, the temporal occlusion is a case where a third object is temporarily present between the measurement subject and the measurement device. If the third object is detected through the sensing information in a situation where the marker 50 is not detected, 100) can determine that the respiration monitoring situation is temporarily blocked.

그리고, 측정불가는 마커(50)가 탐지되지 않아 호흡 모니터링이 진행될 수 없는 경우로서, 마커(50)가 탐지되지 않으면서 센싱 정보를 통해 제3의 물체가 감지되지 않는다면 호흡 모니터링 장치(100)는 호흡 모니터링 상황을 측정불가로 판단할 수 있다.If the marker 50 is not detected and the third object is not sensed through the sensing information without the marker 50 being detected, the respiration monitoring apparatus 100 can not detect the marker 50 The respiration monitoring situation can be judged to be unmeasurable.

다음으로, 갑작스런 움직임은 마커(50)를 부착한 환자가 급작스럽게 움직이는 경우를 의미하며, 호흡 모션 방향 축과 마커(50)의 실시간 위치 사이의 거리 및 마커의 단위 벡터와 호흡 모션 방향 축 사이의 각도 중 적어도 어느 하나가 기 설정된 각각의 임계값보다 큰 경우 호흡 모니터링 장치(100)는 호흡 모니터링 상황을 갑작스런 움직임으로 판단할 수 있다.Next, the sudden movement means a case where the patient with the marker 50 is suddenly moved, and the distance between the breathing motion direction axis and the real time position of the marker 50 and between the unit vector of the marker and the breathing motion direction axis And the angles are greater than predetermined threshold values, the respiration monitoring apparatus 100 may determine the breath monitoring state as a sudden movement.

도 10은 본 발명의 실시예에 따른 모니터링 상황 판단 과정의 순서도이며, 이하에서는 도 10을 통해 호흡 모니터링 상황을 갑작스런 움직임으로 판단하는 과정에 대하여 구체적으로 살펴본다.FIG. 10 is a flow chart of a monitoring situation determination process according to an embodiment of the present invention. Hereinafter, a process of determining a breathing monitoring situation as a sudden motion will be described in detail with reference to FIG.

먼저, 호흡 모니터링 장치(100)는 호흡 모션 방향 축과 마커(50)의 실시간 위치 사이의 거리를 측정한다(S462). 여기서, 호흡 모션 방향 축과 마커(50)의 실시간 위치 사이의 거리는 마커(50)의 실시간 위치로부터 호흡 모션 방향 축을 향한 수선의 길이가 된다.First, the respiration monitoring apparatus 100 measures the distance between the breathing motion direction axis and the real-time position of the marker 50 (S462). Here, the distance between the breathing motion direction axis and the real time position of the marker 50 becomes the length of the waterline from the real time position of the marker 50 toward the breathing motion direction axis.

다음으로, 호흡 모니터링 장치(100)는 마커(50)의 플레이트(52)에 수직하고 마커(50)의 중심을 통과하는 단위 벡터를 생성하고, 단위 벡터와 호흡 모션 방향 축 사이의 각도를 측정한다(S464).The respiration monitoring apparatus 100 then generates a unit vector that is perpendicular to the plate 52 of the marker 50 and passes through the center of the marker 50 and measures the angle between the unit vector and the breathing motion direction axis (S464).

그러면, 호흡 모니터링 장치(100)는 S462에서 측정된 거리와 S464에서 측정된 각도를 각각의 임계값과 비교하여 호흡 모니터링 상황을 판단한다(S466). 구체적으로 S462에서 측정된 거리와 S464에서 측정된 각도 중 적어도 어느 하나가 각각의 임계값보다 큰 경우, 호흡 모니터링 장치(100)는 호흡 모니터링 상황을 갑작스런 움직임으로 판단한다. 그리고 호흡 모니터링 장치(100)는 호흡 모니터링을 정지하거나 호흡 모션 방향 축을 재연산하도록 한다. 즉 호흡 모니터링 장치(100)는 S420단계부터 다시 호흡 모니터링을 진행하게 된다.Then, the respiration monitoring apparatus 100 compares the measured distance in step S462 and the measured angle in step S464 with the respective thresholds to determine the respiratory monitoring status (step S466). Specifically, when at least one of the distance measured in S462 and the angle measured in S464 is greater than the respective threshold, the breath monitoring apparatus 100 judges the breath monitoring state as a sudden movement. And the respiration monitoring device 100 stops breath monitoring or allows the respiratory motion direction axis to recompute. That is, the respiration monitoring apparatus 100 performs the respiration monitoring again from step S420.

다음으로, 호흡 모니터링 장치(100)는 호흡깊이를 이용하여 측정 대상자의 호흡 모니터링 결과를 생성하여 출력한다(S470). 여기서 호흡 모니터링 결과는 X축을 시간축으로 하고 Y축을 호흡깊이로 하는 호흡 모션 그래프를 포함하며, 호흡 모니터링 상황 판단 결과를 포함할 수 있다.Next, the respiration monitoring apparatus 100 generates and outputs a respiration monitoring result of the measurement subject using the breath depth (S470). Here, the respiration monitoring result includes a breathing motion graph in which the X-axis is the time axis and the Y-axis is the breathing depth, and may include a result of the breathing monitoring situation judgment.

도 11은 본 발명의 실시예에 따른 호흡 모니터링 결과 출력을 나타낸 도면이다. 도 11의 (A) 및 (B)에서 보는 바와 같이 3개의 원도우를 포함할 수 있으며, (1)번 윈도우는 센싱정보를 이용하여 촬영 영상을 출력한 것이고, (2)번 윈도우는 마커(50), 호흡 모션 방향축 및 단위 벡터를 출력한 것이고, (3)번 윈도우는 호흡 모니터링 결과를 출력한 것으로, (3)번 윈도우의 상단은 호흡 모션 그래프를 의미하고 하단은 호흡 모니터링 상황 판단 결과를 의미한다.11 is a view showing an output of respiration monitoring result according to an embodiment of the present invention. As shown in FIGS. 11 (A) and 11 (B), the window may include three windows. Window (1) outputs a photographed image using sensing information. Window ), The respiration motion direction axis and the unit vector, (3) window is the output of the respiration monitoring result, (3) the upper part of the window is the breathing motion graph, and the lower part is the respiration monitoring situation judgment result it means.

먼저, 도 11의 (A)의 하단을 살펴보면, 좌측, 중간, 우측은 각각 호흡중지, 정상모션, 준비단계의 호흡 모션 그래프 및 호흡 모니터링 상황 판단 결과를 나타낸다. 11 (A), left, middle, and right represent respiration stop, normal motion, breathing motion graph of the preparation stage, and respiration monitoring situation determination results, respectively.

그리고 도 11의 (B)의 하단을 살펴보면, 좌측, 중간, 우측은 각각 일시적 가림, 정상 모션, 준비단계의 호흡 모션 그래프 및 호흡 모니터링 상황 판단 결과를 나타낸다.11 (B), the left, middle, and right sides show temporal occlusion, normal motion, respiratory motion graph of the preparation stage, and respiration monitoring situation determination results, respectively.

본 발명의 실시예에 따르면, 저가의 멀티 센서를 이용할 수 있어 비용이 저렴하고, 비침습적(non-invasive)이며 휴대성이 높다. 또한 패시브 마커와 색상이 있는 플레이트를 포함하는 마커를 이용하여 호흡 모션의 트래킹이 정확히 이루어지며, 다양한 호흡 모션 측정 상황의 분류가 가능하고, 환자의 갑작스런 움직임이 있더라도 이후 호흡 모션을 자동으로 재측정이 가능하게 된다.According to the embodiment of the present invention, a low-cost multi-sensor can be used, which is inexpensive, non-invasive and highly portable. In addition, the tracking of respiratory motion is accurately performed by using a marker including a passive marker and a plate with a color, and it is possible to classify various breathing motion measurement situations, and even if the patient suddenly moves, the breathing motion is automatically remeasured .

본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.While the present invention has been described with reference to exemplary embodiments, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the appended claims. Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.

50 : 마커 51 : 패시브 마커
52 : 플레이트 100 : 호흡 모니터링 장치
110 : 입력부 120 : 트래킹부
130 : 연산부 140 : 출력부
150 : 판단부 200 : 센서 장치
50: marker 51: passive marker
52: Plate 100: Breath monitoring device
110: input unit 120: tracking unit
130: Operation unit 140:
150: determination unit 200: sensor device

Claims (14)

호흡 모니터링 장치를 이용하는 호흡 모니터링 방법에 있어서,
센서 장치로부터 센싱 정보를 입력받아, 측정 대상자의 신체에 부착된 마커를 탐지하고, 상기 마커의 실시간 위치를 획득하는 단계,
상기 마커의 실시간 위치를 이용하여 호흡 모션 방향 축을 연산하고, 상기 호흡 모션 방향 축에 상기 마커의 실시간 위치를 투영하여 상기 마커의 실시간 위치에 대응하는 복수의 프로젝션 포인트를 추출하는 단계,
상기 복수의 프로젝션 포인트 중에서 양측 종단점을 추출하고, 상기 양측 종단점의 중간지점을 추출하며, 상기 복수의 프로젝션 포인트, 상기 양측 종단점 및 상기 중간지점 중 적어도 어느 하나를 이용하여 상기 측정 대상자의 호흡깊이를 연산하는 단계, 그리고
상기 호흡깊이를 이용하여 상기 측정 대상자의 호흡 모니터링 결과를 생성하여 출력하는 단계를 포함하는 호흡 모니터링 방법.
A respiration monitoring method using a respiration monitoring device,
Receiving sensing information from the sensor device, detecting a marker attached to the body of the measurement subject, and obtaining a real-time position of the marker,
Extracting a plurality of projection points corresponding to a real-time position of the marker by projecting a real-time position of the marker on the breathing motion direction axis by calculating a respiration motion direction axis using the real-time position of the marker,
Extracting both endpoints from the plurality of projection points, extracting an intermediate point between the two endpoints, calculating a respiration depth of the measurement subject using at least one of the plurality of projection points, the two endpoints, and the intermediate point And
And generating and outputting a respiration monitoring result of the measurement subject using the respiration depth.
제1항에 있어서,
상기 마커는,
패시브 마커(Passive Marker)와 플레이트(Plate)를 포함하는 호흡 모니터링 방법.
The method according to claim 1,
The marker
A respiration monitoring method comprising a passive marker and a plate.
제2항에 있어서,
상기 마커의 실시간 위치를 수집하는 단계는,
상기 센싱 정보 및 기 저장된 상기 마커의 형상 정보를 이용하여 상기 패시브 마커의 후보 영역 및 상기 플레이트의 후보 영역을 검출하는 단계, 그리고
상기 패시브 마커의 후보 영역과 상기 플레이트의 후보 영역을 매칭하여 상기 마커를 탐지하는 단계를 포함하는 호흡 모니터링 방법.
3. The method of claim 2,
The step of collecting the real-
Detecting the candidate region of the passive marker and the candidate region of the plate using the sensing information and the shape information of the previously stored marker;
And detecting the marker by matching a candidate region of the passive marker with a candidate region of the plate.
제1항에 있어서,
상기 센싱 정보는,
컬러 이미지 정보, 적외선(IR) 이미지 정보, 거리 정보 및 깊이 정보 중 적어도 하나를 포함하는 호흡 모니터링 방법.
The method according to claim 1,
The sensing information,
Color image information, infrared (IR) image information, distance information, and depth information.
제1항에 있어서,
상기 측정 대상자의 호흡깊이를 연산하는 단계는,
상기 중간지점으로부터 상기 복수의 프로젝션 포인트까지의 거리를 호흡 깊이로 판단하여 연산하는 호흡 모니터링 방법.
The method according to claim 1,
The step of calculating the respiration depth of the measurement subject includes:
And a distance from the intermediate point to the plurality of projection points is determined as a breathing depth.
제2항에 있어서,
상기 마커의 탐지 여부, 상기 호흡깊이, 상기 마커의 실시간 위치 및 상기 호흡 모션 방향 축 중 적어도 어느 하나를 이용하여 상기 측정 대상자의 호흡 모니터링 상황을 판단하는 단계를 더 포함하는 호흡 모니터링 방법.
3. The method of claim 2,
Further comprising the step of determining a respiration monitoring status of the measurement subject using at least one of whether or not the marker is detected, the respiration depth, the real-time position of the marker, and the respiration motion direction axis.
제6항에 있어서,
상기 호흡 모니터링 상황을 판단하는 단계는,
상기 호흡 모션 방향 축과 상기 마커의 실시간 위치 사이의 거리를 측정하는 단계,
상기 플레이트에 수직하고 상기 마커의 중심을 통과하는 단위 벡터를 생성하고, 상기 단위 백터와 상기 호흡 모션 방향 축 사이의 각도를 측정하는 단계, 그리고
상기 호흡 모션 방향 축과 상기 마커의 위치들 사이의 거리 또는 상기 각도 중 적어도 어느 하나가 기 설정된 각각의 임계값보다 큰 경우, 호흡 모니터링을 정지하거나 상기 호흡 모션 방향 축을 재연산하도록 판단하는 단계를 포함하는 호흡 모니터링 방법.
The method according to claim 6,
Wherein the step of determining the respiration monitoring status comprises:
Measuring a distance between the breathing motion directional axis and a real-time position of the marker,
Generating a unit vector perpendicular to the plate and passing through the center of the marker and measuring an angle between the unit vector and the breathing motion direction axis,
Determining if the distance between the respiratory motion direction axis and the position of the marker or at least one of the angles is greater than a predetermined threshold value to stop respiratory monitoring or recompute the respiratory motion directional axis A respiration monitoring method.
센서 장치로부터 센싱 정보를 입력받는 입력부,
측정 대상자의 신체에 부착된 마커를 탐지하고, 상기 마커의 실시간 위치를 획득하는 트래킹부,
상기 마커의 실시간 위치를 이용하여 호흡 모션 방향 축을 연산하고, 상기 호흡 모션 방향 축에 상기 마커의 실시간 위치를 투영하여 상기 마커의 실시간 위치에 대응하는 복수의 프로젝션 포인트를 추출하며, 상기 복수의 프로젝션 포인트 중에서 양측 종단점을 추출하고, 상기 양측 종단점의 중간지점을 추출하며, 상기 프로젝션 포인트, 상기 양측 종단점 및 상기 중간지점 중 적어도 어느 하나를 이용하여 상기 측정 대상자의 호흡깊이를 연산하는 연산부, 그리고
상기 호흡깊이를 이용하여 상기 측정 대상자의 호흡 모니터링 결과를 생성하여 출력하는 출력부를 포함하는 호흡 모니터링 장치.
An input unit for receiving sensing information from the sensor device,
A tracking unit for detecting a marker attached to the body of the measurement subject and obtaining a real time position of the marker,
A plurality of projection points corresponding to a real-time position of the marker are extracted by projecting a real-time position of the marker on the respiratory motion direction axis by calculating a breathing motion direction axis using the real-time position of the marker, An operation unit for extracting both endpoints from the two endpoints, extracting an intermediate point between the two endpoints, and calculating a respiration depth of the measurement subject using at least one of the projection point, the endpoints at both ends, and the intermediate point, and
And an output unit for generating and outputting a respiration monitoring result of the measurement subject using the respiration depth.
제8항에 있어서,
상기 마커는,
패시브 마커(Passive Marker)와 플레이트(Plate)를 포함하는 호흡 모니터링 장치.
9. The method of claim 8,
The marker
A respiratory monitoring device comprising a passive marker and a plate.
제9항에 있어서,
상기 트래킹부는,
상기 센싱 정보 및 기 저장된 상기 마커의 형상 정보를 이용하여 상기 패시브 마커의 후보 영역 및 상기 플레이트의 후보 영역을 검출하고, 상기 패시브 마커의 후보 영역과 상기 플레이트의 후보 영역을 매칭하여 상기 마커를 탐지하는 호흡 모니터링 장치.
10. The method of claim 9,
The tracking unit includes:
Detecting a candidate region of the passive marker and a candidate region of the plate using the sensing information and the shape information of the previously stored marker and detecting the marker by matching the candidate region of the passive marker with the candidate region of the plate Breathing monitoring device.
제8항에 있어서,
상기 센싱 정보는,
컬러 이미지 정보, 적외선(IR) 이미지 정보, 거리 정보 및 깊이 정보 중 적어도 하나를 포함하는 호흡 모니터링 장치.
9. The method of claim 8,
The sensing information,
Color image information, infrared (IR) image information, distance information, and depth information.
제8항에 있어서,
상기 연산부는,
상기 중간지점으로부터 상기 복수의 프로젝션 포인트까지의 거리를 호흡 깊이로 판단하여 연산하는 호흡 모니터링 장치.
9. The method of claim 8,
The operation unit,
And a distance from the intermediate point to the plurality of projection points is determined as a breathing depth.
제9항에 있어서,
상기 마커의 탐지 여부, 상기 호흡깊이, 상기 마커의 실시간 위치 및 상기 호흡 모션 방향 축 중 적어도 어느 하나를 이용하여 상기 측정 대상자의 호흡 모니터링 상황을 판단하는 판단부를 더 포함하는 호흡 모니터링 방법.
10. The method of claim 9,
Further comprising a determination unit for determining a breathing monitoring state of the measurement subject using at least one of whether the marker is detected, the breathing depth, the real-time position of the marker, and the breathing motion direction axis.
제13항에 있어서,
상기 판단부는,
상기 호흡 모션 방향 축과 상기 마커의 실시간 위치 사이의 거리를 측정하고, 상기 플레이트에 수직하고 상기 마커의 중심을 통과하는 단위 벡터를 생성하고, 상기 단위 백터와 상기 호흡 모션 방향 축 사이의 각도를 측정하며, 상기 호흡 모션 방향 축과 상기 마커의 위치들 사이의 거리 또는 상기 각도 중 적어도 어느 하나가 기 설정된 각각의 임계값보다 큰 경우, 호흡 모니터링을 정지하거나 상기 호흡 모션 방향 축을 재연산하도록 판단하는 호흡 모니터링 장치.
14. The method of claim 13,
Wherein,
Measuring a distance between the breathing motion direction axis and a real-time position of the marker, generating a unit vector perpendicular to the plate and passing through the center of the marker, and measuring an angle between the unit vector and the breathing motion direction axis And a respiratory motion direction axis and / or respiratory motion direction axis, and wherein, when at least one of the distance between the respiration motion direction axis and the position of the marker or the angle is greater than a predetermined threshold value, Monitoring device.
KR1020150118758A 2015-08-24 2015-08-24 Respiratory monitoring system and method thereof KR101725654B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150118758A KR101725654B1 (en) 2015-08-24 2015-08-24 Respiratory monitoring system and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150118758A KR101725654B1 (en) 2015-08-24 2015-08-24 Respiratory monitoring system and method thereof

Publications (2)

Publication Number Publication Date
KR20170024196A true KR20170024196A (en) 2017-03-07
KR101725654B1 KR101725654B1 (en) 2017-04-11

Family

ID=58411480

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150118758A KR101725654B1 (en) 2015-08-24 2015-08-24 Respiratory monitoring system and method thereof

Country Status (1)

Country Link
KR (1) KR101725654B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018101499A1 (en) * 2016-11-29 2018-06-07 울산대학교 산학협력단 Respiratory monitoring device and method thereof
CN110051356A (en) * 2019-04-04 2019-07-26 北京贝麦克斯科技有限公司 The acquisition methods and device of human body respiration status information
KR20200050295A (en) 2018-11-01 2020-05-11 스타일치과기공 주식회사 Oral airway, method for manufacturing threof and respiration monitoring system
KR20200050443A (en) 2020-02-19 2020-05-11 스타일치과기공 주식회사 Oral airway, method for manufacturing threof and respiration monitoring system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11717181B2 (en) * 2020-06-11 2023-08-08 Samsung Electronics Co., Ltd. Adaptive respiratory condition assessment

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004049109A2 (en) * 2002-11-25 2004-06-10 Varian Medical Systems Technologies, Inc. Method and system for monitoring breathing activity of a subject
WO2007052755A1 (en) * 2005-11-04 2007-05-10 Kabushiki Kaisha Toshiba Respiration monitoring device, respiration monitoring system, medical treatment system, respiration monitoring method, and respiration monitoring program

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004049109A2 (en) * 2002-11-25 2004-06-10 Varian Medical Systems Technologies, Inc. Method and system for monitoring breathing activity of a subject
WO2007052755A1 (en) * 2005-11-04 2007-05-10 Kabushiki Kaisha Toshiba Respiration monitoring device, respiration monitoring system, medical treatment system, respiration monitoring method, and respiration monitoring program

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018101499A1 (en) * 2016-11-29 2018-06-07 울산대학교 산학협력단 Respiratory monitoring device and method thereof
KR20200050295A (en) 2018-11-01 2020-05-11 스타일치과기공 주식회사 Oral airway, method for manufacturing threof and respiration monitoring system
CN110051356A (en) * 2019-04-04 2019-07-26 北京贝麦克斯科技有限公司 The acquisition methods and device of human body respiration status information
KR20200050443A (en) 2020-02-19 2020-05-11 스타일치과기공 주식회사 Oral airway, method for manufacturing threof and respiration monitoring system

Also Published As

Publication number Publication date
KR101725654B1 (en) 2017-04-11

Similar Documents

Publication Publication Date Title
KR101725654B1 (en) Respiratory monitoring system and method thereof
KR101558258B1 (en) People counter using TOF camera and counting method thereof
CN105283129B (en) Information processor, information processing method
ES2616487T3 (en) Procedure, device and computer program to extract information about a ladder
US20230410343A1 (en) Edge handling methods for associated depth sensing camera devices, systems, and methods
JP6562437B1 (en) Monitoring device and monitoring method
KR101608889B1 (en) Monitoring system and method for queue
US9613421B2 (en) Optical tracking
KR101469099B1 (en) Auto-Camera Calibration Method Based on Human Object Tracking
KR20190071310A (en) Themal image surveillance system and method of amending body temperature in thermal image using radar measuring distance
JP2019500143A (en) Ultrasonic system and method
KR20190104663A (en) Apparatus for measuring body size using drone
KR101733657B1 (en) System for object counter using camera based on range image and counting method thereof
US10292623B2 (en) Apparatus and method for determining a respiration volume signal from image data
KR20120096728A (en) Fusion medical images system using location monitoring system
WO2018101499A1 (en) Respiratory monitoring device and method thereof
JP2020533055A5 (en)
JP2016509939A5 (en)
US20230329590A1 (en) Non-Contact Monitoring System and Method
KR20200063378A (en) Gesture Recognition Apparatus for Human Body Using Complementary Complex Sensor and Gesture Recognition Method for Human Body Using the Same
WO2023199193A1 (en) Non-contact monitoring system and method
JP2020088688A (en) Monitoring device, monitoring system, monitoring method, and monitoring program
JP6750193B2 (en) Walking cycle detection method and detection apparatus
JP6167567B2 (en) Imaging apparatus, rotation angle estimation method, and rotation angle estimation program
KR20100060622A (en) Human pose estimation technology

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant