JP2017093647A - 被験体の呼吸に起因する生体活動を計測する計測システムおよび計測方法 - Google Patents
被験体の呼吸に起因する生体活動を計測する計測システムおよび計測方法 Download PDFInfo
- Publication number
- JP2017093647A JP2017093647A JP2015226924A JP2015226924A JP2017093647A JP 2017093647 A JP2017093647 A JP 2017093647A JP 2015226924 A JP2015226924 A JP 2015226924A JP 2015226924 A JP2015226924 A JP 2015226924A JP 2017093647 A JP2017093647 A JP 2017093647A
- Authority
- JP
- Japan
- Prior art keywords
- subject
- mask
- temperature
- breathing
- biological activity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000029058 respiratory gaseous exchange Effects 0.000 title claims abstract description 87
- 238000005259 measurement Methods 0.000 title claims abstract description 54
- 230000004071 biological effect Effects 0.000 title claims abstract description 42
- 238000000691 measurement method Methods 0.000 title claims abstract description 42
- 238000012545 processing Methods 0.000 claims abstract description 68
- 230000008859 change Effects 0.000 claims abstract description 56
- 239000000463 material Substances 0.000 claims abstract description 27
- 238000001931 thermography Methods 0.000 claims abstract description 27
- 230000036760 body temperature Effects 0.000 claims abstract description 11
- 239000004745 nonwoven fabric Substances 0.000 claims description 16
- 239000002994 raw material Substances 0.000 abstract 1
- 210000003928 nasal cavity Anatomy 0.000 description 29
- 238000000034 method Methods 0.000 description 19
- 230000000241 respiratory effect Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 11
- 238000009423 ventilation Methods 0.000 description 9
- 210000001331 nose Anatomy 0.000 description 8
- 230000008569 process Effects 0.000 description 7
- 230000036387 respiratory rate Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 241001465754 Metazoa Species 0.000 description 3
- 229920000139 polyethylene terephthalate Polymers 0.000 description 3
- 239000005020 polyethylene terephthalate Substances 0.000 description 3
- 206010028735 Nasal congestion Diseases 0.000 description 2
- 208000008784 apnea Diseases 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000011347 resin Substances 0.000 description 2
- 229920005989 resin Polymers 0.000 description 2
- 238000009531 respiratory rate measurement Methods 0.000 description 2
- 230000008016 vaporization Effects 0.000 description 2
- 238000009834 vaporization Methods 0.000 description 2
- KNMAVSAGTYIFJF-UHFFFAOYSA-N 1-[2-[(2-hydroxy-3-phenoxypropyl)amino]ethylamino]-3-phenoxypropan-2-ol;dihydrochloride Chemical compound Cl.Cl.C=1C=CC=CC=1OCC(O)CNCCNCC(O)COC1=CC=CC=C1 KNMAVSAGTYIFJF-UHFFFAOYSA-N 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 238000010171 animal model Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000010339 dilation Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000035699 permeability Effects 0.000 description 1
- -1 polyethylene terephthalate Polymers 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Landscapes
- Respiratory Apparatuses And Protective Means (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
Description
図1は、本実施形態による計測システム100の構成を模式的に示す。計測システム100は、典型的には、サーモグラフィカメラ10と、画像処理装置20と、マスク30とを備えている。図1には被験者40が示されているが、被験者40は計測システム100に含まれないことは言うまでもない。
観測者または被験者40は、被験者40の鼻孔および口を覆うように、呼吸による空気の換気が発生する位置にマスク30を配置する。
サーモグラフィカメラ10は、マスク30がフレームに収まるように被験者40を撮像する。サーモグラフィカメラ10は、例えば60fpsのフレームレートで1時間連続して被験者40を撮像し、動画像データを取得する。なお、サーモグラフィカメラ10はズーム機能を有していてもよく、主としてマスク30のみが画角に収まるようにズーム撮影してもよい。
画像処理回路206は、サーモグラフィカメラ10から動画像データを受け取る。画像処理回路206は、図5に示すように、動画像を構成する複数のフレーム画像の各々を、複数の分割領域Pに分割する。なお「分割する」とは、実際の動作として分割する必要はない。たとえば画像を切り出す単位または処理を行う単位として分割領域Pのサイズを設定する、という動作も、ここで言う「分割する」動作に含まれ得る。
画像処理回路206は、公知のあらゆる手法を用いてフレーム画像においてマスク30の領域を特定することができる。例えば、画像処理回路206は、予め保持していたマスク30の特徴(例えば、矩形形状)を利用して、各フレーム画像にパターンマッチング処理を行うことで、マスク30の座標位置を特定する。マスク30の座標位置は、例えばマスク30の領域の各頂点、中心または重心の座標を意味する。サイズが比較的大きく、かつ、一定の形状を有するマスク30を用いることにより、パターンマッチング処理を簡素化することが可能となる。
鼻孔および/または口からの呼吸による空気の換気によって、マスク30の領域全体において温度変化を観測できると考えられる。ただし、観測場所によっては温度変化にムラが生じる可能性がある。そのため、本実施形態では、画像処理回路206は、マスク30の領域の中で温度変化が特に大きい領域(監視領域と呼ぶことがある。)をさらに特定する。
画像処理回路206は、監視領域の温度変化(つまり、呼吸波形)に基づいて、被験者40の呼吸数を計測する。図6に示すように、隣接する2つの極大点または極小点の間の時間差が被験者40の呼吸周期(s)に相当する。呼吸数(bpm)は、60/呼吸周期(s)で表すことができる。
第2の実施形態による計測方法は、被験者40の鼻腔が拡張するように、鼻腔拡張テープ31を被験者に貼って計測する点で、第1の実施形態による計測方法とは異なる。以下、第1の実施形態との差異点を中心に説明する。
第3の実施形態による計測方法は、下うけ型のマスク30を用いる点で、第1の実施形態による計測方法とは異なる。以下、第1の実施形態との差異点を中心に説明する。
サーモグラフィカメラと、サーモグラフィカメラからの動画像を処理する画像処理装置と、を備えた生体活動計測システムを用いて、被験体の呼吸に起因する生体活動を計測する計測方法であって、
(a)素材温度が前記被験体の体温よりも低く、かつ、前記被験体の呼気および吸気によって温度が変化する素材で形成されたマスクを、前記被験体の鼻孔および口を覆うように配置するステップと、
(b)前記サーモグラフィカメラが、前記被験体に配置された前記マスクを撮像して、複数のフレーム画像から構成された前記動画像を取得するステップと、
(c)前記画像処理装置が、前記複数のフレーム画像にわたって生じた、前記マスクの領域における温度変化を算出し、前記被験体の呼吸に起因する生体活動を前記温度変化に基づいて計測するステップと、
を包含する、計測方法。
前記マスクの素材は不織布である、項目1に記載の計測方法。
前記ステップ(a)は、前記被験体の鼻腔が拡張するように、鼻腔拡張テープを前記被験体の鼻に貼るステップをさらに包含する、項目1または2に記載の計測方法。
前記マスクは、形状を維持するための骨組み構造を有し、一部が前記鼻腔拡張テープによって前記被験体の鼻に貼着された部材によって前記被験体の顔面に接触しないように支持されている、項目3に記載の計測方法。
前記マスクは下うけ型マスクである、項目1または2に記載の計測方法。
前記ステップ(a)において、前記マスクは、前記被験体の顎に接するように配置される、項目5に記載の計測方法。
前記ステップ(c)において、前記画像処理装置は、前記複数のフレーム画像の各々に含まれる前記マスクの領域を特定し、前記マスクの領域における、前記複数のフレーム画像にわたって温度変化が生じた部分領域をさらに特定して、前記部分領域の温度変化に基づいて、前記被験体の呼吸に起因する生体活動を計測する、項目1から6のいずれかに記載の計測方法。
前記画像処理装置は、フレーム画像毎に、前記マスクの領域に包含される複数の分割領域毎に温度変化を算出し、前記複数の分割領域のうち、温度変化が最も大きい分割領域の温度変化に基づいて、前記被験体の呼吸に起因する生体活動を計測する、項目1から6のいずれかに記載の計測方法。
鼻孔および口を覆うようにマスクが配置された被験体の動画像を解析して、被験体の呼吸に起因する生体活動を計測する計測システムであって、
前記マスクは、素材温度が前記被験体の体温よりも低く、かつ、前記被験体の呼気および吸気によって温度が変化する素材で形成されており、
前記被験体に配置された前記マスクを撮像して、複数のフレーム画像から構成される前記動画像を生成するサーモグラフィカメラと、
前記動画像を受け取り、前記複数のフレーム画像にわたって生じた、前記マスクの領域における温度変化を算出し、前記被験体の呼吸に起因する生体活動を前記温度変化に基づいて計測する画像処理装置と、
を備える、計測システム。
20 画像処理装置
30 不織布マスク
31 鼻腔拡張テープ
32、33 部材
40 被験者
50 ディスプレイ
100 計測システム
201 CPU
202 ROM
203 RAM
204 HDD
205 I/F
206 画像処理回路
Claims (5)
- サーモグラフィカメラと、サーモグラフィカメラからの動画像を処理する画像処理装置と、を備えた生体活動計測システムを用いて、被験体の呼吸に起因する生体活動を計測する計測方法であって、
(a)素材温度が前記被験体の体温よりも低く、かつ、前記被験体の呼気および吸気によって温度が変化する素材で形成されたマスクを、前記被験体の鼻孔および口を覆うように配置するステップと、
(b)前記サーモグラフィカメラが、前記被験体に配置された前記マスクを撮像して、複数のフレーム画像から構成された前記動画像を取得するステップと、
(c)前記画像処理装置が、前記複数のフレーム画像にわたって生じた、前記マスクの領域における温度変化を算出し、前記被験体の呼吸に起因する生体活動を前記温度変化に基づいて計測するステップと、
を包含する、計測方法。 - 前記マスクの素材は不織布である、請求項1に記載の計測方法。
- 前記ステップ(c)において、前記画像処理装置は、前記複数のフレーム画像の各々に含まれる前記マスクの領域を特定し、前記マスクの領域における、前記複数のフレーム画像にわたって温度変化が生じた部分領域をさらに特定して、前記部分領域の温度変化に基づいて、前記被験体の呼吸に起因する生体活動を計測する、請求項1または2に記載の計測方法。
- 前記画像処理装置は、フレーム画像毎に、前記マスクの領域に包含される複数の分割領域毎に温度変化を算出し、前記複数の分割領域のうち、温度変化が最も大きい分割領域の温度変化に基づいて、前記被験体の呼吸に起因する生体活動を計測する、請求項1または2に記載の計測方法。
- 鼻孔および口を覆うようにマスクが配置された被験体の動画像を解析して、被験体の呼吸に起因する生体活動を計測する計測システムであって、
前記マスクは、素材温度が前記被験体の体温よりも低く、かつ、前記被験体の呼気および吸気によって温度が変化する素材で形成されており、
前記被験体に配置された前記マスクを撮像して、複数のフレーム画像から構成される前記動画像を生成するサーモグラフィカメラと、
前記動画像を受け取り、前記複数のフレーム画像にわたって生じた、前記マスクの領域における温度変化を算出し、前記被験体の呼吸に起因する生体活動を前記温度変化に基づいて計測する画像処理装置と、
を備える、計測システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015226924A JP6631783B2 (ja) | 2015-11-19 | 2015-11-19 | 被験体の呼吸に起因する生体活動を計測する計測システムおよび計測方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015226924A JP6631783B2 (ja) | 2015-11-19 | 2015-11-19 | 被験体の呼吸に起因する生体活動を計測する計測システムおよび計測方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017093647A true JP2017093647A (ja) | 2017-06-01 |
JP6631783B2 JP6631783B2 (ja) | 2020-01-15 |
Family
ID=58804119
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015226924A Active JP6631783B2 (ja) | 2015-11-19 | 2015-11-19 | 被験体の呼吸に起因する生体活動を計測する計測システムおよび計測方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6631783B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111387957A (zh) * | 2020-03-13 | 2020-07-10 | 智方达(天津)科技有限公司 | 一种非接触式的体温与呼吸率联合检测方法 |
TWI753705B (zh) * | 2020-11-05 | 2022-01-21 | 英華達股份有限公司 | 口罩呼吸控制方法及口罩 |
WO2024101708A1 (ko) * | 2022-11-07 | 2024-05-16 | 아이쓰리시스템 주식회사 | 적외선 카메라를 이용하여 수면무호흡을 진단하기 위한 시스템 및 그 방법 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006115865A (ja) * | 2004-10-19 | 2006-05-11 | Sony Corp | 生体情報の処理方法およびその処理装置 |
JP3141088U (ja) * | 2008-01-04 | 2008-04-24 | 清水 晃 | 睡眠時無呼吸検出装置 |
JP2008183235A (ja) * | 2007-01-30 | 2008-08-14 | Ngk Spark Plug Co Ltd | 呼吸センサ |
JP2011091523A (ja) * | 2009-10-21 | 2011-05-06 | Victor Co Of Japan Ltd | 形状認識方法及び形状認識装置 |
US20120289850A1 (en) * | 2011-05-09 | 2012-11-15 | Xerox Corporation | Monitoring respiration with a thermal imaging system |
JP2013176471A (ja) * | 2012-02-28 | 2013-09-09 | Nikon Corp | 情報処理装置 |
JP2014184906A (ja) * | 2013-03-25 | 2014-10-02 | Fuji Heavy Ind Ltd | 車体前部構造 |
JP2015202120A (ja) * | 2014-04-10 | 2015-11-16 | キヤノン株式会社 | 解析装置、解析方法及びプログラム |
JP2016057944A (ja) * | 2014-09-11 | 2016-04-21 | 株式会社デンソー | ドライバ状態判定装置 |
-
2015
- 2015-11-19 JP JP2015226924A patent/JP6631783B2/ja active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006115865A (ja) * | 2004-10-19 | 2006-05-11 | Sony Corp | 生体情報の処理方法およびその処理装置 |
JP2008183235A (ja) * | 2007-01-30 | 2008-08-14 | Ngk Spark Plug Co Ltd | 呼吸センサ |
JP3141088U (ja) * | 2008-01-04 | 2008-04-24 | 清水 晃 | 睡眠時無呼吸検出装置 |
JP2011091523A (ja) * | 2009-10-21 | 2011-05-06 | Victor Co Of Japan Ltd | 形状認識方法及び形状認識装置 |
US20120289850A1 (en) * | 2011-05-09 | 2012-11-15 | Xerox Corporation | Monitoring respiration with a thermal imaging system |
JP2013176471A (ja) * | 2012-02-28 | 2013-09-09 | Nikon Corp | 情報処理装置 |
JP2014184906A (ja) * | 2013-03-25 | 2014-10-02 | Fuji Heavy Ind Ltd | 車体前部構造 |
JP2015202120A (ja) * | 2014-04-10 | 2015-11-16 | キヤノン株式会社 | 解析装置、解析方法及びプログラム |
JP2016057944A (ja) * | 2014-09-11 | 2016-04-21 | 株式会社デンソー | ドライバ状態判定装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111387957A (zh) * | 2020-03-13 | 2020-07-10 | 智方达(天津)科技有限公司 | 一种非接触式的体温与呼吸率联合检测方法 |
CN111387957B (zh) * | 2020-03-13 | 2023-03-24 | 智方达(天津)科技有限公司 | 一种非接触式的体温与呼吸率联合检测方法 |
TWI753705B (zh) * | 2020-11-05 | 2022-01-21 | 英華達股份有限公司 | 口罩呼吸控制方法及口罩 |
WO2024101708A1 (ko) * | 2022-11-07 | 2024-05-16 | 아이쓰리시스템 주식회사 | 적외선 카메라를 이용하여 수면무호흡을 진단하기 위한 시스템 및 그 방법 |
Also Published As
Publication number | Publication date |
---|---|
JP6631783B2 (ja) | 2020-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US12016655B2 (en) | Video-based patient monitoring systems and associated methods for detecting and monitoring breathing | |
US20180279885A1 (en) | Device, system and method for obtaining vital sign information of a subject | |
KR101420200B1 (ko) | 열화상 카메라를 이용한 체온 감지 시스템 | |
JP6054584B2 (ja) | 患者の生命状態を取得するための患者インタフェースを具備する治療システム | |
US10179064B2 (en) | WhipFlash [TM]: wearable environmental control system for predicting and cooling hot flashes | |
JP6720078B2 (ja) | 生命徴候のモニタリング及び管理 | |
US20150094606A1 (en) | Breathing pattern identification for respiratory function assessment | |
WO2016151966A1 (ja) | 乳幼児監視装置、乳幼児監視方法、及び、乳幼児監視プログラム | |
JP2019509094A (ja) | 被験者の嚥下障害の検出および監視のための装置、システムおよび方法 | |
KR101868782B1 (ko) | 가스 영상 탐지 방법을 이용한 호흡 분석 시스템 | |
WO2018120643A1 (zh) | 生理监测结果的反馈方法及装置 | |
JP6631783B2 (ja) | 被験体の呼吸に起因する生体活動を計測する計測システムおよび計測方法 | |
JP2010194005A (ja) | 呼吸計測方法及び呼吸計測装置 | |
EP3301657A1 (en) | Sensor distinguishing absence from inactivity | |
Zhang et al. | Automated sleep period estimation in wearable multi-sensor systems | |
Wang et al. | Contactless patient care using hospital iot: Cctv camera based physiological monitoring in icu | |
Johnson et al. | A new method for the quantification of breathing | |
JP2018126423A (ja) | ベッドモニタリングシステム | |
US20220233096A1 (en) | Systems and methods for non-contact respiratory monitoring | |
CN114699046A (zh) | 睡眠监测方法以及监护仪和监护系统 | |
US20200353190A1 (en) | Positive airway pressure mask monitor | |
JP7327397B2 (ja) | コンピューターで実行されるプログラム、情報処理システム、および、コンピューターで実行される方法 | |
JP2011244841A (ja) | 生体情報計測処理装置及び生体情報計測処理方法 | |
KR101755094B1 (ko) | 깊이 카메라를 이용한 수면 중 호흡률 모니터링 장치 | |
WO2023219081A1 (ja) | 呼気可視化システム及び方法並びに呼気評価システム及び方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20170607 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181119 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190814 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190903 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191023 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191112 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191126 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6631783 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |