JP7211668B2 - 画像認識に基づく排出監視システム及び方法 - Google Patents

画像認識に基づく排出監視システム及び方法 Download PDF

Info

Publication number
JP7211668B2
JP7211668B2 JP2021538480A JP2021538480A JP7211668B2 JP 7211668 B2 JP7211668 B2 JP 7211668B2 JP 2021538480 A JP2021538480 A JP 2021538480A JP 2021538480 A JP2021538480 A JP 2021538480A JP 7211668 B2 JP7211668 B2 JP 7211668B2
Authority
JP
Japan
Prior art keywords
data
monitoring
effluent
discharge
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021538480A
Other languages
English (en)
Other versions
JP2022516157A (ja
Inventor
鉄楠 劉
春涛 呉
梦池 艾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of JP2022516157A publication Critical patent/JP2022516157A/ja
Application granted granted Critical
Publication of JP7211668B2 publication Critical patent/JP7211668B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M1/00Suction or pumping devices for medical purposes; Devices for carrying-off, for treatment of, or for carrying-over, body-liquids; Drainage systems
    • A61M1/71Suction drainage systems
    • A61M1/73Suction drainage systems comprising sensors or indicators for physical values
    • A61M1/734Visual indicating means for flow
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Hematology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Vascular Medicine (AREA)
  • Anesthesiology (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • External Artificial Organs (AREA)
  • Image Analysis (AREA)
  • Alarm Systems (AREA)
  • Invalid Beds And Related Equipment (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本開示は、一般に、医療機器に関し、特に、画像認識に基づく排出監視システム及び方法に関する。
体液を排出するための装置は、医療分野で最も一般的な医療機器の1つであり、様々な臨床部門に広く応用されている。現在、体液を排出するために最も一般的に使用される装置は、排出ボトル又はバッグである。臨床診断及び治療の適用過程では、排出装置は通常病床の底に設置され、重力又は陰圧によって体液を排出するために使用される。
排出過程中の疾病の状態の変化は、排出液の排出体積、色、濁度等の様々な指標によって特徴付けられる。特に、排出液の体積は、患者の体腔内における滲出液、血液、膿及び他の液体の蓄積の程度を反映する。排出液の色と濁度は、排出領域の組織の状態をある程度反映する。現在、医療用排出装置は手動検査で監視されているが、排出装置内の液体の自動監視は実現できない。一般に、排出処置の監視過程は、長い時間、例えば、いくつかの場合には数日又は数週間を必要とする。このため、多くの人手が必要となり、特に夜間又は看護者が不足している場合には、排出液の体積、色、濁度又は他の情報を観察及び監視することが困難となる。また、大量出血を起こすような血管破裂、又は異常物質が排出液に注入されて透明な状態から液体が濁った状態になる等、患者の病状が悪化すると、排出液の流量が短時間で急激に増加し、又は排出液の特性が変化する等、緊急事態が発生することがあり、これらは全て看護者が適時に見出して適切な処置を行う必要がある。しかしながら、手動観察又は監視の従来のモードを用いて、このような変化を適時に見出することは困難であるため、救助が遅れて、その結果、深刻な結果が引き起こされ、患者の生命を危険にさえする。
これらを鑑みて、排出液の排出体積、流量、色を含む排出データを同時に集中監視することが可能であり、排出異常の適時の発見、記録、警報、処置計画の作成を行うことが可能であり、それによって、看護者の負担を軽減し、断続的な手動監視に起因する医療リスクを最大限低減し得る排出監視装置を提供することが望ましい。
本発明は、上記の技術的課題を解決するために、排出液の排出体積、流量、排出液の色及び濁度等の排出過程における重要な情報及びデータの一元的な監視を実現し、関連するデータを効果的に収集して記録し、異常発生時に警報を発する医療用排出監視システム及び方法を提供する。
本開示の一態様によれば、画像認識に基づく排出監視システムが提供され、このシステムは、排出液のビデオストリームデータを取得するための少なくとも1つのビデオ取得装置と、前記少なくとも1つのビデオ取得装置に接続される画像処理モジュールであって、前記ビデオストリームデータを受信し、かつ前記ビデオストリームデータを処理して前記排出液の排出データを取得するために使用される画像処理モジュールと、前記画像処理モジュールに接続され、前記排出データを受信及び監視するために使用される監視モジュールとを備える。
一実施形態によると、前記ビデオ取得装置は、排出容器に向けられた第1のビデオ取得装置を含み、排出管に向けられた第2のビデオ取得装置を選択的に含む。
一実施形態では、前記排出データは、前記排出液の色、濁度、及び排出体積を含む。
一実施形態では、前記監視モジュールは、前記排出液の排出体積に基づいて、排出管を通過する前記排出液の流量を計算するようにさらに構成される。
一実施形態では、前記監視モジュールは、前記色及び濁度の変化に基づいて、前記排出液の特性変化を決定するようにさらに構成される。
一実施形態では、前記画像処理モジュールは、前記ビデオストリームデータからクリティカル画像フレームを抽出するための画像サンプリングモジュールと、前記クリティカル画像フレームに対して画像認識を実行し、かつ前記クリティカル画像フレームの色情報を抽出するための色抽出モジュールと、前記排出液の濁度情報を決定するために前記クリティカル画像フレームを処理するための濁度検出モジュールと、前記クリティカル画像フレームに対して画像認識及び強調を実行し、かつ前記クリティカル画像フレームのスケール値情報を読み取るための排出体積読み取りモジュールとを含む。
一実施形態では、前記画像サンプリングモジュールは、前記色情報の変化に基づいて、サンプリングレートを調整するように構成される。
一実施形態では、前記濁度検出モジュールは前記クリティカル画像フレームから画像の輝度値を抽出するように構成された輝度抽出モジュールと、前記輝度値に基づいて前記濁度情報を表すように構成された濁度決定モジュールとを含む。
一実施形態では、前記画像処理モジュールは、前記ビデオストリームデータからクリティカル画像フレームを抽出するための画像サンプリングモジュールと、前記クリティカル画像フレームから色特性及び濁度特性を抽出するための画像特徴抽出モジュールとを含み、前記画像特徴抽出モジュールは、ニューラルネットワークトレーニングによって取得されるモデルである。
一実施形態では、前記画像サンプリングモジュールは、前記色特性の変化に基づいて、サンプリングレートを調整するように構成される。
一実施形態では、前記監視モジュールは、前記排出液の排出データの色、濁度、排出体積を受信するための第1のデータ受信ユニットと、前記排出体積に基づいて、排出管を通過する排出液の流量を計算し、前記色及び濁度の変化に基づいて、前記排出液の特性変化を決定するためのデータ処理ユニットと、前記色、濁度、排出体積、流量、及び特性変化のうちの少なくとも1つをリアルタイムで表示するための第1の表示ユニットと、前記色、濁度、排出体積、流量及び特性変化のうちの少なくとも1つがプリセット閾値を超えたときに、警報信号を生成するための第1の警報ユニットとを含む。
一実施形態では、複数の監視モジュールの監視データをリアルタイムで監視するための中央監視モジュールをさらに備える。
一実施形態では、前記中央監視モジュールは、複数の監視モジュールから有線又は無線で送信される監視データを受信するための第2のデータ受信ユニットであって、前記監視データは、前記色、濁度、排出体積、流量、及び特性変化のうちの少なくとも1つを含む第2のデータ受信ユニットと、前記監視データを記憶するための記憶ユニットと、前記複数の監視モジュールの監視データを同時に表示するための第2の表示ユニットとを含む。
一実施形態では、前記中央監視モジュールは、前記複数の監視モジュールのいずれかの監視データが閾値を超えたときに、警報信号を生成するための第2の警報ユニットとをさらに含む。
一実施形態では、中央監視モジュールは、各監視モジュールの監視データに対してプリセット閾値を設定するための閾値設定ユニットをさらに含む。
本開示の別の態様によれば、画像認識に基づく排出監視方法が提供され、この方法は、排出液のビデオストリームデータを取得するステップと、前記ビデオストリームデータを処理して前記排出液の排出データを取得するステップと、前記排出データを受信及び監視するステップとを含み、前記排出データは、前記排出液の色、濁度、排出体積を含む。
本発明の実施形態に係る排出監視システムは、従来技術に比べて、排出液の色及びその変化を正確に監視することが可能であり、画像処理に基づいて、排出液の流量、排出体積、濁度等の様々な排出データの監視を実現することが可能である。この排出監視システムは、上記の排出データを処理及び記録すると共に、異常時に警報を発することが可能であり、医療リスクを大幅に低減し得る。この監視システムは、排出液の液体特性に関する要件がなく、高精度で全ての体液に十分に応答することが可能である。さらに、この監視システムは構造が単純であり、設置及び展開に便利であり、従って様々な臨床場面に適用可能である。
添付の図面に関連した本開示の実施形態のより詳細な説明により、本開示の実施形態の上記及び他の目的、特徴及び利点がより明らかになる。図面は、本開示の実施形態のさらなる理解を提供するために含まれており、本開示の実施形態と共に本開示を説明するために明細書に組み込まれかつその一部を構成するが、本開示の限界を定義する役割をすることを意図するものではない。なお、同一符号は同一構成要素を示している。
本開示の一実施形態による排出監視システムの概略ブロック図である。
本発明の一実施形態による画像処理モジュールの概略ブロック図である。
本開示の別の実施形態による画像処理モジュールの概略ブロック図である。
本開示の一実施形態による監視モジュールの構造ブロック図である。
本開示の一実施形態による中央監視モジュールの構造ブロック図である。
本開示の一実施形態による排出監視方法のフローチャートである。
以下、本発明の実施形態について図面を参照しながら詳細に説明する。本明細書に記載される特定の実施形態は、関連する開示を説明するためにのみ使用され、本開示を制限することを意図しないことを理解されたい。
本開示の監視システムは、体液の排出を含む様々な医療処置に適している。排出過程では、腹水及び胸水等の種々の体液が、一般に排出体腔から医療用排出管を介して流出し、最終的に排出容器内に収容される。排出容器は、体液を排出するために液圧差を生じるように一般に体腔の下に配置される排出ボトル、排出バッグ、陰圧排出装置、外科手術で使用される吸引装置等の医療処置におけるあらゆる種類の排出容器とし得る。
上述したように、従来の排出装置では、排出液の排出体積及び色等の他のデータを手動で監視することが一般的であり、そのため適時監視ができないことによるリスクが生じやすい。したがって、本開示は、排出処理における排出データを検出及び監視することが可能な装置を提供する。「排出装置」という用語が本開示において使用されているが、その意味は、排出液を受け入れるために使用される排出容器だけでなく、排出容器及び患者の排出部位に接続される排出管、及び排出容器に接続される陰圧装置も含む。また、排出液の色の監視を実現するために、排出管及び排出容器は、好ましくは、ガラス又は透明シリカゲル等の透明材料から作られる。
図1は、本発明の第1の実施形態による排出監視システムの概略図である。図1に示されるように、排出監視装置は、排出液を撮影して、排出液のビデオストリーミングデータを取得し得るビデオ取得装置10と、ビデオ取得装置10に接続され、ビデオストリーミングデータを受信し、ビデオストリーミングデータを処理して排出液の排出データを取得し得る画像処理モジュール20と、画像処理モジュール20に接続され、排出データの受信及び監視に使用される監視モジュール30とを備える。
ビデオ取得装置10は、カメラ等の光センサ装置を用いてもよい。カメラは、連続的に画像データシーケンスを取得してビデオストリーミングデータを形成する。純粋な画像データと比較して、本開示は、排出過程の動的リアルタイム監視を実装するためにビデオデータを使用する。
図1に示すように、ビデオ取得装置10は、排出処理を撮影するために排出装置40に向けられる。少なくとも1つのビデオ収集装置を設けることができる。一実施形態では、排出容器内の排出液を監視するために、排出容器に向けられた第1のカメラのみが設けられてもよい。排出容器の側面には、1つ以上の体積スケールを設けることができる。例えば、識別を容易にするために、排出容器の各側面に体積スケール線を印刷し得る。体積スケール線は、耐摩耗性と耐食性に優れたブラックで印刷される。そのため、取得されたビデオデータには、排出体積及び色等の情報が含まれている。別の実施形態では、排出管に向けられた第2のカメラを追加して、排出管を通って流れる排出液の色情報を取得し得る。術後の排出時に血管破裂等の危険な状況が生じた場合には、排出管内の排出液の色変化よりも、排出容器内の排出液の色変化の方が目立ちにくい。したがって、このような危険は、第2のカメラで取得した取得データによって、より敏感に監視し得る。
ビデオ取得装置10は、排出容器又は陰圧装置に取り外し可能に取り付けられてもよい。代替的に、それは排出容器と共にIVフレームに取り付けることができ、これにより、排出容器が患者の排出体腔の下に確実に配置される。一方、ビデオ取得装置と排出容器の位置は相対的に互いに固定されており、これにより、ビデオ取得データのフォーマット整合性が確保される。いくつかの実装では、光源は、夜間の排出処理中にキャプチャされたデータの鮮明さを確保するように設定し得る。代替的に、特定の状況に応じて光源を使用しなくてもよい。
画像処理モジュール20は、カメラで撮影されたビデオデータを受信し、画像処理により、排出液の色、濁度、排出体積等の排出データを取得する。一実施形態では、図2に示すように、画像処理モジュールは、画像サンプリングモジュール21と、色抽出モジュール22と、濁度検出モジュール23と、排出体積読み取りモジュール24とを含む。
ビデオストリームデータは、所定の順序に並べられた画像のシーケンスと見なすことができる。画像サンプリングモジュール21は、カメラによって取得されたビデオストリームデータからクリティカル画像フレームを抽出するために使用される。本明細書で使用される「クリティカル画像フレーム」とは、排出データが取得され得る画像を意味する。画像取得モジュール21は、固定サンプリングレートで、例えば、毎秒1画像フレームを抽出することによって、ビデオストリームデータ内のクリティカル画像フレームを抽出し得る。また、後述するように、所定期間中の排出処理の動的かつ正確な監視を実現するために、排出データの変化に応じてクリティカル画像フレームのサンプリングレートを調整することも可能である。
色抽出モジュール22は、クリティカル画像フレームに対して画像認識を実行し、クリティカル画像フレームの色情報を抽出するために使用される。一実施形態では、画像認識は、色情報を抽出するために、第1のカメラ又は第2のカメラによって取得されたクリティカル画像フレームに対してのみ実行されてもよい。他の実施形態では、画像認識は、色情報を抽出するために、第1のカメラと第2のカメラの両方で同時に取得されたクリティカルフレーム画像に対して実行されてもよい。比較分析により患者の排出状況が取得されてもよい。排出管に向けられた第2のカメラの画像の色情報は、排出液のリアルタイムの色をより良く表すことができるので、色抽出モジュール22は、好ましくは、第2のカメラのクリティカル画像フレーム内の色情報を抽出する。
一実施形態では、色抽出モジュール22は、プリセットサンプリング規則に従ってクリティカル画像フレームの複数のサンプリング点のRGB値を取得し、次いで、複数のサンプリング点の色値に基づいてクリティカル画像フレームの色情報を推定し得る。なお、同一のクリティカル画像フレームの排出液の色は、実質的に、排出領域において均一であると推定され得る。したがって、この領域内の数画素の色値は、画像内のほとんどの画素を表し得る。この領域の色情報を抽出し得るように、複数のサンプリング点を選択し、そのサンプリング点の色値を取得するサンプリングエリアとして排出ボトル又は排出管を取り込むことができる。
クリティカル画像フレームの色は、光又は排出容器の透過率等の様々な要因の影響によって干渉され得る。この影響に対抗するために、一実施形態では、取得した色情報を補正し得る。例えば、標準色カードの画像をカメラで撮影し、標準色カードの色を抽出し、次いで、標準色と比較して2つの色値のずれ値を補正係数として求める。この補正係数を用いて、クリティカル画像フレームから抽出された排出液の色を補正し得る。
一実施形態では、画像サンプリングモジュール21は、色情報の変化に基づいてサンプリングレートを調整するように構成される。色情報の変化は、3チャンネルのRGB値に基づいて、経時的な廃液の色の変化値を計算することにより決定されてもよい。変化は、排出液全体の色の変化値であってもよく、又は単一チャンネルの色値の変化量であってもよい。排出液の色変化が激しい場合には、例えば、画像のR値が閾値を超えて変化するときは、患者の排出が異常であることを示してもよい。この場合、例えば、毎秒1画像フレームから毎秒5画像フレームにサンプリングレートを調整することにより、ビデオストリームデータから抽出されるクリティカル画像フレームのサンプリングレートを増加させるべきであり、それによって排出処理の監視がより正確になる。
濁度検出モジュール23は、クリティカル画像フレームを処理し、排出液の濁度情報を決定するために使用される。本開示において、画像の輝度情報は、排出液の濁度を特徴付けるために使用される。一実施形態では、濁度検出モジュールは、クリティカル画像フレームから画像の輝度値を抽出するように構成された輝度抽出モジュールと、輝度値に基づいて濁度情報を表すように構成された濁度決定モジュールとを含む。
クリティカル画像フレームの輝度値を抽出するために、様々な方法を使用し得る。例えば、クリティカル画像フレームは、RGB空間からYUVフォーマットに変換されてもよく、Y値は、変換式Y=0.299*R+0.587*G+0.114*Bとして表され得る排出液の濁度として使用され得る。一実施形態では、クリティカル画像フレームをRGB空間から他の色空間に変換することもできる。例えば、LAB空間のL成分又はHSI空間のI成分を画像の画素の輝度値として用いることもできる。
画像中の排出管領域の全画素の輝度値を抽出した後で、全輝度値の平均値又は平均二乗値を計算することにより、排出液の濁度情報を表すことができる。その値が閾値より大きい場合には、排出液が正常な透明状態であることを示すが、その値が閾値より小さい場合には、血栓が排出液中に存在している可能性があり、それによって排出液が濁った状態にあることを示す。
排出体積読み取りモジュール24は、クリティカル画像フレームに対して画像認識及び強調処理を行い、排出容器に収容された排出体積を表すクリティカルフレーム画像のスケール値情報を特定する。一実施形態では、スケール値情報は、排出液の液面レベルに基づいて決定し得る。具体的には、第1に、フレーム画像をグレースケールモードに変換した後で、画像フレームに対してメジアンフィルタリング処理を行って、画像内の液面情報を強調する。そして、処理された画像に対してエッジ強調処理を行い、それによって排出液の液面線を抽出してもよい。例えば、液面線の画素の座標値に基づいて排出体積を計算してもよい。一例では、第1のカメラは、クリティカル画像フレーム内に2つの液面線が存在するように、排出容器の2つの側面上の体積スケール線に向けられ得る方向に配置される。この場合、2つの液面線の平均画素座標値に基づいて排出体積を計算し得るので、カメラと液面線との間で可能な角度差の影響を相殺し得る。
別の実施形態では、本開示は、機械学習法を使用して、排出データにおける色特性及び濁度特性を抽出することもできる。図3に示すように、画像処理モジュールは、画像サンプリングモジュール21’と、画像特徴抽出モジュール22’と、排出体積読み取りモジュール24’とを含み、画像取得モジュール21’及び排出体積読み取りモジュール24’の機能及び構成は、上述したように、画像取得モジュール21及び排出体積読み取りモジュール24と同じであり、ここでは繰り返さない。
画像特徴抽出モジュール22’は、ニューラルネットワークトレーニングに基づいて取得されるモデルであり、クリティカル画像フレームから色特徴及び濁度特徴を抽出するために使用される。一実施形態では、ニューラルネットワークは畳み込みニューラルネットワーク(CNN)モデルを使用してもよく、YUV空間における色情報は、画像の輝度及びクロミナンス情報を独立して反映するモデルの入力特徴として使用される。検出モデルはニューラルネットワークをトレーニングして取得され、モデル中の所定の層の出力は色特性と濁度特性の記述子として用いられる。モデルには、実際に撮影された任意の画像を入力することができ、画像に含まれる排出データの記述を取得し得る。具体的には、排出管の識別すべき領域の所定数の画素を抽出し、画素の色値をYUV空間の色値に変換した後で、そのデータをトレーニングされたCNNモデルに入力して色及び濁度情報を識別する。
一実施形態では、画像サンプリングモジュール21’は、色特性の変化に基づいてサンプリングレートを調整するように構成されてもよい。その機能及び原理は、以前の画像取得モジュール21と同じであり、ここでは繰り返さない。
図1に戻ると、画像処理モジュール20は、データ回線を介して監視モジュール30に接続されており、これは、排出液の色、濁度、排出体積等の排出データを受信する。なお、後述するように、監視モジュール30は、受信した排出データと設定値とを比較して排出データを監視してもよい。
一実施形態では、監視モジュール30は、排出液の排出体積データに基づいて排出管を流れる排出液の流量を計算し得る。具体的には、画像サンプリングモジュールは、例えば、毎秒1フレームの画像を抽出し、排出体積読み取りモジュールは、第1のフレーム画像のスケール値情報L1及び第30のフレーム画像のスケール値情報L2をそれぞれ読み出す。30秒以内の排出体積はL2-L1である。したがって、直径Dの排出管を流れる流量は、v=4*(L2-L1)/(30*πD)と計算され得る。
さらに、監視モジュール30は、色及び濁度の変化に基づいて、排出液の特性変化を決定するように構成することもできる。特徴的な変化としては、排出液中に異常物質が含まれていること、例えば、排出液中に血栓又はガスが出現し、これによって排出液の色又は濁度が変化することが挙げられる。上述したように、色の変化は、3つのチャンネルのRGB値に基づいて計算可能な経時的な排出液の色変化値であってもよい。このような変化値は、排出液全体の色の変化に基づいてもよく、所定のチャンネルの色値の変化に基づいてもよい。濁度の変化は、画像の輝度値に基づいて監視し得る。排出液の特性変化がプリセット閾値を超える場合、監視モジュール30は、警報を開始して、患者の家族又は医療スタッフにそれをチェックし又は対処するように迅速に警告し得る。
一例として、図4に示すように、監視モジュール30は、第1のデータ受信ユニット31と、データ処理ユニット32と、第1の表示ユニット33とを含む。第1のデータ受信ユニット31は、画像処理モジュール20とデータ回線を介して接続され、排出液の色、濁度、排出体積等のデータを受信して、受信したデータをデータ処理ユニット32に送信するために使用される。データ処理ユニット32は、例えば、排出体積データに基づいて、排出管を通過する排出液の流量を計算し、色及び濁度の変化に基づいて、排出液の特徴的な変化を決定するように、関連データに対して演算を行ってもよい。一例では、データ処理ユニット32は、排出ボトルの流量及び現在の体積に基づいて、現在の排出ボトルが完全に充填される推定時間を計算してもよい。排出データの少なくとも1つは、第1表示ユニット33を介してリアルタイムに表示し得る。排出ボトル又は排出バッグが病床の底に置かれるか又はカバーされる通常の実施と比較して、排出データのリアルタイム表示は、排出体積、排出色又は濁度等の排出データの観察をより便利にし得る。
第1の表示ユニット33が表示するコンテンツは、特定の必要に応じて選択し得る。1つ以上の表示ユニットが設定され得るので、その数は実際の必要に応じて調整され得る。例えば、表示ユニットは、ベッドサイド及びナースステーションにそれぞれ設定し得る。第1の表示ユニット33は、例えば、液晶ディスプレイ、ライトコラム、デジタルディスプレイ調節可能器具等のような種々の形態の表示ユニットであってもよく、一体化又は分割されていてもよい。排出液の色は、色情報を介して直接表示してもよいし、RGB成分の値を介して表示してもよい。一実施形態では、第1の表示ユニット33は、ハンドヘルドPDA等の操作装置であってもよく、医療従事者がいつでも観察できるように、排出データはこの装置に無線で送信され得る。第1の表示ユニット33とデータ処理ユニット32とは有線又は無線で接続されている。例えば、排出データは、遠隔リアルタイム監視の目的を達成するためにブルートゥース(登録商標)を介して第1の表示ユニット33に送信されてもよい。
例えば、データ処理ユニット32は、データの演算処理が可能なシングルチップマイクロコンピュータ、プロセッサ等を用いて排出データの演算処理を実装してもよい。データ処理ユニットはまた、プロセッサに接続された入力システム、出力システム、及び無線通信モジュールを含んでもよい。一例では、データ処理ユニット32は、有線又は無線方式で陰圧治療装置に接続される。例えば、排出液の特性が変化し、排出液中にガスが存在すると決定された場合、陰圧を増加させてガスを吸引するように制御信号を陰圧治療装置に送ることができる。
一例では、監視モジュール30は、第1の警報ユニット34をさらに含み、これは、排出体積、流量、色、濁度、及び特性変化のうちの少なくとも1つがプリセット閾値を超えたときに警報信号を生成するために使用される。例えば、データ処理ユニット32は、濁度とプリセット閾値とを比較して、排出液中に血栓等の異常が生じているか否かを決定し得る。そうである場合、第1の警報ユニット34は、警報信号を生成するようにトリガされる。なお、プリセット閾値は、データ処理ユニット32に固定的に設定してもよく、又は閾値設定ユニット36等の制御パネルの入力システムを介して設定してもよく、それによって異なる排出の種類及び患者の徴候及び症状に応じて異なる閾値を設定してもよい。例えば、患者及びその家族又は医療スタッフの注意を喚起し、排出状態に注意することを思い出させ、それによって医療スタッフの作業負荷を軽減するように、警報信号は音響信号又は光学信号であってもよい。他の例では、診療所で血管が破裂したために短時間に排出液の特性が急変することがあり、適時に発見できなければ最良の治療期間を逸することになる。このような異常事態は、本開示の監視装置を介して適時に発見することができ、医療スタッフの不足又は監視過程の不注意により引き起こされる医療リスクを回避し得る。
図4及び図5に示すように、監視システムはまた、複数の監視モジュール50の監視データをリアルタイムで監視するために、ナースステーションの監視センターとして、又は病院の監視管理センターの一部として使用し得る中央監視モジュール30を含む。各監視モジュールのデータ処理ユニット32は、対応する患者の識別情報(名前、ベッド番号、年齢等)と排出データを関連付け、通信ユニット35を介して有線又は無線で中央監視モジュール50に対応するデータを送信し得る。通信ユニット35は、複数の監視モジュールから送信される監視データを受信する第2のデータ受信ユニット51と、監視データを記録及び記憶する記憶ユニット52と、複数の監視モジュールの監視データを同時に表示する第2表示ユニット53とを含む。例えば、第2表示ユニットは、患者識別情報、排出データ、排出容器が完全に充填される推定時間等の各種のコンテンツを表示してもよい。さらに、排出体積、流量、色及び/又は濁度のような経時的に変化する様々なデータを図の形で表示し得る。以上のような機能に基づいて、中央監視モジュール50は、一定のフロアの患者又は病棟の全病床の患者の関連データを集中監視することができ、一元化されたスケジューリング及び管理を容易にし得る。
一例では、中央監視モジュール50は、さらに、受信した識別情報及び排出データを処理するように構成された情報処理ユニット56を含むことができる。患者識別情報及び排出データは、情報処理ユニット56及び記憶ユニット52を介して編集及び処理し得るので、医療スタッフが各患者の過去の排出データを集中的に記憶及び照会するのに便利である。また、中央監視モジュール50は、各監視モジュールの監視データに対してプリセット閾値を設定し、複数の監視モジュールのいずれかの監視データが閾値を超えた場合に警報信号を生成するために使用される閾値設定ユニット52及び第2の警報ユニット54を含んでもよい。第1の警報ユニット34及び第2の警報ユニット54は、それぞれ患者/家族及び看護師/医師に排出状況が異常であることを警告し、医療スタッフに必要な措置を取ることを思い出させることができ、それによって医療リスクを最大限に低減し得ることが理解できる。
図6は、本開示の一実施形態による排出監視方法のフローチャートである。この方法には、次のステップが含まれる。
ステップS110では、排出液のビデオストリームデータを取得する。
本開示の排出監視方法は、種々の医療処置、例えば、外科手術中の体腔液の排出、又は外科手術後の尿の排出等に適用し得る。一実施形態では、2億画素の解像度を有するカメラのようなビデオ取得装置を使用して、排出処理を撮影するために排出装置に向けて、ビデオストリームデータを取得し得る。排出データは、AVI、MPG等の共通フォーマットとして記憶し得る。本開示は、画像キャプチャと比較して、ビデオストリームデータを取得し、排出処理を動的に監視するので、より正確な排出監視が可能になる。
ステップS120では、ビデオストリームデータを処理して、排出液の排出データを取得する。
ビデオデータの処理は、マイクロコントローラチップ又はDSPプロセッサのような画像処理能力を有するデータプロセッサで実装し得る。取得された排出データには、排出体積、色、濁度等が含まれる。したがって、ビデオストリームデータの処理には、画像サンプリング、色抽出、濁度検出、及び排出体積読み取りが含まれ、ここでは、特定の処理が上述したような画像処理モジュールを用いて実装されてもよく、ここでは繰り返さない。ビデオストリームデータの処理により、排出液の排出体積、色、濁度等の各種排出データを集中的に取得することができ、それによって患者の排出に関する総合的な情報を取得し得る。
ステップS130では、排出データが受信及び監視される。
排出データは、データ操作と処理能力を持つシングルチップマイクロコンピュータ、プロセッサ等を用いて計算処理と監視ができる。また、排出体積、色、濁度に基づいて、排出速度、排出液の特性変化を計算することができ、これらのデータをオンラインで画面又は携帯端末に表示し得る。例えば、排出データの表示により、医師は手術中の患者の身体的徴候を監視することができ、看護スタッフは手術後のリハビリテーション状況を監視し得る。監視機能及び警報機能により、患者の家族及び看護者の負担を軽減し、医療リスクを最大限に低減する。システムのコストが低いので、経済的にも有益である。
上記の説明は、図示及び説明の目的で提示されている。さらに、この説明は、本開示の実施形態を本明細書に開示された形態に限定することを意図していない。当業者は、本開示の範囲及び精神から離れることなく、形態及び詳細に様々な変更及び修正を行うことができる。すなわち、本開示の範囲は、添付の特許請求の範囲及びそれらの均等物によって定義される。

Claims (5)

  1. 画像認識に基づく医療用排出装置のためのリアルタイム排出監視システムであって、
    排出液を受け入れるための排出容器、及び前記排出容器と接続される排出管を含む排出装置と、
    前記排出容器内の前記排出液の第1のビデオストリームデータを取得するために前記排出容器に向けられた第1のビデオ取得装置と、
    前記排出管内の排出液の第2のビデオストリームデータを取得するために前記排出管に向けられた第2のビデオ取得装置と、
    前記第1のビデオ取得装置に接続され前記第1のビデオストリームデータを受信し、かつ前記第1のビデオストリームデータを処理して前記排出液の第1の排出データを取得するために使用される画像処理モジュールであって、前記画像処理モジュールは、前記第2のビデオ取得装置からの前記第2のビデオストリームデータを処理して前記排出液の第2の排出データを取得するようにさらに構成され、前記第1の排出データは、前記排出液の色、濁度及び排出体積を含み、前記第2の排出データは、前記排出液の色及び濁度を含む、画像処理モジュールと、
    前記画像処理モジュールに接続され、かつ前記第1の排出データ及び前記第2の排出データを受信及び監視するために使用される監視モジュールと
    を備え
    前記画像処理モジュールは、
    前記第1及び第2のビデオストリームデータからクリティカル画像フレームを抽出するための画像サンプリングモジュール、及び
    前記クリティカル画像フレームに対して画像認識を実行し、かつ前記クリティカル画像フレームの色情報を抽出するための色抽出モジュール
    を含み、
    前記画像サンプリングモジュールは、前記色情報の変化に基づいて、前記第1及び第2のビデオストリームデータから前記クリティカル画像フレームを抽出するサンプリングレートを調整するように構成される、医療用排出装置のためのリアルタイム排出監視システム。
  2. 前記画像処理モジュールは、
    前記排出液の濁度情報を決定するために前記第1及び第2のビデオストリームデータからの前記クリティカル画像フレームを処理するための濁度検出モジュールと、
    前記第1のビデオストリームデータからの前記クリティカル画像フレームに対して画像認識及び強調を実行し、かつ前記クリティカル画像フレームのスケール値情報を読み取るための排出体積読み取りモジュールと
    さらに含む、請求項1に記載の医療用排出装置のためのリアルタイム排出監視システム。
  3. 前記濁度検出モジュールは、
    前記クリティカル画像フレームから画像の輝度値を抽出するように構成された輝度抽出モジュールと、
    前記輝度値に基づいて前記濁度情報を表すように構成された濁度決定モジュールと
    を含む、請求項に記載の医療用排出装置のためのリアルタイム排出監視システム。
  4. 前記監視モジュールは、
    前記第1の排出データ及び前記第2の排出データを受信するための第1のデータ受信ユニットと、
    前記排出体積に基づいて、前記排出管を通過する前記排出液の流量を計算し、前記色及び濁度の変化に基づいて、前記排出液の特性変化を決定するためのデータ処理ユニットと、
    前記色、濁度、排出体積、流量、及び特性変化のうちの少なくとも1つをリアルタイムで表示するための第1の表示ユニットと、
    前記色、濁度、排出体積、流量及び特性変化のうちの少なくとも1つがプリセット閾値を超えたときに、警報信号を生成するための第1の警報ユニットと
    を含む、請求項に記載の医療用排出装置のためのリアルタイム排出監視システム。
  5. 複数の監視モジュールと接続される中央監視モジュール
    をさらに備え、
    前記中央監視モジュールは、
    前記複数の監視モジュールから有線又は無線で送信される監視データを受信するための第2のデータ受信ユニットであって、前記監視データは、前記色、濁度、排出体積、流量、及び特性変化のうちの少なくとも1つを含む第2のデータ受信ユニットと、
    前記監視データを記憶するための記憶ユニットと、
    前記複数の監視モジュールの監視データを同時に表示するための第2の表示ユニットと、
    前記複数の監視モジュールのいずれかの監視データが閾値を超えたときに、警報信号を生成するための第2の警報ユニットと、
    各監視モジュールの監視データに対してプリセット閾値を設定するための閾値設定ユニットと
    を含む、請求項に記載の医療用排出装置のためのリアルタイム排出監視システム。
JP2021538480A 2018-12-29 2019-12-19 画像認識に基づく排出監視システム及び方法 Active JP7211668B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201811652811.4 2018-12-29
CN201811652811.4A CN109498857B (zh) 2018-12-29 2018-12-29 一种基于图像识别的引流监控系统及方法
PCT/CN2019/126662 WO2020135226A1 (zh) 2018-12-29 2019-12-19 一种基于图像识别的引流监控系统及方法

Publications (2)

Publication Number Publication Date
JP2022516157A JP2022516157A (ja) 2022-02-24
JP7211668B2 true JP7211668B2 (ja) 2023-01-24

Family

ID=65757188

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021538480A Active JP7211668B2 (ja) 2018-12-29 2019-12-19 画像認識に基づく排出監視システム及び方法

Country Status (3)

Country Link
JP (1) JP7211668B2 (ja)
CN (1) CN109498857B (ja)
WO (1) WO2020135226A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109498857B (zh) * 2018-12-29 2020-10-16 刘铁楠 一种基于图像识别的引流监控系统及方法
US11318241B2 (en) 2019-03-27 2022-05-03 Medsix Inc. System and method for wound monitoring
CN110013574A (zh) * 2019-05-10 2019-07-16 上海市东方医院(同济大学附属东方医院) 引流液液量实时监测方法
CN110599879A (zh) * 2019-09-26 2019-12-20 赣南医学院第一附属医院 静脉导管冲管封管教学装置及方法
CN114053489A (zh) * 2020-07-31 2022-02-18 西伯股份有限公司 引流袋管理系统及其引流袋
CN112642022B (zh) * 2020-12-31 2022-07-05 遵义师范学院 一种输液监控系统及监控方法
CN112861734A (zh) * 2021-02-10 2021-05-28 北京农业信息技术研究中心 一种料槽余食监测方法及系统
CN114397929B (zh) * 2022-01-18 2023-03-31 中山东菱威力电器有限公司 一种可以改善冲洗水初始温度的智能马桶盖控制系统
CN115308101B (zh) * 2022-09-27 2022-12-30 恒天益科技(深圳)有限公司 水质监测管理方法及系统
CN116440340B (zh) * 2023-04-27 2024-01-23 苏州鸿博医疗器械有限公司 一种冲洗引流装置及控制系统
CN117045884B (zh) * 2023-10-11 2023-12-26 吉林医药学院 一种胸外科用引流监测装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090149776A1 (en) 2007-12-05 2009-06-11 Adams Scott C Optical sensor for detecting infection and other anomalous conditions associated with catheter systems
JP2010539617A (ja) 2007-09-19 2010-12-16 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 異常状態検出方法及び装置
CN104316527A (zh) 2014-11-07 2015-01-28 昆山韦睿医疗科技有限公司 一种对排出的透析液的自动检测方法、装置
US20150313529A1 (en) 2014-05-01 2015-11-05 Ramot At Tel-Aviv University Ltd. Method and system for behavioral monitoring
US20170039700A1 (en) 2015-08-05 2017-02-09 National Tsing Hua University Image analysis method and apparatus for assessment of peritoneal dialysis complication in peritoneal dialysis
WO2018007013A2 (de) 2016-07-07 2018-01-11 Fresenius Medical Care Deutschland Gmbh Verfahren zur erfassung von symptomen einer peritonitis
WO2018080915A1 (en) 2016-10-26 2018-05-03 Carefusion 2200, Inc. Device and method for mobile monitoring of drainage catheter

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1892001A1 (de) * 2006-08-23 2008-02-27 B. Braun Medizintechnologie GmbH Medizinisches Gerät zur extrakorporalen Blutbehandlung
CN100535811C (zh) * 2007-12-07 2009-09-02 华中科技大学 一种基于机器视觉的医疗输液速度监测与控制系统
JP5649657B2 (ja) * 2009-11-20 2015-01-07 ギブン イメージング リミテッドGiven Imaging Ltd. 生体内デバイスの電力消費を制御するシステムおよび方法
CN101720024A (zh) * 2009-11-23 2010-06-02 深圳市宾利达智能科技有限公司 智能识别监控系统及其监控方法
US8792693B2 (en) * 2011-07-09 2014-07-29 Gauss Surgical System and method for estimating extracorporeal blood volume in a physical sample
EP2850559B1 (en) * 2012-05-14 2021-02-24 Gauss Surgical, Inc. System and method for estimating a quantity of a blood component in a fluid canister
CN202751632U (zh) * 2012-08-21 2013-02-27 张晓东 颅内压不间断监护下脑室外引流自动控制装置
CN103830791B (zh) * 2012-11-27 2017-02-22 深圳先进技术研究院 自动化腹膜透析机
CN107497004A (zh) * 2017-10-10 2017-12-22 西安汇智医疗集团有限公司 一种智能脑脊液引流控制与识别警示系统
CN108053872A (zh) * 2017-12-27 2018-05-18 苏州麦迪斯顿医疗科技股份有限公司 一种透析数据的采集装置及其采集方法
CN109498857B (zh) * 2018-12-29 2020-10-16 刘铁楠 一种基于图像识别的引流监控系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010539617A (ja) 2007-09-19 2010-12-16 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 異常状態検出方法及び装置
US20090149776A1 (en) 2007-12-05 2009-06-11 Adams Scott C Optical sensor for detecting infection and other anomalous conditions associated with catheter systems
US20150313529A1 (en) 2014-05-01 2015-11-05 Ramot At Tel-Aviv University Ltd. Method and system for behavioral monitoring
CN104316527A (zh) 2014-11-07 2015-01-28 昆山韦睿医疗科技有限公司 一种对排出的透析液的自动检测方法、装置
US20170039700A1 (en) 2015-08-05 2017-02-09 National Tsing Hua University Image analysis method and apparatus for assessment of peritoneal dialysis complication in peritoneal dialysis
WO2018007013A2 (de) 2016-07-07 2018-01-11 Fresenius Medical Care Deutschland Gmbh Verfahren zur erfassung von symptomen einer peritonitis
WO2018080915A1 (en) 2016-10-26 2018-05-03 Carefusion 2200, Inc. Device and method for mobile monitoring of drainage catheter

Also Published As

Publication number Publication date
CN109498857B (zh) 2020-10-16
JP2022516157A (ja) 2022-02-24
WO2020135226A1 (zh) 2020-07-02
CN109498857A (zh) 2019-03-22

Similar Documents

Publication Publication Date Title
JP7211668B2 (ja) 画像認識に基づく排出監視システム及び方法
US20240054642A1 (en) System And Method For Estimating A Quantity Of A Blood Component In A Fluid Canister
CN111310851A (zh) 一种人工智能超声辅助系统及其应用
CN104573385B (zh) 用于病房数据采集的机器人系统
CN110428410A (zh) 眼底医学图像处理方法、装置、设备及存储介质
CN104503419B (zh) 一种用于病房数据采集方法
CN117542530B (zh) 一种针对产后患者的健康监控数据监控方法和监控系统
CN105534652A (zh) 一种多功能输液护理装置
CN104850739A (zh) 远程智能诊疗装置
CN106651713A (zh) 一种基于医养结合的便携式健康管理互动装置及控制方法
CN113053514A (zh) 基于5g通信技术的智慧城市医联体系统
CN104316527A (zh) 一种对排出的透析液的自动检测方法、装置
US20210316060A1 (en) Medical drainage monitoring method, apparatus, and system based on image recognition
CN205458639U (zh) 一种基于云计算的健康管理系统
US20220095977A1 (en) Monitoring and prediction system of diuresis for the calculation of kidney failure risk, and the method thereof
CN104545879A (zh) 无线监护系统
CN116825337A (zh) 患者安全护理预警系统
CN206193790U (zh) 基于互联网的慢病信息化系统
CN213155938U (zh) 一种急性心衰早期预警监护仪系统
CN113261926A (zh) 一种基于信息化技术的血透患者家居管理方法及系统
CN111839471A (zh) 一种床旁智能精准医疗辅助系统
CN105595973A (zh) 一种睡眠异常报警装置
TWM469047U (zh) 疾病檢測影像系統
CN114588402B (zh) 一种基于视觉识别的输液进程监测系统及其监测方法
US20240019287A1 (en) Methods, apparatuses, and computer program products for measuring fluid volumes

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210825

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210825

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220809

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221101

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221213

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230106

R150 Certificate of patent or registration of utility model

Ref document number: 7211668

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150