JP2019092817A - 生体情報モニタ、及び生体情報システム - Google Patents

Abstract

【課題】バイタルサインと間欠的に取得した超音波画像との関係性を把握することができる生体情報モニタ、及び生体情報システムを提供する。【解決手段】生体情報モニタ１０は、被験者の生体信号を基にしたバイタルサインと、被験者に照射した超音波の反射波を基にした超音波画像と、を取得する。記憶部１７は、バイタルサインの測定データと測定日時を関連付けて記憶すると共に、超音波画像と撮像タイミングを関連付けて記憶する。制御部１４は、記憶部１７に記憶されたデータを基にした画面を表示部１６に表示する。【選択図】図２

Description

本発明は生体情報モニタ及び生体情報システムに関し、特に超音波画像を取得する生体情報モニタ及び生体情報システムに関する。

被験者の状態を把握するための情報として各種のバイタルサイン（血圧、体温、呼吸、脈拍数、動脈血酸素飽和度、等）が広く利用されている。また被験者の胸部や腹部等の状態を把握するために超音波検査装置が用いられている。

近年、バイタルサインの測定と超音波診断を同時に行う技術が提案されている。例えば特許文献１では、生体情報モニタに対して超音波トランスデューサを接続可能なシステムが開示されている（特許文献１のＦｉｇ．１）。当該システムは、超音波トランスデューサが取得した超音波画像と被験者の生体パラメータ（バイタルサイン）の双方を同時に処理することができる。

国際公開第２００９／１３８９０２号パンフレット

特許文献１の装置を用いた場合、医療従事者（医師等）は大型の超音波測定装置を用いることなく、オペ室等であっても被験者のバイタルサインと共に腹部エコー等を参照できる。これにより、例えばオペ室等で腹部内の状態を把握するために間欠的（スポット的）に超音波画像を参照することができる。

ところで、バイタルサインの長期的な変化を把握したい場合、医療従事者はバイタルサインの測定値の変化を示すトレンドグラフの表示画面を参照する。しかしながら特許文献１には、バイタルサインのトレンドグラフの表示について言及されていないため、トレンドグラフと超音波画像の撮像タイミングとの関連が把握できないという問題があった。例えばトレンドグラフ上のどのポイントで超音波画像を撮像したかが把握できず、被験者のバイタルサインと超音波画像（腹部エコー等）との関連が分からないため、被験者の状態の変化を正確に把握できなかった。

すなわち、バイタルサインと間欠的に取得した超音波画像との関係性を把握することが難しいという課題があった。

本発明は当該課題に鑑みてなされたものであり、バイタルサインと間欠的に取得した超音波画像との関係性を把握することができる生体情報モニタ、及び生体情報システムを提供することを主たる目的とする。

本発明にかかる生体情報モニタの一態様は、
被験者の生体信号を基にしたバイタルサインと、前記被験者に照射した超音波の反射波を基にした超音波画像と、を取得する生体情報モニタであって、
前記バイタルサインの測定データと測定日時を関連付けて記憶すると共に、撮像タイミングと前記超音波画像を関連付けて記憶する記憶部と、
前記記憶部に記憶されたデータを含む画面を表示する表示部と、を備えるものである。

上述のように記憶部は、測定日時と関連付けてバイタルサインの測定データ（測定値、測定波形）を記憶している。また記憶部は、撮像タイミングと関連付けて超音波画像を記憶している。すなわちバイタルサインの測定データと超音波画像は共に測定日時（撮像タイミング）と関連付けられて記憶されている。このように関連付けがなされたデータを基に画面が生成されることにより、ユーザはバイタルサインの測定データと超音波画像の関係性を把握することができる。

本発明は、バイタルサインと間欠的に取得した超音波画像との関係性を把握することができる生体情報モニタ、及び生体情報システムを提供することができる。

実施の形態１にかかる生体情報システム１の外観構成例を示す図である。 実施の形態１にかかる生体情報システム１の内部構成を示すブロック図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１にかかる表示部１６に表示された画面の例を示す図である。 実施の形態２にかかる表示部１６に表示された画面の例を示す図である。 実施の形態２にかかる表示部１６に表示された画面の例を示す図である。 実施の形態２にかかる表示部１６に表示された画面の例を示す図である。 実施の形態２にかかる表示部１６に表示された画面の例を示す図である。 実施の形態２にかかる表示部１６に表示された画面の例を示す図である。 実施の形態２にかかる表示部１６に表示された画面の例を示す図である。 実施の形態２にかかる表示部１６に表示された画面の例を示す図である。 実施の形態１または２にかかる生体情報モニタ１０のハードウェア構成を示す図である。

＜実施の形態１＞
以下、図面を参照して本発明の実施の形態について説明する。図１は、本実施の形態にかかる生体情報システム１の外観構成を示す概念図である。生体情報システム１は、生体情報モニタ１０及び超音波測定装置２０を有する。なお、図示しないものの生体情報モニタ１０は、センサ３０（後述）とも適宜接続する。

生体情報モニタ１０は、被験者に接続された各種のセンサ３０（図２において後述）からの生体信号を基に、各種のバイタルサインを測定する。ここで被験者に接続されるセンサ３０は、バイタルサインの測定に用いる各種センサである。例えばセンサ３０は、血圧測定に用いるカフ、心電図測定等に用いる電極（ディスポ電極、クリップ電極、等）、ＳｐＯ２プローブ、呼吸測定用のマスク、等を含む。また測定対象となるバイタルサインは、例えば血圧、体温、呼吸数、動脈血酸素飽和度、心電図、脈拍数である。生体情報モニタ１０は、ベッドサイドモニタ、携帯型の医用テレメータ、心電図等の測定機能付きの除細動器、等を含む概念である。すなわち生体情報モニタ１０は、バイタルサインを測定する種々の医療装置と解釈できる。以下の説明では、生体情報モニタ１０がいわゆるベッドサイドモニタであるものとして説明を行う。

生体情報モニタ１０は、各種のセンサ３０と接続する接続口（いわゆるコネクタの差込口）を有する。超音波測定装置２０は、当該接続口に着脱可能な装置である。たとえば超音波測定装置２０と生体情報モニタ１０は、ＵＳＢ（Universal Serial Bus）により接続してもよく、その他の任意のコネクタを介して接続してもよい。超音波測定装置２０は、被験者の生体に探触子２１（後述）を接触（または近接）させることにより、被験者の生体内部の超音波画像を取得する。超音波測定装置２０は、ユーザ（主に医師）が把持可能な重量及び大きさの装置であり、一般的な超音波診断装置のプローブヘッドにケーブルが接続したような形態である。

生体情報モニタ１０は、超音波測定装置２０が取得した超音波画像を表示部１６（後述）に表示することができる。

なお超音波測定装置２０は、生体情報モニタ１０と接続可能な構成であればよい。すなわち超音波測定装置２０は、図示するような有線接続に限られず、無線接続によって生体情報モニタ１０とデータ送受信を行ってもよい。

続いて図２を参照して、生体情報システム１の機能構成について説明する。図２は、生体情報システム１の機能構成に着目したブロック図である。センサ３０は、上述のように被験者の生体に接続（例えば貼付）されるバイタルサイン用のセンサである。

生体情報モニタ１０は、入力インターフェイス１１、通信部１２、操作部１３、制御部１４、スピーカ１５、表示部１６、及び記憶部１７を有する。図示しないものの生体情報モニタ１０は、ＣＰＵ(Central Processing Unit)や内部電源等も適宜備える。また生体情報モニタ１０は、時刻を計時する内部時計（図示せず）も備える。

入力インターフェイス１１は、上述の接続口及びその周辺回路等である。入力インターフェイス１１は、センサ３０及び超音波測定装置２０から受信した信号を制御部１４に供給する。また入力インターフェイス１１は、生体情報モニタ１０からセンサ３０または超音波測定装置２０に対して信号を送信する。

通信部１２は、他の装置（例えば同一院内のセントラルモニタ）とのデータの送受信を行う。通信部１２は、例えば無線ＬＡＮ（Local Area Network）等にかかる通信規格を満たすものであれば良い。なお通信部１２は、有線ケーブルを用いて通信処理を行ってもよい。

ユーザ（主に医師）は、操作部１３を介して生体情報モニタ１０に対する入力を行う。操作部１３は、例えば生体情報モニタ１０の筐体上に設けられたボタン、ツマミ、回転型セレクタ、キー、等である。操作部１３を介した入力は、制御部１４に供給される。

スピーカ１５は、アラームをはじめとする各種の報知音を出力する。スピーカ１５は、制御部１４の制御に応じて報知を行う。

表示部１６は、生体情報モニタ１０の筐体上に設けられたディスプレイ及びその周辺回路等である。表示部１６は、制御部１４の制御に応じて各種バイタルサインの測定波形、測定値、超音波画像等を表示する。換言すると制御部１４は、記憶部１７に記憶されたデータ（超音波画像、各種バイタルサインの測定データ（測定波形、測定値）、等）を基にした画面を表示部１６に表示する。制御部１４による表示制御は、図３等を参照して後述する。

なお操作部１３と表示部１６は、一体となった構成（いわゆるタッチパネルのような構成）であってもよい。以下の説明では、操作部１３と表示部１６がタッチパネルであるものとして説明を行う。

記憶部１７は、制御部１４が使用する各種のプログラム（システムソフトウェア、及び各種のアプリケーションソフトウェアを含む）やデータ（バイタルサインの測定値や測定波形を含む測定データ、測定データを測定した日時、後述の超音波画像、超音波画像の撮像タイミング等を含む）を記憶する。制御部１４は、記憶部１７からのプログラムやデータの読み出しを適宜行う。また制御部１４は、記憶部１７へのデータの書き込みを適宜行う。記憶部１７は、生体情報モニタ１０内に設けられた二次記憶装置であり、例えば生体情報モニタ１０内に設けられたハードディスクである。なお記憶部１７は、生体情報モニタ１０に内蔵されている場合に限られず、生体情報モニタ１０に着脱可能な構成（例えば生体情報モニタ１０に着脱可能なＵＳＢ（Universal Serial Bus）メモリ等）であってもよい。

記憶部１７は、センサ３０から取得したバイタルサインの測定データ（測定値、測定波形）と測定日時を対応付けたデータ（第１データ）を記憶すると共に、超音波測定装置２０が撮像した超音波画像とその撮像タイミング（超音波画像を測定した日時）を対応付けたデータ（第２データ）を記憶する。

制御部１４は、生体情報モニタ１０の動作制御（センサ３０を介した測定の制御、各種設定の反映、超音波画像の取り込み、バイタルサインの測定値の記録、表示部１６への表示制御等）を行う。

制御部１４は、センサ３０を介して取得した各種バイタルサイン（血圧、脈拍、体温、動脈血酸素飽和度、呼吸数、呼吸波形、等）の測定値を測定日時と関連付けて記憶部１７に書き込む。なお制御部１４が測定値と測定日時を関連付けて連続的に記憶部１７に書き込むことは、測定波形を測定日時と関連付けて記憶させることと同じである。また制御部１４は、超音波測定装置２０が取得した超音波画像を撮像タイミング（撮像（測定）した日時）と関連付けて記憶部１７に書き込む。測定日時は、図示しない内部時計等のデータを参照して取得される。制御部１４は、この記憶部１７に記憶されたデータ（バイタルサインの測定値、超音波画像）を基にした画面を表示部１６に表示する。表示制御の詳細は、図３等を参照して後述する。

続いて超音波測定装置２０の構成について説明する。超音波測定装置２０は、図１に示すように生体情報モニタ１０に着脱可能な装置である。超音波測定装置２０は、いわゆるプローブに類する形状である。超音波測定装置２０は、探触子２１、制御部２２、及び記憶部２３を有する。

なお超音波測定装置２０は、生体情報モニタ１０から電力供給を受けて装置であってもよく、内部電源を有する構成であってもよい。

探触子２１は、被験者の生体に接触（または近接）して超音波を照射する。また探触子２１は、被験者の生体から反射した超音波（反射波）を受信する。探触子２１は、受信した超音波を制御部２２に供給する。

なお探触子２１の種類は、特に限定されるものでは無い。すなわち探触子２１は、コンベックス型、セクタ型、リニア型、この他の種類、のいずれであってもよい。また探触子２１の筐体上に操作インターフェイス（ツマミ、ボタン、操作用ホイール等）が設けられていてもよい。ユーザは、この操作インターフェイスを操作することによって探触子２１の設定等を変更する。

記憶部２３は、制御部２２が使用する各種のソフトウェアプログラム（システムソフトウェア、各種のアプリケーションソフトウェア、を含む）やデータ（超音波画像の履歴値、設定値、等）を記憶する。制御部２２は、記憶部２３からプログラムやデータの読み出しを適宜行う。また制御部２２は、記憶部２３へのデータの書き込みを適宜行う。記憶部２３は、超音波測定装置２０内に設けられた二次記憶装置であり、例えば超音波測定装置２０内に設けられたハードディスクである。なお記憶部２３は、超音波測定装置２０内に内蔵されている場合に限られず、超音波測定装置２０に着脱可能な構成（例えば超音波測定装置２０に着脱可能なＵＳＢ（Universal Serial Bus）メモリ等）であってもよい。なお超音波測定装置２０が使用する各種のソフトウェアプログラムは、生体情報モニタ１０内（すなわち記憶部１７）に格納されていてもよい。

制御部２２は、探触子２１の各種設定や探触子２１が取得した受信信号の取り込みや画像化を行う。詳細には制御部２２は、探触子２１のビームフォーミング設定、受信した反射からの超音波受信ビーム形成、超音波受信ビームに対する各種信号処理（モード信号処理、ＣＦ信号処理、ドプラ信号処理、等）、スキャン処理による超音波画像の形成、探触子２１のエラー検出、等を行う。また制御部２２は、探触子２１の受信信号から形成した超音波画像を生体情報モニタ１０に送信する。なお制御部２２は、探触子２１が取得した反射波の信号をそのまま生体情報モニタ１０に転送してもよい。この場合、制御部１４が当該反射波の信号を基にして超音波画像の生成処理を行う。

ここで、常に超音波測定装置２０を使用するのではなく、スポット的（間欠的）に被験者の腹部エコー等を取得することを想定する。以下、間欠的に超音波画像を取得した場合の生体情報モニタ１０（制御部１４）における画面制御について説明する。

図３は、表示部１６に表示されたバイタルサインのトレンドグラフ（測定波形の図示であり、一般的には長時間波形）を示す画面である。制御部１４は、記憶部１７から各種のバイタルサインの測定値を測定日時と併せて読み出し、測定値ｖ１〜ｖ３と測定波形ｗ１〜ｗ３を表示部１６に表示する。画面上部には、メニューｍ１〜ｍ５が表示され、トレンドグラフに関するメニューｍ１が選択されている。本例において表示部１６は、１４：３０〜１５：３０までの心拍数（ＨＲ）、動脈血酸素飽和度（ＳｐＯ２）、及び呼吸数（Ｒｅｓｐ）のトレンドグラフを表示する（図３ｗ１〜ｗ３）。また表示部１６は、画面下部に操作用ボタンｂ１〜ｂ５を表示している。

なお図３の画面はあくまでも一例であり、表示対象となるバイタルサインの種類等は任意のものでよい。例えば血圧、体温等に関するバイタルサインのトレンドグラフが表示されてもよい。

制御部１４は、画面上にバイタルサインのトレンドグラフ（ｗ１〜ｗ３、ｖ１〜ｖ３）に加えて、超音波画像の撮像タイミングを表示する。この撮像タイミングの表示の際に、制御部１４はトレンドグラフの時系列と超音波画像の測定（撮像）日時の関係から、撮像タイミングの表示位置を決定する。図３の例では、制御部１４は超音波画像の撮像タイミングを示すアイコンｉ１〜ｉ４を表示する。図３の例において撮像タイミングは、時系列上に三角マークで示されている。この三角マークは、この時刻に超音波画像の撮像が行われたことを示している。なお撮像タイミングを示すアイコンはあくまでも一例であり、この他のアイコンであってもよい。また撮像タイミングは、時系列上に縦線（時系列の進行方向と直交する直線）で示されていてもよい。制御部１４は、このように記憶部１７から読み出したデータを用いて、バイタルサインのトレンドグラフと超音波画像の撮像タイミングを合わせて表示部１６に表示する。

ユーザ（主に医師）は、この画面（図３）を参照することにより、各種バイタルサインの測定値の長期的な変化に加えて、どのタイミングで超音波画像を撮像したかを把握できる。例えばユーザは、バイタルサインの測定値が悪化するタイミングにおいて超音波画像を取得しているか否かを把握できる。

ユーザは、バイタルサインの測定波形ｗ１〜ｗ３を参照し、超音波画像を参照したいタイミングを検討する。そしてユーザは、所望の撮像タイミングを選択する。例えばユーザは、タッチパネル形式の表示部１６の撮像タイミングのアイコンを押下すればよい。ここでユーザは、アイコンｉ１を選択したものとする。

以下、図４を参照する。制御部１４は、ユーザにより選択された撮像タイミング（アイコンｉ１）に対応する超音波画像を記憶部１７から読み出す。制御部１４は、読み出した超音波画像に関するウインドウｄ１を画面上に表示する。

なお制御部１４は、選択された撮像タイミングに対応する超音波画像を全面表示してもよい。

またユーザは、タッチパネルによる操作ではなく、生体情報モニタ１０の筐体上に設けられたボタン等を用いて所望の撮像タイミング（アイコンｉ１〜ｉ４）を選択してもよい。例えばユーザは、ボタン操作によってカーソルの移動と選択を行い、所望の撮像タイミング（アイコンｉ１〜ｉ４）を選択してもよい。

また制御部１４は、撮像タイミング（アイコンｉ１）が選択された直後に超音波画像をウインドウｄ１に表示するのではなく、メニューｍ５（超音波タブ）が選択された後に撮像タイミング（アイコンｉ１）に対応する超音波画像を表示してもよい。撮像タイミング（アイコンｉ１）が選択された場合、制御部１４は当該アイコンｉ１の色を反転して選択されたことを明示してもよい。

また制御部１４は、超音波画像を表示すると共に、当該超音波画像の撮像タイミングにおける各種バイタルサインの測定値や測定波形を合わせて表示してもよい。当該表示例を図５に示す。図５に示すように制御部１４は、選択された撮像タイミングに対応する超音波画像に加えて、各種バイタルサインの測定値（ｖ４）や撮像タイミング（ｔｍ１）を含む超音波画像のウインドウｄ２を表示する。この測定値（ｖ４）は、撮像タイミング（ｔｍ１）におけるバイタルサインの測定値（例えば１４：３２：００〜１４：３３：００の間のバイタルサインの測定値）を示している。ユーザは、この表示画面（図５）を参照することにより腹部エコー等の画像情報に加えて、撮像時のバイタルサインの測定値を合わせて把握できる。

図３の例では、制御部１４はバイタルサインの表示エリア（ＨＲ、ＳｐＯ２、Ｒｅｓｐのタイムライン）と撮像タイミングの表示エリア（ＵｌｔｒａＳｏｕｎｄのタイムライン）の双方を表示する表示画面を生成したが、必ずしもこれに限られない。例えば制御部１４は、バイタルサインの表示エリア上に撮像タイミングのアイコンを表示してもよい。当該表示画面例を図６に示す。

図６の例では、心拍数ＨＲの測定波形ｗ１上に超音波画像の撮像タイミングを示すアイコンｉ１〜ｉ４が表示されている。なお図６の表示はあくまでも一例であり、全ての種類のバイタルサインの測定波形上に撮像タイミングを示すアイコンが表示されていてもよい。

更に制御部１４は、ユーザが行った操作の種別（操作種別）に応じてどのような表示制御を行うかを切り替えてもよい。制御部１４は、選択された撮像タイミングに加えて、ユーザが行った操作の種別を検出する。詳細には制御部１４は、撮像タイミング上（または近傍）で行われた操作の種別（タップ、ダブルタップ、ピンチイン、ピンチアウト、フリック、等）を検出する。

制御部１４は、検出した操作の種別に応じて超音波画像の表示態様を決定する。例えば撮像タイミングのアイコン上でタップが行われた場合、制御部１４は図４に示すように対象の超音波画像を示すウインドウを表示する。一方、撮像タイミングのアイコン上でピンチインが行われた場合、制御部１４は表示対象の超音波画像を全面表示する。なお上述の操作種別と表示制御の関連付けはあくまでも一例であり、ユーザが当該関連付けを定義できるようにしてもよい。操作種別に応じて超音波画像の表示態様を変化させることにより、ユーザは少ない作業で所望の表示形態の超音波画像を参照することができる。

更に制御部１４は、選択された撮像タイミングのバイタルサインの測定波形と、超音波画像と、が重ならないようにする表示制御を行ってもよい。当該表示制御を図７及び図８を参照して説明する。

図７は、撮像タイミングの選択前の状態を示す表示画面である。ここでユーザがアイコンｉ３を選択することを想定する。この撮像タイミング（アイコンｉ３）を含む所定時間帯のバイタルサインの測定波形が表示された範囲を表示エリアＡ１とする。

図８は、アイコンｉ３が選択された場合の画面を示す図である。図示するように制御部１４は、選択された撮像タイミング（アイコンｉ３）に対応する超音波画像のウインドウｄ３を表示する。また制御部１４は、このウインドウｄ３と重ならないように、表示エリアＡ１（選択された撮像タイミングを含む所定時間帯のバイタルサインの測定波形）を画面の端部方向（図８の例では左方向であり、点線矢印方向）に移動させ、当該表示エリアＡ１以外の箇所（所定時間帯の測定波形が表示されていない箇所であり、図８の例では画面中央から画面右側付近）に超音波画像を表示する。すなわち制御部１４は、超音波画像と当該超音波画像の撮像時のバイタルサインの測定波形とが重ならないように表示位置を調整して（表示位置を移動して）双方表示している。これによりユーザは、大きなウインドウで超音波画像を確認できると共に、当該超音波画像の撮像時のバイタルサインの状態も合わせて把握することができる。

また図８の表示状態においてユーザが超音波画像の表示を終了する操作（例えばウインドウｄ３の×ボタン（閉じるボタン）の押下）を行った場合、制御部１４はバイタルサインの測定波形を元の位置（すなわち図７の状態であり、移動前の位置）に戻すように表示制御を行うことが好ましい。超音波画像の参照前の表示に戻ることにより、ユーザはスムーズに被験者の状態を把握することができる。

なお図８の表示制御はあくまでも一例であり、バイタルサインの測定波形は右端部／上部／下部／斜め下部／斜め上部に向かって移動するようにしてもよい。またバイタルサインの測定波形が中央に表示されるようにし、超音波画像が画面の端部に表示されるようにしてもよい。また制御部１４は、表示エリアＡ１とウインドウｄ３が合体したようなウインドウ（所定時間帯の測定波形と超音波画像が重ならないように表示する一態様）をポップアップ表示してもよい。

また制御部１４は、複数の超音波画像を含む画面を生成してもよい。当該例を図９に参照する。ユーザは、超音波画像のウインドウｄ４が表示されている状態で、更なる撮像タイミングの選択を行う。図９の例では、ユーザは超音波のウインドウｄ４（アイコンｉ２に対応）のみが表示されている状態で他のアイコンｉ１を選択する。

制御部１４は、選択されたアイコンｉ１に対応する超音波画像を読み出して画面上に表示する。図９の例では、制御部１４は、超音波画像のウインドウｄ４とウインドウｄ５の双方を表示している。複数の超音波画像のウインドウの表示を許容する場合、制御部１４は最初に表示するウインドウｄ４がアイコンｉ１〜ｉ４と重ならないように表示することが好ましい。また制御部１４は、表示するウインドウ数に合わせて各ウインドウサイズを自動的に調整してもよい。複数の超音波画像が表示されることにより、ユーザは腹部エコー等の変化についても一画面で把握することができる。

更に制御部１４は、超音波画像の撮像タイミングに関連付けて記録されたイベント情報を表示してもよい。当該例を図１０を参照して説明する。

ユーザは、超音波画像に関連付けたイベント情報を入力しておく。イベント情報とは、例えば計測部位、撮像者情報（撮像者の名前等）、被験者情報（被験者の年齢、性別等）、撮影日時、である。これらのイベント情報は、ユーザが操作部１３を介して入力してもよく、制御部１４が自動的に算出してもよい。例えば制御部１４は、撮像した超音波画像を解析することによって各種のパラメータを自動的に算出してもよい。制御部１４は、イベント情報を記憶部１７に書き込む。

その後にユーザは、図３に示すようなバイタルサインのトレンドグラフを参照し、上述のように撮像タイミングを選択する。制御部１４は、選択された撮像タイミングに対応する超音波画像を記憶部１７から読み出す。また制御部１４は、選択された撮像タイミングに対応するイベント情報も記憶部１７から読み出す。制御部１４は、読み出した超音波画像とイベント情報を合わせてウインドウｄ６上に表示する（図１０）。図１０に示すように、超音波画像に加えてイベント情報ｅ１（被験者の名前、性別、年齢）が合わせて表示されている。

イベント情報を参照することにより、ユーザは超音波画像では把握できない情報も合わせて把握することができる。これによりユーザは、被験者の状況をより詳細に把握することができる。

なお上述の表示例（図４、図５、図８〜図１０）においてユーザは、ドラッグ処理により超音波画像が表示されたウインドウの大きさを適宜変更してもよい。制御部１４は、ドラッグ処理を検出してウインドウサイズを適宜変更する。同様にユーザは、ウインドウの位置を適宜移動してもよい。

続いて本実施の形態にかかる生体情報モニタ１０の効果について説明する。上述のように記憶部１７は、測定日時と関連付けてバイタルサインの測定データ（測定値、測定波形）を記憶している。また記憶部１７は、撮像タイミングと関連付けて超音波画像を記憶している。すなわちバイタルサインの測定データと超音波画像は共に測定日時（撮像タイミング）と関連付けられて記憶されている。これにより、バイタルサインの測定データと超音波画像が関連づいた状態となる。このように関連付けがなされたデータを基に画面が生成されることにより、ユーザはバイタルサインの測定データと超音波画像の関係性を把握することができる。

更に表示部１６に表示される画面（例えば図３）において撮像タイミングが選択された場合、制御部１４は当該撮像タイミングに対応する超音波画像を表示する（図４）。これによりユーザは、バイタルサインと超音波画像の対応関係を視覚的に把握することができる。なお、上述のように制御部１４は、撮像タイミングが選択された直後に超音波画像を表示してもよく、超音波に関するメニュー（図３におけるｍ５）が選択された後に選択された撮像タイミングに対応する超音波画像を表示してもよい。

また超音波画像と共にバイタルサインの測定値が表示される場合（図５）、ユーザはバイタルサインと超音波画像の対応関係をより明確に把握することができる。

超音波画像とイベント情報を合わせて表示する場合（図１０）、ユーザは被験者の超音波画像と共に年齢等の各種情報も合わせて把握することができる。

図７及び図８を参照したように、制御部１４は選択された撮像タイミングにかかる超音波画像と、当該撮像タイミングにおけるバイタルサインの測定データ（測定波形、測定値）と、が重ならないように表示してもよい。これによりユーザは、選択した撮像タイミングにおける被験者の状態をより詳細に把握することができる。特に図８に示すようにバイタルサインの表示領域が移動することにより、ユーザは注目している（選択した撮像タイミングにおける）バイタルサインの測定波形が表示されていることを直感的に理解することができる。

また複数の超音波画像を表示することにより（図９）、ユーザは超音波画像の遷移（例えば被験者の腹部状態の遷移）を把握できる。

＜実施の形態２＞
続いて、実施の形態２にかかる生体情報システム１の構成について実施の形態１と異なる点を以下に説明する。本実施の形態にかかる生体情報モニタ１０は、複数の超音波画像の画像一覧（例えばサムネイル画面）を表示し、当該画像一覧から選択された超音波画像の撮像タイミングに対応するバイタルサイン（測定波形、測定値）を参照できることを主な特徴とする。

生体情報システム１や生体情報モニタ１０の基本構成については、実施の形態１と同様である。生体情報モニタ１０は、表示部１６に図３に示すような画面を表示する。ユーザが超音波画像の表示を行うメニューｍ５を選択した場合、制御部１４は記憶部１７から各撮像タイミングで取得した超音波画像を読み出し、複数の（一つしか存在しない場合には一つの）超音波画像の画像一覧を表示する。例えば制御部１４は、読み出した超音波画像をサムネイル変換した画像一覧を時系列に並べて表示する。なお画像一覧は、サムネイルの一覧では無く、ファイル名付のアイコンの一覧や超音波画像のファイル名の一覧等であってもよい。また実施の形態１で言及したようにユーザが撮像タイミングを選択した後にメニューｍ５を選択した場合、制御部１４は当該撮像タイミングに対応する超音波画像のみを大きく表示してもよく、当該超音波画像のサムネイルのみを他のサムネイルに比べて強調して表示してもよい（例えばサムネイルの枠線を他のサムネイルの枠線と異なる色で表示してもよい）。以下、事前の撮像タイミングの選択は行われていないものとして説明する。図１１は、超音波画像がサムネイル形式で表示された画面の一例である。

図１１に示すように、画面には撮像した枚数だけ超音波画像（ｕ１〜ｕ９）がサムネイル形式で時系列に従って表示される。なお画面内に表示される超音波画像の枚数は固定（例えば９枚まで）であってもよく、制御部１４はページ送り等のアイコンを表示してページ送りを実現してもよい。

ユーザは所望の（バイタルサインの測定データを参照したい）超音波画像を選択（例えばタップ）する。制御部１４は、画像一覧の中から選択された超音波画像の撮像タイミングに対応するバイタルサインの測定データを記憶部１７から読み出す。詳細には制御部１４は、選択された超音波画像の撮像タイミングを含む所定時間帯（例えば１分間）に取得されたバイタルサインの測定データを記憶部１７から読み出す。制御部１４は、読み出したバイタルサインの測定データを表示した画面を生成する。図１２は、図１１の画面において超音波画像ｕ１が選択された際の画面例を示す図である。

図１２に示すように、制御部１４は選択された超音波画像（ｕ１）の撮像タイミング（１４：０４：２６）における各種バイタルサインの測定値や測定波形を新たなウインドウｄ７に表示する。ユーザは、この画面を参照することによってサムネイル形式の超音波画像とバイタルサインの測定値や測定波形を合わせて参照することができる。

なお制御部１４は、ユーザがウインドウｄ７の大きさをドラッグ処理等によって大きくした場合にのみ測定値に加えて測定波形を表示するようにしてもよい。制御部１４は、ウインドウｄ７の大きさが所定サイズを超えたか否かを適宜判定し、超えた場合には測定値に加えて測定波形を表示する。また制御部１４は、所定サイズを超えない場合に測定値のみを表示し、所定サイズを超えた場合には測定値に加えて測定波形を表示するようにしてもよい。つまり制御部１４は、測定データを表示するウインドウの大きさに基づいて、当該ウインドウの表示態様を変化させる。このような表示制御により、ウインドウサイズが小さい場合には必要最小限の情報が参照できると共に、ウインドウサイズが大きい場合にはより詳細な情報が参照できる。なお制御部１４は、新たなウインドウを表示するのではなく、選択された超音波画像（ｕ１）の近くに測定値を表示してもよい。

また制御部１４は、ユーザが行った操作の種別（操作種別）に応じてどのような表示制御を行うかを切り替えてもよい。制御部１４は、選択された撮像タイミングに加えて、ユーザが行った操作の種別を検出する。詳細には制御部１４は、撮像タイミング上（または近傍）で行われた操作の種別（タップ、ダブルタップ、ピンチイン、ピンチアウト、フリック、等）を検出する。

制御部１４は、検出した操作の種別に応じてどのような表示制御を行うかを決定する。例えば超音波画像ｕ１の表示上でピンチアウト（指先を広げる操作）が行われた場合、制御部１４は選択された超音波画像ｕ１の拡大画像（サムネイル表示よりも拡大という意味であって、実際のファイルの縦横比と等倍のサイズであってもよい。）を表示する。一方で超音波画像ｕ１の表示上でダブルタップ（指先で細かく２回タップする操作）が行われた場合、制御部１４は選択された超音波画像ｕ１に対応するバイタルサインの測定値や測定波形を表示する（図１２）。また超音波画像ｕ１の表示上でフリック（指先をはじくように動かす操作）が行われた場合、制御部１４は選択された超音波画像ｕ１の拡大画像と併せて当該画像の撮像タイミングに対応するバイタルサインの測定値を合わせて表示する（図１３ウインドウｄ８）。すなわち制御部１４は、選択された超音波画像ｕ１の拡大画像及びバイタルサインの測定データ（測定波形又は測定値）の双方を表示してもよく、少なくとも一方を表示してもよい。なお上述の操作と表示制御の対応付けはあくまでも一例であり、この他の対応付けが行われていてもよく、ユーザによって操作と表示制御の対応付けに関する定義が行われてもよい。

なおユーザは、操作部１３を介して画像一覧から選択された際の動作を設定しておいてもよい。例えばこのような設定が行われた状態でサムネイル画像が選択された場合、制御部１４は選択されたサムネイル画像に対応する拡大画像を常に表示する。

なお制御部１４は、超音波画像ｕ１の拡大画像とバイタルサインの測定値を表示する際に、図１４に示すように撮像タイミングの一覧ｌ１（タイミング一覧）を合わせて表示してもよい。図１４の例では、９個の撮像タイミングが表示されている。なお本例では時刻のみが表示されているが、日付と日時の双方が表示されてもよい。制御部１４は、表示中の超音波画像に対応する撮像タイミングを他の撮像タイミングとは区別して表示することが好ましい。図１４の例では制御部１４は、“１４：０４：２６”に撮像された超音波画像ｕ１が表示されているため、“１４：０４：２６”の表示にのみ下線を引いている。

ユーザは、当該画面上で一覧ｌ１内の撮像タイミングを選択する（例えば所望の時刻をタッチする）ことにより表示対象の超音波画像ｕ１を変更することが可能である。制御部１４は、ユーザにより選択された撮像タイミングに対応する超音波画像を記憶部１７から読み出し、読み出した超音波画像の拡大画像を表示する。図１４の例では、ユーザが“１５：１５：４６”が選択された場合（例えば画面上でタッチされた場合）、制御部１４は“１５：１５：４６”に撮像した超音波画像を記憶部１７から読み出し、現在表示している“１４：０４：２６”の超音波画像ｕ１から読み出した１５：１５：４６”の超音波画像ｕ１の表示に切り替える。

制御部１４は、選択された超音波画像（サムネイル）とバイタルサインの測定値や測定波形が合わせて参照しやすいように表示位置を調整してもよい。当該例を図１５を参照して説明する。

図１１の画面においてユーザが超音波画像ｕ５を選択したとする。制御部１４は、超音波画像ｕ５の表示座標を取得し（例えば表示画面生成時の座標情報を基に算出し）、超音波画像ｕ５が画面の略中央位置にあることを認識する。超音波画像ｕ５が略中央位置にあると判定した場合、制御部１４は超音波画像ｕ５の表示位置を画面の端部にずらすと共に、バイタルサインの測定値や測定波形を示すウインドウｄ９を画面の略中央に表示する。図１５、当該表示例を示す図である。図示するように、超音波画像ｕ５が左端部方向に移動し、バイタルサインの測定値や測定波形を示すウインドウｄ８が画面中央に表示されている。すなわち制御部１４は、超音波画像ｕ５とバイタルサインの測定値や測定波形が重ならないように表示する。なお図１４の画面はあくまでも一例であり、右端部方向に超音波画像ｕ５を移動させてもよく、他の方向に移動させてもよい。すなわち制御部１４は、超音波画像ｕ５とウインドウｄ８が重ならないように表示位置の制御を行えばよい。

このように超音波画像ｕ５（選択された超音波画像）を移動させることにより、ユーザは超音波画像ｕ５とバイタルサインの測定値や測定波形を合わせて把握することができる。換言するとユーザは、ある時点での超音波画像とバイタルサインの測定データ（測定値、測定波形）の双方を把握できるため、より詳細に被験者の状態を把握することができる。

また制御部１４は、超音波画像ｕ１〜ｕ３が選択された場合には画面の下部に新たなウインドウ（超音波画像の拡大画面またはバイタルサインの情報）を表示し、超音波画像ｕ７〜ｕ９が選択された場合には画面の上部に新たなウインドウ（超音波画像の拡大画面またはバイタルサインの情報）を表示することが好ましい。すなわち制御部１４は、選択された超音波画像のサムネイルの表示位置に基づいて、新たなウインドウの表示位置（バイタルサインの測定波形や測定値の表示位置）を決定する。これによりユーザは、サムネイル画像と新たなウインドウを違和感なく双方参照できる。

また制御部１４は、選択された超音波画像（図１２においては超音波画像ｕ１、図１５においては超音波画像ｕ５）以外の超音波画像を非表示にしてもよい。図１６は、図１５の画面において超音波画像ｕ５以外を非表示にした例を示す図である。これにより、ユーザは着目している撮像タイミングでの超音波画像とバイタルサインの測定データ（測定波形や測定値）を他の画像に影響されることなく正確に把握できる。

更に制御部１４は、複数のバイタルサインの表示ウインドウを表示してもよい。当該表示例を図１７に示す。例えばユーザがはじめに超音波画像ｕ１を選択したとする。制御部１４は、この超音波画像ｕ１と重ならないようにバイタルサインのウインドウｄ１０を図１７に示すように表示する。その後にユーザが超音波画像ｕ９を選択した場合、制御部１４は、超音波画像ｕ９、ｕ１及びウインドウｄ１０と重ならないようにバイタルサインのウインドウｄ１１を図１６に示すように表示する。なおユーザは、ドラッグ処理を行うことによってウインドウｄ１０、ｄ１１を適宜移動させてもよい。

続いて本実施の形態にかかる生体情報モニタ１０の効果について説明する。本実施の形態にかかる制御部１４は、超音波画像のサムネイル画面を表示し、あるサムネイルが選択された場合、選択された超音波画像の撮像タイミングに対応するバイタルサインの測定データ（測定波形や測定値）を表示する（図１２等）。これによりユーザは、超音波画像からバイタルサインの情報にアクセスでき、両者の関係性を把握することができる。

また制御部１４は、ユーザの操作種別に応じて表示態様を制御してもよい（図１２、図１３）。これによりフリックやダブルタップといった簡単な操作の違いに応じて表示する対象をダイナミックに変更でき、ユーザは速やかに所望の情報を参照することができる。

また制御部１４はユーザ操作に応じて複数のウインドウを表示してもよい（図１７）。複数のウインドウが表示されることにより、ユーザは一画面上で参照したいバイタルサインの情報を比較しながら把握することができる。

なお本実施の形態においてもイベント情報を合わせて表示することも可能である。すなわち制御部１４は、超音波画像の拡大画面またはバイタルサインの情報を表示するウインドウ（例えばｄ７）にイベント情報を合わせて表示してもよい。

以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は既に述べた実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において種々の変更が可能であることはいうまでもない。

上述の制御部１４の処理の少なくとも一部は、生体情報モニタ１０内で動作するコンピュータプログラムとして実現することができる。図１８に生体情報モニタ１０のハードウェア構成例を示す。生体情報モニタ１０は、ＣＰＵ１０１、メモリ１０２（主記憶装置）、記憶部１７、表示部１６、バス１０３を有する。なお生体情報モニタ１０は、図示しないスピーカや各種の電気回路等を備えていてもよい。各構成要素間は、バス１０３により接続されている。

ＣＰＵ（Central Processing Unit）１０１は、上述の制御部１４、通信部１２の各種の処理の実行に必要なデータやプログラムをメモリ１０２上に展開し、プログラムに含まれる各命令を実行する。なお制御部１４の各種処理の少なくとも一部は、図示しない周辺回路等によって実現されてもよい。

ここでプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（random access memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

１ 生体情報システム
１０ 生体情報モニタ
１１ 入力インターフェイス
１２ 通信部
１３ 操作部
１４ 制御部
１５ スピーカ
１６ 表示部
１７ 記憶部
２０ 超音波測定装置
２１ 探触子
２２ 制御部
２３ 記憶部
３０ センサ

Claims (21)

1. 被験者の生体信号を基にしたバイタルサインと、前記被験者に照射した超音波の反射波を基にした超音波画像と、を取得する生体情報モニタであって、
   前記バイタルサインの測定データと測定日時を関連付けて記憶すると共に、前記超音波画像と撮像タイミングを関連付けて記憶する記憶部と、
   前記記憶部に記憶されたデータを基にした画面を表示部に表示する制御部と、
   を備える生体情報モニタ。
2. 前記制御部は、前記記憶部から読み出したデータに基づいて、前記バイタルサインのトレンドグラフと前記超音波画像の撮像タイミングを合わせて表示する、請求項１に記載の生体情報モニタ。
3. 前記制御部は、ユーザにより選択された前記撮像タイミングに対応する前記超音波画像を前記記憶部から読み出して表示する、請求項２に記載の生体情報モニタ。
4. 前記制御部は、前記超音波画像の表示時に、表示対象の前記超音波画像の撮像時に取得した前記バイタルサインの測定値を合わせて表示する、請求項３に記載の生体情報モニタ。
5. 前記制御部は、複数の前記超音波画像を表示する、請求項３または請求項４に記載の生体情報モニタ。
6. 前記制御部は、前記超音波画像に関連付けられたイベント情報を前記超音波画像と併せて表示する、請求項３〜５のいずれか１項に記載の生体情報モニタ。
7. 前記イベント情報は、計測部位、撮像者情報、撮影日時、のいずれかを含む、請求項６に記載の生体情報モニタ。
8. 前記制御部は、選択された前記撮像タイミングを含む所定時間帯の前記バイタルサインの測定波形と、前記超音波画像と、が重ならないように表示制御を行う、請求項３〜７のいずれか１項に記載の生体情報モニタ。
9. 前記制御部は、前記所定時間帯の測定波形の表示位置を移動させ、移動させた測定波形の表示位置と重ならないように前記超音波画像を表示する、請求項８に記載の生体情報モニタ。
10. 前記制御部は、前記超音波画像の表示を終了する操作が行われた場合、前記所定時間帯の測定波形を移動前の位置に戻す、請求項９に記載の生体情報モニタ。
11. 前記制御部は、ユーザ操作の種類に基づいて、前記超音波画像の表示態様を切り替える、請求項３〜１０のいずれか１項に記載の生体情報モニタ。
12. 前記制御部は、前記記憶部から読み出した１以上の前記超音波画像の画像一覧を表示し、前記画像一覧の中から選択された前記超音波画像の前記撮像タイミングに対応する前記バイタルサインの測定データを表示する、請求項１に記載の生体情報モニタ。
13. 前記制御部は、前記画像一覧の中から選択された前記超音波画像の拡大画像を表示する、請求項１２に記載の生体情報モニタ。
14. 前記制御部は、前記拡大画像と共に前記撮像タイミングのタイミング一覧を表示し、前記タイミング一覧から選択された前記撮像タイミングに対応する前記超音波画像を表示する、ことを特徴とする請求項１３に記載の生体情報モニタ。
15. 前記制御部は、前記画像一覧の中から選択された前記超音波画像の拡大画像と、当該超音波画像の前記撮像タイミングに対応する前記バイタルサインの測定データと、の双方を表示する、請求項１３または請求項１４に記載の生体情報モニタ。
16. 前記画像一覧は、１以上の前記超音波画像のサムネイルの一覧である、ことを特徴とする請求項１２〜１５のいずれか１項に記載の生体情報モニタ。
17. 前記制御部は、選択された前記超音波画像のサムネイルの表示と、選択された前記超音波画像に対応する前記バイタルサインの測定データと、が重ならないように位置の調整を行って双方を表示する、請求項１６に記載の生体情報モニタ。
18. 前記制御部は、選択された前記超音波画像のサムネイルの表示位置に基づいて、前記バイタルサインの測定データの表示位置を決定する、請求項１７のいずれか１項に記載の生体情報モニタ。
19. 前記制御部は、選択された前記超音波画像以外のサムネイルを非表示にする、請求項１７または請求項１８に記載の生体情報モニタ。
20. 前記制御部は、前記測定データを表示するウインドウの大きさに基づいて、当該ウインドウの表示態様を変化させる、請求項１２〜１９のいずれか１項に記載の生体情報モニタ。
21. 被験者の生体信号を基にしたバイタルサインを取得する生体情報モニタと、前記被験者に照射した超音波の反射波を基にした超音波画像を取得する超音波測定装置と、を備え、
    前記生体情報モニタは、前記バイタルサインの測定データと測定日時を関連付けて記憶すると共に、前記超音波画像と撮像タイミングを関連付けて記憶する記憶部と、
    前記記憶部に記憶されたデータを基にした画面を表示部に表示する制御部と、
    を備える生体情報システム。

Images