JP3608346B2 - 遠隔診療支援システム及びこれに用いる遠隔診療支援方法 - Google Patents
遠隔診療支援システム及びこれに用いる遠隔診療支援方法 Download PDFInfo
- Publication number
- JP3608346B2 JP3608346B2 JP16992697A JP16992697A JP3608346B2 JP 3608346 B2 JP3608346 B2 JP 3608346B2 JP 16992697 A JP16992697 A JP 16992697A JP 16992697 A JP16992697 A JP 16992697A JP 3608346 B2 JP3608346 B2 JP 3608346B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- terminal
- command
- transmission device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Processing Or Creating Images (AREA)
- Computer And Data Communications (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、遠隔地の医師同士が各々の端末に表示された同一医用画像を参照して診療を行う遠隔診療支援システムに関する。
【０００２】
【従来の技術】
従来技術の一例として、「Ｓｙｎｃｈｒｏｎｉｚｅｄ Ｖｏｉｃｅ ａｎｄ Ｉｍａｇｅ Ａｎｎｏｔａｔｉｏｎ ｉｎＲｅｍｏｔｅ Ｃｏｎｓｕｌｔａｔｉｏｎ ａｎｄ Ｄｉａｇｎｏｓｉｓ ｆｏｒ ｔｈｅ Ｇｌｏｂａｌ ＰＡＣＳ」（プロシーディングズ オブ エスピーアイイー（Ｐｒｏｃ． ｏｆ ＳＰＩＥ），Ｖｏｌ． ２１６５，第９〜２０頁）に、遠隔地の医師同士が同一医用画像を参照しながらオンラインリアルタイムカンファレンスを行う技術が述べられている。複数の端末と画像を格納したデータベースとがネットワークで接続され、医師の操作内容に対応した操作コマンドを生成して端末間で伝送することにより、端末各々がデータベースから同一画像を読み出して表示したり、同一の画像処理や注釈の付加等の画像操作を行う。また、画像操作の一例として、注目部位を線画で囲む注釈記入（フリーハンドフレーミング：以下自由手書き描画と呼ぶ）を示している。
【０００３】
別の方法として、端末は、生成した操作コマンドを実行タイミングを付与してバッファに一旦蓄積した後、他の医師の端末に電子メールなどで伝送し、他の医師は、伝送された操作コマンドの内容を実行タイミングに従って実行させ、自分が都合の良い時間に相手端末の操作を再現させる方法がある。
【０００４】
【発明が解決しようとする課題】
上記従来技術の２つのカンファレンス方法は、各々独立したシステムにより実現されていた。従って、例えば、メール型カンファレンスにより読影依頼を受けた医師が緊急と判断し、直ちにリアルタイムカンファレンスを用いて相手医師に医用画像を示しながら処置を指示するような場合など、カンファレンスの途中でカンファレンス方法を変更することに関して考慮されていなかった。
【０００５】
このような場合、読影依頼を受けた医師は、（１）必要な医用画像をメール型カンファレンスのシステムからリアルタイムカンファレンスのシステムに移動させ、（２）メール型カンファレンスのシステムに表示された相手医師の宛先（ネットワークアドレスなど）を参照して、リアルタイムカンファレンスのシステムに接続先を入力して端末を接続し、（３）メール型カンファレンスのシステムで表示していた画像をリアルタイムカンファレンスのシステムに表示させる、などの操作が必要になるという問題があった。
【０００６】
あるいは、医用画像を操作する際の機能やユーザインタフェースが、２つのカンファレンス方法を実現する各々のシステム間で異なる場合、カンファレンスの途中でカンファレンス方法を変更した際、医師の操作に混乱をきたし誤操作を生じる恐れがあるという問題があった。
【０００７】
本発明の目的は、上記のような従来の課題を解決し、リアルタイムカンファレンスとメール型カンファレンスとを切り替えながら診療支援を行うことができ、且つ各々のカンファレンス方法を同様の操作性を保ちながら実現できる遠隔診療支援システム及びこれに用いる遠隔診療支援方法を提供することにある。
【０００８】
【課題を解決するための手段】
上記目的を達成するために、本発明の遠隔診療支援システムは、医師の操作に従って操作内容に対応した操作コマンドを生成するコマンド生成装置と、生成した操作コマンドの内容に従って医用画像の表示や画像処理及び注釈の付加等を行う画像操作装置と、生成した操作コマンドを逐次他の端末に伝送し、各々の端末に同一の医用画像を同時に表示させるリアルタイム型コマンド伝送装置と、生成された操作コマンドに実行タイミングを付加してバッファに一旦蓄積した後、医師の指示により当該バッファの内容を他の端末に伝送し、当該他の端末に当該端末と同一の医用画像を当該端末と異なる時刻に表示させるメール型コマンド伝送装置と、操作コマンドの伝送方法を、リアルタイム型コマンド伝送装置とメール型コマンド伝送装置のどちらか又は両方を選択する伝送モード選択装置とを有する。
【０００９】
あるいは、本発明の遠隔診療支援方法は、各々の端末は処理コマンドを送受する通信ポートを備え、当該端末の通信ポートに接続して他の端末と処理コマンドを送受する伝送ステップと、当該端末の通信ポートに接続して当該端末からの処理コマンドを受信し、実行タイミングを付加してバッファに蓄積する記録ステップと、当該端末の通信ポートに接続してバッファの内容を実行タイミングに従ったタイミングで当該端末に送信する再生ステップと、当該端末の通信ポートと各々のステップの有する通信ポートとの接続関係を変更する選択ステップとを有する。
【００１０】
【発明の実施の形態】
図１は、本発明の一構成例を説明する図である。本発明の一例として、Ａ病院に端末Ｊ（１１）がＢ病院に端末Ｋ（１２）が配置され、Ａ病院とＢ病院との間で診療支援を行う場合を説明する。
【００１１】
端末Ｊにおいて、２１は、医師の操作に従い操作内容に対応した操作コマンドを生成するコマンド生成装置、２６は、医用画像データ（以下、単に画像データと称する）が格納されている画像データベース（画像ＤＢ）、２２は、操作コマンドの内容に従って画像データの表示や画像処理及び注釈の追加などを行う画像操作装置、２３は、画像操作装置での操作結果をディスプレイに表示する画像表示装置、２９は、相手端末のディスプレイに同じ医用画像を表示するための画像再現装置、１３は、操作コマンドを直ちに他の端末に伝送するリアルタイム型コマンド伝送装置、１４は、操作コマンドに実行タイミングを付加してバッファに一旦蓄積した後、バッファ内容を他の端末に伝送するメール型コマンド伝送装置、２５は、操作コマンドの他の端末に伝送する方法を選択する伝送モード選択装置、２４は、医師の指示に従って端末内の各装置の動作を制御する制御装置である。端末Ｋ（１２）においても、同様の装置（３１〜３６）が存在する。但し、リアルタイム型コマンド伝送装置及びメール型コマンド伝送装置（以下、両者をまとめてコマンド伝送装置と称する）は、両端末で共有されている。
【００１２】
図２は、本発明を用いた遠隔診療支援システムの一端末例である。４１は、例えばパーソナルコンピュータやワークステーションなどの処理装置、４２は、 ＣＲＴなどのディスプレイ、４３及び４４は、操作者（医師）が操作するキーボード及びマウス、４５は、例えば磁気ディスクなどの記憶装置、４６は処理装置とネットワークを接続するための通信インタフェース装置、４７は電話回線や専用の通信路などで構築されたネットワークである。図１のコマンド生成装置２１，画像操作装置２２，伝送モード選択装置２５，画像再現装置２９は、本図の処理装置４１上に実現される。画像表示装置２３も処理装置４１上に実現され、その結果はディスプレイ４２上に表示される。制御装置２４も処理装置４１上に実現されるが、医師からの指示は、キーボード４３またはマウス４４などを介して受ける。
【００１３】
リアルタイム型またはメール型コマンド伝送装置（１３，１４）は、処理装置４１，通信インタフェース４６，ネットワーク４７を用いて実現される。画像 ＤＢ２６は、記憶装置４５を用いて実現される。また図２の４８及び４９は、マイク及びスピーカであって、相手端末と音声によるコミュニケーションを図るのに用いる。
【００１４】
図３は、端末Ｊのディスプレイ表示画像の一例である。本実施例では、ウィンドウシステムを用いた例である。ディスプレイ６１上に、操作コマンドの伝送方法などを医師が指示する制御ウィンドウ６２，画像ＤＢに格納された画像データの一覧表示や、画像操作装置で操作する画像データの選択などを医師が行う画像リストウィンドウ６３，画像操作装置の操作結果を表示し、さらに画像操作内容の詳細を医師が指示する画像表示ウィンドウ６４，７８が表示される。
【００１５】
表１は本実施例で用いる操作コマンドの一例である。本例では、＜画像表示＞＜線描画＞＜ポインタ表示＞＜ポインタ移動＞＜音声コメント＞の５種類の操作コマンドを用いる。以下、操作コマンドは＜＞を用いて表現する。
【００１６】
＜音声コメント＞は、図２のマイク４８とスピーカ４９を利用して音声の録音／再生を実現する機能である。
【００１７】
【表１】
【００１８】
表１において、画像識別子とは、画像ＤＢに格納された画像データ各々を区別するためのもので、例えば、ファイル名や画像を一意に決定可能な検索キーなどである。本実施例では、各画像データに固有の番号を予め割り当て、この番号を画像識別子として用いることとする。また、＜画像表示＞のパラメータである表示位置や表示サイズは、画像表示ウィンドウ（図３の６４、７８）の位置や大きさを端末間で連携させるためのものである。
【００１９】
図６は、メール型コマンド伝送装置１４の一例を説明する図である。２種類のバッファ９４，９５と、各バッファの接続先を変更するスイッチ９２，９３と、ネットワーク９１とから構成される。ネットワーク９１を用いた制御コマンドの伝送は、例えば電子メールと同様な方法により実現される。また、各スイッチは通常ａ側にセットされ、バッファ内容を他の端末に伝送する際、ｂ側にセットされる。
【００２０】
例えば、端末Ｊから端末Ｋに制御コマンドを伝送する場合、先ず、伝送モード選択装置２５から送られた制御コマンドは、各々に実行タイミングを付加した後、バッファ９４に蓄積される（図中の経路９６）。幾つかの操作コマンドが蓄積され、端末Ｊの医師からバッファ内容の送信指示を受けると、スイッチ９２， ９３が各々ｂ側にセットされ、バッファ９４に蓄積した操作コマンドが端末Ｋに伝送され、バッファ９５に格納される（図中の経路９７）。最後に、伝送が終了して各スイッチがａ側にセットされ、端末Ｋの医師からバッファ内容の再生指示を受けると、バッファ９５に格納された制御コマンドが逐次読み出され、実行タイミングに従って伝送モード選択装置３５に送られる（図中の経路９８）。この際、先に付加した実行タイミングは取り除かれる。
【００２１】
次に、図１の構成を用いた遠隔画像診断の手順の一例を説明する。本実施例では、Ａ病院のＡ医師がＢ病院のＤ医師にＡ病院で撮影したＸ線画像及びＭＲＩ画像の読影を依頼し、Ｄ医師は読影の結果、緊急の処置が必要と判断し、Ａ医師に読影依頼を受けた医用画像を示しながら処置内容を指示する場合を想定し、説明する。
【００２２】
Ａ医師はＡ病院の端末Ｊを、Ｄ医師はＢ病院の端末Ｋを各々利用し、読影依頼はメール型カンファレンスにより行われ、処置の指示はリアルタイムカンファレンスにより行われるものとする。また、読影依頼する画像データは、予め端末Ｊの画像ＤＢに格納済みとする。端末Ｊ及び端末Ｋのディスプレイ（図３及び図 １２）には、初期状態として制御ウィンドウ６２と画像リストウィンドウ６３が表示されているものとする。
【００２３】
最初に、Ａ医師は、制御装置を介してコマンド生成装置，画像操作装置，画像表示装置，伝送モード選択装置などの動作を制御して、Ｄ医師に読影を依頼する。
【００２４】
具体例を述べると、医師Ａは、先ず、図３の制御ウィンドウ６２の記録ボタン６５を押す。この操作結果は、制御装置を介して伝送モード選択装置に伝えられ、操作コマンドをメール型コマンド伝送装置で伝送するようにコマンド伝送装置の切り替えを行う。
【００２５】
図３の画像リストウィンドウ６３には、画像ＤＢに格納されている画像データの一覧が予め表示されている。医師Ａは、撮影日７１，撮影装置名７２，撮影順序（順番／全枚数）７３の情報から、読影を依頼する画像（ここでは、Ｘ線画像）を選択（例えば、目的の画像が表示されている行をマウスでダブルクリック）する。この選択結果は、制御装置を介してコマンド生成装置に伝えられ、医師Ａの操作に対応した操作コマンド（＜画像表示＞）が生成される。生成された操作コマンドは、画像操作装置２２及び伝送モード選択装置２５に送られる（図１の経路２７）。
【００２６】
操作コマンドが送られた画像操作装置は、操作コマンドの内容に従って、画像ＤＢから医師Ａが選択した画像データを読み出して画像表示装置に送り、画像表示装置は送られた画像データをディスプレイ（図３の画像表示ウィンドウ６４）に表示する。
【００２７】
操作コマンドが送られてきた伝送モード選択装置は、操作コマンドをメール型コマンド伝送装置１４に送る。メール型コマンド伝送装置は、送られた操作コマンドを一旦バッファに蓄積する（図６の経路９６）。
【００２８】
さらに医師Ａは、図３の画像表示ウィンドウ６４の編集ボタン７５を押して、表示されたＸ線画像７４に対して注釈の追加を行う。例えば、注目領域に線描画７７を付加し、さらに病変が疑われる領域をポインタ７６を移動させながら音声コメントを利用して、依頼内容の詳細を録音する。また、関連するＭＲＩ画像 ７９を表示させる。
【００２９】
その結果、図４に示すような操作コマンド（５２〜６０）が逐次生成され、＜画像表示＞の場合と同様に、画像操作装置２２及び伝送モード選択装置２５に送られる（図１の経路２７）。図４において、画像識別子９２は、画像操作５１を行う画像データを示している。また、メール型コマンド伝送装置１４のバッファ （図６の９４）には、図５に示すように、図４に示した操作コマンドに実行タイミング９１を付加したものが蓄積される。
【００３０】
一連の画像操作を終えた医師Ａは、図３の制御ウィンドウ６２の停止ボタン ６６を押す。この操作結果は、制御装置を介して伝送モード選択装置に伝えられ、メール型コマンド伝送装置への操作コマンドの伝送が中断される。
【００３１】
さらに医師Ａは、図３の制御ウィンドウ６２の相手設定ボタン８０を押して、例えば、予め用意されたメニューから所望の医師を選択するなどして、読影を依頼する医師（本実施例では、Ｂ病院Ｄ医師）を選択する。また、必要に応じて標題ボタン８１を押して、例えば、予め用意した文字列編集画面を操作するなどして、標題（本実施例では、読影依頼）を設定する。なお、相手設定ボタン８０及び標題ボタン８１は、ボタンの機能と設定状態の表示とを兼ねている。以上の操作の後、送信ボタン６８を押す。この操作結果は、制御装置を介してメール型コマンド伝送装置へ伝えられ、バッファ内容の送信を指示する。
【００３２】
メール型コマンド伝送装置は、端末Ｊで蓄積した操作コマンド（図５）を端末Ｋに、即ち、図６においてバッファ９４の内容をバッファ９５に伝送する。この際、読影依頼に用いた画像データも、コマンドと同時に、端末Ｊの画像ＤＢ２６から端末Ｋの画像ＤＢ３６に伝送される。また、ネットワーク上で操作コマンドを伝送する場合に必要な電子メールアドレスは、予め図１１に示すようなテーブルを用意し、相手設定ボタン８０で選択した施設名１４１や医師名１４２に対応したメールアドレス１４３を用いる。
【００３３】
以上が、Ａ医師がＤ医師に読影を依頼する具体例である。
【００３４】
次に、Ｄ医師は、制御装置を介してコマンド生成装置，画像操作装置，画像表示装置，伝送モード選択装置などの動作を制御して、Ａ医師から依頼された画像を読影する。
【００３５】
具体例を述べると、医師Ｄは、先ず、図１２の制御ウィンドウ６２の再生ボタン６７を押す。この操作結果は、制御装置を介して伝送モード選択装置３５に伝えられ、操作コマンドをメール型コマンド伝送装置から受信できるようにコマンド伝送装置の切り替えを行う。さらに、メール型コマンド伝送装置に、バッファ内容の再生を指示する。メール型コマンド伝送装置は、バッファ（図６の９５）に格納された制御コマンド（図５）を実行タイミングに従って伝送モード選択装置３５に伝送し、さらに画像操作装置３２に送る（図１の経路３８）。なお、バッファ（図６の９５）に図５のような一連の制御コマンドが複数存在する場合、送信元や標題などを元に適当なものを選択する。
【００３６】
その結果、画像操作装置は、送られてきた制御コマンドの内容に従って、画像ＤＢ３６に格納された画像データを用いて適切な画像操作が行われ、その結果は画像表示装置３３によりディスプレイ（図１２の画像表示ウィンドウ６４，７８）に表示される。即ち、Ａ医師が端末Ｊで行ったＸ線画像の表示，線描画やポインタを用いた注釈の追加，音声コメントによる依頼内容の詳細の再生，ＭＲＩ画像の表示が、Ａ医師が行ったのと同じタイミングでＤ医師の端末Ｋ上で実行される。
【００３７】
一連の制御コマンドの再生が終了した後、あるいは、停止ボタン（図１２の ６６）が押されると、伝送モード選択装置３５及びメール型コマンド伝送装置 １４は、操作コマンドの伝送を中断する。その後、医師Ｄは、例えば、図１２の編集ボタン８２を押して注目領域に線描画８３を付加するなどの画像操作を行うなど、依頼内容に基づいて読影を行う。
【００３８】
以上が、Ｄ医師がＡ医師から読影された画像を読影する具体例である。
【００３９】
最後に、読影の結果、Ｄ医師が緊急処置を要すると判断し、Ａ医師に処置内容を指示するために直ちにリアルタイムカンファレンスを行う。
【００４０】
具体例を述べると、読影を終えたＤ医師は、図１２の制御ウィンドウ６２の接続ボタン６９を押す。この操作結果は、制御装置を介して伝送モード選択装置 ３５に伝えられ、操作コマンドをリアルタイム型コマンド伝送装置で伝送するようにコマンド伝送装置の切り替えを行う。
【００４１】
リアルタイム型コマンド伝送装置は、操作コマンドを直ちに伝送するため、電子メールではなく端末間で論理的な通信路を設ける。この際、伝送する相手端末を識別するために、メールアドレスとは異なる端末アドレスが必要になる。そこで、予め図１１に示すようなテーブルを用意し、読影依頼の送信元の施設名１４１ 及び医師名１４２から、あるいは電子メールアドレス１４３から端末アドレス １４４を決定し、適切な相手端末に自動的に接続する。相手設定ボタン（図１２の８０）には、読影依頼の送信元が自動設定される。
【００４２】
リアルタイム型コマンド伝送装置での通信路の設定が終了すると、制御装置が画像再現装置３９に表示状態データの伝送を指示する。表示状態データとは、画像表示装置での表示内容の再現に必要なデータである。画像再現装置は、画像操作装置が行う画像データに対する操作内容を常に収集し、表示状態データに反映させる。
【００４３】
図１３は、表示状態データの一例であり、表示中の画像データの画像識別子 ９２と画像データの表示状態及び注釈状況１５７からなる。画像データの表示状態及び注釈状況１５７は、画像の最新表示位置／サイズと、注釈の有無及び注釈が存在する場合は再現に必要な情報（座標列や表示位置など）が、予め定めたフォーマットに則って記録されている。
【００４４】
画像再現装置３９は、パラメータとして表示状態データを有する制御コマンド（以下、＜画像再現＞とする）を生成する。生成した＜画像表現＞は、伝送モード選択装置３５，リアルタイム型コマンド伝送装置１３，伝送モード選択装置 ２５を介して、端末Ｊの画像操作装置２２に送られる（図１の経路４０及び経路２８）。画像操作装置２２は、＜画像表現＞のパラメータ（即ち表示状態データ）を用いて、端末Ｊのディスプレイ上に端末Ｋと同じ表示画像を表示する。この際、Ｄ医師が読影中に追加した線描画８３も表示され、端末Ｊと端末Ｋの表示画像は、完全に一致する。
【００４５】
端末間の表示画像が一致した後、Ｄ医師は、マイクとスピーカを介してＡ医師と会話し、さらに表示画像ウィンドウの編集ボタン（図１２の７５，８２）を押してポインタを操作すると、操作内容に対応した制御コマンドがコマンド生成装置３１で生成され、画像操作装置３２と、伝送モード選択装置３５，リアルタイム型コマンド伝送装置１３，伝送モード選択装置２５を介して、端末Ｊの画像操作装置２２にリアルタイムに送られ（図１の経路３７及び２８）、端末Ｊと端末Ｋの両方にポインタの操作結果が表示される。Ａ医師の操作もコマンド生成装置２１で操作内容に対応した操作コマンドが生成され、その操作結果は、同様な手順で端末Ｊと端末Ｋの両方に表示される。このように、画像再現装置による端末間の表示画像の一致の後、Ｄ医師は音声によるコミュニケーションを図りながら、Ａ医師とリアルタイムでコミュニケーションを図ることができる。
【００４６】
以上、図１の構成を用いた遠隔画像診断の手順の一例を説明した。
【００４７】
次に、図１の構成を実現する際の伝送モード選択装置及びコマンド伝送装置の実現方法の一例を説明する。本実施例は、パーソナルコンピュータやワークステーションなど、プログラムにより動作を記述する汎用の処理処置（図２の４１）を用いて実現する際の手順である。
【００４８】
本実施例は、通信ポートを有する３つの制御ステップ（伝送ステップ，記録ステップ，再生ステップ）と、通信ポートの接続関係を設定する制御ステップからなる。通信ポートとは、制御コマンドの入力／出力を行う論理的な接続口であり、通信ポート同士を接続することで、制御コマンドをやり取り可能とすることができる。各制御ステップの通信ポートは、同一端末，他の端末などの物理的な違いに関わりなく、他の制御ステップと接続できる。
【００４９】
伝送ステップは、コマンド作成装置，画像再現装置，画像操作装置と通信ポートとの間で制御コマンドのやり取りを行う。図７はそのステップの詳細であり、コマンド生成装置，画像再現装置が操作コマンドを送信した場合（１２１）、送信された操作コマンドを受け取り（１２２），通信ポートに出力する（１２３）。また、通信ポート接続先が操作コマンドが出力すると（１２４），出力された操作コマンドを受け取り（１２５），画像操作装置へ送る（１２６）。
【００５０】
記録ステップは、図８に示す手順に従い、通信ポートからの制御コマンドをバッファに蓄積する。再生ステップは、図９に示す手順に従い、バッファに蓄積された制御コマンドを通信ポートに出力する。図８及び図９で、通信ポート接続先に伝送ステップを含まない場合、通信ポート間でやり取りされる操作コマンドは、バッファ蓄積内容そのもの（実行タイミングを付加した形）とする。即ち、図９の１２３は実行タイミングを付加した操作コマンドを出力し、図８の１２５は実行タイミングを付加した操作コマンドを受け取り、１２９でそのままバッファに蓄積する（バッファ内容の複写に相当）。
【００５１】
図１０は、選択ステップが設定する通信ポートの接続関係の一例である。１１１ 〜１１３及び１１４〜１１６は、各々端末Ｊ及び端末Ｋの伝送ステップ，記録ステップ，再生ステップの通信ポートを表す。
【００５２】
１３１は、リアルタイムカンファレンスを行う場合で、制御コマンドが端末Ｊから端末Ｋに直接伝送される。１３２〜１３４はメール型カンファレンスを行う場合で、１３２は端末Ｊで制御コマンドの記録時、１３３は端末Ｊから端末Ｋへの制御コマンドの伝送時、１３４は端末Ｋでの制御コマンドの再生時の接続関係である。上述の遠隔画像診断の手順の一例の場合、Ａ医師がＤ医師に読影を依頼する際は１３２及び１３３，Ｄ医師がＡ医師から読影された画像を読影する際は１３４，Ｄ医師がＡ医師とリアルタイムカンファレンスを行う際は１３１を用いる。
【００５３】
１３５は、リアルタイムカンファレンスでやり取りされる操作コマンドを記録する場合で、記録した操作コマンドを他の端末に伝送して再生すると、第３者がカンファレンス内容を参照できるようになる。１３６は、メール型カンファレンスで記録した内容を複数の端末で参照する場合で、端末Ｊで受け取ったメールを再生する際、端末Ｊと端末Ｋで同時に参照できる。
【００５４】
１３７〜１４０は、制御コマンドの記録と再生を同時に行う場合で、記録した制御コマンドを同一端末内で再生して編集したり、リアルタイムカンファレンスを行いながら制御コマンドの再生や編集を行う場合に用いる。
【００５５】
以上、伝送モード選択装置及びコマンド伝送装置を実現する際の手順の一例を説明した。
【００５６】
以上のように本実施例では、医師の操作内容に対応した操作コマンドをリアルタイム型コマンド伝送装置とメール型コマンド伝送装置とを選択しながら伝送できるようにした。従って、同一システムで目的や状況に応じてリアルタイム型カンファレンスとメール型カンファレンスを切り替えながら適切な診療支援を行うことができ、さらに医用画像をシステム間で移動させる作業が不要になるという著しい効果がある。
【００５７】
あるいは、同一のコマンド生成装置，画像操作装置，画像表示装置を用い、同一の操作コマンドを用いて２種類のカンファレンス方法を実現できるようにした。従って、例えば、編集ボタンを押して注目領域に線描画を行う場合など、画像操作の機能やユーザインタフェースの共通化を容易に行うことができるようになり、カンファレンス方法を変更した際、医師の操作に混乱をきたし誤操作を生じる恐れがあるという問題を解決できるという今までにない効果がある。
【００５８】
あるいは、ディスプレイ表示内容の再現に必要なデータである表示状態データを相手端末に自動的に伝送する画像再現装置を用いるようにした。従って、メール型カンファレンスからリアルタイム型カンファレンスに変更した際、端末間の表示画像を自動的に一致させることができ、例えば読影結果を元に処置方法の指示を行う場合など、医師は思考を中断することなく支援作業を円滑に行えるようになる効果がある。また、端末間の表示画像が一致しない場合に生じる診療過誤を防止できる効果がある。
【００５９】
あるいは、伝送モード選択装置及びコマンド伝送装置は、通信ポートを有する３つの制御ステップ（伝送ステップ，記録ステップ，再生ステップ）と、通信ポートの接続関係を設定する制御ステップを用いて実現するようにした。従って、通信ポートの接続を変更するという簡便な操作により、操作コマンドの伝送方法及び伝送先を変更できるようになり、単純な構成で様々なカンファレンス運用形態に対して柔軟に対応できるという著しい効果がある。
【００６０】
【発明の効果】
以上のように本発明では、医師の操作内容に対応した操作コマンドをリアルタイム型コマンド伝送装置とメール型コマンド伝送装置とを選択しながら伝送できるようにした。従って、同一システムで目的や状況に応じてリアルタイム型カンファレンスとメール型カンファレンスを切り替えながら適切な診療支援を行うことができ、さらに医用画像をシステム間で移動させる作業が不要になるという著しい効果がある。
【００６１】
あるいは、伝送モード選択装置及びコマンド伝送装置は、通信ポートを有する３つの制御ステップ（伝送ステップ，記録ステップ，再生ステップ）と、通信ポートの接続関係を設定する制御ステップを用いて実現するようにした。従って、通信ポートの接続を変更するという簡便な操作により、操作コマンドの伝送方法及び伝送先を変更できるようになり、単純な構成で様々なカンファレンス運用形態に対して柔軟に対応できるという著しい効果がある。
【図面の簡単な説明】
【図１】本発明の一実施例の遠隔診療支援システムの構成を示すブロック図。
【図２】本発明の一実施例の遠隔診療支援システムの一端末の構成例を示す模式図。
【図３】端末Ｊのディスプレイの一例を示す説明図。
【図４】コマンド生成装置で生成された操作コマンドの一例を示す説明図。
【図５】バッファに蓄積された操作コマンドの一例を示す説明図。
【図６】メール型コマンド伝送装置の一例を示す説明図。
【図７】伝送ステップの処理手順の一例を示すフロー図。
【図８】記録ステップの処理手順の一例を示すフロー図。
【図９】再生ステップの処理手順の一例を示すフロー図。
【図１０】選択ステップが設定する通信ポートの接続関係の一例を示す説明図。
【図１１】電子メールアドレス及び端末アドレスを管理するデーブルの一例を示す説明図。
【図１２】端末Ｋのディスプレイの一例を示す説明図。
【図１３】表示状態データの一例を示す説明図。
【符号の説明】
１１…端末Ｊ、１２…端末Ｋ、１３…リアルタイム型コマンド伝送装置、１４…メール型コマンド伝送装置、２１，３１…コマンド生成装置、２２，３２…画像操作装置、２３，３３…画像表示装置、２４，３４…制御装置、２５，３５…伝送モード選択装置、２６，３６…画像データベース、２７，２８，３７，３８…操作コマンドの経路、２９，３９…画像再現装置、４１…処理装置、４２…ディスプレイ、４３…キーボード、４４…マウス、４５…記憶装置、４６…通信インタフェース装置、４７…ネットワーク、４８…マイク、４９…スピーカ、６１…ディスプレイ画面、６２…制御ウィンド、６３…画像リストウィンド、６４，７８…画像表示ウィンド、６５…記録ボタン、６６…停止ボタン、６７…再生ボタン、６８…送信ボタン、６９…接続ボタン、７０…終了ボタン、７１…撮影日、７２…撮影装置名、７３…撮影順序、７４…Ｘ線画像、７５、８２…編集ボタン、７６…ポインタ、７７，８３…線描画で描画された線、７９…ＭＲＩ画像、８０…相手設定ボタン、８１…標題ボタン、９１…ネットワーク、９２，９３…スイッチ、９４，９５…バッファ、９６〜９８…操作コマンドの経路、１１１…端末Ｊの伝送ステップの通信ポート、１１２…端末Ｊの記録ステップの通信ポート、１１３…端末Ｊの再生ステップの通信ポート、１１４…端末Ｋの伝送ステップの通信ポート、１１５…端末Ｋの記録ステップの通信ポート、１１６…端末Ｋの再生ステップの通信ポート、１３１〜１４０…通信ポートの接続関係。
【発明の属する技術分野】
本発明は、遠隔地の医師同士が各々の端末に表示された同一医用画像を参照して診療を行う遠隔診療支援システムに関する。
【０００２】
【従来の技術】
従来技術の一例として、「Ｓｙｎｃｈｒｏｎｉｚｅｄ Ｖｏｉｃｅ ａｎｄ Ｉｍａｇｅ Ａｎｎｏｔａｔｉｏｎ ｉｎＲｅｍｏｔｅ Ｃｏｎｓｕｌｔａｔｉｏｎ ａｎｄ Ｄｉａｇｎｏｓｉｓ ｆｏｒ ｔｈｅ Ｇｌｏｂａｌ ＰＡＣＳ」（プロシーディングズ オブ エスピーアイイー（Ｐｒｏｃ． ｏｆ ＳＰＩＥ），Ｖｏｌ． ２１６５，第９〜２０頁）に、遠隔地の医師同士が同一医用画像を参照しながらオンラインリアルタイムカンファレンスを行う技術が述べられている。複数の端末と画像を格納したデータベースとがネットワークで接続され、医師の操作内容に対応した操作コマンドを生成して端末間で伝送することにより、端末各々がデータベースから同一画像を読み出して表示したり、同一の画像処理や注釈の付加等の画像操作を行う。また、画像操作の一例として、注目部位を線画で囲む注釈記入（フリーハンドフレーミング：以下自由手書き描画と呼ぶ）を示している。
【０００３】
別の方法として、端末は、生成した操作コマンドを実行タイミングを付与してバッファに一旦蓄積した後、他の医師の端末に電子メールなどで伝送し、他の医師は、伝送された操作コマンドの内容を実行タイミングに従って実行させ、自分が都合の良い時間に相手端末の操作を再現させる方法がある。
【０００４】
【発明が解決しようとする課題】
上記従来技術の２つのカンファレンス方法は、各々独立したシステムにより実現されていた。従って、例えば、メール型カンファレンスにより読影依頼を受けた医師が緊急と判断し、直ちにリアルタイムカンファレンスを用いて相手医師に医用画像を示しながら処置を指示するような場合など、カンファレンスの途中でカンファレンス方法を変更することに関して考慮されていなかった。
【０００５】
このような場合、読影依頼を受けた医師は、（１）必要な医用画像をメール型カンファレンスのシステムからリアルタイムカンファレンスのシステムに移動させ、（２）メール型カンファレンスのシステムに表示された相手医師の宛先（ネットワークアドレスなど）を参照して、リアルタイムカンファレンスのシステムに接続先を入力して端末を接続し、（３）メール型カンファレンスのシステムで表示していた画像をリアルタイムカンファレンスのシステムに表示させる、などの操作が必要になるという問題があった。
【０００６】
あるいは、医用画像を操作する際の機能やユーザインタフェースが、２つのカンファレンス方法を実現する各々のシステム間で異なる場合、カンファレンスの途中でカンファレンス方法を変更した際、医師の操作に混乱をきたし誤操作を生じる恐れがあるという問題があった。
【０００７】
本発明の目的は、上記のような従来の課題を解決し、リアルタイムカンファレンスとメール型カンファレンスとを切り替えながら診療支援を行うことができ、且つ各々のカンファレンス方法を同様の操作性を保ちながら実現できる遠隔診療支援システム及びこれに用いる遠隔診療支援方法を提供することにある。
【０００８】
【課題を解決するための手段】
上記目的を達成するために、本発明の遠隔診療支援システムは、医師の操作に従って操作内容に対応した操作コマンドを生成するコマンド生成装置と、生成した操作コマンドの内容に従って医用画像の表示や画像処理及び注釈の付加等を行う画像操作装置と、生成した操作コマンドを逐次他の端末に伝送し、各々の端末に同一の医用画像を同時に表示させるリアルタイム型コマンド伝送装置と、生成された操作コマンドに実行タイミングを付加してバッファに一旦蓄積した後、医師の指示により当該バッファの内容を他の端末に伝送し、当該他の端末に当該端末と同一の医用画像を当該端末と異なる時刻に表示させるメール型コマンド伝送装置と、操作コマンドの伝送方法を、リアルタイム型コマンド伝送装置とメール型コマンド伝送装置のどちらか又は両方を選択する伝送モード選択装置とを有する。
【０００９】
あるいは、本発明の遠隔診療支援方法は、各々の端末は処理コマンドを送受する通信ポートを備え、当該端末の通信ポートに接続して他の端末と処理コマンドを送受する伝送ステップと、当該端末の通信ポートに接続して当該端末からの処理コマンドを受信し、実行タイミングを付加してバッファに蓄積する記録ステップと、当該端末の通信ポートに接続してバッファの内容を実行タイミングに従ったタイミングで当該端末に送信する再生ステップと、当該端末の通信ポートと各々のステップの有する通信ポートとの接続関係を変更する選択ステップとを有する。
【００１０】
【発明の実施の形態】
図１は、本発明の一構成例を説明する図である。本発明の一例として、Ａ病院に端末Ｊ（１１）がＢ病院に端末Ｋ（１２）が配置され、Ａ病院とＢ病院との間で診療支援を行う場合を説明する。
【００１１】
端末Ｊにおいて、２１は、医師の操作に従い操作内容に対応した操作コマンドを生成するコマンド生成装置、２６は、医用画像データ（以下、単に画像データと称する）が格納されている画像データベース（画像ＤＢ）、２２は、操作コマンドの内容に従って画像データの表示や画像処理及び注釈の追加などを行う画像操作装置、２３は、画像操作装置での操作結果をディスプレイに表示する画像表示装置、２９は、相手端末のディスプレイに同じ医用画像を表示するための画像再現装置、１３は、操作コマンドを直ちに他の端末に伝送するリアルタイム型コマンド伝送装置、１４は、操作コマンドに実行タイミングを付加してバッファに一旦蓄積した後、バッファ内容を他の端末に伝送するメール型コマンド伝送装置、２５は、操作コマンドの他の端末に伝送する方法を選択する伝送モード選択装置、２４は、医師の指示に従って端末内の各装置の動作を制御する制御装置である。端末Ｋ（１２）においても、同様の装置（３１〜３６）が存在する。但し、リアルタイム型コマンド伝送装置及びメール型コマンド伝送装置（以下、両者をまとめてコマンド伝送装置と称する）は、両端末で共有されている。
【００１２】
図２は、本発明を用いた遠隔診療支援システムの一端末例である。４１は、例えばパーソナルコンピュータやワークステーションなどの処理装置、４２は、 ＣＲＴなどのディスプレイ、４３及び４４は、操作者（医師）が操作するキーボード及びマウス、４５は、例えば磁気ディスクなどの記憶装置、４６は処理装置とネットワークを接続するための通信インタフェース装置、４７は電話回線や専用の通信路などで構築されたネットワークである。図１のコマンド生成装置２１，画像操作装置２２，伝送モード選択装置２５，画像再現装置２９は、本図の処理装置４１上に実現される。画像表示装置２３も処理装置４１上に実現され、その結果はディスプレイ４２上に表示される。制御装置２４も処理装置４１上に実現されるが、医師からの指示は、キーボード４３またはマウス４４などを介して受ける。
【００１３】
リアルタイム型またはメール型コマンド伝送装置（１３，１４）は、処理装置４１，通信インタフェース４６，ネットワーク４７を用いて実現される。画像 ＤＢ２６は、記憶装置４５を用いて実現される。また図２の４８及び４９は、マイク及びスピーカであって、相手端末と音声によるコミュニケーションを図るのに用いる。
【００１４】
図３は、端末Ｊのディスプレイ表示画像の一例である。本実施例では、ウィンドウシステムを用いた例である。ディスプレイ６１上に、操作コマンドの伝送方法などを医師が指示する制御ウィンドウ６２，画像ＤＢに格納された画像データの一覧表示や、画像操作装置で操作する画像データの選択などを医師が行う画像リストウィンドウ６３，画像操作装置の操作結果を表示し、さらに画像操作内容の詳細を医師が指示する画像表示ウィンドウ６４，７８が表示される。
【００１５】
表１は本実施例で用いる操作コマンドの一例である。本例では、＜画像表示＞＜線描画＞＜ポインタ表示＞＜ポインタ移動＞＜音声コメント＞の５種類の操作コマンドを用いる。以下、操作コマンドは＜＞を用いて表現する。
【００１６】
＜音声コメント＞は、図２のマイク４８とスピーカ４９を利用して音声の録音／再生を実現する機能である。
【００１７】
【表１】
表１において、画像識別子とは、画像ＤＢに格納された画像データ各々を区別するためのもので、例えば、ファイル名や画像を一意に決定可能な検索キーなどである。本実施例では、各画像データに固有の番号を予め割り当て、この番号を画像識別子として用いることとする。また、＜画像表示＞のパラメータである表示位置や表示サイズは、画像表示ウィンドウ（図３の６４、７８）の位置や大きさを端末間で連携させるためのものである。
【００１９】
図６は、メール型コマンド伝送装置１４の一例を説明する図である。２種類のバッファ９４，９５と、各バッファの接続先を変更するスイッチ９２，９３と、ネットワーク９１とから構成される。ネットワーク９１を用いた制御コマンドの伝送は、例えば電子メールと同様な方法により実現される。また、各スイッチは通常ａ側にセットされ、バッファ内容を他の端末に伝送する際、ｂ側にセットされる。
【００２０】
例えば、端末Ｊから端末Ｋに制御コマンドを伝送する場合、先ず、伝送モード選択装置２５から送られた制御コマンドは、各々に実行タイミングを付加した後、バッファ９４に蓄積される（図中の経路９６）。幾つかの操作コマンドが蓄積され、端末Ｊの医師からバッファ内容の送信指示を受けると、スイッチ９２， ９３が各々ｂ側にセットされ、バッファ９４に蓄積した操作コマンドが端末Ｋに伝送され、バッファ９５に格納される（図中の経路９７）。最後に、伝送が終了して各スイッチがａ側にセットされ、端末Ｋの医師からバッファ内容の再生指示を受けると、バッファ９５に格納された制御コマンドが逐次読み出され、実行タイミングに従って伝送モード選択装置３５に送られる（図中の経路９８）。この際、先に付加した実行タイミングは取り除かれる。
【００２１】
次に、図１の構成を用いた遠隔画像診断の手順の一例を説明する。本実施例では、Ａ病院のＡ医師がＢ病院のＤ医師にＡ病院で撮影したＸ線画像及びＭＲＩ画像の読影を依頼し、Ｄ医師は読影の結果、緊急の処置が必要と判断し、Ａ医師に読影依頼を受けた医用画像を示しながら処置内容を指示する場合を想定し、説明する。
【００２２】
Ａ医師はＡ病院の端末Ｊを、Ｄ医師はＢ病院の端末Ｋを各々利用し、読影依頼はメール型カンファレンスにより行われ、処置の指示はリアルタイムカンファレンスにより行われるものとする。また、読影依頼する画像データは、予め端末Ｊの画像ＤＢに格納済みとする。端末Ｊ及び端末Ｋのディスプレイ（図３及び図 １２）には、初期状態として制御ウィンドウ６２と画像リストウィンドウ６３が表示されているものとする。
【００２３】
最初に、Ａ医師は、制御装置を介してコマンド生成装置，画像操作装置，画像表示装置，伝送モード選択装置などの動作を制御して、Ｄ医師に読影を依頼する。
【００２４】
具体例を述べると、医師Ａは、先ず、図３の制御ウィンドウ６２の記録ボタン６５を押す。この操作結果は、制御装置を介して伝送モード選択装置に伝えられ、操作コマンドをメール型コマンド伝送装置で伝送するようにコマンド伝送装置の切り替えを行う。
【００２５】
図３の画像リストウィンドウ６３には、画像ＤＢに格納されている画像データの一覧が予め表示されている。医師Ａは、撮影日７１，撮影装置名７２，撮影順序（順番／全枚数）７３の情報から、読影を依頼する画像（ここでは、Ｘ線画像）を選択（例えば、目的の画像が表示されている行をマウスでダブルクリック）する。この選択結果は、制御装置を介してコマンド生成装置に伝えられ、医師Ａの操作に対応した操作コマンド（＜画像表示＞）が生成される。生成された操作コマンドは、画像操作装置２２及び伝送モード選択装置２５に送られる（図１の経路２７）。
【００２６】
操作コマンドが送られた画像操作装置は、操作コマンドの内容に従って、画像ＤＢから医師Ａが選択した画像データを読み出して画像表示装置に送り、画像表示装置は送られた画像データをディスプレイ（図３の画像表示ウィンドウ６４）に表示する。
【００２７】
操作コマンドが送られてきた伝送モード選択装置は、操作コマンドをメール型コマンド伝送装置１４に送る。メール型コマンド伝送装置は、送られた操作コマンドを一旦バッファに蓄積する（図６の経路９６）。
【００２８】
さらに医師Ａは、図３の画像表示ウィンドウ６４の編集ボタン７５を押して、表示されたＸ線画像７４に対して注釈の追加を行う。例えば、注目領域に線描画７７を付加し、さらに病変が疑われる領域をポインタ７６を移動させながら音声コメントを利用して、依頼内容の詳細を録音する。また、関連するＭＲＩ画像 ７９を表示させる。
【００２９】
その結果、図４に示すような操作コマンド（５２〜６０）が逐次生成され、＜画像表示＞の場合と同様に、画像操作装置２２及び伝送モード選択装置２５に送られる（図１の経路２７）。図４において、画像識別子９２は、画像操作５１を行う画像データを示している。また、メール型コマンド伝送装置１４のバッファ （図６の９４）には、図５に示すように、図４に示した操作コマンドに実行タイミング９１を付加したものが蓄積される。
【００３０】
一連の画像操作を終えた医師Ａは、図３の制御ウィンドウ６２の停止ボタン ６６を押す。この操作結果は、制御装置を介して伝送モード選択装置に伝えられ、メール型コマンド伝送装置への操作コマンドの伝送が中断される。
【００３１】
さらに医師Ａは、図３の制御ウィンドウ６２の相手設定ボタン８０を押して、例えば、予め用意されたメニューから所望の医師を選択するなどして、読影を依頼する医師（本実施例では、Ｂ病院Ｄ医師）を選択する。また、必要に応じて標題ボタン８１を押して、例えば、予め用意した文字列編集画面を操作するなどして、標題（本実施例では、読影依頼）を設定する。なお、相手設定ボタン８０及び標題ボタン８１は、ボタンの機能と設定状態の表示とを兼ねている。以上の操作の後、送信ボタン６８を押す。この操作結果は、制御装置を介してメール型コマンド伝送装置へ伝えられ、バッファ内容の送信を指示する。
【００３２】
メール型コマンド伝送装置は、端末Ｊで蓄積した操作コマンド（図５）を端末Ｋに、即ち、図６においてバッファ９４の内容をバッファ９５に伝送する。この際、読影依頼に用いた画像データも、コマンドと同時に、端末Ｊの画像ＤＢ２６から端末Ｋの画像ＤＢ３６に伝送される。また、ネットワーク上で操作コマンドを伝送する場合に必要な電子メールアドレスは、予め図１１に示すようなテーブルを用意し、相手設定ボタン８０で選択した施設名１４１や医師名１４２に対応したメールアドレス１４３を用いる。
【００３３】
以上が、Ａ医師がＤ医師に読影を依頼する具体例である。
【００３４】
次に、Ｄ医師は、制御装置を介してコマンド生成装置，画像操作装置，画像表示装置，伝送モード選択装置などの動作を制御して、Ａ医師から依頼された画像を読影する。
【００３５】
具体例を述べると、医師Ｄは、先ず、図１２の制御ウィンドウ６２の再生ボタン６７を押す。この操作結果は、制御装置を介して伝送モード選択装置３５に伝えられ、操作コマンドをメール型コマンド伝送装置から受信できるようにコマンド伝送装置の切り替えを行う。さらに、メール型コマンド伝送装置に、バッファ内容の再生を指示する。メール型コマンド伝送装置は、バッファ（図６の９５）に格納された制御コマンド（図５）を実行タイミングに従って伝送モード選択装置３５に伝送し、さらに画像操作装置３２に送る（図１の経路３８）。なお、バッファ（図６の９５）に図５のような一連の制御コマンドが複数存在する場合、送信元や標題などを元に適当なものを選択する。
【００３６】
その結果、画像操作装置は、送られてきた制御コマンドの内容に従って、画像ＤＢ３６に格納された画像データを用いて適切な画像操作が行われ、その結果は画像表示装置３３によりディスプレイ（図１２の画像表示ウィンドウ６４，７８）に表示される。即ち、Ａ医師が端末Ｊで行ったＸ線画像の表示，線描画やポインタを用いた注釈の追加，音声コメントによる依頼内容の詳細の再生，ＭＲＩ画像の表示が、Ａ医師が行ったのと同じタイミングでＤ医師の端末Ｋ上で実行される。
【００３７】
一連の制御コマンドの再生が終了した後、あるいは、停止ボタン（図１２の ６６）が押されると、伝送モード選択装置３５及びメール型コマンド伝送装置 １４は、操作コマンドの伝送を中断する。その後、医師Ｄは、例えば、図１２の編集ボタン８２を押して注目領域に線描画８３を付加するなどの画像操作を行うなど、依頼内容に基づいて読影を行う。
【００３８】
以上が、Ｄ医師がＡ医師から読影された画像を読影する具体例である。
【００３９】
最後に、読影の結果、Ｄ医師が緊急処置を要すると判断し、Ａ医師に処置内容を指示するために直ちにリアルタイムカンファレンスを行う。
【００４０】
具体例を述べると、読影を終えたＤ医師は、図１２の制御ウィンドウ６２の接続ボタン６９を押す。この操作結果は、制御装置を介して伝送モード選択装置 ３５に伝えられ、操作コマンドをリアルタイム型コマンド伝送装置で伝送するようにコマンド伝送装置の切り替えを行う。
【００４１】
リアルタイム型コマンド伝送装置は、操作コマンドを直ちに伝送するため、電子メールではなく端末間で論理的な通信路を設ける。この際、伝送する相手端末を識別するために、メールアドレスとは異なる端末アドレスが必要になる。そこで、予め図１１に示すようなテーブルを用意し、読影依頼の送信元の施設名１４１ 及び医師名１４２から、あるいは電子メールアドレス１４３から端末アドレス １４４を決定し、適切な相手端末に自動的に接続する。相手設定ボタン（図１２の８０）には、読影依頼の送信元が自動設定される。
【００４２】
リアルタイム型コマンド伝送装置での通信路の設定が終了すると、制御装置が画像再現装置３９に表示状態データの伝送を指示する。表示状態データとは、画像表示装置での表示内容の再現に必要なデータである。画像再現装置は、画像操作装置が行う画像データに対する操作内容を常に収集し、表示状態データに反映させる。
【００４３】
図１３は、表示状態データの一例であり、表示中の画像データの画像識別子 ９２と画像データの表示状態及び注釈状況１５７からなる。画像データの表示状態及び注釈状況１５７は、画像の最新表示位置／サイズと、注釈の有無及び注釈が存在する場合は再現に必要な情報（座標列や表示位置など）が、予め定めたフォーマットに則って記録されている。
【００４４】
画像再現装置３９は、パラメータとして表示状態データを有する制御コマンド（以下、＜画像再現＞とする）を生成する。生成した＜画像表現＞は、伝送モード選択装置３５，リアルタイム型コマンド伝送装置１３，伝送モード選択装置 ２５を介して、端末Ｊの画像操作装置２２に送られる（図１の経路４０及び経路２８）。画像操作装置２２は、＜画像表現＞のパラメータ（即ち表示状態データ）を用いて、端末Ｊのディスプレイ上に端末Ｋと同じ表示画像を表示する。この際、Ｄ医師が読影中に追加した線描画８３も表示され、端末Ｊと端末Ｋの表示画像は、完全に一致する。
【００４５】
端末間の表示画像が一致した後、Ｄ医師は、マイクとスピーカを介してＡ医師と会話し、さらに表示画像ウィンドウの編集ボタン（図１２の７５，８２）を押してポインタを操作すると、操作内容に対応した制御コマンドがコマンド生成装置３１で生成され、画像操作装置３２と、伝送モード選択装置３５，リアルタイム型コマンド伝送装置１３，伝送モード選択装置２５を介して、端末Ｊの画像操作装置２２にリアルタイムに送られ（図１の経路３７及び２８）、端末Ｊと端末Ｋの両方にポインタの操作結果が表示される。Ａ医師の操作もコマンド生成装置２１で操作内容に対応した操作コマンドが生成され、その操作結果は、同様な手順で端末Ｊと端末Ｋの両方に表示される。このように、画像再現装置による端末間の表示画像の一致の後、Ｄ医師は音声によるコミュニケーションを図りながら、Ａ医師とリアルタイムでコミュニケーションを図ることができる。
【００４６】
以上、図１の構成を用いた遠隔画像診断の手順の一例を説明した。
【００４７】
次に、図１の構成を実現する際の伝送モード選択装置及びコマンド伝送装置の実現方法の一例を説明する。本実施例は、パーソナルコンピュータやワークステーションなど、プログラムにより動作を記述する汎用の処理処置（図２の４１）を用いて実現する際の手順である。
【００４８】
本実施例は、通信ポートを有する３つの制御ステップ（伝送ステップ，記録ステップ，再生ステップ）と、通信ポートの接続関係を設定する制御ステップからなる。通信ポートとは、制御コマンドの入力／出力を行う論理的な接続口であり、通信ポート同士を接続することで、制御コマンドをやり取り可能とすることができる。各制御ステップの通信ポートは、同一端末，他の端末などの物理的な違いに関わりなく、他の制御ステップと接続できる。
【００４９】
伝送ステップは、コマンド作成装置，画像再現装置，画像操作装置と通信ポートとの間で制御コマンドのやり取りを行う。図７はそのステップの詳細であり、コマンド生成装置，画像再現装置が操作コマンドを送信した場合（１２１）、送信された操作コマンドを受け取り（１２２），通信ポートに出力する（１２３）。また、通信ポート接続先が操作コマンドが出力すると（１２４），出力された操作コマンドを受け取り（１２５），画像操作装置へ送る（１２６）。
【００５０】
記録ステップは、図８に示す手順に従い、通信ポートからの制御コマンドをバッファに蓄積する。再生ステップは、図９に示す手順に従い、バッファに蓄積された制御コマンドを通信ポートに出力する。図８及び図９で、通信ポート接続先に伝送ステップを含まない場合、通信ポート間でやり取りされる操作コマンドは、バッファ蓄積内容そのもの（実行タイミングを付加した形）とする。即ち、図９の１２３は実行タイミングを付加した操作コマンドを出力し、図８の１２５は実行タイミングを付加した操作コマンドを受け取り、１２９でそのままバッファに蓄積する（バッファ内容の複写に相当）。
【００５１】
図１０は、選択ステップが設定する通信ポートの接続関係の一例である。１１１ 〜１１３及び１１４〜１１６は、各々端末Ｊ及び端末Ｋの伝送ステップ，記録ステップ，再生ステップの通信ポートを表す。
【００５２】
１３１は、リアルタイムカンファレンスを行う場合で、制御コマンドが端末Ｊから端末Ｋに直接伝送される。１３２〜１３４はメール型カンファレンスを行う場合で、１３２は端末Ｊで制御コマンドの記録時、１３３は端末Ｊから端末Ｋへの制御コマンドの伝送時、１３４は端末Ｋでの制御コマンドの再生時の接続関係である。上述の遠隔画像診断の手順の一例の場合、Ａ医師がＤ医師に読影を依頼する際は１３２及び１３３，Ｄ医師がＡ医師から読影された画像を読影する際は１３４，Ｄ医師がＡ医師とリアルタイムカンファレンスを行う際は１３１を用いる。
【００５３】
１３５は、リアルタイムカンファレンスでやり取りされる操作コマンドを記録する場合で、記録した操作コマンドを他の端末に伝送して再生すると、第３者がカンファレンス内容を参照できるようになる。１３６は、メール型カンファレンスで記録した内容を複数の端末で参照する場合で、端末Ｊで受け取ったメールを再生する際、端末Ｊと端末Ｋで同時に参照できる。
【００５４】
１３７〜１４０は、制御コマンドの記録と再生を同時に行う場合で、記録した制御コマンドを同一端末内で再生して編集したり、リアルタイムカンファレンスを行いながら制御コマンドの再生や編集を行う場合に用いる。
【００５５】
以上、伝送モード選択装置及びコマンド伝送装置を実現する際の手順の一例を説明した。
【００５６】
以上のように本実施例では、医師の操作内容に対応した操作コマンドをリアルタイム型コマンド伝送装置とメール型コマンド伝送装置とを選択しながら伝送できるようにした。従って、同一システムで目的や状況に応じてリアルタイム型カンファレンスとメール型カンファレンスを切り替えながら適切な診療支援を行うことができ、さらに医用画像をシステム間で移動させる作業が不要になるという著しい効果がある。
【００５７】
あるいは、同一のコマンド生成装置，画像操作装置，画像表示装置を用い、同一の操作コマンドを用いて２種類のカンファレンス方法を実現できるようにした。従って、例えば、編集ボタンを押して注目領域に線描画を行う場合など、画像操作の機能やユーザインタフェースの共通化を容易に行うことができるようになり、カンファレンス方法を変更した際、医師の操作に混乱をきたし誤操作を生じる恐れがあるという問題を解決できるという今までにない効果がある。
【００５８】
あるいは、ディスプレイ表示内容の再現に必要なデータである表示状態データを相手端末に自動的に伝送する画像再現装置を用いるようにした。従って、メール型カンファレンスからリアルタイム型カンファレンスに変更した際、端末間の表示画像を自動的に一致させることができ、例えば読影結果を元に処置方法の指示を行う場合など、医師は思考を中断することなく支援作業を円滑に行えるようになる効果がある。また、端末間の表示画像が一致しない場合に生じる診療過誤を防止できる効果がある。
【００５９】
あるいは、伝送モード選択装置及びコマンド伝送装置は、通信ポートを有する３つの制御ステップ（伝送ステップ，記録ステップ，再生ステップ）と、通信ポートの接続関係を設定する制御ステップを用いて実現するようにした。従って、通信ポートの接続を変更するという簡便な操作により、操作コマンドの伝送方法及び伝送先を変更できるようになり、単純な構成で様々なカンファレンス運用形態に対して柔軟に対応できるという著しい効果がある。
【００６０】
【発明の効果】
以上のように本発明では、医師の操作内容に対応した操作コマンドをリアルタイム型コマンド伝送装置とメール型コマンド伝送装置とを選択しながら伝送できるようにした。従って、同一システムで目的や状況に応じてリアルタイム型カンファレンスとメール型カンファレンスを切り替えながら適切な診療支援を行うことができ、さらに医用画像をシステム間で移動させる作業が不要になるという著しい効果がある。
【００６１】
あるいは、伝送モード選択装置及びコマンド伝送装置は、通信ポートを有する３つの制御ステップ（伝送ステップ，記録ステップ，再生ステップ）と、通信ポートの接続関係を設定する制御ステップを用いて実現するようにした。従って、通信ポートの接続を変更するという簡便な操作により、操作コマンドの伝送方法及び伝送先を変更できるようになり、単純な構成で様々なカンファレンス運用形態に対して柔軟に対応できるという著しい効果がある。
【図面の簡単な説明】
【図１】本発明の一実施例の遠隔診療支援システムの構成を示すブロック図。
【図２】本発明の一実施例の遠隔診療支援システムの一端末の構成例を示す模式図。
【図３】端末Ｊのディスプレイの一例を示す説明図。
【図４】コマンド生成装置で生成された操作コマンドの一例を示す説明図。
【図５】バッファに蓄積された操作コマンドの一例を示す説明図。
【図６】メール型コマンド伝送装置の一例を示す説明図。
【図７】伝送ステップの処理手順の一例を示すフロー図。
【図８】記録ステップの処理手順の一例を示すフロー図。
【図９】再生ステップの処理手順の一例を示すフロー図。
【図１０】選択ステップが設定する通信ポートの接続関係の一例を示す説明図。
【図１１】電子メールアドレス及び端末アドレスを管理するデーブルの一例を示す説明図。
【図１２】端末Ｋのディスプレイの一例を示す説明図。
【図１３】表示状態データの一例を示す説明図。
【符号の説明】
１１…端末Ｊ、１２…端末Ｋ、１３…リアルタイム型コマンド伝送装置、１４…メール型コマンド伝送装置、２１，３１…コマンド生成装置、２２，３２…画像操作装置、２３，３３…画像表示装置、２４，３４…制御装置、２５，３５…伝送モード選択装置、２６，３６…画像データベース、２７，２８，３７，３８…操作コマンドの経路、２９，３９…画像再現装置、４１…処理装置、４２…ディスプレイ、４３…キーボード、４４…マウス、４５…記憶装置、４６…通信インタフェース装置、４７…ネットワーク、４８…マイク、４９…スピーカ、６１…ディスプレイ画面、６２…制御ウィンド、６３…画像リストウィンド、６４，７８…画像表示ウィンド、６５…記録ボタン、６６…停止ボタン、６７…再生ボタン、６８…送信ボタン、６９…接続ボタン、７０…終了ボタン、７１…撮影日、７２…撮影装置名、７３…撮影順序、７４…Ｘ線画像、７５、８２…編集ボタン、７６…ポインタ、７７，８３…線描画で描画された線、７９…ＭＲＩ画像、８０…相手設定ボタン、８１…標題ボタン、９１…ネットワーク、９２，９３…スイッチ、９４，９５…バッファ、９６〜９８…操作コマンドの経路、１１１…端末Ｊの伝送ステップの通信ポート、１１２…端末Ｊの記録ステップの通信ポート、１１３…端末Ｊの再生ステップの通信ポート、１１４…端末Ｋの伝送ステップの通信ポート、１１５…端末Ｋの記録ステップの通信ポート、１１６…端末Ｋの再生ステップの通信ポート、１３１〜１４０…通信ポートの接続関係。
Claims (6)
- 画像表示手段および通信ポートを備えた複数の端末と、該端末から伝送される伝送装置を備えた遠隔診療支援システムにおいて、
前記複数の端末の１は、操作コマンドを生成するコマンド生成装置と、該操作コマンドの内容に従って画像の表示や画像処理及び画像に対する注釈の付加を行う画像操作装置と、該操作コマンドの伝送を操作コマンドの生成と同期して行うリアルタイム型コマンド伝送装置と、前記端末に表示される画像を前記端末に画像が表示される時刻よりも遅れて前記端末以外の端末に表示させるメール型コマンド伝送装置と、リアルタイム型コマンド伝送装置とメール型コマンド伝送装置のどちらか又は両方を選択する伝送モード選択装置とを有し、前記メール型コマンド電送装置は、実行タイミングが付加された操作コマンドを一旦蓄積するバッファを有することを特徴とする遠隔診療支援システム。 - 請求項１記載の遠隔診療支援システムにおいて、前記伝送モード選択装置が操作コマンドの伝送方法をメール型コマンド伝送装置からリアルタイム型コマンド伝送装置に変更した際、変更時点でメール型コマンド伝送装置を用いて表示された医用画像を各々の端末に自動的に再現する画像再現装置を有することを特徴とする遠隔診療支援システム。
- 請求項１または２記載の遠隔診療支援システムにおいて、前記リアルタイム型コマンド伝送装置は、操作コマンドの伝送先を識別する端末アドレスを、メール型コマンド伝送装置を用いた操作コマンドの伝送相手に応じて自動的に決定する機能を有することを特徴とする遠隔診療支援システム。
- 請求項１から３のいずれか記載の遠隔診療支援システムにおいて、前記画像操作装置で行う医用画像の操作内容は、前記伝送モード選択装置での選択内容に係わらず同一であることを特徴とする遠隔診療支援システム。
- 請求項１から４のいずれか記載の遠隔診療支援システムにおいて、前記端末は、リアルタイム型コマンド伝送装置を用いて操作コマンドを他の端末に伝送するための接続ボタンと、メール型コマンド伝送装置を用いて操作コマンドをバッファに蓄積するための記録ボタンと、バッファに蓄積した処理コマンドを他の端末に送信する送信ボタンとを有することを特徴とする遠隔診療支援システム。
- 請求項１から５のいずれか記載の遠隔診療支援システムに用いる遠隔診療支援方法において、前記１の端末から他の端末へ処理コマンドを送受する伝送ステップと、前記１の端末からの処理コマンドを受信し、実行タイミングを付加してバッファに蓄積する記録ステップと、前記バッファの内容を実行タイミングに従ったタイミングで前記他の端末に送信する再生ステップと、当該他端末の通信ポートと各々のステップの有する通信ポートとの接続関係を変更する選択ステップとを有することを特徴とする遠隔診療支援方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP16992697A JP3608346B2 (ja) | 1997-06-26 | 1997-06-26 | 遠隔診療支援システム及びこれに用いる遠隔診療支援方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP16992697A JP3608346B2 (ja) | 1997-06-26 | 1997-06-26 | 遠隔診療支援システム及びこれに用いる遠隔診療支援方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH119556A JPH119556A (ja) | 1999-01-19 |
| JP3608346B2 true JP3608346B2 (ja) | 2005-01-12 |
Family
ID=15895513
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP16992697A Expired - Lifetime JP3608346B2 (ja) | 1997-06-26 | 1997-06-26 | 遠隔診療支援システム及びこれに用いる遠隔診療支援方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3608346B2 (ja) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040083085A1 (en) | 1998-06-01 | 2004-04-29 | Zeineh Jack A. | Integrated virtual slide and live microscope system |
| US6606413B1 (en) | 1998-06-01 | 2003-08-12 | Trestle Acquisition Corp. | Compression packaged image transmission for telemicroscopy |
| JP4161487B2 (ja) * | 1999-11-01 | 2008-10-08 | ソニー株式会社 | データ復号装置及び方法 |
| WO2001090976A1 (fr) * | 2000-05-26 | 2001-11-29 | Kabushiki Kaisha Topcon | Systeme de traitement de donnees medicales et support d'enregistrement pour systeme de traitement de donnees |
| JP4698808B2 (ja) * | 2000-10-05 | 2011-06-08 | パナソニック株式会社 | 検査情報の管理方法 |
| US7418480B2 (en) * | 2001-10-25 | 2008-08-26 | Ge Medical Systems Global Technology Company, Llc | Medical imaging data streaming |
| JP2003150545A (ja) * | 2001-11-13 | 2003-05-23 | Mega Chips Corp | リモート端末制御システム、リモート制御端末、および、リモート端末の制御方法 |
| JP4912054B2 (ja) * | 2006-06-21 | 2012-04-04 | 富士フイルム株式会社 | 読影依頼装置、読影依頼装置の作動方法及び読影依頼プログラム |
| JP5582755B2 (ja) * | 2009-10-06 | 2014-09-03 | 株式会社東芝 | 医用画像管理装置、及び医用画像表示装置 |
| EP2859714A4 (en) * | 2012-06-06 | 2016-07-06 | Calgary Scient Inc | IMAGE VISUALIZATION ARCHITECTURE HAVING AN INTEGRATED FILE TRANSFER MECHANISM SECURED BASED ON COLLABORATION |
| JP6407526B2 (ja) * | 2013-12-17 | 2018-10-17 | キヤノンメディカルシステムズ株式会社 | 医用情報処理システム、医用情報処理方法及び情報処理システム |
| US20160063896A1 (en) * | 2014-08-27 | 2016-03-03 | Covidien Lp | Medical product support platform |
-
1997
- 1997-06-26 JP JP16992697A patent/JP3608346B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JPH119556A (ja) | 1999-01-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11787060B2 (en) | Remote presence system mounted to operating room hardware | |
| JP3821170B2 (ja) | 共同作業情報の管理方法および共同作業支援システム | |
| JP3855462B2 (ja) | 処理時間付きコマンド列の編集方法及びこれを用いた装置 | |
| US5841977A (en) | Computer-based conferencing system with local operation function | |
| JP5344460B2 (ja) | 編集装置、編集プログラム、および編集方法 | |
| JP3608346B2 (ja) | 遠隔診療支援システム及びこれに用いる遠隔診療支援方法 | |
| US6473096B1 (en) | Device and method for generating scenario suitable for use as presentation materials | |
| US20090204911A1 (en) | Medical support control system | |
| JP2002073615A (ja) | 医療用画像ファイリングシステム | |
| EP2085906A2 (en) | Medical support control system | |
| EP1103028A2 (en) | Surgical recording and reporting system | |
| CN110830746A (zh) | 一种基于视频通话和增强现实技术远程手术协助系统 | |
| JP3092496B2 (ja) | シナリオ編集装置 | |
| CN111653343A (zh) | 一种医疗实时影像远程会诊系统及方法 | |
| JP2003116095A (ja) | 映像処理装置 | |
| JP3629852B2 (ja) | 遠隔診療支援方法及び遠隔診療支援システム | |
| JPH08317365A (ja) | 電子会議装置 | |
| JP2002117415A (ja) | 仮想共同作業環境発生装置 | |
| JP2004056551A (ja) | 電子会議用画像情報伝送装置 | |
| JP2001120499A (ja) | 内視鏡画像表示装置 | |
| JP2002215797A (ja) | 病院情報システム | |
| WO1997011549A1 (en) | Phone based dynamic image annotation | |
| JPH06265794A (ja) | 顕微鏡画像観察記録システム | |
| JP2001195869A (ja) | 実行時刻付きコマンド列の編集方法及びこれを用いた装置及びこれ用いて記録した媒体 | |
| JP2002238039A (ja) | 遠隔カンファレンスシステムおよび同サーバ |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040816 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040921 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20041004 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071022 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081022 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091022 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091022 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101022 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111022 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121022 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121022 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131022 Year of fee payment: 9 |
|
| EXPY | Cancellation because of completion of term |