JP2010131406A - 手術支援システム - Google Patents

Abstract

【課題】参照可能な複数の関連画像のサムネイルを効率的に検索でき、検索した関連画像の原画像を表示することで適正な支援を行う。
【解決手段】カンファレンス室１０３の支援装置１０４は、第１ないし第３の割り付け手段としての統合画面生成機能１５１、関連・ライブ切替機能１５２、サムネイル原画像表示機能１５３、動画再生機能１５４、拡大カーソル重畳機能１５５、ファイルサムネイル生成手段及び関連画像サムネイル生成手段としてのサムネイル画像生成機能１５６、画像データ入手手段としてのデータ通信機能１５７等の機能を備え、また支援モニタ１１２にはマウスあるいはタッチパネル等のポインティングデバイスが設けられＧＵＩ（サムネイル選択手段）を構築している。
【選択図】図３

Description

本発明は、画像を参照して手術をリアルタイムに支援する手術支援システム関する。

通常、手術は手術室の術者が患者に対して手術を行うが、例えば手術室の術者が過去に経験の少ない手術を行うことが必要となる場合には、その手術に詳しい遠隔地（院内においても手術室とは離れた位置に設置させた例えばカンファレンス室）にいる術者（遠隔支援術者）に回線で接続して、手術中に遠隔支援手術者による切除する部分の指示等を受けられるように遠隔支援のもとに手術室の術者が手術を行うようにすることにより、手術室の患者に対して適切な手術を行うことができるように支援するシステムが考えられ、このような遠隔支援システムが例えば特開２００２−３０６５０９号公報等に提案されている。

このような支援システムにおいては、支援側では、手技のライブ画像と共に、患者のＣＴ画像やＭＲ画像等の関連画像を参照して支援を行う。また、このような支援システムにおいては、手術室での手技画像が記録される。例えば内視鏡装置を用いて患部を観察したり、処置をした際の内視鏡画像が院内サーバ等に記録され、支援システムが構築されている院内のカンファレンス室の支援装置で術後に該内視鏡画像を再生し、手技についての事後の指導等が行われる。
特開２００２−３０６５０９号公報

しかしながら、従来の支援システムでは、参照可能な関連画像をサムネイル表示しているが、表示エリアに表示可能な画像数が限られてるために所望の関連画像のサムネイルを見つけるのが難しいといった問題がある。

本発明は、上記事情に鑑みてなされたものであり、参照可能な複数の関連画像のサムネイルを効率的に検索でき、検索した関連画像の原画像を表示することで適正な支援を行うことのできる手術支援システムを提供することを目的としている。

本発明の第１の手術支援システムは、手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
前記支援装置は、
少なくとも手技中のライブ画像を入手する画像データ入手手段と、
前記画像データ入手手段により入手したライブ画像が当該支援装置側の表示手段に表示されている場合において、当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
前記マーカ図形が重畳した情報を前記手術装置に送信する重畳情報送信手段と、
を備え、
前記手術装置は、前記重畳情報送信手段から送信された前記マーカ図形が重畳した情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備えることを特徴とする。

また、本発明の第２の手術支援システムは、手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
前記支援装置は、
手技中のライブ画像及び手技前に撮影された手技に関連する複数の関連画像を有する複数の画像ファイルを入手する画像データ入手手段と、
前記画像データ入手手段により入手したライブ画像が当該支援装置側の表示手段に表示されている場合において、当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
前記マーカ図形が重畳した情報を前記手術装置に送信する重畳情報送信手段と、
を備え、
前記手術装置は、
前記支援装置において、前記注目部位選択手段により前記支援装置側の表示手段に表示された当該ライブ画像上の注目部位が選択され、前記重畳手段により前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形が重畳されると共に、前記重畳情報送信手段から送信された前記マーカ図形が重畳した情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備えることを特徴とする。

また、本発明の第３の手術支援システムは、手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
前記支援装置は、
手技中のライブ画像及び手技前に撮影された手技に関連する複数の関連画像を有する複数の画像ファイルを入手する画像データ入手手段と、
前記複数の画像ファイルの複数のファイルサムネイル画像を生成するファイルサムネイル生成手段と、
前記複数のファイルサムネイル画像を表示画面の第１の表示エリアに割り付ける第１の割り付け手段と、
前記複数の画像ファイルが有する複数の関連画像の前記複数の関連画像サムネイル画像を生成する関連画像サムネイル生成手段と、
前記複数の関連画像サムネイル画像を表示画面の第２の表示エリアに割り付ける第２の割り付け手段と、
前記第１の表示エリアに割り付けられた前記複数のファイルサムネイル画像あるいは前記第２の表示エリアに割り付けられた前記複数の関連画像サムネイル画像のうちの１つを選択するサムネイル選択手段と、
前記サムネイル選択手段が選択したサムネイル画像の原画像と前記ライブ画像とを前記表示画面の第３の表示エリアに選択的に割り付ける第３の割り付け手段と、
前記第３の割り付け手段により前記ライブ画像が選択された場合は、前記第３の表示エリアに表示された当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
を備え、
前記手術装置は、
前記支援装置において、前記第３の割り付け手段により前記ライブ画像が選択され、前記注目部位選択手段により前記第３の表示エリアに表示された当該ライブ画像上の注目部位が選択され、前記重畳手段により前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形が重畳されると共に、当該支援装置から前記マーカ図形が重畳された情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備えることを特徴とする。

また、本発明の第４の手術支援システムは、手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
前記支援装置は、
手技中のライブ画像及び手技前に撮影された手技に関連する複数の関連画像を有する複数の画像ファイルを入手する画像データ入手手段と、
前記複数の画像ファイルの複数のファイルサムネイル画像を生成するファイルサムネイル生成手段と、
前記複数のファイルサムネイル画像を表示画面の第１の表示エリアに割り付ける第１の割り付け手段と、
前記複数の画像ファイルが有する複数の関連画像の前記複数の関連画像サムネイル画像を生成する関連画像サムネイル生成手段と、
前記複数の関連画像サムネイル画像を表示画面の第２の表示エリアに割り付ける第２の割り付け手段と、
前記第１の表示エリアに割り付けられた前記複数のファイルサムネイル画像あるいは前記第２の表示エリアに割り付けられた前記複数の関連画像サムネイル画像のうちの１つを選択するサムネイル選択手段と、
前記サムネイル選択手段が選択したサムネイル画像の原画像と前記ライブ画像とを前記表示画面の第３の表示エリアに選択的に割り付ける第３の割り付け手段と、
前記第３の割り付け手段により前記ライブ画像が選択された場合は、前記第３の表示エリアに表示された当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
前記マーカ図形が重畳した情報を前記手術装置に送信する重畳情報送信手段と、
を備え、
前記手術装置は、
前記支援装置において、前記第３の割り付け手段により前記ライブ画像が選択され、前記注目部位選択手段により前記第３の表示エリアに表示された当該ライブ画像上の注目部位が選択され、前記重畳手段により前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形が重畳されると共に、前記重畳情報送信手段から送信された前記マーカ図形が重畳した情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備えることを特徴とする。

本発明によれば、参照可能な複数の関連画像のサムネイルを効率的に検索でき、検索した関連画像の原画像を表示することで適正な支援を行うことができるという効果がある。

本発明の実施例１に係る手術支援システムの構成を示す構成図 図１の手術室の表示装置及びカンファレンス室内視鏡画像モニタに表示されるライブの内視鏡画像を示す図 図１の支援装置の機能構成を示すブロック図 図１の支援モニタに表示される統合画面を示す図 図１の支援装置の作用を説明するフローチャート 図５の処理を説明する統合画面の第１の図 図５の処理を説明する統合画面の第２の図 図５の処理を説明する統合画面の第３の図 図５の処理を説明する統合画面の第４の図 図５の処理を説明する統合画面の第５の図 図５の処理を説明する統合画面の第６の図 図５の処理を説明する手術室の表示装置に表示されるライブの内視鏡画像を示す図

以下、図面を参照しながら本発明の実施例について述べる。

図１ないし図１２は本発明の実施例１に係り、図１は手術支援システムの構成を示す構成図、図２は図１の手術室の表示装置及びカンファレンス室内視鏡画像モニタに表示されるライブの内視鏡画像を示す図、図３は図１の支援装置の機能構成を示すブロック図、図４は図１の支援モニタに表示される統合画面を示す図、図５は図１の支援装置の作用を説明するフローチャート、図６は図５の処理を説明する統合画面の第１の図、図７は図５の処理を説明する統合画面の第２の図、図８は図５の処理を説明する統合画面の第３の図、図９は図５の処理を説明する統合画面の第４の図、図１０は図５の処理を説明する統合画面の第５の図、図１１は図５の処理を説明する統合画面の第６の図、図１２は図５の処理を説明する手術室の表示装置に表示されるライブの内視鏡画像を示す図である。

図１に示すように、本実施例で採用する手術支援システムは、手術室１００、ＣＴ検査室１０１、ＭＲ検査室１０２、カンファレンス室１０３等の拠点を有する病院に設置され、手術室１００等で発生する各種医療情報を得る第１のコントローラ１と、前記手術室１００とは遠隔地点に設置され、前記第１のコントローラ１で得られた各種医療処置情報を集積しカルテを生成する手術部サーバ２と、前記手術部サーバ２とは別の拠点に設置され、前記手術部サーバ２で得られたカルテ情報を参照する患者情報蓄積手段としての院内サーバ３と、手術室１００での手技を支援する手術室１００とは遠隔地点に設置されたカンファレンス室１０３に設けられている支援装置１０４とを有して構成され、前記第１のコントローラ１、ＣＴ検査室１０１のＣＴ検査装置、ＭＲ検査室１０２のＭＲ検査装置、支援装置１０４と前記手術部サーバ２との間及び前記手術部サーバ２と前記院内サーバ３との間は、それぞれ第１、第２の通信回線４，５で接続される。

なお、前記各通信回線４，５は、公衆回線、専用回線、ＬＡＮ（構内通信網）等のどのような通信回線でもよい。又、前記院内サーバ３は、前記手術部サーバ２と同一拠点に配置されていても良い。

第２のコントローラ１４は、患者の体腔内等の被検部位を撮像し内視鏡画像を含む映像信号を得る内視鏡装置１１と、この内視鏡装置１１で得られた映像信号を描出する表示装置１２と、例えば電気メス装置、気腹装置、超音波手術装置等の手術装置１３とを備え、前記手術装置１３を制御したり、内視鏡装置１１からの内視鏡画像データや前記手術装置１３による測定情報等の手術装置情報を得る。

この第２のコントローラ１４には、前記手術装置１３に対する制御指示等を前記第２のコントローラ１４へ入力するためのタッチパネル１５等の手術装置制御入力手段が接続されている。

前記第２のコントローラ１４から与えられる内視鏡画像データ、手術装置情報及び生体モニタリング装置１９から得られる患者情報は、通信回線を介して第１のコントローラ１に集積され、他の拠点に設定されている手術部サーバ２へ通信回線４を介して伝送される。

また、前記内視鏡装置１１から得られた映像信号と、手術室１００内の風景を撮像する室内カメラ２０から得た映像信号は、第１のコントローラ１を介して信号伝送装置１７に入力され、通信回線６を介して外部に伝送される。

また、手術室には第１のコントローラ１が得た手術装置情報、及び手術部サーバ２から得た患者情報、カンファレンス室１０３の支援装置１０４より得られた支援画像である統合画像データや、前記信号伝送装置１７が他拠点から受信した情報を表示する表示装置１８等が配設されている。

第１のコントローラ１には、入力装置１ａが接続されている。この入力装置１ａは、キーボード、磁気カードリーダ、光カードリーダ、ＩＣカードリーダ、ＲＦ−ＩＤ（ＩＣタグ）リーダ等であり、この入力装置１ａを用いて患者に関するカルテナンバー（ＩＤナンバー）及び氏名等の患者情報や手技名、術者ＩＤ等の手技情報を入力する。この場合、患者情報、手技情報を第１のコントローラ１から第２のコントローラ１４へ送信するようにする。

なお、入力装置１ａは第２のコントローラ１４に接続されていてもよい。入力装置１ａを第２のコントローラ１４に接続した場合、患者情報、手技情報を第２のコントローラ１４から第１のコントローラ１へ送信するようにする。

手術部サーバ２は、通信回線５を介して、院内サーバ３、及びＷＥＢサーバ２１と接続されている。尚、前記ＷＥＢサーバ２１はインターネットを介して病院外とも接続されており、患者が院外の別の医療機関で検査を受けている場合には、その検査画像データ（ＭＲ、ＣＴ、Ｘ線画像等）は、該医療機関内の院外サーバ２０１，２０２等に蓄積されるが、ＷＥＢサーバ２１がインターネットを介して院外サーバ２０１，２０２にアクセスすることにより、手術部サーバ２を介して支援装置１０４及び第１のコントローラ１に院外サーバ２０１，２０２に蓄積されている検査画像データをダウンロード出来るようになっている。

院内サーバ３には、病院の患者登録端末２２からの患者登録情報と、当該患者に関連する術前画像等の医療画像（ＭＲ、ＣＴ、Ｘ線画像等）及び手技に関連する関連画像（内視鏡静止画像、内視鏡動画像）が蓄積されている。

そして、手術前に手術部サーバ２は、手術を行う患者の氏名や生年月日、診療記録などの登録情報及び患者に係わる医療画像情報を、前記院内サーバ３から通信回線５を介して読み出し格納することができるようになっている。

カンファレンス室１０３に設けられている支援装置１０４は、手術室１００の内視鏡装置１１で得られた内視鏡画像を表示する内視鏡画像モニタ１１１と、支援装置１０４が生成した支援画像である統合画面（後述）を表示する支援モニタ１１２とを備えており、第２のコントローラ１４及び第１のコントローラ１、手術室通信回線４を介することで、内視鏡画像モニタ１１１に内視鏡装置１１が撮像しているライブの内視鏡画像を表示すると共に、該ライブの内視鏡画像、手術部サーバ２に格納されている患者に係わる医療画像、ＷＥＢサーバ２１を介してダウンロードされる院外サーバ２０１，２０２に蓄積されている医療画像を用いた支援画像である統合画面を支援モニタ１１２に表示するようになっている。

図２に示すように、手術室１００の表示装置１２及びカンファレンス室１０３の内視鏡画像モニタ１１１には、ライブの内視鏡画像（以下、内視鏡ライブ画像）がフルスクリーンである表示エリア１２１に表示される。

カンファレンス室１０３の支援装置１０４は、図３に示すように、第１ないし第３の割り付け手段としての統合画面生成機能１５１、関連・ライブ切替機能１５２、サムネイル原画像表示機能１５３、動画再生機能１５４、拡大カーソル重畳機能１５５、ファイルサムネイル生成手段及び関連画像サムネイル生成手段としてのサムネイル画像生成機能１５６、画像データ入手手段としてのデータ通信機能１５７等の機能を備え、また支援モニタ１１２にはマウスあるいはタッチパネル等のポインティングデバイス（図示せず）が設けられＧＵＩ（サムネイル選択手段）を構築しており、各種データをデータ記憶部１５０に格納しリード・ライトすることで、上記各機能が支援モニタ１１２のＧＵＩに基づく処理を行うようになっている。なお、上記の各機能の処理の詳細は後述する。

このように構成された本実施例の作用について説明する。支援装置１０４は、データ通信機能１５７により手術部サーバ２より手術を行う患者の氏名や生年月日、診療記録などの登録情報及び患者に係わる医療画像情報等からなる患者情報を取得する。

次に、統合画面生成機能１５１によりＣＴ検査室１０１のＣＴ検査装置、ＭＲ検査室１０２のＭＲ検査装置及び院外サーバ２０１，２０２にアクセスし、関連画像データを手術部サーバ２を介してＣＴ検査室１０１のＣＴ検査装置、ＭＲ検査室１０２のＭＲ検査装置及び院外サーバ２０１，２０２よりダウンロードする。

関連画像データのダウンロードが終了すると、サムネイル画像生成機能１５６により関連画像データよりサムネイル画像を生成する。

具体的には、関連画像データは複数種類の医療画像ファイル（内視鏡動画像ファイル、内視鏡静止画像ファイル、ＣＴ静止画像ファイル、ＭＲ静止画像ファイル）に格納されており、各医療画像ファイルには静止画像のように１枚の画像ファイルからなるものと、動画ファイルのように複数のフレーム画像からなるものがある。

そこで、サムネイル画像生成機能１５６は、関連画像データ、すなわち医療画像ファイルを示す「サムネイル画像」及び各医療関連画像ファイルデータのサムネイルである「関連サムネイル画像」を生成する。

なお、本実施例では、例えば「サムネイル画像」は複数の「関連サムネイル画像」のうちの最初の医療関連画像ファイルデータのサムネイルと一致させている。

このようにしてサムネイルが生成されると、統合画面生成機能１５１によって、ステップＳ６において図４に示すような統合画面１６０を生成し支援モニタ１１２に表示する。

統合画面１６０は、図４に示すように、内視鏡ライブ画像等を通常表示で表示する画像表示エリア１６１と、関連画像データの各医療画像ファイルを示す複数の「サムネイル画像」を表示するサムネイル画像表示エリア１６２と、関連画像データ内の各医療関連画像ファイルデータのサムネイルである複数の「関連サムネイル画像」を表示する関連サムネイル画像表示エリア１６３と、各種キーＳＷからなるキーエリア１６４とを有して構成され、キーエリア１６４には、少なくとも関連・ライブ切替ＳＷ１６５が設けられている。

次に、上記統合画面１６０における作用について説明する。図５に示すように、ステップＳ１において統合画面１６０が支援モニタ１１２に表示されると、ステップＳ２において支援モニタ１１２のサムネイル選択手段としてのＧＵＩによりカーソル１６８がサムネイル画像表示エリア１６２のいずれかの「サムネイル画像」を選択したかどうか判断し、「サムネイル画像」が選択されると、ステップＳ３においてサムネイル原画像表示機能１５３により画像表示エリア１６１の画像を選択した「サムネイル画像」の原画像とした統合画面１６０を生成する。

例えば図４に示すようにサムネイル画像表示エリア１６２の画像をＣＴ静止画ファイル１サムネイル画像１７１を選択すると、図６に示すように、サムネイル原画像表示機能１５３により画像表示エリア１６１の画像をＣＴ静止画ファイル１サムネイル画像１７１の原画像とする。なお、本実施例では、上述したように「サムネイル画像」は複数の「関連サムネイル画像」のうちの最初の医療関連画像ファイルデータのサムネイルと一致させているので、図６における画像表示エリア１６１の画像は、関連サムネイル画像表示エリア１６３のＣＴ静止画ファイル１関連画像１サムネイル画像１７２の原画像となる。また、関連サムネイル画像表示エリア１６３上の「関連サムネイル画像」をカーソル１６８により選択することでカーソル１６８に選択した「関連サムネイル画像」の原画像が表示される。

ここで、ＣＴ静止画ファイル１サムネイル画像１７１の枠及びＣＴ静止画ファイル１関連画像１サムネイル画像１７２の枠を太枠表示することで、どのサムネイルの原画像なのかが認識可能としている。

また、関連画像を動画像としてステップＳ１９で「サムネイル画像」を選択する場合、動画像は連続した複数のシーン動画から構成されているため、例えば図７に示すように内視鏡動画ファイル１サムネイル画像１７５を選択すると、図８に示すようにサムネイル原画像表示機能１５３により画像表示エリア１６１の画像を内視鏡動画ファイル１サムネイル画像１７５の原画像とする。このとき関連サムネイル画像表示エリア１６３には動画像を構成する複数のシーン動画の先頭フレーム画像を「関連サムネイル画像」として表示する。この結果、本実施例では、画像表示エリア１６１の画像は内視鏡動画ファイル１フレーム画像１となる。

図８の状態の統合画面１６０では、画像表示エリア１６１の下段に動画再生操作キーエリア１８０が表示される。この動画再生操作キーエリア１８０の再生ボタン１８１を選択すると、図９に示すように、動画再生機能１５４により内視鏡動画ファイル１の再生画像が画像表示エリア１６１に動画として表示される。

図５に戻り、ステップＳ４において支援モニタ１１２のＧＵＩによりカーソル１６８が関連・ライブ切替ＳＷ１６５を選択したかどうか判断し、関連・ライブ切替ＳＷ１６５が選択されると、ステップＳ５において関連・ライブ切替機能１５２により内視鏡ライブ画像と選択した「サムネイル画像」の原画像とを切り替えて画像表示エリア１６１の画像とした統合画面１６０にしステップＳ６に進む。また、関連・ライブ切替ＳＷ１６５を選択されない場合にはそのままステップＳ６に戻る。

ステップＳ６では、画像表示エリア１６１に表示されている画像が内視鏡ライブ画像かどうか判断し、内視鏡ライブ画像でないならばステップＳ４に戻り、内視鏡ライブ画像ならばステップＳ７に進む。

ステップＳ７において画像表示エリア１６１に表示されている内視鏡ライブ画像上で図１０に示すように支援モニタ１１２のＧＵＩによりカーソル１６８を移動させて、注目部位である患部を選択する（例えばマウスの右クリックを実行して選択する）と、ステップＳ８で選択した患部の内視鏡ライブ画像上の位置に、図１１に示すように拡大カーソル１９１を重畳表示させると共に、ステップＳ９において患部の内視鏡ライブ画像上の位置情報を第１のコントローラ１に送信する。

そしてステップＳ１０において統合画面表示の終了（支援終了）の指示を待ち、指示があれば処理を終了し、指示が無ければステップＳ２に戻る。

なお、ステップＳ９により患部の内視鏡ライブ画像上の位置情報を受信した第１のコントローラ１は、図１２に示すように、表示装置１２の表示エリア１２１に表示されている内視鏡ライブ画像上の患部位置に拡大カーソル１９１ａを重畳表示させる。

このように本実施例では、関連画像データのファイルを示す複数の「サムネイル画像」をサムネイル画像表示エリア１６２に表示すると共に、サムネイル画像表示エリア１６２の「サムネイル画像」を選択することで、関連サムネイル画像表示エリア１６３に関連画像データファイル内の医療関連画像ファイルデータのサムネイルである複数の「関連サムネイル画像」を展開表示することができ、このような階層表示を行うことで所望の医療関連画像が容易に検索でき、医療関連画像を画像表示エリア１６１させることで医療関連画像が参照でき適切な支援を行うことができる。

また、画像表示エリア１６１に内視鏡ライブ画像を表示した際に、患部等の注目部位位置に拡大カーソルを手術室側の表示装置１２に重畳表示させることが出来るので、術者に対して内視鏡ライブ画像による観察を邪魔することなく適正な指示を行うことができる。

本発明は、上述した実施例に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。

１…第１のコントローラ
１ａ…入力装置
２…手術部サーバ
３…院内サーバ
４，５…通信回路
１１…内視鏡装置
１２…表示装置
１３…手術装置
１４…第２のコントローラ
１０３…カンファレンス室
１０４…支援装置
１５０…データ記憶部
１５１…統合画面生成機能
１５２…関連・ライブ切替機能
１５３…サムネイル原画像表示機能
１５４…動画再生機能
１５５…拡大カーソル重畳機能
１５６…サムネイル画像生成機能
１５７…データ通信機能
１６０…統合画面

Claims (4)

1. 手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
   前記支援装置は、
   少なくとも手技中のライブ画像を入手する画像データ入手手段と、
   前記画像データ入手手段により入手したライブ画像が当該支援装置側の表示手段に表示されている場合において、当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
   前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
   前記マーカ図形が重畳した情報を前記手術装置に送信する重畳情報送信手段と、
   を備え、
   前記手術装置は、前記重畳情報送信手段から送信された前記マーカ図形が重畳した情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備える
   ことを特徴とする手術支援システム。
2. 手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
   前記支援装置は、
   手技中のライブ画像及び手技前に撮影された手技に関連する複数の関連画像を有する複数の画像ファイルを入手する画像データ入手手段と、
   前記画像データ入手手段により入手したライブ画像が当該支援装置側の表示手段に表示されている場合において、当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
   前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
   前記マーカ図形が重畳した情報を前記手術装置に送信する重畳情報送信手段と、
   を備え、
   前記手術装置は、
   前記支援装置において、前記注目部位選択手段により前記支援装置側の表示手段に表示された当該ライブ画像上の注目部位が選択され、前記重畳手段により前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形が重畳されると共に、前記重畳情報送信手段から送信された前記マーカ図形が重畳した情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備える
   ことを特徴とする手術支援システム。
3. 手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
   前記支援装置は、
   手技中のライブ画像及び手技前に撮影された手技に関連する複数の関連画像を有する複数の画像ファイルを入手する画像データ入手手段と、
   前記複数の画像ファイルの複数のファイルサムネイル画像を生成するファイルサムネイル生成手段と、
   前記複数のファイルサムネイル画像を表示画面の第１の表示エリアに割り付ける第１の割り付け手段と、
   前記複数の画像ファイルが有する複数の関連画像の前記複数の関連画像サムネイル画像を生成する関連画像サムネイル生成手段と、
   前記複数の関連画像サムネイル画像を表示画面の第２の表示エリアに割り付ける第２の割り付け手段と、
   前記第１の表示エリアに割り付けられた前記複数のファイルサムネイル画像あるいは前記第２の表示エリアに割り付けられた前記複数の関連画像サムネイル画像のうちの１つを選択するサムネイル選択手段と、
   前記サムネイル選択手段が選択したサムネイル画像の原画像と前記ライブ画像とを前記表示画面の第３の表示エリアに選択的に割り付ける第３の割り付け手段と、
   前記第３の割り付け手段により前記ライブ画像が選択された場合は、前記第３の表示エリアに表示された当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
   前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
   を備え、
   前記手術装置は、
   前記支援装置において、前記第３の割り付け手段により前記ライブ画像が選択され、前記注目部位選択手段により前記第３の表示エリアに表示された当該ライブ画像上の注目部位が選択され、前記重畳手段により前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形が重畳されると共に、当該支援装置から前記マーカ図形が重畳された情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備える
   ことを特徴とする手術支援システム。
4. 手技を行う手術装置に対して支援情報を提供する支援装置を備えた手術支援システムにおいて、
   前記支援装置は、
   手技中のライブ画像及び手技前に撮影された手技に関連する複数の関連画像を有する複数の画像ファイルを入手する画像データ入手手段と、
   前記複数の画像ファイルの複数のファイルサムネイル画像を生成するファイルサムネイル生成手段と、
   前記複数のファイルサムネイル画像を表示画面の第１の表示エリアに割り付ける第１の割り付け手段と、
   前記複数の画像ファイルが有する複数の関連画像の前記複数の関連画像サムネイル画像を生成する関連画像サムネイル生成手段と、
   前記複数の関連画像サムネイル画像を表示画面の第２の表示エリアに割り付ける第２の割り付け手段と、
   前記第１の表示エリアに割り付けられた前記複数のファイルサムネイル画像あるいは前記第２の表示エリアに割り付けられた前記複数の関連画像サムネイル画像のうちの１つを選択するサムネイル選択手段と、
   前記サムネイル選択手段が選択したサムネイル画像の原画像と前記ライブ画像とを前記表示画面の第３の表示エリアに選択的に割り付ける第３の割り付け手段と、
   前記第３の割り付け手段により前記ライブ画像が選択された場合は、前記第３の表示エリアに表示された当該ライブ画像上の注目部位を選択するための注目部位選択手段と、
   前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形を重畳させる重畳手段と、
   前記マーカ図形が重畳した情報を前記手術装置に送信する重畳情報送信手段と、
   を備え、
   前記手術装置は、
   前記支援装置において、前記第３の割り付け手段により前記ライブ画像が選択され、前記注目部位選択手段により前記第３の表示エリアに表示された当該ライブ画像上の注目部位が選択され、前記重畳手段により前記注目部位選択手段が選択した前記ライブ画像上の前記注目部位の位置にマーカ図形が重畳されると共に、前記重畳情報送信手段から送信された前記マーカ図形が重畳した情報を受信した際、当該情報に基づき前記マーカ図形を重畳させた前記ライブ画像を当該手術装置側の表示手段に表示させる表示制御手段を備える
   ことを特徴とする手術支援システム。

Images