JP4296278B2 - 医療用コクピットシステム - Google Patents

Description

本発明は、診察、検査、診断、治療、又はその他の処置などの診療を遠隔操作で行うための医療用コクピットシステムおよびそれに使用される医療用コクピットに関するものである。

近年、情報ネットワーク技術の発展に伴い、複数の医療拠点を有機的に結び付け、遠隔地にいる患者の外科的手術を遠隔操作により行う遠隔手術が脚光を浴びている。このような遠隔手術を行う装置として特開平７−１８４９２３号公報に記載されたものがある。この公報に記載された方法は狭い空間内での手術を遠隔操作により行うもので、患部およびその周辺の画像および作業機の先端の患部への接触力を検出する作業環境情報検出手段を有し、その情報を加工した情報に基づいて執刀医が行う動作および作業機の先端の患部への接触力により生成される指令値に従って術具を駆動するものである。

この方法は、患部およびその周辺の画像および作業機の先端の患部への接触力情報は執刀医に伝達されるが、執刀医が必要とする手術室の多くの情報が必ずしも十分に伝わらないことがあり、種々の遠隔手術に対して十分に対応できないことがある。
ネットワーク型外科手術では、執刀医と患者とが同一サイトにいないため、執刀医はロボットを遠隔地より操縦して手術に当たることになる。このような場合、執刀医は術野の操作に集中すると同時に、手術室内の手術スタッフや計測機器から与えられる様々な情報を捕捉する必要がある。これを可能とするためには、術野だけではなく、術野に当たる医療ロボット周辺や第二の参加医療拠点の映像、音声などの情報が、術者の周辺に適切に配置される必要がある。

本発明では、ネットワーク型医療、特に外科手術に遠隔から参加する医師が、円滑に情報アクセスし、必要な通知を適切に受けられる環境を提供することを目的とする。
すなわち本発明は、診療室と遠隔地にいる執刀医とを有機的に結び付け、執刀医が必要とする診療室のあらゆる情報を遠隔地に伝送し、遠隔地にいる執刀医があたかも診療室で直接診療をしているような空間を作り出す医療用コクピットシステム、それに使用される医療用コクピット、この医療用コクピットシステムを実現するための診療室を提供することを目的とするものである。
特に本発明は、例えば没入型ディスプレイ装置とマルチスピーカ装置を用いて、周辺視野や立体音場を用いた情報提示を可能にして、執刀医の情報アクセスの円滑化を図ることを目的とする。

本発明の第１の実施の形態による医療用コクピットシステムは、ネットワークを介して診療室と医療用コクピットとを接続し、診療室には、患者の心電情報などの計測情報を取得する計測情報取得手段と、手術現場全体の状況を撮像する第１の診療室撮像手段と、手術室にいるスタッフ撮像用の第２の診療室撮像手段と、患者の患部における手術音や患者の呼吸音を集音する第１の診療室音声情報取得手段と、手術に携わる看護士などのスタッフの話声や発生音を集音する第２の診療室音声情報取得手段と、患者の患部を含む身体を撮像する身体情報撮像手段と、遠隔操作により患者を診療する診療手段とを有し、医療用コクピットには、計測情報取得手段、第１の診療室撮像手段、第２の診療室撮像手段、及び身体情報撮像手段からの映像を映し出すモニタ手段と、第１の診療室音声情報取得手段及び第２の診療室音声情報取得手段からの音声情報を再生する音声再生手段と、診療手段を遠隔操作する操作部と、を有する医療用コクピットシステムであって、モニタ手段として、操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、術者の手元に配置した第２のモニタ手段とを備え、第１のモニタ手段では、第１の診療室映像手段で撮像した診療室内の周辺視野映像を映し出すとともに、第２の診療室撮像手段で撮像した診療室内の複数箇所の局部映像を周辺視野映像の一部に重ねてそれぞれカタログ画面として映し出し、第２のモニタ手段では、計測情報取得手段で取得する計測情報又は身体情報撮像手段からの映像を映し出すものである。
本実施の形態によれば、術者は、第２のモニタ手段を用いて術野の操作に集中することができ、また第１のモニタ手段を用いて診療室内の周辺視野状況を全体的に把握できるとともに、特に必要とする映像については局部映像として詳細を把握することができる。従って、本実施の形態では、術者が必要とする診療室の周辺情報を含めて把握することができるため、遠隔地にいる術者があたかも診療室にいるような空間を作り、術者が遠隔地にいながら直接診療をする環境を提供することができる。
本発明の第２の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、あらかじめ取得した患者の身体データまたは患者の固有データを蓄積したデータベース手段を有し、データベースに蓄積しているデータを診療室における各情報とともに送信するものである。
本実施の形態によれば、遠隔地にいる患者に関する診療に必要なデータをモニタ手段で見ながら遠隔診療をすることができる。
本発明の第３の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、診療室から送信される情報を、医療用コクピットの他に、他のコクピットに送信する送信手段を有するものである。
本実施の形態によれば、例えば診療室にいない診断医や他の術者が診療の進行に合わせて適切な診断をしながら診療室および術者にアドバイスし、又は手術に参加することができる。その他研修医などに対しての教育、見学サイトとしても利用することができる。
本発明の第４の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、身体情報撮像手段を、患部を複数の方向から撮像する複数の撮像装置から構成したものである。
本実施の形態によれば、遠隔地にいる術者が診療している部位を多角的に観察することができ、特に患部と術具との位置関係を正確に把握することができる。
本発明の第５の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、第１のモニタ手段を、操作部を操作する術者の位置において、水平方向視野角が１２０度から３３０度の範囲となるように配置したものである。
本実施の形態によれば、医療現場で得られる周辺情報に近い映像情報を得ることができる。なお、２７０度以上の範囲に第１のモニタ手段を配置すれば、人の周辺視野角をカバーすることができるためより好ましい。
本発明の第６の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、第２のモニタ手段として、主モニタ部と副モニタ部とを備え、主モニタ部では計測情報取得手段で取得する計測情報又は身体情報撮像手段からの映像を映し出し、副モニタ部では第１のモニタ手段に映し出したカタログ画面を選択的に切り換えて映し出すものである。
本実施の形態によれば、術者は手元の主モニタに集中した状態で、必要とする他の映像を手元で見ながら診療を行うことができる。
本発明の第７の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、第２のモニタ手段として、複数のモニタ部を備え、少なくとも一つのモニタ部は、当該診療システムの稼働中には映像を切り換えないものである。
本実施の形態によれば、例えば目を離すことができない映像を誤操作などにより切り換えてしまうことを完全に防止することができる。
本発明の第８の実施の形態は、第６又は第７の実施の形態による医療用コクピットシステムにおいて、副モニタ部でのカタログ画面の切り換えを、術者の発する音声、又は術者の動きや表情を検知して行うものである。
本実施の形態によれば、術者は執刀から手を離すことなく必要とする情報を手元で表示させることができる。
本発明の第９の実施の形態は、第６又は第７の実施の形態による医療用コクピットシステムにおいて、副モニタ部でのカタログ画面の切り換えを、フットスイッチを用いて行うものである。
本実施の形態によれば、術者は執刀から手を離すことなく必要とする情報を手元で表示させることができる。
本発明の第１０の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、医療用コクピットには、術者の動きや表情を撮像するコクピット撮像手段と、術者の音声を取得するコクピット音声情報取得手段とを有し、コクピット撮像手段で撮像した映像とコクピット音声情報取得手段で取得した音声とをネットワークを介して診療室に送信するものである。
本実施の形態によれば、診療室側でも術者の状況を把握することができ、また術者の身振りや手振りまでを交えたトータルなコミュニケーションを可能とし、コミュニケーションを迅速円滑に行うことができる。
本発明の第１１の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、診療室音声情報取得手段として、診療室におけるスタッフが保持するマイクロフォンとしたものである。
本実施の形態によれば、診療室におけるスタッフの音声を遠隔地にいる術者はリアルタイムで知ることができるので、診療室の様子を一層的確に知ることができるとともに、スタッフに適切な指示をすることができる。
本発明の第１２の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、診療室音声情報取得手段として、患者の患部付近の音や患者の呼吸音を集音するマイクロフォンとしたものである。
本実施の形態によれば、遠隔地にいる術者は、診療の進行状況や、患者の異常を的確に判断することができる。
本発明の第１３の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、第１のモニタ手段でのカタログ画面を、周辺視野映像で映し出される映像中の、当該カタログ画面で映し出す映像内容が映し出されている映像位置に配置したものである。
本実施の形態によれば、それぞれの局部映像は周辺視野映像中に対応して配置されるため、必要な局部映像を的確に判別することができる。
本発明の第１４の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、第１のモニタ手段のカタログ画面に映し出す局部映像を、断続的に受信する映像情報としたものである。
本実施の形態によれば、必ずしも撮像手段の数に合わせた伝送回線を必要としないため、より多くの局部映像を取り扱うことが容易となり、術者に必要な映像情報を数多く提供することができる。
本発明の第１５の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、音声再生手段をマルチスピーカ装置とし、診療室での本来の術者の位置で聞こえる音声の方向又は距離と同じ状態で医療用コクピット内の術者の位置で聞こえるように、立体音場として音声を再生するものである。
本実施の形態によれば、診療室の音声を高定位かつ臨場感のある音声で再現することができるので、術者があたかも診療室にいる感覚で音声を聞くことができる。
本発明の第１６の実施の形態は、第１の実施の形態による医療用コクピットシステムにおいて、音声再生手段をマルチスピーカ装置とし、モニタ手段で映し出される周辺視野映像、又は局部映像で映し出される映像から音声が発生している場合には、映像の位置に対応して音声が聞こえるように、立体音場として音声を再生するものである。
本実施の形態によれば、例えば異常音を感じたときに反射的に必要とする映像情報を見ることができる。
本発明の第１７の実施の形態は、第２の実施の形態による医療用コクピットシステムにおいて、データベース手段に記憶させているデータを身体情報撮像手段の映像に透過的に重畳させ、又は身体情報撮像手段の映像に近接表示させるものである。
本実施の形態によれば、患部例えばＭＲＩのような断層画像を確認しながら的確な診療をすることができる。
本発明の第１８の実施の形態による診療室は、ネットワークを介して医療用コクピットと接続され、患者の心電情報などの計測情報を取得する計測情報取得手段と、手術現場全体の状況を撮像する第１の診療室撮像手段と、手術室にいるスタッフ撮像用の第２の診療室撮像手段と、
患者の患部における手術音や患者の呼吸音を集音する第１の診療室音声情報取得手段と、
手術に携わる看護士などのスタッフの話声や発生音を集音する第２の診療室音声情報取得手段と、患者の患部を含む身体を撮像する身体情報撮像手段と、遠隔操作により患者を診療する診療手段と、術者の映像及び音声を再生するモニタと、を有する診療室であって、計測情報取得手段と第１の診療室撮像手段と第２の診療室撮像手段と第１の診療室音声情報取得手段と第２の診療室音声情報取得手段と身体情報撮像手段とからの情報を医療用コクピットに送信し、医療用コクピットからの術者の映像及び音声情報を受信し、医療用コクピットからの情報に基づいて診療手段を動作させるものである。
本実施の形態によれば、遠隔診療時に、診療室から離れた遠隔地にいる術者に必要とする診療室のあらゆる情報を的確に伝送することができる。また、診療室側でも術者の状況を把握することができ、また術者の身振りや手振りまでを交えたトータルなコミュニケーションを可能とし、コミュニケーションを迅速円滑に行うことができる。
本発明の第１９の実施の形態による医療用コクピットは、ネットワークを介して診療室と接続され、診療室の映像を映し出すモニタ手段と、診療室の音声を再生する音声再生手段と、診療室の診療手段を遠隔操作する操作部と、術者の動きや表情を撮像するコクピット撮像手段と、術者の音声を取得するコクピット音声情報取得手段と、を有する医療用コクピットであって、モニタ手段として、操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、術者の手元に配置した第２のモニタ手段とを備え、第１のモニタ手段では、第１の診療室映像手段で撮像した診療室内の周辺視野映像を映し出すとともに、第２の診療室撮像手段で撮像した診療室内の複数箇所の局部映像を周辺視野映像の一部に重ねてそれぞれカタログ画面として映し出し、第２のモニタ手段では、計測情報取得手段で取得する計測情報又は身体情報撮像手段からの映像を映し出し、モニタ手段で映し出す映像と音声再生手段で再生する音声を診療室から受信し、操作部とコクピット撮像手段とコクピット音声情報取得手段とからの情報を診療室に送信するものである。
本実施の形態によれば、診療室から離れた遠隔地にいる術者があたかも診療室にいるような空間を作り、また、診療室側でも術者の状況を把握することができ、また術者の身振りや手振りまでを交えたトータルなコミュニケーションを可能とするため、術者が遠隔地にいながら直接診療をする環境を実現することができる。
本発明の第２０の実施の形態は、第１９の実施の形態による医療用コクピットにおいて、モニタ手段として、操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、術者の手元に配置した第２のモニタ手段とを備え、第１のモニタ手段では、診療室映像手段で撮像した診療室内の周辺視野映像を映し出すとともに、診療室内の複数箇所の局部映像を周辺視野映像の一部に重ねてそれぞれカタログ画面として映し出すものである。
本実施の形態によれば、術者は第１のモニタ手段を用いて診療室内の周辺視野状況を全体的に把握できるとともに、特に必要とする映像については局部映像として詳細を把握することができる。従って、本実施の形態では、術者が必要とする診療室の周辺情報を含めて把握することができるため、遠隔地にいる術者があたかも診療室にいるような空間を作り、術者が遠隔地にいながら直接診療をする環境を提供することができる。
本発明の第２１の実施の形態は、第２０の実施の形態による医療用コクピットにおいて、第１のモニタ手段でのカタログ画面を、周辺視野映像で映し出される映像中の、当該カタログ画面で映し出す映像内容が映し出されている映像位置に配置したものである。
本実施の形態によれば、それぞれの局部映像は周辺視野映像中に対応して配置されるため、周辺視野映像の中での位置を瞬時に把握でき、必要な局部映像を的確に判別することができる。
本発明の第２２の実施の形態は、第２０の実施の形態による医療用コクピットにおいて、第２のモニタ手段として、主モニタ部と副モニタ部とを備え、主モニタ部では計測情報取得手段で取得する計測情報又は身体情報撮像手段からの映像を映し出すものである。
本実施の形態によれば、術者は主モニタ部を用いて術野の操作に集中することができる。
本発明の第２３の実施の形態は、第２０の実施の形態による医療用コクピットにおいて、第２のモニタ手段として、主モニタ部と副モニタ部とを備え、副モニタ部では第１のモニタ手段に映し出したカタログ画面を選択的に切り換えて映し出すものである。
本実施の形態によれば、術者は主モニタ部を用いて術野の操作に集中することができる。
本発明の第２４の実施の形態は、第１９の実施の形態による医療用コクピットにおいて、複数の診療室と接続され、モニタ手段として、操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、術者の手元に配置した第２のモニタ手段とを備え、第２のモニタ手段で映し出している映像の診療室に対して、操作部からの情報を送信するものである。
本実施の形態によれば、ひとつの医療用コクピットから、複数の診療室にアクセスしている場合であっても、各診療室を間違いなくコントロールすることができ、術者は手元に配置した第２のモニタ手段を用いて術野の操作に集中することができる。

以下、本発明の実施例について、図面に基づいて説明する。
図１は本実施例による医療用コクピットシステムの全体構成を示すブロック図である。手術室においては、患者１１は手術台１０に寝ており、そのそばに手術具としての手術用マニピュレータまたはロボット（以下ロボットと記す。）１２が配置されている。ロボット１２はコントローラ２３の指示に従って手術動作を行う。
手術室には、患者の心電図を取るために心電計などの心電情報を計測する計測情報取得装置１３が設置され、その情報は計測情報サーバ２１に蓄積される。手術室内には、手術室内の状況を撮像する撮像装置（手術室撮像手段）１４１と、患者１１の患部を含む身体を撮像する撮像装置（身体情報撮像手段）１４２、１４３、１４４、１４５とを備えている。
ここで撮像装置１４１は、手術台１０付近を中心とした手術現場全体の状況（周辺視野映像）を撮像する撮像装置以外に、局部映像を撮像する撮像装置として、手術室にいるスタッフ撮像用の撮像装置や、その他手術室内の各種装置や状況を局部映像として撮像する撮像装置を備えていることが好ましい。ここで、周辺視野映像を撮像する撮像装置１４１としては、全方位撮像が可能な全方位撮像装置が適している。ロボット１２に設置された複数個の撮像装置１４２、１４３、１４４、１４５は、患者の患部を患者に対する種々の方向から撮像する。撮像装置１４２、１４３、１４４、１４５の数や位置は患部や手術の種類などにより適宜増減しかつ移動可能に配置する。これら撮像装置１４で撮像された映像情報は映像情報サーバ２２に蓄積される。

手術台１０の患者１１近辺の位置にはマイクロフォン１５２が配置され、患者の患部における手術音や患者の呼吸音を集音する。また、手術に携わる看護士などのスタッフは胸元などにマイクロフォン１５１をクリップして話声や発生音を集音する。マイクロフォン１５１、１５２は手術室における手術に関連する音を集音する音声情報取得装置１５を構成している。音声情報取得装置１５で集音した手術室の音声情報は音声情報サーバ２５に蓄積される。なお、音声情報取得装置１５は、位置信号発生手段を備えていることが好ましい。この場合、撮像装置１４側に、位置信号の受信手段と、この信号によって動作する駆動手段を備える。このように、音声情報取得装置１５に位置信号発生手段を備え、撮像装置１４側に受信手段と駆動手段とを備えることで、移動体に追随させて撮像することを可能とする。この場合には、映像情報とともに位置信号を映像情報サーバ２２に送信することが好ましい。このように映像情報とともに位置信号を送信することで、医療用コクピットにおいて、局部映像をモニタ上で移動させることが可能となる。なお、看護士などの手術室内の移動体の位置検出方法としては、超音波式、光学式、又は磁気式による送受信機を用いる位置計測方法、画像計測や画像認識による受信機（撮像装置）のみを用いる位置計測方法、及び任意の原点からの移動距離と移動方位から位置計測を行う自律航法があり、これらの方法を単独で又は複数の方法を組み合わせることで実現する。そして、これらの位置検出情報に基づいて、医療用コクピットでのモニタ上での局部映像の移動表示を行う。また音声発生源が移動する場合にも同様に位置検出と、これらの位置検出情報に基づいて、医療用コクピットでの立体音場の実現を行うことが好ましい。

データベース１６は、手術前にあらかじめ患者を検診して得た各種の身体データ、たとえば、患部付近のＭＲＩやＣＴ、エコーなどの断層画像データ、血液データ、臓器の大きさや色、配置などの特徴データなど、あるいは、患者を問診して得た病歴や生活習慣などのデータを蓄積している。また、必要に応じて当該手術に関連する医学情報やあらかじめ作業手順を作成した診療計画（治療計画や手術計画など）に関するデータなども蓄積されている。なお、データベース１６は手術室内にある必要はなく、病院で集中管理しているデータベースから取り出すようにしてもよい。データベース１６から取り出された所望のデータはデータベースサーバ２６に蓄積される。
計測情報サーバ２１、映像情報サーバ２２、音声情報サーバ２５およびデータベースサーバ２６にそれぞれ蓄積された各種情報は統合サーバ３０で統合され、ネットワーク４０を介して執刀医（術者）のいる医療用コクピットに送信される。統合サーバ３０は、計測情報サーバ２１から供給される計測情報取得装置１３からの情報、映像情報サーバ２２から供給される複数個の撮像装置１４１、１４２、１４３、１４４、１４５からの映像情報、および、データベースサーバ２６から供給されるデータベース１６からの情報や撮像装置１４１、１４２、１４３、１４４、１４５からの映像情報を任意の周期で切り換えて出力するスイッチャ３１、音声情報サーバ２５からの音声情報を選択する音声情報抽出部３２ならびに計測情報サーバ２１、映像情報サーバ２２、およびデータベースサーバ２６から供給される映像情報をリアルタイム動画として抽出する動画抽出部３３から構成されている。

手術室にはさらに医療用コクピットにおける執刀医の動きに対応する映像情報と執刀医の発する話声や発生音を再生するドライバ２７およびモニタ１７が設けられている。
医療用コクピットでは、ネットワーク４０を介して送信された統合サーバ３０からの情報を統合サーバ５０で受信する。統合サーバ５０はスイッチャ３１で切り換えて得られた画像情報を順次蓄積する画像サーバ５１、音声情報抽出部３２からの音声情報を蓄積しかつマルチチャンネルに展開する音声情報ドライバ５２、および動画抽出部３３からの動画情報を蓄積する動画サーバ５３から構成される。
画像サーバ５１からの静止画は大画面のモニタ（第１のモニタ手段）７３に示される。モニタ７３は手術室全体（周辺視野）を表示する大画面部と、その中の所定の位置に計測情報サーバ２１から供給される計測情報、映像情報サーバ２２から供給される局部映像としての複数個の撮像装置１４２、１４３、１４４、１４５からの患者の患部映像情報、およびデータベースサーバ２６から供給される映像情報をはめ込んで表示する複数の小画面部（カタログ画面）を有している。このときはめ込み用の小画面部は、通常の手術室における執刀医が各情報を見る位置に対応して配置される。したがって、執刀医は手術室から離れた遠隔位置にいるにもかかわらずあたかも実際の手術室の執刀位置にいるかのようにモニタ７３における各画像配置を見ることができる。なお、はめ込み用の小画面部を、周辺視野映像で映し出される映像中の、当該小画面部で映し出す映像内容が映し出されている映像位置に配置してもよい。このように周辺視野映像の映像内容とリンクさせて小画面を配置することで、必要な小画面の映像を的確に判別することができる。また、小画面部に映し出す映像を、断続的に受信する映像情報とすることで、必ずしも撮像装置の数に合わせた伝送回線を必要とせず、より多くの局部映像を取り扱うことが容易となる。

音声情報ドライバ５２でマルチチャンネル信号に展開された手術室内の音声情報はサラウンドスピーカ７６に供給され、医療用コクピット室内でマルチチャンネル再生される。
動画サーバ５３からの動画情報のうちメスの刃先を中心とした患部の動画情報は主モニタ（第２のモニタ手段）７１に常時映出される。一方、動画サーバ５３からの動画情報のうち執刀医が選択した動画情報または拡大画像は副モニタ（第２のモニタ手段）７２に表示される。
主モニタ７１および副モニタ７２は執刀医の手元近辺に配置されており、執刀医はこれら主モニタ７１および副モニタ７２の画像を見ながら執刀位置６３の操作部６２を操作して手術を行う。執刀位置６３には執刀医の話声および発生音を集音するマイクロフォン６０が配置され、執刀医の話声または発生音に応じて副モニタ７２に映出する動画情報または拡大画像を選択する。また、執刀医の動作を撮像する撮像装置６１が医療用コクピットの適所に配置されており、執刀医が所定の動作をしたときに副モニタ７２に映出する動画情報または拡大画像を選択するようにすることもできる。なお、執刀医の所定の動作をトリガ信号として利用する場合には、執刀医の動作を撮像する撮像装置６１からの画像認識や、執刀医の身体に具備したトリガ発生装置の位置や動きの検出などがあるが、これらの執刀医の所定の動作をトリガ信号として利用する場合には、音声認識との併用が好ましい。また、執刀医の所定の動作の一つとしてフットスイッチを利用してもよい。なお、主モニタ７１及び副モニタ７２はそれぞれ複数設けてもよい。また主モニタ７１については当該診療システムの稼働中には映像を切り換えないことが好ましい。
執刀医が操作した操作部６２からの信号はサーバ５４に供給され、ネットワーク４０を介して手術室のコントローラ２３に供給される。コントローラ２３は操作部６２の動きに応じてリアルタイムにロボット１２を駆動し所定の手術動作を行う。
一方、マイクロフォン６０で集音された執刀医の話声および撮像装置６１で撮像された執刀医の様子はサーバ５４に蓄積され、ネットワーク４０を介して手術室のドライバ２７に供給されモニタ１７に映出される。したがって、手術室のスタッフは執刀医の様子を見ることができ、また、音声により執刀医の指示を受け取ることができる。

図２は図１における遠隔手術システムの手術室の具体的な構成を示す概念図である。手術に携わるスタッフは胸元などにマイクロフォン１５１をクリップしており、スタッフの話声はマイクロフォン１５１で集音されてサーバ２５に送信される。スタッフは手術室を移動し話声位置もそれにつれて移動するのでマイクロフォン１５１は無線式であることが好ましい。また、患者の呼吸音や患部の手術音はマイクロフォン１５２で集音されて音声情報サーバ２５に送られる。マイクロフォン１５２は有線、無線のいずれでもよい。
手術台１０付近を中心とした手術現場全体の状況は撮像装置１４１で撮像され、その動画像信号Ｇは映像情報サーバ２２に蓄積される。撮像装置１４２、１４３、１４４、１４５は患者１１の患部を患者の各方向から撮像し、それぞれの動画像データＣ、Ｄ、Ｅ、Ｆは映像情報サーバ２２に蓄積される。
計測情報取得装置１３は患者の心電図を採取し、その波形図と波形に連動した音情報からなる計測情報Ｂを計測情報サーバ２１に蓄積する。なお、計測情報取得装置１３としては心電図以外の機器であってもよい。
データベース１６からの情報Ａはデータベースサーバ２６に供給される。データベース１６およびデータベースサーバ２６は必ずしも手術室内にある必要がないことは前述したとおりである。
音声情報サーバ２５、映像情報サーバ２２、計測情報サーバ２１およびデータベースサーバ２６からの各出力は統合サーバ３０で統合されネットワークを介して執刀医がいる遠隔地の医療用コクピットや診断医がいる遠隔地に送信される。
一方、ネットワークを介して医療用コクピットから送られてきた執刀医の手術動作は手術室のドライバ２３に送信され、ロボット１２のメス操作部１２１を駆動して手術を行う。また、執刀医の動作と音声はドライバ２７に供給され、手術室内のモニタ１７で再生される。

図３は図１における医療用コクピットの手術室の具体的な構成を示す概念図である。図１に示したモニタ７３は、操作部を操作する執刀医の位置において、水平方向視野角が１２０度から３３０度の範囲となる円筒形没入型ディスプレイや、投影型又は透過型の曲面スクリーンが最も好ましいが、図３に示すように複数のモニタ、例えば３つのモニタ７３１、７３２、７３３を並列に配置して構成してもよい。なお、人の中心視野角を考慮すると１２０度以上が好ましく、人の周辺視野角をカバーするには２７０度以上が好ましく、術者の頭部の動きを考慮すると３３０度程度とすることがより好ましい。例えば６０インチの広角投影型プロジェクションディスプレイ３台をそれぞれ３８度ずつの角度をつけて配置してもよい。また３台のモニタを用いる場合には、中央のモニタ７３２の中心視野を１２０度とし、両サイドのモニタ７３１、７３３を加えて全体の視野角を２７０度以上とすることが好ましい。また、更に２台のモニタを更に両サイドに連続して配置し、更に視野角を拡大することが好ましい。このように並列配置されたモニタ７３１、７３２、７３３には撮像装置１４１で撮像している手術現場全体の状況が連続した状態で大きく映し出されている。
図に示すように一方（右側）のモニタ７３３には、例えばデータベース１６の画像Ａやその他の局部映像である画像Ｇがはめ込まれている。また中央のモニタ７３２には、患者の患部の画像Ｃ、Ｄ、Ｅ、Ｆ、他方（左側）のモニタ７３１には心電画像Ｂがはめ込まれており、心電図の波形に対応したピッピッという音も執刀医の位置からは心電画像Ｂのはめ込み位置から同時に再生されるように構成されている。これらのはめ込み画像は、ネットワークを介して送信されてきた動画像を統合サーバ５０でスイッチングして切り換えた断続的な画像として順次映出される。したがって、モニタ７３１、７３２、７３３を見ることにより手術室の手術現場全体および手術に必要な各種の画像をすべて同時に得ることができる。

主モニタ７１および副モニタ７２は執刀医の手元近傍に配置され、モニタ７３１、７３２、７３３にはめ込まれている各画像Ａ〜Ｇから選択された画像の動画像が拡大されて表示される。図３の例では主モニタ７１には画像Ｆに対応する動画像が、副モニタ７２には画像Ｄに対応する動画像が拡大表示されている。なお、主モニタ７１および副モニタ７２で表示する場合には、リアルタイムな映像として表示する。
手術室の音声情報サーバ２５から送信されてきた手術室の音は複数のサラウンドスピーカ７６によりマルチチャンネルで再生さる。このように複数のサラウンドスピーカ７６を用い、モニタ７３で映し出される周辺視野映像、又は局部映像Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇで映し出される映像から音声が発生している場合には、映像の位置に対応して音声が聞こえるように、立体音場として音声を再生することが好ましい。また複数のサラウンドスピーカ７６を用い、手術室での本来の執刀医の位置で聞こえる音声の方向又は距離と同じ状態で医療用コクピット内の執刀医の位置で聞こえるように立体音場として音声を再生することが好ましい。
医療用コクピットには、さらに執刀医を撮像する複数の撮像装置６１の話声を集音するマイクロフォン６０および手術室のロボット１２を操作するための操作部６２が配置されている。撮像装置６１、マイクロフォン６０、および操作部６２からの信号は、サーバ５４に供給されネットワークを介して手術室に送信される。

次に本発明による遠隔手術システムの動作を図１〜図３とともに説明する。なお、以下の説明では医療用コクピットのモニタ７３が図３のように３つのモニタ７３１、７３２、７３３で構成された場合について説明する。
手術現場や患者を撮像する撮像装置１４１、１４２、１４３、１４４、１４５が所定の位置にセッティングされ、計測情報装置１３の電極が患者に取り付けられる。手術に携わるスタッフはマイクロフォン１５１を胸元などにクリップし、患者１１の近くにはマイクロフォン１５２が配置される。あらかじめデータベース１６に蓄積されている患者１１の身体断層画像などの各種データはデータベースサーバ２６に送られる。モニタ１７は電源が投入され、遠隔地の医療用コクピットから送信される執刀医の映像を映出する。
撮像装置１４１、１４２、１４３、１４４、１４５の信号は映像情報サーバ２２に、計測情報装置１３からの映像および音は計測情報サーバ２１に、マイクロフォン１５１、１５２からの音声は音声情報サーバ２５に、データベース１６からのデータはデータベースサーバ２６にそれぞれ送られ、各サーバ２１、２２、２５、２６のデータは統合サーバ３０で統合されネットワーク４０を介して医療用コクピットに送信する。統合サーバ３０は、計測情報サーバ２１から供給される計測情報取得装置１３からの情報、映像情報サーバ２２から供給される複数個の撮像装置１４１、１４２、１４３、１４４、１４５からの映像情報、および、データベースサーバ２６から供給されるデータベース１６からの情報をスイッチャ３１で任意の周期で切り換えて出力し、音声情報サーバ２５からの音声情報を音声情報抽出部３２で選択し、また、計測情報サーバ２１、映像情報サーバ２２、およびデータベースサーバ２６から供給される映像情報を動画抽出部３３で動画として抽出して送信する。なお、統合サーバ３０で統合したデータをスイッチャ３１、音声情報抽出部３２および動画抽出部３３を通さずにそのまま送信し、医療用コクピット側にスイッチャ３１、音声情報抽出部３２および動画抽出部３３を設けて通してもよい。

医療用コクピットでは、ネットワーク４０を介して送信された統合サーバ３０からの情報を統合サーバ５０で受信する。統合サーバ５０ではスイッチャ３１で切り換えて得られた静止画情報を蓄積した画像サーバ５１からの出力のうち、計測情報取得装置１３からの情報をモニタ７３１にＢで示す位置にはめ込んで波形図と音を再生する。同様に、画像サーバ５１からの出力のうち、撮像装置１４２、１４３、１４４、１４５からの患者の患部の映像である静止画像はモニタ７３２にＣ、Ｄ、Ｅ、Ｆで示す位置にはめ込んで再生する。また、画像サーバ５１からの出力のうち撮像装置１４１からの手術現場全体の静止画像およびデータベース１６からのデータ画像はそれぞれモニタ７３３にＧおよびＡで示す位置にはめ込んで再生する。これらのはめ込み位置は通常の手術室での各種機器の配置と一致した状態に設定され、執刀医は手術室でいつも見たり聞いたりしている環境と全く変わらない環境で画像を見たり音を聞いたりすることができる。
また、統合サーバ５０の音声情報ドライバ５２でマルチチャンネル信号に展開された手術室内の音声情報は、サラウンドスピーカ７６に供給され、医療用コクピット室内でマルチチャンネル再生され、医療用コクピット内の音声環境が手術室の音声環境と一致した状態で放声されるので、執刀医は手術室の執刀位置に立っているのと同じ環境でスタッフの声やレスピレータからの呼吸音など手術室内で発生する各種の音声を聞くことができる。
統合サーバ５０の動画サーバ５３からの動画情報のうち、メスの刃先を中心とした患部の拡大動画情報は、主モニタ７１に常時映出される。一方、動画サーバ５３からの動画情報のうち、執刀医が選択した拡大動画情報または拡大画像は副モニタ７２に表示される。執刀医は主モニタ７１の拡大画像と随時必要となる副モニタ７２の拡大動画情報または拡大画像を見ながら操作部６２を操作して手術を行う。操作部６２の操作はサーバ５４からネットワーク４０を介して手術室のコントローラに供給され、コントローラ２３がロボット１２のメス操作部１２１を操作して手術を行う。このとき、データベース１６から身体断層画像を取り出して主モニタ７１に映出されている患部の画像に透過的に重畳したり、隣接して表示させることにより一層厳密な手術を行うことができる。

執刀医の様子は撮像装置６１で撮像され、音声はマイクロフォン６０で集音されてサーバ５４からネットワーク４０を介して手術室のドライバに送られ、モニタ１７で再生される。したがって、執刀医がスタッフに指示する場合はマイクロフォン６０に言葉で指示すればスタッフはモニタ１７を見て指示を受けることができる。
執刀医が通常手術中は手がふさがっているので、副モニタ７２に再生させる拡大動画情報または拡大画像の選択は、マイクロフォン６０が選択指令を受けたり、撮像装置が執刀医の特定の身体動作をキャッチしたとき、その他身振りによる指示によって選択できるようにすることが好ましい。たとえば、心電図を副モニタ７２に拡大表示させたいときは、「シンデンズ」と発声するとサーバ５３がその声により指示を受けて心電図の動画像を選択して副モニタ７２に供給する。なお、フットスイッチからの操作や選択用の切り換えボタンを押すことにより切り換えるようにしてもよいことはもちろんである。身体動作による指示としては、執刀医の腕、手、若しくは指の移動、又は顔の特徴部である顎、鼻、眉、目、若しくは口の移動を認識し、これらの身体部位の移動方向を判別し、判別した結果をトリガ信号として用いてもよい。
操作部６２の動きとロボットのメス操作部１２１の動きは連動するが、このとき伝送系の信号処理により操作部６２の動きをメス操作部１２１の動きに変換するときの動き量をスケールダウンさせることにより、メス操作部１２１の微細な動きを実現したり、操作部６２の手ぶれ成分を除去することができる。たとえば、操作部６２の動きを１００分の１にスケールダウンさせてメス操作部１２１を動かせば、操作部６２を１０ｃｍ動かしたときにメス操作部１２１は１ｍｍ動くことになり、微小な切開手術などを容易に行うことができる。また操作部６２の５ｍｍ程度の手ぶれはメス操作部１２１では０．０５ｍｍの動きに変換され手術時の移動量としては無視できるので手ぶれは除去される。このスケール変更はサーバ５４の操作つまみの設定変更やマイクロフォン６０で指示するなどの方法で自由に変更することができる。
なお、以上の実施例においては、手術室と医療用コクピット間の２点間で情報の送受信を行う場合について説明したが、図４に示すように他の医療用コクピットとの間でも情報を送受信することもできる。

図４は、複数の医療用コクピットを有する場合の医療用コクピットシステムの構成図である。
図に示すように、複数の診療室１、２、３が存在する場合、診療室１は医療用コクピット４、診療室２は医療用コクピット５、診療室３は医療用コクピット６からの指示によって手術などの診療を行うが、診療室１、２、３に対してコクピット７からは、例えば麻酔医師によるアドバイスが行われる。また診療室３のように、研修医用のコクピット８が、診療室３と医療用コクピット６との間でネットワーク接続されることで、研修医が医療用コクピット６にいる医師からの指導を受けながら診療室３を見学することもできる。
なお、医療用コクピットの操作部６２を除いた構成を他の地点に設けることにより３地点以上の医療ステーション間で情報を送受信しながら遠隔手術をすることができるように構成してもよい。
また、図４に示すような例えば麻酔医師が用いるコクピット７でのモニタ構成は図５に示すような構成が好ましい。

図５はコクピット内の他のモニタ構成を示す概念図であり、図３に示す医療用コクピットの具体的な構成のうちのモニタ構成だけを示すものである。
図に示すように、複数の大画面のモニタ（第１のモニタ手段）７３Ａ、７３Ｂ、７３Ｃを備えるとともに、複数の主モニタ（第２のモニタ手段）７１Ａ、７１Ｂ、７１Ｃを備えている。大画面のモニタ（第１のモニタ手段）７３Ａ、７３Ｂ、７３Ｃでは、それぞれがそれぞれの手術室全体（周辺視野）を表示する画面でもよいが、それぞれの手術室の周辺視野映像を選択的に切り換えて表示してもよい。主モニタ（第２のモニタ手段）７１Ａ、７１Ｂ、７１Ｃでは、それぞれがそれぞれの手術室についての局部映像、特に患部の動画情報を表示することが好ましい。また、一つの医療用コクピットが複数の診療室と接続されている場合には、時分割でそれぞれの診療室をコントロールできるとともに、該当する診療室に対して操作部からの情報を正しく送信することが必要である。従って、少なくとも指示に関する、操作部からの情報、コクピット撮像手段からの情報、およびコクピット音声情報取得手段からの情報については、それぞれの診療室に対して選択的に時分割されて送信されるように構成することが好ましい。またこれらの術者の指示に関する情報は、術者の手元に配置した第２のモニタ手段で映し出している映像の診療室に対して送信されるように選択することが好ましい。

図６はコクピット内における執刀医の所定の動作をトリガ信号として利用する場合を説明するための概念図である。
身体的特徴として、執刀医の腕、手、指、又は顔の特徴部である顎、鼻、眉、目、若しくは口を認識することも可能であるが、ここでは指を認識する場合で説明する。また、指自体を認識することも可能であるが、指先にＬＥＤを取り付けることによって更に検出部の検出を容易に行うことができる。
図６では、２つの撮影装置６１Ａ、６１ＢによってＬＥＤの光源位置を検出する状態を示している。２つの撮影装置６１Ａ、６１Ｂは、第２のモニター手段７１、７２よりも執刀医に近い位置に配置され、２つの撮影装置６１Ａ、６１Ｂには、それぞれ魚眼レンズ１６１Ａ、１６１Ｂが設けられている。
図において、カタログ画面Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆは、既に図３において説明した第１のモニタ手段７３内に映し出される小画面部を示している。また、光源１０１は第１の測定時間における測定位置を、光源１０２は第２の測定時間における測定位置を示している。なお、本実施例では平面視による二次元にて説明を行うが、実際には三次元として測定して検出を行う。また、本実施例では光源１０１と光源１０２の２点での測定位置を用いて説明するが、２点以上の複数の測定位置を検出し、これらの検出データから所定のデータを用いて測定してもよい。
また、撮影装置６１Ａ、６１Ｂ及びカタログ画面Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆのそれの位置データはあらかじめデータベースに登録している。

上記構成において、まず光源１０１の位置を測定する。この測定においては、撮影装置６１Ａにおける魚眼レンズ１６１Ａの光軸から光源１０１の角度α１と、撮影装置６１Ｂにおける魚眼レンズ１６１Ｂの光軸から光源１０１の角度β１とが計測され、撮影装置６１Ａ、６１Ｂの位置データとこれらの角度データから光源１０１の位置情報が演算処理される。次に光源１０２の位置を測定する。この測定においては、撮影装置６１Ａにおける魚眼レンズ１６１Ａの光軸から光源１０２の角度α２と、撮影装置６１Ｂにおける魚眼レンズ１６１Ｂの光軸から光源１０２の角度β２とが計測され、撮影装置６１Ａ、６１Ｂの位置データとこれらの角度データから光源１０２の位置情報が演算処理される。そして、光源１０１の位置情報と光源１０２の位置情報から、光源１０１から光源１０２の移動方向を演算処理し、その移動方向と光源１０１又は光源１０２の位置情報から、移動方向の延長線上にあるカタログ画面Ｃを推定する。そしてこの推定されたカタログ画面Ｃが選択されたと判断して、副モニター７２にカタログ画面Ｃの映像を表示する。
なお、上記実施例では、複数の光源１０１、１０２を用いて指示方向のカタログ画面Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆを演算処理する方法を示したが、執刀医の位置を基準位置としてあらかじめ位置データを登録しておき、この基準位置データと光源の位置データから、指示方向のカタログ画面Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆを演算処理する方法であってもよい。また、光源の測定位置を、例えば執刀医の音声又はフットスイッチなどの他のトリガ信号によって特定してもよい。また、実際の執刀に先立って計測した指示情報、又は実際の執刀中に計測した指示情報を記憶しておき、光源１０１、１０２からの測定データとカタログ画面Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆとの位置関係を執刀医毎に記憶して、補正情報として用いることも有効である。このような補正情報を用いることで、執刀医毎によって生じる、指示方向の実際の位置関係からのずれを修正して、執刀医が希望するカタログ画面Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆを選択することができる。

また、上記実施例においては、外科的手術を例に説明したが、診察、検査、診断、治療、又はその他の処置などの診療における遠隔診療システムとして適用することができる。従って例えば手術室は診療室として、手術台は診療台として、手術手段としての手術用マニピュレータまたはロボットは診療用マニピュレータまたはロボットからなる診療手段として適用することができる。
また、上記実施例の説明においては、各種のサーバを用い、これらのサーバにデータを蓄積する場合で説明したが、サーバでは必ずしもデータ蓄積をせずに、データの送受信を制御する機能を有するものであってもよい。
また、上記実施例の説明においては、ロボットは医療用コクピットからの指示情報に基づいて動作を行う説明をしたが、例えば危険回避機能などの自律性機能をロボットが備えていてもよい。また、ロボットは、あらかじめデータベースに登録されたプログラムであって、各種の現実の検出データに基づいて動作する基本動作プログラムに従って動作を行い、術者からはこの基本動作プログラムの選択や手動操作への切り換えを指示する場合であってもよい。
また、上記実施例で説明したモニタ手段は、二次元映像として説明したが、立体的な映像、三次元映像であることがより好ましい。
また、上記実施例で説明した診療室音声情報取得手段としては、ロボット１２に設置された複数個の撮像装置１４２、１４３、１４４、１４５に設けたマイクロフォンであってもよい。なお、ロボット１２のアーム先端側に撮影手段やマイクロフォンを設けることで、ロボット制御に用いるデータを利用して位置認識を正確に行うことができる。
また、上記実施例では人を対象とした診療システムとして説明したが、動物を対象とした診療システムとしてもそのまま利用できる。
また、本実施例でサーバに蓄積された診療に関する映像や音声データは、その後データを再生することで、研修医の模擬研修データとして利用することもできる。
また、図６に示す実施例において、魚眼レンズを用いて説明したが、広角レンズや複眼レンズを用いてもよく、またはこれらのレンズを用いなくても人工網膜チップやその他の一般的な撮像素子による撮影装置であってもよい。

また、図６に示す実施例において、２つの撮影装置６１Ａ、６１Ｂを、第２のモニタ手段７１、７２よりも執刀医に近い位置に配置として説明したが、撮影装置６１Ａ、６１Ｂを他の位置に設けてもよく、また３つ以上の撮影装置を設けてもよい。
また、執刀医の身体動作による指示を、手術室側の表示手段で表示することが好ましい。
また、上記実施例では、執刀医の身体動作による指示によってカタログ画面Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆを選択する場合を説明したが、執刀医の身体動作による指示によって、診断又は治療箇所などの特定の患部位置を選択することもでき、特定の患部位置を選択する構成にあっては、特に手術室側でこの選択内容を表示手段で表示することが好ましい。

以上のように本発明による医療用コクピットシステムによれば、執刀医が遠隔地にいる患者の診療をあたかも診療室で直接診療しているように行うことができる。したがって、過疎地など執刀医が少ない現場においても診療室のインフラ整備をするだけで専門医による診療を受けることができる。
また、診療中の画像、音声データなどを記録して蓄積することが可能なので、医療技術の向上に資することができる。
また、本発明のような医療用コクピットシステムを実現することで、過疎地や行楽地などどこでも高度医療を受けられるといった普遍的医療サービスの提供を実現でき、移動による身体的及び経済的な患者負担の軽減を図れ、協業による医療技術の普及促進を図れ、診療現場が海外であっても自国の言葉による医療受診を受けることができ、どこでも主治医の治療が受けられることによる医師と患者の信頼関係を利用でき、時間の壁を超越して、例えば夜中の診療を現在昼間の場所で受けることができるなど多大の効果を奏することができる。

本発明による医療用コクピットシステムの全体構成を示すブロック図 本発明による医療用コクピットシステムにおける診療室の具体的な構成を示す概念図 本発明による医療用コクピットシステムにおける医療用コクピットの具体的な構成を示す概念図 本発明による複数の医療用コクピットを有する場合の医療用コクピットシステムの構成図 本発明によるコクピット内の他のモニタ構成を示す概念図 本発明によるコクピット内における執刀医の所定の動作をトリガ信号として利用する場合を説明するための概念図

Claims (24)

1. ネットワークを介して診療室と医療用コクピットとを接続し、
   前記診療室には、
   患者の心電情報などの計測情報を取得する計測情報取得手段と、
   手術現場全体の状況を撮像する第１の診療室撮像手段と、
   手術室にいるスタッフ撮像用の第２の診療室撮像手段と、
   患者の患部における手術音や患者の呼吸音を集音する第１の診療室音声情報取得手段と、
   手術に携わる看護士などのスタッフの話声や発生音を集音する第２の診療室音声情報取得手段と、
   患者の患部を含む身体を撮像する身体情報撮像手段と、
   遠隔操作により患者を診療する診療手段とを有し、
   前記医療用コクピットには、
   前記計測情報取得手段、前記第１の診療室撮像手段、前記第２の診療室撮像手段、及び前記身体情報撮像手段からの映像を映し出すモニタ手段と、
   前記第１の診療室音声情報取得手段及び前記第２の診療室音声情報取得手段からの音声情報を再生する音声再生手段と、
   前記診療手段を遠隔操作する操作部と、
   を有する医療用コクピットシステムであって、
   前記モニタ手段として、
   前記操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、前記術者の手元に配置した第２のモニタ手段とを備え、
   前記第１のモニタ手段では、
   前記第１の診療室映像手段で撮像した診療室内の周辺視野映像を映し出すとともに、
   前記第２の診療室撮像手段で撮像した診療室内の複数箇所の局部映像を前記周辺視野映像の一部に重ねてそれぞれカタログ画面として映し出し、
   前記第２のモニタ手段では、前記計測情報取得手段で取得する計測情報又は前記身体情報撮像手段からの映像を映し出す
   ことを特徴とする医療用コクピットシステム。
2. あらかじめ取得した患者の身体データまたは患者の固有データを蓄積したデータベース手段を有し、前記データベースに蓄積しているデータを診療室における各情報とともに送信することを特徴とする請求項１に記載の医療用コクピットシステム。
3. 診療室から送信される情報を、前記医療用コクピットの他に、他のコクピットに送信する送信手段を有する請求項１に記載の医療用コクピットシステム。
4. 前記身体情報撮像手段を、患部を複数の方向から撮像する複数の撮像装置から構成したことを特徴とする請求項１に記載の医療用コクピットシステム。
5. 前記第１のモニタ手段を、前記操作部を操作する術者の位置において、水平方向視野角が１２０度から３３０度の範囲となるように配置したことを特徴とする請求項１に記載の医療用コクピットシステム。
6. 前記第２のモニタ手段として、主モニタ部と副モニタ部とを備え、前記主モニタ部では前記計測情報取得手段で取得する計測情報又は前記身体情報撮像手段からの映像を映し出し、前記副モニタ部では前記第１のモニタ手段に映し出したカタログ画面を選択的に切り換えて映し出すことを特徴とする請求項１に記載の医療用コクピットシステム。
7. 前記第２のモニタ手段として、複数のモニタ部を備え、少なくとも一つの前記モニタ部は、当該診療システムの稼働中には映像を切り換えないことを特徴とする請求項１に記載の医療用コクピットシステム。
8. 前記副モニタ部でのカタログ画面の切り換えを、術者の発する音声、又は術者の動きや表情を検知して行うことを特徴とする請求項６又は請求項７に記載の医療用コクピットシステム。
9. 前記副モニタ部でのカタログ画面の切り換えを、フットスイッチを用いて行うことを特徴とする請求項６又は請求項７に記載の医療用コクピットシステム。
10. 前記医療用コクピットには、術者の動きや表情を撮像するコクピット撮像手段と、術者の音声を取得するコクピット音声情報取得手段とを有し、前記コクピット撮像手段で撮像した映像と前記コクピット音声情報取得手段で取得した音声とをネットワークを介して前記診療室に送信することを特徴とする請求項１に記載の医療用コクピットシステム。
11. 前記診療室音声情報取得手段として、診療室におけるスタッフが保持するマイクロフォンとしたことを特徴とする請求項１に記載の医療用コクピットシステム。
12. 前記診療室音声情報取得手段として、患者の患部付近の音や患者の呼吸音を集音するマイクロフォンとしたことを特徴とする請求項１に記載の医療用コクピットシステム。
13. 前記第１のモニタ手段でのカタログ画面を、周辺視野映像で映し出される映像中の、当該カタログ画面で映し出す映像内容が映し出されている映像位置に配置したことを特徴とする請求項１に記載の医療用コクピットシステム。
14. 前記第１のモニタ手段のカタログ画面に映し出す局部映像を、断続的に受信する映像情報としたことを特徴とする請求項１に記載の医療用コクピットシステム。
15. 前記音声再生手段をマルチスピーカ装置とし、診療室での本来の術者の位置で聞こえる音声の方向又は距離と同じ状態で前記医療用コクピット内の術者の位置で聞こえるように、立体音場として音声を再生することを特徴とする請求項１に記載の医療用コクピットシステム。
16. 前記音声再生手段をマルチスピーカ装置とし、前記モニタ手段で映し出される周辺視野映像、又は局部映像で映し出される映像から音声が発生している場合には、前記映像の位置に対応して音声が聞こえるように、立体音場として音声を再生することを特徴とする請求項１に記載の医療用コクピットシステム。
17. 前記データベース手段に記憶させているデータを前記身体情報撮像手段の映像に透過的に重畳させ、又は前記身体情報撮像手段の映像に近接表示させることを特徴とする請求項２に記載の医療用コクピットシステム。
18. ネットワークを介して医療用コクピットと接続され、
    患者の心電情報などの計測情報を取得する計測情報取得手段と、
    手術現場全体の状況を撮像する第１の診療室撮像手段と、
    手術室にいるスタッフ撮像用の第２の診療室撮像手段と、
    患者の患部における手術音や患者の呼吸音を集音する第１の診療室音声情報取得手段と、
    手術に携わる看護士などのスタッフの話声や発生音を集音する第２の診療室音声情報取得手段と、
    患者の患部を含む身体を撮像する身体情報撮像手段と、
    遠隔操作により患者を診療する診療手段と、
    前記術者の映像及び音声を再生するモニタと、
    を有する診療室であって、
    前記計測情報取得手段、前記第１の診療室撮像手段、前記第２の診療室撮像手段、前記第１の診療室音声情報取得手段、前記第２の診療室音声情報取得手段、及び前記身体情報撮像手段からの情報を前記医療用コクピットに送信し、前記医療用コクピットからの前記術者の映像及び音声情報を受信し、前記医療用コクピットからの情報に基づいて前記診療手段を動作させることを特徴とする診療室。
19. ネットワークを介して診療室と接続され、
    前記診療室の映像を映し出すモニタ手段と、
    前記診療室の音声を再生する音声再生手段と、
    前記診療室の診療手段を遠隔操作する操作部と、
    術者の動きや表情を撮像するコクピット撮像手段と、
    術者の音声を取得するコクピット音声情報取得手段と、
    を有する医療用コクピットであって、
    前記モニタ手段として、
    前記操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、前記術者の手元に配置した第２のモニタ手段とを備え、
    前記第１のモニタ手段では、
    前記第１の診療室映像手段で撮像した診療室内の周辺視野映像を映し出すとともに、
    前記第２の診療室撮像手段で撮像した診療室内の複数箇所の局部映像を前記周辺視野映像の一部に重ねてそれぞれカタログ画面として映し出し、
    前記第２のモニタ手段では、前記計測情報取得手段で取得する計測情報又は前記身体情報撮像手段からの映像を映し出し、
    前記モニタ手段で映し出す映像と前記音声再生手段で再生する音声を前記診療室から受信し、前記操作部と前記コクピット撮像手段と前記コクピット音声情報取得手段とからの情報を前記診療室に送信する
    ことを特徴とする医療用コクピット。
20. 前記モニタ手段として、前記操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、前記術者の手元に配置した第２のモニタ手段とを備え、前記第１のモニタ手段では、前記診療室映像手段で撮像した診療室内の周辺視野映像を映し出すとともに、診療室内の複数箇所の局部映像を前記周辺視野映像の一部に重ねてそれぞれカタログ画面として映し出すことを特徴とする請求項１９に記載の医療用コクピット。
21. 前記第１のモニタ手段でのカタログ画面を、周辺視野映像で映し出される映像中の、当該カタログ画面で映し出す映像内容が映し出されている映像位置に配置したことを特徴とする請求項２０に記載の医療用コクピット。
22. 前記第２のモニタ手段として、主モニタ部と副モニタ部とを備え、前記主モニタ部では前記計測情報取得手段で取得する計測情報又は前記身体情報撮像手段からの映像を映し出すことを特徴とする請求項２０に記載の医療用コクピット。
23. 前記第２のモニタ手段として、主モニタ部と副モニタ部とを備え、前記副モニタ部では前記第１のモニタ手段に映し出したカタログ画面を選択的に切り換えて映し出すことを特徴とする請求項２０に記載の医療用コクピット。
24. 複数の診療室と接続され、前記モニタ手段として、前記操作部を操作する術者から所定距離を持たせて配置した第１のモニタ手段と、前記術者の手元に配置した第２のモニタ手段とを備え、前記第２のモニタ手段で映し出している映像の前記診療室に対して、前記操作部からの情報を送信することを特徴とする請求項１９に記載の医療用コクピット。

Images