JPWO2012108085A1 - 医療機器 - Google Patents

Abstract

医療機器１は、撮像部３５が配設されている先端部３１を有する挿入部３０と、第１の座標系にもとづく３次元画像データを記憶する記憶部１５と、３次元画像データにもとづき第１の座標系による視点位置情報を視線パラメータとするＶＢＳ画像を生成するＶＢＳ画像生成部１３と、一のＶＢＳ画像と内視鏡画像との類似度を算出する類似度算出部１４と、類似度にもとづいた判定を行う判定部１８と、第２の座標系における先端位置情報を取得するためのセンサ２１を有する処置具８と、第１の座標系と第２の座標系との関連付け処理を行う座標変換式算出部１２と、を具備する。

Description

本発明は、被検体の体内の管腔を介して、先端部が所望位置まで挿入される挿入部を具備する医療機器に関する。

近年、ＣＴ装置等により得られた被検者７の３次元画像データから管腔、例えば肺の気管支の３次元像を形成し、３次元像上で管腔に沿って目的点までの経路を求め、さらに３次元画像データにもとづいて管腔の仮想内視画像を生成し表示する挿入ナビゲーションシステムが開示されている。

また、日本国特開２００９−２７９２５０号公報には、内視鏡画像と類似する仮想内視鏡画像の視点位置から算出されたＣＴ座標系にもとづく位置情報と、位置センサにより検出されたセンサ座標系にもとづく位置情報と、の関連付けを行う医療機器が開示されている。

しかし、内視鏡画像と類似する仮想内視鏡画像を高精度に抽出するには時間を要する。一方、短時間で処理を完了してしまうと、誤った結果を出力してしまうおそれがあった。すなわち、公知の医療機器は、処理速度と処理精度とを共に満足することは容易ではないことがあった。

本発明の実施形態の医療機器は、処理速度と処理精度とを共に満足する医療機器を提供することを目的とする。

本発明の一態様の医療機器は、被検体の体腔内において内視鏡画像を撮像する撮像手段が配設されていると共に、内部を挿入するチャンネルのチャンネル開口が形成された先端部、を有する挿入手段と、予め取得される前記被検体の第１の座標系にもとづく３次元画像データを、記憶する記憶手段と、前記３次元画像データにもとづき、前記第１の座標系による位置および方向および回転角からなる第１の位置情報を視線パラメータとする、複数の仮想内視鏡画像を生成する仮想内視鏡画像生成手段と、一の前記仮想内視鏡画像と、前記内視鏡画像と、の類似度を算出する類似度算出手段と、前記類似度にもとづいた判定を行う判定手段と、前記判定手段の判定結果に応じて、前記一の仮想内視鏡画像の前記第１の位置情報を前記撮像手段の位置情報に設定する位置設定手段と、第２の座標系における位置および方向および回転角からなる第２の位置情報を取得するための位置情報取得手段を有する、前記チャンネル開口から突出する医療器具と、前記判定手段の判定結果に応じて、前記第１の位置情報および前記第２の位置情報を用いて前記第１の座標系と前記第２の座標系との関連付け処理を行う座標変換式算出手段と、を具備する。

第１実施形態の医療機器の使用状態を説明するための説明図である。 第１実施形態の医療機器の構成を説明するための構成図である。 第１実施形態の医療機器の処理の流れを説明するためのフローチャートである。 第１実施形態の医療機器のナビゲーション画面の一例である。 第１実施形態の医療機器の先端部等を説明するための説明図である。 第１実施形態の医療機器のＶＢＳ画像を説明するための説明図である。 第１実施形態の医療機器のナビゲーション画面の一例である。 第１実施形態の医療機器のナビゲーション画面の一例である。 第１実施形態の医療機器のナビゲーション画面の一例である。 第１実施形態の医療機器のナビゲーション画面の一例である。 第１実施形態の変形例５の医療機器の先端部等を説明するための説明図である。 第１実施形態の変形例５の医療機器の先端部等を説明するための説明図である。 第１実施形態の変形例５の医療機器の先端部等を説明するための説明図である。 第１実施形態の変形例５の医療機器のナビゲーション画面の一例である。 第２実施形態の医療機器の先端部等を説明するための説明図である。 第２実施形態の医療機器の構成を説明するための構成図である。

＜第１実施の形態＞
図１に示すように、本実施形態の医療機器１は、被検体である被検者７の体内の管腔である気管支９を介して、先端部３１が目標部位６の近傍の所望位置まで挿入される挿入手段である挿入部３０を有する気管支内視鏡（以下、「内視鏡」という）２を具備する。

挿入部３０には内部を挿通するチャンネル３２が配設されており、処置具挿入口３３からチャンネル３２に挿入された医療器具である細長い処置具８が、先端部３１に形成されたチャンネル開口３４（図５参照）から突出して、目標部位６の組織を穿刺する。

図２に示すように、医療機器１は、内視鏡２と、本体部３と、表示手段である表示部４と、入力手段である入力部５と、を具備する。内視鏡２の挿入部３０の先端部３１には、撮像手段である撮像部３５と、位置情報取得手段であるセンサ２１と、が配設されている。術者は、内視鏡操作部３６により、先端部３１の位置および方向および回転角を操作する。

表示部４は、術者の挿入操作を支援するナビゲーション画面を表示する。入力部５は、術者が医療機器１に指示情報を入力するマウス／キーボード等である。

本体部３は、制御部１０と、内視鏡画像処理部１１と、モード切替手段であるモード切替部１６と、仮想内視鏡画像（Ｖｉｒｔｕａｌ Ｂｒｏｎｃｈｕｓ Ｓｃｏｐｅ 画像：以下、「ＶＢＳ画像」という）生成手段である仮想内視鏡画像生成部（ＶＢＳ画像生成部）１３と、類似度算出手段である類似度算出部１４と、判定手段である判定部１８と、座標変換式算出手段である座標変換式算出部１２と、記憶手段である記憶部１５と、ナビゲーション画面生成部１７と、位置設定手段である視点位置設定部１９と、先端位置算出部２０と、を具備する。

なお、上記構成要素は物理的に独立している必要はなく、例えば、ＣＰＵに読み込まれることにより、それぞれの機能を発生するプログラムであってもよい。

制御部１０は、ナビゲーション処理の全体の制御を行う。内視鏡画像処理部１１は、撮像部３５が撮像した内視鏡画像（以下、「ライブ画像」ともいう）を処理する。記憶部１５は、図示しない公知のＣＴ装置等で、予め取得された被検者７の気管支９を含む領域の３次元画像データを、取り込み記憶する。

ＶＢＳ画像生成部１３は、３次元画像データにもとづき、ＶＢＳ画像を生成する。なお、３次元画像データの座標系を、第１の座標系（以下「ＣＴ座標系」）といい、ＶＢＳ画像はＣＴ座標系による位置および方向および回転角からなる第１の位置情報（以下「視点位置情報」という）を視線パラメータとして生成される。

類似度算出部１４は、ＶＢＳ画像とライブ画像との類似度を算出する。判定部１８は、類似度算出部１４が算出した類似度にもとづいた判定を行う。視点位置設定部１９は判定部１８の判定結果に応じて、そのＶＢＳ画像の第１の位置情報（視点位置情報）を、撮像部３５の位置情報（位置および方向および回転角）に設定する
先端位置算出部２０は、被検者７の外部に配設した、磁界を発生する複数のアンテナ２２からの磁界をセンサ２１が検出することで、センサ２１が配設された処置具８の先端部の位置および方向および回転角からなる第２の位置情報（以下「先端位置情報」という）を算出する。

なお、先端位置算出部２０は、先端部３１に設けた磁界発生部からの磁界を外部に設けた磁界センサ等で検出してもよい。さらに、先端位置情報の取得方式は、磁界または電波を用いた方式に限られるものではない。例えば、光学的方式、加速度／地磁気／角速度等を組み合わせたモーションセンサ方式、ひずみセンサ方式、もしくはロータリーエンコーダ方式等、または、前記方式を組み合わせた方式により、先端位置情報が取得されてもよい。

ここで、先端位置算出部２０が算出する先端位置情報は、ＣＴ座標系とは異なる第２の座標系（以下、「内視鏡座標系」という）にもとづく。

座標変換式算出部１２は、判定部１８の判定結果に応じて、視点位置情報および先端位置情報を用いてＣＴ座標系と内視鏡座標系との関連付け処理、すなわち座標変換式の算出処理を行う。

すなわち、後述するように、目標部位６の位置はＣＴ座標系の３次元画像データを用いて設定されている。これに対して、処置具８の位置情報は内視鏡座標系にもとづく。このため、処置具８の位置情報をＣＴ座標系に変換する座標変換式が必要である。

モード切替部１６は、術者の処置を支援するためのナビゲーションモードを、第１のモードから第２のモードに切り替える。第１のモードでは、医療機器１は、先端部３１を目標部位６の近傍まで挿入するための支援を行う。これに対して第２のモードでは、医療機器１は、先端部３１から突出した処置具８を目標部位６に穿刺するための支援を行う。

すなわち、第１のモードにおけるＶＢＳ画像とライブ画像との類似度算出処理／判定処理、言い換えれば、マッチング処理は、気管支９の分岐部において目標部位６に到達する方の管腔を示すために行われる。これに対して第２のモードにおけるマッチング処理は、精度の高い座標変換式を算出するためである。

目的が異なるため、第１のモードにおけるマッチング処理では処理速度が重要であり、第２のモードにおけるマッチング処理では処理精度が重要である。

医療機器１は、モード切替部１６がモードを切り替えるために、第１のモードにおける処理速度と第２のモードにおける処理精度とを共に満足することができる。

以下、図３のフローチャートを用いて医療機器１の処理の流れを説明する。

＜ステップＳ１０＞ 目標部位設定
挿入操作に先立ち、記憶部１５に公知のＣＴ装置で予め生成された、例えば、記憶媒体または通信回線を介して受信されたＤＩＣＯＭ形式の３次元画像データが、記憶部１５に記憶される。

術者は、表示部４に表示された気管支９の３次元画像データにもとづく画像をもとに、目標部位６を設定する。

＜ステップＳ１１＞ ルート設定
挿入始点である例えば被検者７の口腔と、目標部位６とを結ぶルートを算出する処理が行われ、挿入部３０の挿入経路が設定される。複数のルートが算出された場合には、術者が選択処理を行ってもよい。

＜ステップＳ１２＞ ＶＢＳ画像生成
ＶＢＳ画像生成部１３が、挿入経路に沿った複数のＶＢＳ画像を生成する。ＶＢＳ画像生成部１３は、３次元画像データからＶＢＳ画像を生成するときに、６つの視線パラメータを変化させることで、多数の異なる視線位置からのＶＢＳ画像を生成する。視線パラメータは、位置および姿勢、すなわち、位置（ｘ、ｙ、ｚ）と、方向および角度（θｘ、θｙ、θｚ）と、からなる６次元のデータである。

なお、ＶＢＳ画像生成部１３は、多くのＶＢＳ画像を生成することが好ましく、さらには挿入経路から外れた視線パラメータのＶＢＳ画像を生成してもよい。

生成されたＶＢＳ画像は、それぞれの視線パラメータとともに、ＶＢＳ画像生成部１３、記憶部１５またはＶＢＳ画像記憶部（不図示）等に記憶される。

＜ステップＳ１３＞ ライブ画像取得
挿入部３０の先端部３１が、被検者７の気管支９に挿入される。そして先端部３１に配設された撮像部３５が撮像した気管支内のライブ画像が表示部４に表示される。

＜ステップＳ１４、Ｓ１５＞ ＶＢＳ画像選択、類似度算出
気管支９は分岐部Ｊを有するために、術者は、それぞれの分岐部において目標部位６に到達する方の管腔を選択する必要がある。医療機器１では、先端部３１が分岐部近傍に到達すると、類似度算出部１４が、記憶部１５に記憶されている一のＶＢＳ画像とライブ画像との類似度を算出する。

ここで、ライブ画像とＶＢＳ画像とのマッチング処理は、ライブ画像のフレーム単位で行われる。すなわちマッチング処理は静止内視鏡画像とＶＢＳ画像の類似度を基準に行われる。ＶＢＳ画像との類似度が算出される静止内視鏡画像（ライブ画像）は、例えば術者がフリーズスイッチの押下操作により決定した静止画像である。なお、類似度算出に適した分岐部のライブ画像が画像認識法等により、自動的に選択されてもよい。

画像の類似度は、公知の画像処理により行われ、画素データレベルのマッチング、または、画像から抽出した特徴のレベルにおけるマッチングのいずれを用いてもよい。

＜ステップＳ１６＞判定
判定部１８は、類似度にもとづいた判定を行う。すなわち、判定部１８は類似度算出部１４が算出した類似度と第１の閾値とを比較して、第１の閾値以上であった場合には、「ＯＫ」と判定し、類似度が第１の閾値未満であった場合には、「ＮＧ」と判定する。

判定結果が「ＯＫ」の場合には、Ｓ１７からの処理が行われる。これに対して判定結果が「ＮＧ」の場合には、Ｓ１４からの処理が再び行われる。すなわち、記憶部１５に記憶されている複数のＶＢＳ画像の中から別のＶＢＳ画像が選択され、類似度算出処理および判定処理が行われる。

なお、判定結果が「ＮＧ」の場合には、ＶＢＳ画像生成部１３が、比較的、類似度の高いＶＢＳ画像をもとに視線パラメータを変更して、新たにＶＢＳ画像を生成してもよい。

＜ステップＳ１７＞視点位置設定
視点位置設定部１９は、仮想内視鏡画像の第１の位置情報を撮像部３５の位置情報（視点位置情報）に設定する。すなわち、先端部３１のＣＴ座標系における位置および方向および回転角が設定される。

＜ステップＳ１８＞ナビゲーション画面生成
第１のモードでは、図４に示すナビゲーション画面４Ｐ１が生成される。ナビゲーション画面４Ｐ１には、ライブ画像と、ＶＢＳ画像と、挿入経路にある気管支の、例えば４つの分岐部Ｊ１〜Ｊ４の縮小ＶＢＳ画像であるサムネイル画像と、現在の分岐部を示す文字情報と、が表示されている。なお、図４において、サムネイル画像の中で、表示枠が太く表示されている画像は、表示されている現在のＶＢＳ画像の縮小画像であることを示している。なお、図４ではサムネイル画像を一列に表示しているが、分岐部数が多い場合には２列以上にわたって表示してもよい。

先端部３１は、視点位置設定部１９によりＣＴ座標系による位置が設定されたために、同じＣＴ座標系で設定された挿入経路のどこに位置しているかが判明している。このため、ＶＢＳ画像には、目標部位６への挿入経路を示すルートマーク３７が重畳表示されている。すなわち、ルートマーク３７が表示された方の穴が目標部位６に到達する管腔である。

術者は、ナビゲーション画面４Ｐ１に表示されたルートマーク３７が示す管腔に先端部３１を挿入することにより、誤りなく先端部３１を目標部位６に到達することができる。

＜ステップＳ１９＞モード切替
図５に示すように、先端部３１が目標部位６の近傍まで挿入されると、処置具８による目標部位６の生検を行うための前処理として、座標変換式算出部１２による処理が行われる。

既に説明したＳ１３〜Ｓ１８までのナビゲーションモードは、先端部３１を目標部位６の近傍まで挿入するための支援を行う、初期設定されている第１のモードであった。このため、先端部３１から突出した処置具８を目標部位６に穿刺するための支援を行うためには、モード切替部１６がナビゲーションモードを第２のモードに切り替える。

例えば、モード切替部１６は、処置具８のチャンネル開口３４からの突出を検出し、モードを切り替える。すなわち、図６に示すように、モード切替部１６は、処置具８の画像である処置具画像８Ｐが所定長Ｌ以上含まれている内視鏡画像にもとづき、処置具８のチャンネル開口３４からの突出を検出する。

もちろん、術者が入力部５を介してモード切替部１６に指示情報を入力してもよい。

また、チャンネル開口３４から突出していた処置具８が、再びチャンネル３２内に収納された場合には、モード切替部１６が、ナビゲーションモードを第２のモードから第１のモードに切り替えてもよい。そのときには、第２のモードで算出したＣＴ座標系の情報を初期値として第１のモードのナビゲーションを再開する。モード切替は処置具８の収納を内視鏡画像の画像処理により検出してもよいし、術者が入力部５を介してモード切替部１６に指示情報を入力してもよい。

なお、図６においては、ライブ画像に挿入経路を示す経路線３８が重畳表示されている例を示している。すなわちナビゲーション画面に挿入経路を示すためには、各種の表示方法を用いることができる。

第１のモードにおけるマッチング処理では処理速度が重要であり、第２のモードにおけるマッチング処理では処理精度が重要である。すなわち、第１のモードでは分岐部において正しい方向（管腔）を決定し挿入経路を表示できれば十分である。また、第１のモードでは、それぞれの分岐部においてマッチング処理を行う必要がある。これに対して第２のモードでは、座標変換式の精度が高くなければ、処置具８を正確に目標部位６に穿刺することができない。また、第２のモードでは、最低１回のマッチング処理を行うだけでよい。

このため、モード切替部１６によるモード切替により、判定部１８が判定を行う基準となる類似度の第２の閾値が、第１のモードのときの第１の閾値よりも高く設定されることが好ましい。

完全に一致している場合の類似度が１００％の場合、例えば、第１の閾値は６０％であり、第２の閾値は８０％である。第１の閾値および第２の閾値は適宜、変更／設定可能である。すなわち、閾値が高いとは、判定が厳しくなることを意味する。

＜ステップＳ２０〜Ｓ２４＞
既に説明した第１のモード（Ｓ１３〜Ｓ１６）と同様であるが、Ｓ２１においてライブ画像が取得されたとき（Ｓ２０）の、第２の位置情報（先端位置情報）が取得される。

また、第２の閾値は第１の閾値よりも高いために、第２のモードでは、第１のモードよりも、時間をかけて高い精度でマッチング処理が行われる。

なお、特に第２のモードにおいては、判定結果が「ＮＧ」の場合には、ＶＢＳ画像生成部１３が、視線パラメータを変更して、新たにＶＢＳ画像を生成することが、好ましい。すなわち、最も高い類似度のＶＢＳ画像の視線パラメータを少しずつ変化することにより、より類似度の高いＶＢＳ画像をＶＢＳ画像生成部１３が生成することにより、第２の閾値を満足する類似度のＶＢＳ画像が得られる。

図７に示すように、ナビゲーション画面４Ｐ２には、類似度に加えて、ＬＩＶＥ画像およびＶＢＳ画像が表示されることが好ましい。類似度の表示は、図７に示すように数字によるデジタル表示でもよいし、図８に示すようにバーグラフ等によるグラフィック表示でもよい。なお、図８に示すバーグラフでは中心のバーが類似度を示し、周りのバーが設定された第２の閾値を示している。

また、ナビゲーション画面に、類似度の表示は行わないで、判定結果等を表示してもよい。例えば、表示色が変化する表示マークを用い、判定中は黄色表示、判定結果が「ＯＫ」の場合は緑色表示、判定結果が「ＮＧ」の場合は赤色表示とする。さらに、上記の各種表示方法を併用したり、切り替えて使用したりしてもよい。

ここで、図８に示すナビゲーション画面４Ｐ４には、マウス等の入力部５を介して指示情報を入力するボタンマーク５１、５２が表示されている。ボタンマーク５１は、判定部１８に対して「ＯＫ」の判定を行うように指示するためのスイッチであり、ボタンマーク５２は、「ＮＧ」の判定を行うように指示するためのスイッチである。

すなわち、判定部１８は類似度にもとづき判定を行うが誤った判定を行うこともありうる。すなわち、判定部１８が自動的に行う判定が、術者の経験にもとづく判定とは異なる場合もありうる。

このため、自動的に判定を行う判定部に替えて、ＬＩＶＥ画像とＶＢＳ画像とが並べて表示されているナビゲーション画面４Ｐ４を見ながら、ボタンマーク５１、５２を介して入力された指示情報にもとづき、判定を行う半自動の判定部を用いてもよい。

また、判定部１８が判定結果、すなわち類似度をナビゲーション画面に表示してから所定時間経過しても指示情報が入力されない場合は、判定部が自動的に判定を行ってもよい。さらに、ナビゲーション画面にＬＩＶＥ画像とＶＢＳ画像とを表示するだけで、類似度は表示しないで、判定を術者に任せてもよい。さらに、ナビゲーション画面上のＬＩＶＥ画像に、半透明化したＶＢＳ画像を重畳して表示してもよい。

さらに、図９に示すように、ＬＩＶＥ画像とＶＢＳ画像とが並べて表示されているナビゲーション画面４Ｐ４を見ながら術者がボタンマーク５１、５２を介して入力する、指示情報にもとづき、判定部１８が判定を行ってもよい。

また、図１０に示すように、ナビゲーション画面４Ｐ５に、所定の類似度以上の複数のＶＢＳ画像を並べて表示して、その中から画面上のポインタ３９をマウスで選択することにより、一のＶＢＳ画像が選択可能であってもよい。

判定部１８に指示情報を入力する入力手段としては、図８に示すナビゲーション画面４Ｐ３等に表示されたボタンマーク５１、５２を選択するマウスに限られるものではない。例えば、入力手段としては、図示しないが、内視鏡２の操作部に配設されたスイッチ、または、術者が足で操作するフットスイッチ等であってもよい。

なお、上記各種のナビゲーション画面は、選択可能であることが好ましい。

＜ステップＳ２５＞
マッチング処理が完了、すなわち判定部１８の判定結果が「ＯＫ」となったら、座標変換式算出部１２が、第１の位置情報（視点位置情報）および第２の位置情報（先端位置情報）を用いて第１の座標系（ＣＴ座標系）と第２の座標系（内視鏡座標系）との関連付け処理、すなわち座標変換式の算出処理を行う。

厳密には先端位置情報は、処置具８の先端部に配設されたセンサ２１の位置情報である。そしてセンサ２１の位置と撮像部３５の位置との相対位置関係は既知である。このため座標変換式算出部１２は内視鏡座標系による処置具８の先端部の位置情報を、ＣＴ座標系に変換するための座標変換式を算出できる。なお、座標変換機能に加えて、センサ２１の位置（内視鏡位置）を、さらに先端位置（処置具位置）に変換する機能を有する座標変換式が算出されてもよい。

図７に示すように、座標変換式算出部１２の処理が完了すると、ナビゲーション画面４Ｐ２に「完了」が表示される。もちろん処理中のナビゲーション画面に「処理中」または「新ＶＢＳ画像生成中」等の処理状況を示す表示があってもよい。

＜ステップＳ２６＞
ステップＳ２５で求めた座標変換式を用いて、内視鏡座標系で取得された位置情報をＣＴ座標系に変換し、処置具の現在の位置に応じたＶＢＳ画像が表示される。

座標変換式を用いることにより、ＣＴ座標系による、目標部位６の位置と処置具８の位置との対応関係が明らかとなる。このため、たとえ目標部位６が内視鏡画像により確認できない位置にある場合でも、術者はＶＢＳ画像に表示される目標部位６の画像により、処置具８を用いて適切な処置を行うことができる。

以上の説明のように、医療機器１は、処理速度と処理精度とを共に満足することができる。

＜第１実施形態の変形例１〜３＞
次に、第１実施形態の変形例１〜３の医療機器１Ａ〜１Ｃについて説明する。医療機器１Ａ〜１Ｃは、医療機器１と類似しているため同じ構成要素には同じ符号を付し説明は省略する。

医療機器１Ａ〜１Ｃは、いずれも呼吸状態に応じて位置情報を取得しＶＢＳ画像を表示するが、ＶＢＳ画像の比較対象であるライブ画像（静止内視鏡画像）の取得方法に、それぞれの特徴がある。

医療機器１Ａは、被検者７の呼吸状態が、３次元画像データの取得時の状態と同じ状態の内視鏡画像を撮像したときの第１の位置情報を用いて、座標変換式算出部１２が処理を行う。そして、医療機器１Bは、被検者７の心拍状態が、３次元画像データの取得時の状態と同じ状態の内視鏡画像を撮像したときの第１の位置情報を用いて、座標変換式算出部１２が処理を行う。

気管支９の状態は、被検者７の呼吸状態／心拍状態により変化する。すなわち、吸気状態では肺が膨らむため気管支９も膨張する。排気状態では肺が収縮するため気管支も収縮する。また心拍に応じて気管支９は振動する。

変形例１の医療機器１Ａは、ＣＴ装置により３次元画像データを取得するときに吸気状態であった場合には、吸気状態のときにマッチング処理に用いる内視鏡画像を取得する。

一方、変形例２の医療機器１Ｂは、ＣＴ装置により３次元画像データを取得するときの心拍状態と同じ心拍状態のときにマッチング処理に用いる内視鏡画像を取得する。

このため、医療機器１Ａは公知の呼吸状態を検出するための手段を有し、医療機器１Ｂは公知の心拍状態を検出するための手段を有する。

なお、被検者７の呼吸状態および心拍状態が、３次元画像データの取得時の状態と同じ状態の内視鏡画像を撮像したときの第１の位置情報を用いて、座標変換式算出部１２が処理を行ってもよい。

医療機器１Ａおよび１Ｂは、医療機器１と同じ効果を有し、さらにマッチング処理が容易であるために、短時間で処理を完了することができる。

一方、変形例３の医療機器１Ｃは、座標変換式算出部１２が、第２の位置情報（先端位置情報）の変化速度が所定値以下のときに撮像した内視鏡画像の第１の位置情報（視点位置情報）を用いて処理を行う。

被検者７の大きな動作等により撮像部３５が大きく移動すると、内視鏡画像が不鮮明になることがある。撮像部３５の移動速度は、先端位置情報の変化速度としてセンサ２１により取得できる。

医療機器１Ｃは、医療機器１と同じ効果を有し、さらに安定した状態で撮像された内視鏡画像を用いてマッチング処理を行うために、短時間で処理を完了することができる。

＜第１実施形態の変形例４＞
次に、第１実施形態の変形例４の医療機器１Ｄについて説明する。医療機器１Ｄは、医療機器１と類似しているため同じ構成要素には同じ符号を付し説明は省略する。

医療機器１Ｄは、座標変換式算出部１２が、類似度を算出するための画像情報量が所定値以上の内視鏡画像を撮像したときの第１の位置情報（視点位置情報）を用いて処理を行う。

画像の情報量が少ない単純な画像では、マッチング処理を行って、高い類似度が得られたとしても、その信頼性は低い。例えば、分岐部から遠い位置で撮影された画像または管腔壁に接近した状態で撮影された画像では、精度の高い座標変換式を算出することはできない。

画像の情報量は、例えば特徴を抽出したときのデータ量で判断することができる。医療機器１Ｄでは情報量が所定値以上の内視鏡画像を用いて座標変換式算出部１２が処理を行う。

このため、医療機器１Ｄは医療機器１と同じ効果を有し、さらに精度の高い座標変換式を算出することができる。

＜第１実施形態の変形例５＞
次に、第１実施形態の変形例５の医療機器１Ｅについて説明する。医療機器１Ｅは、医療機器１と類似しているため同じ構成要素には同じ符号を付し説明は省略する。

図１１Ａ〜図１１Ｃに示すように、先端部３１が動いているときは、もちろん、静止しているときでも、気管支９の状態は呼吸状態および心拍状態等により変化する。このため、取得される内視鏡画像は変化する。

医療機器１Ｅは、第２のモードでは、撮像部３５が、所定の時間間隔で複数の内視鏡画像を取得する。そして、類似度算出部１４が、それぞれの内視鏡画像と類似したそれぞれのＶＢＳ画像との類似度を算出する。そして、座標変換式算出部１２が、類似度が最大の画像の位置情報を用いて処理を行う。

すなわち、例えば、図１２に示すように、ナビゲーション画面４Ｐ６には、複数の内視鏡画像と、それぞれの内視鏡画像と類似したＶＢＳ画像と、が、類似度とともに表示される。図１２においては、左上の画像の類似度が最も高く、それらの画像の位置情報を用いて処理が行われることになる。

なお、類似度にもとづく自動選択に替えて、ナビゲーション画面４Ｐ６に表示されたポインタ３９をマウス等で操作することにより、画像が選択されてもよい。

医療機器１Ｅは医療機器１と同じ効果を有し、さらに精度の高い座標変換式を算出することができる。

＜第２実施形態＞
次に、第２実施形態の医療機器１Ｆについて説明する。医療機器１Ｆは、医療機器１と類似しているため同じ構成要素には同じ符号を付し説明は省略する。

図１３および図１４に示すように、医療機器１Ｆでは、内視鏡２の先端部３１にも第３の位置情報取得手段であるセンサ２３が配設されている。センサ２３はセンサ２１と同じ機能を有する。すなわち、医療機器１Ｆは、挿入部３０が先端部３１に、第２の座標系における位置および方向および回転角からなる第３の位置情報を取得する第３の位置情報取得手段を有する。そして、先端位置算出部２０Ｆは、処置具８の先端部の位置情報だけでなく、内視鏡２の先端部３１の位置情報も、内視鏡座標系にもとづいて算出する。

座標変換式算出部１２Ｆは、センサ２３の位置情報と視点位置情報とにもとづいて、座標変換式を算出する。すなわち、座標変換式算出部１２Ｆは、最初に、内視鏡座標系のセンサ２３の位置情報を、ＣＴ座標系に変換する座標変換式を算出する。

そして、医療機器１Ｆでは、センサ２３の位置情報を基準に、処置具８の先端部の位置情報が算出される。医療機器１Ｆは、位置関係が常に固定されているセンサ２３と撮像部３５との位置関係を基準とする。このため、医療機器１Ｆは医療機器１が有する効果を有し、さらにより精度の高い座標変換式が算出可能である。

なお、医療機器１Ｆにおいても、既に説明した第１実施形態の変形例１Ａ〜１Ｅと同じ構成／機能を付加してもよい。

すなわち、本発明は、上述した実施形態または変形例に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変、または組み合わせ等ができる。

本出願は、２０１１年２月８日に日本国に出願された特願２０１１−０２５１２０号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲、図面に引用されたものとする。

本発明の一態様の医療機器は、被検体の体腔内において内視鏡画像を撮像する撮像部が配設され内部を挿入するチャンネルのチャンネル開口が形成された先端部、を有する挿入手段と、予め取得される前記被検体の第１の座標系にもとづく３次元画像データを、記憶する記憶手段と、前記３次元画像データにもとづき、前記第１の座標系による位置、方向および回転角からなる第１の位置情報を視線パラメータとする、複数の仮想内視鏡画像を生成する仮想内視鏡画像生成手段と、前記仮想内視鏡画像生成手段により生成された仮想内視鏡画像と、前記撮像部により撮像された内視鏡画像と、の類似度を算出する類似度算出手段と、前記類似度に対して所定の閾値を基準として類似判定を行う判定手段と、前記第１の座標系とは異なる第２の座標系における位置、方向および回転角からなる第２の位置情報を取得するための位置情報取得手段を有し、前記チャンネル開口から突出する医療器具と、前記チャンネル開口からの前記医療器具の突出を検出した場合、ナビゲーションモードを、処理速度優先のモードから、前記判定手段における前記閾値を高く設定した処理精度優先のモードに切り替えるモード切替手段と、前記処理精度優先のモードにおける前記判定手段の判定結果に基づいて、前記第２の位置情報を前記第１の座標系に変換する処理を行う座標変換式算出手段と、前記座標変換式算出手段の変換処理に基づいて、前記医療器具の位置に応じた仮想内視鏡画像を表示する表示手段と、を具備する。

Claims (14)

1. 被検体の体腔内において内視鏡画像を撮像する撮像手段が配設されていると共に、内部を挿入するチャンネルのチャンネル開口が形成された、先端部を有する挿入手段と、
   予め取得される前記被検体の第１の座標系にもとづく３次元画像データを、記憶する記憶手段と、
   前記３次元画像データにもとづき、前記第１の座標系による位置および方向および回転角からなる第１の位置情報を視線パラメータとする、複数の仮想内視鏡画像を生成する仮想内視鏡画像生成手段と、
   一の前記仮想内視鏡画像と、前記内視鏡画像と、の類似度を算出する類似度算出手段と、
   前記類似度にもとづいた判定を行う判定手段と、
   前記判定手段の判定結果に応じて、前記一の仮想内視鏡画像の前記第１の位置情報を前記撮像手段の位置情報に設定する位置設定手段と、
   第２の座標系における位置および方向および回転角からなる第２の位置情報を取得するための位置情報取得手段を有する、前記チャンネル開口から突出する医療器具と、
   前記判定手段の判定結果に応じて、前記第１の位置情報および前記第２の位置情報を用いて前記第１の座標系と前記第２の座標系との関連付け処理を行う座標変換式算出手段と、を具備することを特徴とする医療機器。
2. ナビゲーションモードを、第１のモードから、前記判定手段が判定を行う基準となる前記類似度の閾値が、前記第１のモードのときよりも高く設定される第２のモードに切り替えるモード切替手段を、具備し、
   前記座標変換式算出手段が、前記第２のモードにおける前記判定結果に応じて、前記関連付け処理を行うことを特徴とする請求項１に記載の医療機器。
3. 前記モード切替手段が、前記医療器具の前記チャンネル開口からの突出を検出し、前記ナビゲーションモードを切り替えることを特徴とする請求項２に記載の医療機器。
4. 前記モード切替手段が、前記医療器具の画像が所定長以上含まれている前記内視鏡画像にもとづき、前記医療器具の前記チャンネル開口からの突出を検出することを特徴とする請求項３に記載の医療機器。
5. 前記第１のモードが、術者が前記先端部を前記体腔内の所定位置に挿入するための支援をする処理速度優先のモードであり、前記第２のモードが、術者が前記医療器具を用いて処置を行うための支援をする処理精度優先のモードであることを特徴とする請求項２に記載の医療機器。
6. 前記座標変換式算出手段が、前記被検体の呼吸状態または心拍状態の少なくともいずれかが、前記３次元画像データの取得時の状態と同じ状態の前記内視鏡画像を撮像したときの前記第１の位置情報を用いて処理を行うことを特徴とする請求項２に記載の医療機器。
7. 前記座標変換式算出手段が、前記第２の位置情報の変化速度が所定値以下のときに撮像した前記内視鏡画像の前記第１の位置情報を用いて処理を行うことを特徴とする請求項２に記載の医療機器。
8. 前記座標変換式算出手段が、前記類似度を算出するための画像情報量が所定値以上の前記内視鏡画像を撮像したときの前記第１の位置情報を用いて処理を行うことを特徴とする請求項２に記載の医療機器。
9. 前記第２のモードでは、前記撮像手段が複数の前記内視鏡画像を取得し、前記類似度算出手段が、それぞれの前記内視鏡画像と類似したそれぞれの前記仮想内視鏡画像との前記類似度を算出し、前記座標変換式算出手段が、前記類似度が最大の画像の位置情報を用いて処理を行うことを特徴とする請求項２に記載の医療機器。
10. 前記類似度を表示する表示手段を具備することを特徴とする請求項１に記載の医療機器。
11. 前記類似度を、グラフィック表示することを特徴とする請求項１０に記載の医療機器。
12. 前記表示手段に前記仮想内視鏡画像と前記内視鏡画像とを表示することを特徴とする請求項１０に記載の医療機器。
13. 前記判定結果に対して指示情報を入力する入力手段、を具備することを特徴とする請求項１０に記載の医療機器。
14. 前記挿入手段が、前記先端部に、前記第２の座標系における位置および方向および回転角からなる第３の位置情報を取得する第３の位置情報取得手段を有することを特徴とする請求項２に記載の医療機器。

Images