JP5841335B2 - 解剖学的構造の統計モデルに基づく撮像データのマルチモダリティ融合のための方法およびシステム - Google Patents

解剖学的構造の統計モデルに基づく撮像データのマルチモダリティ融合のための方法およびシステム Download PDF

Info

Publication number
JP5841335B2
JP5841335B2 JP2010538993A JP2010538993A JP5841335B2 JP 5841335 B2 JP5841335 B2 JP 5841335B2 JP 2010538993 A JP2010538993 A JP 2010538993A JP 2010538993 A JP2010538993 A JP 2010538993A JP 5841335 B2 JP5841335 B2 JP 5841335B2
Authority
JP
Japan
Prior art keywords
ultrasound
feature
image
ventricular
invisible
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010538993A
Other languages
English (en)
Other versions
JP2011506033A (ja
Inventor
チャン,レイモンド
マンツケ,ロベルト
ダラル,サンディープ
トゥルヌー,フランソワ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2011506033A publication Critical patent/JP2011506033A/ja
Application granted granted Critical
Publication of JP5841335B2 publication Critical patent/JP5841335B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • A61B6/503Clinical applications involving diagnosis of heart
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5247Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0883Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the heart
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30048Heart; Cardiac

Description

出願人は、2007年12月18日に出願された米国仮出願第61/014,451号の利益を主張する。関連出願は、2007年12月18日に出願された米国仮出願第61/014,451号および2008年9月24日に出願された米国仮出願第61/099637号である。
本発明は、心臓の心室心外膜のX線および超音波画像内の解剖学的特徴(たとえば心外膜表面および目印)に基づく心臓三次元X線および超音波情報を統合する方法およびシステムに関する。
心臓介入を受ける患者は典型的にはきわめて脆弱で、心不全状態にある。そうした患者は、たとえば心室造影のような手順に典型的である大容量の造影剤注入に耐えられないこともしばしばである。これらのシナリオのいくつかでは、心室造影を必要とするマルチモード画像ベースの位置合わせは倫理的に実行できない。
たとえば、心臓再同期療法は右および左の心臓チャンバ内に両心室ペースメーカーのリード線を埋め込むことに依拠する。心臓収縮を同期させるため、左心室リード位置は、最大の機械的遅延の領域内に電極先端を位置させるよう冠静脈解剖学的構造内で操作される。回転静脈造影図から導かれる三次元静脈モデルが、医師がリード案内のために有望な静脈分枝を特定するのを助ける。一方、三次元超音波撮像に基づく同期不全評価は電極先端配置のための目標位置を特定するのを助ける。X線および超音波からの情報を効果的に利用するため、X線画像と超音波画像の間の位置合わせ(すなわち空間的整合)が計算される必要がある。X線画像と超音波画像を位置合わせするための一つの心内膜画像技術は、心室造影に基づくLV〔左心室〕チャンバ解剖学的構造を、超音波で撮像された同じチャンバと組み合わせて位置合わせのために使う。しかしながら、心臓再同期療法(cardiac resynchronization therapy)を受ける患者は典型的にはきわめて脆弱であり心不全状態にあり、したがって、心室造影のような手順に一般に必要とされる大容量の造影剤注入に耐えられないこともしばしばである。したがって、X線画像と超音波画像の、心室造影に基づく位置合わせは、心機能および腎機能が貧弱なCRT患者にとっては問題である。
Elco Oost et al.、"Automated contour detection in X-ray left ventricular angiograms using multiview active appearance models and dynamic programming"、IEEE Trans Med Imaging September 2006, Alison Noble et al.、"Ultrasound image segmentation: a survey"、IEEE Trans Med Imaging, August 2006 Audette et al.、Medical Image Analysis, 2000
本発明の手法は、心室造影を完全に回避し、患者が大容量の造影剤による造影に耐えられない状況においてより臨床的に有望である。
本発明の一つの形は、心室心外膜位置合わせ方法であって、(1)心臓の心室心外膜の超音波画像内で不可視の一つまたは複数の解剖学的特徴の表現、(2)心臓の心室心外膜のX線画像内で可視の解剖学的特徴(一つまたは複数)の同定および(3)超音波画像内の不可視の解剖学的構造(一つまたは複数)の表現およびX線画像内で可視の解剖学的特徴(一つまたは複数)の同定に基づく、心室心外膜の超音波画像およびX線画像の位置合わせ、に関わる。解剖学的特徴の例としては、これに限られないが、心外膜表面および冠状静脈洞の一部または全体が含まれる。
本発明の第二の形は、プロセッサおよび該プロセッサと通信するメモリを有するマルチモダリティ位置合わせシステムであって、メモリはプロセッサによって、(1)心臓の心室心外膜の超音波画像内で不可視の一つまたは複数の解剖学的特徴を表現し、(2)心臓の心室心外膜のX線画像内で可視の解剖学的特徴(一つまたは複数)を同定し、(3)超音波画像内の不可視の解剖学的構造(一つまたは複数)の表現およびX線画像内で可視の解剖学的特徴(一つまたは複数)の同定に基づく、心臓の心室心外膜の超音波画像およびX線画像を位置合わせする、よう実行可能なプログラミング命令を記憶する。
本発明の上記の形および他の形ならびに本発明のさまざまな特徴および利点は、付属の図面との関連で読まれる本発明のさまざまな実施形態の以下の詳細な説明から明白になるであろう。詳細な説明および図面は単に本発明を例解するものであって限定するものではなく、本発明の範囲は付属の請求項およびその等価物によって定義される。
本発明に基づく統合された心外膜殻/冠静脈モデルの例示的な実施形態を示す図である。 X線および超音波データセットの例示的な位置合わせを示す図である。 本発明に基づく心室心外膜位置合わせ方法を実装するための本発明に基づくさまざまなシステムのブロック図を示す図である。 本発明に基づく心室心外膜位置合わせ方法の例示的な実施形態を表すフローチャートである。 本発明に基づく超音波撮像段階の例示的な実施形態を表すフローチャートである。 本発明に基づくX線撮像段階の例示的な実施形態を表すフローチャートである。 本発明に基づく撮像位置合わせ段階の例示的な実施形態を表すフローチャートである。 本発明に基づく統計モデル生成/マッピング方法の例示的な実施形態を表すフローチャートである。 本発明に基づく例示的な統計モデル生成およびマッピングを示す図である。 本発明に基づく例示的な撮像位置合わせを示す図である。
本発明は、心臓の左および/または右の心室心内膜表面の輪郭特定のために心室造影を使う代わりに、心臓の左心室および/または右心室の位置特定のために心室心外膜を使ってもよいという認識を前提としている。具体的には、心室心外膜のX線画像が自動的、半自動的または手動でセグメント化されて表面モデルを生成することができる。その表面モデル上に、X線画像によって視覚化された有望な解剖学的特徴の位置を注釈付けできる。さらに、三次元超音波については、大体積撮像が可能にされることができる、あるいは複数のより小さな体積が心室心外膜全体の形を捉えるよう融合されることができる。これにより、有望な解剖学的構造がしばしば拡大され、可能性としては超音波撮像において可視となる。もし超音波画像において可視であれば、解剖学的特徴の位置は自動的、半自動的または手動で超音波画像上に注釈付けされることができる。
上述したように、本発明のX線/超音波統合戦略は、共有される特徴の位置合わせに基づく。たとえば、図2に示されるように、超音波データから同定された右心室(RV: right-ventricular)リード先端位置25および冠静脈中心線位置26が、回転X線から導かれた冠静脈モデル中心線の位置に合致するよう変換された。場合によっては、これらの特徴は超音波データにおいて容易に識別できないことがありうる。本発明はさらに、不可視の解剖学的特徴の、得られた超音波データにおいて可視の他の特徴に対する位置について三次元確率マップ(三次元蓋然性マップ)を定義するために統計的モデルを導出し、使用することを前提とする。具体的には、関心のある解剖学的構造の統計的モデルは、心臓コンピュータ・トポグラフィー・データセットのライブラリから導出されうる。各統計的モデルは超音波空間における同じ特徴の位置を推定し、推定された特徴位置をX線データセットにおいて可視である実際の特徴位置に変換する位置合わせを実行するために使われる。この工程後、超音波データには位置合わせのために使われる実際の解剖学的構造がないにもかかわらず、超音波およびX線データの成功裏の融合が達成されている。
たとえば、図1を参照すると、心臓10の心室心外膜のX線画像がセグメント化されて、表面モデルを生成することができる。この表面モデル上に、X線画像によって心臓10の後方ビューにおいて視覚化される心臓10の左心室の心外膜表面11の位置、心臓10の右心室の心外膜表面12の位置および/または冠状静脈洞13の位置が注釈付けされることができる。さらに、三次元超音波については、大体積撮像が可能にされることができる、あるいは複数のより小さな体積が心臓10の心室心外膜全体の形を捉えるよう融合されることができる。これにより、冠状静脈洞13は超音波撮像では不可視であるが、本発明の統計的モデル化によって表現されることができる。よって、心臓10の左心室の心外膜表面11の位置、心臓10の右心室の心外膜表面12の位置および/または冠状静脈洞13の位置が、自動的、半自動的または手動で超音波画像上に注釈付けされることができる。
本発明の最終結果は、外科的目的のための心外膜表面/冠静脈統合、たとえば図1に示される統合された心外膜表面/冠静脈統合20を得るための超音波画像とX線画像の位置合わせである。この例において、統合20は心内膜表面21を含み、表面21から離れた冠状静脈洞22ならびに表面21に関係する目印〔ランドマーク〕23および24(たとえばカテーテル先端)をもつ。
本発明のさらなる理解を容易にするために、図3は、X線システム30、超音波システム40ならびにプロセッサ51およびメモリ51を有する新しい独特なマルチモダリティ位置合わせシステム50を示している。メモリ51は、図4に示されるフローチャート60によって表される心室心外膜位置合わせ方法を実装するためのプロセッサ51によって実行可能な命令を記憶している。
図3を参照するに、X線システム30は、脈管撮像心臓10についてのX線画像31を生成し、X線画像31を表すX線撮像データ32をシステム50に通信するよう構造的に構成された任意のX線システムである。相補的に、超音波システム40は、心臓10の全体積三次元または複数体積三次元超音波撮像の三次元超音波画像41を生成し、超音波画像41を表す超音波撮像データ42をシステム50に通信するよう構造的に構成された任意の超音波システムである。マルチモダリティ位置合わせシステム50は、メモリ52内に記憶されプロセッサ51によって実行可能な命令により、フローチャート60を実装する目的でX線静脈造影データ32および超音波データ42を処理するよう構造的に構成されている。
具体的には、フローチャート60の超音波撮像段階P61は、プロセッサ51が、超音波画像41にない一つまたは複数の解剖学的特徴を表現するための命令を実行することを含む。フローチャート60のX線撮像段階P62は、プロセッサ51が、X線画像31に示される一つまたは複数の解剖学的特徴を同定するための命令を実行することを含む。フローチャート60の画像位置合わせ段階P63は、プロセッサ51が、解剖学的特徴のX線同定および超音波表現に基づいて画像31および41をマッピングするための命令を実行することを含む。ここでもまた、解剖学的構造の例は、これに限られないが、図1および図2に示されるような心外膜表面11および12ならびに冠状静脈洞13を含む。
実際上は、超音波撮像段階P61は典型的には手術前イベントとして実行され、一方、X線撮像段階P62および画像位置合わせ段階P63は手術イベントとして実行される。にもかかわらず、本発明の目的のためには、段階P61〜P63は、必要に応じて、任意の適用可能な心血管手順を実行するために実施できる。
図5に示されるフローチャート70は、超音波撮像段階P61の例示的な実施形態である。心外膜表面11および12ならびに冠状静脈洞13が解剖学的特徴の役割をする。図5を参照すると、フローチャート70の段階S71は、プロセッサ51が、超音波データ42から三次元の心外膜殻(shell)を生成することを含む。ここで、解剖学的構造の一つまたは複数が超音波画像41からは不可視でありうる(すなわち、解剖学的構造は検出不可能であるまたは明確に同定されることができない)。よって、フローチャート70の任意的な段階S72は、プロセッサ51が、不可視の解剖学的特徴(単数または複数)の統計的モデルを生成することを含み、フローチャート70の任意的な段階S73は、プロセッサ51が、不可視の解剖学的特徴(単数または複数)の統計的モデルを三次元心外膜殻にマッピングすることを含む。段階S72の統計的モデル生成は、任意の型(たとえば計算機断層撮影および磁気共鳴)のX個の心臓データセットを有するライブラリから導出される。ここでX≧1である。さらに、段階S74の統計的モデル・マッピングは、そうした不可視の解剖学的特徴の三次元心外膜殻上での位置を推定する。
段階S72およびS73がもしあったとして完了すると、フローチャート70の段階S74は、プロセッサ51が、フローチャート80の段階S83の間に定義された凸包セグメント(単数または複数)に合致するよう使うことのできる、三次元心外膜殻の一つまたは複数のセグメントを定義することを含み、フローチャート70の段階S75は、プロセッサ51が、冠状静脈洞13の位置を、三次元心外膜殻上に注釈付けすることを含む。ここでもまた、冠状静脈洞13の位置は、冠状静脈洞13の空間的位置座標および/または冠状静脈洞13の角度配向座標を含む。
図6に示されるフローチャート80は、X線撮像段階P62の例示的な実施形態である。心外膜表面11および12ならびに冠状静脈洞13が解剖学的特徴の役割をする。図6を参照すると、フローチャート80の段階S81は、プロセッサ51が、X線静脈造影データ32から三次元静脈モデルを生成することを含み、フローチャート80の段階S82は、プロセッサ51が、心臓10の心室心外膜全体を近似する目的のために三次元静脈モデルから三次元凸包(convex hull)を生成することを含む。三次元凸包は心外膜表面11および12の限られた部分にわたって正確でありうる(心尖の包の形(apical hull shape)は正確でないことがある)という事実に鑑み、フローチャート80の段階S83は、プロセッサ51が、心臓10の心室心外膜を正確に反映する三次元凸包の一つまたは複数のセグメントを定義することを含む。これにより、そうした凸包セグメントは心臓10の心室心外膜の超音波撮像に合致するために使われることができる。これについては本稿でさらに後述する。フローチャート80の段階S84は、プロセッサ51が、冠状静脈洞13の位置を三次元凸包上に注釈付けすることを含む。その位置は、冠状静脈洞13の空間的位置座標および/または冠状静脈洞13の角度配向座標を含む。
図7に示されるフローチャート90は、撮像位置合わせ段階P63の例示的な実施形態である。心外膜表面11および12ならびに冠状静脈洞13が解剖学的特徴の役割をする。図7を参照すると、フローチャート90の段階S91は、プロセッサ91が、必要に応じて一つまたは複数の位置合わせパラメータを推定することを含み、それによりフローチャート90の段階S92の間に凸包と心外膜表面セグメントとの間の最小合計距離(minimum total distance)を得、それによりフローチャート90の段階S93の間に、三次元凸包における冠状静脈洞13の位置と三次元心外膜表面殻との間の最小合計距離を得る。そのような最小合計距離を得たら、フローチャート90の段階S94は、プロセッサ51が、段階S92およびS93の最小合計距離メトリックに基づいて、X線画像31および超音波画像41をマッピングすることを含む。あるいはまた、フローチャート90の段階S94は、プロセッサ51が、破線で示されるように、段階S92または段階S93のいずれかの最小合計距離決定に基づいてX線画像31および超音波画像41をマッピングすることを含むことができる。
さらなる代替的な実施形態では、追加的な内的目印(たとえば図2に示される解剖学的目印21)および/または外的目印(たとえば図2に示されるカテーテル/電極先端22)が、注釈付けおよび/またはX線画像と超音波画像との間の距離最小化のために使用できる。さらに、段階S92および/またはS93において、合計距離メトリックまたは他の任意の適切な当てはめ良好性パラメータ技法が使用できる。
結果は、たとえば介入X線/EP領域手順、特に心臓再同期療法のような適用可能な心臓血管手順を実施する目的のための、心室殻/冠静脈モデル統合(たとえば図1および図2に示される心内膜殻/冠静脈モデル統合20)である。
図8は、本発明の統計的モデル生成/マッピングのさらなる理解を容易にするためのフローチャート100を示している。図8を参照するに、フローチャート100の段階S101は、プロセッサ51が、統計的モデルにおいて、超音波画像41に示される一つまたは複数の基準点(fiducial point)をマッピングすることを含み、フローチャート100の段階S102は、プロセッサ51が、不可視の解剖学的特徴の平均位置を計算することを含む。
たとえば、図9は、心臓計算機断層撮影および超音波において可視の四つの僧帽弁基準点に対する、冠静脈中心線の近位の3cmの描画に基づく統計的モデル生成100を示している。四つの僧帽弁基準点(左下の図の112)の三次元位置は、12個の心臓計算機断層撮影体積の、多平面の再フォーマットされたスライスから決定される。冠静脈の近位3cmの中心線位置も各患者について定義113される。これらのマーカーはすべて、共通の参照空間中にマッピングされ、三次元冠静脈中心線114の平均位置が計算される。中心線114は、三次元超音波データセットにおいて容易に同定可能な僧帽弁基準点に対する推定された近位静脈中心線位置を表す。
図8を参照すると、段階S101およびS102が完了すると、段階S103は、プロセッサ51が、超音波データセット42において基準点(単数または複数)を同定することを含み、フローチャート100の段階S104は、プロセッサ51が、超音波データセット42内で不可視の解剖学的特徴の計算された平均位置を位置合わせすることを含む。
たとえば、図9を参照するに、統計的モード・マッピング101は、心臓計算機断層撮影体積において測定され、かつ超音波体積データ42において容易に同定できる同じ僧帽弁基準点を使う。これにより、僧帽弁基準点は、心エコーからの左心室殻を、近位冠静脈の統計的モデルと位置合わせするために使われる。ここでもまた、示されるモデルを構築するために12患者からの冠静脈測定が平均された。静脈モデル中心線(左の図で破線の緑の線、右側の三次元レンダリングにおける赤い曲線状のセグメント)は、12患者にわたる平均三次元位置である。一方、モデル直径は殻セグメント位置における中心線位置の1標準偏差を表す。図10は、超音波空間における近位静脈モデルの、X線空間に存在する冠静脈の対応するセグメントへの空間的変換に基づく、超音波空間とX線空間の位置合わせを示している。最終結果は、左下の回転X線投影ならびに対応する右下の融合されたLV殻(3DUSから)および静脈モデル(回転X線から)を示す。
図1〜図10を参照して、当業者は本発明のさまざまな恩恵を理解するであろう。それには、これに限られないが、外部追跡システムを削減するまたはなくすことが含まれ、これは低い臨床上のオーバーヘッドにつながり、非常に小さな造影剤ボーラスを許容/要求する。さらに、実際上、実行される特定の心臓手順および該心臓手順を実行するために使用される特定の設備に依存して、本発明の注釈付け、セグメント化および位置合わせ要求についてのさまざまな技法が使用されうる。好ましくは、(1)三次元凸包のセグメント化は非特許文献1から導出され、(2)三次元心外膜表面殻のセグメント化は非特許文献2から導出され、(3)X線画像および超音波画像の位置合わせは非特許文献3から導出される。
本稿で開示される本発明の実施形態は現在のところ好ましいと考えられているが、本発明の精神および範囲から外れることなくさまざまな変更および修正ができる。本発明の範囲は付属の請求項に示されており、等価物の意味および範囲内にはいるあらゆる変更は本発明の範囲に包含されることが意図される。

Claims (18)

  1. 心室心外膜位置合わせ方法であって:
    心臓の心室心外膜のX線画像をプロセッサによって受領する段階と;
    前記心室心外膜の超音波画像を前記プロセッサによって受領する段階であって、前記超音波画像は超音波可視の特徴および超音波不可視であり前記X線画像において可視である少なくとも一つの特徴を含む領域の画像である、段階と;
    三次元データセットにおいて前記超音波可視の特徴に対する少なくとも一つの超音波不可視の特徴の位置を示す統計的モデルを、心臓データセットのライブラリから生成する段階と;
    前記統計的モデルを使って、前記プロセッサによって、前記超音波画像における少なくとも一つの超音波可視の特徴の位置から、前記少なくとも一つの超音波不可視の特徴の位置を推定して前記少なくとも一つの超音波不可視の特徴の表現を導出する段階と;
    前記X線画像内で可視の前記少なくとも一つの特徴を同定する段階と;
    前記少なくとも一つの超音波不可視の特徴の表現および前記X線画像内で可視の前記少なくとも一つの特徴の同定に基づいて、心臓の心室心外膜の前記X線画像および前記超音波画像を位置合わせする段階とを含む、
    方法。
  2. 請求項1記載の心室心外膜位置合わせ方法であって、前記X線画像内で可視の前記少なくとも一つの特徴が、心臓の心外膜表面および冠状静脈洞のうちの少なくとも一方を含む、方法。
  3. 請求項1記載の心室心外膜位置合わせ方法であって、前記少なくとも一つの超音波不可視の特徴の表現がさらに:
    前記超音波画像における前記統計的モデルのマッピングを含む、
    方法。
  4. 請求項1記載の心室心外膜位置合わせ方法であって、少なくとも心臓データセットを含む前記ライブラリが、計算機断層撮影データセットおよび磁気共鳴データセットのうちの少なくとも一方を含む、方法。
  5. 請求項1記載の心室心外膜位置合わせ方法であって、前記少なくとも一つの超音波不可視の特徴の表現が:
    前記超音波画像内で識別可能な少なくとも一つの基準点および少なくとも一つの心臓データセットを含む前記ライブラリの、共通の参照空間中へのマッピングを含む、
    方法。
  6. 請求項5記載の心室心外膜位置合わせ方法であって、前記少なくとも一つの超音波不可視の特徴の表現がさらに:
    前記共通の参照空間における前記少なくとも一つの超音波不可視の特徴の、前記少なくとも一つの基準点に対する平均位置の計算を含む、
    方法。
  7. 請求項6記載の心室心外膜位置合わせ方法であって、前記少なくとも一つの超音波不可視の特徴の表現がさらに:
    前記超音波画像における前記少なくとも一つの超音波不可視の特徴の同定を含む、
    方法。
  8. 請求項3記載の心室心外膜位置合わせ方法であって、前記超音波画像における前記少なくとも一つの超音波不可視の特徴の前記統計的モデルのマッピングがさらに、
    前記超音波画像における、前記少なくとも一つの超音波不可視の特徴の平均位置の位置合わせを含む、
    方法。
  9. 請求項5記載の心室心外膜位置合わせ方法であって、少なくとも心臓データセットを含む前記ライブラリが、計算機断層撮影データセットおよび磁気共鳴データセットのうちの少なくとも一方を含む、方法。
  10. プロセッサおよび該プロセッサと通信するメモリを有するマルチモダリティ位置合わせシステムであって、前記メモリは、前記プロセッサによって、
    心臓の心室心外膜のX線画像を生成し;
    超音波可視の特徴と、超音波不可視であり前記X線画像において可視である少なくとも一つの特徴とを含む領域の画像である、前記心室心外膜の超音波画像を生成し;
    三次元データセットにおいて前記超音波可視の特徴に対する少なくとも一つの超音波不可視の特徴の位置を示す統計的モデルを、心臓データセットのライブラリから生成し;
    前記統計的モデルを使って、前記超音波画像における少なくとも一つの超音波可視の特徴の位置から、前記少なくとも一つの超音波不可視の特徴の位置を推定して前記少なくとも一つの超音波不可視の特徴の表現を導出し;
    心室心外膜のX線画像内で可視の前記少なくとも一つの特徴を同定し;
    前記少なくとも一つの超音波不可視の特徴の表現および前記X線画像内で可視の前記少なくとも一つの特徴の同定に基づいて、心室心外膜の前記X線画像および前記超音波画像を位置合わせする、
    よう実行可能なプログラミング命令を記憶する、システム。
  11. 請求項10記載の心室心外膜位置合わせシステムであって、前記X線画像内で可視の前記少なくとも一つの特徴が、心臓の心外膜表面および冠状静脈洞のうちの少なくとも一方を含む、システム。
  12. 請求項10記載の心室心外膜位置合わせシステムであって、心臓の心室心外膜の超音波画像内における前記少なくとも一つの超音波不可視の特徴の表現がさらに:
    前記超音波画像における前記統計的モデルのマッピングを含む、
    システム。
  13. 請求項10記載の心室心外膜位置合わせシステムであって、少なくとも心臓データセットを含む前記ライブラリが、計算機断層撮影データセットおよび磁気共鳴データセットのうちの少なくとも一方を含む、システム。
  14. 請求項10記載の心室心外膜位置合わせシステムであって、前記少なくとも一つの超音波不可視の特徴の表現が:
    前記超音波画像内で識別可能な少なくとも一つの基準点および少なくとも一つの心臓データセットを含む前記ライブラリの、共通の参照空間中へのマッピングを含む、
    システム。
  15. 請求項14記載の心室心外膜位置合わせシステムであって、前記少なくとも一つの超音波不可視の特徴の表現がさらに:
    前記共通の参照空間における前記少なくとも一つの超音波不可視の特徴の、前記少なくとも一つの基準点に対する平均位置の計算を含む、
    システム。
  16. 請求項15記載の心室心外膜位置合わせシステムであって、前記少なくとも一つの超音波不可視の特徴の表現がさらに:
    前記超音波画像における、前記少なくとも一つの超音波不可視の特徴の前記統計的モデルのマッピングを含む、
    システム。
  17. 請求項16記載の心室心外膜位置合わせシステムであって、前記超音波画像における前記少なくとも一つの超音波不可視の特徴の前記統計的モデルのマッピングがさらに、
    前記超音波画像における前記少なくとも一つの超音波不可視の特徴の平均位置の位置合わせを含む、
    システム。
  18. 請求項14記載の心室心外膜位置合わせシステムであって、少なくとも心臓データセットを含む前記ライブラリが、計算機断層撮影データセットおよび磁気共鳴データセットのうちの少なくとも一方を含む、システム。
JP2010538993A 2007-12-18 2008-12-12 解剖学的構造の統計モデルに基づく撮像データのマルチモダリティ融合のための方法およびシステム Expired - Fee Related JP5841335B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US1445107P 2007-12-18 2007-12-18
US61/014,451 2007-12-18
PCT/IB2008/055273 WO2009081318A1 (en) 2007-12-18 2008-12-12 System for multimodality fusion of imaging data based on statistical models of anatomy

Publications (2)

Publication Number Publication Date
JP2011506033A JP2011506033A (ja) 2011-03-03
JP5841335B2 true JP5841335B2 (ja) 2016-01-13

Family

ID=40551906

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010538993A Expired - Fee Related JP5841335B2 (ja) 2007-12-18 2008-12-12 解剖学的構造の統計モデルに基づく撮像データのマルチモダリティ融合のための方法およびシステム

Country Status (7)

Country Link
US (1) US20100254583A1 (ja)
EP (1) EP2225724A1 (ja)
JP (1) JP5841335B2 (ja)
CN (1) CN101903909B (ja)
BR (1) BRPI0821279A8 (ja)
RU (1) RU2472442C2 (ja)
WO (1) WO2009081318A1 (ja)

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9826942B2 (en) 2009-11-25 2017-11-28 Dental Imaging Technologies Corporation Correcting and reconstructing x-ray images using patient motion vectors extracted from marker positions in x-ray images
US9082177B2 (en) * 2009-11-25 2015-07-14 Dental Imaging Technologies Corporation Method for tracking X-ray markers in serial CT projection images
US9082182B2 (en) * 2009-11-25 2015-07-14 Dental Imaging Technologies Corporation Extracting patient motion vectors from marker positions in x-ray images
US9082036B2 (en) * 2009-11-25 2015-07-14 Dental Imaging Technologies Corporation Method for accurate sub-pixel localization of markers on X-ray images
WO2012109641A2 (en) * 2011-02-11 2012-08-16 Emory University Systems, methods and computer readable storage mediums storing instructions for 3d registration of medical images
US10376179B2 (en) 2011-04-21 2019-08-13 Koninklijke Philips N.V. MPR slice selection for visualization of catheter in three-dimensional ultrasound
US8972228B2 (en) * 2011-05-03 2015-03-03 Medtronic, Inc. Assessing intra-cardiac activation patterns
DE102011079561B4 (de) 2011-07-21 2018-10-18 Siemens Healthcare Gmbh Verfahren und Röntgengerät zum zeitlich aktuellen Darstellen eines bewegten Abschnitts eines Körpers, Computerprogramm und Datenträger
JP5347003B2 (ja) * 2011-09-30 2013-11-20 富士フイルム株式会社 医用画像処理装置および方法ならびにプログラム
US9155470B2 (en) 2012-01-24 2015-10-13 Siemens Aktiengesellschaft Method and system for model based fusion on pre-operative computed tomography and intra-operative fluoroscopy using transesophageal echocardiography
EP2823464B1 (en) 2012-03-08 2016-10-19 Koninklijke Philips N.V. Intelligent landmark selection to improve registration accuracy in multimodal image fusion
US9119550B2 (en) 2012-03-30 2015-09-01 Siemens Medical Solutions Usa, Inc. Magnetic resonance and ultrasound parametric image fusion
US9226683B2 (en) 2012-04-16 2016-01-05 Siemens Medical Solutions Usa, Inc. System scan timing by ultrasound contrast agent study
KR101932721B1 (ko) * 2012-09-07 2018-12-26 삼성전자주식회사 의료 영상들의 정합 방법 및 장치
JP6297289B2 (ja) * 2012-09-20 2018-03-20 キヤノンメディカルシステムズ株式会社 画像処理システム、x線診断装置及び画像処理装置の作動方法
WO2014046267A1 (ja) 2012-09-20 2014-03-27 株式会社東芝 画像処理システム、x線診断装置及び画像処理方法
BR112015025074B1 (pt) * 2013-04-03 2022-03-22 Koninklijke Philips N.V. Sistema de imageamento por ultrassom e método para gerar e avaliar vistas bidimensionais padrão a partir de dados de volume ultrassônico tridimensional
US10064567B2 (en) 2013-04-30 2018-09-04 Medtronic, Inc. Systems, methods, and interfaces for identifying optimal electrical vectors
US9931048B2 (en) 2013-04-30 2018-04-03 Medtronic, Inc. Systems, methods, and interfaces for identifying effective electrodes
JP6184244B2 (ja) * 2013-05-30 2017-08-23 東芝メディカルシステムズ株式会社 医用画像処理装置
US9486151B2 (en) 2013-06-12 2016-11-08 Medtronic, Inc. Metrics of electrical dyssynchrony and electrical activation patterns from surface ECG electrodes
US10251555B2 (en) 2013-06-12 2019-04-09 Medtronic, Inc. Implantable electrode location selection
US9877789B2 (en) 2013-06-12 2018-01-30 Medtronic, Inc. Implantable electrode location selection
CN104240226B (zh) * 2013-06-20 2017-12-22 上海联影医疗科技有限公司 一种心脏图像的配准方法
US9320446B2 (en) 2013-12-09 2016-04-26 Medtronic, Inc. Bioelectric sensor device and methods
US9986928B2 (en) 2013-12-09 2018-06-05 Medtronic, Inc. Noninvasive cardiac therapy evaluation
KR101547098B1 (ko) * 2014-01-08 2015-09-04 삼성전자 주식회사 영상 생성 장치 및 그 제어 방법
US9776009B2 (en) 2014-03-20 2017-10-03 Medtronic, Inc. Non-invasive detection of phrenic nerve stimulation
CN104978440B (zh) * 2014-04-03 2020-02-07 上海联影医疗科技有限公司 一种心脏模型建立、配准及多平面重建的方法
RU2689172C2 (ru) * 2014-05-09 2019-05-24 Конинклейке Филипс Н.В. Системы визуализации и способы для расположения трехмерного ультразвукового объема в требуемой ориентации
US9591982B2 (en) 2014-07-31 2017-03-14 Medtronic, Inc. Systems and methods for evaluating cardiac therapy
US9764143B2 (en) 2014-08-15 2017-09-19 Medtronic, Inc. Systems and methods for configuration of interventricular interval
US9586050B2 (en) 2014-08-15 2017-03-07 Medtronic, Inc. Systems and methods for configuration of atrioventricular interval
US9586052B2 (en) 2014-08-15 2017-03-07 Medtronic, Inc. Systems and methods for evaluating cardiac therapy
JP2017526440A (ja) * 2014-09-08 2017-09-14 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 医用イメージング装置
US11253178B2 (en) 2015-01-29 2022-02-22 Medtronic, Inc. Noninvasive assessment of cardiac resynchronization therapy
US10780279B2 (en) 2016-02-26 2020-09-22 Medtronic, Inc. Methods and systems of optimizing right ventricular only pacing for patients with respect to an atrial event and left ventricular event
US11219769B2 (en) 2016-02-26 2022-01-11 Medtronic, Inc. Noninvasive methods and systems of determining the extent of tissue capture from cardiac pacing
EP3264365A1 (en) * 2016-06-28 2018-01-03 Siemens Healthcare GmbH Method and device for registration of a first image data set and a second image data set of a target region of a patient
US10532213B2 (en) 2017-03-03 2020-01-14 Medtronic, Inc. Criteria for determination of local tissue latency near pacing electrode
US10402969B2 (en) * 2017-03-10 2019-09-03 General Electric Company Methods and systems for model driven multi-modal medical imaging
US10987517B2 (en) 2017-03-15 2021-04-27 Medtronic, Inc. Detection of noise signals in cardiac signals
JP6933489B2 (ja) * 2017-04-17 2021-09-08 キヤノンメディカルシステムズ株式会社 医用画像処理装置及びそれを含む超音波診断装置並びに医用画像処理プログラム
WO2019023472A1 (en) 2017-07-28 2019-01-31 Medtronic, Inc. GENERATION OF ACTIVATION TIME
WO2019023478A1 (en) 2017-07-28 2019-01-31 Medtronic, Inc. SELECTION OF CARDIAC REVOLUTION
US10492705B2 (en) 2017-12-22 2019-12-03 Regents Of The University Of Minnesota Anterior and posterior electrode signals
US11419539B2 (en) 2017-12-22 2022-08-23 Regents Of The University Of Minnesota QRS onset and offset times and cycle selection using anterior and posterior electrode signals
US10433746B2 (en) 2017-12-22 2019-10-08 Regents Of The University Of Minnesota Systems and methods for anterior and posterior electrode signal analysis
US10799703B2 (en) 2017-12-22 2020-10-13 Medtronic, Inc. Evaluation of his bundle pacing therapy
US10786167B2 (en) 2017-12-22 2020-09-29 Medtronic, Inc. Ectopic beat-compensated electrical heterogeneity information
US10617318B2 (en) 2018-02-27 2020-04-14 Medtronic, Inc. Mapping electrical activity on a model heart
US10668290B2 (en) 2018-03-01 2020-06-02 Medtronic, Inc. Delivery of pacing therapy by a cardiac pacing device
US10918870B2 (en) 2018-03-07 2021-02-16 Medtronic, Inc. Atrial lead placement for treatment of atrial dyssynchrony
US10780281B2 (en) 2018-03-23 2020-09-22 Medtronic, Inc. Evaluation of ventricle from atrium pacing therapy
US11285312B2 (en) 2018-03-29 2022-03-29 Medtronic, Inc. Left ventricular assist device adjustment and evaluation
US11304641B2 (en) 2018-06-01 2022-04-19 Medtronic, Inc. Systems, methods, and interfaces for use in cardiac evaluation
US10940321B2 (en) 2018-06-01 2021-03-09 Medtronic, Inc. Systems, methods, and interfaces for use in cardiac evaluation
EP3711677A1 (en) * 2019-03-18 2020-09-23 Koninklijke Philips N.V. Methods and systems for acquiring composite 3d ultrasound images
US11547858B2 (en) 2019-03-29 2023-01-10 Medtronic, Inc. Systems, methods, and devices for adaptive cardiac therapy
US11697025B2 (en) 2019-03-29 2023-07-11 Medtronic, Inc. Cardiac conduction system capture
US11497431B2 (en) 2019-10-09 2022-11-15 Medtronic, Inc. Systems and methods for configuring cardiac therapy
US11642533B2 (en) 2019-11-04 2023-05-09 Medtronic, Inc. Systems and methods for evaluating cardiac therapy
US11813464B2 (en) 2020-07-31 2023-11-14 Medtronic, Inc. Cardiac conduction system evaluation

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002511312A (ja) * 1998-04-09 2002-04-16 ナイコムド イメージング エーエス 生理学的パラメータを調べるための診断撮像における粒子状造影剤の使用
RU2156112C1 (ru) * 1999-12-15 2000-09-20 Центральный научно-исследовательский рентгено-радиологический институт МЗ России Способ определения васкуляризации очаговых поражений печени
US7079674B2 (en) * 2001-05-17 2006-07-18 Siemens Corporate Research, Inc. Variational approach for the segmentation of the left ventricle in MR cardiac images
JP3878462B2 (ja) * 2001-11-22 2007-02-07 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 画像診断支援システム
US7499743B2 (en) * 2002-03-15 2009-03-03 General Electric Company Method and system for registration of 3D images within an interventional system
ATE404951T1 (de) * 2004-10-01 2008-08-15 Medcom Ges Fuer Medizinische B Registrierung eines ultraschallbildes mit einem bild aus einem 3d-scan, beispielsweise von einer computertomographie (ct) oder magnetspintomographie (mr)
JP2008523871A (ja) * 2004-12-15 2008-07-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ マルチモダリティ画像のレジストレーション
CN1862596A (zh) * 2005-04-19 2006-11-15 西门子共同研究公司 针对心脏展开的所融合的pet-ct可视化的系统和方法
DE102005036322A1 (de) * 2005-07-29 2007-02-15 Siemens Ag Registrieren intraoperativer Bilddatensätze mit präoperativen 3D-Bilddatensätzen auf Basis optischer Oberflächenextraktion
US8406851B2 (en) * 2005-08-11 2013-03-26 Accuray Inc. Patient tracking using a virtual image
US20070049817A1 (en) * 2005-08-30 2007-03-01 Assaf Preiss Segmentation and registration of multimodal images using physiological data
US8157736B2 (en) * 2006-04-18 2012-04-17 Siemens Corporation System and method for feature detection in ultrasound images
US7996060B2 (en) * 2006-10-09 2011-08-09 Biosense Webster, Inc. Apparatus, method, and computer software product for registration of images of an organ using anatomical features outside the organ
CN101542526B (zh) * 2006-11-13 2013-12-25 皇家飞利浦电子股份有限公司 融合的灌注和功能性3d旋转血管造影绘制
DE102007010806B4 (de) * 2007-03-02 2010-05-12 Siemens Ag Verfahren zum Schaffen erweiterter Möglichkeiten bei der Verwendung von für den Einsatz von Registrierungsverfahren ungeeigneten Bilddaten eines Patienten und Röntgenangiographiesystem
US7995864B2 (en) * 2007-07-03 2011-08-09 General Electric Company Method and system for performing image registration

Also Published As

Publication number Publication date
JP2011506033A (ja) 2011-03-03
US20100254583A1 (en) 2010-10-07
RU2472442C2 (ru) 2013-01-20
CN101903909B (zh) 2013-05-29
RU2010129963A (ru) 2012-01-27
CN101903909A (zh) 2010-12-01
EP2225724A1 (en) 2010-09-08
WO2009081318A1 (en) 2009-07-02
BRPI0821279A2 (pt) 2015-06-16
BRPI0821279A8 (pt) 2016-02-10

Similar Documents

Publication Publication Date Title
JP5841335B2 (ja) 解剖学的構造の統計モデルに基づく撮像データのマルチモダリティ融合のための方法およびシステム
US11642173B2 (en) Image-based navigation system and method of using same
EP1837828B1 (en) Image registration using locally-weighted fitting
AU2007221876B2 (en) Registration of images of an organ using anatomical features outside the organ
US20170372474A1 (en) Methods and devices for registration of image data sets of a target region of a patient
JP5039295B2 (ja) 医学的介入手順で使用するためのイメージング・システム
JP7019694B2 (ja) 医療処置で使用するための医療装置の選択
CA2625162A1 (en) Sensor guided catheter navigation system
US20150206302A1 (en) Systems, methods and computer readable storage media storing instructions for integrating fluoroscopy venogram and myocardial images
KR102347029B1 (ko) 2d xa 영상과 3d cta 영상 간의 강체 정합 방법, 이를 수행하기 위한 기록 매체 및 장치
Sun et al. Registration of high-resolution 3D atrial images with electroanatomical cardiac mapping: evaluation of registration methodology
Housden et al. Three-modality registration for guidance of minimally invasive cardiac interventions
JP2023520618A (ja) 多視点姿勢推定を使用するための方法及びシステム
WO2009077971A1 (en) Fusion of cardiac 3d ultrasound and x-ray information by means of epicardial surfaces and landmarks
Ma et al. Echocardiography to magnetic resonance image registration for use in image-guide electrophysiology procedures

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111209

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130612

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130702

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130926

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140528

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20140605

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20140711

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150729

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150917

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151113

R150 Certificate of patent or registration of utility model

Ref document number: 5841335

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees