JP5919296B2 - イメージレジストレーション装置 - Google Patents

イメージレジストレーション装置 Download PDF

Info

Publication number
JP5919296B2
JP5919296B2 JP2013541453A JP2013541453A JP5919296B2 JP 5919296 B2 JP5919296 B2 JP 5919296B2 JP 2013541453 A JP2013541453 A JP 2013541453A JP 2013541453 A JP2013541453 A JP 2013541453A JP 5919296 B2 JP5919296 B2 JP 5919296B2
Authority
JP
Japan
Prior art keywords
image
model
fitted
determining
registration apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013541453A
Other languages
English (en)
Other versions
JP2014503250A (ja
Inventor
ペーター,ヨヒェン
ヴェーゼ,ユエルゲン
レーマン,ヘルコ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2014503250A publication Critical patent/JP2014503250A/ja
Application granted granted Critical
Publication of JP5919296B2 publication Critical patent/JP5919296B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/75Determining position or orientation of objects or cameras using feature-based methods involving models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/344Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30048Heart; Cardiac

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Description

本発明は、第一の画像と第二の画像とを互いに位置合わせするイメージレジストレーション装置、イメージレジストレーション方法及びイメージレジストレーションコンピュータプログラムに関する。
J.R.Crouch等による論文“Automated Finite-Element Analysis for Deformable Registration of Prostate Images” volume 26, pages 1379-1390 (2007)は、前立腺画像の変形可能な位置合わせの自動化された有限エレメントの分析を開示している。m−repモデルが使用され、6面体の有限エレメントメッシュを自動的に生成し、画像形成された患者について境界条件を自動的に計算するアルゴリズムが提示されている。
US5633951は、体積画像のうちの1つに関する弾性幾何変換(elastic geometric transform)を実行することで、異なる画像形成様式から及び/又は異なる時間で得られる場合があるオブジェクトの比較的変形した第一及び第二の体積画像を位置合わせする3次元画像形成方法を開示している。この方法は、第一及び第二の画像から、第一及び第二の対応する表面を抽出することを含んでおり、この表面は、骨/組織のインタフェースのような同じ特徴の輪郭を描く。これは、それぞれの表面について輪郭のスタックを抽出することで行われる。第一の表面は、グローバルトランスレーションベクトルと残差表面歪みベクトルのセットとに到達するように、第二の表面とのアライメントに向かって繰返しワープされる。体積歪みベクトルは、残差表面歪みベクトルに重み関数を適用することで決定されるものであり、その補間された強度が格子点に移動されることとなる、ボクセルの中央の第二の体積画像における位置を示すために使用される。重み付け関数は、第二の体積の弾性スティフネスを示す定数を含む。第一の表面の抽出、表面のワープ、及び体積歪みベクトルの決定ステップは、体積画像間の位置ずれの測度が予め決定された値未満になるまで、連続的な繰返しにおいて繰り返される。
この位置合わせ方法の品質は、オブジェクトが複雑な特性を有する場合に低下する。
本発明の目的は、特にオブジェクトが複雑な特性を有する場合に、位置合わせの品質を改善することができる、第一の画像と第二の画像とを互いに関して位置合わせするイメージレジストレーション装置、イメージレジストレーション方法及びイメージレジストレーションコンピュータプログラムを提供することにある。
本発明の第一の態様では、第一の画像と第二の画像とを互いに関して位置合わせするイメージレジストレーション装置が提供され、このイメージレジストレーション装置は、以下の構成を備えている。第一のオブジェクトの第一の画像と第二のオブジェクトの第二の画像とを供給する画像供給手段。第一のオブジェクトと第二のオブジェクトは、同じタイプのオブジェクトからなる。第一のオブジェクト及び第二のオブジェクトのモデルを供給するモデル供給手段。モデルのモデルエレメントの数及びモデルエレメント間の隣接関係は、固定されている。モデルを第一の画像に適合させて第一の適合されたモデルを生成し、モデルを第二の画像に適合させて第二の適合されたモデルを生成する適合手段。適合手段は、供給されたモデルを第一の画像及び第二の画像に適合させるために、形状モデルを供給されたモデルと位置合わせし、形状モデルと供給されたモデルとの間のずれを決定することで内部エネルギーを決定する。第一の適合されたモデルに関する第一の画像における第一のイメージエレメントの空間的な位置、第二の適合されたモデルに関する第二の画像における第二のイメージエレメントの空間的な位置に基づいて、第一の画像及び第二の画像における対応するイメージエレメントを決定する対応イメージエレメント決定手段。
提供されるモデルは固定されたトポロジーを有するので、対応するイメージエレメントは、第一及び第二のオブジェクトが心臓のような複雑な特性を有する場合であっても、第一の適合されたモデルに関して第一の画像における第一のイメージエレメントの空間的な位置、及び第二の適合されたモデルに関して第二の画像における第二のイメージエレメントの空間的な位置に基づいて、第一の画像及び第二の画像において比較的高い信頼性で発見することができ、これにより位置合わせの品質が改善される。
例えば、第一及び第二のオブジェクトが共にタイプ「心臓」である場合、左心室筋の外側では、パラメトリック空間変換によりモデル化するのが複雑である「スライドする」表面である。さらに、左心室筋の内側では、非常に高い柔軟性を有する乳頭筋であり、従って位置合わせすることが難しい。血液プールそれ自身では、組織間の解剖学的な対応関係が定義され、既知の位置合わせ方法は、例えば偶発的な造影剤の変動にそろう可能性がある。対照的に、固定されたトポロジーを有するモデルを第一及び第二の画像における第一及び第二のオブジェクトに適合させ、それぞれ適合されたモデルに関して第一及び第二の画像におけるイメージエレメントの空間的な位置に基づいて2つの画像における対応するイメージエレメントを決定することで、たとえオブジェクトが複雑な特性を有する場合であっても、信頼できる位置合わせを達成することができる。
第一のオブジェクトと第二のオブジェクトは、同じオブジェクトであり、このオブジェクトは、例えば異なる時間で又は異なる画像形成様式により画像形成される。第一のオブジェクト及び第二のオブジェクトは、同じタイプである、異なるオブジェクトとすることもできる。例えば、異なる人物の臓器を比較するため、第一のオブジェクトは、第一の人物の臓器とすることができ、第二のオブジェクトは、第二の人物の同じ臓器とすることができる。臓器の代わりに、同じタイプの他のオブジェクトは、第一の画像及び第二の画像において示される。
第一及び第二のオブジェクトが解剖学のオブジェクトである場合、解剖学の対応する画像の位置は、互いにマッピングされる。特に、対応する外側表面のエレメント及び内側のエレメント、特に内側体積エレメントが得られる。
第一のオブジェクト及び第二のオブジェクトは、好ましくは、ある人物又はある動物のタイプ「心臓」であり、モデルは、好ましくは、対応する心臓のモデルである。特に、第一のオブジェクト及び第二のオブジェクトは、好ましくは、タイプ「左心室筋」であり、モデルは、好ましくは、左心室筋の対応するモデルである。しかし、第一のオブジェクト及び第二のオブジェクトは、肺のような別の臓器、ある人物又はある動物の別の部位、又はテクニカルオブジェクトとすることもでき、モデルは、それぞれのオブジェクトに対応する。
適合手段は、好ましくは、第一及び第二のオブジェクトの一般的なモデル、すなわち例えば非人間又は非動物の特定のモデルで適合手順を開始し、このモデルは、人又は動物に固有である適合された第一及び第二のモデルを生成するため、それぞれ第一の画像及び第二の画像に適合される。
画像供給手段は、例えば第一のオブジェクトの第一の画像と第二のオブジェクトの第二の画像が記憶される記憶手段である。しかし、画像供給手段は、第一の画像及び第二の画像を生成する画像形成様式とすることもできる。例えば画像供給手段は、コンピュータ断層撮影装置、磁気共鳴画像形成装置、陽電子放出断層撮影装置や単電子放出コンピュータ断層撮影装置のような核画像形成装置、超音波画像形成装置、CアームX線画像形成装置等とすることができる。第一の画像及び第二の画像は、同じ画像形成様式により生成されるか又は異なる画像形成様式により生成される。
モデル供給手段は、好ましくは、第一の画像及び第二の画像で示される第一及び第二のオブジェクトのモデルが記憶される記憶手段である。
モデルは、好ましくは、第一の構造と第一の構造に結合される第二の構造を有する。第一の構造は、好ましくは外側表面構造であり、第二の構造は、好ましくは外側表面メッシュであり、内側構造は、好ましくは体積メッシュ(volumetric mesh)である。内側構造は、第一のオブジェクト及び第二のオブジェクトの体積の異なる部分を定義する。体積内のこれらの異なる部分は、体積を覆う表面構造により示されるよりも複雑である。例えば、筋肉束は、体積内で幾何分布を有し、これは、表面構造から簡単に推測することができない。しかし、オブジェクトに適合されるモデルの外面の構造に結合される、モデルの内側構造を適合させることで、ある体積内の異なる部位は、それらが外側表面構造のみから推測できないとしても区別することができる。
上述されたように、第一の構造は、外側表面構造とすることができ、第二の構造は、内側構造とすることができる。しかし、第一の構造は、外側の1次元のラインとすることができ、第二の構造は、1次元のラインにより囲まれる内側の2次元領域とすることができる。さらに、内側構造は、外側表面構造又は外線構造により定義される内部領域を完全に充填する構造とすることができる。
体積メッシュの代わりに、内側構造は、他の幾何学的なエレメントを有することもでき、他の幾何学的なエレメントの空間的な位置は、外側表面構造への幾何学的なエレメントの結合により、外側表面構造から決定することができる。例えば、内側構造は、毛細血管ツリーの頂点を有し、これらの頂点は、内側構造のそれぞれの頂点と、あるライン上に位置されない外側表面構造の頂点との間の距離により表すことができる。これらの距離は、内側構造を第一の画像における第一のオブジェクトに及び第二の画像における第二のオブジェクトに適合させるために変更される。
体積メッシュが使用される場合、体積メッシュは、体積セルとして四面体から構成されることが好ましい。しかし、直方体のような他のセルを使用することもできる。代替的に、内側構造は、例えばファイバの束を表すか、或いは、血管のツリー又は気管支のツリーのようなツリーを表す。
モデルは固定されたトポロジーを有するので、例えば表面メッシュの三角形の数及び体積メッシュの4面体の数といったモデルを形成するモデルエレメントの数は、モデルエレメント間の隣接関係、すなわちどのモデルエレメントがどの他のモデルエレメントに隣接するか、が固定される。
好ましくは、適合手段は、第一の構造を第一のオブジェクトに適合させ、境界条件として適合された第一の構造を使用して第二の構造を適合させることで、第一の適合されたモデルを生成し、第一の構造を第二のオブジェクトに適合させ、境界条件として適合された第一の構造を使用して第二の構造を適合させることで、第二の適合されたモデルを生成する。特に、第一の構造は、好ましくは外側表面構造をであり、外側表面構造は、それぞれのオブジェクトの表面に適合され、第二の構造は、好ましくは内側構造であり、この内側構造は、外側表面構造が境界条件として使用される間に適合される。好ましくは、適合手段は、外部エネルギーと内部エネルギーとの重み付け加算を最小にすることで、外側表面構造をそれぞれのオブジェクトに適合させるため、外側表面構造を変形する。更に好ましくは、適合手段は、第二の構造の内部エネルギーが最小となるように、好ましくは内側構造である第二の構造を適合させる。
適合可能な内側構造は、好ましくは体積メッシュであり、好ましくは表面メッシュである適合された外側表面により定義される境界条件の影響下で緩和する弾性の「スポンジ」として考えられる。好ましくは、内側構造は、内側表面の外側の頂点が外側表面構造の頂点と同一となるように、外側表面構造に結合される。外側表面構造は、外側表面構造により固定される、内側構造の外側の頂点を移動しないことで、境界条件として使用されることが好ましい。
対応するイメージエレメント決定手段は、第一の適合されたモデルの特徴を第二の適合されたモデルの対応する特徴に変換する変換を決定し、決定された変換に基づいて、第一の画像及び第二の画像における対応するイメージエレメントを決定する。
第一の適合されたモデルの特徴及び第二の適合されたモデルの対応する特徴は、例えばモデルの頂点である。変換は、第一の適合されたモデルの全ての特徴、特に全ての頂点を第二の適合されたモデルの全ての対応する特徴にマッピングするグローバル変換とすることができる。また、変換は、第一の適合されたモデルの第一のモデルエレメントにおける第一のイメージエレメントを、第二の適合されたモデルの対応する第二のモデルエレメントの対応する第二のイメージエレメントにマッピングする。例えば、第一の適合されたモデル及び第二の適合されたモデルは、モデルエレメントからそれぞれ構成され、対応イメージエレメント決定手段は、以下のステップを実行することで、第一の画像の供給された第一のイメージエレメントに対応する、第二の画像の第二のイメージエレメントを決定する。第一の画像の第一のイメージエレメントを含む第一のモデルエレメントを決定する段階。第一のモデルエレメントは、第一の適合されたモデルのモデルエレメントである。第二の適合されたモデルのモデルエレメントである第二のモデルエレメントを決定する段階。第二のモデルエレメントは、決定された第一のモデルエレメントに対応するように決定される。第一のモデルエレメント及び第二のモデルエレメントに共通の特徴に関して、第一のモデルエレメントにおいて第一のローカル座標系を定義し、第二のモデルエレメントにおいて第二のローカル座標系を定義する。第一の画像と第二の画像とにおける共通の特徴の位置に基づいて、第一のローカル座標系及び第二のローカル座標系との間の変換を決定する段階。第一のローカル座標系における第一のイメージエレメントの位置を決定する段階。第一のローカル座標系における第一のイメージエレメントの決定された位置と決定された変換とに依存して、第二のローカル座標系における、第一のイメージエレメントに対応する、第二の画像の第二のイメージエレメントの位置を決定する段階。これは、第一の画像と第二の画像とにおける対応するイメージエレメントを決定する精度を更に改善する。
外側表面構造のモデルエレメントは、好ましくは表面メッシュの三角形であり、内側構造のモデルエレメントは、好ましくは体積メッシュの四面体である。ローカル座標系を定義する共通の特徴は、三角形及び四面体の頂点である。第一の画像と第二の画像との間のマッピングは、従って、好ましくは、体積セルの対応関係により、第一の適合されたモデルと第二の適合されたモデルとにおけるローカル座標系により定義される。
ある位置は、提供されるモデルにおいて示されることが更に好ましく、対応するイメージエレメント決定ユニットは、第一の適合されたモデルと第二の適合されたモデルとに基づいて、提供されたモデルで示される位置に対応する、第一の画像と第二の画像における対応するイメージエレメントを決定する。ある値が提供されるモデルにおいて示されることが更に好ましく、イメージレジストレーション装置は、第一の画像と第二の画像のイメージエレメントに位置に対応する値を割り当てる割り当て手段を更に備える。従って、位置、特に提供されるモデルにおいて示される領域は、例えば異なる領域を異なって着色することで、第一の画像及び第二の画像に移すことができ、これにより、これらの領域を第一の画像及び第二の画像において非常に容易に比較することができる。色は、色の値を供給されたモデルで示される位置に割り当てることで提供される。また、供給されたモデルにおいて示される位置に割り当てられた値は、コントラスト、グレイ値等のような別の画像形成の特性を表すこともできる。
供給されたモデルは、本来供給されたモデルであり、例えば第一の画像又は第二の画像への適合を介して変形されるか、又は変形されない場合があり、次いで、特定の画像に関連しないオブジェクトのある種のテンプレート又は抽象的なインスタンスを表すことが好ましい。供給されるモデルは、参照モデルとして考えることができ、ユーザインタフェースは、供給されたモデルにおける位置をユーザが示すのを可能にするために設けられる。次いで、対応イメージエレメント決定手段は、供給されたモデルにおいて示される位置に対応する、第一の画像と第二の画像における対応するイメージエレメントを決定し、これらの対応するイメージエレメントは、例えば決定された対応するイメージエレメントの位置でグラフィカルエレメントを表示することで、ディスプレイで表示される。
さらに、供給されたモデルにおいて示された位置に割り当てられた値は、第一の画像及び第二の画像の対応するイメージエレメントに値を割り当てることで、第一の適合されたモデルと第二の適合されたモデルにマッピングされる情報を含む。割り当てられた値は、視覚化されるか及び/又は更なる処理のために使用される。
イメージレジストレーション装置は、対応するイメージエレメントの画像の値を処理する画像値処理手段を備えることが更に好ましい。例えば、対応するイメージエレメントの画像の値、特に画像のグレイの値は、容易に比較することができるか、或いは対応するイメージエレメントの画像の値の差又は商を形成することができる。画像の値の処理ユニットは、グローバルなグレイ値の差の補償を適用した後に画像の値を処理する。差は、例えば診断の目的で使用される。グローバルなグレイ値の差の補償は、第一の画像と第二の画像における可能性のある異なる全体のコントラストレベルを補償する。
更に好ましくは、画像値処理手段は、対応するイメージエレメントの画像の値に依存して処理された値を生成し、対応イメージエレメント決定手段は、第一の適合されたモデルに関する第一のイメージエレメントと第二の適合されたモデルに関する第二のイメージエレメントの少なくとも1つの空間的な位置に依存して、対応するイメージエレメントに対応する、供給されたモデルにおける位置を決定し、イメージレジストレーション装置は、供給されたモデルにおける決定された位置に処理された値を割り当てる割り当て手段を更に備える。これにより、供給されたモデルにおける、例えば対応するイメージエレメントの画像の値の差又は商といった、処理された値を表示することが可能となる。また、第一の画像及び/又は第二の画像の処理されていない値は、供給されたモデルにマッピングされ、供給されたモデルにマッピングされ、供給されたモデルで可視化される。
本発明の更なる態様では、互いに第一の画像と第二の画像とを位置合わせするイメージレジストレーション方法が提供され、イメージレジストレーション方法は、以下の段階を含む。第一のオブジェクトの第一の画像と第二のオブジェクトの第二の画像を供給する段階。第一のオブジェクトと第二のオブジェクトは、同じタイプのオブジェクトである。第一のオブジェクトと第二のオブジェクトのモデルを供給する段階。モデルのモデルエレメントの数及びモデルエレメント間の隣接関係は、固定されている。モデルを第一の画像に適合させて第一の適合されたモデルを生成し、モデルを第二の画像に適合させて第二の適合されたモデルを生成する段階であって、供給されたモデルを第一の画像及び第二の画像に適合させるために、形状モデルを供給されたモデルと位置合わせし、形状モデルと供給されたモデルとの間のずれを決定することで内部エネルギーを決定する段階。第一の適合されたモデルに関して第一の画像における第一のイメージエレメントの空間的な位置と、第二の適合されたモデルに関して第二の画像における第二のイメージエレメントの空間的な位置とに基づいて、第一の画像と第二の画像における対応するイメージエレメントを決定する段階。
本発明の更なる態様では、第一の画像と第二の画像とを位置合わせするイメージレジストレーションコンピュータプログラムが提供され、イメージレジストレーションコンピュータプログラムは、請求項1で定義されるイメージレジストレーション装置に、イメージレジストレーションコンピュータプログラムがイメージレジストレーション装置を制御するコンピュータで実行されるとき、請求項14で定義されるイメージレジストレーション方法の段階を実行させるプログラムコードを含む。
請求項1のイメージレジストレーション装置、請求項14のイメージレジストレーション方法、及び請求項15のイメージレジストレーションコンピュータプログラムは、特に、従属請求項で定義されるとき、類似及び/又は同じ好適な実施の形態を有することを理解されたい。
本発明の好適な実施の形態は、従属の請求項とそれぞれの独立の請求項との組み合わせとすることもできる。
本発明のこれらの態様及び他の態様は、以下に記載される実施の形態を参照して明らかとなるであろう。
第一の画像と第二の画像とを位置合わせするイメージレジストレーション装置の実施の形態を概略的且つ例示的に示す図である。 画像において示される心臓に適合される心臓のモデルを概略的且つ例示的に示す図である。 コンピュータ断層撮影画像を生成するコンピュータ断層撮影システムを備えるイメージレジストレーション装置の実施の形態を示す図である。 第一の画像と第二の画像のイメージエレメント間の空間的な関係を例示する図である。 静止状態におけるある人物の心臓の画像を概略的且つ例示的に示す図である。 ストレス状態におけるある人物の心臓の画像を概略的且つ例示的に示す図である。 図5に示される画像にマッピングされる図6に示される画像のグレイ値を概略的且つ例示的に示す図である。 AHAセグメントを有する心臓のモデルを概略的且つ例示的に示す図である。 図8に支援されるモデルのAHAセグメントがマッピングされた画像を概略的且つ例示的に示す図である。 第一の画像と第二の画像を互いに関して位置合わせするイメージレジストレーション方法の実施の形態を例示するフローチャートである。
図1は、第一の画像と第二の画像を互いに位置合わせするイメージレジストレーション装置を概略的且つ例示的に示す。イメージレジストレーション装置10は、同じオブジェクトの第一の画像と第二の画像とを供給する画像供給ユニット11を備えており、すなわち、第一のオブジェクトと第二のオブジェクトは、この実施の形態では同じオブジェクトである。イメージレジストレーション装置10は、固定されたトポロジーを有するオブジェクトのモデルを供給するモデル供給ユニット13、モデルを第一の画像に適合させて第一の適合されたモデルを生成し、モデルを第二の画像に適合させて第二の適合されたモデルを生成する適合ユニット14、及び、第一の適合されたモデルに関して第二の画像における第一のイメージエレメントの空間的な位置と、第二の適合されたモデルに関して第二の画像における第二のイメージエレメントの空間的な位置とに基づいて、第一の画像における対応するイメージエレメント及び第二の画像における対応するイメージエレメントを決定する対応するイメージエレメント決定ユニット15を更に備える。
この実施の形態では、オブジェクトは、ある人物又はある動物の心臓であり、モデルは、対応する心臓のモデルである。特に、オブジェクトは、左心室筋であり、モデルは、左心室筋の対応するモデルである。モデル供給ユニット13は、好ましくはオブジェクトのそれぞれのモデルが記憶される記憶ユニットであり、この記憶ユニットから、それぞれのモデルを取得することができる。
図2は、心臓20の左心室筋に適合されている、ある人物の心臓20及びモデル21の画像を概略的且つ例示的に示す。モデル21は、外面メッシュ22である外側構造を有し、この外側構造は、この実施の形態では、心内膜及び心外膜を表し、内側構造23を囲んでいる。用語「外側“outer”」及び「内側“inner”」は、従って、表面構造、すなわち外側構造が内側構造を囲んでいることを意味する。この実施の形態では、内側構造は、体積メッシュである。図2では、モデル21は、更なる外側表面メッシュ24,25,26を有しており、これらの外側表面メッシュは、特にそれぞれの内側体積メッシュである、それぞれの内側構造を囲んでいる。しかし、この実施の形態では、関心のある領域は、左心室筋であり、体積メッシュ23は、従って外側表面メッシュ22により囲まれるこの関心のある領域にのみ挿入される。
体積メッシュ23は、体積セルとして四面体から構成される。
モデル21は、固定されたトポロジーを有するので、内側体積メッシュを形成する四面体の数、外側表面メッシュを形成する三角形の数、及びこれらのモデルエレメント間の隣接する関係、すなわちどのモデルエレメントがどの他のモデルエレメントに隣接しているか、が固定される。
内側体積メッシュ23は、外側体積メッシュ22に結合され、すなわち内側体積メッシュ23の外側の頂点は、外側表面メッシュ22の頂点と同じである。
モデル21は、好ましくは3次元モデルであり、この3次元モデルは、心臓、特に左心室筋の第一の3次元画像及び第二の3次元画像に適合される。図2は、心臓20の3次元コンピュータ断層撮影画像に適合される3次元モデル21の断面図を概略的且つ例示的に示す。
画像供給ユニット11は、同じ心臓20の第一の画像及び第二の画像が記憶される記憶ユニットである。しかし、画像供給ユニットは、第一の画像及び第二の画像を生成し、図3に概略的且つ例示的に示される画像形成様式とすることもできる。
図3では、イメージレジストレーション装置30は、コンピュータ断層撮影システムである画像供給ユニット31を備える。コンピュータ断層撮影システムは、z方向に平行に延びる回転軸Rに関する回転が可能なガントリ1を含む。放射線源は、この実施の形態ではX線管であり、ガントリ1に搭載されている。放射線源2には、コリメータ3が設けられており、このコリメータは、この実施の形態では、放射線源2により生成された放射線からの円錐形の放射線ビーム4を形成する。放射線は、オブジェクト(図示せず)、及びこの実施の形態では円筒形状である検査ゾーン5において、この実施の形態では左心室筋である関心のある領域を横断する。検査ゾーン5を横断した後、放射線ビーム4は、検出装置6に入射し、この検出装置は、二次元の検出表面を有する。検出装置6は、ガントリ1に搭載される。
コンピュータ断層撮影システムは、2つのモータ7,8を備える。ガントリ1は、好ましくはモータ7により一定であるが、調節可能な角速度で駆動される。モータ8は、回転軸R又はz軸の方向に平行に、検査ゾーン5における患者テーブルに配置される例えば患者であるオブジェクトを動かすために設けられる。これらのモータ7,8は、例えば放射線源及び検査ゾーン5、従って検査ゾーン5内の関心のある領域が螺旋又は円である軌道に沿って相対的に移動するように、制御ユニット9により制御され、軌道が円の軌道である場合、患者のテーブルは移動しない。コーンビームを形成する代わりに、コリメータ3は、ファンビームのような別のビームを形成し、検出装置6は、検出表面を有し、この検出表面は、他のビーム形状に対応して成形される。
放射線源2とオブジェクト20との相対的な移動の間、検出装置6は、検出装置6の検出表面に入射する放射線に依存して、測定された値を生成する。測定された値は、オブジェクトの第一及び第二の画像を再構成する再構成ユニット12に供給される投影データである。第一及び第二の画像を再構成するフィルタ補正逆投影法(filtered back projection)アルゴリズムのような既知の再構成アルゴリズムを使用することができる。特に、既知の動き補正は、投影データが取得される間、測定された動きの値に基づいて実行される。これらの動きの値は、例えば心電図の値である。また、画像供給ユニットは、磁気共鳴画像形成システム、核画像形成システム、超音波画像形成システム、CアームX線画像形成システム等のようなコンピュータ断層撮影システムではない別の画像形成様式とすることもできる。第一の画像及び第二の画像は、同じ画像形成様式によるか、又は異なる画像形成様式により生成することができる。
適合ユニット14は、外側表面メッシュ22を左心室筋の表面に適合させ、境界条件として外側表面メッシュ22を使用して内側体積メッシュ23を適合させる。体積メッシュ23は、適合された外側表面メッシュ22により定義された境界条件の影響下で緩む弾性の「スポンジ」であると考えることができる。内側体積メッシュ23は、内側体積メッシュ23の外側の頂点が外側表面メッシュ22の頂点と同じであるように、外側表面メッシュ22に結合される。外側表面メッシュ22は、内側体積メッシュ23を適合させる間に、外側表面メッシュ22により固定される、内側体積メッシュの外側の頂点を移動しないことで、境界条件として使用される。外側表面メッシュ22を左心室筋の表面に適合させるため、外側表面メッシュは変形され、内側体積メッシュ23を左心室筋に適合させるため、内側体積メッシュ23は、外側表面メッシュ22の頂点に対応する内側体積メッシュ23の外側の頂点が固定される間に、内側体積メッシュ23の内部エネルギーが最小化されるように適合される。外側表面メッシュ22及び内側体積メッシュ23のこれらの適合は、以下、更に詳細に例示される。
外側表面メッシュ22を適合するため、オブジェクトの境界は、J. Peters等による論文“Optimizing boundary detection via Simulated Search with application to multi-modal heart segmentation” Medical Image Analysis, page 70-84 (2010)で開示される境界検出アルゴリズムのような既知の境界検出アルゴリズムを使用することで、それぞれの画像において検出される。次いで、外部エネルギーと内部エネルギーとの合計が最小になるように、外側表面メッシュ22の頂点が変更され、これにより外側表面メッシュを変形し、外側表面メッシュをそれぞれのオブジェクトに適合することができる。外部エネルギーは、検出された境界と外側表面メッシュとの間のずれが減少する場合に減少し、内部エネルギーは、それぞれの画像に適合される変形モデルと位置合わせされる形状モデルであって、オブジェクトの表面に対応する形状モデルと、外側表面メッシュ22との間のずれが減少する場合に減少する。外部エネルギーと内部エネルギーの既知の概念に関する更なる詳細について、J. Weese等による論文“Shape constrained deformable models for 3D medical image segmentation” In Proc. IPMI, pages 380-387 (2001)、O. Ecabert等による論文“Automatic Model-Based Segmentation of the Heart in CT Images” IEEE Trans. Med. Imaging 27(9), pages 1189-1201 (2008)が参照され、引用により本明細書にこれらの内容が盛り込まれる。
内側体積メッシュ23は、内部エネルギーを最小化することで適合されることが好ましく、この内部エネルギーは、外側表面メッシュ22により課される境界条件の下で適合される変形モデルと位置合わせされる形状モデルであって、オブジェクトの内部構造の形状を表す形状モデルと、適合された体積メッシュ23との間のずれが減少する場合に減少する。
形状モデルは予め定義され、適合ユニット14に記憶することができる。形状モデルは、それぞれのオブジェクトの内側構造及び/又は外側構造の形状を定義し、例えば同じタイプの幾つかの分割されたオブジェクトを通して平均することで生成される。内部エネルギーを決定するため、それぞれの形状モデルは、好ましくは、それぞれの画像に適合されている変形モデルと位置合わせされ、形状モデルと適合されているモデルとのエッジ又は頂点間の二乗差のような偏差が決定される。
対応するイメージエレメント決定ユニット15は、第一の画像の提供された第一のイメージエレメントを有する第一のモデルエレメントをはじめに決定することで、第一の画像の提供された第一のイメージエレメントに対応する、第二の画像の第二のイメージエレメントを決定する。第一のモデルエレメントは、第一の適合されたモデルのモデルエレメントである。次いで、第二の適合されたモデルのモデルエレメントである第二のモデルエレメントが決定され、第二のモデルエレメントは、決定された第一のモデルエレメントに対応するように決定される。第一のローカル座標系は、第一のモデルエレメントにおいて定義され、第二のローカル座標系は、第一のモデルエレメントと第二のモデルエレメントとに共通する特徴に関して、第二のモデルエレメントにおいて定義され、第一の画像と第二の画像における共通の特徴の位置に基づいて、第一のローカル座標系と第二のローカル座標系との間の変換が決定される。第一のイメージエレメントの位置は、第一のローカル座標系において決定され、第二のローカル座標系における、第一のイメージエレメントに対応する、第二の画像の第二のイメージエレメントの位置は、第一のローカル座標系における第一のイメージエレメントの決定された位置と決定された変換とに依存して決定される。
提供された第一のイメージエレメントに対応する第二のイメージエレメントのこの決定は、図4を参照して以下に例示される。
図4に示される例では、第一のイメージエレメント40は、第一の画像において提供される。この第一のイメージエレメントの提供は、例えばグラフィカルユーザインタフェースを介してユーザにより行われ、これにより、ユーザは第一の画像における所定の第一のイメージエレメントを選択することができる。第一のイメージエレメント40が提供された後、第一の適合されたモデルのうちのどの第一のモデルエレメント44に、提供された第一のイメージエレメント40が位置するかが判定される。次いで、第二の適合されたモデルの第二のモデルエレメント54が決定され、第二のモデルエレメント54が、判定された第一のモデルエレメント44に対応するように決定される。第一のモデルエレメント44における第一のローカル座標系及び第二のモデルエレメント54における第二のローカル座標系は、第一のモデルエレメント44の頂点41...43、第二のモデルエレメント54の頂点51...53、第一のモデルエレメント44の2つの頂点45...47間の中間点、及び第二のモデルエレメント54の頂点51...53間の中間点55...57に基づいて決定される。第一のローカル座標系と第二のローカル座標系との間の変換は、第一の画像と第二の画像におけるこれらの共通の特徴の位置に基づく。次いで、第一のローカル座標系における第一のイメージエレメント40の位置が決定され、第二のローカル座標系における、第一のイメージエレメント40に対応する第二の画像の第二のイメージエレメント50の位置は、第一のローカル座標系における第一のイメージエレメント40の決定された位置と決定された変換とに依存して決定される。決定された変換は、勿論、他の対応するイメージエレメントを発見するために使用することもできる。例えば、変換は、第二のイメージエレメント59が第一のイメージエレメント49に対応すること、第二のイメージエレメント58が第一のイメージエレメント48に対応することを判定するために使用される。
共通の特徴は、第一の画像と第二の画像との間の変換を確立するために使用され、頂点のみとすることができ、特に対応する三角形又は四面体である対応するモデルエレメントの頂点又は他の特徴間の中間点のみとすることもできる。第一の画像と第二の画像との間の幾何学的なマッピングを確立するため、両方の画像におけるメッシュの頂点の座標を使用した異なるアプローチが考えられる。1つのアプローチは、内側体積メッシュ23の四面体セル及び/又は外側表面メッシュ22の三角形における線形の幾何学的な座標変換を確立することである。好ましくは、三角形又は四面体の頂点は、それぞれの構造内に線形変換を定義するために使用される。
例えば、第一のローカル座標系は、第一のモデルエレメントの頂点を定義するベクトルを定義することで定義することができ、第二のローカル座標系は、第二のモデルエレメントの頂点のベクトルにより定義される。第一のモデルエレメントにおけるそれぞれの第一のイメージエレメントは、第一のモデルエレメントの頂点のベクトルの線形結合として定義される。この線形結合の重みは、第一のモデルエレメントにおける第一のイメージエレメントに対応する、第二のモデルエレメントにおける第二のイメージエレメントを決定するため、第一のモデルエレメントに対応する、第二のモデルエレメントの頂点の対応するベクトルを線形に結合するために使用される。
図5は、ある人物の休息状態に対応する、人物の心臓の第一の画像を概略的且つ例示的に示す。図6は、人物の心臓の第二の画像を概略的且つ例示的に示し、第二の画像は、人物のストレス状態に対応する。第一の画像における対応するイメージエレメントと第二の画像における対応するイメージエレメントは、休息状態を表す第一の適合されたモデル及びストレス状態を表す第二の適合されたモデルが生成されるように、第一及び第二の画像に示される心臓に対して固定されたトポロジーを有する心臓モデル21を適合させることで、上述されたように決定することができる。対応するイメージエレメント決定ユニットは、第一及び第二の画像における対応するイメージエレメントを決定するため、すなわち第一の画像と第二の画像を位置合わせするため、これらの適合された第一及び第二のモデルを使用する。位置合わせに基づいて、第二のストレス画像のグレイ値は、心筋の領域において第一の休息画像にマッピングされる。結果として得られる結合された画像は、図7に概略的且つ例示的に示される。この例では、心臓のモデル21は、心筋のモデルであり、結合された画像は、図6に示される第二の画像の心筋の画像の値、及び図5に示される第一の画像からの他の画像値を有する。
イメージレジストレーション装置は、対応するイメージエレメントの画像の値を処理する画像値処理ユニット16を更に有する。例えば、対応するイメージエレメントの画像の値、特に画像のグレイ値は、例えば、対応するイメージエレメントの画像の値の差又は商を計算することで、容易に比較することができる。好ましくは、画像値処理ユニットは、第一の画像と第二の画像にグローバルなグレイ値の差の補償をはじめに施す。
グローバルなグレイ値の差の補償を行うため、関心のある領域、この実施の形態では心筋における画像の値の平均値、特に平均又は中央値は、第一の画像について計算され、第二の画像について計算することができる。第一の画像について決定された平均と第二の画像について決定された平均との間の差は、平均における差を補償するために、第一の画像の画像の値又は第二の画像の画像の値にそれぞれ加算される。
画像値処理ユニット16は、対応するイメージエレメントの画像の値に依存して処理された値を生成し、対応するイメージエレメント決定ユニット15は、第一の適合されたモデルに関する第一のイメージエレメント、第二の適合されたモデルに関する第二のイメージエレメントの少なくとも1つの空間的な位置に依存して、対応するイメージエレメントに対応する、適合されないモデルにおける位置を決定する。特に、対応するイメージエレメント決定ユニット15は、例えばそれぞれのモデルエレメントの頂点といった共通の特徴を使用して、ローカル座標系に基づく変換であって、第一の適合されたモデル又は第二の適合されたモデルにおけるモデルエレメントにおける位置を、上述された適合されないモデルの対応するモデルエレメントにおける位置に変換するための変換を決定する。イメージレジストレーション装置は、処理された値を適合されないモデルの決定された位置に割り当てる割り当てユニット17を更に備える。また、処理された値は、第一の画像におけるそれぞれの第一のイメージエレメント、第二の画像におけるそれぞれの第二のイメージエレメント及び/又は、第一の画像又は第二の画像に適合されない変形された提供されたモデルに割り当てられる。処理された値をもつか又は処理された複数の値をもつ結果として得られる適合されないモデルは、処理された値がモデル内の幾つかの位置について決定された場合に、ディスプレイ18に表示することができる。また、他の画像及び/又は適合されたモデルは、ディスプレイ18に表示することができる。例えば、第一の画像、第一の適合されたモデル、第二の画像及び/又は第二の適合されたモデルは、ディスプレイ18に表示することができる。
実施の形態では、所定の位置、特に所定の領域は、適合されないモデルにおいて示される。示された位置を有する係る心臓のモデル70は、図8に概略的且つ例示的に示される。図8において、異なる領域71は、異なる領域71に割り当てられた異なる色の値により示される。他の実施の形態では、他の種類の値は、グレイ値又はコントラスト値のような値を示すために領域71に割り当てることができる。また、他の種類の情報は、血管の方向のようなモデルの領域に割り当てられる。図8では、異なる示される領域は、AHA(American Heart Association)セグメントである。対応するイメージエレメント決定ユニット15は、第一の適合されたモデル及び第二の適合されたモデルに基づいて、適合されないモデルにおいて示されるそれぞれの位置に対応する、第一の画像と第二の画像における対応するイメージエレメントを決定する。特に、上述されたように、適合されないモデル、第一の適合されたモデル及び第二の適合されたモデルにおける対応するモデルエレメントの共通の特徴は、適合されないモデル、第一の適合されたモデル及び第二の適合されたモデルにおける対応するモデルエレメントのローカル座標系間の変換を決定するために使用される。対応するイメージエレメント決定ユニット50は、好ましくは、例えば図8に示される心臓モデル70の領域71に対応する、第一の画像と第二の画像における対応するイメージエレメントを決定するため、これらの変換を使用する。割り当てユニット17は、適合されない心臓モデル70の異なる領域71の値、この実施の形態では色値を、第一の画像及び第二の画像の決定された対応するイメージエレメントに割り当てる。結果として得られる画像は、第一の画像又は第二の画像である場合があり、図9に概略的且つ例示的に示される。この実施の形態では、第一の画像及び第二の画像は、AHAセグメントに従って着色され、これらのセグメントは、第一の画像及び第二の画像において容易に比較することができる。
以下、第一の画像と第二の画像を互いに位置合わせするイメージレジストレーション方法の実施の形態は、図10に示されるフローチャートを参照して例示的に記載される。
ステップ101では、固定されたトポロジーを有するオブジェクト20のモデル21が提供される。モデル21は、好ましくは一般的なモデルである。ステップ102で、モデル21は、第一の画像に適合され、第一の適合されたモデルが生成され、モデル21は、第二の画像に適合され、第二の適合されたモデルが生成される。モデル21は、好ましくは、外側表面構造22及び内側構造23を有し、外側表面構造22は、好ましくは、それぞれの画像におけるオブジェクトに外側表面構造22を適合させるために変形され、内側構造23は、好ましくは、変形された外側表面構造が境界条件として使用される間、内部エネルギーが最小化されるように適合される。ステップ103で、第一の画像と第二の画像における対応するイメージエレメントは、第一の適合されたモデルに関して第一の画像における第一のイメージエレメントの空間的な位置と、第二の適合されたモデルに関して第二の画像における第二のイメージエレメントの空間的な位置とに基づいて決定される。特に、第一の適合されたモデルの対応するモデルエレメントのローカル座標系と第二の適合されたモデルの対応するモデルエレメントのローカル座標系との間の変換は、モデルエレメントの頂点のような共通の特徴の位置に基づいて決定され、決定された変換は、第一の画像及び第二の画像における対応するイメージエレメントを決定するために使用される。
イメージレジストレーション装置及び方法は、2以上の画像について、対応する解剖学的な位置での画像のグレイ値を比較するために使用される。係る比較は、例えばかん流分析(perfusion analysis)のような様々な応用を有する。特に、イメージレジストレーション装置及び方法は、一般にかん流分析及び心かん流コンピュータ断層撮影データの分析向けに使用することができる。イメージレジストレーション装置及び方法は、追跡調査の間に画像におけるグレイ値を比較するか、又は異なる様式からの画像情報を結合するために使用することができる。
イメージレジストレーション装置及び方法は、画像のペア及び/又は画像の系列の位置合わせ、分析及び比較のために使用することができ、基本となる技術は、好ましくはメッシュに基づくセグメンテーションに依存する。イメージレジストレーション装置及び方法は、解剖学的に対応する画像の位置を互いにマッピングし、2以上の画像におけるずれのグレイ値を比較し、それらを分析することを可能にする。さらに、情報は、モデルに統合することができ、例えばAHAセグメントは、モデルに統合することができ、AHAセグメントではない、例えば、第一の画像又は第二の画像の領域において、ターゲットではない領域における無意味な比較を回避することができる。
特にモデルに基づく位置合わせのアプローチである、イメージレジストレーション装置及び方法により実現することができる様々な機能が存在する。例えば、イメージレジストレーション装置及び方法は、第一の画像において示される位置の、例えば左心室筋の内部であるターゲット領域内の第二の画像へのマッピングを可能にする。さらに、グレイ値は、例えば図7に例示されるように第一の画像から第二の画像にターゲット領域内にマッピングすることができる。例えば臓器における全体のコントラストレベルが異なる取得の間で変更した場合、グローバルなグレイ値の差の補償を適用した後に、心筋のかん流について休息−ストレスの比較について、オリジナル及びマッピングされたグレイ値は比較される。グレイ値の差は、診断の目的で使用することができる。
適合されないモデルは、好ましくは、参照スペースを定義する一般的なモデルである。参照スペースにおいて示される位置、すなわち適合されないモデルにおいて示されるポジション又はロケーションは、両方の画像にマッピングされるか、又は示された位置での両方の画像のグレイ値の情報は、例えば減算、除算等により処理され、参照スペースにマッピングされる。マッピング内で、図8及び図9を参照して上述されたAHAセグメントのような、組織のエレメントが属しているレイヤのような、モデルで埋め込まれた更なる情報を可視化することができる。例えば、組織のエレメントを表すそれぞれのエレメントが心内膜、心筋又は心外膜に属するかをモデルにおいてエンコードすることができる。
イメージレジストレーション装置及び方法は、グレイ値は別として、異なる画像間の特に体積セル又は表面モデルエレメントであるモデルエレメントの他の特性を比較する。例えば、画像のある時間系列における幾何学的な変位を決定して、動きの場を再構成するために使用することができ、これらの動きの場は、例えば心筋における動きのアーチファクトを検出するために可視化又は分析することができる。
例えば、異なる画像における対応するモデルエレメントの位置は、変位ベクトルを決定するために使用され、対応する速度及び従って動きは、変位ベクトルと異なる画像が取得された時間とに基づいて決定することができる。
さらに、異なる画像における対応する画像エレメントの比較は、かん流の分析のために使用することができる。例えば、心臓の梗塞領域がストレス状態下で休息状態以外の画像の値を有すると仮定する。特に、ストレス状態下において、梗塞領域が休息状態よりも暗いグレイ値を有すると想定する。第一の画像が休息状態を表す場合であって、第二の画像がストレス状態を表す場合、これらの2つの画像における対応する画像の値を比較することができ、画像のどの領域が、梗塞領域を示す、対応するイメージエレメントの画像の値における差を有するかを判定することができる。特に、2つの画像のどの領域において、第一の画像の対応する画像の値よりも暗い、第二の画像の画像の値が閾値を超えるかを判定することができる。閾値は、キャリブレーション測定により決定することができる。
上述された実施の形態では、オブジェクトは心臓、特に左心室筋であるが、イメージレジストレーション装置及び方法は、別の臓器又はテクニカルオブジェクトのような別のオブジェクトの画像を位置合わせすることもできる。
上述された記載された実施の形態では、第一の画像及び第二の画像は、互いに関して位置合わせされるが、イメージレジストレーション装置及び方法は、2を超える画像、特に画像の系列を互いに関して位置合わせすることもできる。
上述された実施の形態では、第一の構造は、外側表面構造であり、第二の構造は、外側表面構造により囲まれる内側構造であるが、第二の構造は、第一の構造と第二の構造との間の既知の空間的な関係により第一の構造に結合される構造とすることができる。空間的な関係は、例えば第一の構造の頂点と第二の構造の頂点との間の距離により定義されるか、又は第一の構造の頂点を第二の構造の頂点と接続するベクトルにより定義される。実施の形態では、第二の構造は、第一の構造内に位置される必要がない。
上述された実施の形態では、モデルは好ましくは3次元モデルであるが、モデルは、二次元モデルとすることもでき、この場合、モデルは、1次元の輪郭である外側メッシュ及び2次元のモデルエレメントから構成される、特に三角形から構成される内側メッシュを有することが好ましい。
開示される実施の形態に対する他の変形例は、図面、開示及び特許請求の範囲を精査することから理解され、請求項に係る発明の実施において当業者により実施することができる。
請求項において、単語「備える“comprising”」は、他のエレメント又はステップを排除するものではなく、不定冠詞“a”又は“an”は、複数であることを解除するものではない。
単数のユニット又は装置は、請求項で引用された幾つかのアイテムの機能を実行する場合がある。所定の手段が相互に異なる従属の請求項で引用される事実は、これらの手段が利用するために使用することができないことを示すものではない。
1以上のユニット又は装置により実行される決定、計算、適合等は、他の数のユニット又は装置により実行することができる。例えば、ステップ101〜103は、単一ユニットにより実行されるか、又は他の数の異なるユニットにより実行することができる。イメージレジストレーション方法に従ってイメージレジストレーション装置の計算、決定、適合等及び/又は制御は、コンピュータプログラムのプログラムコード及び/又は専用のハードウェアとして実現される。
コンピュータプログラムは、他のハードウェアと共に供給されるか、又は他のハードウェアの一部として供給される、光記憶媒体又は固体媒体のような適切な媒体で記憶/配信される場合があるか、或いはインターネット又は他の有線又は無線電気通信システムを介して、他の形式で配信される場合もある。
請求項における参照符号は、範囲を限定するものとして解釈されるものではない。
本発明は、第一の画像と第二の画像を互いに関して位置合わせするイメージレジストレーション装置に関する。固定されたトポロジーを有するモデルは、第一の画像に適合されて第一の適合されたモデルが生成され、第二の画像に適合されて第二の適合されたモデルが生成され、対応するイメージエレメントは、第一の適合されたモデルに関する第一の画像における第一のイメージエレメントの空間的な位置と、第二の適合されたモデルに関して第二の画像における第二のイメージエレメントの空間的な位置とに基づいて、第一の画像と第二の画像とにおいて決定される。モデルは固定されたトポロジーを有するので、対応するイメージエレメントは、たとえ第一及び第二の画像が心臓のような複雑な特性を有するオブジェクトを示す場合でさえ、適合されたモデルに基づいて比較的高い信頼性で発見され、これにより位置合わせの品質を改善することができる。

Claims (15)

  1. 第一の画像と第二の画像とを互いにレジストレーションするイメージレジストレーション装置であって、
    第一のオブジェクトの第一の画像と第二のオブジェクトの第二の画像とを供給する画像供給手段であって、前記第一のオブジェクトと前記第二のオブジェクトとは同じタイプのオブジェクトである、画像供給手段と、
    前記第一のオブジェクトと前記第二のオブジェクトのモデルを供給するモデル供給手段であって、前記モデルは外側表面メッシュと、前記外側表面メッシュに結合した内側体積メッシュとを含み、前記モデルのモデルエレメントの数及びモデルエレメント間の隣接関係は固定されている、モデル供給手段と、
    前記モデルを前記第一の画像に適合させて第一の適合されたモデルを生成し、前記モデルを前記第二の画像に適合して第二の適合されたモデルを生成する適合手段であって、前記内側体積メッシュは内部エネルギーに基づき適合され、前記適合手段は、形状モデルであって前記外側表面メッシュにより課せられる境界条件下で適合されるモデルとレジストレーションされ、オブジェクトの内側構造の形状を表す形状モデルと、適合された内側体積メッシュとの間のずれを決定することで前記内部エネルギーを決定する適合手段と、
    前記第一の適合されたモデルに関する前記第一の画像における第一のイメージエレメントの空間的な位置と、前記第二の適合されたモデルに関する前記第二の画像における第二のイメージエレメントの空間的な位置とに基づいて、前記第一の画像と前記第二の画像における対応するイメージエレメントを決定する対応イメージエレメント決定手段と、
    を備えるイメージレジストレーション装置。
  2. 前記モデルは、第一の構造と、前記第一の構造に結合される第二の構造を有する、
    請求項1記載のイメージレジストレーション装置。
  3. 前記第一の構造は、外側表面構造であり、前記第二の構造は、内側構造である、
    請求項2記載のイメージレジストレーション装置。
  4. 前記外側表面構造は、外側表面メッシュである、
    請求項3記載のイメージレジストレーション装置。
  5. 前記内側構造は、体積メッシュである、
    請求項3記載のイメージレジストレーション装置。
  6. 前記適合手段は、前記第一の構造を前記第一のオブジェクトに適合させ、境界条件として前記適合された第一の構造を使用して前記第二の構造を適合させることで、前記第一の適合されたモデルを生成し、前記第一の構造を前記第二のオブジェクトに適合させ、境界条件として前記適合された第一の構造を使用して前記第二の構造を適合させることで、前記第二の適合されたモデルを生成する、
    請求項2記載のイメージレジストレーション装置。
  7. 前記適合手段は、前記第二の構造の内部エネルギーが最小化されるように前記第二の構造を適合させる、
    請求項6記載のイメージレジストレーション装置。
  8. 前記対応イメージエレメント決定手段は、前記第一の適合されたモデルの特徴を前記第二の適合されたモデルの対応する特徴に変換する変換を決定し、決定された変換に基づいて、前記第一の画像における対応するイメージエレメントと前記第二の画像における対応するイメージエレメントとを決定する、
    請求項1記載のイメージレジストレーション装置。
  9. 前記第一の適合されたモデルと前記第二の適合されたモデルは、モデルエレメントからそれぞれ構成され、
    前記対応イメージエレメント決定手段は、
    第一のイメージエレメントを含む第一のモデルエレメントであって、前記第一の適合されたモデルのモデルエレメントである第一のモデルエレメントを決定し、
    前記第二の適合されたモデルのモデルエレメントである第二のモデルエレメントであって、決定された第一のモデルエレメントに対応するように決定される第二のモデルエレメントを決定し、
    前記第一のモデルエレメントと前記第二のモデルエレメントとに共通する特徴に関して、前記第一のモデルエレメントにおける第一のローカル座標系と前記第二のモデルエレメントにおける第二のローカル座標系とを定義し、
    前記第一の画像と前記第二の画像における共通の特徴の位置に基づいて、前記第一のローカル座標系と前記第二のローカル座標系との間の変換を決定し、
    前記第一のローカル座標系における前記第一のイメージエレメントの位置を決定し、
    前記第一のローカル座標系における前記第一のイメージエレメントの決定された位置及び決定された変換に依存して、前記第二のローカル座標系における、前記第一のイメージエレメントに対応する、前記第二の画像の第二のイメージエレメントの位置を決定する、
    ことで、前記第一の画像の提供された第一のイメージエレメントに対応する、前記第二の画像の第二のイメージエレメントを決定する、
    請求項1記載のイメージレジストレーション装置。
  10. 前記供給されたモデルにおいて位置が示され、
    前記対応イメージエレメント決定手段は、前記第一の適合されたモデルと前記第二の適合されたモデルとに基づいて、前記供給されたモデルにおいて示された位置に対応する、前記第一の画像における対応するイメージエレメントと前記第二の画像における対応するイメージエレメントとを決定する、
    請求項1記載のイメージレジストレーション装置。
  11. 前記供給されたモデルにおいて示された位置に値が割り当てられ、
    前記第一の画像と前記第二の画像のイメージエレメントに前記位置に対応する前記値を割り当てる割り当て手段を更に備える、
    請求項10記載のイメージレジストレーション装置。
  12. 前記対応するイメージエレメントの画像の値を処理する画像値処理手段を更に備える、
    請求項1記載のイメージレジストレーション装置。
  13. 前記画像値処理手段は、前記対応するイメージエレメントの前記画像の値に依存して処理された値を生成し、
    前記対応イメージエレメント決定手段は、前記第一の適合されたモデルに関する前記第一のイメージエレメントと、前記第二の適合されたモデルに関する前記第二のイメージエレメントのうちの少なくとも1つの空間的な位置に依存して、前記対応するイメージエレメントに対応する、前記供給されたモデルにおける位置を決定し、
    前記処理された値を前記供給されたモデルにおける決定された位置に割り当てる割り当て手段を更に備える、
    請求項12記載のイメージレジストレーション装置。
  14. 第一の画像と第二の画像とを互いにレジストレーションするイメージレジストレーション方法であって、
    第一のオブジェクトの第一の画像と第二のオブジェクトの第二の画像とを供給する段階であって、前記第一のオブジェクトと前記第二のオブジェクトは同じタイプのオブジェクトからなる、段階と、
    前記第一のオブジェクトと前記第二のオブジェクトのモデルを供給する段階であって、前記モデルは外側表面メッシュと、前記外側表面メッシュに結合した内側体積メッシュとを含み、前記モデルのモデルエレメントの数及びモデルエレメント間の隣接関係は固定されている、段階と、
    前記モデルを前記第一の画像に適合させて第一の適合されたモデルを生成し、前記モデルを前記第二の画像に適合させて第二の適合されたモデルを生成する段階であって、前記内側体積メッシュは内部エネルギーに基づき適合され、形状モデルであって前記外側表面メッシュにより課せられる境界条件下で適合されるモデルとレジストレーションされ、オブジェクトの内側構造の形状を表す形状モデルと、適合された内側体積メッシュとの間のずれを決定することで前記内部エネルギーを決定する、段階と、
    前記第一の適合されたモデルに関する前記第一の画像における第一のイメージエレメントの空間的な位置と、前記第二の適合されたモデルに関する前記第二の画像における第二のイメージエレメントの空間的な位置とに基づいて、前記第一の画像と前記第二の画像における対応するイメージエレメントを決定する段階と、
    を含むイメージレジストレーション方法。
  15. 第一の画像と第二の画像とを位置合わせするイメージレジストレーションコンピュータプログラムであって、
    前記イメージレジストレーションコンピュータプログラムは、請求項1記載のイメージレジストレーション装置に、前記イメージレジストレーションコンピュータプログラムが前記イメージレジストレーション装置を制御するコンピュータで実行されたときに、請求項14記載のイメージレジストレーション方法の段階を実行させるプログラムコードを含む、
    イメージレジストレーションコンピュータプログラム。
JP2013541453A 2010-12-02 2011-11-24 イメージレジストレーション装置 Expired - Fee Related JP5919296B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP10193458.6 2010-12-02
EP10193458 2010-12-02
PCT/IB2011/055277 WO2012073162A1 (en) 2010-12-02 2011-11-24 Image registration apparatus

Publications (2)

Publication Number Publication Date
JP2014503250A JP2014503250A (ja) 2014-02-13
JP5919296B2 true JP5919296B2 (ja) 2016-05-18

Family

ID=45349252

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013541453A Expired - Fee Related JP5919296B2 (ja) 2010-12-02 2011-11-24 イメージレジストレーション装置

Country Status (6)

Country Link
US (1) US8995777B2 (ja)
EP (1) EP2646979B1 (ja)
JP (1) JP5919296B2 (ja)
CN (1) CN103229210B (ja)
RU (1) RU2595757C2 (ja)
WO (1) WO2012073162A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013148308A1 (en) * 2012-03-28 2013-10-03 Intel Corporation Systems, methods, and computer program products for low-latency warping of a depth map
KR20140002997A (ko) * 2012-06-28 2014-01-09 삼성메디슨 주식회사 진단 영상 장치 및 그 동작 방법
DE102012213923B4 (de) * 2012-08-06 2016-10-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zur Positionskorrelation in medizinischen Aufnahmen
JP6063315B2 (ja) * 2013-03-26 2017-01-18 富士フイルム株式会社 真贋判定システム,特徴点登録装置およびその動作制御方法,ならびに照合判定装置およびその動作制御方法
WO2014165611A1 (en) * 2013-04-02 2014-10-09 The Regents Of The University Of California Thermoplastic 3-d phantom
JP6032610B2 (ja) * 2013-04-15 2016-11-30 富士通株式会社 表示処理プログラム、表示処理方法及び表示処理装置
US10013777B2 (en) 2013-11-25 2018-07-03 7D Surgical Inc. System and method for generating partial surface from volumetric data for registration to surface topology image data
US9183435B2 (en) * 2013-12-05 2015-11-10 Oracle International Corporation Feature generalization using topological model
CN105814605B (zh) * 2013-12-10 2019-09-24 皇家飞利浦有限公司 对解剖结构的基于模型的分割
US9955889B2 (en) 2014-11-03 2018-05-01 Biosense Webster (Israel) Ltd. Registration maps using intra-cardiac signals
EP3224803A1 (en) * 2014-11-28 2017-10-04 Koninklijke Philips N.V. Model-based segmentation of an anatomical structure
US11348227B2 (en) * 2018-09-04 2022-05-31 The Trustees Of The University Of Pennsylvania Image registration using a fully convolutional network
US11461968B2 (en) * 2020-01-30 2022-10-04 Unity Technologies Sf Method of inferring microdetail on skin animation
EP4163872A1 (en) * 2021-10-11 2023-04-12 Koninklijke Philips N.V. Enhanced segmentation

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69332042T2 (de) 1992-12-18 2003-01-02 Koninklijke Philips Electronics N.V., Eindhoven Ortungszurückstellung von relativ elastisch verformten räumlichen Bildern durch übereinstimmende Flächen
RU2171630C2 (ru) * 1999-06-18 2001-08-10 Пестряков Андрей Витальевич Способ совмещения трехмерных изображений, полученных с помощью компьютерных томографов, работающих на основе различных физических принципов
EP1671252B1 (en) * 2003-09-29 2008-09-10 Koninklijke Philips Electronics N.V. Method and device for planning a radiation therapy
JP4541988B2 (ja) * 2005-07-28 2010-09-08 富士フイルム株式会社 位置合せ装置、位置合せ方法、およびそのプログラム
US8194946B2 (en) * 2005-07-28 2012-06-05 Fujifilm Corporation Aligning apparatus, aligning method, and the program
JP5244592B2 (ja) * 2005-08-04 2013-07-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 3d−2d適応型形状モデル支援による運動補償再構成
US7653243B2 (en) 2005-10-14 2010-01-26 Siemens Medical Solutions Usa, Inc. System and method for 3D volume segmentation using exact minimal surfaces given a boundary
WO2008085193A2 (en) * 2006-08-14 2008-07-17 University Of Maryland Quantitative real-time 4d strees test analysis
US8571277B2 (en) 2007-10-18 2013-10-29 Eigen, Llc Image interpolation for medical imaging
US9547902B2 (en) * 2008-09-18 2017-01-17 Siemens Healthcare Gmbh Method and system for physiological image registration and fusion

Also Published As

Publication number Publication date
JP2014503250A (ja) 2014-02-13
RU2595757C2 (ru) 2016-08-27
US8995777B2 (en) 2015-03-31
CN103229210A (zh) 2013-07-31
CN103229210B (zh) 2016-07-06
WO2012073162A1 (en) 2012-06-07
EP2646979A1 (en) 2013-10-09
RU2013130005A (ru) 2015-01-10
EP2646979B1 (en) 2015-08-26
US20130266230A1 (en) 2013-10-10

Similar Documents

Publication Publication Date Title
JP5919296B2 (ja) イメージレジストレーション装置
CN109074639B (zh) 医学成像系统中的图像配准系统和方法
KR101267759B1 (ko) 화상 처리 장치, 화상 처리 방법 및 저장 매체
CN107038728B (zh) 基于迭代重建的轮廓自动化确定
JP5345290B2 (ja) 局所的に重み付けされた適合化を使用する画像位置合わせ
US7689021B2 (en) Segmentation of regions in measurements of a body based on a deformable model
Lorenz et al. A comprehensive shape model of the heart
JP4521271B2 (ja) 変形可能な3次元対象の頭頂の動きに関する情報を表示する画像処理システム
US8787648B2 (en) CT surrogate by auto-segmentation of magnetic resonance images
JP4918048B2 (ja) 画像処理装置及び方法
CN104346821B (zh) 用于医学成像的自动规划
US9875544B2 (en) Registration of fluoroscopic images of the chest and corresponding 3D image data based on the ribs and spine
EP2245592B1 (en) Image registration alignment metric
CN103456037A (zh) 心脏介入的术前和术中图像数据的模型融合的方法和系统
JP2019511268A (ja) 脳深部刺激療法の電極の三次元画像における回転配向の決定
JP2016536035A (ja) 変形可能レジストレーションのためのシステム及びモジュラーネットワーク
Camara et al. Explicit incorporation of prior anatomical information into a nonrigid registration of thoracic and abdominal CT and 18-FDG whole-body emission PET images
CN112529919A (zh) 用于生成受试者的心脏的牛眼图生成的系统和方法
US9558568B2 (en) Visualization method for a human skeleton from a medical scan
EP3629931B1 (en) Heatmap and atlas
EP2220618B1 (en) Apparatus for determining a parameter of a moving object
US20050163357A1 (en) Medical viewing system and image processing for integrated visualisation of medical data
Tsuzuki et al. Animated solid model of the lung constructed from unsynchronized MR sequential images
Dey et al. Estimation of cardiac respiratory-motion by semi-automatic segmentation and registration of non-contrast-enhanced 4D-CT cardiac datasets
US11837352B2 (en) Body representations

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150730

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150804

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151102

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160315

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160411

R150 Certificate of patent or registration of utility model

Ref document number: 5919296

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees