JP2015512312A - 医用画像間のトポロジー保存roiリマッピング方法 - Google Patents

医用画像間のトポロジー保存roiリマッピング方法 Download PDF

Info

Publication number
JP2015512312A
JP2015512312A JP2015503826A JP2015503826A JP2015512312A JP 2015512312 A JP2015512312 A JP 2015512312A JP 2015503826 A JP2015503826 A JP 2015503826A JP 2015503826 A JP2015503826 A JP 2015503826A JP 2015512312 A JP2015512312 A JP 2015512312A
Authority
JP
Japan
Prior art keywords
image
contour
interest
polygon mesh
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015503826A
Other languages
English (en)
Other versions
JP6153998B2 (ja
Inventor
マルク ムーリ
マルク ムーリ
ドゥ ケルロー シャルル カドラ
ドゥ ケルロー シャルル カドラ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intrasense SA
Original Assignee
Intrasense SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intrasense SA filed Critical Intrasense SA
Publication of JP2015512312A publication Critical patent/JP2015512312A/ja
Application granted granted Critical
Publication of JP6153998B2 publication Critical patent/JP6153998B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5235Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/467Arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/469Arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10088Magnetic resonance imaging [MRI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10104Positron emission tomography [PET]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • G06T2207/101363D ultrasound image

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Pathology (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Optics & Photonics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

本発明は、第1の画像(1)内の初期の関心領域(3)を使用して、第2の画像(2)内の関心領域(4)を算出する方法に関し、前記第1および第2の画像は、空間変換関数(5)によってリンクされ、本方法は、(i)第1の画像(1)内の前記初期の関心領域(3)を囲む第1のポリゴンメッシュを生成する工程と、(ii)前記空間変換関数(5)を前記第1のポリゴンメッシュに適用することによって、前記第2の画像(2)内の第2のポリゴンメッシュを算出する工程と、(iii)第2のポリゴンメッシュによって囲まれる領域に属する、前記第2の画像(2)内の画像素子を識別する工程とを含む。本発明はまた、コンピュータプログラムおよびシステムに関する。

Description

本発明は、ソース画像から宛先画像に関心領域(ROI)を転置するためのトポロジー保存転置方法に関する。
本発明の分野は、医用画像の処理および解析である。
関心領域、すなわち、ROIを使用して、医用画像内の関心エリアを分離または抽出し、そのエリアで測定または他の任意のタスクを実行する。
医用画像は、コンピュータ断層撮影法(CT)、磁気共鳴映像法(MRI)、ポジトロン放射形断層撮影(PET)、または医療超音波検査から得られた事例画像である。
医用画像は、通常、2次元(2D)の場合のピクセルまたは3次元(3D)もしくは体積画像の場合のボクセルなどの、画素の集合として表現される。
ROIは、例えば、解剖構造(肺や血管など)または病理学的構造(小結節など)に属するとして識別またはラベル付けされる画素の集合として表すことができる。ROIは、特定の構造に対応する画素を識別し、それらにタグ付けするオペレータが手動で作り出すことができる。ROIは、画像解析ツールおよび演繹的知識を用いて、自動化もしくは半自動化方法で作り出すこともできる。
診察の間、ROIを、例えば、患者の長期的フォローアップのため、または比較もしくはクロス測定のために、1つの画像もしくは一連の画像から、他の画像に伝達することが望まれることが多くある。
画像は、異なる時点で同じ撮影装置もしくは撮像技術で、または異なる取得チャネルを使用して、取得してもよい。
画像はまた、例えば、異なる種類の情報にアクセスすることを可能にする異なる撮影装置で取得してもよい。例えば、CT技術を使用して、構造情報または解剖学的情報を有する画像を取得してもよく、PET技術を使用して、同じ解剖学的構造についての機能情報を取得してもよい。
通常は、画像列のそれぞれにおいてROIを独立して再算出することは望ましくないか、または不可能である。このことは、かなり時間が必要となり、分割処理が、正確に同じ解剖学的構造に対応するROIに結びつかない危険性がある。さらに、ROIは、画像列(例えば、構造画像)において算出することができるが、解剖学的構造は、他の画像列(例えば、機能的画像)内で認識不可能である可能性があり、または分割のために十分明瞭でない可能性があり、そのため、ROIは、後の画像列において算出されない可能性がある。
解決策には、ある画像列内で算出されたROIを、他の画像列に転置することがある。だが、問題がいくつか発生する可能性があり、すなわち、画像の空間サンプリングが異なる可能性があり、画像列間の撮像された解剖学的構造に変形が生じる可能性がある。このような変形は、リジッド型(移動、回転、尺度変更)および/またはソフト型(画像への解剖学的構造の変形)である可能性がある。それらは、例えば、画像撮影装置、撮像位置、および/または患者や解剖学的構造自体の動き(呼吸など)の差異によるものである可能性がある。
画像間のソフトまたはリジッド変形は、通常、位置合わせ処理による放射線医学検査中に考慮される。画像間のソフトおよび/またはリジッド変形に対応する伝達関数が、画像内の対応する構造についての手動および/または自動識別に基づいて、算出される。だが、ソフト位置合わせ(すなわち、ソフト変形を考慮する)の場合に特に、これらの伝達関数は、画像の間のピクセル間対応関係への一般的な場合をもたらさない。
例えば、米国特許第7,817,835号では、画像間のクロスリファレンス測定を行うための方法が説明されている。ソース画像で実行され、ソース画像内に描かれるセグメントや円などのマーク位置によって表されるか、または具体化される測定値は、位置合わせ情報を使用して、宛先画像に転置される。次いで、同じ測定が、宛先画像内で独立して実行され、転置された測定値と比較される。
しかしながら、本方法は、一般的な場合、ソース画像内のエリアの点ごとの転置では、宛先画像内の対応するエリアのコヒーレント表示につながらないので、ROI転置に適用不可能である。さらに、米国特許第7,817,835号の方法は、リジッド位置合わせに限定される。
本発明の目的は、ソフトおよび/またはリジッド位置合わせ情報を使用して、ソース画像から宛先画像にROIを転置する方法を提供することである。
本発明のさらなる目的は、ソース画像から、算出要件を最適化することを可能にする宛先画像へROIを転置する方法を提供することである。
本発明のさらなる目的は、ソース画像内で取得されたROIを使用して、容易に取得することができない宛先画像内のROIを規定する方法を提供することである。
本発明のさらなる目的は、セグメント化されたリファレンス画像を使用して、宛先画像内のROIを規定する方法を提供することである。
このような目的は、第1の画像内の初期の関心領域を使用して、第2の画像内の関心領域を算出する方法により実現される。前記第1および第2の画像は、空間変換関数によってリンクされ、以下の工程を含むことを特徴とする。
−第1の画像内の前記初期の関心領域を囲む第1のポリゴンメッシュを生成する。
−前記空間変換関数を前記第1のポリゴンメッシュに適用することによって、前記第2の画像内で第2のポリゴンメッシュを算出する。
−前記第2のポリゴンメッシュによって囲まれるエリアに属する、前記第2の画像内の画像要素を識別する。
いくつかの実現モードによれば、空間変換関数は、ソフト変形を含んでいてもよい。
空間変換関数は、特に、弾性変形または塑性変形を含んでいてもよい。
第1および第2の画像は、画素がピクセルである2次元(2D)画像を含んでいてもよい。
いくつかの好適な実現モードによれば、第1および第2の画像は、画素がボクセルである3次元(3D)画像を含んでいてもよい。
本発明の方法は、さらに、以下の工程を含むことができる。
−2D第2画像のスタックとして、3D第2画像を分解する。
−前記2D第2画像内の2D関心領域を算出する。
−3D関心領域を取得するために、前記2D関心領域を組み合わせる。
本発明の方法は、さらに、以下の工程を含むことができる。
−第2のポリゴンメッシュと2D第2画像との交差部を算出して、2D輪郭画像を生成する。
−2D輪郭画像の輪郭によって囲まれるエリアに属する、前記2D第2画像の画像要素を識別する。
本発明の方法は、さらに、以下の工程を含むことができる。
−第2のポリゴンメッシュの面の位置にリファレンスを格納するオクトリーを生成する前記オクトリーを使用して、前記第2のポリゴンメッシュと前記2D第2画像との交差部を算出し、前記算出を、関連する面に限定するか、または前記2D第2画像のエリア内に位置する第2のポリゴンメッシュの面に限定する。
オクトリーは、各内部ノードが8つの子を持つ、既知のツリーデータ構造である。8つのオクタントに再帰的に分割することによって、3Dスペースを分けることを可能にし、非常に効果的で迅速な空間索引付けを可能にする。
本発明の方法は、さらに、以下の工程を含むことができる。
−2D輪郭画像に、連結コンポーネント検出を適用し、2D画像を取得し、任意の閉じた形状の外側に位置する2Dエリアが「外側」としてマークされる
−前記2D画像のピクセルに、以下の深度値、すなわち、相補値「内側」もしくは「外側」または「未定義」の1つを関連付けるバッファの形式で深度マップ画像を生成する
−前記深度マップにおいて、連結コンポーネント検出によって「外側」として事前に識別されたピクセルを「外側」値に初期設定する
−最も外側の輪郭から最も内側の輪郭へ、輪郭によって囲まれた領域を反復的に識別することによって、前記深度マップを満たし、各輪郭は、「外側」ピクセルおよび「内側」ピクセルを分け、前記「内側」ピクセルは、2D関心領域を規定する
本発明の方法は、2D輪郭画像内のすべての輪郭に対して、現在の深度値を「外側」に初期設定し、反復的に繰り返す工程をさらに含むことができ、このような工程は、以下を含む。
−輪郭追従アルゴリズムを使用して、前記2D輪郭画像内の、最も外側の輪郭の外殻を抽出し、前記最も外側の輪郭は、画像の境界とその近傍に関する基準から選択される
−前記輪郭で連結コンポーネント検出を適用し、輪郭の外側、輪郭、および輪郭の内側にそれぞれ対応する別個のエリアを生成する
−殻輪郭ピクセルを現在の深度値で、および殻の内側エリアピクセルを現在の深度の相補値でマーキングすることによって、深度マップを更新する
−前記抽出された輪郭を、前記2D輪郭画像から除去する
−現在の深度値を、次の繰り返しのために、その相補値に設定する
いくつかの実現モードによれば、空間変換関数は、剛体変形および/または尺度変更のみを含んでもよい。
剛体変形は、例えば、移動および回転を含んでいてもよい。
本発明の方法は、さらに、以下の工程を含むことができる。
−第1の画像内の初期の関心領域を囲む第1のポリゴンメッシュを生成する。
−前記初期の関心領域に含まれ、前記第1の画像の少なくとも1つの方向に沿って配向される線セグメントの境界となる、前記第1のポリゴンメッシュの第1の画素の組を識別する。
−空間変換関数を、第1の画素の前記組に適用することによって、第2の画像内の第2のポリゴンメッシュを算出し、第2の画素の対応する組を算出する。
−ラスター化アルゴリズムを使用して、隣接セグメント間でスペースが空かないようにセグメントの厚さを考慮して、第2の画素の前記対応する組によって境界付けられた線セグメントに属する、前記第2の画像の画素を算出する。
いくつかの実現モードによれば、
−第1および第2の画像に対する空間サンプリングは異なる可能性がある。
−第1の画像は、リファレンス画像か、または解剖図録からの画像とすることができる−第1および第2の画像は、別個の医用撮像技術、異なる撮影装置、または異なる取得チャネルを使用して取得してもよい。
−第1および第2の画像は、以下の医用撮像技術、すなわち、コンピュータ断層撮影法(CT)、磁気共鳴映像法(MRI)、ポジトロン放射形断層撮影(PET)、または医療超音波検査の少なくとも1つを使用して取得してもよい。
別の態様によれば、コンピュータシステムで実行されると、本発明の方法の工程を実行するための命令を含むコンピュータプログラムを提案する。
さらに他の態様によれば、本発明の方法の工程を実行するよう適合された手段を含む画像処理システムを提案する。
本発明の方法は、トポロジー保存転置処理を使用して、第1の、すなわちソース画像を、第2の、すなわち宛先画像に関心領域(ROI)を転置することを可能にする。この処理は、ソース画像と宛先画像との間で実行された可能性のある、任意の種類の位置合わせ前処理(リジッドまたはソフト)を考慮する。
本発明の方法は、例えば、ソース3D画像から検出された、視認可能な異常部を囲むROIを、異常部が視認不可であるか、または曖昧な、すなわち判断不能な境界を有する宛先3D画像に転置するために使用してもよく、この異常部の特徴に対して特定の、または追加の測定を実行することができる。例えば、ソース画像は、解剖学的CT画像とすることができ、宛先画像は、機能的PET画像とすることができる。
ROIはまた、解剖学的構造とすることができ、第1の、すなわちソース画像内でセグメンテーションされ、宛先画像に転置することができ、同じ構造のダイレクトセグメンテーションは、効率が悪いか、より時間を必要とするか、または不可能である。
本発明の方法はまた、論理的または一般的な解剖学的モデルから派生したROIを、患者からの画像に転置するか、またはマッピングするために使用してもよい。
例えば、本発明の方法を使用して、「リファレンス」とラベル付けされたCT画像から、宛先の解剖学的CT画像に、リファレンスと宛先画像との間の変化を補償しながら、環椎を投影してもよい。
初期ROIはまた、第1の患者から生じ、第2の患者からの画像に転置される可能性もある。
本発明の方法はまた、例えば、以下のように、「第1の推定」として転置されたROIを使用することによって、宛先画像内で新規のセグメンテーションを開始するために使用してもよい。
−呼吸周期の間、ソース3D画像からの第1の推定に基づいて、宛先3D画像内で肺をセグメンテーションする。
−長期的フォローアップの間、初期時間T0で取得された以前の列から、時間T1で取得された列における肺結節をセグメンテーション化する。ここでの結節は、すでにセグメンテーション化されている。
本発明の方法はまた、ROIの解像度リマッピングを行うために使用してもよい。その場合、本方法により、粗いサンプルグリッドを有する画像から、比較的細かいサンプルグリッドを有する画像にROIを転置することによって、ROIのオーバー・サンプル・バージョンを算出して、改良されたROIでより精密な測定を実行することを可能にすることができる。
すでに説明したように、数学的関数により1つのスペースから他のスペースに、均一な3D形状を規定するボクセル(または、2D画像に対するピクセル)のセットを投影することは、多くの問題を引き起こす。主要な問題は、投影されたボクセルが、宛先スペース内で散乱し、それにより、トポロジー性質の損失を引き起こす可能性があることである。
本発明の方法の利点は、以下によりこの問題を解決することである。(i)離散的ソーススペース(ソース3D画像)内で規定されたボクセルの離散的セットを、シンプレックスベース表現(例えば、三角形や四角形など)に変形する、(ii)宛先離散的スペース(宛先3D画像)内のこのような表現の、一部の規定されたボクセルのみを投影する、次いで、(iii)ボクセルの均一セットとして、この宛先離散的スペース内の、投影されたシンプレックスベース形状を再離散化する。
本方法の利点はまた、2D画像のスタックとしての3D画像を処理するなどの、医用撮像状況に特に適合した技術的アプローチを使用することであり、MRIなどのいくつかの医用撮像技術により画像を取得する方法である。
本方法のさらなる利点は、ソースおよび宛先ROIのボクセルのセットをリンクして、過度の単純化または情報の損失無しに、クロスモダリティ分析および測定を実行することを可能にすることである。
本発明の実施形態による方法は、添付図面を参照すると、より良好に理解することができる。添付図面は、例示目的であり、限定する意図はない。本発明の他の態様、目的、および利点は、以下の説明から明らかになる。
3D画像に適用される、本発明の方法を示す図である。 2D ROIを有する、2Dスライス画像を示す図である。 リジッド位置合わせのみが考慮された場合の、本発明の方法を示す図である。 ソフトまたはリジッド位置合わせが考慮された場合の、本発明の工程を示す図である。
図1を参照すると、本発明の方法により、第1の、すなわちソース画像1内の初期の関心領域(ROI)3を使用して、第2の、すなわち宛先画像2内の関心領域(ROI)4を算出することが可能になる。
図2を参照すると、ソース画像および宛先画像は、3D画素、すなわちボクセル11から構成される3D画像とすることができる。3D画像は、通常、2D画素、すなわちピクセル12から構成される2D画像10のスタックとして表すことができる。
3D画像3の関心領域(ROI)は、ボクセル11が、例えば、セグメンテーション処理の間に、特定の構造に属するとしてラベル付けされた画像のエリアである。図1の例では、脳に対応するROI3のみを示す。
3D画像が、2D画像または2Dスライスのスタックとして表された場合、3D ROIは、2D ROI13を形成する、ラベル付けされたピクセル12の集合として、2D画像10で表示される。
画像を比較し、一緒に使用することを可能にするために、ソース画像1および宛先画像2は、位置合わせ処理の間、リンクされていなければならない。この処理は、医用撮像において一般的であり、そのため、本明細書では詳細を説明しない。
位置合わせ処理は、ソース画像1および宛先画像2の間での空間変形について記述する空間変換関数5を算出することを含む。これらの変形は、例えば、撮像装置もしくは技術および/または患者の動きの違いにより左右される可能性がある。
空間変換関数5により、ソース画像1の画素と宛先画像2の画素との間の関係を確立し、一方の画像の他方の画像に対する変形を正し、画像の良好なマッチングを可能にすることができる。関数の形式で、または画像間の対応関係表の形式で、算出してもよい。
空間変換関数5は、以下の方法を使用して算出してもよい。
−両方の画像で発見することができる顕著な解剖学的特徴を(手動および/または自動的に)識別する。
−変形モデルを選択する。
−リジッド変形モデルを使用する場合、画像全体の移動、回転、および/または尺度変更を含み、両方の画像の顕著な解剖学的特徴を可能な限り重ね合わせることができるよう、モデルの最善の適合パラメータを算出する。
−ソフト変形モデルを使用する場合、画像の顕著な解剖学的特徴の位置を重ね合わせ、物理的変形モデル(例えば、弾性変形モデル)または数学的変形モデル(数学的補間法などによる)に基づいて、これらの特徴の間の局所的変形を算出する。
第1のモード:リジッド位置合わせ
図3を参照すると、本発明の方法の実装形態における第1のモードを説明し、リジッド位置合わせのみを用いる場合に適用可能である。この場合では、ソース画像1および宛先画像2の間の空間変換関数24は、移動、回転、および/または尺度変更のみを含むことができる。
実装形態のこのモードにより、適用可能である場合、算出時間をより短くすることを実現することが可能となる。以下の工程を含む。
1)ROIの表面を近似するポリゴンメッシュを生成することによって、ソースROI3の輪郭を算出する。
2)ソース画像1において、ROI3の輪郭に属し、サンプリンググリッド(例えば、X軸)の方向に沿った同じ線セグメント21上にある点20の組を識別する。
3)空間変換関数24を、点20のこれらの組に適用し、宛先画像2内の点22の対応する組を算出する。
4)ブレゼンハムアルゴリズムなどのラスター化アルゴリズムを使用して、宛先画像2の点22の組の間の線セグメント23に属するボクセルを算出する。ソース画像と宛先画像との間の尺度変更および/またはサンプリングの差異を考慮するために、厚さパラメータを線セグメント23に適用することで、隣接する線セグメント23の間にボクセルが残らなくなる。
次いで、宛先または転置ROI4が、ラスター化処理の間に識別されたボクセルから構成される。
この方法は、宛先画像2内の転置された線セグメント23が互いに並列のままである限り、空間変換関数24を適用可能である。
当然、同じ処理を、ソース画像のサンプリンググリッドの他の方向(例えば、Y軸またはZ軸)に沿って繰り返すことができる。
第2のモード:リジッドおよびソフト位置合わせ
図4を参照すると、本発明の方法の実装形態における第2のモードについて説明し、任意の種類のリジッドおよび/またはソフト位置合わせで適用可能である。
以下の工程を含む。
1)ROIの表面を近似するポリゴンメッシュを生成することによって、ソース画像1内のソースROI3の輪郭を算出する。
2)空間変換関数5を使用してポリゴンメッシュを変形し、宛先画像2スペース内に、対応する変形ポリゴンメッシュを算出する。
3)変形メッシュの面にリファレンスを格納するオクトリーを生成する。
4)スライスごとに宛先画像2を処理する。医用画像がすでに通常2Dスライスのスタックとして格納されており、それらがまた、その方法(例えば、MRI)で頻繁に取得されることに注目することが重要である。
5)オクトリーを使用して、宛先体積のスライスと変形ポリゴンメッシュとの交差部を算出し、関連する面に演算を限定し、これらの交差部30を表す2D輪郭画像(図4a)を生成する。各宛先スライスは、オクトリーに対してテストされ、スライスの面を横切る可能性がある三角形のサブセットを判断する。その場合、2D輪郭画像は、変形ポリゴンメッシュの三角形と、宛先体積のスライスを囲む面との交差部30の結果である。各交差する三角形に対して、サポートする面との交差部30の形状は、現在スライスを表す画像内に2Dで描かれる。三角形と厚さの無い面との交差部30は、面内に格納される場合、空であるか、単一ピクセルであるか、線であるか、三角形自体である。
6)以下に説明する2D充填処理を使用して輪郭画像を満たし、宛先ROI4の2Dスライスに属するスライスのピクセルを識別する(図4j)。
7)充填された2D輪郭画像を組み合わせ、宛先ROI4を構築する。
2D充填処理によって、比較的高速な処理を可能にする一方で、大多数の場合に正確な結果を確実にもたらす。基本的な考えは、「外側ピクセル」での連結性に基づき、2D画像スライスのピクセルの連続するレイヤ(または、グループ)を「剥離する」ことであり、その結果、これらのレイヤまたはグループを、「内側」または「外側」として識別することができる。
2D充填処理は、以下の工程を含む。
1)「輪郭画像」(図4a)を入力として取り出し、連結コンポーネント検出アルゴリズムを適用する。連結コンポーネント検出、すなわち、小塊検出は、いくつかの特性を隣接部と共有するピクセル12のグループを識別し、それらの特性に基づいてグループ内のピクセルをセグメンテーションすることを可能にする既知のアルゴリズムのクラスのことを言う。本明細書では、その結果は、2D画像(図4b)であり、任意の閉じた形状の外部に位置するすべての2Dエリア31が、「外側」としてマークされる。より正確には、図4bの例では、連結コンポーネント検出は、以下のグループ、すなわち、最も外側のエリア31、輪郭ならびに起こり得る望ましくない包含物32、2つのエリア33、34内のピクセルのセグメンテーションをもたらす。エリア33、34のうち後者は、本実施例において、ROIに属さない中央管腔である。
2)宛先スライスと同じサイズを有する画像である「深度マップ」(図4c)を生成する。「深度マップ」は、宛先スライス内の各ピクセルに対して、ピクセルが「内側」「外側」または「未定義」であるかを判断する整数の「深度」値を関連付けるピクセルデータバッファである。連結コンポーネント検出によって「外側」として事前に識別されたすべてのピクセル35を、「外」値(0)に初期設定する。ピクセル36の残りを、「未定義」(−1)値に設定する。処理の繰り返しの間、深度マップのピクセルは、更新されて、最も外側のエリアに対する宛先スライス内のピクセルの位置(「内」または「外」)を反映する。
3)「現在深度」パラメータを「外側」に初期設定する。
4)「剥離処理」:輪郭画像(図4d)内に輪郭点がある限り、以下の処理を続ける。
(i)充填対象の輪郭画像内で、「次の」輪郭点37を発見する。「次の」輪郭点は、輪郭画像内の最も左側で、最も上側のピクセルとして定義される。そのピクセルと関連付けられた深度値を深度マップから検索する(この深度値は、事前に初期設定された深度マップから読み取られる)。
(ii)従来の輪郭追従アルゴリズムを使用して、輪郭の外殻38(図4e)を抽出する。その殻内に位置するあらゆる「内側」輪郭を削除する。
(iii)連結コンポーネント検出を殻に適用する(図4f)。3つの別個のエリア、すなわち、形状の外側39、形状の輪郭40、および形状の内側41を生成する。
(iv)以前の工程からの連結コンポーネント画像(図4f)を使用して殻の内側に位置するピクセル42に対する深度マップ(図4g)を更新する。殻輪郭ピクセル40は、現在深度でマークされ(図4gでの「外側」)、殻内側ピクセル42は、現在深度の相補値としてマークされる(図4gの「内側」)。
(v)輪郭画像(図4a)から殻の輪郭点40を取り去り、新規の輪郭画像となる図4hにつながり、次の繰り返しで図4dを置き換える。
(vi)次の繰り返しのために、現在深度をそれ自体の相補値(すなわち、「外側」であった場合、「内側」に、逆も同様である)に設定する。
(vii)工程(i)で、繰り返しを反復する。
5)最後に、連結コンポーネント画像(図4b)を使用して、繰り返しの後に取得された深度マップ内の欠落したソース外側輪郭を復元する。工程4における剥離処理中に失われた元の形状の外殻を復元するために行われる(殻輪郭40が、第1の繰り返しでは「外側」である、図4fにおける現在のピクセル深度に設定される)。したがって、この工程は、元の輪郭ピクセルの深度を「内側」に単に設定するため、失われない。図4iおよび図4jは、それぞれ、元の形状輪郭を復元する前および後の深度マップを示す。
本処理の最後で、深度マップ(図4j)は、元の画像の各ピクセルおよびすべてのピクセルに対する「内側」または「外側」ステータスを保持する。したがって、深度マップは、正確に充填された結果の画像となる。
ROIのピクセルは、「内側」ピクセル44である。図4の例において、ROIは、(血管などの)管腔を有する中空構造に対応する。
本発明は多数の実施形態に関連して説明してきたが、多くの代替、変更および変形があること、または適用可能な分野の当業者には明らかであることは明白である。したがって、本発明の主旨および範囲内にあるこのようなすべての代替、変更、等価物および変形を包含することを意図している。

Claims (15)

  1. 第1の画像(1)内の初期の関心領域(3)を使用して、第2の画像(2)内の関心領域(4)を算出する方法であって、前記第1および第2の画像が、空間変換関数(5、24)によってリンクされており、前記方法が、
    前記第1の画像(1)内の前記初期の関心領域(3)を囲む第1のポリゴンメッシュを生成する工程と、
    前記空間変換関数(5)を前記第1のポリゴンメッシュに適用することによって、前記第2の画像(2)内で第2のポリゴンメッシュを算出する工程と、
    前記第2のポリゴンメッシュによって囲まれるエリアに属する、前記第2の画像(2)内の画像要素(11、12)を識別する工程と
    を含むことを特徴とする、前記方法。
  2. 前記空間変換関数(5)が、ソフト変形を含む、請求項1に記載の方法。
  3. 2D第2画像(10)のスタックとして、3D第2画像(2)を分解する工程と、
    前記2D第2画像(10)内の2D関心領域(13)を算出する工程と、
    前記2D関心領域(13)を組み合わせ、3D関心領域(4)を取得する工程と
    をさらに含む、請求項1または2に記載の方法。
  4. 前記第2のポリゴンメッシュと2D第2画像(10)との交差部を算出して、2D輪郭画像を生成する工程と、
    前記2D輪郭画像の輪郭(30)によって囲まれるエリアに属する、前記2D第2画像(10)の画像要素を識別する工程と
    をさらに含む、請求項1〜3のいずれか1項に記載の方法。
  5. 前記第2のポリゴンメッシュの面の位置にリファレンスを格納するオクトリーを生成する工程と、
    前記オクトリーを使用して、前記第2のポリゴンメッシュと前記2D第2画像(10)との交差部を算出する工程とをさらに含む、請求項4に記載の方法。
  6. 前記2D輪郭画像に、連結コンポーネント検出を適用し、任意の閉じた形状(31)の外側に位置する2Dエリアが「外側」としてマークされる2D画像を取得する工程と、
    前記2D画像のピクセルに、以下の深度値、すなわち、相補値「内側」もしくは「外側」または「未定義」の1つを関連付けるバッファの形式で深度マップ画像を生成する工程と、
    前記深度マップにおいて、前記連結コンポーネント検出によって「外側」として事前に識別された前記ピクセル(35)を「外側」値に初期設定する工程と、
    最も外側の輪郭から最も内側の輪郭へ、輪郭(30)によって囲まれた領域(44)を反復的に識別することによって、前記深度マップを満たす工程と
    をさらに含み、各輪郭は、「外側」ピクセルおよび「内側」ピクセルを分け、前記「内側」ピクセルは、前記2D関心領域を規定する、請求項4または5に記載の方法。
  7. 前記2D輪郭画像内のすべての輪郭に対して、現在の深度値を「外側」に初期設定し、反復的に繰り返す工程をさらに含み、
    輪郭追従アルゴリズムを使用して、前記2D輪郭画像内の、前記画像の境界とその近傍に関する基準から選択される最も外側の輪郭の外殻(38)を抽出する工程と、
    前記輪郭で連結コンポーネント検出を適用し、前記輪郭の外側(39)、前記輪郭(40)、および前記輪郭の内側(41)にそれぞれ対応する別個のエリアを生成する工程と、
    殻輪郭ピクセル(40)を現在の深度値で、および殻の内側エリアピクセル(41)を現在の深度の相補値でマーキングすることによって、前記深度マップを更新する工程と、
    前記抽出された輪郭を、前記2D輪郭画像から除去する工程と、
    前記現在の深度値を、次の繰り返しのために、その相補値に設定する工程と
    を含む、請求項6に記載の方法。
  8. 前記空間変換関数(24)が、剛体変換および/または尺度変更のみを含む、請求項1に記載の方法。
  9. 前記第1の画像(1)内の初期の関心領域(3)を囲む第1のポリゴンメッシュを生成する工程と、
    前記初期の関心領域に含まれ、前記第1の画像の少なくとも1つの方向に沿って配向される線セグメント(21)の境界となる、前記第1のポリゴンメッシュの第1の画素(20)の組を識別する工程と、
    空間変換関数(24)を、第1の画素(20)の前記組に適用することによって、第2の画像(2)内の第2のポリゴンメッシュを算出し、第2の画素の対応する組を算出する工程と、
    ラスター化アルゴリズムを使用してそして隣接セグメント間でスペースが空かないようにセグメントの厚さを考慮して、第2の画素(22)の前記対応する組によって境界付けられた線セグメント(23)に属する、前記第2の画像(2)の画素を算出する工程と
    をさらに含む、請求項8に記載の方法。
  10. 前記第1および第2の画像(1、2)に対する空間サンプリングが異なる、請求項1〜9のいずれか1項に記載の方法。
  11. 前記第1の画像(1)が、リファレンス画像または解剖図録からの画像である、請求項1〜10のいずれか1項に記載の方法。
  12. 前記第1および第2の画像が、別個の医用撮像技術を使用して取得される、請求項1〜11のいずれか1項に記載の方法。
  13. 前記第1および第2の画像(1、2)は、以下の医用撮像技術、すなわち、コンピュータ断層撮影法(CT)、磁気共鳴映像法(MRI)、ポジトロン放射形断層撮影(PET)、または医療超音波検査の少なくとも1つを使用して取得される、請求項1〜12のいずれか1項に記載の方法。
  14. コンピュータシステムで実行されると、請求項1〜13のいずれか1項に従って、前記方法の前記工程を実行するための命令を含むコンピュータプログラム。
  15. 請求項1〜13のいずれか1項に従って、前記方法の前記工程を実行するよう適合される手段を含む、画像処理システム。
JP2015503826A 2012-04-03 2013-03-27 医用画像間のトポロジー保存roiリマッピング方法 Active JP6153998B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP12305397.7A EP2648160B1 (en) 2012-04-03 2012-04-03 Topology-preserving ROI remapping method between medical images
EP12305397.7 2012-04-03
PCT/EP2013/056608 WO2013149920A1 (en) 2012-04-03 2013-03-27 Topology-preserving roi remapping method between medical images

Publications (2)

Publication Number Publication Date
JP2015512312A true JP2015512312A (ja) 2015-04-27
JP6153998B2 JP6153998B2 (ja) 2017-06-28

Family

ID=48190915

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015503826A Active JP6153998B2 (ja) 2012-04-03 2013-03-27 医用画像間のトポロジー保存roiリマッピング方法

Country Status (6)

Country Link
US (1) US9836834B2 (ja)
EP (1) EP2648160B1 (ja)
JP (1) JP6153998B2 (ja)
CA (1) CA2869799A1 (ja)
ES (1) ES2627108T3 (ja)
WO (1) WO2013149920A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015074158A1 (en) * 2013-11-25 2015-05-28 7D Surgical Inc. System and method for generating partial surface from volumetric data for registration to surface topology image data
US9501830B2 (en) * 2015-03-18 2016-11-22 Intel Corporation Blob detection in noisy images
BR112017019980B1 (pt) * 2015-03-19 2024-03-12 Nobel Biocare Services Ag Segmentação de objetos em dados de imagem utilizando detecção de canal
EP3109824B1 (en) * 2015-06-24 2019-03-20 RaySearch Laboratories AB System and method for handling image data
CN107545584B (zh) * 2017-04-28 2021-05-18 上海联影医疗科技股份有限公司 医学图像中定位感兴趣区域的方法、装置及其系统
WO2018001099A1 (zh) * 2016-06-30 2018-01-04 上海联影医疗科技有限公司 一种血管提取方法与系统
CN109640831B (zh) * 2016-09-01 2022-06-28 皇家飞利浦有限公司 超声诊断装置
FR3066902A1 (fr) * 2017-06-06 2018-12-07 Therenva Procede et systeme d'aide au guidage d'un outil endovasculaire
CN110021025B (zh) * 2019-03-29 2021-07-06 上海联影智能医疗科技有限公司 感兴趣区域的匹配和显示方法、装置、设备及存储介质
CN110148160A (zh) * 2019-05-22 2019-08-20 合肥中科离子医学技术装备有限公司 一种正交x射线影像快速2d-3d医学图像配准方法
CN111476762B (zh) * 2020-03-26 2023-11-03 南方电网科学研究院有限责任公司 一种巡检设备的障碍物检测方法、装置和巡检设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05282422A (ja) * 1992-04-03 1993-10-29 Asahi Chem Ind Co Ltd 画像処理装置
JP2002109538A (ja) * 2000-10-03 2002-04-12 Fuji Photo Film Co Ltd 画像の位置合わせ方法および装置
JP2006325629A (ja) * 2005-05-23 2006-12-07 Ge Medical Systems Global Technology Co Llc 3次元関心領域設定方法,画像取得装置およびプログラム
JP2007267979A (ja) * 2006-03-31 2007-10-18 Yoko Arimasa 生物の臓器形態解析方法と生物の臓器形態解析システム
JP2009195306A (ja) * 2008-02-19 2009-09-03 Toshiba Corp 医用画像表示装置および画像表示方法
JP2009544101A (ja) * 2006-07-17 2009-12-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 医用画像セグメンテーション用の多角形メッシュを用いた効率的ユーザインタラクション
US20090326363A1 (en) * 2008-05-02 2009-12-31 Eigen, Llc Fused image modalities guidance
JP2011024763A (ja) * 2009-07-24 2011-02-10 Hitachi Ltd 画像処理方法および画像処理装置
JP2011041656A (ja) * 2009-08-20 2011-03-03 Yamatake Corp ボリュームデータ間の対応付け方法
JP2011506032A (ja) * 2007-12-18 2011-03-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 一貫性指標に基づく画像レジストレーション
JP2011092677A (ja) * 2009-09-30 2011-05-12 Fujifilm Corp 肝臓造影像を用いた医用画像診断装置および方法、並びにプログラム
WO2013132801A1 (ja) * 2012-03-05 2013-09-12 富士フイルム株式会社 医用画像表示装置および医用画像表示方法、並びに、医用画像表示プログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7689021B2 (en) * 2005-08-30 2010-03-30 University Of Maryland, Baltimore Segmentation of regions in measurements of a body based on a deformable model
US7817835B2 (en) 2006-03-31 2010-10-19 Siemens Medical Solutions Usa, Inc. Cross reference measurement for diagnostic medical imaging
US8284204B2 (en) * 2006-06-30 2012-10-09 Nokia Corporation Apparatus, method and a computer program product for providing a unified graphics pipeline for stereoscopic rendering
US20110178389A1 (en) * 2008-05-02 2011-07-21 Eigen, Inc. Fused image moldalities guidance
US9521994B2 (en) * 2009-05-11 2016-12-20 Siemens Healthcare Gmbh System and method for image guided prostate cancer needle biopsy

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05282422A (ja) * 1992-04-03 1993-10-29 Asahi Chem Ind Co Ltd 画像処理装置
JP2002109538A (ja) * 2000-10-03 2002-04-12 Fuji Photo Film Co Ltd 画像の位置合わせ方法および装置
JP2006325629A (ja) * 2005-05-23 2006-12-07 Ge Medical Systems Global Technology Co Llc 3次元関心領域設定方法,画像取得装置およびプログラム
JP2007267979A (ja) * 2006-03-31 2007-10-18 Yoko Arimasa 生物の臓器形態解析方法と生物の臓器形態解析システム
JP2009544101A (ja) * 2006-07-17 2009-12-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 医用画像セグメンテーション用の多角形メッシュを用いた効率的ユーザインタラクション
JP2011506032A (ja) * 2007-12-18 2011-03-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 一貫性指標に基づく画像レジストレーション
JP2009195306A (ja) * 2008-02-19 2009-09-03 Toshiba Corp 医用画像表示装置および画像表示方法
US20090326363A1 (en) * 2008-05-02 2009-12-31 Eigen, Llc Fused image modalities guidance
JP2011024763A (ja) * 2009-07-24 2011-02-10 Hitachi Ltd 画像処理方法および画像処理装置
JP2011041656A (ja) * 2009-08-20 2011-03-03 Yamatake Corp ボリュームデータ間の対応付け方法
JP2011092677A (ja) * 2009-09-30 2011-05-12 Fujifilm Corp 肝臓造影像を用いた医用画像診断装置および方法、並びにプログラム
WO2013132801A1 (ja) * 2012-03-05 2013-09-12 富士フイルム株式会社 医用画像表示装置および医用画像表示方法、並びに、医用画像表示プログラム

Also Published As

Publication number Publication date
EP2648160A1 (en) 2013-10-09
EP2648160B1 (en) 2017-03-08
ES2627108T3 (es) 2017-07-26
JP6153998B2 (ja) 2017-06-28
US9836834B2 (en) 2017-12-05
US20150049932A1 (en) 2015-02-19
CA2869799A1 (en) 2013-10-10
WO2013149920A1 (en) 2013-10-10

Similar Documents

Publication Publication Date Title
JP6153998B2 (ja) 医用画像間のトポロジー保存roiリマッピング方法
CN106663309B (zh) 用于医学成像中的用户引导的骨骼分段的方法和存储介质
US8379957B2 (en) System and method for segmentation of anatomical structures in MRI volumes using graph cuts
JP4787171B2 (ja) 弾力的な画像位置合わせ
EP3164072B1 (en) System and method for segmentation of lung
EP2916738B1 (en) Lung, lobe, and fissure imaging systems and methods
US8913060B2 (en) Systems and methods for extracting a curve-skeleton from a volumetric image of a vessel
EP1851722B1 (en) Image processing device and method
US8073227B2 (en) System and method for geometric modeling of tubular structures
CN108038862B (zh) 一种交互式医学图像智能分割建模方法
JP5584441B2 (ja) ボリュームデータ間の対応付け方法
US8970581B2 (en) System and method for interactive contouring for 3D medical images
EP2996085A1 (en) Method and system for analyzing image data
US20090092301A1 (en) System and Method for Organ Segmentation Using Surface Patch Classification in 2D and 3D Images
JP2011514190A (ja) 画像内の解剖学的構造のセグメンテーションおよびモデリングのための方法およびシステム
CN107067398A (zh) 用于三维医学模型中缺失血管的补全方法及装置
US20130077842A1 (en) Semi-Automated Preoperative Resection Planning
KR101178398B1 (ko) 의료 영상 분할 처리 장치와 방법 및 컴퓨터 프로그램이 기록된 기록매체
CN108694007B (zh) 从磁共振图像展开肋骨
CN112884879B (zh) 用于提供至少一个管状结构的二维展开图像的方法
CN116051553B (zh) 一种在三维医学模型内部进行标记的方法和装置
Sermesant et al. Biomechanical model construction from different modalities: Application to cardiac images
Valenzuela et al. Correction tool for active shape model based lumbar muscle segmentation
Kirchberg et al. Modeling the human aorta for MR-driven real-time virtual endoscopy
US20240005503A1 (en) Method for processing medical images

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160127

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170516

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170531

R150 Certificate of patent or registration of utility model

Ref document number: 6153998

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250