JP5695648B2 - 医用画像処理方法および装置 - Google Patents

医用画像処理方法および装置 Download PDF

Info

Publication number
JP5695648B2
JP5695648B2 JP2012531496A JP2012531496A JP5695648B2 JP 5695648 B2 JP5695648 B2 JP 5695648B2 JP 2012531496 A JP2012531496 A JP 2012531496A JP 2012531496 A JP2012531496 A JP 2012531496A JP 5695648 B2 JP5695648 B2 JP 5695648B2
Authority
JP
Japan
Prior art keywords
image
images
atlas
segmentation
labeled
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012531496A
Other languages
English (en)
Other versions
JP2013506478A (ja
Inventor
ポール ダニエル リュッケルト、ジャン
ポール ダニエル リュッケルト、ジャン
ウォルツ、ロビン
アルジャバー、ポール
Original Assignee
インペリアル イノベ−ションズ リミテッド
インペリアル イノベ−ションズ リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by インペリアル イノベ−ションズ リミテッド, インペリアル イノベ−ションズ リミテッド filed Critical インペリアル イノベ−ションズ リミテッド
Publication of JP2013506478A publication Critical patent/JP2013506478A/ja
Application granted granted Critical
Publication of JP5695648B2 publication Critical patent/JP5695648B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • G06F18/2137—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps
    • G06F18/21375—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps involving differential geometry, e.g. embedding of pattern manifold
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/149—Segmentation; Edge detection involving deformable models, e.g. active contour models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/42—Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation
    • G06V10/422—Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation for representing the structure of the pattern or shape of an object therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/7715—Feature extraction, e.g. by transforming the feature space, e.g. multi-dimensional scaling [MDS]; Mappings, e.g. subspace methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10088—Magnetic resonance imaging [MRI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20112—Image segmentation details
    • G06T2207/20128—Atlas-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30016—Brain

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Description

本発明は、医用画像を処理する方法および対応する装置に関する。本発明は、例えば人間の脳の磁気共鳴画像の処理に特に適しているが、これに限定されない。
脳の磁気共鳴画像（ＭＲＩ）からの特徴（フィーチャ）の自動抽出は、神経画像検査においてますます重要なプロセスとなっている。脳構造は被験者間で大きく異なる上、老化または疾患の進行のいずれかによって顕著に変化するので、特徴抽出中に解剖学的差異を処理する適切な方法を発見することが、近年ますます注目を集めている。
この多様性を処理する最も一般的な方法は、アトラスベースの手法である。本研究の文脈では、「アトラス（atlas）」とは、画像内の点、領域または構造を特定するための注釈またはラベルを有するデータセット（３Ｄ画像、２Ｄ画像、任意の次元の画像、または一連の画像）のことである。
アトラスベースの手法は、確率的または統計的な方法のいずれかで、解剖学的多様性をアトラスが符号化することができると仮定する。代表アトラスを構築するとき、母集団の任意の特定のサブグループに対して不偏であるテンプレートに対して全画像を位置合わせすることが重要である。形状平均化およびアトラス構築のために大変形微分同相写像（large deformation diffeomorphic）を用いる二つの手法がAvants and Gee (2004)およびJoshi et al. (2004)によって提案されている。画像を位置合わせする（co-registering）テンプレートフリーの方法は、空間画像正規化のために確立されたフレームワークを形成する。単一の代表平均アトラスを探す手法から発展して、より最近の二つの方法は、画像データセット内の異なる母集団のモードを特定する方法について述べている（Blezek and Miller, 2007；Sabuncu et al., 2008）。
被験者情報に左右される様々なアトラスを設計するために、近年、経時的な疾患進行中の脳形状の解剖学的変化の特性を明らかにするという問題に対して様々なアプローチが適用されてきた。Davis et al. (2007)は、微分同相写像の多様体に対してカーネル回帰が適用される母集団形状回帰方法について記載する。Ericsson et al. (2008)は、性別、年齢または臨床学的因子などのメタ情報にしたがって、小さな変形セッティングに異なる平均脳アトラスが構築される、患者固有アトラスの構築方法を提案している。
磁気共鳴（ＭＲ）脳画像データから特徴またはバイオマーカーを抽出する方法は、関心領域の自動セグメンテーション（セグメント化）で始まることが多い。非常に一般的なセグメンテーション法は、ラベル伝播を使用する。これは、アトラス画像から不可視の（unseen）ターゲット画像へと、両方の画像の位置合わせによってラベルを変換する。アトラスは典型的にマニュアルでラベル付けされるが、これは必ずしも必要ではない。このアプローチを用いた初期の研究は、Bajcsy et al. (1983)により提案されており、より最近ではGee et al. (1993)およびCollins et al. (1995)によって提案されている。ラベル伝播の精度は、基礎となる画像の位置合わせ精度に強く依存している。単一のセグメンテーションへの依存を解決するために、Warfield et al. (2004)はＳＴＡＰＬＥ、セグメンテーションの収集のために、真のセグメンテーションの確率論的推定を計算する方法を提案した。Rohlfing et al. (2004)は、複数のアトラスから伝播したラベルを分類装置融合（classifier fusion）ステップで組み合わせてターゲット画像の最終セグメンテーションを取得する、複数分類装置（multi-classifier）フレームワークのロバスト性および精度の改善を実証した。分類装置融合と組み合わせるラベル伝播は、Heckemann et al. (2006)による脳ＭＲ画像内での多数の構造のセグメント化でうまく活用された。
解剖学的多様性が広範囲であるため、アトラスの選択は、マルチアトラスセグメンテーションにおける重要な問題となっている。所与のターゲットに対する適切なアトラスの選択は、アトラスターゲットの位置合わせおよびその後のセグメンテーションが可能な限り正確であることを保証する助けとなる。Wu et al. (2007)は、アトラス選択を組み込むことによって、単一アトラスの場合のセグメンテーション結果を改善する別の方法について述べている。Aljabar et al. (2009)は、マルチアトラスセグメンテーション中に最適なアトラスを選択する別の類似手段を研究している。Van Rikxoort et al. (2008)は、収束基準が満足するまで画像の異なるサブウインドウ内でアトラスの組み合わせを実行する方法を提案する。これらの手法は、各ターゲット画像に対して個別に適切なアトラスを選択することに意味があることを示している。利用できるＭＲ脳画像の数は増加しているが、高品質のマニュアルアトラスの作成は労働集約的であり費用のかかる仕事である（例えばHammers et al. (2003)を参照）。これは、アトラスの数が比較的限られていることが多く、ほとんどの場合、特定の母集団（例えば、若く健康な被験者）に制限されることを意味する。これは、たとえ選択アプローチを使用したとしても、アトラスデータベースの適用性を制限しうる。これを解決するべく、Tang et al. (2009)は、単一のテンプレート画像と訓練画像との間での変換から学習したＰＣＡ変形モデルを利用することによって、多様なアトラス画像を生成しようとしている。モデルからサンプリングされた複数の変換を用いて初期テンプレートを変換することによって、潜在的なアトラスが作成される。この前提は、不可視画像に対する適切なアトラスを見つけることによって、このテンプレートへの高速かつ正確な位置合わせを容易に実現できるというものである。しかしながら、訓練データよりも大きな変動レベルを有するテストデータは、この手法に対して重要な課題を突きつける。加えて、かなりばらつきがある訓練データセットを使用すると、様々な画像と単一テンプレートとの間での位置合わせ誤差の可能性が増大するため、代表的でないＰＣＡモデルにつながることがある。この制約により、この手法は、全てのトレーニング画像から単一の初期テンプレートへの良好な位置合わせを容易に実現することができる場合にのみ適用できるに過ぎない。
アトラスベースのセグメンテーションは、ターゲット画像と類似するアトラスの選択から利益を受ける（Wu et al., 2007；Aljabar et al., 2009）。しかしながら、実際問題として、初期アトラスはターゲット画像母集団の特定のサブグループを代表しているに過ぎないことがある。
したがって、相当量の解剖学的多様性を示すＭＲ脳画像の大きく多様なセットにまで比較的少数のアトラスを伝播できるようにすることが望ましい。
自動でラベル付けされた脳画像を用いて不可視画像にラベル付けする従来の研究は、直接マルチアトラス伝播におけるセグメンテーション精度を改善するには至らなかった。Heckemann et al., 2006では、複数の比較的同質のアトラスを、不可視画像のセグメンテーションのための単一アトラスとして使用される、ランダムに選択された中間画像に伝播させたとき、得られた平均ダイス（Dice）とマニュアルデリニエーション（manual delineation）との重なりは、直接マルチアトラス伝播および融合の場合の０．８４と比較して、０．８０であった。第２の実験では、ランダムに選択された中間被験者に単一アトラスが伝播され、続いてこれをマルチアトラスセグメンテーション法でさらに使用した結果、マニュアルデリニエーションとのＤｉｃｅ係数のオーバーラップはせいぜい０．７８であった。
さらなる背景技術は、米国特許出願公開US 2007/0053589 A1、US 2008/0154118 A1およびWO 2009/093146 A1によって提供される。これらの全てが画像データのセグメンテーション法を開示する。
本発明の第１の態様によると、特許請求の範囲の請求項１で規定される方法が提供される。したがって、コンピュータプロセッサによって実行される医用画像の処理方法が提供される。この方法は、（ａ）一つ以上の解剖学的特徴がラベルデータを用いてラベル付けされた一つ以上の画像を含む、一つ以上のアトラスを取得するステップと、（ｂ）複数のラベル付けされていない画像を取得するステップと、（ｃ）ラベル付けされた画像とラベル付けされていない画像とを比較し、一つまたは複数のラベル付けされた画像と最も類似する一つ以上のラベル付けされていない画像を選択するステップと、（ｄ）選択された画像のそれぞれに対して、最も近い一つ以上のラベル付けされていない画像からのラベルデータを伝播し、これによって、選択された画像それぞれの対応する解剖学的特徴にラベル付けし、選択された画像をラベル付けされた画像にするステップと、（ｅ）ステップ（ｃ）以降を繰り返すことによって、他のラベル付けされていない画像にラベル付けするステップと、を含む。
「ラベル付けされた」という用語は、解剖学的特徴のデリニエーション（delineation）、セグメンテーション（segmentation）、またはアノテーション（annotation）のあらゆる種類を包含するように、広く解釈されるべきである。同様に、「ラベルデータ」という用語は、医用画像上で解剖学的特徴に描写（delineated）、セグメント化（segmented）、または注釈を付す（annotated）ことができるあらゆる種類の符号化を包含するように、広く解釈されるべきである。
最も近いラベル付き画像からラベルなし画像へとラベルデータを繰り返し伝播するおかげで、構造的に類似のアトラスを用いてそれぞれのラベルなし画像をセグメント化することができる。結果として、ラベル付き画像とラベルなし画像の間での比較的大きな差異を、ラベルデータが伝搬される比較的類似する最初にラベル付けされない画像間での多数の小さな差異へと分解することができ、位置合わせ誤差を削減することが可能になる。
好適ではあるが選択的な特徴は、従属項で規定される。
したがって、ラベル付けされた画像とラベル付けされていない画像とを比較するステップは、低次元の座標系内に画像を埋め込むことを好ましくは含む。これにより、ラベル付き画像とラベルなし画像とを比較して、計算的に効率的な方法でその差異を定量的に評価することが可能になる。特定の実施形態では、低次元座標系が二次元座標系であってもよい。こうすると、画像間の差異の解析と処理がさらに単純化される。
ラベル付けされた画像とラベル付けされていない画像とを比較するステップは、画像セット内の各画像ペアについて一つ以上の解剖学的特徴を比較することによって、ペア間類似度測定（pairwise measures of similarity）のセットを定義することを好ましくは含む。特に好ましくは、このステップは、ペア間類似度測定でスペクトル解析操作を実行することをさらに含む。しかしながら、当業者であれば、これを実現可能である他の方法が存在することを理解するだろう。
ペア間類似度測定は、画像ペア間での強度の類似度を表してもよいし、および／または画像ペア間での変形量を表してもよい。
ラベルデータを伝播するステップは、分類装置融合（classifier fusion）技術に基づき、最も近い複数のラベル付けされていない画像からラベルデータを伝播することを好ましくは含む。これにより、選択された画像（単数または複数）により高い精度でラベルを付けることが可能になる。
ラベル付けプロセス中の位置合わせ誤差の集積をさらに最小化するために、ステップ（ｄ）の後かつステップ（ｅ）の前に、新たに伝播されたラベルデータに強度ベースの精密化（inteisity-based refinement）操作を実行するステップをさらに含むことが好ましい。
画像は異なる被験者のものであってもよい。代替的に、画像の少なくとも一部が同一被験者の異なる時点で取得されたものであってもよい。これにより、被験者内変動（intra-subject variance）を特定し研究することが可能になる。
画像は磁気共鳴画像であってもよいし、当業者に周知の他の医用画像であってもよい。
ある条件の有無を表す解剖学的特徴をラベル付けし、その特徴を使用してその条件のバイオマーカーを導出することをさらに含んでもよい。バイオマーカーに基づいて、被験者を診断区分に割り振り、治療に対する被験者の反応を数値化し、および／または被験者の治療法を選択することをさらに含んでもよい。
本発明の第２の態様によると、本発明の第１実施形態に係る方法を実施するように構成された画像装置が提供される。画像装置は、ＭＲＩスキャナなどの医療用スキャナ、または他のタイプであってもよい。
本発明の第３の態様によると、本発明の第１実施形態に係る方法を実施するように構成された画像処理装置が提供される。
本発明の第４の態様によると、本発明の第１実施形態に係る方法を実施するように構成されたコンピュータシステムが提供される。
本発明の第５の態様によると、本発明の第１実施形態に係る方法を実施するコード化された命令を含むコンピュータプログラムが提供される。
本発明の第６の態様によると、本発明の第５実施形態に係るコンピュータプログラムをエンコードするコンピュータ可読媒体または物理的搬送波信号が提供される。
以下、図面を参照して、例示のみを目的として本発明の実施形態を説明する。
新規な方法を用いたアトラス伝播の過程を示す図である。 四つの被験者グループ（健康な若年者、高齢の対照群、ＭＣＩ、ＡＤ）間で異なる選択がされた特徴次元を区別する能力を示す結果の図である。 ペア間画像類似度の評価に用いられた海馬の周囲の関心領域を示すＭＮＩ１５２脳アトラスの図である。 健康な被験者に基づく３０枚のアトラスと、高齢の認知症患者および年齢適合対照被験者からの７９６枚の画像の、座標埋め込みを示す図である。 横断面スライス上での右海馬に対するセグメンテーション結果を比較した図である。 評価に用いられた画像の各サブセットが一本の棒グラフで表されている、アトラスの原セットからの距離の増加に伴うセグメンテーション精度の発展を示す図である。 マニュアルセグメンテーションおよび自動セグメンテーションでの平均海馬体積を示す図である。 海馬のマニュアルセグメンテーションおよび自動セグメンテーションに基づく体積測定の一致を示すBland-Altmanプロットである。
本実施形態は、出願人が既知の、本発明を実施する最適な方法を説明する。しかしながら、これを実現可能である唯一の方法ではない。
最初に、本実施形態は、医用（または他の）画像を処理する方法またはアルゴリズムの形態をとる。この方法またはアルゴリズムはコンピュータプログラムで具現化されてもよいし、またはコンピュータプロセッサによって実行可能である命令コードのセットで具現化されてもよい。コンピュータプロセッサは、従来の（十分に高性能な）コンピュータのものであってもよいし、または他の画像処理装置やコンピュータシステムのものであってもよい。代替的に、ＭＲＩスキャナなどの医用画像装置の一部にコンピュータプロセッサが組み込まれてもよいし、これらと通信してもよい。
コンピュータプログラムまたは命令コードのセットは、ＣＤ−ＲＯＭ、ＤＶＤまたは固体メモリデバイスなどのコンピュータ可読媒体またはデータキャリアで提供されてもよい。代替的に、接続されたコンピュータから、またはローカルエリアネットワークあるいはインターネットなどの広域ネットワークを介して、デジタル信号としてダウンロード可能であってもよい。さらなる代替として、コンピュータプログラムまたは命令コードのセットが、それを実行するように構成されたコンピュータプロセッサ（または関連するメモリ）にハードコーディングされていてもよい。
概要
我々の方法は、一連のデジタル画像に既にラベルまたは注釈が付けられている、一つ以上の既存のアトラスを取得することから始まる。伝播すべきラベルまたは注釈が載っている一連の画像が、例えばＭＲＩスキャナまたは医用画像装置の別の部分から取得される。問題になっている画像は脳画像であってもよい。代替的に、例えば変形性関節症を診断するために、膝などの人間（または動物）の体の他の部分の画像であってもよい。
我々の新規な方法を用いるアトラス伝播およびセグメンテーションプロセスが、五つのステップからなる図１に描かれている。最初にステップ（１）で、全てのラベル付き画像（すなわちアトラス）およびラベルなし画像が低次元多様体に埋め込まれる。ステップ（２）で、ラベル付き画像に最も近いＮ個のラベルなし画像がセグメンテーションのために選択される。続いてステップ（３）で、Ｍ個の最も近いラベル付き画像が、選択された画像（一つの選択された画像の例が図示されている）のそれぞれに対して位置合わせされる。ステップ（４）で、強度精密化（intensity refinement）を使用して、選択された画像のそれぞれのラベルマップを取得する。ステップ（５）で、さらなる画像（および好ましくは全ての画像）にラベルが付けられるまでステップ（２）−（４）が繰り返される。
上述したように、アトラスベースのセグメンテーションは、ターゲット画像と類似するアトラスの選択から利益を受ける。我々の方法は、画像間の距離メトリックを提供し近隣の画像を識別可能にする、低次元座標系内の全ての画像を最初に埋め込むことによって、これが保証されるフレームワークを提供する。座標系埋め込みから学習された多様体内で、伝播フレームワークを特定可能であり、初期アトラスから始まり全母集団がセグメント化されるまでラベル付きアトラスを段階的に伝播させることができる。各画像は、その近隣範囲にあるアトラスを用いてセグメント化される。これは、類似しない画像間の変形が、比較的類似する画像間のいくつかの小さな変形にまで分解され、位置合わせ誤差が減少することを意味する。位置合わせ誤差の集積をさらに最小化するために、各ラベル伝播ステップの後で、強度ベースのセグメンテーションの精密化が行われる。一端セグメント化されると、後続のセグメンテーションステップにおけるアトラスとして画像を使用することができる。母集団内の全画像がセグメント化された後、画像は、不可視画像のセグメンテーションのためにそこから適切なサブセットを選択することができる大きなアトラスデータベースとなる。画像がその中に埋め込まれる座標系は、ペア間類似度にスペクトル解析ステップを適用することで取得される。ラベル付きアトラスが伝播され、特定のターゲット画像について融合されると、それらが提供する情報が、ターゲット画像の強度に基づくモデルと組み合わされて、最終的なセグメンテーションを生成する。
高レベルの被験者間（inter-subject）変動がある画像のデータセットを通じてアトラスの初期セットを伝播させるために、局所的な近隣範囲内で画像が互いに類似している、データセットの多様体表現が学習される。多様体は、全画像の座標埋め込みによって表現される。この埋め込みは、スペクトル解析ステップを完全グラフに適用することによって求められる。完全グラフ内では、各頂点が一つの画像を表し、画像間の全てのペア間類似度を用いてグラフ内のエッジ重みを定義する。ペア間類似度は、画像間の強度の類似度、または画像間の変形量、またはこの二つの組み合わせとして測定することができる。
次のステップでは、新たに定義された座標系内でアトラスが伝播される。第１ステップでは、アトラスの初期セットが局所的な近隣にある多数の画像に伝播され、画像のラベル付けに使用される。こうしてラベル付けされた画像は自身がアトラスとなり、後続のステップで、データセットの全体にさらに伝播される。こうして、すぐそばにある複数のアトラスを用いて各画像がラベル付けされ、位置合わせ誤差が減少するという利点がある。
この技術の拡張として、同一の被験者からではあるが異なる時点で取得された一つまたは複数のスキャン（いわゆる「長期的な」スキャン）にラベル付けしてもよい。複数のアトラスをベースラインスキャンのそれぞれに伝播した後、複数のアトラスから取得された空間プライア（spatial prior）を用いて、（最初に行う）ベースラインスキャンだけでなく、長期的スキャンもセグメンテーションすることができる。したがって、この拡張技術により、異なる時点（例えば、第０日、第３日、第１５日など）を同時にセグメンテーションすることができ、複数時点間での差異の測定が可能になる。
ベースライン画像よりも後の時点で取得された被験者画像を同時にセグメント化し、被験者内変動（すなわち、単一の被験者内での異なる時点での解剖学的構造の変動）の特定に用いることができる。
グラフ構築および多様体埋め込み
中間アトラス伝播ステップを決定するために、空間解析ステップの適用によって取得される座標系で表される多様体内に全画像が埋め込まれる。スペクトル解析技術は、画像などのデータ項目間のペア間類似度の測定に基づき、特徴座標を作成するという利点を有している。これは、多次元スケーリング（ＭＤＳ）などのデータ項目間の距離メトリックを必要とする方法とは対照的である。スペクトル解析ステップの後、学習した座標系内での二つの画像間の距離は、画像間の元のペア間類似度だけでなく、各画像が母集団の残りに対して有している全てのペア間類似度にも依存する。これは、ノイズの影響を受け易い個別のペア間類似尺度よりもロバスト性が高い類似尺度を、座標系内の距離が埋め込む。スペクトル解析法の良好な紹介は、von Luxburg (2007) に見つけることができる。さらなる詳細はChung (1997)から入手できる。
スペクトル解析ステップは、データセット内の各画像が一つの頂点ｖｉによって代表される、完全重み付き無向グラフＧ＝（Ｖ，Ｅ）に適用される。二つの頂点ｖｉとｖｊの間の非負の重みｗｉｊは、それぞれの画像間の類似度ｓｉｊによって定義される。本研究では、強度ベースの類似度が使用される。各画像ペアに対してのエッジ重みｗｉｊ＝ｓｉｊを集めることによって、Ｇに対する重み行列Ｗが取得される。対角行列Ｔは、各頂点に対する次数和
を含む。
スペクトル解析ステップから導かれる特徴データの次元は、ユーザが選択することができる。本研究では、特徴データの各次元を順に試験し、四つの被験者群（若年者、ＡＤ、ＭＣＩ、高齢の対照被験者）を判別する能力を評価した。各特徴次元に対する各クラスターの重心に基づく平均クラスター間距離を使用して、判別能力を測定した。研究された群については、二次元特徴を用いたときが最大であり、その後減少した（図２を参照）。したがって、データを埋め込む座標空間として、二次元のスペクトル特徴を用いることにした。
画像類似度
我々の方法の好適な実施形態では、画像のペアＩｉ、Ｉｊ間の強度ベースの類似度を使用する。この類似度は、画像ＩのエントロピーＨ（Ｉ）と、二つの画像の結合エントロピーＨ（Ｉｉ；Ｉｊ）とを用いる正規化相互情報量（ＮＭＩ）に基づいており（Studholme et al., 1999）、次式で定義される。
例えば、海馬をセグメント化するとき、海馬の周りの関心領域（ＲＯＩ）に対するＮＭＩとして、画像ペア間の類似尺度を計算する。しかしながら、フレームワークは一般的であり、ユーザは、セグメント化する領域または構造に適した類似尺度および関心領域を選択することができる。ＲＯＩを定義するために、標準的なマルチアトラスセグメンテーション（Heckemann et al., 2006）を使用して、全ての訓練画像が自動的にセグメント化される。得られた海馬ラベルが、対応する画像とアトラスとの間に１０ｍｍのＢ−スプライン制御点間隔を有する、ＦＦＤ法（free-form deformation）によってモデル化された粗い非リジッドの位置合わせを用いて（Rueckert et al., 1999）、既知の脳アトラス（例えば、MNI152-brain T1アトラス（Mazziotta et al., 1995））と位置合わせされる。続いて、少なくとも２％のセグメンテーションによって海馬としてラベル付けされた全ての頂点によって定義される領域の膨張（dilation）を通して、海馬のＲＯＩが定義される。ペア間類似度を評価するために、マスク形成に用いられるのと同一の位置合わせを使用して、全ての画像が既知のアトラスと位置合わせされる。図３は、画像正規化に使用した脳アトラスに重畳された、海馬周りのＲＯＩを示す。
学習した多様体におけるセグメンテーション伝播
学習した多様体を用いてデータセットを通してアトラスセグメンテーションを伝播するために、全画像
が、ラベル付き画像とラベルなし画像とを含む二つの群に分割される。これらの群には、それぞれセットＬ、セットＵと添え字が付けられる。最初に、Ｌは初期アトラス画像を表し、Ｕは他の全ての画像を表す。ｄ（Ｉｉ；Ｉｊ）が、多様体内の画像ＩｉおよびＩｊ間のユークリッド距離を表すものとする。ラベルなしの画像Ｉｕから全てのラベル付き画像への平均距離は、次式となる。
各イテレーションにおいて、Ｎ個の最小平均距離
を持つ画像
が伝播ターゲットとして選択される。これらの画像のそれぞれに対して、
から取り出されるＭ個の最近接画像が、伝播すべきアトラスとして選択される。続いて、インデックスセットＵおよびＬが更新され、現在のイテレーションでターゲット画像にラベル付けがなされたことを示す。データセット内の全画像にラベル付けされるまで、このように段階的な伝播が実行される。
Ｎは、各イテレーション中にラベル付けされる画像の数を決定するので、重要なパラメータである。したがって、Ｎは、ターゲット画像がセグメント化される前に行われる中間ステップの期待数に強い影響を与える。Ｍは、マルチアトラスセグメンテーションの各適用に使用されるアトラス画像の数を定める。自然な選択は、Ｍを初期アトラスの数に設定することである。Ｎの選択とは無関係に、Ｋ枚の画像をセグメント化するのに必要な位置合わせの数は、Ｍ×Ｋである。学習された多様体内でのセグメンテーション伝播プロセスは、アルゴリズム１で要約される。
マルチアトラス伝播およびセグメンテーション精密化
各ラベル伝播は、van der Lijn et al. (2008)に記載された、海馬セグメンテーション方法の修正版の適用によって実行される。この方法では、Ｍ個のアトラスの位置合わせから得られるセグメンテーションｆｊ，ｊ＝１，．．．，Ｍは、Heckemann et al. (2006)のようにハードセグメンテーションに融合されない。しかし、その代わりに、ターゲット画像Ｉの座標系内での確率的アトラスを形成するのにセグメンテーションが使用される。これが、「分類装置融合」技術の一例である。
元の研究では、この被験者特有アトラスを、前景および背景用の既に学習された強度モデルと組み合わせて、グラフカットにより最適化されたエネルギー関数を与えている。我々は、不可視画像から強度モデルを直接推定し、二つ以上の構造に対するアプローチ（Wolz et al., 2009）を一般化するやり方で、この方法を既に拡張している。アトラスの少なくとも９５％が特定の構造に割り当てられている特定の構造に対するガウス分布が、全ての頂点から推定される。ラベルｆｉを持つ特定の構造ｉの背景分布が、ラベルｆｊ，ｊ≠ｉを持つ全ての他の構造のガウス強度分布、および特定の構造が定義されないエリアにおける組織クラスＴｋ，ｋ＝１，．．．，３のガウス分布から推定される。
不可視画像から得た強度情報をセグメンテーションプロセスに組み込むことによって、従来のマルチアトラスセグメンテーションに伴う誤差を取り除くことができる。
被験者特有の確率的アトラスを構成するのに使用される各位置合わせを、三つのステップで実行してもよい。すなわち、リジッド、アフィン、非リジッドである。リジッドおよびアフィン位置合わせを実行して、画像間のグローバル差を訂正する。三番目のステップで、制御点ベクトルの正則格子がＢ−スプライン基底関数を用いて重み付けされる自由形式変形モデルを使用して、二つの画像が非リジッドに整列され、画像内の各位置における変位が与えられる（Rueckert et al., 1999）。この変形は、画像ペアの正規化相互情報量によって導出される（Studholme et al., 1999）。Ｂ−スプライン制御点の間隔は、非リジッド位置合わせの局所的な柔軟性を定める。一連の制御点間隔を、多解像度形式（２０ｍｍ、１０ｍｍ、５ｍｍ、２．５ｍｍ）で使用してもよい
我々の方法では、マルチアトラスセグメンテーションを使用して中間アトラスを体系的にラベリングし、続いて、既にラベル付けされたアトラス画像との類似度にしたがって選択されるターゲット画像のマルチアトラスセグメンテーションのために、中間アトラスが使用されることが理解されるだろう。従来の研究と比較して、我々は、非常に多様な画像セットを扱っている。このようなシナリオでは、類似画像の位置合わせのみから得られる利益が、位置合わせ誤差の蓄積を上回りそうである。
実験検証
以下に述べるように、我々の新規な方法を実験的に検証した。若年の健康な被験者（年齢範囲２０−５４歳、年齢の中央値３０．５歳）から得た３０枚のＭＲ画像からなる、マニュアルでラベリングされたアトラスの初期セットを、８３箇所の関心解剖学的構造を定義するマニュアルラベルマップとともに取得することから始めた。このセットでは、ＧＥ製のＭＲスキャナを用いて、以下のパラメータ（TE/TR 4.2 ms (fat and water in phase)/15.5 ms, time of inversion (TI) 450 ms, flip angle 20°）を用いたＩＲ ＦＳＰＧＲ（inversion recovery prepared fast spoiled gradient recall）シーケンスを使用して、Ｔ１強調されたＭＲ画像を入手し、１９２×２５６の画像行列を持つ、１８×２４ｃｍの視野を有する１．５ｍｍ厚のスライスを１２４枚取得した。
続いて、我々の方法を使用して、ＡＤＮＩ（Alzheimer's Disease Neuroimaging Initiative）のデータベース（www.loni.ucla.edu/ADNI）から得た、アルツハイマー病（ＡＤ）および軽度認知機能障害（ＭＣＩ）の患者、並びに年齢適合対照群からの７９６枚のＭＲ画像のデータセットに、このアトラスの初期セットを伝播させた。ＡＤＮＩの研究では、約２００人の認知が正常な高齢被験者、ＭＣＩである４００人の被験者、および初期ＡＤの２００人の被験者から、ベースラインおよび一定の間隔で脳ＭＲ画像が取得されている。
後述する結果から、被験者間の位置合わせ誤差における関連した減少に少なくとも部分的に起因して、この手法がより正確なセグメンテーションを提供することが分かるだろう。
座標系埋め込み
我々は、上述した座標埋め込み法を、３０個の初期アトラスおよび７９６枚のＡＮＤＩ画像を含む画像セットに適用した。スペクトルグラフ解析からの最初の二つの特徴を用いて、二次元座標系内に全ての画像を埋め込んだ。座標系埋め込みの結果を図４に示す。元のアトラスは、第１の特徴が低い値でグラフの左側に明確なクラスターを形成している。さらに、対照被験者は主に低い方の値に位置する一方、ＡＤ被験者の大多数が高い方の値に位置していることが分かる。選択された被験者例の海馬範囲が図４に示されている。座標系埋め込み内での近くにあるものが、海馬外観の観点で類似する画像を表しているという印象を、これらのタイプの観察が支持する。
五つの異なるアプローチを用いて、全７９６枚の画像がセグメント化された。
Ｉ．標準的なマルチアトラスセグメンテーションを用いた直接セグメンテーション
ＩＩ．グラフカットに基づく強度精密化と組み合わせたマルチアトラスセグメンテーションを用いた直接セグメンテーション
ＩＩＩ．Ｍ＝３０、Ｎ＝１００とし、マルチアトラスセグメンテーション後に強度精密化を行わない、我々の新規な方法
ＩＶ．Ｍ＝３０、Ｎ＝１とした我々の新規な方法
Ｖ．Ｍ＝３０、Ｎ＝３００とした我々の新規な方法
セグメンテーションの評価
評価のために、ＡＤＮＩ画像の自動セグメンテーションとマニュアルの海馬セグメンテーションとを比較した。ＡＮＤＩがマニュアルセグメンテーションを提供する全ての画像（７９６枚のうち１８２枚）に対して、この比較を実行した。これらの１８２人の被験者（テーブル１）と７９６人の被験者の母集団全体（テーブル２）との比較は、年齢、性別、ＭＭＳＥおよび病理学の観点で、サブグループが全母集団の特徴を表すことを示している。
テーブル１：マニュアルセグメンテーションと自動セグメンテーションとの比較に使用した被験者の特徴
テーブル２：本研究で画像を使用した被験者に関する情報
ＡＤ被験者の右海馬のセグメンテーションの一例を図５に示す。画像（ｂ）、（ｃ）、（ｄ）、（ｅ）は、方法Ｉ、ＩＩ、ＩＩＩ、Ｖにそれぞれ対応する。強度ベースの精密化を用いた場合および用いない場合のマルチアトラスセグメンテーション（方法ＩおよびＩＩ）の両方において、ＣＳＦ空間への明らかなオーバーセグメンテーションと、海馬前部でのアンダーセグメンテーションとを観察することができる。強度ベースの精密化がこの誤差を補償できないという事実は、この領域内のアトラスの大部分の顕著な位置ずれによって生じる、この領域での高い空間プライアによるものである。得られた高い空間プライアは、強度ベースの訂正スキームでは解消することができない。強度精密化を用いない提案されたフレームワーク（方法ＩＩＩ）を使用すると、位相的な誤差を避けることができるが、ＣＳＦ空間へのオーバーセグメンテーションは依然として存在している。図は、提案されたフレームワークを使用することで、全ての観察された問題を回避できることも示している。図５（および図６、以下のテーブル３）において、我々の新規な方法を用いて観察された結果は、「ＬＥＡＰ（Learning Embeddings for Atlas Propagation）」という用語で識別される。
評価のために使用された１８２枚の画像の左右海馬のセグメンテーションに対する、Ｄｉｃｅ係数または類似度指数（ＳＩ）（Dice, 1945）により測定された平均オーバーラップをテーブル３に示す。五つの方法の全てのペア間での差は、スチューデントの対応のある（paired）両側ｔ検定で統計学的に有意であった（ｐ＜０．００１）。
テーブル３：海馬セグメンテーションのＤｉｃｅオーバーラップ
これらの結果は、提案された方法でセグメンテーション精度およびロバスト性が改善されていることを明らかに示している。我々の仮説は、埋め込み空間内での距離が大きすぎる画像同士の直接位置合わせを回避し、代わりに複数の中間画像を介した画像の位置合わせをすることによって、マルチアトラスセグメンテーションのセグメンテーション精度よびロバスト性が顕著に改善されるというものである。この仮説を検証するために、座標系埋め込みにおける距離および中間ステップの数の関数として、セグメンテーション精度の発展を調査した。図６は、五つのセグメンテーション法に対する結果を１０個の棒グラフ形式で示す。各棒グラフは、１８枚（最後のグラフでは２０枚）の画像の平均ＳＩオーバーラップに対応している。最初の図は、元のアトラスに最も近い１８の画像を表し、次の図は元のアトラスからわずかに離れた画像を表し、以下同様である。これらの結果は、元のアトラスセットとは異なる画像のセグメント化において、直接マルチアトラスセグメンテーション手法よりも、提案された方法が優れていることを示している。
学習した多様体内での元のアトラスからの距離が増加するにつれて、直接マルチアトラスセグメンテーション（方法Ｉ）および強度ベースの精密化を用いるマルチアトラスセグメンテーション（方法ＩＩ）の精度は徐々に減少する。それに反して、両方のパラメータ設定を伴う我々の新規な方法は、一定レベルのセグメンテーション精度を示している。ステップ幅がＮ＝１である我々の方法（方法ＩＶ）が、元のアトラスから特定の距離に至るまで、直接マルチアトラス法よりも悪い結果になる点が興味深い。これは、多数の位置合わせステップを経て蓄積される位置合わせ誤差によって説明することができる。しかしながら、アトラスからの距離が増加するにつれて、中間テンプレートの使用から得られる利益がこの位置合わせ誤差を上回る。さらに、蓄積された位置合わせ誤差は、特定回数の位置合わせ後には劇的には増加しないように見える。これは、部分的には、小さな位置合わせ誤差を補正する、あらゆるマルチアトラスセグメンテーションステップにおける強度ベースの補正によるものである。次の中間ステップを行う前に、３００枚の最も近い画像を我々の新規な方法を用いてセグメント化する（Ｎ＝３００、方法Ｖ）と、初期アトラスからの全ての距離において、直接の方法によって得られる結果と少なくとも同等であり、しばしばそれより良い結果となる。マルチアトラスセグメンテーション後の強度ベースの精密化ステップの重要度は、方法ＩＩＩの結果によっても強調される。このステップなしの我々の新規な方法を適用すると、方法Ｉと比べて利益はより大きくなり、中間ステップが多くなるほど顕著になる。しかし、精度は大きく低下する。これは、伝播されたアトラスの劣化によって説明することができる（最初の３００枚の画像に対して、方法ＩＩと方法Ｖが同一であり、方法Ｉと方法ＩＩＩが同一であることに注意する）。セグメンテーション精度に対するＮの影響は、ターゲット画像に対しできるだけ近いアトラスを用いること（小さいＮ）と、位置合わせ誤差の蓄積を避けるために最少数の中間ステップを使用する設計を用いること（大きいＮ）の間のトレードオフによって支配される。フレームワークの評価計算の複雑さのために、二つの値を評価することに限定した。
体積測定
海馬体積の減少は、認知障害に関連する周知の要因である（例えば、Jack et al. (1999)；Reiman et al. (1998)）。海馬体積によって臨床群を区別する、我々の方法の能力を測定するために、１８２枚のマニュアルでラベリングされた画像上で測定された体積と、我々の自動方法（方法Ｖ、Ｍ＝３０、Ｎ＝３００であるＬＥＡＰ）から得られた体積とを比較した。左右海馬の体積を表すボックスプロットが図７に示されている。図７は、マニュアルセグメンテーションと、方法ＩＶを用いた自動セグメンテーションの平均海馬体積を示す。臨床群の全てのペア間で左右海馬の体積を区別する能力は、スチューデントのｔ検定で統計学的に有意である（ｐ＜０．０５）が、マニュアルの区別よりもわずかに有意性が小さい。
図８は、海馬のマニュアルセグメンテーションと自動セグメンテーション（方法ＩＶ）に基づく体積測定間の一致を示すBland-Altmanプロットである。実線は平均を表し、点線は±１．９６の標準偏差を表している。このプロットは、自動化された方法が海馬体積をわずかに過大評価する傾向にあるという図７の体積測定の印象を支持する。このオーバーセグメンテーションは、小さな海馬に対してより顕著である。自動セグメンテーション法に対する同様の現象が以前にHammers et al. (2007)によって述べられている。マニュアルセグメンテーションおよび自動セグメンテーションに基づく体積測定間の級内相関係数（ＩＣＣ）は、０：８９８である（ICC (3,1) Shrout-Fleiss reliability (Shrout and Fleiss, 1979)）。この値は、評価者間信頼性（inter-rater reliability）についてNiemann et al. (2000)で報告された０：９２９という値と比べても遜色ない。
考察および結論
この研究で、マルチアトラスセグメンテーションによって不可視画像の多様な母集団に脳アトラスの初期セットを伝播する、我々の新規な方法について説明してきた。選択された測定にしたがって類似の画像が近接している座標系内に、全てのアトラスとターゲット画像とを埋め込むことから始めた。続いて、この座標系により表される多様体を通して、アトラスの初期セットが数回のステップで伝播される。これにより、構造が顕著に異なる画像間での大きな変形を評価する必要性がなくなり、画像間の対応が比較的小さな一連の変形にまで分解される。フレームワークの構成は一般的であり、特定の類似尺度、座標埋め込みまたは位置合わせアルゴリズムに束縛されない。
健康な若年の被験者の３０枚一組のアトラスを使用して、高齢の認知症患者および年齢適合対照から取得した７９６枚の画像からなるターゲットデータセットに、我々の新規方法を適用した。この方法の最初に適用するとき、提案されたフレームワークを他の解剖学的構造にも同様に適用可能であるにもかかわらず、この方法を海馬セグメンテーションのタスクに適用した。提案された方法は、標準的なマルチアトラスセグメンテーションと比較して、一貫して改善されたセグメンテーション結果を示している。また、アトラスの初期セットからの距離が増加し、したがって中間位置合わせステップ数も増加した提案手法の精度も一貫したレベルにあることを立証してきた。他方、標準的なマルチアトラスセグメンテーションの精度は徐々に低下する。この観察から、三つの主要な結論が示唆される。
（１）標準的なマルチアトラスセグメンテーションの精度の低下は、使用される座標系埋め込みが重要であることを示唆している。距離が増加するほど、初期アトラスはセグメンテーションにますます適さなくなる。
（２）提案された方法の精度がほぼ一定であることは、いくつかの小さな変形を用いることで、使用されるマルチアトラスセグメンテーションフレームワーク内での直接変形と一致しない方法で、ターゲットに向けてアトラスを間接的に適切に変形できることを示唆している。
（３）類似の画像への位置合わせを制限することから得られる利益は、連続的な小さな変形を用いるときの誤差の蓄積を無効にする。
我々の結果は、多数の中間位置合わせを使用する場合、セグメンテーション精度が最初は急速に低下するが、その後は初期アトラスからの距離が増加しても比較的一定となることを示している。初期の低下は、多数の中間位置合わせステップで生じる位置合わせ誤差の蓄積によって説明することができる。精度が単調に減少しない理由は、各マルチアトラスセグメンテーションステップ中の強度モデルの組み込みが原因のようである。伝播したセグメンテーションを画像強度に基づき自動的に訂正することによって、アトラスの品質を一定水準に維持することができる。
部分母集団に基づく一組のアトラスを用いた、多様な画像からなるデータセットのセグメント化の明確な適用は別として、提案された方法は、アトラス選択を用いた後続のマルチアトラスセグメンテーション用のアトラスの巨大なレポジトリを自動的に作成する方法として理解することができる（Aljabar et al., 2009）。巨大なアトラスデータベースをマニュアルで作成するには費用がかかり、時間がかかり、多くの場合実現不可能であるので、このようなデータベースを自動的に作成するために、提案された方法を使用できる可能性がある。
画像収集プロトコルに起因する変動、およびＡＤＮＩの研究におけるものと同等に大きく多様なデータセット内での被験者間変動に代表される課題にも関わらず、我々の方法を用いて達成された結果は、精度およびロバスト性の観点で、より限定的なデータセットに対して適用された従来方法（van der Lijn et al., 2008；Morra et al., 2008；Chupin et al., 2009；Hammers et al., 2007）の状態と匹敵するものである。
要約
一組のマニュアルでラベリングされた脳アトラスを、被験者の母集団の画像の多様なセットに自動的に伝播する新規なフレームワークを提示してきた。選択された基準に基づき類似する画像を含む近隣間の識別を可能にする座標系の埋め込みから多様体が学習される。新たな座標系内で、一連のマルチアトラスセグメンテーションステップを通して、アトラスの初期セットが全画像に伝播される。これは、非常に「似ていない」画像を位置合わせするという問題を、「似ている」一連の画像を位置合わせするという問題に分解する。同時に、一連の複数のより小さな変形としてモデル化される画像間の潜在的に大きな変形を可能にする。
謝辞
本発明に至る研究は、助成協定第２２４３２８の下で欧州共同体第７次フレームワークプログラム（FP7/2007-2011）からの資金提供を受けた。
引用文献
Aljabar, P., Heckemann, R., Hammers, A., Hajnal, J., Rueckert, D., 2009. Multi-atlas based segmentation of brain images: Atlas selection and its effect on accuracy. NeuroImage 46 (3), 726 - 738.

Avants, B., Gee, J. C., 2004. Geodesic estimation for large deformation anatomical shape averaging and interpolation. NeuroImage 23 (Supplement 1), S139 - S150, Mathematics in Brain Imaging.

Bajcsy, R., Lieberson, R., Reivich, M., Aug. 1983. A computerized system for the elastic matching of deformed radiographic images to idealized atlas images. J. Comput. Assisted Tomogr. 7, 618 - 625.

Blezek, D. J., Miller, J. V., 2007. Atlas stratification. Medical Image Analysis 11 (5), 443 - 457.

Chung, F. R. K., 1997. Spectral graph theory. Regional Conference Series in Mathematics, American Mathematical Society 92, 1 - 212.

Chupin, M., Hammers, A., Liu, R., Colliot, O., Burdett, J., Bardinet, E., Duncan, J., Garnero, L., Lemieux, L., 2009. Automatic segmentation of the hippocampus and the amygdala driven by hybrid constraints: Method and validation. NeuroImage 46 (3), 749 - 761.

Collins, D. L., Holmes, C. J., Peters, T. M., Evans, A. C., 1995. Automatic 3-D model-based neuroanatomical segmentation. Human Brain Mapping 3 (3), 190 - 208.

Davis, B. C., Fletcher, P. T., Bullitt, E., Joshi, S., 2007. Population shape regression from random design data. In: ICCV. pp. 1 - 7.

Dice, L. R., 1945. Measures of the amount of ecologic association between species. Ecology 26 (3), 297 - 302.

Ericsson, A., Aljabar, P., Rueckert, D., 2008. Construction of a patient-specific atlas of the brain: Application to normal aging. In: ISBI. IEEE, pp. 480 - 483.

Gee, J. C., Reivich, M., Bajcsy, R., Mar.-Apr. 1993. Elastically deforming 3D atlas to match anatomical brain images. Journal of Computer Assisted Tomography 17 (2), 225 - 236.

Hammers, A., Allom, R., Koepp et al., M. J., Aug 2003. Three-dimensional maximum probability atlas of the human brain, with particular reference to the temporal lobe. Human Brain Mapping 19 (4), 224 - 247.

Hammers, A., Heckemann, R., Koepp, M. J., Duncan, J. S., Hajnal, J. V., Rueckert, D., Aljabar, P., 2007. Automatic detection and quantification of hippocampal atrophy on MRI in temporal lobe epilepsy: A proof-of-principle study. NeuroImage 36 (1), 38 - 47.

Heckemann, R. A., Hajnal, J. V., Aljabar, P., Rueckert, D., Hammers, A., 2006. Automatic anatomical brain MRI segmentation combining label propagation and decision fusion. NeuroImage 33 (1), 115 - 126.

Jack, C. R., J., Petersen, R. C., Xu, Y. C., O'Brien, P. C., Smith, G. E., Ivnik, R. J., Boeve, B. F., Waring, S. C., Tangalos, E. G., Kokmen, E., 1999. Prediction of AD with MRI-based hippocampal volume in mild cognitive impairment. Neurology 52 (7), 1397 - 1407.

Joshi, S., Davis, B., Jomier, M., Gerig, G., 2004. Unbiased diffeomorphic atlas construction for computational anatomy. NeuroImage 23 (Supplement 1), 151 - 160, mathematics in Brain Imaging.

Mazziotta, J. C., Toga, A. W., Evans, A. C., Fox, P. T., Lancaster, J. L., Jun. 1995. A probabilistic atlas of the human brain: Theory and rationale for its development. the international consortium for brain mapping (ICBM). NeuroImage 2 (2a), 89 - 101.

Morra, J. H., Tu, Z., Apostolova, L. G., Green, A. E., Avedissian, C., Madsen, S. K., Parikshak, N., Hua, X., Toga, A. W., Jr., C. R. J., Weiner, M. W., Thompson, P. M., 2008. Validation of a fully automated 3D hippocampal segmentation method using subjects with Alzheimer's disease mild cognitive impairment, and elderly controls. NeuroImage 43 (1), 59 - 68.

Niemann, K., Hammers, A., Coenen, V. A., Thron, A., Klosterktter, J., 2000. Evidence of a smaller left hippocampus and left temporal horn in both patients with first episode schizophrenia and normal control subjects. Psychiatry Research: Neuroimaging 99 (2), 93 - 110.

Reiman, E. M., Uecker, A., Caselli, R. J., Lewis, S., Bandy, D., de Leon, M. J., Santi, S. D., Convit, A., Osborne, D., Weaver, A., Thibodeau, S. N., Aug. 1998. Hippocampal volumes in cognitively normal persons at genetic risk for Alzheimer's disease. Annals of Neurology 44 (2), 288 - 291.

Rohlfing, T., Russakoff, D. B., Jr, C. R. M., 2004. Performance-based classifier combination in atlas-based image segmentation using expectation-maximization parameter estimation. IEEE Trans. Med. Imaging 23 (8), 983 - 994.

Rueckert, D., Sonoda, L. I., Hayes, C., Hill, D. L. G., Leach, M. O., Hawkes, D. J., Aug. 1999. Nonrigid registration using free-form deformations: Application to breast MR images. IEEE Trans. Medical Imaging 18 (8), 712 - 721.

Sabuncu, M. R., Balci, S. K., Golland, P., 2008. Discovering modes of an image population through mixture modeling. In: MICCAI (2). Vol. 5242 of Lecture Notes in Computer Science. Springer, pp. 381 - 389.

Shrout, P., Fleiss, J., 1979. Intraclass correlation: uses in assessing rater reliability. Psychological Bulletin 86, 420 - 428.

Studholme, C., Hill, D. L. G., Hawkes, D. J., Jan. 1999. An overlap invariant entropy measure of 3D medical image alignment. Pattern Recognition 32 (1), 71 - 86.

Tang, S., Fan, Y., Kim, M., Shen, D., Feb. 2009. RABBIT: rapid alignment of brains by building intermediate templates. In: SPIE. Vol. 7259.

van der Lijn, F., den Heijer, T., Breteler, M. M., Niessen, W. J., 2008. Hippocampus segmentation in MR images using atlas registration, voxel classification, and graph cuts. NeuroImage 43 (4), 708 - 720.

van Rikxoort, E. M., Isgum, I., Staring, M., Klein, S., van Ginneken, B., 2008. Adaptive local multi-atlas segmentation: application to heart segmentation in chest CT scans. Vol. 6914. SPIE, p. 691407.

von Luxburg, U., 2007. A tutorial on spectral clustering. Statistics and Computing 17 (4), 395 - 416.

Warfield, S. K., Zou, K. H., Wells III, W. M., 2004. Simultaneous truth and performance level estimation (STAPLE): an algorithm for the validation of image segmentation. IEEE Trans. Med. Imaging 23 (7), 903 - 921.

Wolz, R., Aljabar, P., Heckemann, R. A., Hammers, A., Rueckert, D., 2009. Segmentation of subcortical structures and the hippocampus in brain MRI using graph-cuts and subject-specific a-priori information. IEEE International Symposium on Biomedical Imaging - ISBI 2009.

Wu, M., Rosano, C., Lopez-Garcia, P., Carter, C. S., Aizenstein, H. J., 2007. Optimum template selection for atlas-based segmentation. NeuroImage 34 (4), 1612 - 1618.

Claims (21)

  1. コンピュータプロセッサによって実行される医用画像の処理方法であって、
    （ａ）一つ以上の解剖学的特徴がラベルデータを用いてラベル付けされている一つ以上の画像を含む、一つ以上のアトラスを取得するステップと、
    （ｂ）複数のラベル付けされていない画像を取得するステップと、
    （ｃ）ラベル付けされた画像とラベル付けされていない画像とを比較し、一つまたは複数の前記ラベル付けされた画像と最も類似する一つ以上のラベル付けされていない画像を選択するステップと、
    （ｄ）選択された画像のそれぞれに対して、前記最も近い一つ以上のラベル付けされている画像からのラベルデータを伝播し、これによって、前記選択された画像の対応する解剖学的特徴にラベル付けし、前記選択された画像をラベル付けされた画像にするステップと、
    （ｅ）ステップ（ｃ）以降を繰り返すことによって、他のラベル付けされていない画像にラベル付けするステップと、
    を含む方法。
  2. ラベル付けされた画像とラベル付けされていない画像とを比較する前記ステップが、低次元の座標系内に前記画像を埋め込むことを含む、請求項１に記載の方法。
  3. 前記低次元座標系が二次元座標空間であることを特徴とする、請求項２に記載の方法。
  4. ラベル付けされた画像とラベル付けされていない画像とを比較する前記ステップが、画像セット内の各画像ペアについて一つ以上の解剖学的特徴を比較することによって、ペア間類似度測定（pairwise measures of similarity）のセットを定義することを含む、請求項１ないし３のいずれかに記載の方法。
  5. ラベル付けされた画像とラベル付けされていない画像とを比較する前記ステップが、前記ペア間類似度測定でスペクトル解析操作を実行することをさらに含む、請求項４に記載の方法。
  6. 前記ペア間類似度測定が画像ペア間での強度の類似度を表すことを特徴とする、請求項４または５に記載の方法。
  7. 前記ペア間類似度測定が画像ペア間での変形量を表すことを特徴とする、請求項４ないし６のいずれかに記載の方法。
  8. ラベルデータを伝播する前記ステップが、分類装置融合（classifier fusion）技術に基づき、前記最も近い複数のラベル付けされていない画像からラベルデータを伝播することを含む、請求項１ないし７のいずれかに記載の方法。
  9. ステップ（ｄ）の後かつステップ（ｅ）の前に、新たに伝播されたラベルデータに強度ベースの精密化操作を実行するステップをさらに含む、請求項１ないし８のいずれかに記載の方法。
  10. 前記画像が異なる被験者のものであることを特徴とする、請求項１ないし９のいずれかに記載の方法。
  11. 前記画像の少なくとも一部が同一被験者の異なる時点で取得されたものであることを特徴とする、請求項１ないし９のいずれかに記載の方法。
  12. 前記画像が磁気共鳴画像であることを特徴とする、請求項１ないし１１のいずれかに記載の方法。
  13. ある条件の有無を表す解剖学的特徴をラベル付けし、その特徴を使用してその条件のバイオマーカーを導出することをさらに含む、請求項１ないし１２のいずれかに記載の方法。
  14. 請求項１ないし１３のいずれかに記載の方法を実施するように構成された画像装置。
  15. 医療用スキャナであることを特徴とする、請求項１４に記載の画像装置。
  16. ＭＲＩスキャナであることを特徴とする、請求項１５に記載の画像装置。
  17. 請求項１ないし１３のいずれかに記載の方法を実施するように構成された画像処理装置。
  18. 請求項１ないし１３のいずれかに記載の方法を実施するように構成されたコンピュータシステム。
  19. コンピュータプロセッサでの実行時に、請求項１ないし１３のいずれかに記載の方法を実行するコード化された命令を含むコンピュータプログラム。
  20. 請求項１９に記載のコンピュータプログラムをエンコードするコンピュータ可読媒体。
  21. 前記バイオマーカーに基づいて治療に対する被験者の反応を数値化することをさらに含む、請求項１３に記載の方法。
JP2012531496A 2009-09-30 2010-09-30 医用画像処理方法および装置 Active JP5695648B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB0917154.7 2009-09-30
GBGB0917154.7A GB0917154D0 (en) 2009-09-30 2009-09-30 Method and apparatus for processing medical images
PCT/GB2010/001844 WO2011039515A1 (en) 2009-09-30 2010-09-30 Method and apparatus for processing medical images

Publications (2)

Publication Number Publication Date
JP2013506478A JP2013506478A (ja) 2013-02-28
JP5695648B2 true JP5695648B2 (ja) 2015-04-08

Family

ID=41350612

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012531496A Active JP5695648B2 (ja) 2009-09-30 2010-09-30 医用画像処理方法および装置

Country Status (8)

Country Link
US (1) US9251596B2 (ja)
EP (1) EP2483863B1 (ja)
JP (1) JP5695648B2 (ja)
CN (1) CN102598054B (ja)
ES (1) ES2595210T3 (ja)
GB (1) GB0917154D0 (ja)
IN (1) IN2012DN02620A (ja)
WO (1) WO2011039515A1 (ja)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0917154D0 (en) 2009-09-30 2009-11-11 Imp Innovations Ltd Method and apparatus for processing medical images
US8861891B2 (en) * 2010-03-05 2014-10-14 Siemens Aktiengesellschaft Hierarchical atlas-based segmentation
US20130044927A1 (en) * 2011-08-15 2013-02-21 Ian Poole Image processing method and system
US9292917B2 (en) * 2011-11-23 2016-03-22 Siemens Aktiengesellschaft Method and system for model-based fusion of computed tomography and non-contrasted C-arm computed tomography
EP2815381B1 (en) * 2012-02-17 2016-09-07 Advanced MR Analytics AB Method of classification of organs from a tomographic image
CN102930286B (zh) * 2012-09-18 2015-06-24 重庆大学 老年痴呆症图像早期诊断系统
GB201217372D0 (en) * 2012-09-28 2012-11-14 Ucl Business Plc A system and method for annotating images by propagating information
EP3428881B1 (en) 2012-10-26 2020-12-23 Brainlab AG Matching patient images and images of an anatomical atlas
CN103854276B (zh) * 2012-12-04 2018-02-09 东芝医疗系统株式会社 图像配准及分割装置和方法，以及医学图像设备
US9349186B2 (en) 2013-02-11 2016-05-24 General Electric Company Systems and methods for image segmentation using target image intensity
US9208572B2 (en) * 2013-09-20 2015-12-08 General Electric Company Systems and methods for image segmentation using a deformable atlas
US9818200B2 (en) * 2013-11-14 2017-11-14 Toshiba Medical Systems Corporation Apparatus and method for multi-atlas based segmentation of medical image data
WO2015109331A1 (en) * 2014-01-17 2015-07-23 The Johns Hopkins University Automated anatomical labeling by multi-contrast diffeomorphic probability fusion
US9483831B2 (en) * 2014-02-28 2016-11-01 International Business Machines Corporation Segmentation using hybrid discriminative generative label fusion of multiple atlases
US9449384B2 (en) 2014-04-30 2016-09-20 Mitsubishi Electric Research Laboratories, Inc. Method for registering deformable images using random Markov fields
US9964499B2 (en) * 2014-11-04 2018-05-08 Toshiba Medical Systems Corporation Method of, and apparatus for, material classification in multi-energy image data
WO2016131185A1 (zh) 2015-02-16 2016-08-25 深圳迈瑞生物医疗电子股份有限公司 三维成像数据的显示处理方法和三维超声成像方法及系统
WO2016185306A1 (en) * 2015-05-18 2016-11-24 Koninklijke Philips N.V. Self-aware image segmentation methods and systems
KR101769808B1 (ko) 2015-11-19 2017-08-21 삼성전자주식회사 무릎 자기공명영상의 관절연골 분할 장치 및 그 분할 방법
US10169871B2 (en) 2016-01-21 2019-01-01 Elekta, Inc. Systems and methods for segmentation of intra-patient medical images
JP2019103531A (ja) * 2016-04-15 2019-06-27 三菱電機株式会社 医用画像処理装置
US9799120B1 (en) * 2016-05-09 2017-10-24 Siemens Healthcare Gmbh Method and apparatus for atlas/model-based segmentation of magnetic resonance images with weakly supervised examination-dependent learning
BR112018076406A2 (pt) * 2016-06-24 2019-04-09 Beckman Coulter Inc sistemas e métodos para um atlas de imagens
US10235752B2 (en) 2016-11-21 2019-03-19 International Business Machines Corporation Slice selection for interpolation-based 3D manual segmentation
US10467767B2 (en) 2016-12-23 2019-11-05 International Business Machines Corporation 3D segmentation reconstruction from 2D slices
CN108459286A (zh) * 2017-02-20 2018-08-28 冯原 基于磁共振成像的体内软组织力学特性测试方法及装置
US11164308B2 (en) * 2017-02-27 2021-11-02 The Regents Of The University Of California System and method for improved medical images
EP3595299A4 (en) * 2017-03-10 2020-03-11 Sony Olympus Medical Solutions Inc. CONTROL DEVICE FOR DISPLAYING MEDICAL IMAGES, DISPLAY DEVICE FOR MEDICAL IMAGES, SYSTEM FOR PROCESSING MEDICAL INFORMATION AND CONTROL METHOD FOR DISPLAYING MEDICAL IMAGES
JP6785976B2 (ja) * 2017-08-28 2020-11-18 富士フイルム株式会社 脳画像正規化装置、方法およびプログラム
JP6739658B2 (ja) * 2017-08-28 2020-08-12 富士フイルム株式会社 医用画像処理装置、方法およびプログラム
KR101995900B1 (ko) * 2017-09-11 2019-07-04 뉴로핏 주식회사 3차원 뇌지도 생성 방법 및 프로그램
JP6998760B2 (ja) * 2017-12-25 2022-01-18 浜松ホトニクス株式会社 脳画像解析装置、脳画像解析方法、及び脳画像解析プログラム
US10878576B2 (en) 2018-02-14 2020-12-29 Elekta, Inc. Atlas-based segmentation using deep-learning
JP6952185B2 (ja) 2018-02-27 2021-10-20 富士フイルム株式会社 機械学習装置および方法
US11389131B2 (en) 2018-06-27 2022-07-19 Denti.Ai Technology Inc. Systems and methods for processing of dental images
US10937172B2 (en) 2018-07-10 2021-03-02 International Business Machines Corporation Template based anatomical segmentation of medical images
US20210216878A1 (en) * 2018-08-24 2021-07-15 Arterys Inc. Deep learning-based coregistration
EP3761032A1 (en) 2019-07-03 2021-01-06 Xyall B.V. Determining region(s) for tissue dissection in pathology slides
AU2020358717B2 (en) * 2019-10-02 2024-04-11 Encore Medical, Lp Dba Djo Surgical Systems and methods for reconstruction and characterization of physiologically healthy and physiologically defective anatomical structures to facilitate preoperative surgical planning

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030088177A1 (en) * 2001-09-05 2003-05-08 Virtualscopics, Llc System and method for quantitative assessment of neurological diseases and the change over time of neurological diseases
US7324842B2 (en) 2002-01-22 2008-01-29 Cortechs Labs, Inc. Atlas and methods for segmentation and alignment of anatomical data
GB0408328D0 (en) * 2004-04-14 2004-05-19 Imp College Innovations Ltd Method of processing image data
US7623709B2 (en) 2005-09-06 2009-11-24 General Electric Company Method and system for segmenting image data
EP1947606A1 (en) * 2007-01-16 2008-07-23 National University Corporation Kobe University Medical image processing apparatus and medical image processing method
JP5231791B2 (ja) * 2007-02-02 2013-07-10 株式会社東芝 医用画像診断装置、医用画像処理方法およびコンピュータプログラムプロダクト
US8320647B2 (en) * 2007-11-20 2012-11-27 Olea Medical Method and system for processing multiple series of biological images obtained from a patient
WO2009093146A1 (en) 2008-01-24 2009-07-30 Koninklijke Philips Electronics N.V. Interactive image segmentation
GB0917154D0 (en) 2009-09-30 2009-11-11 Imp Innovations Ltd Method and apparatus for processing medical images

Also Published As

Publication number Publication date
US9251596B2 (en) 2016-02-02
EP2483863B1 (en) 2016-09-07
CN102598054A (zh) 2012-07-18
GB0917154D0 (en) 2009-11-11
JP2013506478A (ja) 2013-02-28
WO2011039515A1 (en) 2011-04-07
CN102598054B (zh) 2016-02-10
ES2595210T3 (es) 2016-12-28
EP2483863A1 (en) 2012-08-08
IN2012DN02620A (ja) 2015-09-04
US20120281900A1 (en) 2012-11-08
WO2011039515A8 (en) 2012-05-18

Similar Documents

Publication Publication Date Title
JP5695648B2 (ja) 医用画像処理方法および装置
Wolz et al. LEAP: learning embeddings for atlas propagation
US9984283B2 (en) Methods, systems, and computer readable media for automated detection of abnormalities in medical images
Kelm et al. Spine detection in CT and MR using iterated marginal space learning
Raja'S et al. Labeling of lumbar discs using both pixel-and object-level features with a two-level probabilistic model
US9361686B2 (en) Method and apparatus for the assessment of medical images
EP2690596B1 (en) Method, apparatus and system for automated spine labeling
US8958614B2 (en) Image-based detection using hierarchical learning
JP2023507109A (ja) 医用画像による自動化された腫瘍識別およびセグメンテーション
US9619890B2 (en) System and method for annotating images by propagating information
CN115393269A (zh) 一种基于多模态影像数据的可扩展多层级图神经网络模型
Platero et al. A fast approach for hippocampal segmentation from T1-MRI for predicting progression in Alzheimer's disease from elderly controls
Gong et al. Nonrigid image registration using spatially region-weighted correlation ratio and GPU-acceleration
JP2012529319A (ja) 画像からの身体部分の形状の改善された位置合わせ
Alvén et al. Überatlas: fast and robust registration for multi-atlas segmentation
Eskildsen et al. Detecting Alzheimer’s disease by morphological MRI using hippocampal grading and cortical thickness
Soliman et al. Segmentationof pathological lungs from CT chest images
Mahapatra Consensus based medical image segmentation using semi-supervised learning and graph cuts
Zeng et al. Abnormality detection via iterative deformable registration and basis-pursuit decomposition
Dhalia Sweetlin et al. Patient-Specific Model Based Segmentation of Lung Computed Tomographic Images.
Delmoral et al. Segmentation of pathological liver tissue with dilated fully convolutional networks: A preliminary study
Dore et al. Surface-Base approach using a multi-scale EM-ICP registration for statistical population analysis
Gibicar et al. Automated midline estimation for symmetry analysis of cerebral hemispheres in FLAIR MRI
Brahim et al. The pleural thickening approximation from thoracic CT scans
Jurcak et al. Atlas based automated segmentation of the quadratus lumborum muscle using non-rigid registration on magnetic resonance images of the thoracolumbar region

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130826

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140521

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140617

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140905

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140930

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150120

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150206

R150 Certificate of patent or registration of utility model

Ref document number: 5695648

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250