JP2008511395A - 一連の画像における動き修正のための方法およびシステム - Google Patents

一連の画像における動き修正のための方法およびシステム Download PDF

Info

Publication number
JP2008511395A
JP2008511395A JP2007529972A JP2007529972A JP2008511395A JP 2008511395 A JP2008511395 A JP 2008511395A JP 2007529972 A JP2007529972 A JP 2007529972A JP 2007529972 A JP2007529972 A JP 2007529972A JP 2008511395 A JP2008511395 A JP 2008511395A
Authority
JP
Japan
Prior art keywords
displacement field
images
resolution
deriving
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007529972A
Other languages
English (en)
Other versions
JP4885138B2 (ja
Inventor
シェフドテル、クリストフ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Medical Solutions USA Inc
Original Assignee
Siemens Medical Solutions USA Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Medical Solutions USA Inc filed Critical Siemens Medical Solutions USA Inc
Publication of JP2008511395A publication Critical patent/JP2008511395A/ja
Application granted granted Critical
Publication of JP4885138B2 publication Critical patent/JP4885138B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/207Analysis of motion for motion estimation over a hierarchy of resolutions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

時系列における第1および第2の画像間の動き補正のための方法は、それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において第1および第2の画像を処理するステップと;それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを含むそれぞれ第1および第2の特徴マップを、それぞれ低減された解像度の第1および第2の画像から誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと;上記変位フィールドによって第2の画像をワープするステップと、を含む。

Description

関連出願の相互参照
優先権
ここにおいて、本出願の発明者であるCHRISTOPHE CHEFD’HOTELの名前で2004年8月31に出願された、「A GAUSSIAN WEIGHTED LEAST MEAN SQUARE REGISTRATION ALGORITHM FOR BREAST MR MOTION CORRECTION」と題する米国仮特許出願第60/605,759号、代理人整理番号第2004P14822US号に対して特定の参照が行われ、その優先権の恩典が請求されており、その開示内容は参照により本明細書に組み込まれる。
本出願は、一般的には画像形成における動き修正に関し、また特定的には例えば医療画像形成プロセスによって取得され得るような時系列的な一連の画像において発生し得るような被験者の動きの修正に関する動き補正に関する。
医療画像形成技法は、例えば患者の癌または前癌状態の検出時を含む多くの医療処置において使用される。重要な用途は、乳癌における腫瘍または潜在腫瘍の検出にある。潜在腫瘍は、検出が困難である。潜在的に有用な情報を与える利用可能な技法の間で、例えばこのような腫瘍関連組織が典型的に、造影剤のより迅速な取り入れ(ウォッシュイン)ならびに隣接する非腫瘍組織よりも迅速なウォッシュアウト(洗い流し)を示し得ることが知られている。これらおよびその他のような特性は、造影剤のウォッシュインおよび/またはウォッシュアウトのような処置の前後で行われる患者の画像の比較による懸念組織の検出と組織特性の識別を含むある幾つかの診断に有用であり得る。磁気共鳴映像法(MRI)のような画像形成技法によって作られたこのような時系列的画像を使用して、取得されたMRボリュームの異なる部位によって示される挙動の差異を検出するために、画像間の比較が行われ得る。
有利にはこの検出を実行するための技法は、このようなボリュームの時系列における単一ボクセルの強度を追跡するための技法を必要とする。しかしながら困難は、患者が典型的には連続的な画像取得の間で動き、それによって、取得された画像間での動き関連差異を導入し、それによって空間内の単一の点は、動き修正が実施されなければ、もはや追跡され得ないという点において発生する。本明細書で使用されるように空間内の点は、古典的な幾何学的に定義された寸法を持たない点を意味することを意図しておらず、むしろディジタル化された画像を構成するようになる要素の小さな寸法を有するディジタル化手順の結果から得られる点を意味する。
過去におけるこの問題を解決するための従来技術のアプローチは、任意の一方の画像がその系列の画像の間で基準として選択される二つの画像間における光学的流れを計算している。例えばこれら二つの画像は、ラプラシアン・ピラミッドを計算することによって取得された画像から取得できる。光学的流れは、例えばこれら二つのラプラシアン画像の間のポイントツーポイント差の最小化問題を解くことによって計算され得る。
例えば造影剤の迅速な取り入れ(ウォッシュイン)ならびに迅速なウォッシュアウト(洗い流し)を有する組織として検出される潜在的腫瘍の胸部MR検出において有利な仕方で動き修正または補正問題を解決することは本発明の目的である。
本発明の一態様によれば患者の第1および第2の画像は、MRI装置のような画像形成プロセスから時系列的に取得され、この場合第2の遅い方の画像は第1の早い方の画像が取られた後の例えば患者の動きに起因する第1の早い方の画像からの差異を含む可能性がある。これらの画像は、縮小処理において処理され、その結果、元の画像と比較して低い解像度のそれぞれ第1および第2の画像を生じる。低い解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導することによって、低い解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップが誘導される。所与の初期変位フィールドに基づいてこれらの特徴マップは、見当合わせアルゴリズムにしたがって見当合わせ処理において処理される。このアルゴリズムは、歪みをモデル化するために高濃度の変位フィールドを形成するそれぞれのベクトルを誘導するように各ボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える。この変位フィールドは、動き修正された第2の画像を取得するように第2の画像をワープするために利用される。
上記の所与の初期変位フィールドのためのデフォルト条件は、例えば空集合またはゼロ変位であるか、あるいは上記の所与の初期変位フィールドは、患者の動きについての事前の知識を考慮している可能性がある。
本発明のもう一つの態様によれば、時系列における第1および第2の画像間の動き補正のための方法は、第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと;この変位フィールドによって第2の画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、変位フィールドを誘導するステップは、変位フィールドを誘導するために前に誘導された変位フィールドを利用し、また変位フィールドを誘導するステップは、変位フィールドの初期誘導のために所与の初期変位フィールドを利用する。
所与の初期変位フィールドのためのデフォルト条件は空集合であるか、あるいは例えば所与の初期変位フィールドは、患者の動きについての事前の知識を考慮している可能性がある。
本発明のもう一つの態様によれば、変位フィールドを誘導するステップは繰り返えされ、各繰り返しは前の繰り返しのときより高い解像度を有する第1および第2の画像に対応する第1および第2の特徴マップに対して実行される。
本発明のもう一つの態様によれば各繰り返しは、直前のステップからの前に誘導された変位フィールドを利用する。
本発明のもう一つの態様によれば変位フィールドを誘導するステップは、変位フィールドの初期誘導のために所与の変位フィールドを利用する。
本発明のもう一つの態様によれば変位フィールドを誘導するステップは、前に誘導された変位フィールドを増加する解像度バージョンの解像度レベルに拡張するステップを備える。
本発明のもう一つの態様によれば動き補正のための方法は、動き修正済みの画像を生成するように第2の画像をワープするために存在する最高の解像度で誘導された変位フィールドを利用するステップを含む。
本発明のもう一つの態様によればそれぞれ第1および第2の特徴マップを誘導するステップは、それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを備える。
本発明のもう一つの態様によれば、時系列における第1および第2の画像間の動き補正のための方法は、それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において第1および第2の画像を処理するステップと;それぞれ低減された解像度の第1および第2の画像から、それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを備えたそれぞれ第1および第2の特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと;この変位フィールドによって第2の画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、時系列における第1および第2の画像間の動き補正のための方法は、それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において第1および第2の画像を処理するステップと;それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと;この変位フィールドによって第2の画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、時系列における基準画像と浮動画像との間の動き補正のための方法は、基準画像から漸進的に低減する解像度の第1のセットの修正された画像を誘導するステップと;浮動画像から漸進的に低減する解像度の第2のセットの修正された画像を誘導するステップと;第1のセットの修正された画像から第1のセットの特徴マップを誘導するステップと;第2のセットの修正された画像から第2のセットの特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、それぞれ第1および第2のセットの特徴マップの各々の最低の解像度のメンバーと所与の初期変位フィールドから第1の変位フィールドを誘導するステップと;上記の見当合わせアルゴリズムにしたがって、それぞれ第1および第2のセットの特徴マップの各々の最低の次の解像度のメンバーと前のステップで得られた第1の変位フィールドから第2の変位フィールドを誘導するステップと;それぞれ第1および第2のセットの特徴マップの各々の、何か存在すれば、順次に高い解像度のメンバーのために前のステップを繰り返し、各場合に上記浮動画像の解像度が到達されるまで現在のステップの前のステップで得られた変位フィールドを使用し、またより高い解像度のメンバーが存在しなければ直ぐ次のステップに進むステップと;最後に得られた変位フィールドによって上記浮動画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、時系列における基準画像と浮動画像との間の動き補正のための方法は、(a)本明細書では、最低の解像度レベルに関してレベル0と呼ばれ、次に高い解像度レベルに関してレベル1、第2の次に高い解像度レベルに関してレベル2、そして任意の既存のより高い解像度レベルに関して同様に呼ばれるそれぞれ複数の順次に低減された解像度の基準画像と浮動画像を与えるためにそれぞれ第1および第2の複数の縦続する解像度低減処理において基準画像と浮動画像を処理するステップと;(b)解像度レベルL0、L1、L2などのそれぞれ複数の順次に低減された解像度の基準画像と浮動画像からそれぞれ複数の基準および浮動特徴マップを誘導するステップと;(c)第1の変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して所与の初期変位フィールドに基づいて、局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがってレベルL0に対応する基準特徴マップと浮動特徴マップとを処理することによって第1の変位フィールドを誘導するステップと;(d)拡張された第1の変位フィールドを与えるために解像度L1の変位フィールドに整合する解像度レベルに上記第1の変位フィールドを拡張するステップと;(e)第2の変位フィールドを形成するそれぞれのベクトルを誘導するように上記拡張された第1の変位フィールドに基づいて上記見当合わせアルゴリズムにしたがって解像度レベルL1に対応する基準特徴マップと浮動特徴マップとを処理することによって第2の変位フィールドを誘導するステップと;(f)拡張された第2の変位フィールドを与えるために解像度L1の変位フィールドに整合する解像度レベルに第2の変位フィールドを拡張するステップと;(g)第2の変位フィールドを形成するそれぞれのベクトルを誘導するように上記拡張された第2の変位フィールドに基づいて上記見当合わせアルゴリズムにしたがって解像度レベルL2に対応する基準特徴マップと浮動特徴マップとを処理することによって第3の変位フィールドを誘導するステップと;(h)L2が上記基準および浮動画像の解像度レベルであれば、第3の変位フィールドを利用することによって上記浮動画像をワープして、終了するステップと、を備える、またそうでなければ、(i)拡張された第3の変位フィールドを与えるために次に高い解像度レベルに整合する解像度レベルに第3の変位フィールドを拡張するステップと、(j)上記基準および浮動画像の解像度レベルが到達されるまで、最後の、前に得られて拡張された変位フィールドに基づいて段々に高くなる解像度レベルに対応する変位フィールドを取得するために解像度レベルの適当な修正をしながらステップ(g)から始まる一連のステップを繰り返し、上記基準および浮動画像の解像度レベルが到達されたとき、得られた最後の変位フィールドによって上記浮動画像をワープして、終了するステップと、を備える。
本発明のもう一つの態様によれば、それぞれ複数の順次に低減された解像度の基準および浮動画像を与えるステップは、それぞれ複数の順次に低減された解像度の基準および浮動画像における画像データのそれぞれのラプラシアンを誘導するステップを備える。
本発明のもう一つの態様によれば、第1の変位フィールドを誘導するステップは、所与の初期変位フィールドを入力するステップを備える。
本発明のもう一つの態様によれば、時系列における第1および第2の画像間の動き補正のための方法は、それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、第1および第2の特徴マップを処理することによって第1の変位フィールドを誘導するステップと;第1および第2の画像の解像度に対応するように第1の変位フィールドを拡張するステップと;第1の変位フィールドに基づいて上記見当合わせアルゴリズムにしたがって、第1および第2の画像を処理することによって第2の変位フィールドを誘導するステップと;動き修正済みの画像を得るように第2の変位フィールドによって第2の画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、時系列における第1および第2の画像間の動き補正のための方法は、漸進的に低減された解像度を有する第1の系列の画像を第1の画像から誘導するステップと;漸進的に低減された解像度を有する第2の系列の画像を第2の画像から誘導するステップと;第1の系列の画像から第1の系列の特徴マップを誘導するステップと;第2の系列の画像から第2の系列の特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える、それぞれの変位フィールドを与えるための見当合わせアルゴリズムにしたがって、同じ解像度に関する、第2の系列の特徴マップの対応する特徴マップによって第1の系列の特徴マップの特徴マップを処理することによって1系列の変位フィールドを誘導し、最低の解像度レベルにおける第1の変位フィールドを誘導するために使用される所与の変位フィールドから始め、その後に上記系列における次に高い解像度に対応する次の変位フィールドを誘導するために直前の変位フィールドを利用するステップと;上記第1および第2の画像の解像度レベルにおいて最後の変位フィールドを利用して第2の画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、時系列における基準画像と浮動画像との間の動き補正のための方法は、(a)本明細書では、最低の解像度レベルに関してレベル0と呼ばれ、次に高い解像度レベルに関してレベル1、第2の次に高いレベルに関してレベル2、そして任意の既存のより高い解像度レベルに関して同様に呼ばれるそれぞれ複数の順次に低減された解像度の基準画像と浮動画像とを与えるためにそれぞれ第1および第2の複数の縦続する解像度低減処理において基準画像と浮動画像とを処理するステップと;(b)上記基準および浮動画像の解像度レベルであるL2によって解像度の増加する順に、解像度レベルL0、L1、L2における上記それぞれ複数の順次に低減された解像度の基準画像と浮動画像からそれぞれ複数の基準および浮動特徴マップを誘導するステップと;(c)第1の変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して所与の初期変位フィールドに基づいて、局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがってレベルL0に対応する基準特徴マップと浮動特徴マップとを処理することによって第1の変位フィールドを誘導するステップと;(d)拡張された第1の変位フィールドを与えるために解像度L1の変位フィールドに整合する解像度レベルに第1の変位フィールドを拡張するステップと;(e)第2の変位フィールドを形成するそれぞれのベクトルを誘導するように上記拡張された第1の変位フィールドに基づいて上記見当合わせアルゴリズムにしたがって解像度レベルL1に対応する基準特徴マップと浮動特徴マップとを処理することによって第2の変位フィールドを誘導するステップと;(f)拡張された第2の変位フィールドを与えるために解像度L2の変位フィールドに整合する解像度レベルに第2の変位フィールドを拡張するステップと;(g)最後の変位フィールドを形成するそれぞれのベクトルを誘導するように上記拡張された第2の変位フィールドに基づいて上記見当合わせアルゴリズムにしたがって解像度レベルL2に対応する基準特徴マップと浮動特徴マップとを処理することによって最後の変位フィールドを誘導するステップと;(h)上記最後の変位フィールドを利用することによって浮動画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、画像の動き補正を実行するためのシステムは、プログラムと他のデータとを記憶するためのメモリ装置と;メモリ装置と通信し、また時系列における第1および第2の画像間の動き補正のための方法を実行するために上記プログラムによって動作するプロセッサと、を備え、上記方法は、それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において第1および第2の画像を処理するステップと;それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均
問題を解くステップを備える見当合わせアルゴリズムにしたがって第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと;上記変位フィールドによって第2の画像をワープするステップと、を備える。
本発明のもう一つの態様によれば、コンピュータプログラム製品は、時系列における第1および第2の画像間の動き補正のための方法であって、それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において第1および第2の画像を処理するステップと;それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと;変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと;上記変位フィールドによって第2の画像をワープするステップと、を備える方法によって画像の動き補正を実行するためのプログラムコードのためにコンピュータプログラム論理を媒体上に記録したコンピュータ使用可能媒体を備える。
本発明は、図面と関連付けて上記の例示的実施形態を含む詳細な説明から更に十分に理解される。
本発明の一実施形態によれば、患者の基準画像は、MRI装置を利用するような医療画像形成手順によって取得され、また浮動画像は典型的には、この基準画像より後の時刻に取得される。浮動画像は、例えば第1の画像が取られた後の患者の動きによる基準画像との差を含み得る。これらの画像は、元のそれぞれの画像と比較して低い解像度のそれぞれの基準画像と浮動画像という結果をもたらす縮小処理において処理される。それぞれの基準画像および浮動画像の特徴マップは、より低い解像度の基準および浮動画像における画像データのそれぞれのラプラシアンを誘導することによって低い解像度の基準および浮動画像から誘導される。所与の初期変位フィールドに基づいて特徴マップは、見当合わせ(レジストレーション)アルゴリズムにしたがって見当合わせ手順において処理される。このアルゴリズムは、歪みをモデル化するための高濃度の変位フィールドを形成するそれぞれのベクトルを誘導するように局所的ガウス重み付け最小二乗平均問題を各ボクセルに関して解くステップを備える。この変位フィールドは、動き修正された第2の画像を得るように浮動画像をワープするために利用される。上記のように所与の初期変位フィールドに関する可能なデフォルト条件は、空集合であるか、あるいは例えば所与の初期変位フィールドは、患者の動きについての事前知識を考慮している可能性がある。
胸部MR動き修正のためのガウス重み付け最小二乗平均見当合わせアルゴリズムは、腫瘍関連組織の検出時に動き修正を与えるために適用され、また胸部MR動き修正のための柔軟な見当合わせアルゴリズムは、腫瘍関連組織の検出時に動き修正を与えるために適用される。歪みは、今後説明されるように一連の局所的ガウス重み付け最小二乗平均問題を解くことによって得られるベクトルで形成される高濃度変位フィールドとしてモデル化される。
この見当合わせアルゴリズムは、体積測定的画像間で高濃度変位フィールドを推定するために利用される。目的は、磁気共鳴(MR)画像の時系列における動きの人為構成物を補正することである。典型的には動きの人為構成物は主として、呼吸、心臓拍動および患者の動きに起因する。本発明に関する主要な応用分野は、胸部MR研究における強度変化の研究である。胸部組織における造影剤取り入れ量の時間的変化は、病変検出時に有用な情報を与えるために使用され得る。このような変化を計算することは画像取得間における胸部組織の正確な空間的整合を必要とする。
本明細書では、高速フィルタリング技法を使用して実現されるガウス重み付けの導入が、少なくとも二つの利点を提供すること、すなわち:
変位フィールドの平滑さを保証し、それによって特異性を避けて無条件的歪みモデルの規則性を与えるための簡単で計算的に効率的な方法を提供することと、
最小二乗平均問題が適当に公式化されることを保証することと、を提供することが認められる。
更に本発明の原理による画像類似性の尺度は、画像強度を使用することよりむしろ画像ラプラシアンの計算に依存している。本発明は、このアプローチが造影剤取り入れに起因する強度変化に対処する際に有効であることを見出している。このアプローチの捕捉範囲と速度と強さとを改善するために、多解像度戦略が使用される。
本発明は、例示的な例によって更に詳細に説明される。本発明の本例示的例の目的のために見当合わせされる1対の画像の強度は二つの実数値関数I1
Figure 2008511395
およびI2
Figure 2008511395
、Ω⊂R3の規則的な格子上でサンプリングされたバージョン
であることが仮定されており、ここでこれらの記号は通常の意味を有し、したがって本例ではI2は入力Ωと出力Rのマップレットを備える関数であり、ΩはR3の適当なサブセットであり、以下同様である。本発明者らはここで体積測定的画像の場合を扱っているが、引き続いて生じる展開は任意の次元に直ちに拡張することに留意すること。
下記において本発明者らは、基準画像としてI1を指し、浮動画像としてI2を指す。本発明者らは、I1と浮動画像I2ο(id+p)(ここでidはアイデンティティ・マップであり、οはコンポジション演算子である)のワープバージョンとの間の類似性を最大にする変位フィールドp:
Figure 2008511395
(格子点において推定される)を見出すステップとして見当合わせ問題を定義する。
画像強度は、必ずしも見当合わせの仕事を実行するための最善の特徴ではない。この見通しから、他の画像の特徴(例えば画像ラプラシアンまたは画像階調度のノルム)を表す、I1およびI2から計算される補助関数J1
Figure 2008511395
およびJ2
Figure 2008511395
を研究対象にすることが時には有用である。特に胸部MRへの応用においては
、画像ラプラシアンを計算することは、実際上極めて有効となっている。
このアルゴリズムは反復性である。これは、「真の」動きフィールドに向かって収束する一連の変位フィールドp0、p1、・・・、pkを構築するステップを備える。最後の「動き修正済み」画像は、I2ο(id+pk)によって与えられる。この見当合わせ技法の核心を形成する変位フィールドの反復構造は、下記に説明される。
反復手順は、粗大から微細への多解像度戦略と組み合わせて適用される。このアプローチの利点は、
局所的最小値にトラップされる危険を減らすことによって捕捉範囲が改善されることと、
より低い解像度でより少ないデータを処理することによって計算コストが減らされることである。
この多解像度戦略は、下記のような例によって説明できる。
平均化とサブサンプリングとによって基準画像と浮動画像とに関する二つの多解像度ピラミッドを構築する。このタイプのピラミッド構造は、画像処理の標準的技法であって、詳細については例えば2.R.GonzalesとR.Woodsによるテキストブック、Digital Image Processing、2nd Edition、Prentice−Hall,2002が参照される。
1 lおよびI2 lを結果として得られる解像度lの画像とする。
1 lおよびJ2 lとラベル付けされた対応する特徴画像を計算する。
k,lを解像度lでk番目の反復の後に得られる変位フィールドとする。p0,0は最低解像度における初期変位フィールド(一般に空フィールド)を示す。以下更に説明されるように、解像度lで一定回数の反復のために見当合わせアルゴリズムを実行する。トライリニアー(tri−linear)内挿法と拡大縮小とによって次の解像度に変位フィールドを拡張する。この結果を初期変位フィールドp0,l+1として使用する。
元の解像度が到達されるまで上記の演算を実行する。
これらのステップは、図1に概略図的形式で例示されている。図1を参照すると解像度は、「l」として示されている。この図に描かれている3レベルは、例示的実施形態によるもので、例示目的のためであり、本発明の範囲内でより多い、またはより少ない拡張ステップが考えられる。図1において、解像度レベルl=lmax=2においてそれぞれl1およびl2で示される基準画像と浮動画像は、第1の縮小処理を受け、その結果として解像度l=1のそれぞれの画像I1 1およびI2 1を与え、続いて更なる縮小処理を受け、その結果得られる画像は、それぞれ解像度レベルl=0のI1 0、I2 0となる。特徴マップJ1 0およびJ2 0は、それぞれ画像I1 0およびI2 0から誘導される。特徴マップJ1 0およびJ2 0は、所与の初期変位フィールドp0,0を使用する、本明細書に説明されたような見当合わせ処理を受ける。この初期変位フィールドは、任意のものであってよく、ゼロであってもよい。この見当合わせ処理は、初期変位フィールドと比較して改善された変位フィールドと考えられ得る変位フィールドpk,0という結果をもたらす。それから変位フィールドpk,0は、画像解像度l=1に対応する拡張あるいは膨張を受け、その結果、拡張された解像度フィールドp0,1となる。
特徴マップJ1 1およびJ2 1は、それぞれ画像I1 1およびI2 1から誘導される。特徴マップJ1 1およびJ2 1は、p0,2に拡張される変位フィールドpk,1という結果をもたらすように前に誘導された拡張済み変位フィールドp0,1を使用する、本明細書で説明されるように見当合わせ処理を受ける。本明細書で説明されたようなI2ο(id+p)によって表される動き修正済み画像を生成するために、画像I2の最後のワープを実行するために使用される最後の歪みフィールドという結果をもたらす画像I1 2およびI2 2に対して前と同様なステップが実行される。
このアルゴリズムの固有パラメータを下記のもの:
ピラミッドレベルのレベル数と、
各レベルにおける反復の回数と、
変位フィールドの平滑さを制御する正規化パラメータσ(このパラメータは以下に論じられる)と、に設定することだけが必要であることは留意される。
本発明によるガウス重み付け最小二乗平均アルゴリズムの更に詳細な説明が次に述べられ、続いて本発明の原理による特徴マップ計算の説明が行われる。
最初に、特に見当合わせ技法の核心をなす考えが説明される。下記の反復手順は、所与の解像度で実行される。下記の記号において解像度レベルlは省略されている。
Gσ(x)を標準偏差σの等方性3次元ガウスカーネル:
Figure 2008511395
であるとする。
各ボクセルは、インデックスjによってラベル付けされている。その座標は、ベクトルxj∈R3によって与えられる。本発明者らは、pj k∈R3をアルゴリズムのk番目の反復の後に点xjで回収された変位ベクトルと呼ぶ。1セットの変位ベクトルpj kが与えられれば、反復kにおける浮動特徴マップの修正済みバージョンはJ2,kと表される。
Figure 2008511395
各ボクセルjにおいて、非線形最小二乗平均問題:
Figure 2008511395
のsj k解によって更新ルールpj k+1=pj k+sj kを定義することが提案されている。ガウス重み付けは、変位を推定するために使用される近隣サイズの制御を(暗に)可能にする。副産物としてこれは、歪みフィールドの全体的平滑さも保証する。
実際に前述の問題の線形化バージョンは、下記の基準:
Figure 2008511395

Figure 2008511395

Figure 2008511395
として定義される)を最小化することによって解決される。
E(sj k)の第1の変動を計算することによって最適性の必要条件:
Figure 2008511395
は、sj kに関して閉じた形式の解:
Figure 2008511395
を与える。
マトリックス
Figure 2008511395
は対称であって、6個の係数によって特徴付けられ得ることに
留意すること。ベクトル
Figure 2008511395
は、3個の係数によって定義される。
一旦これらの係数が計算されると、変位更新を推定することは、ガウスカーネルによってマトリックスとベクトル係数との畳み込みを実行することと、各格子点における3×3対称線形問題を解くことと、になる。
畳み込みは、刊行物、R.Dericheの「Fast algorithms for low−level vision」、IEEE Transactions on Pattern Analysis and Machine Intelligence,1(12),1990,78−88に提案されているような第2次再帰フィルタを使用して近似される。これらのフィルタは、ガウス平滑化ならびにその誘導体を近似するために必要とされる計算的努力を軽減する。このアプローチによって演算は、フィルタのサイズとは独立に1出力点ごとに一定回数の乗算と加算とによって実行される。
3×3線形問題のために閉じた形式の解が使用される。
Figure 2008511395
が対称マトリックス

Figure 2008511395
によって与えられれば、その逆数は
Figure 2008511395
となる。ここで
Figure 2008511395
前述の全ての計算において、格子点以外で値が必要とされるときにはトライリニアー内挿方式が使用されている。
次に特徴マップ計算の説明が続けられる。胸部MRにおいて造影剤取り入れは、被観測組織の強度値を大きく、また局所的に変化させ得る。見当合わせのために強度に依存するよりむしろ、元のデータのラプラシアンとして関数J1およびJ2の値が取られる。この考えは、造影剤取り入れ量によって影響されることの少ない画像のエッジ情報(ラプラシアン特徴付けエッジのゼロ交差点)に集中することである。このアプローチは、実際に極めて有効であることが分かった。ここでデカルト座標系を使用してボクセルを識別するために整数のトリプレット(i1,i2,i3)が使用され、ラプラシアンのために下記の有限差分方式が適用される。
Figure 2008511395
ラプラシアン演算子を推定するために使用される中心差分方式がボクセルの異方性を考慮していることに留意すること。係数λは、第3の軸に沿ったボクセル間隔(スライス間の距離)と第1の2本の軸に沿ったボクセル間隔(本明細書では同じであると仮定されている)との間の比率に対応する。
1からJ1の計算に同じ方程式が適用される。
明らかになるように本発明は、プログラムされたディジタルコンピュータの使用と応用によって実現されるように意図されている。図2は、双方向データ通信のために入力装置と、出力装置と、プログラムおよびその他のデータを記憶するためのメモリ装置と、に接続されたディジタルプロセッサを基本的概略形式で示している。入力装置は、本発明による処理のために適当な一つまたは複数の画像を与えるための装置のような幅広い言葉で表される。例えば入力は、CATSCAN、X線装置、MRIまたは他の装置に組み込まれた装置のような画像形成装置から、または記憶された画像からのものである可能性があり、あるいは直接接続による他のコンピュータまたは装置との通信によるもの、または例えばワールドワイドウェブまたはインターネットまたは他の任意の適当なこのようなデータ源を経由したような、変調された赤外線ビーム、無線、地上回線、ファクシミリまたは衛星との通信によるものである可能性がある。出力装置は、陰極線受像管、プラズマディスプレイ、液晶ディスプレイなどのような任意の適当な装置を使用するコンピュータタイプの表示装置を含むことができ、あるいは画像を表現するための装置を含むことも含まないこともあり、また好都合であり得るように更なる処理、観察または評価のために画像を記憶するためのメモリ装置を、または図2のメモリ装置の一部を含む可能性もあり、あるいはこれは、入力装置に関連して前に述べられたようなものを含む接続または連結を利用することもできる。プロセッサは、本発明のステップを実現するために本発明にしたがってセットアップされたプログラムによって動作する。このようなプログラムされたコンピュータは、画像データの取得と伝送のために通信を経由して直ちに地上回線、無線、インターネットなどにインタフェースすることができる。
本発明は、ソフトウエアメモリ装置に少なくとも部分的に直ちに実現可能であって、ソフトウエア製品としてこの形式にパッケージされ得る。これは、本発明の方法を利用して画像の動き補正を実行するためのプログラムコードのために媒体上にコンピュータプログラム論理を記録したコンピュータ利用可能媒体を備えるコンピュータプログラム製品の形式であり得る。
本発明は、人体胸部の潜在的腫瘍のMRI検出時の時系列的画像における動き補正に関する例証的例示的実施形態を使用して例によって説明されてきたが、本発明はまた一般に、PET−CT見当合わせの例のような、しかしこれに限定されない他の分野において空間的整列を必要とする問題の解にも適用可能である。
例示的実施形態による説明が限定することを意図していないことと、本明細書で明示的に説明されていない種々の変更と代用が特許請求の範囲にその範囲が記載された本発明の精神から逸脱せずに実施可能であることとは、理解される。
本発明の原理による1時系列の画像からの動き修正を流れ図形式で示す図である。 本発明の実現のためのプログラム可能ディジタルコンピュータの応用を概略形式で示す図である。

Claims (44)

  1. 時系列における第1および第2の画像間の動き補正のための方法であって、前記方法は、
    前記第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、前記第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと、
    前記変位フィールドによって前記第2の画像をワープするステップと、を備える動き補正のための方法。
  2. 変位フィールドを誘導する前記ステップは、前記変位フィールドを誘導するために前に誘導された変位フィールドを利用する、請求項1に記載の動き補正のための方法。
  3. 変位フィールドを誘導する前記ステップは、前記変位フィールドの初期誘導のために所与の初期変位フィールドを利用する、請求項2に記載の動き補正のための方法。
  4. 前記所与の初期変位フィールドのためのデフォルト条件は、空集合である、請求項3に記載の動き補正のための方法。
  5. 前記所与の初期変位フィールドは、患者の動きについての事前の知識を考慮している、請求項3に記載の動き補正のための方法。
  6. 変位フィールドを誘導するステップを繰り返すステップを備え、各繰り返しは前の繰り返しのときより高い解像度を有する前記第1および第2の画像に対応する第1および第2の特徴マップに対して実行される、請求項2に記載の動き補正のための方法。
  7. 各繰り返しは、直前のステップからの前に誘導された変位フィールドを利用する、請求項2に記載の動き補正のための方法。
  8. 変位フィールドを誘導する前記ステップは、前記変位フィールドの初期誘導のために所与の変位フィールドを利用する、請求項7に記載の動き補正のための方法。
  9. 変位フィールドを誘導する前記ステップは、前記前に誘導された変位フィールドを前記増加する解像度バージョンの解像度レベルに拡張するステップを備える、請求項7に記載の動き補正のための方法。
  10. 動き修正済みの画像を生成するように前記第2の画像をワープするために存在する最高の解像度で誘導された変位フィールドを利用するステップを含む、請求項7に記載の動き補正のための方法。
  11. それぞれ第1および第2の特徴マップを誘導する前記ステップは、前記それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを備える、請求項7に記載の動き補正のための方法。
  12. 時系列における第1および第2の画像間の動き補正のための方法であって、
    それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において前記第1および第2の画像を処理するステップと、
    前記それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを含むそれぞれ第1および第2の特徴マップを前記それぞれ低減された解像度の第1および第2の画像から誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、前記第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと、
    前記変位フィールドによって前記第2の画像をワープするステップと、を備える動き補正のための方法。
  13. 時系列における第1および第2の画像間の動き補正のための方法であって、前記方法は、
    それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において前記第1および第2の画像を処理するステップと、
    前記それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、前記第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと、
    前記変位フィールドによって前記第2の画像をワープするステップと、を備える動き補正のための方法。
  14. それぞれ第1および第2の特徴マップを誘導する前記ステップは、前記それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを備える、請求項13に記載の動き補正のための方法。
  15. 変位フィールドを誘導する前記ステップは、初期変位フィールドを利用する、請求項13に記載の動き補正のための方法。
  16. 前記初期変位フィールドのためのデフォルト条件は、空集合である、請求項15に記載の動き補正のための方法。
  17. 前記初期変位フィールドは、患者の動きについての事前の知識を考慮している、請求項15に記載の動き補正のための方法。
  18. 見当合わせアルゴリズムにしたがって前記第1および第2の特徴マップを処理する前記ステップは、前記第2の画像の変位フィールドに整合する解像度レベルに前記変位フィールドを拡張するステップを備える、請求項13に記載の動き補正のための方法。
  19. 時系列における基準画像と浮動画像との間の動き補正のための方法であって、前記方法は、
    前記基準画像から漸進的に低減する解像度の第1のセットの修正された画像を誘導するステップと、
    前記浮動画像から漸進的に低減する解像度の第2のセットの修正された画像を誘導するステップと、
    前記第1のセットの修正された画像から第1のセットの特徴マップを誘導するステップと、
    前記第2のセットの修正された画像から第2のセットの特徴マップを誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、それぞれ前記第1および第2のセットの特徴マップの各々の最低解像度メンバーと所与の初期変位フィールドから第1の変位フィールドを誘導するステップと、
    前記見当合わせアルゴリズムにしたがって、それぞれ前記第1および第2のセットの特徴マップの各々の最低の次の解像度メンバーと前のステップで得られた前記第1の変位フィールドから第2の変位フィールドを誘導するステップと、
    それぞれ前記第1および第2のセットの特徴マップの各々の、何か存在すれば、順次に高くなる解像度メンバーのために前のステップを繰り返し、各場合に前記浮動画像の解像度が到達されるまで現在のステップの前のステップで得られた変位フィールドを使用し、またより高い解像度のメンバーが存在しなければ直ぐ次のステップに進むステップと、
    最後に得られた変位フィールドによって前記浮動画像をワープするステップと、を備える動き補正のための方法。
  20. 特徴マップを誘導する前記ステップは、それぞれの画像における画像データのラプラシアンを誘導するステップを備える、請求項19に記載の動き補正のための方法。
  21. 変位フィールドを誘導する前記ステップは、拡張が必要とされれば、次に高い解像度レベルの変位フィールドに整合する解像度に前記変位フィールドを拡張するステップを備える、請求項19に記載の動き補正のための方法。
  22. 前記所与の初期変位フィールドのためのデフォルト条件は、空集合である、請求項19に記載の動き補正のための方法。
  23. 前記所与の初期変位フィールドは、患者の動きについての事前の知識を考慮している、請求項19に記載の動き補正のための方法。
  24. 時系列における基準画像と浮動画像との間の動き補正のための方法であって、前記方法は、
    (a)本明細書では、最低の解像度レベルに関してレベル0と呼ばれ、次に高い解像度レベルに関してレベル1、第2の次に高い解像度レベルに関してレベル2、そして任意の既存のより高い解像度レベルに関して同様に呼ばれるそれぞれ複数の順次に低減された解像度の基準画像と浮動画像とを与えるためにそれぞれ第1および第2の複数の縦続する解像度低減処理において前記基準画像と浮動画像を処理するステップと、
    (b)解像度レベルL0、L1、L2などの前記それぞれ複数の順次に低減された解像度の基準画像と浮動画像からそれぞれ複数の基準および浮動特徴マップを誘導するステップと、
    (c)第1の変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して所与の初期変位フィールドに基づいて、局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがってレベルL0に対応する基準特徴マップと浮動特徴マップとを処理することによって第1の変位フィールドを誘導するステップと、
    (d)拡張された第1の変位フィールドを与えるために解像度L1の変位フィールドに整合する解像度レベルに前記第1の変位フィールドを拡張するステップと、
    (e)第2の変位フィールドを形成するそれぞれのベクトルを誘導するように前記拡張された第1の変位フィールドに基づいて、前記見当合わせアルゴリズムにしたがって解像度レベルL1に対応する基準特徴マップと浮動特徴マップとを処理することによって第2の変位フィールドを誘導するステップと、
    (f)拡張された第2の変位フィールドを与えるために解像度L1の変位フィールドに整合する解像度レベルに前記第2の変位フィールドを拡張するステップと、
    (g)前記第2の変位フィールドを形成するそれぞれのベクトルを誘導するように前記拡張された第2の変位フィールドに基づいて、前記見当合わせアルゴリズムにしたがって解像度レベルL2に対応する基準特徴マップと浮動特徴マップとを処理することによって第3の変位フィールドを誘導するステップと、
    (h)L2が前記基準および浮動画像の解像度レベルであれば、前記第3の変位フィールドを利用することによって前記浮動画像をワープして、終了するステップと、を備える、またそうでなければ、
    (i)拡張された第3の変位フィールドを与えるために次に高い解像度レベルに整合する解像度レベルに前記第3の変位フィールドを拡張するステップと、
    (j)前記基準および浮動画像の解像度レベルが到達されるまで、最後の、前に得られて拡張された変位フィールドに基づいて段々高くなるレベルに対応する変位フィールドを取得するために解像度レベルの適当な修正をしながらステップ(g)から始まる一連のステップを繰り返し、前記基準および浮動画像の解像度レベルが到達されたとき、得られた最後の変位フィールドによって前記浮動画像をワープして、終了するステップと、を備える動き補正のための方法。
  25. それぞれ複数の順次に低減された解像度の基準および浮動画像を与える前記ステップは、前記それぞれ複数の順次に低減された解像度の基準および浮動画像における画像データのそれぞれのラプラシアンを誘導するステップを備える、請求項24に記載の動き補正のための方法。
  26. 第1の変位フィールドを誘導する前記ステップは、所与の初期変位フィールドを入力するステップを備える、請求項24に記載の動き補正のための方法。
  27. 時系列における第1および第2の画像間の動き補正のための方法であって、前記方法は、
    それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、前記第1および第2の特徴マップを処理することによって第1の変位フィールドを誘導するステップと、
    前記第1および第2の画像の解像度に対応する前記第1の変位フィールドを拡張するステップと、
    前記第1の変位フィールドに基づいて、前記見当合わせアルゴリズムにしたがって前記第1および第2の画像を処理することによって第2の変位フィールドを誘導するステップと、
    動き修正済み画像を得るように前記第2の変位フィールドによって前記第2の画像をワープするステップと、を備える動き補正のための方法。
  28. 第1の変位フィールドを誘導する前記ステップは、所与の初期変位フィールドを入力するステップを備える、請求項27に記載の動き補正のための方法。
  29. 前記所与の初期変位フィールドのためのデフォルト条件は、空集合である、請求項28に記載の動き補正のための方法。
  30. 前記所与の初期変位フィールドは、患者の動きについての事前の知識を考慮している、請求項28に記載の動き補正のための方法。
  31. それぞれ第1および第2の特徴マップを誘導する前記ステップは、前記それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを備える、請求項27に記載の動き補正のための方法。
  32. 時系列における第1および第2の画像間の動き補正のための方法であって、前記方法は、
    漸進的に低減された解像度を有する第1の系列の画像を前記第1の画像から誘導するステップと、
    漸進的に低減された解像度を有する第2の系列の画像を前記第2の画像から誘導するステップと、
    前記第1の系列の画像から第1の系列の特徴マップを誘導するステップと、
    前記第2の系列の画像から第2の系列の特徴マップを誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える、それぞれの変位フィールドを与えるための見当合わせアルゴリズムにしたがって、同じ解像度に関する、前記第2の系列の特徴マップの対応する特徴マップによって前記第1の系列の特徴マップの特徴マップを処理することによって1系列の変位フィールドを誘導し、最低の解像度レベルにおける第1の変位フィールドを誘導するために使用される所与の変位フィールドから始め、その後に前記系列における次に高い解像度に対応する次の変位フィールドを誘導するために直前の変位フィールドを利用するステップと、
    前記第1および第2の画像の解像度レベルにおいて誘導された最後の変位フィールドを利用して前記第2の画像をワープするステップと、を備える動き補正のための方法。
  33. 前記所与のフィールドと次に高い解像度に対応する前記最後のフィールドとを除いて前記各解像度のフィールドを拡張するステップを備える、請求項32に記載の動き補正のための方法。
  34. 時系列における基準画像と浮動画像との間の動き補正のための方法であって、前記方法は、
    (a)本明細書では、最低の解像度レベルに関してレベル0と呼ばれ、次に高い解像度レベルに関してレベル1、第2の次に高い解像度レベルに関してレベル2、そして任意の既存のより高い解像度レベルに関して同様に呼ばれるそれぞれ複数の順次に低減された解像度の基準画像と浮動画像を与えるためにそれぞれ第1および第2の複数の縦続する解像度低減処理において前記基準画像と浮動画像とを処理するステップと、
    (b)前記基準および浮動画像の解像度レベルであるL2によって増加する解像度の順に、解像度レベルL0、L1、L2における前記それぞれ複数の順次に低減された解像度の基準画像と浮動画像からそれぞれ複数の基準および浮動特徴マップを誘導するステップと、
    (c)第1の変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して所与の初期変位フィールドに基づいて、局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがってレベルL0に対応する基準特徴マップと浮動特徴マップとを処理することによって第1の変位フィールドを誘導するステップと、
    (d)拡張された第1の変位フィールドを与えるために解像度L1の変位フィールドに整合する解像度レベルに前記第1の変位フィールドを拡張するステップと、
    (e)第2の変位フィールドを形成するそれぞれのベクトルを誘導するように前記拡張された第1の変位フィールドに基づいて、前記見当合わせアルゴリズムにしたがって解像度レベルL1に対応する基準特徴マップと浮動特徴マップとを処理することによって第2の変位フィールドを誘導するステップと、
    (f)拡張された第2の変位フィールドを与えるために解像度L2の変位フィールドに整合する解像度レベルに前記第2の変位フィールドを拡張するステップと、
    (g)最後の変位フィールドを形成するそれぞれのベクトルを誘導するように前記拡張された第2の変位フィールドに基づいて、前記見当合わせアルゴリズムにしたがって解像度レベルL2に対応する基準特徴マップと浮動特徴マップとを処理することによって最後の変位フィールドを誘導するステップと、
    (h)前記最後の変位フィールドを利用することによって前記浮動画像をワープするステップと、を備える動き補正のための方法。
  35. 前記所与の初期変位フィールドのためのデフォルト条件は、空集合である、請求項34に記載の動き補正のための方法。
  36. 前記所与の初期変位フィールドは、患者の動きについての事前の知識を考慮している、請求項34に記載の動き補正のための方法。
  37. 特徴マップを誘導する前記ステップは、前記それぞれ低減された解像度の第1および第2の画像における画像データのそれぞれのラプラシアンを誘導するステップを備える、請求項34に記載の動き補正のための方法。
  38. 第1の変位フィールドを誘導するステップ(c)は、
    その座標がベクトルxj∈R3によって与えられるインデックスjによって各ボクセルにラベル付けするステップと、
    前記アルゴリズムのk番目の繰り返しの後に点xjにおいて回収される変位ベクトルとしてpj k∈R3を定義するステップと、
    1セットの変位ベクトルpj kが与えられたとして、J2,k
    Figure 2008511395
    によって繰り返しkにおける前記浮動特徴マップの修正済みバージョンを示すステップと、
    各ボクセルjにおいてsj kによる更新ルールpj k+1=pj k+sj kを非線形最小二乗平均問題の解:
    Figure 2008511395
    (zi k(s)=J1(xi)−J2,k(xi+s)であり、Gσ(x)は標準偏差σの等方性3次元ガウシアン・カーネル:
    Figure 2008511395
    である)として定義するステップと、
    下記の基準:
    Figure 2008511395

    Figure 2008511395

    Figure 2008511395
    として定義される)を最小化することによって前記非線形最小二乗
    平均問題の線形化バージョンを解くステップと、
    最適性の必要条件:
    Figure 2008511395
    が閉じた形式の解sj k
    Figure 2008511395
    を与えるようにE(sj k)の第1の変動を計算するステップと、を含む、請求項34に記載の動き補正のための方法。
  39. プログラムと他のデータとを記憶するためのメモリ装置と、
    前記メモリ装置と通信し、また時系列における第1および第2の画像間の動き補正のための方法を実行するために前記プログラムによって動作するプロセッサと、を備えた、画像の動き補正を実行するためのシステムであって、前記方法は、
    それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において前記第1および第2の画像を処理するステップと、
    前記それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、前記第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと、
    前記変位フィールドによって前記第2の画像をワープするステップと、を備える、画像の動き補正を実行するためのシステム。
  40. 時系列における第1および第2の画像間の動き補正のための方法によって画像の動き補正を実行するためのプログラムコードのためにコンピュータプログラム論理を媒体上に記録したコンピュータ使用可能媒体を備えるコンピュータプログラム製品であって、前記方法は、
    それぞれ低減された解像度の第1および第2の画像を与えるために縮小処理において前記第1および第2の画像を処理するステップと、
    前記それぞれ低減された解像度の第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導するステップと、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムにしたがって、前記第1および第2の特徴マップを処理することによって変位フィールドを誘導するステップと、
    前記変位フィールドによって前記第2の画像をワープするステップと、を備える、コンピュータプログラム製品。
  41. 時系列における第1および第2の画像間の動き補正のための方法であって、前記方法は、
    変位フィールドを形成するそれぞれのベクトルを誘導するように各画素またはボクセルに関して局所的ガウス重み付け最小二乗平均問題を解くステップを備える見当合わせアルゴリズムを含む処理にしたがって前記第1および第2の画像を処理することによって変位フィールドを誘導するステップと、
    前記変位フィールドによって前記第2の画像をワープするステップと、を備える動き補正のための方法。
  42. 処理にしたがって前記第1および第2の画像を処理する前記ステップは、前記第1および第2の画像からそれぞれ第1および第2の特徴マップを誘導して、前記特徴マップにそれぞれ前記見当合わせアルゴリズムを適用するステップを含む、請求項41に記載の動き補正のための方法。
  43. 変位フィールドを誘導する前記ステップは、前記変位フィールドを誘導するために前に誘導された変位フィールドを利用する、請求項41に記載の動き補正のための方法。
  44. 変位フィールドを誘導する前記ステップは、前記変位フィールドの初期誘導のために所与の初期変位フィールドを利用する、請求項41に記載の動き補正のための方法。
JP2007529972A 2004-08-31 2005-08-18 一連の画像における動き修正のための方法およびシステム Expired - Fee Related JP4885138B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US60575904P 2004-08-31 2004-08-31
US60/605,759 2004-08-31
US11/205,569 US7440628B2 (en) 2004-08-31 2005-08-17 Method and system for motion correction in a sequence of images
US11/205,569 2005-08-17
PCT/US2005/029386 WO2006026177A1 (en) 2004-08-31 2005-08-18 Method and system for motion correction in a sequence of images

Publications (2)

Publication Number Publication Date
JP2008511395A true JP2008511395A (ja) 2008-04-17
JP4885138B2 JP4885138B2 (ja) 2012-02-29

Family

ID=35462272

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007529972A Expired - Fee Related JP4885138B2 (ja) 2004-08-31 2005-08-18 一連の画像における動き修正のための方法およびシステム

Country Status (6)

Country Link
US (1) US7440628B2 (ja)
EP (1) EP1784785B1 (ja)
JP (1) JP4885138B2 (ja)
AU (1) AU2005280315B2 (ja)
CA (1) CA2578043C (ja)
WO (1) WO2006026177A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017511227A (ja) * 2014-04-17 2017-04-20 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 改善された多相動的造影磁気共鳴撮像方法

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1778353B1 (en) * 2004-08-13 2012-09-12 Koninklijke Philips Electronics N.V. Radiotherapeutic treatment plan adaptation
EP2041721B1 (en) * 2006-07-05 2016-09-07 Philips Intellectual Property & Standards GmbH Prediction of cardiac shape by a motion model
US9549689B2 (en) 2007-03-09 2017-01-24 St. Jude Medical, Atrial Fibrillation Division, Inc. System and method for correction of inhomogeneous fields
US10433929B2 (en) * 2007-03-09 2019-10-08 St. Jude Medical, Atrial Fibrillation Division, Inc. System and method for local deformable registration of a catheter navigation system to image data or a model
WO2008141225A1 (en) * 2007-05-11 2008-11-20 The Trustees Of Columbia University In The City Of New York Systems and methods for telescopic data compression in sensor networks
US8346785B1 (en) 2008-01-16 2013-01-01 TransThought, LLC Performing abstraction and/or integration of information
US9286335B1 (en) 2008-01-16 2016-03-15 TransThought, LLC Performing abstraction and/or integration of information
BR112012014173A2 (pt) 2009-12-15 2016-05-17 Koninkl Philips Electronics Nv método e compensador de dados
JP5819428B2 (ja) 2011-08-03 2015-11-24 株式会社日立メディコ 画像診断装置及び画像補正方法
AU2016266019A1 (en) * 2016-11-30 2018-06-14 Canon Kabushiki Kaisha Image registration method
CN109033415A (zh) * 2018-08-06 2018-12-18 浙江大学 一种基于拉普拉斯特征映射的多维神经信号的降维和可视化方法
WO2021092600A2 (en) * 2020-12-14 2021-05-14 Innopeak Technology, Inc. Pose-over-parts network for multi-person pose estimation

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH064714A (ja) * 1992-06-24 1994-01-14 Nec Corp パターン認識辞書生成装置およびパターン認識装置
JPH0660187A (ja) * 1992-06-10 1994-03-04 Rca Thomson Licensing Corp 画像処理システム
JPH07175935A (ja) * 1993-07-22 1995-07-14 Philips Electron Nv デジタル画像処理方法
JPH11331644A (ja) * 1998-02-17 1999-11-30 Koninkl Philips Electronics Nv 画像のシ―ケンス内の動き評価用画像処理方法、ノイズフィルタリング方法及び医用撮像装置
JP2002537050A (ja) * 1999-02-18 2002-11-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 長尺情景の概要画像を形成する画像処理方法、システム及び装置
WO2003025837A1 (en) * 2001-09-17 2003-03-27 Virtualscopics, Llc. System and method for quantitative assessment of cancers and their change over time
JP2003515368A (ja) * 1999-11-24 2003-05-07 コンファーマ インコーポレイテッド 画像が向上した視覚表示を得るための類似データのたたみこみフィルタリング。
JP2003263635A (ja) * 2002-03-07 2003-09-19 Fuji Photo Film Co Ltd 画像システム
WO2004055724A2 (en) * 2002-12-18 2004-07-01 Philips Intellectual Property & Standards Gmbh Multi-resolution processing of image strips
WO2004066198A2 (en) * 2003-01-22 2004-08-05 Koninklijke Philips Electronics N.V. Generating filters for filtering image features according to their orientation
JP2008500108A (ja) * 2004-05-25 2008-01-10 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド 画像の時間順序における動き補償用の方法およびシステム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69332042T2 (de) * 1992-12-18 2003-01-02 Koninkl Philips Electronics Nv Ortungszurückstellung von relativ elastisch verformten räumlichen Bildern durch übereinstimmende Flächen
US6285711B1 (en) * 1998-05-20 2001-09-04 Sharp Laboratories Of America, Inc. Block matching-based method for estimating motion fields and global affine motion parameters in digital video sequences
US6169817B1 (en) * 1998-11-04 2001-01-02 University Of Rochester System and method for 4D reconstruction and visualization
US6757423B1 (en) 1999-02-19 2004-06-29 Barnes-Jewish Hospital Methods of processing tagged MRI data indicative of tissue motion including 4-D LV tissue tracking
US6831948B1 (en) * 1999-07-30 2004-12-14 Koninklijke Philips Electronics N.V. System and method for motion compensation of image planes in color sequential displays
WO2002056241A1 (en) 2001-01-12 2002-07-18 University Of Florida Computational algorithms for image registration
US20020167537A1 (en) 2001-05-11 2002-11-14 Miroslav Trajkovic Motion-based tracking with pan-tilt-zoom camera

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0660187A (ja) * 1992-06-10 1994-03-04 Rca Thomson Licensing Corp 画像処理システム
JPH064714A (ja) * 1992-06-24 1994-01-14 Nec Corp パターン認識辞書生成装置およびパターン認識装置
JPH07175935A (ja) * 1993-07-22 1995-07-14 Philips Electron Nv デジタル画像処理方法
JPH11331644A (ja) * 1998-02-17 1999-11-30 Koninkl Philips Electronics Nv 画像のシ―ケンス内の動き評価用画像処理方法、ノイズフィルタリング方法及び医用撮像装置
JP2002537050A (ja) * 1999-02-18 2002-11-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 長尺情景の概要画像を形成する画像処理方法、システム及び装置
JP2003515368A (ja) * 1999-11-24 2003-05-07 コンファーマ インコーポレイテッド 画像が向上した視覚表示を得るための類似データのたたみこみフィルタリング。
WO2003025837A1 (en) * 2001-09-17 2003-03-27 Virtualscopics, Llc. System and method for quantitative assessment of cancers and their change over time
JP2003263635A (ja) * 2002-03-07 2003-09-19 Fuji Photo Film Co Ltd 画像システム
WO2004055724A2 (en) * 2002-12-18 2004-07-01 Philips Intellectual Property & Standards Gmbh Multi-resolution processing of image strips
WO2004066198A2 (en) * 2003-01-22 2004-08-05 Koninklijke Philips Electronics N.V. Generating filters for filtering image features according to their orientation
JP2008500108A (ja) * 2004-05-25 2008-01-10 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド 画像の時間順序における動き補償用の方法およびシステム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017511227A (ja) * 2014-04-17 2017-04-20 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 改善された多相動的造影磁気共鳴撮像方法

Also Published As

Publication number Publication date
CA2578043C (en) 2013-06-25
US7440628B2 (en) 2008-10-21
AU2005280315B2 (en) 2009-04-23
AU2005280315A1 (en) 2006-03-09
WO2006026177A1 (en) 2006-03-09
JP4885138B2 (ja) 2012-02-29
CA2578043A1 (en) 2006-03-09
EP1784785A1 (en) 2007-05-16
EP1784785B1 (en) 2019-10-30
US20060045366A1 (en) 2006-03-02

Similar Documents

Publication Publication Date Title
JP4885138B2 (ja) 一連の画像における動き修正のための方法およびシステム
Vishnevskiy et al. Isotropic total variation regularization of displacements in parametric image registration
Trinh et al. Novel example-based method for super-resolution and denoising of medical images
US8682054B2 (en) Method and system for propagation of myocardial infarction from delayed enhanced cardiac imaging to cine magnetic resonance imaging using hybrid image registration
US8064664B2 (en) Alignment method for registering medical images
US8265356B2 (en) Method and apparatus for efficient automated re-contouring of four-dimensional medical imagery using surface displacement fields
CN107886508B (zh) 差分减影方法和医学图像处理方法及系统
JP5584441B2 (ja) ボリュームデータ間の対応付け方法
US20130101187A1 (en) Coronary artery motion modeling
Wang et al. A review of deformation models in medical image registration
Jia et al. A novel dynamic multilevel technique for image registration
CN108898578B (zh) 一种医疗图像的处理方法、装置及计算机存储介质
Athavale et al. Multiscale properties of weighted total variation flow with applications to denoising and registration
El‐Rewaidy et al. Nonrigid active shape model–based registration framework for motion correction of cardiac T1 mapping
JP2008519348A (ja) 医療用画像登録のためのマルチスケールフィルタ合成装置及び方法
He et al. Recursive refinement network for deformable lung registration between exhale and inhale CT scans
Fourcade et al. Deformable image registration with deep network priors: a study on longitudinal PET images
EP3658031B1 (en) Motion compensated cardiac valve reconstruction
CN100550056C (zh) 在图像序列中进行运动校正的方法及系统
Karani et al. Reducing navigators in free-breathing abdominal MRI via temporal interpolation using convolutional neural networks
CN113822796A (zh) 基于改进的图像金字塔的多模态脑部影像配准方法
CN111429495A (zh) 一种新型非刚性图像配准方法
Miller et al. Motion compensated extreme MRI: Multi-scale low rank reconstructions for highly accelerated 3D dynamic acquisitions (MoCo-MSLR)
Menon et al. Applicability of non-rigid medical image registration using moving least squares
Cao et al. Motion tracking in medical images

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100907

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20101207

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20101214

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110107

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110117

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110207

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110215

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110307

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110412

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110712

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110720

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110810

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110817

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110912

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110920

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111011

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111108

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111207

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141216

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4885138

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees