JP2018506322A - 対象物体の変位を計算する方法及びシステム - Google Patents

対象物体の変位を計算する方法及びシステム Download PDF

Info

Publication number
JP2018506322A
JP2018506322A JP2017531994A JP2017531994A JP2018506322A JP 2018506322 A JP2018506322 A JP 2018506322A JP 2017531994 A JP2017531994 A JP 2017531994A JP 2017531994 A JP2017531994 A JP 2017531994A JP 2018506322 A JP2018506322 A JP 2018506322A
Authority
JP
Japan
Prior art keywords
images
subset
image
target object
newly acquired
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017531994A
Other languages
English (en)
Other versions
JP6692817B2 (ja
JP2018506322A5 (ja
Inventor
ジンピン シュー
ジンピン シュー
コンクオ ル
コンクオ ル
ウィリアム タオ シ
ウィリアム タオ シ
クリストファー ステフェン ハル
クリストファー ステフェン ハル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2018506322A publication Critical patent/JP2018506322A/ja
Publication of JP2018506322A5 publication Critical patent/JP2018506322A5/ja
Application granted granted Critical
Publication of JP6692817B2 publication Critical patent/JP6692817B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G06T7/248Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/38Registration of image sequences
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing

Abstract

本発明は、対象物体の変位を計算する方法に関し、この方法は、前記対象物体の事前取得画像のセットの隣接する画像から前記対象物体の変位モデルを計算するステップ101を含み、前記変位モデルは、時間に沿った前記対象物体の位置を反映する。この方法は、変位モデルに基づいて、前記事前取得画像のセットの1周期時間サイクルの中で前記事前取得画像のセットから画像の第1のサブセットS1を決定するステップ102、新規取得画像から画像の第2のサブセットS2を特定する第1のステップ103であって、前記画像の第2のサブセットS2内の画像は、連続しており、前記画像の第1のサブセットS1内で同じ最類似画像を有し、前記新規取得画像のうちの所与の画像を前記画像の第1のサブセットS1の各画像と比較することによって類似度の第1のセットが決定され、前記最類似画像は前記類似度の第1のセットの中で最も高い類似度を有する、特定する第1のステップ103、前記画像の第2のサブセットS2中の所与の画像を第1の参照画像I1として選択する第1のステップ104、前記新規取得画像から画像の第3のサブセットS3を特定する第2のステップ105であって、前記画像の第3のサブセットS3内の画像は、連続しており、前記画像の第1のサブセットS1内で同じ最類似画像を有し、前記新規取得画像のうちの所与の画像を前記画像の第1のサブセットS1の各画像と比較することによって類似度のセットが決定され、前記最類似画像は前記類似度のセットの中で最も高い類似度を有する、特定する第2のステップ105、前記画像の第3のサブセットS3中の所与の画像を第2の参照画像I2として選択する第2のステップ106、及び、前記第2の参照画像I2と前記第1の参照画像I1との間の変位を計算するステップ107をさらに含むことを特徴とする。本発明は、これに対応する変位計算のシステムにも関する。

Description

本発明は、物体移動測定の分野に関し、特に対象物体の変位を計算する方法に関する。
放射線治療は、癌の治療又は療法で広く使用される。放射線療法の目的は、患者身体の対象物体の中で発生している病変、例えば腫瘍細胞を、対象物体の周辺組織を傷つけることなく殺すことである。これは、患者身体の対象物体に高い放射線量を送達し、対象物体周辺の健康な臓器組織には、可能性としては低い放射線量を送達することによって行われる。しかし、全治療過程の間に、患者身体の呼吸運動のために、放射線が照射される位置に不正確さが生じることがある。実際、患者身体の対象物体の位置は、呼吸運動と共に変化することがあり、時には体内筋力による変形に伴って患者身体の対象物体の大きさと形状までもが変化する。
物体の追跡は、対象物体が患者の身体内にあるときには、呼吸によって生じる身体の動きなどの身体の動きのために難題となる。呼吸によって生じる患者身体内のそのような対象物体の移動を追跡する際の困難は、放射線療法が行われる際の不正確さの重大な原因になり得る。
治療中に、超音波撮像を使用して画像を得る。運動追跡の知られている手法の一つは、患者の皮膚にマーカーを置くものである。そして、超音波などの撮像装置を使用してそのマーカーを追跡する。しかし、画像の大きなセットを扱うことは、物体追跡において難題となる。現在は、高い計算量が必要となることから、患者の身体内の物体の位置を追跡するために利用できる解決法はまだ存在しない。対応する表面の移動の測定も、身体内の物体移動を反映するのに十分な精度ではない。
文献「speeding−up image registration for repetitive motion scenarios, ISBI(1355−1358)」は、呼吸の影響を受ける臓器の画像シーケンスをリアルタイムで画像位置合わせする方法を開示している。訓練段階中に画像を位置合わせし、次いで、画像に合わせた次元の削減、及び対応する変位の記憶を用いて、画像の見た目と空間的変形との間の関係を学習する。適用段階の画像ごとに、訓練セットの中で最も類似する画像が計算され、変位の予測が行われる。文献「respiration induced fiducial motion tracking in ultrasound using an extended SFA approach, Proc. Of SPIE Vol. 9419」は、訓練段階で超音波画像のシーケンスから抽出された事前に推定された対象運動を、作業中のデータにリアルタイムで移す方法を開示している。この方法は、対象物体の特徴点を抽出し、低速の特徴分析を通じて特徴運動の低次元の記述を利用し、現在の物体位置又は作業中の物体位置を推定するために訓練データから最も類似する画像フレームを見つけることに基づく。取得された画像ごとに、最も類似する画像が計算され、次いで、取得された画像ごとに最も類似する画像に基づいてマッピングが行われる。したがって、計算量が高くなる。
本発明の目的は、対象物体の変位を計算する方法を提案することである。
本発明は、独立請求項によって定義される。従属請求項は、有利な実施形態を定義する。
本発明による方法は、対象物体の変位を計算することを目的とする。この方法は、対象物体の事前取得画像のセットの隣接する画像から対象物体の変位モデルを計算するステップを含み、変位モデルは、時間に沿った対象物体の位置を反映する。
方法は、
− 変位モデルに基づいて、事前取得画像のセットの1周期時間サイクルの中で事前取得画像のセットから画像の第1のサブセットを決定するステップと、
− 新規取得画像から画像の第2のサブセットを特定する第1のステップであって、画像の第2のサブセット(S2)内の画像は、連続しており、画像の第1のサブセット(S1)内で同じ最類似画像を有し、新規取得画像のうちの所与の画像を画像の第1のサブセット(S1)の各画像と比較することによって類似度のセットが決定され、最類似画像は、類似度のセットの中で最も高い類似度を有する、特定する第1のステップと、
− 画像の第2のサブセット中の所与の画像を第1の参照画像として選択する第1のステップと、
− 新規取得画像から画像の第3のサブセットを特定する第2のステップであって、画像の第3のサブセット(S3)内の画像は、連続しており、画像の第1のサブセット(S1)内で同じ最類似画像を有し、新規取得画像のうちの所与の画像を画像の第1のサブセット(S1)の各画像と比較することによって類似度のセットが決定され、最類似画像は、類似度のセットの中で最も高い類似度を有する、特定する第2のステップと、
− 画像の第3のサブセット中の所与の画像を第2の参照画像として選択する第2のステップと、
− 第2の参照画像と第1の参照画像との間の変位を計算するステップと、をさらに含む。
この方法を用いると、対象物体の移動によって生じる変位を、限られた計算リソースで計算することができる。実際、この方法は計算量を低減し、それにより、画像の取得が行われている間に対象物体の位置を追跡するための実用的な解決法をもたらす。また、身体内の物体の位置の変化を検出する精度も向上させる。
この方法を使用することにより、変位の計算は、新規取得画像の2つの連続したサブセットから選択された画像に基づく。この方法は、2つの連続した新規取得画像間で変位を計算する場合と比べて計算量を低減する。
本発明はまた、変位を計算するシステムにも関する。
このシステムは、上述の本発明による方法の様々なステップを実行する処理ユニットを備える。
本発明の詳細な説明及び他の態様を以下に与える。
次いで、本発明の特定の態様について、以下に記載され添付図面との関連で考察される実施形態を参照して説明する。添付図面では、同一の部分又は下位ステップは同じように符号を付している。
本発明による方法のフローチャートである。 本発明による対象物体の変位モデルの一例の図である。 本発明による画像の第1のサブセットと事前取得画像との関係を説明する図である。 本発明による、新規取得画像に対する類似性の特定を説明する図である。 本発明による第1の参照画像及び第2の参照画像の選択を説明する図である。 本発明によるシステムの概略図である。 本発明によるシステムの概略図である。
放射線療法は、癌治療、又はより一般的には、例えば医学療法で広く使用される治療法である。放射線療法は、腫瘍に高い放射線量を送達し、健康な臓器組織には、可能性としては低い放射線量を送達することにより、周辺の組織を傷つけることなく患者の身体内の腫瘍細胞を殺すことを目的とする。以下では、放射線を受ける患者身体の部位を「対象物体」と表現する。例えば、腹部にある腫瘍の治療の間、対象物体は、患者の呼吸によって生じる特定の移動を有する可能性がある。その移動によって生じる変位を計算することにより、治療に使用される放射線療法機器の制御モジュールに変位情報が送られる。制御モジュールは、対象物体が特定の移動を有する場合であっても放射線ビームが対象物体を追従するように、その変位情報を使用して患者身体の対象物体の変位を補償する。
治療を開始する前に、患者身体の対象物体を医療撮像システムでスキャンして、画像、例えば超音波撮像、X線、CT、及びMRI等を取得する。例えば、このスキャンは、治療の数時間前又は数分前に行われる。
スキャンの間、患者は、例えばベッドに水平に横たわる。画像スキャンの継続時間は、患者の数呼吸サイクルの継続時間に相当する。医療撮像システムによって生成されるこの画像を、本発明では「事前取得画像」と呼ぶ。画像スキャンの間に得られた画像により、時間に沿った対象物体の変位モデルを導出することができる。
第1の手法によれば、2つの連続した事前取得画像間の対象物体の変位を連続して計算することによって変位モデルを得る。これを時間の経過と共に行うことにより、患者身体の対象物体の患者変位モデル全体を測定することができる。
第2の手法によれば、スキャン中に、患者の皮膚に取り付けられたマーカーを使用して変位モデルを得る。いくつかのセンサに提供されるマーカーの位置情報に基づいて、対象物体の変位情報を計算することができる。したがって、これを時間に沿って行うことにより、患者身体の対象物体の患者変位モデル全体を測定することができる。
治療中に、放射線ビームが患者身体の対象物体に向けられる。患者は、画像を取得するための医療撮像システム、例えば超音波撮像でスキャンされる。このスキャンは、治療の全継続時間にわたって続く。医療撮像システムによって生成されるこれらの画像を、本発明では「新規取得画像」と呼ぶ。
本発明によると、下記で詳細に説明するように、患者身体の対象物体の変位情報は、治療中に患者が医療撮像システムでスキャンされている間に、新規取得画像に基づいて計算される。
図1は、対象物体の変位を計算する、本発明による方法のフローチャートを示す。
この方法は、対象物体の事前取得画像のセットの隣接する画像から対象物体の変位モデルを計算するステップ101を含み、変位モデルは、時間に沿った対象物体の位置を反映する。変位モデルは、例えば、上述の第1又は第2の手法によって決定することができる。
対象物体は、位置情報を決定する必要がある様々な種類の物体からなる。例えば、放射線療法の分野では、対象物体は、患者の身体内の組織又は臓器に相当する。対象物体は、産業の分野で監視することに関心が持たれるファントムである場合もある。
図2は、本発明による対象物体の変位モデルの一例を示す。
横軸は時間に対応し、縦軸は対象物体の変位に対応している。変位モデルは、例えば患者身体の、時間に沿って変動する対象物体の位置を反映している。患者の身体内にある対象物体の場合、移動は呼吸による動きによって生じるため、変位モデルは通例、周期曲線になる。1周期時間サイクルはTである。例えば、区間Aは、変位モデルの1周期にあたる。P1、P3、P4、及びP6は、変位の変化がより遅い領域P2及びP5と比べて変位の変化が速い領域を表す。
この方法は、変位モデルに基づいて、事前取得画像のセットの1周期時間サイクルの中で、事前取得画像のセットから画像の第1のサブセットS1を決定するステップ102も含む。
変位モデルの1周期の中で時間点が選択される。図2に示すように、区間Aの中でいくつかの時間点が選択される。いくつかの領域、例えばP1、P2、P3、P4、P5、及びP6がある。
図2では、t1P1、t2P1、t3P1は領域P1内の選択された時間点であり、一方、t2P2は領域P2内の選択された時間点である。他の領域、例えばP3、P4、P5、及びP6内で選択されたいくつかの他の時間点があるはずである。
これらの選択された時間点に取得された画像が、以下で「画像の第1のサブセット」と呼ぶ画像のセットを形成する。
図3は、画像の第1のサブセットS1と事前取得画像Sとの間の関係を示す。画像の第1のサブセットS1は、事前取得画像Sのサブセットである。
図示するように、事前取得画像Sのうち時間点が選択されていない画像は、画像の第1のサブセットS1に含まれていない。
この方法は、新規取得画像から画像の第2のサブセットS2を特定する第1のステップ103も含み、画像の第2のサブセット(S2)内の画像は、連続しており、画像の第1のサブセット(S1)内で同じ最類似画像を有し、新規取得画像のうちの所与の画像を画像の第1のサブセット(S1)の各画像と比較することによって類似度のセットが決定され、最類似画像は類似度のセットの中で最も高い類似度を有する。
新規取得画像は、患者の治療中に取得される画像である。最類似画像は、新規取得画像に対する、画像の第1のサブセットS1中の代表画像である。
新規取得画像に対して、画像の第1のサブセットS1内の画像と比較することによって類似度が導出される。画像の第1のサブセットS1にあるすべての画像と比較することにより、類似度のセットが導出される。それぞれの類似度は、新規取得画像と、画像の第1のサブセットS1中の対応する画像との類似性を表す。最類似画像は、画像の第1のサブセットS1から選択される。最類似画像と新規取得画像との類似度は、類似度のセットの中で最も高い。
例えば、図4で、画像In1は新規取得画像である。この新規取得画像In1を、画像の第1のサブセットS1にあるすべての画像と比較する。新規取得画像In1と、画像の第1のサブセットS1にあるすべての画像とを比較することにより、類似度のセットを導出する。画像Imtが、画像の第1のサブセットS1の中で最も高い類似度を有する。よって、画像Imtは、新規取得画像In1のS1の中での最類似画像であると特定される。
新規取得画像それぞれに、同じようにして最類似画像が特定される。
偶然に、いくつかの新規取得画像が、画像の第1のサブセットS1内で最類似画像が同じになることがある。
画像の第1のサブセットS1の時間に沿った取得フレームレートは、事前取得画像よりも低い。患者身体の同じ対象物体に対して、事前取得画像の取得フレームレートは、新規取得画像の取得フレームレートと同じである。したがって、画像の第1のサブセットS1の取得フレームレートは、新規取得画像よりも低い。例えば、3次元のボリューム測定超音波撮像では、画像取得フレームレートは、機械的掃引リニアアレイを備えた超音波プローブを使用する場合は[4Hz〜15Hz]の範囲であり、電動操舵マトリクスアレイトランスデューサを備えた超音波プローブを使用する場合は[20Hz〜50Hz]である。
以下では、「3D」を使用して3次元を表し、「2D」を使用して2次元を表す。
例えば、図5に示すように、画像[I11...I1n]の新規取得画像は、画像の第1のサブセットS1の中で同じ最類似画像Imt1を有する。したがって、画像のセット[I11...I1n]は画像の第2のサブセットを定義し、これを図5ではS2と称する。
画像の第2のサブセットS2は、新規取得画像の、画像の第1のサブセットS1における最類似画像が画像Imt1と異なるときに完全に特定される。例えば、Imt2が、新規取得画像I21の、画像の第1のサブセットS1における最類似画像であると特定されると、画像の第2のサブセットS2は完全なものになる。
この方法は、画像の第2のサブセットS2中の所与の画像I1を第1の参照画像I1として選択する第1のステップ104も含む。
図5に示すように、画像I1は、画像の第2のサブセットS2から選択されて第1の参照画像とされる。
有利には、第1の参照画像I1は、画像の第2のサブセットS2の中央の時間枠内で選択される画像である。例えば、第2のサブセットS2の画像の数がnであり、nが奇数である場合、第1の参照画像I1の順番は、画像の第2のサブセットS2内で(n+1)/2となるように選択され、nが偶数である場合、第1の参照画像I1の順番は、画像の第2のサブセットS2内でn/2−1又はn/2+1となるように選択される。
有利には、第1の参照画像I1は、画像の第2のサブセットS2の中で無作為又は任意に選択される画像である。
有利には、第1の参照画像I1は、画像の第2のサブセットS2の中で1番目の画像である。
この方法は、新規取得画像から画像の第3のサブセットS3を特定する第2のステップ105も含み、画像の第3のサブセット(S3)内の画像は、連続しており、画像の第1のサブセット(S1)内で同じ最類似画像を有し、新規取得画像のうちの所与の画像を画像の第1のサブセット(S1)の各画像と比較することによって類似度のセットが決定され、最類似画像は類似度のセットの中で最も高い類似度を有する。
新規取得画像は、患者の治療中に取得される画像である。
最類似画像は、新規取得画像に対する、画像の第1のサブセットS1中の代表画像である。
新規取得画像に対して、画像の第1のサブセットS1内の画像と比較することによって類似度が導出される。画像の第1のサブセットS1にあるすべての画像と比較することにより、類似度のセットが導出される。それぞれの類似度は、新規取得画像と、画像の第1のサブセットS1中の対応する画像との類似性を表す。最類似画像は、画像の第1のサブセットS1から選択される。最類似画像と新規取得画像との類似度は、類似度のセットの中で最も高い。
例えば、図5では、画像I21は新規取得画像である。この新規取得画像I21を、画像の第1のサブセットS1にあるすべての画像と比較する。新規取得画像I21と、画像の第1のサブセットS1にあるすべての画像とを比較することにより、類似度のセットを導出する。画像Imt2が、画像の第1のサブセットS1の中で最も高い類似度を有する。よって、画像Imt2は、新規取得画像I21のS1の中での最類似画像であると特定される。
新規取得画像それぞれに、同じようにして最類似画像が特定される。
偶然に、いくつかの新規取得画像は、画像の第1のサブセットS1内で最類似画像が同じになることがある。
画像の第1のサブセットS1の時間に沿った取得フレームレートは、事前取得画像よりも低い。患者身体の同じ対象物体に対して、事前取得画像の取得フレームレートは、新規取得画像の取得フレームレートと同じである。したがって、画像の第1のサブセットS1の取得フレームレートは、新規取得画像よりも低い。例えば、3Dボリューム測定超音波撮像では、画像取得フレームレートは、機械的掃引リニアアレイを備えた超音波プローブを使用する場合は[4Hz〜15Hz]の範囲であり、電動操舵マトリクスアレイトランスデューサを備えた超音波プローブを使用する場合は[20Hz〜50Hz]である。
例えば、図5に示すように、画像[I21...I2m]の新規取得画像は、画像の第1のサブセットS1の中で同じ最類似画像Imt2を有する。したがって、画像のセット[I21...I2m]は画像の第3のサブセットを定義し、これを図5ではS3と称する。
画像の第3のサブセットS3は、新規取得画像の、画像の第1のサブセットS1における最類似画像が画像Imt2と異なるときに完全に特定される。例えば、Imt3が、新規取得画像I31の、画像の第1のサブセットS1における最類似画像であると特定されると、画像の第3のサブセットS3は完全なものになる。
この方法は、画像の第3のサブセットS3中の所与の画像I2を第2の参照画像I2として選択する第2のステップ106も含む。
図5に示すように、画像I2は、画像の第3のサブセットS3から選択されて第2の参照画像とされる。
有利には、第2の参照画像I2は、画像の第3のサブセットS3の中央の時間枠内にあるように選択される画像である。例えば、第3のサブセットS3の画像の数がnであり、nが奇数である場合、第2の参照画像I2の順番は、画像の第3のサブセットS3内で(n+1)/2となるように選択され、nが偶数である場合、第2の参照画像I2の順番は、画像の第3のサブセットS3内でn/2−1又はn/2+1となるように選択される。
有利には、第2の参照画像I2は、画像の第3のサブセットS3の中で無作為又は任意に選択される画像である。
有利には、第2の参照画像I2は、画像の第3のサブセットS3の中で1番目の画像である。
この方法は、第2の参照画像I2と第1の参照画像I1との間の対象物体の変位を計算するステップ107も含む。
この変位は、第2の参照画像I2内での物体の位置と、第1の参照画像I1内での物体の位置との間の位置の変化を表す。
この変位は、画像I2における患者身体の対象物体の位置情報と、画像I1における患者身体の対象物体の位置情報との間の距離を計算することによって測定される。
例えば、超音波撮像では、2つの画像間の変位は、本発明における方法を使用して計算される。2D超音波撮像では、変位は、座標軸(x,y)の2つの方向それぞれで計算される。3D超音波撮像では、変位は、座標軸(x,y,z)の3つの方向それぞれで計算される。
上記で計算された変位は、ずれたピクセルを反映している。座標軸の各方向における既知の空間解像度と組み合わせることにより、実際の移動距離が求められる。
有利には、決定するステップ102は、セット[12,14,16,18,20,22,24]の中で選択された数の画像を有する画像の第1のサブセットS1を決定するようになされる。
例えば、患者の呼吸頻度は20回/分前後であり、患者の呼吸サイクルの継続時間は3秒前後である。3Dのボリューム測定超音波撮像では、画像取得フレームレートは、機械的掃引リニアアレイを備えた超音波プローブを使用する場合[4Hz〜15Hz]の範囲であり、電動操舵マトリクスアレイトランスデューサを備えた超音波プローブを使用する場合[20Hz〜50Hz]である。したがって、1回の呼吸周期時間サイクル内に取得できる超音波画像の数は、機械的掃引リニアアレイを備えた超音波プローブを使用する場合は[12;45]の範囲であり、電動操舵マトリクスアレイトランスデューサを備えた超音波プローブを使用する場合は[60;150]の範囲である。
一例として、実験は、セット[12,14,16,18,20,22,24]から選択される画像の数が現実的なものであることを示す。
有利には、決定するステップ102は、変位モデルの一周期時間サイクル内で第1の領域及び第2の領域を選択することを含み、第1の領域内で選択される画像の数は、第2の領域内で選択される画像の数より多く、第1の領域内での変位モデルの傾きは、第2の領域内での変位モデルの傾きよりも大きい。
図2に示すように、いくつかの領域、例えばP1、P2、P3、P4、P5、及びP6が選択される。変位モデルの傾きは変位の変化を示す。領域P1の傾き及び領域P3の傾きは、領域P2の傾きより大きい。領域P4の傾き及び領域P6の傾きは、領域P5の傾きより大きい。
例えば、t1P1、t2P1、t3P1は領域P1内の選択された時間点であり、一方、t2P2は領域P2内の選択された時間点である。領域P1内で選択される時間点の数は、領域P2内で選択される時間点の数より多い。一方、領域P1の傾きは、領域P2の傾きより大きい。
他の領域、例えばP3、P4、P5、及びP6内で選択されたいくつかの他の時間点があるはずである。領域P3内で選択される時間点の数は、領域P2内で選択される時間点の数より多い。一方、領域P3の傾きは、領域P2の傾きより大きい。領域P4、P6内で選択される時間点の数は、領域P5内で選択される時間点の数より多い。一方、領域P4、P6の傾きは、領域P5の傾きより大きい。
有利には、上記の決定するステップ102の後に、方法は、画像の第1のサブセットS1に標識を付加するステップをさらに含み、標識は、対象物体の呼吸呼息情報及び呼吸吸息情報を含んでいる。
例えば、患者の呼吸時間サイクルは呼息段階と吸息段階からなる。画像の第1のサブセットS1の各画像に、異なるステータスを反映する標識が付与される。
有利には、特定する第1のステップ103及び特定する第2のステップ105における最類似画像は、ボリューム間相互相関基準及び二乗差和最小基準の中から選択される基準を使用することに基づいて特定される。
ボリューム間相互相関は、知られている画像処理方法である(Hermosillo,G.,Chefd’Hotel,D., Faugeras,O.: Variational methods for multimodal image matching.Int.J.Comput.Vision 50,329−343(2002))。ボリューム間相互相関を適用することは、所与の画像と、画像の第1のサブセットS1の画像との間で最大の相関係数を見つけることである。
二乗差和最小基準も知られている画像処理方法である(Yin,Y.,Hoffman,E.,Lin,C.: Mass preserving nonrigid registration of CT lung images using cubic B−spline.Med.Phys.36(9),4213−4222(2009))。
有利には、特定する第1のステップ103は、以下の下位ステップを含む。
− 新規取得画像に、連続する画像との比較に基づいて標識を付加する下位ステップであって、標識は、呼吸呼息情報及び呼吸吸息情報を含んでいる、下位ステップ、
− 画像の第1のサブセットS1から画像の第4のサブセットS4を特定する下位ステップであって、第4のサブセットS4の画像は同じ標識を有する、下位ステップ、
− 新規取得画像から画像の第2のサブセットS2を特定する下位ステップであって、画像の第2のサブセットS2内の画像は、画像の第4のサブセットS4内で同じ最類似画像を有する、下位ステップ。
標識は、上述したように、対象物体の呼吸呼息情報及び呼吸吸息情報を含んでいる。
有利には、特定する第2のステップ105は以下の下位ステップを含む。
− 新規取得画像に、隣接する画像との比較に基づいて標識を付加する下位ステップであって、標識は、呼吸呼息情報及び呼吸吸息情報を含んでいる、下位ステップ、
− 画像の第1のサブセットS1から画像の第4のサブセットS4を特定する下位ステップであって、第4のサブセットS4の画像は同じ標識を有する、下位ステップ、
− 新規取得画像から画像の第3のサブセットS3を特定する下位ステップであって、画像の第3のサブセットS3内の画像は、画像の第4のサブセットS4内で同じ最類似画像を有する、下位ステップ。
標識は、上述したように、対象物体の呼吸呼息情報及び呼吸吸息情報を含んでいる。
有利には、方法は、
− 変位に基づいて、対象物体に向けられることが意図される放射線ビームの位置を補償する下位ステップ108をさらに含む。
それに応じて、放射線ビームの方向が、対象物体の移動に追従するように調整される。したがって、患者身体の呼吸による動きが補償される。
図6は、変位を計算するための本発明の一実施形態によるシステム200の概略図を示す。システム200は、以下のための処理ユニット230を備える。
− 対象物体の事前取得画像のセットのうち隣接する画像から対象物体の変位モデルを計算する第1のユニット(231)であって、変位モデルは時間に沿った対象物体の位置を反映する、第1のユニット(231)、
− 事前取得画像のセットの1周期時間サイクルの中で、事前取得画像のセットから画像の第1のサブセットS1を決定する第2のユニット(232)、
− 新規取得画像から画像の第2のサブセットS2を特定する第3のユニット(233)であって、画像の第2のサブセット(S2)内の画像は、画像の第1のサブセット(S1)内で同じ最類似画像を有し、新規取得画像のうちの所与の画像を画像の第1のサブセット(S1)の各画像と比較することによって類似度のセットが決定され、最類似画像は、類似度のセットの中で最も高い類似度を有する、第3のユニット(233)、
− 画像の第2のサブセットS2中の所与の画像を第1の参照画像I1として選択する第4のユニット(234)、
− 新規取得画像から画像の第3のサブセットS3を特定する第5のユニット(235)であって、画像の第3のサブセット(S3)内の画像は、画像の第1のサブセット(S1)内で同じ最類似画像を有し、新規取得画像のうちの所与の画像を画像の第1のサブセット(S1)の各画像と比較することによって類似度のセットが決定され、最類似画像は類似度のセットの中で最も高い類似度を有する、第5のユニット(235)、
− 画像の第3のサブセットS3中の所与の画像を第2の参照画像I2として選択する第6のユニット(236)、
− 第2の参照画像I2と第1の参照画像I1との間の変位を計算する第7のユニット(237)。
本発明によるシステムの様々なユニットは、先に説明した様々なステップを実行するようになされる。例えば、1つ又は複数のユニットが1つ又は複数のプロセッサ内に実施される。
図7は、本発明の一実施形態によるシステムを示す。
有利には、システム200は、画像取得モジュール210に接続するようになされる。
この画像取得モジュール210は、事前取得画像及び新規取得画像を取得することを目的とする。
有利には、システム200は制御モジュール220に接続するようになされる。
処理ユニット230によって計算された変位は、処理ユニット230によって送出され、制御モジュール220に送られる。制御モジュール220は、対象物体の移動に追従するように放射線ビームを送達するために起動される。
有利には、画像取得モジュール210は超音波撮像取得モジュールである。
本発明について、図面及び上述の説明にて図示し、詳細に説明したが、そのような図示及び説明は、説明のため又は例示的なものであり、制限的なものではないと解釈すべきである。本発明は、開示される実施形態に制限されない。図面、本開示、及び従属請求項の検討から、特許請求される発明を実施する際に、開示される実施形態の他の変形が当業者によって理解され、実施されることができる。
特許請求の範囲では、「を含む」という単語は、他の要素又はステップを排除せず、不定冠詞「a」又は「an」は複数を排除しない。単一のプロセッサ又は他のユニットが、特許請求の範囲に述べられるいくつかの項目の機能を実現する。特定の手段が相互に異なる従属請求項に述べられているという単なる事実は、それらの手段の組み合わせを有利に使用できないことを意味しない。特許請求の範囲中の参照符号はいずれも、範囲を限定するものと解釈すべきでない。

Claims (14)

  1. 対象物体の変位を計算する方法であって、前記方法は、前記対象物体の事前取得画像のセットの隣接する画像から前記対象物体の変位モデルを計算するステップを含み、前記変位モデルは、時間に沿った前記対象物体の位置を反映する方法において、前記方法は、
    前記変位モデルに基づいて、前記事前取得画像のセットの1周期時間サイクルの中で、前記事前取得画像のセットから画像の第1のサブセットを決定するステップと、
    新規取得画像から画像の第2のサブセットを特定する第1のステップであって、前記画像の第2のサブセット中の画像は、連続しており、前記画像の第1のサブセット中で同じ最類似画像を有し、前記新規取得画像のうちの所与の画像を前記画像の第1のサブセットの各画像と比較することによって類似度のセットが決定され、前記最類似画像は前記類似度のセットの中で最も高い類似度を有する、特定する第1のステップと、
    前記画像の第2のサブセット中の所与の画像を第1の参照画像として選択する第1のステップと、
    前記新規取得画像から画像の第3のサブセットを特定する第2のステップであって、前記画像の第3のサブセット中の画像は、連続しており、前記画像の第1のサブセット中で同じ最類似画像を有し、前記新規取得画像のうちの所与の画像を前記画像の第1のサブセットの各画像と比較することによって類似度のセットが決定され、前記最類似画像は前記類似度のセットの中で最も高い類似度を有する、特定する第2のステップと、
    前記画像の第3のサブセット中の所与の画像を第2の参照画像として選択する第2のステップと、
    前記第2の参照画像と前記第1の参照画像との間の前記変位を計算するステップと、をさらに含むことを特徴とする、方法。
  2. 前記決定するステップが、セット[12,14,16,18,20,22,24]の中で選択された数の画像を有する前記画像の第1のサブセットを決定する、請求項1に記載の方法。
  3. 前記決定するステップが、前記変位モデルの一周期時間サイクル内で第1の領域及び第2の領域を選択するステップを含み、前記第1の領域内で選択される画像の数は、前記第2の領域内で選択される画像の数より多く、前記第1の領域内での前記変位モデルの傾きは、前記第2の領域内での前記変位モデルの傾きよりも大きい、請求項1に記載の方法。
  4. 前記決定するステップの後に、前記画像の第1のサブセットに標識を付加するステップをさらに含み、前記標識は、前記対象物体の呼吸呼息情報及び呼吸吸息情報を含んでいる、請求項1に記載の方法。
  5. 前記特定する第1のステップ及び前記特定する第2のステップにおける前記最類似画像は、ボリューム間相互相関基準及び二乗差和最小基準の中から選択される基準を使用することに基づいて特定される、請求項1乃至4のいずれか一項に記載の方法。
  6. 前記選択する第1のステップが、前記新規取得画像の中央の時間枠内で前記第1の参照画像を選択するステップを含む、請求項1乃至5に記載の方法。
  7. 前記選択する第2のステップが、前記新規取得画像の中央の時間枠内で前記第2の参照画像を選択するステップを含む、請求項1乃至5に記載の方法。
  8. 前記特定する第1のステップが、
    新規取得画像に、連続する画像との比較に基づいて標識を付加する下位ステップであって、前記標識は、呼吸呼息情報及び呼吸吸息情報を含んでいる、下位ステップと、
    前記画像の第1のサブセットから画像の第4のサブセットを特定する下位ステップであって、前記第4のサブセットの画像は同じ標識を有する、下位ステップと、
    新規取得画像から前記画像の第2のサブセットを特定する下位ステップであって、前記画像の第2のサブセット中の画像は、前記画像の第4のサブセット中で同じ最類似画像を有する、下位ステップとを含む、請求項4に記載の方法。
  9. 前記特定する第2のステップが、
    新規取得画像に、隣接する画像との比較に基づいて標識を付加する下位ステップであって、前記標識は、呼吸呼息情報及び呼吸吸息情報を含んでいる、下位ステップと、
    前記画像の第1のサブセットから画像の第4のサブセットを特定する下位ステップであって、前記第4のサブセットの画像は同じ標識を有する、下位ステップと、
    新規取得画像から前記画像の第3のサブセットを特定する下位ステップであって、前記画像の第3のサブセット中の画像は、前記画像の第4のサブセット中で同じ最類似画像を有する、下位ステップとを含む、請求項4に記載の方法。
  10. 前記変位に基づいて、前記対象物体に向けられることが意図される放射線ビームの位置を補償する下位ステップをさらに含む、請求項1乃至9のいずれか一項に記載の方法。
  11. 変位を計算するシステムであって、前記システムは、対象物体の事前取得画像のセットのうち隣接する画像から前記対象物体の変位モデルを計算する第1のユニットを含む処理ユニットを備え、前記変位モデルは、時間に沿った前記対象物体の位置を反映するシステムにおいて、前記処理ユニットが、
    前記変位モデルに基づいて、前記事前取得画像のセットの1周期時間サイクルの中で、前記事前取得画像のセットから画像の第1のサブセットを決定する第2のユニットと、
    新規取得画像から画像の第2のサブセットを特定する第3のユニットであって、前記画像の第2のサブセット中の画像は、連続しており、前記画像の第1のサブセット中で同じ最類似画像を有し、前記新規取得画像のうちの所与の画像を前記画像の第1のサブセットの各画像と比較することによって類似度のセットが決定され、前記最類似画像は前記類似度のセットの中で最も高い類似度を有する、第3のユニットと、
    前記画像の第2のサブセット中の所与の画像を第1の参照画像として選択する第4のユニットと、
    前記新規取得画像から画像の第3のサブセットを特定する第5のユニットであって、前記画像の第3のサブセット中の画像は、連続しており、前記画像の第1のサブセット中で同じ最類似画像を有し、前記新規取得画像のうちの所与の画像を前記画像の第1のサブセットの各画像と比較することによって類似度のセットが決定され、前記最類似画像は前記類似度のセットの中で最も高い類似度を有する、第5のユニットと、
    前記画像の第3のサブセット中の所与の画像を第2の参照画像として選択する第6のユニットと、
    前記第2の参照画像と前記第1の参照画像との間の前記変位を計算する第7のユニットと、をさらに備えることを特徴とする、システム。
  12. 画像取得モジュールに接続する、請求項11に記載のシステム。
  13. 制御モジュールに接続する、請求項11に記載のシステム。
  14. 前記画像取得モジュールが超音波撮像取得モジュールである、請求項12に記載のシステム。
JP2017531994A 2014-12-17 2015-12-11 対象物体の変位を計算する方法及びシステム Active JP6692817B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
CNPCT/CN2014/094132 2014-12-17
CN2014094132 2014-12-17
EP15161267.8 2015-03-27
EP15161267 2015-03-27
PCT/EP2015/079359 WO2016096635A1 (en) 2014-12-17 2015-12-11 Method and system for calculating a displacement of an object of interest

Publications (3)

Publication Number Publication Date
JP2018506322A true JP2018506322A (ja) 2018-03-08
JP2018506322A5 JP2018506322A5 (ja) 2019-06-27
JP6692817B2 JP6692817B2 (ja) 2020-05-13

Family

ID=54848569

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017531994A Active JP6692817B2 (ja) 2014-12-17 2015-12-11 対象物体の変位を計算する方法及びシステム

Country Status (5)

Country Link
US (1) US10346989B2 (ja)
EP (1) EP3234917B1 (ja)
JP (1) JP6692817B2 (ja)
CN (1) CN107004270B (ja)
WO (1) WO2016096635A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10346989B2 (en) * 2014-12-17 2019-07-09 Koninklijke Philips N.V. Method and system for calculating a displacement of an object of interest
CN111374708B (zh) * 2018-12-28 2024-02-20 深圳迈瑞生物医疗电子股份有限公司 一种胎儿心率检测方法及超声成像装置、存储介质
CN110443794B (zh) * 2019-05-29 2020-12-18 腾讯科技(深圳)有限公司 一种基于病理图像的图像状态确定方法、装置以及系统

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3834365B2 (ja) * 1996-10-16 2006-10-18 アロカ株式会社 超音波診断装置
AUPP299498A0 (en) * 1998-04-15 1998-05-07 Commonwealth Scientific And Industrial Research Organisation Method of tracking and sensing position of objects
US6563964B1 (en) 1999-02-08 2003-05-13 Sharp Laboratories Of America, Inc. Image downsampling using redundant pixel removal
WO2002037934A2 (en) 2000-06-05 2002-05-16 Mentor Corporation Automated implantation system for radioisotope seeds
US7260253B2 (en) * 2002-04-19 2007-08-21 Visiongate, Inc. Method for correction of relative object-detector motion between successive views
JP4492107B2 (ja) * 2003-12-02 2010-06-30 株式会社日立メディコ 画像診断装置
CN101107628A (zh) * 2005-01-19 2008-01-16 皇家飞利浦电子股份有限公司 用于图像对准的图像处理系统和方法
WO2008044572A1 (fr) * 2006-10-04 2008-04-17 Hitachi Medical Corporation dispositif de diagnostic d'images médicales
CN100470587C (zh) * 2007-01-26 2009-03-18 清华大学 一种医学图像中腹部器官分割方法
RU2525106C2 (ru) * 2008-08-28 2014-08-10 Конинклейке Филипс Электроникс Н.В. Устройство для определения изменения размера объекта
US8379794B2 (en) 2008-09-05 2013-02-19 The Board Of Trustees Of The Leland Stanford Junior University Method to estimate position, motion and trajectory of a target with a single x-ray imager
WO2011101754A1 (en) 2010-02-18 2011-08-25 Koninklijke Philips Electronics N.V. System and method for tumor motion simulation and motion compensation using tracked bronchoscopy
EP2545528B1 (en) * 2010-03-12 2021-01-06 Koninklijke Philips N.V. Motion visualisation in angiographic images
WO2012019162A1 (en) 2010-08-06 2012-02-09 Accuray, Inc. Systems and methods for real-time tumor tracking during radiation treatment using ultrasound imaging
JP5906428B2 (ja) 2012-07-11 2016-04-20 パナソニックIpマネジメント株式会社 Ledモジュールおよびこれを備えた照明装置
JP5916859B2 (ja) 2012-07-13 2016-05-11 三菱電機株式会社 X線位置決め装置及びx線位置決め方法
US20140107390A1 (en) 2012-10-12 2014-04-17 Elekta Ab (Publ) Implementation and experimental results of real-time 4d tumor tracking using multi-leaf collimator (mlc), and/or mlc-carriage (mlc-bank), and/or treatment table (couch)
JP6266887B2 (ja) * 2013-03-04 2018-01-24 株式会社デンソー 推定装置
KR20140126815A (ko) 2013-04-22 2014-11-03 삼성전자주식회사 호흡 주기 동안 체내 장기의 변화를 추적하는 방법, 장치 및 시스템.
US9601625B2 (en) 2013-07-15 2017-03-21 Taiwan Semiconductor Manufacturing Company Limited Guard ring structure of semiconductor arrangement
KR102185362B1 (ko) * 2013-10-08 2020-12-02 삼성전자주식회사 초음파 프로브 및 이를 포함한 의료 장치
JP6182488B2 (ja) * 2014-03-25 2017-08-16 株式会社日立製作所 位置決め制御装置
US10346989B2 (en) * 2014-12-17 2019-07-09 Koninklijke Philips N.V. Method and system for calculating a displacement of an object of interest
US10242281B2 (en) * 2015-07-05 2019-03-26 RideOn Ltd. Hybrid orientation system

Also Published As

Publication number Publication date
EP3234917A1 (en) 2017-10-25
CN107004270B (zh) 2021-02-19
JP6692817B2 (ja) 2020-05-13
US10346989B2 (en) 2019-07-09
CN107004270A (zh) 2017-08-01
WO2016096635A1 (en) 2016-06-23
EP3234917B1 (en) 2019-08-14
US20170345158A1 (en) 2017-11-30

Similar Documents

Publication Publication Date Title
CN111161326B (zh) 用于可变形图像配准的无监督深度学习的系统和方法
AU2018201316B2 (en) Motion management in mri-guided linac
JP5797352B1 (ja) 3次元物体を追跡するための方法
JP5134957B2 (ja) 運動中の標的の動的追跡
Blackall et al. MRI-based measurements of respiratory motion variability and assessment of imaging strategies for radiotherapy planning
EP2018627B1 (en) Deformable registration of images for image guided radiation therapy
EP2070478B1 (en) Detection of the position of a moving object and treatment method
CN107106241B (zh) 用于对外科器械进行导航的系统
US8457372B2 (en) Subtraction of a segmented anatomical feature from an acquired image
US20160279444A1 (en) Radiotherapy dose assessment and adaption using online imaging
EP3217884B1 (en) Method and apparatus for determining or predicting the position of a target
US20130035588A1 (en) Magnetic resonance imaging for therapy planning
EP3468668B1 (en) Soft tissue tracking using physiologic volume rendering
JP6692817B2 (ja) 対象物体の変位を計算する方法及びシステム
Øye et al. Real time image-based tracking of 4D ultrasound data
EP3790626B1 (en) Computation of a breathing curve for medical applications
Rihana et al. Kinect2—Respiratory movement detection study
KR20140054783A (ko) 움직임 보상된 pet영상과 ct 및 mr 영상과의 4차원 융합 디스플레이 기술
CN107812325A (zh) 采用磁共振成像对体内目标的运动进行跟踪的方法
Brack et al. Application of stereoscopic arc photogrammetry to image-guided radiation therapy and treatment planning
Westwood Medicine Meets Virtual Reality 2001 199 JD Westwood et al.(Eds.) IOS Press, 2001
Cui et al. Patient specific respiratory motion modeling using a limited number of 3D lung CT images

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181210

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190527

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190527

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190604

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20191007

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200205

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20200212

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200317

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200415

R150 Certificate of patent or registration of utility model

Ref document number: 6692817

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250