JP2008503258A - マルチモード視覚化を使用して病気の進行または治療効果を監視するシステムおよび方法 - Google Patents

マルチモード視覚化を使用して病気の進行または治療効果を監視するシステムおよび方法 Download PDF

Info

Publication number
JP2008503258A
JP2008503258A JP2007516710A JP2007516710A JP2008503258A JP 2008503258 A JP2008503258 A JP 2008503258A JP 2007516710 A JP2007516710 A JP 2007516710A JP 2007516710 A JP2007516710 A JP 2007516710A JP 2008503258 A JP2008503258 A JP 2008503258A
Authority
JP
Japan
Prior art keywords
image
data set
time point
image data
image sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Abandoned
Application number
JP2007516710A
Other languages
English (en)
Inventor
ラグハヴァン ラママーシー、ヴェンカト
クリシュナン、アルン
ベルディンガー、クリスチアン
ゾルトナー、ユルゲン
マミン、マクシム
バルト、アクセル
カップリンガー、シュテファン
グルース、マイケル
ホーマン、ペギー
デニス ブルクハルト、ダレル
プラッツ、アクセル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Siemens Medical Solutions USA Inc
Original Assignee
Siemens AG
Siemens Medical Solutions USA Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG, Siemens Medical Solutions USA Inc filed Critical Siemens AG
Publication of JP2008503258A publication Critical patent/JP2008503258A/ja
Abandoned legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/38Registration of image sequences
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2012Colour editing, changing, or manipulating; Use of colour codes

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Quality & Reliability (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

マルチモード視覚化を使用して病気の進行または治療効果を監視するためのシステムおよび方法が提供される。本方法は、第1の時点の第1の画像データセットを選択するステップ(310)と、第1の時点の第1の画像データセットをロードするステップ(320)と、第2の時点の第2の画像データセットを選択するステップ(330)と、第2の時点の第2の画像データセットをロードするステップ(340)と、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをレジストレーションするステップ(350)と、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示するステップ(360)とを含む。

Description

[関連出願の相互参照]
本出願は、参照により本明細書に組み込まれる2004年6月18日に提出された米国仮特許出願第60/581,136号の利益を主張する。
[発明の背景]
本発明は、医用画像解析に関し、特に、マルチモード視覚化を使用して病気の進行または治療効果を監視するシステムおよび方法に関する。
単光子放出コンピュータ断層撮影(SPECT)および陽電子放出断層撮影(PET)を使用する機能的なイメージングは、様々な医学的疾患の診断において極めて有益である。しかしながら、SPECT画像およびPET画像に関する解剖学的な定義における不確実性は、時として、それらの実用性を制限する。これを克服するために時には、身体の同じ領域の機能的SPECT画像またはPET画像と、磁気共鳴画像(MRI)およびX線コンピュータ断層撮影(CT)画像との統合画像が使用される。これは、研究、診断、および処置にとって非常に重要な相補的な解剖学的(MRIまたはCT)および生理学的(SPECTまたはPET)な情報を与える。
機能的な身体画像および構造的な画像は、特定の医学的疾患の診断のために医師により使用される2つのタイプの医用画像である。機能的な身体画像はSPECTスキャンまたはPETスキャンから得られ、生理学的情報を与える。一方、構造的な画像はCTまたはMRIから得られ、身体の解剖学的マップを与える。異なる医用イメージング技術は、相補的で且つ時として相反する情報をスキャンに与える場合がある。例えば、画像アーカイブ通信システム(PACS)を使用する画像の統合(画像融合または画像レジストレーションによる)は、しばしば、個々の画像において明らかでない更なる臨床的情報をもたらすことができる。したがって、一連の機能的画像に対して構造的な解剖学的骨組みを課すことにより、不十分な解剖学的内容が存在する場合であっても、その後の機能的画像中における腫瘍や他の病変の位置が決定される場合がある。
画像レジストレーションを用いて医用画像を重ね合わせる合成画像の構成は、主として、機能的画像と解剖学的画像との融合において使用されてきたが、それは、画像の一連の同じモダリティに対しても適用されてきた。この例は、追跡検査における或いは正常な吸収特性を有する画像と疑わしい異常性を有する画像との比較における同じ被検者のSPECT画像のレジストレーションである。また、SPECT画像およびPET画像の画像レジストレーション、および、解剖アトラスを有するSPECT画像およびPET画像のレジストレーションは、SPECT放射性薬剤およびPET放射性薬剤の比較吸収特性を評価し且つ吸収特性を解剖学的構造に関連付けるための重要な手段を与える。
マルチモード医用画像レジストレーションは、腫瘍および他の病気の早期検出および診断精度の向上に大きく役立ち得る視覚化ツールに急速になってきている。例えば、放射線科医は、しばしば、CTおよびMRIなどの構造的情報の助けを借りたとしても、CT画像およびMRI画像中の癌組織と周辺組織との間の低いコントラストに起因して、癌組織を見つけて正確に特定することに困難を感じている。しかしながら、SPECTおよび放射活性物質で標識したモノクローナル抗体を使用することにより、腫瘍中の抗体の濃度の高コントラスト画像を得ることができる。
このように、複数の医用イメージングシステムの出力と強度とを組み合わせることが益々望まれるようになっている。しかしながら、異なるファイル構造の組み合わせ、その転送およびネットワーキング、合成画像のレジストレーションおよび視覚化に起因して、特定の欠点が存在する。例えば、そのようなシステムは、一般に、異なるモダリティからのデータセットの統合をあまり数多くサポートしない。また、多くのシステムは、腫瘍の変化を解析するための迅速で正確な手段を与えない。更に、多くのシステムは、異なる時点からの医用画像を位置合わせするための迅速な技術を与えない。例えば、腫瘍の変化を正確に解析するために、異なる時点で走査された同じモダリティの画像を比較することがしばしば必要である。
したがって、同じ或いは異なるモダリティを使用して異なる時刻に取得された患者スキャンを医師が比較することができ、それにより、費用効率が高い効率的な態様で医師が良好な情報による診断、治療、および追跡決定を行なうことができるようにする技術が必要である。
[発明の要点]
本発明は、マルチモード視覚化を使用して病気の進行または治療効果を監視するシステムおよび方法を提供することにより、既知の技術において直面する前述した問題および他の問題を解消する。
本発明の一実施形態において、マルチモード視覚化方法は、第1の時点の第1の画像データセットを選択するステップと、第1の時点の第1の画像データセットをロードするステップと、第2の時点の第2の画像データセットを選択するステップと、第2の時点の第2の画像データセットをロードするステップと、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをレジストレーションするステップと、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示するステップとを含む。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、コンピュータ断層撮影(CT)、陽電子放出断層撮影(PET)、単光子放出コンピュータ断層撮影(SPECT)、磁気共鳴(MR)、および超音波モダリティのうちの1つから取得されたデータを含む。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、CT画像列およびMR画像列、PET画像列およびSPECT画像列、CT画像列とPET画像列との統合画像列、MR画像列とPET画像列との統合画像列、CT画像列とSPECT画像列との統合画像列、MR画像列とSPECT画像列との統合画像列、および超音波画像列、のうちの1つの画像列を含む。
第1の時点の第1の画像データセットの画像列および第2の時点の第2の画像データセットの画像列はそれぞれ、治療前の検査対象、治療中の検査対象、および治療後の検査対象のうちの1つの検査対象のデータを含む。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットは、自動レジストレーション、ランドマークを用いたレジストレーション、および視覚によるレジストレーションのうちの1つを使用してレジストレーションされる。第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをレジストレーションするステップ中に使用される自動レジストレーションは、第1の時点の第1の画像データセットの第1の画像列を第1の時点の第1の画像データセットの第2の画像列にレジストレーションし、第1の時点の第1の画像データセットの第1の画像列を第2の時点の第2の画像データセットの第1の画像列にレジストレーションし、第2の時点の第2の画像データセットの第1の画像列を第2の時点の第2の画像データセットの第2の画像列にレジストレーションする。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示するステップは、第1の時点の第1の画像データセットの第1の画像列および第2の画像列と、第2の時点の第2の画像データセットの第1の画像列および第2の画像列とを表示する。
本方法は、第1の時点の第1の画像データセットの第1の画像列または第2の画像列、および、第2の時点の第2の画像データセットの第1の画像列または第2の画像列、のうちの一方の画像列に関して関心領域(VOI)を描くステップと、第1の時点の第1の画像データセットの残りの画像列および第2の時点の第2の画像データセットの残りの画像列へ関心領域をコピーするステップと、第1の時点の第1の画像データセットの第1の画像列および第2の画像列の関心領域と、第2の時点の第2の画像データセットの第1の画像列および第2の画像列の関心領域とをリンクさせるステップとを更に含む。関心領域は、病変、腫瘍、および癌領域のうちの1つである。
本方法は、第1の時点の第1の画像データセットの第1の画像列および第2の画像列と、第2の時点の第2の画像データセットの第1の画像列および第2の画像列とに関して関心領域を定量化するステップを更に含む。定量化は、最小偏差、最大偏差、標準偏差、平均値、体積、平均、直径、面積、ピクセル数、および質量中心のうちの1つである。
本方法は、関心領域の変化を検出するステップ、定量化された関心領域に関連する報告を形成するステップ、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットのうちの一方の画像データセットの最大強度投影(MIP)を計算して最大強度投影を表示するステップ、最大強度投影を第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットと対応付けるステップを更に含む。
本発明の他の実施形態において、マルチモード視覚化のためのユーザインタフェースは、第1の時点の第1の画像データセットと第2の時点の第2の画像データセットとを比較するために第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示するための第1の表示領域と、患者フォルダ、ワークフローペイン、および制御部を含む制御領域を表示するための第2の表示領域とを含み、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、コンピュータ断層撮影(CT)、陽電子放出断層撮影(PET)、単光子放出コンピュータ断層撮影(SPECT)、磁気共鳴(MR)、および超音波モダリティのうちの1つから取得されたデータを含む。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、CT画像列およびMR画像列、PET画像列およびSPECT画像列、CT画像列とPET画像列との統合画像列、MR画像列とPET画像列との統合画像列、CT画像列とSPECT画像列との統合画像列、MR画像列とSPECT画像列との統合画像列、および超音波画像列、のうちの1つの画像列を含む。
第1の時点の第1の画像データセットの画像列および第2の時点の第2の画像データセットの画像列はそれぞれ、治療前の検査対象、治療中の検査対象、および治療後の検査対象のうちの1つの検査対象のデータを含む。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットのそれぞれは、サジタル画像、コロナル画像、およびアキシャル画像のうちの1つの画像として表示され、第1の画像データセットおよび第2の画像データセットが融合画像として表示される。
ワークフローペインは、レジストレーションペイン、視覚化ペイン、最大強度投影(MIP)ペイン、輪郭ペイン、および報告ペインのうちの1つへのリンクを含む。
本発明の更に他の実施形態において、マルチモード視覚化システムは、プログラムを記憶するメモリ装置と、このメモリ装置と通信し前記プログラムで動作するプロセッサとを含み、プロセッサは、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを選択し、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをロードし、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをレジストレーションし、第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示させる。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、コンピュータ断層撮影(CT)、陽電子放出断層撮影(PET)、単光子放出コンピュータ断層撮影(SPECT)、磁気共鳴(MR)、および超音波モダリティのうちの1つから取得されたデータを含む。
第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、CT画像列およびMR画像列、PET画像列およびSPECT画像列、CT画像列とPET画像列との統合画像列、MR画像列とPET画像列との統合画像列、CT画像列とSPECT画像列との統合画像列、MR画像列とSPECT画像列との統合画像列、および超音波画像列、のうちの1つの画像列を含む。
第1の時点の第1の画像データセットの画像列および第2の時点の第2の画像データセットの画像列はそれぞれ、治療前の検査対象、治療中の検査対象、および治療後の検査対象のうちの1つの検査対象のデータを含む。
以上の特徴は、代表的な実施形態を成しており、本発明の理解を助けるために与えられている。これらの実施形態が請求項によって規定される本発明を限定しようとするものではなく或いは請求項の等価物を限定しようとするものではないことは言うまでもない。したがって、この特徴の要約は、等価物を決定する際の方向を決定するものと見なされるべきではない。本発明の更なる特徴は、以下の説明、図面、請求項から明らかとなる。
[図面の説明]
図1は本発明の典型的な実施形態に係るマルチモード視覚化システムのブロック図である。
図2は本発明の典型的な実施形態に係るユーザインタフェースである。
図3は本発明の典型的な実施形態に係るマルチモード視覚化方法を示すフローチャートである。
図4は本発明の典型的な実施形態に係る患者ブラウザである。
図5は本発明の典型的な実施形態に係る、1つの時点を形成するための階層を示すチャートである。
図6は本発明の典型的な実施形態に係る、ロードするために複数の時点における有効および無効な画像列を示す画像列リストダイアログである。
図7は本発明の典型的な実施形態に係る一対のレジストレーションペインを示す。
図8は本発明の他の典型的な実施形態に係るユーザインタフェースである。
図9は本発明の典型的な実施形態に係る、ロードされたPETデータセットの一対の回転する最大強度投影(MIP)である。
図10は本発明の他の典型的な実施形態に係るマルチモード視覚化方法を示すフローチャートである。
図11は本発明の典型的な実施形態に係る、3×3レイアウトの表示領域における関心領域(VOI)等輪郭描写を示す。
図12は本発明の典型的な実施形態に係る、2×2レイアウトの表示領域における楕円輪郭を使用する自由形式の輪郭描写を示す。
図13は本発明の典型的な実施形態に係るユーザインタフェースである。
図14は本発明の他の典型的な実施形態に係るユーザインタフェースである。
図15は本発明の更に他の典型的な実施形態に係るユーザインタフェースである。
図16は本発明の典型的な実施形態に係るユーザインタフェースである。
図17は本発明の他の典型的な実施形態に係るユーザインタフェースである。
[典型的な実施形態の詳細な説明]
本発明の典型的な実施形態は、2つ以上の検査対象を互いに比較できるようにするマルチモダリティ用途に関する。これは、一般に、最初の診断を、処置後の追跡走査と比較することにより行なわれる。例えば、本発明は、病気の進行および治療効果を評価するために1つまたは複数の追跡検査が行なわれる癌検査のケースにおいて使用されてもよい。本発明は、病変、腫瘍、癌などを検出するために変化検出を使用できる医用モダリティに適用されてもよい。
例えば、本発明は、医用イメージングの以下の分野、すなわち、コンピュータ断層撮影(CT)または磁気共鳴(MR)画像−陽電子放出断層撮影(PET)またはCT−単光子放出コンピュータ断層撮影(SPECT)を使用して経時的に変化検出を行なうことによる治療効果監視、骨分割および病変検出を行なうことによる骨肉腫検出、潅流および分光法を使用する肝臓癌検出、潅流と分光法とを組み合わせて良性腫瘍または悪性腫瘍を特徴付ける乳癌検出、および海馬容積などの脳構造の容量分析を行なうための半自動器具および自動器具を使用することによる神経学において使用されてもよい。
本発明と共に使用できるモダリティは、例えば、静的減衰補正(AC;attenuation corrected)PET、静的非減衰補正(NAC;non-attenuation corrected)PETおよび呼吸同期式PET、静的AC SPECTまたは核医学(NM)および静的NAC SPECTまたはNM、高分解能CT、低分解能CT、スパイラルCTおよび呼吸同期式CT、高分解能磁気共鳴(MR)画像、および超音波である。本発明は、ガントリタイトルのデータセットをロードしてもよい。また、本発明は、不均等に離間されたスライスを含む画像列または重なり合うスライスを含む画像列を受け入れることができる。
また、本発明は、PET/CTスキャナにより取得された或いは別個の装置上で取得された1つの患者検査対象からの対応するレジストレーションされたCTデータセットと共に融合された静的AC PETデータセットまたは静的NAC PETデータセットをロードしてもよい。また、SPECT/CTスキャナにより取得された或いは別個の装置上で取得された1つの患者検査対象からの対応するレジストレーションされたCTデータセットと共に融合された静的AC SPECTデータセットまたは静的NAC SPECTデータセットがロードされてもよい。更に、同じモダリティタイプの2つの画像列がロードされて1つの時点内で融合表示されてもよい。例えば、本発明は、1つのCTデータセットと他のCTデータセットの両方が同じCTスキャンまたは異なる装置を介して取得された場合には、これらのデータセット同士を融合させることができてもよい。
図1は、本発明の典型的な実施形態に係る、マルチモード視覚化を使用して病気の進行または治療効果を監視するためのシステム100のブロック図である。
図1に示されるように、システム100は、特に、ネットワーク120を介して接続された幾つかの走査装置105a、b...xとコンピュータ110とオペレータコンソール115とを含む。走査装置105a、b...xは、それぞれ、MRイメージング装置、CTイメージング装置、ヘリカルCT装置、PET装置、SPECT装置、ハイブリッドPET−CT装置、ハイブリッドSPECT−CT装置、2次元(2D)または3次元(3D)X線透視イメージング装置、2D,3Dまたは4次元(4D)超音波イメージング装置またはX線装置のうちの1つであってもよい。前述した走査装置に加えて、走査装置105a、b...xのうちの1つまたは全ては、例えばPETモード、SPECTモードまたはMRモードで走査でき或いは1つのハイブリッド装置からPETスキャンおよびCTスキャンを形成できるマルチモード走査装置またはハイブリッド走査装置であってもよい。
ポータブルコンピュータまたはラップトップコンピュータ、携帯端末(PDA)などであってもよいコンピュータ110は、入力装置150および出力装置155に接続される中央処理ユニット(CPU)125およびメモリ130を含む。CPU125は、マルチモード視覚化を使用して病気の進行または治療効果を監視するための1つ又は複数の方法を含むマルチモード視覚化モジュール145を含む。
メモリ130は、ランダムアクセスメモリ(RAM)135と、読み出し専用メモリ(ROM)140とを含む。また、メモリ130としては、データベース、CD、DVD、ディスクドライブなど、或いはこれらの組み合わせを挙げることもできる。RAM135は、CPU125内でのプログラムの実行中に使用されるデータを記憶するデータメモリとして機能するとともに、作業領域として使用される。ROM140は、CPU125で実行されるプログラムを記憶するためのプログラムメモリとして機能する。入力装置150は、キーボードやマウスなどにより構成され、また、出力装置155は、液晶ディスプレイ(LCD)、陰極線管(CRT)ディスプレイまたはプリンタによって構成される。
システム100の動作は、例えばキーボードなどのコントローラ165と例えばCRTディスプレイなどのディスプレイ160とを含むオペレータコンソール115から制御される。オペレータコンソール115はコンピュータ110および走査装置105と通信し、それにより、走査装置105a、b...xにより収集される2D画像データを、コンピュータ110により3Dデータへレンダリングすることができるとともに、ディスプレイ160上で見ることができる。コンピュータ110は、コントローラ165およびディスプレイ160により行なわれる特定のタスクを実行するために、オペレータコンソール115が無いときは、例えば入力装置150および出力装置155を使用して走査装置105a、b...xにより与えられる情報を操作して表示するように構成できることは言うまでもない。
オペレータコンソール115は、2Dおよび/または3D画像を生成してディスプレイ160上に表示するために取得された画像データセット(または、その一部)のデジタル画像データを処理することができる任意の適切な画像レンダリングシステム/ツール/アプリケーションを更に含む。より具体的には、画像レンダリングシステムは、医用画像データの2D/3Dレンダリングおよび視角化を行ない且つ汎用または専用のコンピュータワークステーションにより実行するアプリケーションであってもよい。また、コンピュータ110は、2Dおよび/または3D画像を生成して表示するために取得された画像データセットのデジタル画像データを処理する画像レンダリングシステム/ツール/アプリケーションを含んでもよい。
図1に示されるように、マルチモード視覚化モジュール145は、前述したように生画像データ、2D再構成データ(例えば軸方向スライス)、または、ボリューム画像データまたは多断面再構成(MRP)などの3D再構成データまたはそのようなフォーマットの任意の統合の形態を成してもよいデジタル医用画像データを受信して処理するためにコンピュータ110によって使用されてもよい。データ処理結果は、器官または解剖学的構造のセグメンテーション、色または強度変化などのデータ処理結果にしたがって画像データの2Dおよび/または3Dレンダリングを生成するために、コンピュータ110からネットワーク120を介してオペレータコンソール115内の画像レンダリングシステムへ出力することができる。
図2は、本発明の典型的な実施形態に係るユーザインタフェース200を示している。図2に示されるように、ユーザインタフェース200は、制御領域205と、表示領域210と、カラーバーまたはブレンドバー215とを含む。制御領域205は、患者フォルダ220、制御アイコンボタン225、およびワークフローペイン230などのアイテムを含む。制御領域205は、本発明にしたがってアプリケーションを操作するために様々なツールまたはアイテムが見出される領域である。表示領域210は、2D画像および3D画像が表示される領域である。カラーバー215は表示された画像の色分布を設定するために使用される。また、カラーバー215は表示された画像のブレンド係数すなわち混合比率を調整するためのブレンディングスライダを含んでもよい。
ワークフローペイン230は、レジストレーションペイン230a、視覚化ペイン230b、最大強度投影(MIP)ペイン230c、輪郭ペイン230d、および報告ペイン230eへのリンクを含む。これらのリンクにより、ユーザは、各ペイン230a−eにより与えられる特定の機能を実行することができる。また、リンクは、各ペイン230a−eがそれらの機能を段階的に果たすように構成されている。すなわち、ワークフローペイン230は、最初に1つの時点の画像データセットをレジストレーションするためのレジストレーションペイン230aを使用し、画像を視覚化するための視覚化ペイン230bを使用し、以下同様に使用していくようにユーザを連続的に案内する。
図3は、マルチモード視覚化を使用して病気の進行または治療効果を監視するための本発明の典型的な実施形態に係る方法を示すフローチャートである。図3に示されるように、第1の時点の画像データセットは、図4の患者ブラウザ400を介してユーザにより選択される(310)。第1の時点は、以下の画像データセットの統合、すなわち、単一CT画像列、単一PET画像列、単一SPECT画像列、同じ検査対象からまたは異なる検査対象からのCT画像列とPET画像列との統合、同じ検査対象からまたは異なる検査対象からのCT画像列とSPECT画像列との統合、のうちの1つを含んでもよい。単一の時点における典型的なデータセットの統合は、以下の表1に記載されている。
Figure 2008503258
第1の時点の画像データセットおよびその後の時点の画像データセットは、治療前の検査対象、治療中の検査対象または治療後の検査対象からの画像データセットであってもよい。また、第1の時点およびその後の時点の両方に同じ画像列を1つの画像列として含ませることができる。例えば、図5に示されるサンプル患者階層においては、高分解能CT画像列とPET AC画像列とを統合して第1の時点を形成することができ、また、高分解能CT画像列とPET NAC画像列とを統合して第2の時点を形成することができる。すなわち、単一の時点が第1の時点および第2の時点に寄与することができる。
第1の時点の画像データセットを選択した後、画像データセットがロードされる(320)。画像データセットは、以下の方法で、すなわち、選択された画像データを患者ブラウザ400から表示領域210上へドラグアンドドロップし、患者ブラウザ400上の拡張ボタンをクリックし、患者ブラウザ400上の関連データをダブルクリックすることにより、ロードすることができる。例えば、ユーザは、患者ブラウザ400内で関連する選択を行なうことができるとともに、ローディング用のボタンをクリックすることができる。患者ブラウザ400におけるデータの選択レベルは、画像列、検査対象にあってもよく、または、患者レベルにあってもよい。
等間隔でないスライス或いは重なり合うスライスを含む画像列をロードすることもできる。また、マルチフレーム画像およびNM RECON TOMO(例えば、単一画像内の多くのフレームとしてのボリューム)などの異なるタイプのNM画像をロードすることができる。更に、スパイラルCTスキャンデータをロードすることができる。そのようなデータがロードされると、そのデータは、画像ヘッダ情報を使用して有効性がチェックされる。このようにして、単一の時点および複数の時点における異なる患者ヘッダ情報を含む検査対象がローディングのために選択されると、警告ダイアログがポップアップして、患者IDが異なっていることをユーザに知らせてもよく、したがって、画像列をロードするための正しい方法を知らせてもよい。また、警告ダイアログは、患者IDを変更するようにユーザに促すために使用されてもよい。データの有効性が確認された後、画像列に基づいてボリュームが構成される。ボリュームに関連する画像は、その後、図8を参照して以下で説明するように表示される。
第1の時点の画像データセットがロードされると、第2の時点の画像データセットが選択されてもよい(330)。第1の時点の画像データセットの選択と同様に、第2の時点の画像データセットは患者ブラウザ400を介して選択されてもよい。また、第2の時点は、第1の時点における前述した画像列のうちの1つであってもよい。ローディングのために第2の時点を選択した後、第2の時点がロードされる(340)。この場合も同様に、第2の時点は第1の時点をロードするための前述した技術のうちの1つを使用してロードされる。第2の時点は第1の時点と比較できるようにロードされる。したがって、第2の時点がロードされてその後に表示されると、医師は、第1の時点のデータセットおよび第2の時点のデータセットにわたって病状または治療効果を比較し或いは診断することができる。
第2の時点をロードすると、第2の時点が複数時点ローディングにとって有効なデータセットの統合であるかどうか、そして、その後、ソートされるかどうかが決定される。複数時点ローディングにとって有効なデータセットの統合のリストが以下の表2に示されている。
Figure 2008503258
表2に示されるように、例えば、SPECT ACデータセット単独またはNACデータセット付きSPECT ACデータセットを含む第1の時点が既にロードされる場合、第1の時点のSPECT NACデータセット、SPECT ACデータセット単独またはNACデータセット付きSPECT ACデータセット、およびSPECT ACデータセット単独またはNACデータセット付きSPECT ACデータセット、および、CTデータセット、のうちの任意の1つが第2の時点としてロードされてもよい。しかしながら、第2の時点がローディングにとって有効なデータセットの統合のうちの1つではない場合、ローディングにとって有効なデータセットの統合をユーザに知らせる図6の画像列ダイアログ600が表示されてもよい。
表2に更に示されるように、PETデータセットまたはSPECT ACデータセットおよびNACデータデットは別個に示されていない。これは、ユーザがPET ACデータセットを選択してロードするときにはいつでもPET ACデータセットが表示されると仮定されているからである。同様に、ユーザがPET NACデータセットを選択してロードすると、PET NACデータセットがCTデータと共にロードされて表示される。このとき、ユーザは、PET ACデータセットとPET NACデータセットとの間で切り換えることができる。同じ機能がSPECT ACデータセットおよびNACデータセットにも当てはまる。
第1の時点の画像データセットおよび第2の時点の画像データセットがロードされた後、これらのデータセットはレジストレーションされる(350)。レジストレーションは医用画像データを位置合わせするプロセスである。すなわち、レジストレーションは、異なるモダリティによって形成された或いは1つのモダリティによって異なる時刻に形成された2つの入力画像列を位置合わせするために使用される手続きである。レジストレーション中、2つのデータセットを位置合わせするために、一方のデータセットが例えば不変位置で固定され、他方のデータセットが変換され、例えば翻訳され、回転され、スケーリングされる。また、固定されたデータセットは基準ボリュームと称されてもよく、また、変換されるデータセットはモデルボリュームと称されてもよい。したがって、モデルボリュームが基準ボリュームの解剖学的構造と一致するように幾何学的な変換が行なわれる。
レジストレーションプロセスを開始するために、ユーザは、ユーザインタフェース200のワークフローペイン230において見出されるペインのうちの1つをクリックしてもよい。例えば、ユーザは、図7のレジストレーションペイン710aまたは710bをクリックしてもよい。レジストレーションペイン710aまたは710bは、本発明と共に使用するための異なるレジストレーション方法に関連する一連の制御を含む。例えば、ユーザは、レジストレーションペインにおける自動ボタン720を選択して、自動レジストレーションを開始してもよい。同様に、ユーザは、レジストレーションペイン710bにおける視覚化ボタン740を選択して視覚による位置合わせを開始してもよい。
ステップ350においては、幾つかのレジストレーション方法/アルゴリズムが使用されてもよい。それらは、例えば、自動/相互情報レジストレーション(例えば、自動レジストレーション)、ランドマークを用いたレジストレーションおよび視覚位置合わせ(例えば手動マッチング)であってもよい。
自動レジストレーションは、相互情報または正規化された相互情報に基づいて完全に自動化されたマッチングアルゴリズムである。しかしながら、自動レジストレーションを始める前に、ユーザは、自動レジストレーションの性能を向上させるために視覚による位置合わせを行なうことができる。
自動レジストレーションは、第1の時点の第1の画像データセットの第1の画像列を第1の時点の第1の画像データセットの第2の画像列にレジストレーションするステップと、第1の時点の第1の画像データセットの第1の画像列を第2の時点の第2の画像データセットの第1の画像列にレジストレーションするステップと、第2の時点の第2の画像データセットの第1の画像列を第2の時点の第2の画像データセットの第2の画像列にレジストレーションするステップとを含む。
例えば、2つのCT−PETスキャンがロードされると、CT−PETスキャンのレジストレーションが第1の時点および第2の時点の両方において順次に始まる。CT−PETレジストレーションが完了すると、第1の時点および第2の時点にわたって2つのCT検査対象を一致させるためにレジストレーションが開始される。自動レジストレーションが行なわれる間、レジストレーションの進行をアルファ混合画像(例えば融合画像)で視覚化することができる。自動レジストレーションの現在の進行を示す進行テキストが表示されてもよい。
ランドマークを用いたレジストレーションは、両方の画像列内の一致する位置における既知のマークの識別である。その識別から、アルゴリズムがレジストレーションを計算する。視覚による位置合わせは融合データセットに関して行なわれる。基準画像列は固定されたままであり、また、例えば視覚位置合わせ制御750を使用して、モデル画像列を翻訳し/回転させて、基準画像との位置合わせを行なうことができる。
第1の時点の画像データセットおよび第2の時点の画像データセットをレジストレーションした後、これらの画像データセットが表示される(360)。これらの画像データセットは、例えばユーザインタフェース200の表示領域210上に表示されてもよい。第1の時点の画像データセットおよび第2の時点の画像データセットはロードされると直ぐに表示できることは言うまでもない。また、第1の時点の画像データセットおよび第2の時点の画像データセットはレジストレーションされるときに表示することができる。更に、レジストレーションの1つまたは複数のステップは、ローディングの1つまたは複数のステップと同時に起こってもよい。第1の時点の画像データセットおよび第2の時点の画像データセットが表示されると、ユーザは、第1の時点および第2の時点を互いに比較してもよい。
図8は、ロードされたCT画像データセットおよびPET画像データセットを表示する本発明の典型的な実施形態に係るユーザインタフェース800を示している。他の方法として構成された図2のユーザインタフェース200と同様に、ユーザインタフェース800は、制御領域805と、表示領域810と、カラーバーまたはブレンドバー815とを含む。制御領域805は、患者フォルダ820と、ワークフローペイン825と、回転最大強度投影(MIP)830とを含む。
図8に示されるように、表示領域810は幾つかの領域に分けられている。これらの領域は、サジタル表示領域835、コロナル表示領域840、アキシャルまたはトランスアキシャル表示領域845、および融合表示領域850である。サジタル表示領域835は、患者の長い身体軸に対して平行なビュー画像を左から右へ表示する。コロナル表示領域840は、患者の長い身体軸に対して平行なビュー画像を前後に表示する。アキシャルまたはトランスアキシャル表示領域845は、患者の長い身体軸に対して垂直なビュー画像を表示する。融合表示領域850は融合画像を表示する。例えば、融合表示領域850は、ロードされたCT画像データセットとPET画像データセットとを一緒に融合させて表示するために使用されてもよい。
表示領域810が図8に示されるよりも多くの領域に分割されてもよいことは言うまでもない。また、表示領域835〜850は画像を任意に表示するように構成されてもよい。例えば、表示領域835〜850は、全ての画像をアキシャル画像(アキシャルビュー画像)またはサジタル画像(サジタルビュー画像)として表示するように構成されてもよく、あるいは、2つの画像がサジタル画像となり且つ2つの画像がコロナル画像(コロナルビュー画像)となり得るように構成されてもよい。
また、表示領域810は、データが任意のレイアウトでロードされるときにボリューム全体の多断面再構成(MPR)が計算されるとともにデフォルトでボリュームの中央切断部がビューに応じて表示されるように構成される。また、ロードされたデータセットの内容が患者フォルダ820に表示されてもよい。表示領域810は、表示領域810を制御領域805にわたって広げることができるようにするワイドスクリーンレイアウトの状態になっていてもよい。すなわち、ワイドスクリーンレイアウトのときには表示領域810が制御領域805を隠す。また、表示領域810は、治療前の画像と治療後の画像との間の比較を表示し、治療前の画像および治療後の画像に関連付けられたMIPを表示し、比較のために治療前の画像および治療後の画像、相関MIP、および融合VRTを表示するように構成されていてもよい。
図9は、ロードされたPETデータセットの一対の回転MIP910a,910bを示している。MIPアルゴリズムは、ロードされたボリュームの平行投影を計算し且つボリュームの最大値を視覚化することにより回転MIP910a,910bを形成するために使用される。MIP910aは回転MIPが回転されるときの回転MIPのスナップショットであり、MIP910bは回転MIPが一時停止されるときの回転MIPのスナップショットである。回転MIP910a,910bは、回転ボタン920をクリックすることにより回転することができ、ポーズボタン930をクリックすることにより一時停止することができる。また、回転MIP910a,910bは、前フレームボタン940または時計周り/反時計周り回転ボタン950などの様々な制御ボタンをクリックすることにより操作され或いは制御されてもよい。
図9に更に示されるように、各回転MIP910a,910bには基準線960が含められている。基準線960は、切断面の位置および方位を示している。ボリュームフィルタにおいて、基準線960はビュー面の方位を示している。基準線960は、表示領域810の様々な領域に表示される画像と対応付けされてもよい。この場合、表示領域805の各画像上には、基準線960の位置が他の基準線を用いて示される。これにより、例えば、医師は、表示領域810の特定の領域に示された病変の、回転MIP901aまたは910b内における位置を知ることができる。対応付けされた基準線に加えて、カーソルが複数の時点にわたって対応付けされ或いは関連付けられてもよい。カーソルは、同じ検査対象の異なるモダリティの画像スライス上または異なる検査対象の画像スライス上の同じ位置を指し示すために使用されてもよい。
図10は、マルチモード視覚化を使用して病気の進行または治療効果を監視するための本発明の典型的な実施形態に係る他の方法を示すフローチャートである。図10に示されるように、ユーザは、例えば病変の周囲に関心領域(VOI)を描く(1010)。これは、ユーザが楕円ツールまたは自由形式の等輪郭ツールを選択して病変の周囲に境界線を描くことにより行なわれる。これは、一般に、画像がアキシャルビュー画像として表示されるときに行なわれる。3×3レイアウトの表示領域1100でのVOI等輪郭描写の一例が図11に示されている。
楕円ツールまたは自由形式の等輪郭ツールを使用することに加えて、ユーザは、自由形式のVOIツールを使用して病変の周囲に境界線を手で描いてもよい。境界線が手で描かれると、このデータセットに関連するMIP上に病変毎に水平線または基準線が描かれてもよい。2×2レイアウトの表示領域1200での楕円輪郭を使用した自由形式の輪郭描写の一例が図12に示されている。
病変の周囲にVOIを描いた後、ユーザは多数のステップを行なってもよいが、例示目的のために、表示領域の残りの部分上にVOIがコピーされる(1020)。すなわち、VOIに対応する輪郭が1つの時点から他の時点へコピーされてもよい。コピーに関連付けられた制御領域の制御アイコンまたはボタンを選択することにより、VOIを次の画像スライスまたは前の画像スライスへコピーすることができる。これにより、描かれた輪郭またはVOIが、現在のスライスの次の或いは前のスライスの同じ2D点上にコピーされる。VOIの輪郭をコピーする前あるいは後にこれらの輪郭が編集されてもよい。例えば、輪郭は、病変に適切に関連付けるために動かされてもよく、あるいは、異なるモダリティ間の識別を容易にするために着色されてもよい。
VOIがコピーされると、VOIが複数の時点にわたってリンクされてもよい(1030)。これにより、変化の追跡および比較情報の生成が可能になる。1つの時点から他の時点へVOIをコピーするために、ユーザは、VOIを選択するとともに、選択されたVOIの他の時点へのコピーに関与するボタンをクリックする。例えば、ユーザは、第2の時点において1つのVOIを選択し、ボタンをクリックする。その後、選択されたVOIは、適切なボクセル座標で第1の時点へコピーされ、自動的にリンクされる。1つのVOIを1つの時点から他の時点へコピーすることに加え、全てのVOIが1つの時点から他の時点へコピーされてもよい。また、ユーザが空間的に一致しない位置においてVOIをリンクさせようとする場合には、警告メッセージが表示されてもよい。
VOIがコピーされて表示領域の残りの部分にリンクされると、VOIが定量化されてもよい(1040)。しかしながら、VOIがコピーされなかった場合でもVOIが定量化されてもよいことは言うまでもない。コピーされたVOIを定量化する際、ユーザは、病変上にマークされた任意のVOIを選択して、それに関連する特定の定量化パラメータを知ってもよい。例えば、定量化パラメータは、VOIの最小値、最大値、標準偏差、平均値、体積、および平均であってもよい。
VOIを定量化した後、定量化パラメータを医師に知らせるために報告が形成される(1050)。複数の時点にわたってVOIに関連する報告を形成すると共に、1つの時点だけがロードされるときに報告が形成されてもよいことは言うまでもない。報告は、第1の時点および第2の時点の比較に関する情報を含んでもよい。また、報告は、作成時刻、最終保存時刻、病院名、ステーション名、患者名、追跡スクリーニング日付け、第1の時点の内容、第2の時点の内容、ユーザ結果、病変の内容、特定のVOIのための基準画像へのリンク、特定のVOIを含む画像列へのリンクまたはロードされた各時点におけるデータセットへのリンクなどの情報を含んでもよい。
図2のワークフローペイン230の構成を示すために、特に、ワークフローペイン230をどのように使用してそのペインの機能を段階的に果たすことができるのかを示すために、図13〜17が含まれている。例えば、図13は、ボリュームレジストレーションが行なわれる際のユーザインタフェース1300のレジストレーションペイン1310を示している。図14は、視覚化が行なわれる際のユーザインタフェース1400の視覚化ペイン1410を示している。図15は、MIPが表示される際のユーザインタフェース1500のMIPペイン1510を示している。図16は、輪郭描写の操作が行なわれる際のユーザインタフェース1600の輪郭ペイン1610を示している。図17は、報告が形成される際のユーザインタフェース1700の報告ペイン1710を示している。
本発明の典型的な実施形態によれば、医師は、2つの異なる時点(例えば、治療前および治療後)の患者スキャンを効率的に比較することができる。異なる時刻に取得された検査対象からのPET画像/CT画像またはSPECT−CT統合画像を自動的にレジストレーションして表示することにより、本発明は、良好な情報に基づく診断、治療、追跡決定を行なう際に医師を支援する。例えば、本発明は、機能的なPET画像またはSPECT画像に融合されボリュームレンダリングされたCT画像の表示を与える。また、病変内において標準吸収値(SUV)を計算することにより、VOIを描くことができる。また、VOIを1つの検査対象から比較検査対象の適切なボクセル座標へコピーすることができる。
本発明がハードウェア、ソフトウェア、ファームウェア、専用プロセッサ、または、これらの組み合わせの様々な形態で実施されてもよいことは言うまでもない。一実施形態において、本発明は、プログラム記憶装置(例えば、磁気フロッピー(登録商標)ディスク、RAM、CD ROM、DVD、ROM、およびフラッシュメモリ)上に明白に具現化されるアプリケーションプログラムとしてのソフトウェアで実施されてもよい。アプリケーションプログラムは、任意の適当なアーキテクチャを含む機械にアップロードされ、また、当該機械によって実行されてもよい。
また、添付図面に示された構成システムコンポーネントおよび方法ステップの一部はソフトウェアで実施されてもよいため、システムコンポーネント(または、プロセスステップ)間の実際の接続は、本発明がプログラムされる形態に応じて異なってもよいことは言うまでもない。本明細書に与えられた本発明の教示内容を考慮すると、当業者は、本発明のこれらの実施および同様の実施または構造を意図することができる。
また、先の説明が例示的な実施形態を単に示しているにすぎないことは言うまでもない。読者の便宜のため、先の説明は、可能な実施形態の代表的なサンプル、本発明の原理を例示するサンプルに焦点を合わせてきた。以上の説明は、全ての可能なバリエーションを余すところなく列挙しようとするものではない。本発明の特定の部分に関して他の実施形態が与えられなくてもよく、あるいは、その更なる省略した代替案は、1つの部分において利用できてもよく、これらの他の実施形態の放棄と見なされるべきではない。本発明の思想および範囲から逸脱することなく、他の用途および実施形態を実施することができる。
したがって、発明的でない置き換えを含む先の実施形態の多くの置換および組み合わせを作ることができるため、本発明は具体的に記載された実施形態に限定されず、本発明は請求項にしたがって規定されるものである。これらの多くの省略した実施形態も請求項の文字通りの範囲内に入り、他も等価であることは言うまでもない。
本発明の典型的な実施形態に係るマルチモード視覚化システムのブロック図 本発明の典型的な実施形態に係るユーザインタフェースを示す図 本発明の典型的な実施形態に係るマルチモード視覚化方法を示すフローチャート 本発明の典型的な実施形態に係る患者ブラウザを示す図 本発明の典型的な実施形態に係る階層を示すチャート 本発明の典型的な実施形態に係る画像列リストダイアログを示す図 本発明の典型的な実施形態に係る一対のレジストレーションペインを示す図 本発明の他の典型的な実施形態に係るユーザインタフェースを示す図 本発明の典型的な実施形態に係る最大強度投影を示す図 本発明の他の典型的な実施形態に係るマルチモード視覚化方法を示すフローチャート 本発明の典型的な実施形態に係る関心領域の等輪郭描写を示す図 本発明の典型的な実施形態に係る自由形式の輪郭描写を示す図 本発明の典型的な実施形態に係るユーザインタフェースを示す図 本発明の他の典型的な実施形態に係るユーザインタフェースを示す図 本発明の更に他の典型的な実施形態に係るユーザインタフェースを示す図 本発明の典型的な実施形態に係るユーザインタフェースを示す図 本発明の他の典型的な実施形態に係るユーザインタフェースを示す図
符号の説明
100 システム
200 ユーザインタフェース
205 制御領域
210 表示領域
215 カラーバーまたはブレンドバー
220 患者フォルダ
225 制御アイコンボタン
230 ワークフローペイン

Claims (24)

  1. 第1の時点の第1の画像データセットを選択するステップと、
    第1の時点の第1の画像データセットをロードするステップと、
    第2の時点の第2の画像データセットを選択するステップと、
    第2の時点の第2の画像データセットをロードするステップと、
    第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをレジストレーションするステップと、
    第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示するステップと、
    を含むことを特徴とするマルチモード視覚化方法。
  2. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、コンピュータ断層撮影(CT)、陽電子放出断層撮影(PET)、単光子放出コンピュータ断層撮影(SPECT)、磁気共鳴(MR)、および超音波モダリティのうちの1つから取得されたデータを含むことを特徴とする請求項1に記載の方法。
  3. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、CT画像列およびMR画像列、PET画像列およびSPECT画像列、CT画像列とPET画像列との統合画像列、MR画像列とPET画像列との統合画像列、CT画像列とSPECT画像列との統合画像列、MR画像列とSPECT画像列との統合画像列、および超音波画像列、のうちの1の画像列を含むことを特徴とする請求項2に記載の方法。
  4. 第1の時点の第1の画像データセットの画像列および第2の時点の第2の画像データセットの画像列はそれぞれ、治療前の検査対象、治療中の検査対象、および治療後の検査対象のうちの1つの検査対象のデータを含むことを特徴とする請求項3に記載の方法。
  5. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットは、自動レジストレーション、ランドマークを用いたレジストレーション、および視覚によるレジストレーションのうちの1つを使用してレジストレーションされることを特徴とする請求項1に記載の方法。
  6. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをレジストレーションするステップ中に使用される自動レジストレーションは、
    第1の時点の第1の画像データセットの第1の画像列を第1の時点の第1の画像データセットの第2の画像列にレジストレーションし、
    第1の時点の第1の画像データセットの第1の画像列を第2の時点の第2の画像データセットの第1の画像列にレジストレーションし、
    第2の時点の第2の画像データセットの第1の画像列を第2の時点の第2の画像データセットの第2の画像列にレジストレーションする
    ことを特徴とする請求項5に記載の方法。
  7. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示するステップは、
    第1の時点の第1の画像データセットの第1の画像列および第2の画像列と、第2の時点の第2の画像データセットの第1の画像列および第2の画像列とを表示する
    ことを特徴とする請求項1に記載の方法。
  8. 第1の時点の第1の画像データセットの第1の画像列または第2の画像列、および、第2の時点の第2の画像データセットの第1の画像列または第2の画像列、のうちの一方の画像列に関して関心領域を描くステップと、
    第1の時点の第1の画像データセッの残りの画像列および第2の時点の第2の画像データセットの残りの画像列へ関心領域をコピーするステップと、
    第1の時点の第1の画像データセットの第1の画像列および第2の画像列の関心領域と、第2の時点の第2の画像データセットの第1の画像列および第2の画像列の関心領域とをリンクさせるステップと、
    を更に含むことを特徴とする請求項7に記載の方法。
  9. 関心領域は、病変、腫瘍、および癌領域のうちの1つであることを特徴とする請求項8に記載の方法。
  10. 第1の時点の第1の画像データセットの第1の画像列および第2の画像列と、第2の時点の第2の画像データセットの第1の画像列および第2の画像列とに関して関心領域を定量化するステップを更に含むことを特徴とする請求項8に記載の方法。
  11. 定量化は、最小偏差、最大偏差、標準偏差、平均値、体積、平均、直径、面積、ピクセル数、および質量中心のうちの1つであることを特徴とする請求項10に記載の方法。
  12. 関心領域の変化を検出するステップを更に含むことを特徴とする請求項10に記載の方法。
  13. 定量化された関心領域に関連する報告を形成するステップを更に含むことを特徴とする請求項10に記載の方法。
  14. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットのうちの一方の画像データセットの最大強度投影を計算して最大強度投影を表示するステップを更に含むことを特徴とする請求項1に記載の方法。
  15. 最大強度投影を第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットと対応付けるステップを更に含むことを特徴とする請求項14に記載の方法。
  16. 第1の時点の第1の画像データセットと第2の時点の第2の画像データセットとを比較するために第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示するための第1の表示領域と、
    患者フォルダ、ワークフローペイン、および制御部を含む制御領域を表示するための第2の表示領域とを含み、
    第1の時点の画像データセットおよび第2の時点の画像データセットはそれぞれ、コンピュータ断層撮影(CT)、陽電子放出断層撮影(PET)、単光子放出コンピュータ断層撮影(SPECT)、磁気共鳴(MR)、および超音波モダリティのうちの1つから取得されたデータを含む
    ことを特徴とするマルチモード視覚化ユーザインタフェース。
  17. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、CT画像列およびMR画像列、PET画像列およびSPECT画像列、CT画像列とPET画像列との統合画像列、MR画像列とPET画像列との統合画像列、CT画像列とSPECT画像列との統合画像列、MR画像列とSPECT画像列との統合画像列、および超音波画像列、のうちの1つの画像列を含むことを特徴とする請求項16に記載のユーザインタフェース。
  18. 第1の時点の第1の画像データセットの画像列および第2の時点の第2の画像データセットの画像列はそれぞれ、治療前の検査対象、治療中の検査対象、および治療後の検査対象のうちの1つの検査対象のデータを含むことを特徴とする請求項17に記載のユーザインタフェース。
  19. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットのそれぞれは、サジタル画像、コロナル画像、およびアキシャル画像のうちの1つの画像として表示され、第1の画像データセットと第2の画像データセットとが融合画像として表示されることを特徴とする請求項16に記載のユーザインタフェース。
  20. ワークフローペインは、レジストレーションペイン、視覚化ペイン、最大強度投影(MIP)ペイン、輪郭ペイン、および報告ペインのうちの1つへのリンクを含むことを特徴とする請求項16に記載のユーザインタフェース。
  21. プログラムを記憶するメモリ装置と、このメモリ装置と通信し前記プログラムで動作するプロセッサとを含み、
    プロセッサは、
    第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを選択し、
    第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをロードし、
    第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットをレジストレーションし、
    第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットを表示させる
    ことを特徴とするマルチモード視覚化システム。
  22. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、コンピュータ断層撮影(CT)、陽電子放出断層撮影(PET)、単光子放出コンピュータ断層撮影(SPECT)、磁気共鳴(MR)、および超音波モダリティのうちの1つから取得されたデータを含むことを特徴とする請求項21に記載のシステム。
  23. 第1の時点の第1の画像データセットおよび第2の時点の第2の画像データセットはそれぞれ、CT画像列およびMR画像列、PET画像列およびSPECT画像列、CT画像列とPET画像列との統合画像列、MR画像列とPET画像列との統合画像列、CT画像列とSPECT画像列との統合画像列、MR画像列とSPECT画像列との統合画像列、および超音波画像列、のうちの1つの画像列を含むことを特徴とする請求項22に記載のシステム。
  24. 第1の時点の第1の画像データセットの画像列および第2の時点の第2の画像データセットの画像列はそれぞれ、治療前の検査対象、治療中の検査対象、および治療後の検査対象のうちの1つの検査対象のデータを含むことを特徴とする請求項23に記載のシステム。
JP2007516710A 2004-06-18 2005-06-15 マルチモード視覚化を使用して病気の進行または治療効果を監視するシステムおよび方法 Abandoned JP2008503258A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US58113604P 2004-06-18 2004-06-18
US11/146,788 US7616799B2 (en) 2004-06-18 2005-06-07 System and method for monitoring disease progression or response to therapy using multi-modal visualization
PCT/US2005/021215 WO2006009751A2 (en) 2004-06-18 2005-06-15 System and method for monitoring disease progression or response to therapy using multi-modal visualization

Publications (1)

Publication Number Publication Date
JP2008503258A true JP2008503258A (ja) 2008-02-07

Family

ID=35432179

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007516710A Abandoned JP2008503258A (ja) 2004-06-18 2005-06-15 マルチモード視覚化を使用して病気の進行または治療効果を監視するシステムおよび方法

Country Status (6)

Country Link
US (1) US7616799B2 (ja)
EP (1) EP1766578A2 (ja)
JP (1) JP2008503258A (ja)
AU (1) AU2005265013A1 (ja)
CA (1) CA2570913A1 (ja)
WO (1) WO2006009751A2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010516301A (ja) * 2007-01-03 2010-05-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ コンピュータ支援治療モニタリング装置及び方法
JP2011516108A (ja) * 2008-03-06 2011-05-26 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ データセットを選択式及び対話式に処理する方法
JP2013192856A (ja) * 2012-03-22 2013-09-30 Nihon Visual Science Inc 表示用画像データファイル生成装置及び表示装置並びにプログラム

Families Citing this family (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8737699B2 (en) * 2004-09-02 2014-05-27 Siemens Medical Solutions Usa, Inc. Combinational computer aided diagnosis
US20060119622A1 (en) * 2004-11-23 2006-06-08 General Electric Company Method and apparatus for volume rendering display protocol
US20060264749A1 (en) * 2004-11-24 2006-11-23 Weiner Allison L Adaptable user interface for diagnostic imaging
US8834371B2 (en) * 2005-03-31 2014-09-16 Kabushiki Kaisha Toshiba Ultrasound diagnostic apparatus and ultrasound image processing program
US7840050B2 (en) * 2005-05-05 2010-11-23 Siemens Medical Solutions Usa, Inc. System and method for piecewise registration of timepoints
RU2420234C2 (ru) * 2005-07-26 2011-06-10 Конинклейке Филипс Электроникс, Н.В. Управление сериями для менеджера архива медицинских изображений, вызывающее коренные изменения
EP1910997B1 (en) * 2005-08-01 2019-11-20 Bioptigen, Inc. Methods, systems and computer program for 3d-registration of three dimensional data sets obtained by preferably optical coherence tomography based on the alignment of projection images or fundus images, respectively
US7668342B2 (en) 2005-09-09 2010-02-23 Carl Zeiss Meditec, Inc. Method of bioimage data processing for revealing more meaningful anatomic features of diseased tissues
US20070076929A1 (en) * 2005-10-05 2007-04-05 General Electric Company System and method for automatic post processing image generation
US20070127793A1 (en) * 2005-11-23 2007-06-07 Beckett Bob L Real-time interactive data analysis management tool
US7747050B2 (en) * 2005-11-23 2010-06-29 General Electric Company System and method for linking current and previous images based on anatomy
JP5543681B2 (ja) * 2006-03-15 2014-07-09 株式会社日立メディコ 超音波診断装置
US7768652B2 (en) * 2006-03-16 2010-08-03 Carl Zeiss Meditec, Inc. Methods for mapping tissue with optical coherence tomography data
US7907990B2 (en) * 2006-03-24 2011-03-15 General Electric Company Systems, methods and apparatus for oncology workflow integration
US20080021301A1 (en) * 2006-06-01 2008-01-24 Marcela Alejandra Gonzalez Methods and Apparatus for Volume Computer Assisted Reading Management and Review
BRPI0712236A2 (pt) * 2006-06-02 2012-01-10 Koninkl Philips Electronics Nv sistema de formação de imagem in-vivo, método para formação de imagem de diagnóstico, aparelho, meio de computador, estação de trabalho, sistema de computador, método para projetar um estudo, e, sistema de formação de imagem molecular
US10387612B2 (en) * 2006-06-14 2019-08-20 Koninklijke Philips N.V. Multi-modality medical image layout editor
US8280483B2 (en) 2006-06-14 2012-10-02 Koninklijke Philips Electronics N.V. Multi-modality medical image viewing
US8223143B2 (en) 2006-10-27 2012-07-17 Carl Zeiss Meditec, Inc. User interface for efficiently displaying relevant OCT imaging data
US8788012B2 (en) * 2006-11-21 2014-07-22 General Electric Company Methods and apparatus for automatically registering lesions between examinations
US20080117229A1 (en) * 2006-11-22 2008-05-22 Rainer Wegenkittl Linked Data Series Alignment System and Method
JP4709177B2 (ja) * 2007-04-12 2011-06-22 富士フイルム株式会社 三次元画像処理装置および方法並びにプログラム
WO2008154741A1 (en) * 2007-06-21 2008-12-24 Cedara Software Corp. Method and system for assessing a response to a treatment regimen
US8150125B2 (en) * 2007-10-29 2012-04-03 Siemens Medical Solutions Usa, Inc. System for visualizing regions of interest in medical images
US8099299B2 (en) * 2008-05-20 2012-01-17 General Electric Company System and method for mapping structural and functional deviations in an anatomical region
US8430816B2 (en) * 2008-05-20 2013-04-30 General Electric Company System and method for analysis of multiple diseases and severities
EP2144199B1 (en) * 2008-07-11 2018-12-26 Agfa HealthCare NV Method and apparatus for multimodal visualization of volume data sets
US8219181B2 (en) * 2008-12-16 2012-07-10 General Electric Company Medical imaging system and method containing ultrasound docking port
US8214021B2 (en) * 2008-12-16 2012-07-03 General Electric Company Medical imaging system and method containing ultrasound docking port
US7831015B2 (en) * 2009-03-31 2010-11-09 General Electric Company Combining X-ray and ultrasound imaging for enhanced mammography
WO2010115885A1 (en) 2009-04-03 2010-10-14 Oslo Universitetssykehus Hf Predictive classifier score for cancer patient outcome
US20100254584A1 (en) * 2009-04-07 2010-10-07 Siemens Corporation Automated method for assessment of tumor response to therapy with multi-parametric mri
CN102395999B (zh) * 2009-04-15 2014-08-20 皇家飞利浦电子股份有限公司 医学图像数据的量化
GB2475722B (en) * 2009-11-30 2011-11-02 Mirada Medical Measurement system for medical images
US8199875B2 (en) * 2009-12-11 2012-06-12 General Electric Company System and method of acquiring multi-energy CT imaging data
US8744159B2 (en) * 2010-03-05 2014-06-03 Bioptigen, Inc. Methods, systems and computer program products for collapsing volume data to lower dimensional representations thereof using histogram projection
GB2480864B (en) * 2010-06-04 2013-09-18 Mirada Medical Processing system for medical scan images
EP2407927B1 (en) * 2010-07-16 2013-01-30 BVBA dr. K. Coenegrachts A method and device for evaluating evolution of tumoral lesions
US20120051608A1 (en) * 2010-08-27 2012-03-01 Gopal Biligeri Avinash System and method for analyzing and visualizing local clinical features
US8929624B2 (en) 2010-11-26 2015-01-06 General Electric Company Systems and methods for comparing different medical images to analyze a structure-of-interest
US9364687B2 (en) 2011-01-21 2016-06-14 Headwater Partners Ii Llc Imaging observation timing based on radiation treatment system element delay
WO2012100270A2 (en) 2011-01-21 2012-07-26 Headwater Partners Ii Llc Tracking of tumor location for targeted radiation treatment
US9283404B2 (en) * 2011-01-21 2016-03-15 Headwater Partners Ii Llc Imaging observation timing for assisting radiation treatment
US10152951B2 (en) * 2011-02-28 2018-12-11 Varian Medical Systems International Ag Method and system for interactive control of window/level parameters of multi-image displays
US9370305B2 (en) 2011-03-16 2016-06-21 Koninklijke Philips N.V. Method and system for intelligent linking of medical data
US9226654B2 (en) 2011-04-29 2016-01-05 Carl Zeiss Meditec, Inc. Systems and methods for automated classification of abnormalities in optical coherence tomography images of the eye
US8944597B2 (en) 2012-01-19 2015-02-03 Carl Zeiss Meditec, Inc. Standardized display of optical coherence tomography imaging data
CN104303184B (zh) * 2012-03-21 2018-05-15 皇家飞利浦有限公司 整合医疗成像和活检数据的临床工作站以及使用其的方法
WO2014059241A1 (en) * 2012-10-11 2014-04-17 Carnegie Mellon University System and method for structure-function fusion for surgical interventions
US9754366B2 (en) 2012-12-27 2017-09-05 Koninklijke Philips N.V. Computer-aided identification of a tissue of interest
US11120896B2 (en) * 2012-12-28 2021-09-14 Philips Image Guided Therapy Corporation Multi-modality anonymizing system and method
US9420945B2 (en) 2013-03-14 2016-08-23 Carl Zeiss Meditec, Inc. User interface for acquisition, display and analysis of ophthalmic diagnostic data
US9418427B2 (en) * 2013-03-15 2016-08-16 Mim Software Inc. Population-guided deformable registration
US9377291B2 (en) 2013-12-05 2016-06-28 Bioptigen, Inc. Image registration, averaging, and compounding for high speed extended depth optical coherence tomography
US10127655B2 (en) 2015-07-09 2018-11-13 Samsung Medison Co., Ltd. Medical imaging apparatus and method of operating same
EP3481319A4 (en) * 2016-07-05 2020-02-12 7D Surgical Inc. SYSTEMS AND METHODS FOR CARRYING OUT AN INTRAOPERATIVE IMAGE REGISTER
EP3382423A1 (en) * 2017-03-27 2018-10-03 Koninklijke Philips N.V. Methods and systems for filtering ultrasound image clutter
CN111344801B (zh) * 2017-11-22 2023-10-27 通用电气公司 针对前列腺癌的多模态计算机辅助诊断系统和方法
KR20200104103A (ko) 2019-02-26 2020-09-03 삼성메디슨 주식회사 초음파 영상과 타 모달리티(modality) 영상을 정합하는 초음파 영상 장치 및 그 동작 방법
CA3149577A1 (en) * 2019-08-27 2021-03-04 4DMedical Limited Methods, systems, and apparatus for assessing an effect of a medical treatment on organ function
WO2023021504A1 (en) * 2021-08-18 2023-02-23 Tel Hashomer Medical Research, Infrastructure And Services Ltd. System and method for monitoring treatment through pet-ct combination imaging

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6363163B1 (en) * 1998-02-23 2002-03-26 Arch Development Corporation Method and system for the automated temporal subtraction of medical images
US6904163B1 (en) * 1999-03-19 2005-06-07 Nippon Telegraph And Telephone Corporation Tomographic image reading method, automatic alignment method, apparatus and computer readable medium
US6266453B1 (en) * 1999-07-26 2001-07-24 Computerized Medical Systems, Inc. Automated image fusion/alignment system and method
DE19946429A1 (de) * 1999-09-28 2001-04-05 Stefan Vilsmeier Kontinuierliche Erfassung und Analyse von Gewebeveränderungen
US7581191B2 (en) * 1999-11-15 2009-08-25 Xenogen Corporation Graphical user interface for 3-D in-vivo imaging
WO2001043070A2 (en) * 1999-12-10 2001-06-14 Miller Michael I Method and apparatus for cross modality image registration
US6944330B2 (en) * 2000-09-07 2005-09-13 Siemens Corporate Research, Inc. Interactive computer-aided diagnosis method and system for assisting diagnosis of lung nodules in digital volumetric medical images
US7130457B2 (en) * 2001-07-17 2006-10-31 Accuimage Diagnostics Corp. Systems and graphical user interface for analyzing body images
DE10141186A1 (de) * 2001-08-22 2003-03-20 Siemens Ag Einrichtung zum Bearbeiten von Bildern, insbesondere medizinischen Bildern
JP2005518915A (ja) 2002-03-06 2005-06-30 シーメンス コーポレイト リサーチ インコーポレイテツド ボリュームどうしの融像の視覚化
WO2003083779A2 (en) * 2002-04-03 2003-10-09 Segami S.A.R.L. Image registration process
US7935055B2 (en) * 2003-09-19 2011-05-03 Siemens Medical Solutions Usa, Inc. System and method of measuring disease severity of a patient before, during and after treatment
US20070160312A1 (en) * 2004-02-13 2007-07-12 Koninklijke Philips Electronics N.V. Apparatus and method for registering images of a structured object

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010516301A (ja) * 2007-01-03 2010-05-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ コンピュータ支援治療モニタリング装置及び方法
JP2011516108A (ja) * 2008-03-06 2011-05-26 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ データセットを選択式及び対話式に処理する方法
JP2013192856A (ja) * 2012-03-22 2013-09-30 Nihon Visual Science Inc 表示用画像データファイル生成装置及び表示装置並びにプログラム

Also Published As

Publication number Publication date
WO2006009751A3 (en) 2006-05-04
AU2005265013A1 (en) 2006-01-26
US7616799B2 (en) 2009-11-10
EP1766578A2 (en) 2007-03-28
US20060030768A1 (en) 2006-02-09
WO2006009751A2 (en) 2006-01-26
CA2570913A1 (en) 2006-01-26

Similar Documents

Publication Publication Date Title
JP4571187B2 (ja) 病気の進行または治療効果を解析するために関心領域を複数の時点にわたってリンクさせるシステムおよび方法
JP2008503258A (ja) マルチモード視覚化を使用して病気の進行または治療効果を監視するシステムおよび方法
US7840050B2 (en) System and method for piecewise registration of timepoints
JP6438395B2 (ja) 効果的な表示及び報告のための画像資料に関連する以前の注釈の自動検出及び取り出し
JP2008503259A (ja) 病気の進行または治療効果を解析するために複数の時点をロードするシステムおよび方法
AU2004266022B2 (en) Computer-aided decision support systems and methods
CN101006465B (zh) 横跨时间点链接vois以分析疾病进展或者对治疗的响应的系统和方法
US20130050239A1 (en) Interactive display of computer aided detection results in combination with quantitative prompts
US8306292B2 (en) Image display device and image display program storage medium
JP2011092681A (ja) 医用画像処理装置および方法並びにプログラム
JP2004180932A (ja) コンピュータ支援診断装置
JP6302934B2 (ja) コンピュータ支援による関心組織の特定
EP2116974A1 (en) Statistics collection for lesion segmentation
Ohno et al. Efficacy of ultrashort echo time pulmonary MRI for lung nodule detection and lung-RADS classification
US20190279408A1 (en) Medical image processing apparatus, medical image processing method, and medical image processing program
JP2019106122A (ja) 病院情報装置、病院情報システム及びプログラム
US20230326580A1 (en) Information processing apparatus, information processing method, and information processing program
JP7240664B2 (ja) 画像診断支援装置、画像診断支援方法および画像診断支援プログラム
WO2022113587A1 (ja) 画像表示装置、方法およびプログラム
Reeves et al. Computer-aided diagnostics
JP2023113519A (ja) 情報処理装置、情報処理方法及び情報処理プログラム
JP2024044922A (ja) 情報処理装置、情報処理方法及び情報処理プログラム

Legal Events

Date Code Title Description
A762 Written abandonment of application

Free format text: JAPANESE INTERMEDIATE CODE: A762

Effective date: 20090406