JP2014502758A - 画像オーバレイを用いたtnm分類 - Google Patents

画像オーバレイを用いたtnm分類 Download PDF

Info

Publication number
JP2014502758A
JP2014502758A JP2013546785A JP2013546785A JP2014502758A JP 2014502758 A JP2014502758 A JP 2014502758A JP 2013546785 A JP2013546785 A JP 2013546785A JP 2013546785 A JP2013546785 A JP 2013546785A JP 2014502758 A JP2014502758 A JP 2014502758A
Authority
JP
Japan
Prior art keywords
tumor
overlay
tnm
image
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013546785A
Other languages
English (en)
Other versions
JP5834093B2 (ja
Inventor
ウィレム オスカル セルリー,イウォ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2014502758A publication Critical patent/JP2014502758A/ja
Application granted granted Critical
Publication of JP5834093B2 publication Critical patent/JP5834093B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/20Drawing from basic elements, e.g. lines or circles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/20Drawing from basic elements, e.g. lines or circles
    • G06T11/206Drawing of charts or graphs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10104Positron emission tomography [PET]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10108Single photon emission computed tomography [SPECT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30096Tumor; Lesion

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本発明は、関心のある腫瘍を視覚化する3次元画像データに基づき該関心のある腫瘍を分類するシステム(SYS)に関し、該システムは、前記画像データから計算される腫瘍画像内に表示するためにTNM(Tumor-Node-Metastasis)オーバレイを計算するオーバレイデータ構造(OL)であって、前記TNMオーバレイは、前記関心のある腫瘍の病期を決定するTNM情報を有する、オーバレイデータ構造と、前記オーバレイデータ構造(OL)に基づき前記TNMオーバレイを計算し、前記TNMオーバレイを前記腫瘍画像上に位置付けるオーバレイユニット(U10)であって、前記TNMオーバレイのサイズは、前記計算される腫瘍画像の縮尺に基づく、オーバレイユニットと、を有する。TNMオーバレイ(OL)のサイズを腫瘍画像の縮尺に依存させることにより、位置決めされたTNMオーバレイ上の2地点間の距離の、計算された腫瘍画像内の2地点間の距離に対する比は、実質的に一定であり、つまり実質的に画像データの視覚化と独立である。したがって、腫瘍画像に重ね合わされたTNMオーバレイ(OL)は、臨床医学者に、TNM分類に従って関心のある腫瘍を迅速に視覚的に評価させ及びランク付けさせる。

Description

本発明は、画像オーバレイを用いた腫瘍の分類に関連する。
AJCC(American Joint Committee on Cancer)及びUICC(International Union Against Cancer)は、癌を特徴付けるためにTNM(Tumor-Node-Metastasis)分類による病期を選択している。TNM Classification of Malignant Tumours 7th edition, ISBN:978-1-4443-3241-4, December 2009、以下、文献1とする。TNMシステムは、病気の予後に影響を与えると考えられる悪性腫瘍の形態的特性(例えば、原発腫瘍の大きさ、又は腫瘍と他の構造との距離)に基づき癌の程度を分類する方法を定める。腫瘍の病期を定めるために、臨床医学者、例えば医師は、腫瘍の最大寸法を測定し(図1参照)、次にTNM病期ルールを適用して腫瘍を分類する必要がある(表1参照)。これは、間違いを起こしやすく、時間がかかり、不便である。
悪性腫瘍を分類する作業を簡略化できるシステムを有することは有利である。
したがって、一態様では、本発明は、関心のある腫瘍を視覚化する3次元画像データに基づき該関心のある腫瘍を分類するシステムであって、
−前記3次元画像データから計算される腫瘍画像内に表示するためにTNMオーバレイを計算するオーバレイデータ構造であって、前記TNMオーバレイは、前記関心のある腫瘍の病期を決定するTNM情報を有する、オーバレイデータ構造と、
−前記オーバレイデータ構造に基づき前記TNMオーバレイを計算し、前記TNMオーバレイを前記腫瘍画像上に位置付けるオーバレイユニットであって、前記TNMオーバレイのサイズは、前記計算される腫瘍画像の縮尺に基づく、オーバレイユニットと、
を有するシステムを提供する。
TNMオーバレイのサイズを腫瘍画像の縮尺に依存させることにより、位置決めされたTNMオーバレイ上の2地点間の距離の、計算された腫瘍画像内の2地点間の距離に対する比は、実質的に一定であり、つまり実質的に画像データの視覚化と独立である。したがって、腫瘍画像に重ね合わされたTNMオーバレイは、臨床医学者に、TNM分類に従って関心のある腫瘍、例えば悪性腫瘍を迅速に視覚的に評価させ及びランク付けさせる。
システムの一実施形態では、前記オーバレイデータ構造は、3次元幾何学構造を表し、前記オーバレイユニットは、前記画像データ体積内で前記3次元幾何学構造を位置決めするよう構成され、前記3次元幾何学構造の線形サイズは、全ての次元において前記3次元画像データの縮尺に基づき、前記TNMオーバレイは、前記3次元幾何学構造及び前記腫瘍画像に基づき計算される。前記3次元幾何学構造の線形サイズを全ての次元において前記3次元画像データの縮尺に依存させることにより、位置決めされた3次元幾何学構造上の2地点間の距離の、前記3次元画像データ体積内の2地点間の距離に対する比は、実質的に一定であり、つまり実質的に画像データの視覚化と独立である。
システムの一実施形態では、前記オーバレイユニットは、前記3次元幾何学構造を表すデータを前記画像データ体積内にマッピングし、マッピングしたデータを前記画像データとマージし、それにより統合画像オーバレイデータを生成するよう構成されても良い。また、前記オーバレイユニットは、前記統合画像オーバレイデータから画像を計算し、したがって前記関心のある腫瘍及び前記TNMオーバレイを視覚化するよう更に構成されても良い。
当業者は、3次元画像データから再現され2次元画像に示される2つのオブジェクトの縮尺又はオブジェクトの詳細が異なり得ることを理解するだろう。例えば、これは、各オブジェクト又はオブジェクトの詳細が観測面から異なる距離にあり、例えば画像が線形透視図を用いて再現される場合である。条件「TNMオーバレイのサイズは計算された腫瘍画像の縮尺に基づく」は、この状況で解釈されるべきである。
留意すべきことに、3次元画像データは、画像データ体積内に、つまり画像データに対して位置決めされ、腫瘍画像の任意の変化はTNMオーバレイの対応する変化を生じ得る。腫瘍画像の変化は、画像データの変換、例えば平行移動又は回転により、又は腫瘍画像を計算する別の方法(つまり、別の再現アルゴリズム)を選択することにより生じても良い。当業者は、腫瘍画像を計算する多くの方法を知っている。
システムの一実施形態では、前記3次元幾何学構造の位置は、ユーザ入力及び/又は前記3次元画像データのセグメント化に基づき計算される。例えば、セグメント化アルゴリズムは、セグメント化された関心のある腫瘍の塊の中心を計算するために用いられても良い。計算された塊の中心は、画像データ体積内の3次元幾何学構造を位置決めするために用いられても良い。任意的に、セグメント化アルゴリズムは、セグメント化された関心のある腫瘍の慣性テンソルの主軸を計算するために更に用いられても良い。また、計算した主軸は、3次元幾何学構造を画像データ体積内で方向付けるために用いられ得る。代替で、ユーザは、画像データ内に含まれる画像スタックを通じてナビゲートし、例えば画像に対する3次元幾何学構造の目印の位置を定めることにより、3次元幾何学構造の位置を選択及び入力する。
システムの一実施形態では、前記オーバレイユニットは、ユーザ入力に基づき、前記3次元画像データに対して前記3次元幾何学構造を再位置決めするよう更に構成される。再位置決めは、3次元画像データに対する3次元幾何学構造の平行移動及び/又は回転を含む。3次元画像データに対して3次元幾何学構造を再位置決めした後、前記オーバレイユニットは、前記3次元幾何学構造の前記3次元画像データに対する新しい位置に従って、前記TNMオーバレイの位置を更新するよう構成される。
システムの一実施形態では、前記3次元幾何学構造は、複数の同心球又は複数の同心立方体を有する。システムは、球又は立方体の中心を有する薄いデータスライスから腫瘍画像を計算するよう構成される。次に、TNMオーバレイは、それぞれ複数の同心円又は複数の同心長方形を有しても良い。
一実施形態では、システムは、腫瘍画像上の関心のある腫瘍を示す腫瘍オーバレイを計算するセグメント化ユニットを更に有する。例えば、腫瘍境界は、EP1614069B1、名称「Volume Measurements in 3d Datasets」に記載された方法を用いて計算され得る。また、計算した腫瘍境界に基づく腫瘍の外形は、腫瘍画像の解釈を助けるために腫瘍画像内に示されても良い。
システムの一実施形態では、前記オーバレイユニットは、前記3次元画像データの特性に基づき、前記TNMオーバレイを適応するよう更に構成される。例えば、線の太さは、計算した腫瘍画像内の信号対雑音比により決定されても良い。または、TNMオーバレイを表示する各ピクセルの濃淡値は、TNMオーバレイピクセルを囲む円に実質的に含まれる腫瘍画像のピクセルの平均濃淡値により決定されても良い。
システムの一実施形態では、前記オーバレイユニットは、前記関心のある腫瘍の種類に基づき、前記TNMオーバレイを適応するよう更に構成される。異なる腫瘍は異なるTNMルールを必要としても良い。例えば、肺腫瘍及び胸部腫瘍により必要とされるTNMルールは異なる。これらのTNMルールは、TNMオーバレイに反映されても良い。場合によっては、ルールは、TNMオーバレイを計算するための3次元幾何学構造内に反映され得る。例えば、異なる3次元幾何学構造は、異なる形状又はサイズを有しても良い。
一実施形態では、システムは、ユーザ入力に又は3次元画像データのセグメント化に基づき、腫瘍画像内の関心のある腫瘍の病期を示す腫瘍ユニットを更に有する。例えば、関心のある腫瘍の病期を定める外形は、赤色にされても良く、又は点滅されても良い。
システムの一実施形態では、腫瘍ユニットは、ユーザ入力及び/又は3次元画像データのセグメント化に基づき、腫瘍画像内の関心のある腫瘍のサイズを伝達するよう更に構成される。サイズと同様に、ユーザ入力及び/又は3次元画像データの分析から引き出された関心のある腫瘍に関連する任意の他の関連情報も、関心のある腫瘍及びTNMオーバレイのビューを覆い隠さないように配置されるテキストボックス内に表示されても良い。
更なる態様では、本発明のシステムを有する画像取得装置が提供される。
更なる態様では、本発明のシステムを有するワークステーションが提供される。
更なる態様では、本発明は、関心のある腫瘍を視覚化する3次元画像データに基づき該関心のある腫瘍を分類する方法であって、前記方法は、前記3次元画像データから計算される腫瘍画像内に表示するためにTNMオーバレイを計算するオーバレイデータ構造を用いるよう構成され、前記TNMオーバレイは、前記関心のある腫瘍の病期を決定するTNM情報を有し、前記方法は、前記オーバレイデータ構造に基づき前記TNMオーバレイを計算し、前記TNMオーバレイを前記腫瘍画像上に位置付けるオーバレイステップであって、前記TNMオーバレイのサイズは、前記計算される腫瘍画像の縮尺に基づく、オーバレイステップ、を有する方法を提供する。
方法の一実施形態では、前記オーバレイデータ構造は、3次元幾何学構造を表し、前記オーバレイステップは、前記画像データ体積内で前記3次元幾何学構造を位置決めするよう構成され、前記3次元幾何学構造の線形サイズは、全ての次元において前記3次元画像データの線形縮尺に基づき、前記TNMオーバレイは、前記3次元幾何学構造及び前記腫瘍画像に基づき計算される。
更なる態様では、本発明は、コンピュータ装置によりロードされるコンピュータプログラムであって、3次元画像データから計算される腫瘍画像内に表示するためのTNM(Tumor-Node-Metastasis)オーバレイを用いて、関心のある腫瘍を分類する命令を有し、前記TNMオーバレイは、前記関心のある腫瘍の病期を決定するTNM情報を有し、前記コンピュータ装置は、処理ユニットとメモリとを有し、前記コンピュータプログラムは、ロードされた後に、前記処理ユニットに本発明の方法のステップを実行する能力を提供する、コンピュータプログラムを提供する。
上述の本発明の実施形態、実施及び/又は態様のうちの2以上が有用と考えられる如何なる方法で結合されてもよいことが当業者に理解されるだろう。
システム、ワークステーション、画像取得装置、方法、及び/又はコンピュータプログラムの変更及び変形は、該システム又は該方法の記載される変更及び変形に対応し、本願明細書に基づき当業者により実施することができる。
当業者は、請求される発明における画像データセットが、X線撮像CT(Computed Tomography)、MRI(Magnetic Resonance Imaging)、US(Ultrasound)、PET(Positron Emission Tomography)、SPECT(Single Photon Emission Computed Tomography)及びNM(Nuclear Medicine)のような、しかしこれらに限定されない種々の取得モダリティにより取得される2次元(2D)、3次元(3D)又は4次元(4D)画像データセットであっても良いことを理解するだろう。
本発明は、独立請求項により定められる。有利な実施形態は、従属請求項で定められる。
本発明の上述の及び/又は他の態様は、以下に記載する実装及び実施形態から、並びに添付の図面を参照して、明らかになるだろう。
胸部の腫瘍の測定を示す。 システムの例示的な実施形態のブロック図を示す。 関心のある腫瘍を視覚化する胸部MRI画像、及び重ね合わされた例示的なTNMオーバレイを示す。 図3に示した画像の拡大した部分を示す。 方法の例示的なフローチャートを図示する。 画像取得装置の例示的な実施形態を図示する。 ワークステーションの例示的な実施形態を図示する。
全図を通じて、同様の部分を示すために同じ参照符号が用いられる。
図2は、関心のある腫瘍を視覚化する3次元画像データに基づき、該関心のある腫瘍を分類するシステムSYSの例示的な実施形態のブロック図を示す。システムは、以下を有する。
−画像データから計算された腫瘍画像内に表示するためのTNMオーバレイを計算するオーバレイデータ構造OL。TNMオーバレイは、関心のある腫瘍の病期を決定するTNM情報を有する。
−オーバレイデータ構造OLに基づきTNMオーバレイを計算し、TNMオーバレイを腫瘍画像上に位置付けるオーバレイユニットU10。TNMオーバレイのサイズは、計算された腫瘍画像の縮尺に基づく。
システムSYSの例示的な実施形態は、更に以下を有する。
−腫瘍画像上に関心のある腫瘍を示す腫瘍オーバレイを計算するセグメント化ユニットU20。
−腫瘍ユニット(U30)。腫瘍ユニットは、
−ユーザ入力に又は3次元画像データのセグメント化に基づき、腫瘍画像内の関心のある腫瘍の病期を示し、及び/又は、
−ユーザ入力に及び/又は3次元画像データのセグメント化に基づき、腫瘍画像内の関心のある腫瘍のサイズを伝達する。
−システムSYSの動作を制御する制御ユニットU60。
−ユーザとシステムSYSとの間の通信のためのユーザインタフェースU65。
−データを格納するメモリユニットU70。
システムSYSの一実施形態では、入力データのための3個の入力コネクタU81、U82、U83がある。第1の入力コネクタU81は、ハードディスク、磁気テープ、フラッシュメモリ、光ディスクのような、しかしこれらに限定されないデータ記憶手段から入ってくるデータを受信するよう構成される。第2の入力コネクタU82は、マウス又はタッチスクリーンのような、しかしこれらに限定されないユーザ入力装置から入ってくるデータを受信するよう構成される。第3の入力コネクタU83は、キーボードのような、ユーザ入力装置から入ってくるデータを受信するよう構成される。入力コネクタU81、U82、U83は、入力制御ユニットU80に結合される。
システムSYSの一実施形態では、出力データのための2個の出力コネクタU91、U92がある。第1の出力コネクタU91は、ハードディスク、磁気テープ、フラッシュメモリ、光ディスクのようなデータ記憶手段へデータを出力するよう構成される。第2の出力コネクタU92は、ディスプレイ装置にデータを出力するよう構成される。出力コネクタU91、U92は、出力制御ユニットU90を介してそれぞれのデータを受信する。
当業者は、入力装置を入力コネクタU81、U82、U83に、及び出力装置をシステムSYSの出力コネクタU91、U92に結合する多くの方法があることを理解するだろう。これらの方法は、有線及び無線接続、LAN(Local Area Network)及びWAN(Wide Area Network)、インターネット、デジタル電話網のようなデジタルネットワーク、及びアナログ電話網を含むが、これらに限定されない。
一実施形態では、システムSYSは、メモリユニットU70を有する。システムSYSは、如何なる入力コネクタU81、U82、U83を介して外部装置から入力データを受信し、受信した入力データをメモリユニットU70に格納するよう構成される。入力データをメモリユニットU70に読み込むことは、システムSYSのユニットによる関連データ部分への迅速なアクセスを可能にする。入力データは、3D画像データを有する。入力データは、例えば、TNMオーバレイ又は3D幾何学構造、及び画像データ体積(volume)内に位置する腫瘍のバイナリマスクのような腫瘍セグメント化結果を位置付けるユーザ入力を更に有しても良い。メモリユニットU70は、CPUのレジスタファイル、キャッシュメモリ、RAM(Random Access Memory)チップ、ROM(Read Only Memory)チップ、及び/又はハードディスクドライブ及びハードディスクのような、しかしこれらに限定されない装置により実装されても良い。メモリユニットU70は、出力データを格納するよう更に構成されても良い。出力データは、重ね合わされたTNMオーバレイを有する腫瘍画像を有する。メモリユニットU70は、メモリバスU75を介して、オーバレイユニットU10、セグメント化ユニットU20、第1の腫瘍ユニットU30、制御ユニットU60、及びユーザインタフェースU65を有するシステムSYSのユニットからデータを受信し及び/又はそれらへデータを配信するよう構成されても良い。メモリユニットU70は、如何なる出力コネクタU91、U92を介して、出力データを外部装置に利用可能にするよう更に構成される。システムSYSのユニットからのデータをメモリユニットU70に格納することは、有利なことに、システムSYSの性能、並びにシステムSYSのユニットから外部装置への出力データの転送レートも向上させ得る。
一実施形態では、システムSYSは、システムSYSを制御する制御ユニットU60を有する。制御ユニットU60は、システムSYSのユニットから制御データを受信し及び制御データをシステムSYSのユニットへ供給するよう構成されても良い。例えば、3D幾何学構造位置情報を受信した後、ユーザインタフェースU65は、制御データ「3D幾何学構造位置情報が利用可能である」を制御ユニットU60に提供するよう構成されても良い。また、制御ユニットU60は、制御データ「3D幾何学構造の位置を計算しなさい」をオーバレイユニットU10に供給するよう構成されても良い。代替で、制御機能は、システムSYSの他のユニットに実装されても良い。
システムSYSの一実施形態では、システムSYSは、ユーザとシステムSYSとの間の通信を可能にするユーザインタフェースU65を有する。ユーザインタフェースU65は、3D画像データを有するファイルの名称を有するユーザ入力を受信するよう構成されても良い。また、該ユーザ入力は、3D幾何学構造を位置決めする。任意的に、ユーザインタフェースは、例えばユーザの知識に基づき3D幾何学構造又はTNMオーバレイを選択又は変更するような、システムSYSの動作モードを選択するユーザ入力を受信しても良い。ユーザインタフェースは、重ね合わされたTNMオーバレイと共に腫瘍画像を表示するよう更に構成されても良い。当業者は、より多くの機能がシステムSYSのユーザインタフェースU65に有利に実装されても良いことを理解するだろう。
本発明は、胸部腫瘍、胸部癌病期ルール(文献1)及びMRI−3D画像データを参照して記載される。当業者は、本発明を他の癌種類、観測種類、画像化モダリティ及び他の癌病期システムに適用するために、どのように本発明を変更するかが分かるだろう。請求の範囲は、記載される実施形態により制限されると考えられるべきではない。
文献1による胸部癌の病期のためのTNMルールを表1に纏める。
[表1]胸部癌の病期のためのTNMルールの一部
Figure 2014502758
図1の胸部MRI画像は、左胸部に存在する腫瘍を示す。示した画像は、画像スタックから得た画像である。スタックの各画像は、軸方向の画像データスライスから計算される。腫瘍が実質的に球形でない限り、腫瘍の最大寸法を測定することは容易ではない。次に、臨床医学者は、従来知られているように、腫瘍が最大寸法を示すところで、画像のスタックから1又は複数の画像を選択し、線を用いて1又は複数の画像内の腫瘍を測定できる(図1の線を参照)。しかしながら、腫瘍の1又は複数の画像が腫瘍の最大寸法を視覚化するという保証はない。例えば、腫瘍の最大寸法は、非軸方向の平面内で見付かるかも知れない。腫瘍の最大寸法を示す画像の発見は、それぞれ平面に垂直なベクトルにより定められる異なる平面方向に対応する多くの画像スタックを検査すること、腫瘍が最大寸法を示す画像スタックから1又は複数の画像を発見すること、及び1又は複数の画像内の腫瘍を測定することを必要とし得る。この処理は、時間の掛かる作業であり、人為的誤りを生じ易い。
一態様では、本発明は、臨床医学者が腫瘍の病期を決定し及び視覚化するのを助けるシステムSYSを提供する。システムSYSのオーバレイユニットU10は、画像データ体積内の3D幾何学構造を位置決めするよう構成される。ここで、3D幾何学構造の線形サイズは、全ての次元において3D画像データの線形縮尺に基づく。多次元(例えば、2D、3D)画像データの縮尺は、標準的に、画像データ体積内に表されるオブジェクトの2つの特徴間の距離の、該オブジェクトの2つの特徴の間の実際の距離に対する比により定められる。3D画像データの縮尺を用いて、3D幾何学構造のサイズを腫瘍の実際のサイズに関連付けることにより、3D幾何学構造及び腫瘍は、互いに対して1:1の縮尺になる。したがって、TNMオーバレイは、腫瘍の実際のサイズを示す。
一実施形態では、3D幾何学構造は、複数の同心球を有する。システムのセグメント化ユニットU20は、腫瘍をセグメント化するよう構成される。腫瘍のセグメント化に基づき、オーバレイユニットU10は、3D幾何学構造を位置決めするための、腫瘍塊の中心を計算するよう構成される。腫瘍塊の中心を計算するために、実際の腫瘍塊の分布は、腫瘍画像強度分布により置き換えられる。
図3は、図1の胸部MRI画像、関心のある腫瘍CRの視覚化、及び胸部MRI画像に重ね合わされた例示的な重ね合わせTNMオーバレイを示す。TNMオーバレイは、複数の同心円を有する。TNMオーバレイOLの中心は、腫瘍CRの塊の中心に対応する。腫瘍画像は、腫瘍CRの塊の中心を有する軸方向の画像データスライスから計算される。TNMオーバレイOLの同心円は、軸方向の画像データスライスにより3D画像データ体積内に位置する3D幾何学構造の同心球の断面に対応する。
図4は、図1及び3の拡大した胸部MRI画像を示す。つまり、図4の拡大画像の縮尺の方が高い。TNMオーバレイの同心円は、表1に示したTNM病期クラスに従ってラベル付けされる。図3に示す画像に基づき、臨床医学者は、腫瘍の病期がT2であることを直ちに理解できる。したがって、彼/彼女の仕事の流れは大幅に簡単になる。さらに、臨床医学者が頻繁に更新されるTNMルールに馴染みがない場合でも、彼女/彼はオーバレイにより支援され訓練される。したがって、仕事の流れの簡単化に加えて、本発明のシステムは、TNMシステムの知識を維持し普及するのに有用である。
図4から更に分かることは、TNMオーバレイが、3D画像データから計算された画像ピクセル濃淡値という特性に基づき適応されることである。TNMオーバレイの円を表示するピクセルは、腫瘍画像の周囲のピクセルと対比される。腫瘍画像の周囲のピクセルが暗い(低い強度、低い濃淡値)とき、TNMオーバレイのピクセルは明るい(高い強度、高い濃淡値)。逆も同様である。腫瘍画像の周囲のピクセルが明るい(高い強度、高い濃淡値)とき、TNMオーバレイのピクセルは暗い(低い強度、低い濃淡値)。これは、TNMオーバレイの視認性を向上させる。
一実施形態では、システムSYSは、臨床医学者に追加情報を提供する腫瘍ユニットU30を有する。追加情報は、3D画像データから、場合によっては画像分析アルゴリズムの結果(例えば、画像セグメント化の結果)から引き出される。腫瘍体積、形状特性、平均濃淡値、等は、TNMオーバレイの隣に表示されても良い。任意的に、腫瘍を取り囲む最小球により定められる円は、特殊なスタイル(例えば、色分け、又は線幅)を用いて示されても良い。任意的に、TNMオーバレイOLの他の円は、フェードアウトするか又は除去されても良い。また、システムのユーザインタフェースU65は、臨床医学者により入力されるフリーテキストを受信するよう構成できる。また、腫瘍ユニットU30は、TNMオーバレイの隣に表示するためにフリーテキストを含めるよう構成されても良い。
当業者は、本発明のシステムが医師の仕事の多くの局面で医師を支援する有用なツールであり得ることを理解するだろう。さらに、システムの実施形態はシステムの医療用途を用いて説明されたが、システムの非医療用途も考えられる。
当業者は、システムSYSの他の実施形態も可能であることを更に理解するだろう。特に、システムのユニットを見直し、それらの機能を再分配することが可能である。記載した実施形態は医用画像に適用されるが、本システムの医療用途に関係ない他の用途も可能である。
システムSYSのユニットは、プロセッサを用いて実装されても良い。通常、それらの機能は、ソフトウェアプログラムの制御下で実行される。実行中、ソフトウェアプログラムは、通常、RAMのようなメモリにロードされ、そこから実行される。プログラムは、ROM、ハードディスク又は磁気及び/又は光記憶装置のようなバックグランドメモリからロードされても良く、又はインターネットのようなネットワークを介してロードされても良い。任意で、特定用途向け集積回路が、記載した機能を提供しても良い。
図5は、悪性腫瘍を視覚化する3次元画像データに基づき悪性腫瘍を分類する方法Mの例示的なフローチャートを示す。方法は、3次元画像データから計算される腫瘍画像内に表示するためにTNM(Tumor-Node-Metastasis)オーバレイを計算するオーバレイデータ構造(OL)を用いるよう構成される。TNMオーバレイは、関心のある腫瘍の病期を決定するTNM情報を有する。方法は、オーバレイデータ構造(OL)に基づきTNMオーバレイを計算し、TNMオーバレイを腫瘍画像上に位置付けるオーバレイステップ(S10)を有する。TNMオーバレイのサイズは、計算された腫瘍画像の縮尺に基づく。任意的に、方法は、関心のある腫瘍を腫瘍画像上に示すために腫瘍オーバレイを計算するセグメント化ステップS20、及び/又はTNMオーバレイの隣に表示するために腫瘍に関連する追加情報を得る腫瘍ステップS30を更に有しても良い。オーバレイステップS10、セグメント化ステップS20、及び腫瘍ステップS30は、セグメント化ステップS20が腫瘍セグメント化を含み、セグメント化の結果がオーバレイステップS10又は腫瘍ステップS30により使用されない限り、同時に又は任意の順序で実行されても良い。前者の場合には、方法Mはセグメント化ステップから開始しなければならない。方法Mに含まれる全てのステップを実行した後に、方法の実行は終了する。任意で、方法Mの2以上のステップが1つのステップに結合されても良い。任意で、方法Mの1つのステップが複数のステップに分割されても良い。
図6は、本発明のシステムSYSを用いる画像取得装置IAAの例示的な実施形態を示す。画像取得装置IAAは、内部接続を介してシステムSYSと接続される画像取得ユニットIAA10、入力コネクタIAA01、及び出力コネクタIAA02を有する。この構成は、有利なことに、画像取得装置IAAの能力を向上させ、画像取得装置IAAにシステムSYSの有利な機能を提供する。
図7は、ワークステーションWSの例示的な実施形態を図示する。ワークステーションはシステムバスWS01を有する。プロセッサWS10、メモリWS20、ディスク入力/出力(I/O)アダプタWS30、及びユーザインタフェースWS40は、システムバスWS01に動作可能に結合される。ディスク記憶装置WS31は、任意でディスクI/OアダプタWS30に結合される。キーボードWS41、マウスWS42及びディスプレイWS43は、任意で、ユーザインタフェースWS40に動作可能に結合される。本発明のシステムSYSは、コンピュータプログラムとして実装され、ディスク記憶装置WS31に格納される。ワークステーションWS00は、プログラムをロードし、メモリWS20にデータを入力し、プロセッサWS10でプログラムを実行するよう構成される。ユーザは、キーボードWS41及び/又はマウスWS42を用いて、ワークステーションWS00に情報を入力できる。ワークステーションは、ディスプレイ装置WS43及び/又はディスクWS31に情報を出力するよう構成される。当業者は、ワークステーションWSの多数の他の実施形態が従来知られていること、本実施形態が本発明を説明する目的を果たし、本発明をこの特定の実施形態に限定するとして解釈されてはならないことを理解するだろう。
留意すべきことに、上述の実施形態は、本発明を限定するのではなく、当業者は添付の請求の範囲から逸脱することなく代替の実施形態を考案できる。請求項中、括弧内に記載された如何なる参照符号も、請求項を制限すると見なされるべきではない。用語「有する(comprising)」は、請求項及び説明中に列挙された以外の要素又はステップの存在を排除するものではない。要素の前にある単数を表す語(「a」、「an」)は、このような要素の複数の存在を排除しない。本発明は、複数の別個の要素を有するハードウェアにより又はプログラムされたコンピュータにより、実施することができる。複数のユニットを列挙しているシステムの請求項では、これらの複数のユニットは、1つの同一のハードウェア又はソフトウェアレコードにより実装することができる。第1、第2、第3等の語の使用は、如何なる順序も示さない。これらの語は、名称として解釈されるべきである。

Claims (15)

  1. 関心のある腫瘍を視覚化する3次元画像データに基づき該関心のある腫瘍を分類するシステムであって、
    −前記画像データから計算される腫瘍画像内に表示するためにTNM(Tumor-Node-Metastasis)オーバレイを計算するオーバレイデータ構造であって、前記TNMオーバレイは、前記関心のある腫瘍の病期を決定するTNM情報を有する、オーバレイデータ構造と、
    −前記オーバレイデータ構造に基づき前記TNMオーバレイを計算し、前記TNMオーバレイを前記腫瘍画像上に位置付けるオーバレイユニットであって、前記TNMオーバレイのサイズは、前記計算される腫瘍画像の縮尺に基づく、オーバレイユニットと、
    を有するシステム。
  2. 前記オーバレイデータ構造は、3次元幾何学構造を表し、前記オーバレイユニットは、前記画像データ体積内で前記3次元幾何学構造を位置決めするよう構成され、前記3次元幾何学構造の線形サイズは、全ての次元において前記3次元画像データの線形縮尺に基づき、前記TNMオーバレイは、前記3次元幾何学構造及び前記腫瘍画像に基づき計算される、請求項1に記載のシステム。
  3. 前記3次元幾何学構造の位置は、ユーザ入力及び/又は前記3次元画像データのセグメント化に基づき計算される、請求項2に記載のシステム。
  4. 前記オーバレイユニットは、ユーザ入力に基づき、前記3次元幾何学構造を前記3次元画像データに対して再位置決めし、前記3次元幾何学構造の前記3次元画像データに対する新しい位置に従って、前記TNMオーバレイの位置を更新するよう更に構成される、請求項2に記載のシステム。
  5. 前記3次元幾何学構造は、複数の同心球又は複数の同心立方体を有する、請求項2に記載のシステム。
  6. 前記腫瘍画像上に前記関心のある腫瘍を示す腫瘍オーバレイを計算するセグメント化ユニット、を更に有する請求項1に記載のシステム。
  7. 前記オーバレイユニットは、前記3次元画像データの特性に基づき、前記TNMオーバレイを適応するよう更に構成される、請求項1に記載のシステム。
  8. 前記オーバレイユニットは、前記関心のある腫瘍の種類に基づき、前記TNMオーバレイを適応するよう更に構成される、請求項1に記載のシステム。
  9. 腫瘍ユニットを更に有し、前記腫瘍ユニットは、
    −ユーザ入力又は前記3次元画像データのセグメント化に基づき、前記腫瘍画像内の前記関心のある腫瘍の病期を示し、及び/又は
    −ユーザ入力及び/又は前記3次元画像データのセグメント化に基づき、前記腫瘍画像内の前記関心のある腫瘍のサイズを伝達する、
    請求項1に記載のシステム。
  10. ビューを選択する手段、を更に有する請求項2に記載のシステム。
  11. 請求項1乃至10のいずれか一項に記載のシステムを有するワークステーション。
  12. 請求項1乃至11のいずれか一項に記載のシステムを有する画像取得装置。
  13. 関心のある腫瘍を視覚化する3次元画像データに基づき該関心のある腫瘍を分類する方法であって、前記方法は、前記3次元画像データから計算される腫瘍画像内に表示するためにTNM(Tumor-Node-Metastasis)オーバレイを計算するオーバレイデータ構造を用いるよう構成され、前記TNMオーバレイは、前記関心のある腫瘍の病期を決定するTNM情報を有し、前記方法は、前記オーバレイデータ構造に基づき前記TNMオーバレイを計算し、前記TNMオーバレイを前記腫瘍画像上に位置付けるオーバレイステップであって、前記TNMオーバレイのサイズは、前記計算される腫瘍画像の縮尺に基づく、オーバレイステップ、を有する方法。
  14. 前記オーバレイデータ構造は、3次元幾何学構造を表し、前記オーバレイステップは、前記画像データ体積内で前記3次元幾何学構造を位置決めするよう構成され、前記3次元幾何学構造の線形サイズは、全ての次元において前記3次元画像データの線形縮尺に基づき、前記TNMオーバレイは、前記3次元幾何学構造及び前記腫瘍画像に基づき計算される、請求項13に記載の方法。
  15. コンピュータ装置によりロードされるコンピュータプログラムであって、3次元画像データから計算される腫瘍画像内に表示するためのTNM(Tumor-Node-Metastasis)オーバレイを用いて、関心のある腫瘍を分類する命令を有し、前記TNMオーバレイは、前記関心のある腫瘍の病期を決定するTNM情報を有し、前記コンピュータ装置は、処理ユニットとメモリとを有し、前記コンピュータプログラムは、ロードされた後に、前記処理ユニットに請求項13又は14に記載の方法のステップを実行する能力を提供する、コンピュータプログラム。
JP2013546785A 2010-12-29 2011-12-14 画像オーバレイを用いたtnm分類 Active JP5834093B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP10197267 2010-12-29
EP10197267.7 2010-12-29
PCT/IB2011/055653 WO2012090106A1 (en) 2010-12-29 2011-12-14 Tnm classification using image overlays

Publications (2)

Publication Number Publication Date
JP2014502758A true JP2014502758A (ja) 2014-02-03
JP5834093B2 JP5834093B2 (ja) 2015-12-16

Family

ID=45470612

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013546785A Active JP5834093B2 (ja) 2010-12-29 2011-12-14 画像オーバレイを用いたtnm分類

Country Status (7)

Country Link
US (1) US9142017B2 (ja)
EP (1) EP2659457B1 (ja)
JP (1) JP5834093B2 (ja)
CN (1) CN103415873B (ja)
BR (1) BR112013016409A2 (ja)
RU (1) RU2606000C2 (ja)
WO (1) WO2012090106A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2020036109A1 (ja) * 2018-08-17 2021-08-26 富士フイルム株式会社 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105684040B (zh) * 2013-10-23 2020-04-03 皇家飞利浦有限公司 支持肿瘤响应测量的方法
KR102333479B1 (ko) * 2015-03-31 2021-12-03 한국전자통신연구원 유방 병변 진단을 위한 영상 판독 보조 방법 및 장치
CN107123110A (zh) * 2017-04-13 2017-09-01 青岛海信医疗设备股份有限公司 胸壁线检测方法及装置
WO2020125806A1 (en) 2018-12-17 2020-06-25 Shanghai United Imaging Intelligence Co., Ltd. Systems and methods for image segmentation
CN109754394B (zh) * 2018-12-28 2021-02-23 上海联影智能医疗科技有限公司 三维医学图像处理装置及方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07236634A (ja) * 1994-02-28 1995-09-12 Toshiba Medical Eng Co Ltd 診断支援装置
JPH10339615A (ja) * 1997-06-09 1998-12-22 Hoya Corp パターン形状計測方法及びパターン形状計測装置
JP2000210279A (ja) * 1999-01-26 2000-08-02 Canon Inc X線画像撮影装置、x線画像撮影方法及び記憶媒体
JP2000237185A (ja) * 1999-02-17 2000-09-05 Toshiba Iyo System Engineering Kk 医用画像診断支援装置および医用画像診断支援方法
JP2002526190A (ja) * 1998-09-18 2002-08-20 アーチ・デベロップメント・コーポレーション 磁気共鳴像において腫瘍の範囲を推定する方法およびシステム
JP2004260778A (ja) * 2003-02-28 2004-09-16 Koichiro Nishio デジタルカメラ、制御方法及びプログラム
JP2005118107A (ja) * 2003-10-14 2005-05-12 Pentax Corp 画像表示システム
JP2008541794A (ja) * 2005-05-03 2008-11-27 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 仮想障害の定量化
JP2009148499A (ja) * 2007-12-21 2009-07-09 Panasonic Corp 超音波診断装置
JP2009165615A (ja) * 2008-01-16 2009-07-30 Fujifilm Corp 腫瘍領域サイズ測定方法および装置ならびにプログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004088589A1 (en) 2003-04-04 2004-10-14 Philips Intellectual Property & Standards Gmbh Volume measurements in 3d datasets
DE602004025726D1 (de) * 2003-11-14 2010-04-08 Genvec Inc Pharmazeutische verbindung zur behandlung von lokal fortgeschrittenem primär inoperablen pankreaskarzinom (lapc).
US7466872B2 (en) * 2005-06-20 2008-12-16 Drvision Technologies Llc Object based boundary refinement method
US8812240B2 (en) 2008-03-13 2014-08-19 Siemens Medical Solutions Usa, Inc. Dose distribution modeling by region from functional imaging
CN102301393B (zh) * 2009-01-29 2014-07-09 皇家飞利浦电子股份有限公司 将生物结构中的时变参数可视化
US8551425B2 (en) * 2009-05-20 2013-10-08 California Institute Of Technology Method for cancer detection, diagnosis and prognosis
CN101859441B (zh) * 2010-05-25 2011-12-21 中国人民解放军第四军医大学 基于影像的无创监测肿瘤浸润周围组织程度的计算机辅助分析方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07236634A (ja) * 1994-02-28 1995-09-12 Toshiba Medical Eng Co Ltd 診断支援装置
JPH10339615A (ja) * 1997-06-09 1998-12-22 Hoya Corp パターン形状計測方法及びパターン形状計測装置
JP2002526190A (ja) * 1998-09-18 2002-08-20 アーチ・デベロップメント・コーポレーション 磁気共鳴像において腫瘍の範囲を推定する方法およびシステム
JP2000210279A (ja) * 1999-01-26 2000-08-02 Canon Inc X線画像撮影装置、x線画像撮影方法及び記憶媒体
JP2000237185A (ja) * 1999-02-17 2000-09-05 Toshiba Iyo System Engineering Kk 医用画像診断支援装置および医用画像診断支援方法
JP2004260778A (ja) * 2003-02-28 2004-09-16 Koichiro Nishio デジタルカメラ、制御方法及びプログラム
JP2005118107A (ja) * 2003-10-14 2005-05-12 Pentax Corp 画像表示システム
JP2008541794A (ja) * 2005-05-03 2008-11-27 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 仮想障害の定量化
JP2009148499A (ja) * 2007-12-21 2009-07-09 Panasonic Corp 超音波診断装置
JP2009165615A (ja) * 2008-01-16 2009-07-30 Fujifilm Corp 腫瘍領域サイズ測定方法および装置ならびにプログラム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2020036109A1 (ja) * 2018-08-17 2021-08-26 富士フイルム株式会社 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法
JP7337073B2 (ja) 2018-08-17 2023-09-01 富士フイルム株式会社 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法
US12029384B2 (en) 2018-08-17 2024-07-09 Fujifilm Corporation Medical image processing apparatus, endoscope system, and method for operating medical image processing apparatus

Also Published As

Publication number Publication date
EP2659457A1 (en) 2013-11-06
RU2606000C2 (ru) 2017-01-10
BR112013016409A2 (pt) 2016-10-04
WO2012090106A1 (en) 2012-07-05
CN103415873B (zh) 2018-02-06
RU2013135416A (ru) 2015-02-10
CN103415873A (zh) 2013-11-27
US9142017B2 (en) 2015-09-22
US20130279777A1 (en) 2013-10-24
JP5834093B2 (ja) 2015-12-16
EP2659457B1 (en) 2015-05-06

Similar Documents

Publication Publication Date Title
US9014441B2 (en) Caliper for measuring objects in an image
JP5651600B2 (ja) 再パラメータ化されたブルズアイ表示
US8077948B2 (en) Method for editing 3D image segmentation maps
JP5834093B2 (ja) 画像オーバレイを用いたtnm分類
US7860331B2 (en) Purpose-driven enhancement filtering of anatomical data
US9965838B2 (en) Caliper for measuring objects in an image
US8805034B2 (en) Selection of datasets from 3D renderings for viewing
US8150120B2 (en) Method for determining a bounding surface for segmentation of an anatomical object of interest
US7684602B2 (en) Method and system for local visualization for tubular structures
EP2601637B1 (en) System and method for multi-modality segmentation of internal tissue with live feedback
EP2356626B1 (en) Analyzing an at least three-dimensional medical image
EP2656316B1 (en) Visualization of flow patterns
EP2619729A1 (en) Quantification of a characteristic of a lumen of a tubular structure
JP5122650B2 (ja) 経路近傍レンダリング
JP2017189394A (ja) 情報処理装置および情報処理システム
WO2006055031A2 (en) Method and system for local visualization for tubular structures
US20230342994A1 (en) Storage medium, image identification method, image identification device
CN118365652A (zh) 使用投影视图的3d交互式注释

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141212

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151006

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151030

R150 Certificate of patent or registration of utility model

Ref document number: 5834093

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250