JP2020535924A - 診断撮像における画像特徴のアノテーション - Google Patents

診断撮像における画像特徴のアノテーション Download PDF

Info

Publication number
JP2020535924A
JP2020535924A JP2020519416A JP2020519416A JP2020535924A JP 2020535924 A JP2020535924 A JP 2020535924A JP 2020519416 A JP2020519416 A JP 2020519416A JP 2020519416 A JP2020519416 A JP 2020519416A JP 2020535924 A JP2020535924 A JP 2020535924A
Authority
JP
Japan
Prior art keywords
image
volumetric
feature
detected
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020519416A
Other languages
English (en)
Other versions
JP7216722B2 (ja
JP2020535924A5 (ja
Inventor
リラン ゴシェン
リラン ゴシェン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2020535924A publication Critical patent/JP2020535924A/ja
Publication of JP2020535924A5 publication Critical patent/JP2020535924A5/ja
Priority to JP2022176372A priority Critical patent/JP2023011833A/ja
Application granted granted Critical
Publication of JP7216722B2 publication Critical patent/JP7216722B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/008Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/08Volume rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/04Indexing scheme for image data processing or generation, in general involving 3D image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Abstract

本発明は画像処理装置10に関し、画像処理装置10は、撮像された物体の複数の位置合わせされたボリューメトリック画像を含むボリューメトリック画像データを受け取るためのデータ入力11と、複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示すノイズモデルを生成するためのノイズモデラー12と、ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するための特徴検出器13と、複数の検出された画像特徴のサブセットの特徴位置を示す複数の参照を生成するためのマーカ生成器14であって、前記サブセットは、分類及び/又は視認性基準に基づいて、複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される検出された画像特徴に対応し、分類及び/又は視認性基準は上記の又は各ノイズモデルを考慮に入れる、マーカ生成器14と、を備える。

Description

本発明は、診断画像のデジタル画像処理の分野に関する。より具体的には、本発明は、複数の位置合わせされたボリューメトリック画像、例えば、物体の複数のスペクトルコンピュータ断層撮影画像などの、1回の撮像獲得又は単一の撮像プロトコルで取得された物体の複数の対応するボリューメトリック画像、における画像処理及び画像特徴検出と、診断画像のアノテーションとに関する。
診断放射線医学は、撮像検査におけるすべての異常の完全な検出と、その正確な診断とを目的とする。しかし、放射線医学検査における遡及的な誤り率はかなり高いことがある。概して、異常のあるX線撮影調査のおよそ30%が未検出のままであり、日常の診療で放射線科医によってなされる放射線医学解釈のおよそ4%が誤りを含んでいる傾向がある。したがって、放射線科医に対するすべての医療過誤主張の大部分は、診断の誤りに関連するものである。医療報酬が減るのに伴い、放射線科医は、生産性を高めるために追加的な責務を引き受けることによって埋め合わせを試みることがある。増大した作業負荷、高まる品質期待、認識バイアス、及び不良のシステム要因はすべて、放射線医学における診断の誤りと、所見が見落とされる確率の増大とに寄与する。その結果、診断読み取り環境及びツールを改善することに対する増大した需要が存在する。
利用可能な撮像モダリティの範囲と、撮像技術及びプロトコルの高まりつつある高度化は、並行して評価すべき、有用であり得る大量の画像を放射線科医にもたらす傾向があり、それらの画像は、一般に、位置合わせされた複数のボリューメトリック画像の形態であり、例えば、それらの画像の対応するボクセルは、撮像された物体の中の同じロケーションに関係しているが、なおもボクセルロケーションについての補足的情報を提供することができる。そのような画像は、当技術分野で知られるように位置合わせ技術を適用することによって位置合わせされるか、又は、関与する撮像技術及び/若しくはプロトコルの性質そのものによって自動的に位置合わせされる。例えば、画像は、並行して及び/又は同時に獲得され、そのため、画像中の各ボクセルは、ほぼ同じ時間点における撮像された物体中のほぼ同じ位置に関係する。位置合わせされた画像を本質的に提供することが可能なそのような撮像モダリティの例は、スペクトルコンピュータ断層撮影(スペクトルCT)である。異なる視点を使用して、そのような複数の位置合わせされた、又は並行して獲得された画像は、各ボクセルロケーションがそれに関連付けられたベクトル値の、すなわち非スカラーのボクセル値を有している画像と等価に見なすことができる。複数の位置合わせされた画像及びボクセル値の画像は、実践において、異なる形でデジタル記憶メモリに記憶される場合もそうでない場合もあるが、本記載のコンテキストでは、複数の位置合わせされたボリューメトリック画像と、ボリューメトリックボクセル値の画像とは、等価と見なされる。
スペクトルCTは、従来のCTの能力を拡張する撮像モダリティである。例えば、スペクトルCTの特定の構成である二重エネルギー(DE)CTでは、例えば、画像ボクセル、2つの減衰値が、2つの光子エネルギーで同時に獲得され、そのため、物質の質量減衰特性に対する光電及びコンプトンの寄与を決定することができる。これは、これらの光電及びコンプトンの寄与により、各ボクセルの中に存在する1つ又は複数の物質を特定することを可能にする。二重エネルギーCT獲得を、デュアルソース撮像、高速ピーク管電圧(kVp)切り替え、及び/又は二層検出器構成を使用した撮像などの様々な手段及び方法で行うことが、当技術分野で知られている。
また、スペクトルCTは、診断撮像エネルギー範囲の平均値に近いkエッジエネルギーを有する、ヨウ素のような物質の中で特によく機能することも当技術分野で知られている。2つの基底関数の任意の2つの線形独立和は減衰係数空間全体に及ぶため、どのような物質も、例えば水とヨウ素などの、いわゆる主成分材料である2つの他の物質の線形結合によって表すことができる。主成分材料画像を操作して、単色画像、物質打ち消し画像、実効原子番号画像及び/又は電子密度画像などの、新しい表現及び/又は視覚化をもたらすことができる。よって、スペクトルCTによって得ることができる追加的なスペクトル情報は、被スキャン物体及びその物質組成に関して測定できる、分析に利用可能な量的情報を補強することができる。
米国特許出願第2010/303358号は、構造の画像データを自動分析するための方法を開示している。3次元ボクセル配列の形態の画像をセグメント化してボクセルサブセットを決定し、ボクセルサブセットからボクセルについての特徴を抽出して特徴マップを生成し、その特徴マップに基づいてスカラー差分マップが生成される。差分マップを利用して分類が行われ、分類に基づいて画像データ中の構造的異常が特定される。
本発明の実施形態の目的は、ユーザ、例えば放射線科医が、複数の位置合わせされたボリューメトリック画像、例えば、位置合わせアルゴリズムの適用によって互いに位置合わせされた、並びに/又は、関与する撮像技術及び/若しくはプロトコルの性質によって自然に位置合わせされた、ボリューメトリック画像を評価することを可能にする、好適で効率的な手段及び方法を提供することである。
上記の目的は、本発明に係る方法及び装置によって達成される。
本発明の実施形態の利点は、参照画像、例えば従来のCT画像には所見が見られないか、ほとんど見ることができないのに対し、別の画像、例えば対応するスペクトルCT画像の中では所見がより容易に見られる状況で、ユーザが警告されることである。
本発明の実施形態の利点は、医療診断、例えば放射線医学及び/又は核医学において使用するための効果的及び/又は効率的な読み取りツールが提供されることである。
本発明の実施形態の利点は、診断画像又は画像セットの従来の読み取りと比べて、所見が見落とされる可能性を低減できることである。
本発明の実施形態の利点は、これらの結果として、ユーザ、例えば放射線科医にとって読み取り時間及び労力が有利に少なくなり得ることである。例えば、読み取り時間及び労力は、診断画像セットの従来の読み取りと比べて低減される。
本発明の実施形態の利点は、時間、労力、及び/又は所見を見逃す確率に関する前記利点が、かなり多くのスペクトル結果がユーザ、例えば放射線科医にとって利用可能になり得るスペクトルCTに特に該当し得ることである。例えば、典型的なシナリオでは、9個又はそれ以上のスペクトル結果、例えばスペクトル画像の組が、一般に利用可能である。これらの追加的な結果を読み取ることは、読み取り時間及び労力を著しく増大させ得る。
第1の態様において、本発明は、ボクセルに編成されたボリューメトリック画像データを受け取るためのデータ入力を備える画像処理装置に関する。ボリューメトリック画像データは、撮像された物体の複数の位置合わせされたボリューメトリック画像を備える。装置は、複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示す少なくとも1つのノイズモデルを生成する、例えば、複数の位置合わせされたボリューメトリック画像の各々にノイズモデルを生成するためのノイズモデラーを備える。装置は、ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するための特徴検出器を備える。装置はまた、複数の検出された画像特徴のサブセットの特徴位置、又は位置及びそれに対応するスケール、を示す複数の参照を生成するためのマーカ生成器を備える。このサブセットは、分類及び/又は数値視認性基準、例えば数値分類及び/又は数値視認性基準に基づいて、複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される、検出された画像特徴に対応する。分類及び/又は視認性基準は、上記の又は各ノイズモデルを考慮に入れる。
本発明の実施形態に係る装置において、データ入力は、単一のスペクトルコンピュータ断層撮影獲得シーケンスから取得及び/又は導出された複数の位置合わせされたボリューメトリック画像の形態で、ボリューメトリック画像データを受け取るために適合される。
本発明の実施形態に係る装置において、参照ボリューメトリック画像は、スペクトルコンピュータ断層撮影獲得シーケンスによって取得された、又はそれから導出された、従来のコンピュータ断層撮影画像を表す。
本発明の実施形態に係る装置において、特徴検出器は、各検出された画像特徴のロケーション及びスケールを特定するために適合され、マーカ生成器は、各検出された画像特徴の特定されたロケーション及び特定されたスケールを考慮に入れて、各検出された特徴のための複数の視認性基準を決定するために適合される。
本発明の実施形態に係る装置において、マーカ生成器は、前記視認性基準のうち予め決められた数が満たされる場合に、検出された特徴を、参照ボリューメトリック画像上で判別するのが難しいと分類するために適合される。
本発明の実施形態に係る装置において、マーカ生成器は、各画像特徴のコントラスト対ノイズ比を、少なくとも画像特徴が検出された画像内で推定するため、及び/又は、参照画像内で各画像特徴のコントラスト対ノイズ比を推定するために適合される。
本発明の実施形態に係る装置において、マーカ生成器は、各画像特徴について、画像特徴が検出された画像における画像特徴のロケーションの周囲の領域内のボクセル値の標準偏差を計算するために適合される。
本発明の実施形態に係る装置において、マーカ生成器は、各画像特徴について、参照画像と、少なくとも画像特徴が検出された画像とのそれぞれにおける画像特徴のロケーションの周囲の領域間で、正規化された相互相関及び/又は相互情報量を計算するために適合される。
本発明の実施形態に係る装置は、少なくとも特徴が検出された画像内で、検出された特徴に対応する構造のセグメント化を行うためのセグメント化ユニットを備える。
本発明の実施形態に係る装置において、特徴検出器は、複数のボリューメトリック画像の各々、又はそのサブセットの各々について、スケール正規化されたガウスのラプラシアンを計算するために適合される。
本発明の実施形態に係る装置において、ノイズモデラーは、モンテカルロ推定方法、分析方法、及び/又は直接抽出技術を使用してノイズモデルを推定するために適合される。
第2の態様において、本発明は、本発明の第1の態様の実施形態に係る画像処理装置を備えたコンピュータ断層撮影ワークステーションにも関する。
第3の態様において、本発明は、本発明の第1の態様の実施形態に係る画像処理装置を備えたスペクトルコンピュータ断層撮影システムにも関する。
第4の態様において、本発明は、参照ボリューメトリック画像上で判別するのが難しいと分類される画像特徴を示す複数の参照を生成する方法にも関する。方法は、ボクセルに編成されたボリューメトリック画像データを受け取るステップであって、前記ボリューメトリック画像データは、撮像された物体の複数の位置合わせされたボリューメトリック画像を含む、ステップを有する。方法は、複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示すノイズモデルを生成するステップを有する。方法は、ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するステップを有する。方法は、複数の検出された画像特徴のサブセットの特徴位置を示す複数の参照を生成するステップを有し、このサブセットは、(例えば数値)分類及び/又は(例えば数値)視認性基準に基づいて、複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される検出された画像特徴に対応する。分類及び/又は視認性基準は、上記の又は各ノイズモデルを考慮に入れる。
第5の態様において、本発明は、コンピューティングシステムのプロセッサによって実行されると、コンピューティングシステムに本発明の第4の態様の実施形態に係る方法を行わせる1つ又は複数のコンピュータ実行可能命令が符号化された、コンピュータ可読記憶媒体にも関する。
本発明の特定の及び好ましい態様が、添付の独立請求項及び従属請求項に述べられる。従属請求項にある特徴が、独立請求項にある特徴及び他の従属請求項の特徴と、適宜、請求項に明示的に述べられる通りのみならず、組み合わせられてよい。
本発明のこれらの及び他の態様は、本明細書の以後に記載される実施形態から明らかになり、またそれを参照して解説される。
本発明の実施形態に係る装置の概略図である。 本発明の実施形態に係る、コンピュータ断層撮影(CT)画像及び前記コンピュータ断層撮影画像から生成されたノイズ画像を示す図である。 従来のCT画像を示す図である。 本発明の実施形態に係る、複数の参照がその上に示された、40keVにおける対応する単一エネルギーのスペクトル画像を示す図である。 従来のCT画像を示す図である。 本発明の実施形態に係る、複数の参照がその上に示された、40keVにおける対応する単一エネルギーのスペクトル画像を示す図である。 従来のCT画像を示す図である。 本発明の実施形態に係る、40keVにおける対応する単一エネルギーのスペクトル画像を示す図である。 本発明の実施形態に係るコンピュータ断層撮影システムを示す図である。 本発明の実施形態に係る例示的方法を示す図である。
図面は概略的なものに過ぎず、非制限的なものである。図面において、要素の一部の大きさは、説明のために強調され、実際の縮尺で描かれないことがある。
特許請求の範囲内に参照符号がある場合、範囲を制限するものとは解釈すべきでない。
異なる図面において、同じ参照符号は同じ又は同様の要素を参照する。
本発明は、特定の実施形態に関して、特定の図面を参照しながら説明されるが、本発明はそれに制限されず、特許請求の範囲によってのみ制限される。記載される図面は概略的なものに過ぎず、非制限的なものである。図面において、要素の一部の大きさは、説明のために強調され、実際の縮尺で描かれないことがある。寸法及び相対的寸法は、本発明を実施するための実際の縮小には対応していない。
さらに、説明及び特許請求の範囲における第1、第2等の用語は、同様の要素同士を区別するために使用され、必ずしも、時間的、空間的、順位付け、又は他の方式での順序を説明するためではない。そのように使用される用語は、該当する状況下では交換可能であり、本明細書に記載される本発明の実施形態は、本明細書に記載又は例示される順序以外の順序で動作可能であることが理解されるべきである。
さらに、説明及び特許請求の範囲における、上方、下方等の用語は、説明のために使用され、必ずしも相対位置を説明するために使用されるものではない。そのように使用される用語は、該当する状況下では交換可能であり、本明細書に記載される本発明の実施形態は、本明細書に記載又は例示される方向付け以外の方向付けで動作可能であることが理解されるべきである。
特許請求の範囲において使用される用語「〜を備える」は、その後に列挙される手段に制約されると解釈すべきではなく、他の要素又はステップを排除しないことに留意すべきである。それは、よって、述べられる特徴、整数、ステップ、又は構成要素の参照される通りの存在を指定するが、1つ又は複数の他の特徴、整数、ステップ、又は構成要素、又はそれらの群の存在又は追加を除外するものではないと解釈すべきである。よって、「手段A及びBを備える装置」という表現の範囲は、構成要素A及びBのみからなる装置に制限されるべきではない。本発明に関しては、装置の唯一の関連する構成要素がA及びBであることを意味する。
本出願を通じた「1つの実施形態」又は「一実施形態」への参照は、その実施形態との関係で記載される特定の特徴、構造、又は特性が本発明の少なくとも1つの実施形態に含まれることを意味する。よって、本出願を通じた様々な箇所における「1つの実施形態において」又は「一実施形態において」という語句の出現は、必ずしもすべてが同じ実施形態を指すとは限らない。さらに、本開示から当業者に明らかになるように、特定の特徴、構造、又は特性が1つ又は複数の実施形態において任意の適切な方式で組み合わせられてよい。
同様に、本発明の例示的実施形態の説明において、本開示を効率化し、様々な発明態様の1つ又は複数の理解を助けるために、本発明の様々な特徴が単一の実施形態、図、又はその説明において共にグループ化されることがあることを認識すべきである。しかし、この開示方法は、特許請求される本発明が、各請求項に明示的に記載されるよりも多くの特徴を必要とするという意図を反映していると解釈されるべきでない。そうではなく、下記の特許請求の範囲が反映しているように、発明態様は、単一の先行する開示実施形態のすべての特徴よりも少ない特徴に存在する。よって、詳細な説明の後に続く特許請求の範囲は、この詳細な説明に明確に組み込まれ、各請求項は、本発明の別々の実施形態としてそれ自体で成立する。
さらに、本明細書に記載される一部の実施形態は、いくつかの特徴を含むものの他の実施形態に含まれる他の特徴を含まないが、異なる実施形態の特徴の組み合わせは、当業者には理解されるように、本発明の範囲内にあることが意図され、異なる実施形態を形成する。例えば、下記の特許請求の範囲において、特許請求される実施形態は任意の組み合わせで使用され得る。
本明細書において提供される説明では、多数の具体的な詳細が述べられる。しかし、本発明の実施形態はそれらの具体的な詳細なしで実施され得ることが理解される。他の事例では、よく知られる方法、構造、及び技術は、本説明の理解を分かりにくくしないように詳細に示されていない。
第1の態様において、本発明は、ボクセルに編成されたボリューメトリック画像データを受け取るためのデータ入力を備える画像処理装置に関し、ボリューメトリック画像データは、撮像された物体の複数の位置合わせされたボリューメトリック画像を備える。装置は、複数の位置合わせされたボリューメトリック画像におけるノイズの空間分布を示すノイズモデルを生成するためのノイズモデラーと、ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するための特徴検出器とを備える。装置はまた、複数の検出された画像特徴のサブセットの特徴位置を示す複数の参照を生成するためのマーカ生成器を備え、サブセットは、(例えば数値)分類又は(例えば数値)視認性基準に基づいて、複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される、検出された画像特徴に対応する。分類及び/又は基準は、ノイズモデルを考慮に入れる。
本発明の実施形態において「位置合わせされたボリューメトリック画像」が言及される場合、対応するボクセルロケーションが、撮像された物体内の共通の位置に関する補足的情報を提供する画像が言及される。位置合わせされたボリューメトリック画像は、画像位置合わせアルゴリズムの適用によって取得されるか、及び/又は、撮像された各ボクセルロケーションについての非スカラーデータを同時に若しくは並行して取得する撮像技術によって本質的に取得される。
図1を参照すると、本発明の実施形態に係る画像処理装置10が概略的に示される。画像処理装置は、本明細書の下記に記載される機能を提供するようにプログラムされたコンピュータなどのコンピューティング装置を備える。コンピューティング装置は、意図される機能を提供するために構成された構成可能ハードウェア装置、例えばフィールドプログラマブルゲートアレイを備えるか、又は意図される機能を提供するように特別に設計された特定用途向け回路を備える。コンピューティング装置は、設計されたハードウェア、構成されたハードウェア及び/又は汎用ハードウェア上で実行されるソフトウェアの任意の組み合わせを備える。
よって、下記に記載されるような本発明の実施形態に係る画像処理装置10の構成要素は、必ずしもそのような装置の物理的に別個のエンティティ、例えば物理的に分離可能な構成要素、に対応するとは限らず、汎用コンピュータで実行されるコンピュータコード内に実施されたソフトウェア構築物を指すこともある。
装置は、ボクセルに編成されたボリューメトリック画像データを受け取るためのデータ入力11を備える。詳細には、データ入力は、スペクトルCTスキャナや、スペクトルCTスキャナによって提供されたCT画像を再構成するための再構成器などの外部ソースからデータを受け取るための、コンピュータネットワークインターフェース、ワイヤレス送信インターフェース、又はデジタルデータバスインターフェースなどのデジタル通信回路を備える。データ入力は、共有ハードウェアプラットフォーム上に実施される別のソフトウェア構成要素から、例えば、スペクトルCT画像データを再構成するソフトウェア構成要素など、同じコンピュータ上で実行される別のソフトウェア構成要素から、データを受け取るための仮想インターフェースを備える。そのような仮想インターフェースは、例えば、アプリケーションプログラミングインターフェース、共有メモリリソース、又はデータキャリア上にファイルシステム規格を使用して記憶されたファイルを備える。データ入力は、光ディスクリーダ、ユニバーサルシリアルバス(USB)データ記憶媒体にアクセスするためのUSB接続、磁気ディスクリーダ又は携帯型フラッシュドライブリーダなどの、データキャリアにアクセスするためのインターフェースを備える。データ入力は、上記で挙げられた手段及び/又はデジタルボリューメトリック画像データを受け取るのに適した当技術分野で知られる他の装置の任意の組み合わせを備える。
ボリューメトリック画像データは、ボクセルに編成されており、例えば、被スキャン物体、例えばスキャンされた対象者内の対応するボクセルロケーションに関係づけられた複数のデータ値を備える。ボリューメトリック画像データは、よって、ボクセルに編成された再構成された画像データを備え、例えば、3次元座標系に対する被スキャン物体内の異なる位置を表す。ボリューメトリック画像データは、そのようなボクセルに編成された再構成された画像データから導出される、例えば計算される、ボリューメトリック画像データも備える。
ボリューメトリック画像データは、例えば対象者の身体の一部などの撮像された物体の複数の位置合わせされたボリューメトリック画像を備える。詳細には、ボリューメトリック画像データは、診断ボリューメトリック画像、例えば、放射線医学及び/又は核医学における医療分析で取得されたボリューメトリック画像を備える。
データ入力11は、単一のスペクトルコンピュータ断層撮影獲得シーケンスから取得及び/又は導出された複数の位置合わせされたボリューメトリック画像の形態でボリューメトリック画像データを受け取るために適合される。言い換えると、複数の位置合わせされたボリューメトリック画像は、複数の3DスペクトルCT画像、例えば、単一のスペクトルCT検査から取得された再構成された3DスペクトルCT画像である。3DスペクトルCT画像は、従来のCT画像、例えば、従来の非スペクトルCTスキャンを表すスペクトルデータから取得される画像を備える。3DスペクトルCT画像は、単色画像、ヨウ素マップなどの物質画像、仮想の非コントラスト画像、実効原子番号画像、物質打ち消し画像、電子密度画像及び/又はスペクトルCTスキャンから導出可能な他の同様の画像を備える。例えば、複数の画像は、例えば、高速kVp切り替えスキャンを行うために適合された、及び/又は二層検出器構成を有する、デュアルソース構成を有するCTスキャナにより、当技術分野で知られる二重エネルギースキャン手法によって取得されるか又はそれから導出される。
各ボクセルは、当該ボクセルに対応する位置における被スキャン物体の減衰特性を示す、例えば放射線濃度、例えば相対放射線濃度を示す、関連付けられた値、例えば、ハウンスフィールド単位で表された値などのグレースケール値を有する。ボリューメトリック画像データは、例えばボクセルロケーションごとに、同じボクセルロケーションに関連付けられた少なくとも2つの異なるグレースケール値を備える。少なくとも2つの異なるグレースケール値の各々は、よって、例えば、貫通する電離放射線の異なる品質について、対応するボクセルロケーションにおける異なる減衰特性を示す。貫通する電離放射線の異なる品質は、平均及び/又はピーク光子エネルギーにおいて十分に異なっており、そのため、異なる減衰特性は、対象者体内の異なる組織及び/又は組織特性を示す、判別可能に異なった光電効果及びコンプトン効果の寄与を受ける。しかし、異なるグレースケール値は、画像データを獲得するために対象者が曝露された貫通する電離放射線の品質に直接関係する減衰特性に対応する必要はない、又はそれに制限される必要はない。例えば、(例えば各ボクセルについての)異なるグレースケール値の少なくとも1つは、直接観察されたのではなく、直接獲得された又は再構成された画像を組み合わせる、及び/又は操作することによって推論された、抽象化された物質特性を表す。例えばボクセルごとの異なるスカラー値は、一部の実施形態では、物体のスキャンで使用される電離放射線及び/又は検出器特性の物理的エネルギースペクトルに対応するのとは対照的に、任意の主成分分解に対応する。例えば、そのようなスカラー値は、80kVp及び/又は120kVp成分画像、水−物質、骨−物質、及び/又はヨウ素画像及び/又は単色仮想画像を形成する。
実施形態において、複数の位置合わせされたボリューメトリック画像は、ボリューメトリック磁気共鳴画像、ボリューメトリックコンピュータ断層撮影画像、ボリューメトリック核医学画像、ボリューメトリック超音波検査画像、及び/又は他のボリューメトリック診断画像、例えば医療画像を備える。複数の位置合わせされたボリューメトリック画像は、マルチモダリティ画像、又は単一の撮像モダリティによって取得された異なるボリューメトリック画像を備える。
装置10は、複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示すノイズモデル、例えばデータセットノイズパターンn、例えばノイズ推定マップ又は画像、を生成するためのノイズモデラー12を備える。図2を参照すると、ボリューメトリックCT画像21の例示的スライス及びそれに対応するノイズ推定マップ22のスライスが示される。ノイズモデラー12は、当技術分野で知られるように、モンテカルロ推定方法、分析方法、及び/又は直接抽出技術を使用してノイズモデルを推定するために適合される。例えば、ノイズモデラー12は、Wunderlich及びNoo、「Image Covariance and Lesion Detectability in Direct Fan−Beam X−Ray Computed Tomography」、 Phys.Med.Biol.53(2008)、2472−2493に開示される、及び/又は米国特許出願公開第2017/0039685号に開示される、及び/又は米国特許第8,938,110号に開示されるような、ノイズ推定を実施するために適合される。これらの文献は参照により本明細書に組み込まれる。しかし、他の手法も本発明において企図される。
装置10はまた、ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するための特徴検出器13を備える。複数の画像特徴は、例えば、病変、嚢胞、腫瘍、疾患組織、及び/又は構造又はテクスチャの局所的偏差に、少なくとも潜在的に対応する。よって、特徴は、関心構造の潜在的なロケーションである画像中の主要点を特定し、例えばそれに対応する。
特徴は、複数のボリューメトリック画像、若しくは複数のボリューメトリック画像のサブセットの合同分析、又は複数のボリューメトリック画像の各々若しくは一部の別々の分析によって、検出される。
複数の画像特徴を検出することは、各検出された画像特徴のロケーション、又はロケーション及びスケールを特定することを含む。
例えば、特徴検出器13は、例えば複数のボリューメトリック画像の各々について、又はそのサブセットの各々について、Lindeberg、Tony、「Feature detection with automatic scale selection」、 International journal of computer vision 30.2(1998):79−116、Lowe、David G.、「Distinctive image features from scale−invariant keypoints」、 International journal of computer vision 60.2(2004): 91−110、及び/又はMatas、Jiriら、「Robust wide−baseline stereo from maximally stable extremal regions」、 Image and vision computing 22.10(2004):761−767に開示されるように、領域又はブロブ検出方法を実施するために適合される。これらの文献は参照により本明細書に組み込まれる。しかし、他の手法も本発明において企図される。
例えば、特徴検出器13は、複数のボリューメトリック画像の各々、又はそのサブセットの各々について、ブロブ検出空間フィルタを計算する、及び/又はブロブ検出方法を適用するために適合され、それらは、ガウスフィルタのラプラシアン、ガウスフィルタの差分、Harrisフィルタ、Harris−Laplaceフィルタ、Mongo−Ampere法、Hessian−Laplaceフィルタ、アフィン適合された差分ブロブ検出フィルタ、watershedに基づくブロブ検出、最大安定極値領域(MSER)検出、及び/又はローカルSIFT若しくはSURFのような方法などである。
例えば、ガウスのラプラシアン(LoG)は、複数のボリューメトリック画像の各々、又はそのサブセットの各々について、例えば以下を適用することによって計算され、
L=Lxx+Lyy+Lzz
ここで、L(x,y,z;σ)=g(x,y,z,σ)*f(x,y,z)であり、
ここで、fは作用を受けるボリューメトリック画像を示し、gはガウスカーネル関数を示し、*は畳み込み演算子を示す。
結果は、例えばスケール正規化されたLoG、例えばσL、を計算することによってスケール不変分析を可能にするように正規化され、ここで、σは構造スケール係数を指す。
特徴は、例えば、
Figure 2020535924
により、各自のロケーション
Figure 2020535924
、例えば、各自のロケーション及び構造スケール係数σによって検出及び特定される。
装置はまた、少なくとも特徴が検出された画像内で、検出された特徴に対応する構造のセグメント化、例えば複数の画像内での合同セグメント化、を行うためのセグメント化ユニット15を備える。例えば、セグメント化は、当技術分野で知られるセグメント化手法に従って行われる。セグメント化は、検出されたロケーションの周囲の領域に固有である。セグメント化は、検出されたロケーションの周囲の領域に制限され、すなわち、例えば検出されたスケールによって決定される。
特徴検出器13が作用する複数のボリューメトリック画像のサブセットが言及される場合、このサブセットは、特に、下記で参照される参照ボリューメトリック画像を除外する。
装置はまた、複数の検出された画像特徴のサブセットの特徴位置を示す複数の参照を生成するためのマーカ生成器14を備え、前記サブセットは、(例えば数値)分類及び/又は(例えば数値)視認性基準に基づいて、複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される検出された画像特徴に対応し、分類及び/又は基準はノイズモデルを考慮に入れる。
例えば、参照ボリューメトリック画像は、スペクトルコンピュータ断層撮影獲得シーケンスから取得又は導出される従来のコンピュータ断層撮影画像、例えば仮想の非コントラスト画像、を表す。同じように、上記で参照されたボリューメトリック画像のサブセットは、他のスペクトル画像であってもよい。
よって、このステップにおいて、特徴、例えば関心対象である可能性のある主要点、が分析され、警告が特定され、これは例えば、参照画像、例えば従来の又は仮想の非コントラスト画像には所見が見られないか、ほとんど見ることができないのに対し、残りの画像、例えばスペクトル結果、の1つの中では所見がより容易に見られる状況でそうである。
マーカ生成器14は、各検出された画像特徴の特定されたロケーション及び特定されたスケールを考慮に入れて、各検出された特徴のための視認性基準を決定するために適合される。
マーカ生成器14は、当技術分野で知られる機械学習、例えば、深層学習手法、ランダムフォレスト手法及び/又はサポートベクターマシン手法、を適用することによって(例えば数値)分類を行うために適合されるが、実施形態はこれらに制限されない。例えば、例えばアノテーションされた事例のコホートに基づいて、教師あり学習技術を使用して訓練されることにより、分類器又は分類アルゴリズムが得られる。
マーカ生成器14は、各画像特徴のコントラスト対ノイズ比(CNR)を、少なくともその特徴が検出された画像i内で、推定するために適合される。例えば、
Figure 2020535924
が計算され、ここで、|...|は絶対値を表し、
Figure 2020535924
は、例えば画像iの検出された特徴に対応する、点
Figure 2020535924
において例えばノイズモデルによって取得されたノイズであり、Cは、画像iにおける点
Figure 2020535924
の周囲の球体の中央値ボクセル値であり、Cは、画像iにおける点
Figure 2020535924
の周囲の球形シェルの中央値ボクセル値であり、例えば、球体の半径は、球形シェルの内側半径以下である。例えば、球体は、
Figure 2020535924
の半径を有し、球形シェルは、
Figure 2020535924
の内側半径及び
Figure 2020535924
の外側半径を有するものとする。代替として、前記球体の代わりに、セグメント化ユニットによって決定された領域が使用されてもよく、球形シェルの代わりに、セグメント化ユニットによって決定された領域の周囲の領域が使用されてもよい。
マーカ生成器14は、画像iにおける点
Figure 2020535924
の周囲の球体内のボクセル値の標準偏差STDを計算するために適合される。例えば、この球体は、CNRを計算するために使用される球体に対応する半径、例えば
Figure 2020535924
を有する。代替として、前記球体の代わりに、セグメント化ユニットによって決定された領域が使用されてもよい。
さらに、マーカ生成器14は、参照画像V内で特徴のコントラスト対ノイズ比を推定するために適合される。このCNRは、他の画像iの中のその特徴についてCNRが計算されたのとほぼ同じ方式で、参照画像Vに対して計算される。例えば、
Figure 2020535924
が計算され、ここで、|...|は絶対値を表し、
Figure 2020535924
は、参照画像Vの、例えば検出された特徴に対応する点
Figure 2020535924
において例えばノイズモデルによって取得されたノイズであり、Cは、画像Vにおける点
Figure 2020535924
の周囲の球体の中央値ボクセル値であり、Cは、画像Vにおける点
Figure 2020535924
の周囲の球形シェルの中央値ボクセル値であり、例えば、球体の半径は、球形シェルの内側半径以下である。例えば、球体は、
Figure 2020535924
の半径を有し、球形シェルは、
Figure 2020535924
の内側半径及び
Figure 2020535924
の外側半径を有する。
代替として、前記球体の代わりに、セグメント化ユニットによって決定された領域が使用されてもよく、球形シェルの代わりに、セグメント化ユニットによって決定された領域の周囲の領域が使用されてもよい。
マーカ生成器14は、参照画像Vと、少なくとも特徴が検出された画像iとのそれぞれにおける、点
Figure 2020535924
の周囲の球体間の正規化された相互相関NCCを計算するために適合される。例えば、これらの球体は、半径
Figure 2020535924
を有し、例えば、ここでαは制御可能パラメータ、例えば構成可能パラメータである。代替として、前記球体の代わりに、セグメント化ユニットによって決定された領域が使用されてもよい。
マーカ生成器14は、参照画像Vと、少なくとも特徴が検出された画像iとのそれぞれにおける、点
Figure 2020535924
の周囲の球体間の相互情報量MIを計算するために適合される。例えば、これらの球体は、半径
Figure 2020535924
を有し、例えば、ここでβは制御可能パラメータ、例えば構成可能パラメータである。代替として、前記球体の代わりに、セグメント化ユニットによって決定された領域が使用されてもよい。
マーカ生成器14は、各検出された画像特徴の特定されたロケーション及び特定されたスケールを考慮に入れて、各検出された特徴のための複数の視認性基準を決定するために適合される。
マーカ生成器14は、例えば、視認性基準のうち予め決められた数、例えば1つが満たされる場合に、検出された特徴を、参照ボリューメトリック画像上で判別するのが難しいと分類するために適合される。
複数の視認性基準は、以下を含む。
Figure 2020535924
Figure 2020535924
Figure 2020535924
Figure 2020535924
Figure 2020535924
Figure 2020535924
Figure 2020535924
Figure 2020535924
NCC<t、及び/又は
MI<t10
ここで、t〜t10は、予め決められた又は制御可能な、例えば構成可能な、閾値を指す。
マーカ生成器は、参照ボリューメトリック画像上で判別するのが難しいと分類された、重複する検出特徴を除外するために適合され、例えば検出された領域を表す1つを除いてすべてを除外する。
マーカ生成器は、画像iに対して決定されたCNRと、参照画像Vに対して決定されたCNRとの比
Figure 2020535924
に基づいて、例えばこれらの比のランク付けに基づいて、検出された特徴を除外するために適合される。例えば、最も高いランク付けのCNR比のうち、予め決められた又は構成可能な数kのみが報告される。
装置は、複数の参照のロケーションがその上に指示された参照画像を出力する、例えば表示する、ための出力ユニット16を備える。さらに、任意選択で、参照画像上の複数の参照の指示は、検出された特徴スケールも示してよい。図3及び図4を参照すると、それぞれ従来のCT画像、例えば仮想の非コントラスト画像と、40keVにおける単一エネルギーのスペクトル画像とが示され、ここで、後者にある円は、生成された複数の参照を示している。例えば、各円の中心は対応するロケーションを示し、各円の半径は特徴スケールを示し、例えば所見の半径に比例する。図5及び図6は同じように、別の例を示し、すなわちそれぞれ、従来のCT画像と、生成された複数の参照がその上にマークされた40keVにおける単一エネルギーのスペクトル画像とを示す。これらの例では、従来のCT画像が参照画像として選択され、関心特徴が単一エネルギーのスペクトル画像内で検出される。本発明に係る実施形態では、複数の参照は従来のCT画像上に示されてよいことに留意すべきである。しかし、強調及び解釈の容易さのために、参照は、これらの例では単一エネルギーのスペクトル画像上に示されている。図7及び図8に示される別の同様の例では、図8に示される40keV単一エネルギーのスペクトル画像に特徴が見出されるにも関わらず、参照が生成されておらず、例えば、特徴の視認性は従来のCT画像の中で十分であると見なすことができる。このことは、特徴検出アルゴリズムが通例、本例のような複雑な画像において偽陽性を生成し得る場合に、このことは、有利に、ユーザの注意を引くために不必要に多い参照が生成されることを示唆する必要はない。
第2の態様において、本発明の実施形態は、本発明の第1の態様の実施形態に係る画像処理装置を備えたコンピュータ断層撮影ワークステーションにも関する。例えば、ワークステーションは、マーカ生成器によって生成された参照を読み取り環境において視覚的に提示するために適合される。例えば、参照は、例えばワークステーションで画像を見ている間に、リアルタイムで生成される。
本発明の実施形態は、本発明の第1の態様の実施形態に係る画像処理装置を備えたコンピュータ断層撮影コンソールにも関する。例えば、参照は、ワークステーション上で後に評価するために事前処理として生成される。さらに、コンソールは、参照がその中で検出されたスペクトル結果を自動的に生成するために適合される。
第3の態様において、本発明の実施形態は、本発明の第1の態様の実施形態に係る画像処理装置を備えたスペクトルコンピュータ断層撮影システムにも関する。例えば、本発明の実施形態は、下記で図9との関係で説明される撮像システム100などのスペクトルコンピュータ断層撮影システムに関する。
図9は、スペクトルコンピュータ断層撮影(スペクトルCT)スキャナを備えた撮像システム100を示す。撮像システム100は、概ね静止しているガントリー102と、回転ガントリー104とを備える。回転ガントリー104は、静止ガントリー102によって回転可能に支持され、長手軸Zを中心として検査領域106の周囲を回転する。
x線管などの放射線源108が、例えばこの回転ガントリー104と共に回転するように、回転ガントリー104によって回転可能に支持され、検査領域106を横断する多エネルギー放射線を放出するために適合される。放射線源108は、単一の広域スペクトルx線管を備えるか、又はそれから構成される。代替として、放射線源は、スキャン中に少なくとも2つの異なる光子放出スペクトル間を制御可能に切り替える、例えば80kVp、140kVp等の少なくとも2つの異なるピーク放出電圧間を切り替える、ために適合される。別の変形例において、放射線源108は、異なる平均スペクトルをもつ放射線を放出するように構成された2つ以上のx線管を備える。別の変形例において、放射線源108は、上記の組み合わせを備える。
放射線感応検出器アレイ110が、検査領域106をはさんで放射線源108の反対側にあり、ある角度の弧に対している。アレイ110は、Z軸方向に沿って互いに対して配置された検出器の1つ又は複数の列を含む。アレイ110は、検査領域106を横断する放射線を検出し、それを示す信号を生成するために適合される。アレイ110は、異なるx線エネルギー感度を有する少なくとも2つの放射線感応検出器素子、例えば、少なくとも2つのシンチレータ及びそれに対応する光感度を有する少なくとも2つの対応する光センサ、を備えた二重エネルギー検出器を備える。放射線感応検出器アレイ110は、代替として又は追加的に、CdTe、CdZnTe、又は当技術分野で知られる他の直接変換検出器などの直接変換検出器を備える。
システムは、検出器アレイ110によって出力された信号を再構成するための再構成器112を備える。これは、信号を、様々なエネルギー依存成分に分解することを含む。再構成器112は、エネルギー依存成分を再構成し、1つ又は複数の異なるエネルギーに対応する1つ又は複数の画像を生成するために適合される。再構成器112はまた、エネルギー依存成分を組み合わせて非スペクトル画像データを生成する。
システムは、物体又は対象者を検査領域内で支持する、寝台などの対象者支持体113を備える。システムはまた、オペレータコンソール114を備え、これは例えば、システム100を制御若しくは監視する、及び/又はオペレータにユーザインターフェースを提供するためにプログラムされた汎用コンピュータである。コンソール114は、モニタやディスプレイなどの人間可読の出力装置と、キーボード及びマウスなどの入力装置とを含む。コンソール114に常駐するソフトウェアが、オペレータが、グラフィカルユーザインターフェース(GUI)を介して、又はその他の形でスキャナ100と対話することを可能にする。この対話は、スペクトル撮像プロトコル又は非スペクトル撮像プロトコルを選択すること、スキャンを開始すること等を含む。
撮像システム100は、スペクトルCTスキャナとの通信を容易にする入力/出力(I/O)インターフェース118を備えた、ワークステーション、例えばコンピュータなどのコンピューティングシステム116、に動作可能に接続される。撮像システム100は、コンピューティングシステム116を、システムレベルの一体化構成要素として備えるか、又は撮像システム100は、例えばコンピューティングシステム116に画像を送信するために、スタンドアロンコンピューティングシステム116と通信するために適合される。
コンピューティングシステム116は、出力装置120をさらに備える。1つ又は複数の出力装置は、例えば、ディスプレイモニタ、フィルムプリンタ、紙プリンタ、及び/又はオーディオフィードバック用のオーディオ出力を備える。コンピューティングシステムはまた、マウス、キーボード、タッチインターフェース及び/又は音声認識インターフェースなどの、1つ又は複数の入力装置122を備える。コンピューティングシステム116はまた、少なくとも1つのプロセッサ124を備え、これは、処理のための中央演算処理装置(CPU)、マイクロプロセッサ、専用の特定用途集積回路(ASIC)、及び/又はフィールドプログラマブルゲートアレイなどの適宜構成されたプログラム可能ハードウェアプロセッサなどである。コンピューティングシステムは、コンピュータ可読記憶媒体126、例えば物理的デジタルメモリなどの非一時的メモリを備える。コンピュータ可読記憶媒体126は、コンピュータ可読命令128及びデータ130を記憶する。少なくとも1つのプロセッサ124は、コンピュータ可読命令128を実行するために適合される。少なくとも1つのプロセッサ126は、信号、搬送波、又は他の一時的媒体によって搬送されるコンピュータ可読命令も実行する。代替として又は追加的に、少なくとも1つのプロセッサは、例えばフィールドプログラマブルゲートアレイ又は命令の少なくとも一部を実行するように特別に設計されたASICの構成により、命令128を、必ずしもこれらの命令のメモリ記憶を必要とすることなく、例えばその全体又は一部を具現化するように物理的に構成される。
コンピューティングシステムは、本発明の第1の態様の実施形態に係る画像処理装置10を実施するために、例えば、上記で参照されたコンピュータ可読命令に従ってプログラムされる。
命令128は、本発明の第4の態様の実施形態に係る方法を行うための画像処理アルゴリズム132を備える。
さらなる態様において、本発明の実施形態は、参照ボリューメトリック画像上で判別するのが難しいと分類される画像特徴を示す複数の参照を生成する方法にも関する。方法は、ボクセルに編成されたボリューメトリック画像データを受け取るステップであって、ボリューメトリック画像データは、撮像された物体の複数の位置合わせされたボリューメトリック画像を含む、ステップを有する。方法は、複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示すノイズモデルを生成するステップと、ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するステップと、を有する。方法はまた、複数の検出された画像特徴のサブセットの特徴位置を示す複数の参照を生成するステップを有し、サブセットは、(例えば数値)分類及び/又は(例えば数値)視認性基準に基づいて、複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される検出された画像特徴に対応する。分類及び/又は視認性基準は、上記の又は各ノイズモデルを考慮に入れる。
本発明の実施形態に係る方法の詳細は、本発明の第1の態様の実施形態に関係して上記で提供された説明に関連して明らかにされる。詳細には、本発明の実施形態に係る装置によって行われる機能は、本発明の実施形態に係る方法の対応するステップ及び/又は特徴を構成するものと理解される。
図10は、本発明の実施形態に係る例示的方法300を示す。
方法300は、ボクセルに編成されたボリューメトリック画像データを受け取るステップ301を有し、ボリューメトリック画像データは、撮像された物体の複数の位置合わせされたボリューメトリック画像を含む。例えば、ボリューメトリックデータを受け取るステップ301は、参照画像、例えば従来のCT画像、例えば仮想非コントラスト画像と、複数のスペクトル画像、例えばスペクトル結果とを受け取ることを有する。この従来のCT画像及びこれらのスペクトル画像は、スペクトルCT獲得及び再構成によって取得される。
方法は、複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示すノイズモデル、例えば複数のノイズモデル、を生成するステップ302を有する。
方法は、ボリューメトリック画像データを考慮に入れて、複数の画像特徴、例えば関心主要点、を検出するステップ303を有する。
方法はまた、複数の検出された画像特徴のサブセットの特徴位置を示す複数の参照、例えばスペクトル警告、を生成するステップ304を有し、サブセットは、(例えば数値)分類及び/又は(例えば数値)視認性基準に基づいて、複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される検出された画像特徴に対応する。分類及び/又は視認性基準は、上記の又は各ノイズモデルを考慮に入れる。
方法はまた、参照、例えばスペクトル結果を出力するステップ305を有する。例えば、これは、参照でアノテーションされた参照画像を表示することを含む。これは、ユーザが参照、例えばスペクトル警告を選択することを可能にするユーザインターフェースを提供し、そのような選択に応答して、複数の画像のうち別の画像を表示する、例えば、特徴が検出された画像を表示することを含んでもよい。
さらなる態様において、本発明は、コンピューティングシステムのプロセッサによって実行されると、コンピューティングシステムに本発明の実施形態に係る方法を行わせる1つ又は複数のコンピュータ実行可能命令が符号化された、コンピュータ可読記憶媒体にも関する。

Claims (15)

  1. ボクセルに編成されたボリューメトリック画像データを受け取るためのデータ入力であって、前記ボリューメトリック画像データは、撮像された物体の複数の位置合わせされたボリューメトリック画像を含む、データ入力と、
    前記複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示すノイズモデルを生成するためのノイズモデラーと、
    前記ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するための特徴検出器と、
    複数の検出された前記画像特徴のサブセットの特徴位置を示す複数の参照を生成するためのマーカ生成器であって、前記サブセットは、分類及び/又は視認性基準に基づいて、前記複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される検出された前記画像特徴に対応し、前記分類及び/又は前記視認性基準は前記ノイズモデルを考慮に入れる、マーカ生成器と、
    を備える、画像処理装置。
  2. 前記データ入力は、単一のスペクトルコンピュータ断層撮影獲得シーケンスから取得及び/又は導出された前記複数の位置合わせされたボリューメトリック画像の形態で、前記ボリューメトリック画像データを受け取る、請求項1に記載の画像処理装置。
  3. 前記参照ボリューメトリック画像は、前記スペクトルコンピュータ断層撮影獲得シーケンスによって取得された、又はそれから導出された、従来のコンピュータ断層撮影画像を表す、請求項2に記載の画像処理装置。
  4. 前記特徴検出器は、各検出された画像特徴のロケーション及びスケールを特定し、前記マーカ生成器は、各検出された画像特徴の特定された前記ロケーション及び特定された前記スケールを考慮に入れて、各検出された特徴のための複数の視認性基準を決定する、請求項1から3のいずれか一項に記載の画像処理装置。
  5. 前記マーカ生成器は、前記視認性基準のうち予め決められた数が満たされる場合に、検出された画像特徴を、前記参照ボリューメトリック画像上で判別するのが難しいと分類する、請求項4に記載の画像処理装置。
  6. 前記マーカ生成器は、各画像特徴のコントラスト対ノイズ比を、少なくとも前記画像特徴が検出された画像内で推定し、及び/又は、前記参照画像内で各画像特徴のコントラスト対ノイズ比を推定する、請求項1から5のいずれか一項に記載の画像処理装置。
  7. 前記マーカ生成器は、各画像特徴について、前記画像特徴が検出された画像における前記画像特徴の前記ロケーションの周囲の領域内のボクセル値の標準偏差を計算する、請求項1から6のいずれか一項に記載の画像処理装置。
  8. 前記マーカ生成器は、各画像特徴について、前記参照画像と、少なくとも前記画像特徴が検出された画像とのそれぞれにおける前記画像特徴の前記ロケーションの周囲の領域間で、正規化された相互相関及び/又は相互情報量を計算する、請求項1から7のいずれか一項に記載の画像処理装置。
  9. 少なくとも特徴が検出された画像内で、検出された前記特徴に対応する構造のセグメント化を行うためのセグメント化ユニットを備える、請求項1から8のいずれか一項に記載の画像処理装置。
  10. 前記特徴検出器は、前記複数のボリューメトリック画像の各々、又はそのサブセットの各々について、スケール正規化されたガウスのラプラシアンを計算する、請求項1から9のいずれか一項に記載の画像処理装置。
  11. 前記ノイズモデラーは、モンテカルロ推定方法、分析方法、及び/又は直接抽出技術を使用して前記ノイズモデルを推定する、請求項1から10のいずれか一項に記載の画像処理装置。
  12. 請求項1から11のいずれか一項に記載の画像処理装置を備える、コンピュータ断層撮影ワークステーション。
  13. 請求項1から11のいずれか一項に記載の画像処理装置を備える、スペクトルコンピュータ断層撮影システム。
  14. 参照ボリューメトリック画像上で判別するのが難しいと分類される画像特徴を示す複数の参照を生成する方法であって、前記方法が、
    ボクセルに編成されたボリューメトリック画像データを受け取るステップであって、前記ボリューメトリック画像データは、撮像された物体の複数の位置合わせされたボリューメトリック画像を含む、受け取るステップと、
    前記複数の位置合わせされたボリューメトリック画像の各々におけるノイズの空間分布を示すノイズモデルを生成するステップと、
    前記ボリューメトリック画像データを考慮に入れて複数の画像特徴を検出するステップと、
    複数の検出された前記画像特徴のサブセットの特徴位置を示す前記複数の参照を生成するステップであって、前記サブセットは、数値分類及び/又は視認性基準に基づいて、前記複数の位置合わせされたボリューメトリック画像の中の参照ボリューメトリック画像上で判別するのが難しいと分類される検出された前記画像特徴に対応し、前記分類及び/又は前記視認性基準は前記又は各ノイズモデルを考慮に入れる、生成するステップと、
    を有する、方法。
  15. コンピューティングシステムのプロセッサによって実行されると、前記コンピューティングシステムに請求項14に記載の方法を行わせる1つ又は複数のコンピュータ実行可能命令が符号化された、コンピュータ可読記憶媒体。
JP2020519416A 2017-10-05 2018-10-02 診断撮像における画像特徴のアノテーション Active JP7216722B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022176372A JP2023011833A (ja) 2017-10-05 2022-11-02 診断撮像における画像特徴のアノテーション

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP17194999.3 2017-10-05
EP17194999.3A EP3467771A1 (en) 2017-10-05 2017-10-05 Image feature annotation in diagnostic imaging
PCT/EP2018/076748 WO2019068689A1 (en) 2017-10-05 2018-10-02 ANNOTATION OF IMAGE CHARACTERISTICS IN DIAGNOSTIC IMAGING

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022176372A Division JP2023011833A (ja) 2017-10-05 2022-11-02 診断撮像における画像特徴のアノテーション

Publications (3)

Publication Number Publication Date
JP2020535924A true JP2020535924A (ja) 2020-12-10
JP2020535924A5 JP2020535924A5 (ja) 2021-11-04
JP7216722B2 JP7216722B2 (ja) 2023-02-01

Family

ID=60161920

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020519416A Active JP7216722B2 (ja) 2017-10-05 2018-10-02 診断撮像における画像特徴のアノテーション
JP2022176372A Pending JP2023011833A (ja) 2017-10-05 2022-11-02 診断撮像における画像特徴のアノテーション

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022176372A Pending JP2023011833A (ja) 2017-10-05 2022-11-02 診断撮像における画像特徴のアノテーション

Country Status (5)

Country Link
US (1) US11205509B2 (ja)
EP (2) EP3467771A1 (ja)
JP (2) JP7216722B2 (ja)
CN (1) CN111316318B (ja)
WO (1) WO2019068689A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022164214A1 (ko) * 2021-01-28 2022-08-04 (주) 제이엘케이 진단키드 결과 이미지 내 스팟 검출 장치 및 방법
JP2023011833A (ja) * 2017-10-05 2023-01-24 コーニンクレッカ フィリップス エヌ ヴェ 診断撮像における画像特徴のアノテーション

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111292396B (zh) * 2020-01-16 2023-08-29 武汉轻工大学 图像样本集生成方法、设备、装置及存储介质
CN114760931A (zh) * 2020-02-21 2022-07-15 西门子(中国)有限公司 模体构建方法和装置以及体模制造方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62284249A (ja) * 1986-05-31 1987-12-10 Toshiba Corp 断層像検査装置
JP2006255065A (ja) * 2005-03-16 2006-09-28 Fuji Photo Film Co Ltd 画像出力方法および画像出力装置ならびにプログラム
JP2007252763A (ja) * 2006-03-24 2007-10-04 Gifu Univ 医用動画像による画像診断システム
US20100303358A1 (en) * 2009-05-27 2010-12-02 Mausumi Acharyya Method for the automatic analysis of image data of a structure
WO2011132468A1 (ja) * 2010-04-21 2011-10-27 コニカミノルタエムジー株式会社 医用画像表示装置及びプログラム
JP2012143369A (ja) * 2011-01-12 2012-08-02 Konica Minolta Medical & Graphic Inc 医用画像表示装置及びプログラム

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2519187A1 (en) * 2003-03-25 2004-10-14 Imaging Therapeutics, Inc. Methods for the compensation of imaging technique in the processing of radiographic images
WO2011064683A2 (en) 2009-11-25 2011-06-03 Koninklijke Philips Electronics N.V. Enhanced image data/dose reduction
KR101479212B1 (ko) * 2012-09-05 2015-01-06 삼성전자 주식회사 엑스선 영상 장치 및 엑스선 영상 생성 방법
WO2014128595A1 (en) * 2013-02-21 2014-08-28 Koninklijke Philips N.V. Structure propagation restoration for spectral ct
CN113705586A (zh) * 2013-03-07 2021-11-26 飞利浦影像引导治疗公司 血管内图像中的多模态分割
US9076237B2 (en) * 2013-03-12 2015-07-07 Wisconsin Alumni Research Foundation System and method for estimating a statistical noise map in x-ray imaging applications
JP6363197B2 (ja) * 2013-12-04 2018-07-25 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 画像データ処理
JP6559678B2 (ja) * 2013-12-17 2019-08-14 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. スペクトル画像データ処理
US10062164B2 (en) * 2014-04-07 2018-08-28 Mimo Ag Method for the analysis of image data representing a three-dimensional volume of biological tissue
US10169848B2 (en) 2014-04-23 2019-01-01 Koninklijke Philips N.V. Restoration of low contrast structure in de-noise image data
US10595805B2 (en) 2014-06-27 2020-03-24 Sunnybrook Research Institute Systems and methods for generating an imaging biomarker that indicates detectability of conspicuity of lesions in a mammographic image
US10037603B2 (en) * 2015-05-04 2018-07-31 Siemens Healthcare Gmbh Method and system for whole body bone removal and vascular visualization in medical image data
CN105640577A (zh) 2015-12-16 2016-06-08 深圳市智影医疗科技有限公司 一种自动检测放射影像中局部性病变的方法和系统
US9931095B2 (en) * 2016-03-30 2018-04-03 General Electric Company Method for segmenting small features in an image volume
CN106127753B (zh) * 2016-06-20 2019-07-30 中国科学院深圳先进技术研究院 一种外科手术中ct影像体表人工标记自动提取方法
CN106296653B (zh) * 2016-07-25 2019-02-01 浙江大学 基于半监督学习的脑部ct图像出血区域分割方法及系统
EP3467771A1 (en) * 2017-10-05 2019-04-10 Koninklijke Philips N.V. Image feature annotation in diagnostic imaging

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62284249A (ja) * 1986-05-31 1987-12-10 Toshiba Corp 断層像検査装置
JP2006255065A (ja) * 2005-03-16 2006-09-28 Fuji Photo Film Co Ltd 画像出力方法および画像出力装置ならびにプログラム
JP2007252763A (ja) * 2006-03-24 2007-10-04 Gifu Univ 医用動画像による画像診断システム
US20100303358A1 (en) * 2009-05-27 2010-12-02 Mausumi Acharyya Method for the automatic analysis of image data of a structure
WO2011132468A1 (ja) * 2010-04-21 2011-10-27 コニカミノルタエムジー株式会社 医用画像表示装置及びプログラム
JP2012143369A (ja) * 2011-01-12 2012-08-02 Konica Minolta Medical & Graphic Inc 医用画像表示装置及びプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023011833A (ja) * 2017-10-05 2023-01-24 コーニンクレッカ フィリップス エヌ ヴェ 診断撮像における画像特徴のアノテーション
WO2022164214A1 (ko) * 2021-01-28 2022-08-04 (주) 제이엘케이 진단키드 결과 이미지 내 스팟 검출 장치 및 방법

Also Published As

Publication number Publication date
EP3692498A1 (en) 2020-08-12
JP7216722B2 (ja) 2023-02-01
EP3467771A1 (en) 2019-04-10
CN111316318B (zh) 2023-12-08
CN111316318A (zh) 2020-06-19
WO2019068689A1 (en) 2019-04-11
EP3692498B1 (en) 2022-06-01
US20200258615A1 (en) 2020-08-13
JP2023011833A (ja) 2023-01-24
US11205509B2 (en) 2021-12-21

Similar Documents

Publication Publication Date Title
JP6758817B2 (ja) 医用画像診断装置及び医用画像処理装置
US8229200B2 (en) Methods and systems for monitoring tumor burden
US8923577B2 (en) Method and system for identifying regions in an image
JP7216722B2 (ja) 診断撮像における画像特徴のアノテーション
EP3600045B1 (en) Myocardial ct perfusion image synthesis
US20080144909A1 (en) Analysis of Pulmonary Nodules from Ct Scans Using the Contrast Agent Enhancement as a Function of Distance to the Boundary of the Nodule
US10561378B2 (en) Precision and resolution of quantitative imaging by combining spectral and non-spectral material decomposition
JP2007068992A (ja) 投影画像を用いた3dcadのシステム及び方法
EP3213298B1 (en) Texture analysis map for image data
JP6526669B2 (ja) 画像データからの骨の区分化
EP2619729B1 (en) Quantification of a characteristic of a lumen of a tubular structure
Zhou et al. Computerized analysis of coronary artery disease: performance evaluation of segmentation and tracking of coronary arteries in CT angiograms
EP4026102B1 (en) Confidence map for neural network based limited angle artifact reduction in cone beam ct
CN109690618B (zh) 谱ct中的骨和硬斑块分割
JP7258744B2 (ja) スペクトルコンピュータ断層撮影フィンガープリンティング
Shamul et al. Change detection in sparse repeat CT scans with non-rigid deformations
Wormanns et al. Clinical evaluation of the reproducibility of volume measurements of pulmonary nodules
Zheng et al. Lung Cancer Screening and Nodule Detection: The Role of Artificial Intelligence

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210924

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210924

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20210924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211029

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220120

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220427

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220704

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221102

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20221102

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20221122

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20221128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221223

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230120

R150 Certificate of patent or registration of utility model

Ref document number: 7216722

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150