JP5864542B2 - 画像の異常を検出するための画像データの処理方法、システムおよびプログラム - Google Patents

画像の異常を検出するための画像データの処理方法、システムおよびプログラム Download PDF

Info

Publication number
JP5864542B2
JP5864542B2 JP2013508073A JP2013508073A JP5864542B2 JP 5864542 B2 JP5864542 B2 JP 5864542B2 JP 2013508073 A JP2013508073 A JP 2013508073A JP 2013508073 A JP2013508073 A JP 2013508073A JP 5864542 B2 JP5864542 B2 JP 5864542B2
Authority
JP
Japan
Prior art keywords
image
convolved
computer program
images
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013508073A
Other languages
English (en)
Other versions
JP2013525009A (ja
Inventor
シー ウェネス ジェフリー
シー ウェネス ジェフリー
ピー モナコ ジェームス
ピー モナコ ジェームス
エス ハーディング デイヴィッド
エス ハーディング デイヴィッド
エイチ パイク ジェームス
エイチ パイク ジェームス
ティー ホー アンビン
ティー ホー アンビン
エム ハナフィー ローレンス
エム ハナフィー ローレンス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vucomp Inc
Original Assignee
Vucomp Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vucomp Inc filed Critical Vucomp Inc
Publication of JP2013525009A publication Critical patent/JP2013525009A/ja
Application granted granted Critical
Publication of JP5864542B2 publication Critical patent/JP5864542B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/10Image enhancement or restoration using non-spatial domain filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/143Segmentation; Edge detection involving probabilistic approaches, e.g. Markov random field [MRF] modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/443Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
    • G06V10/449Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters
    • G06V10/451Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters with interaction between the filter responses, e.g. cortical complex cells
    • G06V10/454Integrating the filters into a hierarchical structure, e.g. convolutional neural networks [CNN]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30068Mammography; Breast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30096Tumor; Lesion

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Medical Informatics (AREA)
  • Quality & Reliability (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Software Systems (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Multimedia (AREA)
  • Probability & Statistics with Applications (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Complex Calculations (AREA)

Description

本出願は、2010年5月2日に出願された米国仮出願第61/343,609号、2010年5月2日に出願された米国仮出願第61/343,608号、2010年5月2日に出願された米国仮出願第61/343,552号、2010年4月30日に出願された米国仮出願第61/343,557号、2010年5月6日に出願された米国仮出願第61/395,029号、2010年6月25日に出願された米国仮出願第61/398,571号、2010年7月7日に出願された米国仮出願第61/399,094号、2010年7月28日に出願された米国仮出願第61/400,573号、の利益を主張するものであり、前記出願の全文は本明細書の一部をなすものとしてここに引用する。
本開示は概して、X線画像における、微小石灰化のような特性のコンピュータを使用した検出および分類に関し、特に、微小石灰化の候補の分類システムおよび方法に関する。
放射線科医は、乳房X線写真(マンモグラム)のようなX線画像を使用して、例えば、その他の煩雑な方法により疾患が容易に検出可能となる前に、可能な限り早期に、患者の疑わしい病変を検出して特定する。そのため、放射線科医がごく小さな癌組織や前駆細胞を画像をもとに特定可能であることは、非常に有益である。特に特定のタイプのクラスタ内に発生する微小石灰化は、関心対象のひとつの特性である。個々の石灰化は容易に放射線を吸収する傾向があり、それゆえ、X線画像で非常に明るく表れる。画像の構造的に入り組んだ部分に表れる、他の自然構造によるごく小さなサイズの閉塞を含む様々な要因は、時に放射線科医の疲労と相まって、目視検査で検出され難いことがある。
コンピュータ援助検知(Computer-Aided Detection、CAD)アルゴリズムは、放射線科医がX線画像内に病変の可能性があるものを発見するのに役立つよう発展してきた。CADアルゴリズムは、患者の乳房X線写真セットのデジタル表現をコンピュータ内で行う。乳房X線写真がデジタルセンサもしくは伝統的なフィルムベースの乳房X線写真セットのスキャンされたものにより取り込まれた場合には、デジタル表現は、オリジナルのセンサデータもしくは処理されたセンサデータであり得る。本明細書で使用される“画像”とは、CADアルゴリズムの表現に適したデジタル表現の少なくとも2次元データであるものと仮定され、患者情報を取り込むために元来使用されるキャプチャメカニズムとの区別はない。CADアルゴリズムは、関心のあるシグネチャーと一致するオブジェクトの画像を探し出し、関心のあるシグネチャーが発見された場合には放射線科医に警告する。
ひとつの関心のあるシグネチャーは、微小石灰化である。既存のCADアルゴリズムは、可能性のある微小石灰化を見つけるために、様々な方策を使用する。米国特許第6,014,452では、全体の固定されたしきい値以上の強度を有するすべてのピクセルが、可能性のある微小石灰化の種の位置として使用される。米国特許第6,801,645は、微小石灰化を強調するためにガウシアンフィルタの差をしきい値に適用する。米国特許第7,593,561は、中央の3×3の画素領域が画像位置からの画素リング3と6画素よりも明るいとき、画像位置のコントラストを増加する固定されたフィルタを適用する。
他の関心のあるシグネチャーは、微小石灰化クラスタである。既存のCADアルゴリズムは、米国特許第7,593,561で例証されるように、学習済みのニューラルネットワークおよび特徴に重み付けした線形識別を含む、微小石灰化クラスタの候補を疑わしいものと標識するための様々な方策を使用する。
異常の分類は、確率変数の与えられたサンプル値を観察することの相対的な尤度を表す確率密度関数(probability density function、PDF)を使用して実行され得る。すべての取り得る値のPDFの積分は1である;確率変数の範囲のサブセットのPDFの積分は、確率変数の抽出サンプルがその範囲内にある確率を表す。
閉形式により表され得るPDFは一般的によく理解され、そのようなPDFに関する多くのアプリケーションが発達してきた。一方で、特に、各次元において1つが未知であり、ことによると不規則な分布と、および/または長いまばらに分布したテール部分を有する、複雑な多次元確率変数のためのPDFの実用的評価は、大部分で研究者の手に入らなかった。例えばパターンおよび画像認識の分野では、PDF研究が実用上困難であるために、多くの研究者がPDF研究を断念し、例えばニューラルネットワークや線形識別関数といった既知で解決可能な別の研究に集中した。
以下は、本発明の代表の実施例を表す図面の簡単な説明である。
図1は、ある実施例に従った異常検出システムのシステムレベルの図である。 図2は、ある実施例に従ったコンピュータ援助検知(CAD)ユニットのコンポーネント図である。 図3は、ある実施例に従った検出のコンポーネント図である。 図4は、ある実施例に従ったピーク検出処理システムのブロック図である。 図5は、ある実施例に従ったオブジェクトの境界線決定プロセスのフローチャートである。 図6は、図2のひとつのステップで使用されるオブジェクトの境界線リングを表す 図7は、ある実施例のオブジェクトの境界線内のピクセルに重み付けするよう使用される境界線距離マッピングを表す。 図8は、ある実施例に従ったオブジェクトに関する境界線の、追加的な改良点のステップを表す。 図9は、第1の実施例に従った微小石灰化分類のブロック図である。 図10は、後続の図面におけるオブジェクトの特性計算を説明するのに使用される、セグメント化されたオブジェクトの境界線の描写を表す。 図11は、図10の境界線描写のアスペクト比の測定を表す。 図12は、図10の境界線描写の凸包描写の構造を表す。 図13は、図10の境界線描写のエッジの分散特性(edge variance feature)の計算において使用される測定を表す。 図14は、図10の境界線描写のためのリッジ比の特性を計算するために使用される配向を表す。 図15は、第2の分類段階で使用される周辺の確率プロットの構成を表す。 図16は、ある実施例に従った2段階のクラスタ化技術におけるステップを表す。 図17は、クラスタ形状の凹包および局部的な凹包の表現を表す。 図18は、本発明のある実施例で採用される座標系を表す。 図19aは、ある実施例に従った分類器の確率ユニット(classifier probability unit)を表す。 図19bは、ある実施例に従った分類器の確率ユニット(classifier probability unit)を表す。 図20は、確率分布から抽出されるサンプル分布の閉形PDFおよびヒストグラムを表す。 図21は、一連の表示ポイントにより表された仮想一次元分布のためのシグマ値の推定を表す。 図22は、評価ポイントでのPDFの推定のための図21のシグマ値の応用を表す。 図23は、ある実施例に従ったデスクトップのコンピュータ装置のブロック図を表す。
発明の詳細な説明
実施例を作成し使用することが以下で詳細に述べられる。しかしながら、本発明が多種多様な幅広い背景で具体化され得る、多くの適用可能な発明概念を提供することが理解されるべきである。説明される特定の実施例は、本発明を作成し利用するための特定の手段を例示しているに過ぎず、発明の範囲を限定するものではない。
例えば、本明細書で検討される実施例は一般的に、乳房X線画像の診断において医療関係者を支援するという観点から説明され、例えば、医療関係者によって検討されるための異常候補を見つけて分類することによりマンモグラムを行う過程で起こり得るものである。他の実施例では、しかしながら、肺組織といった他の組織における異常を検出して分類するような、統計に表れた変則性等のためのあらゆるタイプの画像分析を含む他の状況で使用され得る。
図面を参照すると、類似の参照番号が様々な視点で同一もしくは類似の要素を示すのに本明細書において使用されており、本発明の具体的な実施例が表され説明される。図面は必ずしも縮尺に合わされておらず、いくつかの例では、図面は所々で例証目的だけのために強調され、および/もしくは簡素化される。当業者は、本発明の以下の具体的な実施例に基づいた、本発明の多くの可能性のある応用やバリエーションを理解する。
はじめに図1を参照すると、例えばマンモグラム中に異常検出を支援するためのシステム100が、ある実施例に従って表される。システム100は、画像ユニット102、デジタイザ104、およびコンピュータ支援検出(CAD)ユニット106を含む。画像ユニット102は、乳房組織のような関心のある領域の1つもしくはそれ以上の画像、例えばX線画像を取り込む。システム100がマンモグラムの分析を支援するのに使用される本実施例では、一連の4つのX線画像が撮影されることができ、その間、乳房は乳房組織を広げるために圧迫され、これにより異常の検出を支援する。一連の4つのX線画像は、頭尾方向(cranio caudal、 CC)画像と呼ばれる、左右の乳房それぞれのためのトップダウン画像と、中外斜位方向(medio lateral oblique、MLO)画像と呼ばれる、左右の乳房それぞれのための、胸骨のトップから下へ向けられて体の外側に向かって撮影される斜角画像である。
1つもしくはそれ以上の画像がフィルムで具体化されるか、もしくはデジタル化され得る。歴史的に、1つもしくはそれ以上の画像は、フィルムのX線画像として具体化されたが、最近の技術は、近年のデジタルカメラとほぼ同じ方法で、X線画像を直接にデジタル画像として取り込まれるのを可能にする。図1に示されるように、デジタイザ104はフィルム画像のデジタル形式へのデジタル化を可能にする。デジタル画像は、工業規格である医用におけるデジタル画像と通信(DICOM)形式といった、あらゆる適切な形式にフォーマットされる。
デジタル化されたフィルム画像やデジタル画像として直に取り込まれた画像といった、デジタル化された画像は、コンピュータ支援検出(CAD)ユニット106へ提供される。以下でより詳細に検討されるように、CADユニット106は、1つもしくはそれ以上の画像を処理して、石灰化のような相対的に濃い領域や歪み等の、様々なタイプの異常の候補位置を検出する。一度処理されると、可能性のある異常の位置、および任意にデジタル化された画像は、評価ユニット108へ提供されて、放射線科医、専門医、もしくはその他の職員により、検出された可能性のある異常の位置を示すマークを伴い、もしくは伴わずに、検討される。評価ユニット108は、ディスプレイ、ワークステーション、ポータブルディバイス等を含み得る。
図2は、ある実施例に従ったCADユニット106(図1参照)により利用され得る構成要素を表す。一般的に、CADユニット106は、セグメンテーションユニット202、1つもしくはそれ以上の検出ユニット204a−204n、および1つもしくはそれ以上の表示プリ−プロセッサ206a−206nを含む。X線画像もしくはその他の画像は、関心のある領域以外の領域を含み得ることが理解される。例えば、乳房X線画像は、背後領域と同様に胸筋のような他の構造的領域を含み得る。このような状況では、乳房組織を規定する境界領域といったサーチ領域を規定するために、X線画像をセグメント化するのが望ましく、その領域で1つもしくはそれ以上の検出ユニット204a−204nが異常を分析する。
1つもしくはそれ以上の検出ユニット204a−204cは、1つもしくはそれ以上の画像、もしくは、セグメンテーションユニット202により規定される特定の領域を分析して、患者の1つもしくはそれ以上の特定のタイプの異常を示し得る特定のタイプの特徴を検出する。例えば、人の乳房組織の検査で使用するための実施例では、検出ユニット204a−204nは、石灰化ユニット、密度(質量)ユニット、および歪みユニットを含み得る。医療分野では公知であるように、人体はたびたび、がん細胞をカルシウムで取り囲むことによりがん細胞と反応し、微小石灰化を生成する。これらの微小石灰化は、X線画像では微細で明るい領域として表れ得る。石灰化ユニットは、乳房のこれらの領域を可能性のある微小石灰化として検出し、識別する。
さらに、がん領域は、周辺組織よりも高密度である傾向があり、それゆえ、周辺組織よりも高密度組織を示す一般的により明るい部分として表れる領域が、がん領域を示し得ることが知られている。従って、密度ユニットは、1つもしくはそれ以上の乳房X線画像を分析して、1つもしくはそれ以上の画像の中の相対的に濃い領域を検出する。正常な乳房組織の無作為な重複が時折疑わしいものとして表れることがあるので、ある実施例では、濃い領域がそのほかの対応する視野に存在するかどうかを決定するために、密度ユニットは、乳房のような対象の種々の視野を相互に関連付けする。もし、濃い領域が複数の視野に表れていれば、当該領域が真に悪性であるという可能性はより高い。
歪みユニットは、周辺組織へのがん細胞の影響から生じる構造的な欠陥を検出する。がん細胞にはしばしば、周辺組織を“引き込む”という影響があり、ストレッチマーク、星パターン、もしくはその他の線形のパターンとして表れる癌放射になる。
検出ユニット204a−204nの、例えば、石灰化ユニット、密度ユニット、および歪みユニットの上述の例は例証目的のためだけに提供されており、他の実施例はより多くの、もしくはより少ない検出ユニットを含み得ることに注意されたい。また、検出ユニットには、点線208で示されるように、他の検出ユニットと相互作用し得るものもあることに注意されたい。検出ユニット204a−204nは、図3を参照して以下でより詳細に説明される。
表示プリ−プロセッサ206a−206nは画像データを生成して、異常の位置および/またはタイプを示す。例えば、微小石灰化は、懸案のエリアをひとつのタイプの線(例えば、実線)で取り囲む線により示されることができ、他方で、がん放射(もしくは他のタイプの異常)は、懸案のエリアを他のタイプの線(例えば、破線)で取り囲む線により示される。
図3は、ある実施例に従った検出ユニット204a−204nのそれぞれで使用され得る構成要素を表す。概して、検出ユニット204a−204nのそれぞれが検出器302、特徴抽出器304、および分類器306を含み得る。検出器302は画像を分析して、検出ユニットが検出するよう設計された、石灰化のような異常のタイプを表す属性を識別し、特徴抽出器304は、検出された各領域の予め決められた特徴を抽出する。例えば、予め決められた特徴は、大きさ、信号対ノイズ比、位置等を含み得る。
分類器306は、特徴抽出器304から抽出された各特徴を検査して、抽出された特特徴異常なものである確率を決定する。一度確率が決定されると、当該確率は閾値と比較されて、検出された領域が関心の候補エリアとして報告されるべきかどうかを決定する。
適切なセグメンテーションユニット202は、米国仮出願番号61/400,573および61/398,571で詳細に述べられており、悪性の質量を検出し分類する適切な検出ユニットは、米国仮出願61/343,552および共に出願された国際特許出願で詳細に述べられており、スピキュラを伴う悪性の質量を検出し分類するための適切な検出ユニットは、米国仮出願61/395,029および共に出願された国際特許出願で詳細に述べられており、適切な確率密度関数の推定器は米国仮出願番号61/343,608および共に出願された国際特許出願で詳細に述べられており、適切な表示プリ−プロセッサは、米国仮出願番号61/399,094で詳細に述べられており、これらすべては参照により本出願に組み込まれる。
以下の段落は、ある実施例に従った1つもしくはそれ以上の検出ユニット204a‐204n(図2参照)として使用され得るような、微小石灰化検出ユニットに関するより詳細な説明を提供する。特に、以下の段落は、微小石灰化候補としてのオブジェクトの検出および分類と、微小石灰化クラスタとしての可能性のある微小石灰化オブジェクトの集団の検出および分類を説明する。
画像の微小石灰化の候補を探し出すための従来技術のアプローチは、いくつかの発見しやすいシグネチャーを検出する。放射線科医にとってより有益なのは、発見しづらい微小石灰化を検出して放射線科医にそれらの位置を示すような、様々なキャプチャシステムを使用して得られた放射線画像で作業し得る検出システムである。本明細書で述べられる実施例は、幅広いキャプチャシステムで機能して、“ピーク”のリスト、すなわち微小石灰化位置の候補のリストを作成し、それらを微小石灰化分類器/認識システムによって処理するためのオブジェクト記述(object descriptions)に洗練する。
従来技術のアプローチとは対照的に、本明細書で述べられる実施例は、ピークをオブジェクトにする前にピークを検出するための“スケール”の優先順位で機能する。各スケールは一定の絶対サイズ範囲内でピークを検出するよう最適化される。絶対強度もしくはエッジ強度に基づいた微小石灰化の発見は疑わしいことがあるので、好ましい実施例は、例えば、中央値測定といった、大きな近隣の平均値に基づいたコントラスト比を使用する。好ましくは、与えられたコントラスト比より大きいより小さなスケールで発見されたオブジェクトは、より大きなスケールでの中央値計算から除外され、それゆえさらに検出性能を改善する。
疑わしいものとして微小石灰化をラベリングするための従来技術のアプローチは、がんを良性のシグネチャーから区別することがシステム的に難しいか、あるいは、システムが要望通りに作動しているか、あるいは作動していないかの理由を理解するのが難しいというアプローチに頼っている。本明細書で述べられるシステムは、微小石灰化を分類するために、各ステージで最適に近い方法であると信じられる様々な特徴のための堅牢なモデル分配に対し、3つのステージの分類器において確率密度関数を使用する。分類プロセスの全体構造と、個々のステージ、特徴セット、座標系、および多くの個々の特徴は、新規であると信じられる。
ここで図4を参照すると、実施例400に従ったピーク検出が描かれる。好ましくは、画像は必要があれば、ピーク検出手順を実行する前に、約40ミクロンのピクセルサイズにスケールを変更される。他のスケールも使用され得るが、40ミクロンサイズは、不要な処理負担を与えることなく、適切な特徴の詳細を提供することが判明した。異なるフィルムスキャナやデジタルキャプチャシステムが、CADシステムへの異なる入力ピクセルの解像度を提供し得るので、入力ピクセル解像度のパラメータがスケーリングを決定するために使用される。マンモグラムでは、画像は好ましくは前処理をされて、処理のために乳房組織を表すエリアに区分され、かつ、微小石灰化を検出する前に、引っかきやその他の輝線といった人為的なものが取り除かれる。
スケーリングされた画像は、段階410b‐410fでガウスカーネル(Gaussian kernel)により再帰的に畳み込まれて、様々なスケールで平滑化された、各フィルタ再帰に対してひとつの画像を生成する。ガウシアンパルス(Gaussian pulse)のいくつかの数学的な性質は、処理時間を著しく減らすのに役立つように使用される。まず、標準偏差σおよびσを有する、2つのガウシアンパルスの畳み込みは、標準偏差
Figure 0005864542
を有するガウシアンパルスを生成するので、より大きなスケールで平滑化された画像は、大きなカーネルでの一度の畳み込みによってではなく、より小さなカーネルでの繰り返された畳み込みによって生成される。次に、2次元の円対称ガウシアンパルスは、2つの1次元のガウシアンパルスに線形に分割可能なので(一方が1xnピクセルサイズ、もう一方がnx1ピクセルサイズであり、ここではnは、処理効率のため、ピクセルで表すとおよそ±3σで切り捨てられる)、各畳み込みはさらに、ピークのそれぞれのサイドの3σで切り捨てられた2つの1次元畳み込みを使用して最適化される。言うまでもなく、計算効率に関心のない者は、これらの技術のうちのひとつを使用すること、もしくはどちらも使用しないことを任意に選択することができた。
好ましい実施例では、分散(variance)がひとつのスケールから次のスケールへ倍増するように、例えばσn+1=√2σのように、スケールが選択されて、ガウシアン平滑化画像(Gaussian-smoothed images)が、スケールのそれぞれ増加に伴って面積が倍増するスポットサイズを選択するようにする。これは、各段階で、適用されるガウシアンカーネルが、現在の累積的に適用される標準偏差と同じ標準偏差を有することを必要とする。第1段階処理はσ=0を使用し、例えばスケーリングされた入力画像に何が存在しようと、追加のぼかし(blur)は加えられない。第1および第2のぼかし段階(σおよびσ)では、ガウシアンフィルタ410bおよび410cで適用されるカーネルは、25√2ミクロンの標準偏差を有し、第2および第3段階入力画像が、それぞれのぼかしの標準偏差σ=35ミクロン(およそ)およびσ=50ミクロンで、入力画像のガウスのぼかしのバージョンを表すようにする。第3のぼかしステップは、標準偏差50ミクロンでガウシアンカーネルを適用し、第4段階410bの出力されたぼかし画像が50√2ミクロンのぼかしの標準偏差を有するようにする。同様のやり方を続けると、追加の段階410e、410f等は、100ミクロン、140ミクロン、200ミクロン、280ミクロン等のぼかしの標準偏差(一部の例では四捨五入される)でぼかし画像を受け取る。ひとつの実施例では、ぼかしの標準偏差が、例えば約300ミクロンで、関心のある最大の石灰化サイズの半径とほぼ等しいと、段階は打ち切られる。他のスケールステッピング戦略も採用され得るが、広範囲に及ぶテストは、この方法が非常に様々なスポットサイズを検出するのに頑強であることを示した。
各処理段階は、ガウシアンのぼかし画像を受け取り(第1段階画像はぼかされない)、その画像を、ラプラス関数もしくは他の二次導関数関数(derivative function)によりラプラシアンフィルタ段階で畳み込む。ラプラス関数は“曲線”画像を生成し、例えば、平坦や直線的に傾斜した画像エリアはゼロ出力応答を生成し、正のピークは正の出力応答を生成し、負のピークは負の出力応答を生成する(サドルポイントおよび一つの方向にカーブする画像エリアもまた応答を生成し得る)。
第1のラプラシアンフィルタ段階412aでは、ラプラシアンフィルタの出力はメディアンフィルタ(median filter)416aに供給され、このフィルは、例えば、各ピクセルの中心とされる4ミリメートルのエリア(100x100ピクセル)のように、局所的な周辺の中央値の絶対曲率を計算する。メディアンフィルタ416aは、σの処理段階で使用されるための周辺の中央値の出力画像NMを生成する。
σのスケールの段階で、フィルタ410bからのガウシアン平滑化画像がラプラシアンフィルタ段階412bへ入力され、段階412bは平滑化画像内の曲率を検出する。曲率画像は“サージェリー(surgery)”段階414bへ入力される。サージェリー段階は、各ピクセル位置について、ピクセルの相対的なコントラスト(同一のピクセル位置で周辺の中央値NMにより除算されたラプラシアン値)を、スケールのしきい値と比較する。ひとつの実施例では、スケールのしきい値は、グローバルの(現在の画像の全体の乳房エリアで得られる)中央値の絶対偏差の倍数であり、ここでは倍数は、与えられた画像キャプチャ装置の特性のために実験的に決定される(3から5の倍数が典型的である)。異常値であるこれらのラプラシアンピクセルは、サージェリー段階414bでサージェリーマスク内にマークされる。また、サージェリー用にマークされたひとつのピクセルを取り囲むピクセルもまた、現在のスケールの標準偏差の関数のマークの拡張サージェリーマスク内にマークされる。現在のスケールの標準偏差の約3倍の拡張値は、テストされた実施例において受容可能なパフォーマンスを提供する。
サージェリーマスクは、周辺の中央段階416bに引き継がれる。段階416bは特定のピクセルの周辺の中央値を計算するので、サージェリー用にマークされたピクセルを除外して有効なピクセル数をカウントする。有効なピクセル数はまた、現在のピクセルのために保存される。多過ぎるピクセルがサージェリーのためにマークされたピクセルの周辺の中央値の計算から除外される場合、ピクセルの周辺の中央値は、それらの周辺のマスクされないピクセルの中央値と交換される。これは、高い湾曲エリアが次の段階のための中央値の計算をゆがめるのを防ぐ。メディアンフィルタ段階416bはそれゆえ、サージェリー段階414bの出力に基づき周辺の中央値の出力画像NMを生成する。
σスケール段階で、フィルタ410cからのガウシアン平滑化画像は、ラプラシアンフィルタ412c、サージェリー段階414c、およびメディアンフィルタ段階416cを介して処理され、これは、σスケール段階において対応するフィルタと同等に機能する。同一の処理は、同様に後続の段階においても生じる。
σスケール段階の初めに、システムは、可能性のある微小石灰化のピークを検索する。ピーク検出器418dは、3つの入力画像を受け取る:フィルタ410cからのガウシアン平滑化出力画像G(50ミクロンの、ガウシアンのぼかしの標準偏差で適応される);ラプラシアンフィルタ412dから出力される湾曲画像C;そしてメディアンフィルタ416dからの周辺の中央値画像NMである。ピーク検出器は、極大(8つのすべての周辺よりも大きな強度)であるピクセルについてガウシアン平滑化出力画像Gを検索する。極大値である各ピクセルG(i、j)のために、ピーク検出器418dは、比C(i、j)/NM(i、j)として、ノイズ正規化コントラスト比CRを計算する。
しきい値段階420dは、極大値G(i、j)の位置およびコントラスト比を受け取る。しきい値段階420dは、コントラスト比しきい値を利用する。コントラスト比しきい値は、与えられた組の入力画像特性のために実験的に選択されることができ、例えばサージェリーしきい値と同様の方法で計算されたように所望の感度を達成する。しきい値よりも高いコントラスト比を有する極大値の位置は、後の処理のためにピークリスト422dに記憶される。
同様のピーク検出およびしきい値化が後続のスケールで実行されて、追加のピークリスト422e、422f等を生成する。
各ピークリスト内のピークは、次に、個別に検査されて、ガウシアンフィルタ410bによる画像出力(例えば、オリジナルの画像をわずかに平滑化したもの)を使用して、見た目の大きさおよび形状と一致させるためのオブジェクトとされる。図5は、これがひとつのピークに対してどのように遂行されるかを表すフローチャート500である。各オブジェクトは、相対的なコントラスト比を有する単一のピクセルピークとしてスタートする。ブロック502は、ピークが検出されたものと同一スケールでの平滑化された画像において、ピークピクセルの周辺を検査し、かつ、オブジェクトの一部としてピークピクセルとともに包含するために最も明るい周辺を選択する。ブロック504は、選択された周辺のコントラスト比を、周辺の選択より前に存在したCRに加算することによって規定されたオブジェクトについて累積コントラスト比CRを計算する。ブロック506はその後、新しいピクセルの識別と更新されたCRを有するオブジェクトのメンバーシップリストを更新する。ブロック508は、ブロック502へ戻り合計Ns回繰り返し適用される。ここでNsは、ピークが検出されたスケールに依存しており、かつそのスケールに一致するピークのための全体のオブジェクトのメンバーシップを表すのに十分な大きさである(それゆれ、Nsは、おおよそスケールの二乗に比例して増大する)。
各繰り返しで、ブロック502は、すでに包含されたピクセルに隣接する、次に最も明るいピクセルを選択する。このようなNs回の反復の後、ブロック506により作成されたメンバーシップリストは、それらが加算された順番で、オブジェクトメンバーのピクセルのリストと各ステップでの累積的なCRを含む。ブロック508は、制御をブロック510に渡し、ブロック510は、最大のCRを有するメンバーシップのためにメンバーシップリストを検索する。オブジェクトメンバーシップは、このレベルまで取り除かれる。
プロセス500は次に、先の増大プロセスが算入不足の傾向があるので、拡張ステップ512を使用してオブジェクト境界をリファインする。図6を参照すると、代表的なオブジェクト境界602が描かれており、3つの同心のリング604、606、608で囲まれており、オブジェクト境界から1ピクセルの距離で間隔が開けられている。拡張ステップ512は、各リングを横断し、各ピクセルでの平均強度を計算し、かつ、オブジェクトの境界リング602を横断して平均強度を計算する。リング604のための二次導関数は、リング602と606との平均強度の合計からリング604の平均強度の2倍を差し引いたものとして計算される。リング606のための二次導関数は、リング604と608との平均強度の合計から、リング606の平均強度の2倍を差し引いたものとして計算される。リング606のための二次導関数がリング604のそれを超える場合、リング604がオブジェクトに加えられ、このプロセスが繰り返される(図示しない新たなリングが計算目的のために加えられる)。このプロセスは、最大の許容できる拡張に到達するまで、もしくは二次導関数の減少が新たに加えられたリングで観察されるまで、継続する。
オブジェクトの最適な最大範囲を見つけるべきオブジェクトメンバーシップの拡張の後に、プロセス500は、メンバーシップに基づいたオブジェクトコントラスト比を計算する。ひとつの実施例では、重み付けされた平均強度値が計算され、ここではオブジェクト境界線に近接するピクセルは、平均でより少ない重みを受け取る。
オブジェクトの境界の距離を割り当てるひとつの方法は、縮退関数(erosion function)によるものである。図7は、拡張されたオブジェクト境界のための代表的な縮退マップ700を表す。各ピクセルのカウンタはインクリメントされ、オブジェクトメンバーシップの境界のピクセル(左右上下の4つの周辺のうちのひとつはメンバーではない)は縮退される。このプロセスは、すべてのピクセルが縮退されるまで継続し、ピクセルループカウンタがオブジェクト境界からの距離を示す。この距離は、その後反転された縮退マップ710に示すように反転されて、例えば、Mが縮退マップ700のピクセルに割り当てられた最大の境界距離である場合、反転された縮退マップの値は、I=M−Dとして割り当てられ、ここではDは、マップ700の距離であり、Iはマップ710の距離である。
縮退マップ710は、コントラスト比の計算においてピクセルを重み付けするよう使用される。ひとつの実施例では、ピクセルはガウシアン重み付け関数に従って重み付けされ、マップ710からの最大の境界距離のために正規化され、境界から最大の距離にあるピクセルが1の重みを受け取り、かつ境界線のピクセルがe-1/2の重みを受け取るようにする。最終的に、プロセス500におけるブロック516は、オブジェクトのためのアップデートされた、重み付けされたコントラスト比WRCを計算する。重み付けされたコントラスト比WRCは、ひとつの実施例では、ガウシアン重み付け関数により重み付けされ、近傍の境界ピクセルの平均を差し引いた、各メンバーピクセルの強度値の平均である分子と、ガウシアン重み付け関数により重み付けされた、各メンバーピクセルの周辺の中央値の合計である分母とを使用する。
微小石灰化の候補は2つもしくはそれ以上の異なるスケールでピークを形成することが可能である。オブジェクトリストにおけるオブジェクトの重複を避けるために、オブジェクトの位置は、異なるスケールで発生するオブジェクトと比較される。至近距離で近接するオブジェクトは、重複するピクセルのために検査される;2つのオブジェクトのメンバーピクセルの交点が重複比(例えば、オブジェクトのひとつに関連されるピクセルの80%)を超える場合、より低い相対的なコントラストWCRを有するオブジェクトは削除される。
プロセス500における境界リファインメントは、オブジェクトメンバーシップを拡張するための全てのピクセルリングの平均値を使用するので、多くのオブジェクト特性の精度は、良好な境界リファインメントからの利益を得ることができると理解されている。重複チェック後に残るすべてのオブジェクトは、以下のようにさらなるリファインメントにさらされる。図8は、大まかなピクセルレベルで量子化された境界800を表し、これは、第1段階の境界決定の結果として生じる。良好な境界リファインメントは境界ポイントリスト810を作成し、そこではポイントは、量子化された境界800から移動されて、例えば“平滑化された”境界を作成する、高周波のコーナーを取り除く。平滑化された境界のポイントリスト810から、システムは、各ポイントでひとつの、一連の法線ベクトル820を計算する。リスト810の各ポイントはそれゆえ、法線ベクトルに沿った5つの可能性のある位置のいずれかひとつの最終位置にセットされ得る:スタート時の平滑化された位置から0、+0.5、+1、−0.5、もしくは、−1のピクセルである。選択された最終位置830は、法線に沿って測定された最大の二次導関数に基づいて決定される。
微小石灰化候補の上述の検出段階が、システムに、画像内の関心のあるオブジェクトの記述とともに画像内のオブジェクトの範囲の記述とを提供した後に、オブジェクトは、微小石灰化のクラスタを検出し分類するために様々なグループに分類され、かつ評価され得る。好ましくは、検出段階は、顕著な信号雑音比を有する視覚可能な(検出アルゴリズムにとって)オブジェクトを排除しようとせず、異なるタイプの分類可能な豊富なオブジェクト(画像内にそのようなものがある場合)が、システムへ引き継がれるようにする。オブジェクトの範囲は、画像マスクもしくはピクセルリストとして記述され得るが、好ましいオブジェクトの範囲の記述は、サブピクセル精度を有する境界ポイントリストであり、図10に示された代表的なオブジェクト1000で表されるようなものである。ピクセル補間は、システムにより必要とされるあらゆるポイントでの画像の値を得るために使用され得ることが理解される。また好ましくは、入力画像は、必要があれば、トレーニングイメージセット(下記でさらに説明される)と同じ解像度にサンプルもしくはリサンプルされる。ひとつの実施例では入力解像度は40ミクロン/ピクセルである。
図9は、ある実施例に従った、全体の分類化プロセスのブロック図900である。画像のオブジェクトリストは、まず、特徴計算段階910で受け取られ、各オブジェクトのための特徴セット(feature set)が計算される。第1の分類段階920は次に各オブジェクトに6つの確率を割り当て、6つの異なるオブジェクトタイプの各々につき1つの確率である。次に、確率プロット段階930は、分類化段階920から獲得された確率に基づき、位置プロットに対する平滑化された確率を作成する。第2の分類段階940は、各オブジェクトに5つの確率を割り当て、5つの異なるオブジェクトタイプの各々につき1つの確率である。オブジェクトのクラスタ化段階950は、可能性のある悪性腫瘍をいくぶん示しかつごく近接したオブジェクトを集めてクラスタを作る。各クラスタについて、クラスタ特徴計算段階960はクラスタの特徴を計算する。最後に、第3の分類器970は、クラスタが悪性である確率を決定する。
第1の分類化段階は、ブロック910で計算された個々の特徴に基づいて各オブジェクトに6つの確率を割り当てる。ひとつの実施例で使用される個々の特徴は次のようなものである:コントラスト比、アスペクト比、幅、インベクシティ(invexity)、エッジバリアンス(edge variance)、そしてリッジ比である。それぞれが順番に説明される。
コントラスト比は、局所的な強度および雑音統計(noise statistics)に基づく特徴である。2次元のガウスラプラシアンフィルタ(Laplacian of Gaussian filter, LoG)は、35ミクロンのガウシアン平滑化の標準偏差で、入力画像に関して計算される。平均雑音指数は、オブジェクトを取り囲む周辺のメディアン絶対LoGフィルタ(median absolute LoG filter)の出力NMを計算することによって獲得される。オブジェクトのための平均の相対コントラストは、オブジェクト境界1000内の平滑化画像の強度を平均化し、かつ境界1000のちょうど外側の平滑化された平均強度値を減算することによって計算される。ひとつの実施例では、オブジェクト境界1000内の画像強度が重み付されて、境界付近のピクセルは、計算でより少ない重み付けを受け取る。コントラスト比CRは、C/NMと規定される。
アスペクト比は、オブジェクトの伸長の測定である。ひとつの実施例では、幅の測定は、ポイントで境界の法線であるオブジェクトの各境界ポイントから、当該オブジェクトの反対側のエッジまで成される。図11は、代表的なオブジェクト境界1000における5つのポイントについてのこのような測定1101‐1105を表す。実際の実施例では、21個の測定が、このオブジェクトのために21個の境界ポイントのそれぞれひとつになされるが、ここでは明確にするために5つのみが示される。アスペクト比ARは、中央値幅MEDと最大幅MAXの2つの幅の測定を使用し、ARはMAX/MEDと定義される。第3の特徴である幅Wは、MEDとして定義される。
インベクシティ(invexity)とは、オブジェクトの形状の複雑性の測定である。図12で描かれるように、凸包1210は、オブジェクトの形状1000を包囲するように構成される。インベクシティIは、AO/ACHと定義された場合、凸状のオブジェクトについて最大値1を有し、ここでAOとは、境界1000に包囲されたオブジェクトのエリア(面積)であり、ACHとは凸包のエリアである。3次元の実施例では、3次元の凸包は、上部と下部の包囲部分に分割され得る。インベクシティIは、VCH/VOと定義された場合、凸状のオブジェクトについて最小値1を有し、ここでは、VOは、下部の包囲部分により包囲されたオブジェクトの体積(volume)であり、その強度値は1000であり、VCHは凸包の体積である。実施は、最小値もしくは最大値を使用し得ることに注意すべきである。例えば、上述の実施例では、2次元の例が0と1との間の値を提供し、その結果、最大値1が得られる。3次元の実施例では、逆方程式が使用されて、その結果、1と無限(インフィニティ)との間の値が得られる。
エッジバリアンスEVは、オブジェクトのエッジの“テクスチャ”の測定である。未処理の差分の測定ΔIは、オブジェクトのちょうど内側のポイントとオブジェクトのちょうど外側のポイントとの間の、境界に直交する強度差を計算することでなされる。図13は、代表的なオブジェクトの境界1000の5つのポイントについてのこのような測定1301―1305を表す。実際の実施例では、21個の測定が、このオブジェクトのために21個の境界ポイントのそれぞれひとつになされるが、ここでは明確にするために5つのみが示される。差分ΔIは、差分の絶対平均によってそれぞれが正規化され、エッジバリアンスEVは正規化された差分の標準偏差と定義される。
リッジ比RRは、オブジェクトについて観察される曲率と、オブジェクトのちょうど外側のエリアについて観察される曲率差の測定である。オブジェクトの曲率がその周辺の曲率と大きく異ならない場合、血管の微小石灰化で生じ得るような、通常の明るいリッジに沿ったわずかに高い輝度の領域を示すかもしれない。オブジェクト境界1400のために図14で示されるように、エッジ方向には、11.25度の間隔があるとみなされる(第1の測定方向1401に番号が付されている)。
8つの方向のそれぞれで、9つのサンプルポイントが計算され、中心ポイントはオブジェクトの重心に位置され、3x3グリッドで広がる他の9つのポイントは現在の方向に配向される。ひとつの実施例では、重心以外の各ポイントは、境界1400の外側に完全に置かれるべきである。
適所の9つのポイントにより、6つの第2の導関数がD2−D2のラインに沿って計算される。ひとつのリッジ比は1/2(D2+D2)/D2と定義され、その他は1/2(D2+D2)/D2と定義される。これらの比のいずれかが、このオブジェクトで今までに観察された最大比よりもかなり大きい場合には、オブジェクトのリッジ比RRがその値にセットされる。すべての8つの配向が検査された後、特徴RRは、最大で16の測定を表す。ゼロに近い値が示すのは、オブジェクトが拡張されたリッジの一部でない可能性が高いということであり、一方で1に近い値が示すのは、オブジェクトが拡張されたリッジの一部である可能性が非常に高いということである。
トレーニング段階で、同様のオブジェクト検出プロセスおよび特徴計算が、悪性を示す微小石灰化を有する、もしくは有しない数多くの放射線画像を含むトレーニングセットで実行される。放射線画像を解釈する訓練をされたひとりもしくはそれ以上の人物を使った、ヒューマン−インタラクティブの分類は、トレーニングセットで発見された各オブジェクトについての分類のタイプを示す。ひとつの実施例では、可能性のある石灰化のタイプは、悪性、良性、ルーセント(lucent)、血管、引っかき(フィルム取扱いの人為的なもの)、および組織(石灰化ではない)を含む。トレーニングセットオブジェクト、特徴、および人による入力分類の精査を使用して、確率密度変数(PDF)データセットが計算される。
実行時に、各オブジェクトのために計算された6つのオブジェクトの特徴は、第1の分類器920に入力される。分類器920はPDFデータセットを調べて、トレーニングデータの特徴分散に基づいて、6つのオブジェクトの特徴は6つの確率を出力する。
MC1 オブジェクトが悪性の微小石灰化である確率
BC オブジェクトが良性の微小石灰化である確率
LC オブジェクトがルーセントの微小石灰化である確率
VC オブジェクトが血管の微小石灰化である確率
SCRATCH オブジェクトがフィルムのアーチファクトである確率
TISSUE オブジェクトが石灰化もしくはアーチファクトでない確率
オブジェクトの特徴セットには、単一オブジェクトタイプを非常に示し得るものもあり、一方で他の特徴セットは、よりあいまいな分類を提示し得る(すなわち、類似の特徴セットがオブジェクトのいくつかのタイプで観察されている)。従って、ひとつの実施例では、単一オブジェクトの確率は第2の分類段階に与えられ、第2の分類化段階では、オブジェクトの分類は、周辺のオブジェクトの単一オブジェクト分類により影響を与えられ得る。
図15は第2の分類段階で使用されるための確率プロットの生成を表す。特定の代表的なサブ画像1510は、サブ画像に示されるように、分散された9つのオブジェクトPからPを含む(全体の画像が本明細書の記述で取り扱われるが、ここでは明確にするためにサブ画像のみが示される)。確率プロット生成930(図9)は、PMCマップ1520、PBCマップ1530、PLCマップ1540、およびPVCマップ1550の、4つの対応するマップを作成する。各マップは初期でゼロ化される。各マップにおいてオブジェクトPに対応する位置で、分類器920から獲得された、各分類器の確率PMC1、PBC1、PLC1、およびPVC1が記録される。このプロセスはオブジェクトPからPのために繰り返される。
一度オブジェクト確率プロットが発生されると、ガウシアン平滑化および正規化1560が、各プロット1520、1530、1540および1550に適応されて、対応する平滑化された確率プロット1522、1532、1542および1552を生成する。それぞれの平滑化された確率プロットにおいて、与えられたオブジェクトの位置は、それ自身の第1の分類器の値によってではなく、確率および距離の双方の寄与を有する他の局部的なオブジェクトの第1の分類器の値によって通知される。平滑化のひとつの代替は、各オブジェクトについて、平滑化関数と等価なガウス関数により重み付けされた距離、互いのオブジェクトからの位置(もしくは大きな距離内の各オブジェクト)の確率の貢献を計算することである。
オブジェクト位置および平滑化された確率プロット1522、1532、1542および1552は、4つのプロット上の対応する位置から読み取られるように、各オブジェクトの値のために4つの特徴を抽出するために使用される。これらの4つの特徴は、各オブジェクトを囲む周辺を示す。例えば、多くの近接するオブジェクトが悪性の高い確率を有する場合、これは隣接領域におけるすべてのオブジェクトについての悪性の特徴を増加させる。
平滑化された確率プロットから獲得される4つの特徴は、第2の分類器940に入力される。第1の分類器920と同様に、分類器940はトレーニングセットから獲得されたPDFデータに依存する。分類器940は5つの分類の確率を出力する:
MC2 オブジェクトが悪性の微小石灰化である確率
BC オブジェクトが良性の微小石灰化である確率
LC オブジェクトがルーセントの微小石灰化である確率
VC オブジェクトが血管の微小石灰化である確率
OTHER オブジェクトが上記のどれでもない確率
クラスタ動作950は、物理的な近接に基づいてオブジェクトをグループ化する。クラスタ化に加わるオブジェクトにとって、PMC1およびPMC2の、2つの悪性の微小石灰化確率は、所望の感度に基づいてしきい値条件を満たさなければならない。例えば、図16は画像1600の線画を表しており、そのようなしきい値に見合う検出された微小石灰化オブジェクトの位置を描いている。サブ画像1606がその下に、拡大されて表される。ひとつの実施例では、ミニクラスタがまず、互いに最小距離内にある、しきい値が満たされたオブジェクトを結合することによって形成される。例えば、クラスタ化されていないオブジェクトが順番に検査されて、半径約1ミリメートル内に位置された他のクラスタ化されていないオブジェクトとミニクラスタを形成する。サブ画像1606では、ミニクラスタ化は、I、II、およびIIIと番号付けされた、3つのクラスタとなる。
次に、ミニクラスタは、潜在的により大きなクラスタを形成するために個々のオブジェクト位置として扱われる。例えば、最大の数のオブジェクトを有するミニクラスタ(サブ画像1606ではミニクラスタI)でスタートして、例えば約5ミリメートルのより大きな半径が検査されて、このより大きな半径内のいずれかのミニクラスタまたはオブジェクトが結合される(サブ画像1606ではオブジェクトIV)。新しいクラスタの5ミリメートルの半径が検査されて、同様に、クラスタIIが結合される結果となり、図16の例にあるように、オブジェクトVの結合、ひいてはクラスタIIIの結合が生じる。クラスタ化の各ステップで、クラスタはそのメンバーによって、およびそのメンバーを含む凸包によって、描写される。凸包1604は、サブ画像1606のクラスタとなった最終的な包囲部分を表す。画像描写1620は、全体画像のために選択されたクラスタを表す。クラスタ化されないオブジェクトのいずれも、クラスタ化後に無視される。
クラスタ特徴計算タスク960は、最終の分類器段階970(図9)で使用される特徴を計算する。ひとつの実施例で使用されるクラスタ特徴は次のようである:オブジェクトの数、局部的な凹包のアスペクト比、局部的な凹包の幅、最大の相互距離(interdistance)、逆悪性値、逆良性値、逆ルーセント値、および2つの乳房座標xおよびyである。各特徴が順番に説明される。
オブジェクトnの数は自己記述特性である。システムは、各クラスタが形成されると、クラスタメンバーシップの数を数え、クラスタ化の最後で各クラスタのためにnを含む。
局部的な凹包のアスペクト比は、クラスタ化動作の間にクラスタを描写するのに使用されるものとは異なるポリゴンを使用する。図17を参照すると、ポリゴン1700は、オブジェクトのクラスタの周辺に形成された凸包を表す(x’sで表される)。凸包は、反時計回りの場合は、すべてのオブジェクトを包囲する最小のポリゴンであり左回りをすることなく旋回し得る。アスペクト比特徴の計算のため、局部的に凹状のポリゴン1710が、ポリゴン1700から形成される。ポリゴン1710は、ポリゴン1700の内側であるが、境界線を規定するエッジの付近に置かれたオブジェクトを加えることにより、局部的な凹面を有して形成される。例えば、オブジェクト1712は、オブジェクト1714と1716の間に線を引く。ポリゴン1710は、ポリゴン1700のオブジェクト1714と1716を接続する線分を崩して、それを、2つの線分に置換し、ひとつはオブジェクト1712と1714を接続し、もうひとつはオブジェクト1712と1716を接続する。凹面を加えるために崩され得る最大の凹部の角度もしくは最小の線分の長さといった様々な制約が、得られる効果を制御するために使用され得る。
アスペクト比特徴は、ポリゴン1710から計算される。特徴計算機は、ポリゴンの第2のモーメント(本実施例では、オブジェクト位置ではなく、エリアによって重み付けされる)を見つける。第2のモーメントの固有値の比(最小により除算された最大)は、クラスタのアスペクト比として定義される。
局部的な凹包の幅もまた、ポリゴン1710から計算される。ポリゴン1710の最大距離が見つけられる。幅は、最大距離のベクトルに対し垂直の最小幅として定義される。
最大の相互距離特徴は、クラスタ内の隣接したオブジェクトのペアに注目する。この状況で“隣接”は、クラスタ内のすべてのオブジェクトが隣接ツリーにより接続されるまで、クラスタ内の最も近い2つのオブジェクトを隣接するものとして割り当て、(、次に近い2つのオブジェクトを隣接するものとして割り当てること等により、決定され得る。このプロセスで作成される最終的な結合の長さが、最大の相互距離特徴である。
次の3つの特徴である、逆悪性値、逆良性値、および逆ルーセント値は、第2段階の分類器により出力される個々のオブジェクト確率により計算される。例えば、第2段階の分類器によって悪性の確率p(i)をそれぞれ割り当てられたn個のオブジェクトのために、逆悪性値INVMCが次のように定義される。
Figure 0005864542
特徴としての確率分布は、この方法で表現されると、分類器で操作しやすいことが分かった。良性およびルーセントの逆値は、それらが個々に第2段階分類器のオブジェクト確率pBC(i)およびpLC(i)を使用する場合を除いて、同様に計算される。
最後の2つの特徴は、患者の体格、乳房の大きさ、および乳房の形に大きなばらつきがあるにもかかわらず、クラスタ位置に重要かつ分類可能な特徴を形成するのを可能にさせる新たな座標系に従った、乳房のクラスタ位置を表す。乳房X線写真の典型的な放射線視野は、中外斜位方向の視野(MLO、図18では視野1810で表される)と頭尾方向の視野(CC、図18では視野1820で表される)とを含む。その他の、あまり一般的でない視野もまた時として撮影され、同様の座標系で表され得る。
MLO視野は、胸筋ライン1812および皮膚ライン1814を見つけるよう分割される。乳頭1816は、座標系において、胸筋ライン1812に対して直角に測定されて、胸筋ライン1812から最も遠い皮膚ライン上のポイントとして定義される。座標系のx軸は、乳頭部分1816から胸筋ライン1812まで延びる線であり、値0は、乳頭部分に位置し、値100は、胸筋部分に位置する。胸筋ラインは、実際にはx軸位置で画像内に視覚可能ではあり得ないのだが、必要であれば下に、視覚可能な部分を拡張して座標系を形成すると考えられる。それゆえ、乳房におけるあらゆるポイントのx座標は、乳房の乳頭(前方)から乳房の胸筋ライン(後方)までの距離のパーセンテージである。
乳房座標系のy座標もまた、0から100のスケールで表される(x軸の下方のポイントは0から−100のスケールで表される)。しかしながら、スケールは、100もしくは−100が定義されるので、皮膚ラインが交差されるx値でx軸と直交する点として、与えられたx座標に対してx値とともに変化する。乳房の切断面のプロファイルは、乳頭部分から胸筋ラインまでを横断するひとつの画像として拡大するので、胸筋ライン付近のスケールの単位は乳頭部分付近のスケールの単位よりも著しく大きい。しかしながら、正規化されたスケーリングは、乳房位置の関数としてのオブジェクト発生の統計度数を、乳房の形や大きさの相違を問わずに表に表されるのを可能とする。代表的な座標のいくつかがMLO写真1810で表される。
CC視野1820では、胸筋ラインは視認できないことが多い。CC視野の座標系は、胸筋ライン1812が視野エッジ(view edge)に対して垂直であると仮定し、それゆえ乳頭部分1816が、画像エッジから最も離れた皮膚ライン1818上の点である。座標系はまた、胸筋ライン1812が、MLO視野1810で測定されたものと同一の、乳頭部分からの絶対距離に位置されると仮定する。このx軸の定義を仮定して、MLO視野で使用されるものと類似の、x軸対皮膚ラインy座標系(x-axis to skin-line y-coordinates system)が、CC視野に採用される。代表的な座標のいくつかは、MLO視野1820で表される。
上述の乳房座標系を使用して、クラスタのxおよびyの重心は、第3の分類段階970に入力される最終的なクラスタ特性となる。
分類段階970は、特徴計算960から9つのクラスタ特徴を受け取る。トレーニング段階で、同様のクラスタ化プロセスおよびクラスタ特徴計算が、悪性を示す微小石灰化クラスタを有する、もしくは有さない数多くの放射線画像を含むトレーニングセットで実行される。放射線画像を解釈する訓練を受けたひとりもしくはそれ以上による、人による相互分類は、トレーニングセットにおいて発見されたクラスタの悪性/非悪性を示す。トレーニングセットオブジェクト、特徴、および人による入力分類の精査(truthing)を使用して、クラスタ特徴の確率密度関数(PDF)データセットが計算される。PDFデータセットは、各クラスタの悪性の確率を決定するよう調べられる。その確率が放射線科医にとってマークとなり表示されるかどうかは、CADプロセスの感度セットに依存する。
図19aおよび19bは、ある実施例で使用され得る分類器306の一例を表す。一般的に分類器は、2つもしくはそれ以上の分類それぞれにPDF値をまず推定し、その後異なる分類のPDF値を確率と組み合わせることによって、評価ポイントが特定の分類に属する確率を推定する。確率を推定するためにPDF値を組み合わせることは、周知のベイズ法のような技術を使用して実行され得る。分類器はまた、確率値ではなく、尤度比を発生させるためのPDF推定を使用することもできる。本実施例では、分類器306は、PDF推定を確率ユニット1901に提供する1つもしくはそれ以上のPDFユニット1900を含む。一般的に、PDFユニット1900は、オブジェクトのためのそれぞれの可能性のある分類のPDF推定を決定する。例えば、分類器306が微小石灰化を分類するのに使用される実施例では、悪性の微小石灰化、良性の微小石灰化、ルーセントの微小石灰化、血管の微小石灰化、フィルムアーチファクトなどのそれぞれのためにPDFユニット1900があり得る。PDFユニット1900にかかる詳細な説明は下記で提供される。
ここで図19bを参照すると、ある実施例に従った分類器306(図3参照)により使用され得るPDF推定器1900が表されているが、異なる分類器確率ユニットも使用され得る。PDF推定器1900の周辺定義ユニット1902は、各表示ポイントの周辺の大きさ、もしくは表示ポイントのビン(bin)を定義する。ある実施例の中には、実際に測定された特徴データに良く適合する関数記述を可能とするために、変化する周辺サイズが所望され得るものもある。本実施例では、周辺定義ユニット1902は、例えばデータベースから受信されたトレーニングデータを評価して、トレーニングデータに含まれた表示ポイントにふさわしい周辺サイズを決定する。周辺定義ユニット1902は、ベクトルS→を(ベクトルは、各表示ポイントのスケールパラメータ、もしくは各特性または次元のための表示ポイントのビン(bin)を表す)、周辺決定ユニット1904へ提供する。ある実施例では、周辺定義ユニット1902は、オフラインで実行され、例えばS→のような結果が、後のアクセスのためにデータベースに記憶されるように、格納される。ベクトルS→は、周辺決定ユニット1904により使用されて、各次元または特徴のための評価ポイントxのために使用される周辺サイズである、スケールパラメータベクトルσ→を決定する。スケールパラメータベクトルσ→は重み決定ユニット1906に提供されて、重みwを決定し、どの程度の重みがトレーニングデータの表示ポイントに配分されるかを特定する。一度決定されると、重みwは局部推定器(local estimator)1908に提供される。局部推定器1908は、重みwをトレーニングデータに加えて、ポイントxのためのPDF推定を決定し、それは例えばデータベースに記憶され得る。以下の段落はより詳細な説明を提供する。
複雑かつ/もしくはまばらのロングテール分布を有する、実世界の多変数システムのためのPDF推定は、歴史的にいくつかの固有の問題に阻まれてきた。まず、よく研究されてはいるが、高度に制約されたパラメトリックモデルはたびたび、実世界の装置で受けるPDFを正確に表示することができない。次に、使用されるモデルが高度にフレキシブルであるか、もしくはノンパラメトリック(non parametric)(例えば、パルツェン窓に基づいたアプローチ)である場合、推定値はランダムなサンプル変化のために、信用性に欠けることがある。これはとりわけ、ほとんどサンプルがないPDFのテール領域に当てはまる。推定器の信頼性を改善する方法は、扱いにくい計算もしくはメモリ要求という結果になり得る。
本明細書で説明される実施例は、PDF推定のための新たなアプローチを用いる。完全なPDFを推定して記憶する代わりに、データセットが記憶されて、PDFのあらゆる特定の局部領域のためのPDF推定関数のオンザフライ(on-the-fly)の計算を可能とする。この方法で推定されたPDFを記憶するために必要とされるデータ量は、おおよそn×Mのオーダーであることができ、ここでは、nはシステムの次元を表し、Mは表示ポイントrの数を表す。各表示ポイントは、推定されている実際の分布からの1つもしくはそれ以上のサンプルを表示する。例えば、サンプルセットにおける各サンプルは、単位重みを有するそれ自身の表示ポイントを受け取ることができる。各サンプルは交互に、1よりも少ない重みを有する表示ポイントを介して表現され得る。例えば、2つの異なる多次元測定が同一サンプルから生じると信じられる場合、2つのサンプルのそれぞれは、0.5の重みを有する表示ポイントを与えられ得る。最終的に、表示ポイントを、個々のサインプルの重みと等しい重みを有する単一の表示ポイントに交換することで、表示ポイントは、測定空間に近接するいくつかのサンプルを“ビン(bin)”し得る。ビンされたサンプル表示ポイントのための実際の多次元サンプル値は、各次元においてビンの中心、ビンされたサンプルの平均、ビンされたサンプル値の中央値などであり得る。
表示ポイントに加えて、いくつかの他の入力が、推定を実行する前に選択される。ひとつの入力は推定ポイントxであり、そこでPDFが推定され得る。他の入力はベクトルS→であり、ある実施例では、周辺定義ユニット1902によって提供され、スケールパラメータベクトルσ→の計算を可能にする一連のスケールパラメータを表す。スケールパラメータベクトルは、どの表示ポイントが推定で使用されるかを決定し、また、含まれた各ポイントに加えられる重みを決定する関数のためのパラメータであり得る。他の入力は、重み付け関数g(σ→)であり、これは、推定に使用される表示ポイントに実際に加えられる。最終的な入力は、パラメータ化された推定関数f(x,θ)であり、ここでθは、関数のパラメータマトリックスである。
図20は、1次元の確率変数のための一般的なPDF2000を表し、同じ確率変数のサンプル2002の母集団から描かれたサンプル分布のヒストグラム上に重ね合わせられたものである。十分な多数のポイントを有して、ヒストグラムは、PDF2000の形状の量子化されたバージョンという傾向があり、これは、パルツェン窓のような従来技術によって推定され得る。PDF2000のテールに向かうと、そのようなアプローチは、信頼し得る推定を作り出すのが難しい。テールにたびたび表される少数のサンプルは、テールにおいて、単純な窓による推定(simple windowed estimate)が、少数のサンプルのために高い変数を有するか、もしくは大きな線形窓のアプリケーションのために、実際のPDFの本当の形状を構成し損なうかのどちらかであることを意味する。
好ましい実施例では、入力データは予め計算されたパラメータを含み、そこから適切なスケールパラメータが、例えば周辺決定ユニット1904によって、入力評価ポイントのために計算され得る。概して、スケールパラメータは分布のテールに向かうと大きくなり、表示ポイントスペースのよりデータの豊富なエリアではより小さくなる。別個のデータ構造がすべてのサンプルスペースのスケールパラメータの記述を記憶するために使用され得るが、ひとつの実施例では、各表示ポイントが、オンザフライでスケールパラメータベクトルを計算するために使用され得るパラメータを記憶する。
図21は、表示ポイントのスケールパラメータの記憶および使用のひとつの実施例を表し、そこでは各表示ポイントrはまた、最小のスケールパラメータ値σMIN(i)、およびスケールパラメータ関数σ(x)=σMIN(i)+σdσ(i)|x‐r|のためのスケールパラメータスロープσdσ(i)を説明する。それゆえ、あらゆる評価ポイントXのために、スケールパラメータ関数はスケールパラメータの計算を可能にする。評価ポイントで使用するためのスケールパラメータは、従って、すべてのiのために評価される、最小のスケールパラメータ関数値σ(x)として定義されることができ、その最小の値σ→は重み決定ユニット1906へ提供される。実際のアプリケーションでは、スケールパラメータは評価ポイントに近接する表示ポイントのために評価されることのみを必要とされ得る。これは図22の検査により観察されることができ、そこではスケールパラメータ関数σ(x)は、各評価ポイント(rにはσ(x)、rにはσ(x)、rにはσ(x)が番号付される)のためにプロットされる。値σ(x)は、すべての他の表示ポイントに関連するスケールパラメータ関数値よりも低く、それゆえ、評価ポイントx0のためのスケールパラメータとして選択される。選択的に、異なるスケールパラメータ関数値が、“min”以外の、数学関数に結び付けられ得る(例えば、種々の値の平均もしくは特別な百分率が使用され得る)。
多次元の、異なるスケールパラメータは、典型的に各次元で、その次元におけるx周辺の局部的にまばらの表示ポイントに応じて発見される。
各次元のスケールパラメータが発見されると、スケールパラメータは次に、評価ポイントでのPDFを推定するために使用される表示ポイントを制限するのに使用され得る。例えば、スケールファクターの倍数のような、評価ポイントからの距離に基づいた実際の大まかなルールが、図22に表された計算に実際には影響しえない表示ポイントを除外するために使用されることができ、それゆえ計算時間を省く。評価ポイントからどれだけ離れた場所にあろうと、順番に、すべての表示ポイントが評価され得る。
スケールパラメータはまた、重み決定ユニット1906(図9)によって表されるように、定義された重み付け関数w=g(r;x,σ(x))を使用して、各表示ポイントのための全体の重みを計算するために用いられる。
選択された、重み付けされた表示ポイントは、局所推定器1908によって計算された、パラメータ化された推定器関数f(x,θ)についてパラメータマトリックスθを計算するために使用される。ある実施例では、パラメータマトリックスは、関数を最大化するために計算される:
Figure 0005864542
ここで、h()とは単調関数である。
いくつかの関数選択にとって、モデル化されたPDFがn次元空間におけるすべてのポイントにとってゼロ以外である場合、数式は、パラメータマトリックスを解決するために使用され得る。ひとつのそのような例においては、重み付け関数g()は、ガウス関数であり、h()はlog関数であり、かつf()は二次指数関数である:
Figure 0005864542
ここで、
Figure 0005864542
であり、Nとは表示ポイントの数である。
多次元解において、変数およびパラメータは多次元であることの理解をもって、上記の数式がなお適用される。
上述の一般的なアプローチはまた、PDFがn次元空間のいくつかの部分でゼロの値を有する場合にも適用されうる。このアプローチはまた、h、g、もしくはfが直接的に解決し得る方式でない場合にも適用され得る。このようなケースでは、パラメータマトリックスは、ニュートン・ラプソンの最適化のような数値法を使用して、近似値が求められ得る。
一旦、推定値関数のためのパラメータマトリックスが発見されると、PDF値を獲得するために評価ポイントで推定値関数を評価することが可能である。
広汎なアプリケーションが、ある実施例に従ったPDF法のために存在する。正確なPDF推定により利益を享受し得る分野は、パターン認識、分類、推定、コンピュータビジョン、画像処理、および信号処理を含む。PDF推定データのコンパクトな空間の必要性は、PDFデータセットのコンパクトな記憶、アップデート分布、追加の識別変数および/もしくは分類の参入などのために実用性を加える。
いくつかの実施例および別の実施が説明されたが、多くの他の修正および実施技術が本開示を読むことで当業者にとって明らかとなる。所与の実施例では、推定器関数パラメータの値を求めるために使用される数式は、その最小化がパラメータマトリックスを選択するように定義され得る。スケールパラメータのための適切な解は、表示ポイント関数毎の事前計算なしで計算するのにはより費用がかかることがあり得るが、所与の評価ポイントのためのスケールパラメータは、表示ポイントから直接、実行時に計算され得る。
別段の指示がなければ、本明細書で説明されたすべての関数は、ハードウェアとソフトウェアとの両方で、もしくはそれらのいくつかの組合せにおいて実行され得る。しかしながら、好ましい実施例において、関数は、別段の指示がなければ、コンピュータプログラムコードのようなコード、ソフトウェア、および/もしくはそのような関数を実行するために暗号化された集積回路に従って、コンピュータもしくは電子データプロセッサのようなプロセッサによって実行され得る。
例えば、図23は、ある実施例に従って使用され得る、コンピュータシステム2300のブロック図である。しかしながら、本明細書で説明されるコンピュータシステム2300が説明目的のためだけに提供され、その他の装置もまた使用され得ることに注意すべきである。コンピュータシステム2300は、例えば、デスクトップコンピュータ、ワークステーション、ノートパソコン(ラップトップコンピュータ)、携帯情報端末、特定のアプリケーション用にカスタマイズされた専用装置などを含み得る。従って、本明細書で説明されるコンピュータシステム2300の構成要素は、説明目的のためであり、本発明の他の実施例は追加の、もしくはより少ない構成要素を含み得る。
ある実施例では、コンピュータシステム2300は、1つもしくはそれ以上の入力装置2312(例えば、マウス、キーボード等)と、ディスプレイ2314、プリンタ2316といった1つもしくはそれ以上の出力装置とを装備した、処理装置2310を含む。好ましくは、処理装置2310は、中央処理装置(CPU)2318、メモリ2320、大容量記憶装置2322、ビデオアダプタ2324、I/Oインターフェース2326、および、バス2330に接続されたネットワークインターフェース2328を含む。バス2330は、メモリバスもしくはメモリコントローラ、周辺バス、ビデオバス等を含む、1つもしくはそれ以上のあらゆるタイプのいくつかのバスアーキテクチャであり得る。CPU2318は、あらゆるタイプの電子データ処理装置を含み得る。例えば、CPU2318は、インテル社もしくはアドバンスド・マイクロ・デバイシーズ社製の処理装置(例えば、シングルコアもしくはマルチコアのもの)、縮小命令セットコンピュータ(RISC)、特定用途向け集積回路(ASIC)等を含み得る。メモリ2320は、スタティックランダムアクセスメモリ(SRAM)、ダイナミックランダムアクセスメモリ(DRAM)、シンクロナスDRAM(SDRAM)、読出し専用メモリ(ROM)、それらの組合せ等の、あらゆるタイプのシステムメモリを含み得る。ある実施例では、メモリ2320は、起動時に使用するためのROMおよび、プログラム実行時に使用されるデータ記憶のためのDRAMを含み得る。メモリ2320は、1つもしくはそれ以上の不揮発性メモリ(non transitory memory)を含み得る。
大容量記憶装置2322は、データ、プログラム、およびその他の情報を記憶するために構成され、かつ、そのデータ、プログラム、および他の情報をバス2328を介してアクセス可能にするように構成された、あらゆるタイプの記憶装置を含み得る。ある実施例では、大容量記憶装置2322は、CPU2318によって実行されるためのプログラムを記憶するよう構成される。大容量記憶装置2322は、例えば、1つもしくはそれ以上のハードディスクドライブ、磁気ディスクドライブ、光学ディスクドライブ等を含み得る。大容量記憶装置2322は、1つもしくはそれ以上の持続性メモリを含み得る。
ビデオアダプタ2324およびI/Oインターフェース2326は、外部の入力装置および出力装置を処理装置2310に接続するためのインターフェースを提供する。図23に示されるように、入力および出力装置の例は、ビデオアダプタ2324に接続されたディスプレイ2314と、マウス/キーボード2312と、I/Oインターフェース2326に接続されたプリンタ2316とを含む。他の装置は、処理装置2310に接続され得る。
ネットワークインターフェース2328は、有線もしくは無線であることができ、処理装置2310にネットワーク2332を介して遠隔装置とやりとりするのを可能にする。ある実施例では、処理装置2310は、ローカルエリアネットワークもしくは広域ネットワークに接続されて、他の処理装置、インターネット、リモート記憶施設等との通信を提供する。
コンピュータシステム2300が他の構成要素を含むことに注意すべきである。例えば、コンピュータシステム2300は、電力供給、ケーブル、マザーボード、リムーバブル記憶媒体、ケース、ネットワークインターフェース等を含む。これらの他の構成要素は、図示されないが、コンピュータシステム2300の一部と考えられる。さらに、コンピュータシステム2300のどの構成要素も複数の構成要素を含むことに注意すべきである。例えば、CPU2318は複数のプロセッサを含むことができ、ディスプレイ2314は複数のディスプレイ等を含むことができる。他の実施例のように、コンピュータシステム2300は、直接接続された複数のコンピュータシステムおよび/もしくはネットワークを含み得る。
さらに、1つもしくはそれ以上の構成要素は、遠く離れて設置され得る。例えば、ディスプレイは、処理装置から遠く離れて設置され得る。本実施例では、位置および/もしくは異常タイプといったディスプレイ情報は、ネットワークインターフェースを通じて、ディスプレイ装置もしくは接続されたディスプレイを有する遠隔の処理装置に伝送され得る。
いくつかの実施例および別の実施が説明されたが、多くの他の修正および実施技術が、本開示を読むことで当業者に明らかとなる。様々なパラメータおよびしきい値があり、かつ、これらは与えられたデータ特性で与えられた実施のために変更することができ、実験および究極の性能と計算時間のトレードオフが所望の動作ポイントに到達するために必要とされる。記憶、ツリー、ハッシング、および他のデータ操作方法といった実行方法が所望のパフォーマンスを達成するよう要求通りに適用され得る。少なくとも1つの特定の方法が各特性タイプの計算のために説明されたが、多くの別の方法および特性の定義付けが、類似のもしくは許容可能なパフォーマンスにより類似の特性を計算するために存在する。好ましい実施例は、特性セットを有するPDF分類実施を使用する。開示された特性セットは、PDF分類アプローチを使用しないCADシステムにおいてもまた有利であり得る。同様に、本明細書で説明された乳房座標系もしくはその確率変数(variants)が他のCADアプローチにおいて適用性があると信じられる。
本明細書は、“ある(an)”、“1つの(ひとつの、one)”、“他の(another)”、もしくは“いくつかの(some)”実施例に言及したが、各々のそのような言及が同じ実施例のために存在すること、もしくは特性がひとつの実施例にのみ適用されることを、必ずしも意味するものではない。


Claims (17)

  1. 画像の異常を検出するためにコンピュータ装置によって実行される画像データの処理方法であって、当該方法は、
    デジタル画像を畳み込みし、異なるスケールで複数の第1の畳み込まれた画像を生成し、
    前記複数の第1の畳み込まれた画像の各々を畳み込みし、これにより、複数の第2の畳み込まれた画像を生成し、複数の第1の畳み込まれた画像の各々および複数の第2の畳み込まれた画像の対応する1つは、複数のステージの各々に対応し、
    複数のサージェリーマスクを生成し、各サージェリーマスクは、現在のステージの複数の第2の畳み込まれた画像の1つと、前のステージからの複数の第2の畳み込まれた画像の1つとに少なくとも基づくものであり、
    複数のサージェリーマスクの各ピクセル位置についての周辺中央値を決定し、
    現在のステージからの第2の畳み込まれた画像、前のステージからの第1の畳み込まれた画像、および現在のステージについての周辺中央値に少なくとも基づき1つもしくはそれ以上のピークを識別し、
    各サージェリーマスクは、ピクセルの相対的なコントラストをしきい値と比較し、しきい値よりも大きいピクセルを第2の畳み込まれた画像から取り除く、方法。
  2. 前記複数のサージェリーマスクの生成は、少なくとも前のステージからの周辺中央値を用いて実施される、請求項1に記載の方法。
  3. ピクセルの相対的なコントラストは、少なくとも、現在のステージの各第2の畳み込まれた画像のピクセル値を、前のステージの同一ピクセルの位置の周辺中央値で除することにより決定される、請求項に記載の方法。
  4. 方法はさらに、より大きなスケールから、より小さなスケールで検出されたピークを除外することを含む、請求項1に記載の方法。
  5. デジタル化された画像は、倍率を変えられた画像である、請求項1に記載の方法。
  6. 標準偏差は、1つのスケールから次のスケールへ倍増する、請求項1に記載の方法。
  7. デジタル化された画像の異常を識別するシステムであって、当該システムは、
    デジタル画像を畳み込みし、第1の畳み込まれた画像を生成する第1の畳み込みするものと、
    前記第1の畳み込まれた画像を畳み込みし、第2の畳み込まれた画像を生成する第2の畳み込みをするものと、
    前記デジタル画像および第2の畳み込まれた画像を受け取り、ピーク値をもつピクセルを識別するピーク検出器と、
    各ピクセルについての周辺中央値を提供するため、前記ピーク検出器に結合された周辺中央値計算機と、
    前記第2の畳み込みを行うものおよび前記周辺中央値計算機に結合された抽出器とを含み、当該抽出器は、しきい値よりも高いピクセルの相対的なコントラストをもつピクセルを、第2の畳み込まれた画像から取り除き、前記周辺中央値計算機は、当該抽出器がピクセルを取り除いた後に第2の畳み込まれた画像を少なくとも用いる、システム。
  8. 前記デジタル化された画像は、前のステージの第1の畳み込みをするものによって畳み込まれた画像である、請求項に記載のシステム。
  9. 前記ピクセルの相対的なコントラストは、現在のステージの各第2の畳み込まれた画像のピクセル値を、前のステージの第2の畳み込まれた画像に基づき同一のピクセル位置の周辺中央値で除することにより少なくとも決定される、請求項に記載のシステム。
  10. システムはさらに、前記ピーク検出器に結合され、ピクセルおよび対応するピーク値を受け取るしきい値を有するものを含み、当該しきい値を有するものは、対応するピーク値としきい値とを比較する、請求項に記載のシステム。
  11. 前記しきい値は、全体の中央値の絶対偏差の倍数である、請求項に記載のシステム。
  12. 異常を識別するコンピュータプログラムであって、当該コンピュータプログラムは、コンピュータプログラムが埋め込まれた不揮発性のコンピュータ読出し可能な媒体を有し、コンピュータプログラムは、
    複数の第1の畳み込まれた画像を生成するデジタル画像を畳み込むコンピュータプログラムコードであって、畳み込まれた画像の各々は異なるスケールに対応する、前記コンピュータプログラムコードと、
    前記複数の第1の畳み込まれた画像の各々を畳み込みし、複数の第2の畳み込まれた画像を生成するコンピュータプログラムコードと、
    前記複数の第2の畳み込まれた画像の各々の各ピクセルについての周辺中央値を決定するコンピュータプログラムコードと、
    前記複数の第1の畳み込まれた画像の1つと前記第2の畳み込まれた画像の1つとに基づきピーク領域を識別するコンピュータプログラムコードであって、前記第2の畳み込まれた画像の1つは、前記周辺中央値に基づきしきい値よりも高いピクセルの相対的なコントラストをもつピクセルが取り除かれたものである、前記コンピュータプログラムコードと、
    を有するコンピュータプログラム。
  13. 複数の第1の畳み込まれた画像は、ガウスぼかし(Gaussian-blurred)画像を表す、請求項12に記載のコンピュータプログラム。
  14. 複数の第2の畳み込まれた画像は、ラプラシアン曲率(Laplacian curvature)画像を表す、請求項12に記載のコンピュータプログラム。
  15. 周辺中央値を決定するコンピュータプログラムコードは、前のスケールで識別されたピーク領域を除外するコンピュータプログラムコードを含む、請求項12に記載のコンピュータプログラム。
  16. 周辺中央値を決定するために使用される複数の第2の畳み込まれた画像からピクセルを除外するコンピュータプログラムコードをさらに含む、請求項12に記載のコンピュータプログラム。
  17. ピクセルを除外するコンピュータプログラムコードは、ピクセルの相対的なコントラストを周辺中央値と比較するコンピュータプログラムコードを含む、請求項16に記載のコンピュータプログラム。
JP2013508073A 2010-04-30 2011-04-29 画像の異常を検出するための画像データの処理方法、システムおよびプログラム Active JP5864542B2 (ja)

Applications Claiming Priority (17)

Application Number Priority Date Filing Date Title
US34355710P 2010-04-30 2010-04-30
US61/343,557 2010-04-30
US34360810P 2010-05-02 2010-05-02
US34355210P 2010-05-02 2010-05-02
US34360910P 2010-05-02 2010-05-02
US61/343,552 2010-05-02
US61/343,609 2010-05-02
US61/343,608 2010-05-02
US39502910P 2010-05-06 2010-05-06
US61/395,029 2010-05-06
US39857110P 2010-06-25 2010-06-25
US61/398,571 2010-06-25
US39909410P 2010-07-07 2010-07-07
US61/399,094 2010-07-07
US40057310P 2010-07-28 2010-07-28
US61/400,573 2010-07-28
PCT/US2011/034696 WO2011137407A1 (en) 2010-04-30 2011-04-29 Microcalcification detection and classification in radiographic images

Publications (2)

Publication Number Publication Date
JP2013525009A JP2013525009A (ja) 2013-06-20
JP5864542B2 true JP5864542B2 (ja) 2016-02-17

Family

ID=44861947

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2013508075A Active JP6077993B2 (ja) 2010-04-30 2011-04-29 画像の異形を識別するための画像データの処理方法、システムおよびプログラム
JP2013508073A Active JP5864542B2 (ja) 2010-04-30 2011-04-29 画像の異常を検出するための画像データの処理方法、システムおよびプログラム
JP2013508074A Active JP5927180B2 (ja) 2010-04-30 2011-04-29 画像の異形を識別するための画像データの処理方法、システムおよびプログラム
JP2013508076A Active JP5801379B2 (ja) 2010-04-30 2011-04-29 確率密度関数推定器

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2013508075A Active JP6077993B2 (ja) 2010-04-30 2011-04-29 画像の異形を識別するための画像データの処理方法、システムおよびプログラム

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2013508074A Active JP5927180B2 (ja) 2010-04-30 2011-04-29 画像の異形を識別するための画像データの処理方法、システムおよびプログラム
JP2013508076A Active JP5801379B2 (ja) 2010-04-30 2011-04-29 確率密度関数推定器

Country Status (6)

Country Link
US (7) US8855388B2 (ja)
EP (4) EP2564355A1 (ja)
JP (4) JP6077993B2 (ja)
CN (4) CN102934126A (ja)
CA (4) CA2797267A1 (ja)
WO (4) WO2011137411A1 (ja)

Families Citing this family (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2006265761B2 (en) 2005-07-01 2011-08-11 Impedimed Limited Monitoring system
EP1948017B1 (en) 2005-10-11 2014-04-02 Impedimed Limited Hydration status monitoring
JP5419861B2 (ja) 2007-04-20 2014-02-19 インぺディメッド リミテッド インピーダンス測定装置および方法
US20110046505A1 (en) 2007-08-09 2011-02-24 Impedimed Limited Impedance measurement process
WO2011050393A1 (en) 2009-10-26 2011-05-05 Impedimed Limited Fluid level indicator determination
JP5755234B2 (ja) 2009-11-18 2015-07-29 インぺディメッド リミテッドImpedimed Limited 患者−電極間測定のための装置およびシステム
GB2475722B (en) * 2009-11-30 2011-11-02 Mirada Medical Measurement system for medical images
CA2797267A1 (en) 2010-04-30 2011-11-03 Vucomp, Inc. Probability density function estimator
US8675933B2 (en) 2010-04-30 2014-03-18 Vucomp, Inc. Breast segmentation in radiographic images
WO2012006318A1 (en) 2010-07-07 2012-01-12 Vucomp, Inc. Marking system for computer-aided detection of breast abnormalities
WO2013090798A1 (en) 2011-12-14 2013-06-20 Intersection Medical, Inc. Devices, systems and methods for determining the relative spatial change in subsurface resistivities across frequencies in tissue
WO2013093687A1 (en) * 2011-12-22 2013-06-27 Koninklijke Philips Electronics N.V. Processing and displaying a breast image
EP2629263B1 (en) * 2012-02-17 2015-06-03 Agfa HealthCare Method for defining a region of interest in a radiation image of a breast
EP2631873B1 (en) * 2012-02-27 2015-12-16 Agfa Healthcare Image alignment of breast images
JP5694607B2 (ja) * 2012-05-28 2015-04-01 富士フイルム株式会社 画像処理装置、撮像装置及び画像処理方法、並びにプログラム
JP5844296B2 (ja) * 2012-06-11 2016-01-13 富士フイルム株式会社 放射線画像処理装置および方法
US9213781B1 (en) 2012-09-19 2015-12-15 Placemeter LLC System and method for processing image data
US8942447B2 (en) * 2012-11-07 2015-01-27 Sony Corporation Method and apparatus for tissue region identification
WO2016109768A1 (en) * 2014-12-31 2016-07-07 Robert Bosch Gmbh System and method of shadow effect generation for concave objects with dynamic lighting in three-dimensional graphics
US9886790B2 (en) 2013-03-14 2018-02-06 Robert Bosch Gmbh System and method of shadow effect generation for concave objects with dynamic lighting in three-dimensional graphics
CA2921786C (en) 2013-08-20 2020-12-01 Densitas Incorporated Methods and systems for determining breast density
WO2015077076A1 (en) 2013-11-19 2015-05-28 VuComp, Inc Obtaining breast density measurements and classifications
CN105814069A (zh) 2013-12-12 2016-07-27 三菱化学株式会社 铱配位化合物及其制造方法、含有其的组合物、有机场致发光元件、显示装置和照明装置
US9474497B2 (en) 2014-01-15 2016-10-25 Agfa Healthcare Method and system for generating pre-scaled images for a series of mammography images
US9704059B2 (en) 2014-02-12 2017-07-11 International Business Machines Corporation Anomaly detection in medical imagery
JP6564018B2 (ja) 2014-04-08 2019-08-21 アイキャド, インコーポレイテッド 放射線画像の肺野セグメンテーション技術及び骨減弱技術
KR102265279B1 (ko) * 2014-05-29 2021-06-16 삼성전자주식회사 엑스선 영상 장치 및 그 제어 방법
US10432896B2 (en) 2014-05-30 2019-10-01 Placemeter Inc. System and method for activity monitoring using video data
JP6383182B2 (ja) * 2014-06-02 2018-08-29 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法およびプログラム
WO2015196300A1 (en) 2014-06-27 2015-12-30 Sunnybrook Research Institute Systems and methods for generating an imaging biomarker that indicates detectability or conspicuity of lesions in a mammographic image
JP6395481B2 (ja) * 2014-07-11 2018-09-26 キヤノン株式会社 画像認識装置、方法及びプログラム
US10039513B2 (en) * 2014-07-21 2018-08-07 Zebra Medical Vision Ltd. Systems and methods for emulating DEXA scores based on CT images
US10588589B2 (en) 2014-07-21 2020-03-17 Zebra Medical Vision Ltd. Systems and methods for prediction of osteoporotic fracture risk
JP6027065B2 (ja) * 2014-08-21 2016-11-16 富士フイルム株式会社 類似画像検索装置、類似画像検索装置の作動方法、および類似画像検索プログラム
KR102262657B1 (ko) * 2014-10-13 2021-06-08 삼성전자주식회사 플라즈마 처리 장치
WO2016083275A1 (en) * 2014-11-27 2016-06-02 Koninklijke Philips N.V. Apparatus for determining positions of an interventional instrument in a projection image
JP6759550B2 (ja) 2015-03-04 2020-09-23 ソニー株式会社 情報処理装置、プログラム、情報処理方法及び観察システム
US10043078B2 (en) * 2015-04-21 2018-08-07 Placemeter LLC Virtual turnstile system and method
US11334751B2 (en) 2015-04-21 2022-05-17 Placemeter Inc. Systems and methods for processing video data for activity monitoring
US10997428B2 (en) 2015-06-01 2021-05-04 Placemeter Inc. Automated detection of building entrances
US9918686B2 (en) 2015-11-16 2018-03-20 International Business Machines Corporation Automated fibro-glandular (FG) tissue segmentation in digital mammography using fuzzy logic
US11568627B2 (en) 2015-11-18 2023-01-31 Adobe Inc. Utilizing interactive deep learning to select objects in digital visual media
US10192129B2 (en) 2015-11-18 2019-01-29 Adobe Systems Incorporated Utilizing interactive deep learning to select objects in digital visual media
JP6719724B2 (ja) * 2016-02-05 2020-07-08 富士ゼロックス株式会社 データ分類装置およびプログラム
EP3399916B1 (en) 2016-02-08 2023-08-23 Imago Systems, Inc. System and method for the visualization and characterization of objects in images
US20190088359A1 (en) * 2016-03-03 2019-03-21 Geisinger Health System System and Method for Automated Analysis in Medical Imaging Applications
JP7160339B2 (ja) * 2016-03-03 2022-10-25 ストラックスコープ ピーティワイ リミテッド 異常を識別及び定量化する方法及び装置
CN107992495B (zh) * 2016-10-26 2021-01-26 腾讯科技(深圳)有限公司 高维数据集的数据可视化分析方法及装置
KR20180065135A (ko) * 2016-12-07 2018-06-18 삼성전자주식회사 셀프 구조 분석을 이용한 구조 잡음 감소 방법 및 장치
US10372876B2 (en) 2017-01-20 2019-08-06 Agfa Healthcare Inc. System and method for providing breast image data
US10475174B2 (en) 2017-04-06 2019-11-12 General Electric Company Visual anomaly detection system
CA3108862A1 (en) 2017-08-07 2019-02-14 Imago Systems, Inc. System and method for the visualization and characterization of objects in images
CN111164643A (zh) * 2017-08-14 2020-05-15 雷神公司 用于肿瘤检测的减法算法
CN110197474B (zh) 2018-03-27 2023-08-25 腾讯科技(深圳)有限公司 图像处理方法和装置及神经网络模型的训练方法
DE102018112215B3 (de) * 2018-04-30 2019-07-25 Basler Ag Quantisiererbestimmung, computerlesbares Medium und Vorrichtung, die mindestens zwei Quantisierer implementiert
US11244195B2 (en) * 2018-05-01 2022-02-08 Adobe Inc. Iteratively applying neural networks to automatically identify pixels of salient objects portrayed in digital images
WO2020006514A1 (en) * 2018-06-29 2020-01-02 Qmenta Inc. Tumor segmentation tool
US11900606B2 (en) 2018-06-29 2024-02-13 QMENTA, Inc. Tumor segmentation tool
JP6660428B2 (ja) * 2018-08-01 2020-03-11 キヤノン株式会社 処理装置、処理方法、およびプログラム
US10643746B2 (en) * 2018-08-17 2020-05-05 Fujifilm Medical Systems U.S.A., Inc. Image viewer
CN110569864A (zh) * 2018-09-04 2019-12-13 阿里巴巴集团控股有限公司 基于gan网络的车损图像生成方法和装置
US11922622B2 (en) * 2018-09-20 2024-03-05 Ajou University Industry-Academic Cooperation Foundation Convolutional neural network based breast image analysis method using four-channel inputs and system therefor
US10810737B2 (en) * 2018-10-18 2020-10-20 International Business Machines Corporation Automated nipple detection in mammography
US20220398721A1 (en) 2018-11-23 2022-12-15 Icad, Inc. System and method for assessing breast cancer risk using imagery
US11282208B2 (en) 2018-12-24 2022-03-22 Adobe Inc. Identifying target objects using scale-diverse segmentation neural networks
GB201912784D0 (en) * 2019-09-05 2019-10-23 Volpara Health Tech Limited Method and system for image normalization
US11475558B2 (en) 2019-11-13 2022-10-18 Raytheon Company Organ isolation in scan data
US11334771B2 (en) * 2019-12-12 2022-05-17 Vade Usa, Incorporated Methods, devices and systems for combining object detection models
US11282209B2 (en) 2020-01-10 2022-03-22 Raytheon Company System and method for generating contours
CN111598189B (zh) * 2020-07-20 2020-10-30 北京瑞莱智慧科技有限公司 产生式模型的训练方法、数据生成方法、装置、介质和设备
US11335004B2 (en) 2020-08-07 2022-05-17 Adobe Inc. Generating refined segmentation masks based on uncertain pixels
CN112288752B (zh) * 2020-10-29 2021-08-27 中国医学科学院北京协和医院 一种基于胸部平扫ct的冠脉钙化灶全自动分割方法
US11893745B2 (en) 2020-12-09 2024-02-06 Raytheon Company System and method for generating and displaying contours
US11562512B2 (en) 2020-12-09 2023-01-24 Raytheon Company System and method for generating and displaying contours
US11676279B2 (en) 2020-12-18 2023-06-13 Adobe Inc. Utilizing a segmentation neural network to process initial object segmentations and object user indicators within a digital image to generate improved object segmentations
US11875510B2 (en) 2021-03-12 2024-01-16 Adobe Inc. Generating refined segmentations masks via meticulous object segmentation
CN115591742B (zh) * 2022-09-30 2023-09-12 深圳芯光智能技术有限公司 一种点胶质量识别的点胶机自动控制方法及系统

Family Cites Families (136)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5109430A (en) 1986-07-22 1992-04-28 Schlumberger Technologies, Inc. Mask alignment and measurement of critical dimensions in integrated circuits
US4907156A (en) 1987-06-30 1990-03-06 University Of Chicago Method and system for enhancement and detection of abnormal anatomic regions in a digital image
US5133020A (en) 1989-07-21 1992-07-21 Arch Development Corporation Automated method and system for the detection and classification of abnormal lesions and parenchymal distortions in digital medical images
AU627658B2 (en) 1990-06-13 1992-08-27 Aluminium Company Of America Video inspection system
JPH06149866A (ja) * 1992-11-09 1994-05-31 Ricoh Co Ltd 解探索装置
US5359513A (en) 1992-11-25 1994-10-25 Arch Development Corporation Method and system for detection of interval change in temporally sequential chest images
US5729620A (en) 1993-09-29 1998-03-17 Wang; Shih-Ping Computer-aided diagnosis system and method
US6075879A (en) 1993-09-29 2000-06-13 R2 Technology, Inc. Method and system for computer-aided lesion detection using information from multiple images
CA2132138C (en) 1993-09-29 2004-01-06 Shih-Ping Wang Computer-aided diagnosis system and method
US5638458A (en) 1993-11-30 1997-06-10 Arch Development Corporation Automated method and system for the detection of gross abnormalities and asymmetries in chest images
US5627907A (en) 1994-12-01 1997-05-06 University Of Pittsburgh Computerized detection of masses and microcalcifications in digital mammograms
US5790690A (en) 1995-04-25 1998-08-04 Arch Development Corporation Computer-aided method for automated image feature analysis and diagnosis of medical images
US6141437A (en) 1995-11-22 2000-10-31 Arch Development Corporation CAD method, computer and storage medium for automated detection of lung nodules in digital chest images
US6125194A (en) 1996-02-06 2000-09-26 Caelum Research Corporation Method and system for re-screening nodules in radiological images using multi-resolution processing, neural network, and image processing
TW514513B (en) 1996-02-06 2002-12-21 Deus Technologies Inc Method for the detection of lung nodule in radiological images using digital image processing and artificial neural network
US6909797B2 (en) * 1996-07-10 2005-06-21 R2 Technology, Inc. Density nodule detection in 3-D digital images
US6198838B1 (en) 1996-07-10 2001-03-06 R2 Technology, Inc. Method and system for detection of suspicious lesions in digital mammograms using a combination of spiculation and density signals
US5917929A (en) 1996-07-23 1999-06-29 R2 Technology, Inc. User interface for computer aided diagnosis system
JP3678377B2 (ja) * 1996-08-26 2005-08-03 富士写真フイルム株式会社 異常陰影抽出方法および装置
US5987094A (en) 1996-10-30 1999-11-16 University Of South Florida Computer-assisted method and apparatus for the detection of lung nodules
US5974169A (en) 1997-03-20 1999-10-26 Cognex Corporation Machine vision methods for determining characteristics of an object using boundary points and bounding regions
US6246782B1 (en) * 1997-06-06 2001-06-12 Lockheed Martin Corporation System for automated detection of cancerous masses in mammograms
US5982915A (en) 1997-07-25 1999-11-09 Arch Development Corporation Method of detecting interval changes in chest radiographs utilizing temporal subtraction combined with automated initial matching of blurred low resolution images
JP2001511374A (ja) 1997-07-25 2001-08-14 アーチ・デベロップメント・コーポレーション 側面胸部放射線像の肺領域を分割する方法とシステム
US6014452A (en) 1997-07-28 2000-01-11 R2 Technology, Inc. Method and system for using local attention in the detection of abnormalities in digitized medical images
US5999639A (en) 1997-09-04 1999-12-07 Qualia Computing, Inc. Method and system for automated detection of clustered microcalcifications from digital mammograms
US7308126B2 (en) 1997-08-28 2007-12-11 Icad, Inc. Use of computer-aided detection system outputs in clinical practice
US6282307B1 (en) 1998-02-23 2001-08-28 Arch Development Corporation Method and system for the automated delineation of lung regions and costophrenic angles in chest radiographs
US6088473A (en) 1998-02-23 2000-07-11 Arch Development Corporation Method and computer readable medium for automated analysis of chest radiograph images using histograms of edge gradients for false positive reduction in lung nodule detection
US6404908B1 (en) 1998-05-28 2002-06-11 R2 Technology, Inc. Method and system for fast detection of lines in medical images
US6240201B1 (en) 1998-07-24 2001-05-29 Arch Development Corporation Computerized detection of lung nodules using energy-subtracted soft-tissue and standard chest images
US6138045A (en) 1998-08-07 2000-10-24 Arch Development Corporation Method and system for the segmentation and classification of lesions
US6233364B1 (en) 1998-09-18 2001-05-15 Dainippon Screen Engineering Of America Incorporated Method and system for detecting and tagging dust and scratches in a digital image
US7043066B1 (en) 1998-11-05 2006-05-09 Arch Development Corporation System for computerized processing of chest radiographic images
US6738499B1 (en) 1998-11-13 2004-05-18 Arch Development Corporation System for detection of malignancy in pulmonary nodules
GB9904692D0 (en) * 1999-03-01 1999-04-21 Isis Innovation X-ray image processing
US6801645B1 (en) 1999-06-23 2004-10-05 Icad, Inc. Computer aided detection of masses and clustered microcalcifications with single and multiple input image context classification strategies
CA2375314A1 (en) * 1999-06-23 2000-12-28 Qualia Computing, Inc. Computer aided detection of masses and clustered microcalcification strategies
US6549646B1 (en) 2000-02-15 2003-04-15 Deus Technologies, Llc Divide-and-conquer method and system for the detection of lung nodule in radiological images
US6690816B2 (en) 2000-04-07 2004-02-10 The University Of North Carolina At Chapel Hill Systems and methods for tubular object processing
AU2001251539A1 (en) 2000-04-11 2001-10-23 Cornell Research Foundation Inc. System and method for three-dimensional image rendering and analysis
DE10021431C2 (de) 2000-05-03 2002-08-22 Inst Neurosimulation Und Bildt Verfahren und Einrichtung zur Klassifizierung von optisch beobachtbaren Haut- oder Schleimhaut-Veränderungen
US6654728B1 (en) 2000-07-25 2003-11-25 Deus Technologies, Llc Fuzzy logic based classification (FLBC) method for automated identification of nodules in radiological images
JP2002143136A (ja) 2000-08-31 2002-05-21 Fuji Photo Film Co Ltd 異常陰影候補検出方法および検出処理システム
JP2002099896A (ja) * 2000-09-22 2002-04-05 Fuji Photo Film Co Ltd 異常陰影候補検出方法および装置
US6470092B1 (en) 2000-11-21 2002-10-22 Arch Development Corporation Process, system and computer readable medium for pulmonary nodule detection using multiple-templates matching
US7556602B2 (en) * 2000-11-24 2009-07-07 U-Systems, Inc. Breast cancer screening with adjunctive ultrasound mammography
US6694046B2 (en) 2001-03-28 2004-02-17 Arch Development Corporation Automated computerized scheme for distinction between benign and malignant solitary pulmonary nodules on chest images
US7031523B2 (en) * 2001-05-16 2006-04-18 Siemens Corporate Research, Inc. Systems and methods for automatic scale selection in real-time imaging
US20060197763A1 (en) 2002-02-11 2006-09-07 Landnet Corporation Document geospatial shape tagging, searching, archiving, and retrieval software
US6577752B2 (en) 2001-06-15 2003-06-10 Arch Development Corporation Automated method and system for the delineation of the chest wall in computed tomography scans for the assessment of pleural disease
US6795521B2 (en) 2001-08-17 2004-09-21 Deus Technologies Llc Computer-aided diagnosis system for thoracic computer tomography images
US7054473B1 (en) 2001-11-21 2006-05-30 R2 Technology, Inc. Method and apparatus for an improved computer aided diagnosis system
US6891964B2 (en) * 2001-11-23 2005-05-10 University Of Chicago Computerized method for determination of the likelihood of malignancy for pulmonary nodules on low-dose CT
US7336809B2 (en) 2001-11-23 2008-02-26 R2 Technology, Inc. Segmentation in medical images
US6766043B2 (en) 2001-11-23 2004-07-20 R2 Technology, Inc. Pleural nodule detection from CT thoracic images
US7359538B2 (en) 2001-11-23 2008-04-15 R2 Technology Detection and analysis of lesions in contact with a structural boundary
US7203349B2 (en) 2002-01-29 2007-04-10 Siemens Corporate Research, Inc. Bronchial wall thickening recognition for reduced false-positives in pulmonary nodule detection
US7783089B2 (en) 2002-04-15 2010-08-24 General Electric Company Method and apparatus for providing mammographic image metrics to a clinician
US6609021B1 (en) 2002-05-20 2003-08-19 Siemens Corporate Research, Inc. Pulmonary nodule detection using cartwheel projection analysis
US6748044B2 (en) 2002-09-13 2004-06-08 Ge Medical Systems Global Technology Company, Llc Computer assisted analysis of tomographic mammography data
US8027712B2 (en) 2002-10-11 2011-09-27 Ion Beam Applications S.A. Elongated markers for soft tissue volume identification
US7403646B2 (en) 2002-10-24 2008-07-22 Canon Kabushiki Kaisha Image processing apparatus, image processing method, program, and recording medium for generating a difference image from a first radiographic image and second radiographic image
US7430308B1 (en) 2002-11-26 2008-09-30 University Of South Florida Computer aided diagnosis of mammographic microcalcification clusters
US7298883B2 (en) 2002-11-29 2007-11-20 University Of Chicago Automated method and system for advanced non-parametric classification of medical images and lesions
JP2004209059A (ja) * 2003-01-07 2004-07-29 Fuji Photo Film Co Ltd 異常陰影候補検出装置
US6937776B2 (en) 2003-01-31 2005-08-30 University Of Chicago Method, system, and computer program product for computer-aided detection of nodules with three dimensional shape enhancement filters
GB2398379A (en) * 2003-02-11 2004-08-18 Qinetiq Ltd Automated digital image analysis
US7616818B2 (en) * 2003-02-19 2009-11-10 Agfa Healthcare Method of determining the orientation of an image
JP4225807B2 (ja) 2003-03-10 2009-02-18 富士通株式会社 路面状況判定方法および装置
JP2007524438A (ja) 2003-03-25 2007-08-30 イメージング セラピューティクス,インコーポレーテッド 放射線画像処理技術における補償の方法
CN1849094A (zh) * 2003-03-25 2006-10-18 成像治疗仪股份有限公司 在本发明的射线照相影像领域的处理中用于补偿成像技术的方法
DE10324897A1 (de) * 2003-05-30 2004-12-23 Robert Bosch Gmbh Verfahren und Vorrichtung zur Opjektbestimmung in Fahrerassistenzsystemen für Kraftfahrzeuge
US7480401B2 (en) 2003-06-23 2009-01-20 Siemens Medical Solutions Usa, Inc. Method for local surface smoothing with application to chest wall nodule segmentation in lung CT data
US7640051B2 (en) * 2003-06-25 2009-12-29 Siemens Medical Solutions Usa, Inc. Systems and methods for automated diagnosis and decision support for breast imaging
US20050008211A1 (en) 2003-07-07 2005-01-13 Deus Technologies, Llc Lung contrast normalization on direct digital and digitized chest images for computer-aided detection (CAD) of early-stage lung cancer
JP2005034211A (ja) * 2003-07-16 2005-02-10 Fuji Photo Film Co Ltd 画像判別装置、方法およびプログラム
US7397938B2 (en) 2003-08-13 2008-07-08 Siemens Medical Solutions Usa, Inc. Method and system for fast normalized cross-correlation between an image and a Gaussian for detecting spherical structures
JP2005080758A (ja) * 2003-09-05 2005-03-31 Konica Minolta Medical & Graphic Inc 画像処理装置
EP1685522A1 (en) * 2003-11-12 2006-08-02 Siemens Corporate Research, Inc. A system and method for filtering and automatic detection of candidate anatomical structures in medical images
US7265760B2 (en) 2004-03-25 2007-09-04 Hewlett-Packard Development Company, L.P. Method and system for defining border tile attributes for polygons
WO2005106773A2 (en) 2004-04-15 2005-11-10 Edda Technology, Inc. Spatial-temporal lesion detection, segmentation, and diagnostic information extraction system and method
US7907769B2 (en) 2004-05-13 2011-03-15 The Charles Stark Draper Laboratory, Inc. Image-based methods for measuring global nuclear patterns as epigenetic markers of cell differentiation
CA2577547A1 (en) * 2004-08-17 2006-03-02 Alan Penn Method and system for discriminating image representations of classes of objects
TWI241127B (en) 2004-08-27 2005-10-01 Univ Nat Cheng Kung Image-capturing device and method for removing strangers
US7492968B2 (en) 2004-09-07 2009-02-17 Siemens Medical Solutions Usa, Inc. System and method for segmenting a structure of interest using an interpolation of a separating surface in an area of attachment to a structure having similar properties
US7346202B1 (en) 2004-11-24 2008-03-18 R2 Technology, Inc. Automatically detecting the presence of contrast agent in medical image
US7593561B2 (en) 2005-01-04 2009-09-22 Carestream Health, Inc. Computer-aided detection of microcalcification clusters
US7646902B2 (en) 2005-02-08 2010-01-12 Regents Of The University Of Michigan Computerized detection of breast cancer on digital tomosynthesis mammograms
US7715626B2 (en) 2005-03-23 2010-05-11 Siemens Medical Solutions Usa, Inc. System and method for vascular segmentation by Monte-Carlo sampling
US8908766B2 (en) * 2005-03-31 2014-12-09 Euclid Discoveries, Llc Computer method and apparatus for processing image data
US20080292194A1 (en) 2005-04-27 2008-11-27 Mark Schmidt Method and System for Automatic Detection and Segmentation of Tumors and Associated Edema (Swelling) in Magnetic Resonance (Mri) Images
US20090097730A1 (en) 2005-05-23 2009-04-16 Konica Minolta Medical & Graphic, Inc. Abnormal shadow candidate display method and medical image processing system
CN1879553B (zh) 2005-06-15 2010-10-06 佳能株式会社 在胸部图像中检测边界的方法及装置
US7756341B2 (en) 2005-06-30 2010-07-13 Xerox Corporation Generic visual categorization method and system
US7623692B2 (en) 2005-07-22 2009-11-24 Carestream Health, Inc. Pulmonary nodule detection in a chest radiograph
WO2007040487A1 (en) 2005-09-21 2007-04-12 Nhega, Llc Automatic and semi-automatic detection of planar shapes from 2d images
US20070092864A1 (en) 2005-09-30 2007-04-26 The University Of Iowa Research Foundation Treatment planning methods, devices and systems
GB0602739D0 (en) 2006-02-10 2006-03-22 Ccbr As Breast tissue density measure
US7460710B2 (en) 2006-03-29 2008-12-02 Amazon Technologies, Inc. Converting digital images containing text to token-based files for rendering
US7680341B2 (en) 2006-05-05 2010-03-16 Xerox Corporation Generic visual classification with gradient components-based dimensionality enhancement
CN100530220C (zh) * 2006-05-10 2009-08-19 航伟科技股份有限公司 人体影像异常区域统计检测方法
US8121360B2 (en) 2006-07-31 2012-02-21 Siemens Medical Solutions Usa, Inc. Computer aided detection and decision support
FR2904882B1 (fr) 2006-08-11 2008-11-14 Gen Electric Procede de traitement d'images radiologiques pour une detection d'opacites
JP4928193B2 (ja) * 2006-08-16 2012-05-09 日本放送協会 顔画像認識装置及び顔画像認識プログラム
US7885466B2 (en) 2006-09-19 2011-02-08 Xerox Corporation Bags of visual context-dependent words for generic visual categorization
US7706592B2 (en) 2006-09-20 2010-04-27 Primax Electronics Ltd. Method for detecting a boundary of a monetary banknote within an image
US20080107321A1 (en) * 2006-11-02 2008-05-08 Fujifilm Corporation Spiculation detection method and apparatus for CAD
US7773794B2 (en) 2006-12-19 2010-08-10 Fujifilm Corporation Method and apparatus for candidate detection using Hessian peak characteristics
US8265367B2 (en) 2007-06-04 2012-09-11 Siemens Computer Aided Diagnostics, Ltd. Identifying blood vessels in lung x-ray radiographs
US8150135B2 (en) 2007-06-04 2012-04-03 Siemens Computer Aided Diagnosis Ltd. Identifying ribs in lung X-rays
US20090052763A1 (en) 2007-06-04 2009-02-26 Mausumi Acharyya Characterization of lung nodules
EP2015252B1 (en) * 2007-07-08 2010-02-17 Université de Liège Visual background extractor
US20090034810A1 (en) * 2007-08-03 2009-02-05 Fujifilm Corporation Abnormal tissue pattern detection apparatus, method and program
US8131038B2 (en) 2007-08-21 2012-03-06 Siemens Aktiengesellschaft System and method for global-to-local shape matching for automatic liver segmentation in medical imaging
US8160323B2 (en) * 2007-09-06 2012-04-17 Siemens Medical Solutions Usa, Inc. Learning a coarse-to-fine matching pursuit for fast point search in images or volumetric data using multi-class classification
JP5017031B2 (ja) 2007-09-13 2012-09-05 キヤノン株式会社 画像処理装置、画像処理方法、画像処理プログラム、並びに、記憶媒体
US8520916B2 (en) 2007-11-20 2013-08-27 Carestream Health, Inc. Enhancement of region of interest of radiological image
EP2217143A4 (en) 2007-12-11 2015-04-15 Epi Sci Llc ANALYSIS OF ELECTRIC BIOIMPEDANCE AS A BIOMARKER OF BREAST DENSITY AND / OR RISK OF BREAST CANCER
US8260014B2 (en) 2008-01-16 2012-09-04 Carestream Health, Inc. Microcalcification detection in mammography CAD using a classifier
US8233692B2 (en) 2008-02-27 2012-07-31 Siemens Computer Aided Diagnosis Ltd. Method of suppressing obscuring features in an image
US8547387B2 (en) 2008-04-30 2013-10-01 General Electric Company Systems, methods and apparatus to unambiguously outline a region of interest
US8164039B2 (en) 2008-04-30 2012-04-24 Board Of Regents, The University Of Texas System Method and apparatus for detecting spiculated masses in mammography
EP2131325B1 (en) * 2008-05-08 2013-01-30 Agfa Healthcare Method for mass candidate detection and segmentation in digital mammograms
US8208707B2 (en) 2008-09-02 2012-06-26 General Electric Company Tissue classification in medical images
US8463051B2 (en) * 2008-10-16 2013-06-11 Xerox Corporation Modeling images as mixtures of image models
US8634622B2 (en) * 2008-10-16 2014-01-21 Icad, Inc. Computer-aided detection of regions of interest in tomographic breast imagery
JP5566299B2 (ja) * 2008-10-20 2014-08-06 株式会社日立メディコ 医用画像処理装置、及び医用画像処理方法
US8488863B2 (en) 2008-11-06 2013-07-16 Los Alamos National Security, Llc Combinational pixel-by-pixel and object-level classifying, segmenting, and agglomerating in performing quantitative image analysis that distinguishes between healthy non-cancerous and cancerous cell nuclei and delineates nuclear, cytoplasm, and stromal material objects from stained biological tissue materials
US20100124364A1 (en) 2008-11-19 2010-05-20 Zhimin Huo Assessment of breast density and related cancer risk
US20110026791A1 (en) 2009-07-29 2011-02-03 Icad, Inc. Systems, computer-readable media, and methods for classifying and displaying breast density
WO2011100511A2 (en) 2010-02-11 2011-08-18 University Of Michigan Methods for microcalification detection of breast cancer on digital tomosynthesis mammograms
US8675933B2 (en) 2010-04-30 2014-03-18 Vucomp, Inc. Breast segmentation in radiographic images
CA2797267A1 (en) 2010-04-30 2011-11-03 Vucomp, Inc. Probability density function estimator
WO2012006318A1 (en) 2010-07-07 2012-01-12 Vucomp, Inc. Marking system for computer-aided detection of breast abnormalities
WO2012082994A2 (en) 2010-12-15 2012-06-21 H. Lee Moffitt Cancer Center And Research Institute, Inc. Method for assessing breast density

Also Published As

Publication number Publication date
EP2564357A1 (en) 2013-03-06
JP2013525009A (ja) 2013-06-20
US20150071521A1 (en) 2015-03-12
US9076197B2 (en) 2015-07-07
US20150023580A1 (en) 2015-01-22
US20130208956A1 (en) 2013-08-15
CA2797266A1 (en) 2011-11-03
WO2011137407A1 (en) 2011-11-03
EP2564355A1 (en) 2013-03-06
JP6077993B2 (ja) 2017-02-08
US8855388B2 (en) 2014-10-07
US8958625B1 (en) 2015-02-17
US20130202165A1 (en) 2013-08-08
US20110274327A1 (en) 2011-11-10
CN102893294A (zh) 2013-01-23
US9256941B2 (en) 2016-02-09
WO2011137409A1 (en) 2011-11-03
JP5927180B2 (ja) 2016-06-01
CA2797238A1 (en) 2011-11-03
CN102947841A (zh) 2013-02-27
EP2564353A1 (en) 2013-03-06
WO2011137411A1 (en) 2011-11-03
EP2564352A1 (en) 2013-03-06
US8675934B2 (en) 2014-03-18
JP5801379B2 (ja) 2015-10-28
CA2797267A1 (en) 2011-11-03
CA2797240A1 (en) 2011-11-03
JP2013529334A (ja) 2013-07-18
CN102934126A (zh) 2013-02-13
JP2013525011A (ja) 2013-06-20
US8923594B2 (en) 2014-12-30
US20130208967A1 (en) 2013-08-15
CN102934128A (zh) 2013-02-13
US9262822B2 (en) 2016-02-16
WO2011137410A1 (en) 2011-11-03
JP2013525010A (ja) 2013-06-20
US20130051676A1 (en) 2013-02-28

Similar Documents

Publication Publication Date Title
JP5864542B2 (ja) 画像の異常を検出するための画像データの処理方法、システムおよびプログラム
Ye et al. Shape-based computer-aided detection of lung nodules in thoracic CT images
Choi et al. Genetic programming-based feature transform and classification for the automatic detection of pulmonary nodules on computed tomography images
Schilham et al. A computer-aided diagnosis system for detection of lung nodules in chest radiographs with an evaluation on a public database
Van Ginneken et al. Segmentation of anatomical structures in chest radiographs using supervised methods: a comparative study on a public database
JP4999163B2 (ja) 画像処理方法および装置ならびにプログラム
US8023710B2 (en) Virtual colonoscopy via wavelets
US9230320B2 (en) Computer aided diagnostic system incorporating shape analysis for diagnosing malignant lung nodules
US20080002870A1 (en) Automatic detection and monitoring of nodules and shaped targets in image data
US20070274584A1 (en) Method and System for Detection of Bone Fractures
US20120099771A1 (en) Computer aided detection of architectural distortion in mammography
Tao et al. Multi-level ground glass nodule detection and segmentation in CT lung images
Shariaty et al. Texture appearance model, a new model-based segmentation paradigm, application on the segmentation of lung nodule in the CT scan of the chest
Feng et al. Robust point correspondence matching and similarity measuring for 3D models by relative angle-context distributions
US20080107321A1 (en) Spiculation detection method and apparatus for CAD
Staal et al. Automatic rib segmentation in CT data
Mirunalini et al. Automatic stenosis detection using SVM from CTA projection images
Shaziya et al. Comprehensive review of automatic lung segmentation techniques on pulmonary CT images
Nuzhnaya et al. Probabilistic branching node detection using adaboost and hybrid local features
Siddiqui et al. Computed Tomography Image Processing Methods for Lung Nodule Detection and Classification: A Review
Gil et al. A deterministic-statistic adventitia detection in IVUS images
Admane et al. Multi-stage Lung Cancer Detection and Prediction using Image Processing Techniques
Sudha et al. A COMPREHENSIVE STUDY OF DEEP LEARNING APPROACHES FOR LUNG NODULE ANALYSIS WITH RECENT COMPUTATIONAL TECHNIQUES
Baharlouie et al. Determination of the Degree of Malignancy in Lung Cancer Nodules Based on Neural Networks

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140422

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150407

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20150508

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150928

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151224

R150 Certificate of patent or registration of utility model

Ref document number: 5864542

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250