JP2006061472A - 乳房画像表示装置およびそのプログラム - Google Patents

乳房画像表示装置およびそのプログラム Download PDF

Info

Publication number
JP2006061472A
JP2006061472A JP2004248366A JP2004248366A JP2006061472A JP 2006061472 A JP2006061472 A JP 2006061472A JP 2004248366 A JP2004248366 A JP 2004248366A JP 2004248366 A JP2004248366 A JP 2004248366A JP 2006061472 A JP2006061472 A JP 2006061472A
Authority
JP
Japan
Prior art keywords
breast
detected
corresponding position
region
positions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2004248366A
Other languages
English (en)
Inventor
Hideya Takeo
英哉 武尾
Cho Se
超 施
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Holdings Corp
Original Assignee
Fuji Photo Film Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Photo Film Co Ltd filed Critical Fuji Photo Film Co Ltd
Priority to JP2004248366A priority Critical patent/JP2006061472A/ja
Priority to US11/212,613 priority patent/US20060159321A1/en
Publication of JP2006061472A publication Critical patent/JP2006061472A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30068Mammography; Breast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03Recognition of patterns in medical or anatomical images
    • G06V2201/031Recognition of patterns in medical or anatomical images of internal organs

Abstract

【課題】 乳房画像の比較読影性能を向上させるための乳房画像表示装置を提供する。
【解決手段】 右乳房撮影画像SAおよび左乳房撮影画像SBより乳房が撮影された右乳房領域および左乳房領域を検出し、検出された右乳房領域と左乳房領域中の予め設定された対応する位置を検出する対応位置手段21、22、・・・、26を複数の備えるようする。1つの対応位置検出手段21、22、・・・、26で右乳房領域と左乳房領域中の対応位置が検出されないときは、他の対応位置検出手段21、22、・・・、26により右乳房領域と左乳房領域中の対応位置を検出する。
【選択図】 図1

Description

本発明は、乳房画像表示装置に関し、詳細には、比較対照となる2つの乳房画像の表示装置およびプログラムの改良に関するものである。
従来より、例えば乳房を放射線撮影して得られたデジタル画像信号を、コンピュータを用いて解析し、画像中に現れた腫瘤陰影や微小石灰化陰影等の異常陰影を自動的に検出することにより、画像読影者の読影熟達度が低い場合にも一定の検出レベルを確保し、診断に役立てるシステム(異常陰影候補検出システム)が開発されている(例えば、特許文献1)。
このシステムは、主として乳ガン検診で得られた乳房の放射線画像(マンモグラフィ)を表すデジタル画像信号の濃度(信号値)勾配ベクトルの集中度を評価することにより画像中の腫瘤陰影の候補を自動的に検出したり、デジタル画像信号にモフォロジー演算(ダイレーション処理,イロージョン処理,オープニング処理,クロージング処理等)を施すことにより微小石灰化陰影の候補を自動的に検出するなどのアルゴリズムによって、腫瘤陰影や微小石灰化等の異常陰影の候補を検出するものであり、このシステムで検出された異常陰影候補を、マンモグラフィ上で、例えば矩形のROI(関心領域)枠でマーキングするなどしてCRTや液晶表示装置等に表示したり、診断用のフィルムにプリントすることにより診断に供することができる。
ところで上述した異常陰影候補検出システムにより検出された異常陰影候補を含むマンモグラフィを画像表示装置の画像表示面上に表示して、医師等が観察読影する場合、左右1組の乳房画像を背中合わせにして同時に表示することが、しばしば行われている。これは、左右の乳房における正常構造は略同じであるため、それらを比較して診断に利用することができるからである。例えば、一方の画像において異常と疑われる陰影を発見した場合に、他方の画像の対応する位置においても同様な陰影が存在するか否かによって、それが異常な陰影なのか否かを確認したりする。また、マンモグラフィは、乳房を上下方向から撮影したいわゆる正面画像(MLview(またはMLOview);Medio-lateral view(またはMedio-lateral oblique view))と、左右方向から撮影したいわゆる側面画像(CCview;Cranio-caudal view)が撮影されるため、左右乳房のうち一方の乳房の正側2つの画像を並べて表示し、これらを比較対照して観察読影する場合もある。
しかし、上述したように比較対照される2つの乳房の画像を背中合わせに同時に表示する場合、両被写体の対応位置が横方向または縦方向で不揃いで表示されることがあり、この場合、比較読影を行ないにくいという問題がある。そこで、比較対照される2つの乳房のマンモグラフィをその表示画面上に表示させ、例えば、左右乳房のニップル位置が、縦方向に揃うように位置合わせをするものが提案されている(例えば、特許文献2)。
特開平8−294479号公報 特開2002−65613公報
しかしながら、乳がんなどのよりニップルが切除された場合には、上記特許文献2の方法は適さない。また、左右の乳房内に含まれる構造物が必ずしもニップルを合わせることによって対称に現れるとは限らない。
本発明は上記事情に鑑みなされたものであって、比較対照される2つの被写体の画像を表示するに際して、これら2つの乳房画像の比較読影性能を向上させるための乳房画像表示装置を提供することを目的とするものである。
本発明の乳房画像表示装置は、右乳房が撮影された右乳房撮影画像と左乳房が撮影された左乳房撮影画像とを位置合せして表示する乳房画像表示装置において、
前記右乳房撮影画像および前記左乳房撮影画像より乳房が撮影された右乳房領域および左乳房領域を検出する乳房領域検出手段と、
該検出された右乳房領域と左乳房領域中の予め設定された対応する位置を検出する、予め設定された対応位置を互いに異にする複数の対応位置検出手段と、
前記複数の対応位置検出手段のうちの1つの対応位置検出手段に前記右乳房領域と左乳房領域中の対応位置を検出させ、対応位置が検出されたときにはその対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行い、対応位置が検出されないときには他の対応位置検出手段により前記右乳房領域と左乳房領域中の対応位置を検出させ、検出された対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行う位置合せ手段とを備えたことを特徴とするものである。
本発明のプログラムは、右乳房が撮影された右乳房撮影画像と左乳房が撮影された左乳房撮影画像とを位置合せして表示する乳房画像表示装置において、
コンピュータを、
前記右乳房撮影画像および前記左乳房撮影画像より乳房が撮影された右乳房領域および左乳房領域を検出する乳房領域検出手段と、
該検出された右乳房領域と左乳房領域中の予め設定された対応する位置を検出する、予め設定された対応位置を互いに異にする複数の対応位置検出手段と、
前記複数の対応位置検出手段のうちの1つの対応位置検出手段に前記右乳房領域と左乳房領域中の対応位置を検出させ、対応位置が検出されたときにはその対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行い、対応位置が検出されないときには他の対応位置検出手段により前記右乳房領域と左乳房領域中の対応位置を検出させ、検出された対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行う位置合せ手段として機能させることを特徴とするものである。
「乳房画像表示装置」とは、CRT等の表示装置のみならず、可視化可能なようにフィルムなどの媒体に記録する装置をも含むものである。
「乳房領域」は、乳房撮影画像の撮影方向により乳房以外の胸筋などが撮影されている場合には胸筋部分なども含むものである。
複数の対応位置検出手段は、
前記右乳房領域および前記左乳房領域よりニップル位置を検出して左右のニップル位置を対応位置とするニップル対応位置検出手段、前記右乳房領域および前記左乳房領域より最高点を検出して左右の最高点位置を対応位置とする最高点対応位置検出手段、前記右乳房領域または前記左乳房領域のいずれかよりニップル位置を検出し、他の前記乳房領域より最高点位置を検出して左右のニップル位置と最高点位置とを対応位置とするニップル最高点対応位置検出手段、前記右乳房領域内および前記左乳房領域内の乳腺マップの重心を検出して左右の乳腺マップの重心の位置を対応位置とする乳腺マップ重心対応位置検出手段、前記右乳房領域および前記左乳房領域の輪郭を検出して左右の輪郭の位置を対応位置とする輪郭対応位置検出手段、および、前記右乳房領域および前記左乳房領域より胸筋ラインを検出して左右の胸筋ラインの位置を対応位置とする胸筋ライン対応位置検出手段のうち少なくとも2つの検出手段を有するものであってもよい。
本発明によれば、対応位置を互いに異にする複数の対応位置検出手右乳房撮影画像と左乳房撮影画像とを位置合せして表示する際に、右乳房領域と左乳房領域から対応位置を検出する手段を複数備え、複数の対応位置検出手段のうちの1つの対応位置検出手段を用いて位置合せを行うことが出来ないときには、他の対応位置検出手段により位置合わせを行うことにより、正確に位置合せを行うことが出来、位置合せに失敗することが少なくなる。
以下、図面を参照して本発明の乳房画像表示装置の第1の実施の形態について説明する。
図1に示すように、乳房画像表示装置1は、右乳房を撮影した右乳房撮影画像SAと左乳房を撮影した左乳房撮影画像SBより乳房が撮影された右乳房領域と左乳房領域を検出する乳房領域検出手段10と、右乳房領域と左乳房領域中の対応する位置を検出する対応位置検出手20を複数と、複数の対応位置検出手段のうちの1つの対応位置検出手段20に前記右乳房領域と左乳房領域中の対応位置を検出させ、対応位置が検出されないときには他の対応位置検出手段により前記右乳房領域と左乳房領域中の対応位置を検出させて左右の前記乳房撮影画像の位置合わせを行う位置合せ手段30とを備える。
左右の乳房撮影画像SA,SBは、観察しやすくするために一般的に左右の乳房画像を背中合わせに対象となるように表示を行う。このような表示を自動的に行うには左右の乳房の対応する位置を検出して位置合わせを行う必要があり、特に、乳頭(以下、ニップルという)位置を基準に乳腺の分布が対象になるように表示することが望まれる。しかし、ガン等の疾病によりニップルが切除されている場合には、ニップルの検出が不可能なため他の対応位置を検出して位置合わせを行う必要がある。
そこで、乳房画像表示装置1は、対応位置検出手20を複数備えるように構成し、位置合せ手段30は、1つの対応位置検出手20により対応位置が検出されない場合には、他の対応位置検出手20により対応位置の検出を行う。
対応位置検出手段20は、具体的には、右乳房領域および左乳房領域よりニップル位置を検出して左右のニップル位置を対応位置とするニップル対応位置検出手段21、右乳房領域および左乳房領域より最高点となる最高点位置を検出して左右の最高点位置を対応位置とする最高点対応位置検出手段22、右乳房領域または左乳房領域のいずれかよりニップル位置を検出し、他の前記乳房領域より最高点位置を検出して左右のニップル位置と最高点位置とを対応位置とするニップル最高点対応位置検出手段23、右乳房領域内および左乳房領域内の乳腺マップの重心の位置を検出して左右の乳腺マップの重心の位置を対応位置とする乳腺マップ重心対応位置検出手段24、右乳房領域および左乳房領域の輪郭を検出して左右の輪郭(以下、スキンラインという)の位置を対応位置とする輪郭対応位置検出手段25、および、右乳房領域および左乳房領域より胸筋ラインを検出して左右の胸筋ラインの位置を対応位置とする胸筋ライン対応位置検出手段26などを備える。
乳房領域検出手段10は、右乳房撮影画像SAのヒストグラムに基づいて撮影された右乳房領域を検出する。図2に示すように、右乳房撮影画像SAよりヒストグラムHAを作成すると画素値のピークが2つ現れ、乳房領域のピークは真中あたりに現れ、背景領域のピークは右側に現れる。そこで、乳房領域と背景領域との境界信号を示す閾値Th1により二値化処理をして、図3に示すような右乳房撮影画像SAを乳房領域と背景領域(クロスハッチ部)とに分離して、乳房領域を検出する。同様に、左乳房撮影画像SBのヒストグラムHBに基づいて、乳房領域と背景領域との境界信号を示す閾値Th2により二値化処理をして、左乳房領域を検出する。
ニップル対応位置検出手段21は、図4に示すように、乳房の輪郭Rを検出する輪郭検出手段211と、乳房の輪郭が乳房領域より突出した乳頭突出部を乳頭として検出するニップル検出手段212とを備える。
輪郭検出手段211は、図5に示すように、乳房領域検出手段10で二値化処理した画像の胸壁が画像の下側にある場合には、画像の幅Wの中心(W/2)を通る線に沿って下から上に探索し(破線)、乳房領域から背景領域に変わった点をAとし、Aから左右の両方向に探索してスキンラインRを検出する。具体的には、例えばAを開始点として、左右両方向に進むようにAに隣接する画素の中から二値化画像の境となる画素を順次探索し、探索した画素をつないでスキンラインRとする。
そこで、乳頭検出手段212は、図6に示すように、スキンラインRに沿って長さLの曲線を設定し、この曲線の中心から曲線の両端を結ぶ直線までの距離Hを求める。長さLの曲線を徐々にずらしながら複数設定し、各曲線の中心点Pから直線までの距離Hを求める。複数の曲線のうちH/Lの値が最も大きい中心点Pの近傍に乳頭突出部Dが存在するものとして検出する。このとき、長さLの曲線をずらす幅は、乳頭の統計的な大きさから乳頭突出部のスキンラインR上に曲線の中心点が少なくとも1箇所は設定されるような間隔で設定する。
また、図7に示すように、輪郭検出手段211により検出されたスキンラインRに対して、統計的に得られた乳頭の大きさに基づいて、乳頭突出部に内に入り込まない円形の構造要素Bを用いてトップハット変換を施すと(同図(A)参照)、同図(B)に示すように、乳頭の部分のみがY方向の座標値を持つような形状が得られる。このY方向の座標値を持つ凸部を乳頭突出部Dとして検出するようにしてもよい。
あるいは、図8に示すように、輪郭検出手段211により検出されたスキンラインRに対して2次微分の値を求めると、同図(B)に示すように、乳頭以外では略一定の値となるが、乳頭に変わる前後(Q1、Q2)では2次微分の値が急激に変化する。この2次微分が変化するところを乳頭の開始Q1と終了Q2として乳頭突出部Dを検出するようにしてもよい。
最高点対応位置検出手段22は、図9に示すように、輪郭検出手段211とスキンラインR上の最高点を検出する最高点検出手段222とを備える。
まず、前述の輪郭検出手段211を用いて、図5に示すようなスキンラインRを検出し、最高点検出手段222を用いて、左右の乳房画像より乳房領域よりスキンラインRのY方向の座標がもっとも高い位置を最高点として検出して、この最高点を対応位置として検出する。
また、ニップル最高点対応位置検出手段23は、図10に示すように、輪郭検出手段211と最高点検出手段222とニップル検出手段212とを備える。
ニップル検出手段212により、右乳房撮影画像SAと左乳房撮影画像SBとからニップル位置の検出を行い、右乳房撮影画像SAあるいは左乳房撮影画像SBのどちらかの画像からニップルが検出されない場合には、最高点検出手段222で最高点を検出し、ニップルと最高点を対応する位置とする。
輪郭対応位置検出手段25は、図11に示すように、輪郭検出手段211を備え、右乳房撮影画像SAのヒストグラムHAと,左乳房撮影画像SBのヒストグラムHBに基づいて、胸筋領域を含んだ乳房領域(PaとPb)と背景領域Pcとに分離した後(図13参照)、右乳房撮影画像SAのスキンラインRAと左乳房撮影画像SBのスキンラインRBを検出する。
胸筋ライン対応位置検出手段26は、図12に示すように、左右の乳房撮影画像SA,SBに基づいて画像中の胸筋領域と乳房領域の境界線上の境界点を検出する境界点検出手段261と、境界点検出手段261により検出された境界点の個数に応じて胸筋ラインを検出する胸筋ライン検出手段262とを備える。
乳房をMLO方向から撮影を行った場合には、胸筋が乳房とともに撮影される場合が多い。図13は、MLO方向から撮影した右乳房撮影画像SAを示したものである。なお、左乳房の場合は左右が逆の画像となるが、ここでは右乳房撮影画像SAを例にして説明する。
右乳房撮影画像SAには、胸筋除いた乳房領域Pa、胸筋領域Pb、および背景領域Pcが表れる。この右乳房撮影画像SAにおいて、胸筋領域Pbは乳房領域Paよりも濃度が低い領域として表れ、この胸筋領域Pbと乳房領域Paとの境界を胸筋ラインといい、画像の右端から左斜め下の方向に伸びる線として現れる。
境界点検出手段261は、前述の乳房領域検出手段10で説明したように、乳房撮影画像SのヒストグラムHに基づいて、胸筋領域を含んだ乳房領域(PaとPb)と背景領域Pcとに分離する。
また、胸筋領域Pbの濃度は乳房領域Paよりも低く、さらにその境界の濃度勾配が周囲と比較して高くなる傾向があることから、濃度勾配ベクトルの強度を利用してエッジ画像Pを作成する。このエッジ画像Pには、胸筋領域Pbと乳房領域Paの境界線が濃度の低い(白い)陰影として示される。
そこで、図14に示すエッジ画像Pの模式図を利用して境界点の検出方法について説明する。なお、実際のエッジ画像Pにおいては、各エッジ(胸筋領域Pbと乳房領域Paとの境界線である胸筋ラインtや、乳房領域Paと背景領域Pcの境界線であるスキンラインR)は濃度が低い(白い)陰影で示されるが、この模式図においては便宜上黒い線で示す。以下、胸筋領域Pbや乳房領域Pa等の領域や、胸筋ラインtやスキンラインR等の境界線について、右乳房撮影画像SAに表れたものと左乳房撮影画像SBに現れたものを区別する場合には各符号の最後にAとBを付し、特に区別しない場合にはAやBを付さない符号を用いる。
まず、作成されたエッジ画像P中の被写体領域内の右方領域(乳房上部領域)に縦方向の方向性を有する3本の走査ラインL1,L2,L3を設定する。例えば、乳房画像が、10bit、10pixel/mmのものである場合には、最も右側の第1走査ラインL1を画像右端から200pixelの位置に設定し、さらに、300pixel間隔で第2走査ラインL2、第3走査ラインL3をそれぞれ設定する。
この乳房領域Pa,Pbに基づいて、図14に示すように各走査ラインL1,L2,L3上の被写体領域内20〜80%の範囲d内において各走査ラインL1,L2,L3上で方向性エッジ検索を行う。方向性エッジ検索とは、上から下に向けて走査する場合、濃度立下りのエッジのみを検索することを意味し、そして、この方向性エッジ検索によって、所定の閾値を満たす(所定の閾値よりも立下りが大きい)エッジ点が見つかったときに、そのエッジ点を境界点として検出する(図14の×印)。なお、所定の閾値を満たすエッジ点が見つからなかったときには、その走査ライン上に境界点は存在しないものとする。つまり、3本の走査ラインL1,L2,L3を走査すると、0〜3個の境界点が検出される。
境界点検出手段261により境界点が検出されると、胸筋ライン検出手段262に検出された境界点の数と位置情報を入力し、胸筋ラインtを検出する。例えば、検出された境界点が3個のときには、3個の境界点を通る2次曲線を引いて胸筋ラインtとし、検出された境界点が2個のときには2個の境界点を通る1次直線を引いて胸筋ラインtとする。また、検出された境界点が1個のときには、画像中の乳房の最上点から垂線を下ろして垂線上の最下点(画像の下端位置の点)を求め、この点と、検出された1個の境界点とを通る1次直線を引いて胸筋ラインtとする(図15参照)。なお、検出された境界点が0個の場合には、胸筋ラインtが存在していないものとする。
乳腺マップ重心対応位置検出手段24は、図16に示すように、胸筋領域と乳房領域の境界線上の境界点を検出する境界点検出手段261と、胸筋ラインtを検出する胸筋ライン検出手段262とスキンラインRを検出する輪郭検出手段211と、胸筋ラインtとスキンラインRに囲まれた胸筋領域を除いた乳房領域乳内から乳腺分布マップを作成する乳腺分布マップ作成手段241、乳腺分布マップの重心を算出する乳腺重心算出手段242とを備える。
まず、右乳房撮影画像SAと、左乳房撮影画像SBの被写体領域を画像信号の濃度別に複数の領域に区分し、図17に示すような乳腺分布マップMA,MBを作成する。上記マップの具体的な作成手法は、岐阜大学の藤田教授らによって発表された文献(「乳腺 実質濃度の評価に基づくマンモグラムの自動分類法」医用電子と生体工学,第38巻2号2000年6月)に記載されている乳腺分布抽出技術等を用いる。具体的には、まず、上述の境界点検出手段261と胸筋ライン検出手段262で説明したように、画像中の濃度変化等から胸筋とその他の領域との境界線となる胸筋ラインtA,tBを検出する。また、輪郭検出手段211で説明したようにスキンラインRA,RBを検出し、スキンラインRA,RBと胸筋ラインtA,tBで囲まれた領域を乳房領域PaA(PdAを含む),PaB(PdBを含む)として求める。図18に示すように、胸領域を含んだ乳房領域PaA(PdAを含む),PaB(PdBを含む)に現れる画素値のヒストグラムのうち(画素値がTh1,Th2以下)、低濃度側は乳腺領域となり高濃度側は脂肪領域となる。この乳腺領域と脂肪領域の境となる画素値を基準値T1、T2として乳房領域PaA,PaB内を二値化して、低濃度側を乳腺領域、高濃度側を脂肪領域とする。このような手順を踏むことで、被写体領域をそれぞれ、胸筋領域PbA,PbB、脂肪領域PaA(PdBを含まない),PaB(PdBを含まない)、乳腺領域PdA,PdBに区分した三つの区分に分けた乳腺マップMA,MBを得ることができる。
そこで、乳腺重心算出手段242は、乳腺分布マップ作成手段20により作成された左右乳房の乳腺分布マップMA,MBの乳腺領域PdA,PdBから重心を算出する。
次に、位置合せ手段30について、図19のフローチャートに従って説明する。
まず、位置合せを行う右乳房撮影画像SA及び左乳房撮影画像SB(以下、両方をさす場合には単に左右乳房撮影画像という)が「CC方向」の撮影か、「MLO方向」の撮影であるかを判定する(S100)。
「CC方向」の撮影であれば、乳房領域の最高点がほぼニップル位置と一致する。そこで、ニップル対応位置検出手段21を用いて(S101)、ニップルが左右乳房撮影画像SA,SBから検出された場合には(S102)、ニップル位置を対応位置として同じ高さになるように位置合せを行うが(S103)、右乳房撮影画像SAまたは左乳房撮影画像SBのいずれかからニップル位置が検出されない場合には(S102)、ニップル最高点対応位置検出手段23を用いて(S104)、ニップルが検出されなかった左右乳房撮影画像SA,SBのいずれからか最高点を検出して、ニップルと最高点を対応位置として、図20に示すように、同じ高さになるように位置合せを行う(S105)。
あるいは、左右乳房撮影画像SA,SBのどちらからもニップルが検出されなかった場合には(S102)、最高点対応位置検出手段22を用いて(S106)、両方の乳房撮影画像から最高点を検出して位置合せを行う(S107)。
また、「MLO方向」の撮影であれば、乳房領域の最高点がニップルでない場合も多い。そこで、ニップル位置が検出されない場合には、例えば、胸筋ライン、スキンライン、乳腺マップの重心等を検出して位置合せを行う。
まず、ニップル対応位置検出手段21を用いて(S108)、ニップルが左右乳房撮影画像SA,SBから検出された場合には(S109)、ニップル位置を対応位置として同じ高さになるように位置合せを行うが(S110)、左右乳房撮影画像SA,SBのいずれかからニップルが検出されない場合には(S109)、胸筋ライン対応位置検出手段26を用いて胸筋ラインを検出する(S111)。両方の乳房撮影画像から胸筋ラインが検出された場合には(S112)、胸筋ラインtが乳房撮影画像の下の辺上と交わる点Qが左右乳乳房撮影画像SA,SBで一致するように(図15参照)、図21に示すように点QAと点QBの位置合せを行う(S113)。
胸筋ラインtが乳房撮影画像の両方から検出することが出来ない場合には(S112)、輪郭対応位置検出手段25でスキンラインRを検出して(S114)、スキンラインRの形状が略対称な場合には(S115)、スキンラインによる位置合せを行う(S116)。例えば、図22に示すように、左乳房撮影画像SBのスキンラインRBの左右を反転し(同図(b)参照)、スキンラインRAとスキンラインRBの差が最も小さくなるように上下左右に移動させて(同図(d)参照)位置合せを行って表示する(同図(c)参照)。上下左右に移動させてもスキンラインRAとスキンラインRBの差が所定の値以下ならない場合には、スキンラインRA,RBが対象ではないと判定してスキンラインによる位置合わせを行わない。
スキンラインR,RBで位置合せが出来ない場合には、さらに、乳腺マップ重心対応位置検出手段24を用いて(S117)、乳腺マップがはっきり検出できた場合には(S118)、図23に示すように、乳腺マップの重心GA,GBを左右乳房撮影画像から検出して、重心GA,GBが同じ高さになるように位置合せを行う(S119)。いずれでも用いても位置合せが出来ない場合には、エラー表示を行う(S120)。
上述のようにして対応する位置が検出された場合には位置合せを行って左右乳房撮影画像SA,SBを背中合わせに表示する。
また、位置合せを行う前に、図24のように左右乳房撮影画像SA,SBを表示し、いずれの位置合せ検出手段を用いるかを選択するようにしてもよい。このとき、選択する項目は、1つ選択しても複数選択してもよい。
上述では、「MLO方向」では、最高点位置による位置合せについては説明していないが、図25に示すようにニップル最高点対応位置検出手段23による位置合せを行ったり、最高点対応位置検出手段22を用いて最高点による位置合せを行ってもよい。
本実施の形態では、ニップルが存在するか否か等を対応位置が検出されるか否かによって判断しているが、ニップルが存在するか否か等の情報を電子カルテあるいは画像に付帯する患者情報等から取得できる場合は、それを利用してもよい。
以上、詳細に説明したように、複数の位置合せ手段を備えることにより正確に位置合せを行うことが出来、位置合せに失敗することが少なくなる。
本発明の乳房画像表示装置の概略構成図 乳房撮影画像に表れる画素値のヒストグラム 乳房撮影画像を2値化した結果を表す図 ニップル対応位置検出手段の構成図 スキンラインの検出方法を説明するための図 スキンラインより突出した乳頭突出部の検出を説明するための図 トップハット変換による乳頭突出部の検出を説明するための図 2次微分による乳頭突出部の検出を説明するための図 最高点対応位置検出手段の構成図 ニップル最高点対応位置検出手段の構成図 輪郭対応位置検出手段の構成図 胸筋ライン対応位置検出手段の構成図 乳房画像の側面画像を示す図 エッジ画像中において境界点を抽出する方法を説明する図 抽出された境界点が1個のときに抽出される胸筋ラインを示す図 乳腺マップ重心対応位置検出手段の構成図 左右乳房の乳腺分布マップを表す図 乳腺を検出する基準値となる画素値を表わすヒストグラム 位置合せ手段の動作を説明するためのフローチャート ニップルと最高点との位置合せを説明するための図 胸筋ラインによる位置合せを説明するための図 スキンラインによる位置合せを説明するための図 乳腺マップの重心による位置合せを説明するための図 位置合せ前に位置合せの方法を選択する方法を説明するための図 MLO方向の最高点による位置合わせの一例
符号の説明
1 乳房画像表示装置
10 乳房領域検出手段
20 対応位置検出手
30 位置合せ手段
21 ニップル対応位置検出手段
22 最高点対応位置検出手段
23 ニップル最高点対応位置検出手段
24 乳腺マップ重心対応位置検出手段
25 輪郭対応位置検出手段
26 胸筋ライン対応位置検出手段
211 輪郭検出手段
212 ニップル検出手段
222 最高点検出手段
241 乳腺分布マップ作成手段
242 乳腺重心算出手段
261 境界点検出手段
262 胸筋ライン検出手段

Claims (3)

  1. 右乳房が撮影された右乳房撮影画像と左乳房が撮影された左乳房撮影画像とを位置合せして表示する乳房画像表示装置において、
    前記右乳房撮影画像および前記左乳房撮影画像より乳房が撮影された右乳房領域および左乳房領域を検出する乳房領域検出手段と、
    該検出された右乳房領域と左乳房領域中の予め設定された対応する位置を検出する、予め設定された対応位置を互いに異にする複数の対応位置検出手段と、
    前記複数の対応位置検出手段のうちの1つの対応位置検出手段に前記右乳房領域と左乳房領域中の対応位置を検出させ、対応位置が検出されたときにはその対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行い、対応位置が検出されないときには他の対応位置検出手段により前記右乳房領域と左乳房領域中の対応位置を検出させ、検出された対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行う位置合せ手段とを備えたことを特徴とする乳房画像表示装置。
  2. 前記複数の対応位置検出手段が、
    前記右乳房領域および前記左乳房領域よりニップル位置を検出して左右のニップル位置を対応位置とするニップル対応位置検出手段、前記右乳房領域および前記左乳房領域より最高点を検出して左右の最高点位置を対応位置とする最高点対応位置検出手段、前記右乳房領域または前記左乳房領域のいずれかよりニップル位置を検出し、他の前記乳房領域より最高点位置を検出して左右のニップル位置と最高点位置とを対応位置とするニップル最高点対応位置検出手段、前記右乳房領域内および前記左乳房領域内の乳腺マップの重心を検出して左右の乳腺マップの重心の位置を対応位置とする乳腺マップ重心対応位置検出手段、前記右乳房領域および前記左乳房領域の輪郭を検出して左右の輪郭の位置を対応位置とする輪郭対応位置検出手段、および、前記右乳房領域および前記左乳房領域より胸筋ラインを検出して左右の胸筋ラインの位置を対応位置とする胸筋ライン対応位置検出手段のうち少なくとも2つの検出手段を有するものであることを特徴とする請求項1記載の乳房画像表示装置。
  3. 右乳房が撮影された右乳房撮影画像と左乳房が撮影された左乳房撮影画像とを位置合せして表示する乳房画像表示装置において、
    コンピュータを、
    前記右乳房撮影画像および前記左乳房撮影画像より乳房が撮影された右乳房領域および左乳房領域を検出する乳房領域検出手段と、
    該検出された右乳房領域と左乳房領域中の予め設定された対応する位置を検出する、予め設定された対応位置を互いに異にする複数の対応位置検出手段と、
    前記複数の対応位置検出手段のうちの1つの対応位置検出手段に前記右乳房領域と左乳房領域中の対応位置を検出させ、対応位置が検出されたときにはその対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行い、対応位置が検出されないときには他の対応位置検出手段により前記右乳房領域と左乳房領域中の対応位置を検出させ、検出された対応位置に基づいて左右の前記乳房撮影画像の位置合わせを行う位置合せ手段として機能させるプログラム。
JP2004248366A 2004-08-27 2004-08-27 乳房画像表示装置およびそのプログラム Withdrawn JP2006061472A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2004248366A JP2006061472A (ja) 2004-08-27 2004-08-27 乳房画像表示装置およびそのプログラム
US11/212,613 US20060159321A1 (en) 2004-08-27 2005-08-29 Breast image display apparatus and program therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004248366A JP2006061472A (ja) 2004-08-27 2004-08-27 乳房画像表示装置およびそのプログラム

Publications (1)

Publication Number Publication Date
JP2006061472A true JP2006061472A (ja) 2006-03-09

Family

ID=36108436

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004248366A Withdrawn JP2006061472A (ja) 2004-08-27 2004-08-27 乳房画像表示装置およびそのプログラム

Country Status (2)

Country Link
US (1) US20060159321A1 (ja)
JP (1) JP2006061472A (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006246951A (ja) * 2005-03-08 2006-09-21 Konica Minolta Medical & Graphic Inc 画像処理装置
JP2007312868A (ja) * 2006-05-24 2007-12-06 Yokogawa Electric Corp 乳房画像表示装置
WO2008035444A1 (fr) 2006-09-22 2008-03-27 Aloka Co., Ltd. Système de diagnostic de sein à ultrasons
KR100849163B1 (ko) * 2006-03-21 2008-07-30 주식회사 메디칼스탠다드 디지털 좌우 유방 영상들을 자동으로 유두의 높이를 맞추어 좌우 대칭으로 배치하는 영상 처리방법
JP2008289698A (ja) * 2007-05-25 2008-12-04 Toshiba Corp 医用画像表示装置、医用画像表示方法、プログラム、記憶媒体およびマンモグラフィ装置
JP2014064703A (ja) * 2012-09-25 2014-04-17 Toshiba Corp 磁気共鳴イメージング装置及び画像処理装置
JP2017042558A (ja) * 2015-08-28 2017-03-02 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008073305A (ja) * 2006-09-22 2008-04-03 Gifu Univ 超音波乳房診断システム
JP5586917B2 (ja) * 2009-10-27 2014-09-10 キヤノン株式会社 情報処理装置、情報処理方法およびプログラム
JP5538862B2 (ja) * 2009-12-18 2014-07-02 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法、及びプログラム
US8855382B2 (en) * 2010-03-30 2014-10-07 Kabushiki Kaisha Toshiba MRI mammography with facilitated comparison to other mammography images
US8781187B2 (en) * 2011-07-13 2014-07-15 Mckesson Financial Holdings Methods, apparatuses, and computer program products for identifying a region of interest within a mammogram image
US9064332B2 (en) * 2012-01-12 2015-06-23 Siemens Medical Solutions Usa, Inc. Fused-image visualization for surgery evaluation
EP2629263B1 (en) * 2012-02-17 2015-06-03 Agfa HealthCare Method for defining a region of interest in a radiation image of a breast
EP2631873B1 (en) * 2012-02-27 2015-12-16 Agfa Healthcare Image alignment of breast images
JP5896084B2 (ja) 2013-08-01 2016-03-30 パナソニック株式会社 類似症例検索装置、類似症例検索装置の制御方法、およびプログラム
US9626476B2 (en) 2014-03-27 2017-04-18 Change Healthcare Llc Apparatus, method and computer-readable storage medium for transforming digital images
US9256939B1 (en) 2014-07-17 2016-02-09 Agfa Healthcare System and method for aligning mammography images
US10810737B2 (en) * 2018-10-18 2020-10-20 International Business Machines Corporation Automated nipple detection in mammography
JP2020160773A (ja) * 2019-03-26 2020-10-01 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1995018561A2 (en) * 1993-12-30 1995-07-13 Philips Electronics Nv Automatic segmentation and skinline detection in digital mammograms
US5572565A (en) * 1994-12-30 1996-11-05 Philips Electronics North America Corporation Automatic segmentation, skinline and nipple detection in digital mammograms
US6035056A (en) * 1997-03-27 2000-03-07 R2 Technology, Inc. Method and apparatus for automatic muscle segmentation in digital mammograms
US7616818B2 (en) * 2003-02-19 2009-11-10 Agfa Healthcare Method of determining the orientation of an image

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006246951A (ja) * 2005-03-08 2006-09-21 Konica Minolta Medical & Graphic Inc 画像処理装置
JP4595594B2 (ja) * 2005-03-08 2010-12-08 コニカミノルタエムジー株式会社 画像処理装置及びプログラム
KR100849163B1 (ko) * 2006-03-21 2008-07-30 주식회사 메디칼스탠다드 디지털 좌우 유방 영상들을 자동으로 유두의 높이를 맞추어 좌우 대칭으로 배치하는 영상 처리방법
JP2007312868A (ja) * 2006-05-24 2007-12-06 Yokogawa Electric Corp 乳房画像表示装置
WO2008035444A1 (fr) 2006-09-22 2008-03-27 Aloka Co., Ltd. Système de diagnostic de sein à ultrasons
JP2008289698A (ja) * 2007-05-25 2008-12-04 Toshiba Corp 医用画像表示装置、医用画像表示方法、プログラム、記憶媒体およびマンモグラフィ装置
JP2014064703A (ja) * 2012-09-25 2014-04-17 Toshiba Corp 磁気共鳴イメージング装置及び画像処理装置
JP2017042558A (ja) * 2015-08-28 2017-03-02 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム

Also Published As

Publication number Publication date
US20060159321A1 (en) 2006-07-20

Similar Documents

Publication Publication Date Title
US20060159321A1 (en) Breast image display apparatus and program therefor
US7796793B2 (en) Determining mammographic image view and laterality
US7593562B2 (en) Method and system for computer aided detection (CAD) cued reading of medical images
EP2807630B1 (en) Processing and displaying a breast image
US7881508B2 (en) Method, apparatus, and program for judging medical images
US20060050944A1 (en) Nipple detection apparatus and program
US20120177259A1 (en) Image processing device, image processing method, computer-readable recording device
CN104395930A (zh) 用于定位脊柱的方法、设备和系统
JP2003334183A (ja) 異常陰影検出装置
JPH09251535A (ja) 2次元多階調画像におけるパタン検出方法及び装置
JP2008289698A (ja) 医用画像表示装置、医用画像表示方法、プログラム、記憶媒体およびマンモグラフィ装置
JP4124406B2 (ja) 異常陰影検出装置
JP2005065855A (ja) 乳腺領域閾値決定方法および装置並びにプログラム
JP2005065856A (ja) 異常陰影検出方法および装置並びにプログラム
JP2005065857A (ja) 診断支援情報出力方法および装置並びにプログラム
JP6797623B2 (ja) 画像処理装置および画像処理方法
Ozekes et al. Automatic lung nodule detection using template matching
KR101494975B1 (ko) 3차원 자동 유방 초음파 영상의 유두 자동 검출 시스템 및 그 검출 방법
JP2000237176A (ja) 放射線画像表示方法および装置
JP2005052329A (ja) 異常陰影候補検出装置およびプログラム
JP2006181025A (ja) 異常陰影検出方法および装置並びにプログラム
JP3970570B2 (ja) 異常陰影検出装置および胸筋領域抽出装置
JP2005211439A (ja) 異常陰影表示装置およびそのプログラム
Xu et al. A novel pectoral muscle segmentation algorithm based on polyline fitting and elastic thread approaching
JP4252744B2 (ja) 異常陰影検出装置

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20061207

A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20071106