JP2021019931A - 画像処理装置、方法およびプログラム - Google Patents

画像処理装置、方法およびプログラム Download PDF

Info

Publication number
JP2021019931A
JP2021019931A JP2019138865A JP2019138865A JP2021019931A JP 2021019931 A JP2021019931 A JP 2021019931A JP 2019138865 A JP2019138865 A JP 2019138865A JP 2019138865 A JP2019138865 A JP 2019138865A JP 2021019931 A JP2021019931 A JP 2021019931A
Authority
JP
Japan
Prior art keywords
tissue
composite
dimensional image
radiation source
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019138865A
Other languages
English (en)
Other versions
JP7209599B2 (ja
Inventor
毅久 荒井
Takehisa Arai
毅久 荒井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2019138865A priority Critical patent/JP7209599B2/ja
Priority to US16/925,776 priority patent/US11517280B2/en
Publication of JP2021019931A publication Critical patent/JP2021019931A/ja
Application granted granted Critical
Publication of JP7209599B2 publication Critical patent/JP7209599B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/025Tomosynthesis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/502Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of breast, i.e. mammography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5217Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5223Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data generating planar views from image data, e.g. extracting a coronal view from a 3D image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/008Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10112Digital tomosynthesis [DTS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30068Mammography; Breast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2211/00Image generation
    • G06T2211/40Computed tomography
    • G06T2211/436Limited angle

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physiology (AREA)
  • Human Computer Interaction (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Quality & Reliability (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

【課題】画像処理装置、方法およびプログラムにおいて、トモシンセシス撮影により取得される合成2次元画像において、乳腺および石灰化のような、被写体に含まれる組織の関連性を認識しやすくする。【解決手段】再構成部が、トモシンセシス撮影により取得した投影画像を再構成して、被写体の複数の断層面を表す複数の断層画像を生成する。合成部が、複数の断層画像を合成して合成2次元画像を生成する。表示制御部が、合成2次元画像を表示部に表示し、表示された合成2次元画像において、互いに関連して被写体内に存在する第1の組織および第2の組織のうちの一方の組織が選択されると、選択された一方の組織および選択された一方の組織に関連する他方の組織を強調表示する。【選択図】図3

Description

本開示は、画像処理装置、方法およびプログラムに関する。
近年、乳がんの早期発見を促すため、乳房を撮影する放射線画像撮影装置(マンモグラフィと呼ばれる)を用いた画像診断が注目されている。また、マンモグラフィにおいて、放射線源を移動させて複数の線源位置から乳房に放射線を照射して撮影を行い、これにより取得した複数の投影画像を加算して所望の断層面を強調した断層画像を生成するトモシンセシス撮影が提案されている。トモシンセシス撮影では、撮影装置の特性および必要な断層画像に応じて、放射線源を放射線検出器と平行に移動させたり、円または楕円の弧を描くように移動させたりして、複数の線源位置において乳房を撮影することにより複数の投影画像を取得し、単純逆投影法またはフィルタ逆投影法等の逆投影法等を用いてこれらの投影画像を再構成して断層画像を生成する。
このような断層画像を乳房における複数の断層面において生成することにより、乳房内において断層面が並ぶ深さ方向に重なり合った構造を分離することができる。このため、従来の単純撮影により取得される2次元画像(以下、単純2次元画像とする)においては検出が困難であった病変を発見することが可能となる。
また、トモシンセシス撮影により取得された、放射線検出器の検出面から放射線源側に向けた距離(高さ方向の位置)が異なる複数の断層画像を加算することにより、単純2次元画像(以下、単純2次元画像に相当する擬似的な2次元画像(以下、合成2次元画像とする)を生成する技術が知られている(特許文献1参照)。
しかしながら、合成2次元画像は、断層画像を加算して生成されるため、石灰化等の病変および乳腺が重なり、病変および乳腺の3次元的な位置情報が失われている。このため、断層画像から石灰化および乳腺を抽出し、合成2次元画像において、石灰化に基づいて乳腺を区分して表示する手法が提案されている(特許文献2参照)。特許文献2に記載された手法によれば、石灰化および乳腺を区別しやすくすることができる。
特開2014−128716号公報 特開2019−037576号公報
乳房の画像診断においては、石灰化が乳房内に散発している場合、その石灰化は比較的良性であることが多い。一方、乳腺に沿って石灰化が分布している場合、その石灰化は乳腺と関連したものであることから、悪性であることが多い。上記特許文献2に記載された手法は、合成2次元画像において、石灰化および乳腺を区別しやすくできるものの、乳腺と石灰化との関連性を認識しやすくすることはできない。このため、乳房の画像診断において、断層画像を1枚ずつ表示して、石灰化と乳腺とをマーキングしながら読影を行うことが考えられる。しかしながら、そのような読影の仕方は読影を行う医師の負担が非常に大きい。
本開示は上記事情に鑑みなされたものであり、トモシンセシス撮影により取得される合成2次元画像において、乳腺および石灰化のような、被写体に含まれる組織の関連性を認識しやすくすることを目的とする。
本開示による画像処理装置は、放射線源を検出部に対して相対的に移動させ、放射線源の移動による複数の線源位置において、被写体に放射線を照射するトモシンセシス撮影を撮影装置に行わせることにより生成された、複数の線源位置のそれぞれに対応する複数の投影画像を再構成することにより、被写体の複数の断層面を表す複数の断層画像を生成する再構成部と、
複数の断層画像を合成して合成2次元画像を生成する合成部と、
合成2次元画像を表示部に表示し、表示された合成2次元画像において、互いに関連して被写体内に存在する第1の組織および第2の組織のうちの一方の組織が選択されると、選択された一方の組織および選択された一方の組織に関連する他方の組織を強調する表示制御部とを備える。
なお、本開示による画像処理装置においては、合成部は、複数の断層画像の対応する画素の画素値を重み付け加算することにより、合成2次元画像を生成するものであってもよい。
また、本開示による画像処理装置においては、複数の断層画像から、第1の組織および第2の組織を抽出する抽出部をさらに備えるものであってもよい。
また、本開示による画像処理装置においては、抽出部は、表示部に表示された複数の断層画像に対する操作者からの指示に基づいて、第1の組織および第2の組織を抽出するものであってもよい。
また、本開示による画像処理装置においては、被写体は乳房であり、第1の組織は乳腺であり、第2の組織は石灰化であってもよい。
本開示による画像処理方法は、放射線源を検出部に対して相対的に移動させ、放射線源の移動による複数の線源位置において、被写体に放射線を照射するトモシンセシス撮影を撮影装置に行わせることにより生成された、複数の線源位置のそれぞれに対応する複数の投影画像を再構成することにより、被写体の複数の断層面を表す複数の断層画像を生成し、
複数の断層画像を合成して合成2次元画像を生成し、
合成2次元画像を表示部に表示し、表示された合成2次元画像において、互いに関連して被写体内に存在する第1の組織および第2の組織のうちの一方の組織が選択されると、選択された一方の組織および選択された一方の組織に関連する他方の組織を強調表示する。
なお、本開示による画像処理方法をコンピュータに実行させるためのプログラムとして提供してもよい。
本開示による他の画像処理装置は、コンピュータに実行させるための命令を記憶するメモリと、
記憶された命令を実行するよう構成されたプロセッサとを備え、プロセッサは、
放射線源を検出部に対して相対的に移動させ、放射線源の移動による複数の線源位置において、被写体に放射線を照射するトモシンセシス撮影を撮影装置に行わせることにより生成された、複数の線源位置のそれぞれに対応する複数の投影画像を再構成することにより、被写体の複数の断層面を表す複数の断層画像を生成し、
複数の断層画像を合成して合成2次元画像を生成し、
合成2次元画像を表示部に表示し、表示された合成2次元画像において、互いに関連して被写体内に存在する第1の組織および第2の組織のうちの一方の組織が選択されると、選択された一方の組織および選択された一方の組織に関連する他方の組織を強調表示する処理を実行する。
本開示によれば、被写体に含まれる第1の組織および第2の組織の関連性を認識しやすくすることができる。
本開示の実施形態による画像処理装置を適用した放射線画像撮影システムの概略構成図 マンモグラフィ装置を図1の矢印A方向から見た図 本実施形態において、コンソールを構成するコンピュータに画像処理プログラムをインストールすることにより実現された画像処理装置の概略構成を示す図 投影画像の取得を説明するための図 断層画像の生成を説明するための図 合成2次元画像の表示画面を示す図 合成2次元画像の表示画面を示す図 合成2次元画像の表示画面を示す図 本実施形態において行われる処理を示すフローチャート
以下、図面を参照して本開示の実施形態について説明する。図1は本開示の実施形態による画像処理装置を適用した放射線画像撮影システムの概略構成図、図2は放射線画像撮影システムに含まれるマンモグラフィ装置を図1の矢印A方向から見た図である。
図1に示すように、本実施形態の放射線画像撮影システム1は、コンソール2およびマンモグラフィ装置10を備える。コンソール2は、表示部3および入力部4を備える。
本実施形態の放射線画像撮影システム1は、コンソール2を介して外部のシステム(例えば、RIS:Radiology Information System)から入力された指示(撮影オーダ)に基づいて、医師および放射線技師等の操作者の操作により、マンモグラフィ装置10により、乳房の撮影を行って乳房の放射線画像である乳房画像を取得する機能を有する。本実施形態においては、マンモグラフィ装置10はトモシンセシス撮影および各種撮影方向の単純撮影の双方を行って、乳房の断層画像および2次元の乳房画像を生成することが可能なものである。なお、2次元の乳房画像は単純撮影により取得される乳房画像を意味する。
マンモグラフィ装置10は、不図示の基台に対して回転軸11により連結されたアーム部12を備えている。アーム部12の一方の端部には撮影台13が、その他方の端部には撮影台13と対向するように放射線照射部14が取り付けられている。アーム部12は、放射線照射部14が取り付けられた端部のみを回転することが可能に構成されており、これにより、撮影台13を固定して放射線照射部14のみを回転することが可能となっている。なお、アーム部12の回転は、コンソール2により制御される。
撮影台13の内部には、フラットパネルディテクタ等の放射線検出器15が備えられている。放射線検出器15は放射線の検出面15Aを有する。また、撮影台13の内部には、放射線検出器15から読み出された電荷信号を電圧信号に変換するチャージアンプ、チャージアンプから出力された電圧信号をサンプリングする相関2重サンプリング回路、および電圧信号をデジタル信号に変換するAD(Analog Digital)変換部等が設けられた回路基板等も設置されている。
放射線検出器15は、放射線画像の記録および読み出しを繰り返して行うことができるものであり、放射線を直接電荷に変換する、いわゆる直接型の放射線検出器を用いてもよいし、放射線を一旦可視光に変換し、その可視光を電荷信号に変換する、いわゆる間接型の放射線検出器を用いるようにしてもよい。また、放射線画像信号の読出方式としては、TFT(Thin Film Transistor)スイッチをオンおよびオフすることによって放射線画像信号が読み出される、いわゆるTFT読出方式のもの、または読取光を照射することによって放射線画像信号が読み出される、いわゆる光読出方式のものを用いることが望ましいが、これに限らずその他のものを用いるようにしてもよい。
放射線照射部14の内部には、放射線源16が収納されている。放射線源16は放射線として例えばX線を出射するものであり、放射線源16から放射線を照射するタイミングおよび放射線源16における放射線発生条件、すなわちターゲットおよびフィルタの材質の選択、管電圧並びに照射時間等は、コンソール2により制御される。
また、アーム部12には、乳房Mを押さえつけて圧迫する圧迫板17、圧迫板17を支持する支持部18、および支持部18を図1および図2の上下方向に移動させる移動機構19が設けられている。なお、圧迫板17と撮影台13との間隔、すなわち圧迫厚はコンソール2に入力される。また、圧迫板17は、撮影の種類に応じた複数のサイズおよび形状のものが用意されている。このため、圧迫板17は、支持部18に対して交換可能に取り付けられている。また、圧迫板17の図1における左右の縁部には側壁17Aが形成されている。側壁17Aは、圧迫板17の圧迫面17Bにより圧迫された乳房Mが圧迫板17からはみ出した場合に、患者の痛みを軽減するために形成されている。
表示部3は、CRT(Cathode Ray Tube)または液晶ディスプレイ等の表示装置であり、後述する断層画像および合成2次元画像の他、操作に必要なメッセージ等を表示する。なお、表示部3は音声を出力するスピーカを内蔵するものであってもよい。
入力部4はキーボード、マウスまたはタッチパネル方式等の入力装置からなり、操作者によるマンモグラフィ装置10の操作の指示を受け付ける。また、トモシンセシス撮影を行うために必要な、撮影条件等の各種情報の入力および情報の修正の指示も受け付ける。本実施形態においては、操作者が入力部4から入力した情報に従って、マンモグラフィ装置10の各部が動作する。
コンソール2には、本実施形態による画像処理プログラムがインストールされている。本実施形態においては、コンソール2は、操作者が直接操作するワークステーションあるいはパーソナルコンピュータでもよいし、それらとネットワークを介して接続されたサーバコンピュータでもよい。画像処理プログラムは、ネットワークに接続されたサーバコンピュータの記憶装置、あるいはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じてコンピュータにダウンロードされ、インストールされる。または、DVD(Digital Versatile Disc)、CD−ROM(Compact Disc Read Only Memory)等の記録媒体に記録されて配布され、その記録媒体からコンピュータにインストールされる。
図3はコンソール2を構成するコンピュータに本実施形態による画像処理プログラムをインストールすることにより実現される画像処理装置の概略構成を示す図である。図3に示すように、画像処理装置は、標準的なコンピュータの構成として、CPU(Central Processing Unit)21、メモリ22およびストレージ23を備えている。
ストレージ23は、ハードディスクドライブまたはSSD(Solid State Drive)等のストレージデバイスからなり、マンモグラフィ装置10の各部を駆動するためのプログラムおよび画像処理プログラムを含む各種情報が記憶されている。また、撮影により取得された投影画像,並びに後述するように生成された断層画像および合成2次元画像等もストレージ23に記憶される。
メモリ22には、各種処理をCPU21に実行させるために、ストレージ23に記憶されたプログラム等が一時的に記憶される。画像処理プログラムは、CPU21に実行させる処理として、マンモグラフィ装置10にトモシンセシス撮影を行わせて、複数の線源位置のそれぞれに対応する乳房Mの複数の投影画像を取得する画像取得処理、複数の投影画像を再構成することにより、被写体である乳房Mの複数の断層面のそれぞれにおける複数の断層画像を生成する再構成処理、複数の断層画像から合成2次元画像を生成する合成処理、複数の断層画像から乳腺および石灰化を抽出する抽出処理、並びに合成2次元画像を表示部3に表示する表示制御処理を規定する。
そして、CPU21が画像処理プログラムに従いこれらの処理を実行することで、コンソール2のCPU21は、画像取得部31、再構成部32、合成部33、抽出部34および表示制御部35として機能する。
画像取得部31は、アーム部12を回転軸11の周りに回転させることにより放射線源16を移動させ、放射線源16の移動による複数の線源位置において、トモシンセシス撮影用の撮影条件により乳房Mに放射線を照射し、乳房Mを透過した放射線を放射線検出器15により検出して、複数の線源位置における複数の投影画像Gi(i=1〜n、nは線源位置の数であり、例えばn=15)を取得する。図4は投影画像Giの取得を説明するための図である。図4に示すように、放射線源16をS1、S2、・・Sc、・・、Snの各線源位置に移動し、各線源位置において放射線源16を駆動して乳房Mに放射線を照射し、乳房Mを透過した放射線を放射線検出器15により検出することにより、各線源位置S1〜Snに対応して、投影画像G1、G2、・・Gc、・・、Gnが取得される。ここで、図4に示す線源位置Scは、放射線源16から出射された放射線の光軸X0が放射線検出器15の検出面15Aと直交する線源位置である。以降、線源位置Scを基準線源位置Scと称するものとする。なお、各線源位置S1〜Snにおいては、同一の線量の放射線が乳房Mに照射される。取得された複数の投影画像Giはストレージ23に保存される。
再構成部32は、投影画像Giを再構成することにより、乳房Mの所望とする断層面を強調した断層画像を生成する。具体的には、再構成部32は、単純逆投影法あるいはフィルタ逆投影法等の周知の逆投影法等を用いて複数の投影画像Giを再構成して、図5に示すように、乳房Mの複数の断層面のそれぞれにおける複数の断層画像Dj(j=1〜m)を生成する。この際、乳房Mを含む3次元空間における3次元の座標位置が設定され、設定された3次元の座標位置に対して、複数の投影画像Giの対応する画素位置の画素値が再構成されて、その座標位置の画素値が算出される。なお、再構成により生成された複数の断層画像Djにより、乳房Mの3次元画像が構成される。
合成部33は、複数の断層画像Djを用いて合成2次元画像CG0を生成する。合成2次元画像CG0は、基準線源位置Scから乳房Mに放射線を照射して撮影した単純2次元画像に相当する擬似的な2次元画像である。本実施形態においては、合成部33は、加算法により合成2次元画像CG0を生成する。加算法は、複数の断層画像Djを積層した状態で、基準線源位置Scからの放射線検出器15へ向かう視点方向、すなわち図4に示す光軸X0に沿って、各断層画像Djにおいて対応する画素の画素値を重み付け加算する方法である。加算法においては、重み付け加算する際の各画素に対する重みは、断層画像Djの数をmとした場合、1/mに設定される。なお、合成2次元画像CG0の生成は、加算法に限定されるものではなく、公知の技術を適用することができる。
抽出部34は、複数の断層画像Djから乳腺および石灰化を抽出する。本実施形態においては、乳腺および石灰化の抽出は、公知のコンピュータ支援画像診断(CAD: Computer Aided Diagnosis、以下CADと称する)のアルゴリズムを用いることにより行う。例えば乳腺は管状の組織であり、断層画像Djにおける信号値が脂肪と比較して低い(すなわち輝度が高い)。このため、抽出部34は、複数の断層画像Djからなる3次元画像から、連続して繋がる信号値が低い管状の組織を乳腺として抽出する。なお、本実施形態においては、乳腺の末端にある小葉も乳腺の一部として抽出するが、小葉を乳腺の一部として抽出しなくてもよい。
また、抽出部34は、例えば特開2002−099896号公報に記載された手法により、石灰化の陰影に対応する形状フィルタを用いて、複数の断層画像Djからなる3次元画像から、石灰化の領域を抽出する。
なお、抽出部34を、ディープラーニング等により乳腺および石灰化を抽出するように学習がなされた判別器を備えるものとし、判別器を用いて、複数の断層画像Djからなる3次元画像から乳腺および石灰化を抽出するものとしてもよい。
ここで、石灰化は乳房内に散発している場合は比較的良性であることが多い。一方、乳腺に沿って石灰化が分布している場合、その石灰化は乳腺と関連していることから、悪性であることが多い。このため、本実施形態においては、抽出部34は、抽出した乳腺と石灰化とを関連付ける。図6は乳腺と石灰化との関連付けを説明するための図である。なお、図6においては説明のために、断層画像Djにおいて、乳房Mから3つの乳腺41A〜41Cが抽出され、乳腺41Aに沿って複数の石灰化42が抽出され、さらに胸壁近くに石灰化43が抽出されたものとする。なお、乳腺および石灰化は断層画像Djが並ぶ方向(すなわち乳房Mの厚さ方向)にも3次元的に存在するが、図6においては、説明のために乳房Mの厚さ方向に存在する乳腺および石灰化が,1つの断層画像Djに含まれるように示している。ここで、図6においては、乳腺41A〜41Cの末端において、袋状の小葉が抽出されている。
抽出部34は、乳腺41A〜41Cのそれぞれから、予め定められた距離内にある石灰化を、その乳腺と関連付ける。図6においては、乳腺41Aに沿って石灰化42が存在するため、乳腺41Aと石灰化42とが関連付けられる。なお、石灰化43はいずれの乳腺41A〜41Cからも離れた位置にあるため、石灰化43はいずれの乳腺41A〜41Cとも関連付けられない。
表示制御部35は、合成2次元画像CG0を表示部3に表示する。図7は表示部3に表示された合成2次元画像を示す図である。図7に示すように,表示画面50には合成2次元画像CG0が表示される。この状態において、入力部4からの指示によりカーソル51を乳腺41Aの位置に移動して、乳腺41Aを選択すると、図8に示すように、乳腺41Aおよびこれに関連する石灰化42が強調表示される。強調表示は、例えば選択した乳腺41Aおよび石灰化42にマスキングをしたり、輝度を高くしたり、ハッチングを付与したりする等により行うことができる。図8においては、乳腺41Aおよび石灰化42の強調表示を、乳腺41Aおよび石灰化42を黒く塗りつぶすことにより示している。
一方、表示制御部35は、表示された合成2次元画像CG0において、石灰化42が選択された場合、選択された石灰化42に関連する乳腺41Aを強調表示する。この際、乳腺41Aと関連する石灰化は、そのすべてを強調表示してもよく、選択した石灰化のみを強調表示してもよい。
次いで、本実施形態において行われる処理について説明する。図9は本実施形態において行われる処理を示すフローチャートである。操作者による処理開始の指示を入力部4が受け付けるとトモシンセシス撮影が行われて、画像取得部31が複数の投影画像Giを取得する(ステップST1)。次いで、再構成部32が、複数の投影画像Giを再構成することにより、乳房Mの複数の断層面における複数の断層画像Djを生成する(ステップST2)。また、合成部33が、複数の断層画像Djを合成することにより合成2次元画像CG0を生成する(ステップST3)。また、抽出部34が、複数の断層画像Djから乳腺および石灰化を抽出する(ステップST4)。なお、ステップST4の処理は、ステップST3の前に行ってもよく、ステップST3と並列に行ってもよい。
そして、表示制御部35が、合成2次元画像CG0を表示部3に表示する(ステップST5)。続いて、表示制御部35は、操作者により、合成2次元画像CG0に含まれる乳腺または石灰化が選択されたか否かを判定する(ステップST6)。ステップST6が肯定されると、選択された乳腺または石灰化と関連する石灰化または乳腺を強調表示する(ステップST7)。すなわち、乳腺が選択された場合は、選択された乳腺および選択された乳腺と関連する石灰化を強調表示する。一方、石灰化が選択された場合は、選択された石灰化および選択された石灰化と関連する乳腺を強調表示する。
一方、ステップST6が否定されると、ステップST8に進む。そして、表示制御部35は、操作者による終了指示がなされたか否かを判定し(ステップST8)、ステップST8が否定されるとステップST6に戻り、ステップST6以降の処理を繰り返す。ステップST8が肯定されると、処理を終了する。
このように、本実施形態においては、合成2次元画像CG0を表示部3に表示し、表示した合成2次元画像CG0において、互いに関連して乳房M内に存在する乳腺または石灰化のうちの一方の組織が選択されると、選択された一方の組織および選択された一方の組織に関連する他方の組織を強調表示するようにした。このため、合成2次元画像CG0に含まれる乳房Mに含まれる乳腺と石灰化との関連性を認識しやすくすることができる。
なお、上記実施形態においては、抽出部34が、CADを用いて断層画像Djから乳腺および石灰化を抽出しているが、これに限定されるものではない。断層画像Djを表示部3に表示し、操作者が入力部4を用いて、断層画像Djに含まれる乳腺および石灰化を選択することにより、抽出部34が選択された乳腺および石灰化を抽出するようにしてもよい。
また、上記実施形態においては、合成部33が合成2次元画像を生成する方法として加算法を適用したが、上述したように、公知の他の技術を適用することができる。例えば、各断層画像の対応する画素における最小値を用いる、いわゆる最小経路法を適用してもよい。
また、上記実施形態における放射線は、とくに限定されるものではなく、X線の他、α線またはγ線等を適用することができる。
また、上記実施形態において、例えば、画像取得部31、再構成部32、合成部33、抽出部34および表示制御部35といった各種の処理を実行する処理部(Processing Unit)のハードウェア的な構造としては、次に示す各種のプロセッサ(Processor)を用いることができる。上記各種のプロセッサには、上述したように、ソフトウェア(プログラム)を実行して各種の処理部として機能する汎用的なプロセッサであるCPUに加えて、FPGA(Field Programmable Gate Array)等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device :PLD)、ASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
1つの処理部は、これらの各種のプロセッサのうちの1つで構成されてもよいし、同種または異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGAの組み合わせまたはCPUとFPGAとの組み合わせ)で構成されてもよい。また、複数の処理部を1つのプロセッサで構成してもよい。
複数の処理部を1つのプロセッサで構成する例としては、第1に、クライアントおよびサーバ等のコンピュータに代表されるように、1つ以上のCPUとソフトウェアとの組み合わせで1つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第2に、システムオンチップ(System On Chip:SoC)等に代表されるように、複数の処理部を含むシステム全体の機能を1つのIC(Integrated Circuit)チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの1つ以上を用いて構成される。
さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路(Circuitry)を用いることができる。
1 放射線画像撮影システム
2 コンソール
3 表示部
4 入力部
10 マンモグラフィ装置
11 回転軸
12 アーム部
13 撮影台
14 放射線照射部
15 放射線検出器
15A 検出面
16 放射線源
17 圧迫板
17A 側壁
17B 圧迫面
17A 側壁
17B 圧迫面

21 CPU
22 メモリ
23 ストレージ
31 画像取得部
32 再構成部
33 合成部
34 抽出部
35 表示制御部
41A〜41C 乳腺
42,43 石灰化
50 表示画面
51 カーソル
CG0 合成2次元画像
Dj(j=1〜m) 断層画像
Gi(i=1〜n) 投影画像
M 乳房
Si(i=1〜n) 線源位置
Sc 基準線源位置
X0 光軸

Claims (7)

  1. 放射線源を検出部に対して相対的に移動させ、前記放射線源の移動による複数の線源位置において、被写体に放射線を照射するトモシンセシス撮影を撮影装置に行わせることにより生成された、前記複数の線源位置のそれぞれに対応する複数の投影画像を再構成することにより、前記被写体の複数の断層面を表す複数の断層画像を生成する再構成部と、
    前記複数の断層画像を合成して合成2次元画像を生成する合成部と、
    前記合成2次元画像を表示部に表示し、該表示された合成2次元画像において、互いに関連して前記被写体内に存在する第1の組織および第2の組織のうちの一方の組織が選択されると、該選択された一方の組織および該選択された一方の組織に関連する他方の組織を強調表示する表示制御部とを備えた画像処理装置。
  2. 前記合成部は、前記複数の断層画像の対応する画素の画素値を重み付け加算することにより、前記合成2次元画像を生成する請求項1に記載の画像処理装置。
  3. 前記複数の断層画像から、前記第1の組織および前記第2の組織を抽出する抽出部をさらに備えた請求項1または2に記載の画像処理装置。
  4. 前記抽出部は、前記表示部に表示された前記複数の断層画像に対する操作者からの指示に基づいて、前記第1の組織および前記第2の組織を抽出する請求項3に記載の画像処理装置。
  5. 前記被写体は乳房であり、前記第1の組織は乳腺であり、前記第2の組織は石灰化である請求項1から4のいずれか1項に記載の画像処理装置。
  6. 放射線源を検出部に対して相対的に移動させ、前記放射線源の移動による複数の線源位置において、被写体に放射線を照射するトモシンセシス撮影を撮影装置に行わせることにより生成された、前記複数の線源位置のそれぞれに対応する複数の投影画像を再構成することにより、前記被写体の複数の断層面を表す複数の断層画像を生成し、
    前記複数の断層画像を合成して合成2次元画像を生成し、
    前記合成2次元画像を表示部に表示し、該表示された合成2次元画像において、互いに関連して前記被写体内に存在する第1の組織および第2の組織のうちの一方の組織が選択されると、該選択された一方の組織および該選択された一方の組織に関連する他方の組織を強調表示する画像処理方法。
  7. 放射線源を検出部に対して相対的に移動させ、前記放射線源の移動による複数の線源位置において、被写体に放射線を照射するトモシンセシス撮影を撮影装置に行わせることにより生成された、前記複数の線源位置のそれぞれに対応する複数の投影画像を再構成することにより、前記被写体の複数の断層面を表す複数の断層画像を生成する手順と、
    前記複数の断層画像を合成して合成2次元画像を生成する手順と、
    前記合成2次元画像を表示部に表示し、該表示された合成2次元画像において、互いに関連して前記被写体内に存在する第1の組織および第2の組織のうちの一方の組織が選択されると、該選択された一方の組織および該選択された一方の組織に関連する他方の組織を強調表示する手順とをコンピュータに実行させる画像処理プログラム。
JP2019138865A 2019-07-29 2019-07-29 画像処理装置、方法およびプログラム Active JP7209599B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019138865A JP7209599B2 (ja) 2019-07-29 2019-07-29 画像処理装置、方法およびプログラム
US16/925,776 US11517280B2 (en) 2019-07-29 2020-07-10 Image processing apparatus, method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019138865A JP7209599B2 (ja) 2019-07-29 2019-07-29 画像処理装置、方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2021019931A true JP2021019931A (ja) 2021-02-18
JP7209599B2 JP7209599B2 (ja) 2023-01-20

Family

ID=74259885

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019138865A Active JP7209599B2 (ja) 2019-07-29 2019-07-29 画像処理装置、方法およびプログラム

Country Status (2)

Country Link
US (1) US11517280B2 (ja)
JP (1) JP7209599B2 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006130223A (ja) * 2004-11-09 2006-05-25 Konica Minolta Medical & Graphic Inc 医用画像処理装置
JP2008068032A (ja) * 2006-09-15 2008-03-27 Toshiba Corp 画像表示装置
JP2016510669A (ja) * 2013-03-15 2016-04-11 ホロジック インコーポレイティッド 自動合焦を含む、トモシンセシススタックをナビゲートするためのシステムおよび方法
JP2019037576A (ja) * 2017-08-25 2019-03-14 キヤノン株式会社 乳房撮影装置、画像処理装置及び画像処理方法

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3034747B2 (ja) 1993-12-29 2000-04-17 オリンパス光学工業株式会社 超音波診断装置
US6611575B1 (en) * 2001-07-27 2003-08-26 General Electric Company Method and system for high resolution 3D visualization of mammography images
US7760924B2 (en) 2002-11-27 2010-07-20 Hologic, Inc. System and method for generating a 2D image from a tomosynthesis data set
US7616801B2 (en) 2002-11-27 2009-11-10 Hologic, Inc. Image handling and display in x-ray mammography and tomosynthesis
US10008184B2 (en) 2005-11-10 2018-06-26 Hologic, Inc. System and method for generating a 2D image using mammography and/or tomosynthesis image data
JP5026939B2 (ja) 2007-12-04 2012-09-19 富士フイルム株式会社 画像処理装置およびそのプログラム
WO2011044295A2 (en) 2009-10-07 2011-04-14 Hologic, Inc. Processing and displaying computer-aided detection information associated with breast x-ray images
JP2012061196A (ja) 2010-09-17 2012-03-29 Fujifilm Corp 断層画像表示方法および装置
CN103544688B (zh) 2012-07-11 2018-06-29 东芝医疗系统株式会社 医用图像融合装置和方法
JP5528518B2 (ja) 2012-09-28 2014-06-25 富士フイルム株式会社 放射線画像生成装置および方法
US8983156B2 (en) 2012-11-23 2015-03-17 Icad, Inc. System and method for improving workflow efficiences in reading tomosynthesis medical image data
US9364191B2 (en) * 2013-02-11 2016-06-14 University Of Rochester Method and apparatus of spectral differential phase-contrast cone-beam CT and hybrid cone-beam CT
JP2014183876A (ja) 2013-03-22 2014-10-02 Fujifilm Corp 画像表示装置および方法
JP6053012B2 (ja) 2013-03-28 2016-12-27 富士フイルム株式会社 画像表示装置および方法
US9792703B2 (en) 2015-07-06 2017-10-17 Siemens Healthcare Gmbh Generating a synthetic two-dimensional mammogram
MA43593A (fr) * 2016-02-08 2018-11-14 Imago Systems Inc Système et procédé de visualisation et de caractérisation d'objets dans des images
JP6639357B2 (ja) 2016-08-24 2020-02-05 富士フイルム株式会社 画像処理装置、方法およびプログラム
US10430984B2 (en) 2016-12-16 2019-10-01 General Electric Company Fused slice or cine-loop image for multi-mode DBT acquisitions
JP7161212B2 (ja) * 2017-05-16 2022-10-26 株式会社ジョブ X線検査におけるデータ処理装置及びデータ処理方法、並びに、その装置を搭載したx線検査装置
JP7282594B2 (ja) * 2019-05-20 2023-05-29 キヤノンメディカルシステムズ株式会社 医用画像処理装置、x線診断装置及びプログラム
JP7203705B2 (ja) * 2019-09-17 2023-01-13 富士フイルム株式会社 画像処理装置、方法およびプログラム、並びに画像表示装置、方法およびプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006130223A (ja) * 2004-11-09 2006-05-25 Konica Minolta Medical & Graphic Inc 医用画像処理装置
JP2008068032A (ja) * 2006-09-15 2008-03-27 Toshiba Corp 画像表示装置
JP2016510669A (ja) * 2013-03-15 2016-04-11 ホロジック インコーポレイティッド 自動合焦を含む、トモシンセシススタックをナビゲートするためのシステムおよび方法
JP2019037576A (ja) * 2017-08-25 2019-03-14 キヤノン株式会社 乳房撮影装置、画像処理装置及び画像処理方法

Also Published As

Publication number Publication date
US11517280B2 (en) 2022-12-06
JP7209599B2 (ja) 2023-01-20
US20210030384A1 (en) 2021-02-04

Similar Documents

Publication Publication Date Title
US8913713B2 (en) Radiographic image generation device and method
JP7326070B2 (ja) 画像表示装置、方法およびプログラム、画像管理装置、方法およびプログラム
JP2020048991A (ja) 断層画像生成装置、方法およびプログラム
US20210393226A1 (en) Image processing apparatus, image processing method, and image processing program
US11587215B2 (en) Image processing device, image processing method, image processing program, image display device, image display method, and image display program
JP7513697B2 (ja) 画像生成装置およびプログラム、学習装置およびプログラム、並びに画像処理装置およびプログラム
WO2021157180A1 (ja) 画像設定装置、方法およびプログラム
JP7209599B2 (ja) 画像処理装置、方法およびプログラム
US11484275B2 (en) Image processing apparatus, method, and program
JP7384990B2 (ja) 画像管理装置、方法およびプログラム
JP2020178894A (ja) 画像処理装置、方法およびプログラム
US11224397B2 (en) Imaging control device, imaging control method, and imaging control program
WO2021186957A1 (ja) 画像処理装置、方法およびプログラム
US20220343501A1 (en) Image setting device, image setting method, and image setting program
JP7430814B2 (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
WO2021186956A1 (ja) 画像処理装置、方法およびプログラム
US20220358649A1 (en) Image setting device, image setting method, and image setting program
JP7479494B2 (ja) 画像処理装置、画像処理装置の作動方法、画像処理装置の作動プログラム
WO2022018943A1 (ja) 画像処理装置、方法およびプログラム
WO2022097524A1 (ja) 画像処理装置、方法およびプログラム、並びに画像表示装置、方法およびプログラム
WO2020194844A1 (ja) 撮影制御装置、方法およびプログラム
JP2022153114A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
JP2022153115A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210714

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220613

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220729

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221018

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230110

R150 Certificate of patent or registration of utility model

Ref document number: 7209599

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150