JP7129169B2 - 画像処理装置、放射線撮影装置、画像処理方法、及びプログラム - Google Patents

画像処理装置、放射線撮影装置、画像処理方法、及びプログラム Download PDF

Info

Publication number
JP7129169B2
JP7129169B2 JP2018015504A JP2018015504A JP7129169B2 JP 7129169 B2 JP7129169 B2 JP 7129169B2 JP 2018015504 A JP2018015504 A JP 2018015504A JP 2018015504 A JP2018015504 A JP 2018015504A JP 7129169 B2 JP7129169 B2 JP 7129169B2
Authority
JP
Japan
Prior art keywords
image
frame
radiation
component
scattered radiation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018015504A
Other languages
English (en)
Other versions
JP2019130083A (ja
Inventor
裕行 近江
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2018015504A priority Critical patent/JP7129169B2/ja
Priority to US16/255,097 priority patent/US11000253B2/en
Publication of JP2019130083A publication Critical patent/JP2019130083A/ja
Application granted granted Critical
Publication of JP7129169B2 publication Critical patent/JP7129169B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5258Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise
    • A61B6/5282Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise due to scatter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/025Tomosynthesis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5258Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise
    • A61B6/5264Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise due to motion
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01VGEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V5/00Prospecting or detecting by the use of ionising radiation, e.g. of natural or induced radioactivity
    • G01V5/20Detecting prohibited goods, e.g. weapons, explosives, hazardous substances, contraband or smuggled objects
    • G01V5/22Active interrogation, i.e. by irradiating objects or goods using external radiation sources, e.g. using gamma rays or cosmic rays
    • G01V5/222Active interrogation, i.e. by irradiating objects or goods using external radiation sources, e.g. using gamma rays or cosmic rays measuring scattered radiation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/254Analysis of motion involving subtraction of images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/30Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from X-rays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/32Transforming X-rays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20182Noise reduction or smoothing in the temporal domain; Spatio-temporal filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20224Image subtraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Geophysics (AREA)
  • General Engineering & Computer Science (AREA)
  • Pulmonology (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Description

本発明は、画像処理装置、放射線撮影装置、画像処理方法、及びプログラムに関する。
医療現場では放射線を用いた撮影に基づく診断や治療が盛んに行われており、フラットパネルセンサ(センサ)を用いて撮影された放射線画像によるデジタル画像診断が普及している。
放射線を用いた撮影では、人体を直進透過した1次放射線と人体構造で散乱された散乱線との2成分が発生する。散乱線は被写体の構造のうち低い周波数の成分として画像に重畳するため画像全体のコントラストを低下させ、診断能を低下させる要因となり得る。
グリッドの使用によらず、画像処理で散乱線を低減させる技術が開発されている。画像処理で散乱線を低減させる技術として逐次近似法で散乱線を推定する場合、散乱線の低減処理に多くの時間を必要とする。
特許文献1には散乱線推定の高速化技術として、前フレームの散乱線推定結果を利用する技術が開示されている。
特許5388680号公報
特許文献1の技術は、前フレームの散乱線推定結果を次のフレームの散乱線推定の初期値に利用するものであり、隣接するフレーム間で被写体が動いていないことが前提となる。例えば、CTのような高速な動画像撮影を行う場合は、隣接するフレーム間での被写体は同一と仮定することができる。
しかし、静止画撮影の位置合わせのための動画像撮影や、動態解析のための動画像撮影、トモシンセシス撮影などは、CTほどの高速な動画像撮影ではなく、隣接するフレーム間の被写体は同一と仮定することはできないため、逐次近似での反復計算において収束性は低下し、散乱線の影響を低減できない場合が生じ得る。
本発明は、従来技術の課題に鑑み、グリッドを使用しない動画像の撮影であっても、散乱線の影響を低減して、より高画質な画像を得ることができる画像処理技術の提供を目的とする。
本発明の目的を達成するために、本発明の一態様による画像処理装置は、放射線を被写体に照射して得られる動画像を処理する画像処理装置であって、
前記動画像におけるフレーム間の変化量として、処理対象となるフレームと該フレームに対する前フレームとの差分を取得する取得手段と、
前記動画像におけるフレームにおいて、処理対象となるフレームの初期値として、該フレームに対する前フレームで推定された放射線の一次成分と前記変化量とを合成した値を用いた逐次計算を行うことにより、放射線の一次成分と前記被写体で散乱した放射線の散乱線成分とを逐次的に推定する推定手段と、
前記逐次的に推定して得た結果を用いて、前記動画像におけるフレームにおいて、前記散乱線成分が低減された画像を生成する散乱線低減手段と、を備え
本発明によれば、グリッドを使用しない動画像の撮影であっても、散乱線の影響を低減して、より高画質な画像を得ることができる。
実施形態の放射線撮影装置及び画像処理装置の機能構成を示す図。 放射線撮影装置及び制御装置のハードウェア構成を示す図。 実施形態に係る画像処理の流れを説明するフローチャート。 動き量の推定値および1次放射線画像の初期値を模式的に示す図。 実施形態に係る画像処理の流れを説明するフローチャート。
以下、図面を参照して、本発明の実施形態を例示的に詳しく説明する。ただし、この実施形態に記載されている構成要素はあくまで例示であり、本発明の技術的範囲は、特許請求の範囲によって確定されるのであって、以下の個別の実施形態によって限定されるわけではない。
[実施形態1]
図1は、本発明の実施形態に係る放射線撮影装置10及び画像処理装置100の概略的な機能構成を示す図であり、放射線撮影装置10は、機能構成として、例えば、画像取得部101、及び画像処理装置100を有する。図1において、画像処理装置100は、放射線を被写体に照射して得られる動画像を処理することが可能であり、機能構成として、前処理部102、第1の推定部103(以下、「変化量推定部」ともいう)、第2の推定部104(以下、「散乱線推定部」ともいう)、散乱線低減部105、後処理部106および出力制御部107を有する。尚、出力制御部107は、画像処理装置100の外部の制御装置201の構成としてもよい。
放射線撮影装置10において、画像取得部101は、例えば、放射線撮影装置10の放射線センサ(以下、単に「センサ」ともいう)に相当する機能構成であり、画像取得部101は、被写体を透過した放射線を入力とし、入力した放射線を画像化して出力する。画像取得部101により画像化される画像を以下、「生画像」といい、生画像は画像処理装置100の前処理部102に入力される。
画像処理装置100の前処理部102は生画像を入力とし、生画像に対して前処理を施した画像(以下、「前処理済み画像」)を生成し、出力する。
第1の推定部103(変化量推定部)は、動画像におけるフレーム間の変化量を推定する。フレーム間の変化量(以下、「動き量」ともいう)には、例えば、画像間(フレーム間)における被写体の動きやセンサの動きに基づく動き量が含まれる。第1の推定部103(変化量推定部)は、動画像における被写体又はセンサの動きに基づく動き量を推定する。変化量推定部103は、複数の前処理済み画像を入力とし、画像間(フレーム間)の変化量(動き量)を推定する。すなわち、変化量推定部103は、処理対象となるフレーム(k)と、フレーム(k)に対する前フレーム(k-1)との差分を変化量(動き量)として取得する。
放射線を被写体に照射すると、放射線の一部は被写体の各部で散乱し散乱線成分となり、被写体を透過した放射線の中には、被写体内を直進し透過する1次放射線成分(「放射線の一次成分」「放射線の直進成分」「一次X線成分」ともいう)の他に、この散乱線成分が含まれることになる。
第2の推定部104(散乱線推定部)は、動画像におけるフレームにおいて、被写体で散乱した放射線の散乱線成分を、変化量に基づいて推定する。また、散乱線推定部104は、動画像の各フレームにおいて、被写体で散乱した放射線の散乱線成分と、被写体を透過してセンサに直接入射した放射線の一次成分とを、変化量に基づいて推定することが可能である。散乱線推定部104は、変化量と前処理済み画像を入力とし、散乱線を推定し、散乱線画像を生成し、出力する。第1の推定部103(変化量推定部)が、動画像におけるフレーム間の変化量として、例えば、画像間(フレーム間)における被写体の動きやセンサの動きに基づく動き量を推定した場合、第2の推定部104(散乱線推定部)は、動画像におけるフレームにおいて、被写体で散乱した放射線の散乱線成分を、動き量に基づいて推定する。
散乱線低減部105は、動画像におけるフレームから散乱線成分を減算した画像(散乱線低減画像)を生成する。すなわち、散乱線低減部105は、前処理済み画像と散乱線画像を入力とし、前処理済み画像から散乱線の成分を低減(減算)した散乱線低減画像を生成し、出力する。
後処理部106は、散乱線低減画像を入力とし、周波数処理や階調処理を施した画像(以下、「後処理済み画像」という)を生成し、出力する。
出力制御部107は、画像処理装置100の後処理部106で処理された画像(後処理済み画像(放射線画像))を、表示部(モニタ)に表示させたり、ハードディスクなどのメモリに保存したり、PACSなどの外部装置(システム)に出力するための出力制御を行う。
図2は、放射線撮影装置10及び、放射線撮影装置10の動作を制御する制御装置201(コンソール)のハードウェア構成を示す図である。図2において、信号線204は、ギガビットイーサネット(イーサネットは登録商標)規格の信号を送受信することが可能な信号線であり、制御装置201と放射線センサ202と放射線発生装置203とは、信号線204を介して相互に通信可能に接続している。放射線センサ202は、図1で説明した画像取得部101に相当し、放射線センサ202は、入力した放射線を画像化して生画像を出力する。放射線センサ202の構成として、複数の放射線センサを用いた長尺撮影の場合は、複数の放射線センサが信号線204に接続する。
尚、図2に示した信号線の構成は、ギガビットイーサネット(イーサネットは登録商標)規格の信号線に限定されず、例えば、CAN(Controller Area Network)や光ファイバーなどを信号線として用いることも可能である。信号線204には、出力制御部107から出力された後処理済み画像(放射線画像)を表示する表示部205、後処理済み画像を記憶する記憶部206、後処理済み画像をPACSなどの外部装置(システム)に出力するためのネットワークインタフェース部207が接続されている。
制御装置201のハードウェア構成として、例えば、CPU(中央演算装置)2012、RAM(Random Access Memory)2013、ROM(Read Only Memory)2014、記憶部2015が、バス2011を介して接続されている。
制御装置201には、USB(Universal Serial Bus)やPS/2規格などの接続部を介して入力部208が接続され、VGAやDVI端子等の接続部を介して表示部209が接続されている。制御装置201は、信号線204を介して接続している放射線センサ202や表示部205などに制御コマンドを送ることが可能である。
制御装置201の記憶部2015には、撮影モードごとの処理内容を実行するためのソフトウェアモジュールが記憶されており、不図示の指示部により指示された撮影モードに対応するソフトウェアモジュールがRAM2013に読み込まれ、CPU(中央演算装置)2012の制御の下に処理が実行される。CPU(中央演算装置)2012は、図1に示した画像処理装置100の機能構成の各部として、ソフトウェアモジュールの実行を制御することが可能である。
すなわち、前処理部102~後処理部106および出力制御部107は、ソフトウェアモジュールとして記憶部2015に格納されており、CPU2012は、各ソフトウェアモジュールを実行することにより、前処理部102~出力制御部107の各部の機能構成を実現することができる。尚、画像処理装置100の各部の機能構成をソフトウェアモジュールではなく、専用の画像処理ボードとして制御装置201に実装してもよい。
信号線204を介して制御装置201と接続する表示部205および記憶部206、もしくは、VGAやDVI端子等の接続部を介して制御装置201に接続されている表示部209は画像出力部として機能する。図1の出力制御部107は、画像出力部(表示部205、209、記憶部206)における画像表示や画像データの記憶を制御する。すなわち、出力制御部107は、画像処理装置100で生成された後処理済み画像(放射線画像)を、表示部205や表示部209に表示させたり、後処理済み画像を記憶部206や記憶部2015に記憶させるように後処理済み画像(放射線画像)の出力を制御する。
以上のような構成を備えた、放射線撮影装置10、制御装置201、画像処理装置100において、本実施形態の特徴である図1の機能構成(前処理部102~出力制御部107)の具体的な動作を説明する。
図3は、実施形態に係る画像処理の流れを説明するフローチャートである。まず、動画像の第1フレームを処理する場合を説明する。
(動画像の第1フレームの処理)
ステップS301において、画像取得部101は放射線センサ202によって画像を取得し、オフセット補正(暗電流補正)を行い、生画像を生成する。オフセット補正の方法としては、例えば、被写体の放射線画像の撮影前に、放射線を照射しない状態で取得された画像データを補正用画像として、被写体を放射線撮影した放射線撮影画像から減算することで、オフセット補正を行うことができる。あるいは、被写体に放射線を照射した放射線撮影画像と、放射線を照射しない状態の画像データ(補正用画像)との取得を交互に行い、放射線撮影画像から補正用画像を減算することで、オフセット補正を行うことができる。
ステップS302において、前処理部102は、生画像に対して前処理を行い、前処理済み画像を生成する。前処理とは、例えば、センサの特性を補正する処理であり、前処理部102は、ゲイン補正や欠損補正などを行い、周辺画素との相関関係が保たれている状態にする。尚、ステップS302の前処理を省略してもよい。
ステップS303において、CPU(中央演算装置)2012は処理対象のフレームが動画撮影の第1フレームであるか判定する。処理対象のフレームが第1フレームでない場合(S303-No)、CPU(中央演算装置)2012は処理をステップS304に進め、処理対象のフレームが動画撮影の第1フレームである場合(S303-Yes)、CPU(中央演算装置)2012は処理をステップS305に進める。
ステップS305において、散乱線推定部104は前処理済み画像に対して散乱線推定処理を行って散乱線成分を推定し、散乱線画像を生成する。放射線センサ202(センサ)により実測できるのは、前処理済み画像M(k)であり、前処理済み画像M(k)の成分には、被写体を透過してセンサに直接入射した放射線の一次成分P(k)と被写体で散乱した放射線の散乱線成分S(k)とが合成されている。放射線の一次成分P(k)は、散乱の無い放射線であり、被写体を透過してセンサに直接的に入射した放射線である。ここで、kは動画像におけるk番目のフレームを示している。
第kフレームでの散乱線成分S(k)は、前処理済み画像M(k)の成分と、放射線の一次成分P(k)との差分として取得することができ、散乱線推定部104は、以下の(1)式により、第kフレームでの散乱線成分S(k)を取得することができる。
Figure 0007129169000001
また、散乱線成分S(k)は、散乱線の低周波成分と散乱線の高周波成分とを足し合わせることによりモデル化することができる。散乱線成分S(k)のモデル化を具体的に数式で示すと、以下の(2)式によりモデル化することができる。
Figure 0007129169000002
(2)式において、係数Aは減衰散乱放射線の低周波成分を示すパラメータであり、Bは減衰散乱放射線の広がりを示すパラメータであり、Cは減衰散乱放射線の高周波成分を表すパラメータである。また、xとyは座標位置を表す位置情報である。
(1)式及び(2)式を基に、前処理済み画像M(k)の成分から、放射線の一次成分P(k)を求めることが散乱線を推定する問題を解くことになる。しかし、前処理済み画像M(k)の成分、放射線の一次成分P(k)を解析的に求めることができないため、推定された放射線の一次成分Pg(k)を算出し、それを基に推定された前処理済み画像Mg(k)の成分と実際の前処理済み画像M(k)の成分との誤差Eが小さくなるように逐次的に計算する。ここで、添字gは計算により推定された値を示す。
散乱線推定部104は、放射線の一次成分の逐次計算において、処理対象となるフレーム(k)を前処理した画像M(k)の成分を、推定した放射線の一次成分Pg(k)と散乱線成分(S(k))とに基づいて推定する。推定された前処理済み画像の成分をMg(k)とする。
そして、散乱線推定部104は、放射線の一次成分の逐次計算において、処理対象となるフレームを前処理した画像(前処理済み画像M(k))の画像成分と、推定した前処理済み画像の成分(Mg(k))との差分に基づく値(誤差E)を最小にする画像成分の推定値を取得する。散乱線推定部104は、取得した画像成分の推定値に基づいて放射線の一次成分と、当該放射線の一次成分に対応する散乱線成分とを取得する。
誤差Eの評価式は、実際の前処理済み画像M(k)の成分と、計算により推定された前処理済み画像Mg(k)の成分との差分の絶対値を2乗した以下の(3)式のように表せる。
Figure 0007129169000003
(3)式の誤差評価式を最小にする前処理済み画像M(k)の成分、推定された前処理済み画像Mg(k)の成分を使って、(4)式で放射線の一次成分Pg(k)を近似する。放射線の一次成分Pg(k)を逐次的に計算する方法として、例えば、最尤推定を用いることが可能である。散乱線推定部104は、誤差評価式を最小にする画像成分の推定値((Mg(k))に基づいて、(4)式の関係から放射線の一次成分を取得し、取得した放射線の一次成分に基づいて、(1)式の関係から散乱線成分を取得することが可能である。
散乱線推定部104は、n回の反復回数(nは2以上の整数)における放射線の一次成分および散乱線成分の加算値で(Pg(k)n+S(k)n)、処理対象となるフレームの画像成分(前処理済み画像M(k)の成分)を除算した除算結果と、当該放射線の一次成分(Pg(k)n)との乗算結果により、n+1の反復回数における放射線の一次成分(Pg(k)n+1)を推定する。
具体的には、(4)式のように、前処理済み画像M(k)の成分を、n回の反復における放射線の一次成分Pg(k)nと散乱線成分S(k)nとを加算したもので除算し、放射線の一次成分Pg(k)nにより乗算することでn+1回の反復計算における放射線の一次成分Pg(k)n+1を近似するものである。
(4)式において、n回の反復における放射線の一次成分Pg(k)nは、(3)式の誤差Eを最小にする、推定された前処理済み画像Mg(k)に対応する放射線の一次成分である。
散乱線成分S(k)nは、n回の反復における放射線の一次成分Pg(k)nに基づいて(1)式より算出される散乱線画像である。(4)式において、nは繰り返し回数を示す。
Figure 0007129169000004
(4)式で示す最尤推定は反復を繰り返すごとに、放射線の一次成分Pg(k)nの係数部((5)式)が1に近づいていき収束していく。すなわち、推定された前処理済み画像Mg(k)の成分(以下の(5)式の分母)が実際の前処理済み画像M(k)の成分(以下の(5)式の分子)に近づいていき収束していく。1に早く近づくことができれば、反復回数を減らし、推定の演算速度を速くすることができる。
Figure 0007129169000005
散乱線推定部104は前処理済み画像に対する散乱線推定処理において、第1フレームでは放射線の一次成分Pg(k)の初期値として前処理済み画像M(k)の成分を設定する。反復回数は、予め設定された回数を行うか、もしくは、誤差Eが所定の値になるまで行えばよい。散乱線推定部104は逐次的に散乱線推定処理を実行することで、真値に近い放射線の一次成分Pg(k)nを算出する。(1)式より、散乱線推定部104は、実際の前処理済み画像M(k)の成分と放射線の一次成分Pg(k)nから散乱線成分S(k)を算出し、算出した散乱線成分S(k)を出力する。
ステップS306において、散乱線推定部104は、ステップS305で算出した放射線の一次成分Pg(k)nに基づく画像(1次放射線画像)と、前処理済み画像M(k)を次フレーム以降の処理のために記憶部2015に保存する。
次に、ステップS307において、散乱線低減部105は散乱線低減処理を行う。散乱線低減部105は、散乱線推定部104により取得された放射線の一次成分に対応する散乱線成分を、処理対象となるフレームを前処理した画像成分から減算した画像(散乱線低減画像)を生成する。すなわち、散乱線低減部105は前処理済み画像(実際の前処理済み画像M(k)の成分)からステップS305で求めた散乱線成分S(k)を減算処理することで、散乱線低減画像を生成する。
減算処理における重みはグリッドの格子比などと連動させることで、グリッドを用いたケースと同じような画像を生成することができる。散乱線成分S(k)は低周波成分を多く含むため、それを除去された散乱線低減画像は、前処理済み画像と比べて画像全体のコントラストが増加する。
次に、ステップS308において、後処理部106は散乱線低減画像に対し、後処理を行い、後処理済み画像を生成する。後処理とは診断に最適な画像を生成する処理のことで、後処理部106は周波数処理や階調処理などを散乱線低減画像に対して行う。
そして、ステップS309において、出力制御部107が、ステップS308で後処理された後処理済み画像を画像出力部(表示部205、209、記憶部206)へと出力する。出力制御部107は、後処理部106で処理された後処理済み画像を、表示部(モニタ)に表示させたり、ハードディスクなどのメモリに保存したり、PACSなどの外部装置(システム)に出力するための出力制御を行う。
(動画像の第2フレーム以降の処理)
続いて、動画像の第2フレーム以降を処理する場合を説明する。ステップS301、及びステップS302の処理は第1フレームに対する処理と同様であるため省略する。
次に、ステップS303の判定で、CPU(中央演算装置)2012は処理の対象フレームが動画撮影の第1フレームであるか判定し、処理の対象フレームが第1フレームでない場合(S303-No)、CPU(中央演算装置)2012は処理をステップS304に進める。
ステップS304において、変化量推定部103は、複数の前処理済み画像を入力とし、フレーム間の変化量を推定する。複数の前処理済み画像として、現フレームの前処理済み画像と、前フレームの前処理済み画像との差分に基づいて、フレーム間の変化量を推定する。
具体的には、変化量推定部103は、現フレーム(第kフレーム)の前処理済み画像M(k)の成分と、記憶部2015に保存されている前フレーム(第k-1フレーム)の前処理済み画像M(k-1)の成分とから、フレーム間の変化量の推定値D(k)を(6)式のように推定する。
Figure 0007129169000006
図4の画像401が現フレームの前処理済み画像M(k)であり、画像402が前フレームの前処理済み画像M(k-1)である。両画像の画素値の差分をとることで、動き成分として変化量の推定値D(k)403が取得される。
次にステップS305において、散乱線推定部104は、現フレームの前処理済み画像M(k)と、変化量の推定値D(k)と、記憶部2015に保存されていた前フレームにおける放射線の一次成分Pg(k-1)nに基づく画像(1次放射線画像)に基づいて、散乱線推定処理を行い、散乱線画像を生成する。
散乱線推定部104は、放射線の一次成分を逐次計算により推定し、処理対象となるフレーム(k)の逐次計算の初期値として、フレーム(k)に対する前フレーム(k-1)で推定された放射線の一次成分と、変化量(変化量の推定値D(k))とを合成した値を設定する。
すなわち、散乱線推定部104は、第2フレーム以降の処理において、放射線の一次成分Pg(k)の初期値(繰り返し回数n=1のときの値)として、(7)式のような変化量の推定値D(k)を考慮した値を設定する。変化量の推定値D(k)を考慮した(7)式を初期値として(4)式に代入すると(8)式となる。(8)式では、繰り返し回数n=2の場合を示している。(8)式に示すように、逐次計算において、変化量の推定値D(k)の値が反映される。
Figure 0007129169000007
Figure 0007129169000008
散乱線推定部104は第1フレームの処理と同じように、(3)式の誤差Eが小さくなるように逐次的に計算する。(4)式において、n回の反復における放射線の一次成分Pg(k)nは、(3)式の誤差Eを最小にする、推定された前処理済み画像Mg(k)の成分に対応する放射線の一次成分であり、散乱線成分S(k)nは、n回の反復における放射線の一次成分Pg(k)nに基づいて(1)式より算出される散乱線成分である。散乱線推定部104は、(1)式より、実際の前処理済み画像M(k)の成分と放射線の一次成分Pg(k)nから散乱線成分S(k)を算出し、算出した散乱線成分S(k)を散乱線画像として出力する。
図4の画像405が現フレーム(k)における放射線の一次成分Pg(k)の初期値Pg(k)1であり、前フレーム(k-1)で算出された放射線の一次成分Pg(k-1)n(図4の画像404)に変化量の推定値D(k)403を加算したものを設定する。
変化量の推定値D(k)403と、前フレーム(k-1)で算出された放射線の一次成分Pg(k-1)nとに基づいて、現フレーム(k)における放射線の一次成分Pg(k)の初期値Pg(k)1を補正することで、現フレーム(k)における放射線の一次成分の初期値の設定に、フレーム間の変化量(動き量)を反映することができ、より適した初期値の設定が可能になる。
現フレーム(k)における放射線の一次成分P(k)の成分と、前フレーム(k-1)における放射線の一次成分P(k-1)の成分との差は、現フレーム(k)における前処理済み画像M(k)の成分と前フレーム(k-1)におけるM(k-1)の成分との差で近似することができるので、前処理済み画像成分の差分を、前フレーム(k-1)における放射線の一次成分Pg(k-1)に加算することで、現フレーム(k)における放射線の一次成分Pg(k)に近い値にすることができる。
前フレーム(k-1)で算出された放射線の一次成分Pg(k-1)nは、逐次計算により収束した真値に近い値である。その値を現フレーム(k)の初期値に使用することで、(4)式、(5)式の収束を速めることができる。また、フレーム間で動いた変化量(動き量)を、前処理済み画像の差分で補正したことにより、フレーム間における被写体の動き量による誤差の影響を低減することができる。その結果、フレーム間に動きがあったとしても、動きがない場合と同様に(4)式、(5)式の収束を速め、アーチファクトの影響を低減し、コントラストの向上した、より高画質な放射線の一次成分Pg(k)を推定することができる。
散乱線推定部104は逐次的に散乱線推定処理を実行することで、真値に近い放射線の一次成分Pg(k)nを算出する。(1)式より、散乱線推定部104は、実際の前処理済み画像M(k)の成分と放射線の一次成分Pg(k)nから散乱線成分S(k)を算出し、算出した散乱線成分S(k)を散乱線画像として出力する。
ステップS306において、散乱線推定部104は、ステップS305で算出した放射線の一次成分Pgに基づく画像(1次放射線画像)と、前処理済み画像Mを次フレーム以降の処理のために記憶部2015に保存する。
ステップS307において、散乱線低減部105は、散乱線推定部104により取得された放射線の一次成分に対応する散乱線成分を、処理対象となるフレームを前処理した画像成分から減算した画像(散乱線低減画像)を生成する。すなわち、散乱線低減部105は、散乱線低減処理として、前処理済み画像(実際の前処理済み画像M(k)の成分)からステップS305で求めた散乱線成分S(k)を重み付き減算処理することで、散乱線低減画像を生成する。
ステップS308において、後処理部106は散乱線低減画像に対し、後処理を行い、後処理済み画像を生成する。
そして、ステップS309において、出力制御部107が、ステップS308で後処理された後処理済み画像を画像出力部(表示部205、209、記憶部206)へと出力する。
本実施形態では、逐次的に実行する散乱線推定処理において、散乱線推定部104は反復の回数を固定値として計算を行うことができる。反復の回数を固定値にすると、フレーム間の処理速度が同じになるため、モニタ表示の際のバラつきやコマ落ちといった現象を防ぐことができる。散乱線推定部104は固定値とする反復の回数を、演算の高速化を実現するために、第2フレーム以降の収束速度に合わせた反復回数に設定することができる。
本実施形態によれば、グリッドがない撮影であっても、散乱線の影響を低減して、コントラストの向上した、より高画質な画像を得ることができる。また、グリッドがない動画像であっても、動画像のフレームレートは維持したままコントラストの向上した、より高画質な画像を得ることができる。
[実施形態2]
実施形態1では、変化量推定部103は、フレーム間の変化量を推定する計算例として、複数の前処理済み画像から両者の差分を用いる例を説明した。すなわち、変化量推定部103は、現フレームの前処理済み画像M(k)の成分と、前フレームの前処理済み画像M(k-1)の成分との差分に基づいて、フレーム間の変化量を推定する例を説明した。
本実施形態では、フレーム間の変化量を推定する計算例として、現フレームの前処理済み画像M(k)の成分と、複数の前フレームにおける前処理済み画像M(k-1、k-2、・・・)の成分と差分の中で、最も画像全体の自乗誤差が小さい値を変化量の推定値として用いる例を説明する。
ステップS301、及びステップS302の処理は実施形態1と同様のため省略する。また、動画像の第1フレームの処理も実施形態1と同様のため省略する。
ステップS303の判定で、CPU(中央演算装置)2012は処理の対象フレームが動画撮影の第1フレームであるか判定し、処理の対象フレームが第1フレームでない場合(S303-No)、CPU(中央演算装置)2012は処理をステップS304に進める。
ステップS304において、変化量推定部103は、複数の前処理済み画像を入力とし、フレーム間の変化量を推定する。複数の前処理済み画像として、現フレームの前処理済み画像M(k)の成分と、複数の前フレームにおける前処理済み画像M(k-1、k-2、・・・)の成分との差分の中で、最も画像全体の自乗誤差が小さい値を変化量の推定値として用いる。
変化量推定部103は、処理対象となるフレーム(k)を前処理した画像成分と、フレーム(k)に対して複数の前フレーム(k-1、k-2、・・・k-t)を前処理した画像成分との差分に基づく値を最小にする前フレーム(前フレーム番号kmin)を取得する。そして、変化量推定部103は、処理対象となるフレームを前処理した画像成分(M(k))と、取得した前フレームの画像成分(M(min))との差分を、変化量(動き量)として設定する。
具体的には、変化量推定部103は、現フレーム(第kフレーム)の前処理済み画像M(k)と、記憶部2015に保存されている複数の前フレームにおける前処理済み画像M(k-1、k-2、・・・k-t)との差分を求め、求めた差分の中で、最も画像全体の自乗誤差が小さい値を変化量の推定値D(k)として(9)式のように推定する。
Figure 0007129169000009
(9)式のkminを示す関数MinIndexは、現フレーム(第kフレーム)の前処理済み画像M(k)の成分と、複数の前フレームにおける前処理済み画像M(k-1、k-2、・・・k-t)の成分との差分を求め、求めた差分の中で、最も画像全体の自乗誤差が小さい値となるフレーム番号kminを選択する関数である。i、jは座標を表し、各座標での値の総和を算出する。
動きが周期的な被写体を撮影している場合は、最も類似しているフレームが、直前のフレームではなく周期的に一致したフレームであることがある。そのため複数の前フレームにおける前処理済み画像M(k-1、k-2、・・・k-t)を用いる(9)式のように誤差の最小値を探すことで、複数の前フレームの放射線の一次成分Pg(k-1、k-2、・・・k-t)の中から、現フレームの放射線の一次成分Pg(k)に最も類似している放射線の一次成分を初期値に設定することができる。
より類似しているものを初期値にすることで、フレーム間に動きがあったとしても、(4)式、(5)式おける逐次計算の収束を速め、アーチファクトの影響を低減した放射線の一次成分Pg(k)を推定することができ、画質の劣化をより低減することができる。
(9)式の変化量の推定値D(k)を(7)式に用いることで、放射線の一次成分Pg(k)の初期値(繰り返し回数n=1のときの値)に、(9)式の変化量の推定値D(k)を考慮した値が設定される。
ステップS305において、散乱線推定部104は現フレームの前処理済み画像M(k)の成分と、変化量の推定値D(k)と、記憶部2015に保存されていた前フレームにおける放射線の一次成分Pg(k-1)nに基づく画像(1次放射線画像)とに基づいて、散乱線推定処理を行い、散乱線画像を生成する。
散乱線推定部104は逐次的に散乱線推定処理を実行することで、真値に近い放射線の一次成分Pg(k)nを算出する。(1)式より、散乱線推定部104は、実際の前処理済み画像M(k)の成分と放射線の一次成分Pg(k)nから散乱線成分S(k)を算出し、算出した散乱線成分S(k)を散乱線画像として出力する。
ステップS306において、散乱線推定部104は、ステップS305で算出した放射線の一次成分Pgに基づく画像(1次放射線画像)と、前処理済み画像Mを次フレーム以降の処理のために記憶部2015に保存する。記憶部2015には、複数フレーム分のデータを保存することが可能であり、記憶部2015に保存されたデータが、ステップS304(変化量の推定)やステップS305(散乱線画像の生成)の処理で参照される。
ステップS307において、散乱線低減部105は、散乱線低減処理として、前処理済み画像(実際の前処理済み画像M(k)の成分)からステップS305で求めた散乱線成分S(k)を重み付き減算処理することで、散乱線低減画像を生成する。ステップS308において、後処理部106は散乱線低減画像に対し、後処理を行い、後処理済み画像を生成する。そして、ステップS309において、出力制御部107が、ステップS308で後処理された後処理済み画像を画像出力部(表示部205、209、記憶部206)へと出力する。
本実施形態では、過去の複数フレームの情報を用いて変化量の推定値求めることで、現フレームの1次放射線画像に最も類似している1次放射線画像を初期値に設定することができる。これにより、フレーム間に動きがあったとしても、逐次計算の収束を速め、アーチファクトの影響を低減した1次放射線画像を推定することができ、画質の劣化をより低減することができる。
[実施形態3]
実施形態1では、変化量推定部103は、フレーム間の変化量(動き量)を推定する計算例として、複数の前処理済み画像から両者の差分を用いる例を説明した。本実施形態では、変化量(動き量)が閾値を超えた場合に、画像サイズを縮小して処理の高速化を図る構成を説明する。
図5は、実施形態3に係る画像処理の流れを説明するフローチャートである。まず、動画像の第1フレームを処理する場合を説明する。
(動画像の第1フレームの処理)
ステップS501及びステップS502の処理は実施形態1のステップS301及びステップS302の処理と同様のため省略する。
ステップS503において、CPU(中央演算装置)2012は処理の対象フレームが動画撮影の第1フレームであるか判定する。処理の対象フレームが第1フレームでない場合(S503-No)、CPU(中央演算装置)2012は処理をステップS504に進め、処理の対象フレームが動画撮影の第1フレームである場合(S503-Yes)、CPU(中央演算装置)2012は処理をステップS511に進める。
ステップS511において、散乱線推定部104は、現フレームの前処理済み画像M(k)の成分のみで散乱線推定処理を行い、散乱線画像を生成する。散乱線推定処理は実施形態1と同様に、(2)式の誤差Eが小さくなるように、放射線の一次成分Pg(k)を推定する。
散乱線推定部104は、散乱線推定処理を実行する際に、前処理済み画像M(k)に前処理として縮小処理を行う。散乱線推定部104は、縮小処理として、例えば、双一次補間(バイリニア補間(bilinear補間))や双三次補間(バイキュビック補間(bicubic補間))や最近傍補間(ニアレストネイバー補間(Nearest Neighbor補間))といった画像縮小技術を使用することができる。画像を縮小することで、推定の時間を短くすることができる。縮小された画像で推定する際には、散乱線推定部104は、縮小用に散乱線カーネルを変更し、縮小サイズで放射線の一次成分Pg(k)を推定することができる。
算出される放射線の一次成分Pg(k)nの画像は、縮小された前処理済み画像M(k)と同じ画像サイズになるため、散乱線推定部104は、放射線の一次成分Pg(k)nの算出後は元の前処理済み画像M(k)と同サイズになるように、拡大処理を行う。(1)式より、散乱線推定部104は、実際の前処理済み画像M(k)の成分と拡大処理された放射線の一次成分Pg(k)nから散乱線成分S(k)を算出し、算出した散乱線成分S(k)を出力する。
ステップS507において、散乱線推定部104は、算出した放射線の一次成分Pg(k)nに基づく画像(1次放射線画像)と、前処理済み画像M(k)を次フレーム以降の処理のために記憶部2015に保存する。
次に、ステップS508において、散乱線低減部105は散乱線低減処理を行う。ステップS509において、後処理部106は散乱線低減画像に対し、後処理を行い、後処理済み画像を生成する。そして、ステップS510において、出力制御部107が、ステップS509で後処理された後処理済み画像を画像出力部(表示部205、209、記憶部206)へと出力する。ステップS508~ステップS510の処理は、実施形態1で説明したステップS307~ステップS309の処理と同様の処理となる。
(動画像の第2フレーム以降の処理)
続いて、動画像の第2フレーム以降を処理する場合を説明する。ステップS501、及びステップS502の処理は第1フレームに対する処理と同様であるため省略する。
次に、ステップS503の判定で、CPU(中央演算装置)2012は処理の対象フレームが動画撮影の第1フレームであるか判定し、処理の対象フレームが第1フレームでない場合(S503-No)、CPU(中央演算装置)2012は処理をステップS504に進める。
ステップS504において、変化量推定部103は、複数の前処理済み画像を入力とし、フレーム間の変化量を推定する。複数の前処理済み画像として、現フレームの前処理済み画像と、前フレームの前処理済み画像との差分に基づいて、フレーム間の変化量を推定する。変化量推定部103は、現フレーム(第kフレーム)の前処理済み画像M(k)の成分と、記憶部2015に保存されている前フレーム(第k-1フレーム)における前処理済み画像M(k-1)の成分とから、フレーム間の変化量の推定値D(k)を(6)式のように推定する。
そして、変化量推定部103は、変化量を評価するための評価情報を算出する。変化量推定部103は、評価情報として、(6)式から得られた変化量の推定値に基づいて、平均自乗誤差mse(k)を以下の(10)式により算出する。i、jは座標を表し、変化量推定部103は、各座標での値の総和を総画素数Nで除算して平均自乗誤差mse(k)を、変化量の評価情報として算出する。
Figure 0007129169000010
ステップS505において、変化量推定部103は、変化量の評価情報と閾値との比較を行い、散乱線推定部104は、比較の結果に基づいて、散乱線成分と、放射線の一次成分とを推定する処理を変更する。
変化量推定部103は、変化量の評価情報(平均自乗誤差mse(k))と閾値thMseとを比較する。閾値thMseは、変化量の推定値D(k)を考慮した(7)式を初期値にした場合に補正が可能な変化量であるか否かを判定するための閾値である。
変化量(動き量)の評価情報(平均自乗誤差mse(k))が閾値(thMse)よりも大きな値となったフレームでは(S505-Yes)、(7)式を初期値にした補正が不可能であると判断し、処理をステップS511に進める。
ステップS511において、変化量(動き量)の評価情報が閾値を超える場合、散乱線推定部104は、処理対象となるフレーム(k)の逐次計算の初期値として、処理対象となるフレームを前処理した画像成分(M(k))を設定する。本ステップでは、フレーム(k)に対する前フレーム(k-1)で推定された放射線の一次成分(Pg(k-1))や前フレームにおける画像成分(M(k-1))は初期値の設定に使用しない。
すなわち、散乱線推定部104は、現フレームの前処理済み画像M(k)の成分のみで散乱線推定処理を行い、散乱線画像を生成する。現フレームの前処理済み画像のみで散乱線推定を行う方法は、第1フレームである場合の散乱線推定処理と同様である。散乱線推定部104は、本ステップで散乱線推定処理を実行する際に、処理対象となるフレームに前処理として縮小処理を行うことが可能である。
一方、ステップS505の判定で、変化量(動き量)の評価情報が閾値以下となる場合、散乱線推定部104は、処理対象となるフレーム(k)の逐次計算の初期値として、フレーム(k)に対する前フレーム(k-1)で推定された放射線の一次成分(Pg(k-1))と、変化量(動き量D(k)))とを合成した値を設定する。すなわち、評価情報(平均自乗誤差mse(k))が閾値(thMse)以下の値となったフレームでは(S505-No)、散乱線推定部104は、(7)式を初期値にした補正が可能であると判断し、処理をステップS506に進める。
ステップS506において、散乱線推定部104は現フレームの前処理済み画像M(k)の成分と、変化量の推定値D(k)と、記憶部2015に保存されていた前フレームにおける放射線の一次成分Pg(k-1)nに基づく画像(1次放射線画像)とに基づいて、散乱線推定処理を行い、散乱線画像を生成する。散乱線推定処理は、実施形態1の処理と同様である。
ステップS507において、散乱線推定部104は、算出した放射線の一次成分Pg(k)nに基づく画像(1次放射線画像)と、前処理済み画像M(k)を次フレーム以降の処理のために記憶部2015に保存する。
ステップS508において、散乱線低減部105は散乱線低減処理を行う。ステップS509において、後処理部106は散乱線低減画像に対し、後処理を行い、後処理済み画像を生成する。そして、ステップS510において、出力制御部107が、ステップS509で後処理された後処理済み画像を画像出力部(表示部205、209、記憶部206)へと出力する。ステップS508~ステップS510の処理は、実施形態1で説明したステップS307~ステップS309の処理と同様の処理となる。
本実施形態では、フレーム全体で二種類の散乱線推定方法を切り替えたが、画素毎や領域毎に散乱線推定方法を切り替えてもよい。散乱線推定部104は、変化量(動き量)に応じて、フレームの画素毎に散乱線推定処理における初期値の設定を切り替えたり、変化量(動き量)に応じて、フレームの領域毎に散乱線推定処理における初期値の設定を切り替えることが可能である。あるいは、散乱線推定部104は、フレームにおける被写体の有無に応じて、散乱線推定処理における初期値の設定を切り替えることが可能である。
例えば、前フレーム(k-1)で被写体がない領域に、現フレーム(k)で被写体が移動してきた場合、(7)式を初期値にした補正では、前フレームにおける放射線の一次成分Pg(k-1)nに被写体の成分が含まれず、変化量の推定値D(k)の成分だけが初期値となるため、現フレームにおける放射線の一次成分Pg(k)nの推定精度が低下し得る。
散乱線推定部104は、そのような領域に関して、現フレームの前処理済み画像M(k)の成分のみで散乱線推定処理を行う。この処理により、推定精度の低下を抑制することが可能になる。また、散乱線推定部104は、各散乱線推定方法で放射線の一次成分Pg(k)nを推定した後、隣接する画素間で、画像の違和感が生じないように、算出した放射線の一次成分Pg(k)nにフィルタ処理を行い、画素値の補正を行うことも可能である。
[実施形態4]
実施形態1では、(7)式のように、変化量の推定値D(k)を考慮した値を初期値とすることで逐次計算の収束を速め、反復回数を削減し演算の高速化を図る構成を説明した。反復回数は真値にどれだけ近い初期値を与えられているかによって変わり得る。動き補正には限界があるため、動きが小さければ小さいほど、真値に近い初期値を与えることが可能である。
本実施形態では、画像の撮影条件や画像の表示条件によって反復回数の変更を行う構成を説明する。散乱線推定部104は、放射線の一次成分の逐次計算の反復回数を、動画像の撮影条件に基づき変更することが可能である。
散乱線推定部104は、撮影条件として、例えば、設定されている撮影のフレームレートによって反復回数の変更を行うことが可能である。より速いフレームレートであればあるほど、被写体の動きは小さいため、より真値に近い初期値を与えることができる。散乱線推定部104は、基準となる閾値のフレームレートよりも速いフレームレートの場合は、予め設定されている反復回数に比べて少ない反復回数を設定する。逆に、フレームレートが基準となる閾値のフレームレートよりも遅くなった場合、フレーム間での動きはより大きくなるため、初期値が真値よりも離れていく。そのため、散乱線推定部104は、予め設定されている反復回数に比べて多い反復回数を設定する。
撮影条件は、撮影フレームレートに限定されるものではなく、散乱線推定部104は、放射線の一次成分の逐次計算の反復回数を、表示部205、209における動画像の表示条件(表示レート)に基づき変更することが可能である。例えば、高速カメラで撮影した動画像を、撮影レート以下の表示レートで再生する場合や、スロー再生をする場合には、撮影時よりも処理時間をかけられることになる。そのため、散乱線推定部104は、表示レートに合わせて、予め設定されている反復回数に比べて反復回数を多く設定することも可能である。また、散乱線推定部104は、被写体の撮影部位、入力される画像サイズによって、反復回数を変更することも可能である。
本実施形態によれば、画像の撮影条件や画像の表示条件によって、予め設定されている反復回数を変更することで、より高画質な画像を得ることが可能になる。
[実施形態5]
実施形態1では、(7)式のように、変化量の推定値D(k)を考慮した値を初期値とすることで逐次計算の収束を速め、反復回数を削減し演算の高速化を図る構成を説明した。
しかし、変化量の推定値D(k)の値が閾値を超える大きい値になる場合、現フレームにおける放射線の一次成分Pg(k)1の初期値の平均値に比べて、前フレームにおける放射線の一次成分Pg(k-1)nと変化量の推定値D(k)との和の平均値が大きくずれてしまう場合が生じ得る。
本実施形態では、変化量の推定値D(k)の値が閾値を超える大きい値になる場合に、初期値が真値から離れることにより、収束速度の低減を抑制するため、変化量の推定値に重みづけをして調整する構成を説明する。
散乱線推定部104は、変化量(変化量の推定値D(k))が閾値を超える場合、処理対象となるフレーム(k)に対する前フレーム(k-1)で推定された放射線の一次成分(Pg(k-1)n)と、当該前フレーム(K-1)における前処理済み画像M(k-1)の成分とに基づいた重み係数を設定して変化量(変化量の推定値D(k))を調整する。
すなわち、散乱線推定部104は、放射線の一次成分Pg(k)1の初期値(繰り返し回数n=1のときの値)として、(11)式のような変化量の推定値D(k)を考慮した値を設定する。
Figure 0007129169000011
重み係数wは、前フレームにおける放射線の一次成分Pg(k-1)nと、前フレームにおける前処理済み画像M(k-1)の成分とを考慮した係数である。
尚、散乱線推定部104は、変化量の推定値D(k)に基づいて異なる重み係数wを設定し、変化量の推定値D(k)を調整することも可能である。
前フレームにおける放射線の一次成分(Pg(k-1)n)および前処理済み画像M(k-1)の成分を考慮した重み係数で変化量の推定値D(k)を調整することで、平均値のずれを抑制し、収束速度の低減を抑制することが可能になる。
(その他の実施形態)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
101:画像取得部、102:前処理部、103:動き推定部、104:散乱線低減部、105:散乱線低減部、106:後処理部、107:出力制御部、201:制御装置、202:放射線センサ(センサ)、203:放射線発生装置、205:表示部、206:記憶部、209:表示部

Claims (19)

  1. 放射線を被写体に照射して得られる動画像を処理する画像処理装置であって、
    前記動画像におけるフレーム間の変化量として、処理対象となるフレームと該フレームに対する前フレームとの差分を取得する取得手段と、
    前記動画像におけるフレームにおいて、処理対象となるフレームの初期値として、該フレームに対する前フレームで推定された放射線の一次成分と前記変化量とを合成した値を用いた逐次計算を行うことにより、放射線の一次成分と前記被写体で散乱した放射線の散乱線成分とを逐次的に推定する推定手段と、
    前記逐次的に推定して得た結果を用いて、前記動画像におけるフレームにおいて、前記散乱線成分が低減された画像を生成する散乱線低減手段と、
    を備える画像処理装置。
  2. 記推定手段は、前記放射線の一次成分の逐次計算において、
    n回の反復回数(nは2以上の整数)における前記放射線の一次成分および前記散乱線成分の加算値で、処理対象となるフレームの画像成分を除算した除算結果と、当該放射線の一次成分との乗算結果により、n+1の反復回数における放射線の一次成分を推定する請求項に記載の画像処理装置。
  3. 記推定手段は、前記放射線の一次成分の逐次計算において、
    処理対象となるフレームを前処理した画像成分を、前記推定した放射線の一次成分と散乱線成分とに基づいて推定する請求項に記載の画像処理装置。
  4. 記推定手段は、前記放射線の一次成分の逐次計算において、
    前記処理対象となるフレームを前処理した画像成分と、前記推定した画像成分との差分に基づく値を最小にする画像成分の推定値を取得し、
    前記取得した画像成分の推定値に基づいて一次成分と、当該一次成分に対応する散乱線成分とを取得し、
    前記散乱線低減手段は、
    前記取得した一次成分に対応する散乱線成分を、前記処理対象となるフレームを前処理した画像成分から減算した画像を生成する請求項に記載の画像処理装置。
  5. 前記取得手段は、
    前記処理対象となるフレームを前処理した画像成分と、前記フレームに対して複数の前フレームを前処理した画像成分との差分に基づく値を最小にする前フレームを取得する請求項に記載の画像処理装置。
  6. 前記取得手段は、
    前記処理対象となるフレームを前処理した画像成分と、前記取得した前フレームの画像成分との差分を、前記変化量として設定する請求項に記載の画像処理装置。
  7. 前記取得手段は、前記変化量の評価情報と閾値との比較を行い、
    記推定手段は、前記比較の結果に基づいて、前記散乱線成分と、前記一次成分とを推定する処理を変更する請求項1乃至のいずれか1項に記載の画像処理装置。
  8. 前記変化量の評価情報が前記閾値を超える場合、前記推定手段は、処理対象となるフレームの逐次計算の初期値として、前記処理対象となるフレームを前処理した画像成分を設定する請求項に記載の画像処理装置。
  9. 記推定手段は、散乱線推定処理を実行する際に、処理対象となるフレームに前処理として縮小処理を行う請求項に記載の画像処理装置。
  10. 前記変化量の評価情報が閾値以下となる場合、前記推定手段は、処理対象となるフレームの逐次計算の初期値として、前記フレームに対する前フレームで推定された一次成分と、前記変化量とを合成した値を設定する請求項に記載の画像処理装置。
  11. 記推定手段は、前記変化量に応じて、前記フレームの画素毎に散乱線推定処理における初期値の設定を切り替える請求項乃至10のいずれか1項に記載の画像処理装置。
  12. 記推定手段は、前記変化量に応じて、前記フレームの領域毎に散乱線推定処理における初期値の設定を切り替える請求項乃至10のいずれか1項に記載の画像処理装置。
  13. 記推定手段は、前記フレームにおける被写体の有無に応じて、前記散乱線推定処理における初期値の設定を切り替える請求項11または12に記載の画像処理装置。
  14. 記推定手段は、前記放射線の一次成分の逐次計算の反復回数を、前記動画像の撮影条件に基づき変更する請求項乃至のいずれか1項に記載の画像処理装置。
  15. 記推定手段は、前記放射線の一次成分の逐次計算の反復回数を、表示手段における前記動画像の表示条件に基づき変更する請求項乃至のいずれか1項に記載の画像処理装置。
  16. 記推定手段は、前記変化量が閾値を超える場合、処理対象となるフレームに対する前フレームで推定された放射線の一次成分と、当該前フレームにおける画像成分とに基づいた重み係数を設定して前記変化量を調整する請求項1乃至15のいずれか1項に記載の画像処理装置。
  17. 放射線を被写体に照射して得られる動画像を処理する放射線撮影装置であって、
    前記動画像におけるフレーム間の変化量として、処理対象となるフレームと該フレームに対する前フレームとの差分を取得する取得手段と、
    前記動画像におけるフレームにおいて、処理対象となるフレームの初期値として、該フレームに対する前フレームで推定された放射線の一次成分と前記変化量とを合成した値を用いた逐次計算を行うことにより、放射線の一次成分と前記被写体で散乱した放射線の散乱線成分とを逐次的に推定する推定手段と、
    前記逐次的に推定して得た結果を用いて、前記動画像におけるフレームにおいて、前記散乱線成分が低減された画像を生成する散乱線低減手段と、
    を備える放射線撮影装置。
  18. 放射線を被写体に照射して得られる動画像を処理する画像処理方法であって、
    前記動画像におけるフレーム間の変化量として、処理対象となるフレームと該フレームに対する前フレームとの差分を取得する工程と、
    前記動画像におけるフレームにおいて、処理対象となるフレームの初期値として、該フレームに対する前フレームで推定された放射線の一次成分と前記変化量とを合成した値を用いた逐次計算を行うことにより、放射線の一次成分と前記被写体で散乱した放射線の散乱線成分とを逐次的に推定す工程と、
    前記逐次的に推定して得た結果を用いて、前記動画像におけるフレームにおいて、前記散乱線成分が低減された画像を生成する工程と、
    を有する画像処理方法。
  19. コンピュータに、請求項18に記載の画像処理方法の各工程を実行させるためのプログラム。
JP2018015504A 2018-01-31 2018-01-31 画像処理装置、放射線撮影装置、画像処理方法、及びプログラム Active JP7129169B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018015504A JP7129169B2 (ja) 2018-01-31 2018-01-31 画像処理装置、放射線撮影装置、画像処理方法、及びプログラム
US16/255,097 US11000253B2 (en) 2018-01-31 2019-01-23 Image processing apparatus, radiation imaging apparatus, image processing method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018015504A JP7129169B2 (ja) 2018-01-31 2018-01-31 画像処理装置、放射線撮影装置、画像処理方法、及びプログラム

Publications (2)

Publication Number Publication Date
JP2019130083A JP2019130083A (ja) 2019-08-08
JP7129169B2 true JP7129169B2 (ja) 2022-09-01

Family

ID=67393037

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018015504A Active JP7129169B2 (ja) 2018-01-31 2018-01-31 画像処理装置、放射線撮影装置、画像処理方法、及びプログラム

Country Status (2)

Country Link
US (1) US11000253B2 (ja)
JP (1) JP7129169B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7212530B2 (ja) 2019-01-24 2023-01-25 キヤノン株式会社 放射線撮影システム、制御装置および制御方法
WO2021059326A1 (ja) * 2019-09-24 2021-04-01 株式会社日立国際電気 カメラおよびカメラの制御方法
JP7502868B2 (ja) 2020-02-07 2024-06-19 キヤノン株式会社 画像処理装置および方法、プログラム
JP7078167B1 (ja) 2021-10-01 2022-05-31 コニカミノルタ株式会社 動態画像処理装置、動態画像処理システム、動態画像処理プログラム、動態画像処理方法及び移動型放射線撮影装置
JP7448042B1 (ja) 2023-01-13 2024-03-12 コニカミノルタ株式会社 動態画像処理装置、移動型放射線撮影装置、動態画像処理システム、プログラム及び動態画像処理方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010188113A (ja) 2009-02-19 2010-09-02 Toshiba Corp 散乱線補正方法及び散乱線補正装置
US20150243045A1 (en) 2014-02-21 2015-08-27 Korea Advanced Institute Of Science And Technology Tomography apparatus and method for reconstructing tomography image thereof
JP2017035204A (ja) 2015-08-07 2017-02-16 株式会社島津製作所 画像処理方法およびx線透視撮影装置
US20170055932A1 (en) 2015-08-27 2017-03-02 Samsung Electronics Co., Ltd. Tomography apparatus and method of reconstructing tomography images

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07194583A (ja) * 1993-12-29 1995-08-01 Toshiba Corp X線診断装置
US9495771B2 (en) * 2013-05-10 2016-11-15 The General Hospital Corporation Systems and methods for motion correction in positron emission tomography imaging
JP6145889B2 (ja) * 2014-03-24 2017-06-14 富士フイルム株式会社 放射線画像処理装置および方法並びにプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010188113A (ja) 2009-02-19 2010-09-02 Toshiba Corp 散乱線補正方法及び散乱線補正装置
US20150243045A1 (en) 2014-02-21 2015-08-27 Korea Advanced Institute Of Science And Technology Tomography apparatus and method for reconstructing tomography image thereof
JP2017035204A (ja) 2015-08-07 2017-02-16 株式会社島津製作所 画像処理方法およびx線透視撮影装置
US20170055932A1 (en) 2015-08-27 2017-03-02 Samsung Electronics Co., Ltd. Tomography apparatus and method of reconstructing tomography images

Also Published As

Publication number Publication date
JP2019130083A (ja) 2019-08-08
US20190231293A1 (en) 2019-08-01
US11000253B2 (en) 2021-05-11

Similar Documents

Publication Publication Date Title
JP7129169B2 (ja) 画像処理装置、放射線撮影装置、画像処理方法、及びプログラム
US8517145B2 (en) X-Ray image processing apparatus for decreasing noise of an X-ray image, X-ray image processing method, program and storage medium
US20100329533A1 (en) Image processing method and image processing apparatus
JP5274101B2 (ja) 放射線画像処理装置、放射線画像処理方法及びプログラム
JP4342493B2 (ja) 手ぶれ補正装置
JP6071444B2 (ja) 画像処理装置及びその作動方法、プログラム
JP7032913B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラム
US11631160B2 (en) Image processing apparatus, image processing method, and X-ray CT apparatus
WO2022045210A1 (ja) 画像処理装置、画像処理方法、学習装置、学習方法、及びプログラム
JP2015009126A (ja) 画像処理装置、画像処理方法、撮影制御装置、放射線撮影システムおよびプログラム
WO2022091869A1 (ja) 医用画像処理装置、医用画像処理方法及びプログラム
JP6014174B2 (ja) Ct画像生成装置およびct画像生成方法
JP7133979B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム、及び、記憶媒体
JP6002324B2 (ja) 放射線画像生成装置及び画像処理方法
JP7409606B2 (ja) 画像処理装置、画像処理方法およびプログラム
JPWO2018084069A1 (ja) 画像合成システム、画像合成方法、および画像合成プログラム記録媒体
JP2015089452A (ja) 画像処理装置、画像処理方法及びプログラム
JP6789620B2 (ja) 画像処理装置及びその制御方法、コンピュータプログラム
US20230077520A1 (en) X-ray imaging system
JP2004266829A (ja) X線診断装置
JP2012085205A (ja) 画像処理装置、撮像装置、画像処理方法および画像処理プログラム
CN112839180A (zh) 曝光控制方法、装置以及图像采集设备、口内扫描仪
JP7566696B2 (ja) 画像処理装置、画像処理方法、学習装置、学習方法、及びプログラム
JP2018143701A (ja) 放射線撮影装置、放射線撮影システム、放射線撮影方法、及びプログラム
WO2022153935A1 (ja) 画像生成装置、ロボット制御装置及びコンピュータプログラム

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20210103

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210113

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210127

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220310

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220715

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220822

R151 Written notification of patent or utility model registration

Ref document number: 7129169

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151