JP2020128882A - 画像処理装置および画像処理方法 - Google Patents

画像処理装置および画像処理方法 Download PDF

Info

Publication number
JP2020128882A
JP2020128882A JP2019020467A JP2019020467A JP2020128882A JP 2020128882 A JP2020128882 A JP 2020128882A JP 2019020467 A JP2019020467 A JP 2019020467A JP 2019020467 A JP2019020467 A JP 2019020467A JP 2020128882 A JP2020128882 A JP 2020128882A
Authority
JP
Japan
Prior art keywords
image
tomographic image
tomographic
creating
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019020467A
Other languages
English (en)
Other versions
JP7237624B2 (ja
JP2020128882A5 (ja
Inventor
二三生 橋本
Fumio Hashimoto
二三生 橋本
希望 大手
Kibo Ote
希望 大手
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hamamatsu Photonics KK
Original Assignee
Hamamatsu Photonics KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hamamatsu Photonics KK filed Critical Hamamatsu Photonics KK
Priority to JP2019020467A priority Critical patent/JP7237624B2/ja
Priority to PCT/JP2020/003268 priority patent/WO2020162296A1/ja
Priority to US17/428,693 priority patent/US11893660B2/en
Priority to EP20752373.9A priority patent/EP3923033A4/en
Priority to CN202080012799.XA priority patent/CN113454489B/zh
Publication of JP2020128882A publication Critical patent/JP2020128882A/ja
Publication of JP2020128882A5 publication Critical patent/JP2020128882A5/ja
Application granted granted Critical
Publication of JP7237624B2 publication Critical patent/JP7237624B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01TMEASUREMENT OF NUCLEAR OR X-RADIATION
    • G01T1/00Measuring X-radiation, gamma radiation, corpuscular radiation, or cosmic radiation
    • G01T1/29Measurement performed on radiation beams, e.g. position or section of the beam; Measurement of spatial distribution of radiation
    • G01T1/2914Measurement of spatial distribution of radiation
    • G01T1/2985In depth localisation, e.g. using positron emitters; Tomographic imaging (longitudinal and transverse section imaging; apparatus for radiation diagnosis sequentially in different planes, steroscopic radiation diagnosis)
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/006Inverse problem, transformation from projection-space into object-space, e.g. transform methods, back-projection, algebraic methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2211/00Image generation
    • G06T2211/40Computed tomography
    • G06T2211/412Dynamic
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2211/00Image generation
    • G06T2211/40Computed tomography
    • G06T2211/441AI-based methods, deep learning or artificial neural networks

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Algebra (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Molecular Biology (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Image Processing (AREA)
  • Nuclear Medicine (AREA)
  • Image Analysis (AREA)

Abstract

【課題】放射線断層撮影装置により収集されたリストデータに基づいて高性能にノイズ除去された断層画像を作成することができる装置を提供する。【解決手段】画像処理装置10は、第1画像作成部11、第2画像作成部12及びCNN処理部13を備える。第1画像作成部11は、リストデータのうち第mフレームに含まれるデータ群を用いて第mフレームの第1断層画像Dmを作成する。第2画像作成部12は、リストデータのうち第1画像作成部11において第1断層画像Dmを作成する際に用いたデータ群より多いデータ数のデータ群を用いて第2断層画像Smを作成する。CNN処理部13は、CNNに第2断層画像Smを入力させてCNNから出力断層画像Omを出力させ、出力断層画像Omと第1断層画像Dmとの比較に基づいてCNNを学習させ、学習動作を繰り返し行って学習の度に出力断層画像Omを生成する。【選択図】図1

Description

本発明は、放射線断層撮影装置により収集されたリストデータに基づいてノイズ除去処理後の断層画像を作成する装置および方法に関するものである。
被検体(生体)の断層画像を取得することができる放射線断層撮影装置として、PET(Positron Emission Tomography)装置およびSPECT(Single Photon Emission Computed Tomography)装置が挙げられる。
PET装置は、被検体が置かれる測定空間の周囲に配列された多数の小型の放射線検出器を有する検出部を備えている。PET装置は、陽電子放出アイソトープ(RI線源)が投入された被検体内における電子・陽電子の対消滅に伴って発生するエネルギ511keVの光子対を検出部により同時計数法で検出し、この同時計数情報を収集する。そして、この収集した多数の同時計数情報に基づいて、測定空間における光子対の発生頻度の空間分布(すなわち、RI線源の空間分布)を表す断層画像を再構成することができる。このとき、PET装置により収集された同時計数情報を時系列に並べたリストデータを収集順に複数のフレームに分割し、そのリストデータのうち各フレームに含まれるデータ群を用いて画像再構成処理を行うことで、複数のフレームの断層画像からなる動態PET画像を得ることができる。このPET装置は核医学分野等で重要な役割を果たしており、これを用いて例えば生体機能や脳の高次機能の研究を行うことができる。
このようにして再構成された断層画像は、ノイズを多く含んでいるので、画像フィルタによるノイズ除去処理が必要である。ノイズ除去の為に用いられる画像フィルタとしては、ガウシアン・フィルタ(Gaussian Filter)およびガイディド・フィルタ(Guided Filter)が挙げられる。従来からガウシアン・フィルタが用いられている。これに対して、ガイディド・フィルタは、近年になって開発されたものであって、ガウシアン・フィルタと比べると画像中の濃淡の境界をよく保存することができるという特徴がある。
特許文献1および非特許文献1,2には、ガイディド・フィルタにより動態PET画像のノイズを除去する技術が記載されている。特許文献1および非特許文献1に記載された技術は、ガイディド・フィルタによるノイズ除去処理に際して、複数のフレームの断層画像からなる動態PET画像を積算して得られる画像をガイダンス画像として用いている。また、非特許文献2に記載された技術は、より適切なガイダンス画像を用いることで、より効果的なノイズ除去を可能としている。
非特許文献3には、深層ニューラルネットワーク(DNN: Deep Neural Network)の一種である畳み込みニューラルネットワーク(CNN: Convolutional Neural Network)を用いた Deep Image Prior技術(非特許文献4)によりPET画像のノイズを除去する技術が記載されている。
中国特許出願公開第103955899号明細書
Lijun Lu, et al. "DynamicPET Denoising Incorporating a Composite Image Guided Filter," IEEE NuclearScience Symposium and Medical Imaging Conference (NSS/MIC), 2014. F. Hashimoto, et al. "Denoising of Dynamic Sinogram by Image Guided Filteringfor Positron Emission Tomography," IEEE Transactionson Radiation and Plasma Medical Sciences, Vol.2, No.6, November2018. Kuang Gong, et al. "PET Image Reconstruction Using Deep Image Prior," IEEE Transactions on Medical Imaging, December 2018. Dmitry Ulyanov, et al. "DeepImage Prior," arXiv preprint arXiv:1711.10925 (2017).
特許文献1および非特許文献1〜3に記載された技術によるPET画像に対するノイズ除去処理は、ガウシアン・フィルタを用いる場合と比べるとノイズ除去性能が優れている。しかし、PET画像およびSPECT画像に対して更なるノイズ除去性能の向上が望まれている。
本発明は、上記問題点を解消する為になされたものであり、放射線断層撮影装置により収集されたリストデータに基づいて高性能にノイズ除去された断層画像を作成することができる装置および方法を提供することを目的とする。
本発明の画像処理装置は、放射線断層撮影装置により収集されたリストデータに基づいてノイズ除去処理後の断層画像を作成するための装置であって、(1) リストデータを収集順に複数のフレームに分割し、複数のフレームそれぞれについてリストデータのうち該フレームに含まれるデータ群を用いて再構成処理を行って該フレームの第1断層画像を作成する第1画像作成部と、(2) リストデータのうち第1画像作成部において各フレームの第1断層画像を作成する際に用いたデータ群より多いデータ数のデータ群を用いて再構成処理を行って第2断層画像を作成する第2画像作成部と、(3) 複数のフレームそれぞれについて、畳み込みニューラルネットワークに第2断層画像を入力させて畳み込みニューラルネットワークから出力断層画像を出力させ、この出力断層画像と第1断層画像との比較に基づいて畳み込みニューラルネットワークを学習させることを繰り返して、複数の出力断層画像を生成するCNN処理部と、を備える。
本発明の画像処理装置は、複数のフレームそれぞれについて複数の出力断層画像のうちから何れかの出力断層画像をノイズ除去処理後の断層画像として選択する画像選択部を更に備えるのが好適である。この画像選択部は、複数のフレームそれぞれについて出力断層画像と第1断層画像との比較に基づいて複数の出力断層画像のうちから何れかの出力断層画像を選択するのが好適である。
本発明の画像処理装置においては、第2画像作成部は、各フレームの第1断層画像に対応する第2断層画像を作成する際に、第1画像作成部において該フレームの第1断層画像を作成する際に用いたデータ群を含むデータ群を用いるのが好適である。第2画像作成部は、各フレームの第1断層画像に対応する第2断層画像を作成する際に、第1画像作成部において該フレームの第1断層画像を作成する際に用いたデータ群の前後のデータ群を用いるのも好適である。
本発明の放射線断層撮影システムは、被検体の断層画像を再構成するためのリストデータを収集する放射線断層撮影装置と、放射線断層撮影装置により収集されたリストデータに基づいてノイズ除去処理後の断層画像を作成する上記の本発明の画像処理装置と、を備える。
本発明の画像処理方法は、放射線断層撮影装置により収集されたリストデータに基づいてノイズ除去処理後の断層画像を作成するための方法であって、(1) リストデータを収集順に複数のフレームに分割し、複数のフレームそれぞれについてリストデータのうち該フレームに含まれるデータ群を用いて再構成処理を行って該フレームの第1断層画像を作成する第1画像作成ステップと、(2) リストデータのうち第1画像作成ステップにおいて各フレームの第1断層画像を作成する際に用いたデータ群より多いデータ数のデータ群を用いて再構成処理を行って第2断層画像を作成する第2画像作成ステップと、(3) 複数のフレームそれぞれについて、畳み込みニューラルネットワークに第2断層画像を入力させて畳み込みニューラルネットワークから出力断層画像を出力させ、この出力断層画像と第1断層画像との比較に基づいて畳み込みニューラルネットワークを学習させることを繰り返して、複数の出力断層画像を生成するCNN処理ステップと、を備える。
本発明の画像処理方法は、複数のフレームそれぞれについて複数の出力断層画像のうちから何れかの出力断層画像をノイズ除去処理後の断層画像として選択する画像選択ステップを更に備えるのが好適である。この画像選択ステップにおいて、複数のフレームそれぞれについて出力断層画像と第1断層画像との比較に基づいて複数の出力断層画像のうちから何れかの出力断層画像を選択するのが好適である。
本発明の画像処理方法は、第2画像作成ステップにおいて、各フレームの第1断層画像に対応する第2断層画像を作成する際に、第1画像作成ステップにおいて該フレームの第1断層画像を作成する際に用いたデータ群を含むデータ群を用いるのが好適である。第2画像作成ステップにおいて、各フレームの第1断層画像に対応する第2断層画像を作成する際に、第1画像作成ステップにおいて該フレームの第1断層画像を作成する際に用いたデータ群の前後のデータ群を用いるのも好適である。
本発明によれば、放射線断層撮影装置により収集されたリストデータに基づいて高性能にノイズ除去された断層画像を作成することができる。
図1は、放射線断層撮影システム1の構成を示す図である。 図2は、CNN処理部13を説明する図である。 図3は、画像処理方法を説明するフローチャートである。 図4は、CNN処理部13の動作およびCNN処理ステップS13を説明するフローチャートである。 図5は、リストデータ、フレーム、第1断層画像Dおよび第2断層画像Sを説明する図である。 図6は、RI線源が投入された被検体における同時計数情報の取得頻度の時間変化を示すグラフである。 図7は、シミュレーション方法を説明する図である。図7(a)は数値ファントムを示す。図7(b)はサイノグラムを示す。図7(c)はノイズ付加サイノグラムを示す。図7(d)は再構成画像を示す。 図8は、シミュレーションにおいて用いた白質部(WM)および灰白質部(GM)それぞれのアクティビティの時間変化のモデルを示すグラフである。 図9は、数値ファントム画像を示す図である。 図10は、第6フレームの第1断層画像を示す図である。 図11は、図10の第1断層画像に対して比較例1のノイズ除去処理をして得られた画像を示す図である。 図12は、図10の第1断層画像に対して比較例2のノイズ除去処理をして得られた画像を示す図である。 図13は、図10の第1断層画像に対して本実施形態のCNN処理をして選択された出力断層画像を示す図である。 図14は、シミュレーションにおいて得られた比較例1、比較例2および本実施形態それぞれの場合の再構成画像のPSNRの時間変化を示すグラフである。 図15は、シミュレーションにおいて得られた比較例1、比較例2および本実施形態それぞれの場合の再構成画像のSSIMの時間変化を示すグラフである。 図16は、リストデータの全体を用いて作成された第2断層画像を示す図である。 図17は、第6フレームの第1断層画像を示す図である。 図18は、図17の第1断層画像に対して比較例1のノイズ除去処理をして得られた画像を示す図である。 図19は、図17の第1断層画像に対して比較例2のノイズ除去処理をして得られた画像を示す図である。 図20は、図17の第1断層画像に対し実施例のCNN処理をして選択された出力断層画像(n=30)を示す図である。 図21は、図17の第1断層画像に対し実施例のCNN処理をして選択された出力断層画像(n=100)を示す図である。 図22は、図17の第1断層画像に対し実施例のCNN処理をして選択された出力断層画像(n=200)を示す図である。 図23は、図17の第1断層画像に対し実施例のCNN処理をして選択された出力断層画像(n=300)を示す図である。 図24は、白質(WM)におけるTACを示す図である。 図25は、灰白質(GM)におけるTACを示す図である。
以下、添付図面を参照して、本発明を実施するための形態を詳細に説明する。なお、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。本発明は、これらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
図1は、放射線断層撮影システム1の構成を示す図である。放射線断層撮影システム1は、放射線断層撮影装置2および画像処理装置10を備える。画像処理装置10は、第1画像作成部11、第2画像作成部12、CNN処理部13、画像選択部14および記憶部15を備える。画像処理装置10として、CPU、RAM、ROMおよびハードディスクドライブ等を有するコンピュータが用いられる。また、画像処理装置10は、操作者の入力を受け付ける入力部(例えばキーボードやマウス)を備え、画像等を表示する表示部(例えば液晶ディスプレイ)を備える。
放射線断層撮影装置2は、被検体の断層画像を再構成するためのリストデータを収集する装置である。放射線断層撮影装置2として、PET装置およびSPECT装置が挙げられる。以下では、放射線断層撮影装置2がPET装置であるとして説明をする。
放射線断層撮影装置2は、被検体が置かれる測定空間の周囲に配列された多数の小型の放射線検出器を有する検出部を備えている。放射線断層撮影装置2は、陽電子放出アイソトープ(RI線源)が投入された被検体内における電子・陽電子の対消滅に伴って発生するエネルギ511keVの光子対を検出部により同時計数法で検出し、この同時計数情報を蓄積する。そして、放射線断層撮影装置2は、この蓄積した多数の同時計数情報を時系列に並べたものをリストデータとして画像処理装置10へ出力する。
リストデータは、光子対を同時計数した1対の放射線検出器の識別情報および検出時刻情報を含む。リストデータは、さらに、各放射線検出器が検出した光子のエネルギ情報、および、1対の放射線検出器の検出時間差情報をも含んでいてもよい。
画像処理装置10は、リストデータに基づいて断層画像を再構成する。リストデータに基づいて断層画像を再構成する技術としては、ML-EM(maximum likelihood expectationmaximization)法、および、これを改良したブロック反復法による逐次近似的画像再構成技術が知られている。また、ブロック反復法による逐次近似的画像再構成技術としては、OSEM(ordered subset ML-EM)法、RAMLA(row-action maximum likelihood algorithm)法およびDRAMA(dynamic RAMLA)法などが知られている。また、画像処理装置10は、畳み込みニューラルネットワーク(CNN)を用いてノイズ除去処理後の断層画像を作成する。
第1画像作成部11は、リストデータを収集順に複数のフレーム(第1〜第Mのフレーム)に分割し、複数のフレームそれぞれについて、リストデータのうち第mフレームに含まれるデータ群を用いて再構成処理を行って、第mフレームの第1断層画像Dを作成する。第1断層画像D〜Dは、動態PET画像である。
第2画像作成部12は、リストデータのうち第1画像作成部11において第mフレームの第1断層画像Dを作成する際に用いたデータ群より多いデータ数のデータ群を用いて再構成処理を行って第2断層画像Sを作成する。第2断層画像Sは静態PET画像であってよい。第2断層画像は、フレーム毎に作成されてもよいが、全フレームに対して共通に作成されてもよく、また、幾つかのフレームに対して共通に作成されてもよい。
第1画像作成部11および第2画像作成部12は、共通のものであってもよいし、別個に設けられてもよい。
CNN処理部13は、図2に示されるように、第1〜第Mのフレームそれぞれについて、CNNに第2断層画像Sを入力させて、CNNから出力断層画像Oを出力させる。CNN処理部13は、この出力断層画像Oと第1断層画像Dとを比較し、その比較結果に基づいてCNNを学習させる。CNN処理部13は、この学習動作を繰り返し行い、学習の度に出力断層画像Om,nを生成する。出力断層画像Om,nは、第mフレームについて第1断層画像Dおよび第2断層画像Sを用いたCNNの(n−1)回の学習の後にCNNから出力された出力断層画像である。出力断層画像Om,0は、一度も学習を行っていない状態でCNNから出力された出力断層画像である。
画像選択部14は、第1〜第Mのフレームそれぞれについて、複数の出力断層画像Om,1〜Om,Nのうちから何れかの出力断層画像を、ノイズ除去処理後の断層画像として選択する。好適には、画像選択部14は、出力断層画像Om,nと第2断層画像Sとの比較に基づいて、複数の出力断層画像Om,1〜Om,Nのうちから何れかの出力断層画像を選択する。例えば、出力断層画像Om,nと第2断層画像Sとの間の誤差が最小となる出力断層画像を選択してもよいし、出力断層画像Om,nと第2断層画像Sとの間の誤差が閾値以下となる1または2以上の出力断層画像のうちから何れかの出力断層画像を選択してもよい。なお、医師や技師などが、複数の出力断層画像Om,1〜Om,Nのうちから何れかの出力断層画像を選択してもよい。
記憶部15は、リストデータを記憶し、各フレームの第1断層画像Dおよび第2断層画像Sを記憶する。また、記憶部15は、各フレームの複数の出力断層画像Om,1〜Om,Nを記憶し、これらのうちから選択された出力断層画像を記憶する。
図3は、画像処理方法を説明するフローチャートである。この画像処理方法は、放射線断層撮影装置2により収集されたリストデータを取得するリストデータ取得ステップS10と、第1画像作成部11が行う第1画像作成ステップS11と、第2画像作成部12が行う第2画像作成ステップS12と、CNN処理部13が行うCNN処理ステップS13と、画像選択部14が行う画像選択ステップS14と、を備える。
リストデータ取得ステップS10では、放射線断層撮影装置2により収集されたリストデータを取得する。第1画像作成ステップS11では、リストデータを収集順に複数のフレーム(第1〜第Mのフレーム)に分割し、複数のフレームそれぞれについて、リストデータのうち第mフレームに含まれるデータ群を用いて再構成処理を行って、第mフレームの第1断層画像Dを作成する。第2画像作成ステップS12では、リストデータのうち第1画像作成部11において第mフレームの第1断層画像Dを作成する際に用いたデータ群より多いデータ数のデータ群を用いて再構成処理を行って第2断層画像Sを作成する。第1画像作成ステップS11および第2画像作成ステップS12は、任意の順に行われてもよいし、並列的に行なわれてもよい。
CNN処理ステップS13では、第1〜第Mのフレームそれぞれについて、CNNに第2断層画像Sを入力させて、CNNから出力断層画像Oを出力させる。この出力断層画像Oと第1断層画像Dとの比較に基づいてCNNを学習させる。そして、この学習動作を繰り返して行い、学習の度に出力断層画像Om,nを生成する。画像選択ステップS14では、第1〜第Mのフレームそれぞれについて、複数の出力断層画像Om,1〜Om,Nのうちから何れかの出力断層画像を、ノイズ除去処理後の断層画像として選択する。
図4は、CNN処理部13の動作およびCNN処理ステップS13を説明するフローチャートである。この例では、第1〜第Mのフレームそれぞれについて、CNNをN回繰り返して学習させてN個の出力断層画像Om,1〜Om,Nを保存する。出力断層画像Om,nを得る度に該出力断層画像Om,nと第2断層画像Sとを比較して、両者間の誤差が所定の閾値以下となった時点でCNN処理ステップS13を終了して、最後に得られた出力断層画像をノイズ除去処理後の断層画像としてもよい。
図5は、リストデータ、フレーム、第1断層画像Dおよび第2断層画像Sを説明する図である。この図において横軸はリストデータを収集した時間を表し、その時間軸が複数のフレームに分割されている。第mフレームの第1断層画像Dは、リストデータのうち第mフレームに含まれるデータ群を用いて再構成された断層画像である。第mフレームの第1断層画像Dに対応する第2断層画像Sは、リストデータのうち第mフレームに含まれるデータ群より多いデータ数のデータ群を用いて再構成された断層画像である。
第mフレームの第1断層画像Dに対応する第2断層画像Sは、第mフレームのデータ群の2倍以上のデータ数のデータ群を用いて作成されるのが好適である。第mフレームの第1断層画像Dに対応する第2断層画像Sは、第mフレームのデータ群を含むデータ群を用いて作成されてもよいし、第mフレームのデータ群の前後のデータ群を用いて作成されてもよい。
図6は、RI線源が投入された被検体における同時計数情報の取得頻度の時間変化を示すグラフである。一般に、RI線源が投入された被検体内における電子・陽電子の対消滅の頻度(同時計数情報の取得頻度)は、図6に示されるように、RI線源投入直後から時間の経過とともに次第に高くなっていき、やがて或る時刻Tpでピークに達し、そのピークの後は緩やかに次第に低くなっていく。このことから、RI線源投入直後から同時計数情報の取得の頻度が高い期間においては各フレームの期間は相対的に短く設定され、その後の同時計数情報の取得の頻度が緩やかに低くなっていく期間においては各フレームの期間は相対的に長く設定される。また、RI線源投入直後から同時計数情報の取得の頻度がピークに達するまでの期間(時刻Tp以前)と、そのピークの後の期間(時刻Tp以降)とでは、断層画像が大きく相違していることが知られている。
そこで、第mフレームが図6において時刻Tp以前(血流依存領域)である場合には、第mフレームの第1断層画像Dに対応する第2断層画像Sは、リストデータのうち時刻Tp以前のデータ群を用いて作成されるのが好適である。第mフレームが図6において時刻Tp以降(PETリガンド動態依存領域)である場合には、第mフレームの第1断層画像Dに対応する第2断層画像Sは、リストデータのうち時刻Tp以降のデータ群を用いて作成されるのが好適である。第mフレームの第1断層画像Dに対応する第2断層画像Sは、リストデータの全体を用いて作成されてもよい。
第2画像作成部12(第2画像作成ステップS12)において、第mフレームの第1断層画像Dに対応する第2断層画像Sは、第2断層画像Sの最大画素値が第1断層画像Dの最大画素値と等しくなるよう正規化を行って作成されるのが好適である。すなわち、下記(1)式で表される正規化第2断層画像S'を用いるのが好適である。MaxDは、第mフレームの第1断層画像Dの最大画素値である。MaxSは、第mフレームの第1断層画像Dに対応する第2断層画像Sの最大画素値である。
次に、シミュレーション結果について説明する。図7は、シミュレーション方法を説明する図である。先ず数値ファントム(図7(a))を用意した。この数値ファントムは、18F-FDG(フルオロデオキシグルコース)を投入したサルの脳の断層画像を模擬したものである。この数値ファントムには、脳の白質部(white matter、WM)および灰白質部(gray matter、GM)が含まれている。図8は、シミュレーションにおいて用いた白質部(WM)および灰白質部(GM)それぞれのアクティビティの時間変化のモデルを示すグラフである。アクティビティの時間変化(TAC: Time-Activity Curve)は、一般に、RI線源投入直後から時間の経過とともに次第に高くなっていき、やがて或る時刻でピークに達し、そのピークの後は緩やかに次第に低くなっていく。総カウント数(同時計数情報の数)を1500万とした。
この数値ファントムに基づいて各フレームのサイノグラム(図7(b))を作成した。サイノグラムは、放射線断層撮影装置2の放射線検出器の対ごとに同時計数情報をヒストグラム化したものである。第1〜第4のフレームの各期間を20秒(小計80秒)とし、第5〜第8のフレームの各期間を40秒(小計160秒)とし、第9〜第12のフレームの各期間を60秒(小計240秒)とし、第13〜第16のフレームの各期間を180秒(小計720秒)とし、第17〜第30のフレームの各期間を600秒(小計4200秒)として、全体のリストデータの収集時間を5400秒(=90分)とした。
各フレームのサイノグラムに対して、該フレームのカウント数に応じたポアソンノイズを与えて、ノイズ付加サイノグラム(図7(c))を作成した。このノイズ付加サイノグラムに基づいてML-EM法により再構成画像(図7(d))を作成した。ML-EM法における反復回数は40回であった。
図9は、数値ファントム画像を示す図である。図10は、第6フレームの第1断層画像を示す図である。図11は、図10の第1断層画像に対して比較例1のノイズ除去処理をして得られた画像を示す図である。比較例1のノイズ除去処理は、ガウシアン・フィルタによる処理である。図12は、図10の第1断層画像に対して比較例2のノイズ除去処理をして得られた画像を示す図である。比較例2のノイズ除去処理は、非特許文献2に記載された処理である。図13は、図10の第1断層画像に対して本実施形態のCNN処理をして選択された出力断層画像を示す図である。ここでは、リストデータの全体を用いて作成された正規化第2断層画像S'を用いた。これらの図の対比から分かるように、比較例1,2のノイズ除去処理と比べて、本実施形態のノイズ除去処理では、画像中の濃淡の境界がよく保存された上でノイズがよく除去されており、しかも、処理画像の不自然さが低減されている。
図14は、シミュレーションにおいて得られた比較例1、比較例2および本実施形態それぞれの場合の再構成画像のPSNRの時間変化を示すグラフである。PSNR(Peak Signal to Noise Ratio)は、画像の品質をデシベル(dB)で表したものであり、値が高いほど良好な画質であることを意味する。図15は、シミュレーションにおいて得られた比較例1、比較例2および本実施形態それぞれの場合の再構成画像のSSIMの時間変化を示すグラフである。SSIM(Structural Similarity Index)は、画像の輝度およびコントラストならびに構造の変化を定量化する指標であり、値が高いほど良好な画質であることを意味する。PSNRおよびSSIMの何れの指標も、比較例1,2のノイズ除去処理と比べて本実施形態のノイズ除去処理の場合の方が性能が優れていることを示している。他のフレームについても、本実施形態のノイズ除去処理の場合の方が性能が優れている。
次に、実施例について説明する。実施例では、被検体として、18F-FDGを投入したアカゲサルの脳を用いた。PET装置として、浜松ホトニクス株式会社製の動物用PET装置(SHR-38000)を用いた。トランスミッション計測を30分間に亘って行い、また、エミッション計測を90分間に亘って行って、トランスミッション計測結果に基づいてエミッション計測結果に対して吸収補正を行った。リストデータを第1〜第30のフレームに分割した。各フレームの再構成画像をDRAMA法により作成した。
図16は、リストデータの全体を用いて作成された第2断層画像を示す図である。図17は、第6フレームの第1断層画像を示す図である。図18は、図17の第1断層画像に対して比較例1のノイズ除去処理をして得られた画像を示す図である。図19は、図17の第1断層画像に対して比較例2のノイズ除去処理をして得られた画像を示す図である。図20〜図23は、図17の第1断層画像に対し実施例のCNN処理をして選択された出力断層画像を示す図である。図20は、n=30の場合の出力断層画像を示す。図21は、n=100の場合の出力断層画像を示す。図22は、n=200の場合の出力断層画像を示す。図23は、n=300の場合の出力断層画像を示す。
この実施例からも、比較例1,2のノイズ除去処理と比べて本実施例のノイズ除去処理の場合の方が性能が優れていることが分かる。また、本実施例の出力断層画像を示す図20〜図23のうち図22の出力断層画像(n=100)が、最も自然な画像であり、図16の第2断層画像との誤差が近い。すなわち、学習回数nを適切に選択することで、より自然な出力断層画像を取得することが可能であることが分かる。
図24は、白質(WM)におけるTACを示す図である。図25は、灰白質(GM)におけるTACを示す図である。白質および灰白質の何れにおいても、比較例1,2のノイズ除去処理と比べて本実施例のノイズ除去処理の場合の方が、TACが時間的に緩やかに変化している。このことからも、本実施形態のノイズ除去処理の場合の方が性能が優れていることが分かる。このTACを用いることで統計解析やモデル解析を行うことができ、TACの時間的変動が大きいと定量値に大きな誤差が生じる場合がある。
本発明は、上記実施形態に限定されるものではなく、種々の変形が可能である。例えば、放射線断層撮影装置2は、上記の実施形態ではPET装置であるとしたが、SPECT装置であってもよい。
1…放射線断層撮影システム、2…放射線断層撮影装置、10…画像処理装置、11…第1画像作成部、12…第2画像作成部、13…CNN処理部、14…画像選択部、15…記憶部。

Claims (11)

  1. 放射線断層撮影装置により収集されたリストデータに基づいてノイズ除去処理後の断層画像を作成するための装置であって、
    前記リストデータを収集順に複数のフレームに分割し、前記複数のフレームそれぞれについて前記リストデータのうち該フレームに含まれるデータ群を用いて再構成処理を行って該フレームの第1断層画像を作成する第1画像作成部と、
    前記リストデータのうち前記第1画像作成部において各フレームの第1断層画像を作成する際に用いたデータ群より多いデータ数のデータ群を用いて再構成処理を行って第2断層画像を作成する第2画像作成部と、
    前記複数のフレームそれぞれについて、畳み込みニューラルネットワークに前記第2断層画像を入力させて前記畳み込みニューラルネットワークから出力断層画像を出力させ、この出力断層画像と前記第1断層画像との比較に基づいて前記畳み込みニューラルネットワークを学習させることを繰り返して、複数の出力断層画像を生成するCNN処理部と、
    を備える画像処理装置。
  2. 前記複数のフレームそれぞれについて前記複数の出力断層画像のうちから何れかの出力断層画像をノイズ除去処理後の断層画像として選択する画像選択部を更に備える、
    請求項1に記載の画像処理装置。
  3. 前記画像選択部は、前記複数のフレームそれぞれについて前記出力断層画像と前記第1断層画像との比較に基づいて前記複数の出力断層画像のうちから何れかの出力断層画像を選択する、
    請求項2に記載の画像処理装置。
  4. 前記第2画像作成部は、各フレームの第1断層画像に対応する第2断層画像を作成する際に、前記第1画像作成部において該フレームの第1断層画像を作成する際に用いたデータ群を含むデータ群を用いる、
    請求項1〜3の何れか1項に記載の画像処理装置。
  5. 前記第2画像作成部は、各フレームの第1断層画像に対応する第2断層画像を作成する際に、前記第1画像作成部において該フレームの第1断層画像を作成する際に用いたデータ群の前後のデータ群を用いる、
    請求項1〜4の何れか1項に記載の画像処理装置。
  6. 被検体の断層画像を再構成するためのリストデータを収集する放射線断層撮影装置と、
    前記放射線断層撮影装置により収集されたリストデータに基づいてノイズ除去処理後の断層画像を作成する請求項1〜5の何れか1項に記載の画像処理装置と、
    を備える放射線断層撮影システム。
  7. 放射線断層撮影装置により収集されたリストデータに基づいてノイズ除去処理後の断層画像を作成するための方法であって、
    前記リストデータを収集順に複数のフレームに分割し、前記複数のフレームそれぞれについて前記リストデータのうち該フレームに含まれるデータ群を用いて再構成処理を行って該フレームの第1断層画像を作成する第1画像作成ステップと、
    前記リストデータのうち前記第1画像作成ステップにおいて各フレームの第1断層画像を作成する際に用いたデータ群より多いデータ数のデータ群を用いて再構成処理を行って第2断層画像を作成する第2画像作成ステップと、
    前記複数のフレームそれぞれについて、畳み込みニューラルネットワークに前記第2断層画像を入力させて前記畳み込みニューラルネットワークから出力断層画像を出力させ、この出力断層画像と前記第1断層画像との比較に基づいて前記畳み込みニューラルネットワークを学習させることを繰り返して、複数の出力断層画像を生成するCNN処理ステップと、
    を備える画像処理方法。
  8. 前記複数のフレームそれぞれについて前記複数の出力断層画像のうちから何れかの出力断層画像をノイズ除去処理後の断層画像として選択する画像選択ステップを更に備える、
    請求項7に記載の画像処理方法。
  9. 前記画像選択ステップにおいて、前記複数のフレームそれぞれについて前記出力断層画像と前記第1断層画像との比較に基づいて前記複数の出力断層画像のうちから何れかの出力断層画像を選択する、
    請求項8に記載の画像処理方法。
  10. 前記第2画像作成ステップにおいて、各フレームの第1断層画像に対応する第2断層画像を作成する際に、前記第1画像作成ステップにおいて該フレームの第1断層画像を作成する際に用いたデータ群を含むデータ群を用いる、
    請求項7〜9の何れか1項に記載の画像処理方法。
  11. 前記第2画像作成ステップにおいて、各フレームの第1断層画像に対応する第2断層画像を作成する際に、前記第1画像作成ステップにおいて該フレームの第1断層画像を作成する際に用いたデータ群の前後のデータ群を用いる、
    請求項7〜10の何れか1項に記載の画像処理方法。
JP2019020467A 2019-02-07 2019-02-07 画像処理装置および画像処理方法 Active JP7237624B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2019020467A JP7237624B2 (ja) 2019-02-07 2019-02-07 画像処理装置および画像処理方法
PCT/JP2020/003268 WO2020162296A1 (ja) 2019-02-07 2020-01-29 画像処理装置および画像処理方法
US17/428,693 US11893660B2 (en) 2019-02-07 2020-01-29 Image processing device and image processing method
EP20752373.9A EP3923033A4 (en) 2019-02-07 2020-01-29 IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD
CN202080012799.XA CN113454489B (zh) 2019-02-07 2020-01-29 图像处理装置和图像处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019020467A JP7237624B2 (ja) 2019-02-07 2019-02-07 画像処理装置および画像処理方法

Publications (3)

Publication Number Publication Date
JP2020128882A true JP2020128882A (ja) 2020-08-27
JP2020128882A5 JP2020128882A5 (ja) 2022-02-15
JP7237624B2 JP7237624B2 (ja) 2023-03-13

Family

ID=71947437

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019020467A Active JP7237624B2 (ja) 2019-02-07 2019-02-07 画像処理装置および画像処理方法

Country Status (5)

Country Link
US (1) US11893660B2 (ja)
EP (1) EP3923033A4 (ja)
JP (1) JP7237624B2 (ja)
CN (1) CN113454489B (ja)
WO (1) WO2020162296A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230088130A (ko) * 2021-12-10 2023-06-19 광주과학기술원 Ste 및 최적 중단시점 자동 결정 알고리즘을 적용한 dip를 사용하여 노이즈 이미지를 디노이징하는 방법 및 장치
WO2023121206A1 (ko) * 2021-12-22 2023-06-29 이화여자대학교 산학협력단 신경망을 이용하여 영상의 노이즈를 저감하기 위한 학습 및 복원 방법과 이를 수행하는 컴퓨팅 장치
WO2023149403A1 (ja) * 2022-02-02 2023-08-10 浜松ホトニクス株式会社 画像処理装置および画像処理方法
WO2023228910A1 (ja) * 2022-05-26 2023-11-30 浜松ホトニクス株式会社 画像処理装置および画像処理方法
WO2023234171A1 (ja) * 2022-05-31 2023-12-07 浜松ホトニクス株式会社 画像処理装置および画像処理方法
WO2024075570A1 (ja) * 2022-10-05 2024-04-11 浜松ホトニクス株式会社 画像処理装置および画像処理方法
JP7562223B2 (ja) 2020-11-17 2024-10-07 キヤノンメディカルシステムズ株式会社 核医学診断装置および核医学データ処理装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170039738A1 (en) * 2004-01-13 2017-02-09 Spectrum Dynamics Llc Gating with anatomically varying durations
US20180018757A1 (en) * 2016-07-13 2018-01-18 Kenji Suzuki Transforming projection data in tomography by means of machine learning
JP2018110866A (ja) * 2017-01-13 2018-07-19 キヤノンメディカルシステムズ株式会社 医用画像生成装置及び医用画像生成方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103955899A (zh) 2014-05-02 2014-07-30 南方医科大学 基于组合图像引导的动态pet图像去噪方法
WO2018048507A1 (en) * 2016-09-06 2018-03-15 Han Xiao Neural network for generating synthetic medical images
RU2667879C1 (ru) * 2017-05-30 2018-09-24 Общество с ограниченной ответственностью "Аби Продакшн" Обработка и анализ данных на изображениях компьютерной томографии
EP3698269A4 (en) * 2017-11-22 2020-12-09 Zhejiang Dahua Technology Co., Ltd. IMAGE PROCESSING METHOD AND SYSTEM
WO2019161043A1 (en) * 2018-02-15 2019-08-22 GE Precision Healthcare LLC System and method for synthesizing magnetic resonance images
JP7262933B2 (ja) 2018-05-25 2023-04-24 キヤノンメディカルシステムズ株式会社 医用情報処理システム、医用情報処理装置、放射線診断装置、超音波診断装置、学習用データの生産方法及びプログラム
US10685445B2 (en) * 2018-06-09 2020-06-16 Uih-Rt Us Llc Systems and methods for generating augmented segmented image set
CN109166161B (zh) 2018-07-04 2023-06-30 东南大学 一种基于噪声伪影抑制卷积神经网络的低剂量ct图像处理系统
CN109009179B (zh) 2018-08-02 2020-09-18 浙江大学 基于深度置信网络的相同同位素标记双示踪剂pet分离方法
US10991092B2 (en) * 2018-08-13 2021-04-27 Siemens Healthcare Gmbh Magnetic resonance imaging quality classification based on deep machine-learning to account for less training data
US11446008B2 (en) * 2018-08-17 2022-09-20 Tokitae Llc Automated ultrasound video interpretation of a body part with one or more convolutional neural networks
CN109272472B (zh) 2018-10-15 2022-07-15 天津大学 面向医用能谱ct图像的噪声及伪影消除方法
US11222447B2 (en) * 2020-05-06 2022-01-11 Siemens Medical Solutions Usa, Inc. Inter-frame motion correction in whole-body direct parametric image reconstruction

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170039738A1 (en) * 2004-01-13 2017-02-09 Spectrum Dynamics Llc Gating with anatomically varying durations
US20180018757A1 (en) * 2016-07-13 2018-01-18 Kenji Suzuki Transforming projection data in tomography by means of machine learning
JP2018110866A (ja) * 2017-01-13 2018-07-19 キヤノンメディカルシステムズ株式会社 医用画像生成装置及び医用画像生成方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
大手 希望 他: "畳み込みニューラルネットワークによるPET画像ノイズ除去", MADICAL IMAGING TECHNOLOGY, vol. 37, no. 1, JPN6023003630, 25 January 2019 (2019-01-25), pages 35 - 45, ISSN: 0004976757 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7562223B2 (ja) 2020-11-17 2024-10-07 キヤノンメディカルシステムズ株式会社 核医学診断装置および核医学データ処理装置
KR20230088130A (ko) * 2021-12-10 2023-06-19 광주과학기술원 Ste 및 최적 중단시점 자동 결정 알고리즘을 적용한 dip를 사용하여 노이즈 이미지를 디노이징하는 방법 및 장치
KR102561613B1 (ko) 2021-12-10 2023-08-01 광주과학기술원 Ste 및 최적 중단시점 자동 결정 알고리즘을 적용한 dip를 사용하여 노이즈 이미지를 디노이징하는 방법 및 장치
WO2023121206A1 (ko) * 2021-12-22 2023-06-29 이화여자대학교 산학협력단 신경망을 이용하여 영상의 노이즈를 저감하기 위한 학습 및 복원 방법과 이를 수행하는 컴퓨팅 장치
WO2023149403A1 (ja) * 2022-02-02 2023-08-10 浜松ホトニクス株式会社 画像処理装置および画像処理方法
WO2023228910A1 (ja) * 2022-05-26 2023-11-30 浜松ホトニクス株式会社 画像処理装置および画像処理方法
WO2023234171A1 (ja) * 2022-05-31 2023-12-07 浜松ホトニクス株式会社 画像処理装置および画像処理方法
WO2024075570A1 (ja) * 2022-10-05 2024-04-11 浜松ホトニクス株式会社 画像処理装置および画像処理方法

Also Published As

Publication number Publication date
US20220114772A1 (en) 2022-04-14
WO2020162296A1 (ja) 2020-08-13
EP3923033A1 (en) 2021-12-15
EP3923033A4 (en) 2022-11-16
US11893660B2 (en) 2024-02-06
CN113454489B (zh) 2024-07-26
CN113454489A (zh) 2021-09-28
JP7237624B2 (ja) 2023-03-13

Similar Documents

Publication Publication Date Title
WO2020162296A1 (ja) 画像処理装置および画像処理方法
CN110097611B (zh) 图像重建方法、装置、设备及存储介质
US11610346B2 (en) Image reconstruction using machine learning regularizers
CN109035169B (zh) 一种无监督/半监督ct图像重建深度网络训练方法
US7949172B2 (en) Iterative image processing
JP2011509697A (ja) 画像解析
US20230102661A1 (en) Image processing device and image processing method
CN114494479A (zh) 利用神经网络对低剂量pet图像进行同时衰减校正、散射校正和去噪声的系统和方法
US11270479B2 (en) Optimization-based reconstruction with an image-total-variation constraint in PET
CN105488824B (zh) 一种重建pet图像的方法和装置
Kudo et al. Metal artifact reduction in CT using fault-tolerant image reconstruction
Nauwynck et al. Ring artifact reduction in sinogram space using deep learning
JP6974159B2 (ja) 画像処理装置および画像処理方法
KR101493683B1 (ko) 콘-빔 기반 반응선 재구성을 이용한 초고해상도 pet 영상 재구성 장치 및 그 방법
Pawitan et al. Data-dependent bandwidth selection for emission computed tomography reconstruction
JP6495615B2 (ja) 画像処理装置および画像処理方法
JP6986961B2 (ja) 画像処理装置および画像処理方法
WO2023149403A1 (ja) 画像処理装置および画像処理方法
Liang et al. A model-based deep learning reconstruction for X-Ray CT
WO2023228910A1 (ja) 画像処理装置および画像処理方法
EP3889881A1 (en) Method, device and system for generating a denoised medical image
Sheng et al. A fast image reconstruction algorithm based on penalized-likelihood estimate
JP2019113475A (ja) 画像処理装置および画像処理方法
Bian et al. Dynamic PET image reconstruction using a spatial-temporal edge-preserving prior

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220204

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220204

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230131

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230301

R150 Certificate of patent or registration of utility model

Ref document number: 7237624

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150