JP2022163614A - 推定装置、方法およびプログラム - Google Patents

推定装置、方法およびプログラム Download PDF

Info

Publication number
JP2022163614A
JP2022163614A JP2021068641A JP2021068641A JP2022163614A JP 2022163614 A JP2022163614 A JP 2022163614A JP 2021068641 A JP2021068641 A JP 2021068641A JP 2021068641 A JP2021068641 A JP 2021068641A JP 2022163614 A JP2022163614 A JP 2022163614A
Authority
JP
Japan
Prior art keywords
image
subject
soft tissue
disease
muscle mass
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021068641A
Other languages
English (en)
Inventor
伴子 瀧
Tomoko Taki
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2021068641A priority Critical patent/JP2022163614A/ja
Priority to US17/717,215 priority patent/US20220335605A1/en
Publication of JP2022163614A publication Critical patent/JP2022163614A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/505Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of bone
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/48Diagnostic techniques
    • A61B6/482Diagnostic techniques involving multiple energy imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5217Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5235Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Pulmonology (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Physiology (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

【課題】推定装置、方法およびプログラムにおいて、被写体の軟部組織の組成を高精度で推定できるようにする。【解決手段】少なくとも1つのプロセッサを備え、プロセッサは、被写体を単純撮影することにより取得した単純放射線画像、または被写体をDXA法により撮影することにより取得したDXA走査画像から、被写体の軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークとして機能する。学習済みニューラルネットワークは、エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像、被写体の放射線画像および被写体の軟部組織を表す軟部画像、または被写体の3次元のCT画像を合成することにより導出された被写体を表す合成2次元画像と、被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなる。【選択図】図3

Description

本開示は、推定装置、方法およびプログラムに関する。
骨粗鬆症等の骨系疾患において、骨塩量の診断に用いられる代表的な骨塩定量方法の1つにDXA法(Dual X-ray Absorptiometry)が知られている。DXA法は、人体に入射し透過する放射線が、人体を構成する物質(例えば骨)に依存する質量減弱係数μ(cm2/g)とその密度ρ(g/cm3)および厚さt(cm)によって特徴づけされる減弱を受けることを利用し、2種類のエネルギーの放射線で撮影して得られた放射線画像のピクセル値から、骨塩量を算出する手法である。
また、DXA画像における各ピクセルの脂肪組織および赤身組織各々の割合を導出する技術が知られている(特許文献1参照)。特許文献1に記載の技術では、低エネルギーおよび高エネルギーのDXA画像の組み合わせを解析することにより、脂肪組織割合および赤身組織(筋肉、非脂肪、および非ミネラル組織)割合を測定する。
また、被写体を撮影することにより取得された放射線画像を用いて、骨塩量を評価するための各種手法が提案されている。例えば特許文献2,3には、ニューラルネットワークを学習することにより構築された学習済みニューラルネットワークを用いることにより、骨が写っている画像から骨塩量に関する情報を推定する手法が提案されている。特許文献2に記載された手法においては、単純撮影により取得された骨が写っている画像および骨塩量を教師データとしてニューラルネットワークの学習が行われる。また、特許文献3に記載された手法においては、単純撮影により取得された骨が写っている画像、骨塩量および骨塩量に関連する情報(例えば年齢、性別、体重、飲酒習慣、喫煙習慣、骨折歴、体脂肪率および皮下脂肪率等)を教師データとして用いて、ニューラルネットワークの学習が行われる。
なお、単純撮影とは、被写体に1回放射線を照射して、被写体の透過像である1枚の2次元画像を取得する撮影方法である。以降の説明においては、単純撮影により取得した放射線画像を単純放射線画像と称するものとする。
特開2019-63499号公報 米国特許第6064716号明細書 国際公開第2020/054738号
一方、被写体の筋肉および脂肪等の軟部組織の組成を高精度で推定することが望まれている。
本開示は上記事情に鑑みなされたものであり、被写体の軟部組織の組成を高精度で推定できるようにすることを目的とする。
本開示による推定装置は、少なくとも1つのプロセッサを備え、
プロセッサは、被写体を単純撮影することにより取得した単純放射線画像、または被写体をDXA法により撮影することにより取得したDXA走査画像から、被写体の軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークとして機能し、
学習済みニューラルネットワークは、(i)エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像、(ii)被写体の放射線画像および被写体の軟部組織を表す軟部画像、または(iii)被写体の3次元のCT画像を合成することにより導出された被写体を表す合成2次元画像と、被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなる。
なお、本開示による推定装置においては、軟部組織の組成に関連する情報は、エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像から導出された軟部画像における軟部領域の画素値に基づいて導出されるものであってもよい。
また、本開示による推定装置においては、軟部組織の組成に関連する情報は、CT画像における軟部領域を特定し、軟部領域における放射線の減弱係数を導出し、放射線の減弱係数および軟部領域における質量減弱係数に基づいて導出された、軟部組織の組成の密度に基づいて導出されるものであってもよい。
また、本開示による推定装置においては、軟部組織の組成に関連する情報は、軟部領域の各位置における組成の密度を予め定められた方向に投影することにより導出されるものであってもよい。
また、本開示による推定装置においては、軟部組織の組成に関連する情報は、単位面積当たりの筋肉量、単位体積当たりの筋肉量、単位面積当たりの脂肪量、単位体積当たりの脂肪量、予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報、および転倒率の少なくとも1つを含むものであってもよい。
また、本開示による推定装置においては、疾患情報は、被写体の予め定められた部位の筋肉量を導出し、
予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報と予め定められた部位の筋肉量との対応関係を表す対応関係情報、および筋肉量に基づいて疾患情報を特定することにより導出されるものであってもよい。
また、本開示による推定装置においては、疾患情報は、被写体の予め定められた部位の筋肉量および骨塩量を導出し、
予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報と予め定められた部位の筋肉量との対応関係を表す対応関係情報、筋肉量、および骨塩量に基づいて疾患情報を特定することにより導出されるものであってもよい。
また、本開示による推定装置においては、予め定められた部位は下肢であり、
予め定められた疾患は糖尿病であり、
疾患情報は糖尿病の罹患リスクであってもよい。
また、本開示による推定装置においては、予め定められた部位は四肢または全身であり、
予め定められた疾患はサルコペニアであり、
疾患情報はサルコペニアの疾患レベルであってもよい。
また、本開示による推定装置においては、転倒率は、被写体の予め定められた部位の筋肉量を導出し、
予め定められた部位の筋肉量または予め定められた部位の筋肉量に応じた筋力である筋肉情報と被写体の転倒率との対応関係を表す対応関係情報、および筋肉量に基づいて、転倒率を特定することにより導出されるものであってもよい。
また、本開示による推定装置においては、転倒率は、被写体の予め定められた部位の筋肉量および骨塩量を導出し、
予め定められた部位の筋肉量または予め定められた部位の筋肉量に応じた筋力である筋肉情報と被写体の転倒率との対応関係を表す対応関係情報、筋肉量、および骨塩量に基づいて、転倒率を特定することにより導出されるものであってもよい。
また、本開示による推定装置においては、予め定められた部位は下肢および臀部の少なくとも一方であってもよい。
また、本開示による推定装置においては、プロセッサは、DXA走査画像から軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークとして機能し、
学習済みニューラルネットワークは、合成2次元画像に解像度を低下させる処理を施した低解像度合成2次元画像と被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなるものであってもよい。
また、本開示による推定装置においては、低解像度合成2次元画像は、合成2次元画像の隣接する複数画素の画素値の平均値を隣接する複数画素の画素値とする画像であり、隣接する複数画素のサイズはDXA走査画像の1つの画素サイズに対応するものであってもよい。
また、本開示による推定装置においては、低解像度合成2次元画像は、合成2次元画像の一方向に対して移動平均処理を施された画像であり、一方向はDXA走査画像の走査方向に対応するものであってもよい。
また、本開示による推定装置においては、低解像度合成2次元画像は、合成2次元画像の隣接する複数画素の画素値の平均値を、隣接する複数画素の画素値とする第1の低解像度画像を生成し、第1の低解像度画像に対して一方向に移動平均処理をされて生成された画像であり、隣接する複数画素のサイズはDXA走査画像の1つの画素サイズに対応し、一方向はDXA走査画像の走査方向に対応するものであってもよい。
本開示による推定方法は、被写体を単純撮影することにより取得した単純放射線画像、または被写体をDXA法により撮影することにより取得したDXA走査画像から、被写体の軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークを用いて、単純放射線画像またはDXA走査画像から軟部組織の組成に関連する推定結果を導出する推定方法であって、
学習済みニューラルネットワークは、(i)エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像、(ii)被写体の放射線画像および被写体の軟部組織を表す軟部画像、または(iii)被写体の3次元のCT画像を合成することにより導出された被写体を表す合成2次元画像と、被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなる。
なお、本開示による推定方法を、コンピュータに実行させるためのプログラムとして提供してもよい。
本開示によれば、被写体の軟部組織の組成を高精度で推定できる。
本開示の第1の実施形態による推定装置を適用した放射線画像撮影システムの構成を示す概略ブロック図 第1の実施形態による推定装置の概略構成を示す図 第1の実施形態による推定装置の機能的な構成を示す図 本実施形態において用いられるニューラルネットワークの概略構成を示す図 教師データを示す図 第1の実施形態による情報導出装置の概略構成を示す図 第1の実施形態による情報導出装置の機能的な構成を示す図 軟部画像を示す図 筋肉組織を透過後の放射線と脂肪組織を透過後の放射線とのエネルギースペクトルの一例を示す図 ニューラルネットワークの学習を説明するための図 学習済みニューラルネットワークが行う処理の概念図 推定結果の表示画面を示す図 第1の実施形態において行われる学習処理のフローチャート 第1の実施形態において行われる推定処理のフローチャート 第2の実施形態による情報導出装置の機能的な構成を示す図 第2の実施形態において導出される教師データを示す図 第3の実施形態による情報導出装置の機能的な構成を示す図 骨部画像を示す図 被写体の体厚に対する骨部と軟部とのコントラストの関係を示す図 補正係数を取得するためのルックアップテーブルの一例を示す図 第3の実施形態における筋肉量と転倒率との間の相関関係を表す対応関係情報を示す図 第3の実施形態において導出される教師データを示す図 第4の実施形態による情報導出装置の機能的な構成を示す図 合成2次元画像の導出を説明するための図 合成2次元画像の導出を説明するための図 CT値を説明するための図 放射線エネルギーと質量減弱係数との関係を示す図 第4の実施形態において導出される教師データを示す図 第5の実施形態による情報導出装置の機能的な構成を示す図 第5の実施形態において導出される教師データを示す図 第6の実施形態による情報導出装置の機能的な構成を示す図 第6の実施形態において導出される教師データを示す図 第7の実施形態による情報導出装置の機能的な構成を示す図 第7の実施形態において導出される教師データを示す図 第8の実施形態による情報導出装置の機能的な構成を示す図 第8の実施形態において導出される教師データを示す図 軟部画像を学習用データとして用いた教師データを示す図
以下、図面を参照して本開示の実施形態について説明する。図1は本開示の第1の実施形態による推定装置を適用した放射線画像撮影システムの構成を示す概略ブロック図である。図1に示すように、第1の実施形態による放射線画像撮影システムは、撮影装置1と、CT(Computed Tomography)装置4と、画像保存システム9と、第1の実施形態による推定装置10と、情報導出装置50とを備える。撮影装置1、CT装置4、推定装置10および情報導出装置50は、不図示のネットワークを介して画像保存システム9と接続されている。
撮影装置1は、第1の放射線検出器5および第2の放射線検出器6に、放射線源3から発せられ、被写体Hを透過したX線等の放射線を、それぞれエネルギーを変えて照射するいわゆる1ショット法によるエネルギーサブトラクションを行うことが可能な撮影装置である。撮影時においては、図1に示すように、放射線源3に近い側から順に、第1の放射線検出器5、銅板等からなる放射線エネルギー変換フィルタ7、および第2の放射線検出器6を配置して、放射線源3を駆動させる。なお、第1および第2の放射線検出器5,6と放射線エネルギー変換フィルタ7とは密着されている。
これにより、第1の放射線検出器5においては、いわゆる軟線も含む低エネルギーの放射線による被写体Hの第1の放射線画像G1が取得される。また、第2の放射線検出器6においては、軟線が除かれた高エネルギーの放射線による被写体Hの第2の放射線画像G2が取得される。したがって、第1の放射線画像G1と第2の放射線画像G2とは、エネルギー分布が異なる放射線により被写体Hを撮影することにより取得されたものとなる。第1および第2の放射線画像G1,G2は、画像保存システム9に送信される。第1の放射線画像G1および第2の放射線画像G2のいずれも、被写体Hの臀部および下肢の上部を含む正面像である。
第1および第2の放射線検出器5,6は、放射線画像の記録および読み出しを繰り返して行うことができるものであり、放射線の照射を直接受けて電荷を発生する、いわゆる直接型の放射線検出器を用いてもよいし、放射線を一旦可視光に変換し、その可視光を電荷信号に変換する、いわゆる間接型の放射線検出器を用いるようにしてもよい。また、放射線画像信号の読出方式としては、TFT(thin film transistor)スイッチをオン・オフさせることによって放射線画像信号が読み出される、いわゆるTFT読出方式のもの、または読取り光を照射することによって放射線画像信号が読み出される、いわゆる光読出方式のものを用いることが望ましいが、これに限らずその他のものを用いるようにしてもよい。
また、撮影装置1は第1の放射線検出器5のみを用いて被写体Hの単純撮影を行うことにより、被写体Hの単純2次元画像である単純放射線画像G0を取得することも可能である。上記第1および第2の放射線画像G1,G2を取得する撮影を単純撮影と区別するためにエネルギーサブトラクション撮影と称する。本実施形態においては、エネルギーサブトラクション撮影により取得された第1および第2の放射線画像G1,G2は、後述するニューラルネットワークを学習するための教師データの導出に使用される。また、単純撮影により取得された単純放射線画像G0は、後述するように軟部組織の組成に関連する推定結果の導出に使用される。
CT装置4は、被写体Hにおける複数の断層面を表す複数の断層画像を3次元のCT画像V0として取得する。CT画像における各画素(ボクセル)のCT値は、人体を構成する組成における放射線の吸収率を数値化したものである。CT値については後述する。また、本実施形態においては、CT装置4は後述する教師データの導出に用いられる。
画像保存システム9は、撮影装置1により取得された放射線画像の画像データおよびCT装置4により取得されたCT画像の画像データを保存するシステムである。画像保存システム9は、保存している放射線画像およびCT画像から、推定装置10および情報導出装置50からの要求に応じた画像を取り出して、要求元の装置に送信する。画像保存システム9の具体例としては、PACS(Picture Archiving and Communication Systems)が挙げられる。なお、本実施形態においては、画像保存システム9には、後述するニューラルネットワークを学習するための多数の教師データが保存されている。
次いで、第1の実施形態に係る推定装置について説明する。まず、図2を参照して、第1の実施形態に係る推定装置のハードウェア構成を説明する。図2に示すように、推定装置10は、ワークステーション、サーバコンピュータおよびパーソナルコンピュータ等のコンピュータであり、CPU(Central Processing Unit)11、不揮発性のストレージ13、および一時記憶領域としてのメモリ16を備える。また、推定装置10は、液晶ディスプレイ等のディスプレイ14、キーボードおよびマウス等の入力デバイス15、並びに不図示のネットワークに接続されるネットワークI/F(InterFace)17を備える。CPU11、ストレージ13、ディスプレイ14、入力デバイス15、メモリ16およびネットワークI/F17は、バス18に接続される。なお、CPU11は、本開示におけるプロセッサの一例である。
ストレージ13は、HDD(Hard Disk Drive)、SSD(Solid State Drive)、およびフラッシュメモリ等によって実現される。記憶媒体としてのストレージ13には、推定装置10にインストールされた推定プログラム12Aおよび学習プログラム12Bが記憶される。CPU11は、ストレージ13から推定プログラム12Aおよび学習プログラム12Bを読み出してメモリ16に展開し、展開した推定プログラム12Aおよび学習プログラム12Bを実行する。
なお、推定プログラム12Aおよび学習プログラム12Bは、ネットワークに接続されたサーバコンピュータの記憶装置、あるいはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じて推定装置10を構成するコンピュータにダウンロードされ、インストールされる。または、DVD(Digital Versatile Disc)、CD-ROM(Compact Disc Read Only Memory)等の記録媒体に記録されて配布され、その記録媒体から推定装置10を構成するコンピュータにインストールされる。
次いで、第1の実施形態による推定装置の機能的な構成を説明する。図3は、第1の実施形態による推定装置の機能的な構成を示す図である。図3に示すように、推定装置10は、画像取得部21、情報取得部22、推定部23、学習部24および表示制御部25を備える。そして、CPU11は、推定プログラム12Aを実行することにより、画像取得部21、情報取得部22、推定部23および表示制御部25として機能する。また、CPU11は、学習プログラム12Bを実行することにより、学習部24として機能する。
画像取得部21は、撮影装置1に被写体Hのエネルギーサブトラクション撮影を行わせることにより、第1および第2の放射線検出器5,6から、例えば被写体Hの股間付近の正面像である第1の放射線画像G1および第2の放射線画像G2を取得する。第1の放射線画像G1および第2の放射線画像G2の取得に際しては、撮影線量、線質、管電圧、放射線源3と第1および第2の放射線検出器5,6の表面との距離であるSID(Source Image receptor Distance)、放射線源3と被写体Hの表面との距離であるSOD(Source Object Distance)、並びに散乱線除去グリッドの有無等の撮影条件が設定される。
SODおよびSIDについては、後述するように体厚分布の算出に用いられる。SODについては、例えば、TOF(Time Of Flight)カメラで取得することが好ましい。SIDについては、例えば、ポテンショメーター、超音波距離計およびレーザー距離計等で取得することが好ましい。
撮影条件は、操作者による入力デバイス15からの入力により設定すればよい。設定された撮影条件は、エネルギーサブトラクション撮影により取得された第1および第2の放射線画像G1,G2と併せて画像保存システム9に送信されて保存される。
また、画像取得部21は、第1の放射線検出器5のみを用いて撮影装置1に被写体Hの単純撮影を行わせることにより、被写体Hの股間付近の正面像である単純放射線画像G0を取得する。単純放射線画像G0は、ストレージ13に保存される。
なお、本実施形態においては、推定プログラム12Aとは別個のプログラムにより第1および第2の放射線画像G1,G2、並びに単純放射線画像G0を取得するようにしてもよい。
情報取得部22は、画像保存システム9からネットワークI/F17を介して、後述するニューラルネットワークを学習するための教師データを取得する。
推定部23は、単純放射線画像G0から被写体Hの軟部組織の組成に関連する推定結果を導出する。本実施形態においては、軟部組織の組成に関連する推定結果として単純放射線画像G0に含まれる軟部領域のうちの予め定められた部位についての筋肉量の推定結果を導出するものとする。このために、推定部23は、単純放射線画像G0が入力されると筋肉量を出力する学習済みニューラルネットワーク23Aを用いて軟部組織の組成に関連する推定結果を導出する。
学習部24は、教師データを用いてニューラルネットワークを機械学習することにより、学習済みニューラルネットワーク23Aを構築する。ニューラルネットワークとしては、単純パーセプトロン、多層パーセプトロン、ディープニューラルネットワーク、畳み込みニューラルネットワーク、ディープビリーフネットワーク、リカレントニューラルネットワーク、および確率的ニューラルネットワーク等が挙げられる。本実施形態においては、ニューラルネットワークとして畳み込みニューラルネットワークを用いるものとする。
図4は、本実施形態において用いられるニューラルネットワークを示す図である。図4に示すように、ニューラルネットワーク30は、入力層31、中間層32および出力層33を備える。中間層32は、例えば、複数の畳み込み層35、複数のプーリング層36および全結合層37を備える。ニューラルネットワーク30では、出力層33の前段に全結合層37が存在している。そして、ニューラルネットワーク30では、入力層31と全結合層37との間において、畳み込み層35とプーリング層36とが交互に配置されている。
なお、ニューラルネットワーク30の構成は図4の例に限定されるものではない。例えば、ニューラルネットワーク30は、入力層31と全結合層37との間に、1つの畳み込み層35と1つのプーリング層36とを備えるものであってもよい。
図5はニューラルネットワークの学習に使用する教師データの例を示す図である。図5に示すように、教師データ40は、学習用データ41と正解データ42とからなる。本実施形態においては、軟部組織の組成に関連する推定結果を得るために学習済みニューラルネットワーク23Aに入力されるデータは単純放射線画像G0であるが、学習用データ41は、上記のエネルギーサブトラクション撮影により取得された第1の放射線画像G1および第2の放射線画像G2の2つの放射線画像を含む。
正解データ42は、学習用データ41を取得した被写体の予め定められた部位についての筋肉量である。なお、本実施形態においては、予め定められた部位は臀部および下肢の上部である。また、本実施形態においては、2次元の単純放射線画像G0から単位面積当たりの筋肉量を推定するものであるため、筋肉量の単位は(g/cm2)である。なお、本実施形態においては、単位体積当たりの筋肉量を推定するようにしてもよい。この場合、筋肉量の単位は(g/cm3)である。正解データ42である筋肉量は情報導出装置50により導出される。なお、正解データ42となる筋肉量が被写体の軟部組織の組成に関連する情報の一例である。以下、情報導出装置50について説明する。
図6は第1の実施形態による情報導出装置の構成を示す概略ブロック図である。図6に示すように第1の実施形態による情報導出装置50は、ワークステーション、サーバコンピュータおよびパーソナルコンピュータ等のコンピュータであり、CPU51、不揮発性のストレージ53、および一時記憶領域としてのメモリ56を含む。また、情報導出装置50は、液晶ディスプレイ等のディスプレイ54、キーボードおよびマウス等のポインティングデバイス等からなる入力デバイス55、並びに不図示のネットワークに接続されるネットワークI/F57を含む。CPU51、ストレージ53、ディスプレイ54、入力デバイス55、メモリ56およびネットワークI/F57は、バス58に接続される。
ストレージ53は、ストレージ13と同様に、HDD、SSD、およびフラッシュメモリ等によって実現される。記憶媒体としてのストレージ53には、情報導出プログラム52が記憶される。CPU51は、ストレージ53から情報導出プログラム52を読み出してメモリ56に展開し、展開した情報導出プログラム52を実行する。
次いで、第1の実施形態による情報導出装置の機能的な構成を説明する。図7は、第1の実施形態による情報導出装置の機能的な構成を示す図である。図7に示すように第1の実施形態による情報導出装置50は、画像取得部61、散乱線除去部62、サブトラクション部63および筋肉量導出部64を備える。そして、CPU51が情報導出プログラム52を実行することにより、CPU51は、画像取得部61、散乱線除去部62、サブトラクション部63および筋肉量導出部64として機能する。
画像取得部61は、画像保存システム9に保存された学習用データ41となる第1放射線画像G1および第2の放射線画像G2を取得する。なお、画像取得部61は、推定装置10の画像取得部21と同様に撮影装置1に被写体Hの撮影を行わせることにより、第1の放射線画像G1および第2の放射線画像G2を取得するものであってもよい。
また、画像取得部61は、画像保存システム9に保存された、第1の放射線画像G1および第2の放射線画像G2を取得した際の撮影条件も取得する。撮影条件は、第1の放射線画像G1および第2の放射線画像G2を取得した際の撮影線量、管電圧、SID、SOD並びに散乱線除去グリッドの有無等である。
ここで、第1の放射線画像G1および第2の放射線画像G2の各々には、被写体Hを透過した放射線の一次線成分以外に、被写体H内において散乱された放射線に基づく散乱線成分が含まれる。このため、散乱線除去部62は、第1の放射線画像G1および第2の放射線画像G2から散乱線成分を除去する。例えば、散乱線除去部62は、特開2015-043959号公報に記載された方法を適用して、第1の放射線画像G1および第2の放射線画像G2から散乱線成分を除去してもよい。特開2015-043959号公報に記載された手法等を用いる場合、被写体Hの体厚分布の導出および散乱線成分を除去するための散乱線成分の導出が同時に行われる。
以下、第1の放射線画像G1からの散乱線成分の除去について説明するが、第2の放射線画像G2からの散乱線成分の除去も同様に行うことができる。まず、散乱線除去部62は、初期体厚分布T0(x,y)を有する被写体Hの仮想モデルを取得する。仮想モデルは、初期体厚分布T0(x,y)に従った体厚が、第1の放射線画像G1の各画素の座標位置に対応付けられた、被写体Hを仮想的に表すデータである。なお、初期体厚分布T0(x,y)を有する被写体Hの仮想モデルは、情報導出装置50のストレージ53に予め記憶されていてもよい。また、散乱線除去部62は、撮影条件に含まれるSIDとSODに基づいて、被写体Hの体厚分布T(x、y)を算出してもよい。この場合、初期体厚分布T0(x,y)は、SIDからSODを減算することにより求めることができる。
次に、散乱線除去部62は、仮想モデルに基づいて、仮想モデルの撮影により得られる一次線画像を推定した推定一次線画像と、仮想モデルの撮影により得られる散乱線画像を推定した推定散乱線画像とを合成した画像を、被写体Hの撮影により得られた第1の放射線画像G1を推定した推定画像として生成する。
次に、散乱線除去部62は、推定画像と第1の放射線画像G1との違いが小さくなるように仮想モデルの初期体厚分布T0(x,y)を修正する。散乱線除去部62は、推定画像と第1の放射線画像G1との違いが予め定められた終了条件を満たすまで推定画像の生成および体厚分布の修正を繰り返し行う。散乱線除去部62は、終了条件を満たした際の体厚分布を、被写体Hの体厚分布T(x,y)として導出する。また、散乱線除去部62は、終了条件を満たした際の散乱線成分を第1の放射線画像G1から減算することにより、第1の放射線画像G1に含まれる散乱線成分を除去する。
サブトラクション部63は、エネルギーサブトラクション処理を行うことにより、第1および第2の放射線画像G1,G2から、被写体Hの軟部が抽出された軟部画像Gsを導出する。なお、以降の処理における第1および第2の放射線画像G1,G2は散乱線成分が除去されたものである。軟部画像Gsを導出する場合には、サブトラクション部63は、第1および第2の放射線画像G1,G2に対して、下記の式(1)に示すように、それぞれ対応する画素間での重み付け減算を行うことにより、図8に示すように、各放射線画像G1,G2に含まれる被写体Hの軟部が抽出された軟部画像Gsを生成する。式(1)において、αは重み係数である。
Gs(x、y)=G1(x、y)-α×G2(x、y) (1)
筋肉量導出部64は、軟部画像Gsにおける軟部領域の画素毎に、画素値に基づいて筋肉量を導出する。軟部組織は、筋肉組織、脂肪組織、血液、および水分を含む。第1の実施形態の筋肉量導出部64では、軟部組織における脂肪組織以外の組織を、筋肉組織とみなす。すなわち、第1の実施形態の筋肉量導出部64では、筋肉組織に、血液および水分も含めた非脂肪組織を筋肉組織として扱うものとする。
筋肉量導出部64は、軟部画像Gsから、筋肉組織および脂肪組織のエネルギー特性の差を利用して、筋肉と脂肪とを分離する。図9に示すように、人体である被写体Hに入射前の放射線に比べて、被写体Hを透過後の放射線の線量は低くなる。また、筋肉組織と脂肪組織とは吸収するエネルギーが異なり、減弱係数が異なるため、被写体Hを透過後の放射線のうち、筋肉組織を透過後の放射線と、脂肪組織を透過後の放射線とではエネルギースペクトルが異なる。図9に示すように、被写体Hを透過して、第1の放射線検出器5および第2の放射線検出器6の各々に照射される放射線のエネルギースペクトルは、被写体Hの体組成、具体的には、筋肉組織と脂肪組織との割合に依存する。筋肉組織よりも脂肪組織の方が放射線を透過しやすいため、脂肪組織に比べて筋肉組織の割合が多い方が、人体を透過後の放射線の線量が少なくなる。
このため、筋肉量導出部64は、軟部画像Gsから、上述した筋肉組織および脂肪組織のエネルギー特性の差を利用して、筋肉と脂肪とを分離する。すなわち、筋肉量導出部64は、軟部画像Gsから筋肉画像を生成する。また、筋肉量導出部64は、筋肉画像の画素値に基づいて各画素の筋肉量を導出する。
なお、筋肉量導出部64が、軟部画像Gsから筋肉と脂肪とを分離する具体的な方法は限定されないが、一例として、第1の実施形態の筋肉量導出部64は、下記の式(2)および式(3)により、軟部画像Gsから筋肉画像を生成する。具体的には、まず、筋肉量導出部64は、式(2)により、軟部画像Gs内の各画素位置(x,y)における筋肉率rm(x,y)を導出する。なお、式(2)におけるμmは筋肉組織の減弱係数に応じた重み係数であり、μfは脂肪組織の減弱係数に応じた重み係数である。また、Δ(x,y)は、濃度差分布を表す。濃度差分布とは、放射線が被写体Hを透過することなく第1の放射線検出器5および第2の放射線検出器6に到達することにより得られる濃度から見た濃度変化の画像上の分布である。濃度変化の画像上の分布は、軟部画像Gsにおける放射線が直接、第1の放射線検出器5および第2の放射線検出器6に照射することにより得られる素抜け領域における濃度から被写体Hの領域における各画素の濃度を減算することにより算出される。
rm(x,y)={μf-Δ(x,y)/T(x,y)}/(μf-μm) (2)
さらに、筋肉量導出部64は、下記式(3)により、軟部画像Gsから筋肉画像Gmを生成する。なお、式(3)における、x、yは筋肉画像Gmの各画素の座標である。
Gm(x,y)=rm(x,y)×Gs(x,y) (3)
筋肉量導出部64は、筋肉画像Gmの画素値を画素毎の筋肉量として導出すればよい。一方、画素毎の筋肉率rmを筋肉量として導出してもよい。また、筋肉量導出部64は、下記式(4)に示すように、筋肉画像Gmの各画素(x,y)に対して、予め定められた画素値と筋肉量との関係を表す係数K1(x,y)を乗算することにより、筋肉画像Gmの画素毎の筋肉量M(x,y)(g/cm2)を導出してもよい。
M(x,y)=K1(x,y)×Gm(x,y) (4)
また、第1の実施形態においては、筋肉量導出部64は、予め定められた部位の筋肉量を導出する。本実施形態において、予め定められた部位の筋肉量とは、軟部画像Gsにおける、予め定められた部位に相当する領域の画素毎の筋肉量の代表値のことをいう。本実施形態においては、予め定められた部位は臀部および下肢の上部であるため、軟部画像Gsにおける臀部および下肢の上部に該当する領域の画素毎の筋肉量の代表値を、臀部および下肢の上部の筋肉量として扱う。代表値としては、平均値、中央値、最小値および最大値等を用いることができる。本実施形態においては、予め定められた部位の筋肉量の代表値を正解データ42として用いる。
正解データ42として用いられる筋肉量は、学習用データ41を取得した時期と同一時期に導出され、画像保存システム9に送信される。画像保存システム9においては、学習用データ41と正解データ42とが対応付けられて教師データ40として保存される。なお、学習のロバスト性向上のために、同一の画像に対して拡大縮小、コントラストの変更、移動、面内の回転、反転およびノイズ付与等の少なくとも1つを行った画像を学習用データ41として含む教師データ40を追加で作成して保存するようにしてもよい。
推定装置10に戻り、学習部24は、多数の教師データ40を用いてニューラルネットワークを学習する。図10は、ニューラルネットワーク30の学習を説明するための図である。ニューラルネットワーク30の学習を行うに際し、学習部24は、ニューラルネットワーク30の入力層31に学習用データ41すなわち第1および第2の放射線画像G1,G2を入力する。そして、学習部24は、ニューラルネットワーク30の出力層33から、予め定められた部位の筋肉量を出力データ47として出力させる。そして、学習部24は、出力データ47と正解データ42との相違を損失L0として導出する。
学習部24は、損失L0に基づいてニューラルネットワーク30を学習する。具体的には、学習部24は、損失L0を小さくするように、畳み込み層35におけるカーネルの係数、各層間の結合の重み、および全結合層37における結合の重み等(以下パラメータ48とする)を調整する。パラメータ48の調整方法としては、例えば、誤差逆伝播法を用いることができる。学習部24は、損失L0が予め定められたしきい値以下となるまでパラメータ48の調整を繰り返す。これによって、単純放射線画像G0が入力された場合に、予め定められた部位の筋肉量を出力するようにパラメータ48が調整されて、学習済みニューラルネットワーク23Aが構築される。構築された学習済みニューラルネットワーク23Aはストレージ13に記憶される。
図11は学習済みニューラルネットワーク23Aが行う処理の概念図である。図11に示すように、上記のようにして構築された学習済みニューラルネットワーク23Aに、患者の単純放射線画像G0が入力されると、学習済みニューラルネットワーク23Aは入力された単純放射線画像G0に含まれる予め定められた部位の筋肉量を出力するようになる。
表示制御部25は、推定部23が推定した筋肉量の推定結果をディスプレイ14に表示する。図12は推定結果の表示画面を示す図である。図12に示すように表示画面70は、画像表示領域71と筋肉量表示領域72とを有する。画像表示領域71には被写体Hの単純放射線画像G0が表示される。また、筋肉量表示領域72には、推定部23が推定した単純放射線画像G0の各画素についての筋肉量から導出された、予め定められた部位の筋肉量の代表値が表示される。
次いで、第1の実施形態において行われる処理について説明する。図13は第1の実施形態において行われる学習処理を示すフローチャートである。まず、情報取得部22が画像保存システム9から教師データ40を取得し(ステップST1)、学習部24が、教師データ40に含まれる学習用データ41をニューラルネットワーク30に入力して筋肉量を出力させ、正解データ42との相違に基づく損失L0を用いてニューラルネットワーク30を学習し(ステップST2)、ステップST1にリターンする。そして、学習部24は、損失L0が予め定められたしきい値となるまで、ステップST1,ST2の処理を繰り返し、学習処理を終了する。なお、学習部24は、学習を予め定められた回数繰り返すことにより、学習処理を終了するものであってもよい。これにより、学習部24は、学習済みニューラルネットワーク23Aを構築する。
次いで、第1の実施形態における推定処理について説明する。図14は第1の実施形態において行われる推定処理を示すフローチャートである。なお、単純放射線画像G0は、撮影により取得されてストレージ13に記憶されているものとする。処理を開始する指示が入力デバイス15から入力されると、画像取得部21が、単純放射線画像G0をストレージ13から取得する(ステップST11)。次いで、推定部23が単純放射線画像G0から軟部組織の組成に関連する推定結果を導出する(ステップST12)。そして、表示制御部25が、推定部23が導出した軟部組織の組成に関連する推定結果を単純放射線画像G0と併せてディスプレイ14に表示し(ステップST13)、処理を終了する。
このように、本実施形態においては、第1および第2の放射線画像G1,G2を教師データとして学習がなされることにより構築された学習済みニューラルネットワーク23Aを用いて、単純放射線画像G0に含まれる被写体Hの軟部組織の組成に関連する推定結果を導出するようにした。ここで、本実施形態においては、ニューラルネットワークの学習に第1および第2の放射線画像G1,G2という2つの放射線画像を用いている。このため、1つの放射線画像と軟部組織の組成に関連する情報とを教師データとして用いる場合と比較して、学習済みニューラルネットワーク23Aは、単純放射線画像G0からより精度よく軟部組織の組成に関連する推定結果を導出可能なものとなっている。したがって、本実施形態によればより精度よく軟部組織の組成に関連する推定結果を導出することができる。
なお、上記第1の実施形態においては、正解データ42として筋肉量を導出しているが、これに限定されるものではない。予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報を正解データ42として導出してもよい。以下、これを第2の実施形態として説明する。
図15は第2の実施形態による情報導出装置の機能的な構成を示す図である。なお、図15において図7と同一の構成については同一の参照番号を付与し、詳細な説明は省略する。図15に示すように、第2の実施形態による情報導出装置50Aは、第1の実施形態による情報導出装置50に対して特定部65をさらに備えたものである。
特定部65は、筋肉量導出部64が導出した予め定められた部位の筋肉量と、対応関係情報とに基づいて、予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報を特定する。
対応関係情報とは、予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報と、予め定められた部位の筋肉量との対応関係を表す情報である。
一般に、筋肉量と罹患リスクとの間に関係があることが知られている疾患がある。例えば、筋肉は、血液中のブドウ糖の一部を取り込み、血糖値の調整を行うことが知られている。このため、筋肉量が減少すると、血糖値が上昇し、糖尿病の罹患リスクが高くなる。とくに下肢の筋肉量の減少が糖尿病の罹患リスクに対応する傾向がある。このため、糖尿病については、予め定められた部位として下肢の上部の部位である太腿の筋肉量と、糖尿病の罹患リスクとの対応関係を表す情報を対応関係情報とする。具体例としては、年齢毎に、太腿の筋肉量の平均値を基準値とし、基準値よりも少なくかつ基準値からの乖離量が高くなるほど、高い罹患リスクが対応付けられた対応関係情報が挙げられる。
また例えば、サルコペニアの場合、病気が進行すると、すなわち疾患レベルが高くなると、筋肉量、とくに四肢の筋肉量が低下する傾向があることが知られている。このため、サルコペニアについては、予め定められた部位として四肢の筋肉量と、サルコペニアの疾患レベル(進行程度)との対応関係を表す情報を対応関係情報とする。具体的には、年齢毎に、四肢の筋肉量の平均値を基準値とし、基準値よりも少なくかつ基準値からの乖離量が高くなるほど、高い疾患レベルが対応付けられた対応関係情報が挙げられる。
なお、情報導出装置50Aは、このように複数種類の疾患に応じた対応関係情報をストレージ53に記憶させておいてもよいし、特定の疾患用の対応関係情報をストレージ53に記憶させておいてもよい。
このように第2の実施形態の特定部65は、第1放射線画像G1および第2放射線画像G2に写る被写体の部位(撮影部位)に応じた対応関係情報を用いて、予め定められた疾患の罹患リスク、または予め定められた疾患の疾患レベルを表す疾患情報を特定する。
第2の実施形態においては、情報導出装置50Aが導出した疾患情報が教師データの正解データとして用いられる。図16は第2の実施形態において導出される教師データを示す図である。図16に示すように教師データ40Aは、第1および第2の放射線画像G1,G2を含む学習用データ41Aと、疾患情報である正解データ42Aとからなる。
図16に示す教師データ40Aを用いてニューラルネットワークを学習することにより、単純放射線画像G0が入力されると疾患情報を軟部組織の組成に関連する推定結果として出力する学習済みニューラルネットワーク23Aを構築することができる。
なお、上記第1の実施形態においては、正解データ42として筋肉量を導出しているが、これに限定されるものではない。転倒率を正解データ42として導出してもよい。以下、これを第3の実施形態として説明する。
図17は第3の実施形態による情報導出装置の機能的な構成を示す図である。なお、図17において図7と同一の構成については同一の参照番号を付与し、詳細な説明は省略する。図17に示すように、第3の実施形態による情報導出装置50Bは、第1の実施形態による情報導出装置50に対して、骨塩量導出部66および特定部67をさらに備えたものである。
なお、第3の実施形態においては、サブトラクション部63は、エネルギーサブトラクション処理を行うことにより、第1および第2の放射線画像G1,G2から、被写体Hの骨部が抽出された骨部画像Gbを導出する。なお、以降の処理における第1および第2の放射線画像G1,G2は散乱線成分が除去されたものである。骨部画像Gbを導出する場合には、サブトラクション部63は、第1および第2の放射線画像G1,G2に対して、下記の式(5)に示すように、それぞれ対応する画素間での重み付け減算を行うことにより、図18に示すように、各放射線画像G1,G2に含まれる被写体Hの骨部が抽出された骨部画像Gbを生成する。式(5)において、βは重み係数である。
Gb(x,y)=β・G2(x,y)-G1(x,y) (5)
骨塩量導出部66は、骨部画像Gbの画素毎に骨塩量を導出する。第3の実施形態において、骨塩量導出部66は、骨部画像Gbの各画素値を、基準撮影条件により取得した場合の骨画像の画素値に変換することにより骨塩量Bを導出する。具体的には、骨塩量導出部66は、後述するルックアップテーブルから取得される補正係数を用いて、骨部画像Gbの各画素値を補正することにより骨塩量を導出する。
ここで、放射線源3における管電圧が高く、放射線源3から放射される放射線が高エネルギーであるほど、放射線画像における軟部と骨部とのコントラストが小さくなる。また、放射線が被写体Hを透過する過程において、放射線の低エネルギー成分が被写体Hに吸収され、放射線が高エネルギー化するビームハードニングが生じる。ビームハードニングによる放射線の高エネルギー化は、被写体Hの体厚が大きいほど大きくなる。
図19は被写体Hの体厚に対する骨部と軟部とのコントラストの関係を示す図である。なお、図19においては、80kV、90kVおよび100kVの3つの管電圧における、被写体Hの体厚に対する骨部と軟部とのコントラストの関係を示している。図19に示すように、管電圧が高いほどコントラストは低くなる。また、被写体Hの体厚がある値を超えると、体厚が大きいほどコントラストは低くなる。なお、骨部画像Gbにおける骨部領域の画素値が大きいほど、骨部と軟部とのコントラストは大きくなる。このため、図19に示す関係は、骨部画像Gbにおける骨部領域の画素値が大きいほど、高コントラスト側にシフトすることとなる。
第3の実施形態において、骨部画像Gbにおける、撮影時の管電圧に応じたコントラストの相違、およびビームハードニングの影響によるコントラストの低下を補正するための補正係数を取得するためのルックアップテーブルが、情報導出装置50のストレージ53に記憶されている。補正係数は、骨部画像Gbの各画素値を補正するための係数である。
図20は補正係数を取得するためのルックアップテーブルの一例を示す図である。図20において、基準撮影条件を、管電圧90kVに設定したルックアップテーブル(以下、単にテーブルとする)LUT1が例示されている。図20に示すようにテーブルLUT1において、管電圧が大きいほど、かつ被写体Hの体厚が大きいほど、大きい補正係数が設定されている。図20に示す例において、基準撮影条件が管電圧90kVであるため、管電圧が90kVで体厚が0の場合に、補正係数が1となっている。なお、図20において、テーブルLUT1を2次元で示しているが、補正係数は骨部領域の画素値に応じて異なる。このため、テーブルLUT1は、実際には骨部領域の画素値を表す軸が加わった3次元のテーブルとなる。
骨塩量導出部66は、被写体Hの体厚分布T(x,y)およびストレージ13に記憶された管電圧の設定値を含む撮影条件に応じた画素毎の補正係数K0(x,y)を、テーブルLUT1から抽出する。なお、体厚分布T(x,y)は、散乱線除去部62が行う散乱線除去処理において、終了条件を満たした際の体厚分布を用いればよい。そして、骨塩量導出部66は、下記式(6)に示すように、骨部画像Gbにおける骨部領域の各画素(x,y)に対して、補正係数K0(x,y)を乗算することにより、骨部画像Gbの画素毎の骨塩量B(x,y)(g/cm2)を導出する。このようにして導出された骨塩量B(x,y)は、基準撮影条件である90kVの管電圧により被写体Hを撮影することにより取得され、かつビームハードニングの影響が除去された放射線画像に含まれる骨部領域の画素値を表すものとなる。このため、導出される骨塩量を各画素の画素値とする骨塩量画像が骨塩量導出部66により導出されることとなる。
B(x,y)=K0(x,y)×Gb(x,y) (6)
第3の実施形態の特定部67には、筋肉量導出部64から筋肉量を表す情報が入力され、骨塩量導出部66から骨塩量を表す情報が入力される。特定部67は、筋肉量導出部64が導出した予め定められた部位の筋肉量と、骨塩量導出部66が導出した骨塩量と、対応関係情報とに基づいて、被写体の転倒率(転倒発生率)を特定する。
一般に人間が転倒する確率と、筋肉もしくは筋力とには、相関関係があることが知られている。とくに、下肢の部位であるふくらはぎの筋肉(ヒラメ筋)および、骨盤を支える臀部の筋肉(大臀筋および中臀筋)の量もしくはこれらの筋肉による筋力と相関関係があることが知られている。
一例として、図21には、年齢毎に、筋肉量と転倒率との間の相関関係を表す対応関係情報90が示されている。図21に示す対応関係情報90では、いずれの年齢においても筋肉量が少ないほど転倒率は高くなる。なお、同じ筋肉量であっても、骨塩量が少ないほど転倒率は高くなり、また、転倒した場合における骨折する確率が高くなる。このため、第3の実施形態の情報導出装置50Bでは、骨塩量毎に、図21に示したような年齢毎の対応関係情報90を有しており、複数の対応関係情報90がストレージ53に記憶されている。
なお、筋肉の質にもよるが、筋肉量が多いほど筋力が大きい傾向がある。このため、筋肉量に代えて、転倒率を特定するための筋力をパラメータとして用いてもよい。
このように第3の実施形態の特定部67は、第1放射線画像G1および第2放射線画像G2に含まれる被写体Hの部位(撮影部位)に応じた対応関係情報を用いて、被写体の転倒率を特定する。
第3の実施形態においては、情報導出装置50Bが導出した転倒率が教師データの正解データとして用いられる。図22は第3の実施形態において導出される教師データを示す図である。図22に示すように教師データ40Bは、第1および第2の放射線画像G1,G2を含む学習用データ41Bと、転倒率である正解データ42Bとからなる。
図22に示す教師データ40Bを用いてニューラルネットワークを学習することにより、単純放射線画像G0が入力されると転倒率を軟部組織の組成に関連する推定結果として出力する学習済みニューラルネットワーク23Aを構築することができる。
なお、上記第1から第3の実施形態に限定されず、例えば上記第1から第3の実施形態を組み合わせてもよい。例えば、第3の実施形態による特定部67が、筋肉量導出部64が導出した予め定められた部位の筋肉量と、骨塩量導出部66が導出した骨塩量と、対応関係情報とに基づいて、予め定められた疾患の罹患リスク、または予め定められた疾患の疾患レベルを疾患情報として特定して教師データとして用いる形態としてもよい。また、第2の実施形態による特定部65が、筋肉量導出部64が導出した予め定められた部位の筋肉量と、対応関係情報90とに基づいて、転倒率を特定して教師データとして用いる形態としてもよい。
また、筋肉量、疾患情報および転倒率のすべて、あるいはこれらのうちの複数を特定して教師データとして用いる形態としてもよい。このような教師データを用いて学習を行うことにより構築された学習済みニューラルネットワークは、単純放射線画像G0の入力により、筋肉量、疾患情報および転倒率のすべて、あるいはこれらのうちの複数を、軟部組織の組成に関連する推定結果として出力するものとなる。
また、上記第1から第3の実施形態における筋肉量の導出、および第3の実施形態における骨塩量の導出に用いる画像は縮小画像であってもよい。例えば、筋肉量導出部64は、軟部画像Gsを縮小した縮小画像の画素毎に筋肉量を導出してもよい。また例えば、骨塩量導出部66は、骨部画像Gbを縮小した縮小画像の画素毎の骨塩量を導出してもよい。このように縮小画像を用いた場合、ノイズを低減させてSN比(Signal to Noise ratio)を向上させることができるため、導出精度を向上させることができる。
また、上記第1から第3の実施形態においては、第1および第2の放射線画像G1,G2から教師データを導出しているが、CT装置4により取得されたCT画像から教師データを導出してもよい。以下これを第4の実施形態として説明する。
図23は第4の実施形態による情報導出装置の機能的な構成を示す図である。なお、図23において図7と同一の構成については同一の参照番号を付与し、詳細な説明は省略する。図23に示すように、第4の実施形態による情報導出装置50Cは、第1の実施形態による情報導出装置50の散乱線除去部62、サブトラクション部63および筋肉量導出部64に代えて、合成部68および筋肉量導出部69を備える。
第4の実施形態においては、画像取得部61は、学習用データを導出するためのCT画像V0を画像保存システム9から取得する。なお、画像取得部61は、推定装置10の画像取得部21と同様にCT装置4に被写体Hの撮影を行わせることにより、CT画像V0を取得するものであってもよい。
合成部68は、CT画像V0を合成することにより被写体Hを表す合成2次元画像C0を導出する。図24は合成2次元画像C0の導出を説明するための図である。なお、図24においては説明のために3次元のCT画像V0を2次元で示している。図24に示すようにCT画像V0により表される3次元空間に被写体Hが含まれている。被写体Hは、骨部、脂肪、筋肉および内臓の複数の組成からなる。
ここで、CT画像V0の各画素におけるCT値V0(x,y,z)は、その画素における組成の減弱係数μiと水の減弱係数μwとを用いて、下記の式(7)により表すことができる。(x,y,z)はCT画像V0の画素位置を表す座標である。なお、以降の説明において、減弱係数はとくに断りがない限り線減弱係数を意味するものとする。減弱係数は吸収または散乱等によって放射線が減弱する程度(割合)を表す。減弱係数は、放射線が透過する構造物の具体的な組成(密度等)および厚さ(質量)によって異なる。
V0(x,y,z)=(μi-μw)/μw×1000 (7)
水の減弱係数μwは既知である。したがって、式(7)をμiについて解くことにより、下記の式(8)に示すように各組成の減弱係数μiを算出することができる。
μi=V0(x,y,z)×μw/1000+μw (8)
合成部68は、図24に示すように、被写体Hに照射線量I0の放射線を仮想的に照射し、仮想的な平面80に設置された放射線検出器(不図示)により被写体Hを透過した放射線を仮想的に検出した合成2次元画像C0を導出する。なお、仮想的な放射線の照射線量I0および放射線エネルギーは、予め定められた撮影条件に応じて設定される。具体的には、照射線量I0は、管電圧、mAs値およびSID等の撮影条件に対応したテーブルを用意しておき、このテーブルを参照して設定すればよい。また、放射線エネルギーは管電圧に応じたテーブルを用意しておき、このテーブルを参照して設定すればよい。この際、合成2次元画像C0の各画素についての到達線量I1(x,y)は、被写体H内の1以上の組成を透過する。このため、到達線量I1(x,y)は、照射線量I0の放射線が透過する1以上の組成の減弱係数μiを用いて下記の式(9)により導出することができる。なお、到達線量I1(x,y)が合成2次元画像C0の各画素の画素値となる。
I1(x,y)=I0×exp(-∫μi・dt) (9)
なお、照射する放射線源を面光源と仮定した場合、式(9)に用いる減弱係数μiは図24に示す上下方向に並ぶ各画素のCT値から式(8)により導出したものを用いればよい。また、照射する光源の面光源を点光源と仮定した場合、図25に示すように、点光源と仮想的な平面80上の各位置との幾何学的な位置関係に基づいて、各画素に到達する放射線の経路上にある画素を特定し、特定した画素のCT値から式(8)により導出した減弱係数μiを用いればよい。
筋肉量導出部69は、CT画像V0を用いて、合成2次元画像C0の画素毎に被写体Hの筋肉量を導出する。ここで、CT値について説明する。図26はCT値を説明するための図である。CT値は、人体におけるX線の吸収率を数値化したものである。具体的には、図26に示すように、水は0、空気のCT値は-1000(単位はHU)というように、人体を構成する組成に応じてCT値が定められている。
筋肉量導出部69は、まずCT画像V0のCT値に基づいてCT画像V0における筋肉領域を特定する。具体的にはしきい値処理によりCT値が60~70となる画素からなる領域を筋肉領域に特定する。なお、しきい値処理に代えて、CT画像V0から筋肉領域を検出するように学習がなされた学習済みニューラルネットワークを用いて筋肉領域を特定してもよい。また、CT画像V0をディスプレイ54に表示し、表示したCT画像V0においてマニュアル操作による筋肉領域の指定を受け付けることにより、筋肉領域を特定するようにしてもよい。
ここで、CT画像の各画素における組成の単位体積当たりの密度ρ[g/cm3]は、組成の減弱係数μi[1/cm」とその組成の質量減弱係数μe「cm2/g]とから下記の式(10)により導出することができる。
ρ=μi/μe (10)
図27は人体の各種組成における放射線エネルギーと質量減弱係数との関係を示す図である。図27には、骨部、筋肉等および脂肪についての放射線エネルギーと質量減弱係数との関係を示している。なお、筋肉等とは筋肉、血液および水を意味する。本実施形態においては、図27に示す放射線エネルギーと質量減弱係数との関係がテーブルとしてストレージ53に記憶されている。本実施形態においては、筋肉の質量減弱係数が必要であることから、仮想的な放射線エネルギーに基づいて図27に示すテーブルにおける筋肉等についての関係を参照して、筋肉の質量減弱係数を取得する。また、筋肉領域の各画素における減弱係数μmを上記式(8)により導出する。そして、上記式(10)により、CT画像V0に含まれる筋肉領域の各画素における単位体積当たりの筋肉密度ρmを筋肉量として導出する。
なお、CT画像V0は3次元画像であるため、上記式(10)により導出される単位体積当たりの筋肉量の単位は[g/cm3]である。本実施形態においては、筋肉量導出部69は、合成2次元画像C0の各画素についての単位面積当たりの筋肉量を導出する。このため、筋肉量導出部69は、上記式(10)により導出した単位体積当たりの筋肉密度ρmを、合成2次元画像C0を導出した際と同様に仮想的な平面80に投影することにより、合成2次元画像C0の各画素についての単位面積当たりの筋肉量M[g/cm2]を導出する。
なお、投影の際には、仮想的な放射線源から合成2次元画像C0の各画素に到達する経路上にあるCT画像V0の各画素の筋肉量の代表値を導出すればよい。代表値としては、積算値、平均値、最大値、中央値および最小値等を用いることができる。さらに、本実施形態においては、筋肉量導出部69は、予め定められた部位についての筋肉量の代表値を導出すればよい。例えば、予め定められた部位が臀部および下肢の上部である場合、筋肉量導出部69は、合成2次元画像C0における臀部および下肢の上部の領域における各画素の筋肉量の代表値を導出する。代表値としては、平均値、中央値、最小値および最大値等を用いることができる。本実施形態においては、予め定められた部位である臀部および下肢の上部の筋肉量の代表値を正解データとして用いる。
第4の実施形態においては、情報導出装置50Cが導出した筋肉量が教師データの正解データとして用いられる。図28は第4の実施形態において導出される教師データを示す図である。図28に示すように教師データ40Cは、合成2次元画像C0を含む学習用データ41Cと、筋肉量である正解データ42Cとからなる。
図28に示す教師データ40Cを用いてニューラルネットワークを学習することにより、第1の実施形態と同様に、単純放射線画像G0が入力されると筋肉量を軟部組織の組成に関連する推定結果として出力する学習済みニューラルネットワーク23Aを構築することができる。
なお、上記第4の実施形態においては、正解データとしてCT画像V0から筋肉量を導出しているが、これに限定されるものではない。第2の実施形態と同様に、予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報を正解データとして導出してもよい。以下、これを第5の実施形態として説明する。
図29は第5の実施形態による情報導出装置の機能的な構成を示す図である。なお、図29において図23と同一の構成については同一の参照番号を付与し、詳細な説明は省略する。図29に示すように、第5の実施形態による情報導出装置50Dは、第4の実施形態による情報導出装置50Cに対して、第2の実施形態による情報導出装置50Aの特定部65と同様の処理を行う特定部65Aをさらに備える。
第5の実施形態においては、特定部65Aは、筋肉量導出部69がCT画像V0から導出した予め定められた部位の筋肉量と対応関係情報とに基づいて、予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報を特定する。
第5の実施形態においては、情報導出装置50Dが導出した疾患情報が教師データの正解データとして用いられる。図30は第5の実施形態において導出される教師データを示す図である。図30に示すように教師データ40Dは、合成2次元画像C0を含む学習用データ41Dと、疾患情報である正解データ42Dとからなる。
図30に示す教師データ40Dを用いてニューラルネットワークを学習することにより、第2の実施形態と同様に、単純放射線画像G0が入力されると疾患情報を軟部組織の組成に関連する推定結果として出力する学習済みニューラルネットワーク23Aを構築することができる。
なお、上記第4の実施形態においては、正解データとしてCT画像V0から筋肉量を導出しているが、これに限定されるものではない。第3の実施形態と同様に、転倒率を正解データとして導出してもよい。以下、これを第6の実施形態として説明する。
図31は第6の実施形態による情報導出装置の機能的な構成を示す図である。なお、図31において図23と同一の構成については同一の参照番号を付与し、詳細な説明は省略する。図31に示すように、第6の実施形態による情報導出装置50Eは、第4の実施形態による情報導出装置50Cに対して、骨塩量導出部81および第3の実施形態による情報導出装置50Bの特定部67と同様の処理を行う特定部67Aをさらに備える。
骨塩量導出部81は、CT画像V0を用いて、合成2次元画像C0の画素毎に被写体Hの骨塩量を導出する。すなわち、骨塩量導出部81は、まずCT画像V0のCT値に基づいてCT画像V0における骨部領域を特定する。具体的にはしきい値処理によりCT値が100~1000となる画素からなる領域を骨部領域に特定する。なお、しきい値処理に代えて、CT画像V0から骨部領域を検出するように学習がなされた学習済みニューラルネットワークを用いて骨部領域を特定してもよい。また、CT画像V0をディスプレイ54に表示し、表示したCT画像V0においてマニュアル操作による骨部領域の指定を受け付けることにより、骨部領域を特定するようにしてもよい。
第6の実施形態においては、骨部の質量減弱係数が必要であることから、仮想的な放射線エネルギーに基づいて図27に示すテーブルにおける骨部についての関係を参照して、骨部の質量減弱係数を取得する。また、骨部領域の各画素における減弱係数μbを上記式(8)により導出する。そして、上記式(10)により、CT画像V0に含まれる骨部領域の各画素における単位体積当たりの骨塩量ρbを導出する。
なお、CT画像V0は3次元画像であるため、上記式(10)により導出される単位体積当たりの骨塩量の単位は[g/cm3]である。第6の実施形態においては、骨塩量導出部81は、合成2次元画像C0の各画素についての単位面積当たりの骨塩量を導出する。このため、骨塩量導出部81は、上記式(10)により導出した単位体積当たりの骨塩量ρbを、合成2次元画像C0を導出した際と同様に仮想的な平面80に投影することにより、合成2次元画像C0の各画素についての単位面積当たりの骨塩量B[g/cm2]を導出する。
なお、投影の際には、仮想的な放射線源から合成2次元画像C0の各画素に到達する経路上にあるCT画像V0の各画素の骨塩量の代表値を導出すればよい。代表値としては、積算値、平均値、最大値、中央値および最小値等を用いることができる。さらに、第6の実施形態においては、骨塩量導出部81は、予め定められた部位についてのみ骨塩量の代表値を導出すればよい。本実施形態においては、予め定められた部位は臀部および下肢の上部であるため、骨塩量導出部81は、合成2次元画像C0における臀部および下肢の上部の領域における各画素の骨塩量の代表値を導出する。代表値としては、平均値、中央値、最小値および最大値等を用いることができる。
第6の実施形態においては、特定部67Aは、筋肉量導出部69がCT画像V0から導出した予め定められた部位の筋肉量と、骨塩量導出部81が導出した予め定められた部位の骨塩量と、図21に示す対応関係情報90とに基づいて、転倒率を特定する。
第6の実施形態においては、情報導出装置50Eが導出した転倒率が教師データの正解データとして用いられる。図32は第6の実施形態において導出される教師データを示す図である。図32に示すように教師データ40Eは、合成2次元画像C0を含む学習用データ41Eと、転倒率である正解データ42Eとからなる。
図32に示す教師データ40Eを用いてニューラルネットワークを学習することにより、単純放射線画像G0が入力されると転倒率を軟部組織の組成に関連する推定結果として出力する学習済みニューラルネットワーク23Aを構築することができる。
なお、上記第4から第6の実施形態に限定されず、例えば上記第4から第6の実施形態を組み合わせてもよい。例えば、第6の実施形態による特定部67Aが、筋肉量導出部69が導出した予め定められた部位の筋肉量と、骨塩量導出部81が導出した予め定められた部位の骨塩量と、対応関係情報とに基づいて、予め定められた疾患の罹患リスク、または予め定められた疾患の疾患レベルを表す疾患情報を特定して教師データとして用いる形態としてもよい。また、第5の実施形態による特定部65Aが、筋肉量導出部69が導出した予め定められた部位の筋肉量と、対応関係情報90とに基づいて、転倒率を特定して教師データとして用いる形態としてもよい。
また、筋肉量、疾患情報および転倒率のすべて、あるいはこれらのうちの複数を特定して教師データとして用いる形態としてもよい。このような教師データを用いて学習を行うことにより構築された学習済みニューラルネットワークは、単純放射線画像G0の入力により、筋肉量、疾患情報および転倒率のすべて、あるいはこれらのうちの複数を、軟部組織の組成に関連する推定結果として出力するものとなる。
また、上記第1の実施形態においては、正解データとして筋肉量を導出しているが、これに限定されるものではない。脂肪量を正解データとして導出してもよい。以下、これを第7の実施形態として説明する。
図33は第7の実施形態による情報導出装置の機能的な構成を示す図である。なお、図33において図7と同一の構成については同一の参照番号を付与し、詳細な説明は省略する。図33に示すように、第7の実施形態による情報導出装置50Fは、第1の実施形態による情報導出装置50に含まれる筋肉量導出部64に代えて、脂肪量導出部82を備えたものである。
脂肪量導出部82は、軟部画像Gsから、上述した筋肉組織および脂肪組織のエネルギー特性の差を利用して、筋肉と脂肪とを分離する。すなわち、第1の実施形態における筋肉量導出部64が軟部画像Gsから筋肉画像を導出しているのに対して、脂肪量導出部82は、軟部画像Gsから脂肪画像を生成する。また、脂肪量導出部82は、脂肪画像の画素値に基づいて各画素の脂肪量を導出する。
脂肪量導出部82は、まず第1の実施形態における筋肉量導出部64と同様に、上記式(2)により軟部画像Gs内の各画素位置(x,y)における筋肉率rm(x,y)を導出する。そして、筋肉率rm(x,y)を1から減算することにより、脂肪率rf(x,y)(=1-rm(x,y))を導出する。
さらに、脂肪量導出部82は、下記式(11)により、軟部画像Gsから脂肪画像Gfを生成する。なお、式(11)における、x、yは脂肪画像Gfの各画素の座標である。
Gf(x,y)=rf(x,y)×Gs(x,y) (11)
脂肪量導出部82は、脂肪画像Gfの画素値を画素毎の脂肪量として導出すればよい。一方、画素毎の脂肪率rfを脂肪量として導出してもよい。また、脂肪画像Gfは、下記式(12)に示すように、脂肪画像Gfの各画素(x,y)に対して、予め定められた画素値と脂肪量との関係を表す係数K2(x,y)を乗算することにより、脂肪画像Gfの画素毎の脂肪量F(x,y)(g/cm2)を導出してもよい。この場合、脂肪量は単位面積当たりの脂肪量となるが、単位体積当たりの脂肪量を導出するようにしてもよい。
F(x,y)=K2(x,y)×Gf(x,y) (12)
第7の実施形態においては、情報導出装置50Fが導出した脂肪量が教師データの正解データとして用いられる。図34は第7の実施形態において導出される教師データを示す図である。図34に示すように教師データ40Fは、第1および第2の放射線画像G1,G2を含む学習用データ41Fと、脂肪量である正解データ42Fとからなる。
図34に示す教師データ40Fを用いてニューラルネットワークを学習することにより、単純放射線画像G0が入力されると脂肪量を軟部組織の組成に関連する推定結果として出力する学習済みニューラルネットワーク23Aを構築することができる。
また、上記第4の実施形態においては、正解データとして筋肉量を導出しているが、これに限定されるものではない。脂肪量を正解データとして導出してもよい。以下、これを第8の実施形態として説明する。
図35は第8の実施形態による情報導出装置の機能的な構成を示す図である。なお、図35において図7と同一の構成については同一の参照番号を付与し、詳細な説明は省略する。図35に示すように、第8の実施形態による情報導出装置50Gは、第4の実施形態による情報導出装置50Cに含まれる筋肉量導出部69に代えて、脂肪量導出部83を備えたものである。
脂肪量導出部83は、CT画像V0を用いて、合成2次元画像C0の画素毎に被写体Hの脂肪量を導出する。すなわち、脂肪量導出部83は、まずCT画像V0のCT値に基づいてCT画像V0における脂肪領域を特定する。具体的にはしきい値処理によりCT値が-100程度、例えばCT値が-100±10となる画素からなる領域を脂肪領域に特定する。なお、しきい値処理に代えて、CT画像V0から脂肪領域を検出するように学習がなされた学習済みニューラルネットワークを用いて脂肪領域を特定してもよい。また、CT画像V0をディスプレイ54に表示し、表示したCT画像V0においてマニュアル操作による脂肪領域の指定を受け付けることにより、脂肪領域を特定するようにしてもよい。
そして、脂肪量導出部83は、図27に示す脂肪についての関係を参照して、脂肪の質量減弱係数を取得する。また、脂肪領域の各画素における減弱係数μfを上記式(8)により導出する。そして、上記式(10)により、CT画像V0に含まれる脂肪領域の各画素における単位体積当たりの脂肪密度ρfを脂肪量として導出する。
なお、CT画像V0は3次元画像であるため、上記式(10)により導出される単位体積当たりの脂肪量の単位は[g/cm3]である。本実施形態においては、脂肪量導出部83は、合成2次元画像C0の各画素についての単位面積当たりの脂肪量を導出する。このため、脂肪量導出部83は、上記式(10)により導出した単位体積当たりの脂肪密度ρfを、合成2次元画像C0を導出した際と同様に仮想的な平面80に投影することにより、合成2次元画像C0の各画素についての単位面積当たりの脂肪量F[g/cm2]を導出する。
なお、投影の際には、仮想的な放射線源から合成2次元画像C0の各画素に到達する経路上にあるCT画像V0の各画素の脂肪量の代表値を導出すればよい。代表値としては、積算値、平均値、最大値、中央値および最小値等を用いることができる。さらに、本実施形態においては、脂肪量導出部83は、予め定められた部位についての脂肪量の代表値を導出すればよい。例えば、予め定められた部位が腹部である場合、脂肪量導出部83は、合成2次元画像C0における腹部の領域における各画素の脂肪量の代表値を導出する。代表値としては、平均値、中央値、最小値および最大値等を用いることができる。
第8の実施形態においては、情報導出装置50Gが導出した脂肪量が教師データの正解データとして用いられる。図36は第8の実施形態において導出される教師データを示す図である。図36に示すように教師データ40Gは、合成2次元画像C0を含む学習用データ41Gと、脂肪量である正解データ42Gとからなる。
図36に示す教師データ40Gを用いてニューラルネットワークを学習することにより、第7の実施形態と同様に、単純放射線画像G0が入力されると脂肪量を軟部組織の組成に関連する推定結果として出力する学習済みニューラルネットワーク23Aを構築することができる。
また、上記各実施形態においては、単純放射線画像G0から軟部組織の組成に関連する推定結果を導出しているが、これに限定されるものではない。例えば、特開平9-108206号公報および特開2006-271437号公報等に記載されたDXA撮影装置により被写体を撮影することにより取得したDXA走査画像から軟部組織の組成に関連する推定結果を導出する場合にも、本開示の技術を適用することができる。DXA走査画像とは、細くコリメートされた高エネルギー放射線ビームおよび低エネルギー放射線ビームを切り替えながら、かつ走査しながら被写体に照射し、放射線検出器で撮像された放射線画像をいう。細くコリメートされた放射線ビームとは、例えば、放射線源と被写体との間にあるコリメータを使って、ペンシルビーム、狭ファンビームまたは広ファンビーム等に形成された放射線ビームである。低エネルギー放射線とは、高エネルギー放射線より相対的に低いエネルギーの放射線のことをいう。
この場合、DXA走査画像を撮像する検出器の画素サイズ、撮像時の走査方向および走査速度、X線源と被写体と検出器との相互の距離、並びに放射線のエネルギー分布(管電圧、ターゲットおよびフィルタで決まる)等の各条件に従って、合成2次元画像C0からDXA走査画像を模擬した画像を生成し、生成したDXA走査画像を模擬した画像を学習用データ41として使用して学習済みニューラルネットワーク23Aを構築してもよい。
DXA走査画像を模擬した画像は、例えば、第4から第6の実施形態における合成部68が導出した合成2次元画像C0に対して、DXA走査画像の撮影に使用する検出器の画素サイズ、走査方向および走査速度等に応じて解像度を低下させる処理を施すことにより生成すればよい。DXA走査画像を模擬した画像が、低解像度合成2次元画像の一例である。
具体的には、以下のようにしてDXA走査画像を模擬した画像を生成する。L、M、Nを自然数とし、被写体Hの実際のサイズのLmm×Lmmに対し、合成2次元画像C0のM×M個の画素が対応し、DXA走査画像の学習用画像のN×N個の画素が対応する場合を想定する。このとき、合成2次元画像C0の(M/N)×(M/N)個の画素、すなわち、隣接する複数画素が、DXA走査画像の学習用画像の1個の画素に対応するように、合成2次元画像C0の(M/N)×(M/N)個の画素の画素値の平均値を、合成2次元画像C0の(M/N)×(M/N)個の全ての画素値とすることにより合成2次元画像C0を低解像度化する。そして、合成2次元画像C0のDXA走査画像に対応する全ての領域でこのような低解像度化処理を行うことにより、DXA走査画像を模擬した画像を生成する。M/Nが自然数にならない場合は、M/Nの前後の自然数で、適宜、合成2次元画像C0とDXA走査画像の学習用画像との対応する画素の位置を調整して、合成2次元画像C0からDXA走査画像を模擬した画像を生成すればよい。
さらに、走査によるぼけを模擬するための低解像度化処理として、走査方向に対応する一方向への移動平均処理を行うことによりDXA走査画像を模擬した画像を生成してもよい。
また、合成2次元画像C0に対して移動平均処理を行うことにより、DXA走査画像を模擬した画像を生成してもよい。移動平均処理は、DXA走査画像を撮影時の走査方向、走査速度、検出器の画素サイズおよびX線源と被写体と検出器との相互の距離等から、移動平均の計算に使用するフィルタのサイズおよびフィルタの強度分布を適宜決定すればよい。例えば、走査速度が相対的に速いほど、相対的に低解像度になるのでフィルタのサイズを相対的に大きく設定すればよい。この場合、L=10に設定した場合、M=200、N=5程度となる。
なお、上記各実施形態においては、予め定められた部位を、臀部、下肢および四肢等としているが、これらに限定されるものではない。本実施形態においては、任意の部位を対象として軟部組織の組成に関連する推定結果を導出することが可能である。
また、上記第1から第3および第7の実施形態においては、教師データ40の学習用データ41として、第1および第2の放射線画像G1,G2を用いているが、これに限定されるものではない。図37の教師データ40Hに示すように、第2の放射線画像G2に代えて、サブトラクション部63が導出した軟部画像Gsを学習用データ41Hとして用いるようにしてもよい。なお、図37においては正解データ42Hは筋肉量である。
また、上記第1から第3および第7の実施形態においては、正解データとしての筋肉量を導出する際に、第1の放射線画像G1および第2の放射線画像G2そのものを用いているが、これに限定されるものではない。第1の放射線画像G1および第2の放射線画像G2の各画素について、周囲の画素との移動平均を算出し、移動平均を各画素の画素値とする第1の放射線画像G1および第2の放射線画像G2を用いて筋肉量を導出してもよい。この場合、放射線源3、被写体Hおよび放射線検出器5,6の相互の距離の情報、並びに放射線検出器5,6の画素サイズの情報等から、移動平均に使用する画素を適宜決定すればよい。
なお、上記各実施形態においては、推定装置10においてニューラルネットワークの学習を行って学習済みニューラルネットワーク23Aを構築しているが、これに限定されるものではない。推定装置10以外の他の装置において構築された学習済みニューラルネットワーク23Aを、本実施形態における推定装置10の推定部23に用いるようにしてもよい。
また、上記第1から第3および第7の実施形態においては、筋肉量を導出するためのエネルギーサブトラクション処理を行うに際し、1ショット法により第1および第2の放射線画像G1,G2を取得しているが、これに限定されるものではない。1つの放射線検出器のみ用いて撮影を2回行う、いわゆる2ショット法により第1および第2の放射線画像G1,G2を取得してもよい。2ショット法の場合、被写体Hの体動により、第1の放射線画像G1および第2の放射線画像G2に含まれる被写体Hの位置がずれる可能性がある。このため、第1の放射線画像G1および第2の放射線画像G2において、被写体の位置合わせを行った上で、本実施形態の処理を行うことが好ましい。
位置合わせの処理としては、例えば特開2011-255060号公報に記載された手法を用いることができる。特開2011-255060号公報に記載された手法は、第1および第2の放射線画像G1,G2のそれぞれについての、周波数帯域が異なる構造物を表す複数の第1の帯域画像および複数の第2の帯域画像を生成し、対応する周波数帯域の第1の帯域画像および第2の帯域画像における、互いに対応する位置の位置ずれ量を取得し、位置ずれ量に基づいて第1の放射線画像G1と第2の放射線画像G2との位置合わせを行うようにしたものである。
また、上記各実施形態においては、第1および第2の放射線検出器5,6を用いて被写体Hを撮影するシステムにおいて取得した放射線画像を用いて、教師データの正解データとしての軟部組織の組成に関連する情報を導出しているが、放射線検出器に代えて、蓄積性蛍光体シートを用いて取得した第1および第2の放射線画像G1,G2から正解データとしての軟部組織の組成に関連する情報を導出するようにしてもよい。この場合、2枚の蓄積性蛍光体シートを重ねて被写体Hを透過した放射線を照射して、被写体Hの放射線画像情報を各蓄積性蛍光体シートに蓄積記録し、各蓄積性蛍光体シートから放射線画像情報を光電的に読み取ることにより第1および第2の放射線画像G1,G2を取得すればよい。なお、蓄積性蛍光体シートを用いて第1および第2の放射線画像G1,G2を取得する場合にも、2ショット法を用いるようにしてもよい。
また、上記実施形態における放射線は、とくに限定されるものではなく、X線の他、α線またはγ線等を用いることができる。
また、上記実施形態において、例えば、推定装置10の画像取得部21、情報取得部22、推定部23、学習部24および表示制御部25、並びに情報導出装置50等の画像取得部61、散乱線除去部62、サブトラクション部63および筋肉量導出部64等といった各種の処理を実行する処理部(Processing Unit)のハードウェア的な構造としては、次に示す各種のプロセッサ(Processor)を用いることができる。上記各種のプロセッサには、上述したように、ソフトウェア(プログラム)を実行して各種の処理部として機能する汎用的なプロセッサであるCPUに加えて、FPGA(Field Programmable Gate Array)等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device :PLD)、ASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
1つの処理部は、これらの各種のプロセッサのうちの1つで構成されてもよいし、同種または異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGAの組み合わせまたはCPUとFPGAとの組み合わせ)で構成されてもよい。また、複数の処理部を1つのプロセッサで構成してもよい。
複数の処理部を1つのプロセッサで構成する例としては、第1に、クライアントおよびサーバ等のコンピュータに代表されるように、1つ以上のCPUとソフトウェアとの組み合わせで1つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第2に、システムオンチップ(System On Chip:SoC)等に代表されるように、複数の処理部を含むシステム全体の機能を1つのIC(Integrated Circuit)チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの1つ以上を用いて構成される。
さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路(Circuitry)を用いることができる。
1 撮影装置
3 放射線源
4 CT装置
5、6 放射線検出器
7 放射線エネルギー変換フィルタ
9 画像保存システム
10 推定装置
11、51 CPU
12A 推定プログラム
12B 学習プログラム
13、53 ストレージ
14、54 ディスプレイ
15、55 入力デバイス
16、56 メモリ
17、57 ネットワークI/F
18、58 バス
21 画像取得部
22 情報取得部
23 推定部
23A 学習済みニューラルネットワーク
24 学習部
25 表示制御部
30 ニューラルネットワーク
31 入力層
32 中間層
33 出力層
35 畳み込み層
36 プーリング層
37 全結合層
40、40A、40B、40C、40D、40E、40F、40G、40H 教師データ
41、41A、41B、41C、41D、41E、41F、41G、41H 学習用データ
42、42A、42B、42C、42D、42E、42F、42G、42H 正解データ
47 出力データ
48 パラメータ
50,50A、50B、50C、50D、50E、50F、50G 情報導出装置
52 情報導出プログラム
61 画像取得部
62 散乱線除去部
63 サブトラクション部
64 筋肉量導出部
65、65A 特定部
66 骨塩量導出部
67、67A 特定部
68 合成部
69 筋肉量導出部
70 表示画面
71 画像表示領域
72 筋肉量表示領域
73 リファレンス
80 平面
81 骨塩量導出部
82、83 脂肪量導出部
90 対応関係情報
C0 合成2次元画像
G0 単純放射線画像
G1、G2 放射線画像
Gb 骨部画像
Gs 軟部画像
LUT1 テーブル

Claims (18)

  1. 少なくとも1つのプロセッサを備え、
    前記プロセッサは、
    被写体を単純撮影することにより取得した単純放射線画像、または前記被写体をDXA法により撮影することにより取得したDXA走査画像から、前記被写体の軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークとして機能し、
    前記学習済みニューラルネットワークは、(i)エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像、(ii)前記被写体の放射線画像および前記被写体の前記軟部組織を表す軟部画像、または(iii)前記被写体の3次元のCT画像を合成することにより導出された前記被写体を表す合成2次元画像と、前記被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなる、推定装置。
  2. 前記軟部組織の組成に関連する情報は、エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像から導出された軟部画像における軟部領域の画素値に基づいて導出される請求項1に記載の推定装置。
  3. 前記軟部組織の組成に関連する情報は、前記CT画像における軟部領域を特定し、前記軟部領域における放射線の減弱係数を導出し、前記放射線の減弱係数および前記軟部領域における質量減弱係数に基づいて導出された、前記軟部組織の組成の密度に基づいて導出される請求項1に記載の推定装置。
  4. 前記軟部組織の組成に関連する情報は、前記軟部領域の各位置における組成の密度を予め定められた方向に投影することにより導出される請求項3に記載の推定装置。
  5. 前記軟部組織の組成に関連する情報は、単位面積当たりの筋肉量、単位体積当たりの筋肉量、単位面積当たりの脂肪量、単位体積当たりの脂肪量、予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報、および転倒率の少なくとも1つを含む請求項1から4のいずれか1項に記載の推定装置。
  6. 前記疾患情報は、前記被写体の予め定められた部位の前記筋肉量を導出し、
    予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報と前記予め定められた部位の筋肉量との対応関係を表す対応関係情報、および前記筋肉量に基づいて前記疾患情報を特定することにより導出される請求項5に記載の推定装置。
  7. 前記疾患情報は、前記被写体の予め定められた部位の前記筋肉量および骨塩量を導出し、
    予め定められた疾患の罹患リスクまたは予め定められた疾患の疾患レベルを表す疾患情報と前記予め定められた部位の筋肉量との対応関係を表す対応関係情報、前記筋肉量、および前記骨塩量に基づいて前記疾患情報を特定することにより導出される請求項5に記載の推定装置。
  8. 前記予め定められた部位は下肢であり、
    前記予め定められた疾患は糖尿病であり、
    前記疾患情報は前記糖尿病の前記罹患リスクである請求項6または請求項7に記載の推定装置。
  9. 前記予め定められた部位は四肢または全身であり、
    前記予め定められた疾患はサルコペニアであり、
    前記疾患情報は前記サルコペニアの前記疾患レベルである請求項6または請求項7に記載の推定装置。
  10. 前記転倒率は、前記被写体の予め定められた部位の前記筋肉量を導出し、
    前記予め定められた部位の筋肉量または前記予め定められた部位の筋肉量に応じた筋力である筋肉情報と被写体の転倒率との対応関係を表す対応関係情報、および前記筋肉量に基づいて、前記転倒率を特定することにより導出される請求項5に記載の推定装置。
  11. 前記転倒率は、前記被写体の予め定められた部位の前記筋肉量および骨塩量を導出し、
    前記予め定められた部位の筋肉量または前記予め定められた部位の筋肉量に応じた筋力である筋肉情報と被写体の転倒率との対応関係を表す対応関係情報、前記筋肉量、および前記骨塩量に基づいて、前記転倒率を特定することにより導出される、請求項5に記載の推定装置。
  12. 前記予め定められた部位は下肢および臀部の少なくとも一方である請求項10または請求項11に記載の推定装置。
  13. 前記プロセッサは、前記DXA走査画像から前記軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークとして機能し、
    前記学習済みニューラルネットワークは、前記合成2次元画像に解像度を低下させる処理を施した低解像度合成2次元画像と前記被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなる、請求項1から12のいずれか1項に記載の推定装置。
  14. 前記低解像度合成2次元画像は、前記合成2次元画像の隣接する複数画素の画素値の平均値を前記隣接する複数画素の画素値とする画像であり、前記隣接する複数画素のサイズは前記DXA走査画像の1つの画素サイズに対応する請求項13に記載の推定装置。
  15. 前記低解像度合成2次元画像は、前記合成2次元画像の一方向に対して移動平均処理を施された画像であり、前記一方向は前記DXA走査画像の走査方向に対応する請求項13に記載の推定装置。
  16. 前記低解像度合成2次元画像は、前記合成2次元画像の隣接する複数画素の画素値の平均値を、前記隣接する複数画素の画素値とする第1の低解像度画像を生成し、前記第1の低解像度画像に対して一方向に移動平均処理をされて生成された画像であり、前記隣接する複数画素のサイズは前記DXA走査画像の1つの画素サイズに対応し、前記一方向は前記DXA走査画像の走査方向に対応する請求項13に記載の推定装置。
  17. 被写体を単純撮影することにより取得した単純放射線画像、または前記被写体をDXA法により撮影することにより取得したDXA走査画像から、前記被写体の軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークを用いて、前記単純放射線画像または前記DXA走査画像から前記軟部組織の組成に関連する推定結果を導出する推定方法であって、
    前記学習済みニューラルネットワークは、(i)エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像、(ii)前記被写体の放射線画像および前記被写体の前記軟部組織を表す軟部画像、または(iii)前記被写体の3次元のCT画像を合成することにより導出された前記被写体を表す合成2次元画像と、前記被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなる、推定方法。
  18. 被写体を単純撮影することにより取得した単純放射線画像、または前記被写体をDXA法により撮影することにより取得したDXA走査画像から、前記被写体の軟部組織の組成に関連する推定結果を導出する学習済みニューラルネットワークを用いて、前記単純放射線画像または前記DXA走査画像から前記軟部組織の組成に関連する推定結果を導出する手順をコンピュータに実行させる推定プログラムであって、
    前記学習済みニューラルネットワークは、(i)エネルギー分布が異なる放射線により被写体を撮影することにより取得された2つの放射線画像、(ii)前記被写体の放射線画像および前記被写体の前記軟部組織を表す軟部画像、または(iii)前記被写体の3次元のCT画像を合成することにより導出された前記被写体を表す合成2次元画像と、前記被写体の軟部組織の組成に関連する情報とを教師データとして用いて学習されてなる、推定プログラム。
JP2021068641A 2021-04-14 2021-04-14 推定装置、方法およびプログラム Pending JP2022163614A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021068641A JP2022163614A (ja) 2021-04-14 2021-04-14 推定装置、方法およびプログラム
US17/717,215 US20220335605A1 (en) 2021-04-14 2022-04-11 Estimation device, estimation method, and estimation program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021068641A JP2022163614A (ja) 2021-04-14 2021-04-14 推定装置、方法およびプログラム

Publications (1)

Publication Number Publication Date
JP2022163614A true JP2022163614A (ja) 2022-10-26

Family

ID=83602536

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021068641A Pending JP2022163614A (ja) 2021-04-14 2021-04-14 推定装置、方法およびプログラム

Country Status (2)

Country Link
US (1) US20220335605A1 (ja)
JP (1) JP2022163614A (ja)

Also Published As

Publication number Publication date
US20220335605A1 (en) 2022-10-20

Similar Documents

Publication Publication Date Title
JP6704374B2 (ja) 体脂肪率測定装置、方法およびプログラム
JP2022140050A (ja) 推定装置、方法およびプログラム
JP2017225525A (ja) 放射線画像処理装置、方法およびプログラム
JP7093233B2 (ja) 放射線撮影装置、放射線撮影方法およびプログラム
US20220287663A1 (en) Estimation device, estimation method, and estimation program
US20220323032A1 (en) Learning device, learning method, and learning program, radiation image processing device, radiation image processing method, and radiation image processing program
Zhao et al. Slot‐scan dual‐energy bone densitometry using motorized X‐ray systems
US20220079543A1 (en) Radiation image processing device and radiation image processing method
JP2022163614A (ja) 推定装置、方法およびプログラム
Dendere et al. Dual-energy X-ray absorptiometry for measurement of phalangeal bone mineral density on a slot-scanning digital radiography system
JP2023012763A (ja) 推定装置、方法およびプログラム
WO2024090050A1 (ja) 画像処理装置、方法およびプログラム、並びに学習装置、方法およびプログラム
WO2023054287A1 (ja) 骨疾患予測装置、方法およびプログラム、学習装置、方法およびプログラム並びに学習済みニューラルネットワーク
JP7241000B2 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
WO2021095447A1 (ja) 画像処理装置、放射線撮影装置、画像処理方法及びプログラム
US20230172576A1 (en) Radiation image processing device, radiation image processing method, and radiation image processing program
US11963810B2 (en) Estimation device, estimation method, and estimation program
JP7254963B2 (ja) 放射線画像処理装置、方法およびプログラム
JP2023047910A (ja) 脂肪量導出装置、方法およびプログラム
US20220249013A1 (en) Motor organ disease prediction device, motor organ disease prediction method, motor organ disease prediction program, learning device, learning method, learning program, and learned neural network
US20230096694A1 (en) Image processing device, image processing method, and image processing program
US20240090861A1 (en) Radiation image processing apparatus, operation method of radiation image processing apparatus, and non-transitory computer readable medium
JP2024040945A (ja) 画像処理装置、方法およびプログラム
CN118043908A (zh) 骨疾病预测装置、方法及程序、学习装置、方法及程序、以及学习完成神经网络
JP2024000885A (ja) 放射線画像処理装置、方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240111