JP7255329B2 - 動態画像解析装置、動態画像解析システム及びプログラム - Google Patents

動態画像解析装置、動態画像解析システム及びプログラム Download PDF

Info

Publication number
JP7255329B2
JP7255329B2 JP2019074282A JP2019074282A JP7255329B2 JP 7255329 B2 JP7255329 B2 JP 7255329B2 JP 2019074282 A JP2019074282 A JP 2019074282A JP 2019074282 A JP2019074282 A JP 2019074282A JP 7255329 B2 JP7255329 B2 JP 7255329B2
Authority
JP
Japan
Prior art keywords
subject
area
volume
calculated
dynamic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019074282A
Other languages
English (en)
Other versions
JP2020171427A (ja
Inventor
昭教 角森
諒一 渡辺
慎介 勝原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2019074282A priority Critical patent/JP7255329B2/ja
Priority to US16/812,689 priority patent/US20200327689A1/en
Publication of JP2020171427A publication Critical patent/JP2020171427A/ja
Application granted granted Critical
Publication of JP7255329B2 publication Critical patent/JP7255329B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • G06T7/0016Biomedical image inspection using an image reference approach involving temporal comparison
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • G06T2207/10021Stereoscopic video; Stereoscopic image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30061Lung

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Geometry (AREA)
  • Quality & Reliability (AREA)
  • Biomedical Technology (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Description

本発明は、動態画像解析装置、動態画像解析システム及びプログラムに関する。
従来、独立して撮影された胸部正面の単純X線画像と胸部側面の単純X線画像の肺野面積から、全肺気量(Total Lung Capacity:TLC)を推定する手法が提案されている(例
えば、非特許文献1参照)。
P.C.Pratt et al., "A Method for the Determination of Total Lung Capacity from Posteroanterior and Lateral Chest Roentgenograms", American Review of Respiratory Disease, 96(3), pp. 548-552, 1967
非特許文献1では、強制最大吸気位の正面と側面の独立した撮影により得られた画像のそれぞれから算出した肺野の面積に基づいて肺野の体積を推定し、推定した体積に基づいてTLCの推定を行っている。しかしながら、両撮影において、強制最大吸気位とみなしたタイミングがずれて肺の大きさが違ってしまうことが多く、精度良く肺野の体積を推定できないため、精度良くTLCの推定ができない。また、画像から肺野の面積を算出する場合、同じ肺野を撮影しても撮影条件によって異なる面積として算出されてしまう場合があるが、非特許文献1においては、特にこの点については考慮されていない。さらに、非特許文献1の技術では、TLCの推定に限定されており、残気量(Residual Volume:RV)などの他の重要な呼吸機能の評価指標(呼吸機能指標)や肺容量曲線を得ることができない。
本発明の課題は、放射線画像による動きのある被写体の体積の推定精度を向上させることにより、被写体の体積に基づいて推定される被写体の機能の評価指標の推定精度を向上させるとともに、単純X線画像から得られなかった被写体の機能の評価指標を取得できるようにすることである。
上記課題を解決するため、発明の動態画像解析装置は、
異なる複数の方向から周期性を持つ被写体の動態を放射線撮影することにより得られた複数の動態画像の各フレーム画像から、前記被写体の動態に関する特徴量を算出する特徴量算出手段と、
前記特徴量算出手段により算出された特徴量に基づいて、前記複数の動態画像間において互いに前記被写体の動態の位相が最も近いフレーム画像の組を少なくとも1組以上抽出する抽出手段と、
前記抽出手段により抽出された組毎のフレーム画像のそれぞれから前記被写体の面積を算出する面積算出手段と、
前記面積算出手段により算出された前記被写体の面積に基づいて、前記組毎に前記被写体の体積を算出する体積算出手段と、
前記複数の動態画像から算出される前記被写体の面積及び体積に影響を与える撮影条件の前記放射線撮影時における設定値及び前記撮影条件の基準値に基づいて、前記面積算出手段により算出された前記被写体の面積又は前記体積算出手段により算出された前記被写体の体積を補正する補正手段と、
前記補正手段により補正された面積に基づいて算出された体積又は前記補正手段により補正された体積に基づいて、前記被写体の機能の評価指標を推定する推定手段と、
を備える。
本発明のプログラムは、
コンピューターを、
異なる複数の方向から周期性を持つ被写体の動態を放射線撮影することにより得られた複数の動態画像の各フレーム画像から、前記被写体の動態に関する特徴量を算出する特徴量算出手段、
前記特徴量算出手段により算出された特徴量に基づいて、前記複数の動態画像間において互いに前記被写体の動態の位相が最も近いフレーム画像の組を少なくとも1組以上抽出する抽出手段、
前記抽出手段により抽出された組毎のフレーム画像のそれぞれから前記被写体の面積を算出する面積算出手段、
前記面積算出手段により算出された前記被写体の面積に基づいて、前記組毎に前記被写体の体積を算出する体積算出手段、
前記複数の動態画像から算出される前記被写体の面積及び体積に影響を与える撮影条件の前記放射線撮影時における設定値及び前記撮影条件の基準値に基づいて、前記面積算出手段により算出された前記被写体の面積又は前記体積算出手段により算出された前記被写体の体積を補正する補正手段、
前記補正手段により補正された面積に基づいて算出された体積又は前記補正手段により補正された体積に基づいて、前記被写体の機能の評価指標を推定する推定手段、
として機能させる。
本発明によれば、放射線画像による動きのある被写体の体積の推定精度を向上させることにより、被写体の体積に基づいて推定される被写体の機能の評価指標の推定精度を向上させることができる。また、単純X線画像から得られなかった被写体の機能の評価指標を取得することが可能となる。
本発明の実施形態における動態画像解析システムの全体構成を示す図である。 図1の撮影用コンソールの制御部により実行される撮影制御処理を示すフローチャートである。 図1の診断用コンソールの制御部により実行される呼吸機能指標推定処理を示すフローチャートである。 (a)は、胸部正面における肺野領域の下端部を示す図、(b)は、胸部側面における肺野領域の下端部を示す図である。 胸部側面の肺野領域の下端部の特定方法を説明するための図である。 胸部正面と胸部側面のフレーム画像から算出される特徴量を説明するための図である。 胸部正面の動態画像と胸部側面の動態画像から抽出されるフレーム画像の例を模式的に示す図である。 肩幅の算出手法を説明するための図である。 肺容量曲線の生成手法を説明するための図である。 呼吸機能指標の推定手法を示す図である。 動態撮影時の呼吸状態の自動判定アルゴリズムを説明するための図である。 呼吸機能指標の推定結果の表示の一例を示す図である。 呼吸機能指標の推定結果の表示の一例を示す図である。 呼吸機能指標の推定結果の表示の一例を示す図である。 呼吸機能指標の推定結果の表示の一例を示す図である。 呼吸機能指標の推定結果の表示の一例を示す図である。 呼吸機能指標の推定結果の表示の一例を示す図である。 呼吸機能指標の推定結果の表示の一例を示す図である。 呼吸機能指標の推定結果の表示の一例を示す図である。
以下、図面を参照して本発明の実施形態について説明する。ただし、発明の範囲は、図示例に限定されない。
〔動態画像解析システム100の構成〕
まず、本実施形態の構成を説明する。
図1に、本実施形態における動態画像解析システム100の全体構成を示す。
図1に示すように、動態画像解析システム100は、撮影装置1と、撮影用コンソール2とが通信ケーブル等により接続され、撮影用コンソール2と、診断用コンソール3とがLAN(Local Area Network)等の通信ネットワークNTを介して接続されて構成されている。動態画像解析システム100を構成する各装置は、DICOM(Digital Image and Communications in Medicine)規格に準じており、各装置間の通信は、DICOMに則って行われる。
〔撮影装置1の構成〕
撮影装置1は、例えば、呼吸運動に伴う肺の膨張及び収縮の形態変化、心臓の拍動等の、周期性(サイクル)を持つ被写体の動態を撮影する撮影手段である。動態撮影とは、被写体に対し、X線等の放射線をパルス状にして所定時間間隔で繰り返し照射するか(パルス照射)、もしくは、低線量率にして途切れなく継続して照射する(連続照射)ことで、被写体の動態を示す複数の画像を取得することをいう。動態撮影により得られた一連の画像を動態画像と呼ぶ。また、動態画像を構成する複数の画像のそれぞれをフレーム画像と呼ぶ。なお、以下の実施形態では、パルス照射により胸部正面及び胸部側面の動態撮影を行う場合を例にとり説明する。
放射線源11は、被写体Mを挟んで放射線検出部13と対向する位置に配置され、放射線照射制御装置12の制御に従って、被写体Mに対し放射線(X線)を照射する。
放射線照射制御装置12は、撮影用コンソール2に接続されており、撮影用コンソール2から入力された放射線照射条件に基づいて放射線源11を制御して放射線撮影を行う。撮影用コンソール2から入力される放射線照射条件は、例えば、パルスレート、パルス幅、パルス間隔、1撮影あたりの撮影フレーム数、X線管電流の値、X線管電圧の値、付加フィルター種、SID(放射線源11の管球と放射線検出部13との最短距離)等である。パルスレートは、1秒あたりの放射線照射回数であり、後述するフレームレートと一致している。パルス幅は、放射線照射1回当たりの放射線照射時間である。パルス間隔は、1回の放射線照射開始から次の放射線照射開始までの時間であり、後述するフレーム間隔と一致している。
放射線検出部13は、FPD(Flat Panel Detector)等の半導体イメージセンサーにより構成される放射線検出器である。FPDは、例えば、ガラス基板等を有しており、基板上の所定位置に、放射線源11から照射されて少なくとも被写体Mを透過した放射線をその強度に応じて検出し、検出した放射線を電気信号に変換して蓄積する複数の検出素子(画素)がマトリックス状に配列されている。各画素は、例えばTFT(Thin Film Transistor)等のスイッチング部を備えて構成されている。FPDにはX線をシンチレーターを介して光電変換素子により電気信号に変換する間接変換型、X線を直接的に電気信号に変換する直接変換型があるが、何れを用いてもよい。
放射線検出部13は、被写体Mを挟んで放射線源11と対向するように設けられている。
読取制御装置14は、撮影用コンソール2に接続されている。読取制御装置14は、撮影用コンソール2から入力された画像読取条件に基づいて放射線検出部13の各画素のスイッチング部を制御して、当該各画素に蓄積された電気信号の読み取りをスイッチングしていき、放射線検出部13に蓄積された電気信号を読み取ることにより、画像データを取得する。画像データは、各画素の濃度値を表す信号値からなる。この画像データがフレーム画像である。読取制御装置14は、取得したフレーム画像を撮影用コンソール2に出力する。画像読取条件は、例えば、フレームレート、フレーム間隔、サンプリングピッチ(画素サイズ)、画像サイズ(マトリックスサイズ)等である。フレームレートは、1秒あたりに取得するフレーム画像数であり、パルスレートと一致している。フレーム間隔は、1回のフレーム画像の取得動作開始から次のフレーム画像の取得動作開始までの時間であり、パルス間隔と一致している。
ここで、放射線照射制御装置12と読取制御装置14は互いに接続され、互いに同期信号をやりとりして放射線照射動作と画像の読み取りの動作を同調させるようになっている。
〔撮影用コンソール2の構成〕
撮影用コンソール2は、放射線照射条件や画像読取条件を撮影装置1に出力して撮影装置1による放射線撮影及び放射線画像の読み取り動作を制御するとともに、撮影装置1により取得された動態画像を撮影技師等の撮影実施者によるポジショニングの確認や診断に適した画像であるか否かの確認用に表示する。
撮影用コンソール2は、図1に示すように、制御部21、記憶部22、操作部23、表示部24、通信部25を備えて構成され、各部はバス26により接続されている。
制御部21は、CPU(Central Processing Unit)、RAM(Random Access Memory
)等により構成される。制御部21のCPUは、操作部23の操作に応じて、記憶部22に記憶されているシステムプログラムや各種処理プログラムを読み出してRAM内に展開し、展開されたプログラムに従って後述する撮影制御処理を始めとする各種処理を実行し、撮影用コンソール2各部の動作や、撮影装置1の放射線照射動作及び読み取り動作を集中制御する。
記憶部22は、不揮発性の半導体メモリーやハードディスク等により構成される。記憶部22は、制御部21で実行される各種プログラムやプログラムにより処理の実行に必要なパラメーター、或いは処理結果等のデータを記憶する。例えば、記憶部22は、図2に示す撮影制御処理を実行するためのプログラムを記憶している。また、記憶部22は、被写体部位(ここでは、胸部とする)に対応付けて放射線照射条件及び画像読取条件を記憶している。各種プログラムは、読取可能なプログラムコードの形態で格納され、制御部21は、当該プログラムコードに従った動作を逐次実行する。
操作部23は、カーソルキー、数字入力キー、及び各種機能キー等を備えたキーボードと、マウス等のポインティングデバイスを備えて構成され、キーボードに対するキー操作やマウス操作により入力された指示信号を制御部21に出力する。また、操作部23は、表示部24の表示画面にタッチパネルを備えても良く、この場合、タッチパネルを介して入力された指示信号を制御部21に出力する。
表示部24は、LCD(Liquid Crystal Display)やCRT(Cathode Ray Tube)等のモニターにより構成され、制御部21から入力される表示信号の指示に従って、操作部23からの入力指示やデータ等を表示する。
通信部25は、LANアダプターやモデムやTA(Terminal Adapter)等を備え、通信ネットワークNTに接続された各装置との間のデータ送受信を制御する。
〔診断用コンソール3の構成〕
診断用コンソール3は、撮影用コンソール2から動態画像を取得し、取得した動態画像や動態画像の解析結果を表示して医師の診断を支援するための動態画像解析装置である。
診断用コンソール3は、図1に示すように、制御部31、記憶部32、操作部33、表示部34、通信部35を備えて構成され、各部はバス36により接続されている。
制御部31は、CPU、RAM等により構成される。制御部31のCPUは、操作部33の操作に応じて、記憶部32に記憶されているシステムプログラムや、各種処理プログラムを読み出してRAM内に展開し、展開されたプログラムに従って、後述する呼吸機能指標推定処理を始めとする各種処理を実行し、診断用コンソール3の各部の動作を集中制御する。制御部31は、特徴量算出手段、抽出手段、面積算出手段、体積算出手段、補正手段、推定手段、取得手段、指標補正手段として機能する。
記憶部32は、不揮発性の半導体メモリーやハードディスク等により構成される。記憶部32は、制御部31で呼吸機能指標推定処理を実行するためのプログラムを始めとする各種プログラムやプログラムによる処理の実行に必要なパラメーター、或いは処理結果等のデータを記憶する。これらの各種プログラムは、読取可能なプログラムコードの形態で格納され、制御部31は、当該プログラムコードに従った動作を逐次実行する。
また、記憶部32には、撮影された動態画像が患者情報(例えば、患者ID、患者の氏名、身長、体重、年齢、性別等)、検査情報(例えば、検査ID、検査日、被写体部位(ここでは、胸部)、撮影方向(正面、側面)、体位(立位、臥位)、撮影方向が側面の場合の放射線検出部13に近い方の肺野(右又は左)、呼吸状態(安静呼吸、深呼吸、安静呼吸及び深呼吸、息止め等)等)に対応付けて記憶されている。
また、記憶部32には、撮影により得られる画像から算出される面積及び体積に影響を与える撮影条件(例えば、SID、被写体Mと放射線検出部13の距離等)、その撮影条件の基準値(例えば、後述するBASESID、BASEsupine等)及び補正係数(例えば、後述するαSID、αsupine等)が対応付けて記憶されている。
また、記憶部32には、被写体の身長や年齢から被写体Mの呼吸機能指標の予測値を算出するための公知の算出式(詳細後述)が記憶されている。
操作部33は、カーソルキー、数字入力キー、及び各種機能キー等を備えたキーボードと、マウス等のポインティングデバイスを備えて構成され、ユーザーによるキーボードに対するキー操作やマウス操作により入力された指示信号を制御部31に出力する。また、操作部33は、表示部34の表示画面にタッチパネルを備えても良く、この場合、タッチパネルを介して入力された指示信号を制御部31に出力する。
表示部34は、LCDやCRT等のモニターにより構成され、制御部31から入力される表示信号の指示に従って、各種表示を行う。なお、表示部34は、診断用コンソール3とは別体の表示装置(例えば、通信部35を介して接続される表示装置)としてもよい。
通信部35は、LANアダプターやモデムやTA等を備え、通信ネットワークNTに接続された各装置との間のデータ送受信を制御する。
〔動態画像解析システム100の動作〕
次に、本実施形態における上記動態画像解析システム100の動作について説明する。
(撮影装置1、撮影用コンソール2の動作)
まず、撮影装置1、撮影用コンソール2による撮影動作について説明する。
図2に、撮影用コンソール2の制御部21において実行される撮影制御処理を示す。撮影制御処理は、制御部21と記憶部22に記憶されているプログラムとの協働により実行される。
まず、撮影実施者により撮影用コンソール2の操作部23が操作され、被検者(被写体M)の患者情報、検査情報の入力が行われる(ステップS1)。
次いで、放射線照射条件が記憶部22から読み出されて放射線照射制御装置12に設定されるとともに、画像読取条件が記憶部22から読み出されて読取制御装置14に設定される(ステップS2)。
次いで、操作部23の操作による放射線照射の指示が待機される(ステップS3)。ここで、撮影実施者は、被写体Mを放射線源11と放射線検出部13の間に配置してポジショニングを行う。また、被検者に対し、呼吸状態(安静呼吸、深呼吸、安静呼吸+深呼吸等)を指示する。撮影準備が整った時点で、操作部23を操作して放射線照射指示を入力する。
操作部23により放射線照射指示が入力されると(ステップS3;YES)、放射線照射制御装置12及び読取制御装置14に撮影開始指示が出力され、動態撮影が開始される(ステップS4)。即ち、放射線照射制御装置12に設定されたパルス間隔で放射線源11により放射線が照射され、放射線検出部13によりフレーム画像が取得される。なお、撮影実施者は、動態撮影中に呼吸状態の指示を行ってもよい。
予め定められたフレーム数の撮影が終了すると、制御部21により放射線照射制御装置12及び読取制御装置14に撮影終了の指示が出力され、撮影動作が停止される。撮影されるフレーム数は、少なくとも1呼吸サイクルが撮影できる枚数である。
撮影により取得されたフレーム画像は順次撮影用コンソール2に入力され、撮影順を示す番号(フレーム番号)と対応付けて記憶部22に記憶されるとともに(ステップS5)、表示部24に表示される(ステップS6)。撮影実施者は、表示された動態画像によりポジショニング等を確認し、撮影により診断に適した画像が取得された(撮影OK)か、再撮影が必要(撮影NG)か、を判断する。そして、操作部23を操作して、判断結果を入力する。
操作部23の所定の操作により撮影OKを示す判断結果が入力されると(ステップS7;YES)、動態撮影で取得された一連のフレーム画像のそれぞれに、動態画像を識別するための識別IDや、患者情報、検査情報、放射線照射条件、画像読取条件、撮影順を示す番号(フレーム番号)等の情報が付帯され(例えば、DICOM形式で画像データのヘッダ領域に書き込まれ)、通信部25を介して診断用コンソール3に送信される(ステップS8)。そして、本処理は終了する。一方、操作部23の所定の操作により撮影NGを示す判断結果が入力されると(ステップS7;NO)、記憶部22に記憶された一連のフレーム画像が削除され(ステップS9)、本処理は終了する。この場合、再撮影が必要となる。
本実施形態では、上記撮影制御処理に従って胸部正面(又は胸部側面)の動態撮影を行った後、胸部側面(又は胸部正面)の動態撮影を行い、胸部正面の動態画像及び胸部側面の動態画像をそれぞれを取得する。
(診断用コンソール3の動作)
次に、診断用コンソール3における動作について説明する。
診断用コンソール3においては、通信部35を介して撮影用コンソール2から動態画像の一連のフレーム画像が受信されると、受信された動態画像が記憶部32に記憶される。
操作部33により記憶部32により記憶されている動態画像の中から同一患者の胸部正面の動態画像及び胸部側面の動態画像が選択され、呼吸機能指標の推定が指示されると、制御部31と記憶部32に記憶されているプログラムとの協働により図3に示す呼吸機能指標推定処理が実行される。呼吸機能指標は、肺の呼吸機能を評価するための評価指標である。
以下、図3を参照して呼吸機能指標推定処理の流れについて説明する。
なお、呼吸機能指標推定処理においては、撮影により取得された全てのフレーム画像からなる動態画像を用いることとしてもよいし、撮影により取得された複数のフレーム画像のうち一部のフレーム画像からなる動態画像を用いることとしてもよい。
まず、選択された胸部正面の動態画像及び胸部側面の動態画像が記憶部32から読み出され、各動態画像の各フレーム画像から肺野輪郭が認識される(ステップS11)。
肺野輪郭の認識は、公知の何れの手法を用いてもよい。
例えば、各フレーム画像を表示部34に表示して、表示した画像上からユーザーが操作部33により指定した輪郭(線や点)に基づいて肺野輪郭を認識することとしてもよい。この場合、例えば、参照文献1に記載のように、指定された輪郭の重心と輪郭上の可動点を通る直線に対する可動点の移動方向に基づいて、指定された輪郭を自動的に修正する手法等を用いて、肺野輪郭の認識精度を向上させることとしてもよい(参照文献1:特許第5814655号公報)。
また、エッジ検出、動的輪郭モデル、領域分割等の公知の画像処理技術を用いて自動的に肺野輪郭を認識してもよい。例えば、参照文献2や参照文献3に記載の手法を用いることができる(参照文献2:特開2004-188202号公報、参照文献3:Francisco M. Carrascal et al., “Automatic calculation of total lung capacity from automatically traced lung boundaries in postero-anterior and lateral digital chest radiographs”, Med. Phys. VOL.25 No.7, pp. 1117-1131, July 1998)。
ここで、図4(a)に、胸部正面の放射線画像の一例を示す。図4(b)に、胸部側面の放射線画像の一例を示す。図4(a)に矢印で示すように、左右肺の下端部の位置は異なるため、図4(b)に矢印で示すように、側面の放射線画像においては、2つの肺野の下端部のエッジが存在する。そこで、例えば、以下の(1)~(3)のいずれかの手法で側面の動態画像の各フレーム画像から両肺の肺野領域の下端部を特定することができる。
(1)肺野領域の最も内側(上側)のエッジを肺野領域の下端部として特定する(図5(a)参照)。
(2)肺野領域の最も外側(下側)のエッジを肺野領域の下端部として特定する(図5(b)参照)。
(3)(1)のエッジと(2)のエッジの代表値(例えば、平均値)を肺野領域の下端部として特定する(図5(c)参照)。(3)の手法は誤差が少ないため好ましい。
次いで、胸部正面と胸部側面の各動態画像の各フレーム画像から、肺野の動態に関する特徴量が算出される(ステップS12)。
ここで、呼吸運動は、呼気位相と吸気位相により構成される。呼気位相は、横隔膜が上がることによって肺から空気が排出され、肺野の領域が小さくなる。これにより肺野の密度は高くなり、動態画像では肺野が低い濃度値(信号値)で描画される。最大呼気位では、横隔膜の位置が最も高い状態となる。吸気位相は、横隔膜が下がることにより肺に空気が取り込まれ、肺野の領域が大きくなる。これにより肺野の密度は低くなり、動態画像では肺野が高い濃度値で描画される。最大吸気位では、横隔膜の位置が最も下がった状態となる。このように、胸部の動態画像の各フレーム画像における肺野内の濃度、肺野の面積、横隔膜の上下位置(或いは、肺尖及び大動脈弓はほとんど動かないため、肺尖と横隔膜の頂点との距離又は大動脈弓と横隔膜の頂点との距離)は、呼吸運動による肺野の動態に関する特徴量となる。
そこで、ステップS12においては、例えば、図6に示すように各フレーム画像の肺尖と横隔膜の頂点との距離Lを肺野の動態に関する特徴量として算出する。
次いで、算出された特徴量に基づいて、胸部正面の動態画像と胸部側面の動態画像から呼吸位相が最も近いフレーム画像の組が抽出される(ステップS13)。
図7は、胸部正面の動態画像と胸部側面の動態画像の肺尖-横隔膜間の距離Lの時間変化をプロットしたグラフの一例である。ステップS13においては、例えば、図7の矢印で示すように、胸部正面と胸部側面の肺尖-横隔膜間の距離Lの値が最も近い(差分が最も小さい)フレーム画像同士からなる組を呼吸位相が最も近いフレーム画像の組として抽出する。本実施形態では、胸部正面の動態画像と胸部側面の動態画像から、互いに算出された特徴量の値が最も近いフレーム画像の組を時間軸に沿って複数抽出する。抽出する間隔は、等間隔であっても不等間隔であってもよい。正面、側面でフレームレートが異なる場合、低フレームレートのほうに合わせてフレーム画像の抽出を行ってもよい。
次いで、抽出された組毎の胸部正面と胸部側面のフレーム画像のそれぞれから、肺野面積が算出される(ステップS14)。
ステップS13においては、図6に示すように、胸部正面のフレーム画像における右肺の面積S_PA_R、胸部正面のフレーム画像における左肺の面積S_PA_L、胸部側面のフレーム画像における肺野の面積S_LATを算出する。各肺野の面積S(S_PA_R、S_PA_L、S_LAT)は、各肺野の肺野輪郭内の画素数NoPとサンプリングピッチSPに基づいて、(式1)により求めることができる。
S = NoP×SP×SP ・・・(式1)
なお、ステップS11で認識した肺野輪郭内を肺野領域として肺野面積を求める他、側面については、以下の(1)~(2)の手法で各フレーム画像から肺野面積を求めることもできる。この場合、左右肺のサイズを考慮した体積の推定を行うことができる。
(1)胸部側面のフレーム画像から左右の肺野面積を左右肺の区別なしに算出する。すなわち、図4(a)に示す上側のエッジを下端部とする肺野面積と、図4(b)に示す下側のエッジを下端部とする肺野面積を算出する。一方の面積をS_LAT_A、他方の面積をS_LAT_Bとする。
(2)両肺野の面積を加算し、2で除算した値をS_LATとする。
S_LAT=(S_LAT_A +S_LAT_B)/2・・・(式2)
また、放射線撮影では、被写体Mと放射線検出部13の距離が離れているほど被写体が大きく映る。胸部正面の画像では、左肺と右肺の放射線検出部13との距離は変わらないが、胸部側面の画像では、放射線検出部13に遠い側の肺野が実際より大きく映る。そこで、側面の動態画像から左肺と右肺が区別できる場合、側面の動態画像における放射線検出部13に遠い側の肺野領域を特定し、放射線検出部13に遠い側の肺野領域の面積を補正することが好ましい。この面積の補正は、以下の(1)~(5)により行うことができる。
(1)胸部側面のフレーム画像において、撮影時に放射線検出部13に遠い側に配置された肺野を特定する。例えば、動態画像に付帯されている検査情報等から特定することができる。ここでは、撮影時に放射線検出部13に遠い側に配置された肺野が左肺であることとして説明する。
(2)側面のフレーム画像から右肺の肺野面積S_LAT_R、左肺の肺野面積S_LAT_Lを求める。
(3)正面画像から肩幅Widthを算出する。例えば、図8に示すように、画像上端から下向きに走査し、素抜けの信号値→被写体の信号値→素抜けの信号値になったy軸最小値の点を右側と左側でそれぞれ求め、(xa,ya)、(xb,yb)とする。素抜けの信号値及び被写体の信号値は、予め設定された閾値により分類することができる。xb-xaを肩幅Widthとして算出する。
(4)放射線源11の管球と左肺との距離は、SID-Widthで表すことができ、左肺の拡大率は、SID/(SID-Width)となる。そこで、(式3)により左肺野の面積S_LAT_Lを補正し、補正後の左肺の面積S_LAT_Lcorrectedを求める。
S_LAT_Lcorrected = S_LAT_L×(SID-Width)/SID・・・(式3)
(5)(式4)により側面の肺野面積S_LATを求める。
S_LAT =(S_LAT_R+S_LAT_Lcorrected)/2・・・(式4)
これにより、精度よく肺野体積を推定することが可能となるため、精度よく呼吸機能指標を推定することが可能となる。
また、無気肺部は、肺胞がつぶれており、呼吸機能を果たしていない部分である。そのため、無気肺部は呼吸機能を推定するための肺野体積から除外する必要がある。そこで、各フレーム画像から肺野面積を算出する際、無気肺部を除いた面積を算出することが好ましい。無気肺部の除外は、以下の(1)~(3)により行うことができる。
(1)無気肺部は周りの信号値(濃度値)よりも低い。そこで、肺野領域内で予め定められた閾値よりも信号値が低い領域を無気肺部として抽出する。
(2)抽出した無気肺部の面積を算出する。
(3)肺野面積(S_PA_R、S_PA_L、S_LAT)から無気肺部の面積を減算する。
これにより、呼吸機能を果たしている肺野領域のみを用いて呼吸機能指標を推定することが可能となり、より正確に呼吸機能指標を推定することが可能となる。
次いで、算出された肺野面積が、動態画像のフレーム画像から算出される被写体Mの面積及び体積に影響を与える撮影条件の動態撮影時の設定値に基づいて補正される(ステップS15)。
ステップS15においては、例えば、記憶部32が参照され、撮影により得られた画像に基づいて算出される面積及び体積に影響を与える撮影条件及び各撮影条件の基準値及び補正係数が読み出される。ここで、撮影により得られた画像に基づいて算出される面積及び体積に影響を与える撮影条件としては、例えば、SID、被写体Mと放射線検出部13の距離等が挙げられる。また、今回の検査の動態撮影時における上記各撮影条件の設定値が取得される。動態撮影時の撮影条件の設定値は、例えば、動態画像に付帯されている情報(放射線照射条件、画像読取条件、検査情報等)から取得することができる。被写体Mと放射線検出部13の距離については、例えば、予め記憶部32に臥位撮影台と放射線検出部13との隙間の距離を記憶しておき、臥位での撮影の場合に、記憶された距離の値を読み出して取得すればよい(立位の場合はこの撮影条件に基づく補正は行わない)。そして、得られた撮影条件の基準値及び補正係数と動態撮影時の設定値とに基づいて、肺野面積が補正される。
SIDが異なると、放射線画像上の被写体の大きさが変わる(SIDが短いほど被写体が大きく映る)。そのため、同じ被写体を撮影してもSIDによって肺野面積の大きさが変わってしまい、フレーム画像に基づく体積の推定に影響する。そこで、SIDの基準値BASESIDと補正係数αSIDを用いて、右肺の面積S_PA_R、左肺の面積S_PA_L、側面肺野の面積S_LATを(式5)により補正する。なお、動態撮影時のSIDの設定値をSID(m)、画像から算出した面積(S_PA_R、S_PA_L、S_LAT)をS、補正後の面積(S_PA_R、S_PA_L、S_LAT)をScorrectedとする。
Scorrected = S×SID/BASESID×αSID ・・・(式5)
被写体Mと放射線検出部13の間に距離があると、放射線画像上の被写体Mの大きさが変わる(距離が大きいほど被写体Mが大きく映る)ため、同じ被写体を撮影しても算出される肺野面積が変わってしまい、フレーム画像に基づく体積の推定に影響する。立位の撮影台の場合は、被写体Mと放射線検出部13を接触させて撮影を行うが、臥位の撮影台は、被写体台の下に放射線検出部13が装着されるため、被写体Mと放射線検出部13の間に隙間が生じる。そこで、被写体Mと放射線検出部13の距離の基準値BASEsupineと補正係数αsupineを用いて、右肺の面積S_PA_R、左肺の面積S_PA_L、側面肺野の面積S_LATを(式6)により補正する。なお、動態撮影時の被写体Mと放射線検出部13の距離の設定値をD(μm)、画像から算出した面積(S_PA_R、S_PA_L、S_LAT)をS、補正後の面積(S_PA_R、S_PA_L、S_LAT)をScorrectedとする。
Scorrected = S×BASEsupine/D×αsupine・・・(式6)
次いで、算出された(補正された)組毎の胸部正面のフレーム画像と胸部側面のフレーム画像の肺野面積に基づいて肺野の体積が推定される(ステップS16)
肺野の体積は、例えば、非特許文献1に記載のように、下記の(式7)、(式8)により推定することができる。
X線画像から簡易的に算出される肺野の体積=右肺の体積 + 左肺の体積
=(S_PA_R × S_LAT)^(3/4) + (S_PA_L × S_LAT)^(3/4) ・・・(式7)
肺野の体積の推定値 = 0.67 ×(X線画像から簡易的に算出される肺野の体積)+ 160
[ml] ・・・(式8)
なお、正面と側面の撮影条件が同じである場合、ステップS15で説明した撮影条件に基づく肺野面積の補正を行わず、(式7)で算出された肺野の体積を補正してもよい。例えば、動態撮影時のSIDの設定値が基準値と異なる場合は、βSIDを補正係数として、(式7)で算出された体積に(SID/BASESID×βSID)^(3/4)を乗算することで補正可能である。また、動態撮影時の被写体Mと放射線検出部13の間の距離の設定値が基準値と異なる場合は、βsupineを補正係数として、(式7)で算出された体積に(BASEsupine/D×βsupine)^(3/4)を乗算することで補正可能である。
次いで、推定された肺野の体積に基づいて、呼吸機能指標が推定される(ステップS17)。
例えば、図9に示すように、ステップS17で推定された肺野の体積を時間軸に沿ってプロットして補間することにより肺野の体積の時間変化を示す波形を生成し、生成した波形を肺容量曲線として推定する。また、図10に示すように、肺容量曲線の矢印で示す各点(ピーク)の値に基づいて、TLC、RV等の、スパイロメーターでは測定不可能な呼吸機能指標や、IRV(Inspiratory Reserve Volume)、IC(Inspiratory Capacity)、VC(Vital Capacity)等の呼吸機能検査で得られるその他の呼吸機能指標を推定することができる。例えば、TLCは、強制最大吸気位(深呼吸時の最大吸気位)での肺の体積と推定することができる。RVは、強制最大呼気位(深呼吸時の最大呼気位)での肺の体積と推定することができる。
なお、撮影された動態画像に安静呼吸が含まれているか、深呼吸が含まれているか、双方が含まれているかによって、推定可能な呼吸機能指標が異なる。例えば、TLC、RVは、深呼吸の画像から推定可能である。FRCは、安静呼吸の画像から推定可能である。そこで、動態撮影時の呼吸状態に基づいて、推定する呼吸機能指標の種類が決定される。動態撮影時の呼吸状態は、例えば、動態画像の付帯情報に基づいて特定することができる。または、動態画像から生成された肺容量曲線を解析して動態撮影時の呼吸状態を判定してもよい。
動態撮影時の呼吸状態の自動判定は、以下の(1)~(4)のアルゴリズムにより行うことができる。以下、図11を参照して動態撮影時の呼吸状態の自動判定アルゴリズムについて説明する。
なお、肺容量曲線の代わりに、正面又は側面の動態画像から求めた画像全体の信号値、横隔膜の位置、又は肺野面積の時間変化を示す波形を用いてもよい。
(1)まず、肺容量曲線の最大値Maxと最小値Minの値を求める。
(2)中央値Med=(Max+Min)/2を算出し、その点Mで肺容量曲線に基準線を引く。
(3)基準線から+方向の極値(上に凸のピーク)をMaxn、-方向の極値(下に凸のピーク)をMinn(n=1、2、3・・・)として、Maxn、Minnの組み合わせのそれぞれについて、下記条件にて判定を行う。
(3-1)Maxn-Minn>Tht かつMaxn-Minn<Thdであれば、安静呼吸Flagt=1(真)と判定する。Flagd、Flagnは0(偽)と判定する。
(3-2)Maxn-Minn>Thdであれば、深呼吸Flagd=1と判定する。Flagt、Flagnは0と判定する。
(3-3)上記以外はFlagn=1と判定する。Flagt、Flagdは0と判定する。
ただし、安静呼吸用閾値Tht << 深呼吸用の閾値Thdである。また、各FlagはBool型である。
(4)全ての極値を探索し終えた際のFlagtのORを取り、1であれば、安静呼吸が含まれていると判定する。また、Flagdの判定のORを取り、1であれば深呼吸が含まれていると判定する。FlagtとFlagdの双方が1であれば安静呼吸と深呼吸が含まれていると判定する。また、Flagt=1のフレーム画像の区間は、安静呼吸の区間と判定することができ、Flagd=1のフレーム画像の区間は、深呼吸の区間と判定することができる。
上記の呼吸状態の判定アルゴリズムの(1)~(4)を行えば、図11に示すように安静呼吸と深呼吸が混じっている場合において、どのフレーム番号が安静呼吸(安静呼気位、安静吸気位)、深呼吸(強制最大呼気位、強制最大吸気位)に該当するのかを自動的に判定して呼吸機能指標を推定することが可能となる。
なお、図11に示すように、動態画像中に、推定に使用する呼吸位相(例えば、安静呼気位、安静吸気位、強制最大呼気位、強制最大吸気位のうちいずれか)が複数含まれている場合には、呼吸が安定している最後の周期のものを呼吸機能指標の推定に使用することが好ましい。または、複数周期のピークの代表値(例えば、最大値、最小値、平均値等)を算出して呼吸機能指標の推定に用いてもよい。または、肺気量曲線又はステップS12で算出した特徴量の時間変化を示す波形を表示部34に表示してユーザーが操作部33により指定したものを使用することとしてもよい。特徴量の波形を表示する場合には、正面と側面のそれぞれで算出された特徴量の波形を並べて(例えば、上下に並べて)表示してもよい。一致する位相の対応がわかりやすくなるように基準点(例えば、強制最大吸気位)に合わせて位相をずらして並べてもよい。
ここで、VCは、スパイロメーターで計測することができる呼吸機能指標である。そこで、スパイロメーターでのVCの実測値を取得し(操作部33による入力又は通信部35を介してVCの実測値をスパイロメーター又は電子カルテシステム等から取得し)、取得されたVCRealと動態画像から算出したVC(VCIm)に基づいて補正係数Cを算出し、補正係数Cに基づいて、動態画像から算出した他の種類の呼吸機能指標(例えば、TLCやRV)の値を補正してもよい。補正係数Cは、以下の(式9)により求めることができる。
C = VCReal/VCIm ・・・(式9)
このように、動態画像とスパイロメーターによる検査を組み合わせることにより、TLC、RV等のスパイロメーターで測定できない呼吸機能指標を、体プレチスモグラフィー等の高コストで患者にとっても負担の大きい精密肺機能検査を実施せずに高精度に算出することができる。
なお、(式9)の算出結果が予め定められた範囲を超えた場合は、アラートを表示又は音声により出力することが好ましい。
そして、推定された呼吸機能指標が表示部34に表示され(ステップS18)、呼吸機能指標推定処理は終了する。呼吸機能指標とともに、ステップS13で抽出されたフレーム画像の組を並べて表示することとしてもよい。
ここで、ステップS18において表示部34に表示される呼吸機能指標の推定結果表示の例について説明する。
例えば、図12に示すように、正面と側面の代表フレーム画像(例えば、強制最大吸気位の画像等)を表示するとともに、呼吸機能指標の推定値を数値でそのまま表示する。
または、図13に示すように、正面と側面の代表フレーム画像(例えば、強制最大吸気位の画像等)を表示するとともに、呼吸機能指標の推定値を肺気量分画のグラフ上に表示する。これにより、推定した呼吸機能指標を直感的に把握することが可能となる。
または、図14に示すように、正面と側面の代表フレーム画像(例えば、強制最大吸気位の画像等)を表示するとともに、患者の性別、身長、年齢、体重等から算出される呼吸機能指標の予測値に対する、呼吸機能指標の推定値の割合(%)を表示する。また、かっこ内には、(推定値/予測値)を表示する。これにより、診療との親和性の高い表示を行うことができる。なお、予測値算出に必要な患者の性別、身長、年齢、体重等の情報は、動態画像の付帯情報から取得してもよいし、画面上で入力することとしてもよい。
ここで、呼吸機能指標の予測値は、記憶部32に記憶されている、呼吸機能指標の予測値を算出するための公知の算出式を用いて算出することとしてもよいし、性別、身長、年齢、体重等の情報と呼吸機能指標の実測値とを対応付けた大量のデータから機械学習等により算出した算出式を用いて予測値を算出してもよい。公知の算出式としては、例えば、参照文献4に記載されている、Baldwin 式(VC-B 式)、Berglund 式(FEV1-B 式)、VC 予測式(VC-J 式)、FEV1予測式(FEV1-J 式)や、参照文献5に記載されている、性別、身長、年齢からのTLC、RV、FRCの予測式等を用いることができる(参照文献4:青木美江、 長内忍、小笠壽之、山崎典美、石田健介、中田寛章、中尾祥子、豊嶋恵理、長谷部直幸、大崎能伸著,「従来から使用されてきた肺活量および1秒量予測式と日本人予測式との比較検討」,日呼吸会誌 48(5),2010.参照文献5:J. Stocks, Ph.H. Quanjer,“REFERENCE VALUES FOR RESIDUAL VOLUME, FUNCTIONAL RESIDUAL CAPACITY AND TOTAL LUNG CAPACITY”, Eur Respir J, 1995, 8, P.492-P.506)。
または、図15に示すように、正面と側面の代表フレーム画像(例えば、強制最大吸気位の画像等)を表示するとともに、患者の性別、身長、年齢、体重等から算出される呼吸機能指標の予測値に対する、呼吸機能指標の推定値の割合(%)をスケールバー上(又はレーダーチャート上)に表示する。これにより、患者の性別、身長、年齢、体重等から算出される呼吸機能指標の予測値に対する、呼吸機能指標の推定値の割合(%)をユーザーが直感的に容易に把握することが可能となる。
または、図16に示すように、正面と側面の代表フレーム画像(例えば、強制最大吸気位の画像等)を表示するとともに、各呼吸機能指標の推定値の数値に、推定に用いた正面と側面のフレームNo.(フレーム番号)を併記する。これにより、呼吸機能指標の推定の根拠となるフレーム画像を確認しやすくすることができる。
または、図17に示すように、肺気量分画のグラフ上に、算出した各呼吸機能指標の推定値と、推定に用いた正面のフレーム画像及び側面のフレーム画像のサムネイル画像と、それぞれのフレーム画像のフレーム番号(図17において#を付して示す)を対応付けて表示する。これにより、呼吸機能指標の推定の根拠となるフレーム画像をユーザーが容易に確認することが可能となる。なお、図17に示すように、算出した全ての呼吸機能指標に関する情報を表示するのではなく、例えば、操作部33で肺気量分画上を押下すると、押下された位置に応じた呼吸機能指標に関する情報が表示されるようにしてもよい。
または、図18に示すように、正面と側面の代表フレーム画像(例えば、強制最大吸気位の画像等)を表示するとともに、呼吸機能指標の推定値と併せて、スパイロメーターの検査結果(実測値)を表示する。これにより、ユーザーは容易にスパイロメーターの実測値を参照することが可能となる。
また、上述のように、撮影時の呼吸状態によって、推定可能な呼吸機能指標の種類が異なる。そこで、撮影時の呼吸状態によって推定されなかった指標については、図19に示すように、マスキングして表示することとしてもよい。これにより、マスキングされている指標については、ユーザーが撮影時の呼吸状態によって推定されなかったことを認識することができる。
なお、正面、側面のそれぞれについて、安静呼吸状態下での撮影、深呼吸状態下での撮影の2撮影が行われ、正面、側面のそれぞれに安静呼吸状態で撮影した動態画像、深呼吸状態で撮影した動態画像が存在する場合、制御部31は、動態画像の付帯情報を参照するか、又は撮影単位で上述の呼吸状態の自動判定アルゴリズムを実行して各動態画像が安静呼吸の画像であるか深呼吸の画像であるかを判定し、異なる撮影方向(正面、側面)で同一の呼吸状態で撮影された動態画像を用いて呼吸機能指標推定処理を実行する。このようにすれば、誤って異なる呼吸状態で撮影された正面と側面の動態画像を用いて呼吸機能指標が推定されることを防止することができる。
以上説明したように、診断用コンソール3の制御部31によれば、胸部正面の動態画像と胸部側面の動態画像において、呼吸運動による肺野の動態に関する特徴量が最も近いフレーム画像同士の組を抽出し、抽出された組毎のフレーム画像の肺野領域に基づいて肺野の体積を推定し、推定された体積に基づいて呼吸機能指標を推定する。したがって、肺野の動態の位相が最も近い、肺野の大きさが略揃ったときの胸部正面と胸部側面のフレーム画像から肺野の体積を推定することができ、肺野の体積の推定精度を向上させることができるとともに、呼吸機能指標の推定精度を向上させることができる。また、肺容量曲線を始めとする、呼吸機能検査で得られるTLC以外の呼吸機能指標についても推定することが可能となる。
また、制御部31は、動態画像から算出される被写体の面積及び体積に影響を与える撮影条件の放射線撮影時における設定値に基づいて、肺野の体積を推定するために胸部正面と胸部側面のフレーム画像から算出された肺野面積又は肺野体積を補正し、補正された面積に基づいて算出された体積又は補正された体積に基づいて、肺野の呼吸機能指標を推定する。したがって、推定された体積が撮影条件によって変わってしまうことを抑制し、肺野の体積の推定精度を向上させることができるとともに、呼吸機能指標の推定精度を向上させることができる。
また、制御部31は、スパイロメトリー検査等の他の検査による呼吸機能指標の実測値を取得し、取得された実測値と同じ種類の呼吸機能指標の推定結果に基づいて、推定された他の種類の呼吸機能指標の推定結果を補正する。したがって、TLC、RV等のスパイロメーターで測定できない呼吸機能指標を、体プレチスモグラフィー等の高コストで患者にとっても負担の大きい精密肺機能検査を実施せずに高精度に推定することができる。
また、制御部31は、推定された評価指標を表示部34に表示させるので、ユーザーは、推定された呼吸機能指標を確認することができる。
また、制御部31は、さらに、複数の動態画像から抽出されたフレーム画像の組を並べて表示するので、ユーザーは、呼吸機能指標の推定に用いた動態画像を確認することができる。
なお、上記実施形態における記述内容は、本発明の好適な一例であり、これに限定されるものではない。
例えば、上記実施形態においては、肺野の動態に関する特徴量として肺尖と横隔膜の頂点との距離を用いることとしたが、これに限定されず、呼吸により位置が殆ど変化しないと見なせる構造物上のある位置と呼吸位相に応じて位置が変化する構造物上のある位置を胸部正面と胸部側面の画像の両方で指定できるのであれば、それらの距離を用いても同様の効果が得られる。例えば、大動脈弓と横隔膜の頂点の距離、第三胸椎上端と横隔膜の頂点等を特徴量としてもよい。さらに、特徴量は距離に限定されるものではなく、例えば、肺野面積、肺野内の信号値(例えば、平均値、最大値、最小値等の代表値)等を特徴量としてもよい。上述のように、これらは呼吸による肺の動態に応じて変化するものであり、呼吸よる肺野の大きさの変化に非常に高い相関がある特徴量である。なお、肺野面積及び肺野内の濃度値は、同じ位相であっても正面の画像と側面の画像で絶対値が異なるため、特徴量として用いる際には、例えば、最大値と最小値を使って規格化して用いる。
また、例えば、上記実施形態においては、胸部正面と胸部側面の画像から算出した肺野の面積から肺野の体積を求める手法を用いた例について説明したが、胸部正面と胸部側面の画像を用いて肺野の体積を求める手法としては、上記に限定されない。
例えば、参照文献3や参照文献6に記載のように、肺野の断面形状が楕円形であり、肺野が一連の楕円形の円筒形として表されているとの知見に基づいて肺野の体積を求めることとしてもよい。例えば、胸部正面及び胸部側面のフレーム画像から肺野(胸郭)や心臓、脊柱等の領域を認識し、両画像を同じ垂直平面内で整列させ、それらを多数の水平スライスに分割し、スライス内の肺野及び肺野内の各構造物(例えば、心臓、脊椎等)の直径(胸部正面画像における各構造物領域の幅)及び厚さ(胸部側面画像の各構造物領域の幅)を求めて各スライスにおける肺野及び構造物の断面領域(楕円)の面積を推定し、肺野の断面領域の面積から各構造物の断面領域の面積を差し引いて、全てのスライスからの情報を合計することにより、肺野の体積を求めることとしてもよい(参照文献6:R J Pierce et al. “Estimation of lung volumes from chest radiographs using shape information”, Thorax 1979 34: 726-734)。また、この手法により算出される面積や体積についても、撮影により得られる画像に基づいて算出される面積や体積に影響を与える撮影条件の設定値に基づいて補正を行うことが好ましい。
上記の肺の断面形状が楕円であるとの知見に基づく肺の体積の推定手法(楕円に基づく体積の推定手法と呼ぶ)では、胸部正面と胸部側面のフレーム画像から心臓等の構造物の領域を算出する必要があるが、心臓は、心拍に伴ってその大きさが変化するため、肺野のみならず、心臓についても胸部正面と胸部側面の心周期における位相が最も近いフレーム画像の組を抽出し、抽出したフレーム画像の組に基づいて体積を求めることが好ましい。
また、上記実施形態においては、本発明を胸部正面と胸部側面の動態画像から呼吸機能指標を推定する場合に適用した例について説明したが、心機能の評価指標を推定する場合にも本発明を適用することができる。例えば、制御部31は、胸部正面と胸部側面の動態画像の各フレーム画像から心臓輪郭を認識して心臓の動態に関する特徴量を算出し、算出した特徴量が心拡張末期及び/又は心収縮末期付近で最も近いフレーム画像の組を抽出し、抽出した胸部正面と胸部側面のフレーム画像から心臓の面積を算出し、算出した正面と側面の面積に基づいて心臓の体積を推定し、推定した体積に基づいて心機能の評価指標を推定することとしてもよい。心機能を評価する指標としては、例えば、心拡張末期及び/又は心収縮末期の心臓の体積を挙げることができる。心機能の評価指標を算出する際に動態画像から算出される心臓の面積や体積についても、上記実施形態と同様に、撮影により得られる画像に基づいて算出される面積や体積に影響を与える撮影条件の撮影時の設定値に基づいて補正を行うことが好ましい。そして、補正された面積に基づいて算出された体積又は補正された体積に基づいて心機能の評価指標を算出することが好ましい。
なお、心臓輪郭の認識については、ユーザー操作による手動による心臓輪郭の指定に基づいて認識してもよいし、エッジ検出、動的輪郭モデル、領域分割等の公知の画像処理技術を用いて自動的に認識してもよい。心臓の体積の推定手法としては、例えば、参照文献4に記載のように、楕円に基づく体積の推定を用いることができる。
心臓の動態に関する特徴量としては、例えば、心臓領域の面積、幅、濃度の高周波成分(例えば、平均値、最大値、最小値等の代表値)等を用いることができる。これらは心拍による心臓の動態に応じて変化するものであり、心拍による心臓の大きさの変化に非常に高い相関がある特徴量である。なお、心臓領域の面積、幅、濃度の高周波成分の値は、心周期における同じ位相で撮影したものであっても正面の画像と側面の画像で絶対値が異なるため、特徴量として用いる際には、例えば、最大値と最小値を使って規格化して用いる。
心拡張末期及び/又は心収縮末期付近のフレーム画像であるか否かは、例えば、フレーム画像から算出した特徴量の値が予め設定された範囲内であるか否かに基づいて判断することができる。
また、上記実施形態のステップS13においては、胸部正面の動態画像と胸部側面の動態画像から複数組のフレーム画像の組を抽出することとして説明したが、これに限定されず、1組のフレーム画像の組を抽出することとしてもよい。
例えば、呼吸機能指標としてTLCのみを求める場合には、胸部正面の動態画像と胸部側面の動態画像から、算出された特徴量の値が強制最大吸気位付近(深呼吸時の最大吸気位付近)において最も近いフレーム画像の組を抽出し、抽出されたフレーム画像に基づいて肺野の体積を求めてTLCを推定すればよい。また、例えば、呼吸機能指標としてRVのみを求める場合には、胸部正面の動態画像と胸部側面の動態画像から、算出された特徴量の値が強制最大呼気位付近(深呼吸時の最大呼気位付近)において最も近いフレーム画像の組を抽出し、抽出されたフレーム画像に基づいて肺野の体積を求めてRVを推定すればよい。これにより、処理時間を短縮することができる。所定の呼吸位相付近のフレーム画像であるか否かは、例えば、フレーム画像から算出した特徴量の値が予め設定された範囲内であるか否かに基づいて判断することができる。
また、上記実施形態においては、正面と側面の異なる2方向から撮影した動態画像を用いて被写体の体積を推定する場合を例にとり説明したが、撮影する方向は正面と側面に限定されず、他の異なる複数の方向から撮影された動態画像を用いて被写体の体積を推定することとしてもよい。
また、上記実施形態においては、肺野や心臓を被写体とした動態画像に本願発明を適用した場合を例にとり説明したが、例えば、手足の関節等の他の部位を被写体とした動態画像に本発明を適用することとしてもよい。
また、例えば、上記の説明では、本発明に係るプログラムのコンピューター読み取り可能な媒体としてハードディスクや半導体の不揮発性メモリー等を使用した例を開示したが、この例に限定されない。その他のコンピューター読み取り可能な媒体として、CD-ROM等の可搬型記録媒体を適用することが可能である。また、本発明に係るプログラムのデータを通信回線を介して提供する媒体として、キャリアウエーブ(搬送波)も適用される。
その他、動態画像解析システムを構成する各装置の細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
100 動態画像解析システム
1 撮影装置
11 放射線源
12 放射線照射制御装置
13 放射線検出部
14 読取制御装置
2 撮影用コンソール
21 制御部
22 記憶部
23 操作部
24 表示部
25 通信部
26 バス
3 診断用コンソール
31 制御部
32 記憶部
33 操作部
34 表示部
35 通信部
36 バス

Claims (8)

  1. 異なる複数の方向から周期性を持つ被写体の動態を放射線撮影することにより得られた複数の動態画像の各フレーム画像から、前記被写体の動態に関する特徴量を算出する特徴量算出手段と、
    前記特徴量算出手段により算出された特徴量に基づいて、前記複数の動態画像間において互いに前記被写体の動態の位相が最も近いフレーム画像の組を少なくとも1組以上抽出する抽出手段と、
    前記抽出手段により抽出された組毎のフレーム画像のそれぞれから前記被写体の面積を算出する面積算出手段と、
    前記面積算出手段により算出された前記被写体の面積に基づいて、前記組毎に前記被写体の体積を算出する体積算出手段と、
    前記複数の動態画像から算出される前記被写体の面積及び体積に影響を与える撮影条件の前記放射線撮影時における設定値及び前記撮影条件の基準値に基づいて、前記面積算出手段により算出された前記被写体の面積又は前記体積算出手段により算出された前記被写体の体積を補正する補正手段と、
    前記補正手段により補正された面積に基づいて算出された体積又は前記補正手段により補正された体積に基づいて、前記被写体の機能の評価指標を推定する推定手段と、
    を備える動態画像解析装置。
  2. 前記撮影条件は、前記放射線撮影を行ったときの放射線源の管球と放射線検出器の距離又は前記被写体と前記放射線検出器の距離のいずれかを含む請求項1に記載の動態画像解析装置。
  3. 前記推定手段は、複数種類の前記評価指標を推定し、
    他の検査による前記評価指標の実測値を取得する取得手段と、
    前記取得手段により取得された実測値と同じ種類の前記評価指標の推定結果に基づいて、前記推定手段により推定された他の種類の評価指標の推定結果を補正する指標補正手段をさらに備える請求項1又は2に記載の動態画像解析装置。
  4. 前記複数の動態画像は、胸部正面の動態画像と胸部側面の動態画像であり、
    前記被写体の機能の評価指標は、呼吸機能の評価指標である請求項1~3のいずれか一項に記載の動態画像解析装置。
  5. 前記推定手段により推定された評価指標を表示する表示手段を備える請求項1~4のいずれか一項に記載の動態画像解析装置。
  6. 前記表示手段は、さらに、前記抽出手段により前記複数の動態画像から抽出されたフレーム画像の組を並べて表示する請求項5に記載の動態画像解析装置。
  7. 被写体の動態を放射線撮影する撮影装置と、
    請求項1~4のいずれか一項に記載の動態画像解析装置と、
    前記推定手段により推定された評価指標を表示する表示装置と、
    を備える動態画像解析システム。
  8. コンピューターを、
    異なる複数の方向から周期性を持つ被写体の動態を放射線撮影することにより得られた複数の動態画像の各フレーム画像から、前記被写体の動態に関する特徴量を算出する特徴量算出手段、
    前記特徴量算出手段により算出された特徴量に基づいて、前記複数の動態画像間において互いに前記被写体の動態の位相が最も近いフレーム画像の組を少なくとも1組以上抽出する抽出手段、
    前記抽出手段により抽出された組毎のフレーム画像のそれぞれから前記被写体の面積を算出する面積算出手段、
    前記面積算出手段により算出された前記被写体の面積に基づいて、前記組毎に前記被写体の体積を算出する体積算出手段、
    前記複数の動態画像から算出される前記被写体の面積及び体積に影響を与える撮影条件の前記放射線撮影時における設定値及び前記撮影条件の基準値に基づいて、前記面積算出手段により算出された前記被写体の面積又は前記体積算出手段により算出された前記被写体の体積を補正する補正手段、
    前記補正手段により補正された面積に基づいて算出された体積又は前記補正手段により補正された体積に基づいて、前記被写体の機能の評価指標を推定する推定手段、
    として機能させるためのプログラム。
JP2019074282A 2019-04-09 2019-04-09 動態画像解析装置、動態画像解析システム及びプログラム Active JP7255329B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019074282A JP7255329B2 (ja) 2019-04-09 2019-04-09 動態画像解析装置、動態画像解析システム及びプログラム
US16/812,689 US20200327689A1 (en) 2019-04-09 2020-03-09 Dynamic image analysis apparatus, dynamic image analysis system and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019074282A JP7255329B2 (ja) 2019-04-09 2019-04-09 動態画像解析装置、動態画像解析システム及びプログラム

Publications (2)

Publication Number Publication Date
JP2020171427A JP2020171427A (ja) 2020-10-22
JP7255329B2 true JP7255329B2 (ja) 2023-04-11

Family

ID=72748023

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019074282A Active JP7255329B2 (ja) 2019-04-09 2019-04-09 動態画像解析装置、動態画像解析システム及びプログラム

Country Status (2)

Country Link
US (1) US20200327689A1 (ja)
JP (1) JP7255329B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022169858A1 (en) * 2021-02-03 2022-08-11 The Regents Of The University Of California Methods for pulmonary function testing with machine learning analysis and systems for same

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009153678A (ja) 2007-12-26 2009-07-16 Konica Minolta Medical & Graphic Inc 動態画像処理システム
US20100152600A1 (en) 2008-04-03 2010-06-17 Kai Sensors, Inc. Non-contact physiologic motion sensors and methods for use
JP2011041656A (ja) 2009-08-20 2011-03-03 Yamatake Corp ボリュームデータ間の対応付け方法
WO2011125513A1 (ja) 2010-03-31 2011-10-13 株式会社 日立メディコ 医用画像診断装置及び、医用画像の計測値再入力方法
JP2012115581A (ja) 2010-12-03 2012-06-21 Konica Minolta Medical & Graphic Inc 胸部診断支援情報生成方法及び胸部診断支援システム
JP2012239796A (ja) 2011-05-24 2012-12-10 Konica Minolta Medical & Graphic Inc 胸部診断支援情報生成システム
US20130235080A1 (en) 2012-03-12 2013-09-12 General Electric Company Method and system for displaying information on life support systems
US20160367200A1 (en) 2015-06-16 2016-12-22 Medizinische Hochschule Hannover Method of quantitative magnetic resonance lung imaging
JP2018000281A (ja) 2016-06-28 2018-01-11 コニカミノルタ株式会社 動態解析システム
JP2018157968A (ja) 2017-03-23 2018-10-11 コニカミノルタ株式会社 放射線画像処理装置及び放射線画像撮影システム
JP2019030492A (ja) 2017-08-08 2019-02-28 コニカミノルタ株式会社 X線画像処理装置及びx線画像処理方法

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009153678A (ja) 2007-12-26 2009-07-16 Konica Minolta Medical & Graphic Inc 動態画像処理システム
US20100152600A1 (en) 2008-04-03 2010-06-17 Kai Sensors, Inc. Non-contact physiologic motion sensors and methods for use
JP2011041656A (ja) 2009-08-20 2011-03-03 Yamatake Corp ボリュームデータ間の対応付け方法
WO2011125513A1 (ja) 2010-03-31 2011-10-13 株式会社 日立メディコ 医用画像診断装置及び、医用画像の計測値再入力方法
JP2012115581A (ja) 2010-12-03 2012-06-21 Konica Minolta Medical & Graphic Inc 胸部診断支援情報生成方法及び胸部診断支援システム
JP2012239796A (ja) 2011-05-24 2012-12-10 Konica Minolta Medical & Graphic Inc 胸部診断支援情報生成システム
US20130235080A1 (en) 2012-03-12 2013-09-12 General Electric Company Method and system for displaying information on life support systems
US20160367200A1 (en) 2015-06-16 2016-12-22 Medizinische Hochschule Hannover Method of quantitative magnetic resonance lung imaging
JP2018000281A (ja) 2016-06-28 2018-01-11 コニカミノルタ株式会社 動態解析システム
JP2018157968A (ja) 2017-03-23 2018-10-11 コニカミノルタ株式会社 放射線画像処理装置及び放射線画像撮影システム
JP2019030492A (ja) 2017-08-08 2019-02-28 コニカミノルタ株式会社 X線画像処理装置及びx線画像処理方法

Also Published As

Publication number Publication date
JP2020171427A (ja) 2020-10-22
US20200327689A1 (en) 2020-10-15

Similar Documents

Publication Publication Date Title
JP6413927B2 (ja) 動態解析装置及び動態解析システム
JP5672147B2 (ja) 胸部診断支援情報生成システム
JP6597548B2 (ja) 動態解析システム
JP7047574B2 (ja) 動態画像解析装置、動態画像解析システム、動態画像解析プログラム及び動態画像解析方法
JP6743662B2 (ja) 動態画像処理システム
JP6418091B2 (ja) 胸部画像表示システム及び画像処理装置
JP5919717B2 (ja) 動態医用画像生成システム
JP6701880B2 (ja) 動態解析装置、動態解析システム、動態解析方法及びプログラム
US11189025B2 (en) Dynamic image analysis apparatus, dynamic image analysis method, and recording medium
JP6690774B2 (ja) 動態解析システム、プログラム及び動態解析装置
JP2017176202A (ja) 動態解析システム
JP6662428B2 (ja) 動態解析システム
JP6740910B2 (ja) 動態画像処理システム
JP7020125B2 (ja) 動態画像解析装置及びプログラム
JP2017169830A (ja) 動態解析装置
JP7255329B2 (ja) 動態画像解析装置、動態画像解析システム及びプログラム
JP7255725B2 (ja) 動態画像解析システム及び動態画像解析プログラム
JP7196557B2 (ja) 動態画像解析装置及び動態画像解析システム
JP2018064848A (ja) 動態解析システム
JP2020171475A (ja) 動態画像解析装置、動態画像解析方法及びプログラム
JP7424532B1 (ja) 放射線画像解析装置及びプログラム
US20240362776A1 (en) Radiographic image analysis apparatus and recording medium
JP6888721B2 (ja) 動態画像処理装置、動態画像処理プログラム及び動態画像処理方法
JP2017217047A (ja) 画像表示システム
JP2020062394A (ja) 画像処理装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211224

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230228

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230313

R150 Certificate of patent or registration of utility model

Ref document number: 7255329

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150