JP6291813B2 - 医用画像システム及びプログラム - Google Patents

医用画像システム及びプログラム Download PDF

Info

Publication number
JP6291813B2
JP6291813B2 JP2013247272A JP2013247272A JP6291813B2 JP 6291813 B2 JP6291813 B2 JP 6291813B2 JP 2013247272 A JP2013247272 A JP 2013247272A JP 2013247272 A JP2013247272 A JP 2013247272A JP 6291813 B2 JP6291813 B2 JP 6291813B2
Authority
JP
Japan
Prior art keywords
image
region
medical image
position information
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013247272A
Other languages
English (en)
Other versions
JP2015104464A (ja
Inventor
仁 二村
仁 二村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2013247272A priority Critical patent/JP6291813B2/ja
Publication of JP2015104464A publication Critical patent/JP2015104464A/ja
Application granted granted Critical
Publication of JP6291813B2 publication Critical patent/JP6291813B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)

Description

本発明は、医用画像システム及びプログラムに関する。
近年、乳癌検査として、主にマンモグラフィ検査と超音波検査が行われている。2つの検査は相補的な役割を果たすことができ、2つの検査を併用して診断することで、病変の検出精度向上が期待できる。
一般的に、併用検査では、まず放射線技師等によりマンモグラフィ検査を実施し、X線撮影により得られた乳房X線画像上で異常陰影候補等の注目領域の客観的な位置情報を得る。その後、臨床検査技師等により乳房における、乳房X線画像上の注目領域に対応する位置を狙って重点的に超音波検査を行い、乳腺超音波画像(以下、超音波画像と略記する)を生成する。両検査が終了すると、医師が乳房X線画像と超音波画像を読影し、最終的な診断を行う。
超音波検査では、検査により得られた超音波画像内に、超音波探触子(プローブ)によりスキャンした領域の位置(検査位置)等を示すプローブマークが重畳されたボディーマークと呼ばれる画像を記録する。医師は、このボディーマークを見ながら超音波画像が乳房X線画像のどの注目領域に対応するものなのかを確認する。しかしながら、超音波検査の検査実施者がボディーマーク上の検査位置の記録を誤ったり、乳房X線画像上の注目領域に対応する位置とは異なる位置に検査を行ってしまったりした場合、マンモグラフィ検査で得られた乳房X線画像上の注目領域の位置と超音波画像に記録された検査位置の対応が取れずに医師が混乱する。その結果、診断にかかる効率は下がり、場合によっては患者を再度病院へ呼び出して再検査することになりかねず、病院及び患者の双方にとって負担となる。
そこで、例えば、特許文献1には、超音波探触子の空間的な座標情報を計測し、計測した座標情報に基づいて、対象組織中の診断部位の超音波画像を、対象組織が表された背景画像上に合成してレポート画像を生成することが記載されている。特許文献1に記載の技術によれば、超音波検査された位置を誤って記録することを抑制することができる。
特許第5015580号公報
しかしながら、特許文献1においては、マンモグラフィ検査で得られた乳房X線画像における注目領域との対応については考慮していない。そのため、診断時に、乳房X線画像における注目領域の位置と超音波画像に記録されている検査位置との不整合が生じることを防止することはできない。
本発明の課題は、診断時に、例えば乳房X線画像等の、第1の撮影方式で撮影された医用画像における注目領域の位置と、例えば超音波画像等の、第2の撮影方式で撮影した医用画像に記録されている検査位置との不整合が生じることを防止することである。
上記課題を解決するため、請求項1に記載の発明の医用画像システムは、
被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像から注目領域を指定するための指定手段と、
前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
前記照合の結果を出力する出力手段と、
を備え
前記第1の臨床位置情報は、前記生成手段において、前記被写体部位の正面を示す画像に対し、前記第1の医用画像の撮影時に撮影装置を傾けた角度に基づいて前記第1の医用画像を傾けて配置し、前記被写体部位の正面を示す画像上に前記第1の医用画像における前記注目領域を投影することにより生成される画像であり、
前記第2の臨床位置情報は、前記被写体部位の正面を示す画像の前記一部領域の位置に所定のマークが重畳された画像であり、
前記照合手段は、前記被写体部位の正面を示す画像における前記注目領域が投影された領域の位置と前記所定のマークの位置を照合する
請求項2に記載の発明の医用画像システムは
被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像から注目領域を指定するための指定手段と、
前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
前記照合の結果を出力する出力手段と、
を備え、
前記第1の医用画像はX線画像、前記第2の医用画像は超音波画像である
請求項に記載の発明は、請求項に記載の発明において、
前記被写体部位は乳房であり、
前記第1の医用画像は乳房X線画像、前記第2の医用画像は乳腺超音波画像である。
請求項に記載の発明は、請求項に記載の発明において、
前記乳房X線画像は、前記被写体部位としての乳房を斜位方向から撮影したMLO画像と、前記乳房を上下方向から撮影したCC画像であり、
前記生成手段は、前記被写体部位の正面を示す画像に対し、前記MLO画像撮影時に撮影装置を傾けた角度に基づいて前記MLO画像を傾けて配置するとともに前記CC画像撮影時の撮影装置の角度に基づいて前記CC画像を配置し、前記MLO画像における前記注目領域と前記CC画像における前記注目領域のそれぞれを前記被写体部位の正面を示す画像上に投影し、その投影像が重なった領域に基づいて前記第1の臨床位置情報を生成する。
請求項に記載の発明は、請求項1〜4の何れか一項に記載の発明において、
前記生成手段により生成された前記第1の臨床位置情報を表示する表示手段を備える。
請求項に記載の発明は、請求項に記載の発明において、
前記表示手段は、前記注目領域が表示された前記第1の医用画像と同一画面上に前記第1の臨床位置情報を表示する。
請求項に記載の発明は、請求項5又は6に記載の発明において、
前記第1の医用画像から異常陰影候補を検出する検出手段を備え、
前記表示手段は、前記検出手段により検出された異常陰影候補の領域を前記第1の医用画像に表示し、
前記指定手段は、前記表示手段に表示された異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するものである。
請求項に記載の発明は、請求項5又は6に記載の発明において、
前記第1の医用画像における異常陰影候補の領域を入力する入力手段を備え、
前記表示手段は、前記入力手段により入力された異常陰影候補の領域を前記第1の医用画像に表示し、
前記指定手段は、前記表示手段に表示された異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するものである。
請求項9に記載の医用画像システムは、
被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像から異常陰影候補を検出する検出手段と、
前記検出手段により検出された異常陰影候補の領域が表示された前記第1の医用画像を表示する表示手段と、
前記表示手段に表示された前記異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するための指定手段と、
前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
前記照合の結果を出力する出力手段と、を備え、
前記表示手段は、前記注目領域が表示された前記第1の医用画像と同一画面上に前記生成手段により生成された前記第1の臨床位置情報を表示する。
請求項10に記載の医用画像システムは、
被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像における異常陰影候補の領域を入力する入力手段と、
前記入力手段により入力された異常陰影候補の領域が表示された前記第1の医用画像を表示する表示手段と、
前記表示手段に表示された前記異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するための指定手段と、
前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
前記照合の結果を出力する出力手段と、を備え、
前記表示手段は、前記注目領域が表示された前記第1の医用画像と同一画面上に前記生成手段により生成された前記第1の臨床位置情報を表示する。
請求項11に記載の発明のプログラムは、
コンピュータを、
被写体部位を第1の撮影方式で撮影することにより得られたX線画像から注目領域を指定するための指定手段、
前記X線画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段、
前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された超音波画像から前記第2の臨床位置情報を抽出する抽出手段、
前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段、
前記照合の結果を出力する出力手段、
として機能させる。
本発明によれば、診断時に、例えば乳房X線画像等の、第1の撮影方式で撮影された医用画像における注目領域の位置と、例えば超音波画像等の、第2の撮影方式で撮影した医用画像に記録されている検査位置との不整合が生じることを防止することができる。
本実施形態における医用画像システムの全体構成例を示す図である。 図1のサーバー装置の機能的構成を示すブロック図である。 図1の画像表示装置の機能的構成を示すブロック図である。 (a)は、左右のMLO画像を胸壁を合わせて並べて配置した画像、(b)は、左右のCC画像を胸壁を合わせて並べて配置した画像を示す図である。 図2の制御部により実行される照合処理を示すフローチャートである。 図1の画像表示装置に表示されるビューアー画面の一例を示す図である。 図5のステップS6において実行される処理を示すフローチャートである。 (a)は、乳房X線画像の座標を説明するための図、(b)は、乳頭位置の検出を説明するための図である。 注目領域の臨床位置情報の生成方法を説明するための図である。 (a)は、右乳房の正面シェーマ画像、(b)は、左乳房の正面シェーマ画像を示す図である。 異常陰影候補の少ない領域を注目領域に対応する臨床位置から除外する方法を説明するための図である。 臨床位置情報の例を示す図である。 注目領域の臨床位置情報が表示されたビューアー画面の例を示す図である。 (a)は、右乳房のボディーマークのテンプレート画像、(b)は、左乳房のボディーマークのテンプレート画像、(c)は、左右の各テンプレート画像の領域を示す図、(d)は、プローブマークが配置されたボディーマークを示す図である。 図5のステップS10において実行される注目領域と検査位置の照合処理を示すフローチャートである。 照合処理を説明するための図である。 警告の例を示す図である。
(医用画像システム100の構成)
まず、本発明の実施形態の構成を説明する。
図1に、本実施形態における医用画像システム100のシステム構成を示す。
図1に示すように、医用画像システム100は、画像生成装置1、異常陰影候補検出装置2、サーバー装置3、画像表示装置4、超音波診断装置5を備えて構成されている。これら各装置1〜5は、LAN(Local Area Network)等の医療施設内で構築された通信ネットワークNを介して相互にデータを送受信可能に接続されている。通信ネットワークNは、DICOM(Digital Imaging and Communication in Medicine)規格が適用されている。なお、各装置の台数は、特に限定されない。
医用画像システム100は、被写体部位をX線撮影し、得られたX線画像(第1の医用画像)を記憶し、管理するとともに、X線画像上の異常陰影候補等の注目領域の臨床位置を推定してその推定した臨床位置を示す臨床位置情報を生成し、仰臥位で行われる超音波診断装置5における検査を支援するために表示するシステムである。臨床位置とは、被写体部位を人体正面から見たときの位置情報をいう。医用画像システム100は、様々な被写体部位のX線画像を取り扱うものであるが、本実施形態においては、主として乳房をX線撮影し、得られた乳房X線画像に基づいて乳房の超音波検査を支援する場合を例にとり説明する。
以下、各構成装置1〜5について説明する。
画像生成装置1は、人体における被写体部位をX線撮影し、その撮影画像(X線画像)のデジタルデータを生成するX線撮影装置であり、例えばCR(Computed Radiography)装置、FPD(Flat Panel Detector)装置等のモダリティを適用可能である。本実施形態では、画像生成装置1として、左右乳房のX線撮影を行うFPD装置を適用し、乳房X線画像のデータが生成されるものとする。
なお、画像生成装置1は、上述したDICOM規格に準拠した装置であり、生成した各X線画像に付帯させる各種情報、例えば、患者情報や検査情報を外部から入力可能であるとともに、自動生成することもできる。患者情報には、患者(被検者)を識別するための患者識別情報(例えば、患者ID)、患者の名前、性別、生年月日等の情報が含まれる。検査情報は、検査を識別するための検査識別情報(例えば、検査ID)、検査日時、検査条件(検査部位、側性(左、右)、方向(例えば、上下方向(CC)、斜位方向(MLO))、撮影角度、モダリティ種等の情報が含まれる。なお、本実施形態において、検査IDは、同一患者のマンモグラフィ検査で取得される一連の画像(左右2枚のMLO画像、CC画像)は同じ検査IDが付与されて管理されるものとする。画像生成装置1は、生成されたX線画像に上記患者情報や検査情報、画像を識別するためのUID(Unique ID)等をヘッダ情報として付加して通信ネットワークNを介して異常陰影候補検出装置2及びサーバー装置3へ送信する。なお、DICOM規格に準拠していない場合には、図示しないDICOM変換装置を用いて付帯情報を画像生成装置1に入力させることも可能である。
検出手段としての異常陰影候補検出装置(CAD)2は、画像生成装置1から供給されるX線画像の画像解析を行って異常陰影候補の検出処理を行うコンピュータである。異常陰影候補検出装置2は、CPU(Central Processing Unit)、RAM(Random Access Memory)、HDD(Hard Disk Drive)等の記憶部、LANカード等の通信部を備える。異常陰影候補検出装置2の記憶部には、異常陰影の種類に応じた検出アルゴリズムの検出プログラムが記憶されており、異常陰影候補検出装置2のCPUは、記憶部に記憶された検出プログラムとの協働により異常陰影候補検出処理を実行し、通信部を介して入力された各X線画像から異常陰影候補を検出する。例えば、異常陰影候補検出装置2は、乳房X線画像における腫瘤、微小石灰化クラスタの異常陰影候補を検出する。
異常陰影候補の検出アルゴリズムとしては、公知のものを適用可能である。例えば、乳房X線画像における腫瘤陰影候補のアルゴリズムとしては、特開平10−91758号公報に開示されているアイリスフィルタを用いた手法や、ラプラシアンフィルタを用いた手法(電気情報通信学会論文誌(D-II),Vol.J76-D-II,no.2,pp.241-249,1993)等が適用可能である。また、微小石灰化クラスタ陰影候補の検出アルゴリズムとしては、例えばモルフォルジーフィルタ(電気情報通信学会論文誌(D-II),Vol.J71-D-II,no.7,pp.1170-1176,1992)、ラプラシアンフィルタ(電気情報通信学会論文誌(D-II),Vol.J71-D-II,no.10,pp.1994-2001,1998)、3重リングフィルタ等を用いた方法等を適用可能である。
異常陰影候補の検出が終了すると、異常陰影候補検出装置2のCPUは、異常陰影候補の検出結果に基づいて、異常陰影候補情報を生成する。異常陰影候補情報は、例えば、検出された各異常陰影候補の領域の位置情報及び異常陰影候補の種類(例えば、腫瘤、微小石灰化クラスタ等)の情報が含まれる。そして、異常陰影候補検出装置2は、生成された異常陰影候補情報に検出元のX線画像のヘッダ情報(少なくともUID)を付加して通信部によりサーバー装置3に送信する。
サーバー装置3は、クライアントである画像表示装置4とともにPACS(Picture Archiving and Communication System)を構成している。サーバー装置3は、画像生成装置1で生成されたX線画像を付帯情報や異常陰影候補情報、超音波画像(第2の医用画像)と対応付けてデータベース(画像DB351)に記憶し、管理する。また、サーバー装置3は、処理対象の検査のX線画像を選択するための選択画面や選択されたX線画像を表示するためのビューアー画面等を画像表示装置4に表示させ、画像表示装置4から送信される操作情報に応じて、後述する照合処理をはじめとする各種処理を実行する。
図2に、サーバー装置3の機能構成例を示す。図2に示すように、サーバー装置3は、制御部31、操作部32、表示部33、通信部34、記憶部35を備えて構成され、各部はバス36により接続されている。
制御部31は、CPU(Central Processing Unit)、RAM(Random Access Memory)等により構成される。制御部31のCPUは、記憶部35に記憶されているシステムプログラムや処理プログラム等の各種プログラムを読み出してRAMに展開し、展開されたプログラムに従って各種処理を実行する。制御部31は、後述する照合処理を実行することで、生成手段、抽出手段、照合手段として機能する。
操作部32は、文字入力キー、数字入力キー、及び各種機能キー等を備えたキーボードと、マウス等のポインティングデバイスを備えて構成され、キーボードで押下操作されたキーの押下信号とマウスによる操作信号とを、入力信号として制御部31に出力する。
表示部33は、例えば、CRT(Cathode Ray Tube)やLCD(Liquid Crystal Display)等のモニターを備えて構成されており、制御部31から入力される表示信号の指示に従って、各種画面を表示する。
通信部34は、LANカード等により構成され、スイッチングハブを介して通信ネットワークNに接続された外部機器との間でデータの送受信を行う。
記憶部35は、例えばHDD(Hard Disk Drive)や半導体の不揮発性メモリ等で構成されている。記憶部35には、前述のように各種プログラムが記憶されている。また、記憶部35には、画像DB351が設けられている。
画像DB351は、X線画像等を格納するためのデータベースである。例えば、画像DB351は、画像DB351に記憶されている各X線画像に関する管理情報を格納する画像管理テーブルを有している。画像管理テーブルには、各X線画像についての管理情報が1レコードとして格納される。管理情報には、UID、患者情報、検査情報、ファイル情報(X線画像のファイル名、これに対応する異常陰影候補情報のファイル名、これに対応する超音波画像のファイル名、各ファイルのファイル格納場所、更新日付、ファイルサイズ等)が含まれる。
制御部31は、通信部34により画像生成装置1からのX線画像が受信されると、受信されたX線画像を画像DB351に格納するとともに、受信されたX線画像のヘッダ情報に基づいて管理情報を作成し、画像DB351の画像管理テーブルに格納する。また、通信部34により異常陰影候補検出装置2からの異常陰影候補情報が受信されると、受信された異常陰影候補情報を画像DB351に格納するとともに、画像管理テーブルから異常陰影候補情報に含まれるUIDが一致するレコードを検索し、検索したレコードに異常陰影候補情報のファイル名、格納場所等を書き込む。また、通信部34により超音波診断装置5からの超音波画像が受信されると、受信された超音波画像を画像DB351に格納するとともに、画像管理テーブルから当該超音波画像に対応するX線画像のレコードを検索し、検索したレコードに超音波画像のファイル名、格納場所等を書き込む。
このようにして、画像DB351には、X線画像と当該X線画像から検出された異常陰影候補の異常陰影候補情報や当該X線画像に対応する超音波画像が対応付けて検索可能に記憶される。
画像表示装置4は、サーバー装置3から送信された選択画面やビューアー画面等を表示するとともに、これらの画面から入力される操作情報をサーバー装置3に送信し、サーバー装置3から送信された、操作に応じた処理結果をビューアー画面上に表示したりする。画像表示装置4は、指定手段、出力手段、表示手段として機能する。
図3に、画像表示装置4の機能構成例を示す。
図3に示すように、画像表示装置4は、制御部41、操作部42、表示部43、通信部44、記憶部45を備えて構成され、各部はバス46により接続されている。
制御部41は、CPU、RAM等により構成される。制御部41のCPUは、記憶部45に記憶されているシステムプログラムや処理プログラム等の各種プログラムを読み出してRAMに展開し、展開されたプログラムに従って各種処理を実行する。
操作部42は、文字入力キー、数字入力キー、及び各種機能キー等を備えたキーボードと、マウス等のポインティングデバイスを備えて構成され、キーボードで押下操作されたキーの押下信号とマウスによる操作信号とを、入力信号として制御部41に出力する。
表示部43は、例えば、CRT(Cathode Ray Tube)やLCD(Liquid Crystal Display)等のモニターを備えて構成されており、制御部41から入力される表示信号の指示に従って、各種画面を表示する。
通信部44は、LANカード等により構成され、スイッチングハブを介して通信ネットワークNに接続された外部機器との間でデータの送受信を行う。
記憶部45は、例えばHDD(Hard Disk Drive)や半導体の不揮発性メモリ等で構成されている。記憶部45には、前述のようにシステムプログラムや各種プログラム(例えば、サーバー装置3から受信した各種画面を表示したり、操作部42から入力された操作情報を通信部44によりサーバー装置3に送信したりするプログラム)が記憶されている。
超音波診断装置5は、超音波探触子により被写体部位に対して超音波(送信超音波)を送信するとともに、被写体部位内で反射した超音波の反射波(反射超音波:エコー)を受信する。そして、受信した反射波を電気信号に変換し、これに基づいて超音波画像を生成する。また、超音波診断装置5は、超音波探触子を当てた位置を示すボディーマークを入力するための操作部や、通信ネットワークNに接続されたサーバー装置3と通信を行うための通信部を備え、操作部により入力されたボディーマークを生成した超音波画像に記録して通信部によりサーバー装置3に送信する。なお、本実施形態では、超音波診断装置5は乳房検査用であるものとする。
(医用画像システム100の動作)
次に、医用画像システム100の動作について説明する。
ここで、乳癌検査では、マンモグラフィ検査と超音波検査の2つの検査を併用する併用検査が行われている。併用検査では、一般的に、まず、放射線技師がマンモグラフィ検査を実施し、得られた乳房X線画像上で異常陰影候補等の注目領域の客観的な位置情報を得る。その後、臨床検査技師が乳房X線画像を観察し、乳房における、乳房X線画像上の注目領域に対応する乳房の一部領域の位置を狙って重点的に超音波検査を行う。両検査が終了すると、医師が乳房X線画像と超音波画像を読影し、最終的な診断を行う。
マンモグラフィ検査では、一般的に、画像生成装置1により、一人の患者に対し、立位・乳房圧迫の状態で左右の乳房のそれぞれについて斜位方向(MLO)及び上下方向(CC)の撮影方向で合計4回の撮影を行い、左右それぞれ2枚の乳房X線画像を生成する。一方、超音波検査では、仰臥位・乳房非圧迫状態で乳房の一部領域に超音波探触子を当てて検査を行う。従って、超音波検査を実施する臨床検査技師は、乳房X線画像上における注目領域の位置を、乳房を人体正面から見たときの位置である臨床位置に直観的に変換して検査を実施しなければならない。
図4(a)に、左右のMLO画像を胸壁を合わせて並べて配置した画像、図4(b)に、左右のCC画像を胸壁を合わせて並べて配置した画像を示す。一般的に、乳房X線画像を観察する場合、図4(a)、(b)に示すように、画像端が表示部(モニター)の端部に平行に配置された状態で観察が行われる。
CC画像は、画像生成装置1において、立位で乳房の真上から放射線を照射して撮影した画像であるため、図4(b)に示すように、左右のCC画像を胸壁を合わせて並べて画像端をモニターの端部に平行になるように配置し、MLO画像と左右の乳房が表示される位置を対応させた場合(右乳房の画像が正面から見て左、左乳房の画像が右)、CC画像の上方向は乳房の外側方向となり、CC画像の下方向は乳房の内側方向となる。即ち、CC画像から、観察者は注目領域が乳房の内側にあるか外側にあるかを推測することができる。例えば、図4(b)に示すCC画像からは、右乳房の外側に、注目すべき領域Pがあることがわかる。
一方、MLO画像は、撮影毎に最適な撮影角度をつけて乳房を斜め方向から撮影したものである。ここで、仮に、MLO画像が乳房を真横から撮影したものである場合(CC画像の撮影時と放射線照射方向が直交している場合)、図4(a)に示す画像端をモニターの端部に平行になるように配置したMLO画像から、注目領域Pの乳房における上下方向(頭−足方向)の位置を推測することができ、MLO画像とCC画像を合わせて観察することにより注目領域Pが存在する位置をおおよそ把握することが可能となる。しかし、MLO画像は、上述のように、被写体乳房を斜め方向から撮影したものである。そのため、実際には、図4(a)に示すように配置されたMLO画像を見て乳房における上下方向の位置を推測することは困難である。乳房X線画像の付帯情報に撮影角度の情報は含まれているが、撮影角度がわかっても、撮影角度に基づいて位置を推測するには時間がかかり、検査効率が低下する。また、推測を誤る可能性も高い。
誤った位置に超音波探触子をあてて超音波検査を実施しても、注目領域に対応する陰影は得られず、患者への不安想起、検査実施者への焦り想起、検査時間の長期化、不完全な検査等、様々な不利益をもたらす。
また、超音波検査では、検査により得られた超音波画像内に、超音波探触子(プローブ)によりスキャンした位置(検査位置)等を示すプローブマークが重畳されたボディーマークと呼ばれる画像を記録する。医師は、このボディーマークを見ながら超音波画像が乳房X線画像のどの注目領域に対応するものなのかを確認する。しかしながら、超音波検査の検査実施者がボディーマーク上の検査位置の記録を誤ったり、乳房X線画像上の注目領域に対応する位置とは異なる位置に検査を行ってしまったりした場合、マンモグラフィ検査で得られた乳房X線画像上の注目領域の位置と超音波画像に記録された検査位置の対応が取れずに医師が混乱する。その結果、診断にかかる効率は下がり、場合によっては患者を再度病院へ呼び出して再検査することになりかねず、病院及び患者の双方にとって負担となる。
そこで、本実施形態では、マンモグラフィ検査で得られた乳房X線画像に基づいて注目領域の臨床位置を推定し、推定した臨床位置を示す臨床位置情報を表示することで、乳房における注目領域に対応する位置を検査実施者が容易に認識できるようにする。また、超音波診断装置5から送信された超音波画像に記録されているボディーマークを抽出し、注目領域の臨床位置情報(第1の臨床位置情報)とボディーマークが示す臨床位置情報(第2の臨床位置情報)とを照合し、不整合が生じている場合には、警告を表示する。
図5に、サーバー装置3により実行される照合処理のフローチャートを示す。照合処理は、処理対象の検査の乳房X線画像が画像表示装置4の操作部42により選択され、選択された検査の乳房X線画像を特定する情報(検査ID等)が通信部34により受信された際に、制御部31と記憶部35に記憶されているプログラムとの協働により実行される。
まず、制御部31は、選択された検査の乳房X線画像(左右のMLO画像、CC画像)を画像DB351から検索して読み出し、読み出した乳房X線画像が表示されたビューアー画面431の画面情報を生成してその画面情報を通信部34により要求元の画像表示装置4に送信し、選択された乳房X線画像が表示されたビューアー画面431を画像表示装置4の表示部43に表示させる(ステップS1)。
なお、サーバー装置3の制御部31は、画像表示装置4から照合処理の終了の指示があるまで画像表示装置4で表示中の乳房X線画像の検査ID及びUIDをメモリに一時的に記憶する。
図6に、画像表示装置4に表示されるビューアー画面431の一例を示す。ビューアー画面431には、画像表示欄431a、MLO画像のみを表示することを指示するためのMLOボタン431b、CC画像のみを表示することを指示するためのCCボタン431c、MLO画像及びCC画像を表示することを指示するためのMLO/CCボタン431d、異常陰影候補の表示を指示するためのCADボタン431e等が設けられている。なお、デフォルトでは、MLO画像及びCC画像の双方が表示される。臨床検査技師等の超音波検査の検査実施者(操作者)は、操作部42によりCADボタン431e等を押下して異常陰影候補の表示指示を入力することで、表示されている乳房X線画像上に異常陰影候補を表示させて確認することができる。
通信部34により画像表示装置4から異常陰影候補の表示指示を示す操作情報を受信すると(ステップS2;YES)、制御部31は、画像表示装置4に表示されている乳房X線画像に対応する異常陰影候補情報を画像DB351から検索して読み出し、ビューアー画面431に表示されている乳房X線画像に異常陰影候補の位置を示すアノテーションを表示させた画面情報を生成する。そして、その画面情報を通信部34により要求元の画像表示装置4に送信し、乳房X線画像上に異常陰影候補の位置を示すアノテーションが表示されたビューアー画面431を画像表示装置4の表示部43に表示させる(ステップS3)。
画像表示装置4においては、ビューアー画面431に表示されている乳房X線画像上から操作部42により注目領域が指定されると、指定された注目領域の位置情報を操作情報として通信部44によりサーバー装置3に送信する。注目領域は、例えば、異常陰影候補の領域等、超音波検査で注目すべき領域であり、検査実施者は、表示されているMLO画像とCC画像に同一の異常陰影候補が確認できる場合には2つの領域を、何れか一方の画像にしか確認できない異常陰影候補についてはその1つの領域を注目領域として操作部42により指定する。
次いで、制御部31は、通信部34により画像表示装置4から注目領域の位置情報が受信されたか否かを判断する(ステップS4)。
通信部34により画像表示装置4からの注目領域の位置情報が受信されたと判断した場合(ステップS4;YES)、制御部31は、画像表示装置4のビューアー画面431に表示している乳房X線画像(左右のうち、注目領域が指定された乳房X線画像)のそれぞれの付帯情報に含まれる撮影角度を取得し(ステップS5)、乳房X線画像における注目領域の位置情報及び撮影角度に基づいて、乳房X線画像上の注目領域に対応する臨床位置を推定する(ステップS6)。撮影角度とは、乳房X線画像撮影時に画像生成装置1を傾けた角度(X線照射方向の傾き)である。画像生成装置1は、初期状態ではX線を照射する放射線源、被写体を配置する被写体台、被写体を透過したX線を検出するFPDがこの順に鉛直方向に並んでいるが、MLO画像の撮影時には、これらを一体的に被写体乳房に応じた角度だけ傾けて撮影を行う。なお、CC画像撮影時は、画像生成装置1を初期状態のまま傾けずに撮影を行うため、撮影角度は0°となる。
ステップS6における注目領域に対応する臨床位置の推定は、図7に示す処理を実行することにより行う。図7に、ステップS6における臨床位置の推定のフローチャートを示す。
まず、制御部31は、乳房X線画像(MLO画像及びCC画像)のそれぞれからスキンライン及び乳頭の検出を行う(ステップS601)。
ここでは、図8(a)に示すように、各乳房X線画像中の各画素の位置を、乳房X線画像における乳房の上下方向をX軸、これと垂直な方向をY軸とした座標(X、Y)で表す。また、座標(X、Y)の画素値をV(X、Y)、X軸方向の画像端の座標をXmax、Y軸方向の画像端をYmaxとして表す。
ステップS601において、制御部31は、まず、各乳房X線画像において、各画素を注目画素としてソベル(Sobel)フィルタによりフィルタ処理を施す。次いで、制御部31は、ソベルフィルタが施された乳房X線画像の各X座標(0〜Xmax)において、Y方向に探索を行い、V(X、Y)が最大となる座標(S)を各X座標におけるエッジとして抽出する。この抽出されたエッジが乳房領域と乳房外領域の境界であるスキンラインSLを構成する。
次いで、制御部31は、図8(b)に示すように、スキンラインSL上の各点S(X)について、S(X)とS(X+d(dは、例えば10))とを結んだ直線と、S(X)〜S(X+d)の間の各点(S(X+1)、S(X+2)・・・S(X+d−1))との距離Dをそれぞれ算出し、算出した距離Dの最大値D(X)のうち最も大きい値をもつS(X)の位置を乳頭位置として検出する。
次いで、制御部31は、図9に示すように、MLO画像撮影時の撮影角度とCC画像撮影時の撮影角度の角度差θ[°]に基づき、RAM上に、乳房の正面シェーマ画像(図9の500)、MLO画像(図9の600)、CC画像(図9の700)を配置する(ステップS602)。なお、θ[°]は、MLO画像撮影時の撮影角度に一致する。
ここで、図10(a)に、右乳房の正面シェーマ画像、図10(b)に、左乳房の正面シェーマ画像の一例を示す。左右の各乳房の正面シェーマ画像は、各乳房を正面から見た状態を模式的に示したもので、注目領域の臨床位置を重畳して表示するための画像である。正面シェーマ画像における円は乳房を、円の中心Oは乳頭位置を表す。領域Aは乳房の内側上の領域を、領域Bは乳房の内側下の領域を、領域Cは乳房の外側上の領域を、領域Dは乳房の外側下の領域を表す。領域Cに隣接する領域C’は、腋の下を表す。この乳房の正面シェーマ画像は、超音波診断により得られた超音波画像に記録される、乳房中の検査を行った一部領域の位置(検査位置)を示すプローブマークを重畳するためのボディーマークと同じ形態である。
図9に示すように、ステップS602においては、まず、RAM上に正面シェーマ画像500を配置する。次いで、MLO画像600の乳頭601から胸壁へ下ろした垂線602と、CC画像700の乳頭701から胸壁へ下ろした垂線702のそれぞれが正面シェーマ画像500の乳頭501を通過し、かつ互いの垂線の角度差がMLO画像撮影時の撮影角度とCC画像撮影時の撮影角度の角度差θ[°]となるように、MLO画像600、CC画像700を配置する。即ち、MLO画像600とCC画像700のそれぞれを正面シェーマ画像500に対して撮影角度だけ傾けて配置する。
次いで、制御部31は、正面シェーマ画像500に合わせてMLO画像600及びCC画像700を拡大又は縮小する(ステップS603)。具体的に、CC画像700は、乳頭701から胸壁へ下ろした垂線702が正面シェーマ画像500の乳頭501と交わる状態を保持しつつ、乳房領域の両端703が正面シェーマ画像500の円の両端に合うように拡大又は縮小される。MLO画像600は、乳頭601から胸壁へ下ろした垂線602が正面シェーマ画像500の乳頭501と交わる状態を保持しつつ、乳房領域の下端から胸壁へ下ろした垂線603が正面シェーマ画像500の円に接するように拡大又は縮小される。なお、CC画像700における乳房領域の両端703及びMLO画像600における乳房領域の下端は、検出されたスキンラインに基づき特定することができる。
次いで、制御部31は、MLO画像600の注目領域604、CC画像700の注目領域704のそれぞれを正面シェーマ画像500に投影し、重なった投影領域の位置を注目領域の臨床位置として推定する(ステップS604)。具体的には、まず、MLO画像600の注目領域604の頭部端604a、尾部端604bのそれぞれから胸壁に垂直となる直線605a、605bを引き、正面シェーマ画像500上に直線605aと605bに囲まれた帯状領域を投影する。同様に、CC画像700の注目領域704の外側端704a、内側端704bのそれぞれから胸壁に垂直となる直線705a、705bを引き、正面シェーマ画像500上に直線705aと705bに囲まれた帯状領域を投影する。そして、2つの投影領域が重なった領域502を注目領域の臨床位置として推定する。なお、MLO画像、CC画像の何れかのみから注目領域が指定されている場合は、上述の帯状領域を注目領域の臨床位置として推定する。
なお、図11に示すように、注目領域604、注目領域704を分割した領域毎に、正面シェーマ画像500に投影を行うとともに、各領域に含まれる陰影の数(例えば、石灰化の数)をカウントし、正面シェーマ画像500上で重なった陰影の数が最も少ない領域(図11の太線で囲んだ領域)を異常陰影候補が存在する頻度が低い領域として取得し、この領域を注目領域に対応する位置から除外することとしてもよい。
ここで、図9において、MLO画像600上の注目領域604がMLO画像600の乳頭601より上に位置し、CC画像700上の注目領域704がCC画像700の乳頭701より外側に位置しているので、直観的に注目領域はC領域に位置すると考えがちである。しかし、撮影角度を考慮すると、実際には注目領域に対応する臨床位置はD領域に存在する可能性が高い。このように、人間の直観では注目領域の臨床位置が推測しにくい場合であっても、ステップS6の処理によれば、撮影角度を考慮して実際に注目領域が存在する可能性が高い臨床位置を推定することができる。
注目領域の臨床位置の推定が終了すると、制御部31は、図5のステップS7に移行し、推定された注目領域の臨床位置を示す臨床位置情報を生成する(ステップS7)。
図12(a)〜(c)に、臨床位置情報の例を示す。例えば、図12(a)に示すように、正面シェーマ画像における推定された臨床位置(平行四辺形の領域)を囲んだり、推定された臨床位置に色等を重ねたりしたものを臨床位置情報としてもよい。また、図12(b)に示すように、推定された臨床位置の領域を包含し、臨床位置を示す平行四辺形の長い方の対角線と主軸(長軸)が同じ傾きの楕円形を正面シェーマ画像上に重ねて描画して臨床位置情報を生成してもよい。また、図12(c)に示すように、正面シェーマ画像上のA〜Dの各領域において臨床位置の領域が占める面積を算出し(画素数をカウントし)、算出した面積が最も大きい領域を示す情報(或いは、算出した面積の大きさの順位を示す情報)を臨床位置情報として生成してもよい。
注目領域の臨床位置情報の生成が終了すると、制御部31は、生成された臨床位置情報が表示されたビューアー画面431の画面情報を生成して通信部34により画像表示装置4に送信し、表示部43のビューアー画面431上に臨床位置情報を表示させる(ステップS8)。
図13(a)、(b)に、注目領域の臨床位置情報が表示されたビューアー画面431の一例を示す。図13(a)は、ビューアー画面431上の領域431fに、MLO画像とCC画像の2つの乳房X線画像により指定された注目領域(実線で示す)の臨床位置を示す臨床位置情報の一例を示している。図13(b)は、MLO画像のみにより指定された注目領域(実線で示す)の臨床位置を示す臨床位置情報の一例を示している。
図13(a)、(b)に示す注目領域の臨床位置情報を表示することで、検査実施者は、指定した注目領域が乳房のどのあたりに位置するかを容易に認識することが可能となり、乳房の誤った位置への超音波検査を防止し、検査効率を向上させることができる。また、乳房X線画像上の指定された注目領域のアノテーション表示と、その注目領域の臨床位置情報を同一画面上に並べて表示することで、検査実施者は、乳房X線画像上の注目領域を確認しながら、乳房上の注目領域の臨床位置に対して超音波検査を行うことが可能となる。
検査実施者は、ビューアー画面431に表示された臨床位置情報を見て乳房における乳房X線画像上の注目領域に対応する位置を確認し、その位置に超音波検査を行う。具体的には、超音波診断装置5の超音波探触子を当ててスキャンを行い、フリーズ操作を行って画像取り込みを行い、超音波画像を取得する。そして、取得した超音波画像に対して検査位置を示すボディーマークを記録し、サーバー装置3に送信する。
ボディーマークの記録は、検査実施者の手動操作に応じて行われる。例えば、超音波診断装置5において検査実施者が操作部によりボディーマークのテンプレート画像(左右乳房の何れか)、超音波画像上のボディーマークを重畳する位置、プローブマークを配置する位置を選択すると、超音波画像の選択された位置に、選択されたプローブマークが配置されたボディーマークが記録される(画像中に書き込まれる)。
図14(a)に、右乳房のボディーマークのテンプレート画像を示す。図14(b)に、左乳房のボディーマークのテンプレート画像を示す。図14(a)、(b)のテンプレート画像は、それぞれ図14(c)に示すように、A、B、C、D、C’の5つの領域に分割されており、それぞれの領域にはその領域の位置情報が対応付けられている。図14(d)に、プローブマークが重畳されたボディーマークを示す。
左右の各乳房のボディーマークは、各乳房を正面から見た状態を模式的に示したもので、超音波検査された領域の位置(検査位置)を示すプローブマークを重畳して表示するための画像である。ボディーマークにおける外側の円は乳房を、その円の中心の円は乳頭位置を表す。領域Aは乳房の内側上の領域を、領域Bは乳房の内側下の領域を、領域Cは乳房の外側上の領域を、領域Dは乳房の外側下の領域を表す。領域Cに隣接する領域C’は、腋の下を表す。即ち、ボディーマークは、注目領域の臨床位置を示す表示(図12参照)を重畳する正面シェーマ画像と同じ形態で、同じ名称を付した領域は乳房上の同じ領域を示している。プローブマークが配置されたボディーマークは、乳房を正面から見たときの超音波検査された領域の位置(検査位置)を示す臨床位置情報となる。
ボディーマークは、医師の診断時に参照され、注目領域との対応付けに利用されるが、多忙や集中力の欠如等により万一この記録を誤ってしまうと、乳房X線画像上の注目領域と対応がとれずに医師が混乱してしまう。しかし、ステップS8で表示される注目領域の臨床位置情報は、ボディーマークと同様の態様の正面シェーマ画像上に表示されるので、検査実施者は、表示された臨床位置情報に対応する位置に超音波検査を行って、表示された臨床位置情報を参照してボディーマークを記録することにより、誤ったボディーマークを記録することを低減することができる。
次いで、制御部31は、通信部34により超音波診断装置5から超音波画像が受信されるのを待機する(ステップ9)。通信部34により超音波診断装置5から超音波画像が受信されると(ステップS9;YES)、制御部31は、注目領域と検査位置の照合処理を実行する(ステップS10)。
図15に、ステップS10における注目領域と検査位置の照合処理のフローチャートを示す。
まず、制御部31は、受信した超音波画像からボディーマーク及びプローブマークをそれぞれ抽出する(ステップS701)。
ステップS701において、制御部31は、まず、受信した超音波画像をグレースケール画像に変換する。ここで、超音波画像は、R(赤)、G(緑)、B(青)の3つのカラーチャネルの信号値からなるBモード画像とする。グレースケール画像への変換は、一般的な変換法を用いることができる。例えば、超音波画像の変換後の各画素の信号値をIとすると、以下の(式1)により変換することができる。
I=(R+G+B)/3 ・・・(式1)
ここで、R:入力超音波画像の各画素の赤チャネル信号値、G:入力超音波画像の各画素の緑チャネル信号値、B:入力超音波画像の各画素の青チャネル信号値である。
次いで、制御部31は、記憶部35に記憶されている右乳房のボディーマークのテンプレート画像(図14(a)参照)と左乳房のボディーマークのテンプレート画像(図14(b)参照)を読み出して、それぞれを受信した超音波画像内で探索するテンプレートマッチング処理を行い、ボディーマークを抽出する。即ち、テンプレート画像と比較する対象領域を超音波画像領域内で移動させながらテンプレート画像との相互相関値を算出し、相互相関値が所定値以上でかつ最も相互相関値の高い領域をボディーマーク領域として抽出する。相互相関値としては、例えば(式2)に示すゼロ平均正規化相互相関Rzncc等を用いることができる。
なお、1つの超音波画像に記録されるボディーマークは一つである。よって、超音波画像領域内において相互相関値が所定値以上の領域が存在するのは、何れか一方のテンプレート画像となり、これにより、ボディーマークの左右の判別が可能となる。制御部31は、ボディーマークの左右情報をRAMに記憶する。
次いで、制御部31は、プローブマークの抽出を行う。超音波画像は、カラー画像であるが、超音波画像そのものは無彩色で各画素のR、G、Bの信号値の差は小さい。一方、超音波画像に記録されたボディーマーク上のプローブマークは超音波画像中で目立つように有彩色となっている。そこで、各画素において、各色のチャネルのR−G、G−B間の信号差が8ビットで32以下であれば無彩色の画素とし、これに該当しない画素をピックアップする。そして、ピックアップした画素のうち、抽出されたボディーマークの領域内の画素の領域をプローブマークの領域として抽出する。
ボディーマーク及びプローブマークの抽出が終了すると、制御部31は、ボディーマークの分割5領域のそれぞれに占めるプローブマークの面積比を算出する(ステップS702)。ここで、ボディーマークのテンプレート画像は、図14(c)に示すように、A、B、C、D、C’の5つの領域に分割されており、それぞれの領域には位置情報が対応付けられている。そこで、この領域情報が既知のテンプレート画像に超音波画像から抽出したボディーマークの画像を重ね合わせ、ボディーマークの分割5領域を特定し、各領域に占めるプローブマークの面積を算出して面積比を算出する。面積は、例えば、画素数をカウントすることにより求めることができる。面積比が最大の領域は、プローブマークが占める面積が最も大きい、即ち、プローブマークが主に位置している領域である。
次いで、制御部31は、正面シェーマ画像の分割5領域のそれぞれに占める推定された注目領域の臨床位置(ステップS604の投影領域)の面積比を算出し(ステップS703)、ボディーマークと正面シェーマ画像の左右情報及び算出した面積比が最も大きい領域を照合する(ステップS704)。ボディーマークの左右情報は、上述のように、制御部31のRAMに記憶されている。また、正面シェーマ画像の左右情報は、注目領域が指定された乳房X線画像の付帯情報から取得することができる。
例えば、図16に示すボディーマークの左右情報は右(Right)であり、プローブマークの面積比が最も大きい領域はC領域である。即ち、このボディーマークが示すプローブマークの位置はC領域が支配的である。これに対し、図16の上段に示す臨床位置情報において注目領域の投影領域の面積比が最も大きい領域はD領域である。即ち、注目領域の臨床位置はD領域が支配的である。よって、両者の照合結果は不整合となる。また、図16の下段に示す臨床位置情報の左右情報は左(Left)であり、上記のボディーマークとは左右情報が一致しないので、照合結果は不整合となる。一方、図16の中段に示す臨床位置情報は、上記のボディーマークと左右情報が一致しており、かつ、面積比が最も大きい領域がC領域で一致している(即ち、プローブマークの位置と注目領域の投影領域の位置とが一致している)ので、照合結果は整合となる。
次いで、制御部31は、図5のステップS11の処理に移行し、ステップS10における照合結果が不整合であったか否かを判断する(ステップS11)。不整合であったと判断した場合(ステップS11;YES)、制御部31は、ビューアー画面431の領域431fに警告メッセージを表示した画面情報を生成して通信部34により画像表示装置4に送信し、画像表示装置4の表示部43に表示されているビューアー画面431に警告を表示させ(ステップS12)、ステップS9に戻り、ステップS9以降の処理を繰り返し実行する。
ステップS12における警告は、何が不整合であるのかを検査実施者が把握できる態様で表示される。例えば、超音波画像から抽出したボディーマーク及びプローブマークと、注目領域の臨床位置情報とが図17(a)に示すものであった場合、「上下位置が異なっています。確認してください」等の警告を表示する。
超音波画像から抽出したボディーマーク及びプローブマークと、注目領域の臨床位置情報とが図17(b)に示すものであった場合、「内外位置が異なっています。確認してください」等の警告を表示する。
超音波画像から抽出したボディーマーク及びプローブマークと、注目領域の臨床位置情報とが図17(c)に示すものであった場合、「左右が異なっています。確認してください」等の警告を表示する。
このように、超音波画像から抽出したボディーマーク及びプローブマークと、検査実施者が指定した注目領域の臨床位置情報の内容に不整合が生じている場合、ビューアー画面431に、何が整合していないかを示す警告メッセージが表示される。従って、検査実施者は、この段階で超音波画像に記録したボディーマーク上のプローブマークが誤っているか、または、注目領域とは異なる領域を検査してしまっているかの何れかのミスが生じていることを認識することができるので、超音波診断装置5においてプローブマークの位置を修正したボディーマークを超音波画像に付け直してボディーマークを正しいものにして再度サーバー装置3に送信する、或いは、超音波検査をし直した超音波画像を再度サーバー装置3に送信することができ、医師の診断時に乳房X線画像上の注目領域と超音波画像に記録されている検査位置の不整合が生じることを防止することができる。
一方、ステップS10における照合結果が整合であったと判断した場合(ステップS111;NO)、制御部31は、現在選択されている検査の乳房X線画像と受信した超音波画像を対応付けて画像DB351に記憶し(ステップS13)、ステップS14の処理に移行する。
乳房X線画像における注目領域の臨床位置情報と、超音波画像に記録されている検査位置が整合すると、検査実施者は、操作部42によりビューアー画面431に表示されている乳房X線画像から別の注目領域を指定することができる。画像表示装置4の制御部41は、別の注目領域が指定されると、指定された注目領域の位置情報を通信部44によりサーバー装置3に送信する。次に検査すべき別の注目領域がない場合は、検査実施者は、操作部42により別の画面への遷移や当該画面を閉じる操作を行う。この場合、制御部41は、照合処理の終了指示を通信部44によりサーバー装置3に送信する。
サーバー装置3の制御部31は、通信部34により画像表示装置4から次の注目領域の位置情報を受信したか否かを判断する(ステップS14)。通信部34により画像表示装置4から次の注目領域の位置情報を受信したと判断した場合(ステップS14;YES)、制御部31は、ステップS5の処理に戻り、ステップS5〜ステップS14の処理を繰り返し実行する。通信部34により画像表示装置4から次の注目領域の位置情報を受信せずに、終了指示を受信したと判断した場合(ステップS14;NO、ステップS15;YES)、制御部31は、照合処理を終了する。
以上説明したように、医用画像システム100によれば、サーバー装置3の制御部31は、画像表示装置4において乳房X線画像から注目領域が指定されると、その乳房X線画像に基づいて、乳房を正面から見たときの注目領域の位置を示す臨床位置情報を生成する。また、超音波診断装置5から超音波画像が受信されると、乳房を正面から見たときの検査位置を示すプローブマークが重畳されたボディーマークを超音波画像から抽出する。そして、注目位置の臨床位置情報と検査位置の臨床位置情報であるボディーマークを照合し、整合していない場合は画像表示装置4から警告を出力する。
従って、指定された注目領域の臨床位置情報と検査位置の臨床位置情報であるボディーマークとが整合していない場合に、検査実施者がその旨を認識することが可能となるので、その時点で不整合を取り除くための適切な処置を行うことができ、医師による診断時に、乳房X線画像から指定された注目領域の位置と、超音波画像に記録されている検査位置との不整合が生じることを防止することができる。その結果、マンモグラフィ検査で得られた乳房X線画像上の注目領域の位置と超音波画像に記録された検査位置の対応が取れずに医師が混乱することによる診断効率の低下や、患者を再度病院へ呼び出して再検査することによる病院及び患者の双方への負担を回避することができる。
また、指定された注目領域の臨床位置情報を表示部33に表示することで、超音波検査の検査実施者は、注目領域の臨床位置を確認しながら超音波検査を行うことが可能となり、誤った位置に超音波検査をしてしまうことを防止することができる。
指定した注目領域が表示された乳房X線画像と同一画面上にその注目領域の臨床位置情報を表示することで、超音波検査の検査実施者は、乳房X線画像上の注目領域を確認しながら超音波検査を行うことが可能となる。
また、注目領域を指定するビューアー画面431において、乳房X線画像上の異常陰影候補領域にアノテーションを表示することで、注目領域の指定が容易となる。
なお、上記実施形態における記述内容は、本発明の好適な一例であり、これに限定されるものではない。
例えば、上記実施形態においては、サーバー装置3と画像表示装置4が別体の装置でクライアントサーバシステムを構成することとしたが、2つの装置の機能を1つの装置で実現することとしてもよい。即ち、装置の記憶部にコンピュータを指定手段、生成手段、抽出手段、照合手段、出力手段、表示手段として機能させるためのプログラムが記憶されており、CPU等の制御部とプログラムとの協働によりこれらの機能を実現することとしてもよい。また、異常陰影候補検出装置2の機能も同じ1つの装置に組み込まれていることとしてもよい。
また、上記実施形態においては、検査実施者が注目領域を指定する支援のために、ビューアー画面431に異常陰影候補検出装置2から検出された異常陰影候補の位置を表示することとしたが、放射線技師等の手動によって入力手段により入力された異常陰影候補の位置を表示することとしてもよい。例えば、放射線科にある画像表示装置4でビューアー画面431に表示された乳房X線画像から放射線技師が操作部42により入力(指定)した異常陰影候補の異常陰影候補情報を画像DB351に検出元の乳房X線画像と対応付けて記憶しておき、操作部42による操作に応じてこの異常陰影候補情報を乳房X線画像上に表示する(例えば、臨床検査技師のCADボタン431eの操作に応じて表示する)こととしてもよい。このようにすれば、放射線技師等が観察した結果、異常陰影候補が存在すると判断した領域を超音波検査の検査実施者が容易に把握して検査を行うことができる。また、サーバー装置3及び画像表示装置4の機能を超音波診断装置5に持たせることとしてもよい。
また、上記実施形態においては、被写体部位が乳房である場合を例として説明したが、他の部位の検査に本発明を適用してもよい。また、上記実施形態においては、X線検査により撮影されたX線画像と超音波検査により撮影された超音波画像における不整合を防止する場合に本発明を適用した例を説明したが、他の種類の画像生成装置間で生成された医用画像間の不整合の防止に本発明を適用してもよい。
また、上記の説明では、本発明に係るプログラムのコンピュータ読み取り可能な媒体としてハードディスクや半導体の不揮発性メモリ等を使用した例を開示したが、この例に限定されない。その他のコンピュータ読み取り可能な媒体として、CD−ROM等の可搬型記録媒体を適用することが可能である。また、本発明に係るプログラムのデータを通信回線を介して提供する媒体として、キャリアウエーブ(搬送波)も適用される。
その他、医用画像システムを構成する各装置の細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
100 医用画像システム
1 画像生成装置
2 異常陰影候補検出装置
3 サーバー装置
31 制御部
32 操作部
33 表示部
34 通信部
35 記憶部
351 画像DB
36 バス
4 画像表示装置
41 制御部
42 操作部
43 表示部
44 通信部
45 記憶部
46 バス

Claims (11)

  1. 被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像から注目領域を指定するための指定手段と、
    前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
    前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
    前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
    前記照合の結果を出力する出力手段と、
    を備え
    前記第1の臨床位置情報は、前記生成手段において、前記被写体部位の正面を示す画像に対し、前記第1の医用画像の撮影時に撮影装置を傾けた角度に基づいて前記第1の医用画像を傾けて配置し、前記被写体部位の正面を示す画像上に前記第1の医用画像における前記注目領域を投影することにより生成される画像であり、
    前記第2の臨床位置情報は、前記被写体部位の正面を示す画像の前記一部領域の位置に所定のマークが重畳された画像であり、
    前記照合手段は、前記被写体部位の正面を示す画像における前記注目領域が投影された領域の位置と前記所定のマークの位置を照合する医用画像システム。
  2. 被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像から注目領域を指定するための指定手段と、
    前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
    前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
    前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
    前記照合の結果を出力する出力手段と、
    を備え
    前記第1の医用画像はX線画像、前記第2の医用画像は超音波画像である医用画像システム。
  3. 前記被写体部位は乳房であり、
    前記第1の医用画像は乳房X線画像、前記第2の医用画像は乳腺超音波画像である請求項に記載の医用画像システム。
  4. 前記乳房X線画像は、前記被写体部位としての乳房を斜位方向から撮影したMLO画像と、前記乳房を上下方向から撮影したCC画像であり、
    前記生成手段は、前記被写体部位の正面を示す画像に対し、前記MLO画像撮影時に撮影装置を傾けた角度に基づいて前記MLO画像を傾けて配置するとともに前記CC画像撮影時の撮影装置の角度に基づいて前記CC画像を配置し、前記MLO画像における前記注目領域と前記CC画像における前記注目領域のそれぞれを前記被写体部位の正面を示す画像上に投影し、その投影像が重なった領域に基づいて前記第1の臨床位置情報を生成する請求項に記載の医用画像システム。
  5. 前記生成手段により生成された前記第1の臨床位置情報を表示する表示手段を備える請求項1〜の何れか一項に記載の医用画像システム。
  6. 前記表示手段は、前記注目領域が表示された前記第1の医用画像と同一画面上に前記第1の臨床位置情報を表示する請求項に記載の医用画像システム。
  7. 前記第1の医用画像から異常陰影候補を検出する検出手段を備え、
    前記表示手段は、前記検出手段により検出された異常陰影候補の領域を前記第1の医用画像に表示し、
    前記指定手段は、前記表示手段に表示された異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するものである請求項5又は6に記載の医用画像システム。
  8. 前記第1の医用画像における異常陰影候補の領域を入力する入力手段を備え、
    前記表示手段は、前記入力手段により入力された異常陰影候補の領域を前記第1の医用画像に表示し、
    前記指定手段は、前記表示手段に表示された異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するものである請求項5又は6に記載の医用画像システム。
  9. 被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像から異常陰影候補を検出する検出手段と、
    前記検出手段により検出された異常陰影候補の領域が表示された前記第1の医用画像を表示する表示手段と、
    前記表示手段に表示された前記異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するための指定手段と、
    前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
    前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
    前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
    前記照合の結果を出力する出力手段と、
    を備え、
    前記表示手段は、前記注目領域が表示された前記第1の医用画像と同一画面上に前記生成手段により生成された前記第1の臨床位置情報を表示する医用画像システム。
  10. 被写体部位を第1の撮影方式で撮影することにより得られた第1の医用画像における異常陰影候補の領域を入力する入力手段と、
    前記入力手段により入力された異常陰影候補の領域が表示された前記第1の医用画像を表示する表示手段と、
    前記表示手段に表示された前記異常陰影候補の領域が表示された前記第1の医用画像から注目領域を指定するための指定手段と、
    前記第1の医用画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段と、
    前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された第2の医用画像から前記第2の臨床位置情報を抽出する抽出手段と、
    前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段と、
    前記照合の結果を出力する出力手段と、
    を備え、
    前記表示手段は、前記注目領域が表示された前記第1の医用画像と同一画面上に前記生成手段により生成された前記第1の臨床位置情報を表示する医用画像システム。
  11. コンピュータを、
    被写体部位を第1の撮影方式で撮影することにより得られたX線画像から注目領域を指定するための指定手段、
    前記X線画像に基づいて、前記被写体部位を正面から見たときの前記注目領域の位置を示す第1の臨床位置情報を生成する生成手段、
    前記第1の撮影方式とは異なる第2の撮影方式で前記被写体部位の一部領域を撮影することにより得られた医用画像であって、前記被写体部位を正面から見たときの前記一部領域の位置を示す第2の臨床位置情報が記録された超音波画像から前記第2の臨床位置情報を抽出する抽出手段、
    前記第1の臨床位置情報と前記第2の臨床位置情報とを照合する照合手段、
    前記照合の結果を出力する出力手段、
    として機能させるためのプログラム。
JP2013247272A 2013-11-29 2013-11-29 医用画像システム及びプログラム Expired - Fee Related JP6291813B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013247272A JP6291813B2 (ja) 2013-11-29 2013-11-29 医用画像システム及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013247272A JP6291813B2 (ja) 2013-11-29 2013-11-29 医用画像システム及びプログラム

Publications (2)

Publication Number Publication Date
JP2015104464A JP2015104464A (ja) 2015-06-08
JP6291813B2 true JP6291813B2 (ja) 2018-03-14

Family

ID=53434977

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013247272A Expired - Fee Related JP6291813B2 (ja) 2013-11-29 2013-11-29 医用画像システム及びプログラム

Country Status (1)

Country Link
JP (1) JP6291813B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI667996B (zh) * 2018-03-23 2019-08-11 中國醫藥大學附設醫院 乳房腫瘤輔助檢測模型及乳房腫瘤輔助檢測系統

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108392215B (zh) * 2018-02-09 2021-07-27 南方医科大学 一种同侧异位乳腺钼靶图像的点位置关联方法
JP6945474B2 (ja) * 2018-02-28 2021-10-06 富士フイルム株式会社 学習用データ作成支援装置、学習用データ作成支援方法、および学習用データ作成支援プログラム
JP7258640B2 (ja) * 2018-04-27 2023-04-17 キヤノンメディカルシステムズ株式会社 医用情報処理システム及び医用情報処理プログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4633298B2 (ja) * 2001-06-14 2011-02-16 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 画像診断支援システム
WO2006017101A1 (en) * 2004-07-09 2006-02-16 Fischer Imaging Corporation Method for breast screening in fused mammography
US8064677B2 (en) * 2009-11-25 2011-11-22 Fujifilm Corporation Systems and methods for measurement of objects of interest in medical images
WO2012082861A2 (en) * 2010-12-14 2012-06-21 Hologic, Inc. System and method for fusing three dimensional image data from a plurality of different imaging systems for use in diagnostic imaging
JP6058272B2 (ja) * 2011-04-06 2017-01-11 東芝メディカルシステムズ株式会社 核医学診断装置及び制御方法
JP5858636B2 (ja) * 2011-04-13 2016-02-10 キヤノン株式会社 画像処理装置、その処理方法及びプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI667996B (zh) * 2018-03-23 2019-08-11 中國醫藥大學附設醫院 乳房腫瘤輔助檢測模型及乳房腫瘤輔助檢測系統
US10420535B1 (en) 2018-03-23 2019-09-24 China Medical University Hospital Assisted detection model of breast tumor, assisted detection system thereof, and method for assisted detecting breast tumor

Also Published As

Publication number Publication date
JP2015104464A (ja) 2015-06-08

Similar Documents

Publication Publication Date Title
JP6183177B2 (ja) 医用画像システム及びプログラム
JP6331922B2 (ja) 医用画像システム及びプログラム
JP4104036B2 (ja) 異常陰影検出処理方法およびシステム
JP2015104465A (ja) 医用画像システム及びプログラム
JP5145170B2 (ja) 医用画像の評価装置
US20150139518A1 (en) Image processing apparatus
US10916010B2 (en) Learning data creation support apparatus, learning data creation support method, and learning data creation support program
JP7203474B2 (ja) マンモグラフィ装置及びプログラム
JP6455235B2 (ja) 医用画像システム及びプログラム
JP2012245090A (ja) 画像処理装置および方法並びにプログラム
JP6291813B2 (ja) 医用画像システム及びプログラム
JP2011103095A (ja) 医用画像表示システム及びプログラム
JP2016195655A (ja) 医用画像システム及びプログラム
US11205269B2 (en) Learning data creation support apparatus, learning data creation support method, and learning data creation support program
CN104809331A (zh) 一种计算机辅助诊断技术(cad)检测放射图像发现病灶的方法和系统
JP2018033657A (ja) 医用画像システム及びプログラム
JP2012143368A (ja) 医用画像表示装置及びプログラム
JP2016209267A (ja) 医用画像処理装置及びプログラム
JP2015221141A (ja) 医用画像診断支援装置、医用画像診断支援装置の作動方法、および医用画像診断支援プログラム
JP5533198B2 (ja) 医用画像表示装置及びプログラム
JP4617116B2 (ja) 即時医療映像自動的サーチ対照方法及びそのシステム
JP5605246B2 (ja) 異常陰影候補検出システム、サーバ装置及びプログラム
JP2008159078A (ja) 異常陰影検出処理システム
JP2010155017A (ja) 放射線画像表示方法及び装置、並びに放射線画像表示プログラム
JP2022162970A (ja) 医用画像表示装置及び医用画像表示プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160926

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170627

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170623

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170825

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180129

R150 Certificate of patent or registration of utility model

Ref document number: 6291813

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees