JP2015027450A - 医用情報処理システム、医用情報処理プログラム及び超音波診断装置 - Google Patents

医用情報処理システム、医用情報処理プログラム及び超音波診断装置 Download PDF

Info

Publication number
JP2015027450A
JP2015027450A JP2014137257A JP2014137257A JP2015027450A JP 2015027450 A JP2015027450 A JP 2015027450A JP 2014137257 A JP2014137257 A JP 2014137257A JP 2014137257 A JP2014137257 A JP 2014137257A JP 2015027450 A JP2015027450 A JP 2015027450A
Authority
JP
Japan
Prior art keywords
region
image
interest
unit
mammography
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014137257A
Other languages
English (en)
Other versions
JP6309376B2 (ja
Inventor
敦子 杉山
Atsuko Sugiyama
敦子 杉山
由昌 小林
Yoshimasa Kobayashi
由昌 小林
叔訓 中谷
Toshikuni Nakatani
叔訓 中谷
藤本　克彦
Katsuhiko Fujimoto
克彦 藤本
柴田　真理子
Mariko Shibata
真理子 柴田
奈月 佐藤
Natsuki Sato
奈月 佐藤
敏江 丸山
Toshie Maruyama
敏江 丸山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Priority to JP2014137257A priority Critical patent/JP6309376B2/ja
Publication of JP2015027450A publication Critical patent/JP2015027450A/ja
Application granted granted Critical
Publication of JP6309376B2 publication Critical patent/JP6309376B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0825—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the breast, e.g. mammography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/464—Displaying means of special interest involving a plurality of displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/465—Displaying means of special interest adapted to display user selection data, e.g. icons or menus
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/466—Displaying means of special interest adapted to display 3D data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B8/469—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means for selection of a region of interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5292—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves using additional data, e.g. patient information, image labeling, acquisition parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10132—Ultrasound image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30068—Mammography; Breast

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

【課題】乳腺画像診断の精度を高めることができる医用情報処理システム、医用情報処理プログラム及び超音波診断装置を提供すること。
【解決手段】実施形態に係る医用情報処理システムは、記憶部と、領域設定部と、位置特定部と、出力部とを備える。記憶部は、被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを記憶する。領域設定部は、前記マンモグラフィ画像に関心領域を設定する。位置特定部は、前記マンモグラフィ画像上での前記関心領域の位置情報と、前記撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での前記関心領域の位置情報を特定する。出力部は、前記模式図上での前記関心領域の位置情報を出力する。
【選択図】図６

Description

本発明の実施形態は、医用情報処理システム、医用情報処理プログラム及び超音波診断装置に関する。
従来、乳がん検診等で実施される乳腺画像診断は、マンモグラフィ装置によって撮像されたマンモグラフィ画像を用いて行われるのが一般的であった。これに対し、近年では、Ｊ−ＳＴＡＲＴ（Japan Strategic Anti-cancer Randomized Trial）と呼ばれるプロジェクトが開始され、乳がん健診において、マンモグラフィ画像と超音波画像とを併用した乳腺画像診断の実施が始められている。
瀬尾 芳子著、「最新マンモグラフィシステムの使用経験−撮影時情報入力機能（Ｅｘａｍ−Ｍａｒｋｅｒ）の活用−」、月刊インナービジョン、Ｖｏｌ．２７、Ｎｏ．１、インナービジョン、２０１２年１月号、ｐ．７７ 「Ｊ−ＳＴＡＲＴ 乳がん健診における超音波検査の有効性を検証するための比較試験」、［平成２５年５月８日検索］、インターネット＜URL:http://www.j-start.org/＞
本発明が解決しようとする課題は、乳腺画像診断の精度を高めることができる医用情報処理システム、医用情報処理プログラム及び超音波診断装置を提供することである。
実施形態に係る医用情報処理システムは、記憶部と、領域設定部と、位置特定部と、出力部とを備える。記憶部は、被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを記憶する。領域設定部は、前記マンモグラフィ画像に関心領域を設定する。位置特定部は、前記マンモグラフィ画像上での前記関心領域の位置情報と、前記撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での前記関心領域の位置情報を特定する。出力部は、前記模式図上での前記関心領域の位置情報を出力する。
図１は、第１の実施形態に係る医用情報処理システムの構成例を示す図である。 図２は、第１の実施形態に係るマンモグラフィ装置の構成例を示す図（１）である。 図３は、第１の実施形態に係るマンモグラフィ装置の構成例を示す図（２）である。 図４は、第１の実施形態に係る超音波診断装置の構成例を示す図である。 図５は、マンモグラフィ画像と超音波画像とを併用した乳腺画像診断を説明するための図である。 図６は、第１の実施形態に係る画像処理装置の構成例を示す図である。 図７は、第１の実施形態に係る位置特定部によって用いられる模式図の一例を示す図である。 図８は、第１の実施形態に係る位置特定部によって行われる模式図上での関心領域の位置情報の特定を説明するための図である。 図９は、第１の実施形態に係る位置特定部によって行われるＭＬＯ画像における乳房領域の検出を説明するための図である。 図１０は、本実施形態に係る位置特定部によって行われる模式図上での関心領域の位置情報の特定を説明するための図である。 図１１は、第１の実施形態に係る位置特定部によって行われる領域変換の一例を説明するための図である。 図１２は、第１の実施形態に係る画像表示装置によって表示される表示情報の一例を示す図である。 図１３は、第１の実施形態に係る画像処理装置によって行われる処理の処理手順を示すフローチャートである。 図１４は、第１の実施形態の変形例に係る位置特定部によって行われる模式図上での関心領域の位置情報の特定を説明するための図である。 図１５は、第１の実施形態に係るマンモグラフィ画像と模式図との関係を説明するための図である。 図１６は、ＭＬＯ画像の撮影におけるブラインドエリアを示す図である。 図１７は、ＣＣ画像の撮影におけるブラインドエリアを示す図である。 図１８は、第１の実施形態の変形例に係る位置特定部によって行われるブラインドエリアの表示を説明するための図（１）である。 図１９は、第１の実施形態の変形例に係る位置特定部によって行われるブラインドエリアの表示を説明するための図（２）である。 図２０は、第１の実施形態の変形例に係る模式図上での関心領域の位置情報の特定を説明するための図（１）である。 図２１は、第１の実施形態の変形例に係る模式図上での関心領域の位置情報の特定を説明するための図（２）である。 図２２は、第２の実施形態に係る画像表示装置の構成例を示す図である。 図２３は、第３の実施形態に係る超音波診断装置の詳細な構成例を示す図である。 図２４は、第４の実施形態に係る画像表示装置の構成例を示す図である。 図２５は、第４の実施形態に係る表示制御部によって表示される参照画面の一例を示す図である。 図２６は、第４の実施形態に係る抽出部によって行われる乳腺実質領域の抽出を説明するための図（１）である。 図２７は、第４の実施形態に係る抽出部によって行われる乳腺実質領域の抽出を説明するための図（２）である。 図２８は、第４の実施形態に係る特定部によって行われる関心領域の特定を説明するための図である。 図２９は、第４の実施形態に係る特定部によって行われる関心領域の特定の他の例を説明するための図である。 図３０は、第４の実施形態に係る画像表示装置によって行われる処理の処理手順を示すフローチャートである。 図３１は、第５の実施形態に係る画像処理装置の構成例を示す図である。 図３２は、第６の実施形態に係る超音波診断装置の詳細な構成例を示す図である。
以下、図面を参照して、医用情報処理システム、医用情報処理プログラム及び超音波診断装置の実施形態を説明する。
（第１の実施形態）
図１は、第１の実施形態に係る医用情報処理システムの構成例を示す図である。本実施形態に係る医用情報処理システムは、乳がん検診が行われる病院に設置され、マンモグラフィ画像と超音波画像とを併用した乳腺画像診断に利用される。例えば、図１に示すように、本実施形態に係る医用情報処理システム１００は、マンモグラフィ装置１０と、超音波診断装置２０と、画像処理装置３０と、画像表示装置４０とを有する。各装置は、ネットワーク５０を介して相互に接続され、マンモグラフィ装置１０や超音波診断装置２０によって撮像された画像などを相互に送受信する。
マンモグラフィ装置１０は、被検体の乳房にＸ線を照射し、乳房を透過したＸ線を検出してマンモグラフィ画像を生成する。
図２及び３は、第１の実施形態に係るマンモグラフィ装置１０の構成例を示す図である。例えば、図２に示すように、マンモグラフィ装置１０は、基台１１と、スタンド１２とを有する。スタンド１２は、基台１１上に立設され、撮影台１３と、圧迫板１４と、Ｘ線出力部１５と、Ｘ線検出部１６とを支持する。なお、撮影台１３と、圧迫板１４と、Ｘ線検出部１６とは、上下方向へ移動可能に支持されている。
撮影台１３は、被検体の乳房Ｂを支持する台であり、乳房Ｂが載せられる支持面１３ａを有する。圧迫板１４は、撮影台１３の上方に配置され、撮影台１３に対して平行に対向するとともに撮影台１３に対して接離する方向へ移動可能に設けられている。なお、圧迫板１４は、撮影台１３に接近する方向に移動した場合に、撮影台１３上に支持されている乳房Ｂを圧迫する。圧迫板１４によって圧迫された乳房Ｂは薄く押し広げられ、乳房Ｂ内の乳腺の重なりが減少する。
また、図３に示すように、マンモグラフィ装置１０は、操作部１７ａと、昇降駆動部１７ｂと、高電圧発生部１７ｃと、画像処理部１７ｄと、画像記憶部１７ｅと、表示部１７ｆと、通信制御部１７ｇと、システム制御部１７ｈとを有する。操作部１７ａは、操作者から各種コマンドの入力操作等を受け付ける。昇降駆動部１７ｂは、撮影台１３に接続され、撮影台１３を上下方向へ昇降させる。さらに、昇降駆動部１７ｂは、圧迫板１４に接続され、圧迫板１４を上下方向（撮影台１３に対して接離する方向）へ昇降させる。
Ｘ線出力部１５は、Ｘ線管１５ａと、Ｘ線絞り器１５ｂとを有する。Ｘ線管１５ａは、Ｘ線を発生させる。Ｘ線絞り器１５ｂは、Ｘ線管１５ａと圧迫板１４との間に配置され、Ｘ線管１５ａから発生したＸ線の照射範囲を制御する。高電圧発生部１７ｃは、Ｘ線管１５ａに接続され、Ｘ線管１５ａがＸ線を発生するための高電圧を供給する。
Ｘ線検出部１６は、Ｘ線検出器１６ａと、信号処理部１６ｂとを有する。Ｘ線検出器１６ａは、乳房Ｂと撮影台１３とを透過したＸ線を検出して電気信号（透過Ｘ線データ）に変換する。信号処理部１６ｂは、Ｘ線検出器１６ａによって変換された電気信号からＸ線投影データを生成する。
画像処理部１７ｄは、信号処理部１６ｂと、画像記憶部１７ｅとに接続され、信号処理部１６ｂによって生成されたＸ線投影データに基づいてマンモグラフィ画像を生成し、生成したマンモグラフィ画像を画像記憶部１７ｅに保存する。また、画像処理部１７ｄは、表示部１７ｆに接続され、生成したマンモグラフィ画像を表示部１７ｆに表示する。なお、画像処理部１７ｄは、操作部１７ａからの入力操作に基づいて、作成するマンモグラフィ画像の種類の切替えを行うことが可能である。
通信制御部１７ｇは、ネットワーク５０を介して他の装置との間で行われる通信を制御する。例えば、通信制御部１７ｇは、ネットワーク５０を介して、画像処理部１７ｄによって生成されたマンモグラフィ画像を他の装置に転送する。ネットワーク５０を介して転送されたマンモグラフィ画像は、転送先の装置において、画像表示又は画像処理などを実施することが可能である。
システム制御部１７ｈは、操作部１７ａと、昇降駆動部１７ｂと、高電圧発生部１７ｃと、Ｘ線絞り器１５ｂと、画像処理部１７ｄと、通信制御部１７ｇとに接続され、マンモグラフィ装置１０の全体を総括して制御する。
図１に戻って、超音波診断装置２０は、超音波を送受信する超音波プローブで被検体を走査することで収集された反射波データに基づいて、超音波画像を生成する。
図４は、第１の実施形態に係る超音波診断装置２０の構成例を示す図である。図４に示すように、本実施形態に係る超音波診断装置２０は、超音波プローブ２１と、表示部２３と、入力部２２と、装置本体２４とを備える。
超音波プローブ２１は、複数の圧電振動子を有する。複数の圧電振動子は、後述する装置本体２４が有する送受信部２４１から供給される駆動信号に基づき超音波パルスを発生し、また、被検体Ｐからの反射波を受信して電気信号に変換する。また、超音波プローブ２１は、圧電振動子に設けられる整合層と、圧電振動子から後方への超音波の伝播を防止するバッキング材などを有する。
超音波プローブ２１から被検体Ｐに超音波パルスが送信されると、送信された超音波パルスは、被検体Ｐの体内組織における音響インピーダンスの不連続面で次々と反射され、エコー信号として超音波プローブ２１が有する複数の圧電振動子にて受信される。受信されるエコー信号の振幅は、超音波パルスが反射される不連続面における音響インピーダンスの差に依存する。なお、送信された超音波パルスが、移動している血流や心臓壁などの表面で反射された場合のエコー信号は、ドプラ効果により、移動体の超音波送信方向に対する速度成分に依存して、周波数偏移を受ける。
表示部２３は、モニタなどであり、超音波診断装置２０の操作者が入力部２２を用いて各種指示や設定要求を入力するためのＧＵＩ（Graphical User Interface）を表示したり、装置本体２４において生成された超音波画像や解析結果を表示したりする。
入力部２２は、マウス、キーボード、ボタン、パネルスイッチ、タッチコマンドスクリーン、フットスイッチ、トラックボールなどであり、装置本体２４に接続される。また、入力部２２は、超音波診断装置２０の操作者からの各種指示や設定要求を受け付け、受け付けた各種指示や設定要求を装置本体２４に対して転送する。
装置本体２４は、超音波プローブ２１によって受信された反射波に基づいて超音波画像を生成する。装置本体２４は、図４に示すように、送受信部２４１と、Ｂモード処理部２４２と、ドプラ処理部２４３と、画像処理部２４４と、画像メモリ２４５と、制御部２４８と、内部記憶部２４６とを有する。
送受信部２４１は、トリガ発生回路、送信遅延回路及びパルサ回路などを有し、超音波プローブ２１に駆動信号を供給する。パルサ回路は、所定の繰り返し周波数（ＰＲＦ（Pulse Repetition Frequency））の超音波パルスを形成するためのレートパルスを繰り返し発生する。なお、ＰＲＦは、レート周波数とも呼ばれる。また、送信遅延回路は、超音波プローブ２１から発生される超音波パルスをビーム状に集束して送信指向性を決定するために必要な圧電振動子毎の送信遅延時間を、パルサ回路が発生する各レートパルスに対して与える。また、トリガ発生回路は、レートパルスに基づくタイミングで、超音波プローブ２１に駆動信号（駆動パルス）を印加する。すなわち、送信遅延回路は、各レートパルスに対し与える送信遅延時間を変化させることで、圧電振動子面からの送信方向を任意に調整する。
なお、送受信部２４１は、後述する制御部２４８の指示に基づいて、所定のスキャンシーケンスを実行するために、送信周波数、送信駆動電圧などを瞬時に変更可能な機能を有している。特に、送信駆動電圧の変更は、瞬間にその値を切り替え可能なリニアアンプ型の発信回路、又は、複数の電源ユニットを電気的に切り替える機構によって実現される。
また、送受信部２４１は、アンプ回路、Ａ／Ｄ（Analog／Digital）変換器、受信遅延回路、加算器、直交検波回路などを有し、超音波プローブ２１が受信した反射波信号に対して各種処理を行って反射波データを生成する。アンプ回路は、反射波信号をチャンネル毎に増幅してゲイン補正処理を行う。Ａ／Ｄ変換器は、ゲイン補正された反射波信号をＡ／Ｄ変換する。受信遅延回路は、デジタルデータに受信指向性を決定するのに必要な受信遅延時間を与える。加算器は、受信遅延回路により受信遅延時間が与えられた反射波信号の加算処理を行う。加算器の加算処理により、反射波信号の受信指向性に応じた方向からの反射成分が強調される。
Ｂモード処理部２４２は、送受信部２４１から反射波データを受け取り、対数増幅、包絡線検波処理などを行って、信号強度が輝度の明るさで表現されるデータ（Ｂモードデータ）を生成する。また、Ｂモード処理部２４２は、後述するＭモードデータを生成する。
ドプラ処理部２４３は、送受信部２４１から受け取った反射波データから速度情報を周波数解析し、ドプラ効果による血流や組織、造影剤エコー成分を抽出し、平均速度、分散、パワーなどの移動体情報を多点について抽出したデータ（ドプラデータ）を生成する。
画像処理部２４４は、Ｂモード処理部２４２によって生成されたＢモードデータやＭモードデータ、ドプラ処理部２４３によって生成されたドプラデータから、超音波画像を生成する。具体的には、画像処理部２４４は、ＢモードデータからＢモード画像を生成し、ＭモードデータからＭモード画像を生成し、ドプラデータからドプラ画像を生成する。また、画像処理部２４４は、座標変換やデータ補間などを行うことで、超音波スキャンの走査線信号列をテレビなどに代表されるビデオフォーマットの走査線信号列に変換（スキャンコンバート）し、表示画像としての超音波画像（Ｂモード画像、Ｍモード画像、ドプラ画像）を生成する。
画像メモリ２４５は、画像処理部２４４によって生成された超音波画像や、超音波画像を画像処理することで生成した画像を記憶するメモリである。例えば診断の後に、操作者が検査中に記録された画像を呼び出すことが可能となっており、静止画的に、あるいは複数枚を使って動画的に再生することが可能である。なお、画像メモリ２４５は、送受信部２４１を通過後の画像輝度信号、その他の生データ、ネットワーク５０を介して取得した画像データなどを記憶してもよい。
内部記憶部２４６は、超音波送受信、画像処理及び表示処理を行うための装置制御プログラムや、診断情報（例えば、患者ＩＤ、医師の所見など）、診断プロトコルや各種設定情報などの各種データなどを記憶する。なお、内部記憶部２４６は、画像メモリ２４５が記憶する画像の保管などに使用されてもよい。
通信制御部２４７は、ネットワーク５０を介して他の装置との間で行われる通信を制御する。例えば、通信制御部２４７は、ネットワーク５０を介して、画像処理部２４４によって生成された超音波画像を他の装置に転送する。ネットワーク５０を介して転送された超音波画像は、転送先の装置において、画像表示又は画像処理などを実施することが可能である。
制御部２４８は、超音波診断装置２０における処理全体を制御する。具体的には、制御部２４８は、入力部２２を介して操作者から入力された各種指示や設定要求、内部記憶部２４６から読み込んだ各種プログラム及び各種設定情報に基づき、送受信部２４１、Ｂモード処理部２４２、ドプラ処理部２４３、及び画像処理部２４４の処理を制御したり、画像メモリ２４５が記憶する超音波画像などを表示部２３にて表示するように制御したりする。
図１に戻って、画像処理装置３０は、マンモグラフィ装置１０によって生成されたマンモグラフィ画像や、超音波診断装置２０によって生成された超音波画像などを処理する。この画像処理装置３０は、主に、マンモグラフィ検査の技師によってマンモグラフィ検査が行われる際に利用される。また、画像処理装置３０は、マンモグラフィ検査の技師からマンモグラフィ画像に関する所見の入力を受け付け、受け付けた所見を示す情報を所見情報として記憶する。例えば、画像処理装置３０は、画像保管サーバやワークステーションなどである。
画像表示装置４０は、マンモグラフィ画像や超音波画像、マンモグラフィ画像に関する所見情報などを画像処理装置３０から取得して表示する。この画像表示装置４０は、主に、超音波検査の技師によって超音波検査が行われる際に利用される。例えば、画像表示装置４０は、操作者によって持ち運びが可能であり、無線ＬＡＮ（Local Area Network）を介してネットワーク５０に接続可能なタブレット端末である。なお、画像表示装置４０は、例えば、ノートパソコンであってもよい。
ここで、従来、乳がん検診等で実施される乳腺画像診断は、マンモグラフィ装置によって撮像されたマンモグラフィ画像を用いて行われるのが一般的であった。これに対し、近年では、Ｊ−ＳＴＡＲＴ（Japan Strategic Anti-cancer Randomized Trial）と呼ばれるプロジェクトが開始され、乳がん健診において、マンモグラフィ画像と超音波画像とを併用した乳腺画像診断の実施が始められている。
図５は、マンモグラフィ画像と超音波画像とを併用した乳腺画像診断を説明するための図である。例えば、図５の左側に示すように、マンモグラフィ画像と超音波画像とを併用した乳腺画像診断では、先に、マンモグラフィ装置を用いて、被検体の左右それぞれの乳房について、ＭＬＯ（Mediolateral-Oblique：内外斜位）方向及びＣＣ（Cranio-Caudal：頭尾）方向のマンモグラフィ画像が撮像される。その後、図５の右側に示すように、同日又は別の日に、マンモグラフィ画像及びその所見を参照しながら、超音波診断装置を用いて、同じ被検体の左右それぞれの超音波画像が撮像される。
このような乳腺画像診断において、一般的に、マンモグラフィ画像を撮像及び読影する技師と、超音波画像を撮像及び読影する技師とは別である場合が多い。そのため、従来、超音波検査を担当する技師は、マンモグラフィ画像及びその所見を参照しながら超音波検査を実施するためには、マンモグラフィ画像の読影や所見に関する十分な知識や理解が求められていた。具体的には、「マンモグラフィ画像上の高密度部分は注意して超音波検査を行う」ことや、「マンモグラフィ画像上に境界明瞭平滑な腫瘤があり、超音波検査で明らかな良性病変(単純嚢胞など)であることが確認できれば要精密検査としない」こと、「マンモグラフィ画像上に局所的非対称性陰影(ＦＡＤ)が認められるが、超音波検査で正常乳腺であることが確認できれば要精密検査としない」ことなどが既に日本乳腺甲状腺超音波医学会乳癌検診研究会総合判定基準として示されており、超音波検査を担当する技師は、これらの判断を適切に行うことが求められていた。
このようなことから、本実施形態では、画像処理装置３０が、被検体の乳房を撮像したマンモグラフィ画像に関心領域を設定し、当該マンモグラフィ画像上での関心領域の位置情報と、当該マンモグラフィ画像の撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での関心領域の位置情報を特定して出力する。これにより、超音波検査の技師が、マンモグラフィ画像上で設定された関心領域に対応する位置を模式図上で容易に把握することができ、乳腺画像診断の精度を高めることができる。以下では、本実施形態に係る画像表示装置４０について詳細に説明する。
図６は、第１の実施形態に係る画像処理装置３０の構成例を示す図である。図６に示すように、画像処理装置３０は、入力部３１と、表示部３２と、通信制御部３３と、記憶部３４と、制御部３５とを有する。
入力部３１は、操作者から各種操作や各種情報の入力を受け付ける。例えば、入力部３１は、キーボードやマウス、ボタン、トラックボール、タッチパネルなどである。
表示部３２は、操作者から各種操作を受け付けるためのＧＵＩや各種画像を表示する。例えば、表示部３２は、液晶ディスプレイやＣＲＴ（Cathode Ray Tube）ディスプレイ、タッチパネルなどである。
通信制御部３３は、ネットワーク５０を介して他の装置との間で行われる通信を制御する。例えば、通信制御部３３は、ネットワークカードやネットワークアダプタであり、Ｅｔｈｅｒｎｅｔ（登録商標）のＬＡＮを介してネットワーク５０に接続することで、他の装置との間で通信を行う。また、例えば、通信制御部３３は、無線ＬＡＮを介してネットワーク５０に接続することで、他の装置との間で無線通信を行う。
記憶部３４は、ハードディスクや半導体メモリなどの記憶装置であり、各種情報を記憶する。具体的には、記憶部３４は、画像データ記憶部３４ａと、所見情報記憶部３４ｂとを有する。
画像データ記憶部３４ａは、被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを記憶する。具体的には、画像データ記憶部３４ａは、マンモグラフィ画像と撮影方向を示す情報とを、画像ごとに関連付けて記憶する。この画像データ記憶部３４ａには、後述する画像データ取得部３５ａによってマンモグラフィ画像と撮影方向を示す情報とが格納される。
例えば、画像データ記憶部３４ａは、ＭＬＯ方向のマンモグラフィ画像（ＭＬＯ画像）と、ＣＣ方向のマンモグラフィ画像（ＣＣ画像）とを記憶する。また、ここでいう撮影方向を示す情報は、例えば、マンモグラフィ装置の装置座標系で表される位置情報であり、マンモグラフィ装置によってマンモグラフィ画像が生成された際に付帯情報として各画像に付与される。
所見情報記憶部３４ｂは、被検体のマンモグラフィ画像に関する所見情報を記憶する。この所見情報記憶部３４ｂには、後述する所見情報作成部３５ｂによって所見情報が格納される。
制御部３５は、ＣＰＵ（Central Processing Unit）及びメモリを有し、それらを用いて各種プログラムを実行させることで、画像処理装置３０の動作を制御する。具体的には、制御部３５は、画像データ取得部３５ａと、所見情報作成部３５ｂと、表示制御部３５ｃと、領域設定部３５ｄと、位置特定部３５ｅと、送信部３５ｆとを有する。
画像データ取得部３５ａは、被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを取得する。なお、画像データ取得部３５ａは、被検体の左右それぞれの乳房について、ＭＬＯ画像及びＣＣ画像を取得する。具体的には、画像データ取得部３５ａは、通信制御部３３を介してマンモグラフィ装置１０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを取得し、取得したマンモグラフィ画像と撮影方向を示す情報とを画像データ記憶部３４ａに格納する。
所見情報作成部３５ｂは、操作者から入力された所見に基づいて、被検体のマンモグラフィ画像に関する所見情報を作成する。具体的には、所見情報作成部３５ｂは、入力部３１を介して、マンモグラフィ検査の技師からマンモグラフィ画像に関する所見の入力を受け付ける。そして、所見情報作成部３５ｂは、受け付けた所見を示す所見情報を作成し、所見情報記憶部３４ｂに格納する。
表示制御部３５ｃは、マンモグラフィ画像を参照するための参照画面を表示部３２に表示する。具体的には、表示制御部３５ｃは、入力部３１を介して操作者から表示要求を受け付けた場合に、診断対象の被検体に関するマンモグラフィ画像を画像データ記憶部３４ａから読み出し、診断対象の被検体に関する所見情報を所見情報記憶部３４ｂから読み出す。そして、表示制御部３５ｃは、読み出したマンモグラフィ画像及び所見情報を配置した参照画面を表示部３２に表示する。
領域設定部３５ｄは、マンモグラフィ画像に関心領域を設定する。例えば、領域設定部３５ｄは、被検体の左右それぞれの乳房について、ＭＬＯ画像及びＣＣ画像それぞれに関心領域を設定する。具体的には、領域設定部３５ｄは、入力部３１を介して、表示制御部３５ｃによって表示された参照画面に配置されたマンモグラフィ画像上で任意の位置に任意の大きさの範囲を指定する操作を操作者から受け付ける。そして、領域設定部３５ｄは、操作者によって指定された範囲を関心領域として設定する。
なお、例えば、領域設定部３５ｄは、コンピュータ支援診断（Computer Aided Diagnosis：ＣＡＤ）の機能を用いて、マンモグラフィ画像から病変部の候補領域を自動検出し、検出した領域を関心領域として設定してもよい。また、例えば、領域設定部３５ｄは、ＣＡＤによって検出された領域に対して、操作者がＭＬＯ画像とＣＣ画像との間で調整を行う操作を受け付け、調整後の領域を関心領域として設定してもよい。
位置特定部３５ｅは、マンモグラフィ画像上での関心領域の位置情報と、撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での関心領域の位置情報を特定する。具体的には、位置特定部３５ｅは、検査対象の被検体のマンモグラフィ画像と当該マンモグラフィ画像の撮影方向を示す情報とを画像データ記憶部３４ａから読み出し、読み出したマンモグラフィ画像及び撮影方向を示す情報に基づいて、模式図上での関心領域の位置を特定する。なお、ここでいう模式図（シェーマとも呼ばれる）としては、乳房における位置関係を示すものであれば、各種の図を用いることができる。
図７は、第１の実施形態に係る位置特定部３５ｅによって用いられる模式図の一例を示す図である。図７に示す例は、乳房を模式的に表した模式図の一例として、乳腺領域の模式図を示している。例えば、図７に示すように、乳腺領域の模式図は、左右それぞれの乳房について、乳房の領域を表す円形の領域（以下、乳房領域）と、腋窩部の領域を表す略三角形の領域（以下、腋窩領域）とを有する。
ここで、乳房領域を表す円形の領域は、上下及び左右に分けられて、４つの領域「Ａ」〜「Ｄ」に分割される。例えば、「Ａ」の領域（以下、Ａ領域）は、乳房の内側上部の領域を示し、「Ｂ」の領域（以下、Ｂ領域）は、乳房の内側下部の領域を示す。また、例えば、「Ｃ」の領域（以下、Ｃ領域）は、乳房の外側上部の領域を示し、「Ｄ」の領域（以下、Ｄ領域）は、乳房の外側下部の領域を示す。また、腋窩領域を表す略三角形の領域「Ｃ’」（以下、Ｃ’領域）は、領域Ｃから斜め上方に伸び、かつ、領域Ｃから離れるにつれて細くなる形状を有する。
図６に戻って、例えば、位置特定部３５ｅは、ＭＬＯ画像上での関心領域である第１の関心領域の位置情報、ＣＣ画像上での関心領域である第２の関心領域の位置情報、ＭＬＯ画像の撮影方向を示す情報、及びＣＣ画像の撮影方向を示す情報に基づいて、模式図上での第１の関心領域と第２の関心領域それぞれの位置情報を特定する。ここで、例えば、位置特定部３５ｅは、マンモグラフィ画像を撮像したマンモグラフィ装置の装置座標系で表される位置情報に基づいて、模式図上での関心領域の位置を特定する。
図８は、第１の実施形態に係る位置特定部３５ｅによって行われる模式図上での関心領域の位置情報の特定を説明するための図である。図８に示す例は、マンモグラフィ装置の装置座標系で表される撮影方向に基づいて、マンモグラフィ画像上での位置情報を模式図上での位置情報に変換する方法の一例である。なお、ここでは、図７に示した乳腺領域の模式図が用いられる場合の例を説明する。
まず、位置特定部３５ｅは、マンモグラフィ装置の装置座標系に基づいて、乳腺領域の模式図における乳房領域（Ａ〜Ｄ領域）に対応する領域の位置情報と、マンモグラフィ画像に設定された関心領域の位置情報とを特定する。例えば、位置特定部３５ｅは、ＭＬＯ画像及びＣＣ画像を用いて、乳房領域に対応する領域の位置情報と、ＭＬＯ画像及びＣＣ画像それぞれに設定された関心領域の位置情報とを特定する。
まず、位置特定部３５ｅは、ＣＣ画像において、検出器上のＸ＿ＣＣ軸、Ｙ＿ＣＣ軸、及び原点を設定する。例えば、位置特定部３５ｅは、検出器が有する矩形状の検出面の４つの頂点の中で被検体側に配置される２つの頂点のうち、乳房の上側に対応する頂点を、原点として設定する。また、位置特定部３５ｅは、ＣＣ画像に描出されている皮膚表面Ｓ＿ＣＣを検出する。ここで、皮膚表面Ｓ＿ＣＣを検出するための方法としては、一般的に知られた各種の画像検出方法を用いることができる。
そして、位置特定部３５ｅは、検出したＳ＿ＣＣ軸とＸ＿ＣＣ軸とが接する２つの点のうち、原点に近い方の点をＣＣ＿１とし、原点から遠い方の点をＣＣ＿２とする。なお、位置特定部３５ｅは、操作者からＣＣ画像上でＣＣ＿１及びＣＣ＿２それぞれの位置を指定する操作を受け付け、その操作に基づいて各点を設定してもよい。その後、位置特定部３５ｅは、点ＣＣ＿１から管球の方向へ投影して直線Ｌ＿ＣＣ１を生成し、点ＣＣ＿２から管球の方向へ投影して直線Ｌ＿ＣＣ２を生成する。
また、位置特定部３５ｅは、ＭＬＯ画像において、検出器上のＸ＿ＭＬＯ軸、Ｙ＿ＭＬＯ軸、及び原点を設定する。例えば、位置特定部３５ｅは、検出器が有する矩形状の検出面の４つの頂点の中で被検体側に配置される２つの頂点のうち、乳房の外側に対応する頂点を、原点として設定する。また、位置特定部３５ｅは、ＭＬＯ画像に描出されている皮膚表面Ｓ＿ＭＬＯを検出する。ここで、皮膚表面Ｓ＿ＭＬＯを検出するための方法としては、皮膚表面Ｓ＿ＣＣの検出と同様に、一般的に知られた各種の画像検出方法を用いることができる。その後、位置特定部３５ｅは、ＭＬＯ画像における乳房領域を検出する。
図９は、第１の実施形態に係る位置特定部３５ｅによって行われるＭＬＯ画像における乳房領域の検出を説明するための図である。図９に示すように、位置特定部３５ｅは、一次関数Ｙ＿ＭＬＯ＝ａＸ＿ＭＬＯ＋ｂ（ａは任意の正数）で表される直線Ｌ＿Ｓ１を定義し、ｂの値を十分に小さい負値から順次大きくして、当該直線が皮膚表面Ｓ＿ＭＬＯと最初に交わる点を検出する。そして、位置特定部３５ｅは、その点をＸ＿ＭＬＯ軸に対して垂直に投影した点をＭＬＯ＿ｕｐｐｅｒとして設定する。
さらに、位置特定部３５ｅは、一次関数Ｙ＿ＭＬＯ＝−ａＸ＿ＭＬＯ＋ｂ（ａは任意の正数）で表される直線Ｌ＿Ｓ２を定義し、同様に、ｂの値を十分に小さい負値から順次大きくして、当該直線が皮膚表面Ｓ＿ＭＬＯと最初に交わる点を検出する。そして、位置特定部３５ｅは、その点をＸ＿ＭＬＯ軸に対して垂直に投影した点をＭＬＯ＿ｌｏｗｅｒとして設定する。
なお、ここで用いられる各一次関数におけるａの値及びｂの値は、あらかじめ所定値を設定して記憶部３４等に記憶させておき、操作者からの指示に応じて変更してもよい。また、例えば、位置特定部３５ｅが、ＭＬＯ画像に描出された乳頭の位置を検出し、検出した乳頭の位置と検出器の原点とを通る直線の傾きをａの値として用いてもよい。
位置特定部３５ｅは、こうして設定した点ＭＬＯ＿ｕｐｐｅｒと点ＭＬＯ＿ｌｏｗｅｒとの間の領域を、乳房領域として検出する。なお、位置特定部３５ｅは、操作者からＭＬＯ画像上で点ＭＬＯ＿ｕｐｐｅｒ及び点ＭＬＯ＿ｌｏｗｅｒそれぞれの位置を指定する操作を受け付け、その操作に基づいて各点を設定してもよい。
図８に戻って、さらに、位置特定部３５ｅは、点ＭＬＯ＿ｕｐｐｅｒから菅球の方向へ投影して直線Ｌ＿ＭＬＯ＿ｕを生成し、点ＭＬＯ＿ｌｏｗｅｒから菅球の方向へ投影して直線Ｌ＿ＭＬＯ＿ｌを生成する。そして、位置特定部３５ｅは、直線Ｌ＿ＣＣ１、直線Ｌ＿ＣＣ２、直線Ｌ＿ＭＬＯ＿ｕ及び直線Ｌ＿ＭＬＯ＿ｌで囲まれた領域に内接する楕円Ｅを算出する。なお、楕円Ｅは、正円となる場合もあり得る。
続いて、位置特定部３５ｅは、ＭＬＯ画像に設定されている関心領域（ＲＯＩ：Region Of Interest）からＸ＿ＭＬＯ軸に対して垂直に投影した点をＲＯＩ＿ＭＬＯとし、ＣＣ画像に設定されている関心領域（ＲＯＩ）からＸ＿ＭＬＯ軸に対して垂直に投影した点をＲＯＩ＿ＣＣとする。さらに、位置特定部３５ｅは、点ＲＯＩ＿ＭＬＯから管球の方向へ投影した直線と点ＲＯＩ＿ＣＣから管球の方向へ投影した直線とが交わる領域をＭとする。ここで、ＭＬＯ画像及びＣＣ画像それぞれに設定された関心領域が点であった場合には、領域Ｍは点となり、ＭＬＯ画像及びＣＣ画像それぞれに設定された関心領域の少なくとも一方が範囲であった場合には、領域Ｍは面積を有する領域となる。
また、位置特定部３５ｅは、楕円Ｅの中心位置を乳頭位置Ｎとして設定する。なお、位置特定部３５ｅは、ＭＬＯ画像から乳頭位置Ｎ＿ＭＬＯを抽出し、ＣＣ画像から乳頭位置Ｎ＿ＣＣを抽出して、乳頭位置Ｎ＿ＭＬＯから管球方向へ投影した直線と乳頭位置Ｎ＿ＣＣから管球方向へ投影した直線との交点を、楕円Ｅにおける乳頭位置として設定してもよい。ここで、乳頭位置Ｎを検出する方法は、一般的に知られた各種の画像検出方法を用いることができる。
次に、位置特定部３５ｅは、マンモグラフィ装置の装置座標系に基づいて、乳腺領域の模式図におけるＣ’領域に対応する領域の位置情報を特定する。例えば、位置特定部３５ｅは、ＣＣ画像が撮像された際の管球位置と乳頭位置Ｎとを通る直線と楕円Ｅとが交わる２つの交点のうち、検出器に近い側の点をＡとし、ＭＬＯ画像が撮像された際の管球位置と乳頭位置Ｎとを通る直線と楕円Ｅとが交わる２つの交点のうち、検出器に近い側の点をＢとする。
また、位置特定部３５ｅは、ＭＬＯ画像が撮像された際の検出器の最端点であるＸ＿ＭＬＯ軸の原点から管球方向へ投影した直線と、Ｘ＿ＭＬＯ軸に平行であり、かつ楕円Ｅにおける乳頭位置Ｎを通る直線とが交わる点をＣとする。そして、位置特定部３５ｅは、点Ａと点Ｃとを結ぶ線分と、点Ｂと点Ｃとを結ぶ線分と、楕円Ｅとで囲まれた領域Ａ−Ｂ−Ｃを、Ｃ’領域に対応する領域として特定する。
その後、位置特定部３５ｅは、特定した楕円Ｅの領域の位置情報、Ｃ’領域に対応する領域の位置情報、及び、関心領域を示す領域Ｍの位置情報を、それぞれ模式図上での位置情報に変換することで、模式図上での関心領域の位置情報を特定する。
図１０は、本実施形態に係る位置特定部３５ｅによって行われる模式図上での関心領域の位置情報の特定を説明するための図である。例えば、図１０の左上から左中段に示すように、位置特定部３５ｅは、楕円Ｅの領域、Ｃ’領域に対応する領域、及び、関心領域を示す領域Ｍを、それぞれ乳腺領域の模式図の形状に合うように拡大又は縮小することで、各領域の位置情報を模式図上での位置情報に変換する。
まず、位置特定部３５ｅは、楕円Ｅの領域の位置情報を、乳腺領域の模式図において乳房領域を表す円形の領域の位置情報に変換する。ここで、楕円Ｅの領域の位置情報を円形の領域の位置情報に変換する方法としては、一般的に知られた各種の座標変換方法を用いることができる。例えば、位置特定部３５ｅは、所定の変換行列を用いて楕円の位置座標を円の位置座標に変換する方法を用いる。
図１１は、第１の実施形態に係る位置特定部３５ｅによって行われる領域変換の一例を説明するための図である。例えば、図１１に示すように、変換前の楕円の位置座標を（Ｘ，Ｙ）＝（Ｘ１，Ｘ２）で表し、変換後の円の位置座標を（Ｘ’，Ｙ’）＝（Ｘ１’，Ｘ２’）で表すと、楕円の位置座標は、変換行列Ａｋｓを用いて、以下の式（１）で表すことができる。
ここで、対称行列Ｆｋｓを以下の式（２）のように、ｂ、ｃ、ｄで表すと、式（１）における変換行列Ａｋｓは、以下の式（３）のように表すことができる。
すなわち、この例では、変換後の円の大きさに応じて、ｂ、ｃ、ｄの値を適宜に設定して変換行列Ａｋｓを求めることによって、楕円を所望の大きさの円に変換することができる。したがって、位置特定部３５ｅは、この方法を用いて、乳腺領域の模式図の大きさに応じて適宜にｂ、ｃ、ｄを設定することで、楕円Ｅの領域を、乳腺領域の模式図における乳房領域（Ａ〜Ｄ領域）に対応する円形の領域に変換することができる。
その後、位置特定部３５ｅは、楕円Ｅの変換に用いた変換行列Ａｋｓと同じ変換行列を用いてＣ’領域及び領域Ｍもそれぞれ変換することで、Ｃ’領域及び領域Ｍそれぞれの位置情報を、乳腺領域の模式図における位置情報に変換する。
なお、例えば、ＣＣ画像に関心領域が設定されていない場合には、位置特定部３５ｅは、模式図上での関心領域として、ＭＬＯ画像に設定された関心領域を楕円Ｅに投影した直線の領域を特定する。同様に、例えば、ＭＬＯ画像に関心領域が設定されていない場合には、位置特定部３５ｅは、模式図上での関心領域として、ＣＣ画像に設定された関心領域を楕円Ｅに投影した直線の領域を特定する。
図１０に戻って、位置特定部３５ｅは、楕円Ｅの領域、Ｃ’領域に対応する領域、及び、関心領域を示す領域Ｍそれぞれの位置情報を模式図上での位置情報に変換した後に、例えば、図１０の左下から右下に示すように、模式図上における各領域の位置情報に基づいて、乳腺領域の模式図のテンプレート上に関心領域を示す領域Ｍを配置した表示情報を生成する。なお、ここでいう表示情報は、例えば、ＪＰＥＧ（Joint Photographic Experts Group）やＧＩＦ（Graphics Interchange Format）、ビットマップなどの形式の画像データとして生成される。
そして、位置特定部３５ｅは、生成した表示情報を、対応するマンモグラフィ画像と関連付けて記憶部３４に記憶させる。例えば、位置特定部３５ｅは、生成した表示情報をマンモグラフィ画像に付帯情報として付帯させて、マンモグラフィ画像の画像データとともに画像データ記憶部３４ａに記憶させる。または、位置特定部３５ｅは、生成した表示情報を対象の被検体に割り当てられている患者ＩＤと対応付けて、画像データ記憶部３４ａに記憶させる。
なお、例えば、位置特定部３５ｅは、模式図のテンプレートを用いて表示情報を生成する際に、模式図上での関心領域の位置情報を示すだけでなく、乳腺密度が所定値より高い領域や、石灰化している領域、腫瘍の領域などをマンモグラフィ画像から抽出して、模式図上に表示してもよい。例えば、位置特定部３５ｅは、模式図上でこれらの領域に対応する部分について、領域の種類ごとに模式図の色とは異なる色で表示したり、あらかじめ領域の種類ごとに決められたマークを表示したりする。
こうして位置特定部３５ｅによって生成された表示情報は、例えば、後述する送信部３５ｆによって、画像表示装置４０又は超音波診断装置２０に送信される。そして、表示情報を受信した画像表示装置４０又は超音波診断装置２０は、受信した表示情報に基づいて、それぞれ所定の表示形式で、模式図上での関心領域の位置情報を表示部３２に出力する。
例えば、画像表示装置４０又は超音波診断装置２０は、超音波診断時の参考情報として、模式図上での関心領域の位置情報を出力する。また、例えば、画像表示装置４０又は超音波診断装置２０は、超音波診断を受けている受診者の患者ＩＤに対応する模式図上での位置情報を出力する。
図１２は、第１の実施形態に係る画像表示装置４０によって表示される表示情報の一例を示す図である。例えば、図１２に示すように、画像表示装置４０は、マンモグラフィ画像６１〜６４、乳腺領域の模式図６５及び６６、患者ＩＤ領域６７、所見表示領域６８をそれぞれ配置した参照画面を表示部４２に表示する。
ここで、例えば、マンモグラフィ画像６１は、被検体の左側の乳房に関するＣＣ画像であり、マンモグラフィ画像６２は、被検体の左側の乳房に関するＭＬＯ画像である。また、マンモグラフィ画像６３は、被検体の右側の乳房に関するＭＬＯ画像であり、マンモグラフィ画像６４は、被検体の右側の乳房に関するＣＣ画像である。また、患者ＩＤ領域６７は、患者ＩＤを表示するための領域であり、所見表示領域６８は、被検体のマンモグラフィ画像に関する所見情報を表示するための領域である。
また、模式図６５は、被検体の左側の乳房における乳腺領域を示しており、模式図６６は、被検体の右側の乳房における乳腺領域を示している。ここで、模式図６５及び６６は、それぞれ、画像表示装置４０から送信された表示情報に基づいて表示される乳腺領域の模式図であり、例えば、模式図上に関心領域を示す矩形状のマークＲが表示される。
図６に戻って、送信部３５ｆは、操作者からの指示に応じて、位置特定部３５ｅによって生成された表示情報を画像表示装置４０又は超音波診断装置２０に送信する。具体的には、送信部３５ｆは、入力部３１を介して、画像処理装置３０又は超音波診断装置２０の操作者から表示情報の送信指示を受け付ける。そして、送信部３５ｆは、表示情報の送信指示を受け付けると、操作者によって指定された表示情報を記憶部３４から読み出して、画像表示装置４０又は超音波診断装置２０に送信する。
なお、例えば、送信部３５ｆは、画像表示装置４０又は超音波診断装置２０からの要求に応じて、位置特定部３５ｅによって生成された表示情報を画像表示装置４０又は超音波診断装置２０に送信してもよい。この場合には、例えば、送信部３５ｆは、通信制御部３３を介して、画像表示装置４０又は超音波診断装置２０から表示情報の要求を受け付ける。そして、送信部３５ｆは、表示情報の要求を受け付けると、要求された表示情報を記憶部３４から読み出す。例えば、送信部３５ｆは、表示情報が患者ＩＤと対応付けて記憶部３４に記憶されている場合には、画像表示装置４０又は超音波診断装置２０からの要求として患者ＩＤを受け付け、受け付けた患者ＩＤに対応付けられている表示情報を読み出す。そして、送信部３５ｆは、読み出した表示情報を、要求を送信した画像表示装置４０又は超音波診断装置２０に送信する。
図１３は、第１の実施形態に係る画像処理装置３０によって行われる処理の処理手順を示すフローチャートである。図１３に示すように、画像処理装置３０は、操作者からマンモグラフィ画像及び所見情報の表示指示を受け付けた場合に（ステップＳ１０１，Ｙｅｓ）、画像データ取得部３５ａが、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像を取得する（ステップＳ１０２、Ｓ１０３）。また、所見情報作成部３５ｂが、被検体の乳房に関する所見情報を作成する（ステップＳ１０４）。
続いて、表示制御部３５ｃが、マンモグラフィ画像を参照するための参照画面を表示部３２に表示する（ステップＳ１０５）。その後、領域設定部３５ｄが、入力部３１を介して、参照画面に配置されたＭＬＯ方向のマンモグラフィ画像上で所望の範囲を指定する操作を操作者から受け付け、指定範囲を関心領域として設定する（ステップＳ１０６）。また、領域設定部３５ｄは、入力部３１を介して、参照画面に配置されたＣＣ方向のマンモグラフィ画像上で所望の範囲を指定する操作を操作者から受け付け、指定範囲を関心領域として設定する（ステップＳ１０７）。
そして、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれに関心領域が設定されると（ステップＳ１０８，Ｙｅｓ）、位置特定部３５ｅが、各画像に設定された関心領域の位置情報と、各画像の撮像方向を示す情報に基づいて、模式図上での関心領域の位置情報を特定する（ステップＳ１０９）。その後、位置特定部３５ｅは、特定した模式図上での関心領域の位置情報を、例えば、画像表示装置４０、超音波診断装置２０などに出力する（ステップＳ１１０）。
（第１の実施形態の変形例）
なお、上述した第１の実施形態では、位置特定部３５ｅが、マンモグラフィ画像を撮像したマンモグラフィ装置の装置座標系で表される位置情報に基づいて、模式図上での関心領域の位置を特定する場合の例を説明したが、実施形態はこれに限られない。例えば、位置特定部３５ｅは、マンモグラフィ画像から所定の画像処理によって模式図上での関心領域の位置情報を特定してもよい。
図１４は、第１の実施形態の変形例に係る位置特定部３５ｅによって行われる模式図上での関心領域の位置情報の特定を説明するための図である。例えば、図１４に示すように、位置特定部３５ｅは、ＭＬＯ画像を、乳頭を通る直線Ｌ＿ＭＬＯで、腹部側の領域と頭部側の領域とに分割する。また、位置特定部３５ｅは、直線Ｌ＿ＭＬＯと平行であり、かつ、ＭＬＯ画像に設定された関心領域（図１４に示す破線の円の領域）を含む幅の領域を、Ｒ＿ＭＬＯとして設定する。
さらに、位置特定部３５ｅは、ＣＣ画像を、乳頭を通る直線Ｌ＿ＣＣで、内側の領域（Ａ−Ｂ領域に対応する領域）と外側の領域（Ｃ−Ｄ領域に対応する領域）とに分割する。また、位置特定部３５ｅは、分割した２つの領域のうち、ＣＣ画像に設定された関心領域（図１４に示す破線の円の領域）を含む領域を、Ｒ＿ＣＣとして設定する。
その後、位置特定部３５ｅは、領域Ｒ＿ＭＬＯ及び領域Ｒ＿ＣＣそれぞれの位置情報に基づいて、模式図上での領域Ｒ＿ＭＬＯと領域Ｒ＿ＣＣとの重複部分の位置情報を特定する。そして、位置特定部３５ｅは、特定した位置情報に基づいて、乳腺領域の模式図のテンプレート上に領域Ｒ＿ＭＬＯと領域Ｒ＿ＣＣとの重複部分を配置した表示情報を生成する。
なお、例えば、位置特定部３５ｅは、模式図のテンプレートを用いて表示情報を生成する際に、模式図上での関心領域の位置情報として、さらに、関心領域の深さ情報を表示してもよい。例えば、位置特定部３５ｅは、ＣＣ画像をＹ方向にＮ等分し（Ｎは任意の整数）、関心領域の位置をＮ分位法で表示する。一例として、例えば、位置特定部３５ｅは、ＣＣ画像をＹ方向に４等分し、胸壁と反対の側から数えて２番目の部分に関心領域が設定されていた場合には、「二四分位」と表示する。
上述したように、第１の実施形態では、画像処理装置３０が、被検体の乳房を撮像したマンモグラフィ画像に関心領域を設定し、当該マンモグラフィ画像上での関心領域の位置情報と、当該マンモグラフィ画像の撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での関心領域の位置情報を特定して出力する。これにより、例えば、マンモグラフィ検査の技師が、画像処理装置３０を用いてマンモグラフィ画像に関心領域を設定し、超音波検査の技師が、画像表示装置４０又は超音波診断装置２０を用いて、マンモグラフィ検査の技師によって設定された関心領域に対応する位置を模式図上で容易に把握することができるようになり、乳腺画像診断の精度を高めることができる。
図１５は、第１の実施形態に係るマンモグラフィ画像と模式図との関係を説明するための図である。例えば、図１５に示すように、マンモグラフィ画像を見ただけでは、ＭＬＯ画像とＣＣ画像とに設定された関心領域（図１５に破線で示す円の領域）が、乳房超音波撮像時にどの位置に対応するのかが把握しにくい場合もある。そのような場合でも、第１の実施形態によれば、乳房を模式的に表した模式図上に関心領域を示すマークＲが表示されるので、超音波検査の技術者が、超音波診断で検査すべき乳房の位置を容易に把握することができるようになる。
なお、上述した第１の実施形態では、ＭＬＯ画像及びＣＣ画像それぞれに設定された関心領域に基づいて、模式図上に関心領域を表示する場合の例を説明したが、実施形態はこれに限られない。例えば、マンモグラフィ装置による撮影では、胸壁の湾曲や固定組織と可動性組織との関係等によってブラインドエリアが生じることが知られているが、このブラインドエリアに病変部が存在していた場合には、マンモグラフィ画像上に関心領域が設定されない場合もあり得る。
図１６は、ＭＬＯ画像の撮影におけるブラインドエリアを示す図であり、図１７は、ＣＣ画像の撮影におけるブラインドエリアを示す図である。例えば、図１６に示すように、ＭＬＯ画像の撮影では、乳房の上部内側（図１６の左図を参照）及び下部（図１６の右図を参照）にブラインドエリア３０１が生じやすい。また、例えば、図１７に示すように、ＣＣ画像の撮影では、乳房の上部（図１７の右図を参照）及び外側の腋窩に近い側（図１７の左図を参照）にブラインドエリア３０２が生じやすい。
ここで、例えば、ＭＬＯ画像の撮影又はＣＣ画像の撮影で生じたブラインドエリアに病変部が存在していた場合には、ＭＬＯ画像及びＣＣ画像の少なくとも一方に関心領域が設定されない場合もあり得る。例えば、図１６の左図に示すように、乳房の上部内側のブラインドエリアに病変部３０３が存在していた場合には、その病変部３０３がＭＬＯ画像に描出されず、その結果、ＭＬＯ画像に関心領域が設定されない場合がある。また、例えば、図１７の右図に示すように、乳房の上部のブラインドエリアに病変部３０４が存在していた場合には、その病変部３０４がＣＣ画像に描出されず、その結果、ＣＣ画像に関心領域が設定されない場合がある。
このようなことから、例えば、ＭＬＯ画像及びＣＣ画像の少なくとも一方に関心領域が設定されない場合に、乳房の模式図上に、ブラインドエリアを示す情報をさらに表示するようにしてもよい。この場合には、例えば、画像処理装置３０において、位置特定部３５ｅが、マンモグラフィ画像に基づいて、ブラインドエリアが生じているか否かをさらに特定する。そして、位置特定部３５ｅは、特定した結果に基づいて、模式図上での関心領域の位置情報に加えて、模式図上でのブラインドエリアの位置情報を示した表示情報を生成する。そして、例えば、画像表示装置４０又は超音波診断装置２０が、位置特定部３５ｅによって生成された表示情報に基づいて、模式図上での関心領域の位置情報とともに、模式図上でのブラインドエリアの位置情報をさらに出力する。
例えば、位置特定部３５ｅは、図８〜１１に示した方法で関心領域を特定する際に、まず、ＭＬＯ画像及びＣＣ画像それぞれに関心領域が設定されているか否かを検出する。そして、位置特定部３５ｅは、ＣＣ画像には関心領域が設定されているが、ＭＬＯ画像には関心領域が設定されていない場合には、ＭＬＯ画像にブラインドエリアが生じていることを特定する。また、位置特定部３５ｅは、ＭＬＯ画像には関心領域が設定されているが、ＣＣ画像には関心領域が設定されていない場合には、ＣＣ画像にブラインドエリアが生じていることを特定する。そして、位置特定部３５ｅは、特定した結果に基づいて、乳腺領域の模式図のテンプレート上に、関心領域の位置情報とともに、ブラインドエリアの位置情報を表示した表示情報を生成する。
図１８及び１９は、第１の実施形態の変形例に係る位置特定部３５ｅによって行われるブラインドエリアの表示を説明するための図である。例えば、位置特定部３５ｅは、ＭＬＯ画像にブラインドエリアが生じていることを特定した場合には、図１８に示すように、図７に示した模式図のＡ領域を他の領域とは異なる表示態様で表示する。このとき、例えば、位置特定部３５ｅは、Ａ領域を他の領域とは異なる色で表示したり、異なる模様で表示したりする。なお、図１８では、領域Ａ全体の表示態様を変える場合の例を示しているが、例えば、領域Ａの一部について、表示態様を変えてもよい。例えば、領域Ａの外周部に近い部分について、表示態様を変えてもよい。
ここで、前述したように、第１の実施形態では、ＭＬＯ画像に関心領域が設定されていない場合には、位置特定部３５ｅは、模式図上での関心領域として、ＣＣ画像に設定された関心領域を投影した直線の領域を特定する。この結果、例えば、図１８に示すように、模式図上には、直線状の関心領域Ｒが表示される。このような表示によれば、例えば、超音波検査の技師が、直線状の関心領域Ｒの中でも、特に、Ａ領域に対応する部分について、注意して超音波検査を行う必要があると判断することができる。
また、例えば、位置特定部３５ｅは、ＣＣ画像にブラインドエリアが生じていることを特定した場合には、図１９に示すように、図７に示した模式図の代わりに、乳房を側方からみた形状の模式図のテンプレート３０５を用いる。このとき、例えば、位置特定部３５ｅは、右側の乳房のＣＣ画像にブラインドエリアが生じていた場合には、右側乳房用の模式図を用い、左側の乳房のＣＣ画像にブラインドエリアが生じていた場合には、左側乳房用の模式図を用いる。ここで、例えば、右側乳房用の模式図と左側乳房用の模式図とは、左右方向に互いに対称な形状に定義される。
そして、位置特定部３５ｅは、模式図のテンプレート３０５上に、関心領域の位置情報とともに、ＣＣ画像の撮影におけるブラインドエリアの一般的な形状を表す領域を示した表示情報を生成する。例えば、位置特定部３５ｅは、模式図上において、乳房の上部に生じるブラインドエリアを示す領域３０６を、他の領域とは異なる表示態様で表示する。このとき、例えば、位置特定部３５ｅは、領域３０６を他の領域とは異なる色で表示したり、異なる模様で表示したりする。
ここで、前述したように、第１の実施形態では、ＣＣ画像に関心領域が設定されていない場合には、位置特定部３５ｅは、模式図上での関心領域として、ＭＬＯ画像に設定された関心領域を投影した直線の領域を特定する。この結果、例えば、図１９に示すように、模式図上には、直線状の関心領域Ｒが表示される。このような表示によれば、例えば、超音波検査の技師が、直線状の関心領域Ｒの中でも、特に、乳房の上部に近い側について、注意して超音波検査を行う必要があると判断することができる。
なお、ここでは、位置特定部３５ｅが、ＭＬＯ画像及びＣＣ画像の一方に関心領域が設定されていない場合に、自動的に、模式図上にブラインドエリアの位置情報を表示する場合の例を説明したが、実施形態はこれに限られない。例えば、位置特定部３５ｅは、操作者からの指示に基づいて、ブラインドエリアとして表示すべき領域を表示してもよい。この場合には、例えば、位置特定部３５ｅは、ＭＬＯ画像及びＣＣ画像の一方に関心領域が設定されていない場合に、関心領域が設定されていないマンモグラフィ画像上で、ブラインドエリアとして表示すべき領域の範囲を指定する操作を操作者から受け付ける。そして、位置特定部３５ｅは、操作者によって指定された範囲に基づいて、模式図のテンプレート上にブラインドエリアを表示する。
また、ここでは、ＭＬＯ画像及びＣＣ画像の少なくとも一方に関心領域が設定されていない場合に、乳房の模式図上にブラインドエリアを表示する場合の例を説明したが、実施形態はこれに限られない。
例えば、位置特定部３５ｅが、ＭＬＯ画像及びＣＣ画像の一方のみに設定された関心領域に基づいて、模式図上での関心領域の位置情報を特定してもよい。この場合には、例えば、位置特定部３５ｅは、図１４に示した方法で関心領域を特定する際に、まず、ＭＬＯ画像及びＣＣ画像それぞれに関心領域が設定されているか否かを検出する。そして、位置特定部３５ｅは、関心領域の検出結果に応じて、模式図上に関心領域を配置した表示情報を生成する。
図２０及び２１は、第１の実施形態の変形例に係る模式図上での関心領域の位置情報の特定を説明するための図である。例えば、位置特定部３５ｅは、ＣＣ画像には関心領域（図２０に示す破線の円の領域）が設定されているが、ＭＬＯ画像には関心領域が設定されていない場合には、図２０に示すように、ＣＣ画像を、乳頭を通る直線Ｌ＿ＣＣで、内側の領域（Ａ−Ｂ領域に対応する領域）と外側の領域（Ｃ−Ｄ領域に対応する領域）とに分割し、分割した２つの領域のうち、ＣＣ画像に設定された関心領域を含む領域を、Ｒ＿ＣＣとして設定する。また、位置特定部３５ｅは、マンモグラフィ装置の装置座標系で表される領域Ｒ＿ＣＣの位置情報に基づいて、模式図上での領域Ｒ＿ＣＣの位置情報を特定する。そして、位置特定部３５ｅは、特定した位置情報に基づいて、乳腺領域の模式図のテンプレート上に領域Ｒ＿ＣＣを配置した表示情報を生成する。例えば、位置特定部３５ｅは、ＣＣ画像において内側の領域に関心領域が設定されていた場合には、模式図上のＡ−Ｂ領域に、関心領域として領域Ｒ＿ＣＣを示す枠線を表示する。また、例えば、位置特定部３５ｅは、ＣＣ画像において外側の領域に関心領域が設定されていた場合には、模式図上のＣ−Ｄ領域に、関心領域として領域Ｒ＿ＣＣを示す枠線を表示する。
また、例えば、位置特定部３５ｅは、ＭＬＯ画像には関心領域（図２１に示す破線の円の領域）が設定されているが、ＣＣ画像には関心領域が設定されていない場合には、図２１に示すように、ＭＬＯ画像を、乳頭を通る直線Ｌ＿ＭＬＯで、腹部側の領域と頭部側の領域とに分割する。また、位置特定部３５ｅは、直線Ｌ＿ＭＬＯと平行であり、かつ、ＭＬＯ画像に設定された関心領域（図２１に示す破線の円の領域）を含む幅の領域を、Ｒ＿ＭＬＯとして設定する。また、位置特定部３５ｅは、領域Ｒ＿ＭＬＯの位置情報に基づいて、模式図上での領域Ｒ＿ＭＬＯの位置情報を特定する。そして、位置特定部３５ｅは、特定した位置情報に基づいて、乳腺領域の模式図のテンプレート上に領域Ｒ＿ＭＬＯを配置した表示情報を生成する。なお、位置特定部３５ｅは、腹部側の領域及び頭部側の領域のうち、ＭＬＯ画像に設定された関心領域を含む領域の全体を、Ｒ＿ＭＬＯとして設定してもよい。例えば、位置特定部３５ｅは、ＭＬＯ画像において腹部側の領域に関心領域が設定されていた場合には、模式図上のＤ−Ｂ領域に、関心領域として領域Ｒ＿ＭＬＯを示す枠線を表示する。また、例えば、位置特定部３５ｅは、ＭＬＯ画像において頭部側の領域に関心領域が設定されていた場合には、模式図上のＡ−Ｃ領域に、関心領域として領域Ｒ＿ＭＬＯを示す枠線を表示する。
このように、位置特定部３５ｅが、ＭＬＯ画像及びＣＣ画像の一方に関心領域が設定されていない場合でも、関心領域が設定されている方のマンモグラフィ画像に基づいて、模式図上での関心領域の位置情報を特定する。これにより、ＭＬＯ画像又はＣＣ画像にブラインドエリアが生じていた場合でも、少なくとも一方のマンモグラフィ画像に設定された関心領域の位置が模式図上で示されるので、超音波検査の技師を支援することができる。
（第２の実施形態）
上述した第１の実施形態では、画像処理装置３０が、マンモグラフィ画像に関心領域を設定し、模式図上での関心領域の位置情報を特定する場合の例を説明した。これに対し、第２の実施形態では、画像表示装置４０が、マンモグラフィ画像に関心領域を設定し、模式図上での関心領域の位置情報を特定する場合の例を説明する。なお、第２の実施形態に係る医用情報処理システムが有する装置の構成は、図１に示したものと同じである。
図２２は、第２の実施形態に係る画像表示装置４０の構成例を示す図である。図２２に示すように、画像表示装置４０は、入力部４１と、表示部４２と、通信制御部４３と、記憶部４４と、制御部４５とを有する。
入力部４１は、操作から各種操作や各種情報の入力を受け付ける。例えば、入力部４１は、ボタンやタッチパネル、ペンタブレットなどである。
表示部４２は、操作者から各種操作を受け付けるためのＧＵＩや各種画像を表示する。例えば、表示部４２は、液晶ディスプレイやタッチパネルなどである。
通信制御部４３は、ネットワーク５０を介して他の装置との間で行われる通信を制御する。例えば、通信制御部４３は、無線ＬＡＮを介してネットワーク５０に接続することで、他の装置との間で無線通信を行う。
記憶部４４は、ハードディスクや半導体メモリなどの記憶装置であり、各種情報を記憶する。具体的には、記憶部４４は、画像データ記憶部４４ａと、所見情報記憶部４４ｂとを有する。
画像データ記憶部４４ａは、被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを記憶する。具体的には、画像データ記憶部４４ａは、第１の実施形態で説明した画像データ記憶部３４ａと同様に、マンモグラフィ画像と撮影方向を示す情報とを、画像ごとに関連付けて記憶する。被検体の乳房を撮像したマンモグラフィ画像を記憶する。この画像データ記憶部４４ａには、後述する画像データ取得部４５ａによってマンモグラフィ画像が格納される。
所見情報記憶部４４ｂは、被検体のマンモグラフィ画像に関する所見情報を記憶する。この所見情報記憶部４４ｂには、後述する所見情報取得部４５ｂによって所見情報が格納される。
制御部４５は、ＣＰＵ及びメモリを有し、それらを用いて各種プログラムを実行させることで、画像表示装置４０の動作を制御する。具体的には、制御部４５は、画像データ取得部４５ａと、所見情報取得部４５ｂと、表示制御部４５ｃと、領域設定部４５ｄと、位置特定部４５ｅとを有する。
画像データ取得部４５ａは、被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを取得する。なお、画像データ取得部４５ａは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像を取得する。
具体的には、画像データ取得部４５ａは、通信制御部４３を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを取得し、取得したマンモグラフィ画像と撮影方向を示す情報とを画像データ記憶部４４ａに格納する。なお、画像データ取得部４５ａは、通信制御部４３を介してマンモグラフィ装置１０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを取得してもよい。
所見情報取得部４５ｂは、被検体の乳房に関する所見情報を取得する。具体的には、所見情報取得部４５ｂは、通信制御部４３を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像の所見情報を取得する。そして、所見情報取得部４５ｂは、取得した所見情報を所見情報記憶部４４ｂに格納する。
表示制御部４５ｃは、マンモグラフィ画像を参照するための参照画面を表示部４２に表示する。具体的には、表示制御部４５ｃは、入力部４１を介して操作者から表示要求を受け付けた場合に、診断対象の被検体に関するマンモグラフィ画像を画像データ記憶部４４ａから読み出し、診断対象の被検体に関する所見情報を所見情報記憶部４４ｂから読み出す。そして、表示制御部４５ｃは、読み出したマンモグラフィ画像及び所見情報を配置した参照画面を表示部４２に表示する。
領域設定部４５ｄは、マンモグラフィ画像に関心領域を設定する。具体的には、領域設定部４５ｄは、第１の実施形態で説明した領域設定部３５ｄと同様の方法で、マンモグラフィ画像に関心領域を設定する。例えば、領域設定部４５ｄは、被検体の左右それぞれの乳房について、ＭＬＯ画像及びＣＣ画像それぞれに関心領域を設定する。
位置特定部４５ｅは、マンモグラフィ画像上での関心領域の位置情報と、撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での関心領域の位置情報を特定する。具体的には、位置特定部４５ｅは、第１の実施形態で説明した位置特定部３５ｅと同様の方法で、模式図上での関心領域の位置情報を特定する。
その後、位置特定部４５ｅは、第１の実施形態で説明した位置特定部３５ｅと同様に、乳腺領域の模式図のテンプレート上に関心領域を示す領域を配置した表示情報を生成する。そして、位置特定部４５ｅは、例えば、生成した表示情報に基づいて、図１２に示した参照画面を表示部４２に表示する。
上述したように、第２の実施形態では、画像表示装置４０が、被検体の乳房を撮像したマンモグラフィ画像に関心領域を設定し、当該マンモグラフィ画像上での関心領域の位置情報と、当該マンモグラフィ画像の撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での関心領域の位置情報を特定して出力する。これにより、例えば、超音波検査の技師が、画像表示装置４０を用いて、マンモグラフィ画像上で設定された関心領域に対応する位置を模式図上で容易に把握することができるようになり、乳腺画像診断の精度を高めることができる。
（第３の実施形態）
上述した第１及び第２の実施形態では、画像処理装置３０又は画像表示装置４０が、マンモグラフィ画像に関心領域を設定し、模式図上での関心領域の位置情報を特定する場合の例を説明した。これに対し、第３の実施形態では、超音波診断装置２０が、マンモグラフィ画像に関心領域を設定し、模式図上での関心領域の位置情報を特定する場合の例を説明する。なお、第３の実施形態に係る医用情報処理システムが有する装置の構成は、図１に示したものと同じである。
図２３は、第６の実施形態に係る超音波診断装置２０の詳細な構成例を示す図である。なお、図２３は、図４に示した超音波診断装置２０が有する構成のうち、入力部２２と、表示部２３と、装置本体２４と、画像メモリ２４５と、内部記憶部２４６と、通信制御部２４７と、制御部２４８とを示している。
図２３に示すように、例えば、画像メモリ２４５は、画像データ記憶部２４５ａを有し、内部記憶部２４６は、所見情報記憶部２４６ａを有する。なお、画像データ記憶部２４５ａは、内部記憶部２４６に含まれてもよいし、所見情報記憶部２４６ａは、画像メモリ２４５に含まれてもよい。
画像データ記憶部２４５ａは、被検体の乳房を撮像したマンモグラフィ画像を記憶する。この画像データ記憶部２４５ａには、後述する画像データ取得部２４８ａによってマンモグラフィ画像が格納される。
所見情報記憶部２４６ａは、被検体のマンモグラフィ画像に関する所見情報を記憶する。この所見情報記憶部２４６ａには、後述する所見情報取得部２４８ｂによって所見情報が格納される。
また、図２３に示すように、例えば、制御部２４８は、画像データ取得部２４８ａと、所見情報取得部２４８ｂと、表示制御部２４８ｃと、領域設定部２４８ｄと、位置特定部２４８ｅとを有する。
画像データ取得部２４８ａは、被検体の乳房を撮像したマンモグラフィ画像を取得する。なお、画像データ取得部２４８ａは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像を取得する。
具体的には、画像データ取得部２４８ａは、通信制御部２４７を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像を取得し、取得したマンモグラフィ画像を画像データ記憶部２４５ａに格納する。なお、画像データ取得部２４８ａは、通信制御部２４７を介してマンモグラフィ装置１０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像を取得してもよい。
所見情報取得部２４８ｂは、被検体の乳房に関する所見情報を取得する。具体的には、所見情報取得部２４８ｂは、通信制御部２４７を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像の所見情報を取得する。そして、所見情報取得部２４８ｂは、取得した所見情報を所見情報記憶部２４６ａに格納する。
表示制御部２４８ｃは、マンモグラフィ画像を参照するための参照画面を表示部２３に表示する。具体的には、表示制御部２４８ｃは、入力部２２を介して操作者から表示要求を受け付けた場合に、第１の実施形態で説明した表示制御部３５ｃと同様に、マンモグラフィ画像及び所見情報を配置した参照画面を表示部２３に表示する。このとき、表示制御部２４８ｃは、画像データ記憶部２４５ａに記憶されている被検体のマンモグラフィ画像と、所見情報記憶部２４６ａに記憶されている被検体の所見情報とを用いる。
領域設定部２４８ｄは、マンモグラフィ画像に関心領域を設定する。具体的には、領域設定部２４８ｄは、第１の実施形態で説明した領域設定部３５ｄと同様の方法で、マンモグラフィ画像に関心領域を設定する。例えば、領域設定部２４８ｄは、被検体の左右それぞれの乳房について、ＭＬＯ画像及びＣＣ画像それぞれに関心領域を設定する。
位置特定部２４８ｅは、マンモグラフィ画像上での関心領域の位置情報と、撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での関心領域の位置情報を特定する。具体的には、位置特定部２４８ｅは、第１の実施形態で説明した位置特定部３５ｅと同様の方法で、模式図上での関心領域の位置情報を特定する。
その後、位置特定部２４８ｅは、第１の実施形態で説明した位置特定部３５ｅと同様に、乳腺領域の模式図のテンプレート上に関心領域を示す領域を配置した表示情報を生成する。そして、位置特定部２４８ｅは、例えば、生成した表示情報に基づいて、図１２に示した参照画面と同様の参照画面を表示部２３に表示する。
上述したように、第３の実施形態では、超音波診断装置２０が、被検体の乳房を撮像したマンモグラフィ画像に関心領域を設定し、当該マンモグラフィ画像上での関心領域の位置情報と、当該マンモグラフィ画像の撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での関心領域の位置情報を特定して出力する。これにより、例えば、超音波検査の技師が、超音波診断装置２０を用いて、マンモグラフィ画像上で設定された関心領域に対応する位置を模式図上で容易に把握することができるようになり、乳腺画像診断の精度を高めることができる。
（第４の実施形態）
上述した第１〜第３の実施形態では、操作者による操作に基づいて関心領域が設定される場合の例を説明したが、実施形態はこれに限られない。例えば、マンモグラフィ画像から乳腺実質領域を抽出し、抽出した乳腺実質領域に基づいて、乳房における関心領域を自動的に設定してもよい。
そこで、第４の実施形態では、画像表示装置１４０が、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出し、抽出した乳腺実質領域に基づいて、乳房における関心領域を特定して表示する場合の例を説明する。これにより、超音波検査の技師が、マンモグラフィ画像上で乳腺実質の密度が高い領域を特に注意して超音波検査を行うことができるようになり、乳腺画像診断の精度を高めることができる。以下では、本実施形態に係る画像表示装置１４０について詳細に説明する。
図２４は、第４の実施形態に係る画像表示装置１４０の構成例を示す図である。図２４に示すように、画像表示装置１４０は、入力部１４１と、表示部１４２と、通信制御部１４３と、記憶部１４４と、制御部１４５とを有する。
入力部１４１は、操作から各種操作や各種情報の入力を受け付ける。例えば、入力部１４１は、ボタンやタッチパネル、ペンタブレットなどである。
表示部１４２は、操作者から各種操作を受け付けるためのＧＵＩや各種画像を表示する。例えば、表示部１４２は、液晶ディスプレイやタッチパネルなどである。
通信制御部１４３は、ネットワーク５０を介して他の装置との間で行われる通信を制御する。例えば、通信制御部１４３は、無線ＬＡＮを介してネットワーク５０に接続することで、他の装置との間で無線通信を行う。
記憶部１４４は、ハードディスクや半導体メモリなどの記憶装置であり、各種情報を記憶する。具体的には、記憶部１４４は、画像データ記憶部１４４ａと、所見情報記憶部１４４ｂとを有する。
画像データ記憶部１４４ａは、被検体の乳房を撮像したマンモグラフィ画像を記憶する。この画像データ記憶部１４４ａには、後述する画像データ取得部１４５ａによってマンモグラフィ画像が格納される。
所見情報記憶部１４４ｂは、被検体のマンモグラフィ画像に関する所見情報を記憶する。この所見情報記憶部１４４ｂには、後述する所見情報取得部１４５ｂによって所見情報が格納される。
制御部１４５は、ＣＰＵ及びメモリを有し、それらを用いて各種プログラムを実行させることで、画像表示装置１４０の動作を制御する。具体的には、制御部１４５は、画像データ取得部１４５ａと、所見情報取得部１４５ｂと、表示制御部１４５ｃと、抽出部１４５ｄと、特定部１４５ｅとを有する。
画像データ取得部１４５ａは、被検体の乳房を撮像したマンモグラフィ画像を取得する。なお、画像データ取得部１４５ａは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像を取得する。
具体的には、画像データ取得部１４５ａは、通信制御部１４３を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像を取得し、取得したマンモグラフィ画像を画像データ記憶部１４４ａに格納する。なお、画像データ取得部１４５ａは、通信制御部１４３を介してマンモグラフィ装置１０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像を取得してもよい。
所見情報取得部１４５ｂは、被検体の乳房に関する所見情報を取得する。具体的には、所見情報取得部１４５ｂは、通信制御部１４３を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像の所見情報を取得する。そして、所見情報取得部１４５ｂは、取得した所見情報を所見情報記憶部１４４ｂに格納する。
表示制御部１４５ｃは、マンモグラフィ画像を参照するための参照画面を表示部１４２に表示する。具体的には、表示制御部１４５ｃは、入力部１４１を介して操作者から表示要求を受け付けた場合に、診断対象の被検体に関するマンモグラフィ画像を画像データ記憶部１４４ａから読み出し、診断対象の被検体に関する所見情報を所見情報記憶部１４４ｂから読み出す。そして、表示制御部１４５ｃは、読み出したマンモグラフィ画像及び所見情報を配置した参照画面を表示部１４２に表示する。
図２５は、第４の実施形態に係る表示制御部１４５ｃによって表示される参照画面の一例を示す図である。例えば、図２５に示すように、表示制御部１４５ｃは、マンモグラフィ画像１６１〜１６４、乳腺領域の模式図１６５及び１６６、処理開始ボタン１６７、所見表示領域１６８をそれぞれ配置した参照画面を表示部１４２に表示する。
ここで、マンモグラフィ画像１６１は、被検体の左側の乳房に関するＣＣ方向のマンモグラフィ画像であり、マンモグラフィ画像１６２は、被検体の左側の乳房に関するＭＬＯ方向のマンモグラフィ画像である。マンモグラフィ画像１６３は、被検体の右側の乳房に関するＭＬＯ方向のマンモグラフィ画像であり、マンモグラフィ画像１６４は、被検体の右側の乳房に関するＣＣ方向のマンモグラフィ画像である。模式図１６５は、被検体の左側の乳房における乳腺領域を示し、模式図１６６は、被検体の右側の乳房における乳腺領域を示している。処理開始ボタン１６７は、乳腺実質領域の抽出処理の開始指示を操作者から受け付けるためのボタンである。所見表示領域１６８は、被検体のマンモグラフィ画像に関する所見情報を表示するための領域である。
図２４に戻って、抽出部１４５ｄは、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出する。そして、抽出部１４５ｄは、抽出した乳腺実質領域を、表示制御部１４５ｃによって表示された参照画面上のマンモグラフィ画像に重畳して表示する。なお、抽出部１４５ｄは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから乳腺実質領域を抽出する。
具体的には、抽出部１４５ｄは、画像表示装置１４０の操作者によって参照画面の処理開始ボタン１６７が押された場合に、診断対象の被検体に関するマンモグラフィ画像を画像データ記憶部１４４ａから読み出し、読み出したマンモグラフィ画像から乳腺実質領域を抽出する。なお、抽出部１４５ｄは、画像データ取得部１４５ａによって被検体のマンモグラフィ画像が取得された時点で、当該マンモグラフィ画像から乳腺実質領域を抽出しておいてもよい。
例えば、抽出部１４５ｄは、マンモグラフィ画像における輝度値の分布に基づいて、閾値処理によって乳腺実質領域を抽出する。
図２６及び２７は、第４の実施形態に係る抽出部１４５ｄによって行われる乳腺実質領域の抽出を説明するための図である。一般的に、乳腺実質、大胸筋及び脂肪では、それぞれＸ線の透過係数が異なるため、マンモグラフィ画像では、乳腺実質及び大胸筋は白く描出され、脂肪は黒く描出されることが知られている。そのため、マンモグラフィ画像における輝度値のヒストグラムを用いて輝度値の分布の特徴を解析することで、乳腺実質と推定される領域を抽出することが可能である。
例えば、図２６に示すように、抽出部１４５ｄは、脂肪の輝度値と乳腺実質の輝度値とを区別するための閾値Ａ、乳腺実質の輝度値と胸壁の輝度値とを区別するための閾値Ｂとを用いて、マンモグラフィ画像に含まれる画素の輝度値を３つの範囲に区分けする。このように、抽出部１４５ｄは、乳腺実質に対応する輝度値に関する下限の閾値Ａと上限の閾値Ｂとを用いることで、乳腺実質の密度が高い領域を乳腺実質領域として抽出する。
そして、例えば、抽出部１４５ｄは、輝度値が閾値Ａ以下である画素には画素値「０」を割り当て、輝度値が閾値Ａより大きく閾値Ｂ以下である画素には画素値「１」を割り当て、輝度値が閾値Ｂより大きい画素には画素値「２」を割り当てる。これにより、図２７の左側及び中央の図に示すように、処理対象のマンモグラフィ画像が３値化されて、画素値「０」の領域１７１と、画素値「１」の領域１７２と、画素値「２」の領域１７３とに分けられる。ここで、領域１７１は、脂肪を示す領域となり、領域１７２は、乳腺実質を示す領域となり、領域１７３は、胸壁を示す領域となる。その後、抽出部１４５ｄは、画素値「１」の領域１７２を抽出することで、乳腺実質領域を抽出する。ここで、抽出部１４５ｄは、乳腺実質領域として、画素値「１」の領域の輪郭（境界）を抽出してもよい。そして、抽出部１４５ｄは、図２７の右側に示すように、抽出した乳腺実質領域を、表示制御部１４５ｃによって表示された参照画面上のマンモグラフィ画像に重畳して表示する。
なお、抽出部１４５ｄは、他のエッジ検出方法で乳腺実質領域を抽出してもよい。例えば、抽出部１４５ｄは、マンモグラフィ画像における輝度値の分布に基づいて、微分エッジ検出法を用いて乳腺実質領域を抽出してもよい。微分エッジ検出法は、輝度値の変化に対して、輝度値の勾配における勾配方向の２次導関数のゼロ交差を検出する手法であり、サブピクセルの正確さでエッジの位置を求めることができる。
また、抽出部１４５ｄは、マンモグラフィ画像における輝度値の分布に基づいて、ソーベルオペレータを用いて乳腺実質領域を抽出してもよい。ソーベルオペレータは、輝度値の変化に対して、局所積和演算で輝度値の勾配の強度（微分値）を求める方法である。例えば、ソーベルオペレータでは、以下の式（４）に示す係数行列ｆx及びｆyが用いられる。ｆxは、縦方向のエッジを検出するための係数行列であり、ｆyは、横方向のエッジを検出するための係数行列である。
そして、以下に示す式（５）によって、輝度値の勾配の強度｜▽ｆ｜が求められる。
また、以下に示す式（６）によって、エッジの方向θが求められる。
θ＝ｔａｎ-1（ｆx／ｆy） ・・・（６）
図２４に戻って、特定部１４５ｅは、抽出部１４５ｄによって抽出された乳腺実質領域に基づいて、被検体の乳房における関心領域を特定する。そして、特定部１４５ｅは、特定した関心領域を、表示制御部１４５ｃによって表示された参照画面上の乳腺領域の模式図に表示する。なお、特定部１４５ｅは、被検体の左右それぞれの乳房について、抽出部１４５ｄによってＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから抽出された乳腺実質領域に基づいて、乳房における関心領域を特定する。
例えば、特定部１４５ｅは、ＭＬＯ方向のマンモグラフィ画像から抽出された乳腺実質領域に基づいて操作者が設定した領域と、ＣＣ方向のマンモグラフィ画像から抽出された乳腺実質領域に基づいて操作者が設定した領域との重複部分を、関心領域として特定する。このように、異なる方向のマンモグラフィ画像に設定された領域の重複部分を関心領域として特定することで、超音波検査の技師が超音波検査を行う際に特に注意して検査を行うべき領域を、より正確に提示することができるようになる。
図２８は、第４の実施形態に係る特定部１４５ｅによって行われる関心領域の特定を説明するための図である。なお、ここでは、被検体の右側の乳房における関心領域を特定する例を説明するが、左側の乳房についても同様の方法で関心領域を特定することができる。
図２８の左上側に示すように、参照画面には、抽出部１４５ｄによって、ＭＬＯ方向のマンモグラフィ画像から抽出された乳腺実質領域１８１が、ＭＬＯ方向のマンモグラフィ画像１６３上に表示される。また、図２８の左下側に示すように、参照画面には、抽出部１４５ｄによって、ＣＣ方向のマンモグラフィ画像から抽出された乳腺実質領域１８２が、ＣＣ方向のマンモグラフィ画像１６４上に表示される。
特定部１４５ｅは、抽出部１４５ｄによって各乳腺実質領域が表示されると、入力部１４１を介して、乳腺領域の模式図１６６上に領域を設定する操作を操作者から受け付ける。具体的には、特定部１４５ｅは、図２８の中央上側に示すように、ＭＬＯ方向のマンモグラフィ画像１６３上に表示された乳腺実質領域１８１に基づいて、操作者が乳腺領域の模式図１６６上に領域１８３を設定する操作を受け付ける。また、特定部１４５ｅは、図２８の中央下側に示すように、ＣＣ方向のマンモグラフィ画像１６４上に表示された乳腺実質領域１８２に基づいて、操作者が乳腺領域の模式図１６６上に領域１８４を設定する操作を受け付ける。そして、特定部１４５ｅは、２つの領域１８３及び１８４が操作者によって設定されると、図２８の右側に示すように、各領域の重複部分を関心領域１８５として特定する。
なお、例えば、特定部１４５ｅは、操作者から領域の設定を受け付けるのではなく、自動的に関心領域を設定してもよい。例えば、特定部１４５ｅは、ＭＬＯ方向のマンモグラフィ画像から抽出された乳腺実質領域の大きさから関心領域の一方の長さを設定し、ＣＣ方向のマンモグラフィ画像から抽出された乳腺実質領域の大きさから関心領域の他方の長さを設定することで、関心領域を特定する。
図２９は、第４の実施形態に係る特定部１４５ｅによって行われる関心領域の特定の他の例を説明するための図である。例えば、図２９の上側に示すように、特定部１４５ｅは、マンモグラフィ画像における領域の位置と、乳腺領域の模式図における領域の位置との対応をあらかじめ設定しておく。そして、図２９の下側に示すように、特定部１４５ｅは、ＣＣ方向のマンモグラフィ画像における乳腺実質領域の内側−外側方向の長さｘを算出し、算出した長さｘに応じて、関心領域の内側−外側方向の長さｘ’を設定する。なお、特定部１４５ｅは、関心領域の上側−下側方向の長さｙ’については、ＭＬＯ方向のマンモグラフィ画像における乳腺実質領域の上側−下側方向の長さに応じて設定する。
図３０は、第４の実施形態に係る画像表示装置１４０によって行われる処理の処理手順を示すフローチャートである。図３０に示すように、画像表示装置１４０は、操作者からマンモグラフィ画像及び所見情報の表示指示を受け付けた場合に（ステップＳ２０１，Ｙｅｓ）、画像データ取得部１４５ａが、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像を取得する（ステップＳ２０２、Ｓ２０３）。また、所見情報取得部１４５ｂが、被検体の乳房に関する所見情報を取得する（ステップＳ２０４）。
続いて、表示制御部１４５ｃが、マンモグラフィ画像を参照するための参照画面を表示部１４２に表示する（ステップＳ２０５）。その後、抽出部１４５ｄが、操作者によって参照画面の処理開始ボタン１６７が押された場合に（ステップＳ２０６，Ｙｅｓ）、被検体のＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから乳腺実質領域を抽出する（ステップＳ２０７、Ｓ２０８）。
続いて、特定部１４５ｅが、抽出部１４５ｄによってＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから抽出された乳腺実質領域に基づいて、乳房における関心領域を特定する（ステップＳ２０９）。そして、特定部１４５ｅは、特定した関心領域を、表示制御部１４５ｃによって表示された参照画面上に表示する（ステップＳ２１０）。
上述したように、第４の実施形態では、画像表示装置１４０が、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出し、抽出した乳腺実質領域に基づいて、乳房における関心領域を特定して表示する。これにより、超音波検査の技師が、マンモグラフィ画像上で乳腺実質の密度が高い領域を特に注意して超音波検査を行うことができるようになり、乳腺画像診断の精度を高めることができる。
（第５の実施形態）
上述した第４の実施形態では、画像表示装置１４０が、被検体のマンモグラフィ画像から乳腺実質領域を抽出して関心領域を特定し、特定した関心領域を表示する場合の例について説明した。これに対し、第５の実施形態では、画像処理装置１３０が、被検体のマンモグラフィ画像から乳腺実質領域を抽出して関心領域を特定し、画像表示装置４０が、画像処理装置１３０によって特定された関心領域を表示する場合の例を説明する。なお、第５の実施形態に係る医用情報処理システムが有する装置の構成は、図１に示したものと同じである。
図３１は、第５の実施形態に係る画像処理装置１３０の構成例を示す図である。図３１に示すように、画像処理装置１３０は、入力部１３１と、表示部１３２と、通信制御部１３３と、記憶部１３４と、制御部１３５とを有する。
入力部１３１は、操作者から各種操作や各種情報の入力を受け付ける。例えば、入力部１３１は、キーボードやマウス、ボタン、トラックボール、タッチパネルなどである。
表示部１３２は、操作者から各種操作を受け付けるためのＧＵＩや各種画像を表示する。例えば、表示部１３２は、液晶ディスプレイやＣＲＴ（Cathode Ray Tube）ディスプレイ、タッチパネルなどである。
通信制御部１３３は、ネットワーク５０を介して他の装置との間で行われる通信を制御する。例えば、通信制御部１３３は、ネットワークカードやネットワークアダプタであり、Ｅｔｈｅｒｎｅｔ（登録商標）のＬＡＮを介してネットワーク５０に接続することで、他の装置との間で通信を行う。また、例えば、通信制御部１３３は、無線ＬＡＮを介してネットワーク５０に接続することで、他の装置との間で無線通信を行う。
記憶部１３４は、ハードディスクや半導体メモリなどの記憶装置であり、各種情報を記憶する。具体的には、記憶部１３４は、画像データ記憶部１３４ａと、所見情報記憶部１３４ｂとを有する。
画像データ記憶部１３４ａは、被検体の乳房を撮像したマンモグラフィ画像を記憶する。この画像データ記憶部１３４ａには、後述する画像データ取得部１３５ａによってマンモグラフィ画像が格納される。
所見情報記憶部１３４ｂは、被検体のマンモグラフィ画像に関する所見情報を記憶する。この所見情報記憶部１３４ｂには、後述する所見情報作成部１３５ｂによって所見情報が格納される。
制御部１３５は、ＣＰＵ及びメモリを有し、それらを用いて各種プログラムを実行させることで、画像処理装置１３０の動作を制御する。具体的には、制御部１３５は、画像データ取得部１３５ａと、所見情報作成部１３５ｂと、表示制御部１３５ｃと、抽出部１３５ｄと、特定部１３５ｅと、送信部１３５ｆとを有する。
画像データ取得部１３５ａは、被検体の乳房を撮像したマンモグラフィ画像を取得する。なお、画像データ取得部１３５ａは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像を取得する。具体的には、画像データ取得部１３５ａは、通信制御部１３３を介してマンモグラフィ装置１０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像を取得する。
所見情報作成部１３５ｂは、操作者から入力された所見に基づいて、被検体のマンモグラフィ画像に関する所見情報を作成する。具体的には、所見情報作成部１３５ｂは、入力部１３１を介して、マンモグラフィ検査の技師からマンモグラフィ画像に関する所見の入力を受け付ける。そして、所見情報作成部１３５ｂは、受け付けた所見を示す所見情報を作成し、所見情報記憶部１３４ｂに格納する。
表示制御部１３５ｃは、マンモグラフィ画像を参照するための参照画面を表示部１３２に表示する。具体的には、表示制御部１３５ｃは、入力部１３１を介して操作者から表示要求を受け付けた場合に、第４の実施形態で説明した表示制御部１４５ｃと同様に、マンモグラフィ画像及び所見情報を配置した参照画面を表示部１３２に表示する。このとき、表示制御部１３５ｃは、画像データ記憶部１３４ａに記憶されている被検体のマンモグラフィ画像と、所見情報記憶部１３４ｂに記憶されている被検体の所見情報とを用いる。
抽出部１３５ｄは、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出する。そして、抽出部１３５ｄは、抽出した乳腺実質領域を、表示制御部１３５ｃによって表示された参照画面上のマンモグラフィ画像に重畳して表示する。なお、抽出部１３５ｄは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから乳腺実質領域を抽出する。
具体的には、抽出部１３５ｄは、画像処理装置１３０の操作者によって参照画面の処理開始ボタンが押された場合に、診断対象の被検体に関するマンモグラフィ画像を画像データ記憶部１３４ａから読み出し、第４の実施形態で説明した抽出部１４５ｄと同様の方法で、読み出したマンモグラフィ画像から乳腺実質領域を抽出する。なお、抽出部１３５ｄは、画像データ取得部１３５ａによって被検体のマンモグラフィ画像が取得された時点で、当該マンモグラフィ画像から乳腺実質領域を抽出しておいてもよい。
特定部１３５ｅは、抽出部１３５ｄによって抽出された乳腺実質領域に基づいて、被検体の乳房における関心領域を特定する。そして、特定部１３５ｅは、特定した関心領域を、表示制御部１３５ｃによって表示された参照画面上の乳腺領域の模式図に表示する。なお、特定部１３５ｅは、被検体の左右それぞれの乳房について、抽出部１３５ｄによってＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから抽出された乳腺実質領域に基づいて、乳房における関心領域を特定する。
具体的には、特定部１３５ｅは、第４の実施形態で説明した特定部１４５ｅと同様の方法で、抽出部１３５ｄによって抽出された乳腺実質領域に基づいて、被検体の乳房における関心領域を特定し、特定した関心領域を参照画面上に表示する。
送信部１３５ｆは、操作者からの指示に応じて、特定部１３５ｅによって特定された関心領域を示す情報を画像表示装置４０に送信する。具体的には、送信部１３５ｆは、入力部１３１を介して、画像処理装置１３０の操作者から表示情報の送信指示を受け付ける。そして、送信部１３５ｆは、表示情報の送信指示を受け付けると、特定部１３５ｅによって関心領域が特定された後の参照画面と同様の情報を含んだ画面を表示するための表示情報を生成して、画像表示装置４０に送信する。例えば、送信部１３５ｆは、表示制御部１３５ｃによって表示された参照画面上で、抽出部１３５ｄによって抽出された乳腺実質領域をマンモグラフィ画像上に重畳させ、特定部１３５ｅによって特定された関心領域を乳腺領域の模式図上に示した画面を表示するための表示情報を生成して、画像表示装置４０に送信する。
なお、例えば、送信部１３５ｆは、画像表示装置４０からの要求に応じて、特定部１３５ｅによって特定された関心領域を示す情報を画像表示装置４０に送信してもよい。この場合には、例えば、送信部１３５ｆは、通信制御部１３３を介して、画像表示装置４０から表示情報の要求を受け付ける。そして、送信部１３５ｆは、表示情報の要求を受け付けると、上述した表示情報を生成して、要求を送信した画像表示装置４０に対して当該表示情報を送信する。
上述したように、第５の実施形態では、画像処理装置１３０が、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出し、抽出した乳腺実質領域に基づいて、乳房における関心領域を特定する。そして、画像表示装置４０が、画像処理装置１３０によって特定された関心領域を示す情報を表示する。これにより、例えば、マンモグラフィ検査の技師が、画像処理装置１３０を用いて関心領域を特定し、超音波検査を行う技師が、画像表示装置４０を用いて、マンモグラフィ検査の技師によって特定された関心領域を特に注意して超音波検査を行うことができるようになる。このように、マンモグラフィ検査の技師が関心領域を特定することで、乳腺画像診断の精度をより高めることができる。
なお、第５の実施形態では、抽出部１３５ｄが、画像処理装置１３０の操作者によって参照画面の処理開始ボタンが押された場合に、マンモグラフィ画像から乳腺実質領域を抽出する場合の例を説明した。これに対し、例えば、抽出部１３５ｄは、画像表示装置４０から処理開始の要求を受け付けた場合に、マンモグラフィ画像から乳腺実質領域を抽出してもよい。この場合には、例えば、表示制御部１３５ｃが、画像表示装置４０からの要求に応じて、マンモグラフィ画像及び所見情報を配置した参照画面を表示するための情報を画像表示装置４０に送信しておく。そして、抽出部１３５ｄは、画像表示装置４０の操作者が参照画面を介して処理開始を指示した場合に、ネットワーク５０を介して、画像表示装置４０から処理開始の要求を受け付ける。
（第６の実施形態）
上述した第１及び第５の実施形態では、画像表示装置４０が、被検体の乳房における関心領域を表示する場合の例について説明した。これに対し、第６の実施形態では、超音波診断装置２０が、被検体のマンモグラフィ画像から乳腺実質領域を抽出して関心領域を特定し、特定した関心領域を表示する場合の例を説明する。なお、第６の実施形態に係る医用情報処理システムが有する装置の構成は、図１に示したものと同じである。
図３２は、第６の実施形態に係る超音波診断装置２０の詳細な構成例を示す図である。なお、図３２は、図４に示した超音波診断装置２０が有する構成のうち、入力部１２２と、表示部１２３と、装置本体１２４と、画像メモリ１２４５と、内部記憶部１２４６と、通信制御部１２４７と、制御部１２４８とを示している。
図３２に示すように、例えば、画像メモリ１２４５は、画像データ記憶部１２４５ａを有し、内部記憶部１２４６は、所見情報記憶部１２４６ａを有する。なお、画像データ記憶部１２４５ａは、内部記憶部１２４６に含まれてもよいし、所見情報記憶部１２４６ａは、画像メモリ１２４５に含まれてもよい。
画像データ記憶部１２４５ａは、被検体の乳房を撮像したマンモグラフィ画像を記憶する。この画像データ記憶部１２４５ａには、後述する画像データ取得部１２４８ａによってマンモグラフィ画像が格納される。
所見情報記憶部１２４６ａは、被検体のマンモグラフィ画像に関する所見情報を記憶する。この所見情報記憶部１２４６ａには、後述する所見情報取得部１２４８ｂによって所見情報が格納される。
また、図３２に示すように、例えば、制御部１２４８は、画像データ取得部１２４８ａと、所見情報取得部１２４８ｂと、表示制御部１２４８ｃと、抽出部１２４８ｄと、特定部１２４８ｅとを有する。
画像データ取得部１２４８ａは、被検体の乳房を撮像したマンモグラフィ画像を取得する。なお、画像データ取得部１２４８ａは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像を取得する。
具体的には、画像データ取得部１２４８ａは、通信制御部１２４７を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像を取得し、取得したマンモグラフィ画像を画像データ記憶部１２４５ａに格納する。なお、画像データ取得部１２４８ａは、通信制御部１２４７を介してマンモグラフィ装置１０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像を取得してもよい。
所見情報取得部１２４８ｂは、被検体の乳房に関する所見情報を取得する。具体的には、所見情報取得部１２４８ｂは、通信制御部１２４７を介して画像処理装置３０と通信を行うことで、診断対象の被検体に関するマンモグラフィ画像の所見情報を取得する。そして、所見情報取得部１２４８ｂは、取得した所見情報を所見情報記憶部１２４６ａに格納する。
表示制御部１２４８ｃは、マンモグラフィ画像を参照するための参照画面を表示部１２３に表示する。具体的には、表示制御部１２４８ｃは、入力部１２２を介して操作者から表示要求を受け付けた場合に、第４の実施形態で説明した表示制御部１４５ｃと同様に、マンモグラフィ画像及び所見情報を配置した参照画面を表示部１２３に表示する。このとき、表示制御部１２４８ｃは、画像データ記憶部１２４５ａに記憶されている被検体のマンモグラフィ画像と、所見情報記憶部１２４６ａに記憶されている被検体の所見情報とを用いる。
抽出部１２４８ｄは、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出する。そして、抽出部１２４８ｄは、抽出した乳腺実質領域を、表示制御部１２４８ｃによって表示された参照画面上のマンモグラフィ画像に重畳して表示する。なお、抽出部１２４８ｄは、被検体の左右それぞれの乳房について、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから乳腺実質領域を抽出する。
具体的には、抽出部１２４８ｄは、操作者によって参照画面の処理開始ボタンが押された場合に、診断対象の被検体に関するマンモグラフィ画像を画像データ記憶部１２４５ａから読み出し、第４の実施形態で説明した抽出部１４５ｄと同様の方法で、読み出したマンモグラフィ画像から乳腺実質領域を抽出する。なお、抽出部１２４８ｄは、画像データ取得部１２４８ａによって被検体のマンモグラフィ画像が取得された時点で、当該マンモグラフィ画像から乳腺実質領域を抽出しておいてもよい。
特定部１２４８ｅは、抽出部１２４８ｄによって抽出された乳腺実質領域に基づいて、被検体の乳房における関心領域を特定する。そして、特定部１２４８ｅは、特定した関心領域を、表示制御部１２４８ｃによって表示された参照画面上の乳腺領域の模式図に表示する。なお、特定部１２４８ｅは、被検体の左右それぞれの乳房について、抽出部１２４８ｄによってＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像それぞれから抽出された乳腺実質領域に基づいて、乳房における関心領域を特定する。
具体的には、特定部１２４８ｅは、第４の実施形態で説明した特定部１４５ｅと同様の方法で、抽出部１２４８ｄによって抽出された乳腺実質領域に基づいて、被検体の乳房における関心領域を特定し、特定した関心領域を参照画面上に表示する。
上述したように、第６の実施形態では、超音波診断装置２０が、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出し、抽出した乳腺実質領域に基づいて、乳房における関心領域を特定して表示する。これにより、画像表示装置４０を用いなくても、超音波診断装置２０を介して、超音波検査の技師に対して特に注意して検査を行うべき領域を提示することができる。
なお、第６の実施形態では、超音波診断装置２０が、マンモグラフィ画像から乳腺実質領域を抽出して関心領域を特定し、特定した関心領域を表示する場合の例を説明したが、例えば、第５の実施形態で説明したように、画像処理装置３０が、マンモグラフィ画像から乳腺実質領域を抽出して関心領域を特定してもよい。
その場合には、例えば、超音波診断装置２０において、通信制御部１２４７が、ネットワーク５０を介して、被検体の乳房を撮像したマンモグラフィ画像と当該マンモグラフィ画像に対する関心領域の情報とを画像処理装置３０から受信する。また、画像処理部２４４が、超音波プローブ２１によって収集されたデータに基づいて、超音波画像を生成する。そして、表示制御部１２４８ｃが、通信制御部１２４７によって受信されたマンモグラフィ画像と、関心領域と、画像処理部２４４によって生成された超音波画像とを表示部１２３に表示する。
なお、上述した第１〜第６の実施形態では、マンモグラフィ装置１０によって撮像されたマンモグラフィ画像が用いられる場合の例を説明したが、実施形態はこれに限られない。例えば、マンモグラフィ画像の代わりに、スクリーンフィルムシステムによって撮像された画像が用いられてもよい。
また、上述した第１〜第６の実施形態では、ＭＬＯ方向のマンモグラフィ画像及びＣＣ方向のマンモグラフィ画像が用いられる場合の例を説明したが、実施形態はこれに限られない。例えば、ＭＬＯ方向及びＣＣ方向以外の他の方向から撮像されたマンモグラフィ画像が用いられてもよい。
また、上記実施形態で説明した画像処理装置３０が有する制御部３５の機能、画像表示装置４０が有する制御部４５の機能、及び、超音波診断装置２０が有する制御部２４８の機能は、それぞれソフトウェアによって実現することもできる。例えば、各制御部の機能は、各制御部が行うものとして説明した処理の手順を規定した医用情報処理プログラムをコンピュータに実行させることで実現される。この場合に、医用情報処理プログラムは、例えば、ハードディスクや半導体メモリ素子等に記憶され、ＣＰＵやＭＰＵ等のプロセッサによって読み出されて実行される。また、医用情報処理プログラムは、ＣＤ−ＲＯＭ（Compact Disc − Read Only Memory）やＭＯ（Magnetic Optical disk）、ＤＶＤ（Digital Versatile Disc）などのコンピュータ読取り可能な記録媒体に記録されて、配布され得る。
以上説明した少なくとも一つの実施形態によれば、乳腺画像診断の精度を高めることができる。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
１００ 医用情報処理システム
２０ 超音波診断装置
３０ 画像処理装置
３４ 記憶部
３４ａ 画像データ記憶部
３５ 制御部
３５ｄ 領域設定部
３５ｅ 位置特定部
４０ 画像表示装置

Claims (20)

  1. 被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを記憶する記憶部と、
    前記マンモグラフィ画像に関心領域を設定する領域設定部と、
    前記マンモグラフィ画像上での前記関心領域の位置情報と、前記撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での前記関心領域の位置情報を特定する位置特定部と、
    前記模式図上での前記関心領域の位置情報を出力する出力部と
    を備える、医用情報処理システム。
  2. 前記記憶部は、第１の撮影方向から前記乳房を撮像した第１のマンモグラフィ画像と、第２の撮影方向から前記乳房を撮像した第２のマンモグラフィ画像とを記憶し、
    前記領域設定部は、前記第１のマンモグラフィ画像に第１の関心領域を設定し、前記第２のマンモグラフィ画像に第２の関心領域を設定し、
    前記位置特定部は、前記第１のマンモグラフィ画像上での前記第１の関心領域の位置情報、前記第２のマンモグラフィ画像上での前記第２の関心領域の位置情報、前記第１の撮影方向を示す情報、及び前記第２の撮影方向を示す情報に基づいて、前記模式図上での前記第１の関心領域及び前記第２の関心領域それぞれの位置情報を特定する、
    請求項１に記載の医用情報処理システム。
  3. 前記位置特定部は、前記第１の関心領域及び前記第２の関心領域それぞれの位置情報に基づいて、前記模式図上での前記第１の関心領域と前記第２の関心領域との重複部分の位置情報を特定する、
    請求項２に記載の医用情報処理システム。
  4. 前記位置特定部は、前記マンモグラフィ画像を撮像したマンモグラフィ装置の装置座標系で表される位置情報に基づいて、前記模式図上での前記関心領域の位置を特定する、
    請求項１〜３のいずれか一つに記載の医用情報処理システム。
  5. 前記位置特定部は、前記マンモグラフィ画像から所定の画像処理によって前記模式図上での前記関心領域の位置を特定する、
    請求項１〜３のいずれか一つに記載の医用情報処理システム。
  6. 前記領域設定部は、被検体の乳房を撮像したマンモグラフィ画像から乳腺実質領域を抽出し、前記乳腺実質領域に基づいて、前記関心領域を設定する、
    請求項１に記載の医用情報処理システム。
  7. 前記領域設定部は、第１の撮影方向から前記乳房を撮像したマンモグラフィ画像から第１の乳腺実質領域を抽出し、第２の撮影方向から前記乳房を撮像したマンモグラフィ画像から第２の乳腺実質領域を抽出し、前記第１の乳腺実質領域及び前記第２の乳腺実質領域に基づいて、前記関心領域を設定する、
    請求項６に記載の医用情報処理システム。
  8. 前記領域設定部は、前記第１の乳腺実質領域の大きさから前記関心領域の一方の長さを設定し、前記第２の乳腺実質領域の大きさから前記関心領域の他方の長さを設定することで、前記関心領域を設定する、
    請求項７に記載の医用情報処理システム。
  9. 前記領域設定部は、操作者が前記第１の乳腺実質領域に基づいて設定した領域と前記第２の乳腺実質領域に基づいて設定した領域との重複部分を前記関心領域として設定する、
    請求項７に記載の医用情報処理システム。
  10. 前記領域設定部は、前記マンモグラフィ画像における輝度値の分布に基づいて、閾値処理によって前記乳腺実質領域を抽出する、
    請求項６〜９のいずれか一つに記載の医用情報処理システム。
  11. 前記領域設定部は、前記マンモグラフィ画像における輝度値の分布に基づいて、微分エッジ検出法を用いて前記乳腺実質領域を抽出する、
    請求項６〜９のいずれか一つに記載の医用情報処理システム。
  12. 前記領域設定部は、前記マンモグラフィ画像における輝度値の分布に基づいて、ソーベルオペレータを用いて前記乳腺実質領域を抽出する、
    請求項６〜９のいずれか一つに記載の医用情報処理システム。
  13. 前記出力部は、超音波診断時の参考情報として、前記模式図上での前記関心領域の位置情報を出力する、
    請求項１〜１２のいずれか一つに記載の医用情報処理システム。
  14. 前記出力部は、超音波診断を受けている受診者に対応する模式図上での位置情報を出力する、
    請求項１〜１３のいずれか一つに記載の医用情報処理システム。
  15. 前記出力部は、前記模式図上でのブラインドエリアの位置情報をさらに出力する、
    請求項１〜１４のいずれか一つに記載の医用情報処理システム。
  16. ネットワークを介して相互に接続された画像表示装置と画像処理装置とを有し、
    前記画像表示装置は、前記出力部を備え、
    前記画像処理装置は、
    前記記憶部と、
    前記領域設定部と、
    前記位置特定部と、
    操作者からの指示に応じて、前記関心領域を示す情報を前記画像表示装置に送信する送信部と
    を備えたことを特徴とする請求項１〜１５のいずれか一つに記載の医用情報処理システム。
  17. ネットワークを介して相互に接続された画像表示装置と画像処理装置とを有し、
    前記画像表示装置は、前記出力部を備え、
    前記画像処理装置は、
    前記記憶部と、
    前記領域設定部と、
    前記位置特定部と、
    前記画像表示装置からの要求に応じて、前記関心領域を示す情報を当該画像表示装置に送信する送信部と
    を備えたことを特徴とする請求項１〜１５のいずれか一つに記載の医用情報処理システム。
  18. 被検体の乳房を撮像したマンモグラフィ画像に関心領域を設定する手順と、
    前記マンモグラフィ画像と当該マンモグラフィ画像の撮影方向を示す情報とを記憶した記憶部を参照して、前記マンモグラフィ画像上での前記関心領域の位置情報と、前記撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での前記関心領域の位置情報を特定する手順と、
    前記模式図上での前記関心領域の位置情報を出力する手順と
    をコンピュータに実行させることを特徴とする医用情報処理プログラム。
  19. 被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像の撮影方向を示す情報とを取得する取得部と、
    前記マンモグラフィ画像に関心領域を設定する領域設定部と、
    前記マンモグラフィ画像上での前記関心領域の位置情報と、前記撮影方向を示す情報とに基づいて、乳房を模式的に表した模式図上での前記関心領域の位置情報を特定する位置特定部と、
    前記模式図上での前記関心領域の位置情報を出力する出力部と
    を備えたことを特徴とする超音波診断装置。
  20. ネットワークを介して、被検体の乳房を撮像したマンモグラフィ画像と、当該マンモグラフィ画像に設定された関心領域を示す情報とを画像処理装置から受信する通信制御部と、
    超音波プローブと、
    前記超音波プローブによって収集されたデータに基づいて、超音波画像を生成する画像処理部と、
    前記マンモグラフィ画像と、前記関心領域と、前記超音波画像とを表示部に表示する表示制御部と
    を備えたことを特徴とする超音波診断装置。
JP2014137257A 2013-07-03 2014-07-02 医用情報処理システム、医用情報処理プログラム及び超音波診断装置 Active JP6309376B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014137257A JP6309376B2 (ja) 2013-07-03 2014-07-02 医用情報処理システム、医用情報処理プログラム及び超音波診断装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013139974 2013-07-03
JP2013139974 2013-07-03
JP2014137257A JP6309376B2 (ja) 2013-07-03 2014-07-02 医用情報処理システム、医用情報処理プログラム及び超音波診断装置

Publications (2)

Publication Number Publication Date
JP2015027450A true JP2015027450A (ja) 2015-02-12
JP6309376B2 JP6309376B2 (ja) 2018-04-11

Family

ID=52143826

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014137257A Active JP6309376B2 (ja) 2013-07-03 2014-07-02 医用情報処理システム、医用情報処理プログラム及び超音波診断装置

Country Status (3)

Country Link
US (1) US10157465B2 (ja)
JP (1) JP6309376B2 (ja)
WO (1) WO2015002256A1 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016158963A (ja) * 2015-03-04 2016-09-05 コニカミノルタ株式会社 医用画像システム及びプログラム
JP2016206693A (ja) * 2015-04-15 2016-12-08 東芝メディカルシステムズ株式会社 医用情報処理システム
JP2017086896A (ja) * 2015-11-11 2017-05-25 東芝メディカルシステムズ株式会社 医用画像処理装置及び超音波診断装置
JP2017189245A (ja) * 2016-04-11 2017-10-19 東芝メディカルシステムズ株式会社 医用画像処理装置、医用情報処理システム、及び医用情報処理プログラム
JP2018161405A (ja) * 2017-03-27 2018-10-18 キヤノン株式会社 画像処理装置及び放射線画像データの表示方法
US10357216B2 (en) 2015-12-21 2019-07-23 Toshiba Medical Systems Corporation Mammography apparatus
US10463316B2 (en) 2016-09-12 2019-11-05 Canon Medical Systems Corporation Medical information processing system
JP2020163137A (ja) * 2019-03-26 2020-10-08 コニカミノルタジャパン株式会社 医用画像生成装置及び医用画像生成プログラム
US11559282B2 (en) 2017-02-06 2023-01-24 Canon Medical Systems Corporation Medical information processing system and medical image processing apparatus

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9877699B2 (en) 2012-03-26 2018-01-30 Teratech Corporation Tablet ultrasound system
US10667790B2 (en) 2012-03-26 2020-06-02 Teratech Corporation Tablet ultrasound system
KR20160071242A (ko) * 2014-12-11 2016-06-21 삼성전자주식회사 안구 움직임에 기반한 컴퓨터 보조 진단 장치 및 방법
JP6736864B2 (ja) * 2015-10-09 2020-08-05 コニカミノルタ株式会社 超音波画像診断装置
JP6886260B2 (ja) * 2016-09-07 2021-06-16 キヤノン株式会社 画像処理装置、その制御方法、およびプログラム
US11013490B2 (en) 2016-11-15 2021-05-25 Musclesound, Inc. Non-invasive determination of muscle tissue size
US11064971B2 (en) * 2016-11-30 2021-07-20 Musclesound, Inc. Non-Invasive determination of muscle tissue quality and intramuscular fat
US11096658B2 (en) 2017-02-02 2021-08-24 Musclesound, Inc. Non-invasive determination of pennation angle and/or fascicle length
US11160493B2 (en) 2017-03-03 2021-11-02 Musclesound, Inc. System and method for determining a subject's muscle fuel level, muscle fuel rating, and muscle energy status
US10863952B2 (en) * 2018-06-21 2020-12-15 General Electric Company Apparatus, system and method for controlling medical equipment
WO2020080082A1 (ja) * 2018-10-19 2020-04-23 富士フイルム株式会社 読影支援装置とその作動プログラムおよび作動方法
JP7053104B2 (ja) * 2019-02-08 2022-04-12 富士フイルム株式会社 放射線画像撮影システム、医用撮影システム、制御方法、及び制御プログラム
JP7282594B2 (ja) * 2019-05-20 2023-05-29 キヤノンメディカルシステムズ株式会社 医用画像処理装置、ｘ線診断装置及びプログラム
JP7195218B2 (ja) * 2019-05-29 2022-12-23 富士フイルム株式会社 放射線画像撮影システム、医用撮影システム、制御方法、及び制御プログラム
JP7471895B2 (ja) * 2020-04-09 2024-04-22 キヤノンメディカルシステムズ株式会社 超音波診断装置及び超音波診断システム
CN116630410A (zh) * 2020-06-02 2023-08-22 上海联影医疗科技股份有限公司 乳腺断层图像显示的方法、计算机设备和可读存储介质
CN113274041B (zh) * 2021-04-29 2022-08-23 上海联影医疗科技股份有限公司 感兴趣区域提取方法、装置、设备、系统和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008086742A (ja) * 2006-01-19 2008-04-17 Toshiba Corp 超音波プローブの軌跡表現装置及び超音波診断装置
JP2008279272A (ja) * 2003-05-08 2008-11-20 Hitachi Medical Corp 超音波診断装置
JP2012217770A (ja) * 2011-04-13 2012-11-12 Canon Inc 画像処理装置、その処理方法及びプログラム
JP2013008274A (ja) * 2011-06-27 2013-01-10 Ge Medical Systems Global Technology Co Llc 読影レポート作成システム及びその制御プログラム
JP2013020340A (ja) * 2011-07-08 2013-01-31 Disease Management Strategies International Inc 情報表示装置

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6075879A (en) * 1993-09-29 2000-06-13 R2 Technology, Inc. Method and system for computer-aided lesion detection using information from multiple images
US6269565B1 (en) * 1994-11-28 2001-08-07 Smartlight Ltd. Display device
US6059727A (en) * 1995-06-15 2000-05-09 The Regents Of The University Of Michigan Method and apparatus for composition and display of three-dimensional image from two-dimensional ultrasound scan data
US6247812B1 (en) * 1997-09-25 2001-06-19 Vismed System and method for diagnosing and treating a target tissue
US6068597A (en) * 1999-04-13 2000-05-30 Lin; Gregory Sharat Vibrational resonance ultrasonic Doppler spectrometer and imager
US6421454B1 (en) * 1999-05-27 2002-07-16 Litton Systems, Inc. Optical correlator assisted detection of calcifications for breast biopsy
GB9921042D0 (en) * 1999-09-07 1999-11-10 Stove George C Radar apparatus for spectrometric analysis and a method of performing spectrometric analysis of a substance
US7556602B2 (en) * 2000-11-24 2009-07-07 U-Systems, Inc. Breast cancer screening with adjunctive ultrasound mammography
US6855114B2 (en) * 2001-11-23 2005-02-15 Karen Drukker Automated method and system for the detection of abnormalities in sonographic images
US20040034304A1 (en) * 2001-12-21 2004-02-19 Chikayoshi Sumi Displacement measurement method and apparatus, strain measurement method and apparatus elasticity and visco-elasticity constants measurement apparatus, and the elasticity and visco-elasticity constants measurement apparatus-based treatment apparatus
US7190834B2 (en) * 2003-07-22 2007-03-13 Cognex Technology And Investment Corporation Methods for finding and characterizing a deformed pattern in an image
US20050089205A1 (en) * 2003-10-23 2005-04-28 Ajay Kapur Systems and methods for viewing an abnormality in different kinds of images
JP4709604B2 (ja) * 2004-08-03 2011-06-22 株式会社東芝 画像表示装置、画像表示方法、記憶媒体及びプログラム
JP2008509777A (ja) * 2004-08-17 2008-04-03 テクニオン リサーチ アンド ディベロップメント ファウンデーション リミテッド 超音波を用いた画像誘導による組織損傷の処置
US8211019B2 (en) * 2005-01-21 2012-07-03 Chikayoshi Sumi Clinical apparatuses
US20090016580A1 (en) * 2005-03-23 2009-01-15 Konica Minolta Medical & Graphic, Inc. Breast image processing system and breast image processing method
US7670293B2 (en) * 2005-10-17 2010-03-02 General Electric Company Method and system for scan sequencing in an ultrasound imaging system
US9084556B2 (en) 2006-01-19 2015-07-21 Toshiba Medical Systems Corporation Apparatus for indicating locus of an ultrasonic probe, ultrasonic diagnostic apparatus
US8218905B2 (en) * 2007-10-12 2012-07-10 Claron Technology Inc. Method, system and software product for providing efficient registration of 3D image data
US20090154782A1 (en) * 2007-12-17 2009-06-18 Three Palm Software Dual-magnify-glass visualization for soft-copy mammography viewing
EP2231011A1 (en) * 2007-12-31 2010-09-29 Real Imaging Ltd. System and method for registration of imaging data
US9082164B2 (en) * 2008-04-04 2015-07-14 Lina Jamil Karam Automatic cell migration and proliferation analysis
US20110142316A1 (en) * 2009-10-29 2011-06-16 Ge Wang Tomography-Based and MRI-Based Imaging Systems
US8687860B2 (en) * 2009-11-24 2014-04-01 Penrad Technologies, Inc. Mammography statistical diagnostic profiler and prediction system
JP2012205888A (ja) * 2011-03-17 2012-10-25 Canon Inc 被検体情報取得装置および被検体情報取得方法
US9877699B2 (en) * 2012-03-26 2018-01-30 Teratech Corporation Tablet ultrasound system
EP2842494A4 (en) * 2012-04-27 2015-05-06 Konica Minolta Inc RAY METHOD AND DIAGNOSTIC ULTRASOUND DEVICE

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008279272A (ja) * 2003-05-08 2008-11-20 Hitachi Medical Corp 超音波診断装置
JP2008086742A (ja) * 2006-01-19 2008-04-17 Toshiba Corp 超音波プローブの軌跡表現装置及び超音波診断装置
JP2012217770A (ja) * 2011-04-13 2012-11-12 Canon Inc 画像処理装置、その処理方法及びプログラム
JP2013008274A (ja) * 2011-06-27 2013-01-10 Ge Medical Systems Global Technology Co Llc 読影レポート作成システム及びその制御プログラム
JP2013020340A (ja) * 2011-07-08 2013-01-31 Disease Management Strategies International Inc 情報表示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
TIMOTHY CARTER ET. AL.: "MR Navigated Breast Surgery: Method andInitial Clinical Experience", MICCAI 2008, PART II, LECTURE NOTESIN COMPUTER SCIENCE, vol. 2008, Volume 5242, pp 356-363, JPN6018004681, 2008, ISSN: 0003738180 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016158963A (ja) * 2015-03-04 2016-09-05 コニカミノルタ株式会社 医用画像システム及びプログラム
JP2016206693A (ja) * 2015-04-15 2016-12-08 東芝メディカルシステムズ株式会社 医用情報処理システム
JP2017086896A (ja) * 2015-11-11 2017-05-25 東芝メディカルシステムズ株式会社 医用画像処理装置及び超音波診断装置
US10874374B2 (en) 2015-11-11 2020-12-29 Canon Medical Systems Corporation Medical image-processing apparatus and ultrasonic diagnostic device
US10357216B2 (en) 2015-12-21 2019-07-23 Toshiba Medical Systems Corporation Mammography apparatus
JP2017189245A (ja) * 2016-04-11 2017-10-19 東芝メディカルシステムズ株式会社 医用画像処理装置、医用情報処理システム、及び医用情報処理プログラム
US10251626B2 (en) 2016-04-11 2019-04-09 Toshiba Medical Systems Corporation Medical image processing apparatus and non-transitory computer-readable storage medium
US10463316B2 (en) 2016-09-12 2019-11-05 Canon Medical Systems Corporation Medical information processing system
US11559282B2 (en) 2017-02-06 2023-01-24 Canon Medical Systems Corporation Medical information processing system and medical image processing apparatus
JP2018161405A (ja) * 2017-03-27 2018-10-18 キヤノン株式会社 画像処理装置及び放射線画像データの表示方法
JP2020163137A (ja) * 2019-03-26 2020-10-08 コニカミノルタジャパン株式会社 医用画像生成装置及び医用画像生成プログラム
JP7331749B2 (ja) 2019-03-26 2023-08-23 コニカミノルタ株式会社 医用画像生成装置及び医用画像生成プログラム

Also Published As

Publication number Publication date
JP6309376B2 (ja) 2018-04-11
US10157465B2 (en) 2018-12-18
US20160110875A1 (en) 2016-04-21
WO2015002256A1 (ja) 2015-01-08

Similar Documents

Publication Publication Date Title
JP6309376B2 (ja) 医用情報処理システム、医用情報処理プログラム及び超音波診断装置
JP6495003B2 (ja) 医用画像処理装置、医用画像診断装置及び医用画像処理方法
US9524551B2 (en) Ultrasound diagnosis apparatus and image processing method
JP6971555B2 (ja) 医用画像処理装置及び超音波診断装置
US10368841B2 (en) Ultrasound diagnostic apparatus
JP2015000132A (ja) 超音波診断装置
JP6352013B2 (ja) 超音波診断装置、画像処理装置及び画像処理プログラム
US10463316B2 (en) Medical information processing system
JP2013111434A (ja) 画像処理装置、超音波診断装置及び画像処理プログラム
JP2014014489A (ja) 画像表示装置
US10251626B2 (en) Medical image processing apparatus and non-transitory computer-readable storage medium
US11559282B2 (en) Medical information processing system and medical image processing apparatus
JP2014064913A (ja) 超音波診断装置、医用画像処理装置及び画像処理プログラム
JP6858485B2 (ja) 医用情報処理装置
JP7432296B2 (ja) 医用情報処理システム
JP2020156823A (ja) 撮影支援装置、方法およびプログラム
JP7098294B2 (ja) 医用情報処理装置
JP6334013B2 (ja) 超音波診断装置
JP7233874B2 (ja) 医用情報処理装置、ｘ線診断装置及び医用情報処理プログラム
JP7109986B2 (ja) 画像処理装置及び超音波診断装置
JP2014176431A (ja) 超音波診断装置及び位置合わせプログラム
JP7035134B2 (ja) 医用画像処理装置
JP6925798B2 (ja) 情報処理装置、マンモグラフィ装置、情報処理システム及びプログラム
JP2021126430A (ja) 医用情報処理装置

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20151102

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160513

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20160929

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161021

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170201

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180213

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180314

R150 Certificate of patent or registration of utility model

Ref document number: 6309376

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150