JP6266217B2 - 医用画像処理システム、方法及びプログラム - Google Patents

医用画像処理システム、方法及びプログラム Download PDF

Info

Publication number
JP6266217B2
JP6266217B2 JP2013049187A JP2013049187A JP6266217B2 JP 6266217 B2 JP6266217 B2 JP 6266217B2 JP 2013049187 A JP2013049187 A JP 2013049187A JP 2013049187 A JP2013049187 A JP 2013049187A JP 6266217 B2 JP6266217 B2 JP 6266217B2
Authority
JP
Japan
Prior art keywords
image
display
parallax
unit
medical image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013049187A
Other languages
English (en)
Other versions
JP2013230352A (ja
Inventor
麻衣子 手塚
麻衣子 手塚
後藤　巌
巌 後藤
陽介 大久保
陽介 大久保
真人 渋谷
真人 渋谷
公一 寺井
公一 寺井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Medical Systems Corp filed Critical Toshiba Medical Systems Corp
Priority to JP2013049187A priority Critical patent/JP6266217B2/ja
Priority to US13/854,327 priority patent/US20130257860A1/en
Priority to CN201310113088.3A priority patent/CN103356290B/zh
Publication of JP2013230352A publication Critical patent/JP2013230352A/ja
Application granted granted Critical
Publication of JP6266217B2 publication Critical patent/JP6266217B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices

Description

本発明の実施形態は、医用画像処理システム、方法及びプログラムに関する。
従来、医用画像撮影装置や医用画像保管装置、医用画像表示装置などを有する医用画像処理システムが知られている。このような医用画像処理システムは、一般的に、医用画像撮影装置によって撮影された医用画像を管理するとともに、読影又は検査において参照される情報を医用画像の付帯情報や検査情報として管理する。
特開２００９−１７６２３４号公報
本発明が解決しようとする課題は、読影又は検査において参照される情報を強調して表示することができる医用画像処理システム、方法及びプログラムを提供することである。
実施形態に係る医用画像処理システムは、表示部と、生成部と、表示制御部とを備える。表示部は、立体視画像を表示するために視差画像群を表示する。生成部は、医用画像のボリュームデータと、当該医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データのボリュームデータとに対してボリュームレンダリング処理を行って、当該医用画像及び当該文字データを含む視差画像群である表示用視差画像群を生成する。表示制御部は、前記表示用視差画像群を前記表示部に表示させる。
図１は、本実施形態に係る医用画像処理システムの構成例を示す図である。 図２は、本実施形態に係る医用画像保管装置の構成例を示す機能ブロック図である。 図３は、本実施形態に係る表示部の一例を示す図である。 図４は、本実施形態に係る表示部の他の例を示す図（１）である。 図５は、本実施形態に係る表示部の他の例を示す図（２）である。 図６は、本実施形態に係る重要度記憶部によって記憶される情報の一例を示す図である。 図７は、本実施形態に係る３次元データ記憶部によって記憶されるボリュームデータの一例を示す図である。 図８は、本実施形態に係る視差画像生成部によって生成されるボリュームデータの一例を示す図である。 図９は、本実施形態に係る視差画像生成部によって行われるボリュームレンダリング処理の一例を示す図である。 図１０は、本実施形態に係る表示制御部によって表示される画像ビューアーの一例を示す図である。 図１１は、本実施形態に係る表示制御部によって画像ビューアー上に表示される視差画像群の画像データの一例を示す図（１）である。 図１２は、本実施形態に係る表示制御部によって画像ビューアー上に表示される視差画像群の画像データの一例を示す図（２）である。 図１３は、本実施形態に係る表示制御部によって表示される検査リストの一例を示す図である。 図１４は、本実施形態に係る表示制御部によって検査リスト上に表示される視差画像群の画像データの一例を示す図である。 図１５は、本実施形態に係る医用画像保管装置によって行われる画像処理の処理手順を示すフローチャート（１）である。 図１６は、本実施形態に係る医用画像保管装置によって行われる画像処理の処理手順を示すフローチャート（２）である。 図１７は、本実施形態に係る医用画像保管装置によって行われる画像処理の処理手順を示すフローチャート（３）である。
本実施形態に係る医用画像処理システムは、表示部と、生成部と、制御部とを備える。表示部は、医用画像を表示する。生成部は、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データを立体的に表示するための表示画像を生成する。制御部は、前記表示画像を前記表示部に表示させる。
以下、添付図面を参照して、本願が開示する医用画像処理システム及びプログラムの実施形態を詳細に説明する。ここで、以下の実施形態で用いる用語について説明すると、「視差画像群」とは、対象物を観察する視点位置を所定の視差角ずつ移動させた画像群のことである。例えば、「視差画像群」は、ボリュームデータに対して、所定の視差角ずつ視点位置を移動させてボリュームレンダリング処理を行うことで生成することができる。また、例えば、「視差画像群」は、所定の形状（例えば直方体）を立体的に視認できるように計算処理を行うことで生成することができる。すなわち、「視差画像群」は、「視点位置」が異なる複数の「視差画像」から構成される。また、「視差角」とは、「視差画像群」を生成するために設定された各視点位置のうち、隣接する視点位置とボリュームデータによって表される空間内の所定位置（例えば、空間の中心）とにより定まる角度のことである。また、「視差数」とは、立体視可能なモニタにて立体視されるために必要となる「視差画像」の数のことである。また、以下で記載する「９視差画像」とは、９つの「視差画像」から構成される「視差画像群」のことである。また、以下で記載する「２視差画像」とは、２つの「視差画像」から構成される「視差画像群」のことである。
まず、本実施形態に係る医用画像処理システムについて説明する。図１は、本実施形態に係る医用画像処理システムの構成例を示す図である。図１に示すように、本実施形態に係る医用画像処理システム１００は、医用画像撮影装置１１０と、医用画像保管装置１２０と、医用画像表示装置１３０と、レポート作成支援装置１４０とを有する。図１に例示する各装置は、例えば、病院内に設置された院内ＬＡＮ（Local Area Network）１０により、直接的又は間接的に相互に通信可能な状態となっている。例えば、医用画像処理システム１００にＰＡＣＳ（Picture Archiving and Communication System）が導入されている場合、各装置は、ＤＩＣＯＭ（Digital Imaging and Communications in Medicine）規格に則って、医用画像等を相互に送受信する。
医用画像撮影装置１１０は、Ｘ線診断装置、Ｘ線ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置、ＳＰＥＣＴ（Single Photon Emission Computed Tomography）装置、ＰＥＴ（Positron Emission computed Tomography）装置、ＳＰＥＣＴ装置とＸ線ＣＴ装置とが一体化されたＳＰＥＣＴ−ＣＴ装置、ＰＥＴ装置とＸ線ＣＴ装置とが一体化されたＰＥＴ−ＣＴ装置、又はこれらの装置群等である。
具体的には、医用画像撮影装置１１０は、被検体を撮影することにより医用画像の画像データを生成する。例えば、医用画像撮影装置１１０は、被検体を撮影することにより投影データやＭＲ信号等のデータを収集し、収集したデータを再構成することで、医用画像の画像データを生成する。また、医用画像撮影装置１１０は、生成した画像データを医用画像保管装置１２０に送信する。なお、医用画像撮影装置１１０は、画像データを医用画像保管装置１２０に送信する際に、例えば、患者を識別する患者ＩＤ、検査ＩＤ、患者名、年齢、性別、撮影した医用画像の枚数を示す画像枚数等の項目を含んだ付帯情報を画像データとともに送信する。
さらに、医用画像撮影装置１１０は、医用画像を撮影した技師などから検査情報の入力を受け付ける。そして、医用画像撮影装置１１０は、受け付けた検査情報を検査対象の医用画像の画像データとともに医用画像保管装置１２０に送信する。なお、ここでいう検査情報は、例えば、技師等が医用画像撮影装置１１０を用いて医用画像を撮影した医用画像の読影を読影医に依頼するための情報であり、検査の重要度、検査の種類、撮影した医用画像の種類等の項目を含む。
医用画像保管装置１２０は、医用画像及び検査情報を保管する装置である。具体的には、医用画像保管装置１２０は、医用画像撮影装置１１０から医用画像の画像データ及び付帯情報を受信すると、受信した画像データと付帯情報とを対応付けて記憶部に格納する。また、医用画像保管装置１２０は、医用画像撮影装置１１０から検査情報及び画像データを受信すると、受信した検査画像と画像データとを対応付けて記憶部に格納する。
また、医用画像保管装置１２０は、操作者からの要求に応じて医用画像を表示するための画像ビューアーを表示する機能を有する。この画像ビューアーは、読影医が医用画像を読影する際に用いられる。また、医用画像保管装置１２０は、操作者からの要求に応じて検査情報を検索するための検査リストを表示する機能を有する。この検査リストは、検査を依頼された依頼医や技師、読影医が検査情報を確認するために用いられる。
医用画像表示装置１３０は、医用画像の画像データを表示する装置である。具体的には、医用画像表示装置１３０は、操作者からの要求に応じて、医用画像保管装置１２０から画像データを取得し、取得した画像データを表示部に表示する。
レポート作成支援装置１４０は、読影医等による読影レポートの作成を支援する装置である。具体的には、レポート作成支援装置１４０は、操作者から検査に関する所見等の情報の入力を受け付け、受け付けた情報をレポート情報として記憶する。また、レポート作成支援装置１４０は、操作者からの要求に応じて、医用画像保管装置１２０から画像データを取得し、取得した画像データをレポート情報と対応付けて記憶する。
以上、本実施形態に係る医用画像処理システム１００の構成例について簡単に説明した。なお、上述した医用画像処理システム１００は、ＰＡＣＳが導入されている場合にその適用が限られるものではない。例えば、医用画像処理システム１００は、医用画像が添付された電子カルテを管理する電子カルテシステムが導入されている場合にも、同様に適用される。この場合、医用画像保管装置１２０は、電子カルテを保管するデータベースである。また、例えば、医用画像処理システム１００は、ＨＩＳ（Hospital Information System）、ＲＩＳ（Radiology Information System）が導入されている場合にも、同様に適用される。また、医用画像処理システム１００は、上述した構成例に限られるものではない。各装置が有する機能やその分担は、運用の形態に応じて適宜変更されてよい。
ところで、従来、例えば医用画像保管装置を用いて医用画像の読影や検査情報の確認が行われる場合、読影医は、画像ビューアーを用いて医用画像の読影を行う際に、読影対象の医用画像に関する付帯情報を参照することがある。例えば、読影医は、患者ＩＤや患者名、画像の枚数等を確認することがある。また、依頼医や技師、読影医は、検査リストを用いて検査情報を確認する際に、検査情報に含まれる項目を指定して検査情報を検索することがある。例えば、依頼医や技師、読影医は、検査の緊急性を示す緊急度を用いて検査情報を検索して、緊急度が高いものから検査情報を確認することがある。
しかしながら、従来の医用画像保管装置では、画像ビューアーを用いて読影が行われる際に、付帯情報に含まれる重要な項目の情報が見落とされてしまう場合があった。また、従来の医用画像保管装置では、検査リストを用いて検査が行われる際に、検査情報に含まれる検索に必要な項目の情報が見落とされてしまう場合があった。
そこで、本実施形態に係る医用画像保管装置１２０は、画像ビューアーや検査リストが用いられる際に、立体視画像を表示可能な立体表示モニタを用いて、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データを立体視可能に表示させるようにしている。これにより、医用画像の読影や検査情報の確認が行われる際に、付帯情報や検査情報の項目の内容が強調されて表示されるので、それらの情報が見落とされるのを防ぐことができる。
以下、このような構成を有する医用画像保管装置１２０について詳細に説明する。図２は、本実施形態に係る医用画像保管装置１２０の構成例を示す機能ブロック図である。図２に示すように、医用画像保管装置１２０は、通信部１２１と、入力部１２２と、表示部１２３と、記憶部１２４と、制御部１２５とを有する。
通信部１２１は、他の装置との間で各種情報の通信を行う。この通信部１２１は、例えば、ＮＩＣ（Network Interface Card）等である。そして、例えば、通信部１２１は、医用画像撮影装置１１０から医用画像の画像データ及び付帯情報を受信し、受信した画像データを付帯情報とともに後述する画像データ受付部１２５ａに引き渡す。また、例えば、通信部１２１は、医用画像撮影装置１１０から検査情報及び画像データを受信し、受信した検査情報を画像データとともに後述する検査情報受付部１２５ｂに引き渡す。
入力部１２２は、医用画像保管装置１２０に対する各種操作の入力を操作者から受け付ける。この入力部１２２は、例えば、マウス、キーボード、トラックボール等である。そして、例えば、入力部１２２は、画像ビューアーの表示要求や検査リストの表示要求などを操作者から受け付ける。
表示部１２３は、医用画像を表示するモニタである。本実施形態では、表示部１２３は、視差画像群を表示することで立体視画像を表示可能な立体表示モニタである。例えば、表示部１２３は、レンチキュラーレンズ等の光線制御子を用いることで、例えば、９視差画像等の多視差画像を観察者が裸眼にて立体視可能とした立体表示モニタである。かかる立体表示モニタは、両眼視差による立体視を可能とし、さらに、観察者の視点移動に合わせて観察される映像も変化する運動視差による立体視も可能とする。
図３は、本実施形態に係る表示部１２３の一例を示す図である。図３に示すように、９視差画像により立体表示を行う立体表示モニタでは、液晶パネル等の平面状の表示面２００の前面に、光線制御子が配置される。例えば、図３に示す立体表示モニタには、光線制御子として、光学開口が垂直方向に延びる垂直レンチキュラーシート２０１が表示面２００の前面に貼り付けられている。なお、図３に示す例では、垂直レンチキュラーシート２０１の凸部が前面となるように貼り付けられているが、垂直レンチキュラーシート２０１の凸部が表示面２００に対向するように貼り付けられる場合であってもよい。
表示面２００には、図３に示すように、縦横比が３：１であり、縦方向にサブ画素である赤（Ｒ）、緑（Ｇ）、青（Ｂ）の３つが配置された画素２０２がマトリクス状に配置される。図３に示す立体表示モニタは、９つの画像により構成される９視差画像を、所定フォーマット（例えば格子状）に配置した中間画像に変換したうえで、表示面２００に出力する。すなわち、図３に示す立体表示モニタは、９視差画像にて同一位置にある９つの画素それぞれを、９列の画素２０２に割り振って出力させる。９列の画素２０２は、視点位置の異なる９つの画像を同時に表示する単位画素群２０３となる。
表示面２００において単位画素群２０３として同時に出力された９視差画像は、例えば、ＬＥＤ（Light Emitting Diode）バックライトにより平行光として放射され、更に、垂直レンチキュラーシート２０１により、多方向に放射される。９視差画像の各画素の光が多方向に放射されることにより、観察者の右目及び左目に入射する光は、観察者の位置（視点の位置）に連動して変化する。すなわち、観察者の見る角度により、右目に入射する視差画像と左目に入射する視差画像とは、視差角が異なる。これにより、観察者は、例えば、図３に示す９つの位置それぞれにおいて、撮影対象を立体的に視認できる。
また、観察者は、例えば、図３に示す「５」の位置において、撮影対象に対して正対した状態で立体的に視認できるとともに、図３に示す「５」以外それぞれの位置において、撮影対象の向きを変化させた状態で立体的に視認できる。なお、図３に示す立体表示モニタは、あくまでも一例である。９視差画像を表示する立体表示モニタは、図３に示すように、「ＲＲＲ・・・、ＧＧＧ・・・、ＢＢＢ・・・」の横ストライプ液晶である場合であってもよいし、「ＲＧＢＲＧＢ・・・」の縦ストライプ液晶である場合であってもよい。また、図３に示す立体表示モニタは、図３に示すように、レンチキュラーシートが垂直となる縦レンズ方式である場合であってもよいし、レンチキュラーシートが斜めとなる斜めレンズ方式である場合であってもよい。
一方、立体表示モニタの他の例として、立体視用メガネ等の専用機器を用いることで２視差画像（両眼視差画像とも称する）を立体視可能とするものもある。このような立体表示モニタを表示部１２３として用いることもできる。
図４及び５は、本実施形態に係る表示部１２３の他の例を示す図である。図４及び５に示す例は、シャッター方式により立体表示を行う立体表示モニタであり、モニタを観察する観察者が装着する立体視用メガネとしてシャッターメガネが用いられる。かかる立体表示モニタは、モニタにて２視差画像を交互に出射する。例えば、図４に示すモニタは、左目用の画像と右目用の画像を、１２０Ｈｚにて交互に出射する。ここで、モニタには、図４に示すように、赤外線出射部が設置され、赤外線出射部は、画像が切り替わるタイミングに合わせて赤外線の出射を制御する。
また、赤外線出射部から出射された赤外線は、図４に示すシャッターメガネの赤外線受光部により受光される。シャッターメガネの左右それぞれの枠には、シャッターが取り付けられており、シャッターメガネは、赤外線受光部が赤外線を受光したタイミングに合わせて左右のシャッターそれぞれの透過状態及び遮光状態を交互に切り替える。以下、シャッターにおける透過状態及び遮光状態の切り替え処理について説明する。
各シャッターは、図５に示すように、入射側の偏光板と出射側の偏光板とを有し、更に、入射側の偏光板と出射側の偏光板との間に液晶層を有する。また、入射側の偏光板と出射側の偏光板とは、図５に示すように、互いに直交している。ここで、図５に示すように、電圧が印加されていない「ＯＦＦ」の状態では、入射側の偏光板を通った光は、液晶層の作用により９０度回転し、出射側の偏光板を透過する。すなわち、電圧が印加されていないシャッターは、透過状態となる。一方、図５に示すように、電圧が印加された「ＯＮ」の状態では、液晶層の液晶分子による偏光回転作用が消失するため、入射側の偏光板を通った光は、出射側の偏光板で遮られてしまう。すなわち、電圧が印加されたシャッターは、遮光状態となる。
そこで、例えば、赤外線出射部は、モニタ上に左目用の画像が表示されている期間、赤外線を出射する。そして、赤外線受光部は、赤外線を受光している期間、左目のシャッターに電圧を印加せず、右目のシャッターに電圧を印加させる。これにより、図４に示すように、右目のシャッターが遮光状態となり、左目のシャッターが透過状態となるため、観察者の左目に左目用の画像が入射する。一方、赤外線出射部は、モニタ上に右目用の画像が表示されている期間、赤外線の出射を停止する。そして、赤外線受光部は、赤外線が受光されない期間、右目のシャッターに電圧を印加せず、左目のシャッターに電圧を印加させる。これにより、左目のシャッターが遮光状態となり、右目のシャッターが透過状態であるため、観察者の右目に右目用の画像が入射する。
このように、図４及び５に示す立体表示モニタは、モニタに表示される画像とシャッターの状態を連動させて切り替えることで、観察者が立体視可能な画像を表示させる。なお、２視差画像を立体視可能な立体表示モニタとしては、上記のシャッター方式以外にも、偏光メガネ方式を採用したモニタも知られている。
図２に戻って、記憶部１２４は、各種情報を記憶する記憶装置である。この記憶部１２４は、例えば、ハードディスクや半導体メモリ素子等である。そして、例えば、記憶部１２４は、画像データ記憶部１２４ａと、検査情報記憶部１２４ｂと、重要度記憶部１２４ｃと、３次元データ記憶部１２４ｄと、視差画像データ記憶部１２４ｅとを有する。
画像データ記憶部１２４ａは、後述する画像データ受付部１２５ａによって受け付けられた医用画像の画像データ及び付帯情報を記憶する。具体的には、画像データ記憶部１２４ａは、医用画像撮影装置１１０から送信された医用画像の画像データと付帯情報とを対応付けて記憶する。
検査情報記憶部１２４ｂは、後述する検査情報受付部１２５ｂによって受け付けられた検査情報を記憶する。具体的には、検査情報記憶部１２４ｂは、医用画像撮影装置１１０から送信された検査情報と画像データとを対応付けて記憶する。
重要度記憶部１２４ｃは、医用画像の付帯情報又は検査情報に含まれる項目ごとに重要度を記憶する。なお、重要度記憶部１２４ｃは、医用画像を読影する際に用いられる項目、及び、検査情報を検索する際に用いられる項目について、項目ごとに重要度を記憶する。図６は、本実施形態に係る重要度記憶部１２４ｃによって記憶される情報の一例を示す図である。図６に示すように、例えば、重要度記憶部１２４ｃは、医用画像の付帯情報又は検査情報に含まれる項目と重要度とを対応付けて記憶する。ここで、医用画像の付帯情報に含まれる項目は、例えば、「患者ＩＤ」や「患者名」、「年齢」、「性別」、「画像枚数」などである。また、検査情報に含まれる項目とは、例えば、検査の緊急性を示す「緊急度」などである。また、重要度は、例えば、「１」〜「５」の数値によって表され、重要度が高いものから大きな数値が設定される。
この重要度記憶部１２４ｃによって記憶される情報は、例えば、医用画像保管装置１２０が病院などに設置される際にシステム管理者などによって登録される。その際、緊急度には、あらかじめ決められた初期値が設定される。その後、重要度記憶部１２４ｃによって記憶された情報は、例えば、技師や医師などの操作者によって適宜に更新される。すなわち、重要度記憶部１２４ｃに記憶されている情報を更新することで、病院などの利用現場ごとに異なる重要度を設定することが可能である。
３次元データ記憶部１２４ｄは、各種文字データを立体的に表現したボリュームデータを記憶する。なお、ここでいう各種文字データには、日本語の文字やアルファベット、数字、記号などの各種の文字のデータが含まれる。例えば、３次元データ記憶部１２４ｄは、医用画像保管装置１２０で用いられている文字コードごとに、各文字コードで表される文字データのボリュームデータを記憶する。
図７は、本実施形態に係る３次元データ記憶部１２４ｄによって記憶されるボリュームデータの一例を示す図である。図７に示すように、例えば、３次元データ記憶部１２４ｄは、文字データを３次元空間で立体的に表現したボリュームデータを記憶する。図７に示す例では、アルファベット「Ａ」、「Ｂ」、「Ｃ」を立体的に表現したボリュームデータを示している。なお、３次元データ記憶部１２４ｄによって記憶されるボリュームデータは、例えば、３次元座標とボクセル値とで定義される。
視差画像データ記憶部１２４ｅは、後述する視差画像生成部１２５ｄによって作成される視差画像の画像データを記憶する。具体的には、視差画像データ記憶部１２４ｅは、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データを立体視可能に表示するための視差画像群を記憶する。この視差画像データ記憶部１２４ｅによって記憶されている視差画像の画像データを表示部１２３に表示させることで、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データが立体視可能に表示されることになる。
なお、視差画像データ記憶部１２４ｅは、医用画像の画像データ又は検査情報に対応付けて、視差画像群の画像データを記憶する。例えば、画像データを一意に識別する画像ＩＤや、検査情報を一意に識別する検査ＩＤが用いられている場合には、視差画像データ記憶部１２４ｅは、画像ＩＤ又は検査ＩＤと対応付けて、視差画像群の画像データを記憶する。
制御部１２５は、医用画像保管装置１２０の全体制御を行う処理装置である。例えば、制御部１２５は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等の電子回路、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路である。本実施形態では、制御部１２５は、画像データ受付部１２５ａと、検査情報受付部１２５ｂと、重要度判定部１２５ｃと、視差画像生成部１２５ｄと、表示制御部１２５ｅとを有する。
画像データ受付部１２５ａは、医用画像撮影装置１１０から送信された医用画像の画像データを受け付ける。具体的には、画像データ受付部１２５ａは、医用画像撮影装置１１０から送信された画像データ及び付帯情報を通信部１２１から受け付けると、受け付けた画像データと付帯情報とを対応付けて画像データ記憶部１２４ａに格納する。また、画像データ受付部１２５ａは、画像データ及び付帯情報を受け付けた時に、画像データを受け付けたことを重要度判定部１２５ｃに通知する。このとき、例えば、画像データ受付部１２５ａは、受け付けた画像データを示す画像ＩＤを重要度判定部１２５ｃに通知する。
検査情報受付部１２５ｂは、医用画像撮影装置１１０から送信された検査情報を受け付ける。具体的には、検査情報受付部１２５ｂは、医用画像撮影装置１１０から送信された検査情報及び画像データを通信部１２１から受け付けると、受け付けた検査情報と画像データとを対応付けて検査情報記憶部１２４ｂに格納する。また、検査情報受付部１２５ｂは、検査情報及び画像データを受け付けた時に、検査情報を受け付けたことを重要度判定部１２５ｃに通知する。このとき、例えば、検査情報受付部１２５ｂは、受け付けた検査情報を示す検査ＩＤを重要度判定部１２５ｃに通知する。なお、例えば、検査情報受付部１２５ｂは、検査情報及び画像データを受け付けた時に、検査情報は検査情報記憶部１２４ｂに格納し、画像データは画像データ記憶部１２４ａに格納するようにしてもよい。
重要度判定部１２５ｃは、重要度記憶部１２４ｃによって記憶された重要度に基づいて、医用画像の付帯情報又は検査情報に含まれる項目の中から視差画像群を生成する項目を特定する。具体的には、重要度判定部１２５ｃは、画像データ受付部１２５ａから画像データを受け付けたことが通知されると、画像データ記憶部１２４ａを参照して、受け付けられた画像データに対応する付帯情報を読み出す。また、重要度判定部１２５ｃは、検査情報受付部１２５ｂから画像データを受け付けたことが通知されると、検査情報記憶部１２４ｂを参照して、受け付けられた検査情報を読み出す。
例えば、重要度判定部１２５ｃは、画像データ受付部１２５ａから画像データを示す画像ＩＤが通知されると、画像データ記憶部１２４ａを参照して、通知された画像ＩＤに対応する画像データの付帯情報を読み出す。また、例えば、重要度判定部１２５ｃは、検査情報受付部１２５ｂから検査情報を示す検査ＩＤが通知されると、検査情報記憶部１２４ｂを参照して、通知された検査ＩＤに対応する検査情報を読み出す。
そして、重要度判定部１２５ｃは、重要度記憶部１２４ｃによって記憶されている重要度に基づいて、読み出した付帯情報又は検査情報に含まれる項目の中から視差画像群を生成する項目を特定する。なお、本実施例では、重要度判定部１２５ｃは、読み出した付帯情報又は検査情報に含まれている項目のうち最も重要度が高い項目を、視差画像群を作成する項目として特定する。
そして、重要度判定部１２５ｃは、視差画像群を作成するものとして特定した項目とその内容を視差画像生成部１２５ｄに通知する。このとき、例えば、重要度判定部１２５ｃは、画像データ受付部１２５ａから通知された画像ＩＤ、又は、検査情報受付部１２５ｂから通知された検査ＩＤを、特定した項目及びその内容とともに視差画像生成部１２５ｄに通知する。
視差画像生成部１２５ｄは、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データを立体視可能に表示するための視差画像群を生成する。具体的には、視差画像生成部１２５ｄは、重要度判定部１２５ｃによって特定された項目について、視差画像群を生成する。
より具体的には、視差画像生成部１２５ｄは、視差画像群を作成するものとして特定された項目とその内容が重要度判定部１２５ｃから通知されると、まず、通知された項目が画像枚数であるか否かを判定する。そして、視差画像生成部１２５ｄは、通知された項目が画像枚数でなかった場合には、３次元データ記憶部１２４ｄを参照して、その項目の内容を表す文字データに対応するボリュームデータを読み出す。このとき、視差画像生成部１２５ｄは、通知された項目の内容を表す文字データが複数の文字から構成されていた場合には、各文字に対応するボリュームデータをそれぞれ読み出す。
そして、視差画像生成部１２５ｄは、読み出したボリュームデータを結合することで、重要度判定部１２５ｃから通知された文字データを立体的に表すボリュームデータを生成する。例えば、視差画像生成部１２５ｄは、重要度判定部１２５ｃから通知された文字データの内容が「ＡＢＣ」であった場合には、「Ａ」、「Ｂ」、「Ｃ」それぞれに関するボリュームデータを３次元データ記憶部１２４ｄから読み出す。そして、視差画像生成部１２５ｄは、読み出した３つのボリュームデータを結合することで、「ＡＢＣ」を立体的に表すボリュームデータを生成する。
一方、視差画像生成部１２５ｄは、重要度判定部１２５ｃから通知された項目が画像枚数であった場合には、画像枚数の多さに応じて厚みを変えた画像データを立体視可能に表示するための視差画像群を生成する。図８は、本実施形態に係る視差画像生成部１２５ｄによって生成されるボリュームデータの一例を示す図である。図８に示すように、例えば、視差画像生成部１２５ｄは、所定の厚みを付けた医用画像を枚数分だけ重ねた様子を表すボリュームデータを生成する。例えば、図８の左側に示すボリュームデータは、医用画像の枚数が４枚であったときの例であり、右側に示すボリュームデータは、医用画像の枚数が６枚であったときの例である。このようなボリュームデータによれば、重ねられた複数の医用画像全体の厚みは、医用画像の枚数が多くなるほど厚く見えるようになる。
以上のように文字データ又は画像データのボリュームデータを生成した後に、視差画像生成部１２５ｄは、生成したボリュームデータに対してボリュームレンダリング処理を行うことで、文字データ又は画像データの視差画像群を生成する。図９は、本実施形態に係る視差画像生成部１２５ｄによって行われるボリュームレンダリング処理の一例を示す図である。なお、ここでは、視差画像生成部１２５ｄが、視差角を１度として、９つの視差画像からなる視差画像群を生成する場合について説明するが、視差角の角度や視差画像の数はこれに限られない。
例えば、視差画像生成部１２５ｄは、図９の「９視差画像生成方式（１）」に示すように、視差角が１度おきとなるように視点の位置を（１）〜（９）に平行移動して、平行投影法により視差角（視線方向間の角度）が１度ずつ異なる９つの視差画像を生成する。なお、平行投影法を行う場合、視差画像生成部１２５ｄは、視線方向に沿って無限遠から平行な光線を照射する光源を設定する。
または、視差画像生成部１２５ｄは、図９の「９視差画像生成方式（２）」に示すように、ボリュームデータの中心（重心）を中心に視差角が「１度」おきとなるように、視点の位置を（１）〜（９）に回転移動して、透視投影法により視差角が１度ずつ異なる９つの視差画像を生成する。なお、透視投影法を行う場合、視差画像生成部１２５ｄは、視線方向を中心に光を３次元的に放射状に照射する点光源や面光源を各視点にて設定する。また、透視投影法を行う場合、レンダリング条件によっては、視点（１）〜（９）は、平行移動される場合であってもよい。
なお、視差画像生成部１２５ｄは、表示されるボリュームレンダリング画像の縦方向に対しては、視線方向を中心に光を２次元的に放射状に照射し、表示されるボリュームレンダリング画像の横方向に対しては、視線方向に沿って無限遠から平行な光線を照射する光源を設定することで、平行投影法と透視投影法とを併用したボリュームレンダリング処理を行ってもよい。このようにして生成された９つの視差画像が、視差画像群となる。
そして、視差画像生成部１２５ｄは、ボリュームレンダリング処理によって視差画像群を生成すると、生成した視差画像群の画像データを視差画像データ記憶部１２４ｅに格納する。なお、このとき、視差画像生成部１２５ｄは、生成した視差画像群を医用画像の画像データ又は検査情報と関連付けて、視差画像データ記憶部１２４ｅに格納する。例えば、視差画像生成部１２５ｄは、視差画像群を作成するものとして特定された項目及びその内容とともに重要度判定部１２５ｃから通知された画像ＩＤ又は検査ＩＤと対応付けて、視差画像群の画像データを格納する。
図２に戻って、表示制御部１２５ｅは、視差画像生成部１２５ｄによって生成された視差画像群を表示部１２３に表示させる。なお、表示制御部１２５ｅは、操作者からの要求に応じて医用画像を表示するための画像ビューアーが表示部１２３に表示されている時に、その画像ビューアー上に視差画像群を表示させる。これにより、画像ビューアー上に、医用画像の付帯情報に含まれる項目の内容を表す文字データ又は画像データが立体視可能に表示されることになる。また、表示制御部１２５ｅは、操作者からの要求に応じて検査情報を検索するための検査リストが表示部１２３に表示されている時に、その検査リスト上に視差画像群を表示させる。これにより、検査リスト上に、検査情報に含まれる項目の内容を表す文字データが立体視可能に表示されることになる。
具体的には、表示制御部１２５ｅは、操作者からの要求に応じて、表示部１２３に画像ビューアーを表示させる。図１０は、本実施形態に係る表示制御部１２５ｅによって表示される画像ビューアーの一例を示す図である。図１０に示すように、例えば、画像ビューアー２０は、操作者が医用画像を指定するために患者ＩＤや検査ＩＤなどを入力するための指定入力領域２１と、操作者によって指定された医用画像を表示するための画像表示領域２２とを含む。なお、図１０に示す例では、画像表示領域２２に１つの医用画像を表示させている場合を示しているが、画像表示領域２２には、複数の医用画像を並べて表示させることもできる。
なお、表示制御部１２５ｅは、画像ビューアーを平面画像として表示部１２３に表示させる。例えば、表示制御部１２５ｅは、表示部１２３が９視差画像により立体視を行う立体表示モニタであった場合には、図３に示した同じ単位画素群２０３に含まれる９列の画素２０２それぞれに同じ画素値を割り当てる。これにより、画像ビューアーは、表示部１２３に平面画像として表示されることになる。
そして、表示制御部１２５ｅは、画像ビューアーが表示部１２３に表示されている時に、操作者によって医用画像が指定された場合には、指定された医用画像の画像データを画像データ記憶部１２４ａから読み出す。その後、表示制御部１２５ｅは、画像データ記憶部１２４ａから読み出した画像データを画像ビューアーに表示させる。
このとき、表示制御部１２５ｅは、医用画像の画像データを画像ビューアーに表示させるとともに、視差画像データ記憶部１２４ｅを参照して、画像ビューアーに表示させた画像データに対応する視差画像群の画像データを読み出す。例えば、視差画像生成部１２５ｄは、画像データ記憶部１２４ａから読み出した画像データの画像ＩＤに基づいて、視差画像データ記憶部１２４ｅから視差画像群の画像データを読み出す。
そして、表示制御部１２５ｅは、視差画像データ記憶部１２４ｅから読み出した画像データを画像ビューアー上に表示させる。なお、このとき、表示制御部１２５ｅは、視差画像群の画像データが文字データを表すものであった場合には、画像ビューアー上の所定の位置に、視差画像群の画像データを表示させる。例えば、表示制御部１２５ｅは、画像ビューアー上で医用画像が表示されていない位置に視差画像群の画像データを表示させる。これにより、操作者による医用画像の読影を妨げることなく、画像ビューアー上に文字データの立体画像が表示されるようになる。一方、表示制御部１２５ｅは、視差画像群の画像データが画像枚数を表す画像データであった場合には、画像ビューアー上に表示された医用画像に重ねるように、視差画像群の画像データを表示させる。これにより、操作者が、画像ビューアーに表示されている医用画像の枚数を容易に把握することができるようになる。
図１１及び１２は、本実施形態に係る表示制御部１２５ｅによって画像ビューアー上に表示される視差画像群の画像データの一例を示す図である。例えば、図１１に示すように、表示制御部１２５ｅは、画像表示領域２２に表示させた画像データに対応する患者ＩＤ「１０４８０００１」を表す視差画像群の画像データ２３を画像ビューアー２０上に表示させる。また、例えば、図１２に示すように、表示制御部１２５ｅは、画像ビューアー２０上に表示された医用画像に重ねるように、画像枚数に応じて厚みを変えた視差画像群の画像データ２４及び２５を表示させる。
このとき、例えば、表示制御部１２５ｅは、表示部１２３が９視差画像により立体視を行う立体表示モニタであった場合には、図３に示した同じ単位画素群２０３に含まれる９列の画素２０２に、９つの視差画像それぞれの同一位置にある９つの画素の画素値を割り当てる。これにより、図１１及び１２に示すように、画像ビューアー２０上に、医用画像の付帯情報に含まれる項目の内容を表す文字データ又は画像データが立体視可能に表示されることになる。
一方、表示制御部１２５ｅは、操作者からの要求に応じて、表示部１２３に検査リストを表示させる。図１３は、本実施形態に係る表示制御部１２５ｅによって表示される検査リストの一例を示す図である。図１３に示すように、例えば、検査リスト３０は、操作者が検査情報を検索する際に緊急度などの検索条件を入力するための検索条件入力領域３１と、操作者によって検索された検査情報をリスト形式で表示するための検査情報表示領域３２とを含む。
なお、表示制御部１２５ｅは、検査リストについても、画像ビューアーと同様に、平面画像として表示部１２３に表示させる。例えば、表示制御部１２５ｅは、表示部１２３が９視差画像により立体視を行う立体表示モニタであった場合には、画像ビューアーを表示させる際と同様に、図３に示した同じ単位画素群２０３に含まれる９列の画素２０２それぞれに同じ画素値を割り当てる。これにより、検査リストは、表示部１２３に平面画像として表示されることになる。
そして、表示制御部１２５ｅは、検査リストが表示部１２３に表示されている時に、操作者から検索条件を受け付けた場合には、検査情報記憶部１２４ｂを参照して、受け付けた検索条件に一致する検査情報を検索し、検索した検査情報を検査リストに表示する。
その後、表示制御部１２５ｅは、操作者によって検査リストの中から検査情報が選択されると、選択された検査情報に対応する視差画像群の画像データを視差画像データ記憶部１２４ｅから読み出す。例えば、表示制御部１２５ｅは、検査情報記憶部１２４ｂから読み出した検査情報の検査ＩＤに基づいて、視差画像データ記憶部１２４ｅから視差画像群の画像データを読み出す。
そして、表示制御部１２５ｅは、視差画像データ記憶部１２４ｅから読み出した画像データを検査リスト上に表示させる。なお、このとき、表示制御部１２５ｅは、検査リスト上の所定の位置に、視差画像群の画像データを表示させる。例えば、表示制御部１２５ｅは、選択された検査情報に重ならないように、視差画像群の画像データを表示させる。これにより、操作者による検査情報の確認を妨げることなく、検査リスト上に文字データの立体画像が表示されることになる。
図１４は、本実施形態に係る表示制御部１２５ｅによって検査リスト上に表示される視差画像群の画像データの一例を示す図である。例えば、図１４に示すように、表示制御部１２５ｅは、検査リスト３０の中から選択された検査情報３３に対応する緊急度「Ａ」を表す視差画像群の画像データ３４を検査リスト３０上に表示させる。
このとき、例えば、表示制御部１２５ｅは、表示部１２３が９視差画像により立体視を行う立体表示モニタであった場合には、図３に示した同じ単位画素群２０３に含まれる９列の画素２０２に、９つの視差画像それぞれの同一位置にある９つの画素の画素値を割り当てる。これにより、図１４に示すように、検査リスト３０上に、検査情報に含まれる項目の内容を表す文字データが立体視可能に表示されることになる。
なお、図１１、１２及び１４に示した例では、視差画像群の画像データが立体表示モニタに表示された時の様子を概念的に表すために、画像データ２３〜２５及び３４を斜視図のように示している。しかし、視差画像の画像データは、実際に立体表示モニタに表示されたときには、必ずしも図示のように表示されるとは限られず、立体表示モニタの種類に応じて立体的な見え方が変わる。
次に、本実施形態に係る医用画像保管装置１２０によって行われる画像処理の処理手順について説明する。図１５〜１７は、本実施形態に係る医用画像保管装置１２０によって行われる画像処理の処理手順を示すフローチャートである。
まず、図１５を用いて、画像データ受付部１２５ａ、検査情報受付部１２５ｂ、重要度判定部１２５ｃ、及び視差画像生成部１２５ｄによって行われる処理について説明する。図１５に示すように、本実施形態に係る医用画像保管装置１２０では、画像データ受付部１２５ａが、医用画像撮影装置１１０から送信された医用画像の画像データを受け付けると（ステップＳ１０１，Ｙｅｓ）、受け付けた画像データと付帯情報とを対応付けて画像データ記憶部１２４ａに格納する（ステップＳ１０２）。
また、検査情報受付部１２５ｂが、医用画像撮影装置１１０から送信された検査情報を受け付けると（ステップＳ１０３，Ｙｅｓ）、受け付けた検査情報をその検査情報に関連する医用画像の画像データと関連付けて検査情報記憶部１２４ｂに格納する（ステップＳ１０４）。
その後、重要度判定部１２５ｃが、重要度記憶部１２４ｃによって記憶された重要度に基づいて、医用画像の付帯情報又は検査情報に含まれる項目の中から視差画像群を生成する項目を特定する（ステップＳ１０５）。
続いて、視差画像生成部１２５ｄが、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データを立体視可能に表示するための視差画像群を生成する（ステップＳ１０６）。そして、視差画像生成部１２５ｄは、生成した視差画像群の画像データを視差画像データ記憶部１２４ｅに格納する（ステップＳ１０７）。
次に、図１６を用いて、表示制御部１２５ｅによって行われる画像ビューアーの表示に関する処理について説明する。図１６に示すように、本実施形態に係る医用画像保管装置１２０では、表示制御部１２５ｅが、操作者から画像ビューアーの表示要求を受け付けた場合に（ステップＳ２０１）、表示部１２３に画像ビューアーを表示させる（ステップＳ２０２）。
その後、表示制御部１２５ｅは、画像ビューアーが表示部１２３に表示されている時に、操作者によって医用画像が指定されると（ステップＳ２０３，Ｙｅｓ）、指定された医用画像の画像データを画像データ記憶部１２４ａから読み出す（ステップＳ２０４）。そして、表示制御部１２５ｅは、読み出した医用画像の画像データを画像ビューアーに表示させる（ステップＳ２０５）。
さらに、表示制御部１２５ｅは、視差画像データ記憶部１２４ｅを参照して、画像ビューアーに表示させた画像データに対応する視差画像群の画像データを視差画像データ記憶部１２４ｅから読み出す（ステップＳ２０６）。そして、表示制御部１２５ｅは、読み出した視差画像群の画像データを画像ビューアー上に表示させる（ステップＳ２０７）。
次に、図１７を用いて、表示制御部１２５ｅによって行われる検査リストの表示に関する処理について説明する。図１７に示すように、本実施形態に係る医用画像保管装置１２０では、表示制御部１２５ｅが、操作者から検査リストの表示要求を受け付けた場合に（ステップＳ３０１，Ｙｅｓ）、表示部１２３に検査リストを表示させる（ステップＳ３０２）。
その後、表示制御部１２５ｅは、検査リストが表示部１２３に表示されている時に、操作者から検索条件を受け付けると（ステップＳ３０３）、検査情報記憶部１２４ｂを参照して、受け付けた検索条件に一致する検査情報を検索する（ステップＳ３０４）。そして、表示制御部１２５ｅは、検索した検査情報を検査リストに表示する（ステップＳ３０５）。
続いて、表示制御部１２５ｅは、操作者によって検査リストの中から検査情報が選択されると（ステップＳ３０６，Ｙｅｓ）、選択された検査情報に対応する視差画像群の画像データを視差画像データ記憶部１２４ｅから読み出す（ステップＳ３０７）。そして、表示制御部１２５ｅは、読み出した視差画像群の画像データを検査リスト上に表示させる（ステップＳ３０８）。
上述したように、本実施形態では、医用画像保管装置１２０が、立体視画像を表示可能な立体表示モニタを用いて、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データを立体視可能に表示させるので、読影又は検査において参照される情報を強調して表示することができる。これにより、医用画像の読影や検査情報の確認が行われる際に、付帯情報や検査情報の項目の内容が強調されて表示されるので、それらの情報が見落とされるのを防ぐことができる。
以上、１つの実施形態について説明したが、医用画像処理システムの実施形態はこれに限られない。
例えば、上記実施形態では、重要度判定部１２５ｃが、付帯情報又は検査情報に含まれている項目のうち最も重要度が高い項目を、視差画像群を作成する項目として特定する場合について説明した。この他の実施形態として、例えば、重要度判定部１２５ｃは、付帯情報又は検査情報に含まれている項目のうち、重要度が高いものから順に複数の項目を、視差画像群を作成する項目として特定してもよい。例えば、重要度判定部１２５ｃは、重要度が高いものから順に３つの項目を、視差画像群を作成する項目として特定する。その場合には、視差画像生成部１２５ｄは、複数の項目について視差画像群を生成する。そして、表示制御部１２５ｅは、視差画像生成部１２５ｄによって生成された複数の視差画像群を同時に表示部１２３に表示させる。
また、例えば、重要度判定部１２５ｃは、付帯情報又は検査情報に含まれている項目のうち、重要度が所定の閾値以上の項目を、視差画像群を作成する項目として特定してもよい。例えば、重要度判定部１２５ｃは、重要度記憶部１２４ｃに記憶される重要度が「１」〜「５」であった場合には、閾値として「２」を用いる。そして、重要度判定部１２５ｃは、重要度が「２」以上の項目を、視差画像群を作成する項目として特定する。この場合には、視差画像生成部１２５ｄは、重要度判定部１２５ｃによって特定された１つ又は複数の項目について視差画像群を生成する。そして、表示制御部１２５ｅは、視差画像生成部１２５ｄによって生成された１つ又は複数の視差画像群を同時に表示部１２３に表示させる。
また、例えば、上記実施形態では、医用画像保管装置１２０の機能について説明したが、同様の機能を、医用画像撮影装置１１０、医用画像表示装置１３０、及びレポート作成支援装置１４０のうち１つ又は複数が備えてもよい。この場合には、いずれか１つの装置又は複数の装置が、立体視画像を表示可能な表示部を備える。そして、例えば、医用画像撮影装置１１０は、自身が生成した画像データや自身が受け付けた検査情報を用いて、上記実施形態で説明した医用画像保管装置１２０と同様の処理を行う。また、例えば、医用画像表示装置１３０やレポート作成支援装置１４０は、医用画像保管装置１２０から画像データを取得し、また、医用画像撮影装置１１０から検査情報を取得して、上記実施形態で説明した医用画像保管装置１２０と同様の処理を行う。
また、例えば、上記実施形態では、医用画像保管装置１２０が、図２に示した全ての機能部を備える場合について説明したが、これらの機能部は複数の装置に分散されて備えられてもよい。この場合には、例えば、医用画像撮影装置１１０、医用画像表示装置１３０、及びレポート作成支援装置１４０のうち１つ又は複数が、立体視画像を表示可能な表示部と表示制御部とを備える。そして、例えば、医用画像撮影装置１１０は、自身が生成した画像データや自身が受け付けた検査情報を表示する際に、表示する画像データ又は検査情報に対応する視差画像群の画像データを医用画像保管装置１２０から取得して表示部に表示させる。また、例えば、医用画像表示装置１３０やレポート作成支援装置１４０は、医用画像保管装置１２０から画像データを取得し、また、医用画像撮影装置１１０から検査情報を取得し、さらに、取得した画像データ又は検査情報に対応する視差画像群の画像データを医用画像保管装置１２０から取得して表示部に表示させる。
また、例えば、上記実施形態で説明した制御部１２５の機能は、ソフトウェアによって実現することもできる。例えば、制御部１２５の機能は、上記実施形態において制御部１２５が行うものとして説明した処理の手順を規定した医用画像処理プログラムをコンピュータに実行させることで、実現される。この医用画像処理プログラムは、例えば、ハードディスクや半導体メモリ素子等に記憶され、ＣＰＵやＭＰＵ等のプロセッサによって読み出されて実行される。また、この医用画像処理プログラムは、ＣＤ−ＲＯＭ（Compact Disc − Read Only Memory）やＭＯ（Magnetic Optical disk）、ＤＶＤ（Digital Versatile Disc）などのコンピュータ読取り可能な記録媒体に記録されて、配布され得る。
また、例えば、上記実施形態では、表示部１２３が、視差画像群を表示することで立体視画像を表示可能であり、視差画像生成部が、表示部に表示させる表示画像として、医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データ又は画像データを立体視可能に表示するための視差画像群を生成する場合の例について説明した。しかしながら、実施形態はこれに限られない。
例えば、表示部は、平面画像を表示可能な平面表示モニタであり、その表示部に、文字データ又は画像データを立体的に表現した平面画像を表示させてもよい。この場合には、平面画像を生成するための生成部は、例えば、平面画像として、文字データ又は画像データのボリュームデータに対して１つの視線方向からボリュームレンダリング処理を行うことで得られる２次元画像を生成する。ここでいうボリュームレンダリング処理は、ボリュームデータから直接、３次元の情報を反映した２次元画像を生成する手法である。
ここで、例えば、生成部は、サーフェスレンダリングやグローバルイルミネーションなどの他のレンダリング手法によって平面画像を生成してもよい。ここでいうサーフェスレンダリングは、ボリュームデータから対象となるデータを抽出してモデルを構築し、構築したモデルに基づいて、３次元の情報を反映した２次元画像を生成する手法である。また、グローバルイルミネーションは、現実世界における光の伝播（減衰や反射など）を考慮してボリュームデータをレンダリングすることで、よりリアルな２次元画像が得られる手法である。
以上説明した少なくとも１つの実施形態によれば、読影又は検査において参照される情報を強調して表示することができる。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
１２３ 表示部
１２５ 制御部
１２５ｄ 視差画像生成部
１２５ｅ 表示制御部

Claims (7)

  1. 立体視画像を表示するために視差画像群を表示する表示部と、
    医用画像のボリュームデータと、当該医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データのボリュームデータとに対してボリュームレンダリング処理を行って、当該医用画像及び当該文字データを含む視差画像群である表示用視差画像群を生成する生成部と、
    前記表示用視差画像群を前記表示部に表示させる表示制御部と
    を備える、医用画像処理システム。
  2. 前記付帯情報又は前記検査情報に含まれる項目ごとに重要度を記憶する重要度記憶部と、
    前記重要度に基づいて、前記付帯情報又は前記検査情報に含まれる項目の中から前記表示用視差画像群を生成する項目を特定する重要度判定部と、
    をさらに備え、
    前記生成部は、前記特定された項目について、前記表示用視差画像群を生成する、
    請求項１に記載の医用画像処理システム。
  3. 前記生成部は、前記医用画像を読影する際に用いられる項目について、前記表示用視差画像群を生成し、
    前記表示制御部は、操作者からの要求に応じて前記医用画像を表示するための画像ビューアーが前記表示部に表示されている時に、当該画像ビューアー上に前記表示用視差画像群を表示させる、
    請求項１又は２に記載の医用画像処理システム。
  4. 前記生成部は、前記検査情報を検索する際に用いられる項目について、前記表示用視差画像群を生成し、
    前記表示制御部は、操作者からの要求に応じて前記検査情報を検索するための検査リストが前記表示部に表示されている時に、当該検査リスト上に前記表示用視差画像群を表示させる、
    請求項１、２又は３に記載の医用画像処理システム。
  5. 前記生成部は、前記項目が前記医用画像の枚数であった場合に、当該枚数の多さに応じて厚みを変えた画像データを立体的に表示するための視差画像群を前記表示用視差画像群として生成する、
    請求項１〜４のいずれか一つに記載の医用画像処理システム。
  6. 医用画像のボリュームデータと、当該医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データのボリュームデータとに対してボリュームレンダリング処理を行って、当該医用画像及び当該文字データを含む視差画像群である表示用視差画像群を生成するステップと、
    前記表示用視差画像群を、立体視画像を表示するために視差画像群を表示する表示部に表示させるステップと
    を含む、医用画像処理方法。
  7. 医用画像のボリュームデータと、当該医用画像の付帯情報又は検査情報に含まれる項目の内容を表す文字データのボリュームデータとに対してボリュームレンダリング処理を行って、当該医用画像及び当該文字データを含む視差画像群である表示用視差画像群を生成するステップと、
    前記表示用視差画像群を、立体視画像を表示するために視差画像群を表示する表示部に表示させるステップと
    をコンピュータに実行させる、医用画像処理プログラム。
JP2013049187A 2012-04-02 2013-03-12 医用画像処理システム、方法及びプログラム Active JP6266217B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2013049187A JP6266217B2 (ja) 2012-04-02 2013-03-12 医用画像処理システム、方法及びプログラム
US13/854,327 US20130257860A1 (en) 2012-04-02 2013-04-01 System and method for processing medical images and computer-readable medium
CN201310113088.3A CN103356290B (zh) 2012-04-02 2013-04-02 医用图像处理系统以及方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012084337 2012-04-02
JP2012084337 2012-04-02
JP2013049187A JP6266217B2 (ja) 2012-04-02 2013-03-12 医用画像処理システム、方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2013230352A JP2013230352A (ja) 2013-11-14
JP6266217B2 true JP6266217B2 (ja) 2018-01-24

Family

ID=49234316

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013049187A Active JP6266217B2 (ja) 2012-04-02 2013-03-12 医用画像処理システム、方法及びプログラム

Country Status (3)

Country Link
US (1) US20130257860A1 (ja)
JP (1) JP6266217B2 (ja)
CN (1) CN103356290B (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5972643B2 (ja) * 2012-04-02 2016-08-17 東芝メディカルシステムズ株式会社 医用画像処理システム及びプログラム
US9384548B1 (en) 2015-01-23 2016-07-05 Kabushiki Kaisha Toshiba Image processing method and apparatus
US10855980B2 (en) * 2017-03-10 2020-12-01 Sony Olympus Medical Solutions Inc. Medical-image display control device, medical image display device, medical-information processing system, and medical-image display control method
JP6884607B2 (ja) * 2017-03-10 2021-06-09 ソニー・オリンパスメディカルソリューションズ株式会社 医療画像表示装置、医療情報処理システム、及び医療画像表示制御方法
WO2020066115A1 (ja) * 2018-09-25 2020-04-02 富士フイルム株式会社 医用画像表示装置、方法およびプログラム

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3273074B2 (ja) * 1993-03-08 2002-04-08 オリンパス光学工業株式会社 映像表示装置
JPH07114652A (ja) * 1993-10-18 1995-05-02 Hitachi Medical Corp 三次元画像の動画表示装置及び動画表示方法
US6175655B1 (en) * 1996-09-19 2001-01-16 Integrated Medical Systems, Inc. Medical imaging system for displaying, manipulating and analyzing three-dimensional images
US6346940B1 (en) * 1997-02-27 2002-02-12 Kabushiki Kaisha Toshiba Virtualized endoscope system
JP3117665B2 (ja) * 1997-08-26 2000-12-18 ジーイー横河メディカルシステム株式会社 画像表示方法および画像表示装置
US6100862A (en) * 1998-04-20 2000-08-08 Dimensional Media Associates, Inc. Multi-planar volumetric display system and method of operation
US6785410B2 (en) * 1999-08-09 2004-08-31 Wake Forest University Health Sciences Image reporting method and system
JP2002092656A (ja) * 2000-09-11 2002-03-29 Canon Inc 立体画像表示装置及び画像データの表示方法
JP2002219122A (ja) * 2000-11-24 2002-08-06 Siemens Ag 医学システムアーキテクチャ
JP4772218B2 (ja) * 2001-06-21 2011-09-14 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー Ｘ線ｃｔ装置及びプログラム
US20040135974A1 (en) * 2002-10-18 2004-07-15 Favalora Gregg E. System and architecture for displaying three dimensional data
US7965907B2 (en) * 2002-11-21 2011-06-21 Canon Kabushiki Kaisha Medical image handling system and method
JP2004208858A (ja) * 2002-12-27 2004-07-29 Toshiba Corp 超音波診断装置及び超音波画像処理装置
EP1722705A2 (en) * 2004-03-10 2006-11-22 Depuy International Limited Orthopaedic operating systems, methods, implants and instruments
JP2005253669A (ja) * 2004-03-11 2005-09-22 Fuji Photo Film Co Ltd 医用画像撮影制御装置及び医用画像撮影システム
US7376903B2 (en) * 2004-06-29 2008-05-20 Ge Medical Systems Information Technologies 3D display system and method
WO2006033377A1 (ja) * 2004-09-24 2006-03-30 Hitachi Medical Corporation 医用画像表示装置及び方法並びにプログラム
JP4602044B2 (ja) * 2004-10-15 2010-12-22 株式会社東芝 画像表示装置
US8373652B2 (en) * 2005-04-06 2013-02-12 Kabushiki Kaisha Toshiba Image display apparatus and image display method
JP4653542B2 (ja) * 2005-04-06 2011-03-16 株式会社東芝 画像処理装置
CN101321606B (zh) * 2005-06-30 2013-04-17 直观外科手术操作公司 多臂机器人远程外科手术中工具状态通信的指示器
US20080021741A1 (en) * 2006-07-19 2008-01-24 Mdatalink, Llc System For Remote Review Of Clinical Data
US8743109B2 (en) * 2006-08-31 2014-06-03 Kent State University System and methods for multi-dimensional rendering and display of full volumetric data sets
DE102008028482B4 (de) * 2008-06-13 2021-11-25 Carl Zeiss Meditec Ag Optisches Beobachtungsgerät mit Mehrkanal-Dateneinblendung und Verfahren zum Einblenden von elektronischen Einblendbildern in ein optisches Beobachtungsgerät
JP5637653B2 (ja) * 2008-08-18 2014-12-10 株式会社東芝 医用画像処理装置、超音波診断装置、及び医用画像処理プログラム
JP2010082270A (ja) * 2008-09-30 2010-04-15 Toshiba Corp Ｘ線画像診断装置及び画像表示装置
JP5371703B2 (ja) * 2008-11-27 2013-12-18 株式会社東芝 医用画像生成装置、医用画像保管装置、医用画像表示装置及び医用画像表示システム
JP2010182018A (ja) * 2009-02-04 2010-08-19 Toshiba Corp 医用画像表示システム及びその画像表示方法
US20100265315A1 (en) * 2009-04-21 2010-10-21 Panasonic Corporation Three-dimensional image combining apparatus
JP5572437B2 (ja) * 2010-03-29 2014-08-13 富士フイルム株式会社 ３次元医用画像に基づいて立体視用画像を生成する装置および方法、並びにプログラム
JP5725745B2 (ja) * 2010-07-05 2015-05-27 株式会社東芝 Ｘ線診断装置及び医用画像診断装置
US8872814B1 (en) * 2010-10-12 2014-10-28 Sos Agaian System and method for converting media from a lower dimension representation to a higher dimension representation
JP2012245192A (ja) * 2011-05-30 2012-12-13 Fujifilm Corp 放射線画像表示装置および方法
US9135696B2 (en) * 2012-01-10 2015-09-15 Siemens Aktiengesellschaft Implant pose determination in medical imaging

Also Published As

Publication number Publication date
CN103356290B (zh) 2015-11-18
US20130257860A1 (en) 2013-10-03
CN103356290A (zh) 2013-10-23
JP2013230352A (ja) 2013-11-14

Similar Documents

Publication Publication Date Title
JP6058290B2 (ja) 画像処理システム、装置、方法及び医用画像診断装置
JP5909055B2 (ja) 画像処理システム、装置、方法及びプログラム
JP5306422B2 (ja) 画像表示システム、装置、方法及び医用画像診断装置
JP6005905B2 (ja) 画像処理システム、画像処理装置及び画像処理方法
JP5972533B2 (ja) 画像処理システム及び方法
JP2013016153A (ja) 画像処理システム及び方法
JP2012242906A (ja) 画像処理システム、装置及び方法
JP2013017577A (ja) 画像処理システム、装置、方法及び医用画像診断装置
JP6266217B2 (ja) 医用画像処理システム、方法及びプログラム
JP2013008324A (ja) 画像処理システム、端末装置及び方法
JP5797485B2 (ja) 画像処理装置、画像処理方法及び医用画像診断装置
WO2012137821A1 (ja) 画像処理システム、装置、方法及びプログラム
JP5784379B2 (ja) 画像処理システム、装置及び方法
JP2013026736A (ja) 画像処理システム、装置、方法及びプログラム
JP5974238B2 (ja) 画像処理システム、装置、方法及び医用画像診断装置
JP6058301B2 (ja) 画像処理装置、画像処理方法及び医用画像診断装置
JP5832990B2 (ja) 画像表示システム
JP2013038467A (ja) 画像処理システム、画像処理装置、医用画像診断装置、画像処理方法及び画像処理プログラム
JP6005913B2 (ja) 報知装置、報知方法及び医用画像診断装置
JP5972643B2 (ja) 医用画像処理システム及びプログラム
JP5813986B2 (ja) 画像処理システム、装置、方法及びプログラム
JP2012244420A (ja) 画像処理システム、装置及び方法
JP5835975B2 (ja) 画像処理システム、装置、方法及び医用画像診断装置
JP2013017056A (ja) 画像処理装置、画像処理方法及び医用画像診断装置
JP5868051B2 (ja) 画像処理装置、画像処理方法、画像処理システム及び医用画像診断装置

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20151102

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160217

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160513

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20160929

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161021

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170613

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170809

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171121

R150 Certificate of patent or registration of utility model

Ref document number: 6266217

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350