JP5421756B2 - 画像表示装置および方法並びにプログラム - Google Patents

Description

本発明は、異常陰影候補が検出された医用画像を表示する画像表示装置および方法並びに画像表示方法をコンピュータに実行させるためのプログラムに関するものである。

医療分野においては、画像中の異常陰影候補を自動的に検出し、検出された異常陰影候補の強調表示等を行うコンピュータ支援画像診断システム（ＣＡＤ: Computer Aided Diagnosis）が知られており、医師は、このＣＡＤシステムによって検出された異常陰影候補を含む画像を読影し、画像中の異常陰影候補が腫瘤や石灰化等の病変を表す異常陰影であるかどうかを最終的に判断する。

異常陰影候補の検出手法としては、例えば、乳房や胸部の放射線画像に対して、アイリスフィルタによる画像処理を行い、その出力値を閾値処理することによって、ガン等の一形態である腫瘤陰影（異常陰影の一形態）の候補を自動的に検出する手法（例えば特許文献１参照）や、モフォロジーフィルタを用いた画像処理を行い、その出力値を閾値処理することによって、乳ガン等の他の一形態である微小石灰化陰影（異常陰影の一形態）の候補を自動的に検出する手法が知られている（例えば特許文献２参照）。

一方、胸部単純画像の読影においては、画像に含まれる異常陰影の鑑別は、淡い異常陰影を見逃さずに行う必要がある。このため、画像の読影を効率よく行うために、画像を連続して表示する際に、各画像から代表特徴量を算出し、代表特徴量から優先順位を決定し、優先順位に基づいて画像の表示順序を決定する手法が提案されている（特許文献３参照）。また、例えば乳房全体の放射線画像（全体画像）を表示し、異常陰影候補を含む関心領域（ＲＯＩ）をモニタ上の全体画像が表示される領域とは異なる領域に拡大して表示する手法（特許文献４，５参照）が提案されている。さらに、シネ表示と呼ばれる方法で断層像を高速に順次表示するに際し、異常陰影が含まれる断層像のみ再生速度を下げたり、異常陰影を含む所定のスライス間隔の範囲において往復させてシネ表示を行ったり、異常陰影候補を着色したりする手法も提案されている（特許文献６参照）。また、放射線画像における乳房が含まれる領域を検出し、その領域を所定サイズの関心領域に分割し、分割した関心領域を順次拡大して表示する手法も提案されている。

特開平１０−９７６２４号公報 特開平８−２９４４７９号公報 特開平５−２０５０１８号公報 特開２００２−２８１５４号公報 特開２００２−３３０９４９号公報 特開２００６−１４９５２４号公報

しかしながら、どのような表示形態であっても、モニタに表示された画像を見ながら、微小な石灰化等の異常陰影を見逃すことなく探すことはきわめて困難であるとともに、読影に長時間を要する。また、読影開始直後は注意力が高いため、異常陰影を見落とすことは少ないが、同じ作業を続けていくうちに注意力が落ちてくるため、異常陰影を見逃す可能性が高くなる。

本発明は、上記事情に鑑みなされたものであり、効率よく異常陰影候補を含む医用画像の読影を行うことを目的とするものである。

本発明による画像表示装置は、被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得する取得手段と、
前記医用画像を複数の関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示する表示制御手段とを備えたことを特徴とするものである。

ここで、異常陰影候補が含まれない関心領域の画像についてはあらかじめ定められた順序で表示すればよい。また、異常陰影候補が含まれない関心領域の画像を表示しないようにしてもよい。この場合、異常陰影候補が含まれない関心領域を表示しない旨のメッセージを表示するようにしてもよい。

なお、本発明による画像表示装置においては、前記表示制御手段を、前記医用画像を所定サイズの前記複数の関心領域に分割する手段としてもよい。

この場合前記表示制御手段を、１つの前記異常陰影候補が１つの前記関心領域内に含まれるよう前記所定サイズを決定する手段としてもよい。

また、本発明による画像表示装置においては、前記表示制御手段を、前記異常陰影候補を含む関心領域を、該異常陰影候補のみを含む小関心領域にさらに分割し、前記悪性度が高い異常陰影候補を含む小関心領域から順に、該小関心領域の画像を先に前記表示手段に表示し、その後前記複数の関心領域の画像を所定順序にて前記表示手段に表示する手段としてもよい。

この場合、前記表示制御手段を、前記小関心領域を含む関心領域については、該関心領域における前記小関心領域の部分を他の部分と表示態様を変更して表示する手段としてもよい。

表示態様を変更するとは、関心領域における小関心領域の部分と他の領域の部分とが明らかに異なるものであることが視認できるようにすることであり、例えば、関心領域における小関心領域の部分のみを黒抜きにする、白抜きにする、明度あるいはコントラストを下げる、または着色する等により、表示態様を変更することができる。

また、本発明による画像表示装置においては、前記表示制御手段を、前記小関心領域の画像と前記医用画像とを同時に表示するに際し、表示された前記小関心領域の位置を特定する情報を、前記医用画像に付与する手段としてもよい。

また、本発明による画像表示装置においては、前記表示制御手段を、前記小関心領域の画像を、該小関心領域に含まれる前記異常陰影候補のサイズに応じた拡大率により拡大して表示する手段としてもよい。

また、本発明による画像表示装置においては、前記表示制御手段を、前記異常陰影候補の大きさに応じて、前記医用画像を該異常陰影候補をそれぞれ含む複数の関心領域に分割する手段としてもよい。

また、本発明による画像表示装置においては、前記表示制御手段を、前記関心領域の画像と前記医用画像とを同時に表示するに際し、表示された前記関心領域の位置を特定する情報を、前記医用画像に付与する手段としてもよい。

また、本発明による画像表示装置においては、前記表示制御手段を、前記関心領域の画像を、該関心領域に含まれる前記異常陰影候補のサイズに応じた拡大率により拡大して表示する手段としてもよい。

また、本発明による画像表示装置においては、前記表示制御手段を、前記医用画像における前記被写体を含む領域のみを前記複数の関心領域に分割して表示する手段としてもよい。

本発明による画像表示方法は、被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得し、
前記医用画像を複数の関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示することを特徴とするものである。

なお、本発明による画像処理方法をコンピュータに実行させるためのプログラムとして提供してもよい。

本発明によれば、複数の関心領域の画像を順次表示するに際し、異常陰影候補を含む関心領域の画像から先に、悪性度が高い順に表示するようにしたため、異常陰影である可能性が高い異常陰影候補を含む関心領域の画像が先に表示されることとなる。これにより、ユーザは異常陰影である可能性が高い異常陰影候補を含む関心領域の画像を先に読影することができ、その結果、より高い注意力をこれらの関心領域の画像の読影に払うことができる。したがって、読影を行うユーザは異常陰影である可能性が高い異常陰影候補の見落としを少なくすることができることとなる。また、後に表示される異常陰影候補を含まない関心領域の画像は、読影にそれほど注意力を払わなくてもよいため、読影時間も短縮することができる。よって、本発明によれば、ユーザに負担をかけることなく、効率よく医用画像の読影を行うことができる。

また、医用画像を所定サイズの複数の関心領域に分割することにより、関心領域の画像を一定サイズとなるように表示できることとなる。

この場合、１つの異常陰影候補が１つの関心領域内に含まれるように所定サイズを決定することにより、異常陰影である可能性が高い異常陰影候補の見落としを少なくすることができる。

また、異常陰影候補が含まれる関心領域を、異常陰影候補のみを含む小関心領域にさらに分割し、悪性度が高い異常陰影候補を含む小関心領域から順に、小関心領域の画像を先に表示し、その後複数の関心領域の画像を所定順序にて表示することにより、異常陰影候補は関心領域よりも狭い範囲において表示されることとなる。したがって、高い注意力を払って読影を行う範囲を狭くすることができるため、読影を行うユーザの負担をさらに軽減することができる。

またこの場合に、関心領域を表示するに際し、小関心領域が含まれる関心領域については、関心領域における小関心領域の部分を他の部分と表示態様を変更して表示することにより、小関心領域の部分については再度読影を行う必要がなくなるため、さらに効率よく読影を行うことができる。

また、異常陰影候補の大きさに応じて、医用画像を異常陰影候補をそれぞれ含む複数の関心領域に分割することにより、表示される関心領域の画像内において、読影をする範囲を狭くすることができるため、より効率よく読影を行うことができる。

また、関心領域の画像および小関心領域の画像と医用画像とを同時に表示するに際して、表示された関心領域または小関心領域の位置を特定する情報を医用画像に付与することにより、表示中の関心領域または小関心領域の医用画像上における位置を認識することができるため、医用画像に含まれる被写体のどの部分に異常陰影候補が含まれるかを容易に認識することができる。

また、関心領域の画像および小関心領域の画像を、関心領域に含まれる異常陰影候補のサイズに応じた拡大率により拡大して表示することにより、サイズが小さい異常陰影候補の読影をより容易に行うことができる。

本発明の第１の実施形態による画像表示装置を適用した読影ワークステーションを含む医用情報システムの概略構成を示す図 読影ワークステーションの構成を示す概略図 異常陰影候補の存在範囲を示す図 第１の実施形態において画像表示時に行われる処理を示すフローチャート 乳房領域の検出を説明するための図 第１の実施形態における関心領域の分割を説明するための図 読影画面の例を示す図 第１の実施形態における関心領域の画像の表示順序を説明するための図 第２の実施形態における関心領域および小関心領域を示す図 第２の実施形態における関心領域および小関心領域の画像の表示順序を説明するための図 第３の実施形態における関心領域および小関心領域を示す図 第３の実施形態における関心領域および小関心領域の画像の表示順序を説明するための図（その１） 第３の実施形態における関心領域および小関心領域の画像の表示順序を説明するための図（その２） 異常陰影候補が複数の関心領域に跨っている状態を示す図 異常陰影候補が複数の関心領域に跨っている場合の、関心領域の画像の表示順序を説明するための図 読影画面の他の例を示す図

以下、図面を参照して本発明の実施形態について説明する。図１は本発明の第１の実施形態による画像表示装置を適用した読影ワークステーションを含む医療情報システムの概略構成を示す図である。図１に示すように本実施形態による医療情報システムは、医用画像の撮影装置（モダリティ）１、読影ワークステーション（ＷＳ）２、画像サーバ３、画像データベース４、およびＣＡＤシステム（コンピュータ支援画像診断システム）５が、ネットワーク１０を介して互いに通信可能な状態で接続されて構成されている。また、本実施形態における各機器は、ＣＤ−ＲＯＭ等の記録媒体からインストールされたプログラムによって制御される。また、プログラムは、インターネット等のネットワーク経由で接続されたサーバからダウンロードされた後にインストールされたものであってもよい。

モダリティ１には、被検体の検査対象部位を撮影することにより、その部位を表す画像の画像データを生成し、その画像データに、検査情報および患者情報等の付帯情報を付加して出力する装置が含まれる。本実施形態においてはモダリティ１として、乳房の放射線画像（乳房画像）Ｍ０を表す画像データ（以下簡便のため、画像とその画像を表す画像データとを同じ記号で表すことにする）を取得するマンモグラフィを用いるものとするが、これに限定されるものではなく、超音波画像撮影装置および断層画像撮影装置等を用いることができる。

読影ワークステーション２は、画像読影医および技師等のユーザが、画像の読影および読影レポートの作成に利用する装置である。図２は読影ワークステーション２の構成を示す概略図である。図２に示すように読影ワークステーション２は、ＣＰＵ、ハードディスク等の記憶装置、メモリおよび各種インターフェース等を備えた処理装置２１、１台または２台の高精細ディスプレイ２２（１台のみ図示）、並びにキーボード２３およびマウス２４等の入力機器２５により構成される。読影ワークステーション２は、処理装置２１にインストールされたプログラムにより、画像サーバ３に対する画像の閲覧要求、画像サーバ３から受信した画像に対する各種画像処理、画像の表示、読影レポートの作成の支援、読影レポートサーバ（図示なし）に対する読影レポートの登録要求および閲覧要求、並びに読影レポートサーバから受信した読影レポートの表示等を行う。また、後述するＣＡＤシステム５に対して、異常陰影候補の検出処理の指示も行う。

画像サーバ３は、汎用の比較的処理能力の高いコンピュータにデータベース管理システム（DataBase Management System: DBMS）の機能を提供するソフトウェアプログラムがインストールされたものである。また、画像サーバ３は画像データベース４が構成される大容量ストレージを備えている。このストレージは、画像サーバ３とデータバスによって接続された大容量のハードディスク装置であってもよいし、ネットワーク１０に接続されているＮＡＳ（Network Attached Storage）およびＳＡＮ（Storage Area Network）に接続されたディスク装置であってもよい。画像サーバ３も、モダリティ１、読影ワークステーション２およびＣＡＤシステム５等とネットワーク１０を介して通信を行う通信インターフェースを有している。

画像サーバ３は、モダリティ１からの画像の登録要求を受け付けると、その画像をデータベース用のフォーマットに整えて画像データベース４に登録する。また、後述するＣＡＤシステム５から異常陰影候補の異常陰影候補の検出結果の情報（以下検出情報Ｄとする）が送信されると、検出情報Ｄを、その検出情報Ｄを取得した画像データＭ０と対応づけて画像データベース４に登録する。

画像データベース４には、上述した画像データＭ０と付帯情報とが登録される。さらに、検出情報Ｄも登録される。付帯情報には、例えば、個々の画像を識別するための画像ＩＤ、被写体を識別するための患者ＩＤ、検査を識別するための検査ＩＤ、画像毎に割り振られるユニークなＩＤ（ＵＩＤ）、その画像が生成された検査日、検査時刻、患者氏名、年齢、性別等の患者情報、あるいは検査部位（撮影部位）等の情報が含まれうる。

また、画像サーバ３は、読影ワークステーション２からの閲覧要求をネットワーク１０経由で受信すると、画像データベース４に登録されている画像を検索し、抽出された画像の画像データを付帯情報および検出情報Ｄとともに要求元の読影ワークステーション２に送信する。

読影ワークステーション２は、ユーザによって読影対象画像の閲覧を要求する操作が行われると、画像サーバ３に対して閲覧要求を送信し、読影する乳房画像の画像データＭ０およびその画像データＭ０の検出情報Ｄを取得する。

ＣＡＤシステム５は、汎用コンピュータに、異常陰影候補を検出するための機能を提供するソフトウェアプログラムがインストールされたものである。また、ＣＡＤシステム５も、モダリティ１、読影ワークステーション２等とネットワーク１０を介して通信を行う通信インターフェースを有している。

ＣＡＤシステム５は、読影ワークステーション２からの指示により、乳房画像Ｍ０の画像データＭ０を画像サーバ３から取得し、取得した画像データＭ０に基づいて、乳房画像Ｍ０中の異常陰影候補（腫瘤陰影候補および微小石灰化陰影候補）を検出する。具体的には、アイリスフィルタ処理等を用いた手法（上記特許文献１参照）、またはモフォロジーフィルタを用いた手法（上記特許文献２参照）等により異常陰影らしい領域を抽出し、さらに抽出した領域をニューラルネットワーク等の判別器を用いて異常陰影候補か否かを判別することにより異常陰影候補を検出する。さらにＣＡＤシステム５は、検出した異常陰影候補の存在範囲の位置および悪性度を検出情報Ｄとして生成し、画像サーバ３に送信する。ここで、異常陰影候補の存在範囲の位置は、画像Ｍ０中に存在する異常陰影候補を囲む外接矩形の４頂点の座標（（ｘ１，ｙ１），（ｘ１，ｙ２），（ｘ２，ｙ１），（ｘ２，ｙ２））で表される（図３参照）。この４頂点（（ｘ１，ｙ１），（ｘ１，ｙ２），（ｘ２，ｙ１），（ｘ２，ｙ２））によって囲まれる領域を異常陰影候補の存在範囲とする。また、悪性度は、上述したニューラルネットワーク等の判別器の出力値を用いる。なお、出力値が高いほど異常陰影候補の悪性度が高いこととなる。

ここで、ＣＡＤシステム５は、読影ワークステーション２からの指示により異常陰影候補を検出しているが、画像データＭ０の入力により自動で異常陰影候補を検出するものであってもよい。

次いで、第１の実施形態において行われる処理について説明する。なお、本発明は、読影ワークステーション２において行われる、読影のための画像の表示処理に特徴を有するため、以降読影ワークステーション２における画像表示処理についてのみ説明する。また、読影ワークステーション２には画像データベース４から、読影を行うための乳房画像Ｍ０が検出情報Ｄとともに送信されているものとする。

図４は画像表示時に行われる処理を示すフローチャートである。読影ワークステーション２の処理装置２１は、まず乳房画像Ｍ０から乳房領域を検出する（ステップＳＴ１）。図５は乳房領域の検出を説明するための図である。図５に示すように、乳房画像Ｍ０は乳房を含む領域と放射線が直接検出される直接放射線領域（斜線部で示す）とを含む。処理装置２１は、例えば乳房画像Ｍ０を二値化処理し、乳房画像Ｍ０の画素値が所定の閾値を超えた領域を直接放射線領域にラベリングし、それ以外の領域を乳房にラベリングする。そして、乳房にラベリングした領域を乳房領域Ｒ０として検出する。

次いで、処理装置２１は、乳房領域Ｒ０を所定サイズを有する複数の関心領域に分割する（ステップＳＴ２）。図６は第１の実施形態における関心領域の分割を説明するための図である。図６に示すように、第１の実施形態においては、乳房領域Ｒ０を含む矩形の領域を４×４の１６の関心領域Ｒ１〜Ｒ１６に分割する。この際、検出情報Ｄに基づいて、１つの異常陰影候補が１つの関心領域に含まれるように、すなわち１つの異常陰影候補が複数の関心領域に跨って分割されないように関心領域のサイズを決定することが好ましい。図６においては、異常陰影候補が複数の関心領域に跨って分割されないように、関心領域Ｒ１〜Ｒ１６のサイズが決定されている。

次いで、処理装置２１は関心領域Ｒ１〜Ｒ１６の表示順序を決定する（ステップＳＴ３）。ここで、乳房領域Ｒ０を含む矩形領域の画像を図６に示すように１６の領域に分割した場合、ユーザにより関心領域の画像の表示の指示がなされると、従来であればまず関心領域Ｒ１の画像が最初に拡大表示され、ユーザが表示を切り替える毎に、関心領域の画像がＲ１〜Ｒ１６まで順番に表示されることとなる。

本実施形態においては、検出情報Ｄを参照し、まず異常陰影候補の位置に基づいて、関心領域Ｒ１〜Ｒ１６のうち、異常陰影候補が含まれる関心領域を選択する。図６に示す乳房領域Ｒ０においては、関心領域Ｒ６，Ｒ９，Ｒ１１に異常陰影候補が含まれることから、関心領域Ｒ６，Ｒ９，Ｒ１１が選択される。そして、検出情報Ｄに含まれる悪性度を参照して、選択された関心領域に含まれる異常陰影候補の悪性度が高い順に、関心領域の表示順序を決定する。ここで、関心領域Ｒ６，Ｒ９，Ｒ１１に含まれる異常陰影候補の悪性度が高い順にＲ９，Ｒ１１，Ｒ６であった場合、表示順序を、Ｒ９，Ｒ１１，Ｒ６に決定する。なお、異常陰影候補を含まない関心領域については、番号順となるように表示順序を決定する。したがって、関心領域の表示順序は、Ｒ９，Ｒ１１，Ｒ６，Ｒ１，Ｒ２，Ｒ３，Ｒ４，Ｒ５，Ｒ７，Ｒ８，Ｒ１０，Ｒ１２，Ｒ１３，Ｒ１４，Ｒ１５，Ｒ１６となる。

次いで、処理装置２１は、読影画面をディスプレイ２２に表示する（ステップＳＴ４）。図７は読影画面の例を示す図である。図７に示すように読影画面３０は、乳房領域Ｒ０の画像３１および関心領域の画像３２を含む。なお、関心領域の画像３２は読影画面３０内において拡大されて別ウィンドウに表示されている。ここで、乳房領域Ｒ０の画像３１は、例えば等倍表示あるいはある程度（例えば１３０％程度）拡大される。一方、関心領域の画像３２はピクセル等倍されて表示される。なお、図７に示すように乳房領域Ｒ０の画像３１には、現在拡大表示中の関心領域の位置が枠３３により示されているため、枠３３の位置により現在表示されている関心領域の画像３２が乳房領域Ｒ０のいずれに位置にあるものかが分かる。

次いで、処理装置２１は関心領域の切り替え指示がユーザによりなされたか否かを判定し（ステップＳＴ５）、ステップＳＴ５が肯定されると、関心領域を次の表示順序の関心領域に切り替える（ステップＳＴ６）。図８は第１の実施形態における関心領域の画像の表示順序を説明するための図である。図８に示すように、第１の実施形態においては、上述したように決定された表示順序により関心領域の画像が表示される。すなわち、まず関心領域Ｒ９の画像が表示され、ユーザが表示の切り替え指示を行うと、関心領域Ｒ１１，Ｒ６の画像がこの順に表示される。続いて、ユーザが表示の切り替え指示を行うと、関心領域Ｒ１が表示され、以下関心領域Ｒ２から関心領域Ｒ１６まで順に表示される。なお、この際、先に表示された関心領域Ｒ６，Ｒ９，Ｒ１１については、一度表示された後は表示されないこととなる。

ステップＳＴ５が否定されると、処理装置２１は終了指示がなされたか否かを判定し（ステップＳＴ７）、ステップＳＴ７が否定されるとステップＳＴ５に戻る。ステップＳＴ７が肯定されると処理を終了する。

このように、本実施形態においては、複数の関心領域の画像を順次表示するに際し、異常陰影候補を含む関心領域の画像から先に、悪性度が高い順に表示するようにしたため、異常陰影である可能性が高い異常陰影候補を含む関心領域の画像が先に表示されることとなる。これにより、ユーザは異常陰影である可能性が高い異常陰影候補を含む関心領域の画像を先に読影することができ、その結果、より高い注意力をこれらの関心領域の画像の読影に払うことができる。したがって、読影を行うユーザは異常陰影である可能性が高い異常陰影候補の見落としを少なくすることができることとなる。また、後に表示される異常陰影候補を含まない関心領域の画像は、読影にそれほど注意力を払わなくてもよいため、読影時間も短縮することができる。よって、本実施形態によれば、ユーザに負担をかけることなく、効率よく医用画像の読影を行うことができる。

次いで、本発明の第２の実施形態について説明する。なお、第２の実施形態においては、関心領域の画像の表示の態様が第１の実施形態と異なるのみであるため、ここでは読影ワークステーション２等を含む医療情報システムの構成については詳細な説明は省略する。上記第１の実施形態においては、乳房領域Ｒ０の画像を同一サイズの関心領域に分割しているが、関心領域内のどこに異常陰影候補が存在するかが明確でない。このため、第２の実施形態においては、第１の実施形態のように分割した関心領域内において、検出情報Ｄを参照して異常陰影候補の存在範囲を特定し、存在範囲を小関心領域として関心領域とは別に分割し、小関心領域の画像から先に悪性度の順に拡大して表示するようにしたものである。

図９は第２の実施形態における関心領域および小関心領域を示す図である。図９に示すように乳房領域Ｒ０を含む画像の関心領域Ｒ６，Ｒ９，Ｒ１１に異常陰影候補が含まれており、さらに関心領域Ｒ６，Ｒ９，Ｒ１１内に、異常陰影候補の存在範囲を表す小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１が含まれる。なお、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１としては、検出情報Ｄに基づいて決定される異常陰影候補の存在範囲そのものとしてもよいが、例えば上下および左右の各方向（４方向）に存在範囲をそれぞれ５０％程度ずつ拡張して、存在範囲に若干マージンを持たせた領域としてもよい。

ここで、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１に含まれる異常陰影候補の悪性度が高い順にＲ９−１，Ｒ１１−１，Ｒ６−１であった場合、処理装置２１は、小関心領域の表示順序をＲ９−１，Ｒ１１−１，Ｒ６−１に決定する。なお、小関心領域の表示後は、番号順となるように関心領域の表示順序を決定する。したがって、関心領域および小関心領域の表示順序は、Ｒ９−１，Ｒ１１−１，Ｒ６−１，Ｒ１〜Ｒ１６となる。

図１０は第２の実施形態における関心領域および小関心領域の画像の表示順序を説明するための図である。図１０に示すように、第２の実施形態においては、まず小関心領域Ｒ９−１の画像が表示され、ユーザが表示の切り替え指示を行うと、小関心領域Ｒ１１−１，Ｒ６−１の画像がこの順に表示される。続いて、ユーザが表示の切り替え指示を行うと、関心領域Ｒ１の画像が表示され、以下関心領域Ｒ２から順に関心領域Ｒ１６まで画像が表示される。なお、この際、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１の画像が先に表示された関心領域Ｒ６，Ｒ９，Ｒ１１については、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１の領域を小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１以外の領域と表示態様を変更して画像を表示する。具体的には、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１の部分のみ黒抜きにする、白抜きにする、明度あるいはコントラストを下げる、または着色する等により、表示態様を変更することができる。なお、図１０においては表示態様を変更した状態を斜線にて示している。

このように、第２の実施形態においては、異常陰影候補が含まれる関心領域を、異常陰影候補の存在範囲を含む小関心領域にさらに分割し、悪性度が高い異常陰影候補の小関心領域から順に、小関心領域の画像を先に表示し、その後複数の関心領域の画像を番号順に表示するようにしたものである。このため、高い注意力を払って読影を行う範囲を狭くすることができるため、読影を行うユーザの負担をさらに軽減することができる。

またこの場合に、異常陰影候補を含む関心領域については、すでに表示した小関心領域の部分を他の部分と表示態様を変更して表示することにより、関心領域における小関心領域の部分については再度読影を行う必要がなくなるため、さらに効率よく読影を行うことができる。

次いで、本発明の第３の実施形態について説明する。なお、第３の実施形態においては、関心領域の表示の態様が第１の実施形態と異なるのみであるため、ここでは読影ワークステーション２等を含む医療情報システムの構成については詳細な説明は省略する。第３の実施形態においては、検出情報Ｄを参照して、異常陰影候補の存在範囲のサイズに応じて、乳房領域Ｒ０を複数の関心領域に分割し、関心領域を悪性度の高い順に拡大して表示するようにしたものである。

図１１は第３の実施形態における関心領域および小関心領域を示す図である。図１１に示すように乳房領域Ｒ０には異常陰影候補の小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１が含まれる。第３の実施形態においては、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１を分割した上で、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１以外の他の領域を、例えば最もサイズが大きい小関心領域のサイズとなるように分割する。なお、このように分割を行った場合、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１の近傍の領域および乳房領域Ｒ０の端部においては、最もサイズが大きい小関心領域のサイズとなるように分割することができない場合がある。このような場合は、適宜分割サイズを矩形となるように細かくして分割すればよい。ここで、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１のサイズは、検出情報Ｄに基づいて決定される存在範囲そのもののサイズとしてもよいが、第２の実施形態と同様に若干マージンを持たせるようにしてもよい。

なお、ここでは小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１以外の他の領域を、例えば最もサイズが大きい小関心領域のサイズとなるように分割しているが、任意のサイズとなるように分割してもよいことはもちろんである。

ここで、関心領域Ｒ６，Ｒ９，Ｒ１１に含まれる異常陰影候補の悪性度が高い順にＲ９，Ｒ１１，Ｒ６であった場合、第３の実施形態においては、処理装置２１は、小関心領域の表示順序をＲ９−１，Ｒ１１−１，Ｒ６−１に決定する。なお、小関心領域の表示後については、分割した関心領域を左上から順に表示するように表示順序を決定する。

図１２は第３の実施形態における関心領域および小関心領域の画像の表示順序を説明するための図である。図１２に示すように、第３の実施形態においては、まず小関心領域Ｒ９−１の画像が表示され、ユーザが表示の切り替え指示を行うと、小関心領域Ｒ１１−１，Ｒ６−１の順に画像が表示される。続いて、ユーザが表示の切り替え指示を行うと、分割した関心領域が乳房領域Ｒ０の左上から順に表示される。

このように、第３の実施形態においては、異常陰影候補の大きさに応じて、乳房領域Ｒ０を異常陰影候補をそれぞれ含む複数の関心領域に分割するようにしたため、表示される関心領域の画像内において、読影をする範囲を狭くすることができ、その結果、より効率よく読影を行うことができる。

なお、上記第３の実施形態においては、図１３に示すように、小関心領域Ｒ９−１，Ｒ１１−１，Ｒ６−１の順に画像を表示した後に、第１の実施形態と同様に、所定サイズの関心領域Ｒ１〜Ｒ１６を順次表示するようにしてもよい。この場合、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１を含む関心領域Ｒ６，Ｒ９，Ｒ１１については、第２の実施形態と同様に、小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１の領域を小関心領域Ｒ６−１，Ｒ９−１，Ｒ１１−１以外の領域と表示態様を変更して画像を表示すればよい。

また、上記第１の実施形態においては、１つの異常陰影候補が複数の関心領域に跨って分割されないように関心領域のサイズを決定しているが、あらかじめ定められたサイズの関心領域を用いるようにしてもよい。この場合、乳房領域Ｒ０を含む矩形の領域は、図１４に示すように異常陰影候補が複数の関心領域Ｒ６、Ｒ７およびＲ９，Ｒ１０に跨る可能性がある。このため、含まれる異常陰影候補の悪性度が高い順に関心領域を表示する際に、異常陰影候補が複数の関心領域に跨っている場合には、異常陰影候補が跨っている関心領域をあらかじめ定められた順に（例えば関心領域に付与された番号が若い順に）表示するようにすればよい。例えば、図１４に示すように異常陰影候補が複数の関心領域Ｒ６、Ｒ７およびＲ９，Ｒ１０に跨っている場合、関心領域Ｒ６，Ｒ７の異常陰影候補の方が悪性度が高いとすると、関心領域Ｒ６，Ｒ７，Ｒ９，Ｒ１０の画像をこの順に表示し、続いて関心領域Ｒ１を表示し、以下先に表示した関心領域Ｒ６，Ｒ７，Ｒ９，Ｒ１０以外の関心領域Ｒ２から関心領域Ｒ１６まで順に表示すればよい。

次いで、このように異常陰影候補が複数の関心領域に跨る場合において、上記第２の実施形態のように関心領域および小関心領域を表示する場合について説明する。図１５は第２の実施形態において、異常陰影候補が複数の関心領域に跨る場合の関心領域および小関心領域の画像の表示順序を説明するための図である。なお、関心領域Ｒ６，Ｒ７，Ｒ９，Ｒ１０内の小関心領域を、それぞれ小関心領域Ｒ６−１，Ｒ７−１，Ｒ９−１，Ｒ１０−１とする。図１５に示すように、まず小関心領域Ｒ６−１と小関心領域Ｒ７−１とを一つの画像として表示する。さらに、ユーザが表示の切り替え指示を行うと、小関心領域Ｒ９−１と小関心領域Ｒ１０−１とを一つの画像として表示する。続いて、ユーザが表示の切り替え指示を行うと、関心領域Ｒ１の画像が表示され、以下関心領域Ｒ２から順に関心領域Ｒ１６まで画像が表示される。なお、この際、小関心領域Ｒ６−１，Ｒ７−１，Ｒ９−１，Ｒ１０−１の画像が先に表示された関心領域Ｒ６，Ｒ７，Ｒ９，Ｒ１０については、小関心領域Ｒ６−１，Ｒ７−１，Ｒ９−１，Ｒ１０−１の領域を小関心領域Ｒ６−１，Ｒ７−１，Ｒ９−１，Ｒ１０−１以外の領域と表示態様を変更して画像を表示する。なお、図１５においては表示態様を変更した状態を斜線にて示している。

また、上記第１から第３の実施形態においては、医療情報システムを、モダリティ１、読影ワークステーション２、画像サーバ、画像データベース４及びＣＡＤシステム５を備えたものとしているが、モダリティ１および読影ワークステーション２のみを備えるものとしてもよい。この場合、モダリティ１または読影ワークステーション２に異常陰影候補の検出処理を行うソフトウェアプログラムをインストールし、モダリティ１または読影ワークステーション２において異常陰影候補の検出処理を行うようにすればよい。

また、上記第１から第３の実施形態においては、ＣＡＤシステム５において異常陰影候補を検出しているが、モダリティ１または読影ワークステーション２に異常陰影候補の検出処理を行うソフトウェアプログラムをインストールし、モダリティ１または読影ワークステーション２において異常陰影候補の検出処理を行うようにしてもよい。

また、上記第１から第３の実施形態においては、画像サーバ３に異常陰影候補の検出情報Ｄを送信して画像データベース４に画像データとともに保存しているが、画像データおよび検出情報ＤをＣＡＤシステム５から読影ワークステーション２に直接送信して、読影ワークステーション２において画像の表示を行うようにしてもよい。

また、上記第１から第３の実施形態においては、乳房画像Ｍ０から乳房領域Ｒ０を検出し、乳房領域Ｒ０の画像を複数の関心領域に分割しているが、乳房領域Ｒ０を検出する処理を省略し、乳房画像Ｍ０の全体を複数の関心領域に分割するようにしてもよい。この場合、直接放射線部のみを含む関心領域を検出し、その関心領域については、表示を省略するようにしてもよい。

また、上記第１から第３の実施形態においては、異常陰影候補のサイズに応じて、表示される関心領域または小関心領域の画像の拡大率を変更してもよい。この場合、異常陰影候補のサイズが比較的小さい関心領域または小関心領域の画像は拡大率を大きくし、異常陰影候補のサイズが比較的大きい関心領域または小関心領域の画像は拡大率を小さくするか、等倍で表示すればよい。例えば、図９に示す小関心領域Ｒ６−１の画像と小関心領域Ｒ９−１の画像を表示する場合、図１６の読影画面に示すように、小関心領域Ｒ６−１の画像３４の拡大率を小関心領域Ｒ９−１の画像３５の拡大率より大きくすればよい。

なお、同一患者について同一部位を過去から現在に亘って複数撮影している場合、あるいは同一部位について拡大した画像が存在する場合等、同一患者の画像データが画像データベース４に複数登録されている場合がある。このような場合、例えば特許文献３に記載された手法を用いて、画像の表示順序を決定した上で複数の画像を順次表示し、表示された各画像に対して、上記第１から第３の実施形態による表示の処理を行うようにすればよい。

また、本発明は、上記第１から第３の実施形態に限定されるものではなく、その組み合わせや第１から第３の実施形態から容易に類推されるものも含むことは言うまでもない。

１ モダリティ
２ 読影ワークステーション
３ 画像サーバ
４ 画像データベース
２１ 処理装置
２２ ディスプレイ

Claims (13)

1. 被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得する取得手段と、
   前記医用画像を、１つの前記異常陰影候補が１つの関心領域内に含まれるように決定された所定サイズの複数の前記関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示する表示制御手段とを備えたことを特徴とする画像表示装置。
2. 被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得する取得手段と、
   前記異常陰影候補の大きさに応じて、前記医用画像を該異常陰影候補をそれぞれ含む複数の関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示する表示制御手段とを備えたことを特徴とする画像表示装置。
3. 前記表示制御手段は、前記異常陰影候補を含む関心領域を、該異常陰影候補のみを含む小関心領域にさらに分割し、前記悪性度が高い異常陰影候補を含む小関心領域から順に、該小関心領域の画像を先に前記表示手段に表示し、その後前記複数の関心領域の画像を所定順序にて前記表示手段に表示する手段であることを特徴とする請求項１または２記載の画像表示装置。
4. 前記表示制御手段は、前記小関心領域を含む関心領域については、該関心領域における前記小関心領域の部分を他の部分と表示態様を変更して表示する手段であることを特徴とする請求項３記載の画像表示装置。
5. 前記表示制御手段は、前記小関心領域の画像と前記医用画像とを同時に表示するに際し、表示された前記小関心領域の位置を特定する枠を、前記医用画像に付与する手段であることを特徴とする請求項３または４記載の画像表示装置。
6. 前記表示制御手段は、前記小関心領域の画像を、該小関心領域に含まれる前記異常陰影候補のサイズに応じた拡大率により拡大して表示する手段であることを特徴とする請求項３から５のいずれか１項記載の画像表示装置。
7. 前記表示制御手段は、前記関心領域の画像と前記医用画像とを同時に表示するに際し、表示された前記関心領域の位置を特定する枠を、前記医用画像に付与する手段であることを特徴とする請求項１から６のいずれか１項記載の画像表示装置。
8. 前記表示制御手段は、前記関心領域の画像を、該関心領域に含まれる前記異常陰影候補のサイズに応じた拡大率により拡大して表示する手段であることを特徴とする請求項１から７のいずれか１項記載の画像表示装置。
9. 前記表示制御手段は、前記医用画像における前記被写体を含む領域のみを前記複数の関心領域に分割して表示する手段であることを特徴とする請求項１から８のいずれか１項記載の画像表示装置。
10. 取得手段が、被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得し、
    表示制御手段が、前記医用画像を、１つの前記異常陰影候補が１つの関心領域内に含まれるように決定された所定サイズの複数の前記関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示することを特徴とする画像表示方法。
11. 取得手段が、被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得し、
    表示制御手段が、前記異常陰影候補の大きさに応じて、前記医用画像を該異常陰影候補をそれぞれ含む複数の関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示することを特徴とする画像表示方法。
12. 被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得する手順と、
    前記医用画像を、１つの前記異常陰影候補が１つの関心領域内に含まれるように決定された所定サイズの複数の前記関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示する手順とを有することを特徴とする画像表示方法をコンピュータに実行させるためのプログラム。
13. 被写体の医用画像、並びに該医用画像から検出された異常陰影候補の位置および異常陰影の悪性度を含む検出情報を取得する手順と、
    前記異常陰影候補の大きさに応じて、前記医用画像を該異常陰影候補をそれぞれ含む複数の関心領域に分割し、該複数の関心領域の画像を順次表示するに際し、前記検出情報に基づいて、前記異常陰影候補を含む関心領域の画像から先に、前記悪性度が高い順に表示手段に表示する手順とを有することを特徴とする画像表示方法をコンピュータに実行させるためのプログラム。

Images