JP6431292B2 - 医用画像表示装置およびその制御方法、制御装置、プログラム - Google Patents

Description

本発明は、医用画像表示装置およびその制御方法、制御装置、プログラムに関する。

医療現場では、Ｘ線ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、ＰＥＴ（Positron Emission Tomography）装置などの医用画像撮影装置により、医用画像が撮像されている。撮像された医用画像は、様々な画像処理が施され、病院内のデータサーバに一定期間保存される。医師の画像診断業務は、医用画像表示装置（Ｖｉｅｗｅｒとも呼ばれる）を用いて目的の医用画像を検索してモニタ上に表示し、医用画像表示装置の様々な機能を用いることで行われる（特許文献１）。

図１６は一般的な医用画像表示装置の画面構成の一例を示す図である。サムネイル表示領域１６０１は、ある患者における過去および現在に撮像された、少なくとも一つの医用画像データをサムネイル表示する領域である。１６０３〜１６０６は各医用画像データから作成されたサムネイル画像である。メイン表示領域１６０２は、ユーザが読影対象としている医用画像データを表示する領域である。メイン表示領域１６０２に医用画像データを表示することにより、表示した医用画像データに対して医用画像表示装置の様々な機能が使用可能となる。

またメイン表示領域１６０２は、複数の領域に分割することができ、分割した複数の部分表示領域（以下、部分領域１６０８〜１６１１）のそれぞれに異なる画像を同時に表示することができる。図１６におけるメイン表示領域１６０２は部分領域１６０８〜１６１１の４つの領域に分割されている。ユーザは、読影対象または参考としたい医用画像データを、任意の部分領域に表示させて読影を行う。図１６のユーザインターフェイスにおいて、ユーザは、任意のサムネイル画像（たとえばサムネイル画像１６０３）が、メイン表示領域１６０２の任意の部分領域（たとえば部分領域１６０９）上にドラッグアンドドロップする。これにより、サムネイル画像１６０３に対応する医用画像データが部分領域１６０９に表示される。

特開２０１２−０００４７２号公報

しかしながら、上記の技術では、所望のサムネイル画像をメイン表示領域１６０２の所望の部分領域に表示するために、サムネイル画像を部分領域へドラックアンドドロップする必要がある。たとえば、サムネイル画像１６０３上にマウスカーソルを移動して当該サムネイル画像を選択し、メイン表示領域１６０２の部分領域１６０９上にマウスカーソルを移動してリリースするという手順が要求される。そのため、表示させたい医用画像データと表示位置を指定する事に手間がかかるという課題があった。

このような課題に対し、ユーザが任意のサムネイル画像を選択した際に、システムが当該サムネイル画像に対応する医用画像データのメイン表示領域１６０２における表示位置を自動的に決定するという方法も提案されている。たとえば、サムネイル画像が選択されると、医用画像データが表示されていない部分領域を自動的に識別し、識別した部分領域に、選択されたサムネイル画像に対応する医用画像データを表示するという手法が提案されている。また、メイン表示領域の部分領域について使用する順序を予め決めておき、その順序に従って医用画像データを表示するという手法も提案されている。しかし、これらの手法はいずれも、医用画像データをシステムが決めた部分領域に表示する技術なので、必ずしもユーザが意図した部分領域に表示することができないという課題があった。

本発明は上記課題を鑑みてなされたものであり、少ない手数で、任意の医用画像データをユーザが意図するように表示させることができる医用画像表示装置及びその制御方法を提供することを目的とする。

上記の目的を達成するための本発明の一態様による医用画像表示装置は以下の構成を備える。すなわち、
医用画像データに対応するサムネイル画像を表示し、前記サムネイル画像の選択に応じて前記医用画像データを表示領域に表示する医用画像表示装置であって、
前記サムネイル画像がユーザによって選択された際の前記サムネイル画像内の指示位置に基づいて、前記表示領域を分割して得られた複数の部分領域から前記医用画像データを表示する部分領域を決定する決定手段と、
前記決定手段により決定された前記部分領域に前記医用画像データを表示する表示制御手段と、を備える。

本発明によれば、少ない手数で、任意の医用画像データをユーザが意図するように表示することができる。

第１実施形態に係る医用画像表示装置の構成例を示すブロック図。 第１実施形態の全体処理を説明するフローチャート。 第１実施形態に係る表示画面の構成例を説明する図。 サムネイル画像への指示位置と医用画像データの表示位置を説明する図。 サムネイル画像における分割領域の強調表示方法を説明する図。 メイン表示領域における部分領域の強調表示方法を説明する図。 サムネイル画像の分割領域に対する強調表示方法を説明する図。 非対応領域を含むサムネイル画像の分割例を示した図。 非対応領域を選択した際のメイン表示領域の表示例を示した図。 複数の非対応領域を含むサムネイル画像の分割例を示した図。 第３実施形態に係る医用画像表示装置の構成例を示すブロック図。 第３実施形態の全体処理を説明するフローチャート。 第３実施形態による方向情報を説明する図。 画像情報と分割条件の対応例を示す図。 画像情報とメイン表示領域への表示条件の対応例を示す図。 ドラッグアンドドロップによる医用画像データの表示操作を説明する図。

以下に、添付の図面を参照しながら、本発明の好適な実施形態のいくつかについて説明する。ただし、本発明の範囲は図示例に限定されるものではない。

[第１実施形態]
図１は、第１実施形態に係わる医用画像表示装置を含む医用画像表示システムの全体構成を示す図である。医用画像表示システムは、医用画像表示装置１０とデータベース２２を含んでおり、これらの装置は、通信手段の一例としてのＬＡＮ２１を介して互いに通信可能に接続されている。データベース２２は、医用画像データなどの検査情報を管理、格納する。医用画像表示装置１０は、データベース２２で管理された医用画像データを、ＬＡＮ２１を介して取得する。医用画像表示装置１０は、医用画像データに対応するサムネイル画像を表示し、サムネイル画像の選択に応じてその医用画像データを表示領域に表示する。

医用画像表示装置１０は、その機能的な構成として、通信インターフェイス（通信ＩＦ３１）、ＲＯＭ３２、ＲＡＭ３３、記憶部３４、操作部３５、表示部３６、制御部３７を具備する。通信ＩＦ３１は、たとえば、ＬＡＮカード等で実現され、ＬＡＮ２１を介した外部装置（たとえば、データベース２２）と医用画像表示装置１０との間の通信を司る。ＲＯＭ（Read Only Memory）３２は、不揮発性のメモリ等で実現され、各種プログラム等を記憶する。ＲＡＭ（Random Access Memory）３３は、揮発性のメモリ等で実現され、制御部３７等が用いる各種情報を一時的に記憶する。記憶部３４は、たとえば、ＨＤＤ（Hard Disk Drive）等で実現され、各種情報を記憶する。操作部３５は、たとえば、キーボードやマウス等で実現され、ユーザからの指示を装置内に入力する。表示部３６は、たとえば、ディスプレイ等で実現され、各種情報を表示する。

制御部３７は、たとえば、ＣＰＵ（Central Processing Unit）等で実現され、医用画像表示装置１０における処理を統括制御する。制御部３７は、その機能部の構成として、医用画像取得部４１、表示条件取得部４２、サムネイル画像作成部４３、領域情報取得部４４、表示処理部４５を具備する。なお、制御部３７が具備するこれら各機能部の少なくとも一部は独立した装置として実現されてもよいし、夫々が機能を実現するソフトウェアとして実現されてもよい。本実施形態では各機能部は夫々ソフトウェアにより実現されているものとする。

医用画像取得部４１は、通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から医用画像データを取得し、サムネイル画像作成部４３及び表示処理部４５へ出力する。表示条件取得部４２は、表示部３６に表示されているメイン表示領域（たとえば、図３のメイン表示領域１０２）の分割条件を取得しサムネイル画像作成部４３へ出力する。分割条件は、メイン表示領域を複数の部分領域へ分割する態様を示している。サムネイル画像作成部４３は、医用画像取得部４１で取得された医用画像データと表示条件取得部４２で取得されたメイン表示領域の分割条件を用いてサムネイル画像を作成する。領域情報取得部４４は、表示部３６に表示されているサムネイル画像内でユーザが操作部３５を介して選択した領域を示す選択領域情報を取得し表示処理部４５へ出力する。表示処理部４５は、サムネイル画像作成部４３で作成されたサムネイル画像を表示部３６に表示する。また、表示処理部４５は、領域情報取得部４４で取得した選択領域情報に応じて、表示部３６のメイン表示領域に医用画像取得部４１から取得した医用画像データを表示する。

次に図２〜図４を用いて、本実施形態における制御部３７による全体の処理手順を説明する。図２は、制御部３７が行う処理のフローチャートである。図３（Ａ）及び図４（Ａ）は後述の処理によって表示部３６に表示される画面の例である。図３（Ｂ）及び図４（Ｂ）は、図３（Ａ）及び図４（Ａ）で示されるサムネイル画像１０３をそれぞれより詳細に示した図である。図３（Ａ）及び図４（Ａ）に示されるように、表示処理部４５が表示部３６に表示する画面には、サムネイル表示領域１０１とメイン表示領域１０２が含まれる。サムネイル表示領域１０１には、医用画像データのサムネイル画像が表示される。図３（Ａ）の例では、サムネイル画像１０３〜１０６が表示されている。また、メイン表示領域１０２には、医用画像データが表示されるが、その表示領域を分割して得られた複数の部分領域（図示の例では、部分領域１０８〜１１１）のそれぞれに医用画像データを表示することもできる。

本実施形態では、領域情報取得部４４は、サムネイル画像をユーザが選択する際の当該サムネイル画像内の指示位置を取得し、表示処理部４５は取得された指示位置に基づいてメイン表示領域１０２への医用画像データの表示方法を決定する。そして、表示処理部４５は、決定された表示方法で医用画像データをメイン表示領域１０２に表示するように表示制御を行う。これにより、たとえば、図４に示されるように、ユーザの指示位置（矢印１１６の指示位置）がサムネイル画像１０３の右下であった場合に、メイン表示領域１０２の右下の部分領域１１１に、サムネイル画像１０３に対応する医用画像データが表示される。以下、この処理についてより詳細に説明する。

図２のステップＳ２００において、医用画像取得部４１は通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から医用画像データを読み出す。ステップＳ２０１において、表示条件取得部４２は表示部３６に表示されているメイン表示領域の部分領域への分割の態様を示す分割条件を取得する。たとえば、メイン表示領域の分割数をｌ、行数をｎ、列数をｍとすると、図３（Ａ）の表示状態の場合、分割条件として（ｌ、ｎ、ｍ）＝（４、２、２）が取得される。なお、分割条件をどのように表すかはこれに限られるものではない。

ステップＳ２０２において、サムネイル画像作成部４３は以下の処理により、ステップＳ２００で読み出された医用画像データに対応するサムネイル画像を作成する。まず、サムネイル画像作成部４３は、ステップＳ２００で読み出した医用画像データに対応する画像データ（以下、対応画像データ）を作成する。たとえば、読み出した医用画像データが２次元医用画像データ（一枚のスライス画像）の場合、対応画像データはスライス画像そのもののサイズを変更（たとえば縮小）した画像、またはその一部分を切り出した画像である。一方、読み出した医用画像データが３次元医用画像データ（複数枚のスライス画像）の場合、その３次元医用画像データを代表するスライス画像のサイズを変更（たとえば縮小）した画像、または予め決めた位置の（たとえば先頭の）スライス画像のサイズを変更した画像である。あるいは、そのようなスライス画像の一部分を切り出した画像でもよい。

次に、サムネイル画像作成部４３は、ステップＳ２０１で取得した分割条件に基づいて対応画像データを複数の分割領域へ分割する。たとえば、ステップＳ２０１で（ｌ、ｎ、ｍ）＝（４、２、２）を取得した場合、対応画像データも同様に（ｌ、ｎ、ｍ）＝（４、２、２）の条件で分割する。これにより、たとえば、図３（Ａ）のようなメイン表示領域１０２の分割条件に応じて図３（Ｂ）に示されるような分割領域１１２〜１１５が得られる。続いて、サムネイル画像作成部４３は、分割した領域が視認できるような境界線（図３（Ｂ）の境界線Ｌ１０）を生成し、生成した境界線を対応画像データにオーバーレイ表示して、境界線が描画されたサムネイル画像を作成する。サムネイル画像作成部４３は、上述の処理をステップＳ２００で読み出した医用画像データ全てに対して行う。表示処理部４５は、サムネイル画像作成部４３で作成したサムネイル画像（図３（Ａ）ではサムネイル画像１０３〜１０６）をサムネイル表示領域１０１に並べて表示する。なお、図３、図４に示されるようにメイン表示領域１０２の分割条件が２×２程度の場合であれば、部分領域の並びと分割領域の並びが一致していれば境界線を表示しなくても操作性を損なうことは無い。その場合、対応画像データがそのままサムネイル画像となる。いずれにしても、制御部３７は部分領域と分割領域の対応付けを管理する。

ステップＳ２０３において、制御部３７は、メイン表示領域１０２の分割条件を取得し、分割条件の変更の有無を判定する。なお、メイン表示領域１０２の分割条件は、操作部３５を介したユーザの指示により変更可能である。分割条件の変更方法としては、一般的な医用画像Ｖｉｅｗｅｒが有する既知の技術により実現されてもよい。ステップＳ２０３において、分割条件の変更がないと判定された場合はステップＳ２０４に進み、分割条件の変更があったと判定された場合はステップＳ２０１に戻る。

ステップＳ２０４において、領域情報取得部４４は、ユーザが操作部３５を用いて選択したサムネイル画像の分割領域を示す情報を取得する。たとえば、ユーザがマウスを用いてサムネイル画像１０３の分割領域１１５をクリックすると、領域情報取得部４４はこの分割領域１１５を示す情報を取得する。本操作時の表示部３６における画面例を図４（Ａ）及び図４（Ｂ）に示す。矢印１１６は、たとえば操作部３５によって示される入力の指示位置（たとえば、マウスポインタ等）を表す。図４（Ｂ）では、分割領域１１５が指示位置を含む分割領域となる。

ステップＳ２０５において、表示処理部４５は、ステップＳ２０４で選択されたサムネイル画像に対応した医用画像データを、指示された分割領域に対応したメイン表示領域１０２の部分領域に表示する。前述の例ではサムネイル画像１０３の分割領域１１５を選択したので、図４（Ａ）に示すようにメイン表示領域１０２の部分領域１１１にサムネイル画像１０３に対応した医用画像データが表示される。ここで、部分領域１１１に既に別の医用画像データが表示されていた場合は、既に表示されていた医用画像データを部分領域１１１から消去した後、サムネイル画像１０３に対応した医用画像データを表示する。

ステップＳ２０６において、制御部３７は、操作部３５を介してユーザから読影終了の指示があったかどうかを判定する。読影終了の指示は、たとえば不図示の読影終了ボタンをユーザがクリックすることなどにより行われる。読影終了の指示があった場合は、図２の処理を終了する。読影終了の指示がなかった場合は、ステップＳ２０３に戻る。

以上のように、第１実施形態に係る医用画像表示装置によれば、メイン表示領域を分割して得られた複数の部分領域とサムネイル画像を分割して得られた複数の分割領域が対応づけられる。たとえば、図３によって示される複数の部分領域１０８〜１１１と複数の分割領域１１２〜１１５のように、両者の相対的な位置関係が維持されるようにサムネイル画像が分割される。そして、ユーザによるサムネイル画像の選択時に、その指示位置が属する分割領域に対応するメイン表示領域の部分領域に、選択されたサムネイル画像に対応する医用画像データを表示するように表示方法が決定される。このような構成により、以下の効果を得られる。つまり、任意のサムネイル画像の任意の分割領域を選択することで、サムネイル画像に対応した医用画像データを、分割領域に対応したメイン表示領域の部分領域に表示できる。従って、読影する際に従来のドラックアンドドロップのような手間のかかる操作をする必要がなくなり、ユーザの手間が少ない医用画像表示装置及び医用画像表示方法を提供することができる。

（変形例１−１）
上記の第１実施形態では、ステップＳ２０４において、ユーザは操作部３５を介してサムネイル画像の分割領域を選択していた。この際に、選択される分割領域の視認性を高めるために、操作部３５によって指示される現在の指示位置を含む分割領域を強調表示してもよい。なお、境界線Ｌ１０は表示されていても表示されていなくてもよい。図５（Ａ）に、サムネイル画像の分割領域を強調表示した時の表示部３６における画面例を示す。図５（Ｂ）は、図５（Ａ）におけるサムネイル画像１０３をより詳細に示した図である。図５の例では、矢印１１６が示す現在の指示位置がサムネイル画像１０３のサムネイル画像の分割領域１１３上にあるので、分割領域１１３にマーカをオーバーレイすることで強調表示している。

ここで、マーカは、ユーザが他の分割領域と区別可能となるものであればどのような形態（色、形、サイズ等）であってもよい。ユーザが矢印１１６を別の分割領域上に移動させた場合は、移動後の分割領域が強調表示される。たとえば、矢印１１６を分割領域１１５上に移動させた場合は、分割領域１１３を強調表示していたマーカは削除し、分割領域１１５にマーカをオーバーレイする。なお、ここではマーカのオーバーレイによる強調表示を例にあげたが、強調表示の方法は、強調表示している領域をユーザが識別できれば、どのような方法でもよい。

以上のような、変形例１−１のような構成によれば、サムネイル画像の選択が指示される前においてサムネイル画像内の指示位置が属する分割領域が、他の分割領域に対して識別可能になるように表示形態が変更される。そのため、ユーザはサムネイル画像が選択される前に、矢印１１６による現在の指示位置をより明瞭に把握することができ、どの部分領域に対応する医用画像が表示されるかをより容易に把握できる。

（変形例１−２）
本実施形態における変形例１−１では、操作部３５によって示される入力の現在位置によって指示されたサムネイル画像の分割領域を強調表示していた。しかし、分割領域の強調表示に代えて、あるいはそれに加えて、メイン表示領域における対応する部分領域を強調表示してもよい。図６（Ａ）にメイン表示領域の部分領域を強調表示している表示部３６における画面例を示す。図６（Ｂ）は、図６（Ａ）におけるサムネイル画像１０３をより詳細に示した図である。矢印１１６が示す現在の指示位置がサムネイル画像１０３の分割領域１１３上にあり、分割領域１１３に対応するメイン表示領域の部分領域１０９にマーカがオーバーレイされて強調表示されている。ユーザが矢印１１６をサムネイル画像１０３の別の分割領域上に移動させた場合は、移動後の分割領域に対応する、メイン表示領域１０２の部分領域が強調表示される。たとえば、矢印１１６を分割領域１１５に移動させた場合、制御部３７は、部分領域１０９を強調表示していたマーカを削除し、部分領域１１１にマーカをオーバーレイする。なお、ここではマーカのオーバーレイによる強調表示を例にあげたが、強調表示の方法は、強調表示している領域をユーザが識別できれば、どのような方法でもよい。

以上のような、変形例１−２によれば、サムネイル画像の選択が指示される前のサムネイル画像内の指示位置が属する分割領域に対応する、メイン表示領域の部分領域を、他の部分領域に対して識別可能になるように表示形態が変更される。たとえば、サムネイル画像１０３の分割領域１１３に矢印１１６を移動すると、分割領域１１３に対応する、メイン表示領域１０２の部分領域１０９の表示形態が図示のように他の部分領域と区別可能に変更される。そのため、ユーザは矢印１１６による現在の指示位置においてサムネイル画像の選択を指示した場合にどの部分領域に医用画像データが表示されるかを容易に把握できる。

（変形例１−３）
上述した変形例１−１および変形例１−２では、メイン表示領域における医用画像データの表示状態に係らず、サムネイル画像１０３の分割領域やメイン表示領域１０２の部分領域を強調表示していた。変形例１−３ではメイン表示領域１０２における医用画像データの表示状態に応じて、強調表示方法を変更する。図５（Ａ）のメイン表示領域１０２を例として説明する。矢印１１６がサムネイル画像１０３の分割領域１１２または１１５（メイン表示領域１０２において医用画像データがすでに表示されている部分領域に対応するサムネイル画像の分割領域）を示した場合は、その分割領域を赤色で強調表示する。また、矢印１１６がサムネイル画像１０３の分割領域１１３または１１４（メイン表示領域１０２の医用画像データが表示されていない部分領域１０９，１１０に対応するサムネイル画像の分割領域）を示した場合は青色で強調表示する。

このように、変形例１−３によれば、メイン表示領域１０２の各部分領域に既に医用画像データが表示されているか否かに応じて、指示位置が属する分割領域の表示の変更の仕方（たとえば、マーカの色や枠の太さといった強調方法）が変更される。そのため、たとえばサムネイル画像の選択に際して、医用画像データが表示されていない部分領域をより容易に指定することができる。

（変形例１−４）
変形例１−４では、メイン表示領域における医用画像データの表示状態に応じて、その表示されている医用画像データに対応するサムネイル画像の、表示されている部分領域に対応する分割領域を強調表示する。図７（Ａ）に表示部３６における画面例を示す。図７（Ｂ）は図７（Ａ）のサムネイル画像１０３をより詳細に示した図である。図７（Ｃ）は図７（Ａ）のサムネイル画像１０５をより詳細に示した図である。図７（Ａ）では、メイン表示領域１０２の部分領域１０８と１１１に、それぞれサムネイル画像１０３と１０５に対応する医用画像データが表示されている。サムネイル画像１０３に対応する医用画像データは部分領域１１１に表示されているため、サムネイル画像１０３における分割領域１１５にマーカをオーバーレイすることにより強調表示している。この強調表示は、メイン表示領域１０２における部分領域１１１の相対的な位置を示すものである。また、サムネイル画像１０５に対応する医用画像データはメイン表示領域１０２の部分領域１０８に表示されているため、サムネイル画像１０５における分割領域１１７にマーカをオーバーレイすることにより強調表示している。なおユーザの入力により、メイン表示領域１０２における表示状態が変化した際には、各サムネイル画像において強調される分割領域も連動して変化するようにすることが好ましい。

以上のように、変形例１−４によれば、たとえば、メイン表示領域１０２の部分領域１０８に表示されている医用画像データに対応するサムネイル画像１０５の、部分領域１０８に対応する分割領域１１７の表示形態が、他の分割領域から識別可能に変更される。したがって、ユーザは、既に対応する医用画像データが表示中となっているサムネイル画像を、その表示先の部分領域とともに容易に把握することができる。

（変形例１−５）
本実施形態では、ステップＳ２０５において、ステップＳ２０４で選択されたサムネイル画像の分割領域に対応するメイン表示領域の部分領域に既に別の医用画像データ（以下、既画像データ）が表示されていた場合は、既画像データを部分領域から消去していた。そして、後から選択されたサムネイル画像が示す医用画像データ（以下、選択画像データ）を優先して表示（以下、上書き表示処理）していた。しかし、既画像データと選択画像データを用いて、画像処理を行い、新たな画像データ（以下、新画像データ）を作成し、新画像データを表示（以下、新規画像作成処理）してもよい。たとえば、新規画像作成処理として、既画像データと選択画像データに対して既知のサブトラクション処理を行い、既画像データと選択画像データの差分画像データを新画像データとして作成し表示する。または、新規画像作成処理として既画像データと選択画像データに対して既知の位置合わせ処理および重ね合わせ処理を行って２つの医用画像データの重ね合わせ画像データを新画像データとして作成し表示する。

この場合、上書き表示処理を実行するか新規画像作成処理を実行するかをユーザが容易に切り替えられるようにしてもよい。たとえば、ステップＳ２０４においてサムネイル画像の分割領域を選択する際の選択方法（ユーザ操作の形態）によって切り替えてもよい。たとえば、分割領域の選択を指示する操作部３５がマウスであった場合に、右クリックが操作された際には上書き表示処理が行われ、左クリックが操作された際には新規画像作成処理が行われる。なお、上述した変形例１−１乃至変形例１−５は、第２実施形態以降の実施形態にも適用可能である。

[第２実施形態]
第１実施形態では、メイン表示領域の分割の状態と、サムネイル画像の分割の状態を相似の関係として、メイン表示領域の各部分領域とサムネイル画像の各分割領域が対応するようにした。第２実施形態では、サムネイル画像の分割領域に、メイン表示領域のいずれかの部分領域に対応する分割領域（以下、対応領域）と、メイン表示領域の何れの部分領域にも対応しない分割領域（以下、非対応領域）とを含む。そして、サムネイル画像の選択において対応領域が指示された場合は、第１実施形態と同様に分割領域に対応する部分領域に医用画像データを表示する第１の表示方法を実行する。他方、サムネイル画像の選択において非対応領域が指示された場合には、医用画像データの表示を第１の表示方法とは異なる第２の表示方法（図９により詳述する）で行う。

図８に第２実施形態によるサムネイル画像の分割条件の例を示す。なお、ここでは、図３（Ａ）で示したように、メイン表示領域が４分割されている状態を例に挙げて説明する。図８（Ａ）〜（Ｄ）は、サムネイル画像８０１が対応領域（分割領域１２１〜１２４）と非対応領域（分割領域１２５）に分割されている例である。なお、第２実施形態に係る医用画像表示装置１０の構成は第１実施形態に（図１）と同様である。また、第１実施形態と同様に、制御部３７の各機能部はソフトウェアにより実現されているものとする。以下、第２実施形態の全体の処理を、図２のフローチャートを用いて説明する。

ステップＳ２００及びステップＳ２０１の処理は第１実施形態における処理と同様である。ステップＳ２０２において、サムネイル画像作成部４３はサムネイル画像を作成する。まず、サムネイル画像作成部４３は、ステップＳ２００で読み出した医用画像データの対応画像データを生成する。次に生成した対応画像データを、ステップＳ２０１で取得した分割条件を利用して、対応領域及び非対応領域の両方の領域が生成されるように領域分割する。たとえば、図８（Ａ）乃至（Ｄ）で例示するようにサムネイル画像の領域分割を行う。

図８（Ａ）は、サムネイル画像８０１を対応領域（分割領域１２１〜１２４）に領域分割する際に生成される境界線（図３（Ｂ）の境界線Ｌ１０）の交点を中心とした領域に非対応領域である分割領域１２５を生成している例である。図８（Ｂ）は、サムネイル画像８０１の端に孤立した領域として非対応領域である分割領域１２５を生成した例である。図８（Ｃ）は、サムネイル画像８０１を対応領域（分割領域１２１〜１２４）に領域分割する際に生成される境界線とサムネイル画像８０１の枠線との交点を中心とした半円で示される領域に非対応領域である分割領域１２５を生成している例である。図８（Ｄ）は、サムネイル画像８０１の枠線の角を中心とした４分円で示される領域に非対応領域である分割領域１２５を生成している例である。

次に、サムネイル画像作成部４３は、分割した領域が視認できるような境界線を生成し、対応画像データにオーバーレイすることでサムネイル画像８０１を生成する。このような処理をステップＳ２００で読み出した医用画像データ全てに行い、生成されたサムネイル画像をサムネイル表示領域に並べて表示する。なお、図８で挙げた例はあくまで一例であり、全ての領域が分離されておりさらに対応領域と非対応領域が容易に認識できるような分割であれば、上述の例に限定されない。ステップＳ２０３及びステップＳ２０４の処理は、第１実施形態における処理と同様である。また、境界線は描画されなくてもよい。

ステップＳ２０５において、表示処理部４５は、ステップＳ２０４で選択されたサムネイル画像に対応した医用画像データを、選択された分割領域に応じてメイン表示領域の対応する部分領域に表示する。ここで、選択された分割領域が対応領域の場合は、第１実施形態における処理と同様の処理（第１の表示方法）を行う。他方、選択されたサムネイル画像の分割領域が非対応領域の場合は、第１の表示方法と異なる第２の表示方法、たとえば、メイン表示領域の分割条件及び表示状態に依らない表示を行う。

図９（Ａ）乃至（Ｄ）は、ステップＳ２０４においてサムネイル画像１０３の非対応領域が選択された場合の、第２の表示方法によって実現される、表示部３６における表示画面例である。図９（Ａ）は、サムネイル画像１０３が対応する医用画像データをメイン表示領域１０２の全体に１画面表示（以下、全画面表示という）した例である。図９（Ｂ）は、メイン表示領域１０２を部分領域１２６〜１２８に領域分割し、サムネイル画像１０３に対応する医用画像データをＭＰＲ法（multi-planar reconstruction）で各断層方向に再構成した断層画像を表示（以下、ＭＰＲ表示という）した例である。より具体的には、部分領域１２６に体の上下（頭尾）に平行な体軸方向に再構成した断層画像（axial画像）を表示する。さらに、部分領域１２７に体の前後（腹背）に平行な冠状方向に再構成した断層画像（coronal画像）を表示する。さらに、部分領域１２８に体の左右に平行な矢状方向に再構成した断層画像（sagittal画像）を表示する。

図９（Ｃ）はメイン表示領域１０２を部分領域１２９〜１３１に分割し、各部分領域に同一患者の異なる日時に撮像された医用画像データを表示（以下、経時データ表示という）した例である。たとえば、部分領域１２９にサムネイル画像１０３に対応する医用画像データを表示する。さらに、部分領域１３０にサムネイル画像１０３が撮像される３か月前に撮像された同一患者の医用画像データを表示する。さらに、部分領域１３１にサムネイル画像１０３が撮像される１年前に撮像された同一患者の医用画像データを表示する。図９（Ｄ）はメイン表示領域１０２を部分領域１３２〜１３４に分割し、各部分領域に異なる再構成条件で再構成された医用画像データを表示（以下、別条件データ表示）した例である。より具体的には、部分領域１３２にはサムネイル画像１０３に対応する医用画像データの内、肺野条件で再構成された医用画像データを表示する。部分領域１３３にはサムネイル画像１０３に対応する医用画像データの内、縦隔条件で再構成された医用画像データを表示する。部分領域１３４にはサムネイル画像１０３に対応する医用画像データの内、骨条件で再構成された医用画像データを表示する。これら非対応領域を選択した際の、メイン表示領域での表示条件は予め設定しておく。

なお、上述の例では非対応領域を選択した際に、メイン表示領域の分割状態が変更されることになるが、サムネイル画像の分割条件は変更しなくてもよい。たとえば、サムネイル画像１０３が図８（Ａ）に示すように分割されており、非対応領域である分割領域１２５が選択されると、図９（Ａ）のようにメイン表示領域の分割状態が変化する。その際には、サムネイル画像１０３の分割状態は図８（Ａ）の状態を維持している。その後、対応領域である図８（Ａ）の分割領域１２４が選択されると、メイン表示領域１０２は図４（Ａ）に示される分割状態に戻る。そして、指示された分割領域１２４に対応する部分領域１１１に、選択されたサムネイル画像に対応する医用画像データが表示される。なお、図９で挙げた例はあくまで一例であり、本発明はこれらの例に限定されない。ステップＳ２０６の処理は、第１実施形態における処理と同様である。

以上のように，第２実施形態に係る医用画像表示装置によれば、第１実施形態で得られる効果に加えて、さらに以下の効果を得られる。つまり、任意のサムネイル画像の非対応領域を選択することで、メイン表示領域の分割条件に依らない表示をすることができる。従って、少ない手間でユーザの意図した状態で画像を表示することができる医用画像表示装置及び医用画像表示方法を提供することができる。

（変形例２−１）
第２実施形態では、ステップＳ２０２において非対応領域が１領域である例を用いて説明していた。しかし、非対応領域は複数あってもよい。図１０に非対応領域が複数ある場合のサムネイル画像の領域分割の例を示す。図１０（Ａ）及び（Ｂ）は、ともにサムネイル画像８０１を分割領域１２１〜１２４からなる対応領域と分割領域１３５〜１３７からなる非対応領域に分割した例である。また、この場合、どの非対応領域が選択されても同じ表示方法が採用されるようにしてもよいが、ステップＳ２０４においてユーザが選択した非対応領域に応じて、ステップＳ２０５で用いられる表示方法が変更されるようにしてもよい。すなわち、サムネイル画像内に複数の非対応領域が設定されており、それぞれの非対応領域には異なる表示方法が割り当てられているようにしてもよい。たとえば、図１０（Ａ）の非対応領域である分割領域１３５が選択された場合は対応する医用画像データを全画面表示し、非対応領域である分割領域１３６が選択された場合は対応する医用画像データをＭＰＲ表示する。図１０で挙げたサムネイル画像の領域分割の例や、異なる非対応領域を選択した際のメイン表示領域における表示方法の例はあくまで一例であり、本発明はこの例に限定されない。

（変形例２−２）
第２実施形態では、ステップＳ２０２において、ステップＳ２００で読み出した医用画像データ全てに対して、同じ境界線を持つサムネイル画像を生成していた。つまり、全てのサムネイル画像が同じ分割条件で分割されていた。しかし、サムネイル画像に対応する医用画像データに付属している画像情報に応じてサムネイル画像の分割条件（非対応領域の配置状態）を変更してもよい。

たとえば、図１４に示したように、ＤＩＣＯＭヘッダ等から得られる画像情報と分割条件の対応を予め設定しておき、医用画像データに含まれる画像情報に対応する分割条件を用いてサムネイル画像を作成する。より具体的には、医用画像データの撮像モダリティがＣＴであり撮像部位が胸部であった場合は、図８（Ａ）のような境界線を持つサムネイル画像が生成される。これは、図１４に示されるようなテーブルを参照することにより、非対応領域の場所が中央で、形が円と決まるためである。また、撮像モダリティがＭＲＩであり撮像部位が頭部であった場合は、図１４のテーブルの参照により非対応領域の場所が右上、形が円と決まるので、図８（Ｂ）のような境界線を持つサムネイル画像が生成される。

また、医用画像データに対して既知の画像処理を行った場合に得られる画像特徴量に基づいて分割条件を変更してもよい。たとえば、境界線をオーバーレイする前のサムネイル画像（対応画像データ）に対して、平滑化フィルタを用いてノイズ除去を行う。そして、画像の画素値に対する所定の閾値（たとえば、値１００）を用いて二値化処理を行い、体内領域と体外領域を分離し、その分離結果に基づいて非対応領域が設定されるようにしてもよい。たとえば、体外領域の中で所定サイズ以上の大きさを持つ領域内に非対応領域が設定されるような境界線を持つサムネイル画像を生成する。なお、ここで説明した画像情報やそれを利用した分割条件はあくまで一例であり、本発明はこれらの例に限定されない。

（変形例２−３）
ステップＳ２０５において、ステップＳ２０４で非対応領域が選択された場合、選択されたサムネイル画像に対応した医用画像データに付属する画像情報によって、メイン表示領域における表示条件を変更してもよい。たとえば、図１５のテーブルに示したように、ＤＩＣＯＭヘッダ等から得られる画像情報とメイン表示領域における表示条件の対応を予め設定しておき、医用画像データに含まれる画像情報に対応する表示条件でメイン表示領域１０２に表示する。より具体的には、医用画像データの撮像モダリティがＣＴであり撮像部位が胸部であった場合は、図１５のテーブルの参照によりメイン表示領域の表示条件がＭＰＲ表示と決まるので、非対応領域の指定に応じて図９（Ｂ）のように医用画像データが表示される。また、撮像モダリティがＭＲＩであり撮像部位が頭部であった場合は、図１５の参照によりメイン表示領域の表示条件が経時データ表示と決まるので、非対応領域の指定に応じて図９（Ｃ）のように医用画像データが表示される。

また、医用画像データに対して既知の画像処理を行った場合に得られる画像特徴量を画像情報としてメイン表示領域における表示条件を変更してもよい。たとえば、医用画像データに対して既知の結節の検出処理を行い、結節が検出された場合には経時データ表示を行い、結節が検出されなかった場合にはＭＰＲ表示を行うようにしてもよい。ここで説明した画像情報や表示条件はあくまで一例であり、本発明はこれらの例に限定されない。

[第３実施形態]
第３実施形態に係る医用画像表示装置は、サムネイル画像を分割せずに、サムネイル画像に対して方向情報を付与することで、任意のサムネイル画像を任意のメイン表示領域に表示する例について説明する。

図１１に、第３実施形態に係る医用画像表示装置１０の構成例を示す。第１実施形態に係る構成例（図１）と比べると、領域情報取得部４４が削除され、方向情報取得部４６が新たに追加されている。方向情報取得部４６は、表示部３６に表示されているサムネイル画像に対して、ユーザが操作部３５を介して入力した方向情報を受け付け、表示処理部４５へ出力する。なお、第１実施形態と同様に、制御部３７の各機能部はソフトウェアにより実現されているものとする。

次に図１２及び図１３を用いて、本実施形態における制御部３７による全体の処理手順を説明する。図１２は、制御部３７が行う処理のフローチャートである。図１３は、図３に示したサムネイル画像１０３に対して、ユーザが方向情報を入力する方法を説明するための図である。矢印１１６は、操作部３５によって制御される位置情報（たとえば、マウスポインタ）を表す。Ｒ１０は、矢印１１６が示す位置を中心Ｏとした円である。矢印１１６の真右方向を０°とした時、中心Ｏから０°、９０°、１８０°、２７０°の方向に伸ばした直線と円Ｒ１０とが交わる点を、それぞれ点Ａ、Ｂ，Ｃ，Ｄとしている。

ステップＳ１２００の処理は、第１実施形態におけるステップＳ２００の処理と同様である。ステップＳ１２０１の処理は、第１実施形態におけるステップＳ２０２の処理と同様であるが、サムネイル画像にオーバーレイする境界線の生成は不要である。

ステップＳ１２０２において、ユーザは操作部３５を介して、任意のサムネイル画像に対して方向情報を入力する。たとえば、マウスを用いて図３で示すサムネイル画像１０３を選択し、任意の方向にドラックすることで方向情報を入力する。あるいは、表示部３６がタッチパネル式のモニタである場合は、一般にフリックと呼ばれる操作方法を用いて、サムネイル画像１０３に対して方向情報を入力してもよい。たとえば、図１３において、サムネイル画像１０３をＡの方向に指で弾く（フリックする）ことにより方向情報０°が入力される。またたとえば、線分ＯＣと線分ＯＤのちょうど中間に示した線分Ｌ２０に沿った方向に指で弾く（フリックする）することにより方向情報２２５°が入力される。

ステップＳ１２０３の処理は、第１実施形態におけるステップＳ２０１の処理と同様である。

ステップＳ１２０４において、ステップＳ１２０２で方向情報を入力したサムネイル画像に対応した医用画像データを、メイン表示領域の部分領域のうちの方向情報に応じて決定される部分領域に表示する。たとえば、図１のサムネイル画像１０３に対してステップＳ１２０２で入力された方向情報が、図１３で示される０°〜９０°の範囲だった場合は、図１の部分領域１１０に対応する医用画像データが表示される。同様に、入力された方向情報が９０°〜１８０°の範囲であれば部分領域１０８に、入力された方向情報が１８０°〜２７０°の範囲であれば部分領域１０９に、入力された方向情報が２７０°〜０°の範囲であれば部分領域１１１に、医用画像データが表示される。また、サムネイル画像に対して方向情報を入力した操作とは別の操作を行うことにより、当該サムネイル画像に対応する医用画像データを第２実施形態に示した非対応領域を選択した際の表示条件（たとえば、図９）で表示してもよい。ここで、別の操作とは、タッチパネル上におけるピンチイン、ピンチアウト、ダブルタップ等の操作である。なお、これらの操作は一例であり、他の操作であってもよい。

ステップＳ１２０５の処理は、第１実施形態におけるステップＳ２０６の処理と同様の処理であり、読影終了の指示があったかどうかを判定する。読影終了の指示があった場合は図１２の処理を終了し、読影終了の指示がなかった場合は、処理はステップＳ１２０２に戻る。

以上のように、第３実施形態に係る医用画像表示装置によれば、以下の効果を得られる。つまり、任意のサムネイル画像に対して方向情報を入力することで、サムネイル画像に対応した医用画像データを、方向情報に応じて決定されるメイン表示領域の分割領域に表示できる。従って、サムネイル画像を分割することなく、少ない手間で、ユーザの意図した状態で医用画像データを表示することができる医用画像表示装置及び医用画像表示方法を提供することができる。

なお、上述した第１〜第３実施形態や、各実施形態で示した変形例は、適宜組み合わせて用いることが可能である。

また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

４１：医用画像取得部、４２：表示条件取得部、４３：サムネイル画像作成部、４４：領域情報取得部、４５：表示処理部、１０１：サムネイル表示領域、１０２：メイン表示領域、１０３〜１０６：サムネイル画像、１０８〜１１１：部分領域、１１２〜１１５：分割領域

Claims (19)

1. 医用画像データに対応するサムネイル画像を表示し、前記サムネイル画像の選択に応じて前記医用画像データを表示領域に表示する医用画像表示装置であって、
   前記サムネイル画像がユーザによって選択された際の前記サムネイル画像内の指示位置に基づいて、前記表示領域を分割して得られた複数の部分領域から前記医用画像データを表示する部分領域を決定する決定手段と、
   前記決定手段により決定された前記部分領域に前記医用画像データを表示する表示制御手段と、を備えることを特徴とする医用画像表示装置。
2. 医用画像データに対応するサムネイル画像を表示し、前記サムネイル画像の選択に応じて前記医用画像データを表示領域に表示する医用画像表示装置であって、
   前記サムネイル画像がユーザによって選択された際の前記サムネイル画像内の指示位置に基づいて、前記表示領域への前記医用画像データの表示方法を決定する決定手段と、
   前記決定手段により決定された表示方法で、前記医用画像データを前記表示領域に表示する表示制御手段と、を備え、
   前記サムネイル画像を分割して得られた複数の分割領域は、前記表示領域を分割して得られた複数の部分領域に対応する対応領域と、前記複数の部分領域のいずれにも対応しない非対応領域とを含み、
   前記決定手段は、
   前記指示位置が属する分割領域が前記対応領域の場合は、前記分割領域に対応する前記表示領域の部分領域に前記医用画像データを表示する第１の表示方法に前記表示方法を決定し、
   前記指示位置が属する分割領域が前記非対応領域の場合は、前記医用画像データの表示を前記第１の表示方法とは異なる第２の表示方法に前記表示方法を決定することを特徴とする医用画像表示装置。
3. 前記決定手段は、
   前記複数の部分領域と前記サムネイル画像を分割して得られた複数の分割領域との対応づけに基づいて、前記複数の分割領域のうち前記指示位置が属する分割領域に対応する前記部分領域を決定することを特徴とする請求項１に記載の医用画像表示装置。
4. 前記決定手段は、
   前記表示領域を前記複数の部分領域へ分割する態様を示す分割条件を取得し、前記分割条件に従って前記サムネイル画像を前記複数の分割領域へ分割することを特徴とする請求項２または３に記載の医用画像表示装置。
5. 前記複数の部分領域の相対的な位置関係が、前記複数の分割領域の相対的な位置関係において維持されていることを特徴とする請求項４に記載の医用画像表示装置。
6. 前記サムネイル画像には、前記分割領域の境界線が描画されていることを特徴とする請求項２乃至５のいずれか１項に記載の医用画像表示装置。
7. 前記サムネイル画像が選択される前の前記サムネイル画像内の指示位置が属する前記分割領域を、前記複数の分割領域のうちの他の分割領域に対して識別可能になるように表示形態を変更する手段をさらに備えることを特徴とする請求項２乃至６のいずれか１項に記載の医用画像表示装置。
8. 前記指示位置が属する前記分割領域に対応する、前記表示領域の前記部分領域にすでに医用画像データが表示されているか否かに応じて、前記表示形態の変更の仕方を変えることを特徴とする請求項７に記載の医用画像表示装置。
9. 前記サムネイル画像が選択される前の前記サムネイル画像内の前記指示位置が属する前記分割領域に対応する、前記表示領域の前記部分領域を、前記複数の部分領域のうちの他の部分領域に対して識別可能になるように表示形態を変更する手段をさらに備えることを特徴とする請求項２乃至８のいずれか１項に記載の医用画像表示装置。
10. 前記表示領域の前記部分領域に表示されている医用画像データに対応する前記サムネイル画像内の、前記部分領域に対応する前記分割領域の表示形態を、前記複数の分割領域のうちの他の分割領域に対して識別可能になるように変更する手段をさらに備えることを特徴とする請求項２乃至９のいずれか１項に記載の医用画像表示装置。
11. 前記指示位置が属する前記分割領域に対応する前記部分領域にすでに別の医用画像データが表示されている場合に、前記サムネイル画像に対応する医用画像データと前記別の医用画像データとから新たな画像データを作成する作成手段をさらに備え、
    前記表示制御手段は、前記作成手段により作成された前記新たな画像データを、前記指示位置が属する前記分割領域に対応する前記部分領域に表示することを特徴とする請求項２乃至１０のいずれか１項に記載の医用画像表示装置。
12. 前記第２の表示方法は、前記表示領域における分割の形態の変更を伴うことを特徴とする請求項２に記載の医用画像表示装置。
13. 前記サムネイル画像内に複数の前記非対応領域が設定されており、
    それぞれの前記非対応領域に異なる表示方法が割り当てられていることを特徴とする請求項２または１２に記載の医用画像表示装置。
14. 前記サムネイル画像内における前記非対応領域の配置状態は、前記サムネイル画像が対応する前記医用画像データに付属する画像情報に基づいて決定されることを特徴とする請求項２、１２および１３のいずれか１項に記載の医用画像表示装置。
15. 前記サムネイル画像内における前記非対応領域に対応する表示方法は、前記サムネイル画像が対応する前記医用画像データに付属する画像情報に基づいて決定されることを特徴とする請求項２、１２、１３および１４のいずれか１項に記載の医用画像表示装置。
16. 医用画像データに対応するサムネイル画像を表示し、前記サムネイル画像の選択に応じて前記医用画像データを表示領域に表示する医用画像表示装置の制御方法であって、
    前記サムネイル画像がユーザによって選択された際の前記サムネイル画像内の指示位置に基づいて、表示領域を分割して得られた複数の部分領域から前記医用画像データを表示する部分領域を決定する決定工程と、
    前記決定工程で決定された前記部分領域に前記医用画像データを表示する表示制御工程と、を有することを特徴とする医用画像表示装置の制御方法。
17. 医用画像データに対応するサムネイル画像を表示し、前記サムネイル画像の選択に応じて前記医用画像データを表示領域に表示する医用画像表示装置の制御方法であって、
    前記サムネイル画像がユーザによって選択された際の前記サムネイル画像内の指示位置に基づいて、表示領域への前記医用画像データの表示方法を決定する決定工程と、
    前記決定工程により決定された表示方法で、前記医用画像データを前記表示領域に表示する表示制御工程と、を備え、
    前記サムネイル画像を分割して得られた複数の分割領域は、前記表示領域を分割して得られた複数の部分領域に対応する対応領域と、前記複数の部分領域のいずれにも対応しない非対応領域とを含み、
    前記決定工程では、
    前記指示位置が属する分割領域が前記対応領域の場合は、前記分割領域に対応する前記表示領域の部分領域に前記医用画像データを表示する第１の表示方法に前記表示方法を決定し、
    前記指示位置が属する分割領域が前記非対応領域の場合は、前記医用画像データの表示を前記第１の表示方法とは異なる第２の表示方法で行うように決定することを特徴とする医用画像表示装置の制御方法。
18. 請求項１６または１７に記載の制御方法の各工程をコンピュータに実行させるためのプログラム。
19. 医用画像データに対応するサムネイル画像がユーザによって選択された際の前記サムネイル画像内の指示位置に基づいて、表示部において前記医用画像データが表示される表示領域を分割して得られた複数の部分領域から前記医用画像データを表示させる部分領域を決定する決定手段と、
    前記決定手段により決定された前記部分領域に前記医用画像データを表示させる制御を行う制御手段と、を備えることを特徴とする制御装置。

Images