JP5472892B2 - ３次元医用画像表示装置及びその表示方法 - Google Patents

Description

本発明は、例えばＣＴスキャナ、ＭＲＩ装置又は超音波診断装置等の医用機器により取得された３次元画像を表示すると共に、この３次元画像の斜め方向の断面画像であるオブリーグ画像を表示する３次元医用画像表示装置及びその表示方法に関する。

読影等の臨床現場では、オブリーグ画像を表示する３次元医用画像表示装置が多く利用されている。この３次元医用画像表示装置は、例えばＣＴスキャナ、ＭＲＩ装置又は超音波診断装置等の医用機器により取得された３次元画像の斜め方向を視線方向とする３次元のオブリーグ画像、例えばＭＩＰ（最大値投影）画像又はボリュームレタリング画像をディスプレイに表示する。これにより、読影医は、３次元医用画像表示装置によって表示された医用機器により取得された３次元画像とこの３次元画像におけるオブリーグ画像とを観察して読影を行う。この読影の際、例えば３次元画像に対するオブリーグ画像の位置や斜め方向を把握した上で画像を解釈することが必要である。このような事から３次元医用画像表示装置には、３次元画像に対するオブリーグ画像の位置や斜め方向を把握するためのガイド等の手法が取られている。

この手法としては、例えばダブルオブリーグ像に交差線を表示する手法と、擬似人形により３次元画像の向きを把握する手法と、回転するキューブを表示する手法と、３次元画像への断面グラフフィックの重畳の手法とがある。
ダブルオブリーグ像に交差線を表示する手法は、例えばアキシャル画像と、このアキシャル画像に対するダブルオブリーグ画像とを表示する場合、アキシャル画像とシングルオブリーグ画像とにそれぞれ交差線を表示する。なお、シングルオブリーグ画像は、アキシャル画像の斜め方向の断面画像である。ダブルオブリーグ画像は、アキシャル画像の斜め方向のシングルオブリーグ画像を取得し、さらにシングルオブリーグ画像の斜め方向の断面画像である。交差線を表示することによりダブルオブリーグ画像の断面方向を凡そ把握することができる。例えば特許文献１は、被写体の内部構造を表す３次元ボクセルデータを用いて被写体を所定の断面で切り取った断面画像を生成してその断面の方向を変更するが、ダブルオブリーグ画像になったときには、断面を回転させてシングルオブリーグ画像に戻して表示することを開示する。
ところが、シングルオブリーグ画像は、アキシャル画像に対して直交する方向の断面画像であるので、任意方向の断面画像を表示することができない。又、ダブルオブリーグ画像は、任意方向の断面画像を表示することができるが、その位置や斜め方向を交差線の表示だけでは把握しづらい。
オブリーグ画像の方向を把握するには、交差線の角度から方向を思考する段階を経ることが必要であり、直感的に分かりにくいという問題がある。又、オブリーグ画像の左右方向、上下方向、表裏の向きがどの方向であるのかを判定するには、オブリーグ画像内に撮影さている例えば人体等の被写体の構造物を頼りにすることが必要であり、分かりにくいだけでなく、視線方向の判定の結果が被写体の構造物に依存するという問題もある。

擬似人形により３次元画像の向きを把握する手法は、例えば特許文献２に開示されており、ＭＩＰ画像やボリュームレタリング画像等の３次元画像を表示する際に、擬似人形を表示して視線方向を把握し易いようにしている。
しかしながら、アキシャル画像における３次元画像の位置関係を知りたいと思っても、３次元画像の位置を特定する手段を備えておらず、３次元画像の位置関係を知ることは不可能である。この３次元画像の位置を特定する手段を備えていないことは、例えばアキシャル画像とオブリーグ断面画像とを表示する場合に非常に問題であり、このような場合、オブリーグ画像のアキシャル画像に対する位置関係を知る必要のある場面が多く、かつ３次元画像の位置関係は、例えば表示されているアキシャル画像とオブリーグ画像とからでは判定できない場合が多い。

回転するキューブを表示する手法は、３次元画像を表示する際に、例えば斜め方向の移動に応じて回転可能なキューブを表示して視線方向を把握し易いようにしている。しかしながら、この手法も、上記擬似人形を用いる手法と同様に、アキシャル画像における３次元画像の位置関係を知りたいと思っても、３次元画像の位置を特定する手段を備えておらず、３次元画像の位置関係を知ることは不可能である。
なお、擬似人形により３次元画像の向きを把握する手法やキューブを表示する手法では、現状は、画像自体から位置を判定しているが、この判定は常に可能なわけでなく、オブリーグ画像では位置を判定することが一般に非常に難しい。

３次元画像への断面グラフフィックの重畳の手法は、ボリュームレタリング画像中に断面画像を差し込んで表示するもので、断面画像の位置を直感的に把握できるが、断面画像の表裏方向やどちらが上方向であるのかを把握することはできず、結局のところ断面画像の位置等を正確に特定することができない。又、この手法により例えばアキシャル画像とオブリーグ画像との位置関係を知ろうとする場合、ディスプレイの表示画面には、アキシャル画像とオブリーグ画像との各表示領域を必要とする他に、３次元画像を表示するための表示領域が必要となる。このため、ディスプレイの表示画面上に多くの領域が必要になり、又、位置向きの把握に多くのステップが必要になる。
特開２００６−２２３４４９号公報 特許第３４４７４０５号公報 特開２００２−３４９４８号公報

本発明の目的は、３次元画像とこの３次元画像におけるオブリーグ画像とを表示する際に、少なくとも３次元画像に対するオブリーグ画像の視線方向やその位置関係、さらにはオブリーグ画像の左右方向、上下方向、表裏の向きを容易に把握できる３次元医用画像表示装置及びその表示方法を提供することにある。

本発明の請求項１記載の３次元医用画像表示装置は、リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示装置において、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部を具備し、識別図式表示部は、リファレンス画像データ中に斜め断面画像データの表示領域を示す第１の表示領域図形データを表示すると共に、斜め断面画像データ中に図式データに対して位置を対応させた第２の表示領域図形データを表示し、かつ第１の表示領域図形データの形状の変更に応じてリファレンス画像データに対する斜め断面画像データの斜め方向又は断面の位置のうちいずれか一方又は両方を更新した斜め断面画像データを表示する。
本発明の請求項２記載の３次元医用画像表示装置は、リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示するもので、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部を具備し、識別図式表示部は、図式データとしてリファレンス画像データと斜め断面画像データとが交差するところを示す交差線と、リファレンス画像データと斜め断面画像データとの同一位置を示す連動図形とをそれぞれリファレンス画像データと斜め断面画像データとに表示し、かつリファレンス画像データに対する斜め断面画像データの斜め方向又は断面の位置のうちいずれか一方の変更に応じて交差線と連動図形データとを更新する。
本発明の請求項３記載の３次元医用画像表示装置は、リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示するもので、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部を具備し、複数のリファレンス画像データを表示すると共に、斜め断面画像データを表示する場合、識別図式表示部は、複数のリファレンス画像データにそれぞれ図式データを表示し、かつ斜め断面画像データに各リファレンス画像データとの交差するところを示す交差線を表示する。
本発明の請求項４記載の３次元医用画像表示装置は、リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示装置において、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部を具備し、複数のリファレンス画像データを表示すると共に、複数の斜め断面画像データを表示する場合、識別図式表示部は、少なくとも１つのリファレンス画像データと当該リファレンス画像データに対して時間情報に対応する斜め断面画像データとを１対とし、この対を複数表示し、かつ少なくとも１つのリファレンス画像データに図式データを表示し、かつ斜め断面画像データに各リファレンス画像データとの交差するところを示す交差線を表示する。

本発明の請求項１０記載の３次元医用画像表示方法は、ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示方法において、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、識別可能とする図式データの表示は、リファレンス画像データ中に斜め断面画像データの表示領域を示す第１の表示領域図形データを表示すると共に、斜め断面画像データ中に図式データに対して位置を対応させた第２の表示領域図形データを表示し、かつ第１の表示領域図形データの形状の変更に応じてリファレンス画像データに対する斜め断面画像データの斜め方向又は断面の位置のうちいずれか一方又は両方を更新した斜め断面画像データを表示する。
本発明の請求項１１記載の３次元医用画像表示方法は、ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示するもので、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、識別可能とする図式データの表示は、図式データとしてリファレンス画像データと斜め断面画像データとが交差するところを示す交差線と、リファレンス画像データと斜め断面画像データとの同一位置を示す連動図形とをそれぞれリファレンス画像データと斜め断面画像データとに表示し、かつリファレンス画像データに対する斜め断面画像データの斜め方向又は断面の位置のうちいずれか一方の変更に応じて交差線と連動図形データとを更新する。
本発明の請求項１２記載の３次元医用画像表示方法は、ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示するもので、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、複数のリファレンス画像データを表示すると共に、斜め断面画像データを表示する場合、識別可能とする図式データの表示は、複数のリファレンス画像データにそれぞれ図式データを表示し、かつ斜め断面画像データに各リファレンス画像データとの交差するところを示す交差線を表示する。
本発明の請求項１３記載の３次元医用画像表示方法は、ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示するもので、リファレンス画像データに対する斜め断面画像データの斜め方向又は斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ斜め断面画像データのリファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、複数のリファレンス画像データを表示すると共に、複数の斜め断面画像データを表示する場合、識別可能とする図式データの表示は、少なくとも１つのリファレンス画像データと当該リファレンス画像データに対して時間情報に対応する斜め断面画像データとを１対とし、この対を複数表示し、かつ少なくとも１つのリファレンス画像データに図式データを表示し、かつ斜め断面画像データに各リファレンス画像データとの交差するところを示す交差線を表示する。

本発明によれば、３次元画像とこの３次元画像におけるオブリーグ画像とを表示する際に、少なくとも３次元画像に対するオブリーグ画像の視線方向やその位置関係、さらにはオブリーグ画像の左右方向、上下方向、表裏の向きを容易に把握できる３次元医用画像表示装置及びその表示方法を提供できる。

以下、本発明の第１の実施の形態について図面を参照して説明する。
図１は３次元医用画像表示装置の構成図を示す。この３次元医用画像表示装置は、ＣＰＵ等を搭載するコンピュータから成る主制御部１を有する。この主制御部１には、プログラムメモリ２と、画像メモリ３と、表示制御部４と、操作部５と、通信部６とが接続されている。このうち表示制御部４には、例えば液晶ディスプレイ７が接続されている。通信部６には、例えばＣＴスキャナ、ＭＲＩ装置又は超音波診断装置等の医用機器８が接続されている。この医用機器８は、例えばＣＴスキャナ、ＭＲＩ装置又は超音波診断装置等によってそれぞれ３次元ＣＴ画像データ、３次元ＭＲＩ画像データ、３次元超音波画像データ等を取得する。

プログラムメモリ２には、３次元医用画像表示プログラムが予め格納されている。この３次元医用画像表示プログラムは、液晶ディスプレイ７の画面上に、例えば医用機器８により取得された３次元ＣＴ画像データ、３次元ＭＲＩ画像データ又は３次元超音波画像データから例えばアキシャル画像データ等を作成し、このアキシャル画像データをリファレンス画像データとして表示させ、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データすなわちオブリーク画像データを表示させるもので、リファレンス画像データに対するオブリーク画像データの斜め方向又は断面位置のうちいずれか一方の変更に応じて変更され、かつオブリーク画像データのリファレンス画像データに対する少なくとも視線方向やその位置関係を識別可能とする図式データを表示させる。しかるに、主制御部１は、当該３次元医用画像表示プログラムを実行することによりリファレンス画像作成部１０と、オブリーク画像作成部１１と、識別図式表示部１２との各機能を有する。

画像メモリ３は、医用機器８から通信部６を介して取得される３次元ＣＴ画像データ、３次元ＭＲＩ画像データ、３次元超音波画像データ等を記憶すると共に、リファレンス画像作成部１０やオブリーク画像作成部１１、識別図式表示部１２による画像処理時に一時的に当該画像データやその画像処理に必要なデータ等を記憶する。
表示制御部４は、液晶ディスプレイ７を駆動制御し、当該液晶ディスプレイ７の画面上に例えばリファレンス画像データとオブリーク画像データとの２つの画像データを並べて表示すると共に、オブリーク画像データのリファレンス画像データに対する少なくとも視線方向やその位置関係を識別可能とする図式データを表示する。
操作部５は、例えば操作者のマニュアル操作を受けてリファレンス画像データに対するオブリーク画像データの斜め方向や断面位置等の変更の指示を受けるもので、例えばマウス、キーボート等を有する。

リファレンス画像作成部１０は、画像メモリ３に記憶されている例えば３次元ＣＴ画像データ、３次元ＭＲＩ画像データ又は３次元超音波画像データ等のいずれからリファレンス画像データとして例えば人体等の被検体の体軸に直交する断面の画像であるアキシャル画像データ（Ａxial画像）を作成し、このアキシャル画像データを表示制御部４を通して図２に示すようにアキシャル画像ＡＤとしてディスプレイ７の画面７ａ上に表示する。なお、リファレンス画像データは、読影する医師が撮影されている被検体の空間配置を把握可能な画像である。ここでは、リファレンス画像データの例としてアキシャル画像ＡＤを用いている。リファレンス画像データは、アキシャル画像データに限らず、例えばコロナル画像データ（Ｃoronal画像）、サジタール画像データ（Ｓagittal画像）、又はこれに相当する３次元画像データ、例えば投影３次元画像データ、又はボリュームレタリング画像データを用いることが可能である。アキシャル画像データは、被検体を診断する目的にも使われる。このアキシャル画像データは、斜め断面の向きや位置を把握するための基準画像データとなるので、画像の角度・拡大率を固定することが望ましい。

オブリーク画像作成部１１は、リファレンス画像作成部１０により例えばアキシャル画像ＡＤをディスプレイ７の画面７ａ上に表示するのと同時に、リファレンス画像データとして例えばアキシャル画像ＡＤに対する任意の斜め方向の断面である斜め断面画像データすなわちオブリーク画像データを作成し、このオブリーク画像データを表示制御部４を通して図２に示すようにオブリーク画像ＯＤとしてディスプレイ７の画面７ａ上に表示する。このオブリーク画像作成部１１は、オブリーク画像ＯＤを作成するときの斜め断面の位置、向きを後述する操作により変更可能である。なお、オブリーク画像ＯＤは、アキシャル画像ＡＤに対する斜めの断面画像データを一般的に回転・平行移動・拡大／縮小の各処理を施す。これにより、オブリーク画像ＯＤを読影する医師は、断面向き、断面位置、拡大率を知ることを必要する。
なお、コンピュータ内で画像処理するときは、アキシャル画像データ、オブリーク画像データであり、ディスプレイ７の画面７ａ上に表示するときは、アキシャル画像ＡＤ、オブリーク画像ＯＤであるが、以下、説明を簡単化するために全てアキシャル画像ＡＤ、オブリーク画像ＯＤで説明する。

識別図式表示部１２は、ディスプレイ７の画面７ａ上に表示しているアキシャル画像ＡＤ上とオブリーク画像ＯＤ上とに、オブリーク画像ＯＤのアキシャル画像ＡＤに対する少なくとも視線方向や断面の位置関係、具体的に上下方向、左右方向、表裏の向きを識別可能とする図式データとして表示領域提示図形データＴを表示する。この表示領域提示図形データＴは、アキシャル画像ＡＤに対するオブリーク画像ＯＤの斜め方向又は断面の位置のうちいずれか一方の変更に応じてその図形の形状を変更可能とするもので、交差線作成部１３と、連動点作成部１４と、表示領域提示図形作成部１５と、表示領域参照図形作成部１６と、回転処理部１７とを有する。

交差線作成部１３は、図２に示すようにアキシャル画像ＡＤ上とオブリーク画像ＯＤ上とにそれぞれ交差線ＣＬ１、ＣＬ２を表示する。これら交差線ＣＬ１、ＣＬ２は、アキシャル画像ＡＤの断面とオブリーク画像ＯＤの断面との２つの面の交差するところを示す。これら交差線ＣＬ１、ＣＬ２は、例えば破線により表示する。

この交差線作成部１３は、操作部５に対するユーザによる少なくとも視線方向や断面の位置の変更の操作を受けると、アキシャル画像ＡＤに対するオブリーク画像ＯＤの斜め方向又は断面位置のうちいずれか一方の変更に応じて各交差線ＣＬ１、ＣＬ２の表示位置を更新する。すなわち、各交差線ＣＬ１、ＣＬ２は、アキシャル画像ＡＤに対するオブリーク画像ＯＤの斜め方向又は断面位置のうちいずれか一方が変更されても、常にアキシャル画像ＡＤとオブリーク画像ＯＤとの交差するところを示す。なお、アキシャル画像ＡＤの断面方向とオブリーク画像ＯＤの断面方向とが互いに並行、又はこれら断面方向の成す角度が一定値より小さい場合には、各交差線ＣＬ１、ＣＬ２は定義できない。その場合、交差線作成部１３は、後述する連動点Ｒを通り、それぞれ記憶された角度（交差線角度）を持つ線を通常と異なる形態、例えば上記破線よりも細い破線により表示する。
しかるに、各交差線ＣＬ１、ＣＬ２の位置上においてアキシャル画像ＡＤとオブリーク画像ＯＤとの各断面が交差するので、これら交差線ＣＬ１、ＣＬ２上でアキシャル画像ＡＤとオブリーク画像ＯＤとは同一構造物を示す。従って、各交差線ＣＬ１、ＣＬ２は、オブリーク画像ＯＤの断面位置をユーザにより直感的に特定するのに有力な手がかりとなる。

連動点作成部１４は、図２に示すようにアキシャル画像ＡＤとオブリーク画像ＯＤとに連動図形としての連動点Ｒ１、Ｒ２をそれぞれ表示する。これら連動点Ｒ１、Ｒ２は、アキシャル画像ＡＤ上とオブリーク画像ＯＤ上との同一位置を示す。これら連動点Ｒ１、Ｒ２は、例えば所定の径を有する円形形状に表示される。この連動点作成部１４は、操作部５に対するユーザによる少なくとも視線方向や断面の位置の変更の操作を受けると、アキシャル画像ＡＤに対するオブリーク画像ＯＤの斜め方向又は断面位置のうちいずれか一方の変更に応じて各連動点Ｒ１、Ｒ２の表示位置を更新する。実際の連動点Ｒ１、Ｒ２は、円形の中心である。
上記各交差線ＣＬ１、ＣＬ２は、線対線で断面の位置を知ることができるのに対し、各連動点Ｒ１、Ｒ２は、点対点によりアキシャル画像ＡＤとオブリーク画像ＯＤとを対させることができる。これにより、各連動点Ｒ１、Ｒ２は、オブリーク画像ＯＤの断面位置を特定する上で交差線よりもさらに有力で詳細な手がかりとすることができる。

この連動点作成部１４は、ユーザの操作部５に対するマウスを用いてのドラッグ操作を受けると、各連動点Ｒ１、Ｒ２を所望の位置に変更することが可能である。例えば図３に示すようにオブリーク画像ＯＤ上で連動点Ｒ２の位置を矢印Ｆ１方向に移動すると、連動点作成部１４は、当該連動点Ｒ２の変更方向とその移動量とに応じてアキシャル画像ＡＤ上での連動点Ｒ１の位置を矢印Ｆ１方向に移動する。この場合、オブリーク画像ＯＤの断面位置は、その断面向きを変更することなく連動点Ｒ１の位置の移動が可能である。そして、連動点作成部１４は、オブリーク画像ＯＤ上での連動点Ｒ１の位置を変更すると、この変更した連動点Ｒ１の位置に応じて例えば図４に示すようにアキシャル画像ＡＤの断面像を自動的に更新する。

一方、オブリーク画像ＯＤ上に限らず、アキシャル画像ＡＤ上で連動点Ｒ１の位置を矢印Ｆ２方向に移動すると、連動点作成部１４は、当該連動点Ｒ１の変更方向とその移動量とに応じてオブリーク画像ＯＤ上での連動点Ｒ２の位置を矢印Ｆ２方向に移動する。これにより、連動点作成部１４は、アキシャル画像ＡＤ上での連動点Ｒ１の位置の変更に応じてオブリーク画像ＯＤの断面像を自動的に更新する。
これにより、各連動点Ｒ１、Ｒ２は、被検体中の目的部位をオブリーク画像ＯＤ上の表示させるために極めて簡単な操作手法である。

表示領域提示図形作成部１５は、図２に示すようにディスプレイ７の画面７ａ上に表示するアキシャル画像ＡＤ中に、オブリーク画像ＯＤの表示領域を示す第１の表示領域図形データとしての表示領域提示図形データＴを表示する。この表示領域提示図形データＴは、例えば平行四辺形等の四辺形の形状により表示する。この表示領域提示図形作成部１５は、アキシャル画像ＡＤに対するオブリーク画像ＯＤの斜め方向又は断面位置のうちいずれか一方又は両方の変更に応じて表示領域提示図形データＴのサイズ、形状等を更新する。
表示領域提示図形データＴは、オブリーク画像ＯＤの断面画像に表示された領域がアキシャル画像ＡＤの断面画像上において如何なる位置であるか、さらに如何なる方向であるのかを表示する。又、この表示領域提示図形データＴは、その領域の大きさを対比して表示することで、拡大／縮小の量を直感的に把握することができる。

表示領域参照図形作成部１６は、図２に示すようにディスプレイ７の画面７ａ上に表示するオブリーク画像ＯＤ中に、表示領域提示図形データＴに対して位置を対応させた第２の表示領域図形データとして表示領域参照図形データＳを表示する。すなわち、表示領域参照図形データＳは、オブリーク画像ＯＤの表示領域に対して常に同じ位置関係の四角形として表示される。表示領域提示図形データＴは、オブリーク画像ＯＤ上の四角形をアキシャル画像ＡＤに対して直交する方向から見たときの投影図形として表示される。これにより、表示領域提示図形データＴと表示領域参照図形データＳとは、同一の図形をそれぞれの面の直交方向に投影した図形として表示されたものである。なお、投影方法は、例えば平行投影又は透視投影を用いる。
しかるに、表示領域提示図形データＴと表示領域参照図形データＳとを観察することによりユーザは、アキシャル画像ＡＤの断面画像から如何なる方向に回転等した画像がオブリーク画像ＯＤの断面画像であるかを直感的に把握できる。

表示領域提示図形作成部１５は、図２に示すようにアキシャル画像ＡＤ上の表示領域提示図形データＴに付加して識別図形データとしての２つの視線方向矢印Ｙ１、Ｙ２を表示する。これら視線方向矢印Ｙ１、Ｙ２は、視線方向を示すもので、上下方向、表裏の向き等を識別可能とする。
又、表示領域提示図形作成部１５と表示領域参照図形作成部１６とは、それぞれ上下方向、左右方向、前後方向、表裏の向き等を識別可能とする。以下、説明する。
第１は、２つの視線方向矢印Ｙ１、Ｙ２の表示である。これら視線方向矢印Ｙ１、Ｙ２は、その元部に例えば各円形ｍ１、ｍ２を表示する。これら円形ｍ１、ｍ２は、平行四辺形に形成された表示領域提示図形データＴの各コーナに表示される。一方、オブリーク画像ＯＤ上に表示される表示領域参照図形データＳの各コーナには、各円形ｎ１、ｎ２が表示される。しかるに、各円形ｍ１、ｍ２と各円形ｎ１、ｎ２とは、その３次元上の位置が対応する。２つの視線方向矢印Ｙ１、Ｙ２を表示することによりオブリーク画像ＯＤの断面画像の向きを直感的に把握できる。

又、２つの視線方向矢印Ｙ１、Ｙ２は、オブリーク画像ＯＤの断面像の表方向から裏方向に向かう方向を示す。これら視線方向矢印Ｙ１、Ｙ２の方向によりオブリーク画像ＯＤの断面像の表裏方向を識別できる。これと共に、２つの視線方向矢印Ｙ１、Ｙ２によりオブリーク画像ＯＤの断面像の左右方向を識別できる。オブリーク画像ＯＤの断面像の向きを識別するためには、上下方向と、左右方向と、表裏方向とのうち少なくとも２つの方向を表示することが必要である。以下に説明するように本装置は、上下方向と、左右方向と、表裏方向とを識別可能である。

第２に、左右方向を識別する表示を行う。この左右方向の識別表示は、例えば図５に示すようにアキシャル画像ＡＤ上の表示領域提示図形データＴの右側のラインを任意の色、例えば緑色Ｇ１に表示すると共に、オブリーク画像ＯＤ上の表示領域参照図形データＳの右側のラインを任意の色、例えば緑色Ｇ２に表示する。なお、図面上は複数の斜線により緑色Ｇ１、Ｇ２を示す。これら緑色Ｇ１、Ｇ２は、その位置が対応する。これにより、アキシャル画像ＡＤとオブリーク画像ＯＤとの左右方向を識別することが可能である。左右方向の識別表示は、任意の色の表示に限らず、他の表示形態、例えば太線、破線等の形状を変化させた表示を用いてもよい。

第３に、前後方向を識別する表示を行う。例えば図２に示すように表示領域提示図形データＴとして例えば平行四角形を投影表示し、かつ２つの視線方向矢印Ｙ１、Ｙ２を表示したとしても３次元の方向が一方向に特定されないことがある。例えば、図６（ａ）に示すような薄墨の四角形は、同図（ａ）（ｂ）に示すように２つの異なる方向を向くように解釈される。ここでは、これを前後関係の不確定性と称する。
しかるに、前後方向の識別表示は、例えば図７に示すようにアキシャル画像ＡＤ上の表示領域提示図形データＴにおいて手前側のラインを太線Ｆ１等の他の表示形態により表示し、これと共にアキシャル画像ＡＤ上の表示領域参照図形データＳにおいて手前側のラインを太線Ｆ２等の他の表示形態により表示する。これら手前側の太線ラインＦ１と同太線ラインＦ２とは、その位置が対応する。この前後方向の識別表示は、太線ラインＦ１、Ｆ２により行っているが、これに限らず、例えば任意の色、例えば青色等により表示してもよい。

第４に、表裏方向を識別する表示を行う。例えば図２に示す表示領域提示図形データＴを交差線ＣＬ１を軸として回転された場合、表示領域提示図形データＴの表裏が逆転することがある。この場合、表示領域提示図形データＴは、例えば図８に示すように細線の破線Ｇ１と太線の破線Ｇ２となどにより表示する。２つの視線方向矢印Ｙ１、Ｙ２も太線の破線により表示する。
なお、前後方向の不確定性を解決する他の表示方法としては、例えば図９（ａ）（ｂ）（ｃ）に示すような矢印等の表示を陰線消去して表示する方法である。

以上のようにオブリーク画像ＯＤの断面方向を識別する表示方法としては、２つの視線方向矢印Ｙ１、Ｙ２を表示方法と、緑色Ｇ１、Ｇ２等により左右方向を識別する表示方法と、太線ラインＦ１、Ｆ２等により前後方向を識別する表示方法と、細線の破線Ｇ１や太線の破線Ｇ２等により表裏方向を識別する表示方法と、陰線消去により前後方向を識別する表示方法などがある。
オブリーク画像ＯＤの断面方向の不確定要素として上下方向、左右方向、表裏方向の３つのうち２つの方向と、前後方向の不確定性との合計３の方向が存在する。従って、オブリーク画像ＯＤの断面方向を識別するには、２つの視線方向矢印Ｙ１、Ｙ２を表示方法と、緑色Ｇ１、Ｇ２等により左右方向を識別する表示方法と、太線ラインＦ１、Ｆ２等により前後方向を識別する表示方法と、細線の破線Ｇ１や太線の破線Ｇ２等により表裏方向を識別する表示方法と、陰線消去により前後方向を識別する表示方法とのうち少なくとも３つの方向が存在すればよい。

なお、表示領域提示図形データＴと表示領域参照図形データＳとは、それぞれ別の表示形態により表示してもよい。例えば、リファレンス画像であるアキシャル画像ＡＤの断面画像上に表示領域参照図形データＳを表示し、これと共にオブリーク画像ＯＤの断面画像上に表示領域提示図形データＴを表示してもよい。このような表示でもオブリーク画像ＯＤの断面画像の上下方向、左右方向、前後方向、表裏の向き等を識別可能である。これにより、オブリーク画像ＯＤの断面画像におけるアキシャル画像ＡＤの断面画像の方向を特に容易に把握できる。例えば人体等の被検体に人体等の被検体に対する手術計画のような場面では、被検体中の特定の組織を中心に観察する。その操作過程では、オブリーク画像ＯＤの断面画像を基準としてアキシャル画像ＡＤの断面画像が如何なる方向なのかを知る必要がある。このような操作の場合、本装置は、オブリーク画像ＯＤの断面画像におけるアキシャル画像ＡＤの断面画像の方向を特に容易に把握できるので効果的である。なお、様々な用途が想定される場合、リファレンスとなる例えばアキシャル画像ＡＤとオブリーク画像ＯＤとの両画像に表示領域提示図形データＴと表示領域参照図形データＳとの両方を表示するのがよい。

回転処理部１７は、例えば表示領域提示図形データＴに対して回転指示を与えることによりオブリーク画像ＯＤを回転させて断面位置を移動させたオブリーク画像ＯＤを液晶ディスプレイ７の画面７ａに表示する。例えば操作者は、操作部５のマウスを用いてオブリーク画像ＯＤ上の連動点Ｒ２をドラッグ操作する。このドラッグ操作では、例えば図１０に示すように連動点Ｒ２の円の中心付近をドラッグして任意の方向（フリー方向）、例えば矢印Ｂ方向に向けて移動する。このドラッグ操作を受けると、回転処理部１７は、オブリーク画像ＯＤ上の連動点Ｒ２を中心として３次元画像データ内で所定の方向に回転する。オブリーク画像ＯＤの連動点Ｒ２を中心とする回転方向は、例えば連動点Ｒ２をドラッグする方向に対応して決定する。
このような回転操作であれば、連動点Ｒ２の位置が変化しないので、操作者が設定した着目点、例えば連動点Ｒ２の位置が移動しないので、操作が分かりやすい。又、連動点Ｒ２の位置を任意の位置に移動することが可能である。これにより、オブリーク画像ＯＤ上の任意の位置を中心としてオブリーク画像ＯＤを回転することができる。

又、回転処理部１７は、上下方向、左右方向に限定した回転操作と、交差線を軸とした斜め断面の回転操作と、交差線の回転操作とを行う。
先ず、上下方向、左右方向に限定した回転操作では、操作者によって操作部５のマウスを操作し、例えば図１１に示すようにアキシャル画像ＡＤ上に表示されている四辺形状の表示領域提示図形データＴの一部をドラッグ操作する。このドラッグ操作を受けると、回転処理部１７は、オブリーク画像ＯＤを縦軸・横軸を中心に回転する。例えば、図１１に示すように四辺形状の表示領域提示図形データＴ上にクリックポイントｑ１〜ｑ４を形成する。このクリックポイントｑ１〜ｑ４は、例えば四辺形状の表示領域提示図形データＴの各辺上に設定する。操作者が操作部５のマウスを操作し、表示領域提示図形データＴ上のクリックポイントｑ１〜ｑ４の各内側をドラッグ操作すると、回転処理部１７は、例えばドラッグした点を手前に移動する方向に表示領域提示図形データＴを回転させる。例えば、図１１に示す表示領域提示図形データＴ上のクリックポイントｑ１の辺を矢印Ｃ方向にドラッグ操作して移動すると、回転処理部１７は、例えばクリックポイントｑ２、ｑ３を有する各辺の中点を結ぶラインｘを軸としてオブリーク画像ＯＤの断面位置を回転する。このオブリーク画像ＯＤの断面位置の回転は、表示領域提示図形データＴの矢印Ｄ方向への回転に相当する。なお、クリックポイントｑ１のドラッグ操作により表示領域提示図形データＴの形状は、各クリックポイントｑ１、ｑ４を有する各辺の幅が次第に狭くなる。これにより、表示領域提示図形データＴの回転に応じてオブリーク画像ＯＤの断面位置が更新される。

反対に、クリックポイントｑ１の辺を矢印Ｃ方向と反対方向にドラッグ操作して移動すると、回転処理部１７は、例えばクリックポイントｑ２、ｑ３を有する各辺の中点を結ぶラインｘ１を軸として表示領域提示図形データＴを矢印Ｄ１方向と反対方向に回転する。なお、表示領域提示図形データＴの四辺形の幅が最大になった点で回転操作を停止する。回転は、例えば最大９０度に設定する。
又、クリックポイントｑ１のドラッグ操作により表示領域提示図形データＴの各クリックポイントｑ１、ｑ４を有する各辺の幅が次第に狭くなり、各クリックポイントｑ１、ｑ４を有する各辺が重なり合うと、回転処理部１７は、オブリーク画像ＯＤの断面位置の回転を一時停止する。再び、表示領域提示図形データＴ上のクリックポイントｑ１の辺をドラッグ操作して移動すると、回転処理部１７は、例えばクリックポイントｑ２、ｑ３を有する各辺の中点を結ぶラインｘ１を軸としてオブリーク画像ＯＤの断面位置をさらに回転する。

すなわち、回転処理部１７は、図１２に示すように表示領域提示図形データＴ上のクリックポイントｑ１又はｑ４の辺を当該表示領域提示図形データＴの内側にドラッグ操作して移動すると、例えばクリックポイントｑ２、ｑ３を有する各辺の中点を結ぶラインｘ１を軸としてオブリーク画像ＯＤの断面位置を矢印Ｄ１方向に回転させる。又、回転処理部１７は、表示領域提示図形データＴ上のクリックポイントｑ２又はｑ３の辺を当該表示領域提示図形データＴの内側にドラッグ操作して移動すると、例えばクリックポイントｑ１、ｑ４を有する各辺の中点を結ぶラインｘ２を軸としてオブリーク画像ＯＤの断面位置を矢印Ｄ２方向に回転させる。

次に、交差線を軸とした斜め断面の回転操作は、図１３に示すようにアキシャル画像ＡＤ上に表示されている連動点Ｒ１の円中心付近を例えば矢印Ｅ方向にドラッグ操作して移動すると、回転処理部１７は、交差線ＣＬ１を軸として表示領域提示図形データＴを回転する。これにより、交差線ＣＬ１を軸とした表示領域提示図形データＴの回転に応じてオブリーク画像ＯＤの断面位置が更新される。このような操作とアキシャル画像ＡＤの断面の交差線の回転操作とを組み合わせると、アキシャル画像ＡＤの断面を基準とした斜め断面の向きの設定が極めて簡単で、かつ直感的な操作で実現することができる。

次に、交差線の回転操作は、アキシャル画像ＡＤの断面の交差線の回転と、オブリーク画像ＯＤの交差線の回転とがある。
アキシャル断面の交差線の回転では、図１４に示すようにアキシャル画像ＡＤ上の交差線ＣＬ１をドラッグする。例えば交差線ＣＬ１上の点ｇをドラッグして矢印Ｈ方向に移動する。これにより、アキシャル画像ＡＤの断面画像内で交差線ＣＬ１は、矢印Ｈ方向に回転する。この操作では、アキシャル画像ＡＤの断面自体が変更される。
オブリーク画像ＯＤの交差線の回転では、図１５に示すようにオブリーク画像ＯＤ上の交差線ＣＬ２をドラッグする。これにより、オブリーク画像ＯＤの断面画像内で交差線ＣＬ２は、矢印Ｊ方向に回転する。この操作によりオブリーク画像ＯＤの断面像も交差線ＣＬ２の回転と共に回転する。

さらに、識別図式表示部１２は、複数のリファレンス画像、例えばアキシャル画像ＡＤ、コロナル画像、サジタール画像、投影３次元画像データ、ボリュームレタリング画像データ等にそれぞれ表示領域提示図形データＴを表示し、かつオブリーク画像ＯＤに各リファレンス画像データとの交差するところを示す交差線ＣＬを表示する。

一般的にアキシャル画像ＡＤの断面の位置を提示する手法としては、例えば図１６に示すようにコロナル画像ＣＤとアキシャル画像ＡＤ、及びこれらコロナル画像ＣＤ、アキシャル画像ＡＤとの間に交差線ＣＬ10、ＣＬ11を表示することが多く用いられる。直交３断面の表示では、さらにサジタール画像も追加される。
このような表示でオブリーク画像ＯＤを表示する場合、表示領域提示図形データＴは、アキシャル画像ＡＤの断面像のみでなくコロナル画像やサジタール画像にも表示する。この場合、オブリーク画像ＯＤ上に表示する交差線ＣＬ12は、アキシャル画像ＡＤの交差線ＣＬ10のみでなくコロナル画像上の交差線ＣＬ11にも対応する。これと共にアキシャル画像ＡＤ上やコロナル画像上には、上記同様に、例えば図７に示すように前後方向の識別表示を行うことが可能である。すなわち、前後方向の識別表示は、アキシャル画像ＡＤ上やコロナル画像上に表示されている表示領域提示図形データＴにおいて手前側のラインを太線、任意の色等の他の表示形態により表示する。

識別図式表示部１２は、複数のリファレンス画像として例えばＭＩＰ画像（コロナル）等の３次元画像データＭＤを用いることも可能である。なお、ＭＩＰ画像ＭＤとオブリーク画像ＯＤとの間には、実際に交差線は存在しないが、連動点と交差線とを同時表示する場合、交差線は、連動点を通り視線方向に垂直な直線として定義することが可能である。これにより、図１６に示すように交差線ＣＬに類似の直線ＲＬを表示することが可能である。この直線ＲＬ及び各連動点Ｒ10、Ｒ11、Ｒ12、Ｒ13は、ＭＩＰ画像等の３次元画像とオブリーク画像ＯＤとの位置関係を特定する手がかりとして有用である。

ＭＩＰ画像等の３次元画像は、任意に回転可能であることが多い。この場合、アキシャル画像ＡＤやコロナル画像等の他のリファレンス画像との位置関係、視線方向の関係を同定できることが重要である。例えば図１７に示すようにオブリーク画像ＯＤの表示に代えて任意視線方向のＭＩＰ画像を表示してもよい。この表示方法の場合も、交差線は実際には定義できないが、これに代り連動点Ｒ14を通り視線方向に平行な直線ＲＬａを表示することが可能である。この直線ＲＬａと連動点Ｒ14とは、ＭＩＰ画像の３次元画像とアキシャル画像ＡＤやコロナル画像等のリファレンス画像との間の位置を特定する手がかりとして有用である。

又、識別図式表示部１２は、例えばＣＴスキャナ、ＭＲＩ装置又は超音波診断装置等の医用機器により期間を隔てての撮影により取得された３次元画像、例えば異なる検査日時において撮影により取得された少なくとも２つの３次元画像を比較表示することが可能である。図１８は例えば検査日時２００５年８月に取得されたアキシャル画像ＡＤ１とそのオブリーク画像ＯＤ１を表示すると共に、例えば検査日時２００６年４月に取得されたアキシャル画像ＡＤ２とそのオブリーク画像ＯＤ２を同時にディスプレイ７の画面７ａ上に表示する。この場合、既存の位置合わせ手法を適用することにより２組のアキシャル画像ＡＤ１、ＡＤ２とそのオブリーク画像ＯＤ１、ＯＤ２との断面位置を合わせて例えば各連動点Ｒ１、Ｒ２の各対応点Ｋ１、Ｋ２を表示できる。

次に、上記の如く構成された装置による医用機器により取得された３次元画像とそのオブリーグ画像との表示動作について説明する。
画像メモリ３には、医用機器８から通信部６を介して取得された３次元ＣＴ画像データ、３次元ＭＲＩ画像データ、３次元超音波画像データ等が記憶される。
リファレンス画像作成部１０は、画像メモリ３に記憶されている例えば３次元ＣＴ画像データ、３次元ＭＲＩ画像データ又は３次元超音波画像データ等のいずれからリファレンス画像データとして例えば人体等の被検体の体軸に直交する断面の画像であるアキシャル画像データを作成し、このアキシャル画像データを表示制御部４を通して図２に示すようにアキシャル画像ＡＤとしてディスプレイ７の画面７ａ上に表示する。

これと共に、オブリーク画像作成部１１は、リファレンス画像作成部１０により例えばアキシャル画像ＡＤをディスプレイ７の画面７ａ上に表示するのと同時に、リファレンス画像データとして例えばアキシャル画像ＡＤに対する任意の斜め方向の断面である斜め断面画像データすなわちオブリーク画像データを作成し、このオブリーク画像データを表示制御部４を通して図２に示すようにオブリーク画像ＯＤとしてディスプレイ７の画面７ａ上に表示する。

例えば医師は、ディスプレイ７の画面７ａ上に表示されたアキシャル画像ＡＤとオブリーク画像ＯＤとを観察して読影を行う。このとき、オブリーク画像ＯＤを読影する医師は、断面向き、断面位置、拡大率を知ることを必要する。しかるに、操作者である医師は、アキシャル画像ＡＤとオブリーク画像ＯＤとを観察しながら表示領域提示図形データＴを確認し、オブリーク画像ＯＤのアキシャル画像ＡＤに対する少なくとも視線方向や断面の位置関係、具体的に上下方向、左右方向、表裏の向きを識別する。

すなわち、交差線作成部１３は、図２に示すようにアキシャル画像ＡＤ上とオブリーク画像ＯＤ上とにそれぞれ交差線ＣＬ１、ＣＬ２を表示する。これら交差線ＣＬ１、ＣＬ２は、アキシャル画像ＡＤの断面とオブリーク画像ＯＤの断面との２つの面の交差するところを示す。この交差線作成部１３は、操作部５に対する操作者による少なくとも視線方向や断面の位置の変更の操作を受けると、アキシャル画像ＡＤに対するオブリーク画像ＯＤの斜め方向又は断面位置のうちいずれか一方の変更に応じて各交差線ＣＬ１、ＣＬ２の表示位置を更新する。これにより、各交差線ＣＬ１、ＣＬ２は、オブリーク画像ＯＤの断面位置をユーザにより直感的に特定するのに有力な手がかりとなる。

連動点作成部１４は、図２に示すようにアキシャル画像ＡＤとオブリーク画像ＯＤとに連動図形としての連動点Ｒ１、Ｒ２をそれぞれ表示する。これら連動点Ｒ１、Ｒ２は、アキシャル画像ＡＤ上とオブリーク画像ＯＤ上との同一位置を示す。この連動点作成部１４は、オブリーク画像ＯＤ上での連動点Ｒ１の位置を変更すると、この変更した連動点Ｒ１の位置に応じて例えば図４に示すようにアキシャル画像ＡＤの断面像を自動的に更新する。これにより、各連動点Ｒ１、Ｒ２は、オブリーク画像ＯＤの断面位置を特定する上で交差線よりもさらに有力で詳細な手がかりとすることができる。

表示領域提示図形作成部１５は、図２に示すようにディスプレイ７の画面７ａ上に表示するアキシャル画像ＡＤ中に、オブリーク画像ＯＤの表示領域を示す第１の表示領域図形データとしての例えば平行四辺形等の四辺形の形状された表示領域提示図形データＴを表示する。このとき表示領域提示図形作成部１５は、図２に示すようにアキシャル画像ＡＤ上の表示領域提示図形データＴに付加して識別図形データとしての２つの視線方向矢印Ｙ１、Ｙ２を表示する。これら視線方向矢印Ｙ１、Ｙ２は、視線方向を示すもので、上下方向、表裏の向き等を識別可能とする。

これと共に、表示領域参照図形作成部１６は、図２に示すようにディスプレイ７の画面７ａ上に表示するオブリーク画像ＯＤ中に、表示領域提示図形データＴに対して位置を対応させた第２の表示領域図形データとして表示領域参照図形データＳを表示する。この表示領域参照図形データＳは、表示領域提示図形データＴの平行四角形をアキシャル画像ＡＤに対して直交する方向から見たときの投影図形として表示される。
これにより、表示領域提示図形データＴと表示領域参照図形データＳとを観察することによりユーザは、アキシャル画像ＡＤの断面画像から如何なる方向に回転等した画像がオブリーク画像ＯＤの断面画像であるかを直感的に把握できる。

又、表示領域提示図形作成部１５と表示領域参照図形作成部１６とは、それぞれ上下方向、左右方向、前後方向、表裏の向き等を識別可能とする。すなわち、２つの視線方向矢印Ｙ１、Ｙ２の表示は、オブリーク画像ＯＤの断面画像の向きを直感的に把握可能とする。２つの視線方向矢印Ｙ１、Ｙ２は、オブリーク画像ＯＤの断面像の表方向から裏方向に向かう方向を示す。これにより、各視線方向矢印Ｙ１、Ｙ２の方向によりオブリーク画像ＯＤの断面像の表裏方向を識別できる。

例えば図５に示すようにアキシャル画像ＡＤ上の表示領域提示図形データＴの右側のラインを任意の色、例えば緑色Ｇ１に表示すると共に、オブリーク画像ＯＤ上の表示領域参照図形データＳの右側のラインを任意の色、例えば緑色Ｇ２に表示する。これにより、左右方向を識別ができる。
例えば図７に示すようにアキシャル画像ＡＤ上の表示領域提示図形データＴにおいて手前側のラインを太線Ｆ１等の他の表示形態により表示し、これと共にアキシャル画像ＡＤ上の表示領域参照図形データＳにおいて手前側のラインを太線Ｆ２等の他の表示形態により表示する。これにより、前後方向の識別表示ができる。

表示領域提示図形データＴは、例えば図８に示すように細線の破線Ｇ１と太線の破線Ｇ２となどにより表示する。２つの視線方向矢印Ｙ１、Ｙ２も太線の破線により表示する。これにより、表裏方向を識別ができる。

一方、操作者が操作部５のマウスを用いて例えば図１０に示すように連動点Ｒ２の円の中心付近をドラッグして任意の方向（フリー方向）、例えば矢印Ｂ方向に向けてドラッグ操作すると、回転処理部１７は、オブリーク画像ＯＤ上の連動点Ｒ２を中心として３次元画像データ内で所定の方向に回転する。このような回転操作であれば、連動点Ｒ２の位置が変化しないので、操作者が設定した着目点、例えば連動点Ｒ２の位置が移動しないので、操作が分かりやすい。又、連動点Ｒ２の位置を任意の位置に移動することが可能である。これにより、オブリーク画像ＯＤ上の任意の位置を中心としてオブリーク画像ＯＤを回転することができる。

又、回転処理部１７は、上下方向、左右方向の回転として例えば図１２に示すように表示領域提示図形データＴ上のクリックポイントｑ１又はｑ４の辺を当該表示領域提示図形データＴの内側にドラッグ操作して移動すると、例えばクリックポイントｑ２、ｑ３を有する各辺の中点を結ぶラインｘ１を軸としてオブリーク画像ＯＤの断面位置を矢印Ｄ１方向に回転させる。又、回転処理部１７は、表示領域提示図形データＴ上のクリックポイントｑ２又はｑ３の辺を当該表示領域提示図形データＴの内側にドラッグ操作して移動すると、例えばクリックポイントｑ１、ｑ４を有する各辺の中点を結ぶラインｘ２を軸としてオブリーク画像ＯＤの断面位置を矢印Ｄ２方向に回転させる。

次に、回転処理部１７は、交差線を軸とした斜め断面の回転として例えば図１３に示すようにアキシャル画像ＡＤ上に表示されている連動点Ｒ１の円中心付近を例えば矢印Ｅ方向にドラッグ操作して移動すると、交差線ＣＬ１を軸として表示領域提示図形データＴを回転する。これにより、交差線ＣＬ１を軸とした表示領域提示図形データＴの回転に応じてオブリーク画像ＯＤの断面位置が更新される。

次に、回転処理部１７は、アキシャル断面の交差線の回転として例えば図１４に示すようにアキシャル画像ＡＤ上の交差線ＣＬ１をドラッグする。例えば交差線ＣＬ１上の点ｇをドラッグして矢印Ｈ方向に移動する。これにより、アキシャル画像ＡＤの断面画像内で交差線ＣＬ１は、矢印Ｈ方向に回転する。この操作では、アキシャル画像ＡＤの断面自体が変更される。
次に、回転処理部１７は、オブリーク画像ＯＤの交差線の回転として例えば図１５に示すようにオブリーク画像ＯＤ上の交差線ＣＬ２をドラッグする。これにより、オブリーク画像ＯＤの断面画像内で交差線ＣＬ２は、矢印Ｊ方向に回転する。この操作によりオブリーク画像ＯＤの断面像も交差線ＣＬ２の回転と共に回転する。

例えば医師は、ディスプレイ７の画面７ａ上に表示されたアキシャル画像ＡＤとオブリーク画像ＯＤとを観察して読影を行うとき、例えば図１６に示すようにコロナル画像ＣＤとアキシャル画像ＡＤ、及びこれらコロナル画像ＣＤ、アキシャル画像ＡＤとの間に交差線ＣＬ10、ＣＬ11を表示することが多く用いられる。直交３断面の表示では、さらにサジタール画像も追加される。
しかるに、識別図式表示部１２は、操作者の操作部５に対する操作を受けて、例えば図１６に示すようにコロナル画像ＣＤとアキシャル画像ＡＤ、これらコロナル画像ＣＤ、アキシャル画像ＡＤとの間に交差線ＣＬ10、ＣＬ11を表示する。このような表示の場合、表示領域提示図形データＴは、アキシャル画像ＡＤの断面像のみでなくコロナル画像やサジタール画像にも表示する。オブリーク画像ＯＤ上に表示する交差線ＣＬ12は、アキシャル画像ＡＤの交差線ＣＬ10のみでなくコロナル画像上の交差線ＣＬ11にも対応する。

又、識別図式表示部１２は、複数のリファレンス画像として例えばＭＩＰ画像（コロナル）等の３次元画像データＭＤを用いることも可能である。この場合、例えば図１６に示すように交差線ＣＬに類似の直線ＲＬを表示することが可能である。この直線ＲＬ及び各連動点Ｒ10、Ｒ11、Ｒ12、Ｒ13は、ＭＩＰ画像等の３次元画像とオブリーク画像ＯＤとの位置関係を特定する手がかりとして有用である。

ＭＩＰ画像等の３次元画像は、任意に回転可能であることが多い。この場合、アキシャル画像ＡＤやコロナル画像等の他のリファレンス画像との位置関係、視線方向の関係を同定できることが重要である。識別図式表示部１２は、例えば図１７に示すようにオブリーク画像ＯＤの表示に代えて任意視線方向のＭＩＰ画像を表示する。ここで、交差線は実際には定義できないが、これに代り連動点Ｒ14を通り視線方向に平行な直線ＲＬａを表示する。この直線ＲＬａと連動点Ｒ14とは、ＭＩＰ画像の３次元画像とアキシャル画像ＡＤやコロナル画像等のリファレンス画像との間の位置を特定する手がかりとして有用である。

又、識別図式表示部１２は、例えばＣＴスキャナ、ＭＲＩ装置又は超音波診断装置等の医用機器により期間を隔てての撮影により取得された３次元画像、例えば図１８に示すように例えば検査日時２００５年８月に取得されたアキシャル画像ＡＤ１とそのオブリーク画像ＯＤ１を表示すると共に、例えば検査日時２００６年４月に取得されたアキシャル画像ＡＤ２とそのオブリーク画像ＯＤ２を同時にディスプレイ７の画面７ａ上に表示する。この場合、既存の位置合わせ手法を適用することにより２組のアキシャル画像ＡＤ１、ＡＤ２とそのオブリーク画像ＯＤ１、ＯＤ２との断面位置を合わせて例えば各連動点Ｒ１、Ｒ２の各対応点Ｋ１、Ｋ２を表示できる。

このように上記一実施の形態によれば、ディスプレイ７の画面７ａ上に、アキシャル画像ＡＤを表示し、これと共に当該アキシャル画像ＡＤに対する斜め方向の断面であるオブリーク画像ＯＤを表示するもので、アキシャル画像ＡＤに対するオブリーク画像ＯＤの斜め方向又はオブリーク画像ＯＤの断面の位置のうちいずれか一方の変更に応じて変更され、かつオブリーク画像ＯＤのアキシャル画像ＡＤに対する視線方向やその位置・向きを識別可能とする表示領域提示図形データＴを表示する。これにより、アキシャル画像ＡＤとこのアキシャル画像ＡＤにおけるオブリーク画像ＯＤとを表示する際に、少なくとも３次元画像に対するオブリーク画像ＯＤの視線方向やその位置関係、さらにはオブリーク画像ＯＤの左右方向、上下方向、表裏の向きを容易に把握することができる。

このうち図２に示すようにアキシャル画像ＡＤ上とオブリーク画像ＯＤ上とにそれぞれ交差線ＣＬ１、ＣＬ２を表示するので、オブリーク画像ＯＤの断面位置をユーザにより直感的に特定するのに有力な手がかりとすることができる。
図２に示すようにアキシャル画像ＡＤとオブリーク画像ＯＤとに連動図形としての連動点Ｒ１、Ｒ２をそれぞれ表示するので、オブリーク画像ＯＤの断面位置を特定する上で交差線よりもさらに有力で詳細な手がかりとすることができる。

図２に示すようにディスプレイ７の画面７ａ上に表示するアキシャル画像ＡＤ中に、オブリーク画像ＯＤの表示領域を示す第１の表示領域図形データとしての例えば平行四辺形等の四辺形の形状された表示領域提示図形データＴを表示し、かつ２つの視線方向矢印Ｙ１、Ｙ２を表示するので、これら視線方向矢印Ｙ１、Ｙ２によって上下方向、表裏の向き等が識別可能できる。これと共に、図２に示すようにディスプレイ７の画面７ａ上に表示するオブリーク画像ＯＤ中に表示領域提示図形データＴに対して位置を対応させた表示領域参照図形データＳを表示するので、表示領域提示図形データＴと表示領域参照図形データＳとを観察することによりユーザは、アキシャル画像ＡＤの断面画像から如何なる方向に回転等した画像がオブリーク画像ＯＤの断面画像であるかを直感的に把握できる。

又、表示領域提示図形データＴに対して回転指示を与えることによりオブリーク画像ＯＤを回転させて断面位置を移動させたオブリーク画像ＯＤを液晶ディスプレイ７の画面７ａに表示できる。これにより、オブリーク画像ＯＤ上の任意の位置を中心としてオブリーク画像ＯＤを回転することができる。さらに、上下方向、左右方向に限定した回転操作と、交差線を軸とした斜め断面の回転操作と、交差線の回転操作とを行うことができる。これにより、任意の断面位置のオブリーク画像ＯＤを表示することができる。
このような表示であれば、断面方向やその位置の認識に要する操作者の負荷を軽減し、誤認識を防止できる。ディスプレイ７の画面７ａ上に多くの領域を必要としない。

例えば医師は、ディスプレイ７の画面７ａ上に表示されたアキシャル画像ＡＤとオブリーク画像ＯＤとを観察して読影を行うとき、例えば図１６に示すようにコロナル画像ＣＤとアキシャル画像ＡＤ、及びこれらコロナル画像ＣＤ、アキシャル画像ＡＤとの間に交差線ＣＬ10、ＣＬ11を表示することが多く用いられる。しかるに、識別図式表示部１２は、操作者の操作部５に対する操作を受けて、例えば同図に示すようにコロナル画像ＣＤとアキシャル画像ＡＤ、これらコロナル画像ＣＤ、アキシャル画像ＡＤ等を表示し、これらコロナル画像ＣＤとアキシャル画像ＡＤ、これらコロナル画像ＣＤ、アキシャル画像ＡＤ等との間に交差線ＣＬ10、ＣＬ11を表示できる。従って、コロナル画像ＣＤとアキシャル画像ＡＤ、これらコロナル画像ＣＤ、アキシャル画像ＡＤ等との間の位置関係の認識が容易にできる。

又、識別図式表示部１２は、少なくとも１つのアキシャル画像ＡＤ１、ＡＤ２と、これらアキシャル画像ＡＤ１、ＡＤ２に対して時間情報に対応するオブリーク画像ＯＤ１、ＯＤ２などとを１対として複数対表示する。例えば図１８に示すように時間情報として例えば検査日時２００５年８月に取得されたアキシャル画像ＡＤ１とそのオブリーク画像ＯＤ１を表示すると共に、例えば時間情報として検査日時２００６年４月に取得されたアキシャル画像ＡＤ２とそのオブリーク画像ＯＤ２を同時にディスプレイ７の画面７ａ上に表示できる。これにより、期間の隔てたアキシャル画像ＡＤ１とそのオブリーク画像ＯＤ１、アキシャル画像ＡＤ２とそのオブリーク画像ＯＤ２との間でも位置関係の認識が容易にできる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

本発明に係る３次元医用画像表示装置の一実施の形態を示す構成図。 同装置により表示されるアキシャル画像データの断面像とオブリーク画像データの断面像とを示す模式図。 同装置により表示される連動点の移動による断面画像の変更の作用を示す摸式図。 同装置により表示される連動点の移動後に変更される断面画像を示す摸式図。 同装置による左右方向の識別表示の一例を示す模式図。 同装置による表裏方向の不確定な表示例を示す模式図。 同装置による前後方向の識別の表示の一例を示す模式図。 同装置による表裏方向の識別の表示の一例を示す模式図。 同装置による前後方向の不確定性を解決する他の表示例を示す模式図。 同装置の回転操作によるオブリーク画像の回転の表示例を示す模式図。 同装置の回転操作によるオブリーク画像の上下・左右方向の回転の表示例を示す模式図。 同装置の回転操作によるオブリーク画像の上下・左右方向の回転を説明するための模式図。 同装置による交差線を軸とした斜め断面の回転作用を示す摸式図。 同装置によるアキシャル断面の交差線の回転作用を示す摸式図。 同装置によるオブリーク画像の交差線の回転作用を示す摸式図。 同装置による複数のリファレンス画像を表示したときの識別表示の一例を示す模式図。 同装置による複数のリファレンス画像を表示したときの識別表示の一例を示す模式図。 同装置による期間を隔てての撮影により取得された各３次元画像の比較表示の一例を示す模式図。

符号の説明

１：主制御部、２：プログラムメモリ、３：画像メモリ、４：表示制御部、５：操作部、６：通信部、７：液晶ディスプレイ、７ａ：ディスプレイの画面、８：医用機器、１０：リファレンス画像作成部、１１：オブリーク画像作成部、１２：識別図式表示部、１３：交差線作成部、１４：連動点作成部、１５：表示領域提示図形作成部、１６：表示領域参照図形作成部、１７：回転処理部。

Claims (13)

1. リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示装置において、
   前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部、
   を具備し、
   前記識別図式表示部は、前記リファレンス画像データ中に前記斜め断面画像データの表示領域を示す第１の表示領域図形データを表示すると共に、前記斜め断面画像データ中に前記図式データに対して位置を対応させた第２の表示領域図形データを表示し、かつ前記第１の表示領域図形データの形状の変更に応じて前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記断面の位置のうちいずれか一方又は両方を更新した前記斜め断面画像データを表示する、
   ことを特徴とする３次元医用画像表示装置。
2. リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示装置において、
   前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部、
   を具備し、
   前記識別図式表示部は、前記図式データとして前記リファレンス画像データと前記斜め断面画像データとが交差するところを示す交差線と、前記リファレンス画像データと前記斜め断面画像データとの同一位置を示す連動図形とをそれぞれ前記リファレンス画像データと前記斜め断面画像データとに表示し、かつ前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記断面の位置のうちいずれか一方の変更に応じて前記交差線と前記連動図形データとを更新する、
   ことを特徴とする３次元医用画像表示装置。
3. リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示装置において、
   前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部、
   を具備し、
   複数の前記リファレンス画像データを表示すると共に、前記斜め断面画像データを表示する場合、
   前記識別図式表示部は、前記複数のリファレンス画像データにそれぞれ前記図式データを表示し、かつ前記斜め断面画像データに前記各リファレンス画像データとの交差するところを示す交差線を表示する、
   ことを特徴とする３次元医用画像表示装置。
4. リファレンス画像データを表示すると共に、当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示装置において、
   前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの断面位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示する識別図式表示部、
   を具備し、
   複数の前記リファレンス画像データを表示すると共に、複数の前記斜め断面画像データを表示する場合、
   前記識別図式表示部は、少なくとも１つの前記リファレンス画像データと当該リファレンス画像データに対して時間情報に対応する前記斜め断面画像データとを１対とし、この対を複数表示し、かつ前記少なくとも１つのリファレンス画像データに前記図式データを表示し、かつ前記斜め断面画像データに前記各リファレンス画像データとの交差するところを示す交差線を表示する、
   ことを特徴とする３次元医用画像表示装置。
5. 前記識別図式表示部は、前記リファレンス画像データ上又は前記斜め断面画像データ上において前記連動図形の位置を変更すると、当該連動図形データの位置の変更に応じて前記斜め断面画像データ上又は前記リファレンス画像データ上で前記連動図形の位置を変更することを特徴とする請求項２記載の３次元医用画像表示装置。
6. 前記識別図式表示部は、前記図式データとして前記斜め断面画像データの前記リファレンス画像データに対する少なくとも上下方向、左右方向、表裏の向きを識別可能とする少なくとも第１の表示領域図形データを有することを特徴とする請求項１乃至４のうちいずれか１項記載の３次元医用画像表示装置。
7. 前記識別図式表示部は、前記第１の表示領域図形データとして視線方向を示す視線符号を表示し、かつ前記左右方向を識別可能とする表示形態を異ならせた左右符号を表示することを特徴とする請求項６記載の３次元医用画像表示装置。
8. 前記識別図式表示部は、前記図式データに対して回転指示を与えることにより前記斜め断面画像データを回転させて表示することを特徴とする請求項１乃至４のうちいずれか１項記載の３次元医用画像表示装置。
9. 前記識別図式表示部は、前記リファレンス画像データとしてアキシャル断面画像データ、サジタール断面画像データ、コロナル断面画像データ、投影３次元画像データ又はボリュームレタリング画像データのうち少なくとも１つの画像データを表示することを特徴とする請求項１乃至４のうちいずれか１項記載の３次元医用画像表示装置。
10. ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示方法において、
    前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、
    前記識別可能とする図式データの表示は、前記リファレンス画像データ中に前記斜め断面画像データの表示領域を示す第１の表示領域図形データを表示すると共に、前記斜め断面画像データ中に前記図式データに対して位置を対応させた第２の表示領域図形データを表示し、かつ前記第１の表示領域図形データの形状の変更に応じて前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記断面の位置のうちいずれか一方又は両方を更新した前記斜め断面画像データを表示する、
    ことを特徴とする３次元医用画像表示方法。
11. ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示方法において、
    前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、
    前記識別可能とする図式データの表示は、前記図式データとして前記リファレンス画像データと前記斜め断面画像データとが交差するところを示す交差線と、前記リファレンス画像データと前記斜め断面画像データとの同一位置を示す連動図形とをそれぞれ前記リファレンス画像データと前記斜め断面画像データとに表示し、かつ前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記断面の位置のうちいずれか一方の変更に応じて前記交差線と前記連動図形データとを更新する、
    ことを特徴とする３次元医用画像表示方法。
12. ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示方法において、
    前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、
    複数の前記リファレンス画像データを表示すると共に、前記斜め断面画像データを表示する場合、
    前記識別可能とする図式データの表示は、前記複数のリファレンス画像データにそれぞれ前記図式データを表示し、かつ前記斜め断面画像データに前記各リファレンス画像データとの交差するところを示す交差線を表示する、
    ことを特徴とする３次元医用画像表示方法。
13. ディスプレイの画面上に、リファレンス画像データを表示し、これと共に当該リファレンス画像データに対する斜め方向の断面である斜め断面画像データを表示する３次元医用画像表示方法において、
    前記リファレンス画像データに対する前記斜め断面画像データの前記斜め方向又は前記斜め断面画像データの位置のうちいずれか一方の変更に応じて変更され、かつ前記斜め断面画像データの前記リファレンス画像データに対する視線方向とその位置を識別可能とする図式データを表示し、
    複数の前記リファレンス画像データを表示すると共に、複数の前記斜め断面画像データを表示する場合、
    前記識別可能とする図式データの表示は、少なくとも１つの前記リファレンス画像データと当該リファレンス画像データに対して時間情報に対応する前記斜め断面画像データとを１対とし、この対を複数表示し、かつ前記少なくとも１つのリファレンス画像データに前記図式データを表示し、かつ前記斜め断面画像データに前記各リファレンス画像データとの交差するところを示す交差線を表示する、
    ことを特徴とする３次元医用画像表示方法。

Images