JP3993285B2

JP3993285B2 - 医療用画像表示方法

Info

Publication number: JP3993285B2
Application number: JP31233797A
Authority: JP
Inventors: ロジャー・エンゲルマン; ケネス・アール・ホフマン; ハーバー・マクマーン; 邦雄土井
Original assignee: アーチ・デベロップメント・コーポレーション
Priority date: 1996-11-29
Filing date: 1997-11-13
Publication date: 2007-10-17
Anticipated expiration: 2017-11-13
Also published as: US5987345A; JPH10155746A

Description

【０００１】
【発明の属する技術分野】
本発明は、医療用画像の表示方法及びシステムに係り、詳細には、コンピュータ支援診断結果と共に医療用画像を表示するための表示方法及びシステムに関する。
【０００２】
【従来の技術】
診断精度を向上すると共に、読影者による画像解釈の１致を図るために、病変部の自動検出と、正常及び異常パターンの特徴化づけを行うコンピュータ支援診断（ＣＡＤ）装置が開発されている。コンピュータの出力は、読影者が最終的に診断する前に、補足的な判断材料として利用されている。ＣＡＤ装置は、肺小結節、間質性浸潤、心臓サイズ、気胸、並びに肺レントゲン写真での間隔変化の自動検出と、乳房造影像での塊およびクラスター化したミクロ石灰沈着物の検出と、血管撮影像での狭窄病変部の分析と、骨レントゲン写真での骨折および骨多孔症の危険の分析等の様々に活用されている。
【０００３】
普通、読影者は、画像の全体を調べる。この画像には、たいていは矢印、丸印、三角印または四角印といった形態のマークが施されたＣＡＤ結果が重ねられている。抽出した異常等が多数になると、画像に重ねられるマークの数も多くなり、画像は見難くなり、診断するのが困難になる。従って、読影者による画像診断を妨げることなくＣＡＤ結果を見ることができるような形態で画像を表示することが必要になる。
【０００４】
さらに、ＣＡＤにかけた多数の画像を自動的に連続して表示することになる。ある時間にわたって多数の画像を患者から得る場合もある。この場合には、読影者が患者の状態変化を知ることができるような情報、すなわち、二つの画像の差を表示することがさらに必要になる。
【０００５】
【発明が解決しようとする課題】
本発明の目的は、多数の原画像や差分画像を簡単な操作で効率的に表示するための新規な医療用画像表示方法を提供することにある。
【０００６】
【課題を解決するための手段】
本発明による医療用画像表示方法は、第１時刻の組織構造を表す第１医療用画像を取得し、前記第１時刻と時間的に分離した第２時刻の組織構造を表す第２医療用画像を取得し、前記第１、第２の医療用画像を差分して、前記第１、第２の時刻の間の組織構造上の変化を強調した差分画像を発生し、前記第１医療用画像に関する少なくとも一つの第１診断画像を取得し、前記第１診断画像各々は前記第１医療用画像を含み、前記第１医療用画像にはコンピュータ自動診断結果を表す診断コメントが重ねられ、前記診断コメントは前記組織構造の部位間の関係に表示され、前記第１医療用画像と前記第２医療用画像と前記差分画像と前記第１診断画像との一つを第１画面の第１エリアに表示し、前記第１エリアに表示された画像と比較するために、前記第１医療用画像と前記第２医療用画像と前記差分画像と、前記診断コメントを含む前記第１診断画像とを前記第１画面の第２エリアに表示する。
【００１１】
【発明の実施の形態】
以下、図面を参照して、本発明を好ましい実施形態により説明する。図１は本実施形態の医療用画像表示システムの構成をブロック図で示している。まず、複数の医療用画像が、画像メモリー／アーカイブ１０に記憶されている。メモリー／アーカイブ１０は、電子的記憶装置、磁気的記憶装置、光記憶装置、またはこれら３つの組み合わせからなる。例えば、最近の比較的新しい画像をＲＡＭや磁気ディスクに記憶し、過去の比較的古い画像をマルチディスクファイルシステム内の光ディスク上に記憶することが一般的である。
【００１２】
コンピュータ支援診断（ＣＡＤ）は、一般的に、正常パターンと異常パターンの特徴づけを行い、病変部として確率の高い部位を自動的に検出するというものであり、例えば肺小結節の検出、間質性浸潤の検出、心臓サイズの検出、気胸及び肺レントゲン写真での間隔変化の検出、乳房造影像での塊およびクラスター化したミクロ石灰沈着物の検出、血管撮影像での狭窄病変部の分析、骨レントゲン写真での骨折および骨多孔症の危険の分析等を行うことができる。読影者は、このＣＡＤ結果を大いに参照して、精度よく診断を下すことができる。ＣＡＤの結果は、医療用画像と共にメモリー／アーカイブ１０に記憶され、画像再生システム１１により必要に応じて何時でも医療用画像と一緒に再生することができる。
【００１３】
再生のためには目的とする医療用画像を特定しなければならないが、このための検索情報としては、例えば患者名、画像個々に付けられた識別番号、モダリティー等が用いられている。読影者は、これらの検索情報を、キーボードやポインティングデバイスで構成されているユーザインターフェース１３を介して縫うすることができる。
【００１４】
再生システム１１は、インターフェース１３から入力された検索情報に従って読影対象とされている少なくとも１枚の医療用画像を、メモリー／アーカイブ１０から読み出す。表示システム１２は、再生システム１２で読み出された医療用画像を表示するために、表示器１４に転送する。表示器１４は、普及形の画像表示端末を流用してもよいが、高速且つ高解像度の専用表示装置であることが好ましい。ユーザインターフェース１３は、表示器１４上の画像の表示制御のために必要な各種コマンドやデータを表示システム１２に与える。
【００１５】
再生及び表示システム１１、１２は、図１に示すように、分離されていてもよく、またユニット化されていても良い。例えば、ネットワークサーバー／コンピュータは、端末、ワークステーションまたはパーソナルコンピュータと接続されている間、再生表示に必要な全ての機能を代行できるようにプログラムされている。また、ネットワークサーバー／コンピュータは、ワークステーション又はパーソナルコンピュータが表示プログラムを施されている場合、再生機能を手に入れることができる。使用される構成及び必要な機能の分配はシステム全体の個々に必要な箇所に適合することができる。
【００１６】
表示システム１２のより詳細な構成を、図２に示している。表示システム１２は、様々な回路の他に、再生システム１１及びインターフェース１３からの医療用画像入力、ＣＡＤ結果入力、コマンド入力、表示を実現するためのコントローラ２０を有している。表示システム１２は、原画像を、例えば７７×１０４ピクセル（または７５×８４ピクセル）に縮小するために、患者の原画像をサブサンプリングするサブサンプリング回路２１を有している。さらに、表示システム１２には、ＣＡＤ結果、例えば、検出した肺小結節、検出した間質性浸潤、心臓サイズ等を、読影者に知らしめるためのマーカや補助線等を医療用画像に重畳する機能を有するＣＡＤ結果回路２２と、ユーザが画像の明るさやコントラストを調整したり、画像の一部を拡大（縮小）するための画質調整回路２３とが設けられている。
【００１７】
ある種のＣＡＤプログラムでは良好なＣＡＤ結果が得られないときは、ユーザはＣＡＤ回路２４に他のＣＡＤプログラムを実行させて、その結果を画像に重ね合わせるように指示することができる。
【００１８】
表示システム１２は、過去の画像と、現在の画像とをフレーム間で差分するための時間差分回路２５を有することができる。この差分画像は、患者の病状が時間と共にどのように悪化、又は快方に向かっているかを観察する際に有効な情報を読影者に提供することができる。メモリー２６には、表示システム１２にロードされた画像と、表示システム１２により作成された差分画像とＣＡＤ結果等が記憶される。
【００１９】
以下に、表示及び再生システム１１及び１２の動作を詳細に述べる。以下では、医療用画像として胸部レントゲン写真を用いて、肺小結節、間質性浸潤、心臓サイズに基づいた診断を行う例を説明するが、他の種類の医療用画像でもよいし、他の診断目的であってもよい。例えば、乳房造影像や血管撮影像のような他の種類の画像で、乳癌や狭窄の診断を行うものであってもよい。さらに、図１及び２の表示システム１２の機能は、ハード的に実現してもよいし、コンピュータで読みとり可能な記憶媒体に記憶されているプログラムを使ってソフト的に実現してもよい。
【００２０】
なお、図１６乃至図２０に実際の表示画面を示している。図１６は主画像観察領域３１に表示される胸部Ｘ線画像を示すものである。図１６乃至図２０から明らかなように、本実施形態では、様々なプルダウンメニュー（図示せず）とアイコンのようなボタンが用意され、これらを使って効率的に読影を進めることができるようになっている。
【００２１】
最初に、図３を参照して、患者の選択と患者の画像について述べる。読影対象の患者を選ぶのは、制御領域３６内の“患者オープン(open patient)”というボタンをクリックするか、又はメニューバー３５上のファイルメニューの“患者(patient) ”というメニューを選択すると、患者リストがポップアップされるので、この中から指定することにより行われる。選択された患者に関する原画像（撮影されたままで、何の加工も施されていない又は最小限の加工しか施されていない画像）と、それぞれに関するＣＡＤ結果とが、メモリー／アーカイブ１０から表示システム１２へロードされる。ハード的又はソフト的に時間差分回路２５により生成された差分画像もロードされる。患者情報領域３２には、メモリー／アーカイブ１０からロードされた医療用画像にリンクしている患者名や患者又は画像自体の識別番号（ＩＤ）が表示される。
【００２２】
医療用画像は、画素値に応じた輝度が与えられ濃淡表示される。この明るさやコントラストの調整は、画質調整回路２３のハード的又はソフト的に実現されるウインドウ技術を使って行うことができる。
【００２３】
メオリー／アーカイブ１０の中に最新の原画像（“現在”）と、最も古い画像（“過去”）との間に、差分画像が存在するのであれば、その中で最も最近の差分画像とその原画像も参照用として選択する。このような差分画像と、それを生成するのに用いた過去画像と現在画像とからなる３種類の画像セット（以下、これを差分セットと称する）は、表示器２６の画面内の限定された主画像観察領域３１と称するウインドウに同時に表示する（図１９）。この表示形態を、“セット表示”と称する。ＣＡＤ／画像選択領域３２には、差分画像にデザインされた複数のボタンが配置される。これらのボタンを使って、ユーザは、主画像観察領域３１で現在画像、過去画像、ＣＡＤ結果を自由に切り換えて観察でき、また読影対象の複数枚の画像を１度に確認することができる。
【００２４】
仮に現在画像と過去画像との間に差分画像が無い場合は、主画像観察領域３１には現在画像のみが表示される。このときＣＡＤ／画像選択領域３２には、ボタンは１つだけ表示される（後述する）。
【００２５】
読影対象の画像が複数あれば、ユーザはＣＡＤ／画像選択領域３２内で、現在の原画像または古い原画像を、小結節、間質性浸潤および心臓サイズ等のＣＡＤ結果の種類とともに選択することができる。差分画像だけを単独で表示することもできるし、また差分画像を、それを生成するのに用いた新しい画像や古い画像と一緒に表示することも可能である。さらに、ユーザは、例えば、ＣＡＤ結果を重畳するさせることなく、また小結節のＣＡＤ結果、間質性浸潤のＣＡＤ結果、心臓サイズのＣＡＤ結果を１つ又は任意に組み合わせて画像に重畳表示することもできる。
【００２６】
メニューバー３５又はＣＡＤ／画像選択領域３２内のある画像が選択された場合、画像全体にわたって複数のマーカが示され（図１７）、ＣＡＤ結果がテキストとしてＣＡＤ情報領域３４に示される。ＣＡＤ／画像選択領域３２には、読影対象の画像とＣＡＤ結果とが重ねて表示される。胸部Ｘ線写真の場合、ＣＡＤにより、小結節、間質性浸潤、心臓サイズが検出され得る。図１６で示されているように、ＣＡＤ／画像選択領域３２には、例えば２つの過去画像(previous1,previous2) と、それぞれ３つづつのＣＡＤ結果と表示される。時間差分画像はこれらの画像と同じ並びには表示されず、別の行に表示される。
【００２７】
ＣＡＤ／画像選択領域３２の中のボタンは、サブサンプリング回路２１で得られる縮小画像にデザインされている。なお、この縮小画像には、ＣＡＤ結果が重ねられている。
【００２８】
主画像観察領域３１に現在表示されている画像のＣＡＤ結果は、必要に応じてメニューバー操作で取り出すことができる。加えて、読影中の画像に対応する差分画像や、差分セットをメニューバー操作で表示切り替えすることができる。
【００２９】
他の画像が指定されたならば、画面３０は、他の画像／差分選択用の画面（図１３）に切り替わり、この患者に対して入手可能な画像並びに差分画像の全てが表示される。ユーザは、主画像観察領域３１に戻って、１つの画像を選択することができ、選択された画像が表示される。
【００３０】
図３に示すように、ユーザは“最新画像(newest images) ”というボタンを押すことで、当該患者の最新画像を選択し表示させることができる。また、当該患者が撮影中のとき、そのメッセージが表示される。従って、現在画像と過去画像との間に差分セットが存在するのであれば、最新のセットが選択され、さもなければ現在画像のみが選択される。
【００３１】
ここで本発明の特徴をより詳細に述べる。図３で示される主画面３０では、ユーザはある患者に関する差分セット、もしくは１枚の画像を念入りに徹底的に読影することができる。図３は表示システム１２により表示器１４上に生成された主画面を示している。この主画面を見ながら、ユーザは、インターフェース１３を介して再生システム１１や表示システム１２に対する所望の命令や情報を入力することができる。
【００３２】
主画面３０は、主画像観察領域３１、ＣＡＤ／画像選択領域３２、患者情報領域３３、ＣＡＤ情報領域３４、メニューバー３５、制御領域３６という７つの領域で構成される。なお、図３には示されていないが、必要に応じて主画面３０上に患者選択ウインドウをポップアップすることができる。なお、図１６乃至図２０の“Anne Ibodhy ”は、患者名である。
【００３３】
図３で示されているように、主画像観察領域３１とＣＡＤ／画像選択領域３２が重要である。ＣＡＤ／画像選択領域３２に表示されている複数の画像（ボタン）を指示することにより、任意の画像を大きなオリジナルサイズで主画像観察領域３１に表示させることができる。患者情報領域３３には、主画像観察領域３１に表示されている画像の患者に関する患者情報が表示される。ＣＡＤ情報領域３４では、ＣＡＤ結果をテキスト（文字）で表示するために割り当てられている。メニューバー３５のデザインは固定的ではなく、例えば制御領域３６で画質調整コマンドを指示した時には、それに応じたデザインに変化する。
【００３４】
主画像観察領域３１にオリジナルサイズで表示された原画像や差分画像を観察して、読影を詳細に進めることができる。例えば、原画像は濃淡で表現されるが、濃淡特性を決める明るさとコントラストは、画質調整回路２３の機能を利用してユーザが自由に調整できるようになっている。例えば、マウスボタンをクリックしたままで、ポインタで画像全体を指定するか、又は、メニューバー内のコントロールメニューからウインドウを選択する（図示せず）ことで行われる。本実施形態では、コントラストと明るさを変えると、それは画面全体に影響するようになっている。
【００３５】
メモリー／アーカイブ１０に記憶されている画像は、それぞれ固有の識別情報、ここでは日付番号が付与されている。これは読影作業に対して与えられる固有の番号であり、その読影日付と密接に関わるものである。ユーザを支援するために、日付番号が主画像観察領域３１内の下の方に配置されている（図１６）。
【００３６】
このシステムに搭載されている拡大機能を活用して、ユーザは必要に応じて画像の中の所望の一部分を拡大することができる。それは拡大メニュー（図示せず）中の拡大ボタンもしくは拡大選択として制御領域３６から選択される。拡大表示は拡大ボタンを再び押すか、拡大メニュー中の非選択を選ぶことで解除することができる。
【００３７】
拡大表示の指示がなされたとき、画質調整回路２３は主画像観察領域３１の１部を拡大領域４０に割り当てて、ここに図４で示されているように、画像の一部分をＣＡＤ結果と共に拡大表示する。拡大処理は、サブサンプリング又はピクセル補間等の既存技術でかまわない。ユーザは、例えばマウスの左ボタンを押したままでマウスを移動させることで、その画像に対する拡大領域４０の位置を自由に動かすことができる。また、拡大率は、マウスの左右ボタンを１回押すごとに少しずつ高く又は低くなるように、またはマウスを移動することで拡大率を上げるか下げることができる。この拡大操作のレスポンスは速い。
【００３８】
拡大領域４０の大きさは、制御領域３６中の拡大サイズスライダー（図１６）を操作して自由に調整することができる。ユーザがスライダーを左に移動するにつれ、拡大領域がより小さくなり、また、スライダーを右に移動するにつれ、拡大領域が大きくなる。スライダーを右いっぱいに移動すると、主画像観察領域３１の全部または大部分が拡大領域となる。
【００３９】
ＣＡＤ／画像選択領域３２には、ＣＡＤ結果が重畳された縮小画像にデザインされた複数のボタンが表示される。図では、これらは左詰めに配列しているが、他の配置も可能である。ある画像のＣＡＤ結果、例えば小結節の検出結果を見るために、ユーザはＣＡＤ／画像選択領域３２内の小結節ボタンを押すか、結果メニュー（図示せず）内の小結節選択肢を選択する。
【００４０】
小結節ボタンを指示したとき、主画像観察領域３１に表示される画像が図５に示されている。この画像には、小結節として可能性の高い部位の場所を示すための矢印５０が重畳されている。これと同時に、図１６で示されているように、ＣＡＤ情報領域３４には、その結果が正常（小結節が無い）であるというメッセージ又は異常（１つ以上の小結節がある）であるというメッセージと、検出された小結節の数とが表示される。
【００４１】
間質性浸潤を検出するＣＡＤ結果を見るために、ユーザはＣＡＤ／画像選択領域３２内の間質性浸潤ボタンを指示するか、又は結果メニュー（図示せず）内の間質性浸潤選択肢を選択する。間質性浸潤ＣＡＤ結果の例が図６に示されている。間質性浸潤として可能性の高い部位が、マーカー６０で示されている。丸形マーカは小結節浸潤領域を示し、四角形マーカは網状浸潤領域を示し、三角形マーカは細網内小結節浸潤領域を示している。マーカの形状と、浸潤領域の種類との対応関係は、ＣＡＤ情報領域３４（図１７）内に表示される。
【００４２】
所定の基準に応じて選ばれたメッセージもＣＡＤ情報領域３４に表示される。例えば、被検対象領域の４分の１以上が異常であれば、画像の結果は異常であると見なされ、これ以外では正常と見なされる。
【００４３】
心臓サイズのＣＡＤ結果を見るためには、ユーザはＣＡＤ／画像選択領域３２内の心臓サイズボタンを指示するか、又は、結果メニュー（図示せず）内の心臓サイズ選択肢を選ぶ。心臓サイズＣＡＤ結果の例が図７に示されている。ここでは、トレースした心臓の輪郭を画像上に表示することができるし、２つの平行なバー７０により胸郭を表すことができる。さらに２つの平行なバー７１により、心臓サイズ検出ルーチンによる心臓胸郭比の測定に用いた最縮胸郭を示すことができる。測定された心臓胸郭比ＣＡＤ情報領域３４内に配置される。
【００４４】
差分画像を見るには、ユーザはＣＡＤ／画像選択領域３２内の差分画像ボタンを指示するか、又はサブメニュー（図示せず）内のサブ選択肢を選択する。差分画像の下の方に表示される日付番号は、その差分画像を生成するのに用いた新しい画像の日付番号と古い画像の日付番号との２種類が組み合わされている。
【００４５】
差分画像と、その差分画像を生成するのに用いた新しい画像と古い画像、つまり差分セットを同時に表示することができる。この一例を、図８に示す。ユーザは、ＣＡＤ／画像選択領域３２内の“all three ”というボタンを指示するか、又は、サブメニュー（図示せず）中の“全”ボタンを選択することで、３種類の画像を主画像観察領域３１に同時表示させることができる。
【００４６】
３種類の画像が主画像観察領域３１に同時表示されているとき、ＣＡＤ／画像選択領域３２のデザインは、図９に示すように、ユーザが新しい画像、古い画像、差分画像の中の１つだけを自由に取り出して、主画像観察領域３１を一杯に使って拡大表示することができるように変化する。新しい画像、古い画像、差分画像の中の１つが主画像観察領域３１に大きく表示されているとき、“縮小”というボタンが表示される。このボタンを指示すると、主画像観察領域３１の表示形態は、３種類の画像が同時に表示される形態に切り替わる。３種類の画像が同時に表示されているとき、それぞれの画像の下には“拡大”というボタンが表示され、このボタンを指示すると、その画像を主画像観察領域３１を一杯に使って拡大表示することができる（図１９）。
【００４７】
ＣＡＤ／画像選択領域３２には、文字列にデザインされたボタンが表示される。このボタンを指示すると、他の画像に切り替わり、また最新画像にショートカットできる。その上に表示されたボタンは、ＣＡＤ結果が重畳された縮小画像にデザインされている。領域３２中で利用されるボタンの配置は２種類あり、これらは１グループの差分画像または単一の原画像が読影中であるかどうかに依存している。
【００４８】
３種類の画像（差分セット）が主画像観察領域３１に表示されているとき、図１０で示されているように、１０個のボタンは、複数行に配置される。１種類の画像が主画像観察領域３１に大きく表示されているとき、４個のボタンは、図１１で示されるように、１行に配置される。いずれの場合も、“原画像(Original Image)”のボタンは、左端に配置される。この原画像ボタンを指示すると、ＣＡＤ結果が重畳されない状態で、新しい又は古い原画像が主画像観察領域３１に大きく表示される。
【００４９】
一方、小結節(Nodule CAD)のボタン、間質性浸潤(Interstitial CAD)のボタン、心臓サイズ(Heart Size CAD)のボタンは、原画像ボタンの右側に配列されている。これらの１つを指示することで、それに応じたＣＡＤ結果が重畳された状態で、原画像が主画像観察領域３１に大きく表示される。
【００５０】
さらに、差分画像(Subtraction Image) のボタンを指示すると、新しい画像から古い画像をフレーム間で差分した差分画像が主画像観察領域３１に大きく表示される。また、“３種画像(All Three) ”とデザインされたボタンを指示すると、差分画像と、それを生成するのに用いた新旧２つの原画像とが主画像観察領域３１に同時表示される。
【００５１】
これらのボタンは、それぞれのボタンが指示されたときに主画像観察領域３１中に大きく表示される画像の縮小画像にデザインされている。これらのボタンの１つが指示されたとき、当該ボタンのデザインは、縮小画像から何の変哲もないグレーのフレームに置き換えられる（図１９）。これにより、ユーザには、主画像観察領域３１に表示されているのが、どの画像でどのＣＡＤ結果であるのかを知ることができる。同一のボタンを２回指示すると、前画面に戻る。
【００５２】
ＣＡＤ／画像選択領域３２中のボタンの詳細が、図１２に示されている。ボタンは、そのラベル、縮小画像、日付番号、および陽性／陰性インジケータでデザインされている。原画像ボタンのラベルには、最新の現在画像と、２番目に新しい画像、３番目に新しい画像がある。小結節ボタンには“小結節”というラベルの文字が、間質性浸潤ボタンには“間質”というラベルの文字が、心臓サイズボタンには“心臓肥大”というラベルの文字がそれぞれ付けられている。また、差分ボタンには“差分ラベル(Subtraction) ”が付けられ、差分セットボタンには“３種画像(All Three) ”というラベル文字が付けられる。他のラベルも適宜利用されても良い。
【００５３】
これらのボタンは、サブサンプリング回路２１により例えば約７０×８５ピクセルに縮小された縮小画像の絵柄にデザインされている。従って、実際の画像とそのＣＡＤ結果の概要は、ボタンのデザインから概ね読み取れる。このようにデザインされたボタンから、ユーザは、例えば心臓サイズボタンから心臓の輪郭をある程度粗く見ることができる。さらに、３種画像ボタンでは、３種の画像がボタン内に表現されている（図１６）。
【００５４】
これらのボタンには、その下の方に日付番号が書き込まれている。差分画像ボタンおよび３種画像ボタンの下の方には、３つの日付番号が記入されている。
小結節および間質性浸潤を自動検出するＣＡＤプログラムの多くは、“陽性”または“陰性”の判定を下すことができる。また、この判定結果は、ＣＡＤボタンの右上部分のドットの色の違いで読影者に提供される。例えば、ドットが赤であれば、陽性を示し、緑が陰性を示している。このインジケータにより、ユーザは、ＣＡＤ／画像選択領域３２を見るだけで、ＣＡＤ結果をある程度見極めることができる。
【００５５】
制御領域３６は、画面内で主画像観察領域３１の真下に配置されており、そこには頻繁に利用される機能ツールボタンがデザインされている。第１ツールを使って、拡大率を調整することができるし、第２ツール（スライダーバー）を使って、拡大領域の大きさを調整することができる。また、第３ツールを使って、ウインドウを変えてコントラストや明るさを規定値にリセットしたり、任意に調整することができるし、第４ツールを使って、患者選択用のサブメニューをポップアップすることができる。
【００５６】
メニューバー３５は、大きめの標準的なＸ−ウインドウタイプのメニューバーであり、機能の種類毎にメニューデザインが変わるようになっている。ここではメニューバー３５のデザインは、ファイルメニュー、制御メニュー、拡大メニュー、結果メニュー、サブメニュー、実行メニューという６種類のメニューの中で自由に切り換えることができる。これらのメニューとそのそれらの内容を簡単に順次説明する。
【００５７】
まず、ファイルメニューには、患者選択ボタン、印刷バッファーボタン、分析ボタン、終了ボタンという４つのシステムコマンドボタンが含まれている。患者選択ボタンを指示すると、制御領域３６の中の患者選択用リストを開くことができるし、印刷バッファーボタンを指示すると、画像印刷を実行することができる。また、分析ボタンを指示すると、サブメニューが開いて、ヒストグラム分析やグレーレベルプロファイリングのような様々な分析モードを選択することができる。終了ボタンを指示すると、ファイルメニューを終了させることができる。
【００５８】
制御メニューには、ウインドウボタン、他画像ボタン、最新画像ボタン、隠れボタン、隠れ日付ボタンといった５つのシステムコマンドボタンが設けられている。ウインドウボタンを指示すると、ウインドウ調整のためのサブメニューをポップアップすることができる。他画像ボタンおよび最新画像ボタンは、ＣＡＤ／画像選択領域３２内の同一の名称を持つボタンと同じ機能が働く。隠れボタンを指示することにより、主画像観察領域３１内の全てのボタンを非表示にして、そのボタンに隠れて見えなかった画像の一部分を見ることができる。隠れ日付ボタンを指示することにより、日付番号を非表示にして、その日付番号に隠れて見えなかった画像の一部分を見ることができる。隠れボタン、隠れ日付ボタンをもう一度指示することで、これらボタンを再表示することができる。
【００５９】
拡大メニューには、通常および拡大という２つのシステムコマンドボタンが含まれている。これらは制御領域３６中の拡大ボタンの機能と同じである。
結果メニューには、無、小結節、間質性湿潤、心臓サイズといった４つのコマンドボタンが含まれている。これらボタンの機能は、ＣＡＤ／画像選択領域３２内の同じ名称のボタンとそれぞれ同じ機能を有している。
【００６０】
サブメニューには、新しい画像ボタン、差分画像ボタン、古い画像ボタン、３種画像ボタンが含まれている。これらボタンの機能は、ＣＡＤ／画像選択領域３２内の同じ名称のボタンとそれぞれ同じ機能を有している。
【００６１】
最後の実行メニューには、ＣＡＤプログラムの手動による実行開始ボタンが含まれている。
画像ロードに失敗したとき、その失敗した画像に撮影時が最も近い差分セットが読影用として選択される。このような差分セットが生成されていないときには、最新の原画像が読影用として選択される。読影者が他の差分セットを見たいか、又は現在の患者の他の原画像を見たい場合に備えて、他の画像／差分選択画面が設けられている。この画面は、主画面３０上のＣＡＤ／画像選択領域３２を選択するか、またはメニューバー上のコントロールメニューから他画像を選択することで選ばれる。主画面から最新の画像を選択することで、患者が読影のために載置された時に選ぶであろう読影用画像と同じ画像が選択される。
【００６２】
主画面３０上に表示されるＣＡＤ／画像選択領域１３０を図１３に示す。この領域１３０には、メモリー／アーカイブ１０に保持されている入手可能な全ての原画像と差分画像とが一覧表示される。これらの画像はＣＡＤ／画像選択領域１３０内で、図１４と図２０に示されているように、マトリックス状に配置される。あるボタンを押してある１つの画像を選択すると、そのボタンに対応した画像（原画像または差分画像）が画像下見領域１３１に表示される。
【００６３】
マトリクスの配置は、医療用画像が表示画面の水平方向に沿って撮影日順に配列され、また、医療用画像が表示画面の垂直方向に沿って撮影日順に配列され、そして、各垂直線と各水平線との交点に、それらが通過する２つの画像のサブトラクション像が表示される。そして、サブトラクション像の１つを選択することにより、選択されたサブトラクション像の拡大像を表示するようになっている。
【００６４】
画像下見領域１３１は、選択した画像が所望する画像であるか否かの確認ができる程度に十分大きいものである。その画像または差分画像に対応する日付番号が画像下見領域１３１の下の領域１３２に表示される。
【００６５】
画像下見領域１３１で確認した原画像または差分画像を、主画像観察領域に表示させるのは、他画像／差分マトリックス領域１３０内の特定のボタンを再びクリックするか、または画像下見領域１３１上をクリックすることで実現される。前検査ボタン１３３をクリックすると、前回の主画面３０へ戻ることができる。
【００６６】
他画像／差分マトリックス領域１３０の概略が図１４に示されている。もっとも古いものを除いて、患者の原画像（現在(CURRENT) 、過去１(PREV 1)、過去２(PREV 2)）のボタンが、領域１３０の右側に縦に並ぶ。また、最も新しい現在の画像を除いて、全ての原画像ボタンが領域１３０の最上に横に並ぶ。これらの行列の先頭は連続の画像番号がラベルされている。最も新しい画像は“現在(CURRENT) ”とラベルされ、２番目に新しい画像は“過去１(PREV 1)”とラベルされ、３番目に新しいものは“過去２(PREV 2)”とラベルされ、以下同様である。各組の原画像から作成される差分画像ボタンは、マトリクスの交差位置に配置される。差分画像は回路２５で作成されるかまたは記憶装置から再生される。
【００６７】
また、ユーザにより最も最近読影された原画像または差分セットが主画面３１に表示されるとき、そのユーザにより最も最近読影されたことを表すインジケータが付けられる。これは、例えば、小さな赤いボックスを用いて、ボタンの右上の角にＸをそれを介して配置することで行われる（図１４）。例えば、過去１から過去２を差分した差分画像を主画面３１に表示させて読影しているとき、これら過去１と過去２の交差部に位置する差分画像ボタンの上には、当該インジケータが付与される。
【００６８】
原画像ボタンの直上には、現在、過去１、過去２等のラベルが配置される。原画像ボタンは、そのボタンが対応している原画像の縮小画像にデザインされている。また、原画像ボタンの下の方にはその画像の日付番号が配置される。縮小画像は、サブサンプリング回路２１によって、例えば約７７×１０４ピクセルのサイズに縮小される。原画像ボタンの配置が図１５（ａ）および図２０に図示されている。
【００６９】
差分画像ボタンの直上には“差分”というラベルが配置されている。この差分画像ボタンも、その縮小画像にデザインされている。このボタンの下の方にも、この差分画像を生成するために用いた新旧２枚の原画像に関する２種の日付番号が配置される。差分画像のボタン配置は図１５（ｂ）に図示されている。
【００７０】
一人の患者に関する画像は通常複数枚存在するので、全ての組み合わせで差分画像を生成していることはおそらく無いと考えられる。基本的には、新しい画像が得られると、次の３つの差分が実行される。
１）現在画像とそれより１つ古い（過去画像現在画像を除いて最も新しい画像）との差分
２）現在画像とそれより２つ古い（過去画像現在画像を除いて２番目に新しい画像）との差分
３）現在画像とそれより３つ古い（過去画像現在画像を除いて３番目に新しい画像）との差分
他画像／差分マトリクス領域１３０の中で、実際には生成していない差分画像に対応するボタンは、縮小画像等に代えて、“利用不可”等のメッセージがデザインされている。このようなメッセージがデザインされているボタンをクリックすると、差分を実行するか否かの問い合わせメッセージがシステム側から提示される。ユーザが“行う”をクリックすると、サブサンプリング回路２５により、バックグラウンドで、差分処理が実行される。差分が完了した段階でユーザがこの患者をまだ読影中であった場合には、それをロードし、他画像／差分マトリクス領域１３０の中にその縮小画像ボタンを表示する。
【００７１】
本発明は、上述した実施形態に限定されることなく、種々変形して実施可能であるのは言うまでもない。例えば、ユーザが画像並びにコマンドをボタンおよびプルダウンメニューからポインティングデバイスを用いて選択するという画像の表示および操作を行うウインドウズ手法と結びつけて上述したが、このような手法に限定されるものではない。また、ボタンを異なった配列に配置することも可能であり、また、異なった情報を表示することも可能である。例えば、ボタンを縮小画像にデザインし、ユーザがこのボタンの縮小画像で下見することができるようにすれば、画像選択の助けとなる。ボタンのサイズ並びに形状は変更可能である。また、上述では、胸画像並びに特定のＣＡＤ技術に関して説明したが、他の画像並びに他のＣＡＤ技術に対しても適用できるのは勿論である。
【００７２】
【発明の効果】
画像切替ボタンは、ＣＡＤ結果を重畳した原画像の縮小画像にデザインされており、この縮小画像やＣＡＤ結果で確認しながら画像切替作業を行うことができる。このように画像を縮小することで、読影者は画像の確認だけでなく、ＣＡＤ結果を１度に見ることができる。また、縮小画像を選択することで、拡大画像も自由に見ることができる。
【００７３】
また、この方法及びシステムでは、差分画像を表示することができる。このシステムにより差分画像を作成（再生）し、その差分画像を縮小して拡大画像と一緒に表示することができる。差分画像により、読影者は患者の状態変化を迅速に知ることができる。
【００７４】
本発明の方法及びシステムは、様々なＣＡＤ結果を、ＣＲＴモニターまたはこれと等価な高速で高解像度の画像表示装置の画面内の主画像観察領域に表示する。また、郵便切手の大きさぐらいに縮小された縮小画像が切替ボタンとして、第２観察領域に表示する。縮小画像は機能ボタンとして活用される。いずれかのボタンを選択することで、そのボタンに対応した画像が大きめのサイズで主画像観察領域に表示される。また、現在の画像と過去の画像との比較結果が、ＣＡＤ結果と共に差分画像として配列され表示される。
【００７５】
より詳細には、システムは、様々なＣＡＤスキーム、例えば、胸の場合、その画像に対して肺小結節、間質性浸潤、心臓サイズ等の自動検出を表示することができる。また、この方法およびシステムによれば、病状の経過を時間差分がぞうで観察できる。ＣＡＤスキームからの個々の異常は、それらの中にＣＡＤ結果が重畳された縮小（切手サイズ）画像を有するボタンをクリックすることで見ることができる。これらの画像と結果は高速のモニターに表示される。現在画像と過去画像間の差分画像の縮小画像にデザインされたボタンをクリックすることで、当該差分画像を大きく表示させることができる。他の差分画像は、２次元アレイ状に配列された縮小差分画像ボタンから選ぶことで選択できる。アレイの隣の画像下見領域により、差分画像等を大きく表示させる前に、下見することができる。
【図面の簡単な説明】
【図１】本実施形態に係る医療用画像表示システムのブロック図
【図２】図１の表示システムのブロック図。
【図３】図１の表示システムにより生成された主画面を示す図。
【図４】拡大画像の表示例を示す図。
【図５】小結節を示すコンピュータ支援診断情報が重ね合わされた画像の表示例を示す図。
【図６】組織内浸潤を示すコンピュータ支援診断情報が重ね合わされた画像の表示例を示す図。
【図７】心臓サイズを示すコンピュータ支援診断情報が重ね合わされた画像の表示例を示す図。
【図８】古い画像と新しい画像とそれらの差分画像を示す図。
【図９】古い画像と新しい画像とそれらの差分画像との３者間の表示切替の動きを示す図。
【図１０】ＣＡＤ／画像選択領域内のボタン構造の１例を示す図。
【図１１】ＣＡＤ／画像選択領域内のボタン構造の他の例を示す図。
【図１２】ＣＡＤ／画像選択領域内のボタン構造の詳細図。
【図１３】ＣＡＤ／画像選択領域の画面構造の１例を示す図。
【図１４】図１３の他の画像／差分画像マトリックスの１例を示す図。
【図１５】原画像ボタン及び差分画像ボタンの１例を示す図。
【図１６】表示器の第１表示画面を示す中間調画像の写真。
【図１７】表示器の第２表示画面を示す中間調画像の写真。
【図１８】表示器の第３表示画面を示す中間調画像の写真。
【図１９】表示器の第４表示画面を示す中間調画像の写真。
【図２０】表示器の第５表示画面を示す中間調画像の写真。
【符号の説明】
１０…画像メモリ／アーカイブ、
１１…画像再生システム、
１２…表示システム、
１３…ユーザインタフェース、
１４…表示器、
２０…コントローラ、
２１…サブサンプリング回路、
２２…ＣＡＤ結果回路、
２３…画質調整回路、
２４…ＣＡＤ回路、
２５…差分回路、
２６…メモリー、
３０…主画面、
３１…主画像観察領域、
３２…ＣＡＤ／画像観察領域、
３３…患者情報領域、
３４…ＣＡＤ情報領域、
３５…メニューバー、
３６…制御領域。

Claims

第１時刻の組織構造を表す第１医療用画像を取得し、
前記第１時刻と時間的に分離した第２時刻の組織構造を表す第２医療用画像を取得し、
前記第１、第２の医療用画像を差分して、前記第１、第２の時刻の間の組織構造上の変化を強調した差分画像を発生し、
前記第１医療用画像に関する少なくとも一つの第１診断画像を取得し、前記第１診断画像各々は前記第１医療用画像を含み、前記第１医療用画像にはコンピュータ自動診断結果を表す診断コメントが重ねられ、前記診断コメントは前記組織構造の部位間の関係に表示され、
前記第１医療用画像と前記第２医療用画像と前記差分画像と前記第１診断画像との一つを第１画面の第１エリアに表示し、
前記第１エリアに表示された画像と比較するために、前記第１医療用画像と、前記第２医療用画像と前記差分画像と、前記診断コメントを含む前記第１診断画像とを前記第１画面の第２エリアに表示することを特徴とする医療用画像表示方法。
前記第１エリアに表示された画像と比較するために、前記第１医療用画像と前記第２医療用画像と前記差分画像と、前記診断コメントを含む前記第１診断画像とを、前記第１画面に表示した画像のサイズより小さいサイズで、前記第２エリアに表示することを特徴とする請求項１記載の医療用画像表示方法。
前記組織構造に関する第２医療用画像を取得し、
前記組織構造に関する前記第１、第２医療用画像を差分した差分画像を取得し、
前記差分画像と前記第１医療用画像と前記第２医療用画像とを表示することを特徴とする請求項１記載の医療用画像表示方法。
前記第１、第２医療用画像で分類された差分画像を表示することを特徴とする請求項３記載の医療用画像表示方法。
前記第１、第２医療用画像、前記差分画像、前記診断コメントを含む前記第１、第２診断画像を、前記第１画面に表示した画像のサイズより小さいサイズで、前記第２エリアに表示することを特徴とする請求項３記載の医療用画像表示方法。
前記第１、第２診断画像の縮小を前記第１、第２医療用画像の縮小にそれぞれ関連付けて、前記第２エリアに表示することを特徴とする請求項５記載の医療用画像表示方法。
前記第１、第２医療用画像、前記差分画像にそれぞれ対応する表示選択機能ボタンを前記第２エリアに表示し、
前記表示選択機能ボタンのいずれかが指定されたとき、対応する前記第１医療用画像、前記第１医療用画像又は前記差分画像を前記第１エリアに表示することを特徴とする請求項５記載の医療用画像表示方法。
前記表示選択機能ボタンには前記第１、第２医療用画像、前記差分画像それぞれ対応する縮小が重ねて表示されることを特徴とする請求項５記載の医療用画像表示方法。
前記第２エリアの前記選択された表示選択機能ボタンに前記縮小画像を表示するのに代えて、前記選択された表示選択機能ボタンを選択態様で表示することを特徴とする請求項８記載の医療用画像表示方法。
前記第２エリアに前記３つの表示選択機能ボタンの全てを設け、前記表示選択機能ボタンが指定されたとき、前記第１医療用画像、前記第２医療用画像又は前記差分画像が前記第１エリアに表示されることを特徴とする請求項９記載の医療用画像表示方法。
前記少なくとも一つの表示選択機能ボタンには、診断決定が表示されていることを特徴とする請求項９記載の医療用画像表示方法。
前記医療用画像に対応する識別情報を取得し、
前記医療用画像とともに前記識別情報を表示することを特徴とする請求項５記載の医療用画像表示方法。
前記第１エリアに表示された診断画像に対応する診断結果情報を前記第１画面に表示することを特徴とする請求項５記載の医療用画像表示方法。
前記第２エリアに、診断画像、前記第１医療用画像、前記第２医療用画像及び前記差分画像に対応する表示選択機能ボタンを表示し、
指定された表示選択機能ボタンに対応する画像を前記第１エリアに表示することを特徴とする請求項３記載の医療用画像表示方法。
前記表示選択機能ボタンが指定されていないとき、前記診断画像、前記第１医療用画像、前記第２医療用画像及び前記差分画像を縮小して前記表示選択機能ボタンに重ねて前記第２エリアに表示することを特徴とする請求項１４記載の医療用画像表示方法。
前記指定された表示選択機能ボタンに前記縮小画像を重ねて表示するのに代えて、前記指定された表示選択機能ボタンを選択態様で表示することを特徴とする請求項１５記載の医療用画像表示方法。
前記少なくとも一つの表示選択機能ボタンには、診断決定が表示されていることを特徴とする請求項１６記載の医療用画像表示方法。
前記第２エリアに前記３つの表示選択機能ボタンの全てを設け、前記表示選択機能ボタンが指定されたとき、前記第１医療用画像、前記第２医療用画像又は前記差分画像が前記第１エリアに表示されることを特徴とする請求項１５記載の医療用画像表示方法。
前記第２エリアに他の表示選択機能ボタンを表示し、前記他の表示選択機能ボタンが指定されたとき第２画面を生成し、前記第２画面には前記組織構造に関する複数の画像がマトリクス状に配置され、前記マトリクスは第１、第２の行を有し、前記第１の行にそって異なる時刻に取得された複数の医療用画像が配列され、前記第２の行の一端には医療用画像が前記第１の行の複数の医療用画像に対して側方にオフセットして配置され、前記第１の行の医療用画像の一つと前記第２の行に側方にオフセットされた画像とが前記第２の行の医療用画像の他の一つと前記第２の行に側方にオフセットされた画像とから差分されたとき、各差分画像は、その元となった前記第１の行の医療用画像とともに列方向に整列されて表示され、
前記第２画面に他の画像選択機能ボタンを指定可能に表示することを特徴とする請求項１５記載の医療用画像表示方法。
前記第２画面には第１、第２の表示エリアが設けられ、
前記医療用画像と前記差分画像に対応する表示選択機能ボタンを前記第２の表示エリアに表示し、
前記表示選択機能ボタンが選択状態にないとき、前記医療用画像と前記差分画像を縮小して前記第２表示エリアの表示選択機能ボタン上に重ねて表示し、
前記第１表示エリアに前記選択された表示選択機能ボタンに対応する前記医療用画像と差分画像を表示することを特徴とする請求項１９記載の医療用画像表示方法。
前記指定された表示選択機能ボタンに前記縮小画像を重ねて表示するのに代えて、前記指定された表示選択機能ボタンを選択態様で表示することを特徴とする請求項２０記載の医療用画像表示方法。
前記少なくとも一つの表示選択機能ボタンには、診断決定が表示されていることを特徴とする請求項１４記載の医療用画像表示方法。