JP4197108B2

JP4197108B2 - Medical image combined observation system

Info

Publication number: JP4197108B2
Application number: JP2002218895A
Authority: JP
Inventors: 元章齊藤; 一夫高橋
Original assignee: テラリコン・インコーポレイテッド
Priority date: 2002-06-25
Filing date: 2002-06-25
Publication date: 2008-12-17
Anticipated expiration: 2022-06-25
Also published as: JP2004024795A

Description

【０００１】
【発明の属する技術】
本発明は，医用画像データから作成した三次元画像と二次元画像を一台の超高精細画像表示装置の複数の表示領域に表示し，その三次元画像と二次元画像を関連付けることにより医用画像データの画像理解を容易にした医用画像複合観察装置に関する。
【０００２】
【従来の技術】
Ｘ線ＣＴ装置によって人体の物理的性質をあらわす正確な断面画像データが得られるようになった。初期のＸ線ＣＴでは一人の被検者に対して一回の検査で収集される断面画像データの数は１０枚〜２０枚であった。この断面画像データは最適の画像表示をするためにウインドウ処理などの画像処理を行った後，ＣＲＴなどの画像表示装置に表示される。従来の方法では，この画像表示装置に表示される画像をフィルムに順次焼き込む。一枚のフィルムには１２枚程度の画像を焼きこむことができるので，一回の検査で収集した２０枚の画像は２枚のフィルムに焼きこむことができる。従来の画像データの読影方法では，読影を担当する医師はこの２枚のフィルムをライトボックスに取り付けて，一回の検査で収集した２０枚の画像を読影する。また，過去の検査で収集した画像データを焼き込んだフィルムを同時にライトボックスに取り付けて，比較して読影することも行われている。
【０００３】
近年，Ｘ線ＣＴ装置の技術的進歩により，ヘリカルスキャンＸ線ＣＴ装置や多列検出器Ｘ線ＣＴ装置が実用化されるようになったので，断面画像データの断面間距離が狭い，より精密な画像データを取得することが可能になった。また，Ｘ線ＣＴ装置の技術的進歩により，患者への被曝Ｘ線量が大幅に低減された。これにともなって，一回の検査で収集される画像データの枚数が大幅に増加しており，例えば，１０００枚になることがある。
【０００４】
また，Ｘ線ＣＴ装置の技術的進歩により，短時間で画像データを収集することが可能になり，心臓などの拍動している臓器の画像が高画質で取得できるようになった。これにともなって，心臓の拍動を１０分割した各フェーズで画像データを取得する四次元収集も行われている。これによって，一回の検査で収集される画像データの枚数が大幅に増加しており，例えば，４０００枚になることもある。
【０００５】
画像データの大幅増加にともない，従来行われていた画像をフィルムに焼き込む方法では，一回の検査で収集した画像を焼き込んだフィルムの枚数が膨大になり，これらのフィルムの全てをライトボックスに取り付けて，読影することが困難になってきている。
【０００６】
画像データの大幅増加によって，従来行われていた画像を焼き込んだフィルムをライトボックスに取り付けて，読影することが困難になってきているので，多数の画像を一度に表示することができる高精細画像表示装置を複数台並べて，これに一回の検査で収集した画像を順次表示するいわゆる電子ライトボックスが試みられている。しかしながら一台の高精細画像表示装置に表示できる画像枚数は２４枚程度であるので，これを４台並べても一度に表示できる画像枚数は１００枚程度である。このため１０００枚〜４０００枚になる画像を効率よく表示して，読影する方法が求められている。
【０００７】
Ｘ線ＣＴ装置によって人体の物理的性質をあらわす正確な断面画像データが得られるようになって以来，異なる断面位置で撮影した複数の断面画像データを使用して三次元立体画像を再構成することが行われてきた。特に最近，ヘリカルスキャンＸ線ＣＴ装置や多列検出器Ｘ線ＣＴ装置が実用化されるようになったので，より精密な三次元立体画像を再構成することが可能になった。
【０００８】
医用画像の三次元表示法には被検体を構成する対象物の境界面を抽出した後，その境界面の形状を表示する表面表示法（サーフェスレンダリング法）と，被検体を物理的性質に対応した値を持つボクセルの三次元配列として取り扱うボリュームレンダリング法がある。三次元画像表示の場合には一般に三次元画像表示に使用する断面画像データの枚数が多いほうが精密な三次元画像を作成することが可能である。Ｘ線ＣＴ装置の技術的進歩により，より多くの枚数の断面画像データを使用して，ますます精密な三次元画像が作成されるようになった。
【０００９】
しかしながら，医用画像データを読影する医師にとって，精密な三次元画像であっても三次元画像表示だけではＸ線ＣＴ画像データの読影が難しい場合が多い。これはこれまでの訓練が二次元画像で行われてきたこと，三次元画像ではウィンドウレベルの設定が形状に影響することがあることなどによる。このためＸ線ＣＴ画像データの読影には三次元画像表示だけでなく，二次元画像表示も要求される。
【００１０】
このため三次元画像表示装置に隣接して，ライトボックスを設置し，三次元画像表示とフィルムによる読影を行っている。また，三次元表示装置に隣接して，電子ライトボックスを設置し，三次元表示と電子ライトボックスに表示した二次元画像による読影を行っている。しかしながら，これらの場合には，三次元表示装置に表示した三次元画像と二次元画像の連携が悪いので，三次元画像と二次元画像の相乗化による効果は期待できない。
【００１１】
【発明が解決しようとする課題】
三次元画像による被検体の立体構造の把握は二次元画像による把握よりも容易であるので三次元画像表示装置は広く用いられているが，三次元画像で発見した関心領域の確認には二次元画像を使用したいという要求がある。従来は，三次元画像装置に表示されている三次元画像と，二次元画像表示装置に表示されている二次元画像との連携が不十分であったので，三次元画像装置に表示されている三次元画像で発見した関心領域を，二次元画像表示装置に表示されている二次元画像上で特定することは困難であった。
【００１２】
Ｘ線ＣＴ技術の進歩によって，一回の検査で取得される画像データの枚数が増大し，ライトボックス上に全てのフィルムを一度に並べることは不可能になっている。また，二次元画像表示装置に二次元画像を表示する場合でも，全ての画像を一度に並べることは不可能である。このためにこの膨大な二次元画像をどのように取り扱うかが重要な課題になっている。
【００１３】
【課題を解決するための手段】
本発明は上記の課題を解決するために考案したもので，隣接して配置した複数台の高精細度画像表示装置を一台の超高精細画像表示装置として機能させ，これに多数の医用画像を表示することを可能にした。医用画像診断装置で収集した複数の二次元画像データで構成される医用画像データを使用して三次元画像を構築し，これを超高精細画像表示装置の三次元画像表示領域に表示する。また，この医用画像データを構成する二次元画像データに画像処理を施し，これを超高精細画像表示装置の二次元画像表示領域に表示する。医用画像データの選択，三次元画像表示領域に表示した三次元画像の画像処理と画像表示パラメータの変更，医用画像データを構成する二次元画像データの中から二次元画像表示領域に表示する二次元画像データの選択，二次元画像表示領域に表示した二次元画像の画像処理と画像表示パラメータの変更を一台のマンマシンインターフェースで操作することを可能にした。医用画像データの選択，三次元画像の表示関連処理，二次元画像表示領域に表示する二次元画像データの選択，二次元画像の表示関連処理を一台のマンマシンインターフェースで対話的に操作することを可能にすることにより，三次元画像と二次元画像の同時表示と三次元画像と二次元画像の関連付けを可能にし，医用画像データの画像理解を容易にした医用画像複合観察装置を用意した。
【００１４】
本発明によれば、三次元画像表示領域に表示した三次元画像上に関心領域を設定することにより，医用画像データの中から二次元画像表示領域に表示する二次元画像データの範囲を選択することを可能にする手段を具備し，三次元画像上で関心領域を移動することにより，医用画像データの中から二次元画像表示領域に表示する二次元画像データを選択することを可能にした医用画像複合観察装置を実現した。
【００１５】
三次元画像表示領域に表示した三次元画像上に関心領域を設定することにより，二次元画像表示領域に表示した二次元画像の中から対応する二次元画像を選択し，三次元画像上の関心領域に対応する関心領域をその二次元画像上に表示することを可能にする手段を具備し，三次元画像上に設定した関心領域に対応する二次元画像上の対応位置に関心領域を表示することを可能にすることにより，医用画像データの画像理解を容易にした医用画像複合観察装置を実現した。
【００１６】
医用画像複合観察装置にはマンマシンインターフェースの操作に基づいて，医用画像データの選択，三次元画像処理および画像表示パラメータ，二次元画像表示する画像データの選択，二次元画像処理および画像表示パラメータをネットワーク経由で発行する手段を具備した。医用画像診断装置または医用画像保管通信システム（ＰＡＣＳ）のネットワーク的近傍に，高速の画像処理装置とを設置し，医用画像複合観察装置が発行する指示に基づいて，医用画像データを取得し，これに三次元画像処理と画像表示処理，二次元画像処理と画像表示処理を行い，画像処理した結果をネットワーク経由で医用画像複合観察装置に送信する手段を具備した。これによって，ネットワークトラフィックの軽減と画像処理機能の有効活用を可能にした医用画像複合観察装置システムを実現した。
【００１７】
医用画像データに関する読影報告書の作成を支援し，これを超高精細画像表示装置の読影報告書表示領域に表示する手段を具備し，医用画像データの画像理解と読影報告者作成を容易にした医用画像複合観察装置を実現した。
【００１８】
【発明の実施の形態】
以下，本発明による医用画像複合観察装置について説明する。図１は本発明の実施例の構成を示す概略図である。
１０１は医用画像複合観察装置本体で，複数の高精細度画像表示装置で構成されている超高精細画像表示装置である。１０２は二次元画像表示領域，１０３は三次元画像表示領域，１０４は四次元画像表示領域・報告書作成領域を示す。
２０１は医用画像複合観察装置を操作するマンマシンインターフェースである。
２０２はパーソナルコンピュータで，医用画像複合観察装置本体を構成する複数の高精細画像表示装置に映像信号を供給し，マンマシンインターフェース２０１を制御する。
２０３はマンマシンインターフェースから高速画像処理装置への指示を示す。
３０１は医用画像データの三次元画像処理や二次元画像処理を行う高速画像処理装置である。
３０２は高速画像処理装置で処理された表示用三次元画像や表示用二次元画像を示す。
４０１はＸ線ＣＴ装置などの医用画像データを発生する医用診断装置，４０２は医用画像データを蓄積しているＰＡＣＳなどの画像データベースを示す。
４０３はネットワークである。
【００１９】
医用画像複合観察装置本体１０１は，一例として，画素数２０４８×３０７２の高精細画像表示装置１０台で構成されている。このうち８台を二次元画像表示領域１０２に使用している。画素数５１２×５１２のＸ線ＣＴ画像では，画素数２０４８×３０７２の画像表示装置には２４枚を表示することができるので，８台では１９２枚を一度に表示することができる。三次元画像表示領域１０３と四次元画像表示領域・報告書作成領域１０４には，この例では，画素数２０４８×３０７２の高精細画像表示装置をそれぞれ１台割り当てている。
【００２０】
利用者はマンマシンインターフェース２０１を操作して，三次元画像表示領域１０３に表示する画像データを選択すると，パーソナルコンピュータ２０２を経由して高速画像処理装置に，画像データの選択指示と三次元画像処理・二次元画像処理パラメータ２０３が送信される。
【００２１】
高速画像処理装置３０１はパーソナルコンピュータ２０２から送信された画像データの選択指示に基づいて，画像診断装置４０１やＰＡＣＳの画像データベース４０２に対して画像データの問い合わせと取得を行う。高速画像処理装置３０１自身がその画像データを所有している場合には，その所有している画像データを使用する。
高速画像処理装置３０１はパーソナルコンピュータ２０２から送信された画像処理パラメータに基づいて，三次元画像処理と二次元画像処理を行い，処理結果の画像データをパーソナルコンピュータ２０２に送信する。
【００２２】
パーソナルコンピュータ２０２は高速画像処理装置３０１から送信された三次元画像処理の結果データを医用画像複合観察装置の三次元画像表示領域１０３に表示する。また，高速画像処理装置３０１から送信された二次元画像処理の結果データを医用画像複合観察装置の二次元画像表示領域１０２に表示する。
【００２３】
利用者が，マンマシンインターフェース２０１を操作して，三次元画像表示領域１０３に表示された三次元画像データの画像処理パラメータを変更すると，その変更情報は，パーソナルコンピュータ２０２を経由して高速画像処理装置に送信される。高速画像処理装置３０１はパーソナルコンピュータ２０２から送信された画像処理パラメータに基づいて，パラメータを変更した三次元画像処理を行い，処理結果の画像データをパーソナルコンピュータ２０２に送信する。パーソナルコンピュータ２０２は高速画像処理装置３０１から送信された三次元画像処理の結果データを医用画像複合観察装置の三次元画像表示領域１０３に表示する。利用者がマンマシンインターフェース２０１を操作して，三次元画像表示領域１０３に表示された三次元画像データの画像処理パラメータを変更すると，変更した結果が三次元画像表示領域１０３に表示されるので，利用者は対話的に三次元画像処理パラメータを変更することができる。
【００２４】
利用者が，マンマシンインターフェース２０１を操作して，二次元画像表示領域１０２に表示された二次元画像データの画像処理パラメータを変更すると，その変更情報は，パーソナルコンピュータ２０２を経由して高速画像処理装置に送信される。高速画像処理装置３０１はパーソナルコンピュータ２０２から送信された画像処理パラメータに基づいて，パラメータを変更した二次元画像処理を行い，処理結果の画像データをパーソナルコンピュータ２０２に送信する。パーソナルコンピュータ２０２は高速画像処理装置３０１から送信された二次元画像処理の結果データを医用画像複合観察装置の三次元画像表示領域１０２に表示する。利用者がマンマシンインターフェース２０１を操作して，二次元画像表示領域１０２に表示された二次元画像データの画像処理パラメータを変更すると，変更した結果が二次元画像表示領域１０２に表示されるので，利用者は対話的に二次元画像データの画像処理パラメータを変更することができる。
【００２５】
医用画像複合観察装置１０１は，画素数２０４８×３０７２の画像表示装置８台を二次元画像表示領域１０２に使用しているので，画素数５１２×５１２のＸ線ＣＴ画像を１９２枚一度に表示することができる。しかしながら，前にも述べたように，最近のＸ線ＣＴ検査では，一検査で取得される画像データの枚数が１０００枚にもなることがある。したがって，１０００枚の画像を１９２枚の二次元画像表示領域に一度に表示することはできない。
【００２６】
本発明では，利用者がマンマシンインターフェース２０１を使用して，三次元画像表示領域１０３に表示されている三次元画像上に関心領域を設定すると，パーソナルコンピュータ２０２はその関心領域を含む前後１９２枚の二次元画像データを選択して，その画像データの二次元画像処理を高速画像処理装置３０１に要求する。高速画像処理装置は指示された画像データの二次元画像処理を行い，画像処理をした結果データをパーソナルコンピュータに送信するので，パーソナルコンピュータはこのデータを二次元画像表示領域１０２に表示する。
【００２７】
三次元画像表示領域１０３に表示されている三次元画像上に設定した関心領域を移動することによって，常にその関心領域を中心とする二次元画像を二次元画像表示領域１０２に自動的に表示することが可能になった。
【００２８】
これまでは，三次元画像表示装置と二次元画像表示装置を隣接して設置しても，三次元画像表示装置に表示された三次元画像と二次元画像表示装置に表示された二次元画像の空間的対応を理解することが難しかった。
【００２９】
本発明では，利用者がマンマシンインターフェース２０１を使用して，三次元画像表示領域１０３に表示されている三次元画像上に関心領域を設定すると，二次元画像表示領域に表示している二次元画像の中から対応する二次元画像を選択し，三次元画像上の関心領域に対応する関心領域をその二次元画像上に表示することを可能にする手段を具備し，三次元画像上に設定した関心領域に対応した二次元画像上の空間位置に関心領域を表示することが可能になった。
これによって，利用者が三次元画像上に設定した関心領域に対応する領域を二次元画像上に表示することが可能になったので，画像の理解が大幅に増進された。
【００３０】
【実施例】
これまでの説明では，図１のパーソナルコンピュータ２０２と高速画像処理装置３０１は独立したものとして説明したが，このパーソナルコンピュータ２０２と高速画像処理装置３０１は一体化することができる。
【００３１】
【発明の効果】
本発明は隣接して配置した複数台の高精細度画像表示装置を一台の超高精細画像表示装置として機能させ，これに多数の医用画像を表示することとを可能にした。医用画像診断装置で収集した医用画像データを使用して三次元画像を構築し，これを超高精細画像表示装置の三次元画像表示領域に表示することを可能にし，また，この医用画像データを構成する複数の二次元医用画像データに画像処理を施し，これを超高精細画像表示装置の二次元画像表示領域に表示することを可能にした。
医用画像データの選択，三次元画像表示領域に表示した三次元画像の画像処理と画像表示パラメータの変更，医用画像データを構成する二次元画像データから表示する画像データの選択，二次元画像表示領域に表示した二次元画像の画像処理と画像表示パラメータの変更を一台のマンマシンインターフェースで操作することを可能にした。
これによって，三次元画像と二次元画像を同時に表示することが可能となり，三次元画像と二次元画像を関連付けることが可能になり，医用画像データの画像理解を容易にした医用画像複合観察装置を実現することができた。
【００３２】
三次元画像表示領域に表示した三次元画像上に関心領域を設定することにより，医用画像データの中から二次元画像表示領域に表示する二次元画像の範囲を選択することを可能にする手段を備えた。三次元画像上で関心領域を移動することによって，医用画像データの中から二次元画像表示領域に表示する二次元画像を自動的に選択することを可能にする医用画像複合観察装置を実現することができた。これによって，利用者が関心を持っている範囲の二次元画像データを，二次元画像表示領域に表示することが可能になった。
【００３３】
三次元画像表示領域に表示した三次元画像上に関心領域を設定することにより，二次元画像表示領域に表示した二次元画像の中から対応する二次元画像を選択し，三次元画像上の関心領域に対応する関心領域をその二次元画像上に表示することを可能にする手段を備えた。三次元画像上の関心領域に対応する空間位置を，二次元画像表示領域に表示した二次元画像の中に関心領域として表示することを可能にし，医用画像データの画像理解を容易にした医用画像複合観察装置を実現できた。
【００３４】
医用画像複合観察装置には，マンマシンインターフェースの操作に基づいて，画像データの選択，三次元画像処理・画像表示パラメータ，二次元画像表示する二次元画像データの選択，二次元画像処理・画像表示パラメータをネットワーク経由で発行する手段を具備した。医用画像診断装置または医用画像保管通信システムのネットワーク的近傍に高速の画像処理装置とを設置し，医用画像データを取得する手段と，この医用画像データを使用して三次元画像を構築する手段と，この医用画像データを構成する二次元画像データに画像処理を施す手段と，医用画像複合観察装置とネットワークで接続する手段を備えた。医用画像複合観察装置がネットワーク経由で発行する画像データの選択，三次元画像処理・画像表示パラメータ，二次元画像表示する画像データの選択，二次元画像処理・画像表示パラメータに基づいて，指定された画像データを取得し，これに三次元画像処理と画像表示処理，二次元画像処理と画像表示処理を行い，画像処理した結果をネットワーク経由で医用画像複合観察装置に送信する。この画像処理装置は複数の医用画像複合観察装置からの要求に対応できる。これによって，ネットワークトラフィックの軽減と画像処理機能の有効活用を可能にした医用画像複合観察装置システムを実現することができた。
【００３５】
医用画像複合観察装置は，医用画像データに関する読影報告書の作成を支援し，これを超高精細画像表示装置の読影報告書表示領域に表示する手段を具備した。医用データの三次元画像表示と二次元画像表示を関連付けることができたので，医用画像データの画像理解が容易になり，読影報告書の作成が容易になった。
【図面の簡単な説明】
【図１】本発明による実施例の構成を示す概略図。
【符号の説明】
１０１医用画像複合観察装置本体
１０２二次元画像表示領域
１０３三次元画像表示領域
１０４四次元画像表示領域・報告書作成領域
２０１マンマシンインターフェース
２０２パーソナルコンピュータ
２０３パーソナルコンピュータが発行する指示
３０１高速画像処理装置
３０２高速画像処理装置の処理結果
４０１画像診断装置
４０２ＰＡＣＳなどの画像データベース
４０３ネットワーク[0001]
[Technology to which the invention belongs]
The present invention displays a three-dimensional image and a two-dimensional image created from medical image data in a plurality of display areas of a single ultra-high-definition image display device, and associates the three-dimensional image with the two-dimensional image to obtain a medical image. The present invention relates to a combined medical image observation apparatus that facilitates image understanding of data.
[0002]
[Prior art]
Accurate cross-sectional image data representing the physical properties of the human body can be obtained by the X-ray CT apparatus. In the initial X-ray CT, the number of cross-sectional image data collected in one examination for one subject was 10 to 20. The cross-sectional image data is displayed on an image display device such as a CRT after performing image processing such as window processing in order to display an optimum image. In the conventional method, images displayed on the image display device are sequentially printed on a film. Since about 12 images can be printed on one film, 20 images collected in one inspection can be printed on two films. In a conventional image data interpretation method, a doctor in charge of interpretation attaches these two films to a light box and interprets 20 images collected in one examination. In addition, a film on which image data collected in past examinations are baked is attached to a light box at the same time, and compared for interpretation.
[0003]
In recent years, due to technical progress of X-ray CT apparatus, helical scan X-ray CT apparatus and multi-row detector X-ray CT apparatus have been put to practical use. Image data can be acquired. In addition, due to technological advances in X-ray CT systems, the X-ray dose to patients has been greatly reduced. Along with this, the number of image data collected in one inspection has increased significantly, and may be, for example, 1000.
[0004]
In addition, due to technical progress of X-ray CT apparatuses, it has become possible to collect image data in a short time, and images of beating organs such as the heart can be acquired with high image quality. Along with this, four-dimensional acquisition is also performed to acquire image data in each phase obtained by dividing the heart beat into ten. As a result, the number of image data collected in one inspection is greatly increased, and may be, for example, 4000.
[0005]
With the large increase in image data, the conventional method of printing images on film has enormously increased the number of films on which images collected in a single inspection have been burned. It is becoming difficult to read and interpret it.
[0006]
Due to the large increase in image data, it has become difficult to read and interpret a film that has been baked with images in a light box, so it is possible to display many images at once. A so-called electronic light box has been tried in which a plurality of image display devices are arranged side by side to sequentially display images collected in one inspection. However, since the number of images that can be displayed on one high-definition image display device is about 24, the number of images that can be displayed at one time is about 100 even if four are arranged. For this reason, there is a demand for a method for efficiently displaying and interpreting images of 1000 to 4000 images.
[0007]
Since accurate cross-sectional image data representing the physical properties of the human body can be obtained by the X-ray CT apparatus, a three-dimensional stereoscopic image is reconstructed using a plurality of cross-sectional image data taken at different cross-sectional positions. Has been done. In particular, since a helical scan X-ray CT apparatus and a multi-row detector X-ray CT apparatus have recently been put into practical use, it has become possible to reconstruct a more precise three-dimensional stereoscopic image.
[0008]
The three-dimensional display method of medical images is based on the surface display method (surface rendering method) that displays the shape of the boundary surface after extracting the boundary surface of the object constituting the subject, and the physical property of the subject. There is a volume rendering method that handles it as a three-dimensional array of voxels. In the case of three-dimensional image display, it is generally possible to create a more precise three-dimensional image as the number of cross-sectional image data used for three-dimensional image display is larger. Due to technological progress of X-ray CT systems, more and more precise three-dimensional images have been created using a larger number of cross-sectional image data.
[0009]
However, it is often difficult for a doctor who interprets medical image data to interpret X-ray CT image data only by displaying a three-dimensional image even if it is a precise three-dimensional image. This is due to the fact that previous training has been performed on 2D images, and that on 3D images, the setting of the window level can affect the shape. For this reason, interpretation of X-ray CT image data requires not only 3D image display but also 2D image display.
[0010]
For this reason, a light box is installed adjacent to the 3D image display device to perform 3D image display and film interpretation. In addition, an electronic light box is installed adjacent to the 3D display device, and interpretation is performed using the 3D display and the 2D image displayed on the electronic light box. However, in these cases, since the cooperation between the three-dimensional image and the two-dimensional image displayed on the three-dimensional display device is poor, it is not possible to expect an effect due to the synergy between the three-dimensional image and the two-dimensional image.
[0011]
[Problems to be solved by the invention]
3D image display devices are widely used because it is easier to grasp the three-dimensional structure of a subject with a 3D image than with a 2D image. There is a request to use images. Conventionally, the linkage between the 3D image displayed on the 3D image device and the 2D image displayed on the 2D image display device has been insufficient, so the image is displayed on the 3D image device. It was difficult to identify the region of interest found in the 3D image on the 2D image displayed on the 2D image display device.
[0012]
Advances in X-ray CT technology have increased the number of image data acquired in a single inspection, making it impossible to line up all films on a light box at once. Even when displaying a two-dimensional image on the two-dimensional image display device, it is impossible to arrange all the images at once. For this reason, how to handle this enormous two-dimensional image is an important issue.
[0013]
[Means for Solving the Problems]
The present invention has been devised to solve the above-described problems, and allows a plurality of high-definition image display devices arranged adjacent to each other to function as a single ultra-high-definition image display device. Enabled to display. A three-dimensional image is constructed using medical image data composed of a plurality of two-dimensional image data collected by the medical image diagnostic apparatus, and this is displayed in the three-dimensional image display area of the ultra-high definition image display apparatus. In addition, the two-dimensional image data constituting the medical image data is subjected to image processing and displayed in the two-dimensional image display area of the ultra high definition image display device. Selection of medical image data, image processing of 3D images displayed in the 3D image display area and change of image display parameters, 2D display in 2D image display area from 2D image data composing medical image data Selection of image data, image processing of 2D images displayed in the 2D image display area, and change of image display parameters can be operated with a single man-machine interface. The selection of medical image data, 3D image display related processing, 2D image data selection to be displayed in the 2D image display area, and 2D image display related processing are operated interactively with a single man-machine interface. By making it possible to display 3D images and 2D images at the same time and to associate 3D images with 2D images, we have prepared a medical image observation system that facilitates understanding of medical image data.
[0014]
According to the present invention, a range of 2D image data to be displayed in a 2D image display area is selected from medical image data by setting a region of interest on the 3D image displayed in the 3D image display area. Medical device that can select the 2D image data to be displayed in the 2D image display area from the medical image data by moving the region of interest on the 3D image An image composite observation device was realized.
[0015]
By setting the region of interest on the 3D image displayed in the 3D image display area, the corresponding 2D image is selected from the 2D images displayed in the 2D image display area, and the interest on the 3D image is displayed. The region of interest corresponding to the region is provided on the two-dimensional image, and the region of interest is displayed at the corresponding position on the two-dimensional image corresponding to the region of interest set on the three-dimensional image. This makes it possible to realize a medical image composite observation device that facilitates image understanding of medical image data.
[0016]
Based on the operation of the man-machine interface, the medical image combined observation apparatus has the following functions: medical image data selection, 3D image processing and image display parameters, 2D image display selection, 2D image processing and image display parameters. A means for issuing via the network was provided. A high-speed image processing device is installed in the vicinity of the network of a medical image diagnostic device or a medical image storage communication system (PACS), and medical image data is acquired based on instructions issued by the medical image composite observation device. And a means for performing 3D image processing and image display processing, 2D image processing and image display processing, and transmitting the image processing results to a medical image composite observation apparatus via a network. As a result, we realized a medical image combined observation system that can reduce network traffic and effectively use image processing functions.
[0017]
Supporting the creation of interpretation reports related to medical image data, equipped with means to display this in the interpretation report display area of the ultra-high-definition image display device, making it easy to understand medical image data and create interpretation reporters A medical image observation system was realized.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
The medical image composite observation apparatus according to the present invention will be described below. FIG. 1 is a schematic diagram showing the configuration of an embodiment of the present invention.
Reference numeral 101 denotes a medical image composite observation apparatus main body, which is an ultra-high-definition image display apparatus including a plurality of high-definition image display apparatuses. Reference numeral 102 denotes a two-dimensional image display area, 103 denotes a three-dimensional image display area, and 104 denotes a four-dimensional image display area / report creation area.
Reference numeral 201 denotes a man-machine interface for operating the medical image combined observation apparatus.
A personal computer 202 supplies video signals to a plurality of high-definition image display devices constituting the medical image composite observation apparatus body, and controls the man-machine interface 201.
Reference numeral 203 denotes an instruction from the man-machine interface to the high-speed image processing apparatus.
A high-speed image processing apparatus 301 performs 3D image processing or 2D image processing of medical image data.
Reference numeral 302 denotes a display three-dimensional image or a display two-dimensional image processed by the high-speed image processing apparatus.
Reference numeral 401 denotes a medical diagnosis apparatus that generates medical image data such as an X-ray CT apparatus, and 402 denotes an image database such as PACS that stores medical image data.
Reference numeral 403 denotes a network.
[0019]
As an example, the medical image combined observation apparatus main body 101 includes ten high-definition image display apparatuses having 2048 × 3072 pixels. Of these, eight are used for the two-dimensional image display area 102. In an X-ray CT image having 512 × 512 pixels, 24 images can be displayed on an image display device having 2048 × 3072, and 192 images can be displayed at a time with 8 devices. In this example, one high-definition image display device having a pixel number of 2048 × 3072 is allocated to the three-dimensional image display area 103 and the four-dimensional image display area / report creation area 104.
[0020]
When the user operates the man-machine interface 201 to select image data to be displayed in the three-dimensional image display area 103, the image data selection instruction and three-dimensional image processing are sent to the high-speed image processing apparatus via the personal computer 202. A two-dimensional image processing parameter 203 is transmitted.
[0021]
Based on the image data selection instruction transmitted from the personal computer 202, the high-speed image processing apparatus 301 inquires and obtains image data from the image diagnostic apparatus 401 and the PACS image database 402. When the high-speed image processing apparatus 301 owns the image data, the image data owned by the high-speed image processing apparatus 301 is used.
The high-speed image processing device 301 performs three-dimensional image processing and two-dimensional image processing based on the image processing parameters transmitted from the personal computer 202, and transmits image data as a processing result to the personal computer 202.
[0022]
The personal computer 202 displays the result data of the 3D image processing transmitted from the high-speed image processing apparatus 301 in the 3D image display area 103 of the medical image combined observation apparatus. Further, the two-dimensional image processing result data transmitted from the high-speed image processing apparatus 301 is displayed in the two-dimensional image display area 102 of the medical image combined observation apparatus.
[0023]
When the user operates the man-machine interface 201 to change the image processing parameters of the 3D image data displayed in the 3D image display area 103, the change information is sent to the high-speed image processing via the personal computer 202. Sent to the device. The high-speed image processing apparatus 301 performs three-dimensional image processing with the parameters changed based on the image processing parameters transmitted from the personal computer 202, and transmits image data as a processing result to the personal computer 202. The personal computer 202 displays the result data of the 3D image processing transmitted from the high-speed image processing apparatus 301 in the 3D image display area 103 of the medical image combined observation apparatus. When the user operates the man-machine interface 201 and changes the image processing parameters of the 3D image data displayed in the 3D image display area 103, the changed result is displayed in the 3D image display area 103. The user can interactively change the 3D image processing parameters.
[0024]
When the user operates the man-machine interface 201 to change the image processing parameters of the two-dimensional image data displayed in the two-dimensional image display area 102, the change information is transmitted to the high-speed image processing via the personal computer 202. Sent to the device. The high-speed image processing apparatus 301 performs two-dimensional image processing with changed parameters based on the image processing parameters transmitted from the personal computer 202, and transmits processing result image data to the personal computer 202. The personal computer 202 displays the two-dimensional image processing result data transmitted from the high-speed image processing apparatus 301 in the three-dimensional image display area 102 of the medical image composite observation apparatus. When the user operates the man-machine interface 201 to change the image processing parameters of the two-dimensional image data displayed in the two-dimensional image display area 102, the changed result is displayed in the two-dimensional image display area 102. The user can interactively change the image processing parameters of the two-dimensional image data.
[0025]
Since the medical image combined observation apparatus 101 uses eight image display apparatuses with 2048 × 3072 pixels in the two-dimensional image display area 102, it displays 192 X-ray CT images with 512 × 512 pixels at a time. be able to. However, as described above, in recent X-ray CT examinations, the number of image data acquired in one examination may be as many as 1000. Therefore, 1000 images cannot be displayed at a time in 192 two-dimensional image display areas.
[0026]
In the present invention, when the user sets a region of interest on the three-dimensional image displayed in the three-dimensional image display region 103 using the man-machine interface 201, the personal computer 202 includes 192 sheets before and after including the region of interest. 2D image data is selected, and the high-speed image processing apparatus 301 is requested to perform two-dimensional image processing of the image data. Since the high-speed image processing apparatus performs two-dimensional image processing of the instructed image data and transmits the result data of the image processing to the personal computer, the personal computer displays this data in the two-dimensional image display area 102.
[0027]
By moving the region of interest set on the three-dimensional image displayed in the three-dimensional image display region 103, a two-dimensional image centered on the region of interest is always automatically displayed in the two-dimensional image display region 102. It became possible.
[0028]
Until now, even if the 3D image display device and the 2D image display device are installed adjacent to each other, the 3D image displayed on the 3D image display device and the 2D image displayed on the 2D image display device It was difficult to understand the spatial correspondence.
[0029]
In the present invention, when a user sets a region of interest on a 3D image displayed in the 3D image display area 103 using the man-machine interface 201, the 2D image displayed in the 2D image display area is displayed. Set up on a 3D image with means to select the corresponding 2D image from the image and display the region of interest corresponding to the region of interest on the 3D image on the 2D image The region of interest can be displayed at a spatial position on the two-dimensional image corresponding to the region of interest.
This makes it possible to display a region corresponding to the region of interest set on the three-dimensional image by the user on the two-dimensional image, thereby greatly improving the understanding of the image.
[0030]
【Example】
In the description so far, the personal computer 202 and the high-speed image processing apparatus 301 in FIG. 1 have been described as independent, but the personal computer 202 and the high-speed image processing apparatus 301 can be integrated.
[0031]
【The invention's effect】
The present invention makes it possible to function a plurality of high-definition image display devices arranged adjacent to each other as a single ultra-high-definition image display device and display a large number of medical images thereon. It is possible to construct a 3D image using the medical image data collected by the medical image diagnostic device and display it in the 3D image display area of the ultra high definition image display device. Image processing is applied to the two-dimensional medical image data that composes it, and this can be displayed in the two-dimensional image display area of the ultra-high-definition image display device.
Selection of medical image data, image processing of 3D image displayed in 3D image display area and change of image display parameters, selection of image data to be displayed from 2D image data constituting medical image data, 2D image display area It is now possible to operate the two-dimensional image displayed on the screen and change the image display parameters with a single man-machine interface.
This makes it possible to display a 3D image and a 2D image at the same time, to associate a 3D image with a 2D image, and to create a medical image composite observation device that facilitates image understanding of medical image data. Could be realized.
[0032]
Means for setting a region of interest on a three-dimensional image displayed in a three-dimensional image display region, thereby enabling selection of a range of a two-dimensional image to be displayed in the two-dimensional image display region from medical image data. Prepared. To realize a combined medical image observation apparatus that can automatically select a 2D image to be displayed in a 2D image display area from medical image data by moving a region of interest on the 3D image I was able to. This makes it possible to display two-dimensional image data in a range in which the user is interested in the two-dimensional image display area.
[0033]
By setting the region of interest on the 3D image displayed in the 3D image display area, the corresponding 2D image is selected from the 2D images displayed in the 2D image display area, and the interest on the 3D image is displayed. Means are provided that allow the region of interest corresponding to the region to be displayed on the two-dimensional image. A medical image that makes it possible to display a spatial position corresponding to a region of interest on a three-dimensional image as a region of interest in a two-dimensional image displayed in a two-dimensional image display region, thereby facilitating image understanding of medical image data. A compound observation device was realized.
[0034]
The medical image observation system uses image data selection, 3D image processing / image display parameters, 2D image data selection for 2D image display, 2D image processing / image display based on man-machine interface operations. A means for issuing parameters via a network is provided. A means for obtaining a medical image data by installing a high-speed image processing apparatus in the vicinity of the network of the medical image diagnostic apparatus or the medical image storage communication system; a means for constructing a three-dimensional image using the medical image data; , Means for performing image processing on the two-dimensional image data constituting the medical image data, and means for connecting to the medical image composite observation apparatus via a network. Designated based on the selection of image data issued by the medical image compound observation device via the network, 3D image processing / image display parameters, selection of image data for 2D image display, 2D image processing / image display parameters Image data is acquired, and three-dimensional image processing and image display processing, two-dimensional image processing and image display processing are performed on the image data, and the result of image processing is transmitted to the medical image composite observation apparatus via the network. This image processing apparatus can respond to requests from a plurality of medical image composite observation apparatuses. As a result, it was possible to realize a medical image combined observation system that can reduce network traffic and effectively use image processing functions.
[0035]
The medical image combined observation apparatus is provided with means for supporting the creation of an interpretation report relating to medical image data and displaying it in the interpretation report display area of the ultra-high definition image display apparatus. Since 3D image display and 2D image display of medical data could be related, it became easier to understand the image of medical image data and it was easier to create an interpretation report.
[Brief description of the drawings]
FIG. 1 is a schematic diagram showing the configuration of an embodiment according to the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 101 Medical image compound observation apparatus main body 102 Two-dimensional image display area 103 Three-dimensional image display area 104 Four-dimensional image display area and report creation area 201 Man-machine interface 202 Personal computer 203 Instruction issued by personal computer 301 High-speed image processing apparatus 302 Processing result 401 of high-speed image processing apparatus Image diagnostic apparatus 402 Image database 403 such as PACS Network

Claims

Means for operating a plurality of high-definition image display devices arranged adjacent to each other as a single ultra-high-definition image display device; means for operating the super-high-definition image display device with a single man-machine interface; A means for constructing a three-dimensional image using medical image data collected by a medical image diagnostic apparatus and displaying the three-dimensional image in a three-dimensional image display area of an ultra-high-definition image display apparatus; and two-dimensional image processing for medical image data It is possible to display this in the two-dimensional image display area of the ultra-high-definition image display device, and to change the image processing and image display parameters of the three-dimensional image and the image processing and image display parameters of the two-dimensional image. This means that medical image data selection, 3D image display related processing, and 2D image display related processing can be operated with one man-machine interface. Allows the association of simultaneous display and 3D image and a 2D image of the 3D image and a 2D image, the medical image composite observation apparatus which facilitates the image understanding of the medical image data,
By setting the region of interest on the 3D image displayed in the 3D image display area, it is possible to automatically select the range of image data to be displayed in the 2D image display area from the medical image data A medical image composite observation apparatus comprising means for selecting image data to be displayed in a two-dimensional image display region by moving a region of interest on the three-dimensional image.

2. The medical image composite observation apparatus according to claim 1, wherein a region of interest is set on the three-dimensional image displayed in the three-dimensional image display region, thereby responding from the two-dimensional image displayed in the two-dimensional image display region. A space on the two-dimensional image corresponding to the region of interest set on the three-dimensional image, having means for selecting the two-dimensional image and displaying the region of interest at the corresponding spatial position of the two-dimensional image A combined medical image observation device that makes it possible to display a region of interest at a position and facilitates understanding of medical image data.

Means for functioning a plurality of high-definition image display devices arranged adjacent to each other as a single ultra-high-definition image display device; means for operating the super-high-definition image display device with a single man-machine interface; The medical image data collected by the medical image diagnostic device is used to construct a three-dimensional image and display it in the three-dimensional image display area of the ultra-high-definition image display device, and the medical image data is subjected to two-dimensional image processing. It is possible to display this in the two-dimensional image display area of the ultra-high-definition image display device, and to change the image processing and image display parameters of the three-dimensional image and the image processing and image display parameters of the two-dimensional image. This means that medical image data selection, 3D image display related processing, and 2D image display related processing can be operated with one man-machine interface. , 3D image and 2D image can be displayed simultaneously, 3D image and 2D image can be associated with each other, and medical image data can be easily understood. By providing a region of interest on the three-dimensional image, means for automatically selecting a range of image data to be displayed in the two-dimensional image display region from the medical image data is provided. Prepare a medical image composite observation device that enables selection of image data to be displayed in the two-dimensional image display region by moving the region of interest above,
A means for issuing medical image data selection, 3D image processing and image display parameters, 2D image display image data selection, 2D image processing and image display parameters via a network based on man-machine interface operations. Medical image data is acquired based on the medical image composite observation device provided and the instructions issued by the medical image composite observation device, and three-dimensional image processing, image display processing, two-dimensional image processing, and image display processing are performed on it. A high-speed image processing apparatus having means for transmitting the result of image processing to the medical image composite observation apparatus via the network, and reducing the network traffic and enabling effective use of the image processing function Observation device system.

Adjacently arranged high-definition image display devices as one ultra-high-definition image display device A 3D image is constructed using the means for functioning, the means for operating this ultra high-definition image display device with a single man-machine interface, and the medical image data collected by the medical image diagnostic device. Means for displaying in the three-dimensional image display area of the fine image display device, means for performing two-dimensional image processing on the medical image data, and displaying it in the two-dimensional image display region of the ultra-high-definition image display device; Image processing and image display parameter change and means for enabling two-dimensional image image processing and image display parameter change. Medical image data selection, three-dimensional image display related processing, two-dimensional image Enables display-related processing to be operated with one man-machine interface, enabling simultaneous display of 3D images and 2D images, and association of 3D images and 2D images In a medical image composite observation apparatus that facilitates image understanding of medical image data, a region of interest is set on the 3D image displayed in the 3D image display region, so that the 2D image display region can be selected from the medical image data. Means for automatically selecting a range of image data to be displayed on the screen, and selecting the image data to be displayed in the two-dimensional image display area by moving the region of interest on the three-dimensional image And selecting a corresponding 2D image from the 2D images displayed in the 2D image display area by setting a region of interest on the 3D image displayed in the 3D image display area. A means for enabling the region of interest to be displayed at a spatial position corresponding to the two-dimensional image is provided, and the region of interest is displayed at the spatial position on the two-dimensional image corresponding to the region of interest set on the three-dimensional image. It possible to display a prepared medical image composite observation apparatus which facilitates the image understanding of the medical image data,
A means for issuing medical image data selection, 3D image processing and image display parameters, 2D image display image data selection, 2D image processing and image display parameters via a network based on man-machine interface operations. Medical image data is acquired based on the medical image composite observation device provided and the instructions issued by the medical image composite observation device, and three-dimensional image processing, image display processing, two-dimensional image processing, and image display processing are performed on it. A high-speed image processing apparatus having means for transmitting the result of image processing to the medical image composite observation apparatus via the network, and reducing the network traffic and enabling effective use of the image processing function Observation device system.

The medical image combined observation apparatus according to claim 1 or 2 , further comprising means for supporting creation of an interpretation report regarding medical image data and displaying the report in an interpretation report display area of the ultra-high definition image display apparatus. A medical image observation system that facilitates image understanding and interpretation reporter creation of medical image data.