JP4350226B2 - 三次元画像処理装置 - Google Patents
三次元画像処理装置 Download PDFInfo
- Publication number
- JP4350226B2 JP4350226B2 JP25955399A JP25955399A JP4350226B2 JP 4350226 B2 JP4350226 B2 JP 4350226B2 JP 25955399 A JP25955399 A JP 25955399A JP 25955399 A JP25955399 A JP 25955399A JP 4350226 B2 JP4350226 B2 JP 4350226B2
- Authority
- JP
- Japan
- Prior art keywords
- region
- image
- opacity
- observation
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【発明の属する技術分野】
本発明は、医療用画像機器と組み合わせて、あるいは内蔵して使用される三次元画像装置に関する。
【0002】
【従来の技術】
近年の医療用画像分野で使用される三次元画像処理装置は、超音波診断装置、X線CTスキャン、磁気共鳴診断装置等の医療用画像機器と組み合わせて使用され、多くの病院、検査機関等で広く利用されている。この三次元画像処理装置は、画像処理の高速化や解像度の向上が進み、臨床情報として有用な画像を提供している。例えばこれらの三次元画像は、手術前のシミュレーション等において、消化管の腫瘍、プラーク(斑点)の形成、狭搾症等の原因を調べる際に行う消化管腔の画像化等に有効利用されている。
【0003】
上述の三次元画像処理装置による画像処理を簡単に述べると、以下の様である。まず、上述の医療用画像機器により収集された断層画像から生成されたボリュームデータが配置された三次元ボリューム空間において、ユーザの位置となる視点と当該視点からボリューム空間に対する観察方向とが設定される。そして、設定された視点から、表示対象物のボリュームデータに向かってレイを延ばし、所定のレンダリング処理を行うことで、ユーザは、三次元ボリュームデータを二次元投影面上の二次元画像として見ることができる。
【0004】
また、上記画像処理の応用として、フライスルー手法がある。これは、前記視点の位置を移動や前記観察方向と共に光源を移動させることで、ユーザがあたかも仮想環境内を移動している印象を与えることができる手法である。
【0005】
このフライスルー手法によって、消化管内に形成された腫瘍を探し出して観察する場合と、疣腫が形成された血管弁を探し出して観察する場合について、図8(a)、(b)を参照して更に詳しく説明する。
【0006】
図8(a)図は腫瘍40が形成された消化管46を長手方向と垂直な平面によって切断した断面図である。レンダリング処理における条件設定について、模式的に、設定する視点の位置をフラッシュライト42の先端位置とし、観察方向をフラッシュライト42が照らす方向、観察サブ領域44はフラッシュライト42が照らす領域としている。
【0007】
まず、フライスルー手法により、消化管46内を移動していく。観察者は、内視鏡による映像に似た消化管内の画像情報を得ることができ、当該画像によって腫瘍の形成箇所を探す。従来の三次元画像でも、コントラストの違い等によって消化管壁46に形成された腫瘍40の一部を見ることは可能である。観察者は、消化管壁46の一部に腫瘍形成の可能性がある箇所に見当を付け、当該箇所が観察サブ領域44の中に含まれるようにフラッシュライト42の先端位置(視点)と向き(観察方向)を設定する。そして、観察サブ領域44内に存在するボリュームデータに対して所定のレンダリング処理を施すことで、図8(b)に示す様な観察サブ領域44の投影画像を得ることができる。
【0008】
また、図8(c)は、血管弁と当該血管弁から流出する血流を示した図であり、Bモード画像による大動脈弁50と、大動脈弁50に形成された疾患のため逆噴流を含んでいるドップラ画像による血流52を模式的に示している。
【0009】
消化管内の腫瘍形成の観察と同様に、フライスルー手法により該当箇所を探す。そして、三次元画像処理により、視点54と矢印の方向に観察方向を設定し、所定の観察領域内のボリュームデータに対してレンダリング処理が実行され、投影画像を得ることができる。
【0010】
【発明が解決しようとする課題】
しかし、図8(a)において、通常、腫瘍40の多くの部分は消化管壁46の中に埋もれていたり、消化管の外部に形成されている。従って、従来の画像処理により図8(a)図に示した設定において三次元画像を生成すると、表示部には、図8(b)図に示すような消化管壁46画像のみが表示されることになる。その結果、腫瘍40についての有効な情報(例えば、腫瘍40の形状や大きさ、良性か悪性か等)を得ることができない。
【0011】
また、図8(c)においては、血管弁に形成された疾患は、血流像に重畳して表示される。従って、疾患の画像は、血流像の背後に隠れてしまうことになり、有効な情報を得ることができなくなってしまう。また、通常、血流像は超音波診断装置のドップラーモードによるが、仮に血液の逆流等血管弁に異常が発生していても、順流像と逆流像が重畳されてしまい、異常を発見することが困難な画像となってしまう。
【0012】
すなわち、上記二つの例からもわかるように、従来の三次元画処理においては、表示対象物が組織同士や組織と血液との重畳を有するものである場合、診断等に有効な情報を提供しうる画像を表示することができなかった。
【0013】
【課題を解決するための手段】
本発明は、上記事情に鑑みてなされたもので、組織間や組織と血液との重畳した場合であっても、臨床等に有効な情報を提供しうる画像を得ることができる三次元画像処理装置を提供することを目的とする。
【0014】
請求項1に記載の発明は、表示対象物のボリュームデータを記憶する記憶手段と、視点と、観察方向と、第1の領域を定義するための視野角と、前記第1の領域に含まれる第2の領域を定義するための視野角と、を設定すると共に、前記第2の領域に含まれるボクセルデータに割り当てる不透明度を、前記第2の領域内の深さ毎に個別に設定するための設定手段と、前記視点と、前記観察方向と、前記不透明度と、前記第1の領域に含まれるボリュームデータと、を用いてボリュームレンダリング処理を実行することで、前記第2の領域については、深さに応じて不透明度が割り当てられている投影画像を生成する画像生成手段と、を具備することを特徴とする三次元画像処理装置である。
【0023】
この様な構成によれば、投影画像の画像特性が設定可能であるから、組織間や血流と組織との重畳がある場合であっても、適切な画像を得ることができる。その結果、有益な臨床情報の提供を実現できる。
【0024】
【発明の実施の形態】
以下、本発明についての第1の実施形態〜第6の実施形態を図面に従って説明する。
【0025】
(第1実施形態)
図1は、第1実施形態に係る三次元画像処理装置1の概略構成を示している。
【0026】
同図において、三次元データ記憶部2は、半導体メモリ、ハードディスク、CD−ROM、フィロッピーディスク、メモリカード等の記録媒体から成り、超音波診断装置、X線CT装置、MRI等の医療用画像機器によるボリュームデータを記憶する記憶部である。このボリュームデータは、各種医療用画像機器により撮影された被写体についてのボクセルデータであり、以下の様に生成されたものである。すなわち、各医療用画像機器により撮影された被写体についての断面画像データ及び位置情報データを、三次元メモリ空間上に配置する。そして、断層画像データのスライスごとに被写体の領域を抽出し、このスライスを線形補間等により断層画像データを補いながら積み上げて三次元画像の画素値(ボクセル)を生成することで得られたデータである。
【0027】
三次元画像処理部6は、三次元データ記憶部2に格納されたボリュームデータに基づいて、投影画像を作り出す。この投影画像は、三次元ボクセル空間に視点と観察方向を設定し、この観察方向に垂直な二次元画像上の各ピクセルと視点とを結ぶレイを仮定し、当該レイに沿ったボクセル値に基いて不透明度と色を割り当てたピクセル値へのマッピング(レンダリング処理)を行うことで生成される。
【0028】
なお、以下の説明では、前記二次元画像上にマッピングされる三次元ボクセル空間の領域を観察領域、観察領域内の所定の領域を観察サブ領域と呼ぶ。
【0029】
観察サブ領域画像特性制御部8は、不透明度制御部81、領域角度制御部83、領域深度制御部85、深度−不透明度制御部87、背景色制御部89を有している。一般に、レンダリング処理の結果得られる観察サブ領域に関する投影画像の特性(以下、画像特性)として、不透明度、投影画像の面積(観察サブ領域の視野角に対応)、投影画像として表示する対象の選択(観察サブ領域の深度に対応)、表示色、投影画像の形状(観察サブ領域の形状に対応)が挙げられる。この観察サブ領域画像特性制御部2は、各種画像特性を設定或いは変更するための入力部10からの入力に基づいて、三次元画像処理部6が実行するレンダリング処理に関する制御を行う。このことについては、後で詳しく説明する。
【0030】
入力部10は、キーボードやマウス等からなり、オペレータが三次元画像処理装置1等の各種入力指示を行うインタフェースである。この入力部10からは、後述するように、観察サブ領域44に関する投影画像(以下、サブ領域投影画像)についての画像特性を設定・変更するために、観察サブ領域のレンダリング処理における不透明度、観察サブ領域の角度(視野角)、観察サブ領域の深度、観察サブ領域の形状、色の各種パラメータが設定、変更される。また、オペレータは、三次元画像処理部6が実行するレンダリング処理についての物理的条件、すなわち、光源についての設定(すなわち、平行投影か放射投影かの選択)、視点、観察方向、視点からボリュームデータまでの距離等の設定を、当該入力部10より入力する。
【0031】
表示部12は、三次元画像を表示するCRT等の表示手段である。
【0032】
次に、上記のように構成した第1実施形態の動作を、図2を参照して説明する。
【0033】
なお、以下において、説明を簡単にするために、レンダリング処理において設定する視点の位置、観察方向、観察サブ領域を、それぞれ模式的に、フラッシュライトの先端位置、フラッシュライトが照らす方向、フラッシュライト42が照らす領域とする。また、この三つの設定項目を、以下レンダリング条件と呼ぶ。
【0034】
第1の実施形態は、消化管内に形成された腫瘍の観察を希望する場合に、図8(b)に示した画像が表示部12に表示されたとする。このときオペレータが、観察サブ領域44に関するレンダリング処理において不透明度を適当に制御することで、サブ領域投影画像の画像特性を変更して腫瘍を適切に表示する例を示す。
【0035】
図2(a)は、装置に初期設定されている不透明度曲線Aと新しく設定された不透明度曲線Bを示している。この不透明度曲線は、観察サブ領域内のレンダリング処理における不透明度(Opacity)と輝度値(Pixel value)との関係を示すものである。図2(b)は、腫瘍40が形成された消化管46を長手方向と垂直な平面によって切断した断面図である。図2(c)は、表示部12が表示する投影画像であって、本発明に係る方法により処理された投影画像を示している。なお、図2(c)の円形内は、サブ領域投影画像45を示している。
【0036】
まず、オペレータは、フライスルー手法により消化管46内の腫瘍40形成箇所に見当を付け、図2(b)に示す様に、三次元ボクセル空間内にフラッシュライト42、観察方向、観察サブ領域44を設定する。
【0037】
次に、観察領域に存在するボリュームデータに対して初期設定の不透明度曲線Aに基づいてレンダリング処理し、当該領域内の投影画像図8(b)を得る。この図8(b)の画像は、消化管壁46の不透明度が高いために腫瘍40についての有効な情報が得られない投影画像となってしまっている。
【0038】
これに対する解決策として、本発明に係る三次元画像処理装置によれば、サブ領域投影画像45についての不透明度を調節することができる。すなわち、オペレータにより、新しい不透明度曲線Bが新たに設定されたとする。この新設定操作は、不透明度曲線設定画面を表示部12に表示させ、マウスや入力ペン等の入力装置により新たな曲線の概形を入力することで実行できる。
【0039】
不透明度制御部81は、上記再入力された不透明度曲線Bに従って、三次元画像処理部6が実行するボクセルデータへの不透明度の割り当てを制御する。
【0040】
一般に、組織が異なればそのボクセル値も異なる。従って、消化管壁46のボクセルには低い不透明度を割り当て、腫瘍40のボクセルには消化管壁46よりも高い不透明度を割り当てる適当な不透明度曲線Bを新たに設定し、この曲線Bに基づいたレンダリング処理を行えば、腫瘍40を表示した観察サブ領域44に関する投影画像を得ることができる。
【0041】
図2(c)は、観察サブ領域について、不透明度曲線Bに基づいたレンダリング処理を施した投影画像を示している。消化管壁46の不透明度を低くしたことにより、腫瘍40がサブ領域投影画像45に表示される。
【0042】
このような構成によれば、三次元画像処理において、消化管壁から消化管外部にかけて形成された腫瘍等、手前の画像とその後ろの画像が重畳することで適切に表示されない場合であっても、ボクセルに対する不透明度の割り当てを調節することで、重畳した画像のうち所望の画像を取り出して適切に表示することができる。その結果、有効な臨床情報提供を可能にする。
【0043】
(第2実施形態)
第1の実施形態において腫瘍40を表示した結果、表示された画像は腫瘍40の全部ではなく一部であったとする。第2の実施形態では、レンダリング条件と画像特性設定を第1の実施形態と同様とし、図2(c)から出発して、観察サブ領域44の視野を新たに設定することでサブ領域投影画像45の面積を拡大し、腫瘍40の残り部分を表示する一つの例を示す。なお、以下の説明では、観察サブ領域44の視野を変えるパラメータとして、観察サブ領域の開き角度(以下、視野角)を用いた例を示す。
【0044】
図3(a)は、観察サブ領域の視野角を表す画像特性曲線を示している。直線Cは初期設定の視野角を示し、直線Dは新しい設定の視野角を示している。なお、前記視野角を表す画像特性曲線は一般的に曲線であるが、後述する理由によりC、Dともに直線となっている。図3(b)は、腫瘍40が形成された消化管46を長手方向と垂直な平面によって切断した断面図である。図3(c)は、表示部12が表示する投影画像であって、直線Dに基づいて処理された投影画像を示している。また、図3(d)は、前記視野角を表す画像特性曲線を説明するための図である。
【0045】
まず、図3(d)を参照して、図3(a)の視野角を表す画像特性曲線の説明をする。
【0046】
図3(d)は、三次元ボクセル空間における視点と観察サブ領域44を模式的に示す例である。閉曲線58により囲まれている領域は、観察サブ領域44内のボクセルデータが投影される二次元領域、すなわちサブ領域投影画像45を示している。また観察サブ領域44は、視点を頂点とし錐体であり、当該観察サブ領域44に関するレンダリング処理において、レイが通過する領域に対応している。母線62は、閉曲線58上の任意の点と視点Oとを結ぶ直線であり、視野角64は、錐体(観察サブ領域44)の中心軸66と母線62とのなす角である。
【0047】
図3(a)に示した視野角を表す画像特性曲線は、母線62の閉曲線58上での位置と視野角64との関係を示す曲線(直線)である。すなわち、本実施形態においては、サブ領域投影画像45は円形であるから(図2(c)、図3(c)参照)、各母線62と中心軸66とがなす角、すなわち視野角64は一定となり、図3(a)に示した視野角を表す画像特性曲線は、直線C、Dで表される。そして、サブ領域投影画像45を円形のまま視野角を広げるには、各母線ごとの視野角の設定値をより大きな一定値とすればよい。なお、後述の変形例で言及するように、仮に円形以外のサブ領域投影画像45の形状を所望する場合には、所望の形状に対応する視野角を表す画像特性曲線を設定することで可能である。
【0048】
次に、視野角64を新たに設定する設定動作について説明する。
【0049】
正確な臨床情報を得るため、例えば腫瘍を観察する場合には、形状、大きさ、形成箇所等を知るために、当該腫瘍の全体像の観察を望むことが多い。しかし、図2(c)は、腫瘍40の一部の投影画像しか表示されていない。
【0050】
これに対する解決策として、本発明に係る三次元画像処理装置によれば、観察サブ領域の視野を変更することができる。すなわち、オペレータにより、新しい直線Dが新たに設定されたとする。この新設定操作は、第1の実施形態と同様である。
【0051】
領域角度制御部83は、上記再入力された画像特性曲線Dに従って、観察サブ領域の角度すなわち視野を変更し、三次元画像処理部6が、画像特性曲線Aに基づくレンダリング処理を、新たな観察サブ領域について実行するように制御する。
【0052】
図3(c)は、新たに設定された観察サブ領域について、画像特性曲線Bに基づいたレンダリング処理を実行した投影画像45を示している。観察サブ領域の視野角を拡大したことによってサブ領域投影画像45の面積も拡大され、腫瘍40の全体像が当該サブ領域投影画像45に表示される。
【0053】
なお、角度を小さくすることで、腫瘍40を観察サブ領域外とすることももちろん可能である。
【0054】
このような構成によれば、三次元画像処理において、観察サブ領域の視野角を変更することができるので、観察サブ領域外に存在する画像を当該領域内とすることができる。そして、変更された観察サブ領域について不透明度の制御を行うことで、所望の対象を画像として適切に表示することができる。その結果、有効な臨床情報提供を可能にする。
【0055】
なお、上記説明において、視野角を変えるために、母線の曲線上での位置と視野角との対応関係を利用した例を示したが、母線の閉曲線上で位置によらず視野角が一定の場合、つまりサブ領域投影画像45が円形の場合は、視野角の値をただ一つ入力して設定できるような構成であっても、目的を達成することができる。
【0056】
(第3実施形態)
第3の実施形態は、腫瘍40よりも観察方向についてさらに深い位置に存在する腫瘍48を表示する場合について説明する。
【0057】
図4(a)は、腫瘍40が形成された消化管46を消化管46の長手方向と垂直な平面によって切断した断面図である。観察方向について腫瘍40よりもさらに深い位置には、腫瘍48が形成されている。なお、フラッシュライトの位置、向きについては、第1の実施形態と同様である。図4(b)は、図4(a)に示したフラッシュライト位置、観察方向、観察サブ領域を設定した場合に、表示部12が表示する投影画像である。図4(c)は、視点からの観察サブ領域の深度を示した画像特性曲線を示している。直線Eは初期設定を、直線Fは新たな設定を示している。なお、前記深度を表す画像特性曲線は一般的に曲線であるが、後述する理由によりE、Fともに直線となっている。また、図4(d)は、前記深度を表す画像特性曲線を説明するための図であり、三次元ボクセル空間における視点と観察サブ領域44(錐体)を示している。
【0058】
まず、図4(d)を参照して、図4(a)の深度を表す画像特性曲線の説明をする。同図において、立体角68は、観察サブ領域44の頂点の部分が持つ立体的な広がりである。また、中心軸66の長さを深度と定義する。その他の構成要素は図3(d)と同様である。
【0059】
図4(c)に示した深度を表す画像特性曲線は、立体角68と深度との関係を示す曲線(直線)である。深度を表す画像特性曲線Eが直線となっているのは、視点から一定距離内に存在する対象物を画像化するためである。そして、視点Oからさらに離れた一定距離内に存在する対象の投影画像を得るためには、レイがその対象を通過するように、中心軸66すなわち深度を深く設定すれば良い。こうして、すべての立体角68について、さらに深い深度として設定されたのが、直線Fである。
【0060】
次に、深度を新たに設定する設定動作について説明する。
【0061】
予め腫瘍48の存在がわかっている場合や、確認的に腫瘍40以外の腫瘍が形成されていないか等、観察方向に沿ってさらに深い位置に存在する組織像を映し出すことは、有効な画像情報を提供するために大変重要である。
【0062】
通常のレンダリング処理は、観察方向について所定の深度までボリュームデータを処理の対象としており、当該深度よりさらに深いボリュームデータについては、不透明度0を割り当てることで表示しないようにしている。従って、前記所定の深度よりさらに深い位置に腫瘍等がある場合、この腫瘍についてのボリュームデータは、事実上表示の対象には含まれないことになり、結果として、腫瘍の情報を得ることができない。
【0063】
これに対する解決策として、本発明に係る三次元画像処理装置によれば、観察サブ領域の観察方向からの深度を変更することができる。すなわち、オペレータにより、新しい直線Fが新たに設定されたとする。この設定操作は、第1の実施形態と同様の操作によって実現できる。
【0064】
領域深度制御部85は、上記再入力された直線Fに従って、観察サブ領域の深度を変更し、三次元画像処理部6が、直線Fに基づく新たな観察サブ領域についてレンダリング処理を実行するように制御する。
【0065】
図4(e)は、直線Fに基づいて変更された深度の観察サブ領域等を模式的に示す図である。図4(f)は、表示部12が表示する投影画像であって、特にサブ領域投影画像45は、直線Fの如く新たに設定された深度を有する観察サブ領域について、レンダリング処理を実行した投影画像を示している。観察サブ領域の深度を深くしたことによって、腫瘍48がサブ領域投影画像45内に表示されている。
【0066】
このような構成によれば、三次元画像処理において特定領域を設定する場合には、その領域深度を変更可能にできるので、視点から更に深度方向に存在する表示されていない所望の対象を、適切に表示することができる。その結果、有効な臨床情報提供を可能にする。
【0067】
なお、上記説明において、深度を変えるために、立体角と深度との対応関係を利用したが、視点Oから一定距離内に存在する対象物を画像化するためには、深度の値をただ一つ入力して設定できるような構成であっても、目的を達成することができる。
【0068】
(第4実施形態)
第3の実施形態により、図4(f)のサブ領域投影画像45内に腫瘍40と腫瘍48の双方を表示することができた。第4実施形態では、第3の実施形態と同じレンダリング条件と画像特性設定として、図4(e)から出発する。そして、腫瘍48のみに関心がある場合を想定して(例えば、腫瘍48が悪性であり、腫瘍40は良性である場合等)、サブ領域投影画像45から腫瘍40の表示を消し去る画像処理の例を説明する。
【0069】
図5(a)は、観察サブ領域について、視点から観察方向についての深度と不透明度との関係を示す、深度−不透明度曲線を示している。同図の曲線Gは初期設定の深度−不透明度曲線であり、曲線Hは本発明に係る三次元画像処理装置によって新たに設定された深度−不透明度曲線である。図5(b)は、腫瘍40が形成された消化管46を長手方向と垂直な平面によって切断した断面図である。図5(c)は、表示部12が表示する投影画像であって、特にサブ領域投影画像45は曲線Hに基づいて処理された投影画像を示している。
【0070】
図5(a)の曲線Gに基づいて、図4(f)に示した画像が表示されていたとする。このとき、手前側の腫瘍40の画像を消し去る場合には、深度−不透明度曲線を曲線Gから曲線Hに新たに設定する。この設定操作は、第1の実施形態と同様である。すなわち、曲線Hは、曲線Gと比べると深度の浅いボリュームデータについてはさらに低い不透明度を有している。
【0071】
深度−不透明度制御部87は、三次元画像処理部6が、観察サブ領域44について再入力された曲線Gに従ったレンダリング処理を実行するように制御する。その結果、関心のない腫瘍40のボクセルには極低い不透明度(例えば、不透明度0等)を割り当て、消化管壁46には第1の実施形態と同じように腫瘍48を表示できる程度に低い不透明度を割り当て、さらに興味のある腫瘍48のボクセルには消化管壁46よりも高い不透明度を割り当てられる。
【0072】
図5(c)におけるサブ領域投影画像45は、観察サブ領域44について曲線Hに基づいたレンダリング処理による投影画像を示している。観察サブ領域44の深度に対する不透明度を変更したことで、腫瘍40の像がサブ領域投影画像45から消し去られている。腫瘍40は完全に消さなくとも、観察したい対象を妨げない程度の不透明度を有して表示するように深度−不透明度曲線を設定してもよい。
【0073】
なお、腫瘍48のみを消し去りたい場合には、腫瘍40と腫瘍48についての不透明度の割り当てを当該第4の実施形態で示すたものと逆に設定、すなわち、領域深度に応じて腫瘍40には高い不透明度、腫瘍48には極低い不透明度をそれぞれ設定すればよい。しかし、第3の実施形態に示した手順を逆にとだること、すなわち、観察サブ領域44の深度を浅くしても実現することができる。
【0074】
このような構成によれば、三次元画像処理において、視点からの深度に対する不透明度を任意に設定できるので、表示する必要のない組織のボリュームデータに割り当てる不透明度を低くできる。その結果、関心のある画像のみ表示することができ、有効な臨床情報提供を可能にする。特に、観察サブ領域44の深度の浅い場所に表示する必要のない組織が存在する時に有効である。
【0075】
(第5実施形態)
第5実施形態は、表示部12に表示された投影画像において、サブ領域投影画像45以外の領域の投影画像(以下、背景と呼ぶ)の色を変更することで、より関心領域を観察し易くする例を示す。
【0076】
なお、当該第5の実施形態におけるフラッシュライトの設定は、図4(f)の場合と同様である。
【0077】
図6(a)は、画素値に対する背景の色について、初期設定のRGB比を示している。図6(b)は、図6(a)のRGB比に基づいてレンダリング処理された投影画像を示す図である。図6(c)は、画素値に対する背景の色について新しく設定した、RGB比を示している。図6(d)は、図6(c)のRGB比に基づいてレンダリング処理された投影画像を示す図である。
【0078】
図6(b)では、サブ領域投影画像45と背景とがほぼ同色となっており、見やすい画像ではない。この図6(b)に示した画像のRGB比は、図6(a)のようである。このとき、オペレータにより、図6(c)に示すような新しいRGB比が新たに設定されたとする。この設定操作は、RGB比設定画面を表示部12に表示させ、マウスや入力ペン等の入力装置により新たな曲線の概形を入力することで実行できる。
【0079】
背景色制御部87は、上記再入力されたRGB比に従って、三次元画像処理部6が実行するレンダリング処理におけるRGB比の割り当てを制御する。
【0080】
図6(d)は、図6(c)のRGB比に基づいてレンダリング処理による投影画像を示している。背景のRGB比を変更したことで背景の色とサブ領域投影画像45の色とが区別され、より見やすい像となっている。
【0081】
このような構成によれば、三次元画像処理において、背景のRGB比を任意に設定できるので、背景の色とサブ領域投影画像45の色とを区別して表示することができる。その結果、関心のある領域をより見やすく表示することができ、有効な臨床情報提供を可能にする。
【0082】
なお、これまで説明してきた投影画像は、図6(d)と同様にRGB比が設定されたものである。
【0083】
(第6実施形態)
第1〜第5の実施形態では、消化管壁46に形成された腫瘍40、又はこれらの近くに形成された腫瘍48を画像表示する場合を例として、観察サブ領域内又は背景の画像特性を制御することで所望の画像を得る場合について説明した。
【0084】
これに対し、第6の実施形態では、複数のボリュームデータから生成した各投影画像を合成して表示する場合に、投影画像毎にサブ領域投影画像の画像特性を制御して適切な画像を得る実施形態を説明する。以下、その例として、心臓の大動脈弁に形成された疾患の観察を取り上げる。
【0085】
図7(a)は、各対象ごとの輝度値と不透明度の関係を表す不透明度曲線を示している。曲線Iはドプラモードによる血流像についての初期の設定、曲線Jは血流像について新しい設定、曲線KはBモードによる組織像において疾患56のみについての設定を示している。図7(b)は、血流像について新たに設定された曲線Jに基づいてレンダリング処理された三次元画像を示す図である。
【0086】
前述した通り、図8(c)は、Bモード画像による大動脈弁50と、当該大動脈弁50に形成された疾患のため逆噴流を含んでいるドップラ画像による血流52を模式的に示している。血流図8(c)に示すように、従来の画像処理では、疾患は血流52とのオーバーラップにより実際には画像として観察することはできない。
【0087】
しかし、本発明に係る三次元画像処理装置によれば、Bモードによる疾患56の画像とドプラモードによる血流像との各不透明度を調節することが可能である。すなわち、オペレータにより、血流に関する不透明度を、曲線Iから新しい画像特性曲線Jに新たに設定する。また、疾患56に関する不透明度を、曲線Kに設定する。この疾患56に限定した不透明度の設定は、第1の実施形態若しくは第4の実施形態を適用することで実現できる。また、この設定操作は、画像特性曲線設定画面を表示部12に表示させ、マウスや入力ペン等の入力装置により新たな曲線の概形を入力することで実行できる。
【0088】
不透明度制御部81は、上記新たに設定された画像特性曲線に従って、三次元画像処理部6が実行するレンダリング処理における不透明度の割り当てを制御する。すなわち、血流52のボクセルには相当の低い不透明度を割り当てられ、疾患56のボクセルには血流52よりも高い不透明度を割り当てるレンダリング処理が実行される。その結果、図7(b)に示す様に、血流52の背後にある疾患56を表示した投影画像を得ることができる。
【0089】
このような構成によれば、三次元画像処理において対象がオーバーラップした場合には、各対象についての不透明度を調節可能であるから、オーバーラップした画像のうち所望の画像を取り出して適切に表示することができる。その結果、有効な臨床情報提供を可能にする。
【0090】
なお、本実施形態では、複数のボリュームデータから生成した各投影画像を合成して表示する場合として、投影画像毎にサブ領域投影画像の不透明度を制御して適切な画像を得る例を説明したが、その他の画像特性についての投影画像毎の制御も、もちろん可能である。
【0091】
以上、本発明を第1〜第6の実施形態に基いて説明したが、上記実施形態に限定されるものではなく、例えば以下に示す(1)〜(3)のように、その要旨を変更しない範囲で種々変形可能である。
【0092】
(1)第1〜第6の実施形態では、観察領域内に観察サブ領域を設定し、この観察サブ領域に関する投影画像又は背景の画像特性を制御することで所望の画像を得る場合について説明した。
【0093】
しかし、本発明の本質は、画像特性を制御することで重畳された画像等を適切に表示することにある。従って、観察サブ領域を設定せず、観察領域内の画像についての画像特性を制御する構成であってもよい。これは、例えば、第2の実施形態で示した視野角を90度以上に設定することで実現できる。また、他の例として、観察サブ領域画像特性制御部10と同様の構成を有する観察領域画像特性制御部を有する構成であってもよい。この観察領域画像特性制御部は、投影画像についての不透明度、観察領域の視野角、観察領域の深度、色、観察領域の形状の画像特性を制御する各制御部を有し、観察領域に関するレンダリング処理について、三次元画像処理部6を制御するものである。
【0094】
(2)第1〜第6の実施形態においては、各画像特性の新たな設定はマニュアル操作によって実行された。これに対し、予め設定されている複数パターンの画像特性から選択する構成であってもかまわない。また、マニュアル操作によって新たに設定された各画像特性を登録可能な構成としてもよい。この様な構成によれば、さらに作業性を向上させることができる。
【0095】
(3)上述した実施形態では例を示していないが、その他の画像特性としてサブ領域投影画像の形状が挙げられる。従って、本発明に係る三次元画像処理装置は、観察サブ領域形状制御部をさらに有し、サブ領域投影画像の形状を変更可能とすることも可能である。上述した第1〜第5の実施形態では、サブ領域投影画像の形状は円形であった。これは、三次元ボクセル空間において、視点からボクセルに向けて放つレイの束(観察サブ領域)が円錐状であることによる。例えば、観察サブ領域の形状を四角形にしたければ、前記レイの束(観察サブ領域)を四角錐状にすればよい。これは、第2実施形態で示した視野角を表す画像特性曲線を適切に設定することで実現できる。
【0096】
【発明の効果】
以上述べたように、投影画像の画像特性を設定可能にすることで、組織間や血流と組織との重畳がある場合であっても、適切な画像を得ることができる。その結果、有益な臨床情報の提供を実現できる。
【図面の簡単な説明】
【図1】本発明に係る三次元画像装置の概略構成を示す図。
【図2】第1の実施形態を説明するための図。
【図3】第2の実施形態を説明するための図。
【図4】第3の実施形態を説明するための図。
【図5】第4の実施形態を説明するための図。
【図6】第5の実施形態を説明するための図。
【図7】第6の実施形態を説明するための図。
【図8】従来技術を説明するための図。
【符号の説明】
1…三次元画像処理装置
2…三次元データ記憶部
6…三次元画像処理部
8…観察サブ領域画像特性制御部
10…入力部
12…表示部
30…三次元画像生成部
40…腫瘍
42…フラッシュライト
44…観察サブ領域
45…サブ領域投影画像
46…消化管壁
48…腫瘍
50…大動脈弁
52…血流
54…視点
56…疾患
62…母線
64…視野角
66…中心軸
68…立体角 81…不透明度制御部
83…領域角度制御部
85…領域深度制御部
87…深度−不透明度制御部
89…背景色制御部
Claims (4)
- 表示対象物のボリュームデータを記憶する記憶手段と、
視点と、観察方向と、第1の領域を定義するための視野角と、前記第1の領域に含まれる第2の領域を定義するための視野角と、を設定すると共に、前記第2の領域に含まれるボクセルデータに割り当てる不透明度を、前記第2の領域内の深さ毎に個別に設定するための設定手段と、
前記視点と、前記観察方向と、前記不透明度と、前記第1の領域に含まれるボリュームデータと、を用いてボリュームレンダリング処理を実行することで、前記第2の領域については、深さに応じて不透明度が割り当てられている投影画像を生成する画像生成手段と、
を具備することを特徴とする三次元画像処理装置。 - 前記設定手段は、前記第1の領域の領域及び前記第2の領域のそれぞれの深さを設定すること特徴とする請求項1記載の三次元画像処理装置。
- 前記設定手段は、前記第2の領域に含まれるボクセルデータに割り当てる不透明度を、前記第2の領域を定義するための視野角毎に設定することを特徴とする請求項2記載の三次元画像処理装置。
- 前記画像生成手段は、前記第1の領域における前記第2の領域に対応する領域とそれ以外の領域とについて、異なる色を割り当てて前記投影画像を生成することを特徴とする請求項1乃至3のうちいずれか一項載の三次元画像処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP25955399A JP4350226B2 (ja) | 1999-09-13 | 1999-09-13 | 三次元画像処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP25955399A JP4350226B2 (ja) | 1999-09-13 | 1999-09-13 | 三次元画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001084409A JP2001084409A (ja) | 2001-03-30 |
JP4350226B2 true JP4350226B2 (ja) | 2009-10-21 |
Family
ID=17335724
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP25955399A Expired - Fee Related JP4350226B2 (ja) | 1999-09-13 | 1999-09-13 | 三次元画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4350226B2 (ja) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002329219A (ja) * | 2001-04-27 | 2002-11-15 | Mitsubishi Precision Co Ltd | 3次元画像のピッキング方法及びプログラム並びに3次元画像処理装置 |
US7250949B2 (en) * | 2003-12-23 | 2007-07-31 | General Electric Company | Method and system for visualizing three-dimensional data |
JP4801892B2 (ja) * | 2004-09-10 | 2011-10-26 | 株式会社東芝 | 医用画像表示装置 |
JP2006334259A (ja) * | 2005-06-06 | 2006-12-14 | Toshiba Corp | 三次元画像処理装置および三次元画像表示方法 |
US8149236B2 (en) * | 2005-08-01 | 2012-04-03 | National University Corporation NARA Institute of Science and Technology | Information processing apparatus and program |
EP1935344B1 (en) * | 2005-10-07 | 2013-03-13 | Hitachi Medical Corporation | Image displaying method and medical image diagnostic system |
JP5170993B2 (ja) * | 2006-07-31 | 2013-03-27 | 株式会社東芝 | 画像処理装置及び該画像処理装置を備える医用診断装置 |
JP5591440B2 (ja) * | 2007-01-17 | 2014-09-17 | 株式会社東芝 | 医用画像表示装置 |
JP4376944B2 (ja) | 2008-04-03 | 2009-12-02 | 富士フイルム株式会社 | 中間画像生成方法および装置ならびにプログラム |
JP2012016575A (ja) * | 2010-06-07 | 2012-01-26 | Toshiba Corp | 画像処理装置及び医用画像診断装置 |
JP2012050586A (ja) * | 2010-08-31 | 2012-03-15 | Fujifilm Corp | 投影画像生成装置、方法、及びプログラム |
WO2012053514A1 (ja) * | 2010-10-19 | 2012-04-26 | 株式会社 東芝 | 超音波診断装置、超音波画像処理装置及び超音波画像処理方法 |
JP5904544B2 (ja) * | 2012-06-28 | 2016-04-13 | 富士通株式会社 | 可視化プログラム、可視化方法、および可視化装置 |
JP5961504B2 (ja) * | 2012-09-26 | 2016-08-02 | 富士フイルム株式会社 | 仮想内視鏡画像生成装置およびその作動方法並びにプログラム |
JP5873982B2 (ja) * | 2012-10-09 | 2016-03-01 | パナソニックIpマネジメント株式会社 | 3次元表示装置、3次元画像処理装置および3次元表示方法 |
JP5736620B2 (ja) * | 2013-11-28 | 2015-06-17 | 国立大学法人名古屋大学 | 全球型視野をもつ仮想内視鏡装置 |
JP5943287B2 (ja) * | 2015-04-02 | 2016-07-05 | 国立大学法人名古屋大学 | 全球型視野をもつ仮想内視鏡装置 |
CN112529976A (zh) * | 2020-11-26 | 2021-03-19 | 上海商汤智能科技有限公司 | 目标显示方法及装置、电子设备和存储介质 |
-
1999
- 1999-09-13 JP JP25955399A patent/JP4350226B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2001084409A (ja) | 2001-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11464575B2 (en) | Systems, methods, apparatuses, and computer-readable media for image guided surgery | |
JP4350226B2 (ja) | 三次元画像処理装置 | |
JP4421016B2 (ja) | 医用画像処理装置 | |
Jolesz et al. | Interactive virtual endoscopy. | |
CN101653381B (zh) | 医用图像处理装置、超声波图像取得装置以及x射线ct装置 | |
US9364294B2 (en) | Systems, methods, apparatuses, and computer-readable media for image management in image-guided medical procedures | |
JP4450786B2 (ja) | 画像処理方法および画像処理プログラム | |
US8009167B2 (en) | Virtual endoscopy | |
JP4786307B2 (ja) | 画像処理装置 | |
JP5417609B2 (ja) | 医用画像診断装置 | |
JP4105176B2 (ja) | 画像処理方法および画像処理プログラム | |
WO2007094412A1 (ja) | 画像表示装置及びプログラム | |
JP4122463B2 (ja) | 医療用可視画像の生成方法 | |
JP4686279B2 (ja) | 医用診断装置及び診断支援装置 | |
JP2001276066A (ja) | 三次元画像処理装置 | |
US20050058326A1 (en) | System and method for the creation of a virtual observation and access channel in medical 3D images | |
JP5454841B2 (ja) | 医用画像処理装置 | |
JP2010075549A (ja) | 画像処理装置 | |
JPH0838433A (ja) | 医用画像診断装置 | |
JP2010284405A (ja) | 医用画像処理装置、医用画像診断装置および医用画像処理プログラム | |
JP6533687B2 (ja) | 医用画像処理装置、医用画像処理方法、及び医用画像処理プログラム | |
JPH08280710A (ja) | 実時間医用装置及び患者に医用手順を遂行するために操作者を支援する方法 | |
JP5305635B2 (ja) | 医用画像表示装置 | |
JP5487339B2 (ja) | 医用画像処理装置 | |
RU2735068C1 (ru) | Система и способ для визуализации на дисплее изображения частично уплощенной поверхности внутренней поверхности полости, а также постоянный машиночитаемый носитель |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060907 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090309 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090407 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090608 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090630 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090722 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120731 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130731 Year of fee payment: 4 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |