JP2019207450A - ボリュームレンダリング装置 - Google Patents
ボリュームレンダリング装置 Download PDFInfo
- Publication number
- JP2019207450A JP2019207450A JP2018101171A JP2018101171A JP2019207450A JP 2019207450 A JP2019207450 A JP 2019207450A JP 2018101171 A JP2018101171 A JP 2018101171A JP 2018101171 A JP2018101171 A JP 2018101171A JP 2019207450 A JP2019207450 A JP 2019207450A
- Authority
- JP
- Japan
- Prior art keywords
- voxel
- image
- opacity
- value
- color component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000009877 rendering Methods 0.000 title claims abstract description 181
- 238000012545 processing Methods 0.000 claims abstract description 70
- 238000000034 method Methods 0.000 claims description 138
- 230000008569 process Effects 0.000 claims description 80
- 238000006243 chemical reaction Methods 0.000 claims description 73
- 238000005266 casting Methods 0.000 claims description 42
- 230000009466 transformation Effects 0.000 claims description 30
- 239000013598 vector Substances 0.000 claims description 25
- 238000012937 correction Methods 0.000 claims description 23
- 238000004364 calculation method Methods 0.000 claims description 21
- 238000009499 grossing Methods 0.000 claims description 19
- 239000011159 matrix material Substances 0.000 claims description 11
- 230000009467 reduction Effects 0.000 claims description 9
- 238000002156 mixing Methods 0.000 claims description 8
- 230000002238 attenuated effect Effects 0.000 claims description 5
- 230000006870 function Effects 0.000 claims description 4
- 238000000547 structure data Methods 0.000 claims description 3
- 230000001678 irradiating effect Effects 0.000 claims description 2
- 238000003325 tomography Methods 0.000 abstract 2
- 238000013507 mapping Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 15
- 210000000056 organ Anatomy 0.000 description 12
- 230000008859 change Effects 0.000 description 7
- 238000003860 storage Methods 0.000 description 5
- 239000003086 colorant Substances 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 210000004072 lung Anatomy 0.000 description 3
- 210000000988 bone and bone Anatomy 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 210000001562 sternum Anatomy 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Abstract
Description
対象物に対して所定の間隔で撮影され、各画素に信号値が付与された複数の2次元の断層画像に基づいて、あらかじめ定義されたカラ−マップを参照してボリュームレンダリング像を生成するためのボリュームレンダリング装置であって、
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段と、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルにの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段と、
前記不透明度ボクセル画像および前記色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段と、
を備えていることを特徴とするボリュームレンダリング装置を提供する。
前記不透明度ボクセル画像を構成する各ボクセルの不透明度を、当該ボクセル及び当該ボクセルの近傍のボクセルの不透明度の平均値をに置き換えるスムージング処理を行うスムージング手段を更に備え、
前記レンダリング手段は、スムージング処理された不透明度ボクセル画像を用いてボリュームレンダリング像を生成することを特徴とする。
対象物に対して所定の間隔で撮影され、各画素に信号値が付与された複数の2次元の断層画像に基づいて、あらかじめ定義されたカラ−マップを参照してボリュームレンダリング像を生成するためのボリュームレンダリング装置であって、
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段と、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段と、
前記色成分ボクセル画像の各ボクセルに前記不透明度ボクセル画像の対応するボクセルの不透明度を追加し、ボクセル値として不透明度及び色成分の値が定義された不透明度付色成分ボクセル画像を作成する不透明度付色成分ボクセル画像作成手段と、
前記不透明度付色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段と、
を備えていることを特徴とするボリュームレンダリング装置を提供する。
前記不透明度付色成分ボクセル画像作成手段は、スムージング処理された不透明度ボクセル画像を用いて前記不透明度付色成分ボクセル画像を作成することを特徴とする。
前記不透明度付色成分ボクセル画像作成手段は、色補正処理された色成分ボクセル画像を用いて前記不透明度付色成分ボクセル画像を作成することを特徴とする。
前記色成分ボクセル画像作成手段は、前記複数の断層画像の二次元の各軸方向、断層画像と直交する軸方向の三軸の各方向において、M画素おきに対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成するものであることを特徴とする。
前記断層画像が16ビットの信号値をもつ画像の場合、前記複数の断層画像の全てまたは特定の断層画像を基に信号値の最大値Dmaxと最小値Dminを算出し、最大値Dmaxより(最大値Dmax−最小値Dmin)×γ(γは0.3未満の実数値)だけ減じた値を上限値Lmaxとし、最小値に(最大値Dmax−最小値Dmin)×γだけ加算した値を下限値Lminとするとき、信号値が上限値Lmaxを超える場合は255、下限値Lminを下回る場合は0、下限値Lminから上限値Lmaxの範囲を0から255に線形変換することにより、信号値を8ビットに変換した階調低下画像を作成する断層画像階調変換手段を更に設け、
前記ボクセル画像作成手段は、信号値に対して色成分の値と不透明度を対応付けて定義された階調低下画像用のカラーマップを参照して、前記複数の階調低下画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成し、
前記色成分ボクセル画像作成手段は、前記階調低下画像用のカラーマップを参照して、前記複数の階調低下画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成することを特徴とする。
前記不透明度ボクセル画像を前記生成するボリュームレンダリング像に投影変換した座標系を視点座標系とすると、視点座標系において、前記ボリュームレンダリング像の各画素(x,y)よりZ軸方向に沿って、Z軸の上限値より下限値に向けて、視点座標系の各ボクセル座標(x,y,z)ごとに第1の座標変換を行って前記不透明度ボクセル画像より不透明度を取得しながら、不透明度が0でない不透明ボクセルを探索し、最初に見つかった不透明度が0でない不透明ボクセルの視点座標系におけるZ座標を、前記ボリュームレンダリング像の各画素(x,y)ごとに記録した探索制御マスクを作成する探索制御マスク作成手段と、
前記ボリュームレンダリング像の各画素(x,y)に対して、前記探索制御マスクよりZ座標を取得し、取得したZ座標よりZ軸の下限値に向けてZ軸方向に沿って、所定の光強度をもつ仮想光を照射する際、視点座標系の各ボクセル座標(x,y,z)ごとに第1の座標変換を行って前記不透明度ボクセル画像より不透明度を取得し、不透明度が0でないボクセルが見つかった場合、当該座標(x,y,z)に対して第2の座標変換を行って前記色成分ボクセル画像より(R,G,B)で構成される色成分を取得し、当該ボクセルの不透明度を基に前記光強度を減衰させるとともに、当該ボクセルの不透明度及び色成分並びに前記減衰させた光強度に基づいて累積輝度値を算出する処理を繰り返し、算出された累積輝度値を基に、前記ボリュームレンダリング像の当該画素(x,y)に対応する(R,G,B)で構成される画素値として与えるようにしているレイキャスティング手段と、を備えていることを特徴とする。
所定の3次元座標系における回転を定義した3×3行列、xyz軸各方向のオフセット値、xyz軸方向の拡大又は縮小倍率、z軸方向変倍率を含む前記所定の座標変換のパラメータを取得し、
前記視点座標系のボクセルの整数値の座標(x,y,z)を、前記パラメータに基づいて前記不透明度ボクセル画像の座標系に変換を行って、前記不透明度ボクセル画像の実数値の座標(X,Y,Z)を算出し、
算出した実数値の座標(X,Y,Z)の近傍の複数の整数値の座標(x’,y’,z’)座標に対応する前記不透明度ボクセル画像の複数のボクセルを特定し、
特定した複数のボクセルの不透明度に基づいて前記不透明度ボクセル画像より取得される不透明度として算出するようにしていることを特徴とする。
所定の3次元座標系における回転を定義した3×3行列、xyz軸各方向のオフセット値、xyz軸方向の拡大又は縮小倍率、z軸方向変倍率を含む前記所定の座標変換のパラメータを取得し、
前記視点座標系のボクセルの整数値の座標(x,y,z)を、前記パラメータに基づいて前記色成分ボクセル画像の座標系に変換を行って、前記色成分ボクセル画像の実数値の座標(X,Y,Z)を算出し、
算出した実数値の座標(X,Y,Z)の近傍の複数の整数値の座標(x’,y’,z’)座標に対応する前記色成分ボクセル画像の複数のボクセルを特定し、
特定した複数のボクセルの色成分に基づいて前記色成分ボクセル画像より取得される色成分として算出するようにしていることを特徴とする。
前記レンダリング手段は、
前記色成分ボクセル画像で構成される3Dテクスチャ画像を生成する3Dテクスチャ登録手段と、
前記3Dテクスチャ画像に対して所定の座標変換を行って変換後3Dテクスチャ画像を生成する座標変換手段と、
3次元空間のXY座標面上の四角形をZ軸方向に並べ、前記各四角形の4頂点の各3次元座標を前記変換後3Dテクスチャ画像の所定の4箇所の各3次元座標に対応付けた積層四角形を設定する積層四角形設定手段と、
所定の視点からZ軸方向に平行な視線上の前記積層四角形上のの3次元座標に対応する前記変換後3Dテクスチャ画像のボクセルの(R,G,B)で構成される色成分を当該ボクセルの不透明度に基づいて前記視点から遠い四角形の順にアルファブレンディングして得られた色成分を、前記ボリュームレンダリング像の(R,G,B)で構成される画素値として与えるようにしている画素値算出手段と、
を備えていることを特徴とする。
所定の3次元座標系における回転を定義した4×4行列、視野角度、視点位置、クリッピング位置、xyz軸各方向のオフセット値、xyz軸方向の拡大又は縮小倍率、z軸方向変倍率を含む所定の座標変換のパラメータを取得し、
前記3Dテクスチャ画像に対して、前記取得したパラメータを用いた前記所定の座標変換を行って前記変換後3Dテクスチャ画像を生成するようにしていることを特徴とする。
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段、
前記不透明度ボクセル画像および前記色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段、
として機能させるためのプログラムを提供する。
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段、
前記色成分ボクセル画像の各ボクセルに前記不透明度ボクセル画像の対応するボクセルの不透明度を追加し、不透明度付色成分ボクセル画像を作成する不透明度付色成分ボクセル画像作成手段、
前記不透明度付色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段、
として機能させるためのプログラムを提供する。
対象物に対して所定の間隔で撮影された複数の2次元の断層画像の各画素に対応し、あらかじめ定義されたカラ−マップを参照して定められた各ボクセルで構成されるボクセル構造体のボクセルデータであって、
前記ボクセルデータは、少なくとも、前記各ボクセルの値として不透明度が定義された不透明度ボクセル画像と、前記各ボクセルの値として色成分の値が定義された色成分ボクセル画像とを含む、ボクセル構造体のデータ構造を有し、
前記不透明度ボクセル画像および前記色成分ボクセル画像は、レンダリング手段によりのボリュームレンダリング像を生成するために用いられることを特徴とするボクセルデータを提供する。
対象物に対して所定の間隔で撮影された複数の2次元の断層画像の各画素に対応し、あらかじめ定義されたカラ−マップを参照して定められた各ボクセルで構成されるボクセル構造体のボクセルデータであって、
前記ボクセルデータは、少なくとも前記各ボクセルの値として不透明度が定義された不透明度ボクセル画像と、前記各ボクセルの値として色成分の値及び不透明度が定義された不透明度付色成分ボクセル画像とを含む、ボクセル構造体のデータ構造を有し、
前記不透明度ボクセル画像は前記不透明度付色成分ボクセル画像を生成するために用いられ、前記不透明度付色成分ボクセル画像は、レンダリング手段によりボリュームレンダリング像を生成するために用いられることを特徴とするボクセルデータを提供する。
<1.装置構成>
図1は、本開示の一実施形態に係るボリュームレンダリング装置100のハードウェア構成図である。本実施形態に係るボリュームレンダリング装置100は、汎用のコンピュータで実現することができ、図1に示すように、CPU(Central Processing Unit)1と、コンピュータのメインメモリであるRAM(Random Access Memory)2と、CPU1が実行するプログラムやデータを記憶するためのハードディスク、SSD(Solid State Drive),フラッシュメモリ等の大容量の記憶装置3と、キーボード、マウス等の指示入力I/F(インターフェース)4と、データ記憶媒体等の外部装置とデータ通信するためのデータ入出力I/F(インターフェース)5と、液晶ディスプレイ等の表示デバイスである表示部6と、グラフィックスに特化した演算処理部であるGPU(Graphics Processing Unit)7と、表示部6に表示する画像を保持するフレームメモリ8と、を備え、互いにバスを介して接続されている。GPU7による演算結果はフレームメモリ8に書き込まれるため、GPU7とフレームメモリ8は、表示部6へのインタフェースを備えたビデオカードに搭載されて汎用のコンピュータにバス経由で装着されていることが多い。
次に、図1、図2に示したボリュームレンダリング装置の処理動作について説明する。図3は、本実施形態に係るボリュームレンダリング装置の処理動作を示すフローチャートである。まず、断層画像読込手段10が、複数の断層画像を読み込む。DICOM形式の複数の断層画像を読み込んだら、ROIクリッピング設定手段20が、ROIクリッピング設定を行う(ステップS10)。ROIとはRegion of Interestの略であり、関心領域を意味する。ここでは、ボリュームレンダリング像およびボクセル画像の作成対象とする範囲を示す。ROIを設定することにより、3次元的に任意の位置で被写体を断裁したボリュームレンダリング像を生成することができ、体表や骨に隠れた臓器や臓器の内部を描出するのに用いられる。ステップS20以降の処理において、所定の範囲にボクセル画像作成対象が限定されるように、ステップS10においてROIを設定する。
図5に模式的に示した2つのボクセル画像は、実際には、RAM3等のメモリ上で各ボクセル画像ごとに記録される。したがって、図5(a)に示したように、小さな不透明度ボクセル画像は、メモリ上においても、小さい領域にまとまって記録されることになり、CPU1やGPU7によるアクセス速度が大幅に向上する。
レイキャスティング方式に対応したボクセルデータは、複数の2次元の断層画像の各画素に対応し、カラ−マップを参照して定められた各ボクセルで構成されるボクセル構造体であり、各ボクセルの値として不透明度αが定義された不透明度ボクセル画像と、各ボクセルの値として色成分の値が定義された色成分ボクセル画像とを含むボクセル構造体のデータ構造を有している。
3Dテクスチャマッピング方式に対応したボクセルデータは、複数の2次元の断層画像の各画素に対応し、カラ−マップを参照して定められた各ボクセルで構成されるボクセル構造体であり、各ボクセルの値として不透明度が定義された不透明度ボクセル画像と、各ボクセルの値として色成分の値及び不透明度が定義された不透明度付色成分ボクセル画像とを含む、ボクセル構造体のデータ構造を有している。
ボクセル画像として、別体である不透明度ボクセル画像と色成分ボクセル画像または不透明度付色成分ボクセル画像を作成することにより、不透明度を参照する際、不透明度ボクセル画像のみを参照すればよいことになる。このため、ボリュームレンダリング像の作成過程において、頻繁に行われる不透明度の参照、特に複数の近傍のボクセルの不透明度の参照に要するアクセス時間が大幅に削減される。その結果、ボリュームレンダリング像を高速に作成し、カラーマップの変更等に伴う再表示処理を高速に行うことに寄与する。
Gx=(Vα(x+1,y,z)−Vα(x−1,y,z))・(Rxy/Rz)
Gy=(Vα(x,y+1,z)−Vα(x,y−1,z))・(Rxy/Rz)
Gz=(Vα(x,y,z+1)−Vα(x,y,z−1))
G=(Gx2+Gy2+Gz2)1/2
S(x,y,z)=(1−Ab)(|Gx・Lx+Gy・Ly+Gz・Lz|)/G+Ab
V´(x,y,z,c)=S(x,y,z)・V(x,y,z,c)
V´(x,y,z,3)=Vα(x,y,z)
V(x,y,z,0)=Σk=-1,1Σj=-1,1Σi=-1,1;Vα(x+i,y+j,z+k)>0V(x+i,y+j,z+k,0)/C
V(x,y,z,1)=Σk=-1,1Σj=-1,1Σi=-1,1;Vα(x+i,y+j,z+k)>0V(x+i,y+j,z+k,1)/C
V(x,y,z,2)=Σk=-1,1Σj=-1,1Σi=-1,1;Vα(x+i,y+j,z+k)>0V(x+i,y+j,z+k,2)/C
そして、レンダリング手段70が、3Dテクスチャマッピング方式を実行する際に用いられる3Dテクスチャ画像として不透明度付色成分ボクセル画像を登録する。
図8は、3Dテクスチャマッピング方式の処理を行う場合の、レンダリング手段70の構成を示す図である。図8に示すように、レンダリング手段70は、3Dテクスチャ登録手段71、座標変換手段72、積層四角形設定手段73、画素値算出手段74を有する。上述のように、レンダリング手段70は、3Dテクスチャマッピング方式の場合は、CPU1が補助しながら、主にGPU7においてプログラムを実行することにより実現されるが、特に処理負荷が大きい座標変換手段72および画素値算出手段74は、汎用コンピュータのビデオカードに搭載されているGPUおよびフレームメモリを用いて実行するようにすることが好ましい。
R´=R・α+(1−α)・Rb
G´=G・α+(1−α)・Gb
B´=B・α+(1−α)・Bb
次に、レイキャスティング方式によりステップS70のレンダリング処理を行う場合について説明する。図11は、レイキャスティング方式の処理を行う場合の、レンダリング手段70の構成を示す図である。図11に示すように、レンダリング手段70は、探索制御マスク作成手段77、レイキャスティング手段78を有する。
・XYZ軸方向のオフセット値:Xoff、Yoff、Zoff(単位:ボクセル)
・拡大又は縮小倍率:ScaleXYZ各軸について同じ値を用いる。
・Z方向変倍率:Scz=Rxy/Rz、XY方向の解像度RxyとZ方向の解像度Rzの間の比率
上記ボリュームレンダリング装置では、ボクセル画像作成手段30が、複数の断層画像の総画素数と同数のボクセルによるボクセル画像を作成するようにしたが、ボクセルを間引いてボクセル数を少なくしたボクセル画像を作成するようにしてもよい。その場合、不透明度ボクセル画像作成手段31は、複数の断層画像の二次元のXY軸方向、断層画像と直交するZ軸方向の三軸の各方向において、N画素おきに対応付けて三次元に配置した各ボクセルに対して、そのボクセルの信号値を不透明度αに置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する.また、色成分ボクセル画像作成手段32または不透明度付色成分ボクセル画像作成手段33は、複数の断層画像の二次元のXY軸方向、断層画像と直交するZ軸方向の三軸の各方向において、N画素おきに対応付けて三次元に配置した各ボクセルに対して、当該ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像または不透明度付色成分ボクセル画像を作成する。例えば、N=2とした場合、XYZ方向を各々1/2に間引くことができるため、処理するボクセル数が1/8となり、高速な処理を行うことができる。これにより、利用者が、指示入力I/F4を介して対話的に、カラーマップを連続的に切り替えた場合であっても、画質が粗いボリュームレンダリング像を順次表示させて、カラーマップの更新に追従させながらボリュームレンダリング像を表示することができる。
上記実施形態では、各画素が16ビットの信号値を記録した断層画像をそのまま用いてボクセル画像を作成するようにしたが、断層画像を8ビットに階調変換して階調低下画像を作成した後、ボクセル画像を作成するようにしてもよい。断層画像を8ビットに階調変換することにより、各画素の処理における負荷を削減することができ、ボリュームレンダリング像の高速な生成に寄与する。
下限値Lmin=(Dmax−Dmin)・γ+Dmin
上限値Lmax=(Dmax−Dmin)・(1−γ)+Dmin
D8(x,y,z)=(Do(x,y,z)−Lmin)・255/(Lmax−Lmin)
D8(x,y,z)>255の場合:D8(x,y,z)=255、D8(x,y,z)<0の場合:D8(x,y,z)=0
2・・・RAM(Random Access Memory)
3・・・記憶装置
4・・・指示入力I/F
5・・・データ入出力I/F
6・・・表示部
7・・・GPU
8・・・フレームメモリ
10・・・断層画像読込手段
15・・・カラーマップ読込手段
20・・・ROIクリッピング設定手段
30・・・ボクセル画像作成手段
40・・・スムージング手段
50・・・陰影付加手段
60・・・色補正手段
70・・・レンダリング手段
71・・・3Dテクスチャ登録手段
72・・・座標変換手段
73・・・積層四角形設定手段
74・・・画素値算出手段
77・・・探索制御マスク作成手段
78・・・レイキャスティング手段
80・・・レンダリング像出力手段
100・・・ボリュームレンダリング装置
Claims (19)
- 対象物に対して所定の間隔で撮影され、各画素に信号値が付与された複数の2次元の断層画像に基づいて、あらかじめ定義されたカラ−マップを参照してボリュームレンダリング像を生成するためのボリュームレンダリング装置であって、
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段と、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段と、
前記不透明度ボクセル画像および前記色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段と、
を備えていることを特徴とするボリュームレンダリング装置。 - 前記不透明度ボクセル画像を構成する各ボクセルの不透明度を、当該ボクセル及び当該ボクセルの近傍のボクセルの不透明度の平均値に置き換えるスムージング処理を行うスムージング手段を更に備え、
前記レンダリング手段は、スムージング処理された不透明度ボクセル画像を用いてボリュームレンダリング像を生成することを特徴とする請求項1に記載のボリュームレンダリング装置。 - 対象物に対して所定の間隔で撮影され、各画素に信号値が付与された複数の2次元の断層画像に基づいて、あらかじめ定義されたカラ−マップを参照してボリュームレンダリング像を生成するためのボリュームレンダリング装置であって、
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段と、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段と、
前記色成分ボクセル画像の各ボクセルに前記不透明度ボクセル画像の対応するボクセルの不透明度を追加し、ボクセル値として不透明度及び色成分の値が定義された不透明度付色成分ボクセル画像を作成する不透明度付色成分ボクセル画像作成手段と、
前記不透明度付色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段と、
を備えていることを特徴とするボリュームレンダリング装置。 - 前記不透明度ボクセル画像を構成する各ボクセルの不透明度を、当該ボクセル及び当該ボクセルの近傍のボクセルの不透明度の平均値に置き換えるスムージング処理を行うスムージング手段を更に備え、
前記不透明度付色成分ボクセル画像作成手段は、スムージング処理された不透明度ボクセル画像を用いて前記不透明度付色成分ボクセル画像を作成することを特徴とする請求項3に記載のボリュームレンダリング装置。 - 前記色成分ボクセル画像における最外側であって、当該色成分ボクセル画像に対応する不透明度ボクセル画像におけるボクセルの不透明度が0であるボクセルの色成分の値を、前記不透明度ボクセル画像における不透明度が0であるボクセルの近傍の不透明度が0でないボクセルに対応する前記色成分ボクセル画像におけるボクセルの色成分の平均値に置き換える色補正処理を行う色補正手段を更に備え、
前記不透明度付色成分ボクセル画像作成手段は、色補正処理された色成分ボクセル画像を用いて前記不透明度付色成分ボクセル画像を作成することを特徴とする請求項3または請求項4に記載のボリュームレンダリング装置。 - 前記色成分ボクセル画像の各ボクセルの色成分の値を、
当該ボクセルに対応する前記不透明度ボクセル画像のボクセルの近傍のボクセルの不透明度を基に、当該ボクセルにおける勾配ベクトルを算出し、
算出した勾配ベクトル及び所定の光源ベクトルに基づいて陰影値を算出し、
前記色成分の値に前記陰影値を乗算した値に置き換える陰影付加手段を更に備えることを特徴とする請求項1から請求項5のいずれか一項に記載のボリュームレンダリング装置。 - 前記陰影付加手段は、前記勾配ベクトルを算出するにあたり、前記不透明度ボクセル画像の当該ボクセルのX軸方向、Y軸方向、Z軸方向の各々2近傍のボクセルの不透明度の差分値を前記勾配ベクトルのX方向成分、Y方向成分、Z方向成分として算出し、あらかじめ定義されたZ軸方向変倍率に基づいて前記Z方向成分に補正を施した単位ベクトルを、当該ボクセルにおける勾配ベクトルとして算出することを特徴とする請求項6に記載のボリュームレンダリング装置。
- 前記不透明度ボクセル画像作成手段は、前記複数の断層画像の二次元の各軸方向、断層画像と直交する軸方向の三軸の各方向において、N画素おきに対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成するものであり、
前記色成分ボクセル画像作成手段は、前記複数の断層画像の二次元の各軸方向、断層画像と直交する軸方向の三軸の各方向において、N画素おきに対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成するものであることを特徴とする請求項1から請求項7のいずれか一項に記載のボリュームレンダリング装置。 - 前記断層画像が16ビットの信号値をもつ画像の場合、前記複数の断層画像の全てまたは特定の断層画像を基に信号値の最大値Dmaxと最小値Dminを算出し、最大値Dmaxより(最大値Dmax−最小値Dmin)×γ(γは0.3未満の実数値)だけ減じた値を上限値Lmaxとし、最小値に(最大値Dmax−最小値Dmin)×γだけ加算した値を下限値Lminとするとき、信号値が上限値Lmaxを超える場合は255、下限値Lminを下回る場合は0、下限値Lminから上限値Lmaxの範囲を0から255に線形変換することにより、信号値を8ビットに変換した階調低下画像を作成する断層画像階調変換手段を更に設け、
前記不透明度ボクセル画像作成手段は、信号値に対して色成分の値と不透明度を対応付けて定義された階調低下画像用のカラーマップを参照して、前記複数の階調低下画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成し、
前記色成分ボクセル画像作成手段は、前記階調低下画像用のカラーマップを参照して、前記複数の階調低下画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成することを特徴とする請求項1から請求項8のいずれか一項に記載のボリュームレンダリング装置。 - 前記レンダリング手段は、
前記不透明度ボクセル画像を前記生成するボリュームレンダリング像に投影変換した座標系を視点座標系とすると、視点座標系において、前記ボリュームレンダリング像の各画素(x,y)よりZ軸方向に沿って、Z軸の上限値より下限値に向けて、視点座標系の各ボクセル座標(x,y,z)ごとに第1の座標変換を行って前記不透明度ボクセル画像より不透明度を取得しながら、不透明度が0でない不透明ボクセルを探索し、最初に見つかった不透明度が0でない不透明ボクセルの視点座標系におけるZ座標を、前記ボリュームレンダリング像の各画素(x,y)ごとに記録した探索制御マスクを作成する探索制御マスク作成手段と、
前記ボリュームレンダリング像の各画素(x,y)に対して、前記探索制御マスクよりZ座標を取得し、取得したZ座標よりZ軸の下限値に向けてZ軸方向に沿って、所定の光強度をもつ仮想光を照射する際、視点座標系の各ボクセル座標(x,y,z)ごとに第1の座標変換を行って前記不透明度ボクセル画像より不透明度を取得し、不透明度が0でないボクセルが見つかった場合、当該座標(x,y,z)に対して第2の座標変換を行って前記色成分ボクセル画像より(R,G,B)で構成される色成分を取得し、当該ボクセルの不透明度を基に前記光強度を減衰させるとともに、当該ボクセルの不透明度及び色成分、前記減衰させた光強度に基づいて累積輝度値を算出する処理を繰り返し、算出された累積輝度値を基に、前記ボリュームレンダリング像の当該画素(x,y)に対応する(R,G,B)で構成される画素値として与えるようにしているレイキャスティング手段と、を備えていることを特徴とする請求項1または請求項2に記載のボリュームレンダリング装置。 - 前記探索制御マスク作成手段および前記レイキャスティング手段は、前記第1の座標変換を行って前記不透明度ボクセル画像より不透明度を取得する際、
所定の3次元座標系における回転を定義した3×3行列、xyz軸各方向のオフセット値、xyz軸方向の拡大又は縮小倍率、z軸方向変倍率を含む前記所定の座標変換のパラメータを取得し、
前記視点座標系のボクセルの整数値の座標(x,y,z)を、前記パラメータに基づいて前記不透明度ボクセル画像の座標系に変換を行って、前記不透明度ボクセル画像の実数値の座標(X,Y,Z)を算出し、
算出した実数値の座標(X,Y,Z)の近傍の複数の整数値の座標(x’,y’,z’)座標に対応する前記不透明度ボクセル画像の複数のボクセルを特定し、
特定した複数のボクセルの不透明度に基づいて前記不透明度ボクセル画像より取得される不透明度として算出するようにしていることを特徴とする請求項10に記載のボリュームレンダリング装置。 - 前記レイキャスティング手段は、前記第2の座標変換を行って前記色成分ボクセル画像より色成分を取得する際、
所定の3次元座標系における回転を定義した3×3行列、xyz軸各方向のオフセット値、xyz軸方向の拡大又は縮小倍率、z軸方向変倍率を含む前記所定の座標変換のパラメータを取得し、
前記視点座標系のボクセルの整数値の座標(x,y,z)を、前記パラメータに基づいて前記色成分ボクセル画像の座標系に変換を行って、前記色成分ボクセル画像の実数値の座標(X,Y,Z)を算出し、
算出した実数値の座標(X,Y,Z)の近傍の複数の整数値の座標(x’,y’,z’)座標に対応する前記色成分ボクセル画像の複数のボクセルを特定し、
特定した複数のボクセルの色成分に基づいて前記色成分ボクセル画像より取得される色成分として算出するようにしていることを特徴とする請求項10に記載のボリュームレンダリング装置。 - 前記レンダリング手段は、
前記色成分ボクセル画像で構成される3Dテクスチャ画像を生成する3Dテクスチャ登録手段と、
前記3Dテクスチャ画像に対して所定の座標変換を行って変換後3Dテクスチャ画像を生成する座標変換手段と、
3次元空間のXY座標面上の四角形をZ軸方向に並べ、前記各四角形の4頂点の各3次元座標を前記変換後3Dテクスチャ画像の所定の4箇所の各3次元座標に対応付けた積層四角形を設定する積層四角形設定手段と、
所定の視点からZ軸方向に平行な視線上の前記積層四角形上の3次元座標に対応する前記変換後3Dテクスチャ画像のボクセルの(R,G,B)で構成される色成分を当該ボクセルの不透明度に基づいて前記視点から遠い四角形の順にアルファブレンディングして得られた色成分を、前記ボリュームレンダリング像の(R,G,B)で構成される画素値として与えるようにしている画素値算出手段と、
を備えていることを特徴とする請求項3から請求項5のいずれか一項にボリュームレンダリング装置。 - 前記座標変換手段は、
所定の3次元座標系における回転を定義した4×4行列、視野角度、視点位置、クリッピング位置、xyz軸各方向のオフセット値、xyz軸方向の拡大又は縮小倍率、z軸方向変倍率を含む所定の座標変換のパラメータを取得し、
前記3Dテクスチャ画像に対して、前記取得したパラメータを用いた前記所定の座標変換を行って前記変換後3Dテクスチャ画像を生成するようにしていることを特徴とする請求項13にボリュームレンダリング装置。 - 前記座標変換手段および前記画素値算出手段は、汎用コンピュータのビデオカードに搭載されているGPUおよびフレームメモリを用いて実行するようにしていることを特徴とする請求項14にボリュームレンダリング装置。
- コンピュータを、
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段、
前記不透明度ボクセル画像および前記色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段、
として機能させるためのプログラム。 - コンピュータを、
信号値に対して色成分の値と不透明度を対応付けて定義されたカラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を不透明度に置き換え、ボクセル値として不透明度が定義された不透明度ボクセル画像を作成する不透明度ボクセル画像作成手段、
前記カラーマップを参照して、前記複数の断層画像の各画素と対応付けて三次元に配置した各ボクセルの信号値を色成分の値に置き換え、ボクセル値として色成分の値が定義された色成分ボクセル画像を作成する色成分ボクセル画像作成手段、
前記色成分ボクセル画像の各ボクセルに前記不透明度ボクセル画像の対応するボクセルの不透明度を追加し、不透明度付色成分ボクセル画像を作成する不透明度付色成分ボクセル画像作成手段、
前記不透明度付色成分ボクセル画像を用いてボリュームレンダリング像を生成するレンダリング手段、
として機能させるためのプログラム。 - 対象物に対して所定の間隔で撮影された複数の2次元の断層画像の各画素に対応し、あらかじめ定義されたカラ−マップを参照して定められた各ボクセルで構成されるボクセル構造体のボクセルデータであって、
前記ボクセルデータは、少なくとも、前記各ボクセルの値として不透明度が定義された不透明度ボクセル画像と、前記各ボクセルの値として色成分の値が定義された色成分ボクセル画像とを含む、ボクセル構造体のデータ構造を有し、
前記不透明度ボクセル画像および前記色成分ボクセル画像は、レンダリング手段によりボリュームレンダリング像を生成するために用いられることを特徴とするボクセルデータ。 - 対象物に対して所定の間隔で撮影された複数の2次元の断層画像の各画素に対応し、あらかじめ定義されたカラ−マップを参照して定められた各ボクセルで構成されるボクセル構造体のボクセルデータであって、
前記ボクセルデータは、少なくとも前記各ボクセルの値として不透明度が定義された不透明度ボクセル画像と、前記各ボクセルの値として色成分の値及び不透明度が定義された不透明度付色成分ボクセル画像とを含む、ボクセル構造体のデータ構造を有し、
前記不透明度ボクセル画像は前記不透明度付色成分ボクセル画像を生成するために用いられ、前記不透明度付色成分ボクセル画像は、レンダリング手段によりボリュームレンダリング像を生成するために用いられることを特徴とするボクセルデータ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018101171A JP7131080B2 (ja) | 2018-05-28 | 2018-05-28 | ボリュームレンダリング装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018101171A JP7131080B2 (ja) | 2018-05-28 | 2018-05-28 | ボリュームレンダリング装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019207450A true JP2019207450A (ja) | 2019-12-05 |
JP7131080B2 JP7131080B2 (ja) | 2022-09-06 |
Family
ID=68767814
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018101171A Active JP7131080B2 (ja) | 2018-05-28 | 2018-05-28 | ボリュームレンダリング装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7131080B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113538016A (zh) * | 2021-08-05 | 2021-10-22 | 深圳市电通材料技术有限公司 | 物品注册、验证、身份辨识方法、设备及可读存储介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001043395A (ja) * | 1999-07-15 | 2001-02-16 | Mitsubishi Electric Inf Technol Center America Inc | ボリュームレンダリング装置および方法 |
JP2002539568A (ja) * | 1999-03-18 | 2002-11-19 | ザ リサーチ ファウンデーション オブ ステイト ユニヴァーシティ オブ ニューヨーク | 3次元仮想細分化および検査を実施するシステムおよび方法 |
JP2004005567A (ja) * | 2002-04-09 | 2004-01-08 | Sony Computer Entertainment America Inc | コンピュータディスプレイ画像を生成する方法ならびに画像データを生成するコンピュータ処理システムおよびグラフィックスプロセッサ |
JP2005087602A (ja) * | 2003-09-19 | 2005-04-07 | Ziosoft Inc | 医用画像生成装置および方法、ならびに、プログラム |
JP2008086658A (ja) * | 2006-10-04 | 2008-04-17 | Fujifilm Corp | 画像表示装置および画像表示プログラム |
JP2008259698A (ja) * | 2007-04-12 | 2008-10-30 | Fujifilm Corp | 画像処理方法および装置並びにプログラム |
JP2009289144A (ja) * | 2008-05-30 | 2009-12-10 | Univ Of Tokyo | ボリュームデータ可視化装置および方法ならびにプログラム |
JP2013517845A (ja) * | 2010-01-22 | 2013-05-20 | ザ リサーチ ファウンデーション オブ ザ ステート ユニバーシティ オブ ニューヨーク | 前立腺の視覚化およびがん検出のためのシステムおよび方法 |
US20140330121A1 (en) * | 2013-05-06 | 2014-11-06 | Samsung Electronics Co., Ltd. | Ultrasonic imaging apparatus and control method thereof |
-
2018
- 2018-05-28 JP JP2018101171A patent/JP7131080B2/ja active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002539568A (ja) * | 1999-03-18 | 2002-11-19 | ザ リサーチ ファウンデーション オブ ステイト ユニヴァーシティ オブ ニューヨーク | 3次元仮想細分化および検査を実施するシステムおよび方法 |
JP2001043395A (ja) * | 1999-07-15 | 2001-02-16 | Mitsubishi Electric Inf Technol Center America Inc | ボリュームレンダリング装置および方法 |
JP2004005567A (ja) * | 2002-04-09 | 2004-01-08 | Sony Computer Entertainment America Inc | コンピュータディスプレイ画像を生成する方法ならびに画像データを生成するコンピュータ処理システムおよびグラフィックスプロセッサ |
JP2005087602A (ja) * | 2003-09-19 | 2005-04-07 | Ziosoft Inc | 医用画像生成装置および方法、ならびに、プログラム |
JP2008086658A (ja) * | 2006-10-04 | 2008-04-17 | Fujifilm Corp | 画像表示装置および画像表示プログラム |
JP2008259698A (ja) * | 2007-04-12 | 2008-10-30 | Fujifilm Corp | 画像処理方法および装置並びにプログラム |
JP2009289144A (ja) * | 2008-05-30 | 2009-12-10 | Univ Of Tokyo | ボリュームデータ可視化装置および方法ならびにプログラム |
JP2013517845A (ja) * | 2010-01-22 | 2013-05-20 | ザ リサーチ ファウンデーション オブ ザ ステート ユニバーシティ オブ ニューヨーク | 前立腺の視覚化およびがん検出のためのシステムおよび方法 |
US20140330121A1 (en) * | 2013-05-06 | 2014-11-06 | Samsung Electronics Co., Ltd. | Ultrasonic imaging apparatus and control method thereof |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113538016A (zh) * | 2021-08-05 | 2021-10-22 | 深圳市电通材料技术有限公司 | 物品注册、验证、身份辨识方法、设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP7131080B2 (ja) | 2022-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7424140B2 (en) | Method, computer program product, and apparatus for performing rendering | |
US7808514B2 (en) | Multiplanar reformatting visualization with multiple scrolling speeds | |
US8659602B2 (en) | Generating a pseudo three-dimensional image of a three-dimensional voxel array illuminated by an arbitrary light source by a direct volume rendering method | |
US20050237336A1 (en) | Method and system for multi-object volumetric data visualization | |
JPH08138078A (ja) | 画像処理装置 | |
US8040352B2 (en) | Adaptive image interpolation for volume rendering | |
JP2006055213A (ja) | 画像処理装置、及びプログラム | |
JP4122314B2 (ja) | 投影画像処理方法、投影画像処理プログラム、投影画像処理装置 | |
CN111210898B (zh) | 一种对dicom数据进行处理的方法和装置 | |
JP7131080B2 (ja) | ボリュームレンダリング装置 | |
JP7003635B2 (ja) | コンピュータプログラム、画像処理装置及び画像処理方法 | |
JP7013849B2 (ja) | コンピュータプログラム、画像処理装置及び画像処理方法 | |
JP6418344B1 (ja) | コンピュータプログラム、画像処理装置及び画像処理方法 | |
US9035945B1 (en) | Spatial derivative-based ray tracing for volume rendering | |
JP7223312B2 (ja) | ボリュームレンダリング装置 | |
JP6443574B1 (ja) | レイキャスティングプログラム、探索制御データ、探索制御データ生成方法、レイキャスティング装置 | |
JP7095409B2 (ja) | 医用画像処理装置、医用画像処理方法、プログラム、及びmpr像生成方法 | |
JP7206846B2 (ja) | ボリュームレンダリング装置 | |
JP7180123B2 (ja) | 医用画像処理装置、医用画像処理方法、プログラム、及びデータ作成方法 | |
JP6436258B1 (ja) | コンピュータプログラム、画像処理装置及び画像処理方法 | |
JP7283603B2 (ja) | コンピュータプログラム、画像処理装置及び画像処理方法 | |
JP7206617B2 (ja) | 断層画像表示用カラーマップの最適化装置およびボリュームレンダリング装置 | |
US20230326027A1 (en) | Image data processing apparatus and method | |
JP7167699B2 (ja) | ボリュームレンダリング装置 | |
JP2022087789A (ja) | 医用画像処理装置および医用画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210323 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220111 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220304 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220726 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220808 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7131080 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |