JP2006136718A - ブレンドされる画像の表示用デイスプレーデバイス - Google Patents
ブレンドされる画像の表示用デイスプレーデバイス Download PDFInfo
- Publication number
- JP2006136718A JP2006136718A JP2005322515A JP2005322515A JP2006136718A JP 2006136718 A JP2006136718 A JP 2006136718A JP 2005322515 A JP2005322515 A JP 2005322515A JP 2005322515 A JP2005322515 A JP 2005322515A JP 2006136718 A JP2006136718 A JP 2006136718A
- Authority
- JP
- Japan
- Prior art keywords
- image
- images
- display device
- geometric
- mesa
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000009466 transformation Effects 0.000 claims abstract description 63
- 238000013507 mapping Methods 0.000 claims abstract description 7
- 238000002156 mixing Methods 0.000 claims description 13
- 238000006243 chemical reaction Methods 0.000 claims 1
- 238000011156 evaluation Methods 0.000 abstract 1
- 238000000034 method Methods 0.000 description 46
- 230000000875 corresponding effect Effects 0.000 description 35
- 238000007667 floating Methods 0.000 description 19
- 230000033001 locomotion Effects 0.000 description 16
- 238000005259 measurement Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 15
- 238000013519 translation Methods 0.000 description 14
- 230000014616 translation Effects 0.000 description 14
- 238000003384 imaging method Methods 0.000 description 9
- 238000004364 calculation method Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 7
- 230000036544 posture Effects 0.000 description 7
- 238000000844 transformation Methods 0.000 description 7
- 210000000988 bone and bone Anatomy 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000006073 displacement reaction Methods 0.000 description 5
- 238000009826 distribution Methods 0.000 description 5
- 238000005457 optimization Methods 0.000 description 5
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 4
- 238000012937 correction Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000011218 segmentation Effects 0.000 description 4
- 210000004872 soft tissue Anatomy 0.000 description 4
- 239000000654 additive Substances 0.000 description 3
- 230000000996 additive effect Effects 0.000 description 3
- 210000003484 anatomy Anatomy 0.000 description 3
- 239000003550 marker Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000010606 normalization Methods 0.000 description 3
- 238000002601 radiography Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000011524 similarity measure Methods 0.000 description 3
- 241000931526 Acer campestre Species 0.000 description 2
- 208000020339 Spinal injury Diseases 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 2
- 239000006185 dispersion Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 206010028836 Neck pain Diseases 0.000 description 1
- 238000012952 Resampling Methods 0.000 description 1
- 206010058907 Spinal deformity Diseases 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 206010003246 arthritis Diseases 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007717 exclusion Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 210000004705 lumbosacral region Anatomy 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000000399 orthopedic effect Effects 0.000 description 1
- 230000010363 phase shift Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000010008 shearing Methods 0.000 description 1
- 238000002922 simulated annealing Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
- G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/35—Determination of transform parameters for the alignment of images, i.e. image registration using statistical methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20101—Interactive definition of point of interest, landmark or seed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30008—Bone
- G06T2207/30012—Spine; Backbone
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Probability & Statistics with Applications (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】 デイスプレーデバイスは、第1画像内の構造体を、第2画像内のその対応する構造体上へ写像することにより得られるブレンドされる画像の表示の制御用手段を具備するが、該写像は、該第1画像に幾何学的変換を適用し、該変換された第1画像と該第2画像とが共通の座標システム内で表されるよう該適用することに依っている。初期値からスタートするが、該幾何学的変換のパラメーターは、コスト関数の評価の結果を考慮して更新される。それらスーパーインポーズされた画像がブレンドされる。
【選択図】 図1
Description
)安定性が解析される整形外科(orthopedics)及び外傷学(traumatology)の分野に特に適合している。脊柱損傷(spinal injuries)でチェックされるレントゲン写真的特徴は棘突間距離(interspinous distance)、環軸の関係(atlanto−axial relationship)、後部軸方向線(posterior axial line)、前後変位(anteroposterior displacement)及び角変位(angular displacement)である。これらの測定は、脊柱の種々の姿勢{中立(neutral)、屈曲及び伸展、積極的屈曲及び積極的伸展(active flexion and active extension)、過屈曲及び過伸展(hyper−flexion and hyper−extension)}での外側頸部脊柱(lateral cervical spine)放射線写真上で研究されるのが典型的である。角変位は、例えば、両X線フイルム上で椎体(vertebral body)をマッチングアップ(matching up)することに依って過屈曲の図上に過伸展の外側図(lateral view)をスーパーインポーズすることにより、各椎骨レベルで測定される。従来のフイルムベースの技術では、過屈曲のX線フイルム上に、過伸展のX線フイルムのエッジに平行に線が描かれる。この技術は各上の椎骨について繰り返される。次々の線の間の角度が次いで測定される。それらは頸部脊柱の角度的可動性(angular mobility)を表し、起こり得る脊柱傷害を推定するため使用される。
し(整合し)そしてブレンドする本発明の背景で論じられる。
画像情報の種類の選択(Selection of the type of image information)
後で概説される位置合わせの方法は該位置合わせで使われる画像情報の種類に基づいて2つの主カテゴリー(main categories)に分けられ、すなわち強度ベースの方法(intensity−based methods)及び特徴ベースの方法(feature−based method)である。該位置合わせの結果は該画像が関心のある全位置で相互に相似(similar)に見えることである。
table)の形で実施されるのが典型的である。
グメント化手順(segmentation procedures)とを適用することにより得られる。典型的特徴は1階導関数最大値選択(first derivative maxima selection)又は2階導関数ゼロ交叉(second derivative zero crossings)により得られたエッジを含む。位置合わせ方法により処理するデータの量は実質的に減少するが、しかしながらそれは、該位置合わせ方法がセグメント化過程での誤差にローバスト(robust)にされねばならないと言う犠牲に於いてである。
対応する構造体の選択(Selection of corresponding structures)
幾何学的変換のパラメーターを初期化(initialize)するためには、対応する解剖構造体が選択されねばならない。
a diagnostic structure)を必ずしも取る必要はなく、何故ならばこれはあからさまなセグメント化(explicit segmentation)を要するからである。精密な位置合わせを可能にするために、それは該構造体を充分囲む長方形又は円形の対象であってもよい。更に該アールオーアイの面積は該位置合わせをスピードアップするために疎らにサンプルされてもよい。
幾何学的変換(Geometric transformations)
該2つの画像の整合は、該基準画像A上にそれをスーパーインポーズする前に、該浮動画像Bが幾何学的に変換され、リサンプル(re−sampled)されることを必要とする。
transformation)である。この変換は角度と長さとを保存する合同関係(congruency relationship)を確立する。
を用いては不可能なことは明らかである。
内挿法とリサンプリング(Interpolation and re−sampling)
幾何学的変換の適用は現在あるサンプル点間の内挿を要する。幾何学的変換のパラメーターの多数セット用の探索戦略中に、相似性メザーが評価されねばならないので、双1次内挿法(bilinear interpolation)の様な速く、納得の行く精度のアルゴリズムが使われる。該幾何学的変換の最適パラメーターセットに達すると、エスアイエヌシー近似(sinc approximation)に基づくより精密な内挿法へ切り替えられるので、最終画像品質は最高に保持される。
幾何学的変換の初期パラメーターの計算(Computation of the initial parameters of the geometric transform)
初期の幾何学的変換の計算は相似の解剖エンティティを表す対象間の対応を使ってもたらされる。これらの対象は典型的に配置するのは容易で、数は少ない。
強度ベースの相似性メザー(Intensity−based similarity measure)
該浮動画像Bでは、アールオーアイはユーザーが規定した解剖的標識構造の付近に選択される。このアールオーアイは形状が長方形でも円形でもよい。後者の形状は、それがユーザーが規定した点から与えられた距離内の全ての点を選択する利点を有する。このアールオーアイは、該幾何学的変換の初期パラメーターを使って基準画像A内に写像され、その画像Aの画素との画素的相似性が後で概説される相似性メザーにより計算される。探索戦略により、該幾何学的パラメーターは更新され、それにより変換された該画像Bのアールオーアイが、最良のマッチが見出されるまで画像Aと再び比較される。2つの画像の測光的内容(photometric content)を比較するため適用可能であるが、空間的誤整合に帰すことはない(not attributable to spatial misalignment)、種々の相似性メザーが概説され、偏倚及び利得の様な、画像間の差をうまく処理するそれらの能力に関して順序付けられる。
差の2乗の平均(Mean squared difference)
相似性の概念を反映する基本的位置合わせ式(basic registration
formula)は重畳領域の(x,y)∈R内での画像Aと画像Bの間の差の2乗の和であり、該メザーが最小化されねばならない。
かくして該メザーDは下記の様に正規化(normalized)される。
正規化された相互相関(Normalized cross correlation)
該メザーD、D’、そしてD”はそれらの2次の項に拡張され得る。浮動画像(一定アールオーアイに対応する)のエネルギーは一定であり、重畳の変動領域内の基準画像のエネルギーは概略一定と見なされてよい。従って、画像Aと画像Bに対応する該2次項は該メザーD又はD’の最小化に影響しないので、画像Aと画像Bの積又は相互相関に左右される相似性メザーが得られ、該メザーが最大化されねばならない。
狭い周波数間隔に限定されたノイズがあれば、ピークの位置は実質的には変化しないだろう。従って、このフーリエ方法(Fourier method)は相関のある周波数に左右されるノイズに対する優れたローバスト性を達成する。全ての周波数を崩し(corrupts)、該ピークを歪ませる白色ノイズが存在する場合、空間的相関のメザーCを最大化することが最適である。又誤整合(misalignment)が回転成分を含む時は、該回転角度は、該クロスパワースペクトラム位相の逆フーリエ変換を1つのインパルスに近くさせる角度として計算されてよく、そして該並進は次いで該インパルスの空間変位(spatial displacement)として取られる。
正規化された共分散(Normalized covariance)
オフセット差{画像間偏倚(inter−image bias)}を説明し、そして−1...1からに及ぶ絶対尺度上で相関を測る、相互相関に関するメザーは正規化された共分散メザー(covariance measure)であり下記の様である。
比率画像均一性(Ratio image uniformity)
尺度合わせの差を説明し、相互相関に関係するメザーは、画像AとBの対応する画素値の割り算(divisions)の画像に基づく比率均一性メザー(ratio uniformity measure)により計算される。該画像AとBが完全に整合している時は、最終の比率画像は一定画像(constant image)となろう。それは各グレイレベルがもう1つの画像内の同じグレイレベルに精確に写像されることを意味する。比率相似性メザーは従って該比率画像の標準偏差(standard deviation)の大きさがあり、乗算的不変性を達成するために下記の様にそれを平均比率で割り算する。
該メザーは該比率画像均一性に関係しており、下記の基盤に基づいている。ノイズと軟組織構造体とのために、画像A内で或る強度iを有する全画素は位置合わせされた画像B内のクラスターされた強度のセット(a set of clustered intensities)に写像される。A及びBの強度間に関数的依存性(functional dependence)がある時、画像Aのアイソセット(iso−set)i当たり1つだけのクラスターがある。明らかに、該画像が完全に整合されると、各クラスターの分散又は標準偏差は最小になる。乗算的不変性はその和内の各項を該クラスターの平均で割ることにより達成される。このメザーは相互相関より一般性があり、何故ならそれは強度依存が或る関数により表され得ることのみを仮定するからである。その空間的な首尾一貫性(coherence)はアールオーアイ画像Bを或る数のアイソセット、すなわち相似の強度の範囲、に区分することによってそのメザー内に保持されてもよい。これらの範囲の境界が画像A上に置かれ、画像A内の各範囲の分散と平均が計算される。最小化されねばならぬこの相似性メザー用の表現は下記の様であり、
相関比(Correlation ratio)
メザーWに関係する相関比メザー(correlation ratio measure)は重畳領域の大域的分散(global variance)を用いて正規化することにより得られる。この大域的正規化(global normalizatin)は該メザーを空間的変換に関してより安定にさせ、従って該相関比はよりスムーズで、最適化しやすくなり、そして又よりスムーズにサブサンプリングを行う(sub−samples more smoothly)。最小化されねばならない、この相似性メザー用の表現は下記の様である。
相互間情報(Mutual information)
比率基準(ratio criterion)よりなお一層一般性のある相似性基準(similarity criterion)は、それが画像強度間の関数的依存を仮定していないので、相互間情報基準(mutual information criterion)により実施される。相互間情報は、写像が画像AとBのグレイレベル(のセット)間で確立されるので、オフセット及び利得シフトから独立している。従って、該2つの画像の画素強度値間の線形関係を仮定する相関とは対照的に、相互間情報は、代わりに、両画像間の強度値の最も確率の高い共起(most probable co−occurrence)を探索する。このメザーは該画像強度間に存在する関係の性質に関する仮定をせず、すなわち、それは線形の相関も、関数的相関も仮定せず、予測可能な、又は統計的な関係のみを仮定する。従って、最終位置合わせでは、高く値の強度が、例えば、低い強度値と対にされてもよい。この特徴は、該画像が投影により形成される時、X線マッチング用に有用であり、従って、画像A及び画像Bの取得の間で、X線源から検出器の視認方向、又は患者の姿勢が異なる時、両画像内で幾何学的等価位置では非線形な強度の関係が生じてもよい。画像AとBの間で同一画像形成条件及び線形関係を回復するための再投影(re−projection)が行われ得ない時、相互間情報は投影アーチフアクト(artifacts)をうまく処理するのに好適な相似性モデルである。
ins)か何れかを表す。
探索戦略(Search strategy)
対応問題(correspondence problem)は相似性コスト関数(similarity cost function)を最大化する(又は、メザーに依って、それを最小化する)幾何学的変換(回転、並進そして空間的尺度)及び強度変換{アルフア(alfa)、ベータ(beta)}のパラメーターpのセットを見出すこととして下記の様に述べられ得る。
探索空間内の望まない局所的最小値(Unwanted local minima in search space)
局所的最小値(或いは最大値、該相似性メザーの向きに依る)でのトラップ(trap)を避けるため特別の用意が作られてもよい。下降勾配又はパウエルの方向設定方法(Powell’s direction set method)の様な標準の数学的最適化が局所的最小値に取りかかって(get stuck in)もよい。大域的最小値は、該幾何学的変換の初期パラメーターに依って写像されたアールオーアイの近傍になおも存在する写像されたアールオーアイに普通対応するであろう。この初期写像は基準画像A内の浮動するアールオーアイの対応する点上に中心がある。従って、幾何学的パラメーターの全ての起こり得る組み合わせを試みる、徹底的探索(exhaustive search)が行われ、該大域的最小値に付随する組み合わせがその解を決定する。遙かにもっと少ない計算コストで該大域的最小値をも見出す代替えはシミュレーテッドアニーリング(simulated annealing)である。
探索空間内の望まない漸近的動作(Unwanted asymptotic behavior in search space)
該幾何学的変換のパラメーターにより張られた探索空間は、コスト関数の望まない漸近的動作を避けるために、限定される。例えば、大きな変換を使う時、該画像間の重畳は非常に小さくなり、それは、放射線写真A内に放射線写真Bのアールオーアイを位置合わせする場合、非常にありそうでない。非常に大きな回転角度、大きな尺度係数、又は大きなスキュー及び透視歪み係数(perspective distortion factors)もありそうでない。修正動作はこれらの場合これらの条件に大きなコストが伴うことにより得られる。
多重解像度最適化(Multi−resolution optimization)
最適化スキームは階層的(hierarchical)又は多重解像度スキーム(multi−resolution schme)により可成りスピードアップされ得る。該画像AとBの各々の粗い解像度版(coarse resolution version)が、例えば、該画像のガウス型ピラミッド分解(Gaussian pyramidal decomposition)を計算し、そして粗いレベルを選択することにより計算されるが、該版はサブサンプリングにより減少した数の画素を有する。該パラメーターのスタートの見積は、例えば、ユーザーに2つの対応する構造体を選択させることにより、両画像間の初期の位置的対応を確立することにより固定される。画像A及び画像B内の対応する点の少なくとも1対をクリックすることで該選択を行うことが出来る。次いで該初期変換は同時係属中の特許出願である特許文献3に概説された様に計算される。その相似性メザーは、該パラメーターのそのスタートする見積に於いて、空間的又は放射線計測的変換モデルの各パラメーターの1インクレメントを用いて(with a single increment )、該粗い解像度版上で評価される。1インクレメントパラメーター修飾の全組み合わせが試みられる。最良の組み合わせが選ばれ、そしてそのアルゴリズムは、該相似性メザーを改善するステップが見出されなくなるまで、繰り返す。与えられた解像度で該アルゴリズムが終了すると、その画像ピラミッドの次により高い解像度レベルが選択され、そして前のレベル上で計算された変換パラメーターセットからスタートする該探索過程が再び始動される。解像度が増すと、そのステップ規模は、サブ画素位置合わせ解(sub−pixel registration solution)を提供するよう減じられてもよい。
スーパーインポジションとブレンデイング(Superimposition and Blending)
最終の幾何学的変換が決定すると、それは、画像Aとの重畳領域R内の新しい位置での該サンプルを計算するために、浮動画像Bに適用される。その結果は、各画素位置で、2つの強度、すなわち(1)基準画像Aの未修飾強度(unmodified intensity)、と(2)画像Bの空間的に変換された強度BT、が入手可能になる。このデータ表現は、両画像データセットが共通の座標システムで表されるので、画像Bの画像A上へのデジタルスーパーインポジションと呼ばれる。該重畳領域Rの外では、画像Aの元の画像サンプルか、又は画像BTの変換された画像サンプルか何れかが入手可能である。元の画像AとBが同じサイズの時、該スーパーインポジションデータ表現は、画像Aの座標システム内に該変換された画像BTの完全な記憶を収容するために、より大きい行と列の規模(dimensions)を割り当てる必要があるのが普通である。該変換された画像シャープさ(image sharpness)を最大に保持するために、エスアイエヌシーインターポレーター(sinc interpolator)の様な高画像品質内挿法(high image quality interpolation)とリサンプリングアルゴリズム(re−sampling algorithm)がBTを計算するため使われ得る。
BT内の対応する画素の適当な組み合わせが取られる。各画像の比率は、好ましくは、該ブレンドされる画素値が最大強度を超えないようにするのがよい。説明される実施例では該ブレンドされる画像は重畳領域Rでは下記の様に計算されるが、
Z(x、y)=mA(x、y)+(1−m)BT(x、y)
ここでmはブレンデイング又は混合係数(blending or mixing factor)である(0≦m≦1)。mは該ブレンドされた結果内の各入力画像の影響を制御する。m=1の時画像Aのみが表示され、m=0の時BTのみが示されるだろう。画像AとBが等しい範囲とレベルを有する時、mは好ましくは0.5付近に選ばれるのがよい。この選択が行われるのは、該画像を整合させるため使われたアールオーアイでの両強度が、画像Aと画像Bが加算的(オフセット、レベル)及び乗算的(尺度、窓)差を有しない時、同一であるのが典型的だからである。しかしながら、窓/レベルの差がある(そしてこれらは上記概説の様に位置合わせメザーに影響しない)時は、該画像は、それらをブレンドする前のそれらのそれぞれのヒストグラムの範囲(Amin、Amax)と(Bmin、Bmax)を使って、最小と最大強度の間で尺度合わせし直される。
ユーザーインターフエース(User Interface)
上記で概説した位置合わせ手順を用いて相互作用(interact)し、表示するために、ユーザーインターフエースが作られる。それは下記の要素を有する。
対応する構造体の選択用手段(Means for selection of corresponding structures)
対応する構造体の選択は幾何学的変換パラメーターを初期化するために働く。該対応する構造体の選択用手段は、例えば、マウス及び組み合わされたマウスカーソルであり、該選択は該マウスカーソルで、例えば、同一の解剖的に良く明らかにされている標識構造を指し示すことにより行われ得る。
center)又は棘突起(processi spinosi)上の標識構造点、の様な点を含んでもよい。
transform)を初期化する。4つの対応する点(例えば、椎体のコーナー点)の選択は投影変換を初期化する。
ブレンドされた画像のデイスプレー(Display of blended images)
デイスプレーデバイスはブレンデイング制御手段を備えており、該手段は2つの画像のデジタル信号表現の入力時、上記説明の方法の過程によりブレンドされた画像を発生する。
ブレンデイング制御スライダー(Blending control slider)
画像AとBTの間の重畳範囲内に適用されるブレンデイングの程度mはスライダーにより制御され、該スライダーはユーザーが画像A又はBTの可視情報の量を連続的に調整することを可能にする。この特徴は画像Aか又は画像BTか何れかに選択的に完全に焦点合わせするのに有利である。この様に徐々にブレンドすることは従来のフイルムベースの技術では不可能であることは明らかである。
幾何学的変換パラメーターの手動調整用手段(Means for manual adjustment of the geometric transform parameters)
位置合わせ結果が診断的要求を完全には充たさない現在の場合、ユーザーは自動計算された解からスタートして、ユーザーインターフエースによりその幾何学的変換結果を手動で調整してもよい。
位置合わせ結果の検証(Verification of the registration result)
ユーザーは、位置合わせされた画像を引き算し、差の画像内に残る詳細をチェックすることにより、屈曲及び伸展画像の対応する椎骨の位置合わせをチェックすることが出来る。2つの椎骨が精確にマッチすると、その重畳領域内のマッチする画像範囲は消えるだろう。詳細の欠除は、上記で与えられたメザーDにより表される2乗された差の和により適性を与えられ得る。代わりに該重畳領域の分散が計算されてもよい。これらのメザーの両者はよい位置合わせが達成されると低くなければならない。
頸部脊柱検査への応用(Application to cervical spine
examination)
過可動性(hyper−mobility)又は不安定性(instability)について頸部脊柱(cervical spine)のセグメント的運動を評価するために、伸展外側頸部脊柱姿勢の放射線写真露光が屈曲外側姿勢と組み合わされる。外傷後の頸部の痛み(post−traumatic neck pain)、関節炎(arthritis)、脊柱固定(spinal fusion)を有する患者はこれらの機能的見方で共通に検査される。
最大屈曲−伸展角(Maximal flexion−extension angle)
頸部脊柱の最大屈曲−伸展の範囲が位置合わせされた第7椎体(C7 registered)を有する融合画像(fused images)上で決定される。該角は第1椎体..第3椎体(vertebral bodies C1..C3)の後部周辺(posterior margin)sへの接線間で測定され、その正規範囲と比較される。
運動線図(Motion diagram)
頸部脊柱の屈曲及び伸展の範囲はその運動線図内の角度として決定される。該運動線図は多数の方法で作られてもよい。
又は等価的にその基準軸線が基準画像座標システム内に描かれる。
C2)を次々に位置合わせすることにより繰り返される。一緒になって、これらの角度は運動線図を構成し、描かれた線図は正規の頸部可動性の場合の典型的形状を示す。病気又は傷害の存在をアセスするために該角度はそれらの正常値と比較される。
3D画像への拡張(Extension to 3D images)
幾何学的変換の回転成分から頸部脊柱のセグメント的可動性を決定する原理は3D作像(3D imagery)へ拡張可能である。位置合わせメザーは今度は画素値の代わりに体素(voxel)値上で動作する。剛体運動の幾何学的変換は、x、yそしてz方向の3つの並進成分と、該座標システムのx、yそしてz軸周りの3つの回転成分を含む。探索戦略は整合パラメーターの少なくとも6次元のパラメーター空間で動作する。X線投影放射線写真法と対照的に、3D画像形成様式は器官及び骨構造体をスーパーインポーズせず、従って位置合わせ過程はユークリッド相似変換により有効にモデル化され得る。
B 画像
Claims (4)
- デイスプレーデバイスに於いて、該デバイスがブレンドされる画像の表示を制御するためのブレンデイング制御手段を具備しており、前記ブレンドされる画像の各画素値は第1画像内の画素値と、変換された第2画像内の対応する画素値と、の組み合わせであり、前記変換された第2画像は第2画像に幾何学的変換を適用することにより得られており、該幾何学的変換は前記第2画像内の幾何学的構造体を前記第1画像内の対応する幾何学的構造体上に、共通の座標システム内で、写像することを特徴とする該デイスプレーデバイス。
- 前記変換された第2画像が、
(1)該第2画像内の幾何学的構造体を前記第1画像内の対応する幾何学的構造体上に写像する幾何学的変換のパラメーターを計算する過程と、
(2)該計算されたパラメーターを有する前記幾何学的変換を前記第2画像に適用する過程と、により得られることを特徴とする請求項1のデイスプレーデバイス。 - (i)初期パラメーターが前記変換用に計算され、
(ii)該変換された第2画像と該第1画像との整合の程度を示すコスト値を発生するコスト関数が評価され、
(iii)前記幾何学的変換のパラメーターが前記コスト値を考慮して更新され、そして
(iv)該発生されたコスト値が最適となる時に最終パラメーターを得るよう過程(ii)と(iii)が何度も繰り返されることを特徴とする請求項2のデイスプレーデバイス。 - 前記手段が、前記第1及び該変換された第2画像の画素値の前記ブレンドされる画像への寄与を制御するよう配置されることを特徴とする請求項1のデイスプレーデバイス。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP04105654A EP1657680A1 (en) | 2004-11-10 | 2004-11-10 | Display device for displaying a blended image |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006136718A true JP2006136718A (ja) | 2006-06-01 |
JP2006136718A5 JP2006136718A5 (ja) | 2008-12-11 |
Family
ID=34929832
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005322515A Pending JP2006136718A (ja) | 2004-11-10 | 2005-11-07 | ブレンドされる画像の表示用デイスプレーデバイス |
Country Status (2)
Country | Link |
---|---|
EP (1) | EP1657680A1 (ja) |
JP (1) | JP2006136718A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008142137A (ja) * | 2006-12-06 | 2008-06-26 | Internatl Business Mach Corp <Ibm> | データ処理装置、データ処理方法、およびプログラム |
JP2010516401A (ja) * | 2007-01-25 | 2010-05-20 | ウォーソー・オーソペディック・インコーポレーテッド | 解剖学的構造及び神経モニタリング情報の統合表示のための方法と装置 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102006044189A1 (de) | 2006-09-20 | 2008-04-17 | Siemens Ag | Verfahren zum Bereitstellen von vielfältig verarbeiteten Bilddaten, Verfahren zum Verarbeiten vielfältiger Bilddaten und Röntgenbildsystem |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06175245A (ja) * | 1992-12-10 | 1994-06-24 | Fuji Photo Film Co Ltd | 放射線画像の位置合せ方法および装置 |
JPH07244722A (ja) * | 1994-03-07 | 1995-09-19 | Fuji Photo Film Co Ltd | 放射線画像の位置合せ方法 |
JPH0898009A (ja) * | 1994-09-26 | 1996-04-12 | Ricoh Co Ltd | 画像処理システムおよび画像処理装置並びに画像処理方法 |
JPH10162136A (ja) * | 1996-12-04 | 1998-06-19 | Hitachi Ltd | 画像自動分類方法 |
JP2003224775A (ja) * | 2002-11-08 | 2003-08-08 | Konica Corp | 時系列処理画像の表示装置 |
JP2005169077A (ja) * | 2003-09-08 | 2005-06-30 | Mirada Solutions Ltd | 第1データセットのデータポイントを第2データセットのデータポイントと関係付ける変換を見つける方法、およびその方法を実行するコンピュータプログラム |
-
2004
- 2004-11-10 EP EP04105654A patent/EP1657680A1/en not_active Ceased
-
2005
- 2005-11-07 JP JP2005322515A patent/JP2006136718A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06175245A (ja) * | 1992-12-10 | 1994-06-24 | Fuji Photo Film Co Ltd | 放射線画像の位置合せ方法および装置 |
JPH07244722A (ja) * | 1994-03-07 | 1995-09-19 | Fuji Photo Film Co Ltd | 放射線画像の位置合せ方法 |
JPH0898009A (ja) * | 1994-09-26 | 1996-04-12 | Ricoh Co Ltd | 画像処理システムおよび画像処理装置並びに画像処理方法 |
JPH10162136A (ja) * | 1996-12-04 | 1998-06-19 | Hitachi Ltd | 画像自動分類方法 |
JP2003224775A (ja) * | 2002-11-08 | 2003-08-08 | Konica Corp | 時系列処理画像の表示装置 |
JP2005169077A (ja) * | 2003-09-08 | 2005-06-30 | Mirada Solutions Ltd | 第1データセットのデータポイントを第2データセットのデータポイントと関係付ける変換を見つける方法、およびその方法を実行するコンピュータプログラム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008142137A (ja) * | 2006-12-06 | 2008-06-26 | Internatl Business Mach Corp <Ibm> | データ処理装置、データ処理方法、およびプログラム |
JP2010516401A (ja) * | 2007-01-25 | 2010-05-20 | ウォーソー・オーソペディック・インコーポレーテッド | 解剖学的構造及び神経モニタリング情報の統合表示のための方法と装置 |
Also Published As
Publication number | Publication date |
---|---|
EP1657680A1 (en) | 2006-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20060098897A1 (en) | Method of superimposing images | |
US8121370B2 (en) | Method of performing measurements on digital images | |
US20060133694A1 (en) | Display device for displaying a blended image | |
JP5337845B2 (ja) | デジタル画像上での測定の実施法 | |
Van de Kraats et al. | Standardized evaluation methodology for 2-D-3-D registration | |
Penney et al. | Validation of a two‐to three‐dimensional registration algorithm for aligning preoperative CT images and intraoperative fluoroscopy images | |
US7327865B2 (en) | Fiducial-less tracking with non-rigid image registration | |
WO2019020048A1 (zh) | 一种基于超声拓片技术的脊椎图像生成系统以及脊柱手术导航定位系统 | |
US20060002631A1 (en) | ROI selection in image registration | |
US20140323845A1 (en) | Automated 3-d orthopedic assessments | |
Zheng et al. | Automated segmentation of lumbar vertebrae in digital videofluoroscopic images | |
WO2006011928A2 (en) | Image enhancement method and system for fiducial-less tracking of treatment targets | |
Snel et al. | Quantitative in vivo analysis of the kinematics of carpal bones from three‐dimensional CT images using a deformable surface model and a three‐dimensional matching technique | |
Muggleton et al. | Automatic location of vertebrae in digitized videofluoroscopic images of the lumbar spine | |
TWI836491B (zh) | 註冊二維影像資料組與感興趣部位的三維影像資料組的方法及導航系統 | |
Chen et al. | Three-dimensional reconstruction and fusion for multi-modality spinal images | |
JP2006139782A (ja) | 画像を重ね合わせる方法 | |
Schaffert et al. | Robust multi-view 2-d/3-d registration using point-to-plane correspondence model | |
Zheng et al. | Lumbar spine visualisation based on kinematic analysis from videofluoroscopic imaging | |
US9286688B2 (en) | Automatic segmentation of articulated structures | |
JP2006136718A (ja) | ブレンドされる画像の表示用デイスプレーデバイス | |
Cai et al. | Automatic geometric rectification for patient registration in image-guided spinal surgery | |
Luckner et al. | Towards full-body x-ray images | |
Song et al. | A novel iterative matching scheme based on homography method for X-ray image | |
Bifulco et al. | Vertebrae tracking through fluoroscopic sequence: a novel approach |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20080319 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081024 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20081024 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110405 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111004 |