JP2008504060A - 連続するビュー間で発生する物体検出器(object−detector)の相対的な運動(motion)を補正(correction)する方法 - Google Patents

連続するビュー間で発生する物体検出器(object−detector)の相対的な運動(motion)を補正(correction)する方法 Download PDF

Info

Publication number
JP2008504060A
JP2008504060A JP2007518092A JP2007518092A JP2008504060A JP 2008504060 A JP2008504060 A JP 2008504060A JP 2007518092 A JP2007518092 A JP 2007518092A JP 2007518092 A JP2007518092 A JP 2007518092A JP 2008504060 A JP2008504060 A JP 2008504060A
Authority
JP
Japan
Prior art keywords
image
cross
correlation
value
correction value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007518092A
Other languages
English (en)
Other versions
JP2008504060A5 (ja
JP4841549B2 (ja
Inventor
ラーン,ジョン,リチャード
ネルソン,アラン,シー.
Original Assignee
ヴィジョンゲイト,インコーポレーテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ヴィジョンゲイト,インコーポレーテッド filed Critical ヴィジョンゲイト,インコーポレーテッド
Publication of JP2008504060A publication Critical patent/JP2008504060A/ja
Publication of JP2008504060A5 publication Critical patent/JP2008504060A5/ja
Application granted granted Critical
Publication of JP4841549B2 publication Critical patent/JP4841549B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/24Base structure
    • G02B21/26Stages; Adjusting means therefor
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1429Signal processing
    • G01N15/1433Signal processing using image recognition
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1468Optical investigation techniques, e.g. flow cytometry with spatial resolution of the texture or inner structure of the particle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • G01N21/03Cuvette constructions
    • G01N21/05Flow-through cuvettes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/47Scattering, i.e. diffuse reflection
    • G01N21/4795Scattering, i.e. diffuse reflection spatially resolved investigating of object in scattering medium
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/005Specific pre-processing for tomographic reconstruction, e.g. calibration, source positioning, rebinning, scatter correction, retrospective gating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/006Inverse problem, transformation from projection-space into object-space, e.g. transform methods, back-projection, algebraic methods
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • G01N15/1468Optical investigation techniques, e.g. flow cytometry with spatial resolution of the texture or inner structure of the particle
    • G01N15/147Optical investigation techniques, e.g. flow cytometry with spatial resolution of the texture or inner structure of the particle the analysis being performed on a sample stream
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N2015/1006Investigating individual particles for cytology
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N2015/1027Determining speed or velocity of a particle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • G01N21/03Cuvette constructions
    • G01N2021/0346Capillary cells; Microcells
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N2021/178Methods for obtaining spatial resolution of the property being measured
    • G01N2021/1785Three dimensional
    • G01N2021/1787Tomographic, i.e. computerised reconstruction from projective measurements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/08Optical fibres; light guides
    • G01N2201/0813Arrangement of collimator tubes, glass or empty
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/60Specific applications or type of materials
    • G01N2223/612Specific applications or type of materials biological material
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2211/00Image generation
    • G06T2211/40Computed tomography
    • G06T2211/412Dynamic
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2211/00Image generation
    • G06T2211/40Computed tomography
    • G06T2211/421Filtered back projection [FBP]

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Engineering & Computer Science (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Dispersion Chemistry (AREA)
  • Multimedia (AREA)
  • Mathematical Analysis (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Algebra (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mathematical Physics (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Microscoopes, Condenser (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

3次元における光断層イメージングのための運動補正の方法を開示する。対象となる物体(1)が照光され、イメージが作成される(111)。イメージの水平方向のオフセット補正値が決定される(114)。イメージの軸方向のオフセットの補正値が決定される(115)。イメージに水平方向のオフセット補正値と軸方向のオフセット補正値が適用され、補正されたファイル・イメージが作成される(116)。

Description

本出願は、参照により本明細書に組み込まれている、2002年4月19日にNelsonによって出願された同時係属中の米国特許出願第10/126,026号「Variable Motion Optical Tomography of Small Objects」の一部継続出願(CIP)である。
本発明は、イメージングに関し、より詳細には、通常は様々な位置からの連続するビューを必要とし、各ビューは3次元の物体の2次元投影または偽図法を表すイメージング・システムにおける物体検出器の相対的な運動の検出と補正に関する。
光学投影断層顕微鏡(OPTM:optical projection tomographic microscopy)システムは、内径40ミクロン、外径150ミクロンの微小毛細血管内の流体媒質に埋め込まれた生物学的な細胞とその核などの顕微鏡対象物の高解像度イメージングに適している。OPTMは、それぞれが物体とその格納容器を光軸に垂直で微小毛細血管の軸に平行な軸のまわりに回転させて得られた複数のビューを使用する。M×N型のピクセルの配列で構成されたCCDイメージ・センサーを備えるカメラは、物体と結像光学系(imaging optics)を通過した光をキャプチャし、CCD上に視野(FOV:field of view)の拡大イメージを作成する。各ビューは異なる視野からとらえられているので、各ビューの内容は他のビューとは異なっている。
コンポーネントのサイズが極端に小さいために、検出器のFOVの中心に回転の軸(通常は微小毛細血管の中心軸に一致する)を配置するのが非常に難しくなる可能性がある。微小毛細血管を回転させるときに静止した状態にしておくのは、さらに困難である。また、ビュー間で細胞自体が管の軸に沿って移動する可能性がある。結果として、各ビューは管の回転によってすでに変更されているが、さらに軸方向(微小毛細血管の軸に平行)と水平方向(光軸と管の軸に垂直)の両方の軸方向に平行移動(translation)が発生している可能性がある。こうした水平方向の平行移動は、回転軸上にない物体に対してすでに存在している平行移動に追加される。
したがって、3次元の正確な再構成を得るには、フィルタ逆投影法を使用するかその他の手段を使用するかにかかわらず、ビューごとの視野の変更によらない軸方向の運動と水平方向の運動の部分に関して補正する必要がある。さらに、検出器のFOVのどこに回転の軸があるかを確認する必要もある。
Nowakが所有する米国特許4,858,128号では、連続するシーンが、まず1本の軸内で、次にもう1本の軸内で、独立して相互に相関する方法について説明している。2つの相関の最大値の位置によって、2本の軸に必要なオフセットが決まる。前述の方法には、視野の変更による「本来の(natural)」水平方向の平行移動と微小毛細血管の平行移動による「誤った(erroneous)」水平方向の平行移動とを区別する手段がない。Nowakの特許は、「こうした信号のバックグラウンド・コンポーネントを推定し、その推定をイメージ・データから差し引くことは有効な場合がある」ことを教示している。
William H.Press et al.、Numerical Recipes in C:The Art of Scientific Computing、Cambridge University Press;2nd edition(January 1、1993)では、高速フーリエ変換(FFT:fast Fourier transforms)を使用した2つのデータ配列間の相互相関の技術をコンピュータ・プログラムによって実装する手段について説明している。手短に言えば、2つのデータ配列(イメージ・データなど)の相互相関は、各配列にFFTを適用し、得られた配列の一方に他方の複素共役をかけ、この結果にさらに逆FFTを適用することによって求めることができる。
米国特許出願第10/126,026号 米国特許4,858,128号 William H.Press et al.、Numerical Recipes in C:The Art of Scientific Computing、Cambridge University Press;2nd edition(January 1、1993)
最新技術の現在の欠点を克服するために、本発明の1つの目的は、マルチビュー・イメージング・システムにおいてビューごとに微小毛細血管の中心軸の位置を検出する方法を提供することである。本発明のもう1つの目的は、マルチビュー・イメージング・システムにおいて、連続するビュー間の物体検出器の相対的な運動を検出する方法を提供することである。本発明のもう1つの目的は、イメージ・データを補正することによってイメージ・データを収集する間に生じる物体の運動による誤差を除去する方法を提供することである。本発明のさらにもう1つの目的は、物体の軸方向の切片に続く断層再構成を行うための物体の投影または偽図法によるビューを表す複数のX−Yデータの行列を作成するタイプのイメージング・システムを提供することである。検出された運動は、後のデータを前のデータに合わせて適切にシフトすることによって、またはその逆によって除去できる。
本発明は、3次元における光断層イメージングのための運動補正の装置および方法を提供する。対象となる物体は、照光され、イメージが作成される。イメージの水平方向のオフセット補正値が決定される。イメージの軸方向のオフセット補正値が決定される。水平方向のオフセット補正値と軸方向のオフセット補正値がイメージに適用され、補正されたファイル・イメージが作成される。
本発明の新しい機能は、添付の特許請求の範囲に詳細に示されているが、本発明は、以下の発明を実施するための最良の形態と後で説明する図面を組み合わせて参照することで、機構と内容の両方について、その他の目的および機能とともによりよく理解され、評価されるであろう。
本発明は、本明細書では生物学的な細胞に関連する特定の例について説明されているが、このような例が本発明の原理の説明を目的とすること、および本発明がそれに限定されないことは理解されるであろう。本発明は、例えばX線CT(computed tomography)イメージングなど、他のタイプのイメージング・システムに使用されてもよいが、説明を具体的なものにするために、以下の開示は光投影断層顕微鏡(OPTM)システムの環境で本発明を使用する場合を対象とする。
以下の説明では、数値の例を示す場合に次の仮定が適用される。
1.各イメージは、幅640ピクセル、高さ480ピクセルで構成される。
2.各ピクセルには、8シングル・ビット(グレー・レベル0〜255)の輝度値が含まれる。
3.微小毛細血管を使用するOPTMに関連して、管の軸は短軸(480ピクセル)に平行である。
4.微小毛細血管を使用するOPTMに関連して、管壁分離(tube wall separation)は530ピクセルである。
5.水平方向のオフセットを求めるときに使用するビンの数(B1)は20である。
6.軸方向のオフセットを求めるときに使用するビンの数(B2)は2である。
7.配列は、1024×1024個のピクセルにゼロが埋め込まれている。
以上の数値は説明を目的とするものにすぎないこと、すなわち他の数値を使用しても本発明の特性を損なわないことを理解されたい。
ここで図1を参照すると、本発明の教示に従って構築された連続するビュー間で物体検出器の相対的な運動を補正する方法の例示的な実施形態を示す機能ブロック図が示されている。例示的な実施形態では、各イメージの変更されたコピーが生成され、ここで最も輝度の高いピクセルが輝度レベル0に割り当て変更され、他のピクセルはすべて最初のイメージと同じ輝度に維持される。次に、このしきい値化されたイメージの2次元の(2D)FFTに、ピクセルごとに参照イメージの2次元FFTの複素共役がかけられる。次に、得られる配列の輝度は微小毛細血管の軸(以下Y軸と呼ぶ)に平行な各行に沿って合計され、光軸および微小毛細血管の軸に垂直な方向(以下X軸と呼ぶ)の輝度パターンに関する情報を含む1次元(1D)配列が得られる。さらに1次元FFTが適用され、最大値の位置が決定される。この位置によって、微小毛細血管の中心軸のイメージをイメージ内の任意の位置に移動するためにX軸方向に適用されるオフセットの量が決定される。
参照イメージは、微小毛細血管壁の分離の不変性を利用しており、取得されたイメージ内で検出された既知の量ごとに分離された最も輝度の高い2本の線で構成され、参照イメージの残りの部分は輝度がゼロである。偽図法のイメージでは、管壁の屈折の兆候が管内部および管とスライド/カバースリップ・アセンブリとの間の素材と一致するため、管壁はぼんやりとしか表示されない。ヒストグラム操作の効果は、管壁とその他のイメージとのコントラストを上げることである。事前に指定された管壁分離を使用すると、イメージのX軸に沿った既知のピクセル数と組み合わせることで、管自体の動きと管の回転とその結果としての視野の変更による管内部の物体の動きとを区別できるようになる。不変のフィーチャ(constant feature)に基づいて2つのイメージを相互相関させることによって、本発明の方法は細胞内の変化するフィーチャの動きを追跡する可能性を最小化する。
相互相関の方法を使用することによって、Y軸からの軸方向のオフセットの量が決定される。そのために、元のイメージのコピーが再度しきい値化されるが、どのピクセルが輝度ゼロに設定変更されるかを決定するために異なる基準を使用する。このイメージに2次元FFTが適用され、ピクセルごとに直前のビューから得られるしきい値化されたイメージの2次元FFTの複素共役がかけられる。この結果に2次元FFTが適用され、現在のイメージの水平方向の補正と直前のイメージの水平方向の補正との差に対応する行に沿った相互相関関数の最大値としてX軸のオフセットが決定される。これは従来の方法と異なる点であり、この方法ではX軸のオフセットはY軸のオフセットによって制約を受ける。つまり、Y軸のオフセットと無関係には決定されない。
軸方向の補正は、水平方向の補正とは異なり、反復処理なので累積誤差が発生する。ただし、軸方向の相互相関関数は、連続するイメージ間で視野が大幅に変更されない限り、つまり、視野の変更が回転における小さな角度の増加に対応する限り、効果的に機能する。角度の増加を小さく維持することによって、空間の内容が大幅には変化しないので、相互相関によって各イメージ内の類似のフィーチャを追跡できる。角度の増加は3次元断層再構成の水平方向の解像度も決定するので、相互相関が適切に機能できるように角度の増加を小さく維持するという要件は厄介なものではない。
手短かに言えば、本発明のこの実施形態は、後続のイメージを適切にシフトして前のイメージに合わせることによって、またはその逆の操作によって、微小毛細血管による軸方向と水平方向の動きの影響を除去する。相互相関の方法を使用して、まず水平方向の軸上、次に管の軸上のオフセットを検出するが、水平方向の動きが決定した後で必ず軸方向の動きの相関が最大になるという制約を伴う。
まず、工程111でテンプレート・イメージが生成される。2本の白線(例えば、グレースケール・レベル65、535)は、それぞれの理想的な位置に作成される。各線は長さ480ピクセルであり、イメージの短辺に平行に伸びている。2本の線の位置は、イメージの長辺の次元(640ピクセル)と管壁分離(実験的に530ピクセルと決定)によって決定される。第1の線は行0に配置され、第2の線は行530に配置される。この実施形態では、テンプレート・イメージのサイズは640×480から1024×1024まで拡張でき、両方の次元にゼロが埋め込まれるが、この操作は本発明に必須ではない。
2次元FFTはテンプレート・イメージについて実行され、実部と虚部は結果として得られる配列の交互の添え字に保存される。このようにして、ゼロが埋め込まれた配列では、配列のサイズは2048×1024である。これで、テンプレート・イメージは使用可能な形式になる。
工程114で、水平方向のオフセットが求められる。工程114では、背景のピクセルを黒く塗りつぶすためにイメージがしきい値化され、次に2つの輝線の2進のイメージとの相互相関が求められる。対象となるイメージについて、水平方向のオフセットが決定される(114)。軸方向の補正で使用するために、イメージごとにDLATが保存される。
ここで図2を参照すると、図1で説明された例示的な実施形態を使用するイメージング・システムの水平方向の補正部分を示す機能ブロック図が示されている。水平方向のオフセットの算出に関連する工程114には、イメージのグレースケール・ヒストグラムを作成する工程が含まれており、ここでビンの数(B1)を2〜255の任意の整数に設定できる。この例では、B1=20と仮定される。ピクセル数が最大のビンが検出され(最も暗いピクセルに対応する最初のビンを除く)、元のイメージ内でグレースケール値がこのビンと同じかまたはそれを超えるすべてのピクセルは元のイメージのコピーではゼロに設定される。この手順21の効果は、背景のピクセルをこれ以降の考察の対象から除外し、しきい値化されたイメージを作成することである。
例として、入力イメージの最大と最小のグレースケール値がそれぞれ31と190の場合は、各ビンの幅は8グレー・レベルである[(1+190−31)/20=8]。さらにここで、ヒストグラムはビン#16(すなわちグレー・レベル151〜158)で最大となると仮定する。したがって、これでしきい値化されたイメージは最初のグレー・レベルが150を上回るすべてのピクセルのグレー・レベルがゼロになることを除いて元のイメージと同様である。
図4A〜4Cは、前述の工程21をイメージに適用することによる効果を示している。元のイメージとセグメント化されたイメージの視覚的な比較は、セグメント化およびしきい値化される前の細胞のイメージの例を示す図4Aを参照し、次に図4Aに示す元のイメージに対応するセグメント化およびしきい値化された細胞のイメージの例を示す図4Bを参照することによって実行できる。図4Cは、元のイメージとしきい値化を適用した後のイメージについて、グレー・レベルの比較を示す例としてのイメージのヒストグラムである。
しきい値化されたイメージに2次元FFTが適用され(22)、そのフーリエ変換にテンプレート・イメージのフーリエ変換の複素共役がかけられる(23)。得られた配列が640行のそれぞれに沿って合計されて(24)、新しい配列が計算され、この配列に対してフーリエ変換(1次元)が実行され(25)、しきい値化されたイメージと参照イメージの行の相互相関が求められる。1次元配列の最大値が検出され(26)、評価される(28)。最大値の位置はDLATで表され、その大きさはCMAXで表される。
必要なオフセットは、DLATとその理想的な位置55[(640−530)/2=55]との差で決定される。このようにして、例えば、DLAT=63の場合は、上向きに8ピクセルのシフトが必要であり(63−55=8)、DLAT=41の場合は、下向きに14ピクセルのシフトが必要である(55−41=14)。
データ・セット内のすべてのイメージについて、手順114が繰り返される。ただし、各イメージは同じテンプレートを参照するので、累積誤差はないことに留意されたい。軸方向の補正値で使用するために、イメージごとにDLATが保存される(29)。
ここで図3を参照すると、図1で説明された例示的な実施形態を使用するイメージング・システムの軸方向の補正部分を示す機能ブロック図が示されている。最初のイメージを除くすべてのイメージについて、軸方向の補正115が実行される。工程31で入力イメージのコピーがしきい値化され、次に前のイメージのしきい値化されたコピーとの相互相関が求められる。オフセットは、現在の視野[DLAT(N)]に関する水平方向の補正と直前の視野[DLAT(N−1)]に関する水平方向の補正との差に対応する行に沿った相互相関関数の最大値として決定される。したがって、軸方向の修正115は、水平方向の修正114とは異なり、反復処理なので累積誤差が発生する。
水平方向の補正の場合と同様に入力イメージのコピーがしきい値化されるが(31)、この場合はヒストグラムのビンの数がB3である。この例では、B3=2である。このようにして、グレー・レベルが中間域より高いすべてのピクセルのグレー・レベルはゼロに設定され、グレー・レベルがそれより低いピクセルは初期値が維持される。例として、入力イメージの最大と最小のグレースケール値がそれぞれ31と190の場合は、輝度が最初に110より高かったすべてのピクセルがここでゼロになり、それ以外は最初の値と同じしきい値化されたイメージになる。
このようにして輝度の高いピクセルを黒く塗りつぶしてから、しきい値化されたイメージに対して2次元フーリエ変換を実行する(32)。さらにフィルタが適用され(33)、最小のフィーチャが除去されることにより、相互相関の見かけの最大値が得られる。サイズが10ピクセル以下のフィーチャに対応する最大102サイクル/ピクセルの空間周波数のみが増大し、より空間周波数の高いピクセルはゼロに設定される。結果として得られた配列はSとして保存され(34)、前のイメージのしきい値化されたコピーから得られたSN−1の複素共役がかけられる(35)。次に、得られた配列に2次元FFTが適用され、しきい値化され、低域通過フィルタを適用された2つの連続するイメージについて相互相関が求められる。相関配列の大域的な最大値を検出するのは適切ではないので、ここで水平方向の補正の工程114から求められる2つの連続するイメージ間の水平方向のオフセットの差[DLAT(N)−DLAT(N−1)]が必要である。代わりに、局所的な最大値FMAXが[DLAT(N)−DLAT(N−1)]に対応する行で検出されるはずである。FMAXを含む列はGMAXと表される。埋め込まれたイメージの次元(この例では1024)の半分よりGMAXの方が大きい場合に、その値は前のイメージに対して負のシフトを表し、その大きさはゼロを埋め込まれた次元からGMAXの値を引いた値に等しい。ゼロを埋め込まれた次元の半分よりGMAXの方が小さい場合に、必要なシフトは前のイメージに対して正であり、GMAXに等しい。
例として、DLAT(N−1)=45、DLAT(N)=63とする。この場合に、FMAXは相関配列の第18行で検出される(63−45=18)。FMAX(第18行の最大値)が第5列にある場合は、GMAX=5であり、イメージは前のイメージから左に5ピクセルだけシフトする必要がある。最大値が第1019行にある場合は(GMAX=1019)、1019は512より大きいので、イメージを前のイメージから右に5ピクセルだけシフトする必要がある(1024−1019=5)。
MAXが検出されると、シフトの値が前の軸方向のオフセットすべての和に加えられ、最初に取得したイメージから現在のイメージまでの差の累積DAXCIALが求められる。シフトは正も負も可能なので、一部のイメージでは軸方向のシフトが必要ない場合もある。イメージごとに、次の4つの値がテキスト・ファイルに書き込まれる。
1.上の管壁の位置DLAT
2.現在のイメージと参照イメージとの相互相関の最大値CMAX
3.現在のイメージと前のイメージとの相互相関の該当する行のFMAXの位置GMAX(最初のイメージではGMAX=0)
4.FMAX(最初のイメージではFMAX=0)
補正されたファイルは、1つまたは2つの辺から適切な数のピクセルを切り取り、切り取った数だけ残りのピクセルをシフトすることによって生成される。元のイメージの寸法(640×480)を維持するために、切り取られた辺の反対の端の空白を、元のイメージの最高のグレー・レベルに設定されたピクセルで置き換える。
例えば、1つのイメージで最高のグレー・レベルを229とすると、DLAT=63、DAXIAL=29、GMAX=1022である。この場合、上から8行(63−55=8)のピクセルと左から27列(29−1024+1022=27)がイメージから削除される。したがって、第28列の第9行が左上コーナーに配置される。イメージの下側に8行が追加され、イメージの右側に28列が追加される。追加されたピクセルのグレー・レベルは229である。以上の手順が完了すると、補正されたイメージの左上632×453ピクセルの領域は、元のイメージの右下632×453ピクセルの領域と同等である。いずれのイメージも、寸法は640×480である。
別の例示的な実施形態には、軸方向の補正(115)と、補正されたイメージの書き込み(116)のみが組み込まれている。この実施形態は、微小毛細血管の壁が見えない場合、および管の水平方向の運動が小さく、無視できることがわかっている場合に有効である。
さらに別の実施形態では、最初のビュー(N=0)から管壁の分離が自動的に計算される。それ以外は、本明細書の以上の部分で図1〜3を参照しながら説明した実施形態と同等である。本発明の別の実施形態では、1つまたは複数のイメージにおける管壁の分離の計算に基づいて管壁の分離が決定される。これは、2次元FFTおよび複素共役による場合と同様に、唯一の輝線によるイメージを参照として使用することによって実行される。第1の実施形態と同様に行が合計され、参照イメージが導かれたイメージ内の位置を基準とする1つの管壁の位置として、最大値の位置が特定される。次に相関値の高い位置は、第1の管壁を基準とした他の管壁の位置を示す。必要に応じて、この第2の最大値の検出を、中心の位置が第1の管壁を基準として推定された管の太さに近い範囲に制限してもよい。この実施形態でも、取得されたすべての視点について唯一の輝線による参照イメージを使用することができる。こうした配置は管壁の分離が未知の場合,または管壁の内側が円でない場合(例えば、管の内側の断面が正方形またはだ円の場合)に有効である。
本発明の別の実施形態では、しきい値化の工程の特性が相関によるフィードバックに基づいて変化してもよい。このような反復アプローチは、水平方向の補正における第1のしきい値化の工程でも、軸方向の補正における第2のしきい値化の工程でも、またはその両方でも使用できる。変更できる1つの特性は、ヒストグラムで使用する分割数すなわちビンの数である。変更できる別の特性は、各ヒストグラム・ビンに含まれるグレー・レベルの数である。例えば、ヒストグラムは輝度レベルの平方根に基づいていてもよい。
本発明の機能により、本方法の出力は入力ファイルの切り取られたコピーであり、切り取られていない部分は垂直方向および/または水平方向にシフトされ、入力イメージのサイズを維持するために、1つまたは2つの縁に追加の空白のピクセルが挿入される。
本発明の別の機能により、本方法を使用した結果はデジタル・ファイルに保存され、コンピュータのワードプロセッシング・アプリケーションで変更および編集できる。さらに、変更されたテキスト・ファイルを使用して2本の軸のオフセットを生成できるので、前述の計算の多くを省略できる。この実施形態では、工程114〜116の水平方向の補正手順が繰り返されてCMAXの最大値が検出される。CMAXの値が臨界値(critical value)CCRITより小さい場合は、しきい値化(27)で開始される手順全体が繰り返されるが、ヒストグラムのビンの数はB1からB2に変更される。再びCMAXが検出され(26)、評価される(28)。
ここで図5を参照すると、本発明の実施形態で考察するように、毛細血管に充填された細胞の例が図式的に示されている。この例示的な実施形態では、毛細血管3の断面には対象となる物体1(細胞など)が充填されており、管に堅く詰め込まれている。各細胞には、核2が含まれていてもよい。毛細血管3は、x、y、z方向の座標値をとる座標系6を基準とする中心軸4を備えている。場合によっては、少なくとも1つの分子プローブ153が細胞内に含まれていてもよい。コンピュータ7は、回転モータ(rotational motor)5と並進モータ(translational motor)8に接続して制御信号を送信する。運動を発生させる1つまたは複数のモータ、ギア、流体工学、またはその他の手段による同等の編成を使用して、毛細血管またはその他の基質(substrate)に必要な平行移動と回転の運動を実現してもよいことは理解されるであろう。場合によっては、1つまたは複数のモータを手動の位置決め装置またはギア、あるいは水圧式(hydraulic)または圧電性(piezoelectronic)の装置のように運動を発生させるその他の手段で置き換えてもよい。平行移動の軸はz軸であり、回転はz軸を中心に行われる。位置決めモータ9が接続され、必要に応じてセントレーション(centration)を目的として中央軸に実質的に垂直なx軸とy軸で定義される平面内で細胞を移動する。
毛細血管の湾曲した表面は円柱レンズの役割を果たすこと、およびこの焦点効果は投影システムにおいて望ましくない場合があることは理解されるであろう。管による光の屈折は、光源と管との間、および管と検出器の表面との間の空間に、屈折率(index of refraction)が毛細血管の屈折率に等しい物質10が充填されている場合には発生しないこと、および管は(例えばオイルまたはゲル状の物質を使用して)空間に充填された物質に光学的に結合できることは、当業者には言うまでもない。
この毛細血管に充填された細胞の例について考察する。細胞は、一列に充填され、重ならないようにするのが好ましい。直径約100ミクロンの細胞全体を直径100ミクロン未満の毛細血管に充填する密度は、管の長さ1cmあたりおよそ100個でもよい。直径約20ミクロンの裸核では、管の直径が物体のサイズ(この場合は約20ミクロン)に比例する場合は、管の長さ1cmあたりおよそ500個充填できる。したがって、長さ数cmの毛細血管には数千個の裸核を重ならないように充填できる。管を中心軸4に沿って平行移動させることによって、z方向の運動を実行できる。x、y方向に管を移動することによって、必要に応じて管内の物体を光断層システムの再構成シリンダの中心に配置できる。管を中心軸4のまわりに回転させることによって、様々な放射方向の投影図を作成できる。管を回転せずにz方向に一定の速度で移動すると、流れ光断層(flow optical tomography)の特殊なケースがシミュレートされる。
管には細胞が充填されており、管を移動しないと細胞は管の内部で静止の状態にあるという状況で、管を移動することの1つの利点は、対象となる物体が停止してから細胞単位で光断層にほぼ最適な露出を実現する速度で回転できることである。つまり、投影イメージの信号対騒音比を改善でき、流れシステムで一般的な一定の速度と方向で通常作成されるよりよいイメージを作成できる。対象外の物体は、イメージング・システムの外に速やかに移動できるので、多くの細胞で構成されるサンプル内で対象となる細胞を分析する上で区間速度(overall speed)を上げることができる。さらに、対象となる物体の上で停止してから必要に応じて回転して様々な投影が可能なので、運動アーチファクト(motion artifacts)をほとんど除去できる。さらに、運動システム(motion system)はサブミクロンの動きで誘導され、ピクセル・サイズの検出器より細胞を細かくサンプリングできるように有利に適用できる。より詳細には、例えば、Nyquist(ナイキスト)サンプリング係数(sampling factor)2はピクセル幅の半分を満たす増加で移動する運動システムによって管理できる。同様に、この運動システムは検出器の不完全な充填率(fill factor)を補正できる。
ここで図6Aを参照すると、1つの細胞が光インデックス(optical indexing)物質の媒体に浸された例として、1つの標本の拡大図が示されている。1つの標本は、回転でき、複数の投影を実現できる微小毛細血管3(例えば、こうした1つの管は、ポリマイクロ(Polymicro)技術、LLC、AZ、USによって製造される)内に示されており、軸方向に走査できる対物レンズ40が図式的に示されている。照明光源には、顕微鏡のスライド54の前に配置されるアパーチャ(aperture)51、ストップ(stop)52、集光レンズ(condenser lens)53から光を投影する光源50が含まれる。スライドと薄いカバースリップ55の間にある微小毛細血管3には、細胞1が含まれている。対物レンズ40(油浸レンズ(oil−immersion lens)であるのが好ましい)は、微小毛細血管3を通過した光を受信するように配置されている。対物レンズは、アクチュエータ57(例えば圧電性のエレメント)によって光軸に沿って平行移動される。カバースリップ55は、微小毛細血管の中心とカバースリップの外側の表面との距離が対物レンズの作動距離より小さくなるように、十分に薄くなければならない。集光レンズ53は、屈折率n以内(例えば空気)である。スライド54とカバースリップ55の屈折率はnである。微小毛細血管3を囲む領域58には、屈折率が適合する媒体15(光学的ゲル状物質または液浸油(optical gel or immersion oil)、屈折率はn)が含まれる。微小毛細血管3自体の屈折率はnである。微小毛細血管内の細胞1を囲む領域59には、屈折率nを示す媒体10が含まれる。細胞内の領域60には、同じ媒体10が充填されてもよい。または屈折率がnの別の媒体でもよい。スライド54とカバースリップ55で構成される2つの平らで平行な表面間では、円柱レンズによる歪みを防止するために、n=n=n=nであるのが好ましい(差を最小化する必要がある)。イメージはカメラ43に投影される。
ここで図6Aと6Bを参照すると、圧電性の並進装置に装着された顕微鏡の対物レンズ(micro−objective)を組み込んだ、本発明で使用する光断層システムの1つの実施形態が図式的に示されている。圧電性の並進装置57を使用して、対物レンズ60を軸方向の距離約40ミクロン以上移動する。1つの有効な実施形態では、顕微鏡の対物レンズの位置決めシステムは、管の座標系6のz軸に沿って上下に調整する適切なアクチュエータ57を備えている。この実施形態では、これは、ビデオ・カメラ43が装着され、コンピュータ制御の光源と集光レンズ・アセンブリ61を備える標準的な透過顕微鏡64に開口数の大きな対物レンズを装着して使用してもよい。コンピュータ制御の集光レンズと光源50は、1つまたは複数の白熱電球、アーク灯、レーザ、発光ダイオードを含む光源あるのが有利である。コンピュータ制御信号70は、コンピュータ制御の集光レンズと光源50にリンクして光変調を制御する。
カメラ43の出力は、コンピュータ・メモリ72に格納される。標本を含む微小毛細血管3は、管の座標系6のx軸またはy軸に沿って平行移動できる。さらに、微小毛細血管3はコンピュータ制御の回転モータ5を使用してその「θ」軸49のまわりに回転できる。本明細書で使用するように、微小毛細血管は顕微鏡イメージングの視野が毛細血管の直径と同程度の直径をもつ毛細血管として定義される。例示的な実施形態において、回転モータ5はコンピュータ7から送信された制御信号71によって制御される。高速の適用例では、他の制御を追加して軸方向に走査する間の振動を軽減してもよい。取得されたイメージは、モニター73に表示されてもよい。
ここで図7を参照すると、本発明の1つの実施形態で意図された3次元(3D)イメージ再構成で使用するイメージ取得処理を示す例示的な流れ図が示されている。本発明の1つの実施例で考察するように、3次元イメージ再構成処理には、細胞を充填した管を装填する工程(工程81)と、対象となる第1の細胞の位置が確認されるまで管を平行移動する工程(工程82)と、必要に応じて対象となる細胞を中心に配置する工程(工程83)と、様々な回転角から一連の投影図を作成する工程(工程84)と、データ・セットの完了を確認する工程(工程85)と、対象となる細胞がすべて走査されるまで工程82〜85を繰り返す工程とが含まれる。工程86で、運動の補正が行われる。この処理は、例えばコンピュータ7のようなパーソナル・コンピュータで実行されるコンピュータ・ソフトウェア・プログラムで実装してもよい。
ここで図8を参照すると、本発明の1つの実施形態で意図された3次元(3D)イメージ再構築で使用する運動補正オフセットの例が図式的に示されている。運動補正を適用すると、毛細管壁62の毛細血管3に含まれる対象となる物体1(細胞または核2など)の水平方向の位置が検出される。水平方向のオフセットは、管の軸Zに垂直なイメージの長辺の次元(640ピクセル)に沿って発生する誤差である。軸方向のオフセットは、管の軸Zに平行なイメージの短辺の次元(480ピクセル)に沿って発生する誤差である。対象となる物体1の水平方向の位置はLP、軸方向の位置はAPである。イメージは様々な視点から得られるので、運動補正を適用すると様々なビューの同じ平面で維持される同等のフィーチャで対象となる物体を再構成できる。
ソフトウェア・コード記述の例
ソース・コード
以下は、本発明の運動補正の方法による1つの実施形態を実装するソース・コード・テキストの例である。実行可能ファイル(regcorr.exe)は、2つのヘッダー・ファイル(rrahn.hとregcorr.h)および4つのC++ファイル(fileinfo.cpp、nr−fft.cpp、multiplycomplexvalues.cpp、regcorr2.cpp)がプロジェクト(regcorr.ide)によってリンクされて構成される。プロジェクトはBorland C++ 5.01によってコンパイルされ、「Win32 Console」モードに設定され、staticクラス・ライブラリ・フレームワークを使用する。実行可能ファイルのサイズはおよそ60kBである(プログラム「regcorr.exe」と「regcorr_no_lateral.exe」との相違は、水平方向のオフセットを計算してそれをテキスト・ファイルに書き込むというオプションがあるかどうかのみである。また、いずれのプログラムも計算を省略し、代わりにオフセットをテキスト・ファイルから読み込むことができる)。
(プログラム)
本発明について、特許法に準拠するため、および本発明の新しい原理を適用し、必要に応じて例示的で特殊なコンポーネントを構築して使用するのに必要な情報を当業者に提供するために、本明細書で詳細に説明してきた。ただし、本発明は個々に様々な設備、装置、および再構成アルゴリズムで実行できること、および設備の細部および操作手順のいずれに関しても、本発明の真の精神と範囲を逸脱することなく様々な変更を実装できることは言うまでもない。
本発明の教示に従って構築された連続するビュー間の物体検出器の相対的な運動を補正する方法の実施形態の例を示す機能ブロック図である。 図1で説明された例示的な実施形態を使用するイメージング・システムの水平方向の補正部分を示す機能ブロック図である。 図1で説明された例示的な実施形態を使用するイメージング・システムの軸方向の補正部分を示す機能ブロック図である。 本発明による方法の1つの例で使用されるしきい値化操作を適用する前の細胞のイメージを示す図である。 図4Aに示すイメージに本発明による方法の1つの例で使用されるしきい値化操作を適用した結果を示す図である。 図4A〜4Bに示すイメージの輝度分布を示すヒストグラムである。 本発明の1つの実施形態で使用される光投影断層顕微鏡(OPTM)システムを図式的に示す図である。 圧電性の並進装置に装着された顕微鏡対物レンズを採用する光断層システムの1つの実施形態を図式的に示す図である。 圧電性の並進装置に装着された顕微鏡対物レンズを採用する光断層システムの1つの実施形態を図式的に示す図である。 本発明の1つの実施形態で意図された3次元(3D)イメージ再構成で使用するイメージ取得処理を示す例示的な流れ図である。 本発明の1つの実施形態で意図された3次元(3D)イメージ再構成で使用する運動補正オフセットの例を図式的に示す図である。

Claims (25)

  1. 連続するビュー間で物体検出器の相対的な運動を補正する方法であって、
    対象となる物体(1)を照光し、イメージを作成する工程(111)と、
    前記イメージの水平方向のオフセット補正値を決定する工程(114)と、
    前記イメージの軸方向のオフセット補正値を決定する工程(115)と、
    前記水平方向のオフセット補正値と前記軸方向のオフセット補正値とを前記イメージに適用し、補正されたファイル・イメージを作成する工程(l16)とを備える方法。
  2. 前記イメージの水平方向のオフセット補正値を決定する工程(114)は、
    前記イメージをしきい値化する工程(21)と、
    前記イメージをテンプレート・イメージと相互相関する工程(22、23、24、25、26、27)とをさらに備える請求項1に記載の方法。
  3. 前記テンプレート・イメージは、
    あらかじめ指定された位置に少なくとも2本の白線を作成し、暫定的なテンプレート・イメージを作成する工程と、
    前記暫定的なテンプレート・イメージを拡張して2次元にゼロを埋め込み、拡張されたテンプレート・イメージを作成する工程と、
    前記拡張されたテンプレート・イメージに対して2次元のFFTを実行(22)して最終的なテンプレート・イメージを作成する工程とを備える方法で作成される(111)請求項2に記載の方法。
  4. 前記イメージをしきい値化する工程(21)は、
    複数のビンを含む前記イメージのグレースケール・ヒストグラムを検出する工程と、
    ピクセル数が最大のビンを特定する工程と、
    前記イメージ内で前記ビンのグレースケール値以上のすべてのピクセルを前記イメージのコピー内でゼロに設定する工程と、
    前記イメージの前記コピーに2次元のFFTを適用してフーリエ変換を作成する工程(22)と、
    前記フーリエ変換に前記テンプレート・イメージのフーリエ変換の複素共役をかけて新しいイメージ配列を作成する工程(23)と、
    複数の行のそれぞれについて前記新しいイメージ配列を合計し、水平方向の合計配列を計算する工程(24)と、
    前記水平方向の合計配列の1次元フーリエ変換を計算し、前記元のイメージの前記コピーと前記テンプレート・イメージについて行の相互相関を検出する工程(25)と、
    上側の管壁の補正されない位置を前記水平方向の合計配列の最大値の位置として設定する工程(26)と、
    前記水平方向のオフセットを前記上側の管壁の前記補正されない位置とあらかじめ指定された管壁の端の位置との差として決定する工程(28)とをさらに備える請求項3に記載の方法。
  5. 前記イメージの軸方向のオフセット補正値を決定する工程は、
    前記イメージをしきい値化する工程(31)と、
    前記イメージを前のイメージのしきい値化されたものと相互相関する工程(32、33、34、35、36、37)と、
    軸方向のオフセットを前記2つのイメージの前記水平方向の補正の差に対応する行に沿った前記相互相関関数の最大値として決定する工程(38)とをさらに備える請求項4に記載の方法。
  6. 軸方向のオフセットを決定する工程は、
    複数のビンを含む前記イメージの前記グレースケール・ヒストグラムを検出する工程と、
    前記ピクセル数が最大のビンを特定する工程と、
    前記元のイメージ内の前記ビンのグレースケール値以上のすべてのピクセルを前記元のイメージのコピー内でゼロに設定する工程と、
    前記しきい値化されたイメージに低域通過フィルタを適用する工程(33)と、
    前記しきい値化され、低域通過フィルタを適用されたイメージと前のイメージのしきい値化され、低域通過フィルタを適用されたものとの相互相関を計算する工程(35、36)と、
    前記2つのイメージの前記水平方向のオフセットの差に対応する前記得られた相互相関の前記行における最大の補正値を検出する工程(37)と、
    前記補正値を前記前の軸方向のオフセットのすべての合計に加える工程とをさらに備える請求項5に記載の方法。
  7. 前記上側の管壁の位置をファイルに書き込む工程と、
    前記現在のイメージと前記テンプレート・イメージとの前記相互相関の前記最大値をファイルに書き込む工程と、
    前記相互相関の適切な行の前記最大の補正値の位置をファイルに書き込み、前記適切な行は前記2つのイメージの水平方向のオフセットの前記差に対応する行である工程と、
    前記最大の補正値をファイルに書き込む工程と、
    1つまたは2つの辺から適切な数のピクセルを切り取り、残りのピクセルを前記切り取った数だけシフトすることによって補正されたイメージを生成する工程とをさらに備える請求項6に記載の方法。
  8. 前記対象となる物体(1)は細胞または細胞核である請求項1に記載の方法。
  9. 前記相互相関の前記最大値の大きさがあらかじめ指定された値より小さい場合に、前記ヒストグラムのビンの数を別の値にして前記工程を繰り返す工程をさらに備える請求項4に記載の方法。
  10. イメージング・システムにおける位置決めと運動の誤差を補正する装置であって、
    物体(1)の少なくとも2つのビューを取得する手段(5、43、50、60)と、
    M行N列のイメージ輝度データを含む前記少なくとも2つのビューと、
    取得した各ビューのイメージ輝度データのパターンを対応するイメージ輝度データの標準パターンと比較してそれらの間の類似性に関する情報を含む2つの係数「A」と「B」を求める手段(7)とを備えており、
    前記比較の手段(7)は、
    輝度レベルが指定された範囲内にあるピクセルに対して輝度レベルの変更が適用された前記取得した1つのイメージの変更されたコピーを作成する第1の手段と、
    前記取得した1つのビューの前記変更されたコピーと前記標準ビューとの相互相関を実行する第2の手段と、
    前記得られた相互相関関数の最大値を検出して評価し、前記最大値がある行または列に基づいて前記係数「A」の値を決定する第3の手段と、
    輝度レベルが指定された範囲内にあるピクセルに対して輝度レベルの変更が適用された前記取得した複数のイメージの変更されたコピーを作成する第4の手段と
    取得した連続するイメージの前記変更されたコピー2つの間の相互相関を実行する第5の手段と、
    前記得られた相互相関関数の制限された最大値を検出および評価し、前記制限は、前記制限された最大値がある行または列が、係数「A」がある行または列に直交し、それを横切る必要があることである第6の手段と、
    係数「B」を決定する前記制限された最大値の場所とを含む装置。
  11. 前記係数「A」と「B」の前記値に応答して前記取得したビューを2つの直交する方向にシフトし、前記量の方向と大きさは前記係数「A」と「B」の前記値に関連する手段を備える請求項10に記載の装置。
  12. 前記相互相関を実行して係数「A」を決定する手段は、前記行または列を合計して1次元配列を取得し、前記合計は前記係数「A」によって大きさが決定される前記シフトの方向と直交する方向に実行される工程を含む請求項10に記載の装置。
  13. 前記参照パターンは、1つまたは複数の行または列を除いてすべてのピクセルが同じ輝度の値をとり、前記1つまたは複数の行または列は均等であるが、他のピクセルとは大きく異なる輝度値をとるM行N列のイメージ輝度データの配列を備える請求項10に記載の装置。
  14. 前記参照パターンは、1つまたは複数の行または列で構成される2つのグループを除いてすべてのピクセルが同じ輝度の値をとり、前記2つのグループは均等であるが、他のピクセルとは大きく異なる輝度値をとるM行N列のイメージ輝度データの配列を備えており、微小毛細血管(3)の向かい合う壁の明らかな分離に対応する分離があり、前記向かい合う壁の両方が2つ以上の連続するイメージの視野に表れ、前記微小毛細血管(3)は対象となる物体を含む請求項10に記載の装置。
  15. 前記対象となる物体(1)は生物学的な細胞または細胞核である請求項14に記載の装置。
  16. しきい値化、相互相関、および前記相互相関の最大値の検出および評価の工程を繰り返す手段を含み、前記繰り返しの手段は複数のしきい値化に基づく前記最大の相関の最大値を検出する手段を含む請求項10に記載の装置。
  17. 2つのグループすなわち行または列の分離は取得された1つまたは複数のイメージに基づいて計算される請求項14に記載の装置。
  18. 対象となる物体の3次元の(3D)再構成を行う方法であって、
    (a)対象となる一連の物体を線形の容器に充填する工程(81)と、
    (b)少なくとも1つの光学投影ビームを使用して前記対象となる一連の物体の少なくとも1つの物体を照光する工程(50)と、
    (c)前記対象となる少なくとも1つの物体が前記少なくとも1つの光学投影ビームの範囲内に入るまで、前記線形の容器を平行移動する工程(82)と、
    (d)必要に応じて前記少なくとも1つの物体を中心に配置する工程(83)と、
    (e)複数の放射角を使用して前記少なくとも1つの物体を回転させる工程(84)と、
    (f)前記複数の放射角のそれぞれの角度で一連の投影イメージを生成する工程(84)と、
    (g)前記対象となる一連の物体(1)の走査が完了するまで、工程(b)〜(f)を繰り返す工程(85)と、
    (h)前記走査されたイメージの水平方向のオフセット補正値を決定し、前記走査されたイメージの軸方向のオフセット補正値を決定し、さらに前記水平方向のオフセット補正値と前記軸方向のオフセット補正値を前記走査されたイメージに適用して補正されたファイル・イメージを作成することによって、前記走査された対象となる一連の物体(1)の運動を補正する工程(86)とを備える方法。
  19. 前記少なくとも1つの物体(1)は細胞または細胞核である請求項18に記載の方法。
  20. 前記一連の対象となる物体を線型の容器に充填する工程(81)は、複数の細胞を微小毛細血管(3)に充填する工程を備える請求項18に記載の方法。
  21. 連続するビュー間の物体検出器の相対的な運動を補正する方法であって、
    対象となる物体(1)をイメージングしてイメージを作成する工程(111)と、
    前記イメージの軸方向のオフセット補正値を決定し、前記イメージの軸方向のオフセット補正値を決定する工程はさらに前記イメージをしきい値化する工程(31)と、前記イメージを前のイメージのしきい値化されたものと相互相関する工程(32、33、35、36)と、軸方向のオフセットを前記2つのイメージの前記水平方向の補正値の差に対応する行に沿った前記相互相関関数の最大値として決定する工程(37)とを備える工程(115)と、
    前記イメージの水平方向のオフセット補正値を決定する工程(114)と、
    前記水平方向のオフセット補正値と前記軸方向のオフセット補正値とを前記イメージに適用し、補正されたファイル・イメージを作成する工程(l16)とを備える方法。
  22. 複数のイメージが作成されて1つの入力イメージ・ファイルが生成され、複数の補正されたファイル・イメージは前記入力イメージ・ファイルの切り取られたコピーであり、切り取られていない部分は垂直方向および/または水平方向にシフトされ、入力ファイル・イメージのサイズを維持するために1つまたは2つのボーダーに追加の空白のピクセルが挿入される請求項1に記載の方法。
  23. 前記補正されたファイル・イメージは、デジタル・ファイルに保存された計算されたオフセット値を備える請求項1に記載の方法。
  24. 前記計算されたオフセット値はコンピュータ・ワードプロセッシングで処理されて変更されたテキスト・ファイルが作成され、前記変更されたテキスト・ファイルは2本の軸のオフセットを生成するのに使用され、前記イメージの水平方向のオフセット補正値を決定する工程は繰り返されて最大値が検出される請求項23に記載の方法。
  25. 前記計算されたオフセット値は、
    前記上側の管壁の位置と、
    現在のイメージと前記テンプレート・イメージとの相互相関の最大値と、
    前記現在のイメージと前記テンプレート・イメージとの相互相関に対応する行の最大相互相関の位置と、
    最大相互相関値と
    を備える請求項22に記載の方法。
JP2007518092A 2004-06-24 2005-06-06 連続するビュー間で発生する物体検出器(object−detector)の相対的な運動(motion)を補正(correction)する方法 Expired - Fee Related JP4841549B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US10/876,328 2004-06-24
US10/876,328 US7260253B2 (en) 2002-04-19 2004-06-24 Method for correction of relative object-detector motion between successive views
PCT/US2005/019847 WO2006011945A2 (en) 2004-06-24 2005-06-06 Method for correction of relative object-detector motion between successive views

Publications (3)

Publication Number Publication Date
JP2008504060A true JP2008504060A (ja) 2008-02-14
JP2008504060A5 JP2008504060A5 (ja) 2008-07-24
JP4841549B2 JP4841549B2 (ja) 2011-12-21

Family

ID=35786611

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007518092A Expired - Fee Related JP4841549B2 (ja) 2004-06-24 2005-06-06 連続するビュー間で発生する物体検出器(object−detector)の相対的な運動(motion)を補正(correction)する方法

Country Status (9)

Country Link
US (2) US7260253B2 (ja)
EP (1) EP1769423B1 (ja)
JP (1) JP4841549B2 (ja)
CN (1) CN101027677B (ja)
AU (1) AU2005267569B2 (ja)
CA (1) CA2570730C (ja)
ES (1) ES2559411T3 (ja)
HK (1) HK1104633A1 (ja)
WO (1) WO2006011945A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012042348A (ja) * 2010-08-19 2012-03-01 Canon Inc 断層画像表示装置およびその制御方法

Families Citing this family (104)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060023219A1 (en) * 2001-03-28 2006-02-02 Meyer Michael G Optical tomography of small objects using parallel ray illumination and post-specimen optical magnification
US7907765B2 (en) * 2001-03-28 2011-03-15 University Of Washington Focal plane tracking for optical microtomography
US7639889B2 (en) * 2004-11-10 2009-12-29 Fotonation Ireland Ltd. Method of notifying users regarding motion artifacts based on image analysis
US8180173B2 (en) 2007-09-21 2012-05-15 DigitalOptics Corporation Europe Limited Flash artifact eye defect correction in blurred images using anisotropic blurring
US8698924B2 (en) 2007-03-05 2014-04-15 DigitalOptics Corporation Europe Limited Tone mapping for low-light video frame enhancement
US7636486B2 (en) 2004-11-10 2009-12-22 Fotonation Ireland Ltd. Method of determining PSF using multiple instances of a nominally similar scene
US9160897B2 (en) * 2007-06-14 2015-10-13 Fotonation Limited Fast motion estimation method
US8417055B2 (en) * 2007-03-05 2013-04-09 DigitalOptics Corporation Europe Limited Image processing method and apparatus
US8989516B2 (en) * 2007-09-18 2015-03-24 Fotonation Limited Image processing method and apparatus
US8199222B2 (en) * 2007-03-05 2012-06-12 DigitalOptics Corporation Europe Limited Low-light video frame enhancement
US8264576B2 (en) * 2007-03-05 2012-09-11 DigitalOptics Corporation Europe Limited RGBW sensor array
US20050097046A1 (en) 2003-10-30 2005-05-05 Singfield Joy S. Wireless electronic check deposit scanning and cashing machine with web-based online account cash management computer application system
US7639888B2 (en) * 2004-11-10 2009-12-29 Fotonation Ireland Ltd. Method and apparatus for initiating subsequent exposures based on determination of motion blurring artifacts
JP4105176B2 (ja) * 2005-05-19 2008-06-25 ザイオソフト株式会社 画像処理方法および画像処理プログラム
EP2023812B1 (en) 2006-05-19 2016-01-27 The Queen's Medical Center Motion tracking system for real time adaptive imaging and spectroscopy
IES20070229A2 (en) * 2006-06-05 2007-10-03 Fotonation Vision Ltd Image acquisition method and apparatus
US8577171B1 (en) * 2006-07-31 2013-11-05 Gatan, Inc. Method for normalizing multi-gain images
US8351677B1 (en) 2006-10-31 2013-01-08 United Services Automobile Association (Usaa) Systems and methods for remote deposit of checks
US7873200B1 (en) 2006-10-31 2011-01-18 United Services Automobile Association (Usaa) Systems and methods for remote deposit of checks
US8799147B1 (en) 2006-10-31 2014-08-05 United Services Automobile Association (Usaa) Systems and methods for remote deposit of negotiable instruments with non-payee institutions
US8708227B1 (en) 2006-10-31 2014-04-29 United Services Automobile Association (Usaa) Systems and methods for remote deposit of checks
US7867778B2 (en) * 2007-02-23 2011-01-11 Visiongate, Inc. Fluid focusing for positional control of a specimen for 3-D imaging
US10380559B1 (en) 2007-03-15 2019-08-13 United Services Automobile Association (Usaa) Systems and methods for check representment prevention
US8959033B1 (en) 2007-03-15 2015-02-17 United Services Automobile Association (Usaa) Systems and methods for verification of remotely deposited checks
US7773118B2 (en) * 2007-03-25 2010-08-10 Fotonation Vision Limited Handheld article with movement discrimination
US8538124B1 (en) 2007-05-10 2013-09-17 United Services Auto Association (USAA) Systems and methods for real-time validation of check image quality
US8433127B1 (en) 2007-05-10 2013-04-30 United Services Automobile Association (Usaa) Systems and methods for real-time validation of check image quality
US7835561B2 (en) * 2007-05-18 2010-11-16 Visiongate, Inc. Method for image processing and reconstruction of images for optical tomography
JP4398997B2 (ja) * 2007-06-07 2010-01-13 シャープ株式会社 画像処理装置
US20080309770A1 (en) * 2007-06-18 2008-12-18 Fotonation Vision Limited Method and apparatus for simulating a camera panning effect
US9058512B1 (en) 2007-09-28 2015-06-16 United Services Automobile Association (Usaa) Systems and methods for digital signature detection
DE102007048409A1 (de) * 2007-10-09 2009-04-16 Carl Zeiss Microimaging Gmbh Verfahren zum Positionieren von biologischen Proben in einer mikroskopischen Anordnung
US7787112B2 (en) 2007-10-22 2010-08-31 Visiongate, Inc. Depth of field extension for optical tomography
US9898778B1 (en) 2007-10-23 2018-02-20 United Services Automobile Association (Usaa) Systems and methods for obtaining an image of a check to be deposited
US9892454B1 (en) 2007-10-23 2018-02-13 United Services Automobile Association (Usaa) Systems and methods for obtaining an image of a check to be deposited
US8358826B1 (en) 2007-10-23 2013-01-22 United Services Automobile Association (Usaa) Systems and methods for receiving and orienting an image of one or more checks
US9159101B1 (en) 2007-10-23 2015-10-13 United Services Automobile Association (Usaa) Image processing
US8320657B1 (en) * 2007-10-31 2012-11-27 United Services Automobile Association (Usaa) Systems and methods to use a digital camera to remotely deposit a negotiable instrument
US8290237B1 (en) * 2007-10-31 2012-10-16 United Services Automobile Association (Usaa) Systems and methods to use a digital camera to remotely deposit a negotiable instrument
US7900822B1 (en) 2007-11-06 2011-03-08 United Services Automobile Association (Usaa) Systems, methods, and apparatus for receiving images of one or more checks
TWI353778B (en) * 2007-12-21 2011-12-01 Ind Tech Res Inst Moving object detection apparatus and method
US10380562B1 (en) 2008-02-07 2019-08-13 United Services Automobile Association (Usaa) Systems and methods for mobile deposit of negotiable instruments
US8143600B2 (en) 2008-02-18 2012-03-27 Visiongate, Inc. 3D imaging of live cells with ultraviolet radiation
US8090183B2 (en) 2009-03-12 2012-01-03 Visiongate, Inc. Pattern noise correction for pseudo projections
US8351678B1 (en) 2008-06-11 2013-01-08 United Services Automobile Association (Usaa) Duplicate check detection
WO2009155151A2 (en) * 2008-06-20 2009-12-23 Visiongate, Inc. Functional imaging of cells optical projection tomography
US8422758B1 (en) 2008-09-02 2013-04-16 United Services Automobile Association (Usaa) Systems and methods of check re-presentment deterrent
US10504185B1 (en) 2008-09-08 2019-12-10 United Services Automobile Association (Usaa) Systems and methods for live video financial deposit
US8391599B1 (en) 2008-10-17 2013-03-05 United Services Automobile Association (Usaa) Systems and methods for adaptive binarization of an image
US8644581B2 (en) * 2008-11-04 2014-02-04 Beckman Coulter, Inc. Systems and methods for cellular analysis data pattern global positioning
US8452689B1 (en) 2009-02-18 2013-05-28 United Services Automobile Association (Usaa) Systems and methods of check detection
US8254023B2 (en) * 2009-02-23 2012-08-28 Visiongate, Inc. Optical tomography system with high-speed scanner
US10956728B1 (en) 2009-03-04 2021-03-23 United Services Automobile Association (Usaa) Systems and methods of check processing with background removal
JP5743380B2 (ja) * 2009-03-06 2015-07-01 キヤノン株式会社 光断層撮像装置および光断層撮像方法
JP5242479B2 (ja) * 2009-03-26 2013-07-24 オリンパス株式会社 画像処理装置、画像処理プログラムおよび画像処理装置の作動方法
US8155420B2 (en) 2009-05-21 2012-04-10 Visiongate, Inc System and method for detecting poor quality in 3D reconstructions
WO2010143572A1 (ja) * 2009-06-12 2010-12-16 オリンパス株式会社 被検体情報分析装置及び被検体情報分析方法
US8542921B1 (en) 2009-07-27 2013-09-24 United Services Automobile Association (Usaa) Systems and methods for remote deposit of negotiable instrument using brightness correction
US9779392B1 (en) 2009-08-19 2017-10-03 United Services Automobile Association (Usaa) Apparatuses, methods and systems for a publishing and subscribing platform of depositing negotiable instruments
US8977571B1 (en) 2009-08-21 2015-03-10 United Services Automobile Association (Usaa) Systems and methods for image monitoring of check during mobile deposit
US8699779B1 (en) 2009-08-28 2014-04-15 United Services Automobile Association (Usaa) Systems and methods for alignment of check during mobile deposit
US9129340B1 (en) 2010-06-08 2015-09-08 United Services Automobile Association (Usaa) Apparatuses, methods and systems for remote deposit capture with enhanced image detection
US8571781B2 (en) 2011-01-05 2013-10-29 Orbotix, Inc. Self-propelled device with actively engaged drive system
US9429940B2 (en) 2011-01-05 2016-08-30 Sphero, Inc. Self propelled device with magnetic coupling
US10281915B2 (en) 2011-01-05 2019-05-07 Sphero, Inc. Multi-purposed self-propelled device
US9090214B2 (en) 2011-01-05 2015-07-28 Orbotix, Inc. Magnetically coupled accessory for a self-propelled device
CN102186004B (zh) * 2011-05-12 2012-10-31 华南理工大学 基于差分的多视点视频图像校正方法
JP5730696B2 (ja) * 2011-07-12 2015-06-10 オリンパス株式会社 画像処理装置および画像表示システム
GB201112119D0 (en) * 2011-07-14 2011-08-31 Univ Sheffield Method and apparatus for position determination
EP2747641A4 (en) 2011-08-26 2015-04-01 Kineticor Inc METHOD, SYSTEMS AND DEVICES FOR SCAN INTERNAL MOTION CORRECTION
JP2013075035A (ja) * 2011-09-30 2013-04-25 Canon Inc 光断層像撮像方法、光断層像撮像装置およびプログラム
US10380565B1 (en) 2012-01-05 2019-08-13 United Services Automobile Association (Usaa) System and method for storefront bank deposits
JP2015524951A (ja) 2012-05-14 2015-08-27 オルボティックス, インコーポレイテッドOrbotix, Inc. 画像内で丸い物体を検出することによるコンピューティングデバイスの操作
US9827487B2 (en) 2012-05-14 2017-11-28 Sphero, Inc. Interactive augmented reality using a self-propelled device
US9292758B2 (en) 2012-05-14 2016-03-22 Sphero, Inc. Augmentation of elements in data content
US10056791B2 (en) 2012-07-13 2018-08-21 Sphero, Inc. Self-optimizing power transfer
JP6257962B2 (ja) * 2012-09-04 2018-01-10 東芝メディカルシステムズ株式会社 X線ct装置
US10552810B1 (en) 2012-12-19 2020-02-04 United Services Automobile Association (Usaa) System and method for remote deposit of financial instruments
US9717461B2 (en) 2013-01-24 2017-08-01 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9305365B2 (en) 2013-01-24 2016-04-05 Kineticor, Inc. Systems, devices, and methods for tracking moving targets
US10327708B2 (en) 2013-01-24 2019-06-25 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9269167B2 (en) 2013-01-28 2016-02-23 Koninklijke Philips N.V. SPECT motion-correction
CN109008972A (zh) 2013-02-01 2018-12-18 凯内蒂科尔股份有限公司 生物医学成像中的实时适应性运动补偿的运动追踪系统
CN104424654B (zh) * 2013-08-20 2017-10-27 清华大学 自动标定ct中心偏移量的方法和系统
US11138578B1 (en) 2013-09-09 2021-10-05 United Services Automobile Association (Usaa) Systems and methods for remote deposit of currency
US9286514B1 (en) 2013-10-17 2016-03-15 United Services Automobile Association (Usaa) Character count determination for a digital image
DE102013019951B4 (de) 2013-11-27 2023-06-15 Carl Zeiss Microscopy Gmbh Lichtmikroskop und Mikroskopieverfahren zum Untersuchen mehrerer mikroskopischer Objekte
US9829882B2 (en) 2013-12-20 2017-11-28 Sphero, Inc. Self-propelled device with center of mass drive system
EP3157422A4 (en) 2014-03-24 2018-01-24 The University of Hawaii Systems, methods, and devices for removing prospective motion correction from medical imaging scans
EP3188660A4 (en) 2014-07-23 2018-05-16 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9462189B2 (en) * 2014-07-31 2016-10-04 Apple Inc. Piecewise perspective transform engine
US10346989B2 (en) * 2014-12-17 2019-07-09 Koninklijke Philips N.V. Method and system for calculating a displacement of an object of interest
US10402790B1 (en) 2015-05-28 2019-09-03 United Services Automobile Association (Usaa) Composing a focused document image from multiple image captures or portions of multiple image captures
US9943247B2 (en) 2015-07-28 2018-04-17 The University Of Hawai'i Systems, devices, and methods for detecting false movements for motion correction during a medical imaging scan
US10716515B2 (en) 2015-11-23 2020-07-21 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
CN106815878B (zh) * 2015-12-02 2021-02-05 北京航空航天大学 一种基于多视角多光谱层析成像的图像重建方法
US11069054B2 (en) 2015-12-30 2021-07-20 Visiongate, Inc. System and method for automated detection and monitoring of dysplasia and administration of immunotherapy and chemotherapy
WO2018089839A1 (en) 2016-11-10 2018-05-17 The Trustees Of Columbia University In The City Of New York Rapid high-resolution imaging methods for large samples
US20180150703A1 (en) * 2016-11-29 2018-05-31 Autoequips Tech Co., Ltd. Vehicle image processing method and system thereof
KR101814728B1 (ko) 2017-02-08 2018-01-04 상명대학교산학협력단 3d 모델 골격 추출 방법 및 장치
US11315292B2 (en) * 2017-03-02 2022-04-26 Arizona Board Of Regents On Behalf Of Arizona State University Live-cell computed tomography
US11030752B1 (en) 2018-04-27 2021-06-08 United Services Automobile Association (Usaa) System, computing device, and method for document detection
US11900755B1 (en) 2020-11-30 2024-02-13 United Services Automobile Association (Usaa) System, computing device, and method for document detection and deposit processing
CN114936988B (zh) * 2022-07-21 2022-11-01 杭州睿影科技有限公司 图像校正方法、装置及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0863597A (ja) * 1994-08-22 1996-03-08 Konica Corp 顔抽出方法
US5552605A (en) * 1994-11-18 1996-09-03 Picker International, Inc. Motion correction based on reprojection data
JP2003086919A (ja) * 2001-09-07 2003-03-20 Sun Tec Kk パターン検査装置
JP2004532405A (ja) * 2001-03-28 2004-10-21 ヴィジョンゲイト,インコーポレーテッド 光学的断層撮影法を使用して流動流中の微小対象物を画像化するための装置と方法

Family Cites Families (92)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3470373A (en) 1966-10-18 1969-09-30 Litton Systems Inc Method for analysis and identification of biologic entities by phosphorescence
US3497690A (en) 1967-09-21 1970-02-24 Bausch & Lomb Method and apparatus for classifying biological cells by measuring the size and fluorescent response thereof
US3598471A (en) 1968-11-22 1971-08-10 Corning Glass Works Optical contrast enhancement system
US3657537A (en) 1970-04-03 1972-04-18 Bausch & Lomb Computerized slit-scan cyto-fluorometer for automated cell recognition
US3748468A (en) 1971-12-22 1973-07-24 Gen Electric Automatic electron microscope field counter
US3999047A (en) 1972-09-05 1976-12-21 Green James E Method and apparatus utilizing color algebra for analyzing scene regions
US3833762A (en) 1973-06-04 1974-09-03 Rockwell International Corp Solid state integrating, image motion compensating imager
US4200353A (en) 1974-06-05 1980-04-29 Robert Hoffman Modulation contrast microscope with three regions
US3960449A (en) 1975-06-05 1976-06-01 The Board Of Trustees Of Leland Stanford Junior University Measurement of angular dependence of scattered light in a flowing stream
US4175860A (en) 1977-05-31 1979-11-27 Rush-Presbyterian-St. Luke's Medical Center Dual resolution method and apparatus for use in automated classification of pap smear and other samples
US4183623A (en) 1977-10-11 1980-01-15 Haines Kenneth A Tomographic cross-sectional imaging using incoherent optical processing
US4293221A (en) 1979-04-17 1981-10-06 Research Corporation Multidimensional slit-scan flow system
US4360885A (en) 1980-01-02 1982-11-23 Edgar Albert D Micro-optical tomography
DE3424108A1 (de) 1984-06-29 1986-01-09 Bernhard Prof. Dr.-Ing. 4300 Essen Schrader Probenanordnung zur spektrometrie, verfahren zur messung von lumineszenz und streuung und verwendung der probenanordnung
US5281517A (en) 1985-11-04 1994-01-25 Cell Analysis Systems, Inc. Methods for immunoploidy analysis
US4873653A (en) 1986-04-09 1989-10-10 Carl-Zeiss-Stiftung Microscope system for providing three-dimensional resolution
US4858128A (en) 1986-08-11 1989-08-15 General Electric Company View-to-view image correction for object motion
US4891829A (en) 1986-11-19 1990-01-02 Exxon Research And Engineering Company Method and apparatus for utilizing an electro-optic detector in a microtomography system
DE3905619C2 (de) 1988-02-23 2000-04-13 Olympus Optical Co Bildeingabe-/Ausgabevorrichtung
GB2239575B (en) * 1989-10-17 1994-07-27 Mitsubishi Electric Corp Motion vector detecting apparatus and image blur correcting apparatus, and video camera including such apparatus
US5141609A (en) 1990-11-16 1992-08-25 The Trustees Of The Leland Stanford Junior University Method and device employing time-delayed integration for detecting sample components after separation
DE69227902T3 (de) 1991-04-29 2010-04-22 Massachusetts Institute Of Technology, Cambridge Vorrichtung für optische abbildung und messung
JPH04337446A (ja) 1991-05-15 1992-11-25 Hitachi Ltd 微粒子計測方法、定量方法および微粒子計測装置
US5548395A (en) 1991-09-20 1996-08-20 Toa Medical Electronics Co., Ltd. Particle analyzer
GB9218482D0 (en) 1992-09-01 1992-10-14 Dixon Arthur E Apparatus and method for scanning laser imaging of macroscopic samples
US5668887A (en) 1992-05-29 1997-09-16 Eastman Kodak Company Coating density analyzer and method using non-synchronous TDI camera
JP3327948B2 (ja) 1992-06-09 2002-09-24 オリンパス光学工業株式会社 光学像再構成装置
US5312535A (en) 1992-07-17 1994-05-17 Beckman Instruments, Inc. Capillary electrophoresis detection
US5757981A (en) * 1992-08-20 1998-05-26 Toyo Ink Mfg. Co., Ltd. Image inspection device
US6159686A (en) 1992-09-14 2000-12-12 Sri International Up-converting reporters for biological and other assays
US6026174A (en) 1992-10-14 2000-02-15 Accumed International, Inc. System and method for automatically detecting malignant cells and cells having malignancy-associated changes
US5402460A (en) 1993-08-02 1995-03-28 University Of Washington Three-dimensional microtomographic analysis system
US6215587B1 (en) 1994-02-14 2001-04-10 Robert R. Alfano Microscope imaging inside highly scattering media
WO1996009594A1 (en) 1994-09-20 1996-03-28 Neopath, Inc. Apparatus for automated identification of thick cell groupings on a biological specimen
US5550892A (en) 1995-03-24 1996-08-27 The Regents Of The University Of California Enhanced local tomography
US5710429A (en) 1995-04-06 1998-01-20 Alfano; Robert R. Ultrafast optical imaging of objects in or behind scattering media
US5582705A (en) 1995-05-19 1996-12-10 Iowa State University Research Foundation, Inc. Multiplexed capillary electrophoresis system
US6252979B1 (en) 1995-06-07 2001-06-26 Tripath Imaging, Inc. Interactive method and apparatus for sorting biological specimens
WO1997012975A1 (en) 1995-10-02 1997-04-10 The Government Of The United States Of America, Represented By The Secretary, Department Of Health And Human Services An epithelial protein and dna thereof for use in early cancer detection
FI97665C (fi) 1995-11-21 1997-01-27 Planmed Oy Menetelmät ja laitteet kohteen kuvantamisessa
US6165734A (en) 1995-12-12 2000-12-26 Applied Spectral Imaging Ltd. In-situ method of analyzing cells
FR2743462B1 (fr) 1996-01-04 1998-01-30 Commissariat Energie Atomique Dispositif de lecture de barrettes de detecteurs avec effet tdi
JPH09247545A (ja) 1996-03-11 1997-09-19 Matsushita Electric Ind Co Ltd スキャナ型電子カメラ
US6078681A (en) 1996-03-18 2000-06-20 Marine Biological Laboratory Analytical imaging system and process
US6038067A (en) 1996-05-23 2000-03-14 The Regents Of The University Of California Scanning computed confocal imager
US5915048A (en) 1996-06-05 1999-06-22 Zetetic Institute Method and apparatus for discriminating in-focus images from out-of-focus light signals from background and foreground light sources
US5880838A (en) 1996-06-05 1999-03-09 California Institute Of California System and method for optically measuring a structure
US5673300A (en) * 1996-06-11 1997-09-30 Wisconsin Alumni Research Foundation Method of registering a radiation treatment plan to a patient
US6047080A (en) 1996-06-19 2000-04-04 Arch Development Corporation Method and apparatus for three-dimensional reconstruction of coronary vessels from angiographic images
WO1998023207A1 (en) 1996-11-29 1998-06-04 Imaging Diagnostic Systems, Inc. Method for reconstructing the image of an object scanned with a laser imaging apparatus
DE19701036A1 (de) * 1997-01-15 1998-07-16 Philips Patentverwaltung MR-Verfahren zur bildgestützten Überwachung der Verschiebung eines Objektes und MR-Anordnung zur Durchführung des Verfahrens
US5760901A (en) 1997-01-28 1998-06-02 Zetetic Institute Method and apparatus for confocal interference microscopy with background amplitude reduction and compensation
US6091983A (en) 1997-02-07 2000-07-18 Alfano; Robert R. Imaging of objects in turbid media based upon the preservation of polarized luminescence emitted from contrast agents
DE19714221A1 (de) 1997-04-07 1998-10-08 Zeiss Carl Fa Konfokales Mikroskop mit einem motorischen Scanningtisch
US6522355B1 (en) * 1997-04-10 2003-02-18 Texas Instruments Incorporated Digital nonuniformity correction for image sensors
US5878103A (en) 1997-06-30 1999-03-02 Siemens Corporate Research, Inc. Adaptive detector masking for speed-up of cone beam reconstruction
US5909476A (en) 1997-09-22 1999-06-01 University Of Iowa Research Foundation Iterative process for reconstructing cone-beam tomographic images
US6388809B1 (en) 1997-10-29 2002-05-14 Digital Optical Imaging Corporation Methods and apparatus for improved depth resolution use of out-of-focus information in microscopy
WO1999026186A1 (en) 1997-11-19 1999-05-27 University Of Washington High throughput optical scanner
US6251615B1 (en) 1998-02-20 2001-06-26 Cell Analytics, Inc. Cell analysis methods
US6248988B1 (en) 1998-05-05 2001-06-19 Kla-Tencor Corporation Conventional and confocal multi-spot scanning optical microscope
US6529614B1 (en) 1998-08-05 2003-03-04 California Institute Of Technology Advanced miniature processing handware for ATR applications
US6452179B1 (en) 1998-08-14 2002-09-17 Global Technovations, Inc. On-site analyzer
US6640014B1 (en) 1999-01-22 2003-10-28 Jeffrey H. Price Automatic on-the-fly focusing for continuous image acquisition in high-resolution microscopy
US6249341B1 (en) 1999-01-25 2001-06-19 Amnis Corporation Imaging and analyzing parameters of small moving objects such as cells
US6608682B2 (en) 1999-01-25 2003-08-19 Amnis Corporation Imaging and analyzing parameters of small moving objects such as cells
US6904163B1 (en) * 1999-03-19 2005-06-07 Nippon Telegraph And Telephone Corporation Tomographic image reading method, automatic alignment method, apparatus and computer readable medium
AU6622800A (en) 1999-08-05 2001-03-05 Cellomics, Inc. A system for cell-based screening
US6239871B1 (en) 1999-08-24 2001-05-29 Waters Investments Limited Laser induced fluorescence capillary interface
US6775399B1 (en) * 1999-11-17 2004-08-10 Analogic Corporation ROI segmentation image processing system
US6549308B1 (en) * 2000-01-11 2003-04-15 Zebra Imaging, Inc. Unibiased light field models for rendering and holography
US6248341B1 (en) * 2000-01-14 2001-06-19 Color Access, Inc. Method of treating topical angiogenesis-related disorders
US6532061B2 (en) 2000-08-25 2003-03-11 Amnis Corporation Measuring the velocity of small moving objects such as cells
AU2001284373A1 (en) 2000-08-29 2002-03-13 Yeda Research And Development Co. Ltd. Methods of isolating genes encoding proteins of specific function and of screening for pharmaceutically active agents
CA2426798C (en) 2000-10-27 2012-02-21 Praelux Incorporated Method and apparatus for screening chemical compounds
US7171038B2 (en) 2000-12-15 2007-01-30 Kla-Tencor Technologies Corporation Method and apparatus for inspecting a substrate
US6591003B2 (en) 2001-03-28 2003-07-08 Visiongate, Inc. Optical tomography of small moving objects using time delay and integration imaging
US6944322B2 (en) 2001-03-28 2005-09-13 Visiongate, Inc. Optical tomography of small objects using parallel ray illumination and post-specimen optical magnification
US6519355B2 (en) 2001-03-28 2003-02-11 Alan C. Nelson Optical projection imaging system and method for automatically detecting cells having nuclear and cytoplasmic densitometric features associated with disease
GB0112392D0 (en) 2001-05-22 2001-07-11 Medical Res Council Optical imaging appartus and associated specimen support means
EP1415187A4 (en) 2001-08-06 2008-03-26 Bioview Ltd DEVELOPING IMAGES IN A FLUORESCENCE IMAGING APPARATUS
US6636623B2 (en) 2001-08-10 2003-10-21 Visiongate, Inc. Optical projection imaging system and method for automatically detecting cells with molecular marker compartmentalization associated with malignancy and disease
US6741730B2 (en) 2001-08-10 2004-05-25 Visiongate, Inc. Method and apparatus for three-dimensional imaging in the fourier domain
US7283253B2 (en) 2002-03-13 2007-10-16 Applied Precision, Llc Multi-axis integration system and method
US7738945B2 (en) 2002-04-19 2010-06-15 University Of Washington Method and apparatus for pseudo-projection formation for optical tomography
US7811825B2 (en) 2002-04-19 2010-10-12 University Of Washington System and method for processing specimens and images for optical tomography
US7197355B2 (en) 2002-04-19 2007-03-27 Visiongate, Inc. Variable-motion optical tomography of small objects
US6697508B2 (en) 2002-05-10 2004-02-24 Visiongate, Inc. Tomographic reconstruction of small objects using a priori knowledge
US6770893B2 (en) 2002-05-13 2004-08-03 Visiongate, Inc. Method and apparatus for emission computed tomography using temporal signatures
US20040008515A1 (en) 2002-06-11 2004-01-15 Applied Precision Fluorescence illumination optimization for three-dimensional microscopy
JP2006518050A (ja) 2003-02-18 2006-08-03 オクラホマ メディカル リサーチ ファウンデーション 焦点深度拡張顕微鏡法
US7408176B2 (en) 2003-06-19 2008-08-05 Applied Precision, Llc System and method employing photokinetic techniques in cell biology imaging applications

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0863597A (ja) * 1994-08-22 1996-03-08 Konica Corp 顔抽出方法
US5552605A (en) * 1994-11-18 1996-09-03 Picker International, Inc. Motion correction based on reprojection data
JP2004532405A (ja) * 2001-03-28 2004-10-21 ヴィジョンゲイト,インコーポレーテッド 光学的断層撮影法を使用して流動流中の微小対象物を画像化するための装置と方法
JP2003086919A (ja) * 2001-09-07 2003-03-20 Sun Tec Kk パターン検査装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012042348A (ja) * 2010-08-19 2012-03-01 Canon Inc 断層画像表示装置およびその制御方法
US8804127B2 (en) 2010-08-19 2014-08-12 Canon Kabushiki Kaisha Image acquisition apparatus, image acquisition system, and method of controlling the same

Also Published As

Publication number Publication date
ES2559411T3 (es) 2016-02-12
CA2570730A1 (en) 2006-02-02
EP1769423A4 (en) 2012-11-07
AU2005267569B2 (en) 2011-03-31
WO2006011945B1 (en) 2007-04-12
US20050010108A1 (en) 2005-01-13
CN101027677A (zh) 2007-08-29
EP1769423B1 (en) 2015-11-18
US7260253B2 (en) 2007-08-21
CN101027677B (zh) 2011-07-27
US7542597B2 (en) 2009-06-02
HK1104633A1 (en) 2008-01-18
WO2006011945A2 (en) 2006-02-02
EP1769423A2 (en) 2007-04-04
AU2005267569A1 (en) 2006-02-02
US20070071357A1 (en) 2007-03-29
CA2570730C (en) 2013-11-12
JP4841549B2 (ja) 2011-12-21
WO2006011945A3 (en) 2007-02-08

Similar Documents

Publication Publication Date Title
JP4841549B2 (ja) 連続するビュー間で発生する物体検出器(object−detector)の相対的な運動(motion)を補正(correction)する方法
Marshall et al. Computer vision, models and inspection
JP2008504060A5 (ja)
JP4806630B2 (ja) 多軸統合を用いて三次元対象物の光学的画像データを取得する方法
US11169367B2 (en) Three-dimensional microscopic imaging method and system
CN109643458A (zh) 用于自动化的正弦图完成、组合及通过组合完成的系统和方法
US7627153B2 (en) Repositioning inaccuracies in an automated imaging system
EP0485265A1 (fr) Dispositif et procédé de contrôle non destructif à acquisition simultanée de données radiographiques et de données tomographiques
Noto et al. In situ color-to-depth calibration: toward practical three-dimensional color particle tracking velocimetry
CN110108230B (zh) 基于图像差分与lm迭代的二值光栅投影离焦程度评估方法
JP2703380B2 (ja) 光学相関器の出力相関平面の較正システム
US7813529B1 (en) Optical 3-d surface tomography using depth from focus of partially overlapping 2-d images
Oldmixon et al. Methods for large data volumes from confocal scanning laser microscopy of lung
CN115115767A (zh) 一种场景渲染方法、装置、电子设备及存储介质
Salfelder et al. Markerless 3D spatio-temporal reconstruction of microscopic swimmers from video
Kang et al. Reference free method for robot CT imaging geometry estimation
JP4091455B2 (ja) 3次元形状計測方法及び3次元形状計測装置並びにその処理プログラムと記録媒体
Chen et al. Self recalibration of a structured light vision system from a single view
CN117314915B (zh) 微结构加工的原位检测方法、设备及存储介质
Nakini et al. Distortion correction in 3d-modeling of roots for plant phenotyping
Chu Digital image correlation method in experimental mechanics
Heinemann et al. Camera calibration and orientation for PCB jet printing inspection
US20210325653A1 (en) High sensitivity phase microscopy imaging
Koskela et al. Computational model for simulating multifocal imaging in optical projection tomography
Loo Jr Quantitative characterization of the protein contents of the exocrine pancreatic acinar cell by soft x-ray microscopy and advanced digital imaging methods

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080606

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100921

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20101221

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110214

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110513

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110520

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110811

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110912

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111004

R150 Certificate of patent or registration of utility model

Ref document number: 4841549

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141014

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees