JP2018189657A - 符号化ローカライゼーションシステム、方法および装置 - Google Patents

符号化ローカライゼーションシステム、方法および装置 Download PDF

Info

Publication number
JP2018189657A
JP2018189657A JP2018151134A JP2018151134A JP2018189657A JP 2018189657 A JP2018189657 A JP 2018189657A JP 2018151134 A JP2018151134 A JP 2018151134A JP 2018151134 A JP2018151134 A JP 2018151134A JP 2018189657 A JP2018189657 A JP 2018189657A
Authority
JP
Japan
Prior art keywords
localization
code
polarization
optical
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018151134A
Other languages
English (en)
Other versions
JP6463582B2 (ja
Inventor
ダウスキー エドワード
Dowski Edward
ダウスキー エドワード
シッソム ブラッドリー
Sissom Bradley
シッソム ブラッドリー
ジョンソン グレゴリー
Johnson Gregory
ジョンソン グレゴリー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ascentia Imaging Inc
Original Assignee
Ascentia Imaging Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ascentia Imaging Inc filed Critical Ascentia Imaging Inc
Publication of JP2018189657A publication Critical patent/JP2018189657A/ja
Application granted granted Critical
Publication of JP6463582B2 publication Critical patent/JP6463582B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/002Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/16Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42Determining position
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42Determining position
    • G01S19/48Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system
    • G01S19/485Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system whereby the further system is an optical system or imaging system
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0251Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting 3D information from a plurality of images taken from different locations, e.g. stereo vision
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/0278Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using satellite positioning signals, e.g. GPS
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42Determining position
    • G01S19/48Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

【課題】ナビゲーションのためのローカライゼーションシステムを提供すること。【解決手段】符号化ローカライゼーションシステムは、複数の検出器上に少なくとも1つのオブジェクトを協調的に結像するように配列される複数の光学チャネルを含む。チャネルのそれぞれは、それを通過する電磁エネルギーを修正するように、他のチャネル内の任意の他のローカライゼーションコードとは異なるローカライゼーションコードを含む。オブジェクトの位置が、検出器の幾何学形状のみによって判定されるよりも正確に判定されるように、検出器からの出力デジタル画像は、検出器上のオブジェクトのサブピクセルローカライゼーションを判定するように処理可能である。別の符号化ローカライゼーションシステムは、複数のピクセル上に部分的偏光データを協調的に結像するように配列される複数の光学チャネルを含む。【選択図】図2

Description

(関連出願への相互参照)
本出願は、2012年1月3日に出願された、「ANGULAR CODING FOR 3D OBJECT LOCALIZATION」という題名の米国仮出願第61/631,389号、2012年2月29日に出願された、「ANGULAR CODING FOR 3D OBJECT LOCALIZATION」という題名の米国仮出願第61/634,421号、2012年3月8日に出願された、「SYSTEMS AND METHODS FOR MOTILITY AND MOTION OBSERVATION AND DISCRIMINATION」という題名の米国仮出願第61/634,936号、2012年3月23日に出願された、「ANGULAR CODING FOR 3D OBJECT LOCALIZATION」という題名の米国仮出願第61/685,866号、2012年4月11日に出願された、「ANGULAR CODING FOR 3D OBJECT LOCALIZATION」という題名の米国仮出願第61/686,728号、2012年5月3日に出願された、「ANGULAR CODING FOR 3D OBJECT LOCALIZATION」という題名の米国仮出願第61/687,885号、2012年6月5日に出願された、「ANGULAR CODING FOR 3D OBJECT LOCALIZATION AND MOTION DETECTION」という題名の米国仮出願第61/655,740号、2012年7月18日に出願された、「ANGULAR CODING FOR
3D OBJECT LOCALIZATION」という題名の米国仮出願第61/673,098号、2012年8月23日に出願された、「ANGULAR CODING
FOR 3D OBJECT LOCALIZATION」という題名の米国仮出願第61/692,540号、2012年10月31日に出願された、「POLARIZATION CODING」という題名の米国仮出願第61/720,550号、および、2012年11月21日に出願された、「POLARIZATION CODING」という題名の米国仮出願第61/729,045号に対して優先権を主張する。上記の識別された特許出願の全ては、その全体として参照することによって本願明細書において援用される。
(米国政府の権利)
本発明は、米国陸軍のUCSD PO # 10320848により付与された規約番号W911NF−11−C−0210のもとの米国政府支援によってなされた。政府は、本発明に特定の権利を有する。
(背景)
オブジェクトの3D位置および配向を推定および検出することは、古典的な課題である。多数の従来技術のシステムには、達成可能なサイズ、重量、および電力、オブジェクト3Dローカライゼーションおよび配向の費用および精度に悪影響を及ぼす問題がある。
3Dローカライゼーションを行う、図1(上側の図面)に示される従来技術の光学デジタル結像システムに関する基本的な問題は、分解能画像感知ピクセルの空間的密度に関係することであり、具体的には、固定システム幾何学形状を伴うピクセルが、より高い精度を制限する。一般的な従来技術の結像システムでは、レンズがその最大直径にあるとき、特定のサイズのピクセルに対してレンズの後ろで形成される画像サイズは、最大値であり、別の言い方をすれば、画像面における空間帯域幅積(SBP)は、最大値である。より小さい直径のレンズを用いるが、一定の周辺光線角またはF/#を用いると、より小さい画像が捕捉され、システムのSBPが低減される。しかし、レンズ直径が減少するにつれて、画像サイズが非常に小さくなるため、一般的な場面にとって、全てのオブジェクト情報が十分な詳細で捕捉されない。
同様に、図1(上側の図面)に示されるような従来技術の測定システムでは、センサ間の基線Bが、SPB、したがって、システム100内のオブジェクト105のx、y、z値を推定する精度を判定する。それぞれ、焦点距離faおよびfbを伴う光学部110aおよび110bは、それぞれのセンサ120aおよび120b上の光軸から、それぞれ、距離yaおよびybを置いて、オブジェクト105の画像を形成する。距離yaおよびybの推定値は、y位置を判定し、fa/yaおよびfb/ybの比は、範囲を判定し、したがって、センサ120aおよび120bにおけるより高密度のサンプリングは、推定の精度を増加させるが、より大きいサイズ、重量、および電力を犠牲にする。
図1の上側の図面に示される立体結像システムの2つの要素のように、従来技術のレーダシステム(図1の下側の図面参照)もまた、3D空間内のオブジェクトを検出するために検出器のアレイを使用する。レーダシステムは、未知の雑音および騒音の存在下で3D空間内の標的を検出/限局/拒絶等するために、多要素アンテナアレイの各要素にわたって符号化する。アンテナ要素の数は、SNRを通すことを除いて、潜在的な角度推定正確性を理論的に制限しない。
図1のレーダシステム(下側の図面)と図1の光学システム(上側の図面)との間の主な差異は、アンテナ102a、102bから102nを用いて、典型的なレーダ波長を時間的に一貫してサンプリングできるという事実に関係する。レーダシステムでは、アンテナ要素は、各要素からの電磁場パターンが重複するように配列される。数学的重量104a、104bから104nは、アレイ要素またはチャネルにわたって適用され、次いで、二乗出力信号107を判定するように合計される106。フーリエ係数等の重量は、決定的であり得るか、または自己回帰(AR)モデリングで使用される等、サンプリングされたデータの関数であり得、信号振幅およびオブジェクト角の両方を表すことができる、図1の複合単位円108上の表現を有することができる。
(発明の概要)
各要素またはチャネルからの電磁場パターンが重複するように、要素の光学アレイがレーダシステムとより同様に配列される、従来技術のローカライゼーション結像システムの制限が、本明細書で開示されるように改良される。数学的重量もまた、本明細書の以下で説明される符号化ローカライゼーション光学部または特殊符号化ローカライゼーションセンサの実施形態を通して、アレイにわたって適用されてもよい。復号は、所望される情報を提供し、光学結合システムが、従来のインコヒーレント立体様結像システム(図1)よりも性能、サイズ、重量、および電力が優れた様式でローカライゼーションタスクを行うことを可能にする。上記の従来技術で識別される問題とは対照的に、本明細書の以下で開示される符号化ローカライゼーションシステムを用いると、空間および角分解能は、実際の画像ピクセルの空間分解能によってではなく、信号対雑音比によって判定可能である。分解能およびピクセル密度またはサンプリングを分断することにより、サイズ、重量、費用、および電力を削減し、その上、ローカライゼーション、配向、および画像形成を行う、光学システムを提供する。
実施形態では、符号化ローカライゼーションシステムは、ローカライゼーション精度が、光学部、コード、およびセンサのうちの少なくとも2つの共同設計に関係する、光学部、コード、センサ、およびプロセッサを含んでもよい。
実施形態では、符号化ローカライゼーションシステムは、各サンプルが一意的なコードで符号化される、遠隔オブジェクトのN個のサンプルを形成する。
実施形態では、符号化ローカライゼーションシステムは、同一の遠隔オブジェクトをサンプリングするチャネル間の相互情報が符号化しないことと比較して削減されるように設計される。
実施形態では、チャネルは、画像、開口、波長、偏光、および視野のうちの少なくとも1つから成る。
実施形態では、複数の測定値が正弦関数を採用する、符号化ローカライゼーションシステムである。
実施形態では、不偏コードが合計してゼロになる、符号化ローカライゼーションシステムである。
実施形態では、N個の測定値が空間的位置の関数として測定ベクトルを形成する、符号化ローカライゼーションシステムである。
実施形態では、N個の測定値が空間的位置の関数として規模および位相を伴って測定ベクトルを形成する、符号化ローカライゼーションシステムである。
実施形態では、不偏コードが直交セットを形成する、符号化ローカライゼーションシステムである。
実施形態では、結像システムのサンプリングされたPSFが空間変異型である、符号化ローカライゼーションシステムである。
実施形態では、測定されたサンプルが航空画像のサブピクセル変化の関数として変化する、符号化ローカライゼーションシステムである。
実施形態では、測定ベクトルが、オブジェクトならびに配向および/また配置を検出するように記憶または推定されたオブジェクトベクトルと比較される、符号化ローカライゼーションシステムである。
実施形態では、測定ベクトルが、オブジェクトパラメータを推定するためにオブジェクトの数学的モデルとともに使用される、符号化ローカライゼーションシステムである。
実施形態では、測定が、空間、時間、スペクトル、および/または偏光領域のうちの少なくとも1つで行われる、符号化ローカライゼーションシステムである。
実施形態では、測定が、空間、時間、スペクトル、および/または偏光領域のうちの少なくとも2つで行われる、符号化ローカライゼーションシステムである。
実施形態では、遠隔オブジェクトの複数の測定が、時間、スペクトル、空間、および偏光領域の少なくとも1つの領域で同時に行われる、符号化ローカライゼーションシステムである。
実施形態では、遠隔オブジェクトの複数の測定が、時間、スペクトル、空間、および偏光領域の少なくとも2つの領域で同時に行われる、符号化ローカライゼーションシステムである。
実施形態では、測定が可視波長で行われる、符号化ローカライゼーションシステムである。
実施形態では、測定がIR波長で行われる、符号化ローカライゼーションシステムである。
実施形態では、N個の測定値が不偏であるように構成される、符号化ローカライゼーションシステムである。
実施形態では、雑音がない場合にN個の測定値の二乗の合計が一定であるように、N個の測定値が設計される、符号化ローカライゼーションシステムである。
実施形態では、空間的ローカライゼーションにおける不確実性が検出器ピクセルの面積より小さい、符号化ローカライゼーションシステムである。
実施形態では、光学部が、FOVおよびローカライゼーションの不確実性と比較して必要とされるメモリ記憶を低減させる、符号化ローカライゼーションシステムである。
実施形態では、光学部およびデータ依存性信号処理が、古典的な結像システムと比較して、貯蔵されるデータの量を削減する、符号化ローカライゼーションシステムである。
実施形態では、複数のシステムが配向および3Dローカライゼーションのうちの少なくとも1つに使用される、符号化ローカライゼーションシステムである。
実施形態では、複数のシステムが配向および3D位置のうちの少なくとも1つの変化を推定するために使用される、符号化ローカライゼーションシステムである。
実施形態では、配向および位置の推定または検出された変化がピクセル間隔より細かい、符号化ローカライゼーションシステムである。
実施形態では、相補的測定ベクトルが配向および3D位置のうちの少なくとも1つの変化を推定するために使用される、符号化ローカライゼーションシステムである。
実施形態では、符号化ローカライゼーションシステムは、検出器ピクセルの空間周波数限界を超えるフーリエ成分を表す測定ベクトルを提供する。
実施形態では、単一ピクセルセンサおよび複数の測定値が、空間的に変位したシステムを通して形成される、符号化ローカライゼーションシステムである。
実施形態では、単一ピクセルセンサおよび複数の測定値が、時間的に変位したシステムを通して形成される、符号化ローカライゼーションシステムである。
実施形態では、符号化が空間的および時間的の両方である、符号化ローカライゼーションシステムである。
実施形態では、相補的チャネルが全体的な光学システムの長さを短縮するために選択される、符号化ローカライゼーションシステムである。
実施形態では、符号化ローカライゼーションシステムは、測定値の総数に対応する分解能で最終画像を形成するように、デジタル処理で組み合わせられる相補的測定値を提供する。
実施形態では、検出器ピクセル間隔と比較して高い精度で、長距離写真点測定を行うための方法および装置が提供される。
実施形態では、コンテキスト依存性データ削減および記憶のための方法および装置が提供される。
実施形態では、ピクセルの数と比較して高い精度での相対的オブジェクト位置推定のための方法および装置が提供される。
実施形態では、絶対配向推定のための方法および装置が提供される。
実施形態では、絶対3D位置推定のための方法および装置が提供される。
実施形態では、既知の点から新しい点への位置および配向参照情報のうちの少なくとも1つの移送のための方法および装置が提供される。
実施形態では、高速道路情報のデータ収集およびデータ削減のための方法および装置が提供される。
実施形態では、機械制御用の配向および3D位置推定のための方法および装置が提供される。
実施形態では、改良が、位置付けのための配向および3D位置推定に提供される。
実施形態では、屋内用途のために配向および3D位置推定のうちの少なくとも1つを行うための方法および装置が提供される。
実施形態では、信頼性がないGPS受信範囲を伴う用途のために配向および3D位置推定のうちの少なくとも1つを行うための方法および装置が提供される。
実施形態では、モデル構築プロセスへの入力のために遠隔オブジェクト配向および3D位置推定のうちの少なくとも1つを行うための方法および装置が提供される。
実施形態では、2つのピクセルセンサについて、オブジェクトまでの角度の尺度が、視野内のオブジェクトの数を数えるために使用される。
実施形態では、2つのピクセルセンサについて、複数のセンサからの角度の尺度が、複合視野内のオブジェクトの数を数えるために使用される。
実施形態では、各チャネルを異なって符号化することによって、情報の1つより多くの従来技術のピクセルを捕捉することができる。
実施形態では、範囲の関数として各チャネルを符号化することによって、非無限にオブジェクトについて集束を達成することができる。
実施形態では、範囲の関数として各チャネルを符号化することによって、拡張被写界画像深度を達成することができる。
実施形態では、範囲の関数として各チャネルを符号化することによって、画像内の点の範囲の推定値を達成することができる。
実施形態では、光学運動ユニットが、ナビゲーションのためのデッドレコニングを提供する。
実施形態では、符号化ローカライゼーションシステムは、複数の検出器上に少なくとも1つのオブジェクトを協調的に結像するように配列される複数の光学チャネルを含む。光学チャネルのそれぞれは、それを通過する電磁エネルギーを光学的に修正するローカライゼーションコードを含み、各ローカライゼーションコードは、他の光学チャネル内の任意の他のローカライゼーションコードとは異なる。検出器からの出力デジタル画像は、オブジェクトの位置が、検出器の幾何学形状のみによって判定されるよりも正確に判定されるように、該検出器上の該オブジェクトのサブピクセルローカライゼーションを判定するよう処理可能である。
実施形態では、符号化ローカライゼーションシステムは、複数のピクセル上に部分的偏光データを協調的に結像するように配列される複数の光学チャネルを含む。光学チャネルのそれぞれは、それを通過する電磁エネルギーを一意的に偏光する偏光コードを含み、各偏光コードは、他の光学チャネル内の任意の他の偏光コードとは異なる。検出器からの出力されたデジタル画像は、システムのユーザのための偏光パターンを判定するように処理可能である。
実施形態では、符号化ローカライゼーションシステムは、複数のピクセル上に移動場面を協調的に結像するように配列される複数の光学チャネルを含む。光学チャネルのそれぞれは、場面の運動においてその2次元変化を一意的に判定する。剛体モデルが、位置および配向の全体的変化を物理的運動に制約するように、チャネルからの出力を連結する。処理サブシステムが、各チャネルからのデータを全体的運動ベクトルに分解する。
実施形態では、符号化ローカライゼーションシステムは、複数の符号化ローカライゼーションチャネルを含み、本システムは、ローカライゼーションコードを伴わない光学システムより多くのフィッシャー情報を有する。
実施形態では、光学データを限局する方法は、各光学チャネルへのローカライゼーションコードを一意的に実装しながら、複数の検出器上に少なくとも1つのオブジェクトを協調的に結像するステップと、オブジェクトの位置が、検出器の幾何学形状のみによって判定されるよりも正確に判定されるように、該検出器上の該オブジェクトのサブピクセルローカライゼーションを判定するように検出器からの出力デジタル画像を処理するステップとを含む。
本明細書は、例えば、以下の項目も提供する。
(項目1)
符号化ローカライゼーションシステムであって、
前記システムは、複数の検出器上に少なくとも1つのオブジェクトを協調的に結像するように配列された複数の光学チャネルを備え、
前記検出器からの出力デジタル画像が、前記検出器上の前記オブジェクトのサブピクセルローカライゼーションを判定するよう処理可能であるように、および前記オブジェクトの位置が、検出器の幾何学形状のみによって判定されるよりも正確に判定されるように、前記光学チャネルのそれぞれは、各光学チャネルを通過する電磁エネルギーを光学的に修正するローカライゼーションコードを有し、各ローカライゼーションコードは、他の光学チャネル内の任意の他のローカライゼーションコードとは異なる、システム。
(項目2)
前記ローカライゼーションコードは、前記画像または前記オブジェクトの空間的位置の関数として変化し、強度スクリーン、波長、位相スクリーン、マスク、開口パターン、および偏光感受性材料のうちの1つから成る、項目1に記載のシステム。
(項目3)
前記ローカライゼーションコードは、周波数空間を占有する強度コード構造を備え、前記周波数空間は、オブジェクト周波数スペクトルに対応し、ピクセルの周期性以上である周期性を有する、項目1に記載のシステム。
(項目4)
前記強度コード構造は、ナイキストより大きい空間周波数をサンプリングする、項目3に記載のシステム。
(項目5)
強度コード構造サンプリングは、ナイキストより2倍大きいまたは3倍大きいのうちの少なくとも1つである、項目4に記載のシステム。
(項目6)
前記ローカライゼーションコードのための2Dコードの合計は、定数である、項目1に記載のシステム。
(項目7)
前記チャネルのうちの1つには、ローカライゼーションコードがなく、全検出器における電磁エネルギーの平均値を測定する、項目1に記載のシステム。
(項目8)
複数のアルゴリズムを有する処理サブシステムをさらに備え、前記処理サブシステムは、前記デジタル画像を処理し、前記オブジェクトのローカライゼーション情報を提供するように構成されている、項目1に記載のシステム。
(項目9)
前記処理は、測定されたオブジェクトデータの差の合計を含む、項目8に記載のシステム。
(項目10)
前記検出器の空間周波数限界を超える画像を再構築するように、前記測定されたオブジェクトデータを処理することをさらに含む、項目9に記載のシステム。
(項目11)
前記処理は、前記測定されたオブジェクトデータへの範囲推定値を生じる、項目9に記載のシステム。
(項目12)
前記処理は、空間的に変化する、項目8に記載のシステム。
(項目13)
第2の複数の検出器上に少なくとも前記オブジェクトを協調的に結像するように配列された複数の第2の光学チャネルをさらに備え、
前記第2の検出器からの出力第2のデジタル画像が、前記検出器上の前記オブジェクトのサブピクセルローカライゼーションを判定するよう処理可能であるように、および前記オブジェクトの位置が、第2の検出器の幾何学形状のみによって判定されるよりも正確に判定され、前記第1および第2のデジタル画像からのデータが、前記オブジェクトへの範囲を判定するよう処理可能であるように、前記第2の光学チャネルのそれぞれは、各光学チャネルを通過する電磁エネルギーを光学的に修正するローカライゼーションコードを有し、各ローカライゼーションコードは、他の全ての光学チャネル内の任意の他のローカライゼーションコードとは異なる、項目1に記載のシステム。
(項目14)
前記複数のチャネルは、検出器の単一のアレイに搭載されている、項目1に記載のシステム。
(項目15)
符号化ローカライゼーション偏光測定システムであって、
前記偏光測定システムは、複数のピクセル上に部分的偏光データを協調的に結像するように配列された複数の光学チャネルを備え、
前記検出器からの出力デジタル画像が、前記システムのユーザに対して偏光パターンを判定するよう処理可能であるように、前記光学チャネルのそれぞれは、各光学チャネルを通過する電磁エネルギーを一意的に偏光する偏光コードを有し、各偏光コードは、他の光学チャネル内の任意の他の偏光コードとは異なる、偏光測定システム。
(項目16)
前記部分偏光データは、空を含み、前記出力デジタル画像は、前記空の偏光パターンをサンプリングする、項目15に記載の偏光測定システム。
(項目17)
複数のアルゴリズムを有する処理サブシステムをさらに備え、前記処理サブシステムは、前記デジタル画像を処理し、コンパス向首方向を提供するように構成されている、項目15に記載の偏光測定システム。
(項目18)
前記処理サブシステムは、データがモデルに合致するかどうかを検出する、項目17に記載の偏光測定システム。
(項目19)
前記処理サブシステムは、フーリエ処理および目的とする正弦を伴う内積のうちの少なくとも1つを含む、項目17に記載の偏光測定システム。
(項目20)
前記処理サブシステムは、信号バイアスを最小限化し、信号振幅を最大限化するように露出を調整する、項目17に記載の偏光測定システム。
(項目21)
前記処理サブシステムは、部分偏光SNRを最大限化するように露出を調整する、項目17に記載の偏光測定システム。
(項目22)
前記処理サブシステムは、空間的に変化する様式で前記デジタル画像を処理する、項目17に記載の偏光測定システム。
(項目23)
前記コンパス向首方向は、(a)向首方向を安定させるようにフィードバックとして車両で使用可能であり、(b)向首方向を判定するように局所磁場に影響を及ぼす重機で使用可能である、項目17に記載の偏光測定システム。
(項目24)
前記処理サブシステムは、移動オブジェクトの検出を可能にするように、複数の偏光を時間的にサンプリングし、前記時間的にサンプリングすることなしに、前記移動オブジェクトの検出は、コントラストがほとんどまたは全くない、項目15に記載の偏光測定システム。
(項目25)
符号化ローカライゼーションナビゲーションシステムであって、前記システムは、
複数のピクセル上に移動場面を協調的に結像するように配列された複数の光学チャネルであって、前記光学チャネルのそれぞれは、前記場面の運動において2次元変化を一意的に判定する、複数の光学チャネルと、
位置および配向の全体的変化を物理的運動に制約するように前記チャネルからの出力を連結する剛体モデルと、
各チャネルからのデータを全体的運動ベクトルに分解するための処理サブシステムと
を備える、システム。
(項目26)
前記光学チャネルは、指し示す方向、角度、配向、倍率、および時間のうちの少なくとも1つにおいて非平行測定値を提供する、項目25に記載のシステム。
(項目27)
前記光学チャネルは、部分的に重複する光学視野を有するように配列されている、項目25に記載のシステム。
(項目28)
前記光学チャネルは、重複を伴わない接線光学視野を有するように配列されている、項目25に記載のシステム。
(項目29)
前記処理サブシステムは、範囲推定値を生成するように、少なくとも2つのチャネルからの変位推定値を比較する、項目25に記載のシステム。
(項目30)
前記範囲推定値は、重力および慣性ベースの慣性ナビゲーションシステムに取って代わるように車両で使用可能である、項目29に記載のシステム。
(項目31)
複数の符号化ローカライゼーションチャネルを備える符号化ローカライゼーションシステムであって、前記システムは、ローカライゼーションコードを伴わない光学システムより多くのフィッシャー情報を有する、符号化ローカライゼーションシステム。
(項目32)
光学データを限局する方法であって、前記方法は、
各光学チャネルにローカライゼーションコードを一意的に実装しながら、複数の検出器上に少なくとも1つのオブジェクトを協調的に結像することと、
前記オブジェクトの位置が、検出器の幾何学形状のみによって判定されるよりも正確に判定されるように、前記検出器上の前記オブジェクトのサブピクセルローカライゼーションを判定するように前記検出器からの出力デジタル画像を処理することと
を含む、方法。
(項目33)
偏光ローカライゼーションの方法であって、前記方法は、
各光学チャネルにローカライゼーションコードを一意的に実装しながら、複数の検出器上に部分的偏光データを協調的に結像することと、
前記システムのユーザに対して偏光パターンを判定するように、前記検出器からのデジタル画像を処理することと
を含む、方法。
(項目34)
協調的に結像することは、空を結像することを含み、前記デジタル画像の処理は、前記空の偏光パターンを判定することを含む、項目33に記載の方法。
(項目35)
車両を制御するための方法であって、前記方法は、
前記車両の現在の向首方向を判定するために符号化ローカライゼーションシステムを利用することと、
前記車両の現在の位置を判定するために全地球測位システム(GPS)を利用することと、
前記車両の前記現在の位置を所望の目的地と比較することによって、前記車両の所望の向首方向を判定することと、
前記現在の向首方向から前記所望の向首方向へ前記車両の前記向首方向を調整することと
を含む、方法。
(項目36)
前記符号化ローカライゼーションシステムを利用することは、前記車両を参照して既知のオブジェクトの位置を識別するために前記符号化ローカライゼーションシステムを利用することを含む、項目35に記載の方法。
(項目37)
前記符号化ローカライゼーションシステムを利用することは、空の偏光を識別するために前記符号化ローカライゼーションシステムを利用することを含む、項目36に記載の方法。
図1の上側の図面は、従来技術の光学位置推定システムの実施例である一方で、図1の下側の図面は、例示的なレーダベースの従来技術のローカライゼーションシステムである。 図2の上側の図面は、位置推定のための1つの符号化ローカライゼーションシステムの実施形態を示す一方で、図2の下側の図面は、レーダ類似性を提供する。 図3は、別の実施形態による、符号化ローカライゼーションシステム、ならびに感知および処理方法の実施形態を示す。 図4は、別の実施形態による、符号化ローカライゼーションシステム、ならびに未知の媒体を伴う感知および処理方法の実施形態を示す。 図5は、1つの2ピクセル双極符号化ローカライゼーションシステムの実施形態を示す。 図6は、重複視野を伴って検出器上に結像するための1つの符号化ローカライゼーションシステムの実施形態を示す。 図7は単一ピクセル検出器を使用した符号化ローカライゼーションシステムの実施形態である。 図8は、先験的情報を使用した符号化ローカライゼーションシステムの実施形態である。 図9は、運動性および運動観察および区別のための符号化ローカライゼーションシステムの実施形態である。 図10は、オブジェクト位置についてのフィッシャー情報を増加させる、3チャネル線形結合符号化ローカライゼーションシステムのグラフを示す。 図11は、一式の符号化ピクセル上に1D線のサブピクセル結像を行う、符号化ローカライゼーションシステムのためのコードのグラフを示す。 図12は、サブピクセルエッジに応答する位相正弦符号化ローカライゼーションシステムのためのコードを図示する。 図13は、重複視野を伴う符号化ローカライゼーション運動性および運動観察および区別システムの実施形態である。 図14は、直線偏光子の2パイ対称性を伴う8偏光ステップ、またはパイ/4位相ステップ、またはパイ/8実回転ステップを示す、符号化ローカライゼーションシステムの実施形態である。 図15は、サンプルを積み重ね、スペクトル分解を行うことを含む、本発明の実施形態である。 図16は、サンプルを積み重ね、スペクトル分解を行うことを含む、本発明の実施形態である。 図17は、振幅およびバイアスが露出を増加させるために最適化される、本発明の実施形態である。 図18は、双極2検出器運動センサシステムの視野にわたって適用することができる、ローカライゼーションコードの実施形態である。 図19は、オブジェクト角およびオブジェクト運動からの角速度に加えて、オブジェクト範囲および速度を推定するために、少なくとも2つの符号化ローカライゼーションシステムを使用することができる、実施形態を図示する。 図20は、運動性および運動観察および区別のための符号化ローカライゼーションシステムの実施形態である。 図21は、運動性および運動観察および区別のための本発明の実施形態を図示する。 図22は、符号化ローカライゼーションシステムのサンプリング多様性を伴う本発明の実施形態である。 図23は、重複FOV2×2システムを使用して画像を形成する、符号化ローカライゼーションシステムの実施形態を図示する。 図24は、一般化された符号化ローカライゼーションシステムのための設計方法の実施形態である。 図25は、最適化された2ピクセルシステムの実施形態である。 図26は、本発明の実施形態であり、狭域FOVおよび広域FOVローカライゼーションの両方を可能にするコードの構造を説明する。 図27は、オブジェクト位置についてのフィッシャー情報を増加させる、4チャネル線形結合システムの一実施形態である。 図28は、エッジ方向推定を説明する、本発明の実施形態である。 図29は、ピクセルの重量および数のための設計空間を最適化するための本発明の実施形態である。 図30は、設計方法およびトレード空間の実施形態である。 図31は、測定用途を開示する本発明の実施形態である。 図32は、測定用途を開示する本発明の実施形態である。 図33は、測定用途を開示する本発明の実施形態である。 図34は、符号化ローカライゼーションシステムを使用した測定および制御を開示する、本発明の実施形態である。 図35は、符号化ローカライゼーションシステムを使用した測定および記録を開示する、本発明の実施形態である。 図36は、人間の視認者のための情報を追加するための符号化結像チャネルの使用を示す。 図37は、信号の検出、認識、または推定を促進するための時間、空間、および偏光の混合を示す。 図38は、符号化ローカライゼーションシステムに連結された高分解能結像システムを描写する。 図39は、符号化設計を利用した偏光スカイコンパスのためのデバイスの実施形態を示す。 図40は、符号化設計を利用した偏光スカイコンパスのためのデバイスの別の実施形態を示す。 図41は、ミリラジアン推定精度、小型サイズ、および低費用を有する、高速ローカライゼーションシステムを説明する。 図42は、符号化設計および処理システムを使用した結像のためのデバイスの好ましい実施形態を示す。 図43は、符号化設計および処理システムを使用した結像のためのデバイスの好ましい実施形態を示す。 図44は、単一ピクセル群を使用した測距を開示する、本発明の実施形態である。 図45は、範囲の関数としての集束およびコードを図示する。 図46は、デッドレコニングのためのナビゲーションシステムの実施形態である。 図47は、実施形態における偏光コンパスを図示する。 図48は、実施形態における光学運動および運動性を図示する。 図49は、図39−43の結像システムの詳細を図示する。 図50は、実施形態における全てのチャネルのための検出器要素として単一のセンサを使用した、2×2および3×3システムを図示する。
(実施形態の詳細な説明)
以下の開示は、最初に、一般的主題、次いで、設計方法、最終的に、具体的用途およびデバイスを提示するように、組織化されている。光学的符号化およびデータベクトル形成の物理的レイアウトを含む、種々の実施形態の基礎にある、システム概念および数学が、図2−4に示されている。コードを多重ピクセルおよび単一ピクセルシステムに適用するための実施例が、図5−9に示されている。フィッシャー情報に基づいて特定のコードを設計するための枠組みが、図10−12に開示され、タスク要件のために特定のコードを選択するための方法論を提供する。図2−12を完全に読んで理解することにより、具体的なデバイスが開発され得る。そのようなデバイスは、同時にいくつかのシステム実施形態の特徴を具現化することができ、実施例が提供されている。コードが偏光分析器角度である、データ処理の実施例が、図13−17に示されている。移動オブジェクトの位置を検出する、例示的な2ピクセル検出器が、図18−20で提供され、このアプローチは、運動および配向を検出するように、図20−22の多重開口多重ピクセルシステムまで拡張される。本明細書の以下で開示される符号化システムはまた、最初に図23に開示され、図24−30の以降の用途に再び示されるように、最大分解能画像を形成する。クロストークおよびSNR考慮を含む設計の方法を伴う、より多くの開口を用いたより複雑なコードおよびタスクが、図24−30に表されている。プロファイル測定およびローカライゼーションタスクを行う使用可能なデバイスの用途が、図31−41で提供されている。これらの用途で使用され得るデバイスに関するさらなる詳細が、コード、タスク要件、処理アルゴリズム、および数値的結果を含む、例示的な設計パラメータとともに、図42−50に含まれる。
上述のように、符号化ローカライゼーションシステムが本明細書の以下で開示される。そのような結像システムは、相対および絶対位置および配向情報を測定するため、ならびに短縮したシステム長を伴う画像形成のために有用である。符号化ローカライゼーションシステムを形成するように適用される符号化は、タスク依存性であり、手元の検出および推定タスクに従って情報捕捉のために最適化され得る。受動赤外線検出ならびに偏光検出および推定のための符号化ローカライゼーションシステムおよびアルゴリズムもまた、本明細書で開示される。符号化ローカライゼーション結像および測定システムにおいてサイズ、重量、および電力を削減する技法もまた、開示される。
本開示では、「コード」または「符号化」は、1つ以上のオブジェクトから発散する電磁エネルギーの性質、または局在的レベルでそのような性質を検出するデバイスのいずれか一方であり得る。したがって、「符号化ローカライゼーションシステム」は、「コード」に敏感な検出器によって取得される複数の画像を利用し、コード特有の情報を画像のそれぞれに帰属させることができるシステムである。コード特有の情報は、順に、符号化がないと利用可能にならないであろう、複数の画像から情報(例えば、場面内の1つ以上のオブジェクトの位置等)を抽出するために利用することができる。
ある結像領域中で、関連オブジェクト情報の量は、システムSBPと比較して、非常に少なく、または低密度になり得る。遠赤外線結像システムでは、ある温度を伴うオブジェクトのみが、センサについての情報を形成することができる。場合によっては、少数の温暖オブジェクトのみが、場面内に存在するであろう。別の実施例では、ある色であるオブジェクト、例えば、道路標識のみが、場面内にあってもよく、かつ捕捉および推定される所望の情報であってもよい。色による光学またはデジタルフィルタリングのいずれか一方を用いると、平均場面が低密度になり得る。別の実施例では、オブジェクトのエッジは、目的とする情報であってもよい。多くの人為的場面では、オブジェクトエッジの数量および配向を低密度と見なすことができる。偏光および時間的に短い領域も、低密度と見なすことができる。オブジェクトの3D位置および配向を推定および検出する、いくつかのシステムは、偏光領域中の信号の符号化および復号を伴う。本明細書で開示される符号化ローカライゼーションシステムを用いると、特殊感知、復号、および処理が、遠隔オブジェクトまたは特徴を限局する能力を増加させ、「それはどこにあるか」または「私はどこにいるか」という質問へのロバストな回答を可能にするために、空間、スペクトル、および偏光領域内で使用されてもよい。
特定の種類のオブジェクト場面を低密度であると見なすことができるとき、オブジェクトの位置を正確に推定するために、最大数未満の画像ピクセルが必要とされる。別の言い方をすると、オブジェクトの位置を正確に推定するために、低減したSBPを伴うシステムを使用することができる。より小型のセンサおよび符号化ローカライゼーションを使用することもまた、寸法的により小型のシステムをもたらす。システムの3D推定精度または情報捕捉能力がピクセルの密度の関数ではないとき、次いで、何らかの領域中の場面の低密度を活用することにより、より小型のセンサ、より少ない電力、およびより費用が少ない全体的なシステムに直接つながる。例えば、SWaP(サイズ、重量、および電力)が削減される。場合によっては、3D位置推定の精度は、多数のピクセルがローカライゼーション符号化を採用しないシステムで使用されるときでさえ、ローカライゼーション符号化を用いると、用いないより高くあり得る。
図2の上側の図面は、システム200として示される本発明の実施形態である。この実施形態では、それぞれ、焦点距離faおよびfbを伴う光学部210aおよび210bは、それぞれのセンサ120aおよび120b上の光軸から、それぞれ、距離yaおよびybを置いて、オブジェクト205の符号化画像を形成する。距離yaおよびybの推定値は、y位置を部分的にのみ判定し、fa/yaおよびfb/ybの比は、範囲を部分的にのみ判定する。この実施形態では、チャネルは、コード230aおよび240a、ならびに230bおよび240bで符号化され、センサ220aおよび220bにおいて形成される符号化画像は、オブジェクト205のy位置および範囲またはz位置をさらに判定するように復号される。そのようなコードは、例えば、二値または実値強度または位相スクリーン、マスク、および開口のためのものであり、コードは、画像または開口内の空間的位置の関数として変化する。コードはまた、偏光感受性および選択性材料を含んでもよい。1つの例証的実施形態では、コードは、オブジェクトとセンサとの間、例えば、オブジェクトと対物レンズとの間、開口とセンサとの間の光路位置に置かれ、または本システムの全体を通して分配される。
符号化ローカライゼーションシステムの目標は、検出およびローカライゼーション推定を最適化するために1つより多くの開口にわたる特殊光学システムの符号化、本システムの情報容量を増加させること、およびシステムサイズを縮小することを含む。そのようなシステムはまた、3Dシステム幾何学形状の能力に低感受性かつ環境システム公差に低感受性になる。これらのシステムは、システムが幾何学的および動的に変化しているときでさえも、空間的に一貫した3D推定を可能にする。これらのシステムは、ローカライゼーション精度が、光学部、コード、およびセンサのうちの少なくとも2つの共同設計に関係する、光学部、コード、センサ、およびプロセッサを含んでもよい。ローカライゼーション精度は、ピクセルの数ではなく、システムSNRに依存している。
複合重量、積算演算子、および処理の位置を変化させることによって、レーダシステム類似性を光学システムとして再描画することができ、図2の下側の図面に示されている。レーダ(図2の下側の図面)と光学部(図2の上側の図面)との間の主な差異は、典型的なレーダ波長は、時間的に一貫してサンプリングできるが、光学波長は、まだ時間的に一貫してサンプリングできないという事実に関係する。波長は、検出器207a、207bから207nによって空間的に一貫してサンプリングされる。そして、レーダシステムでは、アンテナ要素は、各要素からの電磁場パターンが重複するように配列される。本開示によると、要素の光学アレイは、各要素またはチャネルからの電磁場パターンが重複するように同様に配列することができる。数学的重量202a、202bから202nは、種々の符号化ローカライゼーション光学部または特殊符号化ローカライゼーションセンサを通して、アレイにわたって適用することができる。センサ207aから207nは、時間的に一貫しないサンプラーであり、電磁エネルギーの振幅二乗推定値を形成する。次いで、これらのサンプルは、遠隔オブジェクトに関係するパラメータを推定または検出するように、プロセス206で復号される。フーリエ係数等の数学的重量202a、202bから202nは、決定的であり得るか、または自己回帰(AR)モデリングで使用される等、サンプリングされたデータの関数であり得、信号振幅およびオブジェクト角が表示される、複合単位円208上の表現を有することができる。ローカライゼーション符号化の間接的利益は、各結像チャネルがサブピクセルローカライゼーションのための他の結像チャネルに依存していることである。従来技術の典型的な立体結像システム(図1参照)では、各結像チャネルは、他のチャネルから独立している。この独立は、3Dシステム位置の不確実性、ならびに結果として生じる画像内のオブジェクト/画像対応の不確実性による、3Dローカライゼーション誤差を駆動する。
本明細書で開示される符号化ローカライゼーションシステムのある実施形態では、遠隔システムが、位置精度を増加させるためにともに使用される。そのようなシステムの幾何学形状は、システムが相互に対して移動するときのように静的または動的であり得る。3Dシステム幾何学形状はまた、従来技術の立体結像システムと異なって、サブピクセル公差に公知である必要はない。符号化ローカライゼーションシステムの性質から、本システムの位置は、同一の遠隔オブジェクトの結像を通して生成されるデータによって判定可能である。
本明細書で開示される符号化ローカライゼーションシステムでは、遠隔オブジェクトは、複数の結像チャネルによって結像される。一実施形態では、結像チャネルは、オブジェクトまでの異なる主光線角または照準角を有してもよい。別の実施形態では、異なる結像チャネルの視野は、少なくとも遠隔オブジェクトが位置する容量内で重複する。従来技術の立体結像システムとは対照的に、各結像チャネルは、上記の幾何学的情報外の古典的な結像システムではなく、むしろ、各チャネルは、センサにおいて測定されるような遠隔オブジェクトの相対角度位置を符号化するように作用する。したがって、符号化ローカライゼーションシステムは、各サンプルが一意的なコードで符号化される、遠隔オブジェクトのN個のサンプルを形成する。画像センサにおいて測定されるような異なる符号化情報は、高い精度、高速計算、および異なる画像チャネル間の画像対応を可能にする能力を可能にするように組み合わせられる。
実施形態では、符号化ローカライゼーションシステムは、2つ以上のサブシステムおよび/または同一センサ上の2つ以上の結像チャネルに対して角度情報を符号化するために使用される。遠隔オブジェクトまでの相対角度および距離は、(環境公差を通した)光学部およびセンサまたはサブシステム(例えば、サブシステムが相互に対して移動している場合)の不完全な知識を用いて復号される。別の実施形態では、符号化ローカライゼーションシステムは、光学部およびセンサの知識が把握されている状況で、角度位置および距離の推定値を向上させるために使用される。さらに別の実施形態では、符号化ローカライゼーションシステムは、検索を対応するローカライゼーションコードの領域に制約することによって、画像対応を測定するときに検索空間を縮小するために使用される。
図3は、符号化ローカライゼーションシステム300の実施形態を示す。図3では、符号化ローカライゼーションシステム300は、光学部310から310nおよびセンサ320から320nを用いてN個のチャネルを記録するように構成される。この構成では、各チャネルは、特定のコード340から340nに対する、2D空間、ならびにおそらく色および時間情報を記録する。一実施形態では、チャネルコード340から340nは、少なくとも偏光値または偏光角によって異なる。別の実施形態では、チャネルコード340から340nは、少なくとも空間的に変化する減衰の強度によって異なる。別の実施形態では、チャネルコード340から340nは、少なくとも空間的に変化する強度の位相によって異なる。別の実施形態では、チャネルコード340から340nは、少なくとも空間的に変化する正弦強度の位相によって異なる。別の実施形態では、チャネルコード340から340nは、少なくとも空間的に変化する光学経路長の値によって異なる。別の実施形態では、チャネルは、画像、開口、波長、偏光、および視野のうちの少なくとも1つから成る。レンズ395は、再結像構成を形成するように光学部310から310nと協働する随意的な対物レンズであり、光学部310から310nは、コード340から340nを通して視野の複数部分を再結像するように、マイクロレンズアレイとして機能する。レンズ395が存在しない場合、光学部310から310nは、符号化結像チャネルのそれぞれのための個々の対物レンズを形成する。
実施形態では、システム300からのデータセット370は、(x,y)が、空間変数350であり、pが、偏光、強度、および光学経路変数360のうちの少なくとも1つである、3次元マトリクスM(x,y,p)である。データセット370の中には、N個の面Miがあり、つまり、i=1からn、Mi=MlからMnである。色および時間変数は、ベイヤ色フィルタアレイ、時間平均化等の構成を通して、各空間領域マトリクスMiに組み込まれてもよい。時間的情報もまた、マトリクスMの付加的な寸法を通して明示的にされてもよい。実施形態では、処理システム380は、符号化シーケンス340から340nより抽出される信号に従って、マトリクスMを含有するデータ370を組み合わせる。一実施形態では、処理システム380は、第1のイテレータとして寸法pを使用して、サブ信号sijを形成し、s11=[M(1,1,1)M(1,1,2)...M(1,1,n)]、s12=[M(1,2,1)M(1,2,2)...M(1,2,n)],...、sij=[M(i,j,1)M(i,j,2)...M(i,j,n)]である。一実施形態では、処理される最終信号stotは、サブ信号stot=[s111213...sij]を連結させることによって形成され、スペクトル成分について分析される。スペクトル分析は、いくつかあるデバイスの中でも偏光コンパスを可能にするように、後続の段落で実証される。実施形態では、スペクトル分析は、時間的および空間的に変化するうちの少なくとも1つであってもよく、スペクトログラム分析、空間周波数分析、尺度空間分析、および時間周波数分析のうちの少なくとも1つを含んでもよい。別の実施形態では、サブ信号が平均化され、平均がスペクトル成分について分析される。別の実施形態では、データM1からMnは、画像の加重合計

を形成するように処理され、i=1...nであり、重量wからwは、コード340から340nに基づく。別の実施形態では、複数の測定におけるコードは、正弦関数を採用する。
図4は、偏光コードを採用する1つの符号化ローカライゼーションシステム400の実施形態を示す。いくつかの照明オブジェクト491a、491b、491cが、未知のソースコード492a、492b、492cによって修正され、信号493a、493b、および493cを形成する。一実施形態では、ソースコード492a、492b、492cは、例えば、直線偏光子である。一実施形態では、これらのオブジェクト、ソースコード、および信号の数は、例えば、偏光した空の非常に狭い部分を視認しながらモデル化され得るように、1である。別の実施形態では、これらのオブジェクト、ソースコード、および信号の数は、1より大きく、例えば、偏光した空の広い視野を視認するとき、偏光は、空にわたって角度および規模が変化する非常に多数のオブジェクト、ソースコード、および信号によってモデル化されてもよい。一実施形態では、ソース/ソースコードから発散する信号493a、493b、および493cは、空間、時間、およびスペクトル領域で記述可能である。ソース/ソースコードと感知システム405との間の略未知の媒体480は、信号493a、493b、および493cを破損するように作用する。実施形態では、特殊感知システムは、コード440から440n、光学部410から410n、および検出器420から420nを含有する、光学的符号化システム405から405nの集合である。一実施形態では、コード440から440nは、偏光分析器を通して偏光領域中で実装される。別の実施形態では、コード440から440nは、様々な物理的角度を伴う直線偏光を通して実装される。別の実施形態では、光学的符号化システム405から405nの集合は、正確で信頼性のある情報が、未知の媒体480の存在下で捕捉されるように、スペクトル、空間、時間、および偏光情報を記録するように設計されている。一実施形態では、プロセス470による記録データの処理は、記録データから必要なローカライゼーション情報を抽出するために使用される。別の実施形態では、コード440から440nは、検出器420から420nのセンサ面の上方の振幅マスクを通して実装され、光学的符号化システム405から405nの集合は、正確で信頼性のある情報が、未知の媒体480の存在下で捕捉されるように、スペクトル、空間、および時間情報を記録するように設計されている。
図5は、1つの符号化ローカライゼーションシステム500の実施形態を示す。レンズシステム510は、いくつかの異なる視野LI、R1、L2、R2、L3、およびR3を含有する。検出器520および521の出力は、システム500が感知野内で運動505に暴露されたときに信号515を生じるように両極的に組み合わせられる。処理システム570は、信号515の中の情報を処理する。一実施形態では、相補的レンズ領域550、551、および552のうちの少なくとも1つは、二重要素センサ520、521の出力における測定された信号が、1つ以上の結像チャネルの左右の視野について異なるように、意図的に設計されている。例えば、領域550は、最外レンズ表面の少なくとも一部分を覆い隠すか、または遮断することによって、部分的に減衰していてもよい。代替として、領域551または552は、それぞれ、検出器521または520の応答が変化させられるように、少なくとも部分的に減衰していてもよい。
レンズ構成580は、半分がグラフ590内で点線582および592によって分離される、視野の左右の半分を覆う、1から6と標識された6枚のレンズを伴う例示的なシステムの実施形態である。構成580は、感知野から視認されるようなレンズシステム510の前面を図示する。構成580は、各レンズ区画の小視野584を図示し、各区画が非重複感知領域を有することを示す。システム500によって、非重複感知領域のそれぞれは、検出器ペア520および521上で重複するように結像される。減衰マスクが、レンズ3を覆って配置される。例示的出力590は、580において1から6と標識されたレンズのそれぞれに対応する、グラフ590において1から6と標識された領域内のLおよびR(または+およびマイナス)検出器ピクセルのそれぞれの正弦波様応答を示す。信号595は、領域3内の明確に減衰した最大振幅であり、移動オブジェクトが視野の半分を覆うレンズ1−3のゾーン内にあったことを示す。この場合、信号振幅の差は、移動オブジェクトの角度位置または視野位置を示す。符号化レンズがないと(すなわち、従来技術では)、全ての視野点が同一に見えるであろう、そして角度位置を判定することができない。一実施形態では、コードは、1つ以上の結像チャネルに対する左右の視野L3およびR3のための異なる開口面積および形状を通して可能にされてもよい。別の実施形態では、差は、異なる吸収レンズ厚、異なる偏光、および検出器要素偏光に意図的に合致させられた、または合致させられていない偏光のうちの少なくとも1つを使用して得られる。一実施形態では、検出器520、521は、熱感受性要素であり、システム500は、受動型赤外線運動感知システムを形成する。別の実施形態では、レンズシステム510は、光学成形により容易に安価で形成することができ、異なる吸収レンズ厚、異なる偏光、および検出器要素偏光に意図的に合致させられた、または合致させられていない偏光と高度に適合する、フレネルレンズである。一実施形態では、処理システム570は、領域550の中のローカライゼーション符号化によって引き起こされたシグネチャを検出するように信号515を処理して、運動を引き起こしたオブジェクトまでの角度の大きさを生じる。実施形態では、2ピクセルセンサ520、521について、オブジェクトまでの角度の大きさは、視野内のオブジェクトの数を数えるために使用される。実施形態では、2ピクセルセンサ520、521について、複数のセンサからの角度の大きさは、複合視野内のオブジェクトの数を数えるために使用される。
図6は、システム604の内側の拡張詳細とともに、符号化ローカライゼーションシステム604の実施形態を伴う説明図600を示す。装置604は、重複視野602を伴って検出器620上に結像するための2×2符号化ローカライゼーションシステムであり、「2×2」という表記は、本明細書では符号化ローカライゼーションシステムにおける結像チャネルのレイアウトを指す。レンズ610における各開口は、レンズ610とセンサ620との間に配置されるマスク641、642、643、644によって符号化される。一実施形態では、マスクは、システム604の配向に対して各チャネルについて異なる。例示的2×2構成を用いて、同一のオブジェクト点を複数回結像することによって、各オブジェクト点は、4回結像される。各チャネルを異なって符号化することによって、(従来技術のピクセルアーキテクチャと比較して)より多くの情報を捕捉することができる。実施形態では、この2×2の実施例について、特定のオブジェクト点からの航空画像サブピクセル瞬間視野は、I=[i1112;i2122]によって求められ得る。航空画像サブピクセル瞬間視野Iは、マスクによって加重され、符号化サンプル673を形成するようにセンサ620上でともに合計される。一実施形態では、4つ全ての視野602は、単一の検出器アレイ620上で画像円521として形成されてもよい。4つのチャネルのそれぞれは、重複視野602による符号化の前に、適正な対応するx/y位置で本質的に同一の情報を有する。一実施形態では、異なる結像チャネルに対するマスク641、642、643、644上のローカライゼーションコードは、異なる機能を有し、空間位相、空間振幅、偏光、および光学経路差のうちの少なくとも1つを含む。別の実施形態では、マスク位置は、それらがレンズ610とセンサ620との間に位置する距離において変化する(例えば、いずれか1つのチャネルに対するマスクは、別のチャネルにおけるマスクと比較して、光学経路に沿って異なる位置に位置する)。別の実施形態では、コードは、平滑関数、急速変化関数、および多自由度でコードを設計するための幅広い一式の基底関数を提供するランダムまたは疑似ランダム関数のうちの少なくとも1つから成る。別の実施形態では、2×2実装のためのコードは、コードが一般場面のフィッシャー情報を最大限化するように、偏向正弦から成るコードである。別の実施形態では、測定されたサンプルは、航空画像のサブピクセル変化の関数として変化し、サブピクセル分解能測定、またはピクセル間隔より細かい尺度での測定を可能にする。別の実施形態では、コードは、波長特有のコードを含む。マスク641、642、643、644は、一実施形態では波長を選択してもよく、別の実施形態では波長の選択に敏感であり得る。波長を選択することによって、コードは、ハイパースペクトルフィルタリングならびにサブピクセル位置情報を行うことができる。波長の選択に敏感であることによって、コードは、可視スペクトル(赤/緑/青)等の多色結像システムで使用することができ、全ての色に等しく影響を及ぼし、したがって、色忠実度を保つか、または異なって色に影響を及ぼし、依然として広域スペクトルデバイスでありながら、色変動を通して別の程度の符号化情報を提供することができる。実施形態では、各オブジェクト点は、広域スペクトル結像のために、可視波長、近赤外線、中波赤外線、および長波赤外線波長の選択のうちの少なくとも2つで結像され、可視、近赤外線、および長波赤外線画像の選択のうちの少なくとも2つを融合する結像および標的化システムで使用される。
図7は、1つの符号化ローカライゼーションシステム700の実施形態を示し、システム700は、単一ピクセル検出器を採用する。一実施形態では、2つの結像チャネルは、照準(または軸上)方向が全て平行であるように搭載される。2つのピクセル720は、交差輪郭708を形成する重複視野702を有する。輪郭は、オブジェクト位置の関数として一定の検出値を示す。これは、2つだけのピクセルを使用して、オブジェクトの位置の推定または検出を可能にする。所与のタスクを行うために必要とされるより少ない数のピクセルは、より低い出力およびサイズをもたらす。視野内の未知のオブジェクト点の位置は、交差輪郭708内の位置「a」および「b」の間に不確実性を有する。一実施形態では、演繹的知識が、位置「a」および「b」を区別するために存在する。別の実施形態では、先験的情報は、「a」と「b」との間の相違を提供するように、半球、強度、波長、および偏光複合値のうちの少なくとも1つを含む。先験的情報がなければ、第3のチャネルが以下で説明されるように使用されてもよい。
一実施形態では、システム750に見られるような3つの結像チャネルの重複視野754は、照準(または軸上)方向が重複視野754と平行であるように搭載される。システム0および2の軸上位置は、758として示されている。未知のオブジェクト点が、これらの3つのチャネルの間に位置する。実施形態では、未知の点までの相対距離は、各結像チャネルr0、r1、およびr2に1つずつ、3つの正規化半径値によって求められる。正規化半径値が各チャネルについて把握されており、全てのチャネルの結像幾何学形状も把握されている場合には、オブジェクト点の3D位置をシステム750において「b」または756として判定することができる。システムr0およびr1のみが使用された場合、曖昧性が点「a」または752とともに残るであろう。別の実施形態では、3つの結像チャネルは、場面バイアスとは無関係に、各オブジェクト点の相対半径を判定することができ、結像チャネルの集合および対応する3Dオブジェクト位置からの雑音を推定することができるように、ローカライゼーション符号化される。ローカライゼーション符号化を用いると、3Dでのピクセルまたはセンサおよび/または光学部の位置がよく把握されていないか、または空間ローカライゼーションにおける不確実性が検出器ピクセルの面積より小さい場合でさえも、推定精度はピクセルサイズより小さい。複数の構成が可能であり、例えば、単一ピクセルセンサおよび複数の測定値が、空間的に変位したシステムを通して形成され、または単一のピクセルセンサおよび複数の測定値が、時間的に変位したシステムを通して形成される。また、符号化が空間的および時間的の両方である符号化ローカライゼーションシステムは、信号が時間および空間の両方で変化する利益を提供する。これらの構成の全てについて、ピクセルの数と比較して高い精度での相対オブジェクト位置推定のために、方法および装置が提供される。
図8は、先験的情報を使用した符号化ローカライゼーションシステム800の実施形態を示す。一実施形態では、「GENERIC」という言葉のオブジェクトまたは光学データが、810として事前に把握されている(810は従来技術によって作成されてもよい)。この情報から、既知の測定ベクトル820の集合が形成され、後に、検出、ローカライゼーション、測距、および多重チャネル対応のうちの少なくとも1つのタスクを行うために、実際のサンプリングされた測定ベクトル830に対して試験されるように使用される。810が画像である場合には、810を形成するサンプルの数は、サンプリングされた、または既知の測定ベクトル820および830における数よりもはるかに多くあり得る。一実施形態では、ベクトル820は、ソース810と比較して低減したデータを含有する。一実施形態では、形成された測定ベクトル820およびサンプリングされた測定ベクトル830を正規化することができ、よって、概して複雑な標的810のサブピクセルローカライゼーションのためのベクトルメトリックを形成する。実際のサンプリングされた測定値830は、ベクトルレベルで、モデル化ベクトル820、およびプロセッサ870を使用して合致メトリックとして計算されるベクトルノルムと比較される。一実施形態では、測定ベクトルは、オブジェクト、オブジェクト配向、およびオブジェクト位置のうちの少なくとも1つを検出するように、記憶または推定されたオブジェクトベクトルと比較される。別の実施形態では、測定ベクトルは、オブジェクトパラメータを推定するために、オブジェクトの数学的モデルとともに使用される。
図8のシステムは、「オブジェクトカメラ」または「オブジェクトセンサ」に適用される。つまり、多数の用途では、情報は、あるタイプのオブジェクト、またはある種類のオブジェクトに関してのみ所望される。いくつかの用途は、電柱の位置および寸法に関する情報を捕捉することにのみ関心があり得る。他の用途は、人々の位置の数にのみ関心があり得る。電柱または人々のいずれか一方に関する情報を表さない、全ての他の収集されたデータは、実際には求められず、前処理ステップとして破棄することができる。(オブジェクトセンサとして動作する)符号化ローカライゼーションシステム800の一実施形態では、一式のオブジェクト810のモデルが収集され、次いで、可能な既知の測定ベクトル820に低減される。サンプリングされた測定ベクトル830は、既知の測定ベクトルと比較され、次いで、一式の用途特有のオブジェクトの中のオブジェクトが検出され、それらの配向、場所、位置等のこれらのオブジェクトに関する情報がさらに検出または推定される。別の実施形態では、次いで、サンプリングされた、または既知の測定ベクトルから、図23に示されるように、検出されたオブジェクトに関する領域に対応する、人間が視認した画像を形成することができる。
非常に雑音が多いサンプリングされたデータでさえも、サンプリングされた測定ベクトルは、モデル化されたベクトルに密接に合致することができ、オブジェクト810のサブピクセル位置880が検出される。実施形態では、正規化ベクトル方法は、ベクトルが方向および相対規模を捕捉するため、オブジェクト利得への不変性を可能にする。別の実施形態では、正規化ベクトル方法は、プロセスが両極性であるため、付加雑音に対する低い感受性を可能にする。別の実施形態では、正規化ベクトル方法は、誤差規模、ならびに高速検出のための方向と、検出および推定ステップの組み合わせとを可能にする。実施形態では、コンテキスト依存性光学データ削減および記憶のために、方法および装置が提供される。
図9は、運動性および運動観察および区別のための符号化ローカライゼーションシステム900の実施形態を示す。このローカライゼーションシステム900は、以降の段落および図において以下で説明されるように、ローカライゼーション、ナビゲーション、および配向のためのデバイスを構築するために有用である。システム900の一実施形態では、アーム910、920、および930の配列は、例えば、参照座標系980において、軸ΔxおよびΔyと同一平面かつΔzに直角であり得る。参照座標系980はまた、運動性および可動性推定値のための慣性参照フレームである。システム900の実施形態では、各アーム910、920、および930は、アームの方向に沿って、かつそれに直角に、各アームについてそれぞれ、運動推定値912を[dxl,dyl]として、運動922を[dx2,dy2]として、運動932を[dx3,dy3]として形成する。別の実施形態では、アーム910、920、および930はまた、それぞれ、運動推定値912、922、および932のそれぞれの詳細D1、D2、およびD3も提供する。一実施形態では、詳細D1、D2、およびD3は、信号品質および雑音レベルの推定値、偏光状態および波長強度分散等の構造情報、オブジェクト特有の特徴、ならびに空間周波数変調および視野にわたる強度等のエネルギー情報のうちの少なくとも1つである。一実施形態では、符号化ローカライゼーションシステム900の符号化性質は、SNR、空間分解能、サイズ、重量、および電力消費のうちの少なくとも1つの向上とともに詳細を提供する。別の実施形態では、符号化ローカライゼーションシステム900の符号化性質は、精度、運動性検出、空間分解能、および正確性のうちの少なくとも1つの向上とともに、運動推定値912、922、および932を提供する。別の実施形態では、参照への較正が、絶対配向およびローカライゼーションの向上を提供する。実施形態では、絶対配向推定のための方法および装置が提供される。実施形態では、絶対3D位置推定のための方法および装置が提供される。実施形態では、従来技術の慣性ベースのナビゲーションシステムと比較して位置付けるために、改良が配向および3D位置推定に提供される。実施形態では、システム900は、屋内用途のための配向および3D位置推定のうちの少なくとも1つを行うために方法および装置が提供される。実施形態では、システム900は、信頼性がないGPS受信範囲を伴う用途のための配向および3D位置推定のうちの少なくとも1つを行うために方法および装置が提供される。
サブシステム990では、アーム922によって示される運動の配向は、任意の瞬間に、角度βを使用して成分[δx2,δy2]に分解することができる。また、サブシステム990では、アーム932によって示される運動の配向は、任意の瞬間に、角度αを使用して全体的な参照座標系980の成分[δx3,δy3]に分解し、[dxl,dyl]と組み合わせることができる。サブシステム990では、角度θzは、ΔxΔy面における回転、またはΔz軸の周囲の回転である。システム900の実施形態では、参照座標系980における各アーム910、920、および930の真の運動および運動性は、アーム910、920、および930によって形成されるフレームに基づいて結合される。システム900の別の実施形態では、運動推定値912、922、932は、相互から独立しており、よって、参照座標系980に関して、独立運動推定値とシステム900における幾何学形状の結合制約との間のいくつかの有用な関係および制約を確立することができる。
一実施形態では、θz=0およびdxl=0であるとき、δx2=0およびδx3=0であり、dyl>δy3およびδy2=δy3であるとき、参照座標系980は縦揺れ状態である。別の実施形態では、θz=0およびdyl=0であるとき、δy2=0およびδy3=0であり、dxl=0および−δx2=δx3であり、参照座標系980は、横揺れ状態である。別の実施形態では、θz=0およびdyl=0であるとき、dy2=0およびdy3=0であり、dxl=dx2=dx3であるとき、参照座標系980は、dxlに比例して偏揺れ状態である。
実施形態では、固定参照座標系980を使用して、非平面的な表面982の輪郭を少なくとも2次元で描くことができる。システム900の別の実施形態では、アーム910、920、および930の物理的配列によって提示される制約の違反に基づいて、表面982の移動表面または一部分を検出および推定することができる。システム900の別の実施形態では、例えば、較正手順中に、アーム910、920、および930の物理的配列の幾何学形状を推定するために、既知の平面または非平面的な表面982を利用することができる。したがって、システム900は、運動性および相対運動を推定し、また、外部運動を検出および推定することもできる。一実施形態では、測定が、空間、時間、スペクトル、および/または偏光領域のうちの少なくとも1つで行われる。別の実施形態では、測定が、空間、時間、スペクトル、および/または偏光領域のうちの少なくとも2つで行われる。
実施形態では、システム900は、電磁エネルギー変換器997のうちの少なくとも1つによってさらにデジタル化され得る電気信号にエネルギー995を変換するための電磁エネルギー変換器997と、プロセス998と、電磁エネルギーを電磁エネルギー変換器997へ輸送するための物理的媒体996とを含有してもよい。変換されたデータは、d0、dl、...、dNと表される、低密度の一式のN+1個の運動推定値999を形成するように、プロセス998によって処理される。電磁エネルギー995は、例えば、紫外線・可視・長波の赤外線波長、音響波長、および電波波長の形態であってもよい。実施形態では、電磁エネルギー995は、例えば、偏光状態、波長、空間強度、および空間周波数の変調のうちの少なくとも1つに影響を及ぼすように、検出に先立って物理的媒体996によってさらに修正されてもよい。別の実施形態では、物理的媒体996はまた、倍率変動、視野、光軸傾斜、視野強度変動、視野偏光変動、および視野収差内容の光学的性質のうちの少なくとも1つに影響を及ぼすように、アーム910、920、および930の間で、電磁エネルギー995に修正間の変動を付与し得る。
本明細書で開示される本発明の実施形態では、符号化ローカライゼーションシステムの設計のための方法は、所与のタスクのための情報を最大限化するステップを含んだ。結像システムは多くの場合、視覚的に魅力的な写真を生成するように設計されている。本システムが情報を生成している場合に、情報に関係する設計方法が必要とされる。好ましい方法は、クラメール・ラオ限界を最小限化し、3D場面情報の特定の側面の対応するフィッシャー情報を最大限化する、システム設計である。一実施形態では、符号化ローカライゼーションシステムは、同一の遠隔オブジェクトをサンプリングするチャネル間の相互情報が符号化しないことと比較して削減されるように設計される。別の実施形態では、符号化結像チャネルの出力の合計は、コードの領域中の1つまたは複数の独立変数から本質的に独立している。
これらの符号化システムの設計は、情報理論を通して理解することができる。本明細書で開示される方法を介して設計することにより、推定パラメータの可能な精度を最大限化するか、またはより一般的に、目的とするオブジェクトパラメータに対して符号化システムの情報容量を増加させることができる。
雑音が多い測定値に基づく、決定的数量θの最良不偏推定量θ′の分散は、クラメール・ラオ限界によって境界される。または、
Var(θ′)≦クラメール・ラオ限界=J(θ)-=フィッシャー情報マトリクス
Jの逆数である。
フィッシャー情報マトリクスJは、予期される未知数に対する本システムの感受性を表す、全体的なシステムに関係する基本マトリクスである。測定値が一式の未知数によって定義されると仮定されたい。次いで、Jの要素は、未知数に関する測定された信号の偏導関数の積である。付加ガウス雑音の場合、フィッシャー情報マトリクスは、以下のように書くことができ、
式中、ベクトルは、ベクトルθによってパラメータ化される測定値を表す。マトリクスRは、付加ガウス雑音の相関マトリクスである。雑音が訂正されず、一様に分配された場合には、相関マトリクスは、雑音分差によって乗算される単位マトリクスである。一実施形態では、以下の結果のための直交相関マトリクスが仮定される。別の実施形態では、非ガウスおよび非同一雑音統計に基づく変動もまた、このタイプの雑音によってよくモデル化されないシステムについて従うことができる。低雑音の場合では、多くのタイプのシステムが、付加ガウス雑音によってよくモデル化される。フィッシャー情報マトリクスはまた、

として書くこともできる。
式中、合計は、異なるチャネルにわたるものである。所望の情報は、パラメータxである。フィッシャー情報マトリクスは、xについてのシステム情報のみに関係する入力、ならびにxおよび他の未知数についてのいわゆる相互情報、ならびに他の未知数についての情報を含有する。xについての相互情報は、その存在がxの値の推定に負に寄与するため、妨害パラメータと見なすことができる。または、妨害パラメータは、パラメータx上の関連クラメール・ラオ限界を増加させる。多重チャネルシステム設計の一実施形態では、目標は、特定のパラメータに関する全体的なシステム情報を最大限化する一方で、また、同一のパラメータに関係する相互情報を最小限化することである。これは、混雑したオブジェクト情報空間から選択されたパラメータを推定するように最適化されたシステムをもたらす。
一実施形態では、利得Gおよび位置xが未知であり、無相関白色雑音を伴うy(x)=Gh(x−x)等の単純化オブジェクトモデルが採用される。このモデルの偏導関数は、

である。
式中、h′(x)は、xに関するhの導関数である。次いで、1つのチャネルのフィッシャー情報は、以下によって求められる。
右上および左下側の数量は、数量xの妨害パラメータである。複数の結像チャネルおよび2つの未知数を用いると、x上のクラメール・ラオ限界を最小限化することは、フィッシャー情報マトリクスJを対角化することと同等である。これは、

であるときに起こる。
一実施形態では、2つのチャネルおよび上記の結像を用いると、空間的周期wに対してh(x)=sin(wx)、h(x)=cos(wx)であるときに、モデルJが対角化される。別の実施形態では、個々のチャネルコードの形態は、各余弦の周波数が基本周期の調和である、余弦の合計であり得る。各チャネルに対する余弦の合計の位相は、フィッシャー情報が対角であるように設計されている。別の実施形態では、個々のチャネルコードの形態は、各余弦の周波数が基本周期の調和である、余弦の積の合計であり得る。各チャネルに対する余弦の積の合計の位相は、フィッシャー情報が対角であるように設計されている。
インコヒーレント結像システムは、非負である。非負コードの一実施形態は、空間的周期wに対して、h(x)=0.5sin(wx)+0.5、h(x)=0.5cos(wx)+0.5である。多重チャネル正弦波コードの位相によって、推定性能は、「空間的に一貫した」システムと同等であり得る。別の実施形態では、余弦の合計および余弦コードの積の合計もまた、コードを非負にするために、バイアス項を有する。非負要件は、個々の正弦波成分の振幅を多重正弦波コードモデルにおいて強制的に減少させる。これは、これらの特定のコード成分に関係する情報容量を削減するという効果を有する。
図10は、オブジェクト位置についてのフィッシャー情報を増加させる、3チャネル符号化システムからのグラフデータを図示する。グラフ1010は、3つの単極または非負チャネルのシステムに由来する。グラフ1030は、3つの両極チャネルのシステム、または1010からであるがバイアス項がないチャネルに由来する。付加雑音は、偏向および不偏システムの両方について同一であると見なされる。正弦の方程式は、xが−0.5から+0.5に及ぶ、cos(2パイx+位相)によって求められる。3本の正弦の位相は、120度分離で2パイ対称である、30度、150度、および270度である。
グラフ1030から、不偏チャネルは両極性である(負の値を有する)。時間的に一貫した光学システムが負の測定値を有することができない一方で、1010の3チャネル不偏システムは、未知の位置変数xについて不偏システムと同一の情報を有することができる。測定値1010に関係するフィッシャー情報は、1020に示され、1030については1040に示されている。これらのフィッシャー情報プロットはまた、未知の付加バイアス項も含む。適正なシステム設計を用いると、未知のバイアスの付加は、1つまたは複数の所望のパラメータについての捕捉された情報に悪影響を及ぼさない。変数xについての情報の値は、1020および1040において同一である。そして、Xに関係する相互情報は、1020および1040の両方についてゼロである。1020における非ゼロ相互情報曲線は、GとBとの間の相互情報に関係する。
図11は、一式の符号化ピクセル上で1D線のサブピクセル情報収集、検出、および推定を行う、符号化ローカライゼーションシステムのグラフデータ1100を示す。一式の符号化ピクセル、コード、およびコードの相違は、本明細書の以降で使用される機能的説明として「システム」を構成する。一番上の行は、サンプリング前のコードの1周期中に現れるような線の航空画像を示す。一実施形態では、コードの周期は、1つ以下のピクセルにわたる。別の実施形態では、周期は、多くのピクセルにわたってもよい。一実施形態では、ピクセルコードは、偏向正弦および余弦であり、測定されたデータは、航空画像データとの個々のコードの内積である。
一実施形態では、結像モデルは、未知の利得、バイアス、垂直線位置であり、4つのコードは、線の水平または垂直サブピクセル次元のそれぞれを記録する。実施形態では、4つのコードが90度位相の正弦であるとき、2つの180度位相がずれているチャネル間の差異は、バイアスがない両極性記号である。2組の差異は、90度だけ位相がともに偏移させられる、2つの無バイアス測定値をもたらす。これら2つの測定値は、サブピクセルオブジェクトの1つの空間周波数において、フーリエ変換係数の実数および虚数部を表し得る。フーリエ変換測定値のこれらの差異の複雑な表現は、図11に示される単位円の行の中の水平および垂直ベクトルとして表される。2つのベクトルは、最大規模が1であり、より小さい規模を伴うベクトルが1に比例して拡大縮小されるように、拡大縮小されている。垂直線を結像する場合、全ての垂直ベクトルは、本質的にゼロの規模を有する。水平ベクトルは、垂直線のサブピクセル位置を直接示す。
別の実施形態では、利得およびバイアスが先験的に把握されたとき、次いで、180度位相の2つだけのコードが、オブジェクトの各垂直または水平方向のために必要とされる。一実施形態では、演繹的知識は、符号化されていないチャネルから得られる。そのようなコードの実施例は、グラフ1180および1190を伴うシステム1150で挙げられる。グラフ1180および1190は、システムが要求するような2つの異なるコード、および1100に示される結果を可能にする関連フィッシャー情報を伴って、システム設計側面(コード値)を示す際の「システム」を表す。図11のグラフ1180は、2パイ対称性を有するか、または180度位相である、2つの正弦コードを示す。コードの振幅が非負であるように、バイアスが付加されている。これらのコードに関係するフィッシャー情報が、グラフ1190に示されている。空間的位置xに関係するフィッシャー情報の最大値が、図10のプロット1020の3チャネル符号化システムの値の約2/3であることに留意されたい。グラフ1190から、空間的位置に関係する情報は、サブピクセル位置の関数としてバイアスをかけられる。システム設計者は、このバイアスを受け入れるか、またはバイアスと2パイ対称性との間で妥協を形成するように2チャネルコードを再設計することができる。比較する場合、図25は、他の選択肢を例証する2つのチャネルコードの2つの実施例を示す。一実施形態では、図25のチャネルコードは、多項式コードである。
図25の2チャネルコード2500は、2510に示されるように、2パイ対称性を有する(またはコードの合計は、空間的位置の関数として一定である)。このシステムに対するフィッシャー情報の逆数の平方根、またはクラメール・ラオ限界(CRB)は、2520で表されている。このシステムに対するCRBもまた、バイアスをかけられるが、図11の2チャネルシステム1150に対する同等のCRBより変化が少ない。図25のシステム2550は、正確には2パイ対称性を保持しないが、不偏CRB、したがって、2560に示されるように不偏フィッシャー情報を達成する、別の関連設計を表す。2550におけるグラフの集合は、コードの設計、コード設計の直交性、および達成されるフィッシャー情報を表すため、「システム」と見なされる。単独で解釈される各コードは重要ではなく、むしろ、コードの相互関係、またはコードの組み合わせのシステムレベルの達成が重要である。直交性、非負性、2パイ対称性、およびCRB/フィッシャー情報バイアスの必要性の平衡を保つ、図11および図25におけるもの等の多数の他の2チャネルコードがある。
図12は、ローカライゼーションシステム1200のための位相正弦符号化、およびサブピクセルエッジへの応答を示す。エッジは、垂直測定ベクトルがゼロ規模を有するように、垂直に整合したエッジである。サブピクセル画像の1つの空間周波数におけるフーリエ変換である、水平ベクトルは、エッジの位置とともに偏移する。サブピクセルエッジ位置の位置は、水平測定ベクトルから直接測定することができる。一実施形態では、システム1200は、エッジ利得およびバイアスの先験的知識を伴わずに、指図によって4つの位相チャネルを使用する。別の実施形態では、システム1200は、エッジ利得およびバイアスの先験的知識を伴って、指図によって2つの位相チャネルを使用する。
別の実施形態では、画像データ内の実際の未知数の数は、実際に所望される未知数よりも大きい。画像利得およびバイアスは、例えば、多くの場合、3D結像/測距において特定の空間的特徴までの範囲ほど重要ではないと見なされる、2つの数量である。実施形態では、システムサイズ、重量、および電力をさらに単純化および削減するために、高分解能画像が取得され、先験的にサンプリングされた測定ベクトルをモデル化するために使用される。この高分解能情報を用いて、利得およびバイアスを既知と見なすことができる。別の実施形態では、高レベルおよび高分解能画像処理特徴が、画像処理を誘導するために使用されてもよい。
別の実施形態では、高分解能結像システムは、多重レンズカメラシステムにおける相違を増強するために高分解能画像と併せて使用される、3Dでの測定値を提供する、符号化ローカライゼーションシステムを装備している。別の実施形態では、増強した相違は、娯楽、マッピング、ナビゲーション、調査、および地理情報システムのうちの少なくとも1つのための座標を生成するために使用される。
別の実施形態では、バイアスの推定値が、測定チャネルの出力の合計を通して形成される。測定チャネルの合計は、コードが2パイ対称性を伴って設計されている場合にバイアスの正確な尺度(オブジェクト、システム等からのバイアスを加えたコードバイアス)であり得る。2パイ対称性の重要な特性は、測定チャネルの合計がコードの領域中の特定のオブジェクトにとって定数であり得ることである。図10からの1010の3チャネル測定システムを再考慮されたい。コードまたは測定値の合計1010は、正規化位置の関数としての定数である。次いで、コードの合計は、位置についての情報を提供せず、バイアスについての情報だけを提供する。
2D光学システムおよびシステムPSFを設計するための方法では、2パイ対称性を有するように設計されているコードは、測定チャネルの合計が、特定の領域変数から独立しているもの、すなわち、空間、偏光、時間等である。空間符号化を考慮されたい。次いで、全てのチャネルが合計されたときのPSFおよび空間コードの組み合わせが、理想的には空間的位置から独立している、サンプリングされた値を生じる場合に、一式のコードは2パイ対称性を有する。2つの水平および2つの垂直正弦コードを伴う多重開口2×2システムは、各チャネルの正弦が180度位相がずれている場合に2パイ対称性を有することができる。コードの設計はまた、重複および隣接性またはシステム視野(SFOV)を含む、複数のチャネルの視野配列、ならびに手元のタスク(それがどこにあるか、および自分がどこにいるか)に依存し、重複視野または特殊SFOVを有するコードは、オブジェクトまたは運動を検出し、また、全体的および局所的運動を区別するときに、独立した符号化されていないセンサより多くの情報を多重チャネル信号に提供することができる。
図13は、符号化ローカライゼーション運動性および運動観察および区別システム1300の実施形態である。システム1300の一実施形態では、各アーム1340、1350、および1360は、より小さい領域1344および1354との大きい領域1364の重複によって形成される重複領域1392内で、それぞれ、運動推定値1342、1352、および1362を形成する。実施形態では、運動推定1342、1352、および1362はまた、例えば、波長強度の独立推定値である、詳細D4、D5、およびD6も含有する。別の実施形態では、詳細D4、D5、およびD6は、偏光強度および角度を含有する。
システム1300の一実施形態について、参照座標系1380における各アーム1340、1350、および1360の真の運動および運動性は、アーム1340、1350、および1360の重複領域1392によって形成されるフレームに基づいて結合される。システム1300の別の実施形態では、運動推定値1342、1352、1362、ならびに詳細D4およびD5は、相互から独立している。別の実施形態では、領域1364からの詳細D6は、領域1344および1354への部分的依存を有する。
一実施形態では、システム1300は、z軸の周囲で回転させられたとき、空等の領域(矢印1395によって示される)を横断して広がった低密度の領域1393から成るシステム視野(SFOV)を有し、有限範囲の仰角および360度の方位角を伴うバンドのように成形されたSFOVをもたらす。特徴1394は、一実施形態では、偏光強度および方向の尺度のうちの少なくとも1つである。特徴1394は、別の実施形態では、符号化ローカライゼーションシステムから偏光コードへの応答である。一実施形態では、特徴1394の種々のパラメータが、詳細D4、D5、およびD6において報告される。別の実施形態では、詳細D4、D5、およびD6は、コントラスト、強度輪郭、波面傾斜、および波長情報に関係するパラメータのうちの少なくとも1つを含有する。
別の実施形態では、システム1300は、詳細がSFOVの少なくとも一部分に対する空の偏光を含有する、SFOV内に含有される領域の詳細D4、D5、およびD6を提供する。SFOVの少なくとも1つの部分の中のベクトルのパターンは、空の偏光パターンから地心方位角、仰角、および回転推定値を提供する。実施形態では、パターン1394を横断する運動1395等の参照座標系1380の運動および運動性推定値は、SFOVの複数部分が適応空モデルにマップされることを可能にする。実施形態では、適応は、汚染、塵、煙、および熱勾配波面歪曲のうちの少なくとも1つを含む、近水平効果からの影響を含む。
部分偏光を含有する信号の配向を測定することが一般的かつ周知である一方で、非常に低い程度の部分偏光がある偏光パラメータを伴う信号を測定することは、周知ではない。低い程度の部分偏光を測定する一実施形態では、図4の未知の媒体がシステム1300に含まれ、多くの場合、本明細書で開示される本発明の使用によって獲得することができる非常に低い値まで、偏光の程度を変化させるように作用する。別の実施形態では、図4の未知の媒体は、雲、霧、熱勾配波面歪曲、および汚染のうちの少なくとも1つである。
別の実施形態では、システム1300の光学部および検出器の集合は、全体的なSFOVの一部分、および瞬間視野(iFOV)であり得、N個の測定値を形成する、何らかの特定の視野(FOV)を有する。iFOVは、特定のピクセルのFOVである。別の実施形態では、iFOVは、例えば、光学部の歪曲を通した、特定のピクセルの関数であってもよい。一実施形態では、結像システムのサンプリングされたPSFが空間変異型である、符号化ローカライゼーションシステムが開示される。別の実施形態では、N個の測定値は、空間的位置の関数として測定ベクトルを形成する。別の実施形態では、N個の測定値は、空間的位置の関数として、規模および位相を伴って測定ベクトルを形成する。別の実施形態では、N個の測定値は、不偏であるように構成される。別の実施形態では、N個の測定値は、雑音がない場合にN個の測定値の二乗の合計が一定であるように設計されている。
一実施形態では、システム1300は、図4の未知の媒体480を通して、図3のデータマトリクスMを生成する。(x1,y1)がMにおけるデータの空間的位置であると仮定されたい。次いで、偏光次元を通したデータの集合は、M(x1,y1,i)、i=1,2,...Nである。差し当たり、システム1300に適用されるような図4の未知の媒体480が、測定されたデータの空間、スペクトル、時間、および偏光領域にわたって、一定の規模または利得およびバイアスを付与するのみであると仮定されたい。データMのこの実施形態では、偏光領域中の測定されたデータは、以下のように表すことができる。
式中、は、Mのベクトルであり、Gは、図4の信号493a−c、未知の媒体480の減衰、および感知システム1300の感受性に依存する振幅である。位相phi1は、信号および感知システムの相対配向に関係する。バイアスもまた、信号、未知の媒体、および感知システムに関係する。項wiは、既知と見なされ、符号化要素が偏光分析器を形成するときに、図3の符号化要素340から340nおよび図4の符号化要素440から440nの回転に関係する。実施形態では、部分偏光の程度は、バイアスに対するGの比によって求めることができる。別の実施形態では、配向は、Gおよびphi1を使用して判定される。別の実施形態では、データMは、最小限化されたバイアスおよび最大限化されたGを伴って取得される。別の実施形態では、データMは、等しいバイアスおよびGを伴って取得される。
実際のシステムでは、Mの感知は、常に雑音の存在下にある。次いで、G、phi1、およびバイアスの推定は、統計的推定問題である。可能な限り最良の推定性能は、この特定の実施形態について、フィッシャー情報およびクラメール・ラオ限界の観点で説明することができる。実施形態では、感知システム1300の設計は、他の数量を伴う相互情報を低減しながら、目的とする数量に対してフィッシャー情報を最大限化するように、システムを最適化することを伴う。これは、システムの特定のパラメータの可能な限り最良の不偏推定性能のために、クラメール・ラオ限界を低減することと同等である。一実施形態では、推定されるパラメータは、直線偏光角および規模のうちの少なくとも1つを含む。
一実施形態では、フィッシャー情報マトリクスは、システム未知数G、phi1、およびバイアスに関してデータモデルMの偏導関数の内積によって作成される。または、

である。
di=cos(w*i)である場合、sum()=0であるように、i=1,2,...Nが選択され、次いで、フィッシャー情報の対角要素のみが非ゼロであり、

である。
一実施形態では、N=3であり、図3の符号化要素340から340nおよび図4の440から440nの異なるチャネルは、直線偏光子であり、連続的に(180/3)度回転させられ(測定位相への影響は2×180/3である)、次いで、w*i=0,2*pi/3,4*pi/3である。そして、sum(sin(w*))=0である。次いで、3つのパラメータの可能な限り最良の不偏推定分散が、以下によって求められる。

式中、

は、付加白色ガウス雑音の分散である。多くの状況では、この雑音は、「完璧な」検出器でさえも回避不可能であるショット雑音によって支配される。一実施形態では、ショット雑音は、Gを最大限化しながらバイアスを最小限化するように露出時間を調整することによって、最小限化される。別の実施形態では、ショット雑音は、Gを最大限化しながらバイアスを最小限化するようにセンサ感度を調整することによって、最小限化される。別の実施形態では、ショット雑音は、バイアスおよびGを等しくするようにセンサ感度を調整することによって、読み取られた雑音と平衡を保たれる。
一実施形態では、符号化ローカライゼーションシステムの設計は、所望の未知数のフィッシャー情報を増加させるようにも作用しながら、未知数の間の相互情報がゼロであるか、可能な限り低いように、偏光領域のチャネルを選択するであろう。別の実施形態では、不偏コードは、合計してゼロになる。別の実施形態では、不偏コードは、対角セットを形成する。
実践では、図4の信号493a−cの振幅は、感知システム1300の雑音レベルに対して非常に小さくあり得る。高い雑音レベルは、ローカライゼーション精度の低減につながる。実施例として、偏光領域中の信号振幅は、完全な信号の1%未満であり得る。10ビット検出器が十分に近くで動作すると、検出された信号の振幅は、約0.01*1024、または最大1024の測定グレースケールカウントのうちの約10カウントであり得る。完璧な検出器でさえも、ショット雑音の標準偏差は、約sqrt(1024)=32カウントとなり、1よりはるかに少ない信号対雑音比をもたらすであろう。図14は、直線偏光子の2パイ対称性を伴う8偏光ステップ、またはパイ/4位相ステップ、またはパイ/8実回転ステップを示す、符号化ローカライゼーションシステムの実施形態である。一実施形態では、偏光信号振幅および位相の推定値を向上させるために、より多くの偏光を使用することができる。図14は、直線偏光子の2パイ対称性を伴う8偏光ステップ、またはパイ/4位相ステップ、またはパイ/8実回転ステップを伴うグラフ1410を示す。図14のグラフ1420は、ショット雑音におけるこの信号の結果を示す。
最小数より多くの偏光位相サンプルの使用は、実際の測定された信号が正弦モデルに対応しないときを検出するために有用である。光学部および検出器の適正な選択により、iFOVは、感知システムによって見られるような信号の角度範囲と比較して小さくすることができる。iFOVが信号角度範囲より小さいとき、より多数のサンプルを未知数の推定で使用することができ、それによって、回避不可能な雑音において推定精度を増加させる。
本システムが相互情報を最小限化するように設計されている場合、空間分解能を推定精度とトレードすることができる。信号が感知システムより低い空間分解能を有する場合、これは有益なトレードであり得る。一実施形態では、受信したデータは、以下のように構成することができる。
式中、雑音が多い正弦の連鎖は、設計されたシステムの2パイ対称性により、シームレスである。別の実施形態では、受信したデータは、以下のように構成することができる。
図14のグラフ1430は、雑音中の信号位相を推定する能力を増加させる2パイ対称偏光サンプルの空間的連鎖の実施形態を図示する。いずれか1つの結像チャネルが、グラフ1420によって表される。グラフ1430は、付加ショット雑音を伴う4×4空間的近隣における偏光サンプルを示す。グラフ1440は、データのフーリエ変換の20*logl0として描画された、グラフ1430のフーリエ変換である。グラフ1430を大まかに考慮することができる一方で、正弦グラフ1440は、スペクトル中のピーク1445として示される、信号の正弦性質を明確に示す。信号ピーク1445における信号の位相は、フーリエ変換の複合値の位相から推定することができる。
上記のクラメール・ラオ限界から、信号位相の可能な限り最良の不偏推定値の分散は、信号の振幅に依存している。信号振幅が減少するにつれて、位相を推定する能力も減少するか、または信号位相の最良の不偏推定量が増加する。実施形態では、未知の偏光信号の位相を推定するために必要とされる処理は、信号振幅または偏光度の関数として変化することができる。対照的に、信号バイアスが増加するにつれて、雑音も増加する。実施形態では、未知の偏光信号の位相を推定するために必要とされる処理は、信号バイアスおよび偏光解消度のうちの少なくとも1つの関数として変化することができる。
図15は、サンプルを積み重ね、フーリエ分解を行うことを含む、本発明の実施形態である。グラフ1510は、長い信号を形成するように図4で説明されるように積み重ねられている、雑音がない正弦波信号を示す。信号1510は、200のバイアス、1%の偏光度、雑音がない40×40空間サンプルにわたって8つの偏光角を伴う振幅2を有する。グラフ1520は、グラフ1510における信号のフーリエ変換を示す。グラフ1530は、ショット雑音を伴うグラフ1510における信号を示す。信号1530は、200のバイアス、1%の偏光度、ショット雑音がある40×40空間サンプルにわたって8つの偏光角を伴う振幅2を有する。実施形態では、フーリエ変換は、ピーク1545としてグラフ1540に示されるように基礎的信号の規模および位相を推定するために使用される。正弦は、スペクトル分析において雑音を明確に上回る。
図16は、サンプルを積み重ね、フーリエ分解を行うことを含む、本発明の実施形態である。グラフ1610は、長い信号を形成するように図4で説明されるように積み重ねられている、正弦波信号を示す。1610と1530との間の差異は、1610に関係する露出が、1530と比較して約10倍低減されていることである。この露出の低減は、信号振幅ではなく、信号バイアスおよびショット雑音を低減させた。信号1610は、20のバイアス、1%の偏光度、ショット雑音がある40×40空間サンプルにわたって8つの偏光角を伴う振幅2を有する。グラフ1620は、グラフ1610における信号のフーリエ変換を示す。正弦は、スペクトル分析において雑音を明確に上回る。グラフ1630のようなより少ないサンプルでさえも、スペクトル成分は、点1645としてグラフ1640において依然として明確に可視的である。実施形態では、光学部は、FOVおよびローカライゼーションの不確実性と比較して、必要とされるメモリ記憶を低減させる。別の実施形態では、光学部およびデータ依存性信号処理は、古典的な結像システムと比較して、貯蔵されるデータの量を削減する。
以前に説明された未知の媒体480の不均一性により、SNRは、典型的な画像にわたって空間的に変化し得る。したがって、空間的に変化するプロセスを実装する能力は、例えば、所与のFOVまたはiFOVで使用する数Nまたは基本露出時間を正しく選択することによって、結果をさらに向上させるであろう。信号の振幅が制限されるが、バイアスは増加することができる実施形態では、利得およびバイアスを等しくするように露出時間を最適化することができる。実施形態では、図13のアーム1340、1350、および1360は、GおよびバイアスがSFOV内にある場合に空間的に変化するサンプリングを提供する、異なる露出時間を有する。
図17は、振幅1720およびバイアス1720が水平軸上で露出を増加させるために示されている、システム1700を示す本発明の実施形態である。露出値1730は、信号の振幅が最大限化されるため、最適な露出値と見なすことができる。1730を超えて露出を増加させることにより、システムにおけるショット雑音を増加させるのみである。これら等の低ダイナミックレンジ信号は、信号に存在する検出されたバイアスおよび振幅の関数として、露出を変化させることから利益を享受することができる。図17はまた、空間的に変化するデータ収集、また、空間的に変化する処理の記号表現も示す。一実施形態では、空間的に変化するデータ収集は、推定偏光振幅または部分偏光度の結果として変化する。別の実施形態では、空間的に変化する処理は、推定偏光振幅または部分偏光度の結果として変化する。この空間的に変化するデータ収集および処理の1つの目標は、あるレベルを下回る偏光位相の推定値における不確実性の境界を示すことである。ボックス1750は、空間座標系における推定偏光強度の記号マップを示す。偏光振幅の3つの広い領域H、L1、およびL2がある。一実施形態では、Hによって表される領域は、推定偏光度が>10%である、空間領域によって画定することができる。領域L1およびL2は、偏光度が、例えば、5%および1%である、領域である。実施形態では、領域L1およびL2内の収集パラメータおよび処理パラメータのうちの少なくとも1つは、空間範囲全体にわたる推定位相不確実性を向上させるか、またはより良好に合致させるために変化することができる。
ボックス1760は、推定位相正確度を向上させるように増加させることができる、一意的な空間データ収集および処理領域を伴う本発明の別の実施形態を示す。領域Hに関係するデータ収集および処理パラメータがある値である一方で、領域L1では、約2×2多くの偏光サンプルが収集され、領域L2では、10×10多くの偏光サンプルが収集され、収集は、より長い期間およびより広い空間領域のうちの少なくとも1つにわたって、より多くのデータを時間的および空間的に収集すること、およびより高密度のサンプリング周期のうちの少なくとも1つを含む。一実施形態では、増加した数の偏光サンプルは、より広い空間的近隣を通したものであり得る。別の実施形態では、サンプルの増加は、時間における付加的なサンプル、付加的な偏光測定値、ならびに異なる色および結像チャネルにおける測定値のうちの少なくとも1つを通したものであり得る。別の実施形態では、偏光サンプルの増加は、低減した露出および複数の露出を通したものであり得る。
一実施形態では、局所的情報の空間範囲が非常に広く、低い変動を有するとき、オブジェクト空間内の情報を理解するために、非常に少ない検出器要素を利用することができる。別の実施形態では、オブジェクト空間は、低密度ではなく、高度に可変であり、タスクは、そのような信号に対して非感受性であり、オブジェクト空間内の情報を理解するために、非常に少ない検出器要素を利用することができる。
図18は、図5で図示されるものと同様に、双極2検出器運動センサシステムの視野にわたって適用することができる、ローカライゼーションコードの実施形態である。図5の装置に適用されるような図18の実施形態は、システムの特定のオブジェクトFOVとともに変化する、線形コードのシステム1800を示す。図18の左チャネル1810および右チャネル1820は、FOVの関数として、図5のセンサ520および521で測定されるような一式の相補的レンズ領域550の応答を表す。有限数のレンズ領域550について、実際のコードは、図5のL3およびR3の関数として、FOVと対比した階段状構造であり得る。チャネルの数が大きくなるにつれて、または各チャネルに対する個々の光学部が広域FOVを有する場合、コードは、FOVと対比して平滑で連続的になり得る。FOVに位置する特定の移動オブジェクトについて、次いで、特定の相補的レンズ領域kは、ある未知の利得を掛けたA(L)およびA(R)の振幅を伴って、センサによって測定される信号を生成するであろう。
一実施形態では、図18で表される角度および利得正規化コードは、左チャネル1810がx、

によって表され、右チャネルが1−x、

であるようなものである。この場合、最小FOVがx=0によって表される一方で、最大FOVはx=1によって表される。次いで、測定モデルは、利得Gおよび角度xの両方が未知である、L(x)=G*x、R(x)=G*(l−x)である。L(x)およびR(x)の値は、図5上のAおよびAと同等である。
別の実施形態では、総和差計算は、L(x)およびR(x)からxの位置を推定するために十分である。[L(x)−R(x)]/(L(x)+R(x))=2x−1であり、未知の利得Gから独立している。この実施形態では、オブジェクト角xの推定値は、推定値(x)=(l/2)[(L(x)−R(x))/(L(x)+R(x))+1]である。
別の実施形態では、角度は、時間の関数として推定することができ、xにおける任意の隣接位置間のオブジェクトの角速度は、推定値(x)を微分することによって判定することができる。
図19は、オブジェクト角およびオブジェクト運動1905からの角速度に加えて、オブジェクト範囲および速度を推定するために、少なくとも2つの符号化ローカライゼーションシステムをシステム1900で使用することができる、実施形態を図示する。一実施形態では、システム1900は、各システムが図5のものに類似し、両極検出器ペア1920を含有する、少なくとも2つのシステムを含有する。別の実施形態では、2つのシステムはまた、単一の光学部1910内に組み込むこともできる。別の実施形態では、オブジェクト運動1905は、定数およびほぼゼロのうちの少なくとも1つであり、システム1900は、目的とするオブジェクト視野をスキャンするように平行移動および回転のうちの少なくとも1つを受ける。
プロセッサ1970を使用して、2つの異なる位置から既知のオブジェクトまでの角度を推定することによって、システムの利得、オブジェクトの強度等から独立して、範囲推定値を形成することができる。2つの相補的レンズ領域A(Li)A(Ri)およびA(Lk)A(Rk)を横断する、ある運動ベクトル1905を伴うオブジェクトは、それぞれ、2つの時間出力信号1915iおよび1915kを生成する。実施形態では、出力信号1915iおよび1915kは、振幅符号化および時間符号化される。振幅コードは、相補的レンズ領域の中に設計されたコードによるものである。時間コードは、一般的な光学特性、ならびにオブジェクトの運動の方向および速度によるものである。2つのコードは、相補的情報をプロセッサシステム1970に提供しており、よって、一実施形態では、2つのシステムの基線分離Bが把握されている場合に、範囲および速度推定値の精度をさらに増加させるために使用することができる。別の実施形態では、相補的情報は、基線Bならびに未知のオブジェクトの範囲および速度を直接推定するために使用することができる。別の実施形態では、相補的測定ベクトルは、配向および3D位置のうちの少なくとも1つの変化を推定するために使用される。複数の入力に対する判別信号を生じる、2つの検出器出力によって測定されるような未知の遠隔オブジェクト速度ベクトルのための対応する振幅および時間コードを生じるであろう、1本だけの基線Bがある。実施形態では、システム1900は、システム1900の視野内の運動1905の中の離散オブジェクトを数えることができる。
単一、二重、または複数のピクセルおよび重複視野とともに、複数のシステムを使用するとき、システムの配向または運動性および平行移動の判定、また、システム視野内のオブジェクトおよびオブジェクト運動の検出および推定を含む、複数の機能性が可能にされる。図20は、運動性および運動観察および区別のための符号化ローカライゼーションシステム2000の実施形態を示す。システム2000の一実施形態では、アーム2010、2020、および2030の配列は、参照座標系2080において、軸ΔxおよびΔyと同一平面かつΔzに直角であり得る。別の実施形態では、各アーム2010、2020、および2030は、部分的重複領域2014、2024、および2034内でΔzに直角な方向へ、それぞれ、運動推定値2012、2022、および2032を形成する。重複領域は、サブシステム2090における斜線領域2092として示されている。別の実施形態では、運動推定2012、2022、および2032はまた、部分的重複領域2014、2024、および2034ならびに重複領域2092の信号信頼度、雑音レベル、信号レベル、波長、波面位相、波面振幅、ならびに偏光方向および偏光規模の独立推定値のうちの少なくとも1つである、詳細D1、D2、およびD3も含有する。別の実施形態では、詳細D1、D2、およびD3はまた、例えば、オブジェクトエッジ、オブジェクト角、オブジェクト構造、オブジェクトテクスチャ、およびオブジェクトの目的とする特徴のうちの少なくとも1つを含む、オブジェクト特有の情報である。別の実施形態では、詳細D1、D2、およびD3は、オブジェクト特有の情報についての統計を含有する。
システム2000の別の実施形態では、参照座標系2080における各アーム2010、2020、および2030の真の運動および運動性は、アーム2010、2020、および2030ならびに重複領域2092によって形成されるフレームに基づいて結合される。別の実施形態では、運動推定値2012、2022、2032は、相互から独立しており、よって、いくつかの有用な関係および制約が、参照座標系2080および重複領域2092に関して、独立運動推定値とシステム2000における幾何学形状の結合制約との間に存在する。実施形態では、θz=0およびdx1=0であるとき、δx2=0およびδx3=0であり、dy1=k(δy3)およびδy2=δy3であるとき、運動推定値2012を生成するシステムの倍率は、2022および2032のk倍である。
実施形態では、システム2000は、エネルギー2095を強度に変換するための電磁エネルギー変換器2097と、電磁エネルギーを電磁エネルギー変換器2097に輸送するための物理的媒体2096とを含有してもよい。変換されたデータは、d0、dl、...、dNと表される、一式のN+1個の運動推定値2099を形成するように、プロセス2098によって処理される。電磁エネルギー2095は、例えば、紫外線・可視・長波の赤外線波長、音響波長、および電波波長の形態であってもよい。別の実施形態では、電磁エネルギー2095は、例えば、重複領域2092内の偏光状態、波長、空間強度、および空間周波数の変調のうちの少なくとも1つに影響を及ぼすように、検出に先立って物理的媒体2096によってさらに修正されてもよい。別の実施形態では、物理的媒体2096はまた、重複領域2092内の倍率変動、視野、光軸傾斜、視野強度変動、視野偏光変動、および視野収差内容の光学的性質のうちの少なくとも1つに影響を及ぼすように、アーム2010、2020、および2030の間で、電磁エネルギー2095に修正間の変動を付与し得る。
図21は、運動性および運動観察および区別のための符号化ローカライゼーションシステム2100を図示する。システム2100の一実施形態では、アーム2110、2120、および2130の配列が、参照座標系2180において、軸ΔxおよびΔyと同一平面かつΔzに直角であり得る一方で、アーム2140および2150は、Δzと同軸であり得る。一実施形態では、各アーム2110、2120、および2130は、表面2182と交差する非重複領域2114、2124、および2134内でΔzに直角な方向へ、それぞれ、運動推定値2112、2122、および2132を形成する。別の実施形態では、各アーム2140および2150は、表面2182と交差しない非重複領域2144および2154内でΔzと同軸の方向へ、それぞれ、運動推定値2142および2152を形成する。別の実施形態では、運動推定2112、2122、2132、2142、および2152はまた、詳細D1、D2、D3、D4、およびD5も含有する。一実施形態では、詳細D1、D2、およびD3は、例えば、表面2182におけるコントラストおよび構造の独立推定値であり、詳細D4およびD5は、散乱した日光、星の光、および月光のうちの少なくとも1つを含有する、領域2144および2154に対する偏光、強度、コントラスト、および構造の推定値のうちの少なくとも1つである。実施形態では、複数のシステムが、配向および3Dローカライゼーションのうちの少なくとも1つに使用される。別の実施形態では、複数のシステムは、配向および3D位置のうちの少なくとも1つの変化を推定するために使用される。別の実施形態では、配向または配置の推定または検出された変化は、ピクセル間隔より細かい。
システム2100によって説明される本発明の実施形態では、参照座標系2180における各アーム2110、2120、2130、2140、および2150の真の運動および運動性は、アーム2110、2120、2130、2140、および2150によって形成されるフレームに基づいて結合される。実施形態では、表面2182に基づく運動推定値2112、2122、2132は、相互から独立しており、また、運動推定値2142および2152からも独立している。実施形態では、共通参照座標系2180に物理的に依存している多数の独立運動推定値を使用して、全体的な運動性および運動推定値のロバスト性が向上させられる。
別の実施形態では、システム2100はさらに、広域システム視野(SFOV)からさらに利益を享受する。SFOVは、参照座標系2180の運動性によって利益を享受し、実施形態では、表面2182上の低密度サンプリング領域2114、2124、および2134、また、低密度サンプリング領域2144および2154を含有する。参照座標系2180の運動性は、θzでシステム2100を回転させることによって、またはΔz軸の周囲での回転によって示され、低密度サンプリングに、[dxl,dyl]、[dx2,dy2]、および[dx3,dy3]を伴う運動性を推定させ、また、[dx5,dy5]および[dx4,dy4]として見掛けの遠視野運動を推定させる。実施形態では、遠視野運動推定値および運動性推定値は、システム2100の剛体動的制約に対応しなければならない。運動性パラメータに合致しない、高い値の詳細D4またはD5によって示されるように高度な信頼度を伴って生成される運動推定値は、運動性から独立した独立運動推定値が遠視野内にあり、したがって、外部移動アセットの検出が、システム2100によって具現化されるような移動および運動性プラットフォームのために可能にされることを示す。別の実施形態では、θzで回転するためのSFOVは、表面2182上の円弧において掃引される領域2114、2124、および2134によって形成される環帯と、水平線、ならびに天空光、月光、および薄明のうちの少なくとも1つによって形成される表面を横断する円弧において、掃引領域2144および2154によって形成される水平帯とを含む。別の実施形態では、符号化ローカライゼーションシステム2100は、他のオブジェクトの相対位置を測定する。別の実施形態では、符号化ローカライゼーションシステム2100は、他のオブジェクトの絶対位置を測定する。別の実施形態では、符号化ローカライゼーションシステム2100は、それ自体の相対配向および相対位置のうちの少なくとも1つを測定する。別の実施形態では、符号化ローカライゼーションシステム2100は、それ自体の絶対配向および絶対位置のうちの少なくとも1つを測定する。
図22は、符号化ローカライゼーションシステムのサンプリング多様性を伴う本発明の実施形態を図示する。巻き上げシャッタ露出とともに動作する検出器を使用する、運動および運動性区別システムを含む、多くの符号化ローカライゼーションシステムでは、行(または列)露出時間に対して速い運動が、捕捉される画像を歪曲し得、サンプリング多様性が採用される。開示された発明の別の実施形態では、巻き上げシャッタ補正が、図22で図示されるようなサンプリング多様性を通して符号化ローカライゼーションシステムに提供される。センササンプリングに対する水平運動を伴うオブジェクトについて、センサ行が、2220および2240のように時間シーケンスまたは巻き上げシャッタサンプリングにおいてサンプリングされるときに、結果として生じる画像は、単一の瞬間にオブジェクトの全体的サンプリングに対して剪断される。一実施形態では、剪断は、把握されており、剪断がない適正な画像を回復させるために、信号処理を使用することができる。別の実施形態では、オブジェクトは、2260のように、行を横断し、行サンプリング/読取に向かって移動しており、オブジェクトの画像は、垂直に圧縮される。別の実施形態では、オブジェクト運動は、オブジェクトの画像が2280のように拡張されるように、行サンプリング/読取の方向を伴う。
システム2220および2240が、形成された画像の剪断を示す一方で、2260および2280は、オブジェクトの運動および方向依存性拡大を示す。2260は、倍率が縮小されるとオブジェクトの情報の損失を被る一方で、2280は、オブジェクトの倍率が増加すると情報の増加を示す。巻き上げシャッタサンプリングを伴ってセンサに向かって、またはセンサから離れて進行するオブジェクトはまた、経時的なオブジェクトのサンプリングが、変化するオブジェクト距離により時間依存性倍率をもたらすであろうため、運動依存性倍率を被るであろう。
実施形態では、符号化ローカライゼーションサンプリング多様性システム2200は、多様な幾何学形状での複数の巻き上げシャッタサンプリングセンサから成る。システム2210は、垂直および水平の両方で行をサンプリングする。実施形態では、システム2210は、配向されるセンサを使用し、行および列の読取方向を変更することによって達成されてもよい。別の実施形態では、システム2210は、センサに提示されるオブジェクトの画像に対して有効読取方向を逆転させるために、鏡および光学要素を使用することによって達成されてもよい。別の実施形態では、システム2210は、センサを回転させ、センサ読取タイミングを変更することによって達成されてもよい。システム2212は、読取方向が相互に直角ではない、別の実施形態である。システム2214は、センサ読取方向が垂直方向に相互と反対である、符号化ローカライゼーションサンプリング多様性の別の実施形態である。システム2215は、センサ読取方向が水平方向に相互と反対であり、相互に向かって読み取っている、実施形態である。システム2216は、センサ読取方向が水平方向に相互と反対であり、相互から離れて読み取っている、実施形態である。符号化ローカライゼーションサンプリング多様性の別の実施形態では、システム2214、2215、および2216は、複数のセンサによって、または各フレーム後にサンプリングおよび読取の方向を変更する単一のセンサを用いて可能にすることができる。実施形態では、システム2218は、アレイから成り、センサ読取方向群は、多種多様のセンサにわたって様々である。実施形態では、システム2200の中のセンサ間のタイミング歪曲は、行およびピクセルサンプリングにおいてさらなる多様性を生じる。
図23は、図6で描写されるような重複FOV2×2符号化ローカライゼーションシステムを使用して画像を形成する、符号化ローカライゼーションシステムの実施形態を図示する。コードは、ローカライゼーションを増進し、また、より短いシステムにおいて画像形成を可能にすることもできる。一実施形態では、ローカライゼーションコードの位置は、レンズ付近からセンサ面まで様々であり得る。別の実施形態では、コードは、振幅および位相の両方を含むことができる。別の実施形態では、コードはまた、ランダムまたは疑似ランダム関数から成ることもできる。一実施形態では、遠隔オブジェクトの複数の測定が、時間、スペクトル、空間、および偏光の少なくとも1つの領域で同時に行われる。別の実施形態では、遠隔オブジェクトの複数の測定が、時間、スペクトル、空間、および偏光の少なくとも2つの領域で同時に行われる。別の実施形態では、測定が可視波長で行われる。別の実施形態では、測定がIR波長で行われる。
2×2実装のための特に有用なコードは、偏向正弦から成る直交コードである。このタイプのコードは、一般な場面のフィッシャー情報を最大限化することができる。
一実施形態では、画像面またはその付近に配置され、2304および2306によって図示される、直交マスクまたは符号化関数Ci(x,y)は、以下によって求められる。
式中、変数wは、dxがピクセルの辺長である、2*pi/dxに等しいように選択される。このようにして、4つのコードは、4つの様々な位相を伴う偏向正弦の単一の周期である。コードphiの絶対位相は、各コードについて把握される必要がある。xおよびy方向での上記の複数組の正弦には、2パイ対称性がないが、縮小した高さの結像および検出のために依然として有用であり得る。1つのピクセルにつき2つの値を有するコードの一実施形態は、以下によって求められる。
他の2つのコードは、()′がマトリクス転置行列を表す、C3=CI′およびC4=C2′によって求められる。センサ上のパターンは、図23の配列2308として象徴的に示されている。実践では、コードは、特定の光学チャネルに割り当てられた全てまたはほぼ全てのピクセルにわたって配列される。一式のコードは、システムを表すバイアスセットとして書くことができるか、または

である。
次いで、対応するオブジェクト点を伴う4つ全てのチャネルに関係する一式のサンプリングされた測定値Mは、

として書くことができる。
別の実施形態では、所望される情報は、結像された場面の全ての値について、元のサブピクセル画像値、またはデータIsである。Iは、実際の物理的ピクセルの分解の2倍を有することに留意されたい。または、所望のデータは、サンプリングされた2×2多重開口画像に対するサブピクセル画像である。実施形態では、最大分解能画像が、サンプリングされたデータMの線形演算を通した符号化多重開口画像サンプルに基づいて生成され、または、

であり、式中、pinv()は、Cの疑似逆数である。
を構成するコードの選択の実施形態では、逆数をよく調節することができる。別の実施形態では、偏向正弦を含有する直交コードが、よく調節されたCの実施例である。先験的情報を通して、並行測定を通して、または符号化データに基づく推定値を通してのいずれかで、符号化されていないピクセルサンプルの平均値が利用可能である場合、この平均値を測定データMから減算することができる。これは、バイアスを持たないコードを使用することと同等である。次いで、Cの列は、直角になり、その逆数は、理想的に調節されて、最低光状況で最良の性能をもたらす。実施形態では、縮小した高さのシステムのためのコードは、2パイ対称性を有する。実施形態では、バイアスの推定値は、測定値Mの合計によって形成することができる。
別の実施形態では、配列2308におけるコードは、波長特異的である。配列2308は、一実施形態では波長を選択することができ、別の実施形態では波長の選択に敏感であり得る。実施形態では、より小さい画像2320は、可視波長、近赤外線、中波赤外線、および長波赤外線波長の選択のうちの少なくとも1つである。実施形態では、より小さい画像2320は、可視波長、近赤外線、中波赤外線、および長波赤外線波長の選択のうちの少なくとも2つである。
図23はまた、サイズおよび重量の1/2、ならびに効果的に一定の画質を達成するために、上記の方法および装置を使用するシミュレートされた実施例も図示する。元の分解能または単一開口の画像2310は、サンプリングされたデータ2320を伴って偏向直交2×2符号化ローカライゼーションシステムを通して結像されるようにシミュレートされる。サンプリングされたデータ2320は、それぞれ、コードC1、C2、C3、およびC4のそれぞれを通して結像される、4つのチャネル2321、2322、2323、および2324を表す。同一のコードが、特定のチャネルにおける測定値の各ピクセル上で使用される。次いで、測定値2321、2322、2323、および2324は、コードによって判定される一意的な様式において全て異なる。単一のチャネル画像2330は、さらなる空間的詳細を示す。実施形態では、疑似逆数を使用して2×2測定データを組み合わせて、再構築された画像2340がI_estimateから生成される。この再構築された画像は、元の単一開口画像2310と本質的に同一の分解能を有するが、単一開口システムのサイズおよび重量の約1/2である2×2符号化結像チャネルを伴う。実施形態では、全体的な光学システムの長さを短縮するために、相補的チャネルが選択される。別の実施形態では、符号化ローカライゼーションシステムは、測定値の総数に対応する分解能で最終画像を形成するようにデジタル処理で組み合わせられる、相補的測定値を提供する。
図24は、一般化された符号化ローカライゼーションシステムのための設計方法の実施形態である。情報理論は、アルゴリズムからシステムを理想的に分離し、特定のシステムのための定量化可能タスクの観点で最適化された設計を生じることができる。そのような設計方法のフローチャートが図24に説明されている。このタイプの方法の1つの特定の利点としては、多くの場合、複雑すぎて専門家でさえも把握できないシステム空間にわたって、真の全体的な最適化を行うことができる。
一実施形態では、本方法は、特定のシステムのシステム性能を最大限化しながら、サイズ、重量、および電力を削減することに関連する、基本的情報レベルでのシステムトレードオフの基本理解から始まる。情報理論は、理想的な推定量の正確度(または標準偏差)が信号対雑音レベルと直接相関することを教示する。(より多くの信号、より少ない信号等であるが)SNRを増加させることにより、理想的な推定量の正確度を直接増加させ、理想的な推定量の標準偏差を減少させる。推定量の正確度を増加させることは、システムの情報容量の増加と同一である。N個のピクセルおよびSのSNRを伴う一般的なシステムが、N/2個のピクセルおよび2*S SNRを伴う一般的なシステムと同じくらい多くの遠隔オブジェクトについての情報を有することができる、情報の意味で、ピクセルおよびSNRをトレードすることができる。一実施形態では、開口の数は、SNRならびにシステムサイズおよび重量に関係する。
一実施形態では、ステップ2は、システムの一般的なパラメータ、システムの一般的な未知数(公差、温度等)、ならびにオブジェクト場面のパラメータおよび未知数(理想的な標的表現、標的「クラッタ」等)のソフトウェアモデルを生成することを伴う。パラメータは、決定的であり、システムの特定の状態を制御すると見なされる。未知数は、(特定の標的の数および位置のような)推定される数量、または一般に、標的の推定に影響を及ぼし得る数量のいずれか一方である。一実施形態では、システムモデルは、一式のパラメータおよび未知数を考慮して、測定されたパラメータの雑音がないシステム推定値を生成する。
ステップ3では、一実施形態は、特定の一式のパラメータ、ならびにフィッシャー情報およびクラメール・ラオ限界等の情報理論について、他の未知数の存在下でシステム未知数の理想的な不偏推定量の性能を予測する。システムパラメータは、タスク特有の標的に対するシステムの実際の情報容量に直接関係する。一般的な目標は、ステップ4のように、比較および調整を通して情報を最大限化する理想的なパラメータセットを見出すことである。
一実施形態では、この情報ベースの設計方法が提供することができる、少なくとも1つの目標は、特定のシステムを特定のモデル化オブジェクト場面に合わせる能力である。例えば、場面が多数の未知数(またはクラッタと呼ばれることもある)を有するとき、これらの未知数は、目的とする特定の未知数の推定に悪影響を及ぼし得ることが周知である。この影響を最小限化するために、情報ベースのアプローチは、システムが、意図的にクラッタのゼロ空間および特定の所望の未知数の信号空間の交差点にあるように、システムを設計する。これの単純な実施例は、2つの密接して離間した標的である。第2の標的の存在は、特に、それらの放射または反射エネルギーが幅広く異なる場合に、第1の標的の推定に悪影響を及ぼし得る。一実施形態では、最適化された情報ベースのアプローチは、2つの標的の相互結合が最小限化されるように、利用可能なシステム自由度に対してシステムを直交させようとするであろう。
図24のステップ5−8は、より多くのパラメータを追加することによって解決策を拡張する。最初に、特定のシステムの情報理論の基本原理の理解とともに、ステップ1−4において小型パラメータセットおよびシステム複雑性モデルを用いて開始することによって、ステップ5−8でシステムモデルのさらなる複雑性が追加されるにつれて、全体的な最適条件に近づき、従うことができる。
設計が好適に成熟しているとき、設計者は、ステップ9で特定のアルゴリズムをシステムに挿入することができる。アルゴリズムおよびシステムの統計的シミュレーションは、情報ベースの設計努力から予期される性能と比較することができる。実践では、多くの場合、実アルゴリズムを伴う実際のシステムを用いて、情報ベースの性能に達することは困難であり得るが、理想と比較したシステム性能の相対レベルを判断するためにガイドとして、統計的性能および情報ベースの性能の比較を使用することができる。
図25は、図24の方法を使用した、最適化された2ピクセルシステムの実施形態である。2520を伴うグラフ2510は、ローカライゼーション符号化システムへの情報ベースの設計アプローチの一実施例の始点の実施例である。グラフ2510では、右チャネル2512および左チャネル2514は、角度検出のために最適化されるであろう。この実施例について、雑音は、1に等しい分散を伴う付加未補正ガウス雑音である。仮定システムパラメータは、平行光学軸ならびに既知の基線および視野を伴う2つの単一ピクセルチャネルをモデル化する。光学システムは、単一ピクセルチャネルによって出力される強度が多項式によって定義されるように設計され、最初の多項式は、2つの係数(0次および1次)を有し、視野角と対比した線形応答を生成する。最初のチャネル応答は、グラフ2510によって見られるように、相互の鏡像である。
未知の値は、システム利得Gおよび標的角であると仮定される。標的角の関数としての始動システムのためのクラメール・ラオ限界が、グラフ2520に示されている。応答2522は、視野角の関数として偏向されるか、または変化する。グラフ2500および2550の集合は、それぞれ、結合システムとして、協調的に標的情報を符号化することによって所望の推定量分散を形成するように協働する、多項式コードのシステム利得、バイアス、および空間的変動を含む、全体的な設計特徴を具現化するという点で、「システム」と見なされる。
最適化後、メトリックとして標的角へのCRBを用いると、グラフ2530を伴う2550のシステムが結果として生じる。グラフ2530では、右チャネル2532および左チャネル2534は、角度検出のために最適化される。各チャネルに対する角度応答は、もはや線形ではなくなり、より低いCRBをもたらす。(未知の利得Gによって正規化される)CRBの値は、約0.6(グラフ2560の中の線2562)であり、また、視野角にわたって均一であるため、不偏である。この値は、2チャネルコヒーレントシステムの情報理論原理から予期される値より高い。2チャネルコヒーレントシステムは、単一チャネルシステムの1/2である標準偏差のCRBを有するべきである。または、最適な解決策のCRBのための全体的な最適条件は、0.5*Gとなるべきである。この時点で、設計者は、非最適性能を受け入れ、多項式形態から正弦へ測定のパラメータのタイプを変更すること、または推定CRBが理想的な2チャネル性能レベルに達することができるように、システムパラメータを再構成すること等、システム複雑性を追加し続けることができる。
図25は、最初に、各チャネルが単一のピクセルを有する、2開口2チャネルシステムとして実装されるように選択されたが、それは、特殊単一チャネルシステムと見なすこともできる。実施形態では、隣接ピクセルが図25の強度対視野角応答を有する、単一開口システムは、空間変異型システムとなるであろう。空間変異型システムは、一般に、ツールの不足により、設計することが極めて困難である。しかし、各チャネルが単一のピクセルのみに影響を及ぼす、一連の別個のチャネルとしてシステムを見なすことによって、開示された情報ベースの設計方法および結果として生じる装置を通して、空間変異型システムを設計する比較的単純な方法を作製することができる。本発明を具現化する1つの装置では、特殊空間変異型システムは、図25の角度応答が隣接ピクセルにわたって実現されるように、3D指数、吸収、屈折、および回折のうちの少なくとも1つから構築することができる。このシステムの特定の利益は、加工および組立が単純化されるように、空間変異型システムが直接的にセンサ上へ単純な搭載を可能にできることである。
ローカライゼーションコードは、特定のシステム目標に応じて、極めて複雑であり得る。多くのシステムでは、異なる結像チャネルから合致オブジェクト点を見出すためのタスク、または対応性マッピング問題は、困難であり得る。コードは、迅速かつ確実に画像対応性を見出す能力を向上させるとともに、高分解能推定をもたらすように調節することができる。
図26は、本発明の実施形態であり、狭域FOVおよび広域FOVローカライゼーションの両方を可能にするコードの構造を説明する。基礎コード2610は、図25のグラフ2510の単純な線形コードである。この同一の構造は、任意のタイプのコードに有効である。構造2600では、線2610は、強度(垂直軸)の観点で正規化視野角(水平軸)にわたる広域FOV線形コードを示す。類似バージョンであるがモジュロ形態のコードは、図26の線2620において狭域FOVコードを形成する。狭域FOVコードは、結像チャネル間の小型近隣内で画像点を区別するか、または対応させることを支援するのに役立つ。狭域視野コードは、1ピクセル以上、4×4ピクセル以上、10×10ピクセル等であり得る。広域FOVコード2620は、広域FOVにわたる曖昧性を除去するために、および多重分解能処理を向上させるために、狭域FOVコード2610とともに使用される。
一実施形態では、グラフ2630は、乗法演算を通した狭域および広域FOVコードの組み合わせを説明する。別の実施形態では、グラフ2640は、加法および拡大縮小を通して組み合わせられた狭域および広域FOVを説明する。拡大縮小は、強度値が0から1の範囲内であることを確実にするために使用される。
図27は、オブジェクト位置についてのフィッシャー情報を増加させる、4チャネル符号化システムの一実施形態である。グラフ2710は、グラフ2730の4つの非負測定チャネルから形成された4つの符号化チャネルのシステムである。これは、図10のシステムに類似するが、4つの代わりに3つのチャネルを伴う。
グラフ2730から、チャネルは、バイアスの追加により非負であり、2パイ対称性を達成するように90度位相である。この信号の組み合わせは、2720の理想的な不偏システムと比較して、グラフ2740に示されるように、信号部分空間および妨害部分空間直交性を保持する。4符号化チャネルは、オブジェクト位置についての同一のフィッシャー情報またはCRBを有する。
ローカライゼーションコードはまた、3D角度推定システムの単一ピクセルにおいてエッジ角度および位置を推定するために使用することもできる。各結像チャネルのコードは、覆われたピクセルの面積だけではなく、オブジェクトエッジ位置および配向(または角度)の関数であり得る。測定されたピクセル差が雑音と比較して大きくあり得る場合には、実用的な単一ピクセル多重チャネルエッジ推定を達成することができる。
図28は、エッジ方向推定を説明する、本発明の実施形態である。各チャネルのピクセル上の配向およびローカライゼーションコードにより、ピクセルの測定された出力は、エッジ角および面積の両方の関数であり得る。システム2800では、ピクセルの上側の行2810は、正方形整合にあり、ピクセルの下側の行2820は、非正方形整合にある。一実施形態では、測定されたピクセル出力は、エッジによって覆われたピクセルの面積およびピクセルまでのエッジの角度の関数である。または、ピクセル出力は、各結像チャネルに対するあるP(面積、シータ)によって表すことができる。この数量は、各チャネルから推定または測定することができる。別の実施形態では、覆われたピクセルの3つの推定値、およびピクセルまでのエッジ角度は、エッジ角度および位置の推定値を直接解くために使用することができる。または、3つのピクセル値、および各結像チャネルに対する関数P(面積、シータ)の知識により、エッジの配向を推定する。別の実施形態では、この情報はまた、画像領域を使用して推定精度を増加させるために使用することもできる。
一実施形態では、ローカライゼーションコードの実装は、古典的な光学部設計または位相/振幅マスクを通すことができる。ローカライゼーションコードは、特殊「相対照度」プロファイルを通して実装することができる。これらは、光学部とセンサとの間の光学部設計および/または位相/振幅マスクを通して可能にすることができる。センサピクセル応答が常に主光線角の関数であるため、ピクセルの中への光の角度を制御する特殊光学設計は、入力角およびピクセル角度応答と対比して受容した強度を符号化することができる。
別の実施形態では、ローカライゼーションコードは、光学部設計を通して可能にすることができる。視野角を伴う正弦強度減退は、視野を伴う開口の投影、視野角を伴う画像面までの焦点の角度、および視野角を伴うオブジェクトおよび画像面までの距離を介して設計することができる。角度強度減退はまた、視野にわたる主光線角(CRA)およびセンサ不一致の関数として設計することもできる。このタイプの設計は、広範囲の余弦相対照度プロファイルを達成することができる。これらのプロファイルの設計は、信号処理およびシステム効果とともに、実装の容易性、SNR、および推定正確度の間の妥協を可能にし得る。
別の実施形態では、ローカライゼーションコードは、光学部とセンサとの間に配置される位相/振幅マスクを通して可能にすることができる。光学部とセンサとの間に位置付けられるマスクは、幅広い融通性を有することができる。非古典的な応答が、単純な光学システムを用いて可能である。センサピクセルの上または付近に位置付けられるマスクは、雑音の存在下で(点に対する)サブピクセル位置ならびに(エッジに対する)サブピクセル角度および位置を測定することができるように、設計することができる。光学部およびセンサCRAとともに合同で最適化されるリソグラフィックマスクは、最大融通性、および超精密リソグラフ加工精度、および体積量における低費用を提供することができる。
図29は、ピクセルの重量および数のための設計空間を最適化するための本発明の実施形態である。このタイプの設計は、SNRを、サイズ、重量、電力、費用である、ピクセル数とトレードすることができる、ローカライゼーションシステムに特に関連する。曲線2910は、測定されたSNRおよび正規化角度FOVの関数として、2パイ対称性を伴う4チャネル符号化設計の標準偏差を表す。1.0の角度FOVは、単一のピクセルの瞬間FOVに対応する。角度推定値の標準偏差が0.5未満であるとき、次いで、サブピクセル角度精度が可能である。一実施形態では、これらの設計に基づくシステムは、アナモルフィック光学部および1D線形センサを使用し、4つの符号化チャネルは、図27からの2730のシステムのように、2パイ対称性を伴うシステムを形成する。交差する曲線2910上の点、および7というSNRを考慮されたい。これは、0.03ピクセルという角度分解能の理想的な標準偏差をもたらす。
測定されたSNRは、オブジェクトまたは標的の照度および範囲、集合光学部の面積、光学部の非理想的な効果、およびセンサの感度の関数である。
典型的なシステムでは、ピクセルサイズは、多くの場合、(lambda/D)によって求められる、光学部の分解能にほぼ合致するように設計されている。システムパラメータが約7というSNRをもたらすために十分である場合には、ピクセルサイズ(または同一のFOV内のピクセル数、または光学倍率)を1/0.03倍または33倍に調整することができる。一次元では、33倍少ないピクセルを必要とし得る。類似関連パラメータを伴う2Dシステムでは、ピクセル数を33*33だけ、または約1000倍削減することができる。
十分なSNRを伴うシステムについては、ピクセルサイズおよびピクセル数を一定に保つことができるが、光学部のサイズを縮小することができ、それによって、サブピクセルローカライゼーション精度に必要とされるレベルまでSNRを低下させる。
図30は、設計方法およびトレード空間3000の実施形態である。所与のタスクのために最適化することができる、多数の部分空間または自由度3010がある。実施形態では、部分空間または自由度S1、S2からSnは、例えば、波長、時間、空間的範囲、視野、ならびに露出およびサンプル数のうちの少なくとも2つである。所望のトレードオフを決定付ける信号特性は、推定された、または既知の振幅およびバイアスのうちの少なくとも1つを含む。トレード空間3010内のトレードオフを判定することにおけるステップはまた、ループとして3000で示されている。ステップ1は、固定および変数自由度を判定することである。センサまたは視野が移動している、一実施形態での動的状況では、サンプル間の時間が固定されてもよく、露出および空間的範囲のうちの少なくとも1つは、可変パラメータである。一式のパラメータおよびパラメータ値を考慮すると、感知システムによって捕捉される情報は、ステップ2で評価される。一実施形態では、処理は、平均化およびフーリエ変換処理のステップを含んでもよい。処理の出力は、信号位相、振幅、バイアス、雑音、および妨害パラメータについてステップ3で評価される。パラメータセットの状態を考慮すると、結果は、ステップ4でシステムによって報告され、結果はまた、現在のパラメータ状態を評価するために使用される。変数パラメータは、必要に応じて調整される。一実施形態では、処理の空間的範囲は、妨害パラメータの効果を低減させるように調整される。別の実施形態では、妨害パラメータは、雲、木、葉、汚染、および塵のうちの少なくとも1つから成る。別の実施形態では、露出は、ほぼ等しいバイアスおよび振幅推定値を達成するように調整される。
図31は、測定用途を開示する本発明の実施形態である。シーケンス3100では、少なくとも運動性および運動区別を行うことができる符号化ローカライゼーションシステムは、初期位置3110にあり、ピッチ、ヨー、およびロールシーケンスの3D平行移動および再配向を通して、位置3115に到達する。この実施形態では、運動中のシステムの所望の出力は、下向きのサンプリングシステムのx−y面3130上の視野3120の投影である。グラフ3150は、整流を伴ってこれらの視野の投影結果を示す。実施形態では、運動性および運動区別システムは、一般的な運動を受けながら、それ自体のピッチ、ヨー、ロール、x平行移動、y平行移動、およびz平行移動のうちの少なくとも1つを推定する。実施形態では、運動性および運動区別システムは、別のオブジェクトに付随した一般的な運動を受けながら、ピッチ、ヨー、ロール、x平行移動、y平行移動、およびz平行移動のうちの少なくとも1つを推定する。実施形態では、運動性および運動区別システムは、外部オブジェクトのピッチ、ヨー、ロール、x平行移動、y平行移動、およびz平行移動のうちの少なくとも1つを推定する。
図32は、測定用途を開示する本発明の実施形態である。一実施形態では、符号化ローカライゼーションシステム3212は、部分的重複視野3214を伴う運動性および運動区別システムであり、オブジェクト3218および表面3215を考慮して平行移動させられる3210。別の実施形態では、ローカライゼーションシステム3222は、非重複視野3224を伴う運動性および運動区別システムであり、オブジェクト3228および表面3225を考慮して平行移動させられる3220。別の実施形態では、非重複視野は、相互に接する。別の実施形態では、平行移動は、目的とするオブジェクトを横断して順方向および逆方向のうちの少なくとも1つである。実施形態では、ローカライゼーションシステム3212および3222は、ある速度で移動し、オブジェクト視野内の相対運動の変化を比較することによって固定されるオブジェクトを感知する。図32では、グラフ3250において、表面がセンサ3212および3222から一定の距離であると分かった場合には、2つの視野が、経時的に位置測定値における間隙3252を形成するように異なる速度で移動していると結論付けることができる。別の実施形態では、対合視野3214および3224は、相互に厳格に関係していることが分かっており、相対位置3252の差は、相対表面高度の検出および尺度、ならびに表面3215と比較したオブジェクト3218および3228の絶対表面高度の尺度のうちの少なくとも1つである。別の実施形態では、オブジェクト3218は、少なくとも、高度、幅、深度、ピッチ、ヨー、およびロールの尺度についてプロファイル作成される。グラフ3260では、左右の視野3214の差が示され、オブジェクト3218への相対範囲変化を示す。前方運動中に、右センサが、時間的に最初にオブジェクト3218を検出することが示されている。右のセンサの傾斜が上昇する一方で、左のセンサの傾斜は短期間にわたって一定のままである。シーケンスは、グラフ3260の第2の半分の時間に示されるように、逆運動のために逆転させられる。
図33は、測定用途を開示する本発明の実施形態である。オペレータ3320は、符号化ローカライゼーションシステムを装備した器具3325を使用する。符号化ローカライゼーションシステムは、参照視野測定値3328およびオブジェクト測定視野3327のうちの少なくとも1つを形成する。一実施形態では、参照視野測定値3328は、空の部分偏光の規模3582および角度3584を含む。実施形態では、視野3327は、3D写真点情報3355を捕捉する。コードは、画像3350内のオブジェクト位置3355のサブピクセル測定を可能にするように、以前に開示されたように動作する。別の実施形態では、コードは、参照画像を形成するように動作する。実施形態では、検出器ピクセル間隔と比較して画像面において高い精度で測定される、長距離写真点測定を行うために方法および装置が提供される。
類似測定活動では、符号化システムが、参照視野測定値3368およびオブジェクト測定値視野3360のうちの少なくとも1つを形成する。一実施形態では、符号化システムは、視野3368を使用して測定システムを限局する。別の実施形態では、符号化システムは、目的とするオブジェクト3362を限局する。別の実施形態では、3362の位置についての情報は、座標変換3365を通して座標を移送することによって、別のオブジェクト参照点3370を限局するために使用される。実施形態では、既知の点から新しい点への位置および配向参照情報のうちの少なくとも1つを移送するように、方法および装置が提供される。
図34は、符号化ローカライゼーションシステムを使用した測定および制御を開示する、本発明の実施形態である。システム3400では、符号化ローカライゼーションシステムは、参照視野測定値3410ならびに表面測定視野3415および3420のうちの少なくとも1つを形成する。視野3410は、相対および絶対配向および位置情報のうちの少なくとも1つを提供する。視野3415および3420は、一実施形態では、表面3430上の平衡化動作のプレビューおよびポストビュー測定値を提供するように協働する。FOV3410からの配向およびローカライゼーション情報、およびFOV3415からの表面情報は、本システムが搭載される車両を制御するか、またはその制御を支援するために、フィードバックシステムで使用することができる。システム3450はまた、車両搭載型測定システムの実施形態でもある。システム3450では、符号化ローカライゼーションシステムは、参照視野測定値3460および表面3480を測定するための表面測定視野3465のうちの少なくとも1つを形成する。システム3460および3465は、別の実施形態では、GPS中断または劣化の場合にローカライゼーション情報を提供する。別の実施形態では、システム3450は、道路標識、電柱、マンホール、および陸橋のうちの少なくとも1つを検出および限局する、符号化ローカライゼーションシステム3470を提供する。実施形態では、高速道路情報のデータ収集およびデータ削減のために方法および装置が提供される。実施形態では、機械制御用の配向および3D位置推定のために方法および装置が提供される。
図35は、符号化ローカライゼーションシステムを使用した測定および記録を開示する、本発明の実施形態である。シナリオ3500は、構造の内部および外部の調査を描写する。点線3502が、内部および外部タスクの間の分割を描写する一方で、経路3504は、構造の中への進入であり、経路3506は、構造内の第2の位置への横断である。一実施形態では、オペレータ3510は、出入り口3514に進入しながら、符号化ローカライゼーションシステム3512を採用する。符号化ローカライゼーションシステムは、オペレータ移動をマップするための相対運動および配向ベクトルを提供する、周辺環境に対するオペレータの平行移動および配向を測定する。別の実施形態では、符号化ローカライゼーションシステムは、出入り口の寸法および出入り口の位置のうちの少なくとも1つを測定する。建設中の建築物では、ローカライゼーションシステムは、構造およびその特徴の進捗および正確度のための記録機構の役割を果たすことができる。別の実施形態では、オペレータ3510は、構造内、ならびに窓3522および屋根開口部3524の視界内で、経路3504に沿って位置3520まで移動する。一実施形態では、FOV3526を伴う符号化ローカライゼーションシステムは、屋根開口部の寸法および位置を測定し、FOV3528は、屋根開口部3524をさらに限局するように、参照点3590、また、空および地平線構造3594を測定する。一実施形態では、空構造は、空3580の部分偏光の規模3582および角度3584であってもよい。開口部3524、ならびに構造を接続するための構造軌道計画の外部の参照へのその関係および配向を測定することによって、遠隔構造間の配管、伝送線回廊、および換気を高精度で達成することができる。構造の多様な部分が長距離にわたって数ミリメートル以内で交わらなければならない、複雑な建築構造では、そのような軌道推定および計画が、建築進捗および精度をモデル化および制御することにおいて不可欠であり得る。
別の実施形態では、オペレータ3510は、再び、外部参照にアクセスすることなく、位置3520から経路3506に沿って厳密に構造3550の内部の位置まで移動する。実施形態では、オペレータは、詳細3560および3565を視認するために、視野3555とともに符号化ローカライゼーションシステムを利用する。詳細3560および3565は、例えば、壁および壁紙における織物およびランダム構造、床および床仕上げ材、ならびに照明不連続性からの影および構造化照明からのハイライトを含む、視野内のオブジェクトおよび視覚的構造である。実施形態では、オペレータ3510は、GPSの援助なしで構造および構造内のオブジェクトのうちの少なくとも1つの絶対座標でマップすることができる。実施形態では、モデル建築プロセスへの入力のために遠隔オブジェクト配向および3D位置推定のうちの少なくとも1つを行うための方法および装置である。
別の実施形態では、図36は、人間の視認者のための情報を追加するための符号化結像チャネルの使用を示す。多くのシステムでは、コントラストを増加させることによって、人間の視認者のための画像情報が増加させられる。これらのシステムにおける照明の強度または露出の長さが減少するにつれて、3610に示されるように、コントラストが回避不可能に減少する。より低い照明レベルがオブジェクトから受容されるほど、コントラストが低くなり、人間の視認者が画像を理解、検出、または使用することが困難になる。一実施形態では、符号化ローカライゼーションシステムは、古典的な結像システムと比較して照明レベルに低感受性であるコントラストを有する他の領域中で情報を融合することによって、人間の視認者にとってコントラストを増加させるために使用することができる。別の実施形態では、符号化偏光システムは、図17のグラフ1700に示されるように、照明に低感受性である振幅を有する。露出レベルを劇的に低減させることは、部分偏光の振幅を減少させず、測定された信号のより低いショット雑音成分をもたらす。3610に関係する偏光信号の振幅成分は、3620に示されている。
人間の視認者のための情報を追加する別の実施形態では、偏光測定ベクトルの位相は、コントラストを有し、位相のコントラストは、部分偏光の振幅を確実に推定することができる限り照明に低感受性である、−パイからパイの範囲として定義される。3610に関係する信号の偏光位相は、3630に示されている。
非常に多数のオブジェクトは、偏光領域中で自然信号またはシグネチャを有する。略平滑表面、人工表面、皮膚、ガラス、および金属は、低費用の偏光コントラストを可能にすることができる、特異的な偏光シグネチャを有することができる。実施形態では、入射偏光が把握されているか、またはそれを計算することができる場合には、偏光信号はまた、オブジェクトの3D幾何学形状を推定するために使用することもできる。別の実施形態では、偏光信号は、コントラスト増進特徴としてのみ使用し、従来の画像と融合することができ、または人間の視認者を補助するように、(偏光信号空間境界の輪郭等の)偏光信号の関数を他の領域からの信号と融合することができる。別の実施形態では、偏光信号はまた、変化検出を監視するために使用することもでき、また、自動検出、認識、および推定のためのコンピュータ処理とともに使用することもできる。
実施形態では、図37は、信号の検出、認識、または推定を促進するための時間、空間、および偏光の混合を示す。ボックス3710は、なんらかの参照に対するオブジェクトおよび偏光測定値P1を示す。ボックス3720は、同一のオブジェクトが参照に対して移動しており、別の偏光測定値Pnが得られることを示す。一実施形態では、図3から等、一連の偏光測定値を得ることができる一方で、オブジェクトは、運動中であり、偏光シグネチャは、空間運動による成分を含有するであろう。ボックス3730は、波長領域中の略低コントラストを伴う場面を描写する。偏光測定値を使用することにより、ボックス3740のように、偏光規模および角度を使用することによって、また、部分偏光ベクトル推定値を波長領域の中へ融合することによって、コントラストを向上させることができる。一実施形態では、偏光シグネチャの位相および振幅は、コントラストを検出またはローカライゼーションに追加するために低光状況で使用することができる。別の実施形態では、静止オブジェクトに関係する偏光シグネチャが把握されているとき、次いで、既知の偏光静止シグネチャが形成されるように、各測定画像から空間点を選択することによって、オブジェクトの運動を推定することができる。一実施形態では、静止偏光シグネチャの知識を通して、オブジェクト運動を補償または推定することができる。
図38は、符号化ローカライゼーションシステム3820に連結された高分解能結像システム3810を描写する、システム3800における本発明の別の実施形態を示す。一実施形態では、連結は、照準システム3810および3820から成る。一実施形態では、高分解能結像システム3810が、高分解能画像3830を形成する一方で、符号化ローカライゼーションシステム3822は、システム3820を形成する符号化ローカライゼーションセンサ3822の配列から符号化ベクトル空間3860を形成する。一実施形態では、符号化ベクトル空間3860は、プロセス3865を介して、一次高分解能画像3830内の領域3835からプロセス3840を介して抽出されたサブ画像3850と比較される。一実施形態では、プロセス3865は、3860内に含有される特徴セットを高分解能画像3830に限局する。別の実施形態では、特徴セット3860および高分解能画像3830は、画像3830内に含有される場面の範囲マップを形成するために使用される。
図39は、図4で以前に開示されたような未知の媒体によって覆い隠されたときに空における偏光パターンを推定するために、本明細書で開示される符号化設計および処理システムを利用した、偏光スカイコンパスのためのデバイスの実施形態を示す。システム3900は、重複視野3902を伴う結像チャネルの2×2配列を含有する符号化ローカライゼーション結像システム3904から成る。各結像チャネルは、固定参照までのある角度で配向される直線偏光子3930を含有する。この実施形態では、角度は、開示されるデータ処理を可能にする、単位円3908の2パイ対称サンプリングを形成するように選択される。この場合、1から4と番号付けされた角度またはサンプルは、直線偏光子角3930、(分析器の役割を果たす物理的偏光子の45度間隔回転に対応する)回転の90度位相間隔での単位円3908上の対応する位置、およびシステム3904によって形成される、結果として生じる画像3920として示されている。図3で導入されるような2×2システムのための処理は、4つの画像のスタック3920を通してQ×Qサイズの窓3922から重複ピクセルサンプルを収集するプロセス3975によって、各サンプルがベクトルを形成するように積み重ねられる、グラフ3950に示されている。この実施形態では、=[M1(1,1)M2(1,1)M3(1,1)M4(1,1)M1(1,2)M2(1,2)...M3(Q,Q)M4(Q,Q)]であり、最初のいくつかのサンプルのみがグラフ3950に示されている。これらのサンプルでは、画像またはデータ「M」の数は、単位円角1から4に対応し、(x,y)位置は、画像位置に対応する。使用可能なデータ量までグラフ3950を拡張するために、各画像内のQ×Q窓3922が、データを収集するために選択される。Q×Q窓内の(x,y)における各画像位置で、その位置におけるピクセル強度は、画像M1からM4のそれぞれについて収集され、順に配列され、図15のサンプル1530の長ベクトルに類似する4×Q×Q長ベクトルを形成する。覆い隠す媒体を形成する雲が、非常に高密度で、空偏光信号を高度に減衰させると見なされるため、Qは、この実施例では大きく(>10)なるように選択される。図15で以前に示されたように、次いで、ベクトルは、1545と同様に正弦ピーク位置を形成するようにフーリエ変換される。プロセス3970を介して、x,yにおける画像全体を横断してQ×Q窓を摺動させ、からフーリエ成分の角度を抽出することにより、空の画像3920から導出されるような部分偏光3990の角度をもたらす。フーリエ変換からの特定の一式の点の規模および位相はまた、効率的な積和方法を通して計算することもできる。3990における角度の集合点は、この実施例では反太陽を表す。反太陽の向首方向を用いて、時刻および地理的位置を把握すると、デバイスは、正確な向首方向推定値を必要とする車両制御、個人ナビゲーション、および他のシステムとともに使用するために、高度に正確なコンパス向首方向角を提供する。このコンパスは、磁場に依存せず、通常は磁気コンパスを妨害する大量の鉄製品の存在下で、重機上で使用することができる。
図40は、図4で以前に開示されたような未知の媒体によって覆い隠されたときに空における偏光パターンを推定するために、本明細書で開示される符号化設計および処理システムを利用した、偏光スカイコンパスのためのデバイスの別の実施形態を示す。システム4000は、重複視野4002を伴う結像チャネルの3×3配列を含有する符号化ローカライゼーション結像システム4004から成る。システム4000は、重複視野4002を伴う結像チャネルの3×3配列を含有する符号化ローカライゼーション結像システム4004から成る。結像チャネルのうちの8つは、固定参照までのある角度で配向される直線偏光子4030を含有する。この実施形態では、角度は、開示されるデータ処理を可能にする、単位円4008の2パイ対称サンプリングを形成するように選択される。1つのチャネルは、明確な画像を形成するように符号化されておらず、画像セット4020の中で「b」と標識されている。この場合、1から8と番号付けされた角度またはサンプルは、偏光子角4030、(物理的偏光子の22.5度間隔回転に対応する)45度位相間隔での単位円4008上の対応する位置、およびシステム4004によって形成される、結果として生じる画像4020として示されている。図3で導入されるような3×3システムのための処理は、8つの画像のスタックを通して重複ピクセルサンプルを収集することによって、各サンプルがベクトルを形成するように積み重ねられる、グラフ4050に示されている。この実施形態では、=[M1(1,1)M2(1,1)M3(1,1)M4(1,1)M5(1,1)M6(1,1)M7(1,1)M8(1,1),Ml(1,2)M2(1,2)...M7(1,2)M8(1,2)M1(1,3)...M7(Q,Q)M8(Q,Q)]であり、最初のいくつかのサンプルのみがグラフ4050に示されている。これらのサンプルでは、画像またはデータ「M」の数は、1から8の単位円角に対応し、(x,y)位置は、画像位置に対応する。使用可能なデータ量までグラフ4050を拡張するために、各画像内のQ×Q窓が、データを収集するために選択される。Q×Q窓内の(x,y)における各画像位置で、その位置におけるピクセル強度は、画像M1からM8のそれぞれについて収集され、順に配列され、図15のサンプル1530の長ベクトルに類似する8×Q×Q長ベクトルを形成する。覆い隠す媒体を形成する雲が、非常に高密度で、空偏光信号を高度に減衰させると見なされるため、Qは、この実施例では大きく(>10)なるように選択される。次いで、ベクトルは、図39の以前の実施例のように、正弦ピーク位置を形成するようにフーリエ変換される。これは、3×3構成が、グラフ4050において明白であるようにプロセスの2倍多くの角度を捕捉することを可能にすることを除いて、図39のシステムに類似する処理である。角度におけるより多くのサンプルが、より高いSNRを可能にし、またはSNRを犠牲にすることなく、さらなる空間分解能のためにQを低減させる。プロセス4070を用いて、x,yにおける画像全体を横断してQ×Q窓を摺動させ、データのフーリエ変換の角度を抽出することにより、部分偏光4090の角度をもたらす。部分偏光の角度は、空の画像4020から導出されるような8サンプル周期によって定義されるフーリエ成分の複合ベクトルの角度である。Qが図39と同一であるため、結果4090は、図39の3990より高いSNRを有し、雑音が少ない。4090における角度の集合点は、この実施例では反太陽を表す。反太陽の向首方向を用いて、時刻および地理的位置を把握すると、デバイスは、車両制御、個人ナビゲーション、および向首方向推定値の他の用途とともに使用するために、高度に正確なコンパス向首方向角を提供する。このコンパスは、磁場に依存せず、通常は磁気コンパスを妨害する大量の鉄製品の存在下で、重機上で使用することができる。
図41は、ミリラジアン推定精度、小型サイズ、および低費用を有する、高速ローカライゼーションシステムを説明する。2つのシステム4101および4102は、一式の並列システムの相対距離および角度が必要とされる、制御されたシステムのアームまたはブーム等のデバイス上に搭載される。各システムは、2組の符号化高速角度推定センサ照度計、およびLED等の照明デバイスから成る。光学部は、特殊相対照度4110を使用することによって、空間変異型測定値を形成する。センサおよび照明LEDは、狭域UV、IR、または可視波長で動作し、システムの視野内で可能性として考えられる他の光源がないことを確実にすることができる。符号化推定システムおよび照度計4120のためのLEDおよび集合光学部4122の視野は、並列システムの予期される相対運動を網羅するために十分である。この特定の実施例は、60度、または+および−30度のFOVを有する。符号化推定システムは、4140に示されるように、特別に設計された相対照度対視野角を有する。相対照度4141は、オブジェクトが軸上にあるときの1.0から、オブジェクトが30度であるときの0.8まで様々である。vを測定する高速単一ピクセル検出器4130において測定値v1が与えられたオブジェクト角の推定値は、v*K1+K2であり、K1およびK2は、推定システムの開口に達する電力の総量、検出器の効率、および特定のコードの両方に依存する。照度計を用いて、開口に達する全電力を測定および較正することによって、定数K1およびK2を求めることができる。照度計を通した、受容した電力の繰り返しの測定によって、電力変動、大きい距離変動、大気条件等による電力の任意の変化に対処することができる。
図41の光学システムの処方は、(Zemax Lensユニットにおいて)以下の通りであり、CSBRは、臭化セシウムであり、KCLは、塩化カリウムであり、その両方とも圧縮成形することができる。
この特殊結像システムのMTFは、4150に示されるように非常に高い。回折限界値は、4152によって求められ、軸上MTFは、4151によって求められる。軸外MTFは類似する。
図41の特定の単一画像ピクセルセンサ、LED、および光学構成は、軸上オブジェクトについて、1/500または500分の1の複合SNRを有する。次いで、角度推定値の不正確度は、約[30度/500/0.2変動]または約5ミリラジアンによって求められる。より大型の集合光学部を使用して、より高出力のLEDまたはより効率的な検出器は、角度精度をさらに増加させることができる。基線分離D、および4103からの2つの対応する符号化推定システムの座標を把握することにより、基線の2つの端部からオブジェクト4106(x,y)への方程式を表す2つの推定線形方程式をもたらす。y=m+b=m+bを介して、線4104および4105の2つの推定方程式を組み合わせることにより、遠隔源(x,y)の推定値、ならびにLEDまでの距離および相対角度をもたらす。並列推定システムがあるため、4102もまた、4101のLEDまでの相対範囲および角度を計算するために使用することができる。雑音による2つの推定値のわずかな変動を平均化し、最終測定値の不正確度を低減させることができる。4101および4102からの推定範囲および角度の任意の大きな相違は、一方または他方のシステムに不具合があること、または太陽のような第2の遠隔源のような何らかの外部効果が測定値に干渉していることを示す。照度計からの相対受容電力を観察することによって、相違の多くを理解して補正することができる。
段階的アルゴリズムは、以下の通りである。
1.照度計を用いて符号化ピクセルセンサを較正する:Vi*K1−K2=推定角度
2.システム基線Dおよび座標系に対するLEDまでの線の方程式を推定する
3.対応する推定システム(y)のためのLEDへの方程式を推定する
4.y=m+b=m+bを介してシステムの配向(x,y)を判定する
5.配向推定値を対称システムと比較する/平均する。要約を活用する。
図42は、本明細書で開示される符号化設計および処理システムを使用した結像のためのデバイスの好ましい実施形態を示す。システム4200は、重複視野4202および結像モデルM=C*Iを伴う結像チャネルの2×2配列を含有する、符号化ローカライゼーション結像システム4204から成り、Mは、サンプリングされたデータのマトリクスであり、Cは、コード空間を表すマトリクスであり、Iは、オブジェクト強度値のマトリクスであり、*は、マトリクス乗算を表す。
各結像チャネルは、135度の位相偏移および0から90度の配向を伴う偏向正弦および余弦に基づく、ピクセルレベルグレースケール強度コード4230を含有する。w=パイ*(2/ピクセルサイズ)およびf=135degについて、コードC1からC4は、チャネル1から4に対するものであり、


である。
独立変数xおよびyを用いて、正弦コードの1つの周期が1つのピクセル幅を占有するように、周期が選択される。独立変数は、特定のチャネルの中で全てのピクセルまで拡張する。独立変数xおよびyが、+(ピクセルサイズ/2)および−(ピクセルサイズ/2)という整数の倍数であるように選択されるとき、各ピクセルは、各コードに対する単一のピクセルの位相および振幅が示されている、4231、4232、4233、および4234に示されるように、2つのグレースケール値によって修正される。例えば、4231は、ピクセルの右半分が明確であり、ピクセルの左半分がそれにわたって減衰グレースケール値を有する、単一のピクセルにわたるコードパターンの接近図を示す。この実施例では、角度は、開示されるデータ処理を可能にする、空間周波数空間4208の位相および振幅の対称サンプリングを形成するように選択される。1から4と番号付けされたサンプルは、グレーコード4230、周波数空間4208内の対応する位置、およびシステム4204によって形成される、結果として生じる画像4220として示されている。周波数空間4208は、符号化システムにおいて達成される複雑なサンプリングが、ピクセル空間周波数が可能にするものの2倍であることを示す。未修正ピクセルが、4208において「b」と標識された中央の正方形を可能にする一方で、符号化ピクセルは、1つのピクセルにつき2つの強度値を使用することによって、測定されたスペクトル応答を2倍押し出す。スペクトル応答は、図43の次の実施例においてピクセルサンプリング周波数のさらに3倍まで押し出される。中央の正方形「b」の応答は、この場合、サンプリングされないが、4つの符号化チャネルの全てをともに平均化することによって達成される。対照的に、図43では、実際のバイアス値または負のピクセル分解能は、クリアなチャネルを使用してサンプリングされる。
システム4200の符号化ピクセルは、物理的ピクセルによって定義される最大空間周波数より高い空間周波数において、複雑な振幅を本質的にサンプリングする。対応する符号化ピクセルペア4231/4234または4233/4232のうちのいずれか1つが、4208によって定義される空間周波数領域の規模の推定値をもたらすことができる一方で、空間周波数領域の規模および位相の両方を判定するために、複数対のコードが必要とされる。実施形態では、符号化ローカライゼーションシステムは、検出器ピクセルの空間周波数限界を超える複雑なフーリエ空間周波数成分を表す測定ベクトルを提供する。
図6および図23で導入されるような図42の2×2システムのための処理は、4つの符号化画像のスタックを通して隣接ピクセルサンプルを収集することによって、ベクトルを形成するものとして示されている。この実施例では、プロセス4270は、1つのピクセルにつき2つのグレースケール値(またはコード)を用いて、各Q×Q窓から4×Q×Qサンプルを採取し、Q=2であり、マトリクスは、以下である。
これらのサンプルでは、画像またはデータ「M」の数は、周波数領域1から4およびチャネルの数に対応し、(x,y)位置は、符号化画像位置に対応する。一式のコード4230の1つの重要な性質は、全ての2Dコードの合計が定数であることである。次いで、コード測定値の合計は、4208において「b」によって表されるベースバンド空間周波数値の直接推定値として使用することができる。4280で説明されるように、バイアスまたはベースバンドピクセル値の推定値は、符号化ピクセル値の加重合計によって判定される。次いで、この推定バイアスは、測定されたデータマトリクスMからバイアスを除去するために使用される。測定値からバイアスを除去することによって、コードマトリクス(C−1/2)は両極性であり得、理想的には直交正弦波から成ることができる。1/2という倍数またはバイアスがなければ、コードマトリクスの成分は、雑音の最小限の効果を有する理想的な逆数を伴う直交正弦波である。事実上、理想的なコードマトリクス(C−1/2)は、複雑なフーリエ変換であり、逆マトリクスは、測定されたデータの線形結合の複雑な逆フーリエ変換である。
ベクトルVは、値bがsum(Mi)/2によって求められる、Iest=(C−l/2)−1(V−b/2)+b/9である、再構築モデルを用いて最大分解能画像内のピクセルの推定値を形成するように、コード(C−1/2)の逆数のモデルを使用して、4280において変換される。理想的には、(C−l/2)−1は、2D逆フーリエ変換マトリクスである。
x,yにおける画像全体を横断してQ×Q窓を摺動させ、バイアスを加えたデータマトリクスの拡大縮小バージョンで(C−l/2)−1を乗算することによって、強度を抽出することにより、最大分解能画像4290をもたらす。これは、ローカライゼーションタスクのために設計された角度符号化システムが、最大分解能画像を提供することも可能にする。
さらに、視野内の単一点光源オブジェクトを視認する符号化ローカライゼーションシステム4200では、各ピクセルは、強度符号化により、図41で以前に実証されたように、オブジェクトまでの角度を推定することができる。これは、(多くのピクセルを伴う)図42のシステムに、サブピクセル精度で点オブジェクトまでの範囲を推定するとともに、最終画像を形成する能力を提供する。図41で説明されるように、既知の基線を伴う複数の符号化ピクセルは、範囲推定を行うことができ、したがって、多数のピクセルおよびコードを伴う図42のシステムは、図41のように範囲推定値を形成するとともに、図42のように最大分解能の像を形成することができる。点光源、あるいはLED等の再帰反射器または能動光源等の他の既知の光源に及び、点光源への精密な位置合わせとともに同時に周辺環境を結像することは、標的用途において遠隔オブジェクトを調査し、マップし、限局するために重要である。図43は、本明細書で開示される符号化設計および処理システムを使用した結像のためのデバイスの好ましい実施形態を示す。システム4300は、重複視野4302を伴う結像チャネルの3×3配列を含有する符号化ローカライゼーション結像システム4304から成る。9つの結像チャネルのうちの8つは、パイ/12ラジアンの位相偏移および0、45、90、および135度の配向を伴う偏向正弦および余弦に基づく、ピクセルレベルグレースケール強度コード4330を含有し、1つのチャネルがクリアである。この実施形態では、コードは、開示されるデータ処理を可能にする、複雑な周波数空間4308の対称サンプリングを形成するように選択される。この場合、1から9と番号付けされた角度またはサンプルは、グレーコード4330、複雑な周波数空間4308内の対応する位置、およびシステム4304によって形成される、結果として生じる画像4320として示されている。各ピクセルは、各コードに対する単一のピクセルの位相および振幅が示されている、4334および4337に示されるように、3つのグレースケール値によって修正される。例えば、4334は、ピクセルの上1/3が大きく減衰させられ、中央1/3が最も少なく減衰させられ、下1/3がさらに第3のグレースケール値で減衰させられる、単一のピクセルにわたるコードパターンの接近図を示す。ピクセルコード4337はまた、ここでは、4330における直交サンプリングコードに対応する正方形1、3、7、および9によって示されるように、周波数空間4308の直交周波数成分を満たすように直交構造に配列される、3つだけの強度値も示す。w=パイ*(2/ピクセルサイズ)およびf=パイ/12について、チャネル1から9に対するコードC1からC9は、−45度回転で

0度回転で

45度回転で

90度回転で

C5=1
0度回転で

−45度回転で

90度回転で

45度回転で

である。
独立変数xは、ピクセルにわたる3つのサンプルであり、各チャネル内の全てのピクセルまで拡張するように選択される。正弦波の周期は、この実施例では1つのピクセルの寸法に等しい。正弦波の周期は、ピクセル周期の整数の倍数であり得るか、または結像光学部およびコード加工によって支援される、任意の他のより高いまたは低い空間周波数に対応することができる。3×3システムのための処理4370は、図42のものに類似し、Q×Q窓4322内の9つの画像のスタック4320を通して隣接ピクセルサンプルを収集することによって、ベクトルを形成するものとして示されている。この実施例では、Q=3であり、

である。
これらのサンプルでは、画像またはデータ「M」の数は、周波数領域1から9およびチャネルの数に対応し、(x,y)位置は、画像位置に対応する。4308における空間周波数領域の規模を直接サンプリングするために、2/5、3/9、1/7等の対応するコードのチャネルのうちのいずれか1つを使用することができる一方で、特定の空間周波数領域の規模および位相の両方をサンプリングして推定するために、セットが必要とされる。空間周波数領域は、光学システムおよびコード加工が可能にするであろう、空間周波数に本質的に適応させることができる。
最初に、各ピクセルに対するバイアスまたはベースバンド成分を推定することによって、増加分解能画像が形成される。これは、チャネル5と表される、クリアなチャネルの値を通して行うことができる。8つのコードはまた、それらの合計が図42のように2Dで定数であるように設計することもできる。クリアチャネル値およびコードの合計からの推定バイアス値の両方は、雑音の効果を低減させるように組み合わせることができる。次いで、測定ベクトルVは、最大分解能画像内のピクセルの推定値を形成するように、バイアスのスケール値を加えたコード(C−l/2)の逆数のモデルを使用して、拡大縮小および変換される。x,yにおける画像全体を横断してQ×Q窓4322を摺動させ、(−b/2)で(C−l/2)−1を乗算し、b/9を加算することによって強度推定値を抽出することにより、最大分解能画像4390をもたらす。理想的には、(C−l/2)の逆数は、雑音における推定値に最小限の影響を及ぼす、逆2Dフーリエ変換マトリクスである。これは、ローカライゼーションタスクのために設計された角度符号化システムが、高品質の最大分解能画像を提供することも可能にする。結果4390はまた、目的とする点光源4392も含有する。この目的とする点光源に及ぶことは、図44で詳細に議論される。
図44は、単一ピクセル群を使用した測距を開示する、図43からの本発明の実施形態である。符号化を使用した単一ピクセル範囲推定はまた、図18および41で以前に開示されており、ここでさらに詳細に議論される。システム4400は、視野内に限局される既知の光源(LEDまたは再帰反射器)を含むオブジェクトの集合である、4410を含有する。図43からのシステム4304は、デバイスとして使用される。再帰反射器通過を捕捉するサンプリングされたピクセルからの光線のグレースケール強度コード区分が、4420として示されている。光線が通過するコードの特定の領域は、検出器上で検出されるようなオブジェクト強度値の減衰を判定し、小さい円4430として示されている。再帰反射器に集中したサンプリングされたデータM1(x,y)からM9(x,y)の小領域もまた、4440として示されている。4440では、各チャネルは、小さい円を伴って1から9と番号付けされた、再帰反射器を包囲するピクセルの領域を生成する。再帰反射器に集中するピクセルの強度値もまた、4440で求められ、チャネル1から9について、それらは、中央ピクセルを示す矢印を伴って、それぞれ、101、96、77、65、177、77、38、64、および134である。チャネル5(クリアなチャネル)によって測定されるようなオブジェクト強度と併せて、任意のチャネルの検出された強度を使用することにより、点光源の方向を示す角度で4420における適切なグレーコード領域を通して、4440における中央サンプルからの光線4425を追跡することを可能にする。全ての光線4425の交差点は、点光源の範囲およびx,y位置を表す。
図44では、ピクセルおよび光学部に対するオブジェクトコードの位置、ならびにオブジェクトまでの適切な距離は、本質的に把握されている。多くの場合、これらのパラメータのうちのいくつかまたは全ては、温度または振動効果による加工誤差または機械的移動を伴うシステム等では、最初に把握されない場合がある。オブジェクトの範囲も変化し得る。システムのパラメータによる非理想的な効果の制御は、較正と称され得る。距離のようなオブジェクトのパラメータによる非理想的な効果の制御は、集束と称され得る。次いで、コードマトリクスCの値および配向は、測定値Vに対応するように調整される。
おそらく、理想的なコードマトリクスCのマトリクス条件数または(C−l/2)が、非理想的な加工および組立効果により減少し、それによって、結像チャネルの直交性の程度を減少させるであろう。コードマトリクスCに影響を及ぼす加工および組立効果の不正確度が事前に把握されている場合には、コードマトリクスは、誤差の範囲にわたって最小期待特異値を最大限化するように意図的に設計することができ、それによって、最終システム4500を加工および組立からの非理想的な効果に対して比較的低感受性にする。この設計は、モンテカルロ統計試行等を通して、加工および組立による期待誤差の範囲後に、較正後の最終コードマトリクスが、最大最小特異値、したがって、最大度の直交性を有するように、コードを最適化することによって行うことができる。
図45は、範囲の関数としての集束およびコードを図示する。主光線4510および4511は、相対距離がレンズアレイ4501の寸法と比較して本質的に無限である、オブジェクトに由来する。主光線4520および4521は、比較的近い光源に関係する。センサ4504からの測定値は、画像面におけるコード4502および4503を通した主光線4531/4532および4533/4534の位置の変化によって見られるように、遠隔および接近オブジェクトの間で変化する。コード4502および4503は、図44の4420のコードと同様に、位置の関数として空間的に変化する。3つのレンズ/コード/センサのアレイは、概して、中央チャネルがコードを持たない、図44のシステム4400の中央の行を表す。オブジェクト範囲が変化するにつれて、コードマトリクスCによって求められる画像形成モデルは、実際の形成されたサンプルを反映するように決定的に変化する。事実上、コードマトリクスCは、C(range)になり、またはコードマトリクスは、特定のオブジェクト範囲の関数であり、C(range)の行および列は、特定の空間的位置におけるオブジェクトのオブジェクト範囲の決定的変化に対処するように偏移させられる。古典的な結像システムでは、レンズと画像面との間の距離は、焦点を変化させるように機械的に移動させられる。符号化多重開口システムでは、範囲の関数C(range)としてコードマトリクスを電気的に変化させ、次いで、図43からのように画像を再構築することにより、物理的に移動する部分を伴わずに、焦点の変化を達成する。
オブジェクト範囲が把握され、較正されたコードマトリクスCが把握されている場合には、適正な画像形成マトリクスC(range)を形成することができ、対応する高分解能画像またはオブジェクトローカライゼーション行うことができる。オブジェクト範囲が把握されていない場合には、拡大縮小された測定値Vに作用する(C(range)−1/2)の疑似逆数を通して、「最良焦点」画像を判定するために、一連の範囲値を使用することができる。例えば、形成された画像または最大MTFの最大空間周波数成分を比較することによって、オブジェクト範囲の推定値および明確な画像を形成することができる。空間周波数成分が最大値であるとき、オブジェクトは良く焦点が合っていると見なすことができる。これは、自動焦点を形成するために、古典的な結像システムにおいてレンズを機械的に移動させるときに行われる処理に類似する。範囲推定、したがって、集束は、画像内の全ピクセルについて、および全タイプのオブジェクトについて行うことができる。オブジェクトが広範囲のオブジェクトを有し、最良焦点が最終画像内の全ての関連領域にわたって見出されるとき、次いで、符号化多重開口システムは、拡張焦点深度画像を形成する。集束はまた、画像の小領域、および画像全体に使用される同一の推定範囲値について行うこともできる。範囲の関数として各チャネルを符号化することによって、非無限にオブジェクトについて集束を達成することができる。範囲の関数として各チャネルを符号化することによって、拡張被写界画像深度を達成することができる。範囲の関数として各チャネルを符号化することによって、画像内の点の範囲の推定値を達成することができる。
図46は、デッドレコニングのためのナビゲーションシステムの実施形態である。システム4600は、道路4602の下のトンネル4604を通過する点検経路4606に沿って移動する、自動回転ロボットカート4610を描写する。トンネルの外側での動作中に、カートは、位置情報を提供するGPS4615、およびコンパス向首方向情報を提供する偏光スカイコンパス4618を使用することによってナビゲートする。既知の空偏光パターンが対称性を示すため、この実施例では、偏光コンパスは、空の一部分のみを視認し、向首方向角を判定するためにパターン対称性の規則を使用する。カートは鉄で作製され、経路に沿って鉄材料を移動させるため、磁気コンパスは非常に不正確である。偏光スカイコンパス4618は、空の一部分が存在する限り向首方向情報を提供する。トンネルの内側では、GPSも空の視界もナビゲーションのために利用可能ではない。慣性ナビゲーションは、ドリフトによる不具合を受け易いことが知られ、良く理解されている。慣性ナビゲーションシステムは、例えば、信号が、x、y、z、ならびにロール、ピッチ、およびヨーにおいて変異推定値を生成するように積分される、加速度計およびレートジャイロスコープを含む。トンネル内のデッドレコニングのための慣性システムのドリフトおよび不正確度を軽減するために、システム4600は、図9で最初に開示されたように、視野内の運動を判定するように構成される光学運動ユニット4620、4622、および4625を使用して動作する。この場合、図9で導入される基本概念は、ナビゲーションを提供するように構成され、また、従来技術と比べて多数の利益を提供するように、本明細書で開示される他のシステムと結合される。
光学部4662、検出器4664、および光学フロー処理エンジン4666を含有する、4625のような単一のシステムによって検出される運動は、画像を偏移させ、光学フロープロセッサ4666によって検出することができる、任意の運動である。4664における検出器要素の数は、好ましくは、効率的な光学フロー処理を可能にするように少なく、例えば、32×32である。画像分解能が、多くの場合、最終目標ではないため、ピクセルはまた、効率的な光捕捉を可能にするように大きくあり得る。無限に集束される30度視野を伴う単一のレンズ、32×32検出器、および全体的な特徴において偏移を判定するように2つの時点からの画像を空間的に相関させる、デジタル信号プロセッサ(DSP)に基づく相関エンジンが、4625のための単純な実装である。DSPに内蔵されたメモリは、画像を記憶するために使用される。4666の別の実装は、FPGAに基づく古典的な勾配光学フローアルゴリズムを使用している。勾配アルゴリズムは、光の点が移動するにつれて強度を変化させないという仮定に基づくため、検出器上で符号化強度マスクを使用することは、このアルゴリズムにとって選択肢ではない。図9で説明されるように、本発明の一実施形態は、剛体の周囲にいくつかの光学フローエンジンデバイスを配列することであり、この場合、剛体は、自動カート4510である。カートの剛性フレームワークは、異種ユニット4620、4622、および4625で検出される運動を、カートの平行移動および回転のための運動モデルに結合する。例えば、4630は、カート4610を伴うシステム4600の上面図である。軸は、図面の面においてYおよびXとして示されている。カートがトンネルの中央で前方に移動するとき、光学運度ユニット4620およびペア4625は全て、同一のdx値を観察するであろう。カートが前方に真っ直ぐ進んでいないが、例えば、片側に漂流している場合、観察されるdx値は、カートの片側で増加し、カートの反対側で減少するであろう。例えば、真っ直ぐな前方運動を示すサンプルは、dx4520=[12233]およびdx4525:[12233]のように見えてもよく、すなわち、dxにおけるステップは同一であり、この実施例では、dx値が増加しているため、カートが加速している。4620に向かった増加するドリフトは、dx4520=[11223]およびdx4525:[11211]のように見えてもよく、ドリフトは、2つの信号の差に見られるように、第4のサンプルの周囲で始まり、すなわち、dx4520−dx4525=[00012]である。ここで、カートの制御システムは、ドリフトを操縦して回避するように是正措置を講じることができる。カートが中心から外れたままである場合には、差は非ゼロのままとなるであろうが、真っ直ぐな前方軌道にとって一定となるであろう。カートの制御システムはまた、この場合、dx4520−dx4525をゼロに戻すことによって、それ自体を再び中心に置くことを選択してもよい。光学運動ユニットは、ナビゲーションのためのデッドレコニングを提供する。
垂直運動が、側面図4640に従って、4620および4625におけるdzによって示される。ピッチ、ロール、およびヨーも測定することができる。4620と4625との間のdz値の差の変化は、ローリング作用を示す。この実施例でのピッチングは、一対のセンサ4625からのdz値の非ゼロ差によって示される。ヨーイングは、一対のセンサ4625のdx値の差によって判定されるが、弱く判定される。ヨーイングはまた、カートの尾部上のセンサ4622を使用することによって、さらなる精度で測定される。4622は、側面図4640で示され、表面4606を視認するように下方に角度を成している。センサ4622は、dxとして前方運動を測定し、dyとして横方向運動を測定するであろう。Zにおける運動もまた、地面を視認する角度に応じて4622に影響を及ぼすであろう、そしてこの場合、dz測定値によって高度を判定することができる。
光学運動ユニットは、結像システムに基づくため、この用途では、単純な画像を捕捉し、トンネルを記録することもできる。捕捉される画像は、サブピクセル測距を可能にするように、以前に説明されたような符号化画像であってもよい。表面およびアルゴリズム結果についての詳細もまた、図9で以前に説明されたようにカートに提供されてもよい。詳細からのSNRについての知識は、汚れる、またはこの実施例では光学フロー計算を行うように十分なテクスチャが見えないセンサを拒絶するために、誘導アルゴリズムで使用することができる。
図47は、偏光コンパスの実施形態である。配列4701は、公称本体寸法A=35mm、B=35mmを伴う市販のCMOS工業用USB3接続カメラ4710から成る、時間サンプリング偏光コンパスである。業界標準「C/CS」レンズマウントベゼル4711、およびカメラ本体の中心における業界標準1/4インチ20TPIねじ山付き搭載穴4713も伴う。カメラ4710の中のセンサは、最大150フレーム/秒で1280×1024ピクセルを生成するグローバルシャッタを伴う、1/2インチセンサ形式、4.8μmピクセルサイズの1.3MPixel On Semi VITA1300 CMOSである。公称寸法C=34mm、D=32mm、および業界標準「C/CS」レンズマウントねじ山4714を伴うレンズ4715は、業界標準「C/CS」レンズマウントベゼル4711にねじ込む。レンズ4715は、M30.5×0.5噛合ねじ山4718を有するメートルねじ山M30.5×0.5フィルタ4719および4719aを受け入れるように、公称視野K=60度および前ねじ山4716を伴う、Schneider Optics Cinegonによるf/1.4、焦点距離8mmのコンパクトCマウントレンズであってもよい。この配列におけるフィルタ4719は、95%効率、30%透過率、E=32mm、F=10mmの公称寸法を伴う直線偏光子、例えば、Edmund
OpticsからのNT46−574である。フィルタ4719aは、青色帯域通過フィルタ、例えば、395nmから480nmの間の通過帯域およびG=32mm、H=5mmの公称寸法を伴うHoya B−440または同等物、例えば、レンズマウントねじ山4718aを用いてフィルタ4719に搭載するEdmund OpticsからのNT46−547である。青色フィルタ4719aは、偏光子フィルタ4719に衝打することから十分に偏光されない、赤色および緑色の光を遮断する。M30.5×0.5ねじ山を用いてそこに搭載することが容易であるため、また、偏光子が光を反射または吸収するため、直線偏光子4719はレンズの外側にあり、偏光子がレンズ4715とカメラ4710との間にあった場合、結像経路の中へ迷光を、またはセンサの中へ熱を誘導し得、その両方が信号品質を劣化させるであろう。また、各視野は、シナリオ4770において4772等の障害物により、完全な空を結像できない場合がある。この場合、可視的である空偏光パターン4771は、少なくとも1つの対称軸を有することが知られている。この場合、4775における点線は、水平線の周囲の対称規則を使用して、完全な視野のために再構築された偏光パターンを表す。これは、デバイスが障害物の存在下で空の完全偏光パターンを形成し、また、完全に遮られていない視界を必要とすることなく、空の偏光対称性の知識を使用して、向首方向角を判定することも可能にする。
カメラ4710は、ラップトップ4780に差し込まれるUSB3ケーブル4750を介して電力供給される。ラップトップ4780は、例えば、バッテリ4799によって電力供給され、4GBのRAMおよび32ビットオペレーティングシステムとともに、2.5GHzでIntel Core i5 CPUを使用している。ラップトップ4780は、以前に開示された信号処理ブロックから成るアルゴリズムを実行している。アルゴリズムは、最初に、フィルタ4719および4719aを伴うカメラ4710およびレンズ4715を用いて写真を撮影しながら、偏光子4718を回転させるようにユーザと相互作用することによって、4781でデータをサンプリングする。ユーザが選択する偏光角は、以前に開示されたように、均一に単位円の周囲でサンプリングされる。ユーザは、例えば、移動する雲、木、鳥、および飛行機からの時間的問題を回避するように、可能な限り迅速にサンプリングするように促される。カメラ4710はまた、後続の露出中にカメラ運動を回避するように、搭載穴4713を使用して三脚または他の固定構造に搭載されるべきである。アルゴリズムは、次に、偏光処理のために以前に開示されたように4782でデータを選別し、Mk(x,y)画像値についてkにわたってサンプルを収集する。8つの偏光サンプルを伴うQ×Q窓内のデータをQ×Q×8長ベクトルVの中へ積み重ねるための4782における例示的コードは、
y=1:Q、x=1:Q、a=1:8であって、V(k)=M(y,x,a);k=k+1;end,end,end
である。
式中、Mにおける3次元は、画像値であり、Matlabソフトウェアが3Dマトリクスを自然に配列する方法と同様にインデックスを付けられる。Q×Q領域は、全視野偏光角および規模の結果を形成するように、x、yにおける画像セットにわたってパンされる。次いで、アルゴリズムは、標準FFT(高速フーリエ変換)技法を使用することによって、4783でベクトルVをフーリエ変換し、ベクトルのスペクトル成分を表すQ×Q複素数値を生成する。と呼ばれるスペクトル成分は、最初に、増加する周波数指数を伴う正の周波数係数、次いで、負の周波数係数がDC値の後に続く、ベクトルにおいて配列される。目的とする係数は、の最初の半分にあるため、次いで、1/8が、サンプリング部分4781においてユーザが8つの画像を撮影することによるものである、指数Q*Q*8/8+1または(Q*Q*8/8+1)で係数の規模および位相角を得ることによって、4784におけるアルゴリズムは、Sから目的とする周波数データを選択する。次いで、アルゴリズムは、4785においてこのQ×Q領域に対する規模および角度を表示し、Q×Q領域は、全視野偏光角および規模の結果を形成するように、x、yにおける画像セットにわたってパンされる。
配列4702は、空間的サンプリング偏光コンパスであり、2×2配列における4つのカメラおよびレンズおよびフィルタ(4702が側面図を提示するため、2つだけが示され、他の2つのカメラおよびレンズフィルタは示されているものの後ろにある)を使用することによって、配列4701の特徴の多くを共有する。カメラ4720および4730は、4710と同一であり、レンズ4725および4735は、4715と同一であり、フィルタセット4729および4739は、直線偏光子4729および4739が相互に対して45度であることを除いて、4719+4719aと同一である。したがって、4つのカメラは、0度、45度、90度、135度でサンプリングし、画像が、以下で説明されるアルゴリズムによって同時に撮影されるであろう。この配列では、カメラ4720および4730はまた、搭載穴4723および4733に噛合する1/4インチ20TPI搭載スタッド4741および4742を用いて共通剛性板4740に搭載される。板4740は、例えば、60mm×60mm×10mm厚さのアルミニウム板である。カメラ4720および4730は、ラップトップバッテリ4799からUSB3ケーブル4760によって電力供給され、また、ケーブル4760を経由してデータをコンピュータへ返送する。2つの他のカメラおよびケーブルは示されていない。この配列では、ラップトップ4790(このラップトップはラップトップ4780と同一である)におけるアルゴリズムは、時間サンプリングではなく空間サンプリングに基づく。アルゴリズムは、最初に、4つ全てのカメラを使用して同時画像を撮影するようにユーザと相互作用することによって、4791でデータをサンプリングする。視野Jは、重複し、以前に説明された視野Kと類似する寸法である。同時画像を撮影することによって、以前に説明された時間サンプリング問題(オブジェクトの運動およびサンプリング装置)は、少なくともシステムのシャッタ露出時間の程度まで、大部分が軽減される。アルゴリズム4792、4793、4794、および4795の残りの部分は、それぞれ、時間サンプリングシステム4782、4783、4784、および47895について開示されるものに類似する。この場合、4つのサンプルを用いて、4つの偏光サンプルを伴うQ×Q窓内のデータをQ×Q×4長ベクトルの中へ積み重ねるための4792における例示的コードは、
y=1:Q、x=1:Q、a=1:4であって、V(k)=M(y,x,a);k=k+l;end,end,end
である。
4793では、ベクトルのスペクトル成分が再び形成される。4794におけるアルゴリズムは、1/4が、サンプリング部分4781において4つの画像を生成する配列4702によるものである、指数Q*Q*4/4+1または(Q*Q*4/4+1)で係数の規模および位相角を得ることによって、から目的とする周波数データを選択する。当業者であれば、時間サンプリング配列4701が空間サンプリング配列4702まで容易に拡張され、8つのカメラ+レンズ+フィルタサブシステムを含むように4702を容易に拡張することができ、偏光子角が、45度の代わりに22.5度で最適に配列され、4つの画像と比較して単位円の周囲でより細かいサンプリングを提供するであろうことが分かるであろう。
別の実施形態では、カメラ4710、4720、および4730は、工業用「スマート」カメラ等の内蔵処理を含有する。そのようなカメラは、ある基本処理を行うことができる、内蔵DSPまたはFPGAを提供する。そのような内蔵処理を使用して、ラップトップ4780または4790の外側で行うことが有用である前処理ステップは、コンピュータへの伝送に先立ってカメラからピクセルをビン化することである。推奨されるビニング動作は、各ビン化結果が隣接ピクセルからのA/Dカウントを含有する、より小さい画像を生成するための隣接ピクセルの総和である。この総和プロセスは、ランダムな雑音を平均化し、空間分解能を犠牲にして、偏光信号においてより高いSNRを提供する。偏光信号が空を横断してゆっくりと変化するため、これは、ピクセルを受信してビン化するラップトップの負担を軽減しながら、雲および木によって引き起こされるような低いSNR信号を抽出するための有用な技法である。内蔵カメラプロセッサと下流ラップトップとの間のこの処理の分布は、ラップトップが単純なDSPまたはFPGAおよび外部バッテリ供給に取って代わられることを可能にする。当業者であれば、Mk(x,y)におけるデータを選別し、フーリエ変換を計算することと同じくらい単純なアルゴリズムを行うラップトップを、DSPまたはFPGAと容易に置換できることを認識できるであろう。当業者であれば、単一の空間係数がフーリエデータから抽出されるため、FFTアルゴリズムも目的とする正弦の内積と置換できることも認識し、また、空間推定値から単一の正弦を抽出することに類似する狭域通過フィルタリング動作としてこれを認識するであろう。
図48は、以前の図で開示されるような5本のアームを伴う光学運動および運動性ユニットの実施形態であり、コネクタ4810を介して90度の角度で接続する、2つの回路基板4801および4851から成る。一次回路基板は、寸法H1=68mm、W1=118mmを有する。拡張回路基板4851は、寸法H2=68mm、W2=60mmを有する。黒い円は、各回路基板上の光学部4821、4822、4823、4824、および4825の位置を示す。光学部は、回路基板の裏面にエポキシ樹脂で接着されるアルミニウムマウント内の業界標準M12レンズである。一次回路基板光学部4821、4822、および4823は、視野Aを生成するように2.2mmの焦点距離を有する。拡張基板は、視野Bを生成するように8mmの焦点距離を伴う光学部4824、4825を有する。一次回路基板はまた、3.3Vおよび8MHzで動作する8ビットAtmel ATmega 328マイクロコントローラに基づくマイクロコントローラ4860も含有する。コントローラ4860は、レンズの下のセンサからdx、dy情報を収集する。センサ搭載パッドが、回路基板レイアウト上で明白である。レンズの後ろの各センサは、30×30アレイおよび光学フローエンジンを伴うAvago ADNS−3080センサである。センサは、一次回路基板上で相互に対して120度、および拡張回路基板上で相互から180度で位置付けられる。この配置は、一次回路基板上で可能な限りともに近く光軸を配列するために使用され、120度回転は、dx、dyサンプリング格差に対する直交方向の完全サンプリングを提供する一方で、また、光軸の最大空間格差のために拡張基板上の結像システムの最も広い分離も提供する。これは、例えば、依然として単純な両面FR4回路基板上で電気ルーティングを可能にしながら、例えば、図32で実証されるような範囲プロファイリングを行う一方で、センサペアを通り過ぎる移動オブジェクトの分化を増進する。光学マウントは、回路基板の片側にエポキシ樹脂で接着され、レンズは、回路基板内の穴を通して航空画像を提供する。各レンズ用のセンサは、センサを伴うレンズが穴に対面し、回路基板内の穴を通して航空画像を視認する際に、回路基板の反対側に搭載される。グラフィック4891内の側面図および上面図はさらに、組み立てられたシステムの構成要素の位置を図示する。この構成では、システムは、図21で以前に開示されたように、3つのセンサが下向きであり、2つのセンサが外向きである、5本のアームを伴う光学運動および運動性ユニットとして動作する。図48の物理的構造を用いると、概念が完全に説明されているため、光学運動性および運動検出システムを構築することが極めて簡単であることが分かる。このシステムは、直列に接続された3つの単4バッテリ、または4.5Vによって電力供給され、一次回路基板上の電圧調節器を使用して、500mAで3.3Vをコントローラおよび全てのセンサに提供する。このシステムはまた、マイクロdx、dy、dz未加工データ、処理データ、および未加工または処理画像データから、シリアルポートを介して伝送する。処理は、例えば、図9で以前に開示されたタイプの分解に続き、Arduinoプログラミング言語に基づく以下の例示的ATMegaコードにおいて提供される、剛体(この場合の剛体は一次回路基板+拡張基板である)の全体的運動への個々のセンサからのdx、dy、dz信号の分解である。この例示的コードでは、グローバルgx1、gy1、gx2、gy2、gx3、gy3は、それぞれ、光学部4821、4822、4823のそれぞれの累積グローバルx、y位置であり、累積は、経時的な分解されたdxおよびdy運動の累積である。さらに、ベクトルの分解は、以下のコードにおける現在の全体的角度「gT」に依存するため、この角度もまた、各周期で更新される。
#define r30(30*PI/180)//30 deg in radians
#define r60(60*PI/180)//60 deg in radians gx1+=(float)dxl*cos(gT)−(float)dyl*sin(gT);
gy1+=(float)dxl*sin(gT)+(float)dyl*cos(gT);
gx2+=−(float)dx2*cos(r60+gT)+(float)dy2*cos(r30−gT);gy2+=−(float)dx2*sin(r60+gT)−(float)dy2*sin(r30−gT);
gx3+=−(float)dx3*cos(r60−gT)−(float)dy3*cos(r30+gT);gy3+=(float)dx3*sin(r60−gT)−(float)dy3*sin(r30+gT);
//update the global angle
float theta01=atan2(gy2−gy1,gx2−gx1)+60*PI/180;
float theta02=atan2(gy3−gy1,gx3−gx1)+120*PI/180;float thetal2=atan2(gy3−gy2,gx3−gx2)−180*PI/180;
//average angles using real/imag to avoid wrapping problems float re=cos(theta01)+cos(theta02)+cos(theta12);
float im=sin(theta01)+sin(theta02)+sin(theta12);
gT=atan2(im,re);
他の2つの光学部4824および4825の全体的運動は、全体的角度の制約が、上記のコードに示されるように、60、120、および180ではなく、0から180度であり、拡張基板が、拡張基板には「xT」と呼ばれる、「gT」よりもむしろ異なるグローバルシータを使用するであろうことを除いて、類似構造に従う。一次回路基板4801が地面に対して水平であり、拡張回路基板4851が移動車両の中で前方または後方に対面している場合には、「gT」は、ヨー角を表し、「xT」は、センサが車両の外の世界を視認しているときのロール角を表す。一次回路基板4801が地面に対して水平であり、拡張回路基板4851が移動車両の中で側面に対面している場合には、「gT」は、再びヨー角を表し、xは、ピッチ角を表す。
図49は、図39の3904、図40の4004、図42の4204、および図43の4304で以前に説明された結像システムについての詳細を示す、本発明の実施形態である。検出器4903を伴うレンズレイアウト4901は、以前に示された2×2および3×3結像システムの単一のチャネルに対するものである。材料4902は、Zeonex
480Rとして知られている。材料4902bは、Zeonex E48Rである。4901における光学システムの処方は、(Zemax Lensユニットにおいて)以下の通りである。

この特殊結像システムのMTFは、グラフ4905に示されるように非常に高い。本明細書で開示される符号化ローカライゼーション偏光コンパスを生成するために、直線偏光子が、4920のように各チャネルの正面に追加される。グレースケールピクセルスケールコードを用いて符号化ローカライゼーションシステムを生成するために、各チャネル用の強度コードは、4925のように検出器アレイの上に配置される。このコードは、センサカバーガラス上にリソグラフィで印刷されてもよく、または基板上に印刷され、Canyon MaterialsまたはJenoptik等の会社から市販されている厚さ5ミクロンのフォトリソグラフィックフィルム、またはレジスト、基板等のセンサカバーガラスに接着されてもよい。
図50は、全てのチャネルのための検出器要素として単一のセンサを使用した、2×2および3×3システムの実施形態である。側面図のみが図50に示されている。検出器5016および5056は、例えば、非常に大型のAPS(デジタルSLR)式センサ、または大型で5Mpixから14MPixの市販のCMOS画像センサである。これらのセンサは、サイズ(高さおよび幅の寸法)が約20mm以上であるため、公称6mm/チャネルの直径を伴う3×3および2×2チャネルが、単一の大型形式センサを横断して容易に適合するであろう。迷光を制御するバッフリングが、5018および5058としてこのシステムに含まれ、結像チャネルのそれぞれのためのレンズホルダまたはウエハスケール要素において固有である。構成5001では、各チャネルは、以前に開示されたように偏光コンパスを形成するように、相互に対して22.5度の角度で直線偏光子5010、5012、5014を提供される。構成5050では、各チャネルは、グレースケール強度コード5052を用いて連続基板を通して結像される。グレースケールコードは、2次元周波数空間をサンプリングするために、図42および43で以前に説明されたように各結像チャネルの下で変化する。構成5001は、偏光コンパスであり、構成5050は、サブピクセル位置推定を行うための符号化ローカライゼーションシステムである。

Claims (9)

  1. 再位置付け可能なオブジェクトのためのナビゲーションシステムであって、
    第1の複数の光学チャネルを有し、移動場面の第1の部分から情報を捕捉するように構成されている、第1の光学運動ユニットと、
    第2の複数の光学チャネルを有し、前記移動場面の第2の部分から情報を捕捉するように構成されている、第2の光学運動ユニットであって、前記第2の光学運動ユニットは、第1の方向に第1の距離だけ前記第1の光学運動ユニットから変位されている、第2の光学運動ユニットと、
    前記第1および第2の運動ユニットから出力されたデータと、前記第1の方向および距離とに基づいて、前記場面の運動における2次元変化を判定するように構成されている、処理サブシステムと
    を備え、
    前記第1の複数の光学チャネルおよび前記第2の複数の光学チャネルのそれぞれは、
    その上に入射され、前記移動場面から伝搬する、電磁エネルギーを受容するように構成された検出器と、
    ローカライゼーションコードであって、前記ローカライゼーションコードは、(i)それを通して前記検出器に通過する前記電磁エネルギーを光学的に修正するように構成され、(ii)振幅マスク、位相マスク、開口パターン、および偏光子のうちの1つであり、(iii)前記複数の光学チャネルのうちの各他の光学チャネルのローカライゼーションコードとは異なる、ローカライゼーションコードと
    を含む、ナビゲーションシステム。
  2. 前記移動場面の前記第1および第2の部分は、少なくとも部分的に重複している、請求項1に記載のナビゲーションシステム。
  3. 前記第1および第2の光学運動ユニットは、前記第1の距離および前記第1の方向が変化しないように、互いに対して厳格に位置付けられている、請求項1に記載のナビゲーションシステム。
  4. 再位置付け可能なオブジェクトの運動を制御するための方法であって、
    複数の光学チャネルを使用して移動場面から情報を捕捉することによって前記再位置付け可能なオブジェクトの現在の向首方向を判定することであって、前記複数の光学チャネルのそれぞれは、前記再位置付け可能なオブジェクトと結び付けられ、検出器とローカライゼーションコードとを有し、前記ローカライゼーションコードは、それを通して前記場面から前記検出器に通過する電磁エネルギーを光学的に修正するように構成され、各ローカライゼーションコードは、(a)振幅マスク、位相マスク、開口パターン、および偏光子のうちの1つであり、(b)前記複数の光学チャネルのうちの各他の光学チャネルのそれぞれのローカライゼーションコードとは異なる、ことと、
    衛星ナビゲーションシステムを使用して前記再位置付け可能なオブジェクトの現在の場所を判定することと、
    前記再位置付け可能なオブジェクトの前記現在の場所を所望の目的地と比較することによって、前記再位置付け可能なオブジェクトのための所望の向首方向を判定することと、
    前記現在の向首方向から前記所望の向首方向に前記再位置付け可能なオブジェクトの向首方向を調整することと
    を含む、方法。
  5. 前記現在の場所を判定するステップは、参照オブジェクトの既知位置に対して前記再位置付け可能なオブジェクトの相対位置を判定することをさらに含む、請求項4に記載の方法。
  6. 前記参照オブジェクトは、前記再位置付け可能なオブジェクトが進行する表面上に位置している、請求項5に記載の方法。
  7. 再位置付け可能なオブジェクトのためのナビゲーションシステムであって、
    移動場面から情報を協調的に捕捉するように配列された複数の光学チャネルであって、前記光学チャネルのそれぞれは、前記再位置付け可能なオブジェクトと結び付けられ、(i)検出器と(ii)ローカライゼーションコードとを有し、前記ローカライゼーションコードは、それを通して前記場面から前記検出器に通過する電磁エネルギーを光学的に修正するように構成され、前記ローカライゼーションコードは、振幅マスク、位相マスク、開口パターン、および偏光子のうちの1つであり、前記複数の光学チャネルのうちの各他の光学チャネルのローカライゼーションコードとは異なる、複数の光学チャネルと、
    衛星ナビゲーションシステムと通信するように構成された受信器と、
    デジタル信号プロセッサであって、前記デジタル信号プロセッサは、
    前記複数の光学チャネルによって捕捉される前記情報から前記再位置付け可能なオブジェクトの現在の向首方向を判定することと、
    前記受信器を使用して前記再位置付け可能なオブジェクトの現在の場所を判定することと、
    前記再位置付け可能なオブジェクトの前記現在の場所を所望の目的地と比較することによって、前記再位置付け可能なオブジェクトのための所望の向首方向を判定することと
    を行うように構成されている、デジタル信号プロセッサと
    を備える、ナビゲーションシステム。
  8. 前記場所を判定するステップにおいて、前記デジタル信号プロセッサは、参照オブジェクトの既知位置に対して前記再位置付け可能なオブジェクトの相対位置を判定するようにさらに構成されている、請求項7に記載のナビゲーションシステム。
  9. 前記参照オブジェクトは、前記再位置付け可能なオブジェクトが進行する表面上に位置している、請求項8に記載のナビゲーションシステム。
JP2018151134A 2012-01-03 2018-08-10 符号化ローカライゼーションシステム、方法および装置 Active JP6463582B2 (ja)

Applications Claiming Priority (22)

Application Number Priority Date Filing Date Title
US201261631389P 2012-01-03 2012-01-03
US61/631,389 2012-01-03
US201261634421P 2012-02-29 2012-02-29
US61/634,421 2012-02-29
US201261634936P 2012-03-08 2012-03-08
US61/634,936 2012-03-08
US201261685866P 2012-03-23 2012-03-23
US61/685,866 2012-03-23
US201261686728P 2012-04-11 2012-04-11
US61/686,728 2012-04-11
US201261687885P 2012-05-03 2012-05-03
US61/687,885 2012-05-03
US201261655740P 2012-06-05 2012-06-05
US61/655,740 2012-06-05
US201261673098P 2012-07-18 2012-07-18
US61/673,098 2012-07-18
US201261692540P 2012-08-23 2012-08-23
US61/692,540 2012-08-23
US201261720550P 2012-10-31 2012-10-31
US61/720,550 2012-10-31
US201261729045P 2012-11-21 2012-11-21
US61/729,045 2012-11-21

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014550551A Division JP6396214B2 (ja) 2012-01-03 2013-01-03 符号化ローカライゼーションシステム、方法および装置

Publications (2)

Publication Number Publication Date
JP2018189657A true JP2018189657A (ja) 2018-11-29
JP6463582B2 JP6463582B2 (ja) 2019-02-06

Family

ID=48745408

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2014550551A Active JP6396214B2 (ja) 2012-01-03 2013-01-03 符号化ローカライゼーションシステム、方法および装置
JP2018151134A Active JP6463582B2 (ja) 2012-01-03 2018-08-10 符号化ローカライゼーションシステム、方法および装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2014550551A Active JP6396214B2 (ja) 2012-01-03 2013-01-03 符号化ローカライゼーションシステム、方法および装置

Country Status (5)

Country Link
US (4) US9534884B2 (ja)
EP (1) EP2801077B1 (ja)
JP (2) JP6396214B2 (ja)
CN (2) CN107861102B (ja)
WO (1) WO2013103725A1 (ja)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9534884B2 (en) * 2012-01-03 2017-01-03 Ascentia Imaging, Inc. Coded localization systems, methods and apparatus
WO2014175931A2 (en) 2013-01-07 2014-10-30 Ascentia Imaging, Inc. Optical guidance systems and methods using mutually distinct signal-modifying sensors
US9562764B2 (en) 2012-07-23 2017-02-07 Trimble Inc. Use of a sky polarization sensor for absolute orientation determination in position determining systems
US10234439B2 (en) * 2012-11-07 2019-03-19 Airscout Inc. Methods and systems for analyzing a field
EP3060880A4 (en) 2013-10-22 2017-07-05 Polaris Sensor Technologies, Inc. Sky polarization and sun sensor system and method
US10311285B2 (en) 2014-01-22 2019-06-04 Polaris Sensor Technologies, Inc. Polarization imaging for facial recognition enhancement system and method
US9589195B2 (en) 2014-01-22 2017-03-07 Polaris Sensor Technologies, Inc. Polarization-based mapping and perception method and system
WO2016003253A1 (en) 2014-07-04 2016-01-07 Samsung Electronics Co., Ltd. Method and apparatus for image capturing and simultaneous depth extraction
US9519289B2 (en) 2014-11-26 2016-12-13 Irobot Corporation Systems and methods for performing simultaneous localization and mapping using machine vision systems
US9751210B2 (en) 2014-11-26 2017-09-05 Irobot Corporation Systems and methods for performing occlusion detection
US9744670B2 (en) 2014-11-26 2017-08-29 Irobot Corporation Systems and methods for use of optical odometry sensors in a mobile robot
US10175360B2 (en) 2015-03-31 2019-01-08 Faro Technologies, Inc. Mobile three-dimensional measuring instrument
ES2743489T3 (es) * 2015-05-11 2020-02-19 Bae Systems Plc Método y sistema de acoplamiento de aeronave
US10126114B2 (en) 2015-05-21 2018-11-13 Ascentia Imaging, Inc. Angular localization system, associated repositionable mechanical structure, and associated method
US11009584B2 (en) 2015-05-21 2021-05-18 Ascentia Imaging, Inc. Localization system and associated method
US10769806B2 (en) * 2015-09-25 2020-09-08 Logical Turn Services, Inc. Dimensional acquisition of packages
EP3394631A1 (en) * 2015-12-23 2018-10-31 Ascentia Imaging, Inc. Localization system and associated method
CN105627926B (zh) * 2016-01-22 2017-02-08 尹兴 四像机组平面阵列特征点三维测量系统及测量方法
US10133936B2 (en) * 2016-06-13 2018-11-20 The Board Of Trustees Of The University Of Alabama Active compressive sensing via a thermal sensor for human scenario recognition
US10120075B2 (en) 2016-08-19 2018-11-06 Faro Technologies, Inc. Using a two-dimensional scanner to speed registration of three-dimensional scan data
US10380749B2 (en) 2016-09-26 2019-08-13 Faro Technologies, Inc. Device and method for indoor mobile mapping of an environment
US10282854B2 (en) 2016-10-12 2019-05-07 Faro Technologies, Inc. Two-dimensional mapping system and method of operation
CN109983487B (zh) * 2016-11-21 2024-05-14 福特全球技术公司 到无人看管车辆的物品递送
US10824773B2 (en) 2017-03-28 2020-11-03 Faro Technologies, Inc. System and method of scanning an environment and generating two dimensional images of the environment
US10293485B2 (en) * 2017-03-30 2019-05-21 Brain Corporation Systems and methods for robotic path planning
JP6956031B2 (ja) * 2017-06-23 2021-10-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 距離測定装置および距離測定方法
WO2019010524A1 (en) * 2017-07-10 2019-01-17 The University Of Sydney METHOD AND APPARATUS FOR IMAGING A SCENE
US11009640B2 (en) 2017-08-11 2021-05-18 8259402 Canada Inc. Transmissive aerial image display
DE102017009336A1 (de) * 2017-10-07 2019-04-11 Deutsches Zentrum für Luft- und Raumfahrt e.V. Polarisationssensor
US11536828B2 (en) 2018-02-21 2022-12-27 Board Of Trustees Of Michigan State University Methods and systems for distributed radar imaging
US10558872B2 (en) 2018-03-23 2020-02-11 Veoneer Us Inc. Localization by vision
EP3617999B1 (en) * 2018-09-01 2023-04-19 Tata Consultancy Services Limited Systems and methods for dense surface reconstruction of an object using graph signal processing
US11024050B2 (en) 2018-11-05 2021-06-01 Faro Technologies, Inc. System and method of scanning an environment
DE102018132590A1 (de) 2018-12-18 2020-06-18 Valeo Schalter Und Sensoren Gmbh Determination of an attitude of a vehicle based on sky polarization by acelestial light source
US11486701B2 (en) 2019-02-06 2022-11-01 Faro Technologies, Inc. System and method for performing a real-time wall detection
US11146777B2 (en) * 2019-02-15 2021-10-12 Microsoft Technologv Licensing. LLC Efficient image population from captured scene
CN109933859B (zh) * 2019-02-23 2023-07-28 中国人民解放军陆军工程大学 一种基于多层复数相位屏表征的远场激光大气传输仿真方法
CN111181633B (zh) * 2020-01-22 2022-02-01 南京邮电大学 一种时间-极化超纠缠态的纠缠辅助无噪线性放大方法
US11678140B2 (en) * 2020-06-29 2023-06-13 The United States Of America As Represented By The Secretary Of The Army Localization by using skyline data
CN115400887A (zh) * 2021-05-28 2022-11-29 青岛海特生物医疗有限公司 用于离心机转子识别的方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4495589A (en) * 1982-09-20 1985-01-22 Crane Co. Aircraft ground velocity determination system
JP2006351973A (ja) * 2005-06-17 2006-12-28 Matsushita Electric Ind Co Ltd 集光素子の製造方法、集光素子および位相シフトマスク
WO2009147814A1 (ja) * 2008-06-02 2009-12-10 パナソニック株式会社 法線情報を生成する画像処理装置、方法、コンピュータプログラム、および、視点変換画像生成装置
US20100008588A1 (en) * 2008-07-08 2010-01-14 Chiaro Technologies LLC Multiple channel locating
JP2011150688A (ja) * 2009-12-25 2011-08-04 Ricoh Co Ltd 立体物識別装置、並びに、これを備えた移動体制御装置及び情報提供装置

Family Cites Families (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3916198A (en) * 1973-06-01 1975-10-28 Westinghouse Electric Corp Amplified-scintillation optical-coded radioisotope imaging system
GB2198007B (en) 1986-09-10 1990-08-15 Marconi Co Ltd Radiation detector
US4830485A (en) 1987-11-23 1989-05-16 General Electric Company Coded aperture light detector for three dimensional camera
US5367373A (en) 1992-11-19 1994-11-22 Board Of Regents, The University Of Texas System Noncontact position measurement systems using optical sensors
JP3329623B2 (ja) 1995-06-27 2002-09-30 株式会社東芝 ワイヤボンディング装置およびワイヤボンディング方法
JP3698796B2 (ja) * 1996-03-12 2005-09-21 オリンパス株式会社 角度検出装置、及び頭部搭載型映像表示装置
US5890095A (en) 1997-01-21 1999-03-30 Nichols Research Corporation System for receiving and enhancing electromagnetic radiation input signals
AUPO615297A0 (en) * 1997-04-10 1997-05-08 Commonwealth Scientific And Industrial Research Organisation Imaging system and method
DE19715214C1 (de) 1997-04-11 1998-07-02 Siemens Ag Bildsensor mit einer Vielzahl von Bildpunkt-Sensorbereichen
JP3739550B2 (ja) 1997-10-29 2006-01-25 大日本スクリーン製造株式会社 ウェハの測定位置決定方法
US7295314B1 (en) 1998-07-10 2007-11-13 Nanometrics Incorporated Metrology/inspection positioning system
US7110669B2 (en) * 1998-07-22 2006-09-19 Synchrodyne Networks, Inc. Time driven wavelength conversion-based switching with common time reference
US6184974B1 (en) 1999-07-01 2001-02-06 Wavefront Sciences, Inc. Apparatus and method for evaluating a target larger than a measuring aperture of a sensor
WO2001035052A1 (en) 1999-11-12 2001-05-17 Armstrong Brian S Robust landmarks for machine vision and methods for detecting same
AU2001230871A1 (en) * 2000-01-10 2001-07-24 The Johns-Hopkins University Optical communication system using a high altitude tethered balloon
US6550917B1 (en) 2000-02-11 2003-04-22 Wavefront Sciences, Inc. Dynamic range extension techniques for a wavefront sensor including use in ophthalmic measurement
US7455407B2 (en) 2000-02-11 2008-11-25 Amo Wavefront Sciences, Llc System and method of measuring and mapping three dimensional structures
US7161128B2 (en) 2000-07-14 2007-01-09 Adaptive Optics Associates, Inc. Optical instrument employing a wavefront sensor capable of coarse and fine phase measurement capabilities during first and second modes of operation
US6737652B2 (en) * 2000-09-29 2004-05-18 Massachusetts Institute Of Technology Coded aperture imaging
US6574043B2 (en) * 2001-11-07 2003-06-03 Eastman Kodak Company Method for enhanced bit depth in an imaging apparatus using a spatial light modulator
US6653030B2 (en) 2002-01-23 2003-11-25 Hewlett-Packard Development Company, L.P. Optical-mechanical feature fabrication during manufacture of semiconductors and other micro-devices and nano-devices that include micron and sub-micron features
IL162543A0 (en) 2002-01-24 2005-11-20 Nano Or Technologies Israel Lt Improved spatial wavefront analysisand 3d measurement
US9428186B2 (en) * 2002-04-09 2016-08-30 Intelligent Technologies International, Inc. Exterior monitoring for vehicles
US20040109059A1 (en) * 2002-11-12 2004-06-10 Kevin Kawakita Hybrid joint photographer's experts group (JPEG) /moving picture experts group (MPEG) specialized security video camera
WO2004076993A2 (en) 2003-02-26 2004-09-10 Castonguay Raymond J Spherical light-scatter and far-field phase measurement
CN1768346B (zh) 2003-03-31 2010-11-17 Cdm光学有限公司 用于最小化成像系统中的光程差效应的系统和方法
EP1627526A1 (en) * 2003-05-13 2006-02-22 Xceed Imaging Ltd. Optical method and system for enhancing image resolution
EP1491918A3 (en) 2003-06-24 2005-01-26 Lg Electronics Inc. Microlens array sheet of projection screen, and method for manufacturing the same
GB2407378B (en) 2003-10-24 2006-09-06 Lein Applied Diagnostics Ltd Ocular property measuring apparatus and method therefor
EP1715788B1 (en) 2004-02-17 2011-09-07 Philips Electronics LTD Method and apparatus for registration, verification, and referencing of internal organs
GB0405014D0 (en) 2004-03-05 2004-04-07 Qinetiq Ltd Movement control system
US7477842B2 (en) 2004-03-12 2009-01-13 Siimpel, Inc. Miniature camera
US7720554B2 (en) 2004-03-29 2010-05-18 Evolution Robotics, Inc. Methods and apparatus for position estimation using reflected light sources
EP1598638A2 (en) * 2004-05-20 2005-11-23 Noritsu Koki Co., Ltd. Image processing system and navigaton system for correlating position data with image data
HU0401057D0 (en) * 2004-05-26 2004-08-30 Balogh Tibor Method and apparatus for generating 3d images
US7939003B2 (en) 2004-08-11 2011-05-10 Cornell Research Foundation, Inc. Modular fabrication systems and methods
US7591557B2 (en) 2005-05-10 2009-09-22 Wtp Optics, Inc. Solid state method and apparatus for making lenses and lens components
US8158917B2 (en) 2005-12-13 2012-04-17 Agency For Science Technology And Research Optical wavefront sensor and optical wavefront sensing method
EP3067771B1 (en) * 2006-03-17 2017-11-08 iRobot Corporation Robot confinement
US7639369B2 (en) 2006-04-13 2009-12-29 Mette Owner-Petersen Multi-object wavefront sensor with spatial filtering
TWI397995B (zh) 2006-04-17 2013-06-01 Omnivision Tech Inc 陣列成像系統及其相關方法
US8822894B2 (en) 2011-01-07 2014-09-02 California Institute Of Technology Light-field pixel for detecting a wavefront based on a first intensity normalized by a second intensity
FR2902527B1 (fr) * 2006-06-20 2008-12-19 Commissariat Energie Atomique Dispositif de localisation tridimentionnelle de sources de rayonnement
CA2684603A1 (en) * 2007-04-23 2008-11-06 California Institute Of Technology An aperture system with spatially-biased apertures for 3d defocusing-based imaging
WO2008133864A2 (en) 2007-04-23 2008-11-06 Tessera North America, Inc. Mass production of micro-optical devices, corresponding tools, and resultant structures
US20080309762A1 (en) * 2007-06-12 2008-12-18 Richie Howard In-vehicle mobile digital video surveillance recorder system with GPS visual mapping and navigation
US8148663B2 (en) * 2007-07-31 2012-04-03 Applied Materials, Inc. Apparatus and method of improving beam shaping and beam homogenization
JP4576412B2 (ja) 2007-09-05 2010-11-10 シャープ株式会社 着色マイクロレンズアレイの製造方法、カラー固体撮像素子およびその製造方法、カラー表示装置の製造方法、電子情報機器の製造方法
CN101232327B (zh) * 2007-10-30 2011-05-18 华东理工大学 可见光空分多址多路通信系统
US8811763B2 (en) 2007-12-06 2014-08-19 The United States Of America As Represented By The Secretary Of The Army Method and system for producing image frames using quantum properties
WO2009115108A1 (en) * 2008-03-19 2009-09-24 Ruprecht-Karls-Universität Heidelberg A method and an apparatus for localization of single dye molecules in the fluorescent microscopy
US7746266B2 (en) * 2008-03-20 2010-06-29 The Curators Of The University Of Missouri Microwave and millimeter wave imaging system
US20100328142A1 (en) 2008-03-20 2010-12-30 The Curators Of The University Of Missouri Microwave and millimeter wave resonant sensor having perpendicular feed, and imaging system
EP2263373B1 (en) 2008-03-28 2014-08-13 The Trustees of Columbia University in the City of New York Generalized assorted pixel camera systems and methods
GB0814562D0 (en) * 2008-08-08 2008-09-17 Qinetiq Ltd Processing for coded aperture imaging
JP5187145B2 (ja) 2008-11-07 2013-04-24 株式会社ニコン 画像合成装置および方法
EP2380134A1 (en) * 2008-12-19 2011-10-26 Xollai, Llc System and method for determining an orientation and position of an object
KR20110126612A (ko) 2009-01-09 2011-11-23 픽셀옵틱스, 인크. 전기­활성화 안경 및 관련 전자장치
US9164168B2 (en) 2009-03-20 2015-10-20 Wright State University Systems for detecting movement of a target
RU2009113008A (ru) * 2009-04-08 2010-10-20 Михаил Юрьевич Воробьев (RU) Способ определения позиции и ориентации прицепа транспортного средства и устройство для его осуществления
GB0907277D0 (en) 2009-04-29 2009-06-10 Univ Kent Kanterbury Method for depth resolved wavefront sensing, depth resolved wavefront sensors and method and apparatus for optical imaging
US8854527B2 (en) 2009-05-03 2014-10-07 Lensvector, Inc. Optical lens having fixed lenses and embedded active optics
GB2470554A (en) 2009-05-26 2010-12-01 St Microelectronics Ltd Optical navigation device with housing and optical transmission element to a mousing surface
US8296096B2 (en) 2009-07-09 2012-10-23 Richard Kirby Positioning system and method using optically tracked anchor points
IL201110A (en) * 2009-09-22 2014-08-31 Vorotec Ltd Device and method of navigation
EP2502115A4 (en) * 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
US8569680B2 (en) 2009-12-21 2013-10-29 University Of Wyoming Hyperacuity from pre-blurred sampling of a multi-aperture visual sensor
WO2011078199A1 (en) 2009-12-25 2011-06-30 Ricoh Company, Ltd. Object identifying apparatus, moving body control apparatus, and information providing apparatus
KR101147848B1 (ko) * 2010-01-15 2012-06-01 주식회사 아이디폰 저격수의 조준사격 및 관측수의 관측상황 통합통제시스템 및 그 방법
US8749797B1 (en) 2010-03-02 2014-06-10 Advanced Optical Systems Inc. System and method for remotely determining position and orientation of an object
US8620065B2 (en) * 2010-04-09 2013-12-31 The Regents Of The University Of Colorado Methods and systems for three dimensional optical imaging, sensing, particle localization and manipulation
US9046422B2 (en) 2011-04-20 2015-06-02 The Arizona Board Of Regents On Behalf Of The University Of Arizona Ultra-compact snapshot imaging fourier transform spectrometer
US9212899B2 (en) 2010-09-15 2015-12-15 Ascentia Imaging, Inc. Imaging, fabrication and measurement systems and methods
US8670171B2 (en) 2010-10-18 2014-03-11 Qualcomm Mems Technologies, Inc. Display having an embedded microlens array
KR101815972B1 (ko) 2010-12-30 2018-01-09 삼성전자주식회사 적외선을 이용한 고정밀 신호 센싱 시스템 및 방법
GB2489410B (en) 2011-03-24 2017-11-08 Viper Innovations Ltd Pressure compensating device
US9534884B2 (en) * 2012-01-03 2017-01-03 Ascentia Imaging, Inc. Coded localization systems, methods and apparatus
WO2014175931A2 (en) 2013-01-07 2014-10-30 Ascentia Imaging, Inc. Optical guidance systems and methods using mutually distinct signal-modifying sensors
KR101881925B1 (ko) 2012-01-06 2018-07-26 삼성전자주식회사 복수의 휴대 단말들을 이용하여 멀티 비전 시스템을 구축하는 방법 및 이를 위한 장치
US20140319076A1 (en) * 2013-04-29 2014-10-30 Sergey Galushko Oil spill response submarine and method of use thereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4495589A (en) * 1982-09-20 1985-01-22 Crane Co. Aircraft ground velocity determination system
JP2006351973A (ja) * 2005-06-17 2006-12-28 Matsushita Electric Ind Co Ltd 集光素子の製造方法、集光素子および位相シフトマスク
WO2009147814A1 (ja) * 2008-06-02 2009-12-10 パナソニック株式会社 法線情報を生成する画像処理装置、方法、コンピュータプログラム、および、視点変換画像生成装置
US20100008588A1 (en) * 2008-07-08 2010-01-14 Chiaro Technologies LLC Multiple channel locating
JP2011150688A (ja) * 2009-12-25 2011-08-04 Ricoh Co Ltd 立体物識別装置、並びに、これを備えた移動体制御装置及び情報提供装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
藤田満明,外2名: ""ステレオ移動カメラによる速度および奥行き情報の計測"", 電子情報通信学会1998年総合大会講演論文集, vol. 情報・システム2, JPN6018034023, 8 March 1998 (1998-03-08), pages 152, ISSN: 0003870004 *

Also Published As

Publication number Publication date
CN104246826A (zh) 2014-12-24
EP2801077A4 (en) 2016-02-10
US9534884B2 (en) 2017-01-03
CN104246826B (zh) 2017-12-15
CN107861102B (zh) 2021-08-20
JP6396214B2 (ja) 2018-09-26
US20180328715A1 (en) 2018-11-15
US10024651B2 (en) 2018-07-17
EP2801077B1 (en) 2023-11-29
JP2015510110A (ja) 2015-04-02
US20230148273A1 (en) 2023-05-11
CN107861102A (zh) 2018-03-30
US11499816B2 (en) 2022-11-15
EP2801077A1 (en) 2014-11-12
US20170108330A1 (en) 2017-04-20
WO2013103725A1 (en) 2013-07-11
JP6463582B2 (ja) 2019-02-06
US20150219437A1 (en) 2015-08-06

Similar Documents

Publication Publication Date Title
JP6463582B2 (ja) 符号化ローカライゼーションシステム、方法および装置
JP7108331B2 (ja) 相互に別々の信号修正センサを使用する光学誘導システムおよび方法
US10317205B2 (en) Depth measurement using a phase grating
CN104502918A (zh) 一种低轨卫星星载图谱关联探测方法与载荷
WO2013052781A1 (en) Method and apparatus to determine depth information for a scene of interest
US20190318486A1 (en) Systems, Methods, and Media for Determining Object Motion in Three Dimensions from Light Field Image Data
Zimmer et al. GPU-accelerated faint streak detection for uncued surveillance of LEO
EP2902796A2 (en) Two axis interferometric tracking device and method
JP6529411B2 (ja) 移動体識別装置及び移動体識別方法
Qiu et al. Moirétag: Angular measurement and tracking with a passive marker
Arroyo et al. A monocular wide-field vision system for geolocation with uncertainties in urban scenes
Iscar et al. Towards distortion based underwater domed viewport camera calibration
CN106644074B (zh) 一种三维立体光谱成像系统
CN113432611B (zh) 一种基于全天域大气偏振模式成像的定向装置和方法
Jamtsho Geometric modelling of 3D range cameras and their application for structural deformation measurement
CN107478858B (zh) 基于斯托克斯矢量光流的运动速度检测传感器装置及检测方法
Harlakin et al. LCD-Based Angle-of-Arrival Estimation of Multiple Light Sources: Paving the Road to Multiuser VLC
Serres et al. Passive Polarized Vision for Autonomous Vehicles: A Review
Peppa Precision analysis of 3D camera
Baranova et al. The Resident Space Object Detection Method Based on the Connection between the Fourier Domain Image of the Video Data Difference Frame and the Orbital Velocity Projection
Wu et al. Catadioptric omnidirectional thermal odometry in dynamic environment
Cai et al. Noise Analysis and Modeling of the PMD Flexx2 Depth Camera for Robotic Applications
CN116086610A (zh) 一种基于反射式编码掩膜的计算光谱成像导引装置
Sridharan et al. Crowded-Field Astrometry with SIM PlanetQuest. I. Estimating the Single-Measurement Astrometric Bias Arising from Confusion
US20160134806A1 (en) Hyperacuity system and methods for real time and analog detection and kinematic state tracking

Legal Events

Date Code Title Description
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180824

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180831

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181229

R150 Certificate of patent or registration of utility model

Ref document number: 6463582

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250