JP6970820B2 - 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ - Google Patents

拡張されたダイナミックレンジのための組み合わせ光検出器アレイ Download PDF

Info

Publication number
JP6970820B2
JP6970820B2 JP2020515976A JP2020515976A JP6970820B2 JP 6970820 B2 JP6970820 B2 JP 6970820B2 JP 2020515976 A JP2020515976 A JP 2020515976A JP 2020515976 A JP2020515976 A JP 2020515976A JP 6970820 B2 JP6970820 B2 JP 6970820B2
Authority
JP
Japan
Prior art keywords
photodetector
signal
photodetector signal
additional
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020515976A
Other languages
English (en)
Other versions
JP2020535396A (ja
Inventor
オナル,ケイナー
ガッサン,ブレイズ
ドロズ,ピエール−イヴ
Original Assignee
ウェイモ エルエルシー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ウェイモ エルエルシー filed Critical ウェイモ エルエルシー
Publication of JP2020535396A publication Critical patent/JP2020535396A/ja
Priority to JP2021177820A priority Critical patent/JP2022023945A/ja
Application granted granted Critical
Publication of JP6970820B2 publication Critical patent/JP6970820B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4816Constructional features, e.g. arrangements of optical elements of receivers alone
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/42Photometry, e.g. photographic exposure meter using electric radiation detectors
    • G01J1/4228Photometry, e.g. photographic exposure meter using electric radiation detectors arrangements with two or more detectors, e.g. for sensitivity compensation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4861Circuits for detection, sampling, integration or read-out
    • G01S7/4863Detector arrays, e.g. charge-transfer gates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4868Controlling received signal intensity or exposure of sensor
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/42Photometry, e.g. photographic exposure meter using electric radiation detectors
    • G01J1/44Electric circuits
    • G01J2001/4413Type
    • G01J2001/442Single-photon detection or photon counting
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/42Photometry, e.g. photographic exposure meter using electric radiation detectors
    • G01J1/44Electric circuits
    • G01J2001/4446Type of detector
    • G01J2001/446Photodiode
    • G01J2001/4466Avalanche

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Photometry And Measurement Of Optical Pulse Characteristics (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Measurement Of Optical Distance (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Description

関連出願の相互参照
本出願は、2017年9月25日に出願された米国非仮出願第15/714,435号の利益を主張する。
本明細書において特段の明示がない限り、このセクションに記載されている資料は、本出願の特許請求の範囲に対する先行技術ではなく、このセクションに含まれることによって先行技術であることを容認するものではない。
光検出測距(LIDAR)デバイスは、所与の環境内の対象物までの距離を推定することができる。例えば、LIDARシステムのエミッタサブシステムは、近赤外線の光パルスを放射することができ、その光パルスは、システムの環境内の対象物と相互作用し得る。光パルスのうちの少なくとも一部は、LIDARに向かって元に戻り(例えば、反射または散乱に起因して)、受信機サブシステムによって検出することができる。従来の受信機サブシステムは、複数の検出器、および高い時間分解能(例えば、約400ps)を有するそれぞれの光パルスの到達時間を判定するように構成された対応するコントローラを含み得る。LIDARシステムと所与の対象物との間の距離は、所与の対象物と相互作用する対応する光パルスの飛行時間に基づいて判定され得る。
本開示は、LIDARシステムのダイナミックレンジを改善する方法およびシステムに関する。例えば、LIDARシステムの受信機サブシステムは、より高いダイナミックレンジのLIDAR撮像能力を提供するために、異なるタイプの光検出器からの入力を利用することができる。
第1の態様では、システムが提供される。このシステムは、基板、基板に結合されている複数の単一光子光検出器、および基板に結合されている少なくとも1つの追加の光検出器を備える。単一光子光検出器、および少なくとも1つの追加の光検出器は、視界からの光を検出するように配列される。少なくとも1つの追加の光検出器は、単一光子光検出器以外のものである。そのシステムはまた、動作を行うためにプログラム命令を実行するように構成されるコントローラも備える。動作は、複数の単一光子光検出器からの第1の光検出器信号を受信することを含む。第1の光検出器信号は、単一光子光検出器によって検出された、視界からの光を示す。その動作はまた、少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することも含む。第2の光検出器信号は、少なくとも1つの追加の光検出器によって検出された、視界からの光を示す。その動作は、さらに、第1の光検出器信号、第2の光検出器信号、ならびに第1および第2の光検出器信号を組み合わせることによって形成される組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することを含む。動作は、さらにまた、選択された光検出器信号に基づいて、視界内の光の強度を判定することも含む。
第2の態様では、方法が提供される。この方法は、複数の単一光子光検出器からの第1の光検出器信号を受信することを含む。第1の光検出器信号は、単一光子光検出器によって検出された、視界からの光を示す。その方法はまた、少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することも含む。第2の光検出器信号は、少なくとも1つの追加の光検出器によって検出される視界からの光を示す。少なくとも1つの追加の光検出器は、単一光子光検出器以外のものである。複数の単一光子光検出器、および少なくとも1つの追加の光検出器は、基板に結合される。その方法は、さらに、第1の光検出器信号、第2の光検出器信号、ならびに第1および第2の光検出器信号を組み合わせることによって形成される組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することを含む。その方法は、さらにまた、選択された光検出器信号に基づいて、視界内の光の強度を判定することを含む。
他の態様、実施形態、および実施態様は、添付図面の適切な箇所を参照して、以下の詳細な説明を読み取ることによって、当業者には明らかになるであろう。
例示的な実施形態によるシステムを例証する図である。 例示的な実施形態によるシステムを例証する図である。 例示的な実施形態によるシナリオを例証する図である。 例示的な実施形態によるシステムを例証する図である。 例示的な実施形態によるシステムを例証する図である。 例示的な実施形態による回路を例証する図である。 例示的な実施形態による方法を例証する図である。
例示的な方法、デバイス、およびシステムが、本明細書に記載されている。「例示的」および「典型的」という用語は、本明細書では、「1つの例、事例、または例証としての役割を果たす」ことを意味するものとして使用されることを理解されたい。「例示的」または「典型的」であるとして本明細書に記載された任意の実施形態または特徴は、他の実施形態または特徴よりも好ましいまたは有利であるものと必ずしも解釈されるべきではない。本明細書に提示される主題の範囲から逸脱することなく、他の実施形態を利用することができ、他の変更を行うことができる。
したがって、本明細書に記載される例示的な実施形態は、限定的であることを意味するものではない。本開示の態様は、本明細書に一般的に記載され、図に例証されているように、多種多様な異なる構成で配列、置き換え、組み合わせ、分離、および設計されることができ、それらのすべてが、本明細書で想定される。
さらに、文脈上特段の示唆がある場合を除き、各図において例証された特徴は、互いに組み合わせて使用することができる。したがって、図は、一般的に、1つ以上の実施形態全体のうちの部分的な態様として見なされ、例示された特徴のすべてが、必ずしも各実施形態に必要であるとは限らないことを理解されたい。
I.概要
ガイガーモードで動作している間、シリコン光電子増倍管検出器(SiPM)、単一光子アバランシェダイオード(SPAD)、または他のタイプの高感度光検出器は、単一光子レベルの検知を提供することができるが、そのようなデバイスは、一般的に、比較的低いダイナミックレンジ(例えば、0〜3000光子)を提供する。一例として、SiPMは、比較的高い光レベル(例えば、再帰反射、近距離対象物等)を有するシナリオでは、飽和状態に達する場合がある。
対照的に、線形モードアバランシェフォトダイオード(LmAPD)は、より高いダイナミックレンジを提供するが、単一光子レベルで光を検出することができない。すなわち、LmAPDは、非常に弱い光の検出能力が不足している。
実施形態は、それぞれの異なる光感度、スペクトル応答性、および/またはダイナミックレンジ属性を有する異なる光検出器(例えば、SiPMおよびLmAPD)の組み合わせを包含するシステムおよび方法を含む。そのような検出器の組み合わせは、弱い光の検出、ならびに強い光レベルでの高ダイナミックレンジ(例えば、再帰反射を伴うシーン、近距離対象物など)を提供することができる。例示的な実施形態には、モノリシック様式で一体化されたAPDおよびSiPMの組み合わせが含まれる。すなわち、APDおよびSiPMは、同じボード上に、かつ/または同じ基板上にさえ配列することができる。例示的な実施形態として、APDデバイスは、1つまたは2つの追加のフォトリソグラフィマスク製造工程を使用して、SiPM検出器アレイと同じ基板上に製造することができる。
第1の検出器タイプ(例えば、SiPM)の複数の検出器からの出力信号(例えば、光信号)は、マイクロコントローラまたは論理ユニット上の第1の入力チャネルにルーティングすることができる。同様に、第2の検出器タイプ(例えば、APD)の複数の検出器からの出力信号は、マイクロコントローラまたは論理ユニットの第2の入力チャネルにルーティングすることができる。弱い光の状況では、論理ユニットは、実際の光強度を表すものとしてSiPM信号を選択し、雑音のあるまたは非線形のAPD信号を無視することができる。明るい光のシナリオでは、論理ユニットは、実際の光強度を表すものとしてAPD信号を選択し、飽和したSiPM信号を無視することができる。他の光レベルのシナリオでは、APDおよびSiPMからのそれぞれの信号は、様々な割合で混合または重み付けされて、検出される光子に対して実質的に線形である信号強度を提供することができる。
別の実施形態では、APDおよびSiPMのペアが、並列回路で配列され得る。いくつかの実施形態では、そのようなペアの検出器は、極零ゼロネットワークを使用して結合されてもよい。そのようなシナリオでは、並列の組み合わせを流れる電流は、実際の光レベルを示すアナログ信号を提供することができる。
別の方法による実施形態では、APDの代わりに、またはAPDに加えて、PINダイオードを使用することができる。すなわち、いくつかの実施形態では、撮像システムが、3つ以上のタイプの検出器(例えば、SiPM、APD、PINダイオード、ボロメータ、光伝導体等)を組み込むことができる。他の実施形態では、APDデバイスは、対応するSiPMデバイスの下に積み重ねることができる。そのようなシナリオでは、SiPMデバイスによっては吸収されない光子は、SiPM(および場合によっては、介在材料)を通ってAPDデバイスに送出され得る。そのようにして、低い光レベルと明るい光レベルの両方を検出することができる。
II.例示的システム
図1Aは、例示的な実施形態によるシステム100を例証する。システム100は、基板102に結合された複数の単一光子光検出器110を備える。この複数の単一光子光検出器110は、第1の光検出器タイプ112の複数の光検出器を含む。
システム100はまた、基板102に結合された少なくとも1つの追加の光検出器120も備える。少なくとも1つの追加の光検出器120は、第2の光検出器タイプ122の1つ以上の光検出器を含む。すなわち、少なくとも1つの追加の光検出器は、単一光子光検出器ではない光検出器である。いくつかの実施形態では、第1の光検出器タイプは、シリコン光電子増倍管(SiPM)検出器を含む。例示的な実施形態は、アバランシェフォトダイオード(APD)検出器またはPINフォトダイオード検出器のうちの少なくとも1つであるものとして、第2の光検出器タイプを含むことができる。本明細書では、他の光検出器タイプもまた可能であり、想定されている。
いくつかの実施形態では、基板102は、第1の表面を含むことができる。そのようなシナリオでは、第1の表面は、基板102の主面に沿って配設することができる。
複数の単一光子光検出器110、および少なくとも1つの追加の光検出器120は、第1の表面に結合することができる。例えば、複数の単一光子光検出器110、および少なくとも1つの追加の光検出器120は、基板102の同じ表面上に横に並んだ配列で配設することができる。
別の実施形態では、複数の単一光子光検出器110の検出器のうちの少なくとも一部は、混合された光検出器配列を形成するように、少なくとも1つの追加の光検出器120の検出器のうちの少なくとも一部の間に第1の表面に沿って配列することができる。他の実施形態では、複数の単一光子光検出器110、および少なくとも1つの追加の光検出器120は、他の配列で配設され得、かつ/または基板102の異なる表面に結合され得る。
複数の単一光子光検出器110、および少なくとも1つの追加の光検出器120の他の配列が可能である。例えば、複数の単一光子光検出器110は、積み重ねられた光検出器配列を形成するように、少なくとも1つの追加の光検出器120の上面に結合され得る。
またさらに、本明細書に記載された例は、基板102に関するものであるが、他の実施形態は、2つ以上の基板上に配列されたそれぞれの検出器を含み得ることを理解されたい。例えば、複数の単一光子光検出器110は、第1の基板の表面に沿って配列され得、少なくとも1つの追加の光検出器120は、第2の基板の表面に沿って配列され得る。本明細書では、2つ以上の基板を含む他の検出器配列が可能であり、想定されている。
いくつかの実施形態では、複数の単一光子光検出器110は、視界からの光を検出するように配列されている。そのようなシナリオでは、少なくとも1つの追加の光検出器120は、同じ視界ののうちの少なくとも一部からの光を検出するように配列されている。例示的な実施形態では、システム100は、撮像光学系142を備える。そのようなシナリオでは、複数の単一光子光検出器110、および少なくとも1つの追加の光検出器120は、両方とも撮像光学系142を介して、共通の視界からの光を検出することができる。
いくつかの実施形態では、システム100は、光検出器出力回路128を備える。複数の単一光子光検出器110、および少なくとも1つの追加の光検出器120は、光検出器出力回路128に結合され得る。
システム100はまた、論理ユニット130も備える。例示的な実施形態では、論理ユニット130は、第1の入力チャネル132および第2の入力チャネル134を含む。そのようなシナリオでは、複数の単一光子光検出器110のそれぞれの光検出器信号は、論理ユニット130の第1の入力チャネル132にルーティングされる。少なくとも1つの追加の光検出器120のそれぞれの光検出器信号は、論理ユニット130の第2の入力チャネル134にルーティングされる。
例示的な実施形態において、弱い光の状況の間では、論理ユニット130は、SiPM信号を実際の光強度を表すものとして選択し、雑音のあるまたは非線形のAPD信号を無視することができる。対照的に、明るい光のシナリオでは、論理ユニット130は、LmAPD信号を実際の光強度を表すものとして選択し、飽和するSiPM信号を無視することができる。他の光レベルのシナリオでは、LmAPDおよびSiPMからのそれぞれの信号は、様々な割合で混合または重み付けされて、検出された光子に対して実質的に線形である信号強度を提供することができる。
いくつかの実施形態では、システム100は、露出計140を備える。露出計140は、照明条件を示す情報を論理ユニット130に提供するように構成することができる。少なくともいくつかの実施形態では、論理ユニット130は、照明条件に基づいて、組み合わされた画像を提供することができる。
いくつかの例示的な実施形態では、システム100は、複数の光源144を含むことができる。複数の光源144は、レーザを含んでもよいが、他のタイプの光源もまた、想定される。複数の光源144を含むことができるいくつかの実施形態は、256個のレーザ光源を含んでもよい。そのようなシナリオでは、複数の単一光子光検出器110、および少なくとも1つの追加の光検出器120は、各々、256個の光検出器を含んでもよい。他の数量の光源および光検出器が可能であり、かつ想定されている。
システム100は、さらに、コントローラ150を備える。いくつかの実施形態では、コントローラ150は、論理ユニット130の機能性のうちの一部またはすべてを含むことができる。コントローラ150は、少なくとも1つのプロセッサ152、およびメモリ154を含む。少なくとも1つのプロセッサ152は、例えば、特定用途向け集積回路(ASIC)またはフィールドプログラマブルゲートアレイ(FPGA)を含んでもよい。本明細書では、ソフトウェア命令を行うように構成された他のタイプのプロセッサ、コンピュータ、またはデバイスが、想定されている。メモリ154は、以下に限定されないが、読み出し専用メモリ(ROM)、プログラム可能読み出し専用メモリ(PROM)、消去可能プログラム可能読み出し専用メモリ(EPROM)、電気的消去可能プログラム可能読み出し専用メモリ(EEPROM)、不揮発性ランダムアクセスメモリ(例えば、フラッシュメモリ)、半導体ドライブ(SSD)、ハードディスクドライブ(HDD)、コンパクトディスク(CD)、デジタルビデオディスク(DVD)、デジタルテープ、読み取り/書き込み(R/W)CD、R/W DVD等の非一過性コンピュータ可読媒体を含んでもよい。
少なくとも1つのプロセッサ152は、動作を行うために、メモリ154内に格納されたプログラム命令を実行するように構成されている。いくつかの実施形態では、動作は、複数の単一光子光検出器からの第1の光検出器信号を受信することを含む。いくつかの実施形態では、第1の光検出器信号は、単一光子光検出器によって検出された、視界からの光を示すことができる。
動作は、さらに、少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することを含む。そのようなシナリオでは、第2の光検出器信号は、少なくとも1つの追加の光検出器によって検出された、視界からの光を示すことができる。
動作はまた、第1の光検出器信号、第2の光検出器信号、ならびに第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することも含む。
またさらに、動作は、選択された光検出器信号に基づいて、視界の光の強度を判定することも含む。
いくつかの実施形態では、動作は、共通の視界のうちの少なくとも一部の露出条件を示す情報を受け取ることを含むことができる。例えば、露出計140は、露出条件についての情報を提供してもよい。そのようなシナリオでは、組み合わされた光検出器信号は、露出条件に基づいている第1および第2の光検出器の組み合わせによって形成されてもよい。
コントローラ150は、車両上に配設されたコンピュータ、外部コンピュータ、またはスマートフォン、タブレットデバイス、パーソナルコンピュータ、ウェアラブルデバイス等のモバイルコンピューティングプラットフォームを含んでもよい。追加的に、または別の方法として、コントローラ150は、クラウドサーバなどの遠隔に設置されたコンピュータシステムを含んでもよく、またはそれに接続されてもよい。例示的な実施形態では、コントローラ150は、本明細書に記載されたいくつかまたはすべての方法ブロックまたはステップを行うように構成されてもよい。
いくつかの実施形態では、動作は、光検出器信号を選択することを含む。光検出器信号を選択することは、第1の光検出器信号を第1の閾値と比較することを含むことができる。第1の閾値は、閾値電圧、閾値電流、および/または電圧もしくは電流の変化率であり得る。第1の光検出器信号が第1の閾値よりも小さいという判定に応答して、動作は、第1の光検出器信号を、選択された光検出器信号として選択することを含むことができる。すなわち、いくつかの実施形態では、光電流または光電圧が閾値電流または閾値電圧を下回る場合、単一光子検出器からの信号が望ましい場合がある。すなわち、低い光レベルでは、SiPM信号が、唯一の妥当な光信号であり得、その理由は、APDまたは他の光検出器が、そのような低いレベルでは光子を検出することができない場合があるからである。
いくつかの実施形態では、動作は、第2の光検出器信号を第2の閾値と比較することを含むことができる。第2の閾値は、例えば、比較的高い光レベル(例えば、APDが有効であり得る光レベル)を示し得る閾値電圧または閾値電流(または電圧/電流の変化率)であり得る。そのようなシナリオでは、第2の光検出器信号が第2の閾値よりも大きいという判定に応答して、動作は、第2の光検出器信号を、選択された光検出器信号として選択することを含むことができる。すなわち、比較的高い光レベルでは、非単一光子検出器を選択することができる。
またさらなる実施形態では、光検出器信号を選択することは、第1の光検出器信号を第1の閾値と比較すること、第2の光検出器信号を第2の閾値と比較すること、ならびに第1の光検出器信号が第1の閾値よりも大きく、かつ第2の光検出器信号が第2の閾値よりも小さいという判定に応答して、第1および第2の光検出器信号を組み合わせること、および組み合わされた光検出器信号を、選択された光検出器信号として選択することを含むことができる。言い替えると、光子束が最小閾値光電流/光電圧よりも大きいが、最大光電流/光電圧よりも小さい場合、第1および第2の光検出器からの信号を組み合わせて、光検出器が単独で利用された場合よりも高いダイナミックレンジを提供することができる。
いくつかの例示的な実施形態は、ある閾値に対する1つ以上の比較を含む必要はない。そのようなシナリオでは、第1および第2の光検出器信号上で、ある動作が実行されて、それらの信号を組み合わせることができる。例えば、第1および第2の光検出器信号を組み合わせることは、第1および第2の光検出器信号に基づいて、加重和を取ることを含んでもよい。
いくつかの実施形態では、第1および第2の光検出器信号を組み合わせることは、第1の光検出器信号を調整することを含んでもよい。そのようなシナリオでは、第1の光検出器信号を調整することは、第1の光検出器信号に高ダイナミックレンジプロファイルの第1の値を乗算することを含んでもよい。第1および第2の光検出器信号を組み合わせることは、第2の光検出器信号を調整することを含んでもよい。そのようなシナリオでは、第2の光検出器信号を調整することは、第2の光検出器信号に高ダイナミックレンジプロファイルの第2の値を乗算することを含んでもよい。第1および第2の光検出器信号を組み合わせることはまた、調整された第1および第2の光検出器信号を総和することを含んでもよい。本明細書では、第1および第2の光検出器信号を組み合わせる他の方法が、想定されていることを理解されたい。
いくつかの実施形態では、高ダイナミックレンジプロファイルは、参照テーブル(LUT)を含むことができる。参照テーブル内のうちの少なくとも一部の情報には、0.0〜1.0の値を含み得る。例えば、参照テーブルには、3つの列が含まれてもよい。第1の列は、露出条件または光子束レベルの範囲を含むことができる。第2の列は、第1の検出器アレイ110からの光信号のための乗数を表す0.0〜1.0の値を含むことができる。第3の列は、少なくとも1つの追加の光検出器120からの光信号のための乗数を表す1.0〜0.0の値を含むことができる。そのようなシナリオでは、参照テーブルは、現在の露出条件に基づいて、第1の検出器アレイ110、および少なくとも1つの追加の光検出器120からのそれぞれの光信号を適切に混合するための情報を提供することができる。他の情報、配列、および/または値が、参照テーブル内に含まれ得る。一例として、参照テーブルは、2つの列を含んでもよく、第1の列は、第1の検出器アレイ110からの光信号の値の範囲を含んでもよい。そのようなシナリオでは、第2の列は、少なくとも1つの追加の光検出器120からの光信号のための乗数を表し得る0.0〜1.0の値を含むことができる。
複数の光源144を含む例示的な実施形態では、動作は、複数の光源144に、外部環境内の対象物と相互作用して反射光をもたらすように、システムの外部環境中に光を放射させることを含むことができる。共通の視界から検出された光は、反射光のうちの少なくとも一部を含み得る。そのようなシナリオでは、システム100は、光検出測距(LIDAR)システムのうちの少なくとも一部を含む。LIDARシステムは、外部環境内の1つ以上の対象物(例えば、場所、形状等)についての情報(例えば、点群データ)を提供するように構成されてもよい。記載されたいくつかの実施形態は、いくつかの光源を含むが、本明細書で想定される他の実施形態は、単一光源を含んでもよい。
例示的な実施形態では、LIDARシステムは、点群情報、対象物情報、地図情報、または他の情報を車両に提供することができる。車両は、半自動または完全自動車両であり得る。例えば、車両は、自動運転車もしくは自律型ドローン、自律型トラック、または自律型ロボットであり得る。本明細書では、他のタイプの車両が想定されている。
システム100は、通信インターフェース146を含むことができる。通信インターフェース146は、コントローラ150、複数の単一光子光検出器110、少なくとも1つの追加の光検出器120、論理ユニット130、1つ以上のコンピューティングネットワーク、および/または他の車両などの、システム100の様々な要素間の通信回線を提供するように構成されてもよい。
通信インターフェース146は、例えば、本明細書に記載された1つ以上の他の車両間、センサ間、または他の要素間の有線もしくは無線通信を、直接かまたは通信ネットワークを介してのいずれかで提供するように構成されたシステムであり得る。この目的のために、通信インターフェース146は、他の車両、センサ、サーバ、または他のエンティティと直接かまたは通信ネットワークを介してのいずれかで通信するためのアンテナまたはチップセットを含み得る。チップセットまたは通信インターフェース146は、一般的に、他の数ある可能性の中でも、BLUETOOTH、BLUETOOTH LOW ENERGY(BLE)、IEEE802.11に記載されている通信プロトコル(任意のIEEE802.11改訂版を含む)、セルラー技術(GSM、CDMA、UMTS、EV‐DO、WiMAX、またはLTE等)、ZIGBEE、専用短距離通信(DSRC)、および無線自動識別(RFID)通信などの1つ以上のタイプの無線通信(例えば、プロトコル)に従って通信するように配列されてもよい。通信インターフェース146は、他の形態を取ることもできる。
図1Bは、例示的な実施形態によるシステム160を例証する。システム160は、図1Aを参照して例証および説明したように、システム100の要素のうちの一部またはすべてを含むことができる。例えば、システム160は、エミッタサブシステム170を含んでもよく、そのエミッタサブシステムは、複数の光源144、および光源コントローラ172を含むことができる。複数の光源144は、光源コントローラ172によって制御することができる。
システム160はまた、受信機サブシステム180も含む。この受信機サブシステム180は、第1のタイプ112の複数の光検出器を有する複数の単一光子光検出器110、および第2のタイプ122の1つ以上の光検出器を有する少なくとも1つの追加の光検出器120を含むことができる。さらに、複数の単一光子光検出器110の光検出器、および少なくとも1つの追加の光検出器120は、光検出器出力回路128に結合され得る。
受信機サブシステム180はまた、論理ユニット130も含む。論理ユニット130は、第1の入力チャネル132および第2の入力チャネル134を含む。
エミッタサブシステム170および受信機サブシステム180は、撮像光学系142に結合され得る。そのようなシナリオでは、複数の光源144は、光パルス162をシステム160の外部環境164の中に放射するように構成され得る。光パルス162は、外部環境164内の対象物と相互作用し得る。例えば、光パルス162は、対象物によって、少なくとも部分的に反射され、反射光166として受信機サブシステム180に向かって戻され得る。反射光166は、撮像光学系142を介して、受信機サブシステム180によって受け取られ得る。
図1Cは、例示的な実施形態によるシステム181を例証する。このシステム181は、図1A、1B、2A、2B、3、および/または4を参照して例証および説明されるように、いくつかの要素、プロセス、または方法を例証することができる。例えば、複数の単一光子光検出器110は、複数の単一光子光検出器信号182を提供することができる。少なくとも1つの追加の光検出器120は、少なくとも1つの追加の光検出器信号184を提供することができる。
例示的な実施形態では、単一光子光検出器信号182および少なくとも1つの追加の光検出器信号184は、論理ユニット130に入力されてもよい。
そのようなシナリオでは、動作は、単一光子光検出器信号182と、少なくとも1つの追加の光検出器信号184との組み合わせに基づいて、組み合わされた光検出器信号190を形成することを含む。さらに、論理ユニット130は、露出条件188を示す情報を受信するように構成されてもよい。またさらに、論理ユニット130は、高ダイナミックレンジプロファイル189を示す情報を受信するように構成されてもよい。そのようなシナリオでは、組み合わされた光検出器信号190を形成することは、露出条件188および/または高ダイナミックレンジプロファイル189に、少なくとも部分的に基づくことができる。
図2Aは、例示的な実施形態によるシステム200を例証する。システム200は、図1Aおよび1Bを参照して例証および説明したように、システム100および160と同様または同一の要素を含むことができる。システム200は、第2の基板204に結合された第1の基板202を含む。第1の基板202は、複数の単一光子光検出器210、および少なくとも1つの追加の光検出器220を含むことができる。そのようなシナリオでは、複数の単一光子光検出器210は、第1のタイプ212の複数の光検出器を含むことができる。例えば、第1のタイプ212の複数の光検出器は、第1の基板202の第1の表面に沿って矩形アレイ状に配設することができる。さらに、少なくとも1つの追加の光検出器220は、第2のタイプ222の1つ以上の光検出器を含むことができる。例えば、第2のタイプ222の1つ以上の光検出器は、第1の基板202の第1の表面に沿って矩形アレイ状に配設することができる。すなわち、それぞれのタイプの光検出器は、第1の基板202の表面に沿って互いに隣り合って配設することができる。
例示的な実施形態では、複数の単一光子光検出器210、および少なくとも1つの追加の光検出器220のそれぞれの光検出器は、ウェハ貫通ヴィア223およびバンプ接合229のそれぞれのアレイを介して第2の基板204上の光検出器出力回路228(例えば、読み出し集積回路(ROIC))に結合することができる。本明細書では、他のタイプの導電性または無線接続が、想定されている。
図2Bは、例示的な実施形態によるシステム240を例証する。システム240は、図1A、1B、および2Aを参照して例証および記載したように、システム100、160、および/または200と同様または同一の要素を含むことができる。いくつかの例示的な実施形態では、システム240は、少なくとも1つの追加の光検出器220に物理的に結合されるように配設される複数の単一光子光検出器210を含んでもよい。一例として、第1のタイプ212の複数の光検出器は、第2のタイプ222の1つ以上の光検出器の上に積み重ねられてもよい。さらに、いくつかの実施形態では、光検出器出力回路228は、第1の基板202上に配置することができる。他の実施形態は、少なくとも1つの追加の光検出器220に対して異なる配向に配設される複数の単一光子光検出器210を含んでもよい。
図3は、例示的な実施形態による回路300を例証する。回路300は、図1A、1B、1C、2A、および2Bを参照して例証および説明したように、システム100、160、181、200、および/または240の一部と同様または同一であってもよい。例示的な実施形態では、回路300は、増幅器チェーンが、第1のタイプ312の所与の光検出器、および第2のタイプ322の対応する光検出器からの一方または両方の信号を処理する方法を説明することができる。
例えば、第1のタイプ312の光検出器は、第1の基準電圧330と第1の抵抗器304との間に接続され得る。第1の抵抗器304は、接地320に接続され得る。さらに、回路300は、第2のタイプ322の光検出器を含むことができ、その光検出器は、第2の基準電圧332と第2の抵抗器314との間に接続され得る。第2の抵抗器314は、接地320に接続され得る。さらに、第1のコンデンサ306および第2のコンデンサ316は、それらのそれぞれの光検出器の出力と基準結節点310との間に接続され得る。基準結節点310において検出された電圧または電流は、トランスインピーダンス増幅器(TIA)または別のタイプの信号出力に出力され得る。
そのようなシナリオでは、抵抗器304、314およびコンデンサ306、316などの、回路300の様々な構成要素の値を調整および/または選択して、トランスインピーダンス増幅器に提供される出力光信号334を調整することができる。言い替えると、構成要素の値を選択または調整することによって、第1の光信号318および第2の光信号324は、出力光信号334を提供する前に、所望の度合いに混合され、ないし組み合わせられ得る。そのような調整は、追加的にまたは別の方法で、様々な周波数依存性を有する動作を提供することができる。すなわち、回路300の周波数応答は、抵抗器304、314、ならびにコンデンサ306および316の構成要素の値を変更することによって調整され得る。
第1の光検出器312(例えば、SiPM検出器)と関連付けられたRCフィルタ(例えば、第1の抵抗器304および第1のコンデンサ306)は、回復時間および周囲光応答をチューニングすることができる。第2の光検出器322(例えば、LmAPD検出器)と関連付けられたRCフィルタ(例えば、第2の抵抗器314および第2のコンデンサ316)は、周囲光源またはDC光源の阻止レベルをチューニングするように動作可能であり得る。この回路配列に基づいて、複数のバリエーションが可能であることを理解されたい。例えば、第1の抵抗器304または第2の抵抗器314のどちらかが、普通のダイオードによって置き換えられると、光検出器の飽和動作を変調することができる。さらに、結合回路、または個別のバイアス回路(例えば、第1の基準電圧V 330および第2の基準電圧V 332を提供するための)を追加して、第1の光信号318、第2の光信号324、および/または出力光信号334の振幅、持続時間、形状、および/または他の態様をさらに調整することができる。
回路300は、第1の光検出器312および第2の光検出器322のそれぞれの信号を組み合わせるように構成された1つの可能な回路を例証しているが、他の回路も可能である。例えば、それぞれの光検出器312および322は、異なる構成を有することができ、それらの構成は、それぞれの増幅器および出力を含んでもよい。
いくつかの実施形態では、回路300は、ポールゼロ構成を含んでもよい。例えば、1つ以上の抵抗器は、第1のコンデンサ306および/または第2のコンデンサ316と並列に配置することができる。
いくつかの実施形態では、SiPMおよび/またはLmAPDは、検出器面積に着目して、特別にサイズ設定されてもよい。例えば、LmAPDのうちの1つ以上の寸法を選択して、所望の高強度応答を提供することができ、その応答は、SiPMに起因する小信号応答よりも小さい信号で強い応答である場合がある。
さらに、LmAPDの寸法は、その雑音が、小信号における感度の低下をもたらし得る、SiPMの単一光子応答に近づくかまたは上回らないように十分小さくなるように、選択することができる。
III.例示的方法
図4は、例示的な実施形態に係る方法400を例証する。方法400は、図1A、1B、2A、2B、および3を参照して例証および説明したように、システム100、コントローラ150、システム160、システム200、システム240、または回路300によって全体的にまたは部分的に実行することができる。方法400は、図1A、1B、2A、2B、および3を参照して例証および説明されたものと同様または同一の要素を含むことができる。方法400は、本明細書に明示的に開示されたものよりも少ないまたは多いステップまたはブロックを含み得ることを理解されたい。さらに、方法400のそれぞれのステップまたはブロックは、任意の順序で実行されてもよく、各ステップまたはブロックは、1回以上実行されてもよい。
ブロック402は、複数の単一光子光検出器からの第1の光検出器信号を受信することを含む。第1の光検出器信号は、単一光子光検出器によって検出された、視界からの光を示す。
ブロック404は、少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することを含む。第2の光検出器信号は、少なくとも1つの追加の光検出器によって検出された、視界からの光を示す。複数の単一光子光検出器は、第1の光検出器タイプの光検出器を含む。少なくとも1つの追加の光検出器は、第2の光検出器タイプの光検出器を含む(例えば、少なくとも1つの追加の光検出器は、単一光子光検出器以外のものである)。複数の単一光子光検出器、および少なくとも1つの追加の光検出器は、基板に結合される。いくつかの実施形態では、第1の光検出器タイプは、シリコン光電子増倍管(SiPM)検出器を含む。追加的にまたは別の方法として、第2の光検出器タイプは、線形モードアバランシェフォトダイオード(APD)検出器を含むことができる。
本明細書の他の箇所で説明したように、いくつかの実施形態は、複数の単一光子光検出器、および少なくとも1つの追加の光検出器を、異なる基板上に配列されているものとして含み得る。
ブロック406は、第1の光検出器信号、第2の光検出器信号、ならびに第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することを含む。
ブロック408は、選択された光検出器信号に基づいて、視界内の光の強度を判定することを含む。一例として、視界内の光の強度を判定することは、LIDARデバイスからの点群のうちの少なくとも一部を判定することを含み得る。
いくつかの実施形態では、光検出器信号を選択することは、第1の光検出器信号を第1の閾値と比較することを含んでもよい。そのようなシナリオでは、第1の光検出器信号が第1の閾値よりも小さいという判定に応答して、方法400は、第1の光検出器信号を、選択された光検出器信号として選択することを含んでもよい。
追加的に、または別の方法として、光検出器信号を選択することは、第2の光検出器信号を第2の閾値と比較することを含んでもよい。そのようなシナリオでは、第2の光検出器信号が第2の閾値よりも大きいという判定に応答して、方法400は、第2の光検出器信号を、選択された光検出器信号として選択することを含んでもよい。
いくつかの実施形態では、光検出器信号を選択することは、第1の光検出器信号を第1の閾値と比較すること、および第2の光検出器信号を第2の閾値と比較することを含んでもよい。そのようなシナリオでは、第1の光検出器信号が第1の閾値よりも大きく、かつ第2の光検出器信号が第2の閾値よりも小さいという判定に応答して、方法400は、第1および第2の光検出器信号を組み合わせること、および組み合わされた光検出器信号を、選択された光検出器信号として選択することを含んでもよい。
いくつかの実施形態では、第1および第2の光検出器信号を組み合わせることは、第1の光検出器信号を調整することを含んでもよい。一例として、第1の光検出器信号を調整することは、第1の光検出器信号に高ダイナミックレンジプロファイルの第1の値を乗算することを含んでもよい。第1および第2の光検出器信号を組み合わせることはまた、第2の光検出器信号を調整することも含み得る。そのような第2の光検出器信号の調整は、第2の光検出器信号に高ダイナミックレンジプロファイルの第2の値を乗算することを含んでもよい。そのようなシナリオでは、第1および第2の光検出器信号を組み合わせることは、調整された第1および第2の光検出器信号を総和することを含んでもよい。
本明細書の他の箇所に記載したように、第1の光検出器タイプは、シリコン光電子増倍管(SiPM)検出器を含むことができるが、これに限定されない。追加的に、または別の方法として、第2の光検出器タイプは、アバランシェフォトダイオード(APD)検出器を含むことができるが、これに限定されない。
任意選択的に、方法400はまた、複数の光源に、外部環境内の対象物と相互作用して反射光をもたらすように、外部環境中に光を放射させることを含むこともできる。そのようなシナリオでは、共通の視界から検出された光は、反射光のうちの少なくとも一部を含んでもよい。
いくつかの実施形態では、方法400はまた、第1の光検出器アレイのそれぞれの光検出器信号を、論理ユニットの第1の入力チャネルにルーティングすること、および少なくとも1つの追加の光検出器のそれぞれの光検出器信号を、論理ユニットの第2の入力チャネルにルーティングすることも含んでもよい。
いくつかの実施形態では、方法400はまた、共通の視界のうちの少なくとも一部の露出条件を示す情報を受信することも含む。そのようなシナリオでは、第1および第2の光検出器信号を組み合わせることは、露出条件を示す受信した情報に基づくことができる。
各図に示した特定の配列は、限定的なものと見なされるべきではない。他の実施形態は、所与の図の中に示された各要素を、ある程度含み得ることを理解されたい。さらに、例証された要素のうちのいくつかは、組み合わせられ、または省略され得る。またさらに、例証となる実施形態は、各図に例証されていない要素を含んでもよい。
情報の処理を表すステップまたはブロックは、本明細書に記載された方法または技術の特定の論理的機能を実行するように構成されることが可能である回路に対応することができる。別の方法として、または追加的に、情報の処理を表すステップまたはブロックは、モジュール、セグメント、物理的なコンピュータ(例えば、フィールドプログラマブルゲートアレイ(FPGA)または特定用途向け集積回路(ASIC))、またはプログラムコードの一部(関連データを含む)に対応することができる。プログラムコードは、方法または技術において特定の論理的機能または動作を実施するためのプロセッサによって実行可能である1つ以上の命令を含むことができる。プログラムコードおよび/または関連データは、ディスク、ハードドライブ、または他のストレージ媒体を含むストレージデバイスなどの任意のタイプのコンピュータ可読媒体上に格納することができる。
コンピュータ可読媒体はまた、レジスタメモリ、プロセッサキャッシュ、およびランダムアクセスメモリ(RAM)などの、データを短い期間の間格納するコンピュータ可読媒体などの非一過性コンピュータ可読媒体を含むこともできる。コンピュータ可読媒体はまた、プログラムコードおよび/またはデータをより長期間格納する非一過性コンピュータ可読媒体を含むこともできる。したがって、コンピュータ可読媒体は、例えば、読み出し専用メモリ(ROM)、光ディスクもしくは磁気ディスク、コンパクトディスク読み出し専用メモリ(CD−ROM)などの二次的または永続的な長期ストレージを含んでもよい。コンピュータ可読媒体はまた、任意の他の揮発性または不揮発性ストレージシステムとすることもできる。コンピュータ可読媒体は、例えば、コンピュータ可読ストレージ媒体、または有形のストレージデバイスと見なすことができる。
様々な例および実施形態が開示されてきたが、他の例および実施形態は、当業者であれば明かであろう。開示された様々な例および実施形態は、例証の目的のためであり、限定することを意図されておらず、その真の範囲は、以下の特許請求の範囲により示される。

Claims (20)

  1. システムであって、
    基板と、
    前記基板に結合された複数の単一光子光検出器であって、前記単一光子光検出器が、視界からの光を検出するように配列されている、単一光子光検出器と、
    前記基板に結合された少なくとも1つの追加の光検出器であって、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記少なくとも1つの追加の光検出器が、前記視界からの光を検出するように配列されている、少なくとも1つの追加の光検出器と、
    動作を行うためにプログラム命令を実行するように構成されたコントローラであって、前記動作が、
    前記複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号から光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含む、コントローラと、を備える、システム。
  2. システムであって、
    基板と、
    前記基板に結合された複数の単一光子光検出器であって、前記単一光子光検出器が、視界からの光を検出するように配列されている、単一光子光検出器と、
    前記基板に結合された少なくとも1つの追加の光検出器であって、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記少なくとも1つの追加の光検出器が、前記視界からの光を検出するように配列されている、少なくとも1つの追加の光検出器と、
    動作を行うためにプログラム命令を実行するように構成されたコントローラであって、前記動作が、
    前記複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含む、コントローラと、を備え、
    前記光検出器信号を選択することが、
    前記第1の光検出器信号を第1の閾値と比較することと、
    前記第1の光検出器信号が前記第1の閾値よりも小さいという判定に応答して、前記第1の光検出器信号を前記選択された光検出器信号として選択することと、を含む、システム。
  3. システムであって、
    基板と、
    前記基板に結合された複数の単一光子光検出器であって、前記単一光子光検出器が、視界からの光を検出するように配列されている、単一光子光検出器と、
    前記基板に結合された少なくとも1つの追加の光検出器であって、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記少なくとも1つの追加の光検出器が、前記視界からの光を検出するように配列されている、少なくとも1つの追加の光検出器と、
    動作を行うためにプログラム命令を実行するように構成されたコントローラであって、前記動作が、
    前記複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含む、コントローラと、を備え、
    前記光検出器信号を選択することが、
    前記第2の光検出器信号を第2の閾値と比較することと、
    前記第2の光検出器信号が前記第2の閾値よりも大きいという判定に応答して、前記第2の光検出器信号を前記選択された光検出器信号として選択することと、を含む、システム。
  4. システムであって、
    基板と、
    前記基板に結合された複数の単一光子光検出器であって、前記単一光子光検出器が、視界からの光を検出するように配列されている、単一光子光検出器と、
    前記基板に結合された少なくとも1つの追加の光検出器であって、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記少なくとも1つの追加の光検出器が、前記視界からの光を検出するように配列されている、少なくとも1つの追加の光検出器と、
    動作を行うためにプログラム命令を実行するように構成されたコントローラであって、前記動作が、
    前記複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示す、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含む、コントローラと、を備え、
    前記光検出器信号を選択することが、
    前記第1の光検出器信号を第1の閾値と比較することと、
    前記第2の光検出器信号を第2の閾値と比較することと、
    前記第1の光検出器信号が前記第1の閾値よりも大きく、かつ前記第2の光検出器信号が前記第2の閾値よりも小さいという判定に応答して、前記第1および第2の光検出器信号を組み合わせ、前記組み合わされた光検出器信号を前記選択された光検出器信号として選択することと、を含む、システム。
  5. 前記第1および第2の光検出器信号を組み合わせることが、
    前記第1の光検出器信号を調整することであって、前記第1の光検出器信号を調整することが、前記第1の光検出器信号に高ダイナミックレンジプロファイルの第1の値を乗算することを含む、調整することと、
    前記第2の光検出器信号を調整することであって、前記第2の光検出器信号を調整することが、前記第2の光検出器信号に前記高ダイナミックレンジプロファイルの第2の値を乗算することを含む、調整することと、
    前記調整された第1および第2の光検出器信号を総和することと、を含む、請求項4に記載のシステム。
  6. 前記高ダイナミックレンジプロファイルが、参照テーブルを含み、前記参照テーブルが、0.0〜1.0の値を含む、請求項5に記載のシステム。
  7. 前記複数の単一光子光検出器が、シリコン光電子増倍管(SiPM)検出器を含み、前記少なくとも1つの追加の光検出器が、アバランシェフォトダイオード(APD)検出器またはPINフォトダイオード検出器のうちの少なくとも1つを含む、請求項2〜4のいずれか一項に記載のシステム。
  8. 前記基板が、第1の表面を含み、前記複数の単一光子光検出器、および前記少なくとも1つの追加の光検出器が、前記第1の表面に結合されている、請求項2〜4のいずれか一項に記載のシステム。
  9. 前記複数の単一光子光検出器が、積み重ねられた光検出器配列を形成するように、前記少なくとも1つの追加の光検出器の上面に結合されている、請求項2〜4のいずれか一項に記載のシステム。
  10. 前記基板が、主面に沿った第1の表面を含み、前記複数の単一光子光検出器の検出器のうちの少なくとも一部が、混合された光検出器配列を形成するように、前記少なくとも1つの追加の光検出器の検出器のうちの少なくとも一部の間に前記第1の表面に沿って配列されている、請求項2〜4のいずれか一項に記載のシステム。
  11. 撮像光学系をさらに含み、前記複数の単一光子光検出器、および前記少なくとも1つの追加の光検出器が、前記撮像光学系を介して前記視界からの光を検出する、請求項2〜4のいずれか一項に記載のシステム。
  12. 複数の光源をさらに備え、前記動作は、前記複数の光源に、外部環境内の対象物と相互作用して反射光を提供するように、前記システムの前記外部環境中に光を放射させることをさらに含み、前記視界から検出された前記光が、前記反射光のうちの少なくとも一部を含む、請求項2〜4のいずれか一項に記載のシステム。
  13. 前記システムが、光検出測距(LIDAR)システムのうちの少なくとも一部を備え、前記LIDARシステムが、点群情報を車両に提供するように構成されている、請求項12に記載のシステム。
  14. 方法であって、
    複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、視界からの光を示す、受信することと、
    少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示しており、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記複数の単一光子光検出器および前記少なくとも1つの追加の光検出器が、基板に結合されている、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号から光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含む、方法。
  15. 方法であって、
    複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、視界からの光を示す、受信することと、
    少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示しており、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記複数の単一光子光検出器および前記少なくとも1つの追加の光検出器が、基板に結合されている、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含み、
    前記光検出器信号を選択することが、
    前記第1の光検出器信号を第1の閾値と比較することと、
    前記第1の光検出器信号が前記第1の閾値よりも小さいという判定に応答して、前記第1の光検出器信号を前記選択された光検出器信号として選択することと、を含む、方法。
  16. 方法であって、
    複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、視界からの光を示す、受信することと、
    少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示しており、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記複数の単一光子光検出器および前記少なくとも1つの追加の光検出器が、基板に結合されている、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含み、
    前記光検出器信号を選択することが、
    前記第2の光検出器信号を第2の閾値と比較することと、
    前記第2の光検出器信号が前記第2の閾値よりも大きいという判定に応答して、前記第2の光検出器信号を前記選択された光検出器信号として選択することと、を含む、方法。
  17. 方法であって、
    複数の単一光子光検出器からの第1の光検出器信号を受信することであって、前記第1の光検出器信号が、前記単一光子光検出器によって検出された、視界からの光を示す、受信することと、
    少なくとも1つの追加の光検出器からの第2の光検出器信号を受信することであって、前記第2の光検出器信号が、前記少なくとも1つの追加の光検出器によって検出された、前記視界からの光を示しており、前記少なくとも1つの追加の光検出器が、単一光子光検出器以外のものであり、前記複数の単一光子光検出器および前記少なくとも1つの追加の光検出器が、基板に結合されている、受信することと、
    前記第1の光検出器信号、前記第2の光検出器信号、ならびに前記第1および第2の光検出器信号を組み合わせることによって形成された組み合わされた光検出器信号のうちの少なくとも2つから光検出器信号を選択することと、
    前記選択された光検出器信号に基づいて、前記視界内の光の強度を判定することと、を含み、
    前記光検出器信号を選択することが、
    前記第1の光検出器信号を第1の閾値と比較することと、
    前記第2の光検出器信号を第2の閾値と比較することと、
    前記第1の光検出器信号が前記第1の閾値よりも大きく、かつ前記第2の光検出器信号が前記第2の閾値よりも小さいという判定に応答して、前記第1および第2の光検出器信号を組み合わせ、前記組み合わされた光検出器信号を前記選択された光検出器信号として選択することと、を含む、方法。
  18. 前記第1および第2の光検出器信号を組み合わせることが、
    前記第1の光検出器信号を調整することであって、前記第1の光検出器信号を調整することが、前記第1の光検出器信号に高ダイナミックレンジプロファイルの第1の値を乗算することを含む、調整することと、
    前記第2の光検出器信号を調整することであって、前記第2の光検出器信号を調整することが、前記第2の光検出器信号に前記高ダイナミックレンジプロファイルの第2の値を乗算することを含む、調整することと、
    前記調整された第1および第2の光検出器信号を総和することと、を含む、請求項17に記載の方法。
  19. 前記複数の単一光子光検出器が、シリコン光電子増倍管(SiPM)検出器を含み、前記少なくとも1つの追加の光検出器が、アバランシェフォトダイオード(APD)検出器を含む、請求項15〜17のいずれか一項に記載の方法。
  20. 複数の光源に、外部環境内の対象物と相互作用して反射光を提供するように、前記外部環境中に光を放射させることをさらに含み、前記視界から検出された前記光が、前記反射光のうちの少なくとも一部を含む、請求項15〜17のいずれか一項に記載の方法。
JP2020515976A 2017-09-25 2018-09-24 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ Active JP6970820B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021177820A JP2022023945A (ja) 2017-09-25 2021-10-29 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/714,435 US11016180B2 (en) 2017-09-25 2017-09-25 Combination photodetector arrays for extended dynamic range
US15/714,435 2017-09-25
PCT/US2018/052392 WO2019060812A1 (en) 2017-09-25 2018-09-24 COMBINED PHOTODETECTOR ARRAYS FOR EXTENDED DYNAMIC RANGE

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021177820A Division JP2022023945A (ja) 2017-09-25 2021-10-29 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ

Publications (2)

Publication Number Publication Date
JP2020535396A JP2020535396A (ja) 2020-12-03
JP6970820B2 true JP6970820B2 (ja) 2021-11-24

Family

ID=63858106

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020515976A Active JP6970820B2 (ja) 2017-09-25 2018-09-24 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ
JP2021177820A Pending JP2022023945A (ja) 2017-09-25 2021-10-29 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021177820A Pending JP2022023945A (ja) 2017-09-25 2021-10-29 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ

Country Status (7)

Country Link
US (2) US11016180B2 (ja)
EP (1) EP3676632A1 (ja)
JP (2) JP6970820B2 (ja)
KR (1) KR102412427B1 (ja)
CN (1) CN111164452B (ja)
IL (1) IL273474A (ja)
WO (1) WO2019060812A1 (ja)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102594608B1 (ko) * 2016-12-06 2023-10-26 주식회사 알티캐스트 하이브리드 유저 인터페이스 제공 시스템 및 그 방법
US10551914B2 (en) * 2018-02-09 2020-02-04 Microsoft Technology Licensing, Llc Efficient MEMs-based eye tracking system with a silicon photomultiplier sensor
US10627899B2 (en) 2018-02-09 2020-04-21 Microsoft Technology Licensing, Llc Eye tracking system for use in a visible light display device
US11959847B2 (en) * 2019-09-12 2024-04-16 Cytonome/St, Llc Systems and methods for extended dynamic range detection of light
DE102019216641A1 (de) * 2019-10-29 2021-05-12 Robert Bosch Gmbh Optischer Sensor und LiDAR-System
DE102019216932A1 (de) * 2019-11-04 2021-05-06 Robert Bosch Gmbh Optischer Sensor
CN110736975B (zh) * 2019-11-07 2020-11-27 上海禾赛光电科技有限公司 接收模组以及包括其的激光雷达
CN111596302A (zh) * 2020-05-21 2020-08-28 深圳市灵明光子科技有限公司 一种基于SiPM信号时序点的测距方法及装置
US11536812B2 (en) 2020-06-23 2022-12-27 Aptiv Technologies Limited Increased dynamic range for time-of-flight (ToF) lidar systems
JPWO2022059397A1 (ja) * 2020-09-15 2022-03-24
US11624653B2 (en) * 2020-12-03 2023-04-11 Artilux, Inc. Multi-application optical sensing apparatus and method thereof
WO2024031098A1 (en) * 2022-08-05 2024-02-08 University Of Southern California Iris: integrated retinal functionality in image sensors
JP2024023058A (ja) * 2022-08-08 2024-02-21 ソニーセミコンダクタソリューションズ株式会社 光検出装置および光検出システム

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06209291A (ja) * 1992-03-18 1994-07-26 Nec Corp 光受信装置
JP2820095B2 (ja) * 1995-12-28 1998-11-05 日本電気株式会社 レーザ計測装置
US5892575A (en) 1996-05-10 1999-04-06 Massachusetts Institute Of Technology Method and apparatus for imaging a scene using a light detector operating in non-linear geiger-mode
US6407439B1 (en) 1999-08-19 2002-06-18 Epitaxial Technologies, Llc Programmable multi-wavelength detector array
US7295303B1 (en) * 2004-03-25 2007-11-13 Kla-Tencor Technologies Corporation Methods and apparatus for inspecting a sample
US20060124832A1 (en) * 2004-09-27 2006-06-15 Lightspin Technologies, Inc. Wide dynamic range photodetector
US7544945B2 (en) 2006-02-06 2009-06-09 Avago Technologies General Ip (Singapore) Pte. Ltd. Vertical cavity surface emitting laser (VCSEL) array laser scanner
JP2008020204A (ja) * 2006-07-10 2008-01-31 Omron Corp レーダ
CN102119342A (zh) 2008-08-13 2011-07-06 皇家飞利浦电子股份有限公司 用于探测低和高x射线通量的方法和装置
WO2010073136A2 (en) 2008-12-22 2010-07-01 Koninklijke Philips Electronics N.V. High dynamic range light sensor
US8742316B2 (en) 2009-12-09 2014-06-03 Electronics And Telecommunications Research Institute Photo detector having coupling capacitor
EP3901653A3 (en) * 2010-05-17 2022-03-02 Velodyne Lidar USA, Inc. High definition lidar system
US9002151B2 (en) * 2011-10-05 2015-04-07 Telcordia Technologies, Inc. System and method for nonlinear optical devices
US9086389B2 (en) * 2012-10-26 2015-07-21 Kla-Tencor Corporation Sample inspection system detector
US9952323B2 (en) 2014-04-07 2018-04-24 Samsung Electronics Co., Ltd. High resolution, high frame rate, low power image sensor
US10012534B2 (en) 2014-07-02 2018-07-03 The Johns Hopkins University Photodetection circuit having at least one counter operative in response to a mode switching circuit and operating method thereof
US10790407B2 (en) 2014-08-06 2020-09-29 The Boeing Company Fabrication of sensor chip assemblies with microoptics elements
US20160182846A1 (en) 2014-12-22 2016-06-23 Google Inc. Monolithically integrated rgb pixel array and z pixel array
US10126411B2 (en) * 2015-03-13 2018-11-13 Continental Advanced Lidar Solutions Us, Llc. Beam steering LADAR sensor
US11153515B2 (en) 2015-04-24 2021-10-19 Sony Corporation Solid state image sensor comprising stacked substrates, semiconductor device, and electronic device
GB2558505B (en) * 2015-10-21 2021-05-12 Rapiscan Systems Inc High dynamic range radiographic imaging system
FR3043797A1 (ja) * 2015-11-16 2017-05-19 Stmicroelectronics (Grenoble 2) Sas
US10698113B2 (en) * 2017-08-09 2020-06-30 Institut National D'optique Three-dimensional synthetic aperture imaging using spatial amplitude modulation

Also Published As

Publication number Publication date
CN111164452A (zh) 2020-05-15
US11774556B2 (en) 2023-10-03
IL273474A (en) 2020-05-31
US11016180B2 (en) 2021-05-25
US20190094361A1 (en) 2019-03-28
JP2020535396A (ja) 2020-12-03
WO2019060812A1 (en) 2019-03-28
US20210247496A1 (en) 2021-08-12
KR102412427B1 (ko) 2022-06-24
JP2022023945A (ja) 2022-02-08
KR20200060442A (ko) 2020-05-29
EP3676632A1 (en) 2020-07-08
CN111164452B (zh) 2023-08-22

Similar Documents

Publication Publication Date Title
JP6970820B2 (ja) 拡張されたダイナミックレンジのための組み合わせ光検出器アレイ
JP6931120B2 (ja) フルデジタルのモノリシックなフレーム平均化レシーバに関する非結像spadアーキテクチャの集約
US9591238B2 (en) Asynchronous readout array
JP2022551507A (ja) ライダー精度のための時系列測定処理
US11221400B2 (en) Dual mode stacked photomultipliers suitable for use in long range time of flight applications
US20160054434A1 (en) Asynchronous ladar and imaging array
US20170094250A1 (en) Reconfigurable asynchronous readout array
US11906626B2 (en) Systems and methods for mitigating avalanche photodiode (APD) blinding
JP6825565B2 (ja) 測距装置
KR20120025858A (ko) 깊이 센싱 장치 및 방법
US10073168B2 (en) Frequency measurement focal plane array input circuit
US11333765B2 (en) Distance measuring device and method
US20160191829A1 (en) Systems and methods for mimimizing silicon photomultiplier signal propagation delay dispersion and improve timing
JP7149505B2 (ja) 測距方法、測距装置、及び、プログラム
RU2772379C2 (ru) Системы и способы подавления засветки лавинного фотодиода (лфд)
WO2023150920A1 (en) Methods and apparatus for single-shot time-of-flight ranging with background light rejection
KR20220145237A (ko) 비닝 모드를 변경하는 깊이 센서 및 이미지 신호 프로세서

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200511

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210430

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210604

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211001

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211029

R150 Certificate of patent or registration of utility model

Ref document number: 6970820

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150