JP2022551427A - シーンまでの距離を決定するための方法および装置 - Google Patents

シーンまでの距離を決定するための方法および装置 Download PDF

Info

Publication number
JP2022551427A
JP2022551427A JP2022519050A JP2022519050A JP2022551427A JP 2022551427 A JP2022551427 A JP 2022551427A JP 2022519050 A JP2022519050 A JP 2022519050A JP 2022519050 A JP2022519050 A JP 2022519050A JP 2022551427 A JP2022551427 A JP 2022551427A
Authority
JP
Japan
Prior art keywords
laser light
detection time
time window
max
pulse
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022519050A
Other languages
English (en)
Other versions
JPWO2021058494A5 (ja
Inventor
パエセン,リク
バン・ダイク,ディルク
バンドビル,スティン
バン・デン・ブルック,ニック
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xenomatix NV
Original Assignee
Xenomatix NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xenomatix NV filed Critical Xenomatix NV
Publication of JP2022551427A publication Critical patent/JP2022551427A/ja
Publication of JPWO2021058494A5 publication Critical patent/JPWO2021058494A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/10Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • G01S17/18Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves wherein range gates are used
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4861Circuits for detection, sampling, integration or read-out
    • G01S7/4863Detector arrays, e.g. charge-transfer gates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4865Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408Radar; Laser, e.g. lidar

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Optics & Photonics (AREA)
  • Aviation & Aerospace Engineering (AREA)

Abstract

本開示は、シーンまでの距離を決定するための方法および装置に関する。本方法は、PW=(TOFmax-TDL)/Nとなるようなパルス幅減少係数Nを使用することによって最大距離Dmaxに対応する最大飛行時間TOFmaxよりも小さいレーザ光パルス幅PWを決定し、TDLは所定の遅延窓である、ステップと、FP≦1/((N+1)×PW+TDL)となるようにパルス周波数FPを決定するステップと、決定されたパルス幅および周波数を有する複数の空間的に分離されたパルスレーザビームを備える照明パターンでシーンを照明するステップと、TD=M×(PW/α)であるように、α≧1であるM=α×(N+1)個の連続する検出時間窓で分割された検出期間TD中に時間の関数として検出を実行するステップと、どの検出時間窓で反射レーザ光が検出されるかを識別するステップと、この識別に基づいてシーンまでの距離を計算するステップとを含む。

Description

開示の分野
本開示は、シーンまでの距離を決定するためのシステムに関する。より詳細には、本発明は、シーンを照明し、反射レーザ光を検出するためにレーザ光を使用する飛行時間ベースの感知方法に関する。本発明はまた、シーンの1つまたは複数の物体までの距離を検出するためのLIDAR装置に関する。
背景
シーンの距離を決定するための能動照明に基づく装置は、LIDAR(Light Detection And Ranging)装置としても知られている。LIDAR装置は、シーンにレーザ光を照射し、レーザ光を放射したレーザ源の近くに一般に配置された検出器内の反射レーザ光を検出することによって、シーンまでの距離を測定する。したがって、レーザ光の放射と反射レーザ光の検出との間の時間間隔は、シーンの物体またはレーザ光を反射したシーンの一部までの距離の2倍に比例する。
最も知られているLIDAR装置は、ダイレクトTOF(DToF)法を利用する。これらのシステムは、ナノ秒パルスレジームで動作する強力なパルスレーザと、パルスレーザビームを走査する機械的走査システムと、パルス検出器とを備える。このタイプのシステムは、カリフォルニア州モーガンヒルのVelodyne LIDARを含むベンダーから現在入手可能である。Velodyne HDL-64Eは、最先端のシステムの一例として、毎秒5~15回転で機械的に回転する構造で64個の高出力レーザおよび64個のアバランシェダイオード検出器を使用する。
これらのDToFシステムにはいくつかの欠点がある。例えば、これらのシステムは、現在利用可能な半導体レーザでは得られない高すぎる出力レベルを有するレーザを必要とし、その出力レベルは数桁低い。さらに、走査目的のために機械的に回転する要素を使用することは、このタイプのシステムの小型化、信頼性、およびコスト削減の見込みをさらに制限する。
LIDAR装置のコンパクトさは、LIDAR装置が例えば自動車のフロントガラスに結合されるか、または自動車のバンパーに結合される自動車分野の用途にとって重要な要素である。実際、LIDAR装置は、自動運転または運転者支援システムを開発するための重要な要素である。これに関連して、LIDAR装置は、他の車両または車両の環境内の物体などの障害物を検出するために使用される。
国際公開第2017/068199号では、半導体レーザおよびCMOSベースのマルチウェル画素検出器を使用するLIDAR装置が提案されている。これにより、照明システムおよび検出システムがコンパクトなハウジング内に一緒に配置されるコンパクトなLIDAR装置を製造することが可能になる。国際公開第2017/068199号に開示されている装置は、スポットパターンで同時に放射される複数の空間的に分離されたパルスレーザ光によって形成される照明パターンでシーンを照明するように構成されたプロジェクタを使用する。レーザ光のパルスはパルス列として放射される、すなわちパルスシーケンスは所与のパルス周波数で放射される。CMOSベースのマルチウェル画素検出器は、シーンによって反射された空間的に分離されたパルスまたは空間的に分離されたパルスの一部を表す反射レーザ光のスポットを検出している。このようにして、回転または機械的走査要素を使用せずにシーンの深度マップを取得することができる。
国際公開第2017/068199号で使用される照明および検出方法の原理は図1に示されており、放射されたレーザパルスおよび反射パルスは、それぞれ参照番号11および12で識別される。この図1は概略図にすぎず、反射パルス12は、概して、放射パルス11の振幅と比較してより小さい振幅を有する。この方法は距離ゲーティング法とも呼ばれる。検出器は、第1の時間窓TW1中に得られた第1の反射レーザ光の量を表す第1の電荷量と、第2の時間窓TW2中に得られた第2の反射レーザ光の量を表す第2の電荷量とを検出するように構成される。第2の時間窓は、第1の時間窓の後に生じており、2つの時間窓の幅は、レーザパルスのパルス幅PWに等しい。処理手段は、第1および第2の電荷量に基づいてシーンの物体までの距離を計算することを可能にする。
Figure 2022551427000002
国際公開第2017/068199号に開示されているLIDAR装置は、上述のDToFシステムと比較した場合にいくつかの利点を有する。実際、そのようなソリッドステートLIDAR装置は、コンパクトで堅牢であり、費用対効果の高い方法で製造することができる。しかしながら、これらのタイプのLIDAR装置はまた、欠点、すなわち、許容可能な空間精度を得るために多数のフレームを取得する必要があるという事実を有する。これは、LIDAR検出器の全体的な応答時間を大幅に短縮し、所与の期間内に測定できる点の数を制限する。
したがって、そのようなコンパクトなLIDAR装置を改善する必要がある。より正確には、100メートル以上の距離を含む広範囲の距離で動作可能であり、高精度の距離測定を実行するために、これらのタイプのLIDAR装置を有する必要がある。
概要
本開示の目的は、シーン内の1つまたは複数の物体までの距離を決定するための方法を提供することであり、より具体的には、限られた数のフレーム、単一のフレーム測定でも許容可能な空間精度を得ることができるように、高精度で物体距離を決定することである。すなわち、上述した時間誤差σを低減することが目的である。さらなる目的は、取得されるフレーム数を大幅に減らすことができ、または単一のフレーム測定に限定することさえできるように、高精度で物体距離を決定するための検出および処理手段を備えるLIDAR装置を提供することである。
本発明は、添付の独立請求項に定義される。従属請求項は、有利な実施形態を定義する。
本発明の第1の態様によれば、パルスレーザ光でシーンを照明し、レーザ光の飛行時間に関連して反射レーザ光を検出することによってシーン内の1つまたは複数の物体までの距離を決定するための方法が提供され、シーン内の1つまたは複数の物体は、最小距離と最大距離との間の距離範囲内に位置し、0≦Dmin≦0.6×Dmax、好ましくは0≦Dmin≦0.4×Dmax、より好ましくは0≦Dmin≦0.2×Dmaxであり、DminおよびDmaxはそれぞれ、距離範囲を定義する最小距離および最大距離である。
本発明による方法は、
A)PW=(TOFmax-TDL)/N、TOFmax=2×Dmax/cとなるように、最大距離に関連付けられた最大飛行時間よりも小さいパルスレーザ光のパルス幅を決定するステップであって、
PWはパルス幅であり、Dmaxは最大距離であり、cは光の速さであり、TOFmaxは最大飛行時間であり、TDLは0≦TDL≦2×Dmin/cである所定の遅延時間窓であり、Nは所定のパルス幅減少係数である、ステップと、
B)F≦1/((N+1)×PW+TDL)となるようにパルス周波数を決定するステップであって、Fはパルス周波数であり、F=1/Pであり、Pはパルス周期である、ステップと、
C)パルスレーザ光のパルス周期(P)内の反射レーザ光を検出するための検出期間を、T=(N+1)×PW、Tは検出期間、で決定し、
i=1~Mであり、Mは検出時間窓の数である、連続する検出時間窓の数TW[i]で検出時間期間を分割するステップであって、
Figure 2022551427000003
αは、パルス幅ごとに選択される検出時間窓の数を表す整数であり、α≧1、好ましくはα≦10、より好ましくはα≦5であり、αおよびNは、α×N≧2、好ましくはα×N≧3、より好ましくはα×N≧4となるように選択される、ステップと、
D)複数の空間的に分離されたパルスレーザビームによって形成されたスポットパターンでシーンを照明するステップであって、各パルスレーザビームは、ステップA)で決定されたパルス幅を有し、かつステップB)で決定されたパルス周波数を有するパルスシーケンスを備え、複数のパルスレーザビームの各々のパルスは同時に放射される、ステップと、
E)ステップD)で定義されたようにシーンを照明するときにパルスの各同時放射に続いて、ステップC)で定義された検出期間(T)の連続する検出時間窓TW[i]中に反射レーザのスポットを検出するステップであって、スポットは、シーン内の1つまたは複数の物体によって反射された空間的に分離されたパルスレーザビームを表しており、
パルスレーザビームのパルスの放射と同期して反射レーザ光のスポットの前記検出を実行するパルスの各同時放射について、
a)遅延時間窓が0である場合には、第1の検出時間窓TW[1]がパルスの放射時間窓と重なるか、または少なくとも部分的に重なるように同期を実行し、
b)遅延時間窓が0でない場合には、第1の検出時間窓TW[1]がパルスの放射時間窓に対して遅延時間窓に等しい遅延で遅延されるように同期を実行する、ステップと、
F)反射レーザ光の検出されたスポットの各々について、検出時間窓TW[i]で検出された反射レーザ光の量を累積することによって、検出時間窓TW[i]に関連付けられた露光値を取得するステップであって、累積はパルスシーケンスの全てのパルスについて実行される、ステップと、
G)反射レーザ光の検出されたスポットの各々について、
i)連続する検出時間窓TW[i]のどの検出時間窓で反射レーザ光が検出されるかを識別するステップと、
ii)識別された検出時間窓に基づいて物体距離を計算するステップであって、物体距離は、反射レーザ光のスポットを検出する検出器と、反射レーザ光を検出させたシーン内の物体またはシーン内の物体の一部との間の距離に対応する、ステップと、を含む。
有利には、最大飛行時間TOFmax、すなわち、測定される最大距離に対応するTOFmaxに対してレーザパルスのパルス幅を減少させ、反射レーザ光を検出するための検出時間窓を減少させることによって、測定分布のシグマ値σであるとして上記で定義された距離決定の時間精度が改善される、すなわち低減される。すなわち、時間精度が改善される。これにより、取得されるフレーム数を減らすことができ、または単一のフレーム測定を実行することさえ可能になる。LIDAR装置が完全に較正されており、単一のフレーム測定のみを実行する場合、時間精度は、測定された距離値が実際の距離値にどのくらいの確率で等しいかを決定することである。
有利には、検出期間およびパルス周波数は、最大距離に位置する物体から生じる反射レーザ光が、後続のレーザパルスが放射される前の検出期間内に検出されるように定義される。これにより、エイリアシングの問題が回避される。
有利には、本発明による方法を用いて、特許請求の範囲に記載のパルス幅を有するレーザパルスの同じシーケンスおよび特許請求の範囲に記載の検出時間窓を用いて、物体を広範囲の距離にわたって、すなわち短距離Dminから最大距離Dmaxまで検出することができる。
検出期間がM個の連続する検出時間窓に分割され、各検出時間窓がパルス幅に本質的に等しい時間幅、すなわちα=1を有する検出期間中の時間の関数としての反射レーザ光の検出の実行は、反射レーザ光が最大2つの検出時間窓で検出されるという追加の利点を有する。したがって、M≧3として、バックグラウンド測定を実行するために追加のタイムスロットを必要としないように、バックグラウンド検出時間窓として使用することができる少なくとも1つの検出時間窓がある。
また、α>1の場合、反射レーザ光は最大α+1検出時間窓で検出され、したがってパルス幅係数は、検出時間窓がバックグラウンド測定を実行するために利用可能であるように選択することができる。
有利には、距離測定の精度の改善に起因して、フレーム数を減らすことができ、したがってLIDAR装置の全体的な応答時間が改善される。
最小距離Dminの下限「0」は、0メートルと解釈されなければならない。
実施形態では、最小距離Dminは0メートルに等しく、したがって遅延時間窓TDLは0ナノ秒に設定される。
実施形態では、0.005×Dmax≦Dmin≦0.6×Dmaxである。他の実施形態では、0.01×Dmax≦Dmin≦0.6×Dmaxである。さらなる実施形態では、0.01×Dmax≦Dmin≦0.4×Dmaxである。
実施形態では、Nとαとの積は、1000以下、好ましくは500以下、より好ましくは100以下である。
実施形態では、所定のパルス幅減少係数Nは3以上であり、他の実施形態ではNは4以上である。
いくつかの実施形態では、所定のパルス幅減少係数Nは、2≦N≦20、好ましくは3≦N≦20の範囲内に含まれる。
実施形態では、最大距離Dmaxは、30メートル≦Dmax≦1000メートルの範囲、好ましくは50メートル≦Dmax≦500メートルの範囲に含まれる。しかしながら、本発明は、決定される特定の最大距離に限定されない。
上記で定義され、特許請求の範囲で定義された検出期間Tは、反射レーザ光を検出するための検出期間として解釈されるべきであり、したがって、検出期間Tの後の追加の検出時間窓が、例えばバックグラウンドを検出するために、または他の測定を実行するためにさらに使用されることを排除しない。
実施形態では、i=1~Mの連続する検出時間窓TW[i]は、実質的に等しい持続時間である。
実施形態では、i=1~Mである連続する検出時間窓TW[i]の各々について、(|(PW/α)-TW[i]|/(PW/α))≦0.10、好ましくは(|(PW/α)-TW[i]|/(PW/α))≦0.05、より好ましくは(|(PW/α)-TW[i]|/(PW/α))≦0.02であり、
実施形態では、本発明による方法は、LIDAR装置を用いてシーン内の1つまたは複数の物体までの距離を決定するための方法である。
本発明による方法は、定義されたステップの特定の順序に限定されず、文字A)~G)で識別されたステップは、特定の時系列を示すと解釈されるべきではないことに留意されたい。例えば、ステップA)~C)は、異なる順序で実行することができ、または並行して実行することができる。文字A)~G)は、本発明の方法に含まれる異なるステップを識別するために使用されるにすぎず、これらの文字は、例えばこれらのステップが本文でさらに詳細に説明される場合の参照として使用される。
実施形態では、反射レーザ光の検出は、複数の画素を有するマルチウェル画素検出器を備えるレーザ受光装置を用いて実行され、各画素は、感光領域と、i=1~Nであり、Nは電荷ストレージウェルの数であり、N≦Mである複数の電荷ストレージウェルW[i]とを含み、複数の電荷ストレージウェルは、検出期間T中に感光領域によって検出された電荷を格納するように構成される。好ましい実施形態では、N<MおよびM≧4である。
本発明による実施形態では、ステップC)において、整数αが1よりも大きくなるように選択される場合、αはNよりも小さくなるように選択され、好ましくはα=Round(N/2)であり、Roundは比N/2を最も近い整数に丸めるための関数である。Nが奇数である場合、2で除算した後の丸めは、最も低い整数または最も高い整数にすることができる。
実施形態では、k=1~M-αであるα+1個の連続する時間窓TW[k]~TW[k+α]の各サブシーケンスは、反射レーザ光が検出された検出時間窓が明確に識別可能であるように、複数の電荷ストレージウェルW[i]のα+1個の電荷ストレージウェルの固有シーケンスに関連付けられる。
α=1である実施形態では、k=1~M-1である連続する検出時間窓TW[k]およびTW[k+1]の各対は、反射レーザ光が検出される検出時間窓が明確に識別可能であるように、複数の電荷ストレージウェルW[i]の電荷ストレージウェルの固有の対に関連付けられる。
α=1である実施形態では、ステップA)において、パルス幅減少係数Nは、電荷ストレージウェルの数が奇数の場合はN≦N!/((N-2)!×2)、または電荷ストレージウェルの数が偶数の場合はN≦[N!/((N-2)!×2)]-[(N!/((N-1)!×2))-1]となるように定義される。
実施形態では、ステップG)ii)において、物体距離の計算は、識別された検出時間窓に基づいている、および/または反射レーザ光が識別された少なくとも最も早い検出時間窓および最後の検出時間窓について得られた露光値に基づいている。いくつかの実施形態では、物体距離の計算は、反射レーザ光が識別された最も早い検出時間窓に先行する検出時間窓の数のカウントに基づく。
本発明の第2の態様によれば、シーンの1つまたは複数の物体までの距離を決定するためのLIDAR装置が提供される。そのようなLIDAR装置は、複数の空間的に分離されたパルスレーザビームによって形成されたスポットパターンでシーンを照明するように構成されたプロジェクタであって、各パルスレーザビームはパルス幅を有するパルスシーケンスを含み、複数のパルスレーザビームの各々のパルスは同時に放射される、プロジェクタと、シーンの1つまたは複数の物体によって反射されたスポットパターンを表す反射レーザ光のスポットを検出するように構成されたCMOSベースのマルチウェル画素検出器を備える受光装置と、パルスレーザビームのパルスの同時放射と同期して反射レーザ光を検出して蓄積するようにプロジェクタおよび受光装置を制御するためのコントローラと、を備える。
本発明によるLIDAR装置は、CMOSベースのマルチウェル画素検出器が、パルスレーザビームのパルス周期内に入る検出期間中に反射レーザ光を検出するように構成され動作可能であり、検出期間は、いくつかの連続する検出時間窓TW[i]に分割され、i=1~Mであり、Mは、M≧3、好ましくはM≧4、より好ましくはM≧5である検出時間窓の数であり、
Figure 2022551427000004
i=1~Mの連続する検出時間窓TW[i]は、実質的に等しい持続時間である。実施形態では、i=1~Mである検出時間窓TW[i]の各々について、(|PW-TW[i]|/PW)≦0.10、好ましくは(|PW-TW[i]|/PW)≦0.05、より好ましくは(|PW-TW[i]|/PW)≦0.02である。
CMOSベースのマルチウェル画素検出器は、反射レーザ光の検出されたスポットのそれぞれについて、検出時間窓TW[i]で検出された反射レーザ光を表す電荷の量を蓄積することによって、検出時間窓TW[i]に関連付けられた露光値を取得するようにさらに構成され動作可能であり、蓄積は、パルスシーケンスの全てのパルスに対して実行される。
LIDARはまた、コントローラが、i)第1の検出時間窓TW[1]がパルスのパルス放射時間窓と重なるか、または少なくとも部分的に重なるように、あるいは、ii)第1の検出時間窓TW[1]がパルスの放射時間窓に対して遅延され、遅延が所定の遅延時間窓に等しいように、同期を実行するように構成されることを特徴とする。
好ましくは、所定の遅延時間係数は2×Dmin/c以下であり、Dminは最小距離、cは光の速さであり、これにより最小距離Dminまたはその近くに位置する物体を検出し、距離を決定することができる。
本発明によるLIDAR装置は、反射レーザ光の検出されたスポットの各々について、i)連続する検出時間窓のどの検出時間窓で反射レーザ光を表す露光値が取得されるかを識別することと、ii)識別された検出時間窓および/またはそれらの識別された検出時間窓に蓄積された電荷に基づいてシーンの物体までの物体距離を計算することと、を構成する処理手段を備えることをさらに特徴とする。
実施形態では、CMOSベースのマルチウェル画素検出器は、複数の画素を備え、各画素は、感光性検出領域と、i=1~Nであり、Nは電荷ストレージウェルの数であり、N≦Mである複数の電荷ストレージウェルW[i]とを含み、複数の電荷ストレージウェルは、検出期間中に感光領域によって検出された電荷を格納するように構成される。好ましい実施形態では、N<MおよびM≧4である。
そのようなCMOSベースのマルチウェル画素検出器を備え、N<MおよびM≧4である実施形態では、k=1~M-αであるα+1個の連続する時間窓TW[k]~TW[k+α]の各サブシーケンスは、反射レーザ光が検出された検出時間窓が明確に識別可能であるように、複数の電荷ストレージウェルW[i]のα+1個の電荷ストレージウェルの固有シーケンスに関連付けられる。
M≧4およびα=1である実施形態では、マルチウェル画素検出器N<Mの各画素について、検出時間窓の連続する時間窓の各対TW[k]およびTW[k+1]は、反射レーザ光が検出される検出時間窓が明確に識別可能であるように、電荷ストレージウェルの固有の対W[m]およびW[n]に関連付けられる。
α=1である実施形態では、電荷ストレージウェルの数Nおよび検出時間窓の数Mは、N=3およびM=4、またはN=4および5≦M≦6、またはN=5および7≦M≦11と定義される。
好ましい実施形態では、LIDAR装置は、検出時間窓の数Mとパルス幅PWとが関係するように構成され、この関係は、PW=(TOFmax-TDL)/((M-α)/α)と定義され、TOFmax=2×Dmax/cであり、TOFmaxは最大飛行時間であり、Dmaxは最大飛行時間に関連付けられた最大距離であり、cは光の速さであり、TDLは所定の遅延時間窓であり、0≦TDL≦(0.6×TOFmax)、好ましくは0≦TDL≦(0.4×TOFmax)、より好ましくは0≦TDL≦(0.2×TOFmax)である。最大距離は、LIDAR装置の動作範囲であり、一般に、LIDAR装置の最大動作範囲である。
実施形態では、LIDAR装置の最大動作範囲に対応するこの最大距離Dmaxは、30メートル≦Dmax≦1000メートルの範囲内、好ましくは50メートル≦Dmax≦500メートルの範囲内である。
実施形態では、プロジェクタは、F≦1/((M/α)×PW+TDL)となるようなパルス周波数Fでパルスレーザビームを供給するように構成される。
実施形態では、パルスレーザビームによって生成されるレーザ光は、800nm~1600nmの波長を有する。
本発明による実施形態では、α≧2である。
本発明はまた、本発明によるLIDAR装置を備える車両に関する。
図面の簡単な説明
本開示のこれらおよびさらなる態様は、例として、添付の図面を参照してより詳細に説明される。
光の照射および検出のための従来技術のタイミング図を概略的に示す。 パルス列を形成するパルスシーケンスの一例を概略的に示す。 いくつかのフレームの繰り返しを概略的に示す。 本発明の実施形態によるパルス放射および検出のための様々なタイミング図を概略的に示す。 本発明によるパルス放射および検出のタイミング図のさらなる例を概略的に示す。 パルス放射時間窓と反射レーザ光を検出するための第1の検出時間窓との間に遅延が存在する、パルス放射および検出のタイミング図を概略的に示す。 所与の数の検出時間窓に関連付けられた複数の検出器ウェルの2つの例を概略的に示す。 α=2である、パルス放射および検出のためのタイミング図の一例を概略的に示す。 本発明による方法を用いた距離測定の時間誤差の低減を概略的に示す。 本発明の実施形態によるLIDAR装置を概略的に示す。
図の図面は、縮尺通りに描かれておらず、比例もされていない。一般に、図中、同一の構成要素には同一の符号を付している。
実施形態の詳細な説明
本開示は、特定の実施形態に関して説明されるが、これらは本開示を例示するものであり、限定するものとして解釈されるべきではない。本開示は、特に示されたおよび/または説明されたものによって限定されず、本開示の全体的な教示に照らして代替または変更された実施形態が開発され得ることが当業者には理解されよう。説明される図面は概略的なものにすぎず、非限定的である。
動詞「備える」ならびにそれぞれの活用形の使用は、述べられたもの以外の要素の存在を排除しない。要素に先行する冠詞「a」、「an」または「the」の使用は、複数のそのような要素の存在を排除しない。
さらに、明細書および特許請求の範囲における第1、第2などの用語は、同様の要素を区別するために使用され、必ずしも時間的、空間的、序列、または他の方法による順序を説明するためのものではない。そのように使用される用語は、適切な状況下で交換可能であり、本明細書に記載される開示の実施形態は、本明細書に記載または図示されている以外の順序で動作することができることを理解されたい。
本明細書を通して「一実施形態」または「実施形態」への言及は、実施形態に関連して説明される特定の特徴、構造、または特性が本開示の1つまたは複数の実施形態に含まれることを意味する。したがって、本明細書全体の様々な箇所における「一実施形態では」または「実施形態では」という語句の出現は、必ずしも全てが同じ実施形態を指しているわけではないが、そうであってもよい。さらに、特定の特徴、構造、または特性は、本開示から当業者に明らかであるように、1つまたは複数の実施形態において、任意の適切な方法で組み合わせることができる。
用語パルス幅がパルスレーザビームのパルスのパルス幅などで使用される場合、用語パルス幅は、例えばナノ秒で表される時間単位で表される時間パルス幅として解釈されなければならない。
シーンまでの距離を決定するための方法、概要
本発明の第1の態様によれば、シーンの1つまたは複数の物体までの距離を決定するための方法が提供される。シーンは、例えば、自動車のフロントガラスまたはバンパーに取り付けられたLIDAR装置によって観察される領域である。LIDAR装置の視野に応じて、シーンは広い領域または狭い領域をカバーすることができる。自動車用途の視野は、例えば、30°×10°または120°×30°または任意の他の適切な視野である。シーンは、例えば、LIDAR装置から異なる距離に位置する様々な物体、または少数の物体、またはただ1つの物体を含むことができる。この方法は、シーンの距離マッピングを実行し、それによって物体までの異なる距離またはシーンの部分までの距離を識別することを目的とする。本発明による方法は、自動車用途のLIDARに限定されず、LIDARが例えば飛行機または衛星に搭載される他の領域にも適用することができる。
本方法は、複数の空間的に分離されたパルスレーザビームによって形成されたスポットパターンでシーンを照明するステップを含む。各パルスレーザビームは、パルス幅PWおよびパルス周波数Fを有するパルスシーケンスを備える。複数のパルスレーザビームの各々のパルスは、同時に放射される。このようなパルスシーケンスはパルス列とも呼ばれ、パルス列50の一例が図2に概略的に示されている。この例示的な例では、5つのパルスのみが示されているが、実際には、パルス列内のパルスの数は一般にはるかに多い。例えば、いくつかの実施形態では、パルス列内のパルスの数は、50~500パルスの範囲である。パルス11のPWを有するパルスおよびパルス周期Pは、パルス周波数Fの逆数であり、図2に示されている。
実施形態では、図2に示すように、パルスはブロックパルス、すなわち長方形のパルスである。しかしながら、本発明は、パルスの特定の形状に限定されない。他の実施形態では、パルスは別の形状を有することができる。
実施形態では、離散スポットパターンを形成するレーザビームによって生成されるレーザ光の波長は、800nm~1600nmである。
さらなるステップにおいて、反射レーザ光のスポットが検出される。これらのスポットは、シーン内の1つまたは複数の物体によって、またはシーン内の1つまたは複数の物体の一部によって反射されたスポットパターンを表す。この検出は、パルスレーザビームの各パルス周期P内で、パルスレーザビームのパルスの同時放射と同期して実行される。
反射レーザ光の検出は、例えば、CMOSベースのマルチウェル画素検出器と、1つまたは複数の光学レンズおよび狭帯域フィルタなどの光学素子とを備える受光装置を用いて実行される。本発明による方法を適用するために使用することができる受光装置について、以下でさらに詳細に説明する。
本発明による方法は、シーンを照明するスポットパターンを形成するためのパルスレーザビームによって生成されたパルスレーザ光の最適パルス幅PWを決定するステップを含む。
本発明の方法によれば、パルス幅PWは、最大距離Dmaxに関連して決定される。実際、シーン内の1つまたは複数の物体は、最小距離Dminと最大距離Dmaxとの間の距離範囲内の距離Dに位置する。一般に、0≦Dmin≦0.6×Dmax、好ましくは0≦Dmin≦0.4×Dmax、より好ましくは0≦Dmin≦0.2×Dmaxである。すなわち、物体は異なる距離に位置することができ、本方法は、1つまたは複数の物体までの距離を決定することを可能にし、DminとDmaxとの間のいかなる距離においても、1つまたは複数の物体は実際に位置している。
この最大距離は、必要な最大動作範囲として解釈することができる、すなわち、最大距離は、依然として明確に測定可能であるシーンまでの最大距離に対応する。例えば、Dmaxが100メートルであると定義される場合、それは、100メートル以内に位置するシーン内の物体が検出可能であり、本発明の方法に従って距離が測定可能であるが、最大距離よりも遠くに位置するシーン内の物体までの距離を決定することができる必要はないことを意味する。本発明による方法の場合、この最大距離は、典型的には50メートル以上であり、概して500メートル以下である。しかし、用途に応じて、測定される最大距離は、より大きく、例えば1000メートル以上であってもよい。本発明による方法は、特定の最大距離によって限定されない。
本発明の方法によれば、パルス幅PWは、最大距離Dmaxに関連付けられた最大飛行時間TOFmaxよりも小さくなるように設定される。レーザ光が放射されて物体によって反射された後に検出されると、これは物体までの距離の2倍の距離を移動したことになる。したがって、TOFmaxは(2×Dmax/c)に等しく、cは光の速さである。パルス幅PWは[TOFmax-TDL]/Nに等しくなるように設定され、Nは所定のパルス幅減少係数であり、TDLは所定の遅延時間窓である。
所定の遅延時間係数は、一般に2×Dmin/c以下であり、これにより最小距離Dminまたはその近くに位置する物体を検出し、距離を決定することができる。
図4には、所定の遅延時間窓が0である実施形態が示されている。図4に概略的に示すように、この場合、パルス幅減少係数Nは、最大測定可能飛行時間TOFmaxと放射されたレーザパルス11のパルス幅PWとの間の比に対応する。
本発明の方法によれば、反射レーザ光の検出されたスポットの各々について、時間の関数としての露光値が得られる。
本発明による方法は、反射レーザ光を検出するためのパルスレーザビームのパルス周期P内に入る検出期間Tを決定するステップを含み、検出期間TをM個の連続する検出時間窓TW[i]に分割するステップをさらに含み、i=1~Mであり、Mは検出時間窓の数であり、M=α×(N+1)である。検出期間Tは、
Figure 2022551427000005
で表され、
式中、αはα≧1である整数である。係数αは、パルス幅当たりの時間窓の数を表す。α=1である実施形態およびα>1である実施形態の両方が、本明細書において以下にさらに論じられる。
α=1である実施形態では、所定のパルス幅減少係数Nは、一般に、2以上、好ましくは3以上、より好ましくは4以上である。
実施形態では、αおよびNは、α×N≧2、好ましくはα×N≧3、より好ましくはα×N≧4となるように選択される。
検出窓TW[i]の各々は、期間として解釈されなければならない。実施形態では、i=1~Mの連続する検出時間窓TW[i]は、実質的に等しい持続時間である。
図4では、2~5であるNの値およびα=1について、検出時間窓のいくつかの例が示されている。図4に示す実施形態は、所定の遅延時間窓が0である実施形態である。
図6には、所定の遅延時間窓TDLが0ではない実施形態の一例が示されている。実施形態では、0≦TDL≦0.6×TOFmax、好ましくは0≦TDL≦0.4×TOFmax、より好ましくは0≦TDL≦0.2×TOFmaxである。当業者は、使用される検出機器に応じて、かつ同じ機器で測定される必要がある物体距離の範囲に応じて、遅延時間窓TDLを適用するか否かを選択する。例えば、以下でさらに説明するように、目的がDmaxの10%に等しい最小距離Dminと最大距離Dmaxとの間の範囲内の物体距離を測定することである場合、TOFmaxの10%の時間遅延を設定して、反射レーザ光を検出するために使用される検出器の画素ウェルの数を減らすことができる。一方、0メートル、すなわちDmin=0と最大距離Dmaxとの間の任意の距離で物体が位置特定され、検出される必要がある場合、当業者は遅延時間窓を実装しないことを選択することができる。
図4、図6および図8に示すように、各検出時間窓TW[i]は、比PW/αにほぼ等しく、PWは、放射されたレーザパルス11のパルス幅であり、αは、図4および図5の例では1に等しく、図8の例では2に等しいアルファ係数である。いくつかの実施形態では、検出期間Tが比PW/αのM倍に等しい限り、検出時間窓TW[i]の各々は、必ずしも比PW/αに正確に等しくなく、ある程度のずれが生じる可能性がある。一般に、各時間窓TW[i]について、(|(PW/α)-TW[i]|/(PW/α))≦0.10、好ましくは(|(PW/α)-TW[i]|/(PW/α))≦0.05、より好ましくは(|(PW/α)-TW[i]|/(PW/α))≦0.02である。当業者は、使用される機器および物体までの距離を決定するために必要な最終精度に応じて最適値を選択するであろう。いくつかの実施形態では、(|(PW/α-TW[i]|/(PW/α))≦0.01である。
反射レーザ光の検出されたスポットの各々について、本方法は、検出時間窓TW[i]で検出された反射レーザ光の量を累積することによって、検出時間窓TW[i]に関連付けられた露光値Qを取得するステップを含む。この蓄積は、スポットを生成するパルスレーザビームのパルスシーケンスの全てのパルスにわたって実行される。実際、レーザ光を反射しているシーン内の物体までの距離に応じて、異なる飛行時間TOFが発生し、したがって、レーザ光は、測定される距離に応じて異なる時間窓で検出され得る。
α=1であり、パルス幅PWが検出時間窓の幅とほぼ同じである場合、反射パルス12は、2つの連続する検出時間窓または単一の検出時間窓のいずれかで検出される。図4には、反射パルスが一般に2つの連続する時間窓に重なることを示すいくつかの任意のTOF例が示されている。
いくつかの物体距離について、α=1の場合、反射レーザ光は単一の時間窓で検出することもできる。例えば、第1の検出時間窓がパルス11の放射と一致する場合、すなわち遅延時間窓TDLが適用されない場合、および測定される物体までの距離がパルス幅PWまたはその倍数に等しい飛行時間に対応する場合、反射レーザ光は単一の検出時間窓で検出される。同様に、遅延時間窓TDLが適用され、測定される物体までの距離が遅延時間窓TDLにパルス幅PWの倍数を加えたものに等しい飛行時間に対応する場合、反射レーザ光は単一の検出時間窓で検出される。
より一般的には、1以上のαの任意の値について、反射レーザ光は、αまたはα+1個の連続する検出時間窓のいずれかで検出される。
本発明の方法によれば、図2に示すパルス周波数Fは、F≦1/((N+1)×PW+TDL)となるように決定される。パルス周波数の上限は、最大距離Dmaxに位置する物体から反射された反射レーザ光が、次のパルスが放射される前に検出されるように規定される。一般に、パルス周波数は、例えば眼の安全上の理由から、またはエイリアシングの問題を回避するため、または2D測定を実行するために、平均レーザ出力を規定された制限内に維持するために、1/(((N+1)×PW)+TDL)の上限よりも低い。実施形態では、図2に示すように、パルス列50のパルス周波数Fは、典型的にはkHz範囲内、例えば10kHz~500kHzである。
いくつかの実施形態では、周波数Fは、1/((2×N×PW)+TDL)≦F≦1/(((N+1)×PW)+TDL)となるように決定される。
本発明による方法は、反射レーザ光の検出されたスポットの各々について物体距離を決定するさらなるステップを提供する。物体距離は、まず、どの対応する時間窓で反射レーザ光が検出されたかを識別するステップによって決定される。第2のステップでは、以下でさらに詳細に説明するように、D≦Dmaxであるシーンの物体までの物体距離Dが、識別された対応する検出時間窓の識別および/または識別された検出時間窓で得られた取得露光値に基づいて計算される。
従来技術のタイミング図では、例えば図1に示すように、2つの検出時間窓のみが使用され、したがって、物体距離は、2つの時間窓で検出されたレーザ光の量に基づいて決定することができる。一方、本発明によるタイミング図では、例えば図4に示すように、反射レーザ光がどの検出時間窓で検出されるかは事前に知られていない。したがって、一連のパターン照射中に反射レーザ光の検出を実行した後、本発明による方法は、レーザ光が検出された検出時間窓を識別するステップを含む。このステップは、検出された反射レーザ光のスポットごとに行われる。上述したように、本発明による方法では、反射レーザ光は、αまたはα+1個の連続する検出時間窓のいずれかで検出される。
検出時間窓で得られたデータを読み出した後、様々なソフトウェアアルゴリズムを使用して、反射レーザ光を検出した検出時間窓の識別を実行することができる。実際、反射レーザ光は、αまたはα+1個の連続する検出時間窓のいずれかで検出され、したがって、検出時間窓の各々におけるカウント数を比較することによって、カウント数が最も多いαまたはα+1の検出時間窓を、検出されたバックグラウンドカウントのみを有する検出時間窓から区別することができる。さらに、アルゴリズムはまた、α+1個の検出時間窓における予想強度プロファイルを考慮に入れることができ、反射レーザ光が検出された最も早い検出時間窓および最後の検出時間窓ではより低い強度が予想され、最も早い検出時間窓と最後の検出時間窓との間ではより高く本質的に同じ強度が予想される。反射レーザ光がα個の検出時間窓で検出される場合、α個の連続する検出時間窓において本質的に同じ強度が期待される。例えばα=1の場合、反射レーザ光は最大2つの検出時間窓で検出され、したがってバックグラウンド検出に利用可能な少なくとも1つの検出時間窓が常に存在することに留意されたい。
実施形態では、例えばブロック関数を使用する適合アルゴリズムを適用して、最も高いカウント数を有する検出時間窓の位置を決定することができる。
反射レーザ光を検出した検出時間窓の識別に続いて、識別された検出時間窓に基づいてシーンの物体までの距離を計算することができる。
実施形態では、さらに詳細に説明するように、物体距離の計算は、識別された検出時間窓に基づいている、および/または反射レーザ光が識別された少なくとも最も早い検出時間窓および最後の検出時間窓について得られた露光値に基づいている。他の実施形態では、物体距離の計算は、反射レーザ光が識別された最も早い検出時間窓に先行する検出時間窓の数のカウントに基づく。α=1の場合、パルス幅減少係数Nの上限は、主に、反射レーザ光を検出するために利用可能な検出器技術、特に検出器応答時間、例えばCMOSカメラの速度によって決定される。例えば、Dmax=100メートルであり、10のパルス幅減少係数を使用すると、パルス幅PWは約66ナノ秒に等しい。そのようなパルス幅は、例えば現在のCMOSベースの画素センサ技術と依然として互換性がある。
α>1の場合、減少係数Nを有するパルスは、係数αに関連して決定される。実際、上述したように、検出時間窓はNとαの両方に依存する。以下に説明するように、開閉される必要がある電荷ストレージウェルを備える検出器技術が使用される場合、検出時間窓は、CMOS技術と互換性のある時間窓内に維持されるべきである。実施形態では、Nとαとの積は、1000以下、好ましくは500以下、より好ましくは100以下である。当業者は、利用可能な検出技術に基づいて、また最大距離Dmaxに基づいてαおよびNの値を選択する。Dmaxが大きいほど、所与の低減された幅を有する検出時間窓を得るために取られる積α×Nが大きくなる。
物体までの距離を決定するための式
反射レーザ光の検出は、パルスレーザビームのパルスの同時放射と同期して実行されるので、どの検出時間窓がレーザ光を検出したかの識別に基づいて、レーザ光の飛行時間、したがって物体までの距離を決定することができる。
当業者は、検出されたレーザ光を有する識別された検出時間窓に基づいて物体までの距離を計算するための式を定義するであろう。物体距離の計算には、様々な選択肢が考えられる。距離を計算する式の例を以下に概説する。後述するように、いくつかの実施形態では、式は、識別された検出時間窓のいくつかの露光値、特に反射レーザ光が識別された最も早い検出時間窓および最後の検出時間窓の露光値を考慮に入れる。他の実施形態では、物体距離は、どの検出時間窓が反射レーザ光を検出したかの識別のみに基づいて決定される。これらの実施形態では、物体距離を決定するために、反射レーザ光を検出した最も早い検出時間窓に先行する検出時間窓の数がカウントされている。
α=1のとき、すなわちパルス幅が検出期間に等しいときに距離Dを計算するための式を最初に論じる。反射レーザ光が2つの連続する時間窓iおよびi+1で検出される場合、距離Dは、以下の式で計算することができる。
=(TDL×c/2)+[(i-1)×c×PW+c×PW×Qi+1/(Q+Qi+1)]/2、
ここで、QおよびQi+1は、それぞれ時間窓iおよび時間窓i+1で得られた露光値である。一般に、例えば検出器に到達する周囲光または他のバックグラウンドノイズ源から生じるバックグラウンドイベントに対して露光値が補正される。
あるいは、反射レーザ光が2つの連続する時間窓iおよびi+1で検出される場合、距離Dは、以下の代替式D=(TDL×c/2)+[i×c×PW-c×PW×Q/(Q+Qi+1)]/2で計算することもできる。この代替式は、時間窓iにおける反射レーザ光の量が時間窓i+1における反射レーザ光の量よりも大きい場合に使用されることが好ましい。
一方、i≧2で、反射レーザ光が1つの時間窓iでのみ検出される場合、シーンまでの距離を計算するために以下の式D=(TDL×c/2)+[(i-1)×c×PW]/2を使用することができる。
α=2である検出タイミング図の一例が図8に概略的に示されている。この例では、パルス幅減少係数Nは15に等しく、すなわち、放射されたパルス11のパルス幅PWは、最大飛行時間を15で割ったものに等しい。α=2とすると、検出時間窓の総数Mは、32=α×(N+1)に等しい。α>1である図8に示されるような検出タイミング図の場合、距離Dを決定するために式を推定することもできる。
α>1の場合、反射レーザ光は、α+1個の検出時間窓またはα個の検出時間窓で検出される。例えば、α=2、すなわちTW[i]=PW/2の場合、反射レーザ光は最大3つの連続する時間窓で検出される。一般に、α=2の場合、反射パルスは、時間窓TW[i]で部分的に観察され、時間窓TW[i+1]で完全に検出され、時間窓TW[i+2]で部分的に検出される。場合によっては、シーン内の物体の位置に応じて、反射レーザ光はまた、2つの連続する時間窓TW[i]およびTW[i+1]で検出され得る。図8に示す例では、反射レーザパルス12が時間窓14~16で検出される。
α≧1であり、反射レーザ光がα+1個の連続する検出時間窓で検出される場合、本発明の方法に従って距離を決定するためのより一般的な式は、以下のように表すことができる。
=TDL×c/2+Z×(TOFmax-TDL)×c/2、
式中、Z=(R+z)/(α×N)およびz=Q/(Q+Q)であり、
この式において、Dは物体距離であり、Qは、反射レーザ光が識別された連続する検出時間窓のうちの最も早い検出時間窓TW[a]について得られた露光値であり、Qは、反射レーザ光が識別された連続する検出時間窓のうちの最後の検出時間窓TW[b]について得られた露光値であり、Rは、最も早い時間窓TW[a]に先行する検出時間窓の数をカウントする整数である。図8に示す例では、反射レーザ光は時間窓14~16で検出され、最も早い検出時間窓TW[a]は検出時間窓14であり、検出時間窓16は反射レーザ光が検出された最後の検出時間窓TW[b]である。この例における整数Rは13に等しく、最も早い検出時間窓の番号14に先行する検出時間窓の数に対応する。これらの露光値QおよびQは、例えばバックグラウンド光から生じるバックグラウンドカウントについて補正された露光値として解釈されなければならない。したがって、反射レーザ光がα+1個の連続する検出時間窓で検出され、上記の式が使用される場合、距離は、識別された検出時間窓で得られた露光値を考慮することによって決定される。
α≧1であり、反射レーザ光がα+1個の連続する検出時間窓の代わりにα個の連続する検出時間窓で検出される場合、物体距離Dは、以下の式を使用して計算することができる。
=TDL×c/2+(R/(α×N))×(TOFmax-TDL)×c/2、
ここで、Rは、反射レーザ光が識別された最も早い検出時間窓に先行する検出時間窓の数をカウントする整数である。したがって、反射レーザ光がα個の連続する検出時間窓で検出される場合、距離は、識別された検出時間窓で得られた露光値を使用せずに決定される。
いくつかの実施形態では、反射レーザ光がαまたはα+1個の連続する検出時間窓で検出される両方の場合について、物体距離Dは、識別された検出時間窓で得られた露光値を考慮せずに決定することができる。実際、例えばαおよび/またはパルス幅係数Nに大きい値を選択することによって検出時間窓が短い場合、検出時間窓の一部のみの間に反射レーザ光が検出された最も早い検出時間窓は、距離計算のために無視することができる。これらの実施形態では、物体距離Dは、上記と同じ式、すなわち、D=TDL×c/2+(R/(α×N))×(TOFmax-TDL)×c/2を使用して計算することができ、Rは、反射レーザ光が識別された最も早い検出時間窓に先行する検出時間窓の数をカウントする整数である。物体距離を計算するためのこの手法は、例えば、αおよび/またはNまたは大である場合、および/または決定される距離が大きい、例えば100メートル以上である場合に適用することができる。
レーザ光のパルス周波数
本発明による方法で到達することができる最高パルス周波数Fは、1/((N+1)×PW+TDL)に等しい。しかしながら、パルス周波数は、より低くてもよく、例えば1/((N+1)×PW+TDL+(q×PW))に等しくてもよく、q≧1であり、q×PWは、エイリアシングを回避するためにDmaxよりも大きい距離に位置するシーン内の物体からの反射から生じる誤った反射の検出が排除されるように定義された遅延タイムスロットを形成している。他の実施形態では、例えば、放射されるレーザ光の平均出力を低減するために、眼の安全上の理由から遅延タイムスロットを実装することもできる。2つの検出時間窓のみを有する図1に示すような従来技術のタイミング図、すなわち、N=1である図を使用する場合、第1の時間窓および第2の時間窓に続く追加のタイムスロットがバックグラウンド測定のために一般に提供される。上述したように、本発明によるタイミング図では、反射レーザ光が検出されずバックグラウンドのみが検出される検出時間窓TW[i]の1つからバックグラウンド推定値を常に得ることができるので、バックグラウンド測定のための追加のタイムスロットは必須ではない。
しかしながら、本発明によるいくつかの実施形態では、上述の追加の遅延タイムスロットq×PWは、追加のバックグラウンド測定を実行するために使用する、または部分的に使用することができる。したがって、検出期間Tは、反射レーザ光を検出するための検出期間として解釈されるべきであり、検出期間Tの後の追加の検出時間窓が、例えばバックグラウンドを検出するために使用されること、または追加の時間窓が任意の他の適切な目的のために使用されることを排除する。
図5には、追加の遅延タイムスロットが検出期間Tの後に提供される、本発明による時間図の例が示されている。検出期間に続く遅延タイムスロットは、図5の参照番号21で特定される。図5に示すこれらの例では、上述したような所定の遅延時間窓TDLは実装されず、同期は、図示のように、放射されたパルス11が第1の検出時間窓と重なるように実行される。他の実施形態では、上述したように、パルスの放射時間窓に対して第1の検出時間窓を遅延させるために、所定の遅延時間窓TDLをさらに実装することができる。上述したように、この追加の遅延タイムスロット21は、誤反射の低減、眼の調節目的のための平均出力の低減、または追加のバックグラウンド測定の実行など、複数の目的に使用することができる。
実施形態では、パルス周波数Fは1/((N+1)×PW+TDL+IM)以下であり、IMは、TOF法で決定された距離をシーンの3D画像を形成するための写真画像と組み合わせることができるように、シーンの2D写真画像を得るために周囲光またはシーンを照明する光源でシーンを撮像するために提供されるタイムスロットである。上述したように、レーザ光が反射されない利用可能な時間窓が常に存在するため、露光値を補正するために必要なバックグラウンドを測定するための追加のタイムスロットを提供することは必須ではない。しかしながら、いくつかの実施形態では、2D画像を補正および改善するためにバックグラウンドを測定するための追加のタイムスロットが提供される。
パルス検出とパルス放射との同期
上述したように、反射レーザ光のスポットは、パルスレーザビームのパルスの同時放射と同期して検出される。
上記のように遅延時間窓TDLが0である実施形態では、レーザビームのパルスの放射と反射レーザ光の検出との同期は、第1の検出時間窓TW[1]がパルスの放射時間窓と重なるか、または少なくとも部分的に重なるように実行される。α=1である図4および図5に示す実施形態では、第1の時間窓TW[1]は、レーザパルス11の放射と一致するように示されている、すなわち、パルスのパルス幅と第1の時間窓とは完全に重なっている。
他の実施形態では、第1の検出時間窓TW[1]は、パルスの放射時間窓と部分的に重なっている。これは、例えば、第1の検出時間窓TW[1]がパルスの放射に対して遅延される場合に起こり得る。この遅延が第1の検出時間窓よりも小さく、検出時間窓がα=1の場合にパルスと同じまたはほぼ同じ幅を有する場合、第1の時間窓とパルスの放射との間には常に部分的な重なりがある。実施形態では、パルス幅および検出時間窓が正確に同じでない場合、第1の検出時間窓は、パルスの放射と部分的に重なる、すなわち完全に重ならないこともある。より具体的には、α>1の場合、パルス幅PWは検出時間窓よりも大きいため、同期するとき、レーザパルスの放射と第1の検出時間窓との間の部分的な重なりが発生する可能性がある。第1の検出時間窓TW[1]は、パルスの放射時間窓と完全に重なっているか、または少なくとも部分的に重なっている。
実施形態では、第1の検出時間窓は、レーザパルスの放射前に第1の検出時間窓TW[1]中に検出を開始することによってパルスの放射時間窓と部分的に重なっている、すなわち、レーザパルスの放射は第1の検出時間窓に対して遅延される。したがって、上記のようにTDLが0であっても、レーザパルスの放射と第1の検出時間窓とを同期させ、例えば、第1の検出時間窓とレーザパルスの放射との間に部分的な重なりのみが存在するように同期させることによって正または負の遅延を導入するためのいくらかの余地が依然として存在する。
より一般的には、例えば図6に示すように、上で定義した所定の遅延時間窓TDLが0でない場合、同期は、第1の検出時間窓TW[1]がパルスの放射時間窓に対して遅延され、遅延時間窓TDLに等しい遅延を有するように実行される。
距離精度、時間精度
Figure 2022551427000006
フレームは、一般にパルス周波数Fよりもはるかに低いフレームレートFで繰り返すことができる。図3では、フレーム60の繰り返しが概略的に示されており、フレームレートFが示されている。この例では、3つのフレームの繰り返しが示されており、実際には、例えば自動車またはドローンに搭載されたLIDAR装置の場合、距離は連続的に測定されるので、フレームの繰り返し回数は一般にはるかに多い。図3に概略的に示すように、各パルス列50に続いて、露光値を読み出し、取得したデータを処理するために処理時間65が必要である。到達可能なフレームレートFは、典型的にはHz範囲内であり、実施形態では、フレームレートは、例えば5Hz~50Hzである。
Figure 2022551427000007
Figure 2022551427000008
Figure 2022551427000009
Figure 2022551427000010
Figure 2022551427000011
例えば、α=1の場合、パルス幅減少係数N=4を使用することにより、時間精度が4倍改善され、計算された平均物体距離に対して同じ標準偏差を得るために取得されるフレーム数を2倍減らすことができる。しかしながら、これは、パルス列中に放射される光子の総数が同じままであり、バックグラウンドおよびノイズの寄与が同じままであることを条件とする。例えば、パルス列内のパルスの数が同じままである場合、パルス幅減少係数が4であり、目的がフレームの数を2倍減らすことである場合、パルス内で放射される光子の数を4倍増やす必要がある。
Figure 2022551427000012
図9に示す曲線は、バックグラウンドカウントが存在しないと仮定した理論曲線であることに留意されたい。実際には、露光値はバックグラウンドカウントについて補正されるべきであり、したがってバックグラウンドの量に応じて、上記で定義された改善係数は、バックグラウンド補正を考慮した後にわずかに異なり得る。
マルチウェル画素検出器の使用ならびにNおよびαの決定
実施形態では、本発明による方法を実行するために、反射レーザ光検出は、複数の画素を有するマルチウェル画素検出器を備えるレーザ受光装置を用いて実行され、各画素は、感光領域と、i=1~Nであり、Nは電荷ストレージウェルの数であり、N≦Mである複数の電荷ストレージウェルW[i]とを備える。これらの複数の電荷ストレージウェルは、検出期間T中に感光領域によって検出された電荷を蓄積するように構成される。
実施形態では、各画素について、検出時間窓TW[i]の各々に電荷ストレージウェルが関連付けられ、したがって、これらの実施形態では、電荷ストレージウェルの数Nは検出時間窓の数Mに等しい。
好ましい実施形態では、電荷ストレージウェルの数Nは、検出時間窓の数Mよりも少ない。したがって、これらの実施形態では、1つまたは複数の電荷ストレージウェルは、2つ以上の検出時間窓の電荷を蓄積している。これにより、電荷ストレージウェルの数を増やすことなく、より高い分割係数Nを使用することが可能になる。どの検出時間窓中に検出された電荷をどの電荷ストレージウェルが格納しているかを定義するための関係が確立される。検出時間窓と電荷ストレージウェルとの間のこのような関係を確立するために、電荷ストレージウェルの固有シーケンスを以下に概説するように定義する必要がある。
マルチウェル画素検出器を備える実施形態では、k=1~M-αであるα+1個の連続する時間窓TW[k]~TW[k+α]の各サブシーケンスは、複数の電荷ストレージウェルW[i]のα+1個の電荷ストレージウェルの固有シーケンスに関連付けられる。したがって、α+1個の電荷ストレージウェルのM-α個の固有シーケンスが定義される。電荷ストレージウェルのこれらの固有シーケンスは、反射レーザ光がαまたはα+1個の電荷ストレージウェルで検出されるとき、反射レーザ光が検出される対応する検出時間窓を識別することができ、物体距離が上記の式で決定されるように構成される。電荷ストレージウェルの固有シーケンスおよび検出時間窓との関連付けは、どの検出期間中にどの電荷ストレージウェルが電荷を格納するために使用されるかを定義する。
α+1個の電荷ストレージウェルの固有シーケンスは、どの最も早い検出時間窓およびどの最後の検出時間窓で反射レーザ光が検出されるかを明確に識別することを可能にするように構成された電荷ストレージウェルのシーケンスとして解釈されなければならない。
例えば、α=1の場合、電荷ストレージウェルのシーケンスα+1は対であり、次いで、例えばNが3に等しい場合、対1-2が、検出時間窓の対に関連付けられた電荷ストレージウェルの固有の対として定義される場合、対2-1は、さらなる固有の対ではない。実際、対1-2および2-1の両方が使用される場合、2つの対を区別することができないため、レーザ光が検出される対応する検出時間窓を決定することができない。一方、対3-1および/または対3-2は、さらなる固有の対として用いることができる。
同様に、α=2の場合、例えばシーケンス1-2-3は、3つの連続する検出時間窓のシーケンスに関連付けられた電荷ストレージウェルの固有シーケンスとして定義することができ、ウェル1およびウェル3は、例えば、それぞれ最も早い検出時間窓および最後の検出時間窓に対応するレーザ光を検出することができる。しかしながら、シーケンス3-2-1は、反射レーザ光がウェル1、2および3で検出される場合、反射レーザがどの検出期間に効果的に検出されるかを決定することができないため、さらなる固有シーケンスとして使用することができない。さらなる固有シーケンスは、例えば、第4のストレージウェル4を使用して構成することができ、組み合わせ4-2-3は、3つの電荷ストレージウェルのさらなる固有シーケンスを形成することができる。
例えばα=4であり、Nが5に等しい場合、シーケンス1-2-3-4-5は、反射レーザ光を検出するための5つの連続する検出時間窓のシーケンスに関連付けられた5ウェルの固有シーケンスとして選択することができる。このシーケンスでは、ウェル1およびウェル5において、例えば最も早い検出期間および最後の検出期間に対応する反射レーザ光を検出することができる。このシーケンス1-2-3-4-5が固有シーケンスとして使用される場合、シーケンス5-2-3-4-1も、シーケンス1-3-4-2-5も、シーケンス5-3-4-2-1も、シーケンス1-4-2-3-5も、シーケンス5-4-2-3-1も、シーケンス1-4-3-2-5も、シーケンス5-4-3-2-1も、さらなる固有シーケンスとして使用することはできない。実際、ウェルのシーケンスのそのようなさらなる組み合わせのいずれかが5つの連続する検出時間窓の別のシーケンスに関連付けられる場合、シーケンス1-2-3-4-5に対応する検出時間窓中に検出された反射レーザ光と区別することはできない。
図8では、N=15およびα=2であり、したがって検出時間窓の数Mが32に等しく、電荷ストレージウェルの数Nが5に等しい、すなわちMより少ない例が示されている。この例では、図8に示すように、電荷ストレージウェルTW[1]は、例えば、検出時間窓1、4、7、10、13、16および31中の電荷を統合するために動作可能である。
各画素が所与の数Nの電荷ストレージウェルを含むマルチウェル画素検出器が使用されるこれらの実施形態では、検出時間窓の数Mが、所与の数Nの電荷ストレージウェルで形成され得るα+1個の連続する時間窓の固有シーケンスの最大数に対応する最大値Mmax以下であるように、分割係数Nおよび検出時間窓の数M=α×(N+1)を定義するアルファ係数が選択される。
図9に示す例では、使用される電荷ストレージウェルの数Nが凡例に示されている。例B~Hの場合、使用される電荷ストレージウェルの数は、3~5の間で変化する。
電荷ストレージウェルの対、α=1
上述のように、係数αは1以上であり得る。まず、α=1のいくつかの実施形態について説明する。
N≧3である実施形態では、マルチウェル画素検出器N<Mの各画素について、検出時間窓の連続する時間窓の各対TW[k]およびTW[k+1]は、電荷ストレージウェルの固有の対W[m]およびW[n]に関連付けられる。例えば、図7には、N=10の例が示されており、したがって、検出時間窓の数は11に等しい。図7には、一方がN=11であり、他方がN=5である2つの例が示されている。N=5、したがってN<Mである実施形態の場合、連続する時間窓の各対は、電荷ストレージウェルの固有の対に関連付けられる。例えば、図7に示すように、連続する検出時間窓TW1およびTW2は、例えば、固有のウェル対W1およびW2に関連付けられ、連続する検出時間窓TW7およびTW8は、例えば、固有のウェル対W1およびW4に関連付けられ、連続する検出時間窓TW10およびTW11は、例えば、固有のウェル対W5およびW1に関連付けられる。上述のように、電荷ストレージウェルの固有の対では、例えば、ウェル対W1-W2は、ウェル対W2-W1と同じ対であることを理解されたい。
N≧3である実施形態では、マルチウェル画素検出器N<Mの各画素について、複数の電荷ストレージウェルのうちの少なくとも1つの電荷ストレージウェルは、検出時間窓の2つの異なる時間窓TW[k]およびTW[m]中に検出された電荷を蓄積および格納するように構成され、2つの異なる時間窓は2つの連続しない時間窓であり、|m-k|>1である。図7では、例えば、N=5の場合、電荷ストレージウェルW5は、検出時間窓TW5およびTW10の両方から電荷を蓄積および格納しており、例えば、電荷ストレージウェルW3は、検出時間窓TW3およびTW6中の電荷を蓄積および格納しており、例えば、電荷ストレージウェルW1は、検出時間窓TW1、TW7およびTW11中の電荷を蓄積および格納している。
α=1である本発明による方法の実施形態では、パルス幅PWを決定するステップを適用し、パルス幅減少係数Nを適用するとき、パルス幅減少係数Nは、電荷ストレージウェルの数が奇数である場合はNmax=N!/((N-2)!×2)でN≦Nmaxとなるように定義され、電荷ストレージウェルの数が偶数の場合はNmax=N!/((N-2)!×2)-((N!/((N-1)!×2))-1)となるように定義される。この最大数Nmaxは、所与の数の電荷ストレージウェルで形成することができる固有の対の最大数を定義する。上記の式で定義されたNのこの上限をとると、所与のウェル数に対して、時間検出窓の最大数MmaxはNmax+1に等しい。
α+1個の電荷ストレージウェルの固有シーケンス、α>1
αが1よりも大きい実施形態についてさらに論じる。1よりも大きい係数αを使用する利点は、所与の数Nの電荷ストレージウェルに対して、形成することができるα+1個の電荷ストレージウェルの固有シーケンスの数がより多く、したがって、同じ数の電荷ストレージウェルに対して、より短い検出時間窓を使用することができ、その結果、精度が改善することである。
例えば、α=2、すなわちTW[i]=PW/2の場合、反射レーザ光は最大3つの連続する時間窓で検出される。したがって、反射レーザ光を検出するための少なくとも3つの電荷ストレージウェルおよびバックグラウンドを測定するための第4の電荷ストレージウェルが必要である。一般に、α=2の場合、反射パルスは、時間窓TW[i]で部分的に観察され、時間窓TW[i+1]で完全に検出され、時間窓TW[i+2]で部分的に検出される。場合によっては、シーン内の物体の位置に応じて、反射レーザ光はまた、2つの連続する時間窓TW[i]およびTW[i+1]で検出され得る。
α=2および所与の数の電荷ストレージウェルNについて、3つの電荷ストレージウェルの固有シーケンスの最大数Cmaxを計算することができる。4~10であるNの場合、Cmaxはそれぞれ12、30、60、105、168、252および360に等しい。
より一般的には、任意の数のαについて、数Nの電荷ストレージウェルで形成することができるα+1個の電荷ストレージウェルの固有シーケンスの最大数Cmaxを計算することができる。
固有シーケンスの最大数Cmaxを計算し、電荷ストレージウェルの固有シーケンスを確立するための数学的アルゴリズムは、当技術分野で公知である。例えば、図8に示すように、例えば5つの電荷ストレージウェルを使用するときに3つの固有の電荷ストレージウェルのシーケンスを計算するために、電荷ウェルシーケンスが最も早い検出時間窓および最後の検出時間窓で検出されたレーザ光を明確に検出することを可能にしなければならない境界条件を考慮して、反復プログラムが使用される。図8に示すこの例では、α=2およびN=5で、形成することができる3つの電荷ストレージウェルの固有シーケンスの最大数Cmaxは30に等しい。したがって、この例では、使用可能な最大パルス分割係数Nmaxは15に等しい。
固有シーケンスの最大数Cmaxは、最大パルス幅減少係数Nmaxを規定し、α×Nmax=Cmaxである。したがって、画素あたりの電荷ストレージウェルの所与の数NでCMOSベースのマルチウェル画素検出器を使用する場合、パルス幅減少係数Nは、NがNmax以下になるように選択される。
比較的小さいαおよび比較的少数の電荷ストレージウェルNを選択する場合、固有シーケンスの最大数Cmaxは大きくなり得る。例えば、α=2およびN=4ではCmax=12であり、α=2およびN=6ではCmax=60である。α=3以上とし、N=7以上とすると、数百通りの固有な組み合わせを形成することができ、Cmaxは100より大きくなる。α=4以上、N=9以上とすると数千通りの固有な組み合わせを形成することができ、Cmaxは1000より大きくなる。
シーンまでの距離を決定するためのLIDAR装置
本発明の第2の態様によれば、シーンの1つまたは複数の物体までの距離を決定するためのLIDAR装置が提供される。LIDAR装置1の一実施形態が図10に概略的に示されている。
そのようなLIDAR装置1は、照明パターン150でシーン99を照明するように構成されたプロジェクタ100を備える。パターンは、複数の空間的に分離されたパルスレーザビームによって形成され、各パルスレーザビームは、パルスシーケンスを備える。複数のパルスレーザビームのパルスは、同時に放射される。上述したように、パルス列とも呼ばれるパルスシーケンスが図2に概略的に示されている。
好ましくは、レーザ光は半導体レーザによって生成される。実施形態では、レーザ光は、所望のパターンを生成するために垂直キャビティ面放射(VCSEL)レーザアレイを備える半導体光源によって生成される。システムが長距離および高レベルの周囲光(例えば、昼間)であっても最適に動作するために、本発明の実施形態で使用するためのVCSELは、好ましくは単位面積当たりのスポット当たりの最大光出力を放射するように構成される。より好ましくは、レーザは最小波長拡散を有するべきであり、特に低い波長の拡散は、モノモードレーザを用いて達成することができる。したがって、実質的に同一のパルスを、必要な空間および時間精度で再現可能に生成することができる。
プロジェクタは、半導体レーザに加えて、所定の視野内の光パターンでシーンを照明するように構成された投射レンズを備える。
実施形態では、レーザによって生成されるレーザ光の波長は、800nm~1600nmである。
LIDAR装置は、反射レーザ光のスポットを検出するように構成されたCMOSベースのマルチウェル画素検出器を備える受光装置300をさらに備える。マルチウェル画素検出器は複数の画素を備え、各画素は、レーザ光を検出するための感光領域を備える。上述したように、反射レーザ光のこれらのスポットは、シーンの1つまたは複数の物体によって反射された空間的に分離されたビームを表す。CMOSベースのマルチウェル画素検出器は、例えば国際公開第2017068199号に開示されている。
反射レーザ光は、参照番号350で図10に概略的に示されており、反射レーザ光のパルスを備える反射パターンを形成している。反射パターンは、複数のスポットとしてCMOSベースのマルチウェル画素検出器で観察される。そのようなスポットは、レーザパルスと検出器の検出面との交差部として解釈されなければならない。
Figure 2022551427000013
実施形態では、検出時間窓はパルス幅にほぼ等しい、すなわちi=1~Mである検出時間窓TW[i]のそれぞれについて、(|PW-TW[i]|/PW)≦0.10、好ましくは(|PW-TW[i]|/PW)≦0.05、より好ましくは(|PW-TW[i]|/PW)≦0.02である。
本発明によるCMOSベースのマルチウェル画素検出器は、反射レーザ光の検出されたスポットの各々について、検出時間窓TW[i]に関連付けられた露光値Qを取得するように構成され動作可能である。露光値は、検出されたレーザ光とレーザ光が検出された時間窓との間に相関が確立されるように、検出時間窓TW[i]で検出された反射レーザ光を表す電荷量を累積することによって得られる。電荷の蓄積は、パルスシーケンスの全てのパルスに対して実行される。
反射レーザ光の検出は、レーザパルスのシーケンスの放射と同期して実行されるべきである。したがって、LIDAR装置は、放射されるパルスシーケンスと同期して反射レーザ光を検出および蓄積するようにプロジェクタ100および受光装置300を制御するためのコントローラ200を備える。実施形態では、コントローラは、従来のクロック回路または発振器を備えることができる同期手段を備える。
実施形態では、コントローラ200は、第1の検出時間窓TW[1]がパルスのパルス放射時間窓と重なるか、または少なくとも部分的に重なるように同期を実行するように構成される。パルスの放射時間窓は、パルスが放射される時間窓として解釈されなければならず、したがって、この放射時間窓はパルス幅の幅を有する。パルスの放射時間窓と重なるまたは部分的に重なる第1の検出時間窓の例は、本発明による方法を論じる際に上述した。
他の実施形態では、コントローラ200は、第1の検出時間窓TW[1]がパルスの放射時間窓に対して遅延され、遅延が所定の遅延時間窓TDLに等しくなるように、パルスの放射と検出器との間の同期を実行するように構成される。
好ましくは、所定の遅延時間係数は2×Dmin/c以下であり、Dminは最小距離であり、これにより最小距離Dminまたはその近くに位置する物体を検出し、距離を決定することができる。
CMOSベースのマルチウェル画素検出器は、画素の2Dアレイとして解釈されなければならず、各画素は、レーザ光を検出するための個々の検出器を形成する。実際、各画素は、個々の感光領域と、少なくとも3つの電荷ストレージウェルとを含む。電荷ストレージウェルの数は、検出時間窓の数Mに依存する。
より一般的には、CMOSベースのマルチウェル画素検出器の各画素は、i=1~Nの複数の電荷ストレージウェルW[i]を含み、Nは電荷ストレージウェルの数であり、N≦Mである。
電荷ストレージウェルは、画素の感光領域に入るレーザ光に起因する電荷を蓄積するためのリザーバである。各ウェルは、レーザ光のパルスと同期し、かつ指定されたN+1個の検出時間窓と同期する外部信号によって制御される別個の転送ゲートを有する。このようにして、転送ゲートを制御することによって、所与の時間窓TW[i]内で画素の感光領域によって検出された反射レーザ光は、関連するウェルW[k]に格納される。
受光装置は、反射レーザ光をマルチ画素検出器に投射するためのレンズシステムをさらに備える。例えば、照明パターンの全てのパルスがシーンの物体によって反射される場合、パターンの画像は、マルチ画素検出器の感光領域が位置する受光装置の焦点面内で得られる。
本発明によるLIDAR装置は、反射レーザ光の検出されたスポットの各々について、連続する検出時間窓のどの検出時間窓で反射レーザ光が検出されたか、すなわち露光値が得られたかを識別するように構成された処理手段400を備える。反射レーザ光は、αまたはα+1個の連続する検出時間窓のいずれかで検出される。処理手段は、検出時間窓の識別に基づいて、および/または識別された検出時間窓で取得された最も早いおよび最後の露光値に基づいて、物体距離Dをさらに計算する。識別を実行するための上述の方法は、一般に、この識別を実行するためのコンピュータアルゴリズムとして実装される。識別アルゴリズムに加えて、さらなるコンピュータアルゴリズムを使用して、式および上述のようなこの計算を実行するための様々なオプションを使用して距離Dを計算する。実施形態では、処理手段400は、典型的には、プロセッサ、マイクロプロセッサ、またはコンピュータを備える。
マルチ画素検出器がシーンから反射されたレーザ光のスポットを検出すると、この反射レーザ光はマルチ画素検出器内の複数の画素で検出され、反射レーザ光の量を決定するために、一般に、複数の画素で検出された検出レーザ光で合計が実行されることに留意されたい。実施形態では、合計を実行するとき、画素に関連する重み係数が考慮される。空間的に分離されたスポットのパターンで照明が行われると、マルチ画素検出器上で検出された様々なスポットも空間的に分離され、これにより、検出された様々なスポット間の重なりはないか、またはほとんどない。
反射レーザ光の露光値を決定するとき、処理手段は、バックグラウンドを減算するように構成される。このバックグラウンドは、一般に、反射レーザ光が検出されない検出時間窓から得られる。
いくつかの実施形態では、レーザ光を検出した時間窓の決定は、データを読み出す前にCMOS検出器のレベルで実行される。これらの実施形態では、CMOSベースのマルチウェル画素検出器は、例えば、バックグラウンドカウントとレーザ光とを区別するように構成された比較器を備える。
画素検出器内の各画素のウェルW[k]の数Nと、時間窓TW[i]の数Mとは、必ずしも等しくない。好ましい実施形態では、N<Mであり、したがってこれらの実施形態では、時間窓よりもストレージウェルが少ないので、複数の電荷ストレージウェルのうちの少なくとも1つの電荷ストレージウェルは、検出時間窓TW[i]の2つの異なる時間窓中に検出された電荷を格納するように構成される。上述したように、これら2つの異なる時間窓は、2つの連続しない時間窓である。
M≧4およびα=1である実施形態では、マルチウェル画素検出器N<Mの各画素について、2つの連続する検出時間窓の各対は、電荷ストレージウェルの固有の対に関連付けられる。
より一般的には、α≧1の場合、k=1~M-αであるα+1個の連続する時間窓TW[k]~TW[k+α]の各サブシーケンスは、反射レーザ光が検出される検出時間窓が明確に識別可能であるように、複数の電荷ストレージウェルW[i]のα+1個の電荷ストレージウェルの固有のシーケンスに関連付けられる。電荷ストレージウェルの固有シーケンスの定義は、上記で議論されている。
α=1の場合、所与の数Nの電荷ストレージウェルに対して、作られ得る固有の対の組み合わせの数Pは、順列Pの数として表すことができ、P=N!/((N-2)!×2)と計算することができる。
記号「!」は順列記号である。例えば、3つのウェルを用いて、3つの固有の対の組み合わせ、すなわち1-2、1-3および2-3を形成することができる。例えば4つのウェルでは、6つの固有の組み合わせ、すなわち1-2、1-3、1-4、2-3、2-4および3-4を形成することができる。5つのウェルでは、10個の固有の組み合わせを形成することができ、したがって、例えば11個の検出時間窓を使用する場合、5つのウェルのみが必要である。図7では、パルス幅減少係数Nが10に等しく、したがって本発明による11個の検出時間窓が提供される例が示されている。図4の上部には、各検出時間窓がその適切なウェルを有し、したがって各画素が11個のウェルを必要とする例が示されている。図7の下部では、5つのウェルのみを使用して、11個の検出時間窓について10個の固有の対の組み合わせを形成する。有利には、固有のウェル対の形成により、必要なウェルの数が大幅に減り、CMOSベースのマルチウェル画素検出器の複雑さが減る。
α=1および所与の数Nのストレージウェルについて、上述したようにパルス幅を減らすために適用することができる最大パルス幅減少係数Nmaxを計算することもできる。ウェルの数が奇数である場合、以下の式Nmax=N!/((N-2)!×2)を適用して、所与のウェル数で適用できる最大減少係数を計算することができる。
例えば、ウェルの数が5である場合、Nmax=10である。これはまた、所与の数のウェルに使用することができる検出時間窓の最大数MmaxがMmax=1+N!/((N-2)!×2)と表すことができることを意味する。
α=1でウェル数Nが偶数の場合、最大パルス幅減少係数Nmaxを計算する式は異なり、Nmax=N!/((N-2)!×2)-((N!/((N-1)!×2))-1)と表すことができる。
例えば、ウェルの数が4である場合、Nmax=5である。同様に、ウェルの数が偶数である場合の検出時間窓の最大数Mmaxは、Mmax=1+N!/((N-2)!×2)-((N!/((N-1)!×2))-1)と表すことができる。
実施形態では、5≦M≦6およびN=4である。他の実施形態では、7≦M≦11およびN=5である。さらなる実施形態では、M=4およびN=3である。
より一般的には、α>1の場合、反射レーザ光が検出された検出時間窓を明確に識別することができるように使用することができる電荷ストレージウェルの固有シーケンスの最大数Cmaxを定義するために既知の数学的アルゴリズムを使用することができる。
好ましい実施形態では、本発明によるLIDAR装置は、パルス幅PWが検出時間窓の数Mに関係するように構成され、この関係は以下のように表すことができる。
PW==(TOFmax-TDL)/((M-α)/α)、TOFmax=(2×Dmax/c)であり、TOFmaxは最大飛行時間TOFmaxであり、Dmaxは最大飛行時間に関連付けられた最大距離であり、cは光の速さであり、TDLは上述した所定の遅延時間窓であり、0≦TDL≦(0.6×TOFmax)、好ましくは0≦TDL≦(0.4×TOFmax)、より好ましくは0≦TDL≦(0.2×TOFmax)である。
上述したように、Dmaxは、LIDAR装置の動作範囲、一般に最大動作範囲と解釈されるべきである。実施形態では、本発明によるLIDAR装置のこの最大動作範囲Dmaxは、例えば、30メートル≦Dmax≦1000メートルの範囲内である。
上記の定義に従うパルス幅PWは、典型的には、ナノ秒~マイクロ秒の範囲と予想される。例えば、100メートル~300メートルの最大範囲を仮定すると、レーザ光の対応する飛行時間は、往復で、それぞれ666ナノ秒~2マイクロ秒であり、したがって、定義されたパルス幅減少係数N、または同等の時間検出窓の数に応じて、また、LIDAR装置の必要な最大動作距離Dmaxに応じて、パルス長PWは、33ナノ秒~1マイクロ秒の範囲内と予想される。減少係数を有するパルスは、一般に20以下である。
実施形態では、LIDAR装置のプロジェクタは、F≦1/((M/α)×PW+TDL)となるようなパルス周波数Fでパルスレーザビームを供給するように構成される。
本発明によるLIDAR装置は、車両への一体化に適している。車両に一体化されたLIDAR装置は、車両を取り囲む領域の少なくとも一部を動作可能にカバーするに構成される。領域の少なくとも一部は、距離決定を必要とするシーンに対応している。カバーされる領域は、LIDAR装置の視野(FOV)に依存し、実施形態では、FOVは、例えば30°×10°または120°×30°または任意の他の適切な視野である。

Claims (17)

  1. パルスレーザ光でシーンを照明し、レーザ光の飛行時間に関連して反射レーザ光を検出することによって、前記シーン内の1つまたは複数の物体までの距離を決定するための方法であって、前記1つまたは複数の物体は、最小距離(Dmin)と最大距離(Dmax)との間の距離範囲内に位置し、0≦Dmin≦0.6×Dmax、好ましくは0≦Dmin≦0.4×Dmax、より好ましくは0≦Dmin≦0.2×Dmaxであり、DminおよびDmaxはそれぞれ前記最小距離および前記最大距離であり、前記方法は、
    A)PW=(TOFmax-TDL)/N、TOFmax=2×Dmax/cとなるように、前記最大距離(Dmax)に関連付けられた最大飛行時間(TOFmax)よりも小さい前記パルスレーザ光のパルス幅(PW)を決定するステップであって、
    PWは前記パルス幅であり、Dmaxは前記最大距離であり、cは光の速さであり、TOFmaxは前記最大飛行時間であり、TDLは0≦TDL≦2×Dmin/cである所定の遅延時間窓であり、Nはパルス幅減少係数である、ステップと、
    B)F≦1/((N+1)×PW+TDL)となるように前記パルスレーザ光のパルス周波数(F)を決定するステップであって、Fは前記パルス周波数であり、F=1/Pであり、Pはパルス周期(P)である、ステップと、
    C)前記パルスレーザ光の前記パルス周期(P)内の反射レーザ光を検出するための検出期間(T)を、T=(N+1)×PW、Tは前記検出期間、で決定し、
    i=1~Mであり、Mは検出時間窓の数である、いくつかの連続する検出時間窓TW[i]に前記検出期間(T)を分割するステップであって、
    Figure 2022551427000014

    αは、パルス幅当たりの検出時間窓の数を表す整数であり、α≧1、好ましくはα≦10、より好ましくはα≦5であり、αおよびNは、α×N≧2、好ましくはα×N≧3、より好ましくはα×N≧4となるように選択される、ステップと、
    D)複数の空間的に分離されたパルスレーザビームによって形成されたスポットパターンで前記シーンを照明するステップであって、各パルスレーザビームは、ステップA)で決定された前記パルス幅(PW)を有し、かつステップB)で決定された前記パルス周波数(F)を有するパルスシーケンス(50)を備え、前記複数のパルスレーザビームの各々の前記パルス(12)は同時に放射される、ステップと、
    E)ステップD)で定義されたように前記シーンを照明するときにパルスの各同時放射に続いて、ステップC)で定義された前記検出期間(T)の前記連続する検出時間窓TW[i]中に反射レーザ光のスポットを検出するステップであって、前記スポットは、前記シーン内の前記1つまたは複数の物体によって反射された前記空間的に分離されたパルスレーザビームを表しており、
    前記パルスレーザビームの前記パルスの前記放射と同期して反射レーザ光のスポットの前記検出を実行するパルスの各同時放射について、
    a)前記遅延時間窓(TDL)が0である場合には、前記第1の検出時間窓TW[1]が前記パルスの放射時間窓と重なるか、または少なくとも部分的に重なるように前記同期を実行し、
    b)前記遅延時間窓(TDL)が0でない場合には、前記第1の検出時間窓TW[1]が前記パルスの放射時間窓に対して前記遅延時間窓(TDL)に等しい遅延で遅延されるように前記同期を実行する、ステップと、
    F)反射レーザ光の前記検出されたスポットの各々について、前記検出時間窓TW[i]で検出された反射レーザ光の量を累積することによって、前記検出時間窓TW[i]に関連付けられた露光値(Q)を取得するステップであって、前記累積は前記パルスシーケンスの全てのパルスについて実行される、ステップと、
    G)反射レーザ光の前記検出されたスポットの各々について、
    i)前記連続する検出時間窓TW[i]のどの検出時間窓で反射レーザ光を表す前記露光値(Q)が得られるかを識別するステップと、
    ii)前記識別された検出時間窓に基づいて物体距離(D)を計算するステップであって、前記計算された物体距離(D)は、反射レーザ光の前記スポットを検出する検出器と、前記反射レーザ光を検出させた前記シーン内の物体または前記シーン内の物体の一部との間の距離に対応する、ステップと
    を含む、方法。
  2. ≦1/((N+1)×PW+TDL+(q×PW))であり、q≧1であり、q×PWは、前記最大距離(Dmax)よりも大きい距離に位置する前記シーン内の物体からの反射から生じる誤った反射の検出が低減されるように定義された遅延タイムスロットを形成し、および/またはq×PWは、眼の安全のためにレーザ光の平均放射出力を低減するように定義された遅延タイムスロットを形成している、請求項1に記載の方法。
  3. ステップD)~G)が複数回繰り返され、前記反射スポットの各々について、ステップG)で得られた前記物体距離(D)の平均をとることによって平均物体距離が得られる、先行する請求項のいずれか1項に記載の方法。
  4. ステップG)ii)は、さらに、
    ・反射レーザ光がα+1個の連続する検出時間窓で検出される場合、
    Z=(R+z)/(α×N)およびz=Q/(Q+Q)である式
    =TDL×c/2+Z×(TOFmax-TDL)×c/2を使用して前記物体距離(D)を計算し、
    は前記物体距離であり、Qは、反射レーザ光が識別された前記連続する検出時間窓の最も早い検出時間窓TW[a]について得られた前記露光値であり、Qは反射レーザ光が識別された前記連続する検出時間窓の最後の検出時間窓TW[b]について得られた露光値であり、Rは前記最も早い検出時間窓TW[a]に先行する検出時間窓の数をカウントする整数であること、または
    ・反射レーザ光がα個の連続する検出時間窓で検出される場合、式
    =TDL×c/2+(R/(α×N))×(TOFmax-TDL)×c/2を使用して前記物体距離(D)を計算し、Rは、反射レーザ光が識別された最も早い検出時間窓に先行する検出時間窓の数をカウントする整数であること、をさらに含む、先行する請求項のいずれか1項に記載の方法。
  5. 前記露光値QおよびQはバックグラウンド補正後に取得され、前記バックグラウンド補正は、前記連続する検出時間窓のうちの少なくとも1つの検出時間窓で検出されたバックグラウンド値の量に基づき、前記少なくとも1つの検出時間窓は、反射レーザ光が検出された前記識別された検出時間窓とは異なる、請求項4に記載の方法。
  6. 反射レーザ光の前記検出は、複数の画素を有するマルチウェル画素検出器を備えるレーザ受光装置を用いて実行され、各画素は、感光領域と、i=1~Nであり、Nは電荷ストレージウェルの数であり、N≦Mである複数の電荷ストレージウェルW[i]とを含み、前記複数の電荷ストレージウェルは、前記検出期間(T)中に前記感光領域によって検出された電荷を格納するように構成される、先行する請求項のいずれか1項に記載の方法。
  7. <M、M≧4であり、k=1~M-αであるα+1個の連続する検出時間窓TW[k]~TW[k+α]の各サブシーケンスは、反射レーザ光が検出される前記検出時間窓が明確に識別可能であるように、前記複数の電荷ストレージウェルW[i]のα+1個の電荷ストレージウェルの固有のシーケンスに関連付けられる、請求項6に記載の方法。
  8. 前記パルス幅減少係数(N)は最大パルス幅減少係数(Nmax)以下であり、α×Nmax=Cmaxであり、Nmaxは前記最大パルス幅減少係数であり、CmaxはN個の電荷ストレージウェルで形成することができるα+1個の電荷ストレージウェルの固有シーケンスの最大数である、請求項7に記載の方法。
  9. α≧2である、先行する請求項のいずれか1項に記載の方法。
  10. シーン(99)の1つまたは複数の物体までの距離を決定するためのLIDAR装置(1)であって、
    ・複数の空間的に分離されたパルスレーザビームによって形成されたスポットパターンで前記シーンを照明するように構成されたプロジェクタ(100)であって、各パルスレーザビームはパルス幅(PW)を有するパルスシーケンス(11)を含み、前記複数のパルスレーザビームの各々の前記パルス(12)は同時に放射される、プロジェクタ(100)と、
    ・前記シーンの前記1つまたは複数の物体によって反射された前記スポットパターンを表す反射レーザ光のスポットを検出するように構成されたCMOSベースのマルチウェル画素検出器を備える受光装置(300)と、
    ・前記パルスレーザビームの前記パルスの前記同時放射と同期して前記反射レーザ光を検出して蓄積するように前記プロジェクタ(100)および前記受光装置(300)を制御するためのコントローラ(200)と、を備え、
    前記CMOSベースのマルチウェル画素検出器は、
    i)前記パルスレーザビームのパルス周期(P)内の
    検出期間(T)中に反射レーザ光を検出することであって、
    前記検出期間(T)は、いくつかの連続する検出時間窓TW[i]に分割され、i=1~Mであり、Mは検出時間窓の数であり、M≧3、好ましくはM≧4、より好ましくはM≧5であり、
    Figure 2022551427000015

    は前記検出期間であり、PWは前記パルス幅であり、αはα≧1、好ましくはα≦10、より好ましくはα≦5である整数である、検出することと、
    ii)反射レーザ光の前記検出されたスポットの各々について、前記検出時間窓TW[i]で検出された反射レーザ光を表す電荷の量を蓄積することによって前記検出時間窓TW[i]に関連付けられた露光値(Q)を取得することであって、前記蓄積は前記パルスシーケンスの全てのパルスについて実行される、取得することと、を構成することを特徴とし、
    前記コントローラ(200)は、
    i)前記第1の検出時間窓TW[1]が前記パルスの放射時間窓と重なるか、または少なくとも部分的に重なるように、あるいは、
    ii)前記第1の検出時間窓TW[1]が前記パルスの放射時間窓に対して遅延され、前記遅延が所定の遅延時間窓(TDL)に等しいように、前記同期を実行するように構成されることを特徴とし、
    前記LIDAR装置は、反射レーザ光の前記検出されたスポットの各々について、
    i)前記連続する検出時間窓TW[i]のどの検出時間窓で反射レーザ光を表す前記露光値(Q)が得られるかを識別することと、
    ii)前記識別された検出時間窓に基づいて物体距離(DS)を計算することと、を構成する処理手段(400)を備えることを特徴とする、
    LIDAR装置(1)。
  11. 前記CMOSベースのマルチウェル画素検出器は、複数の画素を備え、各画素は、感光性検出領域と、i=1~Nであり、Nは電荷ストレージウェルの数であり、N≦Mである複数の電荷ストレージウェルW[i]とを含み、前記複数の電荷ストレージウェルは、前記検出期間(T)中に前記感光領域によって検出された電荷を格納するように構成される、請求項10に記載のLIDAR装置。
  12. <M、M≧4であり、k=1~M-αであるα+1個の連続する検出時間窓TW[k]~TW[k+α]の各サブシーケンスは、反射レーザ光が検出される前記検出時間窓が明確に識別可能であるように、前記複数の電荷ストレージウェルW[i]のα+1個の電荷ストレージウェルの固有のシーケンスに関連付けられる、請求項11に記載のLIDAR装置。
  13. α=1であり、前記検出時間窓の数(M)は、
    電荷ストレージウェルの数が奇数である場合はM≦1+N!/((N-2)!×2)、または
    電荷ストレージウェルの数が偶数の場合はM≦1+N!/((N-2)!×2)-((N!/((N-1)!×2))-1)となるように定義される、請求項11または12に記載のLIDAR装置。
  14. α≧2である、請求項10から12のいずれか1項に記載のLIDAR装置。
  15. PW=(TOFmax-TDL)/((M-α)/α)であり、TOFmax=2×Dmax/cであり、TOFmaxは最大飛行時間(TOFmax)であり、Dmaxは前記最大飛行時間に関連付けられた最大距離であり、前記最大距離(Dmax)は前記LIDAR装置の動作範囲であり、cは光の速さであり、TDLは前記所定の遅延時間窓であり、0≦TDL≦0.6×TOFmax、好ましくは0≦TDL≦0.4×TOFmax、より好ましくは0≦TDL≦0.2×TOFmaxである、
    請求項10から14のいずれか1項に記載のLIDAR装置。
  16. 前記プロジェクタ(100)は、F≦1/((M/α)×PW+TDL)となるようなパルス周波数(F)で前記パルスレーザビームを生成するように動作可能であり、Fは前記パルス周波数である、請求項10から15のいずれか1項に記載のLIDAR装置。
  17. 請求項10から16のいずれか1項に記載のLIDAR装置を備える車両であって、前記LIDAR装置は、前記車両を取り囲む領域の少なくとも一部を動作可能にカバーするように配置され、領域の前記少なくとも一部は前記シーン(99)に対応する、車両。
JP2022519050A 2019-09-25 2020-09-23 シーンまでの距離を決定するための方法および装置 Pending JP2022551427A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP19199701.4A EP3798673A1 (en) 2019-09-25 2019-09-25 Method and device for determining distances to a scene
EP19199701.4 2019-09-25
PCT/EP2020/076455 WO2021058494A1 (en) 2019-09-25 2020-09-23 Method and device for determining distances to a scene

Publications (2)

Publication Number Publication Date
JP2022551427A true JP2022551427A (ja) 2022-12-09
JPWO2021058494A5 JPWO2021058494A5 (ja) 2023-08-29

Family

ID=68069619

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022519050A Pending JP2022551427A (ja) 2019-09-25 2020-09-23 シーンまでの距離を決定するための方法および装置

Country Status (6)

Country Link
US (1) US20220326358A1 (ja)
EP (2) EP3798673A1 (ja)
JP (1) JP2022551427A (ja)
KR (1) KR20220082849A (ja)
CN (1) CN114730009A (ja)
WO (1) WO2021058494A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023104438A1 (en) * 2021-12-09 2023-06-15 Sony Semiconductor Solutions Corporation Electronic device and method

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016189808A1 (ja) * 2015-05-28 2016-12-01 パナソニックIpマネジメント株式会社 測距撮像装置、その測距方法及び固体撮像装置
CN107533136B (zh) * 2015-06-24 2020-08-25 株式会社村田制作所 距离传感器
WO2017022152A1 (ja) * 2015-07-31 2017-02-09 パナソニックIpマネジメント株式会社 測距撮像装置、及び、固体撮像装置
EP3159711A1 (en) 2015-10-23 2017-04-26 Xenomatix NV System and method for determining a distance to an object
US10768301B2 (en) * 2017-12-15 2020-09-08 Xenomatix Nv System and method for determining a distance to an object

Also Published As

Publication number Publication date
KR20220082849A (ko) 2022-06-17
WO2021058494A1 (en) 2021-04-01
CN114730009A (zh) 2022-07-08
US20220326358A1 (en) 2022-10-13
EP3798673A1 (en) 2021-03-31
EP4034910A1 (en) 2022-08-03

Similar Documents

Publication Publication Date Title
US7554652B1 (en) Light-integrating rangefinding device and method
EP3789792B1 (en) Method for subtracting background light from an exposure value of a pixel in an imaging array, and pixel for use in same
CN111108407B (zh) 半导体主体和用于飞行时间测量的方法
CN109791207B (zh) 用于确定到对象的距离的系统和方法
US7800739B2 (en) Distance measuring method and distance measuring element for detecting the spatial dimension of a target
EP3159711A1 (en) System and method for determining a distance to an object
CN113227839A (zh) 具有结构光照明器的飞行时间传感器
CA2716980C (en) Light-integrating rangefinding device and method
CN110596725A (zh) 基于插值的飞行时间测量方法及测量系统
CN112731425B (zh) 一种处理直方图的方法、距离测量系统及距离测量设备
JP2004538491A (ja) 三次元距離画像を記録するための方法及び装置
KR20190098242A (ko) 차량 주변 환경을 특성화하기 위한 시스템
EP3227721B1 (en) Distance measuring device and method for determining a distance
JP2022551427A (ja) シーンまでの距離を決定するための方法および装置
EP3709052A1 (en) Object detector
US20230194666A1 (en) Object Reflectivity Estimation in a LIDAR System
US20220364849A1 (en) Multi-sensor depth mapping
US20210014401A1 (en) Three-dimensional distance measuring method and device
CN113820724A (zh) 一种执行飞行时间的离轴测量系统及方法
CN113009498A (zh) 一种距离测量方法、装置及系统
US20230273316A1 (en) Imaging apparatus and method
CN216211121U (zh) 深度信息测量装置以及电子设备
CN112534303B (zh) 混合飞行时间和成像器模块
EP3069167B1 (en) Method for illuminating an object and for determining a distance
CN114236505A (zh) 一种基于DToF的测量系统及方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230821

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230821

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240411

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240507