JP7046420B2 - 調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 - Google Patents
調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 Download PDFInfo
- Publication number
- JP7046420B2 JP7046420B2 JP2020524202A JP2020524202A JP7046420B2 JP 7046420 B2 JP7046420 B2 JP 7046420B2 JP 2020524202 A JP2020524202 A JP 2020524202A JP 2020524202 A JP2020524202 A JP 2020524202A JP 7046420 B2 JP7046420 B2 JP 7046420B2
- Authority
- JP
- Japan
- Prior art keywords
- light emitting
- light
- emitting devices
- devices
- environment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 51
- 230000003287 optical effect Effects 0.000 claims description 33
- 239000000758 substrate Substances 0.000 claims description 28
- 230000005540 biological transmission Effects 0.000 claims description 25
- 238000001514 detection method Methods 0.000 claims description 25
- 230000015654 memory Effects 0.000 claims description 19
- 230000007257 malfunction Effects 0.000 claims description 11
- 238000012423 maintenance Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 5
- 230000005469 synchrotron radiation Effects 0.000 description 28
- 238000004891 communication Methods 0.000 description 14
- 239000000463 material Substances 0.000 description 14
- 230000006870 function Effects 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 238000003491 array Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 239000002184 metal Substances 0.000 description 4
- 229910052751 metal Inorganic materials 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 239000011248 coating agent Substances 0.000 description 3
- 238000000576 coating method Methods 0.000 description 3
- 239000011261 inert gas Substances 0.000 description 3
- 230000001052 transient effect Effects 0.000 description 3
- IJGRMHOSHXDMSA-UHFFFAOYSA-N Atomic nitrogen Chemical compound N#N IJGRMHOSHXDMSA-UHFFFAOYSA-N 0.000 description 2
- PXHVJJICTQNCMI-UHFFFAOYSA-N Nickel Chemical compound [Ni] PXHVJJICTQNCMI-UHFFFAOYSA-N 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 229920000642 polymer Polymers 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000005670 electromagnetic radiation Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000006262 metallic foam Substances 0.000 description 1
- VNWKTOKETHGBQD-UHFFFAOYSA-N methane Chemical compound C VNWKTOKETHGBQD-UHFFFAOYSA-N 0.000 description 1
- 229910052759 nickel Inorganic materials 0.000 description 1
- 229910052757 nitrogen Inorganic materials 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
- G01S3/78—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using electromagnetic waves other than radio waves
- G01S3/782—Systems for determining direction or deviation from predetermined direction
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/86—Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
- G01S7/4815—Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4817—Constructional features, e.g. arrangements of optical elements relating to scanning
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/443—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
- G06V10/449—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters
- G06V10/451—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters with interaction between the filter responses, e.g. cortical complex cells
- G06V10/454—Integrating the filters into a hierarchical structure, e.g. convolutional neural networks [CNN]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electromagnetism (AREA)
- Biomedical Technology (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biodiversity & Conservation Biology (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Computation (AREA)
- Theoretical Computer Science (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Optics & Photonics (AREA)
- Aviation & Aerospace Engineering (AREA)
- Automation & Control Theory (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Measurement Of Optical Distance (AREA)
Description
本出願は、2017年12月12日に出願された米国特許出願第15/839,677号の利益を主張し、その内容は参照により本明細書に組み込まれる。
光検出測距(LIDAR)システムは、複数の発光体および検出器(例えば、256個以上のエミッタ/検出器ペア)を含み得る。複数の発光体および検出器の配設、ならびにLIDARシステム自体のポーズ(例えば、LIDARシステムの回転角)は、環境内の対象についての情報を提供することができる。いくつかの実施形態では、LIDARシステムは、自動運転車、ロボット、または自動飛行航空機などの半自律型または完全自律型車両に情報を提供することができる。
図1Aは、例示的な実施形態による、感知システム10を例証する。感知システム10は、光検出測距(LIDAR)システムであり得る。LIDARシステムは、所与の環境内の1つ以上の対象(例えば、場所、形状など)についての情報(例えば、点群データ)を提供するように構成されてもよい。例示的な実施形態では、LIDARシステムは、点群情報、対象情報、地図情報、または他の情報を車両に提供することができる。車両は、半自動または完全自動車両であり得る。例えば、車両は、自動運転車、自律型ドローン、自律型トラック、または自律型ロボットであり得る。本明細書では、他のタイプの車両およびLIDARシステムが想定されている。
図5は、例示的な実施形態による方法500を例証する。方法500は、図1A、1B、2および4を参照して例証および記載したように、感知システム10、システム100、車両200、システム400、またはコントローラ150によって全体的にまたは部分的に実施することができる。方法500は、図1A、1B、2および4を参照して例証および記載されたものと同様または同一の要素を含むことができる。方法500は、本明細書に明示的に開示されたものよりも少ないまたは多いステップまたはブロックを含み得ることを理解されたい。さらに、方法500のそれぞれのステップまたはブロックは、任意の順序で実行されてもよく、各ステップまたはブロックは、1回以上行なわれてもよい。
Claims (23)
- 第1の空間光パターンに従ってパルスを放射する第1のセットの発光デバイスと、
第2の空間光パターンに従って光パルスを放射する第2のセットの発光デバイスであって、前記第1の空間光パターンが、前記第2の空間光パターンの空間分解能と異なる空間分解能を含む、第2のセットの発光デバイスと、
前記第1の空間光パターンに従って放射された光パルスの少なくとも一部を検出して、それにより第1の反射光データを提供するように構成された第1のセットの光検出デバイスと、
前記第2の空間光パターンに従って放射された光パルスの少なくとも一部を検出して、それにより第2の反射光データを提供するように構成された第2のセットの光検出デバイスと、
前記第1の反射光データおよび前記第2の反射光データに基づいて点群データを形成するように動作可能なコントローラと、を含む、システム。 - 回転軸の周り回転するように構成されたハウジングと、
前記第1のセットの発光デバイスおよび前記第2のセットの発光デバイスを含む送信アセンブリであって、前記発光デバイスが、光パルスを放射するように動作可能であり、前記光パルスの一部は、前記システムの環境と相互作用して、反射光パルスを提供する、送信アセンブリと、
前記第1のセットの光検出デバイスおよび前記第2のセットの光検出デバイスを含む受信アセンブリであって、前記光検出デバイスが、前記反射光パルスを検出するように動作可能であり、前記送信アセンブリおよび前記受信アセンブリが、前記ハウジングに結合され、前記コントローラは、少なくとも1つのプロセッサおよびメモリを含み、前記少なくとも1つのプロセッサが、前記メモリに格納されたプログラム命令を実行して、
第1の期間中に、前記第1のセットの発光デバイスに、前記第1の空間光パターンに従って前記環境へ光パルスを放射させることと、
第2の期間中に、前記第2のセットの発光デバイスに、前記第2の空間光パターンに従って前記環境へ光パルスを放射させることと、を含む動作を実施する、受信アセンブリと、をさらに含む、請求項1に記載のシステム。 - 前記第1のセットの発光デバイスと前記第2のセットの発光デバイスとの組み合わせが、少なくとも256個の発光デバイスを含み、前記第1のセットの光検出デバイスと前記第2のセットの光検出デバイスとの組み合わせが、少なくとも256個の光検出デバイスを含む、請求項2に記載のシステム。
- 前記第1のセットの発光デバイスが、前記第2のセットの発光デバイスよりも少ない発光デバイスを含み、前記第1のセットの発光デバイスに光パルスを前記環境へ放射させることが、粗いスキャンを含み、前記第2のセットの発光デバイスに光パルスを前記環境へ放射させることが、細かいスキャンを含む、請求項2に記載のシステム。
- 前記動作が、
複数の粗いスキャンの間に少なくとも1つの細かいスキャンをはさむこと、または
細かいスキャンと粗いスキャンを交互に行うことのうちの少なくとも1つを含む、請求項4に記載のシステム。 - 前記動作が、
前記環境内の関心領域を判定することと、
前記関心領域の判定に応じて、所望の空間光パターンを判定することと、
前記第1のセットの発光デバイスまたは前記第2のセットの発光デバイスのうちの少なくとも1つに、前記所望の空間光パターンに従って前記環境内の前記関心領域に光パルスを放射させることと、さらに含む、請求項2に記載のシステム。 - 前記動作が、
前記第1の期間中に、前記発光デバイスおよび光検出デバイスを第1の動作周波数で動作させることと、
前記第2の期間中に、前記発光デバイスおよび光検出デバイスを第2の動作周波数で動作させることと、をさらに含み、前記第2の動作周波数が、前記第1の動作周波数よりも高い、請求項2に記載のシステム。 - 第1の期間中に、複数の発光デバイスのうちの第1のセットの発光デバイスに、第1の空間光パターンに従って環境へ光パルスを放射させることと、
複数の光検出デバイスの第1のセットの光検出デバイスを用いて、前記第1の空間光パターンに従って前記環境へ放射された前記光パルスの少なくとも一部を検出することによって第1の反射光データを取得することと、
第2の期間中に、前記複数の発光デバイスのうちの第2のセットの発光デバイスに、第2の空間光パターンに従って前記環境へ光パルスを放射させることであって、前記第1の空間光パターンが、前記第2の空間光パターンの空間分解能と異なる空間分解能を含むことと、
前記複数の光検出デバイスの第2のセットの光検出デバイスを用いて、前記第2の空間光パターンに従って前記環境へ放射された前記光パルスの少なくとも一部を検出することによって第2の反射光データを取得することと、
前記第1の反射光データおよび前記第2の反射光データに基づいて点群データを形成することと、を含む、方法。 - 前記複数の発光デバイスが、少なくとも256個の発光デバイスを含み、前記複数の光検出デバイスが、少なくとも256個の光検出デバイスを含む、請求項8に記載の方法。
- 前記第1のセットの発光デバイスが、前記第2のセットの発光デバイスよりも少ない、前記複数の発光デバイスの発光デバイスを有し、前記第1のセットの発光デバイスに光パルスを前記環境へ放射させることが、粗いスキャンを含み、前記第2のセットの発光デバイスに光パルスを前記環境へ放射させることが、細かいスキャンを含む、請求項8に記載の方法。
- 複数の粗いスキャンの間に少なくとも1つの細かいスキャンをはさむこと、または
細かいスキャンと粗いスキャンを交互に行うことのうちの少なくとも1つをさらに含む、請求項10に記載の方法。 - 前記環境内の関心領域を判定することと、
前記関心領域の判定に応じて、所望の空間光パターンを判定することと、
前記複数の発光デバイスの少なくとも一部に、前記判定された所望の空間光パターンに従って前記環境内の前記関心領域へ光パルスを放射させることと、さらに含む、請求項8に記載の方法。 - 前記第1の期間中に、前記発光デバイスおよび光検出デバイスを第1の動作周波数で動作させることと、
前記第2の期間中に、前記発光デバイスおよび光検出デバイスを第2の動作周波数で動作させることと、をさらに含み、前記第1の動作周波数が、前記第2の動作周波数よりも低い、請求項8に記載の方法。 - システムであって、
回転軸の周りを回転するように構成されたハウジングと、
送信アセンブリであって、前記送信アセンブリが、
第1のセットの発光デバイスおよび第2のセットの発光デバイスであって、前記発光デバイスが、光パルスを放射するように動作可能であり、前記光パルスの一部は、前記システムの環境と相互作用して、反射光パルスを提供する、第1のセットの発光デバイスおよび第2のセットの発光デバイスを含む、送信アセンブリと、
受信アセンブリであって、前記受信アセンブリが、
第1のセットの光検出デバイスおよび第2のセットの光検出デバイスであって、前記光検出デバイスが、前記反射光パルスを検出するように動作可能であり、前記送信アセンブリおよび前記受信アセンブリが、前記ハウジングに結合されている、第1のセットの光検出デバイスおよび第2のセットの光検出デバイスを含む、受信アセンブリと、
少なくとも前記第1のセットの発光デバイスおよび前記第1のセットの光検出デバイスに電力を提供するように構成された第1の電源と、
少なくとも前記第2のセットの発光デバイスおよび前記第2のセットの光検出デバイスに電力を提供するように構成された第2の電源と、
少なくとも1つのプロセッサおよびメモリを含むコントローラとを含み、
前記少なくとも1つのプロセッサが、前記メモリに格納されたプログラム命令を実行して動作を実施し、前記動作が、
第1の動作モードに従って前記システムを動作させることであって、前記第1の動作モードが、
前記第1のセットの発光デバイスおよび前記第2のセットの発光デバイスに前記環境へ光パルスを放射させることと、
前記環境へ放射された前記光パルスの少なくとも一部を検出することによって、前記第1のセットの光検出デバイスおよび前記第2のセットの光検出デバイスに、それぞれの第1および第2の反射光データを取得させることと、
前記第1の反射光データおよび前記第2の反射光データに基づいて点群データを形成することと、
前記第1のセットの発光デバイス、前記第2のセットの発光デバイス、前記第1のセットの光検出デバイス、前記第2のセットの光検出デバイス、前記第1の電源、または前記第2の電源のうちの少なくとも1つの誤動作を示す情報の受信に基づいて、故障状態を判定することと、を含む、動作させることと、
前記故障状態の判定に応じて、第2の動作モードで前記システムを動作させることであって、前記第2の動作モードが、
前記第1のセットの発光デバイスまたは前記第2のセットの発光デバイスのいずれかに前記環境へ光パルスを放射させることと、
前記環境へ放射された前記光パルスの少なくとも一部を検出することによって、対応するセットの光検出デバイスに粗い反射光データを取得させることと、
前記粗い反射光データに基づいて粗い点群データを形成することと、を含む、動作させることとを含む、システム。 - 前記システムが、点群データを自律型車両または半自律型車両に提供し、前記第2の動作モードが、
前記車両を保守場所に移動させることと、
前記車両を車線外に移動させることと、
前記車両に速度を低下させることと、または
前記車両に追従距離を長くさせること、のうちの少なくとも1つを含む、請求項14に記載のシステム。 - 前記粗い点群データが、前記環境に関する低減された分解能データを含む、請求項14に記載のシステム。
- 前記動作が、
前記故障状態の判定に応じて、前記第1のセットの発光デバイスまたは前記第2のセットの発光デバイスのいずれかに、増加したパルス周波数で光パルスを提供させることをさらに含み、前記発光デバイスが、前記第1の動作モード中に第1のパルス周波数で光パルスを提供し、前記増加したパルス周波数が、前記第1のパルス周波数の少なくとも2倍である、請求項14に記載のシステム。 - 前記第1のセットの発光デバイスおよび前記第1のセットの光検出デバイスが、第1の基板に沿って配設され、前記第2のセットの発光デバイスおよび前記第2のセットの光検出デバイスが、第2の基板に沿って配設されている、請求項14に記載のシステム。
- 第1の動作モードに従ってLIDARシステムを動作させることであって、前記第1の動作モードが、
第1のセットの発光デバイスおよび第2のセットの発光デバイスに環境へ光パルスを放射させることと、
前記環境へ放射された前記光パルスの少なくとも一部を検出することによって、第1のセットの光検出デバイスおよび第2のセットの光検出デバイスに、それぞれの第1および第2の反射光データを取得させることと、
前記第1の反射光データおよび前記第2の反射光データに基づいて点群データを形成することと、
前記第1のセットの発光デバイス、前記第2のセットの発光デバイス、前記第1のセットの光検出デバイス、前記第2のセットの発光デバイス、第1の電源、または第2の電源のうちの少なくとも1つの誤動作を示す情報の受信に基づいて、故障状態を判定することであって、前記第1の電源が、少なくとも前記第1のセットの発光デバイスおよび前記第1のセットの光検出デバイスに電力を提供し、前記第2の電源が、少なくとも前記第2のセットの発光デバイスおよび前記第2のセットの光検出デバイスに電力を提供することと、を含むことと、
前記故障状態の判定に応じて、第2の動作モードで前記LIDARシステムを動作させることであって、前記第2の動作モードが、
前記第1のセットの発光デバイスまたは前記第2のセットの発光デバイスのいずれかに前記環境へ光パルスを放射させることと、
前記環境へ放射された前記光パルスの少なくとも一部を検出することによって、対応するセットの光検出デバイスに粗い反射光データを取得させることと、
前記粗い反射光データに基づいて粗い点群データを形成することと、を含むことと、を含む、方法。 - 前記点群データを自律型または半自律型車両に提供することと、
前記故障状態の判定に応じて、
保守場所に移動すること、
車線外に移動すること、
速度を低下すること、または
追従距離を長くさせること、のうちの少なくとも1つを前記車両に行なわせることをさらに含む、請求項19に記載の方法。 - 前記粗い点群データは、前記環境に関する低減された分解能データを含む、請求項19に記載の方法。
- 前記故障状態の判定に応じて、前記第1のセットの発光デバイスまたは前記第2のセットの発光デバイスのいずれかに、増加したパルス周波数で光パルスを提供させることをさらに含み、前記発光デバイスが、前記第1の動作モード中に第1のパルス周波数で光パルスを提供し、前記増加したパルス周波数が、前記第1のパルス周波数の少なくとも2倍である、請求項19に記載の方法。
- 前記第1のセットの発光デバイスおよび前記第1のセットの光検出デバイスが、第1の基板に沿って配設され、前記第2のセットの発光デバイスおよび前記第2のセットの光検出デバイスが、第2の基板に沿って配設されている、請求項19に記載の方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022043519A JP7266130B2 (ja) | 2017-12-12 | 2022-03-18 | 調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/839,677 | 2017-12-12 | ||
US15/839,677 US10942244B2 (en) | 2017-12-12 | 2017-12-12 | Systems and methods for LIDARs with adjustable resolution and failsafe operation |
PCT/US2018/058359 WO2019118076A1 (en) | 2017-12-12 | 2018-10-31 | Systems and methods for lidars with adjustable resolution and failsafe operation |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022043519A Division JP7266130B2 (ja) | 2017-12-12 | 2022-03-18 | 調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021504677A JP2021504677A (ja) | 2021-02-15 |
JP7046420B2 true JP7046420B2 (ja) | 2022-04-04 |
Family
ID=66696047
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020524202A Active JP7046420B2 (ja) | 2017-12-12 | 2018-10-31 | 調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 |
JP2022043519A Active JP7266130B2 (ja) | 2017-12-12 | 2022-03-18 | 調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022043519A Active JP7266130B2 (ja) | 2017-12-12 | 2022-03-18 | 調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 |
Country Status (11)
Country | Link |
---|---|
US (2) | US10942244B2 (ja) |
EP (1) | EP3724686B1 (ja) |
JP (2) | JP7046420B2 (ja) |
KR (2) | KR20220053031A (ja) |
CN (1) | CN111465872B (ja) |
AU (2) | AU2018383447B2 (ja) |
CA (2) | CA3083927C (ja) |
IL (1) | IL274925B2 (ja) |
MX (1) | MX2020006149A (ja) |
SG (1) | SG11202003986XA (ja) |
WO (1) | WO2019118076A1 (ja) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10761195B2 (en) | 2016-04-22 | 2020-09-01 | OPSYS Tech Ltd. | Multi-wavelength LIDAR system |
KR102326493B1 (ko) | 2017-03-13 | 2021-11-17 | 옵시스 테크 엘티디 | 눈-안전 스캐닝 lidar 시스템 |
EP3658949A4 (en) | 2017-07-28 | 2021-04-07 | Opsys Tech Ltd. | LOW ANGULAR DIVERGENCE VCSEL LIDAR TRANSMITTER |
KR102685226B1 (ko) * | 2017-08-28 | 2024-07-16 | 트리나미엑스 게엠베하 | 적어도 하나의 기하학적 정보를 판정하기 위한 측거기 |
CN111356934B (zh) | 2017-11-15 | 2024-03-12 | 欧普赛斯技术有限公司 | 噪声自适应固态lidar系统 |
US11349669B1 (en) | 2018-01-30 | 2022-05-31 | State Farm Mutual Automobile Insurance Company | Cryptographic hash chain for vehicle configuration verification |
CN111919137A (zh) | 2018-04-01 | 2020-11-10 | 欧普赛斯技术有限公司 | 噪声自适应固态lidar系统 |
JP7141242B2 (ja) * | 2018-05-18 | 2022-09-22 | 株式会社小糸製作所 | センサシステム |
US11041957B2 (en) * | 2018-06-25 | 2021-06-22 | Toyota Motor Engineering & Manufacturing North America, Inc. | Systems and methods for mitigating effects of high-reflectivity objects in LiDAR data |
US11555899B2 (en) * | 2019-02-19 | 2023-01-17 | Infineon Technologies Ag | Random hardware fault and degradation protection apparatus for time-of-flight receiver |
EP3953727A4 (en) | 2019-04-09 | 2023-01-04 | Opsys Tech Ltd. | SOLID STATE LIDAR TRANSMITTER WITH LASER CONTROL |
DE102019207279A1 (de) * | 2019-05-18 | 2020-11-19 | Robert Bosch Gmbh | Datenfusioniertes Sensorsystem |
WO2020242834A1 (en) | 2019-05-30 | 2020-12-03 | OPSYS Tech Ltd. | Eye-safe long-range lidar system using actuator |
KR20220024177A (ko) | 2019-06-25 | 2022-03-03 | 옵시스 테크 엘티디 | 적응형 다중 펄스 lidar 시스템 |
EP3789794A1 (de) * | 2019-09-04 | 2021-03-10 | Ibeo Automotive Systems GmbH | Verfahren und vorrichtung zur distanzmessung |
US11310451B1 (en) | 2019-09-05 | 2022-04-19 | Waymo Llc | Smart sensor with region of interest capabilities |
US11899139B2 (en) * | 2019-09-20 | 2024-02-13 | Intel Corporation | Photonic devices with redundant components and their applications |
WO2021088313A1 (zh) * | 2019-11-07 | 2021-05-14 | 上海禾赛光电科技有限公司 | 激光雷达的状态检测装置、激光雷达以及状态检测方法 |
US11252366B2 (en) * | 2019-11-19 | 2022-02-15 | Waymo Llc | Sensor read out mode for high resolution and low light imaging in-sync with LIDAR timing |
JP7396008B2 (ja) * | 2019-12-09 | 2023-12-12 | 株式会社デンソー | センサ制御装置、センサ制御方法、センサ制御プログラム |
US11592575B2 (en) | 2019-12-20 | 2023-02-28 | Waymo Llc | Sensor steering for multi-directional long-range perception |
US11284021B1 (en) | 2019-12-30 | 2022-03-22 | Waymo Llc | Smart sensor scheduler |
WO2021051726A1 (zh) * | 2020-01-06 | 2021-03-25 | 深圳市速腾聚创科技有限公司 | 点云数据的处理方法、装置、存储介质及激光雷达系统 |
US11428550B2 (en) | 2020-03-03 | 2022-08-30 | Waymo Llc | Sensor region of interest selection based on multisensor data |
US11756283B2 (en) | 2020-12-16 | 2023-09-12 | Waymo Llc | Smart sensor implementations of region of interest operating modes |
KR20230156344A (ko) * | 2021-03-09 | 2023-11-14 | 옵시스 테크 엘티디 | 능동 고장 모니터링을 이용하는 LiDAR 시스템 |
US11709260B2 (en) | 2021-04-30 | 2023-07-25 | Zoox, Inc. | Data driven resolution function derivation |
US20230161042A1 (en) * | 2021-06-08 | 2023-05-25 | QLM Technology Limited | Method of operating a lidar system for detection of gas |
EP4142290A1 (en) * | 2021-08-31 | 2023-03-01 | Beijing Xiaomi Mobile Software Co., Ltd. | Method and apparatus of encoding/decoding point cloud geometry data sensed by at least one sensor |
US20230105364A1 (en) * | 2021-10-06 | 2023-04-06 | Renesas Electronics America Inc. | LIGHT DETECTION AND RANGING (LiDAR) ON-FIELD CHANNEL REDUNDANCY |
CN115222988B (zh) * | 2022-07-17 | 2024-06-18 | 桂林理工大学 | 激光雷达点云数据城市地物PointEFF精细分类方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002213931A (ja) | 2001-01-17 | 2002-07-31 | Fuji Xerox Co Ltd | 3次元形状計測装置および3次元形状計測方法 |
US20100020306A1 (en) | 2006-07-13 | 2010-01-28 | Velodyne Acoustics, Inc. | High definition lidar system |
JP2015081921A (ja) | 2013-10-21 | 2015-04-27 | ジック アーゲー | 回転軸を中心に運動する走査ユニットを備えるセンサ |
JP2015197402A (ja) | 2014-04-03 | 2015-11-09 | 三菱電機株式会社 | レーザ画像計測装置 |
WO2016153687A1 (en) | 2015-03-25 | 2016-09-29 | Google Inc. | Vehicle with multiple light detection and ranging devices (lidars) |
US20170307736A1 (en) | 2016-04-22 | 2017-10-26 | OPSYS Tech Ltd. | Multi-Wavelength LIDAR System |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0913751B1 (de) * | 1997-11-03 | 2003-09-03 | Volkswagen Aktiengesellschaft | Autonomes Fahrzeug und Verfahren zur Steuerung eines autonomen Fahrzeuges |
US8483960B2 (en) | 2002-09-20 | 2013-07-09 | Visual Intelligence, LP | Self-calibrated, remote imaging and data processing system |
US20040120549A1 (en) * | 2002-12-24 | 2004-06-24 | Chung-Shan Institute Of Science And Technology | Half-plane predictive cancellation method for laser radar distance image noise |
US7064810B2 (en) * | 2003-09-15 | 2006-06-20 | Deere & Company | Optical range finder with directed attention |
US7205926B2 (en) * | 2004-04-14 | 2007-04-17 | Safeview, Inc. | Multi-source surveillance system |
US8050863B2 (en) | 2006-03-16 | 2011-11-01 | Gray & Company, Inc. | Navigation and control system for autonomous vehicles |
US9041915B2 (en) | 2008-05-09 | 2015-05-26 | Ball Aerospace & Technologies Corp. | Systems and methods of scene and action capture using imaging system incorporating 3D LIDAR |
JP5027748B2 (ja) * | 2008-07-18 | 2012-09-19 | 本田技研工業株式会社 | 車両の走行安全装置 |
WO2011127375A1 (en) | 2010-04-09 | 2011-10-13 | Pochiraju Kishore V | Adaptive mechanism control and scanner positioning for improved three-dimensional laser scanning |
US9098931B2 (en) * | 2010-08-11 | 2015-08-04 | Apple Inc. | Scanning projectors and image capture modules for 3D mapping |
US8749619B2 (en) * | 2010-09-29 | 2014-06-10 | Massachusetts Institute Of Technology | Methods and apparatus for transient light imaging |
US9194949B2 (en) | 2011-10-20 | 2015-11-24 | Robert Bosch Gmbh | Methods and systems for precise vehicle localization using radar maps |
US9891320B2 (en) * | 2012-01-30 | 2018-02-13 | Hexagon Technology Center Gmbh | Measurement system with a measuring device and a scanning module |
EP2620745A1 (de) * | 2012-01-30 | 2013-07-31 | Hexagon Technology Center GmbH | Vermessungssystem mit einem Vermessungsgerät und einem Scanmodul |
US9651417B2 (en) * | 2012-02-15 | 2017-05-16 | Apple Inc. | Scanning depth engine |
EP2730947A1 (de) | 2012-11-12 | 2014-05-14 | Technische Universität Hamburg-Harburg | Lidar-Messsystem und Lidar-Messverfahren |
US8836922B1 (en) * | 2013-08-20 | 2014-09-16 | Google Inc. | Devices and methods for a rotating LIDAR platform with a shared transmit/receive path |
EP3120300A4 (en) | 2014-03-19 | 2017-11-22 | Neurala Inc. | Methods and apparatus for autonomous robotic control |
KR101679699B1 (ko) * | 2014-10-10 | 2016-11-25 | 한양대학교 산학협력단 | 라이다 센서 제작을 위한 사양 분석 시스템 및 이를 이용한 사양 최적화 방법 |
KR102096676B1 (ko) * | 2014-12-24 | 2020-04-02 | 전자부품연구원 | 차량용 2차원 라이더 스캐너 및 제어장치 |
CN107257931B (zh) | 2015-02-20 | 2020-09-22 | 苹果公司 | 用于光束扫描设备的致动光学元件 |
CN104730535A (zh) * | 2015-03-20 | 2015-06-24 | 武汉科技大学 | 一种车载多普勒激光雷达距离测量方法 |
US10527726B2 (en) * | 2015-07-02 | 2020-01-07 | Texas Instruments Incorporated | Methods and apparatus for LIDAR with DMD |
US9720415B2 (en) * | 2015-11-04 | 2017-08-01 | Zoox, Inc. | Sensor-based object-detection optimization for autonomous vehicles |
CN108369274B (zh) * | 2015-11-05 | 2022-09-13 | 路明亮有限责任公司 | 用于高分辨率深度映射的具有经改进扫描速度的激光雷达系统 |
US20170328990A1 (en) * | 2016-05-11 | 2017-11-16 | Texas Instruments Incorporated | Scalable field of view scanning in optical distance measurement systems |
WO2018126248A1 (en) * | 2017-01-02 | 2018-07-05 | Okeeffe James | Micromirror array for feedback-based image resolution enhancement |
CN107153198A (zh) * | 2017-03-16 | 2017-09-12 | 深圳市速腾聚创科技有限公司 | 激光雷达和激光雷达控制方法 |
US10740988B2 (en) * | 2017-06-16 | 2020-08-11 | nuTonomy Inc. | Intervention in operation of a vehicle having autonomous driving capabilities |
-
2017
- 2017-12-12 US US15/839,677 patent/US10942244B2/en active Active
-
2018
- 2018-10-31 AU AU2018383447A patent/AU2018383447B2/en not_active Ceased
- 2018-10-31 IL IL274925A patent/IL274925B2/en unknown
- 2018-10-31 KR KR1020227012135A patent/KR20220053031A/ko not_active Application Discontinuation
- 2018-10-31 WO PCT/US2018/058359 patent/WO2019118076A1/en unknown
- 2018-10-31 KR KR1020207019784A patent/KR102387213B1/ko active IP Right Grant
- 2018-10-31 MX MX2020006149A patent/MX2020006149A/es unknown
- 2018-10-31 CA CA3083927A patent/CA3083927C/en active Active
- 2018-10-31 SG SG11202003986XA patent/SG11202003986XA/en unknown
- 2018-10-31 CA CA3209569A patent/CA3209569A1/en active Pending
- 2018-10-31 CN CN201880080075.1A patent/CN111465872B/zh active Active
- 2018-10-31 JP JP2020524202A patent/JP7046420B2/ja active Active
- 2018-10-31 EP EP18888303.7A patent/EP3724686B1/en active Active
-
2021
- 2021-02-05 US US17/168,610 patent/US20210157003A1/en active Pending
- 2021-07-27 AU AU2021209208A patent/AU2021209208A1/en not_active Abandoned
-
2022
- 2022-03-18 JP JP2022043519A patent/JP7266130B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002213931A (ja) | 2001-01-17 | 2002-07-31 | Fuji Xerox Co Ltd | 3次元形状計測装置および3次元形状計測方法 |
US20100020306A1 (en) | 2006-07-13 | 2010-01-28 | Velodyne Acoustics, Inc. | High definition lidar system |
JP2015081921A (ja) | 2013-10-21 | 2015-04-27 | ジック アーゲー | 回転軸を中心に運動する走査ユニットを備えるセンサ |
JP2015197402A (ja) | 2014-04-03 | 2015-11-09 | 三菱電機株式会社 | レーザ画像計測装置 |
WO2016153687A1 (en) | 2015-03-25 | 2016-09-29 | Google Inc. | Vehicle with multiple light detection and ranging devices (lidars) |
US20170307736A1 (en) | 2016-04-22 | 2017-10-26 | OPSYS Tech Ltd. | Multi-Wavelength LIDAR System |
Also Published As
Publication number | Publication date |
---|---|
CA3083927C (en) | 2023-10-03 |
EP3724686A4 (en) | 2021-08-18 |
KR20220053031A (ko) | 2022-04-28 |
CA3083927A1 (en) | 2019-06-20 |
SG11202003986XA (en) | 2020-07-29 |
IL274925B2 (en) | 2024-02-01 |
CN111465872B (zh) | 2024-01-09 |
US20210157003A1 (en) | 2021-05-27 |
US20190178974A1 (en) | 2019-06-13 |
KR20200086752A (ko) | 2020-07-17 |
CN111465872A (zh) | 2020-07-28 |
EP3724686B1 (en) | 2024-07-03 |
JP2021504677A (ja) | 2021-02-15 |
IL274925B1 (en) | 2023-10-01 |
US10942244B2 (en) | 2021-03-09 |
JP7266130B2 (ja) | 2023-04-27 |
WO2019118076A1 (en) | 2019-06-20 |
MX2020006149A (es) | 2020-08-13 |
AU2018383447A1 (en) | 2020-05-28 |
IL274925A (en) | 2020-07-30 |
KR102387213B1 (ko) | 2022-04-18 |
JP2022091842A (ja) | 2022-06-21 |
AU2021209208A1 (en) | 2021-08-19 |
CA3209569A1 (en) | 2019-06-20 |
EP3724686A1 (en) | 2020-10-21 |
AU2018383447B2 (en) | 2021-05-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7046420B2 (ja) | 調整可能な分解能とフェイルセーフ動作を備えたlidarのシステムと方法 | |
JP7256920B2 (ja) | Lidarシステム及び方法 | |
JP7336014B2 (ja) | Lidarシステム及び方法 | |
JP6888092B2 (ja) | 軸外受信器を有する光検出および測距(ライダ)デバイス | |
CN112703418B (zh) | 具有对应的光学元件阵列的光检测器阵列 | |
WO2018055513A2 (en) | Methods circuits devices assemblies systems and functionally associated machine executable code for light detection and ranging based scanning | |
KR101949565B1 (ko) | 근거리 감지형 라이더 센서 시스템 | |
JP2021507207A (ja) | Lidarを使用した適応的範囲カバレッジのためのシステムおよび方法 | |
KR20190086041A (ko) | 회전 광 검출 및 거리 측정(lidar) 디바이스를 위한 전력 변조 | |
US20220229161A1 (en) | Electro-optical systems for scanning illumination onto a field of view and methods |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200601 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210616 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210628 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210924 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220318 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7046420 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |