JP2021514457A - Rain filtering techniques for autonomous vehicles - Google Patents

Rain filtering techniques for autonomous vehicles Download PDF

Info

Publication number
JP2021514457A
JP2021514457A JP2020528321A JP2020528321A JP2021514457A JP 2021514457 A JP2021514457 A JP 2021514457A JP 2020528321 A JP2020528321 A JP 2020528321A JP 2020528321 A JP2020528321 A JP 2020528321A JP 2021514457 A JP2021514457 A JP 2021514457A
Authority
JP
Japan
Prior art keywords
rider
laser light
rider device
reflected
planes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
JP2020528321A
Other languages
Japanese (ja)
Inventor
ウェイ チー ヨン
ウェイ チー ヨン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ST Engineering Land Systems Ltd
Original Assignee
ST Engineering Land Systems Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ST Engineering Land Systems Ltd filed Critical ST Engineering Land Systems Ltd
Publication of JP2021514457A publication Critical patent/JP2021514457A/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/87Combinations of systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4814Constructional features, e.g. arrangements of optical elements of transmitters alone
    • G01S7/4815Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4817Constructional features, e.g. arrangements of optical elements relating to scanning
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems

Abstract

本発明は、雨または雪の状態中に自律車両をナビゲートするためにライダーを使用するためのシステムおよび方法に関する。自律車両に近いエリアを同時に走査するために2つのライダー・ユニットが使用される。2つのライダー・デバイスから反射されたレーザー光はアルゴリズムを用いて分析される。両方のユニットによって検出されない、反射されたレーザー光は雨に起因し得る。ライダー・ユニットはマルチエコー走査を使用することができる。さらに、ライダー・デバイスは、システムのロバストネスを改善するために一連の平面を走査すること(すなわち多平面走査)ができる。本システムは、雨、雪または他の粒子が空気中に存在するときのライダー・ナビゲーションの信頼度を改善する。The present invention relates to systems and methods for using a rider to navigate an autonomous vehicle during rain or snow conditions. Two rider units are used to scan the area close to the autonomous vehicle at the same time. The laser light reflected from the two rider devices is analyzed using an algorithm. The reflected laser light, undetected by both units, can be due to rain. The rider unit can use multi-echo scanning. In addition, the rider device can scan a series of planes (ie, multiplanar scan) to improve the robustness of the system. The system improves the reliability of rider navigation when rain, snow or other particles are present in the air.

Description

本発明は、雨または雪など、粒子状物質が空気中に存在するときに、自律車両ナビゲーションのためにライダーを使用するシステムおよび方法に関する。 The present invention relates to systems and methods of using a rider for autonomous vehicle navigation when particulate matter, such as rain or snow, is present in the air.

自律車は、その環境を監視し、人間の入力なしにナビゲートすることができるものである。自律車の利益としては、より大きい車両安全、より大きい効率、より低いコスト、減少した輻輳、およびドライバに適さない、または認可されない人々のより大きいモビリティがある。 Autonomous vehicles can monitor their environment and navigate without human input. The benefits of autonomous vehicles include greater vehicle safety, greater efficiency, lower costs, reduced congestion, and greater mobility for unsuitable or unlicensed people.

自律車は、それらのロケーションとそれらの環境とを監視するためにセンサーを使用する。物体とそれらの周囲における危険とを検出するためにCMOSカメラ、レーダーおよびレーザー光が使用され得る。しかしながら、各タイプのセンサーには限界がある。たとえば、CMOSカメラは、十分な照明に依存し、物体を検出する。その上、たとえば、接近する車両のヘッドライトによって光が後ろに投影されるとき、カメラは効果的でないことがある。カメラの他の欠点としては、不十分な照明、動きぶれ、限られた視野および/または検出範囲がある。レーダーは、可視光に依存しないが、より小さい物体を識別するために必要とされる分解能がない。これらの限界を克服するためにレーザー光が使用され得るが、雨または雪の間は効果的でないことがある。 Autonomous vehicles use sensors to monitor their location and their environment. CMOS cameras, radar and laser light can be used to detect objects and dangers around them. However, each type of sensor has its limitations. For example, CMOS cameras rely on sufficient lighting to detect objects. Moreover, the camera may not be effective, for example, when light is projected backwards by the headlights of an approaching vehicle. Other drawbacks of the camera include inadequate lighting, blurring, limited field of view and / or detection range. Radar does not rely on visible light, but does not have the resolution required to identify smaller objects. Laser light can be used to overcome these limitations, but may not be effective during rain or snow.

ライダー(Lidar:Light Imaging Detection and Ranging)(光撮像検出および測距)は、パルス・レーザー光で物体を照明し、センサーを用いて反射されたパルスを測定することによって、物体までの距離を測定する。一般的な使用では、ライダー・システムが、車両を囲む物体から複数のレーザー・パルスを反射する。次いで、物体のデジタル3D表現を作成するためにレーザー戻り時間の差および波長が使用され得る。 Lidar (Light Imaging Detection and Ranger) measures the distance to an object by illuminating the object with a pulsed laser beam and measuring the reflected pulse with a sensor. To do. In general use, the rider system reflects multiple laser pulses from objects surrounding the vehicle. Laser return time differences and wavelengths can then be used to create a digital 3D representation of the object.

しかしながら、ライダーが雪、雨、霧および空気中の埃を透過することは困難である。雨または空気中の他の粒子は、固体物(a solid object)と同じように、レーザー光を反射してシステムに戻すことができる。パルス・レーザー光が反射されてライダー・システムに戻る際、自律車両は不必要に遅くなるかまたは停止する。これは障害物の「フォールス・ポジティブ」検出に起因する。 However, it is difficult for the rider to penetrate snow, rain, fog and dust in the air. Rain or other particles in the air can reflect the laser light back into the system, similar to a solid object. As the pulsed laser light is reflected back into the rider system, the autonomous vehicle unnecessarily slows down or stops. This is due to the "false positive" detection of obstacles.

雨または雪の状態中のライダーのロバストネスを改善する方法が提案されている。たとえば、「マルチエコー」または「ラスト・エコー」技術を用いたライダー・センサーは、埃、雨および霧によって引き起こされる反射をフィルタリングすることができる。それらは、パルスからのエネルギーの一部分は粒子物質によって反射され得るという前提の下で動作する。残りのビームは、伝搬し続けることができ、固体物によって反射される。これが起こるとき、ライダー・ユニットは、雨または空気中の微粒子によって引き起こされるより近く、より弱い反射を無視することができる。改善の一方、この技法は、中度から強度の雨をフィルタリングするためにロバストではない。 Methods have been proposed to improve the rider's robustness in rainy or snowy conditions. For example, a rider sensor using "multi-echo" or "last echo" technology can filter the reflections caused by dust, rain and fog. They operate on the premise that some of the energy from the pulse can be reflected by the particulate matter. The remaining beam can continue to propagate and is reflected by solids. When this happens, the rider unit can ignore the closer and weaker reflections caused by rain or fine particles in the air. While improving, this technique is not robust for filtering moderate to heavy rain.

物体を検出するためにレーダーをライダーと組み合わせる方法が記載されている(特許文献1参照。)。ライダーは、車両を囲むエリアにおける3次元ポイント・マップを作成するために使用される。レーダーは、次いで、物体または危険が雨または空中粒子ではなく固体材料であることを確認するために使用される。そのシステムは、フォールス・ポジティブ・ライダー検出を防ぐように設計されているが、それは別個のレーダー・システムの使用を必要とする。さらに、レーダーは、本質的に低い分解能を有し、弱い反射率をもつ物体を逃すことがある。 A method of combining a radar with a rider to detect an object is described (see Patent Document 1). The rider is used to create a 3D point map in the area surrounding the vehicle. Radar is then used to confirm that the object or danger is a solid material rather than rain or aerial particles. The system is designed to prevent false positive rider detection, but it requires the use of a separate radar system. In addition, radar may miss objects with inherently low resolution and weak reflectance.

自律車両に近い物体の存在を確認するためにライダーを使用する方法が記載されている(特許文献2参照。)。ライダーは、物体の存在を確認するために物体の複数のポイント(すなわち右、左、上および下)を検出する。その手法は、複数のパルスを必要とするのでマルチエコー方法に類似する。特許文献1と同様に、マルチエコー方法は、小さい物体を検出することにおいて効果的でないことがある。 A method of using a rider to confirm the existence of an object close to an autonomous vehicle is described (see Patent Document 2). The rider detects multiple points on the object (ie right, left, up and down) to confirm the presence of the object. The method is similar to the multi-echo method because it requires multiple pulses. Similar to Patent Document 1, the multi-echo method may not be effective in detecting small objects.

米国特許第9097800号明細書U.S. Pat. No. 9097800 米国特許出願第2014/576265号明細書U.S. Patent Application No. 2014/576265

したがって、自律車両が雨または雪の中でライダーを使用してナビゲートすることを可能にすることができるシステムが必要である。 Therefore, there is a need for a system that can allow autonomous vehicles to navigate using the rider in the rain or snow.

本発明は、自律車両がナビゲートし、物体および危険を検出するための改善されたシステムが必要であることを認識する。システムは、すべての天候状態において信頼でき、動作することが可能であるべきである。本発明は、自律車両が雨または雪の中で動作することを可能にするためのシステムおよび雨フィルタリングアルゴリズムを含む。 The present invention recognizes the need for improved systems for autonomous vehicles to navigate and detect objects and hazards. The system should be reliable and able to operate in all weather conditions. The present invention includes a system and a rain filtering algorithm to allow an autonomous vehicle to operate in rain or snow.

以下の概要は、開示された実施形態に固有の画期的特徴のうちのいくつかの理解を促進するために与えられ、完全な説明となるものではない。本明細書で開示される実施形態の様々な態様の十分な理解は、全体として明細書、特許請求の範囲、図面、および要約書全体を考慮に入れることによって得られ得る。 The following summary is provided to facilitate understanding of some of the groundbreaking features inherent in the disclosed embodiments and is not a complete explanation. A good understanding of the various aspects of the embodiments disclosed herein can be obtained by taking into account the entire specification, claims, drawings, and abstract as a whole.

本発明は、レーザー光(すなわちライダー)を使用して物体を検出し、および/またはナビゲートするための、ならびに固体物を空気中の粒子と区別するためのシステムを含む。本システムは、レーザー光のパルスを放出し、反射されたレーザー光を検出することによってエリアを走査する第1のライダー・デバイスと、レーザー光のパルスを放出し、反射されたレーザー光を検出することによって、同じまたは実質的に同じエリアを走査する第2のライダー・デバイスとを含むことができる。コンピュータは、固体物の存在を確認するために、第1のライダー・デバイスによって放出されたレーザー光および検出された反射されたレーザー光を、第2のライダー・デバイスによって放出されたレーザー光および検出された反射されたレーザー光と比較するために、アルゴリズムを使用することができる。第1のライダー・デバイスおよび第2のライダー・デバイスが固体物から反射されたレーザー光を検出したときに、固体物の存在が確認され得る。第1および第2のライダー・デバイスは、それらが水平面上で互いから0.5〜2.5メートル離れているように、自律車両に取り付けられ得る。 The present invention includes systems for detecting and / or navigating objects using laser light (ie, lidar), and for distinguishing solids from particles in the air. The system emits a pulse of laser light and detects the reflected laser light with a first rider device that scans the area and emits a pulse of laser light to detect the reflected laser light. This can include a second rider device that scans the same or substantially the same area. The computer uses the laser light emitted by the first rider device and the detected reflected laser light to confirm the presence of the solid matter, and the laser light emitted by the second rider device and detection. An algorithm can be used to compare with the reflected reflected laser light. The presence of a solid object can be confirmed when the first and second rider devices detect the laser light reflected from the solid object. The first and second rider devices can be mounted on autonomous vehicles such that they are 0.5 to 2.5 meters apart from each other on a horizontal plane.

デュアル・ライダー・ユニット技術に加えて、第1のライダー・デバイスおよび第2のライダー・デバイスは、固体物を空中粒子と区別するためにマルチエコー技術を利用することができる。さらに、ライダー・デバイスは、固体物を空中粒子と区別するために複数平面走査を実行することができる。 In addition to the dual rider unit technology, the first rider device and the second rider device can utilize multi-echo technology to distinguish solids from aerial particles. In addition, the lidar device can perform multiple plane scans to distinguish solids from aerial particles.

本発明はまた、自律運転のための物体または障害物を検出する方法を含む。第1のライダー・デバイスは、レーザー光を放出し、反射されたレーザー光(すなわちエコー)を検出することによって、自律車両に近いエリアを走査する。第2のライダー・デバイスは、レーザー光を放出し、エコーを検出することによって、自律車両に近いエリアを走査する。物体または障害物の存在を検出し、確認するためにコンピュータとアルゴリズムとを使用して、第1のライダー・デバイスによって放出されたパルスおよび検出されたエコーが、第2のライダー・デバイスによって放出されたパルスおよび検出されたエコーと比較される。第1のライダー・ユニットと第2のライダー・ユニットの両方が物体からのエコーを検出したときに、固体物の存在が確認され得る。 The present invention also includes methods for detecting objects or obstacles for autonomous driving. The first rider device scans an area close to an autonomous vehicle by emitting laser light and detecting the reflected laser light (ie, echo). The second rider device scans an area close to the autonomous vehicle by emitting laser light and detecting echoes. Using computers and algorithms to detect and confirm the presence of objects or obstacles, the pulses emitted by the first rider device and the detected echoes are emitted by the second rider device. It is compared with the pulse and the detected echo. The presence of a solid object can be confirmed when both the first rider unit and the second rider unit detect echoes from the object.

雨または雪に起因するエコーは、第1のライダー・デバイスによって受信されたエコーを第2のライダー・デバイスによって受信されたエコーと比較することによって識別され得る。第1のライダー・デバイスおよび第2のライダー・デバイスはマルチエコー走査を使用することができる。さらに、ライダー・デバイスは一連の層または平面を走査することができる。固体物が1つまたは複数の層または平面中に現れたときに、固体物の存在が確認され得る。 Echoes caused by rain or snow can be identified by comparing the echoes received by the first rider device with the echoes received by the second rider device. The first rider device and the second rider device can use multi-echo scanning. In addition, the rider device can scan a series of layers or planes. The presence of a solid can be confirmed when it appears in one or more layers or planes.

本発明はまた、固体物を検出する方法であって、(a)第1のライダー・ユニットを用いてレーザー光のパルスを放出し、エコーを検出することによって、自律車両に近いエリアを走査するステップと、(b)第2のライダー・ユニットを用いてレーザー光のパルスを放出し、エコーを検出することによって、実質的に同じエリアを走査するステップと、(c)物体または障害物の存在を検出し、確認するために、第1のライダー・ユニットによって放出されたパルスおよび受信されたエコーを、第2のライダー・ユニットによって放出されたパルスおよび受信されたエコーと比較するためのアルゴリズムを使用するステップとから構成される、方法を含む。ライダー・ユニットのうちの1つはエコーを検出したが、他のライダー・ユニットはエコーを検出しないときに、フォールス・ポジティブ(すなわち雨または雪など空気中の粒子状物質)が識別され得る。 The present invention is also a method of detecting a solid object, wherein (a) a first lidar unit is used to emit a pulse of laser light, and an echo is detected to scan an area close to an autonomous vehicle. Steps and (b) traversing substantially the same area by emitting a pulse of laser light using a second rider unit and detecting echoes, and (c) the presence of an object or obstacle. An algorithm for comparing the pulses emitted and received echoes by the first rider unit with the pulses emitted and received echoes by the second rider unit to detect and confirm Includes a method consisting of steps to use. False positives (ie, particulate matter in the air, such as rain or snow) can be identified when one of the rider units detects an echo but the other rider unit does not detect an echo.

さらに、第1のライダー・ユニットおよび第2のライダー・ユニットはマルチエコー走査を使用することができる。それらはまた、一連の平面を走査することができる。固体物の存在は、物体が2つ以上の平面内に現れたときに確認され得る。さらに、固体物の存在は、マルチエコー走査のラスト・エコーにおいて確認され得る。 In addition, the first rider unit and the second rider unit can use multi-echo scanning. They can also scan a series of planes. The presence of a solid object can be confirmed when the object appears in more than one plane. In addition, the presence of solids can be confirmed in the last echo of the multi-echo scan.

本発明はまた、ライダーを使用して固体物の存在を検出し、確認するための方法であって、a)レーザー光のパルスが放出され、反射されたレーザー光が検出される、複数の平面を走査するために第1のライダー・デバイスを使用するステップと、b)第1のライダー・デバイスから放出されたレーザー光および第1のライダー・デバイスによって検出された反射されたレーザー光に関係するデータを収集するステップと、c)反射された光の存在および/または不在について複数の平面を比較することによって、第1のライダー・デバイスから反射された光が空気中の粒子状物質の結果であるかどうかを決定するステップと、d)レーザー光のパルスが放出され、反射されたレーザー光が検出される、複数の平面を走査するために第2のライダー・デバイスを使用するステップと、e)第2のライダー・デバイスから放出されたレーザー光および第2のライダー・デバイスによって検出された反射されたレーザー光に関係するデータを収集するステップと、f)反射されたレーザー光の存在および/または不在について複数の平面を比較することによって、第2のライダー・デバイスから反射された光が空気中の粒子状物質の結果であるかどうかを決定するステップと、g)反射された光が空気中の粒子状物質でなく固体物の結果であることを確認するために、第1のライダー・デバイスからのデータを第2のライダー・デバイスからのデータと比較するためにアルゴリズムを使用するステップとから構成される、方法を含む。第1のライダー・デバイスによって走査される複数の平面は、第2のライダー・デバイスによって走査される複数の平面と同じエリアまたは実質的に同じエリアにある。第1のライダー・デバイスの複数の平面のうちの4つ以上および/または第2のライダー・デバイスの複数の平面のうちの4つ以上内で反射されたレーザー光が検出されたときに、固体物の存在が確認され得る。さらに、第1のライダー・デバイスおよび第2のライダー・デバイスはマルチエコー走査を使用することができる。 The present invention is also a method for detecting and confirming the presence of a solid object using a lidar, a) a plurality of planes in which a pulse of laser light is emitted and the reflected laser light is detected. It relates to the step of using the first rider device to scan the b) the laser light emitted from the first rider device and the reflected laser light detected by the first rider device. By comparing multiple planes for the steps of collecting data and c) the presence and / or absence of reflected light, the light reflected from the first rider device is the result of particulate matter in the air. The step of determining if there is, d) the step of using the second rider device to scan multiple planes where the pulse of the laser light is emitted and the reflected laser light is detected, and e. ) The step of collecting data related to the laser light emitted from the second rider device and the reflected laser light detected by the second rider device, and f) the presence of the reflected laser light and / Or the step of determining whether the light reflected from the second rider device is the result of particulate matter in the air by comparing multiple planes for absence, and g) the reflected light is air. With the steps of using the algorithm to compare the data from the first rider device with the data from the second rider device to ensure that it is the result of a solid rather than the particulate matter inside. Includes methods consisting of. The planes scanned by the first rider device are in the same area or substantially the same area as the planes scanned by the second rider device. Solid when reflected laser light is detected within four or more of the planes of the first rider device and / or within four or more of the planes of the second rider device. The existence of an object can be confirmed. In addition, the first rider device and the second rider device can use multi-echo scanning.

導入
本発明の第1の態様は、ライダーを使用して自律運転のための障害物を検出するための改善されたシステムおよび方法である。
Introduction A first aspect of the invention is an improved system and method for using a rider to detect obstacles for autonomous driving.

本発明の第2の態様は、複数のライダー・システムを利用する自律運転のための改善されたシステムおよび方法である。 A second aspect of the invention is an improved system and method for autonomous driving utilizing multiple rider systems.

本発明の第3の態様は、空気中の水または粒子を誤って固体物であると識別することを回避するために、複数のライダー・システムとアルゴリズムとを利用する自律運転のための改善されたシステムおよび方法である。 A third aspect of the invention is an improvement for autonomous driving utilizing multiple rider systems and algorithms to avoid erroneously identifying water or particles in the air as solids. System and method.

本発明の第4の態様は、マルチエコー技術を利用し、複数の層を走査し、空気中の雨または粒子により引き起こされる干渉を緩和するためのアルゴリズムを採用する、自律運転のための改善されたシステムおよび方法である。 A fourth aspect of the invention is an improvement for autonomous driving that utilizes multi-echo technology to scan multiple layers and employ algorithms to mitigate interference caused by rain or particles in the air. System and method.

本発明の第5の態様は、ロバストネスを改善し、空気中の雨または粒子によって引き起こされる干渉を緩和するためのアルゴリズムを用いて、デュアル・ライダー・システムとマルチエコー技術と多層走査とを利用する、自律運転のための改善されたシステムおよび方法である。 A fifth aspect of the invention utilizes dual lidar systems, multi-echo technology and multi-layer scanning with algorithms to improve robustness and mitigate interference caused by rain or particles in the air. , Improved systems and methods for autonomous driving.

本明細書で説明される図面は、選択された実施形態のみの例示を目的としており、すべての可能な実装形態の例示を目的としているとは限らず、本開示の範囲を限定するものではない。 The drawings described herein are intended to illustrate only selected embodiments, not all possible implementations, and are not intended to limit the scope of the present disclosure. ..

上記の概要、ならびに例示的な実施形態の以下の詳細な説明は、添付の図面と併せて読むと、より良く理解される。本開示を説明する目的で、本開示の例示的な構成が図面に示されている。しかしながら、本開示は、本明細書で開示される特定の方法および手段(instrumentality)に限定されない。加えて、図面は一定の縮尺でない。 The above overview, as well as the following detailed description of the exemplary embodiments, will be better understood when read in conjunction with the accompanying drawings. Illustrative configurations of the present disclosure are shown in the drawings for purposes of explaining the present disclosure. However, the disclosure is not limited to the particular methods and instruments disclosed herein. In addition, the drawings are not at a constant scale.

図1Aは、従来のマルチエコー・ライダー・システムを示す図である。FIG. 1A is a diagram showing a conventional multi-echo rider system. 図1Bは、各走査層がグリッド・マップ上に重ね合わせられた多層走査ライダーを示す図である。FIG. 1B is a diagram showing a multi-layer scanning lidar in which each scanning layer is superimposed on a grid map. 図2は、多層走査ライダーによって得られるグリッドを示す図である。固体物は複数の層上に存在する。FIG. 2 is a diagram showing a grid obtained by a multilayer scanning lidar. Solids exist on multiple layers. 図3Aは、ライダー・センサーがラスト・エコー・フィルタリングと障害物特徴検出のための雨フィルタ・アルゴリズムとを使用する実施形態のフローチャートである。FIG. 3A is a flowchart of an embodiment in which the rider sensor uses last echo filtering and a rain filter algorithm for obstacle feature detection. 図3Bは、本発明の一実施形態による、障害物を検出するために使用されるデュアル・ライダー・ユニットを示す図である。FIG. 3B is a diagram showing a dual rider unit used to detect an obstacle according to an embodiment of the present invention. 図3Cは、デュアル・ライダー・センサーが、ラスト・エコー・フィルタリングと、空気中の雨または粒子によって引き起こされるリターン信号を固体物のリターン信号と区別するための雨フィルタ・アルゴリズムとを使用する、本発明の一実施形態のフローチャートである。Figure 3C shows a book in which the dual rider sensor uses last echo filtering and a rain filter algorithm to distinguish the return signal caused by rain or particles in the air from the return signal of a solid. It is a flowchart of one Embodiment of the invention. 図4Aは、距離「d」だけ離されたデュアル・ライダー・センサーをもつ自律車両を示す図である。FIG. 4A is a diagram showing an autonomous vehicle having dual rider sensors separated by a distance of "d". 図4Bは、デュアル・ライダー・センサーと検出のそれらのそれぞれのゾーンとを示す図である。FIG. 4B is a diagram showing dual rider sensors and their respective zones of detection. 図5Aは単平面ライダーのプロットである。FIG. 5A is a plot of a single plane rider. 図5Bは、デュアル・ライダー・システムを使用する単平面ライダーのプロットである。FIG. 5B is a plot of a single plane rider using a dual rider system. 図5Cは多平面ライダーのプロットである。FIG. 5C is a plot of a multi-plane rider. 図5Dは、デュアル・ライダー・システムを使用する多平面ライダーのプロットである。FIG. 5D is a plot of a multi-plane rider using a dual rider system.

定義
主に自律車両のナビゲーションについて本発明を説明するが、本発明は、そのように限定されず、ライダーを使用する他の努力を支援するために使用され得ることを理解されたい。他のアプリケーションは、たとえば、ロボット、ドローンまたは無人航空機システムなど、他の車両において本発明を使用することを含む。本発明はまた、雨または雪などの粒子が空気中に存在するときのランドスケープ撮像およびマッピング・アプリケーションにおけるライダーのロバストネスを改善するために使用され得る。
Definitions Although the present invention is described primarily with respect to autonomous vehicle navigation, it should be understood that the present invention is not so limited and may be used to support other efforts to use the rider. Other applications include using the invention in other vehicles, such as robots, drones or unmanned aerial vehicle systems. The present invention can also be used to improve the robustness of the rider in landscape imaging and mapping applications when particles such as rain or snow are present in the air.

本明細書における「一実施形態/態様」または「実施形態/態様」への参照は、実施形態/態様に関して説明される特定の特徴、構造、または特性が本開示の少なくとも1つの実施形態/態様に含まれることを意味する。明細書中の様々な場所における「一実施形態/態様では」または「別の実施形態/態様では」というフレーズの使用は、必ずしも、すべてが同じ実施形態/態様を指しているとは限らず、また、別個のまたは代替の実施形態/態様は他の実施形態/態様を相互に除外しない。その上、いくつかの実施形態/態様によっては示され、他の実施形態/態様によっては示されないことがある様々な特徴が説明される。同様に、いくつかの実施形態/態様では要件であるが、他の実施形態/態様では要件でないことがある様々な要件が説明される。実施形態および態様は、いくつかの事例では互換的に使用され得る。 References herein to "one embodiment / aspect" or "execution / aspect" are at least one embodiment / aspect of the present disclosure in which the particular feature, structure, or property described with respect to the embodiment / aspect is described. Means to be included in. The use of the phrase "in one embodiment / embodiment" or "in another embodiment / embodiment" in various places throughout the specification does not necessarily mean all of them refer to the same embodiment / embodiment. Also, separate or alternative embodiments / embodiments do not exclude other embodiments / embodiments from each other. Moreover, various features that are shown in some embodiments / embodiments and may not be shown in other embodiments / embodiments are described. Similarly, various requirements are described that are requirements in some embodiments / embodiments but may not be requirements in other embodiments / embodiments. The embodiments and embodiments may be used interchangeably in some cases.

本明細書において使用される用語は、一般に、各用語が使用される、当技術分野で、本開示のコンテキスト内で、および特定のコンテキストにおいて、それらの通常の意味を有する。本開示を説明するために使用されるいくつかの用語は、本開示の説明に関して当業者に追加のガイダンスを与えるために、以下で、または本明細書の他の箇所で説明される。便宜のために、いくつかの用語は、たとえばイタリックおよび/または引用符を使用してハイライトされることがある。ハイライトの使用は用語の範囲および意味に影響を及ぼさない。すなわち、用語の範囲および意味は、それがハイライトされているか否かにかかわらず、同じコンテキストにおいて同じである。同じことは2つ以上の方法において言い得ることが理解されよう。 The terms used herein generally have their usual meaning in the art, within the context of the present disclosure, and in a particular context, where each term is used. Some terms used to describe this disclosure will be described below or elsewhere herein to provide additional guidance to those skilled in the art with respect to the description of this disclosure. For convenience, some terms may be highlighted using, for example, italics and / or quotation marks. The use of highlights does not affect the scope and meaning of the term. That is, the scope and meaning of a term is the same in the same context, whether it is highlighted or not. It will be understood that the same can be said in more than one way.

したがって、本明細書で説明される用語のいずれか1つまたは複数のために、代替の文言と類義語とが使用され得る。また、用語が本明細書で詳述または説明されるか否かに特別の重要性が置かれるべきでもない。いくつかの用語のための類義語が与えられる。1つまたは複数の類義語の説明部分は他の類義語の使用を除外しない。本明細書で説明されるいずれかの用語の例を含む、本明細書のいずれかの場所での例の使用は、例示的なものにすぎず、さらに、本開示のまたは例示されるいずれかの用語の範囲および意味を限定するものではない。同様に、本開示は、本明細書中で与えられる様々な実施形態に限定されない。 Therefore, alternative wording and synonyms may be used for any one or more of the terms described herein. Nor should there be any particular importance as to whether the term is detailed or explained herein. Synonyms for some terms are given. The description of one or more synonyms does not preclude the use of other synonyms. The use of examples anywhere in the specification, including examples of any of the terms described herein, is merely exemplary and is either disclosed or exemplified herein. Does not limit the scope and meaning of the terms. Similarly, the present disclosure is not limited to the various embodiments given herein.

本開示の範囲をさらに限定する意図なしに、本開示の実施形態による器械、装置、方法およびそれらの関係する結果の例が以下で与えられる。タイトルまたはサブタイトルが読者の便宜のために例において使用され得、決して本開示の範囲を限定するべきでないことに留意されたい。別段に定義されていない限り、本明細書で使用されるすべての技術用語および科学用語は、本開示が関係する当業者によって一般的に理解されるのと同じ意味を有する。矛盾の場合、定義を含む本文書が制御する。 Without further limiting the scope of this disclosure, examples of instruments, devices, methods and related results thereof according to embodiments of the present disclosure are given below. Please note that titles or subtitles may be used in the examples for the convenience of the reader and should never limit the scope of this disclosure. Unless otherwise defined, all technical and scientific terms used herein have the same meaning as commonly understood by those skilled in the art to which this disclosure relates. In case of inconsistency, this document, including the definition, controls.

限定はしないが、左、右、天底、頂点、上部、下部、垂直、水平、後、前、および横方向など、方向用語および/または関係語は、互い相対的であり、適用可能な要素または物品の特定の方位に依存し、したがって本明細書中の様々な実施形態および添付の特許請求の範囲の説明を助けるために使用され、必ずしも限定的であるとして解釈されるものであるとは限らない。 Although not limited, directional terms and / or related terms such as left, right, nadir, apex, top, bottom, vertical, horizontal, back, front, and lateral are relative to each other and applicable elements. Alternatively, it depends on the particular orientation of the article and is therefore used to aid in the description of the various embodiments and the appended claims herein and is not necessarily construed as limiting. Not exclusively.

適用可能な際、「約」または「一般に」という用語は、本明細書および添付の特許請求の範囲で使用される際、別段に規定されていない限り、+/−20%のマージンを意味する。また、適用可能な際、「実質的に」という用語は、本明細書および添付の特許請求の範囲で使用される際、別段に規定されていない限り、+/−10%のマージンを意味する。上記の用語のすべての使用は、参照される範囲が適用され得るように定量化可能であるとは限らないことを諒解されたい。 Where applicable, the terms "about" or "generally" mean a +/- 20% margin when used herein and in the appended claims, unless otherwise specified. .. Also, where applicable, the term "substantially" means a margin of +/- 10% when used herein and in the appended claims, unless otherwise specified. .. It should be understood that all uses of the above terms are not always quantifiable so that the referenced scope can be applied.

「マルチエコー機能」という用語は、送信されるレーザー・パルス当たりの複数の(たとえば3つの)エコーを収集し、評価するライダー・ユニットの能力を指す。エコーがユニットの受信機に到達すると、受信された強度は電圧に変換される。固体物からのエコーは、通常、長い時間期間にわたって高い電圧をもたらす。雨滴のエコーは、しかしながら、短い時間期間にわたって極めて低い電圧をもたらす。 The term "multi-echo function" refers to the ability of a rider unit to collect and evaluate multiple (eg, 3) echoes per transmitted laser pulse. When the echo reaches the receiver of the unit, the received intensity is converted to voltage. Echoes from solids usually result in high voltages over a long period of time. Raindrop echoes, however, result in extremely low voltages over a short period of time.

「多層技術」という用語は、異なる対頂角をもつ複数の(たとえば4つの)走査面によるピッチ角補償を可能にするライダー・ユニットを指す。好ましい設計では、ユニットのフォト・ダイオード受信機は、列に構成された複数の(たとえば4つの)独立した受信機を含む。各受信機は単一の平面を走査し、それにより垂直アパーチャを複数の平面に分割する。 The term "multilayer technology" refers to a rider unit that allows pitch angle compensation with multiple (eg, four) scanning surfaces with different vertical angles. In a preferred design, the photodiode receiver of the unit includes a plurality of (eg, four) independent receivers arranged in a row. Each receiver scans a single plane, thereby dividing the vertical aperture into multiple planes.

「SLAM」という用語は、室内空間など、GPS位置特定が利用不可能である場合に正確なマッピングを可能にする同時位置特定およびマッピング(Simultaneous Localization And Mapping)を指す。SLAMアルゴリズムは、同時にセンサーの位置を特定し、センサーの周囲のコヒーレント・マップを生成するために、LiDARデータとIMU(慣性測定ユニット(Inertial Measurement Unit))データとを使用する。 The term "SLAM" refers to Simultaneous Localization And Mapping, which enables accurate mapping when GPS localization is not available, such as in an indoor space. The SLAM algorithm simultaneously uses LiDAR data and IMU (Inertial Measurement Unit) data to locate the sensor and generate a coherent map around the sensor.

「飛行時間原理(Time−of−Flight Principle)」という用語は、信号の放出と、物体によって反射された後の信号のセンサーへのリターンとの間の時間差に基づいて、センサーと物体との間の距離を測定するための方法を指す。 The term "Time-of-Flight Principle" is used between a sensor and an object based on the time difference between the emission of the signal and the return of the signal to the sensor after it has been reflected by the object. Refers to a method for measuring the distance of.

本明細書で使用される他の技術用語は、様々な技術用語辞典によって例示されているように、それらの用語が使用される当技術分野でのそれらの通常の意味を有する。これらの非限定的な例において説明される特定の値および構成は、変動し得、単に少なくとも1つの実施形態を示すために引用され得、その実施形態の範囲を限定するものではない。 Other technical terms used herein have their usual meaning in the art in which they are used, as exemplified by various technical term dictionaries. The particular values and configurations described in these non-limiting examples may vary and may be cited solely to indicate at least one embodiment, without limiting the scope of that embodiment.

好ましい実施形態の説明
ライダーは基本的に距離測定技術である。ライダー・システムは地面にまたは物体に向かって光エネルギーを送る。この放出された光は「ビーム」または「パルス」と呼ばれ得る。ライダー・ユニットは、反射されてセンサーに戻る光を測定する。この反射された光は「エコー」または「リターン」と呼ばれ得る。ライダー・システムと測定点との間の空間距離は、パルスとリターンとの間の遅延を比較することによって計算される。
Description of Preferred Embodiment The rider is basically a distance measuring technique. The rider system sends light energy to the ground or towards an object. This emitted light can be called a "beam" or "pulse". The rider unit measures the light that is reflected back into the sensor. This reflected light can be called an "echo" or "return". The spatial distance between the rider system and the measurement point is calculated by comparing the delay between the pulse and the return.

ライダーは、車両の3次元周囲を高い分解能に正確にマッピングすることができるので、しばしば、自律車両において使用するための好ましいシステムである。しかしながら、粒子がレーザー光を反射してライダー・ユニットに戻すので、雨または空気中の粒子状物質はライダーを効果的でなくし得る。光が反射される際、空中微粒子が固体物と区別がつかないので、自律車両は遅れるかまたは停止する。 Riders are often the preferred system for use in autonomous vehicles because they can accurately map the three-dimensional perimeter of the vehicle to high resolution. However, particulate matter in the rain or air can make the rider ineffective, as the particles reflect the laser light back into the rider unit. When the light is reflected, the autonomous vehicle is delayed or stopped because the airborne particles are indistinguishable from solids.

図1Aは、物体120を検出するためにラスト・エコー・フィルタリングを使用するライダー・ユニット110を示す。本技法はマルチエコー走査とも呼ばれる。雨115がライダー・ユニット110と物体120との間に示されている。1つのパルスは、ライダー・ユニットに対してレーザー光の複数のエコー(すなわち第1のエコー、中間エコー、ラスト・エコー)を生成することができる。これは、雨など空気中の粒子がレーザー光を反射してライダー・ユニット110に戻すときに行われ得る。信号が空気中の粒子から反射される、第1のエコー130が示されている。中間エコーは空気中の粒子の結果としても生じ得る。信号(すなわちエコー)が固体物120から反射される、ラスト・エコー140が示されている。 FIG. 1A shows a rider unit 110 that uses last echo filtering to detect an object 120. This technique is also called multi-echo scanning. Rain 115 is shown between the rider unit 110 and the object 120. One pulse can generate multiple echoes of laser light (ie, first echo, intermediate echo, last echo) for the rider unit. This can be done when particles in the air, such as rain, reflect the laser light and return it to the rider unit 110. A first echo 130 is shown in which the signal is reflected from particles in the air. Intermediate echoes can also occur as a result of particles in the air. The last echo 140 is shown, where the signal (ie echo) is reflected from the solid 120.

本システムは、雨または空気中の粒子の結果であるエコーを識別するためにエコーを分析することができる。「ラスト・エコー・フィルタ」を使用すると、第1のエコーおよび中間エコーは雨または空気中の粒子に起因する。ラスト・エコーは固体物に起因する。しかしながら、この技法は、限界を有し、豪雨の中では、または空気中に実質的な粒子状物質あると効果的でない。 The system can analyze echoes to identify echoes that are the result of particles in the rain or air. With the "last echo filter", the first and intermediate echoes are due to particles in the rain or air. The last echo is due to a solid object. However, this technique has limitations and is ineffective in heavy rain or in the presence of substantial particulate matter in the air.

図1Bは、多層走査、すなわち、雨115または空気中の粒子状物質からのエコーまたはリターンを識別することを目的とする別の技法を示す。ライダー・ユニット110は複数の角を走査する。層、平面または積層された平面130は各角の走査に起因し得る。本システムは、物体の存在または不在を確認するために層からのデータを比較することができる。単一の層上に現れる物体は、空気中の粒子に起因する可能性がある。好ましい方法では、4つまたはそれ以上の隣接する層においてエコーが検出されたときに、固体物の存在が確認される。 FIG. 1B shows a multi-layer scan, an alternative technique aimed at identifying echoes or returns from rain 115 or particulate matter in the air. The rider unit 110 scans a plurality of corners. Layers, planes or stacked planes 130 can result from scanning at each angle. The system can compare data from layers to confirm the presence or absence of objects. Objects appearing on a single layer can be attributed to particles in the air. In a preferred method, the presence of solids is confirmed when echoes are detected in four or more adjacent layers.

各走査角/層は、図2に示されているようにグリッド・マップ上に重ね合わせられ得る。走査の結果は4つの層上に表される。4つの走査される角のうち、各角は水平グリッド上に示されている。各影付きの正方形は、ライダー・ユニットがエコーを検出したことを示す。従来のライダー・システムは2つの物体215および225の存在を示す。複数の層からのデータの分析は、フォールス・ポジティブ読取りを真の読取りと区別することができる。 Each scan angle / layer can be overlaid on a grid map as shown in FIG. The results of the scan are represented on four layers. Of the four scanned corners, each corner is shown on a horizontal grid. Each shaded square indicates that the rider unit has detected an echo. Conventional rider systems show the presence of two objects 215 and 225. Analysis of data from multiple layers can distinguish false positive reads from true reads.

障害物が、走査層1においては検出されたが、走査層2またはNにおいては厳密な位置において検出されない場合、それらの障害物は雨など空気中の粒子として識別され得る。第1の物体215は複数の層中に存在するが、中間層(走査層3)中には存在しない。さらに、第1の物体215のロケーションは層の間で変動する。この状況において、本システムは、エコーが雨または空気中の粒子に起因すると結論付けることができる。対照的に、第2の物体225は複数の連続層中に同じロケーションに存在する。このデータを用いて、本システムは、信号が固体物に起因することを確認することができる。好ましい方法では、物体または障害物の存在を確認するために4つのセル中のエコーが使用される。物体が3つのまたはそれより少ないセル中にある場合、エコーは雨または空中微粒子に起因する。 If obstacles are detected in scanning layer 1 but not in exact location in scanning layer 2 or N, those obstacles can be identified as particles in the air, such as rain. The first object 215 exists in the plurality of layers, but does not exist in the intermediate layer (scanning layer 3). In addition, the location of the first object 215 varies between layers. In this situation, the system can conclude that the echo is due to rain or particles in the air. In contrast, the second object 225 resides in the same location in multiple continuous layers. Using this data, the system can confirm that the signal is due to solids. In a preferred method, echoes in four cells are used to confirm the presence of an object or obstacle. If the object is in three or fewer cells, the echo is due to rain or airborne particles.

図3Aは、ラスト・エコー・フィルタリングと雨フィルタ・アルゴリズムの両方を採用するライダー・ユニットを示すフローチャートである。ライダー・ユニットは、ラスト・エコー・フィルタ305と、障害物特徴および検出325のために多層走査からのデータを分析する雨フィルタ・アルゴリズム315とを使用することができる。これにより、雨など空中粒子が存在するときのライダーの信頼度およびロバストネスが改善される。 FIG. 3A is a flow chart showing a rider unit that employs both last echo filtering and rain filter algorithms. The rider unit can use a last echo filter 305 and a rain filter algorithm 315 that analyzes data from multi-layer scans for obstacle features and detection 325. This improves rider reliability and robustness in the presence of aerial particles such as rain.

図3Bは、2つのライダー・ユニットが、自律車両ナビゲーション・システムのロバストネスを改善するように同時に機能し、自律車両ナビゲーション・システムが雨または雪の状態中に動作することを可能にする、本発明の一実施形態を示す。本システムは、実質的に同じエリアを走査する、第1の(すなわち左側)ライダー・ユニット210と、第2の(すなわち右側)ライダー・ユニット220とを含むことができる。データは、各ライダー・ユニットから収集され、信号が固体物の結果であることを確認するためのアルゴリズムを使用して比較され得る。 FIG. 3B shows the invention in which two rider units function simultaneously to improve the robustness of the autonomous vehicle navigation system, allowing the autonomous vehicle navigation system to operate in rainy or snowy conditions. An embodiment is shown. The system can include a first (ie, left side) rider unit 210 and a second (ie, right side) rider unit 220 that scans substantially the same area. Data can be collected from each rider unit and compared using algorithms to ensure that the signal is the result of a solid object.

第1のライダー・ユニットが物体から反射された光を受光すると、本システムは第2のライダー・ユニットを使用して物体の存在を確認する。本システムは、放出された光、反射された光(すなわちエコー)、ならびに反射の角度および物体の動きを含む、各ライダー・ユニットからのデータを分析するためのアルゴリズムを使用することができる。このようにして、第2のライダー・ユニットは、第1のライダー・ユニットによって受け取られた反射された光は固体物の結果であることを確認する。ユニットのうちの1つによって検出された反射されたパルス(すなわちエコー)は、他からの確認なしに、空気中の粒子に起因し、フォールス・ポジティブとして分類され得る。以下の原理がこの方法に適用され得る。すなわち、
・固体物/障害物は両方のライダー・ユニット(210、220)によって検出される。
・左側ライダー・ユニット210によって検出され、右側ライダー・ユニット220によって検出されないエコーは、雨など空気中の粒子に起因し得る。
・右側ライダー・ユニット220によって検出され、左側ライダー・ユニット210によって検出されないエコーは、雨など空気中の粒子に起因し得る。
When the first rider unit receives the light reflected from the object, the system uses the second rider unit to confirm the presence of the object. The system can use algorithms to analyze data from each rider unit, including emitted light, reflected light (ie echo), and angle of reflection and movement of objects. In this way, the second rider unit confirms that the reflected light received by the first rider unit is the result of a solid object. The reflected pulse (ie echo) detected by one of the units can be classified as false positive due to particles in the air without confirmation from the other. The following principles can be applied to this method. That is,
-Solid objects / obstacles are detected by both rider units (210, 220).
Echoes detected by the left rider unit 210 but not by the right rider unit 220 can be due to particles in the air, such as rain.
The echo detected by the right rider unit 220 and not by the left rider unit 210 can be due to particles in the air such as rain.

このデュアルユニット手法は、ラスト・エコー・フィルタおよび/または多層走査など、それのロバストネスおよび信頼度を改善するための他のフィルタ技法と組み合わせられ得る。図3Bはラスト・エコー140とともに第1のエコー130を示す。 This dual unit technique can be combined with other filter techniques to improve its robustness and reliability, such as last echo filters and / or multi-layer scanning. FIG. 3B shows the first echo 130 along with the last echo 140.

図3Cは、本発明の一実施形態による、2つのライダー・ユニットのシステムを示すフローチャートである。第1のライダー・ユニット210および第2のライダー・ユニット220はラスト・エコー・フィルタリング(310、320)を使用することができる。各ユニットからのデータは、収集され、処理され、雨フィルタ・アルゴリズム330を使用して分析される。アルゴリズムは、たとえば、エコーがペアではなく1つのライダー・ユニットによって検出された場合、エコーを雨に起因すると考えることができる。これは、よりロバストな障害物および特徴検出340につながる。自律車両は、雨または空気中の粒子からのフォールス・ポジティブ信号により遅れることおよび/または停止することなしに、物体/危険を回避することができる。 FIG. 3C is a flowchart showing a system of two rider units according to an embodiment of the present invention. The first rider unit 210 and the second rider unit 220 can use last echo filtering (310, 320). The data from each unit is collected, processed and analyzed using the rain filter algorithm 330. The algorithm can attribute the echo to rain, for example, if the echo is detected by a single rider unit rather than a pair. This leads to a more robust obstacle and feature detection 340. Autonomous vehicles can avoid objects / hazards without being delayed and / or stopped by false positive signals from particles in the rain or air.

図4Aは、第1のライダー・ユニット210と第2のライダー・ユニット220とが自動車410のルーフに取り付けられ、互いから距離「d」だけ離された、システムの好ましい構成を示す。距離「d」は、経験的に決定され得、好ましくは0.5メートルと2.5メートルとの間にある。しかしながら、ライダー・ユニットは、車両サイズ、ライダー・ユニットの分解能、物体/危険の予想される距離、および空気中の粒子状物質の量など、変数に応じた距離だけ離され得る。理想的な距離は、たとえば、小さい移動ロボットの場合の1cmから、大きいドローンの場合の数メートルまで変動することができる。諒解され得るように、第1のライダー・ユニット210および第2のライダー・ユニット220は車両上の他の外部位置(たとえばフードのバンパー)に取り付けられ得る。好ましい構成では、ライダー・ユニットは、レーザー・ビームが同じ平面上で放出されるように、互いに水平面上に配置される。 FIG. 4A shows a preferred configuration of a system in which a first rider unit 210 and a second rider unit 220 are mounted on the roof of an automobile 410 and separated from each other by a distance of "d". The distance "d" can be determined empirically and is preferably between 0.5 and 2.5 meters. However, the rider units can be separated by variables depending on variables such as vehicle size, rider unit resolution, expected object / danger distance, and amount of particulate matter in the air. The ideal distance can vary, for example, from 1 cm for small mobile robots to several meters for large drones. As can be understood, the first rider unit 210 and the second rider unit 220 can be mounted at other external locations on the vehicle (eg, hood bumpers). In a preferred configuration, the rider units are placed in a horizontal plane with each other so that the laser beams are emitted in the same plane.

図4Bは、第1の(すなわち左側)ライダー・ユニット210および第2の(すなわち右側)ライダー・ユニット220の検出ゾーン400を示す。各システムは、物体120を検出するために実質的に円形のエリアを走査する。走査は中央エリア235において重複する。各センサーによって放出される光線の数および方向は、ライダー・ユニットと設定とに基づいて変動することができる。 FIG. 4B shows the detection zone 400 of the first (ie left side) rider unit 210 and the second (ie right side) rider unit 220. Each system scans a substantially circular area to detect the object 120. Scans overlap in central area 235. The number and direction of light rays emitted by each sensor can vary based on the rider unit and settings.

ユニットは実質的に同じエリアを走査するが、重複のエリアから収集されるデータは、信号が固体物の結果であることを確認するためのアルゴリズムを用いて分析され得る。雨または空気中の粒子はライダー・ユニットに対してレーザー光を反射することができる。固体物120は、両方のライダー・ユニットに対して反射されたレーザー光から検出される。 The unit scans substantially the same area, but the data collected from the overlapping areas can be analyzed using algorithms to ensure that the signal is the result of solids. Particles in the rain or air can reflect laser light to the rider unit. The solid 120 is detected from the laser light reflected by both rider units.

2つのライダー・ユニットは同時に機能し、エコーが分析される。自律車両ナビゲーションのロバストネスを改善し、雨または雪など粒子が空気中に存在する状態の間に動作を可能にするために、マルチユニット技術はラスト・エコー・フィルタリング技法および多層走査と組み合わせられ得る。 The two rider units work at the same time and the echo is analyzed. Multi-unit technology can be combined with last echo filtering techniques and multi-layer scanning to improve the robustness of autonomous vehicle navigation and allow it to operate while particles such as rain or snow are present in the air.

実施例
雨中の車両ナビゲーションのためのライダーの使用
10ミリメートル(mm)毎時の雨の定常流がある雨のトンネル中の自律車両を用いて本システムをテストした。ライダー・ユニットを互いから約1メートルの距離のところに車両のルーフに固定した。2つのタイプのライダー、すなわち単平面(LMS151ユニット)と4平面(LDMRSユニット)とを使用した。ライダー・ユニットはマルチエコー技術を使用した。
Example Rider use for vehicle navigation in the rain This system was tested using an autonomous vehicle in a rain tunnel with a steady flow of rain 10 mm (mm) per hour. The rider units were fixed to the roof of the vehicle at a distance of about 1 meter from each other. Two types of riders were used: a single plane (LMS 151 unit) and a four plane (LDMRS unit). The rider unit used multi-echo technology.

図5A〜図5Dは、中央に自律車両がある環境の上面図表現である。水平軸は、車両の前面および後面から離れた距離をメートルで表す。垂直軸は、車両の側面から離れた距離をメートルで表す。各セグメントは5メートルの距離を示す。 5A-5D are top view representations of an environment with an autonomous vehicle in the center. The horizontal axis represents the distance in meters away from the front and rear surfaces of the vehicle. The vertical axis represents the distance in meters away from the side of the vehicle. Each segment represents a distance of 5 meters.

図5Aは、マルチエコー走査を使用する単平面ライダーのプロットである。円のエリアは固体物(雨のトンネル中の柱)の既知のロケーションである。固体物は雨滴505からのフォールス・ポジティブから追加のエリアとともに検出される。フォールス・ポジティブの大部分は車両の前のエリア中で検出される。 FIG. 5A is a plot of a single plane lidar using multi-echo scanning. The area of the circle is the known location of solid objects (pillars in the rain tunnel). Solids are detected with additional areas from false positives from raindrops 505. Most of the false positives are detected in the area in front of the vehicle.

第1のライダー・システムと第2のライダー・システムとがエリアを走査する(単平面)デュアル・ライダー・システムを使用して、テストを繰り返した。図5Bは、デュアル・ライダー・システムからのデータをもつ単平面ライダーのプロットである。第1のライダー・システムと第2のライダー・システムの両方によって検出された走査点のみが含まれる。図5Aと同様に、水平軸は、車両の前面および後面から離れた距離を表す。垂直軸は、車両の側面から離れた距離を表す。 The test was repeated using a (single plane) dual rider system in which the first rider system and the second rider system scan the area. FIG. 5B is a plot of a single plane rider with data from a dual rider system. Only scan points detected by both the first rider system and the second rider system are included. Similar to FIG. 5A, the horizontal axis represents the distance from the front and rear surfaces of the vehicle. The vertical axis represents the distance from the side of the vehicle.

雨に起因するリターン信号は、図5Aと図5Bとを比較することによって識別され得る。デュアル・ライダー・システムがないと、フォールス・ポジティブが存在し、空気中の雨滴505からのエコーに起因する。これらのフォールス・ポジティブは、デュアル・ライダー・システムを使用するとなくなる。円のエリアは、両方のテストにおいて存在し、検出された構造物体(たとえば柱)である。 The return signal due to rain can be identified by comparing FIGS. 5A and 5B. Without the dual rider system, false positives exist and are due to echoes from raindrops 505 in the air. These false positives disappear with the dual rider system. Areas of circles are structural objects (eg columns) that are present and detected in both tests.

図5Cおよび図5Dは、フォールス・ポジティブ・エコーを検出する際の多平面ライダー・フィルタの使用を実証する。図5Cは多平面ライダー(フィルタリングなし)のプロットである。水平軸は、車両の前面および後面から離れた距離を表す。垂直軸は、車両の側面から離れた距離を表す。各セグメントは5メートルの距離を示す。水平軸に沿った点は、雨によるフォールス・ポジティブの検出を示す。 5C and 5D demonstrate the use of a multi-plane lidar filter in detecting false positive echoes. FIG. 5C is a plot of a multi-plane rider (without filtering). The horizontal axis represents the distance from the front and rear surfaces of the vehicle. The vertical axis represents the distance from the side of the vehicle. Each segment represents a distance of 5 meters. Points along the horizontal axis indicate the detection of false positives due to rain.

第1のライダー・システムと第2のライダー・システムとがエリアを走査する(多平面)デュアル・システムを使用して、テストを繰り返した。図5Dは、デュアル・ライダー・システムを使用する多平面ライダーのプロットである。プロットされた点の多くは、デュアル・ライダー・フィルタを使用するとなくなる。これらの点は空気中の雨滴に起因する。図5Cと図5Dの両方に存在する点は物理的物体(すなわち特徴)に起因し得る。 The test was repeated using a (multi-planar) dual system in which the first rider system and the second rider system scan the area. FIG. 5D is a plot of a multi-plane rider using a dual rider system. Many of the plotted points disappear with the dual rider filter. These points are due to raindrops in the air. The points present in both FIGS. 5C and 5D can be due to physical objects (ie features).

追加の変更形態/構成要素は豪雨(たとえば20mm/時超の雨)中のシステムのロバストネスを改善することができる。1つの手法は、雨中の浸入を改善するために追加の層(たとえば5つ以上の層)を分析することが可能なライダー・ユニットを使用することである。雨液滴をフィルタで除去するために、より高いリフレッシュ・レートをもつライダー・ユニットも使用され得る。ライダー・ユニットによって検出される雨滴の量を低減するためにある範囲(たとえば最高1メートル)をもつエア・カーテンを与えるために、機械式空気ブロワが実装され得る。 Additional modifications / components can improve the robustness of the system during heavy rains (eg, rains above 20 mm / hour). One approach is to use a rider unit that can analyze additional layers (eg, 5 or more layers) to improve infiltration in the rain. Rider units with higher refresh rates may also be used to filter out raindrops. A mechanical air blower may be implemented to provide an air curtain with a range (eg up to 1 meter) to reduce the amount of raindrops detected by the rider unit.

上記で開示した特徴および機能ならびに他の特徴および機能の変形、またはそれらの代替が他のシステムまたはアプリケーションに組み合わせられ得ることが諒解されよう。また、以下の特許請求の範囲によって包含されるものでもある様々な不測のまたは予想されない代替、変更、変形またはその中の改善は当業者によって後に行われ得る。 It will be appreciated that the features and functions disclosed above and variations of other features and functions, or their alternatives, may be combined with other systems or applications. Also, various unexpected or unexpected substitutions, changes, modifications or improvements thereof, which are also covered by the claims below, may be made later by those skilled in the art.

本開示の実施形態について、可能な態様をカバーするためにかなり詳細に、包括的に説明したが、当業者は、本開示の他のバージョンも可能であることを認識するであろう。 Although embodiments of the present disclosure have been described in considerable detail and comprehensively to cover possible embodiments, one of ordinary skill in the art will recognize that other versions of the present disclosure are also possible.

Claims (17)

レーザー光を使用して固体物を空気中の粒子と区別するためのシステムであって、前記システムは、
レーザー光のパルスを放出し、反射されたレーザー光を検出することによってエリアを走査する第1のライダー・デバイスと、
レーザー光のパルスを放出し、反射されたレーザー光を検出することによって、前記第1のライダー・デバイスと同じまたは実質的に同じエリアを走査する第2のライダー・デバイスと、
前記第1のライダー・デバイスによって放出されたパルスおよび検出された反射されたレーザー光を、前記第2のライダー・デバイスによって放出されたパルスおよび検出された反射されたレーザー光と比較するコンピュータと
から構成され、
前記第1のライダー・デバイスおよび前記第2のライダー・デバイスが固体物から反射されたレーザー光を検出したときに、前記固体物の存在が確認される、システム。
A system for distinguishing solids from particles in the air using laser light.
A first rider device that scans an area by emitting a pulse of laser light and detecting the reflected laser light.
A second rider device that scans the same or substantially the same area as the first rider device by emitting a pulse of laser light and detecting the reflected laser light.
From a computer that compares the pulse emitted by the first rider device and the detected reflected laser light to the pulse emitted by the second rider device and the detected reflected laser light. Configured
A system in which the presence of a solid object is confirmed when the first rider device and the second rider device detect laser light reflected from the solid object.
前記第1のライダー・デバイスおよび前記第2のライダー・デバイスが、固体物を空気中の粒子と区別するためにマルチエコー技術を利用する、請求項1に記載のシステム。 The system of claim 1, wherein the first rider device and the second rider device utilize multi-echo technology to distinguish solids from particles in the air. 前記第1のライダー・デバイスおよび前記第2のライダー・デバイスは、1つまたは複数のエコーが空気中の粒子ではなく固体物から反射されたことを確認するために、複数の平面を走査し、1つまたは複数の平面からのエコーを比較する、請求項1に記載のシステム。 The first rider device and the second rider device scan a plurality of planes to ensure that one or more echoes are reflected from solids rather than particles in the air. The system of claim 1, wherein echoes from one or more planes are compared. 前記第1のライダー・デバイスおよび前記第2のライダー・デバイスが、水平面上に互いから0.5〜2.5メートルの距離に配置された、請求項1に記載のシステム。 The system of claim 1, wherein the first rider device and the second rider device are located on a horizontal plane at a distance of 0.5 to 2.5 meters from each other. 固体物を空気中の粒子と区別する方法であって、
第1のライダー・ユニットを用いてレーザー光のパルスを放出し、エコーを検出することによって、自律車両に近いエリアを走査するステップと、
第2のライダー・ユニットを用いてレーザー光のパルスを放出し、エコーを検出することによって、実質的に同じエリアを走査するステップと、
前記第1のライダー・ユニットによって放出されたパルスおよび受信されたエコーを、前記第2のライダー・ユニットによって放出されたパルスおよび受信されたエコーと比較するためのアルゴリズムを使用するステップと、
前記第1のライダー・ユニットおよび前記第2のライダー・ユニットが固体物からのエコーを検出したときに、前記固体物の存在を確認するステップと
から構成される、方法。
A method of distinguishing solids from particles in the air
A step of scanning an area close to an autonomous vehicle by emitting a pulse of laser light using a first rider unit and detecting an echo.
A step of scanning substantially the same area by emitting a pulse of laser light using a second lidar unit and detecting an echo.
A step of using an algorithm to compare the pulse emitted and received echo by the first rider unit with the pulse emitted and received echo by the second rider unit.
A method comprising a step of confirming the presence of the solid object when the first rider unit and the second rider unit detect an echo from the solid object.
前記第1のライダー・ユニットおよび前記第2のライダー・ユニットがマルチエコー走査を使用する、請求項5に記載の方法。 The method of claim 5, wherein the first rider unit and the second rider unit use multi-echo scanning. 前記第1のライダー・ユニットおよび前記第2のライダー・ユニットが、固体物を空中粒子と区別するために、複数の平面を走査し、1つまたは複数の平面からのエコーを比較する、請求項5に記載の方法。 Claim that the first rider unit and the second rider unit scan a plurality of planes and compare echoes from one or more planes in order to distinguish a solid object from aerial particles. The method according to 5. 2つ以上の平面内でエコーが検出されたときに、固体物の存在が確認される、請求項7に記載の方法。 The method of claim 7, wherein the presence of a solid is confirmed when echoes are detected in two or more planes. 前記第1のライダー・ユニットおよび前記第2のライダー・ユニットが水平面上に互いから0.5〜2.5メートルの距離に配置された、請求項5に記載の方法。 The method of claim 5, wherein the first rider unit and the second rider unit are located on a horizontal plane at a distance of 0.5 to 2.5 meters from each other. 固体物または障害物を空気中に存在する粒子と区別する方法であって、
a)レーザー光のパルスを放出し、反射されたレーザー光を検出することによってエリアを走査するために、第1のライダー・デバイスを使用するステップと、
b)レーザー光のパルスを放出し、反射されたレーザー光を検出することによって実質的に同じエリアを走査するために、第2のライダー・デバイスを使用するステップと、
c)前記第1のライダー・デバイスから放出されたレーザー光および反射されたレーザー光に関係するデータを収集するステップと、
d)前記第2のライダー・デバイスから放出されたレーザー光および反射されたレーザー光に関係するデータを収集するステップと、
e)前記第1のライダー・デバイスおよび前記第2のライダー・デバイスのうちの1つが、前記第1のライダー・デバイスと前記第2のライダー・デバイスの両方によって検出されない、反射されたレーザー光を検出したとき、反射されたレーザー光が空気中の粒子の結果であることを決定するステップと
を含む、方法。
A method of distinguishing solids or obstacles from particles present in the air.
a) With the step of using the first rider device to scan the area by emitting a pulse of laser light and detecting the reflected laser light.
b) With the step of using a second rider device to scan substantially the same area by emitting a pulse of laser light and detecting the reflected laser light.
c) A step of collecting data related to the laser light emitted from the first rider device and the reflected laser light, and
d) A step of collecting data related to the laser light emitted from the second rider device and the reflected laser light, and
e) One of the first rider device and the second rider device emits reflected laser light that is not detected by both the first rider device and the second rider device. A method comprising the step of determining that the reflected laser light is the result of particles in the air when detected.
前記第1のライダー・デバイスおよび前記第2のライダー・デバイスがマルチエコー走査を使用する、請求項10に記載の方法。 10. The method of claim 10, wherein the first rider device and the second rider device use multi-echo scanning. 前記第1のライダー・デバイスおよび前記第2のライダー・デバイスが、固体物を空気中の粒子と区別するために、複数の平面を走査し、1つまたは複数の平面からのエコーを比較する、請求項10に記載の方法。 The first rider device and the second rider device scan multiple planes to distinguish solids from particles in the air and compare echoes from one or more planes. The method according to claim 10. 2つ以上の平面内でエコーが検出されたときに、固体物の存在が確認される、請求項12に記載の方法。 12. The method of claim 12, wherein the presence of a solid is confirmed when echoes are detected in two or more planes. ライダーを使用して固体物の存在を確認するための方法であって、
a)レーザー光のパルスが放出され、反射されたレーザー光が検出される、複数の平面を走査するために第1のライダー・デバイスを使用するステップと、
b)前記第1のライダー・デバイスから放出されたレーザー光および前記第1のライダー・デバイスによって検出された反射されたレーザー光に関係するデータを収集するステップと、
c)反射された光の存在および/または不在について複数の平面を比較することによって、前記第1のライダー・デバイスから反射された光が空気中の粒子の結果であるかどうかを決定するステップと、
d)レーザー光のパルスが放出され、反射されたレーザー光が検出される、複数の平面を走査するために第2のライダー・デバイスを使用するステップと、
e)前記第2のライダー・デバイスから放出されたレーザー光および前記第2のライダー・デバイスによって検出された反射されたレーザー光に関係するデータを収集するステップと、
f)反射されたレーザー光の存在および/または不在について複数の平面を比較することによって、前記第2のライダー・デバイスから反射されたレーザー光が空気中の粒子の結果であるかどうかを決定するステップと、
g)前記第1のライダー・デバイスからのデータを前記第2のライダー・デバイスからのデータと比較するためのアルゴリズムを使用するステップと
から構成され、
前記第1のライダー・デバイスによって走査される前記複数の平面が、前記第2のライダー・デバイスによって走査される前記複数の平面と同じエリアまたは実質的に同じエリア中にあり、
前記第1のライダー・デバイスおよび前記第2のライダー・デバイスが、複数の平面内で固体物から反射されたレーザー光を検出したときに、前記固体物の存在が確認される、方法。
It ’s a way to use a rider to check for the presence of solid objects.
a) The step of using the first rider device to scan multiple planes, where the laser light pulse is emitted and the reflected laser light is detected.
b) A step of collecting data relating to the laser light emitted from the first rider device and the reflected laser light detected by the first rider device.
c) With the step of determining whether the light reflected from the first rider device is the result of particles in the air by comparing multiple planes for the presence and / or absence of reflected light. ,
d) A step of using a second rider device to scan multiple planes where a pulse of laser light is emitted and the reflected laser light is detected.
e) A step of collecting data related to the laser light emitted from the second rider device and the reflected laser light detected by the second rider device.
f) By comparing multiple planes for the presence and / or absence of reflected laser light, it is determined whether the laser light reflected from the second rider device is the result of particles in the air. Steps and
g) Consists of a step of using an algorithm to compare the data from the first rider device with the data from the second rider device.
The plurality of planes scanned by the first rider device are in or substantially the same area as the plurality of planes scanned by the second rider device.
A method in which the presence of a solid object is confirmed when the first rider device and the second rider device detect laser light reflected from the solid object in a plurality of planes.
前記第1のライダー・デバイスの前記複数の平面のうちの4つ以上および/または前記第2のライダー・デバイスの前記複数の平面のうちの4つ以上の平面内で反射されたレーザー光が検出されたときに、固体物の存在が確認される、請求項14に記載の方法。 Laser light reflected within four or more of the plurality of planes of the first rider device and / or four or more of the plurality of planes of the second rider device is detected. The method of claim 14, wherein the presence of a solid is confirmed when the laser is used. 前記第1のライダー・デバイスおよび前記第2のライダー・デバイスがマルチエコー走査を使用する、請求項14に記載の方法。 14. The method of claim 14, wherein the first rider device and the second rider device use multi-echo scanning. 前記第1のライダー・デバイスおよび前記第2のライダー・デバイスが水平面上に互いから0.5〜2.5メートルの距離に配置された、請求項14に記載の方法。 14. The method of claim 14, wherein the first rider device and the second rider device are located on a horizontal plane at a distance of 0.5 to 2.5 meters from each other.
JP2020528321A 2017-12-08 2017-12-08 Rain filtering techniques for autonomous vehicles Ceased JP2021514457A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/SG2017/050607 WO2019112514A1 (en) 2017-12-08 2017-12-08 Rain filtering techniques for autonomous vehicle

Publications (1)

Publication Number Publication Date
JP2021514457A true JP2021514457A (en) 2021-06-10

Family

ID=66751135

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020528321A Ceased JP2021514457A (en) 2017-12-08 2017-12-08 Rain filtering techniques for autonomous vehicles

Country Status (6)

Country Link
JP (1) JP2021514457A (en)
AU (1) AU2017442202A1 (en)
IL (1) IL275162A (en)
SG (1) SG11202005246TA (en)
TW (1) TW201932868A (en)
WO (1) WO2019112514A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024070558A1 (en) * 2022-09-30 2024-04-04 株式会社小松製作所 Work site detection system, and work site detection method

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11643072B2 (en) * 2019-09-27 2023-05-09 Zoox, Inc. Planning accommodations for particulate matter
US11640170B1 (en) 2019-10-29 2023-05-02 Zoox, Inc. Identification of particulate matter in sensor data
CN112859010A (en) * 2019-11-28 2021-05-28 怡利电子工业股份有限公司 Alarming method for preventing raindrop misinformation of millimeter wave radar
TWI732365B (en) * 2019-11-29 2021-07-01 怡利電子工業股份有限公司 Warning method for preventing raindrop false alarm of millimeter wave radar
WO2021207954A1 (en) * 2020-04-15 2021-10-21 华为技术有限公司 Target identification method and device
CN115825982B (en) * 2023-02-02 2023-04-18 深圳煜炜光学科技有限公司 Method and system for scanning point cloud data of unmanned aerial vehicle in rainy environment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009069020A (en) * 2007-09-13 2009-04-02 Toshiba Corp Radar device
JP2009110069A (en) * 2007-10-26 2009-05-21 Optex Co Ltd Laser area sensor
JP2016191617A (en) * 2015-03-31 2016-11-10 シャープ株式会社 Obstacle determination device
JP2016224885A (en) * 2015-06-04 2016-12-28 東日本高速道路株式会社 Wrong-way traveling vehicle detection system using light wave

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5314037A (en) * 1993-01-22 1994-05-24 Shaw David C H Automobile collision avoidance system
JP2013167479A (en) * 2012-02-14 2013-08-29 Toyota Motor Corp Laser radar device and object detection method using the same
US9857472B2 (en) * 2013-07-02 2018-01-02 Electronics And Telecommunications Research Institute Laser radar system for obtaining a 3D image
US9625582B2 (en) * 2015-03-25 2017-04-18 Google Inc. Vehicle with multiple light detection and ranging devices (LIDARs)
CN105607075A (en) * 2015-09-08 2016-05-25 北京铁路局北京科学技术研究所 Road safety monitoring method and apparatus thereof
CN204882872U (en) * 2015-09-09 2015-12-16 厦门理工学院 To keeping away barrier system before car

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009069020A (en) * 2007-09-13 2009-04-02 Toshiba Corp Radar device
JP2009110069A (en) * 2007-10-26 2009-05-21 Optex Co Ltd Laser area sensor
JP2016191617A (en) * 2015-03-31 2016-11-10 シャープ株式会社 Obstacle determination device
JP2016224885A (en) * 2015-06-04 2016-12-28 東日本高速道路株式会社 Wrong-way traveling vehicle detection system using light wave

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024070558A1 (en) * 2022-09-30 2024-04-04 株式会社小松製作所 Work site detection system, and work site detection method

Also Published As

Publication number Publication date
AU2017442202A1 (en) 2020-06-25
TW201932868A (en) 2019-08-16
IL275162A (en) 2020-07-30
SG11202005246TA (en) 2020-07-29
WO2019112514A1 (en) 2019-06-13

Similar Documents

Publication Publication Date Title
JP2021514457A (en) Rain filtering techniques for autonomous vehicles
US11609329B2 (en) Camera-gated lidar system
JP7256920B2 (en) LIDAR system and method
US11703879B2 (en) All weather autonomously driven vehicles
KR102614323B1 (en) Create a 3D map of a scene using passive and active measurements
US11624813B2 (en) Lidar sensor window configuration for improved data integrity
CN110389586B (en) System and method for ground and free space exploration
US9129523B2 (en) Method and system for obstacle detection for vehicles using planar sensor data
EP3403216B1 (en) Systems and methods for augmenting upright object detection
JP2019535014A (en) LIDAR system and method
US20180095473A1 (en) Autonomous electric vehicle for transportation of goods and/or people
CN108333589A (en) A kind of automatic driving vehicle obstacle detector
US20240125936A1 (en) Time-resolved contrast imaging for lidar
JP6781535B2 (en) Obstacle determination device and obstacle determination method
JP2024009033A (en) Retroreflector detection and avoidance in lidar device
US20210018596A1 (en) Method and device for identifying objects detected by a lidar device
JP7465958B2 (en) Systems and methods for infrared sensing - Patents.com
US11914679B2 (en) Multispectral object-detection with thermal imaging
CN110308460B (en) Parameter determination method and system of sensor
US20240053438A1 (en) Multipath Object Identification For Navigation
US20210270967A1 (en) Maximum Range Indication in Lidar Point Data
JP6886296B2 (en) Radar target detection device and radar target detection method
Wada et al. Reduction of reflector code size by polarization film for infrared laser radar

Legal Events

Date Code Title Description
A529 Written submission of copy of amendment under article 34 pct

Free format text: JAPANESE INTERMEDIATE CODE: A529

Effective date: 20200617

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211005

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220302

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221021

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230124

A045 Written measure of dismissal of application [lapsed due to lack of payment]

Free format text: JAPANESE INTERMEDIATE CODE: A045

Effective date: 20230530