JP7101535B2 - Lidarセンサによってターゲットオブジェクトを検出し、自律的にトラッキングする方法 - Google Patents
Lidarセンサによってターゲットオブジェクトを検出し、自律的にトラッキングする方法 Download PDFInfo
- Publication number
- JP7101535B2 JP7101535B2 JP2018094263A JP2018094263A JP7101535B2 JP 7101535 B2 JP7101535 B2 JP 7101535B2 JP 2018094263 A JP2018094263 A JP 2018094263A JP 2018094263 A JP2018094263 A JP 2018094263A JP 7101535 B2 JP7101535 B2 JP 7101535B2
- Authority
- JP
- Japan
- Prior art keywords
- target object
- point cloud
- lidar sensor
- reference model
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/66—Tracking systems using electromagnetic waves other than radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
- G06V20/653—Three-dimensional objects by matching three-dimensional models, e.g. conformal mapping of Riemann surfaces
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Description
オリジナルに対して忠実な(true)CADモデルは、非協力的なターゲットオブジェクトに関する知識の欠如のせいで、または、例えば50m以上の、より大きな距離での高レベルのセンサノイズのせいで利用可能でないことがあるが、計算された位置におけるひどい変動を導く可能性があり、それは、次に、位置決定の結果に悪影響を及ぼすことがある。代わりに、アプローチの最中にLIDARセンサ自体によってさらに生成され、かつ、継続的に改善される、ノイズの多い参照モデルが使用される。アプローチの最中に、従って、LIDARセンサは、そのターゲットオブジェクトの輪郭を「学習("learn")」し、そして、例えば、継続的に改善している参照モデルに対して、迅速な(rapid)1-2Hzのトラッキングスキャンを適合する。
2 ブロック
3 ブロック
4 ブロック
5 ブロック
6 ブロック
7 ブロック
Claims (5)
- 3次元LIDARシステムにおいて、LIDARセンサによって、ターゲットオブジェクトを検出し、かつ、自律的にトラッキングする方法であって、
前記LIDARセンサが、既定の表面領域にわたり前記ターゲットオブジェクトの上にレーザパルスを継続的に放射し、かつ、前記3次元LIDARシステムにおけるプロセッサが、既定の時間間隔でターゲットオブジェクトによって反射された測定ポイントから3次元ポイントクラウドを生成し、
前記プロセッサが、姿勢を推定するアルゴリズムに基づいて、前記ターゲットオブジェクトの6自由度の動きについて、既定の時間間隔で、前記LIDARセンサに対する前記ターゲットオブジェクトの平行移動および回転を計算し、
前記方法は、前記プロセッサによって、
第1ステップにおいて、複数の既定の時間間隔にわたり取得された高解像度な前記3次元ポイントクラウドとしての初期化ポイントクラウドが取得され、
第2ステップにおいて、前記初期化ポイントクラウドから少数の測定ポイントを用いてノイズの多い参照モデルが生成され、
その後の反復ステップにおいて、かつ、前記既定の時間間隔で、前記アルゴリズムを使用して、時間的位置クラウドが決定されて、前記参照モデルと比較され、かつ、前記ターゲットオブジェクトの位置情報が計算され、前記参照モデルが、前記3次元ポイントクラウドの変化に対して継続的に適合される、
ことを特徴とする、方法。 - 前記方法は、前記ターゲットオブジェクトと前記LIDARセンサとの間が50mよりも大きい距離において使用される、
請求項1に記載の方法。 - 前記既定の時間間隔は、0.5秒から1秒である、
請求項1または2に記載の方法。 - 前記ターゲットオブジェクトの3次元モデルは、前記プロセッサによって、異なる視点から取得された前記3次元ポイントクラウドから、または、前記3次元ポイントクラウドに適合された前記参照モデルから決定される、
請求項1乃至3いずれか一項に記載の方法。 - 前記3次元モデルは、前記プロセッサによって、前記ターゲットオブジェクトに対する前記LIDARセンサを有するスペースクラフトの楕円形アプローチを用いて生成される、
請求項4に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017111351.7 | 2017-05-24 | ||
DE102017111351.7A DE102017111351A1 (de) | 2017-05-24 | 2017-05-24 | Verfahren zur Erfassung und autonomer Verfolgung eines Zielobjekts mittels eines LIDAR-Sensors |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018197747A JP2018197747A (ja) | 2018-12-13 |
JP7101535B2 true JP7101535B2 (ja) | 2022-07-15 |
Family
ID=62222494
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018094263A Active JP7101535B2 (ja) | 2017-05-24 | 2018-05-16 | Lidarセンサによってターゲットオブジェクトを検出し、自律的にトラッキングする方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10969489B2 (ja) |
EP (1) | EP3407090B1 (ja) |
JP (1) | JP7101535B2 (ja) |
CA (1) | CA3003427A1 (ja) |
DE (1) | DE102017111351A1 (ja) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10733338B2 (en) * | 2017-06-29 | 2020-08-04 | The Boeing Company | Methods and apparatus to generate a synthetic point cloud of a spacecraft |
US10882644B1 (en) * | 2017-07-31 | 2021-01-05 | Space Systems/Loral, Llc | Spacecraft rendezvous and docking techniques |
CN109409792B (zh) * | 2018-09-25 | 2020-02-04 | 深圳蓝胖子机器人有限公司 | 一种基于点云的物体追踪检测方法及系统 |
CN116184417A (zh) | 2018-12-10 | 2023-05-30 | 北京图森智途科技有限公司 | 一种挂车夹角的测量方法、装置及车辆 |
CN109900298B (zh) * | 2019-03-01 | 2023-06-30 | 武汉光庭科技有限公司 | 一种车辆定位校准方法及系统 |
CN110082779A (zh) * | 2019-03-19 | 2019-08-02 | 同济大学 | 一种基于3d激光雷达的车辆位姿定位方法及系统 |
CN110456377B (zh) * | 2019-08-15 | 2021-07-30 | 中国人民解放军63921部队 | 一种基于三维激光雷达的卫星来袭异物检测方法和系统 |
US11556000B1 (en) | 2019-08-22 | 2023-01-17 | Red Creamery Llc | Distally-actuated scanning mirror |
CN110796728B (zh) * | 2019-09-20 | 2023-05-12 | 南京航空航天大学 | 一种基于扫描式激光雷达的非合作航天器三维重建方法 |
CN110675431B (zh) * | 2019-10-08 | 2020-09-11 | 中国人民解放军军事科学院国防科技创新研究院 | 一种融合图像和激光点云的三维多目标跟踪方法 |
US11462023B2 (en) * | 2019-11-14 | 2022-10-04 | Toyota Research Institute, Inc. | Systems and methods for 3D object detection |
CN110849377B (zh) * | 2019-11-20 | 2021-10-29 | 上海航天控制技术研究所 | 一种星群协同的空间目标相对导航系统及方法 |
US11151788B2 (en) * | 2019-12-27 | 2021-10-19 | Woven Planet North America, Inc. | Systems and methods for presenting a reconstructed representation of a moving object detected in a scene |
US11536843B2 (en) * | 2020-02-08 | 2022-12-27 | The Boeing Company | De-jitter of point cloud data for target recognition |
DE102020001345A1 (de) | 2020-03-02 | 2021-09-02 | Daimler Ag | Verfahren zur Bestimmung von 3D-Punktkorrespondenzen in Lidarmessungen |
CN111753623B (zh) * | 2020-03-12 | 2024-03-05 | 北京京东乾石科技有限公司 | 一种运动物体的检测方法、装置、设备及存储介质 |
CN114092898A (zh) * | 2020-07-31 | 2022-02-25 | 华为技术有限公司 | 目标物的感知方法及装置 |
CN113406659A (zh) * | 2021-05-28 | 2021-09-17 | 浙江大学 | 一种基于激光雷达信息的移动机器人位置重识别方法 |
CN113513988B (zh) * | 2021-07-12 | 2023-03-31 | 广州小鹏自动驾驶科技有限公司 | 一种激光雷达标靶检测方法、装置、车辆、存储介质 |
CN114120269A (zh) * | 2021-11-02 | 2022-03-01 | 北京埃福瑞科技有限公司 | 轨道限界检测方法及系统 |
CN114088018A (zh) * | 2021-11-16 | 2022-02-25 | 中山依瓦塔光学有限公司 | 一种激光雷达发射角检测系统 |
CN115127559A (zh) * | 2022-06-28 | 2022-09-30 | 广东利元亨智能装备股份有限公司 | 一种定位方法、装置、设备和存储介质 |
KR20240050589A (ko) | 2022-10-12 | 2024-04-19 | 성균관대학교산학협력단 | 객체 추적 장치 및 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090147238A1 (en) | 2007-03-27 | 2009-06-11 | Markov Vladimir B | Integrated multi-sensor survailance and tracking system |
JP2012221456A (ja) | 2011-04-14 | 2012-11-12 | Toyota Central R&D Labs Inc | 対象物識別装置及びプログラム |
US20140118716A1 (en) | 2012-10-31 | 2014-05-01 | Raytheon Company | Video and lidar target detection and tracking system and method for segmenting moving targets |
JP2015201192A (ja) | 2014-04-03 | 2015-11-12 | エアバス デーエス ゲゼルシャフト ミット ベシュレンクテル ハフツング | 物体の位置及び向きの検出 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5734736A (en) * | 1994-06-17 | 1998-03-31 | Trw Inc. | Autonomous rendezvous and docking system and method therefor |
US9715761B2 (en) * | 2013-07-08 | 2017-07-25 | Vangogh Imaging, Inc. | Real-time 3D computer vision processing engine for object recognition, reconstruction, and analysis |
-
2017
- 2017-05-24 DE DE102017111351.7A patent/DE102017111351A1/de active Pending
-
2018
- 2018-05-01 CA CA3003427A patent/CA3003427A1/en active Pending
- 2018-05-16 JP JP2018094263A patent/JP7101535B2/ja active Active
- 2018-05-22 EP EP18173547.3A patent/EP3407090B1/de active Active
- 2018-05-23 US US15/987,217 patent/US10969489B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090147238A1 (en) | 2007-03-27 | 2009-06-11 | Markov Vladimir B | Integrated multi-sensor survailance and tracking system |
JP2012221456A (ja) | 2011-04-14 | 2012-11-12 | Toyota Central R&D Labs Inc | 対象物識別装置及びプログラム |
US20140118716A1 (en) | 2012-10-31 | 2014-05-01 | Raytheon Company | Video and lidar target detection and tracking system and method for segmenting moving targets |
JP2015201192A (ja) | 2014-04-03 | 2015-11-12 | エアバス デーエス ゲゼルシャフト ミット ベシュレンクテル ハフツング | 物体の位置及び向きの検出 |
Also Published As
Publication number | Publication date |
---|---|
US20180341021A1 (en) | 2018-11-29 |
DE102017111351A1 (de) | 2018-11-29 |
EP3407090B1 (de) | 2023-05-03 |
EP3407090A1 (de) | 2018-11-28 |
JP2018197747A (ja) | 2018-12-13 |
US10969489B2 (en) | 2021-04-06 |
CA3003427A1 (en) | 2018-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7101535B2 (ja) | Lidarセンサによってターゲットオブジェクトを検出し、自律的にトラッキングする方法 | |
Opromolla et al. | Pose estimation for spacecraft relative navigation using model-based algorithms | |
US10884110B2 (en) | Calibration of laser and vision sensors | |
KR102497330B1 (ko) | 추가 차량의 결정된 요 파라미터(들)에 근거한 자율주행 차량 제어 | |
CN110573830B (zh) | 激光传感器的校准方法 | |
CN110178048B (zh) | 交通工具环境地图生成和更新的方法和系统 | |
Opromolla et al. | LIDAR-inertial integration for UAV localization and mapping in complex environments | |
Opromolla et al. | Uncooperative pose estimation with a LIDAR-based system | |
CN110889808B (zh) | 一种定位的方法、装置、设备及存储介质 | |
Opromolla et al. | Uncooperative spacecraft relative navigation with LIDAR-based unscented Kalman filter | |
EP2759847B1 (en) | Method and apparatus for determining equivalent velocity | |
English et al. | Real-time dynamic pose estimation systems in space: Lessons learned for system design and performance evaluation | |
Paffenholz et al. | Direct geo-referencing of a static terrestrial laser scanner | |
US11994466B2 (en) | Methods and systems for identifying material composition of moving objects | |
Lai et al. | See and avoid using onboard computer vision | |
Mango et al. | Hazard detection and landing site selection for planetary exploration using LIDAR | |
Jasiobedzki et al. | Autonomous satellite rendezvous and docking using LIDAR and model based vision | |
Ruel et al. | 3DLASSO: Real-time pose estimation from 3D data for autonomous satellite servicing | |
CN112581610B (zh) | 从多波束声呐数据中建立地图的鲁棒优化方法和系统 | |
Soloviev et al. | Three-dimensional navigation with scanning ladars: concept & initial verification | |
Ye et al. | Model-based offline vehicle tracking in automotive applications using a precise 3D model | |
Opromolla et al. | Spaceborne LIDAR-based system for pose determination of uncooperative targets | |
WO2017007527A9 (en) | Three dimensional direction finder with one dimensional sensor array | |
Opromolla et al. | PCA‐Based Line Detection from Range Data for Mapping and Localization‐Aiding of UAVs | |
US10330769B1 (en) | Method and apparatus for geolocating emitters in a multi-emitter environment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210305 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211214 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20220314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220512 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220607 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220705 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7101535 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |