CN113052916A - 一种利用特制标定物的激光雷达与相机联合标定方法 - Google Patents

一种利用特制标定物的激光雷达与相机联合标定方法 Download PDF

Info

Publication number
CN113052916A
CN113052916A CN202110294711.4A CN202110294711A CN113052916A CN 113052916 A CN113052916 A CN 113052916A CN 202110294711 A CN202110294711 A CN 202110294711A CN 113052916 A CN113052916 A CN 113052916A
Authority
CN
China
Prior art keywords
camera
calibration object
laser radar
regular tetrahedron
areas
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110294711.4A
Other languages
English (en)
Inventor
王珏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dilu Technology Co Ltd
Original Assignee
Dilu Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dilu Technology Co Ltd filed Critical Dilu Technology Co Ltd
Priority to CN202110294711.4A priority Critical patent/CN113052916A/zh
Publication of CN113052916A publication Critical patent/CN113052916A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/497—Means for monitoring or calibrating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10032—Satellite or aerial image; Remote sensing
    • G06T2207/10044—Radar image

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

本发明公开了一种利用特制标定物的激光雷达与相机联合标定方法，利用独特设计的标定物，通过已知的点云数据来求解出与相机中点对应的空间点，简单、快速、准确地进行激光雷达与相机的联合标定，提升了标定精度，解决了激光雷达角分辨率不足的问题，并且操作简单，易于实现。

Description

一种利用特制标定物的激光雷达与相机联合标定方法
技术领域
本发明属于激光雷达技术领域，特别涉及了一种激光雷达与相机联合标定方法。
背景技术
目前，激光雷达在智能驾驶领域使用率越来越高，是自动驾驶的行业趋势之一。激光雷达的优点在于，其探测距离较远，而且能够准确获取物体的三维信息；另外它的稳定性相当高，鲁棒性好。但激光雷达成本较高，且对于障碍物的分类只能进行大类的区分，无法细分。基于单一传感器存在的缺陷，将激光雷达与相机进行融合，既发挥了两者各自的优势，又能够互相弥补各自的不足，是自动驾驶领域的重点研究方向之一。
激光雷达与相机融合时需要进行联合标定，但是由于激光雷达角分辨率低，在联合标定时难以精确寻找到标定图案的关键点，从而给标定带来误差。
发明内容
为了解决上述背景技术提到的技术问题，本发明提出了一种利用特制标定物的激光雷达与相机联合标定方法。
为了实现上述技术目的，本发明的技术方案为：
一种利用特制标定物的激光雷达与相机联合标定方法，所述特制标定物包括底板和正四面体，正四面体的棱长已知，将正四面体放置在底板上，将正四面体的3个侧面设为区域1,2,3，将底板设为区域4，且4个区域涂有不同红外反射率的涂料；所述激光雷达与相机联合标定方法的步骤如下：
（1）通过激光雷达拍摄特制标定物的点云图，通过相机拍摄特制标定物的图像；
（2）在点云图中区分出特制标定物上4个区域的点云点，在相机图像中获得正四面体4个顶点的图像像素坐标；
（3）根据特制标定物上4个区域的点云计算出4个区域各自在激光雷达坐标系中的空间平面方程；
（4）利用特制标定物上4个区域的空间平面方程求得正四面体各条棱的空间直线方程，利用各条棱的空间直线方程和棱长求出正四面体4个顶点的空间坐标；
（5）根据步骤（2）得到的正四面体4个顶点的图像像素坐标和步骤（4）得到的正四面体4个顶点的空间坐标，求出激光雷达与相机的外参关系。
进一步地，在步骤（2）中，通过手动方式区分出特制标定物上4个区域的点云点，或者通过程序根据不同区域的反射强度自动区分出特制标定物上4个区域的点云点。
进一步地，在步骤（2）中，通过手动方式在相机图像中获得正四面体4个顶点的图像像素坐标，或者利用视觉检测算法自动相机图像中获得正四面体4个顶点的图像像素坐标。
进一步地，在步骤（5）中，采用PnP问题求解法求出激光雷达与相机的外参关系。
进一步地，采用opencv中的solvepnp函数求出激光雷达与相机的外参关系。
采用上述技术方案带来的有益效果：
本发明利用独特设计的标定物，通过已知的点云数据来求解出与相机中点对应的空间点，简单、快速、准确地进行激光雷达与相机的联合标定，提升了标定精度，解决了激光雷达角分辨率不足的问题，并且操作简单，易于实现。
附图说明
图1是本发明设计的特制标定物示意图；
图2是本发明的方法流程图。
具体实施方式
以下将结合附图，对本发明的技术方案进行详细说明。
本发明首先提出了一种特制的标定物，如图1所示，特制标定物包括底板和正四面体，正四面体的棱长已知，将正四面体放置在底板上，将正四面体的3个侧面设为区域1,2,3，将底板设为区域4，且4个区域涂有不同红外反射率的涂料。
本发明基于上述特制标定物，提出了利用特制标定物的激光雷达与相机联合标定方法，如图2所示，步骤如下：
步骤1：通过激光雷达拍摄特制标定物的点云图，通过相机拍摄特制标定物的图像；
步骤2：在点云图中区分出特制标定物上4个区域的点云点，在相机图像中获得正四面体4个顶点的图像像素坐标；
步骤3：根据特制标定物上4个区域的点云计算出4个区域各自在激光雷达坐标系中的空间平面方程；
步骤4：利用特制标定物上4个区域的空间平面方程求得正四面体各条棱的空间直线方程，利用各条棱的空间直线方程和棱长求出正四面体4个顶点的空间坐标；
步骤5：根据步骤2得到的正四面体4个顶点的图像像素坐标和步骤4得到的正四面体4个顶点的空间坐标，求出激光雷达与相机的外参关系。
在本实施例中，优选地，在步骤2中，通过手动方式区分出特制标定物上4个区域的点云点，或者通过程序根据不同区域的反射强度自动区分出特制标定物上4个区域的点云点。
在本实施例中，优选地，在步骤2中，通过手动方式在相机图像中获得正四面体4个顶点的图像像素坐标，或者利用视觉检测算法自动相机图像中获得正四面体4个顶点的图像像素坐标。
在本实施例中，优选地，在步骤5中，采用PnP问题求解法求出激光雷达与相机的外参关系。具体地，可以采用opencv中的solvepnp函数求出激光雷达与相机的外参关系。
实施例仅为说明本发明的技术思想，不能以此限定本发明的保护范围，凡是按照本发明提出的技术思想，在技术方案基础上所做的任何改动，均落入本发明保护范围之内。

Claims (5)

1.一种利用特制标定物的激光雷达与相机联合标定方法，其特征在于：所述特制标定物包括底板和正四面体，正四面体的棱长已知，将正四面体放置在底板上，将正四面体的3个侧面设为区域1,2,3，将底板设为区域4，且4个区域涂有不同红外反射率的涂料；所述激光雷达与相机联合标定方法的步骤如下：
（1）通过激光雷达拍摄特制标定物的点云图，通过相机拍摄特制标定物的图像；
（2）在点云图中区分出特制标定物上4个区域的点云点，在相机图像中获得正四面体4个顶点的图像像素坐标；
（3）根据特制标定物上4个区域的点云计算出4个区域各自在激光雷达坐标系中的空间平面方程；
（4）利用特制标定物上4个区域的空间平面方程求得正四面体各条棱的空间直线方程，利用各条棱的空间直线方程和棱长求出正四面体4个顶点的空间坐标；
（5）根据步骤（2）得到的正四面体4个顶点的图像像素坐标和步骤（4）得到的正四面体4个顶点的空间坐标，求出激光雷达与相机的外参关系。
2.根据权利要求1所述利用特制标定物的激光雷达与相机联合标定方法，其特征在于：在步骤（2）中，通过手动方式区分出特制标定物上4个区域的点云点，或者通过程序根据不同区域的反射强度自动区分出特制标定物上4个区域的点云点。
3.根据权利要求1所述利用特制标定物的激光雷达与相机联合标定方法，其特征在于：在步骤（2）中，通过手动方式在相机图像中获得正四面体4个顶点的图像像素坐标，或者利用视觉检测算法自动相机图像中获得正四面体4个顶点的图像像素坐标。
4.根据权利要求1所述利用特制标定物的激光雷达与相机联合标定方法，其特征在于：在步骤（5）中，采用PnP问题求解法求出激光雷达与相机的外参关系。
5.根据权利要求4所述利用特制标定物的激光雷达与相机联合标定方法，其特征在于：采用opencv中的solvepnp函数求出激光雷达与相机的外参关系。
CN202110294711.4A 2021-03-19 2021-03-19 一种利用特制标定物的激光雷达与相机联合标定方法 Withdrawn CN113052916A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110294711.4A CN113052916A (zh) 2021-03-19 2021-03-19 一种利用特制标定物的激光雷达与相机联合标定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110294711.4A CN113052916A (zh) 2021-03-19 2021-03-19 一种利用特制标定物的激光雷达与相机联合标定方法

Publications (1)

Publication Number Publication Date
CN113052916A true CN113052916A (zh) 2021-06-29

Family

ID=76513563

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110294711.4A Withdrawn CN113052916A (zh) 2021-03-19 2021-03-19 一种利用特制标定物的激光雷达与相机联合标定方法

Country Status (1)

Country Link
CN (1) CN113052916A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113888652A (zh) * 2021-10-22 2022-01-04 智能移动机器人(中山)研究院 4d毫米波雷达与热感相机的内外参自动标定技术
CN117830438A (zh) * 2024-03-04 2024-04-05 数据堂（北京）科技股份有限公司 一种基于特定标志物的激光雷达与相机联合标定方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113888652A (zh) * 2021-10-22 2022-01-04 智能移动机器人(中山)研究院 4d毫米波雷达与热感相机的内外参自动标定技术
CN117830438A (zh) * 2024-03-04 2024-04-05 数据堂（北京）科技股份有限公司 一种基于特定标志物的激光雷达与相机联合标定方法

Similar Documents

Publication Publication Date Title
CN108020825B (zh) 激光雷达、激光摄像头、视频摄像头的融合标定系统及方法
CN103424112B (zh) 一种基于激光平面辅助的运动载体视觉导航方法
CN111754583A (zh) 一种车载三维激光雷达和相机外参联合标定的自动化方法
CN111815716A (zh) 一种参数标定方法及相关装置
CN111208493B (zh) 一种车载激光雷达在整车坐标系下的快速标定方法
CN113052916A (zh) 一种利用特制标定物的激光雷达与相机联合标定方法
CN112346453A (zh) 机器人自动回充方法、装置、机器人和存储介质
CN108692656B (zh) 一种激光扫描数据获取方法及装置
CN110827358A (zh) 一种应用于自动驾驶汽车的相机标定方法
CN113205563B (zh) 一种自动驾驶传感器联合标定靶和标定方法
WO2017098934A1 (ja) レーザ計測システム及びレーザ計測方法
CN112880562A (zh) 一种机械臂末端位姿误差测量方法及系统
CN113325388A (zh) 一种自动驾驶中激光雷达泛光噪点的过滤方法和装置
CN114494075A (zh) 基于三维点云的障碍物识别方法、电子设备和存储介质
CN114066985B (zh) 一种输电线隐患距离的计算方法及终端
CN107765257A (zh) 一种基于反射强度辅助外部校准的激光探测与测量方法
CN113076824B (zh) 车位获取方法、装置、车载终端及存储介质
CN110058263B (zh) 一种车辆行驶过程中的物体定位方法
Wang et al. A survey of extrinsic calibration of lidar and camera
Wang et al. Research on 3D laser scanning technology based on point cloud data acquisition
Meissner et al. Simulation and calibration of infrastructure based laser scanner networks at intersections
CN115824170A (zh) 一种摄影测量与激光雷达融合测量海洋波浪的方法
Weinmann et al. Semi-automatic image-based co-registration of range imaging data with different characteristics
CN115508814A (zh) 相机与激光雷达联合标定方法、装置、介质及机器人
CN114445494A (zh) 一种图像获取和处理方法、图像获取装置及机器人

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20210629

WW01 Invention patent application withdrawn after publication