CN110703268A - 一种自主定位导航的航线规划方法和装置 - Google Patents
一种自主定位导航的航线规划方法和装置 Download PDFInfo
- Publication number
- CN110703268A CN110703268A CN201911076744.0A CN201911076744A CN110703268A CN 110703268 A CN110703268 A CN 110703268A CN 201911076744 A CN201911076744 A CN 201911076744A CN 110703268 A CN110703268 A CN 110703268A
- Authority
- CN
- China
- Prior art keywords
- aerial vehicle
- unmanned aerial
- point
- matching
- relative movement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/933—Lidar systems specially adapted for specific applications for anti-collision purposes of aircraft or spacecraft
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Aviation & Aerospace Engineering (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
本申请公开了一种自主定位导航的航线规划方法和装置,通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,获取不同时刻的点云数据之后,进行特征点提取和匹配处理,通过SLAM算法推算无人机航迹,根据无人机航迹与预置导线的位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏,解决了现有的无人机航空摄影测量技术需要按照预设飞行航线进行拍摄测量,在基准站和流动站通讯中断时,无人机航迹将发生偏移,影响航迹数据的拍摄质量的技术问题。
Description
技术领域
本申请涉及自主导航技术领域,尤其涉及一种自主定位导航的航线规划方法和装置。
背景技术
航空摄影测量技术主要是通过遥感技术对无人机进行控制操作,无人机飞到需要测量的地域,通过已有的航线对航迹轨迹两边进行摄影测绘,绘制出地形图的作业。
目前的航空摄影测量过程中,无人机需要通过提前预设飞行航线执行任务航线,在给定的航线轨迹GPS定位检测地理位置进行航线的拍摄。使用RTK技术进行定位时,需要通过一个安装在地面的基准站和一个安装在无人机上的流动站,根据实时差分GPS可以实现厘米级定位,但是RTK技术实现需要一直保持基准站和流动站的数据交换,无人机在复杂地形中巡航时,难以保持基准站和流动站的通讯,往往会出现基准站和流动站的通讯中断,定位精度会下降,无人机航迹将发生偏移,影响航迹数据的拍摄质量。
发明内容
本申请实施例提供了一种自主定位导航的航线规划方法和装置,解决了现有的无人机航空摄影测量技术需要按照预设飞行航线进行拍摄测量,在基准站和流动站通讯中断时,无人机航迹将发生偏移,影响航迹数据的拍摄质量的技术问题。
有鉴于此,本申请第一方面提供了一种自主定位导航的航线规划方法,包括:
通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取所述无人机不同时刻的点云数据;
将不同时刻的所述点云数据结合所述位置距离数据进行特征点提取和匹配处理,得到所述激光雷达传感器相对运动距离和相对运动姿态;
根据所述激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹;
根据所述无人机航迹,计算所述无人机航迹与预置导线的位移偏差和姿态偏差,根据所述位移偏差和姿态偏差对所述无人机的坐标系进行平移和旋转,实现对所述无人机的航迹纠偏。
优选地,所述通过激光雷达传感器实时获取无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取所述无人机不同时刻的点云数据,之前还包括:
根据预置导线控制无人机飞行至预置坐标位置,调整所述无人机的飞行位姿至预置位姿,所述位姿包括飞行高度和飞行角度。
优选地,所述特征点提取和匹配处理具体包括:
分别对所述点云数据和所述位置距离数据进行LiDAR插值处理,得到两个格网影像的强度波段信息;
分别对所述强度波段信息进行SIFT特征点提取,得到对应的特征向量;
根据所述特征向量通过K-d树进行特征匹配得到匹配点对,根据所述匹配点对得到所述激光雷达传感器相对运动距离和相对运动姿态。
优选地,所述根据所述激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹,具体包括:
根据所述相对运动距离和相对运动姿态建立导线三维空间直角坐标系和无人机三维空间直角坐标系;
根据所述导线三维空间直角坐标系和所述无人机三维空间直角坐标系的相对角位置关系和空间距离平移关系,获取旋转矩阵和平移矩阵,根据所述旋转矩阵和所述平移矩阵,通过预置公式计算无人机航迹。
优选地,所述预置公式为:
Vs=Rvs×Ls+Tvs,
其中,Rvs为相对角位置关系,Tvs为空间距离平移关系,Ls为导线三维空间直角坐标系。
优选地,所述根据所述特征向量通过K-d树进行特征匹配得到匹配点对,根据所述匹配点对得到所述激光雷达传感器相对运动距离和相对运动姿态,之后还包括:
采用RANSAC稳健估计对所述匹配点对进行精化。
优选地,所述特征点提取和匹配处理,还包括:
对所述匹配点对进行连接点跟踪,将具有相同匹配点号的所有匹配点串成完整的连接点链。
优选地,所述对所述匹配点对进行连接点跟踪,将具有相同匹配点号的所有匹配点串成完整的连接点链,之后还包括:对所述连接点进行分类;
所述对所述连接点进行分类具体包括:
获取所述连接点的平面坐标,通过粗糙度分析方法计算所述连接点所处表面的稳定性;
将所述稳定性小于预置阈值的所述连接点的表面区域作为不稳定区域,将所述稳定性大于预置阈值的所述连接点的表面区域作为稳定区域,
将所述稳定区域的所述连接点标记为平高连接点,将所述不稳定区域的所述连接点标记为平面连接点。
优选地,所述根据所述无人机航迹,计算所述无人机航迹与预置导线的位移偏差和姿态偏差,根据所述位移偏差和姿态偏差对所述无人机的坐标系进行平移和旋转,实现对所述无人机的航迹纠偏,之后还包括:将所述无人机拍摄到的局部点云数据进行整合与配准;
所述将所述无人机拍摄到的局部点云数据进行整合与配准,具体包括:
通过迭代最近点法ICP(Iterative Closesl Point)将不同位置的扫描得到的预置容量三维空间数据点集转换到一个统一的坐标系中,完成三维点云数据的配准。
本申请第二方面提供了一种自主定位导航的航线规划装置,包括:
获取单元,用于通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取所述无人机不同时刻的点云数据;
匹配单元,用于将不同时刻的所述点云数据结合所述位置距离数据进行特征点提取和匹配处理,得到所述激光雷达传感器相对运动距离和相对运动姿态;
航迹单元,用于根据所述激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹;
纠偏单元,用于根据所述无人机航迹,计算所述无人机航迹与预置导线的位移偏差和姿态偏差,根据所述位移偏差和姿态偏差对所述无人机的坐标系进行平移和旋转,实现对所述无人机的航迹纠偏。
从以上技术方案可以看出,本申请实施例具有以下优点:
本申请中,提供了一种自主定位导航的航线规划方法,包括:通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取无人机不同时刻的点云数据;将不同时刻的点云数据进行特征点提取和匹配处理,得到激光雷达传感器相对运动距离和相对运动姿态;根据激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹;根据无人机航迹,计算无人机航迹与预置导线的位移偏差和姿态偏差,根据位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏。本申请提供的方法,通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,获取不同时刻的点云数据之后,进行特征点提取和匹配处理,通过SLAM算法推算无人机航迹,根据无人机航迹与预置导线的位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏,解决了现有的无人机航空摄影测量技术需要按照预设飞行航线进行拍摄测量,在基准站和流动站通讯中断时,无人机航迹将发生偏移,影响航迹数据的拍摄质量的技术问题。
附图说明
图1为本申请实施例中的一种自主定位导航的航线规划方法的流程示意图;
图2为本申请实施例中的一种自主定位导航的航线规划方法另一流程示意图;
图3为本申请实施例中的一种自主定位导航的航线规划装置的结构示意图;
图4为本申请实施例中的航迹推算原理示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为了便于理解,请参阅图1,本申请实施例中提供的一种自主定位导航的航线规划方法,包括:
步骤101、通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取无人机不同时刻的点云数据。
需要说明的是,本申请实施例中,在无人机上搭载激光雷达传感器,通过激光雷达传感器进行扫描,能够反馈载体在环境中的精确位置和物体距无人机拍摄点的距离。激光雷达传感器共有16路不同方向的激光器,能获得16路不同方向的点,计算某一方向的点坐标需要该点回波距离、垂直距离、水平角度和转台角度四个参数。位置距离数据可以由IMU和GPS通过惯性导航算法算出,激光雷达传感器也能够实现记录周围激光雷达采集到的物体信息呈现出一系列分散的、具有准确角度和距离信息的点,被称为点云。同时,无人机上搭载拍摄装置和微型电脑装置,通过拍摄装置,如摄像机,来实时获取无人机在不同时刻的点云数据。
步骤102、将不同时刻的点云数据结合位置距离数据进行特征点提取和匹配处理,得到激光雷达传感器相对运动距离和相对运动姿态。
需要说明的是,本申请实施例中,在获取到不同时刻的点云数据之后,可以结合激光雷达传感器扫描得到的电力线路和杆塔的位置距离数据,对点云数据进行特征点提取和特征点匹配处理,从而可以得到激光雷达传感器相对运动距离和相对运动姿态。
步骤103、根据激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹。
需要说明的是,本申请实施例中,激光雷达传感器以预置的频率发射预置幅度的调制光,并测量发射和反向信号之间的相移,调制信号的波长为lamda=c/f,其中c是光速,f是调制频率,测量到发射和反射光束之间的相移差theta之后,距离可由lamda*theta/4pi计算得到。先控制机器到达一个位姿,然后再进行观测。本申请实施例中,由控制数据和观测数据(激光雷达传感器获取到的数据)来求机器位姿,这就出现了一个逆向的过程即:先有位姿再得到观测数据,变成了先得到观测数据再来求位姿的过程。也就是需要由结果(观测数据)来反推原因(位姿);因此这里就引入了贝叶斯公式,贝叶斯公式的存在就是为了求解这种由结果反推原因的问题;有了位姿就可以有观测数据计算在这个位置看到的概率。因此就要用贝叶斯公式将逆向的过程转换成正向的过程:
SLAM中的定位问题就变成了下面的公式:
本申请实施例中的航迹推算定位原理如图4所示,图4中,移动机器人从S点出发,且起始点S点的位位置是已知的,则S点时刻的机器人位姿信息是可以测量出来的,假设在t1时段内移动飞机的速度和方向不变,则可以求出t1时刻结束时移动飞机平台运动位子是S1,同理,可以求出S1,…,Sn的位移,最终通过位姿信息矢量合成到达G点的位置。
在推算出无人机航迹之后,可以直接得到无人机与电力线、杆塔的相对位移和相对旋转关系,为无人机航迹规划提供必要的条件。在室内环境中,机器人不能利用全局定位系统进行定位,而事先获取机器人工作环境的地图很困难,甚至是不可能的。SLAM技术使得机器人在自身位置不确定的条件下,经过一系列的位置并且在每一个位置获得传感器对环境的感知信息,在完全未知环境中创建地图,同时利用地图进行自主定位和导航。
步骤104、根据无人机航迹,计算无人机航迹与预置导线的位移偏差和姿态偏差,根据位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏。
需要说明的是,在得到无人机航迹之后,可以将无人机航迹与预置导线进行偏差计算,包括位移偏差和姿态偏差,即得到两者的平移关系和旋转关系,根据平移关系和旋转关系对无人机航迹进行纠偏。本申请实施例中的预置导线,可以是根据目标杆塔坐标构建的悬链线,预置导线的获取过程可以是:计算水平张力,确定抛物线,根据抛物线焦点轨迹确定悬链线,拟合成预置导线;水平张力可以根据以下公式获得:
F0=ay
其中,x和y是杆塔坐标的x坐标和y坐标,L是曲线中某点到坐标原点0的链索长度,α是该点的正切角,F0是0点处的水平张力,γ是链索的单位重量。利用以上公式,可以计算出任意点的水平张力,通过平面内任意3点不共线的特性,可以确定抛物线,沿着一条直线滚动的抛物线,平面内不共线的3点确定一条悬链线,可以拟合成一条预置导线。
本申请实施例中,提供了一种自主定位导航的航线规划方法,包括:通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取无人机不同时刻的点云数据;将不同时刻的两片点云数据进行特征点提取和匹配处理,得到激光雷达传感器相对运动距离和相对运动姿态;根据激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹,得到无人机与电力线、杆塔的相对位移和相对旋转关系;根据无人机航迹,计算无人机航迹与预置导线的位移偏差和姿态偏差,根据位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏。本申请提供的方法,通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,获取不同时刻的点云数据之后,进行特征点提取和匹配处理,通过SLAM算法推算无人机航迹,根据无人机航迹与预置导线的位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏,解决了现有的无人机航空摄影测量技术需要按照预设飞行航线进行拍摄测量,在基准站和流动站通讯中断时,无人机航迹将发生偏移,影响航迹数据的拍摄质量的技术问题。
为了便于理解,请参阅图2,本申请实施例中另一种自主定位导航的航线规划方法,包括:
步骤201、根据预置导线控制无人机飞行至预置坐标位置,调整无人机的飞行位姿至预置位姿,位姿包括飞行高度和飞行角度。
需要说明的是,本申请实施例中,首先需要根据预置导线将无人机飞行至预置坐标位置,调整无人机的飞行高度和飞行角度。
步骤202、获取不同时刻的点云数据和与其对应的位置距离数据,分别对点云数据和位置距离数据进行LiDAR插值处理,得到两个格网影像的强度波段信息。
需要说明的是,原始的LiDAR数据是离散采样的三维点云,具有数据不连续、分布不均匀的缺点,给特征点的提取与定位带来了较大困难。当前发展较为成熟的特征点提取与匹配方法大都是针对光学图像,为了便于借鉴现有研究成果,本申请实施例采用内插的方式,将离散的三维点云转换为规则的格网影像,并在此基础上进行特征点的检测。为了将离散激光点内插成规则的格网影像,需要选择合适的插值方法。现有的插值方法很多,本申请实施例选择能够有效保持地物的几何形态的三角网插值方法。每个激光脚点数据中不仅记录有目标的高程信息,还记录有目标的激光反射强度信息,与高程信息相比强度值反映了地物对近红外激光的反射特性,与传统的光学图像更为接近,更适宜与特征点提取。因此,本申请实施例同时对强度和高程进行插值,得到的格网影像包括两个波段,第一个波段记录的是格网的强度信息,第二个波段记录的是格网的高程信息。
步骤203、分别对强度波段信息进行SIFT特征点提取,得到对应的特征向量。
需要说明的是,本申请实施例中,SIFT特征是一种典型的斑点特征,在图像处理领域已得到了广泛的应用,具有可靠性高、适用性强、对旋转和尺度变化不敏感等显著优势。本申请实施例中利用LiDAR插值影像的强度波段进行SIFT特征点检测,采用子像素插值方式计算特征点的定位坐标,利用强度信息建立特征点的描述向量。
步骤204、根据特征向量通过K-d树进行特征匹配得到匹配点对,根据匹配点对得到激光雷达传感器相对运动距离和相对运动姿态,得到激光雷达传感器相对运动距离和相对运动姿态。
需要说明的是,k-d树(k-维树的缩写)是在k维欧几里德空间组织点的数据结构。本申请实施例中,通过K-d树对特征向量进行特征匹配得到匹配点对,首先通过二叉树搜索(比较待查询节点和分裂节点的分裂维的值,小于等于就进入左子树分支,大于就进入右子树分支直到叶子结点),顺着“搜索路径”很快能找到最近邻的近似点,也就是与待查询点处于同一个子空间的叶子结点;然后再回溯搜索路径,并判断搜索路径上的结点的其他子结点空间中是否可能有距离查询点更近的数据点,如果有可能,则需要跳到其他子结点空间中去搜索(将其他子结点加入到搜索路径)。重复这个过程直到搜索路径为空。
步骤205、采用RANSAC稳健估计对匹配点对进行精化。
需要说明的是,由于初始匹配点中难以避免的存在误匹配,采用RANSAC稳健估计的方法,对初始匹配点进行精化。RANSAC估计时需要为inliers选择合适的数学模型,由于LiDAR条带之间的变形可以用仿射变换来粗略近似,采用仿射变换模型作为RANSAC挑点时的约束条件。
步骤206、对匹配点对进行连接点跟踪,将具有相同匹配点号的所有匹配点串成完整的连接点链。
需要说明的是,通过上述步骤可获得LiDAR条带两两之间的匹配点对。为了将各条带上的同名点链接起来,需要进行连接点跟踪。将所有特征点按像片号和特征点号进行编码,如第一张像片上的第一个特征点编码为1000001,第二张像片上的第2个特征点编码为2000002。对所有匹配点按像片号进行排序,并按逆序对匹配点进行追踪,就可将具有相同匹配点号的所有匹配点串成一个完整的连接点链。对匹配点对进行连接点跟踪,将具有相同匹配点号的所有匹配点串成完整的连接点链,可以为后期建模精细化,建模图形连贯与完整,防止建模中出现断裂、偏移或者扭曲等现象。
步骤207、对连接点进行分类。
对连接点进行分类的过程可以是:
a)获取连接点的平面坐标,通过粗糙度分析方法计算连接点所处表面的稳定性;
b)将稳定性小于预置阈值的连接点的表面区域作为不稳定区域,将稳定性大于预置阈值的连接点的表面区域作为稳定区域;
c)将稳定区域的连接点标记为平高连接点,将不稳定区域的连接点标记为平面连接点。
需要说明的是,从强度影像上提取的连接点仅考虑了辐射特征,没有顾及几何特性,造成许多连接点可能位于植被,建筑物边缘等表面不稳定区域。通过连接点的平面坐标可以在高程波段中取出其高程值,但高程值是通过三角形内插得到的,在不稳定区域上的连接点,其高程是不可靠。本申请实施例利用粗糙度分析的方法,考察连接点所处表面的稳定性,计算以连接点为圆心,指定半径内的激光点高程的均方根误差,并以此为标准判断表面的稳定性(误差小于阈值)。将处于稳定区域的连接点标记为平高连接点,意味着平差时连接点的三个坐标都可以参与计算;处理不稳定区域的连接点标记为平面连接点,即平差时只有平面坐标可以参与计算。
步骤208、根据相对运动距离和相对运动姿态建立导线三维空间直角坐标系和无人机三维空间直角坐标系。
需要说明的是,根据点的曲率c和点云密度来将部分点集划分为不同的类别导线,一般曲率较大的特征为导线特征,识别导线的这一过程为扫描匹配。通过读取点云中特征导线的三维空间坐标建立导线三维空间直角坐标系,建立无人机三维空间直角坐标系,从导线三维空间直角坐标系到无人机三维空间直角坐标系有一个相对角位置关系RPY角和空间距离平移关系。
步骤209、根据导线三维空间直角坐标系和无人机三维空间直角坐标系的相对角位置关系和空间距离平移关系,获取旋转矩阵和平移矩阵,根据旋转矩阵和平移矩阵,通过预置公式计算无人机航迹。
进一步地,预置公式为Vs=Rvs×Ls+Tvs,Es=Rev×Vs+Tev。
其中,Rvs为相对角位置关系,Tvs为空间距离平移关系,Ls为导线三维空间直角坐标系,Vs为无人机三维空间直角坐标系,Es为预期无人机位置坐标系,Rev为Es与Ls相对角位置,Tev为Es与Ls空间距离平移关系。
RPY角起源于描绘航船的姿态,第一个是绕船前进的方向x轴方向的roll转角Φ,第二个是绕水平y轴方向的Pitch角θ,第三个是绕铅锤z方向的Yaw角β。RPY法中的x,y,z三轴是原坐标系的三轴。对于旋转矩阵,假设Pa为原坐标系,坐标系经过绕RPY角一定顺序旋转到新坐标系Pb则旋转矩阵Rab关系式为:Pa=Rab×Pb,对于平移矩阵,假设Pa为原坐标系,坐标系沿xyz方向平移平移到新坐标系Pb则平移矩阵Tab关系式为:Pa=Pb+Tab。则,可以通过旋转矩阵和平移矩阵得到无人机三维空间直角坐标系,通过预置公式Vs=Rvs×Ls+Tvs解算出导线与无人机的相对角位置关系Rvs和空间位置距离Tvs,同理得到Es=Rev×Vs+Tev,通过上述两个公式即可以得到无人机当前位置与预期位置旋转角位置关系与空间平移关系,可以进行航线的校准。
步骤210、根据无人机航迹,计算无人机航迹与预置导线的位移偏差和姿态偏差,根据位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏。
需要说明的是,在得到无人机航迹之后,可以计算无人机航迹与预置导线的位移偏差和姿态偏差,根据位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏。可以根据无人机三维空间直角坐标系建立预期无人机位置三维空间直角坐标系(Es),则有,Es=Rev×Vs+Tev,解算出无人机三维空间直角坐标系与预期坐标系的旋转矩阵Rev和平移矩阵Tev来实现最佳航线的配准。
步骤211、将无人机拍摄到的局部点云数据进行整合与配准。
将无人机拍摄到的局部点云数据进行整合与配准,具体包括:
通过迭代最近点法ICP(Iterative Closesl Point)将不同位置的扫描得到的预置容量三维空间数据点集转换到一个统一的坐标系中,完成三维点云数据的配准。
需要说明的是,为了得到物体表面完整的点云数据,需要对这些局部点云数据进行整合和配准。因此,在得到点云数据之后,为了得到三维模型的原始曲面,必须要将不同角度,不同位置的扫描得到的预置容量(大于300万点云)三维空间数据点集转换到一个统一的坐标系中,该技术称之为数据缝合,即三维点云数据的配准。点云配准是点云数据获取后的第一步处理,也是所有后续的处理的基础。因此,配准的精度将直接关系到建模精度。
根据各种形式的点云数据提出一种点集与点集的匹配算法通过实践证明是一个解决复杂配准问题的关键方法。也就是迭代最近点法ICP(IterativeClosesl Point),这是一种高层次的基于自由形态曲面的配准方法,能够将不同位置的扫描得到的预置容量三维空间数据点集转换到一个统一的坐标系中。
为了便于理解,请参阅图3,本申请实施例提供了一种自主定位导航的航线规划装置,包括:
获取单元301,用于通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取无人机不同时刻的点云数据。
匹配单元302,用于将不同时刻的两片点云数据结合位置距离数据进行特征点提取和匹配处理,得到激光雷达传感器相对运动距离和相对运动姿态。
航迹单元303,用于根据激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹,得到无人机与电力线、杆塔的相对位移和相对旋转关系。
纠偏单元304,用于根据无人机航迹,计算无人机航迹与预置导线的位移偏差和姿态偏差,根据位移偏差和姿态偏差对无人机的坐标系进行平移和旋转,实现对无人机的航迹纠偏。
飞行单元305,用于根据预置导线控制无人机飞行至预置坐标位置,调整无人机的飞行位姿至预置位姿,位姿包括飞行高度和飞行角度。
航迹单元303,具体用于根据相对运动距离和相对运动姿态建立导线三维空间直角坐标系和无人机三维空间直角坐标系;根据导线三维空间直角坐标系和无人机三维空间直角坐标系的相对角位置关系和空间距离平移关系,获取旋转矩阵和平移矩阵,根据旋转矩阵和平移矩阵,通过预置公式计算无人机航迹。
配准单元306,用于将无人机拍摄到的局部点云数据进行整合与配准。
配准单元306,具体用于通过迭代最近点法ICP(Iterative Closesl Point)将不同位置的扫描得到的预置容量三维空间数据点集转换到一个统一的坐标系中,完成三维点云数据的配准。
匹配单元302,具体用于获取不同时刻的片点云数据和与其对应的位置距离数据,分别对点云数据和位置距离数据进行LiDAR插值处理,得到两个格网影像的强度波段信息;分别对强度波段信息进行SIFT特征点提取,得到对应的特征向量;根据特征向量通过K-d树进行特征匹配得到匹配点对,根据匹配点对得到激光雷达传感器相对运动距离和相对运动姿态,得到激光雷达传感器相对运动距离和相对运动姿态;采用RANSAC稳健估计对匹配点对进行精化;对匹配点对进行连接点跟踪,将具有相同匹配点号的所有匹配点串成完整的连接点链;对连接点进行分类。
本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(英文全称:Read-OnlyMemory,英文缩写:ROM)、随机存取存储器(英文全称:Random Access Memory,英文缩写:RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (10)
1.一种自主定位导航的航线规划方法,其特征在于,包括:
通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取所述无人机不同时刻的点云数据;
将不同时刻的所述点云数据结合所述位置距离数据进行特征点提取和匹配处理,得到所述激光雷达传感器相对运动距离和相对运动姿态;
根据所述激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹;
根据所述无人机航迹,计算所述无人机航迹与预置导线的位移偏差和姿态偏差,根据所述位移偏差和姿态偏差对所述无人机的坐标系进行平移和旋转,实现对所述无人机的航迹纠偏。
2.根据权利要求1所述的自主定位导航的航线规划方法,其特征在于,所述通过激光雷达传感器实时获取无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取所述无人机不同时刻的点云数据,之前还包括:
根据预置导线控制无人机飞行至预置坐标位置,调整所述无人机的飞行位姿至预置位姿,所述位姿包括飞行高度和飞行角度。
3.根据权利要求1所述的自主定位导航的航线规划方法,其特征在于,所述特征点提取和匹配处理具体包括:
分别对所述点云数据和所述位置距离数据进行LiDAR插值处理,得到两个格网影像的强度波段信息;
分别对所述强度波段信息进行SIFT特征点提取,得到对应的特征向量;
根据所述特征向量通过K-d树进行特征匹配得到匹配点对,根据所述匹配点对得到所述激光雷达传感器相对运动距离和相对运动姿态。
4.根据权利要求1所述的自主定位导航的航线规划方法,其特征在于,所述根据所述激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹,具体包括:
根据所述相对运动距离和相对运动姿态建立导线三维空间直角坐标系和无人机三维空间直角坐标系;
根据所述导线三维空间直角坐标系和所述无人机三维空间直角坐标系的相对角位置关系和空间距离平移关系,获取旋转矩阵和平移矩阵,根据所述旋转矩阵和所述平移矩阵,通过预置公式计算无人机航迹。
5.根据权利要求1所述的自主定位导航的航线规划方法,其特征在于,所述预置公式为:
Vs=Rvs×Ls+Tvs
Es=Rev×Vs+Tev
其中,Rvs为相对角位置关系,Tvs为空间距离平移关系,Ls为导线三维空间直角坐标系,Es为预期无人机位置坐标系,Rev为Es与Ls相对角位置,Tev为Es与Ls空间距离平移关系。
6.根据权利要求3所述的自主定位导航的航线规划方法,其特征在于,所述根据所述特征向量通过K-d树进行特征匹配得到匹配点对,根据所述匹配点对得到所述激光雷达传感器相对运动距离和相对运动姿态,之后还包括:
采用RANSAC稳健估计对所述匹配点对进行精化。
7.根据权利要求3或6所述的自主定位导航的航线规划方法,其特征在于,所述特征点提取和匹配处理,还包括:
对所述匹配点对进行连接点跟踪,将具有相同匹配点号的所有匹配点串成完整的连接点链。
8.根据权利要求7所述的自主定位导航的航线规划方法,其特征在于,所述对所述匹配点对进行连接点跟踪,将具有相同匹配点号的所有匹配点串成完整的连接点链,之后还包括:对所述连接点进行分类;
所述对所述连接点进行分类具体包括:
获取所述连接点的平面坐标,通过粗糙度分析方法计算所述连接点所处表面的稳定性;
将所述稳定性小于预置阈值的所述连接点的表面区域作为不稳定区域,将所述稳定性大于预置阈值的所述连接点的表面区域作为稳定区域;
将所述稳定区域的所述连接点标记为平高连接点,将所述不稳定区域的所述连接点标记为平面连接点。
9.根据权利要求1所述的自主定位导航的航线规划方法,其特征在于,所述根据所述无人机航迹,计算所述无人机航迹与预置导线的位移偏差和姿态偏差,根据所述位移偏差和姿态偏差对所述无人机的坐标系进行平移和旋转,实现对所述无人机的航迹纠偏,之后还包括:将所述无人机拍摄到的局部点云数据进行整合与配准;
所述将所述无人机拍摄到的局部点云数据进行整合与配准,具体包括:
通过迭代最近点法ICP将不同位置的扫描得到的预置容量三维空间数据点集转换到一个统一的坐标系中,完成三维点云数据的配准。
10.一种自主定位导航的航线规划装置,其特征在于,包括:
获取单元,用于通过激光雷达传感器实时获取飞行过程中无人机与电力线、杆塔的位置距离数据,通过拍摄装置实时获取所述无人机不同时刻的点云数据;
匹配单元,用于将不同时刻的两片所述点云数据结合所述位置距离数据进行特征点提取和匹配处理,得到所述激光雷达传感器相对运动距离和相对运动姿态;
航迹单元,用于根据所述激光雷达传感器相对运动距离和相对运动姿态通过SLAM算法推算无人机航迹;
纠偏单元,用于根据所述无人机航迹,计算所述无人机航迹与预置导线的位移偏差和姿态偏差,根据所述位移偏差和姿态偏差对所述无人机的坐标系进行平移和旋转,实现对所述无人机的航迹纠偏。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911076744.0A CN110703268B (zh) | 2019-11-06 | 2019-11-06 | 一种自主定位导航的航线规划方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911076744.0A CN110703268B (zh) | 2019-11-06 | 2019-11-06 | 一种自主定位导航的航线规划方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110703268A true CN110703268A (zh) | 2020-01-17 |
CN110703268B CN110703268B (zh) | 2022-02-15 |
Family
ID=69204438
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911076744.0A Active CN110703268B (zh) | 2019-11-06 | 2019-11-06 | 一种自主定位导航的航线规划方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110703268B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111552319A (zh) * | 2020-05-18 | 2020-08-18 | 广东电网有限责任公司 | 一种架空输电线路导线跟踪巡视方法及相关装置 |
CN111857168A (zh) * | 2020-07-03 | 2020-10-30 | 北京二郎神科技有限公司 | 无人机定位方法、装置与无人机停放姿态调整方法、装置 |
CN112230676A (zh) * | 2020-10-21 | 2021-01-15 | 中国南方电网有限责任公司超高压输电公司大理局 | 一种无人机飞行航线矫正系统、方法及相关装置 |
CN112270320A (zh) * | 2020-11-16 | 2021-01-26 | 云南电网有限责任公司昆明供电局 | 一种基于卫星影像校正的输电线路杆塔坐标校准方法 |
CN113253290A (zh) * | 2021-04-26 | 2021-08-13 | 国网天津市电力公司 | 一种无人机巡检航线模板匹配方法 |
CN113296121A (zh) * | 2021-05-26 | 2021-08-24 | 广东电网有限责任公司 | 基于机载激光雷达的辅助导航系统、方法、介质和设备 |
CN113296537A (zh) * | 2021-05-25 | 2021-08-24 | 湖南博瑞通航航空技术有限公司 | 基于电力杆塔模型匹配的电力无人机巡检方法及系统 |
CN113985436A (zh) * | 2021-11-04 | 2022-01-28 | 广州中科云图智能科技有限公司 | 基于slam的无人机三维地图构建与定位方法及装置 |
CN114215704A (zh) * | 2021-12-14 | 2022-03-22 | 复亚智能科技(太仓)有限公司 | 一种发电风机桨叶图像采集装置、方法及存储介质 |
WO2022227097A1 (zh) * | 2021-04-30 | 2022-11-03 | 深圳市大疆创新科技有限公司 | 无人机的航线规划方法、装置、设备、系统及存储介质 |
CN116358553A (zh) * | 2023-03-24 | 2023-06-30 | 广东数字生态科技有限责任公司 | 一种无人机航迹优化方法、装置以及无人机控制系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105159297A (zh) * | 2015-09-11 | 2015-12-16 | 南方电网科学研究院有限责任公司 | 输电线路无人机巡检避障系统与方法 |
CN105759829A (zh) * | 2016-04-12 | 2016-07-13 | 深圳市龙云创新航空科技有限公司 | 基于激光雷达的微型无人机操控方法及系统 |
CN106125092A (zh) * | 2016-08-08 | 2016-11-16 | 成都希德电子信息技术有限公司 | 一种基于二维激光雷达的无人机自动避障系统及方法 |
CN106441151A (zh) * | 2016-09-30 | 2017-02-22 | 中国科学院光电技术研究所 | 一种基于视觉和主动光学融合的三维目标欧式空间重建的测量系统 |
CN106647790A (zh) * | 2016-12-27 | 2017-05-10 | 重庆大学 | 面向复杂环境的四旋翼无人机飞行器系统及飞行方法 |
CN109885098A (zh) * | 2019-04-11 | 2019-06-14 | 株洲时代电子技术有限公司 | 一种桥梁边栏巡检航线规划方法 |
-
2019
- 2019-11-06 CN CN201911076744.0A patent/CN110703268B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105159297A (zh) * | 2015-09-11 | 2015-12-16 | 南方电网科学研究院有限责任公司 | 输电线路无人机巡检避障系统与方法 |
CN105759829A (zh) * | 2016-04-12 | 2016-07-13 | 深圳市龙云创新航空科技有限公司 | 基于激光雷达的微型无人机操控方法及系统 |
CN106125092A (zh) * | 2016-08-08 | 2016-11-16 | 成都希德电子信息技术有限公司 | 一种基于二维激光雷达的无人机自动避障系统及方法 |
CN106441151A (zh) * | 2016-09-30 | 2017-02-22 | 中国科学院光电技术研究所 | 一种基于视觉和主动光学融合的三维目标欧式空间重建的测量系统 |
CN106647790A (zh) * | 2016-12-27 | 2017-05-10 | 重庆大学 | 面向复杂环境的四旋翼无人机飞行器系统及飞行方法 |
CN109885098A (zh) * | 2019-04-11 | 2019-06-14 | 株洲时代电子技术有限公司 | 一种桥梁边栏巡检航线规划方法 |
Non-Patent Citations (1)
Title |
---|
黄鹤 等: "SLAM技术及其在测绘领域中的应用", 《测绘通报》 * |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111552319A (zh) * | 2020-05-18 | 2020-08-18 | 广东电网有限责任公司 | 一种架空输电线路导线跟踪巡视方法及相关装置 |
CN111552319B (zh) * | 2020-05-18 | 2023-03-28 | 广东电网有限责任公司 | 一种架空输电线路导线跟踪巡视方法及相关装置 |
CN111857168A (zh) * | 2020-07-03 | 2020-10-30 | 北京二郎神科技有限公司 | 无人机定位方法、装置与无人机停放姿态调整方法、装置 |
CN112230676B (zh) * | 2020-10-21 | 2022-05-13 | 中国南方电网有限责任公司超高压输电公司大理局 | 一种无人机飞行航线矫正系统、方法及相关装置 |
CN112230676A (zh) * | 2020-10-21 | 2021-01-15 | 中国南方电网有限责任公司超高压输电公司大理局 | 一种无人机飞行航线矫正系统、方法及相关装置 |
CN112270320A (zh) * | 2020-11-16 | 2021-01-26 | 云南电网有限责任公司昆明供电局 | 一种基于卫星影像校正的输电线路杆塔坐标校准方法 |
CN112270320B (zh) * | 2020-11-16 | 2023-08-22 | 云南电网有限责任公司昆明供电局 | 一种基于卫星影像校正的输电线路杆塔坐标校准方法 |
CN113253290B (zh) * | 2021-04-26 | 2023-04-28 | 国网天津市电力公司 | 一种无人机巡检航线模板匹配方法 |
CN113253290A (zh) * | 2021-04-26 | 2021-08-13 | 国网天津市电力公司 | 一种无人机巡检航线模板匹配方法 |
WO2022227097A1 (zh) * | 2021-04-30 | 2022-11-03 | 深圳市大疆创新科技有限公司 | 无人机的航线规划方法、装置、设备、系统及存储介质 |
CN113296537A (zh) * | 2021-05-25 | 2021-08-24 | 湖南博瑞通航航空技术有限公司 | 基于电力杆塔模型匹配的电力无人机巡检方法及系统 |
CN113296537B (zh) * | 2021-05-25 | 2024-03-12 | 湖南博瑞通航航空技术有限公司 | 基于电力杆塔模型匹配的电力无人机巡检方法及系统 |
CN113296121A (zh) * | 2021-05-26 | 2021-08-24 | 广东电网有限责任公司 | 基于机载激光雷达的辅助导航系统、方法、介质和设备 |
CN113985436A (zh) * | 2021-11-04 | 2022-01-28 | 广州中科云图智能科技有限公司 | 基于slam的无人机三维地图构建与定位方法及装置 |
CN114215704A (zh) * | 2021-12-14 | 2022-03-22 | 复亚智能科技(太仓)有限公司 | 一种发电风机桨叶图像采集装置、方法及存储介质 |
CN116358553A (zh) * | 2023-03-24 | 2023-06-30 | 广东数字生态科技有限责任公司 | 一种无人机航迹优化方法、装置以及无人机控制系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110703268B (zh) | 2022-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110703268B (zh) | 一种自主定位导航的航线规划方法和装置 | |
JP7398506B2 (ja) | ローカライゼーション基準データを生成及び使用する方法及びシステム | |
Dellenbach et al. | Ct-icp: Real-time elastic lidar odometry with loop closure | |
CN112014857B (zh) | 用于智能巡检的三维激光雷达定位导航方法及巡检机器人 | |
US10878243B2 (en) | Method, device and apparatus for generating electronic map, storage medium, and acquisition entity | |
CN109813335B (zh) | 数据采集系统的标定方法、装置、系统及存储介质 | |
Hebel et al. | Simultaneous calibration of ALS systems and alignment of multiview LiDAR scans of urban areas | |
JP6432825B2 (ja) | 3次元点群データの位置合わせ方法と装置及びその移動体システム | |
Kunz et al. | Map building fusing acoustic and visual information using autonomous underwater vehicles | |
JP2013171455A (ja) | 地図情報生成装置 | |
CN114413909A (zh) | 一种室内移动机器人定位方法及系统 | |
Beall et al. | Bundle adjustment in large-scale 3d reconstructions based on underwater robotic surveys | |
CN111273312A (zh) | 一种智能车辆定位与回环检测方法 | |
CN110764110A (zh) | 路径导航方法、装置及计算机可读存储介质 | |
CN116753945A (zh) | 一种基于多传感器融合的工业巡检机器人的导航方法 | |
Gu et al. | An intensity-independent stereo registration method of push-broom hyperspectral scanner and LiDAR on UAV platforms | |
CN108876862A (zh) | 一种非合作目标点云位置姿态计算方法 | |
Ma et al. | RoLM: Radar on LiDAR map localization | |
Khezrabad et al. | A new approach for geometric correction of UAV-based pushbroom images through the processing of simultaneously acquired frame images | |
Guerrero et al. | Towards LIDAR-RADAR based terrain mapping | |
Ren et al. | Optimal camera focal length detection method for GPS-supported bundle adjustment in UAV photogrammetry | |
US12086925B2 (en) | Targetless tracking of measurement device during capture of surrounding data | |
KR102506411B1 (ko) | 차량의 위치 및 자세 추정 방법, 장치 및 이를 위한 기록매체 | |
US11514597B1 (en) | Single-camera stereoaerophotogrammetry using UAV sensors | |
CN115019167A (zh) | 基于移动终端的融合定位方法、系统、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |