CN115661245B - 一种基于无人机的大尺度火线瞬时定位方法 - Google Patents

一种基于无人机的大尺度火线瞬时定位方法 Download PDF

Info

Publication number
CN115661245B
CN115661245B CN202211299187.0A CN202211299187A CN115661245B CN 115661245 B CN115661245 B CN 115661245B CN 202211299187 A CN202211299187 A CN 202211299187A CN 115661245 B CN115661245 B CN 115661245B
Authority
CN
China
Prior art keywords
fire
coordinate system
point
scale
unmanned aerial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211299187.0A
Other languages
English (en)
Other versions
CN115661245A (zh
Inventor
李兴东
牛君豪
黄启超
王扬威
李健
李三平
李丹丹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northeast Forestry University
Original Assignee
Northeast Forestry University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northeast Forestry University filed Critical Northeast Forestry University
Priority to CN202211299187.0A priority Critical patent/CN115661245B/zh
Publication of CN115661245A publication Critical patent/CN115661245A/zh
Application granted granted Critical
Publication of CN115661245B publication Critical patent/CN115661245B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A40/00Adaptation technologies in agriculture, forestry, livestock or agroalimentary production
    • Y02A40/10Adaptation technologies in agriculture, forestry, livestock or agroalimentary production in agriculture
    • Y02A40/28Adaptation technologies in agriculture, forestry, livestock or agroalimentary production in agriculture specially adapted for farming

Landscapes

  • Image Processing (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

本发明提供一种基于无人机的大尺度火线瞬时定位方法,属于瞬时大尺度火线定位领域。为解决现有技术中由于单无人机监测范围有限只能用于定位小尺度火线,无法定位大尺度火线;而采用多无人机同步监测大尺度火线需要考虑多无人机之间的协调以及数据之间的拼接,执行过程复杂且设备成本高的问题。本发明通过单个无人机采集大尺度林火边缘处火线,并处理得到火线上离散的火点坐标;构建以温度数据作为驱动因素的林火蔓延模型,将火点坐标、火点温度以及时间值数据代入林火蔓延模型进行计算,最终得到当前时刻火线;同时采用大尺度火线位置修正模型对火线位置进行修正。通过本发明方法的林火蔓延模型可实现对当前时刻瞬时大尺度火线的精准定位。

Description

一种基于无人机的大尺度火线瞬时定位方法
技术领域
本发明涉及瞬时大尺度火线定位技术领域,具体而言,涉及一种基于无人机的大尺度火线瞬时定位方法。
背景技术
森林火灾预防对于国家生态环境保护有着十分重要的影响。森林火灾具有突发性强、破坏性大的特点,如何有效应对大尺度极端火行为等突发事件,已经成为我国实现森林防火治理体系治理能力现代化的重要体现,因此,构建大尺度森林火灾火线瞬时定位平台、开展林火蔓延研究用于进一步改进防火规范和减少损失已成为国内重要发展需求。
当前技术中,针对大尺度火灾主要通过卫星搭建三级定位系统来监测火线。卫星遥感技术覆盖范围广,一景图像即可覆盖完整大尺度火线,执行较为方便,但是其时空分辨率较低,定位精度偏低,无法满足大尺度火线实时精准定位的需求。
随着无人机载传感器技术的发展,通过利用无人机载红外相机获取边缘临界处火线数据进行林火蔓延的模拟得到当前时刻大尺度火线情况对于我国森林火灾数据资源的完善具有非常重要的意义。针对大尺度火灾目前需采用多无人机同步监测火线,多无人机低空监测设备可以满足火线定位的实时性和精度要求,但需要考虑多无人机之间的协调关系以及数据之间的拼接,执行过程较为复杂,且设备成本高。针对大尺度火线的定位,必须考虑无人机飞行时间延迟与火线不断蔓延的情况以提高火线定位的精准度,国内外针对相关方向并未开展深入研究,因此,研究大尺度火线瞬时定位技术,已成为亟待攻坚的技术难题。
目前,亟需一种执行方便、精度较高且将无人机飞行时间延迟与火线不断蔓延事实情况考虑在内的大尺度火线瞬时定位方法。通过该方法能够较为准确的定位火线上火点范围,为灭火后找出起火原因提供可靠信息,为森林火险和森林纵火等领域的损失评估提供依据,及为刑事案件侦查和预防预报等领域提供帮助。
发明内容
本发明要解决的技术问题是:
现有技术中由于单无人机监测范围有限只能用于定位小尺度火线,无法定位大尺度火线;而采用多无人机同步监测大尺度火线需要考虑多无人机之间的协调以及数据之间的拼接,执行过程复杂且设备成本高。
本发明为解决上述技术问题所采用的技术方案:
本发明提供了一种基于无人机的大尺度火线瞬时定位方法,采用单个无人机+林火蔓延模型可实现大尺度火线的精准定位,所述林火蔓延模型主要用于均质大规模、温度上升斜率近似为线性的火场,所述方法包括如下步骤:
步骤一、单个无人机以一定速度沿火灾边缘进行巡航监测,利用无人机载红外相机实时获取t0~tcurrent时刻大尺度林火边缘区域红外图像,并通过红外相机获取红外图像上各处的温度,其中tcurrent为t1、t2、t3......;
步骤二、对大尺度林火边缘区域的红外图像进行处理,以提取图像边缘临界处大尺度火线,再对提取的大尺度火线进行离散化处理,得到离散的火点,并通过坐标变换将火点的像素坐标转换为世界坐标系下的三维坐标;
步骤三、构建以温度数据作为驱动因素的林火蔓延模型,将t0时刻世界坐标系下的火点坐标、火点温度以及t0这个时间值代入所述林火蔓延模型进行计算得到t1时刻火点坐标,再将预测得到的t1时刻火点坐标、无人机采集的t1时刻火点坐标、火点温度以及t1这个时间值代入到所述林火蔓延模型中进行计算得到t2时刻火点坐标,依次进行计算,至得到tcurrent时刻的火点坐标;
步骤四、将得到的tcurrent时刻火点坐标进行拟合以得到平滑的tcurrent时刻火线;
步骤五、构建大尺度火线位置修正模型,对预测得到的tcurrent时刻火线位置进行修正;
步骤六、通过坐标变换将世界坐标系下的tcurrent时刻火线转化为地理坐标系下的GPS坐标火线。
进一步地,所述步骤二中火线提取的具体过程为:
步骤二一,将收集到的红外图像进行直方图均衡化,增强燃烧区域与非燃烧区域的对比度;
步骤二二,将直方图均衡化的红外图像转换成灰度图像;
步骤二三,通过改变阈值迭代法中参数的比重改进阈值迭代选取方法用于选取灰度图像上最为合适的阈值,使用选取的阈值对转换后的灰度图像进行二值化处理;
步骤二四,将步骤二三得到的图像中所有灰度值为1的像素点加入到链表中;
步骤二五,分类链表中的所有像素点,为每个连通区域的集合建立一个新的链表;
步骤二六,统计连通区域链表中包含的像素点数量,通过改变阈值迭代法中参数的比重来改进阈值迭代选取方法选取合适的阈值对连通区域进行去噪;
步骤二七,选取合适的火线轮廓面积作为阈值对火线轮廓进行过滤来消除边缘临界火线内部火线轮廓和火线交叉;
步骤二八,采用形态学算子的细化操作进行边缘细化,减少火线边缘毛刺。
进一步地,所述步骤二中将火点的像素坐标转换为世界坐标系下的三维坐标的过程为:
将无人机的位置定为世界坐标系的原点,令世界坐标系x轴与地理坐标系x轴平行,世界坐标系y轴和地理坐标系y轴平行,使用激光定高可以获取无人机飞行的高度zc
假定已知像素坐标系下火点坐标为(u,v),可通过从像素坐标系转换至相机坐标系,再由相机坐标系转换至世界坐标系这一顺序变化过程将其转换为世界坐标系下的坐标(xw,yw,zw);
像素坐标系转换至相机坐标系通过公式(1)进行:
其中,fx、fy为相机的像素焦距长度,cx、cy为图像主点在像素坐标系下的坐标,xc、yc、zc为相机坐标系下的坐标值,u、v为火点在像素坐标系下的平面二维坐标;
相机坐标系转换至世界坐标系通过公式(2)进行:
其中,右侧第一个矩阵为相机外参矩阵。
进一步地,所述步骤三中的林火蔓延模型的建立过程为:
针对两个相邻时刻处于不同瞬时火线上的火点M和N,其中ti+1时刻N点是ti时刻M点蔓延传播的结果,M点和N点之间的关系反映了林火蔓延,N点具体位置可通过公式(3)、(4)和(5)获取:
式中i∈N,是ti时刻M点处的温度值,单位为K,xN、yN、zN为ti+1时刻N点在世界坐标系下的坐标值,xM、yM、zM为ti时刻M点在世界坐标系下的坐标值,
由式(3)、(4)和(5)分析可得ti时刻在M点处的林火蔓延速度:
采用坡度修正系数、风速修正系数和可燃物类型调节因子对火蔓延速度进行修正:
其中,为修正后火蔓延速度,λwind为风速修正系数,λslope为坡度修正系数,λi表示第i种可燃物的可燃物调节因子的值;
在ti+1时刻N点的坐标为(xN,yN,zN)T,其对应ti时刻M点的坐标为(xM,yM,zM)T
(xN,yN,zN)T与(xM,yM,zM)T之间的关系为:
进一步地,所述步骤四采用三次B样条曲线拟合方法将tcurrent时刻火点进行拟合,为了避免产生过拟合的现象,将数据分为多个部分单独拟合再进行拼接,且曲线拼接时将曲线的边界段转换成贝塞尔曲线进行拼接。
进一步地,所述步骤五利用BP神经网络构建大尺度火线位置修正模型,包括如下步骤:
步骤五一、收集火线处坡度、坡向、可燃物类型、风速、风向、气温、误差修正系数ξ数据,将数据随机划分为训练集和测试集;
所述误差修正系数ξ为一个定义的系数,即令:
其中,为未修正的tcurrent时刻火线上火点坐标, 为修正后的tcurrent时刻火线上火点坐标;
所述误差修正系数ξ为通过计算多个预测的火线与FARSITE仿真火线的均方根误差 RMSE获得,且其取值范围为
步骤五二、构建基于BP神经网络的大尺度火线位置修正模型,以坡度、坡向、可燃物类型、风速、风向以及气温作为模型的输入,误差修正系数ξ作为输出,采用训练集对模型进行训练,得到大尺度火线位置修正模型,并采用测试集对模型性能进行验证;
步骤五三、将tcurrent时刻火线所处位置的坡度、坡向、可燃物类型、风速、风向以及气温数据输入大尺度火线位置修正模型得到误差修正系数ξ,并采用得到的误差修正系数ξ对 tcurrent时刻火线位置进行修正。
进一步地,所述步骤五中所述坡度、坡向、可燃物类型、风速、风向以及气温数据可通过查询现有数据获取或者采用无人机在线采集方式获取。
进一步地,所述步骤六包括如下步骤:
首先要将世界坐标的距离单位换算成经纬度,再通过公式(11)、(12)、(13)和(14)将世界坐标转化为地理坐标;
其中,为火点在地理坐标系下相对世界坐标系原点经度的变化量,为火点在地理坐标系下相对世界坐标系原点纬度的变化量,为火点在地理坐标系下相对世界坐标系原点高程的变化量,xGPs、yGPS、zGPS表示世界坐标系原点的经度、纬度和高程值,xw、yw、zw表示火线上点在世界坐标系下的坐标值,xlongitude、ylatitude、zelevation表示火线上点在地理坐标系下的GPS坐标值。
一种基于无人机的大尺度火线瞬时定位系统,该系统具有与上述技术方案任一项技术方案的步骤对应的程序模块,运行时执行上述的基于无人机的大尺度火线瞬时定位方法中的步骤。
一种计算机可读存储介质,其特征在于所述计算机可读存储介质存储有计算机程序,所述计算机程序配置为由处理器调用时实现上述技术方案中任一项所述的基于无人机的大尺度火线瞬时定位方法的步骤。
相较于现有技术,本发明的有益效果是:
一、本发明为一种基于无人机的大尺度火线瞬时定位方法,采用了以温度数据作为驱动因素的林火蔓延模型,考虑了无人机飞行时间延迟与火线不断蔓延的事实,可实现对当前时刻瞬时大尺度火线的精准定位,减少了无人机飞行时间延迟和火线不断蔓延等因素对火线定位准确性的影响;针对大尺度火线,本发明可采用单个无人机巡航监测收集数据,使火灾监测任务的灵活性和监测效率显著提升,大量减少了人力财力成本,节约资源,且操作方便。
二、本发明方法通过大尺度火线位置修正模型,对预测定位的大尺度瞬时火线位置进行及时修正以提高其准确度,保障了定位结果的准确性。
三、国内火灾数据库资源有限,需要大量火灾数据的补充,通过本发明方法可以收集到大量的火灾数据,对开展林火蔓延研究和林火预防研究具有十分重要的意义。
附图说明
图1为本实施方式中基于无人机的大尺度火线瞬时定位方法的技术路线图;
图2为本实施方式中提取火线的技术路线图;
图3为本实施方式中预测定位大尺度瞬时火线的技术路线图;
图4为本实施方式中使用BP神经网络进行火线位置修正的示意图;
图5为本实施方式中预测的火线与对比火线的对比效果图。
具体实施方式
在本发明的描述中,应当说明的是,在本发明的实施例中所提到的术语“第一”、“第二”、“第三”仅用于描述目的,并不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”、“第三”的特征可以明示或者隐含地包括一个或者多个该特征。
为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
具体实施方案一:如图1所示,本发明提供一种基于无人机的大尺度火线瞬时定位方法,包括如下步骤:
步骤一、单个无人机以一定速度沿火灾边缘进行巡航监测,利用无人机载红外相机实时获取t0~tcurrent时刻大尺度林火边缘区域红外图像,并通过红外相机获取红外图像上各处的温度,其中tcurrent为t1、t2、t3......;
步骤二、对大尺度林火边缘区域的红外图像进行处理,以提取图像边缘临界处大尺度火线,再对提取的大尺度火线进行离散化处理,得到离散的火点,并通过坐标变换将火点的像素坐标转换为世界坐标系下的三维坐标;
步骤三、构建以温度数据作为驱动因素的林火蔓延模型,将t0时刻世界坐标系下的火点坐标、火点温度以及t0这个时间值代入所述林火蔓延模型进行计算得到t1时刻火点坐标,再将预测得到的t1时刻火点坐标、无人机采集的t1时刻火点坐标、火点温度以及t1这个时间值代入到所述林火蔓延模型中进行计算得到t2时刻火点坐标,依次进行计算,至得到tcurrent时刻的火点坐标;
步骤四、将得到的tcurrent时刻火点坐标进行拟合以得到平滑的tcurrent时刻火线;
步骤五、构建大尺度火线位置修正模型,对预测得到的tcurrent时刻火线位置进行修正;
步骤六、通过坐标变换将世界坐标系下的tcurrent时刻火线转化为地理坐标系下的GPS坐标火线。
本实施方案中步骤二中对大尺度火线进行离散化处理是为了匹配林火蔓延模型的输入文件格式。
通过林火蔓延模型不断预测下一时刻,从t0时刻开始,随着时间的推移无人机不断进行图像采集,林火蔓延模型预测定位得到的tcurrent时刻火线逐渐扩大,最终得到所需的大尺度火线。实现了通过单个无人机对大尺度火线的瞬时定位方法。
具体实施方案二:如图2所示,所述步骤二中火线提取的具体过程为:
步骤二一、将收集到的红外图像进行直方图均衡化,增强燃烧区域与非燃烧区域的对比度;
步骤二二、将直方图均衡化的红外图像转换成灰度图像;
步骤二三、通过改变阈值迭代法中参数的比重改进阈值迭代选取方法用于选取灰度图像上最为合适的阈值,使用选取的阈值对转换后的灰度图像进行二值化处理;
步骤二四、将步骤二三得到的图像中所有灰度值为1的像素点加入到链表中;
步骤二五、分类链表中的所有像素点,为每个连通区域的集合建立一个新的链表;
步骤二六、统计连通区域链表中包含的像素点数量,通过改变阈值迭代法中参数的比重来改进阈值迭代选取方法选取合适的阈值对连通区域进行去噪;
步骤二七、选取合适的火线轮廓面积作为阈值对火线轮廓进行过滤来消除边缘临界火线内部火线轮廓和火线交叉;
步骤二八、采用形态学算子的细化操作进行边缘细化,减少火线边缘毛刺。本实施方案其他与具体实施方案一相同。
具体实施方案三:所述步骤二中将火点的像素坐标转换为世界坐标系下的三维坐标的过程为:
将无人机的位置定为世界坐标系的原点,令世界坐标系x轴与地理坐标系x轴平行,世界坐标系y轴和地理坐标系y轴平行,使用激光定高可以获取无人机飞行的高度zc
假定已知像素坐标系下火点坐标为(u,v),可通过从像素坐标系转换至相机坐标系,再由相机坐标系转换至世界坐标系这一顺序变化过程将其转换为世界坐标系下的坐标(xw,yw,zw);
像素坐标系转换至相机坐标系通过公式(1)进行:
其中,fx、fy为相机的像素焦距长度,cx、cy为图像主点在像素坐标系下的坐标,xc、yc、zc为相机坐标系下的坐标值,u、v为火点在像素坐标系下的平面二维坐标;
相机坐标系转换至世界坐标系通过公式(2)进行:
其中,右侧第一个矩阵为相机外参矩阵。本实施方案其他与具体实施方案一相同。
具体实施方案四:所述步骤三中的林火蔓延模型的建立过程为:
针对两个相邻时刻处于不同瞬时火线上的火点M和N,其中ti+1时刻N点是ti时刻M点蔓延传播的结果,M点和N点之间的关系反映了林火蔓延,N点具体位置可通过公式(3)、(4)和(5)获取:
式中i∈N,是ti时刻M点处的温度值,单位为K,xN、yN、zN为ti+1时刻N点在世界坐标系下的坐标值,xM、yM、zM为ti时刻M点在世界坐标系下的坐标值,
由式(3)、(4)和(5)分析可得ti时刻在M点处的林火蔓延速度:
采用坡度修正系数、风速修正系数和可燃物类型调节因子对火蔓延速度进行修正:
其中,为修正后火蔓延速度,λwind为风速修正系数,λslope为坡度修正系数,λi表示第i种可燃物的可燃物调节因子的值;
在ti+1时刻N点的坐标为(xN,yN,zN)T,其对应ti时刻M点的坐标为(xM,yM,zM)T
(xN,yN,zN)T与(xM,yM,zM)T之间的关系为:
本实施方案其他与具体实施方案一相同。
如图3所示,本实施方案中通过计算(xN,yN,zN)T与(xM,yM,zM)T之间关系式便可预测定位ti+1时刻火点坐标,再将预测得到的ti+1时刻火点坐标、无人机采集的ti+1时刻火点的坐标、火点温度以及ti+1这个时间值代入到林火蔓延模型预测ti+2时刻火线上火点坐标,依次进行计算,至得到tcurrent时刻瞬时大尺度火线上火点坐标。
可燃物调节因子可以自行设定,因可燃物类型繁多,可根据火场处可燃物种类情况为可燃物调节因子附加参数值。
具体实施方案五:所述步骤四采用三次B样条曲线拟合方法将tcurrent时刻火点进行拟合,为了避免产生过拟合的现象,将数据分为多个部分单独拟合再进行拼接,且曲线拼接时将曲线的边界段转换成贝塞尔曲线进行拼接。本实施方案其他与具体实施方案一相同。
由于火点数据自由度较高,数据量较大,插值拟合难度会有所增加,也有可能产生过拟合的现象,因此本实施方案通过MATLAB使用三次B样条曲线拟合方法对预测定位的火点坐标进行拟合来获得火线图像,为了避免产生过拟合的现象,将数据分为几部分单独拟合再进行拼接。原理上三次B样条曲线拟合是由贝塞尔曲线拼接组成的,所以在拟合后进行曲线的拼接时为了拼接时操作简易将曲线的边界段转换成贝塞尔曲线进行拼接。
具体实施方案六:如图4所示,所述步骤五利用BP神经网络构建大尺度火线位置修正模型,包括如下步骤:
步骤五一、收集火线处坡度、坡向、可燃物类型、风速、风向、气温、误差修正系数ξ数据,将数据随机划分为训练集和测试集;
所述误差修正系数ξ为一个定义的系数,即令:
其中,为未修正的tcurrent时刻火线上火点坐标, 为修正后的tcurrent时刻火线上火点坐标;
所述误差修正系数ξ为通过计算多个预测的火线与FARSITE仿真火线的均方根误差 RMSE获得,且其取值范围为
步骤五二、构建基于BP神经网络的大尺度火线位置修正模型,以坡度、坡向、可燃物类型、风速、风向以及气温作为模型的输入,误差修正系数ξ作为输出,采用训练集对模型进行训练,得到大尺度火线位置修正模型,并采用测试集对模型性能进行验证;
步骤五三、将tcurrent时刻火线所处位置的坡度、坡向、可燃物类型、风速、风向以及气温数据输入大尺度火线位置修正模型得到误差修正系数ξ,并采用得到的误差修正系数ξ对 tcurrent时刻火线位置进行修正。本实施方案其他与具体实施方案一相同。
具体实施方案七:所述步骤五中所述坡度、坡向、可燃物类型、风速、风向以及气温数据可通过查询现有数据获取或者采用无人机在线采集方式获取。本实施方案其他与具体实施方案六相同。
具体实施方案八:所述步骤六包括如下过程:首先要将世界坐标的距离单位换算成经纬度,再通过公式(11)、(12)、(13)和(14)将世界坐标转化为地理坐标;
其中,为火点在地理坐标系下相对世界坐标系原点经度的变化量,为火点在地理坐标系下相对世界坐标系原点纬度的变化量,为火点在地理坐标系下相对世界坐标系原点高程的变化量,xGPS、yGPS、zGPS表示世界坐标系原点的经度、纬度和高程值,xw、yw、zw表示火线上点在世界坐标系下的坐标值,xlengitude、ylatitude、zelevation表示火线上点在地理坐标系下的GPS坐标值。本实施方案其他与具体实施方案一相同。
具体实施方案九:一种基于无人机的大尺度火线瞬时定位系统,该系统具有与上述实施方案一至八任一项实施方案的步骤对应的程序模块,运行时执行上述的基于无人机的大尺度火线瞬时定位方法中的步骤。
具体实施方案十:一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序配置为由处理器调用时实现上述实施方案一至八中任一项所述的基于无人机的大尺度火线瞬时定位方法的步骤。
实施例1
在黑龙江省哈尔滨市阿城区柳条村进行的户外燃烧实验并采集数据,由于火场环境较为复杂,热辐射和火灾产生的烟雾都会对无人机飞控系统产生影响,因此需选择抗干扰性强的无人机,此外,考虑到针对大尺度火线进行定位对无人机的飞行高度的要求,选用大疆T16植保无人机。针对红外相机需选择具有较高的分辨率及具备精准测温的功能的红外相机,森林火场的温度范围一般在500至700摄氏度左右,选用X1024B型号红外相机,该红外相机为无人机用测温型热像仪,可通过IP网络将拍摄的时间和火点温度传输至后端监测管理端。红外相机每次可采集5m左右范围火场的红外图像,采样时间间隔为2秒。
通过无人机载红外相机飞至火场上空30m处以一定速度沿火场边缘进行巡航监测,利用无人机载红外相机实时获取to~tcurrent时刻林火边缘区域红外图像,并通过红外相机获取红外图像上各处的温度。然后对大尺度林火边缘区域的红外图像进行处理,以提取图像边缘临界处大尺度火线,再对提取的大尺度火线进行离散化处理,得到离散的火点,并通过坐标变换将火点的像素坐标转换为世界坐标系下的三维坐标;
将t0时刻无人机采集的火线上火点在世界坐标系下的坐标、火点温度以及t0这个时间值代入林火蔓延模型进行计算得到t1时刻火点坐标,再将预测得到的t1时刻火点坐标、无人机采集的t1时刻火点坐标、火点温度以及t1这个时间值代入到林火蔓延模型中进行计算得到t2时刻火点坐标,依次进行计算,至得到t6时刻的火点坐标;将每次得到的tcurrent时刻火点坐标进行拟合以得到平滑的tcurrent时刻火线。
在本实施例通过无人机采集坡度、坡向、风速、风向以及气温数据,将点火实验可燃物均设置为Short grass,分别采用坡度和风速数据对林火蔓延模型中坡度修正系数和风速修正系数进行计算,并利用可燃物相关数据为可燃物类型调节因子进行赋值,以对模型中火蔓延速度进行修正。由于大尺度火场实验较难控制,因此实验过程中仅采集t0~t6时刻火线进行火线预测,得到了35m左右范围的大尺度火线,如表1所示为无人机采集数据。
表1
通过查询现有数据获取300组坡度、坡向、可燃物类型、风速、风向、气温、火线上火点温度以及各火线时刻数据,将坡度、可燃物类型、风速、火点温度和火线时刻数据通过林火蔓延模型进行火线预测,计算得到的300组预测火线与FARSITE仿真火线的均方根误差,进一步得到各组数据对应的误差修正系数ξ;将得到的数据中90%随机划分为训练集对大尺度火线位置修正模型进行训练,10%为测试集验证模型性能,当植被类型为多种可燃物混合时,根据可燃物比重设置权重计算最终误差修正系数ξ。
如表2所示为查询得到的数据中部分示例性数据。
表2
将无人机采集的各tcurrent时刻火线所处位置的坡度、坡向、可燃物类型、风速、风向以及气温数据输入至大尺度火线位置修正模型得到误差修正系数ξ,并采用得到的误差修正系数ξ对预测的各tcurrent时刻火线位置进行修正。
通过坐标变换将世界坐标系下的tcurrent时刻火线转化为地理坐标系下的GPS坐标火线。
为了验证本发明方法得到的tcurrent时刻火线的准确性,实验过程中同时采用多个无人机监测的方式获取大尺度火线作为对比火线,如图5所示的各时刻预测定位火线、无人机采集火线和对比火线之间的关系。将本发明方法得到的tcurrent时刻火线与对比火线进行时域配准以及位置配准,采用MATLAB对tcurrent时刻火线与对比火线进行误差分析;如表3所示为各时刻预测定位火线与对比火线之间的均方根误差(RMSE)结果,可以看出,各时刻火线误差结果均未超过5米,完全满足林火监测的精度要求。
表3
虽然本发明公开披露如上,但本发明公开的保护范围并非仅限于此。本发明领域技术人员在不脱离本发明公开的精神和范围的前提下,可进行各种变更与修改,这些变更与修改均将落入本发明的保护范围。

Claims (9)

1.一种基于无人机的大尺度火线瞬时定位方法,其特征在于包括如下步骤:
步骤一、单个无人机以一定速度沿火灾边缘进行巡航监测,利用无人机载红外相机实时获取t0~tcurrent时刻大尺度林火边缘区域红外图像,并通过红外相机获取红外图像上各处的温度,其中tcurrent为t1、t2、t3……;
步骤二、对大尺度林火边缘区域的红外图像进行处理,以提取图像边缘临界处大尺度火线,再对提取的大尺度火线进行离散化处理,得到离散的火点,并通过坐标变换将火点的像素坐标转换为世界坐标系下的三维坐标;
步骤三、构建以温度数据作为驱动因素的林火蔓延模型,将t0时刻世界坐标系下的火点坐标、火点温度以及t0这个时间值代入所述林火蔓延模型进行计算得到t1时刻火点坐标,再将预测得到的t1时刻火点坐标、无人机采集的t1时刻火点坐标、火点温度以及t1这个时间值代入到所述林火蔓延模型中进行计算得到t2时刻火点坐标,依次进行计算,至得到tcurrent时刻的火点坐标;
步骤三中的林火蔓延模型的建立过程为:
针对两个相邻时刻处于不同瞬时火线上的火点M和N,其中ti+1时刻N点是ti时刻M点蔓延传播的结果,M点和N点之间的关系反映了林火蔓延,N点具体位置可通过公式(3)、(4)和(5)获取:
Figure FDA0004127168880000011
Figure FDA0004127168880000012
Figure FDA0004127168880000013
式中i∈N,TtM.i是ti时刻M点处的温度值,单位为K,xN、yN、zN为ti+1时刻N点在世界坐标系下的坐标值,xM、yM、zM为ti时刻M点在世界坐标系下的坐标值,
Figure FDA0004127168880000014
Figure FDA0004127168880000015
由式(3)、(4)和(5)分析可得ti时刻在M点处的林火蔓延速度:
Figure FDA0004127168880000016
采用坡度修正系数、风速修正系数和可燃物类型调节因子对火蔓延速度进行修正:
Figure FDA0004127168880000017
其中,
Figure FDA0004127168880000021
为修正后火蔓延速度,λwind为风速修正系数,λslope为坡度修正系数,λi表示第i种可燃物的可燃物调节因子的值;
在ti+1时刻N点的坐标为(xN,yN,zN)T,其对应ti时刻M点的坐标为(xM,yM,zM)T
(xN,yN,zN)T与(xM,yM,zM)T之间的关系为:
Figure FDA0004127168880000022
步骤四、将得到的tcurrent时刻火点坐标进行拟合以得到平滑的tcurrent时刻火线;
步骤五、构建大尺度火线位置修正模型,对预测得到的tcurrent时刻火线位置进行修正;
步骤六、通过坐标变换将世界坐标系下的tcurrent时刻火线转化为地理坐标系下的GPS坐标火线。
2.根据权利要求1所述的一种基于无人机的大尺度火线瞬时定位方法,其特征在于所述步骤二中火线提取的具体过程为:
步骤二一、将收集到的红外图像进行直方图均衡化,增强燃烧区域与非燃烧区域的对比度;
步骤二二、将直方图均衡化的红外图像转换成灰度图像;
步骤二三、通过改变阈值迭代法中参数的比重改进阈值迭代选取方法用于选取灰度图像上最为合适的阈值,使用选取的阈值对转换后的灰度图像进行二值化处理;
步骤二四、将步骤二三得到的图像中所有灰度值为1的像素点加入到链表中;
步骤二五、分类链表中的所有像素点,为每个连通区域的集合建立一个新的链表;
步骤二六、统计连通区域链表中包含的像素点数量,通过改变阈值迭代法中参数的比重来改进阈值迭代选取方法选取合适的阈值对连通区域进行去噪;
步骤二七、选取合适的火线轮廓面积作为阈值对火线轮廓进行过滤来消除边缘临界火线内部火线轮廓和火线交叉;
步骤二八、采用形态学算子的细化操作进行边缘细化,减少火线边缘毛刺。
3.根据权利要求1所述的一种基于无人机的大尺度火线瞬时定位方法,其特征在于所述步骤二中将火点的像素坐标转换为世界坐标系下的三维坐标的过程为:
将无人机的位置定为世界坐标系的原点,令世界坐标系x轴与地理坐标系x轴平行,世界坐标系y轴和地理坐标系y轴平行,使用激光定高可以获取无人机飞行的高度zc
假定已知像素坐标系下火点坐标为(u,v),可通过从像素坐标系转换至相机坐标系,再由相机坐标系转换至世界坐标系这一顺序变化过程将其转换为世界坐标系下的坐标(xw,yw,zw);
像素坐标系转换至相机坐标系通过公式(1)进行:
Figure FDA0004127168880000031
其中,fx、fy为相机的像素焦距长度,cx、cy为图像主点在像素坐标系下的坐标,xc、yc、zc为相机坐标系下的坐标值,u、v为火点在像素坐标系下的平面二维坐标;
相机坐标系转换至世界坐标系通过公式(2)进行:
Figure FDA0004127168880000032
其中,右侧第一个矩阵为相机外参矩阵。
4.根据权利要求1所述的一种基于无人机的大尺度火线瞬时定位方法,其特征在于所述步骤四采用三次B样条曲线拟合方法将tcurrent时刻火点进行拟合,为了避免产生过拟合的现象,将数据分为多个部分单独拟合再进行拼接,且曲线拼接时将曲线的边界段转换成贝塞尔曲线进行拼接。
5.根据权利要求1所述的一种基于无人机的大尺度火线瞬时定位方法,其特征在于所述步骤五利用BP神经网络构建大尺度火线位置修正模型,包括如下步骤:
步骤五一、收集火线处坡度、坡向、可燃物类型、风速、风向、气温、误差修正系数ξ数据,将数据随机划分为训练集和测试集;
所述误差修正系数ξ为一个定义的系数,即令:
Figure FDA0004127168880000033
Figure FDA0004127168880000034
Figure FDA0004127168880000035
其中,
Figure FDA0004127168880000036
为未修正的tcurrent时刻火线上火点坐标,
Figure FDA0004127168880000037
Figure FDA0004127168880000038
为修正后的tcurrent时刻火线上火点坐标;
所述误差修正系数ξ为通过计算多个预测的火线与FARSITE仿真火线的均方根误差RMSE获得,且其取值范围为
Figure FDA0004127168880000041
步骤五二、构建基于BP神经网络的大尺度火线位置修正模型,以坡度、坡向、可燃物类型、风速、风向以及气温作为模型的输入,误差修正系数ξ作为输出,采用训练集对模型进行训练,得到大尺度火线位置修正模型,并采用测试集对模型性能进行验证;
步骤五三、将tcrrent时刻火线所处位置的坡度、坡向、可燃物类型、风速、风向以及气温数据输入大尺度火线位置修正模型得到误差修正系数ξ,并采用得到的误差修正系数ξ对tcurrent时刻火线位置进行修正。
6.根据权利要求5所述的一种基于无人机的大尺度火线瞬时定位方法,其特征在于所述步骤五中所述坡度、坡向、可燃物类型、风速、风向以及气温数据可通过查询现有数据获取或者采用无人机在线采集方式获取。
7.根据权利要求1所述的一种基于无人机的大尺度火线瞬时定位方法,其特征在于所述步骤六包括如下过程:首先要将世界坐标的距离单位换算成经纬度,再通过公式(11)、(12)、(13)和(14)将世界坐标转化为地理坐标;
Figure FDA0004127168880000042
Figure FDA0004127168880000043
Figure FDA0004127168880000044
Figure FDA0004127168880000045
其中,
Figure FDA0004127168880000046
为火点在地理坐标系下相对世界坐标系原点经度的变化量,
Figure FDA0004127168880000047
为火点在地理坐标系下相对世界坐标系原点纬度的变化量,
Figure FDA0004127168880000048
为火点在地理坐标系下相对世界坐标系原点高程的变化量,xCPS、yGPS、zGPS表示世界坐标系原点的经度、纬度和高程值,xw、yw、zw表示火线上点在世界坐标系下的坐标值,xlongitude、ylatitude、zelevation表示火线上点在地理坐标系下的GPS坐标值。
8.一种基于无人机的大尺度火线瞬时定位系统,其特征在于该系统具有与上述权利要求1~7任一项权利要求的步骤对应的程序模块,运行时执行上述的基于无人机的大尺度火线瞬时定位方法中的步骤。
9.一种计算机可读存储介质,其特征在于所述计算机可读存储介质存储有计算机程序,所述计算机程序配置为由处理器调用时实现权利要求1~7中任一项所述的基于无人机的大尺度火线瞬时定位方法的步骤。
CN202211299187.0A 2022-10-24 2022-10-24 一种基于无人机的大尺度火线瞬时定位方法 Active CN115661245B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211299187.0A CN115661245B (zh) 2022-10-24 2022-10-24 一种基于无人机的大尺度火线瞬时定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211299187.0A CN115661245B (zh) 2022-10-24 2022-10-24 一种基于无人机的大尺度火线瞬时定位方法

Publications (2)

Publication Number Publication Date
CN115661245A CN115661245A (zh) 2023-01-31
CN115661245B true CN115661245B (zh) 2023-04-18

Family

ID=84989819

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211299187.0A Active CN115661245B (zh) 2022-10-24 2022-10-24 一种基于无人机的大尺度火线瞬时定位方法

Country Status (1)

Country Link
CN (1) CN115661245B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111325943A (zh) * 2020-02-26 2020-06-23 中电福富信息科技有限公司 基于无人机进行大范围森林防火巡护预警方法及其系统
WO2020135446A1 (zh) * 2018-12-24 2020-07-02 深圳市道通智能航空技术有限公司 一种目标定位方法和装置、无人机
CN113359141A (zh) * 2021-07-28 2021-09-07 东北林业大学 一种基于无人机多传感器数据融合的林火定位方法及系统
CN114037152A (zh) * 2021-11-09 2022-02-11 北京林业大学 一种林火预报与火势蔓延计算方法
CN114757387A (zh) * 2022-03-07 2022-07-15 南京林业大学 基于人工智能的森林火险状态监测分析系统及方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103942839B (zh) * 2014-05-13 2016-09-07 福州大学 树冠火蔓延三维可视化方法
CN107993398A (zh) * 2017-12-12 2018-05-04 大连理创科技有限公司 一种具有自主学习能力的森林火灾监控系统
CN108763811A (zh) * 2018-06-08 2018-11-06 中国科学技术大学 动态数据驱动林火蔓延预测方法
CN109543254B (zh) * 2018-11-07 2023-05-30 北京科技大学 一种建筑群火灾三维蔓延模拟方法
CN110390135B (zh) * 2019-06-17 2023-04-21 北京中科锐景科技有限公司 一种提高林火蔓延预测精度的方法
KR102087000B1 (ko) * 2019-08-13 2020-05-29 주식회사 지에스아이엘 화재 감지 방법 및 시스템
CN111243215B (zh) * 2020-01-20 2021-09-17 南京森林警察学院 一种森林火场低空无人机监测预警系统及方法
CN112307884A (zh) * 2020-08-19 2021-02-02 航天图景(北京)科技有限公司 基于连续时序遥感态势数据的林火蔓延预测方法及电子设备
CN112464819B (zh) * 2020-11-27 2024-01-12 清华大学 基于无人机视频的林火蔓延数据同化方法以及装置
CN113902981B (zh) * 2021-12-10 2022-03-22 航天宏图信息技术股份有限公司 一种林火蔓延预测方法、装置、电子设备及存储介质
CN114999091A (zh) * 2022-05-17 2022-09-02 武汉闻立光电科技有限公司 一种基于红外热成像技术的林业监控预警系统
CN115099493B (zh) * 2022-06-27 2023-11-10 东北林业大学 一种基于cnn的林火向任意方向蔓延速率预测方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020135446A1 (zh) * 2018-12-24 2020-07-02 深圳市道通智能航空技术有限公司 一种目标定位方法和装置、无人机
CN111325943A (zh) * 2020-02-26 2020-06-23 中电福富信息科技有限公司 基于无人机进行大范围森林防火巡护预警方法及其系统
CN113359141A (zh) * 2021-07-28 2021-09-07 东北林业大学 一种基于无人机多传感器数据融合的林火定位方法及系统
CN114037152A (zh) * 2021-11-09 2022-02-11 北京林业大学 一种林火预报与火势蔓延计算方法
CN114757387A (zh) * 2022-03-07 2022-07-15 南京林业大学 基于人工智能的森林火险状态监测分析系统及方法

Also Published As

Publication number Publication date
CN115661245A (zh) 2023-01-31

Similar Documents

Publication Publication Date Title
CN104865353B (zh) 基于无人机的工业园区大气污染数据采集方法
CN113286129B (zh) 一种光伏电站的巡检方法及系统
CN110910440B (zh) 一种基于电力影像数据的输电线路长度确定方法和系统
CN107506022B (zh) 一种有人/无人协同班组辅助指挥系统
CN110414359A (zh) 长输管道无人机巡检数据分析与管理方法及系统
CN107479065A (zh) 一种基于激光雷达的林窗立体结构量测方法
CN111539100B (zh) 井场虚拟建设模型的生成方法、装置、设备及存储介质
CN116415754A (zh) 一种森林火灾火势蔓延预测方法及系统
CN115661245B (zh) 一种基于无人机的大尺度火线瞬时定位方法
CN115587664B (zh) 基于图卷积长短期记忆网络的太阳辐射预测方法及系统
CN112802343B (zh) 面向虚拟算法验证的通用虚拟传感数据采集方法及系统
CN116754722A (zh) 一种基于无人机实现碳排放监测的方法及系统
CN113449918B (zh) 突发重大污染事件应急指挥辅助决策方法和系统
CN113780086B (zh) 一种基于无人机的远程自然资源动态监测方法
CN116052023A (zh) 基于三维点云的电力巡检地物分类方法及存储介质
Araújo et al. An approach to simulate wind fields around an urban environment for wind energy application
CN109059870A (zh) 基于无人机航拍影像的锅炉大气污染物排放监管系统和巡检方法
Che et al. Inspection of Electric Transmission Line Fault Based on UAV Lidar.
TWI440825B (zh) 漂流物搜索範圍劃定系統
Han et al. Use of UAV Photogrammetry to Estimate the Solar Energy Potential of Residential Buildings in Severe Cold Region
CN209215942U (zh) 一种寻找燃烧源的追踪装置
Wang et al. Optimal Path Selection of UAV in Daily Maintenance of Expressway Slopes
CN117330512A (zh) 一种关键装备的微网碳监测方法、装置及相关设备
CN117972397A (zh) 基于大数据的大气干湿沉降模型模拟优化监测方法和介质
CN116483118A (zh) 一种适用于导地线弧垂变化的无人机自主巡检航线自动生成方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant