CN114220044A - 一种基于ai算法的河道漂浮物检测方法 - Google Patents

一种基于ai算法的河道漂浮物检测方法 Download PDF

Info

Publication number
CN114220044A
CN114220044A CN202111394186.XA CN202111394186A CN114220044A CN 114220044 A CN114220044 A CN 114220044A CN 202111394186 A CN202111394186 A CN 202111394186A CN 114220044 A CN114220044 A CN 114220044A
Authority
CN
China
Prior art keywords
image
river
river channel
aerial vehicle
unmanned aerial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111394186.XA
Other languages
English (en)
Other versions
CN114220044B (zh
Inventor
于艺春
兰雨晴
余丹
王丹星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Standard Intelligent Security Technology Co Ltd
Original Assignee
China Standard Intelligent Security Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Standard Intelligent Security Technology Co Ltd filed Critical China Standard Intelligent Security Technology Co Ltd
Priority to CN202111394186.XA priority Critical patent/CN114220044B/zh
Publication of CN114220044A publication Critical patent/CN114220044A/zh
Application granted granted Critical
Publication of CN114220044B publication Critical patent/CN114220044B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Image Analysis (AREA)

Abstract

本发明的实施例公开一种基于AI算法的河道漂浮物检测方法,用于解决现有的水面漂浮物监测方法只能定点监测,无法实现对整条河道的完整监测的问题。所述基于AI算法的河道漂浮物检测方法包括:通过位于河道上方的无人机沿所述河道的流向对所述河道进行寻迹拍摄;通过图像识别拍摄的河道图像中的河道中是否有漂浮物;若识别出河道中有漂浮物,则控制所述无人机悬停至所述漂浮物上方;调整所述无人机的相机焦距,采集包括所述漂浮物的全部外形轮廓的第一漂浮物图像;利用预设AI算法对所述漂浮物进行检测。本发明提供的方法能够实现对完整河道中漂浮物的实时检测和跟踪。

Description

一种基于AI算法的河道漂浮物检测方法
技术领域
本发明属于水面监测技术领域,尤其涉及一种基于AI算法的河道漂浮物检测方法。
背景技术
目前,随着工业化、农业化及城镇化建设步伐加速,人为因素对环境造成严重污染,在湖泊、河流、水库及水厂等水面上出现大量漂浮物,这些漂浮物含有大量对人体有害的物质。水环境污染问题已经严重制约着国民经济和社会的发展,破换生态环境,影响人们的生活环境,直接威胁人类生存和发展。为解决该问题,现有技术中提出了智慧水利下的漂浮物监测系统,该种系统在多个指定点固定安装摄像头等图像采集设备,以采集待监测区域的水面图像或视频,并将采集的图像或视频发送到远程监测终端,远程监测终端基于智能图像/视频分析,自动对视频图像信息进行分析识别,对水面监控区域中的漂浮物进行检测和预警。但是,现有的这种水面漂浮物监测方案,只能定点采集图像,因此也只能实现对固定区域的监测,对于河道等水流速较快、路径较长的待监测目标,很难实现对整条河道的完整监测,更无法实现为监测到的漂浮物的跟踪定位。
发明内容
有鉴于此,本发明实施例提供一种基于AI算法的河道漂浮物检测方法,用于解决现有的水面漂浮物监测方法只能定点监测,无法实现对整条河道的完整监测的问题。本发明能够自动控制无人机采集河道及漂浮物图像,利用AI算法可以实现对河水表面漂浮物种类的检测和跟踪定位。
本发明实施例提供一种基于AI算法的河道漂浮物检测方法,该方法包括:
通过位于河道上方的无人机沿所述河道的流向对所述河道进行寻迹拍摄;
通过图像识别拍摄的河道图像中的河道中是否有漂浮物;
若识别出河道中有漂浮物,则控制所述无人机悬停至所述漂浮物上方;
调整所述无人机的相机焦距,采集包括所述漂浮物的全部外形轮廓的第一漂浮物图像;
利用预设AI算法对所述漂浮物进行检测。
在一可选实施例中,所述通过位于河道上方的无人机沿所述河道的流向对所述河道进行寻迹拍摄,包括:
通过所述无人机采集包括河道两侧完整边界的河道图像;
通过颜色阈值识别方法识别出所述河道图像中的河道边界点;
根据所述河道边界点,确定无人机的偏转角度,以使所述无人机沿所述河道的流向对所述河道进行寻迹拍摄。
在一可选实施例中,所述通过所述无人机采集包括河道两侧完整边界的河道图像,包括:
根据第一公式计算所述无人机的目标拍摄高度;
控制所述无人机位于所述目标拍摄高度拍摄,以使所述无人机采集的图像中包括河道两侧完整边界;
所述第一公式为:
Figure BDA0003369845830000021
其中,H为所述无人机的目标拍摄高度值;f0表示所述无人机的相机初始焦距;m表示所述无人机拍摄的图像每一行像素点的个数;l表示上一时刻所述无人机拍摄的图像中河道宽度对应的像素点个数;L表示所述河道的实际平均宽度。
在一可选实施例中,通过颜色阈值识别方法识别出所述河道图像中的4个河道边界点;
所述根据所述河道边界点,确定无人机的偏转角度,包括:
以所述河道图像的左下角顶点为原点,以所述河道图像的左边框向上为y轴方向,以所述河道图像的下边框向右为x轴方向建立直角坐标系;
确定所述4个河道边界点在所述直角坐标系中的坐标;
根据第二公式确定无人机的偏转角度;
所述第二公式为:
Figure BDA0003369845830000031
其中,α(t)为当前时刻所述无人机需要偏转的角度,若α(t)≥0则无人机需以前进方向为基准向右偏转α(t)角度,若α(t)<0则无人机需以前进方向为基准向左偏转-α(t)角度;(xp,1(t),yp,1(t))为所述河道图像中左下角的第一河道边界点的坐标值,(xp,2(t),yp,2(t))为所述河道图像中右下角的第二河道边界点的坐标值,(xq,1(t),yq,1(t))为所述河道图像中与所述第一河道边界点同为河道一侧且位于所述第一河道边界点上侧的第三河道边界点的坐标值,(xq,2(t),yq,2(t))为所述河道图像中与所述第二河道边界点同为河道一侧且位于所述第二河道边界点上侧的第四河道边界点的坐标值。
在一可选实施例中,所述调整所述无人机的相机焦距,包括:
根据第三公式计算所述无人机的相机焦距的所需调整值;
根据所述所需调整值调整所述无人机的相机焦距;
所述第三公式为:
Figure BDA0003369845830000032
其中,Δf为所述无人机的相机焦距的所需调整值;D表示上一时刻所述无人机拍摄的图像中识别出的漂浮物的宽度对应的像素点个数;f0表示所述无人机的相机初始焦距;m表示所述无人机拍摄的图像每一行像素点的个数;L表示所述河道的实际平均宽度。
在一可选实施例中,所述通过图像识别拍摄的河道图像中的河道中是否有漂浮物,包括:
通过图像识别所述无人机对所述河道进行寻迹拍摄的每张河道图像中是否有疑似漂浮物;
若有任一张河道图像中有疑似漂浮物,则继续判断在该张河道图像之后连续拍摄的N张河道图像中识别出有疑似漂浮物的图像数量占比是否超过预定阈值;
若在该张河道图像之后连续拍摄的N张河道图像中识别出有疑似漂浮物的图像数量占比超过预定阈值,则确定当前拍摄的河道图像中的河道中有漂浮物;其中,N为预设数量。
在一可选实施例中,所述利用预设AI算法对所述漂浮物进行检测,包括:
对所述第一漂浮物图像进行图像增强处理;
提取增强处理后的第一漂浮物图像中的漂浮物边界轮廓及轮廓内图像,得到第二漂浮物图像;
利用预设AI算法,获取所述第二漂浮物图像中漂浮物的特征点数据,并将获取的特征点数据与预设数据库中的物品图像特征点进行匹配,得到特征点匹配度最高的物品图像;
将所述匹配度最高的物品图像对应的物品种类确定为当前河道中识别到的漂浮物种类。
在一可选实施例中,所述利用预设AI算法对所述漂浮物进行检测,还包括:
利用无人机的GPS获取当前无人机所在的位置信息;
将所述第一漂浮物图像及其对应漂浮物种类和所述位置信息发送至远程监控终端。
本发明提供的基于AI算法的河道漂浮物检测方法,通过无人机对河道进行寻迹拍摄,合图像识别技术识别拍摄的图像中是否有漂浮物,在确认河道中有漂浮物时,控制无人机悬停于漂浮物上方进一步拍摄漂浮物的图像,最终通过AI算法对所述漂浮物进行检测,能够实现对河道中漂浮物的实时检测和跟踪,解决了现有技术中不能对整个河道进行全方面检测的问题,检测全面且检测准确度高,此外,还可通过无人机对检测到的漂浮物进行定位或跟踪。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1为本发明实施例提供的一种基于AI算法的河道漂浮物检测方法流程图;
图2为识别河道中是否有漂浮物的方法流程图;
图3为S1的实施方法流程图;
图4为包括河道两侧完整边界的河道图像示意图;
图5为不包括河道两侧完整边界的河道图像示意图;
图6为根据所述河道边界点,确定无人机的偏转角度的方法流程图;
图7为在图4所示河道图像上建立的直角坐标系示意图;
图8为S5的实施方法流程图。
具体实施方式
下面结合附图对本发明实施例进行详细描述。
应当明确,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
图1为本发明实施例提供的一种基于AI算法的河道漂浮物检测方法流程图。参见图1,该方法包括如下步骤:
S1:通过位于河道上方的无人机沿所述河道的流向对所述河道进行寻迹拍摄。
其中,由于无人机每次拍摄的取景范围有限,因此,需要控制无人机自动追踪河道走向拍摄,以便后续对整个河道上可能存在的漂浮物进行识别。即此处所述寻迹拍摄为从开始拍摄的河道位置起,使无人机跟随河道流向不断拍摄。优选地,无人机的平均前进速度大于河道的水流速度,从而可以拍摄到不同位置处的水上漂浮物。
S2:通过图像识别拍摄的河道图像中的河道中是否有漂浮物。
本步骤中,通过图像识别技术对无人机拍摄的河道图像进行图像识别,以识别出其中是否有漂浮物。
优选地,如图2所示,S2中识别河道中是否有漂浮物的方法包括如下步骤:
S21:通过图像识别所述无人机对所述河道进行寻迹拍摄的当前河道图像中是否有疑似漂浮物;若是,则执行S22,否则,继续返回执行本步骤S21;
S22:继续判断从当前时刻起往后连续拍摄的N张河道图像中识别出有疑似漂浮物的图像数量占比是否超过预定阈值;若是,则执行S23,否则,返回S21;
其中,N为预设数量。
例如,若N=5,预定阈值为60%,步骤S21在识别出时刻t0采集的河道图像中有疑似漂浮物,则S22判断时刻t0之后的5个连续时刻分别拍摄的5张河道图像中是否识别出有疑似漂浮物,若这5张连续拍摄的河道图像中识别出有疑似漂浮物的结果依次为:有、无、有、有、有,则计算出这5张连续拍摄的河道图像中识别出有疑似漂浮物的图像数量占比为80%,大于预定阈值60%,则执行S23。
S23:确定当前拍摄的河道图像中的河道中有漂浮物。
图2所示实施例中,当识别到河道图像中有疑似漂浮物时,继续识别连续N张河道图像,以确定河道中是否真的有漂浮物,避免了例如某张河道图像中出现一块巨石而误判为漂浮物的情况发生,只有确定存在漂浮物时才继续执行步骤S3,进一步简化了方法流程,减少后续计算开支。
S3:若识别出河道中有漂浮物,则控制所述无人机悬停至所述漂浮物上方。
S4:调整所述无人机的相机焦距,采集包括所述漂浮物的全部外形轮廓的第一漂浮物图像。
S5:利用预设AI算法对所述漂浮物进行检测。
本实施例中,通过无人机拍摄河道图像并结合图像识别技术识别拍摄的图像中是否有漂浮物,在确认河道中有漂浮物时,控制无人机悬停于漂浮物上方进一步拍摄漂浮物的图像,最终通过AI算法对所述漂浮物进行检测,能够实现对河道中漂浮物的实时检测和跟踪,解决了现有技术中不能对整个河道进行全方面检测的问题,检测全面且检测准确度高,此外,还可通过无人机对检测到的漂浮物进行定位或跟踪。
在一可选实施例中,如图3所示,S1可以包括如下步骤S11-S13:
S11:通过所述无人机采集包括河道两侧完整边界的河道图像。
本实施例中,为使无人机能够追踪河道走向拍摄,需要先采集包括河道两侧完整边界的图像,如图4所示为包括河道两侧完整边界的河道图像示意图,其中左侧曲线AB表示沿水流方向的河道左边界,右侧曲线CD表示沿水流方向的河道右边界。对比图4,图5所示为不包括河道两侧完整边界的河道图像示意图,显然,图5中只拍摄到河道的局部图像,其中左侧曲线EF表示沿水流方向的河道左边界,但图5中没有显示沿水流方向的河道右边界。本步骤中,需要通过所述无人机采集类似图4所示的包括河道两侧完整边界的河道图像。
本发明实施例中为方便说明,将河道图像中与正上方方向夹角小于90°的方向定义为水流方向,将水流方向左侧定义为左,将水流方向右侧定义为右。
在一可选实施例中,S11可以先根据第一公式计算所述无人机的目标拍摄高度,然后控制所述无人机位于所述目标拍摄高度拍摄,以使所述无人机采集的图像中包括河道两侧完整边界。其中,所述第一公式为:
Figure BDA0003369845830000071
第一公式(1)中,H为所述无人机的目标拍摄高度值;f0表示所述无人机的相机初始焦距;m表示所述无人机拍摄的图像每一行像素点的个数;l表示上一时刻所述无人机拍摄的图像中河道宽度对应的像素点个数;L表示所述河道的实际平均宽度。
S12:通过颜色阈值识别方法识别出所述河道图像中的河道边界点。
本步骤中,对于S11中本次采集到的河道图像,对图像进行色调、饱和度和亮度等图像处理,然后对于调整后的河道边界清晰的河道图像,通过颜色阈值识别方法,识别出河道边界,确定河道边界点。
优选地,S12中识别出河道的4个河道边界点,即:当前河道图像中河道左边界的上边界点和下边界点,以及当前河道图像中河道右边界的上边界点和下边界点。例如图4中所示的左下边界点A、左上边界点B、右下边界点C、右上边界点D。
S13:根据所述河道边界点,确定无人机的偏转角度,以使所述无人机沿所述河道的流向对所述河道进行寻迹拍摄。
在一可选实施例中,如图6所示,根据所述河道边界点,确定无人机的偏转角度的方法可以包括如下步骤S131-S133:
S131:以所述河道图像的左下角顶点为原点,以所述河道图像的左边框向上为y轴方向,以所述河道图像的下边框向右为x轴方向建立直角坐标系;
S132:确定4个河道边界点在所述直角坐标系中的坐标;
例如:以图4所示河道图像为例,以其左下角顶点为原点,以所述河道图像的左边框向上为y轴方向,以所述河道图像的下边框向右为x轴方向建立直角坐标系,得到图7所示的直角坐标系xoy,确定4个边界点A、B、C、D在图7所示直角坐标系xoy中的坐标分别为:A(xp,1(t),yp,1(t)),B(xp,2(t),yp,2(t)),C(xq,1(t),yq,1(t)),D(xq,2(t),yq,2(t))。
S133:根据第二公式确定无人机的偏转角度;
其中,所述第二公式为:
Figure BDA0003369845830000081
其中,α(t)为当前时刻所述无人机需要偏转的角度,若α(t)≥0则无人机需以前进方向为基准向右偏转α(t)角度,若α(t)<0则无人机需以前进方向为基准向左偏转-α(t)角度;(xp,1(t),yp,1(t))为所述河道图像中左下角的第一河道边界点的坐标值,(xp,2(t),yp,2(t))为所述河道图像中右下角的第二河道边界点的坐标值,(xq,1(t),yq,1(t))为所述河道图像中与所述第一河道边界点同为河道一侧且位于所述第一河道边界点上侧的第三河道边界点的坐标值,(xq,2(t),yq,2(t))为所述河道图像中与所述第二河道边界点同为河道一侧且位于所述第二河道边界点上侧的第四河道边界点的坐标值。
在一可选实施例中,步骤S4中所述调整所述无人机的相机焦距,可以先根据第三公式计算所述无人机的相机焦距的所需调整值,随后根据所述所需调整值调整所述无人机的相机焦距。其中,所述第三公式为:
Figure BDA0003369845830000091
第三公式(3)中,Δf为所述无人机的相机焦距的所需调整值;D表示上一时刻所述无人机拍摄的图像中识别出的漂浮物的宽度对应的像素点个数;f0表示所述无人机的相机初始焦距;m表示所述无人机拍摄的图像每一行像素点的个数;L表示所述河道的实际平均宽度。
在一可选实施例中,如图8所示,步骤S5可以包括如下步骤S51-S54:
S51:对所述第一漂浮物图像进行图像增强处理;
S52:提取增强处理后的第一漂浮物图像中的漂浮物边界轮廓及轮廓内图像,得到第二漂浮物图像;
S53:利用预设AI算法,获取所述第二漂浮物图像中漂浮物的特征点数据,并将获取的特征点数据与预设数据库中的物品图像特征点进行匹配,得到特征点匹配度最高的物品图像;
本实施例中,预先在数据库中存储诸多可形成漂浮物的物品图像及特征点数据,利用预设AI算法,将当前获取的漂浮物图像与数据库中预先存储的物品图像进行特征点匹配,选出匹配度最高的物品图像。
S54:将所述匹配度最高的物品图像对应的物品种类确定为当前河道中识别到的漂浮物种类。
本实施例中,数据库中还预先存储有物品图像和物品种类的对应关系,例如,可以以物品种类对存储的物品图像进行命名,则获取匹配度最高的物品图像的文件名即可。
本实施例中,对当前时刻无人机采集的包括所述漂浮物的全部外形轮廓的第一漂浮物图像进行图像处理,从中单独提取出漂浮物的图像机器特征点,用于与预先存储的多种预设漂浮物的图像特征数据相匹配,从中选出匹配度最高的预设漂浮物作为当前第一漂浮物图像中的漂浮物,从而可以实现漂浮物的种类检测。
在一可选实施例中,在图1和图8所述是实施例的基础上,在步骤S5之后,本发明提供的基于AI算法的河道漂浮物检测方法还可以包括:利用无人机的GPS获取当前无人机所在的位置信息的步骤;以及将所述第一漂浮物图像及其对应漂浮物种类和所述位置信息发送至远程监控终端的步骤。本实施例中,确定当前河道图像中的疑似河道漂浮物为河水表面漂浮物后,将AI算法识别到的漂浮物种类,以及利用无人机的GPS得到的当前无人机所在的位置和相关图像通过无人机的信号传输装置传输给远程监控终端的监控人员,可以实现河道漂浮物的实时定位和追踪,远程监控终端还可以进一步存储收到的这些数据,以便后续查询使用。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (8)

1.一种基于AI算法的河道漂浮物检测方法,其特征在于,包括以下步骤:
通过位于河道上方的无人机沿所述河道的流向对所述河道进行寻迹拍摄;
通过图像识别拍摄的河道图像中的河道中是否有漂浮物;
若识别出河道中有漂浮物,则控制所述无人机悬停至所述漂浮物上方;
调整所述无人机的相机焦距,采集包括所述漂浮物的全部外形轮廓的第一漂浮物图像;
利用预设AI算法对所述漂浮物进行检测。
2.如权利要求1所述的基于AI算法的河道漂浮物检测方法,其特征在于,所述通过位于河道上方的无人机沿所述河道的流向对所述河道进行寻迹拍摄,包括:
通过所述无人机采集包括河道两侧完整边界的河道图像;
通过颜色阈值识别方法识别出所述河道图像中的河道边界点;
根据所述河道边界点,确定无人机的偏转角度,以使所述无人机沿所述河道的流向对所述河道进行寻迹拍摄。
3.如权利要求2所述的基于AI算法的河道漂浮物检测方法,其特征在于,所述通过所述无人机采集包括河道两侧完整边界的河道图像,包括:
根据第一公式计算所述无人机的目标拍摄高度;
控制所述无人机位于所述目标拍摄高度拍摄,以使所述无人机采集的图像中包括河道两侧完整边界;
所述第一公式为:
Figure FDA0003369845820000011
其中,H为所述无人机的目标拍摄高度值;f0表示所述无人机的相机初始焦距;m表示所述无人机拍摄的图像每一行像素点的个数;l表示上一时刻所述无人机拍摄的图像中河道宽度对应的像素点个数;L表示所述河道的实际平均宽度。
4.如权利要求2所述的基于AI算法的河道漂浮物检测方法,其特征在于,通过颜色阈值识别方法识别出所述河道图像中的4个河道边界点;
所述根据所述河道边界点,确定无人机的偏转角度,包括:
以所述河道图像的左下角顶点为原点,以所述河道图像的左边框向上为y轴方向,以所述河道图像的下边框向右为x轴方向建立直角坐标系;
确定所述4个河道边界点在所述直角坐标系中的坐标;
根据第二公式确定无人机的偏转角度;
所述第二公式为:
Figure FDA0003369845820000021
其中,α(t)为当前时刻所述无人机需要偏转的角度,若α(t)≥0则无人机需以前进方向为基准向右偏转α(t)角度,若α(t)<0则无人机需以前进方向为基准向左偏转-α(t)角度;(xp,1(t),yp,1(t))为所述河道图像中左下角的第一河道边界点的坐标值,(xp,2(t),yp,2(t))为所述河道图像中右下角的第二河道边界点的坐标值,(xq,1(t),yq,1(t))为所述河道图像中与所述第一河道边界点同为河道一侧且位于所述第一河道边界点上侧的第三河道边界点的坐标值,(xq,2(t),yq,2(t))为所述河道图像中与所述第二河道边界点同为河道一侧且位于所述第二河道边界点上侧的第四河道边界点的坐标值。
5.如权利要求1所述的基于AI算法的河道漂浮物检测方法,其特征在于,所述调整所述无人机的相机焦距,包括:
根据第三公式计算所述无人机的相机焦距的所需调整值;
根据所述所需调整值调整所述无人机的相机焦距;
所述第三公式为:
Figure FDA0003369845820000022
其中,Δf为所述无人机的相机焦距的所需调整值;D表示上一时刻所述无人机拍摄的图像中识别出的漂浮物的宽度对应的像素点个数;f0表示所述无人机的相机初始焦距;m表示所述无人机拍摄的图像每一行像素点的个数;L表示所述河道的实际平均宽度。
6.如权利要求1-5任一项所述的基于AI算法的河道漂浮物检测方法,其特征在于,所述通过图像识别拍摄的河道图像中的河道中是否有漂浮物,包括:
通过图像识别所述无人机对所述河道进行寻迹拍摄的每张河道图像中是否有疑似漂浮物;
若有任一张河道图像中有疑似漂浮物,则继续判断在该张河道图像之后连续拍摄的N张河道图像中识别出有疑似漂浮物的图像数量占比是否超过预定阈值;
若在该张河道图像之后连续拍摄的N张河道图像中识别出有疑似漂浮物的图像数量占比超过预定阈值,则确定当前拍摄的河道图像中的河道中有漂浮物;其中,N为预设数量。
7.如权利要求1-5任一项所述的基于AI算法的河道漂浮物检测方法,其特征在于,所述利用预设AI算法对所述漂浮物进行检测,包括:
对所述第一漂浮物图像进行图像增强处理;
提取增强处理后的第一漂浮物图像中的漂浮物边界轮廓及轮廓内图像,得到第二漂浮物图像;
利用预设AI算法,获取所述第二漂浮物图像中漂浮物的特征点数据,并将获取的特征点数据与预设数据库中的物品图像特征点进行匹配,得到特征点匹配度最高的物品图像;
将所述匹配度最高的物品图像对应的物品种类确定为当前河道中识别到的漂浮物种类。
8.如权利要求7所述的基于AI算法的河道漂浮物检测方法,其特征在于,所述利用预设AI算法对所述漂浮物进行检测,还包括:
利用无人机的GPS获取当前无人机所在的位置信息;
将所述第一漂浮物图像及其对应漂浮物种类和所述位置信息发送至远程监控终端。
CN202111394186.XA 2021-11-23 2021-11-23 一种基于ai算法的河道漂浮物检测方法 Active CN114220044B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111394186.XA CN114220044B (zh) 2021-11-23 2021-11-23 一种基于ai算法的河道漂浮物检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111394186.XA CN114220044B (zh) 2021-11-23 2021-11-23 一种基于ai算法的河道漂浮物检测方法

Publications (2)

Publication Number Publication Date
CN114220044A true CN114220044A (zh) 2022-03-22
CN114220044B CN114220044B (zh) 2022-07-29

Family

ID=80697906

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111394186.XA Active CN114220044B (zh) 2021-11-23 2021-11-23 一种基于ai算法的河道漂浮物检测方法

Country Status (1)

Country Link
CN (1) CN114220044B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114596536A (zh) * 2022-05-07 2022-06-07 陕西欧卡电子智能科技有限公司 无人船沿岸巡检方法、装置、计算机设备及存储介质
CN115574785A (zh) * 2022-12-12 2023-01-06 河海大学 基于数据处理的水利工程安全监测方法及平台

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105929845A (zh) * 2016-05-18 2016-09-07 中国计量大学 基于无人机网络的河道巡航系统与巡航方法
CN106483969A (zh) * 2016-12-16 2017-03-08 北京中科浩电科技有限公司 一种多旋翼视觉循迹无人机
CN106534811A (zh) * 2017-01-12 2017-03-22 王昱淇 一种用于水域漂浮物监测的无人机监控系统
CN107169401A (zh) * 2017-02-10 2017-09-15 北京交通大学 基于轨道视觉特征谱的轨道入侵物检测方法
CN108038450A (zh) * 2017-12-14 2018-05-15 海安常州大学高新技术研发中心 基于无人机和图像识别的水面污染物检测方法
CN109460754A (zh) * 2019-01-31 2019-03-12 深兰人工智能芯片研究院(江苏)有限公司 一种水面异物检测方法、装置、设备及存储介质
CN109656269A (zh) * 2018-12-27 2019-04-19 上海普适导航科技股份有限公司 一种无人机监控系统
CN110414334A (zh) * 2019-06-20 2019-11-05 浙江大学 一种基于无人机巡视的智能水质识别方法
CN111259809A (zh) * 2020-01-17 2020-06-09 五邑大学 基于DANet的无人机海岸线漂浮垃圾巡检系统
CN111432130A (zh) * 2020-04-23 2020-07-17 西安智文琛软件有限公司 一种自动跟踪聚焦抓拍方法、抓拍系统、无人机及应用
CN112067839A (zh) * 2020-09-18 2020-12-11 重庆交通大学 无控制点条件下的无人机超宽河流表面流场快速测量方法
CN112666963A (zh) * 2020-12-18 2021-04-16 浙江师范大学 基于四轴无人机的公路路面裂缝检测系统及其检测方法
CN113065486A (zh) * 2021-04-09 2021-07-02 中电科数字科技(集团)有限公司 适用于河道的漂浮物识别方法与系统、设备、介质
CN113095224A (zh) * 2021-04-13 2021-07-09 山东瑞智飞控科技有限公司 一种无人机巡查河道漂浮物的识别方法和装置

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105929845A (zh) * 2016-05-18 2016-09-07 中国计量大学 基于无人机网络的河道巡航系统与巡航方法
CN106483969A (zh) * 2016-12-16 2017-03-08 北京中科浩电科技有限公司 一种多旋翼视觉循迹无人机
CN106534811A (zh) * 2017-01-12 2017-03-22 王昱淇 一种用于水域漂浮物监测的无人机监控系统
CN107169401A (zh) * 2017-02-10 2017-09-15 北京交通大学 基于轨道视觉特征谱的轨道入侵物检测方法
CN108038450A (zh) * 2017-12-14 2018-05-15 海安常州大学高新技术研发中心 基于无人机和图像识别的水面污染物检测方法
CN109656269A (zh) * 2018-12-27 2019-04-19 上海普适导航科技股份有限公司 一种无人机监控系统
CN109460754A (zh) * 2019-01-31 2019-03-12 深兰人工智能芯片研究院(江苏)有限公司 一种水面异物检测方法、装置、设备及存储介质
CN110414334A (zh) * 2019-06-20 2019-11-05 浙江大学 一种基于无人机巡视的智能水质识别方法
CN111259809A (zh) * 2020-01-17 2020-06-09 五邑大学 基于DANet的无人机海岸线漂浮垃圾巡检系统
CN111432130A (zh) * 2020-04-23 2020-07-17 西安智文琛软件有限公司 一种自动跟踪聚焦抓拍方法、抓拍系统、无人机及应用
CN112067839A (zh) * 2020-09-18 2020-12-11 重庆交通大学 无控制点条件下的无人机超宽河流表面流场快速测量方法
CN112666963A (zh) * 2020-12-18 2021-04-16 浙江师范大学 基于四轴无人机的公路路面裂缝检测系统及其检测方法
CN113065486A (zh) * 2021-04-09 2021-07-02 中电科数字科技(集团)有限公司 适用于河道的漂浮物识别方法与系统、设备、介质
CN113095224A (zh) * 2021-04-13 2021-07-09 山东瑞智飞控科技有限公司 一种无人机巡查河道漂浮物的识别方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114596536A (zh) * 2022-05-07 2022-06-07 陕西欧卡电子智能科技有限公司 无人船沿岸巡检方法、装置、计算机设备及存储介质
CN115574785A (zh) * 2022-12-12 2023-01-06 河海大学 基于数据处理的水利工程安全监测方法及平台
CN115574785B (zh) * 2022-12-12 2023-02-28 河海大学 基于数据处理的水利工程安全监测方法及平台

Also Published As

Publication number Publication date
CN114220044B (zh) 2022-07-29

Similar Documents

Publication Publication Date Title
CN114220044B (zh) 一种基于ai算法的河道漂浮物检测方法
CN112102369B (zh) 水面漂浮目标自主巡检方法、装置、设备及存储介质
CN109887040B (zh) 面向视频监控的运动目标主动感知方法及系统
CN104282020B (zh) 一种基于目标运动轨迹的车辆速度检测方法
CN109657575B (zh) 室外施工人员智能视频跟踪算法
CN106886216B (zh) 基于rgbd人脸检测的机器人自动跟踪方法和系统
CN105987684A (zh) 一种基于单目视觉的农业车辆导航线检测系统及方法
CN108447091A (zh) 目标定位方法、装置、电子设备及存储介质
CN102136147B (zh) 一种目标检测与跟踪方法、系统及视频监控设备
WO2001084844A1 (en) System for tracking and monitoring multiple moving objects
CN102447835A (zh) 无盲区多目标协同跟踪方法及系统
CN103886325B (zh) 一种分块的循环矩阵视频跟踪方法
CN113052876B (zh) 一种基于深度学习的视频接力跟踪方法及系统
CN110189375B (zh) 一种基于单目视觉测量的图像目标识别方法
CN111242025B (zh) 一种基于yolo的动作实时监测方法
CN114677554A (zh) 一种基于YOLOv5与Deepsort的统计滤波红外小目标检测跟踪方法
CN106558224B (zh) 一种基于计算机视觉的交通智能监管方法
CN103581614A (zh) 基于ptz的视频中目标跟踪方法及系统
CN111439259A (zh) 基于端到端卷积神经网络的农业园场景车道偏移预警控制方法及系统
CN114495068B (zh) 基于人机交互和深度学习的路面健康检测方法
CN109697428B (zh) 基于rgb_d和深度卷积网络的无人机识别定位系统
CN112597877A (zh) 一种基于深度学习的厂区人员异常行为检测方法
CN111967396A (zh) 障碍物检测的处理方法、装置、设备及存储介质
CN116259002A (zh) 一种基于视频的人体危险行为分析方法
CN113781523B (zh) 一种足球检测跟踪方法及装置、电子设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant