CN110737271A - 一种水面机器人自主巡航系统及方法 - Google Patents
一种水面机器人自主巡航系统及方法 Download PDFInfo
- Publication number
- CN110737271A CN110737271A CN201911009113.7A CN201911009113A CN110737271A CN 110737271 A CN110737271 A CN 110737271A CN 201911009113 A CN201911009113 A CN 201911009113A CN 110737271 A CN110737271 A CN 110737271A
- Authority
- CN
- China
- Prior art keywords
- water surface
- robot
- autonomous
- subsystem
- target detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 title claims abstract description 258
- 238000000034 method Methods 0.000 title claims abstract description 24
- 238000004891 communication Methods 0.000 claims abstract description 67
- 238000012544 monitoring process Methods 0.000 claims abstract description 53
- 238000007667 floating Methods 0.000 claims abstract description 47
- 238000001514 detection method Methods 0.000 claims description 72
- 230000006855 networking Effects 0.000 claims description 23
- 238000013507 mapping Methods 0.000 claims description 22
- 230000000007 visual effect Effects 0.000 claims description 13
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 238000013519 translation Methods 0.000 claims description 6
- 230000002195 synergetic effect Effects 0.000 claims description 5
- 238000013459 approach Methods 0.000 claims description 3
- 230000003993 interaction Effects 0.000 claims description 3
- 230000009191 jumping Effects 0.000 claims description 3
- 230000003287 optical effect Effects 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 238000005516 engineering process Methods 0.000 abstract description 5
- 238000012545 processing Methods 0.000 abstract description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000005202 decontamination Methods 0.000 description 1
- 230000003588 decontaminative effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/0206—Control of position or course in two dimensions specially adapted to water vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明公开了一种水面机器人自主巡航系统及方法,通过无线网络通信,使得用户能通过监测站控制水面机器人建立水域地图、学习水面环境,为后续水面机器人自主航行做准备;把组合导航技术应用于水面机器人自主航行,实现自主规划行驶路径;把激光扫描点云处理与计算机视觉计算结合起来用于水面漂浮目标自主搜寻,进而实现作业过程中的自主规划行驶路径。所公开的利用水面目标检测激光雷达和水面目标检测相机协同作用的水面漂浮目标自主搜寻方法特别适合目标点数量和位置不确定的情况,可有效排除光照导致的倒影、水纹干扰。本发明将增强水面机器人的自主作业能力,切实减轻有人作业的工作量,提高其水面作业的效率。
Description
技术领域
本发明涉机器人巡航领域,具体涉及一种水面机器人自主巡航系统及方法。
背景技术
水面机器人是将机器人技术应用于水面作业船体的新兴产物,可提高水面作业效率、降低人员工作强度。在水面清污、水体监测、渔业养殖等作业场景,水面机器人有着非常广泛的应用前景。作为对于水面机器人自主作业的关键技术,自主巡航能有效支持机器人在无人值守情况下规划行驶路径、自主避碰、搜寻水面作业目标。
自主航行依靠机器人自主规划航行路径、自主避碰和搜寻水面目标,但因为水域环境的特殊性,在自主航行中搜寻作业目标的难度很大,目前的研究成果并不多,一般处于初级阶段。
发明内容
针对现有技术中的上述不足,本发明提供的一种水面机器人自主巡航系统及方法解决了目前水面机器人在自主航行中搜寻作业目标的难度很大,自主规划航行路径、自主避碰和搜寻水面目标的能力差的问题。
为了达到上述发明目的,本发明采用的技术方案为:一种水面机器人自主巡航系统,包括:机器人巡航监控站子系统、无线网络通信子系统和机器人本体自主巡航控制子系统;
所述机器人巡航监控站子系统用于监控水面机器人工作状态、打开水域地图以及指定水面机器人的巡航路径;
所述无线网络通信子系统用于构建机器人巡航监控站子系统与机器人本体自主巡航控制子系统的无线网络通信链路;
所述机器人本体自主巡航控制子系统用于根据机器人巡航监控站子系统的水域地图和巡航路径自主巡航。
进一步地:机器人本体自主巡航控制子系统包括:本地组网单元、避碰单元、运动主控单元、推进器控制器、导航计算单元、组合导航器、视觉计算单元、避碰超声阵列、推进器、水面目标检测激光雷达、水面目标检测相机和建图激光雷达;
所述避碰超声阵列与避碰单元通信连接,用于从多个方向探测障碍物的位置;
所述避碰单元与运动主控单元通信连接,用于根据避碰超声阵列探测信息判断障碍物与水面机器人的距离信息,并控制水面机器人避开障碍物;
所述水面目标检测激光雷达与本地组网单元通信连接,用于采集水面漂浮物的点云数据;
所述水面目标检测相机与本地组网单元通信连接,用于采集水面图像以探测水面漂浮物;
所述建图激光雷达与本地组网单元通信连接,用于扫描水域的岸体边界,进而构建栅格地图;
所述视觉计算单元分别与本地组网单元和推进器控制器通信连接,用于利用水面目标检测激光雷达和水面目标检测相机检测目标并搜寻水面漂浮目标;
所述本地组网单元还与运动主控单元、导航计算单元和无线网络通信子系统通信连接,用于构建机器人本体自主巡航控制子系统各单元间数据交互的本地网络;
所述运动主控单元还分别与推进器控制器和导航计算单元通信连接,用于接收导航计算单元、避碰单元以及通过本地组网单元发过来的运动控制参数,并将参数转化成对推进器控制器的指令,进而控制水面机器人的移动速度和行驶方向;
所述推进器控制器还与推进器通信连接,用于调节推进器的转速和转向;
所述推进器用于推进水面机器人;
所述导航计算单元还与组合导航器通信连接,用于根据巡航路径控制水面机器人按点巡航,或者根据初始点和终点规划自主规划巡航路线;
所述组合导航器用于提供水面机器人的位姿信息;
所述组合导航器包括GPS模块和惯性传感器模块。
一种水面机器人自主巡航方法,包括以下步骤:
S1、开启机器人巡航监控站子系统、无线网络通信子系统和机器人本体自主巡航控制子系统,并通过无线网络通信子系统建立机器人巡航监控站子系统和机器人本体自主巡航控制子系统的无线通信连接;
S2、对机器人本体自主巡航控制子系统进行标定;
S3、通过机器人本体自主巡航控制子系统的建图激光雷达进行水域建图,得到预始航行区域地图;
S4、通过无线网络通信子系统,将预始航行区域地图发送给机器人巡航监控站子系统;
S5、手动修正预始航行区域地图,得到航行区域地图,并通过无线网络通信子系统将航行区域地图从机器人巡航监控站子系统发送给机器人本体自主巡航控制子系统;
S6、通过机器人巡航监控站子系统监测水面机器人初始位姿和状态,等待水面机器人就绪;
S7、通过机器人巡航监控站子系统编辑水面机器人初始巡航路线,并通过无线网络通信子系统将初始巡航路线发送给机器人本体自主巡航控制子系统;
S8、通过机器人巡航监控站子系统和无线网络通信子系统向机器人本体自主巡航控制子系统下达自主巡航启动指令,并通过机器人巡航监控站子系统实时监控水面机器人的位姿和状态;
S9、通过机器人本体自主巡航控制子系统进行水面机器人的自主定位、航行和搜寻工作。
进一步地:步骤S2包括以下步骤:
S21、对建图激光雷达和组合导航器进行联合标定;
S22、对水面目标检测相机和水面目标检测激光雷达进行联合标定。
进一步地:步骤S21包括以下步骤:
S211、通过组合导航器的GPS模块测量得到球坐标系经纬信息;
S212、对球坐标系经纬信息进行投影变换,得到地理平面坐标系经纬信息;
S213、通过建图激光雷达扫描得到水域栅格地图;
S214、通过组合导航器的惯性传感器模块得到水面机器人朝向姿态;
S215、采用水面机器人朝向姿态修正水域栅格地图的坐标轴方向;
S216、采集修正后的水域栅格地图的坐标点及其对应的地理平面坐标点,通过建立两个坐标系的平移和旋转关系方程组,得到球坐标系与水域栅格地图坐标的转换关系,完成对建图激光雷达和组合导航器的联合标定。
进一步地:步骤S22包括以下步骤:
S221、通过水面目标检测激光雷达构建一个以水面目标检测激光雷达中心为原点的激光雷达坐标系,通过水面目标检测激光雷达扫描得到三维激光点;
S222、通过水面目标检测相机构建一个以水面目标检测相机光心为原点的相机坐标系,通过水面目标检测相机摄取二维图像;
S223、根据二维图像建立二维坐标系,通过针孔模型对相机坐标系三维点坐标进行投影,得到与二维图像对应的二维坐标点;
S224、采集标定板上相机坐标系下特征点及其对应的三维激光点,将对应的特征点投射成二维图像中的二维坐标点,建立激光雷达坐标系和相机坐标系的平移和旋转关系方程组,进而得到激光雷达坐标系与相机图像二维坐标系的关系,完成对水面目标检测相机和水面目标检测激光雷达的联合标定。
进一步地:步骤S9包括以下步骤:
S91、通过机器人本体自主巡航控制子系统控制水面机器人按初始巡航路线行驶;
S92、通过机器人本体自主巡航控制子系统进行漂浮目标搜寻操作,得到水面漂浮物状况;
S93、根据水面漂浮物状况,通过机器人本体自主巡航控制子系统进行航线修订,得到修订后的航线;
S94、通过机器人本体自主巡航控制子系统控制水面机器人按修订后的航线行驶。
进一步地:步骤S91和步骤S94中通过机器人本体自主巡航控制子系统控制水面机器人按航线行驶的方法包括以下步骤:
B1、根据联合标定得到的球坐标与水域栅格地图坐标转换关系,得到机器人在水域栅格地图中的位姿;
B2、根据机器人位姿、水域栅格地图、航线和障碍物方位,通过导航计算单元计算水面机器人运动参数;
B3、通过导航计算单元将水面机器人运动参数发送给运动主控单元;
B4、根据水面机器人运动参数,通过运动主控单元向推进器控制器下达运动指令;
B5、根据运动指令,通过推进器控制器驱动推进器,调整水面机器人的位姿。
进一步地:步骤S92包括以下步骤:
S921、通过水面目标检测相机采集水面图像;
S922、通过视觉计算单元分析水面图像,提取图像特征;
S923、通过视觉计算单元分析图像特征,计算疑似漂浮目标在图像中的位置;
S924、通过视觉计算单元、导航计算单元、避碰单元、运动主控单元和推进器控制器的协同作用,控制水面机器人靠近疑似漂浮目标;
S925、通过视觉计算单元对疑似漂浮目标进行目标检测,得到水面漂浮物状况。
进一步地:步骤S925包括以下步骤:
S9251、通过水面目标检测激光雷达和水面目标检测相机对疑似漂浮目标进行同步采集,得到点云Q和图像I;
S9252、通过视觉计算单元用预存的模型对图像I进行识别分类,在图像I中生成包围疑似漂浮目标的包围盒;
S9253、根据联合标定得到的水面目标检测激光雷达坐标系与相机图像二维坐标系的关系,将点云Q透射到图像I中,得到对应于包围盒中的点云Q′;
S9254、若点云Q′不为空集且点云Q′中元素数量大于预设阈值nth,则跳转至步骤S9255,否则跳转步骤S9256;
S9255、判决疑似漂浮目标为真漂浮目标,得到水面漂浮物状况;
S9256、判决疑似漂浮目标为假漂浮目标,得到水面漂浮物状况。
本发明的有益效果为:通过无线网络通信,使得用户能通过监测站控制水面机器人建立水域地图、学习水面环境,为后续水面机器人自主航行做准备;把组合导航技术应用于水面机器人自主航行,实现自主规划行驶路径;把激光扫描点云处理与计算机视觉计算结合起来用于水面漂浮目标自主搜寻,进而实现作业过程中的自主规划行驶路径。所公开的利用水面目标检测激光雷达和水面目标检测相机协同作用的水面漂浮目标自主搜寻方法特别适合目标点数量和位置不确定的情况,可有效排除光照导致的倒影、水纹干扰。本发明将增强水面机器人的自主作业能力,切实减轻有人作业的工作量,提高其水面作业的效率。
附图说明
图1为一种水面机器人自主巡航系统框图;
图2为一种水面机器人自主巡航流程示意图。
具体实施方式
下面对本发明的具体实施方式进行描述,以便于本技术领域的技术人员理解本发明,但应该清楚,本发明不限于具体实施方式的范围,对本技术领域的普通技术人员来讲,只要各种变化在所附的权利要求限定和确定的本发明的精神和范围内,这些变化是显而易见的,一切利用本发明构思的发明创造均在保护之列。
如图1所示,在本发明的一个实施例中,一种水面机器人自主巡航系统,包括:机器人巡航监控站子系统、无线网络通信子系统和机器人本体自主巡航控制子系统;
所述机器人巡航监控站子系统用于监控水面机器人工作状态、打开水域地图以及指定水面机器人的巡航路径;
所述无线网络通信子系统用于构建机器人巡航监控站子系统与机器人本体自主巡航控制子系统的无线网络通信链路;
所述机器人本体自主巡航控制子系统用于根据机器人巡航监控站子系统的水域地图和巡航路径自主巡航。
机器人本体自主巡航控制子系统包括:本地组网单元、避碰单元、运动主控单元、推进器控制器、导航计算单元、组合导航器、视觉计算单元、避碰超声阵列、推进器、水面目标检测激光雷达、水面目标检测相机和建图激光雷达;
所述避碰超声阵列与避碰单元通信连接,用于从多个方向探测障碍物的位置;
避碰超声阵列为安装在水面机器人不同部位的N个超声波探头,N为大于1的整数;
所述避碰单元与运动主控单元通信连接,用于根据避碰超声阵列探测信息判断障碍物与水面机器人的距离信息,并控制水面机器人避开障碍物;
所述避碰单元为运行了避碰控制软件的嵌入式计算模块;
所述水面目标检测激光雷达与本地组网单元通信连接,用于采集水面漂浮物的点云数据;
所述水面目标检测激光雷达为三维激光扫描模块;
所述水面目标检测相机与本地组网单元通信连接,用于采集水面图像以探测水面漂浮物;
所述水面目标检测相机为高清网络工业相机;
所述建图激光雷达与本地组网单元通信连接,用于扫描水域的岸体边界,进而构建栅格地图;
所述建图激光雷达为二维激光扫描模块;
所述视觉计算单元分别与本地组网单元和推进器控制器通信连接,用于利用水面目标检测激光雷达和水面目标检测相机检测目标并搜寻水面漂浮目标;
所述视觉计算单元为运行了点云和图像处理软件的嵌入式计算模块;
所述本地组网单元还与运动主控单元、导航计算单元和无线网络通信子系统通信连接,用于构建机器人本体自主巡航控制子系统各单元间数据交互的本地网络;
所述本地组网单元为工业级标准联网设备;
所述运动主控单元还分别与推进器控制器和导航计算单元通信连接,用于接收导航计算单元、避碰单元以及通过本地组网单元发过来的运动控制参数,并将参数转化成对推进器控制器的指令,进而控制水面机器人的移动速度和行驶方向;
所述运动主控单元为运行控制与通信软件的嵌入式计算模块;
所述推进器控制器还与推进器通信连接,用于调节推进器的转速和转向;
所述推进器控制器为控制机器人运动的执行模块;
所述推进器用于推进水面机器人;
所述导航计算单元还与组合导航器通信连接,用于根据巡航路径控制水面机器人按点巡航,或者根据初始点和终点规划自主规划巡航路线;
所述导航计算单元为运行了导航软件的嵌入式计算模块;
所述组合导航器用于提供水面机器人的位姿信息;
所述组合导航器包括GPS模块和惯性传感器模块。
如图2所示,一种水面机器人自主巡航方法,包括以下步骤:
S1、开启机器人巡航监控站子系统、无线网络通信子系统和机器人本体自主巡航控制子系统,并通过无线网络通信子系统建立机器人巡航监控站子系统和机器人本体自主巡航控制子系统的无线通信连接;
S2、对机器人本体自主巡航控制子系统进行标定;
步骤S2包括以下步骤:
S21、对建图激光雷达和组合导航器进行联合标定;
步骤S21包括以下步骤:
S211、通过组合导航器的GPS模块测量得到球坐标系经纬信息;
S212、对球坐标系经纬信息进行投影变换,得到地理平面坐标系经纬信息;
S213、通过建图激光雷达扫描得到水域栅格地图;
S214、通过组合导航器的惯性传感器模块得到水面机器人朝向姿态;
S215、采用水面机器人朝向姿态修正水域栅格地图的坐标轴方向;
S216、采集修正后的水域栅格地图的坐标点及其对应的地理平面坐标点,通过建立两个坐标系的平移和旋转关系方程组,得到球坐标系与水域栅格地图坐标的转换关系,完成对建图激光雷达和组合导航器的联合标定。
S22、对水面目标检测相机和水面目标检测激光雷达进行联合标定。
步骤S22包括以下步骤:
S221、通过水面目标检测激光雷达构建一个以水面目标检测激光雷达中心为原点的激光雷达坐标系,通过水面目标检测激光雷达扫描得到三维激光点;
S222、通过水面目标检测相机构建一个以水面目标检测相机光心为原点的相机坐标系,通过水面目标检测相机摄取二维图像;
S223、根据二维图像建立二维坐标系,通过针孔模型对相机坐标系三维点坐标进行投影,得到与二维图像对应的二维坐标点;
S224、采集标定板上相机坐标系下特征点及其对应的三维激光点,将对应的特征点投射成二维图像中的二维坐标点,建立激光雷达坐标系和相机坐标系的平移和旋转关系方程组,进而得到激光雷达坐标系与相机图像二维坐标系的关系,完成对水面目标检测相机和水面目标检测激光雷达的联合标定。
S3、通过机器人本体自主巡航控制子系统的建图激光雷达进行水域建图,得到预始航行区域地图;
S4、通过无线网络通信子系统,将预始航行区域地图发送给机器人巡航监控站子系统;
S5、手动修正预始航行区域地图,得到航行区域地图,并通过无线网络通信子系统,将航行区域地图从机器人巡航监控站子系统发送给机器人本体自主巡航控制子系统;
S6、通过机器人巡航监控站子系统监测水面机器人初始位姿和状态,等待水面机器人就绪;
S7、通过机器人巡航监控站子系统编辑水面机器人初始巡航路线,并通过无线网络通信子系统将初始巡航路线发送给机器人本体自主巡航控制子系统;
S8、通过机器人巡航监控站子系统和无线网络通信子系统向机器人本体自主巡航控制子系统下达自主巡航启动指令,并通过机器人巡航监控站子系统实时监控水面机器人的位姿和状态;
步骤S6和S8中通过机器人巡航监控站子系统监测水面机器人位姿和状态的方法包括以下步骤:
A1、通过组合导航器的GPS模块测量水面机器人的定位信息;
A2、通过组合导航器的惯性传感器模块测量水面机器人的朝向姿态和加速度状态;
A3、通过无线网络通信子系统,将水面机器人的定位信息、朝向姿态和加速度状态从机器人巡航监控站子系统发送给机器人巡航监控站子系统。
S9、通过机器人本体自主巡航控制子系统进行水面机器人的自主定位、航行和搜寻工作。
步骤S9包括以下步骤:
S91、通过机器人本体自主巡航控制子系统控制水面机器人按初始巡航路线行驶;
S92、通过机器人本体自主巡航控制子系统进行漂浮目标搜寻操作,得到水面漂浮物状况;
步骤S92包括以下步骤:
S921、通过水面目标检测相机采集水面图像;
S922、通过视觉计算单元分析水面图像,提取图像特征;
S923、通过视觉计算单元分析图像特征,计算疑似漂浮目标在图像中的位置;
S924、通过视觉计算单元、导航计算单元、避碰单元、运动主控单元和推进器控制器的协同作用,控制水面机器人靠近疑似漂浮目标;
S925、通过视觉计算单元对疑似漂浮目标进行目标检测,得到水面漂浮物状况。
步骤S925包括以下步骤:
S9251、通过水面目标检测激光雷达和水面目标检测相机对疑似漂浮目标进行同步采集,得到点云Q和图像I;
S9252、通过视觉计算单元用预存的模型对图像I进行识别分类,在图像I中生成包围疑似漂浮目标的包围盒;
S9253、根据联合标定得到的水面目标检测激光雷达坐标系与相机图像二维坐标系的关系,将点云Q透射到图像I中,得到对应于包围盒中的点云Q′;
S9254、若点云Q′不为空集且点云Q′中元素数量大于预设阈值nth,则跳转至步骤S9255,否则跳转步骤S9256;
S9255、判决疑似漂浮目标为真漂浮目标,得到水面漂浮物状况;
S9256、判决疑似漂浮目标为假漂浮目标,得到水面漂浮物状况。
S93、根据水面漂浮物状况,通过机器人本体自主巡航控制子系统进行航线修订,得到修订后的航线;
S94、通过机器人本体自主巡航控制子系统控制水面机器人按修订后的航线行驶。
步骤S91和步骤S94中通过机器人本体自主巡航控制子系统控制水面机器人按航线行驶的方法包括以下步骤:
B1、根据联合标定得到的球坐标与水域栅格地图坐标转换关系,得到机器人在水域栅格地图中的位姿;
B2、根据机器人位姿、水域栅格地图、航线和障碍物方位,通过导航计算单元计算水面机器人运动参数;
B3、通过导航计算单元将水面机器人运动参数发送给运动主控单元;
B4、根据水面机器人运动参数,通过运动主控单元向推进器控制器下达运动指令;
B5、根据运动指令,通过推进器控制器驱动推进器,调整水面机器人的位姿。
本发明通过无线网络通信,使得用户能通过监测站控制水面机器人建立水域地图、学习水面环境,为后续水面机器人自主航行做准备;把组合导航技术应用于水面机器人自主航行,实现自主规划行驶路径;把激光扫描点云处理与计算机视觉计算结合起来用于水面漂浮目标自主搜寻,进而实现作业过程中的自主规划行驶路径。所公开的利用水面目标检测激光雷达和水面目标检测相机协同作用的水面漂浮目标自主搜寻方法特别适合目标点数量和位置不确定的情况,可有效排除光照导致的倒影、水纹干扰。本发明将增强水面机器人的自主作业能力,切实减轻有人作业的工作量,提高其水面作业的效率。
Claims (10)
1.一种水面机器人自主巡航系统,其特征在于,包括:机器人巡航监控站子系统、无线网络通信子系统和机器人本体自主巡航控制子系统;
所述机器人巡航监控站子系统用于监控水面机器人工作状态、打开水域地图以及指定水面机器人的巡航路径;
所述无线网络通信子系统用于构建机器人巡航监控站子系统与机器人本体自主巡航控制子系统的无线网络通信链路;
所述机器人本体自主巡航控制子系统用于根据机器人巡航监控站子系统的水域地图和巡航路径自主巡航。
2.根据权利要求1所述的水面机器人自主巡航系统,其特征在于,所述机器人本体自主巡航控制子系统包括:本地组网单元、避碰单元、运动主控单元、推进器控制器、导航计算单元、组合导航器、视觉计算单元、避碰超声阵列、推进器、水面目标检测激光雷达、水面目标检测相机和建图激光雷达;
所述避碰超声阵列与避碰单元通信连接,用于从多个方向探测障碍物的位置;
所述避碰单元与运动主控单元通信连接,用于根据避碰超声阵列探测信息判断障碍物与水面机器人的距离信息,并控制水面机器人避开障碍物;
所述水面目标检测激光雷达与本地组网单元通信连接,用于采集水面漂浮物的点云数据;
所述水面目标检测相机与本地组网单元通信连接,用于采集水面图像以探测水面漂浮物;
所述建图激光雷达与本地组网单元通信连接,用于扫描水域的岸体边界,进而构建栅格地图;
所述视觉计算单元分别与本地组网单元和推进器控制器通信连接,用于利用水面目标检测激光雷达和水面目标检测相机检测目标并搜寻水面漂浮目标;
所述本地组网单元还与运动主控单元、导航计算单元和无线网络通信子系统通信连接,用于构建机器人本体自主巡航控制子系统各单元间数据交互的本地网络;
所述运动主控单元还分别与推进器控制器和导航计算单元通信连接,用于接收导航计算单元、避碰单元以及通过本地组网单元发过来的运动控制参数,并将参数转化成对推进器控制器的指令,进而控制水面机器人的移动速度和行驶方向;
所述推进器控制器还与推进器通信连接,用于调节推进器的转速和转向;
所述推进器用于推进水面机器人;
所述导航计算单元还与组合导航器通信连接,用于根据巡航路径控制水面机器人按点巡航,或者根据初始点和终点规划自主规划巡航路线;
所述组合导航器用于提供水面机器人的位姿信息;
所述组合导航器包括GPS模块和惯性传感器模块。
3.一种水面机器人自主巡航方法,其特征在于,包括以下步骤:
S1、开启机器人巡航监控站子系统、无线网络通信子系统和机器人本体自主巡航控制子系统,并通过无线网络通信子系统建立机器人巡航监控站子系统和机器人本体自主巡航控制子系统的无线通信连接;
S2、对机器人本体自主巡航控制子系统进行标定;
S3、通过机器人本体自主巡航控制子系统的建图激光雷达进行水域建图,得到预始航行区域地图;
S4、通过无线网络通信子系统,将预始航行区域地图发送给机器人巡航监控站子系统;
S5、手动修正预始航行区域地图,得到航行区域地图,并通过无线网络通信子系统将航行区域地图从机器人巡航监控站子系统发送给机器人本体自主巡航控制子系统;
S6、通过机器人巡航监控站子系统监测水面机器人初始位姿和状态,等待水面机器人就绪;
S7、通过机器人巡航监控站子系统编辑水面机器人初始巡航路线,并通过无线网络通信子系统将初始巡航路线发送给机器人本体自主巡航控制子系统;
S8、通过机器人巡航监控站子系统和无线网络通信子系统向机器人本体自主巡航控制子系统下达自主巡航启动指令,并通过机器人巡航监控站子系统实时监控水面机器人的位姿和状态;
S9、通过机器人本体自主巡航控制子系统进行水面机器人的自主定位、航行和搜寻工作。
4.根据权利要求3所述的水面机器人自主巡航方法,其特征在于,所述步骤S2包括以下步骤:
S21、对建图激光雷达和组合导航器进行联合标定;
S22、对水面目标检测相机和水面目标检测激光雷达进行联合标定。
5.根据权利要求4所述的水面机器人自主巡航方法,其特征在于,所述步骤S21包括以下步骤:
S211、通过组合导航器的GPS模块测量得到球坐标系经纬信息;
S212、对球坐标系经纬信息进行投影变换,得到地理平面坐标系经纬信息;
S213、通过建图激光雷达扫描得到水域栅格地图;
S214、通过组合导航器的惯性传感器模块得到水面机器人朝向姿态;
S215、采用水面机器人朝向姿态修正水域栅格地图的坐标轴方向;
S216、采集修正后的水域栅格地图的坐标点及其对应的地理平面坐标点,通过建立两个坐标系的平移和旋转关系方程组,得到球坐标系与水域栅格地图坐标的转换关系,完成对建图激光雷达和组合导航器的联合标定。
6.根据权利要求4所述的水面机器人自主巡航方法,其特征在于,所述步骤S22包括以下步骤:
S221、通过水面目标检测激光雷达构建一个以水面目标检测激光雷达中心为原点的激光雷达坐标系,通过水面目标检测激光雷达扫描得到三维激光点;
S222、通过水面目标检测相机构建一个以水面目标检测相机光心为原点的相机坐标系,通过水面目标检测相机摄取二维图像;
S223、根据二维图像建立二维坐标系,通过针孔模型对相机坐标系三维点坐标进行投影,得到与二维图像对应的二维坐标点;
S224、采集标定板上相机坐标系下特征点及其对应的三维激光点,将对应的特征点投射成二维图像中的二维坐标点,建立激光雷达坐标系和相机坐标系的平移和旋转关系方程组,进而得到激光雷达坐标系与相机图像二维坐标系的关系,完成对水面目标检测相机和水面目标检测激光雷达的联合标定。
7.根据权利要求3所述的水面机器人自主巡航方法,其特征在于,所述步骤S9包括以下步骤:
S91、通过机器人本体自主巡航控制子系统控制水面机器人按初始巡航路线行驶;
S92、通过机器人本体自主巡航控制子系统进行漂浮目标搜寻操作,得到水面漂浮物状况;
S93、根据水面漂浮物状况,通过机器人本体自主巡航控制子系统进行航线修订,得到修订后的航线;
S94、通过机器人本体自主巡航控制子系统控制水面机器人按修订后的航线行驶。
8.根据权利要求7或5所述的水面机器人自主巡航方法,其特征在于,所述步骤S91和步骤S94中通过机器人本体自主巡航控制子系统控制水面机器人按航线行驶的方法包括以下步骤:
B1、根据联合标定得到的球坐标与水域栅格地图坐标转换关系,得到机器人在水域栅格地图中的位姿;
B2、根据机器人位姿、水域栅格地图、航线和障碍物方位,通过导航计算单元计算水面机器人运动参数;
B3、通过导航计算单元将水面机器人运动参数发送给运动主控单元;
B4、根据水面机器人运动参数,通过运动主控单元向推进器控制器下达运动指令;
B5、根据运动指令,通过推进器控制器驱动推进器,调整水面机器人的位姿。
9.根据权利要求7所述的水面机器人自主巡航方法,其特征在于,所述步骤S92包括以下步骤:
S921、通过水面目标检测相机采集水面图像;
S922、通过视觉计算单元分析水面图像,提取图像特征;
S923、通过视觉计算单元分析图像特征,计算疑似漂浮目标在图像中的位置;
S924、通过视觉计算单元、导航计算单元、避碰单元、运动主控单元和推进器控制器的协同作用,控制水面机器人靠近疑似漂浮目标;
S925、通过视觉计算单元对疑似漂浮目标进行目标检测,得到水面漂浮物状况。
10.根据权利要求9所述的水面机器人自主巡航方法,其特征在于,所述步骤S925包括以下步骤:
S9251、通过水面目标检测激光雷达和水面目标检测相机对疑似漂浮目标进行同步采集,得到点云Q和图像I;
S9252、通过视觉计算单元用预存的模型对图像I进行识别分类,在图像I中生成包围疑似漂浮目标的包围盒;
S9253、根据联合标定得到的水面目标检测激光雷达坐标系与相机图像二维坐标系的关系,将点云Q透射到图像I中,得到对应于包围盒中的点云Q′;
S9254、若点云Q′不为空集且点云Q′中元素数量大于预设阈值nth,则跳转至步骤S9255,否则跳转步骤S9256;
S9255、判决疑似漂浮目标为真漂浮目标,得到水面漂浮物状况;
S9256、判决疑似漂浮目标为假漂浮目标,得到水面漂浮物状况。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911009113.7A CN110737271B (zh) | 2019-10-23 | 2019-10-23 | 一种水面机器人自主巡航系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911009113.7A CN110737271B (zh) | 2019-10-23 | 2019-10-23 | 一种水面机器人自主巡航系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110737271A true CN110737271A (zh) | 2020-01-31 |
CN110737271B CN110737271B (zh) | 2022-08-02 |
Family
ID=69270914
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911009113.7A Active CN110737271B (zh) | 2019-10-23 | 2019-10-23 | 一种水面机器人自主巡航系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110737271B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111309036A (zh) * | 2020-05-14 | 2020-06-19 | 江苏博人文化科技有限公司 | 一种基于自动驾驶船的空间信息测量系统 |
CN111343427A (zh) * | 2020-02-28 | 2020-06-26 | 苏州昭轩数字科技有限公司 | 一种基于人工智能的自动化稻田种植控制方法及其系统 |
CN111469131A (zh) * | 2020-05-10 | 2020-07-31 | 上海大学 | 一种装配机械臂的无人艇水面垃圾清理控制系统及方法 |
CN111752286A (zh) * | 2020-03-09 | 2020-10-09 | 西南科技大学 | 一种小型无人船艇自动停泊方法 |
CN112829885A (zh) * | 2020-12-31 | 2021-05-25 | 中国船舶重工集团有限公司第七一0研究所 | 一种无人自主侦察船 |
CN113325867A (zh) * | 2021-05-21 | 2021-08-31 | 华中科技大学 | 一种无人航行器搜寻的路径规划方法、装置和无人航行器 |
CN113378606A (zh) * | 2020-03-10 | 2021-09-10 | 杭州海康威视数字技术股份有限公司 | 一种标注信息确定方法、装置及系统 |
CN113670290A (zh) * | 2021-06-30 | 2021-11-19 | 西南科技大学 | 一种基于多机器人协作的移动机器人室内地图构建方法 |
CN114355914A (zh) * | 2021-12-27 | 2022-04-15 | 盐城工学院 | 用于无人船的自主巡航系统及控制方法 |
CN116520853A (zh) * | 2023-06-08 | 2023-08-01 | 江苏商贸职业学院 | 一种基于人工智能技术的农业巡检机器人 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120265380A1 (en) * | 2011-04-13 | 2012-10-18 | California Institute Of Technology | Target Trailing with Safe Navigation with colregs for Maritime Autonomous Surface Vehicles |
CN105314081A (zh) * | 2014-06-25 | 2016-02-10 | 中国科学院沈阳自动化研究所 | 一种混合动力快速无人监测艇 |
CN105752280A (zh) * | 2015-12-18 | 2016-07-13 | 南京理工大学 | 一种用于水域信息采集的机器人船系统及其控制方法 |
CN107117268A (zh) * | 2017-05-12 | 2017-09-01 | 西南科技大学 | 一种异构系统的海洋垃圾回收方法及系统 |
CN107229276A (zh) * | 2017-05-27 | 2017-10-03 | 浙江大学 | 基于ARM Cortex‑M7处理器的智能无人船平台及其控制方法 |
CN108303988A (zh) * | 2018-03-28 | 2018-07-20 | 大连海事大学 | 一种无人船的目标识别追踪系统及其工作方法 |
CN108489492A (zh) * | 2018-02-13 | 2018-09-04 | 上海大学 | 一种考虑海况因素的无人艇路径规划系统和方法 |
CN108562913A (zh) * | 2018-04-19 | 2018-09-21 | 武汉大学 | 一种基于三维激光雷达的无人艇假目标检测方法 |
CN207908979U (zh) * | 2018-03-28 | 2018-09-25 | 大连海事大学 | 一种无人船的目标识别追踪系统 |
US20190001976A1 (en) * | 2017-07-01 | 2019-01-03 | TuSimple | System and method for adaptive cruise control for low speed following |
CN109425347A (zh) * | 2017-08-21 | 2019-03-05 | 天津海之星船艇科技有限公司 | 一种半潜无人船的同时定位与地图构建方法 |
CN109444911A (zh) * | 2018-10-18 | 2019-03-08 | 哈尔滨工程大学 | 一种单目相机和激光雷达信息融合的无人艇水面目标检测识别与定位方法 |
CN109933056A (zh) * | 2017-12-18 | 2019-06-25 | 九阳股份有限公司 | 一种基于slam的机器人导航方法以及机器人 |
CN109946700A (zh) * | 2019-03-19 | 2019-06-28 | 江苏航运职业技术学院 | 一种限定区域的水面无人艇巡航路径规划系统及方法 |
CN110208816A (zh) * | 2019-06-04 | 2019-09-06 | 浙江海洋大学 | 用于海上无人艇的自动障碍物识别系统及识别方法 |
-
2019
- 2019-10-23 CN CN201911009113.7A patent/CN110737271B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120265380A1 (en) * | 2011-04-13 | 2012-10-18 | California Institute Of Technology | Target Trailing with Safe Navigation with colregs for Maritime Autonomous Surface Vehicles |
CN105314081A (zh) * | 2014-06-25 | 2016-02-10 | 中国科学院沈阳自动化研究所 | 一种混合动力快速无人监测艇 |
CN105752280A (zh) * | 2015-12-18 | 2016-07-13 | 南京理工大学 | 一种用于水域信息采集的机器人船系统及其控制方法 |
CN107117268A (zh) * | 2017-05-12 | 2017-09-01 | 西南科技大学 | 一种异构系统的海洋垃圾回收方法及系统 |
CN107229276A (zh) * | 2017-05-27 | 2017-10-03 | 浙江大学 | 基于ARM Cortex‑M7处理器的智能无人船平台及其控制方法 |
US20190001976A1 (en) * | 2017-07-01 | 2019-01-03 | TuSimple | System and method for adaptive cruise control for low speed following |
CN109425347A (zh) * | 2017-08-21 | 2019-03-05 | 天津海之星船艇科技有限公司 | 一种半潜无人船的同时定位与地图构建方法 |
CN109933056A (zh) * | 2017-12-18 | 2019-06-25 | 九阳股份有限公司 | 一种基于slam的机器人导航方法以及机器人 |
CN108489492A (zh) * | 2018-02-13 | 2018-09-04 | 上海大学 | 一种考虑海况因素的无人艇路径规划系统和方法 |
CN207908979U (zh) * | 2018-03-28 | 2018-09-25 | 大连海事大学 | 一种无人船的目标识别追踪系统 |
CN108303988A (zh) * | 2018-03-28 | 2018-07-20 | 大连海事大学 | 一种无人船的目标识别追踪系统及其工作方法 |
CN108562913A (zh) * | 2018-04-19 | 2018-09-21 | 武汉大学 | 一种基于三维激光雷达的无人艇假目标检测方法 |
CN109444911A (zh) * | 2018-10-18 | 2019-03-08 | 哈尔滨工程大学 | 一种单目相机和激光雷达信息融合的无人艇水面目标检测识别与定位方法 |
CN109946700A (zh) * | 2019-03-19 | 2019-06-28 | 江苏航运职业技术学院 | 一种限定区域的水面无人艇巡航路径规划系统及方法 |
CN110208816A (zh) * | 2019-06-04 | 2019-09-06 | 浙江海洋大学 | 用于海上无人艇的自动障碍物识别系统及识别方法 |
Non-Patent Citations (5)
Title |
---|
SU YIXIN 等: "Design and simulation of a path planning algorithm for unmanned surface vehicle", 《JOURNAL OF WUHAN UNIVERSITY OF TECHNOLOGY》 * |
刘茜: "水面移动机器人目标检测与定位方法研究", 《中国优秀硕士学位论文全文数据库信息科技辑》 * |
向可均 等: "基于三维激光扫描的水面目标物体检测", 《应用激光》 * |
章大勇 等: "《激光雷达/惯性组合导航系统的一致性与最优估计问题研究》", 28 February 2017, 国防工业出版社 * |
赵玉梁: "基于三维激光雷达的无人船目标检测", 《中国优秀硕士学位论文全文数据库工程科技Ⅱ辑》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111343427A (zh) * | 2020-02-28 | 2020-06-26 | 苏州昭轩数字科技有限公司 | 一种基于人工智能的自动化稻田种植控制方法及其系统 |
CN111752286A (zh) * | 2020-03-09 | 2020-10-09 | 西南科技大学 | 一种小型无人船艇自动停泊方法 |
CN111752286B (zh) * | 2020-03-09 | 2022-03-25 | 西南科技大学 | 一种小型无人船艇自动停泊方法 |
CN113378606A (zh) * | 2020-03-10 | 2021-09-10 | 杭州海康威视数字技术股份有限公司 | 一种标注信息确定方法、装置及系统 |
CN111469131A (zh) * | 2020-05-10 | 2020-07-31 | 上海大学 | 一种装配机械臂的无人艇水面垃圾清理控制系统及方法 |
CN111309036A (zh) * | 2020-05-14 | 2020-06-19 | 江苏博人文化科技有限公司 | 一种基于自动驾驶船的空间信息测量系统 |
CN112829885A (zh) * | 2020-12-31 | 2021-05-25 | 中国船舶重工集团有限公司第七一0研究所 | 一种无人自主侦察船 |
CN113325867A (zh) * | 2021-05-21 | 2021-08-31 | 华中科技大学 | 一种无人航行器搜寻的路径规划方法、装置和无人航行器 |
CN113670290A (zh) * | 2021-06-30 | 2021-11-19 | 西南科技大学 | 一种基于多机器人协作的移动机器人室内地图构建方法 |
CN113670290B (zh) * | 2021-06-30 | 2023-05-12 | 西南科技大学 | 一种基于多机器人协作的移动机器人室内地图构建方法 |
CN114355914A (zh) * | 2021-12-27 | 2022-04-15 | 盐城工学院 | 用于无人船的自主巡航系统及控制方法 |
CN114355914B (zh) * | 2021-12-27 | 2022-07-01 | 盐城工学院 | 用于无人船的自主巡航系统及控制方法 |
CN116520853A (zh) * | 2023-06-08 | 2023-08-01 | 江苏商贸职业学院 | 一种基于人工智能技术的农业巡检机器人 |
Also Published As
Publication number | Publication date |
---|---|
CN110737271B (zh) | 2022-08-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110737271B (zh) | 一种水面机器人自主巡航系统及方法 | |
CN110008851B (zh) | 一种车道线检测的方法及设备 | |
JP2020085886A (ja) | 乗物、乗物測位システム、及び乗物測位方法 | |
EP3850456B1 (en) | Control and navigation systems, pose optimisation, mapping, and localisation techniques | |
CN112819943B (zh) | 一种基于全景相机的主动视觉slam系统 | |
CN114332360A (zh) | 一种协同三维建图方法及系统 | |
CN113848931B (zh) | 农机自动驾驶障碍物识别方法、系统、设备和存储介质 | |
JP2022027593A (ja) | 可移動機器の測位方法、装置及び可移動機器 | |
CN106959702A (zh) | 一种无人机自主避让方法及系统 | |
Newman et al. | Self-driving cars: A platform for learning and research | |
CN114200945A (zh) | 一种移动机器人的安全控制方法 | |
CN113674355A (zh) | 一种基于相机与激光雷达的目标识别与定位方法 | |
CN110705385B (zh) | 一种障碍物角度的检测方法、装置、设备及介质 | |
Mallik et al. | Real-time Detection and Avoidance of Obstacles in the Path of Autonomous Vehicles Using Monocular RGB Camera | |
CN114527763A (zh) | 基于目标检测和slam构图的智能巡检系统及方法 | |
Thompson | Maritime object detection, tracking, and classification using lidar and vision-based sensor fusion | |
Wang et al. | Research on autonomous planning method based on improved quantum Particle Swarm Optimization for Autonomous Underwater Vehicle | |
Lin et al. | The fuzzy-based visual intelligent guidance system of an autonomous underwater vehicle: realization of identifying and tracking underwater target objects | |
CN113298044B (zh) | 基于定位补偿的障碍物检测方法、系统、设备及存储介质 | |
Takahashi et al. | Performance evaluation of robot localization using 2d and 3d point clouds | |
CN114353799A (zh) | 搭载多线激光雷达的无人驾驶平台室内快速全局定位方法 | |
CN109241567B (zh) | 一种舰载机自动调度半实物仿真系统及方法 | |
Haque et al. | Vision based trajectory following robot and swarm | |
Gallage et al. | Codesign of edge intelligence and automated guided vehicle control | |
Du et al. | Pose Measurement Method of Non-cooperative Targets Based on Semantic Segmentation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |