CN114545918A - 一种可接入移动终端的机器人巡检系统及巡检方法 - Google Patents
一种可接入移动终端的机器人巡检系统及巡检方法 Download PDFInfo
- Publication number
- CN114545918A CN114545918A CN202111520518.4A CN202111520518A CN114545918A CN 114545918 A CN114545918 A CN 114545918A CN 202111520518 A CN202111520518 A CN 202111520518A CN 114545918 A CN114545918 A CN 114545918A
- Authority
- CN
- China
- Prior art keywords
- mobile terminal
- module
- robot
- positioning
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007689 inspection Methods 0.000 title claims abstract description 65
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000012545 processing Methods 0.000 claims abstract description 69
- 238000012544 monitoring process Methods 0.000 claims abstract description 17
- 238000001514 detection method Methods 0.000 claims description 36
- 230000005540 biological transmission Effects 0.000 claims description 19
- 238000004891 communication Methods 0.000 claims description 17
- 230000006870 function Effects 0.000 claims description 14
- 238000010295 mobile communication Methods 0.000 claims description 10
- 238000006243 chemical reaction Methods 0.000 claims description 7
- 230000003993 interaction Effects 0.000 claims description 7
- 230000008447 perception Effects 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 3
- 239000002904 solvent Substances 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 25
- 230000001133 acceleration Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 8
- 239000007789 gas Substances 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 5
- 230000004913 activation Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 2
- 230000005684 electric field Effects 0.000 description 2
- 230000005674 electromagnetic induction Effects 0.000 description 2
- VNWKTOKETHGBQD-UHFFFAOYSA-N methane Chemical compound C VNWKTOKETHGBQD-UHFFFAOYSA-N 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007084 catalytic combustion reaction Methods 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 238000002790 cross-validation Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007786 learning performance Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000003345 natural gas Substances 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000004064 recycling Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0255—Control of position or course in two dimensions specially adapted to land vehicles using acoustic signals, e.g. ultra-sonic singals
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0257—Control of position or course in two dimensions specially adapted to land vehicles using a radar
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Aviation & Aerospace Engineering (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Electromagnetism (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Acoustics & Sound (AREA)
- Manipulator (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
本发明公开了一种可接入移动终端的机器人巡检系统及巡检方法,所述系统包括移动终端、机器人底盘和用户平台;所述移动终端上安装有机器人监测和定位导航软件;所述用户平台接收并显示移动终端拍摄并传输的现场音视频信息和定位信息,用户通过用户平台发出控制指令,无线控制机器人底盘实现移动巡检;所述移动终端可以自主分析拍摄到的现场音视频信息,基于移动终端自身携带的定位资源感知现场情况,进行自主定位导航,进而独立控制机器人底盘实现移动巡检;当移动终端不能进行自主定位导航时,机器人底盘获取移动终端的音视频信息和定位信息,并基于机器人底盘自身携带的定位装置及传感器进行自主导航处理,实现移动巡检。
Description
技术领域
本发明涉及机器人巡检技术领域,主要涉及一种可接入移动终端的机器人巡检系统及巡检方法。
背景技术
日常生活中手机、平板电脑作为生活必需品,更新迭代较快,家庭中有大量的二手手机、PAD等移动终端处于闲置状态,而且手机可能存在摄像头、麦克风、加速度传感器、陀螺仪、GPS/北斗定位、UWB定位、蓝牙定位、WIFI定位模块等多个传感器,这些传感器对于机器人的工作现场监测和定位导航都是可以利用的。通过将这些移动终端接入到机器人底盘中,可以很大程度的利用以上的传感器,研制出低成本、资源再利用版的机器人巡检系统。
发明内容
发明目的:针对上述背景技术中存在的问题,本发明提供了一种可接入移动终端的机器人巡检系统及巡检方法,可以利用闲置手机、PAD等移动终端上的摄像头、定位等多种传感器,实现机器人的工作现场监测和定位导航功能,降低成本的同时,也使得闲置资源得到有效利用。
技术方案:为实现上述目的,本发明采用的技术方案为:
一种可接入移动终端的机器人巡检系统,包括移动终端、机器人底盘和用户平台;所述移动终端上安装有机器人监测和定位导航软件;所述用户平台接收并显示移动终端拍摄并传输的现场音视频信息和定位信息,用户通过用户平台发出控制指令,无线控制机器人底盘实现移动巡检;所述移动终端可以自主分析拍摄到的现场音视频信息,基于移动终端自身携带的定位资源感知现场情况,进行自主定位导航,进而独立控制机器人底盘实现移动巡检;当移动终端不能进行自主定位导航时,机器人底盘获取移动终端的音视频信息和定位信息,并基于机器人底盘自身携带的定位装置及传感器进行自主导航处理,实现移动巡检。
进一步地,所述移动终端包括手机、平板电脑,根据移动终端实际配置,基于不同系统安装机器人监测和定位导航软件;所述机器人监测和定位导航软件获取自身携带的定位资源的感知信息,在移动终端的控制模块中进行格式转换,并转发给用户平台或用于自主定位导航,将信息传输至机器人底盘;所述定位资源包括移动终端自带的音视频处理模块、惯导处理模块、UWB处理模块、蓝牙处理模块、WIFI处理模块、卫星定位导航模块和移动通信定位模块;所述移动终端中还装有室内外地图软件,通过设置目的地位置,并在软件中显示移动终端的位置,可以在不同情况下获取最佳起止点路径。
进一步地,所述机器人底盘包括接口模块、传感器模块、主控模块、电源模块和驱动模块;所述接口模块与移动终端连接,实现机器人底盘和移动终端的信息传输和交互;所述传感器模块包括自身携带的巡检所需的气体检测传感器和用于定位的可选配传感器;所述主控模块接收来自移动终端的各项信息及传感器获取的信息,进行目标识别、定位和导航处理,并向驱动模块发出控制指令,由驱动模块控制机器人底座的电机;所述电源模块用于给传感器模块、接口模块、驱动模块、主控模块和移动终端供电。
进一步地,所述主控模块的处理模式包括遥控透传模式和自主控制模式;在遥控透传模式下,主控模块直接读取移动终端从接口模块传输的图像信息和定位信息,并将行驶角度等控制参数传输至驱动模块,驱动机器人底盘行驶;在自主控制模式下,主控模块通过接口模块接收移动终端自身携带的定位资源的感知信息,或者接收机器人底盘的可选配传感器信息,并通过芯片进行处理,获取最终定位信息,基于所述最终定位信息进行路径规划,最终获取最优路径,由驱动模块驱动机器人底盘沿驱动路径进行行驶巡检。
进一步地,所述主控模块中集成有建图软件模块;所述建图软件模块中,机器人先进行全局沿边,并通过探测模块获取点云数据,建立地图;机器人进行沿边来获取点云数据,然后通过点云数据来对机器人的位姿进行修正。
进一步地,所述主控模块中集成有路径规划模块;在路径规划模块中,使用扩展卡尔曼滤波算法对探测数据进行处理,实现机器人位姿的预估计,之后在栅格地图建立完成的基础上,在设定的代价函数计算规则下获取最优路径;通过优化代价函数,实现机器人路径规划算法的优化处理。
进一步地,通过充电桩采用有线或无线模式,将交流电转换为直流电供给电源模块,电源模块通过AC/DC转换,为主控模块、接口模块、驱动模块、传感器模块和移动终端分别提供合适的直流电压。
进一步地,所述驱动模块包括电机控制电路、电机驱动电路和电机;所述电机控制电路接收外部主控模块的行驶指令,并转换成电机驱动电路对应的控制指令;电机驱动电路包括大功率对管,产生占空比不同的PWM脉冲,调整电机的转速,改变电压极性,实现对电机的正反转控制;所述电机采用直流减速电机,通过传动系统控制机器人底盘移动。
进一步地,所述用户平台包括手机、平板电脑、家庭电脑和专用通信设备;用户平台通过无线传输与移动终端进行信息交互,将控制信息传输至移动终端;对于移动终端传输的音视频信息,用户平台进行解码处理后显示给用户;移动终端各类传感器的定位信息也一并显示给用户。
一种采用上述可接入移动终端的机器人巡检系统的巡检方法,包括3种巡检方式:直接遥控巡检方式、移动终端感知、数据处理和控制底盘方式和移动终端感知、机器人底盘处理方式;具体地,
(1)、直接遥控巡检方式:
移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息;由用户通过用户平台直接下达控制指令,控制指令由无线通信传输至移动终端,并经由接口模块传输至机器人底盘主控模块;所述主控模块直接读取移动终端从接口模块传输的图像信息和定位信息,并将行驶角度等控制参数传输至驱动模块,驱动机器人底盘行驶,进行巡检;
(2)、移动终端感知、数据处理和控制底盘方式:
当移动终端可以自主定位导航时,移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息;同时根据移动终端定位资源感知的数据,自行图像处理并自主定位导航,将控制指令经由接口模块传输至机器人底盘主控模块;所述主控模块将控制参数传输至驱动模块,驱动机器人底盘行驶,进行巡检;
(3)、移动终端感知、机器人底盘处理方式:
当移动终端无法进行自主定位导航时,移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息;同时将移动终端的传感器获取的数据通过接口模块传输至机器人底盘,结合机器人底盘自带的定位探测和传感装置,通过建图、路径规划处理,由机器人底盘进行自主导航处理,获取最优路径,并通过驱动模块驱动电机,从而实现巡检目的。
有益效果:
本发明提供的提出了一种可接入闲置手机、PAD等移动终端的机器人巡检方法和系统,可以利用移动终端的摄像头和麦克风等实现移动机器人工作现场的监测功能,也可以利用移动终端或移动机器人底盘的多种定位传感器,实现机器人的定位导航功能,降低成本的同时,也使得闲置资源得到有效利用。
附图说明
图1是本发明提供的可接入移动终端的机器人巡检系统组成示意图;
图2是本发明提供的监测和定位导航软件组成示意图;
图3是本发明提供的机器人底盘结构示意图;
图4是本发明提供的接口模块示意图;
图5是本发明提供的移动终端UWB定位模块示意图;
图6是本发明提供的主控模块处理示意图;
图7是本发明提供的主控模块蓝牙定位处理模块接口示意图;
图8是本发明提供的主控模块UWB定位处理模块接口示意图;
图9是本发明提供的主控模块WIFI定位处理模块接口示意图
图10是本发明提供的移动通信模块结构示意图;
图11是本发明提供的主控模块移动通信定位处理模块接口示意图;
图12是本发明提供的主控模块卫星定位处理模块接口示意图;
图13是本发明提供的主控模块惯导处理模块接口示意图;
图14是本发明提供的主控模块雷达探测模块接口示意图;
图15是本发明提供的主控模块红外检测模块接口示意图;
图16是本发明提供的主控模块超声波检测模块接口示意图;
图17是本发明提供的有线充电方式示意图;
图18是本发明提供的无线充电方式示意图;
图19是本发明提供的驱动模块结构示意图;
图20是本发明提供的驱动模块工作方式示意图;
图21是本发明提供的用户平台处理流程示意图;
图22是本发明提供的直接遥控方式工作示意图;
图23是本发明提供的移动终端感知、数据处理和控制底盘方式工作示意图;
图24是本发明提供的移动终端感知和机器人底盘处理方式工作示意图;
图25是本发明提供的三种工作模式下主控模块工作原理示意图。
具体实施方式
下面结合附图对本发明作更进一步的说明。显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供了一种可接入移动终端的机器人巡检系统,包括移动终端、机器人底盘和用户平台,具体如图1所示。移动终端上安装有机器人监测和定位导航软件。用户平台接收并显示移动终端拍摄并传输的现场音视频信息和定位信息,用户通过用户平台发出控制指令,无线控制机器人底盘实现移动巡检。移动终端可以自主分析拍摄到的现场音视频信息,基于移动终端自身携带的定位资源感知现场情况,进行自主定位导航,进而独立控制机器人底盘实现移动巡检。当移动终端不能进行自主定位导航时,机器人底盘获取移动终端的音视频信息和定位信息,并基于机器人底盘自身携带的定位装置及传感器进行自主导航处理,实现移动巡检。
移动终端包括手机、平板电脑,根据移动终端实际配置,机器人监测和定位导航软件可安装在Android、iOS、Symbian、Windows Phone、BlackBerry OS、Harmony OS和Windows等系统中。机器人监测和定位导航软件获取自身携带的定位资源的感知信息,在移动终端的控制模块中进行格式转换,并转发给用户平台或用于自主定位导航,将信息传输至机器人底盘。定位资源包括移动终端自带的音视频处理模块、惯导处理模块、 UWB处理模块、蓝牙处理模块、WIFI处理模块、卫星定位导航模块和移动通信定位模块,如图2所示。上述模块根据不同移动终端会有所增减,使用时视移动终端具体携带的模块而定。下面提供具体模块的工作原理:
在音视频处理模块中,可以对摄像头采集的图像信号和麦克风采集的音频信号,进行音视频编码后,然后在控制模块中进行格式转换后,通过无线通信发送给用户平台。也可以进行感兴趣目标检测和定位等处理,并通过控制模块将位置信息发送给移动机器人底盘。
在惯导处理模块中,通过加速度传感器测量运动体的加速度经过对时间的积分得到速度,速度再经过对时间的积分即可得到运动距离。通过陀螺仪传感器形成一个导航坐标系,使加速度传感器的测量轴稳定在坐标系中并给出航向和姿态角。
在UWB处理模块中,采用超宽带高时间分辨率信号与UWB基站进行通信来确定机器人位置。UWB定位通常采用基于DOA/TDOA等检测方法,通过估计信号到达时延或时延差来计算发射到接收两端的距离或距离差。外部的UWB基站被固定在已知位置,接收机器人发送的UWB信号,可以计算出机器人的位置。
在蓝牙处理模块中,收到外部的蓝牙定位基站广播报文后,测量出接收功率,代入到功率衰减与距离关系的函数中,可测算出距离蓝牙基站的距离。也可以通过蓝牙定位基站的天线阵列,感知机器人蓝牙模块发射信号的到达方向,计算被定位点与蓝牙定位基站之间的相对方位或角度,然后再利用三角测量法计算出机器人的位置。
在WIFI处理模块中,实时采集附近各个外部信标节点发射的信号强度值RSSI,利用信号传播损耗模型将RSSI转化为移动终端WIFI定位模块与各信标节点之间的距离,通过信标节点位置信息及其与移动终端WIFI定位模块的距离,最后对移动终端进行定位。
在卫星定位导航模块中,可采用GPS/北斗等定位方式。模块能够捕获到按一定卫星高度截止角所选择的待测卫星的卫星信号,并跟踪这些卫星的运行,对所接收到的GPS/北斗信号进行变换、放大和处理,测量出GPS/北斗信号从卫星到移动终端天线的传播时间,解译出GPS/北斗卫星所发送的导航电文,实时地计算出移动终端的位置信息。
在移动通信定位模块中,测量并上报移动基站发送的参考信号波束的接收功率,根据发送波束方向来估计终端的位置角度,根据多个移动通信基站估计值,位置服务器解得移动终端位置。也可以由终端测量两个基站发送的定位参考信号的到达时间差,上报位置服务器,位置服务器根据多个参考信号时间差,从而获得移动终端位置。
移动终端中还装有室内外地图软件,通过设置目的地位置,并在软件中显示移动终端的位置,可以在不同情况下获取最佳起止点路径。
机器人底盘包括接口模块、传感器模块、主控模块、电源模块和驱动模块,如图3所示。接口模块与移动终端连接,实现机器人底盘和移动终端的信息传输和交互,具体如图4所示,接口模块主要通过蓝牙、USB、串口和网口等接口,实现移动终端和机器人底盘之间的数据交互,同时也提供串口、网口等通用接口,实现与外部设备的通信,其中USB有lightning接口、type-c接口、mini USB、micro-usb接口以及合在一条数据线上的复用接口。蓝牙接口有Bluetooth 3.0、4.0、4.0BLE、5.0、5.1、5.2以及更高配置等。串口接口提供RS232、RS422和RS485等接口。网口提供RJ-45、RJ-11等接口。
传感器模块包括自身携带的巡检所需的气体检测传感器,如烟雾、煤气、天然气检测模块气体检测模块可以将半导体原理、催化燃烧原理、热导式原理、电化学原理、红外光原理等各种不同检测原理的传感器对煤气、天然气和气体燃烧后的烟雾检测输出信号,通过高精度放大电路无噪声处理、温度补偿、高纯度气体标定等环节,将气体浓度信号转换成标准数字模拟信号。当气体浓度信号达到报警阈值时,将检测值送给外部的主控模块。
传感器模块还包括可以选配的安装在机器人底盘上的定位传感器,如UWB、蓝牙、WIFI、卫星定位、惯导、雷达定位、红外、超声波等。
蓝牙定位传感器可选配安装在机器人底盘上,为了提高定位准确度,相比较移动终端的蓝牙定位,该模块的体积、发射功率和感应距离都较大。可以在蓝牙芯片上进信号接收强度或AOA角度的估计,并计算出机器人的距离,最后送给主控模块。
UWB定位传感器可选配安装在机器人底盘上,该模块可以将天线、RF电路,电源管理和时钟电路等集成在模块中,如图5所示,通过UWB收发器可以输出双向测距或 TDOA/AOA等定位值,将定位到10厘米以内的精度,并输出给CPU进行处理。
WIFI处理模块可以选配安装在机器人底盘上,该模块可以采用基于RSSI的指纹处理等算法,不需要提前知道所有AP的位置,同时可以应对AP位置或状态的改变。机器人在定位区域将自身获得的周围AP信息实时发送给外部的服务器,由服务器进行匹配并返回坐标位置给机器人。
卫星定位模块可以选配装在机器人底盘上,用于室外定位导航,可以采用北斗、GPS 或北斗/GPS差分定位模块,模块集成度高、功耗低、兼容接收GLONASS/GALILEO等卫星导航信号,可以实现实时定位、授时、测速等功能。模块内部Flash可以通过程序升级以支持不同的应用。拥有前置LNA以优化RF性能,同时与天线集成设计,前置的 SAW滤波器可以增强抗干扰性能。
惯导处理模块可以选配装在机器人底盘上,其中的CPU对测量的加速度值进行积分得到速度和运动距离,对陀螺仪传感器的值进行预处理、滤波、积分和漂移校正等处理,得到姿态角等。
雷达探测模块可以检测周围目标避障并且建图定位,可采用根据探测距离分别选配采用激光雷达(室内或距离较近)或毫米波雷达(室外或距离较远)等探测方式。激光雷达模块通过三角计算解出距离,通过机械旋转的模式,以一定角分辨率得到二维环境的距离信息。通过对同时刻两片点云的匹配比对,计算激光雷达相对运动的距离和姿态的改变,进行机器人自身的定位。毫米波雷达模块采用多发多收的体制,发射电磁波信号被其发射路径上的物体阻挡而会发生反射,接收系统通过捕捉反射信号,模块可确定物体的速度、距离和角度等。
红外探测传感器可以采用基于TOF的红外探测等模块,可以采用多点感应的TOF芯片,利用红外光在空气中的飞行时间,计算出物体距离,绝对距离测量并以数据形式输出给外部模块,体积小,集成度高。
主控模块接收来自移动终端的各项信息及传感器获取的信息,进行目标识别、定位和导航处理,并向驱动模块发出控制指令,由驱动模块控制机器人底座的电机。电源模块用于给传感器模块、接口模块、驱动模块、主控模块和移动终端供电。
主控模块可以使用CPU、FPGA、DSP等高性能处理芯片,处理模式包括遥控透传模式和自主控制模式。在遥控透传模式下,主控模块直接读取移动终端从接口模块传输的图像信息和定位信息,并将行驶角度等控制参数传输至驱动模块,驱动机器人底盘行驶。在自主控制模式下,主控模块通过接口模块接收移动终端自身携带的定位资源的感知信息,或者接收机器人底盘的可选配传感器信息,并通过芯片进行处理,获取最终定位信息,基于最终定位信息进行路径规划,最终获取最优路径,由驱动模块驱动机器人底盘沿驱动路径进行行驶巡检,主控模块处理示意图如图6所示。下面提供各模块具体处理方式:
(1)、遥控透传软件模块
在该模块中,将移动终端发送过来的数据(行驶角度θ等参数)送给驱动模块控制机器人行驶,即对应遥控透传模式。
(2)、蓝牙定位处理软件模块
如图7所示,在该模块中,可以通过接口模块获取移动终端的蓝牙定位模块数据,也可以通过选配安装在机器人底盘上的蓝牙定位模块,获得蓝牙定位数据,并且确定定位参数。可以采用到达角度法(AOA)或出发角度法(AOD)等方法,AOA利用蓝牙基站单一天线发射信号,而接收端的装置内建天线阵列,当信号通过时,由于阵列中接收到的不同距离而产生相位差异,从而计算出相应的信号方向。AOD由具备天线阵列的固定蓝牙基站发送信号,传给单一天线终端,终端可以通过接收信号计算出来波方向进而定位。
(3)、UWB定位处理软件模块
如图8所示,在该模块中,可以通过接口模块获取移动终端的UWB定位等数据,也可以通过选配安装在机器人底盘上的UWB定位模块,获得UWB定位数据,并且确定定位参数。可以采用TDOA/DOA等定位方法,TDOA定位通过测量出两个不同UWB 基站与移动终端的传输时延差来进行定位。该定位无须进行基站和移动终端之间的同步,而只需要基站之间进行同步。DOA定位需要的基站比较少,最少只要两个基站就可以进行定位,该方法应用了OFDM和多天线阵技术,通过估计OFDM信号的方向即可识别移动终端的位置信息。
(4)、WIFI定位处理软件模块
如图9所示,在该模块中,可以通过接口模块获取移动终端的WIFI定位数据,也可以通过选配安装在机器人底盘上的WIFI定位模块,获得WIFI定位数据,同时确定定位参数。利用WIFI信号进行机器人的定位,离线阶段中在每个采样点收集WIFI信号的指纹信息,将其保存到位置指纹库中,然后通过机器学习算法,得到位置估计模型。在线阶段获取指纹数据后,通过位置估计模型计算位置结果。利用多种单一激活函数构建多激活函数,增加非线性以及灵活性,同时利用交叉验证算法获得多激活函数的最优权重系数,从而获得更好的学习和泛化性能。同时针对训练数据集位置标签缺失的情况,选择半监督极限学习机用于回归学习,获得更好的学习性能,从而提高定位算法的精度。
(5)、移动通信定位处理软件模块
如图10-11所示,模块可以采用移动通信基站定位技术,实现对机器人的自主定位。机器人定位模块与移动通信基站通信,根据发送波束方向来估计终端的位置角度,也可以由终端测量两个基站发送的定位参考信号的到达时间差,上报位置服务器,从而获得移动终端位置。多个基站根据几何定位计算得到机器人定位模块所在位置,同时通过多普勒测速获取终端的移动速度。然后基站根据机器人定位模块的位置控制基站中的相控阵天线,使得相控阵天线波束指向机器人定位模块。
(6)卫星定位处理软件模块
如图12所示,该模块可以通过接口模块获取移动终端的卫星定位数据,也可以通过选配安装在机器人底盘上的卫星定位模块,获得卫星定位数据,并且确定定位参数。卫星定位模块通过计算与每个卫星的伪距离,采用距离交会法求出接收机的得出经度、纬度、高度和时间修正量等参数。卫星定位模块通过串行通信口等接口不断输出定位信息及辅助信息给主控模块。
(7)、惯导处理软件模块(结合加速度+陀螺仪传感器等选配)
如图13所示,在该模块中,可以获取移动终端的加速度传感器和陀螺仪传感器等惯导数据,也可以通过选配安装在机器人底盘上的加速度和陀螺仪传感器模块,获得惯导数据,并且确定定位参数。针对加速度传感器、陀螺仪传感器等采集到的数据,通过自带的加速度传感器和陀螺仪来计算机器人自身位置和速度等。通过加速度传感器计算机器人的步长,使用机器人的陀螺仪计算机器人行驶的方向角等。根据以上的数据,从而确定新的位置点,获得巡检轨迹。
(8)、雷达探测处理软件模块(结合雷达探测器选配)
如图14所示,在该模块中,通过选配安装在机器人底盘上的雷达探测模块,获得雷达探测数据,并且确定定位参数。先对激光雷达的原始坐标进行转换,通过全局运动补偿将连续多帧激光点云的历史信息对准到当前采样时刻的坐标系下构成当前坐标系下的一个静态背景图,然后利用混合高斯模型对当前背景进行学习得到一个静态背景模型,用于对当前帧进行动态目标检测并输出检测结果。当使用毫米波探测时,为保证算法实时性,将毫米波雷达检测到的映射到坐标系中。首先对毫米波雷达数据进行读取后,先对毫米波雷达数据的3D点坐标信息以及强度信息进行滤波,同时加入机器人的运动补偿去除运动导致的点云数据的畸变,对点云数据进行匹配,将点云拼接成为点云地图。
(9)、红外探测处理软件模块(结合红外检测器选配)
如图15所示,红外探测器安装在机器人底盘处,进行TOF检测,用于探测前端的目标和建图,并将检测的结果送给机器人的主控模块。可以采用DTOF技术,进行每秒数千次以及上的测距。每次测距时向外发射出红外激光,激光遇到目标物体后被反射到单光子接收单元,由此获取激光的发出时间和单光子接收单元收到激光的时间,两者的时间差即光的飞行时间,飞行时间再结合光速即可解算出物体距离。
(10)、超声波探测处理软件模块(结合超声波传感器选配)
如图16所示,在该模块中,通过安装在机器人底盘上的超声波传感器进行探测,当机器人距离障碍物还有一定距离时,超声波传感器就能够检测到相关信息,并控制机器人离开。超声波传感器会发射一组高频声波,当声波遇到物体后,就会被反弹回并被接收。通过计算声波从发射到返回的时间,再乘以声波在媒介中的传播速度就可以获得物体相对于传感器的距离值。
此外,本发明提供的机器人底盘中还包括建图软件模块和路径规划软件模块。在建图软件模块中,机器人先进行全局沿边,并通过雷达/红外等探测模块获取点云数据来建立地图。机器人进行沿边来获取点云数据,然后通过点云数据来对机器人的位姿进行修正。在路径规划软件模块中,使用扩展卡尔曼滤波算法对探测数据进行处理,实现机器人位姿的预估计,之后在栅格地图建立完成的基础上,在设定的代价函数计算规则下的最优路径。通过优化代价函数,从而实现机器人路径规划算法的优化处理。
机器人底盘通过充电桩给电源模块供电,同时充电模块给主控模块、接口模块、驱动模块和传感器模块充电,也可以对移动终端进行充电,可以采用有线或无线充电方式。充电桩将交流电转换为直流电供给电源模块,接着电源模块分别进行AC/DC转换成各模块所需的直流电压。在有线充电方式下,充电模块可以通过USB等接口给移动终端充电,有线充电的接口如图17所示。
机器人底盘也可以通过充电桩,采用电磁感应、电场耦合、无线电波、磁共振等方式给电源模块进行无线充电。可以采用谐振网络补偿等充电结构,其中发射线圈嵌于充电桩中,通过磁耦合谐振将发射端的电能传输给接收端的电源模块充电。在充电桩发射端与电源模块接收端配置谐振频率相同的线圈,在一定距离范围内,发射端输入与线圈谐振频率相同的信号,发射端与接收端产生谐振,能量从发射端传输给接收端,从而实现充电桩和电源模块之间电能的无线传输。同时电源模块给主控模块、接口模块、传感器模块和驱动模块充电,电源模块可以通过USB等接口给移动终端充电,也可以采用电磁感应、电场耦合、无线电波、磁共振等方式进行无线充电,无线充电方式如图18所示。
驱动模块如图19-20所示,包括电机控制电路、电机驱动电路和电机。电机控制电路接收外部主控模块的行驶指令,并转换成电机驱动电路对应的控制指令。电机驱动电路包括大功率对管,产生占空比不同的PWM脉冲,调整电机的转速,改变电压极性,实现对电机的正反转控制。电机采用直流减速电机,通过传动系统控制机器人底盘移动。根据反向磁力进而移动或建立转矩,改变流过磁场的电流方向即可变更磁极,并让磁极开始旋转,从而控制电机调整转向和速度等。
用户平台处理流程如图21所示,通过无线传输与移动终端进行信息交互,将控制信息传输至移动终端。对于移动终端传输的音视频信息,用户平台进行解码处理后显示给用户。移动终端各类传感器的定位信息也一并显示给用户。
下面提供一种基于可接入移动终端的机器人巡检系统的巡检方法,其特征在于,包括3种巡检方式:直接遥控巡检方式、移动终端感知、数据处理和控制底盘方式和移动终端感知、机器人底盘处理方式。具体地,
(1)、直接遥控巡检方式:
如图22所示,移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息。由用户通过用户平台直接下达控制指令,控制指令由无线通信传输至移动终端,并经由接口模块传输至机器人底盘主控模块。主控模块直接读取移动终端从接口模块传输的图像信息和定位信息,并将行驶角度等控制参数传输至驱动模块,驱动机器人底盘行驶,进行巡检。
(2)、移动终端感知、数据处理和控制底盘方式:
当移动终端可以自主定位导航时,移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息。同时根据移动终端定位资源感知的数据,自行图像处理并自主定位导航,将控制指令经由接口模块传输至机器人底盘主控模块。主控模块将控制参数传输至驱动模块,驱动机器人底盘行驶,进行巡检。
(3)、移动终端感知、机器人底盘处理方式:
当移动终端无法进行自主定位导航时,移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息。同时将移动终端的传感器获取的数据通过接口模块传输至机器人底盘,结合机器人底盘自带的定位探测和传感装置,通过建图、路径规划处理,由机器人底盘进行自主导航处理,获取最优路径,并通过驱动模块驱动电机,从而实现巡检目的。
上述三种巡检方式中底盘处理模式如图25所示,可以看出,本发明提供的巡检方法在现有常规巡检机器人的基础上,通过设置开放、通用的移动终端接口,一方面可以充分利用移动终端的各种定位资源,实现废旧资源利用,同时提供了用户控制、移动终端感知和机器人底盘自主感知三种模式,充分满足了各种场景的需要,提升了巡检系统的鲁棒性。
以上所述仅是本发明的优选实施方式,应当指出:对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种可接入移动终端的机器人巡检系统,其特征在于,包括移动终端、机器人底盘和用户平台;所述移动终端上安装有机器人监测和定位导航软件;所述用户平台接收并显示移动终端拍摄并传输的现场音视频信息和定位信息,用户通过用户平台发出控制指令,无线控制机器人底盘实现移动巡检;所述移动终端可以自主分析拍摄到的现场音视频信息,基于移动终端自身携带的定位资源感知现场情况,进行自主定位导航,进而独立控制机器人底盘实现移动巡检;当移动终端不能进行自主定位导航时,机器人底盘获取移动终端的音视频信息和定位信息,并基于机器人底盘自身携带的定位装置及传感器进行自主导航处理,实现移动巡检。
2.根据权利要求1所述的一种可接入移动终端的机器人巡检系统,其特征在于,所述移动终端包括手机、平板电脑,根据移动终端实际配置,基于不同系统安装机器人监测和定位导航软件;所述机器人监测和定位导航软件获取自身携带的定位资源的感知信息,在移动终端的控制模块中进行格式转换,并转发给用户平台或用于自主定位导航,将信息传输至机器人底盘;所述定位资源包括移动终端自带的音视频处理模块、惯导处理模块、UWB处理模块、蓝牙处理模块、WIFI处理模块、卫星定位导航模块和移动通信定位模块;所述移动终端中还装有室内外地图软件,通过设置目的地位置,并在软件中显示移动终端的位置,可以在不同情况下获取最佳起止点路径。
3.根据权利要求1所述的一种可接入移动终端的机器人巡检系统,其特征在于,所述机器人底盘包括接口模块、传感器模块、主控模块、电源模块和驱动模块;所述接口模块与移动终端连接,实现机器人底盘和移动终端的信息传输和交互;所述传感器模块包括自身携带的巡检所需的气体检测传感器和用于定位的可选配传感器;所述主控模块接收来自移动终端的各项信息及传感器获取的信息,进行目标识别、定位和导航处理,并向驱动模块发出控制指令,由驱动模块控制机器人底座的电机;所述电源模块用于给传感器模块、接口模块、驱动模块、主控模块和移动终端供电。
4.根据权利要求3所述的一种可接入移动终端的机器人巡检系统,其特征在于,所述主控模块的处理模式包括遥控透传模式和自主控制模式;在遥控透传模式下,主控模块直接读取移动终端从接口模块传输的图像信息和定位信息,并将行驶角度等控制参数传输至驱动模块,驱动机器人底盘行驶;在自主控制模式下,主控模块通过接口模块接收移动终端自身携带的定位资源的感知信息,或者接收机器人底盘的可选配传感器信息,并通过芯片进行处理,获取最终定位信息,基于所述最终定位信息进行路径规划,最终获取最优路径,由驱动模块驱动机器人底盘沿驱动路径进行行驶巡检。
5.根据权利要求4所述的一种可接入移动终端的机器人巡检系统,其特征在于,所述主控模块中集成有建图软件模块;所述建图软件模块中,机器人先进行全局沿边,并通过探测模块获取点云数据,建立地图;机器人进行沿边来获取点云数据,然后通过点云数据来对机器人的位姿进行修正。
6.根据权利要求4所述的一种可接入移动终端的机器人巡检系统,其特征在于,所述主控模块中集成有路径规划模块;在路径规划模块中,使用扩展卡尔曼滤波算法对探测数据进行处理,实现机器人位姿的预估计,之后在栅格地图建立完成的基础上,在设定的代价函数计算规则下获取最优路径;通过优化代价函数,实现机器人路径规划算法的优化处理。
7.根据权利要求3所述的一种可接入移动终端的机器人巡检系统,其特征在于,通过充电桩采用有线或无线模式,将交流电转换为直流电供给电源模块,电源模块通过AC/DC转换,为主控模块、接口模块、驱动模块、传感器模块和移动终端分别提供直流电压。
8.根据权利要求3所述的一种可接入移动终端的机器人巡检系统,其特征在于,所述驱动模块包括电机控制电路、电机驱动电路和电机;所述电机控制电路接收外部主控模块的行驶指令,并转换成电机驱动电路对应的控制指令;电机驱动电路包括大功率对管,产生占空比不同的PWM脉冲,调整电机的转速,改变电压极性,实现对电机的正反转控制;所述电机采用直流减速电机,通过传动系统控制机器人底盘移动。
9.根据权利要求1所述的一种可接入移动终端的机器人巡检系统,其特征在于,所述用户平台包括手机、平板电脑、家庭电脑和专用通信设备;用户平台通过无线传输与移动终端进行信息交互,将控制信息传输至移动终端;对于移动终端传输的音视频信息,用户平台进行解码处理后显示给用户;移动终端各类传感器的定位信息也一并显示给用户。
10.一种采用权利要求1-9中任一项所述可接入移动终端的机器人巡检系统的巡检方法,其特征在于,包括3种巡检方式:直接遥控巡检方式、移动终端感知、数据处理和控制底盘方式和移动终端感知、机器人底盘处理方式;具体地,
(1)、直接遥控巡检方式:
移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息;由用户通过用户平台直接下达控制指令,控制指令由无线通信传输至移动终端,并经由接口模块传输至机器人底盘主控模块;所述主控模块直接读取移动终端从接口模块传输的图像信息和定位信息,并将行驶角度等控制参数传输至驱动模块,驱动机器人底盘行驶,进行巡检;
(2)、移动终端感知、数据处理和控制底盘方式:
当移动终端可以自主定位导航时,移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息;同时根据移动终端定位资源感知的数据,自行图像处理并自主定位导航,将控制指令经由接口模块传输至机器人底盘主控模块;所述主控模块将控制参数传输至驱动模块,驱动机器人底盘行驶,进行巡检;
(3)、移动终端感知、机器人底盘处理方式:
当移动终端无法进行自主定位导航时,移动终端的摄像头采集图像,麦克风采集音频,将收集到的音视频信息通过无线通信方式发送至用户平台,提供巡检场所的音视频信息;同时将移动终端的传感器获取的数据通过接口模块传输至机器人底盘,结合机器人底盘自带的定位探测和传感装置,通过建图、路径规划处理,由机器人底盘进行自主导航处理,获取最优路径,并通过驱动模块驱动电机,从而实现巡检目的。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111520518.4A CN114545918A (zh) | 2021-12-13 | 2021-12-13 | 一种可接入移动终端的机器人巡检系统及巡检方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111520518.4A CN114545918A (zh) | 2021-12-13 | 2021-12-13 | 一种可接入移动终端的机器人巡检系统及巡检方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114545918A true CN114545918A (zh) | 2022-05-27 |
Family
ID=81669837
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111520518.4A Pending CN114545918A (zh) | 2021-12-13 | 2021-12-13 | 一种可接入移动终端的机器人巡检系统及巡检方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114545918A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114964238A (zh) * | 2022-05-31 | 2022-08-30 | 济南大学 | 一种飞行器定位方法及系统 |
CN115535115A (zh) * | 2022-11-04 | 2022-12-30 | 江苏大学 | 一种基于uwb的群控智能仓储巡检车及巡检方法 |
CN116700247A (zh) * | 2023-05-30 | 2023-09-05 | 东莞市华复实业有限公司 | 一种家居机器人的智能巡航管理方法及系统 |
-
2021
- 2021-12-13 CN CN202111520518.4A patent/CN114545918A/zh active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114964238A (zh) * | 2022-05-31 | 2022-08-30 | 济南大学 | 一种飞行器定位方法及系统 |
CN114964238B (zh) * | 2022-05-31 | 2024-06-04 | 济南大学 | 一种飞行器定位方法及系统 |
CN115535115A (zh) * | 2022-11-04 | 2022-12-30 | 江苏大学 | 一种基于uwb的群控智能仓储巡检车及巡检方法 |
CN116700247A (zh) * | 2023-05-30 | 2023-09-05 | 东莞市华复实业有限公司 | 一种家居机器人的智能巡航管理方法及系统 |
CN116700247B (zh) * | 2023-05-30 | 2024-03-19 | 东莞市华复实业有限公司 | 一种家居机器人的智能巡航管理方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109282811B (zh) | Uwb与智能手机互联的室内外定位系统与方法 | |
CN114545918A (zh) | 一种可接入移动终端的机器人巡检系统及巡检方法 | |
CN109195099B (zh) | 一种基于iBeacon和PDR融合的室内定位方法 | |
US7953327B2 (en) | Commissioning tool, commissioning system and method of commissioning a number of wireless nodes | |
CN102419180B (zh) | 一种基于惯性导航系统和wifi的室内定位方法 | |
CN107036597A (zh) | 一种基于智能手机内置惯性传感器的室内定位导航方法 | |
KR101473653B1 (ko) | 보행자 모션 인식 기반 보행자 위치 추정 장치, 및 그 방법 | |
CN102209386A (zh) | 一种室内无线定位方法及装置 | |
WO2016059904A1 (ja) | 移動体 | |
Grigulo et al. | Experimenting sensor nodes localization in WSN with UAV acting as mobile agent | |
CN110926479B (zh) | 自动生成室内三维导航地图模型的方法和系统 | |
CN110888145A (zh) | 一种激光雷达及其使用方法、以及一种激光雷达系统 | |
CN110823211A (zh) | 基于视觉slam的多传感器地图构建的方法、装置及芯片 | |
US20220341751A1 (en) | Systems and methods for multi-sensor mapping using a single device that can operate in multiple modes | |
CN201974529U (zh) | 主动式动态定位仪 | |
CN111694001A (zh) | 一种用于无人机的实时测距定位系统 | |
CN111722623A (zh) | 一种基于蓝牙阵列天线定位的自动跟随系统 | |
KR102268380B1 (ko) | 정밀 측위 기법을 활용한 이동국 간의 거리 측정 방법 및 이를 이용한 골퍼와 홀 컵 간의 거리 측정 시스템 및 방법 | |
CN114729981A (zh) | 增加的定位分辨率 | |
CN111694006A (zh) | 一种用于室内无人系统的导航传感系统 | |
CN103379620A (zh) | 定位方法及定位系统 | |
Dai et al. | A power-efficient BLE augmented GNSS approach to site-specific navigation | |
KR20120069300A (ko) | 수상 이동형 수중정보 수집장치 | |
CN104833995A (zh) | 基于Android平台的无源区域地理信息采集系统及方法 | |
KR101126782B1 (ko) | 지피에스와 블루투스를 이용한 이동체 호출 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |