CN109739133A - 基于雷达定位的番茄采摘机器人系统及其控制方法 - Google Patents
基于雷达定位的番茄采摘机器人系统及其控制方法 Download PDFInfo
- Publication number
- CN109739133A CN109739133A CN201910014233.XA CN201910014233A CN109739133A CN 109739133 A CN109739133 A CN 109739133A CN 201910014233 A CN201910014233 A CN 201910014233A CN 109739133 A CN109739133 A CN 109739133A
- Authority
- CN
- China
- Prior art keywords
- tomato
- control system
- robot
- module
- master control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 235000007688 Lycopersicon esculentum Nutrition 0.000 title claims abstract description 60
- 238000000034 method Methods 0.000 title claims abstract description 10
- 240000003768 Solanum lycopersicum Species 0.000 title claims description 53
- 235000013399 edible fruits Nutrition 0.000 claims abstract description 14
- 238000005303 weighing Methods 0.000 claims abstract description 13
- 238000003306 harvesting Methods 0.000 claims abstract description 9
- 239000000284 extract Substances 0.000 claims abstract description 7
- 230000005540 biological transmission Effects 0.000 claims abstract description 5
- 235000011034 Rubus glaucus Nutrition 0.000 claims description 11
- 244000235659 Rubus idaeus Species 0.000 claims description 11
- 235000009122 Rubus idaeus Nutrition 0.000 claims description 11
- 238000004891 communication Methods 0.000 claims description 9
- 244000061458 Solanum melongena Species 0.000 claims description 3
- 235000002597 Solanum melongena Nutrition 0.000 claims description 3
- 238000001914 filtration Methods 0.000 claims description 3
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 claims description 3
- 230000005070 ripening Effects 0.000 claims description 3
- 238000000926 separation method Methods 0.000 claims description 3
- 238000011161 development Methods 0.000 abstract description 5
- 230000006978 adaptation Effects 0.000 abstract description 2
- 241000227653 Lycopersicon Species 0.000 abstract 7
- 238000005516 engineering process Methods 0.000 description 6
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 235000021028 berry Nutrition 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000021022 fresh fruits Nutrition 0.000 description 1
- 235000012055 fruits and vegetables Nutrition 0.000 description 1
- 230000035800 maturation Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 230000036642 wellbeing Effects 0.000 description 1
Landscapes
- Manipulator (AREA)
- Image Analysis (AREA)
Abstract
一种基于雷达定位的番茄采摘机器人系统及其控制方法,包括主控制系统、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、称重模块、遥控模块、报警模块;主控制系统接受视觉采集模块采集到的彩色画面,首先对彩色画面进行分离,计算果实具体位置,再提取番茄的颜色,计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,计算番茄是否已经成熟。本发明提供的一种智能番茄采摘机器人控制系统和方法,不仅解决了人为采摘果实番茄困难、成本高、劳动工作量大等问题,还克服了一般果实采摘机器人体积大、开发成本高和功耗高以及有些番茄被茎叶遮盖而无法采摘等缺点,而且机器人能够自主导航、数据传输快、适应更加复杂的工作环境。
Description
技术领域
本发明涉及机器人在农业上的应用,具体涉及一种基于雷达定位的番茄采摘机器人系统及其控制方法。
背景技术
果蔬采摘机器人的研究始于20世纪60年代的美国,采用的收获方式主要是机械震摇式和气动震摇式,其缺点是果实易损,效率不高,特别是无法进行选择性的收获,在采摘柔软、新鲜的果实方面还存在很大的局限性。随着电子技术和科学技术的发展,特别是工业机器人技术、计算机图像处理技术和人工智能技术的成熟,采摘机器人的研究和开发技术得到了快速发展。
在番茄整个生产过程中,收获采摘约占整个作业量的40%,采摘质量的好坏直接影响番茄的存储、加工以及销售,从而最终影响市场价格和经济收益。由于采摘作业的复杂性,采摘自动化程度仍然很低。目前国内番茄采摘作业基本上仍然靠手工完成,随着人口老龄化和农业劳动力的减少,农业生产成本也将提高。番茄具有柔软易伤的特点,其生长发育程度不一,相互差异较大,必须细心轻柔的对待处理。由于采摘机器人的操作者是农民,不是具有机电知识的机电工程师,因此要求番茄采摘机器人必须具有高可靠性和操作简单的特点;采摘番茄的地点在农田里,地形比较复杂,地面高低不平,对于一般的轮式机器人移动底盘行走比较困难;对于机器人所要采摘的番茄并不是全部都裸露在外面,往往会有一部分被茎叶完全遮盖,而这些番茄无法被机器人所检测到,导致这些番茄被采摘漏掉;在栽种番茄的时候,番茄之间的距离基本上都是相等的,这就需要在机器人采摘的区域内进行路径规划,而传统路径规划需要人为在场地进行规划循迹,一般的循迹传感器容易受环境的影响,导致机器人不能在规定的路线内前进;国内对番茄采摘机器人的研究也有一定的成果,但大多是停留在研究阶段,而这些机器人体积比较大,制作成本比较高,距离机器人完全应用在实际生活中还有一定的差距。
发明内容
本发明的目的就是提供一种基于雷达定位的番茄采摘机器人系统及其控制方法,不仅解决了人为采摘果实番茄困难、成本高、劳动工作量大等问题,还克服了一般果实采摘机器人体积大、开发成本高和功耗高以及有些番茄被茎叶遮盖而无法采摘等缺点。
本发明的基于雷达定位的番茄采摘机器人系统,包括主控制系统、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、通讯模块、称重模块、遥控模块、报警模块,底盘驱动系统通过履带移动底盘使机器人能够在平坦或地形较复杂的农田移动;所述的视觉采集模块包括摄像头,通过总线协议与机器人主控制系统连接,摄像头将采集的数据传输给主控制系统树莓派,由树莓派处理,通过颜色判断番茄是否成熟,如果确定番茄成熟,通过双目识别算法计算番茄在空间的坐标,通讯模块将数据发送给主控制系统,然后给机械臂发送指令,采摘番茄,否则机器人前往下一目标点进行采摘;所述称重模块由称重传感器组成,与机器人主控制系统连接,果篮里的番茄重量达到设定值后,称重传感器给主控制系统发送信号,机器人将会自动回到起始点;所述的报警模块与主控制系统连接,当机器人回到起始点时,主控制系统给报警模块发送指令,报警鸣笛提醒工作人员;所述通讯模块由WIFI组成,通过树莓派处理摄像头采集的画面,由WIFI无线通讯系统实现主控制系统与树莓派之间和主控制系统与遥控器之间的信息传送,使用WIFI进行信号之间的传递,增加了系统的稳定性、灵活性;所述机械臂包括多自由度的机械手臂和机械爪,整个机械臂与底座连接由步进电机提供动力,主控制系统控制机械臂的运动;所述模块包括遥控器,遥控器控制机械臂,机器人无法检测到一些被枝叶覆盖的番茄,此时通过遥控器控制机械臂进行采摘,提高了机器人的采摘效率。
本发明的基于雷达定位的番茄采摘机器人控制方法,包括如下步骤,主控制系统接受视觉采集模块采集到的彩色画面,主控制系统首先对彩色画面进行通道分离,其次对通道滤波,然后计算果实具体位置,最后提取番茄的颜色;计算番茄具体位置时,首先对比通道直方图,红色通道为多点,青色为少点,由此计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,如果某些点的相对位置较为靠近,那么把这些点归为同一组,其他点归为同一组,分组之后,对这些组进行包围,然后进行膨胀计算,如果能相互连接在一起,即视为番茄已经成熟,可以采摘。
本发明的基于雷达定位的番茄采摘机器人系统由雷达进行定位导航,无需通过人为方式在工作区域内进行路径规划,同时采用遥控器控制机械臂,采摘解被枝叶遮盖的番茄,不仅解决了人为采摘果实番茄困难、成本高、劳动工作量大等问题,还克服了一般果实采摘机器人体积大、开发成本高和功耗高以及有些番茄被茎叶遮盖而无法采摘等缺点,而且机器人能够自主导航、数据传输快、适应更加复杂的工作环境。
附图说明
图1是本发明的系统结构框图。
具体实施方式
一种基于雷达定位的番茄采摘机器人系统,包括主控制系统STM32、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、通讯模块、称重模块、遥控模块、报警模块,底盘驱动系统通过履带移动底盘使机器人在农田移动;所述的视觉采集模块包括摄像头,通过总线协议与机器人主控制系统连接,摄像头将采集的数据传输给主控制系统树莓派,由树莓派处理,通过颜色判断番茄是否成熟,如果确定番茄成熟,通过双目识别算法计算番茄在空间的坐标,通讯模块将数据发送给主控制系统,然后给机械臂发送指令,采摘番茄,否则机器人前往下一目标点进行采摘;所述称重模块由称重传感器组成,与机器人主控制系统连接,果篮里的番茄重量达到设定值后,称重传感器给主控制系统发送信号,机器人将会自动回到起始点;所述的报警模块与主控制系统连接,当机器人回到起始点时,主控制系统给报警模块发送指令,报警鸣笛提醒工作人员;所述通讯模块由WIFI组成,通过树莓派处理摄像头采集的画面,由WIFI无线通讯系统实现主控制系统与树莓派之间和主控制系统与遥控器之间的信息传送;所述机械臂包括多自由度的机械手臂和机械爪,整个机械臂与底座连接由步进电机提供动力,主控制系统控制机械臂的运动;所述模块包括遥控器,遥控器控制机械臂,机器人无法检测到的被枝叶覆盖的番茄,可通过遥控器控制机械臂进行采摘。
一种基于雷达定位的番茄采摘机器人控制方法,包括如下步骤,主控制系统接受视觉采集模块采集到的彩色画面,主控制系统首先对彩色画面进行通道分离,其次对通道滤波,然后计算果实具体位置,最后提取番茄的颜色;计算番茄具体位置时,首先对比通道直方图,红色通道为多点,青色为少点,由此计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,如果某些点的相对位置较为靠近,那么把这些点归为同一组,其他点归为同一组,分组之后,对这些组进行包围,然后进行膨胀计算,如果能相互连接在一起,即视为番茄已经成熟,可以采摘。
Claims (2)
1.一种基于雷达定位的番茄采摘机器人系统,包括主控制系统、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、通讯模块、称重模块、遥控模块、报警模块,其特征在于:底盘驱动系统通过履带移动底盘使机器人在农田移动;所述的视觉采集模块包括摄像头,通过总线协议与机器人主控制系统连接,摄像头将采集的数据传输给主控制系统树莓派,由树莓派处理,通过颜色判断番茄是否成熟,如果确定番茄成熟,通过双目识别算法计算番茄在空间的坐标,通讯模块将数据发送给主控制系统,然后给机械臂发送指令,采摘番茄,否则机器人前往下一目标点进行采摘;所述称重模块由称重传感器组成,与机器人主控制系统连接,果篮里的番茄重量达到设定值后,称重传感器给主控制系统发送信号,机器人将会自动回到起始点;所述的报警模块与主控制系统连接,当机器人回到起始点时,主控制系统给报警模块发送指令,报警鸣笛提醒工作人员;所述通讯模块由WIFI组成,通过树莓派处理摄像头采集的画面,由WIFI无线通讯系统实现主控制系统与树莓派之间和主控制系统与遥控器之间的信息传送;所述机械臂包括多自由度的机械手臂和机械爪,机械臂与底座连接由步进电机提供动力,主控制系统控制机械臂的运动;所述模块包括遥控器,遥控器控制机械臂,机器人无法检测到的被枝叶覆盖的番茄,通过遥控器控制机械臂进行采摘。
2.一种基于雷达定位的番茄采摘机器人控制方法,其特征在于:它包括如下步骤,主控制系统接受视觉采集模块采集到的彩色画面,主控制系统首先对彩色画面进行通道分离,其次对通道滤波,然后计算果实具体位置,最后提取番茄的颜色;计算番茄具体位置时,首先对比通道直方图,红色通道为多点,青色为少点,由此计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,如果某些点的相对位置较为靠近,那么把这些点归为同一组,其他点归为同一组,分组之后,对这些组进行包围,然后进行膨胀计算,如果能相互连接在一起,即视为番茄已经成熟,进行采摘。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910014233.XA CN109739133A (zh) | 2019-01-08 | 2019-01-08 | 基于雷达定位的番茄采摘机器人系统及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910014233.XA CN109739133A (zh) | 2019-01-08 | 2019-01-08 | 基于雷达定位的番茄采摘机器人系统及其控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109739133A true CN109739133A (zh) | 2019-05-10 |
Family
ID=66363778
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910014233.XA Pending CN109739133A (zh) | 2019-01-08 | 2019-01-08 | 基于雷达定位的番茄采摘机器人系统及其控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109739133A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110366952A (zh) * | 2019-08-23 | 2019-10-25 | 重庆市经贸中等专业学校 | 一种微型履带农业机器人 |
CN110919648A (zh) * | 2019-11-08 | 2020-03-27 | 南昌大学 | 一种基于树莓派的自动拾料堆叠装置及拾料堆叠方法 |
CN111274877A (zh) * | 2020-01-09 | 2020-06-12 | 重庆邮电大学 | 一种基于cnn的智能草莓采摘机器人控制系统 |
CN113099848A (zh) * | 2021-06-04 | 2021-07-13 | 山东农业大学 | 一种采摘机器人高效采放运综合平台及使用方法 |
CN113547528A (zh) * | 2021-06-30 | 2021-10-26 | 广州铁路职业技术学院(广州铁路机械学校) | 一种摘果机器人 |
CN114451146A (zh) * | 2022-01-27 | 2022-05-10 | 浙江小远机器人有限公司 | 一种果蔬采摘方法及系统 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101273688A (zh) * | 2008-05-05 | 2008-10-01 | 江苏大学 | 柑橘采摘机器人的柔性采摘装置和方法 |
CN202085493U (zh) * | 2011-05-24 | 2011-12-28 | 中国农业大学 | 番茄采摘机器人系统 |
CN203467238U (zh) * | 2013-10-08 | 2014-03-12 | 仲恺农业工程学院 | 基于机器视觉的番茄智能采摘装置 |
CN104751117A (zh) * | 2015-01-26 | 2015-07-01 | 江苏大学 | 一种用于采摘机器人的莲蓬目标图像识别方法 |
CN105993393A (zh) * | 2015-07-03 | 2016-10-12 | 中国运载火箭技术研究院 | 一种花朵采摘机器人的采摘方法 |
US20170190054A1 (en) * | 2014-03-31 | 2017-07-06 | Intelligrated Headquarters, Llc | Autonomous truck loader and unloader |
CN107139182A (zh) * | 2017-06-05 | 2017-09-08 | 重庆理工大学 | 一种柑橘采摘机器人系统及其控制方法 |
CN207040242U (zh) * | 2017-08-11 | 2018-02-27 | 博湖县红多多蕃茄制品有限公司 | 一种基于机器视觉的番茄智能采摘装置 |
CN107750643A (zh) * | 2017-10-25 | 2018-03-06 | 重庆工商大学 | 草莓采摘机器人的视觉系统 |
-
2019
- 2019-01-08 CN CN201910014233.XA patent/CN109739133A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101273688A (zh) * | 2008-05-05 | 2008-10-01 | 江苏大学 | 柑橘采摘机器人的柔性采摘装置和方法 |
CN202085493U (zh) * | 2011-05-24 | 2011-12-28 | 中国农业大学 | 番茄采摘机器人系统 |
CN203467238U (zh) * | 2013-10-08 | 2014-03-12 | 仲恺农业工程学院 | 基于机器视觉的番茄智能采摘装置 |
US20170190054A1 (en) * | 2014-03-31 | 2017-07-06 | Intelligrated Headquarters, Llc | Autonomous truck loader and unloader |
CN104751117A (zh) * | 2015-01-26 | 2015-07-01 | 江苏大学 | 一种用于采摘机器人的莲蓬目标图像识别方法 |
CN105993393A (zh) * | 2015-07-03 | 2016-10-12 | 中国运载火箭技术研究院 | 一种花朵采摘机器人的采摘方法 |
CN107139182A (zh) * | 2017-06-05 | 2017-09-08 | 重庆理工大学 | 一种柑橘采摘机器人系统及其控制方法 |
CN207040242U (zh) * | 2017-08-11 | 2018-02-27 | 博湖县红多多蕃茄制品有限公司 | 一种基于机器视觉的番茄智能采摘装置 |
CN107750643A (zh) * | 2017-10-25 | 2018-03-06 | 重庆工商大学 | 草莓采摘机器人的视觉系统 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110366952A (zh) * | 2019-08-23 | 2019-10-25 | 重庆市经贸中等专业学校 | 一种微型履带农业机器人 |
CN110919648A (zh) * | 2019-11-08 | 2020-03-27 | 南昌大学 | 一种基于树莓派的自动拾料堆叠装置及拾料堆叠方法 |
CN111274877A (zh) * | 2020-01-09 | 2020-06-12 | 重庆邮电大学 | 一种基于cnn的智能草莓采摘机器人控制系统 |
CN113099848A (zh) * | 2021-06-04 | 2021-07-13 | 山东农业大学 | 一种采摘机器人高效采放运综合平台及使用方法 |
CN113547528A (zh) * | 2021-06-30 | 2021-10-26 | 广州铁路职业技术学院(广州铁路机械学校) | 一种摘果机器人 |
CN114451146A (zh) * | 2022-01-27 | 2022-05-10 | 浙江小远机器人有限公司 | 一种果蔬采摘方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109739133A (zh) | 基于雷达定位的番茄采摘机器人系统及其控制方法 | |
Xie et al. | Actuators and sensors for application in agricultural robots: A review | |
US20240306544A1 (en) | Harvester with automated targeting capabilities | |
Iyer et al. | Living IoT: A flying wireless platform on live insects | |
Bergerman et al. | Robotics in agriculture and forestry | |
CN110122073B (zh) | 一种基于机器视觉的草莓采摘机器人 | |
Hu et al. | Simplified 4-DOF manipulator for rapid robotic apple harvesting | |
US8381501B2 (en) | Agricultural robot system and method | |
CN109605375A (zh) | 一种智能番茄采摘机器人的控制方法 | |
CN109699300B (zh) | 一种智能柑橘采摘机的控制系统及其控制方法 | |
EP1830624A2 (en) | Agricultural robot system and method | |
CN109353504B (zh) | 基于处方图的无人机智能喷施系统及方法 | |
CN109297467A (zh) | 用于检测三维环境数据的系统和传感器模块 | |
CN116117807A (zh) | 一种辣椒采摘机器人及控制方法 | |
JP2019176844A (ja) | 制御装置、警備システム及びプログラム | |
WO2022091092A1 (en) | System and method for indoor crop management | |
US20220338429A1 (en) | Data collection system for irrigation systems | |
Ruth Anita Shirley et al. | Automatic distributed gardening system using object recognition and visual servoing | |
Ji et al. | Performance analysis of target information recognition system for agricultural robots | |
Peebles et al. | Robotic harvesting of asparagus using machine learning and time-of-flight imaging–overview of development and field trials | |
Li et al. | Design of multifunctional seedbed planting robot based on MobileNetV2-SSD | |
CN112703894A (zh) | 基于视觉伺服与slam的全自主樱桃采摘机器人 | |
CN116126020A (zh) | 基于空天协同的茶叶采摘作业系统及作业方法 | |
CN115494056A (zh) | 一种基于可移动机器人的番茄植株表型监测方法及装置 | |
Kumar et al. | Status and Scope of Automated Coconut Harvester in India: A Review |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190510 |