CN109739133A - 基于雷达定位的番茄采摘机器人系统及其控制方法 - Google Patents

基于雷达定位的番茄采摘机器人系统及其控制方法 Download PDF

Info

Publication number
CN109739133A
CN109739133A CN201910014233.XA CN201910014233A CN109739133A CN 109739133 A CN109739133 A CN 109739133A CN 201910014233 A CN201910014233 A CN 201910014233A CN 109739133 A CN109739133 A CN 109739133A
Authority
CN
China
Prior art keywords
tomato
control system
robot
module
master control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910014233.XA
Other languages
English (en)
Inventor
鲍乐平
席智鹏
郭凯
南超强
杨俊鹏
晋晓昱
朱亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Taiyuan Institute of Technology
Original Assignee
Taiyuan Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Taiyuan Institute of Technology filed Critical Taiyuan Institute of Technology
Priority to CN201910014233.XA priority Critical patent/CN109739133A/zh
Publication of CN109739133A publication Critical patent/CN109739133A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Manipulator (AREA)
  • Image Analysis (AREA)

Abstract

一种基于雷达定位的番茄采摘机器人系统及其控制方法,包括主控制系统、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、称重模块、遥控模块、报警模块;主控制系统接受视觉采集模块采集到的彩色画面,首先对彩色画面进行分离,计算果实具体位置,再提取番茄的颜色,计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,计算番茄是否已经成熟。本发明提供的一种智能番茄采摘机器人控制系统和方法,不仅解决了人为采摘果实番茄困难、成本高、劳动工作量大等问题,还克服了一般果实采摘机器人体积大、开发成本高和功耗高以及有些番茄被茎叶遮盖而无法采摘等缺点,而且机器人能够自主导航、数据传输快、适应更加复杂的工作环境。

Description

基于雷达定位的番茄采摘机器人系统及其控制方法
技术领域
本发明涉及机器人在农业上的应用,具体涉及一种基于雷达定位的番茄采摘机器人系统及其控制方法。
背景技术
果蔬采摘机器人的研究始于20世纪60年代的美国,采用的收获方式主要是机械震摇式和气动震摇式,其缺点是果实易损,效率不高,特别是无法进行选择性的收获,在采摘柔软、新鲜的果实方面还存在很大的局限性。随着电子技术和科学技术的发展,特别是工业机器人技术、计算机图像处理技术和人工智能技术的成熟,采摘机器人的研究和开发技术得到了快速发展。
在番茄整个生产过程中,收获采摘约占整个作业量的40%,采摘质量的好坏直接影响番茄的存储、加工以及销售,从而最终影响市场价格和经济收益。由于采摘作业的复杂性,采摘自动化程度仍然很低。目前国内番茄采摘作业基本上仍然靠手工完成,随着人口老龄化和农业劳动力的减少,农业生产成本也将提高。番茄具有柔软易伤的特点,其生长发育程度不一,相互差异较大,必须细心轻柔的对待处理。由于采摘机器人的操作者是农民,不是具有机电知识的机电工程师,因此要求番茄采摘机器人必须具有高可靠性和操作简单的特点;采摘番茄的地点在农田里,地形比较复杂,地面高低不平,对于一般的轮式机器人移动底盘行走比较困难;对于机器人所要采摘的番茄并不是全部都裸露在外面,往往会有一部分被茎叶完全遮盖,而这些番茄无法被机器人所检测到,导致这些番茄被采摘漏掉;在栽种番茄的时候,番茄之间的距离基本上都是相等的,这就需要在机器人采摘的区域内进行路径规划,而传统路径规划需要人为在场地进行规划循迹,一般的循迹传感器容易受环境的影响,导致机器人不能在规定的路线内前进;国内对番茄采摘机器人的研究也有一定的成果,但大多是停留在研究阶段,而这些机器人体积比较大,制作成本比较高,距离机器人完全应用在实际生活中还有一定的差距。
发明内容
本发明的目的就是提供一种基于雷达定位的番茄采摘机器人系统及其控制方法,不仅解决了人为采摘果实番茄困难、成本高、劳动工作量大等问题,还克服了一般果实采摘机器人体积大、开发成本高和功耗高以及有些番茄被茎叶遮盖而无法采摘等缺点。
本发明的基于雷达定位的番茄采摘机器人系统,包括主控制系统、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、通讯模块、称重模块、遥控模块、报警模块,底盘驱动系统通过履带移动底盘使机器人能够在平坦或地形较复杂的农田移动;所述的视觉采集模块包括摄像头,通过总线协议与机器人主控制系统连接,摄像头将采集的数据传输给主控制系统树莓派,由树莓派处理,通过颜色判断番茄是否成熟,如果确定番茄成熟,通过双目识别算法计算番茄在空间的坐标,通讯模块将数据发送给主控制系统,然后给机械臂发送指令,采摘番茄,否则机器人前往下一目标点进行采摘;所述称重模块由称重传感器组成,与机器人主控制系统连接,果篮里的番茄重量达到设定值后,称重传感器给主控制系统发送信号,机器人将会自动回到起始点;所述的报警模块与主控制系统连接,当机器人回到起始点时,主控制系统给报警模块发送指令,报警鸣笛提醒工作人员;所述通讯模块由WIFI组成,通过树莓派处理摄像头采集的画面,由WIFI无线通讯系统实现主控制系统与树莓派之间和主控制系统与遥控器之间的信息传送,使用WIFI进行信号之间的传递,增加了系统的稳定性、灵活性;所述机械臂包括多自由度的机械手臂和机械爪,整个机械臂与底座连接由步进电机提供动力,主控制系统控制机械臂的运动;所述模块包括遥控器,遥控器控制机械臂,机器人无法检测到一些被枝叶覆盖的番茄,此时通过遥控器控制机械臂进行采摘,提高了机器人的采摘效率。
本发明的基于雷达定位的番茄采摘机器人控制方法,包括如下步骤,主控制系统接受视觉采集模块采集到的彩色画面,主控制系统首先对彩色画面进行通道分离,其次对通道滤波,然后计算果实具体位置,最后提取番茄的颜色;计算番茄具体位置时,首先对比通道直方图,红色通道为多点,青色为少点,由此计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,如果某些点的相对位置较为靠近,那么把这些点归为同一组,其他点归为同一组,分组之后,对这些组进行包围,然后进行膨胀计算,如果能相互连接在一起,即视为番茄已经成熟,可以采摘。
本发明的基于雷达定位的番茄采摘机器人系统由雷达进行定位导航,无需通过人为方式在工作区域内进行路径规划,同时采用遥控器控制机械臂,采摘解被枝叶遮盖的番茄,不仅解决了人为采摘果实番茄困难、成本高、劳动工作量大等问题,还克服了一般果实采摘机器人体积大、开发成本高和功耗高以及有些番茄被茎叶遮盖而无法采摘等缺点,而且机器人能够自主导航、数据传输快、适应更加复杂的工作环境。
附图说明
图1是本发明的系统结构框图。
具体实施方式
一种基于雷达定位的番茄采摘机器人系统,包括主控制系统STM32、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、通讯模块、称重模块、遥控模块、报警模块,底盘驱动系统通过履带移动底盘使机器人在农田移动;所述的视觉采集模块包括摄像头,通过总线协议与机器人主控制系统连接,摄像头将采集的数据传输给主控制系统树莓派,由树莓派处理,通过颜色判断番茄是否成熟,如果确定番茄成熟,通过双目识别算法计算番茄在空间的坐标,通讯模块将数据发送给主控制系统,然后给机械臂发送指令,采摘番茄,否则机器人前往下一目标点进行采摘;所述称重模块由称重传感器组成,与机器人主控制系统连接,果篮里的番茄重量达到设定值后,称重传感器给主控制系统发送信号,机器人将会自动回到起始点;所述的报警模块与主控制系统连接,当机器人回到起始点时,主控制系统给报警模块发送指令,报警鸣笛提醒工作人员;所述通讯模块由WIFI组成,通过树莓派处理摄像头采集的画面,由WIFI无线通讯系统实现主控制系统与树莓派之间和主控制系统与遥控器之间的信息传送;所述机械臂包括多自由度的机械手臂和机械爪,整个机械臂与底座连接由步进电机提供动力,主控制系统控制机械臂的运动;所述模块包括遥控器,遥控器控制机械臂,机器人无法检测到的被枝叶覆盖的番茄,可通过遥控器控制机械臂进行采摘。
一种基于雷达定位的番茄采摘机器人控制方法,包括如下步骤,主控制系统接受视觉采集模块采集到的彩色画面,主控制系统首先对彩色画面进行通道分离,其次对通道滤波,然后计算果实具体位置,最后提取番茄的颜色;计算番茄具体位置时,首先对比通道直方图,红色通道为多点,青色为少点,由此计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,如果某些点的相对位置较为靠近,那么把这些点归为同一组,其他点归为同一组,分组之后,对这些组进行包围,然后进行膨胀计算,如果能相互连接在一起,即视为番茄已经成熟,可以采摘。

Claims (2)

1.一种基于雷达定位的番茄采摘机器人系统,包括主控制系统、底盘驱动系统、机械臂、视觉采集模块、雷达定位模块、通讯模块、称重模块、遥控模块、报警模块,其特征在于:底盘驱动系统通过履带移动底盘使机器人在农田移动;所述的视觉采集模块包括摄像头,通过总线协议与机器人主控制系统连接,摄像头将采集的数据传输给主控制系统树莓派,由树莓派处理,通过颜色判断番茄是否成熟,如果确定番茄成熟,通过双目识别算法计算番茄在空间的坐标,通讯模块将数据发送给主控制系统,然后给机械臂发送指令,采摘番茄,否则机器人前往下一目标点进行采摘;所述称重模块由称重传感器组成,与机器人主控制系统连接,果篮里的番茄重量达到设定值后,称重传感器给主控制系统发送信号,机器人将会自动回到起始点;所述的报警模块与主控制系统连接,当机器人回到起始点时,主控制系统给报警模块发送指令,报警鸣笛提醒工作人员;所述通讯模块由WIFI组成,通过树莓派处理摄像头采集的画面,由WIFI无线通讯系统实现主控制系统与树莓派之间和主控制系统与遥控器之间的信息传送;所述机械臂包括多自由度的机械手臂和机械爪,机械臂与底座连接由步进电机提供动力,主控制系统控制机械臂的运动;所述模块包括遥控器,遥控器控制机械臂,机器人无法检测到的被枝叶覆盖的番茄,通过遥控器控制机械臂进行采摘。
2.一种基于雷达定位的番茄采摘机器人控制方法,其特征在于:它包括如下步骤,主控制系统接受视觉采集模块采集到的彩色画面,主控制系统首先对彩色画面进行通道分离,其次对通道滤波,然后计算果实具体位置,最后提取番茄的颜色;计算番茄具体位置时,首先对比通道直方图,红色通道为多点,青色为少点,由此计算出番茄的像素点,然后进行轮廓提取,对番茄像素点进行分析,如果某些点的相对位置较为靠近,那么把这些点归为同一组,其他点归为同一组,分组之后,对这些组进行包围,然后进行膨胀计算,如果能相互连接在一起,即视为番茄已经成熟,进行采摘。
CN201910014233.XA 2019-01-08 2019-01-08 基于雷达定位的番茄采摘机器人系统及其控制方法 Pending CN109739133A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910014233.XA CN109739133A (zh) 2019-01-08 2019-01-08 基于雷达定位的番茄采摘机器人系统及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910014233.XA CN109739133A (zh) 2019-01-08 2019-01-08 基于雷达定位的番茄采摘机器人系统及其控制方法

Publications (1)

Publication Number Publication Date
CN109739133A true CN109739133A (zh) 2019-05-10

Family

ID=66363778

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910014233.XA Pending CN109739133A (zh) 2019-01-08 2019-01-08 基于雷达定位的番茄采摘机器人系统及其控制方法

Country Status (1)

Country Link
CN (1) CN109739133A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110366952A (zh) * 2019-08-23 2019-10-25 重庆市经贸中等专业学校 一种微型履带农业机器人
CN110919648A (zh) * 2019-11-08 2020-03-27 南昌大学 一种基于树莓派的自动拾料堆叠装置及拾料堆叠方法
CN111274877A (zh) * 2020-01-09 2020-06-12 重庆邮电大学 一种基于cnn的智能草莓采摘机器人控制系统
CN113099848A (zh) * 2021-06-04 2021-07-13 山东农业大学 一种采摘机器人高效采放运综合平台及使用方法
CN113547528A (zh) * 2021-06-30 2021-10-26 广州铁路职业技术学院(广州铁路机械学校) 一种摘果机器人
CN114451146A (zh) * 2022-01-27 2022-05-10 浙江小远机器人有限公司 一种果蔬采摘方法及系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101273688A (zh) * 2008-05-05 2008-10-01 江苏大学 柑橘采摘机器人的柔性采摘装置和方法
CN202085493U (zh) * 2011-05-24 2011-12-28 中国农业大学 番茄采摘机器人系统
CN203467238U (zh) * 2013-10-08 2014-03-12 仲恺农业工程学院 基于机器视觉的番茄智能采摘装置
CN104751117A (zh) * 2015-01-26 2015-07-01 江苏大学 一种用于采摘机器人的莲蓬目标图像识别方法
CN105993393A (zh) * 2015-07-03 2016-10-12 中国运载火箭技术研究院 一种花朵采摘机器人的采摘方法
US20170190054A1 (en) * 2014-03-31 2017-07-06 Intelligrated Headquarters, Llc Autonomous truck loader and unloader
CN107139182A (zh) * 2017-06-05 2017-09-08 重庆理工大学 一种柑橘采摘机器人系统及其控制方法
CN207040242U (zh) * 2017-08-11 2018-02-27 博湖县红多多蕃茄制品有限公司 一种基于机器视觉的番茄智能采摘装置
CN107750643A (zh) * 2017-10-25 2018-03-06 重庆工商大学 草莓采摘机器人的视觉系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101273688A (zh) * 2008-05-05 2008-10-01 江苏大学 柑橘采摘机器人的柔性采摘装置和方法
CN202085493U (zh) * 2011-05-24 2011-12-28 中国农业大学 番茄采摘机器人系统
CN203467238U (zh) * 2013-10-08 2014-03-12 仲恺农业工程学院 基于机器视觉的番茄智能采摘装置
US20170190054A1 (en) * 2014-03-31 2017-07-06 Intelligrated Headquarters, Llc Autonomous truck loader and unloader
CN104751117A (zh) * 2015-01-26 2015-07-01 江苏大学 一种用于采摘机器人的莲蓬目标图像识别方法
CN105993393A (zh) * 2015-07-03 2016-10-12 中国运载火箭技术研究院 一种花朵采摘机器人的采摘方法
CN107139182A (zh) * 2017-06-05 2017-09-08 重庆理工大学 一种柑橘采摘机器人系统及其控制方法
CN207040242U (zh) * 2017-08-11 2018-02-27 博湖县红多多蕃茄制品有限公司 一种基于机器视觉的番茄智能采摘装置
CN107750643A (zh) * 2017-10-25 2018-03-06 重庆工商大学 草莓采摘机器人的视觉系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110366952A (zh) * 2019-08-23 2019-10-25 重庆市经贸中等专业学校 一种微型履带农业机器人
CN110919648A (zh) * 2019-11-08 2020-03-27 南昌大学 一种基于树莓派的自动拾料堆叠装置及拾料堆叠方法
CN111274877A (zh) * 2020-01-09 2020-06-12 重庆邮电大学 一种基于cnn的智能草莓采摘机器人控制系统
CN113099848A (zh) * 2021-06-04 2021-07-13 山东农业大学 一种采摘机器人高效采放运综合平台及使用方法
CN113547528A (zh) * 2021-06-30 2021-10-26 广州铁路职业技术学院(广州铁路机械学校) 一种摘果机器人
CN114451146A (zh) * 2022-01-27 2022-05-10 浙江小远机器人有限公司 一种果蔬采摘方法及系统

Similar Documents

Publication Publication Date Title
CN109739133A (zh) 基于雷达定位的番茄采摘机器人系统及其控制方法
US12029166B2 (en) Harvester with automated targeting capabilities
Iyer et al. Living IoT: A flying wireless platform on live insects
CN109605375A (zh) 一种智能番茄采摘机器人的控制方法
CN110122073B (zh) 一种基于机器视觉的草莓采摘机器人
US20200333782A1 (en) Method and system for agriculture
US7854108B2 (en) Agricultural robot system and method
AU2005314708B2 (en) Agricultural robot system and method
Zhang et al. The use of agricultural robots in orchard management
CN109699300B (zh) 一种智能柑橘采摘机的控制系统及其控制方法
WO2022021804A1 (zh) 一种水下机器人装置.水下调控管理最优化系统及方法
CN109297467B (zh) 用于检测三维环境数据的系统和传感器模块
Hu et al. Simplified 4-DOF manipulator for rapid robotic apple harvesting
JP2014183841A (ja) 植物自動収穫機、植物自動収穫プログラムおよび植物自動収穫方法
CN114679963B (zh) 一种跨垄双臂协作草莓收获机器人、控制系统及采摘方法
WO2022091092A1 (en) System and method for indoor crop management
CN105259832A (zh) 一种基于多目立体视觉的智能采棉机控制系统
CN114080905A (zh) 基于数字双胞胎的采摘方法及云采摘机器人系统
CN116117807A (zh) 一种辣椒采摘机器人及控制方法
CN115316129A (zh) 基于双目视觉识别的自适应仿生采摘装置及串果采摘方法
Li et al. Design of multifunctional seedbed planting robot based on MobileNetV2-SSD
CN103004344A (zh) 基于异构机器视觉的嫁接苗自动栽植系统
Ji et al. Performance analysis of target information recognition system for agricultural robots
WO2020121296A1 (en) Selective harvesting at night and agriculture data collection
Peebles et al. Robotic Harvesting of Asparagus using Machine Learning and Time-of-Flight Imaging–Overview of Development and Field Trials

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190510

WD01 Invention patent application deemed withdrawn after publication