CN108901366A - 一种天地一体化柑橘采摘方法 - Google Patents

一种天地一体化柑橘采摘方法 Download PDF

Info

Publication number
CN108901366A
CN108901366A CN201810630095.3A CN201810630095A CN108901366A CN 108901366 A CN108901366 A CN 108901366A CN 201810630095 A CN201810630095 A CN 201810630095A CN 108901366 A CN108901366 A CN 108901366A
Authority
CN
China
Prior art keywords
tree
positioning device
mandarin
unmanned plane
mature orange
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810630095.3A
Other languages
English (en)
Other versions
CN108901366B (zh
Inventor
龙长江
颜家彬
陈红
李善军
覃光胜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huazhong Agricultural University
Original Assignee
Huazhong Agricultural University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huazhong Agricultural University filed Critical Huazhong Agricultural University
Priority to CN201810630095.3A priority Critical patent/CN108901366B/zh
Publication of CN108901366A publication Critical patent/CN108901366A/zh
Application granted granted Critical
Publication of CN108901366B publication Critical patent/CN108901366B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01D—HARVESTING; MOWING
    • A01D91/00—Methods for harvesting agricultural products
    • A01D91/04—Products growing above the soil
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/66—Analysis of geometric attributes of image moments or centre of gravity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G06V20/188—Vegetation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10032—Satellite or aerial image; Remote sensing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Environmental Sciences (AREA)
  • Geometry (AREA)
  • Harvesting Machines For Specific Crops (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

一种柑橘自动采摘的方法，该方法将采摘分空中和地面两步进行：采用高精度卫星定位装置确定无人机准确位置，利用无人机上携带的双目视觉定位装置对种植区域内的每棵柑橘树进行信息采集，再用图像处理方法获得每棵柑橘树树干和成熟柑橘的空间三维坐标，在短时间内即能收集到种植区域内全部柑橘树和成熟柑橘信息并初步定位。采摘前，将初步定位坐标导入并存储到地面采摘系统中，地面采摘系统沿果树行间间隔运动并在每棵柑橘树前停留，驱动采摘机械手运动到成熟柑橘空间三维坐标0.2米空间范围内，启动机械手上携带的和无人机相同的双目视觉定位装置，只需要在存储的成熟柑橘空间三维坐标周围很小范围（±0.25m）内搜索，即可寻获成熟柑橘并确认，再进一步精确定位并自动采摘，知道全部成熟柑橘采摘完成。

Description

一种天地一体化柑橘采摘方法
技术领域
本发明涉及一种柑橘自动化采摘方法，具体是一种天地一体化柑橘采摘方法。
背景技术
人工采摘柑橘这类果树的果实时，由于自然条件下生长的果树形态各异、枝干发达、树冠超过人体高度，果实不均匀的生长在树枝之间和前后背,若完全依靠人工采集，不仅效率低，而且有一定危险性，自动化采摘替代人工采摘是大势所趋。地面自动化采摘需要采用机器视觉定位，机器视觉受自然光线的影响严重，持续作业时日光角度和光线强度不断变化，机器视觉受背景光线干扰，常常无法识别柑橘并定位，使采摘作业无法顺利进行。利用无人机采摘柑橘，空中采摘由于飞机受风力影响产生漂移，无法准确抓取柑橘，且无人机滞空时间短，无法长时间持续作业。因此需要一种准确，可持续作业的柑橘自动化采摘方法。
发明内容
为解决地面采摘系统的视觉定位装置受日光角度和强度不断变化影响，在大范围内搜索时，难以快速准确识别出成熟柑橘并定位采摘的缺陷。本发明提供一种天地一体化柑橘采摘方法，应用配备差分卫星定位装置和双目视觉定位装置小型无人机在柑橘成熟期间快速采集果园内柑橘的图片信息，利用图像处理技术识别成熟柑橘并初步定位(误差较大)；定位信息在采摘前传送给地面采摘系统，地面采摘系统的采摘机械手上携带的视觉定位装置运动到成熟柑橘坐标附近，只需要在很小范围内搜索即可寻获成熟柑橘，再进一步精确定位(误差很小)，并执行采摘的柑橘自动化采摘。
本发明采取的技术方案为：
一种天地一体化柑橘采摘方法，包括以下步骤：
步骤S1、使用配备差分卫星定位装置和双目视觉定位装置的无人机，选择风力不影响无人机稳定飞行和光线适合双目视觉定位装置拍摄的天气，在种植区域沿柑橘树行列间间隙以某一高度巡航，在每棵柑橘树前自主定高悬停，并利用双目视觉定位装置连续拍照，快速遍历整个种植区域，获取种植区域内柑橘树的图像信息，通过计算机图像处理技术，分割出成熟柑橘，并结合无人机拍摄时的空间三维坐标，初步确定成熟柑橘的空间坐标
步骤S2、将成熟柑橘的空间坐标导入并存储到携带差分卫星定位装置的地面采摘系统中，地面采摘系统驱动采摘机械手上携带的视觉定位装置，运动到某个成熟柑橘附近，只需要在存储的成熟柑橘空间坐标周围很小范围内搜索，即可寻获成熟柑橘并确认，再进一步精确定位并由机械手执行自动采摘。
所述步骤S1，具体包括以下步骤：
步骤S1.1、操作携带差分卫星定位装置和双目视觉定位装置的无人机，在合适天气条件下，遥控无人机沿柑橘树行列间间隙，在柑橘树树冠高度以上和树冠高度以下分次飞行，并利用双目视觉定位装置连续拍照，快速获取果园种植区域内柑橘树的图像信息，拍照同时保存差分卫星定位装置确定的无人机当前空间三维坐标；
步骤S1.2、通过计算机，运用图像和信息处理技术，结合差分卫星定位装置确定的无人机自身空间三维坐标和用双目视觉定位装置拍摄的图片信息，确定果园内柑橘树的分布信息，每棵柑橘树树冠形心的空间三维坐标，树冠最大直径和树冠顶点高度信息；
步骤S1.3、根据树冠形心的空间三维坐标、树冠最大直径和树冠顶点高度信息,确定无人机可穿越柑橘树树林的飞行通道，规划出无人机穿越柑橘园拍摄每棵柑橘树清晰图像的自主巡航路线。
步骤S1.4、待柑橘树柑橘成熟需要采摘前，选择风力不影响无人机稳定飞行和光线适合双目视觉定位的天气，使用无人机在步骤S1.3中所确定的高度和规划的路径上自主巡航飞行，根据步骤S1.3中确定的每棵柑橘树树冠形心的空间三维坐标，利用差分卫星定位装置和高度传感器，使无人机在每棵柑橘树树干中心线左侧，树干中心线位置，树干中心线右侧，按步骤S1.3中所确定的高度分别自主悬停并保持稳定，利用双目视觉定位装置自动拍摄多张每棵柑橘树柑橘分布情况的照片，利用无人机飞行速度快的优势，遍历整个果园种植区域，获取每棵柑橘树柑橘分布情况的多幅完整图片信息；
步骤S1.5、在上述基础上，通过计算机图像处理软件处理双目视觉定位装置拍摄的图片信息，分割出成熟柑橘，结合差分卫星定位装置，确定的无人机自身空间三维坐标，获得成熟柑橘形心位置的空间三维坐标作为成熟柑橘坐标空间，利用所有图片，获得果园内全部柑橘树上成熟柑橘位置的分布信息；
步骤S1.6、利用每棵树的图片，即可获得果园内全部柑橘树上成熟柑橘的空间三维坐标。
步骤S1.7、由于风力干扰，果实会摆动，加上测量存在误差，因此多次重复步骤S1.4-1.6，使得获得的信息存在重复和冗余。将多次定位的坐标予以平均，以平均值作为成熟柑橘位置的空间三维坐标，以提高定位精度；
所述步骤S2，具体包括以下步骤：
步骤S2.1、在上述基础上，使用爬坡能力强的履带底盘，携带与无人机相同的差分卫星定位装置以及双目视觉定位装置，配备采摘机械手的地面采摘系统，在天晴，风速小于1km/h条件下进行采摘。在采摘前，将步骤S1.7所获得的成熟柑橘空间三维坐标信息导入地面采摘系统中。
步骤S2.2、地面采摘系统沿果树行间间隙中间，顺地面行驶，并停留在某棵柑橘树树干前。
步骤S2.3、由于采摘气象条件下，柑橘随风摆动幅度加上系统误差在0.15m范围内，地面采摘系统驱动采摘机械手运动到某个成熟柑橘空间三维坐标外0.2m范围左右停止。
步骤S2.4、采摘机械手上携带的与无人机相同的双目视觉定位装置，启动双目视觉定位装置，在以给定成熟柑橘位置为中心的±0.25m内搜索，对成熟柑橘进行寻获和确认，并进一步精确定位后，驱动机械手执行自动采摘。
步骤S2.5、重复步骤S2.3-步骤S2.4，直至采完整棵果树上的成熟柑橘；
步骤S2.6、重复步骤S2.2-步骤S2.5，直至完成给定种植区域内全部柑橘树上的成熟柑橘采摘。
本发明一种天地一体化柑橘采摘方法，优点在于：
1、用无人机可低空快速飞行的优势遍历整个种植区域，通过低空巡航并在每棵柑橘树前某一高度下自主定高悬停，对柑橘树的图像信息进行自动采集，再通过计算机处理图片信息，结合无人机自身位置，初步确定树上成熟柑橘的空间三维坐标，将位置数据导入并存储到地面采摘系统中，地面采摘系统驱动机械手上携带的视觉定位装置在小范围内搜索即可寻获成熟柑橘并进一步精确定位后进行自动采摘。本发明方法可以推广到其它果树果实的自动采摘中去。
2、本发明方法避免了单纯依靠地面采摘系统的机器视觉装置需要在整棵果树上搜寻成熟柑橘，运算量大，耗时长的缺陷，且避免了由于一天内日光强度和角度变化大，机器视觉装置无法准确识别并定位成熟柑橘的缺陷，即使有风的条件下，只要柑橘摆动幅度不大，地面采摘系统的机器视觉装置也能依据导入的定位坐标，快速识别出成熟柑橘并精确定位，天上无人机和地面采摘系统结合可以使自动化采集更加准确、迅速。
附图说明
下面结合附图和实施例对本发明作进一步说明：
图1为本发明的方法流程图。
图2为柑橘偏树干中心左侧采集图。
图3为柑橘正中采集图。
图4为柑橘偏树干右侧采集图。
图5为图像处理软件处理获得的图片信息，分割出成熟柑橘图。
具体实施方式
一种天地一体化柑橘采摘方法，包括以下步骤：
步骤S1、使用配备差分卫星定位装置和双目视觉定位装置的无人机，选择风力不影响无人机稳定飞行和光线适合双目视觉定位装置拍摄的天气，在种植区域沿柑橘树行列间间隙以某一高度巡航，在每棵柑橘树前自主定高悬停，并利用双目视觉定位装置连续拍照，快速遍历整个种植区域，获取种植区域内柑橘树的图像信息，通过计算机图像处理技术，分割出成熟柑橘，并结合无人机拍摄时的空间三维坐标，初步确定成熟柑橘的空间坐标；步骤S2、将成熟柑橘的空间坐标导入并存储到携带差分卫星定位装置的地面采摘系统中，地面采摘系统驱动采摘机械手上携带的视觉定位装置，运动到某个成熟柑橘附近，只需要在存储的成熟柑橘空间坐标周围很小范围内搜索，即可寻获成熟柑橘并确认，再进一步精确定位并由机械手执行自动采摘。
所述步骤S1，具体包括以下步骤：
步骤S1.1、操作携带差分卫星定位装置和双目视觉定位装置的无人机，
差分卫星定位装置采用中海达新V9GNSS RTK系统，垂直固定安装在无人机中心坐标上方，具体坐标为(0m,0m,0.6m)处。
双目视觉定位装置采用MYNT EYE S小觅双目摄像头，垂直固定平行于无人机X轴安装在无人机中心线左侧，双目镜头中心点位置在无人机上为(0m，0.2m，0.1m)。
无人机采用极多轴飞无人机P20。
在天晴，风速小于1km/h条件下，遥控无人机沿柑橘树行列间间隙，在柑橘树树冠高度以上和树冠高度以下分次飞行，并利用双目视觉定位装置连续拍照，快速获取果园种植区域内柑橘树的图像信息，拍照同时保存差分卫星定位装置确定的无人机当前空间坐标。如差分卫星定位装置显示坐标为N 30.47646146251638度；S 114.35943557225039度，H23.838m，转换为北京2000坐标系为X＝16316.04m，Y＝406.78m,Z＝23.84m,则机体中心在北京2000坐标系下空间坐标为X＝16316.04m，Y＝406.78m，Z＝23.838-0.6＝22.24m。
步骤S1.2、通过计算机，运用图像和信息处理技术，结合差分卫星定位装置确定的无人机自身空间三维坐标、和用双目视觉定位装置拍摄的图片信息，确定果园内柑橘树的分布信息，每棵柑橘树树冠形心的空间三维坐标，树冠最大直径和树冠顶点高度信息；如下表1所示：
表1：每棵柑橘树树冠形心的空间三维坐标，树冠最大直径和树冠高度信息
果树1 果树2 果树3
树冠形心X坐标(m) 16318.42 16320.89 16323.92
树冠形心Y坐标(m) 409.86 412.81 414.63
树冠最大直径(m) 2.01 1.97 1.83
树冠顶点Z坐标(m) 26.90 26.53 27.03
步骤S1.3、根据树冠形心的空间三维坐标、树冠最大直径和树冠顶点高度信息,确定无人机可穿越柑橘树树林的飞行通道，规划出无人机穿越柑橘园拍摄每棵柑橘树清晰图像的自主巡航路线。如柑橘树一般高约3m，株距2.9m左右，树冠间隙1.2m左右，无人机向自主巡航路径为以距地面2m高度沿柑橘树行间间隙的中心线飞行，逐行巡航，遍历整个果园。
步骤S1.4、待柑橘树柑橘成熟需要采摘前，选择天晴，风速小于1km/h和光强20000-70000Lux的天气，使用无人机在步骤S1.3中所确定的高度和规划的路径上自主巡航飞行，根据步骤S1.3中确定的每棵柑橘树树冠形心的空间三维坐标，利用差分卫星定位装置和高度传感器(高度传感器采用MS5611-01BA03气压高度计)。使无人机在每棵柑橘树树干中心线左侧，树干中心线位置，树干中心线右侧，按步骤S1.3中所确定的高度自主悬停并保持稳定，利用双目视觉定位装置在果树树干中心线偏左侧，正中和偏右侧自动拍摄每棵柑橘树柑橘分布情况的照片，利用无人机飞行速度快的优势，遍历整个果园种植区域，获取每棵柑橘树柑橘分布情况的多幅图片。如图2、图3、图4所示。
步骤S1.5、在上述基础上，通过Matlab或者OpenCV等图像处理软件处理获得的图片信息，分割出成熟柑橘，如图5所示。根据分割出来的成熟柑橘图像信息，通过Matlab或者OpenCV等图像处理软件获得柑橘果实形心三维重构坐标，结合差分卫星定位装置确定无人机机体空间三维坐标，以及相机在无人机机体上的安装位置三维坐标，三者坐标叠加，即可橘树上成熟柑橘形心位置的空间三维坐标作为成熟柑橘的空间坐标。
如图5中柑橘树上成熟果实1通过图像处理获得的果实1形心三维重构坐标在相机坐标系下坐标为X＝1.20m,Y＝1.50m，Z＝-1.02m，由于相机安装在机体上坐标为(0m，0.2m，0.1m),因此果实1在无人机机体下坐标为二者叠加，X＝1.20+0＝1.20m，Y＝1.50+0.20＝1.70m，Z＝-0.92m。拍照时差分装置显示当前无人机机体坐标与北京2000坐标系X轴夹角为30度，则机体坐标转换到北京2000坐标系下为X＝1.20*cos(30°)+1.70*sin(30°)＝1.89m,Y＝1.70*cos(30°)-1.20*sin(30°)＝0.87m，Z＝-0.92m。当前机体中心在北京2000坐标系下空间坐标如前述为X＝16316.04m，Y＝406.777m，Z＝22.238m处，则果实1的形心坐标在北京2000坐标系下空间坐标为X＝16316.04+0.87＝16316.91m，Y＝406.78+0.87＝707.65m，Z＝22.24-0.92＝21.32m。
步骤S1.6、利用每棵树的图片，即可获得果园内全部柑橘树上成熟柑橘的空间三维坐标。
步骤S1.7、由于风力干扰，果实会摆动，加上测量存在误差，因此多次重复步骤S1.4-1.6，使得获得的信息存在重复和冗余。将多次定位的坐标予以平均，以平均值作为成熟柑橘位置的空间三维坐标，以提高定位精度；比如图5中柑橘树上果实1位置测试五次，将五次的X,Y，Z坐标值相加，取平均值作为果实1的初步定位坐标。
如图5中柑橘树上成熟果实1先后5次测得在北京2000坐标系下坐标表2所示：
表2:多次测量果实1位置的结果
X(m) Y(m) Z(m)
第一次 16316.91 707.65 21.32
第二次 16316.99 707.67 21.30
第三次 16316.96 707.74 21.29
第四次 16316.83 707.71 21.35
第五次 16316.87 707.56 21.38
平均 16316.91 707.68 21.33
则图5中柑橘树上成熟果实1在北京2000坐标系下初步定位坐标为(16316.91m，707.68m，21.33m)。
所述步骤S2，具体包括以下步骤：
步骤S2.1、在上述基础上，使用爬坡能力强的履带底盘，携带与无人机相同的差分卫星定位装置以及双目视觉定位装置，配备采摘机械手的地面采摘系统，在天晴，风速小于1km/h条件下进行采摘。在采摘前，将步骤S1.7所获得的成熟柑橘空间三维坐标信息导入地面采摘系统中。
步骤S2.2、地面采摘系统沿果树行间间隙中间，顺地面行驶，并停留在某棵柑橘树树干前。
步骤S2.3、由于采摘气象条件下，柑橘随风摆动幅度加上系统误差在0.15m范围内，地面采摘系统驱动采摘机械手运动到某个成熟柑橘空间三维坐标外0.2m范围左右停止。
步骤S2.4、采摘机械手上携带的与无人机相同的双目视觉定位装置，启动双目视觉定位装置，在以给定成熟柑橘位置为中心的±0.25m内搜索，对成熟柑橘进行寻获和确认，并进一步精确定位后，驱动机械手执行自动采摘。
如图5中柑橘树上成熟果实1在北京2000坐标系下初步定位坐标为(16316.91m，707.68m，21.33m)，则机械手上双目视觉定位装置搜索空间范围为(16316.91±0.25m，707.68m±0.25m，21.33±0.25m)。
步骤S2.5、重复步骤S2.3-步骤S2.4，直至采完整棵果树上的成熟柑橘；
步骤S2.6、重复步骤S2.2-步骤S2.5，直至完成给定种植区域内全部柑橘树上的成熟柑橘采摘。

Claims (2)

1.一种天地一体化柑橘采摘方法，其特征在于包括以下步骤：
步骤S1、使用配备差分卫星定位装置和双目视觉定位装置的无人机，选择风力不影响无人机稳定飞行和光线适合双目视觉定位装置拍摄的天气，在种植区域内沿柑橘树行列间间隙以某一高度巡航，在每棵柑橘树前自主定高悬停，并利用双目视觉定位装置连续拍照，快速遍历整个种植区域，获取种植区域内柑橘树的图像信息，通过计算机图像处理技术，分割出成熟柑橘，并结合无人机拍摄时的空间三维坐标，初步确定成熟柑橘的空间坐标；
步骤S2、将成熟柑橘的空间坐标导入并存储到携带差分卫星定位装置的地面采摘系统中，地面采摘系统在种植区域内沿柑橘树行列间间隙运动，并在果树前停留，驱动采摘机械手上携带的视觉定位装置，运动到某个成熟柑橘附近，只需要在存储的成熟柑橘空间坐标周围很小范围内搜索，即可寻获成熟柑橘并确认，再进一步精确定位并驱动机械手自动采摘。
2.根据权利要求1所述一种天地一体化柑橘采摘方法，其特征在于：所述步骤S1，具体包括以下步骤：
步骤S1.1、操作携带差分卫星定位装置和双目视觉定位装置的无人机，在合适天气条件下，遥控无人机沿柑橘树行列间间隙，在柑橘树树冠高度以上和树冠高度以下分次飞行，并利用双目视觉定位装置连续拍照，快速获取果园种植区域内柑橘树的图像信息，拍照同时保存差分卫星定位装置确定的无人机当前空间三维坐标；
步骤S1.2、通过计算机，运用图像和信息处理技术，结合差分卫星定位装置确定的无人机自身空间三维坐标和用双目视觉定位装置拍摄的图片信息，确定果园内柑橘树的分布信息，每棵柑橘树树冠形心的空间三维坐标，树冠最大直径和树冠顶点高度信息；
步骤S1.3、根据树冠形心的空间三维坐标、树冠最大直径和树冠顶点高度信息,确定无人机可穿越柑橘树树林的飞行通道，规划出无人机穿越柑橘园拍摄每棵柑橘树清晰图像的自主巡航路线；
步骤S1.4、待柑橘树柑橘成熟需要采摘前，待柑橘树柑橘成熟需要采摘前，选择天晴，风速小于1km/h和光强20000-70000Lux的天气，使用无人机在步骤S1.3中所确定的高度和规划的路径上自主巡航飞行，根据步骤S1.3中确定的每棵柑橘树树冠形心的空间三维坐标，利用差分卫星定位装置和高度传感器，使无人机在每棵柑橘树树干中心线左侧，树干中心线位置，树干中心线右侧，按步骤S1.3中所确定的高度分别自主悬停并保持稳定，利用双目视觉定位装置自动拍摄多张每棵柑橘树柑橘分布情况的照片，利用无人机飞行速度快的优势，遍历整个果园种植区域，获取每棵柑橘树柑橘分布情况的多幅完整图片信息；
步骤S1.5、在上述基础上，通过计算机图像处理软件处理双目视觉定位装置拍摄的图片信息，分割出成熟柑橘，结合差分卫星定位装置，确定的无人机自身空间三维坐标，获得成熟柑橘形心位置的空间三维坐标作为成熟柑橘坐标空间，利用所有图片，获得果园内全部柑橘树上成熟柑橘位置的分布信息；
步骤S1.6、利用每棵树的图片，即可获得果园内全部柑橘树上成熟柑橘的空间三维坐标；
步骤S1.7、由于风力干扰，果实会摆动，加上测量存在误差，因此多次重复步骤S1.4-1.6，使得获得的信息存在重复和冗余；
将多次定位的坐标予以平均，以平均值作为成熟柑橘位置的空间三维坐标，以提高定位精度；
所述步骤S2，具体包括以下步骤：
步骤S2.1、在上述基础上，使用爬坡能力强的履带底盘，携带与无人机相同的差分卫星定位装置以及双目视觉定位装置，配备采摘机械手的地面采摘系统，在天晴，风速小于1km/h条件下进行采摘；
在采摘前，将步骤S1.7所获得的成熟柑橘空间三维坐标信息导入地面采摘系统中；
步骤S2.2、地面采摘系统沿果树行间间隙中间，顺地面行驶，并停留在某棵柑橘树树干前；
步骤S2.3、由于采摘气象条件下，柑橘随风摆动幅度加上系统误差在0.15m范围内，地面采摘系统驱动采摘机械手运动到某个成熟柑橘空间三维坐标外0.2m范围左右停止；
步骤S2.4、采摘机械手上携带的与无人机相同的双目视觉定位装置，启动双目视觉定位装置，在以给定成熟柑橘位置为中心的±0.25m内搜索，对成熟柑橘进行寻获和确认，并进一步精确定位后，驱动机械手执行自动采摘；
步骤S2.5、重复步骤S2.3-步骤S2.4，直至采完整棵果树上的柑橘；
步骤S2.6、重复步骤S2.2-步骤S2.5，直至完成给定种植区域内全部柑橘树上的成熟柑橘采摘。
CN201810630095.3A 2018-06-19 2018-06-19 一种天地一体化柑橘采摘方法 Expired - Fee Related CN108901366B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810630095.3A CN108901366B (zh) 2018-06-19 2018-06-19 一种天地一体化柑橘采摘方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810630095.3A CN108901366B (zh) 2018-06-19 2018-06-19 一种天地一体化柑橘采摘方法

Publications (2)

Publication Number Publication Date
CN108901366A true CN108901366A (zh) 2018-11-30
CN108901366B CN108901366B (zh) 2021-03-02

Family

ID=64419385

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810630095.3A Expired - Fee Related CN108901366B (zh) 2018-06-19 2018-06-19 一种天地一体化柑橘采摘方法

Country Status (1)

Country Link
CN (1) CN108901366B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110249793A (zh) * 2019-05-09 2019-09-20 江苏大学 一种棚架葡萄收获的机器人末端-深度相机配置方法与伺服控制方法
CN110658540A (zh) * 2019-09-18 2020-01-07 华南农业大学 一种利用无人机低空飞行目标定位技术检验插秧机卫星导航自动作业精准度的方法
CN110806585A (zh) * 2019-10-16 2020-02-18 北京理工华汇智能科技有限公司 一种基于树干聚类跟踪的机器人定位方法及系统
CN111673755A (zh) * 2020-06-24 2020-09-18 西北农林科技大学 一种基于视觉伺服的采摘机器人控制系统及控制方法
CN114049574A (zh) * 2022-01-11 2022-02-15 易旺(北京)企业管理有限公司 茶叶成熟度检测方法、茶叶采摘方法及相关设备

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104535574A (zh) * 2015-01-25 2015-04-22 无锡桑尼安科技有限公司 一种农作物成熟度识别方法
CN104535575A (zh) * 2015-01-25 2015-04-22 无锡桑尼安科技有限公司 基于无人机检测的农作物成熟度识别平台
CN104541775A (zh) * 2015-01-24 2015-04-29 无锡桑尼安科技有限公司 智能化果树采摘系统
CN204346928U (zh) * 2015-01-25 2015-05-20 无锡桑尼安科技有限公司 基于无人机检测的农作物成熟度识别平台
CN104704990A (zh) * 2015-04-08 2015-06-17 吴春光 一种石榴树电子化自动采摘方法
CN105501441A (zh) * 2015-12-16 2016-04-20 无锡同春新能源科技有限公司 一种无人番茄采摘机
CN106339005A (zh) * 2016-09-05 2017-01-18 深圳市双赢伟业科技股份有限公司 农业互联植株管理方法
CN106767717A (zh) * 2016-12-13 2017-05-31 中国科学院合肥物质科学研究院 一种基于无人机的水稻成熟期草谷比采样与检测方法
CN107139182A (zh) * 2017-06-05 2017-09-08 重庆理工大学 一种柑橘采摘机器人系统及其控制方法
CN107966944A (zh) * 2017-11-30 2018-04-27 贵州财经大学 智慧大棚分区控制系统及分区采摘方法
CN108037081A (zh) * 2017-10-20 2018-05-15 中国农业大学 一种酿酒葡萄成熟度监测方法和系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104541775A (zh) * 2015-01-24 2015-04-29 无锡桑尼安科技有限公司 智能化果树采摘系统
CN104535574A (zh) * 2015-01-25 2015-04-22 无锡桑尼安科技有限公司 一种农作物成熟度识别方法
CN104535575A (zh) * 2015-01-25 2015-04-22 无锡桑尼安科技有限公司 基于无人机检测的农作物成熟度识别平台
CN204346928U (zh) * 2015-01-25 2015-05-20 无锡桑尼安科技有限公司 基于无人机检测的农作物成熟度识别平台
CN104704990A (zh) * 2015-04-08 2015-06-17 吴春光 一种石榴树电子化自动采摘方法
CN105501441A (zh) * 2015-12-16 2016-04-20 无锡同春新能源科技有限公司 一种无人番茄采摘机
CN106339005A (zh) * 2016-09-05 2017-01-18 深圳市双赢伟业科技股份有限公司 农业互联植株管理方法
CN106767717A (zh) * 2016-12-13 2017-05-31 中国科学院合肥物质科学研究院 一种基于无人机的水稻成熟期草谷比采样与检测方法
CN107139182A (zh) * 2017-06-05 2017-09-08 重庆理工大学 一种柑橘采摘机器人系统及其控制方法
CN108037081A (zh) * 2017-10-20 2018-05-15 中国农业大学 一种酿酒葡萄成熟度监测方法和系统
CN107966944A (zh) * 2017-11-30 2018-04-27 贵州财经大学 智慧大棚分区控制系统及分区采摘方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110249793A (zh) * 2019-05-09 2019-09-20 江苏大学 一种棚架葡萄收获的机器人末端-深度相机配置方法与伺服控制方法
CN110249793B (zh) * 2019-05-09 2021-06-18 江苏大学 一种棚架葡萄收获的机器人末端-深度相机配置方法与伺服控制方法
CN110658540A (zh) * 2019-09-18 2020-01-07 华南农业大学 一种利用无人机低空飞行目标定位技术检验插秧机卫星导航自动作业精准度的方法
CN110806585A (zh) * 2019-10-16 2020-02-18 北京理工华汇智能科技有限公司 一种基于树干聚类跟踪的机器人定位方法及系统
CN110806585B (zh) * 2019-10-16 2021-10-19 北京理工华汇智能科技有限公司 一种基于树干聚类跟踪的机器人定位方法及系统
CN111673755A (zh) * 2020-06-24 2020-09-18 西北农林科技大学 一种基于视觉伺服的采摘机器人控制系统及控制方法
CN111673755B (zh) * 2020-06-24 2023-02-03 西北农林科技大学 一种基于视觉伺服的采摘机器人控制系统及控制方法
CN114049574A (zh) * 2022-01-11 2022-02-15 易旺(北京)企业管理有限公司 茶叶成熟度检测方法、茶叶采摘方法及相关设备

Also Published As

Publication number Publication date
CN108901366B (zh) 2021-03-02

Similar Documents

Publication Publication Date Title
CN108901366A (zh) 一种天地一体化柑橘采摘方法
AU2019276115B2 (en) Target Region Operation Planning Method and Apparatus, Storage Medium, and Processor
ES2964947T3 (es) Sistema y método para la gestión de una flota de drones para la cosecha y el clareo
CN108205326B (zh) 无人机作业的方法及装置
EP2772814B1 (en) Tree metrology system
CN105487554B (zh) 一种多旋翼无人机自动返航路径规划算法
CN110223386A (zh) 一种基于多源无人机遥感数据融合的数字地形建模方法
WO2021051278A1 (zh) 地表特征识别方法、设备、无人机及计算机可读存储介质
CN106643529A (zh) 基于无人机影像的山区农作物生长高度快速测量的方法
CN111090283B (zh) 一种无人艇组合定位定向方法和系统
CN109683629A (zh) 基于组合导航和计算机视觉的无人机电力架线系统
CN111982097A (zh) 无人作业设备的目标航线的生成方法及装置、植保系统
CN106871902A (zh) 一种无人机导航的方法、装置以及系统
CN112823322A (zh) 航线规划方法、设备及存储介质
Anthony et al. UAV localization in row crops
CN109827503A (zh) 一种田间作物精准定位方法和装置
CN205176663U (zh) 一种基于机器视觉的无人机电力线定位着降系统
Conejero et al. Collaborative smart-robot for yield mapping and harvesting assistance
WO2019237412A1 (zh) 一种用于自动操控的无人机植保监控系统及方法
US20230368312A1 (en) Method for automated weed control of agricultural land and associated stand-alone system
Zhu et al. Research on cross-ridge mobile robot combining autonomous navigation and computer vision for transplantation of seedlings
Mai et al. A Positioning Method for Apple Fruits Based on Information Fusion

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210302