CN113966514A - 用于农业无人飞行器仿地作业的方法和农业无人飞行器 - Google Patents
用于农业无人飞行器仿地作业的方法和农业无人飞行器 Download PDFInfo
- Publication number
- CN113966514A CN113966514A CN202080030164.2A CN202080030164A CN113966514A CN 113966514 A CN113966514 A CN 113966514A CN 202080030164 A CN202080030164 A CN 202080030164A CN 113966514 A CN113966514 A CN 113966514A
- Authority
- CN
- China
- Prior art keywords
- unmanned aerial
- aerial vehicle
- agricultural unmanned
- point cloud
- canopy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000006870 function Effects 0.000 claims description 8
- 238000007781 pre-processing Methods 0.000 claims description 7
- 238000012706 support-vector machine Methods 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 4
- 230000000877 morphologic effect Effects 0.000 claims description 4
- 238000009313 farming Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 13
- 235000013399 edible fruits Nutrition 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000008030 elimination Effects 0.000 description 2
- 238000003379 elimination reaction Methods 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/02—Agriculture; Fishing; Forestry; Mining
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Economics (AREA)
- Strategic Management (AREA)
- Databases & Information Systems (AREA)
- General Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Marketing (AREA)
- Entrepreneurship & Innovation (AREA)
- Agronomy & Crop Science (AREA)
- Development Economics (AREA)
- General Engineering & Computer Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Remote Sensing (AREA)
- Life Sciences & Earth Sciences (AREA)
- Game Theory and Decision Science (AREA)
- Animal Husbandry (AREA)
- Marine Sciences & Fisheries (AREA)
- Mining & Mineral Resources (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Navigation (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
一种用于农业无人飞行器仿地作业的方法，包括：获取农业无人飞行器飞行方向上待作业区域的实时点云数据；对实时点云数据进行拟合，以得到待作业区域的植被的冠层包络；基于冠层包络对待作业区域进行地形预测，并基于地形预测的结果控制农业无人飞行器进行仿地作业。该方法对周围环境实时探测，智能感知植被及地形高低落差变化，保障农业无人飞行器在植被冠层灵敏仿地作业，且遇到空地和空当不会随意下降，从而提高作业安全性及作业效率。还包括一种农业无人飞行器和一种计算机可读存储介质。
Description
技术领域
本申请涉及农业无人飞行器技术领域，更具体地涉及一种用于农业无人飞行器仿地作业的方法和农业无人飞行器。
背景技术
现有农业无人飞行器在果树场景作业时大多需要测绘机预先对作业场景进行测绘，然后生成作业地图，导入农业无人飞行器中进行。该技术方案的缺点在于：需要另外购置测绘机，成本高；另外，农业无人飞行器作业前，需要对作业场景进行测绘，耗时多。
现有农业无人飞行器也有基于机器视觉对作业场景实时感知，实现在果树场景下的自主仿地作业。该技术方案的缺点在于：机器视觉易受环境影响，特别是农业无人飞行器作业环境的药液、尘雾等。
现有农业无人飞行器也有基于平板雷达的仿地作业方案。该方案的缺点在于，雷达实时感知飞机正下方的地面相对飞机的高度，这就将导致遇到空地和大的空当，会盲目仿地下降。
发明内容
本申请提供一种用于农业无人飞行器仿地作业的方法和农业无人飞行器，可以保障农业无人飞行器在植被冠层灵敏仿地作业，提高了作业安全性及作业效率。
第一方面，本申请实施例提供了一种用于农业无人飞行器仿地作业的方法，所述方法包括：获取农业无人飞行器飞行方向上待作业区域的实时点云数据；对所述实时点云数据进行拟合，以得到所述待作业区域的植被的冠层包络；基于所述冠层包络对所述待作业区域进行地形预测，并基于所述地形预测的结果控制所述农业无人飞行器进行仿地作业。
第二方面，本申请实施例提供了一种农业无人飞行器，所述农业无人飞行器包括处理器和存储器，所述存储器用于存储指令，所述处理器调用所述存储器存储的指令用于执行以下操作：获取农业无人飞行器飞行方向上待作业区域的实时点云数据；对所述实时点云数据进行拟合，以得到所述待作业区域的植被的冠层包络；基于所述冠层包络对所述待作业区域进行地形预测，并基于所述地形预测的结果控制所述农业无人飞行器进行仿地作业。
第三方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质包括指令，当其在计算机上运行时，使得所述计算机执行上述用于农业无人飞行器仿地作业的方法。
根据本申请实施例的用于农业无人飞行器仿地作业的方法和农业无人飞行器对周围环境实时探测，智能感知植被及地形高低落差变化，保障农业无人飞行器在植被冠层灵敏仿地作业，且遇到空地和空当不会随意下降，从而提高作业安全性及作业效率。
附图说明
图1示出现有农业无人飞行器仿地作业的一个示例的示意图。
图2示出现有农业无人飞行器仿地作业的另一个示例的示意图。
图3示出根据本申请实施例的用于农业无人飞行器仿地作业的方法的示意性流程图。
图4示出根据本申请实施例的用于农业无人飞行器仿地作业的方法中杂点剔除的示例性示意图。
图5示出根据本申请实施例的用于农业无人飞行器仿地作业的方法中杂点剔除之后的示例性效果图。
图6示出根据本申请实施例的用于农业无人飞行器仿地作业的方法中冠层包络拟合的示例性示意图。
图7示出根据本申请实施例的农业无人飞行器的示意性框图。
具体实施方式
下面将参照附图详细描述根据本申请的示例实施例。
应当理解的是，本申请能够以不同形式实施，而不应当解释为局限于这里提出的实施例。相反地，提供这些实施例将使公开彻底和完全，并且将本申请的范围完全地传递给本领域技术人员。
在此使用的术语的目的仅在于描述具体实施例并且不作为本申请的限制。在此使用时，单数形式的“一”、“一个”和“所述/该”也意图包括复数形式，除非上下文清楚指出另外的方式。还应明白术语“组成”和/或“包括”，当在该说明书中使用时，确定所述特征、整数、步骤、操作、元件和/或部件的存在，但不排除一个或更多其它的特征、整数、步骤、操作、元件、部件和/或组的存在或添加。在此使用时，术语“和/或”包括相关所列项目的任何及所有组合。
现有农业无人飞行器在果树场景作业时存在一些问题，例如，对于采用测绘机预先生成作业地图的方案，不仅成本高，还耗时多；对于实时感知作业场景的方案，存在地形跟随效果差、飞行安全风险高的问题。
图1示出了现有农业无人飞行器仿地作业的一个示例的示意图。如图1所示，该农业无人飞行器基于平板雷达进行仿地作业。平板雷达实时感知农业无人飞行器飞行正下方的对象相对于农业无人飞行器的高度，而飞行正下方的对象可能是植被(例如果树)冠层，也可能是非植被冠层，诸如空地或空当；当平板雷达实时感知到植被冠层相对于农业无人飞行器的高度时，尚可以在此基础上在冠层上方一定距离处安全飞行和作业；但当平板雷达实时感知到空当和空地相对于农业无人飞行器的高度时，会仍然按照原有安全高度距离标准在空当和空地上方一定距离处飞行，这导致农业无人飞行器盲目仿地下降，可能导致飞行安全问题，并影响作业效率。
图2示出了现有农业无人飞行器仿地作业的一个示例的示意图。如图2所示，该农业无人飞行器基于旋转雷达进行仿地作业。旋转雷达实时感知农业无人飞行器飞行下方的对象相对于农业无人飞行器的角度(如图2中所示的θ)和距离(如图2中所示的L)。与图1所示类似的，旋转雷达感知到空当和空地相对于农业无人飞行器的距离时，会仍然按照原有安全高度距离标准在空当和空地上方一定距离处飞行，这导致农业无人飞行器盲目仿地下降，可能导致飞行安全问题，并影响作业效率。
针对上述问题，本申请提供了一种用于农业无人飞行器仿地作业的方案。下面结合图3到图7进行详细描述。
图3示出了根据本申请实施例的用于农业无人飞行器仿地作业的方法300的示意性流程图。如图3所示，根据本申请实施例的用于农业无人飞行器仿地作业的方法300可以包括：
S310，获取农业无人飞行器飞行方向上待作业区域的实时点云数据。
S320，对所述实时点云数据进行拟合，以得到所述待作业区域的植被的冠层包络。
S330，基于所述冠层包络对所述待作业区域进行地形预测，并基于所述地形预测的结果控制所述农业无人飞行器进行仿地作业。
在本申请的实施例中，基于对农业无人飞行器(诸如植保机)飞行方向上待作业区域实时采集的点云数据拟合生成待作业区域的植被(诸如果树)的冠层包络，其中该冠层包络是模拟植被顶层高度变化情况的曲线或曲面，其反映了植被顶层相对于农业无人飞行器的水平距离与相对于农业无人飞行器的垂直距离之间的关系。在本申请的实施例中，基于所得冠层包络进行地形预测以控制农业无人飞行器仿地作业，这使得农业无人飞行器的飞行控制和仿地作业均在植被的冠层上方进行，不会出现在遇到植被之间的空当或空地时盲目仿地下降，从而保证农业无人飞行器在植被冠层灵敏仿地作业，提高仿地灵敏度，提高作业安全性和作业效率。
在本申请的实施例中，可以基于安装在农业无人飞行器上的传感器来针对农业无人飞行器飞行方向上的待作业区域采集实时点云数据。示例性地，安装在农业无人飞行器上的传感器可以包括旋转毫米波雷达、平板雷达、视觉传感器等等。基于传感器采集的农业无人飞行器飞行方向上的待作业区域的实时点云数据，可计算待作业区域的植被的冠层包络。
在本申请的实施例中，针对获取的农业无人飞行器飞行方向上的待作业区域的实时点云数据，可先对其进行预处理，再对预处理后的实时点云数据进行拟合而生成待作业区域的植被的冠层包络，以提高拟合结果的准确度。
示例性地，对所获取的实时点云数据所进行的预处理可以包括坐标系转换。例如，可以将所获取的实时点云数据从传感器坐标系(例如，如图2所示的雷达坐标系，即极坐标系)转换为笛卡尔坐标系，得到坐标转换后的数据，所述坐标转换后的数据中每个点云点的坐标指示所述点云点相对于所述农业无人飞行器的水平距离和垂直距离。在该示例中，坐标转换可以通过如下公式来完成：
Xi＝L×sin(θ)
Yi＝L×cos(θ)
在上式中，Xi和Yi表示坐标转换后的点云数据，其中，Xi表示反射目标相对于传感器载体(农业无人飞行器)的水平距离，Yi表示反射目标相对于传感器载体(农业无人飞行器)的垂直距离；L和θ表示坐标转换前的点云数据，其中，L表示反射目标相对于传感器的径向距离，θ表示反射目标相对于传感器的方位角。对所获取的实时点云数据进行坐标转换可以获得直接反映反射目标相对于农业无人飞行器的水平和垂直距离，在此基础上拟合得到的冠层包络更易于对待作业区域中感兴趣位置进行高度预测和/或坡度预测，从而易于实现对农业无人飞行器仿地飞行作业的灵敏控制。
在本申请的实施例中，还可以对所获取的实时点云数据进行杂点剔除，以剔除误差数据(例如植被区域中存在的电线杆反射得到的点云数据之类的影响植被冠层包络拟合精准度的数据等等)，之后再对杂点剔除后的实时点云数据进行拟合而生成待作业区域的植被的冠层包络，以提高拟合结果的准确度。优选地，可以对前述坐标转换后的数据进行杂点剔除，得到用于进行拟合的有效数据。
在本申请的实施例中，可以基于类似形态学滤波的方式或其他合适的方式进行杂点剔除。在一个示例中，杂点剔除可以包括将坐标转换后的数据中的每个点云点作为待检测点执行以下操作：获取在水平方向上距离所述待检测点最近的预定数目的点云点；计算所述预定数目的点云点相对于农业无人飞行器的垂直距离的均值或中值以作为参考值；计算待检测点相对于农业无人飞行器的垂直距离与所述参考值之间的差值；当所述差值大于或等于预定阈值时，将所述待检测点作为杂点剔除；当所述差值小于所述预定阈值时，将所述待检测点作为有效点保留。其中，在水平方向上距离所述待检测点最近的预定数目的点云点可以包括：在水平方向上在所述待检测点一侧的预定数目的点云点(一般可以适用于待检测点另一侧没有点云点，或者另一侧点云点数目没有达到预定数目的场景)；或者在水平方向上在所述待检测点两侧的点云点，每侧的点云点的数目为所述预定数目的一半。下面结合图4来描述。
图4示出根据本申请实施例的用于农业无人飞行器仿地作业的方法中杂点剔除的示例性示意图。如图4所示，坐标系中的每个点即为一个点云点，对于当前待检测点P1，获取在水平方向上距离P1最近的四个(示例)点(如图4所示的邻近点)，则可以计算这四个点相对于农业无人飞行器的垂直距离(即这四个点的纵坐标)的均值或中值以作为参考值，接着计算当前待检测点P1相对于农业无人飞行器的垂直距离(即P1的纵坐标)与参考值的差值，如果差值较大(大于或等于某阈值)，则认为当前待检测点P1为杂点予以剔除，反之如果差值较大(小于某阈值)，则认为当前待检测点P1为有效点予以保留。
在图4所示的示例中，很明显，可以看出当前检测点P1相对于其四个邻近点相比，纵坐标之间的差值较大，即该点应该是作为杂点被剔除，而诸如P2、P3这样的待检测点与其水平方向上邻近点相比，明显它们的纵坐标之间的差值较小，因为它们与周围点的同是属于植被冠层上的点，这样的点会被保留下来，用于精确地计算植被的冠层包络。杂点剔除之后，可以得到植被冠层的反射点，如图5示出的杂点剔除之后的示例性效果图所示的。
经过了前述处理，所得到的点云数据用于进行植被冠层包络的拟合。在本申请的实施例中，可以基于以下拟合方式中的任一种来进行植被冠层包络的拟合：基于线性插值的拟合、多项式拟合、基于高斯回归的拟合、基于b样条曲线(BSPLINE)的拟合、基于支持向量机(SVM)的拟合。下面以线性插值为例来描述，线性插值过程可以如下式所示的：
...
在上面的式子中，(x0,y0)、(x1,y1)、(x2,y2)、……、(xn-1,yn-1)、(xn,yn)是指实际采集的点云数据(诸如经过前述坐标转换和杂点剔除后的数据)，是通过插值得到的点，每个插值的点可以根据两个采集点计算得到。例如，基于(x0,y0)和(x1,y1)计算(x0,y0)和(x1,y1)之间的插值点的坐标，基于(x1,y1)和(x2,y2)计算(x1,y1)和(x2,y2)之间的插值点的坐标，诸如此类等等。插值后得到更多的点，然后输入一个预设模型，比如多项式，再把所有点代入预设模型得到方程组，即可以计算多项式的系数，最终得到的即为表示植被的冠层包络的方程。相对于之前实时采集的离散点云数据，得到的冠层包络是连续数据，如图6示出的冠层包络拟合的示例性示意图所示的。
应理解，采用线性插值进行拟合的方式仅是示例性的，还可以采用其他合适的方式进行拟合。相对来说，线性插值的拟合方式计算简单、计算量小，拟合精度受原始点云点的分布情况影响；还可以通过其他诸如多项式拟合、BSPLINE、高斯回归、SVM等方法进行拟合，以提高拟合精度。
在本申请的实施例中，在得到植被的冠层包络后，可以基于所述冠层包络对待作业区域进行地形预测，并基于地形预测的结果控制农业无人飞行器进行仿地作业。在本申请的实施例中，基于所述冠层包络对待作业区域进行地形预测，可以包括：基于所述冠层包络获取待作业区域中感兴趣位置的高度预测结果和/或坡度预测结果。基于所得到的冠层包络，可以预测农业无人飞行器飞行方向上待作业区域的高度情况和/或高度变化情况(坡度情况)，以基于其调整农业无人飞行器在垂直方向上的速度，在确保飞行安全的情况下实现更为灵敏的仿地作业。
在本申请的实施例中，基于所述冠层包络获取所述待作业区域中感兴趣位置的高度预测结果，可以包括：获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；将所述水平距离代入所述冠层包络得到所述感兴趣位置的高度预测结果。如前所述，所得到的植被的冠层包络是连续数据，因此将任一位置距离农业无人飞行器的水平距离代入冠层包络，即可得到该位置相对于农业无人飞行器的垂直距离(高度情况)。
在本申请的实施例中，基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，可以包括：获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；计算所述冠层包络在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。由于已经得到农业无人飞行器飞行方向上待作业区域的植被的冠层包络，因此要想获得该待作业区域某位置处的坡度，对冠层包络求导即可。例如，该位置处相对于农业无人飞行器的水平距离表示为xi,则计算冠层包络在xi处的导数即可得到该位置处的坡度预测结果。
在本申请的另一个实施例中，基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，可以包括：获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；获取在水平方向上距离所述感兴趣位置最近的预定数目的点云点；对所述预定数目的点云点进行拟合得到拟合函数；计算所述拟合函数在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。例如，某位置处相对于农业无人飞行器的水平距离表示为xi，可以获取该位置处附近区域的点相对于农业无人飞行器的水平距离，于是得到多个采样点相对于农业无人飞行器的水平距离的集合{xi-n,...,xi-1,xi,xi+1,...,xi+n}，将该集合代入冠层包络，得到各采样点相对于农业无人飞行器的垂直距离的集合{yi-n,...,yi-1,yi,yi+1,...,yi+n}，基于这两个集合进行拟合，得到新的拟合方程，求该新的拟合方程在xi处的导数，即得到该位置处的坡度预测结果。在该实施例中，基于已得冠层包络获取感兴趣位置附近区域多个位置相对于农业无人飞行器的垂直距离，再根据该区域内这些位置处相对于农业无人飞行器的水平距离和垂直距离重新拟合此区域更为精确的冠层包络，然后再求导，可以得到感兴趣位置处更为准确的坡度预测结果。
以上是感兴趣位置处于农业无人飞行器的传感器的观测范围之内的情况，在该情况下主要基于感兴趣位置的邻近点的高度内推得到感兴趣位置的高度/坡度预测结果。当感兴趣位置处于农业无人飞行器的传感器的观测范围之外时，可以使用一定的算法进行外推而得到感兴趣位置的高度/坡度预测结果。总之，根据所获得的感兴趣位置的高度预测结果和/或坡度预测结果，可以调整农业无人飞行器在垂直方向上的速度，在确保飞行安全的情况下实现更为灵敏的仿地作业。
基于上面的描述，根据本申请实施例的用于农业无人飞行器仿地作业的方法和农业无人飞行器对周围环境实时探测，智能感知植被及地形高低落差变化，保障农业无人飞行器在植被冠层灵敏仿地作业，且遇到空地和空当不会随意下降，从而提高作业安全性及作业效率。此外，由于无需事先使用测绘机对作业环境进行测绘，还降低了成本。
以上示例性地描述了根据本申请实施例的用于农业无人飞行器仿地作业的方法。下面结合图7描述根据本申请另一方面提供的农业无人飞行器。
图7示出根据本申请实施例的农业无人飞行器700的示意性框图。如图7所示，农业无人飞行器700包括存储器710以及处理器720。其中，存储器710存储用于实现根据本申请实施例的用于农业无人飞行器仿地作业的方法中的相应步骤的程序指令。处理器720用于运行存储器710中存储的程序，以执行根据本申请实施例的用于农业无人飞行器仿地作业的方法的相应步骤。本领域技术人员可以结合前文描述理解处理器720执行的操作，为了简洁，此处仅描述一些主要操作，具体细节不再赘述。
在本申请的实施例中，处理器720调用存储器710存储的指令用于执行以下操作：获取农业无人飞行器700飞行方向上待作业区域的实时点云数据；对所述实时点云数据进行拟合，以得到所述待作业区域的植被的冠层包络；基于所述冠层包络对所述待作业区域进行地形预测，并基于所述地形预测的结果控制农业无人飞行器700进行仿地作业。
在本申请的实施例中，处理器720还执行以下操作：在获取所述实时点云数据之后，对所述实时点云数据进行预处理得到预处理后的数据，并且所述拟合是基于所述预处理后的数据进行的。
在本申请的实施例中，处理器720执行的所述预处理包括将所述实时点云数据从传感器坐标系转换为笛卡尔坐标系，得到坐标转换后的数据，所述坐标转换后的数据中每个点云点的坐标指示所述点云点相对于农业无人飞行器700的水平距离和垂直距离。
在本申请的实施例中，处理器720执行的所述预处理还包括对所述坐标转换后的数据进行杂点剔除，得到用于进行所述拟合的有效数据。
在本申请的实施例中，处理器720执行的所述杂点剔除是基于形态学滤波的方式进行的。
在本申请的实施例中，处理器720执行的所述杂点剔除包括将所述坐标转换后的数据中的每个点云点作为待检测点执行以下操作：获取在水平方向上距离所述待检测点最近的预定数目的点云点；计算所述预定数目的点云点相对于农业无人飞行器700的垂直距离的均值或中值以作为参考值；计算所述待检测点相对于农业无人飞行器700的垂直距离与所述参考值之间的差值；当所述差值大于或等于预定阈值时，将所述待检测点作为杂点剔除；当所述差值小于所述预定阈值时，将所述待检测点作为有效点保留。
在本申请的实施例中，所述在水平方向上距离所述待检测点最近的预定数目的点云点包括：在水平方向上在所述待检测点一侧的预定数目的点云点；或者在水平方向上在所述待检测点两侧的点云点，每侧的点云点的数目为所述预定数目的一半。
在本申请的实施例中，所述拟合包括以下方式中的任一种：基于线性插值的拟合、多项式拟合、基于高斯回归的拟合、基于b样条曲线的拟合、基于支持向量机的拟合。
在本申请的实施例中，处理器720执行的所述基于所述冠层包络对所述待作业区域进行地形预测，包括：基于所述冠层包络获取所述待作业区域中感兴趣位置的高度预测结果和/或坡度预测结果。
在本申请的实施例中，处理器720执行的所述基于所述冠层包络获取所述待作业区域中感兴趣位置的高度预测结果，包括：获取所述感兴趣位置相对于农业无人飞行器700的水平距离；将所述水平距离代入所述冠层包络得到所述感兴趣位置的高度预测结果。
在本申请的实施例中，处理器720执行的所述基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，包括：获取所述感兴趣位置相对于农业无人飞行器700的水平距离；计算所述冠层包络在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。
在本申请的实施例中，处理器720执行的所述基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，包括：获取所述感兴趣位置相对于农业无人飞行器700的水平距离；获取在水平方向上距离所述感兴趣位置最近的预定数目的点云点；对所述预定数目的点云点进行拟合得到拟合函数；计算所述拟合函数在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。
在本申请的实施例中，农业无人飞行器700还可以包括传感器(未示出)，用于针对农业无人飞行器700飞行方向上待作业区域实时采集点云数据。此外，农业无人飞行器700还可以包括动力装置(未示出)，用于基于处理器720发出的指令控制农业无人飞行器700的仿地飞行。此外，农业无人飞行器700还可以包括作业装置(未示出)，用于基于处理器720发出的指令执行植保作业。
此外，根据本申请实施例，还提供了一种计算机可读存储介质，在所述计算机可读存储介质上存储了程序指令，在所述程序指令被计算机或处理器运行时用于执行本申请实施例的用于农业无人飞行器仿地作业的方法的相应步骤。所述计算机可读存储介质例如可以包括智能电话的存储卡、平板电脑的存储部件、个人计算机的硬盘、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器、或者上述计算机可读存储介质的任意组合。所述计算机可读存储介质可以是一个或多个计算机可读存储介质的任意组合。
基于上面的描述，根据本申请实施例的用于农业无人飞行器仿地作业的方法和农业无人飞行器对周围环境实时探测，智能感知植被及地形高低落差变化，保障农业无人飞行器在植被冠层灵敏仿地作业，且遇到空地和空当不会随意下降，从而提高作业安全性及作业效率。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。例如，以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个设备，或一些特征可以忽略，或不执行。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本申请的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本申请并帮助理解各个发明方面中的一个或多个，在对本申请的示例性实施例的描述中，本申请的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该本申请的方法解释成反映如下意图：即所要求保护的本申请要求比在权利要求中所明确记载的特征更多的特征。更确切地说，如相应的权利要求书所反映的那样，其发明点在于可以用少于某个公开的单个实施例的所有特征的特征来解决相应的技术问题。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中权利要求本身都作为本申请的单独实施例。
本领域的技术人员可以理解，除了特征之间相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本申请的范围之内并且形成不同的实施例。例如，在权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本申请的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本申请实施例的一些模块的一些或者全部功能。本申请还可以实现为用于执行这里所描述的方法的一部分或者全部的装置程序(例如，计算机程序和计算机程序产品)。这样的实现本申请的程序可以存储在计算机可读存储介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
应该注意的是上述实施例对本申请进行说明而不是对本申请进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。本申请可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
以上所述，仅为本申请的具体实施方式或对具体实施方式的说明，本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。本申请的保护范围应以权利要求的保护范围为准。
Claims (25)
1.一种用于农业无人飞行器仿地作业的方法，其特征在于，所述方法包括：
获取农业无人飞行器飞行方向上待作业区域的实时点云数据；
对所述实时点云数据进行拟合，以得到所述待作业区域的植被的冠层包络；
基于所述冠层包络对所述待作业区域进行地形预测，并基于所述地形预测的结果控制所述农业无人飞行器进行仿地作业。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在获取所述实时点云数据之后，对所述实时点云数据进行预处理得到预处理后的数据，并且所述拟合是基于所述预处理后的数据进行的。
3.根据权利要求2所述的方法，其特征在于，所述预处理包括将所述实时点云数据从传感器坐标系转换为笛卡尔坐标系，得到坐标转换后的数据，所述坐标转换后的数据中每个点云点的坐标指示所述点云点相对于所述农业无人飞行器的水平距离和垂直距离。
4.根据权利要求3所述的方法，其特征在于，所述预处理还包括对所述坐标转换后的数据进行杂点剔除，得到用于进行所述拟合的有效数据。
5.根据权利要求4所述的方法，其特征在于，所述杂点剔除是基于形态学滤波的方式进行的。
6.根据权利要求4所述的方法，其特征在于，所述杂点剔除包括将所述坐标转换后的数据中的每个点云点作为待检测点执行以下操作：
获取在水平方向上距离所述待检测点最近的预定数目的点云点；
计算所述预定数目的点云点相对于所述农业无人飞行器的垂直距离的均值或中值以作为参考值；
计算所述待检测点相对于所述农业无人飞行器的垂直距离与所述参考值之间的差值；
当所述差值大于或等于预定阈值时，将所述待检测点作为杂点剔除；
当所述差值小于所述预定阈值时，将所述待检测点作为有效点保留。
7.根据权利要求6所述的方法，其特征在于，所述在水平方向上距离所述待检测点最近的预定数目的点云点包括：
在水平方向上在所述待检测点一侧的预定数目的点云点；或者
在水平方向上在所述待检测点两侧的点云点，每侧的点云点的数目为所述预定数目的一半。
8.根据权利要求1-7中的任一项所述的方法，其特征在于，所述拟合包括以下方式中的任一种：基于线性插值的拟合、多项式拟合、基于高斯回归的拟合、基于b样条曲线的拟合、基于支持向量机的拟合。
9.根据权利要求1-7中的任一项所述的方法，其特征在于，所述基于所述冠层包络对所述待作业区域进行地形预测，包括：
基于所述冠层包络获取所述待作业区域中感兴趣位置的高度预测结果和/或坡度预测结果。
10.根据权利要求9所述的方法，其特征在于，所述基于所述冠层包络获取所述待作业区域中感兴趣位置的高度预测结果，包括：
获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；
将所述水平距离代入所述冠层包络得到所述感兴趣位置的高度预测结果。
11.根据权利要求9所述的方法，其特征在于，所述基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，包括：
获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；
计算所述冠层包络在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。
12.根据权利要求9所述的方法，其特征在于，所述基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，包括：
获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；
获取在水平方向上距离所述感兴趣位置最近的预定数目的点云点；
对所述预定数目的点云点进行拟合得到拟合函数；
计算所述拟合函数在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。
13.一种农业无人飞行器，其特征在于，所述农业无人飞行器包括处理器和存储器，所述存储器用于存储指令，所述处理器调用所述存储器存储的指令用于执行以下操作：
获取农业无人飞行器飞行方向上待作业区域的实时点云数据；
对所述实时点云数据进行拟合，以得到所述待作业区域的植被的冠层包络；
基于所述冠层包络对所述待作业区域进行地形预测，并基于所述地形预测的结果控制所述农业无人飞行器进行仿地作业。
14.根据权利要求13所述的农业无人飞行器，其特征在于，所述处理器还执行以下操作：
在获取所述实时点云数据之后，对所述实时点云数据进行预处理得到预处理后的数据，并且所述拟合是基于所述预处理后的数据进行的。
15.根据权利要求14所述的农业无人飞行器，其特征在于，所述处理器执行的所述预处理包括将所述实时点云数据从传感器坐标系转换为笛卡尔坐标系，得到坐标转换后的数据，所述坐标转换后的数据中每个点云点的坐标指示所述点云点相对于所述农业无人飞行器的水平距离和垂直距离。
16.根据权利要求15所述的农业无人飞行器，其特征在于，所述处理器执行的所述预处理还包括对所述坐标转换后的数据进行杂点剔除，得到用于进行所述拟合的有效数据。
17.根据权利要求16所述的农业无人飞行器，其特征在于，所述处理器执行的所述杂点剔除是基于形态学滤波的方式进行的。
18.根据权利要求16所述的农业无人飞行器，其特征在于，所述处理器执行的所述杂点剔除包括将所述坐标转换后的数据中的每个点云点作为待检测点执行以下操作：
获取在水平方向上距离所述待检测点最近的预定数目的点云点；
计算所述预定数目的点云点相对于所述农业无人飞行器的垂直距离的均值或中值以作为参考值；
计算所述待检测点相对于所述农业无人飞行器的垂直距离与所述参考值之间的差值；
当所述差值大于或等于预定阈值时，将所述待检测点作为杂点剔除；
当所述差值小于所述预定阈值时，将所述待检测点作为有效点保留。
19.根据权利要求18所述的农业无人飞行器，其特征在于，所述在水平方向上距离所述待检测点最近的预定数目的点云点包括：
在水平方向上在所述待检测点一侧的预定数目的点云点；或者
在水平方向上在所述待检测点两侧的点云点，每侧的点云点的数目为所述预定数目的一半。
20.根据权利要求13-19中的任一项所述的农业无人飞行器，其特征在于，所述拟合包括以下方式中的任一种：基于线性插值的拟合、多项式拟合、基于高斯回归的拟合、基于b样条曲线的拟合、基于支持向量机的拟合。
21.根据权利要求13-19中的任一项所述的农业无人飞行器，其特征在于，所述处理器执行的所述基于所述冠层包络对所述待作业区域进行地形预测，包括：
基于所述冠层包络获取所述待作业区域中感兴趣位置的高度预测结果和/或坡度预测结果。
22.根据权利要求21所述的农业无人飞行器，其特征在于，所述处理器执行的所述基于所述冠层包络获取所述待作业区域中感兴趣位置的高度预测结果，包括：
获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；
将所述水平距离代入所述冠层包络得到所述感兴趣位置的高度预测结果。
23.根据权利要求21所述的农业无人飞行器，其特征在于，所述处理器执行的所述基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，包括：
获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；
计算所述冠层包络在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。
24.根据权利要求21所述的农业无人飞行器，其特征在于，所述处理器执行的所述基于所述冠层包络获取所述待作业区域中感兴趣位置的坡度预测结果，包括：
获取所述感兴趣位置相对于所述农业无人飞行器的水平距离；
获取在水平方向上距离所述感兴趣位置最近的预定数目的点云点；
对所述预定数目的点云点进行拟合得到拟合函数；
计算所述拟合函数在所述水平距离处的导数，得到所述感兴趣位置的坡度预测结果。
25.一种计算机可读存储介质，其特征在于，包括指令，当其在计算机上运行时，使得所述计算机执行如权利要求1-12中的任一项所述的用于农业无人飞行器仿地作业的方法。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2020/124082 WO2022087841A1 (zh) | 2020-10-27 | 2020-10-27 | 用于农业无人飞行器仿地作业的方法和农业无人飞行器 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113966514A true CN113966514A (zh) | 2022-01-21 |
Family
ID=79460360
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202080030164.2A Pending CN113966514A (zh) | 2020-10-27 | 2020-10-27 | 用于农业无人飞行器仿地作业的方法和农业无人飞行器 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN113966514A (zh) |
| WO (1) | WO2022087841A1 (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114868527A (zh) * | 2022-05-16 | 2022-08-09 | 云南省林业和草原科学院 | 基于无人机的深纹核桃果实采收方法 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103885454B (zh) * | 2014-03-07 | 2016-07-13 | 华南农业大学 | 农用飞行器跟随冠层特征参数飞行的作业方法及装置 |
| CA3237917A1 (en) * | 2014-08-22 | 2016-02-25 | Climate Llc | Methods for agronomic and agricultural monitoring using unmanned aerial systems |
| CN106199627B (zh) * | 2016-09-14 | 2018-07-10 | 中国农业科学院农业资源与农业区划研究所 | 一种无人机lidar反演草地植被参数的精度改进方法 |
| US11112802B2 (en) * | 2017-06-22 | 2021-09-07 | 360 Yield Center, Llc | Enhanced automated steering system for a vehicle |
| CN113848973A (zh) * | 2018-10-31 | 2021-12-28 | 深圳市大疆创新科技有限公司 | 控制方法、设备、测绘无人机和喷洒无人机 |
| CN110045748B (zh) * | 2019-04-03 | 2022-05-03 | 深圳高速工程检测有限公司 | 飞行器控制方法、装置、计算机设备和存储介质 |
| CN111506097A (zh) * | 2020-04-30 | 2020-08-07 | 苏州恒井泰信息技术有限公司 | 一种无人机遥感技术在精准农业中的应用系统及方法 |
-
2020
- 2020-10-27 CN CN202080030164.2A patent/CN113966514A/zh active Pending
- 2020-10-27 WO PCT/CN2020/124082 patent/WO2022087841A1/zh active Application Filing
Also Published As
| Publication number | Publication date |
|---|---|
| WO2022087841A1 (zh) | 2022-05-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108152831B (zh) | 一种激光雷达障碍物识别方法及系统 | |
| US11320823B2 (en) | Method of navigating a vehicle and system thereof | |
| US8600589B2 (en) | Point cloud visualization of acceptable helicopter landing zones based on 4D LIDAR | |
| Jakubowski et al. | Delineating individual trees from LiDAR data: A comparison of vector-and raster-based segmentation approaches | |
| Allouis et al. | Stem volume and above-ground biomass estimation of individual pine trees from LiDAR data: Contribution of full-waveform signals | |
| US10139493B1 (en) | Rotor safety system | |
| US20220198749A1 (en) | System and method for monitoring forest gap using lidar survey data | |
| JP5338044B2 (ja) | ３次元形状抽出装置、方法及びプログラム | |
| JP6347064B2 (ja) | レーザー計測結果解析システム | |
| CN110609268A (zh) | 一种激光雷达标定方法、装置、系统及存储介质 | |
| Takahashi et al. | Stand volume estimation by combining low laser-sampling density LiDAR data with QuickBird panchromatic imagery in closed-canopy Japanese cedar (Cryptomeria japonica) plantations | |
| CN110674674A (zh) | 一种基于yolo v3的旋转目标检测方法 | |
| CN108470174A (zh) | 障碍物分割方法及装置、计算机设备及可读介质 | |
| Ronchi et al. | Correlation among earthwork and cropmark anomalies within archaeological landscape investigation by using LiDAR and multispectral technologies from UAV | |
| CN105738909B (zh) | 一种适用于低空植保无人直升机作业边界提取方法 | |
| CN113966514A (zh) | 用于农业无人飞行器仿地作业的方法和农业无人飞行器 | |
| Albadra et al. | Determining the three-dimensional structure of a volcanic plume using Unoccupied Aerial System (UAS) imagery | |
| CN114219770A (zh) | 地面检测方法、装置、电子设备及存储介质 | |
| CN113448340B (zh) | 一种无人机的路径规划方法、装置、无人机及存储介质 | |
| Kapetanović et al. | Autonomous Vehicles Mapping Plitvice Lakes National Park, Croatia | |
| Paleček et al. | Assessment of accuracy in the identification of rock formations from aerial and terrestrial laser-scanning data | |
| CN116679315A (zh) | 作业地形检测方法、装置及用于检测作业地形的工程设备 | |
| Metzler et al. | Low-cost drone system for analyzing elevation | |
| Eysn et al. | Adapting alpha-shapes for forest delineation using ALS Data | |
| KR101181742B1 (ko) | 토지 이용 현황도 갱신 장치 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |