CN114494838A - 一种障碍物识别方法、装置、设备、介质及除草机器人 - Google Patents

一种障碍物识别方法、装置、设备、介质及除草机器人 Download PDF

Info

Publication number
CN114494838A
CN114494838A CN202011240905.8A CN202011240905A CN114494838A CN 114494838 A CN114494838 A CN 114494838A CN 202011240905 A CN202011240905 A CN 202011240905A CN 114494838 A CN114494838 A CN 114494838A
Authority
CN
China
Prior art keywords
information
candidate
obstacle
preset
weeding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011240905.8A
Other languages
English (en)
Inventor
朱绍明
任雪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Cleva Electric Appliance Co Ltd
Suzhou Cleva Precision Machinery and Technology Co Ltd
Original Assignee
Suzhou Cleva Precision Machinery and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Cleva Precision Machinery and Technology Co Ltd filed Critical Suzhou Cleva Precision Machinery and Technology Co Ltd
Priority to CN202011240905.8A priority Critical patent/CN114494838A/zh
Priority to EP20960627.6A priority patent/EP4242909A1/en
Priority to PCT/CN2020/132569 priority patent/WO2022095170A1/zh
Priority to US18/251,942 priority patent/US20240087321A1/en
Publication of CN114494838A publication Critical patent/CN114494838A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01D—HARVESTING; MOWING
    • A01D34/00—Mowers; Mowing apparatus of harvesters
    • A01D34/006—Control or measuring arrangements
    • A01D34/008—Control or measuring arrangements for automated or remotely controlled operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/155—Segmentation; Edge detection involving morphological operators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01B—SOIL WORKING IN AGRICULTURE OR FORESTRY; PARTS, DETAILS, OR ACCESSORIES OF AGRICULTURAL MACHINES OR IMPLEMENTS, IN GENERAL
    • A01B39/00—Other machines specially adapted for working soil on which crops are growing
    • A01B39/12—Other machines specially adapted for working soil on which crops are growing for special purposes, e.g. for special culture
    • A01B39/18—Other machines specially adapted for working soil on which crops are growing for special purposes, e.g. for special culture for weeding
    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01B—SOIL WORKING IN AGRICULTURE OR FORESTRY; PARTS, DETAILS, OR ACCESSORIES OF AGRICULTURAL MACHINES OR IMPLEMENTS, IN GENERAL
    • A01B69/00—Steering of agricultural machines or implements; Guiding agricultural machines or implements on a desired track
    • A01B69/001—Steering by means of optical assistance, e.g. television cameras
    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01M—CATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
    • A01M21/00—Apparatus for the destruction of unwanted vegetation, e.g. weeds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20036—Morphological image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Environmental Sciences (AREA)
  • Insects & Arthropods (AREA)
  • Pest Control & Pesticides (AREA)
  • Wood Science & Technology (AREA)
  • Zoology (AREA)
  • Image Analysis (AREA)

Abstract

本发明实施例公开了一种障碍物识别方法、装置、设备、介质及除草机器人。该方法包括：根据候选除草区域图像的颜色信息确定候选除草区域图像中的候选障碍物区域；获取候选障碍物区域的轮廓信息；其中，轮廓信息包括色度信息、范围信息和粗糙度信息；根据预设轮廓信息判断条件和轮廓信息确定候选除草区域图像中是否存在障碍物。通过运行本发明实施例所提供的技术方案，可以解决现有技术中通常采用埋设边界线的方式对除草机器人的除草区域的边界进行标定，耗费大量的人力和物力，增加了成本。并且由于对边界线的埋设存在限制一定程度上限制了除草区域的形状的问题，实现提高除草机器人的候选除草区域中障碍物的识别效率和准确率的效果。

Description

一种障碍物识别方法、装置、设备、介质及除草机器人
技术领域
本发明实施例涉及图像处理技术，尤其涉及一种障碍物识别方法、装置、设备、介质及除草机器人。
背景技术
随着生活水平的提高，人们日益关注环境建设，因此城市绿化园林的建设愈发受到重视。与此同时，高效的绿化养护，如日常除草等，逐渐成为了一种需求。但由于传统除草机需要人工操控，因此具有自主工作功能的除草机器人逐渐兴起。
现有技术中，通常采用埋设边界线的方式对除草机器人的除草区域的边界进行标定，耗费大量的人力和物力，增加了成本。并且由于对边界线的埋设存在限制，例如拐角的角度不能小于90度，因此一定程度上限制了除草区域的形状。
发明内容
本发明实施例提供一种障碍物识别方法、装置、设备、介质及除草机器人，以实现提高除草机器人的候选除草区域中障碍物的识别效率和准确率的效果。
第一方面，本发明实施例提供了一种障碍物识别方法，该方法包括：
根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；
获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；
根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。
第二方面，本发明实施例还提供了一种障碍物识别装置，该装置包括：
候选障碍物区域确定模块，用于根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；
轮廓信息获取模块，用于获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；
障碍物确定模块，用于根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。
第三方面，本发明实施例还提供了一种电子设备，该电子设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如上所述的障碍物识别方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的障碍物识别方法。
第五方面，本发明实施例还提供了一种除草机器人，包括机器人本体，还包括上述的电子设备。
本发明实施例通过根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。解决现有技术中通常采用埋设边界线的方式对除草机器人的除草区域的边界进行标定，耗费大量的人力和物力，增加了成本。并且由于对边界线的埋设存在限制一定程度上限制了除草区域的形状的问题，实现提高除草机器人的候选除草区域中障碍物的识别效率和准确率的效果。
附图说明
图1为本发明实施例一提供的一种障碍物识别方法的流程图；
图2为本发明实施例二提供的一种障碍物识别方法的流程图；
图3为本发明实施例三提供的一种障碍物识别装置的结构示意图；
图4为本发明实施例四提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种障碍物识别方法的流程图，本实施例可适用于除草机器人识别候选除草区域中障碍物的情况，该方法可以由本发明实施例所提供的障碍物识别装置来执行，该装置可以由软件和/或硬件的方式实现。参见图1，本实施例提供的障碍物识别方法，包括：
步骤110、根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域。
其中，候选除草区域为除草机器人可能的工作区域，可能全为待除的杂草，即为除草区域；候选除草区域也可能为存在人为搭建的边界，或者为原本为白色或水泥地等特殊颜色的区域，但由于被长草遮住易被误识别成除草区域，即为障碍物或边界区域。
候选除草区域图像可以由安装在除草机器人上的摄像机进行拍摄，本实施例对此不作限制。候选除草区域图像的颜色信息可以为图像的色调Hue、饱和度Saturation、明度Value等信息，本实施例对此不作限制。通过颜色信息从候选除草区域图像中确定可能为障碍物的区域，示例性的，根据颜色信息确定图像中与周围颜色相差较大的区域作为候选障碍物区域。
本实施例中，可选的，根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域，包括：
根据所述候选除草区域图像的颜色信息获取所述候选除草区域图像的颜色分割图像；
对所述颜色分割图像进行形态学处理，并从形态学处理后的颜色分割图像中确定预设颜色的区域为候选障碍物区域。
其中，根据候选除草区域图像的颜色信息获取候选除草区域图像的颜色分割图像，可以根据颜色动态分割、边缘纹理方法分割、固定阈值分割、大津阈值分割等方式进行颜色分割，以获得候选除草区域图像的颜色分割图像。其中，颜色分割图像可以为二值图像。再对颜色分割图像进行形态学处理，其中，形态学处理可以为取反操作、开操作、闭操作等，本实施例对此不作限制。
从形态学处理后的颜色分割图像中确定预设颜色的区域为候选障碍物区域。例如将黑色区域作为除草区域，白色区域作为候选障碍物区域，以便进一步对候选障碍物区域进行识别。通过获取颜色分割图像对候选除草区域进行初步分类，并对颜色分割图像进行形态学处理以提高候选障碍物区域确定的准确性。
步骤120、获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息。
其中，轮廓信息为单个候选障碍物区域的轮廓信息，获取方式可以为对候选障碍物区域进行轮廓检测。轮廓信息包括色度信息、范围信息和粗糙度信息，其中，色度信息用于表示候选障碍物区域在颜色方面的特征，可以为候选障碍物区域轮廓的平均色度，平均色度的计算方式可以为将单个候选障碍物区域轮廓中障碍物区域所有像素的色度值之和除以轮廓中障碍物区域像素总个数。
范围信息用于表示候选障碍物区域的大小，可以为面积、对角线长度，宽度、高度、包含像素个数等，本实施例对此不作限制。
粗糙度信息用于显示候选障碍物区域边缘的粗糙程度，可以为平均粗糙度，平均粗糙度的计算方式可以为将轮廓中障碍物区域所有像素的粗糙度之和除以轮廓中障碍物区域像素总个数，本实施例对此不作限制。
步骤130、根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。
将候选障碍物区域的轮廓信息与预设轮廓信息判断条件进行对比，其中，预设轮廓信息判断条件与色度信息、范围信息和粗糙度信息相关。若满足预设轮廓信息条件，则确定候选障碍物区域为障碍物区域，即确定障碍物区域所在的候选除草区域图像中存在障碍物，以便除草机器人进行后续障碍物处理。
示例性的，识别出的障碍物为人为搭建的边界，或者为原本为白色或水泥地等特殊颜色的区域，但由于被长草遮住易被误识别成除草区域。
本实施例所提供的技术方案，通过根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。解决现有技术中通常采用埋设边界线的方式对除草机器人的除草区域的边界进行标定，耗费大量的人力和物力，增加了成本。并且由于对边界线的埋设存在限制一定程度上限制了除草区域的形状的问题，实现提高除草机器人的候选除草区域中障碍物的识别效率和准确率的效果。
实施例二
图2为本发明实施例二提供的一种障碍物识别方法的流程图，本技术方案是针对根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物的过程进行补充说明的。与上述方案相比，本方案具体优化为，根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物，包括：
若所述色度信息大于等于预设色度阈值，判断所述范围信息是否大于预设第一范围阈值，且所述粗糙度信息是否小于预设第一粗糙度阈值；
若是，则确定所述候选除草区域图像中存在障碍物；
若所述色度信息小于预设色度阈值，判断所述范围信息是否大于预设第二范围阈值，且所述粗糙度信息是否小于预设第二粗糙度阈值；
若是，则确定所述候选除草区域图像中存在障碍物；其中，所述预设第一范围阈值小于所述预设第二范围阈值。具体的，障碍物识别的流程图如图2所示：
步骤210、根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域。
步骤220、获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息。
步骤230、若所述色度信息大于等于预设色度阈值，判断所述范围信息是否大于预设第一范围阈值，且所述粗糙度信息是否小于预设第一粗糙度阈值；若是，则确定所述候选除草区域图像中存在障碍物。
其中，预设色度阈值用于判断候选障碍物区域是否接近草的颜色，可以根据经验确定，若色度信息大于等于预设色度阈值，则表明候选障碍物区域超过草的颜色认定范围，进一步用范围信息和粗糙度信息判断候选障碍物区域的大小。若色度信息大于等于预设色度阈值且范围信息超过预设第一范围阈值且粗糙度信息小于预设第一粗糙度阈值，则表明候选障碍物区域为障碍物区域，即候选除草区域图像中存在障碍物。例如人为在除草区域中搭建的颜色较深的边界或者被草部分掩盖的铁栏等。
示例性的，色度信息为候选障碍物区域轮廓的平均色度SContoursi，其中i为候选障碍物区域的编号，范围信息为候选障碍物区域的对角线长度AContoursi.diagonal或者候选障碍物区域的高度AContoursi.height，粗糙度信息为候选障碍物区域轮廓的平均粗糙度HContoursi，平均粗糙度越小，表明候选障碍物区域为障碍物的可能性越大。若预设色度阈值为85，预设第一范围阈值的对角线阈值为65，高度阈值为40，预设第一粗糙度阈值为0.25，则预设轮廓信息判断条件为SContoursi≥85且AContoursi.diagonal>65且HContoursi<0.25，或SContoursi≥85，且AContoursi.height>40且HContoursi<0.25。
步骤240、若所述色度信息小于预设色度阈值，判断所述范围信息是否大于预设第二范围阈值，且所述粗糙度信息是否小于预设第二粗糙度阈值；若是，则确定所述候选除草区域图像中存在障碍物；其中，所述预设第一范围阈值小于所述预设第二范围阈值。
若色度信息小于预设色度阈值，则表明候选障碍物区域不是障碍物的可能性增大，进一步用范围信息判断候选障碍物区域的大小。若色度信息小于预设色度阈值且范围信息超过预设第二范围阈值且粗糙度信息小于预设第二粗糙度阈值，则表明候选障碍物区域为障碍物区域，即候选除草区域图像中存在障碍物。
示例性的，若预设色度阈值为85，预设第二范围阈值的对角线阈值为105，高度阈值为70，预设第二粗糙度阈值为0.24，则预设轮廓信息判断条件为SContoursi<85且AContoursi.diagonal>105且HContoursi<0.24，或SContoursi<85且AContoursi.height>70且HContoursi<0.24。
预设第一范围阈值小于预设第二范围阈值，即当候选障碍物区域的色度信息大于等于预设色度阈值时，为障碍物的可能性增加，则降低候选障碍物区域的范围判断条件，使判断条件大于一个更小的值以扩大范围来确定障碍物，从而提高障碍物识别的准确性。
本实施例中，可选的，所述轮廓信息还包括：位置信息；
相应的，根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物，包括：
若所述色度信息大于等于预设色度阈值，且所述范围信息大于预设第一范围阈值，且所述粗糙度信息小于预设第一粗糙度阈值；或
所述色度信息小于预设色度阈值，且所述范围信息大于预设第二范围阈值，且所述粗糙度信息小于预设第二粗糙度阈值；
判断所述位置信息是否大于预设位置阈值；
若是，则确定所述候选除草区域图像中存在障碍物。
其中，位置信息用于显示候选障碍物区域与除草机器人之间的距离，例如为单个候选障碍物区域最小外接矩形右下角的y轴坐标值，本实施例对此不作限制。
在前述判断的基础上进一步判断位置信息是否大于预设位置阈值。
示例性的，位置信息为单个候选障碍物区域最小外接矩形右下角的y轴坐标值YContoursi，坐标值越大表明候选障碍物区域离机器人越近。示例性的，若预设位置阈值为75则预设轮廓信息判断条件可以为SContoursi≥85且AContoursi.diagonal>65且HContoursi<0.25且YContoursi>75，或SContoursi<85且AContoursi.diagonal>105且HContoursi<0.24且YContoursi>75。
通过位置信息进一步判断候选障碍物区域为障碍物区域，处理距离较近的候选障碍物区域，减少了处理的数据，提高了障碍物识别的效率。
本实施例中，可选的，确定所述粗糙度信息，包括：
获取所述候选除草区域图像的明度通道图像；
通过对所述明度通道图像进行边缘提取，获得边缘图像；
根据所述边缘图像的边缘信息中像素的灰度值确定所述粗糙度信息。
通过对候选除草区域图像进行通道分离，获取候选除草区域图像的明度通道图像，可选的，对明度通道图像进行预处理，预处理可以包括滤波处理、归一化处理等，本实施例对此不作限制。对预处理后的明度通道图像进行边缘提取，获得边缘图像，可以采用canny算子进行边缘提取，以提高边缘图像中边缘信息获取的准确率。
通过候选障碍物区域相应位置的边缘图像中的边缘信息确定候选障碍物区域的粗糙度信息，边缘信息包括候选障碍物区域轮廓中像素的灰度值。当粗糙度信息为平均粗糙度时，可以通过将轮廓中灰度值等于255的像素个数除以轮廓像素的总个数，得到候选障碍物区域边缘的平均粗糙度。
通过边缘图像的边缘信息中像素的灰度值确定粗糙度信息，提高粗糙度信息获取的准确率，从而提高障碍物识别的准确率。
本发明实施例通过根据候选障碍物区域的色度信息、范围信息和粗糙度信息判断候选除草区域图像中是否存在障碍物，提高对于由于颜色特殊且面积小导致易被忽略的障碍物区域识别的准确率。
实施例三
图3为本发明实施例三提供的一种障碍物识别装置的结构示意图。该装置可以由硬件和/或软件的方式来实现，可执行本发明任意实施例所提供的一种障碍物识别方法，具备执行方法相应的功能模块和有益效果。如图3所示，该装置包括：
候选障碍物区域确定模块310，用于根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；
轮廓信息获取模块320，用于获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；
障碍物确定模块330，用于根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。
本实施例所提供的技术方案，通过根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。解决现有技术中通常采用埋设边界线的方式对除草机器人的除草区域的边界进行标定，耗费大量的人力和物力，增加了成本。并且由于对边界线的埋设存在限制一定程度上限制了除草区域的形状的问题，实现提高除草机器人的候选除草区域中障碍物的识别效率和准确率的效果。
在上述各技术方案的基础上，可选的，所述候选障碍物区域确定模块，包括：
颜色分割图像获取单元，用于根据所述候选除草区域图像的颜色信息获取所述候选除草区域图像的颜色分割图像；
候选障碍物区域确定单元，用于对所述颜色分割图像进行形态学处理，并从形态学处理后的颜色分割图像中确定预设颜色的区域为候选障碍物区域。
在上述各技术方案的基础上，可选的，所述障碍物确定模块，包括：
第一障碍物确定单元，用于若所述色度信息大于等于预设色度阈值，判断所述范围信息是否大于预设第一范围阈值，且所述粗糙度信息是否小于预设第一粗糙度阈值；若是，则确定所述候选除草区域图像中存在障碍物；
第二障碍物确定单元，用于若所述色度信息小于预设色度阈值，判断所述范围信息是否大于预设第二范围阈值，且所述粗糙度信息是否小于预设第二粗糙度阈值；若是，则确定所述候选除草区域图像中存在障碍物；其中，所述预设第一范围阈值小于所述预设第二范围阈值。
在上述各技术方案的基础上，可选的，所述轮廓信息还包括：位置信息；
相应的，所述障碍物确定模块，包括：
第三障碍物确定单元，用于若所述色度信息大于等于预设色度阈值，且所述范围信息大于预设第一范围阈值，且所述粗糙度信息小于预设第一粗糙度阈值；或
所述色度信息小于预设色度阈值，且所述范围信息大于预设第二范围阈值，且所述粗糙度信息小于预设第二粗糙度阈值；判断所述位置信息是否大于预设位置阈值，且所述粗糙度信息是否小于预设粗糙度阈值；若是，则确定所述候选除草区域图像中存在障碍物。
在上述各技术方案的基础上，可选的，粗糙度信息确定模块，包括：
明度通道图像获取单元，用于获取所述候选除草区域图像的明度通道图像；
图像边缘提取单元，通过对所述明度通道图像进行边缘提取，获得边缘图像；
粗糙度信息确定单元，用于根据所述边缘图像的边缘信息中像素的灰度值确定所述粗糙度信息。
实施例四
图4为本发明实施例四提供的一种电子设备的结构示意图，如图4所示，该电子设备包括处理器40、存储器41、输入装置42和输出装置43；电子设备中处理器40的数量可以是一个或多个，图4中以一个处理器40为例；电子设备中的处理器40、存储器41、输入装置42和输出装置43可以通过总线或其他方式连接，图4中以通过总线连接为例。
存储器41作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的障碍物识别方法对应的程序指令/模块。处理器40通过运行存储在存储器41中的软件程序、指令以及模块，从而执行电子设备的各种功能应用以及数据处理，即实现上述的障碍物识别方法。
存储器41可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器41可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器41可进一步包括相对于处理器40远程设置的存储器，这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种障碍物识别方法，该方法包括：
根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；
获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；
根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的障碍物识别方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述障碍物识别装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
实施例六
本发明实施例六提供一种除草机器人，包括机器人本体，还包括本发明实任意实施例所述的电子设备。
具体的，安装在除草机器人上的电子设备可以执行本发明任意实施例所述的一种障碍物识别方法的相关操作。
其中，机器人本体可以包括左右两个主动动轮，可分别由电机驱动，电机可以为带减速箱和带霍尔传感器的无刷电机。机器人本体通过控制两个主动动轮的速度、方向实现向前、后退、转弯及圆弧等行驶操作。机器人本体还包括万向轮、摄像机和可充放电池，其中，万向轮起支撑平衡作用。摄像机安装于机器人的指定位置，与水平方向成预设夹角，以拍摄候选除草区域图像。可充放电池用于提供电源，供机器人工作。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种障碍物识别方法，其特征在于，包括：
根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；
获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；
根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。
2.根据权利要求1所述的方法，其特征在于，根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域，包括：
根据所述候选除草区域图像的颜色信息获取所述候选除草区域图像的颜色分割图像；
对所述颜色分割图像进行形态学处理，并从形态学处理后的颜色分割图像中确定预设颜色的区域为候选障碍物区域。
3.根据权利要求1所述的方法，其特征在于，根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物，包括：
若所述色度信息大于等于预设色度阈值，判断所述范围信息是否大于预设第一范围阈值，且所述粗糙度信息是否小于预设第一粗糙度阈值；
若是，则确定所述候选除草区域图像中存在障碍物；
若所述色度信息小于预设色度阈值，判断所述范围信息是否大于预设第二范围阈值，且所述粗糙度信息是否小于预设第二粗糙度阈值；
若是，则确定所述候选除草区域图像中存在障碍物；其中，所述预设第一范围阈值小于所述预设第二范围阈值。
4.根据权利要求3所述的方法，其特征在于，所述轮廓信息还包括：位置信息；
相应的，根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物，包括：
若所述色度信息大于等于预设色度阈值，且所述范围信息大于预设第一范围阈值，且所述粗糙度信息小于预设第一粗糙度阈值；或
所述色度信息小于预设色度阈值，且所述范围信息大于预设第二范围阈值，且所述粗糙度信息小于预设第二粗糙度阈值；
判断所述位置信息是否大于预设位置阈值；
若是，则确定所述候选除草区域图像中存在障碍物。
5.根据权利要求1所述的方法，其特征在于，确定所述粗糙度信息，包括：
获取所述候选除草区域图像的明度通道图像；
通过对所述明度通道图像进行边缘提取，获得边缘图像；
根据所述边缘图像的边缘信息中像素的灰度值确定所述粗糙度信息。
6.一种障碍物识别装置，其特征在于，包括：
候选障碍物区域确定模块，用于根据候选除草区域图像的颜色信息确定所述候选除草区域图像中的候选障碍物区域；
轮廓信息获取模块，用于获取所述候选障碍物区域的轮廓信息；其中，所述轮廓信息包括色度信息、范围信息和粗糙度信息；
障碍物确定模块，用于根据预设轮廓信息判断条件和所述轮廓信息确定所述候选除草区域图像中是否存在障碍物。
7.根据权利要求6所述的装置，其特征在于，所述候选障碍物区域确定模块，包括：
颜色分割图像获取单元，用于根据所述候选除草区域图像的颜色信息获取所述候选除草区域图像的颜色分割图像；
候选障碍物区域确定单元，用于对所述颜色分割图像进行形态学处理，并从形态学处理后的颜色分割图像中确定预设颜色的区域为候选障碍物区域。
8.一种电子设备，其特征在于，所述电子设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-5中任一所述的障碍物识别方法。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-5中任一所述的障碍物识别方法。
10.一种除草机器人，包括机器人本体，其特征在于，还包括如权利要求8中所述的电子设备。
CN202011240905.8A 2020-11-09 2020-11-09 一种障碍物识别方法、装置、设备、介质及除草机器人 Pending CN114494838A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202011240905.8A CN114494838A (zh) 2020-11-09 2020-11-09 一种障碍物识别方法、装置、设备、介质及除草机器人
EP20960627.6A EP4242909A1 (en) 2020-11-09 2020-11-30 Obstacle recognition method and apparatus, and device, medium and weeding robot
PCT/CN2020/132569 WO2022095170A1 (zh) 2020-11-09 2020-11-30 一种障碍物识别方法、装置、设备、介质及除草机器人
US18/251,942 US20240087321A1 (en) 2020-11-09 2020-11-30 Obstacle recognition method and apparatus, and device, medium and weeding robot

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011240905.8A CN114494838A (zh) 2020-11-09 2020-11-09 一种障碍物识别方法、装置、设备、介质及除草机器人

Publications (1)

Publication Number Publication Date
CN114494838A true CN114494838A (zh) 2022-05-13

Family

ID=81458600

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011240905.8A Pending CN114494838A (zh) 2020-11-09 2020-11-09 一种障碍物识别方法、装置、设备、介质及除草机器人

Country Status (4)

Country Link
US (1) US20240087321A1 (zh)
EP (1) EP4242909A1 (zh)
CN (1) CN114494838A (zh)
WO (1) WO2022095170A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115251024B (zh) * 2022-08-29 2023-11-21 北京大学现代农业研究院 除草方式的确定方法、装置、电子设备及除草系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106155053A (zh) * 2016-06-24 2016-11-23 桑斌修 一种割草方法、装置以及系统
EP3413155B1 (de) * 2017-06-09 2020-02-26 Andreas Stihl AG & Co. KG Verfahren zum erfassen mindestens eines abschnitts eines begrenzungsrands einer zu bearbeitenden fläche, verfahren zum betreiben eines autonomen mobilen grünflächenbearbeitungsroboters, erfassungssystem und grünflächenbearbeitungssystem
CN108428239A (zh) * 2018-03-20 2018-08-21 东南大学 基于图像纹理特征提取的智能割草机边界识别方法
CN110347153A (zh) * 2019-06-26 2019-10-18 深圳拓邦股份有限公司 一种边界识别方法、系统及移动机器人
CN111399502A (zh) * 2020-03-09 2020-07-10 惠州拓邦电气技术有限公司 移动机器人的建图方法、装置及移动机器人
CN111413977A (zh) * 2020-04-01 2020-07-14 南京信息工程大学 一种基于机器视觉的割草机器人的路径规划系统及方法

Also Published As

Publication number Publication date
US20240087321A1 (en) 2024-03-14
WO2022095170A1 (zh) 2022-05-12
EP4242909A1 (en) 2023-09-13

Similar Documents

Publication Publication Date Title
CN113761970B (zh) 基于图像识别工作位置的方法、系统，机器人及存储介质
EP4242964A1 (en) Obstacle recognition method applied to automatic traveling device and automatic traveling device
CN113822094B (zh) 基于图像识别工作位置的方法、系统，机器人及存储介质
CN113822095B (zh) 基于图像识别工作位置的方法、系统，机器人及存储介质
CN114494838A (zh) 一种障碍物识别方法、装置、设备、介质及除草机器人
US20240029268A1 (en) Image Analysis Method and Apparatus, Computer Device, and Readable Storage Medium
CN114494839A (zh) 一种障碍物识别方法、装置、设备、介质及除草机器人
WO2022099755A1 (zh) 基于图像识别工作区域的方法、系统及机器人
WO2022095161A1 (zh) 一种障碍物识别方法、装置、设备、介质及除草机器人
WO2022135437A1 (zh) 一种障碍物识别方法、装置、设备、介质及除草机器人
WO2022135444A1 (zh) 一种障碍物识别方法、装置、设备、介质及除草机器人
CN114677581A (zh) 一种障碍物识别方法、装置、设备、介质及除草机器人
EP4266206A1 (en) Obstacle recognition method and apparatus, device, medium and weeding robot
CN114648691A (zh) 一种障碍物识别方法、装置、设备、介质及除草机器人
CN117094934A (zh) 图像分析方法、装置、计算机设备及可读存储介质
US20240029267A1 (en) Image Analysis Method and Apparatus, Computer Device, and Readable Storage Medium
US20240296674A1 (en) Obstacle Recognition Method and Apparatus, Device, Medium and Weeding Robot
CN115147713A (zh) 基于图像识别非工作区域的方法、系统、设备及介质
CN115147714A (zh) 基于图像识别非工作区域的方法及系统
CN115147712A (zh) 基于图像识别非工作区域的方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20230525

Address after: 215000 No. 8 Ting Rong Street, Suzhou Industrial Park, Jiangsu, China

Applicant after: Suzhou Cleva Precision Machinery & Technology Co.,Ltd.

Applicant after: SKYBEST ELECTRIC APPLIANCE (SUZHOU) Co.,Ltd.

Address before: 215000 Huahong street, Suzhou Industrial Park, Jiangsu 18

Applicant before: Suzhou Cleva Precision Machinery & Technology Co.,Ltd.

TA01 Transfer of patent application right