CN110013197A - 一种扫地机器人物体识别方法 - Google Patents

一种扫地机器人物体识别方法 Download PDF

Info

Publication number
CN110013197A
CN110013197A CN201910303262.8A CN201910303262A CN110013197A CN 110013197 A CN110013197 A CN 110013197A CN 201910303262 A CN201910303262 A CN 201910303262A CN 110013197 A CN110013197 A CN 110013197A
Authority
CN
China
Prior art keywords
decision tree
sweeping robot
picture
similarity
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910303262.8A
Other languages
English (en)
Inventor
黎镜锋
吴俊�
张志国
陈宏亮
魏晓林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Tiancheng Communication Technology Ltd By Share Ltd
Original Assignee
Shanghai Tiancheng Communication Technology Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Tiancheng Communication Technology Ltd By Share Ltd filed Critical Shanghai Tiancheng Communication Technology Ltd By Share Ltd
Priority to CN201910303262.8A priority Critical patent/CN110013197A/zh
Publication of CN110013197A publication Critical patent/CN110013197A/zh
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L11/00Machines for cleaning floors, carpets, furniture, walls, or wall coverings
    • A47L11/24Floor-sweeping machines, motor-driven
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L11/00Machines for cleaning floors, carpets, furniture, walls, or wall coverings
    • A47L11/40Parts or details of machines not provided for in groups A47L11/02 - A47L11/38, or not restricted to one of these groups, e.g. handles, arrangements of switches, skirts, buffers, levers
    • A47L11/4011Regulation of the cleaning machine by electric means; Control systems and remote control systems therefor

Landscapes

  • Manipulator (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种扫地机器人物体识别方法,通过随机森林内的物体决策树与扫地机器人获得的图片内的物体特征进行比对,找到与物体特征相似度最高的物体决策树,当比对的相似度大于阈值M时,扫地机器人将其拍摄到的物体识别为物体决策树对应的物体信息,从而进行对应的指令操作,相似度小于阈值M时,人工添加物体决策树后扫地机器人记录新物体信息,并可以自主学习完善该物体决策树。本发明的一种扫地机器人物体识别方法可以使扫地机器人对物体进行更加智能化的自我学习和识别,具有智能化程度高、自我学习能力强的优点。

Description

一种扫地机器人物体识别方法
技术领域
本发明涉及一种智能家居技术领域,尤其涉及一种智能化程度高、自我学习能力强的扫地机器人物体识别方法。
背景技术
随着人工智能的发展,图像识别、语音识别和意识识别等技术领域的关键技术的突破,智能化技术和产品逐渐进入人们的日常生活,并将对未来社会的方方面面产生革命性的变化。智能化产品必将取代社会发展过程中,重复性、操作流程固化和高精度型等应用领域的作业,未来社会将会被更加智能化和便捷化的人工智能技术所取代,得到很大程度上的提升。其中物体识别领域的技术发展尤为突出,对应的智能化产品已经相当普遍。
现有的智能家居产品中,扫地机器人越来越多的进入消费者家庭。现有技术的应用于智能扫地机器人领域的物体识别,只能对选定的几种物体进行识别,在物体识别的智能学习能力还没有更好的解决方法。
因此,有必要提出一种改进,以克服现有技术缺陷。
发明内容
本发明的目的是解决现有技术中的问题,提供一种智能化程度高、自我学习能力强的扫地机器人物体识别方法。
本发明的技术方案是:
一种扫地机器人物体识别方法,包括以下步骤:S1、根据常规物体信息建立物体决策树,所述物体决策树内包括特征信息、处理操作信息,多个物体决策树形成随机森林;S2、扫地机器人获取图片;S3、对图片进行图像处理,将图片分隔成多个子图;S4、对每个子图进行物体识别,获取子图内的物体特征;将所述物体特征与随机森林内的物体决策树进行特征比对,判断所述物体特征与随机森林内所有物体决策树的相似度,找到与所述物体相似度最高的物体决策树T,若所述物体特征与所述物体决策树T的相似度达到最低相似度阈值M,则将该图片归类为与该物体决策树T对应的物体类别,并将该图片加入到该物体决策树T内,转向步骤S5;否则,认为该物体为新的物体,创建新的物体决策树,转向步骤S6;S5、信息扫地机器人根据物体决策树T对应的处理操作信息进行指令操作;S6、等待人工设置新的物体决策树信息,扫地机器人根据人工设置的物体决策树信息进行指令操作。
作为一种优选的技术方案,所述步骤S2扫地机器人获取图片中,扫地机器人包括双目摄像头,所述图片为扫地机器人双目摄像头获取的图片。
作为一种优选的技术方案,所述步骤S3中对图片进行图像处理的方法为根据边界检测和灰度图二值化,检测出图片中的框体,并将图片分割成多个子图。
作为一种优选的技术方案,所述步骤S1中建立物体决策树包括:根据物体的一个特征的一个标准图作为根节点,根据标准图相似度依次建立决策树,根节点为第0层,层级越高,相似度越低。
作为一种进一步优选的技术方案,物体包括多个特征,则物体决策树的每层包括多个节点;父节点与子节点的相似度大于父节点同层节点之间的相似度。
作为一种优选的技术方案,所述步骤S6中人工设置新的物体决策树信息包括人工命名决策树名称、扫地机器人对该物体决策树的处理操作信息。
作为一种进一步优选的技术方案,所述处理操作信息包括收纳指令、避开指令、清扫指令和人机交互物体智能化自学习指令。
本发明的一种扫地机器人物体识别方法,通过随机森林内的物体决策树与图像内物体特征进行比对,找到与物体特征相似度最高的物体决策树,当比对的相似度大于阈值M时,扫地机器人将其拍摄到的物体识别为物体决策树对应的物体信息,从而进行对应的指令操作。本发明的一种扫地机器人物体识别方法,阈值M可以设定,通过设定阈值M,可以使扫地机器人对物体的识别更加智能化,可以进行自我学习,提升物体识别的准确性。对于新物体,需要进行人工设置物体决策树,之后扫地机器人可以自主学习完善该物体决策树。本发明的一种扫地机器人物体识别方法可以使扫地机器人对物体进行更加智能化的自我学习和识别,具有智能化程度高、自我学习能力强的优点。
附图说明
图1为本发明一种扫地机器人物体识别方法流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义,“多种”一般包含至少两种,但是不排除包含至少一种的情况。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
取决于语境,如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地,取决于语境,短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的商品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种商品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的商品或者系统中还存在另外的相同要素。
如图1所示为本发明的一种扫地机器人物体识别方法,包括以下步骤:
S1、根据常规物体信息建立物体决策树,所述物体决策树内包括特征信息、处理操作信息,多个物体决策树形成随机森林;
S2、扫地机器人获取图片;
S3、对图片进行图像处理,将图片分隔成多个子图;
S4、对每个子图进行物体识别,获取子图内的物体特征;将所述物体特征与随机森林内的物体决策树进行特征比对,判断所述物体特征与随机森林内所有物体决策树的相似度,找到与所述物体相似度最高的物体决策树T,若所述物体特征与所述物体决策树T的相似度达到最低相似度阈值M,则将该图片归类为与该物体决策树T对应的物体类别,并将该图片加入到该物体决策树T内,转向步骤S5;否则,认为该物体为新的物体,创建新的物体决策树,转向步骤S6;其中,相似度为百分比,在0%到100%之间,越大越相似;
S5、信息扫地机器人根据物体决策树T对应的处理操作信息进行指令操作;
S6、等待人工设置新的物体决策树信息,扫地机器人根据人工设置的物体决策树信息进行指令操作。
本发明的扫地机器人物体识别方法,随机森林内的物体分类森林中,同一个物体的所有图片建立成一个物体决策树,该物体决策树内包括特征信息、处理操作信息等标签信息。当扫地机器人获取图片后,需要对该图片内物体图像在所建立的随机森林内每个分类进行计算,通过将扫地机器人获取的图片信息与随机森林内的物体决策树内的物体特征信息进行比对,计算出相似度,找出图片信息与随机森林内相似度最高的物体决策树,当相似度超过最低相似阈值M时,可判断该张图片内的该物体属于该物体决策树。同时,相似度的阈值可以设定,大于该阈值时,可以认为物体与物体决策树匹配,判断物体种类及后续处理,否则,需要建立新的决策树,进行新物体更加智能化的自我学习和识别的扫地机器人物体识别功能。
为了保证扫地机器人获取的图片清晰、包含尽可能多的物体特征,提高物体识别的准确性,作为优选方案,上述步骤S2扫地机器人获取图片中,扫地机器人包括双目摄像头,所述图片为扫地机器人双目摄像头获取的图片。
为了提高图像处理效率,提高本发明一种扫地机器人物体识别方法的识别效率和准确性,上述步骤S3中对图片进行图像处理的方法为根据边界检测和灰度图二值化,检测出图片中的框体,并将图片分割成多个子图。
在上述步骤S1中,建立物体决策树时,根据物体的一个特征的一个标准图作为根节点,根据标准图相似度依次建立决策树,根节点为第0层,层级越高,相似度越低。此时该物体决策树就物体该特征的节点,根据相似度的变化,从下向上依次建立节点层级,节点层级越多,物体特征的识别维度越多,相似度判断越准确。
当然,在实际应用中,一个物体包括多个特征,同一个物体决策树的一个层级也包括多个物体特征的节点,此时,父节点与子节点的相似度大于父节点同层节点之间的相似度。避免同一层级的不同特征节点相互干扰,保证物体识别判断的准确性。
在上述步骤S6中,人工设置新的物体决策树信息至少应包括人工命名决策树名称、扫地机器人对该物体决策树的处理操作信息。也即是为本发明一种扫地机器人物体识别方法中识别的新物体添加名称信息及需要扫地机器人后续的处理操作信息,指导扫地机器人进行对应的指令操作。建立起对应的物体决策树后,本发明的一种扫地机器人物体识别方法可以根据阈值M的设定,对新物体的物体决策树内图像进行添加、完善,进行机器学习。
上述的处理操作信息包括收纳指令、避开指令、清扫指令和人机交互物体智能化自学习指令。对应扫地机器人对物体进行收纳、避让、清扫和智能化学习等处理方式。该处理操作信息与扫地机器人的处理动作对应,也可以根据扫地机器人的实际动作需求进行增加。该处理操作信息也是本发明扫地机器人物体识别方法可以针对物体特征进行智能化学习训练的机制。通过加入上述处理操作信息尤其是人机交互物体智能化自学习指令,可以保证通过人机交互,使扫地机器人根据用户指令判断对物体进行的操作,并进行智能化学习,保证本发明扫地机器人物体识别方法可以使扫地机器人逐步个性化、有针对性地建立对待其工作环境内的物体进行识别并采取针对性的个性化操作。例如,在不同的家庭,对待同一物品可能是收纳或清扫,扫地机器人可以根据实际用户的人机交互指令进行针对性个性化操作。
本发明的一种扫地机器人物体识别方法,通过随机森林内的物体决策树与图像内物体特征进行比对,找到与物体特征相似度最高的物体决策树,当比对的相似度大于阈值M时,扫地机器人将其拍摄到的物体识别为物体决策树对应的物体信息,从而进行对应的指令操作。本发明的一种扫地机器人物体识别方法,阈值M可以设定,通过设定阈值M,可以使扫地机器人对物体的识别更加智能化,可以进行自我学习,提升物体识别的准确性。对于新物体,需要进行人工设置物体决策树,之后扫地机器人可以自主学习完善该物体决策树。本发明的一种扫地机器人物体识别方法可以使扫地机器人对物体进行更加智能化的自我学习和识别,具有智能化程度高、自我学习能力强的优点。
综上所述仅为本发明较佳的实施例,并非用来限定本发明的实施范围。即凡依本发明申请专利范围的内容所作的等效变化及修饰,皆应属于本发明的技术范畴。

Claims (7)

1.一种扫地机器人物体识别方法,其特征在于:包括以下步骤:
S1、根据常规物体信息建立物体决策树,所述物体决策树内包括特征信息、处理操作信息,多个物体决策树形成随机森林;
S2、扫地机器人获取图片;
S3、对图片进行图像处理,将图片分隔成多个子图;
S4、对每个子图进行物体识别,获取子图内的物体特征;将所述物体特征与随机森林内的物体决策树进行特征比对,判断所述物体特征与随机森林内所有物体决策树的相似度,找到与所述物体相似度最高的物体决策树T,若所述物体特征与所述物体决策树T的相似度达到最低相似度阈值M,则将该图片归类为与该物体决策树T对应的物体类别,并将该图片加入到该物体决策树T内,转向步骤S5;否则,认为该物体为新的物体,创建新的物体决策树,转向步骤S6;
S5、信息扫地机器人根据物体决策树T对应的处理操作信息进行指令操作;
S6、等待人工设置新的物体决策树信息,扫地机器人根据人工设置的物体决策树信息进行指令操作。
2.根据权利要求1所述的一种扫地机器人物体识别方法,其特征在于:所述步骤S2扫地机器人获取图片中,扫地机器人包括双目摄像头,所述图片为扫地机器人双目摄像头获取的图片。
3.根据权利要求1所述的一种扫地机器人物体识别方法,其特征在于:所述步骤S3中对图片进行图像处理的方法为:根据边界检测和灰度图二值化,检测出图片中的框体,并将图片分割成多个子图。
4.根据权利要求1所述的一种扫地机器人物体识别方法,其特征在于:所述步骤S1中建立物体决策树包括:根据物体的一个特征的一个标准图作为根节点,根据标准图相似度依次建立决策树,根节点为第0层,层级越高,相似度越低。
5.根据权利要求4所述的一种扫地机器人物体识别方法,其特征在于:物体包括多个特征,则物体决策树的每层包括多个节点;父节点与子节点的相似度大于父节点同层节点之间的相似度。
6.根据权利要求1所述的一种扫地机器人物体识别方法,其特征在于:所述步骤S6中人工设置新的物体决策树信息包括人工命名决策树名称、扫地机器人对该物体决策树的处理操作信息。
7.根据权利要求1或6所述的一种扫地机器人物体识别方法,其特征在于:所述处理操作信息包括收纳指令、避开指令、清扫指令和人机交互物体智能化自学习指令。
CN201910303262.8A 2019-04-16 2019-04-16 一种扫地机器人物体识别方法 Pending CN110013197A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910303262.8A CN110013197A (zh) 2019-04-16 2019-04-16 一种扫地机器人物体识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910303262.8A CN110013197A (zh) 2019-04-16 2019-04-16 一种扫地机器人物体识别方法

Publications (1)

Publication Number Publication Date
CN110013197A true CN110013197A (zh) 2019-07-16

Family

ID=67191479

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910303262.8A Pending CN110013197A (zh) 2019-04-16 2019-04-16 一种扫地机器人物体识别方法

Country Status (1)

Country Link
CN (1) CN110013197A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021080220A1 (en) 2019-10-23 2021-04-29 Samsung Electronics Co., Ltd. Electronic device and method for controlling the electronic device
CN114586009B (zh) * 2019-10-23 2024-06-04 三星电子株式会社 电子设备和用于控制电子设备的方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102283616A (zh) * 2010-10-22 2011-12-21 青岛科技大学 基于机器视觉的家庭智能清理系统
CN103105924A (zh) * 2011-11-15 2013-05-15 中国科学院深圳先进技术研究院 人机交互方法和装置
CN105395144A (zh) * 2015-12-21 2016-03-16 美的集团股份有限公司 扫地机器人的控制方法、系统、云服务器和扫地机器人
CN105953520A (zh) * 2016-05-06 2016-09-21 青岛海尔股份有限公司 智能冰箱控制方法及其控制系统
CN106295531A (zh) * 2016-08-01 2017-01-04 乐视控股(北京)有限公司 一种手势识别方法和装置以及虚拟现实终端
JP2018005639A (ja) * 2016-07-04 2018-01-11 タカノ株式会社 画像分類装置、画像検査装置、及び、プログラム
CN108491776A (zh) * 2018-03-12 2018-09-04 青岛理工大学 基于像素分类的装配体零件识别方法、装置及监测系统
CN109154978A (zh) * 2016-05-13 2019-01-04 巴斯夫欧洲公司 用于检测植物疾病的系统和方法
CN109171571A (zh) * 2018-09-18 2019-01-11 格力电器(武汉)有限公司 垃圾的清理方法、装置以及清洁机器人

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102283616A (zh) * 2010-10-22 2011-12-21 青岛科技大学 基于机器视觉的家庭智能清理系统
CN103105924A (zh) * 2011-11-15 2013-05-15 中国科学院深圳先进技术研究院 人机交互方法和装置
CN105395144A (zh) * 2015-12-21 2016-03-16 美的集团股份有限公司 扫地机器人的控制方法、系统、云服务器和扫地机器人
CN105953520A (zh) * 2016-05-06 2016-09-21 青岛海尔股份有限公司 智能冰箱控制方法及其控制系统
CN109154978A (zh) * 2016-05-13 2019-01-04 巴斯夫欧洲公司 用于检测植物疾病的系统和方法
JP2018005639A (ja) * 2016-07-04 2018-01-11 タカノ株式会社 画像分類装置、画像検査装置、及び、プログラム
CN106295531A (zh) * 2016-08-01 2017-01-04 乐视控股(北京)有限公司 一种手势识别方法和装置以及虚拟现实终端
CN108491776A (zh) * 2018-03-12 2018-09-04 青岛理工大学 基于像素分类的装配体零件识别方法、装置及监测系统
CN109171571A (zh) * 2018-09-18 2019-01-11 格力电器(武汉)有限公司 垃圾的清理方法、装置以及清洁机器人

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
董慧颖: "《典型目标识别与图像除雾技术》", 31 October 2016 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021080220A1 (en) 2019-10-23 2021-04-29 Samsung Electronics Co., Ltd. Electronic device and method for controlling the electronic device
CN114586009A (zh) * 2019-10-23 2022-06-03 三星电子株式会社 电子设备和用于控制电子设备的方法
EP3973375A4 (en) * 2019-10-23 2022-07-20 Samsung Electronics Co., Ltd. ELECTRONIC DEVICE AND METHOD OF CONTROLLING THE ELECTRONIC DEVICE
US11651621B2 (en) 2019-10-23 2023-05-16 Samsung Electronics Co., Ltd. Electronic device and method for controlling the electronic device
CN114586009B (zh) * 2019-10-23 2024-06-04 三星电子株式会社 电子设备和用于控制电子设备的方法

Similar Documents

Publication Publication Date Title
Wohlkinger et al. 3dnet: Large-scale object class recognition from cad models
US10061986B2 (en) Systems and methods for identifying activities in media contents based on prediction confidences
CN108229566B (zh) 一种层次性分类方法及装置
CN105844283B (zh) 用于识别图像类目归属的方法、图像搜索方法及装置
CN104346370B (zh) 图像搜索、获取图像文本信息的方法及装置
CN105138953B (zh) 一种基于连续的多实例学习的视频中动作识别的方法
CN111008337B (zh) 一种基于三元特征的深度注意力谣言鉴别方法及装置
CN107480642A (zh) 一种基于时域分段网络的视频动作识别方法
Bai et al. Products-10k: A large-scale product recognition dataset
JP2020038440A (ja) 動作認識方法及び装置
CN112115906A (zh) 基于深度学习目标检测和度量学习的开放性菜品识别方法
CN108830215A (zh) 基于人员骨架信息的危险行为识别方法
CN108107886B (zh) 扫地机器人的行驶控制方法及装置、扫地机器人
CN110110792A (zh) 一种基于增量学习的多标签数据流分类方法
CN113065474A (zh) 行为识别方法、装置及计算机设备
CN108734159A (zh) 一种图像中敏感信息的检测方法及系统
CN110377727A (zh) 一种基于多任务学习的多标签文本分类方法和装置
CN111931703A (zh) 基于人-物体交互弱监督标签的物体检测方法
CN113780342A (zh) 一种基于自监督预训练的智能检测方法、装置及机器人
CN110013197A (zh) 一种扫地机器人物体识别方法
CN108496185A (zh) 用于对象检测的系统和方法
CN110472057A (zh) 话题标签的生成方法及装置
Khan et al. FishNet: A Large-scale Dataset and Benchmark for Fish Recognition, Detection, and Functional Trait Prediction
JP6573233B2 (ja) 認識容易性指標算出装置、方法、及びプログラム
CN111709451A (zh) 酒瓶表面缺陷检测方法、电子装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190716