CN105459136A - 机器人视觉抓取方法 - Google Patents

机器人视觉抓取方法 Download PDF

Info

Publication number
CN105459136A
CN105459136A CN201511005603.1A CN201511005603A CN105459136A CN 105459136 A CN105459136 A CN 105459136A CN 201511005603 A CN201511005603 A CN 201511005603A CN 105459136 A CN105459136 A CN 105459136A
Authority
CN
China
Prior art keywords
product
information label
capture
robot
product information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201511005603.1A
Other languages
English (en)
Other versions
CN105459136B (zh
Inventor
文海量
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sail Acoustic Image Science And Technology Ltd
Original Assignee
Shanghai Sail Acoustic Image Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sail Acoustic Image Science And Technology Ltd filed Critical Shanghai Sail Acoustic Image Science And Technology Ltd
Priority to CN201511005603.1A priority Critical patent/CN105459136B/zh
Publication of CN105459136A publication Critical patent/CN105459136A/zh
Application granted granted Critical
Publication of CN105459136B publication Critical patent/CN105459136B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00—Controls for manipulators
    • B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)

Abstract

一种机器人视觉抓取方法，包括：在待抓取产品上布置产品信息标签，产品信息标签包含待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息；利用传送装置传递所述待抓取产品；使得传送装置停止传递待抓取产品；利用图像获取装置获取静止状态下的待抓取产品的照片，其中所述照片包含产品信息标签的图像；图像获取装置将所述照片传递给图像处理控制装置，由此图像处理控制装置根据所述照片中的产品信息标签的图像来获取产品信息标签相对于图像获取装置的位置信息、待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息；图像处理控制装置向机器人发送相应的指示信息以控制机器人对静止状态下的待抓取产品的抓取动作。

Description

机器人视觉抓取方法
技术领域
本发明涉及视觉识别领域以及自动控制领域，尤其涉及一种机器人视觉抓取方法。
背景技术
当前，在流水线上利用机器人(具体地，机器人手臂)来抓取传送带上的产品时，一般是利用照相设备拍摄产品的图像，随后对拍摄到的图像进行图像处理以获取诸如产品尺寸之类的产品信息。产品信息随后被发送给机器人的控制单元，使得机器人能够根据产品信息，例如产品尺寸以及照片显示出的产品位置，来控制机器人手臂的具体操作。
但是，现有技术的这种机器人视觉抓取方法具有若干缺点。具体地，现有技术的这种机器人视觉抓取方法需要很大的计算量，需要从照片信息计算出产品尺寸和产品位置。其次，由于计算过程复杂，从而导致操作的时效性较差。而且，从产品照片获取的信息有时候会有偏差，从而造成机器人手臂对产品的抓取操作有可能产生偏差。
因此，本领域的技术人员致力于开发一种计算量小、反应快速而且精确度高的机器人视觉抓取方法。
发明内容
有鉴于现有技术的上述缺陷，本发明所要解决的技术问题是提供一种计算量小、反应快速而且精确度高的机器人视觉抓取方法。
为实现上述目的，本发明提供了一种机器人视觉抓取方法，包括：
第一步骤：在待抓取产品上布置产品信息标签，其中所述产品信息标签包含待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息；
第二步骤：将待抓取产品放置到传送装置上以利用传送装置传递所述待抓取产品；
第三步骤：使得传送装置停止传递所述待抓取产品；
第四步骤：利用图像获取装置获取静止状态下的待抓取产品的照片，其中所述照片包含产品信息标签的图像；
第五步骤：图像获取装置将所述照片传递给图像处理控制装置，由此图像处理控制装置根据所述照片中的产品信息标签的图像来获取产品信息标签相对于图像获取装置的位置信息、待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息；
第六步骤：根据产品信息标签相对于图像获取装置的位置信息、待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息，图像处理控制装置向机器人发送相应的指示信息以控制机器人对静止状态下的待抓取产品的抓取动作。
优选地，所述产品信息标签具有标准化形状和标准化尺寸。
优选地，在第五步骤中，图像处理控制装置根据产品信息标签的实际的标准化形状和标准化尺寸以及照片中的产品信息标签的形状和尺寸来判断产品信息标签相对于图像获取装置的位置信息。
优选地，在待抓取产品的特定表面的角部布置产品信息标签。
优选地，在待抓取产品的特定表面的中心位置布置产品信息标签。
优选地，在传送装置对待抓取产品的传递过程中，每隔预定间隔时段使得传送装置停止预定时间，以便机器人手臂可以在停止时段内识别并抓取待抓取产品。
优选地，图像处理控制装置中存储了图像获取装置相对于机器人的固定位置。
由此，在根据本发明的机器人视觉抓取方法中，可以通过产品信息标签直接将产品的相关尺寸信息直接通知机器人控制单元，而无需进行复杂的图像计算处理来获取尺寸信息，而且由于产品信息标签在产品上的位置信息也被直接传递给机器人控制单元，从而实际上机器人控制单元能够通过简单计算判断产品外壳边缘位置，从而执行抓取动作的精确操作。从而，本发明有效地提供了一种计算量小、反应快速而且精确度高的机器人视觉抓取方法。
以下将结合附图对本发明的构思、具体结构及产生的技术效果作进一步说明，以充分地了解本发明的目的、特征和效果。
附图说明
图1是根据本发明优选实施例的机器人视觉抓取方法的示意图。
图2是根据本发明优选实施例的机器人视觉抓取方法的流程图。
需要说明的是，附图用于说明本发明，而非限制本发明。注意，表示结构的附图可能并非按比例绘制。并且，附图中，相同或者类似的元件标有相同或者类似的标号。
具体实施方式
图1是根据本发明优选实施例的机器人视觉抓取方法的示意图，而且图2是根据本发明优选实施例的机器人视觉抓取方法的流程图。
如图1和图2所示，根据本发明优选实施例的机器人视觉抓取方法包括：
第一步骤S1：在待抓取产品100上布置产品信息标签200，其中所述产品信息标签200包含待抓取产品100的尺寸信息以及产品信息标签200在待抓取产品100上的位置信息；
其中，优选地，产品信息标签200具有标准化形状和标准化尺寸。
优选地，在待抓取产品100的特定表面的角部布置产品信息标签200；或者，在待抓取产品100的特定表面的中心位置布置产品信息标签200；这样可以简化后续计算处理的计算量。
而且，例如，待抓取产品100可以是产品材料、半成品、制成品等。
第二步骤S2：将待抓取产品100放置到传送装置300上以利用传送装置300传递所述待抓取产品100；
第三步骤S3：使得传送装置300停止传递所述待抓取产品100；
例如，在传送装置300对待抓取产品100的传递过程中，每隔预定间隔时段使得传送装置300停止预定时间，以便机器人手臂可以在停止时段内识别并抓取待抓取产品100。
第四步骤S4：利用图像获取装置10获取静止状态下的待抓取产品100的照片，其中所述照片包含产品信息标签200的图像；
第五步骤S5：图像获取装置10将所述照片传递给图像处理控制装置20，由此图像处理控制装置20根据所述照片中的产品信息标签200的图像来获取产品信息标签200相对于图像获取装置10的位置信息、待抓取产品100的尺寸信息以及产品信息标签200在待抓取产品100上的位置信息；
其中，图像获取装置10相对于机器人30(更具体地，机器人抓取部件，例如机器人手臂的固定端)的位置是固定的，即图像处理控制装置20获知图像获取装置10相对于机器人30的固定位置。或者，图像获取装置10相对于机器人30(机器人手臂)的位置虽然不固定，但是图像处理控制装置20始终获知图像获取装置10相对于机器人30的固定位置。也就是说，图像处理控制装置20中存储了图像获取装置10相对于机器人30的固定位置。
或者，在其它实施方式中，图像获取装置10中可以包含红外单元，并且利用红外单元探测产品信息标签200相对于图像获取装置10的位置信息。
具体地，例如，产品信息标签200具有标准化形状和标准化尺寸，从而在第五步骤S5中图像处理控制装置20可以根据产品信息标签200的实际的标准化形状和标准化尺寸以及照片中的产品信息标签200的形状和尺寸来判断产品信息标签200相对于图像获取装置10的位置信息。
第六步骤S6：根据产品信息标签200相对于图像获取装置10的位置信息、待抓取产品100的尺寸信息以及产品信息标签200在待抓取产品100上的位置信息，图像处理控制装置20向机器人30发送相应的指示信息以控制机器人30对静止状态下的待抓取产品100的抓取动作。
由此，在根据本发明优选实施例的机器人视觉抓取方法中，可以通过产品信息标签直接将产品的相关尺寸信息直接通知机器人控制单元，而无需进行复杂的图像计算处理来获取尺寸信息，而且由于产品信息标签在产品上的位置信息也被直接传递给机器人控制单元，从而实际上机器人控制单元能够通过简单计算判断产品外壳边缘位置，从而执行抓取动作的精确操作。从而，本发明有效地提供了一种计算量小、反应快速而且精确度高的机器人视觉抓取方法。
通过采用本发明的机器人视觉抓取方法，使得机器人设备相对于产品传送带的位置变得不重要，也就可以将分离的机器人设备应用至不同的生产线，从而大大提高了机器人设备的应用灵活性和应用范围。
上述说明示出并描述了本发明的优选实施例，如前所述，应当理解本发明并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述发明构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围，则都应在本发明所附权利要求的保护范围内。

Claims (7)

1.一种机器人视觉抓取方法，其特征在于包括：
第一步骤：在待抓取产品上布置产品信息标签，其中所述产品信息标签包含待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息；
第二步骤：将待抓取产品放置到传送装置上以利用传送装置传递所述待抓取产品；
第三步骤：使得传送装置停止传递所述待抓取产品；
第四步骤：利用图像获取装置获取静止状态下的待抓取产品的照片，其中所述照片包含产品信息标签的图像；
第五步骤：图像获取装置将所述照片传递给图像处理控制装置，由此图像处理控制装置根据所述照片中的产品信息标签的图像来获取产品信息标签相对于图像获取装置的位置信息、待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息；
第六步骤：根据产品信息标签相对于图像获取装置的位置信息、待抓取产品的尺寸信息以及产品信息标签在待抓取产品上的位置信息，图像处理控制装置向机器人发送相应的指示信息以控制机器人对静止状态下的待抓取产品的抓取动作。
2.如权利要求1所述的机器人视觉抓取方法，其特征在于，所述产品信息标签具有标准化形状和标准化尺寸。
3.如权利要求2所述的机器人视觉抓取方法，其特征在于，在第五步骤中，图像处理控制装置根据产品信息标签的实际的标准化形状和标准化尺寸以及照片中的产品信息标签的形状和尺寸来判断产品信息标签相对于图像获取装置的位置信息。
4.如权利要求1或2所述的机器人视觉抓取方法，其特征在于，在待抓取产品的特定表面的角部布置产品信息标签。
5.如权利要求1或2所述的机器人视觉抓取方法，其特征在于，在待抓取产品的特定表面的中心位置布置产品信息标签。
6.如权利要求1或2所述的机器人视觉抓取方法，其特征在于，在传送装置对待抓取产品的传递过程中，每隔预定间隔时段使得传送装置停止预定时间，以便机器人手臂可以在停止时段内识别并抓取待抓取产品。
7.如权利要求1或2所述的机器人视觉抓取方法，其特征在于，图像处理控制装置中存储了图像获取装置相对于机器人的固定位置。
CN201511005603.1A 2015-12-29 2015-12-29 机器人视觉抓取方法 Active CN105459136B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201511005603.1A CN105459136B (zh) 2015-12-29 2015-12-29 机器人视觉抓取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201511005603.1A CN105459136B (zh) 2015-12-29 2015-12-29 机器人视觉抓取方法

Publications (2)

Publication Number Publication Date
CN105459136A true CN105459136A (zh) 2016-04-06
CN105459136B CN105459136B (zh) 2017-07-14

Family

ID=55597509

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511005603.1A Active CN105459136B (zh) 2015-12-29 2015-12-29 机器人视觉抓取方法

Country Status (1)

Country Link
CN (1) CN105459136B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106094516A (zh) * 2016-06-08 2016-11-09 南京大学 一种基于深度强化学习的机器人自适应抓取方法
CN107168110A (zh) * 2016-12-09 2017-09-15 陈胜辉 一种物料抓取方法与系统
CN109154826A (zh) * 2016-07-28 2019-01-04 X开发有限责任公司 协作库存监测
CN110936386A (zh) * 2018-09-21 2020-03-31 北京京东尚科信息技术有限公司 用于处理物体的机器人系统及对其进行包装和处理的方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007080733A1 (ja) * 2006-01-13 2007-07-19 Matsushita Electric Industrial Co., Ltd. ロボットアームの制御装置及び制御方法、ロボット、及びプログラム
CN101357715A (zh) * 2007-08-03 2009-02-04 日本阿西斯特技术株式会社 传输系统以及传输系统中的教导方法
US20100106297A1 (en) * 2008-10-27 2010-04-29 Seiko Epson Corporation Workpiece detecting system, picking apparatus, picking method, and transport system
WO2010092981A1 (ja) * 2009-02-12 2010-08-19 三菱電機株式会社 産業用ロボットシステム
CN102788966A (zh) * 2012-08-20 2012-11-21 重庆市电力公司电力科学研究院 电能表检定机器人的控制系统及控制方法
CN202694114U (zh) * 2012-07-02 2013-01-23 苏州大学 基于射频技术的生物培养皿管理系统
CN103753585A (zh) * 2014-01-10 2014-04-30 南通大学 一种基于视觉图像分析的机械手及抓紧力智能调节方法
CN104511436A (zh) * 2013-09-28 2015-04-15 沈阳新松机器人自动化股份有限公司 一种基于机器人视觉伺服技术的快递分拣方法及系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007080733A1 (ja) * 2006-01-13 2007-07-19 Matsushita Electric Industrial Co., Ltd. ロボットアームの制御装置及び制御方法、ロボット、及びプログラム
CN101357715A (zh) * 2007-08-03 2009-02-04 日本阿西斯特技术株式会社 传输系统以及传输系统中的教导方法
US20090035104A1 (en) * 2007-08-03 2009-02-05 Asyst Technologies Japan, Inc. Transporting system, and teaching method in the transporting system
US20100106297A1 (en) * 2008-10-27 2010-04-29 Seiko Epson Corporation Workpiece detecting system, picking apparatus, picking method, and transport system
WO2010092981A1 (ja) * 2009-02-12 2010-08-19 三菱電機株式会社 産業用ロボットシステム
CN202694114U (zh) * 2012-07-02 2013-01-23 苏州大学 基于射频技术的生物培养皿管理系统
CN102788966A (zh) * 2012-08-20 2012-11-21 重庆市电力公司电力科学研究院 电能表检定机器人的控制系统及控制方法
CN104511436A (zh) * 2013-09-28 2015-04-15 沈阳新松机器人自动化股份有限公司 一种基于机器人视觉伺服技术的快递分拣方法及系统
CN103753585A (zh) * 2014-01-10 2014-04-30 南通大学 一种基于视觉图像分析的机械手及抓紧力智能调节方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106094516A (zh) * 2016-06-08 2016-11-09 南京大学 一种基于深度强化学习的机器人自适应抓取方法
CN109154826A (zh) * 2016-07-28 2019-01-04 X开发有限责任公司 协作库存监测
CN107168110A (zh) * 2016-12-09 2017-09-15 陈胜辉 一种物料抓取方法与系统
CN110936386A (zh) * 2018-09-21 2020-03-31 北京京东尚科信息技术有限公司 用于处理物体的机器人系统及对其进行包装和处理的方法
CN110936386B (zh) * 2018-09-21 2023-01-31 北京京东乾石科技有限公司 用于处理物体的机器人系统及对其进行包装和处理的方法

Also Published As

Publication number Publication date
CN105459136B (zh) 2017-07-14

Similar Documents

Publication Publication Date Title
CN105459136A (zh) 机器人视觉抓取方法
CN104476552B (zh) 一种基于机器视觉的机器人型材搬运装置的搬运方法
Ustundag et al. Advances in Robotics in the Era of Industry 4.0
JP2018069377A (ja) ロボットが行う物品整列作業のシミュレーションのための装置、方法、プログラム及び記録媒体
ITBO20130466A1 (it) Metodo di ispezione e/o manutenzione di una parte di un impianto industriale mediante realta' aumentata, e corrispondente sistema per guidare l'ispezione e/o la manutenzione della parte di impianto industriale
JP2016016915A (ja) 物品をコンベヤに整列させる物品整列装置
JP2018113610A (ja) 視覚センサの異常原因推定システム
Kirschner et al. YuMi, come and play with Me! A collaborative robot for piecing together a tangram puzzle
CN105345431A (zh) 基于工业机器人的自动插件机控制系统
CN105467294A (zh) 一种用于pcba自动测试的定位系统和方法
CN204308972U (zh) 视觉检查系统
CN109685847A (zh) 一种视觉目标检测模型的训练方法和装置
Prezas et al. AI-enhanced vision system for dispensing process monitoring and quality control in manufacturing of large parts
CN113269829B (zh) 流水生产线目标定位方法、装置、计算机设备和存储介质
CN204462030U (zh) 一种用于检测acf导电胶贴附效果的相机拍照取图装置
CN113734981B (zh) 智能塔吊物料运输路径设置方法和装置
CN107566532A (zh) 基于云平台的衣片图像处理方法、系统、控制终端及云平台
Kim et al. AR/VR-based live manual for user-centric smart factory services
US20170050319A1 (en) Programmable Machine Vision Device
FR3060547B1 (fr) Appareil et procede de transfert, vers une ligne de traitement, d'imprimes initialement conditionnes en liasse
CN107492124B (zh) 鱼眼摄像头的平面标定装置
Martinez et al. Automated 3D vision guided bin picking process for randomly located industrial parts
KR20160032608A (ko) 지능형 휴머노이드 로봇
CN207712430U (zh) 一种油桶桶内异物智能检测装置
CN113226666A (zh) 用于监控机器人系统的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant