CN109015651A - 一种基于示教器的视觉处理一体化系统及其应用方法 - Google Patents

一种基于示教器的视觉处理一体化系统及其应用方法 Download PDF

Info

Publication number
CN109015651A
CN109015651A CN201810980757.XA CN201810980757A CN109015651A CN 109015651 A CN109015651 A CN 109015651A CN 201810980757 A CN201810980757 A CN 201810980757A CN 109015651 A CN109015651 A CN 109015651A
Authority
CN
China
Prior art keywords
manipulator
industrial camera
visual processes
coordinate system
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810980757.XA
Other languages
English (en)
Inventor
周正
陈思敏
高萌
黄冠成
汪诗皓
罗永华
何文浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Foshan Huashu Robot Co Ltd
Original Assignee
Foshan Huashu Robot Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Foshan Huashu Robot Co Ltd filed Critical Foshan Huashu Robot Co Ltd
Priority to CN201810980757.XA priority Critical patent/CN109015651A/zh
Publication of CN109015651A publication Critical patent/CN109015651A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1628Programme controls characterised by the control loop
    • B25J9/1653Programme controls characterised by the control loop parameters identification, estimation, stiffness, accuracy, error analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Manipulator (AREA)
  • Numerical Control (AREA)

Abstract

本发明属于机器人视觉系统技术领域,具体地说,涉及一种基于示教器的视觉处理一体化系统及其应用方法。公开了一种一种基于示教器的视觉处理一体化系统,包括如下模块:CCD设置模块;机械手连接设置模块;应用类型设置模块;模板设置模块;手眼标定模块;执行模块。还公开了一种基于示教器的视觉处理一体化应用方法。本发明的一种基于示教器的视觉处理一体化系统及其应用方法基于机器人平台的示教器进行操作,操作方便,可直接在界面上对机器人或机械手与工业相机的参数进行设置,方便实际应用,同时,该产品可以直接应用到不同型号的机器人或机械手、工业相机以及不同种类的工件,尤其适用于机器人教学平台或多功能工业机器人中。

Description

一种基于示教器的视觉处理一体化系统及其应用方法
技术领域
本发明属于机器人视觉系统技术领域,具体地说,涉及一种基于示教器的视觉处理一体化系统及其应用方法。
背景技术
传统机器视觉系统是一种基于PC的视觉系统,一般由PC+工业相机或嵌入式+智能相机两种方案,而PC+工业相机是由CCD、视觉控制器、光源控制器以及图像处理软件构成。其中,图像的采集功能由CCD相机完成,图像的处理则是由处理软件在PC机完成。而嵌入式+智能相机是将图像的采集、处理与通信功能高度集成,从而实现多功能、模块化、高可靠性的嵌入式机器视觉解决方案。
目前市面上普遍采用工业相机搭配工控机或者智能相机的方式来完成视觉应用。但工业相机搭配工控机的操作复杂,成本昂贵,体积较大,不易于安装与携带,同时后续维护难度大,检测操作也较为繁琐;而智能相机因其的高集成度的原因导致其灵活性也相对较差。
中国专利CN201610122709.8公开了一种一种机器视觉控制方法及机器人控制器与机器人控制系统,通过网络摄像头进行图像采集,通过嵌入式双核微处理器进行控制处理,将机器视觉和机器人控制器集成到同一控制器上,体积小功耗低便于移动,用户应用时只需要采购通用网络摄像头,无须另外采购专用机器视觉设备。但现有的机器人或机械手部分标配有固定在机械手上或外置的工业相机,若使用该专利技术,则导致机器人或机械手所配置的工业相机成了摆设,严重浪费了资源。
发明内容
本发明的所要解决的技术问题在于提供一种能够直接应用到机器人或机械手所配置的工业相机的基于示教器的视觉处理一体化系统及其应用方法。
本发明解决上述技术问题的技术方案为:
一种基于示教器的视觉处理一体化系统,包括如下模块:
CCD设置模块,用于设置工业相机的相关参数,保障视觉检测的可行性;
机械手连接设置模块,用于按照对应的机械手选择对应的视觉处理功能;
应用类型设置模块,用于调节工业相机与机械手的同步度;
模板设置模块,用于按照工件种类配置对应的工作模板,步骤建立单一工件对应的机械手所处坐标系;
手眼标定模块,用于调节工业相机与机械手的坐标系,使工业相机与机械手统一完成视觉应用;
执行模块,通过写入机械手寄存器变量实现视觉应用。
具体的,所述CCD设置模块中的相关参数为工业相机的曝光度与增益度。
具体的,所述机械手连接设置模块中,预先将机械手对应的视觉处理功能进行储存,在实际运用时通过应用的机械手调取已储存的对应的是就处理功能。
具体的,所述应用类型设置模块中,按照工业相机与机器手的连接方式,调用不同同步度,所述同步度包括移动模式与固定模式。
具体的,所述手眼标定模块中,按照工件对应的坐标系,调节机械手所在的坐标系,使其与工件相对应,工业相机的坐标系随机械手所在的坐标系变动而变动。
本发明解决上述技术问题的另一种技术方案为:
一种基于示教器的视觉处理一体化应用方法,包括如下步骤:
CCD设置,用于设置工业相机的相关参数,保障视觉检测的可行性;
机械手连接设置,用于按照对应的机械手选择对应的视觉处理功能;
应用类型设置,用于调节工业相机与机械手的同步度;
模板设置,用于按照工件种类配置对应的工作模板,步骤建立单一工件对应的机械手所处坐标系;
手眼标定,用于调节工业相机与机械手的坐标系,使工业相机与机械手统一完成视觉应用;
执行,通过写入机械手寄存器变量实现视觉应用。
具体的,所述CCD设置步骤中的相关参数为工业相机的曝光度与增益度。
具体的,所述机械手连接设置步骤中,预先将机械手对应的视觉处理功能进行储存,在实际运用时通过应用的机械手调取已储存的对应的是就处理功能。
具体的,所述应用类型设置步骤中,按照工业相机与机器手的连接方式,调用不同同步度,所述同步度包括移动模式与固定模式。
具体的,所述手眼标定步骤中,按照工件对应的坐标系,调节机械手所在的坐标系,使其与工件相对应,工业相机的坐标系随机械手所在的坐标系变动而变动。
本发明的具有以下有益效果:基于机器人平台的示教器进行操作,操作方便,可直接在界面上对机器人或机械手与工业相机的参数进行设置,方便实际应用。此外成本低廉,可直接应用现有的工业相机,无需另外采用专用视觉工控机等设备,同时,该产品可以直接应用到不同型号的机器人或机械手、工业相机以及不同种类的工件,只需将数据预先录入示教器中,即可直接调用,尤其适用于机器人教学平台或多功能工业机器人中。
附图说明
图1为本发明基于示教器的视觉处理一体化系统及其应用方法的运行流程图。
图2为本发明基于示教器的视觉处理一体化系统及其应用方法的主界面示意图。
图3为本发明基于示教器的视觉处理一体化系统及其应用方法的CCD设置界面示意图。
图4为本发明基于示教器的视觉处理一体化系统及其应用方法的机械手连接设置界面示意图。
图5为本发明基于示教器的视觉处理一体化系统及其应用方法的应用类型设置界面示意图。
图6为本发明基于示教器的视觉处理一体化系统及其应用方法的模板设置界面示意图。
图7为本发明基于示教器的视觉处理一体化系统及其应用方法的手眼标定界面示意图。
具体实施方式
下面结合附图对本发明做详细说明。
本发明实施例的本发明解决上述技术问题的技术方案为:
一种基于示教器的视觉处理一体化系统如图1-2所示,包括如下模块:
CCD设置模块如图3所示,用于设置工业相机的相关参数,保障视觉检测的可行性;具体的,该模块中的所述相关参数为曝光度与增益度。该模块会将已经预置在示教器中的曝光和增益参数从系统文件中读取并显示在界面中,用户可设置曝光和增益参数,在一定区间内,曝光值越大图像信噪比越高,因而图像越清晰,调整完成后点击确定生效,相应系统文件也会同步进行更新。
机械手连接设置模块如图4所示,用于按照对应的机械手选择对应的视觉处理功能;具体的,该模块预先将机械手对应的视觉处理功能进行储存,在实际运用时通过应用的机械手调取已储存的对应的是就处理功能。该模块会将之前设置的与机械手应的制造商的相关数据从示教器的系统文件中读取,用户可对应选择匹配的制造商,进而对应挑选相对应的视觉处理功能用于视觉应用,选择完成后点击确定生效。
应用类型设置模块如图5所示,用于调节工业相机与机械手的同步度;具体的,该模块中,按照工业相机与机器手的连接方式,调用不同同步度,所述同步度包括移动模式与固定模式。该模块会将之前设置的应用类型从示教器中的系统文件中读取并显示在界面中,用户可设置应用类型,如果现场摄像头是装在机器本体上面的那么对应设置为移动模式,如果摄像头没有安装在机器人本体上,则对应设置为固定模式,选择完成后点击确定生效,相应系统文件也会更新。
模板设置模块如图6所示,用于按照工件种类配置对应的工作模板,步骤建立单一工件对应的机械手所处坐标系;进入模板设置模块之前要先将待抓取物体放置在工业相机的摄像头范围中,然后进入模板设置模块,进行图像采集,采集图像后,模板采集区便会显示当前所采集的图像,建议调整工件位置为正横放或正竖放,方便后续操作,可以多次采集图像直到对工件位置比较满意,用该图像进行模板创建,创建模板成功后依据工件所处的位置,确定操作该工件的机械手对应的坐标系。实际操作时,可以在调整到对应点位是,点击记录点位,之后可以点击运动到点来确定定位是否准确,确定定位准确后,点击返回返回主界面。
手眼标定模块如图7所示,用于调节工业相机与机械手的坐标系,使工业相机与机械手统一完成视觉应用;具体的,该模块中,按照工件对应的坐标系,调节机械手所在的坐标系,使其与工件相对应,工业相机的坐标系随机械手所在的坐标系变动而变动。该模块主要依据模板设置模块中所获取到的坐标系进行评判,进入该模块后,首先要放置标定板在工业相机范围内,如果是首次使用手眼标定,移动距离和偏移角度都是0,标定精度是0.000,其中移动距离代表标定时机器人横向和纵向移动的距离,偏移角度代表机械手旋转的角度。将移动距离和偏移角度输入对应数值并确定后即可设置成功并会更新示教器中的系统文件,如果之前设置过参数并手眼标定过,该模块会将这两个数值和标定精度从示教器系统中读取并显示在界面上。参数设置好后点击开始标定,机器人会在界面显示区域内自动移动9个点,等待标定完成会弹出一个显示标定精度的提示,看是否满足要求,如果不满足请重新标定,满足则完成手眼标定
执行模块,通过写入机械手寄存器变量实现视觉应用。按照上述模块中调节好的数据,直接输入到机械手的寄存器中,进而实现对应的视觉应用。
本发明对示教器视觉处理的实现方案进行改进,将视觉算法模块集成在示教器中,示教器负责图像的采集和处理以及和控制器的通讯。保证了整个系统通讯的稳定和简便性。示教器处理器基于4核处理器实现,处理能力强,实时性高,500万工业相机采集并处理后的图可实时显示。
以上内容是结合具体的优选实施方式对本发明所做的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。

Claims (10)

1.一种基于示教器的视觉处理一体化系统,其特征在于,包括如下模块:
CCD设置模块,用于设置工业相机的相关参数,保障视觉检测的可行性;
机械手连接设置模块,用于按照对应的机械手选择对应的视觉处理功能;
应用类型设置模块,用于调节工业相机与机械手的同步度;
模板设置模块,用于按照工件种类配置对应的工作模板,步骤建立单一工件对应的机械手所处坐标系;
手眼标定模块,用于调节工业相机与机械手的坐标系,使工业相机与机械手统一完成视觉应用;
执行模块,通过写入机械手寄存器变量实现视觉应用。
2.根据权利要求1所述的视觉处理一体化系统,其特征在于:所述CCD设置模块中的相关参数为工业相机的曝光度与增益度。
3.根据权利要求1所述的视觉处理一体化系统,其特征在于:所述机械手连接设置模块中,预先将机械手对应的视觉处理功能进行储存,在实际运用时通过应用的机械手调取已储存的对应的是就处理功能。
4.根据权利要求1所述的视觉处理一体化系统,其特征在于:所述应用类型设置模块中,按照工业相机与机器手的连接方式,调用不同同步度,所述同步度包括移动模式与固定模式。
5.根据权利要求1所述的视觉处理一体化系统,其特征在于:所述手眼标定模块中,按照工件对应的坐标系,调节机械手所在的坐标系,使其与工件相对应,工业相机的坐标系随机械手所在的坐标系变动而变动。
6.一种基于示教器的视觉处理一体化应用方法,其特征在于,包括如下步骤:
CCD设置,用于设置工业相机的相关参数,保障视觉检测的可行性;
机械手连接设置,用于按照对应的机械手选择对应的视觉处理功能;
应用类型设置,用于调节工业相机与机械手的同步度;
模板设置,用于按照工件种类配置对应的工作模板,步骤建立单一工件对应的机械手所处坐标系;
手眼标定,用于调节工业相机与机械手的坐标系,使工业相机与机械手统一完成视觉应用;
执行,通过写入机械手寄存器变量实现视觉应用。
7.根据权利要求6所述的视觉处理一体化应用方法,其特征在于:所述CCD设置步骤中的相关参数为工业相机的曝光度与增益度。
8.根据权利要求6所述的视觉处理一体化应用方法,其特征在于:所述机械手连接设置步骤中,预先将机械手对应的视觉处理功能进行储存,在实际运用时通过应用的机械手调取已储存的对应的是就处理功能。
9.根据权利要求6所述的视觉处理一体化应用方法,其特征在于:所述应用类型设置步骤中,按照工业相机与机器手的连接方式,调用不同同步度,所述同步度包括移动模式与固定模式。
10.根据权利要求6所述的视觉处理一体化应用方法,其特征在于:所述手眼标定步骤中,按照工件对应的坐标系,调节机械手所在的坐标系,使其与工件相对应,工业相机的坐标系随机械手所在的坐标系变动而变动。
CN201810980757.XA 2018-08-27 2018-08-27 一种基于示教器的视觉处理一体化系统及其应用方法 Pending CN109015651A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810980757.XA CN109015651A (zh) 2018-08-27 2018-08-27 一种基于示教器的视觉处理一体化系统及其应用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810980757.XA CN109015651A (zh) 2018-08-27 2018-08-27 一种基于示教器的视觉处理一体化系统及其应用方法

Publications (1)

Publication Number Publication Date
CN109015651A true CN109015651A (zh) 2018-12-18

Family

ID=64625088

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810980757.XA Pending CN109015651A (zh) 2018-08-27 2018-08-27 一种基于示教器的视觉处理一体化系统及其应用方法

Country Status (1)

Country Link
CN (1) CN109015651A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109848964A (zh) * 2019-01-24 2019-06-07 浙江工业大学 基于光学动作捕捉的示教机器人数据采集系统
CN111899629A (zh) * 2020-08-04 2020-11-06 菲尼克斯(南京)智能制造技术工程有限公司 柔性机器人教学系统和方法
CN112621767A (zh) * 2021-01-07 2021-04-09 重庆智能机器人研究院 一种人工智能示教器
CN113664043A (zh) * 2021-08-10 2021-11-19 山东钢铁集团日照有限公司 一种热轧钢卷库的风机自主运行散热系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003114706A (ja) * 2001-10-05 2003-04-18 Matsuura Tekkosho:Kk 多関節汎用ロボットモデルの表示システム
CN101848630A (zh) * 2009-03-25 2010-09-29 富士施乐株式会社 用于部件操纵、部件提取、部件装配的方法和设备
CN105643624A (zh) * 2016-03-04 2016-06-08 南京科远自动化集团股份有限公司 一种机器视觉控制方法及机器人控制器与机器人控制系统
CN108356796A (zh) * 2018-01-12 2018-08-03 宁波易拓智谱机器人有限公司 一种可适配多种工业机器人的示教系统
CN108436909A (zh) * 2018-03-13 2018-08-24 南京理工大学 一种基于ros的相机和机器人的手眼标定方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003114706A (ja) * 2001-10-05 2003-04-18 Matsuura Tekkosho:Kk 多関節汎用ロボットモデルの表示システム
CN101848630A (zh) * 2009-03-25 2010-09-29 富士施乐株式会社 用于部件操纵、部件提取、部件装配的方法和设备
CN105643624A (zh) * 2016-03-04 2016-06-08 南京科远自动化集团股份有限公司 一种机器视觉控制方法及机器人控制器与机器人控制系统
CN108356796A (zh) * 2018-01-12 2018-08-03 宁波易拓智谱机器人有限公司 一种可适配多种工业机器人的示教系统
CN108436909A (zh) * 2018-03-13 2018-08-24 南京理工大学 一种基于ros的相机和机器人的手眼标定方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109848964A (zh) * 2019-01-24 2019-06-07 浙江工业大学 基于光学动作捕捉的示教机器人数据采集系统
CN111899629A (zh) * 2020-08-04 2020-11-06 菲尼克斯(南京)智能制造技术工程有限公司 柔性机器人教学系统和方法
CN111899629B (zh) * 2020-08-04 2022-06-10 菲尼克斯(南京)智能制造技术工程有限公司 柔性机器人教学系统和方法
CN112621767A (zh) * 2021-01-07 2021-04-09 重庆智能机器人研究院 一种人工智能示教器
CN113664043A (zh) * 2021-08-10 2021-11-19 山东钢铁集团日照有限公司 一种热轧钢卷库的风机自主运行散热系统
CN113664043B (zh) * 2021-08-10 2023-10-31 山东钢铁集团日照有限公司 一种热轧钢卷库的风机自主运行散热系统

Similar Documents

Publication Publication Date Title
CN109015651A (zh) 一种基于示教器的视觉处理一体化系统及其应用方法
CN108363508B (zh) 一种手机触控屏Mark定位非接触式视觉检测方法
CN102103435B (zh) 一种交互式电子白板装置及其定位方法
US11338441B2 (en) Calibration system for robot tool and calibration method for the same
CN109556510B (zh) 位置检测装置以及计算机可读存储介质
US7377650B2 (en) Projection of synthetic information
CN102331232B (zh) 一种基于机器视觉的手机卡勾检测装置及检测方法
US20230384576A1 (en) Virtual Slide Stage (VSS) Method For Viewing Whole Slide Images
WO2017147748A1 (zh) 一种可穿戴式系统的手势控制方法以及可穿戴式系统
CN111914693A (zh) 一种人脸姿态调整方法、系统、装置、设备及介质
CN110695520A (zh) 基于视觉的全自动振镜视场校准系统及其校准方法
CN207254659U (zh) 点胶机
WO2018176188A1 (en) Method and apparatus for estimating system error of commissioning tool of industrial robot
WO2018161564A1 (zh) 手势识别系统、方法及显示设备
CN113172636A (zh) 一种自动手眼标定方法、装置及存储介质
CN201223996Y (zh) 一种用于激光材料加工的非同轴定位装置
CN110338750B (zh) 一种眼球追踪设备
CN112672051A (zh) 拍摄方法、装置和电子设备
CN107368104A (zh) 基于手机app和家用智能云台摄像机的任意点定位方法
CN114683267B (zh) 标定方法、装置、电子设备和存储介质
CN203266656U (zh) 一体化危险环境作业机器人辅助操作装置
CN105302310B (zh) 一种手势识别装置、系统及方法
CN201199233Y (zh) 光学检验机
WO2023092638A1 (zh) 头戴显示设备的标定方法、装置、设备、系统及存储介质
WO2018209902A1 (zh) 操作动作在显示屏上的执行方法和操作动作执行装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181218

RJ01 Rejection of invention patent application after publication