CN103386598A - 一种微零件自动对准和装配装置与方法 - Google Patents

一种微零件自动对准和装配装置与方法 Download PDF

Info

Publication number
CN103386598A
CN103386598A CN2013102920973A CN201310292097A CN103386598A CN 103386598 A CN103386598 A CN 103386598A CN 2013102920973 A CN2013102920973 A CN 2013102920973A CN 201310292097 A CN201310292097 A CN 201310292097A CN 103386598 A CN103386598 A CN 103386598A
Authority
CN
China
Prior art keywords
micro
little part
vision
motion platform
little
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013102920973A
Other languages
English (en)
Other versions
CN103386598B (zh
Inventor
张大朋
刘松
李海鹏
张正涛
徐德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Automation of Chinese Academy of Science
Original Assignee
Institute of Automation of Chinese Academy of Science
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Automation of Chinese Academy of Science filed Critical Institute of Automation of Chinese Academy of Science
Priority to CN201310292097.3A priority Critical patent/CN103386598B/zh
Publication of CN103386598A publication Critical patent/CN103386598A/zh
Application granted granted Critical
Publication of CN103386598B publication Critical patent/CN103386598B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Manipulator (AREA)

Abstract

本发明公开了一种基于混合视觉伺服的微零件自动装配装置及方法,该装置包括:三路显微视觉系统,三条视觉联接线,两个运动平台,第一微零件、第二微零件,两条数据线和计算机。本发明还公开了一种基于混合视觉控制的微装配中微零件自动对准和装配方法,该方法首先采用基于位置的视觉控制方法将装配零件运动至装配空间,使得待装配零件的特征区域处于显微视觉系统的视野内;然后建立基于图像雅可比矩阵的视觉伺服控制模型,利用图像特征参数增量控制零件在三维空间的位姿变化,最终完成装配。本发明解决了传统微装配过程中微零件经常移出显微视觉视野的问题,简化了操作工艺,提高了装配效率。

Description

一种微零件自动对准和装配装置与方法
技术领域
本发明涉及微装配领域中零件的自动装配,具体地说是一种在显微视觉信息导引下,采用基于位置和图像的混合视觉控制方法实现微零件姿态的自动对准和装配的装置与方法。
背景技术
随着微机电系统的快速发展,常常涉及不同加工工艺、复杂几何外形以及不同加工材料的产品装配,先进的微小型零件装配技术对于提高微小型产品的制造质量、缩短周期、降低产品成本等方面具有重要的意义。然而,由于显微视觉系统具有景深小、视场小的特点,各路显微视觉几乎没有公共视野,难以构成传统的立体视觉系统。此外,装配过程中零件需要多次进出装配空间,导致零件经常移出显微视觉系统的视场。
发明内容
为了解决上述现有技术中存在的问题,本发明提出一种基于混合视觉伺服的微零件自动对准和装配装置及方法,将基于位置和图像的视觉伺服控制方法结合在一起实现微零件的自动对准和装配。本发明首先采用基于位置的视觉控制方法将装配零件运动至装配空间,使得待装配零件的特征区域处于显微视觉系统的视野内;然后建立基于图像雅可比矩阵的视觉伺服控制模型,利用图像特征参数增量控制零件在三维空间的位姿变化。
为了实现上述目的,根据本发明的一方面,提出一种基于三路显微视觉的微零件自动对准和装配装置,该装置包括:三路显微视觉系统,三条视觉联接线,两个运动平台,第一微零件8、第二微零件11,两条数据线和计算机13,其中:
所述三路显微视觉系统包括:第一显微视觉系统1、第二显微视觉系统2和第三显微视觉系统3,所述三路显微视觉系统相互正交,且分别通过相应的视觉联接线和所述计算机13相连;
第一运动平台7置于所述三路显微视觉系统的视野范围内,并通过数据线9和所述计算机13相连;
所述第一微零件8被夹持在所述第一运动平台7上,通过第一运动平台7控制所述第一微零件8的竖直升降及空间姿态的调整;
所述第二运动平台10置于所述第一运动平台7的一侧,其可以实现沿三个轴的平移和旋转,且通过数据线12和所述计算机13相连;
所述第二微零件11被夹持在所述第二运动平台10上,通过第二运动平台10控制所述第二微零件11在空间的位置和姿态
根据本发明的另一方面,还提出一种基于混合视觉控制的微零件自动装配方法,该方法包括以下步骤:
步骤S1:将第一微零件8夹持在第一运动平台7上,控制所述第一运动平台7进行竖直升降运动,使得第一微零件8进入三路显微视觉系统的视野范围内,并获得第一微零件8的三路清晰的显微视觉图像;
步骤S2:将第二微零件11夹持在第二运动平台10上,控制所述第二运动平台10运动,使得三路显微视觉系统对所述第二微零件11的装配面进行聚焦,获得所述第二微零件11三路清晰的显微视觉图像;
步骤S3:在三路显微视觉信息的导引下,通过调整所述第二运动平台10的运动,使得所述第二微零件11和第一微零件8的中心在竖直方向上对准;
步骤S4:通过控制所述第一运动平台7带动所述第一微零件8在聚焦平面内运动,并记录所述第一运动平台7的运动量,提取运动前后第一微零件8装配部位特征参数的变化量,建立第一微零件8运动控制的图像雅可比矩阵;
步骤S5:提取出第一微零件8与第二微零件11在多路显微视觉系统中的图像特征,通过基于图像雅可比矩阵的视觉伺服控制方式实现第一微零件8的姿态调整,使其与第二微零件11的姿态偏差小于给定范围;
步骤S6:完成第一微零件8和第二微零件11的姿态对准后,依据第一显微视觉系统1和第二显微视觉系统2的信息控制第二微零件11趋近第一微零件8,进行竖直套装,从而完成零件装配。
本发明的有益效果是:本发明充分考虑基于位置和图像的视觉控制方法的优缺点,提出基于混合视觉伺服的微零件自动装配方法,实现微零件姿态的自动对准及装配,解决了传统微装配过程中微零件经常移出显微视觉视野的问题,简化了操作工艺,提高了装配效率。
附图说明
图1为本发明微装配中微零件自动对准和装配装置的结构示意图。
图2为本发明微装配中微零件自动对准和装配方法流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明进一步详细说明。
图1为本发明提出的一种基于混合视觉控制的微装配中微零件自动对准和装配装置的结构示意图,如图1所示,所述装置包括:三路显微视觉系统,三条视觉联接线,两个运动平台7、10,第一微零件8、第二微零件11,两条数据线9、12和计算机13,其中:
所述三路显微视觉系统相互正交,其包括:第一显微视觉系统1、第二显微视觉系统2和第三显微视觉系统3,每一路显微视觉系统均由显微视觉镜头和摄像机组成,三路显微视觉系统分别通过相应的视觉联接线4、5、6和所述计算机13相连,所述三路显微视觉系统1、2和3均通过支架固定在隔振平台上;
第一运动平台7置于所述三路显微视觉系统的视野范围内,其具有竖直升降和绕三个轴旋转四个自由度,这四个自由度均为电机驱动;
所述第一微零件8被夹持在所述第一运动平台7上,通过第一运动平台7控制所述第一微零件8的竖直升降及空间姿态的调整,所述第一运动平台7通过数据线9和所述计算机13相连;
所述第二运动平台10置于所述第一运动平台7的一侧,其可以实现沿三个轴的平移和旋转,其中,三个平移自由度为电动,三个旋转自由度为手动;
所述第二微零件11被夹持在所述第二运动平台10上,通过第二运动平台10控制所述第二微零件11在空间的位置和姿态,所述第二运动平台10通过数据线12和所述计算机13相连。
图2为本发明微装配中微零件自动对准和装配方法流程图,如图2所示,所述方法包括以下步骤:
步骤S1:将第一微零件8夹持在第一运动平台7上,利用先验知识(比如平台的设计尺寸)采用基于位置的控制方法控制所述第一运动平台7进行竖直升降运动,使得第一微零件8进入三路显微视觉系统1、2、3的视野范围内,并获得第一微零件8的三路清晰的显微视觉图像;
步骤S2:将第二微零件11夹持在第二运动平台10上,利用先验知识(比如平台的设计尺寸)采用基于位置的控制方法控制所述第二运动平台10运动,使得三路显微视觉系统1、2、3对所述第二微零件11的装配面进行聚焦,获得所述第二微零件11三路清晰的显微视觉图像;
步骤S3:在三路显微视觉信息的导引下,通过调整所述第二运动平台10的运动,使得所述第二微零件11和第一微零件8的中心在竖直方向上对准;
步骤S4:通过控制所述第一运动平台7带动所述第一微零件8在聚焦平面内运动,并记录所述第一运动平台7的运动量,提取运动前后第一微零件8装配部位特征参数的变化量,建立第一微零件8运动控制的图像雅可比矩阵;
步骤S5:提取出第一微零件8与第二微零件11在多路显微视觉系统中的图像特征,通过基于图像雅可比矩阵的视觉伺服控制方式实现第一微零件8的姿态调整,使其与第二微零件11的姿态偏差小于给定范围;
其中,所述基于图像雅可比矩阵的视觉伺服控制模型如式(1)所示,其利用零件在多路显微视觉系统中清晰图像的图像特征参数增量来控制零件在三维空间的位姿变化。
ΔT x ΔT y ΔT z Δθ x Δθ y Δθ z = J 11 J 12 . . . J 1 n J 21 J 22 . . . J 2 n . . . . . . . . . . . . J m 1 J m 2 . . . J mn Δp 1 Δp 1 . . . Δp i . . . Δp n - - - ( 1 )
其中,ΔTx,ΔTy,ΔTz分别为零件在三维空间沿X,Y,Z轴的相对位置变化量,Δθx,Δθy,Δθz分别为零件在三维空间绕X,Y,Z轴的相对姿态变化量,Δpi是零件在第i路显微视觉系统中清晰图像的图像特征参数增量,i=1,2,3,J11~Jmn是控制零件运动的图像雅可比矩阵的元素。
步骤S6:完成第一微零件8和第二微零件11的姿态对准后,依据第一显微视觉系统1和第二显微视觉系统2的信息控制第二微零件11趋近第一微零件8,进行竖直套装,从而完成零件装配。
在实施中,首先,通过步骤S1~S3采用基于位置的视觉控制方法控制第一微零件8和第二微零件11进入三路显微视觉系统1、2、3的视野范围内;然后,通过步骤S4~S6采用基于图像的视觉控制方法实现第一微零件8和第二微零件11位姿的自动对准及装配。其中,步骤S1~S3调整微零件8和11的运动信息被记录下来,下一次进行装配时可快速将微零件调整至三路显微视觉系统1、2、3的视野中,由此简化了微装配过程中的调整流程,提高了微装配的效率。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种基于混合视觉控制的微装配中微零件自动对准和装配装置,其特征在于,该装置包括:三路显微视觉系统,三条视觉联接线,两个运动平台,第一微零件(8)、第二微零件(11),两条数据线和计算机(13),其中:
所述三路显微视觉系统包括:第一显微视觉系统(1)、第二显微视觉系统(2)和第三显微视觉系统(3),所述三路显微视觉系统相互正交,且分别通过相应的视觉联接线和所述计算机(13)相连;
第一运动平台(7)置于所述三路显微视觉系统的视野范围内,并通过数据线(9)和所述计算机(13)相连;
所述第一微零件(8)被夹持在所述第一运动平台(7)上,通过第一运动平台(7)控制所述第一微零件(8)的竖直升降及空间姿态的调整;
所述第二运动平台(10)置于所述第一运动平台(7)的一侧,其可以实现沿三个轴的平移和旋转,且通过数据线(12)和所述计算机(13)相连;
所述第二微零件(11)被夹持在所述第二运动平台(10)上,通过第二运动平台(10)控制所述第二微零件(11)在空间的位置和姿态。
2.根据权利要求1所述的装置,其特征在于,每一路显微视觉系统均由显微视觉镜头和摄像机组成。
3.根据权利要求1所述的装置,其特征在于,所述三路显微视觉系统均通过支架固定在隔振平台上。
4.根据权利要求1所述的装置,其特征在于,所述第一运动平台(7)具有竖直升降和绕三个轴旋转四个自由度,这四个自由度均为电机驱动。
5.根据权利要求1所述的装置,其特征在于,所述第二运动平台(10)的三个平移自由度为电动,三个旋转自由度为手动。
6.一种基于混合视觉控制的微装配中微零件自动对准和装配方法,其特征在于,该方法包括以下步骤:
步骤S1:将第一微零件(8)夹持在第一运动平台(7)上,控制所述第一运动平台(7)进行竖直升降运动,使得第一微零件(8)进入三路显微视觉系统的视野范围内,并获得第一微零件(8)的三路清晰的显微视觉图像;
步骤S2:将第二微零件(11)夹持在第二运动平台(10)上,控制所述第二运动平台(10)运动,使得三路显微视觉系统对所述第二微零件(11)的装配面进行聚焦,获得所述第二微零件(11)三路清晰的显微视觉图像;
步骤S3:在三路显微视觉信息的导引下,通过调整所述第二运动平台(10)的运动,使得所述第二微零件(11)和第一微零件(8)的中心在竖直方向上对准;
步骤S4:通过控制所述第一运动平台(7)带动所述第一微零件(8)在聚焦平面内运动,并记录所述第一运动平台(7)的运动量,提取运动前后第一微零件(8)装配部位特征参数的变化量,建立第一微零件(8)运动控制的图像雅可比矩阵;
步骤S5:提取出第一微零件(8)与第二微零件(11)在多路显微视觉系统中的图像特征,通过基于图像雅可比矩阵的视觉伺服控制模型实现第一微零件(8)的姿态调整,使其与第二微零件(11)的姿态偏差小于给定范围;
步骤S6:完成第一微零件(8)和第二微零件(11)的姿态对准后,依据第一显微视觉系统(1)和第二显微视觉系统(2)的信息控制第二微零件(11)趋近第一微零件(8),进行竖直套装,从而完成零件装配。
7.根据权利要求6所述的方法,其特征在于,所述步骤S1和步骤S2中,利用先验知识以及采用基于位置的控制方法来控制所述第一运动平台(7)和所述第二运动平台(10)进行运动。
8.根据权利要求6所述的方法,其特征在于,所述步骤S5中,所述基于图像雅可比矩阵的视觉伺服控制方式为利用零件在多路显微视觉系统中清晰图像的图像特征参数增量来控制零件在三维空间的位姿变化。
9.根据权利要求6所述的方法,其特征在于,所述步骤S5中,所述基于图像雅可比矩阵的视觉伺服控制模型表示为:
ΔT x ΔT y ΔT z Δθ x Δθ y Δθ z = J 11 J 12 . . . J 1 n J 21 J 22 . . . J 2 n . . . . . . . . . . . . J m 1 J m 2 . . . J mn Δp 1 Δp 1 . . . Δp i . . . Δp n ,
其中,ΔTx,ΔTy,ΔTz分别为零件在三维空间沿X,Y,Z轴的相对位置变化量,Δθx,Δθy,Δθz分别为零件在三维空间绕X,Y,Z轴的相对姿态变化量,Δpi是零件在第i路显微视觉系统中清晰图像的图像特征参数增量,i=1,2,3,J11~Jmn是控制零件运动的图像雅可比矩阵的元素。
CN201310292097.3A 2013-07-12 2013-07-12 一种微零件自动对准和装配装置与方法 Expired - Fee Related CN103386598B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310292097.3A CN103386598B (zh) 2013-07-12 2013-07-12 一种微零件自动对准和装配装置与方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310292097.3A CN103386598B (zh) 2013-07-12 2013-07-12 一种微零件自动对准和装配装置与方法

Publications (2)

Publication Number Publication Date
CN103386598A true CN103386598A (zh) 2013-11-13
CN103386598B CN103386598B (zh) 2016-06-15

Family

ID=49531121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310292097.3A Expired - Fee Related CN103386598B (zh) 2013-07-12 2013-07-12 一种微零件自动对准和装配装置与方法

Country Status (1)

Country Link
CN (1) CN103386598B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104924067A (zh) * 2015-06-04 2015-09-23 苏州晓创光电科技有限公司 一种基于计算机视觉感知信息的矩形贴片自动纠偏方法
CN105598694A (zh) * 2016-03-29 2016-05-25 中国工程物理研究院激光聚变研究中心 一种微米级的轴与孔的装配装置
CN106835299A (zh) * 2017-04-19 2017-06-13 南京航空航天大学 基于机器视觉导引的微孔内污物自动清除系统及方法
CN108672637A (zh) * 2017-01-06 2018-10-19 柯维自动化设备(上海)有限公司 用于连接工件对的自动针砧压机
CN109158871A (zh) * 2018-09-20 2019-01-08 上海交通大学 一种非向心多孔轴精密视觉连续对准系统及其方法
CN110450072A (zh) * 2019-08-26 2019-11-15 上海大学 一种基于三维成像反馈的微纳末端互定位装夹方法
CN112965372A (zh) * 2021-02-01 2021-06-15 中国科学院自动化研究所 基于强化学习的微零件精密装配方法、装置和系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100212133A1 (en) * 2009-02-26 2010-08-26 Lawrence Livermore National Security, Llc Method and system for assembling miniaturized devices
CN101972928A (zh) * 2010-08-19 2011-02-16 北京理工大学 一种用于微小型结构件的自动对位装配系统
CN102842117A (zh) * 2012-07-13 2012-12-26 浙江工业大学 显微视觉系统中运动误差矫正方法
CN102873523A (zh) * 2012-09-13 2013-01-16 中国科学院自动化研究所 基于显微视觉的微器件装配在线检测装置
CN103009390A (zh) * 2012-12-20 2013-04-03 中国科学院自动化研究所 基于显微视觉的对准和抓取柱状微零件的方法与装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100212133A1 (en) * 2009-02-26 2010-08-26 Lawrence Livermore National Security, Llc Method and system for assembling miniaturized devices
CN101972928A (zh) * 2010-08-19 2011-02-16 北京理工大学 一种用于微小型结构件的自动对位装配系统
CN102842117A (zh) * 2012-07-13 2012-12-26 浙江工业大学 显微视觉系统中运动误差矫正方法
CN102873523A (zh) * 2012-09-13 2013-01-16 中国科学院自动化研究所 基于显微视觉的微器件装配在线检测装置
CN103009390A (zh) * 2012-12-20 2013-04-03 中国科学院自动化研究所 基于显微视觉的对准和抓取柱状微零件的方法与装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104924067A (zh) * 2015-06-04 2015-09-23 苏州晓创光电科技有限公司 一种基于计算机视觉感知信息的矩形贴片自动纠偏方法
CN105598694A (zh) * 2016-03-29 2016-05-25 中国工程物理研究院激光聚变研究中心 一种微米级的轴与孔的装配装置
CN108672637A (zh) * 2017-01-06 2018-10-19 柯维自动化设备(上海)有限公司 用于连接工件对的自动针砧压机
CN108672637B (zh) * 2017-01-06 2020-09-08 柯维自动化设备(上海)有限公司 用于连接工件对的自动针砧压机
CN106835299A (zh) * 2017-04-19 2017-06-13 南京航空航天大学 基于机器视觉导引的微孔内污物自动清除系统及方法
CN109158871A (zh) * 2018-09-20 2019-01-08 上海交通大学 一种非向心多孔轴精密视觉连续对准系统及其方法
CN110450072A (zh) * 2019-08-26 2019-11-15 上海大学 一种基于三维成像反馈的微纳末端互定位装夹方法
CN112965372A (zh) * 2021-02-01 2021-06-15 中国科学院自动化研究所 基于强化学习的微零件精密装配方法、装置和系统

Also Published As

Publication number Publication date
CN103386598B (zh) 2016-06-15

Similar Documents

Publication Publication Date Title
CN103386598A (zh) 一种微零件自动对准和装配装置与方法
CN204322752U (zh) 一种3d激光打标机的可控距离指示装置
CN107792179B (zh) 一种基于车载环视系统的泊车引导方法
CN103273310B (zh) 一种基于多路显微视觉的微零件自动对准方法
CN109079799B (zh) 一种基于仿生的机器人感知控制系统及控制方法
CN108972557A (zh) 微零件位姿自动对准装置及其方法
CN104836954B (zh) 变焦跟踪方法及其装置
CN103158161B (zh) 基于单目显微视觉的微管微球对准和装配装置与方法
CN106303264A (zh) 基于镜头倾斜可控马达和快速对焦传感器的摄像模组及控制方法
CN106272437B (zh) 一种用于并联机器人双目视觉定位的最优视场求取装置
CN103676072B (zh) 控制装置、致动器、图像模糊校正装置、置换透镜、成像装置和自动台
CN103170823B (zh) 一种单目显微视觉引导下微管插入微孔的控制装置及方法
CN103676071A (zh) 控制装置、致动器、图像模糊校正装置及可交换透镜
CN104280401A (zh) 用于汽车部件的质量检测的设备及方法
CN102147556A (zh) 用于移动设备的对焦方法、装置和移动设备
CN104395042A (zh) 机器人系统及部件的制造方法
CN104298244A (zh) 一种工业机器人三维实时高精度定位装置及方法
CN106041083A (zh) 用于制造三维物体的扫描系统、方法及三维物体制造设备
CN103341750B (zh) 一种用于柔性微零件的装配系统与方法
CN106210533A (zh) 双相机五视角倾斜摄影实现方法及倾斜摄影装置
CN104469170A (zh) 双目摄像装置、图像处理方法及装置
CN103192399B (zh) 一种基于目标运动的显微视觉手眼标定系统及方法
CN110928311B (zh) 一种基于全景相机下直线特征的室内移动机器人导航方法
CN104143272A (zh) 一种基于互动教学的立体影像展示机
CN108909449A (zh) 一种无人驾驶汽车油门控制装置及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160615