CN103192397A - 视觉机器人离线编程方法和系统 - Google Patents

视觉机器人离线编程方法和系统 Download PDF

Info

Publication number
CN103192397A
CN103192397A CN2012100053279A CN201210005327A CN103192397A CN 103192397 A CN103192397 A CN 103192397A CN 2012100053279 A CN2012100053279 A CN 2012100053279A CN 201210005327 A CN201210005327 A CN 201210005327A CN 103192397 A CN103192397 A CN 103192397A
Authority
CN
China
Prior art keywords
target
robot
image
camera
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012100053279A
Other languages
English (en)
Other versions
CN103192397B (zh
Inventor
刘晓帆
徐方
曲道奎
邹风山
李崇
郑春晖
董状
王金涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang Siasun Robot and Automation Co Ltd
Original Assignee
Shenyang Siasun Robot and Automation Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang Siasun Robot and Automation Co Ltd filed Critical Shenyang Siasun Robot and Automation Co Ltd
Priority to CN201210005327.9A priority Critical patent/CN103192397B/zh
Publication of CN103192397A publication Critical patent/CN103192397A/zh
Application granted granted Critical
Publication of CN103192397B publication Critical patent/CN103192397B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明公开了一种视觉机器人离线编程方法,包括以下步骤:S100:设定机器人各轴的旋转角度作为运动的约束条件;S200:应用摄像机采集目标图像;S300:应用采集的图像,提取目标的边缘和顶点信息;S400:应用目标的边缘和顶点信息构建目标的三维模型;S500:应用目标的三维模型生成目标模型的点云数据;S600:机器人获取晶圆片的存放位置的坐标信息;S700:依据存放位置的坐标信息以及点云数据计算机器人电机相关运动参数,并存储运动参数。本技术方案中的机器人能针对目标的图像信息,自动离线编程生成机器人的运动轨迹,无需工作人员的控制,从而使工作人员远离工作车间,避免给工作车间带来污染。

Description

视觉机器人离线编程方法和系统
技术领域
本发明涉及一种机器人技术领域,属于半导体自动化加工领域的设备,尤其涉及一种能实现离线生成机器人运动轨迹的作业程序的视觉机器人离线编程方法和视觉机器人离线编程系统。
背景技术
人类进入21世纪,科技高速发展,已经开始积极的向地球外的领域开拓,开发太空和利用空间的能力已经成为衡量一个国家综合实力和大国地位的重要特征。机器人正逐渐成为未来开发太空的一种重要手段。遥控操作时机器人的一种重要控制方式,用遥控操作机器人进行作业能提高作业的安全性以及经济性。
目前,几乎所有的机器人操作平台都具有视觉系统,视觉系统也是实际操作过程中取得机器人运作信息的重要途径。但现有机器人的操作平台采用的视觉系统缺乏主动视觉功能,从而还需要人工的调整,重新搜索目标物,效果还不好,不能最大限度的发挥视觉系统的作用。此外,现有的视觉系统仅具有单目视觉,其视野有限,不能精确定位,从而限制了视觉系统的应用,不利于操作任务的顺利完成。
在专利号为CN101152717A的名称为“一种用于离线生成机器人切割作业程序的方法”中,该专利利用相配套开发的离线编程软件读取待加工工件的图形文件,自动编程直接生成切割机器人的控制程序。该技术方案利用已有的成熟的三维制图软件CAD构造工件的几何图形,并在图形中利用给线着色的方式对待加工部位进行标识,运行离线编程软件读取图形的IGS文件生成机器人的控制程序,传送至机器人后完成切割作业。该方法应用读取含有加工信息的工件的CAD图形的方法来直接生成完整的可用于生成加工的机器人的作业程序。但是,该技术方案中,根据生成的CAD图,需要被机器人加工的部位要用颜色线标识出,而且需用约定好的不同的颜色标识出来,这样明显增加了工作量,而且精确度不够高。
在专利号为CN101698299A名称为“一种用于气浮机械臂遥操作的三目视觉装置”的专利中,本专利根据三目视觉摄像头中三个摄像头的相对位置关系和目标物体在三个摄像头图像界面中的位置坐标,计算出目标物体到三目视觉摄像头重主摄像头得深度信息,从而提供给遥操作人员进行辅助决策。本技术方案,不对目标物体进行精确定位。
集成电路(IC)是电子信息产业的核心,是推动国民经济和社会信息化发展的最主要的高新技术之一,一个国家半导体行业的先进程度显示了这个国家高新技术的先进程度。洁净机器人是用于半导体生产中负责在不同的生产工序中搬运晶圆的任务,像日本、韩国和台湾等半导体工业发达的国家和地区已经在20世纪八九十年代研发了自己的IC机器人。国家在十五“863”计划中,将集成电路制造装备列入了重大专项计划,实现我国集成电路制造装备的局部突破和IC装备产业的跨越式发展。在晶圆自动化生产线上,晶圆托盘一般放置在机器人机械手臂的末端,由机器人去完成晶圆的传输。
传统的机器人作业程序的生成是车间现场由操作人员一边操纵机器人在工件表面示教特征点,一边在示教编程器上编制程序的方法完成。传统的示教方法由于需要较多的人的参与,即使操作者有较高的技能也会有不同程度的误差存在。如选点是否合理、示教点的准确与否、工具与工件的夹角是否准确等问题都可能导致实际工件加工时产生较大的误差。另外,工件越复杂,需要示教点就越多,往往在示教程序时就需要投入较多的时间,导致机器人的使用效率不够高。总之,这种示教方式存在诸多的缺点:1、机器人在示教过程中不能工作,影响工作效率;2、示教过程中需要工作人员在机器人附近进行引导,而洁净机器人是需要工作在一定洁净度等级的洁净环境中,工作人员的进入会在一定程度上给洁净室带来污染;3、工作人员在对机器人示教的过程中,若出现失误会导致机器人手臂与人发生碰撞,给机器人结构和工作人员带来伤害。
发明内容
本发明主要解决的技术问题是提供一种实现对机器人运动轨迹进行离线编程的方法,通过该机器人,自动完成晶圆传输等工作,减少了人工的介入,避免了工作人员给洁净室等带来一定程度的污染等。
为解决上述技术问题,本发明采用的一个技术方案是提供一种视觉机器人离线编程方法,包括以下步骤:
S100:设定机器人各轴的旋转角度作为运动的约束条件;
S200:应用摄像机采集目标图像;
S300:应用采集的图像,提取目标的边缘和顶点信息;
S400:应用目标的边缘和顶点信息构建目标的三维模型;
S500:应用目标的三维模型生成目标模型的点云数据;
S600:机器人获取晶圆片的存放位置的坐标信息;
S700:依据存放位置的坐标信息以及点云数据计算机器人电机相关运动参数,并存储运动参数。
具体的,步骤S300中,提取目标的边缘信息的方法包括:
S311:制作横向差分模板;
S312:对差分模板滤波;
S313:检测图像中各像素点的八邻域点的值是否满足角点条件,若满足角点条件,则保留;若不满足,则剔除掉;
S314:计算角点响应函数值;
S315:应用角点响应函数值对保留下的角点值再次进行检测,剔除掉非角点像素点,从而取得目标的边缘信息。
在一改进的方案中,提取边缘信息采用的是Priwitt边缘检测算法。
具体的,步骤S300中,提取目标的顶点信息的方法包括:
S321:对图像的角点进行检测;
S322:对图像像素坐标和世界坐标做归一化处理;
S323:获取摄像机内参数以及外参数值;
S324:优化摄像机内参数以及外参数值,从而取得目标的顶点信息。
在一改进的方案中,提取目标的顶点信息采用的是Harris角点检测方法。
具体的,所述运动目标的运动轨迹文件包括运动目标的位移以及运动目标的方向。
为了解决上述技术问题,本发明采用的另一个技术方案是提供一种视觉机器人离线编程系统,包括操作单元、摄像单元、转换单元、图像编辑单元、图像处理单元、数据转换单元、位移分析单元以及运动分析单元;所述操作单元用于设定机器人各轴的旋转角度作为运动的约束条件,即;所述摄像单元用于采集目标的图像;所述转换单元将采集的目标图像转为数字图像,并提取目标的边缘和顶点信息;所述图像处理单元用于应用目标的边缘和顶点信息构建目标的三维模型;所述数据转换单元用于生成目标模型的点云数据;所述位移分析单元用于获取晶圆片的存放位置的坐标信息;所述运动分析单元用于依据存放位置的坐标信息以及点云数据计算机器人电机相关运动参数,并存储运动参数。
其中,所述摄像单元包括多个摄像机、相机固定座、旋转轴以及底座;所述摄像机固定于相机固定座上;相机固定座通过旋转轴与底座相连,通过底座安装于机器人本体上。
其中,所述摄像机为三个,三个摄像机在相机固定座上位于同一水平线上。
其中,固定于相机固定座上的摄像机位置根据特定参数设定,所述参数包括:基线距离、坐标变换矩阵以及每个摄像机的单应性矩阵。
本发明的有益效果是:通过视觉机器人的摄像单元获取目标的图像信息,提取目标的边缘以及顶点信息后,确定目标的三维坐标,最后通过目标的三维坐标信息对机器人的运动轨迹进行规划,从而得到机器人相关部件如手臂以及腿部等的运动轨迹。该技术方案中的机器人能针对目标的图像信息,自动离线编程生成机器人的运动轨迹,无需工作人员的控制,从而使工作人员远离工作车间,避免给工作车间带来污染。该机器人自动化程度高,机器人运动轨迹完全由计算机计算出。
附图说明
图1是本发明技术方案的视觉机器人离线编程方法的流程图。
图2是本发明技术方案的提取目标的边缘信息的流程图。
图3是本发明技术方案的提取目标的顶点信息的流程图。
图4是本发明技术方案的八领域点的位置图。
图5是本发明技术方案的摄像单元的正面视图。
图6是本发明技术方案的摄像单元的俯视图。
标注说明:
1摄像机;2相机固定座;3旋转轴;4底座。
具体实施方式
为详细说明本发明的技术内容、构造特征、所实现目的及效果,以下结合实施方式并配合附图详予说明。
请参阅图1,本发明提供的一种视觉机器人离线编程方法,包括以下步骤:
S100:设定机器人各轴的旋转角度作为运动的约束条件;
S200:应用摄像机采集目标图像;
S300:应用采集的图像,提取目标的边缘和顶点信息;
S400:应用目标的边缘和顶点信息构建目标的三维模型;
S500:应用目标的三维模型生成目标模型的点云数据;
S600:机器人获取晶圆片的存放位置的坐标信息;
S700:依据存放位置的坐标信息以及点云数据计算机器人电机相关运动参数,并存储运动参数。
本技术方案经过步骤S500至S700生成机器人的运动轨迹文件以及机器人电机相关运动参数,从而使机器人的机械手臂以及相关部件向特定的方向做预定的动作,实现了离线自动编程,满足了用户的需求。
具体的,步骤S300中,应用现有的角点检测算法以及边缘检测算法的原理取得目标的边缘信息以及顶点信息。常见的基于模板的角点检测算法有Kitchen-Rosenfeld角点检测算法、Harris角点检测算法、KLT角点检测算法及SUSAN角点检测算法。角点作为图像上的特征点包含有重要的信息,在图像融合和目标跟踪以及三维重建中具有重要的应用价值,但是基于实际应用需求,从角点检测的快速性、准确性、鲁棒性等要求出发,可以看出以上的基于模板的角点检测算法各有弊益,至极基于图像的角点检测基本上是全局搜索,基于边缘轮廓的角点检测数据量较少,可以采用多分辨分析并行处理,从灰度图像得到边缘轮廓曲线要经过两次以上的全局搜索,速度并不是很快,但对角点的误检和漏检要比直接基于图像的方法好很多。如果在得到轮廓曲线的过程中应用一些其他的变换方法,就计算的速度而言,下降不少,所以一般速度较快、较准确的角点检测使用直接基于图像模板的方法就完全可以满足需要,但是如果对角点的完备性要求较高,那么使用基于轮廓线的多角度分析方法应该给予考虑。由于目标顶点的位置信息是机器人准确操作晶圆片的关键因素,所以本技术方案中提取目标的顶点信息采用的是Harris角点检测方法,该方法具有准确的定位性能、很高的重复检测率、具有对噪声的鲁棒性和具有较高的计算效率,参考图3所示,其在本技术方案中的应用具体包括以下步骤:
S321:对图像的角点进行检测;
S322:对图像像素坐标和世界坐标做归一化处理,以方便做矩阵运算;
S323:获取摄像机内参数和外参数值;该内参数具体为相机的畸变,外参数具体为摄像机的旋转和平移值;
S324:优化摄像机内参数以及外参数值,从而取得目标的顶点信息。Harris角点检测方法具有准确的定位性能、很高的重复检测率、对噪声鲁棒性好以及计算效率较高等优点。该技术方案,应用Harris角点检测方法确定角点后,再对图像的像素坐标以及世界坐标做归一化处理,获取摄像机的内参数以及外参数。具体的,应用了单应性矩阵获取内参数以及外参数。在视觉信息计算中,单应性矩阵的求解在摄像机标定的过程中具有重要的意义,单应性矩阵中包含着摄像机的内参数矩阵、旋转向量和平移向量。假设三维空间有一点Q=[X Y Z1]T,到成像仪上的q[x y 1]T映射,设单应性矩阵以Hs为比例系数。则Q和q之间的关系可表示为q=ShQ。在点映射过程中,点要经过旋转和平移的物理变换,所以设物理变换坐标W=[R T],R为旋转向量,T为平移向量。然后再投射过程中,根据得到的摄像机的内参矩阵M,所以q=sMWQ,从而推算出H=sMW。通过单应性矩阵,把源图像平面上的点击位置与目标图像平面的点击位置联系了起来。
本技术方案中,在张正友标定方法中,将目标三维坐标和图像坐标之间的由内外参数构成的矩阵称为单应性矩阵H,具体的,张正友标定方法需要拍摄若干张标定模板的图像,为了提高最后非线性优化求解的精度,需要从不同角度拍摄图片。具体的,该摄像机标定方法采用张正友标定方法的步骤如下:
1、先将三目相机固定在机器人上,并将机器人手臂停留在初始化位置上;
2、打印一张模板并贴在一个平面上;
3、变换模板的位置和角度,使得相机从不同角度拍摄若干张模板图象;
4、检测出图象中的特征点,本实施例中,特征点具体的为数字图像的黑白格的交点;
5、求出摄像机的内参数和外参数;
6、求出畸变系数;
7、优化求精。
在该标定方法中,由于图像坐标系为一个3*1阶矩阵,目标坐标系为一个4*1阶矩阵,则H为3*4阶矩阵,但张正友标定方法事先约定标定模板所在平面在目标坐标系中z=0处,这样H为3*3阶矩阵,通过图像坐标和目标坐标可求出H。假设H=[h1 h2 h3]=λA[r1 r2 t],其中A为摄像机内参数,[r1 r2 t]为摄像机外参数,λ为尺度因子。由坐标正交的关系和坐标系矢量模为1的两个约束条件可以得到下面两个方程式:
h 1 T A - T A - 1 b 2 = 0
h 1 T A - T A - 1 b 1 = h 2 T A - T A - 1 b 2
经过推导可得B为:
B = A - T A - 1 = B 11 B 12 B 13 B 12 B 22 B 23 B 13 B 23 B 33 = 1 α 2 - c α 2 β c v 0 - u 0 β α 2 β α 2 β c 2 α 2 β 2 + 1 β 2 - c ( cv 0 - u 0 β ) α 2 β 2 - v 0 β 2 c v 0 - u 0 β α 2 β - c ( cv 0 - u 0 β ) α 2 β 2 - v 0 β 2 ( cv 0 - u 0 β ) 2 α 2 β 2 + v 0 2 β 2 + 1
设b=[B11 B12 B22 B13 B23 B33]T
并且vij=[hi1hj1 hi1hj2+hi2hj1 hi2hj2 hi3hj1+hi1hj3 hi3hj2+hi2hj3 hi3hj3]T
通过前述坐标系两个约束条件可得以下方程:
v 12 T ( v 11 - v 22 ) T b = 0
求解此方程可得摄像机的内参数,并通过求解以下方程可得到摄像机的外参数
r1=λA-1h1,r2=λA-1h2,r3=r1×r2,t=λA-1h3
其中,λ=1/||A-1h1||=1/||A-1h2||。通过单应性矩阵,我们把源图像平面上的点击位置与目标图像平面的点击位置联系了起来,从多个视场采集图片,并计算相应的单应性矩阵,从而求解摄像机的内外参数(内参数相对于摄像机的视场是不变的)。接着再对取得的摄像机的内外参数通过LM非线性优化得到角点的精确解,从而获得顶点信息。
在一改进的技术方案中,步骤S300中,提取边缘信息采用的是Priwitt边缘检测算法,参考图2所示,该方法具体包括以下步骤:
S311:制作横向差分模板,其采用的是Priwitt边缘检测算法,所以制作横向Priwitt差分模板;
S312:对差分模板滤波;具体的,利用9*9高斯窗口对差分模板滤波;
S313:检测图像中各像素点的八邻域点的值是否满足角点条件,若满足角点条件,则保留;若不满足,则剔除掉;
S314:计算角点响应函数值;
S315:应用角点响应函数值对保留下的角点值再次进行检测,剔除掉非角点像素点,从而取得目标的边缘信息。由于Harris角点检测方法会将图像中的所有满足角点条件的点检测出来,在剔除掉非角点像素点时可将判断阈值设置为较大的值,这样可以得到目标顶点的像素。
具体的,步骤S313中,采集到的图像的角点是计算机摄像机摄像头的窗口朝任意方向移动都导致图像灰度明显变化的点,假设对于像素点(x,y)平移距离(u,v)产生的灰度变化E(u,v)为:
E ( u , v ) = Σ x , y w ( x , y ) [ I ( x + u , y + v ) - I ( x , y ) ] 2
由I(x+u,y+v)=I(x,y)+Ixu+Iyv+O(u2,v2),可得:
E ( u , v ) Σ x , y w ( x , y ) [ I x u + I y v + O ( u 2 , v 2 ) ] 2
≅ [ u , v ] M u v
其中, M = Σ x , y w ( x , y ) I x 2 I x I y I x I y I y 2 , 求解下面的角点响应函数:
R=detM-k(traceM)2
其中,detM=λ1λ2,traceM=λ1+λ2,k一般取0.04~0.06之间。如果R>0,则该像素点为角点。具体的,该角点为像素点灰度值不同的点的个数大于2小于7的点。进一步的,步骤S313中,像素点的八邻域点值是指图像中任一点总有8个点和它相邻,即八领域点。如图4所示,设定目标点正上方的点为0领域点,按逆时针方向八领域点分别标为0领域点、1领域点……7领域点。他们相对目标点的坐标分别为(0,-1),(-1,-1),(-1,0),(-1,1),(0,1),(1,1),(1,0),(1,-1)。显然互为领域点的两个点符合这样的规律:当A点为B点的X领域点时,B点必是A点的按八进制计算(X+4)结果的个位数表示的领域点。
本发明还提供一种视觉机器人离线编程系统,包括操作单元、摄像单元、转换单元、图像编辑单元、图像处理单元、数据转换单元、位移分析单元以及运动分析单元;所述操作单元用于设定各轴的旋转角度作为机器人运动的约束条件,即;所述摄像单元用于采集目标的图像;所述转换单元将采集的目标图像转为数字图像,并提取目标的边缘和顶点信息;所述图像处理单元用于应用目标的边缘和顶点信息构建目标的三维模型;所述数据转换单元用于生成目标模型的点云数据;所述位移分析单元用于获取晶圆片的存放位置的坐标信息;所述运动分析单元用于依据存放位置的坐标信息以及点云数据计算机器人电机相关运动参数,并存储运动参数。
参见附图5以及图6,所述图像采集单元包括多个摄像机1、相机固定座2、旋转轴3以及底座4;所述摄像机1固定于相机固定座2上;相机固定座通过2旋转轴3与底座4相连,通过底座4安装于机器人本体上。本技术方案,将摄像机放置在机器人本体的旋转轴3上方,通过底座4与旋转轴3连接,旋转轴可同时带动机器人的机械手臂转动和摄像机1转动,使摄像机的镜头方向与机械手臂将要运动的方向相同。
在本发明的某一实施例中,所述摄像机为三个,三个摄像机在相机固定座上位于同一水平线上。在又一改进的技术放中,固定于相机固定座2上的摄像机位置根据特定参数设定,所述参数包括:基线距离、坐标变换矩阵以及每个摄像机的单应性矩阵。摄像机应用三个,采用三目视觉技术,克服现有操作单目视觉装置存在的不足,以用于机器人机械手臂遥操作。机器人的机械手臂运动前利用三个摄像机对目标的空间坐标进行定位,确定目标的各个顶点三维坐标,然后通过目标的三维坐标信息对机器人的运动路径进行规划,计算出机器人的机械手臂的运动轨迹以及机器人内相关电机的运动参数。
本技术方案,可以应用于IC设计产业,在晶圆自动化生成线上,晶圆托盘一般放置在机器人机械手臂的末端,由机器人去完成晶圆的传输。应用视觉机器人,自动采集晶圆的图像信息,并生成三维坐标信息以及机器人的相关运动参数存储于机器人内部控制中心,并控制机器人运动。通过该技术方案,能充分利用机器人工作,减少机器人的非工作时间,当对下一任务进行编程时,机器人仍然可以在生长线上工作,使工作人员远离晶圆生产的洁净室,避免给洁净室带来污染,此外,该视觉机器人通过离线编程方法,机器人运动轨迹完全经过机器人内部的输出处理中心算出,自动化程度高。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种视觉机器人离线编程方法,其特征在于,包括以下步骤:
S100:设定机器人各轴的旋转角度作为运动的约束条件;
S200:应用摄像机采集目标图像;
S300:应用采集的图像,提取目标的边缘和顶点信息;
S400:应用目标的边缘和顶点信息构建目标的三维模型;
S500:应用目标的三维模型生成目标模型的点云数据;
S600:机器人获取晶圆片的存放位置的坐标信息;
S700:依据存放位置的坐标信息以及点云数据计算机器人电机相关运动参数,并存储运动参数。
2.根据权利要求1所述的视觉机器人离线编程方法,其特征在于,步骤S300中,提取目标的边缘信息的方法包括:
S311:制作横向差分模板;
S312:对差分模板滤波;
S313:检测图像中各像素点的八邻域点的值是否满足角点条件,若满足角点条件,则保留;若不满足,则剔除掉;
S314:计算角点响应函数值;
S315:应用角点响应函数值对保留下的角点值再次进行检测,剔除掉非角点像素点,从而取得目标的边缘信息。
3.根据权利要求2中所述的视觉机器人离线编程方法,其特征在于,提取边缘信息采用的是Priwitt边缘检测算法。
4.根据权利要求1所述的视觉机器人离线编程方法,其特征在于,
步骤S300中,提取目标的顶点信息的方法包括:
S321:对图像的角点进行检测;
S322:对图像像素坐标和世界坐标做归一化处理;
S323:获取摄像机内参数和外参数值;
S324:优化摄像机内参数以及外参数值,从而取得目标的顶点信息。
5.根据权利要求4所述的视觉机器人离线编程方法,其特征在于,提取目标的顶点信息采用的是Harris特征点检测方法。
6.根据权利要求1所述的视觉机器人离线编程方法,其特征在于,所述运动目标的运动轨迹文件包括运动目标的位移以及运动目标的方向。
7.一种视觉机器人离线编程系统,其特征在于:包括操作单元、摄像单元、转换单元、图像编辑单元、图像处理单元、数据转换单元、位移分析单元以及运动分析单元;
所述操作单元用于设定各轴的旋转角度作为机器人运动的约束条件;
所述摄像单元用于采集目标的图像;
所述转换单元将采集的目标图像转为数字图像,并提取目标的边缘和顶点信息;所述图像处理单元用于应用目标的边缘和顶点信息构建目标的三维模型;
所述数据转换单元用于生成目标模型的点云数据;
所述位移分析单元用于获取晶圆片的存放位置的坐标信息;
所述运动分析单元用于依据存放位置的坐标信息以及点云数据计算机器人电机相关运动参数,并存储运动参数。
8.根据权利要求7所述的视觉机器人离线编程系统,其特征在于:所述摄像单元包括多个摄像机、相机固定座、旋转轴以及底座;
所述摄像机固定于相机固定座上;相机固定座通过旋转轴与底座相连,通过底座安装于机器人本体上。
9.根据权利要求7或8所述的视觉机器人离线编程系统,其特征在于:所述摄像机为三个,三个摄像机在相机固定座上位于同一水平线上。
10.根据权利要求9所述的视觉机器人离线编程系统,其特征在于:固定于相机固定座上的摄像机位置根据特定参数设定,所述参数包括:基线距离、坐标变换矩阵以及每个摄像机的单应性矩阵。
CN201210005327.9A 2012-01-09 2012-01-09 视觉机器人离线编程方法和系统 Active CN103192397B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210005327.9A CN103192397B (zh) 2012-01-09 2012-01-09 视觉机器人离线编程方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210005327.9A CN103192397B (zh) 2012-01-09 2012-01-09 视觉机器人离线编程方法和系统

Publications (2)

Publication Number Publication Date
CN103192397A true CN103192397A (zh) 2013-07-10
CN103192397B CN103192397B (zh) 2015-08-12

Family

ID=48715304

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210005327.9A Active CN103192397B (zh) 2012-01-09 2012-01-09 视觉机器人离线编程方法和系统

Country Status (1)

Country Link
CN (1) CN103192397B (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103707300A (zh) * 2013-12-20 2014-04-09 上海理工大学 机械手装置
CN104325462A (zh) * 2014-09-30 2015-02-04 同济大学 一种固有约束下构建机器人运动空间的方法
CN104932384A (zh) * 2015-06-29 2015-09-23 贵州桂荣科技有限公司 一种电子手环组装设备智能编码控制系统
CN105100707A (zh) * 2015-06-29 2015-11-25 遵义宏港机械有限公司 一种数控铣床实时建模监控系统
CN105856227A (zh) * 2016-04-18 2016-08-17 呼洪强 基于特征识别的机器人视觉导航技术
TWI561355B (en) * 2015-12-25 2016-12-11 Pou Chen Corp Shoe part processing apparatus and method thereof
WO2017015898A1 (zh) * 2015-07-29 2017-02-02 Abb 瑞士股份有限公司 用于机器人拆垛设备的控制系统和用于控制机器人拆垛的方法
CN106708028A (zh) * 2015-08-04 2017-05-24 范红兵 一种工业机器人的动作轨迹智能预测及自动规划系统
CN106926243A (zh) * 2017-04-19 2017-07-07 广州视源电子科技股份有限公司 机器人示教运动控制方法和系统
CN107458875A (zh) * 2017-08-09 2017-12-12 爱维迅自动化科技(昆山)有限公司 一种视觉定位上料机及其操作方法
CN108010074A (zh) * 2017-10-19 2018-05-08 宁波蓝圣智能科技有限公司 一种基于机器视觉的工件检测方法及系统
CN108227648A (zh) * 2016-12-14 2018-06-29 波音公司 机器人任务系统
CN108772839A (zh) * 2018-06-25 2018-11-09 中国人民解放军第二军医大学 主从操作与人机一体化系统
CN109760045A (zh) * 2018-12-27 2019-05-17 西安交通大学 一种离线编程轨迹生成方法及基于该方法的双机器人协同装配系统
CN109822568A (zh) * 2019-01-30 2019-05-31 北京镁伽机器人科技有限公司 机器人控制方法、系统及存储介质
CN109952176A (zh) * 2017-05-26 2019-06-28 深圳配天智能技术研究院有限公司 一种机器人标定方法、系统、机器人及存储介质
CN109952178A (zh) * 2016-11-17 2019-06-28 株式会社富士 作业机器人及作业位置修正方法
CN111015670A (zh) * 2019-12-28 2020-04-17 飞天诚信科技股份有限公司 一种机械手臂及其定位识别处理零件的方法
CN117114971A (zh) * 2023-08-01 2023-11-24 北京城建设计发展集团股份有限公司 一种像素图向矢量图转换方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1486914A (zh) * 2002-08-23 2004-04-07 发那科株式会社 物件搬运装置
CN1490594A (zh) * 2003-08-22 2004-04-21 湖南大学 仿人多自由度立体双目视觉装置
JP2007160486A (ja) * 2005-12-16 2007-06-28 Fanuc Ltd オフラインプログラミング装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1486914A (zh) * 2002-08-23 2004-04-07 发那科株式会社 物件搬运装置
CN1490594A (zh) * 2003-08-22 2004-04-21 湖南大学 仿人多自由度立体双目视觉装置
JP2007160486A (ja) * 2005-12-16 2007-06-28 Fanuc Ltd オフラインプログラミング装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
姚耀: "Harris角点提取实现亚像素级摄像机自标定", 《电子设计工程》, vol. 17, no. 5, 31 May 2009 (2009-05-31), pages 1 - 2 *
孟晶晶: "基于区域增长的立体匹配算法的研究", 《中国优秀硕士学位论文全文数据库(电子期刊)》, 10 December 2006 (2006-12-10) *
毛剑飞: "机器人视觉标定及离线编程技术研究", 《中国优秀博士学位论文全文数据库(电子期刊)》, 1 May 2004 (2004-05-01) *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103707300A (zh) * 2013-12-20 2014-04-09 上海理工大学 机械手装置
CN104325462A (zh) * 2014-09-30 2015-02-04 同济大学 一种固有约束下构建机器人运动空间的方法
CN104325462B (zh) * 2014-09-30 2016-02-17 同济大学 一种固有约束下构建机器人运动空间的方法
CN104932384A (zh) * 2015-06-29 2015-09-23 贵州桂荣科技有限公司 一种电子手环组装设备智能编码控制系统
CN105100707A (zh) * 2015-06-29 2015-11-25 遵义宏港机械有限公司 一种数控铣床实时建模监控系统
WO2017015898A1 (zh) * 2015-07-29 2017-02-02 Abb 瑞士股份有限公司 用于机器人拆垛设备的控制系统和用于控制机器人拆垛的方法
CN106708028A (zh) * 2015-08-04 2017-05-24 范红兵 一种工业机器人的动作轨迹智能预测及自动规划系统
TWI561355B (en) * 2015-12-25 2016-12-11 Pou Chen Corp Shoe part processing apparatus and method thereof
CN105856227A (zh) * 2016-04-18 2016-08-17 呼洪强 基于特征识别的机器人视觉导航技术
CN109952178B (zh) * 2016-11-17 2022-07-05 株式会社富士 作业机器人及作业位置修正方法
CN109952178A (zh) * 2016-11-17 2019-06-28 株式会社富士 作业机器人及作业位置修正方法
CN108227648A (zh) * 2016-12-14 2018-06-29 波音公司 机器人任务系统
CN108227648B (zh) * 2016-12-14 2022-08-26 波音公司 机器人任务系统
CN106926243A (zh) * 2017-04-19 2017-07-07 广州视源电子科技股份有限公司 机器人示教运动控制方法和系统
CN109952176A (zh) * 2017-05-26 2019-06-28 深圳配天智能技术研究院有限公司 一种机器人标定方法、系统、机器人及存储介质
CN109952176B (zh) * 2017-05-26 2022-04-15 深圳配天智能技术研究院有限公司 一种机器人标定方法、系统、机器人及存储介质
CN107458875A (zh) * 2017-08-09 2017-12-12 爱维迅自动化科技(昆山)有限公司 一种视觉定位上料机及其操作方法
CN108010074A (zh) * 2017-10-19 2018-05-08 宁波蓝圣智能科技有限公司 一种基于机器视觉的工件检测方法及系统
CN108772839B (zh) * 2018-06-25 2021-07-20 中国人民解放军第二军医大学 主从操作与人机一体化系统
CN108772839A (zh) * 2018-06-25 2018-11-09 中国人民解放军第二军医大学 主从操作与人机一体化系统
CN109760045A (zh) * 2018-12-27 2019-05-17 西安交通大学 一种离线编程轨迹生成方法及基于该方法的双机器人协同装配系统
CN109822568A (zh) * 2019-01-30 2019-05-31 北京镁伽机器人科技有限公司 机器人控制方法、系统及存储介质
CN109822568B (zh) * 2019-01-30 2020-12-29 镁伽科技(深圳)有限公司 机器人控制方法、系统及存储介质
CN111015670B (zh) * 2019-12-28 2021-06-08 飞天诚信科技股份有限公司 一种机械手臂及其定位识别处理零件的方法
CN111015670A (zh) * 2019-12-28 2020-04-17 飞天诚信科技股份有限公司 一种机械手臂及其定位识别处理零件的方法
CN117114971A (zh) * 2023-08-01 2023-11-24 北京城建设计发展集团股份有限公司 一种像素图向矢量图转换方法及系统
CN117114971B (zh) * 2023-08-01 2024-03-08 北京城建设计发展集团股份有限公司 一种像素图向矢量图转换方法及系统

Also Published As

Publication number Publication date
CN103192397B (zh) 2015-08-12

Similar Documents

Publication Publication Date Title
CN103192397B (zh) 视觉机器人离线编程方法和系统
CN111089569B (zh) 一种基于单目视觉的大型箱体测量方法
CN108555908B (zh) 一种基于rgbd相机的堆叠工件姿态识别及拾取方法
CN105225269B (zh) 基于运动机构的三维物体建模系统
CN110370286B (zh) 基于工业机器人和单目相机的定轴运动刚体空间位置识别方法
CN109344882B (zh) 基于卷积神经网络的机器人控制目标位姿识别方法
CN109373898B (zh) 一种基于三维测量点云的复杂零件位姿估计系统及方法
Koide et al. General hand–eye calibration based on reprojection error minimization
CN106041937A (zh) 一种基于双目立体视觉的机械手抓取控制系统的控制方法
JP7410499B2 (ja) 組立ロボットの遠隔操作環境のデジタルツインモデリング方法及びシステム
CN108594245A (zh) 一种目标物运动监测系统及方法
CN103196370B (zh) 一种导管接头空间位姿参数的测量方法和装置
CN111775146A (zh) 一种工业机械臂多工位作业下的视觉对准方法
CN109035200A (zh) 一种基于单双目视觉协同的螺栓定位及位姿检测方法
CN105574812B (zh) 多角度三维数据配准方法及装置
CN108492017B (zh) 一种基于增强现实的产品质量信息传递方法
CN106323286B (zh) 一种机器人坐标系与三维测量坐标系的变换方法
CN112700501B (zh) 一种水下单目亚像素相对位姿估计方法
CN112509063A (zh) 一种基于边缘特征匹配的机械臂抓取系统及方法
CN110648362B (zh) 一种双目立体视觉的羽毛球定位识别与姿态计算方法
CN110030979B (zh) 一种基于序列图像的空间非合作目标相对位姿测量方法
CN113034584B (zh) 一种基于物体语义路标的移动机器人视觉定位方法
CN114001651B (zh) 一种基于双目视觉测量和先验检测数据的大型细长筒类构件位姿原位测量方法
CN110992416A (zh) 基于双目视觉与cad模型的高反光面金属零件位姿测量方法
CN114022530A (zh) 基于混合现实技术的3d打印辅助方法、系统及应用

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant