CN114083536B - 一种利用立体块恢复单线结构光传感器手眼关系的方法 - Google Patents

一种利用立体块恢复单线结构光传感器手眼关系的方法 Download PDF

Info

Publication number
CN114083536B
CN114083536B CN202111399717.4A CN202111399717A CN114083536B CN 114083536 B CN114083536 B CN 114083536B CN 202111399717 A CN202111399717 A CN 202111399717A CN 114083536 B CN114083536 B CN 114083536B
Authority
CN
China
Prior art keywords
dimensional block
line structure
light sensor
structure light
coordinate system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111399717.4A
Other languages
English (en)
Other versions
CN114083536A (zh
Inventor
郭寅
郭磊
刘海庆
付康龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yi Si Si Hangzhou Technology Co ltd
Original Assignee
Isvision Hangzhou Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Isvision Hangzhou Technology Co Ltd filed Critical Isvision Hangzhou Technology Co Ltd
Priority to CN202111399717.4A priority Critical patent/CN114083536B/zh
Publication of CN114083536A publication Critical patent/CN114083536A/zh
Application granted granted Critical
Publication of CN114083536B publication Critical patent/CN114083536B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1628Programme controls characterised by the control loop
    • B25J9/1653Programme controls characterised by the control loop parameters identification, estimation, stiffness, accuracy, error analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开了一种利用立体块恢复单线结构光传感器手眼关系的方法,单线结构光传感器固定在机器人末端,立体块与机器人相对位置固定;立体块的表面上至少形成有一个外凸或者内凹的棱锥或棱台;恢复步骤如下:1)粗调,令立体块处于传感器的视野范围内;2)投射激光条,其与立体块上棱锥或棱台的棱边相交;采集图像,解算传感器与立体块坐标系之间的旋转平移关系3)利用如下公式计算位置移动后传感器到法兰之间的旋转平移关系 分别为位置移动前,传感器相对于法兰、立体块的旋转平移关系。该方法利用相对测量原理,以固定的立体块为媒介,求解变动前后传感器坐标系相对于立体块坐标系的变化量,进而间接恢复出新的传感器手眼关系。

Description

一种利用立体块恢复单线结构光传感器手眼关系的方法
技术领域
本发明涉及工业现场机器人视觉引导、测量领域,具体涉及一种利用立体块恢复单线结构光传感器手眼关系的方法。
背景技术
单线结构光传感器是目前常用的一种三维测量传感器。在实际的生产过程中,难免发生传感器碰撞或损坏的情况,移动或更换传感器后将会面临单线结构光传感器需重新标定以获取新的手眼关系的问题。现有线结构光手眼标定方法通常有有限场景点法、平面靶标法、标准球法等。无论哪种方法,重新进行手眼标定无疑都会花费较长的标定时间,一般大于60分钟,不适合于现场传感器的快速恢复。这将大大降低生产效率,造成无可挽回的经济损失。
发明内容
为了解决上述技术问题,本发明提供了一种利用立体块恢复单线结构光传感器手眼关系的方法,该方法利用相对测量原理,以固定不动的立体块为媒介,求解变动前后传感器坐标系相对于立体块坐标系的变化量,进而间接恢复出新的传感器手眼关系。整个过程仅需要一次拍照,耗时不超过30min,可极大节省重新标定手眼的时间。
为此,本发明技术方案如下:
一种利用立体块恢复单线结构光传感器手眼关系的方法,所述单线结构光传感器固定在机器人末端,所述立体块与机器人相对位置固定;
所述立体块的表面上至少形成有一个外凸或者内凹的棱锥或棱台;
利用立体块恢复单线结构光传感器手眼关系的方法包括如下步骤:
1)所述单线结构光传感器相对于机器人末端法兰的位置移动后,先利用粗调,令所述立体块处于单线结构光传感器的视野范围内;
2)所述单线结构光传感器向立体块表面投射激光条,所述激光条同时与所述立体块上棱锥或棱台的棱边相交;所述单线结构光传感器的相机采集图像,解算单线结构光传感器与立体块坐标系之间的旋转平移关系
3)利用如下公式计算单线结构光传感器相对于机器人末端法兰位置移动后单线结构光传感器到机器人末端法兰之间的旋转平移关系
其中:为单线结构光传感器相对于机器人末端法兰位置移动前,单线结构光传感器坐标系与机器人末端法兰坐标系之间的旋转平移关系,通过事先标定获得;
为单线结构光传感器相对于机器人末端法兰位置移动前,单线结构光传感器坐标系和立体块坐标系之间的旋转平移关系。
进一步,所述单线结构光传感器与立体块坐标系之间的旋转平移关系通过以下步骤获得:
①计算激光平面与立体块上棱边的交点在单线结构光传感器坐标系下的三维坐标;
②通过点云配准,获取步骤①求得点在立体块坐标系下的三维坐标;所述立体块上各点在立体块坐标系下的三维坐标已知;
③通过坐标系对齐获取单线结构光传感器与立体块坐标系之间的旋转平移关系。
进一步,所述立体块的表面上形成的棱锥或棱台的棱边有3~8条。
进一步,所述立体块的表面上形成有一个棱锥或棱台,在与其轴线平行的方向上还以内凹或者外凸的形式形成有棱柱。
进一步,所述立体块的表面上形成的棱锥或棱台的棱边有3条;激光在立体块上形成V形光线。
该方法因使用的立体块表面有连续锥面,不需限制激光投射角度,即能唯一确定在立体块坐标系下的位置;基于相对测量原理,以固定不动的立体块为媒介,求解单线结构光传感器位置变动前后的传感器坐标系相对于立体块坐标系的变化量,进而间接恢复出新的传感器手眼关系。整个过程仅需一次拍照,总耗时小于30分钟,可极大节省重新标定手眼的时间。
附图说明
图1为具体实施方式中使用的立体块的结构示意图;
图2为图1中立体块的主视图;
图3为能用于本发明的另一种立体块的结构示意图;
图4位图3中立体块的俯视图。
具体实施方式
以下结合附图和具体实施方式对本发明的技术方案进行详细描述。
一种利用立体块恢复单线结构光传感器手眼关系的方法,单线结构光传感器固定在机器人末端,立体块与机器人相对位置固定;
立体块的表面上至少形成有一个外凸或者内凹的棱锥或棱台;进一步该棱锥或棱台的棱边有3~8条;以下以3条棱边的棱台(如图1,2所示)为例进行描述;
利用立体块恢复单线结构光传感器手眼关系的方法包括如下步骤:
1)单线结构光传感器相对于机器人末端法兰的位置移动后,先利用粗调,令立体块处于单线结构光传感器的视野范围内;
2)单线结构光传感器向立体块表面投射激光条,激光条同时与立体块上棱锥或棱台的棱边相交(此处因使用的如图1所示的立体块,激光在其表面能形成V形光线);单线结构光传感器的相机采集图像,解算单线结构光传感器与立体块坐标系之间的旋转平移关系
3)利用如下公式计算单线结构光传感器相对于机器人末端法兰位置移动后单线结构光传感器到机器人末端法兰之间的旋转平移关系
其中:为单线结构光传感器相对于机器人末端法兰位置移动前,单线结构光传感器坐标系与机器人末端法兰坐标系之间的旋转平移关系,通过事先标定获得;
为单线结构光传感器相对于机器人末端法兰位置移动前,单线结构光传感器坐标系和立体块坐标系之间的旋转平移关系。
具体来说,单线结构光传感器与立体块坐标系之间的旋转平移关系通过以下步骤获得:
①计算激光平面与立体块上棱边的交点在单线结构光传感器坐标系下的三维坐标;
②通过点云配准(例如ICP算法),获取步骤①求得点在立体块坐标系下的三维坐标;立体块上各点在立体块坐标系下的三维坐标已知;
③通过坐标系对齐获取单线结构光传感器与立体块坐标系之间的旋转平移关系。
作为本发明可以使用的立体块,设计原理是表面上形成有一个棱锥或棱台,因尺寸在深度、宽度方向的逐渐变化能唯一的确定激光线在立体块坐标系下的位置以及对应点的三维坐标,在此基础上,其他与棱锥或棱台轴线平行的方向上还以内凹或者外凸的形式形成有棱柱,此种方式能获取激光线上更多点。
本方法的优势是:单线结构光传感器相对于法兰位置发生变动后,需重新恢复手眼标定时,仅需单次拍照,解算出新的视觉传感器坐标系与立体块坐标系的旋转平移关系,利用公式即可得出新的视觉传感器坐标系到机器人末端坐标系之间的旋转平移关系,无需重新示教机器人拍照位和做零位姿,节省了大量时间。
本方法用于汽车生产线的测量过程,不同的机器人视觉测量工位的耗时对比表格如下:
从表格中可以看出,对于切割引导和冲孔引导工位来说,由于需要重新利用三坐标测量机测量特征孔的三维坐标,当工位的库位、车型众多(即零位多)的情况下,现有方法用时成倍的增加。而采用本方法可复用原零位信息,不需要重新做零位,只需要半小时便可重新恢复视觉传感器功能,大大节省生产调试时间,为工厂带来极大的经济效益。
前面对本发明具体示例性实施方案所呈现的描述是出于说明和描述的目的。前面的描述并不想要成为毫无遗漏的,也不是想要把本发明限制为所公开的精确形式,显然,根据上述教导很多改变和变化都是可能的。选择示例性实施方案并进行描述是为了解释本发明的特定原理及其实际应用,从而使得本领域的其它技术人员能够实现并利用本发明的各种示例性实施方案及其不同选择形式和修改形式。本发明的范围旨在由所附权利要求书及其等价形式所限定。

Claims (4)

1.一种利用立体块恢复单线结构光传感器手眼关系的方法,所述单线结构光传感器固定在机器人末端,所述立体块与机器人相对位置固定;
其特征在于:所述立体块的表面上至少形成有一个外凸或者内凹的棱锥或棱台;
利用立体块恢复单线结构光传感器手眼关系的方法包括如下步骤:
1)所述单线结构光传感器相对于机器人末端法兰的位置移动后,先利用粗调,令所述立体块处于单线结构光传感器的视野范围内;
2)所述单线结构光传感器向立体块表面投射激光条,所述激光条同时与所述立体块上棱锥或棱台的棱边相交;所述单线结构光传感器的相机采集图像,通过以下步骤,解算单线结构光传感器与立体块坐标系之间的旋转平移关系
①计算激光平面与立体块上棱边的交点在单线结构光传感器坐标系下的三维坐标;
②通过点云配准,获取步骤①求得点在立体块坐标系下的三维坐标;所述立体块上各点在立体块坐标系下的三维坐标已知;
③通过坐标系对齐获取单线结构光传感器与立体块坐标系之间的旋转平移关系;
3)利用如下公式计算单线结构光传感器相对于机器人末端法兰位置移动后单线结构光传感器到机器人末端法兰之间的旋转平移关系
其中:为单线结构光传感器相对于机器人末端法兰位置移动前,单线结构光传感器坐标系与机器人末端法兰坐标系之间的旋转平移关系,通过事先标定获得;
为单线结构光传感器相对于机器人末端法兰位置移动前,单线结构光传感器坐标系和立体块坐标系之间的旋转平移关系。
2.如权利要求1所述利用立体块恢复单线结构光传感器手眼关系的方法,其特征在于:所述立体块的表面上形成的棱锥或棱台的棱边有3~8条。
3.如权利要求1所述利用立体块恢复单线结构光传感器手眼关系的方法,其特征在于:所述立体块的表面上形成有一个棱锥或棱台,在与其轴线平行的方向上还以内凹或者外凸的形式形成有棱柱。
4.如权利要求1所述利用立体块恢复单线结构光传感器手眼关系的方法,其特征在于:所述立体块的表面上形成的棱锥或棱台的棱边有3条;激光在立体块上形成V形光线。
CN202111399717.4A 2021-11-24 2021-11-24 一种利用立体块恢复单线结构光传感器手眼关系的方法 Active CN114083536B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111399717.4A CN114083536B (zh) 2021-11-24 2021-11-24 一种利用立体块恢复单线结构光传感器手眼关系的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111399717.4A CN114083536B (zh) 2021-11-24 2021-11-24 一种利用立体块恢复单线结构光传感器手眼关系的方法

Publications (2)

Publication Number Publication Date
CN114083536A CN114083536A (zh) 2022-02-25
CN114083536B true CN114083536B (zh) 2023-09-08

Family

ID=80303680

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111399717.4A Active CN114083536B (zh) 2021-11-24 2021-11-24 一种利用立体块恢复单线结构光传感器手眼关系的方法

Country Status (1)

Country Link
CN (1) CN114083536B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115307570B (zh) * 2022-06-27 2023-07-21 北京工业大学 一种u槽平面式线激光传感器位姿标定件及标定方法
CN115307572B (zh) * 2022-06-27 2023-07-21 北京工业大学 一种定宽平面式线激光传感器位姿标定件及标定方法
CN115307571B (zh) * 2022-06-27 2023-07-21 北京工业大学 一种平面式线激光传感器位姿标定件及标定方法
CN116117818A (zh) * 2023-02-28 2023-05-16 哈尔滨工业大学 一种机器人传感器手眼标定方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1508511A (zh) * 2002-12-17 2004-06-30 北京航空航天大学 一种结构光视觉传感器的标定方法
CN106949851A (zh) * 2017-03-29 2017-07-14 沈阳建筑大学 一种基于支持向量机的线结构光视觉传感器标定方法
CN108230402A (zh) * 2018-01-23 2018-06-29 北京易智能科技有限公司 一种基于三棱锥模型的立体标定方法
CN108942922A (zh) * 2018-06-11 2018-12-07 杭州灵西机器人智能科技有限公司 基于圆锥标定物的机械臂手眼标定方法、装置及系统
CN110470239A (zh) * 2019-08-07 2019-11-19 上海交通大学 一种基于交叉点的激光轮廓传感器标定系统及方法
CN111768383A (zh) * 2020-06-29 2020-10-13 易思维(杭州)科技有限公司 立体靶标及利用其恢复视觉传感器工作功能的方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3930482B2 (ja) * 2004-01-19 2007-06-13 ファナック株式会社 3次元視覚センサ

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1508511A (zh) * 2002-12-17 2004-06-30 北京航空航天大学 一种结构光视觉传感器的标定方法
CN106949851A (zh) * 2017-03-29 2017-07-14 沈阳建筑大学 一种基于支持向量机的线结构光视觉传感器标定方法
CN108230402A (zh) * 2018-01-23 2018-06-29 北京易智能科技有限公司 一种基于三棱锥模型的立体标定方法
CN108942922A (zh) * 2018-06-11 2018-12-07 杭州灵西机器人智能科技有限公司 基于圆锥标定物的机械臂手眼标定方法、装置及系统
CN110470239A (zh) * 2019-08-07 2019-11-19 上海交通大学 一种基于交叉点的激光轮廓传感器标定系统及方法
CN111768383A (zh) * 2020-06-29 2020-10-13 易思维(杭州)科技有限公司 立体靶标及利用其恢复视觉传感器工作功能的方法

Also Published As

Publication number Publication date
CN114083536A (zh) 2022-02-25

Similar Documents

Publication Publication Date Title
CN114083536B (zh) 一种利用立体块恢复单线结构光传感器手眼关系的方法
CN111983639B (zh) 一种基于Multi-Camera/Lidar/IMU的多传感器SLAM方法
CN109035200B (zh) 一种基于单双目视觉协同的螺栓定位及位姿检测方法
CN106228110B (zh) 一种基于车载双目相机的障碍物及可行驶区域检测方法
US8427472B2 (en) Multidimensional evidence grids and system and methods for applying same
CN102867304B (zh) 双目立体视觉系统中场景立体深度与视差的关系建立方法
CN103278138B (zh) 一种复杂结构薄部件三维位置及姿态的测量方法
Broggi et al. Self-calibration of a stereo vision system for automotive applications
CN106978774B (zh) 一种路面坑槽自动检测方法
CN103727927B (zh) 基于结构光的高速运动物体位姿视觉测量方法
CN107588721A (zh) 一种基于双目视觉的零件多尺寸的测量方法及系统
CN102788572B (zh) 一种工程机械吊钩姿态的测量方法、装置及系统
CN104021588A (zh) 一种实时恢复车辆三维真实模型的系统及方法
CN103196418A (zh) 一种弯道车距测量方法
CN111443704B (zh) 用于自动驾驶系统的障碍物定位方法及装置
CN104613899A (zh) 一种全自动的结构光手眼三维测量系统标定方法
CN102519434A (zh) 一种用于立体视觉三维恢复数据精度测量的试验验证方法
CN105423913A (zh) 基于线结构光扫描的三维坐标测量方法
CN103245335A (zh) 一种自主在轨服务航天器超近距离视觉位姿测量方法
CN110702343B (zh) 一种基于立体视觉的挠度测量系统及方法
CN105551020A (zh) 一种检测目标物尺寸的方法及装置
CN102798456A (zh) 一种工程机械臂架系统工作幅度的测量方法、装置及系统
CN102798349A (zh) 一种基于等灰度线搜索的三维表面提取方法
CN116958218A (zh) 一种基于标定板角点对齐的点云与图像配准方法及设备
CN110849285A (zh) 基于单目相机的焊点深度测量方法、系统及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Room 495, building 3, 1197 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province 310051

Patentee after: Yi Si Si (Hangzhou) Technology Co.,Ltd.

Address before: Room 495, building 3, 1197 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province 310051

Patentee before: ISVISION (HANGZHOU) TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder