CN109202912A - 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 - Google Patents
一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 Download PDFInfo
- Publication number
- CN109202912A CN109202912A CN201811359080.4A CN201811359080A CN109202912A CN 109202912 A CN109202912 A CN 109202912A CN 201811359080 A CN201811359080 A CN 201811359080A CN 109202912 A CN109202912 A CN 109202912A
- Authority
- CN
- China
- Prior art keywords
- point cloud
- mechanical arm
- monocular depth
- registration
- cloud
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1602—Programme controls characterised by the control system, structure, architecture
- B25J9/1605—Simulation of manipulator lay-out, design, modelling of manipulator
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明公开了一种基于单目深度传感器和机械臂配准目标轮廓点云的方法,机械臂(1)末端搭载单目深度传感器(2),上位机(3)控制机械臂精准移动采样位置,控制单目深度相机拍摄目标轮廓点云并预处理,将当前点云标记为源点云S;通过控制柜(4)获取当前机械臂(1)各轴旋转角度值,根据运动学理论对机械臂(1)进行建模,并计算当前采样点单目深度传感器基于基坐标系的位姿;使用改进后的迭代最近点算法完成S与D两视角下点云的精确配准,将配准后的点云标记为源点云S;重复执行步骤S4、S5,再次配准下一视角下的点云,直到目标轮廓的点云模型完整,配准结束。
Description
技术领域
本发明涉及机器人技术及计算机视觉领域,尤其涉及一种基于单目深度传感器和机械臂配准目标轮廓点云的方法。
背景技术
三维点云模型是计算机视觉中的重要组成部分,是智能机器人与未知环境交互要研究解决的热点问题。单目深度视觉系统一般利用红外线发射至目标,通过接受返回的光波来计算深度信息,有飞行时间法、结构光法等。在机械臂识别目标物体或者对目标物体的轮廓进行定位时,需要获取到目标不同视角下的全部轮廓信息,所以需要对不同视角下采集到的点云进行配准,现有方案无法在视角相差较大的情况下快速高效完成点云配准,并同时进行目标轮廓的准确定位。而深度传感器连续采集、逐步配准则计算复杂、硬件平台要求较高。
发明内容
本发明提供了一种基于单目深度传感器使用机械臂配准目标轮廓点云的方法,能够提高在拍摄视角相差较大情况下的配准效率,降低配准误差,并且获取目标轮廓的点云信息。
一种基于单目深度传感器和机械臂配准目标轮廓点云的方法,包含如下步骤:
步骤S1,根据目标对象(5)的类型及大小,确定最佳采样位置和最少采样方案;
步骤S2,机械臂(1)末端搭载单目深度传感器(2),上位机(3)控制机械臂精准移动采样位置,控制单目深度相机拍摄目标轮廓点云并预处理,将当前点云标记为源点云S;
步骤S3,通过控制柜(4)获取当前机械臂(1)各轴旋转角度值,根据运动学理论对机械臂(1)进行建模,并计算当前采样点单目深度传感器基于基坐标系的位姿;
步骤S4,移动机械臂(1)使单目深度传感器(2)到达下一个采样位置,拍摄点云并预处理,将其标记为D,根据采样位置基于基坐标系的位姿,计算采样位置拍摄的点云数据间的刚体变换矩阵,对点云进行旋转平移变换,完成点云的初始配准;
步骤S5,使用改进后的迭代最近点算法完成S与D两视角下点云的精确配准,将配准后的点云标记为源点云S;
重复执行步骤S4、S5,再次配准下一视角下的点云,直到目标轮廓的点云模型完整,配准结束。
所述的方法,所述步骤S1的具体过程包括:
根据目标对象的外观形状,先在其四周采集几处点云数据,观察点云中含目标物体的有效点云数量占比,寻找占比较高的点云确定为最佳采样位置,寻找不同视角下的最佳采样位置,直到可以配准出完整的点云轮廓。
所述的方法,所述步骤S2的具体过程包括:
机械臂(1)末端搭载单目深度传感器(2),上位机(3)控制机械臂精准移动采样位置A,控制单目深度相机(2)拍摄目标(5)轮廓点云,使用直通滤波器和统计滤波器对其滤波处理,去除目标轮廓对象外的背景及其他干扰数据,将当前点云标记为源点云S。
所述的方法,所述步骤S3的具体过程包括:
标定单目深度传感器相对于末端工具坐标系的位姿通过控制柜(4)传输到上位机(3)的数据,获取当前机械臂(1)各轴旋转角度值,根据运动学理论对机械臂(1)进行建模,得到机械臂的正运动学方程,将当前各轴角度值带入该方程,计算出该采样点末端工具坐标系基于基坐标系的位姿根据式推导单目深度传感器相对于基坐标系的位姿
所述的方法,所述步骤S4的具体过程包括:
移动机械臂(1)使单目深度传感器(2)到达下一个采样位置B,拍摄点云并预处理,将其标记为目标点云D,根据步骤S3计算采样位置B处,单目深度传感器基于基坐标系的位姿根据式计算采样位置A拍摄的点云数据S与采样位置B拍摄的点云数据D间的刚体变换矩阵,对点云进行旋转平移变换,完成点云的初始配准。
所述的方法,所述步骤S5的具体过程包括:使用改进的迭代最近点算法完成S与D两视角下点云的精确配准,根据不同采样位置处得到的视角A、B下点云数据间姿态变换矩阵得到两者间的旋转矩阵R与平移向量T,对源点云S={s1,s2,s3...sn}与目标点云D={d1,d2,d3...dn},其中n为点云中点的个数,具体方法为:
1)对源点云S中的所有点,即si,i∈(1,n)分别带入以下式子pi=RsiT,计算点pi与邻近范围内点的欧氏距离,找到D点云中距离pi最近的点,假设为di;Pi是源点云Si经过矩阵变换后的点;R为旋转矩阵,T为平移向量;
2)设置匹配点对的最大距离为L,排除所有距离大于L的无效点对;
3)根据新得到匹配点对,求解新的旋转矩阵R和平移向量t,使目标误差函数
4)根据新求出的旋转矩阵R和平移向量T计算出新的pi=Rsi+T,并找到目标点云中与其匹配的点云;
5)重新计算目标误差函数f,并求解本次误差函数与上次误差函数的差值,如果f的差值小于设定的阈值,说明迭代已经收敛,为了进一步减少误差,改进匹配重合度,以固定的数值减小步骤2)中的最大距离L,继续进行迭代;
6)若匹配点对的最大距离L小于所设定的阈值或者迭代次数等于设定的最高迭代次数,则算法计算结束;
完成上述两帧的点云配准后,根据式(1)计算下一个视角C与视角A的相对位置关系,初始配准获取旋转矩阵和平移向量,按照上述步骤进行精确配准,重复该操作直到完成完整目标轮廓点云的拼接。
与现有的技术相比,本发明具有以下优点:
本发明所述的基于单目深度传感器使用机械臂配准目标轮廓点云的方法中,通过对机械臂建模,根据各轴电机反馈回的关节角度值,计算出传感器的采集位姿,获取采集位置的位姿和采集到的点云集合后,使待配准的点云通过矩阵变换获得较为接近的位置关系,然后再利用改进的迭代最近点算法对点云进一步精确配准。通过机械臂精确的完成了点云的初始配准,减少了初始配准过程中的计算,避免了配准过程中陷入局部最小值。
附图说明
图1是本发明实施例的基于单目深度传感器使用机械臂配准目标轮廓点云的方法的流程示意图。
图2是本发明实施例使用机械臂配准点云系统的结构示意图。
图2中,1表示机械臂,2表示单目深度传感器,3表示上位机控制器,4表示机械臂控制柜,5表示实验目标。
具体实施方式
以下结合具体实施例,对本发明进行详细说明。
参考图1,本实施例的基于单目深度传感器使用机械臂配准目标轮廓点云的方法包含如下步骤:
步骤S1,根据目标对象的类型及大小,确定最佳采样位置和最少采样点方案,根据目标对象的外观形状,先在其四周采集几处点云数据,观察点云中含目标物体的有效点云数量占比,寻找占比较高的点云确定为最佳采样位置,寻找不同视角下的最佳采样位置,直到可以配准出完整的点云轮廓;
步骤S2,机械臂(1)末端搭载单目深度传感器(2),上位机(3)控制机械臂精准移动采样位置A,控制单目深度相机拍摄目标轮廓点云并预处理,将当前点云标记为源点云S;
步骤S3,通过控制柜(4)获取当前机械臂(1)各轴旋转角度值,根据运动学理论对机械臂(1)进行D-H建模,计算出该机械臂(1)的正运动学方程,将角度值带入该方程,计算出末端工具坐标系基于基坐标系的位姿标定单目深度相机与末端工具坐标系的相对姿态并计算当前采样点单目深度传感器基于基坐标系的位姿
步骤S4,移动机械臂(1)使单目深度传感器(2)到达下一个采样位置B,拍摄点云并预处理,将其标记为目标点云D,根据采样位置基于基坐标系的位姿计算采样位置拍摄的点云数据间的刚体变换矩阵对点云进行旋转平移变换,完成点云的初始配准;
步骤S5,使用改进的迭代最近点算法(ICP算法)完成点云S与点云D的精确配准,将配准后的点云重新标记为源点云S。
重复执行步骤S4、步骤S5,直到目标轮廓的点云模型完整,配准结束。
参考图2所示出了本实施例的机械臂配准点云系统,该系统包括:机械臂(1),单目深度传感器(2),上位机控制器(3),机械臂控制柜(4),待实验目标对象(5)。
图2中的机械臂(1)使用的是工业大型多轴机械臂,活动空间足够大,可以涵盖到目标对象(5)的四周,由上位机控制器(3)设定运动轨迹及运动模式,发送数据到机械臂控制柜(4),由控制柜(4)内的伺服驱动器驱动机械臂(1)各轴运动,从而带动机械臂(1)末端的单目深度传感器(2)到的目标对象(5)的四周,上位机控制器(3)控制传感器(2)进行点云数据获取并进行下一步的处理及配准。
执行步骤S1,根据目标对象(5)的类型及大小,分析各位置点云信息的有效性,确定最佳采样位置和最少采样方案;
执行步骤S2,机械臂(1)末端搭载单目深度传感器(2),上位机(3)控制机械臂精准移动采样位置,控制单目深度相机(2)拍摄目标轮廓(5)点云并预处理,将当前点云标记为源点云S;
执行步骤S3,通过控制柜(4)获取当前机械臂(1)各轴旋转角度值,根据运动学理论对机械臂(1)进行建模,并计算当前采样点单目深度传感器基于基坐标系的位姿;
具体而言,控制柜(4)获取机械臂各轴反馈回的数据,发送给上位机,上位机根据机械臂正运动学方程计算出该采样位置处的位姿。
执行步骤S4,移动机械臂(1)使单目深度传感器(2)到达下一个采样位置,拍摄点云并预处理,将其标记为D,根据采样位置基于基坐标系的位姿,计算采样位置拍摄的点云数据间的刚体变换矩阵,对点云进行旋转平移变换,完成点云的初始配准;
执行步骤S5,使用改进的迭代最近点算法完成S与D两视角下点云的精确配准,根据不同采样位置处得到的视角A、B下点云数据间姿态变换矩阵得到两者间的旋转矩阵R与平移向量T,对源点云S={s1,s2,s3...sn}与目标点云D={d1,d2,d3...dn},其中n为点云中点的个数,具体方法为:
1)对源点云S中的所有点,即si,i∈(1,n)分别带入以下式子pi=RsiT,计算点pi与邻近范围内点的欧氏距离,找到D点云中距离pi最近的点,假设为di;Pi是源点云Si经过矩阵变换后的点。R为旋转矩阵,T为平移向量。
2)设置匹配点对的最大距离为L,排除所有距离大于L的无效点对。
3)根据新得到匹配点对,求解新的旋转矩阵R和平移向量t,使目标误差函数
4)根据新求出的旋转矩阵R和平移向量T计算出新的pi=Rsi+T,并找到目标点云中与其匹配的点云。
5)重新计算目标误差函数f,并求解本次误差函数与上次误差函数的差值,如果f的差值小于设定的阈值,说明迭代已经收敛,为了进一步减少误差,改进匹配重合度,以固定的数值减小步骤2)中的最大距离L,继续进行迭代。
6)若匹配点对的最大距离L小于所设定的阈值或者迭代次数等于设定的最高迭代次数,则算法计算结束。
完成上述两帧的点云配准后,根据式(1)计算下一个视角C与视角A的相对位置关系,初始配准获取旋转矩阵和平移向量,按照上述步骤进行精确配准,重复该操作直到完成完整目标轮廓点云的拼接。
重复执行步骤S4、步骤S5直到目标轮廓的点云模型完整,配准结束。
综上,采用本实施例的基于单目深度传感器使用机械臂配准目标轮廓点云的方法,相较于其他使用算法估算点云间的刚性变换,可以更精确获取不同视角下点云间的初始配准,为后续ICP配准输入正确的输入参数,较好的重建出目标对象轮廓的点云模型,而且能大大提高点云的配准效率,节约硬件成本。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (6)
1.一种基于单目深度传感器和机械臂配准目标轮廓点云的方法,其特征在于,包含如下步骤:
步骤S1,根据目标对象(5)的类型及大小,确定最佳采样位置和最少采样方案;
步骤S2,机械臂(1)末端搭载单目深度传感器(2),上位机(3)控制机械臂精准移动采样位置,控制单目深度相机拍摄目标轮廓点云并预处理,将当前点云标记为源点云S;
步骤S3,通过控制柜(4)获取当前机械臂(1)各轴旋转角度值,根据运动学理论对机械臂(1)进行建模,并计算当前采样点单目深度传感器基于基坐标系的位姿;
步骤S4,移动机械臂(1)使单目深度传感器(2)到达下一个采样位置,拍摄点云并预处理,将其标记为D,根据采样位置基于基坐标系的位姿,计算采样位置拍摄的点云数据间的刚体变换矩阵,对点云进行旋转平移变换,完成点云的初始配准;
步骤S5,使用改进后的迭代最近点算法完成S与D两视角下点云的精确配准,将配准后的点云标记为源点云S;
重复执行步骤S4、S5,再次配准下一视角下的点云,直到目标轮廓的点云模型完整,配准结束。
2.根据权利要求1所述的方法,其特征在于,所述步骤S1的具体过程包括:
根据目标对象的外观形状,先在其四周采集几处点云数据,观察点云中含目标物体的有效点云数量占比,寻找占比较高的点云确定为最佳采样位置,寻找不同视角下的最佳采样位置,直到可以配准出完整的点云轮廓。
3.根据权利要求1所述的方法,其特征在于,所述步骤S2的具体过程包括:
机械臂(1)末端搭载单目深度传感器(2),上位机(3)控制机械臂精准移动采样位置A,控制单目深度相机(2)拍摄目标(5)轮廓点云,使用直通滤波器和统计滤波器对其滤波处理,去除目标轮廓对象外的背景及其他干扰数据,将当前点云标记为源点云S。
4.根据权利要求1所述的方法,其特征在于,所述步骤S3的具体过程包括:
标定单目深度传感器相对于末端工具坐标系的位姿通过控制柜(4)传输到上位机(3)的数据,获取当前机械臂(1)各轴旋转角度值,根据运动学理论对机械臂(1)进行建模,得到机械臂的正运动学方程,将当前各轴角度值带入该方程,计算出该采样点末端工具坐标系基于基坐标系的位姿根据式推导单目深度传感器相对于基坐标系的位姿
5.根据权利要求1所述的方法,其特征在于,所述步骤S4的具体过程包括:
移动机械臂(1)使单目深度传感器(2)到达下一个采样位置B,拍摄点云并预处理,将其标记为目标点云D,根据步骤S3计算采样位置B处,单目深度传感器基于基坐标系的位姿根据式计算采样位置A拍摄的点云数据S与采样位置B拍摄的点云数据D间的刚体变换矩阵,对点云进行旋转平移变换,完成点云的初始配准。
6.根据权利要求1所述的方法,其特征在于,所述步骤S5的具体过程包括:使用改进的迭代最近点算法完成S与D两视角下点云的精确配准,根据不同采样位置处得到的视角A、B下点云数据间姿态变换矩阵得到两者间的旋转矩阵R与平移向量T,对源点云S={s1,s2,s3...sn}与目标点云D={d1,d2,d3...dn},其中n为点云中点的个数,具体方法为:
1)对源点云S中的所有点,即si,i∈(1,n)分别带入以下式子pi=RsiT,计算点pi与邻近范围内点的欧氏距离,找到D点云中距离pi最近的点,假设为di;Pi是源点云Si经过矩阵变换后的点;R为旋转矩阵,T为平移向量;
2)设置匹配点对的最大距离为L,排除所有距离大于L的无效点对;
3)根据新得到匹配点对,求解新的旋转矩阵R和平移向量t,使目标误差函数
4)根据新求出的旋转矩阵R和平移向量T计算出新的pi=Rsi+T,并找到目标点云中与其匹配的点云;
5)重新计算目标误差函数f,并求解本次误差函数与上次误差函数的差值,如果f的差值小于设定的阈值,说明迭代已经收敛,为了进一步减少误差,改进匹配重合度,以固定的数值减小步骤2)中的最大距离L,继续进行迭代;
6)若匹配点对的最大距离L小于所设定的阈值或者迭代次数等于设定的最高迭代次数,则算法计算结束;
完成上述两帧的点云配准后,根据式(1)计算下一个视角C与视角A的相对位置关系,初始配准获取旋转矩阵和平移向量,按照上述步骤进行精确配准,重复该操作直到完成完整目标轮廓点云的拼接。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811359080.4A CN109202912B (zh) | 2018-11-15 | 2018-11-15 | 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811359080.4A CN109202912B (zh) | 2018-11-15 | 2018-11-15 | 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109202912A true CN109202912A (zh) | 2019-01-15 |
CN109202912B CN109202912B (zh) | 2020-09-11 |
Family
ID=64996341
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811359080.4A Active CN109202912B (zh) | 2018-11-15 | 2018-11-15 | 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109202912B (zh) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109807933A (zh) * | 2019-01-29 | 2019-05-28 | 江苏通佑视觉科技有限公司 | 一种能力图点云更新方法、装置、设备及存储介质 |
CN109919984A (zh) * | 2019-04-15 | 2019-06-21 | 武汉惟景三维科技有限公司 | 一种基于局部特征描述子的点云自动配准方法 |
CN110033409A (zh) * | 2019-04-18 | 2019-07-19 | 中国科学技术大学 | 一种迭代最近点刚性注册方法及系统 |
CN110335296A (zh) * | 2019-06-21 | 2019-10-15 | 华中科技大学 | 一种基于手眼标定的点云配准方法 |
CN110378937A (zh) * | 2019-05-27 | 2019-10-25 | 浙江工业大学 | 基于Kinect摄像头的工业机械臂人机安全距离检测方法 |
CN111347426A (zh) * | 2020-03-26 | 2020-06-30 | 季华实验室 | 一种基于3d视觉的机械臂精确放置轨迹规划方法 |
CN111462202A (zh) * | 2020-04-08 | 2020-07-28 | 中国科学技术大学 | 非刚性注册方法及系统 |
CN111716340A (zh) * | 2019-03-22 | 2020-09-29 | 达明机器人股份有限公司 | 3d相机与机械手臂坐标系统的校正装置及方法 |
CN111739096A (zh) * | 2020-06-24 | 2020-10-02 | 深圳阿米嘎嘎科技有限公司 | 深度传感器移动时自定位方法及系统 |
CN112720493A (zh) * | 2020-12-29 | 2021-04-30 | 山西万立科技有限公司 | 一种机械臂与障碍物的双层次碰撞检测算法 |
CN113177983A (zh) * | 2021-03-25 | 2021-07-27 | 埃夫特智能装备股份有限公司 | 基于点云几何特征的角焊缝定位方法 |
CN113524201A (zh) * | 2021-09-07 | 2021-10-22 | 杭州柳叶刀机器人有限公司 | 机械臂位姿主动调节方法、装置、机械臂和可读存储介质 |
CN113894785A (zh) * | 2021-10-27 | 2022-01-07 | 华中科技大学无锡研究院 | 水轮机叶片在位测量与加工的控制方法、装置及系统 |
CN113967070A (zh) * | 2020-07-23 | 2022-01-25 | 连俊文 | 机械臂控制方法和皮肤表面处理设备 |
CN116486012A (zh) * | 2023-04-27 | 2023-07-25 | 中国民用航空总局第二研究所 | 一种航空器三维模型构建方法、存储介质及电子设备 |
CN117456001A (zh) * | 2023-12-21 | 2024-01-26 | 广州泽亨实业有限公司 | 一种基于点云配准的工件姿态检测方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013023130A1 (en) * | 2011-08-11 | 2013-02-14 | Siemens Healthcare Diagnostics Inc. | Methods and apparatus to calibrate an orientation between a robot gripper and a camera |
CN103971378A (zh) * | 2014-05-29 | 2014-08-06 | 福州大学 | 一种混合视觉系统中全景图像的三维重建方法 |
DE102015101710B4 (de) * | 2015-01-22 | 2016-09-08 | GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) | Verfahren zum Kalibrieren eines beweglichen Greiforgans unter Verwendung einer entfernten Digitalkamera |
CN105976353A (zh) * | 2016-04-14 | 2016-09-28 | 南京理工大学 | 基于模型和点云全局匹配的空间非合作目标位姿估计方法 |
CN106041937A (zh) * | 2016-08-16 | 2016-10-26 | 河南埃尔森智能科技有限公司 | 一种基于双目立体视觉的机械手抓取控制系统的控制方法 |
CN107341844A (zh) * | 2017-06-21 | 2017-11-10 | 上海大学 | 一种基于多Kinect的实时三维人体绘制方法 |
-
2018
- 2018-11-15 CN CN201811359080.4A patent/CN109202912B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013023130A1 (en) * | 2011-08-11 | 2013-02-14 | Siemens Healthcare Diagnostics Inc. | Methods and apparatus to calibrate an orientation between a robot gripper and a camera |
CN103971378A (zh) * | 2014-05-29 | 2014-08-06 | 福州大学 | 一种混合视觉系统中全景图像的三维重建方法 |
DE102015101710B4 (de) * | 2015-01-22 | 2016-09-08 | GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) | Verfahren zum Kalibrieren eines beweglichen Greiforgans unter Verwendung einer entfernten Digitalkamera |
CN105976353A (zh) * | 2016-04-14 | 2016-09-28 | 南京理工大学 | 基于模型和点云全局匹配的空间非合作目标位姿估计方法 |
CN106041937A (zh) * | 2016-08-16 | 2016-10-26 | 河南埃尔森智能科技有限公司 | 一种基于双目立体视觉的机械手抓取控制系统的控制方法 |
CN107341844A (zh) * | 2017-06-21 | 2017-11-10 | 上海大学 | 一种基于多Kinect的实时三维人体绘制方法 |
Cited By (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109807933A (zh) * | 2019-01-29 | 2019-05-28 | 江苏通佑视觉科技有限公司 | 一种能力图点云更新方法、装置、设备及存储介质 |
CN109807933B (zh) * | 2019-01-29 | 2022-04-15 | 江苏通佑视觉科技有限公司 | 一种能力图点云更新方法、装置、设备及存储介质 |
CN111716340A (zh) * | 2019-03-22 | 2020-09-29 | 达明机器人股份有限公司 | 3d相机与机械手臂坐标系统的校正装置及方法 |
CN111716340B (zh) * | 2019-03-22 | 2022-10-14 | 达明机器人股份有限公司 | 3d相机与机械手臂坐标系统的校正装置及方法 |
CN109919984A (zh) * | 2019-04-15 | 2019-06-21 | 武汉惟景三维科技有限公司 | 一种基于局部特征描述子的点云自动配准方法 |
CN110033409A (zh) * | 2019-04-18 | 2019-07-19 | 中国科学技术大学 | 一种迭代最近点刚性注册方法及系统 |
CN110033409B (zh) * | 2019-04-18 | 2021-04-23 | 中国科学技术大学 | 一种迭代最近点刚性注册方法及系统 |
CN110378937A (zh) * | 2019-05-27 | 2019-10-25 | 浙江工业大学 | 基于Kinect摄像头的工业机械臂人机安全距离检测方法 |
CN110378937B (zh) * | 2019-05-27 | 2021-05-11 | 浙江工业大学 | 基于Kinect摄像头的工业机械臂人机安全距离检测方法 |
CN110335296A (zh) * | 2019-06-21 | 2019-10-15 | 华中科技大学 | 一种基于手眼标定的点云配准方法 |
CN111347426B (zh) * | 2020-03-26 | 2021-06-04 | 季华实验室 | 一种基于3d视觉的机械臂精确放置轨迹规划方法 |
CN111347426A (zh) * | 2020-03-26 | 2020-06-30 | 季华实验室 | 一种基于3d视觉的机械臂精确放置轨迹规划方法 |
CN111462202A (zh) * | 2020-04-08 | 2020-07-28 | 中国科学技术大学 | 非刚性注册方法及系统 |
CN111462202B (zh) * | 2020-04-08 | 2022-09-02 | 中国科学技术大学 | 非刚性注册方法及系统 |
CN111739096A (zh) * | 2020-06-24 | 2020-10-02 | 深圳阿米嘎嘎科技有限公司 | 深度传感器移动时自定位方法及系统 |
CN113967070A (zh) * | 2020-07-23 | 2022-01-25 | 连俊文 | 机械臂控制方法和皮肤表面处理设备 |
CN112720493A (zh) * | 2020-12-29 | 2021-04-30 | 山西万立科技有限公司 | 一种机械臂与障碍物的双层次碰撞检测算法 |
CN113177983A (zh) * | 2021-03-25 | 2021-07-27 | 埃夫特智能装备股份有限公司 | 基于点云几何特征的角焊缝定位方法 |
CN113177983B (zh) * | 2021-03-25 | 2022-10-18 | 埃夫特智能装备股份有限公司 | 基于点云几何特征的角焊缝定位方法 |
CN113524201A (zh) * | 2021-09-07 | 2021-10-22 | 杭州柳叶刀机器人有限公司 | 机械臂位姿主动调节方法、装置、机械臂和可读存储介质 |
CN113894785A (zh) * | 2021-10-27 | 2022-01-07 | 华中科技大学无锡研究院 | 水轮机叶片在位测量与加工的控制方法、装置及系统 |
CN113894785B (zh) * | 2021-10-27 | 2023-06-09 | 华中科技大学无锡研究院 | 水轮机叶片在位测量与加工的控制方法、装置及系统 |
CN116486012A (zh) * | 2023-04-27 | 2023-07-25 | 中国民用航空总局第二研究所 | 一种航空器三维模型构建方法、存储介质及电子设备 |
CN116486012B (zh) * | 2023-04-27 | 2024-01-23 | 中国民用航空总局第二研究所 | 一种航空器三维模型构建方法、存储介质及电子设备 |
CN117456001A (zh) * | 2023-12-21 | 2024-01-26 | 广州泽亨实业有限公司 | 一种基于点云配准的工件姿态检测方法 |
CN117456001B (zh) * | 2023-12-21 | 2024-04-09 | 广州泽亨实业有限公司 | 一种基于点云配准的工件姿态检测方法 |
Also Published As
Publication number | Publication date |
---|---|
CN109202912B (zh) | 2020-09-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109202912A (zh) | 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 | |
CN107901041B (zh) | 一种基于图像混合矩的机器人视觉伺服控制方法 | |
CN111775146B (zh) | 一种工业机械臂多工位作业下的视觉对准方法 | |
CN109514133B (zh) | 一种基于线结构光感知的焊接机器人3d曲线焊缝自主示教方法 | |
CN104067781B (zh) | 基于虚拟机器人与真实机器人集成的采摘系统及方法 | |
CN104408408A (zh) | 基于曲线三维重建的机器人喷涂轨迹提取方法及提取装置 | |
CN113910219B (zh) | 运动臂系统以及控制方法 | |
CN108942923A (zh) | 一种机械臂抓取控制方法 | |
CN112862878B (zh) | 一种基于3d视觉的机械臂修坯方法 | |
CN104325268A (zh) | 一种基于智能学习的工业机器人三维空间自主装配方法 | |
CN113814986B (zh) | 一种基于机器视觉控制scara机器人的方法及系统 | |
CN113421291B (zh) | 利用点云配准技术和三维重建技术的工件位置找正方法 | |
CN114571153A (zh) | 一种基于3d点云的焊缝识别与机器人焊缝跟踪方法 | |
CN115179294A (zh) | 机器人控制方法、系统、计算机设备、存储介质 | |
Lai et al. | Integration of visual information and robot offline programming system for improving automatic deburring process | |
CN113172659B (zh) | 基于等效中心点识别的柔性机器人臂形测量方法及系统 | |
CN113319859B (zh) | 一种机器人示教方法、系统、装置及电子设备 | |
CN114055255A (zh) | 一种基于实时点云的大型复杂构件表面打磨路径规划方法 | |
CN114851209B (zh) | 一种基于视觉的工业机器人工作路径规划优化方法及系统 | |
CN113172632A (zh) | 一种基于图像的简化机器人视觉伺服控制方法 | |
CN116766194A (zh) | 基于双目视觉的盘类工件定位与抓取系统和方法 | |
CN117841041A (zh) | 基于多臂协同的机械臂组合装置 | |
CN116872216A (zh) | 一种基于有限时间控制的机器人视觉伺服作业方法 | |
Behera et al. | A hybrid neural control scheme for visual-motor coordination | |
CN204288242U (zh) | 基于曲线三维重建的机器人喷涂轨迹提取装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |