CN116852352A - 一种基于ArUco码的电力二次设备机械臂定位方法 - Google Patents

一种基于ArUco码的电力二次设备机械臂定位方法 Download PDF

Info

Publication number
CN116852352A
CN116852352A CN202310704321.9A CN202310704321A CN116852352A CN 116852352 A CN116852352 A CN 116852352A CN 202310704321 A CN202310704321 A CN 202310704321A CN 116852352 A CN116852352 A CN 116852352A
Authority
CN
China
Prior art keywords
coordinate system
mechanical arm
target
aruco
matrix
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310704321.9A
Other languages
English (en)
Inventor
王伟
袁继军
李征
张剑飞
陈学伟
王赛
李柄君
赵燕
田新成
杜鹏
白杰
张彦雷
杨鸿宏
张娟
马仁杰
彭玉松
李佳斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Corp of China SGCC
Tangshan Power Supply Co of State Grid Jibei Electric Power Co Ltd
Original Assignee
State Grid Corp of China SGCC
Tangshan Power Supply Co of State Grid Jibei Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Corp of China SGCC, Tangshan Power Supply Co of State Grid Jibei Electric Power Co Ltd filed Critical State Grid Corp of China SGCC
Priority to CN202310704321.9A priority Critical patent/CN116852352A/zh
Publication of CN116852352A publication Critical patent/CN116852352A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1664Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning

Abstract

本发明涉及一种基于ArUco码的电力二次设备机械臂定位方法,属于机械臂控制技术领域。技术方案是:将深度相机安装于机械臂末端,与机械臂的夹爪保持平行,通过识别ArUco码不断调整相机位姿,保证相机坐标系Z轴与目标坐标系Z轴平行,根据手眼标定获得目标在机械臂基坐标系下的三维坐标,通过逆运动学求解得到RML63人形协作机械臂六个关节角,最终通过ROS机器人操作系统控制机械臂运动完成目标抓取任务。本发明的有益效果是:在较低的使用成本情况下可以最大限度减少外部环境因素对视觉定位效果的影响,定位准确度高,可以实现机械臂对电力设备柜门把手目标的实时识别与抓取,能够满足当前电力巡检机器人自主作业的需求。

Description

一种基于ArUco码的电力二次设备机械臂定位方法
技术领域
本发明涉及一种基于ArUco码的电力二次设备机械臂定位方法,属于机械臂控制技术领域。
背景技术
电力系统中设备巡检是及时准确发现设备安全隐患、保证电网设备正常工作、变电站安全稳定运行的一项十分重要的常规性工作,特别是变电站这种设备数量和种类较多的环境,一旦有隐患没有及时排除,轻则无法正常运行,重则影响周边大面积区域的正常生产生活,甚至造成人身伤害。当前人工和机器人巡检作为电网的两种常见的巡检方式,随着国家电网系统的不断完善,电力巡检系统的自动化水平越来越高,人工巡检方式已经不能满足当下及未来电网智能发展需求,也正是在这样的背景下,智能巡检机器人也应运而生。智能巡检机器人集成仿生机器人技术、多传感器融合技术、智能控制技术、导航定位技术以及物联网技术等,能够实现电网设备全天候、全方位、全自主智能巡检和监控,大幅度降低电网工人劳动强度,降低电网系统运维成本。然而当前研发巡检机器人主要功能仅仅停留在对电力设备的远程测量和监控上,不具备直接操作电力设备的能力,与期待的智能化水平还相差甚远。随着自动化、智能化水平的发展,将机器臂与机器视觉图像识别技术相结合,实现不同规程特征下机器人自主作业是未来巡检机器人的重点发展方向。传统的机械臂自主作业方法一般是采用拖动示教的方式,将机器人手臂拖动到预先设置好的指定位置,机器人完成既定轨迹存储后再进行重复操作。由于缺乏视觉定位信息,对外部环境、目标特征状态和抓取任务依赖性很强,一旦发生了变化,就需要重新配置,灵活性差。基于机器视觉的机械臂自主作业主要是利用图像检测得到目标在机械臂基坐标系下的三维坐标,近几年来随着深度学习视觉技术的迅速发展,将深度学习技术与机器人操作结合起来具有较广的应用,但是该目标检测方法易受光照变化、遮挡等条件的影响,在实际机器臂自主作业过程中存在识别定位率低、鲁棒性差、运行时间长等问题。
发明内容
本发明目的是提供一种基于ArUco码的电力二次设备机械臂定位方法,在较低的使用成本情况下可以最大限度减少外部环境因素对视觉定位效果的影响,定位准确度高,可以实现机械臂对电力设备柜门把手目标的实时识别与抓取,能够满足当前电力巡检机器人自主作业的需求,解决了背景技术中存在的问题。
本发明的技术方案是:
一种基于ArUco码的电力二次设备机械臂定位方法,包含如下步骤:将深度相机安装于机械臂末端,与机械臂的夹爪保持平行,通过识别ArUco码不断调整相机位姿,保证相机坐标系Z轴与目标坐标系Z轴平行,根据手眼标定获得目标在机械臂基坐标系下的三维坐标,通过逆运动学求解得到RML63人形协作机械臂六个关节角,最终通过ROS机器人操作系统控制机械臂运动完成目标抓取任务。
具体步骤如下:
①通过图像识别技术或相机来对ArUco码进行姿态估计,建立ArUco码图像坐标系和相机坐标系的坐标转换关系;
②利用基于对偶四元数的手眼标定模型,测算出RML63人形协作机械臂坐标系与RealSense D455深度相机坐标系间的相对位姿关系,从而确定待抓取物体在机器人坐标系下的三维空间坐标值,然后通过机器人运动学方程,采用RRT-Connect轨迹规划算法进行规划,确定行程轨迹实现机械臂自主作业;
机械臂手眼关系矩阵X以及机械臂基坐标系与世界坐标系方位关系Y可以表示为矩阵方程
AX=YB (1)
其中,A表示世界坐标系到不同姿态的摄像机坐标系的位姿变换矩阵,B表示为不同姿态的机械臂工具坐标系到机械臂基坐标系的位姿变换矩阵,令RA,RX,RY,RB分别表示A、X、Y、B 4×4的位姿变换矩阵中的旋转部分,tA,tX,tY,tB分别表示A、X、Y、B 4×4变换矩阵中的平移部分,则齐次矩阵方程(1)可以表示为:
将上式解耦展开成旋转和平移分开的形式为:
RARX=RYRB (3)
RAtX+tA=RYtB+tY (4)
将上式用对偶四元数参数化法表示,用向量a、b分别表示两个连续有限运动的四元数,则由四元数矩阵乘法交换性可得,此时可以运用LM最小二乘方法求解对应的旋转矩阵和平移向量,确定机器人坐标系与世界坐标系之间的变换矩阵Y,从而确定ArUco码在机械臂坐标系的三维空间坐标值;
其中,W(a′,b′)表示由对偶四元数的对偶部分a′,b′所组成的4×8的矩阵,q(x,y)可以由奇异值分解解出,q′(x,y)就是3×3平移向量tX,tY所对应的对偶四元数中的对偶部分,经n(n≥3)次测量得到V(ai,bi)和W(ai′,bi′),建立4n×8阶矩阵L′=[W(a1′,b1′),W(a2′,b2′),…,W(an′,bn′)]和L,将上式转化为齐次方程组:
Lq′(x,y)+L′q(x,y)=0 (6)
再利用对偶四元数的单位行和正交性限制条件,方程组(6)可以表示为带有约束条件的最优化问题:
其中,||·||表示矩阵F-范数,利用拉格朗日乘法和非线性优化算法,式(7)中多元函数最优化问题可以很好收敛到极值;待抓取目标与ArUco码同处在一个平面,以ArUco码的中心点作为世界坐标系,待抓取目标的基点作为物体坐标系,将待抓取目标坐标系的轴线与世界坐标系的轴线依次平行,同时对目标物体的旋转矩阵进行约束,再通过(7)式确定ArUco码所在世界坐标系与机械臂基坐标系的坐标变换关系,最终可通过世界坐标系与目标坐标系之间平移矩阵求出待抓取目标在机械臂下的位姿信息。
所述ArUco码的数量为四个,四个ArUco码组成的码盘围绕在电力设备柜门把手,以左上角的码为第一检测码,出现遮挡则顺时针对其他进行检测,识别出ArUco码后,会从视野范围寻找电力设备柜门把手目标进行抓取。
本发明的有益效果是:设备成本低,无需昂贵三维定位设备,仅仅使用普通的相机和廉价的二维码贴即可实现电力二次设备目标识别与精确定位;运行效率高,无需复杂双目立体视觉算法即能够实现对电力设备柜门把手小目标的抓取,ArUco二维码图像显著性好,易于编码,容易检测,可以满足嵌入式开发板实时运算需求;算法鲁棒性好,在较低的使用成本情况下可以最大限度减少外部环境因素对视觉定位效果的影响,增强电力巡检机器人自主作业的可靠性。
附图说明
图1为本发明自主抓取系统总体组成与工作原理;
图2为本发明ArUco码的内部id信息图;
图3为本发明ArUco码的黑色边框图;
图4为本发明ArUco码图;
图5为本发明手眼关系模型图;
图6为本发明机械臂抓取实验平台示意图;
图7为本发明RML63机械臂抓取电力柜门把手过程示意图。
具体实施方式
以下结合附图,通过实施例对本发明做进一步的说明。
一种基于ArUco码的电力二次设备机械臂定位方法,包含如下步骤:将深度相机安装于机械臂末端,与机械臂的夹爪保持平行,通过识别ArUco码不断调整相机位姿,保证相机坐标系Z轴与目标坐标系Z轴平行,根据手眼标定获得目标在机械臂基坐标系下的三维坐标,通过逆运动学求解得到RML63人形协作机械臂六个关节角,最终通过ROS机器人操作系统控制机械臂运动完成目标抓取任务。
具体步骤如下:
①通过图像识别技术或相机来对ArUco码进行姿态估计,建立ArUco码图像坐标系和相机坐标系的坐标转换关系;考虑到基于模型的姿态估计方法主要是通过对比真实图像和模型图像,进行相似度计算目标姿态,非常依赖于局部特征的准确检测,当噪声较大无法提取准确的局部特征的时候,会影响姿态估计方法的稳定性。而基于学习的姿态估计方法一般通过图像的全局特征进行匹配分析,但需要预先定义好姿态类别,通过模式分类的方法训练姿态分类器以实现姿态识别,因此该方法鲁棒性很大程度依赖于训练样本的充分程度。因此本发明利用容易检测且具有较高的鲁棒性ArUco码(参照附图2、3、4)作为视觉检测的协助来完成电力设备柜门把手等小目标位置和位姿确定;
②利用基于对偶四元数的手眼标定模型,准确地测算出TML63人形协作机械臂坐标系与RealSense D455深度相机坐标系间的相对位姿关系,从而确定待抓取物体在机器人坐标系下的三维空间坐标值,然后通过机器人运动学方程(Denavit-Hartenberg参数),采用RRT-Connect轨迹规划算法进行规划,确定行程轨迹实现机械臂自主作业;
参照附图5,机械臂手眼关系矩阵X以及机械臂基坐标系与世界坐标系方位关系Y可以表示为矩阵方程
AX=YB (1)
其中,A表示世界坐标系到不同姿态的摄像机坐标系的位姿变换矩阵,B表示为不同姿态的机械臂工具坐标系到机械臂基坐标系的位姿变换矩阵,令RA,RX,RY,RB分别表示A、X、Y、B4×4的位姿变换矩阵中的旋转部分,tA,tX,tY,tB分别表示A、X、Y、B 4×4变换矩阵中的平移部分,则齐次矩阵方程(1)可以表示为:
将上式解耦展开成旋转和平移分开的形式为:
RARX=RYRB (3)
RAtX+tA=RYtB+tY (4)
将上式用对偶四元数参数化法表示,用向量a、b分别表示两个连续有限运动的四元数,则由四元数矩阵乘法交换性可得,此时可以运用LM最小二乘方法求解对应的旋转矩阵和平移向量,确定机器人坐标系与世界坐标系之间的变换矩阵Y,从而确定ArUco码在机械臂坐标系的三维空间坐标值;
其中,W(a′,b′)表示由对偶四元数中的对偶部分a′,b′所组成的4×8的矩阵,q(x,y)可以由奇异值分解解出,q′(x,y)就是3×3平移向量tX,tY所对应的对偶四元数中的对偶部分,经n(n≥3)次测量得到V(ai,bi)和W(ai′,bi′),建立4n×8阶矩阵L′=[W(a1′,b1′),W(a2′,b2′),…,W(an′,bn′)]和L,将上式转化为齐次方程组:
Lq′(x,y)+L′q(x,y)=0 (6)
再利用对偶四元数的单位行和正交性限制条件,方程组(6)可以表示为带有约束条件的最优化问题:
其中,||·||表示矩阵F-范数,利用拉格朗日乘法和非线性优化算法,式(7)中多元函数最优化问题可以很好收敛到极值;考虑到待抓取目标与ArUco码同处在一个平面,以ArUco码的中心点作为世界坐标系,待抓取目标的基点作为物体坐标系,将待抓取目标坐标系的轴线与世界坐标系的轴线依次平行,同时对目标物体的旋转矩阵进行约束,再通过(7)式确定ArUco码所在世界坐标系与机械臂基坐标系的坐标变换关系,最终可通过世界坐标系与目标坐标系之间平移矩阵求出待抓取目标在机械臂下的位姿信息。
考虑到单个ArUco码在数据采集时易被遮挡,鲁棒性不高,本发明ArUco码的数量为四个,四个ArUco码组成的码盘围绕在电力设备柜门把手,以左上角的码为第一检测码,出现遮挡则顺时针对其他进行检测,识别出ArUco码后,会从视野范围寻找电力设备柜门把手目标进行抓取。
参照附图6,利用睿尔曼RML63人形协作机械臂、英特尔Intel RealSense D455深度相机及ArUco码,搭建机械臂抓取实验系统,对电力设备柜门把手进行定位抓取实验,其中,人形协作机械臂的重复定位精度为±0.05mm,工作半径638.5mm,相机分辨率为1280×720pixel,视场角为87°×58°×95°。实验前先将相机固定在机械臂末端执行器法兰盘上。上位机配置为NVIDTA JETSON TX2嵌入式开发板,384-core NVIDIA VoltaTM GPU with48Tensor Cores,8GB 128位LPDDR4内存,运行系统Linux版本号为Ubuntu18.04,控制器放置在机械臂底盘内部。抓取过程如图7所示,实验过程数据如表1所示,
表1实验结果表
抓取时是一次性抓取,机械臂抓到门把手打开记为循环抓取一次,共循环抓取10次,记录抓取成功率。表1中平均识别时间为1.98s,该时间包括从图片中检测到ArUco码并预测其相对于机械臂位姿的时间。平均导航时间为15.92s,该时间包含机械臂运动到电力设备门把手拍照点的时间,拍照点即机械臂根据ArUco码检测位姿运动到一个合适的位姿,以便让门把手成像在机械臂末端相机视野中心。平均定位时间为1.18s,该时间指的是计算电力设备门把手相对于机械臂位姿的时间,方便后续机械臂完成后续抓取开门操作。在NVIDIA JETSON TX2嵌入式处理器下,计算抓取目标所需要的识别、导航、定位、抓取、回程等平均时间,从开始检测到ArUco码到开电柜门结束最后机械臂回归初始化位置总时间为48.3s,可以满足电力巡检机器人自主作业的需求。
本发明首先分析ArUco码图像识别技术,得到ArUco码在摄像机坐标系中的位置,然后结合姿态估计与机器人手眼标定算法求解待抓取目标在机器人基坐标的空间坐标,最后通过ROS机器人操作系统控制机械臂运动完成目标抓取任务。本发明设备成本低,无需昂贵三维定位设备(如激光雷达,结构光或双目相机)仅仅使用普通的相机和廉价的二维码贴即可以实现电力二次设备目标识别与精确定位;运行效率高,无需复杂双目立体视觉算法即能够实现对电力设备柜门把手小目标的抓取,ArUco二维码图像显著性好,其由一个宽的黑色边框和一个内部二进制矩阵组成,易于编码,容易检测,可以满足嵌入式开发板实时运算需求;算法鲁棒性好,无论是传统视觉还是深度学习视觉目标检测方法都易受光照变化、遮挡等条件的影响,灵活性差,而基于ArUco码的电力二次设备目标定位方法在较低的使用成本情况下可以最大限度减少外部环境因素对视觉定位效果的影响,增强电力巡检机器人自主作业的可靠性。

Claims (3)

1.一种基于ArUco码的电力二次设备机械臂定位方法,其特征在于包含如下步骤:将深度相机安装于机械臂末端,与机械臂的夹爪保持平行,通过识别ArUco码不断调整相机位姿,保证相机坐标系Z轴与目标坐标系Z轴平行,根据手眼标定获得目标在机械臂基坐标系下的三维坐标,通过逆运动学求解得到RML63人形协作机械臂六个关节角,最终通过ROS机器人操作系统控制机械臂运动完成目标抓取任务。
2.根据权利要求1所述的一种基于ArUco码的电力二次设备机械臂定位方法,其特征在于具体步骤如下:
①通过图像识别技术或相机来对ArUco码进行姿态估计,建立ArUco码图像坐标系和相机坐标系的坐标转换关系;
②利用基于对偶四元数的手眼标定模型,测算出RML63人形协作机械臂坐标系与RealSense D455深度相机坐标系间的相对位姿关系,从而确定待抓取物体在机器人坐标系下的三维空间坐标值,然后通过机器人运动学方程,采用RRT-Connect轨迹规划算法进行规划,确定行程轨迹实现机械臂自主作业;
机械臂手眼关系矩阵X以及机械臂基坐标系与世界坐标系方位关系Y可以表示为矩阵方程
AX=YB (1)
其中,A表示世界坐标系到不同姿态的摄像机坐标系的位姿变换矩阵,B表示为不同姿态的机械臂工具坐标系到机械臂基坐标系的位姿变换矩阵,令RA,RX,RY,RB分别表示A、X、Y、B 4×4的位姿变换矩阵中的旋转部分,tA,tX,tY,tB分别表示A、X、Y、B 4×4变换矩阵中的平移部分,则齐次矩阵方程(1)可以表示为:
将上式解耦展开成旋转和平移分开的形式为:
RARx=RYRB (3)
RAtX+tA=RYtB+tY (4)
将上式用对偶四元数参数化法表示,用向量a、b分别表示两个连续有限运动的四元数,则由四元数矩阵乘法交换性可得,此时可以运用LM最小二乘方法求解对应的旋转矩阵和平移向量,确定机器人坐标系与世界坐标系之间的变换矩阵Y,从而确定ArUco码在机械臂坐标系的三维空间坐标值;
其中,W(a′,b′)表示由对偶四元数中的对偶部分a′,b′所组成的4×8的矩阵,q(x,y)可以由奇异值分解解出,q′(x,y)就是3×3平移向量tX,tY所对应的对偶四元数中的对偶部分,经n(n≥3)次测量得到V(ai,bi)和W(ai′,bi′),建4n×8阶矩阵L′=[W(a1′,b1′),W(a2′,b2′),…,W(an′,bn′)]和L,将上式转化为齐次方程组:
Lq′(x,y)+L′q(x,y)=0 (6)
再利用对偶四元数的单位行和正交性限制条件,方程组(6)可以表示为带有约束条件的最优化问题:
其中,||·||表示矩阵F-范数,利用拉格朗日乘法和非线性优化算法,式(7)中多元函数最优化问题可以很好收敛到极值;待抓取目标与ArUco码同处在一个平面,以ArUco码的中心点作为世界坐标系,待抓取目标的基点作为物体坐标系,将待抓取目标坐标系的轴线与世界坐标系的轴线依次平行,同时对目标物体的旋转矩阵进行约束,再通过(7)式确定ArUco码所在世界坐标系与机械臂基坐标系的坐标变换关系,最终可通过世界坐标系与目标坐标系之间平移矩阵求出待抓取目标在机械臂下的位姿信息。
3.根据权利要求1或2所述的一种基于ArUco码的电力二次设备机械臂定位方法,其特征在于:所述ArUco码的数量为四个,四个ArUco码组成的码盘围绕在电力设备柜门把手,以左上角的码为第一检测码,出现遮挡则顺时针对其他进行检测,识别出ArUco码后,会从视野范围寻找电力设备柜门把手目标进行抓取。
CN202310704321.9A 2023-06-14 2023-06-14 一种基于ArUco码的电力二次设备机械臂定位方法 Pending CN116852352A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310704321.9A CN116852352A (zh) 2023-06-14 2023-06-14 一种基于ArUco码的电力二次设备机械臂定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310704321.9A CN116852352A (zh) 2023-06-14 2023-06-14 一种基于ArUco码的电力二次设备机械臂定位方法

Publications (1)

Publication Number Publication Date
CN116852352A true CN116852352A (zh) 2023-10-10

Family

ID=88224245

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310704321.9A Pending CN116852352A (zh) 2023-06-14 2023-06-14 一种基于ArUco码的电力二次设备机械臂定位方法

Country Status (1)

Country Link
CN (1) CN116852352A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117415826A (zh) * 2023-12-19 2024-01-19 苏州一目万相科技有限公司 检测系统的控制方法、装置和可读存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117415826A (zh) * 2023-12-19 2024-01-19 苏州一目万相科技有限公司 检测系统的控制方法、装置和可读存储介质
CN117415826B (zh) * 2023-12-19 2024-02-23 苏州一目万相科技有限公司 检测系统的控制方法、装置和可读存储介质

Similar Documents

Publication Publication Date Title
CN111055281B (zh) 一种基于ros的自主移动抓取系统与方法
CN109108942B (zh) 基于视觉实时示教与自适应dmps的机械臂运动控制方法和系统
US8244402B2 (en) Visual perception system and method for a humanoid robot
CN111496770A (zh) 基于3d视觉与深度学习的智能搬运机械臂系统及使用方法
JP2022542239A (ja) 視角エンベディングに基づいた自律タスク実行
CN102848388A (zh) 基于多传感器的服务机器人定位和抓取方法
CN111251295A (zh) 一种应用于参数化零件的视觉机械臂抓取方法及装置
CN116852352A (zh) 一种基于ArUco码的电力二次设备机械臂定位方法
CN115299245B (zh) 一种智能水果采摘机器人的控制方法及控制系统
Paolillo et al. Interlinked visual tracking and robotic manipulation of articulated objects
CN114770461B (zh) 一种基于单目视觉的移动机器人及其自动抓取方法
CN116494201A (zh) 一种监控一体化的电力机房巡检机器人及无人巡检方法
CN112207839A (zh) 可移动的家居服务机器人及方法
Guo et al. Design and control of the open apple-picking-robot manipulator
Ranjan et al. Identification and control of NAO humanoid robot to grasp an object using monocular vision
Zhou et al. Deep learning on 3d object detection for automatic plug-in charging using a mobile manipulator
CN117103277A (zh) 一种基于多模态数据融合的机械手臂感知方法
CN115861780B (zh) 一种基于yolo-ggcnn的机械臂检测抓取方法
Faria et al. A methodology for autonomous robotic manipulation of valves using visual sensing
CN114888768A (zh) 一种基于多传感器融合的移动双工业机器人协同抓取系统及方法
Schnaubelt et al. Autonomous assistance for versatile grasping with rescue robots
Wang et al. Construction and research of an underwater autonomous dual manipulator platform
Gietler et al. Forestry Crane Automation using Learning-based Visual Grasping Point Prediction
Wang et al. Object Grabbing of Robotic Arm Based on OpenMV Module Positioning
Fu et al. Robotic arm intelligent grasping system for garbage recycling

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination