CN111625001B - 机器人的控制方法及装置、工业机器人 - Google Patents
机器人的控制方法及装置、工业机器人 Download PDFInfo
- Publication number
- CN111625001B CN111625001B CN202010471125.8A CN202010471125A CN111625001B CN 111625001 B CN111625001 B CN 111625001B CN 202010471125 A CN202010471125 A CN 202010471125A CN 111625001 B CN111625001 B CN 111625001B
- Authority
- CN
- China
- Prior art keywords
- image
- robot
- module
- shooting
- target point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 230000000007 visual effect Effects 0.000 claims abstract description 99
- 230000006854 communication Effects 0.000 claims abstract description 56
- 238000004891 communication Methods 0.000 claims abstract description 55
- 230000003287 optical effect Effects 0.000 claims description 21
- 238000004458 analytical method Methods 0.000 claims description 15
- 238000003384 imaging method Methods 0.000 claims description 15
- 238000013507 mapping Methods 0.000 claims description 13
- 238000010276 construction Methods 0.000 claims description 4
- 230000007175 bidirectional communication Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 230000006855 networking Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000005498 polishing Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 239000003638 chemical reducing agent Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Electromagnetism (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manipulator (AREA)
Abstract
本发明公开了一种机器人的控制方法及装置、工业机器人。其中,该方法包括:控制拍摄装置与预设机器人之间建立第一通讯连接;通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动;分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标;基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。本发明解决了相关技术中机器人无法与其它设备建立通讯,导致机器人工作效率降低的技术问题。
Description
技术领域
本发明涉机器人控制技术领域,具体而言,涉及一种机器人的控制方法及装置、工业机器人。
背景技术
相关技术中,机器人开始应用于各种生产生活中,包括:打磨、抛光、码垛、视觉分拣,但是当前的机器人控制存在明显的弊端,即需要对每个机器人进行单一指令控制,每个机器人都需要设置一个控制台,机器人与其它设备之间无法相互通讯,这样会导致机器人与其它设置之间无法协同工作,造成不同环境下的工作困难,工作效率降低。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种机器人的控制方法及装置、工业机器人,以至少解决相关技术中机器人无法与其它设备建立通讯,导致机器人工作效率降低的技术问题。
根据本发明实施例的一个方面,提供了一种机器人的控制方法,包括:控制拍摄装置与预设机器人之间建立第一通讯连接;通过所述拍摄装置获取当前视觉场景的机器人图像,其中,所述预设机器人在所述当前视觉场景中移动;分析所述机器人图像对应所述当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标;基于所述第一通讯连接,将所述目标点的标定空间坐标发送至所述预设机器人,以控制所述预设机器人移动至目标点。
可选地,所述拍摄装置包括第一摄像模块和第二摄像模块,通过所述拍摄装置获取当前视觉场景的机器人图像包括:控制第一摄像模块拍摄在第一视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第一图像;控制第二摄像模块拍摄在第一视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第二图像,其中,所述第一摄像模块和所述第二摄像模块平行放置;将所述第一图像和第二图像作为所述机器人图像。
可选地,分析所述机器人图像对应所述当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标的步骤,包括:分析第一图像和第二图像中每个图像点的亮度,得到图像亮度参数;基于所述图像亮度参数,确定当前视觉场景下的空间物体上目标点的反射光强度;基于所述反射光强度,分析所述目标点的图像位置与空间物体表面点的对应位置映射;基于所述对应位置映射,确定所述目标点的标定空间坐标。
可选地,在通过所述拍摄装置获取当前视觉场景的机器人图像之前,所述控制方法还包括:控制所述第一摄像模块和所述第二摄像模块处于平行状态;在处于平行状态下,控制所述第一摄像模块和所述第二摄像模块的拍摄光轴互相平行,以使两个摄像模块对应的两个成像平面共面;在两个成像平面共面后,构建图像坐标系和相机坐标系,其中,所述相机坐标系以两个摄像模块的光心为基点构建,所述图像坐标系以两个光心中间点为基点构建。
可选地,在通过所述拍摄装置获取当前视觉场景的机器人图像之前,所述控制方法还包括:建立第一摄像模块和第二摄像模块之间的第二通讯连接;基于所述第二通讯连接,控制所述第一摄像模块和所述第二摄像模块共同对当前视觉场景进行定位,得到定位信息,其中,所述定位信息用于预设机器人对码垛进行无序分拣。
根据本发明实施例的另一方面,还提供了一种机器人的控制装置,包括:控制单元,用于控制拍摄装置与预设机器人之间建立第一通讯连接;获取单元,用于通过所述拍摄装置获取当前视觉场景的机器人图像,其中,所述预设机器人在所述当前视觉场景中移动;分析单元,用于分析所述机器人图像对应所述当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标;控制单元,用于基于所述第一通讯连接,将所述目标点的标定空间坐标发送至所述预设机器人,以控制所述预设机器人移动至目标点。
可选地,所述拍摄装置包括第一摄像模块和第二摄像模块,所述获取单元包括:第一拍摄模块,用于控制第一摄像模块拍摄在第一视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第一图像;第二拍摄模块,用于控制第二摄像模块拍摄在第一视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第二图像,其中,所述第一摄像模块和所述第二摄像模块平行放置;第一确定模块,用于将所述第一图像和第二图像作为所述机器人图像。
可选地,所述分析单元包括:第一分析模块,用于分析第一图像和第二图像中每个图像点的亮度,得到图像亮度参数;第二确定模块,用于基于所述图像亮度参数,确定当前视觉场景下的空间物体上目标点的反射光强度;第二分析模块,用于基于所述反射光强度,分析所述目标点的图像位置与空间物体表面点的对应位置映射;第三确定模块,用于基于所述对应位置映射,确定所述目标点的标定空间坐标。
可选地,所述机器人的控制装置还包括:第一控制模块,用于在通过所述拍摄装置获取当前视觉场景的机器人图像之前,控制所述第一摄像模块和所述第二摄像模块处于平行状态;第二控制模块,用于在处于平行状态下,控制所述第一摄像模块和所述第二摄像模块的拍摄光轴互相平行,以使两个摄像模块对应的两个成像平面共面;构建模块,用于在两个成像平面共面后,构建图像坐标系和相机坐标系,其中,所述相机坐标系以两个摄像模块的光心为基点构建,所述图像坐标系以两个光心中间点为基点构建。
可选地,所述机器人的控制装置还包括:建立模块,用于在通过所述拍摄装置获取当前视觉场景的机器人图像之前,建立第一摄像模块和第二摄像模块之间的第二通讯连接;第三控制模块,用于基于所述第二通讯连接,控制所述第一摄像模块和所述第二摄像模块共同对当前视觉场景进行定位,得到定位信息,其中,所述定位信息用于预设机器人对码垛进行无序分拣。
根据本发明实施例的另一方面,还提供了一种工业机器人,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述任意一项所述的机器人的控制方法。
根据本发明实施例的另一方面,还提供了一种计算机存储介质,所述计算机存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机存储介质所在设备执行上述任意一项所述的机器人的控制方法。
本发明实施例中,在机器人控制过程中,可以控制拍摄装置与预设机器人之间建立第一通讯连接,通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动,分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标,基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。在该实施例中,可以实现机器人与拍摄装置的通讯连接,利用拍摄装置拍摄的图像,实现对机器人的视觉控制,机器人与其它拍摄装置之间的双向通讯,并且通过拍摄装置与控制器连接,实现视觉定位和机器人远程视觉控制,这样可以实现机器人与其它设备的联网控制,提高机器人的工作效率,从而解决相关技术中机器人无法与其它设备建立通讯,导致机器人工作效率降低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种可选的机器人的控制方法的流程图;
图2是根据本发明实施例的一种可选的机器人的控制装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例,提供了一种机器人的控制方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种可选的机器人的控制方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,控制拍摄装置与预设机器人之间建立第一通讯连接;
步骤S104,通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动;
步骤S106,分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标;
步骤S108,基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。
通过上述步骤,在机器人控制过程中,可以控制拍摄装置与预设机器人之间建立第一通讯连接,通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动,分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标,基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。在该实施例中,可以实现机器人与拍摄装置的通讯连接,利用拍摄装置拍摄的图像,实现对机器人的视觉控制,机器人与其它拍摄装置之间的双向通讯,并且通过拍摄装置与控制器连接,实现视觉定位和机器人远程视觉控制,这样可以实现机器人与其它设备的联网控制,提高机器人的工作效率,从而解决相关技术中机器人无法与其它设备建立通讯,导致机器人工作效率降低的技术问题。
本发明实施例可应用于各种机器人中,机器人的类型包括但不限于:工业机器人(如六轴工业机器人)、教育机器人,机器人可以包括基座、减速机、伺服电动机、传动齿轮、同步带、机械臂、机械抓手、法兰盘。
本发明实施例涉及的机器人可应用于各种工作环境,工作环境包括:打磨、抛光、视觉分拣、码垛等。以机器人进行视觉物品分拣和码垛功能为例,可以部署至少两个摄像模块,通过摄像模块与机器人之间的交互,可以实现对小物块的无需分拣摆放,提高机器人与摄像模块之间的通讯效率,顺逆双向解析通讯信号,解决机器人与摄像模块双向视觉通讯的交互问题。
下面结合上述各步骤来详细说明本发明。
步骤S102,控制拍摄装置与预设机器人之间建立第一通讯连接。
本发明实施例中,涉及的拍摄装置可以包括多个摄像模块,每个摄像模块可以实现三维视觉摄像,例如,摄像模块部署为3D视觉相机,在无序分拣场景中,可以部署两个3D视觉相机,实现多维立体检测和通讯控制。多个摄像模块与机器人之间可以建立多通道、多线程的连接,在通讯过程中,通过预设通讯协议实现双向通讯。
可选的,在通过拍摄装置获取当前视觉场景的机器人图像之前,控制方法还包括:建立第一摄像模块和第二摄像模块之间的第二通讯连接;基于第二通讯连接,控制第一摄像模块和第二摄像模块共同对当前视觉场景进行定位,得到定位信息,其中,定位信息用于预设机器人对码垛进行无序分拣。
本发明实施例中,不仅机器人与拍摄装置之间可建立通讯连接,拍摄装置所包含的各个摄像模块也可以建立通讯连接。
另一种可选的,在通过拍摄装置获取当前视觉场景的机器人图像之前,控制方法还包括:控制第一摄像模块和第二摄像模块处于平行状态;在处于平行状态下,控制第一摄像模块和第二摄像模块的拍摄光轴互相平行,以使两个摄像模块对应的两个成像平面共面;在两个成像平面共面后,构建图像坐标系和相机坐标系,其中,相机坐标系以两个摄像模块的光心为基点构建,图像坐标系以两个光心中间点为基点构建。
两个摄像模块之间平行放置,使得光轴互相平行;同时,设置摄像模块的另一对坐标轴共线,两个成像平面共面,两个摄像模块的光心之间设置一个固定距离。在成像平面共面后,可以建立图像坐标系和相机坐标系。
在本发明实施例,两个成像平面共面后,还可以构建世界坐标系,该世界坐标系可以是以机器人的基座中心点为基点,构建的三维立体坐标系。
在本发明实施例中,机器人的控制方法还包括:在通过拍摄装置获取当前视觉场景的机器人图像之前,判断摄像模块是否已经标定;若是摄像模块以及标定,对摄像模块与机器人进行通讯测试;控制机器人接收通讯测试消息,并基于通讯测试消息回复正常通讯信息。
步骤S104,通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动。
在本发明实施例中,拍摄装置包括第一摄像模块和第二摄像模块,通过拍摄装置获取当前视觉场景的机器人图像包括:控制第一摄像模块拍摄在第一视觉下预设机器人在当前视觉场景中移动的图像,得到第一图像;控制第二摄像模块拍摄在第一视觉下预设机器人在当前视觉场景中移动的图像,得到第二图像,其中,第一摄像模块和第二摄像模块平行放置;将第一图像和第二图像作为机器人图像。
步骤S106,分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标。
作为本发明可选的实施例,分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标的步骤,包括:分析第一图像和第二图像中每个图像点的亮度,得到图像亮度参数;基于图像亮度参数,确定当前视觉场景下的空间物体上目标点的反射光强度;基于反射光强度,分析目标点的图像位置与空间物体表面点的对应位置映射;基于对应位置映射,确定目标点的标定空间坐标。
本发明实施例可实现双目视觉定位,该双目视觉定位通过两个摄像模块拍摄图像,基于立体视差的原理,通过摄像模块获取不同视觉下同一场景的图像,根据不同图像中对应目标点的视差,得到目标点的标定空间坐标。
从已经获取的图像信息出发,图像上每个图像点的亮度反映了空间物体某点的反射光的强度,而该点的图像中位置与空间物体表面相应点的几何位置有关,通过图像亮度,确定视觉场景下的空间物体上目标点的反射光强度,进而基于对应位置映射,确定目标点的标定空间坐标。
步骤S108,基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。
在机器人移动至目标点后,机器人可以接收机械手动作指令,并基于机械手动作指令,完成物品分拣,将物品有序运动到指令空间位置。
本发明实施例中,可以建立机器人与拍摄装置之间的双向通讯,同时可以建立摄像模块之间的双向通讯,这样能够实现机器人与3D视觉的通讯连接,运用双目视觉定位算法,在定位范围发送、接收定位,双向交互定位,从而控制机器人准确、快速完成业务工作,提高工作效率。
下面通过另一种可选的实施例来说明本发明。
图2是根据本发明实施例的一种可选的机器人的控制装置的示意图,如图2所示,该控制装置可以包括:控制单元21、获取单元23、分析单元25、控制单元27,其中,控制单元21,用于控制拍摄装置与预设机器人之间建立第一通讯连接;
获取单元23,用于通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动;
分析单元25,用于分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标;
控制单元27,用于基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。
上述机器人的控制装置,在机器人控制过程中,可以通过控制单元21控制拍摄装置与预设机器人之间建立第一通讯连接,利用获取单元23通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动,通过分析单元25分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标,通过控制单元27基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。在该实施例中,可以实现机器人与拍摄装置的通讯连接,利用拍摄装置拍摄的图像,实现对机器人的视觉控制,实现机器人与其它拍摄装置之间的双向通讯,并且通过拍摄装置与控制器连接,实现视觉定位和机器人远程视觉控制,这样可以实现机器人与其它设备的联网控制,提高机器人的工作效率,从而解决相关技术中机器人无法与其它设备建立通讯,导致机器人工作效率降低的技术问题。
可选的,拍摄装置包括第一摄像模块和第二摄像模块,获取单元包括:第一拍摄模块,用于控制第一摄像模块拍摄在第一视觉下预设机器人在当前视觉场景中移动的图像,得到第一图像;第二拍摄模块,用于控制第二摄像模块拍摄在第一视觉下预设机器人在当前视觉场景中移动的图像,得到第二图像,其中,第一摄像模块和第二摄像模块平行放置;第一确定模块,用于将第一图像和第二图像作为机器人图像。
可选的,分析单元包括:第一分析模块,用于分析第一图像和第二图像中每个图像点的亮度,得到图像亮度参数;第二确定模块,用于基于图像亮度参数,确定当前视觉场景下的空间物体上目标点的反射光强度;第二分析模块,用于基于反射光强度,分析目标点的图像位置与空间物体表面点的对应位置映射;第三确定模块,用于基于对应位置映射,确定目标点的标定空间坐标。
另一种可选的,机器人的控制装置还包括:第一控制模块,用于在通过拍摄装置获取当前视觉场景的机器人图像之前,控制第一摄像模块和第二摄像模块处于平行状态;第二控制模块,用于在处于平行状态下,控制第一摄像模块和第二摄像模块的拍摄光轴互相平行,以使两个摄像模块对应的两个成像平面共面;构建模块,用于在两个成像平面共面后,构建图像坐标系和相机坐标系,其中,相机坐标系以两个摄像模块的光心为基点构建,图像坐标系以两个光心中间点为基点构建。
可选的,机器人的控制装置还包括:建立模块,用于在通过拍摄装置获取当前视觉场景的机器人图像之前,建立第一摄像模块和第二摄像模块之间的第二通讯连接;第三控制模块,用于基于第二通讯连接,控制第一摄像模块和第二摄像模块共同对当前视觉场景进行定位,得到定位信息,其中,定位信息用于预设机器人对码垛进行无序分拣。
上述的机器人的控制装置还可以包括处理器和存储器,上述控制单元21、获取单元23、分析单元25、控制单元27等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
上述处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过调整内核参数来将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。
上述存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
根据本发明实施例的另一方面,还提供了一种工业机器人,包括:处理器;以及存储器,用于存储处理器的可执行指令;其中,处理器配置为经由执行可执行指令来执行上述任意一项的机器人的控制方法。
根据本发明实施例的另一方面,还提供了一种计算机存储介质,计算机存储介质包括存储的程序,其中,在程序运行时控制计算机存储介质所在设备执行上述任意一项的机器人的控制方法。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:控制拍摄装置与预设机器人之间建立第一通讯连接;通过拍摄装置获取当前视觉场景的机器人图像,其中,预设机器人在当前视觉场景中移动;分析机器人图像对应当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标;基于第一通讯连接,将目标点的标定空间坐标发送至预设机器人,以控制预设机器人移动至目标点。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (7)
1.一种机器人的控制方法,其特征在于,包括:
控制拍摄装置与预设机器人之间建立第一通讯连接;
控制第一摄像模块和第二摄像模块处于平行状态;在处于平行状态下,控制所述第一摄像模块和所述第二摄像模块的拍摄光轴互相平行,以使两个摄像模块对应的两个成像平面共面;在两个成像平面共面后,构建图像坐标系和相机坐标系,其中,所述相机坐标系以两个摄像模块的光心为基点构建,所述图像坐标系以两个光心中间点为基点构建;
通过所述拍摄装置获取当前视觉场景的机器人图像,其中,所述预设机器人在所述当前视觉场景中移动,其中,机器人图像包括第一摄像模块拍摄的第一图像和第二拍摄模块拍摄的第二图像,通过所述第一摄像模块和所述第二摄像模块获取不同视觉下同一场景的图像;
分析所述机器人图像对应所述当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标,分析第一图像和第二图像中每个图像点的亮度,得到图像亮度参数,基于所述图像亮度参数,确定当前视觉场景下的空间物体上目标点的反射光强度,基于所述反射光强度,分析所述目标点的图像位置与空间物体表面点的对应位置映射,基于所述对应位置映射,确定所述目标点的标定空间坐标,其中,图像上每个图像点的亮度反映了空间物体某点的反射光的强度,而该点的图像中位置与空间物体表面相应点的几何位置有关;
基于所述第一通讯连接,将所述目标点的标定空间坐标发送至所述预设机器人,以控制所述预设机器人移动至目标点。
2.根据权利要求1所述的控制方法,其特征在于,通过所述拍摄装置获取当前视觉场景的机器人图像包括:
控制第一摄像模块拍摄在第一视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第一图像;
控制第二摄像模块拍摄在第二视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第二图像,其中,所述第一摄像模块和所述第二摄像模块平行放置;
将所述第一图像和第二图像作为所述机器人图像。
3.根据权利要求2所述的控制方法,其特征在于,在通过所述拍摄装置获取当前视觉场景的机器人图像之前,所述控制方法还包括:
建立第一摄像模块和第二摄像模块之间的第二通讯连接;
基于所述第二通讯连接,控制所述第一摄像模块和所述第二摄像模块共同对当前视觉场景进行定位,得到定位信息,其中,所述定位信息用于预设机器人对码垛进行无序分拣。
4.一种机器人的控制装置,其特征在于,包括:
控制单元,用于控制拍摄装置与预设机器人之间建立第一通讯连接;
第一控制模块,用于在通过所述拍摄装置获取当前视觉场景的机器人图像之前,控制第一摄像模块和第二摄像模块处于平行状态;第二控制模块,用于在处于平行状态下,控制所述第一摄像模块和所述第二摄像模块的拍摄光轴互相平行,以使两个摄像模块对应的两个成像平面共面;构建模块,用于在两个成像平面共面后,构建图像坐标系和相机坐标系,其中,所述相机坐标系以两个摄像模块的光心为基点构建,所述图像坐标系以两个光心中间点为基点构建;
获取单元,用于通过所述拍摄装置获取当前视觉场景的机器人图像,其中,所述预设机器人在所述当前视觉场景中移动,其中,机器人图像包括第一摄像模块拍摄的第一图像和第二拍摄模块拍摄的第二图像,通过所述第一摄像模块和所述第二摄像模块获取不同视觉下同一场景的图像;
分析单元,用于分析所述机器人图像对应所述当前视觉场景中目标点的视差参数,得到目标点的标定空间坐标,所述分析单元包括:第一分析模块,用于分一图像和第二图像中每个图像点的亮度,得到图像亮度参数,第二确定模块,用于基于所述图像亮度参数,确定当前视觉场景下的空间物体上目标点的反射光强度,第二分析模块,用于基于所述反射光强度,分析所述目标点的图像位置与空间物体表面点的对应位置映射,第三确定模块,用于基于所述对应位置映射,确定所述目标点的标定空间坐标,其中,图像上每个图像点的亮度反映了空间物体某点的反射光的强度,而该点的图像中位置与空间物体表面相应点的几何位置有关;
控制单元,用于基于所述第一通讯连接,将所述目标点的标定空间坐标发送至所述预设机器人,以控制所述预设机器人移动至目标点。
5.根据权利要求4所述的控制装置,其特征在于,所述获取单元包括:
第一拍摄模块,用于控制第一摄像模块拍摄在第一视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第一图像;
第二拍摄模块,用于控制第二摄像模块拍摄在第二视觉下所述预设机器人在所述当前视觉场景中移动的图像,得到第二图像,其中,所述第一摄像模块和所述第二摄像模块平行放置;
第一确定模块,用于将所述第一图像和第二图像作为所述机器人图像。
6.一种工业机器人,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1至3中任意一项所述的机器人的控制方法。
7.一种计算机存储介质,其特征在于,所述计算机存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机存储介质所在设备执行权利要求1至3中任意一项所述的机器人的控制方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010471125.8A CN111625001B (zh) | 2020-05-28 | 2020-05-28 | 机器人的控制方法及装置、工业机器人 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010471125.8A CN111625001B (zh) | 2020-05-28 | 2020-05-28 | 机器人的控制方法及装置、工业机器人 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111625001A CN111625001A (zh) | 2020-09-04 |
CN111625001B true CN111625001B (zh) | 2024-02-02 |
Family
ID=72270020
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010471125.8A Active CN111625001B (zh) | 2020-05-28 | 2020-05-28 | 机器人的控制方法及装置、工业机器人 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111625001B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112651297A (zh) * | 2020-11-23 | 2021-04-13 | 北京旷视机器人技术有限公司 | 入库管理方法、装置、仓库管理系统和电子系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102496160A (zh) * | 2011-12-09 | 2012-06-13 | 河海大学常州校区 | 集控式足球机器人视觉系统标定方法 |
CN106426161A (zh) * | 2015-08-06 | 2017-02-22 | 康耐视公司 | 在引导装配环境中将机器视觉坐标空间关联在一起的系统和方法 |
CN107515606A (zh) * | 2017-07-20 | 2017-12-26 | 北京格灵深瞳信息技术有限公司 | 机器人实现方法、控制方法及机器人、电子设备 |
CN110275532A (zh) * | 2019-06-21 | 2019-09-24 | 珠海格力智能装备有限公司 | 机器人的控制方法及装置、视觉设备的控制方法及装置 |
CN110572630A (zh) * | 2018-09-21 | 2019-12-13 | 苏州因确匹电子科技有限公司 | 三维图像拍摄系统、方法、装置、设备以及存储介质 |
CN110853102A (zh) * | 2019-11-07 | 2020-02-28 | 深圳市微埃智能科技有限公司 | 一种新的机器人视觉标定及引导方法、装置及计算机设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6396516B2 (ja) * | 2017-01-12 | 2018-09-26 | ファナック株式会社 | 視覚センサのキャリブレーション装置、方法及びプログラム |
US10593060B2 (en) * | 2017-04-14 | 2020-03-17 | TwoAntz, Inc. | Visual positioning and navigation device and method thereof |
-
2020
- 2020-05-28 CN CN202010471125.8A patent/CN111625001B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102496160A (zh) * | 2011-12-09 | 2012-06-13 | 河海大学常州校区 | 集控式足球机器人视觉系统标定方法 |
CN106426161A (zh) * | 2015-08-06 | 2017-02-22 | 康耐视公司 | 在引导装配环境中将机器视觉坐标空间关联在一起的系统和方法 |
CN107515606A (zh) * | 2017-07-20 | 2017-12-26 | 北京格灵深瞳信息技术有限公司 | 机器人实现方法、控制方法及机器人、电子设备 |
CN110572630A (zh) * | 2018-09-21 | 2019-12-13 | 苏州因确匹电子科技有限公司 | 三维图像拍摄系统、方法、装置、设备以及存储介质 |
CN110275532A (zh) * | 2019-06-21 | 2019-09-24 | 珠海格力智能装备有限公司 | 机器人的控制方法及装置、视觉设备的控制方法及装置 |
CN110853102A (zh) * | 2019-11-07 | 2020-02-28 | 深圳市微埃智能科技有限公司 | 一种新的机器人视觉标定及引导方法、装置及计算机设备 |
Also Published As
Publication number | Publication date |
---|---|
CN111625001A (zh) | 2020-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107471218B (zh) | 一种基于多目视觉的双臂机器人手眼协调方法 | |
CN111151463B (zh) | 一种基于3d视觉的机械臂分拣抓取系统及方法 | |
CN110728715A (zh) | 一种智能巡检机器人像机角度自适应调整方法 | |
CN110572630B (zh) | 三维图像拍摄系统、方法、装置、设备以及存储介质 | |
CN104842361A (zh) | 具有3d箱体定位功能的机器人系统 | |
CN110751691B (zh) | 一种基于双目视觉的管件自动抓取方法 | |
EP1477934A2 (en) | Image processing apparatus | |
Herakovic | Robot vision in industrial assembly and quality control processes | |
CN116157837A (zh) | 用于机器人的标定方法和装置 | |
CN110275532B (zh) | 机器人的控制方法及装置、视觉设备的控制方法及装置 | |
CN110910460A (zh) | 一种获取位置信息的方法、装置及标定设备 | |
CN112276936A (zh) | 三维数据生成装置以及机器人控制系统 | |
CN116958146B (zh) | 3d点云的采集方法及装置、电子装置 | |
WO2021039775A1 (ja) | 画像処理装置、撮像装置、ロボット及びロボットシステム | |
CN114347015A (zh) | 一种机器人抓取控制方法、系统、装置及介质 | |
CN110260801A (zh) | 用于测量物料体积的方法和装置 | |
CN111625001B (zh) | 机器人的控制方法及装置、工业机器人 | |
KR20180017074A (ko) | 카메라를 이용한 로봇 축각도들의 검출 및 로봇의 선택 | |
CN115272466A (zh) | 手眼标定方法、视觉机器人、手眼标定设备和存储介质 | |
CN109644263A (zh) | 第一智能设备及其连接方法以及具有存储功能的装置 | |
Fröhlig et al. | Three-dimensional pose estimation of deformable linear object tips based on a low-cost, two-dimensional sensor setup and AI-based evaluation | |
CN110675454A (zh) | 物体定位方法、装置及存储介质 | |
CN112605990A (zh) | 一种机器人视觉控制方法和系统 | |
Xie et al. | Three-dimensional object recognition system for enhancing the intelligence of a KUKA robot | |
CN107437261B (zh) | 深度图像获取方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |