CN113213054A - 取放货装置的调整方法、装置、设备、机器人及仓储系统 - Google Patents
取放货装置的调整方法、装置、设备、机器人及仓储系统 Download PDFInfo
- Publication number
- CN113213054A CN113213054A CN202110517215.0A CN202110517215A CN113213054A CN 113213054 A CN113213054 A CN 113213054A CN 202110517215 A CN202110517215 A CN 202110517215A CN 113213054 A CN113213054 A CN 113213054A
- Authority
- CN
- China
- Prior art keywords
- goods
- target
- target storage
- storage position
- goods taking
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 78
- 238000001514 detection method Methods 0.000 claims abstract description 133
- 238000004590 computer program Methods 0.000 claims description 9
- 238000007689 inspection Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 23
- 238000003780 insertion Methods 0.000 description 5
- 230000037431 insertion Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000005498 polishing Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
- B65G1/00—Storing articles, individually or in orderly arrangement, in warehouses or magazines
- B65G1/02—Storage devices
- B65G1/04—Storage devices mechanical
- B65G1/137—Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed
- B65G1/1373—Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed for fulfilling orders in warehouses
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
- B65G1/00—Storing articles, individually or in orderly arrangement, in warehouses or magazines
- B65G1/02—Storage devices
- B65G1/04—Storage devices mechanical
- B65G1/0407—Storage devices mechanical using stacker cranes
- B65G1/0435—Storage devices mechanical using stacker cranes with pulling or pushing means on either stacking crane or stacking area
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
- B65G2203/00—Indexing code relating to control or detection of the articles or the load carriers during conveying
- B65G2203/02—Control or detection
- B65G2203/0208—Control or detection relating to the transported articles
- B65G2203/0216—Codes or marks on the article
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
- B65G2203/00—Indexing code relating to control or detection of the articles or the load carriers during conveying
- B65G2203/02—Control or detection
- B65G2203/0266—Control or detection relating to the load carrier(s)
- B65G2203/0283—Position of the load carrier
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Warehouses Or Storage Devices (AREA)
- Manipulator (AREA)
Abstract
本公开实施例提供一种取放货装置的调整方法、装置、设备、机器人及仓储系统,该方法包括:当机器人移动至目标地面标识时,基于图像采集装置,采集第一检测图像,其中,目标地面标识为目标库位对应的地面标识;根据第一检测图像中的预设关键点的信息,确定目标库位与图像采集装置的位姿关系,其中,预设关键点包括货架标识码和/或支撑部对应的各点;根据位姿关系,调整机器人的取放货装置对准目标库位,以使取放货装置的插板放置于第一支撑部和第二支撑部之间,以进行目标库位上货物的提取或将货物放置于目标库位,实现了在取放货之前,对机器人的取放货装置进行校准,避免了在取放货过程中发生碰撞,提高了机器人作业的安全性。
Description
技术领域
本公开涉及智能仓储技术领域,尤其涉及一种取放货装置的调整方法、装置、设备、机器人及仓储系统。
背景技术
基于机器人的智能仓储系统采用智能操作系统,通过系统指令实现货箱的自动取出和存放,同时可以24小时不间断运行,代替了人工管理和操作,提高了仓储的效率,受到了广泛地应用和青睐。
在基于机器人进行货架上的货物的提取或存放时,现有技术往往仅基于相应的指令移动至目标库位,从而直接将货物放置于该目标库位,或者直接将目标库位上放置的货物取出,容易导致机器人的取放货装置与货架发生碰撞,从而导致货架或机器人损坏,甚至货架倾倒等事故的发生,导致取放货操作的安全性较差。
发明内容
本公开提供一种取放货装置的调整方法、装置、设备、机器人及仓储系统,在取放货之前,基于图像采集装置实现取放货装置与目标库位的自动校准,提高了取放货的安全性。
第一方面,本公开实施例提供了一种取放货装置的调整方法,该方法包括:当机器人移动至目标地面标识时,基于所述图像采集装置,采集第一检测图像,其中,所述目标地面标识为所述目标库位对应的地面标识,所述目标库位上设置有支撑部,所述支撑部包括同高度水平以协同进行货物放置的第一支撑部和第二支撑部;根据所述第一检测图像中的预设关键点的信息,确定所述目标库位与所述取放货装置的位姿关系,其中,所述预设关键点包括货架标识码和/或所述支撑部对应的各点;根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,以使所述取放货装置的插板放置于所述第一支撑部和所述第二支撑部之间,以进行目标库位上货物的提取或将货物放置于所述目标库位。
可选的,所述目标库位对应的货架立柱上设置有货架标识码,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:根据所述第一检测图像识别所述目标库位对应的货架标识码;若识别成功,则根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
可选的,根据识别结果确定所述取放货装置与所述目标库位的位姿关系,包括:根据所述货架标识码的特征点的位置信息以及所述货架标识码的标识图案的角度信息,确定所述取放货装置的角度偏差、高度偏差和行径偏差;其中,所述行径偏差为所述图像采集装置的图像中心与所述目标库位的库位中心的偏差。
可选的,根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,包括:确定所述目标库位的库位类型;根据所述目标库位的库位类型,确定预设偏差;根据所述预设偏差,调整所述取放货装置,以将所述行径偏差调整为所述预设偏差;并根据所述角度偏差和高度偏差,分别调整所述取放货装置的角度和高度,以使所述取放货装置对准所述目标库位。
可选的,所述方法还包括:若根据所述第一检测图像未识别所述目标库位对应的货架标识码,则在预设范围内调整所述图像采集装置,并在调整过程中和/或调整完毕时,采集至少一个第二检测图像;若所述第二检测图像中包括所述目标库位对应的货架标识码,则识别所述第二检测图像中的货架标识码;根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
可选的,所述图像采集装置包括第一图像采集装置和第二图像采集装置,所述第一图像采集装置和第二图像采集装置分别设置在所述取放货装置的两侧,基于所述图像采集装置,采集第一检测图像,包括:基于第一图像采集装置和第二图像采集装置,分别采集一张第一检测图像,得到两张第一检测图像;相应的,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:若所述两张第一检测图像中均包括目标库位对应的货架标识码,则分别识别两张所述第一检测图像中的货架标识码,得到第一识别结果和第二识别结果;根据所述第一识别结果和所述第二识别结果,确定所述目标库位与所述取放货装置的位姿关系。
可选的,根据所述第一识别结果和所述第二识别结果,确定所述目标库位与所述取放货装置的位姿关系,包括:计算所述第一识别结果和所述第二识别结果中所述货架标识码的各点的位置平均值,以及所述第一识别结果和所述第二识别结果中所述货架标识码的标识图案的角度平均值;根据所述位置平均值和所述角度平均值,确定所述目标库位与所述取放货装置的位姿关系。
可选的,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:基于所述第一检测图像,确定第一支撑部和第二支撑部的中心点的位置,其中,所述第一支撑部和第二支撑部用于支撑放置于目标库位上的货物;根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置与所述目标库位的位姿关系。
可选的,基于所述第一检测图像,确定第一支撑部和第二支撑部的中心点的位置,包括:基于所述第一检测图像,确定所述第一支撑部与所述第二支撑部的第一间距;根据所述第一间距以及预设尺寸信息,确定在所述第一检测图像中所述第一支撑部的中心点的位置和所述第二支撑部的中心点的位置,其中,所述预设尺寸信息为所述第一支撑部和/或所述第二支撑部的尺寸信息。
可选的,根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置与所述目标库位的位姿关系,包括:根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置的角度偏差、高度偏差和行径偏差。
可选的,在调整所述机器人的取放货装置对准所述目标库位之后,所述方法还包括:判断所述图像采集装置的图像中心与所述目标库位的中心是否对准;若是,则控制所述取放货装置向所述目标库位伸出,以提取和/或存放目标货物,其中,所述目标货物为所述调度指令中对应的货物。
可选的,所述方法还包括:基于所述图像采集装置,采集所述机器人的暂存货架的预设层的第三检测图像;根据所述第三检测图像,确定所述暂存货架的预设层的两个预设点的位置;根据所述两个预设点的位置,确定所述取放货装置与所述暂存货架的预设层的第二角度偏差和第二高度偏差;根据所述第二角度偏差和所述第二高度偏差,判断所述取放货装置在向所述暂存货架的预设层伸出后,是否会撞到所述暂存货架;若否,则控制所述取放货装置将所述目标货物放置于所述暂存货架的预设层,或,控制所述取放货装置从所述暂存货架的预设层提取目标货物,以在所述取放货装置与目标库位对准之后,将所述目标货物放置于所述目标库位。
第二方面,本公开实施例还提供了一种取放货装置的调整装置,所述装置应用于机器人,所述机器人的取放货装置上设置有图像采集装置,该装置包括:第一图像采集模块,用于当机器人移动至目标地面标识时,基于所述图像采集装置,采集第一检测图像,其中,所述目标地面标识为所述目标库位对应的地面标识,所述目标库位上设置有支撑部,所述支撑部包括同高度水平以协同进行货物放置的第一支撑部和第二支撑部;位姿确定模块,用于根据所述第一检测图像,确定目标库位与所述取放货装置的位姿关系,其中,所述预设关键点包括货架标识码和/或支撑部对应的各点;取放货装置对准模块,用于根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,以使所述取放货装置的插板放置于所述第一支撑部和所述第二支撑部之间,以进行目标库位上货物的提取或将货物放置于所述目标库位。
第三方面,本公开实施例还提供了一种取放货装置的调整设备,包括存储器和至少一个处理器;所述存储器存储计算机执行指令;所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述至少一个处理器执行如本公开第一方面对应的任意实施例提供的取放货装置的调整方法。
第四方面,本公开实施例还提供了一种机器人,包括取放货装置以及本公开第三方面对应的实施例提供的取放货装置的调整设备。
第五方面,本公开实施例还提供了一种仓储系统,包括货架和本公开第四方面对应的实施例提供的机器人。
第六方面,本公开实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如本公开第一方面对应的任意实施例提供的取放货装置的调整方法。
第七方面,本公开实施例还提供了一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现本公开第一方面对应的任意实施例提供的取放货装置的调整方法。
本公开实施例提供的取放货装置的调整方法、装置、设备、机器人及仓储系统,该仓储系统的货架上的各个库位是由支撑部进行支撑,该支撑部包括同高度水平以协同进行货物放置的第一支撑部和第二支撑部,在机器人执行取放货任务时,当机器人到位,即移动至目标库位对应的地面标识之后,基于机器人的取放货装置上设置的图像采集装置,采集第一检测图像,基于该第一检测图像中的货架标识码和/或支撑部对应的各点的信息,确定目标库位与图像采集装置的位姿关系,进而基于该位姿关系,调整机器人的取放货装置以对准目标库位,以在对准之后使得取放货装置将插板放置于目标库位的两个支撑部之间进行货物提取或存放,在机器人取放货之前,实现了将机器人的取放货装置与目标库位对准,避免了在取放货过程中发生碰撞,提高了货物提取和存放的安全性。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1为本公开实施例提供的取放货装置的调整方法的一种应用场景图;
图2为本公开一个实施例提供的取放货装置的调整方法的流程图;
图3为本公开一个实施例中提供的货架的库位的结构示意图;
图4A为本公开一个实施例提供的机器人的结构示意图;
图4B为本公开一个实施例提供的机器人的取放货装置的结构示意图;
图4C为本公开另一个实施例提供的机器人的取放货装置的结构示意图;
图4D为本公开另一个实施例提供的机器人的取放货装置的结构示意图;
图4E为本公开一个实施例提供的插举式取货的示意图;
图4F为本公开一个实施例提供的插举式取货的示意图;
图5为本公开另一个实施例提供的取放货装置的调整方法的流程图;
图6为本公开图5所示实施例中货架的结构示意图;
图7A为本公开图5所示实施例中图像采集装置与目标库位的位姿关系的示意图;
图7B为本公开图5所示实施例中图像采集装置与目标库位的位姿关系的示意图;
图8为本公开另一个实施例提供的取放货装置的调整方法的流程图;
图9为本公开另一个实施例提供的取放货装置的调整方法的流程图;
图10为本公开一个实施例提供的取放货装置的调整装置的结构示意图;
图11为本公开一个实施例提供的取放货装置的调整设备的结构示意图;
图12为本公开一个实施例提供的机器人的结构示意图;
图13为本公开一个实施例提供的仓储系统的结构示意图。
通过上述附图,已示出本公开明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围,而是通过参考特定实施例为本领域技术人员说明本公开的概念。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
下面以具体地实施例对本公开的技术方案以及本公开的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本公开的实施例进行描述。
下面对本公开实施例的应用场景进行解释:
图1为本公开实施例提供的取放货装置的调整方法的一种应用场景图,如图1所示,本公开实施例提供的取放货装置的调整方法可以运行在取放货装置的调整设备上。智能仓储系统100包括机器人110、货架120和调度设备130,调度设备130在接收到取放货指令之后,生成取放货指令,从而机器人110基于该取放货指令进行目标库位121上货物的提取或者将货物放置于目标库位121上。
在现有技术中,机器人120到达目标库位121对应的位置之后,会直接进行目标库位121上货物的提取,或者直接将机器人120上的货物放置于货架120的目标库位121上。然而由于机器人120的行走误差、货物摆放误差或者其他原因等,会导致机器人120在取放货时,未与目标库位121对准,直接进行取放货,机器人120的取放货装置可能会与货架120发生碰撞,造成损失。对于放货任务,还会导致货物无法放置于目标库位121的中心,对于横梁式货架、牛腿式货架等,其库位是中空的,仅由两个分立的支撑部组成,当货物放偏时,容易发生货物掉落,从而造成损失。
针对上述问题,为了提高机器人取放货的安全性,本公开实施例提供的取放货装置的调整方法的主要构思为:在取放货之前,通过机器人的取放货装置上设置的图像采集装置,采集第一检测图像,基于该图像中的货架标识码和/或所述支撑部对应的各点的信息,确定目标库位与图像采集装置的位姿关系,从而基于该位姿关系实现目标库位与机器人的取放货装置之间的校准,在校准之后进行相应的取放货任务,从而提高了取放货的安全性。
图2为本公开一个实施例提供的取放货装置的调整方法的流程图,如图2所示,该取放货装置的调整方法可以由机器人执行,具体可以由机器人的取放货装置的调整设备执行,该机器人的取放货装置上设置有图像采集装置。本实施例提供的取放货装置的调整方法包括以下步骤:
步骤S201,当机器人移动至目标地面标识时,基于所述图像采集装置,采集第一检测图像。
其中,所述目标地面标识为所述目标库位对应的地面标识,所述目标库位上设置有支撑部,所述支撑部包括同高度水平以协同进行货物放置的第一支撑部和第二支撑部。该图像采集装置可以是2D相机或3D相机,其数量可以为一个、两个或者其他数值,图像采集装置可以设置在机器人的取放货装置的左侧、右侧、中间或者其他位置。
其中,目标地面标识的形式可以为二维码、条形码、编码或者其他形式,机器人可以根据该目标地面标识确定当前位置是否为目标库位对应的位置。第一支撑部和第二支撑部设置在目标库位的两侧,且第一支撑部和第二支撑部之间间距一定的距离。
示例性的,图3为本公开一个实施例中提供的货架的库位的结构示意图,如图3所示,目标库位300由相应部分的货架立柱310、第一支撑部320和第二支撑部330组成,第一支撑部320和第二支撑部330之间存在一定的间距,即目标库位300的中间部分是悬空的,由第一支撑部320和第二支撑部330支撑放置于目标库位300上的货物。不同的货架对应的间距可以不同,从而使得目标库位300的尺寸也不相同。
在一些实施例中,该货架为牛腿货架,该货架的库位上的支撑部也可以称为牛腿架。
具体的,机器人可以根据调度设备的调度指令确定目标地面标识以及移动路径,进而根据移动路径由当前位置移动至目标地面标识处。在机器人移动至目标地面标识之后,开启机器人的取放货装置上的图像采集装置,采集视野范围内的第一检测图像。
进一步地,机器人在向目标地面标识移动期间,可以根据移动路径以及图像采集装置采集的地面图像调整机器人的移动路线,直至达到目标地面标识处。
具体的,调度设备可以根据取放货任务,确定目标库位及其对应的目标地面标识,进而基于目标库位及其对应的目标地面标识生成调度指令,将该调度指令发送至机器人,以使机器人基于该调度指令移动至目标地面标识,并进行目标库位的取放货任务。
进一步地,在机器人根据调度指令移动至目标地面标识之后,控制机器人的取放货装置向着目标库位的方向旋转90°,使得取放货装置直对目标库位,开启取放货装置上的图像采集装置,拍摄目标库位对应的第一检测图像。
示例性的,图4A为本公开一个实施例提供的机器人的结构示意图,如图4A所示,机器人包括取放货装置410、暂存货架420、升降组件430和底盘440,其中,取放货装置410采用插举式提取货物;暂存货架420用于暂时存放货物,图4A中所示的暂存货架420为阶梯背篓,包括5层,每一层由一个左背篓421和右背篓422组成,左背篓421和右背篓422之间存在一个切口423;升降组件430用于将取放货装置410移动至机器人暂存货架420的各层。
示例性的,图4B为本公开一个实施例提供的机器人的取放货装置的结构示意图,如图4B所示,取放货装置410包括插板411、侧边固定限位412、设置在侧边固定限位412上的图像采集装置413以及图像采集装置413的打光器414。在图4B中,图像采集装置413的数量为一个,安装在其中一个侧边固定限位412上。图4C为本公开另一个实施例提供的机器人的取放货装置的结构示意图,结合图4B和图4C可知,与图4B不同的是,在图4C中图像采集装置413的数量为两个,每个图像采集装置413上方设置有一个打光器414。图4B和图4C中的图像采集装置可以为2D相机。图4D为本公开另一个实施例提供的机器人的取放货装置的结构示意图,结合图4B和图4D可知,与图4B不同的是,图4D中的图像采集装置413设置在后侧固定限位415上,图4D中的图像采集装置413可以为3D相机。
示例性的,图4E和图4F为本公开一个实施例提供的插举式取货的示意图,结合图4E和图4F可知,机器人400在提取目标库位300上的目标货物500时,通过目标库位300的货架标识码301,将机器人400的取放货装置410与目标库位300对准,之后如图4E所示,机器人400控制其取放货装置410向目标库位300伸出,并将取放货装置410的插板置于目标货物500的下方空间,并控制取放货装置410的插板上升,直至将目标货物500抬起。取放货装置410提取目标货物500之后,如图4F所示,机器人400控制其取放货装置410缩回,进而将目标货物500从目标库位300中取出。
步骤S202,根据所述第一检测图像中的预设关键点的信息,确定所述目标库位与所述取放货装置的位姿关系。
其中,所述预设关键点包括货架标识码和/或所述支撑部对应的各点。货架标识码设置在目标库位对应的货架立柱上,其形式可以为二维码、条形码或者其他含有标识性图案的标识码。位姿关系可以包括目标库位与取放货装置在横向、纵向和深度方向的位置关系,还可以包括取放货装置与目标库位的角度关系。
具体的,可以根据各个预设关键点在第一检测图像中的位置,确定目标库位与取放货装置的位姿关系。
可选的,所述目标库位对应的货架立柱上设置有货架标识码,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:
根据所述第一检测图像识别所述目标库位对应的货架标识码;若识别成功,则根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
具体的,当第一检测图像中包括目标库位对应的货架标识码时,可以识别该货架标识码,进行解码,确定该货架标识码上各个预设关键点的位置,进而基于该货架标识码上各个预设关键点的位置确定目标库位与图像采集装置的位姿关系。
进一步地,根据所述第一检测图像中的预设关键点的信息,确定图像采集装置与目标库位的位姿关系,并根据图像采集装置的安装位置,确定图像采集装置与取放货装置的第一位置关系,进而基于该第一位置关系以及图像采集装置与目标库位的位姿关系,确定取放货装置与目标库位的位姿关系。
可选的,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:
基于所述第一检测图像,确定第一支撑部和第二支撑部的中心点的位置,其中,所述第一支撑部和第二支撑部用于支撑放置于目标库位上的货物;根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置与所述目标库位的位姿关系。
具体的,第一支撑部和第二支撑部设置在目标库位相对的两侧,且保持一定的间距,可以通过第一检测图像,识别第一支撑部的中心点以及第二支撑部的中心点的位置,基于第一支撑部的中心点以及第二支撑部的中心点的位置确定取放货装置与目标库位的位姿关系。
步骤S203,根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,以使所述取放货装置的插板放置于所述第一支撑部和所述第二支撑部之间,以进行目标库位上货物的提取或将货物放置于所述目标库位。
具体的,可以根据位姿关系中对应的图像采集装置与目标库位的各个偏差,包括角度偏差以及位置偏差等,调整机器人的取放货装置的位置,从而使得取放货装置对准目标库位。
具体的,当取放货装置与目标库位对准之后,控制该取放货装置的插板伸出并放置于第一支撑部和第二支撑部之间,从而完成目标库位上货物的提取,或者将货物放置于目标库位上,以完成取放货任务。
本公开实施例提供的取放货装置的调整方法,该方法针对的仓储系统的货架上的各个库位是由支撑部进行支撑,该支撑部包括同高度水平以协同进行货物放置的第一支撑部和第二支撑部,在机器人执行取放货任务时,当机器人到位,即移动至目标库位对应的地面标识之后,基于机器人的取放货装置上设置的图像采集装置,采集第一检测图像,基于该第一检测图像中的货架标识码和/或支撑部对应的各点的信息,确定目标库位与取放货装置的位姿关系,进而基于该位姿关系,调整机器人的取放货装置以对准目标库位,以在对准之后使得取放货装置将插板放置于目标库位的两个支撑部之间进行货物提取或存放,在机器人取放货之前,实现了将机器人的取放货装置与目标库位对准,避免了在取放货过程中发生碰撞,提高了货物提取和存放的安全性。
在一些实施例中,在机器人从机器人的暂存货架上取放货时,还需要判断机器人的取放货装置是否会撞到机器人的暂存货架,若否则进行取放货。
可选的,若调度指令为放货指令,即机器人需要将目标货物存放于目标库位上,所述方法还包括:
基于所述图像采集装置,采集所述机器人的暂存货架的预设层的第三检测图像;根据所述第三检测图像,确定所述暂存货架的预设层的两个预设点的位置;根据所述两个预设点的位置,确定所述取放货装置与所述暂存货架的预设层的第二角度偏差和第二高度偏差;根据所述第二角度偏差和所述第二高度偏差,判断所述取放货装置在向所述暂存货架的预设层伸出后,是否会撞到所述暂存货架;若否,则控制所述取放货装置从所述暂存货架的预设层提取目标货物,以在所述取放货装置与目标库位对准之后,将所述目标货物放置于所述目标库位。
可选的,若调度指令为取货指令,即机器人需要提取目标库位上目标货物,在取放货装置与目标库位对准,并提取目标货物之后,所述方法还包括:
基于所述图像采集装置,采集所述机器人的暂存货架的预设层的第三检测图像;根据所述第三检测图像,确定所述暂存货架的预设层的两个预设点的位置;根据所述两个预设点的位置,确定所述取放货装置与所述暂存货架的预设层的第二角度偏差和第二高度偏差;根据所述第二角度偏差和所述第二高度偏差,判断所述取放货装置在向所述暂存货架的预设层伸出后,是否会撞到所述暂存货架;若否,则控制所述取放货装置将所述目标货物放置于所述暂存货架的预设层。
其中,机器人的暂存货架用于在机器人搬运或运输货物的过程中,暂时存放货物,该暂存货架可以仅包括一层,也可以包括多层。预设层的两个预设点可以为相对于该预设层的中心对称设置的两个点,可以是该预设层对应的切口沿中心对称的两个点,如预设层左背篓和右背篓边缘上的两个点。
具体的,在机器人执行放货指令时,在机器人移动至目标地面标识之后,机器人需要通过其取放货装置将放置在机器人暂存货架预设层的目标货物取出,进而在取放货装置与目标库位对准之后,将目标货物放置于目标库位上。
进一步地,在取放货装置取出机器人暂存货架预设层的目标货物之前,需要通过取放货装置上设置的图像采集装置采集的机器人的暂存货架的预设层的第三检测图像,确定该预设层的对称设置的两个预设点的位置,从而基于该两个预设点的位置,进行防呆判断,具体可以基于取放货装置与暂存货架的预设层的第二角度偏差和第二高度偏差,判断取放货装置在向暂存货架的预设层伸出后是否会与暂存货架发生碰撞,若不会,则可以控制该取放货装置进行预设层放置的目标货物的提取。
具体的,在机器人执行取货指令时,在取放货装置与目标库位对准之后机器人需要通过其取放货装置将放置在目标库位上目标货物取出,具体是通过插举式方式将目标货物取出,进而,将目标货物放置于机器人的暂存货架的预设层。
进一步地,在将目标货物放置于机器人的暂存货架的预设层之前,需要通过取放货装置上设置的图像采集装置采集的机器人的暂存货架的预设层的第三检测图像,确定该预设层的对称设置的两个预设点的位置,从而基于该两个预设点的位置,进行防呆判断,具体可以基于取放货装置与暂存货架的预设层的第二角度偏差和第二高度偏差,判断取放货装置在向暂存货架的预设层伸出后是否会与暂存货架发生碰撞,若不会,则可以控制该取放货装置将目标货物放置于机器人的暂存货架的预设层。
本公开提供的实施例中,由于通过第一检测图像可以进行机器人的取放货装置的对准,从而使得仓储系统的货物,包括目标货物上无需设置供机器人识别的标识码,降低了成本,在货物入库之前,无需为各个货物粘贴标识码,提高了货物入库效率。
图5为本公开另一个实施例提供的取放货装置的调整方法的流程图,本实施例针对的仓储系统的目标库位对应的货架立柱上设置有货架标识码,本实施例提供的取放货装置的调整方法是在图2所示实施例的基础上,对步骤S202和步骤S203的进一步细化,如图5所示,本实施例提供的取放货装置的调整方法包括以下步骤:
步骤S501,当机器人移动至目标地面标识时,基于所述图像采集装置,采集第一检测图像。
步骤S502,根据所述第一检测图像识别所述目标库位对应的货架标识码。
其中,目标库位对应的货架标识码设置在目标库位范围内的任意一根货架立柱上。
具体的,在本实施例中,仓储系统的货架上每个库位都对应一个货架标识码。
示例性的,图6为本公开图5所示实施例中货架的结构示意图,如图6所示,货架610的货架立柱611上设置有货架标识码612,货架620的货架立柱621上设置有货架标识码622,且每个库位对应一个货架标识码,不同库位对应的货架标识码的标识图案可以相同,也可以不同,图6中以货架标识码上的标识图案为“L”型图案为例。不同的货架对应的库位放置的货物的宽度D可以不同,从而支撑部的尺寸也可以不同,图6中货架610的库位为小库位,其支撑部613的尺寸较小,两个支撑部613之间的间距也相应较小,而货架620的库位为大库位,其支撑部的尺寸较大,两个支撑部623之间的间距也相应较大。图6中所示的货架标识码的标识图案仅作为示例,标识图案还可以是其他具备标识特点的图案,本公开对此不进行限定。
具体的,当第一检测图像中包括货架标识码的标识图案时,识别该标识图案,从而得到识别结果。
具体的,该识别结果中可以包括货架标识码的标识图案的朝向、识别图案中各个特征点的位置信息等。
步骤S503,若识别成功,则根据所述货架标识码的特征点的位置信息以及所述货架标识码的标识图案的角度信息,确定所述取放货装置的角度偏差、高度偏差和行径偏差。
其中,所述行径偏差为所述图像采集装置的图像中心与所述目标库位的库位中心的偏差。当行径偏差为0或预设偏差时,表示图像采集装置的图像中心与目标库位的库位中心重合。货架标识码的特征点可以为货架标识码的标识图案的拐点,还可以包括标识图案的其他特征点,通过特征点的位置信息可以确定标识图案的朝向或角度,还可以确定标识图案的位置。
具体的,在成功识别货架标识码,即得到货架标识码的标识图案上特征点的位置信息以及标识图案的角度信息之后,根据货架标识码的特征点的位置信息以及货架标识码的标识图案的角度信息,确定图像采集装置与目标库位的位姿关系,该位姿关系包括图像采集装置相对于目标库位的角度偏差、高度偏差、深度偏差和行径偏差,还可以包括图像采集装置相对于目标库位的深度偏差。
示例性的,图7A和图7B为本公开图5所示实施例中图像采集装置与目标库位的位姿关系的示意图,结合图7A和图7B可知,机器人700的图像采集装置710与目标库位720的位姿关系,包括图像采集装置710相对于目标库位720的角度偏差yaw1、高度偏差dz1、深度偏差dy1和行径偏差dx1,其中,高度偏差dz1为图像采集装置710与目标库位720对应的货架标识码721的在高度方向的偏差;行径偏差dx1为目标库位720对应的货架标识码的中心线c1与图像采集装置710在水平方向的偏差;深度偏差dy1为机器人700上图像采集装置710的中心线c2与目标库位720对应的货架标识码在深度方向的距离;角度偏差yaw1为机器人700的朝向与目标库位720的朝向的角度偏差。
进一步地,在确定图像采集装置相对于目标库位的角度偏差yaw1、高度偏差dz1、深度偏差dy1和行径偏差dx1之后,判断角度偏差yaw1、高度偏差dz1、深度偏差dy1和行径偏差dx1是否均在预设阈值内;若是,则继续执行后续步骤,即步骤S507;若否,则上报系统,进行异常预警,以对目标库位、地面标识、机器人等进行异常检测。
步骤S504,若根据所述第一检测图像未识别所述目标库位对应的货架标识码,则在预设范围内调整所述图像采集装置,并在调整过程中和/或调整完毕时,采集至少一个第二检测图像。
其中,预设范围内可以是设定的一个范围。
具体的,根据第一检测图像未识别目标库位对应的货架标识码,可以包括第一检测图像中不包括完整的标识图案,从而无法根据第一检测图像识别目标库位对应的货架标识码,即货架标识码识别失败,则需要调整取放货装置上设置的图像采集装置,从而扩大其视野范围,以搜寻货架标识码。
具体的,控制图像采集装置在预设范围内移动,可以是按照设定移动方式控制图像采集装置移动,并在移动过程中采集各个第二检测图像。
进一步地,控制图像采集装置在预设范围内移动,可以是先向左右各移动一定距离,进而向上下各移动一定距离,并在移动过程中不断采集各个第二检测图像,或者在移动至目标位置之后采集第二检测图像,如移动至最左侧的位置之后。
进一步地,若通过在预设范围内调整图像采集装置之后,各个第二检测图像中仍不包括货架标识码的完整的标识图案,则生成第一预警信息,以上报仓储系统未找到货架标识码,请求人工干涉。
步骤S505,若所述第二检测图像中包括所述目标库位对应的货架标识码,则识别所述第二检测图像中的货架标识码。
具体的,识别第二检测图像中的货架标识码的具体方式与步骤S502的具体方式相似,仅将对象由第一检测图像替换为第二检测图像即可,在此不再赘述。
步骤S506,根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
具体的,根据第二检测图像对应的货架标识码的特征点的位置信息以及货架标识码的标识图案的角度信息,确定取放货装置相对于目标库位的角度偏差、高度偏差、深度偏差和行径偏差。
具体的,根据第二检测图像对应的识别结果确定取放货装置与所述目标库位的位姿关系,与根据第一检测图像对应的识别结果确定图像采集装置与所述目标库位的位姿关系,的具体步骤相似,即与步骤S503相似,仅将对象由第一检测图像对应的识别结果替换为第二检测图像对应的识别结果即可,在此不再赘述。
步骤S507,确定所述目标库位的库位类型。
其中,目标库位的库位类型可以根据目标库位对应的两个支撑部的间距确定,或者基于目标库位所能存放或放置的目标货物的尺寸确定,如基于目标货物的宽度确定。示例性的,库位类型可以包括小库位类型和大库位类型。
具体的,可以基于调度指令,如取货指令、放货指令等,确定目标库位的库位类型。
进一步地,可以基于调度指令中目标库位的库位标识以及第一对应关系,确定目标库位的库位类型。其中,第一对应关系用于描述各个库位标识与库位类型的对应关系。
步骤S508,根据所述目标库位的库位类型,确定预设偏差。
其中,预设偏差用于描述目标库位的货架标识码的中心与目标库位的库位中心的距离。
具体的,不同库位类型的库位对应不同的预设偏差,可以基于上述第一对应关系以及目标库位的库位类型,确定预设偏差。
示例性的,表1为本公开图5所示实施例中第一对应关系表,如表1所示,库位类型包括小库位类型和大库位类型两种,小库位类型对应的预设偏差为a,大库位类型对应的预设偏差为b,其中,b>a。
表1第一对应关系表
库位标识 | 库位类型 | 预设偏差 |
L1 | 小库位 | a |
L2 | 大库位 | b |
具体的,可以基于第二对应关系以及目标库位的库位类型,确定预设偏差,其中,第二对应关系用于描述各种库位类型与预设偏差的对应关系。
在一些实施例中,可以先执行步骤S507和步骤S508,在执行步骤S501,或者并行执行步骤S501和步骤S507,或者在执行步骤S501至步骤S506中任意步骤之前、之后或之时,执行步骤S507和步骤S508。
步骤S509,根据所述预设偏差,调整所述取放货装置,以将所述行径偏差调整为所述预设偏差,并根据所述角度偏差和高度偏差,分别调整所述取放货装置的角度和高度,以使所述取放货装置对准所述目标库位。
具体的,在确定预设偏差之后,通过调整取放货装置的位置和角度,使得图像采集装置相对于目标库位的行径偏差dx1为该预设偏差;角度偏差yaw1为0;高度偏差dz1为预设高度,从而使得取放货装置伸出之后,其插板低于目标库位的支撑部的支撑面对应的高度。
进一步地,还可以根据图像装置相对于目标库位的深度偏差dy1,确定取放货装置的伸出距离,以在取放货装置对准目标库位之后,按照该伸出距离控制取放货装置的插板伸出,以使通过该插板插取目标库位上的目标货物,或者将目标货物放置于目标库位上。
在本实施例中,针对在目标库位对应的一个货架立柱上设置有货架标识码的仓储系统,当机器人移动至目标库位对应的目标地面标识之后,通过机器人的取放货装置上设置的图像采集装置采集目标库位的第一检测图像,基于该第一检测图像判断是否可以读取完整的货架标识码的标识图案,若不能,则通过调整图像采集装置,以扩大视野范围,采集多个第二检测图像,直至读取到完整的货架标识码的标识图案,进而,基于货架标识码的标识图案的角度信息以及其上各个特征点的位置信息,确定图像采集装置与目标库位的位姿关系,包括角度偏差、高度偏差、行径偏差和深度偏差,进而基于该位姿关系实现取放货装置与目标库位的自动对准,基于对准后的取放货装置进行取放货,提高了货物提取和存放的安全性,避免了发生碰撞。
图8为本公开另一个实施例提供的取放货装置的调整方法的流程图,本实施例针对的机器人的取放货装置上设置有两个图像采集装置,即第一图像采集装置和第二图像采集装置,分别设置于取放货装置的两侧,本实施例提供的取放货装置的调整方法是在图2所示实施例的基础上,对步骤S201和步骤S202的进一步细化,如图8所示,本实施例提供的取放货装置的调整方法包括以下步骤:
步骤S801,当机器人移动至目标地面标识时,基于第一图像采集装置和第二图像采集装置,分别采集一张第一检测图像,得到两张第一检测图像。
具体的,当机器人移动至目标库位对应的目标地面标识之后,控制机器人取放货装置上设置的第一图像采集装置和第二图像采集装置分别采集一张第一检测图像,从而得到两张第一检测图像。
步骤S802,若所述两张第一检测图像中均包括目标库位对应的货架标识码,则分别识别两张所述第一检测图像中的货架标识码,得到第一识别结果和第二识别结果。
具体的,若第一图像采集装置和第二图像采集装置采集的第一检测图像均包括货架标识码,则分别识别所采集的两张第一检测图像中的货架标识码,得到第一图像采集装置对应的第一识别结果,和第二图像采集装置对应的第二识别结果。该第一识别结果和第二识别结果可以包括对应的第一检测图像上货架标识码的标识图案的各个特征点的位置信息以及标识图案的角度信息。
进一步地,若该两张第一检测图像中仅有一张第一检测图像中包括目标库位对应的货架标识码,则采用图5所示实施例中提供的方法进行后续的货架标识码的识别以及取放货装置的对准的相关步骤。
步骤S803,根据所述第一识别结果和所述第二识别结果,确定所述目标库位与所述取放货装置的位姿关系。
具体的,可以根据第一识别结果中的货架标识码的标识图案的各个特征点的位置信息以及标识图案的角度信息,确定第一图像采集装置与目标库位的第一位姿关系;根据第二识别结果中的货架标识码的标识图案的各个特征点的位置信息以及标识图案的角度信息,确定第二图像采集装置与目标库位的第二位姿关系。进而基于该第一位姿关系和第二位姿关系,确定取放货装置与目标库位的位姿关系。
进一步地,可以基于第一位姿关系,确定取放货装置与目标库位的第一偏差,其中,第一偏差包括取放货装置与目标库位的第一角度偏差、第一高度偏差和第一行径偏差;基于第二位姿关系,确定取放货装置与目标库位的第二偏差,其中,第二偏差包括取放货装置与目标库位的第二角度偏差、第二高度偏差和第二行径偏差;判断第一偏差和第二偏差中各项的差值是否大于相应的预设差值,若是,则生成第二预警信息,以上报系统,请求人工进行各个相关设备的检查;若否,则基于第一位姿关系和第二位姿关系,确定取放货装置与目标库位的位姿关系,具体为,基于第一位姿关系中的第一角度偏差、第一高度偏差、第一行径偏差和第一深度偏差,以及第二位姿关系中的第二角度偏差、第二高度偏差、第二行径偏差和第二深度偏差,确定取放货装置与目标库位的角度偏差、高度偏差、行径偏差和深度偏差。
可选的,根据所述第一识别结果和所述第二识别结果,确定所述目标库位与所述取放货装置的位姿关系,包括:
计算所述第一识别结果和所述第二识别结果中所述货架标识码的各点的位置平均值,以及所述第一识别结果和所述第二识别结果中所述货架标识码的标识图案的角度平均值;根据所述位置平均值和所述角度平均值,确定所述目标库位与所述取放货装置的位姿关系。
具体的,当第一识别结果和第二识别结果满足预设条件时,计算第一识别结果和第二识别结果中货架标识码的各点的位置平均值以及货架标识码的标识图案的角度平均值。
其中,第一识别结果和第二识别结果满足预设条件,包括:
第一识别结果中对应的第一偏差和第二识别结果中对应的第二偏差中各项的差值小于或等于相应的预设差值。
步骤S804,根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,以使所述取放货装置的插板放置于所述第一支撑部和所述第二支撑部之间,以进行目标库位上货物的提取或将货物放置于所述目标库位。
在本实施例中,仓储系统的机器人的取放货装置上设置有两个图像采集装置,且仓储系统的货架的每个库位对应一个货架标识码,该货架标识码设置于货架立柱上,当机器人移动至调度指令对应的位置之后,开启第一图像采集装置和第二图像采集装置,分别采集目标库位对应的一张第一检测图像,进而通过该两张第一检测图像中货架标识码对应的信息,确定取放货装置与目标库位的位姿关系,采用两个图像采集装置,扩大了采集的视野范围,提高了货架标识码识别的效率,且通过两张第一检测图像确定位姿关系,提高了位姿关系确定的准确度,进而基于该位姿关系进行取放货装置的对准,提高了取放货装置对准的精度,进一步提高了取放货的安全性。
图9为本公开另一个实时提供的取放货装置的调整方法的流程图,本实施例针对的取放货装置为3D相机或者广视野范围的2D相机,本实施例提供的取放货装置的调整方法是在图2所示实施例的基础上,对步骤S202和步骤S203的进一步细化,如图9所示,本实施例提供的取放货装置的调整方法包括以下步骤:
步骤S901,当机器人移动至目标地面标识时,基于所述图像采集装置,采集第一检测图像。
步骤S902,基于所述第一检测图像,确定所述第一支撑部与所述第二支撑部的第一间距。
具体的,目标库位的第一支撑部和第二支撑部之间间隔一定的距离,即上述第一间距,通过第一检测图像以及预设图像识别算法,可以识别第一支撑部和第二支撑部,进而确定第一支撑部与第二支撑部之间的第一间距。
进一步地,该第一检测图像为3D相机拍摄的点云数据,在采集第一检测图像之后,还需要对第一检测图像进行预处理,该预处理包括降噪处理、分割处理等,进而基于预处理后的第一检测图像,确定第一支撑部与第二支撑部的第一间距。
步骤S903,根据所述第一间距以及预设尺寸信息,确定在所述第一检测图像中所述第一支撑部的中心点的位置和所述第二支撑部的中心点的位置。
其中,所述预设尺寸信息为所述第一支撑部和/或所述第二支撑部的尺寸信息。
步骤S904,根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置的角度偏差、高度偏差和行径偏差。
具体的,可以根据目标库位的第一支撑部和第二支撑部的中心点的位置,可以确定目标库位的库位角度、库位高度和库位中心,进而基于库位角度确定取放货装置相对于目标库位的角度偏差,基于库位高度确定取放货装置相对于目标库位的高度偏差,基于库位中心以及库位类型,确定取放货装置相对于目标库位的行径偏差。
步骤S905,根据所述图像采集装置的角度偏差、高度偏差、深度偏差和行径偏差,调整所述机器人的取放货装置对准所述目标库位。
步骤S906,判断所述图像采集装置的图像中心与所述目标库位的中心是否对准。
具体的,在机器人的取放货装置对准目标库位之后,在控制取放货装置的插板向目标库位伸出,以使该插板位于目标库位的第一支撑部和第二支撑部之间之前,需要进一步判断取放货装置是否与目标库位对准,可以通过判断图像采集装置的图像中心是否与目标库位的库位中心对准实现。
进一步地,若未对准,则基于图像采集装置的图像中心与目标库位的中心的偏差,调整取放货装置,直至图像采集装置的图像中心与目标库位的中心对准。
步骤S907,若是,则控制所述取放货装置向所述目标库位伸出,以提取和/或存放目标货物。
其中,所述目标货物为所述调度指令中对应的货物。
具体的,当判断图像采集装置的图像中心与目标库位的中心对准之后,控制去取放货装置的插板向目标库位伸出,以将该插板置于目标库位的第一支撑部和第二支撑部之间,从将目标货物放置于目标库位上,或者从目标库位上取出目标货物以放置于机器人的暂存货架的预设层。
在本实施例中,在进行目标库位的取放货操作之前,通过机器人的图像采集装置,采集目标库位的第一检测图像,基于该第一检测图像,确定目标库位的第一支撑部和第二支撑部的中心点的位置,从而确定取放货装置与目标库位的位姿关系,基于该位姿关系实现取放货装置的自动对准,提高了对准效率和准确度,提高了取放货的安全性;且无需在货架或货物上额外粘贴标识码,降低了成本,提高了仓储效率。
图10为本公开一个实施例提供的取放货装置的调整装置的结构示意图,该取放货装置的调整装置应用于机器人,该机器人的取放货装置上设置有图像采集装置,如图10所述,该取放货装置的调整装置包括:第一图像采集模块1010、位姿确定模块1020和取放货装置对准模块1030。
可选的,所述目标库位对应的货架立柱上设置有货架标识码,位姿确定模块1020,包括:标识码识别单元,用于根据所述第一检测图像识别所述目标库位对应的货架标识码;第一位姿确定单元,用于若识别成功,则根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
可选的,第一位姿确定单元,具体用于:若识别成功,根据所述货架标识码的特征点的位置信息以及所述货架标识码的标识图案的角度信息,确定所述取放货装置的角度偏差、高度偏差和行径偏差;其中,所述行径偏差为所述图像采集装置的图像中心与所述目标库位的库位中心的偏差。
可选的,取放货装置对准模块1030,具体用于:确定所述目标库位的库位类型;根据所述目标库位的库位类型,确定预设偏差;根据所述预设偏差,调整所述取放货装置,以将所述行径偏差调整为所述预设偏差;并根据所述角度偏差和高度偏差,分别调整所述取放货装置的角度和高度,以使所述取放货装置对准所述目标库位。
可选的,所述取放货装置的调整装置还包括:若根据所述第一检测图像未识别所述目标库位对应的货架标识码,则在预设范围内调整所述图像采集装置,并在调整过程中和/或调整完毕时,采集至少一个第二检测图像;若所述第二检测图像中包括所述目标库位对应的货架标识码,则识别所述第二检测图像中的货架标识码;根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
可选的,所述图像采集装置包括第一图像采集装置和第二图像采集装置,所述第一图像采集装置和第二图像采集装置分别设置在所述取放货装置的两侧,第一图像采集模块1010,具体用于:基于第一图像采集装置和第二图像采集装置,分别采集一张第一检测图像,得到两张第一检测图像;相应的,位姿确定模块1020,包括:识别结果获取单元,用于若所述两张第一检测图像中均包括目标库位对应的货架标识码,则分别识别两张所述第一检测图像中的货架标识码,得到第一识别结果和第二识别结果;第二位姿确定单元,用于根据所述第一识别结果和所述第二识别结果,确定所述目标库位与所述取放货装置的位姿关系。
可选的,位姿关系确定单元,具体用于:计算所述第一识别结果和所述第二识别结果中所述货架标识码的各点的位置平均值,以及所述第一识别结果和所述第二识别结果中所述货架标识码的标识图案的角度平均值;根据所述位置平均值和所述角度平均值,确定所述目标库位与所述取放货装置的位姿关系。
可选的,位姿确定模块1020,包括:中心点确定单元,用于基于所述第一检测图像,确定第一支撑部和第二支撑部的中心点的位置,其中,所述第一支撑部和第二支撑部用于支撑放置于目标库位上的货物;第三位姿确定单元,用于根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置与所述目标库位的位姿关系。
可选的,中心点确定单元,具体用于:基于所述第一检测图像,确定所述第一支撑部与所述第二支撑部的第一间距;根据所述第一间距以及预设尺寸信息,确定在所述第一检测图像中所述第一支撑部的中心点的位置和所述第二支撑部的中心点的位置,其中,所述预设尺寸信息为所述第一支撑部和/或所述第二支撑部的尺寸信息。
可选的,第三位姿确定单元,具体用于:根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置的角度偏差、高度偏差和行径偏差。
可选的,所述取放货装置的调整装置还包括:防呆模块,用于在调整所述机器人的取放货装置对准所述目标库位之后,判断所述图像采集装置的图像中心与所述目标库位的中心是否对准;取放货模块,用于若图像采集装置的图像中心与所述目标库位的中心对准,则控制所述取放货装置向所述目标库位伸出,以提取和/或存放目标货物,其中,所述目标货物为所述调度指令中对应的货物。
可选的,所述取放货装置的调整装置还包括:内部取放货模块,用于基于所述图像采集装置,采集所述机器人的暂存货架的预设层的第三检测图像;根据所述第三检测图像,确定所述暂存货架的预设层的两个预设点的位置;根据所述两个预设点的位置,确定所述取放货装置与所述暂存货架的预设层的第二角度偏差和第二高度偏差;根据所述第二角度偏差和所述第二高度偏差,判断所述取放货装置在向所述暂存货架的预设层伸出后,是否会撞到所述暂存货架;若否,则控制所述取放货装置将所述目标货物放置于所述暂存货架的预设层,或,控制所述取放货装置从所述暂存货架的预设层提取目标货物,以在所述取放货装置与目标库位对准之后,将所述目标货物放置于所述目标库位。
本公开实施例所提供的取放货装置的调整装置可执行本公开任意实施例所提供的取放货装置的调整方法,具备执行方法相应的功能模块和有益效果。
图11为本公开一个实施例提供的取放货装置的调整设备的结构示意图,如图11所示,该取放货装置的调整设备包括:存储器1110,处理器1120以及计算机程序。
其中,计算机程序存储在存储器1110中,并被配置为由处理器1120执行以实现本公开图2、图5、图8和图9所对应的实施例中任一实施例提供的取放货装置的调整方法。
其中,存储器1110和处理器1120通过总线1130连接。
相关说明可以对应参见图2、图5、图8和图9的步骤所对应的相关描述和效果进行理解,此处不做过多赘述。
图12为本公开一个实施例提供的机器人的结构示意图,如图12所示,该机器人包括:取放货装置1210、暂存货架1220和取放货装置的调整设备1230。
其中,取放货装置1210上设置有图像采集装置1211;暂存货架1220用于在机器人搬运货物的过程中暂时存放货物;取放货装置的调整设备1230为本公开图11所示实施例提供的取放货装置的调整设备。
在一些实施例中,该取放货装置1210的取货方式为插举式方式,该取放货装置包括插板,当需要提取货物时,控制该插板伸出,以将插板置于货物底部,进而取出货物。
图13为本公开一个实施例提供的仓储系统的结构示意图,如图13所示,该仓储系统包括:货架1310和机器人1320。
其中,机器人1320为本公开图12所示实施例提供的机器人,该机器人的取放货装置上设置有图像采集装置1321。
在一些实施例中,该仓储系统还包括调度设备1330,用于将调度指令发送至机器人1320,以使机器人1320基于该调度指令进行相应的取放货操作。
在一些实施例中,该仓储系统还包括操作台、卸料机、提升机、输送线等中的一项或多项。
本公开一个实施例提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行以实现本公开图2、图5、图8和图9所对应的实施例中任一实施例提供的取放货装置的调整方法。
其中,计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本公开实施例还提供一种程序产品,该程序产品包括可执行指令,该可执行指令存储在可读存储介质中,取放货装置的调整设备或仓储系统的至少一个处理器可以从可读存储介质读取该执行指令,至少一个处理器执行该执行指令使得货架调度装置实施上述各种实施方式提供的取放货装置的调整方法。
在本公开所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。例如,以上所描述的设备实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个单元中。上述模块成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能模块的形式实现的集成的模块,可以存储在一个计算机可读取存储介质中。上述软件功能模块存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(英文:processor)执行本公开各个实施例所述方法的部分步骤。
应理解,上述处理器可以是中央处理单元(Central Processing Unit,简称CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,简称DSP)、专用集成电路(Application Specific Integrated Circuit,简称ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合发明所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
存储器可能包含高速RAM存储器,也可能还包括非易失性存储NVM,例如至少一个磁盘存储器,还可以为U盘、移动硬盘、只读存储器、磁盘或光盘等。
总线可以是工业标准体系结构(Industry Standard Architecture,简称ISA)总线、外部设备互连(Peripheral Component,简称PCI)总线或扩展工业标准体系结构(Extended Industry Standard Architecture,简称EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示,本公开附图中的总线并不限定仅有一根总线或一种类型的总线。
上述存储介质可以是由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。存储介质可以是通用或专用计算机能够存取的任何可用介质。
一种示例性的存储介质耦合至处理器,从而使处理器能够从该存储介质读取信息,且可向该存储介质写入信息。当然,存储介质也可以是处理器的组成部分。处理器和存储介质可以位于专用集成电路(Application Specific Integrated Circuits,简称ASIC)中。当然,处理器和存储介质也可以作为分立组件存在于电子设备或主控设备中。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本公开的技术方案,而非对其限制;尽管参照前述各实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本公开各实施例技术方案的范围。
Claims (18)
1.一种取放货装置的调整方法,其特征在于,所述方法应用于机器人,所述机器人的取放货装置上设置有图像采集装置,所述方法包括:
当机器人移动至目标地面标识时,基于所述图像采集装置,采集第一检测图像,其中,所述目标地面标识为所述目标库位对应的地面标识,所述目标库位上设置有支撑部,所述支撑部包括同高度水平以协同进行货物放置的第一支撑部和第二支撑部;
根据所述第一检测图像中的预设关键点的信息,确定所述目标库位与所述取放货装置的位姿关系,其中,所述预设关键点包括货架标识码和/或所述支撑部对应的各点;
根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,以使所述取放货装置的插板放置于所述第一支撑部和所述第二支撑部之间,以进行目标库位上货物的提取或将货物放置于所述目标库位。
2.根据权利要求1所述的方法,其特征在于,所述目标库位对应的货架立柱上设置有货架标识码,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:
根据所述第一检测图像识别所述目标库位对应的货架标识码;
若识别成功,则根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
3.根据权利要求2所述的方法,其特征在于,根据识别结果确定所述取放货装置与所述目标库位的位姿关系,包括:
根据所述货架标识码的特征点的位置信息以及所述货架标识码的标识图案的角度信息,确定所述取放货装置的角度偏差、高度偏差和行径偏差;
其中,所述行径偏差为所述图像采集装置的图像中心与所述目标库位的库位中心的偏差。
4.根据权利要求3所述的方法,其特征在于,根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,包括:
确定所述目标库位的库位类型;
根据所述目标库位的库位类型,确定预设偏差;
根据所述预设偏差,调整所述取放货装置,以将所述行径偏差调整为所述预设偏差;
并根据所述角度偏差和高度偏差,分别调整所述取放货装置的角度和高度,以使所述取放货装置对准所述目标库位。
5.根据权利要求2所述的方法,其特征在于,所述方法还包括:
若根据所述第一检测图像未识别所述目标库位对应的货架标识码,则在预设范围内调整所述图像采集装置,并在调整过程中和/或调整完毕时,采集至少一个第二检测图像;
若所述第二检测图像中包括所述目标库位对应的货架标识码,则识别所述第二检测图像中的货架标识码;
根据识别结果确定所述取放货装置与所述目标库位的位姿关系。
6.根据权利要求1所述的方法,其特征在于,所述图像采集装置包括第一图像采集装置和第二图像采集装置,所述第一图像采集装置和第二图像采集装置分别设置在所述取放货装置的两侧,基于所述图像采集装置,采集第一检测图像,包括:
基于第一图像采集装置和第二图像采集装置,分别采集一张第一检测图像,得到两张第一检测图像;
相应的,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:
若所述两张第一检测图像中均包括目标库位对应的货架标识码,则分别识别两张所述第一检测图像中的货架标识码,得到第一识别结果和第二识别结果;
根据所述第一识别结果和所述第二识别结果,确定所述目标库位与所述取放货装置的位姿关系。
7.根据权利要求6所述的方法,其特征在于,根据所述第一识别结果和所述第二识别结果,确定所述目标库位与所述取放货装置的位姿关系,包括:
计算所述第一识别结果和所述第二识别结果中所述货架标识码的各点的位置平均值,以及所述第一识别结果和所述第二识别结果中所述货架标识码的标识图案的角度平均值;
根据所述位置平均值和所述角度平均值,确定所述目标库位与所述取放货装置的位姿关系。
8.根据权利要求1所述的方法,其特征在于,根据所述第一检测图像中的预设关键点的信息,确定目标库位与所述取放货装置的位姿关系,包括:
基于所述第一检测图像,确定第一支撑部和第二支撑部的中心点的位置,其中,所述第一支撑部和第二支撑部用于支撑放置于目标库位上的货物;
根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置与所述目标库位的位姿关系。
9.根据权利要求8所述的方法,其特征在于,基于所述第一检测图像,确定第一支撑部和第二支撑部的中心点的位置,包括:
基于所述第一检测图像,确定所述第一支撑部与所述第二支撑部的第一间距;
根据所述第一间距以及预设尺寸信息,确定在所述第一检测图像中所述第一支撑部的中心点的位置和所述第二支撑部的中心点的位置,其中,所述预设尺寸信息为所述第一支撑部和/或所述第二支撑部的尺寸信息。
10.根据权利要求8所述的方法,其特征在于,根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置与所述目标库位的位姿关系,包括:
根据第一支撑部和第二支撑部的中心点的位置,确定所述取放货装置的角度偏差、高度偏差和行径偏差。
11.根据权利要求1-10任一项所述的方法,其特征在于,在调整所述机器人的取放货装置对准所述目标库位之后,所述方法还包括:
判断所述图像采集装置的图像中心与所述目标库位的中心是否对准;
若是,则控制所述取放货装置向所述目标库位伸出,以提取和/或存放目标货物,其中,所述目标货物为所述调度指令中对应的货物。
12.根据权利要求11所述的方法,其特征在于,所述方法还包括:
基于所述图像采集装置,采集所述机器人的暂存货架的预设层的第三检测图像;
根据所述第三检测图像,确定所述暂存货架的预设层的两个预设点的位置;
根据所述两个预设点的位置,确定所述取放货装置与所述暂存货架的预设层的第二角度偏差和第二高度偏差;
根据所述第二角度偏差和所述第二高度偏差,判断所述取放货装置在向所述暂存货架的预设层伸出后,是否会撞到所述暂存货架;
若否,则控制所述取放货装置将所述目标货物放置于所述暂存货架的预设层,或,控制所述取放货装置从所述暂存货架的预设层提取目标货物,以在所述取放货装置与目标库位对准之后,将所述目标货物放置于所述目标库位。
13.一种取放货装置的调整装置,其特征在于,所述装置应用于机器人,所述机器人的取放货装置上设置有图像采集装置,所述装置包括:
第一图像采集模块,用于当机器人移动至目标地面标识时,基于所述图像采集装置,采集第一检测图像,其中,所述目标地面标识为所述目标库位对应的地面标识,所述目标库位上设置有支撑部,所述支撑部包括同高度水平以协同进行货物放置的第一支撑部和第二支撑部;
位姿确定模块,用于根据所述第一检测图像,确定目标库位与所述取放货装置的位姿关系,其中,所述预设关键点包括货架标识码和/或支撑部对应的各点;
取放货装置对准模块,用于根据所述位姿关系,调整所述机器人的取放货装置对准所述目标库位,以使所述取放货装置的插板放置于所述第一支撑部和所述第二支撑部之间,以进行目标库位上货物的提取或将货物放置于所述目标库位。
14.一种取放货装置的调整设备,其特征在于,包括:存储器和至少一个处理器;
所述存储器存储计算机执行指令;
所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述至少一个处理器执行如权利要求1-12任一项所述的取放货装置的调整方法。
15.一种机器人,其特征在于,包括:取放货装置以及权利要求14所述的取放货装置的调整设备。
16.一种仓储系统,其特征在于,包括货架以及权利要求15所述的机器人。
17.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如权利要求1-12任一项所述的取放货装置的调整方法。
18.一种计算机程序产品,其特征在于,包括计算机程序,所述计算机程序被处理器执行时实现如权利要求1-12任一项所述的取放货装置的调整方法。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110517215.0A CN113213054B (zh) | 2021-05-12 | 2021-05-12 | 取放货装置的调整方法、装置、设备、机器人及仓储系统 |
PCT/CN2022/071764 WO2022237221A1 (zh) | 2021-05-12 | 2022-01-13 | 取放货装置的调整方法、装置、设备、机器人及仓储系统 |
EP22806199.0A EP4339132A1 (en) | 2021-05-12 | 2022-01-13 | Adjustment method, apparatus, and device for goods retrieval and placement apparatus, robot, and warehouse system |
TW111104239A TWI801123B (zh) | 2021-05-12 | 2022-02-07 | 取放貨裝置的調整方法、裝置、設備、機器人、倉儲系統及計算機可讀儲存媒體及計算機程式產品 |
US18/503,571 US20240067450A1 (en) | 2021-05-12 | 2023-11-07 | Adjustment method, apparatus, and device for material handling apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110517215.0A CN113213054B (zh) | 2021-05-12 | 2021-05-12 | 取放货装置的调整方法、装置、设备、机器人及仓储系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113213054A true CN113213054A (zh) | 2021-08-06 |
CN113213054B CN113213054B (zh) | 2023-05-30 |
Family
ID=77094969
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110517215.0A Active CN113213054B (zh) | 2021-05-12 | 2021-05-12 | 取放货装置的调整方法、装置、设备、机器人及仓储系统 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20240067450A1 (zh) |
EP (1) | EP4339132A1 (zh) |
CN (1) | CN113213054B (zh) |
TW (1) | TWI801123B (zh) |
WO (1) | WO2022237221A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113619980A (zh) * | 2021-08-12 | 2021-11-09 | 上海擎朗智能科技有限公司 | 物体运输方法、装置、计算机设备、存储介质及系统 |
WO2022237221A1 (zh) * | 2021-05-12 | 2022-11-17 | 深圳市海柔创新科技有限公司 | 取放货装置的调整方法、装置、设备、机器人及仓储系统 |
CN115456437A (zh) * | 2022-09-22 | 2022-12-09 | 山东开正信息产业有限公司 | 一种物流仓储柜调度管控系统 |
CN115599066A (zh) * | 2022-12-15 | 2023-01-13 | 浙江凯乐士科技集团股份有限公司(Cn) | 窄巷道取放货作业调度方法、装置、调度设备及存储介质 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116061148B (zh) * | 2023-03-17 | 2023-07-04 | 上海仙工智能科技有限公司 | 一种用于示教机械臂与背篓交互的方法及系统、存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016033775A (ja) * | 2014-07-31 | 2016-03-10 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 同一種類の複数の認識対象物体が検索対象画像中に存在する場合に、それぞれの認識対象物体の位置および向きを精度良く求める手法 |
CN105752888A (zh) * | 2016-05-11 | 2016-07-13 | 深圳普智联科机器人技术有限公司 | 具有简便定位功能的机器人叉车 |
CN106556341A (zh) * | 2016-10-08 | 2017-04-05 | 浙江国自机器人技术有限公司 | 一种基于特征信息图形的货架位姿偏差检测方法和系统 |
CN109650292A (zh) * | 2019-02-02 | 2019-04-19 | 北京极智嘉科技有限公司 | 一种智能叉车以及智能叉车的位置调整方法和介质 |
CN110135439A (zh) * | 2019-05-09 | 2019-08-16 | 上海木木聚枞机器人科技有限公司 | 一种自动识别货架的方法及装置、移动机器人 |
CN111798183A (zh) * | 2020-07-07 | 2020-10-20 | 深圳市海柔创新科技有限公司 | 理库方法、设备、系统以及存储介质 |
CN111890343A (zh) * | 2020-07-29 | 2020-11-06 | 浙江广合智能科技有限公司 | 一种机器人载物碰撞检测方法及装置 |
CN112124304A (zh) * | 2020-11-24 | 2020-12-25 | 天津天瞳威势电子科技有限公司 | 一种库位定位方法、装置及车载设备 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6643673B2 (ja) * | 2015-12-25 | 2020-02-12 | パナソニックIpマネジメント株式会社 | 測定装置、宅配ボックス装置 |
CN108217045B (zh) * | 2018-01-03 | 2018-12-18 | 广州供电局有限公司 | 一种用于数据中心物理设备上下架的智能机器人 |
CN210654762U (zh) * | 2019-08-02 | 2020-06-02 | 佛山市金连硕货架制造有限公司 | 一种驶入式货架 |
CN111348361A (zh) * | 2020-01-21 | 2020-06-30 | 深圳市海柔创新科技有限公司 | 取、放货控制方法、装置、搬运装置及搬运机器人 |
CN111169894B (zh) * | 2019-11-08 | 2021-03-30 | 成都图灵时代科技有限公司 | 基于潜伏式搬运机器人的货架对准方法 |
CN112660686B (zh) * | 2021-03-17 | 2021-06-01 | 杭州蓝芯科技有限公司 | 基于深度相机的料笼堆叠方法及装置、电子设备、系统 |
CN113213054B (zh) * | 2021-05-12 | 2023-05-30 | 深圳市海柔创新科技有限公司 | 取放货装置的调整方法、装置、设备、机器人及仓储系统 |
-
2021
- 2021-05-12 CN CN202110517215.0A patent/CN113213054B/zh active Active
-
2022
- 2022-01-13 EP EP22806199.0A patent/EP4339132A1/en active Pending
- 2022-01-13 WO PCT/CN2022/071764 patent/WO2022237221A1/zh active Application Filing
- 2022-02-07 TW TW111104239A patent/TWI801123B/zh active
-
2023
- 2023-11-07 US US18/503,571 patent/US20240067450A1/en active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016033775A (ja) * | 2014-07-31 | 2016-03-10 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 同一種類の複数の認識対象物体が検索対象画像中に存在する場合に、それぞれの認識対象物体の位置および向きを精度良く求める手法 |
CN105752888A (zh) * | 2016-05-11 | 2016-07-13 | 深圳普智联科机器人技术有限公司 | 具有简便定位功能的机器人叉车 |
CN106556341A (zh) * | 2016-10-08 | 2017-04-05 | 浙江国自机器人技术有限公司 | 一种基于特征信息图形的货架位姿偏差检测方法和系统 |
CN109650292A (zh) * | 2019-02-02 | 2019-04-19 | 北京极智嘉科技有限公司 | 一种智能叉车以及智能叉车的位置调整方法和介质 |
CN110135439A (zh) * | 2019-05-09 | 2019-08-16 | 上海木木聚枞机器人科技有限公司 | 一种自动识别货架的方法及装置、移动机器人 |
CN111798183A (zh) * | 2020-07-07 | 2020-10-20 | 深圳市海柔创新科技有限公司 | 理库方法、设备、系统以及存储介质 |
CN111890343A (zh) * | 2020-07-29 | 2020-11-06 | 浙江广合智能科技有限公司 | 一种机器人载物碰撞检测方法及装置 |
CN112124304A (zh) * | 2020-11-24 | 2020-12-25 | 天津天瞳威势电子科技有限公司 | 一种库位定位方法、装置及车载设备 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022237221A1 (zh) * | 2021-05-12 | 2022-11-17 | 深圳市海柔创新科技有限公司 | 取放货装置的调整方法、装置、设备、机器人及仓储系统 |
CN113619980A (zh) * | 2021-08-12 | 2021-11-09 | 上海擎朗智能科技有限公司 | 物体运输方法、装置、计算机设备、存储介质及系统 |
CN115456437A (zh) * | 2022-09-22 | 2022-12-09 | 山东开正信息产业有限公司 | 一种物流仓储柜调度管控系统 |
CN115456437B (zh) * | 2022-09-22 | 2023-08-11 | 山东开正信息产业有限公司 | 一种物流仓储柜调度管控系统 |
CN115599066A (zh) * | 2022-12-15 | 2023-01-13 | 浙江凯乐士科技集团股份有限公司(Cn) | 窄巷道取放货作业调度方法、装置、调度设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US20240067450A1 (en) | 2024-02-29 |
WO2022237221A1 (zh) | 2022-11-17 |
EP4339132A1 (en) | 2024-03-20 |
CN113213054B (zh) | 2023-05-30 |
TW202243832A (zh) | 2022-11-16 |
TWI801123B (zh) | 2023-05-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113213054A (zh) | 取放货装置的调整方法、装置、设备、机器人及仓储系统 | |
CN111674817B (zh) | 仓储机器人的控制方法、装置、设备及可读存储介质 | |
TWI816235B (zh) | 貨物存放方法、裝置、機器人、倉儲系統及儲存媒體 | |
AU2021288667B2 (en) | Control method and apparatus for warehouse robot, and robot and warehouse system | |
WO2021249406A1 (zh) | 货箱的提取方法、装置、系统、机器人和存储介质 | |
CN112407729A (zh) | 货物取放方法、装置、仓储机器人和仓储系统 | |
JP6011490B2 (ja) | 物品保管設備 | |
JP6052103B2 (ja) | 物品認識装置及び物品認識設備 | |
US9361695B2 (en) | Method of recognizing a position of a workpiece from a photographed image | |
CN111815706A (zh) | 面向单品类拆垛的视觉识别方法、装置、设备及介质 | |
US11772271B2 (en) | Method and computing system for object recognition or object registration based on image classification | |
JP2013532451A (ja) | 倉庫内の物体の位置を特定するための方法及び装置 | |
CN116468791A (zh) | 拆垛定位方法、装置、系统及存储介质 | |
CN112288038B (zh) | 基于图像分类的物体识别或物体注册的方法及计算系统 | |
JP2014174628A (ja) | 画像認識方法 | |
CN114347040A (zh) | 目标物的拾取方法、装置、机器人以及存储介质 | |
CN112149687A (zh) | 目标识别的方法 | |
JP7385424B2 (ja) | 移載対象ワーク向き認識システム | |
CN115892801A (zh) | 取放货方法、装置、货叉组件、机器人及存储介质 | |
CN114332846A (zh) | 一种物料的检测及分类方法 | |
CN115063475A (zh) | 一种基于3d传感器的面形状识别及定位方法 | |
CN118052505A (zh) | 一种基于移动机器人的盘点方法及智能盘点系统 | |
CN117474998A (zh) | 一种货架位置检测方法、装置、设备及存储介质 | |
CN114858085A (zh) | 用于确定地面运输工具的定向的方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |