CN113992829A - 一种智能拣选系统及方法 - Google Patents
一种智能拣选系统及方法 Download PDFInfo
- Publication number
- CN113992829A CN113992829A CN202111267302.1A CN202111267302A CN113992829A CN 113992829 A CN113992829 A CN 113992829A CN 202111267302 A CN202111267302 A CN 202111267302A CN 113992829 A CN113992829 A CN 113992829A
- Authority
- CN
- China
- Prior art keywords
- picking
- processor
- area
- worker
- position information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 230000009471 action Effects 0.000 claims abstract description 23
- 230000000007 visual effect Effects 0.000 claims abstract description 4
- 238000003860 storage Methods 0.000 claims description 11
- 230000008569 process Effects 0.000 abstract description 3
- 230000006399 behavior Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 241000531116 Blitum bonus-henricus Species 0.000 description 2
- 235000008645 Chenopodium bonus henricus Nutrition 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
Abstract
本说明书实施例提供了一种智拣选系统及方法。本发明在整个拣选的过程中对拣选人员和拣选动作进行识别，从三个不同的角度对拣选工人、拣选动作(又称拣货动作)和拣货库位(又称库位、货位)进行分析，避免单一角度(视角)产生误差。把分析的结果回传给系统，以此来判断拣货工人操作是否正确，使系统通过智能拣选灯光指示系统等方式对工人进行提示。此发明极大的提高了拣选工人的工作效率。
Description
技术领域
本发明涉及人工智能技术领域，尤其涉及应用于仓储和厂内物流领域的智能拣选系统及方法。
背景技术
现有仓储及厂内物流场景下，拣选工人根据需要拣选的物料单或者智能拣选灯光指示系统进行货物拣选，每次拣选会拣选多个货物，并且把这些货物放入到物流车中。在所有货物全部拣选完成后，拣选工人根据需要拣选的物料单对所拣选的货物进行核对，查看是否出现漏捡或者错拣等拣选错误的情况。
工人拣选容易出现差错，不能确定拣选工人拣选的货物是否正确或者是否已经拣选完成。如果需要核对的话，需要人工进行核对，人工核对耗费的时间过多。
发明内容
本说明书实施例提供及一种智能拣选系统及方法，以提高拣选效率及拣选准确率。
第一方面，本说明书实施例提供一种智能拣选方法，包括：
拣选工人在拣选区域对库位上的货物进行拣选时，执行步骤1，在拣选区域的多个视角安装的拣选识别摄像头分别拍摄拣选拣选动作图像；
步骤2，每个拣选识别摄像头分别对拣选动作图像进行分析，分别得到拣选的库位信息；
步骤3，对各个拣选识别摄像头对得到的库位信息进行对比，若达到预定数量的拣选识别摄像头得到的库位信息一致，将该库位信息上报给处理器，执行步骤4，否则，返回步骤1；
步骤4，处理器根据库位信息判断拣选工人是否拣选正确，如果拣选错误，执行步骤5，如果拣选正确，执行步骤6；
步骤5，处理器发出拣选错误提示；
步骤6，在拣选识别摄像头识别到拣选工人离开拣货区域后，通知处理器拣选工人离开，处理器再次查验拣选工人是否存在漏捡或者错拣的情况，如果存在漏捡或者错拣的情况，处理器执行步骤5。
可选地，步骤1之前，所述方法还包括：
拣选识别摄像头拍摄拣选区域初始化图像，通过可识别标志对拣选区域初始化图像中的库位进行识别，并且在拣选区域初始化图像中对每个库位的范围进行框定，完成拣选识别摄像头的初始化。
可选地，初始化完成后，所述方法还包括：
拣选工人进入拣选区域后，拣选识别摄像头拍摄拣选区域第二图像，对拣选区域第二图像进行人脸识别，确认拣选人员。
可选地，可识别标志包括智能拣选灯光指引系统、二维码或条形码。
可选地，步骤5包括:
处理器通过智能拣选灯光指引系统发出拣选错误提示。
第二方面，本说明书实施例提供一种智能拣选系统，包括处理器，和在拣选区域的多个视角安装的拣选识别摄像头；
处理器和拣选识别摄像头通过上述的方法完成智能拣选控制。
本说明书实施例有益效果如下：
本发明在整个拣选的过程中对拣选人员和拣选动作进行识别，从三个不同的角度对拣选工人、拣选动作(又称拣货动作)和拣货库位(又称库位、货位)进行分析，避免单一角度(视角)产生误差。把分析的结果回传给系统，以此来判断拣货工人操作是否正确，使系统通过智能拣选灯光指示系统等方式对工人进行提示。此发明极大的提高了拣选工人的工作效率。
附图说明
图1为本发明实施例提供的流程图。
具体实施方式
为了更好的理解上述技术方案，下面通过附图以及具体实施例对本说明书实施例的技术方案做详细的说明，应当理解本说明书实施例以及实施例中的具体特征是对本说明书实施例技术方案的详细的说明，而不是对本说明书技术方案的限定，在不冲突的情况下，本说明书实施例以及实施例中的技术特征可以相互组合。
在具体场景中，仓库中摆放有多排货架，每排货架又根据摆放的物品分类被划定为多个拣选区域。在每个拣选区域前方巷道的上方(高于货架)的位置安装有多个摄像头，摄像头的分布、角度以及数量以能够完整拍下所有货位和拣选动作为准。例如，可以在拣选区域的两侧及中间位置对应的前方巷道上方各安装一个摄像头。
拣选识别摄像头通过可识别标志对每个库位区域进行识别，并且在图像中对每个库位的范围进行框定，完成拣选识别摄像头的初始化。
可识别标志包括智能拣选灯光指引系统或者二维码、条形码等。
拣选工人进入拣选区域后，拣选识别摄像头进行人脸识别，确认拣选人员，使用三个拣选识别摄像头能够保证拣选工人从任何方向进入到拣选区域都能识别到，此时开始拣选。
若通过人脸识别确认进入拣选区域的人员不是拣选人员，进一步检测其是否发生拣选行为，若发生拣选行为，对应货位的智能拣选终端发出灯光提示，以对该非法拣选行为进行告警。具体的，人脸识别及拣选行为识别可以由摄像头完成，并将人脸识别结果和拣选行为结果发送给处理器，由处理器判断是否拣选人员以及是否非法拣选行为，并发出告警指令。人脸识别及拣选行为识别也可以由处理器执行。
拣选工人在对货物进行拣选的时候，为避免单一角度的图像对动作识别产生错误，三个拣选识别摄像头对拣选动作分别进行抓取。
每个拣选识别摄像头分别对抓取的图像进行分析，分别得到拣选的货位信息。
其具体实现方式可以但不仅限于：先识别是否存在目标抓取动作，然后再判断抓取动作的货位信息。例如，实时拍摄视频流；对图像视频流进行分析，进行动作采集；从视频中得到图像帧，然后算法提取出拣选的动作的特征和位置量，从已经建模的库中查找是否有对应的模型，如果模型吻合，则拣选动作提取成功；通过已经提取的拣选动作能够确认拣选动作所发生的位置，因为每个货位在图像中的位置不会变化，所以此时可确认拣选的货位信息。
三个拣选识别摄像头对得到的拣选信息进行对比，确保其中至少两个结果一致，通知系统此货位拣选信息。
如果三个结果不存在至少两个结果一致的情况，需要对三个拣选识别摄像头抓取的拣选图像进行重新识别，以确保其中至少两个结果一致。
系统(通常是处理器)会根据拣选识别摄像头的识别结果进行比对，判断拣选工人是否拣货正确。
具体的，系统会根据拣选识别摄像头的识别结果分析出所拣选的货位信息，然后用这个货位信息与系统中保存的所有需要拣选的货位信息进行比对。
如果工人拣货错误，可通过智能拣选灯光指示系统等方式对拣选工人进行提示，提示工人放回错拣货物，正确完成拣选。
本次查验的目的是确定当前拣选行为是否存在错检。本次查验是在识别到拣选行为的前提下触发的，若没有识别到拣选行为，则不会触发本次查验。
在拣选识别摄像头识别到拣选工人离开拣货区域后，通知系统拣选工人离开，系统再次查验拣选工人是否存在漏捡或者错拣的情况，如果存在漏捡或者错拣的情况，系统会通过智能拣选灯光指示系统等方式通知拣选工人。如果不存在错误则拣选完成。
具体的，所述处理器将摄像头上报的库位信息与拣选需求中的库位信息进行比对，根据比对结果查验拣选工人是否存在漏捡或者错拣的情况。
如上所述，如果存在漏检，则处理器不会识别到拣选行为，则不会触发第一次查验。为了识别漏检在内的拣选错误，因此需要在拣选工人离开后，在拣选区域范围内进行二次查验。在一个拣选区域可能有多个需要拣选的货物，对于可能存在的漏检、错检情况，通过第二次查验进行识别。
本说明书是参照根据本说明书实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的设备。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令设备的制造品，该指令设备实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本说明书的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本说明书范围的所有变更和修改。
显然，本领域的技术人员可以对本说明书进行各种改动和变型而不脱离本说明书的精神和范围。这样，倘若本说明书的这些修改和变型属于本说明书权利要求及其等同技术的范围之内，则本说明书也意图包含这些改动和变型在内。
Claims (7)
1.一种智能拣选方法，其特征在于，包括：
拣选工人在拣选区域对库位上的货物进行拣选时，执行步骤1，在拣选区域的多个视角安装的拣选识别摄像头分别拍摄拣选动作图像；
步骤2，每个拣选识别摄像头分别对拣选动作图像进行分析，分别得到拣选的库位信息；
步骤3，处理器对各个拣选识别摄像头得到的库位信息进行对比，若达到预定数量的拣选识别摄像头得到的库位信息一致，将该库位信息上报给处理器，执行步骤4，否则，返回步骤1；
步骤4，处理器根据库位信息判断拣选工人是否拣选正确，如果拣选错误，执行步骤5，如果拣选正确，执行步骤6；
步骤5，处理器发出拣选错误提示；
步骤6，在拣选识别摄像头识别到拣选工人离开拣货区域后，通知处理器拣选工人离开，处理器再次查验拣选工人是否存在漏捡或者错拣的情况，如果存在漏捡或者错拣的情况，处理器执行步骤5。
2.根据权利要求1所述的方法，其特征在于，步骤1之前，所述方法还包括：
拣选识别摄像头拍摄拣选区域初始化图像，通过可识别标志对拣选区域初始化图像中的库位进行识别，并且在拣选区域初始化图像中对每个库位的范围进行框定，完成拣选识别摄像头的初始化。
3.根据权利要求2所述的方法，其特征在于，初始化完成后，所述方法还包括：
拣选工人进入拣选区域后，拣选识别摄像头拍摄拣选区域第二图像，对拣选区域第二图像进行人脸识别，确认拣选人员。
4.根据权利要求2所述的方法，其特征在于，可识别标志包括智能拣选灯光指引系统、二维码或条形码。
5.根据权利要求1所述的方法，其特征在于，步骤5包括:
处理器通过智能拣选灯光指引系统发出拣选错误提示。
6.根据权利要求1至5任一项所述的方法，其特征在于，所述处理器再次查验拣选工人是否存在漏捡或者错拣的情况，包括：
所述处理器将摄像头上报的库位信息与拣选需求中的库位信息进行比对，根据比对结果查验拣选工人是否存在漏捡或者错拣的情况。
7.一种智能拣选系统，其特征在于，包括处理器，和在拣选区域的多个视角安装的拣选识别摄像头；
处理器和拣选识别摄像头通过权利要求1至6任一项所述的方法完成智能拣选控制。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111267302.1A CN113992829A (zh) | 2021-10-29 | 2021-10-29 | 一种智能拣选系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111267302.1A CN113992829A (zh) | 2021-10-29 | 2021-10-29 | 一种智能拣选系统及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113992829A true CN113992829A (zh) | 2022-01-28 |
Family
ID=79743961
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111267302.1A Pending CN113992829A (zh) | 2021-10-29 | 2021-10-29 | 一种智能拣选系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113992829A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN208485145U (zh) * | 2018-01-18 | 2019-02-12 | 水岩智能科技（宁波）有限公司 | 智能仓储拣货系统 |
| CN110837743A (zh) * | 2018-08-17 | 2020-02-25 | 天津京东深拓机器人科技有限公司 | 一种拣货信息的提示方法和系统 |
| CN111222389A (zh) * | 2019-01-10 | 2020-06-02 | 图灵通诺（北京）科技有限公司 | 商超货架上商品的分析方法和系统 |
| CN111597970A (zh) * | 2020-05-14 | 2020-08-28 | 中国银行股份有限公司 | 异常行为的识别方法及装置 |
| CN112508109A (zh) * | 2020-12-10 | 2021-03-16 | 锐捷网络股份有限公司 | 一种图像识别模型的训练方法及装置 |
| CN112529502A (zh) * | 2020-12-17 | 2021-03-19 | 北京疯景科技有限公司 | 通过识别二维码定位仓库货物和库位的实现方法及系统 |
| CN112668410A (zh) * | 2020-12-15 | 2021-04-16 | 浙江大华技术股份有限公司 | 分拣行为检测方法、系统、电子装置和存储介质 |
-
2021
- 2021-10-29 CN CN202111267302.1A patent/CN113992829A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN208485145U (zh) * | 2018-01-18 | 2019-02-12 | 水岩智能科技（宁波）有限公司 | 智能仓储拣货系统 |
| CN110837743A (zh) * | 2018-08-17 | 2020-02-25 | 天津京东深拓机器人科技有限公司 | 一种拣货信息的提示方法和系统 |
| CN111222389A (zh) * | 2019-01-10 | 2020-06-02 | 图灵通诺（北京）科技有限公司 | 商超货架上商品的分析方法和系统 |
| CN111597970A (zh) * | 2020-05-14 | 2020-08-28 | 中国银行股份有限公司 | 异常行为的识别方法及装置 |
| CN112508109A (zh) * | 2020-12-10 | 2021-03-16 | 锐捷网络股份有限公司 | 一种图像识别模型的训练方法及装置 |
| CN112668410A (zh) * | 2020-12-15 | 2021-04-16 | 浙江大华技术股份有限公司 | 分拣行为检测方法、系统、电子装置和存储介质 |
| CN112529502A (zh) * | 2020-12-17 | 2021-03-19 | 北京疯景科技有限公司 | 通过识别二维码定位仓库货物和库位的实现方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110852219B (zh) | 一种多行人跨摄像头在线跟踪系统 | |
| CN108320404B (zh) | 基于神经网络的商品识别方法、装置、自助收银台 | |
| CN109117824B (zh) | 商品的管理方法、装置、电子设备及储存介质 | |
| US12053887B2 (en) | Imaging process for detecting failures modes | |
| US20220391796A1 (en) | System and Method for Mapping Risks in a Warehouse Environment | |
| CN111507261B (zh) | 一种基于视觉目标定位的工序操作质量监控方法 | |
| US20130279749A1 (en) | System and method for detecting target rectangles in an image | |
| US11752524B2 (en) | Method for recovering a posteriori information about the operation of a plant for automatic classification and sorting of fruit | |
| CN113989503A (zh) | 一种生产线巡检系统、方法、电子设备及存储介质 | |
| EP4207068A1 (en) | Target object detection method and apparatus, and electronic device, storage medium and program | |
| CN113221819A (zh) | 包裹暴力分拣的检测方法、装置、计算机设备和存储介质 | |
| CN115497169A (zh) | 一种仓库作业行为识别方法、装置及设备 | |
| CN112016509B (zh) | 人员站位异常提醒方法及装置 | |
| CN111738184B (zh) | 一种商品取放识别方法、装置、系统及设备 | |
| CN113992829A (zh) | 一种智能拣选系统及方法 | |
| CN112214629B (zh) | 基于图像识别的回环检测方法及可移动设备 | |
| CN109559450B (zh) | 一种智能货柜管理系统 | |
| CN112651369A (zh) | 一种监控场景下行人识别的方法及装置 | |
| CN109064457B (zh) | 一种基于视觉的数量累计的方法及系统 | |
| CN110968719A (zh) | 一种人脸聚类方法及装置 | |
| CN113850147A (zh) | 基于摄像头图像的仓库非法作业鉴别的方法及系统 | |
| CN112949606B (zh) | 工服穿戴状态检测方法、装置、存储介质及电子装置 | |
| CN113673499A (zh) | 一种标签建图方法、装置、设备及存储介质 | |
| CN112150366A (zh) | 一种用于识别变电站控制柜上压板、指示灯状态的方法 | |
| CN113091730B (zh) | 一种轨迹确定方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20220128 |