CN112766053A

CN112766053A - 货品拣选的方法、装置、设备、存储介质及程序产品

Info

Publication number: CN112766053A
Application number: CN202011603164.5A
Authority: CN
Inventors: 杨穗梅; 朱开磊
Original assignee: Shenzhen Hairou Innovation Technology Co Ltd
Current assignee: Hai Robotics Co Ltd
Priority date: 2020-12-29
Filing date: 2020-12-29
Publication date: 2021-05-07
Also published as: WO2022143203A1

Abstract

本公开提供一种货品拣选的方法、装置、设备、存储介质及程序产品，通过智能交互眼镜系统展示任务信息，在作业人员根据任务信息作业过程中自动采集被操作货品的第一货品信息，并向数量监测运算系统发送第一货品信息；数量监测运算系统基于搬运设备的监测系统采集的同一作业过程中被操作货品的第三货品信息，验证第一货品信息，反馈验证结果。智能交互眼镜系统确定对第一货品信息验证通过后，将第一货品信息发送给仓储管理系统，仓储管理系统根据第一货品信息确认任务是否完成，并更新库存信息，实现自动化智能拣选过程，在拣选作业过程中作业人员无需手动操作电子设备，提高实际操作的货品信息的准确性和人员作业的连惯性，提高了作业效率。

Description

货品拣选的方法、装置、设备、存储介质及程序产品

技术领域

本公开涉及智能仓储技术领域，尤其涉及一种货品拣选的方法、装置、设备、存储介质及程序产品。

背景技术

在智能仓储领域，常见的自动化仓库实现了货到人拣选，增加了信息系统、自动化搬运机器人、立体库、输送线、拣选工作站等自动化设备。但是自动化仓库整个作业流程中，在各个货品拣选场景下，都需要作业人员与电脑或者电子标签系统等进行手动交互，以满足货品实物的流量与信息系统同步，员工操作信息系统的差错概率大，人员作业的不连惯性导致作业效率低。

发明内容

本公开提供一种货品拣选的方法、装置、设备、存储介质及程序产品，用以解决货品拣选场景下，需要作业人员与电脑或者电子标签系统等进行交互，作业差错概率大，作业效率低的问题。

本公开的第一个方面是提供一种货品拣选的方法，应用于可穿戴的智能交互眼镜系统，包括：

接收并展示任务信息；在作业人员根据所述任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息；向数量监测运算系统发送所述第一货品信息；根据所述数量监测运算系统对所述第一货品信息的验证结果，若对所述第一货品信息验证通过，则将所述第一货品信息发送给仓储管理系统。

一种可选的实施方式中，在作业人员根据所述任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息，包括：在作业人员根据所述任务信息进行作业的过程中，采集被操作货品的第一图像；根据所述被操作货品的第一图像，确定作业过程中被操作货品的第一货品信息。

一种可选的实施方式中，所述展示任务信息包括：通过显示装置显示所述任务信息；和/或，通过语音交互装置播放所述任务信息。

一种可选的实施方式中，所述任务信息包括操作类型和第二货品信息，所述第二货品信息包括待操作货品的存储位置、品类及数量。

一种可选的实施方式中，所述展示任务信息包括：根据所述第二货品信息，展示待操作货品的特征信息；其中，所述待操作货品的特征信息包括一下至少一种待操作货品的图像、标识信息、外观信息。

一种可选的实施方式中，所述在作业人员根据所述任务信息进行作业的过程中，采集被操作货品的第一图像，包括：根据所述任务信息，监控作业人员的操作动作；在作业人员对货品进行所述任务信息对应的操作动作时，采集被操作货品的第一图像。

一种可选的实施方式中，所述根据所述被操作货品的第一图像，确定作业过程中被操作货品的第一货品信息，包括：对所述被操作货品的第一图像进行图像处理，识别所述第一图像中的被操作货品；根据识别出的所述第一图像中的被操作货品的标识信息，确定所述作业过程中被操作货品的品类和数量。

一种可选的实施方式中，所述对所述被操作货品的第一图像进行图像处理，识别所述第一图像中的被操作货品，包括：对所述被操作货品的第一图像进行图像处理，提取所述第一图像中的货品特征数据；将所述货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定所述第一图像中的被操作货品的标识信息。

一种可选的实施方式中，所述将所述货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定所述第一图像中的被操作货品的标识信息之前，还包括：获取并存储所有货品的标识信息对应的特征数据。

一种可选的实施方式中，所述根据所述任务信息，监控作业人员的操作动作，包括：采集作业人员的第二图像；根据所述任务信息中的操作类型，对所述第二图像进行图像识别，识别出所述第二图像中与所述操作类型对应的操作动作。

一种可选的实施方式中，所述根据所述任务信息中的操作类型，对所述第二图像进行图像识别，识别出所述第二图像中与所述操作类型对应的操作动作，包括：通过神经网络模型，根据所述任务信息中的操作类型，对所述第二图像进行图像识别，识别出所述第二图像中与所述操作类型对应的操作动作。

一种可选的实施方式中，所述在作业人员对货品进行所述任务信息对应的操作动作时，采集被操作货品的第一图像，包括：在确定作业人员对货品进行所述任务信息对应的操作动作时，启动第一图像采集装置采集被操作货品的第一图像。

一种可选的实施方式中，所述对所述被操作货品的第一图像进行图像处理，识别所述第一图像中的被操作货品之后，还包括：若无法识别出某一被操作货品的第一图像中的被操作货品，则展示第一提示信息，所述第一提示信息用于提示作业人员将该被操作货品的标识信息对准第一图像采集装置。

一种可选的实施方式中，还包括：采集包含被操作货品的标识信息的第三图像；识别出所述第三图像中被操作货品的标识信息。

一种可选的实施方式中，所述识别出所述第三图像中被操作货品的标识信息之后，还包括：提取并保存所述第一图像中的被操作货品的特征数据。

一种可选的实施方式中，所述提取并保存所述第一图像中的被操作货品的特征数据之后，还包括：向数量监测运算系统发送所述第三图像和所述第一图像中的被操作货品的特征数据。

一种可选的实施方式中，所述在作业人员根据所述任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息之后，还包括：向数量监测运算系统发送所述第一图像。

一种可选的实施方式中，还包括：根据所述数量监测运算系统对所述第一货品信息的验证结果，若对所述第一货品信息验证不通过，则展示第二提示信息，所述第二提示信息用于提示作业人员核对所述作业过程中被操作货品的信息。

一种可选的实施方式中，所述采集作业过程中被操作货品的第一货品信息之后，还包括：接收搬运设备的货品监测系统发送的第四货品信息，所述第四货品信息包括所述作业过程中所述搬运设备的容器中被操作货品的品类和数量；根据所述第四货品信息，对所述第一货品信息进行验证。

一种可选的实施方式中，还包括：根据所述第四货品信息，若对所述第一货品信息的验证不通过，则展示第三提示信息，所述第三提示信息用于提示作业人员核对所述作业过程中被操作货品的信息。

一种可选的实施方式中，所述采集作业过程中被操作货品的第一货品信息之后，还包括：向搬运设备的货品监测系统发送所述第一货品信息。

本公开的第二个方面是提供一种货品拣选的方法，应用于数量监测运算系统，包括：

接收智能交互眼镜系统发送的第一货品信息，所述第一货品信息为在一次任务的作业过程中被操作货品的信息；获取搬运设备的监测系统发送的第三货品信息，所述第三货品信息为在同一所述任务的作业过程中，所述搬运设备的容器中被操作货品的信息；根据所述第三货品信息对所述第一货品信息进行验证，并将验证结果发送给智能交互眼镜系统。一种可选的实施方式中，所述第三货品信息包括：

所述搬运设备的货品监测系统发送的第四货品信息，所述第四货品信息包括所述作业过程中所述搬运设备的容器中被操作货品的品类和数量；和/或，所述搬运设备的重量监测系统发送的第五货品信息，所述第五货品信息包括所述作业过程中所述搬运设备的容器中被操作货品的数量。

一种可选的实施方式中，所述根据所述第三货品信息对所述第一货品信息进行验证，包括：判断所述第一货品信息与所述第四货品信息是否一致；若所述第一货品信息与所述第四货品信息一致，则对所述第一货品信息验证通过；若所述第一货品信息与所述第四货品信息不一致，则对所述第一货品信息验证不通过。

一种可选的实施方式中，所述根据所述第三货品信息对所述第一货品信息进行验证，包括：判断所述第五货品信息与所述第一货品信息中的被操作货品的数量是否一致；若所述第五货品信息与所述第一货品信息中的被操作货品的数量一致，则对所述第一货品信息验证通过；若所述第五货品信息与所述第一货品信息中的被操作货品的数量不一致，则对所述第一货品信息验证不通过。

一种可选的实施方式中，还包括：接收所述智能交互眼镜系统发送的所述任务的作业过程中被操作货品的第一图像和第三图像，所述第三图像包含被操作货品的标识信息；根据所述被操作货品的第一图像和第三图像，对所述第一货品信息进行验证。

一种可选的实施方式中，还包括：接收所述智能交互眼镜系统发送的所述第一图像中的被操作货品的特征数据；存储所述第一图像中的被操作货品的特征数据。

一种可选的实施方式中，还包括：接收所述货品监测系统发送的所述任务的作业过程中被操作货品的第四图像和第六图像，所述第六图像包含被操作货品的标识信息；根据所述被操作货品的第四图像和第六图像，对所述第四货品信息进行验证。

一种可选的实施方式中，还包括：接收所述货品监测系统发送的所述第四图像中的被操作货品的特征数据；存储所述第四图像中的被操作货品的特征数据。

本公开的第三个方面是提供一种货品拣选的方法，应用于搬运设备的货品监测系统，所述搬运设备包括用于容纳货品的容器，所述货品监测系统包括用于采集所述容器内货品图像的第二图像采集装置，所述方法包括：

接收任务信息；在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息；向数量监测运算系统发送所述第四货品信息，所述第四货品信息用于对智能交互眼镜系统在作业人员根据所述任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

一种可选的实施方式中，在作业人员根据所述任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息，包括：在作业人员根据所述任务信息进行作业的过程中，采集所述容器中被操作货品的第四图像；根据所述容器中被操作货品的第四图像，确定作业过程中所述容器中被操作货品的第四货品信息。

一种可选的实施方式中，所述在作业人员根据所述任务信息进行作业的过程中，采集所述容器中被操作货品的第四图像，包括：根据所述任务信息，监控对所述容器中货品的操作动作；在作业人员对货品进行所述任务信息对应的操作动作时，采集所述容器中被操作货品的第四图像；其中，所述任务信息对应的操作动作包括：将货品放入所述容器中的操作动作，或者，从所述容器中拿出货品的操作动作。

一种可选的实施方式中，所述根据所述容器中被操作货品的第四图像，确定作业过程中所述容器中被操作货品的第四货品信息，包括：对所述第四图像进行图像处理，识别所述第四图像中的被操作货品；根据识别出的所述第四图像中的被操作货品的标识信息，确定所述作业过程中所述容器中被操作货品的品类和数量。

一种可选的实施方式中，所述对所述第四图像进行图像处理，识别所述第四图像中的被操作货品，包括：对所述第四图像进行图像处理，提取所述第四图像中的货品特征数据；将所述货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定所述第四图像中的被操作货品的标识信息。

一种可选的实施方式中，所述将所述货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定所述第四图像中的被操作货品的标识信息之前，还包括：获取并存储所有货品的标识信息对应的特征数据。

一种可选的实施方式中，所述根据所述任务信息，监控对所述容器中货品的操作动作，包括：采集拍摄范围内作业人员的第五图像；根据所述任务信息中的操作类型，对所述第五图像进行图像识别，识别出所述第五图像中与所述操作类型对应的操作动作。

一种可选的实施方式中，所述根据所述任务信息中的操作类型，对所述第五图像进行图像识别，识别出所述第五图像中与所述操作类型对应的操作动作，包括：通过神经网络模型，根据所述任务信息中的操作类型，对所述第五图像进行图像识别，识别出所述第五图像中与所述操作类型对应的操作动作。

一种可选的实施方式中，所述在作业人员对货品进行所述任务信息对应的操作动作时，采集所述容器中被操作货品的第四图像，包括：在确定作业人员对货品进行所述任务信息对应的操作动作时，启动第二图像采集装置采集所述容器中被操作货品的第四图像。

一种可选的实施方式中，所述对所述第四图像进行图像处理，识别所述第四图像中的被操作货品之后，还包括：若无法识别出某一被操作货品的第四图像中的被操作货品，则展示第四提示信息，所述第四提示信息用于提示作业人员将该被操作货品的标识信息对准第二图像采集装置。

一种可选的实施方式中，还包括：采集包含被操作货品的标识信息的第六图像；识别出所述第六图像中被操作货品的标识信息。

一种可选的实施方式中，所述识别出所述第六图像中被操作货品的标识信息之后，还包括：提取并保存所述第四图像中的被操作货品的特征数据。

一种可选的实施方式中，所述提取并保存所述第六图像中的被操作货品的特征数据之后，还包括：向数量监测运算系统发送所述第六图像和所述第四图像中的被操作货品的特征数据。

一种可选的实施方式中，所述在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息之后，还包括：向数量监测运算系统发送所述第四图像。

一种可选的实施方式中，若所述容器为除货叉之外的容器，所述第二图像采集装置安装于货叉上，接收任务信息之后，还包括：调整所述货叉的位置，以使所述第二图像采集装置能够采集到所述容器中货品的图像。

一种可选的实施方式中，所述在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息之后，还包括：接收智能交互眼镜系统发送的第一货品信息，所述第一货品信息包括作业过程中被操作货品的品类和数量；根据所述第一货品信息，对所述第四货品信息进行验证。

一种可选的实施方式中，还包括：根据所述第一货品信息，若对所述第四货品信息进行验证不通过，则展示第五提示信息，所述第五提示信息用于提示作业人员核对所述作业过程中被操作货品的信息。

一种可选的实施方式中，所述在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息之后，还包括：向智能交互眼镜系统发送所述第四货品信息。

本公开的第四个方面是提供一种货品拣选的方法，应用于搬运设备的重量监测系统，所述搬运设备包括用于容纳货品的容器，所述重量监测系统包括用于检测所述容器中货品重量的重量检测装置，所述方法包括：

接收任务信息；在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第五货品信息；向数量监测运算系统发送所述第五货品信息，所述第五货品信息用于对智能交互眼镜系统在作业人员根据所述任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

一种可选的实施方式中，所述在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第五货品信息，包括：采集作业过程中搬运设备的容器中被操作货品的总体重量；根据所述任务信息中被操作货品的单个重量，以及所述总体重量，计算作业过程中搬运设备的容器中被操作货品的数量。

一种可选的实施方式中，所述采集作业过程中搬运设备的容器中被操作货品的总体重量，包括：采集所述作业过程开始时所述容器中货品的第一重量，以及所述作业过程结束时所述容器中货品的第二重量；计算所述第一重量与第二重量的差值，得到所述作业过程中搬运设备的容器中被操作货品的总体重量。

一种可选的实施方式中，所述采集所述作业过程开始时所述容器中货品的第一重量，以及所述作业过程结束时所述容器中货品的第二重量，包括：当接收到所述任务信息时，采集所述容器中货品的重量，得到所述第一重量；当接收到下一个任务信息、或者接收到所述任务信息对应的任务结束指令时，采集所述容器中货品的重量，得到所述第二重量。

一种可选的实施方式中，所述采集所述容器中货品的重量，包括：接收多个重量传感器的重量值，所述多个重量传感器均用于采集所述容器中货品的重量；将所述多个重量传感器的检测值中出现次数最多的重量值，作为所述容器中货品的重量。

本公开的第五个方面是提供一种货品拣选的方法，应用于仓储管理系统，包括：

发送任务信息，所述任务信息包括操作类型及第二货品信息；接收第一货品信息，所述第一货品信息为在作业人员根据所述任务信息进行作业的过程中，智能交互眼镜系统采集的作业过程中被操作货品的第一货品信息；根据所述第一货品信息和第二货品信息，确认任务是否完成，并更新货品库存信息。

一种可选的实施方式中，所述发送任务信息，包括：向智能交互眼镜系统、搬运设备的货品监测系统和重量监测系统发送任务信息。

本公开的第六个方面是提供一种货品拣选的装置，应用于智能交互眼镜系统，包括：

任务信息处理模块，用于接收并展示任务信息；

货品信息管理模块，用于在作业人员根据所述任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息；

所述货品信息管理模块还用于向数量监测运算系统发送所述第一货品信息；

所述货品信息管理模块还用于根据所述数量监测运算系统对所述第一货品信息的验证结果，若对所述第一货品信息验证通过，则将所述第一货品信息发送给仓储管理系统。

本公开的第七个方面是提供一种货品拣选的装置，应用于数量监测运算系统，包括：

货品信息获取模块，用于接收智能交互眼镜系统发送的第一货品信息，所述第一货品信息为在一次任务的作业过程中被操作货品的信息；

所述货品信息获取模块还用于获取搬运设备的监测系统发送的第三货品信息，所述第三货品信息为在同一所述任务的作业过程中，所述搬运设备的容器中被操作货品的信息；

货品信息验证模块，用于根据所述第三货品信息对所述第一货品信息进行验证，并将验证结果发送给智能交互眼镜系统。

本公开的第八个方面是提供一种货品拣选的装置，应用于搬运设备的货品监测系统，所述搬运设备包括用于容纳货品的容器，所述货品监测系统包括用于采集所述容器内货品图像的第二图像采集装置，所述货品拣选的装置包括：

任务接收模块，用于接收任务信息；

货品信息管理模块，用于在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息；

所述货品信息管理模块还用于向数量监测运算系统发送所述第四货品信息，所述第四货品信息用于对智能交互眼镜系统在作业人员根据所述任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

本公开的第九个方面是提供一种货品拣选的装置，应用于搬运设备的重量监测系统，所述搬运设备包括用于容纳货品的容器，所述重量监测系统包括用于检测所述容器中货品重量的重量检测装置，所述货品拣选的装置包括：

任务接收模块，用于接收任务信息；

货品信息管理模块，用于在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第五货品信息；

所述货品信息管理模块还用于向数量监测运算系统发送所述第五货品信息，所述第五货品信息用于对智能交互眼镜系统在作业人员根据所述任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

本公开的第十个方面是提供一种货品拣选的装置，应用于仓储管理系统，包括：

任务下发模块，用于发送任务信息，所述任务信息包括操作类型及第二货品信息；

货品信息接收模块，用于接收第一货品信息，所述第一货品信息为在作业人员根据所述任务信息进行作业的过程中，智能交互眼镜系统采集的作业过程中被操作货品的第一货品信息；

任务确认模块，用于根据所述第一货品信息和第二货品信息，确认任务是否完成，并更新货品库存信息。

本公开的第十一个方面是提供一种货品拣选的设备，包括：

处理器，存储器，以及存储在所述存储器上并可在所述处理器上运行的计算机程序；其中，所述处理器运行所述计算机程序时实现上述任一方面中任一项所述的方法。

本公开的第十二个方面是提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现上述任一方面中任一项所述的方法。

本公开的第十三个方面是提供一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现上述任一方面中任一项所述的方法。

本公开提供的货品拣选的方法、装置、设备、存储介质及程序产品，通过智能交互眼镜系统可以接收并展示仓储管理系统下发的任务信息，以使作业人员可以依据所展示的任务信息进行作业。在作业人员根据所述任务信息进行作业的过程中，智能交互眼镜系统自动地采集作业过程中被操作货品的第一货品信息，并向数量监测运算系统发送所述第一货品信息。数量监测运算系统能够基于搬运设备的至少一个监测系统在作业过程中采集的第三货品信息对第一货品信息进行验证，并反馈验证结果。智能交互眼镜系统在确定对所述第一货品信息验证通过后，将所述第一货品信息发送给仓储管理系统，仓储管理系统根据第一货品信息确认任务是否完成，并更新库存信息。本公开实施例能够实现自动化的智能拣选过程，在拣选的整个作业过程中，作业人员无需手动操作电脑或者电子标签系统等电子设备，即可实现货品实物的流量与信息系统同步，确保实际操作的货品信息的准确性，保证人员作业的连惯性，大大提高了作业效率。

附图说明

图1为本公开实施例提供的一种货品拣选系统的框架图；

图2为本公开另一实施例提供的一种货品拣选系统的框架图；

图3为本公开实施例提供的货品拣选的方法流程图；

图4为本公开另一实施例提供的货品拣选的方法流程图；

图5为本公开实施例提供的货品监测系统的结构示意图；

图6为本公开另一实施例提供的货品拣选的方法流程图；

图7为本公开另一实施例提供的货品拣选的方法流程图；

图8为本公开实施例提供的重量监测系统的结构示意图；

图9为本公开另一实施例提供的货品拣选的方法流程图；

图10为本公开另一实施例提供的智能拣选系统的总体流程示意图；

图11为本公开实施例提供的货品拣选的装置的结构示意图；

图12为本公开实施例提供的货品拣选的装置的结构示意图；

图13为本公开实施例提供的货品拣选的装置的结构示意图；

图14为本公开实施例提供的货品拣选的装置的结构示意图；

图15为本公开实施例提供的货品拣选的装置的结构示意图；

图16为本公开实施例提供的货品拣选的设备的结构示意图。

附图标记：

10-货品拣选系统 11-智能交互眼镜系统 12-仓储管理系统

13-拣选台 14-搬运设备 15-货品监测系统

16-重量监测系统 17-数量监测运算系统 110-智能交互眼镜

111-第一处理器 112-眼镜本体 113-第一图像采集装置

114-信息展示装置 151-第二图像采集装置 152-第二处理器

153-灯光指示装置 161-第三处理器 162-重量检测装置

171-第四处理器

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

本公开所涉及的术语“第一”、“第二”、“第三”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。在以下各实施例的描述中，“多个”的含义是两个以上，除非另有明确具体的限定。

在智能仓储领域，目前常见的自动化仓库实现了货到人拣选，增加了信息系统、自动化搬运机器人、立体库、输送线、拣选工作站等自动化设备。但是自动化仓库整个作业流程中，在各个货品拣选场景下，都需要作业人员与电脑或者电子标签系统等进行交互，以满足货品实物的流量与信息系统同步，员工操作信息系统的差错概率大，人员作业的不连惯性导致作业效率低。

例如，以仓储搬运机器人货到人拆零拣选场景拣货的场景为例，拣选动作的拆解：机器人进入拣选工作站→员工看拣货电脑界面提示的拣货信息→寻找目标拣选位置→扫描目标商品→操作拣货电脑界面输入拣选的商品数量→分播墙电子标签灯亮提示员工分播商品的目的位置→员工投递商品→拍灯确认→员工查看电脑界面信息提示→准备下一次拣选作业。由此可见，整个作业环节，作业人员并没有全部连续的进行拣选作业，会有较大一部分的时间用于与电脑系统和电子标签系统等进行信息交互。电子标签拣选系统的硬件成本和信息系统交互的电脑成本高，员工与电脑操作的差错概率大，人员作业的不连惯性效率低。

本公开实施例提供一种智能拣选系统，用于机器人或其他自动化仓出库、上架、盘点、理货、移库等与库内货品发生实际接触的场景，该智能拣选系统会自动接收与展示任务信息，并自动核对作业准确性、货品变更记录。操作人员全程只需实际操作即可，完全不需要与电脑系统或者掌上电脑(Personal Digital Assistant，简称PDA)之类的其他设备进行信息交互。

下面以具体地实施例对本公开的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本公开的实施例进行描述。

图1为本公开实施例提供的一种货品拣选系统的框架图。如图1所示，货品拣选系统10包括智能交互眼镜系统11、仓储管理系统(Warehouse Management System，简称WMS)12、拣选台13和搬运设备14。其中，仓储管理系统12与搬运设备14之间具有通信连接，用于控制搬运设备14将待拣选的货品搬运至拣选台13，拣选台13用于进行货品拣选操作。其中，搬运设备14用于货品被搬运的过程中承载或搬运货品，可以是机器人、输送线、货架等。

本实施例中，任意两个设备，或者两个系统，或者系统与设备之间的通信连接，可以是电连接、或者通过无线/有线信号连接，能够实现两者之间的数据通信即可，本实施例对于两者具体采用何种连接不做具体限定。

智能交互眼镜系统11包括的智能交互眼镜110和第一处理器111。智能交互眼镜110包括眼镜本体112，眼镜本体112上设置有第一图像采集装置113和信息展示装置114。其中，仓储管理系统12与第一处理器111之间具有通信连接，用于向第一处理器111下发任务信息。

仓储管理系统12与第一处理器111之间具有通信连接，仓储管理系统12用于向第一处理器111下发任务信息。

第一处理器111与信息展示装置114电连接，用于控制信息展示装置114展示任务信息，任务信息用于指示穿戴智能交互眼镜110的作业人员在拣选台13上进行货品拣选操作。当作业人员执行任务的过程中，作业人员需穿戴智能交互眼镜110，通过智能交互眼镜110的信息展示装置114接收任务信息，并按照任务信息在拣选台13上进行货品拣选操作。

第一处理器111与第一图像采集装置113电连接，用于根据任务信息控制第一图像采集装置113采集拣选台13上被操作货品的图像，并根据被操作货品的图像确定被操作货品的第一货品信息。

第一处理器111还用于将第一货品信息传输至仓储管理系统12。

可选地，第一处理器111可以设置于眼镜本体112上，或者第一处理器111可以独立于智能交互眼镜110设置，并可以与智能交互眼镜110进行通信。

本实施例实现了自动化的智能拣选过程，在拣选的整个作业过程中，作业人员无需手动操作电脑或者电子标签系统等电子设备，即可实现货品实物的流量与信息系统同步，确保实际操作的货品信息的准确性，保证人员作业的连惯性，大大提高了作业效率。

可选地，信息展示装置114可以包括：显示装置和/或语音交互装置。在显示任务信息时，可以通过显示装置和/或语音交互装置进行显示。

可选地，显示装置可以作为智能交互眼镜110的镜片部分，作为显示屏幕使用，显示作业过程中的动态信息。显示装置作为显示屏幕，并非全屏幕展示信息，在显示信息的同时，作业人员仍然可通过显示屏幕看清实际的操作动作和货品。可选地，显示装置可以是微观电子屏幕。

语音交互装置用于实现智能交互眼镜系统11与作业人员之间的语音交互功能。具体地，语音交互装置可以包括耳机或者语音外放播放器等语音播放装置，用于向穿戴该智能交互眼镜110的作业人员播放语音信息。智能交互眼镜系统11要播放的音频信息可以通过耳机或者语音外放播放器传输至作业人员的耳朵，作业人员无需手动操作即可与智能交互眼镜系统进行交互。

可选地，语音交互装置还可以包括音频采集装置，用于采集作业人员输入的语音信息。

可选地，眼镜本体112上还设置有电源。电源用于为第一图像采集装置113和信息展示装置114供电。可选地，电源可以是电池或无线充电器等，以保障智能交互眼镜110的续航能力。

一种可选的实施方式中，如图2所示，搬运设备14上设置有货品监测系统15和/或重量监测系统16，搬运设备14还设置为用于容纳货品的容器(图中未示出)。仓储管理系统12还用于向智能交互眼镜系统11、货品监测系统15和重量监测系统16发送任务信息，启动对该任务的货品拣选的自动监测功能。货品拣选系统中的智能交互眼镜系统11、仓储管理系统12、搬运设备14、货品监测系统15、重量监测系统16和数量监测运算系统17中任意两者之间的连接关系如图2所示，任意两者之间具有连接线，说明两者之间具有通信连接，能够进行数据通信。

货品监测系统15用于在作业人员根据任务信息进行作业的过程中，监测作业过程中搬运设备14的容器中被操作货品的品类和第一数量，并将作业过程中搬运设备14的容器中被操作货品的品类和第一数量发送到数量监测运算系统17。本实施例中，为描述方便，用“第四货品信息”指代在作业人员根据任务信息进行作业的过程中，货品监测系统15监测到的作业过程中搬运设备14的容器中被操作货品的品类和第一数量。

重量监测系统16用于在作业人员根据任务信息进行作业的过程中，监测作业过程中搬运设备14的容器中被操作货品的第二数量，并将作业过程中搬运设备14的容器中被操作货品的第二数量发送到数量监测运算系统17。本实施例中，为描述方便，用“第五货品信息”指代在作业人员根据任务信息进行作业的过程中，重量监测系统16监测到的作业过程中搬运设备14的容器中被操作货品第二数量。

可选地，货品拣选系统10还可以包括数量监测运算系统17。智能交互眼镜系统11还用于将第一货品信息发送至数量监测运算系统17。数量监测运算系统17用于对第一货品信息进行验证，并将验证结果反馈给智能交互眼镜系统11。可选地，数量监测运算系统17还用于根据货品监测系统15发送的第四货品信息，和/或，重量监测系统16发送的第五货品信息，对第一货品信息进行验证；也就是，数量监测运算系统17根据第四货品信息和/或第五货品信息，对第一货品信息进行验证。

智能交互眼镜系统11还用于根据数量监测运算系统反馈的验证结果，若对第一货品信息验证通过，则将第一货品信息发送给仓储管理系统12。仓储管理系统12还用于根据第一货品信息和任务信息，确认任务是否完成，并更新货品库存信息。图3为本公开实施例提供的货品拣选的方法流程图。基于上述图1或图2所示的货品拣选系统，本实施例提供了货品拣选的方法，如图3所示，该方法具体步骤如下：

步骤S200、仓储管理系统向智能交互眼镜系统发送任务信息，任务信息包括操作类型及第二货品信息。

在需要进行货品拣选作业的任务时，仓储管理系统根据任务需要，向智能交互眼镜系统发送任务信息。

其中，任务信息包括执行任务时作业人员的操作类型，以及第二货品信息。第二货品信息包括待操作货品的存储位置、品类及数量。

步骤S201、智能交互眼镜系统接收并展示任务信息。

本实施例中，当作业人员执行任务时，穿戴智能交互眼镜。智能交互眼镜系统负责接收仓储管理系统WMS下发的待作业任务的任务信息，并通过智能交互眼镜展示任务信息。作业人员可以按照智能交互眼镜展示的任务信息进行实际作业。

步骤S202、在作业人员根据任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息。

智能交互眼镜通过第一图像采集装置，可以实时地监控作业人员的操作动作，在作业人员根据任务信息进行作业的过程中，实时地监控和采集作业过程中被操作货品的图像。智能交互眼镜系统的处理器根据采集的作业过程中被操作货品的图像，自动识别和确定本次任务作业过程中被操作货品的第一货品信息。

其中，第一货品信息可以包括被操作货品的品类和数量。

步骤S203、向数量监测运算系统发送第一货品信息。

步骤S204、数量监测运算系统接收智能交互眼镜系统发送的第一货品信息，第一货品信息为在一次任务的作业过程中被操作货品的信息。

步骤S205、数量监测运算系统获取搬运设备的监测系统发送的第三货品信息，第三货品信息为在同一任务的作业过程中，搬运设备的容器中被操作货品的信息。

本实施例中，数量监测运算系统还可以与搬运设备的货品监测系统和/或质量监测系统进行交互，获取搬运设备的监测系统发送的第三货品信息。

可选地，第三货品信息可以包括货品监测系统发送的第四货品信息，和/或，质量监测系统发送的第五货品信息。其中，第四货品信息为在同一任务的作业过程中，货品监测系统自动监测确定的搬运设备的容器中被操作货品的信息。第四货品信息包括被操作货品的品类和数量。第五货品信息为在同一任务的作业过程中，质量监测系统自动监测确定的搬运设备的容器中被操作货品的信息。第五货品信息包括被操作货品数量。

步骤S206、数量监测运算系统根据第三货品信息对第一货品信息进行验证，并将验证结果发送给智能交互眼镜系统。

数量监测运算系统根据第三货品信息对第一货品信息进行验证，确定对第一货品信息是否验证通过，并将验证结果发送给智能交互眼镜系统。

步骤S207、智能交互眼镜系统根据数量监测运算系统对第一货品信息的验证结果，若对第一货品信息验证通过，则将第一货品信息发送给仓储管理系统。

智能交互眼镜系统接收数量监测运算系统对第一货品信息的验证结果。根据对第一货品信息的验证结果，若对第一货品信息验证通过，则第一货品信息准确无误，将第一货品信息发送给仓储管理系统。

步骤S208、根据数量监测运算系统对第一货品信息的验证结果，若对第一货品信息验证不通过，则展示第二提示信息，第二提示信息用于提示作业人员核对作业过程中被操作货品的信息。

根据对第一货品信息的验证结果，若对第一货品信息验证不通过，说明第一货品信息不准确，需要作业人员人工核对，则智能交互眼镜系统展示第二提示信息，第二提示信息用于提示作业人员核对作业过程中被操作货品的信息。其中第一提示信息的展示方式与任务信息的展示方式一致，此处不再赘述。

步骤S209、仓储管理系统接收第一货品信息，第一货品信息为在作业人员根据任务信息进行作业的过程中，智能交互眼镜系统采集的作业过程中被操作货品的第一货品信息。

步骤S210、根据第一货品信息和第二货品信息，确认任务是否完成，并更新货品库存信息。

仓储管理系统接收到智能交互眼镜系统发送的第一货品信息之后，根据任务信息中需要作业的货品的第二货品信息和实际作业过程中被操作货品的第一货品信息，确认本次任务是否完成，并根据第一货品信息更新货品库存信息。

可选地，如果本次任务完成，仓储管理系统还可以向智能交互眼镜系统发送任务成功消息，智能交互眼镜系统可以向作业人员展示任务成功消息。

可选地，如果本次任务未完成，仓储管理系统根据第一货品信息和第二货品信息之间的差异，重新制定用于修正本次任务的新任务，并下方新任务的任务信息。基于新任务的任务信息，智能仓储系统执行新任务。

本公开实施例通过智能交互眼镜系统可以接收并展示仓储管理系统下发的任务信息，以使作业人员可以依据所展示的任务信息进行作业。在作业人员根据任务信息进行作业的过程中，智能交互眼镜系统自动地采集作业过程中被操作货品的第一货品信息，并向数量监测运算系统发送第一货品信息。数量监测运算系统能够基于搬运设备的至少一个监测系统在作业过程中采集的第三货品信息对第一货品信息进行验证，并反馈验证结果。智能交互眼镜系统在确定对第一货品信息验证通过后，将第一货品信息发送给仓储管理系统，仓储管理系统根据第一货品信息确认任务是否完成，并更新库存信息。本公开实施例能够实现自动化的智能拣选过程，在拣选的整个作业过程中，作业人员无需手动操作电脑或者电子标签系统等电子设备，即可实现货品实物的流量与信息系统同步，确保实际操作的货品信息的准确性，保证人员作业的连惯性，大大提高了作业效率。

图4为本公开另一实施例提供的货品拣选的方法流程图。在上述图3对应方法实施例的基础上，本实施例中，对货品拣选的方法流程进行详细地说明。如图4所示，该方法具体步骤如下：

步骤S300、仓储管理系统向智能交互眼镜系统发送任务信息，任务信息包括操作类型及第二货品信息。

该步骤与上述步骤S200一致，此处不再赘述。

步骤S301、智能交互眼镜系统接收并展示任务信息。

其中，任务信息包括操作类型和第二货品信息，第二货品信息包括待操作货品的存储位置、品类及数量。

可选地，展示任务信息包括：通过显示装置显示任务信息；和/或，通过语音交互装置播放任务信息。例如，可以通过智能交互眼镜的镜片显示任务信息，和/或，通过语音交互装置播放任务信息对应的音频信息。

可选地，为了便于作业人员了解待作业货品的外观等信息，提高作业人员的拣选效率，在展示信息时，还可以根据第二货品信息，展示待操作货品的特征信息。其中，待操作货品的特征信息包括一下至少一种：待操作货品的图像、标识信息、外观信息。货品的标识信息可以能够唯一标识货品的一维码、二维码等信息。

作业人员通过智能交互眼镜系统接收到任务信息之后，无需任务手动反馈操作，可以直接按照任务信息进行相应的作业，也可以自由操作完成任务。

本实施例的一种可选的实施方式中，在作业人员根据任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息，包括：在作业人员根据任务信息进行作业的过程中，采集被操作货品的第一图像；根据被操作货品的第一图像，确定作业过程中被操作货品的第一货品信息。

具体可以通过后续步骤S302-S303，在作业人员根据任务信息进行作业的过程中，采集被操作货品的第一图像。通过后续步骤S304-S305，可以根据被操作货品的第一图像，确定作业过程中被操作货品的第一货品信息。

步骤S302、根据任务信息，监控作业人员的操作动作。

本实施例中，智能交互眼镜系统可以通过第一图像采集装置实时地监控作业人员的操作动作，当确定作业人员进行对应的操作动作，操作实物货品时，启动第一图像采集装置采集被操作货品的图像。

具体地，该步骤可以采用如下方式实现：

采集作业人员的第二图像；根据任务信息中的操作类型，对第二图像进行图像识别，识别出第二图像中与操作类型对应的操作动作。

其中，第二图像是指第一图像采集装置采集范围内的包含作业人员操作动作的图像。该步骤中，通过监控与任务信息中操作类型对应的操作动作，来监控作业人员是否进行本次任务的作业。如果第二图像中包含与任务信息中操作类型对应的操作动作，则说明作业人员开始作业，可以启动第一图像采集装置采集被操作货品的第一图像。如果第二图像中不包含与任务信息中操作类型对应的操作动作，则说明作业人员还未开始本次任务的作业，第一图像继续作业人员的操作动作，直至作业人员开始作业。

可选地，可以通过神经网络模型，根据任务信息中的操作类型，对第二图像进行图像识别，识别出第二图像中与操作类型对应的操作动作。这样，智能交互眼镜系统通过预先训练好的神经网络模型，来判别第二图像中是否包含对应操作动作，并在第二图像中包含对应操作动作时，自动触发第一图像采集装置采集被操作货品的第一图像，存储第一图像。

步骤S303、在作业人员对货品进行任务信息对应的操作动作时，采集被操作货品的第一图像。

示例性地，在确定作业人员对货品进行任务信息对应的操作动作时，启动第一图像采集装置采集被操作货品的第一图像。

步骤S304、对被操作货品的第一图像进行图像处理，识别第一图像中的被操作货品。

本实施例中，智能交互眼镜系统可以存储所有货品的品类信息和特征数据，并将货品的标识信息与品类信息和特征数据绑定。其中，货品的特征数据包括货品的外观特征，具体包括尺寸、颜色、形状、包含的特殊图形、以及其他特征。基于货品的特征数据可以对图像中出现的货品进行识别。

在对被操作货品的第一图像进行图像处理，识别第一图像中的被操作货品之前，智能交互眼镜系统获取并存储所有货品的标识信息对应的特征数据。

进一步地，该步骤具体可以采用如下方式实现：

对被操作货品的第一图像进行图像处理，提取第一图像中的货品特征数据；将货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定第一图像中的被操作货品的标识信息。

步骤S305、根据识别出的第一图像中的被操作货品的标识信息。

在识别出所有第一图像中的被操作货品的标识信息之后，可以确定在本次任务的作业过程中所有的被操作货品，可以进一步统计得到被操作货品的数量。进一步地，还可以根据所有货品的标识信息绑定的品类信息，可以确定作业过程中所有的被操作货品的品类。

步骤S306、若无法识别出某一被操作货品的第一图像中的被操作货品，则展示第一提示信息，第一提示信息用于提示作业人员将该被操作货品的标识信息对准第一图像采集装置。

在上述步骤S304中，若无法识别出某一被操作货品的第一图像中的被操作货品，智能交互眼镜系统展示第一提示信息，以提示作业人员将该被操作货品的条形码等标识信息对准第一图像采集装置，第一图像采集装置就可以采集到包含被操作货品的标识信息的第三图像。

该步骤中第一提示信息的展示方式与任务信息的展示方式一致，此处不再赘述。

步骤S307、采集包含被操作货品的标识信息的第三图像，识别出第三图像中被操作货品的标识信息。

作业人员收到第一提示信息后，重新将该被操作货品的条形码等标识信息对准第一图像采集装置，第一图像采集装置采集包含被操作货品的标识信息的第三图像。智能交互眼镜系统可以识别出第三图像中被操作货品的标识信息，从而成功识别该被操作货品。

一种可选的实施方式中，对于某些对于货品信息的精确度要求较高的货品，可以要求作业人员进行操作时将货品的识别信息对准第一图像采集装置，第一图像采集装置直接采集包含被操作货品标识信息的第三图像，并基于第三图像进行识别。其中，对于货品信息的精确度要求较高的货品包括但不限于：医药类的货品、精密仪器、价格高昂的货品。

步骤S308、提取并保存第一图像中的被操作货品的特征数据。

在上述步骤S304中，若无法识别出某一被操作货品的第一图像中的被操作货品，说明已存储的特征数据中不包含该货品的特征数据，或者该货品特征数据发生了变化，例如更换包装等情况。在采集包含被操作货品的标识信息的第三图像，识别出第三图像中被操作货品的标识信息之后，智能交互眼镜系统提取第一图像中的被操作货品的特征数据，并更新与该货品的标识信息绑定的特征数据，实现货品特征的自主学习。下次再操作该货品时，智能交互眼镜系统就可以通过采集该货品的第一图像来识别出该货品。

可选地，智能交互眼镜系统还可以实时地或每间隔一段时间，与数量监测运算系统进行所有货品的标识信息绑定的特征数据同步更新。

步骤S309、确定作业过程中被操作货品的品类和数量，得到第一货品信息。

在识别出所有被操作货品的标识信息之后，智能交互眼镜系统可以获取与标识信息绑定的品类信息，从而确定被操作货品的品类，还可以进一步统计出被操作货品的数量，得到第一货品信息。

步骤S310、向数量监测运算系统发送第一货品信息。

智能交互眼镜系统在确定第一货品信息之后，向数量监测运算系统发送第一货品信息。

步骤S311、数量监测运算系统接收智能交互眼镜系统发送的第一货品信息，第一货品信息为在一次任务的作业过程中被操作货品的信息。

步骤S312、获取搬运设备的监测系统发送的第三货品信息，第三货品信息为在同一任务的作业过程中，搬运设备的容器中被操作货品的信息。

本实施例中，在本次任务的作业过程中，搬运设备的货品监测系统和/或重量监测系统可以实时地监测被操作货品的信息。数量监测运算系统还可以与搬运设备的货品监测系统和/或质量监测系统进行交互，获取搬运设备的监测系统发送的第三货品信息。

其中，第三货品信息包括：

搬运设备的货品监测系统发送的第四货品信息，和/或，搬运设备的重量监测系统发送的第五货品信息。其中，第四货品信息包括作业过程中搬运设备的容器中被操作货品的品类和数量，第五货品信息包括作业过程中搬运设备的容器中被操作货品的数量。

步骤S313、根据第三货品信息对第一货品信息进行验证，并将验证结果发送给智能交互眼镜系统。

本实施例中，第一货品信息为在作业过程中作业人员操作的货品的品类和数量，第四货品信息同一作业过程中搬运设备的容器中被操作货品的品类和数量，第一货品信息与第四货品信息应该一致。

若第三货品信息包括第四货品信息，该步骤中，根据第四货品信息对第一货品信息进行验证，具体可以采用如下方式实现：

判断第一货品信息与第四货品信息是否一致；若第一货品信息与第四货品信息一致，则对第一货品信息验证通过；若第一货品信息与第四货品信息不一致，则对第一货品信息验证不通过。

本实施例中，第五货品信息包括作业过程中搬运设备的容器中被操作货品的数量，第五货品信息中被操作货品的数量应该与第一货品信息中的被操作货品的数量一致。

若第三货品信息包括第五货品信息，该步骤中，根据第五货品信息对第一货品信息进行验证，具体可以采用如下方式实现：

判断第五货品信息与第一货品信息中的被操作货品的数量是否一致；若第五货品信息与第一货品信息中的被操作货品的数量一致，则对第一货品信息验证通过；若第五货品信息与第一货品信息中的被操作货品的数量不一致，则对第一货品信息验证不通过。

本实施例一种可选的实施方式中，智能交互眼镜系统还可以向数量监测运算系统发送第一图像和第三图像。数量监测运算系统接收智能交互眼镜系统发送的任务的作业过程中被操作货品的第一图像和第三图像，根据被操作货品的第一图像和第三图像，对第一货品信息进行验证。

具体地，数量监测运算系统对第一图像进行图像处理，识别第一图像中的被操作货品；对第三图像进行图像处理，识别出第三图像中被操作货品的标识信息；根据识别出的第一图像和第三图像中的被操作货品，确定作业过程中被操作货品的品类和数量。

其中，数量监测运算系统对第一图像进行图像处理，识别第一图像中的被操作货品，与上述步骤S304中智能交互眼镜系统对被操作货品的第一图像进行图像处理，识别第一图像中的被操作货品的实现方式一致，此次不再赘述。数量监测运算系统对第三图像进行图像处理，识别出第三图像中被操作货品的标识信息，与上述步骤S307中智能交互眼镜系统识别出第三图像中被操作货品的标识信息的实现方式一致，此次不再赘述。数量监测运算系统根据识别出的第一图像和第三图像中的被操作货品，确定作业过程中被操作货品的品类和数量，与上述步骤S309中智能交互眼镜系统确定作业过程中被操作货品的品类和数量的实现方式一致，此次不再赘述。

可选地，智能交互眼镜系统还向数量监测运算系统发送识别失败的第一图像中的被操作货品的特征数据。数量监测运算系统接收智能交互眼镜系统发送的第一图像中的被操作货品的特征数据，并存储第一图像中的被操作货品的特征数据。示例性地，数量监测运算系统将第一图像中的被操作货品的特征数据与被操作货品的标识信息对应存储，以将将第一图像中的被操作货品的特征数据与被操作货品的标识信息绑定。

可选地，数量监测运算系统还可以获取货品库存数据，基于本次任务中货品库存数据的变动信息，对第一货品信息进行验证。

在得到对第一货品信息的验证结果之后，数量监测运算系统将验证结果发送给智能交互眼镜系统。

步骤S314、智能交互眼镜系统根据数量监测运算系统对第一货品信息的验证结果，若对第一货品信息验证通过，则将第一货品信息发送给仓储管理系统。

仓储管理系统接收到智能交互眼镜系统发送的第一货品信息之后，进行上述步骤S209-S210的处理，本实施例此处不再赘述。

步骤S315、根据数量监测运算系统对第一货品信息的验证结果，若对第一货品信息验证不通过，则展示第二提示信息，第二提示信息用于提示作业人员核对作业过程中被操作货品的信息。

该步骤与上述步骤S208的实时方式一致，此处不再赘述。

本实施例中的一种可选的实施方式中，在任务的作业过程中，智能交互眼镜系统确定的第一货品信息，与搬运设备的货品监测系统确定的第四货品信息，可以相互核对校验。

具体地，智能交互眼镜系统接收搬运设备的货品监测系统发送的第四货品信息，第四货品信息包括作业过程中搬运设备的容器中被操作货品的品类和数量；根据第四货品信息，对第一货品信息进行验证。具体验证过程与上述步骤S313中，数量监测运算系统根据第四货品信息对第一货品信息进行验证的过程一致，此处不再赘述。

进一步地，根据第四货品信息，若对第一货品信息的验证不通过，则展示第三提示信息，第三提示信息用于提示作业人员核对作业过程中被操作货品的信息。其中第三提示信息的展示方式与任务信息的展示方式一致，此处不再赘述。

可选地，智能交互眼镜系统也可以向搬运设备的货品监测系统发送第一货品信息，以使搬运设备的货品监测系统根据第一货品信息，对货品监测系统确定的第四货品信息进行验证。

本实施例中，当任何一个环节验证不通过时，作业人员人工核对作业过程中被操作货品的信息之后，可以通过智能交互眼镜系统的语音交互装置或者辅助功能键反馈作业人员人工校验后的正确数据。智能交互眼镜系统接收到校验后的正确数据后，将校验后的正确数据同步更新到数量监测运算系统。

本公开实施例中，智能交互眼镜系统能够自动监控作业人员的操作动作，并采集被操作货品的第一图像，根据第一图像实现被操作货品的自动识别；进一步地，在对第一图像识别失败后，还可以采集包含货品标识信息的第三图像，基于第三图像可以识别出被操作货品，进一步提高了自动监控的第一货品信息的准确性。另外，数量监测运算系统还可以获取搬运设备的货品监测系统自动采集的第四货品信息和/或重量监测系统自动采集的第五货品信息，通过第四货品信息和/或第五货品信息对第一货品信息进一步验证，提高了实际操作的货品信息的准确性，并且保证人员作业的连惯性，提高了作业效率。

图5为本公开实施例提供的货品监测系统的结构示意图。如图5所示，货品监测系统15包括：第二图像采集装置151和第二处理器152。其中第二图像采集装置151用于采集搬运设备容器内货品的图像。

其中，第二处理器152与仓储管理系统12之间具有通信连接，用于接收仓储管理系统12下发的任务信息。

第二处理器152与第二图像采集装置151电连接，用于根据任务信息控制第二图像采集装置151用于采集容器内货品的图像，并根据容器内货品的图像确定容器中被操作货品的品类和第一数量，得到第四货品信息。

在一些场景中，搬运设备14包括多个用于容纳货品的容器。货品监测系统15可以包括多个安装于搬运设备14上不同位置的第二图像采集装置151。

可选地，每个容器对应设置有至少一个第二图像采集装置151，每个第二图像采集装置151用于采集对应容器内货品的图像。例如，可以在每个容器附近安装一个第二图像采集装置151，每个第二图像采集装置151对准对应容器，用于采集对应容器内货品的图像。

可选地，搬运设备14还包括可移动装置，可移动装置上设置有第二图像采集装置151。第二处理器152与可移动装置电连接，第二处理器152还用于控制可移动装置移动至该容器对应位置，使得第二图像采集装置151对准该容器，并控制可移动装置上的第二图像采集装置151采集该容器内货品的图像。

例如，搬运设备可以是机器人，包括货叉和背篓两种容器，可以在货叉上和背篓的附近都安装一个摄像头，分别用于采集对应货叉或背篓内货品的图像；或者，可以在货叉上安装一个摄像头，可以采集货叉内货品的图像，在需要采集背篓内货品的图像时，货品监测系统可以向机器人发送控制指令，以使机器人控制货叉移动至对应位置，使得货叉上的摄像头可以采集到背篓内货品的图像。

可选地，货品监测系统15还包括灯光指示装置153，灯光指示装置153用于指示待操作的货品的拣选位置。当需要对某一货品进行操作时，该货品对应拣选位置的灯光指示装置153点亮，以便于作业人员快速找到该货品，可以提高作业效率。

可选地，数量监测运算系统17包括第四处理器171，第四处理器171与货品监测系统15的第二处理器152之间具有通信连接，第二处理器152用于将容器中被操作货品的品类(即第四货品信息)和第一数量传输至第四处理器171。

另外，第四处理器171与智能交互眼镜系统11的第一处理器111之间具有通信连接(图5中未示出智能交互眼镜系统中的其他部分，其他部分如图1中所示)，第一处理器111用于将第一货品信息传输至第四处理器171。第四处理器171还用于根据容器中被操作货品的品类和第一数量(即第四货品信息)对第一货品信息进行验证，将验证结果传输至第一处理器111。

可选地，货品监测系统15的第二处理器152与智能交互眼镜系统11的第一处理器111之间具有通信连接，第二处理器152与第一处理器111之间可以进行数据通信，进行第四货品信息和第一货品信息的相互验证。

图6为本公开另一实施例提供的货品拣选的方法流程图。在上述任一方法实施例的基础上，本实施例中，基于图5所示的货品监测系统，对货品监测系统执行的货品拣选的方法流程进行示例性地说明。如图6所示，该方法具体步骤如下：

步骤S401、仓储管理系统向搬运设备的货品监测系统发送任务信息。

本实施例中，在需要进行货品拣选作业的任务时，仓储管理系统根据任务需要，向搬运设备的货品监测系统发送任务信息。

步骤S402、货品监测系统接收任务信息。

步骤S403、在作业人员根据任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息。

货品监测系统第二图像采集装置，可以实时地监控作业人员对搬运设备的容器中货品的操作动作，在作业人员根据任务信息进行作业的过程中，实时地监控和采集搬运设备的容器中被操作货品的信息。货品监测系统的处理器根据采集的作业过程中被操作货品的信息，自动识别和确定本次作业过程中搬运设备的容器中被操作货品的第四货品信息。

其中，第四货品信息可以包括被操作货品的品类和数量。

步骤S404、向数量监测运算系统发送第四货品信息，第四货品信息用于对智能交互眼镜系统在作业人员根据任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

在确定第四货品信息之后，货品监测系统向数量监测运算系统发送第四货品信息，以使数量监测运算系统根据第四货品信息，对智能交互眼镜系统在作业人员根据任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

步骤S405、数量监测运算系统接收第四货品信息。

步骤S406、数量监测运算系统根据第四货品信息对第一货品信息进行验证。

该步骤的实现方式已在上述步骤S313中进行了详细地说明，具体参见步骤S313，此处不再赘述。

本公开实施例中，在任务的作业过程中，无需作业人员手动操作，货品监测系统可以根据任务信息，自动采集作业过程中搬运设备的容器中被操作货品的第四货品信息，并将第四货品信息发送给数量监测运算系统，数量监测运算系统可以基于第四货品信息对同一作业过程中智能交互眼镜系统自动采集的第一货品信息进行验证，并反馈验证结果。智能交互眼镜系统在确定对第一货品信息验证通过后，将第一货品信息发送给仓储管理系统，仓储管理系统根据第一货品信息确认任务是否完成，并更新库存信息。本公开实施例能够实现自动化的智能拣选过程，在拣选的整个作业过程中，作业人员无需手动操作电脑或者电子标签系统等电子设备，即可实现货品实物的流量与信息系统同步，确保实际操作的货品信息的准确性，保证人员作业的连惯性，大大提高了作业效率。

图7为本公开另一实施例提供的货品拣选的方法流程图。在上述图6对应方法实施例的基础上，本实施例中，对搬运设备的货品监测系统执行的货品拣选的方法流程进行详细地说明。如图7所示，该方法具体步骤如下：

步骤S501、接收任务信息。

本实施例中，在作业人员根据任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息，包括：

在作业人员根据任务信息进行作业的过程中，采集容器中被操作货品的第四图像；根据容器中被操作货品的第四图像，确定作业过程中容器中被操作货品的第四货品信息。

具体地，可以通过后续步骤S502-S503，在作业人员根据任务信息进行作业的过程中，采集容器中被操作货品的第四图像。

通过后续步骤S504-S505，根据容器中被操作货品的第四图像，确定作业过程中容器中被操作货品的第四货品信息。

一种可选的实施方式中，若容器为除货叉之外的容器，第二图像采集装置安装于货叉上。接收任务信息之后，货品监测系统调整货叉的位置，以使第二图像采集装置能够采集到容器中货品的图像。

例如，当前监控的搬运设备的容器可以是机器人的背篓，第二图像采集装置可以是设置于机器人的货叉上摄像头，接收到任务信息之后，货品监测系统调整货叉的位置，使得摄像头对准背篓，能够采集背篓中货品的图像，从而可以对作业人员对背篓中货品的操作动作进行监控。

步骤S502、根据任务信息，监控对容器中货品的操作动作。

其中，任务信息对应的操作动作包括：将货品放入容器中的操作动作，或者，从容器中拿出货品的操作动作。

根据任务信息，监控对容器中货品的操作动作，包括：

采集拍摄范围内作业人员的第五图像；根据任务信息中的操作类型，对第五图像进行图像识别，识别出第五图像中与操作类型对应的操作动作。

示例性地，可以通过神经网络模型，根据任务信息中的操作类型，对第五图像进行图像识别，识别出第五图像中与操作类型对应的操作动作。

该步骤的具体实现方式与上述步骤S302类似，此处不再赘述。

步骤S503、在作业人员对货品进行任务信息对应的操作动作时，采集容器中被操作货品的第四图像。

示例性地，在确定作业人员对货品进行任务信息对应的操作动作时，启动第二图像采集装置采集容器中被操作货品的第四图像。

步骤S504、对第四图像进行图像处理，识别第四图像中的被操作货品。

在对第四图像进行图像处理，识别第四图像中的被操作货品之后，货品监测系统获取并存储所有货品的标识信息对应的特征数据。

进一步地，该步骤具体可以采用如下方式实现：

对第四图像进行图像处理，提取第四图像中的货品特征数据；将货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定第四图像中的被操作货品的标识信息。

该步骤的具体实现方式与上述步骤S304类似，此处不再赘述。

步骤S505、根据识别出的第四图像中的被操作货品的标识信息，确定作业过程中容器中被操作货品的品类和数量。

该步骤的具体实现方式与上述步骤S305类似，此处不再赘述。

步骤S506、若无法识别出某一被操作货品的第四图像中的被操作货品，则展示第四提示信息，第四提示信息用于提示作业人员将该被操作货品的标识信息对准第二图像采集装置。

在上述步骤S504中，若无法识别出某一被操作货品的第四图像中的被操作货品，货品监测系统展示第四提示信息，以提示作业人员将该被操作货品的标识信息对准第二图像采集装置，第二图像采集装置就可以采集到包含被操作货品的标识信息的第六图像。

该步骤中第四提示信息可以通过货品监测系统的显示装置或语音交互装置进行展示，或者还可以通过点亮对应提示灯等其他方式进行展示，此处不再赘述。

步骤S507、采集包含被操作货品的标识信息的第六图像，识别出第六图像中被操作货品的标识信息。

该步骤的具体实现方式与上述步骤S307类似，此处不再赘述。

步骤S508、提取并保存第四图像中的被操作货品的特征数据。

本实施例中，识别出第六图像中被操作货品的标识信息之后，货品监测系统提取并保存第六图像中的被操作货品的特征数据。

在上述步骤S504中，若无法识别出某一被操作货品的第四图像中的被操作货品，说明已存储的特征数据中不包含该货品的特征数据，或者该货品特征数据发生了变化，例如更换包装等情况。在采集包含被操作货品的标识信息的第六图像，识别出第六图像中被操作货品的标识信息之后，货品监测系统提取第四图像中的被操作货品的特征数据，并更新与该货品的标识信息绑定的特征数据，实现货品特征的自主学习。下次再操作该货品时，货品监测系统就可以通过采集该货品的第四图像来识别出该货品。

可选地，货品监测系统还可以实时地或每间隔一段时间，与数量监测运算系统进行所有货品的标识信息绑定的特征数据同步更新。

一种可选的实施方式中，货品监测系统向数量监测运算系统发送第四图像。数量监测运算系统接收货品监测系统发送的任务的作业过程中被操作货品的第四图像；根据被操作货品的第四图像，对第四货品信息进行验证。

进一步地，货品监测系统向数量监测运算系统发送第六图像和第六图像中的被操作货品的特征数据。数量监测运算系统接收货品监测系统发送的任务的作业过程中被操作货品的第六图像和第六图像中的被操作货品的特征数据，第六图像包含被操作货品的标识信息；根据第六图像和第四图像，对第四货品信息进行验证；存储第六图像中的被操作货品的特征数据。

本实施例的一种可选的实施方式中，在任务的作业过程中，智能交互眼镜系统确定的第一货品信息，可以与搬运设备的货品监测系统确定的第四货品信息进行相互核对校验。

具体地，货品监测系统接收智能交互眼镜系统发送的第一货品信息，第一货品信息包括作业过程中被操作货品的品类和数量；根据第一货品信息，对第四货品信息进行验证。具体验证过程与上述步骤S313中，数量监测运算系统根据第四货品信息对第一货品信息进行验证的过程一致，此处不再赘述。

进一步地，根据第一货品信息，若对第四货品信息进行验证不通过，则展示第五提示信息，第五提示信息用于提示作业人员核对作业过程中被操作货品的信息。其中第五提示信息的展示方式与第四提示信息的展示方式一致，此处不再赘述。

可选地，货品监测系统也可以向智能交互眼镜系统发送第四货品信息，以使智能交互眼镜系统根据第四货品信息，对智能交互眼镜系统确定的第一货品信息进行验证。

本实施例中对货品监测系统能够自动监控作业人员的操作动作，并采集搬运设备的容器中被操作货品的第四图像，根据第四图像实现搬运设备的容器中被操作货品的自动识别；进一步地，在对第四图像识别失败后，还可以采集包含货品标识信息的第六图像，基于第六图像可以识别出被操作货品，进一步提高了自动监控的第四货品信息的准确性。数量监测运算系统根据货品监测系统自动采集的第四货品信息对智能交互眼镜系统在同一作业过程中自动采集的第一货品信息进一步验证，提高了实际操作的货品信息的准确性，并且保证人员作业的连惯性，提高了作业效率。

图8为本公开实施例提供的重量监测系统的结构示意图。如图8所示，重量监测系统16包括：第三处理器161，以及搬运设备的每个容器上设置的重量检测装置162。其中，重量检测装置162用于采集所在容器中货品的重量。

第三处理器161与仓储管理系统12之间具有通信连接，用于接收仓储管理系统下发的任务信息。

第三处理器161与重量检测装置162电连接，用于根据任务信息控制重量检测装置162在任务开始采集所在容器中货品的第一重量，在任务结束时采集所在容器中货品的第二重量；第三处理器161还用于并根据任务信息中被操作货品的单个重量，以及第一重量和第二重量，计算容器中被操作货品的第二数量，得到第五货品信息。

具体地，第三处理器161还用于计算第一重量与第二重量的差值，得到作业过程中容器中被操作货品的总体重量；并根据任务信息中被操作货品的单个重量，以及容器中被操作货品总体重量，计算作业过程中容器中被操作货品的第二数量，得到第五货品信息。

可选地，搬运设备的每个容器上设置的重量检测装置162可以包括多个重量传感器，每个重量传感器用于检测所在容器中货品的重量。

第三处理器161与每个重量传感器电连接，用于接收多个重量传感器的检测值，将多个重量传感器的检测值中出现次数最多的重量值，作为容器中货品的重量。

可选地，重量传感器可以安装于搬运设备容器的内部，能够检测作业过程中容器内货品的重量的变化量。多个重量传感器之间可以互相校验，以提高对容器内部货品重量的检测的精确度。

可选地，重量传感器可以是应变式质量检测传感器。

其中，重量传感器的精确度可以根据容器存放货品的质量进行设置，容器存放货品的质量不同，可以使用不同精度的重量传感器。

可选地，数量监测运算系统17的第四处理器171与重量监测系统16的第三处理器161之间具有通信连接，第三处理器161用于将容器中被操作货品的第二数量(即第五货品信息)传输至第四处理器171。

第四处理器171与智能交互眼镜系统11的第一处理器111之间具有通信连接(图8中未示出智能交互眼镜系统中的其他部分，其他部分如图1中所示)，第一处理器111用于将第一货品信息传输至第四处理器171。第四处理器171还用于根据容器中被操作货品的第二数量(即第五货品信息)对第一货品信息进行验证，并将验证结果传输至第一处理器111。

可选地，第四处理器171还用于根据容器中被操作货品的第二数量(即第五货品信息)对第一货品信息进行验证，并根据容器中被操作货品的品类和第一数量(即第四货品信息)对第一货品信息进行验证，然后将验证结果传输至第一处理器111。

图9为本公开另一实施例提供的货品拣选的方法流程图。在上述任一方法实施例的基础上，本实施例中，基于图8所示的重量监测系统，对重量监测系统执行的货品拣选的方法流程进行示例性地说明。如图9所示，该方法具体步骤如下：

步骤S601、仓储管理系统向搬运设备的重量监测系统发送任务信息。

本实施例中，在需要进行货品拣选作业的任务时，仓储管理系统根据任务需要，向搬运设备的重量监测系统发送任务信息。

可选地，仓储管理系统可以向搬运设备发送任务信息，由搬运设备将任务信息下发至货品监测系统和重量监测系统。

步骤S602、重量监测系统接收任务信息。

步骤S603、在作业人员根据任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第五货品信息。

本实施例中，该步骤具体可以采用如下方式实现：

采集作业过程中搬运设备的容器中被操作货品的总体重量；根据任务信息中被操作货品的单个重量，以及总体重量，计算作业过程中搬运设备的容器中被操作货品的数量。

示例性地，采集作业过程中搬运设备的容器中被操作货品的总体重量，包括：采集作业过程开始时容器中货品的第一重量，以及作业过程结束时容器中货品的第二重量；计算第一重量与第二重量的差值，得到作业过程中搬运设备的容器中被操作货品的总体重量。

示例性地，在任务的整个作业过程中，当作业人员开始作业时，重量检测装置测量得到第一测量值，当作业人员作业结束(或者下一次任务开始作业)时，重量检测装置测量得到第二测量值，计算第一测量值和第二测量值的差值，可以得到作业过程中被操作货品的总体质量。

示例性地，当接收到任务信息时，采集容器中货品的重量，得到第一重量。当接收到下一个任务信息、或者接收到任务信息对应的任务结束指令时，采集容器中货品的重量，得到第二重量。

可选地，重量检测装置可以包括多个重量传感器。

在采集容器中货品的重量时，接收多个重量传感器的重量值，多个重量传感器均用于采集容器中货品的重量；将多个重量传感器的检测值中出现次数最多的重量值，作为容器中货品的重量。

示例性地，每次重量检测时，获取所有重量传感器的数值，并将所有重量传感器的数值处理为同一设定精度的重量值，将出现次数最多的重量值作为当前测得的重量，以确保测得货品重量的准确性。

在采集到作业过程中搬运设备的容器中被操作货品的总体重量之后，重量监测系统的第三处理器根据任务信息中被操作货品的单个重量，以及总体重量，通过倍数运算计算得到作业过程中搬运设备的容器中被操作货品的数量，也即得到第五货品信息。

步骤S604、向数量监测运算系统发送第五货品信息，第五货品信息用于对智能交互眼镜系统在作业人员根据任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

在确定第五货品信息之后，重量监测系统向数量监测运算系统发送第五货品信息，以使数量监测运算系统根据第五货品信息，对智能交互眼镜系统在作业人员根据任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

步骤S605、数量监测运算系统接收第五货品信息。

步骤S606、数量监测运算系统根据第五货品信息对第一货品信息进行验证。

本公开实施例中，在任务的作业过程中，无需作业人员手动操作，重量监测系统可以根据任务信息，自动采集作业过程中搬运设备的容器中被操作货品的总体重量，计算确定被操作货品的数量，得到第五货品信息，将第五货品信息发送给数量监测运算系统，数量监测运算系统可以基于第五货品信息对同一作业过程中智能交互眼镜系统自动采集的第一货品信息进行验证，并反馈验证结果。智能交互眼镜系统在确定对第一货品信息验证通过后，将第一货品信息发送给仓储管理系统，仓储管理系统根据第一货品信息确认任务是否完成，并更新库存信息。本公开实施例能够实现自动化的智能拣选过程，在拣选的整个作业过程中，作业人员无需手动操作电脑或者电子标签系统等电子设备，即可实现货品实物的流量与信息系统同步，确保实际操作的货品信息的准确性，保证人员作业的连惯性，大大提高了作业效率。

图10为本公开另一实施例提供的智能拣选系统的总体流程示意图。在上述任一方法实施例的基础上，本实施例中，对智能拣选系统的总体流程进行示例性地说明。如图10所示，智能拣选系统的总体流程如下：

(1)仓储管理系统WMS向智能交互眼镜系统下发任务信息；(2)智能交互眼镜系统展示任务信息；(3)作业人员按展示的任务信息作业，在搬运设备上操作货品；在作业过程中执行(4)(5)(6)：(4)智能交互眼镜系统识别作业人员操作动作，采集被操作货品的图像和第一货品信息，将被操作货品的图像和第一货品信息发送到数量监测运算系统；(5)搬运设备的重量监测系统记录容器中被操作货品的重量变化，计算第五货品信息；(6)搬运设备的货品监测系统识别作业人员操作动作，采集被操作货品的图像和第四货品信息，将被操作货品的图像和第四货品信息发送到数量监测运算系统；(7)数量监测运算系统根据被操作货品的图像、第四货品信息和第五货品信息验证第一货品信息，并向智能交互眼镜系统反馈验证结果；(8)智能交互眼镜系统将第一货品信息发送给仓储管理系统，仓储管理系统确认任务并更新库存信息；(9)智能交互眼镜系统与搬运设备及其他系统交互，展示交互信息和任务执行结果。

本实施例中，基于一种可选的实施方式对智能拣选系统的总体流程进行示例性地说明，在其他实施方式中，智能拣选系统的流程可以做相应地变化，本实施例此处不做具体限定。

图11为本公开实施例提供的货品拣选的装置的结构示意图。本公开实施例提供的货品拣选的装置应用于智能交互眼镜系统。如图11所示，该货品拣选的装置70包括：任务信息处理模块701和货品信息管理模块702。

具体地，任务信息处理模块701用于接收并展示任务信息。

货品信息管理模块702用于在作业人员根据任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息。

货品信息管理模块702还用于向数量监测运算系统发送第一货品信息。

货品信息管理模块702还用于根据数量监测运算系统对第一货品信息的验证结果，若对第一货品信息验证通过，则将第一货品信息发送给仓储管理系统。

一种可选的实施方式中，货品信息管理模块还用于：在作业人员根据任务信息进行作业的过程中，采集被操作货品的第一图像；根据被操作货品的第一图像，确定作业过程中被操作货品的第一货品信息。

一种可选的实施方式中，任务信息处理模块还用于：通过显示装置显示任务信息；和/或，通过语音交互装置播放任务信息。

一种可选的实施方式中，任务信息包括操作类型和第二货品信息，第二货品信息包括待操作货品的存储位置、品类及数量。

一种可选的实施方式中，任务信息处理模块还用于：根据第二货品信息，展示待操作货品的特征信息；其中，待操作货品的特征信息包括一下至少一种待操作货品的图像、标识信息、外观信息。

一种可选的实施方式中，货品信息管理模块还用于：根据任务信息，监控作业人员的操作动作；在作业人员对货品进行任务信息对应的操作动作时，采集被操作货品的第一图像。

一种可选的实施方式中，货品信息管理模块还用于：对被操作货品的第一图像进行图像处理，识别第一图像中的被操作货品；根据识别出的第一图像中的被操作货品的标识信息，确定作业过程中被操作货品的品类和数量。

一种可选的实施方式中，货品信息管理模块还用于：对被操作货品的第一图像进行图像处理，提取第一图像中的货品特征数据；将货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定第一图像中的被操作货品的标识信息。

一种可选的实施方式中，货品信息管理模块还用于：将货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定第一图像中的被操作货品的标识信息之前，获取并存储所有货品的标识信息对应的特征数据。

一种可选的实施方式中，货品信息管理模块还用于：采集作业人员的第二图像；根据任务信息中的操作类型，对第二图像进行图像识别，识别出第二图像中与操作类型对应的操作动作。

一种可选的实施方式中，货品信息管理模块还用于：通过神经网络模型，根据任务信息中的操作类型，对第二图像进行图像识别，识别出第二图像中与操作类型对应的操作动作。

一种可选的实施方式中，货品信息管理模块还用于：在确定作业人员对货品进行任务信息对应的操作动作时，启动第一图像采集装置采集被操作货品的第一图像。

一种可选的实施方式中，货品信息管理模块还用于：对被操作货品的第一图像进行图像处理，识别第一图像中的被操作货品之后，若无法识别出某一被操作货品的第一图像中的被操作货品，则展示第一提示信息，第一提示信息用于提示作业人员将该被操作货品的标识信息对准第一图像采集装置。

一种可选的实施方式中，货品信息管理模块还用于：采集包含被操作货品的标识信息的第三图像；识别出第三图像中被操作货品的标识信息。

一种可选的实施方式中，货品信息管理模块还用于：识别出第三图像中被操作货品的标识信息之后，提取并保存第一图像中的被操作货品的特征数据。

一种可选的实施方式中，货品信息管理模块还用于：提取并保存第一图像中的被操作货品的特征数据之后，向数量监测运算系统发送第三图像和第一图像中的被操作货品的特征数据。

一种可选的实施方式中，货品信息管理模块还用于：在作业人员根据任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息之后，向数量监测运算系统发送第一图像。

一种可选的实施方式中，货品信息管理模块还用于：根据数量监测运算系统对第一货品信息的验证结果，若对第一货品信息验证不通过，则展示第二提示信息，第二提示信息用于提示作业人员核对作业过程中被操作货品的信息。

一种可选的实施方式中，货品信息管理模块还用于：采集作业过程中被操作货品的第一货品信息之后，接收搬运设备的货品监测系统发送的第四货品信息，第四货品信息包括作业过程中搬运设备的容器中被操作货品的品类和数量；根据第四货品信息，对第一货品信息进行验证。

一种可选的实施方式中，货品信息管理模块还用于：根据第四货品信息，若对第一货品信息的验证不通过，则展示第三提示信息，第三提示信息用于提示作业人员核对作业过程中被操作货品的信息。

一种可选的实施方式中，货品信息管理模块还用于：采集作业过程中被操作货品的第一货品信息之后，向搬运设备的货品监测系统发送第一货品信息。

本公开实施例提供的装置可以具体用于执行上述任一方法实施例中智能交互眼镜系统所执行的方法流程，具体功能和技术效果参见上述实施例，此处不再赘述。

图12为本公开实施例提供的货品拣选的装置的结构示意图。本公开实施例提供的货品拣选的装置应用于数量监测运算系统。如图12所示，该货品拣选的装置80包括：货品信息获取模块801和货品信息验证模块802。

具体地，货品信息获取模块801用于接收智能交互眼镜系统发送的第一货品信息，第一货品信息为在一次任务的作业过程中被操作货品的信息。

货品信息获取模块801还用于获取搬运设备的监测系统发送的第三货品信息，第三货品信息为在同一任务的作业过程中，搬运设备的容器中被操作货品的信息。

货品信息验证模块802用于根据第三货品信息对第一货品信息进行验证，并将验证结果发送给智能交互眼镜系统。

在一种可选的实施方式中，第三货品信息包括：搬运设备的货品监测系统发送的第四货品信息，第四货品信息包括作业过程中搬运设备的容器中被操作货品的品类和数量；和/或，搬运设备的重量监测系统发送的第五货品信息，第五货品信息包括作业过程中搬运设备的容器中被操作货品的数量。

在一种可选的实施方式中，货品信息验证模块还用于：判断第一货品信息与第四货品信息是否一致；若第一货品信息与第四货品信息一致，则对第一货品信息验证通过；若第一货品信息与第四货品信息不一致，则对第一货品信息验证不通过。

在一种可选的实施方式中，货品信息验证模块还用于：判断第五货品信息与第一货品信息中的被操作货品的数量是否一致；若第五货品信息与第一货品信息中的被操作货品的数量一致，则对第一货品信息验证通过；若第五货品信息与第一货品信息中的被操作货品的数量不一致，则对第一货品信息验证不通过。

在一种可选的实施方式中，货品信息验证模块还用于：接收智能交互眼镜系统发送的任务的作业过程中被操作货品的第一图像和第三图像，第三图像包含被操作货品的标识信息；根据被操作货品的第一图像和第三图像，对第一货品信息进行验证。

在一种可选的实施方式中，货品信息验证模块还用于：接收智能交互眼镜系统发送的第一图像中的被操作货品的特征数据；存储第一图像中的被操作货品的特征数据。

在一种可选的实施方式中，货品信息验证模块还用于：接收货品监测系统发送的任务的作业过程中被操作货品的第四图像和第六图像，第六图像包含被操作货品的标识信息；根据被操作货品的第四图像和第六图像，对第四货品信息进行验证。

在一种可选的实施方式中，货品信息验证模块还用于：接收货品监测系统发送的第四图像中的被操作货品的特征数据；存储第四图像中的被操作货品的特征数据。

本公开实施例提供的装置可以具体用于执行上述任一方法实施例中数量监测运算系统所执行的方法流程，具体功能和技术效果参见上述实施例，此处不再赘述。

图13为本公开实施例提供的货品拣选的装置的结构示意图。本公开实施例提供的货品拣选的装置应用于搬运设备的货品监测系统，搬运设备包括用于容纳货品的容器，货品监测系统还包括用于采集容器内货品图像的第二图像采集装置。如图13所示，该货品拣选的装置90包括：任务接收模块901和货品信息管理模块902。

具体地，任务接收模块901用于接收任务信息。

货品信息管理模块902用于在作业人员根据任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息。

货品信息管理模块902还用于向数量监测运算系统发送第四货品信息，第四货品信息用于对智能交互眼镜系统在作业人员根据任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

一种可选的实施方式中，货品信息管理模块还用于：在作业人员根据任务信息进行作业的过程中，采集容器中被操作货品的第四图像；根据容器中被操作货品的第四图像，确定作业过程中容器中被操作货品的第四货品信息。

一种可选的实施方式中，货品信息管理模块还用于：根据任务信息，监控对容器中货品的操作动作；在作业人员对货品进行任务信息对应的操作动作时，采集容器中被操作货品的第四图像；其中，任务信息对应的操作动作包括：将货品放入容器中的操作动作，或者，从容器中拿出货品的操作动作。

一种可选的实施方式中，货品信息管理模块还用于：对第四图像进行图像处理，识别第四图像中的被操作货品；根据识别出的第四图像中的被操作货品的标识信息，确定作业过程中容器中被操作货品的品类和数量。

一种可选的实施方式中，货品信息管理模块还用于：对第四图像进行图像处理，提取第四图像中的货品特征数据；将货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定第四图像中的被操作货品的标识信息。

一种可选的实施方式中，货品信息管理模块还用于：将货品特征数据与所有货品的标识信息对应的特征数据进行匹配，确定第四图像中的被操作货品的标识信息之前，获取并存储所有货品的标识信息对应的特征数据。

一种可选的实施方式中，货品信息管理模块还用于：采集拍摄范围内作业人员的第五图像；根据任务信息中的操作类型，对第五图像进行图像识别，识别出第五图像中与操作类型对应的操作动作。

一种可选的实施方式中，货品信息管理模块还用于：通过神经网络模型，根据任务信息中的操作类型，对第五图像进行图像识别，识别出第五图像中与操作类型对应的操作动作。

一种可选的实施方式中，货品信息管理模块还用于：在确定作业人员对货品进行任务信息对应的操作动作时，启动第二图像采集装置采集容器中被操作货品的第四图像。

一种可选的实施方式中，货品信息管理模块还用于：对第四图像进行图像处理，识别第四图像中的被操作货品之后，若无法识别出某一被操作货品的第四图像中的被操作货品，则展示第四提示信息，第四提示信息用于提示作业人员将该被操作货品的标识信息对准第二图像采集装置。

一种可选的实施方式中，货品信息管理模块还用于：采集包含被操作货品的标识信息的第六图像；识别出第六图像中被操作货品的标识信息。

一种可选的实施方式中，货品信息管理模块还用于：识别出第六图像中被操作货品的标识信息之后，提取并保存第四图像中的被操作货品的特征数据。

一种可选的实施方式中，货品信息管理模块还用于：提取并保存第六图像中的被操作货品的特征数据之后，向数量监测运算系统发送第六图像和第四图像中的被操作货品的特征数据。

一种可选的实施方式中，货品信息管理模块还用于：在作业人员根据任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息之后，向数量监测运算系统发送第四图像。

一种可选的实施方式中，若容器为除货叉之外的容器，第二图像采集装置安装于货叉上，货品信息管理模块还用于：接收任务信息之后，调整货叉的位置，以使第二图像采集装置能够采集到容器中货品的图像。

一种可选的实施方式中，货品信息管理模块还用于：在作业人员根据任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息之后，接收智能交互眼镜系统发送的第一货品信息，第一货品信息包括作业过程中被操作货品的品类和数量；根据第一货品信息，对第四货品信息进行验证。

一种可选的实施方式中，货品信息管理模块还用于：根据第一货品信息，若对第四货品信息进行验证不通过，则展示第五提示信息，第五提示信息用于提示作业人员核对作业过程中被操作货品的信息。

一种可选的实施方式中，货品信息管理模块还用于：在作业人员根据任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息之后，向智能交互眼镜系统发送第四货品信息。

本公开实施例提供的装置可以具体用于执行上述任一方法实施例中搬运设备的货品监测系统所执行的方法流程，具体功能和技术效果参见上述实施例，此处不再赘述。

图14为本公开实施例提供的货品拣选的装置的结构示意图。本公开实施例提供的货品拣选的装置应用于搬运设备的重量监测系统，搬运设备包括用于容纳货品的容器，重量监测系统包括用于检测容器中货品重量的重量检测装置。如图14所示，该货品拣选的装置100包括：任务接收模块1001和货品信息管理模块1002。

具体地，任务接收模块1001用于接收任务信息。

货品信息管理模块1002用于在作业人员根据任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第五货品信息。

货品信息管理模块1002还用于向数量监测运算系统发送第五货品信息，第五货品信息用于对智能交互眼镜系统在作业人员根据任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

一种可选的实施方式中，货品信息管理模块还用于：采集作业过程中搬运设备的容器中被操作货品的总体重量；根据任务信息中被操作货品的单个重量，以及总体重量，计算作业过程中搬运设备的容器中被操作货品的数量。

一种可选的实施方式中，货品信息管理模块还用于：采集作业过程开始时容器中货品的第一重量，以及作业过程结束时容器中货品的第二重量；计算第一重量与第二重量的差值，得到作业过程中搬运设备的容器中被操作货品的总体重量。

一种可选的实施方式中，货品信息管理模块还用于：当接收到任务信息时，采集容器中货品的重量，得到第一重量；当接收到下一个任务信息、或者接收到任务信息对应的任务结束指令时，采集容器中货品的重量，得到第二重量。

一种可选的实施方式中，货品信息管理模块还用于：接收多个重量传感器的重量值，多个重量传感器均用于采集容器中货品的重量；将多个重量传感器的检测值中出现次数最多的重量值，作为容器中货品的重量。

本公开实施例提供的装置可以具体用于执行上述任一方法实施例中搬运设备的重量监测系统所执行的方法流程，具体功能和技术效果参见上述实施例，此处不再赘述。

图15为本公开实施例提供的货品拣选的装置的结构示意图。本公开实施例提供的货品拣选的装置应用于仓储管理系统。如图15所示，该货品拣选的装置130包括：任务下发模块1301、货品信息接收模块1302和任务确认模块1303。

具体地，任务下发模块1301用于发送任务信息，任务信息包括操作类型及第二货品信息。

货品信息接收模块1302用于接收第一货品信息，第一货品信息为在作业人员根据任务信息进行作业的过程中，智能交互眼镜系统采集的作业过程中被操作货品的第一货品信息。

任务确认模块1303用于根据第一货品信息和第二货品信息，确认任务是否完成，并更新货品库存信息。

一种可选的实施方式中，任务下发模块1301还用于向智能交互眼镜系统、搬运设备的货品监测系统和重量监测系统发送任务信息。

本公开实施例提供的装置可以具体用于执行上述任一方法实施例中仓储管理系统所执行的方法流程，具体功能和技术效果参见上述实施例，此处不再赘述。

图16为本公开实施例提供的货品拣选的设备的结构示意图。如图16所示，该货品拣选的设备120包括：处理器1201，存储器1202，以及存储在存储器1202上并可在处理器1201上运行的计算机程序。

其中，处理器1201运行计算机程序时实现上述任一方法实施例中智能交互眼镜系统、数量监测运算系统、货品监测系统、重量监测系统、仓储管理系统中任一系统所执行的方法流程，具体功能和技术效果参见上述实施例，此处不再赘述。

另外，本公开实施例还提供一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现上述任一方法实施例中智能交互眼镜系统、数量监测运算系统、货品监测系统、重量监测系统、仓储管理系统中任一系统所执行的方法流程。

本公开实施例还提供了一种计算机程序产品，程序产品包括：计算机程序，计算机程序存储在可读存储介质中，电子设备的至少一个处理器可以从可读存储介质读取计算机程序，至少一个处理器执行计算机程序使得电子设备执行上述任一方法实施例中智能交互眼镜系统、数量监测运算系统、货品监测系统、重量监测系统、仓储管理系统中任一系统所执行的方法流程。

本领域技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求书指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求书来限制。

Claims

1.一种货品拣选的方法，其特征在于，应用于智能交互眼镜系统，包括：

接收并展示任务信息；

在作业人员根据所述任务信息进行作业的过程中，采集作业过程中被操作货品的第一货品信息；

向数量监测运算系统发送所述第一货品信息；

根据所述数量监测运算系统对所述第一货品信息的验证结果，若对所述第一货品信息验证通过，则将所述第一货品信息发送给仓储管理系统。

2.一种货品拣选的方法，其特征在于，应用于数量监测运算系统，包括：

接收智能交互眼镜系统发送的第一货品信息，所述第一货品信息为在一次任务的作业过程中被操作货品的信息；

获取搬运设备的监测系统发送的第三货品信息，所述第三货品信息为在同一所述任务的作业过程中，所述搬运设备的容器中被操作货品的信息；

根据所述第三货品信息对所述第一货品信息进行验证，并将验证结果发送给智能交互眼镜系统。

3.一种货品拣选的方法，其特征在于，应用于搬运设备的货品监测系统，所述搬运设备包括用于容纳货品的容器，所述货品监测系统包括用于采集所述容器内货品图像的第二图像采集装置，所述方法包括：

接收任务信息；

在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第四货品信息；

向数量监测运算系统发送所述第四货品信息，所述第四货品信息用于对智能交互眼镜系统在作业人员根据所述任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

4.一种货品拣选的方法，其特征在于，应用于搬运设备的重量监测系统，所述搬运设备包括用于容纳货品的容器，所述重量监测系统包括用于检测所述容器中货品重量的重量检测装置，所述方法包括：

接收任务信息；

在作业人员根据所述任务信息进行作业的过程中，采集作业过程中搬运设备的容器中被操作货品的第五货品信息；

向数量监测运算系统发送所述第五货品信息，所述第五货品信息用于对智能交互眼镜系统在作业人员根据所述任务信息进行作业的过程中采集的被操作货品的第一货品信息进行验证。

5.一种货品拣选的方法，其特征在于，应用于仓储管理系统，包括：

发送任务信息，所述任务信息包括操作类型及第二货品信息；

接收第一货品信息，所述第一货品信息为在作业人员根据所述任务信息进行作业的过程中，智能交互眼镜系统采集的作业过程中被操作货品的第一货品信息；

根据所述第一货品信息和第二货品信息，确认任务是否完成，并更新货品库存信息。

6.一种货品拣选的装置，其特征在于，应用于智能交互眼镜系统，包括：

任务信息处理模块，用于接收并展示任务信息；

7.一种货品拣选的装置，其特征在于，应用于数量监测运算系统，包括：

8.一种货品拣选的设备，其特征在于，包括：

处理器，存储器，以及存储在所述存储器上并可在所述处理器上运行的计算机程序；

其中，所述处理器运行所述计算机程序时实现如权利要求1至5中任一项所述的方法。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的方法。

10.一种计算机程序产品，其特征在于，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1至5中任一项所述的方法。