CN105531715A - 检测物品交互和移动 - Google Patents

Abstract

本公开描述了用于追踪物料处置设施内的库存位置处的物品的移除或放入的系统。在一些情况下，用户可以将物品从库存位置移除，并且所述库存管理系统可以检测到所述移除并更新与所述用户相关联的用户物品清单以包括代表所移除物品的物品标识符。同样地，如果用户将物品放入库存位置处，那么所述库存管理系统可以检测到所述放入并更新所述用户物品清单以移除代表所放入物品的物品标识符。

Description

检测物品交互和移动

发明背景

零售商、批发商和其他产品经销商通常要存放可能被客户或顾客订购、购买、租赁、借用、租借、查看等等的各种物品的库存。例如，电子商务网站可以将库存存放在履行中心中。当顾客订购物品时，从库存中拣出物品、投递至打包站、打包并发货给顾客。同样地，实体商店将库存存放在顾客可接近的区域(例如购物区)中，并且顾客可以定位物品在商店内的位置、从库存中拣出物品并将它们拿到收银台以便购买、租借等。

那些实体商店中的许多还将库存存放在储存区或履行中心中，所述储存区或履行中心可以用以补充位于购物区中的库存和/或满足通过其它渠道(例如电子商务)发生的对物品的订购。存放库存的实体的其它实例包括图书馆、博物馆、租借中心以及类似者。在每一种情况下，用户(例如，拣件人、用户、顾客)必须首先确定物品的位置并取出物品以便使用和/或购买。

附图简述

参看附图来陈述详细描述。在图式中，参考数字的最左边的数表示所述参考数字第一次出现的图式。相同参考数字在不同图式中的使用指示类似或相同的物品或特征。

图1是示出了根据一些实现方式的物料处置设施的框图。

图2是示出了根据一些实现方式的物料处置设施的额外细节的框图。

图3示出了根据一些实现方式的用在图1所示的物料处置设施中的额外组件以及各组件类型之间的通信路径。

图4描绘了根据一些实现方式的用于追踪物品的交互和/或移动的示例过程的流程图。

图5描绘了根据一些实现方式的示例物体移除/放入子过程的流程图。

图6描绘了根据一些实现方式的用于识别所移除物体的示例子过程的流程图。

图7描绘了根据一些实现方式的用于识别所放入物体的示例子过程的流程图。

图8是可以用于各种实现方式的服务器系统(例如远程计算资源)的说明性实现方式的框图。

虽然在本文中举例描述了实现方式，但是本领域的技术人员将认识到所述实现方式不限于所描述的实例或图。应理解，图以及其详细描述不希望将实现方式限于所公开的特定形式，而正相反，希望涵盖属于如由所附权利要求书界定的精神和范围内的所有修改、等效物和替代。本文中使用的标题仅为了便于组织并且不打算用于限制说明书或权利要求书的范围。如贯穿本申请所使用，词语“可以”是以许可意义(即，表示具有可能)而不是强制意义(即，表示必须)来使用。类似地，词语“包括”、“包括了”和“包括有”表示包括但不限于。

具体实施方式

本公开描述了用于追踪和识别物品从物料处置设施内的库存位置的移除和/或到物料处置设施内的库存位置处的放入的系统。在一些情况下，用户可以从物料处置设施内的库存位置移除物品。在检测到移除后，识别所移除物品并将它与用户物品清单相关联，其中所述用户物品清单与移除所述物品的用户相关联。例如，如果用户是拣件代理，那么拣件代理可以具有相关联的用户物品清单，所述用户物品清单识别所述拣件代理将要从处于物料处置设施中的各种库存位置拣出的所有物品。当拣件代理拣出物品时，识别所述物品并更新所述用户物品清单以表明拣件代理已拣出所述物品。

同样地，如果用户将物品放入物料处置设施内的位置处，那么识别所述物品并更新与所述用户相关联的用户物品清单。例如，如果用户是收件代理，那么收件代理可以具有相关联的用户物品清单，所述用户物品清单识别所述收件代理将要收入到物料处置设施内的库存中的所有物品。当收件代理将物品放入库存位置中时，识别所述物品并更新所述用户物品清单以表明收件代理已收入所述物品。

在一些实现方式中，可以基于从各种输入装置接收到的数据来识别从物料处置设施内的库存位置移除和/或放入物料处置设施内的库存位置中的物品的身份。例如，图像采撷装置(例如相机)可以采撷在用户的手经过平面进入库存位置中之前所述手的一连串图像并且还采撷在它离开库存位置后所述用户的手的一连串图像。基于所述图像的比较，可以确定用户是否从库存位置移除物体或将物体放入库存位置中。例如，基于对图像的分析，可以确定用户在手经过平面进入库存位置时没有拿着物体，但是在手从库存位置移出时拿着物体(用户从库存位置移除物体)。同样地，可以使用图像分析来识别是否在手进入库存位置之前用户在他们的手上拿有物体但在手从库存位置移出时没有拿有物体(用户将物体放入库存位置中)。

在确定用户已从库存位置移除物体的实例中，可以确定哪些物品被囤积、储存或以其它方式与库存位置相关联，并且可以更新用户物品清单以识别用户已移除了与所述库存位置相关联的物品中的一者。通过了解储存在库存位置处的物品，通过处理所采撷图像来进行对所移除物品的实际识别是不必要的。进行简单且快速的处理以检测物体已被移除就足够了。然而，在一些实现方式中，可能会执行额外图像处理以在更新用户物品清单之前确认所移除物体对应于与库存位置相关联的物品。

在确定用户已将物体放入库存位置中的实例中，在将物体放入库存位置中之前，可以确定哪些物品与用户相关联。同样地，可以检索那些物品中的每一个的所存储表示并将它与所放入物体的图像进行比较以识别所放入物体。如果根据所存储表示与所放入物体的图像的比较而确定高的置信度得分，那么所放入物体可以被识别为所述物品，并且可以更新用户物品清单以表明用户已放入所述物品。还可以作出关于所放入物品是否与库存位置对应或要不然应该位于库存位置处的进一步确定。如果所放入物品应该处于所述库存位置处，那么可以更新所述库存位置处所述物品的存货数量。然而，如果所放入物品不应该放在所述库存位置处，那么可以派出关联方从所述库存位置取出所述物品。

通过检测在物料处置设施中用户对物品的移除和/或放入，可以在不需要用户进行物品的额外转移的情况下完成物品进入和离开物料处置设施的移动。例如，如果物料处置设施是零售店，那么用户可以从所述设施内拣出物品、将物品放入购物车、袋子、口袋或以其它方式拿着物品，并且自动地识别所述物品并将它们与用户相关联。当用户离开所述设施时，物品可以从所述设施转到用户手上并且用户对所述物品付费。这可以在用户不必经历收银员结账的额外步骤的情况下完成，所述收银员识别并扫描每一物品并且用户向收银员支付物品的费用。

如本文中所使用，物料处置设施可以包括但不限于仓库、配送中心、交叉配货设施、订单履行设施、包装设施、发货设施、租借设施、图书馆、零售店、批发商店、博物馆、或用于执行物料(库存)处置的一个或多个功能的其它设施或设施组合。

被配置以储存和管理库存物品的物料处置设施的实现方式示出于图1中。如所示，物料处置设施100包括收货区120、被配置以储存任意数目的库存物品135A-135N的储存区130、和一个或多个转移区140。按照功能而非按照图式来描绘了各种区在物料处置设施100内的布置。例如，在一些实现方式中，多个不同的收货区120、储存区130和转移区140可以是穿插的而不是分开的。另外，物料处置设施100包括库存管理系统150，所述库存管理系统被配置以与收货区120、储存区130、转移区140和/或物料处置设施100内的用户中的每一个交互。

物料处置设施100可以被配置以从各种供应商接收不同种类的库存物品135并将它们储存起来，直到用户订购或取出所述物品中的一者或多者为止。使用箭头来指示物品通过物料处置设施100的一般流程。具体地说，如此实例中所示，可以在收货区120处从一个或多个供应商(例如制造商、经销商、批发商等)接收物品135。在各种实现方式中，物品135可以包括小商品、商品、易腐物品或任何合适类型的物品，这取决于运营物料处置设施100的企业的性质。

在在收货区120处从供应商接收到后，物品135可以准备好进行储存。例如，在一些实现方式中，可以对物品135拆包或以其它方式进行重新布置，并且可以更新库存管理系统150(如下文所描述，所述库存管理系统可以包括在计算机系统上执行的一个或多个软件应用程序)以反映关于新收到的物品135的类型、数量、状况、成本、位置或任何其它合适参数。应指出，物品135可以按照可计算的、单独单元或多倍单元(例如，包裹、纸板盒、板条箱、托盘或其它合适聚集体)来囤积、管理或配给。或者，一些物品135(例如散装产品、商品等等)可以按连续的或可任意分割的量来储存，所述量可能不是固有地组织成可计算的单元。此类物品135可以按照可测量的数量(例如，多个单位的长度、面积、体积、重量、持续时间或通过测量单位表征的其它维度特性)来进行管理。一般来说，视情况地，物品135的数量可以指代物品135的单独或聚集单元的可计算数目或物品135的可测量的量。

在通过收货区120到达后，物品135可以储存在储存区130内。在一些实现方式中，相同的物品135可以一起储存或陈列在箱子中、在货架上或经由其它合适的储存机制进行储存或陈列，使得给定种类的所有物品135储存在储存区130内的一个库存位置中。在其它实现方式中，相同的物品135可以储存在不同的位置中。例如，为了优化在大的实体设施内对具有高营业额的某些物品135的取出，可以将那些物品135储存在几个不同的库存位置中以减少在单个储存点处可能会发生的拥堵。一般来说，库存管理系统150可以保存识别每一物品储存在物料处置设施内何处的地图或位置信息。每一库存物品可以与它所储存在的对应库存位置相关联，并且所述关联可以保存在可由库存管理系统150存取的库存数据存储装置815(图8)中。

当接收到指明物品135中的一者或多者的顾客订单时，或在用户前进通过物料处置设施100时，可以从储存区130内的库存位置选择或“拣出”对应物品135。例如，在一个实现方式中，用户可能有一系列物品要拣出并且可以前进通过物料处置设施，从储存区130内的库存位置拣出物品135。在其它实现方式中，物料处置设施的雇员可以使用从顾客订单得到的手写或电子拣件清单来从储存区130内的库存位置拣出物品135。

如下文更详细地论述，可以采撷用户的一个或多个图像。例如，当用户到达库存位置并将他们的手递到储存区130内的库存位置中时，可以在用户的手递到库存位置中之前采撷它的一个或多个图像。此外，当用户的手从库存位置移出时，可以在用户的手离开库存位置时采撷它的一个或多个图像。可以对那些图像进行比较以确定用户是否已从库存位置移除物体或将物体放入库存位置中。在一些实现方式中，可以执行简单的图像分析以确定图像之间的变化。例如，可以对第一图像执行图像分析以确定用户的手的肤色和包括所述颜色的像素，或者可以识别与所识别出的肤色类似的一系列颜色以表示用户的手。利用所述肤色，可以处理在用户的手从库存位置移出后获得的用户的手的图像以再次识别用户的手。最后，可以对表示用户的手和用户的手周围的区域的图像的区段的比较进行比较以确定图像之间的变化以识别物体是否已移出或放入库存位置中。在另一实例中，可以对两个图像执行物体辨识以识别不同的物体。例如，在用户的手进入库存位置之前采撷的图像可以仅包括呈手的形状的物体。相比之下，在用户的手从库存位置移出之后采撷的图像可以包括呈用户的手的形状的物体加上额外物体(即，物品)。将了解，可以使用任何图像分析和/或比较技术来确定用户是否已将物体放入库存位置处和/或从库存位置移除物体。

图2示出了根据一些实现方式的物料处置设施200的额外组件。一般来说，物料处置设施200可以包括一个或多个图像采撷装置，例如相机208。例如，一个或多个相机208可以位于物料处置设施200的多个位置中，使得可以采撷物料处置设施内的位置的图像。在一些实现方式中，图像采撷装置208可以位于头顶上，例如在天花板上以采撷用户和/或物料处置设施内的位置的图像。另外，在一些实现方式中，一个或多个相机208可以位于库存位置上或内部。例如，一连串相机208可以位于库存位置的外部部分上并且被定位成采撷用户和/或库存位置周围的位置的图像。同样地，一个或多个相机208可以位于库存位置内以采撷储存在库存位置中的物品的图像和/或移入和/或移出库存位置的物体(例如用户的手、物品)的图像。

任何类型的相机和/或相机配置可以用于本文所描述的实现方式。例如，所述相机中的一者或多者可以是RGB相机。在其它实现方式中，所述相机中的一者或多者可以是深度感测相机。

除了相机之外，其它输入装置，例如压力传感器、红外线传感器、秤、体积置换传感器、光幕等，也可以用于本文所描述的实现方式。例如，压力传感器和/或秤可以用于检测何时增添物体和/或从库存位置移除物体。同样地，红外线传感器可以用于辨别用户的手与库存物品。

在一些实现方式中，位于物料处置设施200中的用户204可能拥有便携式装置205并且经由便携式装置获得关于位于物料处置设施200内的物品207的信息。一般来说，便携式装置205具有至少无线模块以方便与库存管理系统150和显示器(例如基于触摸的显示器)通信以方便对用户204的可视呈现和与用户204的交互。便携式装置205可以存储唯一标识符并将所述唯一标识符提供给库存管理系统150。在一些情况下，便携式装置还可以具有其它特征，例如音频输入/输出(例如，扬声器、麦克风)、视频输入/输出(相机、投影仪)、触觉装置(例如，键盘、小键盘、触摸屏、操纵杆、控制按钮)和/或其它组件。

在一些情况下，便携式装置205可以结合库存管理系统150的一个或多个组件来操作或者可以以其它方式利用库存管理系统150的一个或多个组件或与库存管理系统150的一个或多个组件通信。同样地，库存管理系统150的组件可以与便携式装置205交互和通信以及识别用户、经由其它手段与用户通信和/或与库存管理系统150的其它组件通信。

库存管理系统150还可以包括其它输入/输出装置，例如投影仪210、显示器212、扬声器213、麦克风214等，以方便库存管理系统150与用户204之间的通信。在一些实现方式中，多个输入/输出装置可以分布在物料处置设施内。同样地，库存管理系统150还可以包括一个或多个通信装置，例如方便库存管理系统150与便携式装置205之间的无线通信(例如，Wi-Fi、近场通信(NFC)、蓝牙)的无线天线216。库存管理系统150还可以包括一个或多个计算资源203，所述计算资源可以是在环境(例如，物料处置设施)本地、远离所述环境、或其任何组合。

库存管理系统150可以利用物料处置设施内的天线216来建立局域无线网络202(例如Wi-Fi)，使得便携式装置205可以连接至库存管理系统150并与库存管理系统150通信。同样地，在当库存管理系统150的一个或多个组件远离物料处置设施时的情况下，它们可以经由网络202与库存管理系统150的其它组件和/或便携式装置205通信。

以下是确定用户已从物料处置设施内的库存位置移除物品的示例用例。在进入物料处置设施后，库存管理系统150可以识别用户(例如，脸部辨识、用户ID购物车、用户提供的信息)。在识别用户后，可以从数据存储装置检索信息(例如，物品检索历史、查看历史、购买历史)。同样地，用户可以将从数据存储装置检索出的、识别将从物料处置设施取出的物品的相关联的拣件清单(用户物品清单)提供给库存管理系统150和/或具有所述相关联的拣件清单。

在一些实现方式中，在用户前进通过物料处置设施200时，成像装置208可以获得/采撷用户204的一个或多个图像并将图像提供至计算资源203以进行处理。例如，可以采撷就在用户的手经过平面进入库存位置中之前用户的手的图像和就在用户的手从库存位置移出之后用户的手的图像并且将所述图像提供给计算资源203。计算资源203可以处理所述图像以确定物体是否已移出或放入库存位置。如果确定已从库存位置移除物体，那么库存管理系统可以获得储存在所述库存位置处的库存物品的识别并且将所述库存物品的物品标识符包括在与用户相关联的用户物品清单中以确定用户已从库存位置移除(拣出)物品。同样地，所述库存物品在所述库存位置处的库存数量可以减少以反映所述物品已从库存位置移除。

在另一实例中，如果库存管理系统150不能识别用户从库存位置移除的物体，那么库存管理系统150可以利用关于用户的其它信息(例如，过去的购买历史、目前拣出的物品)来帮助识别所述物体。例如，如果库存管理系统不能确定所移除的物体是一瓶番茄酱还是一瓶芥末，那么库存管理系统可以考虑过去的购买历史和/或用户已经从库存位置移除了哪些物品。例如，如果用户历史上仅拣出/购买番茄酱，那么所述信息可以用于确认用户很可能是从库存位置移除了番茄酱。

在一些实现方式中，可以使用来自其它输入装置的数据来帮助确定移出和/或放入库存位置中的物体的身份。例如，如果确定将物体放入库存位置中，那么除了图像分析之外，还可以基于从位于库存位置处的秤或压力传感器接收到的数据来确定所述物体的重量。图像分析可以能够将可能匹配的物品的清单缩减到小清单。可以将所放入物体的重量与可能匹配的物品中的每一个的所存储的重量进行比较以识别实际上放入库存位置中的物品。通过将多个输入结合，可以产生较高置信度得分，从而增加所识别出的物品与实际上从库存位置移除的物品匹配的可能性。

如果将来自库存管理系统150的信息呈现给用户，那么可以经由便携式装置205和/或位于物料处置设施内的其它输出装置来呈现此类信息。可以使用便携式装置来向用户确定对从库存位置移除的物品的确认和/或请求用户识别移出/放入库存位置中的库存物品。例如，如果确认了所移除库存物品的身份但库存管理系统150不能以高精确度确定所移除的库存物品的数目，那么库存管理系统可以经由便携式装置205将此类信息提供给用户。例如，便携式装置可以识别到用户已从库存位置移除/拣出物品A。用户可以接着经由控制224确认是否将所述物品添加至用户物品清单和/或将多少那些物品添加至用户物品清单。还可以向用户呈现与物品有关的其它信息和/或选项。

图3示出了根据一些实现方式的用在图1所示的库存管理系统150中的额外组件以及各组件类型之间的通信路径。如上文所论述，便携式装置305可以通过各种通信路径与库存管理系统150的各种组件通信和交互。一般来说，库存管理系统150可以包括输入组件311、输出组件301和计算资源203。输入组件311可以包括显示器308、麦克风314、天线316、传感器(未图示)、秤(未图示)、光幕(未图示)、体积置换传感器(未图示)或能够从便携式装置的用户和/或从便携式装置接收关于其周围环境的输入的任何其它组件。输出组件301可以包括投影仪310、便携式装置306、显示器308、天线316、无线电(未图示)、扬声器313和/或能够提供输出的任何其它组件。

库存管理系统150还可以包括计算资源203。计算资源203可以是在环境(例如，物料处置设施)本地、远离所述环境、或其任何组合。同样地，计算资源203可以被配置以通过网络302与输入组件311、输出组件301和/或直接地与便携式装置305和/或用户304通信。

如所示，计算资源203可以远离所述环境并实现为一个或多个服务器203(1)，203(2)，...，203(P)并且在一些情况下可以形成网络可接入计算平台的一部分，所述平台实现为经由网络302(例如因特网)通过库存管理系统150的组件/装置维护并且可存取的处理器、存储装置、软件、数据存取等等的计算基础设施。例如，计算资源203可以处理图像以确定物体是否已从库存位置移除或放入库存位置中。计算资源203不需要终端用户知道提供所述服务的系统的物理位置和配置。用于这些远程计算资源203的相关联的一般表达包括“按需计算”、“软件即服务(SaaS)”、“平台计算”、“网络可接入平台”、“云服务”、“数据中心”等等。

服务器203(1)-(P)中的每一个包括处理器317和存储器319，所述存储器可以存储或以其它方式能够接近库存管理系统150，所述库存管理系统可以包括或提供图像处理(例如，用于用户识别、表情识别和/或物品识别)、库存追踪和/或位置确定。

网络302可以利用有线技术(例如，导线、USB、光缆等)、无线技术(例如，RF、IR、NFC、蜂窝、人造卫星、蓝牙等)或其它连接技术。网络302代表任何类型的通信网络(包括数据和/或语音网络)，并且可以使用有线基础设施(例如，缆线、CAT5、光缆等)、无线基础设施(例如，RF、蜂窝、微波、人造卫星、蓝牙等)和/或其它连接技术来实现。

图4描绘了根据一些实现方式的用于追踪物品的交互和/或移动的示例过程400的流程图。图4所示的过程以及本文所论述的其它过程中的每一个可以用硬件、软件或其组合来实现。在软件的情形中，所描述的操作表示存储在一个或多个计算机可读媒介上的计算机可执行指令，所述指令在由一个或多个处理器执行时执行所述操作。一般来说，计算机可执行指令包括执行特定功能或实现特定抽象数据类型的例程、程序、对象、组件、数据结构和类似者。

计算机可读媒介可以包括非暂时性计算机可读存储媒介，所述非暂时性计算机可读存储媒介可以包括硬盘驱动器、软盘、光盘、CD-ROM、DVD、只读存储器(ROM)、随机存取存储器(RAM)、EPROM、EEPROM、快闪存储器、磁卡或光卡、固态存储装置或适合于存储电子指令的其它类型的存储媒介。另外，在一些实现方式中，计算机可读媒介可以包括暂时性计算机可读信号(呈压缩或未压缩形式)。计算机可读信号的实例(无论是否使用载波进行调制)包括但不限于托管或运行计算机程序的计算机系统可以被配置以存取的信号，包括通过因特网或其它网络下载的信号。最后，操作被描述的次序不希望被理解为限制，而是任何数目的所描述操作可以以任何次序和/或同时地组合以实现所述过程。

如在402中，示例过程400通过识别用户开始。可以使用各种技术来识别用户。例如，可以使用图像采撷和脸部辨识。在另一实例中，用户可以用个人标识符(例如徽章)、RFID卡等来识别自身。在一些实现方式中，用户具有在用户进入物料处置设施时可以被检测到的便携式装置。所述便携式装置可以包括提供给库存管理系统150并用以识别用户的唯一标识符。

除了识别用户之外，如在404中，还可以确定物料处置设施内的用户位置和用户位置内的库存位置的识别。在一些实现方式中，可以使用位于物料处置设施内的成像装置来在物料处置设施内采撷图像，所述图像由计算资源203处理以识别用户的位置。同样地，麦克风可以记录由用户产生的声音，并且计算资源可以处理那些声音以确定用户的位置。例如，基于对麦克风在物料处置设施内的位置的了解，可以计算每一麦克风接收到的音频信号之间的时间偏移以确定用户的位置。

为了识别由各个麦克风接收到的信号之间的时间偏移，在一些情况下，计算资源203对由相应音频转换器接收到的每一音频信号进行编译并且接着(例如)通过使用任何到达时间差(“TDOA”)技术或任何其它合适的技术来确定所述信号之间的时间偏移。在识别了相应时间偏移之后，计算资源203可以确定音频的方向和/或源位置。

除了视觉和/或音频位置确定之外，或作为视觉和/或音频位置确定的替代，库存管理系统150还可以利用其它技术，例如天线116之间的三角测量，来确定在用户移动通过物料处置设施时用户的位置。在其它实例中，如果用户携带着包括全球定位系统(GPS)芯片的便携式装置，那么库存管理系统可以被配置以接收GPS信息并确定便携式装置的位置以及因此确定用户的位置。

如在子过程500中，示例过程还可以检测物体是否从库存位置移出或放入库存位置中。在下文就图5来更详细地论述用于确定物体是否已从库存位置移出或放入库存位置中的子过程500。如下文所论述，在一些实现方式中，可以确定已将物体添加至库存位置与已从库存位置移除物体。例如，用户可以将一物体放入库存位置中并且在同一动作期间将另一物体从库存位置移除。

基于来自示例子过程500的响应，如在406中，作出关于是否从库存位置移除了物体的确定。如果确定从库存位置移除了物体，那么如在600中，执行用于识别所移除物体的身份的子过程600。在下文就图6来进一步论述用于确定从库存位置移除的物体的身份的示例子过程600。在用于确定所移除物体的身份的子过程600完成之后，如在408中，示例过程400将代表物品的物品标识符添加至用户物品清单。

返回至决策框406，如果确定没有从库存位置移除物体，那么如在407中，作出关于是否将物体放入了库存位置中的确定。如果确定将物体放入了库存位置中，那么如在子过程700中，确定所述物体的身份。在下文就图7来进一步论述用于确定放入库存位置中的物体的身份的示例子过程700。

在确定了放入库存位置中的物体的身份后，如在410中，从用户物品清单移除代表所述物品的物品标识符。可以从用户物品清单移除所述物品标识符，因为用户已将所述物品从他们的手提包、购物车、袋子等等移除并且将它放回到库存位置中。

返回决策框407，如果确定没有将物体放入库存位置中(即，物品既没有从库存位置移出也没有放入库存位置中)，那么如在412中，示例过程400完成。

虽然以上实例描述了将物品放入库存位置或从库存位置移除的过程是连续地执行，但是在其它实现方式中，可以同时执行框406、407、408、410和子过程600、700。例如，如果示例子过程500确定用户已将物体放入库存位置中与将物体从库存位置移除，那么可以同时执行以下子过程600、700。

图5描绘了根据一些实现方式的示例物体移除/放入子过程500的流程图。如在502中，示例子过程500通过检测物体(例如接近表示库存位置的面或前缘的垂直平面的用户的手)来开始。可以基于包括库存位置的位置的所采撷图像的图像处理来检测此物体。在其它实例中，物体可以穿透光幕或其它在场检测装置。在检测到物体接近库存位置后并且在物体经过所述平面进入库存位置之前，如在504中，采撷包括所述物体的一个或多个图像。随后，并且在从库存位置移除物体之后，如在506中，采撷包括所述物体的一个或多个图像。在一些实现方式中，在物体进入库存位置之前和/或在物体从库存位置移除之后所述物体的一个或多个图像可以是组成视频的一连串图像。

如在508中，接着对在物体进入库存位置之前采撷的图像与在物体从库存位置移除之后采撷的图像进行比较。例如，可以对所述图像执行像素类似度以确定类似内容。例如，如果所述物体是用户的手，那么可以识别与通常与肤色相关联的调色板匹配的类似颜色的像素并且确定所述像素表示用户的手。通过对在物体进入库存位置之前采撷的图像与在将物体从库存位置移除之后采撷的图像执行此像素分析，可以在每一图像中识别出相同物体(在此实例中是用户的手)。基于此信息，可以在所述图像之间比较周围的像素以确定在用户的手进入库存位置中时用户的手中是否包括物体和/或在用户的手从库存位置移出时用户的手中是否包括物体。

例如，可以检测在用户的手进入库存位置之前采撷的图像中包括的类似颜色和形状的像素并且确定所述像素表示物体。如果在在用户将他们的手从库存位置移出之后采撷的图像中没有识别到那些类似的像素形状和/或颜色，那么可以确定用户已将物体放入库存位置中。

同样地，如果在在用户的手放入库存位置中之前采撷的图像中仅识别到用户的手并且在在用户将他们的手从库存位置移出时采撷的图像中识别到表示不同形状的像素，那么可以确定用户已从库存位置移除物体。

返回框502，在一些实现方式中，可以执行采撷图像的一个或多个过程以提供更多信息来用于确定物体是否已从库存位置移除或放入库存位置中。例如，如在510中，示例子过程还可以利用位于库存位置内的一个或多个相机来在物体进入库存位置之前采撷储存在库存位置处的库存的一个或多个图像。例如，可以周期性地采撷储存在库存位置中的库存的图像并且将所述图像存储在可通过库存管理系统150存取的库存数据存储装置中。

在物体(例如，用户的手)已移入和移出库存位置之后，如在512中，可以采撷库存位置的一个或多个图像。如在514中，可以对表示在物体进入库存位置之前储存在库存位置中的库存的图像与表示在物体从库存位置移除之后储存在库存位置中的库存的图像进行比较以确定物体是否已添加至库存位置或从库存位置移除。

在一些实现方式中，因为库存物品在储存于储存位置中时一般是固定的，因此可以执行来自固定位置的相机的简单图像比较以确定图像之间的变化以及因此确定一个或多个物体是否已从库存位置移除和/或一个或多个物体是否已添加至库存位置。这在难以基于移入和移出库存位置的物体的图像确定多少物体移出和/或放入库存位置中时可能是特别有用的。例如，如果库存包括多袋薯片并且用户通过一起抓住袋子的顶部来移除多袋薯片，那么可能难以从在库存位置外部采撷的图像确定移除了多少袋。然而，因为袋子在储存在库存位置中时是固定的，所以可以通过采撷库存位置的一个或多个图像、处理那些图像以识别物体的形状以及将形状的数目与位于所述库存位置处的库存的数量进行比较来确定储存在库存位置中的袋子的数量。接着可以将每一形状与库存的物品相关联。同样地，还可以利用额外信息，例如用于库存物品的所存储的尺寸值，来帮助确定位于库存位置中的物品的数目。以类似方式，可以采撷并处理在库存物品已移除之后采撷的图像以识别那些图像中包括的物体的数目。通过对在图像中识别出的物品的之前和之后的数量计数进行比较，可以确定从库存位置移除了多少物品。

虽然示例子过程500示出了图像采撷和比较步骤504-508是与图像采撷和比较步骤510-514同时执行的，但是在其它实现方式中，可以仅执行所述步骤序列中的一者。在其它实现方式中，可以连续地执行所述多组步骤。

利用图像的比较，可以作出关于一个或多个物体是否从库存位置移除(如在516中)和/或放入库存位置中(如在517中)的确定。如果确定一个或多个物体从库存位置移除，那么所述示例子过程返回物体已从库存位置移除的指示。如果确定物体没有从库存位置移除，那么如在517中，作出关于一个或多个物体是否已放入库存位置中的确定。如果确定一个或多个物体已放入库存位置中，那么如在520中，示例子过程500返回物体已放入库存位置中的指示。如上文所指出，可以确定一物体已放入库存位置中而另一物体已从库存位置移除。在此类情况下，框518和520可以完成，并且可以返回关于两个事件的信息。

最后，如果确定物体没有放入库存位置中(即，物体没有从库存位置移除或放入库存位置中)，那么如在522中，示例子过程500返回库存位置没有变化的指示。

图6描绘了根据一些实现方式的用于识别所移除物体的示例子过程600的流程图。如在602中，示例子过程600通过识别与所移除物体的库存位置相关联的物品库存来开始。如上文所论述，库存管理系统可以存储用于每一库存位置的库存信息，从而识别储存于每一库存位置处的库存物品和库存物品的数量。除了识别与库存位置相关联的库存之外，在一些实现方式中，可以处理在步骤504-506、510-512(图5)中采撷的图像中的一者或多者以识别已从库存移除的物体，以确认与库存位置相关联的库存物品与在所述图像中识别出的库存(物体)对应。例如，在一些实现方式中，可以执行图像处理以识别图像中包括的物体和/或识别所述物体的特征。可以将此类信息与关于库存物品的所存储信息进行比较以确认物体的所采撷图像是否与和库存位置相关联的库存物品的信息对应。

在一些实现方式中，如在606中，还可以考虑其它输入来确定从库存位置移除的物体的身份。例如，在一些实现方式中，可以接收压力传感器和/或重量传感器的变化并且将所述变化与位于库存位置处的库存物品的所存储重量进行比较。

基于用于确定从库存位置移除的物体的身份的信息，可以确定识别所识别物品有多大可能与实际上从库存位置移除的物体对应的置信度得分。如在608中，接着可以作出关于所述置信度得分是否超过移除阈值的确定。移除阈值可以是在确定所识别出的物品与实际上从库存位置移除的物体对应之前被超过的任何经界定的数字。

如果确定所述置信度得分超过移除阈值，那么如在610中，可以向用户提供识别出用户已从库存位置移除的物品的通知。如上文所论述，所述通知可以呈现在位于库存位置上或附近的显示器上、呈现在用户拥有的便携式装置上、投影至用户附近的表面上等等。同样地，如在612中，示例子过程600还返回从库存位置移除的物体的识别。

然而，如果确定置信度得分不超过移除阈值，那么如在614中，可以向用户提出用户确认所移除物体的身份的请求。例如，示例子过程600可以向用户呈现(例如，经由显示器、便携式装置、投影、可听的)它认为被移除的物品并且请求用户确认实际移除的物品的身份。同样地，如果示例子过程600不能够确定从库存位置移除的物品的数目，那么可以提出要求用户确认从库存位置移除的物品的数目的请求。在一些实现方式中，如果所建议的物品不对应于实际移除的物品，那么用户可以与库存管理系统交互以识别实际移除的物品和/或所移除物品的数量。

在一些实现方式中，除了向用户呈现物品之外，或替代向用户呈现物品，还可以将所采撷图像提供给关联方，所述关联方查看图像以识别所放入和/或移除的物体。如果关联方可以确定所述物体的身份，那么如在612中，可以不向用户发送请求并且改为可以返回所识别物体的物品标识符。

在向用户提出请求之后，如在616中，可以作出关于用户是否提供所请求的确认的确定。如果确定用户已提供了确认，那么示例子过程前进至框612并且如上文所论述般继续。然而，如果用户不提供确认，那么如在618中，示例子过程600可以返回查账通知，向库存管理系统指示在库存在物料处置设施内或从物料处置设施转移之前需要对用户进行查验。在一些实现方式中，所述查验通知可以导致派出关联方向用户确认从库存位置移除的物体的身份。在其它实例中，查验通知可以通过库存管理系统来保存，并且在用户进入转移区时，可以向关联方通知需要对用户拥有的物品进行查验。

图7描绘了根据一些实现方式的用于识别所放入物体的示例子过程700的流程图。如在702中，示例子过程700通过识别在与用户相关联的用户物品清单中识别出的物品来开始。如上文所论述，用户物品清单识别用户在处于物料处置设施内时已从库存位置移除的物品。另外，可以进一步处理在框504-506、510-512(图5)处采撷的图像以检测放入库存位置中的物品的标识符。例如，可以处理所述图像以检测物体的大小或形状、物体的颜色、所述物体的特征或其它识别信息等等。接着可以将所检测到的信息与用户物品清单中包括的物品中的每一个的所存储信息进行比较以确定用户可能已放入库存位置中的物品。例如，如果用户物品清单识别出一瓶番茄酱、一袋薯片、一加仑牛奶、螺丝起子和瓶装苏打，那么可以检索那些物品中的每一个的所存储信息并且使用所述信息与从所处理的图像检测到的信息进行比较以确定在用户物品清单中识别出的哪个物品放入库存位置中。

除了比较从所采撷图像中确定的信息之外，如在706中，示例子过程还可以结合其它输入来确定物体的身份。继续上述实例，库存位置可以包括秤，并且可以确定放入库存位置中的物体的重量。接着可以将所确定的重量与用户物品清单中包括的每一物品的所存储重量进行比较以识别可能与放入库存位置中的物体对应的那些物品。作为另一实例，库存位置可以包括压力传感器，所述压力传感器可以在物体置于压力传感器上时检测所述物体的底部的形状或尺寸。可以将所述物体的底部的形状与用户物品清单上的每一物品的所存储的尺寸信息进行比较。

基于关于放入库存位置中的物体的所收集的信息，可以确定表示所识别出的物品表示实际放入库存位置中的物体的可能性的置信度得分。如在708中，接着可以作出关于所述置信度得分是否超过所放入物品阈值的确定。与所移除物品阈值类似，所放入物品阈值可以是任何经界定的得分或值。

如果确定所述置信度得分超过所放入物品阈值，那么如在710中，向用户提供识别出用户放入库存位置中的物品的通知。然而，如果所述置信度得分不超过所放入物品阈值，那么可以提出要求用户确认放入库存位置中的物体的身份的请求。例如，示例子过程700可以向用户呈现它认为可能已放入库存位置中的物品的标识符。同样地，示例子过程700可以请求用户识别放入库存位置中的物品的数量。

如在714中，接着可以作出关于是否从用户接收到确认的确定。如果确定接收到确认，或在向用户提供物品放入库存位置中的通知之后，那么如在716中，作出关于所识别出的物品是否在恰当库存位置中的确定。如上文所论述，库存管理系统150可以将库存存放在物料处置设施内的特定库存位置中。如果将物品放入通常不储存所述库存物品的库存位置中，那么可以确定所放入物品不在恰当的库存位置中。在其它实现方式中，可以将库存放在任何库存位置中。在此类表示中，可以不考虑决策框716。

如果确定所识别出的物品不在恰当的库存位置中，或如果确定用户没有确认放入库存位置中的物体的身份，那么如在718中，可以派出关联方到库存位置去取出和/或识别所放入物体。在一些实现方式中，所述关联方可以是人。在其它实现方式中，所述关联方可以是被配置以管理和/或处置库存的自动驱动单元和/或机器人。

如果确定所放入物品处于恰当的库存位置中和/或在派出关联方去取出所述库存物品后，示例子过程700可以返回所放入库存物品的识别。在所述示例子过程不能够识别放入库存位置中的物体使得置信度得分超过所放入物品阈值并且用户没有提供对物体身份的确认的情况下，可以将框720推迟至所派出的关联方已识别所放入物品之后。

图8是可以用于本文所描述的实现方式中的服务器系统(例如远程计算资源203)的说明性实现方式的示意图。远程计算资源203可以包括处理器800(例如一个或多个冗余处理器)、视频显示适配器802、磁盘驱动器804、输入/输出接口806、网络接口808和存储器812。处理器800、视频显示适配器802、磁盘驱动器804、输入/输出接口806、网络接口808和存储器812可以通过通信总线810彼此通信地耦接。

视频显示适配器802将显示信号提供给本地显示器(图8中未示出)，从而准许服务器系统203的操作员监视并配置服务器系统203的操作。输入/输出接口806同样地与图8中未示出的外部输入/输出装置通信，例如鼠标、键盘、扫描仪或可以由远程计算资源203的操作员操作的其它输入和输出装置。网络接口808包括硬件、软件或其任何组合，以与其它计算装置通信。例如，网络接口808可以被配置以如图2中所示经由网络202在服务器系统203与其它计算装置之间提供通信。

存储器812一般包括随机存取存储器(RAM)、只读存储器(ROM)、快闪存储器和/或其它易失性或永久性存储器。存储器812如图所示存储用于控制服务器系统203的操作的操作系统814。用于控制服务器系统203的低级操作的二元输入/输出系统(BIOS)816也存储于存储器812中。

存储器812另外存储用于提供允许库存管理系统150追踪从库存位置移除和/或放入库存位置中的物品的网络服务的程序代码和数据。因此，存储器812可以存储浏览器应用程序818。浏览器应用程序818包括在由处理器800执行时产生或以其它方式获得可配置标记文件(例如网页)的计算机可执行指令。浏览器应用程序818与数据存储管理应用程序820通信以方便库存数据存储装置815、用户数据存储装置817和/或用户物品清单数据存储装置819之间的数据交换。

如本文所使用，术语“数据存储装置”指代能够存储、存取和检索数据的任何装置或装置组合，数据存储装置可以包括在任何标准、分布式或集群环境中的任何组合和数目的数据服务器、数据库、数据存储装置和数据存储媒介。远程计算资源203可以包括用于在需要时与数据存储装置815、817、819集成以执行库存管理系统150的各方面的任何适当的硬件和软件。

数据存储装置815、817、819可以包括用于存储与特定方面有关的数据的若干单独的数据表、数据库或其它数据存储机制和媒介。例如，所示的数据存储装置815、817、819包括用于库存信息、用户信息等的机制，所述信息可以用以识别从库存位置移除和/或放入库存位置中的物品。

应理解，可能存在可以存储在数据存储装置815、817、819中的许多其它方面。数据存储装置815、817、819可操作以通过与之相关联的逻辑来从远程计算资源203接收指令以及响应于所述指令而获取、更新或以其它方式处理数据。

存储器812还可以包括上文论述的库存管理系统150。库存管理系统150可以是可由处理器800执行的，以实现远程计算资源203的功能中的一者或多者。在一个实现方式中，库存管理系统150可以表示用存储于存储器812中的一个或多个软件程序来具现化的指令。在另一实现方式中，库存管理系统150可以表示硬件、软件指令或其组合。

在一个实现方式中，远程计算资源203是利用若干计算机系统和组件的分布式环境，所述系统和组件使用一个或多个计算机网络或直接连接来经由通信链路互连。然而，本领域的普通技术人员将了解，此类系统同样可以很好地在具有比图8中所示的组件的数目少或多的组件的系统中工作。因此，图8中的图示应被视为本质上是说明性的而非限制本公开的范围。

虽然已用结构性特征和/或方法动作特定的语言来描述了标的，但是应理解，在所附权利要求书中界定的标的不一定限于所描述的特定特征或动作。而是，所述特定特征和动作是作为实现所述技术方案的示例形式来公开。

条款

1.一种计算系统，其包括：

一个或多个处理器；以及

存储器，所述存储器耦接至所述一个或多个处理器并且存储程序指令，所述程序指令在由所述一个或多个处理器执行时促使所述一个或多个处理器：

确定用户在物料处置设施内的位置，其中所述位置是在库存位置附近；

接收用户的手的至少一部分的第一图像，其中所述用户的手的所述第一图像是在所述用户的手移入所述库存位置中之前采撷的；

接收所述用户的手的至少一部分的第二图像，其中所述第二图像是在所述用户的手从所述库存位置移出之后采撷的；

至少至少部分基于所述第一图像和所述第二图像的比较来确定所述第二图像包括拿在所述用户的手中的物体的表示；

响应于确定所述第二图像包括拿在所述用户的手中的物体的表示，识别与所述库存位置相关联的库存物品；

确定所述物体与所述库存物品对应；以及

将代表所述物品的物品标识符添加至用户物品清单，其中所述用户物品清单与所述用户相关联。

2.如条款1所述的计算系统，其中在由所述一个或多个处理器执行时促使所述一个或多个处理器将所述第一图像与所述第二图像进行比较的所述程序指令还包括在由所述一个或多个处理器执行时促使所述一个或多个处理器进行以下操作的程序指令：

在所述第一图像或所述第二图像中的至少一个中至少部分基于肤色来识别所述用户的手的至少一部分；以及

在所述第二图像中识别如被所述用户的手拿着并且具有与所述用户的手的肤色不同的颜色的所述物体的至少一部分。

3.如条款1所述的计算系统，其中在由所述一个或多个处理器执行时促使所述一个或多个处理器将所述第一图像与所述第二图像进行比较的所述程序指令还包括促使所述一个或多个处理器识别所述第一图像和所述第二图像中包括的物体的差异的程序指令。

4.如条款1所述的计算系统，其中与所述库存位置相关联的所述库存物品基于所述库存物品在所述库存位置处的之前放入而被所述计算系统所知。

5.如条款1所述的计算系统，所述指令在由所述处理器执行时还促使所述处理器：

接收包括在所述用户的手移入所述库存位置中之前的所述库存位置的表示的第三图像；

接收包括在所述用户的手从所述库存位置移出之后的所述库存位置的表示的第四图像；以及

其中用以确定所述用户正拿着所述物体的所述指令还包括用以至少部分基于所述第三图像和所述第四图像的比较来确定所述用户正拿着所述物体以识别已从所述库存位置移除物体的指令。

6.如条款1所述的计算系统，其中所述物体与所述库存物品对应的所述确定包括考虑从位于所述库存位置处的秤接收到的所述物品的重量、从所述库存位置处的压力传感器接收到的所述物体的至少一部分的形状或从所述第二图像中识别出的所述物体的特征中的至少一个。

7.如条款1所述的计算系统，所述指令在由所述处理器执行时还促使所述处理器：

接收来自位于所述库存位置处的输入装置的输入，来自所述输入装置的所述输入表明已从所述库存位置移除所述物体；以及

其中所述输入装置是压力传感器、相机、红外线传感器、秤、体积置换传感器或光幕中的至少一个。

8.一种用于向物料处置设施内的用户提供帮助的计算机实现的方法，其包括：

在被配置有可执行指令的一个或多个计算系统的控制下，

确定用户在物料处置设施内的位置；

接收所述位置的第一图像；

检测储存于库存位置处的物品的数量的变化，其中所述库存位置是在所述位置附近；

接收所述位置的第二图像；

至少部分基于所述第一图像和所述第二图像来识别与所述库存位置相关联的物品；以及

更新与所述用户相关联的用户物品清单，其中所述更新是至少部分基于储存于所述库存位置处的物品的数量的所述检测到的变化和所述识别出的物品。

9.如条款8所述的计算机实现的方法，其中至少部分基于确定从所述库存位置移除了物体或确定将物体放入了所述库存位置处来检测储存于所述库存位置处的物品的数量的变化。

10.如条款8所述的计算机实现的方法，其中至少部分基于从位于所述库存位置处的输入装置接收到的信息来检测储存于所述库存位置处的物品的数量的变化；以及

其中所述输入装置是压力传感器、相机、红外线传感器、秤、体积置换传感器或光幕中的至少一个。

11.如条款8所述的计算机实现的方法，其中识别与所述库存位置相关联的所述物品包括将所述第一图像和所述第二图像进行比较以至少部分基于像素比较或物体差异确定来识别所述物品。

12.如条款8所述的计算机实现的方法，其中检测储存于所述库存位置处的物品的数量的变化包括至少部分基于从输入组件接收到的输入来确定所述物品的数量已减少，其中所述输入组件是图像采撷装置、压力传感器、秤、体积置换传感器、RFID读取器、条形码读取器或QR码读取器中的至少一个。

13.如条款8所述的计算机实现的方法，其中检测储存于所述库存位置处的物品的数量的变化还包括：

确定已将物体放入所述库存位置处；以及

确定所述物体与储存于所述库存位置处的所述物品对应。

14.如条款13所述的计算机实现的方法，所述方法还包括：

确定所述用户物品清单上包括的物品；

其中识别所述物品还至少部分基于：

从位于所述物料处置设施内的至少一个输入装置接收到的数据；以及

所述用户物品清单上包括的所述物品；

确定放在所述库存位置处的所述物品的识别的置信度得分超过阈值；以及

其中更新所述用户物品清单包括从所述用户物品清单移除来自所述用户物品清单的所述识别出的物品的物品标识符。

15.如条款14所述的计算机实现的方法，所述方法还包括：

确定所述识别出的物品不与所述库存位置对应；以及

向关联方发送将所述物品从所述库存位置移除的消息。

16.如条款8所述的计算机实现的方法，其中检测储存于所述库存位置处的物品的数量的变化还包括：

确定已从所述库存位置移除物体；以及

确定所述物体与储存于所述库存位置处的物品对应。

17.如条款16所述的计算机实现的方法，所述方法还包括：

确定与所述库存位置相关联的物品；

其中识别所述物品还至少部分基于：

从所述位置处的至少一个输入装置接收到的数据；以及

与所述库存位置相关联的所述物品；

确定从所述库存位置移除的所述物品的识别的置信度得分超过阈值；以及

其中更新所述用户物品清单包括将所述识别出的物品的物品标识符添加至所述用户物品清单。

18.一种方法，其包括：

在被配置有可执行指令的一个或多个计算装置的控制下，

识别用户在物料处置设施内的位置；

检索与所述用户相关联的用户物品清单；

接收所述位置的第一图像，其中所述第一图像是在所述用户将手放入所述物料设施内在所述位置附近的库存位置中之前获取的；

接收所述位置的第二图像，其中所述第二图像是在所述用户将所述手放入所述库存位置中之后获取的；

至少部分基于所述第一图像或所述第二图像来确定所述用户已将物体放入所述库存位置处；

确定放入所述库存位置处的所述物体的身份；以及

更新所述用户物品清单以从所述用户物品清单移除所述识别出的物体的物品标识符。

19.如条款18所述的方法，其中确定放入所述库存位置处的所述物体的身份包括：

处理所述第一图像或所述第二图像中的至少一个以获得所述物体的至少一部分的表示；

将所述物体的所述至少一部分与和在所述用户物品清单上识别出的物品相关联的物品的所存储表示进行比较以确定所述物体的所述至少一部分的所述表示与物品的所述所存储表示中的每一个之间的相关性；以及

其中更新所述用户物品清单包括移除与具有最高置信度得分的物品相关联的物品标识符。

20.如条款18所述的方法，其中确定放入所述库存位置处的所述物体的身份还包括：

计算置信度得分以获得最高相关性；以及

确定所述置信度得分超过阈值；以及

其中更新所述用户物品清单是自动地并且在没有人工输入的情况下完成。

21.如条款18所述的方法，其中确定放入所述库存位置处的所述物体的身份还包括：

计算置信度得分以获得最高相关性；

确定所述置信度得分不超过阈值；

向关联方发送识别所述物体的消息；以及

从所述关联方接收所述物体的身份。

22.如条款18所述的方法，所述方法还包括：

确定所述物体将保持在所述库存位置处；以及

更新与所述库存位置相关联的物品存货数量。

23.如条款18所述的方法，所述方法还包括：

确定所述物体不会保持在所述库存位置处；以及

向关联方发送将所述物体从所述库存位置移除的消息。

Claims (15)

1.一种计算系统，其包括：

一个或多个处理器；以及

存储器，所述存储器耦接至所述一个或多个处理器并且存储程序指令，所述程序指令在由所述一个或多个处理器执行时促使所述一个或多个处理器：

确定用户在物料处置设施内的位置，其中所述位置是在库存位置附近；

接收用户的手的至少一部分的第一图像，其中所述用户的手的所述第一图像是在所述用户的手移入所述库存位置中之前采撷的；

接收所述用户的手的至少一部分的第二图像，其中所述第二图像是在所述用户的手从所述库存位置移出之后采撷的；

至少至少部分基于所述第一图像和所述第二图像的比较来确定所述第二图像包括拿在所述用户的手中的物体的表示；

响应于确定所述第二图像包括拿在所述用户的手中的物体的表示，识别与所述库存位置相关联的库存物品；

确定所述物体与所述库存物品对应；以及

将代表所述物品的物品标识符添加至用户物品清单，其中所述用户物品清单与所述用户相关联。

2.如权利要求1所述的计算系统，其中在由所述一个或多个处理器执行时促使所述一个或多个处理器将所述第一图像与所述第二图像进行比较的所述程序指令还包括在由所述一个或多个处理器执行时促使所述一个或多个处理器进行以下操作的程序指令：

在所述第一图像或所述第二图像中的至少一个中至少部分基于肤色来识别所述用户的手的至少一部分；以及

在所述第二图像中识别如被所述用户的手拿着并且具有与所述用户的手的肤色不同的颜色的所述物体的至少一部分。

3.如权利要求1所述的计算系统，其中在由所述一个或多个处理器执行时促使所述一个或多个处理器将所述第一图像与所述第二图像进行比较的所述程序指令还包括促使所述一个或多个处理器识别所述第一图像和所述第二图像中包括的物体的差异的程序指令。

4.如权利要求1所述的计算系统，所述指今在由所述处理器执行时还促使所述处理器：

接收包括在所述用户的手移入所述库存位置中之前的所述库存位置的表示的第三图像；

接收包括在所述用户的手从所述库存位置移出之后的所述库存位置的表示的第四图像；以及

其中用以确定所述用户正拿着所述物体的所述指令还包括用以至少部分基于所述第三图像和所述第四图像的比较来确定所述用户正拿着所述物体以识别已从所述库存位置移除物体的指令。

5.如权利要求1所述的计算系统，其中所述物体与所述库存物品对应的所述确定包括考虑从位于所述库存位置处的秤接收到的所述物品的重量、从所述库存位置处的压力传感器接收到的所述物体的至少一部分的形状或从所述第二图像中识别出的所述物体的特征中的至少一个。

6.如权利要求1所述的计算系统，所述指今在由所述处理器执行时还促使所述处理器：

接收来自位于所述库存位置处的输入装置的输入，来自所述输入装置的所述输入表明已从所述库存位置移除所述物体；以及

其中所述输入装置是压力传感器、相机、红外线传感器、秤、体积置换传感器或光幕中的至少一个。

7.一种用于向物料处置设施内的用户提供帮助的计算机实现的方法，其包括：

在被配置有可执行指令的一个或多个计算系统的控制下，

确定用户在物料处置设施内的位置；

接收所述位置的第一图像；

检测储存于库存位置处的物品的数量的变化，其中所述库存位置是在所述位置附近；

接收所述位置的第二图像；

至少部分基于所述第一图像和所述第二图像来识别与所述库存位置相关联的物品；以及

更新与所述用户相关联的用户物品清单，其中所述更新是至少部分基于储存于所述库存位置处的物品的数量的所述检测到的变化和所述识别出的物品。

8.如权利要求7所述的计算机实现的方法，其中至少部分基于确定从所述库存位置移除了物体或确定将物体放入了所述库存位置处来检测储存于所述库存位置处的物品的数量的变化。

9.如权利要求7所述的计算机实现的方法，其中至少部分基于从位于所述库存位置处的输入装置接收到的信息来检测储存于所述库存位置处的物品的数量的变化；以及

其中所述输入装置是压力传感器、相机、红外线传感器、秤、体积置换传感器或光幕中的至少一个。

10.如权利要求7所述的计算机实现的方法，其中识别与所述库存位置相关联的所述物品包括将所述第一图像和所述第二图像进行比较以至少部分基于像素比较或物体差异确定来识别所述物品。

11.如权利要求7所述的计算机实现的方法，其中检测储存于所述库存位置处的物品的数量的变化包括至少部分基于从输入组件接收到的输入来确定所述物品的数量已减少，其中所述输入组件是图像采撷装置、压力传感器、秤、体积置换传感器、RFID读取器、条形码读取器或QR码读取器中的至少一个。

12.如权利要求7所述的计算机实现的方法，其中检测储存于所述库存位置处的物品的数量的变化还包括：

确定已将物体放入所述库存位置处；以及

确定所述物体与储存于所述库存位置处的所述物品对应。

13.如权利要求12所述的计算机实现的方法，所述方法还包括：

确定所述用户物品清单上包括的物品；

其中识别所述物品还至少部分基于：

从位于所述物料处置设施内的至少一个输入装置接收到的数据；以及

所述用户物品清单上包括的所述物品；

确定放在所述库存位置处的所述物品的识别的置信度得分超过阈值；以及

其中更新所述用户物品清单包括从所述用户物品清单移除来自所述用户物品清单的所述识别出的物品的物品标识符。

14.如权利要求7所述的计算机实现的方法，其中检测储存于所述库存位置处的物品的数量的变化还包括：

确定已从所述库存位置移除物体；以及

确定所述物体与储存于所述库存位置处的物品对应。

15.如权利要求14所述的计算机实现的方法，所述方法还包括：

确定与所述库存位置相关联的物品；

其中识别所述物品还至少部分基于：

从所述位置处的至少一个输入装置接收到的数据；以及

与所述库存位置相关联的所述物品；

确定从所述库存位置移除的所述物品的识别的置信度得分超过阈值；以及

其中更新所述用户物品清单包括将所述识别出的物品的物品标识符添加至所述用户物品清单。