CN107944781A - 提供存放对象提示信息的方法及装置 - Google Patents

提供存放对象提示信息的方法及装置 Download PDF

Info

Publication number
CN107944781A
CN107944781A CN201610892067.XA CN201610892067A CN107944781A CN 107944781 A CN107944781 A CN 107944781A CN 201610892067 A CN201610892067 A CN 201610892067A CN 107944781 A CN107944781 A CN 107944781A
Authority
CN
China
Prior art keywords
target
equipment
information
target storage
dimensional space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610892067.XA
Other languages
English (en)
Inventor
冯梦远
李春根
高伟乐
张华强
陈晓华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cainiao Smart Logistics Holding Ltd
Original Assignee
Cainiao Smart Logistics Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cainiao Smart Logistics Holding Ltd filed Critical Cainiao Smart Logistics Holding Ltd
Priority to CN201610892067.XA priority Critical patent/CN107944781A/zh
Priority to TW106126276A priority patent/TW201814658A/zh
Priority to US15/720,195 priority patent/US11361270B2/en
Priority to SG11201903107SA priority patent/SG11201903107SA/en
Priority to PCT/US2017/054313 priority patent/WO2018071204A1/en
Priority to AU2017343482A priority patent/AU2017343482B2/en
Publication of CN107944781A publication Critical patent/CN107944781A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
    • G06Q10/1093—Calendar-based scheduling for persons or groups
    • G06Q10/1097—Task assignment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display

Abstract

本申请实施例公开了提供存放对象提示信息的方法及装置，所述方法包括：客户端获得目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；确定目标存放对象，并根据所述三维空间模型确定所述目标存放对象所在的目标存放位置；根据所述AR设备所在的位置信息以及所述目标存放位置，计算导航线路；在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供可视化的导航提示信息。通过本申请实施例，可以提高拣货等操作的实现效率以及准确度。

Description

提供存放对象提示信息的方法及装置
技术领域
本申请涉及存放对象信息处理技术领域，特别是涉及提供存放对象提示信息的方法及装置。
背景技术
在电子商务等技术飞速发展的今天，物流服务成了其中非常关键的一环，从仓储到拣货出库，再到配送，任何一个环节的服务质量都影响着最终的用户体验。其中，对于一些大型的综合性仓库而言，其中存放的货品数量、品类非常多，虽然预先可以按照库位、货架等进行划分，将不同类目的商品按照库位进行存放，但是，在商品拣货出库环节，面临大批量的拣货任务，经常会出现效率低下的问题。
现有技术中，系统将拣货任务分发给拣货员，然后由拣货员到仓库内进行拣货工作。但是，由于仓库中库位、货架等数量众多，因此，为了提高拣货效率，拣货员通常需要提前学习仓库内各库位、货架的地理位置信息、货品的摆放规则信息，等等。显然，这会耗费大量的学习成本，同时拣货效率及准确度也无法得到最大化的提升。
因此，如何提升仓库内的拣货效率及准确度，成为需要本领域技术人员解决的技术问题。
发明内容
本申请提供了提供存放对象提示信息的方法及装置，可以提高拣货等操作的实现效率以及准确度。
本申请提供了如下方案：
一种提供存放对象提示信息的方法，其特征在于，所述方法包括：
客户端获得目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
确定目标存放对象，并根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置；
根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
一种提供存放对象提示信息的方法，包括：
服务器生成目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
将所述三维空间模型的信息提供给客户端，以便所述客户端在确定目标存放对象后，根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，并在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
一种对仓库中存放的货品进行取货处理的方法，其特征在于，所述方法包括：
客户端获得目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
向服务器发送获取取货任务的请求；
根据服务器派发的取货任务，确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置；
根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
一种对仓库中存放的货品进行取货处理的方法，包括：
服务器生成目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
将所述三维空间模型的信息提供给客户端；
接收到所述客户端提交的获取取货任务的请求后，生成取货任务，并派发给所述客户端，以便所述客户端根据服务器派发的取货任务确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
一种提供存放对象提示信息的装置，应用于客户端，所述装置包括：
第一模型获得单元，用于获得目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
第一信息确定单元，用于确定目标存放对象，并根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置；
第一导航线路计算单元，用于根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
第一导航提示信息提供单元，用于在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
一种增强现实AR设备，所述AR设备中包括所述提供存放对象提示信息的装置。
一种移动终端设备，所述移动终端设备中包括所述提供存放对象提示信息的装置，所述移动终端设备用于与增强现实AR设备进行连接。
一种提供存放对象提示信息的装置，应用于服务器，包括：
第一模型生成单元，用于生成目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
第一模型提供单元，用于将所述三维空间模型的信息提供给客户端，以便所述客户端在确定目标存放对象后，根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，并在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
一种对仓库中存放的货品进行取货处理的装置，应用于客户端，包括：
第二模型获得单元，用于获得目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
任务请求单元，用于向服务器发送获取取货任务的请求；
第二信息确定单元，用于根据服务器派发的取货任务，确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置；
第二导航线路计算单元，用于根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
第二导航提示信息提供单元，用于在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
一种增强现实AR设备，其特征在于，所述AR设备中所述对仓库中存放的货品进行取货处理的装置。
一种移动终端设备，所述移动终端设备中包括所述对仓库中存放的货品进行取货处理的装置，所述移动终端设备用于与增强现实AR设备进行连接。
一种对仓库中存放的货品进行取货处理的装置，应用于服务器，包括：
第二模型生成单元，用于生成目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
第二模型提供单元，用于将所述三维空间模型的信息提供给客户端；
取货任务生成单元，用于接收到所述客户端提交的获取取货任务的请求后，生成取货任务，并派发给所述客户端，以便所述客户端根据服务器派发的取货任务确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
根据本申请提供的具体实施例，本申请公开了以下技术效果：
通过本申请实施例，客户端可以预先获得目标存放空间内的三维空间模型，其中保存有存放对象在所述存放空间内的存放位置信息，这样，就可以在确定待处理的目标存放对象后，根据所述三维空间模型确定所述目标存放对象所在的目标存放位置，根据所述AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过AR设备在视域范围内的存放空间上提供对应的可视化的导航提示信息。也就是说，用户在进入到存放空间后，可以通过AR设备查看到“增强”的信息，这种信息为具有导航性质的提示信息，这样，直接按照导航提示信息进行行进即可找到目标存放对象，并完成取货任务。因此，用户不需要提前熟悉存放空间布局，也不需要记忆存放对象的存放位置等信息，因此，可以降低用户的学习成本。并且，通过导航提示信息，可以提高拣货等操作的实现效率以及准确度。
当然，实施本申请的任一产品并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的应用场景架构示意图；
图2是本申请实施例提供的第一方法的流程图；
图3是本申请实施例提供的引导方式示意图；
图4至图8是本申请实施例提供的视域范围内的界面示意图；
图9-1至9-3是本申请实施例提供的取货结果提示方式示意图；
图10是本申请实施例提供的任务完成界面示意图；
图11是本申请实施例提供的第二方法的流程图；
图12是本申请实施例提供的第三方法的流程图；
图13是本申请实施例提供的第四方法的流程图；
图14是本申请实施例提供的第一装置的示意图；
图15是本申请实施例提供的第一AR设备的示意图；
图16是本申请实施例提供的第一移动终端设备的示意图；
图17是本申请实施例提供的第二装置的示意图；
图18是本申请实施例提供的第三装置的示意图；
图19是本申请实施例提供的第二AR设备的示意图；
图20是本申请实施例提供的第二移动终端设备的示意图；
图21是本申请实施例提供的第四装置的示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员所获得的所有其他实施例，都属于本申请保护的范围。
在本申请实施例中，可以通过AR(Augmented Reality，增强现实技术)的方式来实现存放空间内的导航，例如，参见图1，拣货员等工作人员可以佩戴AR眼镜等AR设备进入到仓库等存放空间内，系统对其进行任务分配，并由AR眼镜内置的程序进行扫描及导航等提示，直到拣货员完成任务离开仓库。这样，拣货人员可以不必预先了解仓库内的库位、货架等信息进行学习，降低学习成本，同时，也可以提高拣货效率。
其中，所谓的AR技术，是指从真实世界出发，经过数字成像，然后通过影像数据和传感器数据一起对三维世界进行感知理解，同时得到对三维交互的理解。三维交互理解的目的是告知系统要“增强”的内容。一旦系统知道了要增强的内容和位置以后，就可以进行虚实结合，最后，合成的视频被传递到用户的视觉系统中，从而达到了增强现实的效果。
为了实现三维交互理解，可以预先建立三维空间模型。在本申请实施例中，具体的三维空间可以是指用于存放各种存放对象(例如，货品、快递包裹等)的存放空间(例如，用于存放货品的“仓库”、用于存放快递包裹的“邮箱”，等等)，因此，也就是说，可以预先针对这种存放空间建立起三维空间模型，进而，就可以依据这种三维空间模型进行基于AR技术的室内导航。
其中，为了建立三维空间模型，具体的实现方式可以有多种，例如，在其中一种方式下，可以由工作人员佩戴AR眼镜等AR设备进入到实体的存放空间中，并在空间内行走，由于AR设备带有摄像头等传感设备，因此，可以在行走的过程中，利用这种传感设备对存放空间及其内部布局进行扫描。在得到扫描结果后，可以导入到开发环境中。这种开发环境通常可以支持对扫描结果进行标注，因此，可以由工作人员对扫描结果进行标注。例如，如果存放空间中包括多个货架，每个货架中包括多个单位存放区域(例如，货架上的“格子”等，也称为“货槽”)，每个单位存放区域内可以用于存放相同SKU(Stock Keeping Unit，库存量单位)的存放对象(例如，“货品”等)，则可以对货架的编号、单位存放区域的编号、对应的存放对象信息等进行标注。标注完成之后，系统可以保存各个货架的编号、单位存放区域的编号、对应的存放对象信息等信息，同时，关于各个货架、单位存放区域所在位置的坐标等信息，系统可以自动生成并保存，以此生成该存放空间对应的三维空间模型。当然，在实际应用中，还可以有其他建立三维空间模型的方式，这里不再一一介绍。
为了实现该导航功能，还可以预先实现相关的客户端(包括应用程序，或者相关的功能模块等)。客户端可以通过多种形式与AR设备进行配合使用。具体的，对于一体式的AR设备(也即，由AR设备独立承担屏显、计算、存储等任务)而言，可以直接将该客户端安装在AR设备中，使得AR设备具有本申请实施例中的存放空间内导航功能。或者，对于移动式AR设备而言，由于移动式的AR设备通常仅承担屏显任务，在使用时，通常需要将手机等移动终端设备与该AR设备连接，因此，在这种情况下，也可以将客户端安装在手机等移动终端设备中，这样，安装了该客户端的移动终端设备被放置在AR设备中后，就可以使得AR设备具有本申请实施例中所述的存放空间内的导航功能。另外，三维空间模型生成后，可以直接保存到客户端所在的终端设备中，或者，也可以存储到服务器中，客户端在需要进行导航时，再从服务器中进行下载当前存放空间对应的三维空间模型。总之，客户端无论是直接将客户端安装在AR设备中，还是安装在移动终端设备中，都可以使得AR设备基于这种客户端，结合前述生成的三维空间模型，实现具体的室内导航。下面对具体实现过程进行详细介绍。
实施例一
参见图2，该实施例一从AR设备内客户端的角度，提供了一种提供存放对象提示信息的方法，该方法具体可以包括以下步骤：
S201：客户端获得目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
如前文所述，可以在三维空间模型生成之后，便保存到客户端所在的终端设备中，该终端设备可以是一体式的AR设备，或者，也可以是手机等移动终端设备，再将该移动终端设备连接到移动式AR设备中。或者，三维空间模型也可以直接保存在服务器中，此时，服务器中可以保存多个存放空间对应的三维空间模型，客户端在进入到某个目标存放空间时，再向服务器请求获得该目标存放空间对应的三维空间模型。
S202：确定目标存放对象，并根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置；
在拣货员等工作人员需要到仓库等存放空间中执行拣货等任务时，可以佩戴相关的AR设备(包括一体式的AR设备，或者连接了移动终端设备的移动式AR设备)，进入到实体的存放空间中，之后，可以启动相关的客户端。客户端被启动后，可以首先进行初始化处理，具体可以包括，将所述三维空间模型与所述存放空间进行空间匹配。所谓的空间匹配，也就是说，可以将三维空间模型与实际的存放空间进行匹配，使得三维空间中的位置与实际存放空间中对应的位置相对应。具体进行空间匹配的方法可以有多种，例如，在一种方式下，可以是预先在三维空间模型中保存一些特征点，例如，空间内的四个墙角位置等等，拣货员佩戴AR眼镜等AR设备进入到存放空间后，首先启动应用程序，之后，可以在佩戴着AR眼镜的状态下在存放空间环顾一周，AR眼镜的传感器设备可以对存放空间进行扫描，之后，便可以利用特征点以及扫描结果，将特征点与存放空间中实际位置的点进行匹配，以便确定出三维空间模型的位置、方向等，从而完成空间匹配，最终使得三维空间模型中各个点的位置，与对应到存放空间中的实际位置一致。当然，在具体实现时，还可以通过其他方式实现空间匹配，例如，可以实现自动的校准，等等，这里不再一一详述。
在完成初始化之后，客户端便可以确定出目标存放对象，也就是说，可以确定出当前需要对哪个或者哪些存放对象进行取货等处理操作。具体实现时，可以有多种具体的确定方式，例如，如果存放空间是仓库，存放对象是货品，目标存放对象是当前取货任务中需要从仓库中取出的货品，则在拣货员进入到存放空间后，客户端可以将初始化已完成等相关信息通知给服务器，同时发送获取取货任务的请求，这样，服务器可以从“任务池”中选择出相关的数据对象，并生成取货任务，分配给当前拣货员关联的客户端。这样，取货任务中的数据对象对应的存放对象即可成为当前待处理的目标存放对象。
这里的服务器可以是指销售平台服务器、快递系统服务器等。例如，在销售平台服务器的情况下，服务器可以通过接收消费者用户的订单等方式，生成“拣货任务池”，任务池中的任务可以与具体的存放空间进行关联，这样，在拣货员进入到某存放空间后，从该任务池中为当前拣货员分配取货任务。例如，当某消费者用户通过销售平台下单了某件数据对象(例如，商品对象等)，则服务器可以根据消费者用户的收货地址等，进行路由，确定出发货仓库，并为该发货仓库增加一条取货任务。这样，针对多个消费者用户的下单行为，就可以为各个发货仓库生成各自的任务池，也即，每个发货仓库可以关联多条取货任务。当某拣货员进入到某发货仓库后，服务器就可以根据该发货仓库关联的任务池，为该拣货员分配取货任务。进而，客户端可以根据服务器分配的取货任务，确定出当前需要从存放空间中取出的目标存放对象。
在确定出目标存放对象之后，还可以根据三维空间模型中保存的信息，确定出该目标存放对象所在的位置信息，由于已经进行了空间匹配，因此，该位置信息也可以对应到实际存放空间中存放对象所在的位置。例如，
需要说明的是，取货任务中可能包括多个存放对象，此时，也可以分别根据三维空间模型中保存的信息，确定出各个存放对象所在的位置信息，以便基于各个位置信息进行导航线路的规划。
S203：根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
在确定出目标存放对象所在的目标存放位置信息后，就可以根据所述AR设备所在的位置信息以及所述目标存放位置，计算出导航线路。其中，关于AR设备所在的位置信息，可以通过计算机视觉能力获得，例如，可以根据AR设备中的摄像头等传感器设备采集到的信息，对AR设备进行定位，而AR设备通常是佩戴在拣货员等用户身上，因此，也相当于是对用户进行了定位。其中，在已知AR设备所在的位置信息以及所述目标存放位置的情况下，如何进行导航线路的规划，可以利用已有的技术来实现，这里不再详述。但这里需要说明的是，由于一次取货任务中可能包括多个目标存放对象，因此，还可以预先提供相关的算法，通过该算法，可以在进行导航线路规划时，首先根据所述AR设备所在的位置信息以及各个目标存放对象所在的目标存放位置，确定各目标存放对象的处理顺序(例如，可以以总路线最短为原则，等等)，然后，按照所述处理顺序，提供从当前所在位置到第一个目标存放对象的导航线路，以及后续各目标存放对象之间的导航线路。也就是说，假设当前拣货任务中包括目标存放对象A、B、C，则可以根据当前所在位置以及该目标存放对象A、B、C各自所在的存放位置，计算出先取哪个存放对象，后取哪个存放对象，才能在最短的时间内完成取货任务，等等。关于具体的算法，这里不再详述。
S204：在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
在进行了线路规划后，就可以在AR设备行进过程中，通过所述AR设备提供可视化的导航提示信息，这种导航提示信息可以是动态变化的，也就是说，可以根据行进过程中AR设备所在的实际位置，对导航提示信息进行实时更新。需要说明的是，AR设备在视域范围内提供的画面通常包括两部分，其中一部分是现实空间中的画面，另一部分是“增强”的虚拟画面，而在本申请实施例中，这种可视化的导航提示信息，就属于“增强”的虚拟画面。也就是说，拣货员可以通过AR眼镜，在视域范围的存放空间中查看到空间内实际的画面，同时还可以看到“增强”的信息，其中主要是导航提示信息，这样，拣货员只需要按照这种导航提示信息进行行进，即可到达所需取货的目标存放对象所在的位置，完成取货任务，因此，不必预先记忆存放空间内的布局、货品存放位置等信息，可以降低拣货员的学习成本，也可以提高拣货的效率及准确性。
其中，具体在通过所述AR设备提供的可视化的导航提示信息，可以有多种具体的形式。例如，在一种方式下，如图3所示，可以包括“地面引导”，也就是说，可以通过所述AR设备在视域范围内的存放空间地面上提供可视化的行进方向信息。具体的，由于已经预先进行了空间匹配，因此，可以在行进的过程中，通过计算机视觉能力，识别出空间中的“地面”，并在“地面”上显示出具体的行进方向信息，例如，“箭头”等。另外，为了进一步加强提示的效果，还可以提供“视觉引导”，也就是说，可以在所述目标存放位置出现在视域范围内时，在视域范围内的存放空间中提供所述目标存放位置的提示信息，也即，拣货员可以透过AR眼镜，在存放空间中的目标存放位置观看到“增强”的提示信息。其中，关于目标存放位置是否出现在视域范围内的识别，同样可以通过计算机视觉能力来进行，这里不再详述。
具体实现时，如果存放空间中包括多个货架，并且三维空间模型中保存的存放对象在所述存放空间内的存放位置信息包括：所述存放对象所在的货架的位置信息，则具体在根据所述三维空间模型确定所述目标存放对象所在的目标存放位置时，可以根据所述三维空间模型确定所述目标存放对象所在的目标货架的位置。进而，在在视域范围内的存放空间中提供所述目标存放位置的提示信息时，可以在所述目标货架出现在视域范围内时，在所述视域范围内所述目标货架所在的位置提供可视化的提示信息。例如，如图4所示，左侧所示为裸眼看到的现实存放空间，右侧所示为透过AR眼镜看到的存放空间，可见，其中对目标存放对象所在的目标货架的位置进行了提示，如图中的“箭头”方向所示，并且，还可以将目标存放对象所在的目标货架所在的位置进行高亮显示，例如，可以显示为绿色，等等。也就是说，拣货员透过AR眼镜，可以看到有一个货架的颜色与其他货架不同，并且还有“箭头”指示说，“请往里走”，等等，这样，拣货员就可以根据这种颜色信息很容易的分辨出目标货架，并便于其取下对应的目标存放对象。
另外，如果每个货架中还包括多个单位存放区域，同一单位存放区域用于存放相同SKU的存放对象，并且三维空间模型中保存的存放对象在所述存放空间内的存放位置信息包括：所述存放对象所在的货架的位置信息，以及在所述货架中的单位存放区域的位置信息。则具体在根据所述三维空间模型确定所述目标存放对象所在的目标存放位置时，可以根据所述三维空间模型确定所述目标存放对象所在的目标货架的位置，以及在所述目标货架中的目标单位存放区域的位置。进而，在所述提供所述目标存放位置的提示信息时，可以在所述目标货架出现在视域范围内时，在所述视域范围内所述目标货架所在的位置提供可视化的提示信息，之后，在所述目标单位存放区域出现在视域范围内时，在所述视域范围内提供所述目标单位存放区域所在位置提供可视化的提示信息。例如，如图5所示，在根据图4所示的货架提示信息，进入到目标货架所在的位置后，目标单位存放区域进入到视域范围内，此时，可以对目标单位存放区域的位置进行提示，例如，将该区域展示为绿色，等等，这样，拣货员可以直接到该单位存放区域取下相应的目标存放对象，而不必在众多单位存放区域中进行查找，从而可以进一步提高效率。
另外，在实际应用中，除了提供导航提示信息，还可以提供其他方面的信息，例如，还可以在所述视域范围内，提供可视化的货架标识的提示信息。如图6中所示的“货架01-01至01-06”，等。或者，还可以在所述视域范围内，提供可视化的货架上存放的存放对象的提示信息(例如，货品的名称、品类、入库时间，等等)。如图6中所示的“Nike运动鞋34-38码女入库时间：2016-5-14”，这些信息在裸眼看到的存放空间内是不存在的。另外，在实际应用中，还可以模拟“数据大屏”，通过所述AR设备在视域范围内的存放空间上提供库存数量等提示信息。
在实际应用中，除了前述导航提示信息、模拟“数据大屏”等信息之外，还可以提供通过所述AR设备在视域范围内的存放空间上提供可视化的辅助信息；其中，所述辅助信息包括任务列表信息、任务处理进程和/或任务处理时间信息等，或者，还可以包括任务处理效率的排名等“竞争”性数据，等等。其中，在具体实现时，可以在视域范围内存放空间的侧边区域提供所述辅助信息，模拟“数据大屏”等信息可以显示在时域范围内存放空间的“顶部”，导航提示信息居中显示。例如，如图7所示，其中，侧边区域的左侧显示的辅助信息为竞争性数据，包括排名等，右侧显示的辅助信息为任务列表、任务完成进度、时间等，居中区域展示的是导航提示信息，顶部展示的是库存数量等模拟“数据大屏”的信息。
具体实现时，上述侧边区域的辅助信息可以在任务开始阶段进行显示，在用户携带AR设备行进过程中，视野中的侧边区域可以像后运动偏移至视线外，如图8所示，这样可以最大化开拓视野，更好的展示路径导航信息。在检测到用户视线向侧边区域对焦的事件时，再将所述侧边区域的所述辅助信息移至视域范围内，以便用户查看细节，或进行进一步选择等操作。
在用户按照导航提示信息进行行进并从存放位置取下存放对象之后，还可以对取下的存放对象进行扫描，识别出该存放对象的详情信息，并通过AR设备在视域范围内提供这种详情信息。例如，如图9-1所示，用户取下某件存放对象后，可以透过AR眼镜查看到期具体的详情，包括入库时间、库存数量、保质期，等等。其中，识别存放对象的方式可以有多种，例如，其中一种方式下，可以在AR设备上安装扫码设备，这样，由于存放对象的外包装上通常都带有条形码、二维码等图形码信息，因此，可以通过扫码的方式来识别具体的详情信息。或者，另一种方式下，同样可以通过计算机视觉能力来识别具体存放对象的详情信息。具体的，可以通过机器学习的方式，预先对各个存放对象的条形码等图形码进行学习，记录下图形码中的一些特征点等信息，并保存特征点与详情信息之间的关联关系。这样，在用户取下某件存放对象后，可以通过扫描图形码，并与预先保存的特征点进行对比的方式，识别出对应的存放对象，并确定出对应的详情信息，等等。
在识别出具体的存放对象后，还可以判断被取下的存放对象是否为当前任务中的目标存放对象，如果是，则可以通过所述AR设备提供成功提示信息，如图9-2所示，可以显示为“货品get”等。此外，还可以将成功消息通知给服务器，服务器可以据此对该目标存放对象对应的数据对象进行“下架”处理。如果被取下的存放对象不是当前任务中的目标存放对象，则通过所述AR设备提供出错提示信息。例如，如图9-3所示，可以显示为“亲拿错了，请放回”，等等。
另外，在任务完成后，还可以提供关于此次任务的完成情况的统计信息，例如，如图10所示，可以提供任务已完成的提示，还可以包括总耗时、任务评分等信息，另外，还可以授予勋章称号，等等。
总之，通过本申请实施例，可以预先在AR设备中保存目标存放空间内的三维空间模型，其中保存有存放对象在所述存放空间内的存放位置信息，这样，就可以在确定待处理的目标存放对象后，根据所述三维空间模型确定所述目标存放对象所在的目标存放位置，根据所述AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过AR设备在视域范围内的存放空间上提供对应的可视化的导航提示信息。也就是说，用户在进入到存放空间后，可以通过AR设备查看到“增强”的信息，这种信息为具有导航性质的提示信息，这样，直接按照导航提示信息进行行进即可找到目标存放对象，并完成取货任务。因此，用户不需要提前熟悉存放空间布局，也不需要记忆存放对象的存放位置等信息，因此，可以降低用户的学习成本。并且，通过导航提示信息，可以提高拣货等操作的实现效率以及准确度。
实施例二
该实施例二是与实施例一相对应的，从服务器的角度进行介绍，具体的，参见图11，该实施例二提供了一种提供存放对象提示信息的方法，该方法可以包括以下步骤：
S1101：服务器提供目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
S1102：将所述三维空间模型的信息提供给客户端，以便所述客户端在确定目标存放对象后，根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，并在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
其中，关于具体的三维空间模型的建立方式，以及客户端利用三维空间模型进行导航提示等相关的具体实现，可以参见前述实施例一中的介绍，这里不再赘述。
在具体实现时，如果具体对目标存放对象执行的处理是取货处理，则客户端还可以从服务器获取取货任务。相应的，服务器还可以接收客户端发送的获取取货任务的请求，并在生成取货任务后，向所述客户端派发取货任务，所述取货任务中包括至少一个存放对象的信息，这样，所述客户端可以根据所述取货任务确定所述待处理的目标存放对象。
另外，服务器中通常还会保存各个存放对象在存放空间中的库存信息，包括库存数量、库存状态等等，因此，在实际应用中，服务器还可以接收所述客户端提交的目标存放对象被成功处理的通知消息，并根据所述通知消息，更新所述目标存放对象的库存信息。例如，将被成功处理的存放对象进行库存扣减或者锁定，等等。
实施例三
在前述实施例一以及实施例二中，提供了提供存放对象提示信息的方法，在具体实现时，该方法可以在多种具体的应用场景中进行应用，例如，其中一种应用场景就可以是：对于仓库这种存放空间，拣货员经常需要到仓库中进行“拣货”，所谓“拣货”，也即将货品从仓库中取出，以便执行后续的发货等任务。对于这种应用场景，存放空间对应仓库，存放对象对应仓库中存放的货品，因此，为了提高拣货效率，降低拣货员的学习成本，就可以预先建立实体仓库对应的三维空间模型，保存下至少一个货品在仓库中的存放位置信息，这样，就可以利用这种三维空间模型，进行基于AR设备的室内导航，从而提高拣货效率。下面就对具体的实现方式进行详细介绍。
参见图12，该实施例三提供了一种对仓库中存放的货品进行取货处理的方法，具体的，所述方法具体可以包括以下步骤：
S1201：客户端获得目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
S1202：向服务器发送获取取货任务的请求；
客户端可以在通过三维空间模型完成空间匹配之后，通知服务器已经准备就绪，并提交获取取货任务的请求。服务器在接收到该请求后，可以根据“任务池”生成当前取货任务，并派发给客户端。
S1203：根据服务器派发的取货任务，确定待进行取货处理的目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置；
S1204：根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
S1205：在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
具体实现时，关于该实施例三中各步骤的具体实现，包括“地面引导”与“视觉引导”的实现，等等，可以参见前述实施例一中的介绍，只需要将存放空间具象为“仓库”，将存放对象具象为“货品”即可，因此，这里不再赘述。
总之，通过该实施例三，由于可以预先针对目标仓库建立其三维空间模型，并在其中保存货品在仓库中的存放位置信息，这样，即可将这种三维空间模型保存到AR设备中，在佩戴这种AR设备到仓库中进行拣货时，就可以通过AR设备查看到“增强”的可视化导航提示信息，因此，可以提高拣货效率，并降低拣货员的学习成本。
实施例四
该实施例四是与实施例三相对应的，从服务器的角度进行介绍。具体的，参见图13，该实施例四提供了一种对仓库中存放的货品进行取货处理的方法，该方法可以包括以下步骤：
S1301：服务器提供目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
S1302：将所述三维空间模型的信息提供给客户端；
服务器可以是生成三维空间后，直接提供给客户端，此时，客户端可以与一个目标仓库进行绑定，或者，在客户端中也可以保存多个仓库对应的三维空间模型，在需要从某个具体的仓库中进行取货时，再从客户端本地查找出对应的三维空间模型。或者，在另一种情况下，也可以将生成的三维空间模型保存在服务器，也就是说，服务器可以对多个仓库对应的三维空间模型进行保存，客户端在需要进入某个仓库执行取货任务时，再向服务器请求获取该仓库对应的三维空间模型。
S1303：接收到所述客户端提交的获取取货任务的请求后，生成取货任务，并派发给所述客户端，以便所述客户端根据服务器派发的取货任务确定待进行取货处理的目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
由于该实施例四是与实施例三相对应的，因此，相关的具体实现可以参见前述实施例三中的介绍，这里不再赘述。
与实施例一相对应，本申请实施例还提供了一种提供存放对象提示信息的装置，该装置应用于客户端，参见图14，所述装置具体可以包括：
第一模型获得单元1401，用于获得目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
第一信息确定单元1402，用于确定目标存放对象，并根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置；
第一导航线路计算单元1403，用于根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
第一导航提示信息提供单元1404，用于在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
具体实现时，第一导航提示信息提供单元1404包括：
地面引导子单元，用于通过所述AR设备在视域范围内的存放空间地面上提供可视化的行进方向信息。
或者，第一导航提示信息提供单元1404也可以包括：
视觉引导子单元，用于当所述目标存放位置出现在视域范围内时，在视域范围内的存放空间中提供可视化的目标存放位置的提示信息。
当然，在实际应用中，上述地面引导子单元以及视觉引导子单元是可以并存的。
具体实现时，如果所述存放空间中包括多个货架，所述三维空间模型中保存的至少一个存放对象在所述存放空间内对应的存放位置信息，包括：所述至少一个存放对象所在的货架的位置信息；
所述信息确定单元具体可以用于：
根据所述三维空间模型确定所述目标存放对象所在的目标货架的位置；
所述视觉引导子单元具体可以用于：
在所述目标货架出现在所述视域范围内时，在所述视域范围内所述目标货架所在的位置提供可视化的提示信息。
另外，如果所述存放空间中的每个货架中包括多个单位存放区域，同一单位存放区域用于存放相同库存量单位SKU的存放对象；
所述三维空间模型中保存的至少一个存放对象在所述存放空间内对应的存放位置信息，还包括：所述至少一个存放对象在所述货架中的单位存放区域的位置信息；
所述信息确定单元具体还可以用于：
根据所述三维空间模型确定所述目标存放对象在所述目标货架中的目标单位存放区域的位置；
所述视觉引导子单元具体还可以用于：
在所述目标单位存放区域出现在视域范围内时，在所述视域范围内所述目标单位存放区域所在位置提供可视化的提示信息。
另外，该装置还可以包括：
货架标识提示单元，用于在所述视域范围内，提供可视化的货架标识的提示信息。
存放对象信息提示单元，用于在所述视域范围内，提供可视化的货架上存放的存放对象的提示信息。
具体实现时，还可以包括：
库存数量信息提示单元，用于通过所述AR设备在视域范围内的存放空间上提供关于所述目标存放对象库存数量信息的提示信息。
另外，该装置还可以包括：
辅助信息提示单元，用于通过所述AR设备在视域范围内的存放空间上提供可视化的辅助信息；其中，所述辅助信息包括任务列表信息、任务处理进程和/或任务处理时间信息。
具体的，所述辅助信息提示单元具体可以用于，在视域范围内存放空间的侧边区域提供所述辅助信息。
为了避免对导航提示信息造成干扰，该装置还可以包括：
信息移动单元，用于在所述AR设备行进过程中，将所述侧边区域的所述辅助信息移至视域范围外。
另外，所述信息移动单元还可以用于：
在检测到用户视线向侧边区域对焦的事件时，将所述侧边区域的所述辅助信息移至视域范围内。
在实际应用中，所述信息确定单元具体可以包括：
请求子单元，用于向服务器发送获取取货任务的请求；
任务接收子单元，用于接收服务器分配的取货任务，根据取货任务中包括的存放对象信息，确定所述待处理的目标存放对象。
其中，所述取货任务中包括多个存放对象时，确定出的目标存放对象为多个；
所述导航线路计算单元具体可以包括：
处理顺序确定子单元，用于根据所述AR设备所在的位置信息以及各个目标存放对象所在的目标存放位置，确定各目标存放对象的处理顺序；
线路计算子单元，用于按照所述处理顺序，提供从当前所在位置到第一个目标存放对象的导航线路，以及后续各目标存放对象之间的导航线路。
另外，该装置还可以包括：
识别单元，用于在检测到存放对象从其存放位置被取下的事件时，对所述被取下的存放对象进行识别；
判断单元，用于通过所述AR设备提供该存放对象的详情信息，并判断所述被取下的存放对象是否为当前任务中的目标存放对象；
取货结果提示单元，用于如果所述判断单元的判断结果为是，则通过所述AR设备提供成功提示信息，否则通过所述AR设备提供出错提示信息。
与上述客户端装置相对应，本申请实施例还提供了一种增强现实AR设备，参见图15，所述AR设备中可以包括前述各项所述的提供存放对象提示信息的装置。这种AR设备属于集屏显、存储、计算于一体的一体式AR设备。
另外，参见图16，本申请实施例还提供了一种移动终端设备，所述移动终端设备中包括前述各项所述的提供存放对象提示信息的装置，并且，所述移动终端设备可以用于与增强现实AR设备进行连接。这种AR设备属于仅提供屏显功能的AR设备。移动终端设备可以是手机等智能终端设备。
与实施例二相对应，本申请实施例还提供了一种提供存放对象提示信息的装置，该装置应用于服务器，参见图17，该装置可以包括：
第一模型生成单元1701，用于生成目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
第一模型提供单元1702，用于将所述三维空间模型的信息提供给客户端，以便所述客户端在确定目标存放对象后，根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，并在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
与实施例三相对应，本申请实施例还提供了一种对仓库中存放的货品进行取货处理的装置，该装置应用于客户端，参见图18，该装置具体可以包括：
第二模型获得单元1801，用于获得目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
任务请求单元1802，用于向服务器发送获取取货任务的请求；
第二信息确定单元1803，用于根据服务器派发的取货任务，确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置；
第二导航线路计算单元1804，用于根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
第二导航提示信息提供单元1805，用于在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
具体实现时，所述第二导航提示信息提供单元包括：
地面引导子单元，用于通过所述AR设备在视域范围内的仓库地面上提供可视化的行进方向信息。
或者，所述第二导航提示信息提供单元包括：
视觉引导子单元，用于当所述目标存放位置出现在视域范围内时，在视域范围内的仓库中提供可视化的目标存放位置的提示信息。
其中，所述仓库中包括多个货架，所述三维空间模型中保存的至少一件货品在所述仓库内对应的存放位置信息，包括：所述至少一件货品所在的货架的位置信息；
所述第二信息确定单元具体用于：
根据所述三维空间模型确定所述目标存放对象所在的目标货架的位置；
所述视觉引导子单元具体用于：
在所述目标货架出现在所述视域范围内时，在所述视域范围内所述目标货架所在的位置提供可视化的提示信息。
如果所述仓库中的每个货架中包括多个单位存放区域，同一单位存放区域用于存放相同库存量单位SKU的货品；所述三维空间模型中保存的至少一件货品在所述仓库内对应的存放位置信息，还包括：所述至少一件货品在所述货架中的单位存放区域的位置信息；
则所述第二信息确定单元还可以用于：
根据所述三维空间模型确定所述目标存放对象在所述目标货架中的目标单位存放区域的位置；
所述视觉引导子单元还可以用于：
在所述目标单位存放区域出现在视域范围内时，在所述视域范围内所述目标单位存放区域所在位置提供可视化的提示信息。
与上述装置相对应，该实施例还提供了一种增强现实AR设备，参见图19，所述AR设备中包括前文所述的对仓库中存放的货品进行取货处理的装置。这种AR设备属于集屏显、存储、计算于一体的一体式AR设备。
另外，参见图20，该实施例还提供了一种移动终端设备，所述移动终端设备中包括前述对仓库中存放的货品进行取货处理的装置，所述移动终端设备用于与增强现实AR设备进行连接。这种AR设备属于仅提供屏显功能的AR设备。移动终端设备可以是手机等智能终端设备。
与实施例四相对应，本申请实施例还提供了一种对仓库中存放的货品进行取货处理的装置，该装置应用于服务器，参见图21，该装置可以包括：
第二模型生成单元2101，用于生成目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
第二模型提供单元2102，用于将所述三维空间模型的信息提供给客户端；
取货任务生成单元2103，用于接收到所述客户端提交的获取取货任务的请求后，生成取货任务，并派发给所述客户端，以便所述客户端根据服务器派发的取货任务确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
总之，通过本申请实施例，客户端可以预先获得目标存放空间内的三维空间模型，其中保存有存放对象在所述存放空间内的存放位置信息，这样，就可以在确定待处理的目标存放对象后，根据所述三维空间模型确定所述目标存放对象所在的目标存放位置，根据所述AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过AR设备在视域范围内的存放空间上提供对应的可视化的导航提示信息。也就是说，用户在进入到存放空间后，可以通过AR设备查看到“增强”的信息，这种信息为具有导航性质的提示信息，这样，直接按照导航提示信息进行行进即可找到目标存放对象，并完成取货任务。因此，用户不需要提前熟悉存放空间布局，也不需要记忆存放对象的存放位置等信息，因此，可以降低用户的学习成本。并且，通过导航提示信息，可以提高拣货等操作的实现效率以及准确度。
通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上对本申请所提供的提供存放对象提示信息的方法及装置，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处。综上所述，本说明书内容不应理解为对本申请的限制。

Claims (32)

1.一种提供存放对象提示信息的方法，其特征在于，所述方法包括：
客户端获得目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
确定目标存放对象，并根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置；
根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
2.根据权利要求1所述的方法，其特征在于，所述通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息，包括：
通过所述AR设备在视域范围内的存放空间地面上提供可视化的行进方向信息。
3.根据权利要求1所述的方法，其特征在于，所述通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息，包括：
当所述目标存放位置出现在视域范围内时，在视域范围内的存放空间中提供可视化的目标存放位置的提示信息。
4.根据权利要求3所述的方法，其特征在于，所述存放空间中包括多个货架，所述三维空间模型中保存的至少一个存放对象在所述存放空间内对应的存放位置信息，包括：所述至少一个存放对象所在的货架的位置信息；
所述根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置，包括：
根据所述三维空间模型确定所述目标存放对象所在的目标货架的位置；
所述在视域范围内的存放空间中提供可视化的目标存放位置的提示信息，包括：
在所述目标货架出现在所述视域范围内时，在所述视域范围内所述目标货架所在的位置提供可视化的提示信息。
5.根据权利要求4所述的方法，其特征在于，所述存放空间中的每个货架中包括多个单位存放区域，同一单位存放区域用于存放相同库存量单位SKU的存放对象；
所述三维空间模型中保存的至少一个存放对象在所述存放空间内对应的存放位置信息，还包括：所述至少一个存放对象在所述货架中的单位存放区域的位置信息；
所述根据所述三维空间模型确定所述目标存放对象所在的目标存放位置，还包括：
根据所述三维空间模型确定所述目标存放对象在所述目标货架中的目标单位存放区域的位置；
所述在视域范围内的存放空间中提供可视化的目标存放位置的提示信息，还包括：
在所述目标单位存放区域出现在视域范围内时，在所述视域范围内所述目标单位存放区域所在位置提供可视化的提示信息。
6.根据权利要求4或5所述的方法，其特征在于，还包括：
在所述视域范围内，提供可视化的货架标识的提示信息。
7.根据权利要求5所述的方法，其特征在于，还包括：
在所述视域范围内，提供可视化的货架上存放的存放对象的提示信息。
8.根据权利要求1所述的方法，其特征在于，在提供所述可视化的导航提示信息时，还包括：
通过所述AR设备在视域范围内的存放空间上提供关于所述目标存放对象库存数量信息的提示信息。
9.根据权利要求1所述的方法，其特征在于，还包括：
通过所述AR设备在视域范围内的存放空间上提供可视化的辅助信息；其中，所述辅助信息包括任务列表信息、任务处理进程和/或任务处理时间信息。
10.根据权利要求9所述的方法，其特征在于，所述通过所述AR设备在视域范围内的存放空间上提供可视化的辅助信息，包括：
在视域范围内存放空间的侧边区域提供所述辅助信息。
11.根据权利要求10所述的方法，其特征在于，还包括：
在所述AR设备行进过程中，将所述侧边区域的所述辅助信息移至视域范围外。
12.根据权利要求11所述的方法，其特征在于，还包括：
在检测到用户视线向侧边区域对焦的事件时，将所述侧边区域的所述辅助信息移至视域范围内。
13.根据权利要求1所述的方法，其特征在于，所述确定目标存放对象包括：
向服务器发送获取取货任务的请求；
接收服务器分配的取货任务，根据取货任务中包括的存放对象信息，确定所述待处理的目标存放对象。
14.根据权利要求13所述的方法，其特征在于，所述取货任务中包括多个存放对象时，确定出的目标存放对象为多个；
所述根据所述AR设备所在的位置信息以及所述目标存放位置，计算导航线路，包括：
根据所述AR设备所在的位置信息以及各个目标存放对象所在的目标存放位置，确定各目标存放对象的处理顺序；
按照所述处理顺序，提供从当前所在位置到第一个目标存放对象的导航线路，以及后续各目标存放对象之间的导航线路。
15.根据权利要求1所述的方法，其特征在于，还包括：
在检测到存放对象从其存放位置被取下的事件时，对所述被取下的存放对象进行识别；
通过所述AR设备提供该存放对象的详情信息，并判断所述被取下的存放对象是否为当前任务中的目标存放对象；
如果是，则通过所述AR设备提供成功提示信息，否则通过所述AR设备提供出错提示信息。
16.一种提供存放对象提示信息的方法，其特征在于，包括：
服务器生成目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
将所述三维空间模型的信息提供给客户端，以便所述客户端在确定目标存放对象后，根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，并在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
17.根据权利要求16所述的方法，其特征在于，还包括：
接收客户端发送的获取取货任务的请求；
向所述客户端派发取货任务，所述取货任务中包括至少一个存放对象的信息，以便所述客户端根据所述取货任务确定所述目标存放对象。
18.根据权利要求17所述的方法，其特征在于，还包括：
接收所述客户端提交的目标存放对象被成功处理的通知消息；
根据所述通知消息，更新所述目标存放对象的库存信息。
19.一种对仓库中存放的货品进行取货处理的方法，其特征在于，所述方法包括：
客户端获得目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
向服务器发送获取取货任务的请求；
根据服务器派发的取货任务，确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置；
根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
20.一种对仓库中存放的货品进行取货处理的方法，其特征在于，包括：
服务器生成目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
将所述三维空间模型的信息提供给客户端；
接收到所述客户端提交的获取取货任务的请求后，生成取货任务，并派发给所述客户端，以便所述客户端根据服务器派发的取货任务确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
21.一种提供存放对象提示信息的装置，其特征在于，应用于客户端，所述装置包括：
第一模型获得单元，用于获得目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
第一信息确定单元，用于确定目标存放对象，并根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置；
第一导航线路计算单元，用于根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
第一导航提示信息提供单元，用于在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
22.一种增强现实AR设备，其特征在于，所述AR设备中包括权利要求21所述的提供存放对象提示信息的装置。
23.一种移动终端设备，其特征在于，所述移动终端设备中包括权利要求21所述的提供存放对象提示信息的装置，所述移动终端设备用于与增强现实AR设备进行连接。
24.一种提供存放对象提示信息的装置，其特征在于，应用于服务器，包括：
第一模型生成单元，用于生成目标存放空间内的三维空间模型，所述三维空间模型中保存有至少一个存放对象在所述存放空间内对应的存放位置信息；
第一模型提供单元，用于将所述三维空间模型的信息提供给客户端，以便所述客户端在确定目标存放对象后，根据所述三维空间模型，确定所述目标存放对象所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，并在所述AR设备行进过程中，通过所述AR设备在视域范围内的存放空间上提供对应的可视化导航提示信息。
25.一种对仓库中存放的货品进行取货处理的装置，其特征在于，应用于客户端，包括：
第二模型获得单元，用于获得目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
任务请求单元，用于向服务器发送获取取货任务的请求；
第二信息确定单元，用于根据服务器派发的取货任务，确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置；
第二导航线路计算单元，用于根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路；
第二导航提示信息提供单元，用于在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
26.根据权利要求25所述的装置，其特征在于，所述第二导航提示信息提供单元包括：
地面引导子单元，用于通过所述AR设备在视域范围内的仓库地面上提供可视化的行进方向信息。
27.根据权利要求25所述的装置，其特征在于，所述第二导航提示信息提供单元包括：
视觉引导子单元，用于当所述目标存放位置出现在视域范围内时，在视域范围内的仓库中提供可视化的目标存放位置的提示信息。
28.根据权利要求27所述的装置，其特征在于，所述仓库中包括多个货架，所述三维空间模型中保存的至少一件货品在所述仓库内对应的存放位置信息，包括：所述至少一件货品所在的货架的位置信息；
所述第二信息确定单元具体用于：
根据所述三维空间模型确定所述目标存放对象所在的目标货架的位置；
所述视觉引导子单元具体用于：
在所述目标货架出现在所述视域范围内时，在所述视域范围内所述目标货架所在的位置提供可视化的提示信息。
29.根据权利要求28所述的装置，其特征在于，所述仓库中的每个货架中包括多个单位存放区域，同一单位存放区域用于存放相同库存量单位SKU的货品；
所述三维空间模型中保存的至少一件货品在所述仓库内对应的存放位置信息，还包括：所述至少一件货品在所述货架中的单位存放区域的位置信息；
所述第二信息确定单元还用于：
根据所述三维空间模型确定所述目标存放对象在所述目标货架中的目标单位存放区域的位置；
所述视觉引导子单元还用于：
在所述目标单位存放区域出现在视域范围内时，在所述视域范围内所述目标单位存放区域所在位置提供可视化的提示信息。
30.一种增强现实AR设备，其特征在于，所述AR设备中包括权利要求25至29任一项所述的对仓库中存放的货品进行取货处理的装置。
31.一种移动终端设备，其特征在于，所述移动终端设备中包括权利要求25至29任一项所述的对仓库中存放的货品进行取货处理的装置，所述移动终端设备用于与增强现实AR设备进行连接。
32.一种对仓库中存放的货品进行取货处理的装置，其特征在于，应用于服务器，包括：
第二模型生成单元，用于生成目标仓库内的三维空间模型，所述三维空间模型中保存有至少一件货品在所述目标仓库内对应的存放位置信息；
第二模型提供单元，用于将所述三维空间模型的信息提供给客户端；
取货任务生成单元，用于接收到所述客户端提交的获取取货任务的请求后，生成取货任务，并派发给所述客户端，以便所述客户端根据服务器派发的取货任务确定目标货品，并根据所述三维空间模型，确定所述目标货品所在的目标存放位置，根据AR设备所在的位置信息以及所述目标存放位置，计算导航线路，在所述AR设备行进过程中，通过所述AR设备在视域范围内的仓库中提供对应的可视化导航提示信息，以便按照所述导航提示信息对所述目标货品进行取货处理。
CN201610892067.XA 2016-10-12 2016-10-12 提供存放对象提示信息的方法及装置 Pending CN107944781A (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201610892067.XA CN107944781A (zh) 2016-10-12 2016-10-12 提供存放对象提示信息的方法及装置
TW106126276A TW201814658A (zh) 2016-10-12 2017-08-03 提供存放物件提示資訊的方法及裝置
US15/720,195 US11361270B2 (en) 2016-10-12 2017-09-29 Method and system for providing information of stored object
SG11201903107SA SG11201903107SA (en) 2016-10-12 2017-09-29 Method and system for providing information of stored object
PCT/US2017/054313 WO2018071204A1 (en) 2016-10-12 2017-09-29 Method and system for providing information of stored object
AU2017343482A AU2017343482B2 (en) 2016-10-12 2017-09-29 Method and system for providing information of stored object

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610892067.XA CN107944781A (zh) 2016-10-12 2016-10-12 提供存放对象提示信息的方法及装置

Publications (1)

Publication Number Publication Date
CN107944781A true CN107944781A (zh) 2018-04-20

Family

ID=61828969

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610892067.XA Pending CN107944781A (zh) 2016-10-12 2016-10-12 提供存放对象提示信息的方法及装置

Country Status (6)

Country Link
US (1) US11361270B2 (zh)
CN (1) CN107944781A (zh)
AU (1) AU2017343482B2 (zh)
SG (1) SG11201903107SA (zh)
TW (1) TW201814658A (zh)
WO (1) WO2018071204A1 (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108960440A (zh) * 2018-05-31 2018-12-07 国网福建省电力有限公司 一种基于vr技术的电力物资比对方法
CN109902999A (zh) * 2019-03-07 2019-06-18 江苏电力信息技术有限公司 一种基于ar技术的电力物资智能盘点的方法
CN110207701A (zh) * 2019-04-16 2019-09-06 北京旷视科技有限公司 室内导航的方法、装置、终端设备及计算机存储介质
CN110909633A (zh) * 2019-11-07 2020-03-24 浙江大华技术股份有限公司 堆积程度的确定方法及装置、存储介质、电子装置
CN111127662A (zh) * 2019-12-26 2020-05-08 北京每日优鲜电子商务有限公司 基于增强现实的显示方法、装置、终端及存储介质
CN111210183A (zh) * 2020-01-08 2020-05-29 秒针信息技术有限公司 一种商品播种方法和装置
CN111207751A (zh) * 2020-01-16 2020-05-29 昆山捷亿诺自动化科技有限公司 基于uwb定位和ar技术的仓库导航系统及导航方法
CN111814828A (zh) * 2020-06-08 2020-10-23 珠海格力电器股份有限公司 智能空间规划方法、装置、设备及存储介质
CN112131894A (zh) * 2019-06-24 2020-12-25 北京京东振世信息技术有限公司 分拣物品的方法、系统、眼镜、设备和计算机可读介质
CN112122139A (zh) * 2019-06-25 2020-12-25 北京京东振世信息技术有限公司 头戴式辅助拣货的装置以及拣货方法
CN112150607A (zh) * 2020-09-03 2020-12-29 长城汽车股份有限公司 车辆空间的获取方法和装置、电子设备、存储介质
CN112330255A (zh) * 2020-11-20 2021-02-05 重庆电子工程职业学院 仓库管理系统
CN113011813A (zh) * 2021-02-24 2021-06-22 江苏安方电力科技有限公司 一种用于电力物资柔性化仓位分配方法
CN113408992A (zh) * 2021-06-30 2021-09-17 广东利元亨智能装备股份有限公司 一种物料信息提示方法、装置、电子设备及存储介质
CN116823123A (zh) * 2023-08-30 2023-09-29 青岛宇方机器人工业股份有限公司 基于ar定位的仓库管理方法、装置、电子设备及介质
WO2023197727A1 (zh) * 2022-04-12 2023-10-19 北京京东乾石科技有限公司 一种任务处理方法和装置
CN111814828B (zh) * 2020-06-08 2024-05-03 珠海格力电器股份有限公司 智能空间规划方法、装置、设备及存储介质

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10685324B2 (en) * 2017-05-19 2020-06-16 Hcl Technologies Limited Method and system for optimizing storage and retrieval of a stock keeping unit (SKU)
WO2019028401A1 (en) * 2017-08-04 2019-02-07 Walmart Apollo, Llc SYSTEM AND METHOD FOR INCREASED REALITY LOADING
CN108537518A (zh) * 2018-04-25 2018-09-14 河南聚合科技有限公司 一种基于云平台的智慧仓储与物流供应管理系统
CN108510828A (zh) * 2018-05-23 2018-09-07 清华大学 一种仓储和库存管理的实验系统及其构建方法
CN109271565A (zh) * 2018-08-30 2019-01-25 上海与德科技有限公司 储物信息处理方法、电子设备以及计算机可读存介质
CN111259091A (zh) * 2018-11-30 2020-06-09 中兴通讯股份有限公司 一种物品提示方法、装置、设备及计算机可读介质
CN109675813A (zh) * 2019-01-14 2019-04-26 中山大学南方学院 智能物流分拣系统
CN109708646B (zh) * 2019-03-04 2022-10-14 深圳市丰巢科技有限公司 一种快递柜寻找方法、装置、设备及存储介质
CN111178579A (zh) * 2019-11-26 2020-05-19 恒大智慧科技有限公司 智慧社区内自动导航方法、计算机设备及可读存储介质
US11922467B2 (en) * 2020-08-17 2024-03-05 ecoATM, Inc. Evaluating an electronic device using optical character recognition
CN114445502A (zh) 2020-11-06 2022-05-06 财团法人工业技术研究院 多摄影机定位调度系统及方法
US11715297B2 (en) * 2020-12-03 2023-08-01 Accenture Global Solutions Limited Utilizing computer vision and machine learning models for determining utilization metrics for a space
US20230140194A1 (en) * 2021-10-28 2023-05-04 Ncr Corporation Augmented reality (ar) self checkout attendant
US11816635B1 (en) * 2022-09-07 2023-11-14 David Paul Winter System and methods of three-dimensional projection mapping-based visual guidance for order fulfillment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101578062A (zh) * 2007-08-20 2009-11-11 株式会社石田 电子货架标签和电子货架标签系统
US20100121480A1 (en) * 2008-09-05 2010-05-13 Knapp Systemintegration Gmbh Method and apparatus for visual support of commission acts
US20140172640A1 (en) * 2012-12-19 2014-06-19 Wal-Mart Stores, Inc. Augmented reality shopping game
US20150170256A1 (en) * 2008-06-05 2015-06-18 Aisle411, Inc. Systems and Methods for Presenting Information Associated With a Three-Dimensional Location on a Two-Dimensional Display

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US282696A (en) * 1883-08-07 dudley
US7126558B1 (en) 2001-10-19 2006-10-24 Accenture Global Services Gmbh Industrial augmented reality
WO2006124762A2 (en) 2005-05-13 2006-11-23 Ems Technologies, Inc. Tine-mounted antenna for an rfid system
US20070035563A1 (en) 2005-08-12 2007-02-15 The Board Of Trustees Of Michigan State University Augmented reality spatial interaction and navigational system
US20070142961A1 (en) 2005-12-21 2007-06-21 Caterpillar Inc. System and method for providing visual aids
US9344612B2 (en) * 2006-02-15 2016-05-17 Kenneth Ira Ritchey Non-interference field-of-view support apparatus for a panoramic facial sensor
US8626611B2 (en) * 2008-01-11 2014-01-07 Ncr Corporation Method and apparatus for augmented reality shopping assistant
US20090307265A1 (en) * 2008-06-06 2009-12-10 Exel Inc. Method of operating a warehouse
JP5104679B2 (ja) 2008-09-11 2012-12-19 ブラザー工業株式会社 ヘッドマウントディスプレイ
US9569001B2 (en) 2009-02-03 2017-02-14 Massachusetts Institute Of Technology Wearable gestural interface
US20150309316A1 (en) * 2011-04-06 2015-10-29 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
US20140063054A1 (en) * 2010-02-28 2014-03-06 Osterhout Group, Inc. Ar glasses specific control interface based on a connected external device type
US8639440B2 (en) * 2010-03-31 2014-01-28 International Business Machines Corporation Augmented reality shopper routing
JP5334145B1 (ja) * 2012-06-29 2013-11-06 トーヨーカネツソリューションズ株式会社 物品のピッキング作業の支援システム
US20140195302A1 (en) * 2013-01-10 2014-07-10 Oracle International Corporation Guided walkthrough provider
US9824384B2 (en) * 2013-01-23 2017-11-21 Wal-Mart Stores, Inc. Techniques for locating an item to purchase in a retail environment
US20140279294A1 (en) * 2013-03-14 2014-09-18 Nordstrom, Inc. System and methods for order fulfillment, inventory management, and providing personalized services to customers
JP6393986B2 (ja) * 2013-12-26 2018-09-26 セイコーエプソン株式会社 頭部装着型表示装置、画像表示システム、および、頭部装着型表示装置の制御方法
US9632313B1 (en) 2014-03-27 2017-04-25 Amazon Technologies, Inc. Augmented reality user interface facilitating fulfillment
EP3152727A4 (en) * 2014-06-07 2017-12-06 Harman International Industries, Incorporated Realtime realworld and online activity correlation and inventory management apparatuses, methods and systems
US20160063429A1 (en) 2014-08-28 2016-03-03 Symbol Technologies, Inc. Apparatus and method for performing an item picking process
US9443222B2 (en) 2014-10-14 2016-09-13 Hand Held Products, Inc. Identifying inventory items in a storage facility
IL236243A (en) * 2014-12-14 2016-08-31 Elbit Systems Ltd Visual enhancement of color icons is shown
US10108832B2 (en) 2014-12-30 2018-10-23 Hand Held Products, Inc. Augmented reality vision barcode scanning system and method
US20160300179A1 (en) * 2015-04-13 2016-10-13 Real Picking, LLC Holographic picking system and method for picking products utilizing a holographic picking system
JP2017048024A (ja) 2015-09-03 2017-03-09 株式会社東芝 メガネ型ウエアラブル端末およびこの端末を用いるピッキング方法
CA3011257C (en) * 2016-01-12 2020-03-31 Esight Corp. Language element vision augmentation methods and devices
KR102355455B1 (ko) * 2016-06-20 2022-01-24 매직 립, 인코포레이티드 시각적 프로세싱 및 지각 상태들을 포함하는 신경학적 상태들의 평가 및 수정을 위한 증강 현실 디스플레이 시스템
US10078916B2 (en) * 2016-07-01 2018-09-18 Invia Robotics, Inc. Pick to augmented reality

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101578062A (zh) * 2007-08-20 2009-11-11 株式会社石田 电子货架标签和电子货架标签系统
US20150170256A1 (en) * 2008-06-05 2015-06-18 Aisle411, Inc. Systems and Methods for Presenting Information Associated With a Three-Dimensional Location on a Two-Dimensional Display
US20100121480A1 (en) * 2008-09-05 2010-05-13 Knapp Systemintegration Gmbh Method and apparatus for visual support of commission acts
US20140172640A1 (en) * 2012-12-19 2014-06-19 Wal-Mart Stores, Inc. Augmented reality shopping game

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108960440A (zh) * 2018-05-31 2018-12-07 国网福建省电力有限公司 一种基于vr技术的电力物资比对方法
CN109902999A (zh) * 2019-03-07 2019-06-18 江苏电力信息技术有限公司 一种基于ar技术的电力物资智能盘点的方法
CN110207701A (zh) * 2019-04-16 2019-09-06 北京旷视科技有限公司 室内导航的方法、装置、终端设备及计算机存储介质
CN112131894A (zh) * 2019-06-24 2020-12-25 北京京东振世信息技术有限公司 分拣物品的方法、系统、眼镜、设备和计算机可读介质
CN112131894B (zh) * 2019-06-24 2023-11-03 北京京东振世信息技术有限公司 分拣物品的方法、系统、眼镜、设备和计算机可读介质
CN112122139B (zh) * 2019-06-25 2023-12-05 北京京东振世信息技术有限公司 头戴式辅助拣货的装置以及拣货方法
CN112122139A (zh) * 2019-06-25 2020-12-25 北京京东振世信息技术有限公司 头戴式辅助拣货的装置以及拣货方法
CN110909633A (zh) * 2019-11-07 2020-03-24 浙江大华技术股份有限公司 堆积程度的确定方法及装置、存储介质、电子装置
CN110909633B (zh) * 2019-11-07 2022-08-16 浙江大华技术股份有限公司 堆积程度的确定方法及装置、存储介质、电子装置
CN111127662A (zh) * 2019-12-26 2020-05-08 北京每日优鲜电子商务有限公司 基于增强现实的显示方法、装置、终端及存储介质
CN111210183A (zh) * 2020-01-08 2020-05-29 秒针信息技术有限公司 一种商品播种方法和装置
CN111207751A (zh) * 2020-01-16 2020-05-29 昆山捷亿诺自动化科技有限公司 基于uwb定位和ar技术的仓库导航系统及导航方法
CN111814828A (zh) * 2020-06-08 2020-10-23 珠海格力电器股份有限公司 智能空间规划方法、装置、设备及存储介质
CN111814828B (zh) * 2020-06-08 2024-05-03 珠海格力电器股份有限公司 智能空间规划方法、装置、设备及存储介质
CN112150607A (zh) * 2020-09-03 2020-12-29 长城汽车股份有限公司 车辆空间的获取方法和装置、电子设备、存储介质
CN112330255B (zh) * 2020-11-20 2023-09-15 重庆电子工程职业学院 仓库管理系统
CN112330255A (zh) * 2020-11-20 2021-02-05 重庆电子工程职业学院 仓库管理系统
CN113011813A (zh) * 2021-02-24 2021-06-22 江苏安方电力科技有限公司 一种用于电力物资柔性化仓位分配方法
CN113408992A (zh) * 2021-06-30 2021-09-17 广东利元亨智能装备股份有限公司 一种物料信息提示方法、装置、电子设备及存储介质
WO2023197727A1 (zh) * 2022-04-12 2023-10-19 北京京东乾石科技有限公司 一种任务处理方法和装置
CN116823123A (zh) * 2023-08-30 2023-09-29 青岛宇方机器人工业股份有限公司 基于ar定位的仓库管理方法、装置、电子设备及介质
CN116823123B (zh) * 2023-08-30 2023-12-05 青岛宇方机器人工业股份有限公司 基于ar定位的仓库管理方法、装置、电子设备及介质

Also Published As

Publication number Publication date
AU2017343482B2 (en) 2020-07-23
US20180101810A1 (en) 2018-04-12
US11361270B2 (en) 2022-06-14
AU2017343482A1 (en) 2019-04-18
TW201814658A (zh) 2018-04-16
WO2018071204A1 (en) 2018-04-19
SG11201903107SA (en) 2019-05-30

Similar Documents

Publication Publication Date Title
CN107944781A (zh) 提供存放对象提示信息的方法及装置
US10692231B1 (en) Composite agent representation
US11494830B1 (en) Determining an item involved in an event at an event location
US11138559B2 (en) System and method for dynamic inventory management
US20230214768A1 (en) Detecting inventory changes
EP3436880B1 (en) Navigation using planned robot travel paths
US10163149B1 (en) Providing item pick and place information to a user
US10475185B1 (en) Associating a user with an event
US10943285B1 (en) Updating cart state using auto-generated sensor data
US10552750B1 (en) Disambiguating between multiple users
US11875570B1 (en) Updating agent position information
US11328513B1 (en) Agent re-verification and resolution using imaging
US11663742B1 (en) Agent and event verification
US11880779B1 (en) Generating event results using auto-generated sensor data
US11068962B1 (en) Updating cart state using auto-generated sensor data
CN113205294A (zh) 一种货物盘点方法及系统
US11615460B1 (en) User path development
US11842321B1 (en) Image-based detection of planogram product spaces
US11810362B1 (en) Image-based detection of planogram product spaces
KR20230038877A (ko) 미러월드 메타버스 공간 내 사물배치 동기화 구현 방법 및 시스템
CN110264293A (zh) 匹配程度的确定方法、装置和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1254225

Country of ref document: HK

RJ01 Rejection of invention patent application after publication

Application publication date: 20180420

RJ01 Rejection of invention patent application after publication