CN110490515A - 无人便利店货架物品检测方法、装置、计算机及存储介质 - Google Patents

无人便利店货架物品检测方法、装置、计算机及存储介质 Download PDF

Info

Publication number
CN110490515A
CN110490515A CN201910708629.4A CN201910708629A CN110490515A CN 110490515 A CN110490515 A CN 110490515A CN 201910708629 A CN201910708629 A CN 201910708629A CN 110490515 A CN110490515 A CN 110490515A
Authority
CN
China
Prior art keywords
article
shelf
newly
increased
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201910708629.4A
Other languages
English (en)
Inventor
梁志聪
宋子杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Weaving Point Intelligent Technology Co Ltd
Original Assignee
Guangzhou Weaving Point Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Weaving Point Intelligent Technology Co Ltd filed Critical Guangzhou Weaving Point Intelligent Technology Co Ltd
Priority to CN201910708629.4A priority Critical patent/CN110490515A/zh
Publication of CN110490515A publication Critical patent/CN110490515A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01G—WEIGHING
    • G01G19/00—Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups
    • G01G19/62—Over or under weighing apparatus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G06Q30/0635—Processing of requisition or of purchase orders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/24—Reminder alarms, e.g. anti-loss alarms

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Emergency Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Operations Research (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本申请实施例公开了无人便利店货架物品检测方法、装置、计算机及存储介质。本申请实施例提供的技术方案，通过对货架上物品的重量进行检测，在用户往货架放回物品而导致货架增重时，通过摄像头获取货架的画面并进行物品识别，在新增物品与货架上的原有物品为同一类型时，则对库存信息和用户虚拟购物清单进行更新，否则提示物品错放，以提醒用户或管理员及时将错放的物品放回合适的位置，减少货架物品统计出错的情况。

Description

无人便利店货架物品检测方法、装置、计算机及存储介质
技术领域
本申请实施例涉及计算机技术领域，尤其涉及无人便利店货架物品检测方法、装置、计算机及存储介质。
背景技术
本部分旨在为权利要求书中陈述的本申请的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
随着科技的发展，无人便利店应运而生。无人便利店通常指用户在购物过程中全程无需服务人员的参与即可完成物品的购买。用户进入无人便利店后，进行物品的自主选购，物品选择完毕后可自行进行物品的结算。
在用户进店购物的过程中，存在拿起物品后又放回货架的情况，在用户将物品放回货架后，会将该物品添加进货架物品统计中，若用户放回的位置不是原先取出物品的位置，会导致货架物品统计出现错误的情况。
发明内容
本申请实施例提供无人便利店货架物品检测方法、装置、计算机及存储介质，对购物过程中物品错放的情况进行提醒，减少货架物品统计出错的情况。
在第一方面，本申请实施例提供了无人便利店货架物品检测方法，包括：
在检测到货架增重时，对所述货架上的新增物品进行物品识别；
根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型；
若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新；
若新增物品与所述货架上的原有物品为不同类型，则提示物品错放。
进一步的，所述在检测到货架增重时，对所述货架上的新增物品进行物品识别包括：
实时监测货架上用于检测物品重量的重量检测装置输出的重量检测信号；
根据所述重量检测信号的变化判断货架是否增重；
在检测到货架增重时，开启所述货架处的物品识别装置对所述货架上的新增物品进行物品识别。
进一步的，所述物品识别装置包括摄像头，用于获取货架上的物品放置区域的画面。
进一步的，所述根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型包括：
根据物品识别的结果确定新增物品的物品类型；
获取所述货架上的原有物品的物品类型；
将新增物品的物品类型与所述货架上的原有物品的物品类型进行对比，以判断新增物品与货架上的原有物品是否为同一类型。
进一步的，所述若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新包括：
若新增物品与所述货架上的原有物品为同一类型，则根据新增物品在库存信息中进行库存增加，并在用户虚拟购物清单中减去对应物品。
进一步的，所述若新增物品与所述货架上的原有物品为不同类型，则提示物品错放包括：
若新增物品与所述货架上的原有物品为不同类型，则根据新增物品在用户虚拟购物清单中减去对应物品，并对预设对象进行物品错放提示。
进一步的，在对用户虚拟购物清单进行更新前，还包括：
获取店内设置的多路摄像装置的视频信息；
根据所述视频信息对用户进行跟踪；
在检测到货架增重时，根据所述货架所在位置和跟踪情况定位放回物品的用户。
在第二方面，本申请实施例提供了无人便利店货架物品检测装置，包括：
物品识别模块，用于在检测到货架增重时，对所述货架上的新增物品进行物品识别；
类型识别模块，用于根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型；
更新模块，用于在新增物品与所述货架上的原有物品为同一类型时，根据新增物品对库存信息和用户虚拟购物清单进行更新；
提示模块，用于在新增物品与所述货架上的原有物品为不同类型时，提示物品错放。
在第三方面，本申请实施例提供了一种计算机，包括：输入装置、输出装置、存储器以及一个或多个处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面所述的无人便利店货架物品检测方法。
在第四方面，本申请实施例提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的无人便利店货架物品检测方法。
本申请实施例通过对货架上物品的重量进行检测，在用户往货架放回物品而导致货架增重时，通过摄像头获取货架的画面并进行物品识别，在新增物品与货架上的原有物品为同一类型时，则对库存信息和用户虚拟购物清单进行更新，否则提示物品错放，以提醒用户或管理员及时将错放的物品放回合适的位置，减少货架物品统计出错的情况。
附图说明
图1是本申请实施例提供的无人便利店货架物品检测方法；
图2是本申请实施例提供的另一种无人便利店货架物品检测方法；
图3是本申请实施例提供的另一种无人便利店货架物品检测方法；
图4是本申请实施例提供的无人便利店货架物品检测装置的结构示意图；
图5是本申请实施例提供的一种计算机的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚，下面结合附图对本申请具体实施例作进一步的详细描述。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
图1给出了本申请实施例提供的无人便利店货架物品检测方法的流程图，本申请实施例可用于无人便利店，该无人便利店货架物品检测方法可以由无人便利店货架物品检测装置来执行，该无人便利店货架物品检测装置可通过硬件和/或软件的方式实现，并集成在计算机中。
一般的，在无人便利店的入口处设置有入口门禁(如闸机)，用户可通过入口门禁进入无人便利店内进行物品选择。在便利店内设置有多个用于放置物品的货架，用户可在货架上展示的物品中进行物品的选择。进一步的，在入口门禁处设置有人脸识别装置，该人脸识别装置通过摄像装置获取入口门禁前的画面，并根据获取的画面进行人脸识别并获取人脸特征。示例性的，入口门禁在识别出人脸时，判断识别出的人脸的大小以及停留时间，在识别出的人脸大小超过预设面积阈值并且停留时间超过预设时间阈值时，认为对应用户需要进店购物，输出的人脸识别结果为识别到需要进店的用户。
进一步的，在人脸识别结果为识别到需要进店的用户时，为该用户创建虚拟ID并生成与该建虚拟ID绑定的虚拟购物清单，其中虚拟购物清单用于记录当前用户所选购的物品以及所选购物品对应的数量。
下述以无人便利店货架物品检测装置来执行无人便利店货架物品检测方法为例进行描述。参考图1，该无人便利店货架物品检测方法包括：
S101：在检测到货架增重时，对所述货架上的新增物品进行物品识别。
具体的，在货架上设置有重量检测装置，用于检测货架上的货物的重量，并输出反映货架上的物品重量的重量信息。重量检测装置可以是设置在货架上的重量传感器，通过检测物品托盘的形变量确定其上物品的重量，还可以用电子秤作为重量检测装置，对放置于其上物品的重量进行检测。根据重量检测装置输出的重量信息，对货架物品重量变化情况进行跟踪，在货架上物品增加的重量累计达到预设变化量时，认为货架上有新增物品。可以理解的是，在货架上物品减小的重量达到预设的减小量时，认为货架或重量检测装置上有物品被取走。
进一步的，不同位置的重量检测装置与对应位置放置物品的类型信息相互绑定。一般的，一个重量检测装置对应一种物品的物品类型，一种物品的物品类型可与多个重量检测装置绑定。可以理解的是，重量检测装置与物品类型的绑定关系可根据物品的摆放位置具体设置。
根据重量检测装置输出的重量信息，对货架物品重量变化情况进行跟踪，在货架上物品减少的重量累计达到预设变化量时，认为货架上的物品被取走。在确认货架上的物品被取走时，根据对应重量检测装置所绑定物品的物品类型，在当前用户对应的虚拟购物车清单中添加对应数量的物品。
进一步的，物品识别装置包括摄像头，用于获取货架上的物品放置区域的画面。其中摄像头的设置可与重量检测装置一一对应设置，还可一个摄像头对应同一区域的多个重量检测装置。可以理解的是，同一物品放置区域可设置多个摄像头，从不同角度共同对物品进行物品识别。
示例性的，在获取摄像头回传的画面信息后，对画面信息进行检测，以识别出画面信息中的新增物品。具体的，确定新增物品的方法可以是通过将采集的画面信息与背景信息进行对比，从而得出画面信息中的新增物品并获取画面中新增物品的特征信息。
S102：根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型。
具体的，根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型包括：根据物品识别的结果确定新增物品的物品类型；获取所述货架上的原有物品的物品类型；将新增物品的物品类型与所述货架上的原有物品的物品类型进行对比，以判断新增物品与货架上的原有物品是否为同一类型。
示例性的，将画面中新增物品的特征信息与物品特征库中的物品特征信息进行比对匹配，若匹配成功，则确定新增物品的物品类型与对应数量。新增物品的数量的确定可通过新增物品的面积与物品特征库中对应物品的单体面积的关系对比得出，其中背景信息由对应位置的摄像头拍摄得出，并在预设时间间隔和/或重量检测装置上有物品被取走时进行背景信息的刷新。物品特征库中保存有各物品的物品特征信息，物品特征信息可根据情况在物品特征库中进行新增、删除或编辑。
进一步的，根据重量检测装置与物品类型的对应关系，获取重量增加的重量检测装置对应的物品类型，从而获取货架上的原有物品的物品类型，如将重量检测装置与物品类型的对应关系记录在位置对照表中，根据重量检测装置的编号可从位置对照表中对应出重量检测装置所对应放置物品的物品类型。
将新增物品的物品类型与货架上的原有物品的物品类型进行对比，在新增物品的物品类型与货架上的原有物品的物品类型一致时，认为新增物品与货架上的原有物品为同一类型。
S103：若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新。
具体的，在新增物品与货架上的原有物品为同一类型时，根据新增物品的物品类型和数量在库存信息中对该类型物品的库存数量进行增加，并在用户虚拟购物清单中减去对应物品类型的数量，从而完成库存信息和用户虚拟购物清单的更新。
S104：若新增物品与所述货架上的原有物品为不同类型，则提示物品错放。
具体的，在新增物品与货架上的原有物品为不同类型时，提示物品错放，对用户或管理人员进行提醒，并根据新增物品在用户虚拟购物清单中减去对应物品类型的数量，对用户虚拟购物清单进行更新。
示例性的，提示物品错放的方式可通过短信/邮件/消息推送的方式进行提醒，还可在货架处设置显示屏，对物品放回的情况进行显示(如在新增物品与货架上的原有物品为同一类型时，则显示物品放回成功，否则显示物品放回错误)，还可通过在便利店内设置扬声器，在物品错放时，播放语音提示。另外用于提示物品错放的装置还可放置在管理人员处，实时对管理人员进行提醒。
上述，通过对货架上物品的重量进行检测，在用户往货架放回物品而导致货架增重时，通过摄像头获取货架的画面并进行物品识别，在新增物品与货架上的原有物品为同一类型时，则对库存信息和用户虚拟购物清单进行更新，否则提示物品错放，以提醒用户或管理员及时将错放的物品放回合适的位置，减少货架物品统计出错的情况。
在上述实施例的基础上，图2给出了本申请实施例提供的另一种无人便利店货架物品检测方法。该无人便利店货架物品检测方法是对上述无人便利店货架物品检测方法的具体化。参考图2，该无人便利店货架物品检测方法包括：
S201：实时监测货架上用于检测物品重量的重量检测装置输出的重量检测信号。
S202：根据所述重量检测信号的变化判断货架是否增重。
具体的，实时获取货架上的重量检测装置输出的重量检测信号，对重量检测信号的变化进行跟踪监测，从而对货架上物品的重量变化进行监测。其中一个重量检测装置输出的重量检测信号反映的是其上所放置的全部物品的总重量，并且每个重量检测装置输出的重量检测信号携带有可以验证其位置信息的识别信息(如编号、坐标信息等)。
示例性的，对每个重量检测装置输出的重量检测信号的变化量进行跟踪，在变化量达到预设变化值时，则判断货架增重。例如，设定预设变化值为1.6g，在重量检测装置上的物品未被取走前，其输出的重量检测信号反映的物品总重量为500g，其中单个物品的重量为25g，在其中一个物品被取走时，重量检测信号反映的物品总重量为475g，物品重量的变化量为25g，此时变化量超过预设变化值，确定货架增重，若物品重量的变化量小于1.6g，则认为货架并发生增重的情况。可以理解的是，还可设定一预设时间，在变化量达到预设变化值持续时间达到预设时间时，才确定货架增重。
S203：在检测到货架增重时，开启所述货架处的物品识别装置对所述货架上的新增物品进行物品识别。
具体的，在货架上物品的变化量达到预设变化值时，确定货架增重，并根据检测出增重的重量检测装置的位置或编号开启对应的物品识别装置，获取货架上的新增物品的画面信息，将画面信息回传并进行物品识别。本实施例中的物品识别装置为摄像头，物品识别装置与重量检测装置的位置或编号关联，并根据关联关系开启对应的物品识别装置。
在获取摄像头回传的画面信息后，对画面信息进行检测，以识别出画面信息中的新增物品。具体的，确定新增物品的方法可以是通过将采集的画面信息与背景信息进行对比，从而得出画面信息中的新增物品并获取画面中新增物品的特征信息。
S204：根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型。
S205：若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新。
S206：若新增物品与所述货架上的原有物品为不同类型，则提示物品错放。
上述，在对货架增重情况进行检测时，货架增重达到预设变化值时才对新增物品进行识别，确保正确识别出新增物品，提高货架物品统计的正确率。
图3为本申请实施例提供的另一种无人便利店货架物品检测方法。该无人便利店货架物品检测方法是对上述无人便利店货架物品检测方法的具体化。参考图3，该无人便利店货架物品检测方法包括：
S301：获取店内设置的多路摄像装置的视频信息。
S302：根据所述视频信息对用户进行跟踪。
具体的，在便利店内设置有多路摄像装置，对便利店内的购物区域进行覆盖监控，由多路摄像装置实时获取便利店内的画面生成视频信息。在获取视频信息后，对视频信息进行人脸识别从而识别出视频信息中的用户。在识别出用户后，对该用户的行动轨迹进行跟踪，从而生成用户的跟踪轨迹。
进一步的，若便利店内存在多个用户，则获取每个用户的跟踪轨迹，从视频信息中分别获取不同用户的人脸特征，并获取便利店内所有用户对应的虚拟ID，根据获取的虚拟ID从服务器中获取用户在注册时上传的人脸特征信息，并将视频信息中获取的人脸特征与服务器中获取人脸特征信息进行比对匹配，并根据匹配结果将跟踪轨迹与虚拟ID进行绑定。
S303：在检测到货架增重时，对所述货架上的新增物品进行物品识别，并根据所述货架所在位置和跟踪情况定位放回物品的用户。
具体的，在货架上物品的变化量达到预设变化值时，确定货架增重，根据检测出增重的重量检测装置的位置或编号开启对应的物品识别装置，获取货架上的新增物品的画面信息，将画面信息回传并进行物品识别。
在获取摄像头回传的画面信息后，对画面信息进行检测，以识别出画面信息中的新增物品。具体的，确定新增物品的方法可以是通过将采集的画面信息与背景信息进行对比，从而得出画面信息中的新增物品并获取画面中新增物品的特征信息。
进一步的，在检测到货架增重时，根据检测到重量变化的重量检测装置的位置，判断此时该重量检测装置或对应货架所在位置周围是否存在用户。具体的，根据反映跟踪情况的跟踪轨迹判断用户与对应重量检测装置或货架之间的相对距离，并判断相对距离是否在预设距离内，若是，则定位该用户为放回物品导致货架增重的用户。可以理解的是，若在预设距离内存在多个用户，则定位相对距离最小的用户为放回物品导致货架增重的用户。
S304：根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型。
S305：若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新。
具体的，在新增物品与货架上的原有物品为同一类型时，根据新增物品的物品类型和数量在库存信息中对该类型物品的库存数量进行增加。
并根据放回物品用户的定位情况，调取与该用户绑定的虚拟购物清单，并在该用户虚拟购物清单中减去对应物品类型的数量，从而完成库存信息和用户虚拟购物清单的更新。
S306：若新增物品与所述货架上的原有物品为不同类型，则提示物品错放。
具体的，在新增物品与货架上的原有物品为不同类型时，提示物品错放，对用户或管理人员进行提醒。并根据放回物品用户的定位情况，调取与该用户绑定的虚拟购物清单，并在该用户虚拟购物清单中减去对应物品类型的数量，对用户虚拟购物清单进行更新。
上述，根据货架所在位置和跟踪情况定位放回物品的用户，并对放回物品的用户的虚拟购物清单进行更新，减少在便利店内存在多名用户而导致虚拟购物清单更新出错的情况，优化客户体验。
在上述实施例的基础上，图4为本申请实施例提供的无人便利店货架物品检测装置的结构示意图。参考图4，本实施例提供的无人便利店货架物品检测装置包括物品识别模块41、类型识别模块42、更新模块43和提示模块44。
其中，物品识别模块41，用于在检测到货架增重时，对所述货架上的新增物品进行物品识别；类型识别模块42，用于根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型；更新模块43，用于在新增物品与所述货架上的原有物品为同一类型时，根据新增物品对库存信息和用户虚拟购物清单进行更新；提示模块44，用于在新增物品与所述货架上的原有物品为不同类型时，提示物品错放。
上述，通过对货架上物品的重量进行检测，在用户往货架放回物品而导致货架增重时，通过摄像头获取货架的画面并进行物品识别，在新增物品与货架上的原有物品为同一类型时，则对库存信息和用户虚拟购物清单进行更新，否则提示物品错放，以提醒用户或管理员及时将错放的物品放回合适的位置，减少货架物品统计出错的情况。
在一个可能的实施例中，物品识别模块41具体用于：
实时监测货架物品重量检测装置输出的重量检测信号；
根据所述重量检测信号的变化判断货架是否增重；
在检测到货架增重时，开启所述货架处的物品识别装置对所述货架上的新增物品进行物品识别。
在一个可能的实施例中，类型识别模块42具体用于：
根据物品识别的结果确定新增物品的物品类型；
获取所述货架上的原有物品的物品类型；
将新增物品的物品类型与所述货架上的原有物品的物品类型进行对比，以判断新增物品与货架上的原有物品是否为同一类型。
在一个可能的实施例中，该装置还包括用户定位模块，具体用于：
获取店内设置的多路摄像装置的视频信息；
根据所述视频信息对用户进行跟踪；
在检测到货架增重时，根据所述货架所在位置和跟踪情况定位放回物品的用户。
本申请实施例提供的无人便利店货架物品检测装置可以用于执行上述实施例提供的无人便利店货架物品检测方法，具备相应的功能和有益效果。
本申请实施例还提供了一种计算机，且该计算机可集成本申请实施例提供的无人便利店货架物品检测装置。图5是本申请实施例提供的一种计算机的结构示意图。参考图5，该计算机包括：输入装置53、输出装置54、存储器52以及一个或多个处理器51；所述存储器52，用于存储一个或多个程序；当所述一个或多个程序被所述一个或多个处理器51执行，使得所述一个或多个处理器51实现如上述实施例提供的无人便利店货架物品检测方法。其中输入装置53、输出装置54、存储器52和处理器51可以通过总线或者其他方式连接，图5中以通过总线连接为例。
存储器52作为一种计算设备可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本申请任意实施例所述的无人便利店货架物品检测方法对应的程序指令/模块(例如，无人便利店货架物品检测装置中的物品识别模块41、类型识别模块42、更新模块43和提示模块44)。存储器52可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据设备的使用所创建的数据等。此外，存储器52可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器52可进一步包括相对于处理器51远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置53可用于接收输入的数字或字符信息，以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置54可包括显示屏等显示设备。
处理器51通过运行存储在存储器52中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的无人便利店货架物品检测方法。
上述提供的无人便利店货架物品检测装置和计算机可用于执行上述实施例提供的无人便利店货架物品检测方法，具备相应的功能和有益效果。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如上述实施例提供的无人便利店货架物品检测方法，该无人便利店货架物品检测方法包括：在检测到货架增重时，对所述货架上的新增物品进行物品识别；根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型；若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新；若新增物品与所述货架上的原有物品为不同类型，则提示物品错放。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括：安装介质，例如CD-ROM、软盘或磁带装置；计算机系统存储器或随机存取存储器，诸如DRAM、DDR RAM、SRAM、EDO RAM，兰巴斯(Rambus)RAM等；非易失性存储器，诸如闪存、磁介质(例如硬盘或光存储)；寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外，存储介质可以位于程序在其中被执行的第一计算机系统中，或者可以位于不同的第二计算机系统中，第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的无人便利店货架物品检测方法，还可以执行本申请任意实施例所提供的无人便利店货架物品检测方法中的相关操作。
上述实施例中提供的无人便利店货架物品检测装置和计算机可执行本申请任意实施例所提供的无人便利店货架物品检测方法，未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的无人便利店货架物品检测方法。
上述仅为本申请的较佳实施例及所运用的技术原理。本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由权利要求的范围决定。

Claims (10)

1.无人便利店货架物品检测方法，其特征在于，包括：
在检测到货架增重时，对所述货架上的新增物品进行物品识别；
根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型；
若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新；
若新增物品与所述货架上的原有物品为不同类型，则提示物品错放。
2.根据权利要求1所述的无人便利店货架物品检测方法，其特征在于，所述在检测到货架增重时，对所述货架上的新增物品进行物品识别包括：
实时监测货架上用于检测物品重量的重量检测装置输出的重量检测信号；
根据所述重量检测信号的变化判断货架是否增重；
在检测到货架增重时，开启所述货架处的物品识别装置对所述货架上的新增物品进行物品识别。
3.根据权利要求2所述的无人便利店货架物品检测方法，其特征在于，所述物品识别装置包括摄像头，用于获取货架上的物品放置区域的画面。
4.根据权利要求1所述的无人便利店货架物品检测方法，其特征在于，所述根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型包括：
根据物品识别的结果确定新增物品的物品类型；
获取所述货架上的原有物品的物品类型；
将新增物品的物品类型与所述货架上的原有物品的物品类型进行对比，以判断新增物品与货架上的原有物品是否为同一类型。
5.根据权利要求1所述的无人便利店货架物品检测方法，其特征在于，所述若新增物品与所述货架上的原有物品为同一类型，则根据新增物品对库存信息和用户虚拟购物清单进行更新包括：
若新增物品与所述货架上的原有物品为同一类型，则根据新增物品在库存信息中进行库存增加，并在用户虚拟购物清单中减去对应物品。
6.根据权利要求1所述的无人便利店货架物品检测方法，其特征在于，所述若新增物品与所述货架上的原有物品为不同类型，则提示物品错放包括：
若新增物品与所述货架上的原有物品为不同类型，则根据新增物品在用户虚拟购物清单中减去对应物品，并对预设对象进行物品错放提示。
7.根据权利要求1所述的无人便利店货架物品检测方法，其特征在于，在对用户虚拟购物清单进行更新前，还包括：
获取店内设置的多路摄像装置的视频信息；
根据所述视频信息对用户进行跟踪；
在检测到货架增重时，根据所述货架所在位置和跟踪情况定位放回物品的用户。
8.无人便利店货架物品检测装置，其特征在于，包括：
物品识别模块，用于在检测到货架增重时，对所述货架上的新增物品进行物品识别；
类型识别模块，用于根据物品识别的结果判断新增物品与货架上的原有物品是否为同一类型；
更新模块，用于在新增物品与所述货架上的原有物品为同一类型时，根据新增物品对库存信息和用户虚拟购物清单进行更新；
提示模块，用于在新增物品与所述货架上的原有物品为不同类型时，提示物品错放。
9.一种计算机，其特征在于，包括：输入装置、输出装置、存储器以及一个或多个处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7任一所述的无人便利店货架物品检测方法。
10.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7任一所述的无人便利店货架物品检测方法。
CN201910708629.4A 2019-08-01 2019-08-01 无人便利店货架物品检测方法、装置、计算机及存储介质 Withdrawn CN110490515A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910708629.4A CN110490515A (zh) 2019-08-01 2019-08-01 无人便利店货架物品检测方法、装置、计算机及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910708629.4A CN110490515A (zh) 2019-08-01 2019-08-01 无人便利店货架物品检测方法、装置、计算机及存储介质

Publications (1)

Publication Number Publication Date
CN110490515A true CN110490515A (zh) 2019-11-22

Family

ID=68549025

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910708629.4A Withdrawn CN110490515A (zh) 2019-08-01 2019-08-01 无人便利店货架物品检测方法、装置、计算机及存储介质

Country Status (1)

Country Link
CN (1) CN110490515A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111105193A (zh) * 2019-12-16 2020-05-05 广东利元亨智能装备股份有限公司 物品移库方法、装置、电子设备和存储介质
CN111341010A (zh) * 2020-02-24 2020-06-26 苏宁云计算有限公司 无人货架货品信息实时维护方法及装置
CN111673740A (zh) * 2020-05-19 2020-09-18 上海擎朗智能科技有限公司 一种物品的自主识别方法、系统、介质及机器人
CN113111213A (zh) * 2021-04-23 2021-07-13 大同市巴什卡机械制造有限公司 一种仓储系统自动存储物品方法及装置
CN113184428A (zh) * 2021-04-23 2021-07-30 大同市巴什卡机械制造有限公司 一种物料架及物料存储系统
CN113602721A (zh) * 2021-07-22 2021-11-05 安徽原力知觉科技有限公司 一种医用耗材重力感应货架控制系统及方法
CN113971538A (zh) * 2020-07-22 2022-01-25 李建文 辨识物品及存量的系统与方法
US11455596B1 (en) * 2021-09-10 2022-09-27 Xiaoyu Guo Systems and methods for warehouse storage rack safety

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111105193A (zh) * 2019-12-16 2020-05-05 广东利元亨智能装备股份有限公司 物品移库方法、装置、电子设备和存储介质
CN111105193B (zh) * 2019-12-16 2021-12-21 广东利元亨智能装备股份有限公司 物品移库方法、装置、电子设备和存储介质
CN111341010A (zh) * 2020-02-24 2020-06-26 苏宁云计算有限公司 无人货架货品信息实时维护方法及装置
CN111673740A (zh) * 2020-05-19 2020-09-18 上海擎朗智能科技有限公司 一种物品的自主识别方法、系统、介质及机器人
CN111673740B (zh) * 2020-05-19 2021-11-12 上海擎朗智能科技有限公司 一种物品的自主识别方法、系统、介质及机器人
CN113971538A (zh) * 2020-07-22 2022-01-25 李建文 辨识物品及存量的系统与方法
CN113111213A (zh) * 2021-04-23 2021-07-13 大同市巴什卡机械制造有限公司 一种仓储系统自动存储物品方法及装置
CN113184428A (zh) * 2021-04-23 2021-07-30 大同市巴什卡机械制造有限公司 一种物料架及物料存储系统
CN113602721A (zh) * 2021-07-22 2021-11-05 安徽原力知觉科技有限公司 一种医用耗材重力感应货架控制系统及方法
CN113602721B (zh) * 2021-07-22 2023-09-22 安徽原力知觉科技有限公司 一种医用耗材重力感应货架控制系统及方法
US11455596B1 (en) * 2021-09-10 2022-09-27 Xiaoyu Guo Systems and methods for warehouse storage rack safety

Similar Documents

Publication Publication Date Title
CN110490515A (zh) 无人便利店货架物品检测方法、装置、计算机及存储介质
US11638490B2 (en) Method and device for identifying product purchased by user and intelligent shelf system
US11508136B2 (en) Collaborative augmented reality
CN112464697B (zh) 基于视觉和重力感应的商品与顾客的匹配方法和装置
EP3327590B1 (en) Method and device for adjusting video playback position
CN109816441B (zh) 策略推送方法、系统及相关装置
US9916561B2 (en) Methods, devices and computer readable storage devices for tracking inventory
WO2019165892A1 (zh) 自动售货方法、装置和计算机可读存储介质
CN104125396A (zh) 图像拍摄方法和装置
CN106548145A (zh) 图像识别方法及装置
CN110490697A (zh) 无人便利店结算方法、装置、计算机及存储介质
CN107239535A (zh) 相似图片检索方法及装置
US11379903B2 (en) Data processing method, device and storage medium
CN108491534A (zh) 虚拟环境中的信息展示方法、装置及计算机设备
CN107736037A (zh) 声音播放方法、设备及可读存储介质
CN111222870B (zh) 结算方法、装置和系统
CN108697934A (zh) 与目标图像有关的引导信息
CN110472985A (zh) 无人便利店退货方法、装置及计算机设备
KR20220098311A (ko) 조작 이벤트 인식 방법 및 장치
CN110490698A (zh) 一种无人便利店货架物品错放检测方法及装置
CN111177329A (zh) 一种智能终端的用户交互方法、智能终端及存储介质
CN108171286B (zh) 无人售货方法及其系统
CN110473065A (zh) 无人便利店用户虚拟购物清单显示方法及装置
CN107037989A (zh) 分布式计算系统中的数据处理方法和装置
CN110910567A (zh) 扣付方法、装置、电子设备、计算机可读存储介质和货柜

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20191122