CN111311304A - 一种基于视频的智能无人超市管理系统 - Google Patents
一种基于视频的智能无人超市管理系统 Download PDFInfo
- Publication number
- CN111311304A CN111311304A CN202010052501.XA CN202010052501A CN111311304A CN 111311304 A CN111311304 A CN 111311304A CN 202010052501 A CN202010052501 A CN 202010052501A CN 111311304 A CN111311304 A CN 111311304A
- Authority
- CN
- China
- Prior art keywords
- customer
- goods
- video
- service module
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 claims description 22
- 238000005303 weighing Methods 0.000 claims description 7
- 238000000605 extraction Methods 0.000 claims description 3
- 238000007405 data analysis Methods 0.000 claims description 2
- 238000000034 method Methods 0.000 description 7
- 230000003139 buffering effect Effects 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0281—Customer communication at a business location, e.g. providing product or service information, consulting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G1/00—Cash registers
- G07G1/12—Cash registers electronically operated
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Cash Registers Or Receiving Machines (AREA)
Abstract
本发明涉及超市管理领域，具体是一种基于视频的智能无人超市管理系统，包括该系统包括结算服务模块、计算机结果缓冲队列模块、商品分析服务模块，特征数据缓冲队列模块，特征提取服务模块，解码服务模块，原始数据缓冲队列模块，视频接入服务模块，AI分析服务模块，所述视频接入服务模块捕获顾客图像以及顾客购物图像传回后台分析，同时支持多人购物，自动清点结算顾客的购物车，顾客完全无感知购物。
Description
技术领域
本发明涉及超市管理领域，具体是一种基于视频的智能无人超市管理系统。
背景技术
随着AI和5G技术近几年的快速发展，加快了物联网应用的落地。传统超市经营管理模式也逐步在转型，近几年出现了一些无人超市。目前无人超市方案基本上都基于智能门禁、智能货柜、称重系统、结算系统和处理业务组成。
顾客首先通过门禁系统采集用户特征信息，进入超市后进行货物选择后智能货柜会判断货物是否被拿走以及拿走的是什么产品，用户购物结束后通过结算系统进行结算。但是，现有技术方案需要在超市内至少部署四个服务系统才能正常使用，而且大部分只能同时有一个人进行购物，这样会增加使用复杂度、运维难度，降低用户体验感。
为此，需要提出一种简化的服务部署和运维流程，支持多人同时无感购物的系统。
发明内容
针对现有技术的不足，本发明的目的在于提供一种基于视频的智能无人超市管理系统，该系统简化了服务部署和运维流程，支持多人同时无感购物。
为实现上述目的，本发明提供如下技术方案：一种基于视频的智能无人超市管理系统，该系统包括结算服务模块、计算机结果缓冲队列模块、商品分析服务模块，特征数据缓冲队列模块，特征提取服务模块，解码服务模块，原始数据缓冲队列模块，视频接入服务模块，AI分析服务模块，其具体步骤为：
S1:顾客进入超市，对其进行视频分析，然后匹配顾客信息，顾客选择商品；
S2:进行视频分析，商品清点，判断未称重商品；
S3:出门结算，判断客户余额是否充足，结算完成后，顾客出超市。
优选的，所述视频接入服务模块包括摄像头，该摄像头捕捉顾客通过超市入口的图像，顾客将货物从货架上拿走的图像，顾客将货物放回或者放到其他位置的图像，顾客是否购买称重货物的图像，顾客将称重货物放入称重处的图像，顾客到达超市出口的图像，上述所有的图像在捕捉的同时传回后台进行分析。
好处在于同步捕捉顾客图像，记录购买信息，让顾客体验无感购物。
优选的，所述视频接入服务模块捕获图像后，传回后台，在所述的各数据分析模块的联合下先得出顾客的信息，然后将顾客在购物时拿的货物信息添加到该顾客的虚拟购物车中，并且还可以智能判断出顾客放弃的货物以及是否有称重的货物，称重的货物是否称重及称重的读数信息，最后在顾客即将要出超市时，将虚拟购物车里面商品进行自动清点，通过所述的结算服务模块，向顾客的账户发起扣款申请，结算成功开门放行。
好处在于在顾客购物同时记录顾客的购买信息，方便顾客快速结账，非常便捷。
优选的，所述系统同时可以捕获多名顾客图像和分析，支持多人同时购物。
好处在于多人同时购物，可以减少顾客排队等待的时间，购物体验感最佳。
与现有技术相比，本发明的有益效果是：
本发明，完全基于视频，基于后台AI算法服务自动分析顾客和商品信息，自动记录顾客购物商品状态信息，自动进行商品结算，自动根据顾客信息自动关联顾客的支付信息，自动进行结算。支持多人同时购物，顾客完全无感知购物。
附图说明
图1为本发明基于视频的无人超市管理系统的流程图；
图2为本发明基于视频的无人超市管理系统的模块关系图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1至图2，本发明提供一种技术方案：基于视频的无人超市管理系统通过以下步骤完成工作，
步骤0:顾客通过超市入口，摄像头捕捉图像后传回后台进行算法分析，分析出顾客信息；
步骤1:顾客在超市内进行货物选择；
步骤2:当顾客将货物从货架上拿走后，摄像头将图像传回后台分析，分析货物和顾客信息，同时将货物加入到顾客的购物车列表中；
步骤3:当顾客将货物放回货架或放到其他位置时，摄像头将图像传回后台进行分析，分析货物和顾客信息，同时将货物从顾客的购物车列表中移除；
步骤4:顾客是否买称重货物，是则转步骤5，否则转步骤9；
步骤5:摄像头将图像传回后台进行分析；
步骤6:分析货物和顾客信息，将货物加入顾客购物车，同时将货物标记为未称重；
步骤7:顾客将货物饭放入称重处，摄像头捕获图像传回后台分析；
步骤8:分析货物、顾客和称重称读数信息，将顾客购物车中该商品状态标记为已称重，同时记录该商品的价格；
步骤9:购物完成；
步骤10:超市出口捕获到图像后传回后台分析；
步骤11:后台分析出顾客信息后，将顾客的购物车商品进行自动清点；
步骤12:判断是否有未称重商品，是则转步骤13，否则转14；
步骤13:提示顾客有未称重商品；
步骤14:后台自动计算商品总价，通过向顾客账户发起扣款申请；
步骤15:客户余额是否充足，是转步骤17，否则转步骤16；
步骤16:提示顾客余额不足，无法进行结算；
步骤17:结算成功，开门放行。
如图2所示，该系统包括结算服务模块、计算机结果缓冲队列模块、商品分析服务模块，特征数据缓冲队列模块，特征提取服务模块，解码服务模块，原始数据缓冲队列模块，视频接入服务模块，AI分析服务模块，通过上述模块，实现视频的采集，数据的处理，和特征提取服务，从而通过AI分析服务模块实现了数据的分析和整理，实现了从顾客进门到结算之间的整个过程的数据处理。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。
Claims (6)
1.一种基于视频的智能无人超市管理系统，其特征在于:该系统包括结算服务模块、计算机结果缓冲队列模块、商品分析服务模块，特征数据缓冲队列模块，特征提取服务模块，解码服务模块，原始数据缓冲队列模块，视频接入服务模块，AI分析服务模块,其具体步骤为：
S1:顾客进入超市，对其进行视频分析，然后匹配顾客信息，顾客选择商品；
S2:进行视频分析，商品清点，判断未称重商品；
S3:出门结算，判断客户余额是否充足，结算完成后，顾客出超市。
2.根据权利要求1所述的基于视频的智能无人超市管理系统，其特征在于：所述视频接入服务模块包括摄像头，该摄像头捕捉顾客通过超市入口的图像，顾客将货物从货架上拿走的图像，顾客将货物放回或者放到其他位置的图像，顾客是否购买称重货物的图像，顾客将称重货物放入称重处的图像，顾客到达超市出口的图像，上述所有的图像在捕捉的同时传回后台进行分析。
3.根据权利要求2所述的基于视频的智能无人超市管理系统，其特征在于：所述视频接入服务模块捕获图像后，传回后台，在各数据分析模块的联合下先得出顾客的信息，然后将顾客在购物时拿的货物信息添加到该顾客的虚拟购物车中，并且还可以智能判断出顾客放弃的货物以及是否有称重的货物，称重的货物是否称重及称重的读数信息，最后在顾客即将要出超市时，将虚拟购物车里面商品进行自动清点，通过结算服务模块，向顾客的账户发起扣款申请，结算成功开门放行。
4.根据权利要求3所述的基于视频的智能无人超市管理系统,其特征在于：结算服务模块判断客户余额是否充足，是则结算成功，开门放行，否则继续向顾客账户发起扣款申请。
5.根据权利要求3所述的基于视频的智能无人超市管理系统，其特征在于：判断是否有未称重商品，是则提示顾客有未称重商品，否则后台自动计算商品总价，通过向顾客账户发起扣款申请。
6.根据权利要求1-5任一所述的基于视频的智能无人超市管理系统，其特征在于：该系统同时可以捕获多名顾客图像和分析，支持多人同时购物。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010052501.XA CN111311304A (zh) | 2020-01-17 | 2020-01-17 | 一种基于视频的智能无人超市管理系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010052501.XA CN111311304A (zh) | 2020-01-17 | 2020-01-17 | 一种基于视频的智能无人超市管理系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111311304A true CN111311304A (zh) | 2020-06-19 |
Family
ID=71158119
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010052501.XA Pending CN111311304A (zh) | 2020-01-17 | 2020-01-17 | 一种基于视频的智能无人超市管理系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111311304A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112365255A (zh) * | 2020-10-28 | 2021-02-12 | 中标慧安信息技术股份有限公司 | 用于超市的无感支付方法和系统 |
| CN113077314A (zh) * | 2021-04-13 | 2021-07-06 | 重庆文理学院 | 一种基于区块链技术的食品供应链管理系统 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107705129A (zh) * | 2017-09-15 | 2018-02-16 | 泾县麦蓝网络技术服务有限公司 | 一种应用于实体零售店的购物结算方法和系统 |
| EP3346439A1 (en) * | 2017-01-04 | 2018-07-11 | OÜ Virca | System and method for fixing purchasable goods, calculating amount owed and settling monetary obligations in retail environments posteriorly |
| CN108764884A (zh) * | 2018-05-25 | 2018-11-06 | 合肥康之恒机械科技有限公司 | 一种超市商场防盗自动识别称重结算管控方法及系统 |
| JP2018180717A (ja) * | 2017-04-06 | 2018-11-15 | 京セラドキュメントソリューションズ株式会社 | 商品精算システムおよび商品精算方法 |
| CN109409175A (zh) * | 2017-08-16 | 2019-03-01 | 图灵通诺（北京）科技有限公司 | 结算方法、装置和系统 |
| CN110246284A (zh) * | 2018-03-07 | 2019-09-17 | 上海善解人意信息科技有限公司 | 无人值守超市购物系统及其控制方法 |
| CN110555928A (zh) * | 2019-08-15 | 2019-12-10 | 创新奇智(成都)科技有限公司 | 一种基于人脸识别的智慧商店门禁方法及其结算方法 |
-
2020
- 2020-01-17 CN CN202010052501.XA patent/CN111311304A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3346439A1 (en) * | 2017-01-04 | 2018-07-11 | OÜ Virca | System and method for fixing purchasable goods, calculating amount owed and settling monetary obligations in retail environments posteriorly |
| JP2018180717A (ja) * | 2017-04-06 | 2018-11-15 | 京セラドキュメントソリューションズ株式会社 | 商品精算システムおよび商品精算方法 |
| CN109409175A (zh) * | 2017-08-16 | 2019-03-01 | 图灵通诺（北京）科技有限公司 | 结算方法、装置和系统 |
| CN107705129A (zh) * | 2017-09-15 | 2018-02-16 | 泾县麦蓝网络技术服务有限公司 | 一种应用于实体零售店的购物结算方法和系统 |
| CN110246284A (zh) * | 2018-03-07 | 2019-09-17 | 上海善解人意信息科技有限公司 | 无人值守超市购物系统及其控制方法 |
| CN108764884A (zh) * | 2018-05-25 | 2018-11-06 | 合肥康之恒机械科技有限公司 | 一种超市商场防盗自动识别称重结算管控方法及系统 |
| CN110555928A (zh) * | 2019-08-15 | 2019-12-10 | 创新奇智(成都)科技有限公司 | 一种基于人脸识别的智慧商店门禁方法及其结算方法 |
Non-Patent Citations (2)
| Title |
|---|
| 技术宅: "手机就是购物卡 淘宝会员店是什么", 《电脑爱好者》, no. 17, 1 September 2017 (2017-09-01) * |
| 杨露菁等: "《智能图像处理及应用》", vol. 1, 北京：中国铁道出版社, pages: 265 - 270 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112365255A (zh) * | 2020-10-28 | 2021-02-12 | 中标慧安信息技术股份有限公司 | 用于超市的无感支付方法和系统 |
| CN113077314A (zh) * | 2021-04-13 | 2021-07-06 | 重庆文理学院 | 一种基于区块链技术的食品供应链管理系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109559457B (zh) | 基于神经网络识别商品的收银方法以及自助收银台 | |
| RU2727084C1 (ru) | Устройство и способ определения информации о заказе | |
| WO2020103487A1 (zh) | 自助结算方法、装置以及存储介质 | |
| CN108780596B (zh) | 信息处理系统 | |
| CN208188867U (zh) | 一种用于无人自动售货的商品识别系统 | |
| CN109726759B (zh) | 无人售货方法、装置、系统、电子设备及计算机可读介质 | |
| CN112466035B (zh) | 基于视觉和重力感应的商品识别方法、装置和系统 | |
| US8429016B2 (en) | Generating an alert based on absence of a given person in a transaction | |
| CN110009836A (zh) | 基于高光谱摄像技术的深度学习的系统及方法 | |
| WO2019127255A1 (zh) | 基于云端的自助购物方法和系统、电子设备、程序产品 | |
| CN111263224B (zh) | 视频处理方法、装置及电子设备 | |
| US20090249342A1 (en) | Systems and methods for transaction queue analysis | |
| WO2018126345A1 (zh) | 一种智能购物车商品鉴别方法及系统 | |
| CN108062837A (zh) | 一种基于图像识别的无人值守超市商品结算系统 | |
| CN102187355A (zh) | 信息提供装置、信息提供方法和记录介质 | |
| CN111222870B (zh) | 结算方法、装置和系统 | |
| CN111311304A (zh) | 一种基于视频的智能无人超市管理系统 | |
| CN109255608A (zh) | 一种基于人工智能与物联网技术的超市购物车及工作方法 | |
| CN110942293B (zh) | 物品信息的处理方法、设备、存储介质及系统 | |
| CN113554812B (zh) | 自动售货柜及控制系统、控制方法 | |
| CN111260685B (zh) | 视频处理方法、装置及电子设备 | |
| CN114358881A (zh) | 自助结算方法、装置和系统 | |
| CN104778618A (zh) | 一种购物储物设备 | |
| CN116665380B (zh) | 一种智能结账处理方法、系统、pos收银机及储介质 | |
| CN111507792A (zh) | 一种自助购物方法、计算机可读存储介质及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200619 |