CN113723251A - 一种防损方法和装置 - Google Patents

一种防损方法和装置 Download PDF

Info

Publication number
CN113723251A
CN113723251A CN202110968200.6A CN202110968200A CN113723251A CN 113723251 A CN113723251 A CN 113723251A CN 202110968200 A CN202110968200 A CN 202110968200A CN 113723251 A CN113723251 A CN 113723251A
Authority
CN
China
Prior art keywords
commodity
cash register
image
sub
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110968200.6A
Other languages
English (en)
Inventor
顾孟婷
侯世国
庄艺唐
金小平
黄�俊
陈云凯
梁敏
林潮威
黄盛�
解怀奇
刘群伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Hanshi Information Technology Co ltd
Original Assignee
Shanghai Hanshi Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Hanshi Information Technology Co ltd filed Critical Shanghai Hanshi Information Technology Co ltd
Priority to CN202110968200.6A priority Critical patent/CN113723251A/zh
Publication of CN113723251A publication Critical patent/CN113723251A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本申请公开了一种防损方法和装置，该方法包括：获取收银区域在第一预设时间区间内的视频图像；从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征；将所述第一商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，若相似度达到设定的特征阈值，则确定价码匹配；若相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件。本申请能够较为有效的规避价码不匹配问题给带来的损失，并降低工作人员的工作量与疏漏。

Description

一种防损方法和装置
技术领域
本申请属于自助收银领域，具体涉及一种防损方法和装置。
背景技术
随着自助收银设备的全面铺开以及使用，带来了新零售领域较大技术变革，也为人们的生活带来了更多的便利。
根据防损行业零售协会会议等统计，在商超薄利多销的行业，2000年25家欧洲连锁超市年报的回顾显示，平均利润率为3％，而盗损成本计算为营业额的1.75％。如果盗损成本缩减一半，零售业的平均盈利能力将从3％提高到3.88％，增长近三分之一。自助收银的防损，也必不可少。漏扫、未支付、价码不匹配等情况，防损员较难区分，且难以做到防损目的，影响购物体验。
发明内容
本申请实施例的目的是提供一种防损方法和装置，能够解决目前自助收银存在大量难以识别的少扫、假扫，给商家带来损失的技术问题。
为了解决上述技术问题，本申请是这样实现的：
第一方面，本申请实施例提供了一种防损方法，包括：
获取收银区域在第一预设时间区间内的视频图像；
从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征；
将所述第一商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，若相似度达到设定的特征阈值，则确定价码匹配；若相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件。
第二方面，本申请实施例提供了一种防损装置，包括：
获取模块，用于获取收银区域在第一预设时间区间内的视频图像；
提取模块，用于从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征；
处理模块，用于将所述第一商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，若相似度达到设定的特征阈值，则确定价码匹配；若相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件。
在本申请实施例中，通过对进入收银区域的商品进行跟踪识别，判断进入收银区域的商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件，能够较为有效的规避价码不匹配问题给带来的损失，并降低工作人员的工作量与疏漏。
附图说明
图1是本申请实施例提供的一种防损方法的流程示意图；
图2是本申请实施例提供的另一种防损方法的流程示意图；
图3是本申请实施例提供的一种防损装置的结构示意图。
本发明目的的实现、功能特点及优点将结合实施例、参照附图做进一步说明。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。
下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的防损方法进行详细地说明。
参照图1，示出了本申请实施例提供的一种防损方法的流程示意图，应用于自助收银系统，该防损方法包括以下步骤：
S101：获取收银区域在第一预设时间区间内的视频图像。
具体地，可以使用相机采集收银区域的视频图像。
进一步地，为了方便后续的图像处理，可以使用拍摄自助收银系统上方的俯视图像，其中，俯视图像可以完整清晰地拍摄到购物行为的全过程。
S102：从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征。
其中，第一商品的特征可以是第一商品的价格。
具体地，可以将相机采集的视频图像传到边缘段的计算盒子上，计算盒子可以从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征。相机采集的视频图像是拍摄到收银机上方的俯视图，主要是拍摄购物行为过程的图像。上述计算盒子可以是openvino的计算设备或者英伟达的计算盒子。
S103：将所述第一商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，若相似度达到设定的特征阈值，则确定价码匹配；若相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件。
具体地，收银机对商品扫码后，可以得到EAN码(即通用商品条码)，通过查询商品数据库中对应EAN的商品，通过跟踪过程中的图像检索模型提取特征，并与同一时间区间中商品购物子交易过程中的商品特征进行比对，当达到设定的特征阈值时，那么判断是同一个商品，此时价码匹配，当低于特征阈值时，此时价码不匹配。这部分主要解决价码不匹配的问题。如果存在价码不匹配的问题，进行防损事件上报。
在本申请实施例中，通过对进入收银区域的商品进行跟踪识别，判断进入收银区域的商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件，能够较为有效的规避价码不匹配问题给带来的损失，并降低工作人员的工作量与疏漏。
参照图2，示出了本申请实施例提供的另一种防损方法的流程示意图，应用于自助收银系统，该防损方法包括以下步骤：
S201：获取收银区域在第一预设时间区间内的视频图像。
具体地，可以使用相机采集收银区域的视频图像。
S202：检测视频图像中的手部以及商品。
需要说明的是，此时检测到的手部以及商品，将作为后续的跟踪对象。
进一步地，可以检测视频图像中的手部以及商品在整个图像中的坐标。
具体地，可以将相机采集的视频图像传到边缘段的计算盒子上，计算盒子可以从所述视频图像中检测手部以及商品，并执行后续步骤。
S203：按帧抠取出视频图像中既包括手部又包括商品的子图像。
可选地，根据手部以及商品在整个图像中的坐标，裁剪抠取出仅包含有手部或者商品的较小图像，这样做，可以减少计算量，提供处理效率。
S204：根据子图像中前后两帧图像的相似度，获得手部以及商品的运动轨迹。
进一步地，通过子图像中前后两帧图像，还可以预测下一时刻手部以及商品可能出现的位置。
S205：根据运动轨迹，对手部以及商品进行跟踪。
需要说明的是，根据手部以及商品的运动轨迹，便可以唯一确定手部以及商品的位置状态，进一步地，可以判断手部与商品是否进入收银区域。
对手部以及商品进行跟踪可以确定一个商品完整的购物行为流程，便于去重，同时也可以减小后续统计数目时的误差。
S206：在手部以及商品进入到收银区域又离开的情况下，扫码数目加一。
可选地，收银区域可以对视频图像进行预先圈选得出的特定区域。
需要说明的是，在手部以及商品进入到收银区域又离开的情况下，可以认为正常情况下，消费者完成了一次扫码动作，此时将扫码数目加一得到的是消费者不存在漏扫、假扫的情况下的商品经过扫码的预期数目。
可选地，S206可由S2061至S2063来完成。
S2061：在手部以及商品进入收银区域的情况下，进入数目加一。
S2062：在手部以及上述商品离开收银区域的情况下，离开数目加一。
S2063：在进入数目与离开数目相等的情况下，将离开数目记为扫码数目。
通过先比较进入数目与离开数目，在进入数目与离开数目相等时才将此数目记为扫码数目，可以增加统计的准确性，避免误判，造成消费者不必要的误会。
S207：将扫码数目与收银设备中商品数目进行比较。
需要说明的是，收银设备中的商品数目是商品经过扫码的实际数目。
S208：在扫码数目与商品数目不相同的情况下，发出第一警示信息。
在扫码数目与商品数目不相同的情况下，意味着预期数目与实际数目不符，即存在假扫、漏扫，此时发出警示信息以提醒工作人员。
可选地，发出第一警示信息，具体包括以下至少一项：
亮起红色指示灯、发出语音提示，或者，弹出警示弹窗。
可选地，防损方法还可以包括：
在收银系统处于支付界面，但收银系统前面没有消费者的情况下，发出第二警示信息。在收银系统处于支付界面，但收银系统前面没有消费者的情况下，可以认为消费者并未实际支付即离开了自助收银台，此时发出警示信息以提醒工作人员。
可选地，防损方法还可以包括：
在商品进入到收银区域中的情况下，在收银系统数据库中对商品进行匹配。
需要说明的是，可以针对S203中所抠取的商品图像中的特征进行识别，并与系统数据进行比对。
在商品的价格与收银系统中所存储的价格之间的偏差超过阈值的情况下，发出第三警示信息。
可选地，阈值可以是50％，当然也可以是其他数值，本领域技术人员可以根据实际需要选取偏差的阈值。
此外，在本申请实施例中，还可以获取所述收银区域在第二预设时间区间内的视频图像；在通过所述视频图像检测到行人离开，且所述第二预设时间区间内未发生支付行为的情况下，则上报防损事件。
在本申请实施例中，通过对进入收银区域的手部以及商品进行跟踪识别，判断进入收银区域又离开的数目与收银系统中的商品数目是否相同，在数目不对等时，确认存在漏扫、假扫的情况，则发出警示信息，提醒工作人员注意。
此外，报警可以通过小票上标记、语音提示、发送消息到工作人员的手表上等。过程中会保存视频作为查证。其中小票上标记可以更大的降低人力成本，不需要更多的工作人员在收银机附近督察，只需要最后出口处粗略检查，不会降低的体验感。
参照图3，示出了本申请实施例提供的一种防损装置的结构示意图，包括：
获取模块310，用于获取收银区域在第一预设时间区间内的视频图像；
提取模块320，用于从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征；
处理模块330，用于将所述第一商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，若相似度达到设定的特征阈值，则确定价码匹配；若相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件。
进一步地，上述装置，还包括：
检测模块，用于检测所述视频图像中的手部以及商品；
抠取模块，用于按帧抠取出所述视频图像中既包括所述手部又包括所述商品的子图像；
轨迹模块，用于根据所述子图像中前后两帧图像的相似度，获得手部以及商品的运动轨迹；
跟踪模块，用于根据所述运动轨迹，对所述手部以及所述商品进行跟踪；
计数模块，用于在所述手部以及所述商品进入到所述收银区域又离开的情况下，扫码数目加一；
比较模块，用于将所述扫码数目与收银设备中商品数目进行比较；
第一警示模块，用于在所述扫码数目与所述商品数目不相同的情况下，发出第一警示信息。
具体地，上述计数模块，具体包括：
进入统计子模块，用于在所述手部以及所述商品进入所述收银区域的情况下，进入数目加一；
离开统计子模块，用于在所述手部以及上述商品离开所述收银区域的情况下，离开数目加一；
计数子模块，用于在所述进入数目与所述离开数目相等的情况下，将所述离开数目记为扫码数目。
进一步地，上述装置，还包括：
第二警示模块，用于在所述收银系统处于支付界面，但所述收银系统前面没有消费者的情况下，发出第二警示信息。
进一步地，上述装置，还包括：
匹配模块，用于在所述商品进入到收银区域中的情况下，在所述收银系统数据库中对所述商品进行匹配；
第三警示模块，用于在所述商品的价格与所述收银系统中所存储的价格之间的偏差超过阈值的情况下，发出第三警示信息。
进一步地，上述获取模块310，还用于获取所述收银区域在第二预设时间区间内的视频图像；
上述处理模块330，还用于在通过所述视频图像检测到行人离开，且所述第二预设时间区间内未发生支付行为的情况下，则上报防损事件。
在本申请实施例中，通过对进入收银区域的商品进行跟踪识别，判断进入收银区域的商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件，能够较为有效的规避价码不匹配问题给带来的损失，并降低工作人员的工作量与疏漏。
本申请实施例中的虚拟装置可以是装置，也可以是终端中的部件、集成电路、或芯片。
以上所述仅为本发明的实施例而已，并不用于限制本发明。对于本领域技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本发明的权利要求范围之内。

Claims (11)

1.一种防损方法，其特征在于，包括：
获取收银区域在第一预设时间区间内的视频图像；
从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征；
将所述第一商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，若相似度达到设定的特征阈值，则确定价码匹配；若相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件。
2.根据权利要求1所述的方法，其特征在于，所述获取收银区域在第一预设时间区间内的视频图像之后，还包括：
检测所述视频图像中的手部以及商品；
按帧抠取出所述视频图像中既包括所述手部又包括所述商品的子图像；
根据所述子图像中前后两帧图像的相似度，获得手部以及商品的运动轨迹；
根据所述运动轨迹，对所述手部以及所述商品进行跟踪；
在所述手部以及所述商品进入到所述收银区域又离开的情况下，扫码数目加一；
将所述扫码数目与收银设备中商品数目进行比较；
在所述扫码数目与所述商品数目不相同的情况下，发出第一警示信息。
3.根据权利要求2所述的方法，其特征在于，所述在所述手部以及所述商品进入到所述收银区域又离开的情况下，扫码数目加一，具体包括：
在所述手部以及所述商品进入所述收银区域的情况下，进入数目加一；
在所述手部以及上述商品离开所述收银区域的情况下，离开数目加一；
在所述进入数目与所述离开数目相等的情况下，将所述离开数目记为扫码数目。
4.根据权利要求1所述的方法，其特征在于，在所述扫码数目与所述商品数目不相同的情况下，发出第一警示信息之后，还包括：
在所述收银系统处于支付界面，但所述收银系统前面没有消费者的情况下，发出第二警示信息。
5.根据权利要求1所述的方法，其特征在于，还包括：
获取所述收银区域在第二预设时间区间内的视频图像；
在通过所述视频图像检测到行人离开，且所述第二预设时间区间内未发生支付行为的情况下，则上报防损事件。
6.一种防损装置，其特征在于，包括：
获取模块，用于获取收银区域在第一预设时间区间内的视频图像；
提取模块，用于从所述视频图像中获取包括第一商品的子图像，并从所述子图像中提取所述第一商品的特征；
处理模块，用于将所述第一商品的特征与所述第一预设时间区间内发生的购物子交易过程中的商品特征进行比对，若相似度达到设定的特征阈值，则确定价码匹配；若相似度未达到设定的特征阈值，则确定价码不匹配，并上报防损事件。
7.根据权利要求6所述的装置，其特征在于，还包括：
检测模块，用于检测所述视频图像中的手部以及商品；
抠取模块，用于按帧抠取出所述视频图像中既包括所述手部又包括所述商品的子图像；
轨迹模块，用于根据所述子图像中前后两帧图像的相似度，获得手部以及商品的运动轨迹；
跟踪模块，用于根据所述运动轨迹，对所述手部以及所述商品进行跟踪；
计数模块，用于在所述手部以及所述商品进入到所述收银区域又离开的情况下，扫码数目加一；
比较模块，用于将所述扫码数目与收银设备中商品数目进行比较；
第一警示模块，用于在所述扫码数目与所述商品数目不相同的情况下，发出第一警示信息。
8.根据权利要求7所述的装置，其特征在于，所述计数模块，具体包括：
进入统计子模块，用于在所述手部以及所述商品进入所述收银区域的情况下，进入数目加一；
离开统计子模块，用于在所述手部以及上述商品离开所述收银区域的情况下，离开数目加一；
计数子模块，用于在所述进入数目与所述离开数目相等的情况下，将所述离开数目记为扫码数目。
9.根据权利要求6所述的装置，其特征在于，还包括：
第二警示模块，用于在所述收银系统处于支付界面，但所述收银系统前面没有消费者的情况下，发出第二警示信息。
10.根据权利要求6所述的装置，其特征在于，还包括：
匹配模块，用于在所述商品进入到收银区域中的情况下，在所述收银系统数据库中对所述商品进行匹配；
第三警示模块，用于在所述商品的价格与所述收银系统中所存储的价格之间的偏差超过阈值的情况下，发出第三警示信息。
11.根据权利要求6所述的装置，其特征在于，
所述获取模块，还用于获取所述收银区域在第二预设时间区间内的视频图像；
所述处理模块，还用于在通过所述视频图像检测到行人离开，且所述第二预设时间区间内未发生支付行为的情况下，则上报防损事件。
CN202110968200.6A 2021-08-23 2021-08-23 一种防损方法和装置 Pending CN113723251A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110968200.6A CN113723251A (zh) 2021-08-23 2021-08-23 一种防损方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110968200.6A CN113723251A (zh) 2021-08-23 2021-08-23 一种防损方法和装置

Publications (1)

Publication Number Publication Date
CN113723251A true CN113723251A (zh) 2021-11-30

Family

ID=78677424

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110968200.6A Pending CN113723251A (zh) 2021-08-23 2021-08-23 一种防损方法和装置

Country Status (1)

Country Link
CN (1) CN113723251A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114898249A (zh) * 2022-04-14 2022-08-12 烟台创迹软件有限公司 用于购物车内商品数量确认的方法、系统及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114898249A (zh) * 2022-04-14 2022-08-12 烟台创迹软件有限公司 用于购物车内商品数量确认的方法、系统及存储介质
CN114898249B (zh) * 2022-04-14 2022-12-13 烟台创迹软件有限公司 用于购物车内商品数量确认的方法、系统及存储介质

Similar Documents

Publication Publication Date Title
US11676387B2 (en) Method and apparatus for detecting suspicious activity using video analysis
US11861584B2 (en) Self-service settlement method, apparatus and storage medium
JP5054670B2 (ja) ビデオ分析を使用して不審挙動を検出する方法及び装置
CN113239793A (zh) 防损方法以及装置
US8104680B2 (en) Method and apparatus for auditing transaction activity in retail and other environments using visual recognition
US8448858B1 (en) Method and apparatus for detecting suspicious activity using video analysis from alternative camera viewpoint
US7448542B1 (en) Method for detecting a non-scan at a retail checkout station
EP3239943A1 (en) Monitoring device and method
US8429016B2 (en) Generating an alert based on absence of a given person in a transaction
CN110866429A (zh) 漏扫识别方法、装置、自助收银终端及系统
US20080290182A1 (en) System and method for calculating wait-time for checkout
US10372998B2 (en) Object recognition for bottom of basket detection
CN106652263A (zh) 一种超市自助服务系统及其使用方法
CN114529850A (zh) 自助收银的风险识别方法、装置及系统
CN115861986A (zh) 基于超市自助结账系统的非标品智能识别及防损方法
CN113723251A (zh) 一种防损方法和装置
JP4159572B2 (ja) 異常報知装置および異常報知方法
CN117011984B (zh) 基于ai的自助收银防损方法及系统
JP2020161194A (ja) 監視システム
CN115546703B (zh) 自助收银的风险识别方法、装置、设备及存储介质
CN115082846A (zh) 一种称重作弊行为的识别方法、装置、系统及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination