CN108551566A - 货架监控、付款监控、账户识别系统及方法 - Google Patents

Abstract

本申请公开了一种货架监控、付款监控、账户识别系统及方法，包括感应装置：用于感应货架的被触动行为；图像采集装置：用于当感应装置被触发后，采集货架前方图像信息，货架监控系统，图像信息包含采集时间；收款监控装置：用于记录收款信息，收款信息包含收款时间；筛选装置：用于比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息，包括付款监控系统，信息识别装置：用于识别所述异常图像信息对应客户的账户信息，当货架被触动后，采集货架前方图像信息，降低无人货架的能耗，保护了非购物人员的隐私，进一步比对图像采集记录和收款记录，识别异常的图像信息，进一步判断未付款信息，起到有效的监控效果。

Description

货架监控、付款监控、账户识别系统及方法

技术领域

本公开一般涉及货架领域，具体涉及无人货架监控领域，尤其涉及一种货架监控、付款监控、账户识别系统及方法。

背景技术

无人货架销售，是一种零售新趋势。在写字楼的办公等区域，摆放无人货架，在货架上摆放物品，人们自由选择物品，通过扫描物品条码确认价格，然后通过电子支付功能完成付款。整个购买的过程中，无需销售人员，能够较大地解决人力成本。但是，同时也缺乏相应的监管功能，交易的过程完全取决于购买人员的信用。如有人在货架上拿了物品，但忘了付款，则难以追踪。

目前，货架安装的货架监控系统都是全天使用，能耗大，并且会记录非购物人员的信息，容易泄露他人隐私。

发明内容

鉴于现有技术中的上述缺陷或不足，期望提供一种能耗小的货架监控、付款监控、账户识别系统及方法。

第一方面，本发明的货架监控系统，包括

感应装置：用于感应货架的被触动行为；

图像采集装置：用于当感应装置被触发后，采集货架前方图像信息。

第二方面：本发明的付款监控系统，包括

货架监控系统；

收款监控装置：用于记录收款信息；

筛选装置：用于比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息。

第三方面，本发明的账户识别系统，包括

付款监控系统，

信息识别装置：用于识别异常图像信息对应客户的账户信息。

第四方面，本发明的货架监控方法，当货架被触动后，采集货架前方图像信息。

第五方面，本发明的付款监控方法，包括

货架监控方法；

记录收款信息；

比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息。

第六方面，本发明的账户识别方法，包括付款监控方法，

识别异常图像信息对应客户的账户信息。

根据本申请实施例提供的技术方案，通过设置感应装置，当检测到有人靠近无人货架时，图像采集装置开始采集货架前方图像信息，对消费者在无人货柜监控整个购物过程，能够解决现有货架监控系统一直工作能耗大、会记录非购物人员的信息、容易泄露他人隐私的问题。同时，进一步比对图像采集记录和收款记录，识别异常的图像信息，进一步判断未付款信息，起到有效的监控效果。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：

图1为本发明的实施例的货架监控系统的结构示意图；

图2为本发明的实施例的货架监控系统的结构示意图；

图3为本发明的实施例的货架监控系统的结构示意图；

图4为本发明的实施例的付款监控系统的结构示意图；

图5为本发明的实施例的付款监控系统的结构示意图；

图6为本发明的实施例的付款监控系统的结构示意图；

图7为本发明的实施例的账户识别系统的结构示意图；

图8为本发明的实施例的货架监控方法的流程图；

图9为本发明的实施例的货架监控方法的流程图；

图10为本发明的实施例的付款监控方法的流程图；

图11为本发明的实施例的账户识别方法的流程图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与发明相关的部分。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

本发明的其中一个实施例为，请参考图1至3，本发明的货架监控系统，包括

感应装置：用于感应货架的被触动行为；

图像采集装置：用于当感应装置被触发后，采集货架前方图像信息。

在本发明的实施例中，通过感应装置来感应是否有人靠近无人货架，当有人靠近无人货架时，图像采集装置开始工作，采集无人货架前方的图像信息，图像信息可以但不仅仅是视频或者照片，也就是通过图像采集装置记录下当有消费者经过货架时候的图像信息，当消费者在无人货架上拿取货物时，图像采集装置能够采集到消费者的正面照片或者视频，作为后续判断消费者是否存在拿取货物后未支付货款的行为，以此达到监控无人货架的目的，能够实现无需人看守无人货架，也能对无人货架进行监控的目的；当没有人经过无人货架时，感应装置不会被触动，图像采集装置不会工作，能够有效地降低了监控系统的能耗，当货架的放置处没有外接插头供电，货架使用内置电源供电时，降低了货架监控系统的能耗，延长了货架监控系统的单次内置电源供电的使用时间以及内置电源的充电周期，降低了无人货架的运营维护成本，同时，能够避免图像采集装置在没有消费者经过无人货架时拍摄到远方的行人，避免记录非购物人员的隐私。

进一步的，感应装置为红外传感器、震动传感器、光线传感器、声音传感器中的一种或者多种的组合。

在本发明的实施例中，通过红外传感器检测是否有人在无人货架附近；通过震动传感器检测是否有人在无人货架附近；通过光线传感器检测是否有人在无人货架前；通过声音传感器检测是否有人在无人货架附近，可以使用其中一种或者多种组合来进行判断是否有人在无人货架附近，当使用多种组合来判断是否有人在无人货架附近，多种组合中的每一种均满足预定条件才构成触动感应装置时，准确性会更高，图像采集装置工作的时间会减少，货架监控系统的功耗会进一步减少；当使用多种组合来判断是否有人在无人货架购买货物，货架监控系统的可靠性会更高，图像采集装置工作的时间会加长，采集的图像信息会变多，数据更加全面，不容易遗漏数据，当然使用多种感应装置的组合时可以根据实际需要来选择不同灵敏度的感应装置，例如，可以设置低灵敏度的红外传感器和高灵敏度的震动传感器，通过多种感应装置的组合能够根据货架的安装环境来设置不同的触动感应条件，能够提高货架监控系统的适用性。

进一步的，包括存储装置：用于存储图像采集装置采集的图像信息。

在本发明的实施例中，存储装置用于存储图像采集装置采集的图像信息，可以通过有线或者无线连接的方式将存储装置中的数据导出进行处理分析获得在无人货架拿了货物但未支付货款的消费者的图像信息，也可以将存储装置中的数据通过WiFi或者有线连接互联网，将数据传输到服务器中进行进一步地处理。

进一步的，包括供电装置：用于给货架监控系统供电，供电装置设置有线插头和/或可无线充电的电源。

在本发明的实施例中，供电装置可以是充电宝、充电电池、锂电池、太阳能电池、干电池等，也可以通过插头插入插座进行供电，也可以是有线插头和可无线充电的电源的组合，来应对不同的供电场景，供电装置与无人货架可拆卸地固定连接，当供电装置电量较低时，可以直接更换供电装置，操作简单，可以将无人货架放置在没有外接电源插头的地方，提高了无人货架的适用性，也可以通过无线充电模块对供电装置进行无线充电。

进一步的，图像采集装置采集图像信息的有效范围为货架周围2米之内。

在本发明的实施例中，图像采集装置采集图像信息的有效范围为无人货架周围2米之内，也就是当有人进入无人货架2米以内的距离才能够触动感应装置，进而触动图像采集装置进行工作，减少采集与消费者在无人货架购物行为无关的视频和照片，提高了图像采集装置采集的图像信息的可用性，也有效地保护路过无人货架的行人的隐私，当然图像采集装置采集图像信息的有效范围可以根据实际情况进行调整，可以但不仅仅是，将图像采集装置采集图像信息的有效范围设置为可调节的形式，工作人员能够根据无人货架的安装环境进行调整，提高了无人货架的适用性。

进一步的，图像信息的像素为100-1500万像素。

在本发明的实施例中，图像信息的像素可设定为100-1500万像素，也就是说，图像采集装置可以设置为非高清摄像头，图像信息的像素可设定为200万像素、500万像素、800万像素、1000万像素等，降低图像采集装置的成本，减少了单张照片或者单个视频的占用空间，优选地，图像信息的像素设定为200-600万像素，进一步提高存储装置存储照片或者视频的数量，同时也减少了传输数据的时间以及传输数据的能耗，同时，也能够避免采集消费者的高清图像信息，降低了图像信息的可辨识度，有效地保护消费者的隐私。

本发明的另一个实施例为，参考图8和9，本发明的货架监控方法，当货架被触动后，采集货架前方图像信息。

进一步的，货架被触动包括：

红外传感器检测到货架被触动；和/或

震动传感器检测到货架被触动；和/或

光线传感器检测到货架被触动；和/或

声音传感器检测到货架被触动。

进一步的，存储图像信息。

进一步的，采集货架周围2米之内的图像信息。

进一步的，图像信息的像素为100-1500万像素。

在本发明的实施例中，通过感应是否有人靠近无人货架，当有人靠近无人货架时，开始采集无人货架前方的图像信息，图像信息可以但不仅仅是视频或者照片，当消费者在无人货架上拿取货物时，图像采集装置能够采集到消费者的正面照片或者视频，作为后续判断消费者是否存在拿取货物后未支付货款的行为，以此达到监控无人货架的目的，能够实现无需人看守无人货架，也能对无人货架进行监控的目的；当没有人经过无人货架时，不会采集图像信息，能够有效地降低了监控系统的能耗，当货架的放置处没有外接插头供电，货架使用内置电源供电时，降低了货架监控系统的能耗，延长了货架监控系统的单次内置电源供电的使用时间以及内置电源的充电周期，降低了无人货架的运营维护成本，同时，能够避免在没有消费者经过无人货架时采集到远方的行人的图像信息，避免记录非购物人员的隐私。

本发明的另一个实施例为，参考图4-6，本发明的付款监控系统，包括

货架监控系统；

收款监控装置：用于记录收款信息；

筛选装置：用于比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息。

在本发明的实施例中，可通过支付系统实现记录收款信息，其中支付形式可以但不仅仅为线下支付形式，例如刷卡支付、扫码支付等，线上支付形式，例如微信支付、支付宝支付等。

筛选装置通过比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息，也就是说，异常图像信息是仅有图像信息未有相应收款信息，异常图像信息为疑似未付款消费者的图像信息。

进一步的，图像信息包含采集时间，收款信息包括收款时间，

筛选装置：用于比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息，具体的，比较采集时间是否有与其对应的收款时间，若否，则将采集时间对应的图像信息标记为异常图像信息。

在本发明的实施例中，通过将采集时间和收款时间进行对比，来标记异常图像信息，具体的，可以将逐个对比采集时间之后是否有收款时间与其对应，或者选择任意一个时间段(例如1个小时、24个小时等)内，对比采集时间之后是否有收款时间与其对应，例如，收款时间在图像信息采集时间之后的某个设定时间段范围内，可以认为图像信息的采集时间具有对应的收款时间，如果图像信息的采集时间没有对应的收款时间，可将该图像信息判断为异常图像信息。工作人员或者是其他判断装置能够进一步地核实相关数据，来进行判断消费者是否出现在无人货架拿取货物未付款的情况，降低了工作人员的工作量，提高了工作效率。

进一步的，包括

显示装置：用于显示异常图像信息。

在本发明的实施例中，将疑似未付款的消费者显示在显示装置上，来让工作人员进一步地核实确认，降低了工作人员的工作量，提高了工作效率。

进一步的，图像信息包含采集次数，收款信息包括收款次数，

筛选装置：用于比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息，具体的，在任一时间段内比较收款次数和采集次数是否一致。

在本发明的实施例中，在任一时间段内比较收款次数和采集次数是否一致，若一致，可判断为正常的图像采集，若否，对比该时间段范围内，采集时间之后是否有收款时间与其对应，例如，图像信息采集时间之后的某个设定时间段范围内，具有收款记录，则识别该图像信息为正常，否则识别为异常。

进一步的，还可以将每两次相邻的触动时间之间的间隔当做一个时间段，如果这个时间段包括有至少一个付款时间，那么则认定前一次触动所采集的图像信息中的消费者支付了货款，反之，则认定前一次触动所采集的图像信息中的消费者未支付货款。

进一步的，图像采集装置：用于当感应装置被触发后，按照设定次数和设定采集时间连续地采集货架前方的图像信息。

进一步的，设定次数为3-8次，设定采集时间为3-15s。

在本发明的实施例中，图像采集装置通过预定次数和预定采集间隔时间联系采集图像信息，例如，设定次数为5次，设定采集时间为10s，则当感应装置被触发后，图像采集装置可以采集五次货架前方的图像信息，采集五次图像信息的总时间为10s，能够在保证完整记录货架前的图像信息前提下减少图像采集装置采集重复的图像信息，提高了图像采集装置采集效率，减少图像信息的数量，提高了存储装置的利用率。

进一步的，包括

信息处理装置：用于比较图像采集装置采集的任意多个图像信息，保留相同的图像信息中的任一个图像信息，删除其他图像信息。

在本发明的实施例中，通过信息处理装置来剔除信息采集模块采集的重复的图像信息，提高了监控系统的运行速度，能够节省存储装置的空间，提高信息传输效率和速度。

进一步的，筛选装置设置在移动终端或者服务器上。

在本发明的实施例中，可以将筛选装置设置在移动终端(例如手机、平板电脑、笔记本电脑等)或者服务器内，通过有线连接形式例如USB接口等，无线连接形式例如蓝牙连接、热点连接设备连接等，将存储模块内的图像信息传输到移动终端，可以在移动终端或者服务器上进行下一步处理，不需要将筛选装置设置在无人货架上，能够降低无人货架的制造成本，同时也能够降低货架监控系统的功耗。

本发明的另一个实施例为，参考图10，本发明的付款监控方法，包括

货架监控方法；

记录收款信息；

比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息。

进一步的，图像信息包含采集时间，收款信息包括收款时间，

可以将逐个对比采集时间之后是否有收款时间与其对应，或者选择任意一个时间段(比如一个小时、24个小时等)，比对收款信息和图像信息，仅有图像信息未有相应收款信息的异常图像信息，具体的，比较采集时间是否有与其对应的收款时间，例如，图像信息采集时间之后的某个设定时间段范围内，具有收款记录，则识别该图像信息为正常，若否，则将采集时间对应的图像信息标记为异常图像信息。

进一步的，图像信息包含采集次数，收款信息包括收款次数，在任一时间段内比较收款次数和采集次数是否一致，若一致，可判断该时间段范围的图像信息为正常的图像采集，若否，对比该时间段范围内，采集时间之后是否有收款时间与其对应，例如，图像信息采集时间之后的某个设定时间段范围内，具有收款记录，则识别该图像信息为正常，否则识别为异常，通过上述来识别该时间段内的异常图像信息。

进一步的，还可以将每两次相邻的触动时间之间的间隔当做一个时间段，如果这个时间段包括有至少一个付款时间，那么则认定前一次触动所采集的图像信息中的消费者支付了货款，反之，则认定前一次触动所采集的图像信息中的消费者未支付货款。

进一步的，显示异常图像信息。

进一步的，当货架被触动后，按照设定次数和设定采集时间连续地采集货架前方的图像信息。

进一步的，设定次数为3-8次，设定采集时间为3-15s。

进一步的，逐个比较采集的任意两个图像信息，保留相同的两个图像信息中的任一个图像信息，删除另一个图像信息。

在本发明的实施例中，通过比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息，也就是说，异常图像信息是仅有图像信息未有相应收款信息，异常图像信息为疑似未付款消费者的图像信息，将异常图像信息中的消费者当做疑似未付款人，工作人员或者是其他判断装置能够进一步地核实相关数据，识别未付款的图像信息，来进行判断图像信息中的消费者是否出现在无人货架拿取货物未付款的情况，提高准确率。

本发明的另一个实施例为，参考图7，本发明的账户识别系统，包括

付款监控系统，

信息识别装置：用于识别异常图像信息对应客户的账户信息。

在本发明的实施例中，通过信息识别装置识别异常图像信息对应客户的账户信息，具体地，通过将异常图像信息内的人脸特征与客户数据库内存储的人脸特征进行对比，来识别客户的账户信息，可以向账户信息推送未付款信息，能够有效地提醒消费者进行及时付款，减少消费者忘记付款的情况。

进一步的，通过有线连接或者无线连接传输图像信息。

在本发明的实施例中，可以将筛选装置设置在移动终端(例如手机、平板电脑、笔记本电脑等)或者服务器内，通过有线连接形式例如USB接口等，无线连接形式例如蓝牙连接、热点连接设备连接等，将存储模块内的图像信息传输到手机客户端，可以在手机客户端或者服务器上进行下一步处理，不需要将筛选装置设置在无人货架上，能够降低无人货架的制造成本，同时也能够降低货架监控系统的功耗。

本发明的另一个实施例为，参考图11，本发明的账户识别方法，包括付款监控方法，

识别异常图像信息对应客户的账户信息。

在本发明的实施例中，通过识别异常图像信息对应客户的账户信息，具体地，通过将异常图像信息内的人脸特征与客户数据库内存储的人脸特征进行对比，来识别客户的账户信息，可以向账户信息推送未付款信息，能够有效地提醒消费者进行及时付款，减少消费者忘记付款的情况。

以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离所述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (24)

1.一种货架监控系统，其特征在于，包括

感应装置：用于感应货架的被触动行为；

图像采集装置：用于当所述感应装置被触发后，采集货架前方图像信息。

2.根据权利要求1所述的货架监控系统，其特征在于，所述感应装置为红外传感器、震动传感器、光线传感器、声音传感器中的一种或者多种的组合。

3.根据权利要求1所述的货架监控系统，其特征在于，包括存储装置：用于存储所述图像采集装置采集的图像信息。

4.根据权利要求1所述的货架监控系统，其特征在于，包括供电装置：用于给所述货架监控系统供电，所述供电装置设置有线插头和/或可无线充电的电源。

5.根据权利要求1所述的货架监控系统，其特征在于，所述图像采集装置采集图像信息的有效范围为货架周围2米之内。

6.根据权利要求1所述的货架监控系统，其特征在于，所述图像信息的像素为100-1500万像素。

7.一种付款监控系统，其特征在于，包括

权利要求1-6任一项所述的货架监控系统；

收款监控装置：用于记录收款信息；

筛选装置：用于比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息。

8.根据权利要求7所述的付款监控系统，其特征在于，所述图像信息包含采集时间，所述收款信息包括收款时间，

所述筛选装置：用于比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息，具体的，比较采集时间是否有与其对应的收款时间，若否，则将采集时间对应的图像信息标记为异常图像信息。

9.根据权利要求7所述的付款监控系统，其特征在于，所述图像采集装置：用于当所述感应装置被触发后，按照设定次数和设定采集时间连续地采集货架前方的图像信息。

10.根据权利要求9所述的付款监控系统，其特征在于，包括

信息处理装置：用于比较所述图像采集装置采集的任意多个图像信息，保留相同的所述图像信息中的任一个图像信息，删除其他图像信息。

11.根据权利要求7所述的付款监控系统，其特征在于，所述筛选装置设置在移动终端或者服务器上。

12.一种账户识别系统，其特征在于，包括

权利要求7-11任一项所述的付款监控系统，

信息识别装置：用于识别所述异常图像信息对应客户的账户信息。

13.一种货架监控方法，其特征在于，当所述货架被触动后，采集货架前方图像信息。

14.根据权利要求13所述的货架监控方法，其特征在于，所述货架被触动包括：

红外传感器检测到货架被触动；和/或

震动传感器检测到货架被触动；和/或

光线传感器检测到货架被触动；和/或

声音传感器检测到货架被触动。

15.根据权利要求13所述的货架监控方法，其特征在于，存储所述图像信息。

16.根据权利要求13所述的货架监控方法，其特征在于，采集货架周围2米之内的图像信息。

17.根据权利要求13所述的货架监控方法，其特征在于，所述图像信息的像素为100-1500万像素。

18.一种付款监控方法，其特征在于，包括

权利要求13-17任一项所述的货架监控方法；

记录收款信息；

比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息。

19.根据权利要求18所述的付款监控方法，其特征在于，所述图像信息包含采集时间，所述收款信息包括收款时间，

比较收款信息和图像信息，获得仅有图像信息未有相应收款信息的异常图像信息，具体的，比较采集时间是否有与其对应的收款时间，若否，则将采集时间对应的图像信息标记为异常图像信息。

20.根据权利要求18所述的付款监控方法，其特征在于，当货架被触动后，按照设定次数和设定采集时间连续地采集货架前方的图像信息。

21.根据权利要求20所述的付款监控方法，其特征在于，所述设定次数为3-8次，所述设定采集时间为3-15s。

22.根据权利要求20所述的付款监控方法，其特征在于，比较采集的任意多个图像信息，保留相同的所述图像信息中的任一个图像信息，删除其他图像信息。

23.根据权利要求18所述的付款监控方法，其特征在于，通过有线连接或者无线连接传输所述图像信息。

24.一种账户识别方法，其特征在于，包括权利要求18-23任一项所述的付款监控方法，

识别所述异常图像信息对应客户的账户信息。