CN103606093A - 一种基于人体特征的连锁机构vip客户智能服务系统 - Google Patents

Abstract

本发明公开了一种基于人体特征的连锁机构VIP客户智能服务系统，包括身份识别模块、智能提醒模块和消费者购物记录分析模块；所述的身份识别模块是由1个3D深度摄像头、2台高清摄像头、处理器，以及与其相连接的人脸识别模块、身高体型识别模块、客户数据库无线传输模块和客户信息传输模块组成；所述的智能提醒模块包括迎宾玩具传输模块、手持小型信息接收模块、无线耳机、液晶显示屏、处理器和报警模块组成；所述的消费者购物记录分析模块是由人脸识别仪、数据记录分析模块、处理器、客户数据库、信息传输模块、手机短信提醒模块组成。本发明为连锁机构的VIP客户识别、智能购物提供了一种新的平台。

Description

一种基于人体特征的连锁机构VIP客户智能服务系统

技术领域

本发明涉及信息技术安全领域，尤其涉及一种基于人体特征的连锁机构VIP客户智能服务系统。

背景技术

当今中国消费市场生机勃勃，消费者在市场中的地位越来越重要。随着现在科学技术在消费者行为分析领域的应用，消费者行为分析得到了快速的发展。在服务竞争方面，以"消费者为中心"的服务理念，逐渐成为现代企业竞争力的核心要素，如何不断创新地应用先进的科学技术知识和一些先进的文化理念对VIP客户的身份以及购物行为进行识别，从而对客户关系进行更好的管理，为VIP客户提供更好的服务，已成为企业立于不败之地的关键所在。

传统的VIP身份识别主要是通过会员卡来实现，会员卡具有便携性差，容易遗失和遗忘的特点。人脸识别方法作为一种使用方便、不易仿冒、直观性突出的身份认证手段，是最具发展潜力的身份识别技术之一。将人脸识别技术应用到连锁机构、商场中，快速识别VIP客户以及相关的消费行为，能够让销售人员或服务人员“无声无息”了解客人的信息，提高服务质量，避免VIP客户流失。然而，目前基于人脸的身份识别技术主要应用在公安、金融、网络安全、物业管理以及考勤等适用于近距离身份认证的领域，如中国专利申请号为201220370730.7的专利申请案，公开了一种银行身份识别系统，该系统通过人脸数据和手势数据，解决通过柜面视频或者远程视频对客户身份进行识别的问题；中国专利申请号为201010229174.7的专利申请案，公开了一种具有智能人脸识别的银行VIP客户服务系统和方法，主要有：1）VIP客户的人脸模板注册；2）VIP客户身份确认；3）VIP客户业务预约信息调用；4）VIP客户业务办理；中国专利申请号为201210256664.5的专利申请案，公开了一种基于人脸识别软件的身份识别系统，采用AdaBoost检测人脸，将检测后的人脸图像传成灰阶形式，转成灰阶形式后进行去光照处理后，进行读Gabor核，再进行作Gabor滤波，得到读训练基，采用最小角度分类得到角度最小的样本，从而取得相对应的用户资料。中国专利申请号为200420045484.3的专利申请案，公开了一种基于指纹识别身份的装置。飞瑞斯有限公司、深圳仁勤科技公司、深圳市科葩信息技术有限公司、灏泷智能科技（上海）有限公司实现了初步的基于人脸的VIP人员识别与管理系统，但现阶段大多数人脸识别系统都是受控条件下的近距离（<2m)人脸识别，要求用户以正面姿式接近摄像头.且上述身份识别装置由于仅从人脸、指纹特征判断客户身份，可靠性差，无法实现多人同时识别。因此无法满足中远距离人脸识别的要求，无法在商场、大型连锁机构中应用。

发明内容

本发明的目的是提供一种基于人体特征的连锁机构VIP客户智能服务系统。为了解决上述存在的技术问题实现上述目的，本发明是通过以下技术方案实现的：

一种基于人体特征的连锁机构VIP客户智能服务系统，包括身份识别模块、智能提醒模块和消费者购物记录分析模块；

其中，所述的身份识别模块是由1个3D深度摄像头、2台高清摄像头、处理器，以及与其相连接的人脸识别模块、身高体型识别模块、客户数据库无线传输模块和客户信息传输模块组成；所述的身份识别模块，主要是通过多个摄像头采集到信息定位，并将采集到的多个人的骨骼信息和人脸信息传送给处理器，处理器执行识别的算法，将信息与静态采集的VIP客户信息进行匹配，实现大于2m情况下识别客户身份；

所述的智能提醒模块包括迎宾玩具传输模块、手持小型信息接收模块、无线耳机、液晶显示屏、处理器和报警模块组成；

所述的消费者购物记录分析模块是由人脸识别仪、数据记录分析模块、处理器、客户数据库、信息传输模块、手机短信提醒模块组成。

所述的身份识别模块主要是由3D深度摄像头和高清摄像头采集和定位图像信息，3D深度摄像头采集的图像信息和两侧的高清摄像头采集的图像信息通过身高体型识别模块和人脸识别模块传输到处理器，身高体型识别模块和人脸识别模块通过处理器中的算法进行人的身份识别，处理器将身份识别信息保存到客户数据库中，处理器也将身份识别后调取客户的消费信息资料等客户信息，通过无线传输模块将客户的消费信息等客户资料传输给服务人员，同时，客户传输模块通过互联网将信息传输到各个连锁机构中。3D深度摄像头安装在商场及连锁机构的各个入口处的正中央，高清摄像头分别安装在3D深度摄像头的两侧，使三个摄像头的拍摄区域能覆盖整个入口区域。

所述的智能提醒模块是为欢迎顾客并提醒服务人员有顾客到来,通过无线传输模块将客户的详细信息发送到手持小型信息接收模块上，利用无线耳机用语音和显示屏输出的方式通知服务人员客户信息，通过对手持接收终端的操作，了解该客户的资料。当识别出警方通缉人员时就会通过报警模块直接向警方报警。

所述的消费者购物记录分析模块，是通过收银台上安装人脸识别仪来识别顾客身份，取代会员卡，将顾客的消费信息通过数据记录模块和数据分析模块进行整理汇总，保存在处理器中，建立客户数据库，该数据库与身份识别模块中的客户数据库相匹配，构成系统的数据库，在整个连锁机构中可以通过互联网互相传输调用；该模块还通过智能提醒模块将顾客的购物消费记录分析发送给了服务人员，同时，也根据该顾客的消费记录及分析对其通过手机短信提醒模块发送一些商品信息和优惠活动信息；还根据系统对该顾客的消费记录分析，定期将优惠活动、消费积分和消费情况以彩信或短信形式发送到其手机上。

由于采用上述技术方案，本发明提供的一种基于人体特征的连锁机构VIP客户智能服务系统，与现有技术相比具有这样的有益效果：

本发明为连锁机构的VIP客户识别、智能购物提供了一种新的平台。

本发明针对大型连锁机构的VIP客户较多，客户姿态复杂的特点，通过中远距离（2-10m)人脸识别,实现VIP身份识别以及职能服务，提高连锁机构服务质量，提升连锁机构潜在品牌效益。

本发明通过对人体信息的采集，更可靠地识别顾客的身份，取代了携带会员卡的不便，解决了连锁机构、大型商场的VIP客户较多，客户姿态复杂，近距离人脸识别技术难以应用的问题；同时，实现对进入商场或连锁机构的VIP客户的快速动态人脸识别与身份认证，身份信息能结合后端客户管理系统数据库（客户营销信息记录），并将相关信息直接反馈给店内的销售员、相关员工或其他连锁机构，还提供了对客户的消费行为进行分析记录的功能，并根据客户的消费记录分析对客户通过短信形式发送相关资讯及消费信息，为客户购物提供更多便捷。

附图说明

图1是本发明系统的结构图；

图2是身份识别模块结构图；

图3是智能提醒模块结构图；

图4是消费者购物消费记录分析模块结构图；

图5是身份识别流程图；

图6是本发明系统工作流程图；

图7是本发明系统的安装实物图。

具体实施方式

下面结合附图与具体实施方式对本发明作进一步详细描述：

本发明的一种基于人体特征的连锁机构VIP客户智能服务系统包括三个模块，第一个模块是安装有3D深度摄像和高清摄像头的身份识别模块，第二个模块是智能提醒模块，第三个模块是消费者购物记录分析模块。

在本实施例中，如图1和图7所示，所述的身份识别模块主要由3D深度摄像头，高清摄像头，处理器以及与其相连接的人脸识别模块、身高体型识别模块、客户数据库、无线传输模块和客户信息传输模块组成；

所述的智能提醒模块主要包括迎宾玩具，传输模块，手持小型信息接收模块，无线耳机，液晶显示屏，处理器以及与其相连接的报警模块组成；

消费者购物记录分析模块主要是由人脸识别仪，数据记录分析模块，处理器(，客户数据库，信息传输模块和手机短信提醒模块组成。

系统中，三个模块各有一个微处理器，通过网络连接，与总控室的处理器相连接。

所述3D深度摄像采用Kinect体感器。

如图2所示，所述的身份识别模块主要是通过多个摄像头采集到信息定位，并将采集到的多个人的骨骼信息和人脸信息传送给处理器，处理器执行识别的算法，将信息与静态采集的VIP客户信息进行匹配，实现大于2m情况下识别客户身份。该模块主要是由3D深度摄像头和高清摄像头采集和定位图像信息，3D深度摄像头采集的图像信息和两侧的高清摄像头采集的图像信息通过身高体型识别模块和人脸识别模块传输到处理器，身高体型识别模块和人脸识别模块通过处理器中的算法进行人的身份识别，处理器将身份识别信息保存到客户数据库中，处理器也将身份识别后调取客户的消费信息资料等客户信息，通过无线传输模块将客户的消费信息等客户资料传输给服务人员，同时，客户传输模块通过互联网将信息传输到各个连锁机构中。3D深度摄像头安装在商场及连锁机构的各个入口处的正中央，高清摄像头分别安装在3D深度摄像头的两侧，使三个摄像头的拍摄区域能覆盖整个入口区域。

本发明的控制部分采用处理器，所述的处理器采用的是PC机，设置在商场总控室，并与各个连锁机构及警方联网。PC机中的VIP信息是通过摄像头预先利用静态方式采集所有VIP成员的人脸、身高和体型等信息进行记录，并建立相应的数据库。

所述的身份识别模块工作流程如图5所示，该模块主要是由Kinect摄像头和高清摄像头采集图像信息。Kinect摄像头安装在商场及连锁机构每个入口处正中央的2米-2.5米高处，高清摄像头分别安装在Kinect摄像头的两侧，安装位置以确保三个摄像头的拍摄区域能覆盖整个入口区域为宜。Kinect摄像头主要用于获取客户的深度数据、骨骼信息（包括身高、身体各部分体型比）及粗略的人脸识别。根据身高、身体各部分体型比，系统将客户分为1.5米以下、1.5-1.6米、1.6-1.7米、1.7-1.8米以及1.8米以上五个大类，Kinect摄像头获取客户骨骼信息后，首先，快速确定客户的类型，在该类型中进行快速人脸识别；若骨骼信息获取失败，则直接进行粗略人脸识别。若粗略人脸识别失败，则利用高清摄像头准确定位人脸细节信息，先将人脸信息进行定位，然后进行人脸的精确识别。Kinect摄像头可以同时识别6个人的骨骼信息并且可以在大于2m的距离识别人脸，可以实现远距离的多人同时识别的效果；Kinect摄像头采集的图像信息和两侧的高清摄像头采集的图像信息通过身高体型识别模块和人脸识别模块传输到PC机，身份识别模块和人脸识别模块通过PC机中的算法进行人的身份识别，PC机将身份识别信息保存到客户数据库中，PC机在身份识别后调取客户的消费信息资料等客户信息，通过基于ZigBee技术的无线传输模块将客户的消费信息等客户资料传输给服务人员，同时，客户传输模块通过互联网将信息传输到各个连锁机构中。

所述的人脸识别模块通过以下步骤实现2-10m范围内的多人人脸识别：

（1）首先PC机在Kincet深度视频流中截取2-10m范围内的深度数据；

（2）利用背景差分的方法分别在深度视频流和彩色视频流中提取运动目标，并根据提取的深度数据，对应将彩色图像中2-10m范围内的运动目标分割出来。

（3）如果Kinect已经捕获到一个或几个人的骨骼数据，则直接计算这几个人所在的距离、身高、体型比，并直接利用Kinect自带的人脸识别功能进行人脸识别。如果人脸识别失败，则提取彩色图像中所对应的上下身衣物颜色特征；然后在深度数据中去除已经提取的人体数据信息，并分别对单帧深度图像和彩色图像中的剩余的运动目标进行边缘检测、轮廓识别，快速提取轮廓中的直线、圆弧、对称性和上下身衣物颜色特征，实现剩余人的计数、身高、体型比测量以及人脸定位；

（4）根据未识别出的人体上下身颜色特征，启动两侧的高清摄像头进行快速的多人人脸定位；

同时将Kinect以及两侧高清摄像头定位的人脸图像进行对比，优先选择同一人正面人脸图像利用现有成熟的PCA人脸识别算法进行人脸识别。

所述的智能提醒模块，如图3所示，是为欢迎VIP顾客并提醒服务人员有VIP顾客到来,通过无线传输模块将客户的详细信息发送到手持小型信息接收模块上，利用无线耳机用语音和显示屏输出的方式通知服务人员客户信息，通过对手持接收终端的操作，了解该客户的资料。当识别出警方通缉人员时就会通过报警模块直接向警方报警。

所述的智能提醒模块是将VIP客户的消费行为及相关信息在各个连锁机构互相传输，对服务人员进行服务提醒，当迎宾玩具探测到有VIP顾客来时会对该VIP顾客表示欢迎，同时提醒服务人员有VIP顾客到来。身份识别模块识别完顾客身份后通过无线传输模块将客户的详细信息发送到手持小型信息接收模块上，通过无线耳机用语音输出的方式通知服务人员客户信息，并且客户信息会显示在服务人员所用的接收器的液晶显示屏上，通过对手持接收终端的操作，了解该客户的资料。此系统与警方建立网络连接，当身份识别模块识别出该顾客为警方通缉人员，则系统会通过报警模块直接向警方报警，为警方破案带去方便。

所述的消费者购物记录分析模块，如图4所示，是通过收银台上安装的人脸识别仪来识别顾客身份，取代会员卡，将顾客的消费信息通过数据记录模块和数据分析模块进行整理汇总，保存在处理器中，建立起客户数据库，该数据库与身份识别模块中的客户数据库相匹配，构成系统的数据库，在整个连锁机构中可以通过互联网互相传输调用。此模块还通过智能提醒模块将该顾客的消费者购物记录分析发送给了服务人员，同时，也根据该顾客的消费记录及分析对顾客通过手机短信提醒模块发送一些该顾客可能感兴趣的产品及其可能感兴趣的一些活动及优惠信息。此外，根据系统对顾客消费记录分析，定期将一些优惠活动及积分、消费情况以彩信或短信形式发送到顾客手机上。

消费者购物记录分析模块通过收银台上安装人脸识别仪，当顾客去结账时，通过收银台上安装的摄像头识别顾客的VIP身份，将顾客的消费信息传输到系统数据库中；并且，系统将顾客的消费信息通过数据记录模块和数据分析模块进行整理汇总，保存在PC机中，建立起客户数据库，该数据库与身份识别模块中的客户数据库相匹配，构成系统的数据库，在整个连锁机构中可以通过互联网互相传输调用。顾客当天消费后，将消费信息发送到VIP绑定手机号上。当顾客进入商场后，经过身份识别模块确定顾客身份后，通过智能提醒模块将该顾客的消费者购物记录分析发送给了服务人员，方便服务人员提供更好的服务，为商城针对不同客户提供差异化服务提供可能。并且，根据客户之前的消费记录以对客户的购物行为进行分析，系统向客户发出短信，向客户推荐其可能感兴趣的产品及其可能感兴趣的一些活动及优惠信息。同时，根据系统对顾客消费记录分析，定期将一些优惠活动及积分、消费情况以彩信或短信形式发送到顾客手机上。消费行为分析采用：通过RFP模型对客户消费行为指标进行抽取，然后运用改进的蚁群组合算法，对客户进行客户群划分，并对各类客户进行客户消费行为分析，最后用基于遗传算法的关联规则对客户特征进行提取，并将客户的特征进行分析管理。

本发明的工作流程图如图6所示，系统通过摄像头捕获人脸身形信息，并将身份信息传送到监控中心处理器，由处理器对身份信息进行识别，然后将身份识别信息发送给智能提醒模块及消费者购物记录分析模块，使手持终端、迎宾玩具、其他连锁机构等接收到信息。

本发明提供一种功能先进、方便快捷、可靠性高、提供更好服务的基于人体特征的连锁机构VIP客户智能服务系统。该系统适用于各大商场、连锁机构服务中，为商城针对不同客户提供差异化服务提供可能，提高了服务质量，使客户感到尊贵的服务，提升商场潜在的品牌效益，其应用范围比较广泛具有很好的应用前景和市场。

以上示意性的对本发明及实施方式进行了描述，该描述没有局限性，附图中所示的也只是本发明的实施方式之一。所以，如果本领域的普通技术人员受其启示，在不脱离本发明创造宗旨的情况下，采用其他形式的同类部件或其他形式的各部件布局方式，不经创造性的设计出与该技术方案相似的技术方案与实施例子，均应属于本发明的保护范围。

Claims (4)

1.一种基于人体特征的连锁机构VIP客户智能服务系统，包括身份识别模块、智能提醒模块和消费者购物记录分析模块，其特征在于：

所述的身份识别模块是由1个3D深度摄像头、2台高清摄像头、处理器，以及与其相连接的人脸识别模块、身高体型识别模块、客户数据库无线传输模块和客户信息传输模块组成；所述的身份识别模块，主要是通过多个摄像头采集到信息定位，并将采集到的多个人的骨骼信息和人脸信息传送给处理器，处理器执行识别的算法，将信息与静态采集的VIP客户信息进行匹配，实现大于2m情况下识别客户身份；

所述的智能提醒模块包括迎宾玩具传输模块、手持小型信息接收模块、无线耳机、液晶显示屏、处理器和报警模块组成；

所述的消费者购物记录分析模块是由人脸识别仪、数据记录分析模块、处理器、客户数据库、信息传输模块、手机短信提醒模块组成。

2.根据权利要求1所述的一种基于人体特征的连锁机构VIP客户智能服务系统，其特征在于：

所述的身份识别模块主要是由3D深度摄像头和高清摄像头采集和定位图像信息，3D深度摄像头采集的图像信息和两侧的高清摄像头采集的图像信息通过身高体型识别模块和人脸识别模块传输到处理器，身高体型识别模块和人脸识别模块通过处理器中的算法进行人的身份识别，处理器将身份识别信息保存到客户数据库中，处理器也将身份识别后调取客户的消费信息资料等客户信息，通过无线传输模块将客户的消费信息等客户资料传输给服务人员，同时，客户传输模块通过互联网将信息传输到各个连锁机构中。

3.根据权利要求1所述的一种基于人体特征的连锁机构VIP客户智能服务系统，其特征在于：所述的智能提醒模块是为欢迎顾客并提醒服务人员有顾客到来,通过无线传输模块将客户的详细信息发送到手持小型信息接收模块上，利用无线耳机用语音和显示屏输出的方式通知服务人员客户信息，通过对手持接收终端的操作，了解该客户的资料。当识别出警方通缉人员时就会通过报警模块直接向警方报警。

4.根据权利要求1所述的一种基于人体特征的连锁机构VIP客户智能服务系统，其特征在于：所述的消费者购物记录分析模块，是通过收银台上安装人脸识别仪来识别顾客身份，将顾客的消费信息通过数据记录模块和数据分析模块进行整理汇总，保存在处理器中，建立客户数据库，该数据库与身份识别模块中的客户数据库相匹配，构成系统的数据库，在整个连锁机构中可以通过互联网互相传输调用；该模块还通过智能提醒模块将顾客的购物消费记录分析发送给了服务人员，同时，也根据该顾客的消费记录及分析对其通过手机短信提醒模块发送一些商品信息和优惠活动信息；还根据系统对该顾客的消费记录分析，定期将优惠活动、消费积分和消费情况以彩信或短信形式发送到其手机上。

Images