CN108805673A - 基于人脸识别的家装展会系统及方法 - Google Patents

Abstract

本发明公开了一种基于人脸识别的家装展会系统及方法，包括：签到机、服务器、用户终端设备和多个展位摄像装置；签到机包括：签到摄像器，用于录制签到视频流；输入设备，用于接收用户签到信息；第一处理器，用于分析签到摄像器录制的视频流以提取用户人脸信息并将人脸信息和签到信息进行数据绑定；和第一无线传输设备；展位摄像装置包括：展位摄像器和第二无线传输设备；服务器包括：主存储器、数据传输设备和中央处理器；用户终端设备：包括展示服务器推送的信息的显示装置。本发明的有益之处在于能够在家装展会上推荐符合用户意向的产品。

Description

基于人脸识别的家装展会系统及方法

技术领域

本发明涉及一种基于人脸识别的家装展会系统及方法。

背景技术

商家会通过互联网的方式，把装修业主引导到家装展会活动现场购买建材、家具等装修服务。当业主到达活动现场后，业主有明确购买目的的会直接到商家处咨询，但因为现场业主比较多，很多时候商家来不及提供相关产品信息或服务业主；而未决定购买哪个产品的业主，活动现场只能靠咨询工作人员或者通过举办方提供的手册了解相关产品信息。对于举办方，也很难把控现场的具体情况，只能大体上了解某些商家的购买情况。

这种方式导致很多业主没法比较详细的了解到商家产品信息。举办方也不能一次性把所有商家的产品信息推送给业主，这样会导致信息太多看不过来，最终导致客户流失。可见商家并不是没有能吸引业主的产品，而是产品没有及时推送给业主。同时，活动现场没有好的数据反馈，不能对之后的活动优化提供好的优化点。

发明内容

为解决现有技术的不足，本发明提供了一种能够利用人脸识别技术给用户在家装展会活动中推荐符合用户意向的产品的基于人脸识别的家装展会系统。

为了实现上述目标，本发明采用如下的技术方案：

一种基于人脸识别的家装展会系统，包括：签到机、服务器、用户终端设备和多个展位摄像装置；

签到机包括：签到摄像器，用于录制签到视频流；输入设备，用于接收用户签到信息；第一处理器，用于分析签到摄像器录制的视频流以提取用户人脸信息并将人脸信息和签到信息进行数据绑定；和第一无线传输设备，将绑定后的人脸信息和签到信息上传至服务器；

展位摄像装置包括：展位摄像器，用于录制展位的视频流；和第二无线传输设备，将展位摄像器录制的视频流上传至服务器；

服务器包括：主存储器，存储包括有多个展位的展位相关信息和多个用户的用户相关信息的数据库；数据传输设备，接收来自签到机的人脸信息和签到信息；和中央处理器，读取主存储器存储的信息和数据传输设备接收的信息并判断该用户的签到信息是否在数据库内；当判断为是时，通过服务器向该用户的用户终端设备推送该用户的用户相关信息关联的展位相关信息；当判断为否时，通过服务器向用户的用户终端设备推送数据库所存储的推荐信息；将接收到的人脸信息和签到信息存储至数据库；服务器接收多个展位摄像装置上传的视频流并根据视频流更新数据库的推荐信息；

用户终端设备包括：展示服务器推送的信息的显示装置。

进一步地，服务器根据展位摄像装置拍摄的视频流确定用户在该展位停留的时间，当该用户在该展位停留的时间达到预设时间时，服务器向该用户的用户终端设备推送该展位的展位相关信息。

进一步地，展位摄像装置还包括：摄像头移动装置、机壳和安装板；展位摄像器和第二无线传输设备安装至机壳；机壳能够相对于安装板运动；摄像头移动装置用于相对于安装板移动机壳以调整展位摄像器的摄像位置。

进一步地，摄像头移动装置包括：电机和轮子；电机和轮子安装至机壳；电机驱动轮子转动以使机壳相对于安装板运动。

进一步地，摄像头移动装置包括：展位控制器和多个电磁铁；多个电磁铁成矩阵排列固定至安装板的一侧；展位摄像装置还包括：第一磁铁；第一磁铁安装至机壳；展位控制器通过控制多个电磁铁的通断吸引第一磁铁以带动展位摄像装置在安装板上运动。

进一步地，展位摄像装置包括4个第一磁铁；4个第一磁铁环绕展位摄像器的光轴；第一磁铁成长条状并倾斜于展位摄像器的光轴；4个第一磁铁与展位摄像器的光轴的角度为45度；4个第一磁铁朝向安装板一侧的磁极极性相同。

进一步地，摄像头移动装置还包括：多个滚轮球；滚轮球能够相对于机壳转动；滚轮球的球心位于机壳内；并且滚轮球至少部分凸出于机壳外；滚轮球凸出于机壳的部分与安装板接触。

一种基于人脸识别的家装展会方法，包括：

通过签到机的输入设备输入用户签到信息进行签到；签到机的签到摄像器录制用户签到时的视频流以获取用户人脸信息；

通过签到机的处理器分析签到摄像机录制的视频流以提取用户人脸信息并将人脸信息与签到信息进行数据绑定；

通过签到机的无线传输设备将数据绑定后的人脸信息和签到信息上传至服务器；

通过展位摄像装置录制展位的视频流并将该视频流上传至服务器；

服务器判断签到的用户是否在数据库内；当判断为是时，通过服务器向该用户的用户终端设备推送该用户的用户相关信息关联的展位相关信息；当判断为否时，通过服务器向用户的用户终端设备推送数据库所存储的推荐信息；服务器接收多个展位摄像装置上传的视频流并根据视频流更新数据库的推荐信息。

进一步地，服务器根据展位摄像装置拍摄的视频流确定用户在该展位停留的时间，当该用户在该展位停留的时间达到预设时间时，服务器向该用户的用户终端设备推送该展位的展位相关信息。

进一步地，每间隔一预设时间选取展位摄像装置录制的视频流的视频画面；根据该视频画面绘制位置图；调整展位摄像装置的光轴的位置使光轴对齐位置图的中心。

本发明的有益之处在于能够根据对用户的人脸识别技术给用户在家装展会活动中推荐符合用户意向的产品。

附图说明

图1是本发明的一种基于人脸识别的家装展会系统的示意图；

图2是图1中基于人脸识别的家装展会系统所适用的一种基于人脸识别的家装展会方法的流程图；

图3是图1中基于人脸识别的家装展会系统的展位摄像装置的示意图；

图4是图3中结构的平面图；

图5是图3中结构的另一视角的平面图；

图6是图3中结构的爆炸图；

图7是图3中结构的仰视图；

图8是图1中展位摄像装置的机壳和安装板的示意图；

图9是图1中展位摄像装置的安装板和电磁铁的示意图。

基于人脸识别的家装展会系统100，签到机10，签到摄像器11，输入设备12，第一处理器13，第一无线传输设备14，第一存储器15；服务器20，主存储器21，数据传输设备22，中央处理器23；用户终端设备30，显示装置31；展位摄像装置40，展位摄像器41，第二无线传输设备42，第二处理器43，第二存储器44，机壳45，安装板46，摄像头移动装置47，电磁铁48，第一磁铁49，光轴50，滚轮球51。

具体实施方式

以下结合附图和具体实施例对本发明作具体的介绍。

如图1所示，一种基于人脸识别的家装展会系统100，包括：签到机10、服务器20、用户终端设备30和多个展位摄像装置40。每个展位分别设置有一个展位摄像装置40。

签到机10供用户进行签到。具体而言，签到机10包括：输入设备12、签到摄像器11、第一处理器13和第一无线传输设备14。签到摄像器11用于录制签到视频流。

输入设备12用于接收用户签到信息。签到信息指带有用户自身属性的信息。签到信息可以是手机号码或二维码信息等。作为一种具体的实施方式，输入设备12为二维码扫描器。二维码扫描器扫描用户展示的二维码信息。更具体而言，该二维码信息可以通过用户终端设备30所展示。该二维码信息可以由用户终端设备30所运行的应用程序所生成。服务器20同样可以采用该应用程序向用户推送信息。作为一种具体的实施方式，用户终端设备30为手机。

作为一种可以选的实施方式，输入设备12为键盘或触控显示屏。供用户输入用户特征信息。例如用户可以输入手机号码完成签到动作。

签到摄像器11用于录制签到视频流。具体而言，签到机10还包括机架。签到摄像器11和输入设备12安装至机架。签到摄像器11位于输入设备12的上方。签到摄像器11的光轴50与输入设备12形成一定的角度。当用户在扫二维码或输入手机号码的同时，签到摄像器11能够清晰录制用户的人脸信息。

第一处理器13分析签到摄像器11录制的视频流以提取用户人脸信息并将人脸信息和签到信息进行数据绑定，并通过第一无线传输设备14将绑定后的人脸信息和签到信息上传到服务器20。签到机10还包括第一存储器15。第一存储器15可以存储用户签到信息、签到视频流或人脸识别程序等。

作为第一处理器13提取用户人脸信息的一种具体实施方式，可以通过人像识别库调用视频流，通过分类器获取人脸信息生成代表人脸信息的面纹编码。将该面纹编码与当前签到的用户信息相绑定或关联。

展位摄像装置40包括：展位摄像器41和第二无线传输设备42。

展位摄像器41用于录制展位的视频流。具体而言，展位摄像器41用于录制面向站台的用户的视频流。展位摄像器41可以和签到摄像器11为同样的摄像器，也可以为不同的摄像器。第二无线传输设备42将展位摄像器41录制的视频流上传至服务器20。第一无线传输设备14和第二无线传输设备42可以为同样的无线传输设备也可以为不同的无线传输设备。

展位摄像装置40还包括：第二处理器43和第二存储器44。第二存储器44能够存储视频流。第二处理器43用于控制展位摄像器41、第二无线传输设备42和第二存储器44。

服务器20包括：主存储器21、数据传输设备22和中央处理器23。

主存储器21存储包括有多个展位的展位相关信息和多个用户的用户相关信息的数据库。可以通过在展会前收录用户提供的用户相关信息以及参展的展商的信息构建数据库。提取用户提供的用户相关信息和展商提供的展位相关信息进行特征提取，对提取的用户的特征信息和多个展商的特征信息进行特征匹配。对完成特征匹配的展位相关信息和该用户的标签进行绑定。构建用户相关信息和展位相关信息的关联。

数据传输设备22接收来自签到机10的人脸信息和签到信息。

中央处理器23读取主存储器21存储的信息和数据传输设备22接收的信息并判断该用户的签到信息是否在数据库内；当判断为是时，通过服务器20向该用户的用户终端设备30推送该用户的用户相关信息关联的展位相关信息；当判断为否时，通过服务器20向用户的用户终端设备30推送数据库所存储的推荐信息；将接收到的人脸信息和签到信息存储至数据库；服务器20接收多个展位摄像装置40上传的视频流并根据视频流更新数据库的推荐信息。

具体而言，展位相关信息是指该展位的位置信息以及该展位内展示的产品信息。用户相关信息是指数据库中存储的关于用户的相关信息，包括用户的个人属性信息和需求信息。个人属性信息中至少一种可以作为用户特征识别码的信息即签到信息同类别的信息。个人属性信息可以是手机号码或二维码等。

需求信息为用户想要了解或需求购买的相关信息。推荐信息是服务器20向用户的终端设备推送的信息。推荐信息的信息类别与展位相关信息的类别相同。推荐信息包括展位位置信息和该展位内展示的产品信息。

可以通过展会前的收录的数据库形成初始推荐信息。然后推荐信息的初始值设置为空。通过多个展位摄像装置40上传的视频流更新数据库所存储的推荐信息。

作为一种具体的实施方式，多个展位的展位摄像器41录制展位的视频流上传至服务器20。服务器20通过对比不同展位的人的个数确定受欢迎的展位的排序。根据该排序更新推荐信息。

作为一种可选的实施方式，也可以通过在一段时间内的展位的人的停留时间的总和确定受欢迎的展位的排序。根据该排序更新推荐信息。

作为一种可选的实施方式，也可以通过推送至用户终端设备30上的点击率排序更新推荐信息。

用户终端设备30：包括展示服务器20推送的信息的显示装置31。

作为一种优选的实施方式，服务器20根据展位摄像装置40拍摄的视频流确定用户在该展位停留的时间，当该用户在该展位停留的时间达到预设时间时，服务器20向该用户的用户终端设备30推送该展位的展位相关信息。

服务器20实时提取展位摄像装置40拍摄的视频流中的人脸图像的特征数据，并与数据库存储的特征末班进行搜索匹配。通过设定一个阈值，当相似度超过这一阈值，认定是同一个人。

如图3至图9所示，作为一种优选的实施方式，展位摄像装置40还包括：摄像头移动装置47、机壳45和安装板46。展位摄像器41和第二无线传输设备42安装至机壳45；机壳45能够相对于安装板46运动；摄像头移动装置47用于相对于安装板46移动机壳45以调整展位摄像器41的摄像位置。

作为一种具体的可选实施方式，摄像头移动装置包括：电机和轮子；电机和轮子安装至机壳；电机驱动轮子转动以使机壳相对于安装板运动。

作为一种具体的优选的实施方式，摄像头移动装置47包括：展位控制器和多个电磁铁48；多个电磁铁48成矩阵排列固定至安装板46的一侧；展位摄像装置40还包括：第一磁铁49；第一磁铁49安装至机壳45；展位控制器通过控制多个电磁铁48的通断吸引第一磁铁49以带动展位摄像装置40在安装板46上运动。展位控制器可以是MCU控制器也可以是PLC控制器。

作为一种优选的实施方式，展位摄像装置40包括4个第一磁铁49；4个第一磁铁49环绕展位摄像器41的光轴50；第一磁铁49成长条状并倾斜于展位摄像器41的光轴50；4个第一磁铁49与展位摄像器41的光轴50的角度为45度；4个第一磁铁朝向安装板46一侧的磁极极性相同。

4个第一磁铁49围绕展位摄像器41的光轴50设置保证了机壳45能够在多个方向上均能受到电磁铁48的吸引力从而带动展位摄像器41在多个方向上进行移动以调节位置。

作为一种优选的实施方式，摄像头移动装置47还包括：多个滚轮球51；滚轮球51能够相对于机壳45转动；滚轮球51的球心位于机壳45内；并且滚轮球51至少部分凸出于机壳45外；滚轮球51凸出于机壳45的部分与安装板46接触。多个滚轮球51起到支撑作用，并保证了机壳45能够顺利的相对于安装板46滑动。参考图7和图8，当静止时，展位控制器控制4个电磁铁48通电，四个电磁铁48的位置分别对应展位摄像装置40的4个第一磁铁49。当需要向右移动展位摄像装置40时，

展位控制器控制原来通电的4个电磁铁48的右侧相邻的电磁铁48通电。并逐渐减小原来通电的4个第一磁铁49的磁性。由于左右方向上的两侧电磁铁48成斜45度设置，在与右侧的第一磁铁49相对应的通电的电磁铁48在该方向上的分力作用下，驱动展位摄像器41向右运动。同样原理能够实现向左、向上和向下的运动。同时4个第一磁铁49设置方式能够有效保持电磁铁48对第一磁铁49的吸合。防止机壳45脱离。

如图2所示，一种基于人脸识别的家装展会方法，包括：

S101、通过签到机10的输入设备12输入用户签到信息进行签到；签到机10的签到摄像器11录制用户签到时的视频流以获取用户人脸信息；

S102、通过签到机10的处理器分析签到摄像机录制的视频流以提取用户人脸信息并将人脸信息与签到信息进行数据绑定；

S103、通过签到机10的无线传输设备将数据绑定后的人脸信息和签到信息上传至服务器20；

S104、通过展位摄像装置40录制展位的视频流并将该视频流上传至服务器20；

S105、服务器20判断签到的用户是否在数据库内；当判断为是时，执行S106、通过服务器20向该用户的用户终端设备30推送该用户的用户相关信息关联的展位相关信息；当判断为否时，执行S107、通过服务器20向用户的用户终端设备30推送数据库所存储的推荐信息；S108、服务器20接收多个展位摄像装置40上传的视频流并根据视频流更新数据库的推荐信息。

作为一种优选的实施方式，服务器20根据展位摄像装置40拍摄的视频流确定用户在该展位停留的时间，当该用户在该展位停留的时间达到预设时间时，服务器20向该用户的用户终端设备30推送该展位的展位相关信息。

作为一种优选的实施方式，每间隔一预设时间选取展位摄像装置40录制的视频流的视频画面；根据该视频画面绘制位置图；调整展位摄像装置40的光轴50的位置使光轴50对齐位置图的中心。

具体而言，每个识别的人脸图像作为一个信息点。外围的信息点的连线构成位置图。位置图为多边形该多边形的中心则为位置图的中心。通过摄像头移动装置47移动展位摄像器41调整展位摄像器41的摄像位置使展位摄像器41的光轴对齐位置图的中心。

以上显示和描述了本发明的基本原理、主要特征和优点。本行业的技术人员应该了解，上述实施例不以任何形式限制本发明，凡采用等同替换或等效变换的方式所获得的技术方案，均落在本发明的保护范围内。

Claims (10)

1.一种基于人脸识别的家装展会系统，其特征在于，包括：签到机、服务器、用户终端设备和多个展位摄像装置；

所述签到机包括：

签到摄像器，用于录制签到视频流；

输入设备，用于接收用户签到信息；

第一处理器，用于分析签到摄像器录制的视频流以提取用户人脸信息并将人脸信息和签到信息进行数据绑定；和

第一无线传输设备，将绑定后的人脸信息和签到信息上传至所述服务器；

所述展位摄像装置包括：

展位摄像器，用于录制展位的视频流；和

第二无线传输设备，将所述展位摄像器录制的视频流上传至所述服务器；

所述服务器包括：

主存储器，存储包括有多个展位的展位相关信息和多个用户的用户相关信息的数据库；

数据传输设备，接收来自所述签到机的人脸信息和签到信息；和

中央处理器，读取所述主存储器存储的信息和所述数据传输设备接收的信息并判断该用户的签到信息是否在数据库内；当判断为是时，通过所述服务器向该用户的用户终端设备推送该用户的用户相关信息关联的展位相关信息；当判断为否时，通过所述服务器向用户的用户终端设备推送数据库所存储的推荐信息；将接收到的人脸信息和签到信息存储至数据库；所述服务器接收多个所述展位摄像装置上传的视频流并根据视频流更新数据库的推荐信息；

所述用户终端设备：包括展示所述服务器推送的信息的显示装置。

2.根据权利要求1所述的基于人脸识别的家装展会系统，其特征在于：

所述服务器根据所述展位摄像装置拍摄的视频流确定用户在该展位停留的时间，当该用户在该展位停留的时间达到预设时间时，所述服务器向该用户的用户终端设备推送该展位的展位相关信息。

3.根据权利要求1所述的基于人脸识别的家装展会系统，其特征在于：

所述展位摄像装置还包括：摄像头移动装置、机壳和安装板；

所述展位摄像器和所述第二无线传输设备安装至所述机壳；

所述机壳能够相对于所述安装板运动；

所述摄像头移动装置用于相对于所述安装板移动所述机壳以调整所述展位摄像器的摄像位置。

4.根据权利要求3所述的基于人脸识别的家装展会系统，其特征在于：

所述摄像头移动装置包括：电机和轮子；

所述电机和所述轮子安装至所述机壳；

所述电机驱动所述轮子转动以使所述机壳相对于所述安装板运动。

5.根据权利要求3所述的基于人脸识别的家装展会系统，其特征在于：

所述摄像头移动装置包括：展位控制器和多个电磁铁；

多个所述电磁铁成矩阵排列固定至所述安装板的一侧；

所述展位摄像装置还包括：第一磁铁；

所述第一磁铁安装至所述机壳；

所述展位控制器通过控制多个所述电磁铁的通断吸引所述第一磁铁以带动所述展位摄像装置在所述安装板上运动。

6.根据权利要求5所述的基于人脸识别的家装展会系统，其特征在于：

所述展位摄像装置包括4个所述第一磁铁；

4个所述第一磁铁环绕所述展位摄像器的光轴；

所述第一磁铁成长条状并倾斜于所述展位摄像器的光轴；4个所述第一磁铁与所述展位摄像器的光轴的角度为45度；

4个所述第一磁铁朝向所述安装板一侧的磁极极性相同。

7.根据权利要求6所述的基于人脸识别的家装展会系统，其特征在于：

所述摄像头移动装置还包括：多个滚轮球；所述滚轮球能够相对于所述机壳转动；

所述滚轮球的球心位于所述机壳内；并且所述滚轮球至少部分凸出于所述机壳外；所述滚轮球凸出于所述机壳的部分与所述安装板接触。

8.一种基于人脸识别的家装展会方法，其特征在于，包括：

通过签到机的输入设备输入用户签到信息进行签到；签到机的签到摄像器录制用户签到时的视频流以获取用户人脸信息；

通过签到机的处理器分析签到摄像机录制的视频流以提取用户人脸信息并将人脸信息与签到信息进行数据绑定；

通过签到机的无线传输设备将数据绑定后的人脸信息和签到信息上传至服务器；

通过展位摄像装置录制展位的视频流并将该视频流上传至服务器；

服务器判断签到的用户是否在数据库内；当判断为是时，通过服务器向该用户的用户终端设备推送该用户的用户相关信息关联的展位相关信息；当判断为否时，通过服务器向用户的用户终端设备推送数据库所存储的推荐信息；

服务器接收多个展位摄像装置上传的视频流并根据视频流更新数据库的推荐信息。

9.根据权利要求8所述的基于人脸识别的家装展会方法，其特征在于：

服务器根据展位摄像装置拍摄的视频流确定用户在该展位停留的时间，当该用户在该展位停留的时间达到预设时间时，服务器向该用户的用户终端设备推送该展位的展位相关信息。

10.根据权利要求8所述的基于人脸识别的家装展会方法，其特征在于：

每间隔一预设时间选取展位摄像装置录制的视频流的视频画面；

根据该视频画面绘制位置图；

调整展位摄像装置的光轴的位置使光轴对齐位置图的中心。