发明内容
针对现有技术中的缺陷,本发明实施例提供一种基于大数据的人员同行分析方法、系统、设备及介质,利用手机基站信息结合视频卡口点抓拍信息可有效确定作案人员的身份及行动轨迹,节省大量人工排查时间,提高了治安管理水平和违法行为处理的效率。
第一方面,本发明实施例提供的一种基于大数据的人员同行分析方法,包括以下步骤:
获取各个卡口抓拍的车辆和人脸图片信息;
对获取的车辆和人脸图片信息进行清洗,将清洗后的图片信息保存到数据库;
从各个手机基站获取手机信息;
对获取的手机信息进行清洗,将清洗后的手机信息保存到数据库;
获取查询目标轨迹请求;
根据查询请求从数据库中查找与目标轨迹相似度高的轨迹数据;
对与目标轨迹相似度高的轨迹数据进行同行点位分析;
显示出分析结果。
第二方面,本发明实施例提供的一种基于大数据的人员同行数据分析系统,包括:第一数据获取模块、第一清洗模块、第二数据获取模块、第二清洗模块、查询请求获取模块、数据分析模块和显示模块,其中,
所述第一数据获取模块获取各个卡口抓拍的车辆和人脸图片信息;
所述第一清洗模块对获取的车辆和人脸图片信息进行清洗,将清洗后的图片信息保存到数据库;
所述第二数据获取模块从各个手机基站获取手机信息;
所述第二清洗模块对获取的手机信息进行清洗,将清洗后的手机信息保存到数据库;
所述查询请求获取模块获取查询目标轨迹请求;
所述数据分析模块根据查询请求从数据库中查找与目标轨迹相似度高的轨迹数据,对与目标轨迹相似度高的轨迹数据进行同行点位分析;
所述显示模块用于显示分析结果。
第三方面,本发明实施例提供的一种智能设备,包括处理器、输入设备、输出设备和存储器,所述处理器、输入设备、输出设备和存储器相互连接,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行上述实施例描述的方法。
第四方面,本发明实施例提供的计算机可读存储介质,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行上述实施例描述的方法。
本发明的有益效果:
本发明实施例提供的一种基于大数据的人员同行数据分析方法、系统、设备及介质,利用手机基站信息结合视频卡口点抓拍信息,对这些数据进行关联分析可有效确定作案人员的身份及行动轨迹,节省大量人工排查时间,提高了治安管理水平和违法行为处理的效率。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
需要注意的是,除非另有说明,本申请使用的技术术语或者科学术语应当为本发明所属领域技术人员所理解的通常意义。
如图1所示,示出了本发明第一实施例提供了一种基于大数据的人员同行数据分析方法的流程图,该方法包括以下8个步骤。
S1:获取各个卡口抓拍的车辆和人脸图片信息。
具体地,在街道上每个路口所部署的前端摄像头具有抓拍车辆和人脸图片的功能,通过前端摄像头抓拍过车照片、人脸照片,前端摄像头通过指定方式(如Kafka订阅、redis订阅、socket认证通信等)将拍摄的车辆图片、人脸图片、抓拍设备的信息和抓拍时间等发送到系统的数据接口。
S2:对获取的车辆和人脸图片信息进行清洗,将清洗后的图片信息保存到数据库。
具体地,对获取的车辆和人脸图片信息进行清洗的处理步骤包括:
1、筛选掉图片无法访问以及图片大小异常(过大超出服务器承载范围或过小)等失效数据。
2、筛选掉时间错误的数据(拍摄时间与时间同步服务器差异超过24小时,拍摄时间处于未来时间段时,需在未来时间5min以内)。
3、筛选掉无卡口信息(设备id)的失效数据。
4、并将筛选后的这些数据进行字段重命名、缺省值赋予后并将清洗好的数据保存到数据库。
S3:从各个手机基站获取手机信息。
具体地,在街道上每个路口部署的手机基站具有手机数据采集功能,采集的数据包括但不限于:手机号码、采集时间、imsi号(国际移动用户识别码)、imei号(国际移动设备识别码)和采集设备信息。手机基站通过指定方式采集的数据发送到系统的数据接口。
S4:对获取的手机信息进行清洗,将清洗后的手机信息保存到数据库。
具体地,对获取的手机信息进行清洗的具体步骤包括:
1、筛选掉无设备信息的无效数据。
2、筛选掉手机号、imei与imis为空的无效数据。
3、筛选掉时间间隔低于预设值的数据。
4、将筛选后得到的数据进行字段重命名和缺省值赋值处理,并将清洗后的手机信息保存到数据库。
S5:获取查询目标轨迹请求。
其中,查询目标轨迹请求包括需要查询的车辆或人员或手机信息。通过需要查询的车辆或人员或手机信息去查询车辆或人脸或手机轨迹的经纬度、时间和查询通行轨迹类型。
S6:根据查询请求从数据库中查找与目标轨迹相似度高的轨迹数据。
其中,根据查询请求从数据库中根据查询逻辑查询出该时段内所有相似轨迹(两个轨迹点位之间时间相隔2分钟内,并且距离范围小于手机基站点位覆盖范围半径为两个点匹配上,匹配上的点位越多,则两个轨迹之间的相似度越高),由高到低排序后将车牌号/人脸聚类id/手机imsi号及对应的轨迹相似度结构化数据进行反馈,由于数据量庞大会难免会查询速度较慢,故将查询数据存入redis中,并将查询条件作为key值,同时也将会另存一份查询进度的百分比以供前端展示查询进度。
S7:对与目标轨迹相似度高的轨迹数据进行同行点位分析。
具体地,将相似度高的轨迹进行同行点位分析的步骤包括:
遍历查询的车牌号、人脸图像、手机号的轨迹,与所要对比的轨迹进行比对,对两个轨迹的每个点位进行匹配验证,若匹配成功,则将点位进行标记,同时,验证两个轨迹之间任意点位与另一轨迹的点位进行匹配,匹配成功,则说明这几个轨迹相关,在该抓拍记录处添加另一轨迹所匹配上的抓拍记录ID。
S8:显示出分析结果。
通过经纬度、点位信息及抓拍时间展示两个轨迹列表并在地图上显示出,将各个同行点位的标志展示不同颜色来区分具体同行分段。
本发明实施例提供的一种基于大数据的人员同行数据分析方法,利用手机基站信息结合视频卡口点抓拍信息,对这些数据进行关联分析可有效确定作案人员的身份及行动轨迹,节省大量人工排查时间,提高了治安管理水平和违法行为处理的效率。
在上述的第一实施例中,提供了一种基于大数据的人员同行数据分析方法,与之相对应的,本申请还提供一种基于大数据的人员同行数据分析系统。请参考图2,其为本发明第二实施例提供的基于大数据的人员同行数据分析系统的结构框图。由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
如图2所示,示出了本发明第二实施例提供的一种基于大数据的人员同行数据分析系统的结构框图,该系统包括:第一数据获取模块、第一清洗模块、第二数据获取模块、第二清洗模块、查询请求获取模块、数据分析模块和显示模块,其中,所述第一数据获取模块获取各个卡口抓拍的车辆和人脸图片信息;所述第一清洗模块对获取的车辆和人脸图片信息进行清洗,将清洗后的图片信息保存到数据库;所述第二数据获取模块从各个手机基站获取手机信息;所述第二清洗模块对获取的手机信息进行清洗,将清洗后的手机信息保存到数据库;所述查询请求获取模块获取查询目标轨迹请求;所述数据分析模块根据查询请求从数据库中查找与目标轨迹相似度高的轨迹数据,对与目标轨迹相似度高的轨迹数据进行同行点位分析;所述显示模块用于显示分析结果。
其中,第一清洗模块对获取的车辆和人脸图片信息进行清洗的具体步骤包括:筛选掉图片无法访问和图片大小异常的失效数据;筛选掉时间错误的数据;筛选掉无卡口信息的失效数据;将筛选后得到的数据进行字段重命名和缺省值赋值处理。
其中,第二清洗模块对获取的手机信息进行清洗的具体步骤包括:筛选掉无设备信息的无效数据;筛选掉手机号、imei与imis为空的无效数据;筛选掉时间间隔低于预设值的数据;将筛选后得到的数据进行字段重命名和缺省值赋值处理。
其中,数据分析模块根据查询请求从数据库中查找与目标轨迹相似度高的轨迹数据的具体处理步骤包括:根据查询请求判断两个轨迹点位之间的时间间隔在是否在阈值范围内;两个轨迹点的距离范围是否小于手机基站点位覆盖范围半径;若均为是,则判定点位匹配;匹配的点位越多,则两个轨迹的相似度就越高。
本发明实施例提供的一种基于大数据的人员同行数据分析系统,利用手机基站信息结合视频卡口点抓拍信息,对这些数据进行关联分析可有效确定作案人员的身份及行动轨迹,节省大量人工排查时间,提高了治安管理水平和违法行为处理的效率。
如图3所示,示出了在本发明第三实施例提供的一种智能设备结构框图,该设备包括处理器、输入设备、输出设备和存储器,所述处理器、输入设备、输出设备和存储器相互连接,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行上述实施例描述的方法。
应当理解,在本发明实施例中,所称处理器可以是中央处理单元(CentralProcessing Unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备可以包括触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风等,输出设备可以包括显示器(LCD等)、扬声器等。
该存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
具体实现中,本发明实施例中所描述的处理器、输入设备、输出设备可执行本发明实施例提供的方法实施例所描述的实现方式,也可执行本发明实施例所描述的系统实施例的实现方式,在此不再赘述。
在本发明还提供一种计算机可读存储介质的实施例,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行上述实施例描述的方法。
所述计算机可读存储介质可以是前述实施例所述的终端的内部存储单元,例如终端的硬盘或内存。所述计算机可读存储介质也可以是所述终端的外部存储设备,例如所述终端上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(SecureDigital,SD)卡,闪存卡(Flash Card)等。进一步地,所述计算机可读存储介质还可以既包括所述终端的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述终端所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的终端和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露终端和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围,其均应涵盖在本发明的权利要求和说明书的范围当中。