CN106230653A - 一种以mac码为主键的数据整合方法 - Google Patents

一种以mac码为主键的数据整合方法 Download PDF

Info

Publication number
CN106230653A
CN106230653A CN201610577477.5A CN201610577477A CN106230653A CN 106230653 A CN106230653 A CN 106230653A CN 201610577477 A CN201610577477 A CN 201610577477A CN 106230653 A CN106230653 A CN 106230653A
Authority
CN
China
Prior art keywords
data
big data
data analysis
platform
analysis platform
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610577477.5A
Other languages
English (en)
Inventor
傅东生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Miracle Intelligent Network Co Ltd
Original Assignee
Shenzhen Miracle Intelligent Network Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Miracle Intelligent Network Co Ltd filed Critical Shenzhen Miracle Intelligent Network Co Ltd
Priority to CN201610577477.5A priority Critical patent/CN106230653A/zh
Publication of CN106230653A publication Critical patent/CN106230653A/zh
Priority to PCT/CN2017/093936 priority patent/WO2018014872A1/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/04—Processing captured monitoring data, e.g. for logfile generation
    • H04L43/045—Processing captured monitoring data, e.g. for logfile generation for graphical visualisation of monitoring data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • H04L43/062—Generation of reports related to network traffic

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明公开了一种以MAC码为主键的数据整合方法，其方法具体包括以下步骤：第一步，通过AP采集客户端相关标志信息；第二步，通过udp协议分批发送采集到的数据到大数据接收器；第三步，接收器将数据清洗并存入大数据分析平台的存储介质中；第四步，大数据分析平台基于收集器收集到的数据进行硬件设备与用户的身份信息打通；第五步，大数据分析平台将实时/离线/机器学习分场景的所有数据组成可展示的数据结构存储给到可视化展示平台；第六步，可视化展示平台将大数据分析的数据结果进行渲染，本发明通过大数据分析平台将用户的身份数据、上网行为数据以及位置数据以MAC作为主键关联绑定在一起，便于分析用户线上和线下的行为。

Description

一种以MAC码为主键的数据整合方法
技术领域
本发明涉及一种数据整合方法，更具体的说，它涉及一种以MAC码为主键的数据整合方法。
背景技术
随着移动互联网的发展，公共WiFi也随处可见，手机更是越来越离不开人们的生活，人们的衣食住行等等方方面面都依赖于手机，故手机的线上和线下的活动行为会产生大量的数据（如时间、位置、身份、购物、出行、住宿等），而目前阶段这些数据都只能单项或者几项的综合分析，缺少一条主线，不能很好地将各类数据有效的整合在一起。
发明内容
针对现有技术存在的不足，本发明的目的在于提供一种以MAC码为主键的数据整合方法，其方法具体包括以下步骤：
第一步，通过AP采集客户端相关标志信息；
第二步，通过udp协议分批发送采集到的数据到大数据接收器；
第三步，接收器将数据清洗并存入大数据分析平台的存储介质中；
第四步，大数据分析平台基于收集器收集到的数据进行硬件设备与用户的身份信息打通；
第五步，大数据分析平台将实时/离线/机器学习分场景的所有数据组成可展示的数据结构存储给到可视化展示平台；
第六步，可视化展示平台将大数据分析的数据结果进行渲染。
本发明具有下述优点：本发明通过大数据分析平台将用户的身份数据、上网行为数据以及位置数据以MAC作为主键关联绑定在一起，便于分析用户线上和线下的行为。
附图说明
图1为本发明的结构框图。
具体实施方式
参照图1所示，本实施例的一种以MAC码为主键的数据整合方法，其方法具体包括以下步骤：
1、在大面积公共区域铺设大量的硬件网络设备（即AP），并设置统一SSID:eluohu(free)供用户免费上网；
2、用户连接公共WiFi：eluohu(free)上网，其关联的AP设备收集用户认证上网的手机号码（或者微信账号、QQ账号等）获取用户的身份信息，并记录用户上网的位置、上网时间、上网时长；
3、同时AP内置的探针设备探测周边终端设备，并采集用户的手机MAC地址，并记录用户的当前位置和运动轨迹。
4、以单个用户（手机MAC:8c:be:be:b3:0f:ec）为例，用户连接eluohu(free)上网过程需要手机号实名认证，此过程AP将采集的手机号、MAC信息收集传输给大数据接收器；同是探针可以探测该用户什么时间出现在什么位置，停留多少时长，这些数据也上报到大数据接收器；
5、大数据分析平台将用户的这些数据储存起来并以MAC为主键将所有数据关联在一起，然后进行分析，例如用户（手机MAC:8c:be:be:b3:0f:ec）每天8:30-17:30位置记录出现在东门，则平台分析判定该用户是东门的上班族；当大数据储存的数据足够多的话，平台可分析出该区域有多少是常驻人口、多少是上班族、多少是偶尔访客等；
6、分析平台将数据的结果同步到可视化平台，可视化平台通过丰富的图表（包括表格、曲线图、饼状图、柱形图等）进行渲染和展示。
以上所述仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理前提下的若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (1)

1.一种以MAC码为主键的数据整合方法，其方法具体包括以下步骤：
第一步，通过AP采集客户端相关标志信息；
第二步，通过udp协议分批发送采集到的数据到大数据接收器；
第三步，接收器将数据清洗并存入大数据分析平台的存储介质中；
第四步，大数据分析平台基于收集器收集到的数据进行硬件设备与用户的身份信息打通；
第五步，大数据分析平台将实时/离线/机器学习分场景的所有数据组成可展示的数据结构存储给到可视化展示平台；
第六步，可视化展示平台将大数据分析的数据结果进行渲染。
CN201610577477.5A 2016-07-21 2016-07-21 一种以mac码为主键的数据整合方法 Pending CN106230653A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610577477.5A CN106230653A (zh) 2016-07-21 2016-07-21 一种以mac码为主键的数据整合方法
PCT/CN2017/093936 WO2018014872A1 (zh) 2016-07-21 2017-07-21 一种以mac码为主键的数据整合方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610577477.5A CN106230653A (zh) 2016-07-21 2016-07-21 一种以mac码为主键的数据整合方法

Publications (1)

Publication Number Publication Date
CN106230653A true CN106230653A (zh) 2016-12-14

Family

ID=57531970

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610577477.5A Pending CN106230653A (zh) 2016-07-21 2016-07-21 一种以mac码为主键的数据整合方法

Country Status (2)

Country Link
CN (1) CN106230653A (zh)
WO (1) WO2018014872A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106911801A (zh) * 2017-04-18 2017-06-30 北京梅泰诺通信技术股份有限公司 关联用户信息的方法及信息推送系统
WO2018014872A1 (zh) * 2016-07-21 2018-01-25 深圳奇迹智慧网络有限公司 一种以mac码为主键的数据整合方法
CN108011761A (zh) * 2017-12-06 2018-05-08 易居（中国）企业集团股份有限公司 基于大数据的采集和分析访客数据的方法
CN108347698A (zh) * 2018-02-07 2018-07-31 山东合天智汇信息技术有限公司 一种线上线下活动轨迹分析方法、装置及系统
CN110650056A (zh) * 2019-09-30 2020-01-03 广州竞远安全技术股份有限公司 一种网络身份关联归一化方法、存储装置及移动终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101394645A (zh) * 2008-10-30 2009-03-25 中国移动通信集团北京有限公司 一种目标区域移动通信终端用户的流量统计方法及系统
CN103747464A (zh) * 2014-01-17 2014-04-23 北京赢销通软件技术有限公司 一种移动终端运动轨迹分析系统
US20140142846A1 (en) * 2012-11-19 2014-05-22 Samsung Electronics Co., Ltd. Electronic device and method for displaying position information of set device
CN105163278A (zh) * 2015-08-12 2015-12-16 山东合天智汇信息技术有限公司 一种基于移动终端的无线客户端位置轨迹监控系统及方法
CN105282523A (zh) * 2015-11-23 2016-01-27 上海赢谊电子设备有限公司 一种人流量估计电子设备及其在公交站亭的使用方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106230653A (zh) * 2016-07-21 2016-12-14 深圳奇迹智慧网络有限公司 一种以mac码为主键的数据整合方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101394645A (zh) * 2008-10-30 2009-03-25 中国移动通信集团北京有限公司 一种目标区域移动通信终端用户的流量统计方法及系统
US20140142846A1 (en) * 2012-11-19 2014-05-22 Samsung Electronics Co., Ltd. Electronic device and method for displaying position information of set device
CN103747464A (zh) * 2014-01-17 2014-04-23 北京赢销通软件技术有限公司 一种移动终端运动轨迹分析系统
CN105163278A (zh) * 2015-08-12 2015-12-16 山东合天智汇信息技术有限公司 一种基于移动终端的无线客户端位置轨迹监控系统及方法
CN105282523A (zh) * 2015-11-23 2016-01-27 上海赢谊电子设备有限公司 一种人流量估计电子设备及其在公交站亭的使用方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018014872A1 (zh) * 2016-07-21 2018-01-25 深圳奇迹智慧网络有限公司 一种以mac码为主键的数据整合方法
CN106911801A (zh) * 2017-04-18 2017-06-30 北京梅泰诺通信技术股份有限公司 关联用户信息的方法及信息推送系统
CN106911801B (zh) * 2017-04-18 2019-12-10 北京梅泰诺通信技术股份有限公司 关联用户信息的方法及信息推送系统
CN108011761A (zh) * 2017-12-06 2018-05-08 易居（中国）企业集团股份有限公司 基于大数据的采集和分析访客数据的方法
CN108347698A (zh) * 2018-02-07 2018-07-31 山东合天智汇信息技术有限公司 一种线上线下活动轨迹分析方法、装置及系统
CN108347698B (zh) * 2018-02-07 2020-11-06 山东合天智汇信息技术有限公司 一种线上线下活动轨迹分析方法、装置及系统
CN110650056A (zh) * 2019-09-30 2020-01-03 广州竞远安全技术股份有限公司 一种网络身份关联归一化方法、存储装置及移动终端

Also Published As

Publication number Publication date
WO2018014872A1 (zh) 2018-01-25

Similar Documents

Publication Publication Date Title
CN106230653A (zh) 一种以mac码为主键的数据整合方法
CN107358146B (zh) 视频处理方法、装置及存储介质
CN105205155B (zh) 一种大数据犯罪同伙的筛查系统和方法
CN104143078B (zh) 活体人脸识别方法、装置和设备
US20140045530A1 (en) Inferring Relationships Based On Geo-Temporal Data Other Than Telecommunications
CN107852410A (zh) 剖析欺骗接入点
Koss Leveraging predictive policing algorithms to restore fourth amendment protections in high-crime areas in a post-Wardlow world
CN106066826A (zh) 埋点的自动测试方法、装置以及终端
DE112015001416T5 (de) Erkennung einer unberechtigten drahtlosen Kommunikationsvorrichtung
US9179259B2 (en) Recognizing unknown actors based on wireless behavior
CN105606958B (zh) 电力系统故障信息的处理方法、系统及装置
CN105281950B (zh) 一种局域网内基于物理位置的终端监控方法及系统
Mayer et al. A magic lens for revealing device interactions in smart environments
CN110378323A (zh) 用于处理视频的方法和装置
CN107783906A (zh) 测试方法、装置及存储介质
CN103530624B (zh) 一种生成信息的方法、装置及终端设备
Grosser et al. Detecting fraud in mobile telephony using neural networks
Garroppo et al. Anomaly detection mechanisms to find social events using cellular traffic data
CN107770730B (zh) 确定车辆信息的方法、服务器及存储介质
CN108182282A (zh) 地址真实性验证方法、装置及电子设备
CN105573630A (zh) 检测终端设备摇动事件的方法、装置及终端设备
CN110301892A (zh) 一种基于静脉识别的检测方法及相关产品
CN104020854B (zh) 信息处理方法和装置
CN113194474A (zh) 伪基站的定位方法、装置、电子设备及可读存储介质
US9628954B2 (en) Data analysis system with movement patterns for medical wellness correlation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161214

RJ01 Rejection of invention patent application after publication