CN109379763A - 网络设备信息的智能标记方法 - Google Patents
网络设备信息的智能标记方法 Download PDFInfo
- Publication number
- CN109379763A CN109379763A CN201811172521.XA CN201811172521A CN109379763A CN 109379763 A CN109379763 A CN 109379763A CN 201811172521 A CN201811172521 A CN 201811172521A CN 109379763 A CN109379763 A CN 109379763A
- Authority
- CN
- China
- Prior art keywords
- mac
- field
- sample
- section
- abc
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/06—Generation of reports
- H04L43/065—Generation of reports related to network devices
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Small-Scale Networks (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
网络设备信息的智能标记方法属于智能家居设备领域。本发明步骤1:构建“mac OUI字典”,步骤2:构建“mac区间字典”步骤3:mac字段匹配;输出:(1)处理后的未知样本集;(2)更新后的mac区间字典;(3)更新后的mac OUI字典。本发明可准确地获取到连接到当前WiFi路由器下的智能联网网络设备和智能家居设备的设备类型、设备厂商和/或设备型号信息。从而解决在大多数情况下WiFi协议簇协议字段信息缺失所带来的无法判断设备关键信息的问题。
Description
技术领域
本发明属于智能家居设备领域。
背景技术
随着智能手机、台式机和笔记本电脑、WiFi路由器以及各类支持WiFi协议的新型物联网设备和智能家居设备(如智能冰箱、智能洗衣机、服务机器人、机顶盒、智能插座等)的日益普及,人们越来越多的使用各种网络设备进行联网和使用各种移动互联网业务。WiFi协议是一个包含了多种具体协议的协议簇,支持在无线局域网下的各种设备之间实现互联互通。
为满足产业研究、行业监测等的相关需求,需要通过台式机及笔记本电脑中的客户端采集软件或智能手机中的APP采集软件,实现对新型物联网设备的设备类型、设备厂商和品牌、以及设备型号等信息进行采集。
传统的方法是利用WiFi协议直接进行设备信息的发现。WiFi协议簇主要包括UPNP协议、ARP/RARP协议、NetBIOS协议、mDNS协议/Bonjour协议、SNMP协议等。通过这些协议可以实现联网设备间的相互发现、信息交互等功能。
现有的方法存在的局限性在于,很多设备厂商在设备研制过程中并没有严格按照标准的WiFi协议簇实现,而是做了很多的改造或简化,大量的字段缺失或字段内容含义发生了变化,很多情况下仅能获取到设备网卡的mac地址信息,因此无法直接利用协议返回信息的相应字段直接获取设备类型、设备厂商名称和型号等信息。
很多联网设备的WiFi模块没有严格按照标准的WiFi协议簇实现,做了很多的改造或简化,大量的字段缺失或字段内容含义发生了变化,无法直接利用协议返回信息的相应字段直接获取设备相关信息;根据我们对实际采集数据的统计,大约有90~95%的设备的WiFi协议字段(包括UPNP、SNMP、NetBIOS等)是完全空白、无法获取的,因此也就不能利用WiFi协议字段信息进行设备信息的提取。
发明内容
本发明要解决的问题是当所能采集到的联网网络设备信息中只包含设备mac地址的情况下,如何利用已有标记信息的训练样本集,准确提取联网设备的设备类型、设备厂商和设备型号等信息。
本发明可准确地获取到连接到当前WiFi路由器下的智能联网网络设备和智能家居设备的设备类型、设备厂商和/或设备型号信息。从而解决在大多数情况下WiFi协议簇协议字段信息缺失所带来的无法判断设备关键信息的问题。
本发明所述的网络设备信息的智能标记方法,其具体步骤如下:
输入:标记样本集,未知样本集。
将包括6个字段共48bit的设备mac地址表示为m={m.a,m.b,m.c,m.d,m.e,m.f},通常用16进制表示。其中前3个字段{m.a,m.b,m.c}由国际组织IEEE的注册管理机构给不同厂家分配,也可表示为m.abc(比如:0x60:21:01),称为“组织唯一标志符(OUI)”,后3个字段由厂家自己分配,称为“扩展标识符(EI)”。则:
(1)标记样本集(每个样本对应某台具体的支持WLAN协议的网络设备,如路由器)包括如下8个字段:m.abc(设备WLAN网卡mac地址的前3个字段),m.d,m.e,m.f,网卡厂商,设备类型(ToD,标记项,必选),设备厂商(VoD,标记项,必选),设备型号(MoD,标记项,可选)。
一般可通过人工标记或自动标记等方式得到上述样本。这里的网络设备是指具有WLAN联网功能的设备,如路由器、智能手机、网络机顶盒、智能冰箱、智能窗帘等。网卡厂商字段通常可以根据m.abc查表得到。
(2)未知样本集包括所有未知样本。未知样本是指包括如下字段、但其中的标记字段为空的样本,即:m.abc,m.d,m.e,m.f,网卡厂商,设备类型(空),设备厂商(空),设备型号(空),标记置信度(空)。
注1:样本集中的样本按照mac地址的各字段升序排列。mac地址值最小的排在最前面。
注2:mac地址值的大小是指将两个mac地址s1={m1.a,m1.b,m1.c,m1.d,m1.e,m1.f}和s2={m2.a,m2.b,m2.c,m2.d,m2.e,m2.f}的各字段(m.a~m.f)从最高位字段(即m.a字段)到最低位字段(即m.f字段)进行逐个比较的时候,如果该字段上s1的值小于或大于s2的值,则称s1的mac地址值为小或大,否则继续进行下一个字段的比较,直到最低位字段。
步骤1:构建“mac OUI字典”
根据标记样本集的字段【m.abc,网卡厂商,设备厂商】,统计汇总得到“mac OUI字典”。该字典包括如下字段:【m.abc,网卡厂商,网卡类型,{设备厂商}】。对同一个m.abc字段的所有标记样本,根据如下3个条件进行判断处理:
(1)条件1:如果网卡厂商=设备厂商,则网卡类型=“自有型”;
(2)条件2:如果网卡厂商≠设备厂商,且该网卡厂商下不同的设备厂商数量不超过1个,则网卡类型=“第三方独用型网卡”;
(3)条件3:如果网卡厂商≠设备厂商,且该网卡厂商下不同的设备厂商数量超过1个,则网卡类型=“第三方共用型网卡”,“设备厂商”={同一m.abc字段下的所有设备厂商}。
步骤2:构建“mac区间字典”
根据标记样本集可以统计汇总得到“mac区间字典”。该字典的字段包括:【m.abc,bm.d,bm.e,bm.f,em.d,em.e,em.f,设备类型,设备厂商,设备型号(可选),区间置信度】。
其中,{bm.d,bm.e,bm.f}为该记录对应设备厂商或设备型号的起始mac EI字段,{em.d,em.e,em.f}为对应设备厂商或设备型号的结束mac EI字段。区间置信度是该区间记录对应的mac区间内的标记样本数。
对m.abc相同的样本,对设备类型/设备厂商/设备型号字段完全相同的连续样本集合,取该连续样本集合的mac地址最小值(即集合的第一个样本)的{m.d,m.e,m.f}字段,记为{bm.d,bm.e,bm.f},取该连续样本集合的mac地址最大值(即集合的最后一个样本)的{m.d,m.e,m.f}字段,记为{em.d,em.e,em.f}。如果连续样本集合的样本数量为1,则{bm.d,bm.e,bm.f}=={em.d,em.e,em.f}。
步骤3:mac字段匹配
对未知样本集中的每个样本,进行mac字段匹配。具体步骤包括:
步骤3.1:在mac区间字典中寻找与未知样本mac地址m.abc字段相同的记录,如果有,则对具有相同m.abc字段的记录,逐个记录对比未知样本的EI字段(即m.d~m.f字段)和mac区间记录中的起始mac EI字段、结束mac EI字段,看是否该未知样本的mac值落在该记录的mac地址区间内。如果是,则将该区间记录的相应的非空的设备信息(设备类型/设备厂商/设备型号)填充到未知样本的对应标记字段,“标记置信度”=“区间置信度”,返回。
步骤3.2:否则,计算未知样本与各mac区间字段距离:仅在m.abc相同的情况下计算距离。计算未知样本与各mac区间记录的mac距离(根据下面的公式1),取距离值最小且不超过最大mac距离(可设为5个m.d字段容量,即5*256*256=327680)的mac区间记录为匹配项,将该记录相应的非空的设备信息字段值(设备类型/设备厂商/设备型号)填充到未知样本的对应标记字段,“标记置信度”=“区间置信度”,结束。
注1:如果未知样本mac地址EI字段小于mac区间记录中的起始mac EI字段,则计算未知样本与mac区间记录的起始mac EI字段的mac距离;如果未知样本mac地址EI字段大于mac区间记录中的结束mac EI字段,则计算计算未知样本与mac区间记录的结束mac EI字段的mac距离。
注2:mac距离的定义。对两个mac地址x={xm.abc,xm.d,xm.e,xm.f}和y={ym.abc,ym.d,ym.e,ym.f},其中xm.abc=ym.abc,则x和y的mac距离定义为:
d_mac(x,y)=abs[(ym.d-xm.d)*256*256+(ym.e-xm.e)*256+(ym.f-xm.f)]
(公式1)
步骤3.3:最大mac距离保护。
如果距离最近的mac字段超过设定的最大mac距离门限值,则根据该未知样本的m.abc字段对应查找mac OUI字典中的网卡类型,并根据网卡类型相应做如下处理:
(1)自有型:则填充mac OUI字典中的设备厂商==该样本的设备厂商,返回。
(2)第三方独用型网卡:则填充mac OUI字典中的设备厂商==该样本的设备厂商,返回。
(3)第三方共用型网卡:返回。
步骤3.4:没有m.abc相同的字段,说明为新发现的mac字段样本,根据步骤1和2更新“mac OUI字典”和“mac区间字典”,并返回。
步骤4:后处理
步骤4.1:标记样本集和mac区间字典的更新。
当有新的标记样本加入标记样本集,则根据情况做如下相应处理。
(1)如果该新加入样本的mac地址落在mac区间字典的某个区间样本的起始和结束mac地址范围内,则置信度字段值加1,返回。
(2)如果该新加入样本的mac地址没有落在mac区间字典的任何区间样本的mac地址范围内,且mac区间字典中有与该样本mac地址具有相同m.abc字段的区间记录,则根据步骤3.2计算该样本与该区间记录的mac距离。如果该距离小于最大mac距离门限、且该样本的标记字段值与该区间记录的标记字段值相同,则将该标记字段的起始mac EI字段(当样本的mac EI字段值小于起始mac EI字段)或结束mac EI字段(当样本的mac EI字段值大于结束mac EI字段)更新为该样本的mac EI字段,并将置信度字段值加1(如果该样本mac地址小于该区间记录的结束mac EI字段),返回。
(3)否则,在mac区间字典中增加一条新的mac区间记录,{m.abc,bm.d,bm.e,bm.f}置为该新样本的mac地址,{em.d,em.e,em.f}={bm.d,bm.e,bm.f},{设备类型,设备厂商,设备型号}置为该新样本的相应字段,置信度置为1。
步骤4.2:mac OUI字典的更新。
对新加入的标记样本,根据其m.abc字段按如下条件进行判断处理:
(1)条件1:如果新样本的m.abc字段=mac OUI字典中某OUI记录的m.abc字段,且新样本的“设备厂商”=该OUI记录的“设备厂商”,则返回;
(2)条件2:如果新样本的m.abc字段=mac OUI字典中某OUI记录的m.abc字段,且新样本的“设备厂商”≠该OUI记录的“设备厂商”,则该OUI记录的“网卡类型”=“第三方共用型网卡”,返回。
(3)条件3:如果新样本的m.abc字段在mac OUI字典没有匹配到相同的m.abc字段记录,且新样本的“网卡厂商”=“设备厂商”,则在mac OUI字典中增加该样本为新的OUI记录,且网卡类型=“自有型”;否则,网卡类型=“第三方独有型网卡”,返回。
输出:
(1)处理后的未知样本集;
(2)更新后的mac区间字典;
(3)更新后的mac OUI字典。
附图说明
图1为本发明的完整的算法流程图。
具体实施方式
本发明所述的网络设备信息的智能标记方法,其具体步骤如下:
输入:标记样本集,未知样本集。
将包括6个字段共48bit的设备mac地址表示为m={m.a,m.b,m.c,m.d,m.e,m.f},通常用16进制表示。其中前3个字段{m.a,m.b,m.c}由国际组织IEEE的注册管理机构给不同厂家分配,也可表示为m.abc(比如:0x60:21:01),称为“组织唯一标志符(OUI)”,后3个字段由厂家自己分配,称为“扩展标识符(EI)”。则:
(1)标记样本集(每个样本对应某台具体的支持WLAN协议的网络设备,如路由器)包括如下8个字段:m.abc(设备WLAN网卡mac地址的前3个字段),m.d,m.e,m.f,网卡厂商,设备类型(ToD,标记项,必选),设备厂商(VoD,标记项,必选),设备型号(MoD,标记项,可选)。
一般可通过人工标记或自动标记等方式得到上述样本。这里的网络设备是指具有WLAN联网功能的设备,如路由器、智能手机、网络机顶盒、智能冰箱、智能窗帘等。网卡厂商字段通常可以根据m.abc查表得到。
(2)未知样本集包括所有未知样本。未知样本是指包括如下字段、但其中的标记字段为空的样本,即:m.abc,m.d,m.e,m.f,网卡厂商,设备类型(空),设备厂商(空),设备型号(空),标记置信度(空)。
注1:样本集中的样本按照mac地址的各字段升序排列。mac地址值最小的排在最前面。
注2:mac地址值的大小是指将两个mac地址s1={m1.a,m1.b,m1.c,m1.d,m1.e,m1.f}和s2={m2.a,m2.b,m2.c,m2.d,m2.e,m2.f}的各字段(m.a~m.f)从最高位字段(即m.a字段)到最低位字段(即m.f字段)进行逐个比较的时候,如果该字段上s1的值小于或大于s2的值,则称s1的mac地址值为小或大,否则继续进行下一个字段的比较,直到最低位字段。
步骤1:构建“mac OUI字典”
根据标记样本集的字段【m.abc,网卡厂商,设备厂商】,统计汇总得到“mac OUI字典”。该字典包括如下字段:【m.abc,网卡厂商,网卡类型,{设备厂商}】。对同一个m.abc字段的所有标记样本,根据如下3个条件进行判断处理:
(1)条件1:如果网卡厂商=设备厂商,则网卡类型=“自有型”;
(2)条件2:如果网卡厂商≠设备厂商,且该网卡厂商下不同的设备厂商数量不超过1个,则网卡类型=“第三方独用型网卡”;
(3)条件3:如果网卡厂商≠设备厂商,且该网卡厂商下不同的设备厂商数量超过1个,则网卡类型=“第三方共用型网卡”,“设备厂商”={同一m.abc字段下的所有设备厂商}。
步骤2:构建“mac区间字典”
根据标记样本集可以统计汇总得到“mac区间字典”。该字典的字段包括:【m.abc,bm.d,bm.e,bm.f,em.d,em.e,em.f,设备类型,设备厂商,设备型号(可选),区间置信度】。
其中,{bm.d,bm.e,bm.f}为该记录对应设备厂商或设备型号的起始mac EI字段,{em.d,em.e,em.f}为对应设备厂商或设备型号的结束mac EI字段。区间置信度是该区间记录对应的mac区间内的标记样本数。
对m.abc相同的样本,对设备类型/设备厂商/设备型号字段完全相同的连续样本集合,取该连续样本集合的mac地址最小值(即集合的第一个样本)的{m.d,m.e,m.f}字段,记为{bm.d,bm.e,bm.f},取该连续样本集合的mac地址最大值(即集合的最后一个样本)的{m.d,m.e,m.f}字段,记为{em.d,em.e,em.f}。如果连续样本集合的样本数量为1,则{bm.d,bm.e,bm.f}=={em.d,em.e,em.f}。
步骤3:mac字段匹配
对未知样本集中的每个样本,进行mac字段匹配。具体步骤包括:
步骤3.1:在mac区间字典中寻找与未知样本mac地址m.abc字段相同的记录,如果有,则对具有相同m.abc字段的记录,逐个记录对比未知样本的EI字段(即m.d~m.f字段)和mac区间记录中的起始mac EI字段、结束mac EI字段,看是否该未知样本的mac值落在该记录的mac地址区间内。如果是,则将该区间记录的相应的非空的设备信息(设备类型/设备厂商/设备型号)填充到未知样本的对应标记字段,“标记置信度”=“区间置信度”,返回。
步骤3.2:否则,计算未知样本与各mac区间字段距离:仅在m.abc相同的情况下计算距离。计算未知样本与各mac区间记录的mac距离(根据下面的公式1),取距离值最小且不超过最大mac距离(可设为5个m.d字段容量,即5*256*256=327680)的mac区间记录为匹配项,将该记录相应的非空的设备信息字段值(设备类型/设备厂商/设备型号)填充到未知样本的对应标记字段,“标记置信度”=“区间置信度”,结束。
注1:如果未知样本mac地址EI字段小于mac区间记录中的起始mac EI字段,则计算未知样本与mac区间记录的起始mac EI字段的mac距离;如果未知样本mac地址EI字段大于mac区间记录中的结束mac EI字段,则计算计算未知样本与mac区间记录的结束mac EI字段的mac距离。
注2:mac距离的定义。对两个mac地址x={xm.abc,xm.d,xm.e,xm.f}和y={ym.abc,ym.d,ym.e,ym.f},其中xm.abc=ym.abc,则x和y的mac距离定义为:
d_mac(x,y)=abs[(ym.d-xm.d)*256*256+(ym.e-xm.e)*256+(ym.f-xm.f)]
(公式1)
步骤3.3:最大mac距离保护。
如果距离最近的mac字段超过设定的最大mac距离门限值,则根据该未知样本的m.abc字段对应查找mac OUI字典中的网卡类型,并根据网卡类型相应做如下处理:
(1)自有型:则填充mac OUI字典中的设备厂商==该样本的设备厂商,返回。
(2)第三方独用型网卡:则填充mac OUI字典中的设备厂商==该样本的设备厂商,返回。
(3)第三方共用型网卡:返回。
示例:
mac区间字典中包含如下两个记录:
(1)记录1:{60:21:01,1C,57,75,1e,1a,e1,1(智能手机),OPPO,R11t,538};
(2)记录2:{60:21:01,1e,9a,63,20,2f,53,1(智能手机),OPPO,A57,126};
未知样本集中的如下3条记录:
(a)样本a={60:21:01,1c,fb,51,null,null,null,null};
(b)样本b={60:21:01,1f,ee,41,null,null,null,null};
(c)样本c={60:21:01,1e,29,23,null,null,null,null};
根据上述原则,可以分别得到:
(1)样本a匹配到的mac区间记录为记录1,则其对应的设备类型/设备厂商/设备型号/置信度字段分别为:{1,OPPO,R11t,538};
(2)样本b匹配到的mac区间记录为记录2,则其对应的设备类型/设备厂商/设备型号/置信度字段分别为:{1,OPPO,A57,126};
(3)样本c没有匹配的mac区间,但与记录1和2的m.abc字段相同,计算该未知样本mac地址与记录1的结束mac EI字段和记录2的起始mac EI字段的mac距离分别为3714、28992,即匹配为记录1,则其对应的设备类型/设备厂商/设备型号/置信度字段分别为:{1,OPPO,R11t,538}。
步骤3.4:没有m.abc相同的字段,说明为新发现的mac字段样本,根据步骤1和2更新“mac OUI字典”和“mac区间字典”,并返回。
步骤4:后处理
步骤4.1:标记样本集和mac区间字典的更新。
当有新的标记样本加入标记样本集,则根据情况做如下相应处理。
(1)如果该新加入样本的mac地址落在mac区间字典的某个区间样本的起始和结束mac地址范围内,则置信度字段值加1,返回。
(2)如果该新加入样本的mac地址没有落在mac区间字典的任何区间样本的mac地址范围内,且mac区间字典中有与该样本mac地址具有相同m.abc字段的区间记录,则根据步骤3.2计算该样本与该区间记录的mac距离。如果该距离小于最大mac距离门限、且该样本的标记字段值与该区间记录的标记字段值相同,则将该标记字段的起始mac EI字段(当样本的mac EI字段值小于起始mac EI字段)或结束mac EI字段(当样本的mac EI字段值大于结束mac EI字段)更新为该样本的mac EI字段,并将置信度字段值加1(如果该样本mac地址小于该区间记录的结束mac EI字段),返回。
(3)否则,在mac区间字典中增加一条新的mac区间记录,{m.abc,bm.d,bm.e,bm.f}置为该新样本的mac地址,{em.d,em.e,em.f}={bm.d,bm.e,bm.f},{设备类型,设备厂商,设备型号}置为该新样本的相应字段,置信度置为1。
步骤4.2:mac OUI字典的更新。
对新加入的标记样本,根据其m.abc字段按如下条件进行判断处理:
(1)条件1:如果新样本的m.abc字段=mac OUI字典中某OUI记录的m.abc字段,且新样本的“设备厂商”=该OUI记录的“设备厂商”,则返回;
(2)条件2:如果新样本的m.abc字段=mac OUI字典中某OUI记录的m.abc字段,且新样本的“设备厂商”≠该OUI记录的“设备厂商”,则该OUI记录的“网卡类型”=“第三方共用型网卡”,返回。
(3)条件3:如果新样本的m.abc字段在mac OUI字典没有匹配到相同的m.abc字段记录,且新样本的“网卡厂商”=“设备厂商”,则在mac OUI字典中增加该样本为新的OUI记录,且网卡类型=“自有型”;否则,网卡类型=“第三方独有型网卡”,返回。
输出:
(1)处理后的未知样本集;
(2)更新后的mac区间字典;
(3)更新后的mac OUI字典。
Claims (2)
1.网络设备信息的智能标记方法,其特征在于,具体如下:
输入:标记样本集,未知样本集;
将包括6个字段共48bit的设备mac地址表示为m={m.a,m.b,m.c,m.d,m.e,m.f},通常用16进制表示;其中前3个字段{m.a,m.b,m.c}由国际组织IEEE的注册管理机构给不同厂家分配,或者表示为m.abc,称为“组织唯一标志符OUI”,后3个字段由厂家自己分配,称为“扩展标识符EI”;则:
标记样本集包括如下字段:m.abc即设备WLAN网卡mac地址的前3个字段,m.d,m.e,m.f,网卡厂商,设备类型即ToD,,设备厂商即VoD,设备型号即MoD;设备型号能够为空;
通过人工标记或自动标记得到上述样本;;网卡厂商字段根据m.abc查表得到;
未知样本集包括所有未知样本;未知样本是指包括如下字段、但其中的标记字段为空的样本,即:m.abc,m.d,m.e,m.f,网卡厂商,设备类型为空,设备厂商为空,设备型号为空,标记置信度为空;
样本集中的样本按照mac地址的各字段升序排列;mac地址值最小的排在最前面;
mac地址值的大小是指将两个mac地址s1={m1.a,m1.b,m1.c,m1.d,m1.e,m1.f}和s2={m2.a,m2.b,m2.c,m2.d,m2.e,m2.f}的各字段(m.a~m.f)从最高位字段即m.a字段到最低位字段即m.f字段进行逐个比较的时候,如果该字段上s1的值小于或大于s2的值,则称s1的mac地址值为小或大,否则继续进行下一个字段的比较,直到最低位字段;
步骤1:构建“mac OUI字典”
根据标记样本集的字段【m.abc,网卡厂商,设备厂商】,统计汇总得到“mac OUI字典”;该字典包括如下字段:【m.abc,网卡厂商,网卡类型,{设备厂商}】;对同一个m.abc字段的所有标记样本,根据如下3个条件进行判断处理:
(1)条件1:如果网卡厂商=设备厂商,则网卡类型=“自有型”;
(2)条件2:如果网卡厂商≠设备厂商,且该网卡厂商下不同的设备厂商数量不超过1个,则网卡类型=“第三方独用型网卡”;
(3)条件3:如果网卡厂商≠设备厂商,且该网卡厂商下不同的设备厂商数量超过1个,则网卡类型=“第三方共用型网卡”,“设备厂商”={同一m.abc字段下的所有设备厂商};
步骤2:构建“mac区间字典”
根据标记样本集统计汇总得到“mac区间字典”;该字典的字段包括:【m.abc,bm.d,bm.e,bm.f,em.d,em.e,em.f,设备类型,设备厂商,设备型号(可选),区间置信度】;其中,{bm.d,bm.e,bm.f}为该记录对应设备厂商或设备型号的起始mac EI字段,{em.d,em.e,em.f}为对应设备厂商或设备型号的结束mac EI字段;区间置信度是该区间记录对应的mac区间内的标记样本数;
对m.abc相同的样本,对设备类型/设备厂商/设备型号字段完全相同的连续样本集合,取该连续样本集合的mac地址最小值的{m.d,m.e,m.f}字段,记为{bm.d,bm.e,bm.f},取该连续样本集合的mac地址最大值的{m.d,m.e,m.f}字段,记为{em.d,em.e,em.f};如果连续样本集合的样本数量为1,则{bm.d,bm.e,bm.f}=={em.d,em.e,em.f};
步骤3:mac字段匹配
对未知样本集中的每个样本,进行mac字段匹配;具体步骤包括:
步骤3.1:在mac区间字典中寻找与未知样本mac地址m.abc字段相同的记录,如果有,则对具有相同m.abc字段的记录,逐个记录对比未知样本的EI字段即m.d~m.f字段和mac区间记录中的起始mac EI字段、结束mac EI字段,看是否该未知样本的mac值落在该记录的mac地址区间内;如果是,则将该区间记录的相应的非空的设备信息填充到未知样本的对应标记字段,“标记置信度”=“区间置信度”,返回;
步骤3.2:否则,计算未知样本与各mac区间字段距离:仅在m.abc相同的情况下计算距离;计算未知样本与各mac区间记录的mac距离(根据下面的公式1),取距离值最小且不超过最大mac距离的mac区间记录为匹配项,将该记录相应的非空的设备信息字段值(设备类型/设备厂商/设备型号)填充到未知样本的对应标记字段,“标记置信度”=“区间置信度”,结束;
如果未知样本mac地址EI字段小于mac区间记录中的起始mac EI字段,则计算未知样本与mac区间记录的起始mac EI字段的mac距离;如果未知样本mac地址EI字段大于mac区间记录中的结束mac EI字段,则计算计算未知样本与mac区间记录的结束mac EI字段的mac距离;
mac距离的定义;对两个mac地址x={xm.abc,xm.d,xm.e,xm.f}和y={ym.abc,ym.d,ym.e,ym.f},其中xm.abc=ym.abc,则x和y的mac距离定义为:
d_mac(x,y)=abs[(ym.d-xm.d)*256*256+(ym.e-xm.e)*256+(ym.f-xm.f)]
(公式1)
步骤3.3:最大mac距离保护;
如果距离最近的mac字段超过设定的最大mac距离门限值,则根据该未知样本的m.abc字段对应查找mac OUI字典中的网卡类型,并根据网卡类型相应做如下处理:
(1)自有型:则填充mac OUI字典中的设备厂商==该样本的设备厂商,返回;
(2)第三方独用型网卡:则填充mac OUI字典中的设备厂商==该样本的设备厂商,返回;
(3)第三方共用型网卡:返回;
步骤3.4:没有m.abc相同的字段,说明为新发现的mac字段样本,根据步骤1和2更新“mac OUI字典”和“mac区间字典”,并返回;
步骤4:后处理
步骤4.1:标记样本集和mac区间字典的更新;
当有新的标记样本加入标记样本集,则根据情况做如下相应处理;
(1)如果该新加入样本的mac地址落在mac区间字典的某个区间样本的起始和结束mac地址范围内,则置信度字段值加1,返回;
(2)如果该新加入样本的mac地址没有落在mac区间字典的任何区间样本的mac地址范围内,且mac区间字典中有与该样本mac地址具有相同m.abc字段的区间记录,则根据步骤3.2计算该样本与该区间记录的mac距离;如果该距离小于最大mac距离门限、且该样本的标记字段值与该区间记录的标记字段值相同,则将该标记字段的起始macEI字段即当样本的mac EI字段值小于起始mac EI字段或结束mac EI字段即当样本的mac EI字段值大于结束mac EI字段更新为该样本的mac EI字段,并将置信度字段值加1;(如果该样本mac地址小于该区间记录的结束mac EI字段),返回;
(3)否则,在mac区间字典中增加一条新的mac区间记录,{m.abc,bm.d,bm.e,bm.f}置为该新样本的mac地址,{em.d,em.e,em.f}={bm.d,bm.e,bm.f},{设备类型,设备厂商,设备型号}置为该新样本的相应字段,置信度置为1;
步骤4.2:mac OUI字典的更新;
对新加入的标记样本,根据其m.abc字段按如下条件进行判断处理:
(1)条件1:如果新样本的m.abc字段=mac OUI字典中某OUI记录的m.abc字段,且新样本的“设备厂商”=该OUI记录的“设备厂商”,则返回;
(2)条件2:如果新样本的m.abc字段=mac OUI字典中某OUI记录的m.abc字段,且新样本的“设备厂商”≠该OUI记录的“设备厂商”,则该OUI记录的“网卡类型”=“第三方共用型网卡”,返回;
(3)条件3:如果新样本的m.abc字段在mac OUI字典没有匹配到相同的m.abc字段记录,且新样本的“网卡厂商”=“设备厂商”,则在mac OUI字典中增加该样本为新的OUI记录,且网卡类型=“自有型”;否则,网卡类型=“第三方独有型网卡”,返回;输出:
(1)处理后的未知样本集;
(2)更新后的mac区间字典;
(3)更新后的mac OUI字典。
2.根据权利要求1所述的智能标记方法,其特征在于,最大mac距离设为5个m.d字段容量,即5*256*256=327680。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811172521.XA CN109379763B (zh) | 2018-10-09 | 2018-10-09 | 网络设备信息的智能标记方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811172521.XA CN109379763B (zh) | 2018-10-09 | 2018-10-09 | 网络设备信息的智能标记方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109379763A true CN109379763A (zh) | 2019-02-22 |
CN109379763B CN109379763B (zh) | 2022-08-05 |
Family
ID=65403268
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811172521.XA Active CN109379763B (zh) | 2018-10-09 | 2018-10-09 | 网络设备信息的智能标记方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109379763B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112202610A (zh) * | 2020-09-29 | 2021-01-08 | 苏州迈科网络安全技术股份有限公司 | 基于mac地址的终端型号识别系统及识别方法 |
CN112417229A (zh) * | 2020-11-12 | 2021-02-26 | 成都渊数科技有限责任公司 | 一种基于mac地址获取对应设备型号的方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080126530A1 (en) * | 2006-09-08 | 2008-05-29 | Tetsuro Motoyama | System, method, and computer program product for identification of vendor and model name of a remote device among multiple network protocols |
CN106487879A (zh) * | 2016-09-20 | 2017-03-08 | 北京知道未来信息技术有限公司 | 一种基于设备指纹库的网络设备识别方法和装置 |
CN108133387A (zh) * | 2017-12-21 | 2018-06-08 | 北京联合大学 | 基于软信息的多标记k近邻算法 |
CN108173716A (zh) * | 2018-01-09 | 2018-06-15 | 北京知道创宇信息技术有限公司 | 一种识别网络设备厂商的方法和计算设备 |
CN108390788A (zh) * | 2018-03-05 | 2018-08-10 | 北京奇艺世纪科技有限公司 | 用户识别方法、装置及电子设备 |
-
2018
- 2018-10-09 CN CN201811172521.XA patent/CN109379763B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080126530A1 (en) * | 2006-09-08 | 2008-05-29 | Tetsuro Motoyama | System, method, and computer program product for identification of vendor and model name of a remote device among multiple network protocols |
CN106487879A (zh) * | 2016-09-20 | 2017-03-08 | 北京知道未来信息技术有限公司 | 一种基于设备指纹库的网络设备识别方法和装置 |
CN108133387A (zh) * | 2017-12-21 | 2018-06-08 | 北京联合大学 | 基于软信息的多标记k近邻算法 |
CN108173716A (zh) * | 2018-01-09 | 2018-06-15 | 北京知道创宇信息技术有限公司 | 一种识别网络设备厂商的方法和计算设备 |
CN108390788A (zh) * | 2018-03-05 | 2018-08-10 | 北京奇艺世纪科技有限公司 | 用户识别方法、装置及电子设备 |
Non-Patent Citations (1)
Title |
---|
田启明: "基于网格距离的聚类算法的设计、实现和应用", 《计算机应用》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112202610A (zh) * | 2020-09-29 | 2021-01-08 | 苏州迈科网络安全技术股份有限公司 | 基于mac地址的终端型号识别系统及识别方法 |
CN112202610B (zh) * | 2020-09-29 | 2023-10-24 | 苏州迈科网络安全技术股份有限公司 | 基于mac地址的终端型号识别系统及识别方法 |
CN112417229A (zh) * | 2020-11-12 | 2021-02-26 | 成都渊数科技有限责任公司 | 一种基于mac地址获取对应设备型号的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN109379763B (zh) | 2022-08-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103516541B (zh) | 基于智能化变电站的配置信息自动管理方法 | |
CN110933146B (zh) | 一种数据转换方法、装置和服务器 | |
CN105068854B (zh) | 一种使用相同规则实现对不同产品的控制的方法 | |
CN109146539A (zh) | 用户画像的更新方法及装置 | |
CN104267701B (zh) | 智能家居新增设备的控制方法及装置 | |
CN109379763A (zh) | 网络设备信息的智能标记方法 | |
CN103907333B (zh) | 用于通过多个异构设备的标识和上下文进行动态服务协作的系统 | |
CN101772923B (zh) | 搜索通用即插即用设备的方法和装置 | |
CN111107064B (zh) | 终端设备识别方法、装置、设备及可读存储介质 | |
KR101109549B1 (ko) | 메타데이터에 기반한 센서노드 관리장치 및 방법 | |
CN106533728B (zh) | 服务器信息收集方法和装置 | |
CN104993583A (zh) | 配电自动化设备的通信方法 | |
CN110198533B (zh) | 一种远程控制ble蓝牙设备的方法和ble蓝牙设备 | |
CN110460473A (zh) | 组态软件的通信配置方法、装置和计算机可读存储介质 | |
CN109361529A (zh) | 一种终端类型识别方法、装置、电子设备及存储介质 | |
CN103957119A (zh) | 一种采用mib文件对网络设备进行管理的方法及浏览器 | |
CN109428824A (zh) | 主机拓扑生成方法和系统 | |
CN104063036A (zh) | 扫描枪的控制方法和系统 | |
CN114900835A (zh) | 恶意流量智能检测方法、装置及存储介质 | |
CN103269289A (zh) | 航管雷达信息测试方法和设备 | |
CN111079468B (zh) | 机器人识别物体的方法及装置 | |
CN101882354B (zh) | 一种动态计算传感器物理量的装置和方法 | |
CN112702303A (zh) | 一种列车实时数据解析方法、装置、设备及存储介质 | |
CN104536922B (zh) | 一种智能粮仓中的传感器数据读取、转换、存储系统 | |
CN108092809B (zh) | 智能变电站网络交换机建模方法及设备资产模型映射方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |