CN111093224A - 一种4g核心网dpi数据的稽查方法、设备以及系统 - Google Patents
一种4g核心网dpi数据的稽查方法、设备以及系统 Download PDFInfo
- Publication number
- CN111093224A CN111093224A CN201911247972.XA CN201911247972A CN111093224A CN 111093224 A CN111093224 A CN 111093224A CN 201911247972 A CN201911247972 A CN 201911247972A CN 111093224 A CN111093224 A CN 111093224A
- Authority
- CN
- China
- Prior art keywords
- data
- dpi
- total
- bearing
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/02—Capturing of monitoring data
- H04L43/028—Capturing of monitoring data by filtering
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Mobile Radio Communication Systems (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明提供一种4G核心网DPI数据的稽查方法、4G核心网DPI数据的稽查系统、计算机设备以及计算机可读存储介质,涉及通讯技术领域。所述方法包括:根据一预设时间内的4G话单信息得到承载成功总数信息以及流量总量;根据所述预设时间内的DPI数据确定S5S8承载建立成功数以及DPI流量数据;根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果;根据所述流量总量与DPI流量数据确定DPI数据中用户面数据的稽查结果。本发明实现了DPI的信令面和用户面的全量稽查,不止局限于抽测。
Description
技术领域
本发明关于通信技术领域,特别是关于4G核心网的数据处理技术,具体的讲是一种4G核心网DPI数据的稽查方法、4G核心网DPI数据的稽查系统、计算机设备以及计算机可读存储介质。
背景技术
本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
4G核心网DPI(Deep Packet Inspection,深度包检测技术)数据主要分为信令面数据和用户面数据,在网络管理中有十分重要的作用。移动网DPI的信令面数据和用户面数据是业务统计、用户故障诊断的重要基础数据。其中,通过DPI信令面数据可以查看各移动网元间的信令交互,定位故障原因,例如鉴权失败、附着失败、承载建立失败等。用户面数据可以统计客户、用户的使用记录,包括开始时间、结束时间、访问网站、时长、访问结果等。在使用数据时需保证DPI的准确率,如果出现数据丢失会造成诊断异常,造成故障定位失败,影响排障准确性和效率。同时由于移动核心网DPI的秒级需要清洗百级千级的GB的流量,在处理能力下降或者故障时无法保证100%的准确率。
现有技术中大部分DPI数据的稽查方法均是结合仿真拨测对对DPI进行抽测检测,但是此类方法由于是抽样无法对所有场景进行稽查。
因此,如何提供一种新的方案,其能够解决上述技术缺陷是本领域亟待解决的技术难题。
发明内容
有鉴于此,本发明提供了一种4G核心网DPI数据的稽查方法、4G核心网DPI数据的稽查系统、计算机设备以及计算机可读存储介质,通过话单信息识别用户首次接入话单统计周期内总数与S5S8承载成功总数进行核对,使用业务容器中的上行和下行流量统计周期内流量总量和DPI流量数据进行核对,实现了DPI的信令面和用户面的全量稽查。
为了实现上述目的,本发明提供了一种4G核心网DPI数据的稽查方法,所述方法包括:
根据一预设时间内的4G话单信息得到承载成功总数信息以及流量总量;
根据所述预设时间内的DPI数据确定S5S8承载建立成功数以及DPI流量数据;
根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果;
根据所述流量总量与DPI流量数据确定DPI数据中用户面数据的稽查结果。
在本发明的优选实施方式中,根据一预设时间内的4G话单信息得到承载成功总数信息包括:
解析一预设时间内的4G话单信息,识别出用户号码以及用户上线时间;
当所述用户上线时间与一话单切割时间相等时,记录为承载建立成功;
统计所述预设时间内承载建立成功的记录数作为承载成功总数信息;
通过所述用户号码进行去重操作,得到去重用户总数。
在本发明的优选实施方式中,根据所述预设时间内的DPI数据确定S5S8承载建立成功数包括:
从所述预设时间内的DPI数据中获取S5S8承载信息;
分析所述S5S8承载信息,过滤流程类型为承载建立请求信息、流程状态为预设数字时记录为承载建立成功;
使用一业务流程开始时间作为周期时间判断依据,计算出S5S8承载建立成功数;
通过手机号码进行去重操作,作为去重用户数。
在本发明的优选实施方式中,根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果包括:
比对所述承载成功总数信息与S5S8承载建立成功数,得到第一比对结果;
比对所述去重用户总数与去重用户数,得到第二比对结果;
当所述第一比对结果以及第二比对结果达到第一预设阈值时,生成DPI信令面数据准确的稽查结果。
在本发明的优选实施方式中,根据一预设时间内的4G话单信息得到流量总量包括:
获取所述4G话单信息的业务容器中用户面流量数据;
根据所述用户面流量数据分别统计出上行总量和下行总量;
根据所述用户号码进行去重操作,得到去重用户总数。
在本发明的优选实施方式中,根据所述预设时间内的DPI数据确定DPI流量数据包括:
从所述预设时间内的DPI数据中获取用户面数据;
统计所述用户面数据中协议内容的流量,确定上行流量总量以及下行流量总量;
通过手机号码进行去重操作,得到去重用户数。
在本发明的优选实施方式中,根据所述流量总量与DPI流量数据确定DPI数据中信令面数据的稽查结果包括:
比对所述上行总量与上行流量总量,得到第三比对结果;
比对所述下行总量与下行流量总量,得到第四比对结果;
比对所述去重用户总数与去重用户数,得到第二比对结果;
当所述第三比对结果以及第四比对结果达到第二预设阈值、第二比对结果达到第一阈值时,生成DPI用户面数据准确的稽查结果。
本发明的目的之一是,提供了一种4G核心网DPI数据的稽查设备,包括:
话单信息识别模块,用于根据一预设时间内的4G话单信息得到承载成功总数信息以及流量总量;
DPI数据解析模块,用于根据所述预设时间内的DPI数据确定S5S8承载建立成功数以及DPI流量数据;
信令面稽查模块,用于根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果;
用户面稽查模块,用于根据所述流量总量与DPI流量数据确定DPI数据中用户面数据的稽查结果。
在本发明的优选实施方式中,所述话单信息识别模块包括:
话单信息解析模块,用于解析一预设时间内的4G话单信息,识别出用户号码以及用户上线时间;
承载建立记录模块,用于当所述用户上线时间与一话单切割时间相等时,记录为承载建立成功;
承载总数统计模块,用于统计所述预设时间内承载建立成功的记录数作为承载成功总数信息;
第一去重操作模块,用于通过所述用户号码进行去重操作,得到去重用户总数。
在本发明的优选实施方式中,所述DPI数据解析模块包括:
承载信息获取模块,用于从所述预设时间内的DPI数据中获取S5S8承载信息;
承载信息分析模块,用于分析所述S5S8承载信息,过滤流程类型为承载建立请求信息、流程状态为预设数字时记录为承载建立成功;
承载成功数计算模块,用于使用一业务流程开始时间作为周期时间判断依据,计算出S5S8承载建立成功数;
第二去重操作模块,用于通过手机号码进行去重操作,作为去重用户数。
在本发明的优选实施方式中,所述信令面稽查模块包括:
第一比对结果生成模块,用于比对所述承载成功总数信息与S5S8承载建立成功数,得到第一比对结果;
第二比对结果生成模块,用于比对所述去重用户总数与去重用户数,得到第二比对结果;
第一稽查结果生成模块,用于当所述第一比对结果以及第二比对结果达到第一预设阈值时,生成DPI信令面数据准确的稽查结果。
在本发明的优选实施方式中,所述话单信息识别模块包括:
用户面流量获取模块,用于获取所述4G话单信息的业务容器中用户面流量数据;
数据总量统计模块,用于根据所述用户面流量数据分别统计出上行总量和下行总量;
第一去重操作模块,用于根据所述用户号码进行去重操作,得到去重用户总数。
在本发明的优选实施方式中,所述DPI数据解析模块包括:
用户面数据获取模块,用于从所述预设时间内的DPI数据中获取用户面数据;
流量总量统计模块,用于统计所述用户面数据中协议内容的流量,确定上行流量总量以及下行流量总量;
第二去重操作模块,用于通过手机号码进行去重操作,得到去重用户数。
在本发明的优选实施方式中,所述用户面稽查模块包括:
第三比对结果生成模块,用于比对所述上行总量与上行流量总量,得到第三比对结果;
第四比对结果生成模块,用于比对所述下行总量与下行流量总量,得到第四比对结果;
第二比对结果生成模块,用于比对所述去重用户总数与去重用户数,得到第二比对结果;
第二稽查结果生成模块,用于当所述第三比对结果以及第四比对结果达到第二预设阈值、第二比对结果达到第一阈值时,生成DPI用户面数据准确的稽查结果。
本发明的目的之一是,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现一种4G核心网DPI数据的稽查方法。
本发明的目的之一是,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有执行一种4G核心网DPI数据的稽查方法。
本发明的有益效果在于,提供了一种4G核心网DPI数据的稽查方法、4G核心网DPI数据的稽查设备、业务系统、计算机设备以及计算机可读存储介质,通过话单信息识别用户首次接入话单统计周期内总数与S5S8承载成功总数进行核对,使用业务容器中的上行和下行流量统计周期内流量总量和DPI流量数据进行核对,实现了DPI的信令面和用户面的全量稽查,不止局限于抽测。
为让本发明的上述和其他目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附图式,作详细说明如下。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种4G核心网DPI数据的稽查系统的结构示意图;
图2为本发明实施例提供的一种4G核心网DPI数据的稽查方法的流程图;
图3为本发明提供的具体实施例中4G核心网DPI数据的稽查系统的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本领域技术技术人员知道,本发明的实施方式可以实现为一种系统、装置、方法或计算机程序产品。因此,本发明公开可以具体实现为以下形式,即:完全的硬件、完全的软件(包括固件、驻留软件、微代码等),或者硬件和软件结合的形式。
下面首先介绍本发明的技术术语。
DPI:Deep Packet Inspection,深度包检测技术。
S5S8:SGW(服务网关)和PGW(PDN网关)之间的信令接口。
HTTP:HyperText Transfer Protocol,超文本传输协议。
FTP:文件传输协议。
MQTT:消息队列遥测传输。
APN:即“接入点名称”设置,全称是Access Point Name。
4G核心网DPI数据主要分为信令面和用户面数据,DPI数据在网络管理中有十分重要的作用,所以在分析数据之前要对数据进行稽查。由于计费话单的准确性较高,因此本发明借助计费话单,主要对DPI的信令面和用户面数据进行稽查,信令面的稽查S5S8信令,用户面数据主要对用户使用的上下行流量进行稽查。
具体的,图1为本发明实施例提供的一种4G核心网DPI数据的稽查系统的结构示意图,请参阅图1,该系统包括:
话单信息识别模块100,用于根据一预设时间内的4G话单信息得到承载成功总数信息以及流量总量;
DPI数据解析模块200,用于根据所述预设时间内的DPI数据确定S5S8承载建立成功数以及DPI流量数据;
信令面稽查模块300,用于根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果;
用户面稽查模块400,用于根据所述流量总量与DPI流量数据确定DPI数据中用户面数据的稽查结果。
在本发明的一种实施方式中,话单信息识别模块包括:
话单信息解析模块,用于解析一预设时间内的4G话单信息,识别出用户号码以及用户上线时间;
承载建立记录模块,用于当所述用户上线时间与一话单切割时间相等时,记录为承载建立成功;
承载总数统计模块,用于统计所述预设时间内承载建立成功的记录数作为承载成功总数信息;
第一去重操作模块,用于通过所述用户号码进行去重操作,得到去重用户总数。
也即在该实施方式中,解析4G话单信息识别话单中的用户号码、用户上线时间、业务使用信息等信息,作为基准文件使用。统计一段时间内话单中用户上线时间等于话单切割时间的记录作为承载建立成功信息,通过话单切割时间和用户接入时间判断,如果相等则判定为用户首次接入话单,由于产生了话单证明承载建立是成功的。使用用户接入时间作为周期时间判断依据,计算承载建立成功总数,并通过手机号码去重作为去重用户数。
在本发明的一种实施方式中,DPI数据解析模块包括:
承载信息获取模块,用于从所述预设时间内的DPI数据中获取S5S8承载信息;
承载信息分析模块,用于分析所述S5S8承载信息,过滤流程类型为承载建立请求信息、流程状态为预设数字时记录为承载建立成功。
在本发明的一个具体实施例中,预设数字诸如为0、17、18、19,其中流程状态为0表示成功,流程状态为17多PDN业务时,如果有部分bearer处理失败,流程状态为18代表终端申请的IPV4/v6双栈,其中一种申请失败,降为单栈,流程状态为19代表终端申请的IPV4/v6双栈,但是MME不支持双栈,降为单栈。
承载成功数计算模块,用于使用一业务流程开始时间作为周期时间判断依据,计算出S5S8承载建立成功数;
第二去重操作模块,用于通过手机号码进行去重操作,作为去重用户数。
也即在该实施方式中,分析S5S8承载信息,过滤流程类型为承载建立请求信息,流程状态为0或者为17、18、19时都认为承载建立成功。使用业务流程开始时间作为周期时间判断依据,计算S5S8承载建立成功总数,并通过手机号码去重作为去重用户数。
在本发明的一种实施方式中,信令面稽查模块包括:
第一比对结果生成模块,用于比对所述承载成功总数信息与S5S8承载建立成功数,得到第一比对结果;
第二比对结果生成模块,用于比对所述去重用户总数与去重用户数,得到第二比对结果;
第一稽查结果生成模块,用于当所述第一比对结果以及第二比对结果达到第一预设阈值时,生成DPI信令面数据准确的稽查结果。在具体的实施例中,第一预设阈值诸如为99%。
也即,分别比对话单承载统计和DPI承载统计的承载建立总数、去重用户数,如果去重用户数和承载建立成功总数准确率达到99%,则认为DPI信令面数据准确可用。
在本发明的一种实施方式中,话单信息识别模块还包括:
用户面流量获取模块,用于获取所述4G话单信息的业务容器中用户面流量数据;
数据总量统计模块,用于根据所述用户面流量数据分别统计出上行总量和下行总量。
也即在该实施方式中,根据话单业务容器中的用户终端使用信息统计流量信息,过滤上行或下行流量大于0的话单,统计业务使用时间或结束时间在周期时间段内的流量信息,分别统计上行流量和下行流量,并对手机号码去重计算去重用户数。
在本发明的一种实施方式中,DPI数据解析模块包括:
用户面数据获取模块,用于从所述预设时间内的DPI数据中获取用户面数据;
流量总量统计模块,用于统计所述用户面数据中协议内容的流量,确定上行流量总量以及下行流量总量。
也即在该实施方式中,核心网DPI的用户面数据主要包含HTTP、视屏、FTP、MQTT等协议信息,需要对所有清洗的协议类型进行流量汇总,根据业务使用时间统计周期内的上行流量和下行流量,并对手机号码去重计算去重用户数
在本发明的一种实施方式中,用户面稽查模块包括:
第三比对结果生成模块,用于比对所述上行总量与上行流量总量,得到第三比对结果;
第四比对结果生成模块,用于比对所述下行总量与下行流量总量,得到第四比对结果;
第二比对结果生成模块,用于比对所述去重用户总数与去重用户数,得到第二比对结果;
第二稽查结果生成模块,用于当所述第三比对结果以及第四比对结果达到第二预设阈值、第二比对结果达到第一阈值时,生成DPI用户面数据准确的稽查结果。在具体的实施例中,第一预设阈值诸如为99%、第二预设阈值诸如为90%。
也即,比对话单流量统计和DPI流量统计,如果去重用户数准确率高于99%,上下行流量高于90%,则认为DPI用户面信息准确。
在本发明的其他实施方式中,还可以指定用户接入APN、接入的PGW、手机号段等信息限制核对范围,此处不再赘述。
如上即是本发明提供的一种4G核心网DPI数据的稽查系统,解析4G话单识别话单中的用户号码、用户上线时间、业务使用信息等信息,作为基准文件使用,统计一段时间内话单中用户上线时间等于话单切割时间的记录作为承载建立成功信息,与DPI中统计的S5S8承载建立成功数进行比对,同时统计去重用户数据,如果去重用户数和承载建立成功总数准确率高于99%则认为信令数据准确可用;对于用户面流量数据统计一段时间内话单上行或下行流量大于0,统计上下行总流量和去重用户数。统计DPI用户面各协议内容的流量,例如HTTP、视屏、FTP、MQTT协议等计算上下行流量总量和去重用户数,如果去重用户数准确率高于99%,流量准确率高于90%则认为用户面数据准确可用,实现了DPI的信令面和用户面的全量稽查,不止局限于抽测。
此外,尽管在上文详细描述中提及了系统的若干单元模块,但是这种划分仅仅并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。同样,上文描述的一个单元的特征和功能也可以进一步划分为由多个单元来具体化。以上所使用的术语“模块”和“单元”,可以是实现预定功能的软件和/或硬件。尽管以下实施例所描述的模块较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
在介绍了本发明示例性实施方式的4G核心网DPI数据的稽查的系统之后,接下来,参考附图对本发明示例性实施方式的方法进行介绍。该方法的实施可以参见上述整体的实施,重复之处不再赘述。
具体的,图2为本发明实施例提供的一种4G核心网DPI数据的稽查方法的流程示意图,请参阅图2,该方法包括:
S101:根据一预设时间内的4G话单信息得到承载成功总数信息以及流量总量;
S102:根据所述预设时间内的DPI数据确定S5S8承载建立成功数以及DPI流量数据;
S103:根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果;
S104:根据所述流量总量与DPI流量数据确定DPI数据中用户面数据的稽查结果。
在本发明的一种实施方式中,根据一预设时间内的4G话单信息得到承载成功总数信息包括:
解析一预设时间内的4G话单信息,识别出用户号码以及用户上线时间;
当所述用户上线时间与一话单切割时间相等时,记录为承载建立成功;
统计所述预设时间内承载建立成功的记录数作为承载成功总数信息;
通过所述用户号码进行去重操作,得到去重用户总数。
也即在该实施方式中,解析4G话单信息识别话单中的用户号码、用户上线时间、业务使用信息等信息,作为基准文件使用。统计一段时间内话单中用户上线时间等于话单切割时间的记录作为承载建立成功信息,通过话单切割时间和用户接入时间判断,如果相等则判定为用户首次接入话单,由于产生了话单证明承载建立是成功的。使用用户接入时间作为周期时间判断依据,计算承载建立成功总数,并通过手机号码去重作为去重用户数。
在本发明的一种实施方式中,根据所述预设时间内的DPI数据确定S5S8承载建立成功数包括:
从所述预设时间内的DPI数据中获取S5S8承载信息;
分析所述S5S8承载信息,过滤流程类型为承载建立请求信息、流程状态为预设数字时记录为承载建立成功。在本发明的一个具体实施例中,预设数字诸如为0、17、18、19,其中流程状态为0表示成功,流程状态为17多PDN业务时,如果有部分bearer处理失败,流程状态为18代表终端申请的IPV4/v6双栈,其中一种申请失败,降为单栈,流程状态为19代表终端申请的IPV4/v6双栈,但是MME不支持双栈,降为单栈。
使用一业务流程开始时间作为周期时间判断依据,计算出S5S8承载建立成功数;
通过手机号码进行去重操作,作为去重用户数。
也即在该实施方式中,分析S5S8承载信息,过滤流程类型为承载建立请求信息,流程状态为0或者为17、18、19时都认为承载建立成功。使用业务流程开始时间作为周期时间判断依据,计算S5S8承载建立成功总数,并通过手机号码去重作为去重用户数。
在本发明的一种实施方式中,步骤S103包括:
比对所述承载成功总数信息与S5S8承载建立成功数,得到第一比对结果;
比对所述去重用户总数与去重用户数,得到第二比对结果;
当所述第一比对结果以及第二比对结果达到第一预设阈值时,生成DPI信令面数据准确的稽查结果。在具体的实施例中,第一预设阈值诸如为99%。
也即,分别比对话单承载统计和DPI承载统计的承载建立总数、去重用户数,如果去重用户数和承载建立成功总数准确率达到99%,则认为DPI信令面数据准确可用。
在本发明的一种实施方式中,根据一预设时间内的4G话单信息得到流量总量包括:
获取所述4G话单信息的业务容器中用户面流量数据;
根据所述用户面流量数据分别统计出上行总量和下行总量。
也即在该实施方式中,根据话单业务容器中的用户终端使用信息统计流量信息,过滤上行或下行流量大于0的话单,统计业务使用时间或结束时间在周期时间段内的流量信息,分别统计上行流量和下行流量,并对手机号码去重计算去重用户数。
在本发明的一种实施方式中,根据所述预设时间内的DPI数据确定DPI流量数据包括:
从所述预设时间内的DPI数据中获取用户面数据;
统计所述用户面数据中协议内容的流量,确定上行流量总量以及下行流量总量。
也即在该实施方式中,核心网DPI的用户面数据主要包含HTTP、视屏、FTP、MQTT等协议信息,需要对所有清洗的协议类型进行流量汇总,根据业务使用时间统计周期内的上行流量和下行流量,并对手机号码去重计算去重用户数
在本发明的一种实施方式中,根据所述流量总量与DPI流量数据确定DPI数据中信令面数据的稽查结果包括:
比对所述上行总量与上行流量总量,得到第三比对结果;
比对所述下行总量与下行流量总量,得到第四比对结果;
比对所述去重用户总数与去重用户数,得到第二比对结果;
当所述第三比对结果以及第四比对结果达到第二预设阈值、第二比对结果达到第一阈值时,生成DPI用户面数据准确的稽查结果。在具体的实施例中,第一预设阈值诸如为99%、第二预设阈值诸如为90%。
也即,比对话单流量统计和DPI流量统计,如果去重用户数准确率高于99%,上下行流量高于90%,则认为DPI用户面信息准确。
在本发明的其他实施方式中,还可以指定用户接入APN、接入的PGW、手机号段等信息限制核对范围,此处不再赘述。
如上即是本发明提供的一种4G核心网DPI数据的稽查方法,解析4G话单识别话单中的用户号码、用户上线时间、业务使用信息等信息,作为基准文件使用,统计一段时间内话单中用户上线时间等于话单切割时间的记录作为承载建立成功信息,与DPI中统计的S5S8承载建立成功数进行比对,同时统计去重用户数据,如果去重用户数和承载建立成功总数准确率高于99%则认为信令数据准确可用;对于用户面流量数据统计一段时间内话单上行或下行流量大于0,统计上下行总流量和去重用户数。统计DPI用户面各协议内容的流量,例如HTTP、视屏、FTP、MQTT协议等计算上下行流量总量和去重用户数,如果去重用户数准确率高于99%,流量准确率高于90%则认为用户面数据准确可用,实现了DPI的信令面和用户面的全量稽查,不止局限于抽测。
本发明还提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现一种4G核心网DPI数据的稽查方法。
本发明还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有执行一种4G核心网DPI数据的稽查方法。
应当注意,尽管在附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。在介绍了本发明示例性实施方式之后,接下来,参考附图对本发明示例性实施方式的系统进行介绍。该系统的实施可以参见上述整体的实施,重复之处不再赘述。
下面结合具体的实施例,详细介绍本发明的技术方案。
图3为本发明提供的具体实施例中4G核心网DPI数据的稽查系统的示意图,请参阅图3,在该实施例中4G核心网DPI稽查主要分为信令面和用户面流量的稽查,以下描述具体步骤:
1)话单承载统计:通过话单切割时间和用户接入时间判断,如果相等则判定为用户首次接入话单,由于产生了话单证明承载建立是成功的。使用用户接入时间作为周期时间判断依据,计算承载建立成功总数,并通过手机号码去重作为去重用户数。
2)DPI承载统计:分析S5S8承载信息,过滤流程类型为承载建立请求信息,流程状态为0(成功)或者为17(多PDN业务时,如果有部分bearer处理失败)、18(终端申请的IPV4/v6双栈,其中一种申请失败,降为单栈)、19(终端申请的IPV4/v6双栈,但是MME不支持双栈,降为单栈)时都认为承载建立成功。使用业务流程开始时间作为周期时间判断依据,计算S5S8承载建立成功总数,并通过手机号码去重作为去重用户数。
3)话单和DPI承载统计比对:比对话单承载统计和DPI承载统计的承载建立总数、去重用户数,如果准确率达到99%,则认为DPI信令面数据准确。
4)话单流量统计:根据话单业务容器中的用户终端使用信息统计流量信息,过滤上行或下行流量大于0的话单,统计业务使用时间或结束时间在周期时间段内的流量信息,分别统计上行流量和下行流量,并对手机号码去重计算去重用户数。
5)DPI流量统计:核心网DPI的用户面数据主要包含HTTP、视屏、FTP、MQTT等协议信息,需要对所有清洗的协议类型进行流量汇总,根据业务使用时间统计周期内的上行流量和下行流量,并对手机号码去重计算去重用户数。
6)话单和DPI流量比对:比对话单流量统计和DPI流量统计,如果去重用户数准确率高于99%,上下行流量高于90%,则认为DPI用户面信息准确。
7)以上为信令面和用户面的全量统计,还可以指定用户接入APN、接入的PGW、手机号段等信息限制核对范围。
综上所述,本发明提供了一种4G核心网DPI数据的稽查方法、4G核心网DPI数据的稽查系统、计算机设备以及计算机可读存储介质,优势在于:
1、实现了DPI的信令面和用户面的全量稽查,不止局限于抽测。
2、实现了话单信息中承载建立成功数据的抽取。
3、使用话单稽查DPI数据,准确性更高。
对于一个技术的改进可以很明显地区分是硬件上的改进(例如,对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而,随着技术的发展,当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。
因此,不能说一个方法流程的改进就不能用硬件实体模块来实现。例如,可编程逻辑器件(Programmable Logic Device,PLD)(例如现场可编程门阵列(Field ProgrammableGate Array,FPGA))就是这样一种集成电路,其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上,而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且,如今,取代手工地制作集成电路芯片,这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现,它与程序开发撰写时所用的软件编译器相类似,而要编译之前的原始代码也得用特定的编程语言来撰写,此称之为硬件描述语言(Hardware Description Language,HDL),而HDL也并非仅有一种,而是有许多种,如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware DescriptionLanguage)、Confluence、CUPL(Cornell University Programming Language)、HDCal、JHDL(Java Hardware Description Language)、Lava、Lola、MyHDL、PALASM、RHDL(RubyHardware Description Language)等,目前最普遍使用的是VHDL(Very-High-SpeedIntegrated Circuit Hardware Description Language)与Verilog2。
本领域技术人员也应该清楚,只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中,就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现,例如,控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式,控制器的例子包括但不限于以下微控制器:ARC625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320,存储器控制器还可以被实现为存储器的控制逻辑的一部分。
本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机系统(可以是个人计算机,服务器,或者网络系统等)执行本申请各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本申请可用于众多通用或专用的计算机系统环境或配置中。例如:个人计算机、服务器计算机、手持系统或便携式系统、平板型系统、多处理器系统、基于微处理器的系统、置顶盒、可编程的消费电子系统、网络PC、小型计算机、大型计算机、包括以上任何系统或系统的分布式计算环境等等。
本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请,在这些分布式计算环境中,由通过通信网络而被连接的远程处理系统来执行任务。在分布式计算环境中,程序模块可以位于包括存储系统在内的本地和远程计算机存储介质中。
虽然通过实施例描绘了本申请,本领域普通技术人员知道,本申请有许多变形和变化不脱离本申请的精神,希望所附的权利要求包括这些变形和变化而不脱离本申请的精神。
Claims (16)
1.一种4G核心网DPI数据的稽查方法,其特征在于,所述方法包括:
根据一预设时间内的4G话单信息得到承载成功总数信息以及流量总量;
根据所述预设时间内的DPI数据确定S5S8承载建立成功数以及DPI流量数据;
根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果;
根据所述流量总量与DPI流量数据确定DPI数据中用户面数据的稽查结果。
2.根据权利要求1所述的方法,其特征在于,根据一预设时间内的4G话单信息得到承载成功总数信息包括:
解析一预设时间内的4G话单信息,识别出用户号码以及用户上线时间;
当所述用户上线时间与一话单切割时间相等时,记录为承载建立成功;
统计所述预设时间内承载建立成功的记录数作为承载成功总数信息;
通过所述用户号码进行去重操作,得到去重用户总数。
3.根据权利要求2所述的方法,其特征在于,根据所述预设时间内的DPI数据确定S5S8承载建立成功数包括:
从所述预设时间内的DPI数据中获取S5S8承载信息;
分析所述S5S8承载信息,过滤流程类型为承载建立请求信息、流程状态为预设数字时记录为承载建立成功;
使用一业务流程开始时间作为周期时间判断依据,计算出S5S8承载建立成功数;
通过手机号码进行去重操作,作为去重用户数。
4.根据权利要求3所述的方法,其特征在于,根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果包括:
比对所述承载成功总数信息与S5S8承载建立成功数,得到第一比对结果;
比对所述去重用户总数与去重用户数,得到第二比对结果;
当所述第一比对结果以及第二比对结果达到第一预设阈值时,生成DPI信令面数据准确的稽查结果。
5.根据权利要求1所述的方法,其特征在于,根据一预设时间内的4G话单信息得到流量总量包括:
获取所述4G话单信息的业务容器中用户面流量数据;
根据所述用户面流量数据分别统计出上行总量和下行总量;
根据所述用户号码进行去重操作,得到去重用户总数。
6.根据权利要求5所述的方法,其特征在于,根据所述预设时间内的DPI数据确定DPI流量数据包括:
从所述预设时间内的DPI数据中获取用户面数据;
统计所述用户面数据中协议内容的流量,确定上行流量总量以及下行流量总量;
通过手机号码进行去重操作,得到去重用户数。
7.根据权利要求6所述的方法,其特征在于,根据所述流量总量与DPI流量数据确定DPI数据中信令面数据的稽查结果包括:
比对所述上行总量与上行流量总量,得到第三比对结果;
比对所述下行总量与下行流量总量,得到第四比对结果;
比对所述去重用户总数与去重用户数,得到第二比对结果;
当所述第三比对结果以及第四比对结果达到第二预设阈值、第二比对结果达到第一阈值时,生成DPI用户面数据准确的稽查结果。
8.一种4G核心网DPI数据的稽查系统,其特征在于,所述系统包括:
话单信息识别模块,用于根据一预设时间内的4G话单信息得到承载成功总数信息以及流量总量;
DPI数据解析模块,用于根据所述预设时间内的DPI数据确定S5S8承载建立成功数以及DPI流量数据;
信令面稽查模块,用于根据所述承载成功总数信息与S5S8承载建立成功数确定DPI数据中信令面数据的稽查结果;
用户面稽查模块,用于根据所述流量总量与DPI流量数据确定DPI数据中用户面数据的稽查结果。
9.根据权利要求8所述的系统,其特征在于,所述话单信息识别模块包括:
话单信息解析模块,用于解析一预设时间内的4G话单信息,识别出用户号码以及用户上线时间;
承载建立记录模块,用于当所述用户上线时间与一话单切割时间相等时,记录为承载建立成功;
承载总数统计模块,用于统计所述预设时间内承载建立成功的记录数作为承载成功总数信息;
第一去重操作模块,用于通过所述用户号码进行去重操作,得到去重用户总数。
10.根据权利要求9所述的系统,其特征在于,所述DPI数据解析模块包括:
承载信息获取模块,用于从所述预设时间内的DPI数据中获取S5S8承载信息;
承载信息分析模块,用于分析所述S5S8承载信息,过滤流程类型为承载建立请求信息、流程状态为预设数字时记录为承载建立成功;
承载成功数计算模块,用于使用一业务流程开始时间作为周期时间判断依据,计算出S5S8承载建立成功数;
第二去重操作模块,用于通过手机号码进行去重操作,作为去重用户数。
11.根据权利要求10所述的系统,其特征在于,所述信令面稽查模块包括:
第一比对结果生成模块,用于比对所述承载成功总数信息与S5S8承载建立成功数,得到第一比对结果;
第二比对结果生成模块,用于比对所述去重用户总数与去重用户数,得到第二比对结果;
第一稽查结果生成模块,用于当所述第一比对结果以及第二比对结果达到第一预设阈值时,生成DPI信令面数据准确的稽查结果。
12.根据权利要求8所述的系统,其特征在于,所述话单信息识别模块包括:
用户面流量获取模块,用于获取所述4G话单信息的业务容器中用户面流量数据;
数据总量统计模块,用于根据所述用户面流量数据分别统计出上行总量和下行总量;
第一去重操作模块,用于根据所述用户号码进行去重操作,得到去重用户总数。
13.根据权利要求12所述的系统,其特征在于,所述DPI数据解析模块包括:
用户面数据获取模块,用于从所述预设时间内的DPI数据中获取用户面数据;
流量总量统计模块,用于统计所述用户面数据中协议内容的流量,确定上行流量总量以及下行流量总量;
第二去重操作模块,用于通过手机号码进行去重操作,得到去重用户数。
14.根据权利要求13所述的系统,其特征在于,所述用户面稽查模块包括:
第三比对结果生成模块,用于比对所述上行总量与上行流量总量,得到第三比对结果;
第四比对结果生成模块,用于比对所述下行总量与下行流量总量,得到第四比对结果;
第二比对结果生成模块,用于比对所述去重用户总数与去重用户数,得到第二比对结果;
第二稽查结果生成模块,用于当所述第三比对结果以及第四比对结果达到第二预设阈值、第二比对结果达到第一阈值时,生成DPI用户面数据准确的稽查结果。
15.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7任意一项所述的4G核心网DPI数据的稽查方法。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有执行权利要求1至7任意一项所述的4G核心网DPI数据的稽查方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911247972.XA CN111093224B (zh) | 2019-12-09 | 2019-12-09 | 一种4g核心网dpi数据的稽查方法、设备以及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911247972.XA CN111093224B (zh) | 2019-12-09 | 2019-12-09 | 一种4g核心网dpi数据的稽查方法、设备以及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111093224A true CN111093224A (zh) | 2020-05-01 |
CN111093224B CN111093224B (zh) | 2023-08-01 |
Family
ID=70396332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911247972.XA Active CN111093224B (zh) | 2019-12-09 | 2019-12-09 | 一种4g核心网dpi数据的稽查方法、设备以及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111093224B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060077979A1 (en) * | 2004-10-13 | 2006-04-13 | Aleksandr Dubrovsky | Method and an apparatus to perform multiple packet payloads analysis |
CN106209506A (zh) * | 2016-06-30 | 2016-12-07 | 瑞斯康达科技发展股份有限公司 | 一种虚拟化深度包检测流量分析方法及系统 |
CN107193909A (zh) * | 2017-05-08 | 2017-09-22 | 杭州东方通信软件技术有限公司 | 数据处理方法及系统 |
CN107547566A (zh) * | 2017-09-29 | 2018-01-05 | 新华三信息安全技术有限公司 | 一种处理业务报文的方法及装置 |
US20180183939A1 (en) * | 2016-12-23 | 2018-06-28 | Cellos Software Limited | Method and system for detecting anomalies in consumption of data and charging of data services |
CN109816353A (zh) * | 2019-02-20 | 2019-05-28 | 南京云纬通信技术有限公司 | 一种基于软件仿真的dpi设备数据自动化稽核方法 |
-
2019
- 2019-12-09 CN CN201911247972.XA patent/CN111093224B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060077979A1 (en) * | 2004-10-13 | 2006-04-13 | Aleksandr Dubrovsky | Method and an apparatus to perform multiple packet payloads analysis |
CN106209506A (zh) * | 2016-06-30 | 2016-12-07 | 瑞斯康达科技发展股份有限公司 | 一种虚拟化深度包检测流量分析方法及系统 |
US20180183939A1 (en) * | 2016-12-23 | 2018-06-28 | Cellos Software Limited | Method and system for detecting anomalies in consumption of data and charging of data services |
CN107193909A (zh) * | 2017-05-08 | 2017-09-22 | 杭州东方通信软件技术有限公司 | 数据处理方法及系统 |
CN107547566A (zh) * | 2017-09-29 | 2018-01-05 | 新华三信息安全技术有限公司 | 一种处理业务报文的方法及装置 |
CN109816353A (zh) * | 2019-02-20 | 2019-05-28 | 南京云纬通信技术有限公司 | 一种基于软件仿真的dpi设备数据自动化稽核方法 |
Non-Patent Citations (2)
Title |
---|
李宝磊等: "TD-LTE信令数据准确性核查方法", 《电信工程技术与标准化》 * |
邓飞: "LTE网络信令采集数据的分析及探讨", 《互联网天地》 * |
Also Published As
Publication number | Publication date |
---|---|
CN111093224B (zh) | 2023-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107992398B (zh) | 一种业务系统的监控方法和监控系统 | |
US9015006B2 (en) | Automated enablement of performance data collection | |
CN106960143B (zh) | 用户账号的识别方法及装置、存储介质、电子设备 | |
CN109460343A (zh) | 基于日志的系统异常监控方法、装置、设备及存储介质 | |
CN109495291B (zh) | 调用异常的定位方法、装置和服务器 | |
CN104503910A (zh) | 通过监测用户使用行为对产品进行测试的方法 | |
CN109344071A (zh) | 自动生成LoadRunner性能测试脚本的方法 | |
CN112527879A (zh) | 基于Kafka的实时数据抽取方法及相关设备 | |
CN111162932A (zh) | 一种基于日志分析的api网关监控方法 | |
CN111400127A (zh) | 业务日志的监控方法及装置、存储介质、计算机设备 | |
CN111177193A (zh) | 一种基于Flink的日志流式处理方法及系统 | |
CN113225339A (zh) | 网络安全监测方法、装置、计算机设备及存储介质 | |
CN108628694B (zh) | 一种基于可编程硬件的数据处理方法以及装置 | |
CN111008107A (zh) | 一种大数据集群日志存储方法、装置、设备及存储介质 | |
CN110298677B (zh) | 一种云计算资源计费的方法、装置、电子设备和存储介质 | |
CN111093224A (zh) | 一种4g核心网dpi数据的稽查方法、设备以及系统 | |
CN112380091A (zh) | 一种服务运行情况监控方法、装置和相关设备 | |
CN112380115A (zh) | 一种回归测试方法、装置、电子设备及存储介质 | |
CN110032432B (zh) | 实例的压缩方法和装置、实例的解压方法和装置 | |
CN109039695B (zh) | 业务故障处理方法、装置及设备 | |
CN113225218A (zh) | 一种话单质量的核查方法和装置 | |
CN114979100A (zh) | 一种云资源检查方法及相关装置 | |
CN111209159A (zh) | 一种信息处理方法、装置、设备及存储介质 | |
CN111694673B (zh) | 内存处理方法、装置、电子设备及计算机可读存储介质 | |
CN113452533B (zh) | 计费自巡检、自愈合方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |