CN116094963A - 流量占比统计方法、装置、电子设备及存储介质 - Google Patents

流量占比统计方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN116094963A
CN116094963A CN202211565463.3A CN202211565463A CN116094963A CN 116094963 A CN116094963 A CN 116094963A CN 202211565463 A CN202211565463 A CN 202211565463A CN 116094963 A CN116094963 A CN 116094963A
Authority
CN
China
Prior art keywords
domain name
ipv4
address
network data
data packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211565463.3A
Other languages
English (en)
Inventor
弓晓东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
58tongcheng Information Technology Co ltd
Original Assignee
58tongcheng Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 58tongcheng Information Technology Co ltd filed Critical 58tongcheng Information Technology Co ltd
Priority to CN202211565463.3A priority Critical patent/CN116094963A/zh
Publication of CN116094963A publication Critical patent/CN116094963A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876Network utilisation, e.g. volume of load or congestion level
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Environmental & Geological Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明实施例提供了一种流量占比统计方法、装置、电子设备及存储介质,方法包括:抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和客户端与其他服务器之间传输的网络数据包,对网络数据包进行解析,确定出其他服务器对应的IPV4地址、第二域名和IPV4流量值,当对网络数据包进行解析,无法确定出服务器对应的第二域名时,根据第一域名与IP地址的映射关系确定IPV4地址对应的第二域名,根据第二域名和其对应的IPV4流量值,计算出各第二域名的IPV4流量占比,为IPV4优化升级到IPV6提供重要的参照数据,解决采用第三方工具的方式无法分析出IPV4流量占比,导致无法为IPV4优化升级到IPV6提供出参照数据的问题。

Description

流量占比统计方法、装置、电子设备及存储介质
技术领域
本发明实施例涉及计算机技术领域,特别是涉及一种流量占比统计方法、一种流量占比统计装置、一种电子设备以及一种计算机存储介质。
背景技术
随着网络规模的不断扩大,目前全球IPV4(Internet Protocol Version 4,互联网协议第4版)地址已经被分配完毕,全球互联网向基于IPV6(Internet Protocol Version6,互联网协议第6版)的下一代互联网转型已迫在眉睫,因此,需要有效分析出哪些域名使用IPV4,并且占比较高,为IPV4优化升级到IPV6提供重要的参照数据。
目前通常采用三方工具Charles或者Wireshark抓取网络数据包进行分析,然而上述采用第三方工具的方式无法分析出域名的IPV4流量占比,导致无法为IPV4优化升级到IPV6提供重要的参照数据。
发明内容
本发明实施例是提供一种流量占比统计方法、装置、电子设备及存储介质,以解决采用第三方工具的方式无法分析出域名的IPV4流量占比,导致无法为IPV4优化升级到IPV6提供出参照数据的问题。
本发明实施例公开了一种流量占比统计方法,其特征在于,包括:
抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和所述客户端与其他服务器之间传输的网络数据包;其中,所述IP地址包括IPV4地址;
对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址、第二域名和IPV4流量值;
当对所述网络数据包进行解析,无法确定出所述服务器对应的第二域名时,根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名;
根据所述第二域名和其对应的IPV4流量值,计算出各所述第二域名的IPV4流量占比;所述第二域名的IPV4流量占比为所述第二域名的IPV4流量值与总的所述第二域名的IPV4流量值的比值。
可选地,所述根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名,还包括:
当根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名为多个时,将所述IPV4地址对应的多个所述第二域名组合为一个第二域名组;
根据所述第二域名组和其对应的IPV4流量值,与所述第二域名和其对应的IPV4流量值,计算出各所述第二域名组的IPV4流量占比,和除所述第二域名组内的所述第二域名之外的各所述第二域名的IPV4流量占比。
可选地,对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址和IPV4流量值,包括:
对所述网络数据包的IP首部进行解析,确定出所述其他服务器对应的IP地址;
当所述网络数据包对应的IP地址确定为所述IPV4地址时,对所述网络数据包的传输层进行解析,得到所述网络数据包的IPV4流量值;
将所述IPV4地址对应的所述网络数据包的IPV4流量值进行叠加,得到所述IPV4地址的IPV4流量值。
可选地,所述网络数据包对应的IP地址确定为所述IPV4地址,包括:
当所述网络数据包对应的IP地址是为使用32位2进制位的地址时,将所述网络数据包对应的IP地址确定为所述IPV4地址。
可选地,对所述网络数据包进行解析,确定出所述其他服务器对应第二域名,包括:
对所述网络数据包的应用层进行解析,得到握手包;
从所述握手包中解析出所述其他服务器对应的第二域名。
本发明实施例还公开了一种流量占比统计装置,包括:
数据抓取模块,用于抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和所述客户端与其他服务器之间传输的网络数据包;其中,所述IP地址包括IPV4地址;
数据解析模块,用于对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址、第二域名和IPV4流量值;
域名确定模块,用于当对所述网络数据包进行解析,无法确定出所述服务器对应的第二域名时,根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名;
流量计算模块,用于根据所述第二域名和其对应的IPV4流量值,计算出各所述第二域名的IPV4流量占比;所述第二域名的IPV4流量占比为所述第二域名的IPV4流量值与总的所述第二域名的IPV4流量值的比值。
可选地,还包括:
域名组合模块,用于当根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名为多个时,将所述IPV4地址对应的多个所述第二域名组合为一个第二域名组;
所述流量计算模块,还用于根据所述第二域名组和其对应的IPV4流量值,与所述第二域名和其对应的IPV4流量值,计算出各所述第二域名组的IPV4流量占比,和除所述第二域名组内的所述第二域名之外的各所述第二域名的IPV4流量占比。
可选地,所述数据解析模块,包括:
IP地址解析子模块,用于对所述网络数据包的IP首部进行解析,确定出所述其他服务器对应的IP地址;
流量值解析子模块,用于当所述网络数据包对应的IP地址确定为所述IPV4地址时,对所述网络数据包的传输层进行解析,得到所述网络数据包的IPV4流量值;
流量值叠加子模块,用于将所述IPV4地址对应的所述网络数据包的IPV4流量值进行叠加,得到所述IPV4地址的IPV4流量值。
可选地,所述流量值解析子模块,包括:
地址确定单元,用于当所述网络数据包对应的IP地址是为使用32位2进制位的地址时,将所述网络数据包对应的IP地址确定为所述IPV4地址。
可选地,所述数据解析模块,包括:
第一数据解析子模块,用于对所述网络数据包的应用层进行解析,得到握手包;
第二数据解析子模块,用于从所述握手包中解析出所述其他服务器对应的第二域名。
本发明实施例还公开了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行存储器上所存放的程序时,实现如本发明实施例所述的方法。
本发明实施例还公开了一个或多个计算机存储介质,其上存储有指令,当由一个或多个处理器执行时,使得所述处理器执行如本发明实施例所述的方法。
本发明实施例还公开了一种计算机程序产品,该程序产品被存储在存储介质中,该计算机程序产品被至少一个处理器执行以实现如本发明实施例所述的方法。
本发明实施例包括以下优点:抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和客户端与其他服务器之间传输的网络数据包,对网络数据包进行解析,确定出其他服务器对应的IPV4地址、第二域名和IPV4流量值,当对网络数据包进行解析,无法确定出服务器对应的第二域名时,根据第一域名与IP地址的映射关系确定IPV4地址对应的第二域名,根据第二域名和其对应的IPV4流量值,计算出各第二域名的IPV4流量占比。本发明实施例中,通过解析网络数据包得到的IPV4地址、第二域名和IPV4流量值,与抓取到的第一域名及其映射的IP地址结合,确定出IPV4地址对应的第二域名,进而统计出各第二域名的IPV4流量占比,为IPV4优化升级到IPV6提供重要的参照数据,解决采用第三方工具的方式无法从网络数据包中分析出IPV4流量占比,导致无法为IPV4优化升级到IPV6提供出参照数据的问题。
另外,目前对于抓取到的网络数据包,存在一部分网络数据包由于损坏、异常等原因,会导致无法从网络数据包中的数据中解析出IPV4地址对应的第二域名,因此会造成该部分网络数据包无法参与IPV4流量占比的统计,出现最终统计出来的IPV4流量占比的准确性不高的问题。而本发明实施例中采用抓取到的第一域名与IP地址的映射关系,去确定出IPV4地址对应的第二域名,让损坏、异常的网络数据包能够继续参与IPV4流量占比的统计,提高最终统计出来的IPV4流量占比的准确性。
附图说明
图1是本发明实施例中提供的一种应用环境的示意图;
图2是本发明实施例中提供的一种流量占比统计方法的步骤流程图;
图3是本发明实施例中提供的一种域名和其映射的IP地址的示意图;
图4是本发明实施例中提供的一种域名及其对应的IPV4流量值的示意图;
图5是本发明实施例中提供的一种流量占比统计装置的结构框图;
图6是本发明实施例中提供的一种电子设备的框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
本发明实施例所提供的流量占比统计方法,可以应用于如图1所示的应用环境中。其中,客户端102通过网络分别与域名服务器104和其他服务器106进行通信。具体地,在客户端102与域名服务器104和其他服务器106进行通信的过程中,抓取监测到的域名服务器104响应客户端102发送的域名解析请求返回的第一域名及其映射的IP地址,和客户端102与其他服务器104之间传输的网络数据包,对网络数据包进行解析,确定出其他服务器对应的IPV4地址、第二域名和IPV4流量值,当对网络数据包进行解析,无法确定出服务器对应的第二域名时,根据第一域名与IP地址的映射关系确定IPV4地址对应的第二域名,根据第二域名和其对应的IPV4流量值,计算出各第二域名的IPV4流量占比,第二域名的IPV4流量占比为第二域名的IPV4流量值与总的第二域名的IPV4流量值的比值。
实际应用中,客户端102可以包括但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、车载终端和便携式可穿戴设备,域名服务器104和其他服务器106可以是独立运行的服务器,或者由多个服务器组成的服务器集群,其中,服务器可以是云端服务器。
参照图2,示出了本发明实施例中提供的一种流量占比统计方法的步骤流程图,具体可以包括如下步骤:
步骤202:抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和所述客户端与其他服务器之间传输的网络数据包。
其中,域名服务器为域名系统(DNS,Domain Name System)服务器,是因特网的一项基础核心服务,它可以将域名和IP地址之间相互对应起来,这种将域名转换成IP地址的过程就是域名解析;在互联网的应用中,域名和IP地址是不可缺少的,因为人们访问网站必须要通过网站IP地址来查找登录,因此需要使用域名服务器查找域名对应的IP地址。
域名解析请求中包括域名,可以由客户端根据预先设置的域名服务器列表,向列表中指定的多个域名服务器异步并发发送域名解析请求;
服务器位于网络的远端,用于为客户端提供计算或者应用服务,本发明实施例中服务器包括域名服务器和其他服务器;
IP地址包括IPV4地址和IPV6地址,在互联网中,需要知道客户端与其他服务器的IP地址,才能实现客户端和其他服务器的通信;
网络数据包:流经网络的一切都可以被归类为网络数据包中所包含数据的一部分。一个网络数据包可以被称为一个数据单元(约1KBS至1.5KBS),在互联网或分组交换网络内从原点流向目标地址(从发送方到接收方)。
在实际应用中,对客户端与服务器(域名服务器和其他服务器)之间的通信进行监测。
当客户端通过第一域名访问其他服务器时,需要知道其他服务器对应的IP地址,因此,客户端将包含第一域名的域名解析请求发送给域名服务器,域名服务器响应该域名解析请求,会将第一域名对应的IP地址返回给客户端,因此,在监测到域名服务器返回给客户端的第一域名及其映射的IP地址时,对该第一域名及其映射的IP地址数据进行抓取,并记录。参照图3,示出了本发明实施例中提供的一种域名和其映射的IP地址的示意图,图中为抓取到的第一域名HostName,以及第一域名对应的IP地址address。
当客户端获取到第一域名对应的IP地址之后,向该IP地址对应的其他服务器发送网络请求(网络数据包),其他服务器响应该网络请求会向客户端返回对应的数据(网络数据包),因此,在监测到客户端与其他服务器之间传输网络数据包时,对该网络数据包进行抓取,并缓存在本地。
需要说明的是,为了不影响网络数据的正常传输,抓取的是网络数据包的镜像数据。
步骤204:对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址、第二域名和IPV4流量值。
其中,IPV4流量值是指通过IPV4地址传输的流量值。
在实际应用中,在抓取到网络数据包之后,可以通过网络数据包使用的通信协议解析该网络数据包。例如,若网络数据包所使用的通信协议为HTTP协议,则基于HTTP协议解析网络数据包。解析该网络数据包之后,可以确定出IP地址为IPV4地址对应的网络数据包,并得到该网络数据包对应的第二域名和IPV4流量值(网络数据包的大小)。
步骤206:当对所述网络数据包进行解析,无法确定出所述服务器对应的第二域名时,根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名。
在实际应用中,对于抓取到的网络数据包,存在一部分网络数据包由于损坏、异常等原因,会导致无法从网络数据包中的数据中解析出IPV4地址对应的第二域名,因此,采用步骤202中抓取的第一域名与IP地址的映射关系去确定该网络数据包的IPV4地址对应的第二域名,避免该网络数据包无法参与域名的IPV4流量占比的统计。
目前对于抓取到的网络数据包,存在一部分网络数据包由于损坏、异常等原因,会导致无法从网络数据包中的数据中解析出IPV4地址对应的第二域名,因此会造成该部分网络数据包无法参与IPV4流量占比的统计,出现最终统计出来的IPV4流量占比的准确性不高的问题。而本发明实施例中采用抓取到的第一域名与IP地址的映射关系,去确定出IPV4地址对应的第二域名,让损坏、异常的网络数据包能够继续参与IPV4流量占比的统计,提高最终统计出来的IPV4流量占比的准确性。
步骤208:根据所述第二域名和其对应的IPV4流量值,计算出各所述第二域名的IPV4流量占比。
其中,第二域名的IPV4流量占比为第二域名的IPV4流量值与总的第二域名的IPV4流量值的比值。
在实际应用中,在确定出每一个IPV4地址对应的网络数据包的IPV4流量值和第二域名之后,可以将同一个第二域名对应的一个或多个网络数据包的IPV4流量值进行叠加,可以得到每一个第二域名的IPV4流量值,参照图4,示出了本发明实施例中提供的一种域名及其对应的IPV4流量值的示意图,图中示出了采用IPV4的第二域名和对应的IPV4流量值,如第二域名static.yximgs.com,其对应的IPV4流量值为22.27092361Mb。
进一步,可以确定出每一个第二域名的IPV4流量值与所有的第二域名的IPV4流量值比值,即为每一个第二域名的IPV4流量占比。作为示例,当存在第二域名A、第二域名B和第二域名C使用IPV4,且第二域名A的IPV4流量值为200Mb,第二域名B的IPV4流量值为300Mb,第二域名C的IPV4流量值为500Mb时,那么总的IPV4流量值为1000Mb,第二域名A的流量占比为0.2,第二域名B的流量占比为0.3,第二域名C的流量占比为0.5。
上述实施例中,抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和客户端与其他服务器之间传输的网络数据包,对网络数据包进行解析,确定出其他服务器对应的IPV4地址、第二域名和IPV4流量值,当对网络数据包进行解析,无法确定出服务器对应的第二域名时,根据第一域名与IP地址的映射关系确定IPV4地址对应的第二域名,根据第二域名和其对应的IPV4流量值,计算出各第二域名的IPV4流量占比。本发明实施例中,通过解析网络数据包得到的IPV4地址、第二域名和IPV4流量值,与抓取到的第一域名及其映射的IP地址结合,确定出IPV4地址对应的第二域名,进而统计出各第二域名的IPV4流量占比,为IPV4优化升级到IPV6提供重要的参照数据,解决采用第三方工具的方式无法从网络数据包中分析出IPV4流量占比,导致无法为IPV4优化升级到IPV6提供出参照数据的问题。
另外,目前对于抓取到的网络数据包,存在一部分网络数据包由于损坏、异常等原因,会导致无法从网络数据包中的数据中解析出IPV4地址对应的第二域名,因此会造成该部分网络数据包无法参与IPV4流量占比的统计,出现最终统计出来的IPV4流量占比的准确性不高的问题。而本发明实施例中采用抓取到的第一域名与IP地址的映射关系,去确定出IPV4地址对应的第二域名,让损坏、异常的网络数据包能够继续参与IPV4流量占比的统计,提高最终统计出来的IPV4流量占比的准确性。
在上述实施例的基础上,提出了上述实施例的变型实施例,在此需要说明的是,为了使描述简要,在变型实施例中仅描述与上述实施例的不同之处。
在一示例性实施例中,所述根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名,还包括:当根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名为多个时,将所述IPV4地址对应的多个所述第二域名组合为一个第二域名组;根据所述第二域名组和其对应的IPV4流量值,与所述第二域名和其对应的IPV4流量值,计算出各所述第二域名组的IPV4流量占比,和除所述第二域名组内的所述第二域名之外的各所述第二域名的IPV4流量占比。
在实际应用中,当根据第一域名与IP地址的映射关系确定IPV4地址对应的第二域名时,存在一个IPV4地址对应多个第二域名的情况,此时可以将IPV4地址对应多个第二域名组合为一个第二域名组,将该第二域名组以一个第二域名的形式去计算IPV4流量占比,从而根据第二域名组和其对应的IPV4流量值,与第二域名和其对应的IPV4流量值,计算出各第二域名组的IPV4流量占比,和除第二域名组内的第二域名之外的各第二域名的IPV4流量占比。
作为示例,当采用第一域名与IP地址的映射关系确定IPV4地址同时对应第二域名A和第二域名B,因此将该第二域名A和第二域名B组合为第二域名组,第二域名组的IPV4流量值为该IPV4地址对应的IPV4流量值如400Mb,还存在第二域名C、第二域名D和第二域名E采用IPV4,且第二域名C的IPV4流量值为300Mb、第二域名D的IPV4流量值为200Mb、第二域名E的IPV4流量值为100Mb,那么总的IPV4流量值为1000Mb,此时,第二域名组的IPV4流量占比为0.4,第二域名C的IPV4流量比为0.3,第二域名D的IPV4流量占比为0.2,第二域名E的IPV4流量占比为0.1。
上述实施例中,通过将同一IPV4地址对应多个第二域名组合为一个第二域名组,并以该第二域名组去参与IPV4流量占比的统计,从而统计出各第二域名的流量占比,为IPV4优化升级到IPV6提供重要的参照数据。
在一示例性实施例中,对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址和IPV4流量值,包括:对所述网络数据包的IP首部进行解析,确定出所述其他服务器对应的IP地址;当所述网络数据包对应的IP地址确定为所述IPV4地址时,对所述网络数据包的传输层进行解析,得到所述网络数据包的IPV4流量值;将所述IPV4地址对应的所述网络数据包的IPV4流量值进行叠加,得到所述IPV4地址的IPV4流量值。
其中,网络数据包可以分为多层(应用层、传输层、网络层和数据链路层),每一层的数据是由上一层的数据+本层首部信息组成,因此可以通过对网络数据包中对应的部位解析出想要的数据。
在实际应用中,可以从网络数据包的网络层的IP首部解析出客户端的IP地址和其他服务器的IP地址,当确定其他服务器的IP地址为IPV4地址时,对该网络数据包的传输层进行解析,得到网络数据包的IPV4流量值(网络数据包传输的数据的大小,如IPV4流量值=网络数据包大小-IP首部大小-TCP首部大小/UDP首部大小),由于一个网络数据包传输的数据的值固定,所以通常数据比较大的文件是通过多个网络数据包进行传输,因此IPV4地址往往对应多个网络数据包,通过将IPV4地址对应的网络数据包的IPV4流量值进行叠加,得到IPV4地址的IPV4流量值。
在一示例性实施例中,所述网络数据包对应的IP地址确定为所述IPV4地址,包括:当所述网络数据包对应的IP地址是为使用32位2进制位的地址时,将所述网络数据包对应的IP地址确定为所述IPV4地址。
在实际应用中,IPV4地址为使用32位二进制位的地址,IPV6地址是使用128位二进制位的地址,因此,当网络数据包对应的IP地址是为使用32位二进制位的地址时,将该网络数据包对应的IP地址确定为IPV4地址,当网络数据包对应的IP地址是为使用128位2进制位的地址时,将该网络数据包对应的IP地址确定为IPV6地址。
在一示例性实施例中,对所述网络数据包进行解析,确定出所述其他服务器对应第二域名,包括:对所述网络数据包的应用层进行解析,得到握手包;从所述握手包中解析出所述其他服务器对应的第二域名。
在实际应用中,网络数据包的应用层进行解析,从应用层筛选出SSL层协议类型为“client hel1o”的握手包,在解析出握手包后,则检查上述握手包中是否包括SNI扩展字段,若存在,则从握手包中解析出其他服务器的IPV4地址对应的第二域名。若无法从应用层筛选出SSL层协议类型为“client hel1o”的握手包,或者无法从握手包中解析出其他服务器的IPV4地址对应的第二域名,则采用步骤202中抓取的第一域名与IP地址的映射关系去确定该网络数据包的IPV4地址对应的第二域名,避免该网络数据包无法参与域名的IPV4流量占比的统计。
上述实施例,可以从网络数据包中的握手包解析出其他服务器对应的第二域名,即可以确定出第二域名对应的IPV4流量值,从而根据第二域名对应的IPV4流量值统计出各第二域名的IPV4流量占比,为IPV4优化升级到IPV6提供重要的参照数据。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图5,示出了本发明实施例中提供的一种流量占比统计装置500的结构框图,具体可以包括如下模块:
数据抓取模块502,用于抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和所述客户端与其他服务器之间传输的网络数据包;其中,所述IP地址包括IPV4地址;
数据解析模块504,用于对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址、第二域名和IPV4流量值;
域名确定模块506,用于当对所述网络数据包进行解析,无法确定出所述服务器对应的第二域名时,根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名;
流量计算模块508,用于根据所述第二域名和其对应的IPV4流量值,计算出各所述第二域名的IPV4流量占比;所述第二域名的IPV4流量占比为所述第二域名的IPV4流量值与总的所述第二域名的IPV4流量值的比值。
可选地,还包括:
域名组合模块,用于当根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名为多个时,将所述IPV4地址对应的多个所述第二域名组合为一个第二域名组;
所述流量计算模块,还用于根据所述第二域名组和其对应的IPV4流量值,与所述第二域名和其对应的IPV4流量值,计算出各所述第二域名组的IPV4流量占比,和除所述第二域名组内的所述第二域名之外的各所述第二域名的IPV4流量占比。
可选地,所述数据解析模块,包括:
IP地址解析子模块,用于对所述网络数据包的IP首部进行解析,确定出所述其他服务器对应的IP地址;
流量值解析子模块,用于当所述网络数据包对应的IP地址确定为所述IPV4地址时,对所述网络数据包的传输层进行解析,得到所述网络数据包的IPV4流量值;
流量值叠加子模块,用于将所述IPV4地址对应的所述网络数据包的IPV4流量值进行叠加,得到所述IPV4地址的IPV4流量值。
可选地,所述流量值解析子模块,包括:
地址确定单元,用于当所述网络数据包对应的IP地址是为使用32位2进制位的地址时,将所述网络数据包对应的IP地址确定为所述IPV4地址。
可选地,所述数据解析模块,包括:
第一数据解析子模块,用于对所述网络数据包的应用层进行解析,得到握手包;
第二数据解析子模块,用于从所述握手包中解析出所述其他服务器对应的第二域名。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
另外,本发明实施例还提供了一种电子设备,包括:处理器,存储器,存储在存储器上并可在处理器上运行的计算机程序,该计算机程序被处理器执行时实现上述数据获取方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现上述数据获取方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
图6为实现本发明各个实施例的一种电子设备的硬件结构示意图。
该电子设备600包括但不限于:射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、处理器610、以及电源611等部件。本领域技术人员可以理解,图6中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
应理解的是,本发明实施例中,射频单元601可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器610处理;另外,将上行的数据发送给基站。通常,射频单元601包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元601还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块602为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元603可以将射频单元601或网络模块602接收的或者在存储器609中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元603还可以提供与电子设备600执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元603包括扬声器、蜂鸣器以及受话器等。
输入单元604用于接收音频或视频信号。输入单元604可以包括图形处理器(Graphics Processing Unit,GPU)6041和麦克风6042,图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元606上。经图形处理器6041处理后的图像帧可以存储在存储器609(或其它存储介质)中或者经由射频单元601或网络模块602进行发送。麦克风6042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元601发送到移动通信基站的格式输出。
电子设备600还包括至少一种传感器605,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板6061的亮度,接近传感器可在电子设备600移动到耳边时,关闭显示面板6061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器605还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元606用于显示由用户输入的信息或提供给用户的信息。显示单元606可包括显示面板6061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板6061。
用户输入单元607可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元606包括触控面板6071以及其他输入设备6072。触控面板6071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板6071上或在触控面板6071附近的操作)。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器610,接收处理器610发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板6071。除了触控面板6071,用户输入单元607还可以包括其他输入设备6072。具体地,其他输入设备6062可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板6071可覆盖在显示面板6061上,当触控面板6071检测到在其上或附近的触摸操作后,传送给处理器610以确定触摸事件的类型,随后处理器610根据触摸事件的类型在显示面板6061上提供相应的视觉输出。虽然在图6中,触控面板6071与显示面板6061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板6071与显示面板6061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元608为外部装置与电子设备600连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元608可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备600内的一个或多个元件或者可以用于在电子设备600和外部装置之间传输数据。
存储器609可用于存储软件程序以及各种数据。存储器609可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器609可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器610是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器609内的软件程序和/或模块,以及调用存储在存储器609内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器610可包括一个或多个处理单元;优选的,处理器610可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器610中。
电子设备600还可以包括给各个部件供电的电源611(比如电池),优选的,电源611可以通过电源管理系统与处理器610逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,电子设备600包括一些未示出的功能模块,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
本领域普通技术人员可以意识到,结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其他其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种流量占比统计方法,其特征在于,包括:
抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和所述客户端与其他服务器之间传输的网络数据包;其中,所述IP地址包括IPV4地址;
对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址、第二域名和IPV4流量值;
当对所述网络数据包进行解析,无法确定出所述服务器对应的第二域名时,根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名;
根据所述第二域名和其对应的IPV4流量值,计算出各所述第二域名的IPV4流量占比;所述第二域名的IPV4流量占比为所述第二域名的IPV4流量值与总的所述第二域名的IPV4流量值的比值。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名,还包括:
当根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名为多个时,将所述IPV4地址对应的多个所述第二域名组合为一个第二域名组;
根据所述第二域名组和其对应的IPV4流量值,与所述第二域名和其对应的IPV4流量值,计算出各所述第二域名组的IPV4流量占比,和除所述第二域名组内的所述第二域名之外的各所述第二域名的IPV4流量占比。
3.根据权利要求1所述的方法,其特征在于,对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址和IPV4流量值,包括:
对所述网络数据包的IP首部进行解析,确定出所述其他服务器对应的IP地址;
当所述网络数据包对应的IP地址确定为所述IPV4地址时,对所述网络数据包的传输层进行解析,得到所述网络数据包的IPV4流量值;
将所述IPV4地址对应的所述网络数据包的IPV4流量值进行叠加,得到所述IPV4地址的IPV4流量值。
4.根据权利要求3所述的方法,其特征在于,所述网络数据包对应的IP地址确定为所述IPV4地址,包括:
当所述网络数据包对应的IP地址是为使用32位2进制位的地址时,将所述网络数据包对应的IP地址确定为所述IPV4地址。
5.根据权利要求1所述的方法,其特征在于,对所述网络数据包进行解析,确定出所述其他服务器对应第二域名,包括:
对所述网络数据包的应用层进行解析,得到握手包;
从所述握手包中解析出所述其他服务器对应的第二域名。
6.一种流量占比统计装置,其特征在于,包括:
数据抓取模块,用于抓取监测到的域名服务器响应客户端发送的域名解析请求返回的第一域名及其映射的IP地址,和所述客户端与其他服务器之间传输的网络数据包;其中,所述IP地址包括IPV4地址;
数据解析模块,用于对所述网络数据包进行解析,确定出所述其他服务器对应的IPV4地址、第二域名和IPV4流量值;
域名确定模块,用于当对所述网络数据包进行解析,无法确定出所述服务器对应的第二域名时,根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名;
流量计算模块,用于根据所述第二域名和其对应的IPV4流量值,计算出各所述第二域名的IPV4流量占比;所述第二域名的IPV4流量占比为所述第二域名的IPV4流量值与总的所述第二域名的IPV4流量值的比值。
7.根据权利要求6所述的装置,其特征在于,还包括:
域名组合模块,用于当根据所述第一域名与所述IP地址的映射关系确定所述IPV4地址对应的第二域名为多个时,将所述IPV4地址对应的多个所述第二域名组合为一个第二域名组;
所述流量计算模块,还用于根据所述第二域名组和其对应的IPV4流量值,与所述第二域名和其对应的IPV4流量值,计算出各所述第二域名组的IPV4流量占比,和除所述第二域名组内的所述第二域名之外的各所述第二域名的IPV4流量占比。
8.根据权利要求6所述的装置,其特征在于,所述数据解析模块,包括:
IP地址解析子模块,用于对所述网络数据包的IP首部进行解析,确定出所述其他服务器对应的IP地址;
流量值解析子模块,用于当所述网络数据包对应的IP地址确定为所述IPV4地址时,对所述网络数据包的传输层进行解析,得到所述网络数据包的IPV4流量值;
流量值叠加子模块,用于将所述IPV4地址对应的所述网络数据包的IPV4流量值进行叠加,得到所述IPV4地址的IPV4流量值。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行存储器上所存放的程序时,实现如权利要求1至5任一项所述的方法。
10.一个或多个计算机存储介质,其上存储有指令,当由一个或多个处理器执行时,使得所述处理器执行如权利要求1至5任一项所述的方法。
CN202211565463.3A 2022-12-07 2022-12-07 流量占比统计方法、装置、电子设备及存储介质 Pending CN116094963A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211565463.3A CN116094963A (zh) 2022-12-07 2022-12-07 流量占比统计方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211565463.3A CN116094963A (zh) 2022-12-07 2022-12-07 流量占比统计方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN116094963A true CN116094963A (zh) 2023-05-09

Family

ID=86200102

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211565463.3A Pending CN116094963A (zh) 2022-12-07 2022-12-07 流量占比统计方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN116094963A (zh)

Similar Documents

Publication Publication Date Title
WO2020134790A1 (zh) 一种数据异常检测方法、装置及终端设备
CN109905380B (zh) 一种分布式系统中的节点控制方法和相关装置
CN109462668B (zh) 一种处理域名解析请求的方法和装置
CN109995862B (zh) 一种资源调度方法及终端
CN111444237A (zh) 服务器系统、数据传输方法及电子设备
CN106203228A (zh) 二维码信息传输方法、装置以及设备
CN107743149B (zh) 网络接入方法、装置及终端
CN111615198A (zh) 资源确定方法、资源指示方法、终端及网络侧设备
CN111107223B (zh) 一种消息处理方法及电子设备
CN111556178A (zh) 一种解析系统、方法、设备及存储介质
CN110489657B (zh) 一种信息过滤方法、装置、终端设备及存储介质
CN117008546A (zh) 设备数据的监测方法、装置、电子设备及存储介质
CN109889613B (zh) 一种消息推送方法、装置和移动终端
CN109889568B (zh) 一种数据导出方法、服务器及系统
CN115333928B (zh) 网络预警方法、装置、电子设备及存储介质
CN117527804A (zh) 一种网络请求信息转发方法和装置
CN116094963A (zh) 流量占比统计方法、装置、电子设备及存储介质
CN112416927B (zh) 一种数据处理方法、装置、电子设备及存储介质
CN111045588B (zh) 一种信息查看方法及电子设备
CN108449259B (zh) 一种通信处理方法及移动终端
CN112398704B (zh) 虚拟网络时延计算方法和终端设备
CN114095585B (zh) 数据传输方法、装置、存储介质及电子设备
CN108494753B (zh) 一种数据共享方法及移动终端
CN111314319B (zh) 数据处理方法、电子设备及服务器
CN110336925B (zh) 电话呼入处理方法和终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination