CN1249957C - 用户网络使用数据的采集方法 - Google Patents

用户网络使用数据的采集方法 Download PDF

Info

Publication number
CN1249957C
CN1249957C CNB021483132A CN02148313A CN1249957C CN 1249957 C CN1249957 C CN 1249957C CN B021483132 A CNB021483132 A CN B021483132A CN 02148313 A CN02148313 A CN 02148313A CN 1249957 C CN1249957 C CN 1249957C
Authority
CN
China
Prior art keywords
network
user
information
aaa server
address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB021483132A
Other languages
English (en)
Other versions
CN1494268A (zh
Inventor
韦晓山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CNB021483132A priority Critical patent/CN1249957C/zh
Priority to AU2003255113A priority patent/AU2003255113A1/en
Priority to GB0509082A priority patent/GB2411542B/en
Priority to US10/533,276 priority patent/US20060155866A1/en
Priority to JP2004547347A priority patent/JP2006505161A/ja
Priority to PCT/CN2003/000670 priority patent/WO2004040842A1/zh
Publication of CN1494268A publication Critical patent/CN1494268A/zh
Application granted granted Critical
Publication of CN1249957C publication Critical patent/CN1249957C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks

Abstract

本发明涉及一种用户网络使用数据的采集方法，属计算机网络技术领域。首先，网络中的接入设备对用户进行认证授权，AAA服务器记录用户的经认证授权的网络资源信息；在上网过程中，路由器记录网络使用信息，并以UDP的形式将网络使用信息发送给NSC；NSC对采集的网络使用信息作聚合处理；关联分析服务器将聚合处理后的网络使用信息与AAA服务器上传的用户网络资源信息作实时关联分析，获得用户对网络的详细使用数据。本发明方法采集的网络使用信息详尽，内涵十分紧凑，最终生成的网络使用数据直接定位到用户，能满足内容计费、目的IP计费、实时计费、网络监控、用户行为分析等多种应用的数据需求。

Description

用户网络使用数据的采集方法
技术领域
本发明涉及一种用户网络使用数据的采集方法，属计算机网络技术领域。
背景技术
随着因特网的不断发展，企业网、因特网服务供应商(以下简称ISP)以及宽带上网用户的数量正迅猛增长，网络服务的种类也越来越丰富，用户对网络的使用形式日渐多样化。在这种情况下，网络服务的经营和管理者希望及时了解用户对网络资源的详细使用情况，以便在此基础上实施更灵活的计费方式，合理规划并有效地管理和监控网络资源。
如何高效、准确、实时地获取用户对网络的使用数据，目前较为常用的解决方法是配置监测服务器，由监测服务器采集通过路由器转发的网际协议(以下简称IP)报文中与地址、端口、流量等相关的数据，在此数据的基础上进行统计、分析后获取用户网络使用数据。其流程如图1所示。
使用监测服务器的方法虽然能获取较为详细的网络使用数据，但存在以下几方面的不足：
1、该方法需要额外配置高性能的服务器，由于采集的数据量十分庞大，因此需要海量存储设备的支持，增加了组网成本。
2、该方法采集的数据只有IP地址、端口号等网络资源占用数据，但无法确定对网络资源的占用是哪一个用户产生的，需要进一步的处理才能用于内容计费等应用。
3、该方法的实时性较差，无法满足实时计费、实时监控等实时性较强的应用。
发明内容
本发明的目的是提出一种用户网络使用数据的采集方法，利用网流(NetStream)技术和远程认证拨号用户服务协议(以下简称Radius)的关联，实现对用户网络使用数据的高效、实时采集，为实施基于网络使用的管理和计费提供基础数据。
本发明提出的用户网络使用数据的采集方法，包括以下各步骤：
1、接入设备对用户进行认证授权，认证授权计费服务器(以下简称AAA服务器)记录用户的经认证授权的网络资源信息；
2、在上网过程中，路由器记录网络使用信息，并以用户数据报协议报文(以下简称UDP)的形式将网络使用信息发送给网流采集器(以下简称NSC)；
3、NSC对采集的网络使用信息作聚合处理；
4、关联分析服务器将聚合处理后的网络使用信息与AAA服务器上传的用户网络资源信息作实时关联分析，获得用户对网络的详细使用数据。
上述方法中的接入设备为局域网交换机、接入服务器或IP电话网关中的任何一种。
上述方法的步骤(1)中，接入设备对用户进行认证授权、AAA服务器记录用户的网络资源信息的过程包括如下步骤：
1、接入设备将用户的认证授权数据发送至AAA服务器；
2、AAA服务器分析并记录用户的认证授权数据，并将对用户上网权限的控制信息发送给上述接入设备；
3、接入设备为用户分配资源，并将用户的网络资源信息发送给AAA服务器，AAA服务器记录上述用户的网络资源信息；
4、AAA服务器将上述用户的网络资源信息实时传递给关联分析服务器。
其中，接人设备为用户分配的资源为：IP地址和上网起始时间，也可以同时分配带宽。AAA服务器记录的用户网络资源信息为用户帐号、上网起始时间、IP地址、上网位置和业务属性。
上述方法的步骤(2)中，路由器记录的网络使用信息为源IP地址、目的IP地址、源端口号、目的端口号、字节数和时间戳。
上述方法的步骤(4)中的关联分析为：将用户网络资源信息中的IP地址、上网起始时间与网络使用信息中的IP地址、时间戳相匹配，以确定与网络使用信息相对应的用户。
本发明提出的用户网络使用数据的采集方法，其优点是不会对用户的网络使用造成任何影响，同时由于网流的先进设计，不仅不会降低IP报文的转发速率，在特定情形下还会加快转发速率。本方法通过聚合、关联与分析，将原本孤立的网络使用信息与AAA服务器上传的用户网络资源信息有机地结合起来，可以实时采集用户对网络资源的占用信息，精确地记录用户在某个时间段内访问了哪个网站(IP地址)，何种服务(端口号)，以及时长、流量等。而且本方法采集的网络使用信息详尽，数据经过聚合，内涵十分紧凑，不会占用庞大的存储资源。该方法最终生成的网络使用数据可以直接定位到用户，能满足内容计费、目的IP计费、实时计费、网络监控、用户行为分析等多种应用的数据需求。此外，该方案的实时性较好，能满足大多数应用的实时性要求。
附图说明
图1是目前常用的网络使用信息采集组网图；
图2是本方法的用户网络使用信息采集组网图。
具体实施方式
本发明采用如图2所示的组网方案，首先接入设备对用户进行认证授权，AAA服务器记录用户的经认证授权的网络资源信息；在上网过程中，路由器记录网络使用信息，并以UDP的形式将网络使用信息发送给NSC；NSC对采集的网络使用信息作聚合处理；关联分析服务器将聚合处理后的网络使用信息与AAA服务器上传的用户网络资源信息作实时关联分析，获得用户对网络的详细使用数据。
上述方法中的接人设备可以为局域网交换机、接入服务器或IP电话网关中的任何一种。
上述方法中，接入设备对用户进行认证授权、AAA服务器记录用户的网络资源信息的过程为：首先接入设备将用户的认证授权数据发送至AAA服务器；AAA服务器分析并记录用户的认证授权数据，并将对用户上网权限的控制信息发送给上述接入设备；接人设备为用户分配资源，并将用户的网络资源信息发送给AAA服务器，AAA服务器记录上述用户的网络资源信息；AAA服务器将上述用户的网络资源信息实时传递给关联分析服务器。其中，接入设备为用户分配的资源为：IP地址和上网起始时间，也可以同时分配带宽。AAA服务器记录的用户网络资源信息为用户帐号、上网起始时间、IP地址、上网位置和业务属性。
上述方法中，路由器记录的网络使用信息为源IP地址、目的IP地址、源端口号、目的端口号、字节数和时间戳。
上述方法中的关联分析包括：将用户网络资源信息中的IP地址、上网起始时间与网络使用信息中的IP地址、时间戳相匹配，以确定与网络使用信息相对应的用户。

Claims (8)

1、一种用户网络使用数据的采集方法，其特征在于该方法包括以下各步骤：
(1)接入设备对用户进行认证授权，认证授权计费服务器AAA服务器记录用户的经认证授权的网络资源信息；
(2)在上网过程中，路由器记录网络使用信息，并以用户数据报协议报文的形式将网络使用信息发送给网流采集器NSC；
(3)NSC对采集的网络使用信息作聚合处理；
(4)关联分析服务器将聚合处理后的网络使用信息与AAA服务器上传的用户网络资源信息作实时关联分析，获得用户对网络的详细使用数据。
2、如权利要求1所述的方法，其特征在于步骤(1)中的接入设备为局域网交换机、接入服务器或IP电话网关中的任何一种。
3、如权利要求1所述的方法，其特征在于步骤(1)中接入设备对用户进行认证授权、AAA服务器记录用户的网络资源信息的过程包括如下步骤：
(1.1)接入设备将用户的认证授权数据发送至AAA服务器；
(1.2)AAA服务器分析并记录用户的认证授权数据，并将对用户上网权限的控制信息发送给上述接入设备；
(1.3)接入设备为用户分配资源，并将用户的网络资源信息发送给AAA服务器，AAA服务器记录上述用户的网络资源信息；
(1.4)AAA服务器将上述用户的网络资源信息实时传递给关联分析服务器。
4、如权利要求3所述的方法，其特征在于步骤(1.3)中，接入设备为用户分配的资源为：IP地址和上网起始时间。
5、如权利要求3所述的方法，其特征在于步骤(1.3)中，接入设备为用户分配的资源为IP地址、上网起始时间和带宽。
6、如权利要求3所述的方法，其特征在于步骤(1.3)中，AAA服务器记录的用户的网络资源信息为用户帐号、上网起始时间、IP地址、上网位置和业务属性。
7、如权利要求1所述的方法，其特征在于步骤(2)中，路由器记录的网络使用信息为源IP地址、目的IP地址、源端口号、目的端口号、字节数和时间戳。
8、如权利要求1所述的方法，其特征在于步骤(4)中的关联分析包括：将用户网络资源信息中的IP地址、上网起始时间与网络使用信息中的IP地址、时间戳相匹配，确定与网络使用信息相对应的用户。
CNB021483132A 2002-10-31 2002-10-31 用户网络使用数据的采集方法 Expired - Fee Related CN1249957C (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CNB021483132A CN1249957C (zh) 2002-10-31 2002-10-31 用户网络使用数据的采集方法
AU2003255113A AU2003255113A1 (en) 2002-10-31 2003-08-13 Method of data gathering of a user network
GB0509082A GB2411542B (en) 2002-10-31 2003-08-13 Method of data gathering of a user network
US10/533,276 US20060155866A1 (en) 2002-10-31 2003-08-13 Method of data gathering of user network
JP2004547347A JP2006505161A (ja) 2002-10-31 2003-08-13 ユーザのネットワーク使用データを収集するための方法
PCT/CN2003/000670 WO2004040842A1 (fr) 2002-10-31 2003-08-13 Procede de collecte de donnes d'un reseau utilisateur

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB021483132A CN1249957C (zh) 2002-10-31 2002-10-31 用户网络使用数据的采集方法

Publications (2)

Publication Number Publication Date
CN1494268A CN1494268A (zh) 2004-05-05
CN1249957C true CN1249957C (zh) 2006-04-05

Family

ID=32182024

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB021483132A Expired - Fee Related CN1249957C (zh) 2002-10-31 2002-10-31 用户网络使用数据的采集方法

Country Status (6)

Country Link
US (1) US20060155866A1 (zh)
JP (1) JP2006505161A (zh)
CN (1) CN1249957C (zh)
AU (1) AU2003255113A1 (zh)
GB (1) GB2411542B (zh)
WO (1) WO2004040842A1 (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9584522B2 (en) 2004-02-26 2017-02-28 Vmware, Inc. Monitoring network traffic by using event log information
FI20050853A0 (fi) 2005-08-25 2005-08-25 Nokia Corp Käyttäjädatan hallinta
US7536417B2 (en) 2006-05-24 2009-05-19 Microsoft Corporation Real-time analysis of web browsing behavior
CN100456743C (zh) * 2006-06-20 2009-01-28 中国移动通信集团公司 移动流媒体的计时方法
JP2008090504A (ja) * 2006-09-29 2008-04-17 Oki Electric Ind Co Ltd コンピュータ保守支援システム及び解析サーバ
WO2008043311A1 (fr) * 2006-09-30 2008-04-17 Huawei Technologies Co., Ltd. Procédé, appareil et système de contrôle d'une licence de ressources
US20080120696A1 (en) * 2006-11-21 2008-05-22 Aditya Desaraju Method and Product for Generating Network and Server Analytics
WO2010081222A1 (en) * 2009-01-16 2010-07-22 Neuralitic Systems A method and system for subscriber base monitoring in ip data networks
WO2011079385A1 (en) * 2009-12-30 2011-07-07 Neuralitic Systems A method and system for subscriber journey analytics
CN102457893A (zh) * 2010-10-26 2012-05-16 中国移动通信集团公司 一种数据处理方法和设备
US9059919B1 (en) * 2011-03-28 2015-06-16 Symantec Corporation Systems and methods for preserving network settings for use in a pre-boot environment
US9218417B2 (en) 2011-11-02 2015-12-22 Microsoft Technology Licensing, Llc Ad-hoc queries integrating usage analytics with search results
US9466065B2 (en) * 2011-11-02 2016-10-11 Microsoft Technology Licensing, Llc Integrating usage information with operation of a system
US10402299B2 (en) 2011-11-02 2019-09-03 Microsoft Technology Licensing, Llc Configuring usage events that affect analytics of usage information
CN103888305A (zh) * 2012-12-19 2014-06-25 中国电信股份有限公司 一种基于家庭网关的监测方法和系统
CN103546335A (zh) * 2013-09-16 2014-01-29 紫光股份有限公司 一种网络流量的预测方法及其装置
CN103745383A (zh) * 2013-12-27 2014-04-23 北京集奥聚合科技有限公司 基于运营商数据实现重定向服务的方法和系统
CN104640128B (zh) * 2014-12-30 2018-03-20 奇点新源国际技术开发(北京)有限公司 数据采集方法及装置
CN105282050B (zh) * 2015-10-28 2018-11-16 北京华为数字技术有限公司 聚合数据流的方法和装置
CN106802790B (zh) * 2015-11-26 2020-07-24 华为技术有限公司 基于云平台的应用用户使用信息管理的方法、设备及系统
EP3334115B1 (en) 2016-12-07 2019-10-09 Swisscom AG User authentication based on token
US10547614B2 (en) * 2017-03-30 2020-01-28 Juniper Networks, Inc. Bulk delivery of change of authorization data via AAA protocols

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7496670B1 (en) * 1997-11-20 2009-02-24 Amdocs (Israel) Ltd. Digital asset monitoring system and method
WO1999027556A2 (en) * 1997-11-20 1999-06-03 Xacct Technologies, Inc. Network accounting and billing system and method
US6311275B1 (en) * 1998-08-03 2001-10-30 Cisco Technology, Inc. Method for providing single step log-on access to a differentiated computer network
US6119160A (en) * 1998-10-13 2000-09-12 Cisco Technology, Inc. Multiple-level internet protocol accounting
US7092696B1 (en) * 1998-10-13 2006-08-15 Nortel Networks Limited Accounting method and apparatus for communications network
US6308209B1 (en) * 1998-10-22 2001-10-23 Electronic Data Systems Corporation Method and system for measuring usage of a computer network by a network user
US6427170B1 (en) * 1998-12-08 2002-07-30 Cisco Technology, Inc. Integrated IP address management
US6405251B1 (en) * 1999-03-25 2002-06-11 Nortel Networks Limited Enhancement of network accounting records
US6625657B1 (en) * 1999-03-25 2003-09-23 Nortel Networks Limited System for requesting missing network accounting records if there is a break in sequence numbers while the records are transmitting from a source device
US6751663B1 (en) * 1999-03-25 2004-06-15 Nortel Networks Limited System wide flow aggregation process for aggregating network activity records
US6546420B1 (en) * 1999-03-31 2003-04-08 Cisco Technology, Inc. Aggregating information about network message flows
US6836797B2 (en) * 1999-11-18 2004-12-28 Xacct Technologies, Ltd. System, method and computer program product for network record synthesis
JP3584838B2 (ja) * 2000-02-22 2004-11-04 日本電気株式会社 パケット監視システム、パケット監視方法及びそのプログラムを記録した記録媒体
US6813645B1 (en) * 2000-05-24 2004-11-02 Hewlett-Packard Development Company, L.P. System and method for determining a customer associated with a range of IP addresses by employing a configurable rule engine with IP address range matching
US7505451B2 (en) * 2000-10-05 2009-03-17 Sony Corporation Usage-based charging device and usage-based charging method
US20020099806A1 (en) * 2000-11-30 2002-07-25 Phillip Balsamo Processing node for eliminating duplicate network usage data
US7130901B2 (en) * 2001-01-02 2006-10-31 ACE★COMM Corporation Network service provider platform for supporting usage sensitive billing and operation services
US7155608B1 (en) * 2001-12-05 2006-12-26 Bellsouth Intellectual Property Corp. Foreign network SPAM blocker
US7457865B2 (en) * 2003-01-23 2008-11-25 Redknee Inc. Method for implementing an internet protocol (IP) charging and rating middleware platform and gateway system

Also Published As

Publication number Publication date
GB2411542B (en) 2005-12-14
WO2004040842A1 (fr) 2004-05-13
GB0509082D0 (en) 2005-06-08
JP2006505161A (ja) 2006-02-09
GB2411542A (en) 2005-08-31
CN1494268A (zh) 2004-05-05
US20060155866A1 (en) 2006-07-13
AU2003255113A1 (en) 2004-05-25

Similar Documents

Publication Publication Date Title
CN1249957C (zh) 用户网络使用数据的采集方法
KR101122210B1 (ko) 행동 시그너처에 기초해서 ｐ2ｐ 애플리케이션을 식별하기 위한 시스템 및 방법
US6615262B2 (en) Statistical gathering framework for extracting information from a network multi-layer stack
Dewes et al. An analysis of Internet chat systems
US7539749B2 (en) Method and apparatus for session reconstruction
CN101924757B (zh) 追溯僵尸网络的方法和系统
US7843827B2 (en) Method and device for configuring a network device
Bianchi et al. Check before storing: What is the performance price of content integrity verification in LRU caching?
Mori et al. Characterizing traffic flows originating from large-scale video sharing services
Bhatia et al. Identifying P2P traffic: A survey
Molnár et al. Three-dimensional characterization of internet flows
CN112532614A (zh) 一种用于电网终端的安全监测方法和系统
CN114866485A (zh) 一种基于聚合熵的网络流量分类方法及分类系统
US6963912B1 (en) Method and apparatus for session reconstruction
CN101420336A (zh) 在网络中识别网络电话流量的方法及其系统
Tellenbach Detection, classification and visualization of anomalies using generalized entropy metrics
François et al. SAFEM: Scalable analysis of flows with entropic measures and SVM
Khaunte et al. Statistical characterization of a world wide web browsing session
Qiao et al. Understanding and improving user engagement in adaptive video streaming
CN113852565A (zh) 热门应用识别方法、网络系统、网络设备及存储介质
WO2001001726A2 (en) Method and apparatus for session reconstruction
CN110858308A (zh) 基于大规模数据存储和处理技术的p2p流量分析方法
Qin et al. Dynamic features measurement and analysis for large-scale networks
CN112398813B (zh) 一种交互式应用协议识别方法
CN102130789A (zh) 一种基于应用组的流测量采样方法、装置及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20060405

Termination date: 20161031

CF01 Termination of patent right due to non-payment of annual fee