CN101426024B - 一种数据流量控制方法、系统及装置 - Google Patents

一种数据流量控制方法、系统及装置 Download PDF

Info

Publication number
CN101426024B
CN101426024B CN2008101858118A CN200810185811A CN101426024B CN 101426024 B CN101426024 B CN 101426024B CN 2008101858118 A CN2008101858118 A CN 2008101858118A CN 200810185811 A CN200810185811 A CN 200810185811A CN 101426024 B CN101426024 B CN 101426024B
Authority
CN
China
Prior art keywords
data
content
distributed control
statistics
user terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2008101858118A
Other languages
English (en)
Other versions
CN101426024A (zh
Inventor
张志伟
张华军
宋海涛
陈成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Xunlei Network Technology Co Ltd
Original Assignee
Shenzhen Xunlei Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Xunlei Network Technology Co Ltd filed Critical Shenzhen Xunlei Network Technology Co Ltd
Priority to CN2008101858118A priority Critical patent/CN101426024B/zh
Publication of CN101426024A publication Critical patent/CN101426024A/zh
Application granted granted Critical
Publication of CN101426024B publication Critical patent/CN101426024B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种数据流量控制方法、系统及装置,应用于P2P网络系统中,该方法包括:分布式控制服务器根据自身统计结果和/或外部设备统计结果,确定要存储的内容数据;并获取所述内容数据并存储;当用户终端获取所需内容数据时:接收用户终端发送的获取所需内容数据的请求信息;根据请求信息判断自身的分布式控制区域内是否有该用户终端所请求的内容数据;若是,则控制用户终端从自身的分布式控制区域内获取所请求的内容数据,若否,则将请求信息转发给中央服务器,由中央服务器控制用户终端从其他分布式控制区域内获取所请求的内容数据。该方法能有效的将数据流量控制在自身的分布式控制区域范围内,减轻了骨干网络的负担,提高了传输效率。

Description

一种数据流量控制方法、系统及装置
技术领域
本发明涉及网络技术领域,尤指一种用于端对端(Peer to Peer,P2P)网络系统中的数据流量控制方法、系统及装置。
背景技术
随着目前网络技术的不断发展,网络新业务层出不穷。其中P2P网络共享业务和流媒体等业务尤为突出。网络新业务的出现给传统的因特网Internet应用带来了巨大的冲击,给网络运维管理带来了挑战。特别是P2P网络模式本身带宽抢占的特点,给网络资源管理带来了巨大的挑战。据统计,目前国内外P2P流量占总网络流量的60%以上,严重影响了很多业务的正常运行,造成网络带宽资源的浪费。且目前互联网上大规模的P2P流量,大部分是无序的,冗余的。因此,随着网络新业务的出现,网络流量管理技术的研究成了目前研究的热点。
目前,主要采用的流程管理方法是:对互联网上大规模的P2P流量,采用有序的区域化控制,以减轻运营商网络的负担。
上述方法主要由后台强大的分布式二进制文件搜索引擎和智能网格计算实时的将互联网上的超文本传输协议(Hyper Text Transfer Protocol,HTTP)、文件传输协议(File Transfer Protocol,FTP)等二进制资源进行基因遗传(Deoxyribonucleic acid,DNA)计算并索引,用户使用客户端下载时,通过查询后台资源索引服务器,获取一定数量的资源进行多资源下载,从而获得数倍于传统方式的高速下载体验。
P2P技术是基于分布式节点和集中控制的P2P机制,P2P网络的架构可以如图1所示。这种机制主要有如下特点:
(1)区域(单元)化的P2P管理。
每个全国级、省级、城市级的运营商,都可划分成一个P2P单元,每个单元都有P2P控制单元(图1中的分布式节点)支持。举例来说,各网络服务提供商(Internet Service Provider,ISP)所构建的P2P网络中可以包括一个或多个P2P单元,例如:电信、网通、长城宽带等都构建的网络均有类似的单元。每个单元都是一个区域。我们可以通过地域来划分单元,例如:广东电信可以是一个单元;也可以更细化的将深圳电信划分为一个单元。即单元是根据运营商需要划分的。
(2)中央控制和协调。
每个单元由中央服务器统一调度和协调。用户在其上层的P2P控制单元支持下,以P2P的方式与同区域内的其他用户进行数据传输。同时,经过中央服务器的调度;也可在其他区域控制单元支持下,以P2P的方式与其他区域的用户进行传输。
不同文件资源在P2P网络中的数据源数量、类型、下载次数、分布各不相同,这与用户的下载行为和习惯有很大关系。用户的下载行为比较集中时,在互联网存在的所有文件资源中,可能有20%的文件资源被下载,但却占据了70%左右的流量。
而当某一用户需要获得某一资源的时,如果同一区域内没有该资源提供,则中央服务器会控制该用户从其他区域内获取所请求的资源。当需要获取该资源的用户增多时,就会使得网络中各区域间的传输流量增大,即产生大量的跨区域流量。这给骨干网络带来了很大的负担,导致网络资源的浪费以及网络中数据传输效率低。
发明内容
本发明实施例提供一种数据流量控制方法、系统及装置,能够将数据流量尽最大可能的限制在自身所在的分布式控制区域范围内,减轻了骨干网络的负担,提高了传输效率。
一种数据流量控制方法,包括:
分布式控制服务器根据统计结果,确定要存储的内容数据,具体包括:周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数,并确定统计参数大于设定阈值的内容数据为要存储的内容数据;和/或获取外部设备对各内容数据的统计结果,根据统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定出的热门内容数据为要存储的内容数据;所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;以及
获取所述要存储的内容数据,并进行存储;当用户终端获取所需内容数据时,分布式控制服务器执行下列步骤:
接收所述用户终端发送的获取所需内容数据的请求信息;
根据所述请求信息判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;若是,则控制所述用户终端从自身的分布式控制区域内获取所请求的内容数据,若否,则将所述请求信息转发给中央服务器,由所述中央服务器控制所述用户终端从其他分布式控制区域内获取所请求的内容数据。
根据本发明的上述方法,所述统计参数,具体包括下列参数中的至少一个:请求次数、下载量、请求次数的变化趋势和下载量的变化趋势。
根据本发明的上述方法,所述获取所述要存储的内容数据,具体包括:
所述分布式控制服务器判断所述要存储的内容数据是否是自身的分布式控制区域内的终端节点中已有的内容数据;
若是,则直接从所述自身的分布式控制区域内的终端节点中获取要存储的内容数据,并存储;若否,则发送数据请求信息给所述中央服务器,所述中央服务器查找拥有要存储的内容数据的其他分布式控制区域的分布式控制服务器或终端节点,并通知所述分布式控制服务器,所述分布式控制服务器从所述其他分布式控制区域的分布式控制服务器或终端节点中获取要存储的内容数据,并存储。
根据本发明的上述方法,所述中央服务器控制所述用户终端从其他分布式控制区域内获取所请求的内容数据,具体包括:
所述中央服务器接收分布式控制服务器转发的用户终端所请求的内容数据的请求信息;
所述中央服务器根据接收到的请求信息查询存储的其他分布式控制区域内的资源分布信息,确定其他分布式控制区域内拥有用户终端所请求的内容数据的其他分布式控制服务器和/或终端节点,并通知所述用户终端;
所述用户终端从其他分布式控制区域内的分布式控制服务器和/或终端节点中获取所请求的内容数据。
本发明的上述方法,还包括:所述分布式控制服务器删除存储的所述统计参数均小于设定值的内容数据。
一种数据流量控制系统,包括:中央服务器、至少一个分布式控制服务器和若干用户终端;
所述中央服务器,用于接收分布式控制服务器转发的用户终端获取所需内容数据的请求信息,并控制所述用户终端从其他分布式控制区域内获取所请求的内容数据;
所述分布式控制服务器,用于根据自身统计结果或外部设备统计结果,确定要存储的内容数据,获取所述要存储的内容数据,并进行存储;以及接收用户终端发送的获取所需内容数据的请求信息,根据所述请求信息判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;若是,则控制所述用户终端从自身的分布式控制区域内获取所请求的内容数据,若否,则将所述请求信息转发给中央服务器;其中,根据自身统计结果或外部设备统计结果,确定要存储的内容数据,具体包括:周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数,并确定统计参数大于设定阈值的内容数据为要存储的内容数据;和/或获取外部设备对各内容数据的统计结果,根据统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定出的热门内容数据为要存储的内容数据;所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;
所述用户终端,用于发送获取所需内容数据的请求信息给分布式控制服务器,以及从所述分布式控制服务器自身的分布式控制区域内或其他分布式控制区域内获取所请求的内容数据。
一种分布式控制服务器,包括:
确定模块,用于根据自身统计结果或外部设备统计结果,确定要存储的内容数据,具体包括:周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数,并确定统计参数大于设定阈值的内容数据为要存储的内容数据;和/或获取外部设备对各内容数据的统计结果,根据统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定出的热门内容数据为要存储的内容数据;所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;
获取模块,用于获取所述要存储的内容数据;
存储模块,用于存储所述获取模块获取的内容数据;
接收模块,用于接收用户终端发送的获取所需内容数据的请求信息;
判断模块,用于判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;
执行模块,用于根据所述判断模块的判断结果控制所述用户终端从自身的分布式控制区域内获取所请求的内容数据或将所述请求信息转发给中央服务器。
根据本发明的上述分布式控制服务器,所述确定模块,包括:
统计单元,用于周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数;
结果获取单元,用于获取外部设备对各内容数据的统计结果,所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;
确定单元,用于确定所述统计单元统计得到的统计参数大于设定阈值的内容数据为要存储的内容数据;和/或用于根据所述结果获取单元获取到的统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定的热门内容数据为要存储的内容数据。
根据本发明的上述分布式控制服务器,所述获取模块,包括:
判断单元,用于判断所述要存储的内容数据是否是自身的分布式控制区域内的终端节点中已有的内容数据;
数据获取单元,用于根据所述判断单元的判断结果,直接从所述自身的分布式控制区域内的终端节点中获取要存储的内容数据,或发送数据请求信息给所述中央服务器,从所述中央服务器通知的拥有要存储的内容数据的其他分布式控制区域的分布式控制服务器或终端节点中,获取要存储的内容数据。
根据本发明的上述分布式控制服务器,所述确定模块,还用于确定出存储的所述统计参数均小于设定值的内容数据;
所述存储模块,还用于删除所述确定模块确定出的所述统计参数均小于设定值的内容数据。
本发明实施例提供的数据流量控制方法、系统及装置,分布式控制服务器根据自身统计结果和/或外部设备统计结果,确定要存储的内容数据;以及获取所述要存储的内容数据,并存储;通过增加对热门的内容数据暂存功能,在分布式控制服务器中暂时存储比较热门的内容数据,为用户终端从自身所在的分布式控制区域内获取数据提供了前提条件。
当接收所述用户终端发送的获取所需内容数据的请求信息后;分布式控制服务器根据所述请求信息判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;若有,则控制所述用户终端优先从自身的分布式控制区域内获取所请求的内容数据,若否,再将所述请求信息转发给中央服务器,由所述中央服务器控制所述用户终端从其他分布式控制区域内获取所请求的内容数据。这样就将数据流量尽最大可能的限制在了自身所在的分布式控制区域范围内,降低了运营商骨干网网络中数据传输和交换流量,减轻了骨干网络的负担,提高了数据传输的效率和用户的下载速度。
附图说明
图1为现有技术中P2P网络架构的结构示意图;
图2为本发明实施例中热门内容数据存储的流程图;
图3为本发明实施例中用户终端获取内容数据的流程图;
图4为本发明实施例中数据流量控制系统的结构示意图;
图5为本发明实施例中分布式控制服务器的结构示意图。
具体实施方式
为了尽可能的将数据流量限制在自身的分布式控制区域(也就是上面现有技术中说的单元)范围内,当某一用户需要获得某一资源的时,如果自身的分布式控制区域内有该资源提供,则分布式控制节点会控制该用户仅仅从自身的分布式控制区域内下载该资源,而不会从其他分布式控制区域内下载。在此高度可控性的基础上,为了更有效的将网际流量转化为网内流量,以节省网际流量,本发明实施例提供的数据流量控制方法及系统,应用于P2P网络中,通过监控资源(即内容数据)的热度,并缓存热度高的资源,以及使用户优先从自身所在的分布式控制区域内获取资源,来达到更有效的控制网络间数据流量的目的降低区域间数据交换流量的目的,尽可能的减少骨干网络的负荷。
本发明实施例提供的数据流量控制方法主要包括下列两个过程:
一、热门内容数据的存储过程,即确定要存储的数据内容并存储的过程。该过程按设定的周期进行,例如:周期可以设定为几个小时、一天或几天。其流程如图1所示,执行步骤如下:
步骤S101:分布式控制服务器确定要存储的内容数据。
(1)分布式控制服务器根据自身统计结果,确定要存储的内容数据。选择性的存储(CACHE)比较热门的内容数据。
各分布式控制服务器周期性统计自身的分布式控制区域内内容数据的被请求情况,例如:统计设定时间段内的请求次数、下载量、请求次数的变化趋势、下载量的变化趋势或其他设定的表征各内容数据被请求情况的统计参数等。
其中,设定时间段可以是最近几小时、最近一天或若干天等。
将统计得到的请求次数等统计参数与设定阈值进行比较,当某个或某些内容数据的统计参数大于设定阈值时,则认为是热门资源,即要存储的内容数据。
(2)分布式控制服务器根据外部设备对各内容数据的统计结果,确定要存储的内容数据。包括两种情况:
(i)外部设备周期性统计所辖区域内的内容数据的被请求或访问情况,例如:统计设定时间段内的请求次数、下载量、请求次数的变化趋势、下载量的变化趋势或其他设定的表征各内容数据被请求情况的统计参数等。
将统计得到的请求次数等统计参数与设定阈值进行比较,当某个或某些内容数据的统计参数满足其设定条件时,则认为是热门内容数据。
确定外部设备确定出的热门内容数据为要存储的内容数据。
(ii)外部设备周期性统计该分布式控制服务器的分布式控制区域内的内容数据的被请求情况,例如:统计设定时间段内的请求次数、下载量、请求次数的变化趋势、下载量的变化趋势或其他设定的表征各内容数据被请求情况的统计参数等。
获取外部设备对各内容数据的统计结果,根据统计结果确定统计参数大于设定阈值的内容数据为要存储的内容数据,例如:请求次数等统计参数大于设定阈的内容数据。
步骤S102:分布式控制服务器获取要存储的内容数据。
判断确定出的要存储的内容数据是否是自身的分布式控制区域内终端节点中已有的内容数据。
若是,则直接从拥有上述要存储的内容数据的终端节点中获取要存储的内容数据;若否,则发送数据请求信息给中央服务器,中央服务器查找拥有要存储的内容数据的其他分布式控制区域的分布式控制服务器或终端节点,并通知发送数据请求信息的分布式控制服务器,分布式控制服务器再从其他分布式控制区域的分布式控制服务器或终端节点中获取要存储的内容数据。
步骤S103:分布式控制服务器在本地存储获取的内容数据。
特别的,分布式控制服务器会根据自身统计结果,将存储的统计参数均小于设定值的或已经过期的内容数据删除。
二、用户终端获取所需要的内容数据的过程。该过程由用户终端发送的获取所需内容数据的请求信息触发,其流程如图3所示,包括下列步骤:
步骤S201:分布式控制服务器接收自身的分布式控制区域内的用户终端发送的获取所需内容数据的请求信息。
分布式控制服务器接收到请求信息后,对请求信息进行解析,确定用户终端所请求的内容数据。
步骤S202:分布式控制服务器判断自身的分布式控制区域内是否有用户终端所请求的内容数据。
分布式控制服务器根据本域内的资源分布情况,优先提供自身的分布式控制区域内的资源给用户终端下载。当自身的分布式控制区域内资源无法满足用户的下载需求时,再请求中央服务器控制用户终端根据优先级从其他分布式控制区域内下载。具体为:
分布式控制服务器根据接收到用户终端所请求的内容数据的请求信息,查询存储的自身的分布式控制区域内的资源分布信息,确定自身的分布式控制区域内是否有用户终端所请求的内容数据的信息记录。其中,信息记录中包含有拥有所请求的内容数据的其他终端节点信息。
若是,执行步骤S203;则;若否,则执行步骤S204。
步骤S203:分布式控制服务器控制用户终端从自身的分布式控制区域内获取所请求的内容数据。具体包括:
分布式控制服务器将所请求的内容数据的信息记录返回给发送请求的终端节点。终端节点接收到分布式控制服务器发送的信息记录后,根据信息记录中包含的拥有所请求的内容数据的其他终端节点信息,向拥有所请求的内容数据的其他终端节点请求所需要的内容数据。
步骤S204:分布式控制服务器将请求信息转发给中央服务器。
步骤S205:中央服务器控制用户终端从其他分布式控制区域内获取所请求的内容数据。具体包括:
中央服务器接收分布式控制服务器转发的用户终端所请求的内容数据的请求信息。
中央服务器对接收到的请求信息进行解析,获知用户终端所请求的内容数据,查询存储的其他分布式控制区域内的资源分布信息,确定其他分布式控制区域内拥有用户终端所请求的内容数据的其他分布式控制服务器和/或终端节点,并通知给发送请求的用户终端。
用户终端从其他分布式控制区域内的分布式控制服务器和/或终端节点中获取所请求的内容数据。
特别的,中央服务器会根据用户终端所属的区域,确定拥有用户终端所请求的内容数据的其他分布式控制服务器和/或终端节点的优先级。用户终端根据优先级优先从优先级高的其他分布式控制服务器和/或终端节点中获取所请求的内容数据。
由于跨区域流量,存在整体流量开支和成本开支的问题,从而引入相邻区域优先级的概念,优先从低成本,低流量开支的区域下载。优先级可以根据网络拓扑关系确定。例如:同运营商、同城市的其他分布式控制服务器和/或终端节点的优先级高于同运营商、不同城市的其他分布式控制服务器和/或终端节点;同运营商、同省的其他分布式控制服务器和/或终端节点的优先级高于不同运营商的其他分布式控制服务器和/或终端节点等。
根据本发明的上述方法,可以构建一种数据流量控制系统,如图4所示,该系统包括:中央服务器10、分布式控制服务器(20、21、22等)和用户终端(30、31、32、33等)。
下面以分布式控制服务器20、用户终端30为例进行具体说明,此时用户终端31等为自身分布式控制区域内的终端节点、用户终端32和用户终端33等均为其他分布式控制区域内的终端节点。
中央服务器10,用于接收分布式控制服务器20转发的用户终端30获取所需内容数据的请求信息,并控制用户终端30从其他分布式控制区域内获取所请求的内容数据。
分布式控制服务器20,用于根据自身统计结果或外部设备统计结果,确定要存储的内容数据,然后获取要存储的内容数据,并进行存储;以及接收用户终端30发送的获取所需内容数据的请求信息,根据接收到的请求信息判断自身的分布式控制区域内是否有用户终端30所请求的内容数据;若是,则控制用户终端30从自身的分布式控制区域内获取所请求的内容数据,若否,则将请求信息转发给中央服务器10。
分布式控制服务器20,其结构如图5所示,包括:确定模块201、获取模块202、存储模块203、接收模块204、判断模块205和执行模块206。
确定模块201,用于根据自身统计结果或外部设备统计结果,确定要存储的内容数据。
确定模块201,还用于:确定出存储的统计参数均小于设定值的内容数据。
较佳的,确定模块201进一步可以包括:统计单元2011、结果获取单元2012和确定单元2013。
统计单元2011,用于周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数。
结果获取单元2012,用于获取外部设备对各内容数据的统计结果。其中,统计结果包括统计处表征各内容数据被请求情况的统计参数和确定出热门内容数据。
确定单元2013,用于确定统计单元2011统计得到的统计参数大于设定阈值的内容数据为要存储的内容数据;和/或用于根据结果获取单元2012获取到的统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定的热门内容数据为要存储的内容数据。
确定单元2013,还用于确定出存储的统计参数均小于设定值的内容数据。
获取模块202,用于获取确定模块201确定出的要存储的内容数据。
较佳的,获取模块202进一步可以包括:判断单元2021和数据获取单元2022。
判断单元2021,用于判断确定模块201确定出的要存储的内容数据是否是自身的分布式控制区域内的终端节点中已有的内容数据。
数据获取单元2022,用于根据判断单元2021的判断结果,直接从自身的分布式控制区域内的终端节点中获取要存储的内容数据,或发送数据请求信息给中央服务器10,从中央服务器10通知的拥有要存储的内容数据的其他分布式控制区域的分布式控制服务器或终端节点中,获取要存储的内容数据。
存储模块203,用于存储获取模块202获取的内容数据。
存储模块203,还用于删除确定模块201确定出的统计参数均小于设定值的内容数据。
接收模块204,用于接收用户终端30发送的获取所需内容数据的请求信息。
判断模块205,用于判断自身的分布式控制区域内是否有用户终端30所请求的内容数据。
执行模块206,用于根据判断模块205的判断结果控制用户终端30从自身的分布式控制区域内获取所请求的内容数据或将请求信息转发给中央服务器10。
特别的,确定模块201可以设置为分布式控制服务器20中的一个模块。也可以单独设置为一个热度预测服务器。获取模块202和存储模块203可以分别设置为分布式控制服务器20中的一个模块,也可以组合起来设置为一个缓存服务器。
用户终端30,用于发送获取所需内容数据的请求信息给分布式控制服务器,以及从所述分布式控制服务器自身的分布式控制区域内或其他分布式控制区域内获取所请求的内容数据。
本发明实施例提供的数据流量控制方法、系统及装置,分布式控制服务器根据自身统计结果和/或外部设备统计结果,确定要存储的内容数据;以及获取所述要存储的内容数据,并存储;通过增加对热门的内容数据暂存功能,在分布式控制服务器中暂时存储比较热门的内容数据,为用户终端从自身的分布式控制区域内获取数据提供了前提条件;
当接收用户终端发送的获取所需内容数据的请求信息后;布式控制服务器根据所述请求信息判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;若有,则控制所述用户终端优先从自身的分布式控制区域内获取所请求的内容数据,若否,再将所述请求信息转发给中央服务器,由所述中央服务器控制所述用户终端从其他分布式控制区域内获取所请求的内容数据。这样就将数据流量尽最大可能的限制在了自身的分布式控制区域范围内,降低了运营商骨干网网络中数据传输和交换流量,减轻了骨干网络的负担,提高了数据传输的效率和用户的下载速度,使用户拥有较好的下载体验。
在划分区域,尽可能从自身所在的分布式控制区域下载的基础上,进一步确定每一个分布式控制区域的各相邻分布式控制区域优先级。用户终端将优先从自身所在的分布式控制区域内的数据源下载数据,自身所在的分布式控制区域无法满足(自身所在的分布式控制区域内数据源不够多或者下载体验不够好)时,即不能从自身所在的分布式控制区域下载到或者下载的太慢时,再依据优先级顺序从其他相邻的分布式控制区域下载数据。经过本策略优化网络服务运营商的骨干网中的数据流量,使得绝大部分的网络数据点对点传输流量被限制在本身所在的分布式控制区域或者优先级高的相邻的分布式控制区域,使得骨干网中的数据交互流量的入口流量降低60%,出口流量降低50%。
部署上述数据流量控制方法、系统及装置,可以利用有限的投入来大大降低区域间的交换流量。从而改善用户的下载体验效果,并为基础网络运营商带来更多用户。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化、替换或应用到其他类似的装置,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求书的保护范围为准。

Claims (10)

1.一种数据流量控制方法,其特征在于,包括:
分布式控制服务器根据统计结果,确定要存储的内容数据,具体包括:周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数,并确定统计参数大于设定阈值的内容数据为要存储的内容数据;和/或获取外部设备对各内容数据的统计结果,根据统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定出的热门内容数据为要存储的内容数据;所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;以及
获取所述要存储的内容数据,并进行存储;当用户终端获取所需内容数据时,分布式控制服务器执行下列步骤:
接收所述用户终端发送的获取所需内容数据的请求信息;
根据所述请求信息判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;若是,则控制所述用户终端从自身的分布式控制区域内获取所请求的内容数据,若否,则将所述请求信息转发给中央服务器,由所述中央服务器控制所述用户终端从其他分布式控制区域内获取所请求的内容数据。
2.如权利要求1所述的方法,其特征在于,所述统计参数,具体包括下列参数中的至少一个:请求次数、下载量、请求次数的变化趋势和下载量的变化趋势。
3.如权利要求1所述的方法,其特征在于,所述获取所述要存储的内容数据,具体包括:
所述分布式控制服务器判断所述要存储的内容数据是否是自身的分布式控制区域内的终端节点中已有的内容数据;
若是,则直接从所述自身的分布式控制区域内的终端节点中获取要存储的内容数据,并存储;若否,则发送数据请求信息给所述中央服务器,所述中央服务器查找拥有要存储的内容数据的其他分布式控制区域的分布式控制服务器或终端节点,并通知所述分布式控制服务器,所述分布式控制服务器从所述其他分布式控制区域的分布式控制服务器或终端节点中获取要存储的内容数据,并存储。
4.如权利要求1所述的方法,其特征在于,所述中央服务器控制所述用户终端从其他分布式控制区域内获取所请求的内容数据,具体包括:
所述中央服务器接收分布式控制服务器转发的用户终端所请求的内容数据的请求信息;
所述中央服务器根据接收到的请求信息查询存储的其他分布式控制区域内的资源分布信息,确定其他分布式控制区域内拥有用户终端所请求的内容数据的其他分布式控制服务器和/或终端节点,并通知所述用户终端;
所述用户终端从其他分布式控制区域内的分布式控制服务器和/或终端节点中获取所请求的内容数据。
5.如权利要求1-4任一所述的方法,其特征在于,还包括:所述分布式控制服务器删除存储的所述统计参数均小于设定值的内容数据。
6.一种数据流量控制系统,其特征在于,包括:中央服务器、至少一个分布式控制服务器和若干用户终端;
所述中央服务器,用于接收分布式控制服务器转发的用户终端获取所需内容数据的请求信息,并控制所述用户终端从其他分布式控制区域内获取所请求的内容数据;
所述分布式控制服务器,用于根据自身统计结果或外部设备统计结果,确定要存储的内容数据,获取所述要存储的内容数据,并进行存储;以及接收用户终端发送的获取所需内容数据的请求信息,根据所述请求信息判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;若是,则控制所述用户终端从自身的分布式控制区域内获取所请求的内容数据,若否,则将所述请求信息转发给中央服务器;其中,根据自身统计结果或外部设备统计结果,确定要存储的内容数据,具体包括:周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数,并确定统计参数大于设定阈值的内容数据为要存储的内容数据;和/或获取外部设备对各内容数据的统计结果,根据统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定出的热门内容数据为要存储的内容数据;所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;
所述用户终端,用于发送获取所需内容数据的请求信息给分布式控制服务器,以及从所述分布式控制服务器自身的分布式控制区域内或其他分布式控制区域内获取所请求的内容数据。
7.一种分布式控制服务器,其特征在于,包括:
确定模块,用于根据自身统计结果或外部设备统计结果,确定要存储的内容数据,具体包括:周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数,并确定统计参数大于设定阈值的内容数据为要存储的内容数据;和/或获取外部设备对各内容数据的统计结果,根据统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定出的热门内容数据为要存储的内容数据;所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;
获取模块,用于获取所述要存储的内容数据;
存储模块,用于存储所述获取模块获取的内容数据;
接收模块,用于接收用户终端发送的获取所需内容数据的请求信息;
判断模块,用于判断自身的分布式控制区域内是否有所述用户终端所请求的内容数据;
执行模块,用于根据所述判断模块的判断结果控制所述用户终端从自身的分布式控制区域内获取所请求的内容数据或将所述请求信息转发给中央服务器。
8.如权利要求7所述的分布式控制服务器,其特征在于,所述确定模块,包括:
统计单元,用于周期性统计自身的分布式控制区域内表征各内容数据被请求情况的统计参数;
结果获取单元,用于获取外部设备对各内容数据的统计结果,所述统计结果包括统计出表征各内容数据被请求情况的统计参数和确定出热门内容数据;
确定单元,用于确定所述统计单元统计得到的统计参数大于设定阈值的内容数据为要存储的内容数据;和/或用于根据所述结果获取单元获取到的统计结果确定统计参数大于设定阈值满足设定条件的内容数据为要存储的内容数据或确定外部设备确定的热门内容数据为要存储的内容数据。
9.如权利要求8所述的分布式控制服务器,其特征在于,所述获取模块,包括:
判断单元,用于判断所述要存储的内容数据是否是自身的分布式控制区域内的终端节点中已有的内容数据;
数据获取单元,用于根据所述判断单元的判断结果,直接从所述自身的分布式控制区域内的终端节点中获取要存储的内容数据,或发送数据请求信息给所述中央服务器,从所述中央服务器通知的拥有要存储的内容数据的其他分布式控制区域的分布式控制服务器或终端节点中,获取要存储的内容数据。
10.如权利要求7-9任一所述的分布式控制服务器,其特征在于,所述确定模块,还用于确定出存储的所述统计参数均小于设定值的内容数据;
所述存储模块,还用于删除所述确定模块确定出的所述统计参数均小于设定值的内容数据。
CN2008101858118A 2008-12-15 2008-12-15 一种数据流量控制方法、系统及装置 Active CN101426024B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2008101858118A CN101426024B (zh) 2008-12-15 2008-12-15 一种数据流量控制方法、系统及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2008101858118A CN101426024B (zh) 2008-12-15 2008-12-15 一种数据流量控制方法、系统及装置

Publications (2)

Publication Number Publication Date
CN101426024A CN101426024A (zh) 2009-05-06
CN101426024B true CN101426024B (zh) 2011-10-12

Family

ID=40616353

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008101858118A Active CN101426024B (zh) 2008-12-15 2008-12-15 一种数据流量控制方法、系统及装置

Country Status (1)

Country Link
CN (1) CN101426024B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2011154095A (ru) * 2009-05-29 2013-07-10 Телефонактиеболагет Лм Эрикссон (Пабл) Улучшение производительности системы совместного использования контента
CN102209048B (zh) * 2011-05-24 2012-05-23 苏州阔地网络科技有限公司 一种用于实现用户信息共享的即时通讯系统及方法
CN102761607A (zh) * 2012-06-21 2012-10-31 深圳市谷米科技有限公司 一种应用于移动互联网高可用缓存群实现方法
CN103312776A (zh) * 2013-05-08 2013-09-18 青岛海信传媒网络技术有限公司 边缘节点服务器缓存视频的内容的方法和装置
EP2884356A1 (en) * 2013-12-10 2015-06-17 Siemens Aktiengesellschaft Method for controlling a grid of plants
CN104717258B (zh) * 2013-12-16 2018-09-28 华为技术有限公司 一种数据发送方法及系统
CN103686447B (zh) * 2013-12-20 2017-12-08 广东威创视讯科技股份有限公司 视频传输方法和系统
CN106034083B (zh) * 2015-03-12 2019-10-08 阿里巴巴集团控股有限公司 Cdn网络系统及其限速控制方法、cdn节点和服务器
CN105657442A (zh) * 2015-12-30 2016-06-08 北京奇艺世纪科技有限公司 一种视频文件生成方法和系统
CN106453117A (zh) * 2016-11-10 2017-02-22 珠海市魅族科技有限公司 网络资源的处理方法及装置
CN110475160B (zh) * 2018-05-10 2021-07-30 视联动力信息技术股份有限公司 一种跨视联网传输视频数据方法和装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1387643A (zh) * 1999-09-01 2002-12-25 奈克斯特威电信公司 用于无线通信系统的分布式高速缓冲存储器
CN101257396A (zh) * 2007-03-02 2008-09-03 中国科学院声学研究所 一种基于p2p技术的多域内容分发系统及相应的方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1387643A (zh) * 1999-09-01 2002-12-25 奈克斯特威电信公司 用于无线通信系统的分布式高速缓冲存储器
CN101257396A (zh) * 2007-03-02 2008-09-03 中国科学院声学研究所 一种基于p2p技术的多域内容分发系统及相应的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2004-260766A 2004.09.16

Also Published As

Publication number Publication date
CN101426024A (zh) 2009-05-06

Similar Documents

Publication Publication Date Title
CN101426024B (zh) 一种数据流量控制方法、系统及装置
CN103475719B (zh) 一种cdn-p2p融合网络中跨域流量最小化的内容分发方法
JP5745169B2 (ja) コンテンツ処理方法、コンテンツ処理デバイス、およびコンテンツ処理システム
KR101453594B1 (ko) 관리된 멀티미디어 전달 네트워크 및 멀티미디어 서비스 제공 방법
CN101540775B (zh) 内容分发方法、装置与内容分发网络系统
CN101136911B (zh) 一种采用p2p技术下载文件的方法和p2p下载系统
CN102647357B (zh) 一种处理内容路由方法及装置
CN101247402A (zh) 多媒体文件的下载播放系统和方法
CN101039281B (zh) 一种流媒体服务器负荷分担方法
CN104168300A (zh) 内容加速方法与系统
CN105207947B (zh) 一种过滤抖动的渐进式流量调度方法和系统
CN101640699A (zh) P2p流媒体系统及其中的流媒体下载方法
CN102075562A (zh) 协作缓存的方法和装置
CN101800731B (zh) 网络传输管理服务器、网络传输管理方法及网络传输系统
WO2010127618A1 (zh) 一种实现流媒体内容服务的系统和方法
CN101567796A (zh) 一种内容分片的多媒体网络及其业务方法
KR20100060304A (ko) 네트워크 구조를 고려한 분산형 컨텐트 전달 시스템 및 그 방법
CN102984203B (zh) 基于云计算的提高缓存设备利用率的方法、装置及系统
CN103179148A (zh) 一种在互联网中分享附件的处理方法和系统
CN101710902A (zh) 一种无结构p2p网络及其数据查询方法和索引更新方法
CN101551781B (zh) 一种p2p视频点播系统中的硬盘缓存替换方法
CN101854387B (zh) 分布式索引服务器架构下的p2p流量优化方法和系统
CN101980505A (zh) 一种基于3Tnet的视频点播的负载均衡方法
CN104468656A (zh) 一种移动数据的下载上传方法和系统
CN101626400B (zh) 一种p2p音乐点播系统的补偿方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20170619

Address after: A District No. 9018 building 518000 Guangdong Han innovation city of Shenzhen province Nanshan District high tech park, North Central Avenue, 4 floor 401

Patentee after: Shenzhen thunder network culture Co., Ltd.

Address before: 518057 Guangdong, Shenzhen, Nanshan District science and technology in the road, Shenzhen, No. 11, software park, building 7, level 8, two

Patentee before: Xunlei Network Technology Co., Ltd., Shenzhen

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20180206

Address after: Nanshan District Guangdong streets of science and technology of Shenzhen city in Guangdong province 518057 two Road No. 11 Shenzhen Software Park Building 7, 8 floor

Patentee after: Xunlei Network Technology Co., Ltd., Shenzhen

Address before: A District No. 9018 building 518000 Guangdong Han innovation city of Shenzhen province Nanshan District high tech park, North Central Avenue, 4 floor 401

Patentee before: Shenzhen thunder network culture Co., Ltd.