CN101039187A - 一种数据下载的方法及其系统 - Google Patents

一种数据下载的方法及其系统 Download PDF

Info

Publication number
CN101039187A
CN101039187A CN 200610034514 CN200610034514A CN101039187A CN 101039187 A CN101039187 A CN 101039187A CN 200610034514 CN200610034514 CN 200610034514 CN 200610034514 A CN200610034514 A CN 200610034514A CN 101039187 A CN101039187 A CN 101039187A
Authority
CN
China
Prior art keywords
download
data
server
terminal
downloaded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN 200610034514
Other languages
English (en)
Inventor
龚伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN 200610034514 priority Critical patent/CN101039187A/zh
Publication of CN101039187A publication Critical patent/CN101039187A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及一种数据下载的方法,下载信息服务器记录提供数据下载的服务器地址,当终端请求下载数据时,根据服务器和终端的具体情况、需要下载的数据文件的大小确定下载策略。本发明还同时公开了一种数据下载的系统。本发明提供的数据下载方法及系统,通过终端的下载模块根据服务器和终端的具体情况、需要下载的数据文件的大小得到较佳的下载策略,指示终端进行连接、下载,减轻服务器的负荷,节省了用户网络资源,使得下载速度更快,优化了数据下载技术。

Description

一种数据下载的方法及其系统
技术领域
本发明涉及数据传输技术领域,更具体地说,涉及一种数据下载的方法及其系统。
背景技术
随着互联网的发展和普及,目前很多数据下载技术都是采用客户端-服务器(即C-S)架构。C-S架构的优点在于多个用户所需的数据仅需存储在一台服务器上。但是,对于这种一对一的数据下载方式,随着越来越多的用户下载需求而服务器的容量有限,当很多客户端都连接到服务器下载数据时,服务器的带宽资源和系统资源消耗严重,就会无法满足大容量用户下载的需求,导致数据下载速度慢,甚至下载不成功。
虽然,为了改善上述问题,采取多台服务器方式,即多个客户端可以同时从多台服务器并发下载数据来提高下载速度。
但是,这种基于多台服务器的并发下载技术,并没有对服务器的网络服务器质量(quality of service,简称QoS,是网络与用户之间以及网络上互相通信的用户之间关于信息传输与共享的质量约定,例如,传输延迟允许时间、最小传输画面失真度以及声像同步等)进行判断,导致大量用户重复使用同一服务器进行下载,增加该服务器的负荷,甚至导致下载失败。而且也没有根据不同数据文件的大小采取不同的下载方式,例如采取点对点(P2P,一种点对点技术,直接从一个客户端向另一个客户端发出连接请求,例如BitTorrent,即BT下载)或者采取HTTP等下载方式。没有合理利用P2P方式带来的便捷,也就没有合理利用用户的网络资源来分担服务器的负载。另外,也没有判断当前终端机器的CPU使用情况、网络使用情况,而直接最大限度地占用网络资源,对用户的其他网络交互造成影响。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述服务器的带宽资源和系统资源消耗严重等缺陷,提供一种数据下载的方法及其系统,有效地节省用户的网络资源,减轻服务器负荷。
本发明解决其技术问题所采用的技术方案是:构造一种数据下载的方法,下载信息服务器记录提供数据下载的服务器地址,当终端请求下载数据时,根据服务器和终端的具体情况、需要下载的数据文件的大小确定下载策略,具体包括以下步骤:
S1.根据所有服务器返回的网络服务质量值与响应时长确定提供数据下载的优选服务器;
S2.根据需要下载的数据文件的大小确定数据下载的模式;
S3.根据所述终端当前的CPU与网络带宽的占用率调整数据下载的速度。
在本发明所述的方法中,在执行所述步骤S1之前进一步包括:所述终端向所述下载信息服务器获取提供数据下载的服务器地址。
在本发明所述的方法中,所述步骤S1包括:
S11.所述终端根据所述服务器地址向每个服务器发送数据包,所述数据包包含当前时间戳;
S12.所述每个服务器收到所述数据包后,均向所述终端返回预设网络服务质量值和所述数据包;
S13.所述终端将所述每个服务器返回的网络服务器质量值和响应时长的进行比较判断,并根据所述比较判断的结果确定数据下载的优选服务器。
在本发明所述的方法中,所述步骤S13中,所述响应时长由以下式子定义:
响应时长=返回所述数据包时的时间戳-发送所述数据包时的时间戳。
在本发明所述的方法中,所述步骤S2包括:
S21.所述终端向所述优选服务器请求获取所述需要下载的数据文件的大小,并将其与预先保存在所述终端的临界值进行比较判断;
S22.若大于或等于所述临界值,则使用点对点的方式进行下载;如小于所述临界值,则使用HTTP的方式下载。
在本发明所述的方法中,在执行所述步骤S3之前进一步包括:判断所述数据文件的重要性。
在本发明所述的方法中,若所述数据文件重要,则直接从所述优选服务器上进行全速下载;否则执行所述步骤S3。
在本发明所述的方法中,所述步骤S3包括:
若当前所述终端的CPU与网络带宽的占用率比预设值高,表示当前终端机器处于忙时,则从所述优选服务器上进行下载并限制该下载的速度;
若当前所述CPU与网络带宽的占用率比预设值低,表示当前终端机器处于闲时,则从所述优选服务器上进行全速下载。
一种数据下载的系统,包括至少一个以上的请求数据下载的终端,至少一个以上的提高数据下载的服务器以及记录提供数据下载的服务器地址的下载信息服务器,还包括:
—下载模块,所述下载模块设置在终端软件,用于接收数据下载请求以及根据服务器和终端的具体情况、需要下载的数据文件的大小确定下载策略。
本发明的有益效果是,本发明提供的数据下载方法及系统,通过终端的下载模块根据服务器和终端的具体情况、需要下载的数据文件的大小得到较佳的下载策略,指示终端进行连接、下载,减轻服务器的负荷,节省了用户网络资源,使得下载速度更快,优化了数据下载技术。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明实现数据下载的系统示意图;
图2是本发明实现数据下载的流程图。
具体实施方式
如图1所示的本发明实现数据下载的系统示意图,一种数据下载的系统,包括:至少一个以上的请求数据下载的终端(即终端1,终端2...终端n),至少一个以上的提高数据下载的服务器(即下载服务器1,下载服务器2...下载服务器n)以及记录提供数据下载的服务器地址的下载信息服务器,在每个终端的软件中增加下载模块,下载模块用于接收数据请求终端的数据下载请求,记录有所有提供数据下载的服务器地址,以及根据服务器和终端的具体情况、需要下载的数据文件的大小确定较佳的下载策略,实现数据下载的优化。
如图2所示的本发明实现数据下载的流程图,本发明所述终端下载数据的方法,包括以下步骤:
步骤S200中,请求数据下载的某一终端请求某数据的下载时,首先向下载信息服务器获取的所有提供数据下载的下载服务器的IP地址,然后根据这些IP地址对每个下载服务器发送附带当前时间戳的数据包,每个服务器收到该数据包后都会向终端的下载模块返回其自身的QoS值和原时间戳的数据包。
步骤S205中,下载模块将每个服务器返回的QoS值和响应时长进行比较判断,响应时长由以下式子定义:
响应时长=返回所述数据包时的时间戳-发送所述数据包时的时间戳。
步骤S210中,根据QoS值和响应时长的大小判断出该服务器状态是否良好,QoS值在预设范围(如1-100)之间越小越好,响应时长也为越短越好,若QoS值与响应时长的乘积得出的值为最小,表示该台服务器质量最好,则优选使用该台服务器,进而确定数据下载的优选服务器。
步骤S215中,在下载之前,下载模块首先向优选服务器请求获取需要下载的数据文件的大小。
步骤S220中,将获取到的数据文件的大小与预先在配置文件中已配置好的临界值(或称预设值)进行比较。
步骤S225中,若该数据文件的大小小于临界值,表示该数据文件不大,如在1M以下,可以使用HTTP方式进行下载,因为如果下载数据文件比较大,利用HTTP方式下载会加重服务器的负荷。
步骤S230中,若该数据文件的大小大于或等于临界值,表示该数据文件较大,如在1M以上,可以使用P2P方式进行下载,也就是在客户端之间能够相互传送自己已经下载的数据,从而提高下载速度,而且随着互联网越来越普及,采用P2P方式具有人数越多下载速度越快的特点。
步骤S235中,确定好使用数据下载的模式后,优选服务器会根据数据文件的重要性判断是否必须马上下载,例如,对于某些软件必须要等下载数据完才能运行的,则必须马上下载;而对于某些软件只是更新体验,对于软件本身运行并没有什么影响的,属于非必须的,则可以将下载模块的进程优先级降到最低。
步骤S240中,若优选服务器判断出需要马上下载的,则直接从优选服务器上下载数据,也就是从优选服务器上进行全速下载。
步骤S245中,否则,则继续判断终端当前机器的具体情况,包括:终端的CPU利用率和网络连接状况,如当前网络流量。
步骤S250中,若判断出当前终端的CPU利用率(或称占用率)较低,如在5%以下;网络带宽的流量也较低,如在10K以下;认为当前终端处于闲时,则从优选服务器上进行全速下载。
步骤S255中,否则,当判断出上述两项指标都较高时,认为当前终端机器处于忙时,则从优选服务器上进行下载并限制该下载的速度,以节省资源不影响用户的其它操作。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若对本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (9)

1、一种数据下载的方法,下载信息服务器记录提供数据下载的服务器地址,其特征在于,当终端请求下载数据时,根据服务器和终端的具体情况、需要下载的数据文件的大小确定下载策略,具体包括以下步骤:
S1.根据所有服务器返回的网络服务质量值与响应时长确定提供数据下载的优选服务器;
S2.根据需要下载的数据文件的大小确定数据下载的模式;
S3.根据所述终端当前的CPU与网络带宽的占用率调整数据下载的速度。
2、根据权利要求1所述的方法,其特征在于,在执行所述步骤S1之前进一步包括:所述终端向所述下载信息服务器获取提供数据下载的服务器地址。
3、根据权利要求2所述的方法,其特征在于,所述步骤S1包括:
S11.所述终端根据所述服务器地址向每个服务器发送数据包,所述数据包包含当前时间戳;
S12.所述每个服务器收到所述数据包后,均向所述终端返回预设网络服务质量值和所述数据包;
S13.所述终端将所述每个服务器返回的网络服务器质量值和响应时长的进行比较判断,并根据所述比较判断的结果确定数据下载的优选服务器。
4、根据权利要求3所述的方法,其特征在于,所述步骤S13中,所述响应时长由以下式子定义:
响应时长=返回所述数据包时的时间戳-发送所述数据包时的时间戳。
5、根据权利要求1所述的方法,其特征在于,所述步骤S2包括:
S21.所述终端向所述优选服务器请求获取所述需要下载的数据文件的大小,并将其与预先保存在所述终端的临界值进行比较判断;
S22.若大于或等于所述临界值,则使用点对点的方式进行下载;如小于所述临界值,则使用HTTP的方式下载。
6、根据权利要求1所述的方法,其特征在于,在执行所述步骤S3之前进一步包括:判断所述数据文件的重要性。
7、根据权利要求6所述的方法,其特征在于,若所述数据文件重要,则直接从所述优选服务器上进行全速下载;否则执行所述步骤S3。
8、根据权利要求1所述的方法,其特征在于,所述步骤S3包括:
若当前所述终端的CPU与网络带宽的占用率比预设值高,表示当前终端机器处于忙时,则从所述优选服务器上进行下载并限制该下载的速度;
若当前所述CPU与网络带宽的占用率比预设值低,表示当前终端机器处于闲时,则从所述优选服务器上进行全速下载。
9、一种数据下载的系统,包括至少一个以上的请求数据下载的终端,至少一个以上的提高数据下载的服务器以及记录提供数据下载的服务器地址的下载信息服务器,其特征在于,还包括:
一下载模块,所述下载模块设置在终端软件,用于接收数据下载请求以及根据服务器和终端的具体情况、需要下载的数据文件的大小确定下载策略。
CN 200610034514 2006-03-17 2006-03-17 一种数据下载的方法及其系统 Pending CN101039187A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200610034514 CN101039187A (zh) 2006-03-17 2006-03-17 一种数据下载的方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200610034514 CN101039187A (zh) 2006-03-17 2006-03-17 一种数据下载的方法及其系统

Publications (1)

Publication Number Publication Date
CN101039187A true CN101039187A (zh) 2007-09-19

Family

ID=38889847

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200610034514 Pending CN101039187A (zh) 2006-03-17 2006-03-17 一种数据下载的方法及其系统

Country Status (1)

Country Link
CN (1) CN101039187A (zh)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101764829A (zh) * 2008-11-13 2010-06-30 北京搜狗科技发展有限公司 浏览器获得网络资源的方法及浏览器
CN101827354A (zh) * 2010-03-24 2010-09-08 中兴通讯股份有限公司 一种优化移动终端下载速度的方法及系统
WO2010139161A1 (zh) * 2009-06-04 2010-12-09 中兴通讯股份有限公司 一种m2m平台及大容量下载的负荷分担实现方法
CN102209107A (zh) * 2011-05-11 2011-10-05 奇智软件(北京)有限公司 一种智能限速方法和装置、一种下载系统
CN102437965A (zh) * 2012-01-13 2012-05-02 北京润通丰华科技有限公司 目标站点的访问方法及装置
CN102904966A (zh) * 2012-08-03 2013-01-30 新游网络科技有限公司 用于控制数据传输和接收网络的方法及设备
CN102932273A (zh) * 2012-10-17 2013-02-13 北京奇虎科技有限公司 一种用于调节进程带宽占用的方法及装置
CN102957549A (zh) * 2011-08-19 2013-03-06 深圳市快播科技有限公司 一种跨平台的远程服务器管理系统及方法
CN101902449B (zh) * 2009-05-31 2013-08-07 友益(Ux)有限公司 网络设备之间持续http连接的计算机实现方法与系统
CN103414736A (zh) * 2011-05-11 2013-11-27 北京奇虎科技有限公司 一种智能限速方法和装置、一种下载系统
CN103873513A (zh) * 2012-12-13 2014-06-18 中国电信股份有限公司 自适应下载方法与系统
CN102082807B (zh) * 2009-12-01 2014-11-05 突触计算机系统(上海)有限公司 基于多协议的文件传输方法及装置
CN104426917A (zh) * 2013-08-19 2015-03-18 中兴通讯股份有限公司 一种下载处理方法、下载处理装置及客户端
CN105007339A (zh) * 2015-08-25 2015-10-28 广东欧珀移动通信有限公司 资源下载方法、装置以及智能终端
CN105592143A (zh) * 2015-11-23 2016-05-18 杭州华三通信技术有限公司 一种文件加载方法及装置
CN105847442A (zh) * 2016-05-27 2016-08-10 腾讯科技(深圳)有限公司 一种下载速度调整方法、后台服务器、终端及系统
CN107104906A (zh) * 2017-04-24 2017-08-29 腾讯科技(深圳)有限公司 一种带宽控制的方法及服务器
CN107819802A (zh) * 2016-09-13 2018-03-20 华为软件技术有限公司 一种在节点集群中的镜像获取方法、节点设备及服务器
CN108989272A (zh) * 2017-06-07 2018-12-11 北京视联动力国际信息技术有限公司 一种数据处理方法、装置和电子设备
CN110140334A (zh) * 2016-11-03 2019-08-16 弗劳恩霍夫应用研究促进协会 基于网络的下载/流传输构思
CN110278232A (zh) * 2018-03-16 2019-09-24 腾讯科技(深圳)有限公司 一种控制数据下载的方法及装置、系统
CN110620802A (zh) * 2018-06-20 2019-12-27 华为技术有限公司 一种负载均衡方法和装置
CN110825402A (zh) * 2019-09-26 2020-02-21 华为技术有限公司 一种下载数据包的方法及装置
WO2022267692A1 (zh) * 2021-06-23 2022-12-29 中兴通讯股份有限公司 数据处理方法、文件服务系统、终端设备以及存储介质

Cited By (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101764829A (zh) * 2008-11-13 2010-06-30 北京搜狗科技发展有限公司 浏览器获得网络资源的方法及浏览器
CN101902449B (zh) * 2009-05-31 2013-08-07 友益(Ux)有限公司 网络设备之间持续http连接的计算机实现方法与系统
CN101909283B (zh) * 2009-06-04 2013-06-12 中兴通讯股份有限公司 一种m2m平台及大容量下载的负荷分担实现方法
WO2010139161A1 (zh) * 2009-06-04 2010-12-09 中兴通讯股份有限公司 一种m2m平台及大容量下载的负荷分担实现方法
CN102082807B (zh) * 2009-12-01 2014-11-05 突触计算机系统(上海)有限公司 基于多协议的文件传输方法及装置
WO2011116576A1 (zh) * 2010-03-24 2011-09-29 中兴通讯股份有限公司 一种优化移动终端下载速度的方法及系统
CN101827354A (zh) * 2010-03-24 2010-09-08 中兴通讯股份有限公司 一种优化移动终端下载速度的方法及系统
CN102209107B (zh) * 2011-05-11 2013-06-19 奇智软件(北京)有限公司 一种智能限速方法和装置、一种下载系统
CN102209107A (zh) * 2011-05-11 2011-10-05 奇智软件(北京)有限公司 一种智能限速方法和装置、一种下载系统
CN103414736A (zh) * 2011-05-11 2013-11-27 北京奇虎科技有限公司 一种智能限速方法和装置、一种下载系统
CN102957549A (zh) * 2011-08-19 2013-03-06 深圳市快播科技有限公司 一种跨平台的远程服务器管理系统及方法
CN102437965B (zh) * 2012-01-13 2016-04-27 北京润通丰华科技有限公司 目标站点的访问方法及装置
CN102437965A (zh) * 2012-01-13 2012-05-02 北京润通丰华科技有限公司 目标站点的访问方法及装置
CN102904966A (zh) * 2012-08-03 2013-01-30 新游网络科技有限公司 用于控制数据传输和接收网络的方法及设备
CN102932273B (zh) * 2012-10-17 2015-07-01 北京奇虎科技有限公司 一种用于调节进程带宽占用的方法及装置
CN102932273A (zh) * 2012-10-17 2013-02-13 北京奇虎科技有限公司 一种用于调节进程带宽占用的方法及装置
CN103873513A (zh) * 2012-12-13 2014-06-18 中国电信股份有限公司 自适应下载方法与系统
CN104426917A (zh) * 2013-08-19 2015-03-18 中兴通讯股份有限公司 一种下载处理方法、下载处理装置及客户端
CN105007339A (zh) * 2015-08-25 2015-10-28 广东欧珀移动通信有限公司 资源下载方法、装置以及智能终端
CN105592143A (zh) * 2015-11-23 2016-05-18 杭州华三通信技术有限公司 一种文件加载方法及装置
CN105592143B (zh) * 2015-11-23 2019-09-06 新华三技术有限公司 一种文件加载方法及装置
CN105847442B (zh) * 2016-05-27 2019-04-02 腾讯科技(深圳)有限公司 一种下载速度调整方法、后台服务器、终端及系统
CN105847442A (zh) * 2016-05-27 2016-08-10 腾讯科技(深圳)有限公司 一种下载速度调整方法、后台服务器、终端及系统
CN107819802A (zh) * 2016-09-13 2018-03-20 华为软件技术有限公司 一种在节点集群中的镜像获取方法、节点设备及服务器
CN110140334A (zh) * 2016-11-03 2019-08-16 弗劳恩霍夫应用研究促进协会 基于网络的下载/流传输构思
CN110140334B (zh) * 2016-11-03 2022-04-29 弗劳恩霍夫应用研究促进协会 基于网络的下载/流传输构思
CN107104906A (zh) * 2017-04-24 2017-08-29 腾讯科技(深圳)有限公司 一种带宽控制的方法及服务器
CN108989272A (zh) * 2017-06-07 2018-12-11 北京视联动力国际信息技术有限公司 一种数据处理方法、装置和电子设备
CN108989272B (zh) * 2017-06-07 2022-05-17 视联动力信息技术股份有限公司 一种数据处理方法、装置和电子设备
CN110278232A (zh) * 2018-03-16 2019-09-24 腾讯科技(深圳)有限公司 一种控制数据下载的方法及装置、系统
CN110278232B (zh) * 2018-03-16 2021-08-17 腾讯科技(深圳)有限公司 一种控制数据下载的方法及装置、系统
CN110620802A (zh) * 2018-06-20 2019-12-27 华为技术有限公司 一种负载均衡方法和装置
CN110620802B (zh) * 2018-06-20 2021-04-09 华为技术有限公司 一种负载均衡方法和装置
CN110825402A (zh) * 2019-09-26 2020-02-21 华为技术有限公司 一种下载数据包的方法及装置
WO2022267692A1 (zh) * 2021-06-23 2022-12-29 中兴通讯股份有限公司 数据处理方法、文件服务系统、终端设备以及存储介质

Similar Documents

Publication Publication Date Title
CN101039187A (zh) 一种数据下载的方法及其系统
US9998533B2 (en) P2P content caching system and method
CN1777317A (zh) 一种实现无线终端程序更新的方法
CN1300719C (zh) 计算机软件升级的方法
CN1293780C (zh) 使用cbs提供移动电话广播服务的系统及方法
CN1852105A (zh) 一种实现端到端文件共享的系统及方法
US20100115031A1 (en) System and Method For Enabling P2P Applications in a Wireless Mobile Network
CN1681248A (zh) 服务器与客户端间传送用于数据同步的数据的方法与系统
CN1925444A (zh) 在p2p网络中建立点对点连接的方法及在p2p网络中的节点
JP2005525611A (ja) コンピューターネットワークを通るコンテンツの配給送達を容易にする方法および装置
CN1373618A (zh) 链路管理器及链路管理方法
CN1853365A (zh) 用于管理牵涉多个不同网络的到移动装置的组播传送的方法和设备
CN1859121A (zh) 一种实现代理下载的方法、装置及系统
CN1251552C (zh) 移动通信终端及始终保持的分组数据协议上下文管理方法
CN1897588A (zh) 一种混合模式的网络文件传输方法及系统
CN101039281A (zh) 一种流媒体服务器负荷分担方法
CN101043345A (zh) 一种基于点对点技术的图片共享系统和方法
CN1402466A (zh) 用于数据通信的装置和方法
CN1859151A (zh) 通信系统中升级远程子系统的方法
WO2021060957A1 (en) Method and device for performing asynchronous operations in a communication system
CN101039250A (zh) 一种图片共享系统和方法
CN101047580A (zh) 创建点对点数据通道的方法
CN1171146C (zh) 用于下载数据的方法
CN1324908C (zh) 无线数据通信系统中用户激活请求的处理方法
CN1805437A (zh) 一种数据同步服务器存储资源处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Open date: 20070919