CN104394095B - 数据传输方法、系统及源服务器 - Google Patents

数据传输方法、系统及源服务器 Download PDF

Info

Publication number
CN104394095B
CN104394095B CN201410642431.8A CN201410642431A CN104394095B CN 104394095 B CN104394095 B CN 104394095B CN 201410642431 A CN201410642431 A CN 201410642431A CN 104394095 B CN104394095 B CN 104394095B
Authority
CN
China
Prior art keywords
data
transmitted
transmission
queue
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410642431.8A
Other languages
English (en)
Other versions
CN104394095A (zh
Inventor
赵剑锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Qihoo Technology Co Ltd
Original Assignee
Beijing Qihoo Technology Co Ltd
Qizhi Software Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Qihoo Technology Co Ltd, Qizhi Software Beijing Co Ltd filed Critical Beijing Qihoo Technology Co Ltd
Priority to CN201410642431.8A priority Critical patent/CN104394095B/zh
Publication of CN104394095A publication Critical patent/CN104394095A/zh
Application granted granted Critical
Publication of CN104394095B publication Critical patent/CN104394095B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供了一种数据传输方法、系统及源服务器。其中,数据传输方法包括:根据当前待传输数据的参数分配N个用于传输待传输数据的队列,其中,N为不小于1的正整数;利用分配的N个队列向多个目标服务器传输待传输数据;在传输过程中,当待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输待传输数据的队列,其中,M为不小于1的正整数;以及利用重新分配的M个队列继续进行数据传输操作。依据本发明实施例能够达到保证数据传输效率的同时提高源服务器的资源利用率的有益效果。

Description

数据传输方法、系统及源服务器
技术领域
本发明涉及数据传输领域,特别是涉及一种数据传输方法、系统及源服务器。
背景技术
随着网络技术的快速发展,在大型网站的源服务器,每时每刻都有很多新生成的网页文件、代码文件和配置文件等各种类型的数据。为保证互联网用户能够及时访问或者使用,源服务器需要以较快的速度把新生成的数据分发到数十台、甚至数百台位于不同地点的目标服务器上。
源服务器将生成的数据传输至各个目标服务器时,由于不同的待传输数据的参数不一致,导致在对不同的待传输数据进行传输的过程中对于数据传输速度、数据传输效率以及数据传输过程中的丢包率等要求不一。而数据传输过程中对各种传输参数的要求不一,容易进一步导致传输不同的待传输数据对源服务器的资源的利用率不同。而现有技术中无法根据不同待传输数据的参数的不一致在传输过程中对源服务器的利用进行对应调整,因此,容易导致传输效率低下以及源服务器资源利用率低下等问题。
发明内容
鉴于上述问题,本发明的实施例提出了一种数据传输方法、系统及源服务器,以克服上述问题或者至少部分地解决上述问题。
依据本发明的一个方面,提供了一种数据传输方法,应用于向多个目标服务器进行数据传输的源服务器,包括:根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,其中,N为不小于1的正整数;利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据;在传输过程中,当所述待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输所述待传输数据的队列,其中,M为不小于1的正整数;以及利用重新分配的所述M个队列继续进行数据传输操作。
可选地,所述数据传输方法还包括:使用重新分配的所述M个队列继续进行数据传输操作之后,当所述待传输数据的参数再次发生变化,重复执行队列重新分配的操作以及数据传输操作,直至所述数据传输操作结束。
可选地,所述数据传输方法应用于跨网络数据传输过程,其中,所述跨网络指源服务器和目标服务器分别位于不同的网络中。
可选地,根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,包括:根据所述待传输数据的参数确定所述源服务器的配置信息,其中,所述配置信息包括进程数量信息、网络连接数信息中的至少一个;以及根据所述配置信息分配N个用于传输所述待传输数据的队列。
可选地,所述利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据,包括:根据所述待传输数据的参数确定所述待传输数据的优先级级别;利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序;以及根据排序结果传输所述待传输数据至所述多个目标服务器。
可选地,利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序,包括:将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输所述优先级较高的待传输数据。
可选地,所述数据传输方法还包括:进行所述数据传输操作之后,接收所述多个目标服务器返回的传输结果。
可选地,所述数据传输方法还包括:接收所述传输结果之后,根据所述传输结果进行传输状态分析,得到分析结果,其中,所述传输状态包括以下至少之一:传输速度、传输成功率、传输丢包率;以及,利用所述分析结果重新分配队列。
可选地,所述数据传输方法还包括:接收所述传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,则重新传输所述待传输数据至该目标服务器。
依据本发明的另一个方面,还提供了一种源服务器,适于向多个目标服务器传输数据,包括:分配模块,适于根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,其中,N为不小于1的正整数;传输模块,适于利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据;监测模块,适于在传输过程中,监测当前待传输数据的参数是否发生变化,以及当监测到当前待传输数据的参数发生变化,触发所述分配模块;所述分配模块,还适于接收所述监测模块的触发,并根据变化后的参数重新分配M个用于传输所述待传输数据的队列,其中,M为不小于1的正整数;所述传输模块,还适于使用重新分配的所述M个队列继续进行数据传输操作。
可选地,所述源服务器应用于跨网络数据传输过程,其中,所述跨网络指源服务器和目标服务器分别位于不同的网络中。
可选地,所述分配模块还适于:根据所述待传输数据的参数确定本源服务器的配置信息,其中,所述配置信息包括进程数量信息、网络连接数信息中的至少一个;以及根据所述配置信息分配队列数据。
可选地,所述传输模块还包括:确定单元,适于根据所述待传输数据的参数确定所述待传输数据的优先级级别;排序单元,适于利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序;以及传输单元,适于根据排序结果进行所述数据传输操作。
可选地,所述排序单元还适于:将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输所述优先级较高的待传输数据。
可选地,所述源服务器还包括:接收模块,适于接收所述多个目标服务器返回的传输结果。
可选地,所述源服务器还包括:处理模块,适于根据所述传输结果进行传输状态分析,得到分析结果,其中,所述传输状态包括以下至少之一:传输速度、传输成功率、传输丢包率;所述分配模块,还适于利用所述分析结果重新分配队列。
可选地,所述传输模块还适于:当所述接收模块接收所述传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,重新传输所述待传输数据至该目标服务器。
依据本发明的又一方面,还提供了一种数据传输系统,包含以上所述的源服务器以及多个目标服务器。
依据本发明实施提供的数据传输方法,能够根据当前待传输数据的参数分配N个用于传输待传输数据的队列,利用分配的N个队列向多个目标服务器传输待传输数据。在传输过程中,当待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输待传输数据的队列,并利用重新分配的M个队列继续进行数据传输操作。本发明实施例提供的数据传输方法能够在数据传输过程中依据待传输数据的参数对传输所利用的队列的数目进行更改,使得源服务器的资源被更加合理地分配至传输待传输数据的队列。例如,当前待传输数据的目标服务器数量(待传输数据的参数之一)为10个,为传输待传输数据分配10个队列。若监测到传输过程中,待传输数据的目标服务器数量变为3个,继续利用之前分配的10个队列进行传输将大大浪费源服务器的资源,而依据本发明实施例能够将队列更改为3个,并利用更改后的3个队列传输待传输数据。由此可知,依据本发明实施例的数据传输方法能够根据待传输数据的参数及时对传输待传输数据所利用的队列进行重新分配,并通过重新分配队列更加合理地使用源服务器的资源,达到保证数据传输效率的同时提高源服务器的资源利用率的有益效果。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
根据下文结合附图对本发明具体实施例的详细描述,本领域技术人员将会更加明了本发明的上述以及其他目的、优点和特征。
附图说明
通过阅读下文实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明一个实施例的数据传输方法的处理流程示意图;
图2示出了根据本发明一个实施例的队列中缓存的待传输数据的示意图;
图3示出了根据本发明一个实施例的对队列中缓存的待传输数据进行排序的结果的示意图;
图4示出了根据本发明一个实施例的源服务器的结构示意图;
图5示出了根据本发明另一个实施例的源服务器的结构示意图;
图6示出了根据本发明又一个实施例的源服务器的结构示意图;以及
图7示出了根据本发明一个实施例的数据传输系统的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
相关技术中提及,若在数据传输过程中无法根据待传输数据的参数的不一致对源服务器的利用进行对应调整,容易导致传输效率低下,并且源服务器资源利用率低下的问题。
为解决上述技术问题,本发明实施例提供了一种数据传输方法,应用于向多个目标服务器进行数据传输的源服务器。图1示出了根据本发明一个实施例的数据传输方法的处理流程示意图。请参考图1,该流程至少包括如下步骤:
步骤S102:根据当前待传输数据的参数分配N个用于传输待传输数据的队列,其中,N为不小于1的正整数;
步骤S104:利用分配的N个队列向多个目标服务器传输待传输数据;
步骤S106:在传输过程中,当待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输待传输数据的队列,其中,M为不小于1的正整数;
步骤S108:利用重新分配的M个队列继续进行数据传输操作。
依据本发明实施提供的数据传输方法,能够根据当前待传输数据的参数分配N个用于传输待传输数据的队列,利用分配的N个队列向多个目标服务器传输待传输数据。在传输过程中,当待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输待传输数据的队列,并利用重新分配的M个队列继续进行数据传输操作。本发明实施例提供的数据传输方法能够在数据传输过程中依据待传输数据的参数对传输所利用的队列的数目进行更改,使得源服务器的资源被更加合理地分配至传输待传输数据的队列。例如,当前待传输数据的目标服务器数量(待传输数据的参数之一)为10个,为传输待传输数据分配10个队列。若监测到传输过程中,待传输数据的目标服务器数量变为3个,继续利用之前分配的10个队列进行传输将大大浪费源服务器的资源,而依据本发明实施例能够将队列更改为3个,并利用更改后的3个队列传输待传输数据。由此可知,依据本发明实施例的数据传输方法能够根据待传输数据的参数及时对传输待传输数据所利用的队列进行重新分配,并通过重新分配队列更加合理地使用源服务器的资源,达到保证数据传输效率的同时提高源服务器的资源利用率的有益效果。
上文提及,本发明实施例中,能够在传输过程中,根据待传输数据的参数的变化对传输待传输数据的队列进行重新分配,并根据重新分配后的队列继续传输待传输数据。实际操作中,源服务器传输至目标服务器的待传输数据每时每刻都在生成以及等待被传输,进而,待传输数据的参数在传输过程中可能多次变化。因此,本发明实施例中不限定传输过程中根据待传输数据的参数的变化对传输待传输数据的队列进行重新分配的次数。即,执行图1所示的步骤S108之后(使用重新分配的M个队列继续进行数据传输操作之后),当待传输数据的参数再次发生变化,本发明实施例重复执行队列重新分配的操作以及数据传输操作,直至数据传输操作结束。
由上文可知,本发明实施例中,在数据传输过程中,能够根据待传输数据的参数的变化对传输待传输数据的队列进行实时更改,因此,利用本发明实施例的数据传输方法,能够通过对队列的多次重新分配更加合理地使用源服务器的资源,提高源服务器的资源利用率。如图1中的步骤S102以及步骤S106所示,本发明实施例根据待传输数据的参数分配用于传输待传输数据的队列。具体地,本发明实施例根据待传输数据的参数确定源服务器的配置信息,并根据配置信息分配用于传输待传输数据的队列。其中,源服务器的配置信息包括进程数量信息、网络连接数信息等任意源服务器的配置类信息。
例如,根据第一批待传输数据的目标服务器的数量(即待传输数据的参数之一)为100,确定源服务器的网络连接数信息(即源服务器的配置信息之一)为100,并根据源服务器的网络连接数信息为100分配10个用于传输第一批待传输数据的队列,则10个队列中每个队列执行10次传输操作,即能够将第一批待传输数据传输至100个目标服务器。
当获取到第二批待传输数据,若确定第二批待传输数据的目标服务器的数量更改为9个,则源服务器的网络连接数信息为9。若继续使用之前传输第一批待传输数据的10个队列对第二批待传输数据进行传输,即使每个队列仅执行一次传输操作,仍旧存在一个队列空闲,即源服务的器资源被浪费在空置的传输队列上,因此,根据源服务器的网络连接数信息为9可以重新分配不大于9的任意个数的队列对第二批待传输数据进行传输,如根据9为3的倍数,分配3个队列对第二批待传输数据进行传输。
上文对本发明实施例根据待传输数据的参数分配用于传输待传输数据的队列的过程进行了介绍,之后,本发明实施例利用分配的队列进行数据传输操作。具体地,本发明实施例首先根据待传输数据的参数确定待传输数据的优先级级别,其次,利用待传输数据的优先级级别在用于传输待传输数据的队列中对缓存的待传输数据进行排序,最后,根据排序结果传输待传输数据至多个目标服务器。
例如,图2示出了根据本发明一个实施例的对队列中缓存的待传输数据进行排序的示意图。如图2所示的队列1至队列5。设当前在队列1至队列5中缓存的待传输数据为第一数据,第一数据需要传输至15个目标服务器,即队列1至队列5发送3次则能够将第一数据全部发送至对应的目标服务器。为简明示意,图2中即示为队列1至队列5中,每个队列缓存3份待传输数据等待被传输。然而,本领域技术人员应该了解,每一队列中待传数据的数量并非本发明的限制。在上述实施例中,还可以根据第一数据的参数确定第一数据的重要性和/或紧急性和/或实时性要求,并根据确定结果(如重要性低、紧急性低以及实时性要求低)确定第一数据的优先级级别为低。
现将新生成的第二数据以及第三数据放于队列中等待发送。其中,第二数据的目标服务器为4个,第三数据的目标服务器为9个。并且根据第二数据的参数得到确定结果为:重要性高、紧急性高以及实时性要求高,则第二数据的优先级级别为高;以及根据第三数据的参数得到确定结果为:重要性中、紧急性低以及实时性要求高,则第三数据的优先级级别为中。在队列1至队列5中对第一数据、第二数据以及第三数据进行排序,排序结果如图3所示。
参见图3,在队列1至队列5任一队列中,优先级级别为高的第二数据置于优先级级别为中的第三数据之前,并且优先级级别为中的第三数据置于优先级级别为底的第一数据之前,即本发明实施例将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输优先级较高的待传输数据。本发明实施例中,对队列中的待传输数据根据优先级级别进行排序,可以保证实时性要求较高的、紧急的待传输数据通过队列优先传输,因此提高了对待传输数据实时性的保证,保证紧急的待传输数据及时被传输到目标服务器。
需要说明的是,上文中对待传输数据的优先级级别的确定方式以及将待传输数据分配至队列进行传输的方式仅用于示例,并非对本发明的限制。本领域的技术人员在阅读本发明的基础上,可以实施其他各种优先级别的确定方法以及待传输数据的队列分配方法以实现本发明,其皆应包括在本发明的范围之内。
利用上文的介绍在队列中对缓存的待传输数据进行排序之后,本发明实施例根据排序结果传输待传输数据至多个目标服务器。之后,接收多个目标服务器返回的传输结果。为进一步对数据传输操作进行完善,本发明实施例根据目标服务器返回的传输结果进行传输状态分析,并根据分析结果对后续传输操作进行调整和/或优化(例如根据分析结果重新分配队列)。另外,接收到多个目标服务器返回的传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,重新传输待传输数据至该目标服务器,以有效增加数据传输成功率。
由上文可知,本发明实施例提供的数据传输方法能够在保证数据传输速度的同时,提高数据传输的稳定性,提升源服务器资源的利用率,因此,能够有效提高数据传输效率。举例来说,本发明实施例提供的数据传输方法应用于跨网络数据传输过程,其中,跨网络指源服务器和目标服务器分别位于不同的网络中。在跨网络数据传输过程中,由于源服务器和目标服务器处于不同的网络,数据传输过程中容易出现稳定性差导致丢包率高、数据传输速度慢等问题。而将本发明实施例提供的数据传输方法应用于跨网络数据传输过程,能够更加明显地提高数据传输效率。
基于上文各实施例提供的数据传输方法,基于同一发明构思,本发明实施例提供了一种源服务器,其适于向多个目标服务器传输数据。图4示出了根据本发明一个实施例的源服务器的结构示意图。参见图4,本发明实施例的源服务器至少包括分配模块410、传输模块420以及监测模块430。
现介绍本发明实施例的源服务器的各器件或组成的功能以及各部分间的连接关系:
分配模块410:适于根据当前待传输数据的参数分配N个用于传输待传输数据的队列,其中,N为不小于1的正整数;
传输模块420:与分配模块410相耦合,适于利用分配的N个队列向多个目标服务器传输待传输数据;
监测模块430:与分配模块410相耦合,适于在传输过程中,监测当前待传输数据的参数是否发生变化;以及
当监测到当前待传输数据的参数发生变化,触发分配模块;
分配模块410:还适于接收监测模块的触发,并根据变化后的参数重新分配M个用于传输待传输数据的队列,其中,M为不小于1的正整数;
传输模块420:还适于使用重新分配的M个队列继续进行数据传输操作。
在一个实施例中,源服务器应用于跨网络数据传输过程,其中,跨网络指源服务器和目标服务器分别位于不同的网络中。
在一个实施例中,分配模块410还适于:
根据待传输数据的参数确定本源服务器的配置信息,其中,配置信息包括进程数量信息、网络连接数信息中的至少一个;
根据配置信息分配队列数据。
图5示出了根据本发明另一个实施例的源服务器的结构示意图。请一并参考图4和图5,相比图4所示的源服务器,本发明实施例的传输模块420(图5所示)进一步包括:
确定单元421:适于根据待传输数据的参数确定待传输数据的优先级级别;
排序单元422:与确定单元421相耦合,适于利用待传输数据的优先级级别在N个队列中对缓存的待传输数据进行排序;
传输单元423:与排序单元422相耦合,适于根据排序结果进行数据传输操作。
在一个实施例中,排序单元422还适于:
将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输优先级较高的待传输数据。
图6示出了根据本发明又一个实施例的源服务器的结构示意图。请一并参考图4、图5以及图6,相对比图4以及图5中的源服务器,本发明实施例的源服务器(图6所示)还包括:
接收模块440:与传输模块420相耦合,适于接收多个目标服务器返回的传输结果。
在一个实施例中,相对比图4以及图5中的源服务器,本发明实施例的源服务器(图6所示)还包括:
处理模块450:与接收模块440相耦合,适于根据传输结果进行传输状态分析,得到分析结果,其中,传输状态包括以下至少之一:传输速度、传输成功率、传输丢包率;
分配模块410:还适于利用分析结果重新分配队列。
在一个实施例中,传输模块420还适于:
当接收模块440接收传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,重新传输待传输数据至该目标服务器。
根据上文各实施例提供的数据传输方法及源服务器,基于同一发明构思,本发明实施例提供了一种数据传输系统。图7示出了根据本发明一个实施例的数据传输系统的结构示意图。参见图7,本发明实施例的数据传输系统包上文介绍的源服务器710以及多个目标服务器720。需要说明的是,图7中仅示出了3个目标服务器720,实际应用中,目标服务器720的个数可以是任意整数个,本发明实施例对此并不加以限定。
根据上述任意一个实施例或多个实施例的组合,本发明实施例能够达到如下有益效果:
依据本发明实施提供的数据传输方法,能够根据当前待传输数据的参数分配N个用于传输待传输数据的队列,利用分配的N个队列向多个目标服务器传输待传输数据。在传输过程中,当待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输待传输数据的队列,并利用重新分配的M个队列继续进行数据传输操作。本发明实施例提供的数据传输方法能够在数据传输过程中依据待传输数据的参数对传输所利用的队列的数目进行更改,使得源服务器的资源被更加合理地分配至传输待传输数据的队列。例如,当前待传输数据的目标服务器数量(待传输数据的参数之一)为10个,为传输待传输数据分配10个队列。若监测到传输过程中,待传输数据的目标服务器数量变为3个,若继续利用之前分配的10个队列进行传输将大大浪费源服务器的资源,则依据本发明实施例能够将队列更改为3个,并利用更改后的队列传输待传输数据。由此可知,依据本发明实施例的数据传输方法能够根据待传输数据的参数及时对传输待传输数据所利用的队列进行重新分配,并通过重新分配队列更加合理地使用源服务器的资源,达到保证数据传输效率的同时提高源服务器的资源利用率的有益效果。
另外,本发明实施例提供的数据传输方法对队列中的待传输数据根据优先级级别进行排序,可以保证实时性要求较高的、紧急的待传输数据通过队列优先传输,因此提高了对待传输数据实时性的保证,保证紧急的待传输数据及时被传输到目标服务器。而本发明实施例提供的数据传输方法应用于跨网络数据传输过程,能够解决跨网络数据传输过程中容易出现稳定性差导致的丢包率高、数据传输速度慢等问题,更加明显地提高数据传输效率。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的设备或者装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包括”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
至此,本领域技术人员应认识到,虽然本文已详尽示出和描述了本发明的多个示例性实施例,但是,在不脱离本发明精神和范围的情况下,仍可根据本发明公开的内容直接确定或推导出符合本发明原理的许多其他变型或修改。因此,本发明的范围应被理解和认定为覆盖了所有这些其他变型或修改。
本发明还公开了A1.一种数据传输方法,应用于向多个目标服务器进行数据传输的源服务器,包括:
根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,其中,N为不小于1的正整数;
利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据;
在传输过程中,当所述待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输所述待传输数据的队列,其中,M为不小于1的正整数;以及
利用重新分配的所述M个队列继续进行数据传输操作。
A2.根据A1所述的方法,其中,还包括:
使用重新分配的所述M个队列继续进行数据传输操作之后,当所述待传输数据的参数再次发生变化,重复执行队列重新分配的操作以及数据传输操作,直至所述数据传输操作结束。
A3.根据A1或A2所述的方法,其中,所述数据传输方法应用于跨网络数据传输过程,其中,所述跨网络指源服务器和目标服务器分别位于不同的网络中。
A4.根据A1至A3任一项所述的方法,其中,根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,包括:
根据所述待传输数据的参数确定所述源服务器的配置信息,其中,所述配置信息包括进程数量信息、网络连接数信息中的至少一个;以及
根据所述配置信息分配N个用于传输所述待传输数据的队列。
A5.根据A1至A4任一项所述的方法,其中,所述利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据,包括:
根据所述待传输数据的参数确定所述待传输数据的优先级级别;
利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序;以及
根据排序结果传输所述待传输数据至所述多个目标服务器。
A6.根据A5所述的方法,其中,利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序,包括:
将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输所述优先级较高的待传输数据。
A7.根据A1至A6任一项所述的方法,其中,还包括:
进行所述数据传输操作之后,接收所述多个目标服务器返回的传输结果。
A8.根据A7所述的方法,其中,还包括:
接收所述传输结果之后,根据所述传输结果进行传输状态分析,得到分析结果,其中,所述传输状态包括以下至少之一:传输速度、传输成功率、传输丢包率;以及
利用所述分析结果重新分配队列。
A9.根据A7所述的方法,其中,还包括:
接收所述传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,则重新传输所述待传输数据至该目标服务器。
本发明还公开了B10.一种源服务器,适于向多个目标服务器传输数据,包括:
分配模块,适于根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,其中,N为不小于1的正整数;
传输模块,适于利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据;
监测模块,适于在传输过程中,监测当前待传输数据的参数是否发生变化,以及当监测到当前待传输数据的参数发生变化,触发所述分配模块;
所述分配模块,还适于接收所述监测模块的触发,并根据变化后的参数重新分配M个用于传输所述待传输数据的队列,其中,M为不小于1的正整数;
所述传输模块,还适于使用重新分配的所述M个队列继续进行数据传输操作。
B11.根据B10所述的源服务器,其中,所述源服务器应用于跨网络数据传输过程,其中,所述跨网络指源服务器和目标服务器分别位于不同的网络中。
B12.根据B10或B11所述的源服务器,其中,所述分配模块还适于:
根据所述待传输数据的参数确定本源服务器的配置信息,其中,所述配置信息包括进程数量信息、网络连接数信息中的至少一个;以及根据所述配置信息分配队列数据。
B13.根据B10至B12任一项所述的源服务器,其中,所述传输模块还包括:
确定单元,适于根据所述待传输数据的参数确定所述待传输数据的优先级级别;
排序单元,适于利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序;以及
传输单元,适于根据排序结果进行所述数据传输操作。
B14.根据B13所述的源服务器,其中,所述排序单元还适于:
将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输所述优先级较高的待传输数据。
B15.根据B10至B14任一项所述的源服务器,其中,还包括:
接收模块,适于接收所述多个目标服务器返回的传输结果。
B16.根据B15所述的源服务器,其中,还包括:
处理模块,适于根据所述传输结果进行传输状态分析,得到分析结果,其中,所述传输状态包括以下至少之一:传输速度、传输成功率、传输丢包率;
所述分配模块,还适于利用所述分析结果重新分配队列。
B17.根据B15所述的源服务器,其中,所述传输模块还适于:
当所述接收模块接收所述传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,重新传输所述待传输数据至该目标服务器。
本发明还公开了C18.一种数据传输系统,包含B10至B17中任一项所述的源服务器以及多个目标服务器。

Claims (18)

1.一种数据传输方法,应用于向多个目标服务器进行数据传输的源服务器,包括:
根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,其中,N为不小于1的正整数,所述当前待传输数据的参数至少包括所述当前待传输数据的目标服务器数量;
利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据;
在传输过程中,当所述待传输数据的参数发生变化时,根据变化后的参数重新分配M个用于传输所述待传输数据的队列,其中,M为不小于1的正整数;以及
利用重新分配的所述M个队列继续进行数据传输操作。
2.根据权利要求1所述的方法,其中,还包括:
使用重新分配的所述M个队列继续进行数据传输操作之后,当所述待传输数据的参数再次发生变化,重复执行队列重新分配的操作以及数据传输操作,直至所述数据传输操作结束。
3.根据权利要求1或2所述的方法,其中,所述数据传输方法应用于跨网络数据传输过程,其中,所述跨网络指源服务器和目标服务器分别位于不同的网络中。
4.根据权利要求1所述的方法,其中,根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,包括:
根据所述待传输数据的参数确定所述源服务器的配置信息,其中,所述配置信息包括进程数量信息、网络连接数信息中的至少一个;以及
根据所述配置信息分配N个用于传输所述待传输数据的队列。
5.根据权利要求1所述的方法,其中,所述利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据,包括:
根据所述待传输数据的参数确定所述待传输数据的优先级级别;
利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序;以及
根据排序结果传输所述待传输数据至所述多个目标服务器。
6.根据权利要求5所述的方法,其中,利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序,包括:
将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输所述优先级较高的待传输数据。
7.根据权利要求1所述的方法,其中,还包括:
进行所述数据传输操作之后,接收所述多个目标服务器返回的传输结果。
8.根据权利要求7所述的方法,其中,还包括:
接收所述传输结果之后,根据所述传输结果进行传输状态分析,得到分析结果,其中,所述传输状态包括以下至少之一:传输速度、传输成功率、传输丢包率;以及
利用所述分析结果重新分配队列。
9.根据权利要求7所述的方法,其中,还包括:
接收所述传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,则重新传输所述待传输数据至该目标服务器。
10.一种源服务器,适于向多个目标服务器传输数据,包括:
分配模块,适于根据当前待传输数据的参数分配N个用于传输所述待传输数据的队列,其中,N为不小于1的正整数,所述当前待传输数据的参数至少包括所述当前待传输数据的目标服务器数量;
传输模块,适于利用分配的所述N个队列向所述多个目标服务器传输所述待传输数据;
监测模块,适于在传输过程中,监测当前待传输数据的参数是否发生变化,以及当监测到当前待传输数据的参数发生变化,触发所述分配模块;
所述分配模块,还适于接收所述监测模块的触发,并根据变化后的参数重新分配M个用于传输所述待传输数据的队列,其中,M为不小于1的正整数;
所述传输模块,还适于使用重新分配的所述M个队列继续进行数据传输操作。
11.根据权利要求10所述的源服务器,其中,所述源服务器应用于跨网络数据传输过程,其中,所述跨网络指源服务器和目标服务器分别位于不同的网络中。
12.根据权利要求10所述的源服务器,其中,所述分配模块还适于:
根据所述待传输数据的参数确定本源服务器的配置信息,其中,所述配置信息包括进程数量信息、网络连接数信息中的至少一个;以及根据所述配置信息分配队列数据。
13.根据权利要求10所述的源服务器,其中,所述传输模块还包括:
确定单元,适于根据所述待传输数据的参数确定所述待传输数据的优先级级别;
排序单元,适于利用所述待传输数据的优先级级别在所述N个队列中对缓存的所述待传输数据进行排序;以及
传输单元,适于根据排序结果进行所述数据传输操作。
14.根据权利要求13所述的源服务器,其中,所述排序单元还适于:
将优先级较高的待传输数据置于优先级较低的待传输数据之前,以优先传输所述优先级较高的待传输数据。
15.根据权利要求10所述的源服务器,其中,还包括:
接收模块,适于接收所述多个目标服务器返回的传输结果。
16.根据权利要求15所述的源服务器,其中,还包括:
处理模块,适于根据所述传输结果进行传输状态分析,得到分析结果,其中,所述传输状态包括以下至少之一:传输速度、传输成功率、传输丢包率;
所述分配模块,还适于利用所述分析结果重新分配队列。
17.根据权利要求15所述的源服务器,其中,所述传输模块还适于:
当所述接收模块接收所述传输结果之后,若任一目标服务器返回的传输结果为传输操作失败,重新传输所述待传输数据至该目标服务器。
18.一种数据传输系统,包含权利要求10至17任一项所述的源服务器以及多个目标服务器。
CN201410642431.8A 2014-11-07 2014-11-07 数据传输方法、系统及源服务器 Active CN104394095B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410642431.8A CN104394095B (zh) 2014-11-07 2014-11-07 数据传输方法、系统及源服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410642431.8A CN104394095B (zh) 2014-11-07 2014-11-07 数据传输方法、系统及源服务器

Publications (2)

Publication Number Publication Date
CN104394095A CN104394095A (zh) 2015-03-04
CN104394095B true CN104394095B (zh) 2018-05-25

Family

ID=52611931

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410642431.8A Active CN104394095B (zh) 2014-11-07 2014-11-07 数据传输方法、系统及源服务器

Country Status (1)

Country Link
CN (1) CN104394095B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106603214B (zh) * 2016-12-14 2019-12-27 北京无线天利移动信息技术股份有限公司 一种数据传输方法及装置
CN106790633B (zh) * 2017-01-03 2019-11-08 北京电子工程总体研究所 一种基于优先级动态调整的远程多文件传输方法
CN111148159B (zh) * 2019-12-26 2023-06-09 拉扎斯网络科技(上海)有限公司 数据传输方法、装置、设备及计算机可读存储介质
CN113783798A (zh) * 2021-09-24 2021-12-10 上海明胜品智人工智能科技有限公司 数据传输方法及系统、边缘服务设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101014002A (zh) * 2006-12-12 2007-08-08 华为技术有限公司 集群消息传送方法及分布式集群系统
CN102957729A (zh) * 2011-08-26 2013-03-06 中国移动通信集团公司 一种多媒体会议音视频传输方法及设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101707399B (zh) * 2009-11-20 2013-04-03 深圳市科陆电子科技股份有限公司 电能信息采集方法及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101014002A (zh) * 2006-12-12 2007-08-08 华为技术有限公司 集群消息传送方法及分布式集群系统
CN102957729A (zh) * 2011-08-26 2013-03-06 中国移动通信集团公司 一种多媒体会议音视频传输方法及设备

Also Published As

Publication number Publication date
CN104394095A (zh) 2015-03-04

Similar Documents

Publication Publication Date Title
CN107196869B (zh) 基于主机实际负载的自适应负载均衡方法、设备和系统
CN105242956B (zh) 虚拟功能服务链部署系统及其部署方法
CN106201661B (zh) 用于弹性伸缩虚拟机集群的方法和装置
CN104394095B (zh) 数据传输方法、系统及源服务器
CN107682397B (zh) 客户资源获取方法、装置、终端设备及存储介质
CN104243405B (zh) 一种请求处理方法、装置及系统
CN104991854B (zh) 一种服务器资源的监控统计方法和系统
CN105022832B (zh) App应用程序安全下载的方法、移动终端及下载服务器
CN110290186A (zh) 一种适用于多超算中心文件传输的系统及方法
RU2014104316A (ru) Система и способ управления совместным использованием информации о загрузке ресурсов сети
EP2590113A1 (en) On demand multi-objective network optimization
CN107729564A (zh) 一种分布式的聚焦网络爬虫网页爬取方法及系统
CN105930731B (zh) 一种安全应用ta交互的方法及装置
CN106790603A (zh) 消息交互的方法、装置及系统
CN109726004B (zh) 一种数据处理方法及装置
CN110506259A (zh) 用于计算节点管理协议的系统和方法
CN105635323B (zh) 数据传输控制方法和装置
EP3021521A1 (en) A method and system for scaling, telecommunications network and computer program product
CN106569878A (zh) 一种分布式定时任务管理方法和系统
CN111198754B (zh) 一种任务调度方法及装置
CN105577958B (zh) 用于调整分流策略和分流用户请求的方法、装置及系统
CN103559239B (zh) 图片的处理方法及系统和任务服务器
CN107979644A (zh) 防止高并发的信息包下载方法、电子设备、存储介质
CN110347494A (zh) 上下文信息管理方法、装置、系统及计算机可读存储介质
CN105100224A (zh) 数据传输方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220727

Address after: Room 801, 8th floor, No. 104, floors 1-19, building 2, yard 6, Jiuxianqiao Road, Chaoyang District, Beijing 100015

Patentee after: BEIJING QIHOO TECHNOLOGY Co.,Ltd.

Address before: 100088 room 112, block D, 28 new street, new street, Xicheng District, Beijing (Desheng Park)

Patentee before: BEIJING QIHOO TECHNOLOGY Co.,Ltd.

Patentee before: Qizhi software (Beijing) Co.,Ltd.