CN103929378B - 跨域数据传输的通信链路分配及跨域数据传输方法和系统 - Google Patents

跨域数据传输的通信链路分配及跨域数据传输方法和系统 Download PDF

Info

Publication number
CN103929378B
CN103929378B CN201310014460.5A CN201310014460A CN103929378B CN 103929378 B CN103929378 B CN 103929378B CN 201310014460 A CN201310014460 A CN 201310014460A CN 103929378 B CN103929378 B CN 103929378B
Authority
CN
China
Prior art keywords
communication
link
communication link
bandwidth
data center
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310014460.5A
Other languages
English (en)
Other versions
CN103929378A (zh
Inventor
周红昌
陈杰
蔡璞
董晓杰
尹晟宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Cloud Computing Beijing Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201310014460.5A priority Critical patent/CN103929378B/zh
Publication of CN103929378A publication Critical patent/CN103929378A/zh
Application granted granted Critical
Publication of CN103929378B publication Critical patent/CN103929378B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种跨域数据传输的通信链路分配方法,包括以下步骤:接收源网络数据中心发送的跨域路由申请请求;选取源网络数据中心中未分配网卡带宽大于零的第一通信设备和跨域路由申请请求对应的目的网络数据中心中未分配网卡带宽大于零的第二通信设备;向第一通信设备和第二通信设备发送通信链路建立指令;在第一通信设备和第二通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,为通信链路分配的配额链路带宽小于等于所述第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽;将建立的通信链路的通信链路信息发送给源网络数据中心。上述方法可提高通信设备的资源利用率。此外,还提供一种跨域数据传输的通信链路分配系统。

Description

跨域数据传输的通信链路分配及跨域数据传输方法和系统
【技术领域】
本发明涉及网络技术领域,特别涉及一种跨域数据传输的通信链路分配方法和系统,以及涉及一种跨域数据传输方法和系统。
【背景技术】
网络数据中心(Internet Data Center,IDC)是基于Internet网络的、包含多台服务器的网络基地。同一网络数据中心的服务器组成局域网,网络数据中心内部任意两台服务器之间可以在局域网内进行通信。不同网络数据中心的服务器之间的通信可称为跨域通信。有些网络数据中心之间设有网络专线,不同网络数据中心的服务器可通过网络专线进行通信。然而网络专线的成本非常昂贵,因此通常在网络数据中心中设置与互联网连接的通信设备,某一网络数据中心的服务器需要与另一网络数据中心的服务器进行通信时,需要在两个网络数据中心的通信设备之间建立通信链路,需要通信的两台服务器使用该通信链路进行通信。
传统的方法中,一个通信任务通常独占两台通信设备进行通信,导致通信设备的资源利用率不高。
【发明内容】
基于此,有必要提供一种能提高通信设备资源利用率的跨域数据传输的通信链路分配方法。
一种跨域数据传输的通信链路分配方法,包括以下步骤:
接收源网络数据中心发送的跨域路由申请请求;
选取所述源网络数据中心中未分配网卡带宽大于零的第一通信设备和跨域路由申请请求对应的目的网络数据中心中未分配网卡带宽大于零的第二通信设备;
向第一通信设备和第二通信设备发送通信链路建立指令;
在第一通信设备和第二通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,为所述通信链路分配的配额链路带宽小于等于所述第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽;
将建立的通信链路的通信链路信息发送给所述源网络数据中心。
此外,还有必要提供一种能提高通信设备资源利用率的跨域数据传输的通信链路分配系统。
上述跨域数据传输的通信链路分配方法,当接收到跨域路由申请请求时,分别选取源网络数据中心和目的网络数据中心的一台还剩余有未分配网卡带宽的通信设备,命令选取的通信设备之间建立新的通信链路,并为通信链路分配一定的配额链路带宽,为执行通信任务做准备。上述方法可使得某一网络数据中心的通信设备可与其它网络数据中心的多台通信设备之间建立多条链路,同一通信设备可同时执行多个通信任务,从而可提高通信设备的资源利用率。
一种跨域数据传输方法,包括以下步骤:
源网络数据中心向全网管理模块发送跨域路由申请请求;
全网管理模块为所述跨域路由申请请求分配通信链路;
所述源网络数据中心根据所述通信链路向目的网络数据中心传输文件;
目的网络数据中心接收源网络数据中心传输的文件;
全网管理模块为所述跨域路由申请请求分配通信链路的步骤按照上述的跨域数据传输的通信链路分配方法分配通信链路。
一种跨域数据传输系统,包括:
源网络数据中心,用于向全网管理模块发送跨域路由申请请求;
全网管理模块,用于为所述跨域路由申请请求分配通信链路;
所述源网络数据中心还用于根据所述通信链路向目的网络数据中心传输文件;
目的网络数据中心,用于接收源网络数据中心传输的文件;
所述全网管理模块上述的跨域数据传输的通信链路分配系统中的模块。
上述跨域数据传输方法和系统,高效率的利用通信设备的资源,从而可加快跨域数据传输的整体传输速度。
【附图说明】
图1为一个实施例中的跨域数据传输的通信链路分配方法的流程示意图;
图2为一个实施例中回收已有通信链路配额链路带宽建立新的通信链路的步骤的流程示意图;
图3为一个实施例中的跨域数据传输方法的流程示意图;
图4为一个实施例中两个网络数据中心在全网管理模块的协调下传输文件的示意图;
图5为另一实施例中两个网络数据中心在全网管理模块的协调下传输文件的示意图;
图6为一个实施例中的跨域数据传输的通信链路分配系统的结构示意图;
图7为一个实施例中的跨域数据传输系统的结构示意图。
【具体实施方式】
如图1所示,在一个实施例中,一种跨域数据传输的通信链路分配方法,包括以下步骤:
步骤S101,接收源网络数据中心发送的跨域路由申请请求。
在一个实施例中,跨域路由申请请求包括源网络数据中心标识、目的网络数据中心标识。源网络数据中心为预传输文件的网络数据中心,而目的网络数据中心则为源网络数据中心预将文件传输至的目的地。
步骤S102,选取源网络数据中心中未分配网卡带宽大于零的第一通信设备和跨域路由申请请求对应的目的网络数据中心中未分配网卡带宽大于零的第二通信设备。
源网络数据中心和目的网络数据中心的通信设备为与互联网连接的服务器,具有互联网IP地址。一个网络数据中心包含至少一台通信设备。
通信设备之间建立通信链路,需要为该通信链路分配网卡带宽。通信设备的未分配网卡带宽为该通信设备的网卡带宽与已经分配给该通信设备建立的通信链路的网卡带宽的差值。例如,某一通信设备与其它通信设备建立了两条通信链路,为该两通信链路分配的网卡带宽分别为20M和30M,若该通信设备的网卡带宽为100M,则该通信设备的未分配网卡带宽为50M。
在一个实施例中,可维护各网络数据中心的通信设备信息表,通信设备信息表用于记录通信设备所属的网络数据中心、通信设备标识(通信设备的IP地址)、网卡带宽、已分配网卡带宽和/或未分配网卡带宽。
在一个实施例中,选取的第一通信设备为源网络数据中心的未分配网卡带宽最大的通信设备;选取的第二通信设备为目的网络数据中心的未分配网卡带宽最大的通信设备。
未分配网卡带宽最大的通信设备为最空闲的通信设备,本实施例中,选取最空闲的通信设备建立通信链路,可加快在该通信链路上执行的传输任务的传输速度,并提高通信设备的整体资源利用率。
步骤S103,向第一通信设备和第二通信设备发送通信链路建立指令。
在一个实施例中,可指定通信链路使用的第一通信设备的端口号,并指定通信链路使用的第二通信设备的端口号。通信设备的一个端口只供一条通信链路使用。进一步的,将包含第一通信设备标识、通信链路使用的第一通信设备的端口号、第二通信设备标识、通信链路使用的第二通信设备的端口号的通信链路建立指令发送给第一通信设备和第二通信设备。
第一通信设备和第二通信设备可根据通信链路建立指令建立通信链路,该通信链路使用通信连接指令中包含的第一通信设备的端口和第二通信设备的端口在第一通信设备和第二通信设备之间传输文件。
步骤S104,在第一通信设备和第二通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,为通信链路分配的配额链路带宽小于等于第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽。
在一个实施例中,可选取第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽作为第一通信设备与第二通信设备之间的剩余上限带宽。进一步的,可分配剩余上限带宽的预设百分比作为新建立的通信链路的配额链路带宽。预设百分比小于等于100%。例如,若剩余上限带宽大于20兆时,可分配剩余上限带宽的80%作为新建立的通信链路的配额链路带宽,若剩余上限带宽小于等于20兆时,可分配剩余上限带宽即为新建立的通信链路的配额链路带宽。
步骤S105,将建立的通信链路的通信链路信息发送给源网络数据中心。
在一个实施例中,发送给源网络数据中心的通信链路信息包括第一通信设备标识、通信链路使用的第一通信设备的端口号、第二通信设备标识、通信链路使用的第二通信设备的端口号及通信链路的配额链路带宽。第一通信设备标识可为第一通信设备的IP地址,第二通信设备标识可为第二通信设备的IP地址。
在一个实施例中,上述跨域数据传输的通信链路分配方法还包括步骤:建立通信链路信息表,用于记录通信链路两端的通信设备标识、通信链路使用的两端通信设备的端口号、通信链路的配额链路带宽、通信链路的实际使用链路带宽。每当网络数据中心的通信设备之间建立新的通信链路后,可生成链路标识,将链路标识与新建立的通信链路的相关信息对应存储至通信链路信息表,并根据新建立的通信链路的配额链路带宽更新上述通信设备信息表中该新建立的通信链路两端的通信设备的已分配网卡带宽和/或未分配网卡带宽。
在一个实施例中,上述跨域数据传输的通信链路分配方法还包括步骤:根据第一通信设备和第二通信设备上报的通信链路的流量数据统计通信链路的实际使用链路带宽,并更新通信链路信息表中通信链路的实际使用链路带宽。
在一个实施例中,可根据某一时间段内通信链路的流量数量统计该时间段内通信链路的最大流量和/或平均流量,进一步根据统计的最大流量和/或平均流量计算实际使用链路带宽。
在一个实施例中,可取某一时间段内通信链路的最大流量为该时间段内通信链路的实际使用链路带宽。
在另一个实施例中,可计算通信链路数据流量的平稳性,根据平稳性设置实际使用链路带宽。具体的,可计算最大流量和平均流量的方差,方差小于阈值说明流量平稳,可取平均流量为实际使用链路带宽,而若方差大于等于阈值说明流量不平稳,可取最大流量为实际使用链路带宽。
本实施例中,根据通信链路数据流量的平稳性设置实际使用链路带宽,可缩小实际使用链路带宽与各个时刻的流量的差距,使得实际使用链路带宽尽可能真实地反映通信链路的流量情况,从而有助于回收合适数量的通信链路的配额链路带宽,以将回收的配额链路带宽分配给其它通信链路,从而可提高通信设备的资源利用率。
上述跨域数据传输的通信链路分配方法,当接收到跨域路由申请请求时,分别选取源网络数据中心和目的网络数据中心的一台还剩余有未分配网卡带宽的通信设备,命令选取的通信设备之间建立新的通信链路,并为通信链路分配一定的配额链路带宽,为执行通信任务做准备。上述方法可使得某一网络数据中心的通信设备可与其它网络数据中心的多台通信设备之间建立多条链路,同一通信设备可同时执行多个通信任务,从而可提高通信设备的资源利用率。
在一个实施例中,当源网络数据中心或目的网络数据中心不存在未分配网卡带宽大于零的通信设备时,即步骤S102未选取到未分配网卡带宽大于零的通信设备后,如图2所示,上述跨域数据传输的通信链路分配方法还包括回收已有通信链路配额链路带宽建立新的通信链路的步骤,其过程包括以下步骤:
步骤S201,选取源网络数据中心和目的网络数据中心之间已经建立的通信链路中实际使用链路带宽未达到配额链路带宽的通信链路。
在一个实施例中,选取的通信链路为源网络数据中心和目的网络数据中心之间已经建立的通信链路中配额链路带宽与实际使用链路带宽的差值最大的通信链路。
步骤S202,重新分配选取的通信链路的配额链路带宽为该通信链路的实际使用链路带宽。
在一个实施例中,可将选取的通信链路的重新分配后的配额链路带宽发送给源网络数据中心,并更新通信链路信息表中该通信回路的配额链路带宽,以及更新选取的通信链路两端的通信设备在通信设备信息表中的已分配网卡带宽和/或未分配网卡带宽,减少已分配网卡带宽和/或增加未分配网卡带宽,减少和/或增加的量等于选取的通信链路重新分配前的配额链路带宽与重新分配后的配额链路带宽的差值。
步骤S203,向选取的通信链路两端的通信设备发送通信链路建立指令。
在一个实施例中,可指定待建立的通信链路使用的两端通信设备的端口号。新指定的端口号与通信设备原有的通信链路使用的端口号不重复。将两端通信设备标识、待建立的通信链路使用的两端通信设备的端口号的通信链路建立指令发送给两端通信设备。两端通信设备可根据通信链路建立指令建立新的通信链路。
步骤S204,在通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,该配额链路带宽小于等于选取的通信链路的重新分配前的配额链路带宽与重新分配后的配额链路带宽的差值。
在一个实施例中,可计算选取的通信链路的重新分配前的配额链路带宽与重新分配后的链路带宽的差值,进一步,可分配该差值的预设百分比作为新建立的通信链路的配额链路带宽。预设百分比小于等于100%。例如,若上述差值大于20兆时,可分配该差值的80%作为新建立的通信链路的配额链路带宽,若该差值小于等于20兆时,可分配该差值即为新建立的通信链路的配额链路带宽。
在步骤S204之后,可根据新建立的通信链路的配额链路带宽更新该通信链路两端的通信设备在通信设备信息表中的已分配网卡带宽和/或未分配网卡带宽。
步骤S205,将建立的通信链路的通信链路信息发送给源网络数据中心。
上述跨域数据传输的通信链路分配方法重新分配选取的通信链路的配额链路带宽为该通信链路的实际使用链路带宽,回收通信链路的多余的配额链路带宽,将回收的配额链路带宽分配给其它新建立的通信链路,可提高通信设备整体的资源利用率。
在一个实施例中,上述跨域数据传输的通信链路分配方法还包括步骤:检测通信链路上的传输任务是否完成,当通信链路上的传输任务完成后,回收传输任务完成的通信链路的配额链路带宽,检查该通信链路两端的通信设备之间是否还有未完成传输任务的其它通信链路,若是,则增加其它通信链路的配额带宽。
可根据传输任务完成的通信链路的配额带宽更新该通信链路两端的通信设备在通信设备信息表中的已分配网卡带宽和/或未分配网卡带宽,并删除通信链路表中该通信链路对应的记录。在一个实施例中,其它通信链路增加的配额带宽为两端的通信设备的较小未分配网卡带宽的预设百分比。预设百分比小于等于100%。
上述域数据传输的通信链路分配方法将传输任务已完成的通信链路的配额链路带宽回收,将回收的配额链路带宽分配给该通信链路两端的通信设备上的其它通信链路,可增加通信设备的资源利用率。
如图3所示,一种跨域数据传输方法,包括以下步骤:
步骤S301,源网络数据中心向全网管理模块发送跨域路由申请请求。
在一个实施例中,跨域路由申请请求中包括源网络数据中心标识、目的网络数据中心标识。
步骤S302,全网管理模块为跨域路由申请请求分配通信链路。全网管理模块为跨域路由申请请求分配通信链路的步骤按照上述任一实施例中的跨域数据传输的通信链路分配方法分配通信链路,在此不再赘述。
步骤S303,源网络数据中心根据通信链路向目的网络数据中心传输文件。
步骤S304,目的网络数据中心接收源网络数据中心传输的文件。
图4为一个实施例中两个网络数据中心在全网管理模块的协调下传输文件的示意图。网络数据中心包括主控模块、传输控制模块、存储设备和通信设备。如图5所示,在一个实施例中,上述跨域数据传输方法包括以下步骤:
步骤S501,源网络数据中心的主控模块接收文件传输客户端下发的传输任务信息。
传输任务信息中包括待传输文件标识、源端机器标识、源端存储路径、目的端机器标识和目的端存储路径。源端机器标识为源网络数据中心中存储待传输文件的存储设备的IP地址,源端存储路径为待传输文件在源端机器中的文件路径,目的端机器标识为目的网络数据中心中待传输文件将要传输至的存储设备,而目的端存储路径为待传输文件在目的端机器中将要存放的路径。
步骤S502,源网络数据中心的主控模块向全网管理模块发送跨域路由申请请求。
跨域路由申请请求中包含源网络数据标识、目的端机器标识对应的目的网络数据标识。
步骤S503,全网管理模块为跨域路由申请请求分配通信链路。
具体的,全网管理模块选择已有的或建立新的适合源网络数据中心向目的网络数据中心传输文件的通信链路,将通信链路的通信链路信息发送给源网络数据中心的主控模块,其具体过程包括上述任一实施例中的跨域数据传输的通信链路分配方法中的步骤,在此不再赘述。通信链路信息包括属于源网络数据中心的第一通信设备标识、通信链路使用的第一通信设备的端口号、属于目的网络数据中心的第二通信设备标识、通信链路使用的第二通信设备的端口号及通信链路的配额链路带宽。
在全网管理模块为跨域路由申请请求分配通信链路的过程中,若源网络数据中心的通信设备和目的网络数据中心的通信设备接收到通信链路建立指令,则根据通信链路建立指令建立通信链路,该通信链路使用通信连接指令中包含的通信设备的端口在通信设备之间传输文件。
步骤S504,源网络数据中心的主控模块将传输任务信息和通信链路信息发送给源网络数据中心的传输控制模块。
步骤S505,源网络数据中心的传输控制模块根据传输任务信息和通信链路信息,将传输任务信息中待传输文件和目的地信息传送给通信链路上属于源网络数据中心的通信设备。
源网络数据中心的传输控制模块从源端机器标识对应的存储设备的源端存储路径读取待传输文件,将待传输文件以及目的端机器标识和目的端存储路径传送给第一通信设备中通信链路使用的端口,传输控制模块读取和传送文件的速度与通信链路信息中包含的配额链路带宽相匹配。
步骤S506,通信链路上属于源网络数据中心的通信设备将接收的数据发送给通信链路上属于目的网络数据中心的通信设备。
第一通信设备将从传输控制模块接收的数据发送至第二通信设备中通信链路使用的端口上。
步骤S507,通信链路上属于目的网络数据中心的通信设备将待传输文件发送到目的地信息对目的地。
第二通信设备将待传输文件发送至目的端机器标识对应的存储设备的目的端存储路径下。
上述跨域数据传输方法,高效率的利用通信设备的资源,从而可加快跨域数据传输的整体传输速度。
如图6所示,在一个实施例中,一种跨域数据传输的通信链路分配系统,包括数据接收模块601、通信链路分配模块602、数据发送模块603和配额带宽分配模块604,其中:
数据接收模块601用于接收源网络数据中心发送的跨域路由申请请求。
在一个实施例中,跨域路由申请请求包括源网络数据中心标识、目的网络数据中心标识。源网络数据中心为预传输文件的网络数据中心,而目的网络数据中心则为源网络数据中心预将文件传输至的目的地。
通信链路分配模块602用于选取源网络数据中心中未分配网卡带宽大于零的第一通信设备和跨域路由申请请求对应的目的网络数据中心中未分配网卡带宽大于零的第二通信设备。
源网络数据中心和目的网络数据中心的通信设备为与互联网连接的服务器,具有互联网IP地址。
通信设备之间建立通信链路,需要为该通信链路分配网卡带宽。通信设备的未分配网卡带宽为该通信设备的网卡带宽与已经分配给该通信设备建立的通信链路的网卡带宽的差值。
在一个实施例中,上述跨域数据传输的通信链路分配系统还包括信息记录模块(图中未示出),用于维护各网络数据中心的通信设备信息表,通信设备信息表用于记录通信设备所属的网络数据中心、通信设备标识(通信设备的IP地址)、网卡带宽、已分配网卡带宽和/或未分配网卡带宽。
在一个实施例中,通信链路分配模块602选取的第一通信设备为源网络数据中心的未分配网卡带宽最大的通信设备;选取的第二通信设备为目的网络数据中心的未分配网卡带宽最大的通信设备。
未分配网卡带宽最大的通信设备为最空闲的通信设备,本实施例中,选取最空闲的通信设备建立通信链路,可加快在该通信链路上执行的传输任务的传输速度,并提高通信设备的整体资源利用率。
数据发送模块603用于向第一通信设备和第二通信设备发送通信链路建立指令。
在一个实施例中,通信链路分配模块602可指定通信链路使用的第一通信设备的端口号,并指定通信链路使用的第二通信设备的端口号。通信设备的一个端口只供一条通信链路使用。数据发送模块603可将包含第一通信设备标识、通信链路使用的第一通信设备的端口号、第二通信设备标识、通信链路使用的第二通信设备的端口号的通信链路建立指令发送给第一通信设备和第二通信设备。
第一通信设备和第二通信设备可根据通信链路建立指令建立通信链路,该通信链路使用通信连接指令中包含的第一通信设备的端口和第二通信设备的端口在第一通信设备和第二通信设备之间传输文件。
配额带宽分配模块604用于在第一通信设备和第二通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,为通信链路分配的配额链路带宽小于等于第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽。
在一个实施例中,配额带宽分配模块604可选取第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽作为第一通信设备与第二通信设备之间的剩余上限带宽。进一步的,可分配剩余上限带宽的预设百分比作为新建立的通信链路的配额链路带宽。预设百分比小于等于100%。例如,若剩余上限带宽大于20兆时,可分配剩余上限带宽的80%作为新建立的通信链路的配额链路带宽,若剩余上限带宽小于等于20兆时,可分配剩余上限带宽即为新建立的通信链路的配额链路带宽。
数据发送模块603还用于将建立的通信链路的通信链路信息发送给源网络数据中心。
在一个实施例中,发送给源网络数据中心的通信链路信息包括第一通信设备标识、通信链路使用的第一通信设备的端口号、第二通信设备标识、通信链路使用的第二通信设备的端口号及通信链路的配额链路带宽。第一通信设备标识可为第一通信设备的IP地址,第二通信设备标识可为第二通信设备的IP地址。
在一个实施例中,上述信息记录模块还用于建立通信链路信息表,通信链路信息表用于记录通信链路两端的通信设备标识、通信链路使用的两端通信设备的端口号、通信链路的配额链路带宽、通信链路的实际使用链路带宽。每当网络数据中心的通信设备之间建立新的通信链路后,信息记录模块可生成链路标识,将链路标识与新建立的通信链路的相关信息对应存储至通信链路信息表,并根据新建立的通信链路的配额链路带宽更新上述通信设备信息表中该新建立的通信链路两端的通信设备的已分配网卡带宽和/或未分配网卡带宽。
在一个实施例中,上述跨域数据传输的通信链路分配系统还包括流量统计模块(图中未示出),用于根据第一通信设备和第二通信设备上报的通信链路的流量数据统计通信链路的实际使用链路带宽,上述信息记录模块还用于根据流量统计模块统计的实际使用链路带宽更新通信链路信息表中通信链路的实际使用链路带宽。在一个实施例中,流量统计模块可根据某一时间段内通信链路的流量数量统计该时间段内通信链路的最大流量和/或平均流量,进一步的,根据统计的最大流量和/或平均流量计算实际使用链路带宽。在一个实施例中,流量统计模块可取某一时间段内通信链路的最大流量为该时间段内通信链路的实际使用链路带宽。在另一个实施例中,流量统计模块可计算通信链路数据流量的平稳性,根据平稳性设置实际使用链路带宽。具体的,流量统计模块可计算最大流量和平均流量的方差,方差小于阈值说明流量平稳,可取平均流量为实际使用链路带宽,而若方差大于等于阈值说明流量不平稳,可取最大流量为实际使用链路带宽。本实施例中,根据通信链路数据流量的平稳性设置实际使用链路带宽,可缩小实际使用链路带宽与各个时刻的流量的差距,使得实际使用链路带宽尽可能真实地反映通信链路的流量情况,从而有助于回收合适数量的通信链路的配额链路带宽,以将回收的配额链路带宽分配给其它通信链路,从而可提高通信设备的资源利用率。
上述跨域数据传输的通信链路分配系统,当接收到跨域路由申请请求时,分别选取源网络数据中心和目的网络数据中心的一台还剩余有未分配网卡带宽的通信设备,命令选取的通信设备之间建立新的通信链路,并为通信链路分配一定的配额链路带宽,为执行通信任务做准备。上述方法可使得某一网络数据中心的通信设备可与其它网络数据中心的多台通信设备之间建立多条链路,同一通信设备可同时执行多个通信任务,从而可提高通信设备的资源利用率。
在一个实施例中,当源网络数据中心或目的网络数据中心不存在未分配网卡带宽大于零的通信设备时,即通信链路分配模块602未选取到未分配网卡带宽大于零的通信设备后:
通信链路分配模块602还用于选取源网络数据中心和目的网络数据中心之间已经建立的通信链路中实际使用链路带宽未达到配额链路带宽的通信链路。在一个实施例中,通信链路分配模块602选取的通信链路为源网络数据中心和目的网络数据中心之间已经建立的通信链路中配额链路带宽与实际使用链路带宽的差值最大的通信链路。
配额带宽分配模块604还用于重新分配选取的通信链路的配额链路带宽为该通信链路的实际使用链路带宽。在一个实施例中,配额带宽分配模块604可将选取的通信链路的重新分配后的配额链路带宽发送给源网络数据中心,并更新通信链路信息表中该通信回路的配额链路带宽,以及更新选取的通信链路两端的通信设备在通信设备信息表中的已分配网卡带宽和/或未分配网卡带宽,减少已分配网卡带宽和/或增加未分配网卡带宽,减少和/或增加的量等于选取的通信链路重新分配前的配额链路带宽与重新分配后的配额链路带宽的差值。
数据发送模块603还用于向选取的通信链路两端的通信设备发送通信链路建立指令。在一个实施例中,通信链路分配模块602可指定待建立的通信链路使用的两端通信设备的端口号。新指定的端口号与通信设备原有的通信链路使用的端口号不重复。数据发送模块603可将两端通信设备标识、待建立的通信链路使用的两端通信设备的端口号的通信链路建立指令发送给两端通信设备。两端通信设备可根据通信链路建立指令建立新的通信链路。
配额带宽分配模块604还用于在通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,该配额链路带宽小于等于选取的通信链路的重新分配前的配额链路带宽与重新分配后的配额链路带宽的差值。在一个实施例中,配额带宽分配模块604可计算选取的通信链路的重新分配前的配额链路带宽与重新分配后的链路带宽的差值,进一步,可分配该差值的预设百分比作为新建立的通信链路的配额链路带宽。预设百分比小于等于100%。例如,若上述差值大于20兆时,可分配该差值的80%作为新建立的通信链路的配额链路带宽,若该差值小于等于20兆时,可分配该差值即为新建立的通信链路的配额链路带宽。
信息记录模块还用于根据新建立的通信链路的配额链路带宽更新该通信链路两端的通信设备在通信设备信息表中的已分配网卡带宽和/或未分配网卡带宽。
数据发送模块603还用于将建立的通信链路的通信链路信息发送给源网络数据中心。
上述跨域数据传输的通信链路分配系统重新分配选取的通信链路的配额链路带宽为该通信链路的实际使用链路带宽,回收通信链路的多余的配额链路带宽,将回收的配额链路带宽分配给其它新建立的通信链路,可提高通信设备整体的资源利用率。
在一个实施例中,上述跨域数据传输的通信链路分配系统还包括检测模块(图中未示出),用于检测通信链路上的传输任务是否完成。配额带宽分配模块604还用于当通信链路上的传输任务完成后,回收传输任务完成的通信链路的配额链路带宽,检查该通信链路两端的通信设备之间是否还有未完成传输任务的其它通信链路,若是,则增加其它通信链路的配额带宽。
信息记录模块可根据配额带宽分配模块604回收的配额链路带宽更新通信设备信息表中相应通信设备的已分配网卡带宽和/或未分配网卡带宽,并删除通信链路表中该通信链路对应的记录。在一个实施例中,其它通信链路增加的配额带宽为两端的通信设备的较小未分配网卡带宽的预设百分比。预设百分比小于等于100%。进一步的,信息记录模块可根据增加的配额带宽更新通信设备信息表中其它通信链路两端的通信设备的已分配网卡带宽和/或未分配网卡带宽,并更新通信链路信息表中其它通信链路的配额链路带宽。
上述域数据传输的通信链路分配系统将传输任务已完成的通信链路的配额链路带宽回收,将回收的配额链路带宽分配给该通信链路两端的通信设备上的其它通信链路,可增加通信设备的资源利用率。
如图7所示,一种跨域数据传输系统,包括源网络数据中心701、全网管理模块702和目的网络数据中心703,其中:
源网络数据中心701用于向全网管理模块发送跨域路由申请请求。
在一个实施例中,跨域路由申请请求中包括源网络数据中心标识、目的网络数据中心标识。
全网管理模块702用于为跨域路由申请请求分配通信链路。全网管理模块702包括上述任一实施例中的跨域数据传输的通信链路分配系统中的模块,在此不再赘述。
网络数据中心703还用于根据通信链路向目的网络数据中心703传输文件。
网络数据中心703用于接收源网络数据中心传输的文件。
在一个实施例中,源网络数据中心包括主控模块、传输控制模块、存储设备和第一通信设备;目的网络数据中心包括第二通信设备,第一通信设备和/或第二通信设备的数量可为多台,其中:
源网络数据中心的主控模块接收文件传输客户端下发的传输任务信息。
其中,传输任务信息中包括待传输文件标识、源端机器标识、源端存储路径、目的端机器标识和目的端存储路径。源端机器标识为源网络数据中心中存储待传输文件的存储设备的IP地址,源端存储路径为待传输文件在源端机器中的文件路径,目的端机器标识为目的网络数据中心中待传输文件将要传输至的存储设备,而目的端存储路径为待传输文件在目的端机器中将要存放的路径。
源网络数据中心的主控模块向全网管理模块发送跨域路由申请请求。
其中,跨域路由申请请求中包含源网络数据标识、目的端机器标识对应的目的网络数据标识。
全网管理模块为跨域路由申请请求分配通信链路。
具体的,全网管理模块选择已有的或建立新的适合源网络数据中心向目的网络数据中心传输文件的通信链路,将通信链路的通信链路信息发送给源网络数据中心的主控模块。通信链路信息包括通信链路上的第一通信设备标识、通信链路使用的第一通信设备的端口号、通信链路上的第二通信设备标识、通信链路使用的第二通信设备的端口号及通信链路的配额链路带宽。
在全网管理模块为跨域路由申请请求分配通信链路的过程中,若源网络数据中心的第一通信设备和目的网络数据中心的第二通信设备接收到通信链路建立指令,则根据通信链路建立指令建立通信链路,该通信链路使用通信连接指令中包含的通信设备的端口在通信设备之间传输文件。
源网络数据中心的主控模块将传输任务信息和通信链路信息发送给源网络数据中心的传输控制模块。
源网络数据中心的传输控制模块根据传输任务信息和通信链路信息,将传输任务信息中待传输文件和目的地信息传送给通信链路上的第一通信设备。
在一个实施例中,源网络数据中心的传输控制模块从源端机器标识对应的存储设备的源端存储路径读取待传输文件,将待传输文件以及目的端机器标识和目的端存储路径传送给第一通信设备中通信链路使用的端口,传输控制模块读取和传送文件的速度与通信链路信息中包含的配额链路带宽相匹配。
通信链路上的第一通信设备将接收的数据发送给通信链路上的第二通信设备。
具体的,第一通信设备将从传输控制模块接收的数据发送至第二通信设备中通信链路使用的端口上。
通信链路上的第二通信设备将待传输文件发送到目的地信息对目的地。
具体的,第二通信设备将待传输文件发送至目的端机器标识对应的存储设备的目的端存储路径下。
上述跨域数据传输系统,高效率的利用通信设备的资源,从而可加快跨域数据传输的整体传输速度。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序控制相关的硬件来完成的,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (12)

1.一种跨域数据传输的通信链路分配方法,包括以下步骤:
接收源网络数据中心发送的跨域路由申请请求;
选取所述源网络数据中心中未分配网卡带宽大于零的第一通信设备和跨域路由申请请求对应的目的网络数据中心中未分配网卡带宽大于零的第二通信设备;
向第一通信设备和第二通信设备发送通信链路建立指令;
在第一通信设备和第二通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,为所述通信链路分配的配额链路带宽小于等于所述第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽;
将建立的通信链路的通信链路信息发送给所述源网络数据中心。
2.根据权利要求1所述的跨域数据传输的通信链路分配方法,其特征在于,选取的第一通信设备为所述源网络数据中心的未分配网卡带宽最大的通信设备;
选取的第二通信设备为所述目的网络数据中心的未分配网卡带宽最大的通信设备。
3.根据权利要求1所述的跨域数据传输的通信链路分配方法,其特征在于,当所述源网络数据中心或所述目的网络数据中心不存在未分配网卡带宽大于零的通信设备时,所述方法还包括步骤:
选取所述源网络数据中心和所述目的网络数据中心之间已经建立的通信链路中实际使用链路带宽未达到配额链路带宽的通信链路;
重新分配选取的通信链路的配额链路带宽为该通信链路的实际使用链路带宽;
向所述选取的通信链路两端的通信设备发送通信链路建立指令;
在通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,该配额链路带宽小于等于所述选取的通信链路重新分配前的配额链路带宽与重新分配后的配额链路带宽的差值;
将建立的通信链路的通信链路信息发送给所述源网络数据中心。
4.根据权利要求3所述的跨域数据传输的通信链路分配方法,其特征在于,选取的通信链路为所述源网络数据中心和所述目的网络数据中心之间已经建立的通信链路中配额链路带宽与实际使用链路带宽的差值最大的通信链路。
5.根据权利要求1所述的跨域数据传输的通信链路分配方法,其特征在于,所述方法还包括:
当通信链路上的传输任务完成后,回收传输任务完成的通信链路的配额链路带宽,检查该通信链路两端的通信设备之间是否还有未完成传输任务的其它通信链路,若是,则增加所述其它通信链路的配额带宽。
6.一种跨域数据传输方法,包括以下步骤:
源网络数据中心向全网管理模块发送跨域路由申请请求;
全网管理模块为所述跨域路由申请请求分配通信链路;
所述源网络数据中心根据所述通信链路向目的网络数据中心传输文件;
目的网络数据中心接收源网络数据中心传输的文件;
全网管理模块为所述跨域路由申请请求分配通信链路的步骤按照权利要求1至5任一所述的跨域数据传输的通信链路分配方法分配通信链路。
7.一种跨域数据传输的通信链路分配系统,其特征在于,包括:
数据接收模块,用于接收源网络数据中心发送的跨域路由申请请求;
通信链路分配模块,用于选取所述源网络数据中心中未分配网卡带宽大于零的第一通信设备和跨域路由申请请求对应的目的网络数据中心中未分配网卡带宽大于零的第二通信设备;
数据发送模块,用于向第一通信设备和第二通信设备发送通信链路建立指令;
配额带宽分配模块,用于在第一通信设备和第二通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,为所述通信链路分配的配额链路带宽小于等于所述第一通信设备和第二通信设备的未分配网卡带宽中较小的未分配网卡带宽;
所述数据发送模块还用于将建立的通信链路的通信链路信息发送给所述源网络数据中心。
8.根据权利要求7所述的跨域数据传输的通信链路分配系统,其特征在于,选取的第一通信设备为所述源网络数据中心的未分配网卡带宽最大的通信设备;
选取的第二通信设备为所述目的网络数据中心的未分配网卡带宽最大的通信设备。
9.根据权利要求7所述的跨域数据传输的通信链路分配系统,其特征在于,当所述源网络数据中心或所述目的网络数据中心不存在未分配网卡带宽大于零的通信设备时:
所述通信链路分配模块还用于选取所述源网络数据中心和所述目的网络数据中心之间已经建立的通信链路中实际使用链路带宽未达到配额链路带宽的通信链路;
所述配额带宽分配模块还用于重新分配选取的通信链路的配额链路带宽为该通信链路的实际使用链路带宽;
所述数据发送模块还用于向所述选取的通信链路两端的通信设备发送通信链路建立指令;
所述配额带宽分配模块还用于在通信设备成功建立通信链路后,为建立的通信链路分配配额链路带宽,该配额链路带宽小于等于所述选取的通信链路重新分配前的配额链路带宽与重新分配后的配额链路带宽的差值;
所述数据发送模块还用于将建立的通信链路的通信链路信息发送给所述源网络数据中心。
10.根据权利要求9所述的跨域数据传输的通信链路分配系统,其特征在于,选取的通信链路为所述源网络数据中心和所述目的网络数据中心之间已经建立的通信链路中配额链路带宽与实际使用链路带宽的差值最大的通信链路。
11.根据权利要求7所述的跨域数据传输的通信链路分配系统,其特征在于,所述配额带宽分配模块还用于当通信链路上的传输任务完成后,回收传输任务完成的通信链路的配额链路带宽,检查该通信链路两端的通信设备之间是否还有未完成传输任务的其它通信链路,若是,则增加所述其它通信链路的配额带宽。
12.一种跨域数据传输系统,其特征在于,包括:
源网络数据中心,用于向全网管理模块发送跨域路由申请请求;
全网管理模块,用于为所述跨域路由申请请求分配通信链路;
所述源网络数据中心还用于根据所述通信链路向目的网络数据中心传输文件;
目的网络数据中心,用于接收源网络数据中心传输的文件;
所述全网管理模块包括权利要求7至11任一所述的跨域数据传输的通信链路分配系统。
CN201310014460.5A 2013-01-15 2013-01-15 跨域数据传输的通信链路分配及跨域数据传输方法和系统 Active CN103929378B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310014460.5A CN103929378B (zh) 2013-01-15 2013-01-15 跨域数据传输的通信链路分配及跨域数据传输方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310014460.5A CN103929378B (zh) 2013-01-15 2013-01-15 跨域数据传输的通信链路分配及跨域数据传输方法和系统

Publications (2)

Publication Number Publication Date
CN103929378A CN103929378A (zh) 2014-07-16
CN103929378B true CN103929378B (zh) 2018-01-05

Family

ID=51147460

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310014460.5A Active CN103929378B (zh) 2013-01-15 2013-01-15 跨域数据传输的通信链路分配及跨域数据传输方法和系统

Country Status (1)

Country Link
CN (1) CN103929378B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9716660B2 (en) * 2014-12-11 2017-07-25 Intel Corporation Hierarchical enforcement of service flow quotas
CN111315038B (zh) * 2020-02-14 2022-03-01 腾讯科技(深圳)有限公司 数据传输方法、装置、电子设备及存储介质
CN113382453B (zh) * 2021-08-12 2021-10-29 北京小鸟科技股份有限公司 基于增强静态路由计算和回源的跨域图传方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002051068A1 (en) * 2000-12-19 2002-06-27 Nortel Networks Limited Bandwidth management for tunneling servers
CN101047580A (zh) * 2006-03-28 2007-10-03 腾讯科技(深圳)有限公司 创建点对点数据通道的方法
CN101227416A (zh) * 2008-01-15 2008-07-23 中兴通讯股份有限公司 一种通信网络中链路带宽分配方法
CN101729379A (zh) * 2008-10-15 2010-06-09 华为技术有限公司 一种城域网接纳控制的方法及设备与系统
CN102420775A (zh) * 2012-01-10 2012-04-18 西安电子科技大学 基于模块扩展的数据中心网络拓扑系统的路由方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002051068A1 (en) * 2000-12-19 2002-06-27 Nortel Networks Limited Bandwidth management for tunneling servers
CN101047580A (zh) * 2006-03-28 2007-10-03 腾讯科技(深圳)有限公司 创建点对点数据通道的方法
CN101227416A (zh) * 2008-01-15 2008-07-23 中兴通讯股份有限公司 一种通信网络中链路带宽分配方法
CN101729379A (zh) * 2008-10-15 2010-06-09 华为技术有限公司 一种城域网接纳控制的方法及设备与系统
CN102420775A (zh) * 2012-01-10 2012-04-18 西安电子科技大学 基于模块扩展的数据中心网络拓扑系统的路由方法

Also Published As

Publication number Publication date
CN103929378A (zh) 2014-07-16

Similar Documents

Publication Publication Date Title
CN103024008B (zh) 物联网中数据传输的方法、设备和系统
CN105338078B (zh) 用于存储系统的数据存储方法和装置
CN104253767B (zh) 一种虚拟分片网络的实现方法及一种交换机
CN102318322B (zh) Mac地址分配方法和设备
CN102546432B (zh) 分组传送承载网络容量规划方法和装置
CN103929378B (zh) 跨域数据传输的通信链路分配及跨域数据传输方法和系统
CN102594671A (zh) 一种对用户进行限速的方法和装置
CN108199976A (zh) RapidIO网络的交换设备、交换系统和数据发送方法
CN104836738A (zh) 路由硬件表项资源管理方法、装置及网络设备
CN106982238A (zh) 一种分配网络路径资源的方法、策略控制中心以及主机
CN101340370B (zh) 链路选择方法和链路选择装置
CN103065096B (zh) 一种数据保护方法、装置及系统
CN105812221A (zh) 虚拟可扩展本地区域网络中数据传输的设备和方法
CN105243078A (zh) 一种文件资源的分发方法、系统和装置
CN106059882A (zh) 一种路由插入的方法及装置
CN102984739A (zh) 故障信息处理方法及装置
CN107241251A (zh) 多路can报文实时接收的软件实现方法
CN101425929A (zh) 一种板号表分配方法、装置和系统
CN104052778A (zh) 分布式的话单统计方法、装置以及系统
CN106878990A (zh) 一种信息推送方法及装置
CN106686141A (zh) 资源下载方法及装置
CN101102231B (zh) 一种ppp链路路由设备的自动发现方法和装置
CN109587063A (zh) 一种数据的引流方法及装置
CN106648879A (zh) 一种数据处理方法及装置
CN109005122A (zh) 报文发送方法、装置及网络设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20180913

Address after: 100089 Beijing Haidian District Zhichun Road 49 No. 3 West 309

Patentee after: Tencent cloud computing (Beijing) limited liability company

Address before: 518044 East 403 room, Sai Ge science and Technology Park, Futian District Zhenxing Road, Shenzhen, Guangdong, China, 2

Patentee before: Tencent Technology (Shenzhen) Co., Ltd.

TR01 Transfer of patent right