CN111082982B - 数据传输方法、电子设备、系统及介质 - Google Patents

Abstract

本发明提供了一种数据传输方法、电子设备、系统及介质，所述方法包括：预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输；根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力；获取待分配的多个子任务；根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点。本发明能够在保证数据传输速度的同时有效利用对等节点，减少了内容分发网络的带宽，进而节约了服务成本。

Description

数据传输方法、电子设备、系统及介质

技术领域

本发明涉及互联网技术领域，尤其涉及数据传输方法、电子设备、系统及介质。

背景技术

现如今，随着互联网发展越来越迅速，在网络上传输的信息越来越庞大，种类也越来越繁多，与人们日常生活的关系也越来越密切，随之产生了大量的数据传输业务。

传统的数据传输通常依赖于大量的服务器，虽然能够保证传输速度，但耗费了大量的成本。

发明内容

本发明的主要目的在于提供数据传输方法、电子设备、系统及介质，能够在保证数据传输速度的同时有效利用对等节点，减少了内容分发网络的带宽，进而节约了服务成本。

为实现上述目的，本发明提供一种数据传输方法，应用于客户端，所述方法包括：

预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输；

根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力；

获取待分配的多个子任务；

根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点。

优选地，所述预测服务器节点的数据传输速度以及对等节点的数据传输速度包括：

在存储所述服务器节点的数据传输速度的第一样本空间中，获取存储的数据传输速度及当前样本数，根据获取的数据传输速度及当前样本数计算所述第一样本空间内数据传输速度的均值，将计算的均值确定为预测的所述服务器节点的数据传输速度；

在存储所述对等节点的数据传输速度的第二样本空间中，获取存储的数据传输速度及当前样本数，根据获取的数据传输速度及当前样本数计算所述第二样本空间内数据传输速度的均值，将计算的均值确定为预测的所述对等节点的数据传输速度。

优选地，所述方法还包括：

当一个周期结束时，计算所述服务器节点在所述周期内的数据传输速度；

当所述第一样本空间内有空闲存储空间时，将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间；或者

当所述第一样本空间内没有空闲存储空间时，删除所述第一样本空间内最早存储的数据传输速度，并将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间。

优选地，所述方法还包括：

当所述周期结束时，计算所述对等节点在所述周期内的数据传输速度；

当所述第二样本空间内有空闲存储空间时，将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间；或者

当所述第二样本空间内没有空闲存储空间时，删除所述第二样本空间内最早存储的数据传输速度，并将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间。

优选地，所述方法还包括：

确定所述服务器节点的第一数据传输量及实际传输时间，计算所述第一数据传输量与所述实际传输时间的商作为所述服务器节点在所述周期内的数据传输速度；

确定所述对等节点的第二数据传输量及数据传输时间，对比所述数据传输时间与所述周期，将所述数据传输时间与所述周期之间的较大值确定为目标时间，计算所述第二数据传输量与所述目标时间的商作为所述对等节点在所述周期内的数据传输速度。

优选地，所述根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点包括：

计算所述服务器节点的数据传输能力与所述对等节点的数据传输能力的差值；

确定每个子任务对应的数据切片的大小；

计算所述差值与每个子任务对应的数据切片的大小的商作为所述服务器节点的预测任务量；

确定配置的所述服务器节点的最小任务量；

对比所述预测任务量及所述最小任务量，并将所述预测任务量与所述最小任务量之中的较大值确定为所述服务器节点的可分配任务量；

根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

优选地，所述对等节点与所述客户端之间采用RTMFP协议进行数据传输。

为实现上述目的，本发明进一步提供一种电子设备，所述电子设备包括：

存储器，存储至少一个指令；及

处理器，执行所述存储器中存储的指令以实现所述数据传输方法。

优选地，所述电子设备为组成内容分发网络或者区块链网络的节点。

为实现上述目的，本发明进一步提供一种数据传输系统，运行于客户端，所述系统包括：

预测单元，用于预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输；

所述预测单元，还用于根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力；

获取单元，用于获取待分配的多个子任务；

分配单元，用于根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点。

优选地，所述预测单元预测服务器节点的数据传输速度以及对等节点的数据传输速度包括：

在存储所述服务器节点的数据传输速度的第一样本空间中，获取存储的数据传输速度及当前样本数，根据获取的数据传输速度及当前样本数计算所述第一样本空间内数据传输速度的均值，将计算的均值确定为预测的所述服务器节点的数据传输速度；

在存储所述对等节点的数据传输速度的第二样本空间中，获取存储的数据传输速度及当前样本数，根据获取的数据传输速度及当前样本数计算所述第二样本空间内数据传输速度的均值，将计算的均值确定为预测的所述对等节点的数据传输速度。

优选地，所述系统还包括：

计算单元，用于当一个周期结束时，计算所述服务器节点在所述周期内的数据传输速度；

存储单元，用于当所述第一样本空间内有空闲存储空间时，将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间；或者

所述存储单元，还用于当所述第一样本空间内没有空闲存储空间时，删除所述第一样本空间内最早存储的数据传输速度，并将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间。

优选地，所述计算单元，还用于当所述周期结束时，计算所述对等节点在所述周期内的数据传输速度；

所述存储单元，还用于当所述第二样本空间内有空闲存储空间时，将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间；或者

所述存储单元，还用于当所述第二样本空间内没有空闲存储空间时，删除所述第二样本空间内最早存储的数据传输速度，并将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间。

优选地，所述计算单元，还用于确定所述服务器节点的第一数据传输量及实际传输时间，计算所述第一数据传输量与所述实际传输时间的商作为所述服务器节点在所述周期内的数据传输速度；

所述计算单元，还用于确定所述对等节点的第二数据传输量及数据传输时间，对比所述数据传输时间与所述周期，将所述数据传输时间与所述周期之间的较大值确定为目标时间，计算所述第二数据传输量与所述目标时间的商作为所述对等节点在所述周期内的数据传输速度。

优选地，所述分配单元具体用于：

计算所述服务器节点的数据传输能力与所述对等节点的数据传输能力的差值；

确定每个子任务对应的数据切片的大小；

计算所述差值与每个子任务对应的数据切片的大小的商作为所述服务器节点的预测任务量；

确定配置的所述服务器节点的最小任务量；

对比所述预测任务量及所述最小任务量，并将所述预测任务量与所述最小任务量之中的较大值确定为所述服务器节点的可分配任务量；

根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

优选地，所述对等节点与所述客户端之间采用RTMFP协议进行数据传输。

综上所述，本发明能够预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输，进而对服务器节点及对等节点的传输速度进行实时检测，进一步根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力，获取待分配的多个子任务，并根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点，进而在保证数据传输速度的同时有效利用对等节点，减少了内容分发网络的带宽，进而节约了服务成本。

附图说明

图1为本发明一实施例的流程示意图；

图2为本发明一实施例揭露的电子设备的内部结构示意图；

图3为本发明数据传输系统的功能模块示意图。

主要元件符号说明

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

另外，各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本发明要求的保护范围之内。

本发明提供一种数据传输方法。

参照图1，图1为本发明一实施例的流程示意图。根据不同的需求，该流程示意图中步骤的顺序可以改变，某些步骤可以省略。

所述数据传输方法应用于一个或者多个电子设备中，所述电子设备是一种能够按照事先设定或存储的指令，自动进行数值计算和/或信息处理的设备，所述电子设备的硬件设备包括但不限于微处理器、专用集成电路(Application Specific IntegratedCircuit，ASIC)、可编程门阵列(Field－Programmable Gate Array，FPGA)、数字处理器(Digital Signal Processor，DSP)、嵌入式设备等。

所述电子设备可以是任何一种可与用户进行人机交互的电子产品，例如，个人计算机、平板电脑、智能手机、个人数字助理(Personal Digital Assistant，PDA)、游戏机、交互式网络电视(Internet Protocol Television，IPTV)、智能式穿戴式设备等。

所述电子设备还可以包括网络设备和/或用户设备。其中，所述网络设备包括，但不限于单个网络服务器、多个网络服务器组成的服务器组或基于云计算(CloudComputing)的由大量主机或网络服务器构成的云。

所述电子设备所处的网络包括但不限于互联网、广域网、城域网、局域网、虚拟专用网络(Virtual Private Network，VPN)等。

在一实施例中，该方法包括：

S10，预测服务器节点的数据传输速度以及对等节点的数据传输速度。

具体地，所述服务器节点通过http协议向服务器请求数据，所述http协议是CDN(Content Delivery Network，内容分发网络)中的公有协议。

进一步地，所述对等节点与所述客户端之间采用RTMFP协议(Real Time MediaFlow Protocol)进行数据传输。所述对等节点通过配置协议向其他对等节点(如：小矿机节点)请求数据，所述配置协议是对等网络(P2P网络)中的私有协议。所述私有协议可以为RTMFP协议，所述RTMFP协议是对用户数据报协议(UDP，User Datagram Protocol)进行封装出来的交互协议。

具体地，所述客户端与所述服务器节点之间采用http协议进行数据传输。

可以理解的是，所述服务器节点能够提供稳定可靠的资源，进而提供稳定可靠的数据传输服务，但是，所述服务器节点通常需要部署在指定机房，并且采用http协议进行数据传输，产生较多的下行带宽成本，因此服务成本较高。

相比较而言，所述对等节点通常部署在用户家中，不需要额外建立机房，且数据的传输依靠对等节点的上行带宽，而上行带宽一般是闲置的，不会产生另外得成本，因此成本较低，但是，也由于所述对等节点可能部署在用户家中，因此服务不够稳定，容易出现异常。

在本实施例中，所述电子设备预测所述服务器节点的数据传输速度以及所述对等节点的数据传输速度，以便根据预测的速度进一步预测所述服务器节点及所述对等节点的数据传输能力，并进一步根据预测的数据传输能力执行数据传输，进而利用百万量级的节点资源作为服务节点为客户提供短距离且快速可靠的点对点数据传输技术，并大幅度降低云服务成本。

具体地，所述电子设备预测所述服务器节点的数据传输速度包括：

在存储所述服务器节点的数据传输速度的第一样本空间中，所述电子设备获取存储的数据传输速度及当前样本数，并根据获取的数据传输速度及当前样本数计算所述第一样本空间内数据传输速度的均值，所述电子设备将计算的均值确定为预测的所述服务器节点的数据传输速度。

具体地，所述电子设备预测所述对等节点的数据传输速度包括：

在存储所述对等节点的数据传输速度的第二样本空间中，所述电子设备获取存储的数据传输速度及当前样本数，并根据获取的数据传输速度及当前样本数计算所述第二样本空间内数据传输速度的均值，所述电子设备将计算的均值确定为预测的所述对等节点的数据传输速度。

通过上述实施方式，所述电子设备能够以样本空间中存储的多个数据传输速度为基准计算出平均值，并以所述平均值作为最终的数据传输速度，提高了预测的准确度。

在本发明的至少一个实施例中，所述电子设备还需要预先将数据传输速度存储在对应的样本空间。

具体地，所述方法还包括：

当一个周期结束时，所述电子设备计算所述服务器节点在所述周期内的数据传输速度，进一步地：

(1)当所述第一样本空间内有空闲存储空间时，所述电子设备将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间。

(2)当所述第一样本空间内没有空闲存储空间时，所述电子设备删除所述第一样本空间内最早存储的数据传输速度，并将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间。

通过删除最早存储的数据传输速度，能够保证所述第一样本空间中所存储的数据传输速度都是近期产生的，使所述第一样本空间中所存储的数据更具有参考价值。

在上述实施方式中，所述第一样本空间的大小及所述周期的大小都可以进行自定义配置。

具体地，所述方法还包括：

当所述周期结束时，所述电子设备计算所述对等节点在所述周期内的数据传输速度，进一步地：

(1)当所述第二样本空间内有空闲存储空间时，所述电子设备将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间。

(2)当所述第二样本空间内没有空闲存储空间时，所述电子设备删除所述第二样本空间内最早存储的数据传输速度，并将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间。

通过删除最早存储的数据传输速度，能够保证所述第二样本空间中所存储的数据传输速度都是近期产生的，使所述第二样本空间中所存储的数据更具有参考价值。

在上述实施方式中，所述第二样本空间的大小及所述周期的大小都可以进行自定义配置。

在本发明的至少一个实施例中，所述电子设备计算所述服务器节点在所述周期内的数据传输速度包括：

所述电子设备确定所述服务器节点的第一数据传输量及实际传输时间，并计算所述第一数据传输量与所述实际传输时间的商作为所述服务器节点在所述周期内的数据传输速度。

例如：当所述第一数据传输量为R，所述实际传输时间为S时，所述服务器节点在所述周期内的数据传输速度为：Vci＝R/S。

在本发明的至少一个实施例中，所述电子设备计算所述对等节点在所述周期内的数据传输速度包括：

所述电子设备确定所述对等节点的第二数据传输量及数据传输时间，并对比所述数据传输时间与所述周期，所述电子设备将所述数据传输时间与所述周期之间的较大值确定为目标时间，进一步地，所述电子设备计算所述第二数据传输量与所述目标时间的商作为所述对等节点在所述周期内的数据传输速度。

例如：当所述第二数据传输量为Q，所述数据传输时间为S，所述周期为T时，所述对等节点在所述周期内的数据传输速度为：Vpi＝Q/max(S,T)。

S11，根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力。

在本发明的至少一个实施例中，所述电子设备根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力包括：

所述电子设备获取当前周期，并计算所述服务器节点的数据传输速度与所述当前周期的乘积作为所述服务器节点的数据传输能力。

例如：当所述当前周期为T，所述服务器节点的数据传输速度为Vc时，所述服务器节点的数据传输能力为：Rc＝Vc*T。

在本发明的至少一个实施例中，所述电子设备根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力包括：

所述电子设备获取当前周期，并计算所述对等节点的数据传输速度与所述当前周期的乘积作为所述对等节点的数据传输能力。

例如：当所述当前周期为T，所述对等节点的数据传输速度为Vp时，所述服务器节点的数据传输能力为：Rp＝Vp*T。

通过上述实施方式，能够根据数据传输速度预测对应网络的数据传输能力，以实现对任务的有效分配。

S12，获取待分配的多个子任务。

在本发明的至少一个实施例中，为了数据传输的高效性，一个文件资源可以被拆分为多个大小为固定值的数据切片(以下简称为Piece)，而由于每个文件资源的大小不等，因此还有可能包括一个大小小于该固定值的数据切片。

例如：当文件资源A为100M时，如果所述固定值为10M，则所述文件资源A可以被拆分为10个10M的Piece；当文件资源B为101M时，如果所述固定值为10M，则所述文件资源B可以被拆分为10个10M的Piece和一个1M的Piece。

进一步地，所述电子设备根据拆分得到的多个Piece配置所述多个子任务，也就是说，每个子任务对应一个Piece。

需要说明的是，所述电子设备可以按照每个Piece的拆分顺序依次分配所述多个子任务。

S13，根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点。

在本发明的至少一个实施例中，所述电子设备根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点包括：

所述电子设备计算所述服务器节点的数据传输能力与所述对等节点的数据传输能力的差值，并确定每个子任务对应的数据切片的大小，进一步地，所述电子设备计算所述差值与每个子任务对应的数据切片的大小的商作为所述服务器节点的预测任务量，并确定配置的所述服务器节点的最小任务量，所述电子设备对比所述预测任务量及所述最小任务量，并将所述预测任务量与所述最小任务量之中的较大值确定为所述服务器节点的可分配任务量，所述电子设备根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

例如：当所述最小任务量为M，每个Piece的大小为P，所述服务器节点的数据传输能力为Rc，所述服务器节点的数据传输能力为Rp时，所述服务器节点的可分配任务量为：R＝max((Rc-Rp)/P,M)，所述电子设备根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

通过上述实施方式，能够优先将任务分配到所述对等节点中，即根据对所述服务器节点的控制以调节所述对等节点的任务量，以实现对对等节点资源的充分利用，有效节约了成本。

在本发明的至少一个实施例中，在所述多个子任务执行完毕后，所述方法还包括：

所述电子设备拼接所述多个子任务的执行结果，得到目标执行结果。

例如：当所述多个子任务为对一个文件的多个下载任务时，通过拼接所述多个子任务的执行结果，能够得到一个完整的下载文件。

综上所述，本发明能够预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输，进而对服务器节点及对等节点的传输速度进行实时检测，进一步根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力，获取待分配的多个子任务，并根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点，进而在保证数据传输速度的同时有效利用对等节点，减少了内容分发网络的带宽，进而节约了服务成本。

参见图2，在本实施例中，所述电子设备1可以是组成服务器节点或者区块链网络的节点。

所述电子设备1可以包括存储器12、处理器13和总线，还可以包括存储在所述存储器12中并可在所述处理器13上运行的计算机程序，例如数据传输程序。

本领域技术人员可以理解，所述示意图仅仅是电子设备1的示例，并不构成对电子设备1的限定，所述电子设备1既可以是总线型结构，也可以是星形结构，所述电子设备1还可以包括比图示更多或更少的其他硬件或者软件，或者不同的部件布置，例如所述电子设备1还可以包括输入输出设备、网络接入设备等。

需要说明的是，所述电子设备1仅为举例，其他现有的或今后可能出现的电子产品如可适应于本发明，也应包含在本发明的保护范围以内，并以引用方式包含于此。

其中，存储器12至少包括一种类型的可读存储介质，所述可读存储介质包括闪存、移动硬盘、多媒体卡、卡型存储器(例如：SD或DX存储器等)、磁性存储器、磁盘、光盘等。存储器12在一些实施例中可以是电子设备1的内部存储单元，例如该电子设备1的移动硬盘。存储器12在另一些实施例中也可以是电子设备1的外部存储设备，例如电子设备1上配备的插接式移动硬盘、智能存储卡(Smart Media Card,SMC)、安全数字(Secure Digital,SD)卡、闪存卡(Flash Card)等。进一步地，存储器12还可以既包括电子设备1的内部存储单元也包括外部存储设备。存储器12不仅可以用于存储安装于电子设备1的应用软件及各类数据，例如数据传输程序的代码等，还可以用于暂时地存储已经输出或者将要输出的数据。

处理器13在一些实施例中可以由集成电路组成，例如可以由单个封装的集成电路所组成，也可以是由多个相同功能或不同功能封装的集成电路所组成，包括一个或者多个中央处理器(Central Processing unit，CPU)、微处理器、数字处理芯片、图形处理器及各种控制芯片的组合等。处理器13是所述电子设备1的控制核心(Control Unit)，利用各种接口和线路连接整个电子设备1的各个部件，通过运行或执行存储在所述存储器12内的程序或者模块(例如执行数据传输程序等)，以及调用存储在所述存储器12内的数据，以执行电子设备1的各种功能和处理数据。

所述处理器13执行所述电子设备1的操作系统以及安装的各类应用程序。所述处理器13执行所述应用程序以实现上述各个数据传输方法实施例中的步骤，例如图1所示的步骤S10、S11、S12、S13。

或者，所述处理器13执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能，例如：

预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输；

根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力；

获取待分配的多个子任务；

根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点。

示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器12中，并由所述处理器13执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述电子设备1中的执行过程。例如，所述计算机程序可以被分割成预测单元110、获取单元111、分配单元112、计算单元113及存储单元114。

上述以软件功能模块的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能模块存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、计算机设备，或者网络设备等)或处理器(processor)执行本发明各个实施例所述方法的部分。

所述电子设备1集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指示相关的硬件设备来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。

其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)。

总线可以是外设部件互连标准(peripheral component interconnect，简称PCI)总线或扩展工业标准结构(extended industry standard architecture，简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，在图2中仅用一根箭头表示，但并不表示仅有一根总线或一种类型的总线。所述总线被设置为实现所述存储器12以及至少一个处理器13等之间的连接通信。

尽管未示出，所述电子设备1还可以包括给各个部件供电的电源(比如电池)，优选地，电源可以通过电源管理装置与所述至少一个处理器13逻辑相连，从而通过电源管理装置实现充电管理、放电管理、以及功耗管理等功能。电源还可以包括一个或一个以上的直流或交流电源、再充电装置、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。所述电子设备1还可以包括多种传感器、蓝牙模块、Wi-Fi模块等，在此不再赘述。

进一步地，所述电子设备1还可以包括网络接口，可选地，所述网络接口可以包括有线接口和/或无线接口(如WI-FI接口、蓝牙接口等)，通常用于在该电子设备1与其他电子设备之间建立通信连接。

可选地，该电子设备1还可以包括用户接口，用户接口可以是显示器(Display)、输入单元(比如键盘(Keyboard))，可选地，用户接口还可以是标准的有线接口、无线接口。可选地，在一些实施例中，显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode，有机发光二极管)触摸器等。其中，显示器也可以适当的称为显示屏或显示单元，用于显示在电子设备1中处理的信息以及用于显示可视化的用户界面。

应该了解，所述实施例仅为说明之用，在专利申请范围上并不受此结构的限制。

图2仅示出了具有组件12-13的电子设备1，本领域技术人员可以理解的是，图2示出的结构并不构成对所述电子设备1的限定，可以包括比图示更少或者更多的部件，或者组合某些部件，或者不同的部件布置。

结合图1，所述电子设备1中的所述存储器12存储多个指令以实现一种数据传输方法，所述处理器13可执行所述多个指令从而实现：

预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输；

根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力；

获取待分配的多个子任务；

根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点。

具体地，所述处理器13对上述指令的具体实现方法可参考图1对应实施例中相关步骤的描述，在此不赘述。

参照图3，为本发明数据传输系统的功能模块示意图。所述数据传输系统11包括预测单元110、获取单元111、分配单元112、计算单元113及存储单元114。本发明所称的模块/单元是指一种能够被处理器13所执行，并且能够完成固定功能的一系列计算机程序段，其存储在存储器12中。在本实施例中，关于各模块/单元的功能将在后续的实施例中详述。

预测单元110预测服务器节点的数据传输速度以及对等节点的数据传输速度。

具体地，所述服务器节点通过http协议向服务器请求数据，所述http协议是CDN(Content Delivery Network，内容分发网络)中的公有协议。

进一步地，所述对等节点与所述客户端之间采用RTMFP协议(Real Time MediaFlow Protocol)进行数据传输。

所述对等节点通过配置协议向其他对等节点(如：小矿机节点)请求数据，所述配置协议是对等网络(P2P网络)中的私有协议。所述私有协议可以为RTMFP协议，所述RTMFP协议是对用户数据报协议(UDP，User Datagram Protocol)进行封装出来的交互协议。

具体地，所述客户端与所述服务器节点之间采用http协议进行数据传输。

可以理解的是，所述服务器节点能够提供稳定可靠的资源，进而提供稳定可靠的数据传输服务，但是，所述服务器节点通常需要部署在指定机房，并且采用http协议进行数据传输，产生较多的下行带宽成本，因此服务成本较高。

相比较而言，所述对等节点通常部署在用户家中，不需要额外建立机房，且数据的传输依靠对等节点的上行带宽，而上行带宽一般是闲置的，不会产生另外得成本，因此成本较低，但是，也由于所述对等节点可能部署在用户家中，因此服务不够稳定，容易出现异常。

在本实施例中，所述预测单元110预测所述服务器节点的数据传输速度以及所述对等节点的数据传输速度，以便根据预测的速度进一步预测所述服务器节点及所述对等节点的数据传输能力，并进一步根据预测的数据传输能力执行数据传输，进而利用百万量级的节点资源作为服务节点为客户提供短距离且快速可靠的点对点数据传输技术，并大幅度降低云服务成本。

具体地，所述预测单元110预测所述服务器节点的数据传输速度包括：

在存储所述服务器节点的数据传输速度的第一样本空间中，所述预测单元110获取存储的数据传输速度及当前样本数，并根据获取的数据传输速度及当前样本数计算所述第一样本空间内数据传输速度的均值，所述预测单元110将计算的均值确定为预测的所述服务器节点的数据传输速度。

具体地，所述预测单元110预测所述对等节点的数据传输速度包括：

在存储所述对等节点的数据传输速度的第二样本空间中，所述预测单元110获取存储的数据传输速度及当前样本数，并根据获取的数据传输速度及当前样本数计算所述第二样本空间内数据传输速度的均值，所述预测单元110将计算的均值确定为预测的所述对等节点的数据传输速度。

通过上述实施方式，所述预测单元110能够以样本空间中存储的多个数据传输速度为基准计算出平均值，并以所述平均值作为最终的数据传输速度，提高了预测的准确度。

在本发明的至少一个实施例中，存储单元114还需要预先将数据传输速度存储在对应的样本空间。

具体地，所述方法还包括：

当一个周期结束时，计算单元113计算所述服务器节点在所述周期内的数据传输速度，进一步地：

(1)当所述第一样本空间内有空闲存储空间时，所述存储单元114将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间。

(2)当所述第一样本空间内没有空闲存储空间时，所述存储单元114删除所述第一样本空间内最早存储的数据传输速度，并将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间。

通过删除最早存储的数据传输速度，能够保证所述第一样本空间中所存储的数据传输速度都是近期产生的，使所述第一样本空间中所存储的数据更具有参考价值。

在上述实施方式中，所述第一样本空间的大小及所述周期的大小都可以进行自定义配置。

具体地，所述方法还包括：

当所述周期结束时，所述计算单元113计算所述对等节点在所述周期内的数据传输速度，进一步地：

(1)当所述第二样本空间内有空闲存储空间时，所述存储单元114将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间。

(2)当所述第二样本空间内没有空闲存储空间时，所述存储单元114删除所述第二样本空间内最早存储的数据传输速度，并将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间。

通过删除最早存储的数据传输速度，能够保证所述第二样本空间中所存储的数据传输速度都是近期产生的，使所述第二样本空间中所存储的数据更具有参考价值。

在上述实施方式中，所述第二样本空间的大小及所述周期的大小都可以进行自定义配置。

在本发明的至少一个实施例中，所述计算单元113计算所述服务器节点在所述周期内的数据传输速度包括：

所述计算单元113确定所述服务器节点的第一数据传输量及实际传输时间，并计算所述第一数据传输量与所述实际传输时间的商作为所述服务器节点在所述周期内的数据传输速度。

例如：当所述第一数据传输量为R，所述实际传输时间为S时，所述服务器节点在所述周期内的数据传输速度为：Vci＝R/S。

在本发明的至少一个实施例中，所述计算单元113计算所述对等节点在所述周期内的数据传输速度包括：

所述计算单元113确定所述对等节点的第二数据传输量及数据传输时间，并对比所述数据传输时间与所述周期，所述计算单元113将所述数据传输时间与所述周期之间的较大值确定为目标时间，进一步地，所述计算单元113计算所述第二数据传输量与所述目标时间的商作为所述对等节点在所述周期内的数据传输速度。

例如：当所述第二数据传输量为Q，所述数据传输时间为S，所述周期为T时，所述对等节点在所述周期内的数据传输速度为：Vpi＝Q/max(S,T)。

所述预测单元110根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力。

在本发明的至少一个实施例中，所述预测单元110根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力包括：

所述预测单元110获取当前周期，并计算所述服务器节点的数据传输速度与所述当前周期的乘积作为所述服务器节点的数据传输能力。

例如：当所述当前周期为T，所述服务器节点的数据传输速度为Vc时，所述服务器节点的数据传输能力为：Rc＝Vc*T。

在本发明的至少一个实施例中，所述预测单元110根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力包括：

所述预测单元110获取当前周期，并计算所述对等节点的数据传输速度与所述当前周期的乘积作为所述对等节点的数据传输能力。

例如：当所述当前周期为T，所述对等节点的数据传输速度为Vp时，所述服务器节点的数据传输能力为：Rp＝Vp*T。

通过上述实施方式，能够根据数据传输速度预测对应网络的数据传输能力，以实现对任务的有效分配。

获取单元111获取待分配的多个子任务。

在本发明的至少一个实施例中，为了数据传输的高效性，一个文件资源可以被拆分为多个大小为固定值的数据切片(以下简称为Piece)，而由于每个文件资源的大小不等，因此还有可能包括一个大小小于该固定值的数据切片。

例如：当文件资源A为100M时，如果所述固定值为10M，则所述文件资源A可以被拆分为10个10M的Piece；当文件资源B为101M时，如果所述固定值为10M，则所述文件资源B可以被拆分为10个10M的Piece和一个1M的Piece。

进一步地，根据拆分得到的多个Piece配置所述多个子任务，也就是说，每个子任务对应一个Piece。

需要说明的是，分配单元112可以按照每个Piece的拆分顺序依次分配所述多个子任务。

分配单元112根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点。

在本发明的至少一个实施例中，所述分配单元112根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点包括：

所述分配单元112计算所述服务器节点的数据传输能力与所述对等节点的数据传输能力的差值，并确定每个子任务对应的数据切片的大小，进一步地，所述分配单元112计算所述差值与每个子任务对应的数据切片的大小的商作为所述服务器节点的预测任务量，并确定配置的所述服务器节点的最小任务量，所述分配单元112对比所述预测任务量及所述最小任务量，并将所述预测任务量与所述最小任务量之中的较大值确定为所述服务器节点的可分配任务量，所述分配单元112根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

例如：当所述最小任务量为M，每个Piece的大小为P，所述服务器节点的数据传输能力为Rc，所述服务器节点的数据传输能力为Rp时，所述服务器节点的可分配任务量为：R＝max((Rc-Rp)/P,M)，所述分配单元112根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

通过上述实施方式，能够优先将任务分配到所述对等节点中，即根据对所述服务器节点的控制以调节所述对等节点的任务量，以实现对对等节点资源的充分利用，有效节约了成本。

在本发明的至少一个实施例中，在所述多个子任务执行完毕后，所述方法还包括：

拼接所述多个子任务的执行结果，得到目标执行结果。

例如：当所述多个子任务为对一个文件的多个下载任务时，通过拼接所述多个子任务的执行结果，能够得到一个完整的下载文件。

综上所述，本发明能够预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输，进而对服务器节点及对等节点的传输速度进行实时检测，进一步根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力，获取待分配的多个子任务，并根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点，进而在保证数据传输速度的同时有效利用对等节点，减少了内容分发网络的带宽，进而节约了服务成本。

在上述实施例中，可以全部或部分地通过软件、硬件设备、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。

所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、移动硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态移动硬盘Solid State Disk(SSD))等。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件设备的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动移动硬盘、只读存储器(ROM，Read-OnlyMemory)、磁碟或者光盘等各种可以存储程序代码的介质。

需要说明的是，上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (9)

1.一种数据传输方法，其特征在于，应用于客户端，所述方法包括：

预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输；

根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力；

获取待分配的多个子任务；

根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点，包括：计算所述服务器节点的数据传输能力与所述对等节点的数据传输能力的差值；确定每个子任务对应的数据切片的大小；计算所述差值与每个子任务对应的数据切片的大小的商作为所述服务器节点的预测任务量；确定配置的所述服务器节点的最小任务量；对比所述预测任务量及所述最小任务量，并将所述预测任务量与所述最小任务量之中的较大值确定为所述服务器节点的可分配任务量；根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

2.如权利要求1所述的数据传输方法，其特征在于，所述预测服务器节点的数据传输速度以及对等节点的数据传输速度包括：

在存储所述服务器节点的数据传输速度的第一样本空间中，获取存储的数据传输速度及当前样本数，根据获取的数据传输速度及当前样本数计算所述第一样本空间内数据传输速度的均值，将计算的均值确定为预测的所述服务器节点的数据传输速度；

在存储所述对等节点的数据传输速度的第二样本空间中，获取存储的数据传输速度及当前样本数，根据获取的数据传输速度及当前样本数计算所述第二样本空间内数据传输速度的均值，将计算的均值确定为预测的所述对等节点的数据传输速度。

3.如权利要求2所述的数据传输方法，其特征在于，所述方法还包括：

当一个周期结束时，计算所述服务器节点在所述周期内的数据传输速度；

当所述第一样本空间内有空闲存储空间时，将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间；或者

当所述第一样本空间内没有空闲存储空间时，删除所述第一样本空间内最早存储的数据传输速度，并将所述服务器节点在所述周期内的数据传输速度存储至所述第一样本空间。

4.如权利要求3所述的数据传输方法，其特征在于，所述方法还包括：

当所述周期结束时，计算所述对等节点在所述周期内的数据传输速度；

当所述第二样本空间内有空闲存储空间时，将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间；或者

当所述第二样本空间内没有空闲存储空间时，删除所述第二样本空间内最早存储的数据传输速度，并将所述对等节点在所述周期内的数据传输速度存储至所述第二样本空间。

5.如权利要求3或4所述的数据传输方法，其特征在于，所述方法还包括：

确定所述服务器节点的第一数据传输量及实际传输时间，计算所述第一数据传输量与所述实际传输时间的商作为所述服务器节点在所述周期内的数据传输速度；

确定所述对等节点的第二数据传输量及数据传输时间，对比所述数据传输时间与所述周期，将所述数据传输时间与所述周期之间的较大值确定为目标时间，计算所述第二数据传输量与所述目标时间的商作为所述对等节点在所述周期内的数据传输速度。

6.如权利要求1所述的数据传输方法，其特征在于，所述对等节点与所述客户端之间采用RTMFP协议进行数据传输。

7.一种电子设备，其特征在于，所述电子设备包括：

存储器，存储至少一个指令；及

处理器，执行所述存储器中存储的指令以实现如权利要求1至6中任意一项所述的数据传输方法。

8.一种数据传输系统，运行于客户端，其特征在于，所述系统包括：

预测单元，用于预测服务器节点的数据传输速度以及对等节点的数据传输速度，所述客户端与所述服务器节点之间采用http协议进行数据传输；

所述预测单元，还用于根据所述服务器节点的数据传输速度预测所述服务器节点的数据传输能力，及根据所述对等节点的数据传输速度预测所述对等节点的数据传输能力；

获取单元，用于获取待分配的多个子任务；

分配单元，用于根据所述服务器节点的数据传输能力及所述对等节点的数据传输能力，将所述多个子任务分配至所述服务器节点及所述对等节点，包括：计算所述服务器节点的数据传输能力与所述对等节点的数据传输能力的差值；确定每个子任务对应的数据切片的大小；计算所述差值与每个子任务对应的数据切片的大小的商作为所述服务器节点的预测任务量；确定配置的所述服务器节点的最小任务量；对比所述预测任务量及所述最小任务量，并将所述预测任务量与所述最小任务量之中的较大值确定为所述服务器节点的可分配任务量；根据所述可分配任务量从所述多个子任务中获取任务分配至所述服务器节点，并将其余任务分配至所述对等节点。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有数据传输程序，所述数据传输程序可被一个或者多个处理器执行，以实现如权利要求1至6中任一项所述的数据传输方法。

Images