CN107347092A - 用于多线程下载的方法 - Google Patents

Abstract

本发明涉及一种用于多线程下载的方法，所述方法包括：用户终端从服务器中获取待下载文件的地址数据、标签数据、MD5数据和目标路径数据，生成第一下载数据；获取用户输入的第一线程信息；第一线程信息包括第一线程标识；根据地址数据得到第二线程信息；第二线程信息包括第二线程数据和第二线程标识；确定第二线程标识是否与第一线程标识相对应；当第二线程标识与第一线程标识相对应时，设置下载线程数据；生成多个第二下载数据；生成多个下载进程数据，并将多个下载进程数据发送至服务器；当多个下载进程数据中的一个或多个下载进程数据存在异常时，将异常的下载进程数据的异常信息发送至服务器；服务器生成新的下载进程数据。

Description

用于多线程下载的方法

技术领域

本发明涉及数据处理技术领域，尤其涉及一种用于多线程下载的方法。

背景技术

根据文件传输协议(File Transfer Protocol，FTP)进行客户端断点续传指的是在文件下载或上传时，将下载或上传任务人为的划分为几个部分，每一个部分采用一个线程进行上传或下载，如果碰到网络故障，不具备断点续传的功能的服务器或下载软件就只能从头重传，而具备断点续传的功能的服务器或下载软件可以从已经上传或下载的部分开始继续上传下载未完成的部分，而没有必要从头开始上传下载。用户可以节省时间，提高速度，大大减少了用户的烦恼。

目前具备断点续传的功能的下载软件在进行多线程下载过程中，是将目标文件按照线程个数N等分下载，如果出现某个线程下载被中断或者失败，会导致该下载线程出现停滞状态，并反馈给下载软件一个失败的状态。也就是说，即使其他下载线程完毕后，下载软件也不会收到全部的下载任务成功的状态，从而认定当前下载任务没有结束，并一直处于等待的状态，进而导致下载任务处于无休止的停滞状态。

发明内容

本发明的目的是针对现有技术的缺陷，提供一种用于多线程下载的方法，多线程的下载过程中，加入子线程下载失败的优化过程，对于下载失败的子线程进行重新下载，以防止出现因其中一个子线程下载失败导致整个下载任务处于无休止的等待状态，使得其他任务扔可以进行下载。

为实现上述目的，本发明提供了一种用于多线程下载的方法，所述用于多线程下载的方法包括：

用户终端从服务器中获取待下载文件的地址数据、标签数据、MD5数据和目标路径数据，并根据所述地址数据、标签数据、MD5数据和目标路径数据生成第一下载数据；

获取用户输入的第一线程信息；所述第一线程信息包括第一线程标识；

根据所述地址数据得到第二线程信息；所述第二线程信息包括第二线程数据和第二线程标识；

确定所述第二线程标识是否与所述第一线程标识相对应；

当所述第二线程标识与所述第一线程标识相对应时，根据所述第二线程数据设置下载线程数据；

根据所述下载线程数据将所述第一下载数据进行拆分处理，生成多个第二下载数据；

根据所述多个第二下载数据生成多个下载进程数据，并将所述多个下载进程数据发送至所述服务器；

当所述多个下载进程数据中的一个或多个所述下载进程数据存在异常时，将异常的下载进程数据的异常信息发送至所述服务器；

所述服务器根据所述异常信息删除所述异常的下载进程数据，并生成新的下载进程数据。

优选的，所述第一线程信息还包括：第一线程数据。

进一步优选的，在所述当所述第二线程标识与所述第一线程标识相对应时，根据所述第二线程数据设置下载线程数据之前，所述方法还包括：

所述当所述第二线程标识与所述第一线程标识相对应时，确定所述第一线程数据是否大于所述第二线程数据；

当所述第一线程数据大于所述第二线程数据，根据所述第二线程数据设置下载线程数据；

当所述第一线程数据不大于所述第二线程数据，根据所述第一线程数据设置下载线程数据。

优选的，所述方法还包括：

当所述第二线程标识与所述第一线程标识不对应时，根据生成下载错误提示，用以提示用户下载失败。

优选的，所述方法还包括：

当所述下载进程数据不存在异常时，对比所述待下载文件的MD5数据和已下载文件的MD5数据；

当所述待下载文件的MD5数据和所述已下载文件的MD5数据相匹配时，生成提示下载成功的信息；

当所述待下载文件的MD5数据和所述已下载文件的MD5数据不匹配时，重新获取所述待下载文件的地址数据、标签数据、MD5数据和目标路径数据。

本发明实施例提供的用于多线程下载的方法，在多线程的下载过程中，加入子线程下载失败的优化过程，对于下载失败的子线程进行重新下载，以防止出现因其中一个子线程下载失败导致整个下载任务处于无休止的等待状态，使得其他任务扔可以进行下载。

附图说明

图1为本发明实施例提供的用于多线程下载的方法的流程图。

具体实施方式

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

本发明实施例提供了一种用于多线程下载的方法，其方法流程图如图1所示，包括如下步骤：

步骤101，获取待下载文件的地址数据、标签数据、MD5数据和目标路径数据，并生成第一下载数据；

具体的，用户终端可以理解为一台具有安卓操作系统的智能电视机或其他智能设备。用户终端通过通用分组无线服务技术(General Packet Radio Service，GPRS)或WIFI连接到服务器。用户使用遥控装置或其他带有信号接收功能的设备向用户终端发送下载指令，用户终端中的下载软件根据下载指令通过GPRS网络或WIFI网络从服务器中获取待下载文件的地址数据、标签数据、MD5数据和目标路径数据。待下载文件可以是视音频类型数据、图片类型数据或其他可通过用户终端展示给用户的数据。例如，一首音乐或一部电影。

用户终端通过已获得的地址数据、标签数据、MD5数据和目标路径数据生成第一下载数据。第一下载数据可以理解为待下载文件在下载时所生成的临时数据。

步骤102，得到第一线程标识和第二线程标识；

具体的，用户向用户终端输入用以限定断点下载线程的第一线程信息，或者用户终端获取本地预先设定的用以限定断点下载线程的第一线程信息。然后，用户终端根据地址数据得到第二线程信息。

第一线程信息包括第一线程标识和第一线程数据。其中，第一线程标识用以标识是否需要进行断点下载。第一线程数据可以理解为需要进行断点下载线程的线程数。

第二线程信息包括第二线程标识和第二线程数据。其中，第二线程标识用以标识待下载文件是否支持断点下载。第二线程数据可以理解为待下载文件最大支持的断点下载线程的线程数。

需要指出的是，当第一线程标识为不需要进行断点下载的线程标识时，或第二线程标识为不支持断点下载的线程标识时，线程数据均为“0”。

在一个具体的例子中，线程标识包括“Y”和“N”。第一线程标识为“Y”,且第一线程数据为“5”，表示用户需要五个线程同时进行断点下载。第二线程标识为“Y”,且第二线程数据为“3”，表示用户想要下载的待下载文件支持断点下载，但断点下载的最大线程数为三个线程。

步骤103，确定第二线程标识是否与第一线程标识相对应；

具体的，用户终端确定第二线程标识是否与第一线程标识相对应，即确定待下载文件是否支持用户的下载需要。当第二线程标识与第一线程标识不对应时，代表了待下载文件不支持用户的下载需要，则执行下述步骤104；当第二线程标识与第一线程标识相对应时，代表了待下载文件支持用户的下载需要，则执行下述步骤105-110。

需要指出的是，当第二线程标识与第一线程标识相对应时可以代表两种不同的情况。第一种情况是，用户不需要进行断点下载。第二种情况是，用户需要进行断点下载，且待下载文件也支持断点下载。而当第二线程标识与第一线程标识不对应时代表的情况是，用户需要进行断点下载，但待下载文件不支持断点下载。

在一个具体的例子中，第二线程标识与第一线程标识的对应关系如下表1所示。

第一线程标识	第二线程标识	是否对应
			Y	N	不对应
Y	Y	对应
			N	N	对应
N	Y	对应

表1

根据表1可知，线程标识包括“Y”和“N”。当第一线程标识为“Y”且第二线程标识为“N”时，确定第二线程标识与第一线程标识不对应，代表用户需要进行断点下载，但待下载文件不支持断点下载。其他第二线程标识与第一线程标识的对应关系都视为确定第二线程标识与第一线程对应。

步骤104，生成下载错误的提示信息；

具体的，当第二线程标识与第一线程标识不对应时，即代表用户需要进行断点下载，但待下载文件不支持断点下载时，用户终端生成下载错误的提示信息，提示用户下载失败。

更优的，提示信息可以为“当前下载文件不支持断点下载，下载失败，请重新进行下载设置并重新下载文件”。这样用户通过提示信息可以知道下载失败的原因为当前下载文件不支持断点下载，方便用户根据提示进行下一步的操作。

步骤105，根据第二线程数据设置下载线程数据；

具体的，当第二线程标识与第一线程标识相对应时，用户终端对第一线程数据和第二线程数据进行比较，根据比较结果选择代表线程数较小的线程数据设置下载线程数据。下载线程数据可以理解为待下载文件下下载过程成具体的线程数。

进一步具体的，用户终端确定第一线程数据是否大于第二线程数据。当第一线程数据大于第二线程数据，根据第二线程数据设置下载线程数据。当第一线程数据不大于第二线程数据，根据第一线程数据设置下载线程数据。

在一个具体的例子中，第一线程数据为“5”，第二线程数为“3”，那么这种情况说明用户虽然需要五个线程进行断点下载，但待下载文件只支持三个线程断线下载，用户终端则根据数字较小的“3”，设置进行下载时的线程数为三个线程。

步骤106，根据下载线程数据生成多个第二下载数据；

具体的，用户终端获取第一下载数据的大小，根据已确定的下载线程数据和第一下载数据的大小将第一下载数据进行等分的拆分处理，生成个数与等分数相等的多个第二下载数据，并启动各个下载进程对应的文件区间。其中，第二下载数据可以理解为待下载文件在断点下载时，被拆分后的下载数据。

在一个具体的例子中，第一下载数据的大小为“900M”,下载线程数据为“3”，则用户终端生成三个大小为“300M”的第二下载数据。

步骤107，确定下载进程数据中的一个或多个下载进程数据是否存在异常；

具体的，用户终端根据多个第二下载数据创建个数与第二下载数据数量相等(即个数与下载线程数据相等)的多个下载进程数据，并将多个下载进程数据发送至服务器，各个下载进程各司其职，开始从服务器中下载待下载文件。

当多个下载进程数据中的一个或多个下载进程数据存在异常时，执行下述108；当多个下载进程数据中的任意一个下载进程数据都不存在异常时，则跳过步骤108，直接执行下述步骤109。

步骤108，并生成新的下载进程数据；

具体的，当多个下载进程数据中的一个或多个下载进程数据存在异常时，用户终端将一个或多个异常的下载进程数据的异常信息发送至服务器，服务器根据异常信息删除一个或多个异常的下载进程数据，并生成一个或多个新的下载进程数据，并发送至用户终端。

需要注意的是，用户终端从服务器中下载一个或多个新的下载进程数据时，需要重复执行上述步骤107，确定这一个或多个新的下载进程数据是否存在异常，以保证每个下载进程数据的状态都正常。

步骤109，确定待下载文件的MD5数据和已下载文件的MD5数据是否一致；

具体的，当多个下载进程数据中没有任意一个下载进程数据存在异常时，用户终端将多个已下载的第二下载数据进行合并，生成一个已下载文件。

然后，用户终端对待下载文件的MD5数据和已下载文件的MD5数据进行对比，查看待下载文件的MD5数据和已下载文件的MD5是否一样。

当待下载文件的MD5数据和已下载文件的MD5数据一样时，执行下述步骤110。

当待下载文件的MD5数据和已下载文件的MD5数据不匹配时，则重复执行上述步骤101，即重新获取待下载文件的地址数据、标签数据、MD5数据和目标路径数据。

步骤110，生成下载成功的提示信息；

具体的，当待下载文件的MD5数据和已下载文件的MD5数据一样时，用户终端生成提示下载成功的信息，用以提示用户下载成功。

本发明实施例提供的用于多线程下载的方法，多线程的下载过程中，加入子线程下载失败的优化过程，对于下载失败的子线程进行重新下载，以防止出现因其中一个子线程下载失败导致整个下载任务处于无休止的等待状态，使得其他任务扔可以进行下载。

专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (5)

1.一种用于多线程下载的方法，其特征在于，所述用于多线程下载的方法包括：

用户终端从服务器中获取待下载文件的地址数据、标签数据、MD5数据和目标路径数据，并根据所述地址数据、标签数据、MD5数据和目标路径数据生成第一下载数据；

获取用户输入的第一线程信息；所述第一线程信息包括第一线程标识；

根据所述地址数据得到第二线程信息；所述第二线程信息包括第二线程数据和第二线程标识；

确定所述第二线程标识是否与所述第一线程标识相对应；

当所述第二线程标识与所述第一线程标识相对应时，根据所述第二线程数据设置下载线程数据；

根据所述下载线程数据将所述第一下载数据进行拆分处理，生成多个第二下载数据；

根据所述多个第二下载数据生成多个下载进程数据，并将所述多个下载进程数据发送至所述服务器；

当所述多个下载进程数据中的一个或多个所述下载进程数据存在异常时，将异常的下载进程数据的异常信息发送至所述服务器；

所述服务器根据所述异常信息删除所述异常的下载进程数据，并生成新的下载进程数据。

2.根据权利要求1所述的用于多线程下载的方法，其特征在于，所述第一线程信息还包括：第一线程数据。

3.根据权利要求2所述的用于多线程下载的方法，其特征在于，在所述当所述第二线程标识与所述第一线程标识相对应时，根据所述第二线程数据设置下载线程数据之前，所述方法还包括：

所述当所述第二线程标识与所述第一线程标识相对应时，确定所述第一线程数据是否大于所述第二线程数据；

当所述第一线程数据大于所述第二线程数据，根据所述第二线程数据设置下载线程数据；

当所述第一线程数据不大于所述第二线程数据，根据所述第一线程数据设置下载线程数据。

4.根据权利要求1所述的用于多线程下载的方法，其特征在于，所述方法还包括：

当所述第二线程标识与所述第一线程标识不对应时，根据生成下载错误提示，用以提示用户下载失败。

5.根据权利要求1所述的用于多线程下载的方法，其特征在于，所述方法还包括：

当所述下载进程数据不存在异常时，对比所述待下载文件的MD5数据和已下载文件的MD5数据；

当所述待下载文件的MD5数据和所述已下载文件的MD5数据相匹配时，生成提示下载成功的信息；

当所述待下载文件的MD5数据和所述已下载文件的MD5数据不匹配时，重新获取所述待下载文件的地址数据、标签数据、MD5数据和目标路径数据。