CN105262830B - 一种文件上传方法及装置 - Google Patents

一种文件上传方法及装置 Download PDF

Info

Publication number
CN105262830B
CN105262830B CN201510727844.0A CN201510727844A CN105262830B CN 105262830 B CN105262830 B CN 105262830B CN 201510727844 A CN201510727844 A CN 201510727844A CN 105262830 B CN105262830 B CN 105262830B
Authority
CN
China
Prior art keywords
file
currently available
available thread
uploaded
information table
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510727844.0A
Other languages
English (en)
Other versions
CN105262830A (zh
Inventor
李梅文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201510727844.0A priority Critical patent/CN105262830B/zh
Publication of CN105262830A publication Critical patent/CN105262830A/zh
Application granted granted Critical
Publication of CN105262830B publication Critical patent/CN105262830B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]

Abstract

本发明实施例公开了一种文件上传方法及装置,其应用于终端设备,该终端设备中保存有文件上传信息表,方法包括:读取文件上传信息表中待上传文件的相关信息,将当前游标值确定为与第一当前可用线程对应的游标值,并更新当前游标值,从与第一当前可用线程对应的游标值开始,使用第一当前可用线程对对应的文件块数据量的文件块进行上传,获得该文件块在上传过程中的平均传输速度,根据平均传输速度与文件上传信息表中对应的上传速度的比较结果,对文件上传信息表中文件块数据量进行调整,判断待上传文件中是否存在未上传部分,如果是,则继续读取文件上传信息表中的待上传文件的相关信息。应用本发明实施例,能够提高文件上传的速度。

Description

一种文件上传方法及装置
技术领域
本发明涉及互联网应用领域,特别涉及一种文件上传方法及装置。
背景技术
随着互联网技术的快速发展,用户常需要将文件上传到网络侧设备中进行存储。
现有的文件上传技术在进行文件上传时,常将文件整体一次上传到网络侧设备中。当网络不稳定时,容易出现网络中断现象。这就导致现有技术在上传文件时上传中断。在上传中断后,需要重新上传整个文件,十分浪费网络资源,而且文件上传的速度较慢。
发明内容
本发明实施例的目的在于提供一种文件上传方法及装置,以提高文件上传的速度。
为达到上述目的,本发明实施例公开了一种文件上传方法,其应用于终端设备,所述终端设备中保存有文件上传信息表,所述方法包括如下步骤:
读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度;
将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值;
根据与所述第一当前可用线程对应的游标值和与第一当前可用线程对应的文件块数据量之和更新所述待上传文件的当前游标值;
从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传;
获得与所述第一当前可用线程对应的文件块数据量的文件块在上传过程中的平均传输速度;
根据所述平均传输速度与所述文件上传信息表中与所述第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量进行调整,将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度;
判断所述待上传文件中是否存在未上传部分,如果所述待上传文件中存在未上传部分,则继续执行所述读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度的步骤。
较佳的,将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值后,还包括:将所述游标位置与所述第一当前可用线程对应的存储在所述文件上传信息表中。
较佳的,所述方法还包括:
当文件块未成功上传时,从所述文件上传信息表中获取与所述第一当前可用线程对应的游标值和该文件块的文件块数据量,再次执行所述从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传的步骤。
较佳的,所述根据所述平均传输速度与所述文件上传信息表中与所述第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量进行调整,包括:
当所述平均传输速度大于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,则将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调大;
当所述平均传输速度小于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,则将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调小;
当所述平均传输速度等于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,则所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量不变。
较佳的,所述判断所述待上传文件中是否存在未上传部分,包括:
判断所述待上传文件的当前游标值是否小于所述待上传的文件的数据量,如果是,则确定所述待上传文件中存在未上传部分,否则,确定所述待上传文件中不存在未上传部分。
为达到上述目的,本发明实施例还公开了一种文件上传装置,其应用于终端设备,所述终端设备中保存有文件上传信息表,所述装置包括:读取单元、确定单元、更新单元、上传单元、平均传输速度获得单元、比较单元和判断单元;
所述读取单元,用于读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度;
所述确定单元,用于将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值;
所述更新单元,用于根据与所述第一当前可用线程对应的游标值和与第一当前可用线程对应的文件块数据量之和更新所述待上传文件的当前游标值;
所述上传单元,用于从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传;
所述平均传输速度获得单元,用于获得与所述第一当前可用线程对应的文件块数据量的文件块在上传过程中的平均传输速度;
所述比较单元,用于根据所述平均传输速度与所述文件上传信息表中与所述第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量进行调整,将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度;
所述判断单元,用于判断所述待上传文件中是否存在未上传部分,如果所述待上传文件中存在未上传部分,则触发所述读取单元继续读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度。
较佳的,所述装置还包括:存储单元,用于将所述游标位置与所述第一当前可用线程对应的存储在所述文件上传信息表中。
较佳的,所述装置还包括:重传单元,用于当文件块未成功上传时,从所述文件上传信息表中获取与所述第一当前可用线程对应的游标值和该文件块的文件块数据量,触发所述上传单元从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传。
较佳的,所述比较单元,包括:第一比较子单元、第二比较子单元、第三比较子单元和替换子单元;
所述第一比较子单元,用于当所述平均传输速度大于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调大;
所述第二比较子单元,用于当所述平均传输速度小于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调小;
所述第三比较子单元,用于当所述平均传输速度等于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量不变;
所述替换子单元,用于将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度。
较佳的,所述判断单元,具体用于:
判断所述待上传文件的当前游标值是否小于所述待上传的文件的数据量,如果是,则确定所述待上传文件中存在未上传部分,否则,确定所述待上传文件中不存在未上传部分,如果所述待上传文件中存在未上传部分,则触发所述读取单元继续读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度。
可见,本发明实施例中,存储了与每个可用线程对应的游标值与待上传文件的当前游标值,从与每个可用线程对应的游标值位置开始上传文件块,且根据文件块在上传过程中的平均传输速度调整文件块数据量,可以充分利用网络状况,提高上传速度,并且根据与可用线程对应的游标值可以在文件块上传失败的位置重传或文件块上传中断的文件块位置续传,不必重新上传整个文件,同时还可以根据CPU的核数确定文件上传的可用线程数,能够充分利用终端设备的CPU,因此,能够提高文件上传的速度。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种文件上传方法的流程示意图;
图2为本发明实施例提供的另一种文件上传方法的流程示意图;
图3为本发明实施例提供的一种文件上传装置的结构示意图;
图4为本发明实施例提供的另一种文件上传装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种文件上传方法及装置,其应用于终端设备,该终端设备中保存有文件上传信息表,该方案中,读取文件上传信息表中待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度,将当前游标值确定为与第一当前可用线程对应的游标值,并更新当前游标值,从与第一当前可用线程对应的游标值开始,使用第一当前可用线程对对应的文件块数据量的文件块进行上传,获得该文件块在上传过程中的平均传输速度,根据平均传输速度与文件上传信息表中与第一当前可用线程对应的上传速度的比较结果,对文件上传信息表中文件块数据量进行调整,判断待上传文件中是否存在未上传部分。
下面通过具体实施例,对本发明进行详细说明。
参考图1,图1为本发明实施例提供的一种文件上传方法的流程示意图,其应用于终端设备,该终端设备中保存有文件上传信息表,该方法可以包括如下步骤:
S101:读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度;
实际应用中,文件可以采用多个线程同时上传,为了充分利用终端设备的中央处理器CPU,可以根据所述终端设备CPU的核数确定文件上传的可用线程数,这样可以在充分利用终端设备CPU和网络状况的情况下,达到文件上传的最优值。
S102:将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值;
S103:根据与所述第一当前可用线程对应的游标值和与第一当前可用线程对应的文件块数据量之和更新所述待上传文件的当前游标值;
实际应用中,在仅有一个可用线程上传文件时,待上传文件的当前游标值就是该可用线程的游标值和与该可用线程对应的文件块数据量之和。假设,待上传文件的当前游标值为100kB,文件块数据量为10kB,在待上传文件开始上传时,第一当前可用线程的游标值确定为100kB,此时更新待上传文件的当前游标值为110kB,待上传文件再次开始上传时,第一当前可用线程的游标值确定为110kB,假设此时确定文件块数据量为15kB,则更新待上传文件的当前游标值为125KB。
另外,当有多个线程同时上传时,待上传文件的当前游标值就是最新的可用线程的游标值和与该可用线程对应的文件块数据量之和。假设,当前有3个可用线程,分别为A、B和C,每次上传的文件块数据量均为10kB,待上传文件的当前游标值为0kB,在待上传文件开始上传时,可用线程A的游标值确定为0kB,此时更新待上传文件的当前游标值为10kB,可用线程B的游标值确定为10kB,此时更新待上传文件的当前游标值为20kB,可用线程C的游标值确定为20kB,此时更新待上传文件的当前游标值为30kB,当可用线程B上的文件块数据量的文件块首先上传完毕,则可用线程B的游标值确定为30kB,此时更新待上传文件的当前游标值为40kB。
S104:从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传;
当确定了第一当前可用线程对应的游标值和文件块数据量,则从该游标值开始,上传该文件块数据量的文件块。
S105:获得与所述第一当前可用线程对应的文件块数据量的文件块在上传过程中的平均传输速度;
这里,平均传输速度由已上传文件块的数据量和该已上传文件块的上传消耗时间获得。假设上传已上传文件块的数据量为12kB,上传消耗时间为2s,则该已上传文件块的平均传输速度为6kB/s。
S106:根据所述平均传输速度与所述文件上传信息表中与所述第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量进行调整,将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度;
实际应用中,在未进行文件上传时,可以设置文件块的初始上传速度为0并存储于文件上传信息表中。这样在上传完成第一个文件块后,获取该文件块的均传输速度可以与该初始上传速度进行比较。
S107:判断所述待上传文件中是否存在未上传部分,如果待上传文件中存在未上传部分,则继续执行步骤S101,否则,结束处理。
当然,在本发明其他实施例中,如果待上传文件中不存在未上传部分,则该上传文件上传结束,可以上传下一待上传文件。
实际应用中,判断所述待上传文件中是否存在未上传部分,可以包括:判断待上传文件的当前游标值是否小于待上传的文件的数据量,如果是,则确定待上传文件中存在未上传部分,否则,确定待上传文件中不存在未上传部分。假设待上传文件的数据量为1M,若当前游标值为900kB,当前游标值小于待上传文件的数据量,则确定待上传文件中存在未上传部分;若当前游标值为1M,当前游标值等于待上传文件的数据量,则确定待上传文件中不存在未上传部分。
另外,将待上传文件的当前游标值确定为与第一当前可用线程对应的游标值后,还可以包括:将游标位置与第一当前可用线程对应的存储在文件上传信息表中,以便在文件上传失败或者上传中断时使用。
实际应用中,文件上传信息表中还可以存储当前可用线程的数量信息和上传结果信息。其中,上传结果信息包括:文件块的上传状态信息和失败次数信息。
此时,该方法还可以包括:
当文件块未成功上传,即上传状态为失败或中断时,从文件上传信息表中获取与第一当前可用线程对应的游标值和该文件块的文件块数据量,再次执行步骤S104。并且当文件上传中断时,相当于文件在再次重新上传,文件上传信息表中的上传速度设置为0。
另外,可以通过文件上传信息表中失败次数信息,判断该线程的运行状况。失败次数越多,运行状况越差。
应用图1所示实施例,存储了与每个可用线程对应的游标值与待上传文件的当前游标值,从与每个可用线程对应的游标值位置开始上传文件块,且根据文件块在上传过程中的平均传输速度调整文件块数据量,可以充分利用网络状况,提高上传速度,并且根据与可用线程对应的游标值可以在文件块上传失败的位置重传或文件块上传中断的文件块位置续传,不必重新上传整个文件,同时还可以根据CPU的核数确定文件上传的可用线程数,能够充分利用终端设备的CPU,因此,能够提高文件上传的速度。
参考图2,图2为本发明实施例提供的另一种文件上传方法的流程示意图,其应用于终端设备,该终端设备中保存有文件上传信息表,该方法可以包括如下步骤:
S101:读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度;
S102:将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值;
S103:根据与所述第一当前可用线程对应的游标值和与第一当前可用线程对应的文件块数据量之和更新所述待上传文件的当前游标值;
S104:从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传;
S105:获得与所述第一当前可用线程对应的文件块数据量的文件块在上传过程中的平均传输速度;
获得文件块在上传过程中的平均传输速度后,需要文件上传信息表中与当前可用线程对应的上传速度进行对比,此时分为三种情况:
当平均传输速度大于文件上传信息表中与第一当前可用线程对应的上传速度,执行步骤S1060a,当平均传输速度小于文件上传信息表中与第一当前可用线程对应的上传速度,执行步骤S1060b,当平均传输速度等于文件上传信息表中与第一当前可用线程对应的上传速度,执行步骤S1060c;
S1060a:将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调大;
S1060b:将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调小;
S1060c:所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量不变;
假设,当平均传输速度大于文件上传信息表中与第一当前可用线程对应的上传速度时,文件上传信息表中与第一当前可用线程对应的文件块数据量调大20%,当平均传输速度小于文件上传信息表中与第一当前可用线程对应的上传速度时,文件上传信息表中与第一当前可用线程对应的文件块数据量调小20%,当平均传输速度等于文件上传信息表中与第一当前可用线程对应的上传速度时,文件上传信息表中与第一当前可用线程对应的文件块数据量不变,文件上传信息表中与第一当前可用线程对应的文件块数据量为100kB,上传速度为10kB/s,若获得的文件块在上传过程中的平均传输速度为12kB/s,平均传输速度大于上传速度,则将文件上传信息表中与第一当前可用线程对应的文件块数据量调大为120kB,若获得的文件块在上传过程中的平均传输速度为8kB/s,平均传输速度小于上传速度,则将文件上传信息表中与第一当前可用线程对应的文件块数据量调小为80kB,若获得的文件块在上传过程中的平均传输速度为10kB/s,平均传输速度等于上传速度,则文件上传信息表中与第一当前可用线程对应的文件块数据量保持不变。
S1061:将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度;
在调整了下一上传文件块数据量后,需要将文件上传信息表中的与第一当前可用线程对应的上传速度替换为该平均传输速度,以便下一文件块上传过程中的平均传输速度进行比较。
S107:判断所述待上传文件中是否存在未上传部分,如果待上传文件中存在未上传部分,则继续执行步骤S101,否则,结束处理。
当然,在本发明其他实施例中,如果待上传文件中不存在未上传部分,则该上传文件上传结束,可以上传下一待上传文件。
应用图2所示实施例,存储了与每个可用线程对应的游标值与待上传文件的当前游标值,从与每个可用线程对应的游标值位置开始上传文件块,且根据文件块在上传过程中的平均传输速度调整文件块数据量,可以充分利用网络状况,提高上传速度,并且根据与可用线程对应的游标值可以在文件块上传失败的位置重传或文件块上传中断的文件块位置续传,不必重新上传整个文件,同时还可以根据CPU的核数确定文件上传的可用线程数,能够充分利用终端设备的CPU,因此,能够提高文件上传的速度。
参考图3,图3为本发明实施例提供的一种文件上传装置的结构示意图,与图1所示流程图对应,其应用于应用于终端设备,该终端设备中保存有文件上传信息表,该装置可以包括:读取单元301、确定单元302、更新单元303、上传单元304、平均传输速度获得单元305、比较单元306和判断单元307。
其中,读取单元301,用于读取文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度。
实际应用中,文件可以采用多个线程同时上传,为了充分利用终端设备的中央处理器CPU,可以根据所述终端设备CPU的核数确定文件上传的可用线程数,这样可以在充分利用终端设备CPU和网络状况的情况下,达到文件上传的最优值。
确定单元302,用于将待上传文件的当前游标值确定为与第一当前可用线程对应的游标值。
更新单元303,用于根据与第一当前可用线程对应的游标值和与第一当前可用线程对应的文件块数据量之和更新待上传文件的当前游标值。
实际应用中,在仅有一个可用线程上传文件时,待上传文件的当前游标值就是该可用线程的游标值和与该可用线程对应的文件块数据量之和。假设,待上传文件的当前游标值为100kB,文件块数据量为10kB,在待上传文件开始上传时,确定单元302将第一当前可用线程的游标值确定为100kB,此时更新单元303将待上传文件的当前游标值更新为110kB,待上传文件再次开始上传时,确定单元302将第一当前可用线程的游标值确定为110kB,假设此时确定文件块数据量为15kB,则更新单元303将待上传文件的当前游标值更新为125KB。
另外,当有多个线程同时上传时,待上传文件的当前游标值就是最新的可用线程的游标值和与该可用线程对应的文件块数据量之和。假设,当前有3个可用线程,分别为A、B和C,每次上传的文件块数据量均为10kB,待上传文件的当前游标值为0kB,在待上传文件开始上传时,确定单元302将可用线程A的游标值确定为0kB,此时更新单元303将待上传文件的当前游标值更新为10kB,确定单元302将可用线程B的游标值确定为10kB,此时更新单元303将待上传文件的当前游标值更新为20kB,确定单元302将可用线程C的游标值确定为20kB,此时更新单元303将待上传文件的当前游标值更新为30kB,当可用线程B上的文件块数据量的文件块首先上传完毕,则确定单元302将可用线程B的游标值确定为30kB,此时更新单元303将待上传文件的当前游标值更新为40kB。
上传单元304,用于从与第一当前可用线程对应的游标值开始,使用第一当前可用线程对与第一当前可用线程对应的文件块数据量的文件块进行上传。
平均传输速度获得单元305,用于获得与第一当前可用线程对应的文件块数据量的文件块在上传过程中的平均传输速度。
这里,平均传输速度由已上传文件块的数据量和该已上传文件块的上传消耗时间获得。假设上传已上传文件块的数据量为12kB,上传消耗时间为2s,则该已上传文件块的平均传输速度为6kB/s。
比较单元306,用于根据平均传输速度与所述文件上传信息表中与第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与第一当前可用线程对应的文件块数据量进行调整,将文件上传信息表中的与第一当前可用线程对应的上传速度替换为平均传输速度。
实际应用中,在未进行文件上传时,可以设置文件块的初始上传速度为0并存储于文件上传信息表中。这样在上传完成第一个文件块后,获取该文件块的均传输速度可以与该初始上传速度进行比较。
判断单元307,用于判断所述待上传文件中是否存在未上传部分,如果所述待上传文件中存在未上传部分,则触发读取单元继续读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度,否则,结束处理。
实际应用中,判断单元307,具体用于:
判断待上传文件的当前游标值是否小于待上传的文件的数据量,如果是,则确定待上传文件中存在未上传部分,否则,确定待上传文件中不存在未上传部分,如果所述待上传文件中存在未上传部分,则触发读取单元继续读取文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度,否则,结束处理。假设待上传文件的数据量为1M,若当前游标值为900kB,当前游标值小于待上传文件的数据量,则判断单元307确定待上传文件中存在未上传部分,触发读取单元继续读取文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度;若当前游标值为1M,当前游标值等于待上传文件的数据量,则判断单元307确定待上传文件中不存在未上传部分,结束处理。当然,在本发明其他实施例中,如果待上传文件中不存在未上传部分,则该上传文件上传结束,可以上传下一待上传文件。
实际应用中,该装置还可以包括:存储单元和重传单元。(图3中未示出)
其中,存储单元,用于将游标位置与第一当前可用线程对应的存储在文件上传信息表中。
实际用于中,文件上传信息表中还可以存储当前可用线程的数量信息和上传结果信息。其中,上传结果信息包括:文件块的上传状态信息和失败次数信息。
重传单元,用于当文件块未成功上传,即上传状态为失败或中断时,从文件上传信息表中获取与第一当前可用线程对应的游标值和该文件块的文件块数据量,触发上传单元从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传。
另外,可以通过文件上传信息表中失败次数信息,判断该线程的运行状况。失败次数越多,运行状况越差。
应用图3所示实施例,存储了与每个可用线程对应的游标值与待上传文件的当前游标值,从与每个可用线程对应的游标值位置开始上传文件块,且根据文件块在上传过程中的平均传输速度调整文件块数据量,可以充分利用网络状况,提高上传速度,并且根据与可用线程对应的游标值可以在文件块上传失败的位置重传或文件块上传中断的文件块位置续传,不必重新上传整个文件,同时还可以根据CPU的核数确定文件上传的可用线程数,能够充分利用终端设备的CPU,因此,能够提高文件上传的速度。
参考图4,图4为本发明实施例提供的另一种文件上传装置的结构示意图,与图2所示流程图对应,其应用于应用于终端设备,该终端设备中保存有文件上传信息表,该装置可以包括:读取单元301、确定单元302、更新单元303、上传单元304、平均传输速度获得单元305、比较单元306和判断单元307。
其中,比较单元306,可以包括:第一比较子单元3061、第二比较子单元3062和第三比较子单元3063和替换子单元3064。
第一比较子单元3061,用于当所述平均传输速度大于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调大。
第二比较子单元3062,用于当所述平均传输速度小于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调小。
第三比较子单元3063,用于当所述平均传输速度等于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量不变。
假设,当平均传输速度大于文件上传信息表中与第一当前可用线程对应的上传速度时,文件上传信息表中与第一当前可用线程对应的文件块数据量调大20%,当平均传输速度小于文件上传信息表中与第一当前可用线程对应的上传速度时,文件上传信息表中与第一当前可用线程对应的文件块数据量调小20%,当平均传输速度等于文件上传信息表中与第一当前可用线程对应的上传速度时,文件上传信息表中与第一当前可用线程对应的文件块数据量不变,文件上传信息表中与第一当前可用线程对应的文件块数据量为100kB,上传速度为10kB/s,若获得的文件块在上传过程中的平均传输速度为12kB/s,平均传输速度大于上传速度,则第一比较子单元3061将文件上传信息表中与第一当前可用线程对应的文件块数据量调大为120kB,若获得的文件块在上传过程中的平均传输速度为8kB/s,平均传输速度小于上传速度,则第二比较子单元3062将文件上传信息表中与第一当前可用线程对应的文件块数据量调小为80kB,若获得的文件块在上传过程中的平均传输速度为10kB/s,平均传输速度等于上传速度,则第三比较子单元3063将文件上传信息表中与第一当前可用线程对应的文件块数据量保持不变。
替换子单元3064,用于将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度。
在调整了下一上传文件块数据量后,替换子单元3064需要将文件上传信息表中的与第一当前可用线程对应的上传速度替换为该平均传输速度,以便下一文件块上传过程中的平均传输速度进行比较。
应用图4所示实施例,存储了与每个可用线程对应的游标值与待上传文件的当前游标值,从与每个可用线程对应的游标值位置开始上传文件块,且根据文件块在上传过程中的平均传输速度调整文件块数据量,可以充分利用网络状况,提高上传速度,并且根据与可用线程对应的游标值可以在文件块上传失败的位置重传或文件块上传中断的文件块位置续传,不必重新上传整个文件,同时还可以根据CPU的核数确定文件上传的可用线程数,能够充分利用终端设备的CPU,因此,能够提高文件上传的速度。
对于系统/装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以存储于计算机可读取存储介质中,这里所称得的存储介质,如:ROM/RAM、磁碟、光盘等。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (10)

1.一种文件上传方法,其特征在于,应用于终端设备,所述终端设备中保存有文件上传信息表,所述方法包括步骤:
读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度;
将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值;
根据与所述第一当前可用线程对应的游标值和与第一当前可用线程对应的文件块数据量之和更新所述待上传文件的当前游标值;
从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传;
获得与所述第一当前可用线程对应的文件块数据量的文件块在上传过程中的平均传输速度;
根据所述平均传输速度与所述文件上传信息表中与所述第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量进行调整,将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度;
判断所述待上传文件中是否存在未上传部分,如果所述待上传文件中存在未上传部分,则继续执行所述读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度的步骤。
2.根据权利要求1所述的方法,其特征在于,将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值后,还包括:将所述第一当前可用线程对应的游标值与所述第一当前可用线程对应的文件块数据量存储在所述文件上传信息表中。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
当文件块未成功上传时,从所述文件上传信息表中获取与所述第一当前可用线程对应的游标值和该文件块的文件块数据量,再次执行所述从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传的步骤。
4.根据权利要求1所述的方法,其特征在于,所述根据所述平均传输速度与所述文件上传信息表中与所述第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量进行调整,包括:
当所述平均传输速度大于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,则将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调大;
当所述平均传输速度小于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,则将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调小;
当所述平均传输速度等于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,则所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量不变。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述判断所述待上传文件中是否存在未上传部分,包括:
判断所述待上传文件的当前游标值是否小于所述待上传的文件的数据量,如果是,则确定所述待上传文件中存在未上传部分,否则,确定所述待上传文件中不存在未上传部分。
6.一种文件上传装置,其特征在于,应用于终端设备,所述终端设备中保存有文件上传信息表,所述装置包括:读取单元、确定单元、更新单元、上传单元、平均传输速度获得单元、比较单元和判断单元;
所述读取单元,用于读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度;
所述确定单元,用于将所述待上传文件的当前游标值确定为与所述第一当前可用线程对应的游标值;
所述更新单元,用于根据与所述第一当前可用线程对应的游标值和与第一当前可用线程对应的文件块数据量之和更新所述待上传文件的当前游标值;
所述上传单元,用于从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传;
所述平均传输速度获得单元,用于获得与所述第一当前可用线程对应的文件块数据量的文件块在上传过程中的平均传输速度;
所述比较单元,用于根据所述平均传输速度与所述文件上传信息表中与所述第一当前可用线程对应的上传速度的比较结果,对所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量进行调整,将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度;
所述判断单元,用于判断所述待上传文件中是否存在未上传部分,如果所述待上传文件中存在未上传部分,则触发所述读取单元继续读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:存储单元,用于将所述第一当前可用线程对应的游标值与所述第一当前可用线程对应的文件块数据量存储在所述文件上传信息表中。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:重传单元,用于当文件块未成功上传时,从所述文件上传信息表中获取与所述第一当前可用线程对应的游标值和该文件块的文件块数据量,触发所述上传单元从与所述第一当前可用线程对应的游标值开始,使用所述第一当前可用线程对与所述第一当前可用线程对应的文件块数据量的文件块进行上传。
9.根据权利要求6所述的装置,其特征在于,所述比较单元,包括:第一比较子单元、第二比较子单元、第三比较子单元和替换子单元;
所述第一比较子单元,用于当所述平均传输速度大于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调大;
所述第二比较子单元,用于当所述平均传输速度小于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,将所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量调小;
所述第三比较子单元,用于当所述平均传输速度等于所述文件上传信息表中与所述第一当前可用线程对应的上传速度,所述文件上传信息表中与所述第一当前可用线程对应的文件块数据量不变;
所述替换子单元,用于将所述文件上传信息表中的与所述第一当前可用线程对应的上传速度替换为所述平均传输速度。
10.根据权利要求6至9任一项所述的装置,其特征在于,所述判断单元,具体用于:
判断所述待上传文件的当前游标值是否小于所述待上传的文件的数据量,如果是,则确定所述待上传文件中存在未上传部分,否则,确定所述待上传文件中不存在未上传部分,如果所述待上传文件中存在未上传部分,则触发所述读取单元继续读取所述文件上传信息表中的待上传文件的当前游标值及与第一当前可用线程对应的文件块数据量和上传速度。
CN201510727844.0A 2015-10-30 2015-10-30 一种文件上传方法及装置 Active CN105262830B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510727844.0A CN105262830B (zh) 2015-10-30 2015-10-30 一种文件上传方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510727844.0A CN105262830B (zh) 2015-10-30 2015-10-30 一种文件上传方法及装置

Publications (2)

Publication Number Publication Date
CN105262830A CN105262830A (zh) 2016-01-20
CN105262830B true CN105262830B (zh) 2018-08-07

Family

ID=55102334

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510727844.0A Active CN105262830B (zh) 2015-10-30 2015-10-30 一种文件上传方法及装置

Country Status (1)

Country Link
CN (1) CN105262830B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111917867A (zh) * 2020-07-29 2020-11-10 星辰天合(北京)数据科技有限公司 上传Web文件的方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1152337A1 (en) * 1995-12-26 2001-11-07 Mitsubishi Denki Kabushiki Kaisha File server load distribution system and method
CN102811258A (zh) * 2012-07-27 2012-12-05 北京星网锐捷网络技术有限公司 数据并发下载方法、装置和网络设备
CN103442037A (zh) * 2013-08-09 2013-12-11 华南理工大学 一种基于ftp协议实现超大文件多线程断点上传的方法
CN104301438A (zh) * 2014-07-25 2015-01-21 武汉传神信息技术有限公司 一种上传文件的方法
CN104994143A (zh) * 2015-06-19 2015-10-21 小米科技有限责任公司 文件下载方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1152337A1 (en) * 1995-12-26 2001-11-07 Mitsubishi Denki Kabushiki Kaisha File server load distribution system and method
CN102811258A (zh) * 2012-07-27 2012-12-05 北京星网锐捷网络技术有限公司 数据并发下载方法、装置和网络设备
CN103442037A (zh) * 2013-08-09 2013-12-11 华南理工大学 一种基于ftp协议实现超大文件多线程断点上传的方法
CN104301438A (zh) * 2014-07-25 2015-01-21 武汉传神信息技术有限公司 一种上传文件的方法
CN104994143A (zh) * 2015-06-19 2015-10-21 小米科技有限责任公司 文件下载方法和装置

Also Published As

Publication number Publication date
CN105262830A (zh) 2016-01-20

Similar Documents

Publication Publication Date Title
US8732306B2 (en) High speed parallel data exchange with transfer recovery
US20180025068A1 (en) Automatic mode switching in a synchronous replication environment
US10001945B2 (en) Method of storing data and data storage managing server
US11650889B2 (en) Zero data loss transfer protocol
US10887171B2 (en) Routing configuration method of view files, storage medium, terminal device and apparatus
US20170078207A1 (en) Network prioritization based on node-level attributes
US20120079001A1 (en) High speed parallel data exchange with receiver side data handling
CN109964215B (zh) 具有环形缓冲区镜像的远程直接存储器访问数据通信中的流控制
JP6007972B2 (ja) 通信ノード、パケット処理方法及びプログラム
CN110493342A (zh) 文件传输方法、装置、电子设备及可读存储介质
CN105262830B (zh) 一种文件上传方法及装置
CN103294742A (zh) 用于在便携式终端中确定内容重复的装置和方法
CN107547468B (zh) 网络协议切换装置、方法及终端
WO2023078128A1 (zh) 虚拟订单的处理方法、装置、设备及计算机可读存储介质
CN116521816A (zh) 一种数据处理方法、检索方法、装置、设备以及存储介质
CN105243009B (zh) 一种使用日志确定方法及装置
EP1643672A2 (en) Method and apparatus for transmitting wireless data by changing transmission rate dynamically
CN105391589B (zh) 一种报文传输的方法及装置
US10514850B2 (en) Information processing system, server device, Information processing method, and computer program product
EP2534586B1 (en) Managing a navigation history
JPH10341221A (ja) ファイル伝送システム
CN107239376B (zh) 一种服务器互联芯片的自动化调试方法及装置
CN102769604B (zh) 操作数据处理方法及装置
CN109508253A (zh) 错误校正电路、其操作方法以及包括其的数据存储装置
CN103677938A (zh) 一种紧急下载方法及其装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant