CN108965463B - 一种文件传输方法、装置和系统 - Google Patents

Abstract

本发明提供了一种文件传输方法，包括：接收文件分片存储请求，所述文件分片存储请求中携带有文件标识、分片标识和分片内容；判断缓存中是否存储有所述文件标识和对应的分片标识；若缓存中未存储有所述文件标识和对应的分片标识，则基于所述文件标识，在存储目录中存储对应的分片内容。

Description

一种文件传输方法、装置和系统

技术领域

本发明涉及通信技术领域，具体而言，涉及一种文件传输方法、装置和系统。

背景技术

现有在上传文件时，一般是通过直接上传文件流的方式，也就是通过单线程方式读取文件流并上传到后台服务器，对于小文件而言，这样直接的方式是可行的，也比较便捷。但是，对于大文件而言，文件越大，上传速度就会越慢，在文件传输过程中也会产生各种问题，如网络环境不稳定时，会造成文件传输中断，一旦正在传输的文件被中断，在网络恢复后，之前已传输过的文件均需要重新传输，浪费用户时间，同时，给用户带来特别不好的体验。

发明内容

有鉴于此，本发明的目的在于提供一种文件传输方法、装置和系统，用于解决现有技术中文件传输缓慢的问题。

第一方面，本申请实施例提供了一种文件传输方法，包括：

接收文件分片存储请求，所述文件分片存储请求中携带有文件标识、分片标识和分片内容；

判断缓存中是否存储有所述文件标识和对应的分片标识；

若缓存中未存储有所述文件标识和对应的分片标识，则基于所述文件标识，在存储目录中存储对应的分片内容。

可选地，所述方法还包括：

若缓存中存储有所述文件标识和对应的分片标识，则不存储所述分片标识对应的分片内容。

可选地，在所述接收文件分片存储请求后，还包括：

判断本端是否已存储过对应所述文件标识的分片内容；

若本端未存储过对应所述文件标识的分片内容，则创建所述存储目录。

可选地，所述缓存中还存储有与所述文件标识对应的存储目录；所述方法还包括：

接收文件分片合并请求，所述文件分片合并请求中携带有所述文件标识和对应的校验信息；

基于所述校验信息，对与所述文件标识对应的分片内容进行校验，得到校验结果；

若校验结果为校验成功，则对与所述文件标识对应的所述存储目录中的分片内容进行合并处理。

可选地，所述缓存中还存储有与所述文件标识对应的验证码和分片大小；所述基于所述校验信息，对与所述文件标识对应的分片内容进行校验，得到校验结果，包括：

判断所述校验信息中的校验码与缓存中对应所述文件标识的验证码是否匹配；

若所述校验信息中的校验码与缓存中对应所述文件标识的验证码匹配，则计算所述文件标识对应的各分片大小的和值；

若所述和值与所述校验信息中的文件大小相同，则校验结果为校验成功；

若所述和值与所述校验信息中的文件大小不同，则校验结果为校验失败。

第二方面，本申请实施例提供了一种文件传输装置，包括：

接收模块，用于接收文件分片存储请求，所述文件分片存储请求中携带有文件标识、分片标识和分片内容；

判断模块，用于判断缓存中是否存储有所述文件标识和对应的分片标识；

存储模块，用于若缓存中未存储有所述文件标识和对应的分片标识，则基于所述文件标识，在存储目录中存储对应的分片内容。

可选地，所述存储模块还用于：

若缓存中存储有所述文件标识和对应的分片标识，则不存储所述分片标识对应的分片内容。

可选地，还包括：创建模块，

所述判断模块，还用于判断本端是否已存储过对应所述文件标识的分片内容；

所述创建模块，用于若本端未存储过对应所述文件标识的分片内容，则创建所述存储目录。

可选地，所述缓存中还存储有与所述文件标识对应的存储目录；该装置还包括：校验模块和合并模块：

所述接收模块，还用于接收文件分片合并请求，所述文件分片合并请求中携带有所述文件标识和对应的校验信息；

所述校验模块，用于基于所述校验信息，对与所述文件标识对应的分片内容进行校验，得到校验结果；

所述合并模块，用于若校验结果为校验成功，则对与所述文件标识对应的所述存储目录中的分片内容进行合并处理。

第四方面，本申请实施例提供了一种文件传输系统，包括：至少一个前端设备和后台，所述后台用于执行上述的方法。

本发明实施例的文件传输方法、装置和系统，在接收到的文件分片存储请求后，判断缓存中是否存储有文件标识和对应的分片标识，若缓存中未存储有所述文件标识和对应的分片标识，则基于文件标识，在存储目录中存储对应的分片内容。这样，对于一个文件，采用分片存储的方式，避免了在网络中断时再次传输整个文件，提高了文件的传输效率，也提高了用户体验。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本发明一实施例提供的一种文件传输系统的结构示意图；

图2为本发明一实施例提供的一种文件传输方法的流程示意图；

图3为本发明一实施例提供的一种文件传输装置的结构示意图；

图4为本发明一实施例提供的一种计算机设备的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请实施例提供了一种文件传输系统，如图1所示，该系统包括：至少一个前端设备11和后台12，所述后台12用于执行下文的文件传输方法。其中，前端设备11可以是但不限于计算机设备、移动终端、服务器等，后台12可以是但不限于计算机设备、移动终端、服务器等。

前端设备11会对于大于设定阈值的文件进行分片，在对文件进行分片时，可以基于预先设置的分片大小阈值对文件进行分片，本申请对此不与限制。由于文件的大小不会严格保持为分片大小的整数倍，在对文件进行分片时，最后一个分片可能不会与分片大小阈值相同，因此，对于不等于分片大小阈值的最后一个分片一般保持该分片的大小。

例如，文件的大小为95兆，预设的分片大小阈值为10兆，在对此文件进行分片时，每个分片的大小应保持10兆，由于该文件的大小不是分片大小阈值的整数倍，因此，在分片时，前9个分片的大小均为10兆，第10个分片的大小为5兆即可。

前端设备11会向后台12发送文件分片存储请求，后台12在接收到文件分片存储请求后，首先，会查看后台是否存储过当前分片对应的文件，若后台已存储过当前分片对应的文件，则在对应该文件的存储目录中存储当前分片(也就是分片内容)，若后台未存储过当前分片对应的文件，则创建用于存储当前分片对应的文件的存储目录。

若由于网络原因分片传输中断，那么，前端设备11会针对当前文件重新进行分片，依次针对每个分片发起文件分片存储请求，后台12在接收到文件分片存储请求后，判断后台是否存在当前分片，若后台存在当前分片，则后台不会再次进行存储，若后台不存在当前分片，那么后台存储该分片，以下进行详细叙述。

本申请实施例提供了一种文件传输方法，如图2所示，该方法包括：

S201，接收文件分片存储请求，所述文件分片存储请求中携带有文件标识、分片标识和分片内容；

这里，文件分片存储请求中除了携带有文件标识、对应该文件的分片标识和对应分片标识的分片内容外，还携带有分片大小、文件的校验码、用户标识等，其中，文件标识可以为文件名称等，用户标识一般为用户名称；分片内容也就是分片。

文件分片存储请求可以为前端设备通过异步JavaScript和XML(AsynchronousJavascript and XML，ajax)技术发起的XmlHttpRequest请求，该文件分片存储请求可以为用户通过前端设备的浏览器发送的，也可以为通过其他工具发送，本申请对此不予限制。

在具体实施中，文件分片存储请求中可以携带有多个文件标识，以及每个文件标识对应的多个分片标识，以及每个分片标识对应的分片内容，也可以仅携带有一个文件标识、该一个文件标识对应的一个分片标识以及分片标识对应的分片内容，本申请对此不予限制。优选地，文件分片存储请求中仅携带有一个文件标识、该一个文件标识对应的一个分片标识以及分片标识对应的分片内容。

在接收文件分片存储请求后，还包括以下步骤：

判断本端是否已存储过对应所述文件标识的分片内容；

若本端未存储过对应所述文件标识的分片内容，则创建所述存储目录。

在具体实施中，本端的缓存中存储有文件标识、存储目录、分片标识、分片大小、验证码之间的对应关系，在接收到文件分片存储请求后，在本端的缓存中，查询与文件分片存储请求中携带的文件标识对应的存储目录，若未查询到存储目录，则创建存储目录，并在缓存中存储创建的存储目录，这样，下次接收到文件分片存储请求后，可以在创建的存储目录中存储对应的文件分片。若查询到存储目录，则执行后续的步骤。

例如，前端设备按照分片编号由小到大依次发送文件分片存储请求，若接收到的文件分片存储请求中携带的文件标识为A、分片标识为1和对应的分片，在第一次接收到对文件A的存储请求后，会创建存储目录，存储目录可以任意创建，如，D：/redis，并将分片1存储在创建的存储目录中，并在缓存中对应存储文件标识A、D：/redis、分片标识1；若接收到的文件分片存储请求中携带的文件标识为A、分片标识为5和对应的分片内容，在接收到对文件A的存储请求后，查询缓存中是否存在文件标识A，若缓存中存在文件标识A，则执行后续的步骤。

S202，判断缓存中是否存储有所述文件标识和对应的分片标识；

在具体实施中，从缓存中，查询与文件分片存储请求中携带的文件标识一致的文件标识，若查询到与文件分片存储请求中携带的文件标识一致的文件标识，则判断文件分片存储请求中携带的分片标识与查询到的文件标识对应的分片标识是否一致。

延续步骤S201中的示例，若接收到的文件分片存储请求携带的文件标识为A、分片标识为5以及对应的分片，查询缓存中，是否存在与文件标识A一致的文件标识，若存在文件标识A，则判断查询到的文件标识A对应的分片标识与分片标识5是否一致。

S203，若缓存中未存储有所述文件标识和对应的分片标识，则基于所述文件标识，在存储目录中存储对应的分片内容。

若缓存中存储有所述文件标识和对应的分片标识，则不存储所述分片标识对应的分片内容。

在具体实施中，若缓存中未存储有文件标识和对应的分片标识，则可以根据文件分片存储请求中的文件标识或分片标识，从缓存中获取与接收到的文件标识对应的存储目录，在存储目录中存储对应的分片内容，若缓存中存储有文件标识和对应的分片标识，说明此分片已存储过，则不存储分片标识对应的分片内容。

延续步骤S202中的示例，接收到的文件分片存储请求携带的文件标识为A、分片标识为5以及对应的分片，若在缓存中未查询到对应分片标识5的分片标识，那么，在对应文件标识A的存储目录中存储对应分片标识5的分片，若在缓存中查询到对应分片标识5的分片标识，则说明该分片已存储过，可以丢弃该分片。

对于能够在缓存中查询与接收到的分片标识对应的分片标识情况，一般是由于网络中断或者设备故障导致传输中断，这种情况仅仅会影响文件中正在传输的当前分片的传输效率，而对于其它分片则没有影响，在网络恢复或设备正常后，后台对于已经存储过的分片不再进行存储，仅存储未传输过的分片，减少了传输时间，提高了传输效率，同时也增加了用户体验。

在传输完当前文件对应的各个分片后，该方法还包括以下步骤：

接收文件分片合并请求，所述文件分片合并请求中携带有所述文件标识和对应的校验信息；

基于所述校验信息，对与所述文件标识对应的分片内容进行校验，得到校验结果；

若校验结果为校验成功，则对与所述文件标识对应的所述存储目录中的分片内容进行合并处理。

在基于所述校验信息，对与所述文件标识对应的分片内容进行校验，得到校验结果时，包括以下步骤：

判断所述校验信息中的校验码与缓存中对应所述文件标识的验证码是否匹配；

若所述校验信息中的校验码与缓存中对应所述文件标识的验证码匹配，则计算所述文件标识对应的各分片大小的和值；

若所述和值与所述校验信息中的文件大小相同，则校验结果为校验成功；

若所述和值与所述校验信息中的文件大小不同，则校验结果为校验失败。

这里，校验信息包括校验码和文件大小，校验码可以为MD5值、哈希值等，本申请对此不与限制；合并处理的技术在现有技术中已有详细的解释，此处不再进行过多说明。

在具体实施中，在接收到文件合并请求后，判断文件合并请求中的校验码和缓存中存储的对应文件标识的验证码是否一致，若文件合并请求中的校验码和缓存中存储的对应文件标识的校验码一致，则计算缓存中存储的对应文件合并请求中的文件标识的各分片的分片大小的和值，判断计算的和值与校验信息中的文件大小是否一致，若计算的和值和校验信息中的文件大小一致，则验证成功，若计算的和值和校验信息中的文件大小不一致，则校验失败。其中，若文件合并请求中的校验码和缓存中存储的对应文件标识的验证码不一致，则校验失败，不对当前文件标识对应的分片内容做任何处理。

在文件校验成功时，对文件合并请求中文件标识对应的各分片内容进行合并处理，并传输。

例如，文件合并请求中携带有MD5值为0ca175b9c0f726a831d895e269332461、文件标识为A、分片标识为1-10、文件大小为95M，缓存中对应存储有文件A对应的文件标识A、分片标识为1-10、分片1-9中每个分片的大小为10M、分片10的大小为5M以及MD5的值，在接收到文件合并请求后，可以首先判断文件合并请求中的MD5值与缓存中对应文件标识A的MD5值(也就是验证码)是否一致，若缓存中的验证码不是0ca175b9c0f726a831d895e269332461，则验证不一致，校验失败，若缓存中的验证码为0ca175b9c0f726a831d895e269332461，则验证一致，则计算缓存中文件标识A对应的各个分片的大小的和值，若得到的和值为95M，该和值与文件合并请求中的文件大小一致，则对文件A校验成功，否则，校验失败。

本申请实施例提供了一种文件传输装置，如图3所示，该装置包括：

接收模块31，用于接收文件分片存储请求，所述文件分片存储请求中携带有文件标识、分片标识和分片内容；

判断模块32，用于判断缓存中是否存储有所述文件标识和对应的分片标识；

存储模块33，用于若缓存中未存储有所述文件标识和对应的分片标识，则基于所述文件标识，在存储目录中存储对应的分片内容。

可选地，所述存储模块33还用于：

若缓存中存储有所述文件标识和对应的分片标识，则不存储所述分片标识对应的分片内容。

还包括：创建模块34，所述判断模块21，还用于判断本端是否已存储过对应所述文件标识的分片内容；

所述创建模块34，用于若本端未存储过对应所述文件标识的分片内容，则创建所述存储目录。

可选地，所述缓存中还存储有与所述文件标识对应的存储目录；该装置还包括：校验模块35和合并模块36，

所述接收模块31，还用于接收文件分片合并请求，所述文件分片合并请求中携带有所述文件标识和对应的校验信息；

所述校验模块35，用于基于所述校验信息，对与所述文件标识对应的分片内容进行校验，得到校验结果；

所述合并模块36，用于若校验结果为校验成功，则对与所述文件标识对应的所述存储目录中的分片内容进行合并处理。

可选地，所述缓存中还存储有与所述文件标识对应的验证码和分片大小；所述校验模块具体用于：

判断所述校验信息中的校验码与缓存中对应所述文件标识的验证码是否匹配；

若所述校验信息中的校验码与缓存中对应所述文件标识的验证码匹配，则计算所述文件标识对应的各分片大小的和值；

若所述和值与所述校验信息中的文件大小相同，则校验结果为校验成功；

若所述和值与所述校验信息中的文件大小不同，则校验结果为校验失败。

对应于图2中的文件传输方法，本申请实施例还提供了一种计算机设备，如图4所示，该设备包括存储器401、处理器402及存储在该存储器401上并可在该处理器402上运行的计算机程序，其中，上述处理器402执行上述计算机程序时实现上述文件传输方法。

具体地，上述存储器401和处理器402能够为通用的存储器和处理器，这里不做具体限定，当处理器402运行存储器401存储的计算机程序时，能够执行上述文件传输方法，用于解决现有技术中文件传输缓慢的问题，本申请在接收到的文件分片存储请求后，判断缓存中是否存储有文件标识和对应的分片标识，若缓存中未存储有所述文件标识和对应的分片标识，则基于文件标识，在存储目录中存储对应的分片内容。这样，对于一个文件，采用分片存储的方式，避免了在网中断时再次传输整个文件，提高了文件了传输效率，也提供了用户体验。

对应于图2中的文件传输方法，本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述文件传输方法的步骤。

具体地，该存储介质能够为通用的存储介质，如移动磁盘、硬盘等，该存储介质上的计算机程序被运行时，能够执行上述文件传输方法，用于解决现有技术中文件传输缓慢的问题，本申请在接收到的文件分片存储请求后，判断缓存中是否存储有文件标识和对应的分片标识，若缓存中未存储有所述文件标识和对应的分片标识，则基于文件标识，在存储目录中存储对应的分片内容。这样，对于一个文件，采用分片存储的方式，避免了在网中断时再次传输整个文件，提高了文件了传输效率，也提供了用户体验。

在本发明所提供的实施例中，应该理解到，所揭露装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明提供的实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释，此外，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围。都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (7)

1.一种文件传输方法，其特征在于，包括：

接收文件分片存储请求，所述文件分片存储请求中携带有文件标识、分片标识和分片内容；

判断缓存中是否存储有所述文件标识和对应的分片标识；

若缓存中未存储有所述文件标识和对应的分片标识，则基于所述文件标识，从所述缓存中获取与所述文件标识对应的存储目录，在所述存储目录中存储对应的分片内容；

所述缓存中还存储有与所述文件标识对应的存储目录以及所述文件标识对应的验证码和分片大小；

接收文件分片合并请求，所述文件分片合并请求中携带有所述文件标识和对应的校验信息；

判断所述校验信息中的校验码与缓存中对应所述文件标识的验证码是否匹配；

若所述校验信息中的校验码与缓存中对应所述文件标识的验证码匹配，则计算所述文件标识对应的各分片大小的和值；

若所述和值与所述校验信息中的文件大小相同，则校验结果为校验成功；

若所述和值与所述校验信息中的文件大小不同，则校验结果为校验失败；

若校验结果为校验成功，则对与所述文件标识对应的所述存储目录中的分片内容进行合并处理。

2.如权利要求1所述的方法，其特征在于，所述方法还包括：

若缓存中存储有所述文件标识和对应的分片标识，则不存储所述分片标识对应的分片内容。

3.如权利要求1所述的方法，其特征在于，在所述接收文件分片存储请求后，还包括：

判断本端是否已存储过对应所述文件标识的分片内容；

若本端未存储过对应所述文件标识的分片内容，则创建所述存储目录。

4.一种文件传输装置，其特征在于，包括：

接收模块，用于接收文件分片存储请求，所述文件分片存储请求中携带有文件标识、分片标识和分片内容；

判断模块，用于判断缓存中是否存储有所述文件标识和对应的分片标识；

存储模块，用于若缓存中未存储有所述文件标识和对应的分片标识，则基于所述文件标识，从所述缓存中获取与所述文件标识对应的存储目录，在所述存储目录中存储对应的分片内容；

所述缓存中还存储有与所述文件标识对应的存储目录以及所述文件标识对应的验证码和分片大小；

接收模块，还用于接收文件分片合并请求，所述文件分片合并请求中携带有所述文件标识和对应的校验信息；

校验模块，用于判断所述校验信息中的校验码与缓存中对应所述文件标识的验证码是否匹配；

校验模块，还用于若所述校验信息中的校验码与缓存中对应所述文件标识的验证码匹配，则计算所述文件标识对应的各分片大小的和值；

校验模块，还用于若所述和值与所述校验信息中的文件大小相同，则校验结果为校验成功；

校验模块，还用于若所述和值与所述校验信息中的文件大小不同，则校验结果为校验失败；

合并模块，用于若校验结果为校验成功，则对与所述文件标识对应的所述存储目录中的分片内容进行合并处理。

5.如权利要求4所述的装置，其特征在于，所述存储模块还用于：

若缓存中存储有所述文件标识和对应的分片标识，则不存储所述分片标识对应的分片内容。

6.如权利要求4所述的装置，其特征在于，还包括：创建模块，

所述判断模块，还用于判断本端是否已存储过对应所述文件标识的分片内容；

所述创建模块，用于若本端未存储过对应所述文件标识的分片内容，则创建所述存储目录。

7.一种文件传输系统，其特征在于，包括：至少一个前端设备和后台，所述后台用于执行如权利要求1-3中任一项所述的方法。

Images