CN104253816A - 基于http协议的大文件页面断点续传的方法 - Google Patents
基于http协议的大文件页面断点续传的方法 Download PDFInfo
- Publication number
- CN104253816A CN104253816A CN201410499818.2A CN201410499818A CN104253816A CN 104253816 A CN104253816 A CN 104253816A CN 201410499818 A CN201410499818 A CN 201410499818A CN 104253816 A CN104253816 A CN 104253816A
- Authority
- CN
- China
- Prior art keywords
- file
- storage server
- transfer storage
- files
- file transfer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种基于HTTP协议的大文件页面断点续传的方法和系统，包括网页浏览器，文件索引服务器，文件传输存储服务器和大文件上传插件。网页浏览器，基于HTTP协议，作为所述大文件上传插件的载体。文件索引服务器用于存储欲上传文件的传输索引值。文件传输存储服务器，用于存储欲上传文件的上传成功的文件块信息。大文件上传插件，用于发出HTTP请求到所述文件索引服务器，查询传输索引值的文件是否存在于文件传输存储服务器中；从文件传输存储服务器上获取上传成功的文件块信息；获取创建上传线程。本发明主要解决了浏览器上传大文件性能问题，以友好的界面实时显示文件上传的进度和速度，方便快捷的控制多上传任务的暂停、取消、恢复。
Description
技术领域
本发明涉及一种基于HTTP协议的大文件页面断点续传的方法。
背景技术
当前，互联网成为人们生活工作不可或缺的元素。人们通过互联网进行数据的下载和上传，现在网络上上传文件所使用的含断点续传技术的工具主要是基于FTP的，续传的步骤包括上传和下载，但是很多网络上通用的防火墙不允许FTP上传，所以只能使用基于HTTP协议开发的上传工具。大多文件下载服务支持商提供了大文件的下载断点续传功能，如百度、迅雷、蚂蚁等等。但是，对于基于HTTP协议的大文件上传，但是基于HTTP协议的上传软件却是一个空缺并且具有很多不足，满足不了社会的需要。
HTTP是Web协议集中的重要协议，它是从客户机/服务器模型发展起来的。客户机/服务器是运行一对相互通信的程序，客户与服务器连接时，首先，向服务器提出请求，服务器根据客户的请求，完成处理并给出响应。因此，开发一种基于HTTP协议的大文件页面断点续传的工具，是广大普通互联网用户所期望的。
发明内容
本发明所要解决的技术问题是提供一种基于HTTP协议的大文件页面断点续传的方法，以克服现有技术不支持大文件页面断点续传的缺陷。
为解决上述技术问题，本发明所提出的基于HTTP协议的大文件页面断点续传的方法，涉及文件索引服务器，文件传输存储服务器，大文件上传插件，包括以下步骤：
开启网页浏览器，所述大文件上传插件自启动；
所述大文件上传插件获取欲上传文件的传输索引值，发送查询HTTP请求到所述文件索引服务器，查询所述传输索引值的文件是否存在于所述文件传输存储服务器中，
如果所述传输索引值存在，则结束文件上传；
如果所述传输索引值不存在，则从所述文件传输存储服务器上获取上传成功的文件块信息；
所述大文件上传插件根据返回的上传成功的文件块信息，取到文件的续传位置，开始对文件进行断点续传处理；
所述大文件上传插件创建基于HTTP协议的上传线程，对文件没有上传的部份，进行分块读取，将相应没有上传成功的文件块上传至所述文件传输存储服务器，并调用JS回调函数更新界面上传任务的进度和速度；
上传完最后一个文件块时，向所述文件传输存储服务器发送文件块信息合并的HTTP请求，由所述文件传输存储服务器合并相应的文件块信息，生成完整的文件。
进一步优化的方案是，生成完整的文件后，所述文件传输存储服务器对生成的完整文件通过传输索引值进行文件校验；
如果校验一致，则上传成功结束；如果校验不一致，则返回错误提示用户文件检验失败，上传结束。
更优选的，所述上传线程将相应没有上传成功的文件块上传至所述文件传输存储服务器的同时，调用JS回调函数更新界面上传任务的进度和速度。
优选的，所述大文件上传插件为Activex插件或NPAPI插件。
优选的，所述文件传输存储服务器上获取上传成功的文件块以1M为单位。所述传输索引值为MD5值。
一种基于HTTP协议的大文件页面断点续传的方法的系统，包括网页浏览器，文件索引服务器，文件传输存储服务器和大文件上传插件，
所述网页浏览器，基于HTTP协议，用于所述大文件上传插件的载体，
所述文件索引服务器，用于存储欲上传文件的传输索引值；
所述文件传输存储服务器，用于存储欲上传文件的上传成功的文件块信息；
所述大文件上传插件，用于发出HTTP请求到所述文件索引服务器，查询所述传输索引值的文件是否存在于所述文件传输存储服务器中；从所述文件传输存储服务器上获取上传成功的文件块信息；获取创建上传线程。
进一步的，所述大文件上传插件，用于上传完最后一个文件块时，向所述文件传输存储服务器发送文件块信息合并的HTTP请求；
所述文件传输存储服务器，用于合并相应的文件块信息，生成完整的文件。
所述文件传输存储服务器，还用于对生成的完整文件通过传输索引值进行文件校验。
本发明通过对大文件分块读取上传，使得浏览器上传文件的性能优化，克服了以往浏览器中大文件上传不了的缺陷。利用通用的HTTP协议上传小文件块，避免上传时对客户端网络环境的苛刻要求，提高了文件传输成功率。运用断点续传方法，避免再次上传已传输的数据部分，减少了传输量，进一步节省了上传超大文件到文件传输存储服务器的时间。
附图说明
下面结合附图和具体实施方式对本发明的技术方案作进一步具体说明。
图1为本发明的结构框图。
图2为本发明的流程图。
具体实施方式
如图1所示，基于HTTP协议的大文件页面断点续传的系统，包括网页浏览器，文件索引服务器，文件传输存储服务器和大文件上传插件，网页浏览器，基于HTTP协议，作为所述大文件上传插件的载体。文件索引服务器用于存储欲上传文件的传输索引值。文件传输存储服务器，用于存储欲上传文件的上传成功的文件块信息。
大文件上传插件，用于发出HTTP请求到所述文件索引服务器，查询传输索引值的文件是否存在于文件传输存储服务器中；从文件传输存储服务器上获取上传成功的文件块信息；获取创建上传线程。上传完最后一个文件块时，向所述文件传输存储服务器发送文件块信息合并的HTTP请求；
文件传输存储服务器，用于合并相应的文件块信息，生成完整的文件。对生成的完整文件通过传输索引值进行文件校验。
结合图2所示，基于HTTP协议的大文件页面断点续传的方法，涉及文件索引服务器，文件传输存储服务器，大文件上传插件，大文件上传插件为Activex插件或NPAPI插件。包括以下步骤：
步骤1、开启网页浏览器，大文件上传插件自启动；大文件上传插件获取欲上传文件的MD5值，发送HTTP请求到文件索引服务器，
步骤2、查询MD5值的文件是否存在于文件传输存储服务器中，
步骤3、如果所述文件存在，则显示文件传输方式为极速上传，传输结束；
步骤4、如果所述文件不存在，则，先从文件传输存储服务器上获取上传成功的文件块信息；文件传输存储服务器上获取上传成功的文件块以1M为单位。
步骤5、大文件上传插件根据返回的文件块信息，取到文件的续传位置，开始对文件进行断点续传处理。
步骤6、大文件上传插件创建上传线程，对文件没有上传的部份，进行分块读取，基于HTTP协议将相应没有上传成功的文件块上传至文件传输存储服务器，并调用JS回调函数更新界面上传任务的进度和速度；
步骤7、上传完最后一个文件块时，向所述文件传输存储服务器发送HTTP请求，由文件传输存储服务器合并相应的文件块信息，生成完整的文件，
步骤8、对生成的完整文件通过MD5值进行文件校验；
步骤9、如果校验一致，则上传成功结束；
步骤10、如果校验不一致，则返回错误提示用户文件检验失败，上传结束。
本发明通过对大文件分块读取上传，提高优化了浏览器上传大文件的性能。利用通用的HTTP协议上传小文件块，避免上传时对客户端网络环境的苛刻要求，提高了文件传输成功率。运用断点续传方法，避免再次上传已传输的数据部分，减少了传输量，进一步节省了上传超大文件到文件传输存储服务器的时间。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上。可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。因此，本发明不限制于任何特定的硬件和软件结合。
最后所应说明的是，以上具体实施方式仅用以说明本发明的技术方案而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或者等同替换，而不脱离本发明技术方案的精神和范围，其均应涵盖在本发明的权利要求范围当中。
Claims (9)
1.一种基于HTTP协议的大文件页面断点续传的方法，其特征在于，涉及文件索引服务器，文件传输存储服务器，大文件上传插件，包括以下步骤：
开启网页浏览器，所述大文件上传插件自启动；
所述大文件上传插件获取欲上传文件的传输索引值，发送查询HTTP请求到所述文件索引服务器，查询所述传输索引值的文件是否存在于所述文件传输存储服务器中，
如果所述传输索引值存在，则结束文件上传；
如果所述传输索引值不存在，则从所述文件传输存储服务器上获取上传成功的文件块信息；
所述大文件上传插件根据返回的上传成功的文件块信息，取到文件的续传位置，开始对文件进行断点续传处理；
所述大文件上传插件创建基于HTTP协议的上传线程，对文件没有上传的部份，进行分块读取，将相应没有上传成功的文件块上传至所述文件传输存储服务器，并调用JS回调函数更新界面上传任务的进度和速度；
上传完最后一个文件块时，向所述文件传输存储服务器发送文件块信息合并的HTTP请求，由所述文件传输存储服务器合并相应的文件块信息，生成完整的文件。
2.根据权利要求1所述的基于HTTP协议的大文件页面断点续传的方法，其特征在于，还包括步骤，
生成完整的文件后，所述文件传输存储服务器对生成的完整文件通过传输索引值进行文件校验；
如果校验一致，则上传成功结束；如果校验不一致，则返回错误提示用户文件检验失败，上传结束。
3.根据权利要求2所述的基于HTTP协议的大文件页面断点续传的方法，其特征在于，所述上传线程将相应没有上传成功的文件块上传至所述文件传输存储服务器的同时，调用JS回调函数更新界面上传任务的进度和速度。
4.根据权利要求3所述的基于HTTP协议的大文件页面断点续传的方法，其特征在于，所述大文件上传插件为Activex插件或NPAPI插件。
5.根据权利要求4述的基于HTTP协议的大文件页面断点续传的方法，其特征在于，所述文件传输存储服务器上获取上传成功的文件块以1M为单位。
6.根据权利要求5所述的基于HTTP协议的大文件页面断点续传的方法，其特征在于，所述传输索引值为MD5值。
7.一种权利要求1至6之一所述基于HTTP协议的大文件页面断点续传的方法的系统，其特征在于，包括网页浏览器，文件索引服务器，文件传输存储服务器和大文件上传插件，
所述网页浏览器，基于HTTP协议，用于所述大文件上传插件的载体，
所述文件索引服务器，用于存储欲上传文件的传输索引值；
所述文件传输存储服务器，用于存储欲上传文件的上传成功的文件块信息；
所述大文件上传插件，用于发出HTTP请求到所述文件索引服务器，查询所述传输索引值的文件是否存在于所述文件传输存储服务器中；从所述文件传输存储服务器上获取上传成功的文件块信息；获取创建上传线程。
8.根据权利要求7所述基于HTTP协议的大文件页面断点续传的方法的系统，其特征在于，
所述大文件上传插件，用于上传完最后一个文件块时，向所述文件传输存储服务器发送文件块信息合并的HTTP请求；
所述文件传输存储服务器，用于合并相应的文件块信息，生成完整的文件。
9.根据权利要求8所述基于HTTP协议的大文件页面断点续传的方法的系统，其特征在于，所述文件传输存储服务器，还用于对生成的完整文件通过传输索引值进行文件校验。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410499818.2A CN104253816A (zh) | 2014-09-25 | 2014-09-25 | 基于http协议的大文件页面断点续传的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410499818.2A CN104253816A (zh) | 2014-09-25 | 2014-09-25 | 基于http协议的大文件页面断点续传的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104253816A true CN104253816A (zh) | 2014-12-31 |
Family
ID=52188352
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410499818.2A Pending CN104253816A (zh) | 2014-09-25 | 2014-09-25 | 基于http协议的大文件页面断点续传的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104253816A (zh) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105306568A (zh) * | 2015-10-23 | 2016-02-03 | 无锡天脉聚源传媒科技有限公司 | 一种基于浏览器续传任务的方法及装置 |
| CN106817391A (zh) * | 2015-12-01 | 2017-06-09 | 百度在线网络技术（北京）有限公司 | 文件断点续传方法和装置 |
| CN106921682A (zh) * | 2015-12-24 | 2017-07-04 | 百度在线网络技术（北京）有限公司 | 文件上传方法和装置 |
| CN107172219A (zh) * | 2017-07-26 | 2017-09-15 | 湖南中车时代通信信号有限公司 | 一种远程更换机车无线数据传输装置软件的方法和系统 |
| CN107172131A (zh) * | 2017-04-26 | 2017-09-15 | 腾讯科技（深圳）有限公司 | 文件上传方法和装置 |
| CN109639807A (zh) * | 2018-12-19 | 2019-04-16 | 中国四维测绘技术有限公司 | 一种基于slice切片的大数据量遥感影像文件网络传输方法 |
| CN109714330A (zh) * | 2018-12-24 | 2019-05-03 | 武汉烽火众智数字技术有限责任公司 | 一种跨网络的断点续传方法和系统 |
| CN110611712A (zh) * | 2019-09-17 | 2019-12-24 | 深圳市数聚能源科技有限公司 | 资料传输方法、装置、计算机设备和存储介质 |
| CN110944034A (zh) * | 2019-10-21 | 2020-03-31 | 量子云未来（北京）信息科技有限公司 | 一种网页端断点续传方法、装置、电子设备及存储介质 |
| CN110995788A (zh) * | 2019-11-13 | 2020-04-10 | 广州辰河质检技术有限公司 | 一种http服务器断点续传上传文件存储的实现方法 |
| CN114095493A (zh) * | 2021-11-17 | 2022-02-25 | 兰州乐智教育科技有限责任公司 | 一种基于断点重传的文件上传方法和系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101174954A (zh) * | 2006-10-31 | 2008-05-07 | 上海高勤通信科技有限公司 | 一种基于互联网超文本传输协议的文件断点上传方法 |
| CN101232562A (zh) * | 2007-01-25 | 2008-07-30 | 深圳市同洲电子股份有限公司 | 机顶盒及其软件升级方法与系统 |
| CN101312566A (zh) * | 2007-05-25 | 2008-11-26 | 上海美通无线网络信息有限公司 | 一种手机上下载大资源的方法 |
| CN101459887A (zh) * | 2009-01-07 | 2009-06-17 | 浪潮通信信息系统有限公司 | 一种手机与计算机之间信息交互的实现方法 |
| US20110320629A1 (en) * | 2008-12-29 | 2011-12-29 | Zte Corporation | Stream media server, client terminal and method and system for downloading stream media |
| CN102523244A (zh) * | 2011-11-18 | 2012-06-27 | 深圳中兴网信科技有限公司 | 一种网页文件的上传方法及其系统 |
-
2014
- 2014-09-25 CN CN201410499818.2A patent/CN104253816A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101174954A (zh) * | 2006-10-31 | 2008-05-07 | 上海高勤通信科技有限公司 | 一种基于互联网超文本传输协议的文件断点上传方法 |
| CN101232562A (zh) * | 2007-01-25 | 2008-07-30 | 深圳市同洲电子股份有限公司 | 机顶盒及其软件升级方法与系统 |
| CN101312566A (zh) * | 2007-05-25 | 2008-11-26 | 上海美通无线网络信息有限公司 | 一种手机上下载大资源的方法 |
| US20110320629A1 (en) * | 2008-12-29 | 2011-12-29 | Zte Corporation | Stream media server, client terminal and method and system for downloading stream media |
| CN101459887A (zh) * | 2009-01-07 | 2009-06-17 | 浪潮通信信息系统有限公司 | 一种手机与计算机之间信息交互的实现方法 |
| CN102523244A (zh) * | 2011-11-18 | 2012-06-27 | 深圳中兴网信科技有限公司 | 一种网页文件的上传方法及其系统 |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105306568A (zh) * | 2015-10-23 | 2016-02-03 | 无锡天脉聚源传媒科技有限公司 | 一种基于浏览器续传任务的方法及装置 |
| CN106817391A (zh) * | 2015-12-01 | 2017-06-09 | 百度在线网络技术（北京）有限公司 | 文件断点续传方法和装置 |
| CN106921682A (zh) * | 2015-12-24 | 2017-07-04 | 百度在线网络技术（北京）有限公司 | 文件上传方法和装置 |
| CN107172131B (zh) * | 2017-04-26 | 2020-12-04 | 腾讯科技（深圳）有限公司 | 文件上传方法和装置 |
| CN107172131A (zh) * | 2017-04-26 | 2017-09-15 | 腾讯科技（深圳）有限公司 | 文件上传方法和装置 |
| CN107172219A (zh) * | 2017-07-26 | 2017-09-15 | 湖南中车时代通信信号有限公司 | 一种远程更换机车无线数据传输装置软件的方法和系统 |
| CN109639807A (zh) * | 2018-12-19 | 2019-04-16 | 中国四维测绘技术有限公司 | 一种基于slice切片的大数据量遥感影像文件网络传输方法 |
| CN109714330A (zh) * | 2018-12-24 | 2019-05-03 | 武汉烽火众智数字技术有限责任公司 | 一种跨网络的断点续传方法和系统 |
| CN109714330B (zh) * | 2018-12-24 | 2021-07-23 | 武汉烽火众智数字技术有限责任公司 | 一种跨网络的断点续传方法和系统 |
| CN110611712A (zh) * | 2019-09-17 | 2019-12-24 | 深圳市数聚能源科技有限公司 | 资料传输方法、装置、计算机设备和存储介质 |
| CN110944034A (zh) * | 2019-10-21 | 2020-03-31 | 量子云未来（北京）信息科技有限公司 | 一种网页端断点续传方法、装置、电子设备及存储介质 |
| CN110995788A (zh) * | 2019-11-13 | 2020-04-10 | 广州辰河质检技术有限公司 | 一种http服务器断点续传上传文件存储的实现方法 |
| CN110995788B (zh) * | 2019-11-13 | 2022-02-22 | 广州辰河质检技术有限公司 | 一种http服务器断点续传上传文件存储的实现方法 |
| CN114095493A (zh) * | 2021-11-17 | 2022-02-25 | 兰州乐智教育科技有限责任公司 | 一种基于断点重传的文件上传方法和系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104253816A (zh) | 基于http协议的大文件页面断点续传的方法 | |
| CN104468843A (zh) | 一种文件上传方法及装置 | |
| CN105302676B (zh) | 一种分布式文件系统的主备机制数据传输方法及装置 | |
| US20170185615A1 (en) | Data processing method and device | |
| CN105227610A (zh) | 一种文件上传、保存方法及装置 | |
| CN103002011B (zh) | 基于服务器的数据更新方法和服务器 | |
| CN103812882A (zh) | 一种文件传输的方法及系统 | |
| CN102857578A (zh) | 一种网络硬盘的文件上传方法、系统及网盘客户端 | |
| CN103577503A (zh) | 云端文件存储系统及方法 | |
| CN104750372B (zh) | 一种文件共享方法和装置 | |
| US9100380B2 (en) | File download method, device and system | |
| CN103685511B (zh) | 一种数据分发方法、装置及系统 | |
| CN102882974A (zh) | 一种通过网站识别版本号节省网站访问资源的方法 | |
| CN106453460B (zh) | 一种文件分发方法、装置和系统 | |
| CN105453035A (zh) | 通过在线存储库更新软件组件 | |
| CN103369002B (zh) | 一种资源下载的方法及系统 | |
| CN109348499B (zh) | 压力测试系统及方法 | |
| CN104361034A (zh) | 一种云存储的文件管理方法及装置 | |
| CN102420863A (zh) | 一种快速分发文件系统和方法及装置 | |
| CN103369034A (zh) | 一种将照片发送到数码相框的方法、系统及装置 | |
| CN105320577A (zh) | 一种数据备份和恢复方法、系统及装置 | |
| CN105335186A (zh) | 数据下载管理方法及系统 | |
| US20130179398A1 (en) | Device for synchronously sharing files and method for synchronously sharing files | |
| CN105069009A (zh) | 一种上传、下载文件夹的方法及装置 | |
| CN106302641B (zh) | 一种上传文件的方法、装置和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| ASS | Succession or assignment of patent right |
Owner name: WANGLAI YUNSHANG INFORMATION TECHNOLOGY (WUHAN) CO Free format text: FORMER OWNER: WUHAN TRANSN INFORMATION TECHNOLOGY CO., LTD. Effective date: 20150703 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20150703 Address after: 430074 Optics Valley Software Park, 4 middle road, East Lake New Technology Development Zone, Hubei, six, 2, 6, 01, room, Wuhan Applicant after: Cloud business information technology (Wuhan) Co., Ltd. Address before: 430074, Optics Valley Software Park, East Lake Development Zone, Wuhan, south of Hubei, South Lake Road, Optics Valley Software Park, 2, six, 5, No. 205 Applicant before: Wuhan Transn Information Technology Co., Ltd. |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20160621 Address after: 430074, Wuhan Software Park, East Lake hi tech Development Zone, Hubei, 4, Optics Valley Software Park, six, 2, 6, 01 rooms Applicant after: Global information technology (Wuhan) Co., Ltd. Address before: 430074 Optics Valley Software Park, 4 middle road, East Lake New Technology Development Zone, Hubei, six, 2, 6, 01, room, Wuhan Applicant before: Cloud business information technology (Wuhan) Co., Ltd. |
|
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20141231 |