CN105872042A - 基于http协议的双边加速系统 - Google Patents

基于http协议的双边加速系统 Download PDF

Info

Publication number
CN105872042A
CN105872042A CN201610188909.3A CN201610188909A CN105872042A CN 105872042 A CN105872042 A CN 105872042A CN 201610188909 A CN201610188909 A CN 201610188909A CN 105872042 A CN105872042 A CN 105872042A
Authority
CN
China
Prior art keywords
interface
data
transmission
module
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610188909.3A
Other languages
English (en)
Inventor
王红凯
邓伟
王蓉
王一蓉
黄韬
于波涛
马跃
李林青
洪建光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NANJING USPEED NETWORK TECHNOLOGY Co Ltd
State Grid Corp of China SGCC
Beijing Guodiantong Network Technology Co Ltd
Information and Telecommunication Branch of State Grid Zhejiang Electric Power Co Ltd
Original Assignee
NANJING USPEED NETWORK TECHNOLOGY Co Ltd
State Grid Corp of China SGCC
Beijing Guodiantong Network Technology Co Ltd
Information and Telecommunication Branch of State Grid Zhejiang Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NANJING USPEED NETWORK TECHNOLOGY Co Ltd, State Grid Corp of China SGCC, Beijing Guodiantong Network Technology Co Ltd, Information and Telecommunication Branch of State Grid Zhejiang Electric Power Co Ltd filed Critical NANJING USPEED NETWORK TECHNOLOGY Co Ltd
Priority to CN201610188909.3A priority Critical patent/CN105872042A/zh
Publication of CN105872042A publication Critical patent/CN105872042A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/565Conversion or adaptation of application format or content
    • H04L67/5651Reducing the amount or size of exchanged application data

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种基于HTTP协议的双边加速系统包括:源服务器为传输数据文件信息的提供方,源服务器将数据文件进行压缩与切片并传输到多个中继服务器;多个中继服务器用于中转源服务器与客户端之间的数据信息与信令;客户端为传输数据文件信息的接收方,客户端从多个中继服务器接收切片并还原出数据文件。本发明实现了对采用HTTP协议进行文件下载的客户端进行下载提速,发明通过将数据压缩、文件切片、多径传输、传输层协议优化技术相结合,有效降低链路占用、并能利用多条链路进行数据传输,实现了HTTP文件传输的双边加速,可用于大文件传输、下载等应用场景,且实现的方法简单、功能完备,提高用户的满意度与使用体验。

Description

基于HTTP协议的双边加速系统
技术领域
本发明涉及网络传输技术领域,特别是指一种基于HTTP协议的双边加速系统。
背景技术
广域网传输优化一直是网络界的研究重点,如何提高网络传输效率,降低延时和丢包现象是我们一直研究的目标。目前点到点的传输链路亟待优化,网络传输环境复杂如卫星、3G、光纤混合,跨运营商、跨地区传输等都给网络带来一定的挑战,容易出现链路丢包延迟大,影响网络质量,大大降低用户体验。针对现有技术中广域网传输效率低的问题,尚未有有效的解决方案。
发明内容
有鉴于此,本发明的目的在于提出一种基于HTTP协议的双边加速系统,以保证提高采用HTTP协议进行传输的传输效率,提高用户的满意度。
本发明提供的基于HTTP协议的双边加速系统包括:
源服务器,源服务器为传输数据文件信息的提供方,源服务器将数据文件进行压缩与切片并传输到多个中继服务器;
多个中继服务器,多个中继服务器用于中转源服务器与客户端之间的数据信息与信令;
客户端,客户端为传输数据文件信息的接收方,客户端从多个中继服务器接收切片并还原出数据文件。
其中,源服务器包括:
数据压缩模块,数据压缩模块用于将数据文件进行字节级压缩,减小传输体积;
文件切片模块,文件切片模块用于将数据文件分割成多个切片,并使每个文件切片被独立传输;
多点传输模块,多点传输模块连接至源服务器端能够选择的多个中继服务器,用于将文件切片通过多路径进行传输。
并且,文件切片模块将文件切分为固定大小的切片,切片大小在传输任务中通过动态配置确定,其初始值为64兆。
同时,每个中继服务器包括:
数据中转模块,数据中转模块用于中继传输来自多点传输模块的文件切片;
信令中转模块,信令中转模块用于中转传输来自客户端的信令,当客户端向中继服务器发送请求时,信令中转模块将该请求转发至源服务器,并将源服务器返回的应答转发至客户端。
并且,多个中继服务器的数量不固定,按照传输任务需要进行增减。
同时,客户端包括:
断点续传模块,断点续传模块用于在客户端在进行下载请求时检查本地的资源是否已经被下载,当本地的资源被下载但未完成时,发送下载进度信息到源服务器,进行断点续传;
开发工具模块,开发工具模块用于开发双边加速的客户端程序,并开放接口供其它应用接入;
数据恢复模块,数据恢复模块用于对接收到的压缩数据进行无损解压、校验、组装。
另外,双边加速系统中的源服务器、多个中继服务器和客户端之间通过接口形成网络传输平台,数据在平台上进行传输。
并且,接口包括以下至少之一:
第十一接口,第十一接口为与业务层进行直接交互的内部接口,第十一接口用于网络传输平台所有需要的传输层逻辑,包括以下至少之一:下载资源、发送心跳、发送数据和接收数据;
第十二接口,第十二接口为处理屏蔽信令和数据传输时与具体的传输层协议之间的耦合情况的解耦接口,第十二接口定义了传输层协议的相关方法和参数信息;
第十三接口,第十三接口为处理屏蔽数据传输时与具体的传输层协议之间的耦合情况的解耦接口,第十三接口定义了应用层协议的相关方法和参数信息;
第二十一接口,第二十一接口为外部系统与网络传输平台之间的交互为降低系统之间的耦合而采用的交互接口,第二十一接口包括外部系统对网络传输平台的操作接口与网络传输平台对外部系统的操作接口;
第二十二接口,第二十二接口为其他平台提供的主动接口,网络传输平台调用该接口实现对其他平台的操作;
第二十三接口,第二十三接口为其他平台提供的被动接口,网络传输平台调用该接口实现对其他平台的操作。
并且:
信令中转模块通过第十二接口实现信令通信的收发;
数据中转模块通过第十二接口和第十三接口实现数据传输的收发;
第十二接口和第十三接口进行通信不依赖通信协议和数据的属性;
第十一接口屏蔽通信协议和数据传输的相关属性;
通信协议的制定和数据属性不能依赖网络传输模块的外部业务逻辑;
未将通信协议封装为接口时,与外部系统的交互通过第二十一接口来实现。
上述双边加速系统通过分层架构实施,分层架构将双边加速系统分为三层,包括:
接口层,接口层实现网络传输平台对外部提供的API接口与网络传输平台所需要的外部系统的API接口,用于与外部支撑系统交互;
业务层,实现网络传输平台的作业业务,其中,作业业务包括以下至少之一:断点续传、数据压缩、传输中转、推拉传输;
传输层,实现网络传输平台的信令通信,包括与传输层协议无关的设计与实现。
从上面所述可以看出,本发明提供的基于HTTP的双边加速系统主要实现了对采用HTTP协议进行文件下载的客户端进行下载提速,发明通过将数据压缩、文件切片、多径传输、传输层协议优化技术相结合,有效降低链路占用、并能利用多条链路进行数据传输,实现了HTTP文件传输的双边加速,可用于大文件传输、下载等应用场景,且实现的方法简单、功能完备,提高用户的满意度与使用体验。
附图说明
图1为本发明一种基于HTTP协议的双边加速系统的结构框图;
图2为本发明一种基于HTTP协议的双边加速系统的分层结构图;
图3为本发明一种基于HTTP协议的双边加速系统的网络传输平台的结构框图;
图4为本发明一种基于HTTP协议的双边加速系统的网络传输平台与外界其他平台交互的结构图;
图5为本发明一种基于HTTP协议的双边加速系统的源服务器的功能部署图;
图6为本发明一种基于HTTP协议的双边加速系统的中继服务器的功能部署图;
图7为本发明一种基于HTTP协议的双边加速系统的客户端的功能部署图;
图8为本发明一种基于HTTP协议的双边加速系统的推拉传输模块的结构框图;
图9为本发明一种基于HTTP协议的双边加速系统的客户端主动下载文档的时序图;
图10为本发明一种基于HTTP协议的双边加速系统的源服务器推送模式的时序图;
图11为本发明一种基于HTTP协议的双边加速系统的多点下载的时序图;
图12为本发明一种基于HTTP协议的双边加速系统的多点下载的模块关系图;
图13为本发明一种基于HTTP协议的双边加速系统的中继服务器定时发送心跳包的时序图;
图14为本发明一种基于HTTP协议的双边加速系统的路径选择计算的时序图;
图15为本发明一种基于HTTP协议的双边加速系统的数据压缩流程图;
图16为本发明一种基于HTTP协议的双边加速系统的中继服务器的信令中转时序图;
图17为本发明一种基于HTTP协议的双边加速系统的中继服务器的数据中转时序图;
图18为本发明一种基于HTTP协议的双边加速系统的数据下载流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明进一步详细说明。
需要说明的是,本发明实施例中所有使用“第一”和“第二”的表述均是为了区分两个相同名称非相同的实体或者非相同的参量,可见“第一”“第二”仅为了表述的方便,不应理解为对本发明实施例的限定,后续实施例对此不再一一说明。
根据本发明的一个实施例,提供了一种基于HTTP协议的双边加速系统。
如图1所述,根据本发明实施例提供的基于HTTP协议的双边加速系统包括:
源服务器,源服务器为传输数据文件信息的提供方,源服务器将数据文件进行压缩与切片并传输到多个中继服务器;
多个中继服务器,多个中继服务器用于中转源服务器与客户端之间的数据信息与信令;
客户端,客户端为传输数据文件信息的接收方,客户端从多个中继服务器接收切片并还原出数据文件。
其中,源服务器包括:
数据压缩模块,数据压缩模块用于将数据文件进行字节级压缩,减小传输体积;
文件切片模块,文件切片模块用于将数据文件分割成多个切片,并使每个文件切片被独立传输;
多点传输模块,多点传输模块连接至源服务器端能够选择的多个中继服务器,用于将文件切片通过多路径进行传输。
并且,文件切片模块将文件切分为固定大小的切片,切片大小在传输任务中通过动态配置确定,其初始值为64兆。
同时,每个中继服务器包括:
数据中转模块,数据中转模块用于中继传输来自多点传输模块的文件切片;
信令中转模块,信令中转模块用于中转传输来自客户端的信令,当客户端向中继服务器发送请求时,信令中转模块将该请求转发至源服务器,并将源服务器返回的应答转发至客户端。
并且,多个中继服务器的数量不固定,按照传输任务需要进行增减。
同时,客户端包括:
断点续传模块,断点续传模块用于在客户端在进行下载请求时检查本地的资源是否已经被下载,当本地的资源被下载但未完成时,发送下载进度信息到源服务器,进行断点续传;
开发工具模块,开发工具模块用于进行文件切片的校验与组装;
数据恢复模块,数据恢复模块用于对接收到的压缩数据进行无损解压。
另外,双边加速系统中的源服务器、多个中继服务器和客户端之间通过接口形成网络传输平台,数据在平台上进行传输。
并且,接口包括以下至少之一:
第十一接口,第十一接口为与业务层进行直接交互的内部接口,第十一接口用于网络传输平台所有需要的传输层逻辑,包括以下至少之一:下载资源、发送心跳、发送数据和接收数据;
第十二接口,第十二接口为处理屏蔽信令和数据传输时与具体的传输层协议之间的耦合情况的解耦接口,第十二接口定义了传输层协议的相关方法和参数信息;
第十三接口,第十三接口为处理屏蔽数据传输时与具体的传输层协议之间的耦合情况的解耦接口,第十三接口定义了应用层协议的相关方法和参数信息;
第二十一接口,第二十一接口为外部系统与网络传输平台之间的交互为降低系统之间的耦合而采用的交互接口,第二十一接口包括外部系统对网络传输平台的操作接口与网络传输平台对外部系统的操作接口;
第二十二接口,第二十二接口为其他平台提供的主动接口,网络传输平台调用该接口实现对其他平台的操作;
第二十三接口,第二十三接口为其他平台提供的被动接口,网络传输平台调用该接口实现对其他平台的操作。
并且:
信令中转模块通过第十二接口实现信令通信的收发;
数据中转模块通过第十二接口和第十三接口实现数据传输的收发;
第十二接口和第十三接口进行通信不依赖通信协议和数据的属性;
第十一接口屏蔽通信协议和数据传输的相关属性;
通信协议的制定和数据属性不能依赖网络传输模块的外部业务逻辑;
未将通信协议封装为接口时,与外部系统的交互通过第二十一接口来实现。
上述双边加速系统通过分层架构实施,分层架构将双边加速系统分为三层,包括:
接口层,接口层实现网络传输平台对外部提供的API接口与网络传输平台所需要的外部系统的API接口,用于与外部支撑系统交互;
业务层,实现网络传输平台的作业业务,其中,作业业务包括以下至少之一:断点续传、数据压缩、传输中转、推拉传输;
传输层,实现网络传输平台的信令通信,包括与传输层协议无关的设计与实现。
下面结合附图,对本发明提出的一种基于HTTP的双边加速系统及实施方法进行详细说明。以下所描述的实施例仅为示例性说明,并不对本发明的保护范围造成限制。
双边加速系统整体架构大致可以描述为源服务器、中继服务器和客户端。如图1所示,本发明的基于HTTP的双边加速系统主要实现了对文件传输的加速,包括文件切片、数据压缩、信令中转、数据中转、断点续传、数据恢复模块,以及信令业务接口和数据业务接口。
如图2所示,系统采用分层的方式实现,分别为接口层、业务层和传输层。接口层:实现网络传输平台对外部提供的API接口,以及网络传输平台所需要的外部系统的API接口,用来与外部支撑系统的交互;业务层:实现网络传输平台的所有业务,包括断点续传、数据压缩、传输中转和推拉传输等具体的业务逻辑;传输层:实现网络传输平台的信令通信,包括与传输层协议无关的设计与实现。网络传输平台是一个分布式的系统平台,其中包含源服务器、中继服务器和客户端三个网元之间的交互。为避免这三者的业务逻辑与传输层相关,采用接口的方式进行解耦处理。网络传输模块的具体设计如图3所示,分别由第十一接口,第十二接口,第十三接口实现。网络传输业务层接口是指与业务层进行直接交互的内部接口。该接口抽象了网络传输平台所有需要的传输层逻辑,如下载资源、发送心跳、发送数据和接收数据等等;通信协议是指网络传输平台所用的自定义协议,用来完成网元之间的信息交互;通信协议使用传输层协议实现网络传输,如:TCP、UDP或者UDT等;数据部分指在网络上传输的文件,数据可以使用传输层协议或者应用层协议来实现传输;传输层协议包括TCP、UDP和UDT等,应用层协议包括FTP、HTTP等;传输层接口是指为了屏蔽信令和数据传输时与具体的传输层协议之间的耦合,而使用该接口将其解耦,该接口定义了传输层协议的相关方法和参数信息;应用层接口是指为了屏蔽数据传输时与具体的协议之间的耦合,使用该接口进行解耦处理,该接口定义了应用层协议的相关方法和参数信息。
交互接口是指外部系统与网络传输平台之间的交互,为降低系统之间的耦合而采用接口的方式实现。交互接口包括外部系统对网络传输平台的操作接口,也包括网络传输平台对外部系统的操作接口。如图4所示,由第二十二接口和第二十三接口实现,主动接口:接口由其他平台提供,网络传输平台调用该接口实现对其他平台的操作;第二十三接口,被动接口:接口由网络传输平台提供给其他平台调用来实现对网络传输平台的操作。
图5描述了源服务器的功能部署,包括推拉传输模块,用于实现源服务器和客户端之间的PUSH和PULL操作。推拉传输过程中,要求实现对用户会话进行管理,通过会话机制来实现推拉控制;多点下载模块,用于实现源服务器支持对客户端的多点下载。多点下载要求实现对中继服务器的管理和网络传输路径的选择控制策略;数据压缩模块,用于对待传输数据进行压缩;系统配置模块,用于实现源服务器的参数配置;平台接口模块,用于和其他系统之间进行交互,包括网络传输平台对外提供的接口和外部系统提供给网络传输平台使用的接口。
图6描述了中继服务器的功能部署,中继管理模块主要用于定时向源服务器发送心跳保活及当前的负载、可用带宽等信息,以保证源服务器能够对网络传输平台的所有中继服务器进行实时管理,达到最优化的传输路径选择;信令中转模块主要用于对客户端的信令进行中转传输,如客户端向中继服务器发送请求,中继服务器将请求转发到源服务器;并将源服务器返回的应答中转返回给客户端;数据中转模块主要用于将源服务器向客户端发送的资源数据中转发送到客户端;系统配置模块用于配置中继服务器的参数。
图7描述的是客户端的功能部署,断点续传模块用于客户端在进行下载请求时,检查本地的资源是否曾经被下载过,若被下载但未完成,则发送相应的进度信息到源服务器,进行断点续传。断点续传的主要逻辑是在客户端完成的,包括对文件的进度信息进行保存和读取等;推送服务模块用于在某些应用场景下,需要服务器主动向客户端进行资源推送。此时客户端需要开启推送服务。目前的推送服务可以采用客户端定时请求查询来实现;应用接口模块用于第三方客户端开发时,需要用到的SDK开发接口;系统配置模块用于配置客户端参数;数据恢复模块用于客户端对传输过来的压缩数据进行无损恢复。
图8是推拉传输模块的模块关系图,在客户端和源服务器都需要推拉传输模块,不同的是源服务器的推拉传输模块仅包含数据发送子模块,而客户端部分包含了分片处理和数据接收两个子模块。分片处理模块用于划分整个资源的逻辑切片;数据发送模块用于服务端将数据发送到客户端;而数据接收模块则用于正确的接收来自服务端的数据。
图9描述了客户端主动下载文档的时序图,各个时序描述如下:
第一步,客户端向源服务器发起资源下载请求;
第二步,源服务器返回资源的大小等信息;
第三步,客户端进行分片处理;
第四步,客户端按照数据下载流程向源服务器请求资源分片的下载;
第五步,源服务器创建传输会话并返回处理结果;
第六步,客户端创建传输会话,并发送下载确认请求ACK;
第七步,源服务器向客户端发送数据;
第八步,客户端定时向源服务器发送心跳保活。
由于服务端主动推送模式下,需要客户端暴露相关的服务地址,为了简化客户端的实现,采用定时客户端下载的方法来模拟服务端的主动推送,方法是:客户端定时向服务端发送资源下载请求,服务端检查根据客户端发送的请求来检查当前是否存在对应该用户的资源需要推送,若存在则由客户端进行主动下载。服务端推送模式的序列图如图10所示:
第一步,客户端定时向源服务器发起查询,检查用户是否存在需要推送的资源;
第二步,若存在需要推送给该用户的资源,源服务器则将该资源信息返回给客户端;
第三步,客户端根据资源信息,向源服务器发起下载请求;
第四步,源服务器接受请求返回应答,并进行数据传输。
多点下载模块用于网络传输服务的多路径下载,在中继服务器存在于网络结构中时,客户端可以通过多个中继服务器来实现多点下载,使得在某个下载路径负荷较大时的能够选择另外的下载路径进行数据的高效传输。多点下载的序列图如图11所示。多点下载的模块关系图如图12所示,多点下载模块包含两个子模块:中继管理和路径选择策略。中继管理子模块用于管理当前传输网络中的所有中继服务器信息,包括负载,最大负载,最大带宽和可用带宽等,这些信息由中继服务器定时主动上报获得。多点下载模块根据系统配置的路径选择策略来选择最佳的中继服务器返回给客户端,由客户端向中继服务器请求资源下载,以实现多路径下载功能。
中继管理用于管理当前的网络传输服务平台中的所有中继服务器的相关信息,包括服务能力、IP地址、物理位置、网络带宽、当前负载、在线状态。中继管理是由中继服务器定时向源服务器发送心跳包实现,如图13所示:
第一步,中继服务器定时向源服务器发送OPTIONS心跳保活包,在保活包中携带负载信息和服务能力;
第二步,源服务器记录相关的信息,并返回应答。
路径选择子模块用于对多点下载时的路径进行控制,当用户可以进行多点下载时,源服务器将会从中继管理模块中获取所有的中继服务器信息,并由路径选择子模块进行路径的最优化选择。为了使得路径的选择算法可以方便的修改和扩展,采用策略模式实现对路径的最优化计算。路径选择计算时序图如图14所示。
数据压缩的目标是在不丢失有用信息的前提下,缩减数据量以提高其传输、存储和处理效率。本模块采用LZW压缩算法,将每个第一次出现的串放在一个串表中,用一个数字来表示串,压缩文件只存贮数字,则不存贮串,从而使图象文件的压缩效率得到较大的提高。不管是在压缩还是在解压缩的过程中都能正确的建立这个串表,压缩或解压缩完成后,这个串表又被丢弃。压缩流程图如图15所示。
信令中转是中继服务器在多点下载时需要提供的功能,序列图如图16所示:
第一步,客户端向中继服务器发送资源下载请求;
第二步,中继服务器分配传输资源,并向源服务器发送资源下载请求;
第三步,源服务器接受并创建传输会话,然后返回应答;
第四步,中继服务器接收到源服务器的应答后,创建传输会话并返回应答到客户端.
数据中转是中继服务器在多点下载时需要提供的功能。数据中转与信令中转紧密联系在一起,其不能够单独存在。若信令一旦断开,则数据传输也中断。带有数据中转的序列图如图17所示:
第一步,客户端向中继服务器发送资源下载请求;
第二步,中继服务器分配传输资源,并向源服务器发送资源下载请求;
第三步,源服务器接受并创建传输会话,然后返回应答;
第四步,中继服务器定时向源服务器发送心跳保活包;
第五步,源服务器向中继服务器发送数据;
第六步,源服务器收到保活消息后,返回应答;
第七步,中继服务器接收到源服务器的应答后,创建传输会话并返回应答到客户端;
第八步,客户端定时向中继服务器发送心跳保活包;
第九步,中继服务器向客户端转发数据;
第十步,中继服务器收到保活消息后,返回应答。
数据下载可以参考前述的推拉传输两种模式,包括单点和多点下载。数据下载的流程如图18所示。
从上面所述可以看出,本发明提供的基于HTTP的双边加速系统主要实现了对采用HTTP协议进行文件下载的客户端进行下载提速,发明通过将数据压缩、文件切片、多径传输、传输层协议优化技术相结合,有效降低链路占用、并能利用多条链路进行数据传输,实现了HTTP文件传输的双边加速,可用于大文件传输、下载等应用场景,且实现的方法简单、功能完备,提高用户的满意度与使用体验。
所属领域的普通技术人员应当理解:以上任何实施例的讨论仅为示例性的,并非旨在暗示本公开的范围(包括权利要求)被限于这些例子;在本发明的思路下,以上实施例或者不同实施例中的技术特征之间也可以进行组合,并存在如上所述的本发明的不同方面的许多其它变化,为了简明它们没有在细节中提供。因此,凡在本发明的精神和原则之内,所做的任何省略、修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于HTTP协议的双边加速系统,其特征在于,包括:
源服务器,所述源服务器为传输数据文件信息的提供方,所述源服务器将数据文件进行压缩与切片并传输到多个中继服务器;
多个中继服务器,所述多个中继服务器用于中转所述源服务器与客户端之间的数据信息与信令;
客户端,所述客户端为传输数据文件信息的接收方,所述客户端从所述多个中继服务器接收切片并还原出数据文件。
2.根据权利要求1所述的系统,其特征在于,所述源服务器包括:
数据压缩模块,所述数据压缩模块用于将数据文件进行字节级压缩,减小传输体积;
文件切片模块,所述文件切片模块用于将数据文件分割成多个切片,并使每个文件切片被独立传输;
多点传输模块,所述多点传输模块连接至所述源服务器端能够选择的多个中继服务器,用于将所述文件切片通过多路径进行传输。
3.根据权利要求2所述的系统,其特征在于,所述文件切片模块将文件分贝固定大小的切片,切片大小在传输任务中通过动态配置确定,其初始值为64兆。
4.根据权利要求2所述的系统,其特征在于,所述每个中继服务器包括:
数据中转模块,所述数据中转模块用于中继传输来自所述多点传输模块的所述文件切片;
信令中转模块,所述信令中转模块用于中转传输来自客户端的信令,当所述客户端向所述中继服务器发送请求时,所述信令中转模块将该请求转发至所述源服务器,并将所述源服务器返回的应答转发至所述客户端。
5.根据权利要求4所述的系统,其特征在于,所述多个中继服务器的数量不固定,按照传输任务需要进行增减。
6.根据权利要求4所述的系统,其特征在于,所述客户端包括:
断点续传模块,所述断点续传模块用于在所述客户端在进行下载请求时检查本地的资源是否已经被下载,当本地的资源被下载但未完成时,发送下载进度信息到源服务器,进行断点续传;
开发工具模块,所述开发工具模块用于进行所述文件切片的校验与组装;
数据恢复模块,所述数据恢复模块用于对接收到的压缩数据进行无损解压。
7.根据权利要求1所述的系统,其特征在于,还包括网络传输平台,所述网络传输平台包括多个接口,所述源服务器、多个中继服务器、客户端之间均通过所述网络传输平台提供的多个接口进行传输。
8.根据权利要求7所述的系统,其特征在于,所述接口包括以下至少之一:
第十一接口,所述第十一接口为与业务层进行直接交互的内部接口,所述第十一接口用于网络传输平台所有需要的传输层逻辑,包括以下至少之一:下载资源、发送心跳、发送数据和接收数据;
第十二接口,所述第十二接口为处理屏蔽信令和数据传输时与具体的传输层协议之间的耦合情况的解耦接口,所述第十二接口定义了传输层协议的相关方法和参数信息;
第十三接口,所述第十三接口为处理屏蔽数据传输时与具体的传输层协议之间的耦合情况的解耦接口,所述第十三接口定义了应用层协议的相关方法和参数信息;
第二十一接口,所述第二十一接口为外部系统与网络传输平台之间的交互为降低系统之间的耦合而采用的交互接口,所述第二十一接口包括外部系统对网络传输平台的操作接口与网络传输平台对外部系统的操作接口;
第二十二接口,所述第二十二接口为其他平台提供的主动接口,所述网络传输平台调用该接口实现对其他平台的操作;
第二十三接口,所述第二十三接口为其他平台提供的被动接口,所述网络传输平台调用该接口实现对其他平台的操作。
9.根据权利要求8所述的系统,其特征在于:
所述信令中转模块通过第十二接口实现信令通信的收发;
所述数据中转模块通过第十二接口和第十三接口实现数据传输的收发;
第十二接口和第十三接口进行通信不依赖通信协议和数据的属性;
第十一接口屏蔽通信协议和数据传输的相关属性;
通信协议的制定和数据属性不能依赖网络传输模块的外部业务逻辑;
未将通信协议封装为接口时,与外部系统的交互通过第二十一接口来实现。
10.根据权利要求1-9中任意一项所述的系统,其特征在于,双边加速系统通过分层架构实施,所述分层架构将双边加速系统分为三层,包括:
接口层,所述接口层实现网络传输平台对外部提供的API接口与网络传输平台所需要的外部系统的API接口,用于与外部支撑系统交互;
业务层,实现网络传输平台的作业业务,其中,所述作业业务包括以下至少之一:断点续传、数据压缩、传输中转、推拉传输;
传输层,实现网络传输平台的信令通信,包括与传输层协议无关的设计与实现。
CN201610188909.3A 2016-03-29 2016-03-29 基于http协议的双边加速系统 Pending CN105872042A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610188909.3A CN105872042A (zh) 2016-03-29 2016-03-29 基于http协议的双边加速系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610188909.3A CN105872042A (zh) 2016-03-29 2016-03-29 基于http协议的双边加速系统

Publications (1)

Publication Number Publication Date
CN105872042A true CN105872042A (zh) 2016-08-17

Family

ID=56627161

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610188909.3A Pending CN105872042A (zh) 2016-03-29 2016-03-29 基于http协议的双边加速系统

Country Status (1)

Country Link
CN (1) CN105872042A (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107509218A (zh) * 2017-08-25 2017-12-22 中国联合网络通信集团有限公司 一种信息传输方法、装置及无线通信系统
CN107590054A (zh) * 2017-09-21 2018-01-16 大连君方科技有限公司 船舶服务器日志监控系统
CN107609148A (zh) * 2017-09-21 2018-01-19 大连君方科技有限公司 一种弱网条件下数据流协同系统
CN107733884A (zh) * 2017-10-09 2018-02-23 中央电视台 一种工作站、跨平台媒体传输系统和传输方法
CN108449415A (zh) * 2018-03-27 2018-08-24 深圳中兴网信科技有限公司 数据同步方法、数据同步装置、计算机设备和存储介质
CN108462733A (zh) * 2017-02-21 2018-08-28 贵州白山云科技有限公司 一种文件加速传输方法及装置
CN108737459A (zh) * 2017-04-14 2018-11-02 徐州瑞晨矿业科技发展有限公司 一种基于图层的工程图纸数据远程分享的方法
CN109561405A (zh) * 2018-12-27 2019-04-02 南京控维通信科技有限公司 面向卫星应急通信系统及其高速短消息传输方法
CN110892697A (zh) * 2017-06-20 2020-03-17 奈飞公司 协助api调用处理的加速系统
CN111049751A (zh) * 2019-12-10 2020-04-21 平安国际智慧城市科技股份有限公司 数据传输优化方法、装置、设备及可读存储介质
CN111835856A (zh) * 2020-07-17 2020-10-27 北京百度网讯科技有限公司 文件下载的方法、装置、设备以及存储介质
CN113923211A (zh) * 2021-11-18 2022-01-11 许昌许继软件技术有限公司 用于电网控制的基于消息机制的文件传输系统和方法
CN115037736A (zh) * 2022-04-27 2022-09-09 浪潮通信技术有限公司 日志收集方法及日志收集装置
CN115550417A (zh) * 2022-08-16 2022-12-30 北京连山科技股份有限公司 一种减少多链路设备不同运营商之间传输延时的方法
CN117997895A (zh) * 2024-02-01 2024-05-07 北京优信新星科技有限公司 一种计算机数据传输系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1852307A (zh) * 2005-10-10 2006-10-25 华为技术有限公司 一种数据下载方法
CN101977236A (zh) * 2010-11-05 2011-02-16 北京云快线软件服务有限公司 大文件多点分发系统
US20110258432A1 (en) * 2010-04-15 2011-10-20 Microsoft Corporation Method and system for reliable protocol tunneling over http
CN102710966A (zh) * 2012-06-13 2012-10-03 百视通网络电视技术发展有限责任公司 基于http协议的视频直播方法及系统
CN103634336A (zh) * 2012-08-21 2014-03-12 宏碁股份有限公司 文件协同下载系统、装置及方法
CN103701897A (zh) * 2013-12-18 2014-04-02 兴天通讯技术(天津)有限公司 服务器、终端和文件传输方法
CN104731888A (zh) * 2015-03-12 2015-06-24 北京奇虎科技有限公司 一种数据迁移的方法、装置和系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1852307A (zh) * 2005-10-10 2006-10-25 华为技术有限公司 一种数据下载方法
US20110258432A1 (en) * 2010-04-15 2011-10-20 Microsoft Corporation Method and system for reliable protocol tunneling over http
CN101977236A (zh) * 2010-11-05 2011-02-16 北京云快线软件服务有限公司 大文件多点分发系统
CN102710966A (zh) * 2012-06-13 2012-10-03 百视通网络电视技术发展有限责任公司 基于http协议的视频直播方法及系统
CN103634336A (zh) * 2012-08-21 2014-03-12 宏碁股份有限公司 文件协同下载系统、装置及方法
CN103701897A (zh) * 2013-12-18 2014-04-02 兴天通讯技术(天津)有限公司 服务器、终端和文件传输方法
CN104731888A (zh) * 2015-03-12 2015-06-24 北京奇虎科技有限公司 一种数据迁移的方法、装置和系统

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108462733A (zh) * 2017-02-21 2018-08-28 贵州白山云科技有限公司 一种文件加速传输方法及装置
CN108737459A (zh) * 2017-04-14 2018-11-02 徐州瑞晨矿业科技发展有限公司 一种基于图层的工程图纸数据远程分享的方法
CN110892697B (zh) * 2017-06-20 2022-09-27 奈飞公司 协助api调用处理的加速系统
CN110892697A (zh) * 2017-06-20 2020-03-17 奈飞公司 协助api调用处理的加速系统
US11640368B2 (en) 2017-06-20 2023-05-02 Netflix, Inc. Acceleration system for facilitating processing of API calls
CN107509218A (zh) * 2017-08-25 2017-12-22 中国联合网络通信集团有限公司 一种信息传输方法、装置及无线通信系统
CN107609148B (zh) * 2017-09-21 2020-11-03 大连君方科技有限公司 一种弱网条件下数据流协同系统
CN107609148A (zh) * 2017-09-21 2018-01-19 大连君方科技有限公司 一种弱网条件下数据流协同系统
CN107590054A (zh) * 2017-09-21 2018-01-16 大连君方科技有限公司 船舶服务器日志监控系统
CN107733884A (zh) * 2017-10-09 2018-02-23 中央电视台 一种工作站、跨平台媒体传输系统和传输方法
CN107733884B (zh) * 2017-10-09 2021-06-04 中央电视台 一种工作站、跨平台媒体传输系统和传输方法
CN108449415A (zh) * 2018-03-27 2018-08-24 深圳中兴网信科技有限公司 数据同步方法、数据同步装置、计算机设备和存储介质
CN109561405A (zh) * 2018-12-27 2019-04-02 南京控维通信科技有限公司 面向卫星应急通信系统及其高速短消息传输方法
CN111049751A (zh) * 2019-12-10 2020-04-21 平安国际智慧城市科技股份有限公司 数据传输优化方法、装置、设备及可读存储介质
CN111049751B (zh) * 2019-12-10 2022-12-13 深圳赛安特技术服务有限公司 数据传输优化方法、装置、设备及可读存储介质
CN111835856A (zh) * 2020-07-17 2020-10-27 北京百度网讯科技有限公司 文件下载的方法、装置、设备以及存储介质
CN113923211A (zh) * 2021-11-18 2022-01-11 许昌许继软件技术有限公司 用于电网控制的基于消息机制的文件传输系统和方法
CN115037736A (zh) * 2022-04-27 2022-09-09 浪潮通信技术有限公司 日志收集方法及日志收集装置
CN115550417A (zh) * 2022-08-16 2022-12-30 北京连山科技股份有限公司 一种减少多链路设备不同运营商之间传输延时的方法
CN115550417B (zh) * 2022-08-16 2023-06-06 北京连山科技股份有限公司 一种减少多链路设备不同运营商之间传输延时的方法
CN117997895A (zh) * 2024-02-01 2024-05-07 北京优信新星科技有限公司 一种计算机数据传输系统

Similar Documents

Publication Publication Date Title
CN105872042A (zh) 基于http协议的双边加速系统
CN104509069B (zh) 支持选择性移动内容优化的技术
CN104717186B (zh) 一种在网络系统中传输数据的方法、装置及数据传输系统
CN111479121B (zh) 一种基于流媒体服务器的直播方法及系统
CN101150595B (zh) 一种实时文件传输方法、系统及装置
EP2557754B1 (en) Method for inserting and unloading tcp proxy and service gateway device
CN103907327B (zh) 电信网络中的不显眼内容压缩
JP2021528014A (ja) 情報伝送方法及び装置
EP0989704A2 (en) Method and apparatus for fragmenting messages for a wireless network using group sharing of reference numbers
CN110401972A (zh) 在多网络切片的网络中路由消息的方法、设备及系统
KR20180009046A (ko) 다중 경로 미디어 전달을 위한 방법 및 장치
EP2380320A1 (en) Transparent interaction with multi-layer protocols via selective bridging and proxying
CN103348657B (zh) 流媒体播放方法、设备及系统
WO2018196696A1 (zh) 一种通信方法和装置
JP2013504806A (ja) ファイルディレクトリに基づいたファイルの転送のための方法、装置、およびシステム
CN102780712B (zh) 会话的切换方法及装置
CN104486327A (zh) 页面与长连接服务器间的通信方法及客户端
CN100452656C (zh) 用于应用消息压缩及解压缩的方法和设备
CN111092802A (zh) 一种消息交互方法、发送设备及接收设备
CN102710765A (zh) 一种cdn服务器实现透明代理的方法、装置及系统
CN115833916B (zh) 卫星基站切换方法、装置、卫星基站及存储介质
Caini et al. DTNperf_3: A further enhanced tool for delay-/disruption-tolerant networking performance evaluation
US20090207854A1 (en) Systems and methods for providing efficient bandwidth utilization in packet switched networks
Soua et al. MQTT-MFA: A message filter aggregator to support massive IoT traffic over satellite
WO2014101133A1 (zh) 分流方法、设备和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160817

RJ01 Rejection of invention patent application after publication