CN103248666A - 一种离线下载资源的系统、方法及装置 - Google Patents

一种离线下载资源的系统、方法及装置 Download PDF

Info

Publication number
CN103248666A
CN103248666A CN2012100326007A CN201210032600A CN103248666A CN 103248666 A CN103248666 A CN 103248666A CN 2012100326007 A CN2012100326007 A CN 2012100326007A CN 201210032600 A CN201210032600 A CN 201210032600A CN 103248666 A CN103248666 A CN 103248666A
Authority
CN
China
Prior art keywords
seed file
resource
download
seed
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012100326007A
Other languages
English (en)
Inventor
刘刚
朱臣元
尹航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Tencent Computer Systems Co Ltd
Original Assignee
Shenzhen Tencent Computer Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Tencent Computer Systems Co Ltd filed Critical Shenzhen Tencent Computer Systems Co Ltd
Priority to CN2012100326007A priority Critical patent/CN103248666A/zh
Priority to PCT/CN2012/087136 priority patent/WO2013120382A1/zh
Priority to CA2864378A priority patent/CA2864378A1/en
Publication of CN103248666A publication Critical patent/CN103248666A/zh
Priority to US14/459,509 priority patent/US20140359066A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/59Providing operational support to end devices by off-loading in the network or by emulation, e.g. when they are unavailable

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种离线下载数据的系统、方法及装置,本发明在离线下载资源的系统中设置了资源的种子文件服务器,包括种子文件接入服务单元、种子文件数据库单元和种子爬虫单元,其中,种子文件接入服务单元,用于从客户端获取资源的种子文件后,发送给种子文件数据库单元存储,种子爬虫单元,用于从互联网中获取资源的种子文件,存储到种子文件数据库中。当离线下载服务器要下载资源时,直接从种子文件数据库获取资源对应的种子文件,根据种子文件从互联网中下载资源。这样,本发明提供的系统、方法及装置就可以在离线下载资源之前获取资源对应的种子文件,从而实现离线下载资源。

Description

一种离线下载资源的系统、方法及装置
技术领域
本发明涉及计算机领域的下载数据技术,特别涉及一种离线下载数据的系统、方法及装置。
背景技术
随着互联网技术的发展,越来越多的业务可以在互联网中实现,其中,下载业务就是客户端从互联网中下载资源。根据不同下载类型进行划分,下载业务可以分为离线下载资源业务或在线下载资源业务。离线下载业务就是互联网中的服务器侧替代客户端先行下载客户端所要求的资源,然后客户端再从服务器侧中下载所要求的资源。比如某个资源是冷门资源,采用客户端下载,速度很慢,客户端要下载很久,费时费力,这时,本地可以客户端就需要采用离线下载方式,通过服务器侧替代客户端下载,客户端可以关闭,等待服务器侧将该资源下载完全后,再从服务器侧下载,节省时间和下载成本。
图1为现有技术提供的离线下载资源的系统结构示意图,包括服务器侧和客户端,服务器侧中具体包括:离线下载服务器群、云存储服务器、离线下载任务分发服务器、离线下载任务管理服务器、离线下载任务数据库及统计服务器,其中,
客户端,用于向离线下载任务管理服务器请求资源下载请求,该任务携带要下载资源的链接信息,从云存储服务器获取要下载的资源;
离线下载任务管理服务器,用于接收客户端请求的资源下载请求,到离线下载任务数据库中查询是否有该资源下载请求记录且下载状态为下载完全,如果有,则通知客户端直接从云存储服务器获取要下载的资源,如果没有,就将该资源下载请求携带的要下载资源的链接信息发送给资源下载请求服务器,同时将该资源下载请求记录及未下载的下载状态存储到离线下载任务数据库中;
离线下载任务分发服务器,用于接收该资源下载请求携带的要下载资源的链接信息,根据离线下载服务器群中的负载情况进行要下载资源的下载分发,指示离线下载服务器群从英特网中下载要下载的资源;
离线下载服务器群,用于在离线下载任务分发服务器的指示下,根据该资源下载请求携带的要下载资源的链接信息,链接到互联网中,下载要下载的资源后,将要下载的资源存储到云存储服务器中,并将离线下载任务数据库中存储的该资源下载请求记录的下载状态修改为下载完全;
离线下载任务数据库,用于存储该资源下载请求记录及下载状态;
云存储服务器,用于存储要下载的资源;
统计服务器,用于监控客户端,统计客户端相关信息。
在该系统中,客户端向离线下载任务管理服务器请求资源下载请求,该任务携带要下载资源的链接信息为:要下载资源的超文本传送协议(Http)链接,或者电驴(eMule)链接或比特流(Bt)下载链接,或基于哈希分布(MagNent)协议的链接。当离线下载任务管理服务器将该资源下载请求携带的要下载资源的链接信息发送给资源下载请求服务器时,如果该链接信息为http链接,就将http链接的统一资源定位符(URL)发送;如果该链接信息为eMule链接或Bt下载链接,就将eMule链接或Bt下载链接的种子文件信息发送。
在该系统中,客户端从云存储服务器获取要下载的资源是采用点对服务器和点(P2SP)方式进行的,离线下载服务器群也可以采用P2SP方式从互联网中下载要下载的资源。另外,离线下载服务器还将该资源下载请求记录的下载进度和当前下载状态通过离线下载任务分发服务器发送给离线下载任务管理服务器。
采用上述系统进行离线下载资源获得广泛的应用,并具有如下特点:
1)加速下载冷门资源:离线下载资源解决了冷门资源下载慢,客户端长期需要链接互联网的问题,利用服务器侧的强大带宽,先将冷门资源下载到服务器侧,然后再下载到本地客户客户端,节省了客户端的时间和下载成本;
2)稳定提升下载资源速度:采用离线下载资源,速度更快更稳定,服务器侧将会为客户端提供稳定的下载速度,而不像在线下载资源,客户端直接链接互联网,会受到互联网环境的影响,不稳定;
3)解决网络封杀及网络被限问题:客户端采用Bt下载或eMule下载方式被限,仍然可以采用离线下载资源方式从服务器侧高速获取要下载的资源,下载效率更高。
在服务器侧的离线下载服务器群链接到互联网中,下载要下载的资源时可以采用Bt下载方式或基于MagNent协议方式下载,这时,就需要种子文件。Bt下载基于资源分发协议,采用高效的资源分发系统及点对点技术共享资源,使得互联网中的实体都可以上传资源。根据Bt下载方式,资源发布者针对资源生成一个种子文件,本质是文本文件,包括跟踪(Tracker)服务器信息和资源信息,其中,Tracker服务器信息包括Tracker服务器地址信息及Tracker服务器设置信息,资源信息为资源所划分的各个虚拟块的索引信息及哈希验证码。因此,种子文件就是资源的索引,根据种子文件才能获取到资源。
采用Bt下载时,离线下载服务器首先要从Tracker服务器上或其他服务器上获取到要下载的资源的种子文件,然后,解析该种子文件,根据得到的Tracker服务器信息,链接Tracker服务器;再次,Tracker服务器回应离线下载服务器,提供互联网中当前具有该种子文件对应资源的实体链接信息;最后,离线下载服务器与当前具有该种子文件对应资源的实体链接,根据该种子文件中的文件信息确定所划分的各个虚拟块,从当前具有该种子文件对应资源的接收自身没有的虚拟块,得到完整的资源,在这个过程中,不再需要诸如Tracker服务器的其他服务器服务,分散互联网中的带宽,减轻互联网中的服务器负担。
采用基于MagNent协议方式下载时,可以不将资源的种子文件存储到Tracker服务器上或其他服务器上,对于每一个资源都采用哈希算法计算得到一个唯一识别资源的数字指纹,根据数字指纹,离线下载服务器可以从互联网中与具有该资源的实体链接,获取到该实体所存储的对应资源的种子文件,也就是种子文件的获取为分布式方式。
无论采用Bt下载还是基于MagNent协议方式下载,都需要离线下载服务器获取到资源的种子文件,根据种子文件,才能启动资源的离线下载资源。如何使得离线下载服务器获取到资源的种子文件,成为了实现离线下载资源的关键问题。
发明内容
有鉴于此,本发明提供了一种离线下载资源的系统,该系统能够在离线下载资源之前获取资源对应的种子文件,从而实现离线下载资源。
本发明还提供一种离线下载资源的方法,该方法能够在离线下载资源之前获取资源对应的种子文件,从而实现离线下载资源。
本发明还提供一种离线下载资源的装置,该装置能够在离线下载资源之前获取资源对应的种子文件,从而实现离线下载资源。
为达到上述目的,本发明的技术方案是这样实现的:
一种离线下载资源的系统,该系统包括:种子文件服务器、客户端和离线下载服务器群,其中,
种子文件服务器,用于从客户端获取上传的种子文件后,和/或,从互联网获取对应资源的种子文件后将种子文件进行存储;
客户端,发送资源下载请求;
离线下载服务器群,用于接收所述资源下载请求,从种子文件服务器读取所述资源对应的种子文件,根据所述种子文件下载资源。
所述种子文件服务器具体包括:种子文件接入服务单元、种子爬虫单元和种子文件数据库单元,其中,
种子文件接入服务单元,用于从客户端获取上传的种子文件后,发送给种子文件数据库单元存储;
种子爬虫单元,用于从互联网获取对应资源的种子文件后,发送给种子文件数据库单元存储;
种子文件数据库单元,用于将来自种子文件接入服务单元以及种子爬虫单元的种子文件存储。
所述种子文件接入服务单元还用于接受客户端的查询,和/或,下载种子文件请求,从种子文件数据库单元查询,和/或,下载对应种子文件并提供给客户端显示,和/或,下载。
还包括云存储服务器,用于存储所述离线下载服务器群下载完成的资源,提供给对应的客户端下载。
一种离线下载数据的方法,将对应资源的种子文件存储在服务器侧;该方法还包括:
服务器侧接收客户端请求的资源下载请求,读取其存储的所述资源对应的种子文件,根据所述种子文件下载资源。
所述服务器侧存储的对应资源的种子文件是从客户端获取的,和/或,从互联网中获取的。
该方法还包括:将所下载的资源存储在服务器侧,提供给对应的客户端下载。
该方法还包括:服务器侧接受客户端的查询,和/或,下载种子文件请求,查询,和/或,下载对应种子文件并提供给客户端显示,和/或,下载。
一种离线下载种子服务器,包括:种子文件接入服务单元、种子文件数据库单元和种子爬虫单元,其中,种子文件接入服务单元,用于从客户端获取上传的种子文件后,发送给种子文件数据库单元存储;种子爬虫单元,用于从互联网获取对应资源的种子文件后,发送给种子文件数据库单元存储;种子文件数据库单元,用于将来自种子文件接入服务单元以及种子爬虫单元的种子文件存储。
所述种子文件接入服务单元还用于接受客户端的查询,和/或,下载种子文件请求,从种子文件数据库单元查询,和/或,下载对应种子文件并提供给客户端显示,和/或,下载。
由上述的技术方案可见,本发明在离线下载资源的系统中设置了资源的种子文件服务器,包括种子文件接入服务单元、种子文件数据库单元和种子爬虫单元,其中,种子文件接入服务单元,用于从客户端获取资源的种子文件后,发送给种子文件数据库单元存储,种子爬虫单元,用于从互联网中获取资源的种子文件,存储到种子文件数据库中。当离线下载服务器要下载资源时,直接从种子文件数据库获取资源对应的种子文件,根据种子文件从互联网中下载资源。这样,本发明提供的系统、方法及装置就可以在离线下载资源之前获取资源对应的种子文件,从而实现离线下载资源。
附图说明
图1为现有技术提供的离线下载资源的系统结构示意图;
图2为本发明实施例提供的离线下载资源的系统结构示意图;
图3为本发明实施例提供的离线下载资源的方法流程图;
图4为本发明实施例提供的种子文件服务器结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图及具体实施例对本发明作进一步地详细描述。
为了在离线下载资源时,离线下载服务器群的离线下载服务器在离线下载资源之前获取资源对应的种子文件,实现离线下载资源,本发明在离线下载资源的系统中设置了资源的种子文件服务器,包括种子文件接入服务单元、种子文件数据库单元和种子爬虫单元,其中,种子文件接入服务单元,用于从客户端获取资源的种子文件后,发送给种子文件数据库单元存储,种子爬虫单元,用于从互联网中获取资源的种子文件,存储到种子文件数据库中。当离线下载服务器要下载资源时,直接从种子文件数据库获取资源对应的种子文件,根据种子文件从互联网中下载资源。
图2为本发明实施例提供的离线下载资源的系统结构示意图,如图所示,包括客户端和服务器侧,服务器侧中具体包括:离线下载服务器群、云存储服务器、离线下载任务分发服务器、离线下载任务管理服务器、离线下载任务数据库、统计服务器及资源的种子文件服务器,其中,
种子文件服务器,用于从客户端或互联网获取对应资源的链接信息的种子文件并存储;
客户端,用于将资源的种子文件发送给种子文件服务器,向离线下载任务管理服务器请求资源下载请求,该任务携带要下载资源的链接信息,从云存储服务器获取要下载的资源;
离线下载任务管理服务器,用于接收客户端请求的资源下载请求,到离线下载任务数据库中查询是否有该资源下载请求记录且下载状态为下载完全,如果有,则通知客户端直接从云存储服务器获取要下载的资源,如果没有,就将该资源下载请求携带的要下载资源的链接信息发送给资源下载请求服务器,同时将该资源下载请求记录及未下载的下载状态存储到离线下载任务数据库中;
离线下载任务分发服务器,用于接收该资源下载请求携带的要下载资源的链接信息,根据离线下载服务器群中的负载情况进行要下载资源的下载分发,指示离线下载服务器群从英特网中下载要下载的资源;
离线下载服务器群,用于在离线下载任务分发服务器的指示下,从种子文件服务器中获取要下载资源的链接信息对应的种子文件,根据种子文件,链接到互联网中,下载要下载的资源后,将要下载的资源存储到云存储服务器中,并将离线下载任务数据库中存储的该资源下载请求记录的下载状态修改为下载完全;
离线下载任务数据库,用于存储该资源下载请求记录及下载状态;
云存储服务器,用于存储要下载的资源;
统计服务器,用于监控客户端,统计客户端相关信息。
在该系统中,种子文件服务器,也可以从客户端或互联网获取对应资源的种子文件并存储,当离线下载服务器群从种子文件服务器查找时,直接确定资源,然后查找对应的种子文件即可。
在该系统中,种子文件服务器具体包括:种子文件接入服务单元、种子文件数据库单元和种子爬虫单元,其中,
种子文件接入服务单元,用于从客户端获取对应资源的链接信息的种子文件后,发送给种子文件数据库单元存储;
种子爬虫单元,用于从互联网获取对应资源的链接信息的种子文件后,发送给种子文件数据库单元存储;
种子文件数据库,用于将来自种子文件接入服务单元以及种子爬虫单元的对应资源的链接信息的种子文件存储。
在该系统中,资源的链接信息可以为资源对应的种子文件链接信息或者为唯一识别资源的特征值,比如数字指纹等,也可以就是资源的本身,这里不限定,只要可以唯一确定资源即可。
在该系统中,种子文件接入服务单元,还可以接收客户端发送的对应资源的链接信息的种子文件查询请求,将查询结果发送给客户端;
客户端,还用于向种子文件接入服务单元发送对应资源的链接信息的种子文件查询请求,接收查询结果。
在该系统中,资源的种子接入服务器,还用于将对应资源的链接信息的种子文件发送给客户端。
在该系统中,种子文件数据库的作用是缓存对应资源的链接信息的种子文件,这些种子文件为通过种子文件接入服务单元由客户端在离线下载过程中传输的,或通过种子爬虫单元由互联网下载的。
在该系统中,种子爬虫单元的主要作用是从互联网上下载对应资源的链接信息的种子文件并将所下载的该种子文件存储在种子文件数据库中。
在该系统中,客户端的主要功能包括离线下载功能和在线下载功能。
其中,离线下载功能为:向离线下载任务管理服务器请求资源下载请求,该任务携带要下载资源的链接信息,在这之前向种子文件接入服务单元查询,是否在种子文件数据库中存储对应资源的链接信息的种子文件,如果是,则直接请求,否则,将资源的种子文件通过种子文件接入服务单元发送给种子文件数据库存储。从云存储服务器获取要下载的资源。在下载资源过程中下载完成资源的虚拟分块时,进行校验,出现错误,则上报给统计服务器进行统计。在下载资源完成后,向统计服务器上报客户端的相关信息,包括本次下载资源的下载时间、下载速度、下载结果、资源大小、下载资源的链接信息及从具有该资源的不同虚拟块的实体下载时的下载速度及时间等。
在线下载功能为:定期向Tracker服务器汇报在线情况和本地拥有的资源情况,通过要获取资源的链接信息,比如Url向资源索引服务器查询要获取资源的Url集合、哈希值及文件校验信息,从Url集合中下载要获取的数据,在线下载功能为现有技术,这里不再赘述。
在该系统中,统计服务器,用于监控客户端,统计客户端相关信息。具体的作用为:
1)接受客户端在下载资源过程中提供的下载完成资源的虚拟分块出错校验信息,在下载资源完成时提供的本次下载资源的下载时间、下载速度、下载结果、资源大小、下载资源的链接信息及从具有该资源的不同虚拟块的实体下载时的下载速度及时间等,并存储为流水日志方式供后续统计分析;
2)接收客户端以及云存储服务器通过资源的链接信息,诸如Url查询资源的哈希值;
3)接收客户端以及云存储服务器通过资源的链接信息,诸如Url查询资源的Url集合。
该系统的互联网中还包括Tracker服务器,主要作用为:为客户端提供注册,并反馈客户端所拥有要获取资源实体的链接信息列表;2)接收客户端发送的在线情况汇报,生成具有各资源的实体的链接信息列表并在有下载某资源时将对应的实体的链接信息列表反馈;3)接收互联网侧同步的实体在线控制策略,在相应实体与Tracker服务器链接时,将该在线控制策略下发给相应的实体。
在该系统中,离线下载服务器群除了在离线下载任务分发服务器的指示下,从种子文件服务器中获取要下载资源的链接信息对应的种子文件,根据种子文件,链接到互联网中,下载要下载的资源后,将要下载的资源存储到云存储服务器中,并将离线下载任务数据库中存储的该资源下载请求记录的下载状态修改为下载完全外。还将离线下载任务数据库中汇报离线下载的进度和速度信息,为离线下载完成后客户端从云存储服务器取回离线下载的结果提供服务支持,能够用保留的带宽下载客户端的资源;将离线下载的资源的哈希结果存储在离线下载任务数据库中。
在该系统中,离线下载任务分发服务器还用于接受离线下载服务器群汇报的下载进度和速度信息,同时将进度信息向离线下载任务管理服务器汇报,对于相同的离线资源下载请求进行过滤,同一个离线资源下载请求只需要向离线下载服务器群发送依次,不同的客户端可以共享同一个任务的离线下载进度和完成离线下载的资源。
在该系统容中,离线下载任务管理服务器还为每个离线下载请求生成唯一标识编号,与离线下载任务数据库进行交互,如果发现已经有下载好的资源,就可以直接通知客户端离线下载成功,当客户端要取回离线下载完成的资源时,则提供客户端从云存储服务器下载资源的连接信息。
图3为本发明实施例提供的离线下载资源的方法流程图,该方法包括:
步骤301、将对应资源的链接信息的种子文件存储在服务器侧;
步骤302、服务器侧接收客户端请求的资源下载请求,查询是否有该资源下载请求记录且下载状态为下载完全,如果有,执行步骤303;如果没有,执行步骤304;
步骤303、服务器侧通知客户端直接从服务器侧获取要下载的资源,客户端从服务器获取要下载的资源;
步骤304、服务器侧将该资源下载请求记录及未下载的下载状态存储,获取要下载资源的链接信息对应的种子文件,根据种子文件,链接到互联网中,下载要下载的资源后,将要下载的资源存储,将离线下载任务数据库中存储的该资源下载请求记录的下载状态修改为下载完全;
步骤305、服务器侧通知客户端从服务器侧获取要下载的资源,客户端从服务器获取要下载的资源。
在该方法中,资源的链接信息可以为资源对应的种子文件链接信息或者为唯一识别资源的特征值,比如数字指纹等。
在该方法中,服务器侧存储的对应资源的链接信息的种子文件是从客户端获取的,或者从互联网中获取的。
图4为本发明实施例提供的种子文件服务器结构示意图,包括:种子文件接入服务单元、种子文件数据库单元和种子爬虫单元,其中,
种子文件接入服务单元,用于从客户端获取对应资源的链接信息的种子文件后,发送给种子文件数据库单元存储;
种子爬虫单元,用于从互联网获取对应资源的链接信息的种子文件后,发送给种子文件数据库单元存储;
种子文件数据库,用于将来自种子文件接入服务单元以及种子爬虫单元的对应资源的链接信息的种子文件存储。
在该实施例中,所述种子文件接入服务单元还用于接受客户端的查询,和/或,下载种子文件请求,从种子文件数据库单元查询,和/或,下载对应种子文件并提供给客户端显示,和/或,下载。
从上述方案可以看出,本发明在图1的系统中引入了种子文件服务器,在种子文件服务器中存储了对应资源的链接信息的种子文件,这样,客户端在要离线下载资源时,只需要提供资源的链接信息或识别资源本身的标识,比如资源的种子文件链接信息或唯一识别资源的特征值,而不需要资源对应的种子文件,就可以获取到资源对应的种子文件,根据种子文件由服务器侧到互联网中获取资源并存储,客户端就可以离线下载得到服务器侧存储的资源了。这样,可以改善客户端在离线下载时的体验,减少不必要的对应资源的链接信息的种子文件。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换以及改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种离线下载资源的系统,其特征在于,该系统包括:种子文件服务器、客户端和离线下载服务器群,其中,
种子文件服务器,用于从客户端获取上传的种子文件后,和/或,从互联网获取对应资源的种子文件后将种子文件进行存储;
客户端,发送资源下载请求;
离线下载服务器群,用于接收所述资源下载请求,从种子文件服务器读取所述资源对应的种子文件,根据所述种子文件下载资源。
2.如权利要求1所述的系统,其特征在于,所述种子文件服务器具体包括:种子文件接入服务单元、种子爬虫单元和种子文件数据库单元,其中,
种子文件接入服务单元,用于从客户端获取上传的种子文件后,发送给种子文件数据库单元存储;
种子爬虫单元,用于从互联网获取对应资源的种子文件后,发送给种子文件数据库单元存储;
种子文件数据库单元,用于将来自种子文件接入服务单元以及种子爬虫单元的种子文件存储。
3.如权利要求2所述的系统,其特征在于,所述种子文件接入服务单元还用于接受客户端的查询,和/或,下载种子文件请求,从种子文件数据库单元查询,和/或,下载对应种子文件并提供给客户端显示,和/或,下载。
4.如权利要求1所述的系统,其特征在于,还包括云存储服务器,用于存储所述离线下载服务器群下载完成的资源,提供给对应的客户端下载。
5.一种离线下载数据的方法,其特征在于,将对应资源的种子文件存储在服务器侧;该方法还包括:
服务器侧接收客户端请求的资源下载请求,读取其存储的所述资源对应的种子文件,根据所述种子文件下载资源。
6.如权利要求5所述的方法,其特征在于,所述服务器侧存储的对应资源的种子文件是从客户端获取的,和/或,从互联网中获取的。
7.如权利要求5所述的方法,其特征在于,该方法还包括:
将所下载的资源存储在服务器侧,提供给对应的客户端下载。
8.如权利要求5所述的方法,其特征在于,该方法还包括:
服务器侧接受客户端的查询,和/或,下载种子文件请求,查询,和/或,下载对应种子文件并提供给客户端显示,和/或,下载。
9.一种离线下载种子服务器,其特征在于,包括:种子文件接入服务单元、种子文件数据库单元和种子爬虫单元,其中,
种子文件接入服务单元,用于从客户端获取上传的种子文件后,发送给种子文件数据库单元存储;
种子爬虫单元,用于从互联网获取对应资源的种子文件后,发送给种子文件数据库单元存储;
种子文件数据库单元,用于将来自种子文件接入服务单元以及种子爬虫单元的种子文件存储。
10.如权利要求9所述的离线下载种子服务器,其特征在于,所述种子文件接入服务单元还用于接受客户端的查询,和/或,下载种子文件请求,从种子文件数据库单元查询,和/或,下载对应种子文件并提供给客户端显示,和/或,下载。
CN2012100326007A 2012-02-14 2012-02-14 一种离线下载资源的系统、方法及装置 Pending CN103248666A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2012100326007A CN103248666A (zh) 2012-02-14 2012-02-14 一种离线下载资源的系统、方法及装置
PCT/CN2012/087136 WO2013120382A1 (zh) 2012-02-14 2012-12-21 一种离线下载资源的系统、方法、装置以及计算机存储介质
CA2864378A CA2864378A1 (en) 2012-02-14 2012-12-21 System, method and device for offline downloading resources and computer storage medium
US14/459,509 US20140359066A1 (en) 2012-02-14 2014-08-14 System, method and device for offline downloading resource and computer storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012100326007A CN103248666A (zh) 2012-02-14 2012-02-14 一种离线下载资源的系统、方法及装置

Publications (1)

Publication Number Publication Date
CN103248666A true CN103248666A (zh) 2013-08-14

Family

ID=48927888

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012100326007A Pending CN103248666A (zh) 2012-02-14 2012-02-14 一种离线下载资源的系统、方法及装置

Country Status (4)

Country Link
US (1) US20140359066A1 (zh)
CN (1) CN103248666A (zh)
CA (1) CA2864378A1 (zh)
WO (1) WO2013120382A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103631914A (zh) * 2013-11-30 2014-03-12 广东顺德中山大学卡内基梅隆大学国际联合研究院 一种海量互联网内容离线浏览的方法及系统
CN104539728A (zh) * 2015-01-15 2015-04-22 北京国创富盛通信股份有限公司 一种基于ap的p2p传输方法和系统
CN104735041A (zh) * 2013-12-24 2015-06-24 华为终端有限公司 离线资源获取方法及装置
CN107784013A (zh) * 2016-08-30 2018-03-09 福建福昕软件开发股份有限公司 一种将分散文档互联进行分布式管理的方法
CN111966533A (zh) * 2020-07-23 2020-11-20 招联消费金融有限公司 电子文件管理方法、装置、计算机设备和存储介质
CN112464068A (zh) * 2021-01-27 2021-03-09 北京创业光荣信息科技有限责任公司 数据处理方法、装置及电子设备

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104639592B (zh) * 2013-11-15 2018-09-28 华为技术有限公司 云存储网关间信息同步方法和系统、及云存储网关
CN106886459B (zh) * 2017-01-24 2019-07-23 浙江工商大学 一种基于实测带宽的多智能体互联网数据采集任务分配方法
CN110535935A (zh) * 2019-08-26 2019-12-03 上海欣能信息科技发展有限公司 一种基于多电站三维模型数据统一存储的加载方法及架构
CN112749145A (zh) * 2019-10-29 2021-05-04 伊姆西Ip控股有限责任公司 存储和访问数据的方法、设备和计算机程序产品
CN115190017A (zh) * 2022-07-01 2022-10-14 深圳致星科技有限公司 基于隐私计算平台的资源调整方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101009568A (zh) * 2006-01-24 2007-08-01 腾讯科技(深圳)有限公司 一种p2p网络中实现数据下载的方法及系统
CN102307210A (zh) * 2011-01-13 2012-01-04 国云科技股份有限公司 一种数据下载系统及其数据管理和下载方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8224968B1 (en) * 2005-09-19 2012-07-17 At&T Intellectual Property Ii, L.P. Method and system for scalable content storage and delivery
CN100556129C (zh) * 2006-08-22 2009-10-28 腾讯科技(深圳)有限公司 一种对等连接流媒体直播系统和装置
US7836056B2 (en) * 2006-09-28 2010-11-16 Microsoft Corporation Location management of off-premise resources
CN101141627A (zh) * 2007-10-23 2008-03-12 深圳市迅雷网络技术有限公司 一种流媒体文件的存储系统及方法
CN101184055B (zh) * 2007-12-11 2010-12-22 腾讯科技(深圳)有限公司 一种离线文件的发送、接收、传输方法及装置
CN102915421B (zh) * 2011-08-04 2013-10-23 腾讯科技(深圳)有限公司 文件的扫描方法及系统
WO2013120412A1 (zh) * 2012-02-17 2013-08-22 腾讯科技(深圳)有限公司 数据下载方法、终端、服务器和系统
CN103365865B (zh) * 2012-03-29 2017-07-11 腾讯科技(深圳)有限公司 数据存储方法、数据下载方法及其装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101009568A (zh) * 2006-01-24 2007-08-01 腾讯科技(深圳)有限公司 一种p2p网络中实现数据下载的方法及系统
CN102307210A (zh) * 2011-01-13 2012-01-04 国云科技股份有限公司 一种数据下载系统及其数据管理和下载方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103631914A (zh) * 2013-11-30 2014-03-12 广东顺德中山大学卡内基梅隆大学国际联合研究院 一种海量互联网内容离线浏览的方法及系统
CN104735041A (zh) * 2013-12-24 2015-06-24 华为终端有限公司 离线资源获取方法及装置
CN104735041B (zh) * 2013-12-24 2018-12-14 华为终端(东莞)有限公司 离线资源获取方法及装置
CN104539728A (zh) * 2015-01-15 2015-04-22 北京国创富盛通信股份有限公司 一种基于ap的p2p传输方法和系统
CN107784013A (zh) * 2016-08-30 2018-03-09 福建福昕软件开发股份有限公司 一种将分散文档互联进行分布式管理的方法
CN111966533A (zh) * 2020-07-23 2020-11-20 招联消费金融有限公司 电子文件管理方法、装置、计算机设备和存储介质
CN111966533B (zh) * 2020-07-23 2024-06-04 招联消费金融股份有限公司 电子文件管理方法、装置、计算机设备和存储介质
CN112464068A (zh) * 2021-01-27 2021-03-09 北京创业光荣信息科技有限责任公司 数据处理方法、装置及电子设备

Also Published As

Publication number Publication date
US20140359066A1 (en) 2014-12-04
CA2864378A1 (en) 2013-08-22
WO2013120382A1 (zh) 2013-08-22

Similar Documents

Publication Publication Date Title
CN103248666A (zh) 一种离线下载资源的系统、方法及装置
CN102307210B (zh) 一种数据下载系统及其数据管理和下载方法
CN102067094B (zh) 高速缓存优化
CN102223411B (zh) 采用p2p 技术下载文件的方法和系统、客户端
CN103812882A (zh) 一种文件传输的方法及系统
CN103108008B (zh) 一种下载文件的方法及文件下载系统
CN106453576B (zh) 一种基于混合云平台的交互方法、系统及调度中心
RU2009148317A (ru) Устройство доставки данных импортирования местоположения, система импортирования данных о местоположении и способ импортирования данных о местоположении
CN103973475A (zh) 差异补丁包生成方法及下载方法、服务器、客户端
CA2840705A1 (en) Method and system for loading file in webgame
CN103297447B (zh) 一种资源共享方法及其设备
CN109522462B (zh) 一种基于区块链的云查询方法、装置、设备及存储介质
CN101626397A (zh) 基于Bittorrent协议下载文件的系统
CN110071986A (zh) 一种用于域名解析的系统
CN104283723A (zh) 网络访问日志处理方法及装置
CN103403731A (zh) 云存储系统的数据加密处理装置和方法
CN103841135A (zh) 文件加速下载方法及装置
CN104519140A (zh) 一种分布式并行计算的服务器系统及其管理方法
CN103826139A (zh) Cdn系统、观看服务器以及流媒体数据传输方法
CN103731472A (zh) 采用p2p技术下载文件的方法和系统、客户端
CN105872856A (zh) 一种流媒体文件分发方法及系统
KR101033813B1 (ko) 클라우드 컴퓨팅 네트워크 시스템 및 그것의 파일 분산 방법
CN103248636B (zh) 离线下载的系统及方法
CN103812881A (zh) 离线下载控制方法及装置
CN108491499B (zh) 数据采集方法、数据采集平台、客户端及业务服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20130814

RJ01 Rejection of invention patent application after publication