CN113364887B - 一种基于ftp的文件下载方法、代理服务器和系统 - Google Patents

一种基于ftp的文件下载方法、代理服务器和系统 Download PDF

Info

Publication number
CN113364887B
CN113364887B CN202110736840.4A CN202110736840A CN113364887B CN 113364887 B CN113364887 B CN 113364887B CN 202110736840 A CN202110736840 A CN 202110736840A CN 113364887 B CN113364887 B CN 113364887B
Authority
CN
China
Prior art keywords
file
downloaded
proxy server
ftp
expiration time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110736840.4A
Other languages
English (en)
Other versions
CN113364887A (zh
Inventor
赵福仁
徐超
刘中砥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Skyguard Network Security Technology Co ltd
Original Assignee
Beijing Skyguard Network Security Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Skyguard Network Security Technology Co ltd filed Critical Beijing Skyguard Network Security Technology Co ltd
Priority to CN202110736840.4A priority Critical patent/CN113364887B/zh
Publication of CN113364887A publication Critical patent/CN113364887A/zh
Application granted granted Critical
Publication of CN113364887B publication Critical patent/CN113364887B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/562Brokering proxy services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching

Abstract

本发明公开了一种基于FTP的文件下载方法、代理服务器和系统,涉及计算机技术领域。该方法的一具体实施方式包括:代理服务器接收FTP客户端发送的文件下载请求,其中,文件下载请求指示待下载文件的特征信息;根据特征信息,查找本地是否缓存有待下载文件;如果查找到待下载文件,则将查找到的待下载文件发送给FTP客户端;否则,将文件下载请求发送给存储待下载文件的FTP服务器,接收以及缓存FTP服务器发送的待下载文件,并将待下载文件发送给FTP客户端。该实施方式能够有效地避免通信链路拥堵,同时能够减少网络资源浪费。

Description

一种基于FTP的文件下载方法、代理服务器和系统
技术领域
本发明涉及网络通信技术领域,尤其涉及一种基于FTP的文件下载方法、代理服务器和系统。
背景技术
文件传输协议(File Transfer Protocol,FTP)是用于在网络上进行文件传输的一套标准协议,其允许用户通过FTP客户端向FTP服务端发送文件操作请求,以对FTP服务端的文件进行相关操作(如增、删、改、查、传送、下载等)。
目前,基于FTP的文件下载的实现方式主要是,FTP客户端直接从FTP服务端下载所需文件,当有大量的FTP客户端向同一FTP服务端请求下载文件时,不仅会导致通信链路拥堵,而且浪费网络资源。
发明内容
有鉴于此,本发明实施例提供一种基于FTP的文件下载方法、代理服务器和系统,能够有效地避免通信链路拥堵,同时能够减少网络资源浪费。
为实现上述目的,根据本发明实施例的一个方面,提供了一种基于FTP的文件下载方法,包括:
代理服务器接收FTP客户端发送的文件下载请求,其中,所述文件下载请求指示待下载文件的特征信息;
所述代理服务器根据所述特征信息,查找本地是否缓存有所述待下载文件;
所述代理服务器如果查找到所述待下载文件,则将查找到的所述待下载文件发送给所述FTP客户端;
否则,所述代理服务器将所述文件下载请求发送给存储所述待下载文件的FTP服务器,接收以及缓存所述FTP服务器发送的所述待下载文件,并将所述待下载文件发送给所述FTP客户端。
可选地,所述待下载文件的特征信息,包括:
所述待下载文件的文件信息以及任意一种或多种附加信息,其中,存储所述待下载文件的FTP服务器地址、用户信息以及下载路径均为所述附加信息。
可选地,针对所述特征信息包括所述用户信息的情况,
所述用户信息包括:所述FTP客户端为匿名用户生成的统一用户标识;
或者,
在所述用户信息为匿名用户的信息的情况下,所述代理服务器为所述用户信息生成统一用户标识。
可选地,上述方法进一步包括:
所述代理服务器为缓存的所述待下载文件确定并记载文件过期时间;
在所述代理服务器查找到所述待下载文件的情况下,
根据所述代理服务器接收到的所述文件下载请求的时间戳以及当前记载的文件过期时间,判断缓存的所述待下载文件是否已过期,如果否,则执行所述将查找到的所述待下载文件发送给所述FTP客户端的步骤。
可选地,上述方法进一步包括:
在判断出缓存的所述待下载文件已过期的情况下,
所述代理服务器确定所述待下载文件的文件最新特征数据;
所述代理服务器将记载的文件当前特征数据与所述文件最新特征数据进行对比;
在对比的结果指示所述文件当前特征数据与所述文件最新特征数据一致的情况下,执行所述将查找到的所述待下载文件发送给所述FTP客户端的步骤。
可选地,所述代理服务器为缓存的所述待下载文件确定并记载文件过期时间,包括:
在判断出缓存的所述待下载文件已过期的情况下,
根据所述文件下载请求的时间戳以及所述待下载文件的最后修改时间,更新当前记载的文件过期时间。
可选地,所述代理服务器为缓存的所述待下载文件确定文件过期时间,包括:
所述代理服务器为缓存的所述待下载文件生成文件过期时长;
所述代理服务器根据针对所述待下载文件的第一次文件下载请求的时间戳以及所述文件过期时长,确定所述待下载文件的初始文件过期时间。
可选地,所述代理服务器为缓存的所述待下载文件生成文件过期时长,包括:
基于设置的映射因数、设置的映射区间、针对所述待下载文件的第一次文件下载请求的时间戳以及所述待下载文件的最后修改时间,计算文件过期时长。
可选地,所述计算文件过期时长,包括:
利用设置的映射因数、针对所述待下载文件的第一次文件下载请求的时间戳以及所述待下载文件的最后修改时间,计算理论过期时长;
针对所述理论过期时长位于所述映射区间内的情况,则确定所述理论过期时长为所述文件过期时长;
针对所述理论过期时长小于所述映射区间的最小值的情况,则确定所述映射区间的最小值为所述文件过期时长;
针对所述理论过期时长大于所述映射区间的最大值的情况,则确定所述映射区间的最大值为所述文件过期时长。
可选地,所述代理服务器接收所述FTP服务器发送的所述待下载文件,包括:
所述代理服务器接收所述FTP服务器通过二进制方式发送的所述待下载文件。
第二方面,本发明实施例提供一种代理服务器,包括:第一交互模块、文件处理模块以及第二交互模块,其中,
所述第一交互模块,用于接收FTP客户端发送的文件下载请求,其中,所述文件下载请求指示待下载文件的特征信息;
所述文件处理模块,用于根据所述特征信息,查找本地是否缓存有所述待下载文件;如果查找到所述待下载文件,则将查找到的所述待下载文件提供给所述第一交互模块;如果未查找到所述待下载文件,则将所述文件下载请求提供给所述第二交互模块;
所述第一交互模块,进一步用于将所述文件处理模块提供的所述待下载文件发送给所述FTP客户端;
所述第二交互模块,用于将所述文件处理模块提供的所述文件下载请求发送给存储所述待下载文件的FTP服务器,接收所述FTP服务器发送的所述待下载文件;
所述文件处理模块,进一步用于缓存所述第二交互模块接收到的所述待下载文件。
第三方面,本发明实施例提供一种基于FTP的文件下载的系统,包括: FTP客户端、FTP服务器以及上述实施例提供的代理服务器。
上述发明中的一个实施例具有如下优点或有益效果:因为针对FTP客户端发送的文件下载请求,代理服务器根据文件下载请求指示的特征信息,查找本地是否缓存有待下载文件;代理服务器如果查找到待下载文件,则将查找到的待下载文件发送给FTP客户端,如果未查找到,则代理服务器将文件下载请求发送给存储待下载文件的FTP服务器,接收以及缓存FTP服务器发送的待下载文件,并将待下载文件发送给FTP客户端,可以使FTP客户端从代理服务器获取待下载的文件,能够有效地避免FTP客户端与FTP服务器之间通信链路拥堵,同时能够减少网络资源浪费。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是本发明实施例可以应用于其中的示例性系统架构图;
图2是根据本发明实施例的基于FTP的文件下载方法的主要流程的示意图;
图3是根据本发明另一实施例的基于FTP的文件下载方法的主要流程的示意图;
图4是根据本发明又一实施例的基于FTP的文件下载方法的主要流程的示意图;
图5是根据本发明实施例的代理服务器为缓存的待下载文件确定文件过期时间的主要流程的示意图;
图6是根据本发明实施例的计算文件过期时长的主要流程的示意图;
图7是根据本发明实施例的代理服务器的主要模块的示意图;
图8是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
图1是本发明实施例示例性的示出的应用场景所依赖的系统架构100。
如图1所示,系统架构100可以包括FTP终端设备101、102、103,网络104、代理服务器105以及FTP服务器106。网络104用以在FTP终端设备101、102、103和代理服务器105之间、代理服务器105以及FTP服务器106之间以及FTP终端设备101、102、103和FTP服务器106之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。另外,FTP终端设备101、102、103和代理服务器105之间、代理服务器105以及FTP服务器106之间以及FTP终端设备101、102、103和FTP服务器106之间通过FTP协议传输文件。
用户可以使用FTP终端设备101、102、103通过网络104与代理服务器105交互,以从代理服务器获取文件等。用户还可以使用FTP终端设备101、102、103通过网络104与FTP服务器106交互,以将文件上传到FTP服务器等。代理服务器105通过网络104与FTP服务器106交互,以使代理服务器从FTP服务器获取并缓存文件等。FTP终端设备101、102、103上可以安装有各种通讯客户端应用,例如网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。
FTP终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
代理服务器105可以是提供各种服务的服务器,例如对用户利用FTP终端设备101、102、103所要下载的文件提供支持的后台管理服务器(仅为示例)。后台管理服务器可以管理缓存的文件的有效时间等,并将FTP终端设备所请求的文件传输给终端设备。
需要说明的是,本发明实施例所提供的基于FTP的文件下载方法一般由FTP终端设备、代理服务器和FTP服务器之间协调完成。
应该理解,图1中的FTP终端设备、网络、代理服务器以及FTP服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络、代理服务器以及FTP服务器。
文件传输协议(File Transfer Protocol,FTP)是用于在网络上进行文件传输的一套通用的标准协议。其可用于FTP服务器与FTP客户端(下述简称客户端)之间文件传输。
目前基于文件传输协议的文件下载方式主要是FTP客户端直接从FTP服务器下载文件,如果FTP客户端比较多的话,会造成通信拥堵,另外,重复的从FTP服务器下载文件多次,也会造成网络资源的浪费。
为了解决FTP文件下载导致的网络资源浪费的问题,图2是根据本发明实施例的一种基于FTP的文件下载方法,如图2所示,该基于FTP的文件下载方法可包括如下步骤:
步骤S201:代理服务器接收FTP客户端发送的文件下载请求,其中,文件下载请求指示待下载文件的特征信息;
在该步骤中,待下载文件的特征信息可包括:待下载文件的文件信息以及任意一种或多种附加信息,其中,存储待下载文件的FTP服务器地址、用户信息以及下载路径均为附加信息。其中,文件信息一般是指文件名称、文件标识等信息。用户信息一般是指请求下载待下载文件的用户名、用户标识等。
其中,针对特征信息包括用户信息的情况,用户信息包括:FTP客户端为匿名用户生成的统一用户标识。或者,针对特征信息包括用户信息的情况,在用户信息为匿名用户的信息的情况下,代理服务器为用户信息生成统一用户标识。通过为匿名用户分配统一用户标识,可以使匿名用户从代理服务器下载公共文件,以满足不同用户的需求。
另外,由于为匿名用户生成统一用户标识的过程可以在FTP客户端实现,也可在代理服务器实现,使基于FTP的文件下载具有配置灵活性,满足不同业务或者用户需求。
值得说明的是,除了上述匿名用户之外,针对非匿名用户本发明提供的方案同样适用,且非匿名用户的用户信息一般为用户名、用户标识等。
一般来说,不同的文件所开放的用户不同,即在下载过程中,需要识别用户的信息,通过为匿名用户设置统一用户标识,可以实现不同用户均可下载公共文件。比如,对于银行来说银行卡办理合同,保险公司的保险合同等,对于内部的业务人员来说是完全开放的,则通过本发明实施例提供的匿名用户机制,可以使内部的业务人员从代理服务器下载同一份银行卡办理合同或者保险合同,避免每一个用户都必须从FTP服务器下载同一份文件。
步骤S202:代理服务器根据特征信息,查找本地是否缓存有待下载文件;代理服务器如果查找到待下载文件,则执行步骤S203;代理服务器如果未查找到待下载文件,则执行步骤S204;
在本发明实施例中,代理服务器可采用文件信息以及附加信息生成对应的特征码,通过该特征码记载已经缓存的文件。一个优选的实施例中,附加信息包括存储待下载文件的FTP服务器地址、用户信息以及下载路径。
步骤S203:将查找到的待下载文件发送给FTP客户端;
步骤S204:代理服务器将文件下载请求发送给存储待下载文件的FTP服务器,接收以及缓存FTP服务器发送的待下载文件,并将待下载文件发送给FTP客户端。
在该步骤中,为了保证文件大小等信息不改变,代理服务器接收所述FTP服务器发送的所述待下载文件的具体实施方式可包括:代理服务器接收FTP服务器通过二进制方式发送的待下载文件。
通过上述过程,使代理服务器针对同一份文件只存储一次,避免由于文件下载,而重复与FTP服务器通信。
在图2所示的实施例中,因为针对FTP客户端发送的文件下载请求,代理服务器根据文件下载请求指示的特征信息,查找本地是否缓存有待下载文件;代理服务器如果查找到待下载文件,则将查找到的待下载文件发送给FTP客户端,如果未查找到,则代理服务器将文件下载请求发送给存储待下载文件的FTP服务器,接收以及缓存FTP服务器发送的待下载文件,并将待下载文件发送给FTP客户端,可以使FTP客户端从代理服务器获取待下载的文件,能够有效地避免FTP客户端与FTP服务器之间通信链路拥堵,同时能够减少网络资源浪费。
在本发明实施例中,如图3所示,上述基于FTP的文件下载方法可进一步包括如下步骤:
步骤S301:代理服务器为缓存的待下载文件确定并记载文件过期时间;
该文件过期时间与文件更新相关,即一般文件过期时间不晚于文件更新时间。因此,通过该文件过期时间可以保证用户下载的文件的准确性。
步骤S302:在代理服务器查找到待下载文件的情况下,根据代理服务器接收到的文件下载请求的时间戳以及当前记载的文件过期时间,判断缓存的待下载文件是否已过期,如果是,则执行步骤S303;否则,执行步骤S304;
该判断过程是指,如果文件下载请求的时间戳在当前记载的文件过期时间之后,则确定缓存的待下载文件已过期,如果文件下载请求的时间戳在当前记载的文件过期时间之前,则确定缓存的待下载文件未过期。
步骤S303:根据文件下载请求的时间戳以及待下载文件的最后修改时间,更新当前记载的文件过期时间;
在该步骤中,待下载文件的最后修改时间是代理服务器从FTP服务器获取到的。
在该步骤中,如果FTP服务器记载的待下载文件的最后修改时间与代理服务器中记载的最后修改时间一致,则可通过下述计算公式(1)更新文件理论过期时长。
Figure 889459DEST_PATH_IMAGE001
(1)
其中,
Figure 148314DEST_PATH_IMAGE002
表征待下载文件的最后修改时间与代理服务器中记载的最后修改时间一致的情况下,更新后的理论过期时长;
Figure 511032DEST_PATH_IMAGE003
表征映射因数;
Figure 419951DEST_PATH_IMAGE004
表征当前的文件下载请求的时间戳对应的时间;
Figure 362368DEST_PATH_IMAGE005
表征待下载文件的最后修改时间,其中,
Figure 870535DEST_PATH_IMAGE004
一般晚于
Figure 669733DEST_PATH_IMAGE005
比如,针对映射区间为[600s,86400s],如果
Figure 518478DEST_PATH_IMAGE002
位于[600s,86400s]内,则
Figure 890684DEST_PATH_IMAGE002
为文件过期时长;如果
Figure 790376DEST_PATH_IMAGE006
,则文件过期时长为600s;如果
Figure 235176DEST_PATH_IMAGE007
,则文件过期时长为86400s。
在该步骤中,如果FTP服务器记载的待下载文件的最后修改时间与代理服务器中记载的最后修改时间不一致,则可通过下述计算公式(2)更新文件理论过期时长。
Figure 40059DEST_PATH_IMAGE008
(2)
其中,
Figure 386595DEST_PATH_IMAGE009
表征待下载文件的最后修改时间与代理服务器中记载的最后修改时间不一致的情况下,更新后的理论过期时长;
Figure 344056DEST_PATH_IMAGE003
表征映射因数;
Figure 846842DEST_PATH_IMAGE004
表征当前的文件下载请求的时间戳对应的时间;
Figure 873442DEST_PATH_IMAGE010
表征FTP服务器记载的待下载文件的最后修改时间,其中,
Figure 712085DEST_PATH_IMAGE004
一般晚于
Figure 445423DEST_PATH_IMAGE011
比如,针对映射区间为[600s,86400s],如果
Figure 852265DEST_PATH_IMAGE002
位于[600s,86400s]内,则
Figure 835002DEST_PATH_IMAGE002
为文件过期时长;如果
Figure 680598DEST_PATH_IMAGE006
,则文件过期时长为600s;如果
Figure 71040DEST_PATH_IMAGE007
,则文件过期时长为86400s。
通过该过程实现了动态更新文件的有效时间。
如果待下载文件的最后修改时间与代理服务器缓存的最后修改时间一致,则说明该待下载文件没有更新,则通过该文件下载请求的时间戳以及待下载文件的最后修改时间,更新当前记载的文件过期时间,并可执行步骤S304以使FTP客户端获取待下载文件。
如果待下载文件的最后修改时间与代理服务器缓存的最后修改时间不一致,则说明在FTP服务器中更新了该待下载文件,则通过该文件下载请求的时间戳以及待下载文件的最后修改时间,更新当前记载的文件过期时间,并可执行上述步骤S204以使代理服务器重新下载更新后的文件,并将下载后的文件提供给FTP客户端。
值得说明的是,文件的文件大小、最后修改时间以及过期时间等可缓存到文件头中,以供代理服务器确定和对比。
步骤S304:执行将查找到的待下载文件发送给FTP客户端的步骤。
在本发明实施例中,如图4所示,在判断出缓存的待下载文件已过期的情况下,上述方法可进一步包括如下步骤:
步骤S401:代理服务器确定待下载文件的文件最新特征数据;
该步骤具体实施方式可包括:从FTP服务器获取待下载文件的文件最新特征数据;也可包括:将FTP服务器更新后的最新特征数据记录在统计表中,以供后续调用。该最新特征数据可包括:文件大小、最后修改时间等。
步骤S402:代理服务器将记载的文件当前特征数据与文件最新特征数据进行对比;
该对比具体为:将代理服务器记载的文件大小以及文件最后修改时间,分别与代理服务器确定的最新特征数据包括的文件大小和最后修改时间进行对比,如果文件大小和最后修改时间任意一个不一致,则确定当前特征数据与文件最新特征数据不一致;如果代理服务器记载的文件大小和最后修改时间均与最新特征数据包括的文件大小和最后修改时间一致,则对比的结果指示文件当前特征数据与文件最新特征数据一致。
步骤S403:在对比的结果指示文件当前特征数据与文件最新特征数据一致的情况下,执行将查找到的待下载文件发送给FTP客户端的步骤。
在本发明实施例中,如图5所示,代理服务器为缓存的待下载文件确定文件过期时间的具体实施方式可包括如下步骤:
步骤S501:代理服务器为缓存的待下载文件生成文件过期时长;
该文件过期时长可以是根据实际需求人为设置的。也可以是:基于设置的映射因数、设置的映射区间、针对待下载文件的第一次文件下载请求的时间戳以及待下载文件的最后修改时间,计算文件过期时长。其中,映射因数以及映射区间可根据实际需求进行相应地设置,比如,映射因数为0.1、0.2等,映射区间的最大值为86400s,最小值为600s等。
该基于设置的映射因数、设置的映射区间、针对待下载文件的第一次文件下载请求的时间戳以及待下载文件的最后修改时间,计算文件过期时长的一种实现方式可如图6所示的实施例。
步骤S502:代理服务器根据针对待下载文件的第一次文件下载请求的时间戳以及文件过期时长,确定待下载文件的初始文件过期时间。
通过该过程可以根据待下载文件具体情况比如第一次文件下载请求的时间戳以及文件过期时长等,确定待下载文件的初始文件过期时间,保证初始文件过期时间的合理性。
在本发明实施例中,如图6所示,上述计算文件过期时长可包括如下步骤:
步骤S601:利用设置的映射因数、针对待下载文件的第一次文件下载请求的时间戳以及待下载文件的最后修改时间,计算理论过期时长;针对理论过期时长位于映射区间内的情况,执行步骤S602;针对理论过期时长小于映射区间的最小值的情况,执行步骤S603;针对理论过期时长大于映射区间的最大值的情况,执行步骤S604;
该计算理论过期时长可通过下述计算公式(3)计算得到。
Figure 320887DEST_PATH_IMAGE012
(3)
其中,ET表征理论过期时长;
Figure 322079DEST_PATH_IMAGE003
表征映射因数;
Figure 564842DEST_PATH_IMAGE013
表征待下载文件的第一次文件下载请求的时间戳对应的时间;
Figure 305396DEST_PATH_IMAGE005
表征待下载文件的最后修改时间,其中,
Figure 349313DEST_PATH_IMAGE013
一般晚于
Figure 214632DEST_PATH_IMAGE005
比如,针对映射区间为[600s,86400s],如果ET位于[600s,86400s]内,则ET为文件过期时长;如果
Figure 838249DEST_PATH_IMAGE014
,则文件过期时长为600s;如果
Figure DEST_PATH_IMAGE015
,则文件过期时长为86400s。
步骤S602:确定理论过期时长为文件过期时长,并结束当前流程;
步骤S603:确定映射区间的最小值为文件过期时长,并结束当前流程;
步骤S604:确定映射区间的最大值为文件过期时长。
通过上述确定文件过期时长能够实现针对不同文件动态调整文件过期时长,从而动态调整文件过期时间。
如图7所示,本发明实施例提供一种代理服务器700,该代理服务器700可包括:第一交互模块701、文件处理模块702以及第二交互模块703,其中,
第一交互模块701,用于接收FTP客户端发送的文件下载请求,其中,文件下载请求指示待下载文件的特征信息;
文件处理模块702,用于根据特征信息,查找本地是否缓存有待下载文件;如果查找到待下载文件,则将查找到的待下载文件提供给第一交互模块701;如果未查找到待下载文件,则将文件下载请求提供给第二交互模块703;
第一交互模块701,进一步用于将文件处理模块提供的待下载文件发送给FTP客户端;
第二交互模块703,用于将文件处理模块702提供的文件下载请求发送给存储待下载文件的FTP服务器,接收FTP服务器发送的待下载文件;
文件处理模块702,进一步用于缓存第二交互模块703接收到的待下载文件。
在本发明实施例中,待下载文件的特征信息,包括:待下载文件的文件信息以及任意一种或多种附加信息,其中,存储待下载文件的FTP服务器地址、用户信息以及下载路径均为附加信息。
在本发明实施例中,针对特征信息包括用户信息的情况,用户信息包括:FTP客户端为匿名用户生成的统一用户标识。
在本发明实施例中,文件处理模块702,进一步用于在用户信息为匿名用户的信息的情况下,为用户信息生成统一用户标识。
在本发明实施例中,文件处理模块702,进一步用于为缓存的待下载文件确定并记载文件过期时间;在查找到待下载文件的情况下,根据接收到的文件下载请求的时间戳以及当前记载的文件过期时间,判断缓存的待下载文件是否已过期,如果否,则触发第一交互模块701,使第一交互模块701将文件处理模块提供的待下载文件发送给FTP客户端。
在本发明实施例中,文件处理模块702,进一步用于在判断出缓存的待下载文件已过期的情况下,确定待下载文件的文件最新特征数据;将记载的文件当前特征数据与文件最新特征数据进行对比;在对比的结果指示文件当前特征数据与文件最新特征数据一致的情况下,触发第一交互模块701,使第一交互模块701将文件处理模块提供的待下载文件发送给FTP客户端。
在本发明实施例中,文件处理模块702,进一步用于在判断出缓存的待下载文件已过期的情况下,根据文件下载请求的时间戳以及待下载文件的最后修改时间,更新当前记载的文件过期时间。
在本发明实施例中,文件处理模块702,进一步用于为缓存的待下载文件生成文件过期时长;根据针对待下载文件的第一次文件下载请求的时间戳以及文件过期时长,确定待下载文件的初始文件过期时间。
在本发明实施例中,文件处理模块702,进一步用于基于设置的映射因数、设置的映射区间、针对待下载文件的第一次文件下载请求的时间戳以及待下载文件的最后修改时间,计算文件过期时长。
在本发明实施例中,文件处理模块702,进一步用于利用设置的映射因数、针对待下载文件的第一次文件下载请求的时间戳以及待下载文件的最后修改时间,计算理论过期时长;针对理论过期时长位于映射区间内的情况,则确定理论过期时长为文件过期时长;针对理论过期时长小于映射区间的最小值的情况,则确定映射区间的最小值为文件过期时长;针对理论过期时长大于映射区间的最大值的情况,则确定映射区间的最大值为文件过期时长。
在本发明实施例中,第二交互模块703,用于接收FTP服务器通过二进制方式发送的待下载文件。
下面参考图8,其示出了适于用来实现本发明实施例的终端设备或者代理服务器或者FTP服务器的计算机系统800的结构示意图。图8示出的终端设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图8所示,计算机系统800包括中央处理单元(CPU)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储部分808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有系统800操作所需的各种程序和数据。CPU 801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
以下部件连接至I/O接口805:包括键盘、鼠标等的输入部分806;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分807;包括硬盘等的存储部分808;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分809。通信部分809经由诸如因特网的网络执行通信处理。驱动器810也根据需要连接至I/O接口805。可拆卸介质811,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器810上,以便于从其上读出的计算机程序根据需要被安装入存储部分808。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分809从网络上被下载和安装,和/或从可拆卸介质811被安装。在该计算机程序被中央处理单元(CPU)801执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括第一交互模块、文件处理模块以及第二交互模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,第一交互模块还可以被描述为“接收FTP客户端发送的文件下载请求的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:代理服务器接收FTP客户端发送的文件下载请求,其中,文件下载请求指示待下载文件的特征信息;代理服务器根据特征信息,查找本地是否缓存有待下载文件;代理服务器如果查找到待下载文件,则将查找到的待下载文件发送给FTP客户端;否则,代理服务器将文件下载请求发送给存储待下载文件的FTP服务器,接收以及缓存FTP服务器发送的所述待下载文件,并将待下载文件发送给FTP客户端。
根据本发明实施例的技术方案,因为针对FTP客户端发送的文件下载请求,代理服务器根据文件下载请求指示的特征信息,查找本地是否缓存有待下载文件;代理服务器如果查找到待下载文件,则将查找到的待下载文件发送给FTP客户端,如果未查找到,则代理服务器将文件下载请求发送给存储待下载文件的FTP服务器,接收以及缓存FTP服务器发送的待下载文件,并将待下载文件发送给FTP客户端,可以使FTP客户端从代理服务器获取待下载的文件,能够有效地避免FTP客户端与FTP服务器之间通信链路拥堵,同时能够减少网络资源浪费。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (12)

1.一种基于FTP的文件下载方法,其特征在于,包括:
代理服务器接收FTP客户端发送的文件下载请求,其中,所述文件下载请求指示待下载文件的特征信息;
所述代理服务器根据所述特征信息,查找本地是否缓存有所述待下载文件;
所述代理服务器如果查找到所述待下载文件,根据所述代理服务器接收到的所述文件下载请求的时间戳以及所述代理服务器当前记载的文件过期时间,判断缓存的所述待下载文件是否已过期,在判断出缓存的所述待下载文件已过期的情况下,
如果FTP服务器记载的待下载文件的最后修改时间与代理服务器中记载的最后修改时间一致,则可通过下述计算公式(1)更新文件理论过期时长;
Figure 331082DEST_PATH_IMAGE001
(1)
其中,
Figure 61271DEST_PATH_IMAGE002
表征待下载文件的最后修改时间与代理服务器中记载的最后修改时间一致的情况下,更新后的理论过期时长;
Figure DEST_PATH_IMAGE003
表征映射因数;
Figure 418172DEST_PATH_IMAGE004
表征当前的文件下载请求的时间戳对应的时间;
Figure 875698DEST_PATH_IMAGE005
表征待下载文件的最后修改时间,其中,
Figure 503120DEST_PATH_IMAGE004
一般晚于
Figure 387899DEST_PATH_IMAGE005
如果FTP服务器记载的待下载文件的最后修改时间与代理服务器中记载的最后修改时间不一致,则可通过下述计算公式(2)更新文件理论过期时长;
Figure 966517DEST_PATH_IMAGE006
(2)
其中,
Figure 493313DEST_PATH_IMAGE007
表征待下载文件的最后修改时间与代理服务器中记载的最后修改时间不一致的情况下,更新后的理论过期时长;
Figure 427771DEST_PATH_IMAGE003
表征映射因数;
Figure 499764DEST_PATH_IMAGE004
表征当前的文件下载请求的时间戳对应的时间;
Figure 316410DEST_PATH_IMAGE008
表征FTP服务器记载的待下载文件的最后修改时间,其中,
Figure 382584DEST_PATH_IMAGE004
一般晚于
Figure 171549DEST_PATH_IMAGE009
;基于计算出的理论过期时长和映射区间,更新当前记载的文件过期时间;
在判断出缓存的所述待下载文件未过期的情况下,则将查找到的所述待下载文件发送给所述FTP客户端;
否则,所述代理服务器将所述文件下载请求发送给存储所述待下载文件的FTP服务器,接收以及缓存所述FTP服务器发送的所述待下载文件,并将所述待下载文件发送给所述FTP客户端。
2.根据权利要求1所述的方法,其特征在于,所述待下载文件的特征信息,包括:
所述待下载文件的文件信息以及任意一种或多种附加信息,其中,存储所述待下载文件的FTP服务器地址、用户信息以及下载路径均为所述附加信息。
3.根据权利要求2所述的方法,其特征在于,针对所述特征信息包括所述用户信息的情况,
所述用户信息包括:所述FTP客户端为匿名用户生成的统一用户标识;
或者,
在所述用户信息为匿名用户的信息的情况下,所述代理服务器为所述用户信息生成统一用户标识。
4.根据权利要求1所述的方法,其特征在于,进一步包括:
在判断出缓存的所述待下载文件已过期的情况下,
所述代理服务器确定所述待下载文件的文件最新特征数据;
所述代理服务器将记载的文件当前特征数据与所述文件最新特征数据进行对比;
在对比的结果指示所述文件当前特征数据与所述文件最新特征数据一致的情况下,执行所述将查找到的所述待下载文件发送给所述FTP客户端的步骤。
5.根据权利要求1所述的方法,其特征在于,所述代理服务器为缓存的所述待下载文件确定文件过期时间,包括:
所述代理服务器为缓存的所述待下载文件生成文件过期时长;
所述代理服务器根据针对所述待下载文件的第一次文件下载请求的时间戳以及所述文件过期时长,确定所述待下载文件的初始文件过期时间。
6.根据权利要求5所述的方法,其特征在于,所述代理服务器为缓存的所述待下载文件生成文件过期时长,包括:
基于设置的映射因数、设置的映射区间、针对所述待下载文件的第一次文件下载请求的时间戳以及所述待下载文件的最后修改时间,计算文件过期时长。
7.根据权利要求6所述的方法,其特征在于,所述计算文件过期时长,包括:
利用设置的映射因数、针对所述待下载文件的第一次文件下载请求的时间戳以及所述待下载文件的最后修改时间,计算理论过期时长;
针对所述理论过期时长位于所述映射区间内的情况,则确定所述理论过期时长为所述文件过期时长;
针对所述理论过期时长小于所述映射区间的最小值的情况,则确定所述映射区间的最小值为所述文件过期时长;
针对所述理论过期时长大于所述映射区间的最大值的情况,则确定所述映射区间的最大值为所述文件过期时长。
8.根据权利要求1所述的方法,其特征在于,所述代理服务器接收所述FTP服务器发送的所述待下载文件,包括:
所述代理服务器接收所述FTP服务器通过二进制方式发送的所述待下载文件。
9.一种代理服务器,其特征在于,包括:第一交互模块、文件处理模块以及第二交互模块,其中,
所述第一交互模块,用于接收FTP客户端发送的文件下载请求,其中,所述文件下载请求指示待下载文件的特征信息;
所述文件处理模块,用于根据所述特征信息,查找本地是否缓存有所述待下载文件;如果查找到所述待下载文件,根据所述代理服务器接收到的所述文件下载请求的时间戳以及所述代理服务器当前记载的文件过期时间,判断缓存的所述待下载文件是否已过期,在判断出缓存的所述待下载文件已过期的情况下,
如果FTP服务器记载的待下载文件的最后修改时间与代理服务器中记载的最后修改时间一致,则可通过下述计算公式(1)更新文件理论过期时长;
Figure 414442DEST_PATH_IMAGE001
(1)
其中,
Figure 983964DEST_PATH_IMAGE002
表征待下载文件的最后修改时间与代理服务器中记载的最后修改时间一致的情况下,更新后的理论过期时长;
Figure 524667DEST_PATH_IMAGE003
表征映射因数;
Figure 745301DEST_PATH_IMAGE004
表征当前的文件下载请求的时间戳对应的时间;
Figure 142785DEST_PATH_IMAGE005
表征待下载文件的最后修改时间,其中,
Figure 888018DEST_PATH_IMAGE004
一般晚于
Figure 294729DEST_PATH_IMAGE005
如果FTP服务器记载的待下载文件的最后修改时间与代理服务器中记载的最后修改时间不一致,则可通过下述计算公式(2)更新文件理论过期时长;
Figure 104290DEST_PATH_IMAGE006
(2)
其中,
Figure 141517DEST_PATH_IMAGE007
表征待下载文件的最后修改时间与代理服务器中记载的最后修改时间不一致的情况下,更新后的理论过期时长;
Figure 420051DEST_PATH_IMAGE003
表征映射因数;
Figure 912344DEST_PATH_IMAGE004
表征当前的文件下载请求的时间戳对应的时间;
Figure 576412DEST_PATH_IMAGE008
表征FTP服务器记载的待下载文件的最后修改时间,其中,
Figure 846856DEST_PATH_IMAGE004
一般晚于
Figure 301102DEST_PATH_IMAGE009
;在判断出缓存的所述待下载文件未过期的情况下,则将查找到的所述待下载文件提供给所述第一交互模块;如果未查找到所述待下载文件,则将所述文件下载请求提供给所述第二交互模块;
所述第一交互模块,进一步用于将所述文件处理模块提供的所述待下载文件发送给所述FTP客户端;
所述第二交互模块,用于将所述文件处理模块提供的所述文件下载请求发送给存储所述待下载文件的FTP服务器,接收所述FTP服务器发送的所述待下载文件;
所述文件处理模块,进一步用于缓存所述第二交互模块接收到的所述待下载文件。
10.一种基于FTP的文件下载的系统,其特征在于,包括: FTP客户端、FTP服务器以及权利要求9所述的代理服务器。
11.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-8中任一所述的方法。
12.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-8中任一所述的方法。
CN202110736840.4A 2021-06-30 2021-06-30 一种基于ftp的文件下载方法、代理服务器和系统 Active CN113364887B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110736840.4A CN113364887B (zh) 2021-06-30 2021-06-30 一种基于ftp的文件下载方法、代理服务器和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110736840.4A CN113364887B (zh) 2021-06-30 2021-06-30 一种基于ftp的文件下载方法、代理服务器和系统

Publications (2)

Publication Number Publication Date
CN113364887A CN113364887A (zh) 2021-09-07
CN113364887B true CN113364887B (zh) 2022-11-15

Family

ID=77537387

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110736840.4A Active CN113364887B (zh) 2021-06-30 2021-06-30 一种基于ftp的文件下载方法、代理服务器和系统

Country Status (1)

Country Link
CN (1) CN113364887B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114513501B (zh) * 2022-02-15 2024-03-22 银联商务股份有限公司 目标分发方法和系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112653757A (zh) * 2020-12-21 2021-04-13 深圳前海微众银行股份有限公司 文件管理系统、方法及设备

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060168113A1 (en) * 2005-01-25 2006-07-27 Taiwan Semiconductor Manufacturing Co., Ltd. File transfer management systems and methods
CN102833337B (zh) * 2012-08-30 2016-03-02 北京星网锐捷网络技术有限公司 一种ftp文件上传、下载方法及装置
CN102843437A (zh) * 2012-09-17 2012-12-26 北京星网锐捷网络技术有限公司 网页应用的转换方法、装置和网络设备
CN104753966A (zh) * 2013-12-25 2015-07-01 明博教育科技有限公司 一种基于服务器和客户端缓存的资源文件查询方法及系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112653757A (zh) * 2020-12-21 2021-04-13 深圳前海微众银行股份有限公司 文件管理系统、方法及设备

Also Published As

Publication number Publication date
CN113364887A (zh) 2021-09-07

Similar Documents

Publication Publication Date Title
US8880634B2 (en) Cache sharing among branch proxy servers via a master proxy server at a data center
CN110019211A (zh) 关联索引的方法、装置和系统
CN111475180A (zh) 更新客户端缓存的方法和系统
US8381098B2 (en) Webpage request handling
US9600486B2 (en) File system directory attribute correction
CN111427701A (zh) 一种工作流引擎系统和业务处理方法
WO2023202276A1 (zh) 域名解析请求的处理方法、装置、设备、介质和程序产品
CN113760536A (zh) 数据缓存方法、装置、电子设备和计算机可读介质
CN113364887B (zh) 一种基于ftp的文件下载方法、代理服务器和系统
CN113553206B (zh) 数据事件执行方法、装置、电子设备和计算机可读介质
CN116743785A (zh) 基于雾计算的云网数据存储方法、装置、设备及介质
CN111161072A (zh) 基于区块链的随机数生成方法、设备及存储介质
WO2022171190A1 (zh) 固定执行顺序的交易方法和装置
CN114785770A (zh) 镜像层文件发送方法、装置、电子设备和计算机可读介质
CN114115941A (zh) 资源发送方法、页面渲染方法、装置、电子设备和介质
CN113742617A (zh) 一种缓存更新的方法和装置
CN109547552B (zh) Api请求处理方法、装置、存储介质及电子设备
CN110019671B (zh) 一种处理实时消息的方法和系统
CN113726885A (zh) 一种流量配额的调整方法和装置
CN113138943A (zh) 一种处理请求的方法和装置
CN111984616A (zh) 一种更新共享文件的方法、装置和系统
CN111865576A (zh) 一种同步url分类数据的方法和装置
CN110262756B (zh) 用于缓存数据的方法和装置
CN113760982B (zh) 一种数据处理方法和装置
CN114285743B (zh) 更新配置信息的方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant