CN112671855B - 文件传输方法及系统 - Google Patents
文件传输方法及系统 Download PDFInfo
- Publication number
- CN112671855B CN112671855B CN202011472805.8A CN202011472805A CN112671855B CN 112671855 B CN112671855 B CN 112671855B CN 202011472805 A CN202011472805 A CN 202011472805A CN 112671855 B CN112671855 B CN 112671855B
- Authority
- CN
- China
- Prior art keywords
- file
- service
- service system
- server
- scheduling center
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本说明书实施例公开了一种文件传输方法及系统,所述系统包括文件调度中心及至少两个文件服务器;所述系统中存储有业务系统与文件服务器的对应关系。文件调度中心用于接收业务系统发送的文件传输请求;文件传输请求包括业务文件的文件传输配置信息。文件调度中心还用于基于所述文件传输配置信息以及所述业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使业务系统将业务文件上传至分配的文件服务器。文件调度中心还用于在基于所述文件传输配置信息确定所述业务文件处理结束后,将所述文件的处理结果反馈至业务系统。利用本说明书各个实施例,可以大幅提高文件传输的效率以及灵活性。
Description
技术领域
本说明书涉及数据处理技术领域,特别地,涉及一种文件传输方法及系统。
背景技术
目前的文件传输系统大多数采用集中式存储以及上传下载,由集中式存储系统对业务系统之间的文件进行转发,使得文件传输速度依赖于集中式存储系统的单点带宽,并限制了业务系统对文件传输情况了解的及时性。因此,随着业务系统架构布设的复杂化以及待传输文件数据的数量的大幅增加,采用集中式存储系统的方式,文件传输效率以及文件传输情况反馈的实时性已无法满足业务处理的需要。同时,业务系统架构布设复杂,多业务系统之间交互的方式、权限等也存在较大的差异性,而采用集中式存储系统的方式也已无法适应当前复杂业务系统架构的业务传输灵活配置的需要。因此,目前亟需一种更加灵活高效的文件传输方法。
发明内容
本说明书实施例的目的在于提供一种文件传输方法及系统,可以大幅提高文件传输的效率以及灵活性。
本说明书提供一种文件传输方法及系统是包括如下方式实现的:
一种文件传输系统,所述文件传输系统包括文件调度中心以及至少两个文件服务器;所述文件传输系统中存储有业务系统与文件服务器的对应关系。所述文件调度中心用于接收业务系统发送的文件传输请求;所述文件传输请求包括业务文件的文件传输配置信息。所述文件调度中心用于基于所述文件传输配置信息以及所述业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使所述业务系统将业务文件上传至分配的文件服务器。所述文件调度中心用于在基于所述文件传输配置信息确定所述业务文件处理结束后,将所述文件的处理结果反馈至所述业务系统。
本说明书提供的所述系统的另一些实施例中,所述文件调度中心用于基于所述业务系统的文件注册信息以及所述文件传输配置信息对所述业务文件进行验证;以及用于在验证通过后,基于所述文件传输配置信息分配所述业务文件所对应的文件服务器。
本说明书提供的所述系统的另一些实施例中,所述文件调度中心用于接收业务系统发送的文件注册请求;以及用于调用文件权限组件,利用所述文件权限组件对所述文件注册请求进行权限审批处理,以在审批通过后存储所述文件注册请求所对应的文件注册信息。
本说明书提供的所述系统的另一些实施例中,所述分配的文件服务器用于在接收到所述业务系统发送的业务文件后,向所述业务系统发送基于所述业务文件的文件信息生成的校验信息;以及,还用于将所述校验信息发送给所述业务系统,以使所述业务系统基于所述业务文件的文件信息与所述校验信息进行一致性验证,并向所述文件调度中心反馈一致性验证结果。所述文件调度中心用于接收并记录所述业务系统反馈的一致性验证结果。
本说明书提供的所述系统的另一些实施例中,所述校验信息包括基于所述文件信息生成的MD5值。
本说明书提供的所述系统的另一些实施例中,所述文件调度中心用于在确定一致性验证结果为通过的情况下,基于所述文件传输配置信息生成所述业务文件的文件处理任务,并基于所述文件处理任务向所述分配的文件服务器发送文件处理指令。所述分配的文件服务器基于所述文件处理指令对所述业务文件进行处理。所述文件调度中心还用于在基于所述文件处理任务确定处理结束时,将所述业务文件的处理结果发送至所述业务系统。
本说明书提供的所述系统的另一些实施例中,所述文件服务器还包括处理插件,所述处理插件用于监控文件上传/下载事件,并在监控到文件上传/下载事件后通知文件调度中心。
本说明书提供的所述系统的另一些实施例中,所述系统还包括配置管理组件,所述配置管理组件用于存储文件注册信息以及业务系统与文件服务器之间的对应关系。
本说明书提供的所述系统的另一些实施例中,所述文件传输系统还提供有文件传输接口;相应的,所述文件调度中心用于接收业务系统基于所述文件传输接口发送的文件传输请求或一致性验证结果。
另一方面,本说明书实施例还提供一种文件传输方法,应用于文件传输系统,所述文件传输系统包括至少两个文件服务器;所述文件传输系统中存储有业务系统与文件服务器的对应关系;所述方法包括如下步骤。接收业务系统发送的文件传输请求;所述文件传输请求包括业务文件的文件传输配置信息。基于所述文件传输配置信息以及所述业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使所述业务系统将所述业务文件上传至所述分配的文件服务器。在基于所述文件传输配置信息确定所述业务文件处理结束后,将文件传输结果反馈至所述业务系统。
本说明书提供的所述方法的另一些实施例中,所述基于所述文件传输配置信息确定所述业务文件所对应的文件服务器之前,所述方法还包括:基于所述业务系统的文件注册信息对所述业务文件进行验证。在验证通过后,基于所述文件传输配置信息分配所述业务文件所对应的文件服务器。
本说明书提供的所述方法的另一些实施例中,所述文件注册信息采用下述方式确定。接收业务系统发送的文件注册请求。利用预先配置的文件权限组件对所述文件注册请求进行审批处理,以在审批通过后存储所述文件注册请求所对应的文件注册信息。
本说明书提供的所述方法的另一些实施例中,所述分配的文件服务器在接收到所述业务系统发送的业务文件后,向所述业务系统发送基于所述业务文件的文件信息生成的校验信息。将所述校验信息发送给所述业务系统,以使所述业务系统基于所述业务文件的文件信息与所述校验信息进行一致性验证,并向所述业务传输系统反馈一致性验证结果。接收并记录所述业务系统反馈的一致性验证结果。
本说明书提供的所述方法的另一些实施例中,在确定一致性验证结果为通过的情况下,基于所述文件传输配置信息生成所述业务文件的文件处理任务,并基于所述文件处理任务向所述分配的文件服务器发送文件处理指令,以使所述分配的文件服务器基于所述文件处理指令对所述业务文件进行处理。在基于所述文件处理任务确定处理结束时,将所述业务文件的文件处理结果发送至所述业务系统。
本说明书提供的所述方法的另一些实施例中,所述校验信息包括基于所述文件信息生成的MD5值。
另一方面,本说明书实施例还提供一种文件传输系统,所述文件传输系统包括至少一个处理器及用于存储处理器可执行指令的存储器,所述指令被所述处理器执行时实现任意一个或者多个实施例所述方法的步骤。
本说明书一个或多个实施例提供的文件传输方法及系统,通过布设文件调度中心以及若干与业务系统对应的文件服务器,利用文件调度中心将文件传输过程进行拆解成若干子传输环节,如拆分成文件权限管理、文件校验、文件处理、文件上传/下载等子环节,并可以对每个子环节的处理过程进行监控,使得文件传输整个过程更加灵活高效。同时,还可以实时准确监控并记录文件传输各子环节的情况,以便于在文件处理出现问题时,快速查找出错原因。同时,通过分布式文件传输布设方式,还可以实现多节点高效文件传输。
附图说明
为了更清楚地说明本说明书实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本说明书中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1为本说明书提供的一种文件传输系统的模块结构示意图;
图2为本说明书提供的一个实施例中的文件传输系统交互示意图;
图3为本说明书提供的另一个实施例中的文件传输系统交互示意图;
图4为本说明书提供的一种文件传输方法实施例的流程示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本说明书一个或多个实施例中的附图,对本说明书一个或多个实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是说明书一部分实施例,而不是全部的实施例。基于说明书一个或多个实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书实施例方案保护的范围。
如图1所示,本说明书实施例提供的一个场景示例中,所述文件传输方法可以应用于文件传输系统,所述文件传输系统可以包括文件调度中心以及文件处理子系统。文件处理子系统可以与各业务系统相对应。各文件处理子系统可以包括至少一个文件服务器。所述文件调度中心可以用于文件传输中的传输进程信息记录、文件服务器分配以及文件处理任务调度等。可以对业务系统按地理位置划分区,再对每个区按业务划分域,每个域底下再按功能划分节点(区->域->节点,一对多关系),每个节点部署至少两个文件服务器及处理插件。所述文件服务器可以用于接收并存储业务系统上传的业务文件、以及响应文件调度中心的文件处理指令对业务文件进行文件处理、以及响应业务系统的文件下载请求向业务系统反馈所请求的业务文件等。其中,所述业务系统可以为各业务所对应的至少一个服务器所组成的业务处理系统。所述业务如可以为理财、贷款、存款等。
一些实施例中,所述文件传输系统中还可以预先封装有与业务系统交互的程序组件,并向业务系统提供文件传输接口(Application Programming Interface,API)。业务系统可以通过所述API与所述文件传输系统进行交互。例如,所述文件调度中心可以用于接收业务系统基于所述文件传输接口发送的文件传输请求或一致性验证结果等。文件传输系统通过向各业务系统提供统一的API和业务系统进行对接,可以更加方便业务系统间的文件传输以及调度。
优选的,所述业务系统与文件调度中心之间可以采用Json格式交互。交互报文例子如下:
{
"fileName":"IPYKU20140202PLV.TXT",
"filePath":"D:\\IPYKU20140202PLV.TXT",
"fileSize":"5",
"orgId":"00001",
"appIp":"99.0.60.130",
"appName":"NotifySystem",
"fileType":"G",
"specialStr":"dGhpcyBpcyBzcGVjaWFsIGluZm9ybWF0aW9uIC4uLi4uLg=="
}
"fileSize"是做风控逻辑所用当文件大小超过一定阀值时可提供告警。
"fileType"代表是普通逻辑的文件还是有业务逻辑的文件。
"specialStr"自定义字符串Base64加密。
APP应用和子系统之间Json格式交互,交互报文例子如下:
{
"serviceName":"md5Service",
"serviceParam":{
"filePath":"D:\\IPYKU20140202PLV.TXT"
}
}
当然,上述交互方式仅为优选举例说明,具体实施时,还可以采用其他方式的交互方式,上述举例不构成对本说明书实施例方案的直接限定。
所述文件服务器中可以预先配置有处理插件,所述处理插件可以用于监控文件上传/下载事件事件,并在监控到文件上传/下载事件后通知文件调度中心。同时,文件服务器还可以实时将文件上传/下载是否成功的状态以及文件处理状态反馈给文件调度中心,以使文件调度中心及时有效的记录文件在不同环节的传输状态。
如图1所示,所述文件传输系统还可以包括文件权限组件。所述文件权限组件可以为预先配置的文件传输权限管理程序。所述文件权限组件可以用于管理不同业务系统、不同文件类型、不同传输方式下的文件上传/下载权限。另一些实施方式中,所述文件传输系统还可以包括配置管理组件。所述配置管理组件可以用于存储各业务系统的各文件类型所对应的文件传输权限以及业务系统与文件服务器之间的对应关系等信息。
具体的一个实施例如图2所示,如图2所示,所述文件传输系统可以包括文件调度中心以及至少两个文件服务器。所述文件传输系统中可以存储有业务系统与文件服务器的对应关系。所述文件调度中心可以用于接收业务系统发送的文件传输请求。所述文件传输请求可以包括业务文件的文件传输配置信息。所述文件调度中心可以用于基于所述文件传输配置信息以及所述业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使所述业务系统将业务文件上传至分配的文件服务器。所述文件调度中心可以用于在基于所述文件传输配置信息确定所述业务文件处理结束后,将所述文件的处理结果反馈至所述业务系统。
如图2及图3所示,一些实施方式中,在业务系统向文件调度中心发送文件传输请求之前,所述业务系统可以先向所述文件调度中心发送文件注册请求。例如,业务人员可以将经常传输的文件类型下的文件注册信息预先通过业务系统发送至文件调度中心,以在文件传输系统进行注册。或者,对于特殊类型的业务文件,也可以在文件传输之前,先将该待传输的业务文件的文件注册信息通过业务系统发送至文件调度中心,以在文件传输系统进行注册。通过预先在文件传输系统中对传输文件进行信息配置,可以更加简单灵活的实现对传输文件的权限管理。所述文件注册信息如可以包括业务系统标识、文件类型、文件名等。
一些实施例中,所述文件权限组件还可以包括用于实现文件注册请求审批的流程程序。如可以针对不同的业务系统、文件类型等设定不同的文件传输审批流程节点,针对不同的业务系统、文件类型,可以预先基于相应的权限审批流程进行审批操作。在审批通过后,文件传输系统赋予相应的业务系统、文件类型对应的文件传输权限,并将相应的业务系统、文件类型与其所对应的文件传输权限进行关联存储。
相应的,所述文件调度中心还可以用于接收业务系统发送的文件注册请求,以及还用于调用文件权限组件,利用文件权限组件对所述文件注册请求进行审批处理,以在审批通过后将所述文件注册请求所对应的文件注册信息存储至配置管理组件。
如业务系统可以响应业务人员通过业务终端发送的文件注册指令生成文件注册请求,并通过文件传输系统提供的API发送至文件调度中心,文件调度中心可以调用文件权限组件对文件注册信息执行审批流程。在审批通过后,确定完成文件注册,文件调度中心可以将文件注册信息与相应的业务文件的文件标识信息,发送至配置管理组件进行存储。所述文件标识至少可以包括业务系统标识、以及文件类型标识或特殊文件的文件名等。
在文件传输场景中,业务系统在接收到业务人员通过业务终端发送的文件传输指令后,可以基于该指令生成文件传输请求,并通过文件传输系统提供的API发送至文件调度中心。所述文件传输请求可以包括业务文件的文件传输配置信息。所述文件传输配置信息至少可以包括文件类型、文件名、是否需传输至其他的业务系统、需传输至的业务系统的系统标识信息等中的一种。为了便于表述,本说明书实施例中将需传输至的业务系统描述为对接业务系统。
如图2及图3所示,文件调度中心可以先基于该业务系统所对应的文件注册信息以及所述文件传输配置信息对待传输的业务文件进行合法性验证。如可以将文件传输配置信息与所述业务系统以及业务文件所对应的文件注册信息进行比对,以确定该业务系统是否有待传输业务文件的传输权限或者是否有向对接业务系统传输该业务文件的权限。如果验证不通过,则文件调度中心可以向业务系统反馈不合法的验证结果,业务系统可以将验证结果反馈给业务人员的业务终端。如果验证通过,文件调度中心可以基于所述文件传输配置信息分配所述业务文件需传输至的文件服务器。
相应的,所述文件调度中心还可以用于基于所述业务系统的文件注册信息以及所述文件传输配置信息对所述业务文件进行验证。以及,还可以用于在验证通过后,基于所述文件传输配置信息分配所述业务文件所对应的文件服务器。
在验证合法后,一些实施例中,文件调度中心可以基于所述文件传输配置信息以及业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使所述业务系统将所述业务文件上传至所述分配的文件服务器。
例如,基于所述文件传输配置信息确定业务文件为节点内传输,则文件调度中心可以将发起文件传输请求的业务系统所对应的文件服务器中筛选出一个文件服务器,作为分配的文件服务器,并将分配的文件服务器的服务器标识反馈给该业务系统,以使该业务系统将业务文件传输至分配的文件服务器。若基于所述文件传输配置信息确定业务文件为跨节点传输,则文件调度中心可以从文件需传输至的对接业务系统所对应的文件服务器中,筛选出一个文件服务器,作为分配的文件服务器,并将分配的文件服务器的服务器标识反馈给该业务系统,以使该业务系统将业务文件传输至分配的文件服务器。通过预先对文件服务器进行分布式布设,并建立文件服务器与业务系统的对应关系,在文件传输中,基于该对应关系可以更加简单高效的确定文件传输的路由路径。同时,通过分布式传输还可以有效避免集中式文件传输所带来的带宽局限性问题,提高文件传输的效率。
文件服务器还可以监控业务文件的上传状态,并将文件上传状态发送至文件调度中心,以使文件调度中心记录业务系统与文件服务器之间的交互日志。所述交互日志如可以为业务文件上传至文件服务器的时间点、状态等。业务文件成功上传至分配的文件服务器后,文件调度中心可以向相应的对接业务系统发送通知,以使对接业务系统从分配的文件服务器中下载相应的业务文件,从而完成文件上传。当然,文件调度中心也可以将文件是否传输成功的响应信息反馈至发起文件传输的业务系统。
另一些实施例中,业务文件在成功上传至分配的文件服务器后,分配的文件服务器还可以直接基于所述业务文件的文件信息生成校验信息。所述文件信息如可以为业务文件的部分文件内容信息等。当然,如图3所示,也可以由文件调度中心在基于交互日志确定文件传输成功后,向业务系统发送传输成功的响应信息,然后,由业务系统再向文件服务器发送MD5值生成请求。
可以利用加密算法对文件信息进行处理,生成校验信息。优选的,所述密码算法如可以为MD5(Message-Digest Algorithm,密码散列函数)算法。当然,也可以采用其他类型的加密算法。相应的,分配的文件服务器可以基于MD5算法生成业务文件的MD5值。然后,分配的文件服务器可以将生成的MD5值直接发送至业务系统,或者也可以通过文件调度中心发送至业务系统。
业务系统在接收到MD5值后,也可以基于MD5算法对业务系统中存储的业务文件进行处理,生成MD5值。然后,业务系统可以将接收的MD5值和生成的MD5值进行比对,以验证业务文件传输的一致性。如果验证不一致,则业务系统可以向业务人员所在的业务终端以及文件调度中心反馈验证结果。如果验证一致,业务系统可以向文件调度中心反馈验证结果。业务调度子系统可以记录相应的验证结果。
相应的,所述分配的文件服务器可以用于在接收到所述业务系统发送的业务文件后,向所述业务系统发送基于所述业务文件的文件信息生成的校验信息。以及,还可以用于将所述校验信息发送给所述业务系统,以使所述业务系统基于所述业务文件的文件信息与所述校验信息进行一致性验证,并向所述文件调度中心反馈一致性验证结果。所述文件调度中心还可以用于接收并记录所述业务系统反馈的一致性验证结果。在文件上传成功后,通过上述方式进一步对文件进行一致性校验,可以防止文件数据被篡改,进一步保证文件传输的准确性。
如图3所示,在验证一致的情况下,文件调度中心还可以更新文件传输事件的事件状态,等待后续处理。文件调度中心还可以进一步查看文件传输事件是否存在其他处理步骤。如是否需要对文件进行拆分、压缩、转码、重命名等处理。不同业务系统对文件格式的要求可能不同,可以预先在文件配置子系统中配置各业务系统的各文件类型的文件格式要求。文件调度中心可以根据预先配置的文件格式要求信息,向分配的文件服务器发送文件加工处理指令,相应的,分配的文件服务器可以对业务文件进一步进行加工处理。
一些应用场景中,还可以预先通过对应文件加工处理方式进行分析,将常用的文件加工处理环节分别在文件服务器中进行封装。如将文件压缩、文件拆分、文件转码、文件重命名等处理分别进行封装。文件调度中心可以先确定相关业务文件待加工处理的步骤,然后,将待加工处理的步骤进行拆解,得到若干加工处理子步骤。拆解过程可以依据预先封装的加工处理环节进行。然后,可以基于各加工处理子步骤的处理顺序生成依次处理的文件处理任务,并基于所述文件处理任务向所述分配的文件服务器发送文件处理指令。文件服务器可以基于相应的文件处理指令对文件进行处理。
如图3所示,文件服务器在每处理完一个文件处理指令后,向文件调度中心反馈响应信息。文件调度中心进一步判断是否存在下一处理步骤,即是否存在下一个文件处理任务,如果有,则继续向文件服务器发送相应的文件处理指令,执行文件加工处理。直至业务文件的整体处理步骤结束,则文件调度中心可以勾对文件处理事件以及各任务,结束处理。文件调度中心可以向发起文件传输的业务系统反馈文件处理结果。以及,文件调度系统也可以同时向对接业务系统反馈处理结果。发起文件传输的业务系统或者对接业务系统可以基于文件处理结果生成文件传输结果信息,并反馈至相应的业务终端。
相应的,所述文件调度中心还可以用于在确定一致性验证结果为通过的情况下,基于所述文件传输配置信息生成所述业务文件的文件处理任务,并基于所述文件处理任务向所述分配的文件服务器发送文件处理指令。所述分配的文件服务器还可以用于基于所述文件处理指令对所述业务文件进行处理。所述文件调度中心还还可以用于在基于所述文件处理任务确定处理结束时,将所述业务文件的处理结果发送至所述业务系统。
基于本说明书实施例提供的文件传输系统,通过布设文件调度中心以及若干与业务系统对应的文件服务器,利用文件调度中心将文件传输过程进行拆解成若干子传输环节,如拆分成文件权限管理、文件校验、文件处理、文件上传/下载等子环节,并可以对每个子环节的处理过程进行监控,使得文件传输整个过程更加灵活高效。同时,还可以实时准确监控并记录文件传输各子环节的情况,以便于在文件处理出现问题时,快速查找出错原因。同时,采用分布多点并发传输,文件传输也不再依赖于集中式存储的带宽,而是各个域之间的带宽。业务系统生成数据文件只需要通过FTP上传至指定节点文件服务器,系统不但可以实时自动按照约定配置把文件送到指定的对接业务系统,而且还能扩展文件传输动作前处理和传输后处理的功能,例如跨业务系统的文件编码转码,系统到达通知服务等扩展功能。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。具体的可以参照前述相关处理相关实施例的描述,在此不做一一赘述。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
基于上述所述的文件传输系统,本说明书一个或多个实施例还提供一种文件传输方法,应用于文件传输系统。图4表示说明书提供的一种文件传输方法实施例的流程示意图,如图4所示,所述方法可以包括:
S402:接收业务系统发送的文件传输请求;所述文件传输请求包括业务文件的文件传输配置信息。
S404:基于所述文件传输配置信息以及所述业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使所述业务系统将所述业务文件上传至所述分配的文件服务器。
S406:在基于所述文件传输配置信息确定所述业务文件处理结束后,将文件传输结果反馈至所述业务系统。
另一些实施例中,所述基于所述文件传输配置信息确定所述业务文件所对应的文件服务器之前,所述方法还可以包括,基于所述业务系统的文件注册信息对所述业务文件进行验证。相应的,在验证通过后,基于所述文件传输配置信息分配所述业务文件所对应的文件服务器。
另一些实施例中,所述文件注册信息可以采用下述方式确定,接收业务系统发送的文件注册请求;利用预先配置的文件权限组件对所述文件注册请求进行审批处理,以在审批通过后存储所述文件注册请求所对应的文件注册信息。
另一些实施例中,所述分配的文件服务器在接收到所述业务系统发送的业务文件后,向所述业务系统发送基于所述业务文件的文件信息生成的校验信息。将所述校验信息发送给所述业务系统,以使所述业务系统基于所述业务文件的文件信息与所述校验信息进行一致性验证,并向所述业务传输系统反馈一致性验证结果。以及,接收并记录所述业务系统反馈的一致性验证结果。
另一些实施例中,在确定一致性验证结果为通过的情况下,基于所述文件传输配置信息生成所述业务文件的文件处理任务,并基于所述文件处理任务向所述分配的文件服务器发送文件处理指令,以使所述分配的文件服务器基于所述文件处理指令对所述业务文件进行处理。在基于所述文件处理任务确定处理结束时,将所述业务文件的文件处理结果发送至所述业务系统。
另一些实施例中,所述校验信息可以包括基于所述文件信息生成的MD5值。
需要说明的,上述所述的方法根据系统实施例的描述还可以包括其他的实施方式。具体的实现方式可以参照相关方法实施例的描述,在此不作一一赘述。
本说明书提供的上述实施例所述的方法或装置可以通过计算机程序实现业务逻辑并记录在存储介质上,所述的存储介质可以计算机读取并执行,实现本说明书实施例所描述方案的效果。因此,本说明书还提供一种文件传输系统,所述系统可以包括处理器及存储处理器可执行指令的存储器,所述指令被所述处理器执行时实现包括上述任意一个实施例所述方法的步骤。
需要说明的,上述所述的装置根据方法实施例的描述还可以包括其他的实施方式。具体的实现方式可以参照相关方法实施例的描述,在此不作一一赘述。
本说明书实施例并不局限于必须是符合标准数据模型/模板或本说明书实施例所描述的情况。某些行业标准或者使用自定义方式或实施例描述的实施基础上略加修改后的实施方案也可以实现上述实施例相同、等同或相近、或变形后可预料的实施效果。应用这些修改或变形后的数据获取、存储、判断、处理方式等获取的实施例,仍然可以属于本说明书的可选实施方案范围之内。
所述存储介质可以包括用于存储信息的物理装置,通常是将信息数字化后再以利用电、磁或者光学等方式的媒体加以存储。所述存储介质有可以包括:利用电能方式存储信息的装置如,各式存储器,如RAM、ROM等;利用磁能方式存储信息的装置如,硬盘、软盘、磁带、磁芯存储器、磁泡存储器、U盘;利用光学方式存储信息的装置如,CD或DVD。当然,还有其他方式的可读存储介质,例如量子存储器、石墨烯存储器等等。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本说明书的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述并不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
以上所述仅为本说明书的实施例而已,并不用于限制本说明书。对于本领域技术人员来说,本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书的权利要求范围之内。
Claims (16)
1.一种文件传输系统,其特征在于,所述文件传输系统包括文件调度中心以及至少两个文件服务器;所述文件传输系统中存储有业务系统与文件服务器的对应关系;
所述文件调度中心用于接收业务系统发送的文件传输请求;所述文件传输请求包括业务文件的文件传输配置信息;
所述文件调度中心用于基于所述文件传输配置信息以及所述业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使所述业务系统将业务文件上传至分配的文件服务器;
所述文件调度中心用于在基于所述文件传输配置信息确定所述业务文件处理结束后,将所述文件的处理结果反馈至所述业务系统;
其中,所述文件传输配置信息用于确定业务文件为节点内传输还是跨节点传输,所述文件调度中心用于在业务文件为跨节点传输时,从对接业务系统对应的文件服务器中,筛选出一个文件服务器,作为分配的文件服务器;
其中,所述文件服务器用于监控所述业务文件的上传状态,并将所述上传状态发送至所述文件调度中心,以使所述文件调度中心记录所述业务系统与所述文件服务器之间的交互日志;在所述业务文件成功上传至分配的文件服务器后,所述文件调度中心用于向所述业务系统发送通知,以使所述业务系统从分配的文件服务器中下载相应的业务文件,完成文件上传。
2.根据权利要求1所述的系统,其特征在于,所述文件调度中心用于基于所述业务系统的文件注册信息以及所述文件传输配置信息对所述业务文件进行验证;以及用于在验证通过后,基于所述文件传输配置信息分配所述业务文件所对应的文件服务器。
3.根据权利要求2所述的系统,其特征在于,所述文件调度中心用于接收业务系统发送的文件注册请求;以及用于调用文件权限组件,利用所述文件权限组件对所述文件注册请求进行权限审批处理,以在审批通过后存储所述文件注册请求所对应的文件注册信息。
4.根据权利要求1所述的系统,其特征在于,所述分配的文件服务器用于在接收到所述业务系统发送的业务文件后,向所述业务系统发送基于所述业务文件的文件信息生成的校验信息;以及,还用于将所述校验信息发送给所述业务系统,以使所述业务系统基于所述业务文件的文件信息与所述校验信息进行一致性验证,并向所述文件调度中心反馈一致性验证结果;
所述文件调度中心用于接收并记录所述业务系统反馈的一致性验证结果。
5.根据权利要求4所述的系统,其特征在于,所述校验信息包括基于所述文件信息生成的MD5值。
6.根据权利要求4所述的系统,其特征在于,所述文件调度中心用于在确定一致性验证结果为通过的情况下,基于所述文件传输配置信息生成所述业务文件的文件处理任务,并基于所述文件处理任务向所述分配的文件服务器发送文件处理指令;
所述分配的文件服务器基于所述文件处理指令对所述业务文件进行处理;
所述文件调度中心还用于在基于所述文件处理任务确定处理结束时,将所述业务文件的处理结果发送至所述业务系统。
7.根据权利要求1所述的系统,其特征在于,所述文件服务器还包括处理插件,所述处理插件用于监控文件上传/下载事件,并在监控到文件上传/下载事件后通知文件调度中心。
8.根据权利要求1所述的系统,其特征在于,所述系统还包括配置管理组件,所述配置管理组件用于存储文件注册信息以及业务系统与文件服务器之间的对应关系。
9.根据权利要求4所述的系统,其特征在于,所述文件传输系统还提供有文件传输接口;相应的,所述文件调度中心用于接收业务系统基于所述文件传输接口发送的文件传输请求或一致性验证结果。
10.一种文件传输方法,其特征在于,应用于文件传输系统,所述文件传输系统包括至少两个文件服务器;所述文件传输系统中存储有业务系统与文件服务器的对应关系;所述方法包括:
接收业务系统发送的文件传输请求;所述文件传输请求包括业务文件的文件传输配置信息;
基于所述文件传输配置信息以及所述业务系统与文件服务器的对应关系分配文件服务器,并将分配的业务服务器的服务器标识反馈给所述业务系统,以使所述业务系统将所述业务文件上传至所述分配的文件服务器;
在基于所述文件传输配置信息确定所述业务文件处理结束后,将文件传输结果反馈至所述业务系统;
其中,所述文件传输配置信息用于确定业务文件为节点内传输还是跨节点传输,所述文件调度中心用于在业务文件为跨节点传输时,从对接业务系统对应的文件服务器中,筛选出一个文件服务器,作为分配的文件服务器;
其中,所述文件服务器用于监控所述业务文件的上传状态,并将所述上传状态发送至所述文件调度中心,以使所述文件调度中心记录所述业务系统与所述文件服务器之间的交互日志;在所述业务文件成功上传至分配的文件服务器后,所述文件调度中心用于向所述业务系统发送通知,以使所述业务系统从分配的文件服务器中下载相应的业务文件,完成文件上传。
11.根据权利要求10所述的方法,其特征在于,所述基于所述文件传输配置信息确定所述业务文件所对应的文件服务器之前,所述方法还包括:基于所述业务系统的文件注册信息对所述业务文件进行验证;
在验证通过后,基于所述文件传输配置信息分配所述业务文件所对应的文件服务器。
12.根据权利要求11所述的方法,其特征在于,所述文件注册信息采用下述方式确定:
接收业务系统发送的文件注册请求;
利用预先配置的文件权限组件对所述文件注册请求进行审批处理,以在审批通过后存储所述文件注册请求所对应的文件注册信息。
13.根据权利要求10所述的方法,其特征在于,所述分配的文件服务器在接收到所述业务系统发送的业务文件后,向所述业务系统发送基于所述业务文件的文件信息生成的校验信息;
将所述校验信息发送给所述业务系统,以使所述业务系统基于所述业务文件的文件信息与所述校验信息进行一致性验证,并向所述业务传输系统反馈一致性验证结果;
接收并记录所述业务系统反馈的一致性验证结果。
14.根据权利要求13所述的方法,其特征在于,在确定一致性验证结果为通过的情况下,基于所述文件传输配置信息生成所述业务文件的文件处理任务,并基于所述文件处理任务向所述分配的文件服务器发送文件处理指令,以使所述分配的文件服务器基于所述文件处理指令对所述业务文件进行处理;
在基于所述文件处理任务确定处理结束时,将所述业务文件的文件处理结果发送至所述业务系统。
15.根据权利要求13所述的方法,其特征在于,所述校验信息包括基于所述文件信息生成的MD5值。
16.一种文件传输系统,其特征在于,所述文件传输系统包括至少一个处理器及用于存储处理器可执行指令的存储器,所述指令被所述处理器执行时实现权利要求10-15任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011472805.8A CN112671855B (zh) | 2020-12-15 | 2020-12-15 | 文件传输方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011472805.8A CN112671855B (zh) | 2020-12-15 | 2020-12-15 | 文件传输方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112671855A CN112671855A (zh) | 2021-04-16 |
CN112671855B true CN112671855B (zh) | 2023-08-25 |
Family
ID=75404373
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011472805.8A Active CN112671855B (zh) | 2020-12-15 | 2020-12-15 | 文件传输方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112671855B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105162878A (zh) * | 2015-09-24 | 2015-12-16 | 网宿科技股份有限公司 | 基于分布式存储的文件分发系统及方法 |
CN108848197A (zh) * | 2018-09-19 | 2018-11-20 | 江苏瑞中数据股份有限公司 | 一种文件传输的方法与系统 |
CN108924210A (zh) * | 2018-06-27 | 2018-11-30 | 杭州贝店科技有限公司 | 业务请求处理方法、装置、服务器及存储介质 |
CN110099104A (zh) * | 2019-04-12 | 2019-08-06 | 平安科技(深圳)有限公司 | 文件传输方法、系统和存储介质 |
CN111600957A (zh) * | 2020-05-20 | 2020-08-28 | 中国工商银行股份有限公司 | 文件传输方法、装置、系统和电子设备 |
CN112073521A (zh) * | 2020-09-10 | 2020-12-11 | 成都中科大旗软件股份有限公司 | 一种分散数据的共享调度方法及系统 |
-
2020
- 2020-12-15 CN CN202011472805.8A patent/CN112671855B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105162878A (zh) * | 2015-09-24 | 2015-12-16 | 网宿科技股份有限公司 | 基于分布式存储的文件分发系统及方法 |
CN108924210A (zh) * | 2018-06-27 | 2018-11-30 | 杭州贝店科技有限公司 | 业务请求处理方法、装置、服务器及存储介质 |
CN108848197A (zh) * | 2018-09-19 | 2018-11-20 | 江苏瑞中数据股份有限公司 | 一种文件传输的方法与系统 |
CN110099104A (zh) * | 2019-04-12 | 2019-08-06 | 平安科技(深圳)有限公司 | 文件传输方法、系统和存储介质 |
CN111600957A (zh) * | 2020-05-20 | 2020-08-28 | 中国工商银行股份有限公司 | 文件传输方法、装置、系统和电子设备 |
CN112073521A (zh) * | 2020-09-10 | 2020-12-11 | 成都中科大旗软件股份有限公司 | 一种分散数据的共享调度方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN112671855A (zh) | 2021-04-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9519469B2 (en) | Cloud infrastructure-based management system and method for maintenance and deployment of application system | |
WO2017050141A1 (zh) | 基于分布式存储的文件分发系统及方法 | |
CN109246197B (zh) | 基于智能合约的数据处理方法及装置 | |
WO2021057084A1 (zh) | 一种基于区块链的数据处理方法、装置、系统及电子设备 | |
US11088981B2 (en) | Receiving a data object at a device | |
CN107105050B (zh) | 一种业务对象的存储、下载方法及系统 | |
CN103885426A (zh) | 设备的控制方法、客户端、服务器、中间设备和被控设备 | |
CN113778463B (zh) | 一种业务服务部署方法及装置 | |
CN113064600B (zh) | 部署应用的方法和装置 | |
CN113300854B (zh) | 一种边缘节点能力扩展方法、系统及扩展盒子 | |
CN113904847B (zh) | 物联网卡的云平台绑定方法、系统、设备及介质 | |
CN109309646B (zh) | 一种多媒体转码方法和系统 | |
CN112559461A (zh) | 文件传输方法及装置、存储介质及电子设备 | |
CN110442601A (zh) | 一种Openstack镜像数据并行加速的方法和装置 | |
CN112671855B (zh) | 文件传输方法及系统 | |
KR20170135011A (ko) | 공동 편집 문서를 공유하는 방법 및 장치 | |
CN105592130A (zh) | 一种服务部署方法、服务管理方法及装置 | |
CN115878138B (zh) | 应用预下载方法、装置、计算机、存储介质 | |
CN116860699A (zh) | 文件管理方法、系统、计算机设备及计算机可读存储介质 | |
CN115037757B (zh) | 一种多集群服务管理系统 | |
KR102372186B1 (ko) | 피어 정보를 제공하는 방법 및 네트워크 관리 시스템 | |
CN109922316A (zh) | 媒体资源调度及媒体资源管理方法、装置和电子设备 | |
CN115185841A (zh) | 系统重构测试方法、装置、设备及存储介质 | |
CN113919821A (zh) | 业务的流转方法、装置、计算机设备和存储介质 | |
CN112416980A (zh) | 数据业务处理方法、装置及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20221025 Address after: 25 Financial Street, Xicheng District, Beijing 100033 Applicant after: CHINA CONSTRUCTION BANK Corp. Address before: 12 / F, 15 / F, No. 99, Yincheng Road, Shanghai pilot Free Trade Zone, 200120 Applicant before: Jianxin Financial Science and Technology Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |