CN113377728A - 一种文件共享方法及系统 - Google Patents

Abstract

本发明公开了一种文件共享方法及系统，该方法包括：如果银行系统之外的用户端或者银行系统之内的座席端需要上传文件，则用户端或者座席端将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储；如果任意模块需要读取用户端或者座席端上传的文件，则该任意模块访问分布式文件系统以读取相应的文件。本申请中在银行系统外的用户端或银行系统内的座席端需要上传文件时，可以将需要上传的文件上传至互为副本的至少两个分布式文件系统，以供任意模块在需要时读取，从而通过互为副本的至少两个分布式文件系统实现文件的共享存储，通过多副本存储的方式提高银行共享存储的可靠性，避免现有技术中银行实现共享存储存在的单点故障的问题。

Description

一种文件共享方法及系统

技术领域

本发明涉及数据存储技术领域，更具体地说，涉及一种文件共享方法及系统。

背景技术

目前银行采用集群部署的方式提供服务，银行的业务处理过程中会产生比较多的文件，文件基本为1M以下的小文件，现有技术是在需要上传文件的模块之间搭建NAS(Network Attached Storage，网络附属存储)共享存储的方式提供文件共享，由于不同模块通过同一个NAS共享存储的存储块来读写文件实现共享，如果该存储块出现故障，则会导致NAS无法提供共享存储功能，进而导致银行无法再基于NAS实现相应的共享存储，也即现有技术中银行实现共享存储的方式存在单点故障的问题。

发明内容

本发明的目的是提供一种文件共享方法及系统，能够通过多副本存储的方式提高银行共享存储的可靠性，避免现有技术中银行实现共享存储存在的单点故障的问题。

为了实现上述目的，本发明提供如下技术方案：

一种文件共享方法，包括：

如果银行系统之外的用户端或者所述银行系统之内的座席端需要上传文件，则所述用户端或者所述座席端将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储；

如果任意模块需要读取所述用户端或者所述座席端上传的文件，则该任意模块访问所述分布式文件系统以读取相应的文件。

优选的，所述用户端将需要上传的文件上传至所述分布式文件系统中，包括：

所述用户端通过企业服务总线将需要上传的文件上传至所述银行系统的文件平台，并通过企业服务总线发送上传通知至所述银行系统的业务处理端；

所述业务处理端响应所述上传通知，从所述文件平台下载所述用户端需要上传的文件至自身的服务器中，并将自身的服务器中下载的所述用户端需要上传的文件上传至所述分布式文件系统中。

优选的，所述座席端将需要上传的文件上传至所述分布式文件系统中，包括：

所述座席端将需要上传的文件上传至所述银行系统的坐席服务器中，所述坐席服务器将所述座席端需要上传的文件上传至所述分布式文件系统中。

优选的，所述用户端或者所述座席端将需要上传的文件上传至所述分布式文件系统中之后，还包括：

所述分布式文件系统实时或者定时查询自身所存储的文件，并在自身存储的文件的数量达到数量阈值时，将自身存储的持续时间最长的文件删除。

优选的，所述用户端将需要上传的文件上传至所述分布式文件系统中后，还包括：

所述业务处理端将所述用户端需要上传的文件归档至所述银行系统的内容管理平台中，以供所述分布式文件系统中不存在相应文件时进行查询；

所述坐席端将需要上传的文件上传至所述分布式文件系统中后，还包括：

所述座席端发送上传通知至所述业务处理端，所述业务处理端响应所述上传通知，将所述座席端需要上传的文件归档至所述内容管理平台中，以供所述分布式文件系统中不存在相应文件时进行查询。

优选的，所述用户端或者所述座席端发送所述上传通知至所述业务处理端，包括：

所述用户端或者所述座席端调用所述业务处理端的文件通知接口，以通过所述文件通知接口实现所述上传通知的发送。

优选的，所述分布式文件系统具体为FastDFS。

一种文件共享系统，包括分布式文件系统、银行系统之外的用户端及所述银行系统之内的座席端，其中：

所述用户端及所述座席端用于：如果需要上传文件，则将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储；

所述分布式文件系统用于：存储所述用户端或者所述座席端上传的文件，并在所述银行系统的任意模块需要读取所述用户端或者所述座席端上传的文件时，供该任意模块访问以读取相应的文件。

本发明提供了一种文件共享方法及系统，该方法包括：如果银行系统之外的用户端或者所述银行系统之内的座席端需要上传文件，则所述用户端或者所述座席端将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储；如果任意模块需要读取所述用户端或者所述座席端上传的文件，则该任意模块访问所述分布式文件系统以读取相应的文件。本申请中在银行系统外的用户端或者银行系统内的座席端需要上传文件时，可以直接将需要上传的文件上传至互为副本的至少两个分布式文件系统，以供任意模块在需要时从分布式文件系统中读取相应文件，从而通过互为副本的至少两个分布式文件系统实现文件的共享存储，通过多副本存储的方式提高银行共享存储的可靠性，避免现有技术中银行实现共享存储存在的单点故障的问题。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的一种文件共享方法的流程图；

图2为本发明实施例提供的一种文件共享方法中FastDFS的架构图；

图3为本发明实施例提供的一种文件共享系统的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参阅图1，其示出了本发明实施例提供的一种文件共享方法的流程图，具体可以包括：

S11：如果银行系统之外的用户端或者银行系统之内的座席端需要上传文件，则用户端或者座席端将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储。

其中，银行可以为视频银行，银行系统则可以为银行的集群；文件可以为图片文件、电子凭证及交易过程中产生的一些临时文件等，当然根据实际需要进行的其他设定也均在本发明的保护范围之内。需要说明的是，用户端为银行网点的机具端，也即为银行网点的用户办理业务的机器，座席端为银行办公区的坐席办公端，也即为银行办公区的工作人员办理业务的机器；且座席端属于银行系统，因此可以直接与银行系统实现数据传输，而用户端不属于银行系统，因此其需要通过企业服务总线与银行系统实现数据传输，后续对此进行具体说明。另外，分布式文件系统是指分布式的存储资源，该分布式文件系统可以属于银行系统，也可以不属于银行系统，只要其能够与银行系统实现数据传输进而为银行系统进行文件的共享存储即可。

并且，为了保证文件存储的可靠性，本申请实施例可以设置至少两个互为副本的分布式文件系统，在一种情况下，仅需一个主的分布式文件系统与银行系统实现数据传输以实现文件上传及文件读取，而与该主的分布式文件系统互为副本的其他分布式文件系统仅需与该主的分布式文件系统保持数据同步即可，如果该主的分布式文件系统出现故障，则选取作为其副本的任意一个分布式文件系统替换故障的主的分布式文件系统实现与银行系统的数据传输，在另一种情况下，该至少两个互为副本的分布式文件系统均可以与银行系统进行数据传输以实现文件上传，从而在上传文件时需要将文件同时上传至该至少两个互为副本的分布式文件系统中每个分布式文件系统，而读取文件时则仅需从该至少两个互为副本的分布式文件系统中的任意一个分布式文件系统实现相应文件读取即可；当然也可以根据实际需要进行设定，但是不管哪种情况，均需要该至少两个互为副本的分布式文件系统保持数据同步。具体来说，本申请实施例中如果银行系统之外的用户端或者银行系统之内的座席端需要上传文件，则用户端或者座席端可以将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储，以便后续实现文件读取。

S12：如果任意模块需要读取用户端或者座席端上传的文件，则该任意模块访问分布式文件系统以读取相应的文件。

在将文件上传至分布式文件系统之后，如果在后续办理业务的流程中需要使用已经上传至分布式文件系统的文件，则可以直接从分布式文件系统中读取相应的文件即可，从而实现文件的存储共享；其中，任意模块可以为用户端、座席端或者其他银行系统中其他办理业务的模块等，均在本发明的保护范围之内。

另外，对于同一分布式文件系统中的至少两个不同的存储节点还可以互为副本，从而在将文件上传至任意一个分布式文件系统时，还可以保证文件上传至的该至少两个存储节点保持数据同步，从而进一步提高存储可靠性。

本申请中在银行系统外的用户端或者银行系统内的座席端需要上传文件时，可以直接将需要上传的文件上传至互为副本的至少两个分布式文件系统，以供任意模块在需要时从分布式文件系统中读取相应文件，从而通过互为副本的至少两个分布式文件系统实现文件的共享存储，通过多副本存储的方式提高银行共享存储的可靠性，避免现有技术中银行实现共享存储存在的单点故障的问题。

本发明实施例提供的一种文件共享方法，用户端将需要上传的文件上传至分布式文件系统中，可以包括：

用户端通过企业服务总线将需要上传的文件上传至银行系统的文件平台，并通过企业服务总线发送上传通知至银行系统的业务处理端；

业务处理端响应上传通知，从文件平台下载用户端需要上传的文件至自身的服务器中，并将自身的服务器中下载的用户端需要上传的文件上传至分布式文件系统中。

需要说明的是，在用户端需要上传文件时，用户端可以先调用ESB(EnterpriseService Bus，企业服务总线)服务，以将文件上传至银行系统中属于ESB服务的文件平台上，再通过ESB通知银行的业务处理端进行处理；业务处理端在收到文件上传的通知后，从文件平台将文件下载至业务处理端的服务器上，再将文件从业务处理端的服务器存入分布式文件系统中，以供每日对账使用；从而通过这种方式实现银行系统外用户端的文件上传，保证文件上传的可靠性。其中，通过ESB通知银行的业务处理端进行处理可以是发送预先设定的上传通知给业务处理端，以使得业务处理端响应该上传通知实现相应的文件处理。

本发明实施例提供的一种文件共享方法，座席端将需要上传的文件上传至分布式文件系统中，可以包括：

座席端将需要上传的文件上传至银行系统的坐席服务器中，坐席服务器将座席端需要上传的文件上传至分布式文件系统中。

需要说明的是，在座席端需要上传文件时，座席端可以先将文件上传至坐席的ABS(Agree Browser Server，赞同金融浏览器)服务器，该坐席的ABS服务器可以简称为坐席服务器；座席端将文件上传至坐席的ABS服务器也即为通知ABS服务器对文件进行处理，相应的，ABS服务器收到文件上传的通知后，将文件从自身的存储中上传至分布式文件系统，从而仅需通过坐席服务器即可实现座席端至分布式文件系统的文件上传，保证了文件上传的可靠性及高效率。

本发明实施例提供的一种文件共享方法，用户端或者座席端将需要上传的文件上传至分布式文件系统中之后，还可以包括：

分布式文件系统实时或者定时查询自身所存储的文件，并在自身存储的文件的数量达到数量阈值时，将自身存储的持续时间最长的文件删除。

本申请实施例可以实时或者定时查询自身所存储的文件，从而在自身存储的文件数量达到根据实际需要设定的数量阈值时，将自身存储的持续时长最长的文件删除，从而在保证分布式文件系统存储的文件包含近期所需要文件的同时，保证分布式文件系统中始终存在足够的空间实现文件的存储。

另外，分布式文件系统中的文件可以作为每日对账使用，此时也可以在每日对账完成后即将当日上传的文件进行删除，从而使得分布式文件系统中仅存储有当前的需要对账使用的文件，也即分布式文件系统中可以根据文件的使用周期，每每个周期完成时刻将该周期上传的使用完成的文件均进行删除；当然根据实际需要进行的其他设定也均在本发明的保护范围之内。

本发明实施例提供的一种文件共享方法，用户端将需要上传的文件上传至分布式文件系统中后，还可以包括：

业务处理端将用户端需要上传的文件归档至银行系统的内容管理平台中，以供分布式文件系统中不存在相应文件时进行查询；

坐席端将需要上传的文件上传至分布式文件系统中后，还包括：

座席端发送上传通知至业务处理端，业务处理端响应上传通知，将座席端需要上传的文件归档至内容管理平台中，以供分布式文件系统中不存在相应文件时进行查询。

需要说明的是，由于分布式文件系统中的文件仅是暂时存储，在符合相应情况时会被删除，因此为了后续查档，本申请实施例在将需要上传的文件上传至分布式文件系统中之后，还可以由业务处理端再将该文件归档至预先设定的内容管理平台中，以供从内容管理平台实现相应文件的查询。另外，座席端通知业务处理端的方式也可以是向其发送上传通知，且用户端或者座席端发送上传通知至业务处理端可以包括：用户端或者座席端调用业务处理端的文件通知接口，以通过文件通知接口实现上传通知的发送；也即本申请实施例中可以为业务处理端设置相应的文件通知接口，从而在需要向业务处理端发送上传通知等数据时，可以直接调用该文件通知接口实现数据传输，从而使得向业务处理端实现数据传输的方式更加方便快捷。

本发明实施例提供的一种文件共享方法，分布式文件系统具体可以为FastDFS。

需要说明的是，FastDFS是一款开源的分布式文件系统，功能主要包括文件存储、文件同步、文件访问(文件上传、文件下载)等，解决了文件大容量存储和高性能访问的问题；FastDFS特别适合以文件为载体的在线服务，如图片、视频、文档等。如图2所示为FastDFS的架构图，具体来说，FastDFS主要有以下部分组成：

Tracker Server：跟踪服务器，主要做调度工作，起负载均衡的作用；在内存中记录集群中所有存储组和存储服务器的状态信息，是客户端和数据服务器交互的枢纽，相比GFS中的master更为精简，不记录文件索引信息，占用的内存量很少。

Storage Server：存储服务器(又称存储节点或数据服务器)，文件和文件属性(meta data)都保存到存储服务器上；Storage server直接利用OS的文件系统调用管理文件。

Client：客户端，作为业务请求的发起方，通过专有接口使用TCP/IP协议与跟踪器服务器或存储节点进行数据交互；FastDFS向使用者提供基本文件访问接口，比如upload、download、append、delete等，以客户端库的方式提供给用户使用。

FastDFS主要有以下特性：分组存储，简单灵活；对等结构，不存在单点；文件ID由FastDFS生成，作为文件访问凭证；FastDFS不需要传统的name server或meta server；大、中、小文件均可以很好支持，可以存储海量小文件；一台storage支持多块磁盘，支持单盘数据恢复；提供了nginx扩展模块，可以和nginx无缝衔接；支持多线程方式上传和下载文件，支持断点续传；存储服务器上可以保存文件附加属性。可见，FastDFS可以采用多组多副本的部署形式，再某一个组的部分机器宕机时，并不影响整个系统的正常使用，FastDFS会自动挑选可用的节点访问，从而保证存储可靠性。

相应的，本发明实施例提供的一种文件共享方法具有以下优点：FastDFS通过分布式部署多节点的方式实现共享，且节点之间相互备份，不存在单节点故障的风险，因此有效的解决了NAS存在的单点故障的问题；由于银行需要保存大量的小文件，而每个文件都必须有一个inode，因此有可能发生共享存储的inode已经用光，但是NAS存储还未存满的情况，这时就无法在NAS存储上创建新文件，而FastDFS采用集群服务器的磁盘进行共享，INODE可以有多块磁盘空间，INODE可以扩充，不需要专业设备，不受INODE数量的限制；FastDfs是一个高可用的分布式文件系统，可实现跨中心服务器之间文件共享，并且具有故障自动转移的特性。

本发明实施例还提供了一种文件共享系统，如图3所示，可以包括分布式文件系统、银行系统之外的用户端及银行系统之内的座席端，其中：

用户端及座席端用于：如果需要上传文件，则将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储；

分布式文件系统用于：存储用户端或者座席端上传的文件，并在银行系统的任意模块需要读取用户端或者座席端上传的文件时，供该任意模块访问以读取相应的文件。

需要说明的是，本发明实施例提供的一种文件共享系统中相关部分的说明请参见本发明实施例提供的一种文件共享方法中对应部分的详细说明，在此不再赘述。另外本发明实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明，以免过多赘述。

对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种文件共享方法，其特征在于，包括：

如果银行系统之外的用户端或者所述银行系统之内的座席端需要上传文件，则所述用户端或者所述座席端将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储；

如果任意模块需要读取所述用户端或者所述座席端上传的文件，则该任意模块访问所述分布式文件系统以读取相应的文件。

2.根据权利要求1所述的方法，其特征在于，所述用户端将需要上传的文件上传至所述分布式文件系统中，包括：

所述用户端通过企业服务总线将需要上传的文件上传至所述银行系统的文件平台，并通过企业服务总线发送上传通知至所述银行系统的业务处理端；

所述业务处理端响应所述上传通知，从所述文件平台下载所述用户端需要上传的文件至自身的服务器中，并将自身的服务器中下载的所述用户端需要上传的文件上传至所述分布式文件系统中。

3.根据权利要求2所述的方法，其特征在于，所述座席端将需要上传的文件上传至所述分布式文件系统中，包括：

所述座席端将需要上传的文件上传至所述银行系统的坐席服务器中，所述坐席服务器将所述座席端需要上传的文件上传至所述分布式文件系统中。

4.根据权利要求3所述的方法，其特征在于，所述用户端或者所述座席端将需要上传的文件上传至所述分布式文件系统中之后，还包括：

所述分布式文件系统实时或者定时查询自身所存储的文件，并在自身存储的文件的数量达到数量阈值时，将自身存储的持续时间最长的文件删除。

5.根据权利要求4所述的方法，其特征在于，所述用户端将需要上传的文件上传至所述分布式文件系统中后，还包括：

所述业务处理端将所述用户端需要上传的文件归档至所述银行系统的内容管理平台中，以供所述分布式文件系统中不存在相应文件时进行查询；

所述坐席端将需要上传的文件上传至所述分布式文件系统中后，还包括：

所述座席端发送上传通知至所述业务处理端，所述业务处理端响应所述上传通知，将所述座席端需要上传的文件归档至所述内容管理平台中，以供所述分布式文件系统中不存在相应文件时进行查询。

6.根据权利要求5所述的方法，其特征在于，所述用户端或者所述座席端发送所述上传通知至所述业务处理端，包括：

所述用户端或者所述座席端调用所述业务处理端的文件通知接口，以通过所述文件通知接口实现所述上传通知的发送。

7.根据权利要求6所述的方法，其特征在于，所述分布式文件系统具体为FastDFS。

8.一种文件共享系统，其特征在于，包括分布式文件系统、银行系统之外的用户端及所述银行系统之内的座席端，其中：

所述用户端及所述座席端用于：如果需要上传文件，则将需要上传的文件上传至互为副本的至少两个分布式文件系统中进行存储；

所述分布式文件系统用于：存储所述用户端或者所述座席端上传的文件，并在所述银行系统的任意模块需要读取所述用户端或者所述座席端上传的文件时，供该任意模块访问以读取相应的文件。

Images