CN108595537A - 一种文件处理方法、装置及对象存储中间件 - Google Patents
一种文件处理方法、装置及对象存储中间件 Download PDFInfo
- Publication number
- CN108595537A CN108595537A CN201810295608.XA CN201810295608A CN108595537A CN 108595537 A CN108595537 A CN 108595537A CN 201810295608 A CN201810295608 A CN 201810295608A CN 108595537 A CN108595537 A CN 108595537A
- Authority
- CN
- China
- Prior art keywords
- file
- storage
- stored
- platform
- object storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/602—Providing cryptographic facilities or services
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种文件处理方法、装置及对象存储中间件,其中方法包括:接收来自终端的文件存储请求,所述文件存储请求包括待存储文件和所述待存储文件的特征信息,根据所述特征信息确定所述待存储文件在多个存储平台的权重值,根据所述权重值从所述多个存储平台中确定第一目标存储平台,并将所述待存储文件发送到所述第一目标存储平台,以便于所述第一目标存储平台存储所述待存储文件,可减少开发人员进行文件存储时的工作量,从而可降低企业的开发成本。
Description
技术领域
本发明涉及计算机金融技术领域,尤其涉及一种文件处理方法、装置及对象存储中间件。
背景技术
目前,企业可根据实际情况将企业的相关文件例如文档、图片和企业产品的开发文件等进行对应存储,例如可存储在本地硬盘、本地服务器或者其他云存储系统中,其中,当对该企业的相关文件进行对应存储时,可将该相关文件存储在同一存储平台中,也可根据开发需求的不同存储在不同的存储平台中。例如,针对任一企业文件,可将该企业文件中的开发文件存储于A存储平台,将该企业文件中的文档存储于B存储平台,也可将该企业文件中的开发文件和文档都存储于A存储平台或B存储平台。
随着企业的发展和开发文件的不断扩大,企业的相关文件数量会不断增多,企业可能会因为文件数量的增多而更换存储平台。通常情况下,为了保证之前存储的文件的完整性和可用性,企业会将之前存储平台的文件重新存储到现有的存储平台中,并更改这些文件的存储信息(例如文件的存储路径等)。但这种方式会随着文件量的增加而增加开发人员进行文件存储时的工作量,增加企业的开发成本。
发明内容
本发明实施例提供一种文件处理方法、装置及对象存储中间件,可减少开发人员进行文件存储时的工作量,从而降低企业的开发成本。
第一方面,本发明实施例提供了一种文件处理方法,应用于文件存储系统,所述文件存储系统由多个存储平台、对象存储中间件以及终端组成,该方法包括:
所述对象存储中间件接收来自所述终端的文件存储请求,所述文件存储请求包括待存储文件和所述待存储文件的特征信息;
所述对象存储中间件根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值;
所述对象存储中间件根据所述权重值从所述多个存储平台中确定第一目标存储平台,并将所述待存储文件发送到所述第一目标存储平台,以便于所述第一目标存储平台存储所述待存储文件。
可选的,所述对象存储中间件根据所述权重值从所述多个存储平台中确定第一目标存储平台,并将所述待存储文件发送到所述第一目标存储平台之后,所述方法还包括:
所述对象存储中间件接收所述第一目标存储平台存储所述待存储文件后发送的所述待存储文件的存储标识和存储路径,并生成所述待存储文件的文件标识,所述待存储文件的文件标识和所述待存储文件的存储标识相对应;
所述对象存储中间件将所述待存储文件的文件标识发送到所述终端。
可选的,所述对象存储中间件接收来自所述终端的文件存储请求之后,所述方法还包括:
所述对象存储中间件判断所述文件存储请求是否包括存储平台信息;
若不包括,则所述对象存储中间件执行所述根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值的步骤;
若包括,则所述对象存储中间件将所述存储平台信息所指示的存储平台确定为第一目标存储平台。
可选的,所述方法还包括:
所述对象存储中间件接收来自所述终端的文件读取请求,所述文件读取请求包括待读取文件的文件标识;
所述对象存储中间件根据所述待读取文件的文件标识确定所述待读取文件的存储路径和存储标识;
所述对象存储中间件根据所述待读取文件的存储路径从所述多个存储平台中确定第二目标存储平台,并基于所述待读取文件的存储标识从所述第二目标存储平台中获取所述待读取文件;
所述对象存储中间件向所述终端发送所述待读取文件,以便所述终端展示所述待读取文件。
可选的,所述特征信息包括文件类型,所述方法还包括:
所述对象存储中间件获取预定义的多种文件类型;
所述对象存储中间件设置所述多种文件类型中的每一种文件类型在所述多个存储平台中的权重值。
可选的,所述对象存储中间件接收来自所述终端的文件存储请求之后,所述对象存储中间件根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值之前,所述方法还包括:
所述对象存储中间件和所述多个存储平台建立短连接。
可选的,所述接收来自所述终端的文件存储请求之后,所述方法还包括:
所述对象存储中间件获取来自所述终端的安全密钥;
所述对象存储中间件向安全服务器发送安全验证请求,所述安全验证请求携带有所述安全密钥,所述安全密钥用于对所述终端进行安全验证;
所述对象存储中间件接收来自所述安全服务器对所述终端的安全验证结果,在所述安全验证结果为通过时,执行根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值的步骤。
第二方面,本发明实施例提供了一种文件处理装置,应用于文件存储系统,所述文件存储系统由多个存储平台、对象存储中间件以及终端组成,该装置包括:
接收单元,用于接收来自终端的文件存储请求,所述文件存储请求包括待存储文件和所述待存储文件的特征信息;
确定单元,用于根据所述特征信息确定所述待存储文件在多个存储平台的权重值;
发送单元,用于在所述确定单元根据所述权重值从所述多个存储平台中确定第一目标存储平台时,将所述待存储文件发送到所述第一目标存储平台,以便于所述第一目标存储平台存储所述待存储文件。
可选的,所述文件处理装置还包括:生成单元。
生成单元,用于当所述接收单元接收所述第一目标存储平台存储所述待存储文件后发送的所述待存储文件的存储标识和存储路径时,生成所述待存储文件的文件标识,所述待存储文件的文件标识和所述待存储文件的存储标识相对应;
所述发送单元,还用于将所述待存储文件的文件标识发送到所述终端。
可选的,所述文件处理装置还包括:判断单元和执行单元。
判断单元,用于判断所述文件存储请求是否包括存储平台信息;
执行单元,用于若所述判断单元判断所述特征信息不包括所述存储平台信息,则执行所述根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值的步骤;
所述执行单元,还用于若所述判断单元判断所述特征信息包括所述存储平台信息,则将所述存储平台信息所指示的存储平台确定为第一目标存储平台。
可选的,所述文件处理装置还包括:获取单元。
所述接收单元,还用于接收来自所述终端的文件读取请求,所述文件读取请求包括待读取文件的文件标识;
所述确定单元,还用于根据所述待读取文件的文件标识确定所述待读取文件的存储路径和存储标识;
获取单元,用于在所述确定单元根据所述待读取文件的存储路径从所述多个存储平台中确定第二目标存储平台时,基于所述待存储文件的存储标识从所述第二目标存储平台中获取所述待读取文件;
所述发送单元,还用于向所述终端发送所述待读取文件,以便所述终端展示所述待读取文件。
可选的,所述特征信息包括文件类型,所述文件处理装置还包括:设置单元。
获取单元,用于获取预定义的多种文件类型;
设置单元,用于设置所述多种文件类型中的每一种文件类型在所述多个存储平台中的权重值。
可选的,所述文件处理装置还包括:建立单元。
所述建立单元,用于和所述多个存储平台建立短连接。
可选的,所述获取单元,还用于获取来自所述终端的安全密钥;
所述发送单元,还用于向安全文件处理装置发送安全验证请求,所述安全验证请求携带有所述安全密钥,所述安全密钥用于对所述终端进行安全验证;
所述接收单元,还用于接收来自所述安全服务器对所述终端的安全验证结果,在所述安全验证结果为通过时,执行根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值的步骤。
第三方面,本发明实施例提供了一种对象存储中间件,该对象存储中间件包括:存储器、处理器以及网络接口,所述存储器中存储有计算机程序,所述网络接口用于接收所述处理器的控制消息,所述处理器执行所述计算机程序时实现如第一方面任一项所述的方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行上述第一方面的方法。
本发明实施例通过接收来自终端的文件存储请求,该文件存储请求包括待存储文件和该待存储文件的特征信息,并根据该特征信息确定该待存储文件在多个存储平台的权重值,于是在根据该权重值从该多个存储平台中确定第一目标存储平台时,可将该待存储文件发送到该第一目标存储平台,以便于该第一目标存储平台能存储该待存储文件,实现了根据该权重值对待存储文件直接进行存储的方法,可减少开发人员的在进行文件存储时的工作量,从而降低企业的开发成本。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种文件处理方法的示意流程图;
图2是本发明另一实施例提供的一种文件处理方法的示意流程图;
图3是本发明实施例提供的一种文件存储系统结构框图;
图4是本发明实施例提供的一种文件处理装置的示意性框图;
图5是本发明实施例提供的一种对象存储中间件的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本实施例中的多个存储平台例如可以是本地磁盘,本地存储服务器和其他企业提供的云存储服务器等,其中,其他企业提供的云存储服务器是企业级的云存储服务器。
请参见图1,是本发明实施例提供的一种文件处理方法的示意流程图,如图1所示,该方法可包括:
S101,对象存储中间件接收来自终端的文件存储请求,该文件存储请求包括待存储文件和该待存储文件的特征信息。
具体的,当企业需要对相关文件进行存储时,用户可通过终端将待存储文件发送到对象存储中间件,使得对象存储中间件可接收来自终端的文件存储请求,该文件存储请求包括该待存储文件和该待存储文件的特征信息,其中,该待存储文件的特征信息包括该待存储文件的文件类型、大小和名称等。
在一个实施例中,该终端是包括企业各个产品的文件的终端,该文件例如可以是文档、图片或者企业产品的开发文件等,其中,该文档例如可以是使用企业产品的用户信息,图片可以是身份证等。因此该对象存储中间件可按照一定的时间间隔询问该终端是否有对该各个产品的文件进行文件存储的请求,当该对象存储中间件读取到该终端存在对该各个产品的文件进行文件存储请求时(即获取到来自终端的文件存储请求),可执行步骤S102。同样的,该对象存储中间件也可接收该终端发送的文件存储请求。
在一个实施例中,该对象存储中间件在接收来自该终端的文件存储请求之前,该对象存储中间件可先获取预定义的多种文件类型,并设置该多种文件类型中的每一种文件类型在多个存储平台中的权重值,以使得该对象存储中间件可根据接收到的待存储文件的文件类型确定该待存储文件在该多个存储平台的权重值。
需要说明的是,该对象存储中间件可接收来自一个终端的文件存储请求,也可同时接收来自多个终端的文件存储请求,在本发明实施例中不做限定。
S102,对象存储中间件根据该特征信息确定该待存储文件在多个存储平台的权重值。
具体的,该对象存储中间件存储有任一文件类型与各个存储平台权重值的对应关系,开发人员在使用该对象存储中间件时,可根据接收到的文件存储请求确定待存储文件和该待存储文件的特征信息,由于该特征信息包括文件类型,因此可进一步确定出该待存储文件的文件类型,于是该对象存储中间件可通过上述对应关系确定与该待存储文件的文件类型对应的各个存储平台的权重值。其中,该对象存储中间件中包括的任一文件类型与多个存储平台的权重值的对应关系可以是该对象存储中间件默认的,用户也可根据自身需求(即自身的存储习惯或者存储要求等)对该默认的权重值进行修改。
其中,该对象存储中间件存储任一文件类型与该各个存储平台权重值的对应关系之前,需要先确定任一文件类型在该各个存储平台的权重值,该权重值的确定可以和文件的类型相关,也可和文件的大小相关,即不同的文件类型可对应在多个存储平台不同的权重值,或者同一文件类型但不同大小的文件也可对应在多个存储平台不同的权重值。
在一个实施例中,如果该对象存储中间件默认的将文档存储在A存储平台的权重例如可以为60%,存储在B存储平台的权重例如可以为20%,存储在C存储平台的权重例如可以为15%,则存储在D存储平台的权重例如可以为5%,而将该图片存储在A存储平台的权重例如可以为20%,存储在B存储平台的权重例如可以为50%,存储在C存储平台的权重例如可以为5%,则存储在D存储平台的权重例如可以为25%,因此如果开发人员没有修改该对象存储中间件默认的不同文件类型对应的多个存储平台的权重值,当该对象存储中间件接收到文件存储请求时,可根据该文件存储请求包括的待存储文件的特征信息(文件类型)确定出该待存储文件在多个存储平台的权重值。
可选的,该对象存储中间件还可确定同一文件类型但不同文件大小对应在多个存储平台的权重值,例如可默认将1GB大小的A文件存储在A存储平台的权重值是60%,将1GB大小的A文件存储在B存储平台的权重值是20%,将1GB大小的A文件存储在C存储平台的权重值是30%等等,因此当该对象存储中间件接收到1GB大小的A文件时,可根据上述的权重值大小将该1GB大小的A文件存储在A存储平台中。
需要说明的是,该对象存储中间件中可同时包括不同文件类型对应于多个存储平台的权重值和同一文件类型但不同文件大小对应于多个存储平台的权重值,也可只包括不同文件类型对应于多个存储平台的权重值或者同一文件类型但不同文件大小对应于多个存储平台的权重值中的一项,在本实施例中不做限定。
可选的,开发人员可根据自身需求对该对象存储中间件默认的权重值进行修改,例如可将该对象存储中间件默认的将文档存储在A存储平台的权重值修改为15%,存储在B存储平台的权重值修改为70%,存储在C存储平台的权重值修改为5%,存储在D存储平台的权重值修改为10%,因此如果此时的对象存储中间件在接收到来自终端的文件存储请求时,则可在修改后的权重值下,根据该文件存储请求包括的待存储文件的文件类型确定出该待存储文件在多个存储平台的权重值。
可选的,开发人员还可根据该多个存储平台的剩余存储空间对该默认的权重值进行修改,即在进行文件存储一段时间后,可确定各个存储平台中的剩余存储空间,并根据该剩余存储空间对该默认的权重值进行修改。例如,如果在进行一段时间的文件存储后,确定的A存储平台的剩余存储空间太小(例如只有2GB的剩余存储空间),但是B存储平台和C存储平台的剩余存储空间比较大,因此,开发人员可将默认的将文档存储在A存储平台的权重值修改为15%,存储在B存储平台的权重值修改为70%,存储在C存储平台的权重值修改为5%,存储在D存储平台的权重值修改为10%,或者将默认的将文档存储在A存储平台的权重值修改为15%,存储在B存储平台的权重值修改为5%,存储在C存储平台的权重值修改为70%,存储在D存储平台的权重值修改为10%。其中,在本实施例中,对开发人员修改该对象存储中间件的权重值的修改依据不做限定。
需要说明的,开发人员可根据需求修改默认的一条或多条权重值,也可不修改该权重值,在本发明实施例中,对该对象存储中间件根据特征信息确定该待存储文件在多个存储平台的权重值的方式不做限定。
S103,对象存储中间件根据该权重值从该多个存储平台中确定第一目标存储平台,并将该待存储文件发送到该第一目标存储平台,以便于该第一目标存储平台存储该待存储文件。
具体的,对象存储中间件可在接收到文件存储请求后,确定出待存储文件和该待存储文件的特征信息,如果该文件存储请求没有指定存储平台信息,则可根据该特征信息包括的文件类型确定出与之对应的多个存储平台的权重值,并将该多个存储平台的权重值中的最大值所对应的存储平台确定为第一目标存储平台,则可将该待存储文件发送到该第一目标存储平台,以便于该第一目标存储平台存储该待存储文件。其中,该对象存储中间件在将该待存储文件发送到该第一目标存储平台后,可存储该待存储文件的特征信息,使得该对象存储中间件在接收到来自第一目标存储平台反馈的待存储文件的文件标识时能将该待存储文件的文件标识和该待存储文件的特征信息进行关联存储,以便于用户的日后查找。
其中,在该对象存储中间件根据权重值或者根据接收到的文件存储请求包括的存储平台信息确定出第一目标存储平台后,该第一目标存储平台可根据该待存储文件的文件大小为该待存储文件分配存储空间,并将该待存储文件进行存储。
例如,如果该对象存储中间件根据接收到的文件存储请求确定的待存储文件为A文件,该A文件的文件类型为文档,A文件的大小为1GB,如果在包括该A文件的文件存储请求中没有包括存储平台信息,由于该A文件为文档,则可通过A文件的文件类型确定出多个存储平台用于存储文档的权重值,若该对象存储中间件确定的A存储平台存储文档权重值为60%,B存储平台存储文档权重值为20%,C存储平台存储文档权重值为15%,D存储平台存储文档权重值为5%,由于A存储平台存储文档的权重值最大,该对象存储中间件则将该A存储平台确定为第一目标存储平台,并将该A文件发送到A存储平台,当该A存储平台接收到该A文件后,可确定该A文件的大小(1GB),则该A存储平台为该A文件分配1GB的存储空间,并将该A文件存储在该A存储平台的对应存储空间中。
在本发明实施例中,对象存储中间件通过接收来自终端的文件存储请求,该文件存储请求包括待存储文件和该待存储文件的特征信息,并根据该特征信息确定该待存储文件在多个存储平台的权重值,该权重值用于表示该待存储文件存储在该多个存储平台中的概率,于是在根据该权重值从该多个存储平台中确定第一目标存储平台时,可将该待存储文件发送到该第一目标存储平台,以便于该第一目标存储平台能存储该待存储文件,实现了根据该权重值对待存储文件直接进行存储的方法,可减少开发人员的在进行文件存储时的工作量,从而降低企业的开发成本。
请参见图2,是本发明另一实施例提供的一种文件处理方法的示意流程图,如图2所示,该方法可包括:
S201,对象存储中间件接收来自终端的文件存储请求,该文件存储请求包括待存储文件和该待存储文件的特征信息。
具体的,该对象存储中间件在接收来自终端的文件存储请求之前,可先获取用户在多个存储平台的注册账号,使得该对象存储中间件可以通过该各个存储平台提供的应用程序编程接口(Application Programming Interface,API)与之相连接,并通过该对象存储中间件的API和终端建立连接,则该对象存储中间件和该多个存储平台及终端确定连接关系后可向该终端发送安全密钥,同时,该对象存储中间件在接收来自该终端的文件请求之后,并根据该带存储文件的特征信息确定该待存储文件在多个存储平台的权重值之前,还可和该多个存储平台通过http/https建立短连接,以便于该对象存储中间件在接收到来自该终端的文件存储请求或者文件读取请求时对该终端进行安全验证。因此在该对象存储中间件接收到来自终端的文件存储请求后,可获取该终端的安全密钥用于安全验证,该对象存储中间件在接收到该安全密钥后向安全服务器发送安全验证请求,以验证该终端或者该终端发送的文件存储请求是否合法,该安全服务器可通过RSA签名校验的方法对该终端或该终端发送的文件存储请求进行安全验证,并在验证完成后将安全验证结果发送到该对象存储中间件,如果该对象存储中间件接收到的安全验证结果为通过,说明该终端属于合法的发送终端或者该文件存储请求是合法的文件请求,则可转而执行步骤S202。
其中,该对象存储中间件在接收到来自终端的文件存储请求后通过对该发送终端或者该文件存储请求进行安全验证,能降低非法终端对该对象存储中间件的攻击,同样的,当执行步骤S206时,即根据待读取文件的存储路径从该多个存储平台中确定第二目标存储平台,以及从该第二目标存储平台中获取待读取文件并发送到终端时,也需要对发送文件读取请求的终端进行安全验证,以避免非法终端通过该对象存储中间件盗取存储文件。
可选的,该对象存储中间件获取的该终端的安全密钥可以包括在该文件存储请求中,也可不包括在该文件存储请求中,在本发明实施例中不做限定,同时,该安全服务器进行安全检验的方式也不做限定,也例如可以是发送验证信息等方式。
S202,对象存储中间件判断该文件存储请求是否包括存储平台信息。
具体的,该对象存储中间件根据接收到的文件存储请求确定待存储文件和该待存储文件的特征信息后,如果该文件存储请求中未包括该存储平台信息,即未指定该待存储文件的存储位置,则执行步骤S203,如果该文件存储请求中包括了存储平台信息,即该文件请求中包括的存储平台信息就是该待存储文件的存储位置,则转而执行步骤S204。
S203,若不包括,则对象存储中间件执行该根据该特征信息确定该待存储文件在多个存储平台的权重值的步骤。
具体的,步骤S203的具体执行方式可参见步骤S102和步骤S103,在此不再进行赘述。
S204,若包括,则该对象存储中间件将该存储平台信息所指示的存储平台确定为第一目标存储平台。
S205,对象存储中间件接收来自该终端的文件读取请求,该文件读取请求包括待读取文件的文件标识,并根据该待读取文件的文件标识确定该待读取文件的存储路径和存储标识。
具体的,在用户通过对象存储中间件存储待存储文件时,会确定存储该待存储文件的第一目标存储平台,并将该待存储文件发送到该第一目标存储平台,该第一目标存储平台存储该待存储文件后会将该待存储文件的存储标识和存储路径发送到该对象存储中间件,因此该中间件可生成和该存储标识相对应的待存储文件的文件标识,并将该待存储文件的文件标识发送到该终端,于是该对象存储中间件可根据文件读取请求确定的待读取文件的文件标识进一步确定出该待读取文件的存储路径和存储标识,从而执行步骤S206。此外,该对象存储中间件在接收来自该终端的文件存储请求的同时可接收来自该终端的文件读取请求。
例如,对象存储中间件确定将A文件存储在A存储平台后,该A存储平台会将存储该A文件的存储标识和存储路径发送到该对象存储中间件,则该对象存储中间件可生成与该A文件的存储标识相对应的文件标识,并将该文件标识发送到终端,如果需要读取该A文件,终端则可直接将该A文件的文件标识发送到该对象存储中间件,于是该对象存储中间件可根据该A文件的文件标识确定出A文件的存储标识和存储路径。
S206,对象存储中间件根据该待读取文件的存储路径从该多个存储平台中确定第二目标存储平台,并基于该待存储文件的存储标识从该第二目标存储平台中获取该待读取文件,将该待读取文件发送到该终端。
举例来说,如果待读取文件为A文件,则可根据接收到的A文件的文件标识确定A文件的存储路径和存储标识,则可根据该存储路径从多个存储平台中确定A文件的第二目标存储平台(A存储平台),并基于该存储标识从该A存储平台中获取该A文件,并将该A文件发送到终端。
又例如,请参见图3是本发明实施例提供的一种文件存储系统结构框图,该文件存储系统包括5个存储平台、对象存储中间件以及各个产品文件的终端。该对象存储中间件通过多个存储平台提供的API和该多个存储平台建立连接,并通过该对象存储中间件提供的API和各个终端建立连接。如果该终端需要将产品A中的文档存储在A存储平台,将产品A中的图片存储在B存储平台,将产品B中的文档存储在A存储平台,将产品B中的图片存储在B存储平台。如果该对象存储中间件根据接收到来自终端的文件存储请求确定的待存储文件为产品A中的文档,因此该对象存储中间件可确定存储文档对应的多个存储平台的权重值。如果,A存储平台存储文档权重值为60%,B存储平台存储文档权重值为20%,C存储平台存储文档权重值为15%,D存储平台存储文档权重值为5%,由于该A存储平台存储文档的权重值最大,则将产品A中的文档发送到A存储平台,该A存储平台在接收到产品A中的文档后可根据该产品A中的文档的大小确定分配的存储空间,于是可将该产品A中的文档存储在A存储平台对应的存储空间中,然后该A存储平台将该产品A中的文档的存储路径和存储标识发送到该对象存储中间件,因此该对象存储中间件可生成与该产品A的文档的存储标志相对应的文件标识,并将该文件标识发送到终端。同理可将产品A中的图片存储在B存储平台中,产品B中的文档存储在A存储平台中,将产品B中的图片存储在B存储平台中,如果用户需要查找产品B中的文档,可通过终端向对象存储中间件发送读取产品B中的文档的请求,并根据该请求包括的产品B中的文档的文件标识确定出该产品B中的文档的存储路径和存储标识,于是该对象存储中间件可根据该产品B中的文档的存储路径从多个存储平台中确定出存储该产品B中的文档的A存储平台,并基于该存储标识从该A存储平台中获取该产品B中的文档,并将该产品B中的文档发送到终端。
在本发明实施例中,对象存储中间件可通过接收到的来自终端的文件存储请求确定待存储文件和该待存储文件的特征信息,于是通过判断该特征信息是否包括该待存储文件的存储位置,在不包括该存储位置时可根据该特征信息确定该待存储文件在多个存储平台的权重值,并根据该权重值从该多个存储平台中确定第一目标存储平台,再将该待存储文件发送到该第一目标存储平台进行存储,当该对象存储中间件接收到来自终端的文件读取请求时,可确定待读取文件的文件标识,于是根据该文件标识确定该待读取文件的存储路径和存储标识,并根据该待读取文件的存储路径从多个存储平台中确定第二目标存储平台,并基于该待存储文件的存储标识从该第二目标存储平台中获取该待读取文件并将该待读取文件发送到终端,使得在使用过多的存储平台时,方便用户对文件的存储和查找。
本发明实施例还提供了一种文件处理装置,该文件处理装置应用于文件存储系统,该文件存储系统由多个存储平台、对象存储中间件以及终端组成,并用于执行前述任一项该的方法的单元。具体地,参见图4,是本发明实施例提供的一种文件处理装置的示意框图。本实施例的文件处理装置包括:接收单元401、确定单元402以及发送单元403。
接收单元401,用于接收来自终端的文件存储请求,该文件存储请求包括待存储文件和该待存储文件的特征信息;
确定单元402,用于根据该特征信息确定该待存储文件在多个存储平台的权重值;
发送单元403,用于在该确定单元402根据该权重值从该多个存储平台中确定第一目标存储平台时,将该待存储文件发送到该第一目标存储平台,以便于该第一目标存储平台存储该待存储文件。
可选的,该文件处理装置还包括:生成单元404
生成单元404,用于当该接收单元401接收该第一目标存储平台存储该待存储文件后发送的该待存储文件的存储标识和存储路径时,生成该待存储文件的文件标识,该待存储文件的文件标识和该待存储文件的存储标识相对应;
该发送单元403,还用于将该待存储文件的文件标识发送到该终端。
可选的,该文件处理装置还包括:判断单元405和执行单元406。
判断单元405,用于判断该文件存储请求是否包括存储平台信息;
执行单元406,用于若该判断单元405判断该特征信息不包括该存储平台信息,则执行该根据该特征信息确定该待存储文件在该多个存储平台的权重值的步骤;
该执行单元406,还用于若该判断单元405判断该特征信息包括该存储平台信息,则将该存储平台信息所指示的存储平台确定为第一目标存储平台。
可选的,该文件处理装置还包括:获取单元407。
该接收单元401,还用于接收来自该终端的文件读取请求,该文件读取请求包括待读取文件的文件标识;
该确定单元402,还用于根据该待读取文件的文件标识确定该待读取文件的存储路径和存储标识;
获取单元407,用于在该确定单元402根据该待读取文件的存储路径从该多个存储平台中确定第二目标存储平台时,基于该待存储文件的存储标识从该第二目标存储平台中获取该待读取文件;
该发送单元403,还用于向该终端发送该待读取文件,以便该终端展示该待读取文件。
可选的,该特征信息包括文件类型,该文件处理装置还包括:设置单元408。
该获取单元407,还用于获取预定义的多种文件类型;
设置单元408,用于设置该多种文件类型中的每一种文件类型在该多个存储平台中的权重值。
可选的,该文件处理装置还包括:建立单元409。
该建立单元409,用于和该多个存储平台建立短连接。
可选的,该获取单元407,还用于获取来自该终端的安全密钥;
该发送单元403,还用于向安全文件处理装置发送安全验证请求,该安全验证请求携带有该安全密钥,该安全密钥用于对该终端进行安全验证;
该接收单元401,还用于接收来自该安全文件处理装置对该终端的安全验证结果,在该安全验证结果为通过时,执行根据该特征信息确定该待存储文件在该多个存储平台的权重值的步骤。
在本发明实施例中,接收单元401通过接收来自终端的文件存储请求,该文件存储请求包括待存储文件和该待存储文件的特征信息,确定单元402根据该特征信息确定该待存储文件在多个存储平台的权重值,该权重值用于表示该待存储文件存储在该多个存储平台中的概率,于是在根据该权重值从该多个存储平台中确定第一目标存储平台时,发送单元403可将该待存储文件发送到该第一目标存储平台,以便于该第一目标存储平台能存储该待存储文件,实现了根据该权重值对待存储文件直接进行存储的方法,可减少开发人员的在进行文件存储时的工作量,从而降低企业的开发成本。
参见图5,是本发明实施例提供的一种对象存储中间件的示意框图。如图所示的本实施例中的对象存储中间件可以包括:一个或多个处理器501;一个或多个网络接口502和存储器503。上述处理器501、网络接口502和存储器503通过总线504连接。存储器503用于存储计算机程序,该计算机程序包括程序指令,处理器501用于执行存储器503存储的程序指令。其中,处理器501被配置用于调用该程序指令执行:
调用网络接口502接收来自终端的文件存储请求,该文件存储请求包括待存储文件和该待存储文件的特征信息;
根据该特征信息确定该待存储文件在多个存储平台的权重值;
根据该权重值从该多个存储平台中确定第一目标存储平台,并调用网络接口502将该待存储文件发送到该第一目标存储平台,以便于该第一目标存储平台存储该待存储文件。
其中,该处理器501还用于执行:
调用网络接口502接收所述第一目标存储平台存储所述待存储文件后发送的所述待存储文件的存储标识和存储路径,并生成所述待存储文件的文件标识,所述待存储文件的文件标识和所述待存储文件的存储标识相对应;
调用网络接口502将该待存储文件的文件标识发送到该终端。
其中,该处理器501还用于执行:
判断所述文件存储请求是否包括存储平台信息;
若不包括,则执行所述根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值的步骤;
若包括,则将所述存储平台信息所指示的存储平台确定为第一目标存储平台。
其中,该处理器501还用于执行:
调用网络接口502接收来自该终端的文件读取请求,该文件读取请求包括待读取文件的文件标识;
根据该待读取文件的文件标识确定该待读取文件的存储路径和存储标识;
根据该待读取文件的存储路径从该多个存储平台中确定第二目标存储平台,并基于所述待存储文件存储标识从所述第二目标存储平台中获取所述待读取文件;
调用网络接口502向所述终端发送所述待读取文件,以便所述终端展示所述待读取文件。
其中,该特征信息包括文件类型,该处理器501还用于执行:
获取预定义的多种文件类型;
设置该多种文件类型中的每一种文件类型在该多个存储平台中的权重值。
其中,该处理器501还用于执行:
和所述多个存储平台建立短连接。
其中,该处理器501还用于执行:
调用网络接口502获取来自该终端的安全密钥;
调用网络接口502向安全服务器发送安全验证请求,该安全验证请求携带有该安全密钥,该安全密钥用于对该终端进行安全验证;
调用网络接口502接收来自该安全服务器对该终端的安全验证结果,在该安全验证结果为通过时,执行根据该特征信息确定该待存储文件在该多个存储平台的权重值的步骤。
在本发明的另一实施例中提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令被处理器执行时实现上述图1和图2所述的方法。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种文件处理方法,其特征在于,应用于文件存储系统,所述文件存储系统由多个存储平台、对象存储中间件以及终端组成,其中,
所述对象存储中间件接收来自所述终端的文件存储请求,所述文件存储请求包括待存储文件和所述待存储文件的特征信息;
所述对象存储中间件根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值;
所述对象存储中间件根据所述权重值从所述多个存储平台中确定第一目标存储平台,并将所述待存储文件发送到所述第一目标存储平台,以便于所述第一目标存储平台存储所述待存储文件。
2.根据权利要求1所述的方法,其特征在于,所述对象存储中间件根据所述权重值从所述多个存储平台中确定第一目标存储平台,并将所述待存储文件发送到所述第一目标存储平台之后,所述方法还包括:
所述对象存储中间件接收所述第一目标存储平台存储所述待存储文件后发送的所述待存储文件的存储标识和存储路径,并生成所述待存储文件的文件标识,所述待存储文件的文件标识和所述待存储文件的存储标识相对应;
所述对象存储中间件将所述待存储文件的文件标识发送到所述终端。
3.根据权利要求1或2所述的方法,其特征在于,所述对象存储中间件接收来自所述终端的文件存储请求之后,所述方法还包括:
所述对象存储中间件判断所述文件存储请求是否包括存储平台信息;
若不包括,则所述对象存储中间件执行所述根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值的步骤;
若包括,则所述对象存储中间件将所述存储平台信息所指示的存储平台确定为第一目标存储平台。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
所述对象存储中间件接收来自所述终端的文件读取请求,所述文件读取请求包括待读取文件的文件标识;
所述对象存储中间件根据所述待读取文件的文件标识确定所述待读取文件的存储路径和存储标识;
所述对象存储中间件根据所述待读取文件的存储路径从所述多个存储平台中确定第二目标存储平台,并基于所述待读取文件的存储标识从所述第二目标存储平台中获取所述待读取文件;
所述对象存储中间件向所述终端发送所述待读取文件,以便所述终端展示所述待读取文件。
5.根据权利要求1所述的方法,其特征在于,所述特征信息包括文件类型,所述方法还包括:
所述对象存储中间件获取预定义的多种文件类型;
所述对象存储中间件设置所述多种文件类型中的每一种文件类型在所述多个存储平台中的权重值。
6.根据权利要求1或4所述的方法,其特征在于,所述对象存储中间件接收来自所述终端的文件存储请求之后,所述对象存储中间件根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值之前,所述方法还包括:
所述对象存储中间件和所述多个存储平台建立短连接。
7.根据所述权利要求6所述的方法,其特征在于,所述接收来自所述终端的文件存储请求之后,所述方法还包括:
所述对象存储中间件获取来自所述终端的安全密钥;
所述对象存储中间件向安全服务器发送安全验证请求,所述安全验证请求携带有所述安全密钥,所述安全密钥用于对所述终端进行安全验证;
所述对象存储中间件接收来自所述安全服务器对所述终端的安全验证结果,在所述安全验证结果为通过时,执行根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值的步骤。
8.一种文件处理装置,其特征在于,应用于文件存储系统,所述文件存储系统由多个存储平台、对象存储中间件以及终端组成,包括:
接收单元,用于接收来自所述终端的文件存储请求,所述文件存储请求包括待存储文件和所述待存储文件的特征信息;
确定单元,用于根据所述特征信息确定所述待存储文件在所述多个存储平台的权重值;
发送单元,用于在所述确定单元根据所述权重值从所述多个存储平台中确定第一目标存储平台时,将所述待存储文件发送到所述第一目标存储平台,以便于所述第一目标存储平台存储所述待存储文件。
9.一种对象存储中间件,其特征在于,包括存储器、网络接口以及处理器,所述存储器中存储有计算机程序,所述网络接口用于接收所述处理器的控制消息,所述处理器执行所述计算机程序时实现如权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1-7任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810295608.XA CN108595537A (zh) | 2018-03-30 | 2018-03-30 | 一种文件处理方法、装置及对象存储中间件 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810295608.XA CN108595537A (zh) | 2018-03-30 | 2018-03-30 | 一种文件处理方法、装置及对象存储中间件 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108595537A true CN108595537A (zh) | 2018-09-28 |
Family
ID=63625484
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810295608.XA Pending CN108595537A (zh) | 2018-03-30 | 2018-03-30 | 一种文件处理方法、装置及对象存储中间件 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108595537A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114938391A (zh) * | 2022-06-09 | 2022-08-23 | 中国联合网络通信集团有限公司 | 数据处理方法、装置、设备及介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101911074A (zh) * | 2008-01-10 | 2010-12-08 | 帝斯科匹尔公司 | 基于存储寿命和速度选择存储位置用于文件存储 |
CN102640125A (zh) * | 2009-09-21 | 2012-08-15 | 特兰斯拉蒂斯公司 | 分布式内容存储和取回 |
CN104410666A (zh) * | 2014-10-29 | 2015-03-11 | 浪潮(北京)电子信息产业有限公司 | 云计算下实现异构存储资源管理的方法及系统 |
CN104537076A (zh) * | 2014-12-31 | 2015-04-22 | 北京奇艺世纪科技有限公司 | 一种文件读写方法及装置 |
CN106257450A (zh) * | 2015-06-19 | 2016-12-28 | 杭州海康威视数字技术股份有限公司 | 集群系统的文件定位、存储方法和装置 |
CN106878293A (zh) * | 2017-01-23 | 2017-06-20 | 深圳市中博科创信息技术有限公司 | 基于云存储平台的数据存储方法和装置 |
CN106909310A (zh) * | 2015-12-22 | 2017-06-30 | 伊姆西公司 | 用于存储系统的路径选择的方法和装置 |
-
2018
- 2018-03-30 CN CN201810295608.XA patent/CN108595537A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101911074A (zh) * | 2008-01-10 | 2010-12-08 | 帝斯科匹尔公司 | 基于存储寿命和速度选择存储位置用于文件存储 |
CN102640125A (zh) * | 2009-09-21 | 2012-08-15 | 特兰斯拉蒂斯公司 | 分布式内容存储和取回 |
CN104410666A (zh) * | 2014-10-29 | 2015-03-11 | 浪潮(北京)电子信息产业有限公司 | 云计算下实现异构存储资源管理的方法及系统 |
CN104537076A (zh) * | 2014-12-31 | 2015-04-22 | 北京奇艺世纪科技有限公司 | 一种文件读写方法及装置 |
CN106257450A (zh) * | 2015-06-19 | 2016-12-28 | 杭州海康威视数字技术股份有限公司 | 集群系统的文件定位、存储方法和装置 |
CN106909310A (zh) * | 2015-12-22 | 2017-06-30 | 伊姆西公司 | 用于存储系统的路径选择的方法和装置 |
CN106878293A (zh) * | 2017-01-23 | 2017-06-20 | 深圳市中博科创信息技术有限公司 | 基于云存储平台的数据存储方法和装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114938391A (zh) * | 2022-06-09 | 2022-08-23 | 中国联合网络通信集团有限公司 | 数据处理方法、装置、设备及介质 |
CN114938391B (zh) * | 2022-06-09 | 2024-01-12 | 中国联合网络通信集团有限公司 | 数据处理方法、装置、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA3051393C (en) | Method for providing recording and verification service for data received and transmitted by messenger service, and server using method | |
US20210124616A1 (en) | Workload management using blockchain-based transaction deferrals | |
US9712535B1 (en) | Security recommendation engine | |
JP4876170B2 (ja) | グリッド・システムにおいてセキュリティ強制を追跡するシステムおよび方法 | |
EP3796188A1 (en) | Blockchain network transaction processing method, apparatus, device, and storage medium | |
CN109787830A (zh) | 灰度发布控制方法、装置、系统、电子设备及存储介质 | |
US10938823B2 (en) | Authenticating a request for an electronic transaction | |
CN104660557B (zh) | 操作处理方法和装置 | |
CN104796436B (zh) | 用户登录方法、系统、第一平台服务器及相关平台服务器 | |
US10255569B2 (en) | Managing assets | |
CN105939362A (zh) | 用户账号管理方法及装置 | |
CN109710695A (zh) | 事务请求有效性识别和发起方法、装置、设备和介质 | |
CN110289999A (zh) | 一种数据处理方法、系统及装置 | |
CN105554082A (zh) | 开放式的运营平台框架结构及运行方法 | |
CN103415847A (zh) | 用于访问服务的系统和方法 | |
CN113868602B (zh) | 应用授权方法、分布式集群系统、电子设备和存储介质 | |
US20150113036A1 (en) | Server and method for sharing application services | |
EP1955181B1 (en) | Method and system for registering a distributed service site | |
CN110807209A (zh) | 一种数据处理方法、设备及存储介质 | |
CN108595537A (zh) | 一种文件处理方法、装置及对象存储中间件 | |
CN105743890B (zh) | 权限信息生成方法和装置 | |
CN108200151A (zh) | 一种分布式存储系统中ISCSI Target负载均衡方法和装置 | |
CN109308288A (zh) | 数据处理方法及装置 | |
CN105871982A (zh) | 内容推送的方法、装置以及系统 | |
CN109189425A (zh) | 一种bmc的管理方法、管理系统及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180928 |