CN105653692A - 一种基于非关系型数据库的文件存储方法和装置 - Google Patents

Abstract

本发明实施例提供了一种基于非关系型数据库NoSQL的文件存储方法和装置，其中的方法包括：在对用户鉴权成功的情况下，接收用户上传文件；根据预设规则确定所述上传文件的统一资源标识符URI；根据所述URI确定所述上传文件的存储地址；将所述上传文件存储至所述存储地址。本发明实施例能够基于预设规则为文件分配URI，基于URI确定文件的存储地址，从而实现文件的快速存储，且省去用户配置文件存储位置的繁琐操作。

Description

一种基于非关系型数据库的文件存储方法和装置

技术领域

本发明视频通信技术领域，具体涉及一种基于非关系型数据库的文件存储方法和装置。

背景技术

随着个人终端和移动互联网的高速发展，各种文件，尤其是小文件在云存储系统内所占比例越来越高，海量的小文件的高效存储和归档成为迫切需要解决的问题。

通常所说的小文件是指大小从几KB到几百KB的文件，例如，微博需要存储海量的个人图片，或者搜索引擎从网络上抓取的上亿的网页。随着这些小文件的数量的不断增大，传统的文件存储方式已不能满足当前的需求，因此业界提出了多种面向半结构化和结构化数据的非关系型数据库(NoSQL)存储系统来存放小文件，如MongoDB、CouchDB、Cassandra、HBase等。单个NoSQL数据库或者数据库中的某个集合也可能受网络连接数、内存、存储容量大小及吞吐率等因素影响文件的访问和写入性能，一旦文件数量达到一定规模之后，文件的存储和检索效率急剧下降，导致系统执行缓慢。从而，亟需一种能够提高文件存取效率的解决方案。

发明内容

为了解决现有技术中对海量文件存储效率低下的问题，本发明实施例期望提供一种基于非关系型数据库的文件存储方法和装置。

本发明实施例提供了一种基于非关系型数据库的文件存储方法，包括：

在对用户鉴权成功的情况下，接收用户上传文件；

根据预设规则确定所述上传文件的统一资源标识符URI；

根据所述URI确定所述上传文件的存储地址；

将所述上传文件存储至所述存储地址。

优选地，所述对用户鉴权成功，包括：

接收用户发送的账户标识ID和账户密码；

验证所述账户ID是否合法；

当所述账户ID合法时，判断所述账户密码是否为所述账户ID所对应的密码；

当所述账户密码为所述账户ID所对应的密码时，确定所述用户鉴权成功。

优选地，所述对用户鉴权成功之前，所述方法还包括：

接收用户发送的账户信息，所述账户信息，包括：账户ID、账户密码及访问入口地址；

将接收到的账户信息设置为所述用户的账户信息；

所述根据预设规则确定所述上传文件的URI之前，所述方法还包括：

接收所述用户发送的配置信息，所述配置信息，包括：数据源访问配置信息、归档策略配置信息及文件路由配置信息；

将接收到的配置信息设置为所述用户的配置信息。

优选地，所述数据源访问配置信息，包括：数据源ID、数据源连接地址、数据源权限认证信息；

所述归档策略包括：按权重归档和按时间归档，其中，所述按时间归档包括：按小时归档、按天归档、按周归档、按月归档、按季度归档及按年归档；

当归档策略为按权重归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、所述路由配置的权重值、集合初始ID及集合分配数量；

当归档策略为按时间归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、开始时间、结束时间。

优选地，所述根据预设规则确定所述上传文件的URI，包括：

确定所述用户设置的访问入口、账户ID及归档策略；

确定所述上传文件的文件名；

当所述用户设置的归档策略为按权重归档时，按照以下方式确定所述上传文件的URI：

按权重比从多个权重大于0的路由配置中选取一个作为第一路由配置；

提取所述第一路由配置的数据源ID、数据分区ID、集合初始ID和集合分配数量；

将提取的所述第一路由配置数据源ID确定为第一数据源ID、将提取的所述第一路由配置的数据分区ID确定为第一数据分区ID；

根据所述第一路由配置的集合初始ID和集合分配数量确定与所述集合分配数量相同个数的集合ID；

从所述确定的集合ID中选取一个作为第一集合ID；

根据所述访问入口、账户ID、第一数据源ID、第一数据分区ID及第一集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第一数据源ID/第一数据分区ID/第一集合ID/文件名。

优选地，所述根据预设规则确定所述上传文件的URI，还包括：

当所述用户设置的归档策略为按时间归档时，按照以下方式确定所述上传文件的URI：

确定当前时间；

根据归档方式对当前时间进行格式化生成格式化时间值；

在路由配置中确定开始时间小于等于所述格式化时间值、且结束时间大于等于所述格式化时间值的路由配置；

从所述确定的路由配置中选取一个作为第二路由配置；

提取所述第二路由配置的数据源ID、数据分区ID；

将所述提取的第二路由配置的数据源ID确定为第二数据源ID、将提取的第二路由配置的数据分区ID确定为第二数据分区ID；

根据所述格式化时间值确定第二集合ID；

根据所述访问入口、账户ID、第二数据源ID、第二数据分区ID及第二集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第二数据源ID/第二数据分区ID/第二集合ID/文件名。

优选地，所述根据所述URI确定所述上传文件的存储地址，包括：

当所述用户设置的归档策略为按权重归档时，提取所述URI中的第一数据源ID、第一数据分区ID及第一集合ID；根据所述第一数据源ID确定第一数据源、根据所述第一数据分区ID确定第一数据分区、根据所述第一集合ID确定所述第一集合；将所述第一数据源下的第一数据分区下的第一集合确定为所述上传文件的存储地址；

当所述用户设置的归档策略为按时间归档时，提取所述URI中的第二数据源ID、第二数据分区ID及第二集合ID；根据所述第二数据源ID确定第二数据源、根据所述第二数据分区ID确定第二数据分区、根据所述第二集合ID确定所述第二集合；将所述第二数据源下的第二数据分区下的第二集合确定为所述上传文件的存储地址。

本发明实施例提供了一种基于非关系型数据库的文件存储装置，包括：文件接收模块、URI确定模块、存储地址确定模块和存储模块；其中，

所述文件接收模块，用于在对用户鉴权成功的情况下，接收用户上传文件；

所述URI确定模块，用于根据预设规则确定所述上传文件的统一资源标识符URI；

所述存储地址确定模块，用于根据所述URI确定所述上传文件的存储地址；

所述存储模块，用于将所述上传文件存储至所述存储地址。

优选地，所述装置还包括：鉴权模块，用于对用户鉴权；

所述鉴权模块，包括：

接收子模块，用于接收用户发送的账户标识ID和账户密码；

验证子模块，用于验证所述账户ID是否合法；

判断子模块，用于当所述账户ID合法时，判断所述账户密码是否为所述账户ID所对应的密码；

鉴权确定子模块，用于在所述账户密码为所述账户ID所对应的密码时，确定所述用户鉴权成功。

优选地，所述装置还包括：账户信息接收模块、配置信息接收模块及设置模块；其中，

所述账户信息接收模块，用于鉴权模块对用户鉴权成功之前，接收用户发送的账户信息，所述账户信息，包括：账户ID、账户密码及访问入口地址；

所述配置信息接收模块，用于在URI确定模块根据预设规则确定所述上传文件的URI之前，接收所述用户发送的配置信息，所述配置信息，包括：数据源访问配置信息、归档策略配置信息及文件路由配置信息；

所述设置模块，用于将接收到的账户信息设置为所述用户的账户信息；还用于将接收到的配置信息设置为所述用户的配置信息。

优选地，所述数据源访问配置信息，包括：数据源ID、数据源连接地址、数据源权限认证信息；

所述归档策略包括：按权重归档和按时间归档，其中，所述按时间归档包括：按小时归档、按天归档、按周归档、按月归档、按季度归档及按年归档；

当归档策略为按权重归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、所述路由配置的权重值、集合初始ID及集合分配数量；

当归档策略为按时间归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、开始时间、结束时间。

优选地，所述URI确定模块，包括：信息确定子模块、文件名确定子模块及URI确定子模块；其中，

所述信息确定子模块，用于确定所述用户设置的访问入口、账户ID及归档策略；

所述文件名确定子模块，用于确定所述上传文件的文件名；

所述URI确定子模块，包括：路由配置确定单元、提取单元、确定单元、选择单元、URI生成单元；其中，

所述路由配置确定单元，用于当所述用户设置的归档策略为按权重归档时，按权重比从多个权重大于0的路由配置中选取一个作为第一路由配置；

所述提取单元，用于提取所述第一路由配置的数据源ID、数据分区ID、集合初始ID和集合分配数量；

所述确定单元，用于将提取的所述第一路由配置数据源ID确定为第一数据源ID、将提取的所述第一路由配置的数据分区ID确定为第一数据分区ID；还用于根据所述第一路由配置的集合初始ID和集合分配数量确定与所述集合分配数量相同个数的集合ID；还用于从所述确定的集合ID中选择一个，将选择的集合ID确定为第一集合ID；

所述URI生成单元，用于根据所述访问入口、账户ID、第一数据源ID、第一数据分区ID及第一集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第一数据源ID/第一数据分区ID/第一集合ID/文件名。

优选地，所述URI确定子模块，还包括：

时间确定单元，用于当所述用户设置的归档策略为按时间归档时确定当前时间；

格式化单元，用于根据归档方式对当前时间进行格式化生成格式化时间值；

所述路由配置确定单元，还用于在路由配置中确定出开始时间小于等于所述格式化时间值、且结束时间大于等于所述格式化时间值的路由配置，从所述确定的路由配置中选取一个作为第二路由配置；

所述提取单元，还用于提取所述第二路由配置的数据源ID、数据分区ID；

所述确定单元，还用于将所述提取的第二路由配置的数据源ID确定为第二数据源ID、将提取的第二路由配置的数据分区ID确定为第二数据分区ID、根据所述格式化时间值确定第二集合ID；

所述URI生成单元，还用于根据所述访问入口、账户ID、第二数据源ID、第二数据分区ID及第二集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第二数据源ID/第二数据分区ID/第二集合ID/文件名。

优选地，所述存储地址确定模块，包括：提取子单元和存储地址确定子单元；其中，

所述提取子单元，用于当所述用户设置的归档策略为按权重归档时，提取所述URI中的第一数据源ID、第一数据分区ID及第一集合ID；

所述存储地址确定子单元，用于根据所述第一数据源ID确定第一数据源、根据所述第一数据分区ID确定第一数据分区、根据所述第一集合ID确定所述第一集合，将所述第一数据源下的第一数据分区下的第一集合确定为所述上传文件的存储地址；

所述提取子单元，还用于当所述用户设置的归档策略为按时间归档时，提取所述URI中的第二数据源ID、第二数据分区ID及第二集合ID；

所述存储地址确定子单元，还用于根据所述第二数据源ID确定第二数据源、根据所述第二数据分区ID确定第二数据分区、根据所述第二集合ID确定所述第二集合，将所述第二数据源下的第二数据分区下的第二集合确定为所述上传文件的存储地址。

与现有技术相比，本发明实施例包括以下优点：

本发明实施例所提供的一种基于非关系型数据库NoSQL的文件存储方法和装置，在对用户鉴权成功的情况下，接收用户上传文件，之后，根据预设规则确定所述上传文件的统一资源标识符URI，根据所述URI确定所述上传文件的存储地址，将所述上传文件存储至所述存储地址。通过上述方案能够基于预设规则为文件分配URI，基于URI确定文件的存储地址，从而实现文件的快速存储，且省去用户配置文件存储位置的繁琐操作。

附图说明

图1为本发明实施例提供的基于非关系型数据库NoSQL的文件存储方法流程图；

图2为本发明实施例提供的确定上传文件的URI的方法流程图一；

图3为本发明实施例提供的确定上传文件的URI的方法流程图二；

图4为本发明实施例提供的基于非关系型数据库NoSQL的文件存储装置的基本结构图一；

图5为本发明实施例提供的基于非关系型数据库NoSQL的文件存储装置的基本结构图二；

图6为本发明实施例提供的基于非关系型数据库NoSQL的文件存储装置的基本结构图三。

具体实施方式

方法实施例

参照图1，示出了本发明的一种基于非关系型数据库NoSQL的文件存储方法的步骤流程图，具体可以包括：

步骤101、在对用户鉴权成功的情况下，接收用户的上传文件；

具体的，在接收用户的上传文件之前，需要对所述用户的合法性进行鉴权；其中，所述对用户鉴权成功，包括：

接收用户发送的账户标识ID和账户密码；

验证所述账户ID是否合法；

当所述账户ID合法时，判断所述账户密码是否为所述账户ID所对应的密码；

当所述账户密码为所述账户ID所对应的密码时，确定所述用户鉴权成功。

具体的，所述对用户鉴权成功之前，所述方法还包括以下步骤：

接收用户发送的账户信息，所述账户信息，包括：账户ID、账户密码及访问入口地址；具体的，一个示例性的访问入口地址可以为http://10.10.2.2:8080；

将接收到的账户信息设置为所述用户的账户信息。

步骤102、根据预设规则确定所述上传文件的统一资源标识符URI；

具体应用时，所述根据预设规则确定所述上传文件的统一资源标识符(UniformResourceIdentifier，URI)之前，所述方法还可以包括以下步骤：

接收所述用户发送的配置信息，所述配置信息，包括：数据源访问配置信息、归档策略配置信息及文件路由配置信息；

将接收到的配置信息设置为所述用户的配置信息。

具体的，所述数据源访问配置信息，包括：数据源ID、数据源连接地址、数据源权限认证信息；实际使用中，用户可以根据需要对数据源访问配置信息进行配置和修改，随时增加数据源，从而实现对数据源水平扩展，提高存储容量。而且，相对于现有技术中基于对原有数据源架构的改变来提高存储容量的方式，如增加集群节点，或增加分片(sharding)，本发明实施例提供的这种扩展方式不需要对原有数据源架构进行改变，且用户操作简便。

所述归档策略包括：按权重归档和按时间归档，其中，所述按时间归档包括：按小时归档、按天归档、按周归档、按月归档、按季度归档及按年归档；

当归档策略为按权重归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、该路由配置的权重值、集合初始ID及集合分配数量；

当归档策略为按时间归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、开始时间、结束时间。

具体的，所述根据预设规则确定所述上传文件的URI，包括：

确定所述用户设置的访问入口、账户ID及归档策略；

确定所述上传文件的文件名；

当所述用户设置的归档策略为按权重归档时，如图2所示，按照以下方式确定所述上传文件的URI：

201、按权重比从多个权重大于0的路由配置中选取一个作为第一路由配置；

实际实现中，所述按权重比从多个权重大于0的路由配置中选取一个，可以采用权重轮询调度算法来实现。

由于不同的路由配置的权重值是根据其性能来确定的，也就是，性能越好的路由配置，其权重值越大，这里所说的性能包括文件存取能力、文件存取速度等等。因此，经由权重轮询调度算法来确定路由配置时，能够确保高性能的路由配置得到相对更多的使用率，避免低性能的路由配置负载过重。

202、提取所述第一路由配置的数据源ID、数据分区ID、集合初始ID和集合分配数量；

203、将提取的所述第一路由配置数据源ID确定为第一数据源ID、将提取的所述第一路由配置的数据分区ID确定为第一数据分区ID；

204、根据所述第一路由配置的集合初始ID和集合分配数量确定与所述集合分配数量相同个数的集合ID；

这一步骤中，由于集合ID是按照相同的格式来连续编号的，因此，集合初始ID决定了所有集合从哪一个ID开始编号，而集合分配数量代表了集合的个数。

举例来说，当集合初始ID为CN10001，集合分配数量为10个，则能确定10个集合ID，这10个集合ID分别是：CN10001、CN10002、CN10003、CN10004、CN10005、CN10006、CN10007、CN10008、CN10009、CN10010。

205、从所述确定的集合ID中选取一个作为第一集合ID；

具体的，该步骤中，可以是随机从所述集合ID中选取一个、或者是按照顺序选取一个集合ID，也就是，每一次按照一种预设顺序，例如，以编号从小到大为序、或从大到小为序，每一次选择时，按顺序选取一个集合ID，而下一次选择时，顺序选取下一个集合ID，以此类推。

206、根据上述确定的访问入口、账户ID、第一数据源ID、第一数据分区ID及第一集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第一数据源ID/第一数据分区ID/第一集合ID/文件名。

这一步骤中，假设访问入口为：http://10.10.2.2:8080、账户ID为a44acb45ed34b79b1f2b74f5f5a713c5、第一数据源ID为DS10001、第一数据分区ID为DB10002、第一集合ID为CN10009，上传文件的文件名为123/abc.jpg，则，生成的上传文件的URI为：http://10.10.2.2:8080/a44acb45ed34b79b1f2b74f5f5a713c5/DS10001/DB10002/CN10009/123/abc.jpg。

在本发明的另一种可选实施例中，所述根据预设规则确定所述上传文件的URI，还包括：

当所述用户设置的归档策略为按时间归档时，如图3所示，按照以下方式确定所述上传文件的URI：

301、确定当前时间；

302、根据归档方式对当前时间进行格式化生成格式化时间值；

具体的，假设当前时间为2015年9月1日15点，则当归档策略为按小时归档时，该时间可按照以下格式进行格式化：yyyyMMddHH，其中，yyyy代表年由四位数字组成；MM代表月有两位数字组成；dd代表日，有两位数字组成；HH代表时，由两位数字组成，则，上述时间可格式化为：2015090115；当归档策略为按天归档时，可以按以下格式对当前时间进行格式化：yyyyMMdd，则上述时间被格式化为：20150901；当归档策略为按周归档时，可以按以下格式对当前时间进行格式化：yyyy7ww，其中ww代表周，以两位数字表示，则上述时间可被格式化为：2015737；当归档策略为按月归档时，可以按以下格式对当前时间进行归档：yyyyMM，则上述时间被格式化为：201509；当归档策略为按季度进行归档时，则可以按以下格式对当前时间进行归档：yyyyQ，其中，Q代表季度，以上述时间为例，9月为第三季度，则上述时间可被格式化为：20153；当归档策略为按年归档时，可以按以下格式对当前时间进行归档：yyyy，则上述时间被格式化为：2015。

303、在路由配置中确定开始时间小于等于所述格式化时间值、且结束时间大于等于所述格式化时间值的路由配置；

当归档方式为按时间归档时，则每一个路由配置中都有一个开始时间和一个结束时间，且该开始时间和结束时间的具体格式与上述格式化后的当前时间相同，因此，可以直接在路由配置中查找开始时间小于等于所述格式化时间值(即，格式化后的当前时间)、结束时间大于等于所述格式化时间值的路由配置。

304、从所述确定的路由配置中选取一个作为第二路由配置；

按照步骤303，可以确定一个或多个路由配置，从确定的路由配置中选取一个座位第二路由配置，当所确定的路由配置为多个时，可以随机选取其中一个，或者按照某种设定规则选取其中一个，这里不做限制。

305、提取所述第二路由配置的数据源ID、数据分区ID；

306、将所述提取的第二路由配置的数据源ID确定为第二数据源ID、将提取的第二路由配置的数据分区ID确定为第二数据分区ID；

307、根据所述格式化时间值确定第二集合ID；

上述第二集合ID由格式化时间值决定，具体的，按照预设格式生成集合ID时，所述格式化时间值为集合ID的编号，而预设格式可以是预设字母+编号的格式，例如，预设格式为CNxxxxxxxx，其中，xxxxxxxx代表按时间归档时，格式化时间值，与格式化时间值长度相同，则以上述当前时间为例，可以确定集合ID为CN20150901。

308、根据上述确定的访问入口、账户ID、第二数据源ID、第二数据分区ID及第二集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第二数据源ID/第二数据分区ID/第二集合ID/文件名。

假设，访问入口为http://10.10.2.1:27018、账户ID为a44acb45ed34b79b1f2b74f5f5a713c5、第二数据源ID为DS10008、第二数据分区ID为DB10009、第二集合ID为CN20150901，文件名为123/abc.jpg，则生成的URI为：

http://10.10.2.1:27018/a44acb45ed34b79b1f2b74f5f5a713c5/DS10008/DB10009/CN201509010/123/abc.jpg

步骤103、根据所述URI确定所述上传文件的存储地址；

所述根据所述URI确定所述上传文件的存储地址，包括：

当所述用户设置的归档策略为按权重归档时，提取所述URI中的第一数据源ID、第一数据分区ID及第一集合ID；当确定所述第一数据源ID、第一数据分区ID及第一集合ID合法时，根据所述第一数据源ID确定第一数据源、根据所述第一数据分区ID确定第一数据分区、根据所述第一集合ID确定所述第一集合；将所述第一数据源下的第一数据分区下的第一集合确定为所述上传文件的存储地址；

在本发明的另一种可选实施例中，在根据所述第一数据源ID确定第一数据源、根据所述第一数据分区ID确定第一数据分区、根据所述第一集合ID确定所述第一集合之前，需要先确定所述第一数据源ID、第一数据分区ID及第一集合ID有效性；具体的，通过以下方式确定所述第一数据源ID、第一数据分区ID及第一集合ID有效：

判断所述第一数据源ID对应的第一数据源是否存在；

当所述第一数据源存在时，判断所述第一数据源下是否存在所述第一数据分区ID对应的第一数据分区；

当所述第一数据源下存在所述第一数据分区时，判断所述第一数据分区下是否存在所述第一集合ID对应的第一集合；

档所述第一数据分区下存在所述第一集合时，确定所述第一数据源ID、第一数据分区ID及第一集合ID有效。

当所述用户设置的归档策略为按时间归档时，提取所述URI中的第二数据源ID、第二数据分区ID及第二集合ID；根据所述第二数据源ID确定第二数据源、根据所述第二数据分区ID确定第二数据分区、根据所述第二集合ID确定所述第二集合；将所述第二数据源下的第二数据分区下的第二集合确定为所述上传文件的存储地址；

在本发明的另一种可选实施例中，在根据所述第二数据源ID确定第二数据源、根据所述第二数据分区ID确定第二数据分区、根据所述第二集合ID确定所述第二集合之前，需要先确定所述第二数据源ID、第二数据分区ID及第二集合ID的有效性；具体的，通过以下方式确定所述第二数据源ID、第二数据分区ID及第二集合ID有效：

判断所述第二数据源ID对应的第二数据源是否存在；

当所述第二数据源存在时，判断所述第二数据源下是否存在所述第二数据分区ID对应的第二数据分区；

当所述第二数据源下存在所述第二数据分区时，判断所述第二数据分区下是否存在所述第二集合ID对应的第二集合；

档所述第二数据分区下存在所述第二集合时，确定所述第二数据源ID、第二数据分区ID及第二集合ID有效。

步骤104、将所述上传文件存储至所述存储地址。

具体的，所述将所述上传文件存储至所述存在地址包括：

根据所述上传文件的文件名确定所述上传文件的文件ID；

将所述上传文件及所述上传文件的详细信息，包括：文件名、文件大小、文件类型、创建时间、修改时间，存储至所述存储地址。

具体的，可以使用哈希算法或者MD5算法确定所述上传文件的文件ID，具体的，对所述上传文件的文件名执行哈希算法或MD5算法，即可得到所述上传文件的文件ID。确定所述文件ID和所述上传文件之间、以及所述文件ID与所述上传文件的存储地址之间的映射关系。

具体的，在对所述上传文件进行存储时，可以将所述上传文件转化为字节数组，并将所述上传文件的详细信息以结构化的对象数据存储至所述存储地址中。

相对的，当需要提取数据库中的文件时，只需要确定文件的文件ID，根据所述文件ID查找所述文件的存储地址，则可直接去所述存储地址中查找并提取相应文件。

综上，根据本发明方法实施例提供的基于非关系型数据库NoSQL的文件存储方法，在对用户鉴权成功的情况下，接收用户上传文件，之后，根据预设规则确定所述上传文件的统一资源标识符URI，根据所述URI确定所述上传文件的存储地址，将所述上传文件存储至所述存储地址。通过上述方案能够基于预设规则为文件分配URI，基于URI确定文件的存储地址，从而实现文件的快速存储，且省去用户配置文件存储位置的繁琐操作。

装置实施例

参照图4，示出了本发明一种基于非关系型数据库的文件存储装置实施例的结构框图，所述装置包括：文件接收模块41、URI确定模块42、存储地址确定模块43和存储模块44；其中，

所述文件接收模块41，用于在对用户鉴权成功的情况下，接收用户上传文件；

所述URI确定模块42，用于根据预设规则确定所述上传文件的统一资源标识符URI；

所述存储地址确定模块43，用于根据所述URI确定所述上传文件的存储地址；

所述存储模块44，用于将所述上传文件存储至所述存储地址。

在本发明的另一种可选实施例中，如图5所示，所述装置还包括：鉴权模块45，用于对用户鉴权；

所述鉴权模块45，包括：

接收子模块，用于接收用户发送的账户标识ID和账户密码；

验证子模块，用于验证所述账户ID是否合法；

判断子模块，用于当所述账户ID合法时，判断所述账户密码是否为所述账户ID所对应的密码；

鉴权确定子模块，用于在所述账户密码为所述账户ID所对应的密码时，确定所述用户鉴权成功。

在本发明的另一种可选实施例中，如图6所示，所述装置还包括：账户信息接收模块46、配置信息接收模块47及设置模块48；其中，

所述账户信息接收模块46，用于鉴权模块45对用户鉴权成功之前，接收用户发送的账户信息，所述账户信息，包括：账户ID、账户密码及访问入口地址；

所述配置信息接收模块47，用于在URI确定模块42根据预设规则确定所述上传文件的URI之前，接收所述用户发送的配置信息，所述配置信息，包括：数据源访问配置信息、归档策略配置信息及文件路由配置信息；

所述设置模块48，用于将接收到的账户信息设置为所述用户的账户信息；还用于将接收到的配置信息设置为所述用户的配置信息。

具体的，所述数据源访问配置信息，包括：数据源ID、数据源连接地址、数据源权限认证信息；

所述归档策略包括：按权重归档和按时间归档，其中，所述按时间归档包括：按小时归档、按天归档、按周归档、按月归档、按季度归档及按年归档；

当归档策略为按权重归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、所述路由配置的权重值、集合初始ID及集合分配数量；

当归档策略为按时间归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、开始时间、结束时间。

具体的，所述URI确定模块42，包括：信息确定子模块、文件名确定子模块及URI确定子模块；其中，

所述信息确定子模块，用于确定所述用户设置的访问入口、账户ID及归档策略；

所述文件名确定子模块，用于确定所述上传文件的文件名；

所述URI确定子模块，包括：路由配置确定单元、提取单元、确定单元、选择单元、URI生成单元；其中，

所述路由配置确定单元，用于当所述用户设置的归档策略为按权重归档时，按权重比从多个权重大于0的路由配置中选取一个作为第一路由配置；

所述提取单元，用于提取所述第一路由配置的数据源ID、数据分区ID、集合初始ID和集合分配数量；

所述确定单元，用于将提取的所述第一路由配置数据源ID确定为第一数据源ID、将提取的所述第一路由配置的数据分区ID确定为第一数据分区ID；还用于根据所述第一路由配置的集合初始ID和集合分配数量确定与所述集合分配数量相同个数的集合ID；还用于从所述确定的集合ID中选择一个，将选择的集合ID确定为第一集合ID；

所述URI生成单元，用于根据所述访问入口、账户ID、第一数据源ID、第一数据分区ID及第一集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第一数据源ID/第一数据分区ID/第一集合ID/文件名。

具体的，所述URI确定子模块，还包括：

时间确定单元，用于当所述用户设置的归档策略为按时间归档时确定当前时间；

格式化单元，用于根据归档方式对当前时间进行格式化生成格式化时间值；

所述路由配置确定单元，还用于在路由配置中确定出开始时间小于等于所述格式化时间值、且结束时间大于等于所述格式化时间值的路由配置，从所述确定的路由配置中选取一个作为第二路由配置；

所述提取单元，还用于提取所述第二路由配置的数据源ID、数据分区ID；

所述确定单元，还用于将所述提取的第二路由配置的数据源ID确定为第二数据源ID、将提取的第二路由配置的数据分区ID确定为第二数据分区ID、根据所述格式化时间值确定第二集合ID；

所述URI生成单元，还用于根据所述访问入口、账户ID、第二数据源ID、第二数据分区ID及第二集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第二数据源ID/第二数据分区ID/第二集合ID/文件名。

具体的，所述存储地址确定模块43，包括：提取子单元和存储地址确定子单元；其中，

所述提取子单元，用于当所述用户设置的归档策略为按权重归档时，提取所述URI中的第一数据源ID、第一数据分区ID及第一集合ID；

所述存储地址确定子单元，用于根据所述第一数据源ID确定第一数据源、根据所述第一数据分区ID确定第一数据分区、根据所述第一集合ID确定所述第一集合，将所述第一数据源下的第一数据分区下的第一集合确定为所述上传文件的存储地址；

所述提取子单元，还用于当所述用户设置的归档策略为按时间归档时，提取所述URI中的第二数据源ID、第二数据分区ID及第二集合ID；

所述存储地址确定子单元，还用于根据所述第二数据源ID确定第二数据源、根据所述第二数据分区ID确定第二数据分区、根据所述第二集合ID确定所述第二集合，将所述第二数据源下的第二数据分区下的第二集合确定为所述上传文件的存储地址。

在具体实施过程中，上述接收模块41、URI确定模块42、存储地址确定模块43、存储模块44、鉴权模块45、账户信息接收模块46、配置信息接收模块47及设置模块48可以由文件存储系统内的中央处理器(CPU，CentralProcessingUnit)、微处理器(MPU，MicroProcessingUnit)、数字信号处理器(DSP，DigitalSignalProcessor)或可编程逻辑阵列(FPGA，Field－ProgrammableGateArray)来实现。

对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。

以上对本发明所提供的一种基于非关系型数据库的文件存储方法和装置，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，根据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (14)

1.一种基于非关系型数据库NOSQL的文件存储方法，其特征在于，所述方法包括：

在对用户鉴权成功的情况下，接收用户上传文件；

根据预设规则确定所述上传文件的统一资源标识符URI；

根据所述URI确定所述上传文件的存储地址；

将所述上传文件存储至所述存储地址。

2.根据权利要求1所述的方法，其特征在于，所述对用户鉴权成功，包括：

接收用户发送的账户标识ID和账户密码；

验证所述账户ID是否合法；

当所述账户ID合法时，判断所述账户密码是否为所述账户ID所对应的密码；

当所述账户密码为所述账户ID所对应的密码时，确定所述用户鉴权成功。

3.根据权利要求2所述的方法，其特征在于，所述对用户鉴权成功之前，所述方法还包括：

接收用户发送的账户信息，所述账户信息，包括：账户ID、账户密码及访问入口地址；

将接收到的账户信息设置为所述用户的账户信息；

所述根据预设规则确定所述上传文件的URI之前，所述方法还包括：

接收所述用户发送的配置信息，所述配置信息，包括：数据源访问配置信息、归档策略配置信息及文件路由配置信息；

将接收到的配置信息设置为所述用户的配置信息。

4.根据权利要求3所述的方法，其特征在于，所述数据源访问配置信息，包括：数据源ID、数据源连接地址、数据源权限认证信息；

所述归档策略包括：按权重归档和按时间归档，其中，所述按时间归档包括：按小时归档、按天归档、按周归档、按月归档、按季度归档及按年归档；

当归档策略为按权重归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、所述路由配置的权重值、集合初始ID及集合分配数量；

当归档策略为按时间归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、开始时间、结束时间。

5.根据权利要求4所述的方法，其特征在于，所述根据预设规则确定所述上传文件的URI，包括：

确定所述用户设置的访问入口、账户ID及归档策略；

确定所述上传文件的文件名；

当所述用户设置的归档策略为按权重归档时，按照以下方式确定所述上传文件的URI：

按权重比从多个权重大于0的路由配置中选取一个作为第一路由配置；

提取所述第一路由配置的数据源ID、数据分区ID、集合初始ID和集合分配数量；

将提取的所述第一路由配置数据源ID确定为第一数据源ID、将提取的所述第一路由配置的数据分区ID确定为第一数据分区ID；

根据所述第一路由配置的集合初始ID和集合分配数量确定与所述集合分配数量相同个数的集合ID；

从所述确定的集合ID中选取一个作为第一集合ID；

根据所述访问入口、账户ID、第一数据源ID、第一数据分区ID及第一集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第一数据源ID/第一数据分区ID/第一集合ID/文件名。

6.根据权利要求5所述的方法，其特征在于，所述根据预设规则确定所述上传文件的URI，还包括：

当所述用户设置的归档策略为按时间归档时，按照以下方式确定所述上传文件的URI：

确定当前时间；

根据归档方式对当前时间进行格式化生成格式化时间值；

在路由配置中确定开始时间小于等于所述格式化时间值、且结束时间大于等于所述格式化时间值的路由配置；

从所述确定的路由配置中选取一个作为第二路由配置；

提取所述第二路由配置的数据源ID、数据分区ID；

将所述提取的第二路由配置的数据源ID确定为第二数据源ID、将提取的第二路由配置的数据分区ID确定为第二数据分区ID；

根据所述格式化时间值确定第二集合ID；

根据所述访问入口、账户ID、第二数据源ID、第二数据分区ID及第二集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第二数据源ID/第二数据分区ID/第二集合ID/文件名。

7.根据所述权利要求6所述的方法，其特征在于，所述根据所述URI确定所述上传文件的存储地址，包括：

当所述用户设置的归档策略为按权重归档时，提取所述URI中的第一数据源ID、第一数据分区ID及第一集合ID；根据所述第一数据源ID确定第一数据源、根据所述第一数据分区ID确定第一数据分区、根据所述第一集合ID确定所述第一集合；将所述第一数据源下的第一数据分区下的第一集合确定为所述上传文件的存储地址；

当所述用户设置的归档策略为按时间归档时，提取所述URI中的第二数据源ID、第二数据分区ID及第二集合ID；根据所述第二数据源ID确定第二数据源、根据所述第二数据分区ID确定第二数据分区、根据所述第二集合ID确定所述第二集合；将所述第二数据源下的第二数据分区下的第二集合确定为所述上传文件的存储地址。

8.一种基于非关系型数据库NOSQL的文件存储装置，其特征在于，所述装置包括：文件接收模块、URI确定模块、存储地址确定模块和存储模块；其中，

所述文件接收模块，用于在对用户鉴权成功的情况下，接收用户上传文件；

所述URI确定模块，用于根据预设规则确定所述上传文件的统一资源标识符URI；

所述存储地址确定模块，用于根据所述URI确定所述上传文件的存储地址；

所述存储模块，用于将所述上传文件存储至所述存储地址。

9.根据权利要求8所述的装置，其特征在于，所述装置还包括：鉴权模块，用于对用户鉴权；

所述鉴权模块，包括：

接收子模块，用于接收用户发送的账户标识ID和账户密码；

验证子模块，用于验证所述账户ID是否合法；

判断子模块，用于当所述账户ID合法时，判断所述账户密码是否为所述账户ID所对应的密码；

鉴权确定子模块，用于在所述账户密码为所述账户ID所对应的密码时，确定所述用户鉴权成功。

10.根据权利要求8所述的装置，其特征在于，所述装置还包括：账户信息接收模块、配置信息接收模块及设置模块；其中，

所述账户信息接收模块，用于鉴权模块对用户鉴权成功之前，接收用户发送的账户信息，所述账户信息，包括：账户ID、账户密码及访问入口地址；

所述配置信息接收模块，用于在URI确定模块根据预设规则确定所述上传文件的URI之前，接收所述用户发送的配置信息，所述配置信息，包括：数据源访问配置信息、归档策略配置信息及文件路由配置信息；

所述设置模块，用于将接收到的账户信息设置为所述用户的账户信息；还用于将接收到的配置信息设置为所述用户的配置信息。

11.根据权利要求10所述的装置，其特征在于，所述数据源访问配置信息，包括：数据源ID、数据源连接地址、数据源权限认证信息；

所述归档策略包括：按权重归档和按时间归档，其中，所述按时间归档包括：按小时归档、按天归档、按周归档、按月归档、按季度归档及按年归档；

当归档策略为按权重归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、所述路由配置的权重值、集合初始ID及集合分配数量；

当归档策略为按时间归档时，所述文件路由配置信息，包括一个或多个路由配置，其中，所述路由配置，包括：数据源ID、数据分区ID、开始时间、结束时间。

12.根据权利要求11所述的装置，其特征在于，所述URI确定模块，包括：信息确定子模块、文件名确定子模块及URI确定子模块；其中，

所述信息确定子模块，用于确定所述用户设置的访问入口、账户ID及归档策略；

所述文件名确定子模块，用于确定所述上传文件的文件名；

所述URI确定子模块，包括：路由配置确定单元、提取单元、确定单元、选择单元、URI生成单元；其中，

所述路由配置确定单元，用于当所述用户设置的归档策略为按权重归档时，按权重比从多个权重大于0的路由配置中选取一个作为第一路由配置；

所述提取单元，用于提取所述第一路由配置的数据源ID、数据分区ID、集合初始ID和集合分配数量；

所述确定单元，用于将提取的所述第一路由配置数据源ID确定为第一数据源ID、将提取的所述第一路由配置的数据分区ID确定为第一数据分区ID；还用于根据所述第一路由配置的集合初始ID和集合分配数量确定与所述集合分配数量相同个数的集合ID；还用于从所述确定的集合ID中选择一个，将选择的集合ID确定为第一集合ID；

所述URI生成单元，用于根据所述访问入口、账户ID、第一数据源ID、第一数据分区ID及第一集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第一数据源ID/第一数据分区ID/第一集合ID/文件名。

13.根据权利要求12所述的装置，其特征在于，所述URI确定子模块，还包括：

时间确定单元，用于当所述用户设置的归档策略为按时间归档时确定当前时间；

格式化单元，用于根据归档方式对当前时间进行格式化生成格式化时间值；

所述路由配置确定单元，还用于在路由配置中确定出开始时间小于等于所述格式化时间值、且结束时间大于等于所述格式化时间值的路由配置，从所述确定的路由配置中选取一个作为第二路由配置；

所述提取单元，还用于提取所述第二路由配置的数据源ID、数据分区ID；

所述确定单元，还用于将所述提取的第二路由配置的数据源ID确定为第二数据源ID、将提取的第二路由配置的数据分区ID确定为第二数据分区ID、根据所述格式化时间值确定第二集合ID；

所述URI生成单元，还用于根据所述访问入口、账户ID、第二数据源ID、第二数据分区ID及第二集合ID按照以下格式生成所述上传文件的URI：

访问入口/账户ID/第二数据源ID/第二数据分区ID/第二集合ID/文件名。

14.根据所述权利要求13所述的装置，其特征在于，所述存储地址确定模块，包括：提取子单元和存储地址确定子单元；其中，

所述提取子单元，用于当所述用户设置的归档策略为按权重归档时，提取所述URI中的第一数据源ID、第一数据分区ID及第一集合ID；

所述存储地址确定子单元，用于根据所述第一数据源ID确定第一数据源、根据所述第一数据分区ID确定第一数据分区、根据所述第一集合ID确定所述第一集合，将所述第一数据源下的第一数据分区下的第一集合确定为所述上传文件的存储地址；

所述提取子单元，还用于当所述用户设置的归档策略为按时间归档时，提取所述URI中的第二数据源ID、第二数据分区ID及第二集合ID；

所述存储地址确定子单元，还用于根据所述第二数据源ID确定第二数据源、根据所述第二数据分区ID确定第二数据分区、根据所述第二集合ID确定所述第二集合，将所述第二数据源下的第二数据分区下的第二集合确定为所述上传文件的存储地址。