CN114996236A - 融合存储系统的数据处理方法、装置、设备及存储介质 - Google Patents
融合存储系统的数据处理方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN114996236A CN114996236A CN202210727061.2A CN202210727061A CN114996236A CN 114996236 A CN114996236 A CN 114996236A CN 202210727061 A CN202210727061 A CN 202210727061A CN 114996236 A CN114996236 A CN 114996236A
- Authority
- CN
- China
- Prior art keywords
- storage
- directory
- storage system
- converged
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003860 storage Methods 0.000 title claims abstract description 430
- 238000003672 processing method Methods 0.000 title claims abstract description 31
- 230000004927 fusion Effects 0.000 claims abstract description 56
- 238000013500 data storage Methods 0.000 claims abstract description 17
- 238000004590 computer program Methods 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 8
- 238000000034 method Methods 0.000 abstract description 17
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
- G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/172—Caching, prefetching or hoarding of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/185—Hierarchical storage management [HSM] systems, e.g. file migration or policies thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及网络存储技术领域，公开了一种融合存储系统的数据处理方法、装置、设备及存储介质，包括：获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。本申请能够保障融合互通后的存储协议的完整性。
Description
技术领域
本发明涉及网络存储技术领域，特别涉及一种融合存储系统的数据处理方法、装置、设备及存储介质。
背景技术
随着计算机信息化的发展，在各个行业领域融合存储被大规模进行部署应用。融合存储也叫统一存储，通过部署融合存储可以大大降低整体存储成本。一份数据在一个业务场景下可能需要多次利用，如果没有协议互通的话，就需要多次复制数据，不仅需要进行数据迁移，还会额外占用存储空间。
目前，最常见的是在SAN存储(存储区域网络，Storage Area Network)和NAS存储(网络附属存储，Network Attached Storage)之间进行融合部署，以S3协议(简单存储服，SiMP22017531le Storage Service)和NAS协议为例，(SAN存储中的一种)，S3理论上是一个全球存储区域网络SAN，S3支持对象存储，对象存储在存储段(bucket)中。但S3存储架构是扁平化语言不会识别目录层级关系，以对象存储为底座的S3协议支持上传带目录对象，以SAN和S3协议融合互通后的存储系统是以文件存储为底座的，不支持上传带目录对象，从而使得融合后的S3协议特性不完整性。
因此，上述技术问题亟待本领域技术人员解决。
发明内容
有鉴于此，本发明的目的在于提供一种融合存储系统的数据处理方法、装置、设备及存储介质，能够保障融合互通后的存储协议的完整性。其具体方案如下：
本申请的第一方面提供了一种融合存储系统的数据处理方法，包括：
获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；
判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；
通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。
可选的，所述判断所述对象数据中的存储目录是否包含多级目录层级，包括：
判断所述对象数据中的存储目录中是否包含多个层级标识符，如果是，则判定所述对象数据中的存储目录包含所述多级目录层级。
可选的，所述对所述多级目录层级进行分割，得到多个目标目录，包括：
对每个所述层级标识符邻接的名称进行识别；
从识别出的全部名称中确定出目录名称和对象名称，以根据所述目录名称得到多个所述目标目录。
可选的，所述通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，包括：
根据所述层级标识符在存储目录中的位置对多个所述目标目录进行层级划分，并按照划分后的层级顺序在所述融合存储系统中先创建最高层级的所述目标目录；
判断创建后的最高层级的所述目标目录下是否存在下一个层级的所述目标目录，如果否，则在创建后的最高层次的所述目标目录下创建下一个层级的所述目标目录，直至每个所述目标目录在所述融合存储系统中均存在则停止创建以得到所述融合存储系统中的所述多级目录层级。
可选的，所述通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级之后，还包括：
在所述融合存储系统中的所述多级目录层级下创建以所述目标对象的对象名称命名的空文件夹，以将所述对象数据中的所述目标对象在所述融合存储系统中的所述多级目录层级下的所述空文件夹中进行存储。
可选的，所述融合存储系统的数据处理方法，还包括：
将在所述融合存储系统中构建的所述多级目标层级与所述空文件夹的名称进行拼接，得到所述目标对象在所述融合存储系统中的存储目录，以便客户端基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象。
可选的，所述客户端基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象，包括：
当客户端通过所述第一存储协议从所述融合存储系统中获取所述目标对象，则直接基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象；
当客户端通过所述第二存储协议从所述融合存储系统中获取所述目标对象，则将所述目标对象在所述融合存储系统中的存储目录以NFS共享目录的方式挂载至所述客户端，以便所述客户端基于挂载目录获取所述目标对象。
本申请的第二方面提供了一种融合存储系统的数据处理装置，包括：
对象数据获取模块，用于获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；
判断分割模块，用于判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；
创建存储模块，用于通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。
本申请的第三方面提供了一种电子设备，所述电子设备包括处理器和存储器；其中所述存储器用于存储计算机程序，所述计算机程序由所述处理器加载并执行以实现前述融合存储系统的数据处理方法。
本申请的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器加载并执行时，实现前述融合存储系统的数据处理方法。
本申请中，先获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；然后判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；最后通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。可见，本申请对于通过第一存储协议上传至融合存储系统中的对象数据，该对象数据包括目标对象和目标对象的存储目录，目标对象也即待上传对象，先识别存储目录中是否包含多级目录层级，如果包含多级目录层级，则分离出各个目录，然后在融合存储系统中创建各个目录最终构建出该多级目录层级，在此基础上将目标对象存储至融合存储系统中构建的多级目录层级下，从而能够保障融合互通后的存储协议的完整性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请提供的一种融合存储系统的数据处理方法流程图；
图2为本申请提供的一种具体的融合存储系统的数据处理方法流程图；
图3为本申请提供的一种具体的融合存储系统的数据处理方法流程图；
图4为本申请提供的一种融合存储系统的数据处理装置结构示意图；
图5为本申请提供的一种融合存储系统的数据处理电子设备结构图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
现有技术中，在两个存储协议进行融合互通时，常常无法保障融合互通后的存储协议的完整性。例如，在S3协议和NAS协议之间进行融合时，S3存储架构是扁平化语言不会识别目录层级关系，以对象存储为底座的S3协议支持上传带目录对象，以SAN和S3协议融合互通后的存储系统是以文件存储为底座的，不支持上传带目录对象，从而使得融合后的S3协议特性不完整性。针对上述技术缺陷，本申请提供一种融合存储系统的数据处理方案，对于通过第一存储协议上传至融合存储系统中的对象数据，该对象数据包括目标对象和目标对象的存储目录，目标对象也即待上传对象，先识别存储目录中是否包含多级目录层级，如果包含多级目录层级，则分离出各个目录，然后在融合存储系统中创建各个目录最终构建出该多级目录层级，在此基础上将目标对象存储至融合存储系统中构建的多级目录层级下，从而能够保障融合互通后的存储协议的完整性。
图1为本申请实施例提供的一种融合存储系统的数据处理方法流程图。参见图1所示，该融合存储系统的数据处理方法包括：
S11：获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通。
本实施例中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通。所述第一存储协议支持的存储方式可以为对象存储，也即所述第一存储协议可以是以对象存储为数据存储底座。所述第二存储协议支持的存储方式可以为文件存储，也即所述第二存储协议可以是以文件存储为数据存储底座。将所述第一存储协议与所述第二存储协议融合互通后得到的所述融合存储系统是为以文件存储为数据存储底座的。此时，所述融合存储系统不支持上传带目录对象，影响所述第一存储协议的完整性。
本实施例中，首先获取通过第一存储协议上传至融合存储系统中的对象数据。其中，所述对象数据可以由用户客户端上传至所述融合存储系统中进行存储，也可以由存储服务器集群中的任意一个服务器作为客户端上传至所述融合存储系统中进行存储。客户端在上传数据时，除了上传目标对象(也即待上传对象)外，还要上传所述目标对象在客户端中的存储目录，也即所述对象数据包括所述目标对象和所述目标对象的存储目录。
进一步的，本实施例中，在获取通过所述第一存储协议上传至所述融合存储系统中的对象数据之前，需要先获取上传至所述融合系统中的目标数据，并确定出上传所述目标数据的目标存储协议，如果所述目标存储协议为第一存储协议，则将所述目标数据确定为所述对象数据，如果所述目标存储协议为第二存储协议，则直接将所述目标数据以所述第二存储协议支持的存储方式在所述融合存储系统中进行存储。
S12：判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录。
本实施例中，在获取到所述对象数据之后，判断所述对象数据中的存储目录是否包含多级目录层级，如果所述对象数据中的存储目录是否包含所述多级目录层级，则对所述多级目录层级进行分割，得到多个目标目录。包含所述多级目录层级的意思是所述对象数据中的存储目录是一个包含至少两个目录，也即所述目标对象在客户端中是存储在至少两个目录下的对象。例如，所述对象数据中的存储路径为“bucket1/dir1/dir2/object1”时，其中，bucket1为存储对象的容器(可认为是目录一，但一般无需单独创建)，dir1和dir2表示两个目录，object1为所述目标对象，存储目录为“bucket1/dir1/dir2/”，对该存储目录进行分割后得到三个所述目标目录。
S13：通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。
本实施例中，在得到多个所述目标目录后，便需要在所述融合存储系统中创建同样的存储目录，然后将所述目标对象存储至该存储目录下。具体的，先通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，也即在所述融合存储系统的bucket1容器中构建“bucket1/dir1/dir2/”这个存储目录。然后将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。通过上述步骤，便可以在以文件为底座的S3和NAS协议融合互通的存储系统上，支持S3协议上传带目录对象，保障S3协议的完整性。
可见，本申请实施例先获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；然后判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；最后通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。本申请实施例对于通过第一存储协议上传至融合存储系统中的对象数据，该对象数据包括目标对象和目标对象的存储目录，目标对象也即待上传对象，先识别存储目录中是否包含多级目录层级，如果包含多级目录层级，则分离出各个目录，然后在融合存储系统中创建各个目录最终构建出该多级目录层级，在此基础上将目标对象存储至融合存储系统中构建的多级目录层级下，从而能够保障融合互通后的存储协议的完整性。
图2为本申请实施例提供的一种具体的融合存储系统的数据处理方法流程图。参见图3所示，该融合存储系统的数据处理方法包括：
S21：获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通。
本实施例中，关于上述步骤S21的具体过程，可以参考前述实施例中公开的相应内容，在此不再进行赘述。
S22：判断所述对象数据中的存储目录中是否包含多个层级标识符，如果是，则判定所述对象数据中的存储目录包含所述多级目录层级。
S23：对每个所述层级标识符邻接的名称进行识别，并从识别出的全部名称中确定出目录名称和对象名称，以根据所述目录名称得到多个所述目标目录。
本实施例中，判断所述对象数据中的存储目录中是否包含多个层级标识符，如果是，则判定所述对象数据中的存储目录包含所述多级目录层级。所述层级标识符可以以字符“/”标记，如前实施例所述，当所述对象数据中的存储路径为“bucket1/dir1/dir2/object1”时，该存储路径中包括三个所述层级标识符“/”。
本实施例中，当包含多个所述层级标识符时，需要进一步对每个所述层级标识符邻接的名称进行识别，并从识别出的全部名称中确定出目录名称和对象名称，以根据所述目录名称得到多个所述目标目录。对上述存储路径中每个所述层级标识符邻接的名称进行识别后得到4个名称，分别为bucket1、dir1、dir2和object1，进一步识别出bucket1、dir1、dir2为目录名称，object1为对象名称。bucket1、dir1、dir2这三个目录名称可作为对应的所述目标目录，也即最终得到的所述目标目录为bucket1、dir1、dir2。
S24：根据所述层级标识符在存储目录中的位置对多个所述目标目录进行层级划分，并按照划分后的层级顺序在所述融合存储系统中先创建最高层级的所述目标目录。
S25：判断创建后的最高层级的所述目标目录下是否存在下一个层级的所述目标目录，如果否，则在创建后的最高层次的所述目标目录下创建下一个层级的所述目标目录，直至每个所述目标目录在所述融合存储系统中均存在则停止创建以得到所述融合存储系统中的所述多级目录层级。
本实施例中，在所述融合存储系统中创建目录的过程具体为：先根据所述层级标识符在存储目录中的位置对多个所述目标目录进行层级划分，并按照划分后的层级顺序在所述融合存储系统中先创建最高层级的所述目标目录。在进行层级划分时，可以按照存储目录中的前后顺序进行划分，靠近目标对象名称的目录层级越低，远离目标对象名称的目录层级越低。例如，bucket1为最高层级目录、dir1为中间层级目录、dir2为最低层级目录。
然后判断创建后的最高层级的所述目标目录下是否存在下一个层级的所述目标目录，如果否，则在创建后的最高层次的所述目标目录下创建下一个层级的所述目标目录，直至每个所述目标目录在所述融合存储系统中均存在则停止创建以得到所述融合存储系统中的所述多级目录层级。具体的，在创建完bucket1之后，需要先检测bucket1下是否存在目录dir1。如果不存在目录dir1，则创建目录dir1，如果存目录在dir1，则跳过创建目录dir1接着创建目录dir2。在创建目录dir2时，先检测bucekt1/dir1下是否存在目录dir2。如果不存在目录dir2，则执行创建目录dir2。完全创建完成便得到了所述融合存储系统中的存储目录“bucket1/dir1/dir2/”。可以理解，在创建目录时，可以生成并执行目录创建的命令来创建目录，包括但不限于mkdir命令，在创建目录dir1时，执行“mkdir dir1”命令，同样的，在创建目录dir2时，执行“mkdir dir2”命令。
S26：将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。
本实施例中，关于上述步骤S26的具体过程，可以参考前述实施例中公开的相应内容，在此不再进行赘述。
图3为本申请实施例提供的一种具体的融合存储系统的数据处理方法流程图。参见图3所示，该融合存储系统的数据处理方法包括：
S31：获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通。
S32：判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录。
S33：通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级。
本实施例中，关于上述步骤S31至S32的具体过程，可以参考前述实施例中公开的相应内容，在此不再进行赘述。
S34：在所述融合存储系统中的所述多级目录层级下创建以所述目标对象的对象名称命名的空文件夹，以将所述对象数据中的所述目标对象在所述融合存储系统中的所述多级目录层级下的所述空文件夹中进行存储。
S35：将在所述融合存储系统中构建的所述多级目标层级与所述空文件夹的名称进行拼接，得到所述目标对象在所述融合存储系统中的存储目录。
本实施例中，先在所述融合存储系统中的所述多级目录层级下创建以所述目标对象的对象名称命名的空文件夹，以将所述对象数据中的所述目标对象在所述融合存储系统中的所述多级目录层级下的所述空文件夹中进行存储。例如，创建空文件object1，然后将所述目标对象写入object1。其中，所述目标对象的元数据存放到元数据存储池，数据存放到数据存储池。在此基础上，将在所述融合存储系统中构建的所述多级目标层级与所述空文件夹的名称进行拼接，得到所述目标对象在所述融合存储系统中的存储目录，以便客户端基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象。上述过程也即对象名称拼接的过程，主要是把多级目录和对象拼接成名为bucekt1/dir1/dir2/object1的对象。
S36：当客户端通过所述第一存储协议从所述融合存储系统中获取所述目标对象，则直接基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象。
S37：当客户端通过所述第二存储协议从所述融合存储系统中获取所述目标对象，则将所述目标对象在所述融合存储系统中的存储目录以NFS共享目录的方式挂载至所述客户端，以便所述客户端基于挂载目录获取所述目标对象。
本实施例中，由于所述融合存储系中所述第一存储协议与所述第二存储协议融合互通，因此，在进行数据获取时，客户端既可以通过所述第一存储协议获取带目录对象，也可以通过所述第二存储协议获取带目录对象。例如，可以通过S3协议获取带目录对象，也可以通过NAS协议获取带目录对象。
在一种实施例中，也即客户端通过所述第一存储协议从所述融合存储系统中获取所述目标对象时，直接基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象。在这种场景下，可以通过执行命令“doscmd get s3://bucket1/dir1/dir2/object1”来直接下载对象dir1/dir2/object1。在另一种实施例中，也即客户端通过所述第二存储协议从所述融合存储系统中获取所述目标对象时，将所述目标对象在所述融合存储系统中的存储目录以NFS共享目录的方式挂载至所述客户端，以便所述客户端基于挂载目录获取所述目标对象。在这种场景下，bucket1创建NFS共享并挂载到客户端，然后在客户端进入到挂载目录bucket1后，通过执行切换命令“cd dir1/dir2/”以进入dir2目录，最后通过执行“ll”等命令即可查看对象object1。本实施例对上述各种命令的具体形式不进行限定。
参见图4所示，本申请实施例还相应公开了一种融合存储系统的数据处理装置，包括：
对象数据获取模块11，用于获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；
判断分割模块12，用于判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；
创建存储模块13，用于通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。
可见，本申请实施例先获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；然后判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；最后通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。本申请实施例对于通过第一存储协议上传至融合存储系统中的对象数据，该对象数据包括目标对象和目标对象的存储目录，目标对象也即待上传对象，先识别存储目录中是否包含多级目录层级，如果包含多级目录层级，则分离出各个目录，然后在融合存储系统中创建各个目录最终构建出该多级目录层级，在此基础上将目标对象存储至融合存储系统中构建的多级目录层级下，从而能够保障融合互通后的存储协议的完整性。
在一些具体实施例中，所述判断分割模块12，具体包括：
判断单元，用于判断所述对象数据中的存储目录中是否包含多个层级标识符，如果是，则判定所述对象数据中的存储目录包含所述多级目录层级；
分割单元，用于对每个所述层级标识符邻接的名称进行识别，并从识别出的全部名称中确定出目录名称和对象名称，以根据所述目录名称得到多个所述目标目录。
在一些具体实施例中，所述创建存储模块13，具体包括：
层级划分单元，用于根据所述层级标识符在存储目录中的位置对多个所述目标目录进行层级划分，并按照划分后的层级顺序在所述融合存储系统中先创建最高层级的所述目标目录；
循环创建单元，用于判断创建后的最高层级的所述目标目录下是否存在下一个层级的所述目标目录，如果否，则在创建后的最高层次的所述目标目录下创建下一个层级的所述目标目录，直至每个所述目标目录在所述融合存储系统中均存在则停止创建以得到所述融合存储系统中的所述多级目录层级。
在一些具体实施例中，所述融合存储系统的数据处理装置还包括：
文件夹创建模块，用于在所述融合存储系统中的所述多级目录层级下创建以所述目标对象的对象名称命名的空文件夹，以将所述对象数据中的所述目标对象在所述融合存储系统中的所述多级目录层级下的所述空文件夹中进行存储；
拼接模块，用于将在所述融合存储系统中构建的所述多级目标层级与所述空文件夹的名称进行拼接，得到所述目标对象在所述融合存储系统中的存储目录，以便客户端基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象；
第一获取模块，用于当客户端通过所述第一存储协议从所述融合存储系统中获取所述目标对象，则直接基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象；
第一获取模块，用于当客户端通过所述第二存储协议从所述融合存储系统中获取所述目标对象，则将所述目标对象在所述融合存储系统中的存储目录以NFS共享目录的方式挂载至所述客户端，以便所述客户端基于挂载目录获取所述目标对象。
进一步的，本申请实施例还提供了一种电子设备。图5是根据一示例性实施例示出的电子设备20结构图，图中的内容不能认为是对本申请的使用范围的任何限制。
图5为本申请实施例提供的一种电子设备20的结构示意图。该电子设备20，具体可以包括：至少一个处理器21、至少一个存储器22、电源23、通信接口24、输入输出接口25和通信总线26。其中，所述存储器22用于存储计算机程序，所述计算机程序由所述处理器21加载并执行，以实现前述任一实施例公开的融合存储系统的数据处理方法中的相关步骤。
本实施例中，电源23用于为电子设备20上的各硬件设备提供工作电压；通信接口24能够为电子设备20创建与外界设备之间的数据传输通道，其所遵循的通信协议是能够适用于本申请技术方案的任意通信协议，在此不对其进行具体限定；输入输出接口25，用于获取外界输入数据或向外界输出数据，其具体的接口类型可以根据具体应用需要进行选取，在此不进行具体限定。
另外，存储器22作为资源存储的载体，可以是只读存储器、随机存储器、磁盘或者光盘等，其上所存储的资源可以包括操作系统221、计算机程序222及数据223等，存储方式可以是短暂存储或者永久存储。
其中，操作系统221用于管理与控制电子设备20上的各硬件设备以及计算机程序222，以实现处理器21对存储器22中海量数据223的运算与处理，其可以是Windows Server、Netware、Unix、Linux等。计算机程序222除了包括能够用于完成前述任一实施例公开的由电子设备20执行的融合存储系统的数据处理方法的计算机程序之外，还可以进一步包括能够用于完成其他特定工作的计算机程序。数据223可以包括电子设备20收集到的上传数据。
进一步的，本申请实施例还公开了一种存储介质，所述存储介质中存储有计算机程序，所述计算机程序被处理器加载并执行时，实现前述任一实施例公开的融合存储系统的数据处理方法步骤。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个…”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的融合存储系统的数据处理方法、装置、设备及存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种融合存储系统的数据处理方法，其特征在于，包括：
获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；
判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；
通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。
2.根据权利要求1所述的融合存储系统的数据处理方法，其特征在于，所述判断所述对象数据中的存储目录是否包含多级目录层级，包括：
判断所述对象数据中的存储目录中是否包含多个层级标识符，如果是，则判定所述对象数据中的存储目录包含所述多级目录层级。
3.根据权利要求2所述的融合存储系统的数据处理方法，其特征在于，所述对所述多级目录层级进行分割，得到多个目标目录，包括：
对每个所述层级标识符邻接的名称进行识别；
从识别出的全部名称中确定出目录名称和对象名称，以根据所述目录名称得到多个所述目标目录。
4.根据权利要求2所述的融合存储系统的数据处理方法，其特征在于，所述通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，包括：
根据所述层级标识符在存储目录中的位置对多个所述目标目录进行层级划分，并按照划分后的层级顺序在所述融合存储系统中先创建最高层级的所述目标目录；
判断创建后的最高层级的所述目标目录下是否存在下一个层级的所述目标目录，如果否，则在创建后的最高层次的所述目标目录下创建下一个层级的所述目标目录，直至每个所述目标目录在所述融合存储系统中均存在则停止创建以得到所述融合存储系统中的所述多级目录层级。
5.根据权利要求1至4任一项所述的融合存储系统的数据处理方法，其特征在于，所述通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级之后，还包括：
在所述融合存储系统中的所述多级目录层级下创建以所述目标对象的对象名称命名的空文件夹，以将所述对象数据中的所述目标对象在所述融合存储系统中的所述多级目录层级下的所述空文件夹中进行存储。
6.根据权利要求5所述的融合存储系统的数据处理方法，其特征在于，还包括：
将在所述融合存储系统中构建的所述多级目标层级与所述空文件夹的名称进行拼接，得到所述目标对象在所述融合存储系统中的存储目录，以便客户端基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象。
7.根据权利要求6所述的融合存储系统的数据处理方法，其特征在于，所述客户端基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象，包括：
当客户端通过所述第一存储协议从所述融合存储系统中获取所述目标对象，则直接基于所述目标对象在所述融合存储系统中的存储目录获取所述目标对象；
当客户端通过所述第二存储协议从所述融合存储系统中获取所述目标对象，则将所述目标对象在所述融合存储系统中的存储目录以NFS共享目录的方式挂载至所述客户端，以便所述客户端基于挂载目录获取所述目标对象。
8.一种融合存储系统的数据处理装置，其特征在于，包括：
对象数据获取模块，用于获取通过第一存储协议上传至融合存储系统中的对象数据；其中，所述融合存储系统以第二存储协议支持的存储方式为数据存储底座且所述第一存储协议与所述第二存储协议融合互通；
判断分割模块，用于判断所述对象数据中的存储目录是否包含多级目录层级，如果是，则对所述多级目录层级进行分割，得到多个目标目录；
创建存储模块，用于通过在所述融合存储系统中分别创建所述目标目录的方式构建所述融合存储系统中的所述多级目录层级，并将所述对象数据中的目标对象在所述融合存储系统中的所述多级目录层级下进行存储。
9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器；其中所述存储器用于存储计算机程序，所述计算机程序由所述处理器加载并执行以实现如权利要求1至7任一项所述的融合存储系统的数据处理方法。
10.一种计算机可读存储介质，其特征在于，用于存储计算机可执行指令，所述计算机可执行指令被处理器加载并执行时，实现如权利要求1至7任一项所述的融合存储系统的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210727061.2A CN114996236A (zh) | 2022-06-24 | 2022-06-24 | 融合存储系统的数据处理方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210727061.2A CN114996236A (zh) | 2022-06-24 | 2022-06-24 | 融合存储系统的数据处理方法、装置、设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114996236A true CN114996236A (zh) | 2022-09-02 |
Family
ID=83036077
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210727061.2A Pending CN114996236A (zh) | 2022-06-24 | 2022-06-24 | 融合存储系统的数据处理方法、装置、设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114996236A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115576903A (zh) * | 2022-11-16 | 2023-01-06 | 统信软件技术有限公司 | 一种文件系统构建方法、计算设备及存储介质 |
-
2022
- 2022-06-24 CN CN202210727061.2A patent/CN114996236A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115576903A (zh) * | 2022-11-16 | 2023-01-06 | 统信软件技术有限公司 | 一种文件系统构建方法、计算设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6621543B2 (ja) | ハイブリッドアプリケーションの自動更新 | |
| CN104615606B (zh) | 一种Hadoop分布式文件系统及其管理方法 | |
| CN109739815B (zh) | 文件处理方法、系统、装置、设备及存储介质 | |
| CN109684282B (zh) | 一种构建元数据缓存的方法及装置 | |
| CN112148678B (zh) | 一种文件访问方法、系统、设备以及介质 | |
| CN109344006A (zh) | 一种镜像管理方法及镜像管理模块 | |
| CN108563440A (zh) | 列表控制器代码自动添加方法、装置及可读存储介质 | |
| CN104182294A (zh) | 一种文件备份、文件恢复方法及装置 | |
| CN106331075B (zh) | 用于存储文件的方法、元数据服务器和管理器 | |
| JP7355964B2 (ja) | 外部ロケーションの同期 | |
| CN115357198B (zh) | 存储卷的挂载方法及装置、存储介质及电子设备 | |
| CN112015696B (zh) | 数据访问、数据关系设置方法、装置及存储介质 | |
| CN114996236A (zh) | 融合存储系统的数据处理方法、装置、设备及存储介质 | |
| US11151093B2 (en) | Distributed system control for on-demand data access in complex, heterogenous data storage | |
| US20210209064A1 (en) | File Redundancy Detection and Mitigation | |
| CN111147226A (zh) | 数据存储方法、装置及存储介质 | |
| CN116996575A (zh) | 资源访问方法、装置、设备及存储介质 | |
| CN114979114A (zh) | 云应用处理方法和系统 | |
| CN112910675A (zh) | 设备管理方法、装置及系统 | |
| JP7355959B2 (ja) | 外部ロケーションの同期 | |
| CN117093207B (zh) | 多业务数据模型的实体处理方法、装置及系统 | |
| CN117389713B (zh) | 存储系统应用业务数据迁移方法、装置、设备及介质 | |
| CN115934665A (zh) | 一种文件同步方法、系统、设备以及存储介质 | |
| CN118784630A (zh) | 一种数据访问方法及相关装置 | |
| CN116226034A (zh) | 一种kubeconfig文件管理工具实现方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |