CN115563071A - 数据处理方法、系统、电子设备及计算机可读存储介质 - Google Patents

数据处理方法、系统、电子设备及计算机可读存储介质 Download PDF

Info

Publication number
CN115563071A
CN115563071A CN202211262961.0A CN202211262961A CN115563071A CN 115563071 A CN115563071 A CN 115563071A CN 202211262961 A CN202211262961 A CN 202211262961A CN 115563071 A CN115563071 A CN 115563071A
Authority
CN
China
Prior art keywords
file
metadata information
object request
version
data processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211262961.0A
Other languages
English (en)
Inventor
何文龙
武模仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jinan Inspur Data Technology Co Ltd
Original Assignee
Jinan Inspur Data Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jinan Inspur Data Technology Co Ltd filed Critical Jinan Inspur Data Technology Co Ltd
Priority to CN202211262961.0A priority Critical patent/CN115563071A/zh
Publication of CN115563071A publication Critical patent/CN115563071A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/1873—Versioning file systems, temporal file systems, e.g. file system supporting different historic versions of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/14—Details of searching files based on file metadata
    • G06F16/148—File search processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/162—Delete operations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请公开了一种数据处理方法、系统、电子设备及计算机可读存储介质，涉及分布式存储领域，数据处理方法包括：当接收到客户端发送的上传对象请求，创建与上传对象请求对应的当前版本文件；将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中；显示逻辑头文件，以便客户端基于元数据信息对任一版本文件进行处理。本申请能够保存多版本的元数据信息，使分布式S3‑NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。

Description

数据处理方法、系统、电子设备及计算机可读存储介质
技术领域
本申请涉及分布式存储领域，特别涉及数据处理方法、系统、电子设备及计算机可读存储介质。
背景技术
当前市场存在S3(Simple Storage Service，简单存储服务)协议和NAS(NetworkAttached Storage，网络附属存储)协议互访互通的需求，即通过NAS写入的文件后续可以通过S3协议操作，S3写入的数据后续通过NAS也可以操作。当前的分布式存储系统，已经支持S3协议和NAS协议融合互通，主要有以下两种实现方案：方案一，参照图1所示，以S3对象存储为底座，部署NFS Ganesha网关实现NFS文件协议到S3协议的转换；方案二，参照图2所示，以分布式文件系统为底座，实现S3和NAS互访互通。
其中，S3协议具有多版本功能，多版本功能是指在对象上传时生成随机版本号，根据文件的版本号、文件名处理同名文件上传，保存多个版本，对象呈现最新版本，并能够从Bucket中下载对象任意时刻的历史版本。而当前的分布式S3-NAS融合互通存储系统中没有index池，多版本的元数据信息没有方法记录，导致分布式S3-NAS融合互通存储系统不支持S3的多版本功能，用户误删除数据后，无法恢复。
因此，如何提供一种解决上述技术问题的方案是本领域技术人员目前需要解决的问题。
发明内容
本申请的目的是提供一种数据处理方法、系统、电子设备及计算机可读存储介质，使分布式S3-NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。
为解决上述技术问题，本申请提供了一种数据处理方法，包括：
当接收到客户端发送的上传对象请求，创建与所述上传对象请求对应的当前版本文件；
将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中；
显示所述逻辑头文件，以便所述客户端基于所述元数据信息对任一版本文件进行处理。
可选的，将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中之后，该数据处理方法还包括：
当接收到所述客户端发送的下载对象请求，在所述逻辑头文件中确定所述下载对象请求对应的目标元数据信息；
根据所述目标元数据信息确定目标版本文件；
读取所述目标版本文件中的数据，将所述数据发送给所述客户端。
可选的，在所述逻辑头文件中确定所述下载对象请求对应的目标元数据信息的过程包括：
判断所述下载对象请求中是否指定下载版本号；
若是，将所述逻辑头文件中与所述下载版本号对应的元数据信息确定为目标元数据信息；
若否，将所述逻辑头文件中最新的元数据信息确定为所述目标元数据信息。
可选的，将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中之后，该数据处理方法还包括：
当接收到所述客户端发送的删除对象请求，判断所述删除对象请求中是否指定删除版本号；
若是，在所述逻辑头文件中获取所述删除版本号对应的目标元数据信息，基于所述目标元数据信息确定目标版本文件，删除所述目标版本文件；
若否，生成新的版本号，以所述文件系统支持的扩展属性记录所述版本号对应的元数据信息至所述逻辑头文件中，所述元数据信息中包括删除对象的标识。
可选的，删除所述目标版本文件之后，该数据处理方法还包括：
在所述逻辑头文件中删除所述目标版本文件对应的元数据信息。
可选的，所述当接收到客户端发送的上传对象请求，创建与所述上传对象请求对应的当前版本文件的过程包括：
当接收到客户端发送的上传对象请求，生成所述上传对象请求对应的版本号；
创建当前版本文件，所述当前版本文件的名称基于所述版本号和所述上传对象请求对应的对象名确定，每一版本文件的所述名称唯一。
可选的，将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中的过程包括：
将所述当前版本文件对应的元数据信息以xattr形式记录到逻辑头文件中。
为解决上述技术问题，本申请还提供了一种数据处理系统，包括：
创建模块，用于当接收到客户端发送的上传对象请求，创建与所述上传对象请求对应的当前版本文件；
第一记录模块，用于将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中；
管理模块，用于显示所述逻辑头文件，以便所述客户端基于所述元数据信息对任一版本文件进行处理。
为解决上述技术问题，本申请还提供了一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上文任意一项所述的数据处理方法的步骤。
为解决上述技术问题，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上文任意一项所述的数据处理方法的步骤。
本申请提供了一种数据处理方法，当接收到客户端发送的上传对象请求，首先创建与上传对象请求对应的当前版本文件并存储，再将上传对象请求创建的当前版本文件对应的元数据信息以文件系统支持的扩展属性记录在逻辑头文件中并进行显示，以便保存多版本的元数据信息，使分布式S3-NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。本申请还提供了一种数据处理系统、电子设备及计算机可读存储介质，具有和上述数据处理方法相同的有益效果。
附图说明
为了更清楚地说明本申请实施例，下面将对实施例中所需要使用的附图做简单的介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为一种分布式存储系统支持S3协议和NAS融合互通的实现方案示意图；
图2为另一种分布式存储系统支持S3协议和NAS融合互通的实现方案示意图；
图3为本申请所提供的一种分布式S3-NAS融合互通存储系统的普通文件上传和下载的示意图；
图4为本申请所提供的一种数据处理方法的步骤流程图；
图5为本申请所提供的一种以xattr形式记录数据的示意图；
图6为本申请所提供的一种多版本上传方法的步骤流程图；
图7为本申请所提供的一种多版本下载方法的步骤流程图；
图8为本申请所提供的一种多版本删除方法的步骤流程图；
图9为本申请所提供的一种数据处理系统的结构示意图。
具体实施方式
本申请的核心是提供一种数据处理方法、系统、电子设备及计算机可读存储介质，使分布式S3-NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
为便于理解的本申请的方案，下面对分布式对象存储系统、S3协议、NAS协议、S3-NAS融合互通存储系统、多版本功能进行说明，其中：分布式对象存储系统是指针对非结构化数据对象的分布式存储系统，目前本领域使用S3和SWIFT两种对象存储协议；
S3为一种对象存储服务，S3提供一种RESTful API接口与该服务的交互；
NAS是一种将分布、独立的数据整合为大型、集中化管理的数据中心，以便于对不同主机和应用服务器进行访问的技术。以即NAS是一种连接在网络上，具备资料存储功能的装置，因此也称为网络存储器，是一种专用数据存储服务器。以数据为中心，将存储设备与服务器彻底分离，集中管理数据。NAS本身能够支持多种协议(如NFS、CIFS、FTP、HTTP等)，而且能够支持各种操作系统。通过任何一台工作站，采用浏览器就可以对NAS设备进行直观方便的管理，即NAS文件共享。
S3-NAS融合互通存储系统，S3协议和NAS协议融合互通的分布式存储系统，支持多协议(CIFS/NFS/S3)同时共享一份数据并互访互通，即通过NAS写入的文件后续可以通过S3协议操作，S3写入的数据后续通过NAS也可以操作。
多版本功能，针对于分布式对象存储同名覆盖、或者用户误删除后如何能恢复的对象的场景，多版本功能是在对象的上传时生成随机版本号，根据文件的版本号、文件名处理同名文件上传，可以保存多个版本，对象呈现最新版本，能够从Bucket中下载对象任意时刻的历史版本。
目前分布式S3-NAS融合互通存储系统中只支持普通文件的上传和下载，普通文件通过S3对象存储协议上传后会转化为按文件存储系统的文件保存方式保存到存储池，元数据由MDS统一管理，通过S3对象存储系统下载对象时要转换为获取文件存储系统中文件数据的请求，并把读取的数据返回给客户端，参照图3所示，但是目前分布式S3-NAS融合互通存储系统中对S3原有的多版本功能是不支持的。
参照上文所述，当前的分布式存储系统支持S3协议和NAS融合互通主要有如图1和图2所示的两种方案，考虑到图2所示的方案能够避免NAS相关语义丢失，更好的实现多协议互访互通，本申请基于如图2所示的方案提出一种分布式S3-NAS融合互通存储系统支持多版本功能的方案，下面对本申请所提供的一种应用于分布式S3-NAS融合互通存储系统的数据处理方案进行说明。
第一方面，请参照图4，图4为本申请所提供的一种数据处理方法的步骤流程图，该数据处理方法包括：
S101：当接收到客户端发送的上传对象请求，创建与上传对象请求对应的当前版本文件；
作为一种可选的实施例，当接收到客户端发送的上传对象请求，创建与上传对象请求对应的当前版本文件的过程包括：
当接收到客户端发送的上传对象请求，生成上传对象请求对应的版本号；
创建当前版本文件，当前版本文件的名称基于版本号和上传对象请求对应的对象名确定，每一版本文件的名称唯一。
具体的，由客户端发送上传对象请求，其中客户端具体为S3客户端，当多版本功能开启后，S3客户端在发送上传对象请求时，S3Fs网关会先生成一个与当前上传对象请求对应的版本号，并创建保存具体数据的、名称由对象名和版本号组成的版本文件，在落盘时，以当前的版本号和对象名作为当前版本文件的名称，名称格式具体可以为bucket_ino+对象名+版本号。可以理解的是，版本文件中记录具体的版本数据和元数据。
S102：将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中；
S103：显示逻辑头文件，以便客户端基于元数据信息对任一版本文件进行处理。
具体的，判断是否存在与客户端发送的上传对象请求相对应的逻辑头文件，若不存在，则创建对外呈现的逻辑头文件，若存在，将当前版本文件对应的元数据信息记录到逻辑头文件中。可以理解的是，将客户端发送的上传对象请求对应的、用户上传的文件的文件名简称为逻辑头文件，该逻辑头文件只记录每个版本文件对应的元数据信息。
在创建当前版本文件之后，将版本文件对外隐藏，只呈现跟用户上传文件同名的逻辑头文件，在创建逻辑头文件后，将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到逻辑头文件中。具体可以xarrt元数据的形式记录该版本文件的元数据信息，各个版本文件对应的元数据信息以默认方案排序，以便在后续下载、访问文件时，查询数据的真实保存位置。
具体的，参照图5所示，xarrt的key是以文件名、时间和版本号组成，使得按map排序，便于找到最新的版本，xarrt的value为版本信息及删除标记delete_marker。请参照图6，图6为本申请所提供的一种多版本上传方法的步骤流程图，包括：
S201：接收上传对象请求；
S202：判断是否开启多版本功能，若是，执行S203；
S203：生成版本号，并创建保存有具体数据、名称由对象名和版本号组成的版本文件；
S204：判断是否存在与上传对象请求对应的逻辑头文件，若否，执行S205，若是，执行S206；
S205：创建与上传对象请求对应的逻辑头文件，然后执行S206；
S206：记录所述版本文件的元数据信息到逻辑头文件上；
S207：返回查看结果。
可见，本实施例中，当接收到客户端发送的上传对象请求，首先创建与上传对象请求对应的当前版本文件并存储，再将上传对象请求创建的当前版本文件对应的元数据信息以文件系统支持的扩展属性记录在逻辑头文件中并进行显示，以便保存多版本的元数据信息，使分布式S3-NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。
在上述实施例的基础上：
作为一种可选的实施例，将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中之后，该数据处理方法还包括：
当接收到客户端发送的下载对象请求，在逻辑头文件中确定下载对象请求对应的目标元数据信息；
根据目标元数据信息确定目标版本文件；
读取目标版本文件中的数据，将数据发送给客户端。
作为一种可选的实施例，在逻辑头文件中确定下载对象请求对应的目标元数据信息的过程包括：
判断下载对象请求中是否指定下载版本号；
若是，将逻辑头文件中与下载版本号对应的元数据信息确定为目标元数据信息；
若否，将逻辑头文件中最新的元数据信息确定为目标元数据信息。
具体的，客户端在下载多版本对象时，分为以下两种情况：一是不指定版本号下载(即获取最新版本数据)，二是指定版本号下载。不指定版本号下载对象时，即下载对象请求中未指定下载版本号时，首先读取逻辑头文件上记录的最新的一个元数据信息，需要获取融合互通存储系统中对象文件上保存的元数据，然后根据获取的元数据信息找到保存数据的目标版本文件，从目标版本文件读取数据，把数据返回给客户端；指定版本下载时，即下载对象请求中指定下载版本号时，根据该下载版本号获取保存在逻辑头文件的元数据信息，然后根据获取的元数据信息找到保存数据的目标版本文件，最后从目标版本文件读取数据，并把数据返回给客户端。
请参照图7，图7为本申请所提供的一种多版本下载方法的步骤流程图，包括：
S301：接收下载对象请求；
S302：判断是否指定版本下载，若否，执行S303，若是，执行S304；
S303：获取逻辑头文件上最新的一条元数据信息，执行S305；
S304：获取逻辑头文件上该指定版本的元数据信息，执行S305；
S305：根据元数据信息确定目标版本文件的位置；
S306：从目标版本文件中读取数据，并返回给客户端。
作为一种可选的实施例，将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中之后，该数据处理方法还包括：
当接收到客户端发送的删除对象请求，判断删除对象请求中是否指定删除版本号；
若是，在逻辑头文件中获取删除版本号对应的目标元数据信息，基于目标元数据信息确定目标版本文件，删除目标版本文件；
若否，生成新的版本号，以文件系统支持的扩展属性记录版本号对应的元数据信息至逻辑头文件中，元数据信息中包括删除对象的标识。
作为一种可选的实施例，删除目标版本文件之后，该数据处理方法还包括：
在逻辑头文件中删除目标版本文件对应的元数据信息。
具体的，客户端在删除多版本对象时，分为以下两种情况，一是不指定版本号删除，二是指定版本号删除。不指定版本号删除对象时，即删除对象请求中未指定删除版本号时，将产生一个新的版本号，以此版本号生成xattr对应的key，其value中记录删除对象标记，把该xattr元数据记录在逻辑头文件的最新位置。指定版本号删除时，即删除对象请求中指定删除版本号时，根据指定的删除版本号获取保存在逻辑头文件的元数据信息，然后根据获取的元数据信息确定保存数据的目标版本文件，并删除该目标版本文件，然后删除该条xattr元数据信息，把结果返回给客户端。
请参照图8，图8为本申请所提供的一种多版本删除方法的步骤流程图，包括：
S401：接收删除对象请求；
S402：判断是否指定版本删除，若否，执行S403，若是，执行S404；
S403：生成新的版本号，记录xattr元数据信息到逻辑头文件，value中记录delete标记，执行S408；
S404：获取逻辑头文件上该指定版本的元数据信息，执行S405；
S405：根据元数据信息确定保存具体数据的目标版本文件的位置；
S406：删除该目标版本文件；
S407：删除该指定版本的元数据信息；
S408：返回结果至客户端。
综上所述，本申请提供了一种分布式S3-NAS融合互通存储存储系统中，支持S3多版本功能的方案，解决了融合互通存储系统不支持S3多版本功能的问题。使得融合互通存储系统中，可以多个版本保存同名文件，实现数据的多个版本保存和正确下载访问，不仅能够下载访问最新版本，还可以针对特定版本下载访问，能够有效解决用户误删除后不能恢复的问题，给客户带来了良好的用户体验，同时丰富了分布式融合互通存储的功能，提高了分布式存储产品的市场竞争力。
第二方面，请参照图9，图9为本申请所提供的一种数据处理系统的结构示意图，该数据处理系统包括：
创建模块1，用于当接收到客户端发送的上传对象请求，创建与上传对象请求对应的当前版本文件；
第一记录模块2，用于将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中；
管理模块3，用于显示逻辑头文件，以便客户端基于元数据信息对任一版本文件进行处理。
可见，本实施例中，当接收到客户端发送的上传对象请求，首先创建与上传对象请求对应的当前版本文件并存储，再将上传对象请求创建的当前版本文件对应的元数据信息以文件系统支持的扩展属性记录在逻辑头文件中并进行显示，以便保存多版本的元数据信息，使分布式S3-NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。
作为一种可选的实施例，该数据处理系统还包括：
第一确定模块，用于当接收到客户端发送的下载对象请求，在逻辑头文件中确定下载对象请求对应的目标元数据信息；
第二确定模块，用于根据目标元数据信息确定目标版本文件；
读取模块，用于读取目标版本文件中的数据，将数据发送给客户端。
作为一种可选的实施例，在逻辑头文件中确定下载对象请求对应的目标元数据信息的过程包括：
判断下载对象请求中是否指定下载版本号；
若是，将逻辑头文件中与下载版本号对应的元数据信息确定为目标元数据信息；
若否，将逻辑头文件中最新的元数据信息确定为目标元数据信息。
作为一种可选的实施例，该数据处理系统还包括：
第三确定模块，用于当接收到客户端发送的删除对象请求，判断删除对象请求中是否指定删除版本号，若是，触发删除模块，若否，触发第二记录模块；
删除模块，用于在逻辑头文件中获取删除版本号对应的目标元数据信息，基于目标元数据信息确定目标版本文件，删除目标版本文件；
第二记录模块，用于生成新的版本号，以文件系统支持的扩展属性记录版本号对应的元数据信息至逻辑头文件中，元数据信息中包括删除对象的标识。
作为一种可选的实施例，删除目标版本文件之后，删除模块还用于：
在逻辑头文件中删除目标版本文件对应的元数据信息。
作为一种可选的实施例，当接收到客户端发送的上传对象请求，创建与上传对象请求对应的当前版本文件的过程包括：
当接收到客户端发送的上传对象请求，生成上传对象请求对应的版本号；
创建当前版本文件，当前版本文件的名称基于版本号和上传对象请求对应的对象名确定，每一版本文件的名称唯一。
作为一种可选的实施例，将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中的过程包括：
将当前版本文件对应的元数据信息以xattr形式记录到逻辑头文件中。
第三方面，本申请还提供了一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行计算机程序时实现如上文任意一个实施例所描述的数据处理方法的步骤。
具体的，存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机可读指令，该内存储器为非易失性存储介质中的操作系统和计算机可读指令的运行提供环境。处理器执行存储器中保存的计算机程序时，可以实现以下步骤：当接收到客户端发送的上传对象请求，创建与上传对象请求对应的当前版本文件；将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中；显示逻辑头文件，以便客户端基于元数据信息对任一版本文件进行处理。
可见，本实施例中，当接收到客户端发送的上传对象请求，首先创建与上传对象请求对应的当前版本文件并存储，再将上传对象请求创建的当前版本文件对应的元数据信息以文件系统支持的扩展属性记录在逻辑头文件中并进行显示，以便保存多版本的元数据信息，使分布式S3-NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。
作为一种可选的实施例，处理器执行存储器中保存的计算机子程序时，可以实现以下步骤：当接收到客户端发送的下载对象请求，在逻辑头文件中确定下载对象请求对应的目标元数据信息；根据目标元数据信息确定目标版本文件；读取目标版本文件中的数据，将数据发送给客户端。
作为一种可选的实施例，处理器执行存储器中保存的计算机子程序时，可以实现以下步骤：判断下载对象请求中是否指定下载版本号；若是，将逻辑头文件中与下载版本号对应的元数据信息确定为目标元数据信息；若否，将逻辑头文件中最新的元数据信息确定为目标元数据信息。
作为一种可选的实施例，处理器执行存储器中保存的计算机子程序时，可以实现以下步骤：当接收到客户端发送的删除对象请求，判断删除对象请求中是否指定删除版本号；若是，在逻辑头文件中获取删除版本号对应的目标元数据信息，基于目标元数据信息确定目标版本文件，删除目标版本文件；若否，生成新的版本号，以文件系统支持的扩展属性记录版本号对应的元数据信息至逻辑头文件中，元数据信息中包括删除对象的标识。
作为一种可选的实施例，处理器执行存储器中保存的计算机子程序时，可以实现以下步骤：在逻辑头文件中删除目标版本文件对应的元数据信息。
作为一种可选的实施例，处理器执行存储器中保存的计算机子程序时，可以实现以下步骤：当接收到客户端发送的上传对象请求，生成上传对象请求对应的版本号；创建当前版本文件，当前版本文件的名称基于版本号和上传对象请求对应的对象名确定，每一版本文件的名称唯一。
作为一种可选的实施例，处理器执行存储器中保存的计算机子程序时，可以实现以下步骤：将当前版本文件对应的元数据信息以xattr形式记录到逻辑头文件中。
在上述实施例的基础上，作为优选实施方式，该电子设备还包括：
输入接口，与处理器相连，用于获取外部导入的计算机程序、参数和指令，经处理器控制保存至存储器中。该输入接口可以与输入装置相连，接收用户手动输入的参数或指令。该输入装置可以是显示屏上覆盖的触摸层，也可以是终端外壳上设置的按键、轨迹球或触控板。
显示单元，与处理器相连，用于显示处理器发送的数据。该显示单元可以为液晶显示屏或者电子墨水显示屏等。
网络端口，与处理器相连，用于与外部各终端设备进行通信连接。该通信连接所采用的通信技术可以为有线通信技术或无线通信技术，如移动高清链接技术(MHL)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术等。
第四方面，本申请还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上文任意一个实施例所描述的数据处理方法的步骤。
具体的，该计算机可读存储介质可以包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。该存储介质上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：当接收到客户端发送的上传对象请求，创建与上传对象请求对应的当前版本文件；将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中；显示逻辑头文件，以便客户端基于元数据信息对任一版本文件进行处理。
可见，本实施例中，当接收到客户端发送的上传对象请求，首先创建与上传对象请求对应的当前版本文件并存储，再将上传对象请求创建的当前版本文件对应的元数据信息以文件系统支持的扩展属性记录在逻辑头文件中并进行显示，以便保存多版本的元数据信息，使分布式S3-NAS融合互通存储系统支持S3协议的多版本功能，从而解决了用户误删数据后不能恢复的问题，丰富了分布式融合互通存储的功能，提高了分布式存储系统的市场竞争力。
作为一种可选的实施例，计算机可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：当接收到客户端发送的下载对象请求，在逻辑头文件中确定下载对象请求对应的目标元数据信息；根据目标元数据信息确定目标版本文件；读取目标版本文件中的数据，将数据发送给客户端。
作为一种可选的实施例，计算机可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：判断下载对象请求中是否指定下载版本号；若是，将逻辑头文件中与下载版本号对应的元数据信息确定为目标元数据信息；若否，将逻辑头文件中最新的元数据信息确定为目标元数据信息。
作为一种可选的实施例，计算机可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：当接收到客户端发送的删除对象请求，判断删除对象请求中是否指定删除版本号；若是，在逻辑头文件中获取删除版本号对应的目标元数据信息，基于目标元数据信息确定目标版本文件，删除目标版本文件；若否，生成新的版本号，以文件系统支持的扩展属性记录版本号对应的元数据信息至逻辑头文件中，元数据信息中包括删除对象的标识。
作为一种可选的实施例，计算机可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：在逻辑头文件中删除目标版本文件对应的元数据信息。
作为一种可选的实施例，计算机可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：当接收到客户端发送的上传对象请求，生成上传对象请求对应的版本号；创建当前版本文件，当前版本文件的名称基于版本号和上传对象请求对应的对象名确定，每一版本文件的名称唯一。
作为一种可选的实施例，计算机可读存储介质中存储的计算机子程序被处理器执行时，具体可以实现以下步骤：将当前版本文件对应的元数据信息以xattr形式记录到逻辑头文件中。
还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的状况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其他实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种数据处理方法，其特征在于，包括：
当接收到客户端发送的上传对象请求，创建与所述上传对象请求对应的当前版本文件；
将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中；
显示所述逻辑头文件，以便所述客户端基于所述元数据信息对任一版本文件进行处理。
2.根据权利要求1所述的数据处理方法，其特征在于，将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中之后，该数据处理方法还包括：
当接收到所述客户端发送的下载对象请求，在所述逻辑头文件中确定所述下载对象请求对应的目标元数据信息；
根据所述目标元数据信息确定目标版本文件；
读取所述目标版本文件中的数据，将所述数据发送给所述客户端。
3.根据权利要求2所述的数据处理方法，其特征在于，在所述逻辑头文件中确定所述下载对象请求对应的目标元数据信息的过程包括：
判断所述下载对象请求中是否指定下载版本号；
若是，将所述逻辑头文件中与所述下载版本号对应的元数据信息确定为目标元数据信息；
若否，将所述逻辑头文件中最新的元数据信息确定为所述目标元数据信息。
4.根据权利要求1所述的数据处理方法，其特征在于，将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中之后，该数据处理方法还包括：
当接收到所述客户端发送的删除对象请求，判断所述删除对象请求中是否指定删除版本号；
若是，在所述逻辑头文件中获取所述删除版本号对应的目标元数据信息，基于所述目标元数据信息确定目标版本文件，删除所述目标版本文件；
若否，生成新的版本号，以所述文件系统支持的扩展属性记录所述版本号对应的元数据信息至所述逻辑头文件中，所述元数据信息中包括删除对象的标识。
5.根据权利要求4所述的数据处理方法，其特征在于，删除所述目标版本文件之后，该数据处理方法还包括：
在所述逻辑头文件中删除所述目标版本文件对应的元数据信息。
6.根据权利要求1所述的数据处理方法，其特征在于，所述当接收到客户端发送的上传对象请求，创建与所述上传对象请求对应的当前版本文件的过程包括：
当接收到客户端发送的上传对象请求，生成所述上传对象请求对应的版本号；
创建当前版本文件，所述当前版本文件的名称基于所述版本号和所述上传对象请求对应的对象名确定，每一版本文件的所述名称唯一。
7.根据权利要求1-6任意一项所述的数据处理方法，其特征在于，将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中的过程包括：
将所述当前版本文件对应的元数据信息以xattr形式记录到逻辑头文件中。
8.一种数据处理系统，其特征在于，包括：
创建模块，用于当接收到客户端发送的上传对象请求，创建与所述上传对象请求对应的当前版本文件；
第一记录模块，用于将所述当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与所述上传对象请求对应的逻辑头文件中；
管理模块，用于显示所述逻辑头文件，以便所述客户端基于所述元数据信息对任一版本文件进行处理。
9.一种电子设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1-7任意一项所述的数据处理方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-7任意一项所述的数据处理方法的步骤。
CN202211262961.0A 2022-10-14 2022-10-14 数据处理方法、系统、电子设备及计算机可读存储介质 Pending CN115563071A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211262961.0A CN115563071A (zh) 2022-10-14 2022-10-14 数据处理方法、系统、电子设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211262961.0A CN115563071A (zh) 2022-10-14 2022-10-14 数据处理方法、系统、电子设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN115563071A true CN115563071A (zh) 2023-01-03

Family

ID=84767638

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211262961.0A Pending CN115563071A (zh) 2022-10-14 2022-10-14 数据处理方法、系统、电子设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN115563071A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220100878A1 (en) * 2020-09-25 2022-03-31 EMC IP Holding Company LLC Facilitating an object protocol based access of data within a multiprotocol environment

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220100878A1 (en) * 2020-09-25 2022-03-31 EMC IP Holding Company LLC Facilitating an object protocol based access of data within a multiprotocol environment
US11928228B2 (en) * 2020-09-25 2024-03-12 EMC IP Holding Company LLC Facilitating an object protocol based access of data within a multiprotocol environment

Similar Documents

Publication Publication Date Title
CN111078653B (zh) 一种数据存储方法、系统及设备
KR101478134B1 (ko) 모바일 디바이스의 파일 관리 방법 및 이를 이용한 모바일 디바이스
CN104915268A (zh) 桌面布局的存储、恢复方法及其装置、终端设备、系统
CN103902589B (zh) 一种下载文件的管理方法及装置
US20110231424A1 (en) Method and system for automated file aggregation on a storage device
JP6336624B2 (ja) マルチメディア表示方法、装置及びデバイス
JP2001222504A (ja) 電子機器、電子機器の制御方法及び記録媒体
US10375149B2 (en) Application registration and interaction
CN107835986B (zh) 一种电子设备的数据操作方法及电子设备
US20110025858A1 (en) Method, apparatus, and system for adding functionality to a digital camera
US20110019007A1 (en) Method, apparatus and method for adding functionality to a digital camera
JP2008085983A (ja) 画像データ管理装置及び画像データ管理方法、コンピュータ可読記憶媒体
CN115563071A (zh) 数据处理方法、系统、电子设备及计算机可读存储介质
KR20210057659A (ko) 모바일 디바이스의 파일 관리 방법 및 이 방법을 실행하는 모바일 디바이스
CN107562372B (zh) 一种电子设备及其数据管理方法、计算机可读存储介质
CN109756484B (zh) 基于对象存储的网关的控制方法、控制装置、网关和介质
CN113688139A (zh) 对象存储方法、网关、设备及介质
CN109542357B (zh) 一种命令参数组装方法、系统、设备及计算机存储介质
JP5343453B2 (ja) コンテンツファイル管理システム
KR100772516B1 (ko) ＵＰｎＰ ＡＶ 서버를 위한 컨텐츠 정보 자동 생성 및관리 장치 및 그 방법
US10545834B1 (en) Server-assisted network data archiving
CN109324760B (zh) 一种磁盘数据上云方法、系统、设备及计算机存储介质
US9928309B2 (en) Handling content associated with content identifiers
CN113360095A (zh) 硬盘数据管理方法、装置、设备及介质
CN112347046A (zh) 一种获取分布式系统中文件的创建时间的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination