CN110888844A - 一种数据删除方法、系统、设备及计算机可读存储介质 - Google Patents

一种数据删除方法、系统、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN110888844A
CN110888844A CN201911157912.9A CN201911157912A CN110888844A CN 110888844 A CN110888844 A CN 110888844A CN 201911157912 A CN201911157912 A CN 201911157912A CN 110888844 A CN110888844 A CN 110888844A
Authority
CN
China
Prior art keywords
data
deleted
file system
distributed file
deleting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911157912.9A
Other languages
English (en)
Other versions
CN110888844B (zh
Inventor
李文鹏
杨朔
张端
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Electronic Information Industry Co Ltd
Original Assignee
Inspur Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Electronic Information Industry Co Ltd filed Critical Inspur Electronic Information Industry Co Ltd
Priority to CN201911157912.9A priority Critical patent/CN110888844B/zh
Publication of CN110888844A publication Critical patent/CN110888844A/zh
Priority to PCT/CN2020/103700 priority patent/WO2021098260A1/zh
Application granted granted Critical
Publication of CN110888844B publication Critical patent/CN110888844B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/162—Delete operations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种数据删除方法、系统、设备及计算机可读存储介质，应用于分布式文件系统中的元数据服务器，接收分布式文件系统中的客户端发送的数据删除请求；响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；基于分布式文件系统的性能对待删除数据进行处理。本申请提供的一种数据删除方法，元数据服务器接收到客户端发送的数据删除请求后，并不是返回待删除数据至客户端，而是将待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端，提高了客户端删除数据的效率。本申请提供的一种数据删除系统、设备及计算机可读存储介质也解决了相应技术问题。

Description

一种数据删除方法、系统、设备及计算机可读存储介质
技术领域
本申请涉及分布式存储技术领域，更具体地说，涉及一种数据删除方法、系统、设备及计算机可读存储介质。
背景技术
在分布式文件系统中，存储有海量数据，当客户端需要将分布式文件系统中的数据进行删除时，需要先从分布式文件系统的元数据服务器中读取待删除数据，然后再进行删除，期间还要进行各种IO确认，待数据完成删除后，元数据服务器才会返回删除成功的消息至客户端，使得客户端进行数据删除的效率较慢。
综上所述，如何提高客户端删除数据的效率是目前本领域技术人员亟待解决的问题。
发明内容
本申请的目的是提供一种数据删除方法，其能在一定程度上解决如何提高客户端删除数据的效率的技术问题。本申请还提供了一种数据删除系统、设备及计算机可读存储介质。
为了实现上述目的，本申请提供如下技术方案：
一种数据删除方法，应用于分布式文件系统中的元数据服务器，包括：
接收所述分布式文件系统中的客户端发送的数据删除请求；
响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；
基于所述分布式文件系统的性能对所述待删除数据进行处理。
优选的，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
判断所述待删除数据是否被其他客户端使用；
若所述待删除数据未被所述其他客户端使用，则直接删除所述待删除数据；
若所述待删除数据被所述其他客户端使用，则待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据。
优选的，所述待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据，包括：
发送与所述待删除数据对应的收回请求至所述其他客户端，以使所述其他客户端接收到所述收回请求后结束对所述待删除数据的使用；
判断是否接收到所述其他客户端发送的结束使用信息；
若接收到所述结束使用信息，则删除所述待删除数据。
优选的，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
获取所述分布式文件系统的实时性能值；
判断所述实时性能值是否小于预设性能值，若否，则直接删除所述待删除数据。
优选的，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
获取所述待删除数据的数据使用量；
判断所述数据使用量是否大于预设用量值；
若所述数据使用量小于等于所述预设用量值，则直接删除所述待删除数据。
优选的，所述将与所述数据删除请求对应的待删除数据迁移至待删除队列中之后，还包括：
禁止使用所述待删除数据。
优选的，所述接收所述分布式文件系统中的客户端发送的数据删除请求，包括：
接收所述客户端发送的所述数据删除请求，所述数据删除请求的类型包括目录删除请求、文件批量删除请求。
一种数据删除系统，应用于分布式文件系统中的元数据服务器，包括：
第一接收模块，用于接收所述分布式文件系统中的客户端发送的数据删除请求；
第一响应模块，用于响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；
第一处理模块，用于基于所述分布式文件系统的性能对所述待删除数据进行处理。
一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上任一所述数据删除方法的步骤。
一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如上任一所述数据删除方法的步骤。
本申请提供的一种数据删除方法，应用于分布式文件系统中的元数据服务器，接收分布式文件系统中的客户端发送的数据删除请求；响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；基于分布式文件系统的性能对待删除数据进行处理。本申请提供的一种数据删除方法，元数据服务器接收到客户端发送的数据删除请求后，并不是返回待删除数据至客户端，而是将待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端，使得客户端可以快速获知数据已删除的信息，结束数据删除过程，提高了客户端删除数据的效率。本申请提供的一种数据删除系统、设备及计算机可读存储介质也解决了相应技术问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种数据删除方法的流程图；
图2为本申请实施例提供的一种数据删除系统的结构示意图；
图3为本申请实施例提供的一种数据删除设备的结构示意图；
图4为本申请实施例提供的一种数据删除设备的另一结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
请参阅图1，图1为本申请实施例提供的一种数据删除方法的流程图。
本申请实施例提供的一种数据删除方法，应用于分布式文件系统中的元数据服务器，可以包括以下步骤：
步骤S101：接收分布式文件系统中的客户端发送的数据删除请求。
实际应用中，元数据服务器可以先接收分布式文件系统中的客户端发送的数据删除请求，具体的，可以直接接收客户端发送的数据删除请求，也可以通过服务端接收客户端发送的数据删除请求等。
步骤S102：响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端。
实际应用中，元数据服务器在接收到客户端发送的数据删除请求后，并不是查询数据删除请求对应的待删除数据，再将待删除数据发送个客户端执行删除操作，而是，元数据服务器直接响应数据删除请求，将待删除数据迁移至待删除队列，并直接返回表征数据已删除的信息至客户端，使得客户端无需等待即可结束数据删除过程，提高了客户端的数据删除效率。
步骤S103：基于分布式文件系统的性能对待删除数据进行处理。
实际应用中，由于分布式文件系统中，一个数据可能被多个客户端使用等，由此使得待删除数据的删除情况较为复杂，因此，元数据服务器在返回表征数据已删除的信息至客户端后，可以基于分布式文件系统的性能来对待删除数据进行处理。
本申请提供的一种数据删除方法，应用于分布式文件系统中的元数据服务器，接收分布式文件系统中的客户端发送的数据删除请求；响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；基于分布式文件系统的性能对待删除数据进行处理。本申请提供的一种数据删除方法，元数据服务器接收到客户端发送的数据删除请求后，并不是返回待删除数据至客户端，而是将待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端，使得客户端可以快速获知数据已删除的信息，结束数据删除过程，提高了客户端删除数据的效率。
本申请提供的一种数据删除方法，元数据服务器在基于分布式文件系统的性能对待删除数据进行处理时，可以简单的根据待删除数据是否正在被使用来决定是否删除待删除数据，也即元数据服务器可以判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请提供的一种数据删除方法，为了提高元数据服务器删除待删除数据的效率，元数据服务器可以主动通过指令使得其他客户端结束对待删除数据的，则在待其他客户端结束对待删除数据的使用之后，删除待删除数据的过程中，元数据服务器可以发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请提供的一种数据删除方法，在分布式文件系统的性能值较高时，为了降低分布式文件系统的性能值，可以直接删除待删除数据，也即可以根据分布式文件系统的性能值来决定是否删除待删除数据，则元数据服务器在基于分布式文件系统的性能对待删除数据进行处理时，可以获取分布式文件系统的实时性能值；判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请提供的一种数据删除方法，由于待删除数据被删除后，分布式文件系统便无法应用待删除数据，会对分布式文件系统的性能产生影响，因此，可以基于待删除数据的使用量来决定是否删除待删除数据，则元数据服务器在基于分布式文件系统的性能对待删除数据进行处理时，可以获取待删除数据的数据使用量；判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请提供的一种数据删除方法，为了可以快速删除待删除数据，元数据服务器在将与数据删除请求对应的待删除数据迁移至待删除队列中之后，还可以禁止使用待删除数据。
本申请提供的一种数据删除方法，客户端发送的数据删除请求的类型可以根据实际需要确定，也即元数据服务器在接收分布式文件系统中的客户端发送的数据删除请求时，可以接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
请参阅图2，图2为本申请实施例提供的一种数据删除系统的结构示意图。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，可以包括：
第一接收模块101，用于接收分布式文件系统中的客户端发送的数据删除请求；
第一响应模块102，用于响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；
第一处理模块103，用于基于分布式文件系统的性能对待删除数据进行处理。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一处理模块可以包括：
第一判断子模块，用于判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一判断子模块可以包括：
第一发送单元，用于发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；
第一判断单元，用于判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一处理模块可以包括：
第一获取单元，用于获取分布式文件系统的实时性能值；
第二判断单元，用于判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一处理模块可以包括：
第二获取单元，用于获取待删除数据的数据使用量；
第三判断单元，用于判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，还可以包括：
第一设置模块，用于第一响应模块将与数据删除请求对应的待删除数据迁移至待删除队列中之后，禁止使用待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一接收模块可以包括：
第一接收单元，用于接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
本申请还提供了一种数据删除设备及计算机可读存储介质，其均具有本申请实施例提供的一种数据删除方法具有的对应效果。请参阅图3，图3为本申请实施例提供的一种数据删除设备的结构示意图。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：
接收分布式文件系统中的客户端发送的数据删除请求；
响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；
基于分布式文件系统的性能对待删除数据进行处理。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：获取分布式文件系统的实时性能值；判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：获取待删除数据的数据使用量；判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：将与数据删除请求对应的待删除数据迁移至待删除队列中之后，禁止使用待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
请参阅图4，本申请实施例提供的另一种数据删除设备中还可以包括：与处理器202连接的输入端口203，用于传输外界输入的命令至处理器202；与处理器202连接的显示单元204，用于显示处理器202的处理结果至外界；与处理器202连接的通信模块205，用于实现数据删除设备与外界的通信。显示单元204可以为显示面板、激光扫描使显示器等；通信模块205所采用的通信方式包括但不局限于移动高清链接技术(HML)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线连接：无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：
接收分布式文件系统中的客户端发送的数据删除请求；
响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；
基于分布式文件系统的性能对待删除数据进行处理。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：获取分布式文件系统的实时性能值；判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：获取待删除数据的数据使用量；判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：将与数据删除请求对应的待删除数据迁移至待删除队列中之后，禁止使用待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
本申请所涉及的计算机可读存储介质包括随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质。
本申请实施例提供的一种数据删除系统、设备及计算机可读存储介质中相关部分的说明请参见本申请实施例提供的一种数据删除方法中对应部分的详细说明，在此不再赘述。另外，本申请实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明，以免过多赘述。
还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种数据删除方法，其特征在于，应用于分布式文件系统中的元数据服务器，包括：
接收所述分布式文件系统中的客户端发送的数据删除请求；
响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；
基于所述分布式文件系统的性能对所述待删除数据进行处理。
2.根据权利要求1所述的方法，其特征在于，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
判断所述待删除数据是否被其他客户端使用；
若所述待删除数据未被所述其他客户端使用，则直接删除所述待删除数据；
若所述待删除数据被所述其他客户端使用，则待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据。
3.根据权利要求2所述的方法，其特征在于，所述待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据，包括：
发送与所述待删除数据对应的收回请求至所述其他客户端，以使所述其他客户端接收到所述收回请求后结束对所述待删除数据的使用；
判断是否接收到所述其他客户端发送的结束使用信息；
若接收到所述结束使用信息，则删除所述待删除数据。
4.根据权利要求1所述的方法，其特征在于，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
获取所述分布式文件系统的实时性能值；
判断所述实时性能值是否小于预设性能值，若否，则直接删除所述待删除数据。
5.根据权利要求1所述的方法，其特征在于，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
获取所述待删除数据的数据使用量；
判断所述数据使用量是否大于预设用量值；
若所述数据使用量小于等于所述预设用量值，则直接删除所述待删除数据。
6.根据权利要求1所述的方法，其特征在于，所述将与所述数据删除请求对应的待删除数据迁移至待删除队列中之后，还包括：
禁止使用所述待删除数据。
7.根据权利要求1至6任一项所述的方法，其特征在于，所述接收所述分布式文件系统中的客户端发送的数据删除请求，包括：
接收所述客户端发送的所述数据删除请求，所述数据删除请求的类型包括目录删除请求、文件批量删除请求。
8.一种数据删除系统，其特征在于，应用于分布式文件系统中的元数据服务器，包括：
第一接收模块，用于接收所述分布式文件系统中的客户端发送的数据删除请求；
第一响应模块，用于响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；
第一处理模块，用于基于所述分布式文件系统的性能对所述待删除数据进行处理。
9.一种数据删除设备，其特征在于，应用于分布式文件系统中的元数据服务器，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述数据删除方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述数据删除方法的步骤。
CN201911157912.9A 2019-11-22 2019-11-22 一种数据删除方法、系统、设备及计算机可读存储介质 Active CN110888844B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911157912.9A CN110888844B (zh) 2019-11-22 2019-11-22 一种数据删除方法、系统、设备及计算机可读存储介质
PCT/CN2020/103700 WO2021098260A1 (zh) 2019-11-22 2020-07-23 一种数据删除方法、系统、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911157912.9A CN110888844B (zh) 2019-11-22 2019-11-22 一种数据删除方法、系统、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN110888844A true CN110888844A (zh) 2020-03-17
CN110888844B CN110888844B (zh) 2023-03-21

Family

ID=69748519

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911157912.9A Active CN110888844B (zh) 2019-11-22 2019-11-22 一种数据删除方法、系统、设备及计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN110888844B (zh)
WO (1) WO2021098260A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111596864A (zh) * 2020-05-22 2020-08-28 柏科数据技术（深圳）股份有限公司 一种数据延时删除的方法、装置、服务器及存储介质
CN111625506A (zh) * 2020-05-29 2020-09-04 浪潮电子信息产业股份有限公司 一种基于删除队列的分布式数据删除方法、装置及设备
WO2021098260A1 (zh) * 2019-11-22 2021-05-27 浪潮电子信息产业股份有限公司 一种数据删除方法、系统、设备及计算机可读存储介质
CN113590546A (zh) * 2021-06-30 2021-11-02 济南浪潮数据技术有限公司 一种目录删除方法、装置及存储介质
CN114153390A (zh) * 2021-11-19 2022-03-08 苏州浪潮智能科技有限公司 一种分布式存储系统中卷删除优化方法、装置及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1804831A (zh) * 2005-01-13 2006-07-19 陈翌 网络缓存管理的系统和方法
CN1834956A (zh) * 2005-03-18 2006-09-20 联想(北京)有限公司 多线程元数据的处理方法
CN101685450A (zh) * 2008-09-27 2010-03-31 比亚迪股份有限公司 一种在嵌入式操作系统中实现数据库功能的方法
KR20130043823A (ko) * 2011-10-21 2013-05-02 엔에이치엔비즈니스플랫폼 주식회사 로그에 기반하여 데이터 정합성을 유지하는 분산 저장 시스템 및 방법
CN105095489A (zh) * 2015-08-18 2015-11-25 浪潮(北京)电子信息产业有限公司 一种分布式文件删除方法、装置和系统
CN107977376A (zh) * 2016-10-24 2018-05-01 腾讯科技（深圳）有限公司 分布式数据库系统及事务处理方法
CN108959399A (zh) * 2018-06-04 2018-12-07 平安科技（深圳）有限公司 分布式数据删除流控方法、装置、电子设备及存储介质
CN109117447A (zh) * 2017-06-22 2019-01-01 深圳联友科技有限公司 一种缓存网页的服务器数据访问方法及装置
CN109976668A (zh) * 2019-03-14 2019-07-05 北京达佳互联信息技术有限公司 数据删除方法、数据删除装置和计算机可读存储介质
CN110119387A (zh) * 2019-05-23 2019-08-13 苏州浪潮智能科技有限公司 一种文件删除方法、装置、设备及可读存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8775373B1 (en) * 2008-05-21 2014-07-08 Translattice, Inc. Deleting content in a distributed computing environment
US9390109B2 (en) * 2012-12-21 2016-07-12 Commvault Systems, Inc. Systems and methods to detect deleted files
CN104679772B (zh) * 2013-11-29 2019-01-25 深圳市腾讯计算机系统有限公司 分布式数据仓库中删除文件的方法、装置、设备及系统
CN106227469A (zh) * 2016-07-28 2016-12-14 乐视控股（北京）有限公司 用于分布式存储集群的数据删除方法及系统
CN107330061B (zh) * 2017-06-29 2021-02-02 苏州浪潮智能科技有限公司 一种基于分布式存储的文件删除方法及装置
CN109614377B (zh) * 2018-12-07 2022-04-22 浪潮电子信息产业股份有限公司 分布式文件系统的文件删除方法、装置、设备及存储介质
CN109992213B (zh) * 2019-04-10 2022-07-22 苏州浪潮智能科技有限公司 数据删除方法、系统、装置及计算机可读存储介质
CN110888844B (zh) * 2019-11-22 2023-03-21 浪潮电子信息产业股份有限公司 一种数据删除方法、系统、设备及计算机可读存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1804831A (zh) * 2005-01-13 2006-07-19 陈翌 网络缓存管理的系统和方法
CN1834956A (zh) * 2005-03-18 2006-09-20 联想(北京)有限公司 多线程元数据的处理方法
CN101685450A (zh) * 2008-09-27 2010-03-31 比亚迪股份有限公司 一种在嵌入式操作系统中实现数据库功能的方法
KR20130043823A (ko) * 2011-10-21 2013-05-02 엔에이치엔비즈니스플랫폼 주식회사 로그에 기반하여 데이터 정합성을 유지하는 분산 저장 시스템 및 방법
CN105095489A (zh) * 2015-08-18 2015-11-25 浪潮(北京)电子信息产业有限公司 一种分布式文件删除方法、装置和系统
CN107977376A (zh) * 2016-10-24 2018-05-01 腾讯科技（深圳）有限公司 分布式数据库系统及事务处理方法
CN109117447A (zh) * 2017-06-22 2019-01-01 深圳联友科技有限公司 一种缓存网页的服务器数据访问方法及装置
CN108959399A (zh) * 2018-06-04 2018-12-07 平安科技（深圳）有限公司 分布式数据删除流控方法、装置、电子设备及存储介质
CN109976668A (zh) * 2019-03-14 2019-07-05 北京达佳互联信息技术有限公司 数据删除方法、数据删除装置和计算机可读存储介质
CN110119387A (zh) * 2019-05-23 2019-08-13 苏州浪潮智能科技有限公司 一种文件删除方法、装置、设备及可读存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ANDRÉ L. M. DOS SANTOS ET AL.: ""SACM: Stateful Access Control Model a More Detailed Approach"", 《IEEE INTERNATIONAL CONFERENCE ON COMPUTATIONAL SCIENCE AND ENGINEERING》 *
林旭: ""云存储中的数据删除技术研究"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021098260A1 (zh) * 2019-11-22 2021-05-27 浪潮电子信息产业股份有限公司 一种数据删除方法、系统、设备及计算机可读存储介质
CN111596864A (zh) * 2020-05-22 2020-08-28 柏科数据技术（深圳）股份有限公司 一种数据延时删除的方法、装置、服务器及存储介质
CN111625506A (zh) * 2020-05-29 2020-09-04 浪潮电子信息产业股份有限公司 一种基于删除队列的分布式数据删除方法、装置及设备
CN113590546A (zh) * 2021-06-30 2021-11-02 济南浪潮数据技术有限公司 一种目录删除方法、装置及存储介质
CN114153390A (zh) * 2021-11-19 2022-03-08 苏州浪潮智能科技有限公司 一种分布式存储系统中卷删除优化方法、装置及存储介质
CN114153390B (zh) * 2021-11-19 2023-08-29 苏州浪潮智能科技有限公司 一种分布式存储系统中卷删除优化方法、装置及存储介质

Also Published As

Publication number Publication date
CN110888844B (zh) 2023-03-21
WO2021098260A1 (zh) 2021-05-27

Similar Documents

Publication Publication Date Title
CN110888844B (zh) 一种数据删除方法、系统、设备及计算机可读存储介质
US11093335B2 (en) Data replication method, apparatus, and system
CN110753084B (zh) 上链数据读取方法、缓存服务器及计算机可读存储介质
CN112684982B (zh) 一种数据迁移方法、系统、设备及计算机可读存储介质
CN109684270B (zh) 数据库归档方法、装置、系统、设备及可读存储介质
CN111143290A (zh) 一种内存管理方法、系统、设备及计算机可读存储介质
CN103491162A (zh) 基于移动互联网的信息分享方法及系统
CN109995595B (zh) 一种rgw配额确定方法、系统、设备及计算机介质
CN111126604A (zh) 模型训练方法、装置、服务器及存储介质
CN110764930A (zh) 基于消息模式的请求或应答处理方法及装置
CN108132836B (zh) 一种任务分发方法、装置及电子设备
CN107329832B (zh) 一种数据接收方法及装置
CN111596864A (zh) 一种数据延时删除的方法、装置、服务器及存储介质
CN110019372B (zh) 数据监控方法、装置、服务器及存储介质
CN110933070A (zh) 一种用户识别方法、系统、设备及计算机可读存储介质
CN113806295B (zh) 一种文件迁移方法、系统、设备及计算机可读存储介质
CN112463027B (zh) 一种i/o处理方法、系统、设备及计算机可读存储介质
CN107229424B (zh) 一种分布式存储系统数据写入方法及分布式存储系统
US12019909B2 (en) IO request pipeline processing device, method and system, and storage medium
CN113157611B (zh) 一种数据传输控制方法、装置、设备及可读存储介质
CN106899652B (zh) 一种推送业务处理结果的方法及装置
CN112463028B (zh) 一种i/o处理方法、系统、设备及计算机可读存储介质
CN103838682A (zh) 一种文件目录的读取方法和设备
CN109324760B (zh) 一种磁盘数据上云方法、系统、设备及计算机存储介质
CN113746932A (zh) 网络请求合并方法、装置及电子装置、计算机程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant