WO2021098260A1 - 一种数据删除方法、系统、设备及计算机可读存储介质 - Google Patents
一种数据删除方法、系统、设备及计算机可读存储介质 Download PDFInfo
- Publication number
- WO2021098260A1 WO2021098260A1 PCT/CN2020/103700 CN2020103700W WO2021098260A1 WO 2021098260 A1 WO2021098260 A1 WO 2021098260A1 CN 2020103700 W CN2020103700 W CN 2020103700W WO 2021098260 A1 WO2021098260 A1 WO 2021098260A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- data
- deleted
- file system
- distributed file
- client
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
- G06F16/162—Delete operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
Definitions
- the data to be deleted is directly deleted.
- Step S101 Receive a data deletion request sent by a client in the distributed file system.
- This application provides a data deletion method.
- the type of data deletion request sent by the client can be determined according to actual needs. That is, when the metadata server receives the data deletion request sent by the client in the distributed file system, it can receive the client.
- the types of data deletion requests sent by the client include directory deletion requests and file batch deletion requests.
- FIG. 2 is a schematic structural diagram of a data deletion system provided by an embodiment of this application.
- a data deletion system provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and the first processing module may include:
- the first judging unit is used to judge whether the end use information sent by other clients is received; if the end use information is received, delete the data to be deleted.
- a data deletion system provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and the first processing module may include:
- the first obtaining unit is used to obtain the real-time performance value of the distributed file system
- the second judgment unit is used to judge whether the real-time performance value is less than the preset performance value, and if not, directly delete the data to be deleted.
- the second acquiring unit is used to acquire the data usage amount of the data to be deleted
- a data deletion system provided by an embodiment of the present application which is applied to a metadata server in a distributed file system, may further include:
- the first setting module is configured to prohibit the use of the data to be deleted after the first response module migrates the data to be deleted corresponding to the data deletion request to the queue to be deleted.
- the first receiving unit is configured to receive a data deletion request sent by the client.
- the types of the data deletion request include a directory deletion request and a batch file deletion request.
- This application also provides a data deletion device and a computer-readable storage medium, both of which have the corresponding effects of the data deletion method provided in the embodiments of this application. Please refer to FIG. 3, which is a schematic structural diagram of a data deletion device provided by an embodiment of this application.
- a data deletion device provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and includes a memory 201 and a processor 202.
- the memory 201 stores a computer program.
- the processor 202 executes the computer program, the following steps are implemented :
- a data deletion device provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and includes a memory 201 and a processor 202.
- the memory 201 stores a computer program.
- the processor 202 executes the computer program, the following steps are implemented : Determine whether the data to be deleted is used by other clients; if the data to be deleted is not used by other clients, delete the data to be deleted directly; if the data to be deleted is used by other clients, wait for other clients to end the data to be deleted After use, delete the data to be deleted.
- a data deletion device provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and includes a memory 201 and a processor 202.
- the memory 201 stores a computer program.
- the processor 202 executes the computer program, the following steps are implemented : Send the recovery request corresponding to the data to be deleted to other clients, so that other clients will end the use of the data to be deleted after receiving the recovery request; determine whether the end-use information sent by other clients has been received; if the end-use information is received Information, delete the data to be deleted.
- a data deletion device provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and includes a memory 201 and a processor 202.
- the memory 201 stores a computer program.
- the processor 202 executes the computer program, the following steps are implemented : Obtain the real-time performance value of the distributed file system; determine whether the real-time performance value is less than the preset performance value, if not, directly delete the data to be deleted.
- a data deletion device provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and includes a memory 201 and a processor 202.
- the memory 201 stores a computer program.
- the processor 202 executes the computer program, the following steps are implemented : Obtain the data usage of the data to be deleted; determine whether the data usage is greater than the preset usage value; if the data usage is less than or equal to the preset usage value, directly delete the data to be deleted.
- a data deletion device provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and includes a memory 201 and a processor 202.
- the memory 201 stores a computer program.
- the processor 202 executes the computer program, the following steps are implemented : After migrating the to-be-deleted data corresponding to the data deletion request to the to-be-deleted queue, the use of the to-be-deleted data is prohibited.
- a data deletion device provided by an embodiment of the present application is applied to a metadata server in a distributed file system, and includes a memory 201 and a processor 202.
- the memory 201 stores a computer program.
- the processor 202 executes the computer program, the following steps are implemented : Receive data deletion requests sent by the client.
- the types of data deletion requests include directory deletion requests and file batch deletion requests.
- another data deletion device may further include: an input port 203 connected to the processor 202 for transmitting commands input from the outside to the processor 202;
- the display unit 204 is used to display the processing result of the processor 202 to the outside;
- the communication module 205 connected to the processor 202 is used to implement the communication between the data deletion device and the outside.
- the display unit 204 may be a display panel, a laser scanning display, etc.; the communication method adopted by the communication module 205 includes, but is not limited to, mobile high-definition link technology (HML), universal serial bus (USB), high-definition multimedia interface (HDMI), Wireless connection: wireless fidelity technology (WiFi), Bluetooth communication technology, low-power Bluetooth communication technology, communication technology based on IEEE802.11s.
- HML mobile high-definition link technology
- USB universal serial bus
- HDMI high-definition multimedia interface
- WiFi wireless fidelity technology
- Bluetooth communication technology Low-power Bluetooth communication technology
- the data to be deleted corresponding to the data deletion request is migrated to the queue to be deleted, and information indicating that the data has been deleted is returned to the client;
- the data to be deleted is processed based on the performance of the distributed file system.
- the computer-readable storage medium provided by the embodiments of the present application is applied to a metadata server in a distributed file system.
- a computer program is stored in the computer-readable storage medium.
- the computer program is executed by a processor, the following steps are implemented: Whether the deleted data is used by other clients; if the data to be deleted is not used by other clients, the data to be deleted is directly deleted; if the data to be deleted is used by other clients, after the other clients finish using the data to be deleted, Delete the data to be deleted.
- the computer-readable storage medium provided by the embodiment of the present application is applied to a metadata server in a distributed file system, and a computer program is stored in the computer-readable storage medium.
- the computer program is executed by a processor, the following steps are implemented:
- the recovery request corresponding to the to-be-deleted data is sent to other clients, so that other clients end the use of the data to be deleted after receiving the recovery request; determine whether the end-use information sent by other clients is received; if the end-use information is received, then Delete the data to be deleted.
- the computer-readable storage medium provided by the embodiments of the present application is applied to a metadata server in a distributed file system, and a computer program is stored in the computer-readable storage medium.
- the computer program is executed by a processor, the following steps are implemented: The real-time performance value of the file system; determine whether the real-time performance value is less than the preset performance value, if not, directly delete the data to be deleted.
- the computer-readable storage medium provided by the embodiment of the present application is applied to a metadata server in a distributed file system, and a computer program is stored in the computer-readable storage medium.
- the computer program is executed by a processor, the following steps are implemented: Delete the data usage of the data; determine whether the data usage is greater than the preset usage value; if the data usage is less than or equal to the preset usage value, directly delete the data to be deleted.
- the computer-readable storage medium provided by the embodiments of the present application is applied to a metadata server in a distributed file system, and a computer program is stored in the computer-readable storage medium.
- a computer program is executed by a processor, the following steps are implemented:
- the types of data deletion requests sent by the client include directory deletion requests and file batch deletion requests.
- RAM random access memory
- ROM read-only memory
- EEPROM electrically programmable ROM
- EEPly erasable programmable ROM registers
- hard disks hard disks
- removable disks or CD-ROMs , Or any other form of storage medium known in the technical field.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种数据删除方法、系统、设备及计算机可读存储介质，应用于分布式文件系统中的元数据服务器，接收分布式文件系统中的客户端发送的数据删除请求（S101）；响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端（S102）；基于分布式文件系统的性能对待删除数据进行处理（S103）。从而提高了客户端删除数据的效率。
Description
本申请要求于2019年11月22日提交中国专利局、申请号为201911157912.9、发明名称为“一种数据删除方法、系统、设备及计算机可读存储介质”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。
本申请涉及分布式存储技术领域，更具体地说，涉及一种数据删除方法、系统、设备及计算机可读存储介质。
在分布式文件系统中，存储有海量数据，当客户端需要将分布式文件系统中的数据进行删除时，需要先从分布式文件系统的元数据服务器中读取待删除数据，然后再进行删除，期间还要进行各种IO确认，待数据完成删除后，元数据服务器才会返回删除成功的消息至客户端，使得客户端进行数据删除的效率较慢。
综上所述，如何提高客户端删除数据的效率是目前本领域技术人员亟待解决的问题。
发明内容
本申请的目的是提供一种数据删除方法，其能在一定程度上解决如何提高客户端删除数据的效率的技术问题。本申请还提供了一种数据删除系统、设备及计算机可读存储介质。
为了实现上述目的，本申请提供如下技术方案：
一种数据删除方法，应用于分布式文件系统中的元数据服务器，包括：
接收所述分布式文件系统中的客户端发送的数据删除请求；
响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；
基于所述分布式文件系统的性能对所述待删除数据进行处理。
优选的，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
判断所述待删除数据是否被其他客户端使用；
若所述待删除数据未被所述其他客户端使用，则直接删除所述待删除数据；
若所述待删除数据被所述其他客户端使用，则待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据。
优选的，所述待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据，包括：
发送与所述待删除数据对应的收回请求至所述其他客户端，以使所述其他客户端接收到所述收回请求后结束对所述待删除数据的使用；
判断是否接收到所述其他客户端发送的结束使用信息；
若接收到所述结束使用信息，则删除所述待删除数据。
优选的，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
获取所述分布式文件系统的实时性能值；
判断所述实时性能值是否小于预设性能值，若否，则直接删除所述待删除数据。
优选的，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：
获取所述待删除数据的数据使用量；
判断所述数据使用量是否大于预设用量值；
若所述数据使用量小于等于所述预设用量值，则直接删除所述待删除数据。
优选的，所述将与所述数据删除请求对应的待删除数据迁移至待删除队列中之后，还包括：
禁止使用所述待删除数据。
优选的，所述接收所述分布式文件系统中的客户端发送的数据删除请求，包括：
接收所述客户端发送的所述数据删除请求，所述数据删除请求的类型包括目录删除请求、文件批量删除请求。
一种数据删除系统，应用于分布式文件系统中的元数据服务器，包括：
第一接收模块，用于接收所述分布式文件系统中的客户端发送的数据删除请求；
第一响应模块，用于响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；
第一处理模块，用于基于所述分布式文件系统的性能对所述待删除数据进行处理。
一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上任一所述数据删除方法的步骤。
一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如上任一所述数据删除方法的步骤。
本申请提供的一种数据删除方法，应用于分布式文件系统中的元数据服务器，接收分布式文件系统中的客户端发送的数据删除请求；响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；基于分布式文件系统的性能对待删除数据进行处理。本申请提供的一种数据删除方法，元数据服务器接收到客户端发送的数据删除请求后，并不是返回待删除数据至客户端，而是将待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端，使得客户端可以快速获知数据已删除的信息，结束数据删除过程，提高了客户端删除数据的效率。本申请提供的一种数据删除系统、设备及计算机可读存储介质也解决了相应技术问题。
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对 实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种数据删除方法的流程图；
图2为本申请实施例提供的一种数据删除系统的结构示意图；
图3为本申请实施例提供的一种数据删除设备的结构示意图；
图4为本申请实施例提供的一种数据删除设备的另一结构示意图。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1，图1为本申请实施例提供的一种数据删除方法的流程图。
本申请实施例提供的一种数据删除方法，应用于分布式文件系统中的元数据服务器，可以包括以下步骤：
步骤S101：接收分布式文件系统中的客户端发送的数据删除请求。
实际应用中，元数据服务器可以先接收分布式文件系统中的客户端发送的数据删除请求，具体的，可以直接接收客户端发送的数据删除请求，也可以通过服务端接收客户端发送的数据删除请求等。
步骤S102：响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端。
实际应用中，元数据服务器在接收到客户端发送的数据删除请求后，并不是查询数据删除请求对应的待删除数据，再将待删除数据发送个客户端执行删除操作，而是，元数据服务器直接响应数据删除请求，将待删除数据迁移至待删除队列，并直接返回表征数据已删除的信息至客户端，使得客户端无需等待即可结束数据删除过程，提高了客户端的数据删除效率。
步骤S103：基于分布式文件系统的性能对待删除数据进行处理。
实际应用中，由于分布式文件系统中，一个数据可能被多个客户端使用等，由此使得待删除数据的删除情况较为复杂，因此，元数据服务器在返回表征数据已删除的信息至客户端后，可以基于分布式文件系统的性能来对待删除数据进行处理。
本申请提供的一种数据删除方法，应用于分布式文件系统中的元数据服务器，接收分布式文件系统中的客户端发送的数据删除请求；响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；基于分布式文件系统的性能对待删除数据进行处理。本申请提供的一种数据删除方法，元数据服务器接收到客户端发送的数据删除请求后，并不是返回待删除数据至客户端，而是将待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端，使得客户端可以快速获知数据已删除的信息，结束数据删除过程，提高了客户端删除数据的效率。
本申请提供的一种数据删除方法，元数据服务器在基于分布式文件系统的性能对待删除数据进行处理时，可以简单的根据待删除数据是否正在被使用来决定是否删除待删除数据，也即元数据服务器可以判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请提供的一种数据删除方法，为了提高元数据服务器删除待删除数据的效率，元数据服务器可以主动通过指令使得其他客户端结束对待删除数据的，则在待其他客户端结束对待删除数据的使用之后，删除待删除数据的过程中，元数据服务器可以发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请提供的一种数据删除方法，在分布式文件系统的性能值较高时， 为了降低分布式文件系统的性能值，可以直接删除待删除数据，也即可以根据分布式文件系统的性能值来决定是否删除待删除数据，则元数据服务器在基于分布式文件系统的性能对待删除数据进行处理时，可以获取分布式文件系统的实时性能值；判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请提供的一种数据删除方法，由于待删除数据被删除后，分布式文件系统便无法应用待删除数据，会对分布式文件系统的性能产生影响，因此，可以基于待删除数据的使用量来决定是否删除待删除数据，则元数据服务器在基于分布式文件系统的性能对待删除数据进行处理时，可以获取待删除数据的数据使用量；判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请提供的一种数据删除方法，为了可以快速删除待删除数据，元数据服务器在将与数据删除请求对应的待删除数据迁移至待删除队列中之后，还可以禁止使用待删除数据。
本申请提供的一种数据删除方法，客户端发送的数据删除请求的类型可以根据实际需要确定，也即元数据服务器在接收分布式文件系统中的客户端发送的数据删除请求时，可以接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
请参阅图2，图2为本申请实施例提供的一种数据删除系统的结构示意图。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，可以包括：
第一接收模块101，用于接收分布式文件系统中的客户端发送的数据删除请求；
第一响应模块102，用于响应数据删除请求，将与数据删除请求对应的 待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；
第一处理模块103，用于基于分布式文件系统的性能对待删除数据进行处理。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一处理模块可以包括：
第一判断子模块，用于判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一判断子模块可以包括：
第一发送单元，用于发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；
第一判断单元，用于判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一处理模块可以包括：
第一获取单元，用于获取分布式文件系统的实时性能值；
第二判断单元，用于判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一处理模块可以包括：
第二获取单元，用于获取待删除数据的数据使用量；
第三判断单元，用于判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，还可以包括：
第一设置模块，用于第一响应模块将与数据删除请求对应的待删除数据迁移至待删除队列中之后，禁止使用待删除数据。
本申请实施例提供的一种数据删除系统，应用于分布式文件系统中的元数据服务器，第一接收模块可以包括：
第一接收单元，用于接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
本申请还提供了一种数据删除设备及计算机可读存储介质，其均具有本申请实施例提供的一种数据删除方法具有的对应效果。请参阅图3，图3为本申请实施例提供的一种数据删除设备的结构示意图。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：
接收分布式文件系统中的客户端发送的数据删除请求；
响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；
基于分布式文件系统的性能对待删除数据进行处理。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程 序，处理器202执行计算机程序时实现如下步骤：获取分布式文件系统的实时性能值；判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：获取待删除数据的数据使用量；判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：将与数据删除请求对应的待删除数据迁移至待删除队列中之后，禁止使用待删除数据。
本申请实施例提供的一种数据删除设备，应用于分布式文件系统中的元数据服务器，包括存储器201和处理器202，存储器201中存储有计算机程序，处理器202执行计算机程序时实现如下步骤：接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
请参阅图4，本申请实施例提供的另一种数据删除设备中还可以包括：与处理器202连接的输入端口203，用于传输外界输入的命令至处理器202；与处理器202连接的显示单元204，用于显示处理器202的处理结果至外界；与处理器202连接的通信模块205，用于实现数据删除设备与外界的通信。显示单元204可以为显示面板、激光扫描使显示器等；通信模块205所采用的通信方式包括但不局限于移动高清链接技术(HML)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线连接：无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：
接收分布式文件系统中的客户端发送的数据删除请求；
响应数据删除请求，将与数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至客户端；
基于分布式文件系统的性能对待删除数据进行处理。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：判断待删除数据是否被其他客户端使用；若待删除数据未被其他客户端使用，则直接删除待删除数据；若待删除数据被其他客户端使用，则待其他客户端结束对待删除数据的使用之后，删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：发送与待删除数据对应的收回请求至其他客户端，以使其他客户端接收到收回请求后结束对待删除数据的使用；判断是否接收到其他客户端发送的结束使用信息；若接收到结束使用信息，则删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：获取分布式文件系统的实时性能值；判断实时性能值是否小于预设性能值，若否，则直接删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：获取待删除数据的数据使用量；判断数据使用量是否大于预设用量值；若数据使用量小于等于预设用量值，则直接删除待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：将与数据删除请求对应的待删除数据迁移至待删除队列中之后，禁止使用待删除数据。
本申请实施例提供的一种计算机可读存储介质，应用于分布式文件系 统中的元数据服务器，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如下步骤：接收客户端发送的数据删除请求，数据删除请求的类型包括目录删除请求、文件批量删除请求。
本申请所涉及的计算机可读存储介质包括随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质。
本申请实施例提供的一种数据删除系统、设备及计算机可读存储介质中相关部分的说明请参见本申请实施例提供的一种数据删除方法中对应部分的详细说明，在此不再赘述。另外，本申请实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明，以免过多赘述。
还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
- 一种数据删除方法，其特征在于，应用于分布式文件系统中的元数据服务器，包括：接收所述分布式文件系统中的客户端发送的数据删除请求；响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；基于所述分布式文件系统的性能对所述待删除数据进行处理。
- 根据权利要求1所述的方法，其特征在于，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：判断所述待删除数据是否被其他客户端使用；若所述待删除数据未被所述其他客户端使用，则直接删除所述待删除数据；若所述待删除数据被所述其他客户端使用，则待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据。
- 根据权利要求2所述的方法，其特征在于，所述待所述其他客户端结束对所述待删除数据的使用之后，删除所述待删除数据，包括：发送与所述待删除数据对应的收回请求至所述其他客户端，以使所述其他客户端接收到所述收回请求后结束对所述待删除数据的使用；判断是否接收到所述其他客户端发送的结束使用信息；若接收到所述结束使用信息，则删除所述待删除数据。
- 根据权利要求1所述的方法，其特征在于，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：获取所述分布式文件系统的实时性能值；判断所述实时性能值是否小于预设性能值，若否，则直接删除所述待删除数据。
- 根据权利要求1所述的方法，其特征在于，所述基于所述分布式文件系统的性能对所述待删除数据进行处理，包括：获取所述待删除数据的数据使用量；判断所述数据使用量是否大于预设用量值；若所述数据使用量小于等于所述预设用量值，则直接删除所述待删除数据。
- 根据权利要求1所述的方法，其特征在于，所述将与所述数据删除请求对应的待删除数据迁移至待删除队列中之后，还包括：禁止使用所述待删除数据。
- 根据权利要求1至6任一项所述的方法，其特征在于，所述接收所述分布式文件系统中的客户端发送的数据删除请求，包括：接收所述客户端发送的所述数据删除请求，所述数据删除请求的类型包括目录删除请求、文件批量删除请求。
- 一种数据删除系统，其特征在于，应用于分布式文件系统中的元数据服务器，包括：第一接收模块，用于接收所述分布式文件系统中的客户端发送的数据删除请求；第一响应模块，用于响应所述数据删除请求，将与所述数据删除请求对应的待删除数据迁移至待删除队列中，并返回表征数据已删除的信息至所述客户端；第一处理模块，用于基于所述分布式文件系统的性能对所述待删除数据进行处理。
- 一种数据删除设备，其特征在于，应用于分布式文件系统中的元数据服务器，包括：存储器，用于存储计算机程序；处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述数据删除方法的步骤。
- 一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述数据删除方法的步骤。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911157912.9A CN110888844B (zh) | 2019-11-22 | 2019-11-22 | 一种数据删除方法、系统、设备及计算机可读存储介质 |
| CN201911157912.9 | 2019-11-22 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2021098260A1 true WO2021098260A1 (zh) | 2021-05-27 |
Family
ID=69748519
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/CN2020/103700 WO2021098260A1 (zh) | 2019-11-22 | 2020-07-23 | 一种数据删除方法、系统、设备及计算机可读存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN110888844B (zh) |
| WO (1) | WO2021098260A1 (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110888844B (zh) * | 2019-11-22 | 2023-03-21 | 浪潮电子信息产业股份有限公司 | 一种数据删除方法、系统、设备及计算机可读存储介质 |
| CN111596864A (zh) * | 2020-05-22 | 2020-08-28 | 柏科数据技术（深圳）股份有限公司 | 一种数据延时删除的方法、装置、服务器及存储介质 |
| CN111625506A (zh) * | 2020-05-29 | 2020-09-04 | 浪潮电子信息产业股份有限公司 | 一种基于删除队列的分布式数据删除方法、装置及设备 |
| CN113590546B (zh) * | 2021-06-30 | 2024-10-18 | 济南浪潮数据技术有限公司 | 一种目录删除方法、装置及存储介质 |
| CN114153390B (zh) * | 2021-11-19 | 2023-08-29 | 苏州浪潮智能科技有限公司 | 一种分布式存储系统中卷删除优化方法、装置及存储介质 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140181033A1 (en) * | 2012-12-21 | 2014-06-26 | Commvault Systems, Inc. | Systems and methods to track deleted files |
| US8775373B1 (en) * | 2008-05-21 | 2014-07-08 | Translattice, Inc. | Deleting content in a distributed computing environment |
| CN104679772A (zh) * | 2013-11-29 | 2015-06-03 | 深圳市腾讯计算机系统有限公司 | 分布式数据仓库中删除文件的方法、装置、设备及系统 |
| CN105095489A (zh) * | 2015-08-18 | 2015-11-25 | 浪潮(北京)电子信息产业有限公司 | 一种分布式文件删除方法、装置和系统 |
| CN106227469A (zh) * | 2016-07-28 | 2016-12-14 | 乐视控股（北京）有限公司 | 用于分布式存储集群的数据删除方法及系统 |
| CN107330061A (zh) * | 2017-06-29 | 2017-11-07 | 郑州云海信息技术有限公司 | 一种基于分布式存储的文件删除方法及装置 |
| CN108959399A (zh) * | 2018-06-04 | 2018-12-07 | 平安科技（深圳）有限公司 | 分布式数据删除流控方法、装置、电子设备及存储介质 |
| CN109614377A (zh) * | 2018-12-07 | 2019-04-12 | 浪潮电子信息产业股份有限公司 | 分布式文件系统的文件删除方法、装置、设备及存储介质 |
| CN109976668A (zh) * | 2019-03-14 | 2019-07-05 | 北京达佳互联信息技术有限公司 | 数据删除方法、数据删除装置和计算机可读存储介质 |
| CN109992213A (zh) * | 2019-04-10 | 2019-07-09 | 苏州浪潮智能科技有限公司 | 数据删除方法、系统、装置及计算机可读存储介质 |
| CN110888844A (zh) * | 2019-11-22 | 2020-03-17 | 浪潮电子信息产业股份有限公司 | 一种数据删除方法、系统、设备及计算机可读存储介质 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100458776C (zh) * | 2005-01-13 | 2009-02-04 | 龙搜（北京）科技有限公司 | 网络缓存管理的系统和方法 |
| CN100375093C (zh) * | 2005-03-18 | 2008-03-12 | 联想(北京)有限公司 | 多线程元数据的处理方法 |
| CN101685450B (zh) * | 2008-09-27 | 2011-08-24 | 比亚迪股份有限公司 | 一种在嵌入式操作系统中实现数据库功能的方法 |
| KR101553712B1 (ko) * | 2011-10-21 | 2015-09-17 | 네이버 주식회사 | 로그에 기반하여 데이터 정합성을 유지하는 분산 저장 시스템 및 방법 |
| CN107977376B (zh) * | 2016-10-24 | 2020-07-07 | 腾讯科技（深圳）有限公司 | 分布式数据库系统及事务处理方法 |
| CN109117447A (zh) * | 2017-06-22 | 2019-01-01 | 深圳联友科技有限公司 | 一种缓存网页的服务器数据访问方法及装置 |
| CN110119387A (zh) * | 2019-05-23 | 2019-08-13 | 苏州浪潮智能科技有限公司 | 一种文件删除方法、装置、设备及可读存储介质 |
-
2019
- 2019-11-22 CN CN201911157912.9A patent/CN110888844B/zh active Active
-
2020
- 2020-07-23 WO PCT/CN2020/103700 patent/WO2021098260A1/zh active Application Filing
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8775373B1 (en) * | 2008-05-21 | 2014-07-08 | Translattice, Inc. | Deleting content in a distributed computing environment |
| US20140181033A1 (en) * | 2012-12-21 | 2014-06-26 | Commvault Systems, Inc. | Systems and methods to track deleted files |
| CN104679772A (zh) * | 2013-11-29 | 2015-06-03 | 深圳市腾讯计算机系统有限公司 | 分布式数据仓库中删除文件的方法、装置、设备及系统 |
| CN105095489A (zh) * | 2015-08-18 | 2015-11-25 | 浪潮(北京)电子信息产业有限公司 | 一种分布式文件删除方法、装置和系统 |
| CN106227469A (zh) * | 2016-07-28 | 2016-12-14 | 乐视控股（北京）有限公司 | 用于分布式存储集群的数据删除方法及系统 |
| CN107330061A (zh) * | 2017-06-29 | 2017-11-07 | 郑州云海信息技术有限公司 | 一种基于分布式存储的文件删除方法及装置 |
| CN108959399A (zh) * | 2018-06-04 | 2018-12-07 | 平安科技（深圳）有限公司 | 分布式数据删除流控方法、装置、电子设备及存储介质 |
| CN109614377A (zh) * | 2018-12-07 | 2019-04-12 | 浪潮电子信息产业股份有限公司 | 分布式文件系统的文件删除方法、装置、设备及存储介质 |
| CN109976668A (zh) * | 2019-03-14 | 2019-07-05 | 北京达佳互联信息技术有限公司 | 数据删除方法、数据删除装置和计算机可读存储介质 |
| CN109992213A (zh) * | 2019-04-10 | 2019-07-09 | 苏州浪潮智能科技有限公司 | 数据删除方法、系统、装置及计算机可读存储介质 |
| CN110888844A (zh) * | 2019-11-22 | 2020-03-17 | 浪潮电子信息产业股份有限公司 | 一种数据删除方法、系统、设备及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110888844A (zh) | 2020-03-17 |
| CN110888844B (zh) | 2023-03-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2021098260A1 (zh) | 一种数据删除方法、系统、设备及计算机可读存储介质 | |
| JP6244592B2 (ja) | 列指向データベース処理方法および処理デバイス | |
| EP2947582A1 (en) | Computing device and method for executing database operation command | |
| CN111737221B (zh) | 集群文件系统的数据读写方法、装置及设备和存储介质 | |
| CN110737388A (zh) | 数据预读方法、客户端、服务器以及文件系统 | |
| US11868333B2 (en) | Data read/write method and apparatus for database | |
| US9934390B2 (en) | Data redaction system | |
| WO2019041670A1 (zh) | 一种降低功能页面请求次数的方法、存储介质、设备及系统 | |
| WO2020119709A1 (zh) | 数据合并的实现方法、装置、系统及存储介质 | |
| WO2024164651A1 (zh) | 一种请求处理方法、系统、设备及计算机可读存储介质 | |
| WO2016192605A1 (zh) | 一种数据处理方法和装置 | |
| CN111596864A (zh) | 一种数据延时删除的方法、装置、服务器及存储介质 | |
| CN108932329B (zh) | 一种数据查询处理方法及装置 | |
| CN113806295B (zh) | 一种文件迁移方法、系统、设备及计算机可读存储介质 | |
| CN111190861A (zh) | 热点文件管理方法、服务器及计算机可读存储介质 | |
| US12001458B2 (en) | Multi-cloud object store access | |
| EP4040279A1 (en) | Method and apparatus for accessing solid state disk | |
| CN110795389B (zh) | 基于存储快照的拷贝方法、用户设备、存储介质及装置 | |
| US10877685B2 (en) | Methods, devices and computer program products for copying data between storage arrays | |
| WO2017173844A1 (zh) | 一种目录读取的方法、装置及系统 | |
| WO2015058628A1 (zh) | 文件的访问方法及装置 | |
| US8407266B1 (en) | Method and system for automatically saving a document to multiple file formats | |
| WO2023279900A1 (zh) | 日志文件发送方法、装置和客户端 | |
| CN112650723B (zh) | 一种文件共享方法、装置、设备及计算机可读存储介质 | |
| CN117493276B (zh) | 针对Ceph文件的读取方法、装置、服务器及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20889708 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 20889708 Country of ref document: EP Kind code of ref document: A1 |