CN109766317A - 一种文件的删除方法、装置、设备及存储介质 - Google Patents

一种文件的删除方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN109766317A
CN109766317A CN201910016357.1A CN201910016357A CN109766317A CN 109766317 A CN109766317 A CN 109766317A CN 201910016357 A CN201910016357 A CN 201910016357A CN 109766317 A CN109766317 A CN 109766317A
Authority
CN
China
Prior art keywords
file
target directory
batch
files
deleted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910016357.1A
Other languages
English (en)
Other versions
CN109766317B (zh
Inventor
罗浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Electronic Information Industry Co Ltd
Original Assignee
Inspur Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Electronic Information Industry Co Ltd filed Critical Inspur Electronic Information Industry Co Ltd
Priority to CN201910016357.1A priority Critical patent/CN109766317B/zh
Publication of CN109766317A publication Critical patent/CN109766317A/zh
Application granted granted Critical
Publication of CN109766317B publication Critical patent/CN109766317B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种文件的删除方法,包括:接收由中间层根据客户端发出的文件删除请求解析得出的操作指令;根据操作指令为对应的目标目录加锁;将目标目录下的文件批量删除,因此,本方法大大减少了删除目标目录中的文件所需消耗的时间,提高了删除目录下文件的效率,从而能够更快释放系统的CPU、内存等资源,从而提高系统的整体性能。本申请还公开了一种文件的删除装置、设备及计算机可读存储介质,均具有上述有益效果。

Description

一种文件的删除方法、装置、设备及存储介质
技术领域
本发明涉及文件处理领域,特别涉及一种文件的删除方法、装置、设备及计算机可读存储介质。
背景技术
目前,分布式文件系统的应用场景越来越广泛,因此,对分布式文件系统的使用性能的要求越来越高。对目标目录的删除作为分布式文件系统的基本使用操作,现有技术中,在删除目标目录中的文件时,元数据服务器是根据中间层逐一发送的删除操作指令对目标目录中的文件逐一执行删除操作。显然,在这过程中,不仅元数据服务器与中间层之间的信息交互需要消耗大量的时间;而且,元数据服务器每次在执行删除文件操作时,都需要为对应的文件加锁,由于锁的数量是有限的,因此若所需的锁被其他的文件占用时,元数据服务器需要等待锁被释放,才能继续进行文件删除操作,这样一来,又将消耗大量的时间,因此,现有技术的方法在删除目标目录中的文件时,需要消耗大量的时间,严重降低了删除目录下的文件的效率。
因此,如何减少删除目标目录中的文件所需消耗的时间,提高删除效率是本领域技术人员目前需要解决的技术问题。
发明内容
有鉴于此,本发明的目的在于提供一种文件的删除方法,能够大大减少删除目标目录中的文件所需消耗的时间,提高删除目录下文件的效率,从而能够提高系统的整体性能;本发明的另一目的是提供一种文件的删除装置、设备及计算机可读存储介质,均具有上述有益效果。
为解决上述技术问题,本发明提供一种文件的删除方法,包括:
接收由中间层根据客户端发出的文件删除请求解析得出的操作指令;
根据所述操作指令为对应的目标目录加锁;
将所述目标目录下的文件批量删除。
优选地,所述将所述目标目录下的文件批量删除具体包括:
判断所述目标目录下的文件是否完整;
若是,则将所述文件批量删除;
若否,则从对象存储服务器中获取对应的文件进行缓存,并进入所述将所述文件批量删除的步骤。
优选地,所述文件包括文件信息和文件元数据信息。
优选地,在所述将所述目标目录下的文件批量删除之后,进一步包括:
删除所述目标目录。
优选地,在所述将所述目标目录下的文件批量删除之后,进一步包括:
将执行批量删除操作的时间和删除的文件名称记录至日志。
优选地,在所述将所述目标目录下的文件批量删除之后,进一步包括:
向所述客户端反馈提示信息。
为解决上述技术问题,本发明还提供一种文件的删除装置,包括:
接收模块,用于接收由中间层根据客户端发出的文件删除请求解析得出的操作指令;
设置模块,用于根据所述操作指令为对应的目标目录加锁;
删除模块,用于将所述目标目录下的文件批量删除。
为解决上述技术问题,本发明还提供一种文件的删除设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现上述任一种文件的删除方法的步骤。
为解决上述技术问题,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一种文件的删除方法的步骤。
本发明提供的文件的删除方法,在接收到接收由中间层根据客户端发出的文件删除请求解析得出的操作指令之后,根据操作指令为对应的目标目录加锁,然后将目标目录中的文件批量删除,从而避免了在删除每个文件时均需要与中间层进行信息交互,从而节省大量的时间;并且,由于本方法对整个目录加锁后,便对目录中的文件进行批量删除,避免了在对多个文件进行删除的过程中需要等待其他客户端释放锁,因此进一步节省了时间。因此,本方法大大减少了删除目标目录中的文件所需消耗的时间,提高了删除目录下文件的效率,从而能够更快释放系统的CPU、内存等资源,从而提高系统的整体性能。
为解决上述技术问题,本发明还提供了一种文件的删除装置、设备及计算机可读存储介质,均具有上述有益效果。
附图说明
为了更清楚地说明本发明实施例或现有技术的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种文件的删除方法的流程图;
图2为本发明实施例提供的一种文件的删除装置的结构图;
图3为本发明实施例提供的一种文件的删除设备的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例的核心是提供一种文件的删除方法,能够大大减少删除目标目录中的文件所需消耗的时间,提高删除目录下文件的效率,从而能够提高系统的整体性能;本发明的另一核心是提供一种文件的删除装置、设备及计算机可读存储介质,均具有上述有益效果。
为了使本领域技术人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。
图1为本发明实施例提供的一种文件的删除方法的流程图。如图1所示,一种文件的删除方法包括:
S10:接收由中间层根据客户端发出的文件删除请求解析得出的操作指令。
具体的,当客户端发起对目标目录中的文件进行删除的文件删除请求时,中间层将该文件删除请求解析为操作指令并发送给元数据服务器,以便于元数据服务器接收该操作指令,并根据该操作指令执行对文件的删除操作。
需要说明的是,中间层也即静态数据连接库,起到链接程序和函数(或子过程)的作用,在本实施例中,中间层可以具体为lib库,此处不作为具体的限定。
S20:根据操作指令为对应的目标目录加锁。
在元数据服务器接收到由中间层根据客户端发出的文件删除请求解析得出的操作指令之后,根据操作指令为对应的目标目录加锁。
本实施例中,通过操作指令为目标目录加锁,从而在对目标目录加锁之后,能够对目标目录下的文件进行操作,并且能够避免在当前的元数据服务器对目标目录下的文件进行操作时,有其他客户端再对该目标目录中的文件进行访问。
S30:将目标目录下的文件批量删除。
具体的,在对目标目录加锁之后,便可以对目标目录下的文件执行批量删除操作。具体的,由于是对目标目录加锁的,因此通过遍历目标目录下的所有的文件,并将与操作指令对应的文件删除。
可以理解的是,由于预先对目标目录加锁,相当于对目标目录下的所有文件均加锁,因此可以批量对目标目录下的文件进行删除操作。具体的,此处的删除操作可以是对文件逐一进行删除的操作,也可以是同时对多个文件进行删除,不做具体的限定。
需要说明的是,在批量删除目标目录下的文件时,不仅需要将缓存的文件进行删除,还需要对删除文件进行落盘处理,也就是将存储于对象存储服务器中的文件删除。
本发明实施例提供的文件的删除方法,在接收到接收由中间层根据客户端发出的文件删除请求解析得出的操作指令之后,根据操作指令为对应的目标目录加锁,然后将目标目录中的文件批量删除,从而避免了在删除每个文件时均需要与中间层进行信息交互,从而节省大量的时间;并且,由于本方法对整个目录加锁后,便对目录中的文件进行批量删除,避免了在对多个文件进行删除的过程中需要等待其他客户端释放锁,因此进一步节省了时间。因此,本方法大大减少了删除目标目录中的文件所需消耗的时间,提高了删除目录下文件的效率,从而能够更快释放系统的CPU、内存等资源,从而提高系统的整体性能。
在上述实施例的基础上,本实施例对技术方案作了进一步的说明和优化,具体的,将目标目录下的文件批量删除具体包括:
判断目标目录下的文件是否完整;
若是,则将文件批量删除;
若否,则从对象存储服务器中获取对应的文件进行缓存,并进入将文件批量删除的步骤。
具体的,在对目标目录下的文件进行批量删除时,首先需要判断目标目录下的文件是否完整。具体的,可以通过检查表示文件完整性的字段(标识符),根据字段的类型判断文件是否完整。一般的,当字段为fause时,表示文件不完整,因此需要从对象存储服务器中将与操作指令相对应的文件缓存到元数据服务器中,以便元数据服务器将目标目录中的文件删除。也就是说,当需要删除文件时,需要将存储于对象存储服务器中的文件缓存至元数据服务器中,并更新目标目录,使得目标目录包括有所有的需要删除的文件的信息,进而,根据操作指令将目标目录中的文件删除。当字段为true时,表示文件是完整的,因此直接根据操作指令将目标目录下的文件批量删除。
本实施例中,通过判断目标目录下的文件是否完整,对目标目录下的完整的文件进行删除,避免存在遗漏删除的文件。
作为优选的实施方式,文件包括文件信息和文件元数据信息。
需要说明的是,在本实施例中,在删除文件的过程中,不仅删除存储的文件信息,还将对应的文件元数据信息进行删除。文件元数据信息是用于描述文件信息的信息。也就是说,在删除文件的过程中,优选地将文件信息和文件元数据信息都进行删除,以避免文件元数据信息依然占用存储空间。
在上述实施例的基础上,本实施例对技术方案作了进一步的说明和优化,具体的,在将目标目录下的文件批量删除之后,进一步包括:
删除目标目录。
在本实施例中,是在将目标目录下的文件批量删除之后,进一步删除目标目录。目标目录上记载的是文件的概要信息,如文件名称等,在将目标目录下的文件删除之后,目标目录只是一个记载有文件的概要信息的目录,因此通过进一步删除目标目录,以保持系统的整洁性。
在上述实施例的基础上,本实施例对技术方案作了进一步的说明和优化,具体的,在将目标目录下的文件批量删除之后,进一步包括:
将执行批量删除操作的时间和删除的文件名称记录至日志。
具体的,本实施例是在将目标目录下的文件批量删除之后,将执行该批量操作的时间和删除的文件名称记录至日志。需要说明的是,删除的文件名称是一种用于标识所删除的文件的信息,文件名称一般能够特征性地标识文件,使用方便,在其他实施例中可以用其他的信息标识文件,此处不作为具体的限定。
可见,通过将批量删除操作的时间和删除的文件名称记录至日志,以便于后续通过查看记录的日志了解文件删除的情况,从而进一步提升用户的使用体验。
在上述实施例的基础上,本实施例对技术方案作了进一步的说明和优化,具体的,在将目标目录下的文件批量删除之后,进一步包括:
向客户端反馈提示信息。
具体的,提示信息指的是用于反馈当前完成批量删除操作的信息,本实施例对提示信息的具体类型不做限定,例如,提示信息可以是预设的字符、图像等。本实施例是在将目标目录下的文件批量删除之后,进一步向客户端反馈提示信息,使客户端及时知晓信息,并且能够及时地执行其他的业务操作,进一步提高用户的使用体验。
上文对于本发明提供的一种文件的删除方法的实施例进行了详细的描述,本发明还提供了一种与该方法对应的文件的删除装置、设备及计算机可读存储介质,由于装置、设备及计算机可读存储介质部分的实施例与方法部分的实施例相互照应,因此装置、设备及计算机可读存储介质部分的实施例请参见方法部分的实施例的描述,这里暂不赘述。
图2为本发明实施例提供的一种文件的删除装置的结构图,如图2所示,一种文件的删除装置包括:
接收模块21,用于接收由中间层根据客户端发出的文件删除请求解析得出的操作指令;
设置模块22,用于根据操作指令为对应的目标目录加锁;
删除模块23,用于将目标目录下的文件批量删除。
本发明实施例提供的文件的删除装置,具有上述文件的删除方法的有益效果。
图3为本发明实施例提供的一种文件的删除设备的结构图,如图3所示,一种文件的删除设备包括:
存储器31,用于存储计算机程序;
处理器32,用于执行计算机程序时实现如上述文件的删除方法的步骤。
本发明实施例提供的文件的删除设备,具有上述文件的删除方法的有益效果。
为解决上述技术问题,本发明还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现如上述文件的删除方法的步骤。
本发明实施例提供的计算机可读存储介质,具有上述文件的删除方法的有益效果。
以上对本发明所提供的文件的删除方法、装置、设备及计算机可读存储介质进行了详细介绍。本文中应用了具体实施例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。

Claims (9)

1.一种文件的删除方法,其特征在于,包括:
接收由中间层根据客户端发出的文件删除请求解析得出的操作指令;
根据所述操作指令为对应的目标目录加锁;
将所述目标目录下的文件批量删除。
2.根据权利要求1所述的方法,其特征在于,所述将所述目标目录下的文件批量删除具体包括:
判断所述目标目录下的文件是否完整;
若是,则将所述文件批量删除;
若否,则从对象存储服务器中获取对应的文件进行缓存,并进入所述将所述文件批量删除的步骤。
3.根据权利要求2所述的方法,其特征在于,所述文件包括文件信息和文件元数据信息。
4.根据权利要求1所述的方法,其特征在于,在所述将所述目标目录下的文件批量删除之后,进一步包括:
删除所述目标目录。
5.根据权利要求2所述的方法,其特征在于,在所述将所述目标目录下的文件批量删除之后,进一步包括:
将执行批量删除操作的时间和删除的文件名称记录至日志。
6.根据权利要求1至5任一项所述的方法,其特征在于,在所述将所述目标目录下的文件批量删除之后,进一步包括:
向所述客户端反馈提示信息。
7.一种文件的删除装置,其特征在于,包括:
接收模块,用于接收由中间层根据客户端发出的文件删除请求解析得出的操作指令;
设置模块,用于根据所述操作指令为对应的目标目录加锁;
删除模块,用于将所述目标目录下的文件批量删除。
8.一种文件的删除设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至6任一项所述的文件的删除方法的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的文件的删除方法的步骤。
CN201910016357.1A 2019-01-08 2019-01-08 一种文件的删除方法、装置、设备及存储介质 Active CN109766317B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910016357.1A CN109766317B (zh) 2019-01-08 2019-01-08 一种文件的删除方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910016357.1A CN109766317B (zh) 2019-01-08 2019-01-08 一种文件的删除方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN109766317A true CN109766317A (zh) 2019-05-17
CN109766317B CN109766317B (zh) 2022-04-22

Family

ID=66453573

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910016357.1A Active CN109766317B (zh) 2019-01-08 2019-01-08 一种文件的删除方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN109766317B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110119387A (zh) * 2019-05-23 2019-08-13 苏州浪潮智能科技有限公司 一种文件删除方法、装置、设备及可读存储介质
CN110941591A (zh) * 2019-11-22 2020-03-31 浪潮电子信息产业股份有限公司 一种文件删除方法、装置、设备及可读存储介质
CN111078643A (zh) * 2019-12-16 2020-04-28 新华三大数据技术有限公司 一种批量删除文件的方法、装置及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130060739A1 (en) * 2011-09-01 2013-03-07 Microsoft Corporation Optimization of a Partially Deduplicated File
CN103778208A (zh) * 2014-01-15 2014-05-07 广州普邦园林股份有限公司 一种用于协同工作目录或文档访问的方法和系统
CN104156474A (zh) * 2014-08-25 2014-11-19 曙光信息产业股份有限公司 一种分布式文件系统中文件的快速删除方法
CN104217174A (zh) * 2014-09-05 2014-12-17 四川长虹电器股份有限公司 分布式文件安全存储系统及其存储方法
CN106960055A (zh) * 2017-04-01 2017-07-18 广东浪潮大数据研究有限公司 一种文件删除方法及装置
CN107220323A (zh) * 2017-05-22 2017-09-29 郑州云海信息技术有限公司 一种文件删除方法及系统
CN107291878A (zh) * 2017-06-19 2017-10-24 郑州云海信息技术有限公司 一种分布式存储文件系统的数据删除方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130060739A1 (en) * 2011-09-01 2013-03-07 Microsoft Corporation Optimization of a Partially Deduplicated File
CN103778208A (zh) * 2014-01-15 2014-05-07 广州普邦园林股份有限公司 一种用于协同工作目录或文档访问的方法和系统
CN104156474A (zh) * 2014-08-25 2014-11-19 曙光信息产业股份有限公司 一种分布式文件系统中文件的快速删除方法
CN104217174A (zh) * 2014-09-05 2014-12-17 四川长虹电器股份有限公司 分布式文件安全存储系统及其存储方法
CN106960055A (zh) * 2017-04-01 2017-07-18 广东浪潮大数据研究有限公司 一种文件删除方法及装置
CN107220323A (zh) * 2017-05-22 2017-09-29 郑州云海信息技术有限公司 一种文件删除方法及系统
CN107291878A (zh) * 2017-06-19 2017-10-24 郑州云海信息技术有限公司 一种分布式存储文件系统的数据删除方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110119387A (zh) * 2019-05-23 2019-08-13 苏州浪潮智能科技有限公司 一种文件删除方法、装置、设备及可读存储介质
CN110941591A (zh) * 2019-11-22 2020-03-31 浪潮电子信息产业股份有限公司 一种文件删除方法、装置、设备及可读存储介质
CN111078643A (zh) * 2019-12-16 2020-04-28 新华三大数据技术有限公司 一种批量删除文件的方法、装置及电子设备
CN111078643B (zh) * 2019-12-16 2022-07-22 新华三大数据技术有限公司 一种批量删除文件的方法、装置及电子设备

Also Published As

Publication number Publication date
CN109766317B (zh) 2022-04-22

Similar Documents

Publication Publication Date Title
CN105357296B (zh) 一种Docker云平台下弹性缓存系统
CN109766317A (zh) 一种文件的删除方法、装置、设备及存储介质
CN109710615B (zh) 数据库的访问管理方法、系统、电子设备和存储介质
CN112039969B (zh) 基于Redis分布式锁开发的AWS S3 URL上传方法
JP3942941B2 (ja) 通信装置及びプラグインモジュール制御方法及びコンピュータに実行させるためのプログラム及びコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
CN110457281A (zh) 数据处理方法、装置、设备及介质
EP3495981B1 (en) Directory deletion method and device, and storage server
CN107689976B (zh) 一种文件传输方法及装置
CN109471843B (zh) 一种元数据缓存方法、系统及相关装置
KR20230093420A (ko) 데이터 세트 및 노드 캐시 기반의 스케줄링 방법 및 장치
CN109739435A (zh) 文件存储和更新方法及装置
CN114553960A (zh) 一种数据缓存方法、装置、设备及存储介质
CN113885780A (zh) 数据同步方法、装置、电子设备、系统和存储介质
CN109697112B (zh) 分布式集约化一站式作业系统和实现方法
JP2010113617A (ja) クラスタシステム制御プログラム、クラスタシステム、クラスタシステム制御方法
CN109246222A (zh) 服务请求处理方法、装置、系统及计算机可读存储介质
US9948587B2 (en) Data deduplication at the network interfaces
CN114218317B (zh) 进度信息管控方法、微服务装置、电子设备及存储介质
CN114490540B (zh) 数据存储方法、介质、装置和计算设备
CN109634759A (zh) 一种分布式存储系统的配额管理方法、系统及相关组件
JP2004178336A (ja) 運用管理システム、管理計算機、監視対象計算機、運用管理方法及びプログラム
CN110288309B (zh) 数据交互方法、装置、系统、计算机设备以及存储介质
CN113808711A (zh) Dicom文件处理方法、装置、计算机设备和存储介质
CN113687962A (zh) 一种请求处理方法、装置、设备及存储介质
CN107615259A (zh) 一种数据处理方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant