CN110750503A - 一种文件删除速度控制方法、装置、设备及可读存储介质 - Google Patents
一种文件删除速度控制方法、装置、设备及可读存储介质 Download PDFInfo
- Publication number
- CN110750503A CN110750503A CN201910927727.7A CN201910927727A CN110750503A CN 110750503 A CN110750503 A CN 110750503A CN 201910927727 A CN201910927727 A CN 201910927727A CN 110750503 A CN110750503 A CN 110750503A
- Authority
- CN
- China
- Prior art keywords
- deleted
- file
- objects
- dividing
- queue
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000012217 deletion Methods 0.000 title claims abstract description 111
- 230000037430 deletion Effects 0.000 title claims abstract description 111
- 238000000034 method Methods 0.000 title claims abstract description 72
- 238000004590 computer program Methods 0.000 claims description 11
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 4
- 239000012634 fragment Substances 0.000 description 2
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
- G06F16/162—Delete operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种文件删除速度控制方法，包括：获取删除指令，按照预设划分规则将删除指令指定的待删除文件划分为一个或多个待删除对象；将待删除对象放入待删除对象队列的队尾；删除待删除对象队列中前第一数值个待删除对象；其中，第一数值为整数；该方法通过限制每次删除的待删除对象的数量，可以准确控制待删除对象的删除速度，进而实现对文件删除速度的准确控制，解决了现有删除速度控制方法仅能对删除速度进行大概控制而无法准确控制删除速度的问题。此外，本发明还提供了一种文件删除速度控制装置、设备及计算机可读存储介质，同样具有上述有益效果。
Description
技术领域
本发明涉及分布式文件系统领域，特别涉及一种文件删除速度控制方法、文件删除速度控制装置、文件删除速度控制设备及计算机可读存储介质。
背景技术
随着云计算、大数据的快速发展，数据呈现爆炸式增长，单纯通过增加硬盘个数来扩展计算机文件系统的存储容量的方式，已经无法满足信息爆炸时代指数倍增长的数据的存储需求，分布式文件系统应用而生。
分布式文件系统(Distributed File System)为基于客户端/服务器模式的文件系统管理的物理存储资源，通过计算机网络与节点相连，可以有效解决数据的存储和管理难题。有时，分布式文件系统需要对存储的文件进行删除处理，在某种情况下需要提高删除速度以便快速删除，在其他情况下可能需要限制删除速度，以免使用过多计算资源用于删除操作而影响其他业务的进行。现有技术仅能对删除速度进行大概地控制，无法准确控制删除速度。
因此，如何解决现有文件删除速度控制方法无法准确控制删除速度的问题，是本领域技术人员需要解决的技术问题。
发明内容
有鉴于此，本发明的目的在于提供一种文件删除速度控制方法、文件删除速度控制装置、文件删除速度控制设备及计算机可读存储介质，解决了现有文件删除速度控制方法无法准确控制删除速度的问题。
为解决上述技术问题，本发明提供了一种文件删除速度控制方法，包括：
获取删除指令，按照预设划分规则将所述删除指令指定的待删除文件划分为一个或多个待删除对象；
将所述待删除对象放入待删除对象队列的队尾；
删除所述待删除对象队列中前第一数值个待删除对象；其中，所述第一数值为整数。
可选的，所述按照预设划分规则将所述删除指令指定的待删除文件划分为一个或多个待删除对象，包括：
将所述删除指令指定的所述待删除文件放入待删除文件队列的队尾；
判断所述待删除文件队列中前第二数值个待删除文件是否均被划分为待删除对象；其中，所述第二数值为整数；
若不是，则将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照所述预设划分规则划分为一个或多个待删除对象。
可选的，所述将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照所述预设划分规则划分为一个或多个待删除对象，包括：
判断未被划分为待删除对象的待删除文件的大小是否大于文件大小阈值；
若否，则将未被划分为待删除对象的待删除文件确定为一个待删除对象；
若是，则按照所述预设划分规则将未被划分为待删除对象的待删除文件划分为多个所述待删除对象。
可选的，还包括：
获取参数设定指令，根据所述参数设定指令将所述第二数值设定为指定值。
可选的，在根据所述参数设定指令将所述第二数值设定为指定值之后，还包括：
判断所述第二数值是否由0调节为非0值；
若确定所述第二数值由0调节为非0值，则判断所述待删除对象队列中是否存在待删除对象；
若所述待删除对象队列中不存在所述对象，则随机选取所述待删除文件队列中的任一所述待删除文件作为流程启动文件，并将所述流程启动文件划分为一个或多个待删除对象。
本发明还提供了一种文件删除速度控制装置，包括：
文件划分模块，用于获取删除指令，按照预设划分规则将所述删除指令指定的待删除文件划分为一个或多个待删除对象；
对象队列更新模块，用于将所述待删除对象放入待删除对象队列的队尾；
删除模块，用于删除所述待删除对象队列中前第一数值个待删除对象；其中，所述第一数值为整数。
可选的，所述文件划分模块，包括：
文件队列更新单元，用于将所述删除指令指定的所述待删除文件放入待删除文件队列的队尾；
划分情况判断单元，用于判断所述待删除文件队列中前第二数值个待删除文件是否均被划分为待删除对象；其中，所述第二数值为整数；
划分单元，用于将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照所述预设划分规则划分为一个或多个待删除对象。
可选的，所述划分单元，包括：
文件大小判断子单元，用于判断未被划分为待删除对象的待删除文件的大小是否大于文件大小阈值；
第一划分子单元，用于将未被划分为待删除对象的待删除文件确定为一个待删除对象；
第二划分子单元，用于按照所述预设划分规则将未被划分为待删除对象的待删除文件划分为多个所述待删除对象。
本发明还提供了一种文件删除速度控制设备，包括存储器和处理器，其中：
所述存储器，用于保存计算机程序；
所述处理器，用于执行所述计算机程序，以实现上述的文件删除速度控制方法。
本发明还提供了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现上述的文件删除速度控制方法。
本发明提供的文件删除速度控制方法，获取删除指令，按照预设划分规则将删除指令指定的待删除文件划分为一个或多个待删除对象；将待删除对象放入待删除对象队列的队尾；删除待删除对象队列中前第一数值个待删除对象；其中，第一数值为整数。
可见，该方法将待删除文件分割为一个或多个待删除对象，将待删除对象放入待删除对象队列的队尾，并删除待删除对象队列中前第一数值个待删除对象。通过限制每次删除的待删除对象的数量，可以准确控制待删除对象的删除速度，进而实现对文件删除速度的准确控制，解决了现有删除速度控制方法仅能对删除速度进行大概控制而无法准确控制删除速度的问题。同时准确地控制了用于进行删除操作的计算资源，避免分布式文件系统因执行删除操作而影响其他业务的进行。
此外，本发明还提供了一种文件删除速度控制装置、文件删除速度控制设备及计算机可读存储介质，同样具有上述有益效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种文件删除速度控制方法流程图；
图2为本发明实施例提供的另一种文件删除速度控制方法流程图；
图3为本发明实施例提供的另一种文件删除速度控制方法流程图；
图4为本发明实施例提供的一种文件删除速度控制装置的结构示意图；
图5为本发明实施例提供的一种文件删除速度控制设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参考图1，图1为本发明实施例提供的一种文件删除速度控制方法流程图。该方法包括：
S101：获取删除指令，按照预设划分规则将删除指令指定的待删除文件划分为一个或多个待删除对象。
删除指令为指定对某个或某些文件进行删除的指令，其具体形式和内容可以有多种。在获取删除指令后，按照预设划分规则将删除指令指定的待删除文件划分为一个或多个待删除对象。预设划分规则可以用于将待删除文件划分为一个或多个大小相等的待删除对象；或者可以用于将待删除文件划分为一个或多个大小相等的文件碎片后对文件碎片进行处理，得到一个或多个待删除对象。本实施例中，可以设置文件大小阈值，文件大小阈值与每个待删除对象的大小相等，用来与待删除文件的大小进行比较。当待删除文件的大小小于文件大小阈值时，则将该待删除文件整体划分为一个待删除对象，即将该待删除文件确定为一个待删除对象；当待删除文件的大小大于文件大小阈值时，则将该待删除文件划分为多个待删除对象。文件大小阈值的具体数值，即每个待删除对象的具体大小，本实施例不做限定。在实际应用中，一般设置为4M。
本实施例并不限定执行获取删除指令的频率，例如可以实时获取删除指令，或者是按照预设周期获取删除指令。
S102：将待删除对象放入待删除对象队列的队尾。
待删除对象队列用于存放待删除文件划分的待删除对象，其长度本实施例不做限定，新划分得到的待删除对象要放入待删除对象队列的队尾。
在将待删除文件划分为待删除对象后，将所有划分出来的待删除对象翻入待删除对象队列的队尾。具体的放入方法本实施例不做限定，例如可以按照待删除对象在待删除文件中的顺序将待删除对象放入待删除队列。具体的，当删除指令指定了一个待删除文件，该待删除文件划分出三个待删除对象，则将这三个待删除对象按照其在该待删除文件中的先后位置以此先后放入待删除对象队列的队尾；或者当删除指令制定了第一文件和第二文件两个待删除文件，每个均划分出五个待删除对象，则可以先将第一文件划分出的五个待删除对象放入待删除对象队列的队尾，再将第二文件划分出的五个待删除对象放入待删除对象队列的队尾。也可以随机将本次划分得到的待删除对象放入待删除对象队列的队尾。
S103：删除待删除对象队列中前第一数值个待删除对象；其中，第一数值为整数。
第一数值为整数，其表示了每次删除待删除对象时被删除的待删除对象的个数。第一数值可以改变。通过改变第一数值的大小，可以调节文件删除速度的快慢，例如当第一数值较大时，每次即可删除较多的待删除对象，当然所需的计算资源也较多；当第一数值较小时，每次删除操作删除的待删除对象较少，所需的计算资源也较少。通过调节第一数值的大小，可以实现对文件删除速度的准确控制。现有文件删除速度控制方法大多仅控制文件系统中可以同时处于删除状态的文件数，没有对每次删除的待删除对象数进行控制。由于文件大小不一，因此文件删除速度无法被准确控制。
应用本发明实施例提供的文件删除速度控制方法，将待删除文件分割为一个或多个待删除对象，将待删除对象放入待删除对象队列的队尾，并删除待删除对象队列中前第一数值个待删除对象。通过限制每次删除的待删除对象的数量，可以准确控制待删除对象的删除速度，进而实现对文件删除速度的准确控制，解决了现有删除速度控制方法仅能对删除速度进行大概控制而无法准确控制删除速度的问题。同时准确地控制了用于进行删除操作的计算资源，避免分布式文件系统因执行删除操作而影响其他业务的进行。
基于上述实施例，为了进一步提高对删除速度的控制，同时更加准确地控制用于删除操作的计算资源，防止因执行删除操作而影响其他业务的进行，还可以对待删除文件划分为待删除对象的过程进行控制，具体可以参考图2，图2为本发明实施例提供的另一种文件删除速度控制方法流程图，包括：
S201：获取删除指令，将删除指令指定的待删除文件放入待删除文件队列的队尾。
在获取删除指令后，并不对删除指令指定的待删除文件进行划分得到待删除对象，而是将待删除指令指定的待删除文件放入待删除文件队列的队尾。待删除文件队列用于存放将要被删除的待删除文件，其长度本实施例不做限定。
S202：判断待删除文件队列中前第二数值个待删除文件是否均被划分为待删除对象。
第二数值为整数，其用来表示整个文件系统中正在被删除的文件，即整个文件系统中处于删除状态的待删除文件。通过调节第二数值的大小，同样可以控制文件删除速度，例如当第二数值较小时，同时处于删除状态的文件就较少，即便第一数值较大，文件删除速度也较慢，且用于将待删除文件划分为待删除对象的计算资源也较少；当第二数值较大时，同时用于删除状态的文件就较多，当第一数值较大时，文件删除速度可以较快，同时用于删除操作的计算资源也较多。判断待删除文件队列中前第二数值个待删除文件是否均被划分为待删除对象，当均被划分为待删除对象时，可以进入步骤S103；当没有均被划分为待删除对象时，可以进入步骤S203。
S203：将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照预设划分规则划分为一个或多个待删除对象。
若前第二数值个待删除文件中存在未被划分的待删除文件，则将未被划分为待删除对象的待删除文件按照预设划分规则划分为一个或多个待删除对象。
S102：将待删除对象放入待删除对象队列的队尾。
S103：删除待删除对象队列中前第一数值个待删除对象；其中，第一数值为整数。
应用本发明实施例提供的文件删除速度控制方法，对同时处于删除状态的待删除文件的数量进行了控制，进而对文件删除速度进行进一步准确控制。由于限定了被划分的文件数量和每次被删除的待删除对象数量，因此可以准确地控制用于执行删除操作的计算资源，防止某个删除指令中指定了多个待删除文件，对全部待删除文件进行分割时调用大量计算资源进而影响其他业务进行的情况，即防止因执行删除操作而影响文件系统其他业务的进行。
在一种可能的实施方式中，为了暂缓删除操作，将某些删除操作的配置项设置为特定值，例如可能将第二数值设置为0后，所有划分出来的待删除对象也均被删除完毕。此时即使将第二数值重新设置为非0值，待删除文件队列中的所有待删除文件均处于等待被划分为待删除对象的状态，只有检测到有某个已被划分的待删除文件对应的所有待删除对象均被删除后才能有等待被划分的待删除文件被划分为待删除对象。但是由于所有的待删除对象均被删除完毕，因此不可能检测到有某个已被划分的待删除文件对应的所有待删除对象均被删除。此时文件系统将会陷入一种锁死状态，即出现锁死故障，需要重启删除操作才能使其正常运行。本实施例即为了解决上述问题，请参考图3，图3为本发明实施例提供的另一种文件删除速度控制方法流程图，包括：
S301：获取参数设定指令，根据参数设定指令将第二数值设定为指定值。
参数设定指令用于将目标参数设置为指定值，目标参数可以为第二数值或其他可能引起锁死故障的配置项，对于配置项的具体内容本实施例不做限定。本实施例中目标参数即为第二数值。
S302：判断第二数值是否由0调节为非0值。
在将第二数值设定为指定值后，判断本次调节是否将第二数值有0调节为非0值，本实施例并不限定具体的判断方法。当第二数值并不是由0调节为非0值时，可以进入步骤S305，即不执行任何操作；当第二数值由0调节为非0值时，进入步骤S303。需要说明的是，当参数设定指令指定的目标参数为其他可能引起锁死故障的配置项时，S302步骤的判断内容也应该适应性改变。
S303：判断待删除对象队列中是否存在待删除对象。
当待删除对象队列中存在待删除对象时，说明还有已被划分的待删除文件对应的待删除对象没有被全部删除完毕，因此不会出现锁死故障，可以进入步骤S305，即不执行任何操作。当待删除队列中不存在待删除对象时，说明将出现锁死故障，进入步骤S304。
S304：随机选取待删除文件队列中的任一待删除文件作为流程启动文件，并将流程启动文件划分为一个或多个待删除对象。
当待删除对象队列中不存在待删除对象时，说明待删除文件队列中没有已经被划分为待删除对象的待删除文件，因此随机选取任一待删除文件作为流程启动文件，并将其划分为一个或多个待删除对象。当然，还可以采用其他方法选取流程启动文件，例如可以选择待删除文件队列中的第一个待删除文件作为流程启动文件，或者可以选择待删除文件队列中的最后一个待删除文件作为流程启动文件。
S102：将待删除对象放入待删除对象队列的队尾。
S103：删除待删除对象队列中前第一数值个待删除对象；其中，第一数值为整数。
应用本发明实施例提供的文件删除速度控制方法，可以在删除操作出现锁死故障后无需重启即可动态开启，即无需重启即可恢复运行。
下面对本发明实施例提供的文件删除速度控制装置进行介绍，下文描述的文件删除速度控制装置与上文描述的文件删除速度控制方法可相互对应参照。
请参考图4，图4为本发明实施例提供的一种文件删除速度控制装置的结构示意图，包括：
文件划分模块410，用于获取删除指令，按照预设划分规则将删除指令指定的待删除文件划分为一个或多个待删除对象；
对象队列更新模块420，用于将待删除对象放入待删除对象队列的队尾；
删除模块430，用于删除待删除对象队列中前第一数值个待删除对象；其中，第一数值为整数。
可选的，文件划分模块410，包括：
文件队列更新单元，用于将删除指令指定的待删除文件放入待删除文件队列的队尾；
划分情况判断单元，用于判断待删除文件队列中前第二数值个待删除文件是否均被划分为待删除对象；其中，第二数值为整数；
划分单元，用于将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照预设划分规则划分为一个或多个待删除对象。
可选的，划分单元，包括：
文件大小判断子单元，用于判断未被划分为待删除对象的待删除文件的大小是否大于文件大小阈值；
第一划分单元，用于将未被划分为待删除对象的待删除文件确定为一个待删除对象；
第二划分单元，用于按照预设划分规则将未被划分为待删除对象的待删除文件划分为多个待删除对象。
可选的，还包括：
参数设定模块，用于获取参数设定指令，根据参数设定指令将第二数值设定为指定值。
可选的，还包括：
参数值判断模块，用于判断第二数值是否由0调节为非0值；
对象队列状态判断模块，用于判断待删除对象队列中是否存在待删除对象；
重启模块，用于随机选取待删除文件队列中的任一待删除文件作为流程启动文件，并将流程启动文件划分为一个或多个待删除对象。
下面对本发明实施例提供的文件删除速度控制设备进行介绍，下文描述的文件删除速度控制设备与上文描述的文件删除速度控制方法可相互对应参照。
请参考图5，图5为本发明实施例提供的一种文件删除速度控制设备的结构示意图，该文件删除速度控制设备包括存储器、处理器，其中：
存储器510，用于保存计算机程序；
处理器520，用于执行计算机程序，以实现上述的文件删除速度控制方法。
下面对本发明实施例提供的计算机可读存储介质进行介绍，下文描述的计算机可读存储介质与上文描述的文件删除速度控制方法可相互对应参照。
本发明还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述的文件删除速度控制方法的步骤。
该计算机可读存储介质可以包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应该认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系属于仅仅用来将一个实体或者操作与另一个实体或者操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其他任何变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。
以上对本发明所提供的一种文件删除速度控制方法、文件删除速度控制装置、文件删除速度控制设备及计算机可读存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种文件删除速度控制方法，其特征在于，包括：
获取删除指令，按照预设划分规则将所述删除指令指定的待删除文件划分为一个或多个待删除对象；
将所述待删除对象放入待删除对象队列的队尾；
删除所述待删除对象队列中前第一数值个待删除对象；其中，所述第一数值为整数。
2.根据权利要求1所述的文件删除速度控制方法，其特征在于，所述按照预设划分规则将所述删除指令指定的待删除文件划分为一个或多个待删除对象，包括：
将所述删除指令指定的所述待删除文件放入待删除文件队列的队尾；
判断所述待删除文件队列中前第二数值个待删除文件是否均被划分为待删除对象；其中，所述第二数值为整数；
若不是，则将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照所述预设划分规则划分为一个或多个待删除对象。
3.根据权利要求2所述的文件删除速度控制方法，其特征在于，所述将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照所述预设划分规则划分为一个或多个待删除对象，包括：
判断未被划分为待删除对象的待删除文件的大小是否大于文件大小阈值；
若否，则将未被划分为待删除对象的待删除文件确定为一个待删除对象；
若是，则按照所述预设划分规则将未被划分为待删除对象的待删除文件划分为多个所述待删除对象。
4.根据权利要求2至3任一项所述的文件删除速度控制方法，其特征在于，还包括：
获取参数设定指令，根据所述参数设定指令将所述第二数值设定为指定值。
5.根据权利要求4所述的文件删除速度控制方法，其特征在于，在根据所述参数设定指令将所述第二数值设定为指定值之后，还包括：
判断所述第二数值是否由0调节为非0值；
若确定所述第二数值由0调节为非0值，则判断所述待删除对象队列中是否存在待删除对象；
若所述待删除对象队列中不存在所述对象，则随机选取所述待删除文件队列中的任一所述待删除文件作为流程启动文件，并将所述流程启动文件划分为一个或多个待删除对象。
6.一种文件删除速度控制装置，其特征在于，包括：
文件划分模块，用于获取删除指令，按照预设划分规则将所述删除指令指定的待删除文件划分为一个或多个待删除对象；
对象队列更新模块，用于将所述待删除对象放入待删除对象队列的队尾；
删除模块，用于删除所述待删除对象队列中前第一数值个待删除对象；其中，所述第一数值为整数。
7.根据权利要求6所述的文件删除速度控制装置，其特征在于，所述文件划分模块，包括：
文件队列更新单元，用于将所述删除指令指定的所述待删除文件放入待删除文件队列的队尾；
划分情况判断单元，用于判断所述待删除文件队列中前第二数值个待删除文件是否均被划分为待删除对象；其中，所述第二数值为整数；
划分单元，用于将前第二数值个待删除文件中未被划分为待删除对象的待删除文件按照所述预设划分规则划分为一个或多个待删除对象。
8.根据权利要求7所述的文件删除速度控制装置，其特征在于，所述划分单元，包括：
文件大小判断子单元，用于判断未被划分为待删除对象的待删除文件的大小是否大于文件大小阈值；
第一划分子单元，用于将未被划分为待删除对象的待删除文件确定为一个待删除对象；
第二划分子单元，用于按照所述预设划分规则将未被划分为待删除对象的待删除文件划分为多个所述待删除对象。
9.一种文件删除速度控制设备，其特征在于，包括存储器和处理器，其中：
所述存储器，用于保存计算机程序；
所述处理器，用于执行所述计算机程序，以实现如权利要求1至5任一项所述的文件删除速度控制方法。
10.一种计算机可读存储介质，其特征在于，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述的文件删除速度控制方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910927727.7A CN110750503A (zh) | 2019-09-27 | 2019-09-27 | 一种文件删除速度控制方法、装置、设备及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910927727.7A CN110750503A (zh) | 2019-09-27 | 2019-09-27 | 一种文件删除速度控制方法、装置、设备及可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110750503A true CN110750503A (zh) | 2020-02-04 |
Family
ID=69277298
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910927727.7A Withdrawn CN110750503A (zh) | 2019-09-27 | 2019-09-27 | 一种文件删除速度控制方法、装置、设备及可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110750503A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112540968A (zh) * | 2020-12-10 | 2021-03-23 | 中信银行股份有限公司 | 一种hdfs的垃圾回收方法及装置 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102375888A (zh) * | 2011-10-25 | 2012-03-14 | 无锡城市云计算中心有限公司 | 一种分布式文件系统中大文件高效删除的方法 |
| CN104679772A (zh) * | 2013-11-29 | 2015-06-03 | 深圳市腾讯计算机系统有限公司 | 分布式数据仓库中删除文件的方法、装置、设备及系统 |
| CN107391269A (zh) * | 2016-03-28 | 2017-11-24 | 阿里巴巴集团控股有限公司 | 一种用于通过持久化队列处理消息的方法与设备 |
| CN107679197A (zh) * | 2017-10-10 | 2018-02-09 | 郑州云海信息技术有限公司 | 一种文件截断的优化方法及装置 |
| CN108846032A (zh) * | 2018-05-28 | 2018-11-20 | 郑州云海信息技术有限公司 | 一种存储系统中的文件删除方法、装置及设备 |
| CN109299043A (zh) * | 2018-12-13 | 2019-02-01 | 浪潮电子信息产业股份有限公司 | 分布式集群系统大文件删除方法、装置、设备及存储介质 |
| CN109614377A (zh) * | 2018-12-07 | 2019-04-12 | 浪潮电子信息产业股份有限公司 | 分布式文件系统的文件删除方法、装置、设备及存储介质 |
| CN110119387A (zh) * | 2019-05-23 | 2019-08-13 | 苏州浪潮智能科技有限公司 | 一种文件删除方法、装置、设备及可读存储介质 |
-
2019
- 2019-09-27 CN CN201910927727.7A patent/CN110750503A/zh not_active Withdrawn
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102375888A (zh) * | 2011-10-25 | 2012-03-14 | 无锡城市云计算中心有限公司 | 一种分布式文件系统中大文件高效删除的方法 |
| CN104679772A (zh) * | 2013-11-29 | 2015-06-03 | 深圳市腾讯计算机系统有限公司 | 分布式数据仓库中删除文件的方法、装置、设备及系统 |
| CN107391269A (zh) * | 2016-03-28 | 2017-11-24 | 阿里巴巴集团控股有限公司 | 一种用于通过持久化队列处理消息的方法与设备 |
| CN107679197A (zh) * | 2017-10-10 | 2018-02-09 | 郑州云海信息技术有限公司 | 一种文件截断的优化方法及装置 |
| CN108846032A (zh) * | 2018-05-28 | 2018-11-20 | 郑州云海信息技术有限公司 | 一种存储系统中的文件删除方法、装置及设备 |
| CN109614377A (zh) * | 2018-12-07 | 2019-04-12 | 浪潮电子信息产业股份有限公司 | 分布式文件系统的文件删除方法、装置、设备及存储介质 |
| CN109299043A (zh) * | 2018-12-13 | 2019-02-01 | 浪潮电子信息产业股份有限公司 | 分布式集群系统大文件删除方法、装置、设备及存储介质 |
| CN110119387A (zh) * | 2019-05-23 | 2019-08-13 | 苏州浪潮智能科技有限公司 | 一种文件删除方法、装置、设备及可读存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 张呈: ""Hadoop集群下海量小文件优化处理"", 《中国优秀硕士学位论文全文数据库（电子期刊）信息科技辑》 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112540968A (zh) * | 2020-12-10 | 2021-03-23 | 中信银行股份有限公司 | 一种hdfs的垃圾回收方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10097570B2 (en) | Method for detecting real-time event and server using the same | |
| CN111897558A (zh) | 容器集群管理系统Kubernetes升级方法和装置 | |
| US7681196B2 (en) | Providing optimal number of threads to applications performing multi-tasking using threads | |
| US20210117280A1 (en) | Method, device, and computer program product for scheduling backup jobs | |
| CN110781145B (zh) | 一种文件系统任务调度方法、装置、设备及可读存储介质 | |
| CN106484542B (zh) | 一种处理分布式系统中重叠节点事件的方法与装置 | |
| CN110750503A (zh) | 一种文件删除速度控制方法、装置、设备及可读存储介质 | |
| CN113626173A (zh) | 调度方法、装置及存储介质 | |
| CN111555987B (zh) | 限流配置方法、装置、设备及计算机存储介质 | |
| CN113535087A (zh) | 数据迁移过程中的数据处理方法、服务器及存储系统 | |
| EP2916221A1 (en) | Task assignment | |
| US20210389994A1 (en) | Automated performance tuning using workload profiling in a distributed computing environment | |
| CN112631994A (zh) | 数据迁移方法及系统 | |
| US20220229689A1 (en) | Virtualization platform control device, virtualization platform control method, and virtualization platform control program | |
| CN111078418A (zh) | 操作同步方法、装置、电子设备及计算机可读存储介质 | |
| CN115951845A (zh) | 一种磁盘管理方法、装置、设备及存储介质 | |
| CN107958414B (zh) | 一种清除cics系统长交易的方法及系统 | |
| CN115599300A (zh) | 一种任务分配方法、装置、设备及介质 | |
| CN114721876A (zh) | 一种数据备份方法、装置、介质 | |
| CN113032369A (zh) | 一种数据迁移方法、装置及介质 | |
| JP7326970B2 (ja) | バックアップ処理装置、バックアップ処理システム、バックアップ処理方法、及び、バックアップ処理プログラム | |
| US11194618B2 (en) | Accelerator control device, accelerator control method, and recording medium with accelerator control program stored therein | |
| CN113703678A (zh) | 一种存储桶索引重分裂的方法、装置、设备和介质 | |
| CN111858234A (zh) | 一种任务执行方法、装置、设备、介质 | |
| CN112527276A (zh) | 一种可视化编程工具中的数据更新方法、装置及终端设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20200204 |