CN107679197A - 一种文件截断的优化方法及装置 - Google Patents

一种文件截断的优化方法及装置 Download PDF

Info

Publication number
CN107679197A
CN107679197A CN201710934859.3A CN201710934859A CN107679197A CN 107679197 A CN107679197 A CN 107679197A CN 201710934859 A CN201710934859 A CN 201710934859A CN 107679197 A CN107679197 A CN 107679197A
Authority
CN
China
Prior art keywords
file
break
truncation
file truncation
optimization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710934859.3A
Other languages
English (en)
Inventor
方兰春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710934859.3A priority Critical patent/CN107679197A/zh
Publication of CN107679197A publication Critical patent/CN107679197A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
    • G06F16/183—Provision of network file services by network file servers, e.g. by using NFS, CIFS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/131—Fragmentation of text files, e.g. creating reusable text-blocks; Linking to fragments, e.g. using XInclude; Namespaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种文件截断的优化方法、装置、设备及计算机可读存储介质，所述方法包括：接收客户端发送的文件截断操作；判断系统中正在处理的截断操作的数量是否超过预设的阈值；若是，则将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。所述方法通过设置阈值的方式避免了大量截断操作涌入存储系统，控制了截断操作的处理速度，提高了存储系统的存储性能，为用户提供了更好的截断操作体验；同时，也不影响用户的其他业务操作，提高了存储系统的业务处理能力。相应地，本发明公开的一种文件截断的优化装置、设备及计算机可读存储介质，也同样具有上述技术效果。

Description

一种文件截断的优化方法及装置
技术领域
本发明涉及数据存储技术领域，更具体地说，涉及一种文件截断的优化方法、装置、设备及计算机可读存储介质。
背景技术
随着互联网和大数据概念的迅速发展崛起，数据量正以几何级数增长，数据量的增多使得数据在存储过程中的某些操作严重影响了存储系统的整体性能。
目前，针对存储于分布式存储系统的大文件数据而言，在进行截断操作时，需要将截断这个大文件的操作分解成大量的对象文件的截断操作，并将大量的对象文件截断操作发送至存储系统的后端，使得存储系统中的文件截断操作的数量暴增，从而发生系统拥堵现象；并且，当多个客户端同时对不同文件进行截断操作时，也可能导致存储系统中的文件截断操作的数量增多。以上两种情况均可能导致分布式存储系统的存储空间使用量暴增，严重时可能占用交换空间，拖慢分布式存储系统的存储性能，阻塞前端客户的正常业务操作。
因此，如何避免大量截断操作同时涌入存储系统的后端，提高存储系统的存储性能，是本领域技术人员需要解决的问题。
发明内容
本发明的目的在于提供一种文件截断的优化方法、装置、设备及计算机可读存储介质，以实现文件截断优化操作，避免大量截断操作同时涌入存储系统的后端，提高存储系统的存储性能。
为实现上述目的，本发明实施例提供了如下技术方案：
一种文件截断的优化方法，包括：
接收客户端发送的文件截断操作；
判断系统中正在处理的截断操作的数量是否超过预设的阈值；
若是，则将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。
其中，所述判断系统中正在处理的截断操作的数量是否超过预设的阈值之前，还包括：
判断所述文件截断操作是否针对GB级以上的文件；
若是，则根据预设的文件条带的大小将所述文件截断操作映射为各个对象文件的截断操作。
其中，若所述文件截断操作未针对GB级以上的文件，则所述方法还包括：
处理所述文件截断操作。
其中，完成所述文件截断操作之后，还包括：
将操作结果反馈至与所述文件截断操作对应的客户端。
一种文件截断的优化装置，包括：
接收模块，用于接收客户端发送的文件截断操作；
第一判断模块，用于判断系统中正在处理的截断操作的数量是否超过预设的阈值；
第一执行模块，用于当系统中正在处理的截断操作的数量超过预设的阈值时，将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。
其中，还包括：
第二判断模块，用于判断所述文件截断操作是否针对GB级以上的文件；
映射模块，用于当所述文件截断操作针对GB级以上的文件时，根据预设的文件条带的大小将所述文件截断操作映射为各个对象文件的截断操作。
其中，还包括：
第二执行模块，用于处理所述文件截断操作。
其中，还包括：
反馈模块，用于将操作结果反馈至与所述文件截断操作对应的客户端。
一种文件截断的优化设备，包括：
存储器，用于存储文件截断的优化程序；
处理器，用于执行所述文件截断的优化程序时实现上述任意一项所述的文件截断的优化方法的步骤。
一种计算机可读存储介质，所述计算机可读存储介质上存储有文件截断的优化程序，所述文件截断的优化程序被处理器执行时实现上述任意一项所述的文件截断的优化方法的步骤。
通过以上方案可知，本发明实施例提供的一种文件截断的优化方法，所述方法包括：接收客户端发送的文件截断操作；判断系统中正在处理的截断操作的数量是否超过预设的阈值；若是，则将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。
可见，上述方法通过设置阈值的方式避免了大量截断操作涌入存储系统，当判断存储系统中正在处理的截断操作的数量超过预设的阈值时，将客户端发送的文件截断操作添加至待处理队列，待存储系统中正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。如此采用流控的方法控制了截断操作的处理速度，若此方法应用于分布式存储系统，则可以提高分布式存储系统的存储性能，为用户能够提供更好的截断操作体验；同时，也不影响用户的其他业务操作，能够提高分布式存储系统的业务处理能力。
相应地，本发明实施例提供的一种文件截断的优化装置、设备及计算机可读存储介质，也同样具有上述技术效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种文件截断的优化方法流程图；
图2为本发明实施例公开的另一种文件截断的优化方法流程图；
图3为本发明实施例公开的一种文件截断的优化装置示意图；
图4为本发明实施例公开的另一种文件截断的优化装置示意图；
图5为本发明实施例公开的一种文件截断的优化设备示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例公开了一种文件截断的优化方法、装置、设备及计算机可读存储介质，以实现文件截断优化操作，避免大量截断操作同时涌入存储系统的后端，提高存储系统的存储性能。
参见图1，本发明实施例提供的一种文件截断的优化方法，包括：
S101、接收客户端发送的文件截断操作；
具体的，以分布式存储系统为例，各个客户端可能同时进行文件截断操作，向存储系统发送文件截断操作；或者某客户端对大文件进行截断操作，该客户端底层将此文件分解为各个对象文件，进而对分解而得的各个对象文件进行截断操作，并将这些截断操作发送至存储系统。
S102、判断系统中正在处理的截断操作的数量是否超过预设的阈值；
具体的，当系统接收到客户端发送的截断操作后，将正在处理的截断操作的数量与系统预设的阈值进行比较。所述预设的阈值可以根据系统的实际空间容量灵活设置，若某分布式存储系统的实际空间容量紧张，则将该阈值设置为较小数值；若某分布式存储系统的实际空间容量足够大，则将该阈值设置为较大数值。该阈值的设置可以根据系统的实际使用情况进行相应调整，故本发明实施例并不具体限定。
S103、若是，则将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作；
具体的，当确定系统中正在处理的截断操作的数量超过预设的阈值，则将所述文件截断操作添加至待处理队列，所述待处理队列包括各个客户端正在进行的文件截断操作，以时间先后顺序或者其他技术人员设定的排列规则依次排列，形成待处理队列；将文件截断操作添加至待处理队列的同时，系统仍然处理着截断操作，待系统正在处理的截断操作的数量小于所述阈值时，再依据待处理队列中的截断操作的排列顺序依次处理所述文件截断操作。由此，避免大量截断操作涌入系统，造成系统拥堵。
S104、若否，则处理所述文件截断操作。
具体的，当确定系统中正在处理的截断操作的数量不超过预设的阈值，则说明系统空间容量足够处理当前截断操作，那么则依据正常流程处理所述文件截断操作。
可见，本发明实施例提供的一种文件截断的优化方法，所述方法通过设置阈值的方式避免了大量截断操作涌入存储系统，当判断存储系统中正在处理的截断操作的数量超过预设的阈值时，将客户端发送的文件截断操作添加至待处理队列，待存储系统中正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。如此采用流控的方法控制了截断操作的处理速度，若此方法应用于分布式存储系统，则可以提高分布式存储系统的存储性能，为用户能够提供更好的截断操作体验；同时，也不影响用户的其他业务操作，能够提高分布式存储系统的业务处理能力。
本发明实施例公开了另一种文件截断的优化方法，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。
参见图2，本发明实施例提供的另一种文件截断的优化方法，包括：
S201、接收客户端发送的文件截断操作；
S202、判断所述文件截断操作是否针对GB级以上的文件；
在本实施例中，当系统接收到客户端发送的截断操作时，需要首先判断接收到的截断操作是否是针对GB级以上的大文件，将GB级以上的大文件的截断操作和GB级以下的文件的截断操作分开处理。
具体的，对于GB级以下的文件的截断操作，当系统中正在处理的截断操作的数量不多时，可以直接处理其截断操作；当系统中正在处理的截断操作的数量较多或者系统运行繁忙时，也可以将该文件添加至待处理队列等待后续处理。具体实施方式可以根据系统的实际运行情况而定。
S203、若是，则根据预设的文件条带的大小将所述文件截断操作映射为各个对象文件的截断操作，并执行S204；
在本实施例中，当确认所述文件截断操作是针对GB级以上的大文件时，将该文件根据预设的文件条带的大小分解为各个对象文件，将该文件的截断操作映射为各个对象文件的截断操作。
需要说明的是，所述文件条带大小可以根据实际需要自由设定。例如：在分布式存储系统中，文件条带大小一般设置为4M。那么如果对1GB的文件进行截断操作，则将该文件分解为256个4M大小的对象文件，分别对这256个对象文件进行截断操作。
S204、判断系统中正在处理的截断操作的数量是否超过预设的阈值；
具体的，当GB级以上的大文件的截断操作涌入系统时，即该大文件分解而得的众多对象文件的截断操作涌入系统，为了避免系统出现拥堵现象，根据系统的实际运行需要预设了阈值，所述阈值的设定与上述实施例类似，故在此并不赘述。
需要说明的是，本实施例中的截断操作包括由大文件分解而得的众多对象文件的截断操作。
S205、若是，则将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作；
S206、若否，则处理所述文件截断操作。
可见，本发明实施例提供的另一种文件截断的优化方法，所述方法通过设置阈值的方式避免了对大文件进行截断操作时，避免了由大文件分解而得的大量对象文件的截断操作涌入存储系统，当判断存储系统中正在处理的截断操作的数量超过预设的阈值时，将该对象文件的截断操作添加至待处理队列，待存储系统中正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。如此采用流控的方法控制了截断操作的处理速度，若此方法应用于分布式存储系统，则可以提高分布式存储系统的存储性能，为用户能够提供更好的截断操作体验；同时，也不影响用户的其他业务操作，能够提高分布式存储系统的业务处理能力。
基于上述任意实施例，需要说明的是，完成所述文件截断操作之后，还包括：将操作结果反馈至与所述文件截断操作对应的客户端。
具体的，当系统完成一个文件的截断操作时，会将该文件的操作结果反馈至对应的客户端。如果该文件进行截断操作后，需要进行其他操作，则根据相应指令继续处理该文件，直至完成对该文件的处理，进而将处理结果反馈至对应的客户端。
基于上述任意实施例，需要说明的是，可以依据本发明的思想在系统中设置过滤模块，将超大文件的截断操作与普通文件的截断操作分开处理。
具体的，若某文件为100GB，将其根据系统预设的文件条带大小分解后，形成的对象文件的数量数以万计，其截断操作的数量自然也数以万计。此种情况下，若这些截断操作同时涌入系统，极易造成系统拥堵。所以。可以在系统中设置过滤模块，将类似这样的超大文件过滤出来，根据本发明的思想设置阈值进行相关处理；同时，将过滤掉的普通文件依据原来的处理流程进行处理，或者在系统繁忙时，仍然通过设置阈值的方式进行具体处理。
下面对本发明实施例提供的一种文件截断的优化装置进行介绍，下文描述的一种文件截断的优化装置与上文描述的一种文件截断的优化方法可以相互参照。
参见图3，本发明实施例提供的一种文件截断的优化装置，包括：
接收模块301，用于接收客户端发送的文件截断操作；
第一判断模块302，用于判断系统中正在处理的截断操作的数量是否超过预设的阈值；
第一执行模块303，用于当系统中正在处理的截断操作的数量超过预设的阈值时，将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。
本发明实施例公开了另一种文件截断的优化装置，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。
参见图4，本发明实施例提供的另一种文件截断的优化装置，包括：
接收模块401，用于接收客户端发送的文件截断操作；
第二判断模块402，用于判断所述文件截断操作是否针对GB级以上的文件；
映射模块403，用于当所述文件截断操作针对GB级以上的文件时，根据预设的文件条带的大小将所述文件截断操作映射为各个对象文件的截断操作；
第一判断模块404，用于判断系统中正在处理的截断操作的数量是否超过预设的阈值；
第一执行模块405，用于当系统中正在处理的截断操作的数量超过预设的阈值时，将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。
基于上述任意装置实施例，需要说明的是，还包括：
第二执行模块，用于处理所述文件截断操作。
基于上述任意装置实施例，需要说明的是，还包括：
反馈模块，用于将操作结果反馈至与所述文件截断操作对应的客户端。
下面对本发明实施例提供的一种文件截断的优化设备进行介绍，下文描述的一种文件截断的优化设备与上文描述的一种文件截断的优化方法、装置可以相互参照。
参见图5，本发明实施例提供的一种文件截断的优化设备，包括：
存储器501，用于存储文件截断的优化程序；
处理器502，用于执行所述文件截断的优化程序时实现上述任意实施例所述的文件截断的优化方法的步骤。
下面对本发明实施例提供的一种计算机可读存储介质进行介绍，下文描述的一种计算机可读存储介质与上文描述的一种文件截断的优化方法、装置及设备可以相互参照。
一种计算机可读存储介质，所述计算机可读存储介质上存储有文件截断的优化程序，所述文件截断的优化程序被处理器执行时实现上述任意实施例所述的文件截断的优化方法的步骤。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种文件截断的优化方法，其特征在于，包括：
接收客户端发送的文件截断操作；
判断系统中正在处理的截断操作的数量是否超过预设的阈值；
若是，则将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。
2.根据权利要求1所述的文件截断的优化方法，其特征在于，所述判断系统中正在处理的截断操作的数量是否超过预设的阈值之前，还包括：
判断所述文件截断操作是否针对GB级以上的文件；
若是，则根据预设的文件条带的大小将所述文件截断操作映射为各个对象文件的截断操作。
3.根据权利要求2所述的文件截断的优化方法，其特征在于，若所述文件截断操作未针对GB级以上的文件，则所述方法还包括：
处理所述文件截断操作。
4.根据权利要求1-3任意一项所述的文件截断的优化方法，其特征在于，完成所述文件截断操作之后，还包括：
将操作结果反馈至与所述文件截断操作对应的客户端。
5.一种文件截断的优化装置，其特征在于，包括：
接收模块，用于接收客户端发送的文件截断操作；
第一判断模块，用于判断系统中正在处理的截断操作的数量是否超过预设的阈值；
第一执行模块，用于当系统中正在处理的截断操作的数量超过预设的阈值时，将所述文件截断操作添加至待处理队列，待所述正在处理的截断操作的数量小于所述阈值时，处理所述待处理队列中的文件截断操作。
6.根据权利要求5所述的文件截断的优化装置，其特征在于，还包括：
第二判断模块，用于判断所述文件截断操作是否针对GB级以上的文件；
映射模块，用于当所述文件截断操作针对GB级以上的文件时，根据预设的文件条带的大小将所述文件截断操作映射为各个对象文件的截断操作。
7.根据权利要求6所述的文件截断的优化装置，其特征在于，还包括：
第二执行模块，用于处理所述文件截断操作。
8.根据权利要求5-7任意一项所述的文件截断的优化装置，其特征在于，还包括：
反馈模块，用于将操作结果反馈至与所述文件截断操作对应的客户端。
9.一种文件截断的优化设备，其特征在于，包括：
存储器，用于存储文件截断的优化程序；
处理器，用于执行所述文件截断的优化程序时实现如权利要求1-4任意一项所述的文件截断的优化方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有文件截断的优化程序，所述文件截断的优化程序被处理器执行时实现如权利要求1-4任意一项所述的文件截断的优化方法的步骤。
CN201710934859.3A 2017-10-10 2017-10-10 一种文件截断的优化方法及装置 Pending CN107679197A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710934859.3A CN107679197A (zh) 2017-10-10 2017-10-10 一种文件截断的优化方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710934859.3A CN107679197A (zh) 2017-10-10 2017-10-10 一种文件截断的优化方法及装置

Publications (1)

Publication Number Publication Date
CN107679197A true CN107679197A (zh) 2018-02-09

Family

ID=61139737

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710934859.3A Pending CN107679197A (zh) 2017-10-10 2017-10-10 一种文件截断的优化方法及装置

Country Status (1)

Country Link
CN (1) CN107679197A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108846032A (zh) * 2018-05-28 2018-11-20 郑州云海信息技术有限公司 一种存储系统中的文件删除方法、装置及设备
CN110750503A (zh) * 2019-09-27 2020-02-04 浪潮电子信息产业股份有限公司 一种文件删除速度控制方法、装置、设备及可读存储介质
CN111737220A (zh) * 2020-05-29 2020-10-02 苏州浪潮智能科技有限公司 一种分布式文件存储系统中截断操作的优化方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030217058A1 (en) * 2002-03-27 2003-11-20 Edya Ladan-Mozes Lock-free file system
CN103607418A (zh) * 2013-07-25 2014-02-26 上海和辰信息技术有限公司 基于云服务数据特征的大规模数据分割系统及分割方法
CN104272274A (zh) * 2013-12-31 2015-01-07 华为技术有限公司 一种分布式文件存储系统中的数据处理方法及设备
CN105335219A (zh) * 2014-07-08 2016-02-17 阿里巴巴集团控股有限公司 一种基于分布式的任务调度方法及系统
CN106599323A (zh) * 2017-01-03 2017-04-26 北京百度网讯科技有限公司 在分布式文件系统中实现分布式管道的方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030217058A1 (en) * 2002-03-27 2003-11-20 Edya Ladan-Mozes Lock-free file system
CN103607418A (zh) * 2013-07-25 2014-02-26 上海和辰信息技术有限公司 基于云服务数据特征的大规模数据分割系统及分割方法
CN104272274A (zh) * 2013-12-31 2015-01-07 华为技术有限公司 一种分布式文件存储系统中的数据处理方法及设备
CN105335219A (zh) * 2014-07-08 2016-02-17 阿里巴巴集团控股有限公司 一种基于分布式的任务调度方法及系统
CN106599323A (zh) * 2017-01-03 2017-04-26 北京百度网讯科技有限公司 在分布式文件系统中实现分布式管道的方法和装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108846032A (zh) * 2018-05-28 2018-11-20 郑州云海信息技术有限公司 一种存储系统中的文件删除方法、装置及设备
CN110750503A (zh) * 2019-09-27 2020-02-04 浪潮电子信息产业股份有限公司 一种文件删除速度控制方法、装置、设备及可读存储介质
CN111737220A (zh) * 2020-05-29 2020-10-02 苏州浪潮智能科技有限公司 一种分布式文件存储系统中截断操作的优化方法及系统
CN111737220B (zh) * 2020-05-29 2023-01-06 苏州浪潮智能科技有限公司 一种分布式文件存储系统中截断操作的优化方法及系统

Similar Documents

Publication Publication Date Title
CN107679197A (zh) 一种文件截断的优化方法及装置
CN106095572A (zh) 一种大数据处理的分布式调度系统及方法
CN105897365B (zh) 一种处理器的防冲击处理方法及装置
CN106686039A (zh) 一种云计算系统中的资源调度方法及装置
CN105373487B (zh) 一种存储操作系统的碎片整理方法及系统
CN108846032A (zh) 一种存储系统中的文件删除方法、装置及设备
CN101963923A (zh) 批量处理多重化方法
CN110433496A (zh) 云游戏资源配置方法、电子设备和存储介质
CN109359256A (zh) 页面加载方法、装置、设备及存储介质
CN107305548A (zh) 控制网络爬虫的任务分配方法和装置
CN104461735A (zh) 一种虚拟化场景下分配cpu资源的方法和装置
Gilde et al. On bonus systems with credibility scales
DE112005000705B4 (de) Konfiguration von Umleitungstabellen
CN108874324A (zh) 一种访问请求处理方法、装置、设备及可读存储介质
CN107885580A (zh) 一种云迁移方法、装置、设备及存储介质
CN105591904A (zh) 一种抑制bgp邻居震荡的方法及装置
CN105306385B (zh) 下行网络带宽的控制方法及装置
CN106294198A (zh) 一种Linux操作系统的内存分配方法及释放方法
CN106412039A (zh) 一种分布式存储的网络集成的方法及系统
CN103685336B (zh) 过载保护方法、装置及服务器
CN107743246A (zh) 任务处理方法、系统及数据处理系统
CN106657284A (zh) 数据流处理的方法和装置
CN107239226A (zh) 一种数据去重方法及终端、服务器
CN107426314A (zh) 数据下载方法及装置
CN109558442A (zh) 一种数据实时汇聚方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180209

RJ01 Rejection of invention patent application after publication