CN107239521A - 一种分布式集群上的回收站应用方法及系统 - Google Patents

一种分布式集群上的回收站应用方法及系统 Download PDF

Info

Publication number
CN107239521A
CN107239521A CN201710381978.0A CN201710381978A CN107239521A CN 107239521 A CN107239521 A CN 107239521A CN 201710381978 A CN201710381978 A CN 201710381978A CN 107239521 A CN107239521 A CN 107239521A
Authority
CN
China
Prior art keywords
file
recycle bin
directory
catalogue
distributed type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710381978.0A
Other languages
English (en)
Inventor
陈贝贝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710381978.0A priority Critical patent/CN107239521A/zh
Publication of CN107239521A publication Critical patent/CN107239521A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0727—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in a storage system, e.g. in a DASD or network based storage system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/162—Delete operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Computer And Data Communications (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种分布式集群上的回收站应用方法及系统。方法包括在文件系统根目录建立隐藏目录；移动被删除的文件或目录至指定位置，并修改被删除的文件或目录的名称。本发明可将被删除的文件或目录保存到回收站中，方便用户进行恢复。同时，文件回收功能也具有可关闭的特点，为文件管理提供极大便利。

Description

一种分布式集群上的回收站应用方法及系统
技术领域
本发明涉及分布式存储领域。
背景技术
随着时代的发展，大量的数据文件产生，计算机通过文件系统管理、存储数据，单纯通过增加硬盘个数来扩展计算机文件系统的存储容量的方式，在容量大小、容量增长速度、数据备份、数据安全等方面的表现都差强人意。分布式文件系统可以有效解决数据的存储和管理难题将固定于某个地点的某个文件系统，扩展到任意多个地点/多个文件系统，众多的节点组成一个文件系统网络。每个节点可以分布在不同的地点，通过网络进行节点间的通信和数据传输，建立庞大的集群系统。人们在使用分布式文件系统时，无需关心数据是存储在哪个节点上、或者是从哪个节点从获取的，只需要像使用本地文件系统一样管理和存储文件系统中的数据。分布式文件系统在海量存储中发挥着独一无二的优势。
分布式集群存储通过通过fuse客户端、CIFS共享和NFS共享等服务可以很好的为视频监控、广电媒资、高性能等各项场景提供很好的服务，然而随之而来的海量数据管理为维护人员带来了极大的挑战，误删操作极大频率的发生，可能会引起极大地不必要的经济损失、对数据安全的保障也会有极大地冲击。
在windows系统中回收站扮演者举足轻重的角色，通过鼠标右击回收站，点击“属性”。在属性对话框中有全局标签项和磁盘标签项（指你的磁盘的每个分区）。
在全局标签项中有“独立配置驱动器”、“所有驱动器均使用同一设置”、“删除时不将文件移入回收站，而是彻底删除”、“显示删除确认对话框”，其中“独立配置驱动器”是指根据每个磁盘的大小由使用者设置回收站占用磁盘空间的百分比；“所有驱动器均使用同一设置”指所有磁盘回收站占用的百分比空间都相同并统一设置；“删除时不将文件移入回收站，而是彻底删除”是指当选择删除时直接删除而不放入回收站中（如果放入回收站中可通过回收站进行文件恢复）；“显示删除确认对话框”指删除时再次确认是否删除。
对于信息技术的快速发展，人们对数据文件的需求大幅度提高，针对分布式集群存储来说，面对大量的文件更新替换、加入像windows系统一样的回收站功能，为文件的管理设立了一个“缓冲区”，一些误删的文件可以通过回收站功能找回，对于产品质量以及竞争力的提高具有战略性的意义。
发明内容
本发明针对现有的分布式集群存储存在的不足之处，针对一般文件系统来说，数据信息的大量更新生成，一旦意外删除某些数据，重新找回困难，不利于日常文件的维护。为此，本发明提供一种分布式集群上的回收站应用方法，它具有能方便对误删文件找回的优点。
为了实现上述目的，本发明采用如下技术方案。
一种分布式集群上的回收站应用方法，包括以下步骤：
在文件系统根目录建立隐藏目录；
移动被删除的文件或目录至指定位置，并为删除的文件或目录重构完整的上层目录；
优选的，通过更改集群节点配置文件中的参数对回收站进行开启或关闭。
优选的，用户执行文件或者目录删除操作，回收站功能开启后，判断文件是否在回收站目录中，如果文件在回收站目录中；则可以直接执行删除操作，如果文件不在回收站目录中，判断回收站目录是否存在，如果不存在，则创建该目录，并在回收站目录下创建当前时间点的日期目录。
优先的，通过修改集群节点的配置参数设定文件的过期时间、定期扫描回收站时间，每隔一段时间进行一次扫描，对过期的文件和目录进行删除。
分布式集群上的回收系统，包括与存储设备通过网络连接的多个集群结点。存储设备包含数据目录及用于删除恢复的隐藏目录。数据目录用于存储正常数据。隐藏目录用于接收从数据目录删除的文件或目录，并供进行数据恢复。
本发明的有益效果：对于大多数文件系统应用场景，会产生大量的文件，对于管理者来说，难免会有一些意外的删除情况，然而回收站可以保存删除的文件、文件夹、图片等等。这些文件将一直保留在回收站中，直到root用户清空回收站。许多误删除的文件可以从它里面找到，这相当于提供了一个强有力的“后悔药”，并且回收站定时程序的存在对于想要彻底删除回收站文件来说也提供了极大的便利。
附图说明
图1是本实施例的回收站删除流程图。
图2是本实施例回收站目录结构示意图。
图3是回收站整体架构示意图。
具体实施方式
为使本发明的目的、 技术方案和优点更加清楚明白， 以下结合具体实施例， 并参考附图。对本发明所述在分布式集群系统上的回收站应用方法进一步详细说明。
更改文件系统的配置文件设置client_recycle = true字段开启回收站功能。回收站功能关闭时，保持原有删除操作方式，即执行删除命令后彻底删除。
用户执行文件或者目录删除操作，回收站功能开启后，判断文件是否在回收站目录中，如果文件在回收站目录中；则可以直接执行删除操作，如果文件不在回收站目录中，判断回收站目录是否存在，如果不存在，则创建该目录，并在回收站目录下创建当前时间点的日期目录（即图2的datedir），在回收站目录中重构当前文件或者目录相对于文件系统根目录的完整目录，即文件系统目录包含1-5个文件和目录，回收站目录中重构该1-5个文件和目录。将文件或者目录移动到对应目录中；参考图1，图2。
删除回收站下文件和目录是需要有删除权限的特殊用户即root用户才能执行的；recycle目录任何用户都没有删权限。
对于要从回收站恢复的一些文件可以通过在文件系统下执行mv“要恢复的文件”“恢复位置”来实现数据恢复（Linux系统下常用的命令：mv命令是move的缩写，可以用来移动文件或者将文件改名）。
回收站的定时删除，定时器判断是否满足client_recycle_update时间间隔，对回收站目录进行扫描，遍历.recycle目录下所有日期目录，获取当前时间，并与日期目录进行比较，如果大于client_recycle_timeout,则对当前日期目录进行删除操作，一旦从回收站进行数据的删除，将被永久删除。
图中所用名词：
Unlink:linux系统下常用函数命令,从文件系统中删除一个名称，如果名称是文件的最后一个连接，并且没有其它进程将文件打开，名称对应的文件会实际被删除。
Rmdir：linux系统下常用命令，删除命令，一般为删除目录。
Unlink和rmdir命令整体上来说即删除命令，即文件系统中文件的删除操作。
Datedir:被删除的目录根据删除时间在回收站目录下生成的当前时间点的日期目录。
Rename操作：通过rename命令的批量处理操作实现将文件放入回收站的操作。
Date：/date代表文件系统在date目录下挂载，即表示文件系统数据文件。
Recycle：生成的回收站目录。
如图3所示，分布式集群上的回收系统，包括与存储设备通过网络连接的多个集群结点（客户机1、2……N）。存储设备包含数据目录（/data）及用于删除恢复的隐藏目录(/.recycle)。数据目录用于存储正常数据。隐藏目录用于接收从数据目录删除的文件或目录，并供进行数据恢复。
上述虽然结合附图对本发明的具体实施方式进行了描述，但并非对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

Claims (5)

1.一种分布式集群上的回收站应用方法，其特征在于，包括以下步骤：
在文件系统根目录建立隐藏目录；
移动被删除的文件或目录至指定位置，并为删除的文件或目录重构完整的上层目录。
2.如权利要求1所述的分布式集群上的回收站应用方法，其特征在于，包括通过更改集群节点配置文件中的参数对回收站进行开启或关闭。
3.如权利要求1所述的分布式集群上的回收站应用方法，其特征在于，用户执行文件或者目录删除操作，回收站功能开启后，判断文件是否在回收站目录中，如果文件在回收站目录中；则可以直接执行删除操作，如果文件不在回收站目录中，判断回收站目录是否存在，如果不存在，则创建该目录，并在回收站目录下创建当前时间点的日期目录。
4.如权利要求1所述的分布式集群上的回收站应用方法，其特征在于，包括通过修改集群节点的配置参数设定文件的过期时间、定期扫描回收站时间，每隔一段时间进行一次扫描，对过期的文件和目录进行删除。
5.根据权利要求1的分布式集群上的回收系统，其特征在于，包括与存储设备通过网络连接的多个集群结点；存储设备包含数据目录及用于删除恢复的隐藏目录；数据目录用于存储正常数据；隐藏目录用于接收从数据目录删除的文件或目录，并供进行数据恢复。
CN201710381978.0A 2017-05-26 2017-05-26 一种分布式集群上的回收站应用方法及系统 Pending CN107239521A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710381978.0A CN107239521A (zh) 2017-05-26 2017-05-26 一种分布式集群上的回收站应用方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710381978.0A CN107239521A (zh) 2017-05-26 2017-05-26 一种分布式集群上的回收站应用方法及系统

Publications (1)

Publication Number Publication Date
CN107239521A true CN107239521A (zh) 2017-10-10

Family

ID=59984654

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710381978.0A Pending CN107239521A (zh) 2017-05-26 2017-05-26 一种分布式集群上的回收站应用方法及系统

Country Status (1)

Country Link
CN (1) CN107239521A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108228813A (zh) * 2017-12-29 2018-06-29 北京奇虎科技有限公司 分布式系统中副本数据库的删除方法及装置
CN108228100A (zh) * 2017-12-27 2018-06-29 郑州云海信息技术有限公司 一种基于海量存储系统的数据安全处理方法和系统
CN108984114A (zh) * 2018-06-08 2018-12-11 深圳大普微电子科技有限公司 数据处理方法和固态硬盘
CN109388624A (zh) * 2018-10-09 2019-02-26 郑州云海信息技术有限公司 分布式文件删除方法、装置、系统及计算机可读存储介质
CN110888847A (zh) * 2019-12-16 2020-03-17 新华三技术有限公司成都分公司 一种回收站系统及文件回收方法
CN111026751A (zh) * 2019-11-22 2020-04-17 北京金山云网络技术有限公司 分布式表格的处理方法、装置、系统及电子设备
CN111475470A (zh) * 2020-03-27 2020-07-31 苏州浪潮智能科技有限公司 一种恢复回收站删除文件与目录的方法及系统
CN111708736A (zh) * 2020-05-21 2020-09-25 四川虹美智能科技有限公司 数据文件处理方法及安卓系统文件管理装置
CN113032351A (zh) * 2021-03-31 2021-06-25 建信金融科技有限责任公司 网络文件系统的回收方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080077633A1 (en) * 2006-09-25 2008-03-27 International Business Machines Corporation Method for policy-based data placement when restoring files from off-line storage
CN103019891A (zh) * 2012-12-24 2013-04-03 珠海金山办公软件有限公司 一种还原被删除文件的方法及系统
CN103973731A (zh) * 2013-01-29 2014-08-06 中兴通讯股份有限公司 一种云存储的回收站管理方法和装置
CN104199750A (zh) * 2014-08-26 2014-12-10 上海天脉聚源文化传媒有限公司 一种linux系统的文件恢复方法及装置
CN105763745A (zh) * 2016-04-26 2016-07-13 努比亚技术有限公司 一种数据保护方法、装置及移动终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080077633A1 (en) * 2006-09-25 2008-03-27 International Business Machines Corporation Method for policy-based data placement when restoring files from off-line storage
CN103019891A (zh) * 2012-12-24 2013-04-03 珠海金山办公软件有限公司 一种还原被删除文件的方法及系统
CN103973731A (zh) * 2013-01-29 2014-08-06 中兴通讯股份有限公司 一种云存储的回收站管理方法和装置
CN104199750A (zh) * 2014-08-26 2014-12-10 上海天脉聚源文化传媒有限公司 一种linux系统的文件恢复方法及装置
CN105763745A (zh) * 2016-04-26 2016-07-13 努比亚技术有限公司 一种数据保护方法、装置及移动终端

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108228100A (zh) * 2017-12-27 2018-06-29 郑州云海信息技术有限公司 一种基于海量存储系统的数据安全处理方法和系统
CN108228813B (zh) * 2017-12-29 2021-08-24 北京奇虎科技有限公司 分布式系统中副本数据库的删除方法及装置
CN108228813A (zh) * 2017-12-29 2018-06-29 北京奇虎科技有限公司 分布式系统中副本数据库的删除方法及装置
CN108984114A (zh) * 2018-06-08 2018-12-11 深圳大普微电子科技有限公司 数据处理方法和固态硬盘
CN109388624A (zh) * 2018-10-09 2019-02-26 郑州云海信息技术有限公司 分布式文件删除方法、装置、系统及计算机可读存储介质
CN111026751A (zh) * 2019-11-22 2020-04-17 北京金山云网络技术有限公司 分布式表格的处理方法、装置、系统及电子设备
CN111026751B (zh) * 2019-11-22 2024-02-09 北京金山云网络技术有限公司 分布式表格的处理方法、装置、系统及电子设备
CN110888847A (zh) * 2019-12-16 2020-03-17 新华三技术有限公司成都分公司 一种回收站系统及文件回收方法
CN111475470A (zh) * 2020-03-27 2020-07-31 苏州浪潮智能科技有限公司 一种恢复回收站删除文件与目录的方法及系统
CN111475470B (zh) * 2020-03-27 2022-05-31 苏州浪潮智能科技有限公司 一种恢复回收站删除文件与目录的方法及系统
CN111708736A (zh) * 2020-05-21 2020-09-25 四川虹美智能科技有限公司 数据文件处理方法及安卓系统文件管理装置
CN111708736B (zh) * 2020-05-21 2023-06-23 四川虹美智能科技有限公司 数据文件处理方法及安卓系统文件管理装置
CN113032351A (zh) * 2021-03-31 2021-06-25 建信金融科技有限责任公司 网络文件系统的回收方法及装置

Similar Documents

Publication Publication Date Title
CN107239521A (zh) 一种分布式集群上的回收站应用方法及系统
CN105897946B (zh) 一种访问地址的获取方法及系统
CN102171661B (zh) 从整体数据库备份中恢复所选对象
CN105190623B (zh) 日志记录管理
CN103548003B (zh) 用于提高去重复系统备份性能的客户端侧指纹缓存的方法和系统
CN104769555A (zh) 增强型数据管理虚拟化系统
CN104541252A (zh) 用于实现基于服务器的分层大容量存储系统的系统和方法
EP2687987A1 (en) Method, system and serving node for data backup and recovery
CN104011717A (zh) 对数据存储备份的数据选择
CN104731691A (zh) 动态调整分布式文件系统内文件副本数目的方法和系统
CN102880531A (zh) 数据库备份系统及其备份方法和从数据库服务器
CN103095843A (zh) 一种基于版本矢量的数据备份方法及客户端
CN104283960A (zh) 实现异构网络存储的虚拟化整合及分级管理的系统
CN106775446A (zh) 基于固态硬盘加速的分布式文件系统小文件访问方法
CN104662522B (zh) 使用存储系统功能性的全虚拟机备份的系统和方法
CN103902405B (zh) 一种准连续性数据复制方法及装置
CN108536743A (zh) 一种指控系统数据库数据同步系统
CN110109778A (zh) 一种大量小数据文件备份方法及恢复方法
CN110413571A (zh) 基于MongoDB大规模遥感影像数据分布式存储方法
CN109144785A (zh) 用于备份数据的方法和装置
CN109165206A (zh) 基于容器的hdfs高可用实现方法
CN105138275B (zh) 一种Lustre存储系统数据共享方法
CN107026876A (zh) 一种文件数据访问系统及方法
CN103118104A (zh) 一种基于版本矢量的数据还原方法及服务器
CN100498766C (zh) 基于数据库的海量文件管理系统与方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20171010

RJ01 Rejection of invention patent application after publication