CN111741106A - 基于文件存储系统的文件归档方法及装置、电子设备 - Google Patents

基于文件存储系统的文件归档方法及装置、电子设备 Download PDF

Info

Publication number
CN111741106A
CN111741106A CN202010567721.6A CN202010567721A CN111741106A CN 111741106 A CN111741106 A CN 111741106A CN 202010567721 A CN202010567721 A CN 202010567721A CN 111741106 A CN111741106 A CN 111741106A
Authority
CN
China
Prior art keywords
file
storage system
attribute
determining
archiving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010567721.6A
Other languages
English (en)
Inventor
曹奥
张旭明
王豪迈
胥昕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xsky Beijing Data Technology Corp ltd
Original Assignee
Xsky Beijing Data Technology Corp ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xsky Beijing Data Technology Corp ltd filed Critical Xsky Beijing Data Technology Corp ltd
Priority to CN202010567721.6A priority Critical patent/CN111741106A/zh
Publication of CN111741106A publication Critical patent/CN111741106A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/113Details of archiving
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • G06F16/1824Distributed file systems implemented using Network-attached Storage [NAS] architecture
    • G06F16/1827Management specifically adapted to NAS

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于文件存储系统的文件归档方法及装置、电子设备。其中,该方法包括:遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录;确定文件目录下每个文件的历史访问时间;计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;若文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。本发明解决了相关技术中在归档文件时,应用与存储方式绑定,导致更换厂家操作方式复杂的技术问题。

Description

基于文件存储系统的文件归档方法及装置、电子设备
技术领域
本发明涉及文件处理技术领域,具体而言,涉及一种基于文件存储系统的文件归档方法及装置、电子设备。
背景技术
相关技术中,NAS(网络连接式存储)是一种专用的数据存储服务器,包括存储器件(例如磁盘阵列、CD/DVD驱动器、磁带驱动器或可移动的存储介质)和内嵌系统软件,可提供跨平台文件共享功能。NAS通常在一个LAN上占有自己的节点,无需应用服务器的干预,允许用户在网络上存取数据,在这种配置中,NAS集中管理和处理网络上的所有数据,将负载从应用或企业服务器上卸载下来,有效降低总拥有成本,保护用户投资,NAS本身能够支持多种协议(如NFS、CIFS、FTP等),而且能够支持各种操作系统。
在实际应用中,随着业务的持续运行,NAS存储中的数据不停增长,为了保持NAS存储的高性能以及存储空间,需要将NAS存储中长期没有使用的文件,归档到较低端或者性价比更高的存储上,把更快更稳定的NAS存储空间让给热门数据。
而当前的归档方式,是将NAS存储里长期未访问的文件归档到性价比更高的云端,这种归档方式存在多个弊端,第一种,如果应用再次访问时,需要修改应用实现逻辑,比如用户的原本windows应用,读写逻辑,只关注SMB共享挂载为Z盘即可,应用读写数据都在Z盘上,数据迁移后,热数据依然在Z盘,冷数据在云端,应用需要适配的修改以及区分冷热数据等,增加了应用的处理复杂度。第二个弊端,已经归档的数据,如果应用需要再次访问时,云端就不存在对应的权限控制。第三个弊端,厂家专用的客户端,如果用户应用适配的进行访问修改,则容易与存储绑定,导致后期想换其他厂家时操作复杂。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种基于文件存储系统的文件归档方法及装置、电子设备,以至少解决相关技术中在归档文件时,应用与存储方式绑定,导致更换厂家操作方式复杂的技术问题。
根据本发明实施例的一个方面,提供了一种基于文件存储系统的文件归档方法,包括:遍历所述文件存储系统的文件存储区中所有文件,得到文件信息,其中,所述文件信息至少包括:文件目录;确定所述文件目录下每个文件的历史访问时间;计算所述历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;若所述文件未访问的间隔时长超出预设时间段,将所述文件归档至虚拟云端。
可选地,在确定所述文件目录下每个文件的历史访问时间之后,所述文件归档方法还包括:若确定所述历史访问时间超出所述预设时间段,确定所述文件的访问属性为低于属性;若确定所述历史访问时间未超出所述预设时间段,确定所述文件的访问属性为第二属性,其中,所述第二属性的文件访问频率高于第一属性的访问频率。
可选地,在将所述文件归档至虚拟云端之后,所述文件归档方法还包括:若文件归档完毕,确定每个文件的元数据信息和文件链接信息;保存所述元数据信息在所述文件存储区中,并保存所述文件链接信息至目标应用下的文件挂载盘中。
可选地,在遍历所述文件存储系统的文件存储区中所有文件,得到文件信息之前,所述文件归档方法还包括:确定所述文件存储系统的应用环境;若所述应用环境为Windows应用环境,则将所述文件存储系统的文件存储区中的各个文件共享至目标驱动器,其中,所述目标驱动器用于读写所述文件;若所述应用环境为Linux应用环境,则将所述文件存储系统的文件存储区中的各个文件共享至目标挂载点,其中,所述目标挂载点用于链接访问所述文件。
可选地,在将所述文件归档至虚拟云端之后,所述文件归档方法还包括:接收文件删除指令;基于所述文件删除指令,将所述虚拟云端中的目标文件删除;在所述目标文件删除后,销毁所述虚拟云端中存储所述目标文件的虚拟存储盘。
可选地,所述文件归档方法的应用环境包括下述至少之一:网络连接式存储NAS环境、分布式文件系统DFS环境、对象存储系统OSS环境。
根据本发明实施例的另一方面,还提供了一种基于文件存储系统的文件归档装置,包括:遍历单元,用于遍历所述文件存储系统的文件存储区中所有文件,得到文件信息,其中,所述文件信息至少包括:文件目录;确定单元,用于确定所述文件目录下每个文件的历史访问时间;计算单元,用于计算所述历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;归档单元,用于若所述文件未访问的间隔时长超出预设时间段,将所述文件归档至虚拟云端。
可选地,所述文件归档装置还包括:第一确定模块,用于在确定所述文件目录下每个文件的历史访问时间之后,若确定所述历史访问时间超出所述预设时间段,确定所述文件的访问属性为低于属性;第二确定模块,用于在确定所述历史访问时间未超出所述预设时间段时,确定所述文件的访问属性为第二属性,其中,所述第二属性的文件访问频率高于第一属性的访问频率。
可选地,所述文件归档装置还包括:第三确定模块,用于在将所述文件归档至虚拟云端之后,若文件归档完毕,确定每个文件的元数据信息和文件链接信息;保存模块,用于保存所述元数据信息在所述文件存储区中,并保存所述文件链接信息至目标应用下的文件挂载盘中。
可选地,所述文件归档装置还包括:第四确定模块,用于在遍历所述文件存储系统的文件存储区中所有文件,得到文件信息之前,确定所述文件存储系统的应用环境;第一共享模块,用于在所述应用环境为Windows应用环境时,则将所述文件存储系统的文件存储区中的各个文件共享至目标驱动器,其中,所述目标驱动器用于读写所述文件;第二共享模块,用于在所述应用环境为Linux应用环境时,则将所述文件存储系统的文件存储区中的各个文件共享至目标挂载点,其中,所述目标挂载点用于链接访问所述文件。
可选地,所述文件归档装置还包括:接收模块,用于在将所述文件归档至虚拟云端之后,接收文件删除指令;删除模块,用于基于所述文件删除指令,将所述虚拟云端中的目标文件删除;销毁模块,用于在所述目标文件删除后,销毁所述虚拟云端中存储所述目标文件的虚拟存储盘。
可选地,所述文件归档方法的应用环境包括下述至少之一:网络连接式存储NAS环境、分布式文件系统DFS环境、对象存储系统OSS环境。
根据本发明实施例的另一方面,还提供了一种电子设备,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述任意一项所述的基于文件存储系统的文件归档方法。
根据本发明实施例的另一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行上述任意一项所述的基于文件存储系统的文件归档方法。
本发明实施例中,在归档文件时,先遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录,之后可确定文件目录下每个文件的历史访问时间让,然后可计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长,若文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。在该实施例中,可以通过文件间隔时长,归档各种文件,文件以完整的格式存储在云端,应用随时可以修改为云端的通用接口访问,不存在存储绑定,也不会出现更换厂家时的复杂操作,从而解决相关技术中在归档文件时,应用与存储方式绑定,导致更换厂家操作方式复杂的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种可选的基于文件存储系统的文件归档方法的流程图;
图2是根据本发明实施例的一种可选的基于文件存储系统的文件归档装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为便于本领域技术人员理解本发明,下面对本发明各实施例中涉及的部分术语或者名词做出解释:
NAS,Network Attached Storage,网络连接式存储。随着业务的持续运行,NAS存储中的数据不停增长,为了保持NAS存储的高性能以及存储空间,需要将NAS存储中长期没有使用的文件,归档到较低端或者性价比更高的存储上,把更快更稳定的NAS存储空间让给热门数据。
本发明下述各实施例,可以解决现有技术中的文件归档缺点,能够保留文件原本的所有属性,所有数据还是和原有文件存储系统NAS一样的权限控制。同时,真实的第一属性数据和第二属性数据,以完整的格式全部存储在云端,应用随时可以修改为云端的通用接口访问,不存在存储绑定的问题。
根据本发明实施例,提供了一种基于文件存储系统的文件归档方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种可选的基于文件存储系统的文件归档方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录;
步骤S104,确定文件目录下每个文件的历史访问时间;
步骤S106,计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;
步骤S108,若文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。
通过上述步骤,可以在归档文件时,先遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录,之后可确定文件目录下每个文件的历史访问时间让,然后可计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长,若文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。在该实施例中,可以通过文件间隔时长,归档各种文件,文件以完整的格式存储在云端,应用随时可以修改为云端的通用接口访问,不存在存储绑定,也不会出现更换厂家时的复杂操作,并且将长期未访问的文件归档到云端,能够节省存储服务器的存储空间,从而解决相关技术中在归档文件时,应用与存储方式绑定,导致更换厂家操作方式复杂的技术问题。
本发明实施例涉及的文件归档方法的应用环境包括下述至少之一:网络连接式存储NAS环境、分布式文件系统DFS(如lusterfs等提供的NAS业务)、对象存储系统OSS环境(如nfs-ganesha提供的nfs服务),本发明以NAS为例进行示意性说明。
本发明实施例中,可以将文件存储系统长期未访问的文件归档到云端,创建软链接到drfs对应的文件,对于应用来说,已经归档的数据仍然视为普通的文件正常访问即可,应用无需修改业务逻辑。原NAS存储里的软链接/快捷方式,保留该文件的全部属性,由此保留原本的权限控制。这样NAS存储和云端都保留了完整的数据格式,无存储绑定。
本发明应用的软件可以为容灾软件DRS,在容灾软件DRS中引入drfs的概念,真实后端支持,以s3协议访问的云端(比如xsky对象存储等)。
下面结合上述各步骤来详细说明本发明。
可选的,在遍历文件存储系统的文件存储区中所有文件,得到文件信息之前,文件归档方法包括:确定文件存储系统的应用环境;若应用环境为Windows应用环境,则将文件存储系统的文件存储区中的各个文件共享至目标驱动器,其中,目标驱动器用于读写文件;若应用环境为Linux应用环境,则将文件存储系统的文件存储区中的各个文件共享至目标挂载点,其中,目标挂载点用于链接访问文件。
对于应用来说,依然访问文件存储系统NAS挂载点的文件,应用无需修改逻辑,同时增加挂载点进行挂载操作,将归档后端挂载为目标挂载点,这样如果后端为NAS存储,可以直接NAS挂载即可,如果是其他云端,drfs提供挂载方式。
步骤S102,遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录。
该文件的类型包括但不限于:word文件、excel文件、视频文件、程序文件。
例如,编译NAS存储中遍历的readdir(读目录)以及stat(先确定是文件/目录,在确定为目录的情况下,对应读取目录下各个文件),从而得到文件目录和文件的历史访问时间。
步骤S104,确定文件目录下每个文件的历史访问时间。
在本发明实施例,在确定文件目录下每个文件的历史访问时间之后,文件归档方法还包括:若确定历史访问时间超出预设时间段,确定文件的访问属性为低于属性;若确定历史访问时间未超出预设时间段,确定文件的访问属性为第二属性,其中,第二属性的文件访问频率高于第一属性的访问频率。
上述第一属性可以理解为热属性,第二属性为冷属性。按照文件历史最近一次的历史访问时间和当前时间,统计超出各个时间段未访问的文件,然后根据未访问的文件的未访问时长,对文件进行归档。
本申请重点对热数据和冷数据进行中低端分层存储。
上述第一预设时间段和第二预设时间段可以自行设置,根据分层存储的要求,自行设置分层时的属性间隔时间,例如,设置第一预设时间段为一年,第二预设时间段为两年。
步骤S106,计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长。
步骤S108,若文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。
可选的,在将文件归档至虚拟云端之后,文件归档方法还包括:若文件归档完毕,确定每个文件的元数据信息和文件链接信息;保存元数据信息在文件存储区中,并保存文件链接信息至目标应用下的文件挂载盘中。
即在原文件存储系统中,保留文件的元数据信息,创建软链接到第一目标存储层下对应的文件,例如:如果是Windows应用则创建快捷方式到X盘里对应的文件;如果是Linux应用,则创建软链接到/drs目录下对应的文件。这样,对于应用来说,依然访问文件存储系统挂载点的文件,应用无需修改逻辑。
对于应用来说,虽然file1真实的数据在云端,但是应用仍然可以如常的访问文件file1,应用无需做修改即可访问已经归档到云端的数据,而且业务APP无需修改任何逻辑。
另一种可选的,在将文件归档至虚拟云端之后,文件归档方法还包括:接收文件删除指令;基于文件删除指令,将虚拟云端中的目标文件删除;在目标文件删除后,销毁虚拟云端中存储目标文件的虚拟存储盘。
本发明实施例,可以将NAS存储里长期未访问的文件归档到云端,创建软链接到drfs对应的文件。对于应用来说,已经归档的数据仍然视为普通的文件正常访问即可,应用无需修改业务逻辑。
同时,原NAS存储里的软链接/快捷方式,保留该文件的全部属性,由此保留原本的权限控制,由于应用无存储绑定,NAS存储/云端都保留了完整的数据格式,应用可以方便的按需修改访问接口访问NAS/云端。
通过上述技术方案,可以将遍历出的文件按照未访问时长进行云端和存储端归档,通过云端归档技术,将NAS存储里长期未访问的文件归档到云端,创建软链接到drfs对应的文件,对于应用来说,已经归档的数据仍然视为普通的文件正常访问即可,应用无需修改业务逻辑,这样NAS存储/云端都保留了完整的数据格式,应用可以方便的按需修改访问接口访问NAS/云端。
图2是根据本发明实施例的一种可选的基于文件存储系统的文件归档装置的示意图,如图2所示,该文件归档装置可以包括:遍历单元21、确定单元23、计算单元25、归档单元27,其中,
遍历单元21,用于遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录;
确定单元23,用于确定文件目录下每个文件的历史访问时间;
计算单元25,用于计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;
归档单元27,用于若文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。
上述基于文件存储系统的文件归档装置,可以归档文件时,先通过遍历单元21遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录,之后可通过确定单元23确定文件目录下每个文件的历史访问时间让,然后可通过计算单元25计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长,最后可以通过归档单元27在文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。在该实施例中,可以通过文件间隔时长,归档各种文件,文件以完整的格式存储在云端,应用随时可以修改为云端的通用接口访问,不存在存储绑定,也不会出现更换厂家时的复杂操作,从而解决相关技术中在归档文件时,应用与存储方式绑定,导致更换厂家操作方式复杂的技术问题。
可选的,文件归档装置还包括:第一确定模块,用于在确定文件目录下每个文件的历史访问时间之后,若确定历史访问时间超出预设时间段,确定文件的访问属性为低于属性;第二确定模块,用于在确定历史访问时间未超出预设时间段时,确定文件的访问属性为第二属性,其中,第二属性的文件访问频率高于第一属性的访问频率。
在本发明实施例中,文件归档装置还包括:第三确定模块,用于在将文件归档至虚拟云端之后,若文件归档完毕,确定每个文件的元数据信息和文件链接信息;保存模块,用于保存元数据信息在文件存储区中,并保存文件链接信息至目标应用下的文件挂载盘中。
另一种可选的,文件归档装置还包括:第四确定模块,用于在遍历文件存储系统的文件存储区中所有文件,得到文件信息之前,确定文件存储系统的应用环境;第一共享模块,用于在应用环境为Windows应用环境时,则将文件存储系统的文件存储区中的各个文件共享至目标驱动器,其中,目标驱动器用于读写文件;第二共享模块,用于在应用环境为Linux应用环境时,则将文件存储系统的文件存储区中的各个文件共享至目标挂载点,其中,目标挂载点用于链接访问文件。
可选的,文件归档装置还包括:接收模块,用于在将文件归档至虚拟云端之后,接收文件删除指令;删除模块,用于基于文件删除指令,将虚拟云端中的目标文件删除;销毁模块,用于在目标文件删除后,销毁虚拟云端中存储目标文件的虚拟存储盘。
可选的,文件归档方法的应用环境包括下述至少之一:网络连接式存储NAS环境、分布式文件系统DFS环境、对象存储系统OSS环境。
上述的基于文件存储系统的文件归档装置还可以包括处理器和存储器,上述遍历单元21、确定单元23、计算单元25、归档单元27等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
上述处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过在文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。
上述存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
根据本发明实施例的另一方面,还提供了一种电子设备,包括:处理器;以及存储器,用于存储处理器的可执行指令;其中,处理器配置为经由执行可执行指令来执行上述任意一项的基于文件存储系统的文件归档方法。
根据本发明实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质包括存储的计算机程序,其中,在计算机程序运行时控制计算机可读存储介质所在设备执行上述任意一项的基于文件存储系统的文件归档方法。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:遍历文件存储系统的文件存储区中所有文件,得到文件信息,其中,文件信息至少包括:文件目录;确定文件目录下每个文件的历史访问时间;计算历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;若文件未访问的间隔时长超出预设时间段,将文件归档至虚拟云端。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种基于文件存储系统的文件归档方法,其特征在于,包括:
遍历所述文件存储系统的文件存储区中所有文件,得到文件信息,其中,所述文件信息至少包括:文件目录;
确定所述文件目录下每个文件的历史访问时间;
计算所述历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;
若所述文件未访问的间隔时长超出预设时间段,将所述文件归档至虚拟云端。
2.根据权利要求1所述的文件归档方法,其特征在于,在确定所述文件目录下每个文件的历史访问时间之后,所述文件归档方法还包括:
若确定所述历史访问时间超出所述预设时间段,确定所述文件的访问属性为低于属性;
若确定所述历史访问时间未超出所述预设时间段,确定所述文件的访问属性为第二属性,其中,所述第二属性的文件访问频率高于第一属性的访问频率。
3.根据权利要求1所述的文件归档方法,其特征在于,在将所述文件归档至虚拟云端之后,所述文件归档方法还包括:
若文件归档完毕,确定每个文件的元数据信息和文件链接信息;
保存所述元数据信息在所述文件存储区中,并保存所述文件链接信息至目标应用下的文件挂载盘中。
4.根据权利要求1所述的文件归档方法,其特征在于,在遍历所述文件存储系统的文件存储区中所有文件,得到文件信息之前,所述文件归档方法还包括:
确定所述文件存储系统的应用环境;
若所述应用环境为Windows应用环境,则将所述文件存储系统的文件存储区中的各个文件共享至目标驱动器,其中,所述目标驱动器用于读写所述文件;
若所述应用环境为Linux应用环境,则将所述文件存储系统的文件存储区中的各个文件共享至目标挂载点,其中,所述目标挂载点用于链接访问所述文件。
5.根据权利要求1所述的文件归档方法,其特征在于,在将所述文件归档至虚拟云端之后,所述文件归档方法还包括:
接收文件删除指令;
基于所述文件删除指令,将所述虚拟云端中的目标文件删除;
在所述目标文件删除后,销毁所述虚拟云端中存储所述目标文件的虚拟存储盘。
6.根据权利要求1至5中任意一项所述的文件归档方法,其特征在于,所述文件归档方法的应用环境包括下述至少之一:网络连接式存储NAS环境、分布式文件系统DFS环境、对象存储系统OSS环境。
7.一种基于文件存储系统的文件归档装置,其特征在于,包括:
遍历单元,用于遍历所述文件存储系统的文件存储区中所有文件,得到文件信息,其中,所述文件信息至少包括:文件目录;
确定单元,用于确定所述文件目录下每个文件的历史访问时间;
计算单元,用于计算所述历史访问时间与当前时间之间间隔的时间差值,得到文件未访问的间隔时长;
归档单元,用于若所述文件未访问的间隔时长超出预设时间段,将所述文件归档至虚拟云端。
8.根据权利要求7所述的文件归档装置,其特征在于,所述文件归档装置还包括:
第一确定模块,用于在确定所述文件目录下每个文件的历史访问时间之后,若确定所述历史访问时间超出所述预设时间段,确定所述文件的访问属性为低于属性;
第二确定模块,用于在确定所述历史访问时间未超出所述预设时间段时,确定所述文件的访问属性为第二属性,其中,所述第二属性的文件访问频率高于第一属性的访问频率。
9.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1至6中任意一项所述的基于文件存储系统的文件归档方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行权利要求1至6中任意一项所述的基于文件存储系统的文件归档方法。
CN202010567721.6A 2020-06-19 2020-06-19 基于文件存储系统的文件归档方法及装置、电子设备 Pending CN111741106A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010567721.6A CN111741106A (zh) 2020-06-19 2020-06-19 基于文件存储系统的文件归档方法及装置、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010567721.6A CN111741106A (zh) 2020-06-19 2020-06-19 基于文件存储系统的文件归档方法及装置、电子设备

Publications (1)

Publication Number Publication Date
CN111741106A true CN111741106A (zh) 2020-10-02

Family

ID=72651824

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010567721.6A Pending CN111741106A (zh) 2020-06-19 2020-06-19 基于文件存储系统的文件归档方法及装置、电子设备

Country Status (1)

Country Link
CN (1) CN111741106A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114996224A (zh) * 2022-07-01 2022-09-02 浙江大华技术股份有限公司 一种文件信息统计的方法、装置及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103078906A (zh) * 2012-12-26 2013-05-01 爱迪科特(北京)科技有限公司 文件透明迁移方法
CN104915376A (zh) * 2015-05-05 2015-09-16 华南理工大学 一种云存储中文件的归档压缩方法
CN106406765A (zh) * 2016-09-22 2017-02-15 江苏赞奇科技股份有限公司 基于文件链接的异构分布式存储系统及其文件管理方法
CN107870916A (zh) * 2016-09-23 2018-04-03 伊姆西Ip控股有限责任公司 存储管理方法及设备
CN108829341A (zh) * 2018-05-03 2018-11-16 上海科技大学 一种基于混合存储系统的数据管理方法
CN109491618A (zh) * 2018-11-20 2019-03-19 上海科技大学 基于混合存储的数据管理系统、方法、终端及介质
CN111095188A (zh) * 2017-09-14 2020-05-01 国际商业机器公司 使用基于云的模组的动态数据重定位

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103078906A (zh) * 2012-12-26 2013-05-01 爱迪科特(北京)科技有限公司 文件透明迁移方法
CN104915376A (zh) * 2015-05-05 2015-09-16 华南理工大学 一种云存储中文件的归档压缩方法
CN106406765A (zh) * 2016-09-22 2017-02-15 江苏赞奇科技股份有限公司 基于文件链接的异构分布式存储系统及其文件管理方法
CN107870916A (zh) * 2016-09-23 2018-04-03 伊姆西Ip控股有限责任公司 存储管理方法及设备
CN111095188A (zh) * 2017-09-14 2020-05-01 国际商业机器公司 使用基于云的模组的动态数据重定位
CN108829341A (zh) * 2018-05-03 2018-11-16 上海科技大学 一种基于混合存储系统的数据管理方法
CN109491618A (zh) * 2018-11-20 2019-03-19 上海科技大学 基于混合存储的数据管理系统、方法、终端及介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114996224A (zh) * 2022-07-01 2022-09-02 浙江大华技术股份有限公司 一种文件信息统计的方法、装置及电子设备
CN114996224B (zh) * 2022-07-01 2022-10-25 浙江大华技术股份有限公司 一种文件信息统计的方法、装置及电子设备

Similar Documents

Publication Publication Date Title
US9606740B2 (en) System, method and computer program product for synchronizing data written to tape including writing an index into a data partition
CN102870098B (zh) 经由通信网络向远程文件服务器传送文件的本地文件服务器及具有该文件服务器的存储系统
US8171244B2 (en) Methods for implementation of worm mode on a removable disk drive storage system
US7890716B2 (en) Method of managing time-based differential snapshot
US7725673B2 (en) Storage apparatus for preventing falsification of data
US9176853B2 (en) Managing copy-on-writes to snapshots
CN102685194B (zh) 存储设备迁移和重定向的方法和系统
US20070061540A1 (en) Data storage system using segmentable virtual volumes
WO2006026223A2 (en) Tape emulating disk based storage and method with automatically resized emulated tape capacity
CN103999058A (zh) 带驱动器系统服务器
EP2017749A1 (en) Methods for implementation of data formats on a removable disk drive storage system
CN105187523B (zh) 一种目录访问方法及装置
WO2012004827A1 (en) Storage subsystem and its control method
CN111741106A (zh) 基于文件存储系统的文件归档方法及装置、电子设备
CN114466083A (zh) 支持协议互通的数据存储系统
US7979650B2 (en) Discovering data storage for backup
CN113448946A (zh) 数据迁移方法及装置、电子设备
CN111741107A (zh) 基于文件存储系统的分层方法及装置、电子设备
CN110764694B (zh) 一种存储空间控制的方法和系统
CN109857519B (zh) 虚拟磁盘的处理方法及相关装置
CN108170372B (zh) 基于云硬盘的数据处理方法和装置
WO2011125132A1 (en) Information processing device and data shredding method for avoiding multiple shredding of a same data block
CN113360095B (zh) 硬盘数据管理方法、装置、设备及介质
CN108898030B (zh) 文件隐藏方法和装置
US20210191901A1 (en) Computer system and data access control method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100094 101, floors 1-5, building 7, courtyard 3, fengxiu Middle Road, Haidian District, Beijing

Applicant after: Beijing Xingchen Tianhe Technology Co.,Ltd.

Address before: 100097 room 806-1, block B, zone 2, Jinyuan times shopping center, indigo factory, Haidian District, Beijing

Applicant before: XSKY BEIJING DATA TECHNOLOGY Corp.,Ltd.

CB02 Change of applicant information