CN113282538A - 文件系统管理方法、装置、设备、存储介质、程序产品 - Google Patents

文件系统管理方法、装置、设备、存储介质、程序产品 Download PDF

Info

Publication number
CN113282538A
CN113282538A CN202110765106.0A CN202110765106A CN113282538A CN 113282538 A CN113282538 A CN 113282538A CN 202110765106 A CN202110765106 A CN 202110765106A CN 113282538 A CN113282538 A CN 113282538A
Authority
CN
China
Prior art keywords
file system
file
files
recording
utilization rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110765106.0A
Other languages
English (en)
Inventor
李天然
叶轮
秦浩军
郭晨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial and Commercial Bank of China Ltd ICBC
Original Assignee
Industrial and Commercial Bank of China Ltd ICBC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial and Commercial Bank of China Ltd ICBC filed Critical Industrial and Commercial Bank of China Ltd ICBC
Priority to CN202110765106.0A priority Critical patent/CN113282538A/zh
Publication of CN113282538A publication Critical patent/CN113282538A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/122File system administration, e.g. details of archiving or snapshots using management policies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3051Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/128Details of file system snapshots on the file-level, e.g. snapshot creation, administration, deletion

Abstract

本发明提供了一种文件系统管理方法,可用于金融领域或者其它领域。包括如下步骤:当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集;当文件系统使用率超过第二阀值时,记录使用率超过第二阀值的文件系统的信息并记录为第二数据集;当文件系统使用率超过第二阀值时,增量对比记录本次和上次快照的差异进行记录以生成对比文件。每当文件系统使用率发生明显增长或减少的时候,触发装置运行,第二数据集用于文件系统清理策略指引,对比文件用于文件系统动态弹性扩容场景、文件系统异常波动问题跟踪等场景。本发明还提供了一种文件系统管理装置、设备、存储介质、程序产品。

Description

文件系统管理方法、装置、设备、存储介质、程序产品
技术领域
本发明涉及金融交易安全技术领域,特别涉及一种文件系统管理方法、装置、设备、存储介质、程序产品。
背景技术
在开放平台运维场景中,文件系统使用率满、文件系统内文件增长过快、文件系统使用率异常增长等等诸多场景时,均可能引发系统异常,造成应用程序不可正常运行,因此需对操作系统文件系统使用率进行监控。传统的监控方法为,对文件系统使用率设定一个阀值,当使用率超过阀值后便产生监控告警,运维人员通过登录系统,逐层查看文件系统中占用较高的文件并确认是否可以清理。当维护的服务器数量成倍增加后,这种维护文件系统的方法会成倍的增加运维人员的工作量,且报警不具有易读性。
发明内容
本发明的主要目的是提供一种文件系统管理方法、装置、设备、存储介质、程序产品,旨在改善现有技术中,维护文件系统工作量大、报警不易读的技术问题。
为实现上述目的,本发明提供一种文件系统管理方法,可应用于金融领域。所述文件系统管理方法包括如下步骤:
当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集;
当文件系统使用率超过第二阀值时,记录使用率超过第二阀值的文件系统的信息并记录为第二数据集、以及增量对比记录本次和上次快照的差异进行记录以生成对比文件。
可选地,在所述当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集步骤之前还包括:
定时获取所有文件系统使用率。
可选地,所述文件系统的信息包括所有文件记录时点、文件系统名称、文件全名称、文件大小、文件大小排名。
可选地,所述增量对比记录本次和上次快照的差异进行记录以生成对比文件的步骤包括:
将变化的文件全名称、文件大小、文件大小排名、增加或减少标识计为第三数据集。
可选地,在所述增量对比记录本次和上次快照的差异进行记录以生成对比文件的步骤之后还包括:
将一段时间内所有的对比文件进行汇总,并划分为多个文件;
获取超过文件系统总容量预定值的所有文件;
根据变化次数对超过文件系统总容量预定值的所有文件进行排序。
可选地,所述将一段时间内所有的对比文件进行汇总,并划分为多个文件的步骤包括:
去掉重复名称,构建一个全量文件系统词库,词库里按文件系统名分为多个文件。
可选地,所述根据变化次数对超过文件系统总容量预定值的所有文件进行排序的步骤包括:
统计超过文件系统总容量预定值的文件中,变化次数前十的文件按次数降序排序,组成一个列表作为训练集中的标签,并映射至文件系统词库。
此外,为实现上述目的,本发明还提出一种文件系统管理装置,包括:
监控模块,用于监控文件系统的使用率;
快照生成模块,用于记录使用率超过第一阀值或第二阀值的文件系统的信息;以及,
增量对比模块,用于增量对比记录本次和上次快照的差异并生成对比文件。
可选地,所述文件系统管理装置还包括阀值设定模块。
此外,为实现上述目的,本发明还提出一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行上述任一项所述的方法。
此外,为实现上述目的,本发明还提出一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上文所述的文件系统管理方法的步骤。
在本发明提供的技术方案中,可用于金融领域或者其它领域。包括如下步骤:当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集;当文件系统使用率超过第二阀值时,记录使用率超过第二阀值的文件系统的信息并记录为第二数据集;当文件系统使用率超过第二阀值时,增量对比记录本次和上次快照的差异进行记录以生成对比文件。每当文件系统使用率发生明显增长或减少的时候,触发装置运行,第二数据集用于文件系统清理策略指引,对比文件用于文件系统动态弹性扩容场景、文件系统异常波动问题跟踪等场景。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。
图1是本发明实施例方案涉及的硬件运行环境的系统架构的结构示意图;
图2为图1中文件系统管理装置的结构示意图;
图3为图2中电子设备的结构示意图;
图4为本发明提供的文件系统管理方法的一实施例的流程示意图;
图5为本发明提供的文件系统管理方法中输入数据编码环节的示意图。
附图标号说明:
标号 名称 标号 名称
100 系统架构 1806 输入部分
101 文件系统管理装置 1807 输出部分
102 网络 1808 存储部分
103 服务器 1809 通信部分
1800 电子设备 1810 驱动器
1801 处理器 1811 可拆卸介质
1802 只读存储器 104 监控模块
1803 随机访问存储器 105 快照生成模块
1804 总线 106 增量对比模块
1805 I/O接口 107 阀值设定模块
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明进一步详细说明。对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/ 或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和 C、具有B和C、和/或具有A、B、C的系统等)。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/ 或流程图中所说明的功能/操作的装置。本公开的技术可以硬件和/或软件 (包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读存储介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。
需要说明,若本发明实施例中有涉及方向性指示,则该方向性指示仅用于解释在某一特定姿态下各部件之间的相对位置关系、运动情况等,如果该特定姿态发生改变时,则该方向性指示也相应地随之改变。
另外,若本发明实施例中有涉及“第一”、“第二”等的描述,则该“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,全文中出现的“和/或”的含义,包括三个并列的方案,以“A和/或B”为例,包括A 方案、或B方案、或A和B同时满足的方案。还有就是,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
在本发明的描述中,需要说明的是,术语““上”、“下”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
此外,在本发明的描述中,除非另有说明,“多个”、“多根”、“多组”的含义是两个或两个以上。
在开放平台运维场景中,文件系统使用率满、文件系统内文件增长过快、文件系统使用率异常增长等等诸多场景时,均可能引发系统异常,造成应用程序不可正常运行,因此需对操作系统文件系统使用率进行监控。传统的监控方法为,对文件系统使用率设定一个阀值,当使用率超过阀值后便产生监控告警,运维人员通过登录系统,逐层查看文件系统中占用较高的文件并确认是否可以清理。当维护的服务器数量成倍增加后,这种维护文件系统的方法会成倍的增加运维人员的工作量,且报警不具有易读性。
鉴于此,本发明提供一种文件系统管理方法、装置、设备、存储介质、程序产品。旨在改善现有技术中,维护文件系统工作量大、报警不易读的技术问题。
如图1所示,根据该实施例的系统架构100可以包括文件系统管理装置101,网络102及服务器103。网络102用于在文件系统管理装置101 和服务器103之间提供通信链路。网络102可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。需要注意的是,图1所示仅为可以应用本公开实施例的系统架构的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
需要说明的是,本公开实施例所提供的文件系统管理方法可以由服务器103执行。相应地,本公开实施例所提供的文件系统管理装置101可以设置于服务器103中。或者,本公开实施例所提供的文件系统管理方法也可以由不同于服务器103且能够与文件系统管理装置101和/或服务器103 通信的服务器或服务器集群执行。相应地,本公开实施例所提供的文件系统管理装置101也可以设置于不同于服务器103且能够与服务器 103通信的服务器或服务器集群中。或者,本公开实施例所提供的文件系统管理方法也可以部分由服务器103执行,文件系统管理装置101 执行。相应的,本公开实施例所提供的文件系统管理装置101也可以部分没置于服务器103中。
应该理解,图1中的文件系统管理装置101、网络102和服务器103 的数目仅仅是示意性的。根据实现需要,可以具有任意数目的文件系统管理装置101、网络102和服务器103。
参见图2,根据该公开实施例的文件系统管理装置101包括:监控模块104、快照生成模块105、增量对比模块106、阀值设定模块107。监控模块104用于监控文件系统的使用率;快照生成模块105用于记录使用率超过第一阀值或第二阀值的文件系统的信息;增量对比模块106用于增量对比记录本次和上次快照的差异并生成对比文件。阀值设定模块107用来调整各种阈值或者预设值。
需要说明的是,本公开的实施例中文件系统管理装置101的部分与本公开的实施例中文件系统管理方法部分是相对应的,其具体实施细节及带来的技术效果也是相同的,在此不再赘述。文件系统管理装置101仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
参照图3,图3为本发明实施例方案涉及的硬件运行环境的电子设备1800的结构示意图。如图3所示,该电子设备1800可以包括:处理器1801,其可以根据存储在只读存储器(ROM)1802中的程序或者从存储部分1808 加载到随机访问存储器(RAM)1803中的程序而执行各种适当的动作和处理。处理器1801例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器1801还可以包括用于缓存用途的板载存储器。处理器1801 可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 1803中,电子设备1800操作所需的各种程序和数据。处理器1801以及存储单元3,存储单元3包括ROM 1802以及RAM1803通过总线1804彼此相连。处理器1801通过执行ROM 1802和/或RAM1803中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,所述程序也可以存储在除ROM 1802和RAM 1803以外的一个或多个存储器中。处理器1801也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例,文本转流程图方法的控制装置1800还可以包括输入/输出(I/O)接口1805,输入/输出(I/O)接口1805也连接至总线 1804。文本转流程图方法的控制装置1800还可以包括连接至I/O接口1805 的以下部件中的一项或多项:包括键盘、鼠标等的输入部分1806;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分 1807;包括硬盘等的存储部分1808;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分1809。通信部分1809经由诸如因特网的网络执行通信处理。驱动器1810也根据需要连接至I/O接口1805。可拆卸介质1811,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器1810上,以便于从其上读出的计算机程序根据需要被安装入存储部分1808。其中,通信部分1809用于实现这些组件之间的连接通信,包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。输入/输出 (I/O)接口1805还可以包括标准的有线接口、无线接口,其中有线接口可以为USB接口。
在图3所示的电子设备1800还包括:网络接口主要用于连接后台服务器103,与所述后台服务器103进行数据通信;用户接口主要用于连接用户设备;电子设备1800通过处理器1801调用存储器中存储的文件系统管理方法的控制程序,并执行本发明实施例提供的文件系统管理方法的控制步骤。
本领域技术人员可以理解,图3中示出的结构并不构成对电子设备1800的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
基于上述硬件结构,提出本发明文件系统管理方法的实施例。
参见图4,图4为本发明文件系统管理方法一实施例的流程示意图,在一实施例中,文件系统管理方法包括如下步骤:
S10:当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集。
S20:当文件系统使用率超过第二阀值时,记录使用率超过第二阀值的文件系统的信息并记录为第二数据集、以及增量对比记录本次和上次快照的差异进行记录以生成对比文件。
进一步地,在步骤S10之前还包括:
步骤S09:定时获取所有文件系统使用率。
进一地,步骤S20包括:
步骤S201:将变化的文件全名称、文件大小、文件大小排名、增加或减少标识计为第三数据集。
参见图5,图5为步骤S20步骤之后的步骤流程示意图,包括如下步骤:
步骤S21:将一段时间内所有的对比文件进行汇总,并划分为多个文件。
步骤S22:获取超过文件系统总容量预定值的所有文件。
步骤S23:根据变化次数对超过文件系统总容量预定值的所有文件进行排序。
进一步地,步骤S21包括:
步骤S211:去掉重复名称,构建一个全量文件系统词库,词库里按文件系统名分为多个文件。
进一步地,步骤S23包括:
步骤S231:统计超过文件系统总容量预定值的文件中,变化次数前十的文件按次数降序排序,组成一个列表作为训练集中的标签,并映射至文件系统词库。
可以理解的是,每当文件系统使用率发生明显增长或减少的时候,都会触发文件系统管理装置运行,输出第一文件记录该文件系统内所有文件记录时点、文件系统名称、文件全名称、文件大小、文件大小排名等信息。若非首次运行,还会生成一个增量文件,记录和上一次触发装置的时点对比后,增加或减少的文件全名称、文件大小、文件大小排名、记录时点、文件系统名称等信息。第一文件可用于文件系统清理策略指引,增量文件可用于文件系统动态弹性扩容场景、文件系统异常波动问题跟踪等场景,也可与第一文件共同用于文件系统清理策略指引。第一文件、增量文件的信息数据和服务器静态信息如应用名称、节点名称、集群名称、网段等已知信息结合在一起作为机器学习逻辑回归模型的数据集,输入至机器学习算法装置,可实现可服务器文件系统使用情况智能预测。
需要说明的是,当文件系统使用率超过第一阀值时,便会触发快照生成功能,对超过第一阀值的文件系统当前时点的文件系统名称、文件系统使用率,文件全名称、文件大小、文件大小排名等信息进行记录。
当文件系统使用率上升或下降超过第二阀值时,触发快照生成功能和增量对比功能,即对当前时点的文件系统名称、文件系统使用率,文件全名称、文件大小、文件大小排名等信息进行记录,在此处记为数据集1;同时,增量对比记录本次和上次快照的差异进行记录,生成对比文件,即,变化的文件全名称、文件大小、文件大小排名,增加或减少标识,计为数据集2。数据集2的数据用于机器学习模型推理训练,从而实现预测功能。数据集1的数据则可直观的提供文件系统文件大小情况当前排名。
将所有服务器一段时间运行增量对比装置生成的一段时间的对比文件汇总在一起,去掉重复名称,构建一个全量文件系统词库,词库里按文件系统名分为多个文件,文件系统名称作为,每个文件中有多个词,词即文件系统全路径名称,类似如下结构:
{0:“文件全路径名1”,1:“文件全路径名2”,2:“文件全路径名3”,......,i:“文件全路径名i”}
统计每个服务器超过文件系统总容量1%(可自定义百分比)的文件中,变化次数top10的文件按次数降序排序,组成一个列表作为训练集中的标签,并映射至文件系统词库,得到类似于下列格式的列表:
Yi:[1,4,...,5],i=0...n,其中n为n台服务器
将所有服务器的配置信息诸如网段、应用名称、集群名称、节点名称、设备信息和每个信息出现次数构成词料库,如下:
网段0:200,
应用名称1:300,
集群名称3:1100,
节点名称9:288,
设备信息8:22
同时清洗服务器信息,将ip地址、应用名称、集群名称、节点名称、设备信息结合为语句列表,如下:
[“ip地址0”,“应用名称0”,“集群0”,“节点名称0”,“设备信息 0”],
[“ip地址1”,“应用名称1”,“集群1”,“节点名称1”,“设备信息 1”],
[“ip地址2”,“应用名称2”,“集群2”,“节点名称2”,“设备信息 2”],
[“ip地址3”,“应用名称3”,“集群3”,“节点名称3”,“设备信息 3”],
[“ip地址n”,“应用名称n”,“集群n”,“节点名称n”,“设备信息n”]
参见图5,将上述数据和词料库使用word2vec模型训练,则可将n条语句列表转化为n个向量矩阵,即完成了输入数据的编码环节(Encode),将编码后的特征值数据
[X1,X2,X3....Xn]
及其对应的标签数:
[Y1,Y2,Y3,...Yn]
输入经典RNN模型进行解码(Decode),得到最终训练权重为W的模型。通过上述训练,可实现预测服务器高频变动的文件TOP10,从而辅助运维人员设计清理策略。
综上所述,在本发明提供的技术方案中,可用于金融领域或者其它领域。包括如下步骤:当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集;当文件系统使用率超过第二阀值时,记录使用率超过第二阀值的文件系统的信息并记录为第二数据集;当文件系统使用率超过第二阀值时,增量对比记录本次和上次快照的差异进行记录以生成对比文件。每当文件系统使用率发生明显增长或减少的时候,触发装置运行,第二数据集用于文件系统清理策略指引,对比文件用于文件系统动态弹性扩容场景、文件系统异常波动问题跟踪等场景。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的装置/系统中所包含的;也可以是单独存在,而未装配入该装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
根据本公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质。例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器 (EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
例如,根据本公开的实施例,计算机可读存储介质可以包括上文描述的ROM和/或RAM和/或ROM和RAM以外的一个或多个存储器。
根据本公开的实施例,根据本公开实施例的方法流程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分从网络上被下载和安装,和/或从可拆卸介质被安装。在该计算机程序被处理器执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
当计算机程序产品在计算机系统中运行时,该程序代码用于使计算机系统实现本公开实施例所提供的物品推荐方法。在该计算机程序被处理器 1801执行时执行本公开实施例的系统/装置中限定的上述功能。根据本公开的实施例,上文描述的系统、装置、模块、单元等可以通过计算机程序模块来实现。
在一种实施例中,该计算机程序可以依托于光存储器件、磁存储器件等有形存储介质。在另一种实施例中,该计算机程序也可以在网络介质上以信号的形式进行传输、分发,并通过通信部分1809被下载和安装,和/ 或从可拆卸介质1811被安装。该计算机程序包含的程序代码可以用任何适当的网络介质传输,包括但不限于:无线、有线等等,或者上述的任意合适的组合。
在这样的实施例中,该计算机程序可以通过通信部分1809从网络上被下载和安装,和/或从可拆卸介质1811被安装。在该计算机程序被处理器1801执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
根据本公开的实施例,可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例提供的计算机程序的程序代码,具体地,可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。程序设计语言包括但不限于诸如Java,C++,python,“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器镜像(Read Only Memory image,ROM)/随机存取存储器(Random AccessMemory,RAM)、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (12)

1.一种文件系统管理方法,其特征在于,包括如下步骤:
当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集;
当文件系统使用率超过第二阀值时,记录使用率超过第二阀值的文件系统的信息并记录为第二数据集、以及增量对比记录本次和上次快照的差异进行记录以生成对比文件。
2.如权利要求1所述的文件系统管理方法,其特征在于,在所述当文件系统使用率超过第一阀值时,记录使用率超过第一阀值的文件系统的信息并记录为第一数据集步骤之前还包括:
定时获取所有文件系统使用率。
3.如权利要求1所述的文件系统管理方法,其特征在于,所述文件系统的信息包括所有文件记录时点、文件系统名称、文件全名称、文件大小、文件大小排名。
4.如权利要求1所述的文件系统管理方法,其特征在于,所述增量对比记录本次和上次快照的差异进行记录以生成对比文件的步骤包括:
将变化的文件全名称、文件大小、文件大小排名、增加或减少标识计为第三数据集。
5.如权利要求1所述的文件系统管理方法,其特征在于,在所述增量对比记录本次和上次快照的差异进行记录以生成对比文件的步骤之后还包括:
将一段时间内所有的对比文件进行汇总,并划分为多个文件;
获取超过文件系统总容量预定值的所有文件;
根据变化次数对超过文件系统总容量预定值的所有文件进行排序。
6.如权利要求5所述的文件系统管理方法,其特征在于,所述将一段时间内所有的对比文件进行汇总,并划分为多个文件的步骤包括:
去掉重复名称,构建一个全量文件系统词库,词库里按文件系统名分为多个文件。
7.如权利要求5所述的文件系统管理方法,其特征在于,所述根据变化次数对超过文件系统总容量预定值的所有文件进行排序的步骤包括:
统计超过文件系统总容量预定值的文件中,变化次数前十的文件按次数降序排序,组成一个列表作为训练集中的标签,并映射至文件系统词库。
8.一种文件系统管理装置,其特征在于,包括:
监控模块,用于监控文件系统的使用率;
快照生成模块,用于记录使用率超过第一阀值或第二阀值的文件系统的信息;以及,
增量对比模块,用于增量对比记录本次和上次快照的差异并生成对比文件。
9.如权利要求8所述的文件系统管理装置,其特征在于,所述文件系统管理装置还包括阀值设定模块。
10.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行根据权利要求1~7中任一项所述的方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有可执行指令,该指令被处理器执行时使处理器执行根据权利要求1~7中任一项所述的方法。
12.一种计算机程序产品,其特征在于,包括计算机程序,所述计算机程序被处理器执行时实现根据权利要求1~7中任一项所述的方法。
CN202110765106.0A 2021-07-06 2021-07-06 文件系统管理方法、装置、设备、存储介质、程序产品 Pending CN113282538A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110765106.0A CN113282538A (zh) 2021-07-06 2021-07-06 文件系统管理方法、装置、设备、存储介质、程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110765106.0A CN113282538A (zh) 2021-07-06 2021-07-06 文件系统管理方法、装置、设备、存储介质、程序产品

Publications (1)

Publication Number Publication Date
CN113282538A true CN113282538A (zh) 2021-08-20

Family

ID=77286421

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110765106.0A Pending CN113282538A (zh) 2021-07-06 2021-07-06 文件系统管理方法、装置、设备、存储介质、程序产品

Country Status (1)

Country Link
CN (1) CN113282538A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115657969A (zh) * 2022-12-23 2023-01-31 苏州浪潮智能科技有限公司 一种获取文件系统差异数据的方法、装置、设备及介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115657969A (zh) * 2022-12-23 2023-01-31 苏州浪潮智能科技有限公司 一种获取文件系统差异数据的方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
US11269718B1 (en) Root cause detection and corrective action diagnosis system
CN109992473B (zh) 应用系统的监控方法、装置、设备及存储介质
CN108509325B (zh) 系统超时时间的动态确定方法与装置
US11004012B2 (en) Assessment of machine learning performance with limited test data
CN109272348B (zh) 活跃用户数量确定方法及装置、存储介质和电子设备
CN114399321A (zh) 一种业务系统稳定性分析方法、装置和设备
CN113282538A (zh) 文件系统管理方法、装置、设备、存储介质、程序产品
US20230262491A1 (en) System and method for reducing system performance degradation due to excess traffic
CN115905863A (zh) 机器学习模型训练方法、量子网络设备性能值预测方法
CN114780338A (zh) 主机信息处理方法、装置、电子设备和计算机可读介质
WO2021189949A1 (zh) 信息推荐方法、装置、电子设备及介质
CN108400929B (zh) 数据处理方法、装置、计算设备和介质
CN111210109A (zh) 基于关联用户预测用户风险的方法、装置和电子设备
CN113946493A (zh) 一种监控阈值确定及监控报警方法、装置、设备和介质
CN112764957A (zh) 应用故障定界方法及装置
KR20220007326A (ko) 전자 장치 및 그의 제어 방법
US20230126193A1 (en) Predictive Remediation Action System
EP4184328A1 (en) Medical imaging device fault handling
CN115225532B (zh) 网络安全态势预测方法、装置、设备及存储介质
CN114710397B (zh) 服务链路的故障根因定位方法、装置、电子设备及介质
US11782784B2 (en) Remediation action system
CN113298636B (zh) 一种基于模拟资源申请的风险控制方法、装置和系统
KR102627063B1 (ko) 정보인프라에서 인공지능 기반의 오류 취약 요인 예측 장치
CN116599873B (zh) VoLTE系统监控方法及装置、存储介质和电子设备
CN113487316A (zh) 分布式支付系统安全处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination