CN108763454A - 分布式文件系统日志更新方法、系统、装置及存储介质 - Google Patents

分布式文件系统日志更新方法、系统、装置及存储介质 Download PDF

Info

Publication number
CN108763454A
CN108763454A CN201810522061.2A CN201810522061A CN108763454A CN 108763454 A CN108763454 A CN 108763454A CN 201810522061 A CN201810522061 A CN 201810522061A CN 108763454 A CN108763454 A CN 108763454A
Authority
CN
China
Prior art keywords
hard disk
daily record
logmonitor
file system
distributed file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810522061.2A
Other languages
English (en)
Inventor
王庆海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201810522061.2A priority Critical patent/CN108763454A/zh
Publication of CN108763454A publication Critical patent/CN108763454A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种分布式文件系统日志更新方法,包括:在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;判断所述第一硬盘是否繁忙;若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。本申请在第一硬盘繁忙的时候,将LogMonitor切换至第二硬盘运行,避免或减少LogMonitor写速度降低、Mon写日志受到阻塞的情况,从而LogMonitor和Mon的运行速度都能得到保证,提高分布式文件系统的响应速度。相应的,本申请还公开了一种分布式文件系统日志更新系统、装置及存储介质,具有相同的有益效果。

Description

分布式文件系统日志更新方法、系统、装置及存储介质
技术领域
本发明涉及分布式文件系统领域,特别涉及一种分布式文件系统日志更新方法、系统、装置及存储介质。
背景技术
在分布式文件系统中,Mon(monitor,管理者)模块负责维护分布式文件系统的一致性、响应用户命令、监控系统状态等。LogMonitor为Mon模块的子模块,负责维护各Mon的一致性。LogMonitor会将系统状态变化、操作记录等信息以日志文件的形式保存在本地磁盘中。当本地磁盘IO繁忙、压力较大时,LogMonitor写入日志的速度会大幅度降低。根据Mon的处理流程,当Mon完成议案流程,LogMonitor就会将最新的日志更新到磁盘的日志文件中去。如果LogMonitor的写入速度降低,Mon的主流程会受到阻碍,此时Mon无法响应用户输入的命令,同时Mon会因为租约超时而引发选举流程,影响系统性能。
因此,如何提供一种解决上述技术问题的方案是目前本领域技术人员需要解决的问题。
发明内容
有鉴于此,本发明的目的在于提供一种能够保证磁盘繁忙时LogMonitor写入日志速度的分布式文件系统日志更新方法、系统、装置及存储介质。其具体方案如下:
一种分布式文件系统日志更新方法,包括:
在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
判断所述第一硬盘是否繁忙;
若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
优选的,所述第二硬盘为固态硬盘。
优选的,所述LogMonitor在所述第二硬盘运行的同时,还包括:
判断所述第一硬盘是否繁忙;若否,将所述LogMonitor切换至所述第一硬盘运行。
优选的,所述在第一硬盘上运行LogMonitor之前,包括:
优化所述LogMonitor的代码,并精简LogMonitor的日志条目。
优选的,所述第一硬盘和所述第二硬盘的挂载目录均包括供所述LogMonitor在写入并存储当前日志时使用的日志目录。
优选的,所述分布式文件系统日志更新方法还包括:
对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理。
优选的,所述对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理的过程,具体包括:
将所述第二硬盘中存储的日志转移至所述第一硬盘;
清理所述第一硬盘中的待清理日志;
其中,所述待清理日志包括满足清理条件的所有日志,所述清理条件包括:
存储时间超出预设时长或占用空间超出预设范围。
相应的,本发明还公开了一种分布式文件系统日志更新系统,包括:
第一运行模块,用于在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
判断模块,用于判断所述第一硬盘是否繁忙,若是则触发第二运行模块;
所述第二运行模块,用于将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
相应的,本发明公开了一种分布式文件系统日志更新装置,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上文所述分布式文件系统日志更新方法的步骤。
相应的,本发明还公开了一种存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上文所述分布式文件系统日志更新方法的步骤。
本发明公开了一种分布式文件系统日志更新方法,包括:在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;判断所述第一硬盘是否繁忙;若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。本发明在第一硬盘繁忙的时候,将LogMonitor切换至第二硬盘运行,避免或减少LogMonitor写入速度降低、Mon写日志受到阻塞的情况,从而LogMonitor和Mon的运行速度都能得到保证,提高分布式文件系统的响应速度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例中一种分布式文件系统日志更新方法的步骤流程图;
图2为本发明实施例中一种分布式文件系统日志更新方法的子步骤流程图;
图3为本发明实施例中一种分布式文件系统日志更新系统的结构分布图;
图4为本发明实施例中一种分布式文件系统日志更新装置的结构分布图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在现有的分布式文件系统中,LogMonitor写入日志的速度会影响Mon的运行。当磁盘工作状态繁忙时无法给LogMonitor分配足够的速度,进而LogMonitor写入日志的速度降低,Mon的主流程受到阻碍,甚至影响分布式文件系统的响应速度。为此,本发明在磁盘繁忙时将LogMonitor切换到另一备份磁盘上运行,保证了LogMonitor的写入速度不受原磁盘状态的影响,避免Mon写日志受到阻碍,从而保证磁盘繁忙时分布式文件系统能够快速响应。
本发明实施例公开了一种分布式文件系统日志更新方法,参见图1所示,包括:
S11:在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
S12:判断所述第一硬盘是否繁忙;
S13:若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
由于现有技术中LogMonitor只能运行在一个硬盘上,因此当硬盘繁忙时,分配给LogMonitor的写入速度就会降低,进而阻塞Mon的主流程。因此,本实施例中设置了两个可以运行LogMonitor的硬盘,当第一硬盘繁忙时,直接切换LogMonitor至第二硬盘运行,保证LogMonitor的写入速度,避免Mon的主流程发生阻塞。实际可以看出,第二硬盘是作为应急备用的硬盘,来分担第一硬盘的工作的。第一硬盘和第二硬盘的类型没有要求,既可以是机械硬盘,也可以是固态硬盘。
本发明实施例公开了一种分布式文件系统日志更新方法,包括:在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;判断所述第一硬盘是否繁忙;若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。本发明在第一硬盘繁忙的时候,将LogMonitor切换至第二硬盘运行,避免或减少LogMonitor写入速度降低、Mon写日志受到阻塞的情况,从而LogMonitor和Mon的运行速度都能得到保证,提高分布式文件系统的响应速度。
本发明实施例公开了一种具体的分布式文件系统日志更新方法,相对于上一实施例,本实施例对技术方案作了进一步的说明和优化。具体的:
所述第二硬盘为固态硬盘。
在现有技术中,运行LogMonitor的硬盘只有一个且是机械硬盘,也即通常本实施例中的第一硬盘是机械硬盘,而本实施例中选择固态硬盘作为第二硬盘,是出于对处理速度的考虑。众所周知,固态硬盘在性能上,尤其是IOPs上有着机械硬盘无法比拟的优势,因此第二硬盘为固态硬盘时,LogMonitor在第二硬盘上运行时其写入速度完全能够达到甚至超过在第一硬盘上LogMonitor运行时的写入速度。
而且这里的固态硬盘不需要独立重新设置,完全可以选择应用于分布式文件系统中原有的某一固态硬盘,利用该固态硬盘的一小部分资源即可实现本实施例中运行LogMonitor的目的,不会干扰固态硬盘中其他模块的运行。
进一步的,所述LogMonitor在所述第二硬盘运行的同时,还可以包括:
判断所述第一硬盘是否繁忙;若否,将所述LogMonitor切换至所述第一硬盘运行。
考虑到LogMonitor原本运行于第一硬盘,而且大多数日志存储也都在第一硬盘上,LogMonitor优选运行的硬盘应当为第一硬盘。因此当第一硬盘的繁忙状态解除以后,就可以将LogMonitor从应急备用的第二硬盘切换到原来的第一硬盘上。
优选的,所述在第一硬盘上运行LogMonitor之前,包括:
优化所述LogMonitor的代码,并精简LogMonitor的日志条目。
如果模块代码和日志条目尽量简洁,那么LogMonitor在两个硬盘之间切换会更加快速稳定,写入和存储的日志较小,也会更容易转移。
可以理解的是,实际运行LogMonitor写入日志,还需要配置LogMonitor的挂载目录,所以所述第一硬盘和所述第二硬盘的挂载目录均包括供所述LogMonitor在写入并存储当前日志时使用的日志目录。
具体的,本实施例在程序脚本层面执行时,默认的日志目录在第一硬盘上,默认目录为/var/log/;在第二硬盘中新建一个供LogMonitor使用的日志目录;然后修改Mon的配置文件,设置LogMonitor的备选日志目录修改为第二硬盘中的日志目录;然后修改LogMonitor的代码逻辑为当第一硬盘繁忙时自动切换到第二硬盘,切换后的日志目录为备选日志目录。
本发明实施例公开了一种具体的分布式文件系统日志更新方法,相对于上一实施例,本实施例对技术方案作了进一步的说明和优化。具体的:
所述分布式文件系统日志更新方法还包括:
对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理。
虽然LogMonitor记录的日志不多,但是积少成多,长期来看LogMonitor写入的日志势必会消耗一定的磁盘空间。如果磁盘空间消耗殆尽必然影响Mon的运行,进而影响分布式文件系统的正常运行,所以对日志进行清理是保证分布式文件系统正常运行的一种手段。
具体的,所述对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理的过程,包括:
将所述第二硬盘中存储的日志转移至所述第一硬盘;
清理所述第一硬盘中的待清理日志;
其中,所述待清理日志包括满足清理条件的所有日志,所述清理条件包括:
存储时间超出预设时长或占用空间超出预设范围。
之所以将第二硬盘中的日志转移到第一硬盘进行存储,是因为第一硬盘原本存储了日志,将日志存储在同一位置便于查看;另外,有转移日志这一步骤,那么清理对象就可以只是第一硬盘,不需要考虑第二硬盘了。当然,除了本方案,还可以分别清理第一硬盘和第二硬盘中存储的日志,或者不进行任何日志存储位置的转移,仅清理第一硬盘或第二硬盘中存储的日志,空出相应的存储空间来。
具体的,增加自动化脚本,对LogMonitor的日志进行监控,根据系统CPU使用率以及第一硬盘的IO使用率等条件,设计算法来动态调整清理日志的策略,运行该脚本就可以完成相应的日志清理操作。
参见图2所示,为本实施例的一个具体实施步骤:
S21:判断所述第二硬盘中存储的日志是否超过预设保留时间;
S22:如果是,对日志进行压缩;
如果否,等待一段时间后再次判断第二硬盘中存储的日志是否超过预设保留时间即可。
其中,对日志进行压缩是一种常用的日志处理手段。
S23:判断所述第一硬盘是否繁忙;如果是,执行步骤S24,如果否,执行步骤S25;
具体的,判断CPU占用过高或第一硬盘IO过高。
S24:等待预设等待时长后再次执行S23,直至超出最大等待次数,则直接进入步骤S25;
S25:将压缩后的日志转移到第一硬盘中;
S26:判断第一硬盘中是否存在超过预设时长的日志;如果是,执行步骤S27;如果否,等待一段时间时间后再次执行S26中判断的动作即可。
S27:删除超过预设时长的日志。
这里的清理条件是日志的存储时间超出预设时长,当然还可以将清理条件设置为其他条件,例如占用空间超出预设范围,对部分日志进行清理等等。
相应的,本发明实施例还公开了一种分布式文件系统日志更新系统,参见图3所示,包括:
第一运行模块01,用于在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
判断模块02,用于判断所述第一硬盘是否繁忙,若是则触发第二运行模块03;
所述第二运行模块03,用于将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
由此可见,本发明在第一硬盘繁忙的时候,将LogMonitor切换至第二硬盘运行,避免或减少LogMonitor写入速度降低、Mon写日志受到阻塞的情况,从而LogMonitor和Mon的运行速度都能得到保证,提高分布式文件系统的响应速度。
在一些具体实施例中,所述第二硬盘为固态硬盘。
在一些具体实施例中,所述第一运行模块01还用于:
所述LogMonitor在所述第二硬盘运行的同时,判断所述第一硬盘是否繁忙;若否,将所述LogMonitor切换至所述第一硬盘运行。
在一些具体实施例中,所述分布式文件系统日志更新系统还包括优化模块04,用于所述在第一硬盘上运行LogMonitor之前,优化所述LogMonitor的代码,并精简LogMonitor的日志条目。
在一些具体实施例中,所述第一硬盘和所述第二硬盘的挂载目录均包括供所述LogMonitor在写入并存储当前日志时使用的日志目录。
在一些具体实施例中,所述分布式文件系统日志更新系统还包括:
清理模块05,用于对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理。
在一些具体实施例中,所述清理模块05具体包括:
转移单元,用于将所述第二硬盘中存储的日志转移至所述第一硬盘;
清理单元,用于清理所述第一硬盘中的待清理日志;
其中,所述待清理日志包括满足清理条件的所有日志,所述清理条件包括:存储时间超出预设时长或占用空间超出预设范围。
相应的,本发明实施例公开了一种分布式文件系统日志更新装置,参见图4所示,包括:
存储器11,用于存储计算机程序;
处理器12,用于执行所述计算机程序时实现以下步骤:
在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
判断所述第一硬盘是否繁忙;
若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
由此可见,本发明在第一硬盘繁忙的时候,将LogMonitor切换至第二硬盘运行,避免或减少LogMonitor写入速度降低、Mon写日志受到阻塞的情况,从而LogMonitor和Mon的运行速度都能得到保证,提高分布式文件系统的响应速度。
在一些具体的实施例中,所述第二硬盘为固态硬盘。
在一些具体的实施例中,所述处理器12执行所述存储器11中保存的计算机子程序时,具体实现以下步骤:所述LogMonitor在所述第二硬盘运行的同时,判断所述第一硬盘是否繁忙;若否,将所述LogMonitor切换至所述第一硬盘运行。
在一些具体的实施例中,所述处理器12执行所述存储器11中保存的计算机子程序时,具体实现以下步骤:所述在第一硬盘上运行LogMonitor之前,优化所述LogMonitor的代码,并精简LogMonitor的日志条目。
在一些具体的实施例中,所述第一硬盘和所述第二硬盘的挂载目录均包括供所述LogMonitor在写入并存储当前日志时使用的日志目录。
在一些具体的实施例中,所述处理器12执行所述存储器11中保存的计算机子程序时,具体实现以下步骤:对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理。
在一些具体的实施例中,所述处理器12执行所述存储器11中保存的计算机子程序时,具体实现以下步骤:将所述第二硬盘中存储的日志转移至所述第一硬盘;清理所述第一硬盘中的待清理日志;其中,所述待清理日志包括满足清理条件的所有日志,所述清理条件包括:存储时间超出预设时长或占用空间超出预设范围。
本发明实施例中处理器12执行计算机程序时涉及到第一硬盘和第二硬盘,这里的存储器11和处理器12既可以是和第一硬盘、第二硬盘独立的其他硬件,也可以位于第一硬盘或第二硬盘中。
进一步的,本实施例中的分布式文件系统装置,还可以包括:
输入接口13,用于获取外界导入的计算机程序,并将获取到的计算机程序保存至所述存储器11中,还可以用于获取外界终端设备传输的各种指令和参数,并传输至处理器12中,以便处理器12利用上述各种指令和参数展开相应的处理。本实施例中,所述输入接口13具体可以包括但不限于USB接口、串行接口、语音输入接口、指纹输入接口、硬盘读取接口等。
输出接口14,用于将处理器12产生的各种数据输出至与其相连的终端设备,以便于与输出接口14相连的其他终端设备能够获取到处理器12产生的各种数据。本实施例中,所述输出接口14具体可以包括但不限于USB接口、串行接口等。
通讯单元15,用于在分布式文件系统日志更新装置和外部服务器之间建立远程通讯连接,以便于分布式文件系统日志更新装置能够将镜像文件挂载到外部服务器中。本实施例中,通讯单元15具体可以包括但不限于基于无线通讯技术或有线通讯技术的远程通讯单元。
键盘16,用于获取用户通过实时敲击键帽而输入的各种参数数据或指令。
显示器17,用于对文件夹挂载过程的相关信息进行实时显示,以便于用户及时地了解分布式文件系统日志更新装置的运行情况。
鼠标18,可以用于协助用户输入数据并简化用户的操作。
相应的,本发明实施例还公开了一种存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时以下步骤:
在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
判断所述第一硬盘是否繁忙;
若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
由此可见,本发明在第一硬盘繁忙的时候,将LogMonitor切换至第二硬盘运行,避免或减少LogMonitor写入速度降低、Mon写日志受到阻塞的情况,从而LogMonitor和Mon的运行速度都能得到保证,提高分布式文件系统的响应速度。
在一些具体的实施例中,所述第二硬盘为固态硬盘。
在一些具体的实施例中,所述存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:所述LogMonitor在所述第二硬盘运行的同时,判断所述第一硬盘是否繁忙;若否,将所述LogMonitor切换至所述第一硬盘运行。
在一些具体的实施例中,所述存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:所述在第一硬盘上运行LogMonitor之前,优化所述LogMonitor的代码,并精简LogMonitor的日志条目。
在一些具体的实施例中,所述第一硬盘和所述第二硬盘的挂载目录均包括供所述LogMonitor在写入并存储当前日志时使用的日志目录。
在一些具体的实施例中,所述存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理。
在一些具体的实施例中,所述存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:将所述第二硬盘中存储的日志转移至所述第一硬盘;清理所述第一硬盘中的待清理日志;其中,所述待清理日志包括满足清理条件的所有日志,所述清理条件包括:存储时间超出预设时长或占用空间超出预设范围。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的一种分布式文件系统日志更新方法、系统、装置及存储介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种分布式文件系统日志更新方法,其特征在于,包括:
在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
判断所述第一硬盘是否繁忙;
若是,将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
2.根据权利要求1所述分布式文件系统日志更新方法,其特征在于,
所述第二硬盘为固态硬盘。
3.根据权利要求2所述分布式文件系统日志更新方法,其特征在于,所述LogMonitor在所述第二硬盘运行的同时,还包括:
判断所述第一硬盘是否繁忙;若否,将所述LogMonitor切换至所述第一硬盘运行。
4.根据权利要求3所述分布式文件系统日志更新方法,其特征在于,所述在第一硬盘上运行LogMonitor之前,包括:
优化所述LogMonitor的代码,并精简所述LogMonitor的日志条目。
5.根据权利要求4所述分布式文件系统日志更新方法,其特征在于,
所述第一硬盘和所述第二硬盘的挂载目录均包括供所述LogMonitor在写入并存储当前日志时使用的日志目录。
6.根据权利要求1至5任一项所述分布式文件系统日志更新方法,其特征在于,还包括:
对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理。
7.根据权利要求6所述分布式文件系统日志更新方法,其特征在于,所述对所述第一硬盘和/或所述第二硬盘中存储的日志进行清理的过程,具体包括:
将所述第二硬盘中存储的日志转移至所述第一硬盘;
清理所述第一硬盘中的待清理日志;
其中,所述待清理日志包括满足清理条件的所有日志,所述清理条件包括:
存储时间超出预设时长或占用空间超出预设范围。
8.一种分布式文件系统日志更新系统,其特征在于,包括:
第一运行模块,用于在第一硬盘上运行LogMonitor,以在所述第一硬盘写入并存储当前日志;
判断模块,用于判断所述第一硬盘是否繁忙,若是则触发第二运行模块;
所述第二运行模块,用于将所述LogMonitor切换至第二硬盘运行,以在所述第二硬盘写入并存储当前日志。
9.一种分布式文件系统日志更新装置,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至7任一项所述分布式文件系统日志更新方法的步骤。
10.一种存储介质,其特征在于,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述分布式文件系统日志更新方法的步骤。
CN201810522061.2A 2018-05-28 2018-05-28 分布式文件系统日志更新方法、系统、装置及存储介质 Pending CN108763454A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810522061.2A CN108763454A (zh) 2018-05-28 2018-05-28 分布式文件系统日志更新方法、系统、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810522061.2A CN108763454A (zh) 2018-05-28 2018-05-28 分布式文件系统日志更新方法、系统、装置及存储介质

Publications (1)

Publication Number Publication Date
CN108763454A true CN108763454A (zh) 2018-11-06

Family

ID=64006231

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810522061.2A Pending CN108763454A (zh) 2018-05-28 2018-05-28 分布式文件系统日志更新方法、系统、装置及存储介质

Country Status (1)

Country Link
CN (1) CN108763454A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109992441A (zh) * 2019-04-11 2019-07-09 苏州浪潮智能科技有限公司 一种固件日志收集方法、系统、设备及介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130024723A1 (en) * 2011-07-19 2013-01-24 Promise Technology, Inc. Disk storage system with two disks per slot and method of operation thereof
CN103176888A (zh) * 2011-12-22 2013-06-26 阿里巴巴集团控股有限公司 一种日志记录的方法和系统
CN103246550A (zh) * 2012-02-09 2013-08-14 深圳市腾讯计算机系统有限公司 一种基于容量的多任务调度方法及系统
CN103309767A (zh) * 2012-03-08 2013-09-18 阿里巴巴集团控股有限公司 一种客户端日志处理方法和装置
CN103838521A (zh) * 2014-02-28 2014-06-04 华为技术有限公司 一种数据处理方法及装置
CN106294351A (zh) * 2015-05-13 2017-01-04 阿里巴巴集团控股有限公司 日志事件处理方法和装置
CN106406771A (zh) * 2016-10-20 2017-02-15 福建天泉教育科技有限公司 日志记录方法及日志记录器
CN106815124A (zh) * 2015-12-01 2017-06-09 北京国双科技有限公司 日志文件处理方法和装置
CN107193504A (zh) * 2017-06-02 2017-09-22 郑州云海信息技术有限公司 一种基于Kubernetes的自动化分配和创建应用存储的方法和系统
CN107979490A (zh) * 2017-11-17 2018-05-01 北京联想超融合科技有限公司 日志数据的记录方法及服务器集群

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130024723A1 (en) * 2011-07-19 2013-01-24 Promise Technology, Inc. Disk storage system with two disks per slot and method of operation thereof
CN103176888A (zh) * 2011-12-22 2013-06-26 阿里巴巴集团控股有限公司 一种日志记录的方法和系统
CN103246550A (zh) * 2012-02-09 2013-08-14 深圳市腾讯计算机系统有限公司 一种基于容量的多任务调度方法及系统
CN103309767A (zh) * 2012-03-08 2013-09-18 阿里巴巴集团控股有限公司 一种客户端日志处理方法和装置
CN103838521A (zh) * 2014-02-28 2014-06-04 华为技术有限公司 一种数据处理方法及装置
CN106294351A (zh) * 2015-05-13 2017-01-04 阿里巴巴集团控股有限公司 日志事件处理方法和装置
CN106815124A (zh) * 2015-12-01 2017-06-09 北京国双科技有限公司 日志文件处理方法和装置
CN106406771A (zh) * 2016-10-20 2017-02-15 福建天泉教育科技有限公司 日志记录方法及日志记录器
CN107193504A (zh) * 2017-06-02 2017-09-22 郑州云海信息技术有限公司 一种基于Kubernetes的自动化分配和创建应用存储的方法和系统
CN107979490A (zh) * 2017-11-17 2018-05-01 北京联想超融合科技有限公司 日志数据的记录方法及服务器集群

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109992441A (zh) * 2019-04-11 2019-07-09 苏州浪潮智能科技有限公司 一种固件日志收集方法、系统、设备及介质

Similar Documents

Publication Publication Date Title
US9361034B2 (en) Transferring storage resources between snapshot storage pools and volume storage pools in a distributed network
US8805902B2 (en) Managing snapshot storage pools
CN111258921B (zh) 垃圾内存回收方法及装置、电子设备、存储介质
US7543129B2 (en) Storage system and storage area allocation method configuring pool areas each including logical volumes having identical allocation unit size
US8051256B2 (en) Storage system construction managing device and construction management method
US8261018B2 (en) Managing data storage systems
CN101977124A (zh) 基于ZooKeeper技术的业务集群方法及系统
WO2017112166A1 (en) Dynamic storage transitions employing tiered range volumes
CN104956311A (zh) 存储系统以及存储控制方法
KR20060129873A (ko) 휴대단말기의 메모리 정리 방법
CN102340533A (zh) 多租户系统及多租户系统存取数据的方法
CN106445730B (zh) 一种提高虚拟机性能的方法和终端
CN113495889B (zh) 一种分布式对象存储方法、装置、电子设备及存储介质
CN103399781A (zh) 云服务器及其虚拟机管理方法
CN103678149A (zh) 数据处理的方法及设备
CN110471977B (zh) 一种数据交换方法、装置、设备、介质
CN107967122A (zh) 一种块设备的数据写入方法、装置及介质
CN102982182A (zh) 一种数据存储规划方法及装置
CN115225642B (zh) 超融合系统的弹性负载均衡方法及系统
CN104104705A (zh) 分布式存储系统的接入方法和设备
CN104424115B (zh) 恢复电子设备的预设状态的方法、存储装置和电子设备
CN108763454A (zh) 分布式文件系统日志更新方法、系统、装置及存储介质
CN112965806B (zh) 用于确定资源的方法和装置
CN110162563A (zh) 一种数据入库方法、系统及电子设备和存储介质
CN113031857A (zh) 数据写入方法、装置、服务器及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181106

RJ01 Rejection of invention patent application after publication