CN103645984B - 日志处理方法及装置 - Google Patents

日志处理方法及装置 Download PDF

Info

Publication number
CN103645984B
CN103645984B CN201310721991.8A CN201310721991A CN103645984B CN 103645984 B CN103645984 B CN 103645984B CN 201310721991 A CN201310721991 A CN 201310721991A CN 103645984 B CN103645984 B CN 103645984B
Authority
CN
China
Prior art keywords
daily record
record data
level
disk
delete
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310721991.8A
Other languages
English (en)
Other versions
CN103645984A (zh
Inventor
赵欣
吴石磊
翟鲁超
车帅
何忠胜
王毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANDONG CIVIC SE COMMERCIAL MIDDLEWARE Co.,Ltd.
Original Assignee
CVIC Software Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CVIC Software Engineering Co Ltd filed Critical CVIC Software Engineering Co Ltd
Priority to CN201310721991.8A priority Critical patent/CN103645984B/zh
Publication of CN103645984A publication Critical patent/CN103645984A/zh
Application granted granted Critical
Publication of CN103645984B publication Critical patent/CN103645984B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种日志优化方法及装置，该方法包括：在预设时间周期内，查看存储日志数据的磁盘的使用率；当使用率位于第一预设阈值的范围时，删除磁盘中的日志数据；采用本发明的方法及装置，不会出现在磁盘使用率很低时，即删除全部日志的情况，从而保证了日志的记录功能。

Description

日志处理方法及装置
技术领域
本发明涉及日志优化技术领域，特别涉及一种日志处理方法及装置。
背景技术
在现有技术中，对于很多业务系统及应用服务器，均需存储日志数据，以记录其自身的运行情况；其中，在现有技术中，一般将上述日志数据存储至磁盘上；而由于磁盘的存储空间有限，因此需定时删除磁盘上所存储的日志数据；在现有技术中，一般采用如下方式删除磁盘上的日志数据：
人为设定删除时间，而系统或服务器每到设定时间时，全部删除磁盘上的日志数据；但是，在实际工作中，很有可能出现当到达设定时间时，其磁盘的使用率仍很低的情况，而此时若删除全部的日志数据，无疑丧失了日志的记录功能。
发明内容
有鉴于此，本发明的目的在于提供一种日志处理方法及装置，以保证日志的记录功能。
为实现上述目的，本发明提供如下技术方案：
一种日志处理方法，包括：
在预设时间周期内，查看存储日志数据的磁盘的使用率；
当所述使用率位于第一预设阈值的范围时，删除所述磁盘中的日志数据。
优选的，所述磁盘还存储每条日志的生成日期和级别；所述删除所述磁盘中的日志数据包括：
从所述磁盘中查找生成日期与时钟系统的日期相一致的日志数据，作为第一日志数据，且将所述磁盘中的其余日志数据作为第二日志数据；
删除所述第二日志数据；
当所述第一日志数据的数据量大于第二预设值时，删除所述第一日志数据中预设级别的日志数据。
优选的，所述日志数据具有五个级别，分别为第一级别、第二级别、第三级别、第四级别和第五级别；其中，所述第一级别的级别最低，所述第五级别的级别最高。
优选的，所述预设级别的日志数据包括第一级别的日志数据、第二级别的日志数据和第三级别的日志数据。
优选的，所述第一预设阈值为90%至100%，且包括所述90%和100%。
一种日志处理装置，包括：
查看模块用于，在预设时间周期内，查看存储日志数据的磁盘的使用率；
删除模块用于，当所述使用率位于第一预设阈值的范围时，删除所述磁盘中的日志数据。
优选的，所述磁盘还存储每条日志的生成日期和级别；所述删除模块包括：
查找单元用于，当所述使用率位于所述第一预设阈值的范围时，从所述磁盘中查找生成日期与时钟系统的日期相一致的日志数据，作为第一日志数据，且将所述磁盘中的其余日志数据作为第二日志数据；
第一删除单元用于，删除所述第二日志数据；
第二删除单元用于，当所述第一日志数据的数据量大于第二预设值时，删除所述第一日志数据中预设级别的日志数据。
优选的，所述日志数据具有五个级别，分别为第一级别、第二级别、第三级别、第四级别和第五级别；其中，所述第一级别的级别最低，所述第五级别的级别最高。
优选的，所述预设级别的日志数据包括第一级别的日志数据、第二级别的日志数据和第三级别的日志数据。
优选的，所述第一预设阈值为90%至100%，且包括所述90%和100%。
由上述的技术方案可以看出，在本发明实施例中，在预设时间周期内，并不直接删除磁盘中的全部日志数据，而是首先查看磁盘的使用率，当磁盘的使用率位于第一预设阈值的范围时，才删除日志数据；由上可见，采用本发明的方法及装置，不会出现在磁盘使用率很低时，即删除全部日志的情况，从而保证了日志的记录功能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例所公开的日志处理方法的流程图；
图2为本发明实施例所公开的日志处理方法的又一流程图；
图3为本发明实施例所公开的日志处理装置的模块图；
图4为本发明实施例所公开的日志处理装置的又一模块图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明公开了一种日志处理方法，如图1所示，该方法至少包括以下步骤：
S11：在预设时间周期内，查看存储日志数据的磁盘的使用率；
具体的，上述预设时间周期可以月为周期，如可设定在每月某天几点几分查看磁盘的使用率；亦可以周为周期，如可设定在每周某天几点几分查看磁盘的使用率；或是以天为周期，如可设定在每天几点几分查看磁盘的使用率；
S12：判断磁盘的使用率是否位于第一预设阈值的范围，如是，进入步骤S13;
具体的，上述第一预设阈值的范围用户可根据实际情况进行设定，而可具体设定为90%—至100%，且包括90%和100%；
S13：删除磁盘中的日志数据；
由上可见，在本发明实施例中，在预设时间周期内，并不直接删除磁盘中的全部日志数据，而是首先查看磁盘的使用率，当磁盘的使用率位于第一预设阈值的范围时，才删除日志数据；由上可见，采用本发明的方法，不会出现在磁盘使用率很低时，即删除全部日志的情况，从而保证了日志的记录功能。
在本发明其它实施例中，如图2所示，上述所有实施例中的步骤S13可具体包括：
S21：从磁盘中查找生成日期与时钟系统的日期相一致的日志数据，作为第一日志数据，且将磁盘中的其余日志数据作为第二日志数据；
需要说明的是，上述磁盘除了存储每条日志数据外，还会存储每条日志数据的生成日期；而由于时钟系统所记录的日期即为当天的日期，因此上述第一日志数据即为当天所产生的日志数据，而第二日志数据即为非当天所产生的日志数据；
S22：删除第二日志数据；
S23：当第一日志数据的数据量大于第二预设值时，删除第一日志数据中预设级别的日志数据；
具体的，上述第二预设值可由用户进行人为设定，可但不限于设于50M；同时，需要说明的是，上述磁盘还会存储与每条日志数据所对应的级别，而上述所有日志数据可具有五个级别，分别为第一级别调试Dubug、第二级别运行Info、第三级别警告Warn、第四级别错误Error和第五级别致命Fatal；其中，第一级别Dubug的级别最低，而第五级别Fatal的级别最高；而上述的预设级别的日志数据可具体为第一级别的日志数据、第二级别的日志数据和第三级别的日志数据。
本发明还公开了一种与上述方法相对应的日志处理装置，如图3所示，可包括：
查看模块31用于，在预设时间周期内，查看存储日志数据的磁盘的使用率；
删除模块32用于，当使用率位于第一预设阈值的范围时，删除磁盘中的日志数据；
具体的，上述第一阈值范围可为90%至100%，且包括90%和100%；
由上可见，在本发明实施例中，在预设时间周期内，并不直接删除磁盘中的全部日志数据，而是首先查看磁盘的使用率，当磁盘的使用率位于第一预设阈值的范围时，才删除日志数据；由上可见，采用本发明的装置，不会出现在磁盘使用率很低时，即删除全部日志的情况，从而保证了日志的记录功能。
在本发明其它实施例中，上述磁盘还存储每条日志的生成日期和级别；而上述所有日志数据可具有五个级别，分别为第一级别Dubug、第二级别Info、第三级别Warn、第四级别Error和第五级别Fatal；其中，第一级别Dubug的级别最低，而第五级别Fatal的级别最高；其中，如图4所述，上述所有实施例中的删除模块32可包括：
查看单元41用于，当使用率位于第一预设阈值的范围时，从磁盘中查找生成日期与时钟系统的日期相一致的日志数据，作为第一日志数据，且将磁盘中的其余日志数据作为第二日志数据；
第一删除单元42用于，删除第二日志数据；
第二删除单元43用于，当第一日志数据的数据量大于第二预设值时，删除第一日志数据中预设级别的日志数据；
而上述预设级别的日志数据包括第一级别的日志数据、第二级别的日志数据和第三级别的日志数据。
需要说明的是，上述日志处理装置的功能可具体由国产环境下的中央处理器来现实，而上述国产环境可具体为飞腾中央处理器、麒麟操作系统和龙芯平台等。
对于查找模块31和删除模块32的各细化功能可参见上述方法的记载，在此不再赘述。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种日志处理方法，其特征在于，包括：
在预设时间周期内，查看存储日志数据的磁盘的使用率；
当所述使用率位于第一预设阈值的范围时，删除所述磁盘中的日志数据；
所述磁盘还存储每条日志的生成日期和级别；所述删除所述磁盘中的日志数据包括：
从所述磁盘中查找生成日期与时钟系统的日期相一致的日志数据，作为第一日志数据，且将所述磁盘中的其余日志数据作为第二日志数据；
删除所述第二日志数据；
当所述第一日志数据的数据量大于第二预设值时，删除所述第一日志数据中预设级别的日志数据。
2.根据权利要求1所述的方法，其特征在于，所述日志数据具有五个级别，分别为第一级别、第二级别、第三级别、第四级别和第五级别；其中，所述第一级别的级别最低，所述第五级别的级别最高。
3.根据权利要求2所述的方法，其特征在于，所述预设级别的日志数据包括第一级别的日志数据、第二级别的日志数据和第三级别的日志数据。
4.根据权利要求1所述的方法，其特征在于，所述第一预设阈值为90％至100％，且包括所述90％和100％。
5.一种日志处理装置，其特征在于，包括：
查看模块用于，在预设时间周期内，查看存储日志数据的磁盘的使用率；
删除模块用于，当所述使用率位于第一预设阈值的范围时，删除所述磁盘中的日志数据；
所述磁盘还存储每条日志的生成日期和级别；所述删除模块包括：
查找单元用于，当所述使用率位于所述第一预设阈值的范围时，从所述磁盘中查找生成日期与时钟系统的日期相一致的日志数据，作为第一日志数据，且将所述磁盘中的其余日志数据作为第二日志数据；
第一删除单元用于，删除所述第二日志数据；
第二删除单元用于，当所述第一日志数据的数据量大于第二预设值时，删除所述第一日志数据中预设级别的日志数据。
6.根据权利要求5所述的装置，其特征在于，所述日志数据具有五个级别，分别为第一级别、第二级别、第三级别、第四级别和第五级别；其中，所述第一级别的级别最低，所述第五级别的级别最高。
7.根据权利要求6所述的装置，其特征在于，所述预设级别的日志数据包括第一级别的日志数据、第二级别的日志数据和第三级别的日志数据。
8.根据权利要求5所述的装置，其特征在于，所述第一预设阈值为90％至100％，且包括所述90％和100％。
CN201310721991.8A 2013-12-24 2013-12-24 日志处理方法及装置 Active CN103645984B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310721991.8A CN103645984B (zh) 2013-12-24 2013-12-24 日志处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310721991.8A CN103645984B (zh) 2013-12-24 2013-12-24 日志处理方法及装置

Publications (2)

Publication Number Publication Date
CN103645984A CN103645984A (zh) 2014-03-19
CN103645984B true CN103645984B (zh) 2016-05-18

Family

ID=50251205

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310721991.8A Active CN103645984B (zh) 2013-12-24 2013-12-24 日志处理方法及装置

Country Status (1)

Country Link
CN (1) CN103645984B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106815124A (zh) * 2015-12-01 2017-06-09 北京国双科技有限公司 日志文件处理方法和装置
CN106484593A (zh) * 2016-09-29 2017-03-08 北京小米移动软件有限公司 日志处理方法、装置及电子设备
CN106411912A (zh) * 2016-10-18 2017-02-15 汉柏科技有限公司 防火墙系统的日志存储优化方法及装置
CN107357686A (zh) * 2017-07-20 2017-11-17 郑州云海信息技术有限公司 一种日志删除方法及装置
WO2019161551A1 (zh) * 2018-02-24 2019-08-29 黄裕才 基于logrotate技术的日志处理方法
CN112306744B (zh) * 2019-07-26 2024-02-06 浙江宇视科技有限公司 一种日志存储备份方法、装置、服务器和介质
CN111221790A (zh) * 2019-10-25 2020-06-02 苏州浪潮智能科技有限公司 一种日志文件的处理方法、装置及计算机可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101464908A (zh) * 2009-01-14 2009-06-24 北京北方微电子基地设备工艺研究中心有限责任公司 一种日志记录的方法及装置
CN102467516A (zh) * 2010-11-04 2012-05-23 北京北方微电子基地设备工艺研究中心有限责任公司 设备控制过程中的日志记录方法、装置及系统
CN102479162A (zh) * 2010-11-22 2012-05-30 英业达股份有限公司 计算机系统及其系统事件日志的记录方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101464908A (zh) * 2009-01-14 2009-06-24 北京北方微电子基地设备工艺研究中心有限责任公司 一种日志记录的方法及装置
CN102467516A (zh) * 2010-11-04 2012-05-23 北京北方微电子基地设备工艺研究中心有限责任公司 设备控制过程中的日志记录方法、装置及系统
CN102479162A (zh) * 2010-11-22 2012-05-30 英业达股份有限公司 计算机系统及其系统事件日志的记录方法

Also Published As

Publication number Publication date
CN103645984A (zh) 2014-03-19

Similar Documents

Publication Publication Date Title
CN103645984B (zh) 日志处理方法及装置
CN104317800A (zh) 一种海量智能用电数据混合存储系统及方法
CN101582076A (zh) 一种基于数据库的重复数据删除方法
CN102388358A (zh) 在混合存储环境下配置存储设备的方法和系统
CN105868421A (zh) 一种数据管理方法及装置
CN102982122A (zh) 一种适用于海量存储系统的重复数据删除方法
CN104834648A (zh) 日志查询方法和装置
CN103858092A (zh) 一种数据迁移方法和装置
CN103793382B (zh) 一种数据库的数据处理方法及系统
CN104182436A (zh) 一种清理数据库的方法及装置
CN104517168A (zh) 一种工程项目造价进度管理系统
CN104346230A (zh) 一种存储芯片门限电压调节方法、装置以及存储芯片
CN102841894A (zh) 一种文件分配表的数据存储方法
CN102932416A (zh) 一种信息流任务的中间数据存储方法、处理方法及装置
CN103544075A (zh) 数据的处理方法和系统
CN108268341A (zh) 一种数据迁移、备份及恢复方法及装置
CN104951242B (zh) 用于在存储阵列之间自动重定位数据的方法和装置
CN103870571A (zh) 多维联机分析处理系统中的立方体重构方法和装置
CN103605833A (zh) 一种对存储阵列系统的性能进行仿真的方法及装置
CN108121794A (zh) 档案管理系统
CN103793469A (zh) 一种数据查询统计方法及系统
CN103455575A (zh) 数据统计分析方法和装置
CN105488047A (zh) 元数据读写方法和装置
CN108628895A (zh) 一种地图数据的处理方法及装置
CN105511986A (zh) 一种基于磁带库的数据保护系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20211207

Address after: 250014 No. 41-1 Qianfo Shandong Road, Lixia District, Jinan City, Shandong Province

Patentee after: SHANDONG CIVIC SE COMMERCIAL MIDDLEWARE Co.,Ltd.

Address before: 250014 No. 41-1 Qianfo Shandong Road, Lixia District, Jinan City, Shandong Province

Patentee before: SHANDONG CVIC SOFTWARE ENGINEERING Co.,Ltd.

TR01 Transfer of patent right