CN106897431B - 一种日志导出方法及系统 - Google Patents

一种日志导出方法及系统 Download PDF

Info

Publication number
CN106897431B
CN106897431B CN201710108806.6A CN201710108806A CN106897431B CN 106897431 B CN106897431 B CN 106897431B CN 201710108806 A CN201710108806 A CN 201710108806A CN 106897431 B CN106897431 B CN 106897431B
Authority
CN
China
Prior art keywords
log
export
logs
threshold
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710108806.6A
Other languages
English (en)
Other versions
CN106897431A (zh
Inventor
刘付力
黄家明
乔英良
易凌鹰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710108806.6A priority Critical patent/CN106897431B/zh
Publication of CN106897431A publication Critical patent/CN106897431A/zh
Application granted granted Critical
Publication of CN106897431B publication Critical patent/CN106897431B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815—Journaling file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请公开了一种日志导出方法及系统，其中，所述日志导出方法包括：根据服务器性能设置日志导出阈值；根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值。所述日志导出方法根据服务器性能设置日志导出阈值，然后将所需数量的日志分批次导出，并且保证每次导出的日志数量小于所述导出阈值以避免一次性导出超过导出阈值的日志而导致导出日志失败的情况出现。

Description

一种日志导出方法及系统
技术领域
本申请涉及服务器管理技术领域，更具体地说，涉及一种日志导出方法及系统。
背景技术
OpenPower服务器是一种基于高性能CPU的超强计算服务器，与X86服务器相比，在计算性能和可靠性上具有巨大的优势，并且在对实时性、可靠性和可用性要求苛刻的领域中应用更加广泛。随着大数据时代的到来，服务器中存储中的日志数量与日俱增，在对服务器中存储的日志进行导出和管理的过程中不仅仅局限于少量日志的导出，人们在使用过程中发现，当通过OpenPower服务器中的监控管理模块(Base-board ManagementController，BMC)导出日志数量较大时，很容易由于服务器的发送通道的内存缓冲(buffer)不足以容纳这么多数量的日志而导致崩溃或信息传送不全，进而导致日志导出失败。
因此，如何避免从OpenPower服务器中导出日志失败的情况出现称为技术人员努力的方向。
发明内容
为解决上述技术问题，本发明提供了一种日志导出方法及系统，以实现避免从服务器中导出日志失败的情况出现的目的。
为实现上述技术目的，本发明实施例提供了如下技术方案：
一种日志导出方法，应用于OpenPower服务器，所述日志导出方法包括：
根据服务器性能设置日志导出阈值；
根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
可选的，所述根据所述导出阈值和所述管理级别导出所述服务器的日志之前还包括：
根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类。
可选的，所述根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类包括：
根据所述管理级别对所述服务器的所有日志进行分类，获得信息日志、报警日志和严重告警日志。
可选的，所述根据服务器性能设置日志导出阈值包括：
根据所述服务器传送通道的缓冲和传送次数设置日志导出阈值。
可选的，所述根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值包括：
根据所述导出阈值和所需的日志数量确定导出次数；
根据所述导出次数导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
一种日志导出系统，应用于OpenPower服务器，所述日志导出系统包括：
设置模块，用于根据服务器性能设置日志导出阈值；
导出模块，用于根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
可选的，还包括：
分类模块，用于根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类。
可选的，所述分类模块具体用于根据所述管理级别对所述服务器的所有日志进行分类，获得信息日志、报警日志和严重告警日志。
可选的，所述设置模块具体用于根据所述服务器传送通道的缓冲和传送次数设置日志导出阈值。
可选的，所述导出模块具体用于根据所述导出阈值和所需的日志数量确定导出次数；
根据所述导出次数导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
从上述技术方案可以看出，本发明实施例提供了一种日志导出方法及系统，其中，所述日志导出方法根据服务器性能设置日志导出阈值，然后将所需数量的日志分批次导出，并且保证每次导出的日志数量小于所述导出阈值以避免一次性导出超过导出阈值的日志而导致导出日志失败的情况出现。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请的一个实施例提供的一种日志导出方法的流程示意图；
图2为本申请的另一个实施例提供的一种日志导出方法的流程示意图；
图3为本申请的又一个实施例提供的一种日志导出方法的流程示意图；
图4为本申请的一个优选实施例提供的一种日志导出方法的流程示意图；
图5为本申请的另一个优选实施例提供的一种日志导出方法的流程示意图；
图6为本申请的一个实施例提供的一种日志导出系统的结构示意图；
图7为本申请的另一个实施例提供的一种日志导出系统的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本申请公开了一种日志导出方法，如图1所示，应用于OpenPower服务器，所述日志导出方法包括：
S101：根据服务器性能设置日志导出阈值。
需要说明的是，所述服务器性能主要包括服务器发送通道中的内存缓冲(buffer)大小和发送通道的发送次数。这些因素会影响服务器一次性能够导出的日志数量。
因此在本申请的一个优选实施例中，如图2所示，所述根据服务器性能设置日志导出阈值包括：
S101’：根据所述服务器传送通道的缓冲和传送次数设置日志导出阈值。
所述导出阈值用于在接下来的导出日志的过程中作为单次导出日志数量的上限，以避免一次性导出过多的日志导致服务器的内存buffer不足以容纳这些日志而导致崩溃或信息传送不全的情况出现，避免了导出日志失败的状况。
本申请对所述导出阈值的具体取值并不做限定，主要视服务器的性能而定。
S102：根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
在上述实施例的基础上，在本申请的一个实施例中，如图3所示，所述根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值包括：
S1021：根据所述导出阈值和所需的日志数量确定导出次数；
S1022：根据所述导出次数导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
需要说明的是，所述所需数量的日志是指技术人员需要导出的日志数量。
在上述实施例的基础上，在本申请的一个优选实施例中，如图4所示，所述根据所述导出阈值和所述管理级别导出所述服务器的日志之前还包括：
S1011：根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类。
在本实施例中，所述管理级别是指管理人员根据日志记载内容的不同而对所述服务器的所有日志进行分类的标准。增加步骤S1011的目的是增强管理人员对服务器中的日志管理的便捷程度。
在上述实施例的基础上，在本申请的另一个优选实施例中，如图5所示，所述根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类包括：
S1011’：根据所述管理级别对所述服务器的所有日志进行分类，获得信息日志、报警日志和严重告警日志。
具体地，以OpenPower服务器为例，所述信息(info)日志是指记载硬盘(HardDisk，HD)和风扇(FAN)故障状态恢复以及HD和FAN模块的插入的操作信息的日志；所述报警(warning)日志是指记载HD和FAN的移除、HD和FAN的不在位以及FAN转速过高告警的日志；所述严重告警(critical)日志是指记载温度过高和FAN故障以及风扇转速过低的日志。
综上所述，本申请实施例提供了一种日志导出方法，所述日志导出方法根据服务器性能设置日志导出阈值，然后将所需数量的日志分批次导出，并且保证每次导出的日志数量小于所述导出阈值以避免一次性导出超过导出阈值的日志而导致导出日志失败的情况出现。
相应的，本申请实施例还提供了一种服务器日志导出系统，如图6所示，应用于OpenPower服务器，所述日志导出系统包括：
设置模块100，用于根据服务器性能设置日志导出阈值；
导出模块200，用于根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
需要说明的是，所述服务器性能主要包括服务器发送通道中的内存缓冲(buffer)大小和发送通道的发送次数。这些因素会影响服务器一次性能够导出的日志数量。
所述导出阈值用于在接下来的导出日志的过程中作为单次导出日志数量的上限，以避免一次性导出过多的日志导致服务器的内存buffer不足以容纳这些日志而导致崩溃或信息传送不全的情况出现，避免了导出日志失败的状况。
本申请对所述导出阈值的具体取值并不做限定，主要视服务器的性能而定。
在上述实施例的基础上，在本申请的一个优选实施例中，如图7所示，所述日志导出系统还包括：
分类模块300，用于根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类。
在本实施例中，所述管理级别是指管理人员根据日志记载内容的不同而对所述服务器的所有日志进行分类的标准。增加步骤S1011的目的是增强管理人员对服务器中的日志管理的便捷程度。
在上述实施例的基础上，在本申请的另一个优选实施例中，所述分类模块300具体用于根据所述管理级别对所述服务器的所有日志进行分类，获得信息日志、报警日志和严重告警日志。
具体地，以OpenPower服务器为例，所述信息(info)日志是指记载硬盘(HardDisk，HD)和风扇(FAN)故障状态恢复以及HD和FAN模块的插入的操作信息的日志；所述报警(warning)日志是指记载HD和FAN的移除、HD和FAN的不在位以及FAN转速过高告警的日志；所述严重告警(critical)日志是指记载温度过高和FAN故障以及风扇转速过低的日志。
在上述实施例的基础上，在本申请的另一个实施例中，所述设置模块100具体用于根据所述服务器传送通道的缓冲和传送次数设置日志导出阈值。
在上述实施例的基础上，在本申请的又一个实施例中，所述导出模块200具体用于根据所述导出阈值和所需的日志数量确定导出次数；
根据所述导出次数导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
需要说明的是，所述所需数量的日志是指技术人员需要导出的日志数量。
综上所述，本申请实施例提供了一种日志导出方法及系统，其中，所述日志导出方法根据服务器性能设置日志导出阈值，然后将所需数量的日志分批次导出，并且保证每次导出的日志数量小于所述导出阈值以避免一次性导出超过导出阈值的日志而导致导出日志失败的情况出现。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种日志导出方法，其特征在于，应用于OpenPower服务器，所述日志导出方法包括：
根据服务器性能设置日志导出阈值；
根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值；
所述根据服务器性能设置日志导出阈值包括：
根据所述服务器传送通道的缓冲和传送次数设置日志导出阈值。
2.根据权利要求1所述的日志导出方法，其特征在于，所述根据所述导出阈值导出所需数量的日志之前还包括：
根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类。
3.根据权利要求2所述的日志导出方法，其特征在于，所述根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类包括：
根据所述管理级别对所述服务器的所有日志进行分类，获得信息日志、报警日志和严重告警日志。
4.根据权利要求1所述的日志导出方法，其特征在于，所述根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值包括：
根据所述导出阈值和所需的日志数量确定导出次数；
根据所述导出次数导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
5.一种日志导出系统，其特征在于，应用于OpenPower服务器，所述日志导出系统包括：
设置模块，用于根据服务器性能设置日志导出阈值；
导出模块，用于根据所述导出阈值导出所需数量的日志，每次导出的日志数量小于所述导出阈值；
所述设置模块具体用于根据所述服务器传送通道的缓冲和传送次数设置日志导出阈值。
6.根据权利要求5所述的日志导出系统，其特征在于，还包括：
分类模块，用于根据管理级别对所述服务器的所有日志进行分类，获得多种日志种类。
7.根据权利要求6所述的日志导出系统，其特征在于，所述分类模块具体用于根据所述管理级别对所述服务器的所有日志进行分类，获得信息日志、报警日志和严重告警日志。
8.根据权利要求5所述的日志导出系统，其特征在于，所述导出模块具体用于根据所述导出阈值和所需的日志数量确定导出次数；
根据所述导出次数导出所需数量的日志，每次导出的日志数量小于所述导出阈值。
CN201710108806.6A 2017-02-27 2017-02-27 一种日志导出方法及系统 Active CN106897431B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710108806.6A CN106897431B (zh) 2017-02-27 2017-02-27 一种日志导出方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710108806.6A CN106897431B (zh) 2017-02-27 2017-02-27 一种日志导出方法及系统

Publications (2)

Publication Number Publication Date
CN106897431A CN106897431A (zh) 2017-06-27
CN106897431B true CN106897431B (zh) 2021-06-11

Family

ID=59184890

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710108806.6A Active CN106897431B (zh) 2017-02-27 2017-02-27 一种日志导出方法及系统

Country Status (1)

Country Link
CN (1) CN106897431B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107784085B (zh) * 2017-09-30 2021-04-13 平安科技（深圳）有限公司 一种数据列表的导出方法及其终端
CN110298677B (zh) * 2018-03-22 2021-08-13 中移(苏州)软件技术有限公司 一种云计算资源计费的方法、装置、电子设备和存储介质
CN108989471A (zh) * 2018-09-05 2018-12-11 郑州云海信息技术有限公司 网络系统中日志的管理方法和装置
CN110096467B (zh) * 2019-04-18 2021-01-22 浪潮商用机器有限公司 一种获取pcie设备状态信息的方法及相关装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102306168B (zh) * 2011-08-23 2014-07-09 华为数字技术（成都）有限公司 日志操作方法、装置及文件系统
CN104391954A (zh) * 2014-11-27 2015-03-04 北京国双科技有限公司 数据库日志的处理方法及装置
CN106095658A (zh) * 2016-06-12 2016-11-09 北京奇虎科技有限公司 对系统日志实现规整的方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101559206B1 (ko) * 2013-11-29 2015-10-13 건국대학교 산학협력단 로그 데이터 처리 방법 및 이를 수행하는 시스템

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102306168B (zh) * 2011-08-23 2014-07-09 华为数字技术（成都）有限公司 日志操作方法、装置及文件系统
CN104391954A (zh) * 2014-11-27 2015-03-04 北京国双科技有限公司 数据库日志的处理方法及装置
CN106095658A (zh) * 2016-06-12 2016-11-09 北京奇虎科技有限公司 对系统日志实现规整的方法及装置

Also Published As

Publication number Publication date
CN106897431A (zh) 2017-06-27

Similar Documents

Publication Publication Date Title
CN106897431B (zh) 一种日志导出方法及系统
WO2021164178A1 (zh) 基于云技术的文件分片上传方法、装置、设备及存储介质
US8145840B2 (en) Method and system for storing excess data in a redundant array of independent disk level 6
US10042664B2 (en) Device remote access method, thin client, and virtual machine
US8418003B2 (en) Log collecting apparatus, program, method, and system
US10042583B2 (en) Device management method, device, and device management controller
US20200143049A1 (en) System and method for preventing malicious can bus attacks
US20140089477A1 (en) System and method for monitoring storage machines
JP2012521042A (ja) ウェブフロントエンドスロットリング
US11444891B2 (en) Electronic control unit, abnormality determination program, and abnormality determination method
CN111858146B (zh) 用于恢复数据的方法、设备和计算机程序产品
US11388244B1 (en) Method, device, and program product for managing computer system
CN107544832A (zh) 一种虚拟机进程的监控方法、装置和系统
US9823710B2 (en) Miniaturized computation and storage merged system
CN103699495A (zh) 数据切分的传输装置与系统
CN115878356A (zh) 磁盘故障预测方法及装置
CN109918221B (zh) 一种硬盘报错解析方法、系统、终端及存储介质
CN110069371B (zh) 一种识别固态硬盘性能的方法及固态硬盘
CN113177063A (zh) 一种pci总线设备的热复位方法及相关装置
CN102904946B (zh) 集群内节点管理方法和装置
CN103678699A (zh) 服务器中的数据合并方法及系统
CN103701667A (zh) 服务器的心跳的监控方法、装置及系统
CN105631965B (zh) 车载wtb报文记录仪
US20200081628A1 (en) Apparatus and Method for Monitoring Insertion and Removal of Devices
KR20200058718A (ko) Ttcn-3 기반 자동차 데이터 테스트를 위한 자동차 데이터 변환 시스템 및 방법, 상기 방법을 수행하기 위한 기록 매체

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant