CN108959526B - 日志管理方法以及日志管理装置 - Google Patents
日志管理方法以及日志管理装置 Download PDFInfo
- Publication number
- CN108959526B CN108959526B CN201810690772.0A CN201810690772A CN108959526B CN 108959526 B CN108959526 B CN 108959526B CN 201810690772 A CN201810690772 A CN 201810690772A CN 108959526 B CN108959526 B CN 108959526B
- Authority
- CN
- China
- Prior art keywords
- memory space
- logs
- buffer memory
- log management
- management device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007726 management method Methods 0.000 title claims abstract description 186
- 239000000872 buffer Substances 0.000 claims abstract description 145
- 238000000034 method Methods 0.000 claims abstract description 18
- 230000001360 synchronised effect Effects 0.000 claims abstract 2
- 239000012536 storage buffer Substances 0.000 claims description 29
- 238000012545 processing Methods 0.000 claims description 5
- 230000005856 abnormality Effects 0.000 abstract description 10
- 238000010586 diagram Methods 0.000 description 6
- 230000002159 abnormal effect Effects 0.000 description 5
- 230000009977 dual effect Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004377 microelectronic Methods 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
- G06F9/5016—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请实施例公开了一种日志管理方法以及日志管理装置,用于日志管理装置统一保存日志,方便在出现异常时快速从保存的日志中获取对应的日志来对异常进行分析。本申请实施例方法包括:将所述日志管理装置的每个CPU内核生成的日志存储至所述每个CPU内核中的缓冲内存空间;按照日志的类型将所述每个CPU内核中的缓冲内存空间的日志分类拷贝至所述日志管理装置的双倍速率同步动态随机存储器DDR的缓冲内存空间;按照日志的类型将所述DDR的缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质的内存空间。
Description
技术领域
本申请涉及微电子技术,尤其涉及一种日志管理方法以及日志管理装置。
背景技术
随着微电子技术的发展,固态存储设备的应用越来越广泛。
目前,固态存储设备的存储方式可以通过多中央处理器(central processingunit,CPU)的分布式系统结构对数据存储至固态存储设备中,固态存储设备的每个CPU内核作为本地的主处理器分布式协同工作,来提高数据存储读取的性能。而在每个CPU内核中的日志在本地处理器记录和保存。
但是,每个CPU内核的日志是分布式管理保存,即对固态存储设备中的每个CPU内核生成的日志不能够统一的进行管理保存,每次保存只能是针对某一个CPU内核中的日志,不便于在异常情况下对CPU固件运行异常的分析。
发明内容
本申请实施例提供了一种日志管理方法以及日志管理装置,用于日志管理装置统一保存日志,方便在出现异常时快速从保存的日志中获取对应的日志来对异常进行分析。
第一方面,本申请实施例提供了一种日志管理方法,应用于多CPU的日志管理装置,所述方法包括:
将所述日志管理装置的每个CPU内核生成的日志存储至所述每个CPU内核中的缓冲内存空间;
按照日志的类型将所述每个CPU内核中的缓冲内存空间的日志分类拷贝至所述日志管理装置的双倍速率同步动态随机存储器(double data rate sdram,DDR)的缓冲内存空间;
按照日志的类型将所述DDR的缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质内存空间。
一种可能的实现方式中,所述将所述日志管理装置的每个CPU内核中的日志存储至所述每个CPU内核中的缓冲内存空间包括:
在所述每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝缓冲内存空间;
按照日志记录条目顺序将所述每个CPU内核中的日志拷贝至所述每个CPU内核中的临时记录缓冲内存空间;
按照日志的时间戳以及日志的等级将所述临时记录缓冲内存空间中的日志分类拷贝至所述激活拷贝缓冲内存空间。
另一种可能的实现方式中,所述按照日志的类型将所述每个CPU内核中的缓冲内存的日志分类拷贝至所述日志管理装置的DDR的缓冲内存空间包括:
在所述日志管理装置的DDR中分配不同类型的日志的保存缓冲内存空间;
将所述每个CPU内核中的激活拷贝缓冲内存中的每种类型的日志分类拷贝至对应的保存缓存内存空间中。
另一种可能的实现方式中,所述按照日志的类型将所述DDR的缓冲内存中的日志分类保存至所述日志管理装置的非易失存储介质内存空间包括:
确定所述DDR的保存缓冲内存空间中的关键日志;
按照双冗余备份方式以及串行写入方式将所述关键日志分类拷贝至所述日志管理装置的非易失存储介质的内存空间。
另一种可能的实现方式中,所述按照日志的类型将所述DDR的保存缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质内存空间包括:
按照预设的时长检测所述DDR的保存缓冲内存空间中是否存在更新的关键日志;
若是,则将所述更新的关键日志分类保存至所述日志管理装置的非易失存储介质的内存空间。
第二方面,本申请实施例提供了一种日志管理装置,所述日志管理装置包括:
存储单元,用于将日志管理装置的每个CPU内核生成的日志存储至所述每个CPU内核中的缓冲内存空间;
分类拷贝单元,用于按照日志的类型将所述每个CPU内核中的缓冲内存空间的日志分类拷贝至所述日志管理装置中的DDR的缓冲内存空间;
分类保存单元,用于按照日志的类型将所述DDR的缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质的内存空间。
一种可能的实现方式中,所述存储单元具体用于:
在所述每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝缓冲内存空间;
按照日志记录条目顺序将所述每个CPU内核中的日志拷贝至所述每个CPU内核中的临时记录缓冲内存空间;
按照日志的时间戳以及日志的等级将所述临时记录缓冲内存空间中的日志分类拷贝至所述激活拷贝缓冲内存空间。
另一种可能的实现方式中,所述分类拷贝单元具体用于:
在所述日志管理装置中的DDR中分配不同类型的日志的保存缓冲内存空间;
将所述每个CPU内核中的激活拷贝缓冲内存空间中的每种类型的日志分类拷贝至所述DDR对应的保存缓存内存空间中。
另一种可能的实现方式中,所述分类保存单元具体用于:
确定所述DDR的保存缓冲内存空间中的关键日志;
按照双冗余备份方式以及串行写入方式将所述关键日志分类拷贝至所述日志管理装置的非易失存储介质的内存空间。
另一种可能的实现方式中,所述分类保存单元具体用于:
按照预设的时长检测所述DDR的保存缓冲内存空间中是否存在更新的关键日志;
若是,则将所述更新的关键日志分类保存至所述日志管理装置的非易失存储介质内存空间的非易失存储介质的内存空间。
第三方面,本申请实施例提供了一种日志管理装置,所述日志管理装置包括:
处理器、存储器、输入输出设备以及总线;
所述处理器、存储器、输入输出设备分别与所述总线相连,所述存储器中存储有计算机指令;
所述处理器在执行所述存储器中的计算机指令时,用于实现如第一方面任一种实现方式。
第四方面,本申请实施例提供一种包含指令的计算机程序产品,其特征在于,当其在计算机上运行时,使得所述计算机执行如第一方面中任一种所述的实现方式。
第五方面,本申请实施例提供一种计算机可读存储介质,其特征在于,包括指令,当所述指令在计算机上运行时,使得计算机执行如第一方面中任一项所述的实现方式。
从以上技术方案可以看出,本申请实施例具有以下优点:
经由上述技术方案可知,将该日志管理装置的每个CPU内核生成的日志存储至该每个CPU内核中的缓冲内存空间,然后按照日志的类型将该每个CPU内核的日志分类拷贝至该日志管理装置的DDR中的缓冲内存空间,最后按照日志的类型将该DDR中的缓冲内存空间中的日志分类保存至日志管理装置的非易失存储介质内存空间。因此,通过本申请的技术方案,通过多CPU分布式记录日志,然后将多CPU记录的日志按照日志的类型集中保存至DDR的缓冲内存空间中,再按照日志的类型保存至日志管理装置的非易失存储介质内存空间中,这样通过将所有CPU内核的日志集中拷贝至日志管理装置的DDR中再进行对日志的管理保存至日志管理装置的非易失存储介质内存空间,以便于后续对日志的读取或者清除等操作都可以统一从日志管理装置的非易失存储介质内存空间中获取,方便在出现异常时获取日志对固件异常的分析,而不需要从每个CPU内核各自管理保存的日志中一个个的调取日志来分析异常现象。
附图说明
图1为本申请实施例中的一种应用场景系统框架示意图;
图2为本申请实施例中的日志管理方法的一种实施例示意图;
图3为本申请实施例中的日志管理方法的另一种实施例示意图;
图4为本申请实施例中的日志管理方法的一种场景示意图;
图5为本申请实施例中的日志管理装置的一种结构示意图;
图6为本申请实施例中的日志管理装置的另一种结构示意图。
具体实施方式
本申请实施例提供了一种日志管理方法以及日志管理装置,用于日志管理装置统一保存日志,方便在出现异常时快速从保存的日志中获取对应的日志来对异常进行分析。
请参阅图1,图1为本申请实施例中的一种应用场景系统框架示意图,在多CPU的日志管理系统中,日志管理装置中的每个CPU内核都可以作为主CPU进行分布式协同工作,从而来提高数据存储的性能。其中,日志管理装置为包含多个CPU的设备,用于对每个CPU生成的日志进行管理。而服务器为与该日志管理装置连接的设备,用于驱动该日志管理装置,以使得该日志管理装置运行起来,并保存日志。
需要说明的是,该日志管理装置可以是固态存储设备,例如固态硬盘等。而与日志管理装置连接的服务器也可以是其他用于驱动的设备,具体此处不做限定,图1仅仅是一种举例说明。
目前,日志管理装置的存储方式通过多核处理器的分布式系统结构对数据存储至日志管理装置中,每个处理器内核作为本地的主处理器分布式协同工作,来提高数据存储读取的性能。而在每个处理器内核中的日志在本地处理器记录和保存。但是,每个处理器内核的日志是分布式管理保存,即每个处理器内核的日志不能够统一的进行管理保存,每次保存只能是针对某一个处理器内核中的日志,不便于在异常情况下对处理器固件运行异常的分析。
有鉴于此,本申请提出一种日志管理方法,用于日志管理装置统一保存日志,方便在出现异常时快速从保存的日志中获取对应的日志来对异常进行分析。
下面从日志管理装置的角度对本申请的日志管理方法进行详细描述,请参阅图2,本申请实施例中日志管理的方法的一个实施例包括:
201、日志管理装置将该日志管理装置的每个CPU生成的日志存储至该每个CPU内核中的缓冲内存空间。
日志管理装置在运行过程中,每个CPU会不断执行处理操作,而这个过程当中,每个CPU可以生成日志,该日志为该CPU当前执行的处理操作的记录以及当前状态等相关信息。日志管理装置可以将其该每个CPU生成的日志存储至该每个CPU的内核中的缓存内存空间。其中,该每个CPU的内核中的缓存内存空间可以是日志管理装置提前分配好的。
202、日志管理装置按照日志的类型将该每个CPU内核的日志分类拷贝至该日志管理装置的DDR中的缓冲内存空间。
日志管理装置将每个CPU生成的日志存储至每个CPU内核中的缓冲内存空间中之后,日志管理装置可以按照日志的类型将该每个CPU的内核中的缓冲内存空间中日志分类拷贝至该日志管理装置的DDR的缓冲内存空间中。下面通过举例说明,假设该日志管理装置为双核CPU设备,双核CPU包括第一CPU和第二CPU,那么此时第一CPU内核中存储的日志以及第二CPU内核中存储的日志可以按照日志的类型进行分类存储至该日志管理装置的DDR的缓冲内存空间中,日志的类型可以有错误日志、警告日志等,此时,日志管理装置将第一CPU和第二CPU的日志按照日志的类型进行整合保存至其DDR中的缓冲内存空间中。
203、日志管理装置按照日志的类型将该DDR的缓冲内存空间中的日志分类保存至日志管理装置的非易失存储介质的内存空间。
日志管理装置按照日志的类型将DDR的缓冲内存空间中的日志分类保存至日志管理装置的非易失存储介质内存空间中。例如,在步骤202中将第一CPU生成的日志以及第二CPU生成的日志通过整合存储至DDR中对应的缓冲内存空间中,那么此时,该日志管理装置可以在DDR的缓冲内存空间中获取每种类型的日志存储至其非易失存储介质的内存空间中,例如,第一CPU生成的日志中的错误日志以及第二CPU生成的日志的错误日志存储在DDR的对应的一个缓冲内存空间中,此时可以将这些日志从该缓冲内存空间中搬移存储至日志管理装置的非易失存储介质内存空间中。
本申请实施例中,将该日志管理装置的每个CPU内核生成的日志存储至该每个CPU内核中的缓冲内存空间,然后按照日志的类型将该每个CPU内核的日志分类拷贝至该日志管理装置的DDR中的缓冲内存空间,最后按照日志的类型将该DDR中的缓冲内存空间中的日志分类保存至日志管理装置的非易失存储介质内存空间。因此,通过本申请的技术方案,通过多CPU分布式记录日志,然后将多CPU记录的日志按照日志的类型集中保存至DDR的缓冲内存空间中,再按照日志的类型保存至日志管理装置的非易失存储介质内存空间中,这样通过将所有CPU内核的日志集中拷贝至日志管理装置的DDR中再进行对日志的管理保存至日志管理装置的非易失存储介质的内存空间,以便于后续对日志的读取或者清除等操作都可以统一从日志管理装置的非易失存储介质内存空间中获取,方便在出现异常时获取日志来对固件异常的分析,而不需要从每个CPU内核各自管理保存的日志中一个个的调取日志来分析异常现象。
本申请实施例中,针对于每个CPU内核的缓冲内存空间的分配以及日志管理装置的DDR中的缓冲内存空间可以是日志管理装置提前分配的,在后续的实施例中,仅以日志管理装置为每个CPU内核分配对应的缓冲内存空间以及日志管理装置在其DDR中分配对应的缓冲内存空间为例进行说明。
本申请实施例中,每个CPU内核的缓冲内存空间可以分为两种类型的缓冲内存空间,一种为tempRecord[]临时记录缓冲内存空间,另一种为activeRecord[]激活拷贝内存空间,其中,临时记录缓冲内存空间用于将对应CPU生成的日志按照日志记录条目进行存储;而激活拷贝内存空间用于按照预设的方式对日志进行筛选和排序,然后存储对应的筛选和排序过的日志。在后续的实施例中,以每个CPU内核的缓冲内存空间可以分为两种类型的缓冲内存空间,且一种为临时记录缓冲内存空间,另一种为激活拷贝内存空间为例进行说明。
本申请实施例中,日志管理装置在DDR中分配缓冲内存空间,其中,该缓存内存空间中可以有日志管理装置根据不同类型的日志划分为多个缓冲区,每个缓冲区存储对应类型的日志。在后续的实施例中,仅以此为例进行说明。
本申请实施例中,日志管理装置可以通过确定DDR中的缓冲内存空间的关键日志,然后将这部分关键日志保存至日志管理装置的非易失存储介质的内存空间。下面通过图3来详细介绍该实施方式,请参阅图3,本申请实施例中日志管理方法的另一个实施例包括:
301、日志管理装置在该日志管理装置的每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝内存空间。
日志管理装置在该日志管理装置的每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝内存空间,其中,临时记录缓冲内存空间用于日志管理装置将每个CPU生成的日志按照日志生成记录条目存储的空间,而激活拷贝内存空间用于日志管理装置对临时记录缓冲内存空间的日志进行排序以及筛选等操作之后得到的日志进行存储的空间。
302、日志管理装置按照日志记录条目将每个CPU中的日志保存至对应的临时记录缓冲内存空间。
日志管理装置可以按照日志记录条目将每个CPU生成的日志保存至临时记录缓冲内存空间,在该临时记录缓冲内存空间中,日志管理装置通过存储至该临时缓冲内存空间的日志的队列中的头指针以及尾指针来维护该缓冲空间存储的日志,具体可以是头指针的地址中写入新生成的日志,尾指针对应的地址输出日志至激活拷贝缓冲内存空间。如图4所示为日志管理装置内部的保存日志的流程,在临时记录缓冲内存空间中,写入新生成的日志。
303、日志管理装置按照日志的时间戳以及日志的等级将该临时记录缓冲内存空间中的日志分类拷贝至激活拷贝内存空间。
日志管理装置首先可以按照日志的时间戳来排序,然后按照日志的等级来将临时记录缓冲内存空间中的日志分类拷贝至激活拷贝内存空间中。下面通过举例说明,日志的类型可以分为info信息,error错误日志,警告日志等,通常错误日志的等级最高,然后再到警告日志,再到信息日志。如图4所示的激活拷贝缓冲内存空间中,按照日志的类型将日志读写到CPU内核的激活拷贝缓冲内存空间中。
304、日志管理装置在该日志管理装置的DDR中分配不同类型的日志的保存缓冲空间。
日志管理装置可以在日志管理装置的DDR中分配不同类型的日志的缓冲内存空间,即日志管理装置可以根据日志的类型来对应分配缓冲内存空间。例如,针对错误日志,分配一个对应的缓冲内存空间,针对警告日志,分配对应的缓冲内存空间。
305、日志管理装置将该激活拷贝缓冲内存空间的不同等级的日志分类拷贝至DDR中对应的保存缓冲内存空间中。
日志管理装置在其DDR中的分配了不同类型的日志的保存缓冲内存空间之后,日志管理装置将激活拷贝缓冲内存空间的不同等级的日志拷贝至DDR中对应的缓冲内存空间中。例如,日志管理装置可以将错误日志拷贝至该日志管理装置的DDR中对应的缓冲内存空间。如图4所示,在DDR的保存缓冲内存空间中,可以根据Sigature标签来将日志按照日志的等级分别写入到DDR中对应的缓冲内存空间中。
306、日志管理装置确定DDR的保存缓冲内存空间中的关键日志。
日志管理装置可以确定其DDR的保存缓冲内存空间中存储的日志中的关键日志,这里主要是为了日志管理装置将该关键日志优先存储至日志管理装置的非易失存储介质的内存空间,以便于在出现异常时可以调取相关的日志进行异常分析。
307、日志管理装置按照双冗余备份方式以及串行写入方式将关键日志保存至日志管理装置的非易失存储介质的内存空间。
日志管理装置可以按照双冗余备份方式以及串行写入方式将关键日志保存至SSD中。需要说明的是,日志管理装置可以设置非易失存储介质的内存空间保存日志的工作模式类型,具体可以是单层单元(single-level cell,SLC)模式,也可以是多层单元(multi-level cell,MLC)模式等,具体此处不做限定。其中使用SLC模式以及采用双冗余备份方式保存关键日志能够最大化的提高日志保存的准确性,最大降低数据读写出错的概率。
如图4所示,假设该日志管理装置为SSD,该SSD采用的是nand flash的存储器,那么SSD可以将其DDR中的缓冲内存空间中存储的日志搬移至其nand flash的内存空间中。本实施例中,由于对于关键日志的写入不要求性能,所以可以采用串行写入方式,采用双冗余备份方式写入方式可以将双份关键日志保存至SSD中两个独立的区块中。假设关键日志占用4K*16=64K,占用的页面数Page为64K/16K=4Page,在SLC工作模式下,一个Page需要330微秒,两份关键日志按照串行写入方式所需要的时间为4Page*330微秒*2=2.6毫秒,当第一份写入出错时,则等待下一份的写入。
需要说明的是,针对于数据写入至SSD中,SSD可以按照预设时长检测DDR中缓存内存空间中的关键日志是否有更新,如果有更新,那么SSD可以将该关键日志写入SSD的非易失存储介质的内存空间中;如果没有更新,则不写入,通过这样设置保存的时间,即巡检保存方式可以有效降低保存关键日志的过程对正常的数据读写过程的影响。
另外,再说明一下,SSD在上电过程中,进行关键日志的读取时,可以是独权page,在读取过程中如果读取失败,那么SSD可以将该page标记为坏块,然后对下一个关键日志区块进行读取。再下电的过程中,可以将关键日志刷新写入至SSD中。
本申请实施例中,将该日志管理装置的每个CPU内核生成的日志存储至该每个CPU内核中的缓冲内存空间,然后按照日志的类型将该每个CPU内核的日志分类拷贝至该日志管理装置的DDR中的缓冲内存空间,最后按照日志的类型将该DDR中的缓冲内存空间中的日志分类保存至日志管理装置的非易失存储介质内存空间。因此,通过本申请的技术方案,通过多CPU分布式记录日志,然后将多CPU记录的日志按照日志的类型集中保存至DDR的缓冲内存空间中,再按照日志的类型保存至日志管理装置的非易失存储介质内存空间中,这样通过将所有CPU内核的日志集中拷贝至日志管理装置的DDR中再进行对日志的管理保存至日志管理装置的非易失存储介质内存空间,以便于后续对日志的读取或者清除等操作都可以统一从日志管理装置的非易失存储介质内存空间中获取,方便在出现异常时获取日志来对固件异常的分析,而不需要从每个CPU内核各自管理保存的日志中一个个的调取日志来分析异常现象。
上述对本申请日志管理的方法进行了介绍,下面对本申请日志管理的日志管理装置进行详细介绍,请参阅图5,本申请实施例中日志管理装置的一个实施例包括:
存储单元501,用于将日志管理装置的每个CPU内核生成的日志存储至该每个CPU内核中的缓冲内存空间;
分类拷贝单元502,用于按照日志的类型将该每个CPU内核中的缓冲内存空间的日志分类拷贝至该日志管理装置中的DDR的缓冲内存空间;
分类保存单元503,用于按照日志的类型将该DDR的缓冲内存空间中的日志分类保存至该日志管理装置的非易失存储介质的内存空间。
本实施例中,该存储单元501具体用于:
在该每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝缓冲内存空间;
按照日志记录条目顺序将该每个CPU内核中的日志拷贝至该每个CPU内核中的临时记录缓冲内存空间;
按照日志的时间戳以及日志的等级将该临时记录缓冲内存空间中的日志分类拷贝至该激活拷贝缓冲内存空间。
本实施例中,该分类拷贝单元502具体用于:
在日志管理装置中的DDR中分配不同类型的日志的保存缓冲内存空间;
将该每个CPU内核中的激活拷贝缓冲内存空间中的每种类型的日志分类拷贝至该DDR中对应的保存缓存内存空间中。
本实施例中,该分类保存单元503具体用于:
确定该DDR的保存缓冲内存空间中的关键日志;
按照双冗余备份方式以及串行写入方式将关键日志分类拷贝至该日志管理装置的非易失存储介质的内存空间。
本实施例中,该分类保存单元503具体用于:
按照预设的时长检测该DDR的保存缓冲内存空间中是否存在更新的关键日志;
若是,则将该更新的关键日志分类保存至该日志管理装置的非易失存储介质的内存空间。
本申请实施例中,存储单元501将该日志管理装置的每个CPU内核生成的日志存储至该每个CPU内核中的缓冲内存空间,然后分类拷贝单元502按照日志的类型将该每个CPU内核的日志分类拷贝至该日志管理装置的DDR中的缓冲内存空间,最后分类保存单元503按照日志的类型将该DDR中的缓冲内存空间中的日志分类保存至日志管理装置的非易失存储介质内存空间。因此,通过本申请的技术方案,通过多CPU分布式记录日志,然后将多CPU记录的日志按照日志的类型集中保存至DDR的缓冲内存空间中,再按照日志的类型保存至日志管理装置的非易失存储介质内存空间中,这样通过将所有CPU内核的日志集中拷贝至日志管理装置的DDR中再进行对日志的管理保存至日志管理装置的非易失存储介质内存空间,以便于后续对日志的读取或者清除等操作都可以统一从日志管理装置的非易失存储介质内存空间中获取,方便在出现异常时获取日志来对固件异常的分析,而不需要从每个CPU内核各自管理保存的日志中一个个的调取日志来分析异常现象。
本申请还提供一种日志管理装置600,请参阅图6,本申请实施例中日志管理装置600一个实施例包括:
处理器601、存储器602、输入输出设备603以及总线604;
该处理器601、存储器602、输入输出设备603分别与总线604相连,该存储器602中存储有计算机指令;
该处理器601用于将日志管理装置的每个CPU内核生成的日志存储至该每个CPU内核中的缓冲内存空间;按照日志的类型将该每个CPU内核中的缓冲内存空间的日志分类拷贝至该日志管理装置中的DDR的缓冲内存空间;按照日志的类型将该DDR的缓冲内存空间中的日志分类保存至该日志管理装置的非易失存储介质的内存空间。
一种可能的实现方式中,该处理器601具体用于:
在该每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝缓冲内存空间;
按照日志记录条目顺序将该每个CPU内核中的日志拷贝至该每个CPU内核中的临时记录缓冲内存空间;
按照日志的时间戳以及日志的等级将该临时记录缓冲内存空间中的日志分类拷贝至该激活拷贝缓冲内存空间。
另一种可能的实现方式中,该处理器601具体用于:
在该日志管理装置中的DDR中分配不同类型的日志的保存缓冲内存空间;
将该每个CPU内核中的激活拷贝缓冲内存空间中的每种类型的日志分类拷贝至该DDR中对应的保存缓存内存空间中。
另一种可能的实现方式中,该处理器601具体用于:
确定该DDR的保存缓冲内存空间中的关键日志;
按照双冗余备份方式以及串行写入方式将关键日志分类拷贝至该日志管理装置的非易失存储介质的内存空间。
另一种可能的实现方式中,该处理器601具体用于:
按照预设的时长检测该DDR的保存缓冲内存空间中是否存在更新的关键日志;
若是,则将该更新的关键日志分类保存至日志管理装置的非易失存储介质的内存空间。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (8)
1.一种日志管理方法,其特征在于,应用于多中央处理器CPU的日志管理装置,所述方法包括:
将所述日志管理装置的每个CPU内核生成的日志存储至所述每个CPU内核中的缓冲内存空间;
其中,所述将所述日志管理装置的每个CPU内核生成的日志存储至所述每个CPU内核中的缓冲内存空间包括:在所述每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝缓冲内存空间;按照日志记录条目顺序将所述每个CPU内核中的日志拷贝至所述每个CPU内核中的临时记录缓冲内存空间;按照日志的时间戳以及日志的等级将所述临时记录缓冲内存空间中的日志分类拷贝至所述激活拷贝缓冲内存空间;
按照日志的类型将所述每个CPU内核中的缓冲内存空间的日志分类拷贝至所述日志管理装置的双倍速率同步动态随机存储器DDR的缓冲内存空间;
按照日志的类型将所述DDR的缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质的内存空间。
2.根据权利要求1所述的方法,其特征在于,所述按照日志的类型将所述每个CPU内核中的缓冲内存的日志分类拷贝至所述日志管理装置的DDR的缓冲内存空间包括:
在所述日志管理装置的DDR中分配不同类型的日志的保存缓冲内存空间;
将所述每个CPU内核中的激活拷贝缓冲内存中的每种类型的日志分类拷贝至对应的保存缓存内存空间中。
3.根据权利要求1至2中的任一项所述的方法,其特征在于,所述按照日志的类型将所述DDR的缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质的内存空间包括:
确定所述DDR的保存缓冲内存空间中的关键日志;
按照双冗余备份方式以及串行写入方式将所述关键日志分类拷贝至所述日志管理装置的非易失存储介质的内存空间。
4.根据权利要求1至2中的任一项所述的方法,其特征在于,所述按照日志的类型将所述DDR的缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质的内存空间包括:
按照预设的时长检测所述DDR的保存缓冲内存空间中是否存在更新的关键日志;
若是,则将所述更新的关键日志分类保存至所述日志管理装置的非易失存储介质的内存空间。
5.一种日志管理装置,其特征在于,所述日志管理装置包括:
存储单元,用于将日志管理装置的每个CPU内核生成的日志存储至所述每个CPU内核中的缓冲内存空间;所述存储单元具体用于:在所述每个CPU的内核部分分配对应的临时记录缓冲内存空间以及对应的激活拷贝缓冲内存空间;按照日志记录条目顺序将所述每个CPU内核中的日志拷贝至所述每个CPU内核中的临时记录缓冲内存空间;按照日志的时间戳以及日志的等级将所述临时记录缓冲内存空间中的日志分类拷贝至所述激活拷贝缓冲内存空间;
分类拷贝单元,用于按照日志的类型将所述每个CPU内核中的缓冲内存空间的日志分类拷贝至所述日志管理装置的DDR的缓冲内存空间;
分类保存单元,用于按照日志的类型将所述DDR的缓冲内存空间中的日志分类保存至所述日志管理装置的非易失存储介质的内存空间。
6.根据权利要求5所述的日志管理装置,其特征在于,所述分类拷贝单元具体用于:
在所述日志管理装置中的DDR中分配不同类型的日志的保存缓冲内存空间;
将所述每个CPU内核中的激活拷贝缓冲内存空间中的每种类型的日志分类拷贝至所述DDR中对应的保存缓存内存空间中。
7.根据权利要求5至6中的任一项所述的日志管理装置,其特征在于,所述分类保存单元具体用于:
确定所述DDR的保存缓冲内存空间中的关键日志;
按照双冗余备份方式以及串行写入方式将所述关键日志分类拷贝至所述日志管理装置的非易失存储介质的内存空间。
8.根据权利要求5至6中的任一项所述的日志管理装置,其特征在于,所述分类保存单元具体用于:
按照预设的时长检测所述DDR的保存缓冲内存空间中是否存在更新的关键日志;
若是,则将所述更新的关键日志分类保存至所述日志管理装置的非易失存储介质的内存空间。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810690772.0A CN108959526B (zh) | 2018-06-28 | 2018-06-28 | 日志管理方法以及日志管理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810690772.0A CN108959526B (zh) | 2018-06-28 | 2018-06-28 | 日志管理方法以及日志管理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108959526A CN108959526A (zh) | 2018-12-07 |
CN108959526B true CN108959526B (zh) | 2021-10-15 |
Family
ID=64487957
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810690772.0A Active CN108959526B (zh) | 2018-06-28 | 2018-06-28 | 日志管理方法以及日志管理装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108959526B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111581024A (zh) * | 2020-05-06 | 2020-08-25 | 深圳忆联信息系统有限公司 | Ssd日志的动态备份恢复方法、装置和计算机设备 |
CN111796996A (zh) * | 2020-07-03 | 2020-10-20 | 深圳大普微电子科技有限公司 | 一种固态硬盘日志处理方法、固态硬盘和电子设备 |
CN111858531B (zh) * | 2020-07-14 | 2022-08-02 | 苏州浪潮智能科技有限公司 | 一种基于多核硬盘的日志存储方法、系统及相关组件 |
CN112860516A (zh) * | 2021-02-04 | 2021-05-28 | 展讯通信(上海)有限公司 | 一种日志保存方法、通信装置、芯片及模组设备 |
CN113342276B (zh) * | 2021-06-13 | 2023-01-06 | 苏州浪潮智能科技有限公司 | 一种日志保存方法、系统、设备以及介质 |
CN113918358A (zh) * | 2021-09-17 | 2022-01-11 | 远景智能国际私人投资有限公司 | 日志发送方法、装置及日志管理系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101146304A (zh) * | 2006-09-11 | 2008-03-19 | 中兴通讯股份有限公司 | 基于业务处理流程的日志记录方法和装置 |
JP2010205058A (ja) * | 2009-03-04 | 2010-09-16 | Fuji Xerox Co Ltd | 履歴記憶装置およびプログラム |
CN103959260A (zh) * | 2011-11-30 | 2014-07-30 | 超威半导体公司 | 标签和数据共同存储在物理行中的dram高速缓存 |
CN104115129A (zh) * | 2011-12-21 | 2014-10-22 | 英特尔公司 | 用于从处理器到存储器子系统智能刷新数据的系统和方法 |
CN106104511A (zh) * | 2014-03-11 | 2016-11-09 | 亚马逊科技公司 | 基于块的存储的页面高速缓存存录 |
CN107291928A (zh) * | 2017-06-29 | 2017-10-24 | 国信优易数据有限公司 | 一种日志存储系统和方法 |
CN107622084A (zh) * | 2017-08-10 | 2018-01-23 | 深圳前海微众银行股份有限公司 | 日志管理方法、系统以及计算机可读存储介质 |
-
2018
- 2018-06-28 CN CN201810690772.0A patent/CN108959526B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101146304A (zh) * | 2006-09-11 | 2008-03-19 | 中兴通讯股份有限公司 | 基于业务处理流程的日志记录方法和装置 |
JP2010205058A (ja) * | 2009-03-04 | 2010-09-16 | Fuji Xerox Co Ltd | 履歴記憶装置およびプログラム |
CN103959260A (zh) * | 2011-11-30 | 2014-07-30 | 超威半导体公司 | 标签和数据共同存储在物理行中的dram高速缓存 |
CN104115129A (zh) * | 2011-12-21 | 2014-10-22 | 英特尔公司 | 用于从处理器到存储器子系统智能刷新数据的系统和方法 |
CN106104511A (zh) * | 2014-03-11 | 2016-11-09 | 亚马逊科技公司 | 基于块的存储的页面高速缓存存录 |
CN107291928A (zh) * | 2017-06-29 | 2017-10-24 | 国信优易数据有限公司 | 一种日志存储系统和方法 |
CN107622084A (zh) * | 2017-08-10 | 2018-01-23 | 深圳前海微众银行股份有限公司 | 日志管理方法、系统以及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN108959526A (zh) | 2018-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108959526B (zh) | 日志管理方法以及日志管理装置 | |
CN101369247B (zh) | 创建存储器缺陷映射表并使用该映射表优化性能的方法 | |
US8533681B2 (en) | Atomicity violation detection using access interleaving invariants | |
US8601310B2 (en) | Partial memory mirroring and error containment | |
US10037152B2 (en) | Method and system of high-throughput high-capacity storage appliance with flash translation layer escalation and global optimization on raw NAND flash | |
US20090046512A1 (en) | Reliability System for Use with Non-Volatile Memory Devices | |
CN101369240A (zh) | 用于在信息处理系统中管理存储错误的系统和方法 | |
US9529674B2 (en) | Storage device management of unrecoverable logical block addresses for RAID data regeneration | |
EP2919120B1 (en) | Memory monitoring method and related device | |
CN111124264A (zh) | 用于重建数据的方法、设备和计算机程序产品 | |
CN113396566A (zh) | 分布式存储系统中基于全面i/o监测的资源分配 | |
CN107797938B (zh) | 加快去分配命令处理的方法与存储设备 | |
CN113366452A (zh) | 存储器子系统的事件日志信息的管理 | |
EP3274839B1 (en) | Technologies for root cause identification of use-after-free memory corruption bugs | |
CN113419686A (zh) | 一种raid重构方法及装置 | |
US11204869B2 (en) | System and method for facilitating data storage with low-latency input/output and persistent data | |
CN106844166B (zh) | 一种数据处理方法及装置 | |
US10007601B2 (en) | Data storage device and operating method for flash memory | |
US20120159247A1 (en) | Automatically changing parts in response to tests | |
CN115858172A (zh) | 一种处理器指令执行统计方法及装置、处理器系统 | |
CN111176568B (zh) | 一种数据分析的方法和装置 | |
CN111338846B (zh) | 一种基于多核恢复l2p表的方法和装置 | |
CN109002265B (zh) | 一种数据处理的方法以及相关装置 | |
EP3504627B1 (en) | Read operation redirect | |
CN113468105A (zh) | 数据快照的数据结构、相关数据处理方法及装置和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |