CN113608908A - 服务器故障处理方法、系统、设备及可读存储介质 - Google Patents
服务器故障处理方法、系统、设备及可读存储介质 Download PDFInfo
- Publication number
- CN113608908A CN113608908A CN202110859373.4A CN202110859373A CN113608908A CN 113608908 A CN113608908 A CN 113608908A CN 202110859373 A CN202110859373 A CN 202110859373A CN 113608908 A CN113608908 A CN 113608908A
- Authority
- CN
- China
- Prior art keywords
- fault
- server
- target hardware
- log
- frequency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 18
- 238000012545 processing Methods 0.000 claims abstract description 52
- 238000000034 method Methods 0.000 claims abstract description 29
- 239000000758 substrate Substances 0.000 claims abstract description 10
- 238000002955 isolation Methods 0.000 claims description 25
- 230000009467 reduction Effects 0.000 claims description 10
- 238000009434 installation Methods 0.000 claims description 7
- 230000008569 process Effects 0.000 abstract description 7
- 230000005540 biological transmission Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 108010028984 3-isopropylmalate dehydratase Proteins 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000013486 operation strategy Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
- G06F11/0721—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment within a central processing unit [CPU]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0766—Error or fault reporting or storing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0793—Remedial or corrective actions
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供一种服务器故障处理方法、系统、设备及可读存储介质。该方法包括：基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；根据所述故障告警日志、硬件更换日志以及历史告警日志确定对应的故障处理策略对故障进行处理。通过本发明，建立服务器的操作系统与基板管理控制器之间的虚拟网卡通道，使得操作系统可基于虚拟网卡通道接收基板管理控制器上报的各类日志文件，从而根据各类日志文件进行故障处理，提高了故障处理效率，保证了服务器的稳定运行。
Description
技术领域
本发明涉及服务器管理技术领域，尤其涉及一种服务器故障处理方法、系统、设备及可读存储介质。
背景技术
现在服务器的硬件速率和配置越来越高，因为硬件故障导致服务器宕机现象也越来越多，在因为硬件故障导致服务器宕机时，需要通过人工或第三方软件从服务器的基板管理控制器(Baseboard Manager Controller，简称BMC)上下载的硬件告警日志进行离线分析。这种方式导致服务器宕机后，不能及时对导致服务器宕机的故障硬件进行定位，从而无法保证服务器的稳定运行。
发明内容
为解决上述技术问题，本发明的主要目的在于提供一种服务器故障处理方法、系统、设备及可读存储介质。
第一方面，本发明提供一种服务器故障处理方法，所述服务器故障处理方法应用于服务器的操作系统，所述服务器故障处理方法包括：
基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；
根据所述故障告警日志确定发生故障的目标硬件以及故障类型；
若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数，并基于所述第一次数进行故障处理；
若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数，并基于所述第二次数、第三次数以及历史访问次数进行故障处理。
可选的，所述基于所述第一次数进行故障处理的步骤包括：
当所述第一次数与服务器工作时长的比值小于第一阈值，对所述目标硬件进行隔离操作；
当所述第一次数与服务器工作时长的比值大于或等于第一阈值，输出目标硬件更换提醒。
可选的，所述基于所述第二次数、第三次数以及历史访问次数进行故障处理的步骤包括：
当第二次数与服务器工作时长的比值小于第二阈值，则检测第三次数是否大于零；
若第三次数不大于零，则对所述目标硬件进行隔离操作；
当第二次数与服务器工作时长的比值大于或等于第二阈值，则对所述目标硬件进行隔离操作。
可选的，在所述则检测第三次数是否大于零的步骤之后，还包括：
若第三次数大于零，则计算第三次数、历史访问次数以及服务器工作时长的乘积；
若第二次数与所述乘积的比值大于或等于第三阈值，则对所述目标硬件进行隔离操作。
可选的，在所述计算第三次数、历史访问次数以及服务器工作时长的乘积的步骤之后，还包括：
若第二次数与所述乘积的比值小于第三阈值，则检测主板更换次数是否大于第四阈值；
若主板更换次数大于第四阈值，则输出安装异常提醒；
若主板更换次数小于或等于第四阈值，则输出主板更换提醒。
可选的，当所述目标硬件为UPI总线，所述对所述目标硬件进行隔离操作的步骤包括：
对UPI总线做降速处理，若降速处理后UPI总线仍存在故障，则隔离通过UPI总线连接的两个CPU中的任一个，且不访问UPI总线。
可选的，所述虚拟网卡通道为USB虚拟网卡通道。
第二方面，本发明还提供一种服务器故障处理系统，所述服务器故障处理系统包括：
接收模块，用于基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；
第一确定模块，用于根据所述故障告警日志确定发生故障的目标硬件以及故障类型；
第二确定模块，用于若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数；
第三确定模块，用于若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数；
处理模块，用于基于所述第一次数进行故障处理，还用于基于所述第二次数、第三次数以及历史访问次数进行故障处理。
第三方面，本发明还提供一种服务器故障处理设备，所述服务器故障处理设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的服务器故障处理程序，其中所述服务器故障处理程序被所述处理器执行时，实现如上所述的服务器故障处理方法的步骤。
第四方面，本发明还提供一种可读存储介质，所述可读存储介质上存储有服务器故障处理程序，其中所述服务器故障处理程序被处理器执行时，实现如上所述的服务器故障处理方法的步骤。
本发明中，基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；根据所述故障告警日志确定发生故障的目标硬件以及故障类型；若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数；基于所述第一次数进行故障处理；若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数；基于所述第二次数、第三次数以及历史访问次数进行故障处理。通过本发明，建立服务器的操作系统与基板管理控制器之间的虚拟网卡通道，使得操作系统可基于虚拟网卡通道接收基板管理控制器上报的各类日志文件，从而根据各类日志文件进行故障处理，提高了故障处理效率，保证了服务器的稳定运行。
附图说明
图1为本发明实施例方案中涉及的服务器故障处理设备的硬件结构示意图；
图2为本发明服务器故障处理方法一实施例的流程示意图；
图3为本发明服务器故障处理系统一实施例的架构示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
第一方面，本发明实施例提供一种服务器故障处理设备。
参照图1，图1为本发明实施例方案中涉及的服务器故障处理设备的硬件结构示意图。本发明实施例中，服务器故障处理设备可以包括处理器1001(例如中央处理器CentralProcessing Unit，CPU)，通信总线1002，用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信；用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)；网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真WIreless-FIdelity，WI-FI接口)；存储器1005可以是高速随机存取存储器(random access memory，RAM)，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器，存储器1005可选的还可以是独立于前述处理器1001的存储装置。本领域技术人员可以理解，图1中示出的硬件结构并不构成对本发明的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
继续参照图1，图1中作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及服务器故障处理程序。其中，处理器1001可以调用存储器1005中存储的服务器故障处理程序，并执行本发明实施例提供的服务器故障处理方法。
第二方面，本发明实施例提供了一种服务器故障处理方法，所述服务器故障处理方法应用于服务器的操作系统。
一实施例中，参照图2，图2为本发明服务器故障处理方法一实施例的流程示意图。如图2所示，所述服务器故障处理方法包括：
步骤S10，基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；
目前，服务器的操作系统和基板管理控制器BMC之间基于IPMI通道进行通信，这种通信方式无法支持文件传输，导致BMC上的日志文件无法直接给到操作系统。
本实施例中，建立服务器的操作系统和BMC之间的虚拟网卡通道，该虚拟网卡通道相比IPMI通道，可以支持加密和压缩传输，传输更快，可以直接对文件进行传输，使用更安全，更高效。虚拟网卡通道建立后，服务器的操作系统即可基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志。
进一步地，一实施例中，所述虚拟网卡通道为USB虚拟网卡通道。
本实施例中，在操作系统侧加载内核态网卡驱动，通过查询smbios信息，获取BMC侧USB虚拟网卡IP地址，配置操作系统侧USB虚拟网口IP地址；BMC侧通过网络服务配置本端的USB虚拟网口IP地址。完成上述配置后，基板管理控制器即可通过USB虚拟网卡通道向服务器的操作系统上报故障告警日志、硬件更换日志以及历史告警日志。其中，USB虚拟网卡通道是专用的，可以解决IPMI通道阻塞或无法访问的情况，提高了操作系统和BMC之间数据传输的可靠性，同时由于网络传输速率快，可以直接对日志等大文件进行传输。
步骤S20，根据所述故障告警日志确定发生故障的目标硬件以及故障类型；
本实施例中，操作系统收到BMC上报的故障告警日志、硬件更换日志以及历史告警日志之后，首先根据故障告警日志确定发生故障的目标硬件是哪个，以及故障类型是什么类型。其中，发生故障的目标硬件可以是CPU、内存、UPI总线、PCIE外插卡中的任一个；故障类型分为两种：不可修复错误类型、可修复错误类型。
步骤S30，若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数；
本实施例中，当故障类型为不可修复错误类型时，则根据历史告警日志确定发生故障的目标硬件发生不可修复错误类型故障的第一次数。
步骤S40，基于所述第一次数进行故障处理；
本实施例中，可根据第一次数的大小选择不同的处理方式对此次故障进行处理。例如，当第一次数大于或等于某个设定值时，说明该目标硬件发生不可修复错误类型故障的次数比较多，则需要对该目标硬件进行更换，因此可输出目标硬件更换提醒，以供维护人员收到该提醒后对目标硬件进行更换；当第一次数小于某个设定值时，说明该目标硬件发生不可修复错误类型故障的次数比较少，无需对其进行更换，仅需对其进行隔离操作即可。
进一步地，一实施例中，步骤S40包括：
当所述第一次数与服务器工作时长的比值小于第一阈值，对所述目标硬件进行隔离操作；当所述第一次数与服务器工作时长的比值大于或等于第一阈值，输出目标硬件更换提醒。
本实施例中，在得到目标硬件发生不可修复错误类型故障的第一次数后，基于第一次数和服务器工作时长综合确定故障处理策略。具体的，先计算第一次数与服务器工作时长的比值，然后将比值与第一阈值进行比较，若比值小于第一阈值，则说明该目标硬件发生不可修复错误类型故障的次数比较少，无需对其进行更换，仅需对其进行隔离操作即可；若比值大于或等于第一阈值，则说明该目标硬件发生不可修复错误类型故障的次数比较多，则需要对该目标硬件进行更换，因此可输出目标硬件更换提醒，以供维护人员收到该提醒后对目标硬件进行更换。需要说明的是，第一阈值根据实际情况进行设置，在此不做限制。
步骤S50，若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数；
本实施例中，当故障类型为可修复错误类型时，则根据历史告警日志确定目标硬件发生可修复错误类型故障的第二次数以及目标硬件的历史访问次数，根据硬件更换日志确定目标硬件被更换的第三次数。其中，历史告警日志中可包含每个硬件发生各类型故障的次数和历史访问次数，也可以只包含当前发生故障的目标硬件发生各类型故障的次数和历史访问次数；硬件更换日志中可包含每个硬件被更换的次数或是只包含当前发生故障的目标硬件被更换的次数。
步骤S60，基于所述第二次数、第三次数以及历史访问次数进行故障处理。
本实施例中，第二次数越大、第三次数越小以及历史访问次数越大，说明目标硬件故障是由其本身性能引起的概率就越大，基于这一判断准则即可根据第二次数、第三次数以及历史访问次数的数值确定故障处理策略，从而进行故障处理。
本实施例中，基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；根据所述故障告警日志确定发生故障的目标硬件以及故障类型；若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数；基于所述第一次数进行故障处理；若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数；基于所述第二次数、第三次数以及历史访问次数进行故障处理。通过本实施例，建立服务器的操作系统与基板管理控制器之间的虚拟网卡通道，使得操作系统可基于虚拟网卡通道接收基板管理控制器上报的各类日志文件，从而根据各类日志文件进行故障处理，提高了故障处理效率，保证了服务器的稳定运行。
进一步地，一实施例中，步骤S60包括：
当第二次数与服务器工作时长的比值小于第二阈值，则检测第三次数是否大于零；若第三次数不大于零，则对所述目标硬件进行隔离操作；当第二次数与服务器工作时长的比值大于或等于第二阈值，则对所述目标硬件进行隔离操作。
本实施例中，先计算第二次数与服务器工作时长的比值，若该比值大于或等于第二阈值，说明目标硬件发生可修复错误类型故障的次数比较多，由于可修复错误类型故障的严重程度不高，因此无需对其进行更换，而是对目标硬件进行隔离操作；若该比值小于第二阈值，则检测第三次数是否大于零，若第三次数不大于零，说明该目标硬件未更换过，则说明可能是因为目标硬件本身导致的本次故障，因此对目标硬件进行隔离操作。需要说明的是，第二阈值根据实际情况进行设置，在此不做限制。
进一步地，一实施例中，在所述则检测第三次数是否大于零的步骤之后，还包括：
若第三次数大于零，则计算第三次数、历史访问次数以及服务器工作时长的乘积；若第二次数与所述乘积的比值大于或等于第三阈值，则对所述目标硬件进行隔离操作。
本实施例中，若第三次数大于零，则计算第三次数、历史访问次数以及服务器工作时长的乘积，然后计算第二次数与乘积的比值，再将该比值与第三阈值进行比较。若比值大于或等于第三阈值，则认为本次故障是目标硬件本身导致的，则对目标硬件进行隔离操作。需要说明的是，第三阈值根据实际情况进行设置，在此不做限制。
进一步地，一实施例中，在所述计算第三次数、历史访问次数以及服务器工作时长的乘积的步骤之后，还包括：
若第二次数与所述乘积的比值小于第三阈值，则检测主板更换次数是否大于第四阈值；若主板更换次数大于第四阈值，则输出安装异常提醒；若主板更换次数小于或等于第四阈值，则输出主板更换提醒。
本实施例中，若第二次数与乘积的比值小于第三阈值，则确定本次故障不是目标硬件本身导致的，则需检测主板更换次数是否大于第四阈值。若主板更换次数大于第四阈值，则说明主板无故障，故障可能是由于安装原因导致的，则输出安装异常提醒，以供维护人员检查目标硬件在主板上的安装情况；若主板更换次数小于或等于第四阈值，则确认本次故障是主板导致的，则输出主板更换提醒，以供维护人员对主板进行更换。
进一步地，一实施例中，所述对所述目标硬件进行隔离操作的步骤包括：
以目标硬件对应的隔离操作策略对目标硬件进行隔离操作。
本实施例中，对于每个硬件而言，均设置有对应的隔离操作策略。例如，当发生故障的目标硬件为UPI总线时，则对其进行隔离操作的具体步骤为：先对UPI总线做降速处理，检测降速处理后UPI总线是否仍存在故障，若仍存在故障，则隔离通过UPI总线连接的两个CPU中的任一个，且不访问UPI总线。当发生故障的目标硬件为CPU时，依次隔离CPU上的核心，若某个核心被隔离后，CPU仍存在故障，则隔离下个核心，直至某个核心被隔离后，故障解除，则将该核心隔离。当发生故障的目标硬件为内存时，根据MCA解析出内存的物理地址，然后隔离该物理地址对应的逻辑地址。当发生故障的目标硬件为PCIE时，检测link状态是否错误，若是，则对PCIE进行降速处理，检测降速处理后link状态是否恢复正常，若未恢复正常，则使对应的PCIE slot无效。
第三方面，本发明实施例还提供一种服务器故障处理系统。
一实施例中，参照图3，图3为本发明服务器故障处理系统一实施例的架构示意图。如图3所示，服务器故障处理系统包括：
接收模块10，用于基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；
第一确定模块20，用于根据所述故障告警日志确定发生故障的目标硬件以及故障类型；
第二确定模块30，用于若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数；
第三确定模块40，用于若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数；
处理模块50，用于基于所述第一次数进行故障处理，还用于基于所述第二次数、第三次数以及历史访问次数进行故障处理。
进一步地，一实施例中，处理模块50，用于：
当所述第一次数与服务器工作时长的比值小于第一阈值，对所述目标硬件进行隔离操作；
当所述第一次数与服务器工作时长的比值大于或等于第一阈值，输出目标硬件更换提醒。
进一步地，一实施例中，处理模块50，用于：
当第二次数与服务器工作时长的比值小于第二阈值，则检测第三次数是否大于零；
若第三次数不大于零，则对所述目标硬件进行隔离操作；
当第二次数与服务器工作时长的比值大于或等于第二阈值，则对所述目标硬件进行隔离操作。
进一步地，一实施例中，处理模块50，用于：
若第三次数大于零，则计算第三次数、历史访问次数以及服务器工作时长的乘积；
若第二次数与所述乘积的比值大于或等于第三阈值，则对所述目标硬件进行隔离操作。
进一步地，一实施例中，处理模块50，用于：
若第二次数与所述乘积的比值小于第三阈值，则检测主板更换次数是否大于第四阈值；
若主板更换次数大于第四阈值，则输出安装异常提醒；
若主板更换次数小于或等于第四阈值，则输出主板更换提醒。
进一步地，一实施例中，当所述目标硬件为UPI总线，处理模块50，用于：
对UPI总线做降速处理，若降速处理后UPI总线仍存在故障，则隔离通过UPI总线连接的两个CPU中的任一个，且不访问UPI总线。
进一步地，一实施例中，所述虚拟网卡通道为USB虚拟网卡通道。
其中，上述服务器故障处理系统中各个模块的功能实现与上述服务器故障处理方法实施例中各步骤相对应，其功能和实现过程在此处不再一一赘述。
第四方面，本发明实施例还提供一种可读存储介质。
本发明可读存储介质上存储有服务器故障处理程序，其中所述服务器故障处理程序被处理器执行时，实现如上述的服务器故障处理方法的步骤。
其中，服务器故障处理程序被执行时所实现的方法可参照本发明服务器故障处理方法的各个实施例，此处不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种服务器故障处理方法，其特征在于，所述服务器故障处理方法应用于服务器的操作系统，所述服务器故障处理方法包括：
基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；
根据所述故障告警日志确定发生故障的目标硬件以及故障类型；
若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数，并基于所述第一次数进行故障处理；
若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数，并基于所述第二次数、第三次数以及历史访问次数进行故障处理。
2.如权利要求1所述的服务器故障处理方法，其特征在于，所述基于所述第一次数进行故障处理的步骤包括：
当所述第一次数与服务器工作时长的比值小于第一阈值，对所述目标硬件进行隔离操作；
当所述第一次数与服务器工作时长的比值大于或等于第一阈值，输出目标硬件更换提醒。
3.如权利要求1所述的服务器故障处理方法，其特征在于，所述基于所述第二次数、第三次数以及历史访问次数进行故障处理的步骤包括：
当第二次数与服务器工作时长的比值小于第二阈值，则检测第三次数是否大于零；
若第三次数不大于零，则对所述目标硬件进行隔离操作；
当第二次数与服务器工作时长的比值大于或等于第二阈值，则对所述目标硬件进行隔离操作。
4.如权利要求3所述的服务器故障处理方法，其特征在于，在所述则检测第三次数是否大于零的步骤之后，还包括：
若第三次数大于零，则计算第三次数、历史访问次数以及服务器工作时长的乘积；
若第二次数与所述乘积的比值大于或等于第三阈值，则对所述目标硬件进行隔离操作。
5.如权利要求4所述的服务器故障处理方法，其特征在于，在所述计算第三次数、历史访问次数以及服务器工作时长的乘积的步骤之后，还包括：
若第二次数与所述乘积的比值小于第三阈值，则检测主板更换次数是否大于第四阈值；
若主板更换次数大于第四阈值，则输出安装异常提醒；
若主板更换次数小于或等于第四阈值，则输出主板更换提醒。
6.如权利要求2至4中任一项所述的服务器故障处理方法，其特征在于，当所述目标硬件为UPI总线，所述对所述目标硬件进行隔离操作的步骤包括：
对UPI总线做降速处理，若降速处理后UPI总线仍存在故障，则隔离通过UPI总线连接的两个CPU中的任一个，且不访问UPI总线。
7.如权利要求1至6中任一项所述的服务器故障处理方法，其特征在于，所述虚拟网卡通道为USB虚拟网卡通道。
8.一种服务器故障处理系统，其特征在于，所述服务器故障处理系统包括：
接收模块，用于基于虚拟网卡通道接收基板管理控制器上报的故障告警日志、硬件更换日志以及历史告警日志；
第一确定模块，用于根据所述故障告警日志确定发生故障的目标硬件以及故障类型；
第二确定模块，用于若故障类型为不可修复错误类型，则根据历史告警日志确定所述目标硬件发生不可修复错误类型故障的第一次数；
第三确定模块，用于若故障类型为可修复错误类型，则根据硬件更换日志以及历史告警日志确定所述目标硬件发生可修复错误类型故障的第二次数、所述目标硬件被更换的第三次数以及所述目标硬件的历史访问次数；
处理模块，用于基于所述第一次数进行故障处理，还用于基于所述第二次数、第三次数以及历史访问次数进行故障处理。
9.一种服务器故障处理设备，其特征在于，所述服务器故障处理设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的服务器故障处理程序，其中所述服务器故障处理程序被所述处理器执行时，实现如权利要求1至7中任一项所述的服务器故障处理方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储有服务器故障处理程序，其中所述服务器故障处理程序被处理器执行时，实现如权利要求1至7中任一项所述的服务器故障处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110859373.4A CN113608908B (zh) | 2021-07-28 | 2021-07-28 | 服务器故障处理方法、系统、设备及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110859373.4A CN113608908B (zh) | 2021-07-28 | 2021-07-28 | 服务器故障处理方法、系统、设备及可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113608908A true CN113608908A (zh) | 2021-11-05 |
| CN113608908B CN113608908B (zh) | 2023-12-22 |
Family
ID=78305822
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110859373.4A Active CN113608908B (zh) | 2021-07-28 | 2021-07-28 | 服务器故障处理方法、系统、设备及可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113608908B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115499295A (zh) * | 2022-07-29 | 2022-12-20 | 浪潮通信技术有限公司 | 服务器故障上报方法、装置、电子设备及存储介质 |
| WO2023241703A1 (zh) * | 2022-06-17 | 2023-12-21 | 中兴通讯股份有限公司 | 故障处理方法、装置和计算机可读存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070162786A1 (en) * | 2006-01-06 | 2007-07-12 | Shuma Stephen G | Repair of memory hard failures during normal operation, using ecc and a hard fail identifier circuit |
| CN101201786A (zh) * | 2006-12-13 | 2008-06-18 | 中兴通讯股份有限公司 | 一种故障日志监控方法及装置 |
| CN105224441A (zh) * | 2015-09-17 | 2016-01-06 | 杭州华为数字技术有限公司 | 虚拟机信息采集装置、方法及虚拟机信息维护方法和系统 |
| CN105808394A (zh) * | 2014-12-31 | 2016-07-27 | 中兴通讯股份有限公司 | 一种服务器自愈的方法和装置 |
| CN107066370A (zh) * | 2017-04-26 | 2017-08-18 | 郑州云海信息技术有限公司 | 一种自动监控并收集故障硬盘日志的工具及方法 |
| CN109086151A (zh) * | 2017-06-13 | 2018-12-25 | 中兴通讯股份有限公司 | 一种服务器上隔离内存故障的方法及装置 |
-
2021
- 2021-07-28 CN CN202110859373.4A patent/CN113608908B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070162786A1 (en) * | 2006-01-06 | 2007-07-12 | Shuma Stephen G | Repair of memory hard failures during normal operation, using ecc and a hard fail identifier circuit |
| CN101201786A (zh) * | 2006-12-13 | 2008-06-18 | 中兴通讯股份有限公司 | 一种故障日志监控方法及装置 |
| CN105808394A (zh) * | 2014-12-31 | 2016-07-27 | 中兴通讯股份有限公司 | 一种服务器自愈的方法和装置 |
| CN105224441A (zh) * | 2015-09-17 | 2016-01-06 | 杭州华为数字技术有限公司 | 虚拟机信息采集装置、方法及虚拟机信息维护方法和系统 |
| CN107066370A (zh) * | 2017-04-26 | 2017-08-18 | 郑州云海信息技术有限公司 | 一种自动监控并收集故障硬盘日志的工具及方法 |
| CN109086151A (zh) * | 2017-06-13 | 2018-12-25 | 中兴通讯股份有限公司 | 一种服务器上隔离内存故障的方法及装置 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023241703A1 (zh) * | 2022-06-17 | 2023-12-21 | 中兴通讯股份有限公司 | 故障处理方法、装置和计算机可读存储介质 |
| CN115499295A (zh) * | 2022-07-29 | 2022-12-20 | 浪潮通信技术有限公司 | 服务器故障上报方法、装置、电子设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113608908B (zh) | 2023-12-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110377469B (zh) | 一种pcie设备的检测系统以及方法 | |
| CN113608908B (zh) | 服务器故障处理方法、系统、设备及可读存储介质 | |
| US20070294560A1 (en) | Support self-heal tool | |
| US7716527B2 (en) | Repair system | |
| US8332690B1 (en) | Method and apparatus for managing failures in a datacenter | |
| JP5198154B2 (ja) | 障害監視システム及びデバイスと監視装置並びに障害監視方法 | |
| CN111858122A (zh) | 一种存储链路的故障检测方法、装置、设备及存储介质 | |
| CN114884796B (zh) | 故障处理方法、装置、电子设备及存储介质 | |
| CN112732477A (zh) | 一种带外自检故障隔离的方法 | |
| CN113645085B (zh) | 智能网卡的异常检测方法、装置、电子设备及存储介质 | |
| CN110781053A (zh) | 一种检测内存降级错误的方法和装置 | |
| CN110896362B (zh) | 一种故障检测方法和装置 | |
| CN111897697A (zh) | 服务器硬件故障修复方法和装置 | |
| CN112764956A (zh) | 数据库的异常处理系统、数据库的异常处理方法及装置 | |
| JP2012003651A (ja) | 仮想化環境監視装置とその監視方法およびプログラム | |
| CN109150587B (zh) | 一种维护方法和装置 | |
| CN112988439B (zh) | 服务器故障发现方法、装置、电子设备及存储介质 | |
| CN115037653B (zh) | 业务流量监控方法、装置、电子设备和存储介质 | |
| CN115495301A (zh) | 一种故障处理方法、装置、设备及系统 | |
| TWI815722B (zh) | 利用伺服器日誌資料於測試前預先判斷伺服器狀態之判斷系統與判斷方法 | |
| CN113630178B (zh) | 一种报文传输方法及装置 | |
| CN117331729A (zh) | 一种固态硬盘运行方法、装置以及电子设备 | |
| KR20020065188A (ko) | 컴퓨터 시스템의 장애관리 방법 | |
| CN116701055A (zh) | 一种服务器的故障隔离方法、装置、设备及介质 | |
| CN116701036A (zh) | 一种bmc系统自动检测修复方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |