CN115865613A - 基础环境故障处理方法及装置 - Google Patents

Abstract

本发明提供了一种基础环境故障处理方法及装置，可用于金融领域或其他领域。所述方法包括：获取告警信息，并对所述告警信息进行关键字分析，确定告警关键字；根据预设的匹配规则及所述告警关键字，确定所述告警关键字对应的告警原因；根据所述告警原因确定其对应的应急场景，并根据预设的应急处置规则及所述应急场景进行故障处理。本发明通过对告警信息的分析处理，准确定位告警原因，由此实现对基础环境发生的告警进行故障定位，利用故障应急处置实现快速安全复位操作，缩短问题排查周期、准确定位故障，提高故障处置速度，降低系统维护成本，提升了基础平台的运行管理能力。

Description

基础环境故障处理方法及装置

技术领域

本发明涉及故障处理技术领域，尤指一种基础环境故障处理方法及装置。

背景技术

数据中心是一整套复杂的设施，不不仅仅包含信息系统和它配套的服务器、通信、存储等设备，还有包含冗余的数据通信连接、环境控制设备、监控设备以及各种安全设备。当前现存的综合监控系统已经基本满足基础环境的集中监控能力，为了进一步提升业务系统的可靠运行和运维管理水平，提高信息系统的系统安全可靠运行保障能力，积极研究和应用基础环境运行的监控进行分析并制定应急处置方法。

目前，通过综合监控系统实时监测基础环境的运行状态，实时的发现告警信息，当前一线工程师通过告警信息，手动去检索日志、基础软件运行状态等信息，定位问题，根据排查结果制定变更实施方案和计划，通过变更解除告警信息。现有综合监控系统通过TCP或SNMP等协议监控基础环境的运行状态，监控的告警信息需要联系一线运维工程师进一步定位问题，经常有重复问题重复查询，排查和维护周期拉长，如果工程师检查方向错误，可能导致基础环境服务不稳定，服务不可用性增大，风险点增多，提升了信息系统的维护成本，为基础环境的安全可靠埋下隐患。

发明内容

针对现有技术中存在的问题，本发明实施例的主要目的在于提供一种基础环境故障处理方法及装置，提高故障处置速度，降低系统维护成本。

为了实现上述目的，本发明实施例提供一种基础环境故障处理方法，所述方法包括：

获取告警信息，并对告警信息进行关键字分析，确定告警关键字；

根据预设的匹配规则及告警关键字，确定告警关键字对应的告警原因；

根据告警原因确定其对应的应急场景，并根据预设的应急处置规则及应急场景进行故障处理。

可选的，在本发明一实施例中，对告警信息进行关键字分析，确定告警关键字包括：对告警信息的字符串进行显示与分析，确定告警关键字。

可选的，在本发明一实施例中，根据预设的匹配规则及告警关键字，确定告警关键字对应的告警原因包括：

利用预设的匹配规则，对告警关键进行信息匹配处理，确定告警关键字对应的告警原因。

可选的，在本发明一实施例中，方法还包括：

根据告警原因进行故障定位，确定告警原因对应的故障位置；

根据告警原因及其对应的故障位置，确定告警原因对应的应急场景。

可选的，在本发明一实施例中，根据预设的应急处置规则及应急场景进行故障处理包括：

根据预设的应急处置规则，对应急场景进行信息匹配处理，确定应急场景对应的处置规则；

利用应急场景对应的处置规则进行故障处理，得到故障处理结果。

可选的，在本发明一实施例中，利用应急场景对应的处置规则进行故障处理，得到故障处理结果包括：

将应急场景对应的处置规则发送至用户端，并接收所述用户端反馈的处置确认结果；

根据处置确认结果与处置规则进行故障处理，得到故障处理结果。

可选的，在本发明一实施例中，方法还包括：

对故障处理结果进行验证处理，得到验证结果，并根据验证结果，确定基础环境故障修复结果。

本发明实施例还提供一种基础环境故障处理装置，装置包括：

告警信息模块，用于获取告警信息，并对告警信息进行关键字分析，确定告警关键字；

告警原因模块，用于根据预设的匹配规则及所述告警关键字，确定告警关键字对应的告警原因；

故障处理模块，用于根据告警原因确定其对应的应急场景，并根据预设的应急处置规则及应急场景进行故障处理。

可选的，在本发明一实施例中，告警信息模块还用于对告警信息的字符串进行显示与分析，确定告警关键字。

可选的，在本发明一实施例中，告警原因模块还用于利用预设的匹配规则，对告警关键进行信息匹配处理，确定告警关键字对应的告警原因。

可选的，在本发明一实施例中，装置还包括：

故障定位模块，用于根据告警原因进行故障定位，确定所述告警原因对应的故障位置；

应急场景模块，用于根据告警原因及其对应的故障位置，确定告警原因对应的应急场景。

可选的，在本发明一实施例中，故障处理模块包括：

处置规则单元，用于根据预设的应急处置规则，对应急场景进行信息匹配处理，确定应急场景对应的处置规则；

处理结果单元，用于利用应急场景对应的处置规则进行故障处理，得到故障处理结果。

可选的，在本发明一实施例中，处理结果单元包括：

处置确认子单元，用于将应急场景对应的处置规则发送至用户端，并接收用户端反馈的处置确认结果；

处理结果子单元，用于根据处置确认结果与处置规则进行故障处理，得到故障处理结果。

可选的，在本发明一实施例中，装置还包括：验证处理模块，用于对故障处理结果进行验证处理，得到验证结果，并根据验证结果，确定基础环境故障修复结果。

本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行所述程序时实现上述方法。

本发明还提供一种计算机可读存储介质，计算机可读存储介质存储有执行上述方法的计算机程序。

本发明还提供一种计算机程序产品，包括计算机程序/指令，计算机程序/指令被处理器执行时实现上述方法的步骤。

本发明通过对告警信息的分析处理，准确定位告警原因，由此实现对基础环境发生的告警进行故障定位，利用故障应急处置实现快速安全复位操作，缩短问题排查周期、准确定位故障，提高故障处置速度，降低系统维护成本，提升了基础平台的运行管理能力。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一种基础环境故障处理方法的流程图；

图2为本发明实施例中确定应急场景的流程图；

图3为本发明实施例中故障处理的流程图；

图4为本发明实施例中得到故障处理结果的流程图；

图5为本发明一具体实施例中告警分析的流程图；

图6为本发明一具体实施例中故障处理的流程图；

图7为本发明实施例一种基础环境故障处理装置的结构示意图；

图8为本发明中另一实施例中基础环境故障处理装置的结构示意图；

图9为本发明实施例中故障处理模块的结构示意图；

图10为本发明实施例中处理结果单元的结构示意图；

图11为本发明实施例中再一实施例中基础环境故障处理装置的结构示意图；

图12为本发明一实施例所提供的电子设备的结构示意图。

具体实施方式

本发明实施例提供一种基础环境故障处理方法及装置，可用于金融领域及其他领域，需要说明的是，本发明的基础环境故障处理方法及装置可用于金融领域，也可用于除金融领域之外的任意领域，本发明的。基础环境故障处理方法及装置应用领域不做限定。

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示为本发明实施例一种基础环境故障处理方法的流程图，本发明实施例提供的基础环境故障处理方法的执行主体包括但不限于计算机。本发明通过对告警信息的分析处理，准确定位告警原因，由此实现对基础环境发生的告警进行故障定位，利用故障应急处置实现快速安全复位操作，缩短问题排查周期、准确定位故障，提高故障处置速度，降低系统维护成本，提升了基础平台的运行管理能力。图中所示方法包括：

步骤S1，获取告警信息，并对告警信息进行关键字分析，确定告警关键字。

其中，告警信息可以通过用户端即前端，由人工进行输入。具体的，告警信息包括字符串。

作为本发明的一个实施例，对告警信息进行关键字分析，确定告警关键字包括：对告警信息的字符串进行显示与分析，确定告警关键字。

其中，对告警信息中字符串进行显示，由此可由用户端进行人工处置。此外，对告警信息中的字符串进行分析，确定告警关键字，具体的，例如字符串包括servername1，则分析得到的告警关键字包括服务器，若字符串包括data，则分析得到的告警关键字包括文件系统。

步骤S2，根据预设的匹配规则及告警关键字，确定告警关键字对应的告警原因。

作为本发明的一个实施例，根据预设的匹配规则及告警关键字，确定告警关键字对应的告警原因包括：利用预设的匹配规则，对告警关键进行信息匹配处理，确定告警关键字对应的告警原因。

其中，匹配规则中预先设置了告警关键字与其对应的告警原因，例如告警关键字包括文件系统及超载，则对应的告警原因为文件系统利用率过高，具体的，操作系统的根文件系统磁盘利用率达到90％，当文件系统利用率满可能导致操作系统异常，需要人为删除一些日志或文件后恢复，如果工程师误删除或清理日志不及时会影响操作系统可用性。

步骤S3，根据告警原因确定其对应的应急场景，并根据预设的应急处置规则及应急场景进行故障处理。

作为本发明的一个实施例，如图2所示，方法还包括：

步骤S21，根据告警原因进行故障定位，确定告警原因对应的故障位置；

步骤S22，根据告警原因及其对应的故障位置，确定告警原因对应的应急场景。

其中，利用告警原因进行故障定位，即确定出现故障的位置。具体的，例如告警原因为文件系统利用率过高，则对应的故障位置为文件系统。

进一步的，在确定故障位置后，根据故障位置及告警原因确定应急场景。具体的，应急场景包括详细故障信息，例如应急场景为文件系统出现文件超载故障。

作为本发明的一个实施例，如图3所示，根据预设的应急处置规则及应急场景进行故障处理包括：

步骤S31，根据预设的应急处置规则，对应急场景进行信息匹配处理，确定应急场景对应的处置规则；

步骤S32，利用应急场景对应的处置规则进行故障处理，得到故障处理结果。

其中，应急处置规则包括对应于不同应急场景的处置方式，具体的，例如应急场景为文件系统出现文件超载故障，则在应急处置规则中进行匹配查询，确定其对应的处置规则为清理文件系统中无用数据。

在本实施例中，如图4所示，利用应急场景对应的处置规则进行故障处理，得到故障处理结果包括：

步骤S41，将应急场景对应的处置规则发送至用户端，并接收用户端反馈的处置确认结果；

步骤S42，根据处置确认结果与处置规则进行故障处理，得到故障处理结果。

其中，在利用处置规则进行故障处理之前，可以先将处置规则发送至用户端进行人工确认，若人工确认此处置规则无误，则通过用户端发送处置确认结果，其中处置确认结果为确认无误。若处置确认结果为有误，则停止故障处理。

进一步的，若处置确认结果为确认无误，则利用处置规则对故障进行处理，并得到相应的处理结果。

进一步的，若故障处理过程没有报错，则得到的故障处理结果为处理完成；若处理过程中出现错误，则得到的故障处理结果为处理未完成。

作为本发明的一个实施例，方法还包括：对故障处理结果进行验证处理，得到验证结果，并根据验证结果，确定基础环境故障修复结果。

其中，若故障处理结果为处理完成，则对故障位置进行故障验证处理，判断该故障是否被修复，并得到验证结果。若故障被修复，则验证结果为故障完成修复，若故障依然存在，则验证结果为故障未修复。

在本发明一具体实施例中，为保障基础环境的运行稳定性，针对基础环境的故障告警信息进行智能分析和判断，编写故障应急处置模块，丰富故障场景和故障处置措施，将复杂的软件维护管理命令封装于应急处理模块中，最终达到故障信息系统的基础环境告警问题实现一键式安全复位。解决因告警信息对软件熟悉度的依赖，人为重复排查和排查周期慢、排查思路错误等问题。本发明提供一种解决基础环境故障应急处置的方案主要针对基础环境的告警问题，实现一键式安全复位，维护人员可通过“智能告警分析”模块，定位告警原因，通过告警信息的关键字等适配所属应急场景，根据该告警适配的应急场景进行一键式安全处理，处理后进行问题解决验证。

如图6所示的故障处理过程，本发明包括告警分析阶段、应急处置阶段、验证阶段。告警分析阶段如图5所示，详细说明如下：

告警分析阶段，前端界面输入告警信息，后端程序通过告警关键字信息判断告警原因，定位问题。

告警解释：告警信息为在设备上显示告警信息字符串；告警含义指明该告警代表什么意义。

具体的，举例1：服务器servername1文件系统/data超80％阈值。其中，告警信息分析：根据告警格式自动截取主要信息，例如对“举例1”关键字截取2个【servername1】和【/data】，根据关键字能精准匹配到主要告警信息。

进一步的，通过识别主要关键字设置应急场景，然后根据不同应急场景，提供不同的应急处置方案。

其中，应急处置过程中，将告警分析的结果进行提示，告警分析的结果是经过进一步检查即最终定位的问题，是否启动应急处置是可选择项，如需处置，将启动故障应急流程。

具体的，仍以“举例1”为例，文件系统利用率高，确需要应急处置的情况下，根据应急场景设定针对文件系统利用率高的情况，需要清理无用的业务操作等日志信息。

通过以上两个阶段，故障已经分析并处置完成，当前需要进一步确认故障是否恢复，启动验证流程。

告警信息即可以通过告警识别，亦可以通过服务及组件运行状态进行佐证，例如服务器servername1文件系统/data超80％是综合监控告警信息，亦可以通过后台通过命令df-h|grep/data进行查看。

如图7所示为本发明实施例一种基础环境故障处理装置的结构示意图，图中所示装置包括：

告警信息模块10，用于获取告警信息，并对告警信息进行关键字分析，确定告警关键字；

告警原因模块20，用于根据预设的匹配规则及所述告警关键字，确定告警关键字对应的告警原因；

故障处理模块30，用于根据告警原因确定其对应的应急场景，并根据预设的应急处置规则及应急场景进行故障处理。

作为本发明的一个实施例，告警信息模块还用于对告警信息的字符串进行显示与分析，确定告警关键字。

作为本发明的一个实施例，告警原因模块还用于利用预设的匹配规则，对告警关键进行信息匹配处理，确定告警关键字对应的告警原因。

作为本发明的一个实施例，如图8所示，装置还包括：

故障定位模块40，用于根据告警原因进行故障定位，确定告警原因对应的故障位置；

应急场景模块50，用于根据告警原因及其对应的故障位置，确定告警原因对应的应急场景。

作为本发明的一个实施例，如图9所示，故障处理模块30包括：

处置规则单元31，用于根据预设的应急处置规则，对应急场景进行信息匹配处理，确定应急场景对应的处置规则；

处理结果单元32，用于利用应急场景对应的处置规则进行故障处理，得到故障处理结果。

在本实施例中，如图10所示，处理结果单元32包括：

处置确认子单元321，用于将应急场景对应的处置规则发送至用户端，并接收用户端反馈的处置确认结果；

处理结果子单元322，用于根据处置确认结果与处置规则进行故障处理，得到故障处理结果。

在本实施例中，如图11所示，装置还包括：验证处理模块60，用于对故障处理结果进行验证处理，得到验证结果，并根据验证结果，确定基础环境故障修复结果。

基于与上述一种基础环境故障处理方法相同的申请构思，本发明还提供了上述一种基础环境故障处理装置。由于该一种基础环境故障处理装置解决问题的原理与一种基础环境故障处理方法相似，因此该一种基础环境故障处理装置的实施可以参见一种基础环境故障处理方法的实施，重复之处不再赘述。

本发明通过对告警信息的分析处理，准确定位告警原因，由此实现对基础环境发生的告警进行故障定位，利用故障应急处置实现快速安全复位操作，缩短问题排查周期、准确定位故障，提高故障处置速度，降低系统维护成本，提升了基础平台的运行管理能力。

本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行所述程序时实现上述方法。

本发明还提供一种计算机程序产品，包括计算机程序/指令，计算机程序/指令被处理器执行时实现上述方法的步骤。

本发明还提供一种计算机可读存储介质，计算机可读存储介质存储有执行上述方法的计算机程序。

如图12所示，该电子设备600还可以包括：通信模块110、输入单元120、音频处理器130、显示器160、电源170。值得注意的是，电子设备600也并不是必须要包括图12中所示的所有部件；此外，电子设备600还可以包括图12中没有示出的部件，可以参考现有技术。

如图12所示，中央处理器100有时也称为控制器或操作控件，可以包括微处理器或其他处理器装置和/或逻辑装置，该中央处理器100接收输入并控制电子设备600的各个部件的操作。

其中，存储器140，例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息，此外还可存储执行有关信息的程序。并且中央处理器100可执行该存储器140存储的该程序，以实现信息存储或处理等。

输入单元120向中央处理器100提供输入。该输入单元120例如为按键或触摸输入装置。电源170用于向电子设备600提供电力。显示器160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器，但并不限于此。

该存储器140可以是固态存储器，例如，只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器，其即使在断电时也保存信息，可被选择性地擦除且设有更多数据，该存储器的示例有时被称为EPROM等。存储器140还可以是某种其它类型的装置。存储器140包括缓冲存储器141(有时被称为缓冲器)。存储器140可以包括应用/功能存储部142，该应用/功能存储部142用于存储应用程序和功能程序或用于通过中央处理器100执行电子设备600的操作的流程。

存储器140还可以包括数据存储部143，该数据存储部143用于存储数据，例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器140的驱动程序存储部144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。

通信模块110即为经由天线111发送和接收信号的发送机/接收机110。通信模块(发送机/接收机)110耦合到中央处理器100，以提供输入信号和接收输出信号，这可以和常规移动通信终端的情况相同。

基于不同的通信技术，在同一电子设备中，可以设置有多个通信模块110，如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)110还经由音频处理器130耦合到扬声器131和麦克风132，以经由扬声器131提供音频输出，并接收来自麦克风132的音频输入，从而实现通常的电信功能。音频处理器130可以包括任何合适的缓冲器、解码器、放大器等。另外，音频处理器130还耦合到中央处理器100，从而使得可以通过麦克风132能够在本机上录音，且使得可以通过扬声器131来播放本机上存储的声音。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

本发明中应用了具体实施例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基础环境故障处理方法，其特征在于，所述方法包括：

获取告警信息，并对所述告警信息进行关键字分析，确定告警关键字；

根据预设的匹配规则及所述告警关键字，确定所述告警关键字对应的告警原因；

根据所述告警原因确定其对应的应急场景，并根据预设的应急处置规则及所述应急场景进行故障处理。

2.根据权利要求1所述的方法，其特征在于，所述对所述告警信息进行关键字分析，确定告警关键字包括：对所述告警信息的字符串进行显示与分析，确定告警关键字。

3.根据权利要求1所述的方法，其特征在于，所述根据预设的匹配规则及所述告警关键字，确定所述告警关键字对应的告警原因包括：

利用预设的匹配规则，对所述告警关键进行信息匹配处理，确定所述告警关键字对应的告警原因。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

根据所述告警原因进行故障定位，确定所述告警原因对应的故障位置；

根据所述告警原因及其对应的故障位置，确定所述告警原因对应的应急场景。

5.根据权利要求1所述的方法，其特征在于，所述根据预设的应急处置规则及所述应急场景进行故障处理包括：

根据预设的应急处置规则，对所述应急场景进行信息匹配处理，确定所述应急场景对应的处置规则；

利用所述应急场景对应的处置规则进行故障处理，得到故障处理结果。

6.根据权利要求5所述的方法，其特征在于，所述利用所述应急场景对应的处置规则进行故障处理，得到故障处理结果包括：

将所述应急场景对应的处置规则发送至用户端，并接收所述用户端反馈的处置确认结果；

根据所述处置确认结果与所述处置规则进行故障处理，得到所述故障处理结果。

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

对所述故障处理结果进行验证处理，得到验证结果，并根据所述验证结果，确定基础环境故障修复结果。

8.一种基础环境故障处理装置，其特征在于，所述装置包括：

告警信息模块，用于获取告警信息，并对所述告警信息进行关键字分析，确定告警关键字；

告警原因模块，用于根据预设的匹配规则及所述告警关键字，确定所述告警关键字对应的告警原因；

故障处理模块，用于根据所述告警原因确定其对应的应急场景，并根据预设的应急处置规则及所述应急场景进行故障处理。

9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7任一项所述方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至7任一项所述方法的计算机程序。

Images