CN106301823B - 一种关键组件的故障告警方法、装置及大数据管理系统 - Google Patents

Abstract

本发明公开了一种关键组件的故障告警方法、装置及大数据管理系统，其方法包括：当大数据管理系统关键组件的主节点故障时，根据主节点和备节点切换后的状态信息生成第一告警信息；根据告警信息与故障解决方案的对应关系，获取与第一告警信息对应的第一故障解决方案；将第一告警信息和第一故障解决方案输出。本发明通过当与关键组件高可用性相关的主备节点发生切换后生成对应的告警信息，获取与该告警信息相对应的解决方案，并与告警信息一同输出。采用该方法可及时处理故障的问题，并能够及时发现并处理集群问题，保证大数据管理系统的高可用性和可靠性。

Description

一种关键组件的故障告警方法、装置及大数据管理系统

技术领域

本发明涉及大数据管理系统领域，尤其涉及一种关键组件的故障告警方法、装置及大数据管理系统。

背景技术

随着网络和信息技术的不断普及，人类产生的数据量正在呈指数级增长。大约每两年翻一番，根据监测，这个速度在2020年之前会继续保持下去，这意味着人类在最近两年产生的数据量相当于之前产生的全部数据量。资料显示，2011年，全球数据规模为1.8ZB，可以填满575亿个32GB的iPad，这些iPad可以在中国修建两座长城。到2020年，全球数据将达到40ZB，如果把它们全部存入蓝光光盘，这些光盘和424艘尼米兹号航母重量相当。淘宝网站每天有超过数千万笔交易，单日数据产生量超过50TB(1TB等于1000GB)，存储量40PB(1PB等于1000TB)。百度公司目前数据总量接近1000PB，存储网页数量接近1万亿页，每天大约要处理60亿次搜索请求，几十PB数据。

大量新数据源的出现则导致了非结构化、半结构化数据爆发式的增长，信息数据的单位由TB-PB-EB-ZB的级别。如何管理和使用这些数据，已成为一个新的领域，大数据的概念应运而生。大数据有4V特点：数据量(Volume)大、数据类别(Variety)多、数据处理速度(Velocity)快、数据真实性(Veracity)高。其中，

1、数据量大，现在大型数据集，数据量一般在10TB规模左右，目前一般认为PB级以上数据看成是大数据。

2、数据类别多，数据种类和格式日渐丰富，包括文档、视频、图片、音频、数据库数据等

3、数据处理速度快，在数据量非常庞大的情况下，也能够做到数据的实时处理。要求数据处理和I/O速度很快。

4、数据真实性。数据是完整的和可信任，并能自信地用它来做出关键的决定的能力的组织。

大数据让我们以一种前所未有的方式，通过对海量数据进行分析，获得有巨大价值的产品和服务，或深刻的洞见，最终形成变革之力。很多行业都会有大数据需求，譬如电信行业，互联网行业等等容易产生大量数据的行业，很多传统行业，譬如医药，教育，采矿，电力等等任何行业，都会有大数据需求。不同行业的数据有不同的自身特点，都需要结合自身的行业知识才能把大数据转换为价值。

分析大数据的框架、产品、工具和系统纷纷进入用户的视线，为保证关键组件的高可用性，目前已有的大数据管理系统上报的关键组件的告警方法较少，虽对告警进行了级别分类，但上报的一些告警并没有给出解决方案，即看到告警的人员不清楚如何处理。

发明内容

为了解决上述技术问题，本发明提供了一种关键组件的故障告警方法、装置及大数据管理系统，解决了关键组件告警无法及时处理的问题。

依据本发明的一个方面，提供了一种关键组件的故障告警方法，应用于大数据管理系统，其方法包括：

当大数据管理系统关键组件的主节点故障时，根据主节点和备节点切换后的状态信息生成第一告警信息；

根据告警信息与故障解决方案的对应关系，获取与第一告警信息对应的第一故障解决方案；

将第一告警信息和第一故障解决方案输出。

其中，根据主节点和备节点切换后的状态信息生成第一告警信息的步骤包括：

主节点和备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息；

主节点和备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息；其中，第二级告警信息的级别高于第一级告警信息的级别。

其中，根据告警信息与故障解决方案的对应关系，获取与第一告警信息对应的第一故障解决方案的步骤包括：

当第一告警信息为第一级告警信息时，获取自动恢复故障的故障解决方案；

当第一告警信息为第二级告警信息时，获取需手动恢复故障的故障解决方案。

其中，主节点和备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息的步骤包括：

主节点由激活状态切换为备用状态，且备节点由备用状态切换为激活状态时，生成第一级第一子告警信息；

主节点宕机或停运，且备节点由备用状态切换为激活状态时，生成第一级第二子告警信息。

其中，主节点和备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息的步骤包括：

主节点仍为激活状态，且备节点由备用状态切换为激活状态时，生成第二级第一子告警信息；

主节点由激活状态切换为备用状态，且备节点仍为备用状态时，生成第二级第二子告警信息；

主节点宕机或停运，且备节点仍为备用状态时，生成第二级第三子告警信息。

其中，根据告警信息与故障解决方案的对应关系，获取与第一告警信息对应的第一故障解决方案的步骤之后，还包括：

根据第一告警信息和第一故障解决方案生成一告警日志，并将告警日志保存至本地。

其中，将第一告警信息和第一故障解决方案输出的步骤包括：

将第一告警信息和第一故障解决方案发送至与关键组件所在的服务器预先绑定的移动终端；和/或

将第一告警信息和第一故障解决方案输出至大数据管理系统的显示装置进行显示。

依据本发明的再一个方面，还提供了一种关键组件的故障告警装置，应用于大数据管理系统，包括：

生成模块，用于当大数据管理系统关键组件的主节点故障时，根据主节点和备节点切换后的状态信息生成第一告警信息；

获取模块，用于根据告警信息与故障解决方案的对应关系，获取与第一告警信息对应的第一故障解决方案；

输出模块，用于将第一告警信息和第一故障解决方案输出。

其中，生成模块包括：

第一生成单元，用于当主节点和备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息；

第二生成单元，用于当主节点和备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息；其中，第二级告警信息的级别高于第一级告警信息的级别。

其中，获取模块包括：

第一获取单元，用于当第一告警信息为第一级告警信息时，获取自动恢复故障的故障解决方案；

第二获取单元，用于当第一告警信息为第二级告警信息时，获取需手动恢复故障的故障解决方案。

其中，第一生成单元包括：

第一生成子单元，用于当主节点由激活状态切换为备用状态，且备节点由备用状态切换为激活状态时，生成第一级第一子告警信息；

第二生成子单元，用于当主节点宕机或停运，且备节点由备用状态切换为激活状态时，生成第一级第二子告警信息。

其中，第二生成单元包括：

第三生成子单元，用于当主节点仍为激活状态，且备节点由备用状态切换为激活状态时，生成第二级第一子告警信息；

第四生成子单元，用于当主节点由激活状态切换为备用状态，且备节点仍为备用状态时，生成第二级第二子告警信息；

第五生成子单元，用于当主节点宕机或停运，且备节点仍为备用状态时，生成第二级第三子告警信息。

其中，关键组件的故障告警装置还包括：

存储模块，用于根据第一告警信息和第一故障解决方案生成一告警日志，并将告警日志保存至本地。

其中，输出模块包括：

第一输出单元，用于将第一告警信息和第一故障解决方案发送至与关键组件所在的服务器预先绑定的移动终端；和/或

第二输出单元，用于将第一告警信息和第一故障解决方案输出至大数据管理系统的显示装置进行显示。

依据本发明的再一个方面，还提供了一种大数据管理系统，包括如上所述的关键组件的故障告警装置。

本发明的实施例的有益效果是：一种关键组件的故障告警方法、装置及大数据管理系统，通过当与关键组件高可用性相关的主备节点发生切换后生成对应的告警信息，获取与该告警信息相对应的解决方案，并与告警信息一同输出。采用该方法可及时处理故障的问题，并能够及时发现并处理集群问题，保证大数据管理系统的高可用性和可靠性。

附图说明

图1表示本发明的关键组件的故障告警方法的流程示意图；

图2表示本发明的关键组件的故障告警装置的模块示意图。

其中图中：101、生成模块，201、获取模块，301、输出模块。

具体实施方式

下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。

实施例

大数据管理系统的关键组件YARN在对外提供服务的过程中，要保证其高可用性，一般情况下，YARN的单点故障仍采用主备节点切换的方式完成，但备节点不会同步主节点的信息，而是在切换后从共享存储系统读取所需信息。其中，YARN主节点包括：资源管理器ResourceManager和配置文件yarn-site.xml，ResourceManager负责整个系统的资源管理和调度，内部维护了各个应用程序的ApplictionMaster信息，各个节点的NodeManager信息，资源使用信息等，YARN的单点故障指的是ResourceManager单点问题。为了保证在发生单点故障时，保证YARN的高可用性，如图1所示，本发明的实施例提供了一种关键组件的告警方法，具体包括以下步骤：

步骤10：当大数据管理系统关键组件的主节点故障时，根据主节点和备节点切换后的状态信息生成第一告警信息。

这里，当大数据管理系统中的关键组件YARN发生单点故障时，主节点和备节点会自动发生服务状态切换，这时会根据主备节点切换后的状态信息生成第一告警信息。其中，为了详细地说明故障情况，告警信息中包括：状态切换发生的时间，故障名称，告警级别，告警码，YARN所在服务器的IP，当前服务名称中的一种或几种信息。其中，告警码对应于告警级别和故障名称，告警码不同对应的告警级别和故障名称不同。

步骤20：根据告警信息与故障解决方案的对应关系，获取与第一告警信息对应的第一故障解决方案。

由于不同的故障对应的解决方案不同，不同的告警信息代表着不同的故障，因此在告警信息与故障解决方案之间存在有一定的对应关系，即不同的告警码对应的故障解决方案不同。根据告警信息与故障解决方案之间的对应关系，获取与第一告警信息相对应的第一故障解决方案。

步骤30：将第一告警信息和第一故障解决方案输出。

这样可及时发现故障，并可根据故障解决方案对YARN故障进行消除，以保证YARN的高可用性。

进一步地，由于故障不同对应的告警信息不同，步骤10可具体分为以下几种场景：

场景一：主节点和备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息。

其中，主节点的初始状态为active状态，备节点的初始状态为standby状态。这里指的是YARN主节点发生故障后，主节点和备节点均发生了状态切换，且切换后仍然仅有一个节点为激活状态，即主备节点状态切换后，有一个为active状态，YARN仍能正常对外提供服务，这种情况下生成第一级告警信息。

场景二：主节点和备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息。

这里指的是YARN主节点发生故障后，主节点和备节点均发生了状态切换，但切换后节点均为激活状态或均不是激活状态，即主备节点切换后，有一个以上的节点为active状态，或没有处于active的节点，这种情况下，YARN不能正常对外提供服务。这样，第二级告警信息的告警级别要高于第一级告警信息的级别；其中，。

其中，对应于步骤10的几种场景，步骤20具体包括以下场景。

场景三(对应于场景一)：当第一告警信息为第一级告警信息时，获取自动恢复故障的故障解决方案。

这里是指当第一告警信息为第一级告警信息时，即主备节点切换状态后YARN仍能正常向外提供服务，也就是说这种情况下故障时可自动恢复的。

场景四(对应于场景二)：当第一告警信息为第二级告警信息时，获取需手动恢复故障的故障解决方案。

这里是指当第一告警信息为第二级告警信息时，即主备节点切换状态后YARN不能向外提供服务，也就是说这种情况下故障不能够自动恢复，需要运维人员手动对其进行故障修复，这就需要获取与第一告警信息相对应的第一故障解决方案，以使运维人员能够根据第一故障解决方案的提示对YARN进行修复，以使其能够恢复正常服务。

其中，对应于场景一具体可包括以下几种情况：

情况一：主节点由激活状态切换为备用状态，且备节点由备用状态切换为激活状态时，生成第一级第一子告警信息。

这种情况下，YARN的主备节点正常切换，切换一次上报一次告警信息，告警级别为轻微，故障解决方案的具体内容可具体根据告警码区别提供，例如此种情况下，告警码编号为001，表示YARN可以正常运行，告警级别轻微，不需要立即处理。即主备节点切换成功后，即YARN服务对外仍是只有一个主节点，一个备节点，该故障能自动恢复。

情况二：主节点宕机或停运，且备节点由备用状态切换为激活状态时，生成第一级第二子告警信息。

这种情况下，主节点的resourcemanager进程退出或宕机，主节点状态为已经停止，此时，备节点自动切换为主节点，上报一次告警给大数据管理系统，告警级别是轻微，例如此种情况下，告警码编号为002，表示YARN可以正常运行，告警级别轻微，不需要立即处理。主备节点切换之后，YARN对外只有1个主节点，这种情况YARN对外可以正常提供服务，该条故障也能自动恢复。

其中，对应于场景一具体可包括以下几种情况：

情况三：主节点仍为激活状态，且备节点由备用状态切换为激活状态时，生成第二级第一子告警信息。

这种情况下，YARN的主节点未切换成功，备节点切换成功，导致存在两个主节点，即主备节点均为active状态，这种情况对外不可以正常提供服务，告警级别是严重，且该故障不能恢复，例如此种情况下告警码为003，表示YARN不能正常运行，需要维护人员按照解决方案的步骤来处理。维护人员按照故障解决方案来处理，只有在对外只有1个主节点，1个备节点时，该故障才能恢复。具体解决方案可参照：执行一个脚本b.sh，该脚本强制切换其中一个节点的状态为备。

情况四：主节点由激活状态切换为备用状态，且备节点仍为备用状态时，生成第二级第二子告警信息。

这种情况下，YARN的主节点切换成功，备节点未切换成功，导致存在两个备节点，即主备节点均为standby状态，这种情况对外不可以正常提供服务，告警级别是严重，且该故障不能恢复，例如此种情况下告警码为004，表示YARN不能正常运行，需要维护人员按照解决方案的步骤来处理。维护人员按照故障解决方案来处理，只有在对外只有1个主节点，1个备节点时，该故障才能恢复。具体故障解决方案可参照：执行一个脚本a.sh，该脚本强制切换一个节点的状态为主。

情况五：主节点宕机或停运，且备节点仍为备用状态时，生成第二级第三子告警信息。

这种情况下，主节点的状态为已经停止，备节点未切换成功，即YARN服务对外只有1个备节点，这时告警级别是严重，且该故障不能自动恢复，例如此种情况下告警码为003，表示YARN不能正常运行，需要维护人员按照解决方案的步骤来处理。维护人员按照故障解决方案来处理，只有对外只有1个主节点，1个备节点时，该故障才能恢复。具体故障解决方案可参照以下：先检查之前的主节点的防火墙是否开启，如开启需执行命令关掉防火墙；再检查zookeeper服务是否运行，如发现zookeeper服务运行异常,先恢复该服务的正常运行；在已停止的节点，执行启动resourcemanager的脚本启动该节点。

其中，由于YARN是一个通用资源管理系统，它上面可能运行短作业或长作业，比如各类长时间运行的服务(比如Storm，thirft server等)，如果每次ResourceManager切换均会导致所有正在运行的任务和作业重算或重启，也就是说YARN主节点上已经运行的作业会在备节点上重新跑。在YARN的配置文件yarn-site.xml中设置有最大切换次数，如果切换次数超过YARN的配置文件yarn-site.xml中的参数设置的次数，虽然切换成功，但对运行中的作业的影响较大，整个作业需要在客户端再次提交才能运行。如果大数据管理系统中安装了spark这个组件，需要运行在Yarn组件之上，切换两次之后将导致spark服务重启。为了避免这个问题，在步骤20之后，还包括：

根据第一告警信息和第一故障解决方案生成一告警日志，并将告警日志保存至本地。

这里，告警日志中记录有每次主备切换后生成的告警信息，即在告警日志中记录有每条告警信息的主备节点切换时间、当前服务名、YARN所在服务器IP、告警码和故障解决方案等信息。生成并保存告警日志便于运维人员全面掌握YARN的每条告警信息，可宏观分析YARN故障的内在原因，便于及时发现YARN所存在的隐性问题，并针对隐性问题得到解决方案，以防止YARN多次故障，而引起的多次切换问题。

综上，为了使运维人员方便得到告警信息或告警日志，步骤30具体有以下两种实现方式。

方式一：将第一告警信息和第一故障解决方案发送至与关键组件所在的服务器预先绑定的移动终端。

具体地，可预先绑定YARN所在服务器与对应运维人员的手机的对应关系，当YARN发生故障时，会将生成的告警信息发送至对应的运维人员的手机上，例如通过短信方式下发。

方式二：将第一告警信息和第一故障解决方案输出至大数据管理系统的显示装置进行显示。

具体地，将告警信息和对应的故障解决方案输出至系统的故障显示装置进行显示，可方便运维人员通过查看提示对故障进行恢复。

值得指出的是方式一与方式二的实现并不矛盾，必要时可采用两种方式进行输出。

本发明的实施例通过当与关键组件高可用性相关的主备节点发生切换后生成对应的告警信息，获取与该告警信息相对应的解决方案，并与告警信息一同输出。采用该方法可及时处理故障的问题，并能够及时发现并处理集群问题，保证大数据管理系统的高可用性和可靠性。

如图2所示，依据本发明实施例的再一个方面，还提供了一种关键组件的故障告警装置，应用于大数据管理系统，包括：

生成模块101，用于当大数据管理系统关键组件的主节点故障时，根据主节点和备节点切换后的状态信息生成第一告警信息；

获取模块201，用于根据告警信息与故障解决方案的对应关系，获取与第一告警信息对应的第一故障解决方案；

输出模块301，用于将第一告警信息和第一故障解决方案输出。

其中，生成模块101包括：

第一生成单元，用于当主节点和备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息；

第二生成单元，用于当主节点和备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息；其中，第二级告警信息的级别高于第一级告警信息的级别。

其中，获取模块201包括：

第一获取单元，用于当第一告警信息为第一级告警信息时，获取自动恢复故障的故障解决方案；

第二获取单元，用于当第一告警信息为第二级告警信息时，获取需手动恢复故障的故障解决方案。

其中，第一生成单元包括：

第一生成子单元，用于当主节点由激活状态切换为备用状态，且备节点由备用状态切换为激活状态时，生成第一级第一子告警信息；

第二生成子单元，用于当主节点宕机或停运，且备节点由备用状态切换为激活状态时，生成第一级第二子告警信息。

其中，第二生成单元包括：

第三生成子单元，用于当主节点仍为激活状态，且备节点由备用状态切换为激活状态时，生成第二级第一子告警信息；

第四生成子单元，用于当主节点由激活状态切换为备用状态，且备节点仍为备用状态时，生成第二级第二子告警信息；

第五生成子单元，用于当主节点宕机或停运，且备节点仍为备用状态时，生成第二级第三子告警信息。

其中，关键组件的故障告警装置还包括：

存储模块，用于根据第一告警信息和第一故障解决方案生成一告警日志，并将告警日志保存至本地。

其中，输出模块301包括：

第一输出单元，用于将第一告警信息和第一故障解决方案发送至与关键组件所在的服务器预先绑定的移动终端；和/或

第二输出单元，用于将第一告警信息和第一故障解决方案输出至大数据管理系统的显示装置进行显示。

需要说明的是，该装置是与上述关键组件告警方法对应的系统，上述方法实施例中所有实现方式均适用于该装置的实施例中，也能达到相同的技术效果。

依据本发明的再一个方面，还提供了一种大数据管理系统，包括如上所述的关键组件的故障告警装置。

以上所述的是本发明的优选实施方式，应当指出对于本技术领域的普通人员来说，在不脱离本发明所述的原理前提下还可以作出若干改进和润饰，这些改进和润饰也在本发明的保护范围内。

Claims (11)

1.一种关键组件的故障告警方法，应用于大数据管理系统，其特征在于，包括：

当大数据管理系统关键组件的主节点故障时，根据主节点和备节点切换后的状态信息生成第一告警信息；

根据告警信息与故障解决方案的对应关系，获取与所述第一告警信息对应的第一故障解决方案；

将所述第一告警信息和所述第一故障解决方案输出；

根据主节点和备节点切换后的状态信息生成第一告警信息的步骤包括：

所述主节点和所述备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息；

所述主节点和所述备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息；其中，所述第二级告警信息的级别高于所述第一级告警信息的级别；

所述主节点和所述备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息的步骤包括：

所述主节点仍为激活状态，且所述备节点由备用状态切换为激活状态时，生成第二级第一子告警信息；

所述主节点由激活状态切换为备用状态，且所述备节点仍为备用状态时，生成第二级第二子告警信息；

所述主节点宕机或停运，且所述备节点仍为备用状态时，生成第二级第三子告警信息。

2.根据权利要求1所述的关键组件的故障告警方法，其特征在于，根据告警信息与故障解决方案的对应关系，获取与所述第一告警信息对应的第一故障解决方案的步骤包括：

当所述第一告警信息为第一级告警信息时，获取自动恢复故障的故障解决方案；

当所述第一告警信息为第二级告警信息时，获取需手动恢复故障的故障解决方案。

3.根据权利要求1所述的关键组件的故障告警方法，其特征在于，所述主节点和所述备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息的步骤包括：

所述主节点由激活状态切换为备用状态，且所述备节点由备用状态切换为激活状态时，生成第一级第一子告警信息；

所述主节点宕机或停运，且所述备节点由备用状态切换为激活状态时，生成第一级第二子告警信息。

4.根据权利要求1或2所述的关键组件的故障告警方法，其特征在于，根据告警信息与故障解决方案的对应关系，获取与所述第一告警信息对应的第一故障解决方案的步骤之后，还包括：

根据所述第一告警信息和所述第一故障解决方案生成一告警日志，并将所述告警日志保存至本地。

5.根据权利要求1或2所述的关键组件的故障告警方法，其特征在于，将所述第一告警信息和所述第一故障解决方案输出的步骤包括：

将所述第一告警信息和所述第一故障解决方案发送至与所述关键组件所在的服务器预先绑定的移动终端；和/或

将所述第一告警信息和所述第一故障解决方案输出至所述大数据管理系统的显示装置进行显示。

6.一种关键组件的故障告警装置，应用于大数据管理系统，其特征在于，包括：

生成模块，用于当大数据管理系统关键组件的主节点故障时，根据主节点和备节点切换后的状态信息生成第一告警信息；

获取模块，用于根据告警信息与故障解决方案的对应关系，获取与所述第一告警信息对应的第一故障解决方案；

输出模块，用于将所述第一告警信息和所述第一故障解决方案输出；

所述生成模块包括：

第一生成单元，用于当所述主节点和所述备节点切换后的状态信息中仅有一个为激活状态时，生成第一级告警信息；

第二生成单元，用于当所述主节点和所述备节点切换后的状态信息均为激活状态或者均不是激活状态时，生成第二级告警信息；其中，所述第二级告警信息的级别高于所述第一级告警信息的级别；

所述第二生成单元包括：

第三生成子单元，用于当所述主节点仍为激活状态，且所述备节点由备用状态切换为激活状态时，生成第二级第一子告警信息；

第四生成子单元，用于当所述主节点由激活状态切换为备用状态，且所述备节点仍为备用状态时，生成第二级第二子告警信息；

第五生成子单元，用于当所述主节点宕机或停运，且所述备节点仍为备用状态时，生成第二级第三子告警信息。

7.根据权利要求6所述的关键组件的故障告警装置，其特征在于，所述获取模块包括：

第一获取单元，用于当所述第一告警信息为第一级告警信息时，获取自动恢复故障的故障解决方案；

第二获取单元，用于当所述第一告警信息为第二级告警信息时，获取需手动恢复故障的故障解决方案。

8.根据权利要求6所述的关键组件的故障告警装置，其特征在于，所述第一生成单元包括：

第一生成子单元，用于当所述主节点由激活状态切换为备用状态，且所述备节点由备用状态切换为激活状态时，生成第一级第一子告警信息；

第二生成子单元，用于当所述主节点宕机或停运，且所述备节点由备用状态切换为激活状态时，生成第一级第二子告警信息。

9.根据权利要求6或7所述的关键组件的故障告警装置，其特征在于，还包括：

存储模块，用于根据所述第一告警信息和所述第一故障解决方案生成一告警日志，并将所述告警日志保存至本地。

10.根据权利要求6或7所述的关键组件的故障告警装置，其特征在于，所述输出模块包括：

第一输出单元，用于将所述第一告警信息和所述第一故障解决方案发送至与所述关键组件所在的服务器预先绑定的移动终端；和/或

第二输出单元，用于将所述第一告警信息和所述第一故障解决方案输出至所述大数据管理系统的显示装置进行显示。

11.一种大数据管理系统，其特征在于，包括如权利要求6～10任一项所述的关键组件的故障告警装置。

Images