CN107678907B - 数据库业务逻辑监控方法、系统、及存储介质 - Google Patents
数据库业务逻辑监控方法、系统、及存储介质 Download PDFInfo
- Publication number
- CN107678907B CN107678907B CN201710367166.0A CN201710367166A CN107678907B CN 107678907 B CN107678907 B CN 107678907B CN 201710367166 A CN201710367166 A CN 201710367166A CN 107678907 B CN107678907 B CN 107678907B
- Authority
- CN
- China
- Prior art keywords
- monitoring
- alarm
- database
- service logic
- item
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据库业务逻辑监控方法,该方法可实现:在设定的时间内,对监控任务表中写入的监控项进行业务逻辑监控,并将业务逻辑监控结果写入监控数据表,并每隔一定的时间扫描该监控数据表,获取异常数据,当该异常数据与预设的告警条件相匹配时,则根据该异常数据对应监控项的序列号ID,获取告警处理所需的配置信息并进行告警处理。本发明还公开了一种数据库业务逻辑监控系统,以及一种存储介质。本发明可以自动监控数据库中产生的异常数据,并进行告警处理,解决了现有技术中难以及时发现数据库产生的数据异常和及时告警的技术问题,提升了数据库的稳定性。
Description
技术领域
本发明涉及数据库监控技术领域,尤其涉及一种数据库业务逻辑监控方法、系统、及存储介质。
背景技术
对一个实时数据库系统而言,进行系统运行状态的监控是非常有必要的,建立一套数据库实时自动的监控系统,不但能减轻运维人员的工作压力,提高管理水平,同时也可增强数据库的稳定性。
现阶段,对数据库的监控都是对于数据库运行性能的监控,而对于数据库业务逻辑的监控,各大数据库厂商都是通过向数据库运维人员提供相关的性能管理视图、以及故障排查命令,由运维人员管理、检查数据库业务逻辑问题,但随着数据库中数据量的不断增多,运维人员在管理、检查数据库业务逻辑问题时,往往难以及时发现数据库产生的数据异常和及时告警,从而影响数据库的稳定性。
发明内容
本发明的主要目的在于提出一种数据库业务逻辑监控方法、系统、及存储介质,旨在解决现有技术中难以及时发现数据库产生的数据异常和及时告警,从而影响数据库稳定性的技术问题。
为实现上述目的,本发明提供一种数据库业务逻辑监控方法,所述数据库业务逻辑监控方法包括:
每隔第一设定时间,生成需要进行监控的监控项,并写入监控项任务表;
启动所述监控项,并判断所述监控项当前是否为就绪状态,若所述监控项当前为就绪状态,则对所述监控项进行业务逻辑监控;
将业务逻辑监控结果写入监控数据表,并每隔第二设定时间扫描所述监控数据表,获取设定时间段内的异常数据;
判断所述异常数据与预设的告警条件是否匹配,当所述异常数据与预设的告警条件相匹配时,则根据所述异常数据对应监控项的序列号ID,获取告警处理所需的配置信息,并根据所述配置信息进行告警处理。
优选地,启动所述监控项的步骤包括:
根据预先配置的启动条件启动所述监控项,其中,所述启动条件包括当数据库对应的时间与预置的启动时间相同时,或数据库对应的时间与预置的启动时间段相匹配时,则启动所述监控项。
优选地,所述将业务逻辑监控结果写入监控数据表的步骤还包括:
将所述业务逻辑监控结果写入预先建立的监控明细数据表。
优选地,判断所述异常数据与预设的告警条件是否匹配的步骤包括:
判断所述异常数据对应的数量值是否大于预设的第一阈值,和/或判断所述异常数据中指定的数据项是否大于预设的第二阈值;
当所述数量值大于第一阈值,和/或所述数据项大于第二阈值时,则确定所述异常数据与预设的告警条件相匹配。
优选地,根据所述配置信息进行告警处理的步骤包括:
判断所述告警处理对应的告警级别,并根据所述告警级别进行告警处理。
优选地,根据所述配置信息进行告警处理的步骤之后还包括:
导出所述监控数据表和/或所述监控明细数据表,其中,所述监控数据表包括监控项的启动时间、监控频率、以及监控状态中的至少一项,所述监控明细数据表中包括所述异常数据对应的明细信息。
优选地,根据所述告警级别进行告警处理的步骤包括:
当任意时间点排队等待的告警处理的数量大于预设的最大并发阈值时,优先进行告警级别高的告警处理。
优选地,所述告警处理对应的告警方式包括邮件告警、呼叫告警、自动转报IT服务管理系统告警中的一种或多种。
此外,为实现上述目的,本发明还提供一种数据库业务逻辑监控系统,所述数据库业务逻辑监控系统包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据库业务逻辑监控程序,所述数据库业务逻辑监控程序被所述处理器执行时实现如下步骤:
每隔第一设定时间,生成需要进行监控的监控项,并写入监控项任务表;
启动所述监控项,并判断所述监控项当前是否为就绪状态,若所述监控项当前为就绪状态,则对所述监控项进行业务逻辑监控;
将业务逻辑监控结果写入监控数据表,并每隔第二设定时间扫描所述监控数据表,获取设定时间段内的异常数据;
判断所述异常数据与预设的告警条件是否匹配,当所述异常数据与预设的告警条件相匹配时,则根据所述异常数据对应监控项的序列号ID,获取告警处理所需的配置信息,并根据所述配置信息进行告警处理。
优选地,所述数据库业务逻辑监控程序被所述处理器执行时,还可以实现如下步骤:
根据预先配置的启动条件启动所述监控项,其中,所述启动条件包括当数据库对应的时间与预置的启动时间相同时,或数据库对应的时间与预置的启动时间段相匹配时,则启动所述监控项。
优选地,所述数据库业务逻辑监控程序被所述处理器执行时,还可以实现如下步骤:
将所述业务逻辑监控结果写入预先建立的监控明细数据表。
优选地,所述数据库业务逻辑监控程序被所述处理器执行时,还可以实现如下步骤:
判断所述异常数据对应的数量值是否大于预设的第一阈值,和/或判断所述异常数据中指定的数据项是否大于预设的第二阈值;
当所述数量值大于第一阈值,和/或所述数据项大于第二阈值时,则确定所述异常数据与预设的告警条件相匹配。
优选地,所述数据库业务逻辑监控程序被所述处理器执行时,还可以实现如下步骤:
判断所述告警处理对应的告警级别,并根据所述告警级别进行告警处理。
优选地,所述数据库业务逻辑监控程序被所述处理器执行时,还可以实现如下步骤:
导出所述监控数据表和/或所述监控明细数据表,其中,所述监控数据表包括监控项的启动时间、监控频率、以及监控状态中的至少一项,所述监控明细数据表中包括所述异常数据对应的明细信息。
优选地,所述数据库业务逻辑监控程序被所述处理器执行时,还可以实现如下步骤:
当任意时间点排队等待的告警处理的数量大于预设的最大并发阈值时,优先进行告警级别高的告警处理。
优选地,所述告警处理对应的告警方式包括邮件告警、呼叫告警、自动转报IT服务管理系统告警中的一种或多种。
此外,为实现上述目的,本发明还提供一种存储介质,所述存储介质上存储有数据库业务逻辑监控程序,所述数据库业务逻辑监控程序被处理器执行时实现如下步骤:
每隔第一设定时间,生成需要进行监控的监控项,并写入监控项任务表;
启动所述监控项,并判断所述监控项当前是否为就绪状态,若所述监控项当前为就绪状态,则对所述监控项进行业务逻辑监控;
将业务逻辑监控结果写入监控数据表,并每隔第二设定时间扫描所述监控数据表,获取设定时间段内的异常数据;
判断所述异常数据与预设的告警条件是否匹配,当所述异常数据与预设的告警条件相匹配时,则根据所述异常数据对应监控项的序列号ID,获取告警处理所需的配置信息,并根据所述配置信息进行告警处理。
优选地,所述数据库业务逻辑监控程序被处理器执行时,还可以实现如下步骤:
根据预先配置的启动条件启动所述监控项,其中,所述启动条件包括当数据库对应的时间与预置的启动时间相同时,或数据库对应的时间与预置的启动时间段相匹配时,则启动所述监控项。
优选地,所述数据库业务逻辑监控程序被处理器执行时,还可以实现如下步骤:
将所述业务逻辑监控结果写入预先建立的监控明细数据表。
优选地,所述数据库业务逻辑监控程序被处理器执行时,还可以实现如下步骤:
判断所述异常数据对应的数量值是否大于预设的第一阈值,和/或判断所述异常数据中指定的数据项是否大于预设的第二阈值;
当所述数量值大于第一阈值,和/或所述数据项大于第二阈值时,则确定所述异常数据与预设的告警条件相匹配。
优选地,所述数据库业务逻辑监控程序被处理器执行时,还可以实现如下步骤:
判断所述告警处理对应的告警级别,并根据所述告警级别进行告警处理。
优选地,所述数据库业务逻辑监控程序被处理器执行时,还可以实现如下步骤:
导出所述监控数据表和/或所述监控明细数据表,其中,所述监控数据表包括监控项的启动时间、监控频率、以及监控状态中的至少一项,所述监控明细数据表中包括所述异常数据对应的明细信息。
优选地,所述数据库业务逻辑监控程序被处理器执行时,还可以实现如下步骤:
当任意时间点排队等待的告警处理的数量大于预设的最大并发阈值时,优先进行告警级别高的告警处理。
优选地,所述告警处理对应的告警方式包括邮件告警、呼叫告警、自动转报IT服务管理系统告警中的一种或多种。
本发明提供的一种数据库业务逻辑监控方法、系统、及存储介质,可实现:在设定的时间内,对监控任务表中写入的监控项进行业务逻辑监控,并将业务逻辑监控结果写入监控数据表,并每隔一定的时间扫描该监控数据表,获取异常数据,当该异常数据与预设的告警条件相匹配时,则根据该异常数据对应监控项的序列号ID,获取告警处理所需的配置信息并进行告警处理,即本发明可以自动监控数据库中产生的异常数据,并进行告警处理,解决了现有技术中难以及时发现数据库产生的数据异常和及时告警的技术问题,提升了数据库的稳定性。
附图说明
图1为本发明数据库业务逻辑监控方法第一实施例的流程示意图;
图2为本发明数据库业务逻辑监控系统涉及的软件运行环境的系统结构示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
以下结合说明书附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明,并且在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
本发明以下实施例主要提供一种数据库业务逻辑监控方法,该方法中,在设定的时间内,对监控任务表中写入的监控项进行业务逻辑监控,并将业务逻辑监控结果写入监控数据表,并每隔一定的时间扫描该监控数据表,获取异常数据,当该异常数据与预设的告警条件相匹配时,则根据该异常数据对应监控项的序列号ID,获取告警处理所需的配置信息并进行告警处理,即本发明可以自动监控数据库中产生的异常数据,并进行告警处理,不需要人员参与,省时省力。
参照图1,图1为本发明数据库业务逻辑监控方法第一实施例的流程示意图,本实施例中,所述数据库业务逻辑监控方法包括:
步骤S10,每隔第一设定时间,生成需要进行监控的监控项,并写入监控项任务表。
其中,在监控项变更开始之后,监控平台需要新增监控项,具体的,通过dml(datamanipulation language,数据操纵语言)脚本语言新增配置到监控项基表monitor_tbl中。监控项基表monitor_tbl主要用于记录监控项的执行时间、监控频率,以及监控平台进行后续监控处理所需要的配置信息,例如监控项名称、详细描述信息、生效时间、失效时间、监控关键字、告警方式、告警、频率、运行时间段、不运行时间段、监控类型、告警级别等。
其中,上述监控平台可优选为Elis监控平台。
其中,每隔第一设定时间(例如在每天的22点)启动数据库JOB功能,统一产生需要进行监控的监控项,写入监控项任务表。
步骤S20,启动所述监控项,并判断所述监控项当前是否为就绪状态,若所述监控项当前为就绪状态,则对所述监控项进行业务逻辑监控。
本实施例中,定时启动上述监控项,并判断该监控项当前是否为就绪状态,若该监控项当前为就绪状态,则对该监控项进行业务逻辑监控。
其中,判断该监控项当前是否为就绪状态的过程为:首先判断当前监控平台是否处于开启状态,若当前监控平台处于开启状态,则判断监控平台对应的监控模块以及该监控模块对应的监控功能是否正常工作,若监控平台对应的监控模块以及该监控模块对应的监控功均能正常工作,则确定该监控项当前为就绪状态;否则认为该监控项当前为未就绪状态,直接结束监控项监控任务。
进一步地,本实施例中,启动上述监控项的步骤包括:
根据预先配置的启动条件启动所述监控项,其中,所述启动条件包括当数据库对应的时间与预置的启动时间相同时,或数据库对应的时间与预置的启动时间段相匹配时,则启动所述监控项。
即本实施例中,可以随意设定在任意时间点或时间段内启动上述监控项,对数据库的业务逻辑进行监控。例如,设定在每天晚上的23点整启动上述监控项,对数据库的业务逻辑进行监控,然后设定监控时长,如在启动上述监控项的时长达到半小时之后,关闭上述监控项。
其中,还可以设置每隔一定的时间间隔便启动上述监控项,如每隔一个小时便启动上述监控项,并在启动上述监控项的时长达到半小时之后,关闭上述监控项。
其中,还可以设置启动时间段,在数据库对应的时间处于该启动时间段时,则启动所述监控项,例如,设置上述启动时间段为每天上午八点至下午六点,在该启动时间段内启动上述监控项。
其中,由数据库JOB功能统一调度执行监控项任务表中监控项的业务逻辑监控任务。
步骤S30,将业务逻辑监控结果写入监控数据表,并每隔第二设定时间扫描所述监控数据表,获取设定时间段内的异常数据。
本实施例中,通过调用监控平台相应的接口,将业务逻辑监控结果写入监控数据表中,并每隔第二设定时间(例如每隔2分钟)扫描所述监控数据表,获取设定时间段内(例如当前时刻至当前时刻前2分钟之内)的异常数据。
步骤S40,判断所述异常数据与预设的告警条件是否匹配,当所述异常数据与预设的告警条件相匹配时,则根据所述异常数据对应监控项的序列号ID,获取告警处理所需的配置信息,并根据所述配置信息进行告警处理。
本实施例中,在获取到上述异常数据之后,需要判断该异常数据与预设的告警条件是否匹配,若匹配,则根据该异常数据对应监控项的序列号ID,获取告警处理所需的配置信息并进行告警处理;否则,直接结束监控项监控任务。
本实施例所述的数据库业务逻辑监控方法,在设定的时间内,对监控任务表中写入的监控项进行业务逻辑监控,并将业务逻辑监控结果写入监控数据表,并每隔一定的时间扫描该监控数据表,获取异常数据,当该异常数据与预设的告警条件相匹配时,则根据该异常数据对应监控项的序列号ID,获取告警处理所需的配置信息并进行告警处理,即本发明可以自动监控数据库中产生的异常数据,并进行告警处理,解决了现有技术中难以及时发现数据库产生的数据异常和及时告警的技术问题,提升了数据库的稳定性。
进一步地,基于上述图1所述的第一实施例,本发明数据库业务逻辑监控方法第二实施例中,上述图1所示步骤S30中所述的将业务逻辑监控结果写入监控数据表的步骤还包括:
将所述业务逻辑监控结果写入预先建立的监控明细数据表。
其中,监控明细数据表主要用于记录异常数据对应的明细信息,例如流水号、出错信息、执行用户、执行时间、运行数据库JOB的SID、监控项ID等等。
进一步地,上述图1所示步骤S40中所述的根据所述配置信息进行告警处理的步骤之后还包括:
导出所述监控数据表和/或所述监控明细数据表,其中,所述监控数据表包括监控项的启动时间、监控频率、以及监控状态中的至少一项,所述监控数据表和/或所述监控明细数据表中包括所述异常数据对应的明细信息。
其中,根据所述配置信息进行告警处理的步骤之后,若需要查看上述监控数据表和/或监控明细数据表,则可以导出该监控数据表和/或监控明细数据表。
其中,在导出上述监控数据表和/或监控明细数据表时,可以利用抓取SQL(Structured Query Language,结构化查询语言)来导出。可以仅导出监控数据表,或者仅导出监控明细数据表,或者同时导出监控数据表和所述监控明细数据表。
具体的,上述监控数据表包括监控项的启动时间、监控频率、以及监控状态中的至少一项,另外,上述监控数据表还包括流水号、监控项ID、批处理执行标识、批处理开始时间、批处理结束时间、业务处理起始时间、业务处理结束时间、件数、金额、执行用户、执行时间、异常标识、运行数据库JOB的SID、执行结果摘要信息、处理状态等。
本实施例所述的数据库业务逻辑监控方法,还将业务逻辑监控结果写入预先建立的监控明细数据表,并在进行告警处理之后,可以选择导出所述监控数据表和/或所述监控明细数据表,便于数据库运维技术人员信息了解数据库异常数据,极大地提高了运维工作效率,以及节省人力成本。
进一步地,基于上述图1所述的第一实施例,本发明数据库业务逻辑监控方法第三实施例中,上述图1所示步骤S40中所述的判断所述异常数据与预设的告警条件是否匹配的步骤包括:
判断上述异常数据对应的数量值是否大于预设的第一阈值,和/或判断上述异常数据中指定的数据项是否大于预设的第二阈值;
当所述数量值大于第一阈值,和/或所述数据项大于第二阈值时,则确定所述异常数据与预设的告警条件相匹配。
具体的,在判断上述异常数据与预设的告警条件是否匹配时,可同时判断上述异常数据对应的数量值是否大于预设的第一阈值,以及上述异常数据中指定的数据项是否大于预设的第二阈值,当上述异常数据对应的数量值大于预设的第一阈值,且上述异常数据中指定的数据项大于预设的第二阈值时,则确定上述异常数据与预设的告警条件相匹配;或者,也可以仅判断上述异常数据对应的数量值是否大于预设的第一阈值,或仅判断上述异常数据中指定的数据项是否大于预设的第二阈值,当上述异常数据对应的数量值大于预设的第一阈值,或上述异常数据中指定的数据项大于预设的第二阈值时,则确定上述异常数据与预设的告警条件相匹配。
其中,可以利用数据库中proc_count及proc_premium这两个字段来控制阀值,其中proc_count用来控制异常数据对应的数量值,proc_premium用来控制异常数据中指定的数据项(例如销售金额)。该配置项的设置格式为:proc_count>n或者proc_premium>n.m,例如如果某监控项为监控未生盘抽档情况,需要在未生盘数超过5单才告警,则配置为“proc_count>5”。
其中,可以同时对异常数据对应的数量值和异常数据中指定的数据项进行阈值监控。例如某监控项为监控未生盘抽档情况时,需要在未生盘数超过5单和金额超过1000.0元才告警,则配置“(proc_count>5and proc_premium>1000.0)”;另外,也可以对异常数据对应的数量值或异常数据中指定的数据项的进行阈值监控,例如需要在未生盘数超过5单或金额超过1000.0元才告警,则配置为“(proc_count>5or proc_premium>1000.0)”。
本实施例所述的数据库业务逻辑监控方法,当异常数据对应的数量值大于预设的第一阈值,和/或异常数据中指定的数据项大于预设的第二阈值时,则确定该异常数据与预设的告警条件相匹配,其中,该第一阈值与第二阈值可由运维人员根据实际需要自行设置,从而来任意调节数据库业务逻辑监控的精确度。
进一步地,基于上述本发明数据库业务逻辑监控方法第一、第二、第三实施例,本发明数据库业务逻辑监控方法第四实施例中,上述图1所示步骤S40中所述的根据所述配置信息进行告警处理的步骤包括:
判断所述告警处理对应的告警级别,并根据所述告警级别进行告警处理。
其中,根据运营的监控平台规范,可预先将监控平台的告警级别由高到低配置为CRITICAL(非常重要)、MAJOR(重要)、MINOR(一般)、WARNING(警告)、INFO(提醒)。
进一步地,根据所述告警级别进行告警处理的步骤包括:
当任意时间点排队等待的告警处理的数量大于预设的最大并发阈值时,优先进行告警级别高的告警处理。
进一步地,所述告警处理对应的告警方式包括邮件告警、呼叫告警、自动转报IT服务管理系统告警中的一种或多种。
其中,根据监控平台规范,告警处理对应的告警方式包含:1-邮件、2-呼叫(电话)、3-自动转报ITSM(IT Service Management,IT服务管理)系统。可以选择其中一种告警方式,也可以选择其中两种告警方式,或者选择三中告警方式同时选择。
此外,上述告警处理对应的告警方式还包括:4-消息订阅、5-自定义脚本告警方式。
本实施例所述的数据库业务逻辑监控方法,在进行告警处理之前,需要先判断该告警处理对应的告警级别,然后再根据该告警级别进行告警处理,其中,当任意时间点排队等待的告警处理的数量大于预设的最大并发阈值时,优先进行告警级别高的告警处理,该告警处理对应的告警方式包括邮件告警、呼叫告警、自动转报IT服务管理系统告警中的一种或多种,即本实施例中,当产生较多告警处理时,能够优先进行告警级别较高的告警处理,从而最大限度地减少数据库异常数据带来的损失,保障数据库运行的稳定性。
本发明还提供一种数据库业务逻辑监控系统,该系统包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据库业务逻辑监控程序;该系统能够实现:在设定的时间内,对监控任务表中写入的监控项进行业务逻辑监控,并将业务逻辑监控结果写入监控数据表,并每隔一定的时间扫描该监控数据表,获取异常数据,当该异常数据与预设的告警条件相匹配时,则根据该异常数据对应监控项的序列号ID,获取告警处理所需的配置信息并进行告警处理,即本发明可以自动监控数据库中产生的异常数据,并进行告警处理,解决了现有技术中难以及时发现数据库产生的数据异常和及时告警的技术问题,提升了数据库的稳定性。
具体的,上述数据库业务逻辑监控程序被所述处理器执行时实现如下步骤:
每隔第一设定时间,生成需要进行监控的监控项,并写入监控项任务表;
启动所述监控项,并判断所述监控项当前是否为就绪状态,若所述监控项当前为就绪状态,则对所述监控项进行业务逻辑监控;
将业务逻辑监控结果写入监控数据表,并每隔第二设定时间扫描所述监控数据表,获取设定时间段内的异常数据;
判断所述异常数据与预设的告警条件是否匹配,当所述异常数据与预设的告警条件相匹配时,则根据所述异常数据对应监控项的序列号ID,获取告警处理所需的配置信息,并根据所述配置信息进行告警处理。
为了更好的理解本发明,参照图2,图2为本发明数据库业务逻辑监控系统涉及的软件运行环境的系统结构示意图,本实施例中,上述数据库业务逻辑监控系统可包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信;用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口;网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口);存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器;存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图2中示出的系统结构并不构成对上述系统的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图2所示,作为一种计算机存储介质的存储器1005中,可以包括操作系统、网络通信模块、用户接口模块以及数据库业务逻辑监控程序。
如图2所示,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的数据库业务逻辑监控程序,并执行相应的操作。
其中,该数据库业务逻辑监控系统对应的实施例与上述数据库业务逻辑监控方法对应的各个实施例基本相同,故在此不再赘述。
本发明还提供一种存储介质,所述存储介质上存储有数据库业务逻辑监控程序,该存储介质能够实现:在设定的时间内,对监控任务表中写入的监控项进行业务逻辑监控,并将业务逻辑监控结果写入监控数据表,并每隔一定的时间扫描该监控数据表,获取异常数据,当该异常数据与预设的告警条件相匹配时,则根据该异常数据对应监控项的序列号ID,获取告警处理所需的配置信息并进行告警处理,即本发明可以自动监控数据库中产生的异常数据,并进行告警处理,解决了现有技术中难以及时发现数据库产生的数据异常和及时告警的技术问题,提升了数据库的稳定性。
具体的,上述数据库业务逻辑监控程序被处理器执行时实现如下步骤:
每隔第一设定时间,生成需要进行监控的监控项,并写入监控项任务表;
启动所述监控项,并判断所述监控项当前是否为就绪状态,若所述监控项当前为就绪状态,则对所述监控项进行业务逻辑监控;
将业务逻辑监控结果写入监控数据表,并每隔第二设定时间扫描所述监控数据表,获取设定时间段内的异常数据;
判断所述异常数据与预设的告警条件是否匹配,当所述异常数据与预设的告警条件相匹配时,则根据所述异常数据对应监控项的序列号ID,获取告警处理所需的配置信息,并根据所述配置信息进行告警处理。
其中,该存储介质对应的实施例与上述数据库业务逻辑监控方法对应的各个实施例基本相同,故在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (9)
1.一种数据库业务逻辑监控方法,其特征在于,所述数据库业务逻辑监控方法包括:
每隔第一设定时间,通过启动数据库JOB功能统一生成需要进行监控的监控项,并写入监控项任务表;
根据预先配置的启动条件启动所述监控项,其中,所述启动条件包括当数据库对应的时间与预置的启动时间相同时,或数据库对应的时间与预置的启动时间段相匹配时,则启动所述监控项,或者设置每隔一定的时间间隔便启动上述监控项;
并判断所述监控项当前是否为就绪状态,若所述监控项当前为就绪状态,则对所述监控项进行业务逻辑监控;
将业务逻辑监控结果写入监控数据表,并每隔第二设定时间扫描所述监控数据表,获取设定时间段内的异常数据;
判断所述异常数据与预设的告警条件是否匹配,当所述异常数据与预设的告警条件相匹配时,则根据所述异常数据对应监控项的序列号ID,获取告警处理所需的配置信息,并根据所述配置信息进行告警处理。
2.如权利要求1所述的数据库业务逻辑监控方法,其特征在于,所述将业务逻辑监控结果写入监控数据表的步骤还包括:
将所述业务逻辑监控结果写入预先建立的监控明细数据表。
3.如权利要求1所述的数据库业务逻辑监控方法,其特征在于,判断所述异常数据与预设的告警条件是否匹配的步骤包括:
判断所述异常数据对应的数量值是否大于预设的第一阈值,和/或判断所述异常数据中指定的数据项是否大于预设的第二阈值;
当所述数量值大于第一阈值,和/或所述数据项大于第二阈值时,则确定所述异常数据与预设的告警条件相匹配。
4.如权利要求1至3任意一项所述的数据库业务逻辑监控方法,其特征在于,根据所述配置信息进行告警处理的步骤包括:
判断所述告警处理对应的告警级别,并根据所述告警级别进行告警处理。
5.如权利要求4所述的数据库业务逻辑监控方法,其特征在于,根据所述配置信息进行告警处理的步骤之后还包括:
导出所述监控数据表,其中,所述监控数据表包括监控项的启动时间、监控频率、以及监控状态中的至少一项,所述监控数据表中包括所述异常数据对应的明细信息。
6.如权利要求4所述的数据库业务逻辑监控方法,其特征在于,根据所述告警级别进行告警处理的步骤包括:
当任意时间点排队等待的告警处理的数量大于预设的最大并发阈值时,优先进行告警级别高的告警处理。
7.如权利要求4所述的数据库业务逻辑监控方法,其特征在于,所述告警处理对应的告警方式包括邮件告警、呼叫告警、自动转报IT服务管理系统告警中的一种或多种。
8.一种数据库业务逻辑监控系统,其特征在于,所述数据库业务逻辑监控系统包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据库业务逻辑监控程序,所述数据库业务逻辑监控程序被所述处理器执行时实现如权利要求1至7中任意一项所述的数据库业务逻辑监控方法的步骤。
9.一种存储介质,其特征在于,所述存储介质上存储有数据库业务逻辑监控程序,所述数据库业务逻辑监控程序被处理器执行时实现如权利要求1至7中任意一项所述的数据库业务逻辑监控方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710367166.0A CN107678907B (zh) | 2017-05-22 | 2017-05-22 | 数据库业务逻辑监控方法、系统、及存储介质 |
PCT/CN2017/099334 WO2018214320A1 (zh) | 2017-05-22 | 2017-08-28 | 数据库业务逻辑监控方法、系统、及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710367166.0A CN107678907B (zh) | 2017-05-22 | 2017-05-22 | 数据库业务逻辑监控方法、系统、及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107678907A CN107678907A (zh) | 2018-02-09 |
CN107678907B true CN107678907B (zh) | 2020-04-10 |
Family
ID=61133637
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710367166.0A Active CN107678907B (zh) | 2017-05-22 | 2017-05-22 | 数据库业务逻辑监控方法、系统、及存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN107678907B (zh) |
WO (1) | WO2018214320A1 (zh) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108415811B (zh) * | 2018-03-23 | 2021-08-27 | 广发证券股份有限公司 | 一种监测业务逻辑的方法及装置 |
CN108847977B (zh) * | 2018-06-14 | 2021-06-25 | 平安科技(深圳)有限公司 | 一种业务数据的监控方法、存储介质和服务器 |
CN110851316B (zh) * | 2018-08-20 | 2024-09-20 | 北京京东尚科信息技术有限公司 | 异常预警方法及装置、系统、电子设备、存储介质 |
CN109669836B (zh) * | 2018-09-25 | 2023-04-28 | 平安普惠企业管理有限公司 | 智能it运维分析方法、装置、设备及可读存储介质 |
CN109284216A (zh) * | 2018-09-27 | 2019-01-29 | 深圳市佰仟金融服务有限公司 | 系统监控的方法及终端设备 |
CN109491873B (zh) * | 2018-11-05 | 2022-08-02 | 阿里巴巴(中国)有限公司 | 缓存监控方法、介质、装置和计算设备 |
CN109582547A (zh) * | 2018-12-11 | 2019-04-05 | 平安科技(深圳)有限公司 | 电子装置、监控数据告警方法及存储介质 |
CN110046071B (zh) * | 2019-03-13 | 2023-05-30 | 中国平安人寿保险股份有限公司 | 数据库监控方法、装置、计算设备与存储介质 |
CN110147405A (zh) * | 2019-04-15 | 2019-08-20 | 平安普惠企业管理有限公司 | 一种基于基架运维的监控方法、装置、设备和存储介质 |
CN112311617A (zh) * | 2019-08-02 | 2021-02-02 | 中国移动通信有限公司政企客户分公司 | 一种配置化数据监控告警方法及系统 |
CN110795414B (zh) * | 2019-11-01 | 2023-04-14 | 北京北方华创微电子装备有限公司 | 半导体设备报警分析方法及装置 |
CN111026642A (zh) * | 2019-11-14 | 2020-04-17 | 山东中创软件商用中间件股份有限公司 | 数据库运行检测系统、方法、装置及计算机可读存储介质 |
CN111090635B (zh) * | 2019-11-29 | 2023-11-07 | 北京明略软件系统有限公司 | 一种预警方案的配置方法、装置及计算机可读存储介质 |
CN111078507A (zh) * | 2019-12-27 | 2020-04-28 | 广州三七互娱科技有限公司 | 数据监控方法、系统、计算机设备和存储介质 |
CN111274094B (zh) * | 2020-02-04 | 2023-09-26 | 上海携程商务有限公司 | 接口预警方法、系统、设备及存储介质 |
CN111324514A (zh) * | 2020-03-18 | 2020-06-23 | 深圳市卡牛信息科技有限公司 | 一种系统异常监控方法、装置、设备和存储介质 |
CN111581064A (zh) * | 2020-03-31 | 2020-08-25 | 中国建设银行股份有限公司 | 基于oracle数据库的索引处理方法、系统、设备和存储介质 |
CN111580894A (zh) * | 2020-04-02 | 2020-08-25 | 深圳壹账通智能科技有限公司 | 数据分析预警方法、装置、计算机系统及可读存储介质 |
CN111444067A (zh) * | 2020-05-18 | 2020-07-24 | 湖南御家科技有限公司 | 一种基于规则引擎的配置化系统监控方法、装置及设备 |
CN113448801B (zh) * | 2021-06-15 | 2024-08-06 | 新浪技术(中国)有限公司 | 一种数据库监控方法及系统 |
CN113553235A (zh) * | 2021-07-19 | 2021-10-26 | 猪八戒股份有限公司 | 业务场景监测方法、装置、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101625686A (zh) * | 2008-07-08 | 2010-01-13 | 阿里巴巴集团控股有限公司 | 一种监控多数据库之间数据一致性的方法及系统 |
CN103532739A (zh) * | 2013-09-25 | 2014-01-22 | 上海斐讯数据通信技术有限公司 | 一种基于网络服务与应用的监控分析系统 |
CN105843904A (zh) * | 2016-03-23 | 2016-08-10 | 江苏太湖云计算信息技术股份有限公司 | 针对数据库运行性能的监控告警系统 |
CN106202444A (zh) * | 2016-07-14 | 2016-12-07 | 浪潮软件股份有限公司 | 一种数据库运维监控的实现方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070112607A1 (en) * | 2005-11-16 | 2007-05-17 | Microsoft Corporation | Score-based alerting in business logic |
CN103295155B (zh) * | 2012-11-30 | 2016-03-30 | 国泰君安证券股份有限公司 | 证券核心业务系统监控方法 |
CN106385328A (zh) * | 2016-08-31 | 2017-02-08 | 沈阳行天科技有限公司 | 一种基于嵌入式系统来管理企业核心设备的监控方法 |
CN106487585A (zh) * | 2016-10-09 | 2017-03-08 | 深圳市思博创科技有限公司 | 设备综合监控系统架构 |
-
2017
- 2017-05-22 CN CN201710367166.0A patent/CN107678907B/zh active Active
- 2017-08-28 WO PCT/CN2017/099334 patent/WO2018214320A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101625686A (zh) * | 2008-07-08 | 2010-01-13 | 阿里巴巴集团控股有限公司 | 一种监控多数据库之间数据一致性的方法及系统 |
CN103532739A (zh) * | 2013-09-25 | 2014-01-22 | 上海斐讯数据通信技术有限公司 | 一种基于网络服务与应用的监控分析系统 |
CN105843904A (zh) * | 2016-03-23 | 2016-08-10 | 江苏太湖云计算信息技术股份有限公司 | 针对数据库运行性能的监控告警系统 |
CN106202444A (zh) * | 2016-07-14 | 2016-12-07 | 浪潮软件股份有限公司 | 一种数据库运维监控的实现方法 |
Also Published As
Publication number | Publication date |
---|---|
CN107678907A (zh) | 2018-02-09 |
WO2018214320A1 (zh) | 2018-11-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107678907B (zh) | 数据库业务逻辑监控方法、系统、及存储介质 | |
CN106549829B (zh) | 大数据计算平台监控系统及方法 | |
US10585698B2 (en) | Template-driven multi-tenant workflow processing | |
CN105095056B (zh) | 一种数据仓库数据监控的方法 | |
US6909992B2 (en) | Automatically identifying replacement times for limited lifetime components | |
CN106406993A (zh) | 一种定时任务管理方法和系统 | |
CN106371984B (zh) | 一种数据监控方法、设备和系统 | |
CN111352921A (zh) | 基于elk的慢查询监控方法、装置、计算机设备及存储介质 | |
US20200250152A1 (en) | System for determining the impact to databases, tables and views by batch processing | |
US20120102007A1 (en) | Managing etl jobs | |
CN112199394A (zh) | 告警信息推送方法、系统、智能终端及存储介质 | |
US20190116178A1 (en) | Application error fingerprinting | |
US20140149568A1 (en) | Monitoring alerts in a computer landscape environment | |
CN104503880A (zh) | 一种MySQL数据库监控选项脚本的实现方法及装置 | |
US11329869B2 (en) | Self-monitoring | |
CN109271435A (zh) | 一种支持断点续传的数据抽取方法及系统 | |
US20220222266A1 (en) | Monitoring and alerting platform for extract, transform, and load jobs | |
CN111784318A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
CN108536356A (zh) | 坐席信息处理方法、装置及计算机可读存储介质 | |
CN113760677A (zh) | 异常链路分析方法、装置、设备及存储介质 | |
CN117389843B (zh) | 一种智能运维系统、方法、电子设备及存储介质 | |
CN115936394A (zh) | 一种面向工业系统的业务事件管理系统和设备 | |
CN112416701B (zh) | 业务数据的监控方法、装置、计算机设备和可读存储介质 | |
CN113835916A (zh) | 一种基于Ambari大数据平台的告警方法、系统及设备 | |
US20160328441A1 (en) | Search token mnemonic replacement |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |