CN113836160B - 一种基于主从同步的数据流状态监控告警系统 - Google Patents
一种基于主从同步的数据流状态监控告警系统 Download PDFInfo
- Publication number
- CN113836160B CN113836160B CN202111146416.0A CN202111146416A CN113836160B CN 113836160 B CN113836160 B CN 113836160B CN 202111146416 A CN202111146416 A CN 202111146416A CN 113836160 B CN113836160 B CN 113836160B
- Authority
- CN
- China
- Prior art keywords
- data
- data source
- database
- monitoring
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 92
- 238000012545 processing Methods 0.000 claims abstract description 31
- 230000001360 synchronised effect Effects 0.000 claims abstract description 13
- 230000002776 aggregation Effects 0.000 claims abstract description 6
- 238000004220 aggregation Methods 0.000 claims abstract description 6
- 238000000034 method Methods 0.000 abstract description 17
- 238000013523 data management Methods 0.000 abstract description 11
- 230000002159 abnormal effect Effects 0.000 abstract description 7
- 230000009286 beneficial effect Effects 0.000 abstract description 3
- 238000012423 maintenance Methods 0.000 description 7
- 230000002354 daily effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000013480 data collection Methods 0.000 description 3
- 210000001503 joint Anatomy 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 150000007523 nucleic acids Chemical class 0.000 description 2
- 102000039446 nucleic acids Human genes 0.000 description 2
- 108020004707 nucleic acids Proteins 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2358—Change logging, detection, and notification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种基于主从同步的数据流状态监控告警系统，属于数据治理领域，系统连接至少一个数据源和至少一个用户端；包括：归集数据库包括多个目标数据库，分别用于存储数据源的日志数据；目标数据监控表包括各数据源对应的监控信息；服务端包括：客户端，用于采用主从同步的方式读取日志数据并写入消息队列，消费模块，用于当消息队列发生变更时，更新目标数据监控表；告警模块，用于判断是否更新异常，于更新异常时输出推送信息；发送端，用于将推送信息发送至用户端。本发明的有益效果在于：通过主从同步获取数据，不会影响目标数据库的性能；可对接多个数据源；实时监控数据流的状态，减少数据治理过程的处理工作量。
Description
技术领域
本发明涉及数据治理领域，尤其涉及一种基于主从同步的数据流状态监控告警系统。
背景技术
随着用户数量以及数据量迸发式的增长，监控系统作为整个运维环节，乃至整个产品生命周期中最重要的一环，起着非常重要的作用。监控系统可以对服务器、操作系统、中间件、应用进行全面的监控及报警，可以在事前及时预警发现故障，事后提供翔实的数据用于追查定位问题。
然而，在信息大爆炸时代下的今天，运维人员每天都要处理成千上万的告警信息，这些告警信息冗杂且繁复，单一的监控系统已无法满足当下运维的需求。面对各种运维事件的告警，运维人员无法及时了解哪些告警信息才是最关键的、哪些告警信息是重复可替代的、哪些告警信息又是可以忽略且清除掉的，运维人员可能会耽误大量的时间和精力在错综复杂的无效告警的处理上，从而错失真正需要关注的告警信息，造成漏检、错检，告警处理效率较低，进而影响线上业务的直接使用，导致客户流失；并且现有的监控方式在，数据监控需要遍历查找最大更新时间，该操作会消耗目标数据库性能，因此针对以上问题，迫切需要设计出一种基于主从同步的数据流状态监控告警系统，以满足实际使用的需要。
发明内容
为了解决以上技术问题，本发明提供了一种基于主从同步的数据流状态监控告警系统。
本发明所解决的技术问题可以采用以下技术方案实现：
本发明提供一种基于主从同步的数据流状态监控告警系统，所述系统连接至少一个数据源和至少一个用户端；
所述系统具体包括：
一归集数据库，所述归集数据库包括多个目标数据库，每一所述目标数据库分别用于存储一所述数据源的日志数据；
一目标数据监控表，所述目标数据监控表包括需要监控的各所述数据源对应的监控信息；
一服务端，分别连接所述归集数据库和所述目标数据监控表，所述服务端包括：
一客户端，用于采用主从同步的方式从所述目标数据库中读取日志数据，并将所述日志数据写入一消息队列中，
一消费模块，连接所述客户端，用于实时监控所述客户端，当所述消息队列中的消息内容发生变更时，根据所述消息内容更新所述目标数据监控表的所述监控信息；
一告警模块，连接所述消费模块，用于轮询所述目标数据监控表，根据更新后的所述目标数据监控表判断各所述数据源是否更新异常，并于更新异常时输出一推送信息；
一发送端，连接所述服务端，用于接收所述推送信息，并将所述推送信息发送至所述数据源对应的所述用户端。
优选地，所述监控信息包括数据源ID和/或数据流名称和/或目标数据库所在地址和/或数据库名称和/或数据库表和/或更新间隔和/或最后处理时间和/或告警对象。
优选地，所述消息队列中的消息内容包括数据库名称和/或数据库表和/或当前时间戳和/处理类型。
优选地，所述消息队列的主题为所述目标数据库对应的数据库地址。
优选地，所述消费模块包括：
一第一判断单元，用于判断所述消息内容的处理类型；
一更新单元，连接所述第一判断单元，用于当所述处理类型为插入操作或更新操作时，将所述目标数据监控表中对应所述数据源的最后处理时间更新为所述当前时间戳。
优选地，所述告警模块包括：
一计算单元，用于计算所述当前时间戳和上一次处理时间的时间差；
一第二判断单元，连接所述计算单元，用于当所述时间差超过所述数据源的更新间隔的预设倍数时，所述数据源的更新异常。
优选地，还包括：
一创建模块，用于供所述数据源在所述归集数据库中创建一同步账号；
一权限配置模块，连接所述创建模块，用于为每一新创建的所述数据源的同步账号授予相应的所述目标数据库使用权限。
优选地，还包括：
一告警管理模块，连接所述告警模块，用于管理所述目标数据监控表，以及所述目标数据监控表中的每一所述数据源对应的告警媒介、需监控项；
所述告警媒介包括用户端推送和/或短信推送。
优选地，所述客户端包括：
一报表生成模块，用于按照一预设周期获取所述数据源的日志数据生成一报表，并将所述报表写入对应所述数据源的所述消息队列中；
所述发送端根据所述消息队列的状态，将所述消息队列中的消息内容发送至所述用户端。
优选地，所述用户端包括微信小程序和/或微信公众号和/或轻应用。
本发明的有益效果在于：
本发明通过主从同步的方式获取数据，以触发更新目标数据监控表，不会影响目标数据库的性能；可以对接多个数据源，并且只需要新增用户，即可直接对接现有的数据源，无需做任何改造；在数据治理过程中，实时监控数据流的状态，不需要对目标数据监控表新增任何字段，不限制数据归集的形式，减少数据治理过程中的处理工作量；只针对目标结果、数据是否入库作判定，提高多方合作数据治理过程中的责任边界问题。
附图说明
图1为本发明中，一种基于主从同步的数据流状态监控告警系统的结构框图；
图2为本发明中，消费模块具体实施例的结构框图；
图3为本发明中，告警模块具体实施例的结构框图；
图4为本发明中，监控告警系统具体实施例的结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
下面结合附图和具体实施例对本发明作进一步说明，但不作为本发明的限定。
本发明提供一种基于主从同步的数据流状态监控告警系统，属于数据治理领域，如图1所示，系统连接至少一个数据源01和至少一个用户端02；
系统具体包括：
一归集数据库1，归集数据库1包括多个目标数据库，每一目标数据库分别用于存储一数据源01的日志数据；
一目标数据监控表2，目标数据监控表2包括需要监控的各数据源01对应的监控信息；
一服务端33，分别连接归集数据库1和目标数据监控表2，服务端3包括：
一客户端31，用于采用主从同步的方式从目标数据库中读取日志数据，并将日志数据写入一消息队列中，
一消费模块32，连接客户端31，用于实时监控客户端31，当消息队列中的消息内容发生变更时，根据消息内容更新目标数据监控表2的监控信息；
一告警模块33，连接消费模块32，用于轮询目标数据监控表2，根据更新后的目标数据监控表2判断各数据源01是否更新异常，并于更新异常时输出一推送信息；
一发送端4，连接服务端3，用于接收推送信息，并将推送信息发送至数据源01对应的用户端02。
具体的，各数据源01先在归集数据库1中创建同步账号，并基于每个数据源01的存储数据的数据库授予该数据源01对应的slave权限，以便于本系统能够同步复制对应的数据源01产生的日志数据。
建立一目标数据监控表2，目标数据监控表2包括如下字段：
| 字段 | 注解 |
| Id | 自增字段 |
| Title | 数据流名称 |
| Address | 数据库地址 |
| DB | 数据库名称 |
| Table | 数据库表 |
| interval | 更新间隔 |
| Last Time | 最后处理时间 |
| Alert List | 告警对象 |
即目标数据监控表2包括Id、Title、Address、DB、Table、interval、Last Time、Alert List等字段。
作为优选的实施方式，目标数据监控表2的监控信息包括数据源01ID和/或数据流名称和/或目标数据库所在地址和/或数据库名称和/或数据库表和/或更新间隔和/或最后处理时间和/或告警对象。
其中，数据源01ID采用自增字段表示，通过轮询目标数据监控表2，对监控信息进行监控，以实现异常告警。
例如，对应字段“interval”表示为每个数据源01配置的更新间隔，在数据治理过程中，若数据源01的实际更新间隔时间超过配置的更新间隔，则表示该数据源01的数据更新异常，需发出告警，以便于运维人员及时处理。
本发明的服务端3通过客户端31登录账户，并使用这个账户模拟主从同步的方式同步读取数据库的日志数据，其中每一条被修改数据的sql语句都会记录到二进制日志bin-log中，将读取的数据写入消息队列中。
作为优选的实施方式，消息队列中的消息内容包括数据库名称和/或数据库表和/或当前时间戳和/处理类型。
作为优选的实施方式，消息队列的主题为目标数据库对应的数据库地址。
具体的，消息内容包括数据库名database，数据表名table，当前时间戳ts，处理类型type，消息内容的主题Topic设置为数据库地址，并根据获取的二进制日志bin-log更新相应的消息队列中的消息内容。
消费模块32通过消息队列进行消费，根据消息内容读取目标数据监控表2中需要监控的数据库表，当消息队列中的消息内容发生变更时，即消息类型type为插入insert和/或更新update时，将对应LastTime字段更新为当前时间戳ts；
告警模块33会轮询目标数据监控表2，根据更新后的目标数据监控表2判断各数据源01是否更新异常，并于更新异常时输出一推送信息，其中，判断各数据源01是否更新异常的根据是将当前时间戳ts与目标数据监控表2中的上一次的最后处理时间的时间差超过更新间隔的1.5倍时，生成推送消息，以告警监控人员或其他相关人员。
本发明通过主从同步的方式获取数据，以触发更新目标数据监控表2，不会影响目标数据库的性能；可以对接多个数据源01，并且只需要新增用户，即可直接对接现有的数据源01，无需做任何改造；在数据治理过程中，实时监控数据流的状态，不需要对目标数据监控表2新增任何字段，不限制数据归集的形式，减少数据治理过程中的处理工作量；只针对目标结果、数据是否入库作判定，提高多方合作数据治理过程中的责任边界问题。
作为优选的实施方式，如图2所示，消费模块3232包括：
一第一判断单元321，用于判断消息内容的处理类型；
一更新单元322，连接第一判断单元321，用于当处理类型为插入操作和/或更新操作时，将目标数据监控表2中对应数据源01的最后处理时间更新为当前时间戳。
具体的，在本实施例中，客户端31根据获取的二进制日志bin-log更新完相应的消息队列中的消息内容后，通知消费模块32，消费模块32通过第一判断单元321判断对应数据源01的处理类型是否插入insert和/或更新update，其中变更操作还包括修改、替换、删除等，若发生变更，则更新上述目标数据监控表2中对应的最后处理时间，即将二进制日志bin-log发生上述操作的当前时间戳作为对应数据源01的最后处理时间。
作为优选的实施方式，如图3所示，告警模块3333包括：
一计算单元331，用于计算当前时间戳和上一次处理时间的时间差；
一第二判断单元332，连接计算单元331，用于当时间差超过数据源01的更新间隔的预设倍数时，数据源01的更新异常。
具体的，在本实施例中，告警模块33将当前时间戳ts与上一次处理时间(即上一次的最后处理时间)进行比较，若其时间差超过对应的数据源01的所设置的更新间隔的预设倍数时，则表示该数据源01更新存在异常，需告警监控人员或其他相关人员，其中，预设倍数可以是1.5倍，数据源01的更新间隔、预设倍数也可以根据实际的数据库进行设定相应的数值。
作为优选的实施方式，如图4所示，还包括：
一创建模块5，用于供数据源01在归集数据库1中创建一同步账号；
一权限配置模块6，连接创建模块5，用于为每一新创建的数据源01的同步账号授予相应的目标数据库使用权限。
作为优选的实施方式，如图4所示，还包括：
一告警管理模块7，连接告警模块33，用于管理目标数据监控表2，以及目标数据监控表2中的每一数据源01对应的告警媒介、需监控项；
告警媒介包括用户端02推送和/或短信推送。
具体的，在本实施例中，监控人员或其他相关消息接收人员创建账号，可以基于微信、QQ、支付宝等现有应用程序开通相关账号，对接本系统，并设置推送设备，例如监控人员的政务微信；以及设置接收消息的告警媒介、配置对应的数据源01的监控项或监控群组；
当本系统监控到该数据源01对应的监控项或监控群组发生异常，需要告警时，将异常消息通过服务接口发送推送信息至推送设备，推送信息包括设备ip、发生时间、事件等级以及负责人员。
作为优选的实施方式，客户端31包括：
一报表生成模块(图中未示出)，用于按照一预设周期获取数据源01的日志数据生成一报表，并将报表写入对应数据源01的消息队列中；
发送端4根据消息队列的状态，将消息队列中的消息内容发送至用户端02。
具体的，在本实施例中，服务端3按照预设周期获取数据源01的二进制日志，形成日报消息，发送端4根据消息队列中的消息内容将日报消息发送给对应数据源01的监控人员的用户端02上，预设周期可以是每隔一定时间，或者每日的一个或多个固定时间获取，或者自定义时间段。
作为优选的实施方式，用户端02包括微信小程序和/或微信公众号和/或轻应用。
具体的，在本实施例中，用户端02可以是监控人员或其他相关消息接收人员的移动终端，例如手机、电脑等电子设备，也可以是移动终端上的应用程序，诸如政务微信、微信小程序、微信公众号或其他轻应用。
下文中，提供四具体实施例以对本技术方案进行阐述和说明：
实施例一
监控人员或其他相关消息接收人员的移动终端上下载有政务微信，并已创建有对应政务微信的相关账号，将移动终端与本系统中对接，在本系统中创建用户，例如用户可以是政务微信的用户id，设置其对接本系统的告警媒介，以及推送设备、对应的数据源01的需监控项或监控群组；当有事件发生时，通过本系统的服务接口推送消息，推送消息包括设备ip，发生时间，事件等级以及负责人员；发送端4通过待发送的消息队列获取数据包发送推送消息至对应用户。
实施例二
监控人员或其他相关消息接收人员的移动终端上下载有政务微信，并已创建有对应政务微信的相关账号，在核酸紧急保障场景下，本系统对接核酸检测监控轻应用，服务端3根据业务系统接口定期获取工单、数据源01运行等业务状态生成日报消息，例如每日9:00，16:30，17:00和23:55，将上述日报消息生成相应的报表，发送端4将报表发送给对应的指定用户。
实施例三
监控人员或其他相关消息接收人员的移动终端上下载有政务微信，并已创建有对应政务微信的相关账号，服务端3根据归集数据库1的数据更新规则定期获取业务数据，如果数据超过预设的更新时间没有更新，其中预设的更新时间可以是更新间隔的预设倍数，例如1.5倍，系统发送对应数据的断流告警信息，根据断流告警信息发送给对应用户。
采用上述技术方案的有益效果在于：通过主从同步的方式获取数据，以触发更新目标数据监控表，不会影响目标数据库的性能；可以对接多个数据源，并且只需要新增用户，即可直接对接现有的数据源，无需做任何改造；在数据治理过程中，实时监控数据流的状态，不需要对目标数据监控表新增任何字段，不限制数据归集的形式，减少数据治理过程中的处理工作量；只针对目标结果、数据是否入库作判定，提高多方合作数据治理过程中的责任边界问题。
以上所述仅为本发明较佳的实施例，并非因此限制本发明的实施方式及保护范围，对于本领域技术人员而言，应当能够意识到凡运用本发明说明书及图示内容所作出的等同替换和显而易见的变化所得到的方案，均应当包含在本发明的保护范围内。
Claims (7)
1.一种基于主从同步的数据流状态监控告警系统，其特征在于，所述系统连接至少一个数据源和至少一个用户端；
所述系统具体包括：
一归集数据库，所述归集数据库包括多个目标数据库，每一所述目标数据库分别用于存储一所述数据源的日志数据；
一目标数据监控表，所述目标数据监控表包括需要监控的各所述数据源对应的监控信息；
一服务端，分别连接所述归集数据库和所述目标数据监控表，所述服务端包括：
一客户端，用于采用主从同步的方式从所述目标数据库中读取日志数据，并将所述日志数据写入一消息队列中，所述消息队列中的消息内容包括数据库名称和/或数据库表和/或当前时间戳和/或处理类型；
一消费模块，连接所述客户端，用于实时监控所述客户端，当所述消息队列中的消息内容发生变更时，根据所述消息内容更新所述目标数据监控表的所述监控信息；
一告警模块，连接所述消费模块，用于轮询所述目标数据监控表，根据更新后的所述目标数据监控表判断各所述数据源是否更新异常，并于更新异常时输出一推送信息；
一发送端，连接所述服务端，用于接收所述推送信息，并将所述推送信息发送至所述数据源对应的所述用户端；
所述消费模块包括：
一第一判断单元，用于判断所述消息内容的处理类型；
一更新单元，连接所述第一判断单元，用于当所述处理类型为插入操作或更新操作时，将所述目标数据监控表中对应所述数据源的最后处理时间更新为所述当前时间戳；
所述告警模块包括：
一计算单元，用于计算所述当前时间戳和上一次处理时间的时间差；
一第二判断单元，连接所述计算单元，用于当所述时间差超过所述数据源的更新间隔的预设倍数时，所述数据源的更新异常。
2.根据权利要求1所述的一种基于主从同步的数据流状态监控告警系统，其特征在于，所述监控信息包括数据源ID和/或数据流名称和/或目标数据库所在地址和/或数据库名称和/或数据库表和/或更新间隔和/或最后处理时间和/或告警对象。
3.根据权利要求1所述的一种基于主从同步的数据流状态监控告警系统，其特征在于，所述消息队列的主题为所述目标数据库对应的数据库地址。
4.根据权利要求1所述的一种基于主从同步的数据流状态监控告警系统，其特征在于，还包括：
一创建模块，用于供所述数据源在所述归集数据库中创建一同步账号；
一权限配置模块，连接所述创建模块，用于为每一新创建的所述数据源的同步账号授予相应的所述目标数据库使用权限。
5.根据权利要求1所述的一种基于主从同步的数据流状态监控告警系统，其特征在于，还包括：
一告警管理模块，连接所述告警模块，用于管理所述目标数据监控表，以及所述目标数据监控表中的每一所述数据源对应的告警媒介、需监控项；
所述告警媒介包括用户端推送和/或短信推送。
6.根据权利要求1所述的一种基于主从同步的数据流状态监控告警系统，其特征在于，所述客户端包括：
一报表生成模块，用于按照一预设周期获取所述数据源的日志数据生成一报表，并将所述报表写入对应所述数据源的所述消息队列中；
所述发送端根据所述消息队列的状态，将所述消息队列中的消息内容发送至所述用户端。
7.根据权利要求1所述的一种基于主从同步的数据流状态监控告警系统，其特征在于，所述用户端包括微信小程序和/或微信公众号和/或轻应用。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111146416.0A CN113836160B (zh) | 2021-09-28 | 2021-09-28 | 一种基于主从同步的数据流状态监控告警系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111146416.0A CN113836160B (zh) | 2021-09-28 | 2021-09-28 | 一种基于主从同步的数据流状态监控告警系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113836160A CN113836160A (zh) | 2021-12-24 |
| CN113836160B true CN113836160B (zh) | 2024-01-23 |
Family
ID=78967299
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111146416.0A Active CN113836160B (zh) | 2021-09-28 | 2021-09-28 | 一种基于主从同步的数据流状态监控告警系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113836160B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114913029B (zh) * | 2022-04-29 | 2023-05-02 | 云铂(宁夏)科技有限公司 | 一种基于物联网的智能农业监控平台 |
| CN114785722B (zh) * | 2022-06-14 | 2022-09-30 | 武汉四通信息服务有限公司 | 监控数据处理方法、装置及计算机可读存储介质 |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101854400A (zh) * | 2010-06-09 | 2010-10-06 | 中兴通讯股份有限公司 | 一种数据库同步部署及监控的方法和装置 |
| CN105095056A (zh) * | 2015-08-14 | 2015-11-25 | 焦点科技股份有限公司 | 一种数据仓库数据监控的方法 |
| WO2017177941A1 (zh) * | 2016-04-13 | 2017-10-19 | 中兴通讯股份有限公司 | 主备数据库切换方法和装置 |
| CN110334150A (zh) * | 2019-06-05 | 2019-10-15 | 上海易点时空网络有限公司 | 监测主从数据库同步延时的方法、监控终端及系统 |
| WO2019200750A1 (zh) * | 2018-04-20 | 2019-10-24 | 平安科技（深圳）有限公司 | 报表监控方法、装置、计算机设备和存储介质 |
| CN110377442A (zh) * | 2019-06-19 | 2019-10-25 | 平安银行股份有限公司 | 异常预警方法、装置、计算机设备及存储介质 |
| CN110750425A (zh) * | 2019-10-25 | 2020-02-04 | 上海中通吉网络技术有限公司 | 数据库监控方法、装置、系统和存储介质 |
| CN111159161A (zh) * | 2019-12-31 | 2020-05-15 | 青梧桐有限责任公司 | 基于etl规则的数据质量监控及预警系统和方法 |
| CN111475369A (zh) * | 2020-03-05 | 2020-07-31 | 中国平安人寿保险股份有限公司 | 日志监控的添加方法、装置、计算机设备及存储介质 |
| CN111526060A (zh) * | 2020-06-16 | 2020-08-11 | 网易（杭州）网络有限公司 | 业务日志的处理方法及系统 |
| CN112631761A (zh) * | 2020-12-31 | 2021-04-09 | 中国农业银行股份有限公司 | 一种任务调度监控方法和装置 |
| CN112654874A (zh) * | 2018-07-06 | 2021-04-13 | 施耐德电气美国股份有限公司 | 用于分析和优化动态容差曲线的系统和方法 |
| CN113220655A (zh) * | 2021-04-30 | 2021-08-06 | 中核武汉核电运行技术股份有限公司 | 数据接入方法、装置、设备及可读存储介质 |
-
2021
- 2021-09-28 CN CN202111146416.0A patent/CN113836160B/zh active Active
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2011153803A1 (zh) * | 2010-06-09 | 2011-12-15 | 中兴通讯股份有限公司 | 一种数据库同步部署及监控的方法和装置 |
| CN101854400A (zh) * | 2010-06-09 | 2010-10-06 | 中兴通讯股份有限公司 | 一种数据库同步部署及监控的方法和装置 |
| CN105095056A (zh) * | 2015-08-14 | 2015-11-25 | 焦点科技股份有限公司 | 一种数据仓库数据监控的方法 |
| WO2017177941A1 (zh) * | 2016-04-13 | 2017-10-19 | 中兴通讯股份有限公司 | 主备数据库切换方法和装置 |
| WO2019200750A1 (zh) * | 2018-04-20 | 2019-10-24 | 平安科技（深圳）有限公司 | 报表监控方法、装置、计算机设备和存储介质 |
| CN112654874A (zh) * | 2018-07-06 | 2021-04-13 | 施耐德电气美国股份有限公司 | 用于分析和优化动态容差曲线的系统和方法 |
| CN110334150A (zh) * | 2019-06-05 | 2019-10-15 | 上海易点时空网络有限公司 | 监测主从数据库同步延时的方法、监控终端及系统 |
| CN110377442A (zh) * | 2019-06-19 | 2019-10-25 | 平安银行股份有限公司 | 异常预警方法、装置、计算机设备及存储介质 |
| CN110750425A (zh) * | 2019-10-25 | 2020-02-04 | 上海中通吉网络技术有限公司 | 数据库监控方法、装置、系统和存储介质 |
| CN111159161A (zh) * | 2019-12-31 | 2020-05-15 | 青梧桐有限责任公司 | 基于etl规则的数据质量监控及预警系统和方法 |
| CN111475369A (zh) * | 2020-03-05 | 2020-07-31 | 中国平安人寿保险股份有限公司 | 日志监控的添加方法、装置、计算机设备及存储介质 |
| CN111526060A (zh) * | 2020-06-16 | 2020-08-11 | 网易（杭州）网络有限公司 | 业务日志的处理方法及系统 |
| CN112631761A (zh) * | 2020-12-31 | 2021-04-09 | 中国农业银行股份有限公司 | 一种任务调度监控方法和装置 |
| CN113220655A (zh) * | 2021-04-30 | 2021-08-06 | 中核武汉核电运行技术股份有限公司 | 数据接入方法、装置、设备及可读存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| "调控云关键技术研究及展望";阙凌燕等;《浙江电力》;1-7 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113836160A (zh) | 2021-12-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113836160B (zh) | 一种基于主从同步的数据流状态监控告警系统 | |
| CN107302466B (zh) | 一种动环监控系统大数据分析平台及方法 | |
| CN106778873B (zh) | 一种基于白名单规则的告警信息分类处置方法及装置 | |
| US7523357B2 (en) | Monitoring system and method | |
| CN111339175B (zh) | 数据处理方法、装置、电子设备及可读存储介质 | |
| CN107239388A (zh) | 一种监测告警方法及系统 | |
| CN104156297A (zh) | 告警方法和装置 | |
| CN107222356A (zh) | 一种云监控系统告警方法和系统 | |
| WO2016183967A1 (zh) | 一种关键组件的故障告警方法、装置及大数据管理系统 | |
| CN102882700B (zh) | 一种网管系统中的告警信息管理方法及设备 | |
| CN112395156A (zh) | 故障的告警方法和装置、存储介质和电子设备 | |
| CN101989931A (zh) | 一种运维告警处理方法和装置 | |
| CN112328425A (zh) | 一种基于机器学习的异常检测方法和系统 | |
| CN111858274B (zh) | 一种大数据评分系统稳定性监控方法 | |
| CN114356499A (zh) | Kubernetes集群告警根因分析方法及装置 | |
| CN114036022A (zh) | 一种监控告警处理方法、装置、设备和介质 | |
| CN113037549A (zh) | 一种运维环境告警方法 | |
| CN115860729A (zh) | 一种it运维综合管理系统 | |
| CN110677304A (zh) | 一种分布式问题追踪系统及设备 | |
| CN106487597A (zh) | 一种基于Zookeeper的服务监控系统和方法 | |
| CN108039971A (zh) | 一种告警方法及装置 | |
| CN108156017A (zh) | 一种输变电设备状态告警管理方法 | |
| CN116795631A (zh) | 业务系统监控告警方法、装置、设备和介质 | |
| CN105607983B (zh) | 数据异常监控方法和装置 | |
| CN111475495A (zh) | 基于大数据的质量分析方法、系统及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |