CN106201823A - 一种实时监控mysql数据库的系统及其监控方法 - Google Patents

一种实时监控mysql数据库的系统及其监控方法 Download PDF

Info

Publication number
CN106201823A
CN106201823A CN201610508638.5A CN201610508638A CN106201823A CN 106201823 A CN106201823 A CN 106201823A CN 201610508638 A CN201610508638 A CN 201610508638A CN 106201823 A CN106201823 A CN 106201823A
Authority
CN
China
Prior art keywords
monitor
file
data base
log
responsible
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610508638.5A
Other languages
English (en)
Other versions
CN106201823B (zh
Inventor
韩超
季统凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
G Cloud Technology Co Ltd
Original Assignee
G Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by G Cloud Technology Co Ltd filed Critical G Cloud Technology Co Ltd
Priority to CN201610508638.5A priority Critical patent/CN106201823B/zh
Publication of CN106201823A publication Critical patent/CN106201823A/zh
Application granted granted Critical
Publication of CN106201823B publication Critical patent/CN106201823B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3089Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents

Abstract

本发明涉及计算机应用技术领域,具体涉及一种的系统及其监控方法。本发明由文件配置器、日志缓冲器和监视器组成。通过文件配置器初始化本系统所需的各种参数和配置文件,形成日志路径参数和监视的统计数据,然后日志缓冲器开始装载日志文件,并且对日志文件进行感知监控,如果监视器感知到日志被修改,则进行统计,并且把统计的结果写入统计文件,以供外部调用,同时通知监视器注册队列的注册对象,完成通知动作。本发明实现了mysql数据库的实时监控。

Description

一种实时监控mysql数据库的系统及其监控方法
技术领域
本发明涉及计算机应用技术领域,具体涉及一种实时监控mysql数据库的系统及其监控方法。
背景技术
随着互联网和计算机应用技术的不断发展,mysql开源数据库在各个方面都得到迅速的应用,有些应用业务场景需要实时地监测mysql数据库的语句执行情况,并且对其进行统计分析,以满足各种业务场景的需求。
发明内容
本发明解决的技术问题之一在于提供一种实时监控mysql数据库的系统,为有需要此业务场景的系统提供应用,简化业务流程,提高效率。
本发明解决的技术问题之二在于提供一种实时监控mysql数据库系统的监控方法,实现对mysql数据库的实时监控。
本发明解决上述技术问题之一的技术方案是:
所述系统主要由文件配置器、日志缓冲器和监视器组成;文件配置器主要负责配置文件的读取以及初始化;日志缓冲器负责对mysql产生的日志文件进行快速的读取,缩短读取的时间;监视器负责对注册对象进行管理,并且通知注册对象相应的事件和动作,对日志进行监控和分析。
所述的监视器由注册对象队列管理器、分析统计器、事件通知器和日志监视器构成;注册对象队列管理器主要负责对注册到监视器的对象进行管理,包括注册对象生命周期的管理;分析统计器负责对日志各种执行语句进行统计分析,形成统计结果;事件通知器负责把数据库执行的动作通知到注册对象队列里的对象;日志监视器负责对日志内容的变化等进行监测,并通知事件通知器和分析统计器。
所述的文件配置器自动监测操作系统类型,根据操作系统类型到默认的位置搜索mysql数据库的安装信息,并且把安装的信息写入配置文件,如果找不到则提示人工输入配置信息,包括统计数据的信息。
日志缓冲器能够动态实时地把生成的日志信息读入内存,能够对日志的内容进行随机快速地访问,为监视器提供访问。
本发明解决上述技术问题之二的技术方案是:
所述方法包括如下流程:
(1)日志监视器对日志进行监测,如果有日志内容生成,则读取其内容;
(2)日志监视器把读取到的日志内容发送到分析统计器;
(3)分析统计器对日志内容进行分析归类,把统计结果记录到配置的统计结果文件;
(4)分析统计器把分析的结果发送到事件通知器;
(5)事件通知器根据分析结果的类型给队列里的注册对象发送相应的消息类型。
本发明通过文件配置器、日志缓冲器和监视器组成组成的框架,有效实现了实时监控mysql数据库,为有需要此业务场景的系统提供应用,简化业务流程,提高效率。
附图说明
下面结合附图对本发明进一步说明:
图1是本发明的系统架构图;
图2是本发明监控器的架构图;
图3是本发明的流程图;
图4是本发明监视器的流程图。
具体实施方式
见图1、2所示,所述系统主要由文件配置器、日志缓冲器和监视器组成。文件配置器主要负责配置文件的读取以及初始化;日志缓冲器负责对mysql产生的日志文件进行快速的读取,缩短读取的时间;监视器负责对注册对象进行管理,并且通知注册对象相应的事件和动作,对日志进行监控和分析。
上述监视器由以下部分构成:注册对象队列管理器、分析统计器、事件通知器和日志监视器。注册对象队列管理器主要负责对注册到监视器的对象进行管理,例如注册对象生命周期的管理;分析统计器负责对日志各种执行语句进行统计分析,形成统计结果;事件通知器负责把数据库执行的动作通知到注册对象队列里的对象;日志监视器负责对日志内容的变化等进行监测,并通知事件通知器和分析统计器。
整个工作详细流程如下:
1、监视器对文件配置器发起配置文件的信息;
2、文件配置器根据当前操作系统的类型,对默认的安装环境进行搜索,并配置和初始化各种参数,包括日志分析结果的配置;
3、启动日志缓冲器,把日志内容读取到缓冲器;
4、监视器对日志缓冲器进行监控,当日志内容发生变化后,监视器对变化的日志内容进行分析;
5、监视器把分析结果按照配置文件配置的参数记录分析统计结果。
见图3所示,系统的工作流程如下:
1、系统根据当前操作系统的类型对配置文件进行默认配置,如果无法进行默认配置,则需要人工配置;
2、配置完毕后,进行各个参数的初始化工作;
3、把数据库日志读取到缓冲器里;
4、对增量日志的内容进行分析;
5、把分析结果写入分析记录文件;
6、通知注册队列里的对象。
见图4所示,监视器的流程如下:
1、日志监视器监测日志是否有内容变化,如果有内容上的变化则通知分析统计器;
2、分析统计器分析内容后,把分析统计结果记录下来;
3、事件通知器根据分析的结果,产生相应的事件类型;
4、对在注册对象队列里的对象做相应的事件调用,形成监控。

Claims (6)

1.一种实时监控mysql数据库的系统,其特征在于:所述系统主要由文件配置器、日志缓冲器和监视器组成;文件配置器主要负责配置文件的读取以及初始化;日志缓冲器负责对mysql产生的日志文件进行快速的读取,缩短读取的时间;监视器负责对注册对象进行管理,并且通知注册对象相应的事件和动作,对日志进行监控和分析。
2.根据权利要求1所述的实时监控mysql数据库的系统,其特征在于:所述的监视器由注册对象队列管理器、分析统计器、事件通知器和日志监视器构成;注册对象队列管理器主要负责对注册到监视器的对象进行管理,包括注册对象生命周期的管理;分析统计器负责对日志各种执行语句进行统计分析,形成统计结果;事件通知器负责把数据库执行的动作通知到注册对象队列里的对象;日志监视器负责对日志内容的变化等进行监测,并通知事件通知器和分析统计器。
3.根据权利要求1所述的实时监控mysql数据库的系统,其特征在于:所述的文件配置器自动监测操作系统类型,根据操作系统类型到默认的位置搜索mysql数据库的安装信息,并且把安装的信息写入配置文件,如果找不到则提示人工输入配置信息,包括统计数据的信息。
4.根据权利要求2所述的实时监控mysql数据库的系统,其特征在于:所述的文件配置器自动监测操作系统类型,根据操作系统类型到默认的位置搜索mysql数据库的安装信息,并且把安装的信息写入配置文件,如果找不到则提示人工输入配置信息,包括统计数据的信息。
5.根据权利要求1、2、3或4所述的实时监控mysql数据库的系统,其特征在于:日志缓冲器能够动态实时地把生成的日志信息读入内存,能够对日志的内容进行随机快速地访问,为监视器提供访问。
6.一种权利要求1-5任一项所述的实时监控mysql数据库系统的监控方法,其特征在于:所述方法包括如下流程:
(1)日志监视器对日志进行监测,如果有日志内容生成,则读取其内容;
(2)日志监视器把读取到的日志内容发送到分析统计器;
(3)分析统计器对日志内容进行分析归类,把统计结果记录到配置的统计结果文件;
(4)分析统计器把分析的结果发送到事件通知器;
(5)事件通知器根据分析结果的类型给队列里的注册对象发送相应的消息类型。
CN201610508638.5A 2016-06-30 2016-06-30 一种实时监控mysql数据库的系统及其监控方法 Active CN106201823B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610508638.5A CN106201823B (zh) 2016-06-30 2016-06-30 一种实时监控mysql数据库的系统及其监控方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610508638.5A CN106201823B (zh) 2016-06-30 2016-06-30 一种实时监控mysql数据库的系统及其监控方法

Publications (2)

Publication Number Publication Date
CN106201823A true CN106201823A (zh) 2016-12-07
CN106201823B CN106201823B (zh) 2019-02-15

Family

ID=57462670

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610508638.5A Active CN106201823B (zh) 2016-06-30 2016-06-30 一种实时监控mysql数据库的系统及其监控方法

Country Status (1)

Country Link
CN (1) CN106201823B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107491526A (zh) * 2017-08-18 2017-12-19 国云科技股份有限公司 一种实现数据库同步的系统及其方法
CN109669835A (zh) * 2018-09-18 2019-04-23 平安科技(深圳)有限公司 MySQL数据库监控方法、装置、设备及可读存储介质
CN109885448A (zh) * 2018-12-29 2019-06-14 中兴智能交通股份有限公司 一种数据库数据增量实时监控方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101894161A (zh) * 2010-07-22 2010-11-24 北京天融信科技有限公司 一种用于实时监控的循环事件存取方法和装置
US20130297603A1 (en) * 2012-05-01 2013-11-07 Fujitsu Technology Solutions Intellectual Property Gmbh Monitoring methods and systems for data centers
CN104765889A (zh) * 2015-04-30 2015-07-08 北京奇虎科技有限公司 基于数据库高可用框架的切换方法及装置
CN105243147A (zh) * 2015-10-22 2016-01-13 浪潮(北京)电子信息产业有限公司 一种MySQL数据库慢查询日志的管理方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101894161A (zh) * 2010-07-22 2010-11-24 北京天融信科技有限公司 一种用于实时监控的循环事件存取方法和装置
US20130297603A1 (en) * 2012-05-01 2013-11-07 Fujitsu Technology Solutions Intellectual Property Gmbh Monitoring methods and systems for data centers
CN104765889A (zh) * 2015-04-30 2015-07-08 北京奇虎科技有限公司 基于数据库高可用框架的切换方法及装置
CN105243147A (zh) * 2015-10-22 2016-01-13 浪潮(北京)电子信息产业有限公司 一种MySQL数据库慢查询日志的管理方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
董明明: "企业级MySQL数据库在线监控系统的设计与实现", 《万方数据》 *
黄旭: "分布式MySQL数据库集群在线监测系统设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107491526A (zh) * 2017-08-18 2017-12-19 国云科技股份有限公司 一种实现数据库同步的系统及其方法
CN109669835A (zh) * 2018-09-18 2019-04-23 平安科技(深圳)有限公司 MySQL数据库监控方法、装置、设备及可读存储介质
CN109669835B (zh) * 2018-09-18 2022-05-20 平安科技(深圳)有限公司 MySQL数据库监控方法、装置、设备及可读存储介质
CN109885448A (zh) * 2018-12-29 2019-06-14 中兴智能交通股份有限公司 一种数据库数据增量实时监控方法

Also Published As

Publication number Publication date
CN106201823B (zh) 2019-02-15

Similar Documents

Publication Publication Date Title
CN107992398B (zh) 一种业务系统的监控方法和监控系统
CN107729214B (zh) 一种可视化的分布式系统实时监控运维方法及装置
CN110428127B (zh) 自动化分析方法、用户设备、存储介质及装置
US20160274997A1 (en) End user monitoring to automate issue tracking
CN103475535A (zh) 云计算服务器日志管理系统
CN106201823A (zh) 一种实时监控mysql数据库的系统及其监控方法
CN111858251B (zh) 一种基于大数据计算技术的数据安全审计方法及系统
CN101349987A (zh) 一种计算机使用情况的统计分析方法
CN109962792A (zh) 一种基于大数据的全链路监控系统
CN107463490B (zh) 一种应用于平台开发中的集群日志集中收集方法
CN102148963A (zh) 基于云存储面向数字高清网络视频监控的方法和系统
CN111240847A (zh) 数据处理方法、装置、介质和计算设备
CN106534162A (zh) 一种基于远程管理通讯协议的服务器温度监控系统及方法
CN113360413A (zh) 一种代码测试方法及装置
CN103268567B (zh) 面向制造行业管理系统的高效大规模事件侦测与处理方法
CN107678915A (zh) 一种输变电设备监测平台基础资源监控方法
CN110033242B (zh) 工作时间确定方法、装置、设备和介质
US11627193B2 (en) Method and system for tracking application activity data from remote devices and generating a corrective action data structure for the remote devices
CN110019045B (zh) 日志落地方法及装置
CN115525392A (zh) 容器监控方法、装置、电子设备及存储介质
KR102309806B1 (ko) 실시간 가상 서버 성능 데이터의 중앙 집중화 및 진단을 위한 시스템 및 방법
CN115202973A (zh) 应用运行状态的确定方法、装置、电子设备和介质
US20130219163A1 (en) Systems and methods for scheduling changes
US9710164B2 (en) Determining a cause for low disk space with respect to a logical disk
CN112214278A (zh) 一种私有云僵尸虚拟机的识别和处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 523808 19th Floor, Cloud Computing Center, Chinese Academy of Sciences, No. 1 Kehui Road, Songshan Lake Hi-tech Industrial Development Zone, Dongguan City, Guangdong Province

Applicant after: G-Cloud Technology Co., Ltd.

Address before: 523808 No. 14 Building, Songke Garden, Songshan Lake Science and Technology Industrial Park, Dongguan City, Guangdong Province

Applicant before: G-Cloud Technology Co., Ltd.

GR01 Patent grant
GR01 Patent grant