CN112749140A - 一种MySQL慢SQL日志实时收集和优化的方法及系统 - Google Patents

一种MySQL慢SQL日志实时收集和优化的方法及系统 Download PDF

Info

Publication number
CN112749140A
CN112749140A CN202011632661.8A CN202011632661A CN112749140A CN 112749140 A CN112749140 A CN 112749140A CN 202011632661 A CN202011632661 A CN 202011632661A CN 112749140 A CN112749140 A CN 112749140A
Authority
CN
China
Prior art keywords
slow sql
sql log
log
slow
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011632661.8A
Other languages
English (en)
Inventor
丁国兴
马莉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan MgtvCom Interactive Entertainment Media Co Ltd
Original Assignee
Hunan MgtvCom Interactive Entertainment Media Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan MgtvCom Interactive Entertainment Media Co Ltd filed Critical Hunan MgtvCom Interactive Entertainment Media Co Ltd
Priority to CN202011632661.8A priority Critical patent/CN112749140A/zh
Publication of CN112749140A publication Critical patent/CN112749140A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815—Journaling file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种MySQL慢SQL日志实时收集和优化的方法及系统，方法包括：对MySQL中的日志文件进行自动解析，收集到慢SQL日志；对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；将得到的慢SQL日志的优化建议自动发送给相关业务负责人。本发明通过对MySQL中的日志文件进行自动解析，能够快速的收集到慢SQL日志；以及对慢SQL日志分析得到的优化建议自动的发送给相关业务负责人，提高了慢SQL日志的优化效率。

Description

一种MySQL慢SQL日志实时收集和优化的方法及系统
技术领域
本发明涉及数据处理技术领域，尤其涉及一种MySQL慢SQL日志实时收集和优化的方法及系统。
背景技术
目前，对于MySQL(关系型数据库管理系统)慢SQL(Structured Query Language，结构化查询语言)日志的收集、分析主要依赖pt-query-digest、mysqldumpslow等工具，可以方便对单实例的慢SQL日志文件进行统计聚合，但无法对集群或者某个组合的多个实例进行集中分析统计聚合，使用此类工具很难做到慢SQL日志的实时收集分析，一般都是定时分析统计。另外强依赖数据库管理员人工去对SQL日志进行解析，或者人工用开源工具去查看优化建议，并通知业务负责人进行优化。整个优化过程效率很低，在业务越来越多以及变更越来越频繁时无法及时发现慢SQL日志。
因此，如何快速的收集慢SQL日志，以及如何提高慢SQL日志的优化效率，是一项亟待解决的问题。
发明内容
有鉴于此，本发明提供了一种MySQL慢SQL日志实时收集和优化的方法，能够快速的收集慢SQL日志，以及提高慢SQL日志的优化效率。
本发明提供了一种MySQL慢SQL日志实时收集和优化的方法，包括：
对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；
将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。
优选地，所述对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议，包括：
对所述慢SQL日志进行解析，得到解析后的慢SQL日志信息；
对所述慢SQL日志进行签名，得到所述慢SQL日志的签名信息；
获取产生所述慢SQL日志的集群信息和业务信息；
对所述解析后的慢SQL日志信息、所述慢SQL日志的签名信息、所述集群信息和业务信息进行分析，得到所述慢SQL日志的优化建议。
优选地，所述方法还包括：
对收集到的所述慢SQL日志进行展示。
优选地，所述方法还包括：
当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人。
优选地，所述方法还包括：
当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。
一种MySQL慢SQL日志实时收集和优化的系统，包括：
收集模块，用于对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
分析模块，用于对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；
发送模块，用于将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。
优选地，所述分析模块包括：
解析单元，用于对所述慢SQL日志进行解析，得到解析后的慢SQL日志信息；
签名单元，用于对所述慢SQL日志进行签名，得到所述慢SQL日志的签名信息；
获取单元，用于获取产生所述慢SQL日志的集群信息和业务信息；
分析单元，用于对所述解析后的慢SQL日志信息、所述慢SQL日志的签名信息、所述集群信息和业务信息进行分析，得到所述慢SQL日志的优化建议。
优选地，所述系统还包括：
展示模块，用于对收集到的所述慢SQL日志进行展示。
优选地，所述系统还包括：
报警模块，用于当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人。
优选地，所述报警模块还用于：
当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。
综上所述，本发明公开了一种MySQL慢SQL日志实时收集和优化的方法，首先对MySQL中的日志文件进行自动解析，收集到慢SQL日志；然后对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；将得到的慢SQL日志的优化建议自动发送给相关业务负责人。本发明通过对MySQL中的日志文件进行自动解析，能够快速的收集到慢SQL日志；以及对慢SQL日志分析得到的优化建议自动的发送给相关业务负责人，提高了慢SQL日志的优化效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明公开的一种MySQL慢SQL日志实时收集和优化的方法实施例1的方法流程图；
图2为本发明公开的一种MySQL慢SQL日志实时收集和优化的方法实施例2的方法流程图；
图3为本发明公开的一种MySQL慢SQL日志实时收集和优化的方法实施例3的方法流程图；
图4为本发明公开的一种MySQL慢SQL日志实时收集和优化的系统实施例1的结构示意图；
图5为本发明公开的一种MySQL慢SQL日志实时收集和优化的系统实施例2的结构示意图；
图6为本发明公开的一种MySQL慢SQL日志实时收集和优化的系统实施例3的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1所示，为本发明公开的一种MySQL慢SQL日志实时收集和优化的方法实施例1的方法流程图，所述方法可以包括以下步骤：
S101、对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
当需要实现慢SQL日志的实时收集和优化时，通过在每个MySQL实例所在机器部署的logParser程序对MySQL中的日志文件进行自动解析，收集到慢SQL日志。
S102、对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；
在收集到慢SQL日志后，进一步对收集到的每个慢SQL日志进行分析，得到每个慢SQL日志对应的优化建议。
S103、将得到的慢SQL日志的优化建议自动发送给相关业务负责人。
然后，将得到的慢SQL日志的优化建议字段发送给相关业务负责人，以便相关业务负责人根据接收到的优化建议对对应的慢SQL日志进行优化。
综上所述，在上述实施例中，首先对MySQL中的日志文件进行自动解析，收集到慢SQL日志；然后对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；将得到的慢SQL日志的优化建议自动发送给相关业务负责人。本发明通过对MySQL中的日志文件进行自动解析，能够快速的收集到慢SQL日志；以及对慢SQL日志分析得到的优化建议自动的发送给相关业务负责人，提高了慢SQL日志的优化效率。
如图2所示，为本发明公开的一种MySQL慢SQL日志实时收集和优化的方法实施例2的方法流程图，所述方法可以包括以下步骤：
S201、对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
当需要实现慢SQL日志的实时收集和优化时，通过在每个MySQL实例所在机器部署的logParser程序对MySQL中的日志文件进行自动解析，收集到慢SQL日志。
S202、对慢SQL日志进行解析，得到解析后的慢SQL日志信息；
在收集到慢SQL日志后，进一步对收集到的每个慢SQL日志进行解析，得到解析后的慢SQL日志信息(如，慢SQL日志中的库、表明信息)。
S203、对慢SQL日志进行签名，得到慢SQL日志的签名信息；
并对慢SQL日志进行md5签名，得到慢SQL日志的签名信息。
S204、获取产生慢SQL日志的集群信息和业务信息；
并请求运维管理平台，获取产生慢SQL日志的集群信息和业务信息。
S205、对解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议；
然后，对得到的解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议。
S206、将得到的慢SQL日志的优化建议自动发送给相关业务负责人。
然后，将得到的慢SQL日志的优化建议字段发送给相关业务负责人，以便相关业务负责人根据接收到的优化建议对对应的慢SQL日志进行优化。
综上所述，本实施例在上述实施例的基础在，在对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议时，具体可以对慢SQL日志进行解析，得到解析后的慢SQL日志信息；对慢SQL日志进行签名，得到慢SQL日志的签名信息；获取产生慢SQL日志的集群信息和业务信息；然后对解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到所慢SQL日志的优化建议。
如图3所示，为本发明公开的一种MySQL慢SQL日志实时收集和优化的方法实施例3的方法流程图，所述方法可以包括以下步骤：
S301、对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
当需要实现慢SQL日志的实时收集和优化时，通过在每个MySQL实例所在机器部署的logParser程序对MySQL中的日志文件进行自动解析，收集到慢SQL日志。
S302、对慢SQL日志进行解析，得到解析后的慢SQL日志信息；
在收集到慢SQL日志后，进一步对收集到的每个慢SQL日志进行解析，得到解析后的慢SQL日志信息(如，慢SQL日志中的库、表明信息)。
S303、对慢SQL日志进行签名，得到慢SQL日志的签名信息；
并对慢SQL日志进行md5签名，得到慢SQL日志的签名信息。
S304、获取产生慢SQL日志的集群信息和业务信息；
并请求运维管理平台，获取产生慢SQL日志的集群信息和业务信息。
S305、对解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议；
然后，对得到的解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议。
S306、将得到的慢SQL日志的优化建议自动发送给相关业务负责人；
然后，将得到的慢SQL日志的优化建议字段发送给相关业务负责人，以便相关业务负责人根据接收到的优化建议对对应的慢SQL日志进行优化。
S307、对收集到的慢SQL日志进行展示；
还可以进一步对收到的慢SQL日志进行展示，通过展示能够更便于获知慢SQL日志。
S308、当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人；
在上述过程中，当有新增慢SQL日志时，即当收集到新的慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人，便于相关业务负责人及时对新增的慢SQL日志进行处理。
S309、当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。
在上述过程中，对慢SQL日志进行统计分析，当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人，以便相关业务负责人及时作出处理。
综上所述，本实施例在上述实施例的基础上，能够进一步对收到的慢SQL日志进行展示，通过对慢SQL日志进行展示能够更便于获知慢SQL日志，进一步提升了用户体验；当有新增慢SQL日志时，能够将新增的慢SQL日志报警到相关业务负责人，便于相关业务负责人及时对新增的慢SQL日志进行处理；当慢SQL日志量比例增长异常时，能够将异常信息报警到相关业务负责人，以便相关业务负责人及时作出处理。
如图4所示，为本发明公开的一种MySQL慢SQL日志实时收集和优化的系统实施例1的结构示意图，所述系统可以包括：
收集模块401，用于对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
当需要实现慢SQL日志的实时收集和优化时，通过在每个MySQL实例所在机器部署的logParser程序对MySQL中的日志文件进行自动解析，收集到慢SQL日志。
分析模块402，用于对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；
在收集到慢SQL日志后，进一步对收集到的每个慢SQL日志进行分析，得到每个慢SQL日志对应的优化建议。
发送模块403，用于将得到的慢SQL日志的优化建议自动发送给相关业务负责人。
然后，将得到的慢SQL日志的优化建议字段发送给相关业务负责人，以便相关业务负责人根据接收到的优化建议对对应的慢SQL日志进行优化。
综上所述，在上述实施例中，首先对MySQL中的日志文件进行自动解析，收集到慢SQL日志；然后对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；将得到的慢SQL日志的优化建议自动发送给相关业务负责人。本发明通过对MySQL中的日志文件进行自动解析，能够快速的收集到慢SQL日志；以及对慢SQL日志分析得到的优化建议自动的发送给相关业务负责人，提高了慢SQL日志的优化效率。
如图5所示，为本发明公开的一种MySQL慢SQL日志实时收集和优化的系统实施例2的结构示意图，所述系统可以包括：
收集模块501，用于对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
当需要实现慢SQL日志的实时收集和优化时，通过在每个MySQL实例所在机器部署的logParser程序对MySQL中的日志文件进行自动解析，收集到慢SQL日志。
解析单元502，用于对慢SQL日志进行解析，得到解析后的慢SQL日志信息；
在收集到慢SQL日志后，进一步对收集到的每个慢SQL日志进行解析，得到解析后的慢SQL日志信息(如，慢SQL日志中的库、表明信息)。
签名单元503，用于对慢SQL日志进行签名，得到慢SQL日志的签名信息；
并对慢SQL日志进行md5签名，得到慢SQL日志的签名信息。
获取单元504，用于获取产生慢SQL日志的集群信息和业务信息；
并请求运维管理平台，获取产生慢SQL日志的集群信息和业务信息。
分析单元505，用于对解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议；
然后，对得到的解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议。
发送模块506，用于将得到的慢SQL日志的优化建议自动发送给相关业务负责人。
然后，将得到的慢SQL日志的优化建议字段发送给相关业务负责人，以便相关业务负责人根据接收到的优化建议对对应的慢SQL日志进行优化。
综上所述，本实施例在上述实施例的基础在，在对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议时，具体可以对慢SQL日志进行解析，得到解析后的慢SQL日志信息；对慢SQL日志进行签名，得到慢SQL日志的签名信息；获取产生慢SQL日志的集群信息和业务信息；然后对解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到所慢SQL日志的优化建议。
如图6所示，为本发明公开的一种MySQL慢SQL日志实时收集和优化的系统实施例3的结构示意图，所述系统可以包括：
收集模块601，用于对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
当需要实现慢SQL日志的实时收集和优化时，通过在每个MySQL实例所在机器部署的logParser程序对MySQL中的日志文件进行自动解析，收集到慢SQL日志。
解析单元602，用于对慢SQL日志进行解析，得到解析后的慢SQL日志信息；
在收集到慢SQL日志后，进一步对收集到的每个慢SQL日志进行解析，得到解析后的慢SQL日志信息(如，慢SQL日志中的库、表明信息)。
签名单元603，用于对慢SQL日志进行签名，得到慢SQL日志的签名信息；
并对慢SQL日志进行md5签名，得到慢SQL日志的签名信息。
获取单元604，用于获取产生慢SQL日志的集群信息和业务信息；
并请求运维管理平台，获取产生慢SQL日志的集群信息和业务信息。
分析单元605，用于对解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议；
然后，对得到的解析后的慢SQL日志信息、慢SQL日志的签名信息、集群信息和业务信息进行分析，得到慢SQL日志的优化建议。
发送模块606，用于将得到的慢SQL日志的优化建议自动发送给相关业务负责人；
然后，将得到的慢SQL日志的优化建议字段发送给相关业务负责人，以便相关业务负责人根据接收到的优化建议对对应的慢SQL日志进行优化。
展示模块607，用于对收集到的慢SQL日志进行展示；
还可以进一步对收到的慢SQL日志进行展示，通过展示能够更便于获知慢SQL日志。
报警模块608，用于当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人；
在上述过程中，当有新增慢SQL日志时，即当收集到新的慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人，便于相关业务负责人及时对新增的慢SQL日志进行处理。
报警模块608，还用于当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。
在上述过程中，对慢SQL日志进行统计分析，当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人，以便相关业务负责人及时作出处理。
综上所述，本实施例在上述实施例的基础上，能够进一步对收到的慢SQL日志进行展示，通过对慢SQL日志进行展示能够更便于获知慢SQL日志，进一步提升了用户体验；当有新增慢SQL日志时，能够将新增的慢SQL日志报警到相关业务负责人，便于相关业务负责人及时对新增的慢SQL日志进行处理；当慢SQL日志量比例增长异常时，能够将异常信息报警到相关业务负责人，以便相关业务负责人及时作出处理。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种MySQL慢SQL日志实时收集和优化的方法，其特征在于，包括：
对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；
将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。
2.根据权利要求1所述的方法，其特征在于，所述对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议，包括：
对所述慢SQL日志进行解析，得到解析后的慢SQL日志信息；
对所述慢SQL日志进行签名，得到所述慢SQL日志的签名信息；
获取产生所述慢SQL日志的集群信息和业务信息；
对所述解析后的慢SQL日志信息、所述慢SQL日志的签名信息、所述集群信息和业务信息进行分析，得到所述慢SQL日志的优化建议。
3.根据权利要求2所述的方法，其特征在于，还包括：
对收集到的所述慢SQL日志进行展示。
4.根据权利要求3所述的方法，其特征在于，还包括：
当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人。
5.根据权利要求4所述的方法，其特征在于，还包括：
当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。
6.一种MySQL慢SQL日志实时收集和优化的系统，其特征在于，包括：
收集模块，用于对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
分析模块，用于对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；
发送模块，用于将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。
7.根据权利要求6所述的系统，其特征在于，所述分析模块，包括：
解析单元，用于对所述慢SQL日志进行解析，得到解析后的慢SQL日志信息；
签名单元，用于对所述慢SQL日志进行签名，得到所述慢SQL日志的签名信息；
获取单元，用于获取产生所述慢SQL日志的集群信息和业务信息；
分析单元，用于对所述解析后的慢SQL日志信息、所述慢SQL日志的签名信息、所述集群信息和业务信息进行分析，得到所述慢SQL日志的优化建议。
8.根据权利要求7所述的系统，其特征在于，还包括：
展示模块，用于对收集到的所述慢SQL日志进行展示。
9.根据权利要求8所述的系统，其特征在于，还包括：
报警模块，用于当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人。
10.根据权利要求9所述的系统，其特征在于，所述报警模块还用于：
当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。
CN202011632661.8A 2020-12-31 2020-12-31 一种MySQL慢SQL日志实时收集和优化的方法及系统 Pending CN112749140A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011632661.8A CN112749140A (zh) 2020-12-31 2020-12-31 一种MySQL慢SQL日志实时收集和优化的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011632661.8A CN112749140A (zh) 2020-12-31 2020-12-31 一种MySQL慢SQL日志实时收集和优化的方法及系统

Publications (1)

Publication Number Publication Date
CN112749140A true CN112749140A (zh) 2021-05-04

Family

ID=75650891

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011632661.8A Pending CN112749140A (zh) 2020-12-31 2020-12-31 一种MySQL慢SQL日志实时收集和优化的方法及系统

Country Status (1)

Country Link
CN (1) CN112749140A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113468218A (zh) * 2021-06-30 2021-10-01 建信金融科技有限责任公司 一种对数据库慢sql进行监测和管理的方法和装置
CN118332009A (zh) * 2024-06-12 2024-07-12 舟谱数据技术南京有限公司 一种sql数据库性能优化系统及其控制方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105653607A (zh) * 2015-12-23 2016-06-08 北京奇虎科技有限公司 Sql日志收集分析方法及装置
US20180322154A1 (en) * 2017-05-05 2018-11-08 Servicenow, Inc. Database performance tuning framework
CN109871392A (zh) * 2019-02-18 2019-06-11 浪潮软件集团有限公司 一种分布式应用系统下的慢sql实时数据采集方法
CN110795614A (zh) * 2019-09-27 2020-02-14 广东浪潮大数据研究有限公司 一种索引自动优化方法及装置
CN111241050A (zh) * 2020-01-06 2020-06-05 浪潮软件集团有限公司 一种用于大数据平台的联动分析系统及方法
CN111581232A (zh) * 2020-04-30 2020-08-25 重庆富民银行股份有限公司 一种基于elk的慢sql实时分析方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105653607A (zh) * 2015-12-23 2016-06-08 北京奇虎科技有限公司 Sql日志收集分析方法及装置
US20180322154A1 (en) * 2017-05-05 2018-11-08 Servicenow, Inc. Database performance tuning framework
CN109871392A (zh) * 2019-02-18 2019-06-11 浪潮软件集团有限公司 一种分布式应用系统下的慢sql实时数据采集方法
CN110795614A (zh) * 2019-09-27 2020-02-14 广东浪潮大数据研究有限公司 一种索引自动优化方法及装置
CN111241050A (zh) * 2020-01-06 2020-06-05 浪潮软件集团有限公司 一种用于大数据平台的联动分析系统及方法
CN111581232A (zh) * 2020-04-30 2020-08-25 重庆富民银行股份有限公司 一种基于elk的慢sql实时分析方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
郭舒婷: "多粒度日志自动解析方法研究", 《中国优秀硕士论文全文库》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113468218A (zh) * 2021-06-30 2021-10-01 建信金融科技有限责任公司 一种对数据库慢sql进行监测和管理的方法和装置
CN118332009A (zh) * 2024-06-12 2024-07-12 舟谱数据技术南京有限公司 一种sql数据库性能优化系统及其控制方法
CN118332009B (zh) * 2024-06-12 2024-08-06 舟谱数据技术南京有限公司 一种sql数据库性能优化系统及其控制方法

Similar Documents

Publication Publication Date Title
CN111274095B (zh) 日志数据处理方法、装置、设备及计算机可读存储介质
US10031829B2 (en) Method and system for it resources performance analysis
US20140351217A1 (en) Database snapshot analysis
WO2019153487A1 (zh) 系统性能的度量方法、装置、存储介质和服务器
CN104966172A (zh) 一种用于企业经营数据分析的大数据可视化分析处理系统
CN111740884B (zh) 一种日志处理方法及电子设备、服务器、存储介质
CN105373894A (zh) 基于稽查数据的电力营销业务诊断模型的建立方法及系统
CN110347582B (zh) 埋点测试方法和装置
CN106951360B (zh) 数据统计完整度计算方法和系统
CN112749140A (zh) 一种MySQL慢SQL日志实时收集和优化的方法及系统
CN112463834B (zh) 流式处理中自动实现根因分析的方法、装置及电子设备
CN111222790B (zh) 风险事件发生概率的预测方法、装置、设备及存储介质
CN112416705A (zh) 一种异常信息的处理方法和装置
CN112069049A (zh) 数据监控管理方法、装置、服务器及可读存储介质
CN115391082A (zh) 一种异常数据诊断方法、系统及存储介质
US7617313B1 (en) Metric transport and database load
CN112612680A (zh) 一种消息告警方法、系统、计算机设备及存储介质
CN113032252A (zh) 埋点数据的收集方法、装置、客户端设备和存储介质
CN108959101A (zh) 测试结果处理方法、装置、设备及存储器软件测试系统
CN110677271A (zh) 基于elk的大数据告警方法、装置、设备及存储介质
CN113220551A (zh) 指标趋势预测及预警方法、装置、电子设备及存储介质
CN112463801A (zh) 一种报表推送方法、装置、终端设备及存储介质
CN115471336A (zh) 交易系统的异常检测方法、装置和服务器
CN112559645A (zh) 一种海量运维数据的处理方法及装置
CN113220549A (zh) 爬虫数据监控方法、系统、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210504

RJ01 Rejection of invention patent application after publication