CN108509639B - 表信息管理方法、装置及可读存储介质 - Google Patents
表信息管理方法、装置及可读存储介质 Download PDFInfo
- Publication number
- CN108509639B CN108509639B CN201810320082.6A CN201810320082A CN108509639B CN 108509639 B CN108509639 B CN 108509639B CN 201810320082 A CN201810320082 A CN 201810320082A CN 108509639 B CN108509639 B CN 108509639B
- Authority
- CN
- China
- Prior art keywords
- partition
- table information
- saturation
- database
- mysql
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007726 management method Methods 0.000 title claims abstract description 70
- 238000005192 partition Methods 0.000 claims abstract description 180
- 238000012216 screening Methods 0.000 claims abstract description 34
- 238000000034 method Methods 0.000 claims abstract description 22
- 238000001514 detection method Methods 0.000 claims description 14
- 238000007619 statistical method Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 9
- 238000013439 planning Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000002349 favourable effect Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Abstract
本发明实施例提供一种表信息管理方法、装置及可读存储介质。该方法包括：基于任务调度策略获取每个Mysql实例下所有表的表信息；将每个Mysql实例的表信息转存到目标数据库对应的分区中；针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展；在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件；基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示。由此，无需人工干预，能够大幅度提高表信息的检索效率，同时便于数据库管理人员进行数据库容量规划。
Description
技术领域
本发明涉及数据管理技术领域，具体而言，涉及一种表信息管理方法、装置及可读存储介质。
背景技术
当前，Mysql的表信息能够提供很多有用的数据，但是目前没有一种方案设计能够把这些表信息统一化地集中管理并展示，所以在我们海量Mysql实例集群运维中经常众多问题。例如，在处理SQL需求时，数据库管理人员往往需要根据记忆去连接对应的数据库或者表所在的实例处理，如果所维护的集群中有成千上万张表，但是又忘记具体每张表对应的实例，此时可能就需要从实例中挨个去检查验证该表是否存储于对应的实例中，检索效率非常低下。同时，由于数据库管理人员无法实时了解到每张表的容量情况，不利于数据库管理人员进行数据库容量规划。
发明内容
为了克服现有技术中的上述不足，本发明的目的在于提供一种表信息管理方法、装置及可读存储介质，无需人工干预，能够大幅度提高表信息的检索效率，同时便于数据库管理人员进行数据库容量规划。
为了实现上述目的，本发明实施例采用的技术方案如下：
第一方面，本发明实施例提供一种表信息管理方法，应用于服务器，所述方法包括：
基于任务调度策略获取每个Mysql实例下所有表的表信息；
将每个Mysql实例的表信息转存到目标数据库对应的分区中，其中，所述表信息包括Mysql实例的IP地址、端口、数据库名称、表名称、表数据行数、表占用内存空间、表选项、分区键以及表信息存储时间；
针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展；
在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件；
基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示。
可选地，在所述将每个Mysql实例的表信息转存到目标数据库对应的分区中的步骤之后，所述方法还包括：
对所述数据库中的每个Mysql实例的表信息中的表行数进行统计分析，生成统计分析报告后发送给目标终端，其中，所述统计分析报告中包括于每个Mysql实例的表信息中的表行数的趋势图。
可选地，所述基于任务调度策略获取每个Mysql实例下所有表的表信息的步骤，包括：
从所述任务调度策略中获取当前配置的饱和度检测频率；
基于所述饱和度检测频率获取每个Mysql实例下所有表的表信息。
可选地，所述针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展的步骤，包括：
针对每个分区，获取该分区的分区信息，所述分区信息包括分区规则列名和分区使用值；
根据所述分区规则列名获取对应的分区饱和阈值；
基于所述分区使用值和所述分区饱和阈值计算出对应的分区饱和度；
判断所述分区饱和度是否大于对应的预设饱和度，若是，则发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展。
可选地，所述基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示的步骤，包括：
基于所述检索筛选条件从所述数据库中检索对应的表信息；
将检索到的表信息封装为JSON格式数据；
将所述JSON格式数据返回所述用户终端进行显示。
可选地，在所述将每个Mysql实例的表信息转存到目标数据库对应的分区中的步骤之后，所述方法还包括：
针对每个Mysql实例，计算在预设时间段内该Mysql实例的增量数据信息，其中，所述增量数据信息包括该Mysql实例下所有表的表占用内存空间的增量数据；
根据每个Mysql实例的增量数据信息生成所述目标数据库的容量增长趋势。
第二方面，本发明实施例还提供一种表信息管理装置，应用于服务器，所述装置包括：
获取模块，用于基于任务调度策略获取每个Mysql实例下所有表的表信息；
转存模块，用于将每个Mysql实例的表信息转存到目标数据库对应的分区中，其中，所述表信息包括Mysql实例的IP地址、端口、数据库名称、表名称、表数据行数、表占用内存空间、表选项、分区键以及表信息存储时间；
检测模块，用于针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展；
获得模块，用于在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件；
检索模块，用于基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示。
第三方面，本发明实施例还提供一种可读存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序被执行时实现上述的表信息管理方法。
相对于现有技术而言，本发明具有以下有益效果：
本发明实施例提供一种表信息管理方法、装置及可读存储介质，首先，基于任务调度策略获取每个Mysql实例下所有表的表信息，并将每个Mysql实例的表信息转存到目标数据库对应的分区中，接着，针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展，而后，在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件，最后基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示。由此，通过自动获取每个Mysql实例下所有表的表信息并存入目标数据库，无需人工干预，通过获取检索筛选条件便可瞬间全局定位到某张表所在的数据库实例，以及该表的表信息，能够大幅度提高表信息的检索效率，同时通过检测数据库中各个分区的饱和度，以提示数据库管理人员对该分区进行扩展，由此便于数据库管理人员进行数据库容量规划。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍。
图1为本发明实施例提供的用于实现表信息管理方法的服务器的一种结构示意框图；
图2为本发明实施例提供的表信息管理方法的一种流程示意图；
图3为本发明实施例提供的表信息管理方法的另一种流程示意图；
图4为本发明实施例提供的表信息管理方法的另一种流程示意图。
图标：100-服务器；110-存储器；120-处理器；200-表信息管理装置；210-获取模块；220-转存模块；230-检测模块；240-获得模块；250-检索模块。
具体实施方式
请参阅图1，为本发明实施例提供的用于实现表信息管理方法的服务器100的结构示意框图。本实施例中，所述服务器100包括表信息管理装置200、存储器110以及处理器120。在本发明实施例中，表信息管理装置200包括至少一个可以软件或固件(Firmware)的形式存储于所述存储器110中或固化在所述服务器100的操作系统(Operating System，OS)中的软件功能模块。所述处理器120用于执行所述存储器110中存储的可执行软件模块，例如，所述表信息管理装置200所包括的软件功能模块及计算机程序等。本实施例中，所述表信息管理装置200也可以集成于所述操作系统中，作为所述操作系统的一部分。具体地，所述表信息管理装置200可以包括：
获取模块210，用于基于任务调度策略获取每个Mysql实例下所有表的表信息；
转存模块220，用于将每个Mysql实例的表信息转存到目标数据库对应的分区中，其中，所述表信息包括Mysql实例的IP地址、端口、数据库名称、表名称、表数据行数、表占用内存空间、表选项、分区键以及表信息存储时间；
检测模块230，用于针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展。
可选地，所述服务器100可针对每个分区，获取该分区的分区信息，所述分区信息包括分区规则列名和分区使用值。接着，根据所述分区规则列名获取对应的分区饱和阈值，并基于所述分区使用值和所述分区饱和阈值计算出对应的分区饱和度，然后判断所述分区饱和度是否大于对应的预设饱和度，若是，则发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展。
获得模块240，用于在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件；
检索模块250，用于基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示。
可选地，所述获取模块210，还可以用于从所述任务调度策略中获取当前配置的饱和度检测频率，并基于所述饱和度检测频率获取每个Mysql实例下所有表的表信息。
请参阅图2，为本发明实施例提供的表信息管理方法的一种流程示意图，所述方法由图1中所示的表信息管理系统执行。所应说明的是，本发明实施例提供的表信息管理方法不以图2及以下所述的具体顺序为限制。所述方法的具体流程如下：
步骤S210，基于任务调度策略获取每个Mysql实例下所有表的表信息。
本实施例中，服务器100可从所述任务调度策略中获取当前配置的饱和度检测频率，并基于所述饱和度检测频率获取每个Mysql实例下所有表的表信息。其中，所述任务调度策略可通过Django-celery任务调度函数实现。该Django-celery任务调度函数可利用Django-celery对获取每个Mysql实例下所有表的表信息进行定时的调度。例如可以暂定为，每天凌晨运行一次获取每个Mysql实例下所有表的表信息，如此可以方便后续进行表增长趋势的判断。
步骤S220，将每个Mysql实例的表信息转存到目标数据库对应的分区中。
在一种实施方式中，获取每个Mysql实例下所有表的表信息可通过表信息搜集函数实现。该表信息搜集函数可搜集到每个Mysql实例下所有表的表信息，然后存储到后端的目标数据库中，具体可以通过如下方式实现：
首先，读取每个Mysql实例中所有待获取表信息的实例列表，根据这个列表开始循环处理。接着，利用pymysql连接每个Mysql实例，并运行如下的SQL语句，获取到该Mysql实例下所有表的表信息：
select*from information_schema where table_schema not in('performance_schema','mysql','information_schema','sys','test')
接着，连接目标数据库，把上述获取到的每个Mysql实例中所有表的表信息存入对应的分区中，直至循环结束。
值得说明的是，所述表信息包括可Mysql实例的IP地址、端口、数据库名称、表名称、表数据行数、表占用内存空间、表选项、分区键以及表信息存储时间。下面对上述表信息的数据格式进行说明：
IP，字符串类型，用于存放Mysql实例的IP地址。
Port，数字类型，用于存放Mysql实例的端口。
db_name，字符串类型，用于存放Mysql实例数据库名称。
tb_nam，字符串类型，用于存放表名称
row_count，数字类型，用于存放该表的表数据行数。
table_size，数字类型，用于存放该表占用内存空间。
table_options，字符串类型，用于存放该表的表选项，也即该表是否为分区表。
partition_key，字符串类型，用于存放分区键。
create_time，日期类型，用于存放表信息存储时间，也即插入这条表信息的时间。
由此，通过上述步骤，能够自动获取每个Mysql实例下所有表的表信息并存入目标数据库，无需人工干预。
可选地，请参阅图3，在该步骤S220之后，所述方法还可以包括如下步骤：
步骤S225，对所述数据库中的每个Mysql实例的表信息中的表行数进行统计分析，生成统计分析报告后发送给目标终端。
本实施例中，所述统计分析报告中可包括于每个Mysql实例的表信息中的表行数的趋势图。详细地，在一种实施方式中，可通过集中存储目标数据库中的某张表的每日数据中TABLE_ROWS列，也即表行数的信息，得到日期与TABLE_ROWS列的对应关系的JSON串列表，以得到统计分析报告并返回到目标终端的前端页面，前端页面通过echarts等javascript进行渲染数据，最终可在网页上呈现出一个趋势图的形式，以便于用户简单直观地了解TABLE_ROWS列的趋势变化，提高用户体验。
依旧参阅图2，步骤S230，针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展。
在实际实施过程中，由于数据库管理人员无法实时了解到每张表的容量情况，因此不利于数据库管理人员进行数据库容量规划。为了解决上述问题，在一种实施方式中，所述步骤S230可以通过如下方式实现：
首先，针对每个分区，获取该分区的分区信息，所述分区信息包括分区规则列名和分区使用值。例如，可以运行如下SQL，获取目前所有分区的信息：
select TABLE_SCHEMA,TABLE_NAME,max(PARTITION_OR DINAL_POSITION)
as'MaxPartition',PARTITION_EXPRESSION as'column',
max(PARTITION_DESCRIPTION)as'MaxValue',PARTITION_METHOD
from INFORMATION_SCHEMA.PARTITIONS where
PARTITION_DESCRIPTION<>'MAXVALUE'and
PARTITION_METHOD＝’RANGE’group by
TABLE_SCHEMA,TABLE_NAME。
其中，上述PARTITION_DESCRIPTION列的值即为分区使用值max_defined。
接着，根据所述分区规则列名获取对应的分区饱和阈值，也即根据上述得到的PARTITION_EXPRESSION列的值，从该分区中获取对应的分区饱和阈值max_data。
接着，基于所述分区使用值max_defined和所述分区饱和阈值max_data计算出对应的分区饱和度max_data/max_defined。
最后，判断所述分区饱和度max_data/max_defined是否大于对应的预设饱和度(例如0.8)，若是，则发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展。
基于上述步骤，本实施例通过检测数据库中各个分区的饱和度，以提示数据库管理人员对该分区进行扩展，由此便于数据库管理人员进行数据库容量规划。
步骤S240，在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件。
本实施例中，服务器100可利用django框架，构建向用户展现的前端HTML页面，该页面可用于分页展示目标数据库中记录的表信息，并提供按照各种条件维度的筛选功能，例如IP地址、端口、数据库名称、表名称、表数据行数等等。当需要对表信息进行管理时，用户可向用户终端的前端HTML输入对应的检索筛选条件，并通过通过该用户终端向所述服务器100发送表信息管理请求，服务器100在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件。
步骤S250，基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示。
本实施例中，服务器100可基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息封装为JSON格式数据，而后将所述JSON格式数据返回所述用户终端进行显示。
作为一种实施方式，所述服务器100可利用ajax post将所述检索筛选条件传递到后端，再利用Python的pymysql包连接并获取目标数据库中存储的对应的表信息，把查询出对应的表信息通过Python的JSON模块封装成JSON的格式后，返回到所述用户终端的前端页面展示出来。
基于上述步骤，通过获取检索筛选条件便可瞬间全局定位到某张表所在的数据库实例，以及该表的表信息，由此能够大幅度提高表信息的检索效率。
为了进一步便于数据库管理人员进行数据库容量规划，可选地，所述方法还可以包括如下步骤：
步骤S260，针对每个Mysql实例，计算在预设时间段内该Mysql实例的增量数据信息。
步骤S270，根据每个Mysql实例的增量数据信息生成所述目标数据库的容量增长趋势。
本实施例中，所述服务器100通过集中存储数据库中的每个Mysql实例的增量数据信息，所述增量数据信息可包括该Mysql实例下所有表的表占用内存空间的增量数据，也即所有表的table_size的总和信息，由此可以计算出每个预设时间段(例如每天)中每个Mysql实例的增量数据大小，然后根据这些增量数据的趋势，便可预估出该目标数据库的容量增长趋势，例如该目标数据库在未来一个月甚至一年的容量大小，由此，通过对规律时间段的历史数据进行分析得到的目标数据库的容量增长趋势，进行目标数据库的容量评估，以得到一个非常科学准确的容量预判，便于数据库管理人员进行数据库容量规划。
进一步地，本发明较佳实施例还提供一种可读存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序运行时实现上述的表信息管理方法。
综上所述，本发明实施例提供一种表信息管理方法、装置及可读存储介质，首先，基于任务调度策略获取每个Mysql实例下所有表的表信息，并将每个Mysql实例的表信息转存到目标数据库对应的分区中，接着，针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展，而后，在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件，最后基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示。由此，通过自动获取每个Mysql实例下所有表的表信息并存入目标数据库，无需人工干预，通过获取检索筛选条件便可瞬间全局定位到某张表所在的数据库实例，以及该表的表信息，能够大幅度提高表信息的检索效率，同时通过检测数据库中各个分区的饱和度，以提示数据库管理人员对该分区进行扩展，由此便于数据库管理人员进行数据库容量规划。
应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
可以替换的，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等
需要说明的是，在本文中，术语"包括"、"包含"或者其任何其它变体意在涵盖非排它性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其它要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句"包括一个……"限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
Claims (9)
1.一种表信息管理方法，其特征在于，应用于服务器，所述方法包括：
基于任务调度策略获取每个Mysql实例下所有表的表信息；将每个Mysql实例的表信息转存到目标数据库对应的分区中，其中，所述表信息包括Mysql实例的IP地址、端口、数据库名称、表名称、表数据行数、表占用内存空间、表选项、分区键以及表信息存储时间；
针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展；
在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件，其中，所述检索筛选条件包括IP地址、端口、数据库名称、表名称、表数行中的中的至少一种；
基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示；
针对每个Mysql实例，计算在预设时间段内该Mysql实例的增量数据信息，其中，所述增量数据信息包括该Mysql实例下所有表的表占用内存空间的增量数据；
根据每个Mysql实例的增量数据信息生成所述目标数据库的容量增长趋势，其中，所述增长趋势为所述Mysql实例在未来预设时段内的容量大小。
2.根据权利要求1所述的表信息管理方法，其特征在于，在所述将每个Mysql实例的表信息转存到目标数据库对应的分区中的步骤之后，所述方法还包括：
对所述数据库中的每个Mysql实例的表信息中的表行数进行统计分析，生成统计分析报告后发送给目标终端，其中，所述统计分析报告中包括于每个Mysql实例的表信息中的表行数的趋势图。
3.根据权利要求1所述的表信息管理方法，其特征在于，所述基于任务调度策略获取每个Mysql实例下所有表的表信息的步骤，包括：
从所述任务调度策略中获取当前配置的饱和度检测频率；
基于所述饱和度检测频率获取每个Mysql实例下所有表的表信息。
4.根据权利要求1所述的表信息管理方法，其特征在于，所述针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展的步骤，包括：
针对每个分区，获取该分区的分区信息，所述分区信息包括分区规则列名和分区使用值；
根据所述分区规则列名获取对应的分区饱和阈值；
基于所述分区使用值和所述分区饱和阈值计算出对应的分区饱和度；
判断所述分区饱和度是否大于对应的预设饱和度，若是，则发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展。
5.根据权利要求1所述的表信息管理方法，其特征在于，所述基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示的步骤，包括：
基于所述检索筛选条件从所述数据库中检索对应的表信息；
将检索到的表信息封装为JSON格式数据；
将所述JSON格式数据返回所述用户终端进行显示。
6.一种表信息管理装置，其特征在于，应用于服务器，所述装置包括：
获取模块，用于基于任务调度策略获取每个Mysql实例下所有表的表信息；
转存模块，用于将每个Mysql实例的表信息转存到目标数据库对应的分区中，其中，所述表信息包括Mysql实例的IP地址、端口、数据库名称、表名称、表数据行数、表占用内存空间、表选项、分区键以及表信息存储时间；
检测模块，用于针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展；
获得模块，用于在接收到用户终端发送的表信息管理请求时，从所述表信息管理请求获得检索筛选条件，其中，所述检索筛选条件包括IP地址、端口、数据库名称、表名称、表数行中的中的至少一种；
检索模块，用于基于所述检索筛选条件从所述数据库中检索对应的表信息，并将检索到的表信息发送给所述用户终端进行显示；
所述检测模块还用于针对每个Mysql实例，计算在预设时间段内该Mysql实例的增量数据信息，其中，所述增量数据信息包括该Mysql实例下所有表的表占用内存空间的增量数据；
根据每个Mysql实例的增量数据信息生成所述目标数据库的容量增长趋势，其中，所述增长趋势为所述Mysql实例在未来预设时段内的容量大小。
7.根据权利要求6所述的表信息管理装置，其特征在于：
所述获取模块，还用于从所述任务调度策略中获取当前配置的饱和度检测频率，并基于所述饱和度检测频率获取每个Mysql实例下所有表的表信息。
8.根据权利要求6所述的表信息管理装置，其特征在于，所述针对每个分区，对该分区的分区饱和度进行检测，在检测到该分区的分区饱和度大于对应的预设饱和度时，发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展的方式，包括：
针对每个分区，获取该分区的分区信息，所述分区信息包括分区规则列名和分区使用值；
根据所述分区规则列名获取对应的分区饱和阈值；
基于所述分区使用值和所述分区饱和阈值计算出对应的分区饱和度；
判断所述分区饱和度是否大于对应的预设饱和度，若是，则发送分区扩展提示信息给目标终端以提示用户对该分区进行扩展。
9.一种可读存储介质，其特征在于，所述可读存储介质中存储有计算机程序，所述计算机程序被执行时实现权利要求1-5中任意一项所述的表信息管理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810320082.6A CN108509639B (zh) | 2018-04-11 | 2018-04-11 | 表信息管理方法、装置及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810320082.6A CN108509639B (zh) | 2018-04-11 | 2018-04-11 | 表信息管理方法、装置及可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108509639A CN108509639A (zh) | 2018-09-07 |
| CN108509639B true CN108509639B (zh) | 2021-04-23 |
Family
ID=63381501
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810320082.6A Active CN108509639B (zh) | 2018-04-11 | 2018-04-11 | 表信息管理方法、装置及可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108509639B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112306368B (zh) * | 2019-07-24 | 2022-11-04 | 青岛海信传媒网络技术有限公司 | 一种emmc扩展用户数据分区的方法及装置 |
| CN111241800A (zh) * | 2020-01-17 | 2020-06-05 | 深圳震有科技股份有限公司 | MySQL数据库表结构文档的生成方法、存储介质及智能终端 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103763126A (zh) * | 2013-12-27 | 2014-04-30 | 乐视网信息技术（北京）股份有限公司 | 监控数据库的系统、方法及数据库监控装置 |
| CN105512292A (zh) * | 2015-12-09 | 2016-04-20 | 北京奇虎科技有限公司 | 一种数据库系统管理方法和装置 |
| CN105893531A (zh) * | 2016-03-31 | 2016-08-24 | 武汉虹信技术服务有限责任公司 | PostgreSQL数据库海量数据管理方法及系统 |
| CN106649590A (zh) * | 2016-11-18 | 2017-05-10 | 北京奇虎科技有限公司 | 一种处理数据库的存储空间的方法和装置 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9934277B2 (en) * | 2015-05-19 | 2018-04-03 | International Business Machines Corporation | Data management system with stored procedures |
-
2018
- 2018-04-11 CN CN201810320082.6A patent/CN108509639B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103763126A (zh) * | 2013-12-27 | 2014-04-30 | 乐视网信息技术（北京）股份有限公司 | 监控数据库的系统、方法及数据库监控装置 |
| CN105512292A (zh) * | 2015-12-09 | 2016-04-20 | 北京奇虎科技有限公司 | 一种数据库系统管理方法和装置 |
| CN105893531A (zh) * | 2016-03-31 | 2016-08-24 | 武汉虹信技术服务有限责任公司 | PostgreSQL数据库海量数据管理方法及系统 |
| CN106649590A (zh) * | 2016-11-18 | 2017-05-10 | 北京奇虎科技有限公司 | 一种处理数据库的存储空间的方法和装置 |
Non-Patent Citations (2)
| Title |
|---|
| "企业级MySQL数据库在线监控系统的设计与实现";董明明;《中国优秀硕士论文全文数据库，信息科技辑》;20161215;参见正文第2-4章，图3-1~图3-3，图4-7 * |
| 大型数据中心数据库表容量管理工具实现;张乾尊，耿辉;《中国金融电脑》;20161231;正文第二、三部分，图3、图4 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN108509639A (zh) | 2018-09-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105677240B (zh) | 数据删除方法及系统 | |
| US11403311B2 (en) | Systems and methods for querying time series data | |
| CN103702053A (zh) | 录像存储和检索方法及系统、监控系统 | |
| US9842134B2 (en) | Data query interface system in an event historian | |
| CN105608188A (zh) | 数据处理方法和数据处理装置 | |
| CN108509639B (zh) | 表信息管理方法、装置及可读存储介质 | |
| EP2767912A2 (en) | In-memory real-time synchronized database system and method | |
| CN110147470B (zh) | 一种跨机房数据比对系统及方法 | |
| CN111061802B (zh) | 一种电力数据管理处理方法、装置及存储介质 | |
| CN112115200B (zh) | 数据同步方法、装置、电子设备及可读存储介质 | |
| EP3264291A1 (en) | Data block processing method and device | |
| US20230126706A1 (en) | Information traceability method and system based on blockchain | |
| CN109388671A (zh) | 数据处理方法、装置、设备及存储介质 | |
| CN111385365A (zh) | 上报数据的处理方法、装置、计算机设备和存储介质 | |
| CN114356692A (zh) | 一种应用监控链路的可视化处理方法、装置及存储介质 | |
| CN104424246A (zh) | 数据存储系统及方法 | |
| CN110502486B (zh) | 日志处理方法、装置、电子设备和计算机可读存储介质 | |
| Bukhari et al. | Hadoop based demography big data management system | |
| CN111291127B (zh) | 一种数据同步方法、装置、服务器及存储介质 | |
| CN109992573B (zh) | 一种实现hdfs文件占用率自动监控的方法及系统 | |
| US11755611B2 (en) | Storing and identifying content through content descriptors in a historian system | |
| CN113778996A (zh) | 一种大数据流数据处理方法、装置、电子设备及存储介质 | |
| CN109885467B (zh) | 数据波动的报警方法、装置、存储介质及电子设备 | |
| CN111611337A (zh) | 终端数据处理系统 | |
| CN112463233A (zh) | 一种系统配置方法、系统、设备以及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20231221 Address after: 266100 10th floor, building 2, CSIC science and technology building, 176 Haier Road, Laoshan District, Qingdao City, Shandong Province Patentee after: Qingdao Credit Reference Service Co.,Ltd. Address before: 11 / F, building B1, software industry phase 4.1, No.1, Software Park East Road, Donghu New Technology Development Zone, Wuhan City, Hubei Province, 430000 Patentee before: WUHAN DOUYU NETWORK TECHNOLOGY Co.,Ltd. |