CN109885567B - 一种存储空间扩容方法和装置 - Google Patents

一种存储空间扩容方法和装置 Download PDF

Info

Publication number
CN109885567B
CN109885567B CN201811527462.3A CN201811527462A CN109885567B CN 109885567 B CN109885567 B CN 109885567B CN 201811527462 A CN201811527462 A CN 201811527462A CN 109885567 B CN109885567 B CN 109885567B
Authority
CN
China
Prior art keywords
capacity
data
model
space
archiving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811527462.3A
Other languages
English (en)
Other versions
CN109885567A (zh
Inventor
涂勇
曹朝
开林俊
孟伟龙
李爱民
温珊珊
刘郑楼
吴永胜
刘彦鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An E Wallet Electronic Commerce Co Ltd
Original Assignee
Ping An E Wallet Electronic Commerce Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An E Wallet Electronic Commerce Co Ltd filed Critical Ping An E Wallet Electronic Commerce Co Ltd
Priority to CN201811527462.3A priority Critical patent/CN109885567B/zh
Publication of CN109885567A publication Critical patent/CN109885567A/zh
Application granted granted Critical
Publication of CN109885567B publication Critical patent/CN109885567B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供了一种存储空间扩容方法和装置,本发明涉及大数据领域,该方法包括:获取表数据的历史数据增长情况;获取表数据的数据归档情况;根据历史数据增长情况和数据归档情况确定表空间的容量,表空间用于存储表数据;根据表空间的容量确定目标容量;根据目标容量对存储空间进行扩容,存储空间用于存储表空间。因此,本发明实施例提供的技术方案能够解决现有技术中无法对数据库空间合理扩容的问题。

Description

一种存储空间扩容方法和装置
【技术领域】
本发明涉及大数据领域,尤其涉及一种存储空间扩容方法和装置。
【背景技术】
目前业内的数据库空间管理经常出现空间容量不足的情况,需要相关运维人员经常紧急处理空间问题,消耗相关运维人员大量精力,风险高。
目前,无法对数据库空间合理扩容。
【发明内容】
有鉴于此,本发明实施例提供了一种存储空间扩容方法和装置,用以解决现有技术无法对数据库空间合理扩容的问题。
一方面,本发明实施例提供了一种存储空间扩容方法,所述方法包括:获取表数据的历史数据增长情况;获取表数据的数据归档情况;根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,所述表空间用于存储表数据;根据所述表空间的容量确定目标容量;根据所述目标容量对存储空间进行扩容,所述存储空间用于存储表空间。
进一步地,所述根据所述目标容量对存储空间进行扩容,包括:判断所述目标容量是否在预设容量范围之内;判断所述目标容量的增长是否符合预设增长趋势;如果所述目标容量在所述预设容量范围之内,并且,所述目标容量的增长符合所述预设增长趋势,则根据所述目标容量对所述存储空间进行扩容。
进一步地,所述根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,包括:根据所述历史数据增长情况和所述数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型;根据所述日模型、所述月模型、所述年模型、所述特色业务模型、所述归档模型确定所述表空间的容量。
进一步地,所述获取表数据的历史数据增长情况,包括:获取所述表数据各个维度的历史数据增长情况;所述获取表数据的数据归档情况,包括:获取所述表数据各个维度的数据归档情况;所述根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,包括:根据所述表数据各个维度的历史数据增长情况和所述表数据各个维度的数据归档情况确定所述表空间各个维度的容量;所述根据所述表空间的容量确定目标容量,包括:根据所述表空间各个维度的容量确定所述目标容量。
进一步地,在所述根据所述目标容量对存储空间进行扩容之后,所述方法还包括:定期对数据进行归档;将已归档的数据从所述存储空间中删除。
一方面,本发明实施例提供了一种存储空间扩容装置,所述装置包括:第一获取单元,用于获取表数据的历史数据增长情况;第二获取单元,用于获取表数据的数据归档情况;第一确定单元,用于根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,所述表空间用于存储表数据;第二确定单元,用于根据所述表空间的容量确定目标容量;扩容单元,用于根据所述目标容量对存储空间进行扩容,所述存储空间用于存储表空间。
进一步地,所述扩容单元包括:第一判断子单元,用于判断所述目标容量是否在预设容量范围之内;第二判断子单元,用于判断所述目标容量的增长是否符合预设增长趋势;扩容子单元,用于如果所述目标容量在所述预设容量范围之内,并且,所述目标容量的增长符合所述预设增长趋势,则根据所述目标容量对所述存储空间进行扩容。
进一步地,所述第一确定单元包括:建立子单元,用于根据所述历史数据增长情况和所述数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型;确定子单元,用于根据所述日模型、所述月模型、所述年模型、所述特色业务模型、所述归档模型确定所述表空间的容量。
进一步地,所述第一获取单元用于:获取所述表数据各个维度的历史数据增长情况;所述第二获取单元用于:获取所述表数据各个维度的数据归档情况;所述第一确定单元用于:根据所述表数据各个维度的历史数据增长情况和所述表数据各个维度的数据归档情况确定所述表空间各个维度的容量;所述第二确定单元用于:根据所述表空间各个维度的容量确定所述目标容量。
进一步地,所述装置还包括:归档单元,用于在所述扩容单元根据所述目标容量对存储空间进行扩容之后,定期对数据进行归档;删除单元,用于将已归档的数据从所述存储空间中删除。
一方面,本发明实施例提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述的存储空间扩容方法。
一方面,本发明实施例提供了一种计算机设备,包括存储器和处理器,所述存储器用于存储包括程序指令的信息,所述处理器用于控制程序指令的执行,所述程序指令被处理器加载并执行时实现上述的存储空间扩容方法的步骤。
本发明实施例中,根据历史数据增长情况与数据归档情况确定需要的容量,根据需要的容量对存储空间进行扩容,达到了合理扩容的效果,解决了现有技术中无法对数据库空间进行合理扩容的问题。
【附图说明】
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。
图1是本发明实施例提供的一种可选的存储空间扩容方法的流程图;
图2-1是本发明实施例提供的一种第一类型的数据的归档流程图;
图2-2是本发明实施例提供的一种第二类型的数据的归档流程图;
图3是本发明实施例提供的一种可选的存储空间扩容方法的流程图;
图4是本发明实施例提供的一种空间闭环管理的示意图;
图5是本发明实施例提供的一种可选的存储空间扩容装置的示意图。
【具体实施方式】
为了更好的理解本发明的技术方案,下面结合附图对本发明实施例进行详细描述。
应当明确,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
本发明实施例提供了一种存储空间扩容方法,如图1所示,该方法包括:
步骤S102:获取表数据的历史数据增长情况。
步骤S104:获取表数据的数据归档情况。
步骤S106:根据历史数据增长情况和数据归档情况确定表空间的容量,表空间用于存储表数据。
步骤S108:根据表空间的容量确定目标容量。
步骤S110:根据目标容量对存储空间进行扩容,存储空间用于存储表空间。
存储空间可以是本地空间或ASM空间。
本发明实施例中,根据历史数据增长情况与数据归档情况确定需要的容量,根据需要的容量对存储空间进行扩容,达到了合理扩容的效果,解决了现有技术中无法对数据库空间进行合理扩容的问题。
可选地,根据目标容量对存储空间进行扩容,包括:判断目标容量是否在预设容量范围之内;判断目标容量的增长是否符合预设增长趋势;如果目标容量在预设容量范围之内,并且,目标容量的增长符合预设增长趋势,则根据目标容量对存储空间进行扩容。
如果目标容量不在预设容量范围之内,或,目标容量的增长不符合预设增长趋势,则输出报警信息,以及时通知相关人员排查。对于表空间突增,偏离预测增长趋势的情况进行报警,及时通知相关人员排查。
可选地,根据历史数据增长情况和数据归档情况确定表空间的容量,包括:根据历史数据增长情况和数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型;根据日模型、月模型、年模型、特色业务模型、归档模型确定表空间的容量。
根据日模型、月模型、年模型、特色业务模型、归档模型确定表空间的容量,解决了数据库空间日常运维与预算评估等问题。
可以每天收集所有空间相关数据,建立日常空间使用模型,以15天平均空间使用情况来预计空间未来使用情况。以前一年数据增长情况与数据归档情况为数据基础,建立下一年数据增长模型,有效预测未来一年每月的空间使用情况。
可选地,获取表数据的历史数据增长情况,包括:获取表数据各个维度的历史数据增长情况;获取表数据的数据归档情况,包括:获取表数据各个维度的数据归档情况;根据历史数据增长情况和数据归档情况确定表空间的容量,包括:根据表数据各个维度的历史数据增长情况和表数据各个维度的数据归档情况确定表空间各个维度的容量;根据表空间的容量确定目标容量,包括:根据表空间各个维度的容量确定目标容量。
通过以历史数据增长情况与数据归档情况为数据基础,进行数据分析,建立未来的数据增长模型,有效预测未来存储/本地磁盘空间/表空间使用情况。
本方案对于存储/本地磁盘空间/表空间/表/index等,每天收集所有空间相关数据入库,前端展示并形成空间使用趋势图,根据历史空间使用情况进行数据分析,来预计空间未来使用情况,建立日常空间使用模型。对于数据库空间形成一个闭环智能管理,最大限度的减少人工参与。通过建立各个维度的空间模型预测表空间趋势,根据表空间趋势进行存储空间的各维度的自动扩展。
可选地,在根据目标容量对存储空间进行扩容之后,方法还包括:定期对数据进行归档;将已归档的数据从存储空间中删除。
在本方案中,定期对数据进行归档,例如,每天、每周或每月对数据进行归档,归档的数据从存储空间中删除。可以预先建立数据归档策略,数据归档策略可规定执行数据归档的频率,通过数据归档策略,实现历史数据自动定期归档,通过数据冷热分离,实现提升存储空间性能、降低成本的效果。
例如,根据源数据的空间模型预测,在预期空间增长范围内,于月初进行存储空间/磁盘空间自动扩展,表空间自动扩展,表数据自动归档使其可以满足未来50天的空间需求。
本方案可以用于ORACLE数据库空间管理,也可以用于其他类型的数据库的空间管理。
根据数据占用的存储空间的大小和访问次数的多少,将数据分为两种类型,第一类型的数据为占用空间大并且访问次数少的数据,其余数据为第二类型。
第一类型的数据的归档过程如图2-1所示:
检查待归档的表是否满足归档条件,即,检查待归档的表中是否存在全局索引,如果待归档的表中存在全局索引,则待归档的表不满足归档条件;如果待归档的表中不存在全局索引,则待归档的表满足归档条件。
如果待归档的表满足归档条件,生成和原表(待归档的表)结构完全一致的中间表。如果生成中间表后,原表结构发生变化,则中间表与变化后的原表结构不一致,在这种情况下,需要重新生成中间表。为确保中间表与原表结构一致,将生成的中间表与原表结构进行比对,确保二者结构完全一致。
进行DB负载检查,在负载低峰进行原表归档分区与中间表的交换分区操作,生成第一目标表。
根据第一目标表与交换出来的中间表进行关联,将在中间表不在第一目标表中的数据(即为第二类型的数据)插入到第二目标表中。
进行第二目标表索引的创建,比对第二目标表与原表,如果二者结构完全一致,则进行这两张表的分区交换,此时原表中只有第二类型的数据。
再根据第一目标表与交换出来的中间表进行关联,将不在中间表在第一目标表中的数据(即为第一类型的数据)插入到二级数据中(归档库)。
进行两边数据量校验(即判断以下条件是否满足:中间表的数据量=原表分区数据量+归档库的数据量,如果满足,则校验成功;如果不满足,则校验失败)。
如果校验成功,删除中间表、第一目标表、第二目标表,至此原表空间释放。
如果以上任何一个步骤检查出问题,直接报警退出。如果分区交换后检查出问题,先交换回原表,再报警退出。
第二类型的数据的归档过程如图2-2所示:
检查待归档的表是否满足归档条件,即,检查待归档的表中是否存在全局索引,如果待归档的表中存在全局索引,则待归档的表不满足归档条件;如果待归档的表中不存在全局索引,则待归档的表满足归档条件。
如果待归档的表满足归档条件,生成和原表(待归档的表)结构完全一致的中间表。如果生成中间表后,原表结构发生变化,则中间表与变化后的原表结构不一致,在这种情况下,需要重新生成中间表。为确保中间表与原表结构一致,将生成的中间表与原表结构进行比对,确保二者结构完全一致。
进行DB负载检查,在负载低峰进行原表归档分区与中间表的交换分区操作。
将中间表的数据插入到二级数据中(归档库)。
进行两边数据量校验(即判断以下条件是否满足:中间表的数据量=归档库的数据量,如果满足,则校验成功;如果不满足,则校验失败)。
如果校验成功,删除中间表,至此原表空间释放。
如果以上任何一个步骤检查出问题,直接报警退出。如果分区交换后检查出问题,先交换回原表,再报警退出。
如图3所示,本发明实施例提供的存储空间扩容方法包括:读取表空间数据,计算空间需求,判断ASM/本地空间的大小是否满足预设条件,如果不满足,则告警退出,如果满足,则判断数据库中的文件数量是否满足预设条件,如果不满足,则告警退出,如果满足,则判断表空间文件数是否满足预设条件,如果不满足,则告警退出,如果满足,则判断备用数据库的文件管理方式和文件路径是否满足预设条件,如果不满足,则告警退出,如果满足,则判断本地备用数据库空间是否满足预设条件,如果不满足,则告警退出,如果满足,则判断异地备用数据库空间是否满足预设条件,如果不满足,则告警退出,如果满足,则生成扩容脚本,判断数据库负载是否满足预设条件,如果不满足,则告警退出,如果满足,则执行脚本,记录日志信息。
图4是本方案提供的一种空间闭环管理的示意图,如图4所示,按照预测模型,定时自动添加,按照归档策略,定时进行日常数据的归档与特殊业务类型的数据归档,通过建立各个维度的空间模型预测表空间趋势,根据表空间趋势进行存储空间的各维度的自动扩展。
本发明实施例提供了一种存储空间扩容装置,该装置用于执行上述存储空间扩容方法,如图5所示,该装置包括:第一获取单元10、第二获取单元20、第一确定单元30、第二确定单元40、扩容单元50。
第一获取单元10,用于获取表数据的历史数据增长情况。
第二获取单元20,用于获取表数据的数据归档情况。
第一确定单元30,用于根据历史数据增长情况和数据归档情况确定表空间的容量,表空间用于存储表数据。
第二确定单元40,用于根据表空间的容量确定目标容量。
扩容单元50,用于根据目标容量对存储空间进行扩容,存储空间用于存储表空间。
存储空间可以是本地空间或ASM空间。
本发明实施例中,根据历史数据增长情况与数据归档情况确定需要的容量,根据需要的容量对存储空间进行扩容,达到了合理扩容的效果,解决了现有技术中无法对数据库空间进行合理扩容的问题。
可选地,扩容单元50包括:第一判断子单元、第二判断子单元、扩容子单元。第一判断子单元,用于判断目标容量是否在预设容量范围之内。第二判断子单元,用于判断目标容量的增长是否符合预设增长趋势。扩容子单元,用于如果目标容量在预设容量范围之内,并且,目标容量的增长符合预设增长趋势,则根据目标容量对存储空间进行扩容。
可选地,第一确定单元30包括:建立子单元、确定子单元。建立子单元,用于根据历史数据增长情况和数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型。确定子单元,用于根据日模型、月模型、年模型、特色业务模型、归档模型确定表空间的容量。
可选地,第一获取单元10用于:获取表数据各个维度的历史数据增长情况;第二获取单元20用于:获取表数据各个维度的数据归档情况;第一确定单元30用于:根据表数据各个维度的历史数据增长情况和表数据各个维度的数据归档情况确定表空间各个维度的容量;第二确定单元40用于:根据表空间各个维度的容量确定目标容量。
可选地,装置还包括:归档单元,用于在扩容单元50根据目标容量对存储空间进行扩容之后,定期对数据进行归档;删除单元,用于将已归档的数据从存储空间中删除。
本发明实施例提供了一种存储介质,存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行以下步骤:获取表数据的历史数据增长情况;获取表数据的数据归档情况;根据历史数据增长情况和数据归档情况确定表空间的容量,表空间用于存储表数据;根据表空间的容量确定目标容量;根据目标容量对存储空间进行扩容,存储空间用于存储表空间。
可选地,在程序运行时控制存储介质所在设备还执行以下步骤:判断目标容量是否在预设容量范围之内;判断目标容量的增长是否符合预设增长趋势;如果目标容量在预设容量范围之内,并且,目标容量的增长符合预设增长趋势,则根据目标容量对存储空间进行扩容。
可选地,在程序运行时控制存储介质所在设备还执行以下步骤:根据历史数据增长情况和数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型;根据日模型、月模型、年模型、特色业务模型、归档模型确定表空间的容量。
可选地,在程序运行时控制存储介质所在设备还执行以下步骤:获取表数据各个维度的历史数据增长情况;获取表数据的数据归档情况,包括:获取表数据各个维度的数据归档情况;根据历史数据增长情况和数据归档情况确定表空间的容量,包括:根据表数据各个维度的历史数据增长情况和表数据各个维度的数据归档情况确定表空间各个维度的容量;根据表空间的容量确定目标容量,包括:根据表空间各个维度的容量确定目标容量。
可选地,在程序运行时控制存储介质所在设备还执行以下步骤:在根据目标容量对存储空间进行扩容之后,定期对数据进行归档;将已归档的数据从存储空间中删除。
本发明实施例提供了一种计算机设备,包括存储器和处理器,存储器用于存储包括程序指令的信息,处理器用于控制程序指令的执行,程序指令被处理器加载并执行时实现以下步骤:获取表数据的历史数据增长情况;获取表数据的数据归档情况;根据历史数据增长情况和数据归档情况确定表空间的容量,表空间用于存储表数据;根据表空间的容量确定目标容量;根据目标容量对存储空间进行扩容,存储空间用于存储表空间。
可选地,程序指令被处理器加载并执行时还实现以下步骤:判断目标容量是否在预设容量范围之内;判断目标容量的增长是否符合预设增长趋势;如果目标容量在预设容量范围之内,并且,目标容量的增长符合预设增长趋势,则根据目标容量对存储空间进行扩容。
可选地,程序指令被处理器加载并执行时还实现以下步骤:根据历史数据增长情况和数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型;根据日模型、月模型、年模型、特色业务模型、归档模型确定表空间的容量。
可选地,程序指令被处理器加载并执行时还实现以下步骤:获取表数据各个维度的历史数据增长情况;获取表数据的数据归档情况,包括:获取表数据各个维度的数据归档情况;根据历史数据增长情况和数据归档情况确定表空间的容量,包括:根据表数据各个维度的历史数据增长情况和表数据各个维度的数据归档情况确定表空间各个维度的容量;根据表空间的容量确定目标容量,包括:根据表空间各个维度的容量确定目标容量。
可选地,程序指令被处理器加载并执行时还实现以下步骤:在根据目标容量对存储空间进行扩容之后,定期对数据进行归档;将已归档的数据从存储空间中删除。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机装置(可以是个人计算机,服务器,或者网络装置等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (8)

1.一种存储空间扩容方法,其特征在于,所述方法包括:
获取表数据的历史数据增长情况;
获取表数据的数据归档情况;
根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,所述表空间用于存储表数据;
根据所述表空间的容量确定目标容量;
根据所述目标容量对存储空间进行扩容,所述存储空间用于存储表空间;
所述根据所述目标容量对存储空间进行扩容,包括:
判断所述目标容量是否在预设容量范围之内;
判断所述目标容量的增长是否符合预设增长趋势;
如果所述目标容量在所述预设容量范围之内,并且,所述目标容量的增长符合所述预设增长趋势,则根据所述目标容量对所述存储空间进行扩容;
如果目标容量不在预设容量范围之内,或,目标容量的增长不符合预设增长趋势,则输出报警信息,以及时通知相关人员排查;
其中,当表空间突增,偏离预测增长趋势的情况进行报警,及时通知相关人员排查。
2.根据权利要求1所述的方法,其特征在于,所述根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,包括:
根据所述历史数据增长情况和所述数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型;
根据所述日模型、所述月模型、所述年模型、所述特色业务模型、所述归档模型确定所述表空间的容量。
3.根据权利要求1所述的方法,其特征在于,
所述获取表数据的历史数据增长情况,包括:获取所述表数据各个维度的历史数据增长情况;
所述获取表数据的数据归档情况,包括:获取所述表数据各个维度的数据归档情况;
所述根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,包括:根据所述表数据各个维度的历史数据增长情况和所述表数据各个维度的数据归档情况确定所述表空间各个维度的容量;
所述根据所述表空间的容量确定目标容量,包括:根据所述表空间各个维度的容量确定所述目标容量。
4.根据权利要求1至3任一项所述的方法,其特征在于,在所述根据所述目标容量对存储空间进行扩容之后,所述方法还包括:
定期对数据进行归档;
将已归档的数据从所述存储空间中删除。
5.一种存储空间扩容装置,其特征在于,所述装置包括:
第一获取单元,用于获取表数据的历史数据增长情况;
第二获取单元,用于获取表数据的数据归档情况;
第一确定单元,用于根据所述历史数据增长情况和所述数据归档情况确定表空间的容量,所述表空间用于存储表数据;
第二确定单元,用于根据所述表空间的容量确定目标容量;
扩容单元,用于根据所述目标容量对存储空间进行扩容,所述存储空间用于存储表空间;
所述扩容单元包括:
第一判断子单元,用于判断所述目标容量是否在预设容量范围之内;
第二判断子单元,用于判断所述目标容量的增长是否符合预设增长趋势;
扩容子单元,用于如果所述目标容量在所述预设容量范围之内,并且,所述目标容量的增长符合所述预设增长趋势,则根据所述目标容量对所述存储空间进行扩容;
如果目标容量不在预设容量范围之内,或,目标容量的增长不符合预设增长趋势,则输出报警信息,以及时通知相关人员排查;
其中,当表空间突增,偏离预测增长趋势的情况进行报警,及时通知相关人员排查。
6.根据权利要求5所述的装置,其特征在于,所述第一确定单元包括:
建立子单元,用于根据所述历史数据增长情况和所述数据归档情况建立空间使用的日模型、月模型、年模型、特色业务模型、归档模型;
确定子单元,用于根据所述日模型、所述月模型、所述年模型、所述特色业务模型、所述归档模型确定所述表空间的容量。
7.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至4中任意一项所述的存储空间扩容方法。
8.一种计算机设备,包括存储器和处理器,所述存储器用于存储包括程序指令的信息,所述处理器用于控制程序指令的执行,其特征在于:所述程序指令被处理器加载并执行时实现权利要求1至4任意一项所述的存储空间扩容方法的步骤。
CN201811527462.3A 2018-12-13 2018-12-13 一种存储空间扩容方法和装置 Active CN109885567B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811527462.3A CN109885567B (zh) 2018-12-13 2018-12-13 一种存储空间扩容方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811527462.3A CN109885567B (zh) 2018-12-13 2018-12-13 一种存储空间扩容方法和装置

Publications (2)

Publication Number Publication Date
CN109885567A CN109885567A (zh) 2019-06-14
CN109885567B true CN109885567B (zh) 2024-04-02

Family

ID=66925086

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811527462.3A Active CN109885567B (zh) 2018-12-13 2018-12-13 一种存储空间扩容方法和装置

Country Status (1)

Country Link
CN (1) CN109885567B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110287082A (zh) * 2019-07-02 2019-09-27 中国工商银行股份有限公司 数据库表空间容量监控方法及装置
CN111752489B (zh) * 2020-06-30 2022-06-17 重庆紫光华山智安科技有限公司 Kubernetes中PVC模块的扩容方法及相关装置
CN113535726A (zh) * 2021-07-15 2021-10-22 中国工商银行股份有限公司 数据库扩容方法及装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1871586A (zh) * 2003-10-29 2006-11-29 甲骨文国际公司 追踪数据库中的空间占用
CN101593178A (zh) * 2008-05-30 2009-12-02 中兴通讯股份有限公司 多维度自动触发扩展数据库的方法
CN101639839A (zh) * 2008-07-30 2010-02-03 中兴通讯股份有限公司 一种基于临时表的多归档文件查询方法
WO2013154521A1 (en) * 2012-04-09 2013-10-17 Hewlett-Packard Development Company, L.P. Creating an archival model
CN104699807A (zh) * 2015-03-23 2015-06-10 上海新炬网络信息技术有限公司 一种oracle数据表空间的自动监控扩容方法
CN104881477A (zh) * 2015-06-03 2015-09-02 上海新炬网络信息技术有限公司 一种应用数据空间使用估算方法
CN105955662A (zh) * 2016-04-22 2016-09-21 浪潮(北京)电子信息产业有限公司 一种k-db数据表空间的扩容方法与系统
CN106383897A (zh) * 2016-09-28 2017-02-08 平安科技(深圳)有限公司 数据库容量计算方法和装置
CN106484073A (zh) * 2016-09-28 2017-03-08 华为技术有限公司 系统节能的方法和节能系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1871586A (zh) * 2003-10-29 2006-11-29 甲骨文国际公司 追踪数据库中的空间占用
CN101593178A (zh) * 2008-05-30 2009-12-02 中兴通讯股份有限公司 多维度自动触发扩展数据库的方法
CN101639839A (zh) * 2008-07-30 2010-02-03 中兴通讯股份有限公司 一种基于临时表的多归档文件查询方法
WO2013154521A1 (en) * 2012-04-09 2013-10-17 Hewlett-Packard Development Company, L.P. Creating an archival model
CN104699807A (zh) * 2015-03-23 2015-06-10 上海新炬网络信息技术有限公司 一种oracle数据表空间的自动监控扩容方法
CN104881477A (zh) * 2015-06-03 2015-09-02 上海新炬网络信息技术有限公司 一种应用数据空间使用估算方法
CN105955662A (zh) * 2016-04-22 2016-09-21 浪潮(北京)电子信息产业有限公司 一种k-db数据表空间的扩容方法与系统
CN106383897A (zh) * 2016-09-28 2017-02-08 平安科技(深圳)有限公司 数据库容量计算方法和装置
CN106484073A (zh) * 2016-09-28 2017-03-08 华为技术有限公司 系统节能的方法和节能系统

Also Published As

Publication number Publication date
CN109885567A (zh) 2019-06-14

Similar Documents

Publication Publication Date Title
CN109885567B (zh) 一种存储空间扩容方法和装置
CN102129442B (zh) 一种分布式数据库系统和数据访问方法
US20090089499A1 (en) Method of managing storage capacity in a storage system, a storage device and a computer system
US9235590B1 (en) Selective data compression in a database system
US20130047161A1 (en) Selecting processing techniques for a data flow task
CN101673192B (zh) 时序化的数据处理方法、装置及系统
CN110289994B (zh) 一种集群容量调整方法及装置
CN101635651A (zh) 一种网络日志数据管理方法、系统及装置
CN109063066B (zh) 数据查询方法及装置、数据管理系统
CN104142953B (zh) 元数据动态管理方法及系统
CN104965861A (zh) 一种数据访问监控装置
CN107239457A (zh) 数据归档方法及装置
CN106354564A (zh) 系统资源分配方法和系统资源分配系统
CN112363886B (zh) 数据库监控方法、系统、终端及存储介质
CN110399351A (zh) 审计日志数据的处理方法与系统
CN112860540B (zh) 软件版本升级测试管控系统及方法
JP2003242010A (ja) 一時オブジェクトに関するログ使用の最適化
CN106528582A (zh) 数据库的备份方法和装置
CN117075811A (zh) 一种适用于多租户的动态数据存储方法
US10198495B1 (en) Configurable database management
CN110825771B (zh) 批量数据处理方法、电子装置、计算机设备及存储介质
US7082442B2 (en) Method and system for resolving disarrangement in database
CN112037017A (zh) 一种确定批处理作业评价结果的方法、装置、设备
CN112783637A (zh) 一种资源调控方法和装置
CN103745299A (zh) 一种跨数据中心抽取数据的方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant