CN117331908A - 一种实时数据库在线扩容方法及系统装置 - Google Patents
一种实时数据库在线扩容方法及系统装置 Download PDFInfo
- Publication number
- CN117331908A CN117331908A CN202311064245.6A CN202311064245A CN117331908A CN 117331908 A CN117331908 A CN 117331908A CN 202311064245 A CN202311064245 A CN 202311064245A CN 117331908 A CN117331908 A CN 117331908A
- Authority
- CN
- China
- Prior art keywords
- database
- data
- slice
- target database
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000003860 storage Methods 0.000 claims description 69
- 238000011156 evaluation Methods 0.000 claims description 45
- 238000009826 distribution Methods 0.000 claims description 40
- 238000004458 analytical method Methods 0.000 claims description 35
- 238000013500 data storage Methods 0.000 claims description 21
- 238000004364 calculation method Methods 0.000 claims description 11
- 238000012544 monitoring process Methods 0.000 claims description 9
- 238000012795 verification Methods 0.000 claims description 8
- 238000007726 management method Methods 0.000 claims description 7
- 238000005520 cutting process Methods 0.000 claims description 3
- 238000013508 migration Methods 0.000 description 4
- 230000005012 migration Effects 0.000 description 4
- 230000007547 defect Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/217—Database tuning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3034—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a storage system, e.g. DASD based or network based
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3055—Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
- G06F11/324—Display of status information
- G06F11/327—Alarm or error message display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/214—Database migration support
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0681—Configuration of triggering conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0876—Network utilisation, e.g. volume of load or congestion level
- H04L43/0894—Packet rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/16—Threshold monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/80—Database-specific techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/805—Real-time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/875—Monitoring of systems including the internet
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Environmental & Geological Engineering (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种实时数据库在线扩容方法及系统装置,涉及实时数据库在线扩容技术领域,本发明包括数据库信息获取、数据匹配信息分析、信息校验监测和预警提示,通过对数据库基本信息的获取分析,进而更好的得到了与各目标数据库进行了连接,并通过切片设备对主数据库里的数据进行了切片划分,以此来更好的与对应的目标数据库进行匹配连接,并通过对网络速率的分析,进而更好的得到了网络速率对其匹配的影响,以此来更好的得保障匹配的准确性,使数据库的扩容过程更加平滑和高效,提高了数据库的可用范围,让“爆满”的数据库得到应有的释放,体验轻松高效的数据库存储方式。
Description
技术领域
本发明涉及实时数据库在线扩容技术领域,具体涉及一种实时数据库在线扩容方法及系统装置。
背景技术
随着互联网和大数据时代的到来,需要存储的数据量越来越大,对数据库的存储和管理也是提出了更高的要求,传统数据库存储已经无法满足当前的需求,现如今,一种实时数据库在线扩容技术的应运而生,就巧妙的解决了这些传统数据库面临的难题,将原先的数据库划分为多个目标数据库以此来提高数据存储的效率和可扩展性。
传统的数据库存储主要的侧重点还是在存储上面,并未对数据库存储的在线扩容进行深入的分析,这样一来就会导致数据库的存储得不到应有的扩充,进而就导致了随着存储空间越来越有限,但是无法及大量数据得不到应用的存放,就会导致数据库存储的“爆满”,从而也会导致数据库存储服务出现中断或慢速崩溃,进而非常的耽误存储数据的效率,并且扩容的不及时,同时也会给当前的数据库存储造成一定的压力,从而加重运行的成本。
发明内容
针对上述存在的技术不足,本发明的目的是提供一种实时数据库在线扩容方法及系统装置。
为解决上述技术问题,本发明采用如下技术方案:本发明提供一种实时数据库在线扩容方法及系统装置,包括:步骤一、数据库信息获取:获取当前主数据库对应的基本信息,其中基本信息包括剩余容量、待存入数据量,进而分析得到主数据库对应的基本评估系数,根据主数据库基本评估系数,判断主数据库的存储状态,若数据的存储状态不充足,则将主数据库与目标数据库进行连接;
步骤二、数据匹配信息分析:通过数据切片设备将当前主数据库对应的数据进行切分,进而得到了各切片数据,同时获取对应的切片数据信息,其中切片数据信息包括数据容量、数据存储等级,进而分析得到主数据库对应的各数据切片存储系数,并通过主数据库对应的各数据切片存储系数,分析各数据切片对应的各目标数据库;
步骤三、信息校验监测:获取各目标数据库对应的网络信息,其中网络信息包括网络带宽、网络速率,进而分析得到各目标数据库对应的分配速率影响系数,并通过各目标数据库对应的分配速率影响系数,判断各目标数据库对应的切片数据匹配影响范围,若当各目标数据库对应的切片数据影响范围小,则得到扩容后的目标数据库,则将当前的主数据库进行删除,若当各目标数据库对应的切片数据影响范围大时,则进行校验并进行预警提示;
步骤四、预警提示:当各目标数据库对应的切片数据匹配影响范围大时进行预警提示。
优选地,所述分析得到主数据库对应的基本评估系数,具体分析过程如下:
通过计算公式分析得到主数据库对应的基本评估系数θ,k、f分别表示为剩余容量、待存入数据量,k′、f′分别表示为设定的剩余容量、待存入数据量,b1、b2分别为设定的剩余容量、待存入数据量的权重因子
优选地,所述判断主数据库的存储状态,具体判断过程如下:
将主数据库对应的基本评估系数阈值与数据库中存储的基本评估系数阈值进行对比,若主数据库对应的基本评估系数阈值大于数据库中存储的基本评估系数阈值,则主数据库的存储状态充足,若主数据库对应的基本评估系数阈值等于数据库中存储的基本评估系数阈值,则主数据库的存储状态充足,若主数据库对应的基本评估系数阈值小于数据库中存储的基本评估系数阈值,则数据库的存储状态不充足。
优选地,所述分析得到主数据库对应的各数据切片存储系数,具体分析过程如下:
通过计算公式分析得到主数据库对应的各数据切片存储系数βi,i表示各数据切片的编号,i=1.2.....n,ε1、ε2分别表示为预设的数据容量、数据存储等级的权重因子,/>分别表示为设定的数据容量,χ′分别表示为设定的数据存储等级,/>表示为第i个数据的数据容量,χi表示为第i个数据的数据存储等级。
优选地,所述分析各数据切片对应的各目标数据库,具体分析过程如下:
将主数据库对应的各数据切片存储系数与预设各目标数据库对应的存储系数区间进行对比,若某主数据库对应的各数据切片存储系数在预设某目标数据库对应的存储系数区间,则将该目标数据库作为该数据切片存储对应的目标数据库,以此方式得到各数据切片对应的各目标数据库。
优选地,所述分析得到各目标数据库对应的分配速率影响系数,具体分析过程如下:
通过计算公式分析得到各目标数据库对应的分配速率影响系数φr,λ′、μ′分别表示为设定的网络带宽、网络速率,λr、μr分别表示为第r个目标数据库对应的网络带宽、网络速率,ν1、ν2分别为设定的网络带宽、网络速率的权重因子。
优选地,所述判断各目标数据库对应的切片数据匹配影响范围,具体判断过程如下:
将各目标数据库对应的分配速率影响系数阈值与数据库中存储的分配速率影响系数阈值进行对比,若某目标数据库对应的分配速率影响系数阈值小于或者等于数据库中存储的分配速率影响系数阈值,则判定该目标数据库对应的切片数据匹配影响小,以此来得到各目标数据库对应的切片数据匹配影响范围,若某目标数据库对应的分配速率影响系数阈值大于数据库中存储的分配速率影响系数阈值,则判定该该目标数据库对应的切片数据匹配影响大,则进行预警提示。
本发明在第二方面提供了一种实时数据库在线扩容系统,包括:数据库信息获取模块,用于获取当前主数据库对应的基本信息,其中基本信息包括剩余容量、待存入数据量,进而分析得到主数据库对应的基本评估系数,根据主数据库基本评估系数,判断主数据库的存储状态,若数据的存储状态不充足,则将主数据库与目标数据库进行连接;
数据匹配信息分析模块,通过数据切片设备将当前主数据库对应的数据进行切分,进而得到了各切片数据,同时获取对应的切片数据信息,其中切片数据信息包括数据容量、数据存储等级,进而分析得到主数据库对应的各数据切片存储系数,并通过主数据库对应的各数据切片存储系数,分析各数据切片对应的各目标数据库;
信息校验监测模块,用于获取各目标数据库对应的网络信息,其中网络信息包括网络带宽、网络速率,进而分析得到各目标数据库对应的分配速率影响系数,并通过各目标数据库对应的分配速率影响系数,判断各目标数据库对应的切片数据匹配影响范围,若当各目标数据库对应的切片数据影响范围小,则得到扩容后的目标数据库,则将当前的主数据库进行删除,若当各目标数据库对应的切片数据影响范围大时,则进行校验并进行预警提示;
预警提示,当各目标数据库对应的切片数据匹配影响范围大时进行预警提示。
优选地,所述一种实时数据库在线扩容系统的组成装置包括组成装置有硬件、数据库管理系统;所述硬件构成计算机系统的各种物理设备,包括存储所需的外部设备;所述数据库管理系统是数据库系统的核心软件,用于组织和存储数据。
1、本发明的有益效果在于:本发明提供一种实时数据库在线扩容方法及系统装置,通过对数据库基本信息的获取分析,进而更好的得到了各目标数据库,并通过对数据库里的数据信息进行分析,进而更好的将其数据进行切片划分,以此来进行更好的对应目标数据库,并通过后面的网络速率的计算,进而了解到网络速率对其匹配的影响范围,以此来更好的进行校验,分别得到最精准可行的结果,可以更好的保障分配的准确性,解决了当前技术中存在的不足,提供了高可用性、灵活性、高效的数据迁移、负载均衡和性能优化等功能,使数据库的扩容过程更加平滑和高效,同时也可以高效的满足不断增长的业务需求和性能要求,以此来更好的拓展自己的发展业务,减轻数据库存储数据的压力,并最大限度地减少数据迁移时间,可以快速的提高传输数据的效率,让“爆满”的数据库得到应有的释放,体验轻松高效的数据库存储方式。
2、本发明在数据匹配信息分析模块中通过对各目标数据库对应的切片存储系数进行了深度的分析,进而更好的判断了各目标数据库对应的切片数据分配的精准性,从而可以更好的得到了各目标数据库对应的适配切片数据,以此来更好的保障各目标数据库的完整性,从而更好的实现实时数据库在线扩容的方式,提供了数据库可用的空间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明方法实施步骤流程示意图。
图2为本发明系统结构连接示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1所示,本发明提供了一种实时数据库在线扩容方法,包括:
步骤一、数据库信息获取:获取当前主数据库对应的基本信息,其中基本信息包括剩余容量、待存入数据量,进而分析得到主数据库对应的基本评估系数,根据主数据库基本评估系数,判断主数据库的存储状态,若数据的存储状态不充足,则将主数据库与目标数据库进行连接;
需要说明的是,基本信息可以从数据库的运行管理中心获取。
作为一种可选的实施方式,所述分析得到主数据库对应的基本评估系数,具体分析过程如下:
通过计算公式分析得到主数据库对应的基本评估系数θ,k、f分别表示为剩余容量、待存入数据量,k′、f′分别表示为设定的剩余容量、待存入数据量,b1、b2分别为设定的剩余容量、待存入数据量的权重因子
作为一种可选的实施方式,所述判断主数据库的存储状态,具体判断过程如下:将主数据库对应的基本评估系数阈值与数据库中存储的基本评估系数阈值进行对比,若主数据库对应的基本评估系数阈值大于数据库中存储的基本评估系数阈值,则主数据库的存储状态充足,若主数据库对应的基本评估系数阈值等于数据库中存储的基本评估系数阈值,则主数据库的存储状态合格,若主数据库对应的基本评估系数阈值小于数据库中存储的基本评估系数阈值,则数据库的存储状态不合格。
步骤二、数据匹配信息分析:通过数据切片设备将当前主数据库对应的数据进行切分,进而得到了各切片数据,同时获取对应的切片数据信息,其中切片数据信息包括数据容量、数据存储等级,进而分析得到主数据库对应的各数据切片存储系数,并通过主数据库对应的各数据切片存储系数,分析各数据切片对应的各目标数据库;
需要说明的是,通过逻辑表将主数据库的数据进行切分,进而就得到了各切片数据。
作为一种可选的实施方式,所述分析得到主数据库对应的各数据切片存储系数,具体分析过程如下:
通过计算公式分析得到主数据库对应的各数据切片存储系数βi,i表示各数据切片的编号,i=1.2.....n,ε1、ε2分别表示为预设的数据容量、数据存储等级的权重因子,/>分别表示为设定的数据容量,χ′分别表示为设定的数据存储等级,/>表示为第i个数据的数据容量,χi表示为第i个数据的数据存储等级。
作为一种可选的实施方式,所述分析各数据切片对应的各目标数据库,具体分析过程如下:将主数据库对应的各数据切片存储系数与预设各目标数据库对应的存储系数区间进行对比,若某主数据库对应的各数据切片存储系数在预设某目标数据库对应的存储系数区间,则将该目标数据库作为该数据切片存储对应的目标数据库,以此方式得到各数据切片对应的各目标数据库。
本发明在数据匹配信息分析模块中通过对各目标数据库对应的切片存储系数进行了深度的分析,进而更好的判断了各目标数据库对应的切片数据分配的精准性,从而可以更好的得到了各目标数据库对应的适配切片数据,以此来更好的保障各目标数据库的完整性,从而更好的实现实时数据库在线扩容的方式,提供了数据库可用的空间。
步骤三、信息校验监测:获取各目标数据库对应的网络信息,其中网络信息包括网络带宽、网络速率,进而分析得到各目标数据库对应的分配速率影响系数,并通过各目标数据库对应的分配速率影响系数,判断各目标数据库对应的切片数据匹配影响范围,若当各目标数据库对应的切片数据影响范围小,则得到扩容后的目标数据库,则将当前的主数据库进行删除,若当各目标数据库对应的切片数据影响范围大时,则进行校验并进行预警提示;
需要说明的是,网络信息可以通过网络测试工具进行获取。
作为一种可选的实施方式,所述分析得到各目标数据库对应的分配速率影响系数,具体分析过程如下:
通过计算公式分析得到各目标数据库对应的分配速率影响系数φr,λ′、μ′分别表示为设定的网络带宽、网络速率,λr、μr分别表示为第r个目标数据库对应的网络带宽、网络速率,ν1、ν2分别为设定的网络带宽、网络速率的权重因子。
作为一种可选的实施方式,所述判断各目标数据库对应的切片数据匹配影响范围,具体判断过程如下:将各目标数据库对应的分配速率影响系数阈值与数据库中存储的分配速率影响系数阈值进行对比,若某目标数据库对应的分配速率影响系数阈值小于或者等于数据库中存储的分配速率影响系数阈值,则判定该目标数据库对应的切片数据匹配影响小,以此来得到各目标数据库对应的切片数据匹配影响范围,若某目标数据库对应的分配速率影响系数阈值大于数据库中存储的分配速率影响系数阈值,则判定该该目标数据库对应的切片数据匹配影响大,则进行预警提示。
步骤四、预警提示:当各目标数据库对应的切片数据匹配影响范围大时进行预警提示。
请参阅图2所示,一种实时数据库在线扩容系统,包括数据库信息获取模块、数据匹配信息分析模块、信息校验监测模块、预警提示。
所述数据库信息获取模块分别与数据匹配信息分析模块和信息校验监测模块连接,所述数据匹配信息分析模块分别与信息校验监测模块和预警提示连接。
数据库信息获取模块,用于获取当前主数据库对应的基本信息,其中基本信息包括剩余容量、待存入数据量,进而分析得到主数据库对应的基本评估系数,根据主数据库基本评估系数,判断主数据库的存储状态,若数据的存储状态不充足,则将主数据库与目标数据库进行连接;
数据匹配信息分析模块,通过数据切片设备将当前主数据库对应的数据进行切分,进而得到了各切片数据,同时获取对应的切片数据信息,其中切片数据信息包括数据容量、数据存储等级,进而分析得到主数据库对应的各数据切片存储系数,并通过主数据库对应的各数据切片存储系数,分析各数据切片对应的各目标数据库;
信息校验监测模块,用于获取各目标数据库对应的网络信息,其中网络信息包括网络带宽、网络速率,进而分析得到各目标数据库对应的分配速率影响系数,并通过各目标数据库对应的分配速率影响系数,判断各目标数据库对应的切片数据匹配影响范围,若当各目标数据库对应的切片数据影响范围小,则得到扩容后的目标数据库,则将当前的主数据库进行删除,若当各目标数据库对应的切片数据影响范围大时,则进行校验并进行预警提示;
预警提示,当各目标数据库对应的切片数据匹配影响范围大时进行预警提示。
本发明提供了实时数据库在线扩容系统的组成装置包括组成装置有硬件、数据库管理系统;所述硬件构成计算机系统的各种物理设备,包括存储所需的外部设备;所述数据库管理系统是数据库系统的核心软件,用于组织和存储数据。
本发明提供一种实时数据库在线扩容方法及系统装置,通过对数据库基本信息的获取分析,进而更好的得到了各目标数据库,并通过对数据库里的数据信息进行分析,进而更好的将其数据进行切片划分,以此来进行更好的对应目标数据库,并通过后面的网络速率的计算,进而了解到网络速率对其匹配的影响范围,以此来更好的进行校验,分别得到最精准可行的结果,可以更好的保障分配的准确性,解决了当前技术中存在的不足,提供了高可用性、灵活性、高效的数据迁移、负载均衡和性能优化等功能,使数据库的扩容过程更加平滑和高效,同时也可以高效的满足不断增长的业务需求和性能要求,以此来更好的拓展自己的发展业务,减轻数据库存储数据的压力,并最大限度地减少数据迁移时间,可以快速的提高传输数据的效率,让“爆满”的数据库得到应有的释放,体验轻松高效的数据库存储方式。
以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节,也不限制该发明仅为的具体实施方式。显然,根据本说明书的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本发明的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。
Claims (9)
1.一种实时数据库在线扩容方法,其特征在于,包括:
步骤一、数据库信息获取:获取当前主数据库对应的基本信息,其中基本信息包括剩余容量、待存入数据量,进而分析得到主数据库对应的基本评估系数,根据主数据库基本评估系数,判断主数据库的存储状态,若数据的存储状态不充足,则将主数据库与目标数据库进行连接;
步骤二、数据匹配信息分析:通过数据切片设备将当前主数据库对应的数据进行切分,进而得到了各切片数据,同时获取对应的切片数据信息,其中切片数据信息包括数据容量、数据存储等级,进而分析得到主数据库对应的各数据切片存储系数,并通过主数据库对应的各数据切片存储系数,分析各数据切片对应的各目标数据库;
步骤三、信息校验监测:获取各目标数据库对应的网络信息,其中网络信息包括网络带宽、网络速率,进而分析得到各目标数据库对应的分配速率影响系数,并通过各目标数据库对应的分配速率影响系数,判断各目标数据库对应的切片数据匹配影响范围,若当各目标数据库对应的切片数据影响范围小,则得到扩容后的目标数据库,则将当前的主数据库进行删除,若当各目标数据库对应的切片数据影响范围大时,则进行校验并进行预警提示;
步骤四、预警提示:当各目标数据库对应的切片数据匹配影响范围大时进行预警提示。
2.如权利要求1所述的一种实时数据库在线扩容方法,其特征在于,所述分析得到主数据库对应的基本评估系数,具体分析过程如下:
通过计算公式分析得到主数据库对应的基本评估系数θ,k、f分别表示为剩余容量、待存入数据量,k′、f′分别表示为设定的剩余容量、待存入数据量,b1、b2分别为设定的剩余容量、待存入数据量的权重因子。
3.如权利要求1所述的一种实时数据库在线扩容方法,其特征在于,所述判断主数据库的存储状态,具体判断过程如下:
将主数据库对应的基本评估系数阈值与数据库中存储的基本评估系数阈值进行对比,若主数据库对应的基本评估系数阈值大于数据库中存储的基本评估系数阈值,则主数据库的存储状态充足,若主数据库对应的基本评估系数阈值等于数据库中存储的基本评估系数阈值,则主数据库的存储状态充足,若主数据库对应的基本评估系数阈值小于数据库中存储的基本评估系数阈值,则数据库的存储状态不充足。
4.如权利要求1所述的一种实时数据库在线扩容方法,其特征在于,所述分析得到主数据库对应的各数据切片存储系数,具体分析过程如下:
通过计算公式分析得到主数据库对应的各数据切片存储系数βi,i表示各数据切片的编号,i=1.2.....n,ε1、ε2分别表示为预设的数据容量、数据存储等级的权重因子,/>分别表示为设定的数据容量,χ′分别表示为设定的数据存储等级,/>表示为第i个数据的数据容量,χi表示为第i个数据的数据存储等级。
5.如权利要求1所述的一种实时数据库在线扩容方法,其特征在于,所述分析各数据切片对应的各目标数据库,具体分析过程如下:
将主数据库对应的各数据切片存储系数与预设各目标数据库对应的存储系数区间进行对比,若某主数据库对应的各数据切片存储系数在预设某目标数据库对应的存储系数区间,则将该目标数据库作为该数据切片存储对应的目标数据库,以此方式得到各数据切片对应的各目标数据库。
6.如权利要求1所述的一种实时数据库在线扩容方法,其特征在于,所述分析得到各目标数据库对应的分配速率影响系数,具体分析过程如下:
通过计算公式分析得到各目标数据库对应的分配速率影响系数φr,λ′、μ′分别表示为设定的网络带宽、网络速率,λr、μr分别表示为第r个目标数据库对应的网络带宽、网络速率,ν1、ν2分别为设定的网络带宽、网络速率的权重因子。
7.如权利要求1所述的一种实时数据库在线扩容方法,其特征在于,所述判断各目标数据库对应的切片数据匹配影响范围,具体判断过程如下:
将各目标数据库对应的分配速率影响系数阈值与数据库中存储的分配速率影响系数阈值进行对比,若某目标数据库对应的分配速率影响系数阈值小于或者等于数据库中存储的分配速率影响系数阈值,则判定该目标数据库对应的切片数据匹配影响小,以此来得到各目标数据库对应的切片数据匹配影响范围,若某目标数据库对应的分配速率影响系数阈值大于数据库中存储的分配速率影响系数阈值,则判定该该目标数据库对应的切片数据匹配影响大,则进行预警提示。
8.一种执行权利1-7任一项所述的实时数据库在线扩容系统,其特征在于,包括:数据库信息获取模块,用于获取当前主数据库对应的基本信息,其中基本信息包括剩余容量、待存入数据量,进而分析得到主数据库对应的基本评估系数,根据主数据库基本评估系数,判断主数据库的存储状态,若数据的存储状态不充足,则将主数据库与目标数据库进行连接;
数据匹配信息分析模块,通过数据切片设备将当前主数据库对应的数据进行切分,进而得到了各切片数据,同时获取对应的切片数据信息,其中切片数据信息包括数据容量、数据存储等级,进而分析得到主数据库对应的各数据切片存储系数,并通过主数据库对应的各数据切片存储系数,分析各数据切片对应的各目标数据库;
信息校验监测模块,用于获取各目标数据库对应的网络信息,其中网络信息包括网络带宽、网络速率,进而分析得到各目标数据库对应的分配速率影响系数,并通过各目标数据库对应的分配速率影响系数,判断各目标数据库对应的切片数据匹配影响范围,若当各目标数据库对应的切片数据影响范围小,则得到扩容后的目标数据库,则将当前的主数据库进行删除,若当各目标数据库对应的切片数据影响范围大时,则进行校验并进行预警提示;
预警提示,当各目标数据库对应的切片数据匹配影响范围大时进行预警提示。
9.一种实时数据库在线扩容系统的组成装置,应用于权利1-8任一项所述的一种实时数据库在线扩容方法,其特征在于,所述一种实时数据库在线扩容系统的组成装置包括组成装置有硬件、数据库管理系统;所述硬件构成计算机系统的各种物理设备,包括存储所需的外部设备;所述数据库管理系统是数据库系统的核心软件,用于组织和存储数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311064245.6A CN117331908B (zh) | 2023-08-23 | 2023-08-23 | 一种实时数据库在线扩容方法及系统装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311064245.6A CN117331908B (zh) | 2023-08-23 | 2023-08-23 | 一种实时数据库在线扩容方法及系统装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117331908A true CN117331908A (zh) | 2024-01-02 |
CN117331908B CN117331908B (zh) | 2024-05-14 |
Family
ID=89289240
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311064245.6A Active CN117331908B (zh) | 2023-08-23 | 2023-08-23 | 一种实时数据库在线扩容方法及系统装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117331908B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114359816A (zh) * | 2022-01-13 | 2022-04-15 | 小狮互联(杭州)科技有限公司 | 基于边缘计算的动态扩容视频分析课桌及智能识别方法 |
CN114443619A (zh) * | 2022-01-27 | 2022-05-06 | 中国电信股份有限公司 | 数据库扩容方法、装置、电子设备及存储介质 |
WO2022227566A1 (zh) * | 2021-04-30 | 2022-11-03 | 深圳前海微众银行股份有限公司 | 一种数据库变更脚本的评估方法及装置 |
CN115696356A (zh) * | 2022-11-11 | 2023-02-03 | 中国联合网络通信集团有限公司 | 小区容量调整方法、装置、电子设备及存储介质 |
-
2023
- 2023-08-23 CN CN202311064245.6A patent/CN117331908B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022227566A1 (zh) * | 2021-04-30 | 2022-11-03 | 深圳前海微众银行股份有限公司 | 一种数据库变更脚本的评估方法及装置 |
CN114359816A (zh) * | 2022-01-13 | 2022-04-15 | 小狮互联(杭州)科技有限公司 | 基于边缘计算的动态扩容视频分析课桌及智能识别方法 |
CN114443619A (zh) * | 2022-01-27 | 2022-05-06 | 中国电信股份有限公司 | 数据库扩容方法、装置、电子设备及存储介质 |
CN115696356A (zh) * | 2022-11-11 | 2023-02-03 | 中国联合网络通信集团有限公司 | 小区容量调整方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN117331908B (zh) | 2024-05-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20080255760A1 (en) | Forecasting system | |
CN110287332B (zh) | 云环境下仿真模型选择方法与装置 | |
CN112329262A (zh) | 一种居住建筑燃气碳排放量预测方法 | |
CN117078048B (zh) | 基于数字孪生的智慧城市资源管理方法及系统 | |
CN114510871A (zh) | 基于思维进化和lstm的云服务器性能衰退预测方法 | |
CN114596302A (zh) | 一种pcb板缺陷检测方法、系统、介质、设备及终端 | |
CN117331908B (zh) | 一种实时数据库在线扩容方法及系统装置 | |
CN108665376B (zh) | 一种空间负荷预测中确定元胞负荷最大值的核密度估计方法 | |
CN116069618A (zh) | 一种面向应用场景的国产化系统评估方法 | |
CN114692084A (zh) | 一种加速可靠性验证试验方案设计方法 | |
US9665795B2 (en) | Method and apparatus for identifying root cause of defect using composite defect map | |
CN115866235A (zh) | 视频质量评估方法、装置、电子设备及存储介质 | |
CN106777313A (zh) | 基于全息时标量测电网数据计算值及计算值分量分析方法 | |
CN114297341B (zh) | 一种舆情热度的确定方法、装置、设备及存储介质 | |
CN117762510A (zh) | 一种兼容多种时序数据库的服务器的配置方法和装置 | |
CN111143688A (zh) | 一种基于移动新闻客户端的评估方法及其系统 | |
CN112506959B (zh) | 智能船舶数据库检索的数据调度方法、装置和检索系统 | |
CN106528577B (zh) | 一种设置待清理文件的方法和装置 | |
CN117610970B (zh) | 一种数据迁移工作的智能评估方法及系统 | |
CN114924941B (zh) | 一种基于管线模型的流式计算场景解决方案性能评估系统及方法 | |
CN116910225B (zh) | 一种基于云平台的主动应答方法及系统 | |
CN111563076B (zh) | 数据稽核方法、装置、网络设备及存储介质 | |
CN112579841B (zh) | 一种多模态数据库建立方法、检索方法及系统 | |
CN117591845A (zh) | 一种变电站机器人巡检数据质量评价方法、系统及设备 | |
CN117931954A (zh) | 一种基于灵活配置的数据库数据接口管理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |