CN105447183A - Mpp架构数据库集群序列系统及序列管理方法 - Google Patents
Mpp架构数据库集群序列系统及序列管理方法 Download PDFInfo
- Publication number
- CN105447183A CN105447183A CN201510932850.XA CN201510932850A CN105447183A CN 105447183 A CN105447183 A CN 105447183A CN 201510932850 A CN201510932850 A CN 201510932850A CN 105447183 A CN105447183 A CN 105447183A
- Authority
- CN
- China
- Prior art keywords
- sequence
- node
- block
- center
- supervisory
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种MPP架构数据库集群序列系统及序列管理方法,所述系统包括:节点sequence序列模块,用于存储序列值,为所属节点生成全局唯一序列数值;中心sequence序列模块,用于管理全局序列sequence对象,并协调各节点sequence序列模块工作。由于采用上述技术方案,可以让MPP架构的数据库集群具有sequence序列功能,包括sequence序列对象管理,使得使用MPP架构数据库集群的sequence功能可以获得和单机数据库相同的体验;此外通过节点sequence模块和中心sequence模块的配合,可以提供高性能的sequence功能。
Description
技术领域
本发明属于集群数据库领域,尤其是涉及一种MPP架构数据库集群序列系统及序列管理方法。
背景技术
随着信息化技术的快速发展,一个企业的用户数量、数据量均呈现爆炸式增长,在业务量提高的同时,数据库的访问量和数据量快速增长对数据库处理能力和计算强度也相应增大,使得单一节点数据库根本无法承担。在这样一个背景下,大型分布式数据库集群产生了,所谓数据库集群,是指利用两台或多台数据库服务,构成一个虚拟单一数据库逻辑映像,像单数据库那样,向客户端提供透明的数据服务。
目前,有两种主流的数据库集群架构,带中心节点的集群架构和不带中心节点的MPP架构。带中心节点的集群架构,集群元数据只有一份,由中心节点统一负责管理;不带中心节点的MPP架构,集群元数据有多份,每个集群节点一份,且完全相同,由各个集群节点自身维护。
在数据库系统中,包括数据库的表(Table)、索引(Index)、视图(View)等数据库对象。序列(Sequence)也是数据库对象的一种,在单机数据库中,该对象用于生成唯一序列,供业务使用,用于唯一识别某条表记录,其特点是该序列生成的序列值是单调递增(或递减)的,在数据库中由同一序列对象的实例生成的序列值唯一。而在数据库集群中,特别是在MPP架构的集群中,由于没有中心节点,所以没有全局中心负责序列的管理工作,无法实现像单机一样的序列对象。
发明内容
本发明实施例提供了一种MPP架构数据库集群序列系统及序列管理方法,用以实现在MPP架构数据库集群中实现序列管理的目的。
第一方面,本发明实施例提供了一种MPP架构数据库集群序列系统,所述系统包括:
节点sequence序列模块,用于存储序列值,为所属节点生成全局唯一序列数值;
中心sequence序列模块,用于管理全局序列sequence对象,并协调各节点sequence序列模块工作。
进一步的,所述中心sequence序列模块用于:
增加、修改、删除和查询Sequence对象。
进一步的,所述中心sequence序列模块部署于所述MPP架构数据库集群中虚拟中心节点。
更进一步的,所述节点sequence序列模块部署于对应的数据库集群节点中。
第二方面,本发明实施例提供了一种MPP架构数据库集群管理方法,所述装置包括:
节点sequence序列模块接收客户端的管理序列sequence对象请求;
根据所述管理序列sequence对象请求获取管理序列sequence对象;
将所述管理序列sequence对象发送至中心sequence序列模块;
中心sequence序列模块执行所述sequence对象的管理。
进一步的,所述节点sequence序列模块接收客户端的管理序列sequence对象请求,包括:
所述集群节点接收客户端的管理序列sequence对象请求;
集群节点将所述管理序列sequence对象请求发送至节点sequence序列模块;
节点sequence序列模块判断自身是否具有序列数值,在判断有序列数值时,生成序列数值,返回该序列数值给本节点。
进一步的,所述方法还包括:
节点sequence序列模块判断自身是否具有序列数值,在判断没有序列数值时,节点sequence序列模块向中心sequence序列模块申请一组序列数值;
中心sequence序列模块向节点sequence序列模块返回一组序列数值。
更进一步的,在创建sequence序列对象时通过cache参数所述指定序列数值的大小。
由于采用上述技术方案,可以让MPP架构的数据库集群具有sequence序列功能,包括sequence序列对象管理,使得使用MPP架构数据库集群的sequence功能可以获得和单机数据库相同的体验;此外通过节点sequence模块和中心sequence模块的配合,可以提供高性能的sequence功能;如果用户使用sequence功能比较频繁,用户定义sequence对象时,可以定义cache参数为一个较大的值,这样使得每个集群节点可以像单机数据库一样提供sequence功能,多个集群节点并发提供sequence功能,使得其性能远远大于单机sequence数据库。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的MPP架构数据库集群序列系统的结构示意图;
图2是本发明第二实施例提供的MPP架构数据库集群序列sequence管理方法的流程示意图;
图3是本发明第三实施例提供的MPP架构数据库集群序列sequence管理方法的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1是本发明第一实施例提供的MPP架构数据库集群序列系统的结构示意图。参见图1,所述MPP架构数据库集群序列系统,包括:
节点sequence序列模块,用于存储序列值,为所属节点生成全局唯一序列数值;
中心sequence序列模块,用于管理全局序列sequence对象,并协调各节点sequence序列模块工作。
在本实施例中,所述MPP架构数据库集群序列系统包括三个节点,其中在每个节点都分别布置有一个节点sequence序列模块,该模块可以通过软件或硬件方式实现,用于存储序列值,为所属节点生成全局唯一序列数值。所述系统还包括中心sequence序列模块,该模块可以独立部署在数据库集群外,也可以部署在MPP架构数据库集群的虚拟中心,用于管理全局序列sequence序列对象,并协调各节点sequence序列模块工作。所述管理全局sequence序列对象,包括sequence序列对象的新增、修改、删除和查询功能。所述中心sequence序列模块和节点sequence序列模块相互配合,共同实现管理全局序列sequence序列对象的功能。
本实施例所提供的技术方案,可以让MPP架构的数据库集群具有sequence序列功能,包括sequenc序列对象管理,使得使用MPP架构数据库集群的sequence功能可以获得和单机数据库相同的体验;此外通过节点sequence模块和中心sequence模块的配合,可以提供高性能的sequence功能;如果用户使用sequence功能比较频繁,用户定义sequence对象时,可以定义cache参数为一个较大的值,这样使得每个集群节点可以像单机数据库一样提供sequence功能,多个集群节点并发提供sequence功能,使得其性能远远大于单机sequence数据库。
图2是本发明第二实施例提供的MPP架构数据库集群序列sequence管理方法的流程示意图。
参见图2,所述MPP架构数据库集群序列sequence管理方法,包括:
步骤210,节点sequence序列模块接收客户端的管理序列sequence对象请求。
用户通过客户端软件向MPP架构数据库集群中任意一个节点发送管理序列sequence对象请求,节点在收到管理序列sequence对象请求后,将所述管理序列sequence对象请求发送至节点sequence序列模块,由节点sequence序列模块进行处理。
步骤220,根据所述管理序列sequence对象请求获取管理序列sequence对象。
节点sequence序列模块对所述管理序列sequence对象请求进行分析,获取管理序列sequence对象。
步骤230,将所述管理序列sequence对象发送至中心sequence序列模块。
节点sequence序列模块将管理序列sequence对象发送至中心sequence序列模块。中心sequence序列模块根据上述请求执行和完成sequence对象的管理。
步骤240,中心sequence序列模块执行所述sequence对象的管理。
中心sequence序列模块根据步骤230节点sequence序列模块发送的请求执行和完成sequence对象的管理。
本实施例所提供的技术方案,通过节点sequence模块和中心sequence模块的配合,可以提供高性能的sequence功能;多个集群节点并发提供sequence功能,使得其性能远远大于单机sequence数据库。
图3是本发明第三实施例提供的MPP架构数据库集群序列sequence管理方法的流程示意图。本实施例以上述实施例为基础,进一步的,将所述节点sequence序列模块接收客户端的管理序列sequence对象请求优化为:所述集群节点接收客户端的管理序列sequence对象请求;集群节点将所述管理序列sequence对象请求发送至节点sequence序列模块;节点sequence序列模块判断自身是否具有序列数值,在判断有序列数值时,生成序列数值,返回该序列数值给本节点。节点sequence序列模块判断自身是否具有序列数值,在判断没有序列数值时,节点sequence序列模块向中心sequence序列模块申请一组序列数值;中心sequence序列模块向节点sequence序列模块返回一组序列数值。在创建sequence序列对象时通过cache参数所述指定序列数值的大小。
参见图3,所述MPP架构数据库集群序列sequence管理方法,包括:
步骤310,集群节点接收客户端的管理序列sequence对象请求。
步骤320,集群节点将所述管理序列sequence对象请求发送至节点sequence序列模块。
步骤330,节点sequence序列模块判断自身是否具有序列数值,在判断有序列数值时,生成序列数值,返回该序列数值给本节点。
步骤340,在判断没有序列数值时,节点sequence序列模块向中心sequence序列模块申请一组序列数值;
步骤350,中心sequence序列模块向节点sequence序列模块返回一组序列数值,其中,在创建sequence序列对象时通过cache参数指定所述序列数值的大小。
本实施例通过将将所述节点sequence序列模块接收客户端的管理序列sequence对象请求优化为:所述集群节点接收客户端的管理序列sequence对象请求;集群节点将所述管理序列sequence对象请求发送至节点sequence序列模块;节点sequence序列模块判断自身是否具有序列数值,在判断有序列数值时,生成序列数值,返回该序列数值给本节点。节点sequence序列模块判断自身是否具有序列数值,在判断没有序列数值时,节点sequence序列模块向中心sequence序列模块申请一组序列数值;中心sequence序列模块向节点sequence序列模块返回一组序列数值。在创建sequence序列对象时通过cache参数所述指定序列数值的大小。如果用户使用sequence功能比较频繁,用户可以在定义sequence序列对象时,将cache参数指定为一个较大的值,这样使得每个集群节点可以像单机数据库一样提供sequence功能,多个集群节点并发提供该功能,使得其性能远远大于单机数据库该功能。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (9)
1.一种MPP架构数据库集群序列sequence系统,其特征在于,包括:
节点sequence序列模块,用于存储序列值,为所属节点生成全局唯一序列数值;
中心sequence序列模块,用于管理全局序列sequence对象,并协调各节点sequence序列模块工作。
2.根据权利要求1所述的系统,其特征在于,所述中心sequence序列模块用于:
增加、修改、删除和查询Sequence对象。
3.根据权利要求1所述的系统,其特征在于,所述中心sequence序列模块部署于所述MPP架构数据库集群中虚拟中心节点。
4.根据权利要求1所述的系统,其特征在于,所述中心sequence序列模块单独部署于所述MPP架构数据库集群中。
5.根据权利要求3或4所述的系统,其特征在于,所述节点sequence序列模块部署于对应的数据库集群节点中。
6.一种MPP架构数据库集群序列sequence管理方法,包括:
节点sequence序列模块接收客户端的管理序列sequence对象请求;
根据所述管理序列sequence对象请求获取管理序列sequence对象;
将所述管理序列sequence对象发送至中心sequence序列模块;
中心sequence序列模块执行所述sequence对象的管理。
7.根据权利要求6所述的方法,其特征在于,所述节点sequence序列模块接收客户端的管理序列sequence对象请求,包括:
所述集群节点接收客户端的管理序列sequence对象请求;
集群节点将所述管理序列sequence对象请求发送至节点sequence序列模块;
节点sequence序列模块判断自身是否具有序列数值,在判断有序列数值时,生成序列数值,返回该序列数值给本节点。
8.根据权利要求6所述的方法,其特征在于,所述方法还包括:
节点sequence序列模块判断自身是否具有序列数值,在判断没有序列数值时,节点sequence序列模块向中心sequence序列模块申请一组序列数值;
中心sequence序列模块向节点sequence序列模块返回一组序列数值。
9.根据权利要求8所述的方法,其特征在于,在创建sequence序列对象时通过cache参数所述指定序列数值的大小。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510932850.XA CN105447183A (zh) | 2015-12-12 | 2015-12-12 | Mpp架构数据库集群序列系统及序列管理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510932850.XA CN105447183A (zh) | 2015-12-12 | 2015-12-12 | Mpp架构数据库集群序列系统及序列管理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105447183A true CN105447183A (zh) | 2016-03-30 |
Family
ID=55557359
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510932850.XA Pending CN105447183A (zh) | 2015-12-12 | 2015-12-12 | Mpp架构数据库集群序列系统及序列管理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105447183A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107908652A (zh) * | 2017-10-12 | 2018-04-13 | 北京人大金仓信息技术股份有限公司 | 一种针对分布式数据库系统的Sequence实现方法 |
CN109544161A (zh) * | 2018-11-28 | 2019-03-29 | 杭州有盾网络科技有限公司 | 区块链数据处理方法、系统及设备和序列号生成方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6725218B1 (en) * | 2000-04-28 | 2004-04-20 | Cisco Technology, Inc. | Computerized database system and method |
CN102880705A (zh) * | 2012-09-28 | 2013-01-16 | 用友软件股份有限公司 | 数据库主键生成装置和数据库主键生成方法 |
CN103823810A (zh) * | 2012-11-19 | 2014-05-28 | 中国电信股份有限公司 | 一种在分布式系统中生成唯一键的方法、装置及系统 |
CN104484470A (zh) * | 2014-12-31 | 2015-04-01 | 天津南大通用数据技术股份有限公司 | 一种数据库集群元数据管理方法 |
CN104915353A (zh) * | 2014-03-13 | 2015-09-16 | 中国电信股份有限公司 | 分布式数据库下全局主键生成方法和系统 |
-
2015
- 2015-12-12 CN CN201510932850.XA patent/CN105447183A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6725218B1 (en) * | 2000-04-28 | 2004-04-20 | Cisco Technology, Inc. | Computerized database system and method |
CN102880705A (zh) * | 2012-09-28 | 2013-01-16 | 用友软件股份有限公司 | 数据库主键生成装置和数据库主键生成方法 |
CN103823810A (zh) * | 2012-11-19 | 2014-05-28 | 中国电信股份有限公司 | 一种在分布式系统中生成唯一键的方法、装置及系统 |
CN104915353A (zh) * | 2014-03-13 | 2015-09-16 | 中国电信股份有限公司 | 分布式数据库下全局主键生成方法和系统 |
CN104484470A (zh) * | 2014-12-31 | 2015-04-01 | 天津南大通用数据技术股份有限公司 | 一种数据库集群元数据管理方法 |
Non-Patent Citations (1)
Title |
---|
秋雨飘落: ""RAC环境下序列不同步的问题"", 《HTTP://BLOG.CSDN.NET/ZFTANG/ARTICLE/DETAILS/6321513》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107908652A (zh) * | 2017-10-12 | 2018-04-13 | 北京人大金仓信息技术股份有限公司 | 一种针对分布式数据库系统的Sequence实现方法 |
CN109544161A (zh) * | 2018-11-28 | 2019-03-29 | 杭州有盾网络科技有限公司 | 区块链数据处理方法、系统及设备和序列号生成方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105183735B (zh) | 数据的查询方法及查询装置 | |
CN103106249B (zh) | 一种基于Cassandra的数据并行处理系统 | |
CN106445676B (zh) | 一种分布式数据计算的任务分配方法和任务分配装置 | |
US20190258612A1 (en) | System and method for parallel support of multidimensional slices with a multidimensional database | |
CN107515878B (zh) | 一种数据索引的管理方法及装置 | |
JP6779231B2 (ja) | データ処理方法及びシステム | |
CN109254966A (zh) | 数据表查询方法、装置、计算机设备及存储介质 | |
CN104866513A (zh) | 用于跨租户数据访问的系统和方法 | |
CN111258978A (zh) | 一种数据存储的方法 | |
CN105404690A (zh) | 查询数据库的方法和装置 | |
CN108399175B (zh) | 一种数据存储、查询方法及其装置 | |
CN116992887A (zh) | 一种元数据的数据目录处理方法、装置以及处理设备 | |
CN108874871B (zh) | 实时pnt服务数据溯源方法及装置 | |
CN102932416A (zh) | 一种信息流任务的中间数据存储方法、处理方法及装置 | |
US11741101B2 (en) | Estimating execution time for batch queries | |
CN105447183A (zh) | Mpp架构数据库集群序列系统及序列管理方法 | |
Rajesh | Big Data Analytics: Applications and Benefits. | |
US20210209103A1 (en) | Data segment-based indexing | |
CN108491274A (zh) | 分布式数据管理的优化方法、装置、存储介质及设备 | |
CN105550309A (zh) | Mpp架构数据库集群序列系统及序列管理方法 | |
US20090282418A1 (en) | Method and system for integrated scheduling and replication in a grid computing system | |
US9852166B2 (en) | Task handling in a multisystem environment | |
CN105721527A (zh) | 一种数据处理方法以及服务器 | |
Sirisha et al. | Stock exchange analysis using Hadoop user experience (Hue) | |
CN112685557A (zh) | 可视化信息资源管理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160330 |
|
RJ01 | Rejection of invention patent application after publication |