CN108123984A - 一种内存数据库优化服务器集群架构 - Google Patents

一种内存数据库优化服务器集群架构 Download PDF

Info

Publication number
CN108123984A
CN108123984A CN201611087429.4A CN201611087429A CN108123984A CN 108123984 A CN108123984 A CN 108123984A CN 201611087429 A CN201611087429 A CN 201611087429A CN 108123984 A CN108123984 A CN 108123984A
Authority
CN
China
Prior art keywords
infiniband
memory database
server
cluster
clusters
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611087429.4A
Other languages
English (en)
Inventor
张振国
刘伟
万昆
于洪涛
邵思嘉
葛庆伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Travel Online Technology Co Ltd
Original Assignee
Tianjin Travel Online Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Travel Online Technology Co Ltd filed Critical Tianjin Travel Online Technology Co Ltd
Priority to CN201611087429.4A priority Critical patent/CN108123984A/zh
Publication of CN108123984A publication Critical patent/CN108123984A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H04L67/1044—Group management mechanisms 
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/22—Arrangements for detecting or preventing errors in the information received using redundant apparatus to increase reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00—Packet switching elements
    • H04L49/55—Prevention, detection or correction of errors
    • H04L49/552—Prevention, detection or correction of errors by ensuring the integrity of packets received through redundant connections
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1034—Reaction to server failures by a load balancer

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种内存数据库优化服务器集群架构，包括Infiniband汇聚交换机集群和内存数据库优化服务器节点，所述内存数据库优化服务器节点数量为两个以上，Infiniband汇聚交换机集群数量为1个，所述内存数据库优化服务器节点包括Infiniband接入交换机集群、Infiniband优化服务器集群、Infiniband优化磁盘阵列集群，所述Infiniband接入交换机集群都采用Infiniband连接线连接Infiniband汇聚交换机集群。本发明所述的内存数据库优化服务器集群架构可以提供160GB的峰值吞吐量，同时避免数据链路的单点故障，避免了数据输出瓶颈。

Description

一种内存数据库优化服务器集群架构
技术领域
本发明属于数据库优化领域，尤其是涉及一种内存数据库优化服务器集群架构。
背景技术
现有技术中，数据库性能优化的方法主要是针对单个数据块节点或固定的性能测试程序实现数据库性能优化的目标。但现有方法优化效率低，针对单个数据库节点的优化效率低，无法满足大数据环境大量分布式数据库节点优化的需要，并且现有技术链路吞吐量较低，不能承载繁重的业务。
发明内容
有鉴于此，本发明旨在提出一种内存数据库优化服务器集群架构，以解决现有数据库吞吐量低，不能承载繁重的业务等难题。
为达到上述目的，本发明的技术方案是这样实现的：
一种内存数据库优化服务器集群架构，包括Infiniband汇聚交换机集群和内存数据库优化服务器节点，所述内存数据库优化服务器节点数量为两个以上，Infiniband汇聚交换机集群数量为1个，所述内存数据库优化服务器节点包括Infiniband接入交换机集群、Infiniband优化服务器集群、Infiniband优化磁盘阵列集群，所述Infiniband接入交换机集群都采用Infiniband连接线连接Infiniband汇聚交换机集群。
进一步的，所述Infiniband优化服务器集群包括8台高内存型服务器。
进一步的，每台高内存型服务器上有2块双接口的Infiniband HCA卡，4个接口进行汇聚负载设置，每台高内存型服务器通过4根Infiniband连接线连接Infiniband接入交换机集群。
进一步的，所述Infiniband接入交换机集群包括2台Infiniband接入交换机，2台Infiniband接入交换机采用堆叠技术通过Infiniband连接线连接。
进一步的，所述Infiniband优化磁盘阵列集群包括2台磁盘阵列。
进一步的，每台磁盘阵列上有2块双接口的Infiniband HCA卡，4个接口进行汇聚负载设置，每台高内存型服务器通过4根Infiniband连接线连接Infiniband接入交换机集群。
相对于现有技术，本发明所述的内存数据库优化服务器集群架构具有以下优势：
(1)本发明所述的内存数据库优化服务器集群架构，Infiniband接入交换机集群与Infiniband优化服务器集群、Infiniband优化磁盘阵列集群之间的连接采用双卡4接口负载均衡冗余连接，可以提供160GB的峰值吞吐量，同时避免数据链路的单点故障，提供了负载均衡和故障转移的功能，Infiniband汇聚交换机统一对外提供服务，避免了数据输出瓶颈。
(2)本发明所述的内存数据库优化服务器集群架构，整体架构可以平滑升降级，快速方便的对集群服务器进行水平扩容，也可以直接以内存数据库优化服务器节点为单位大幅增加运算处理能力，满足业务高峰时的需求。
附图说明
构成本发明的一部分的附图用来提供对本发明的进一步理解，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1为本发明实施例所述的内存数据库优化服务器集群架构结构示意图。
具体实施方式
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”等的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。
在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以通过具体情况理解上述术语在本发明中的具体含义。
下面将参考附图并结合实施例来详细说明本发明。
如图1所示，一种内存数据库优化服务器集群架构，包括Infiniband汇聚交换机集群和内存数据库优化服务器节点，所述内存数据库优化服务器节点数量为两个以上，Infiniband汇聚交换机集群数量为1个，所述内存数据库优化服务器节点包括Infiniband接入交换机集群、Infiniband优化服务器集群、Infiniband优化磁盘阵列集群，所述Infiniband接入交换机集群都采用Infiniband连接线连接Infiniband汇聚交换机集群。Infiniband接入交换机集群和Infiniband汇聚交换机集群之间的Infiniband连接线可以根据所需增加数量，进一步增大吞吐量。
Infiniband优化服务器集群包括8台高内存型服务器。每台高内存型服务器上有2块双接口的Infiniband HCA卡，4个接口进行汇聚负载设置，每台高内存型服务器通过4根Infiniband连接线连接Infiniband接入交换机集群。Infiniband连接线通过高内存型服务器的接口和Infiniband接入交换机上的接口进行插接。
Infiniband接入交换机集群包括2台Infiniband接入交换机，2台Infiniband接入交换机采用堆叠技术通过Infiniband连接线连接。
Infiniband优化磁盘阵列集群包括2台磁盘阵列。每台磁盘阵列上有2块双接口的Infiniband HCA卡，4个接口进行汇聚负载设置，每台高内存型服务器通过4根Infiniband连接线连接Infiniband接入交换机集群。
Infiniband接入交换机集群与Infiniband优化服务器集群、Infiniband优化磁盘阵列集群之间的连接采用双卡4接口负载均衡冗余连接。可以提供160GB的峰值吞吐量，同时避免数据链路的单点故障，提供了负载均衡和故障转移的功能，Infiniband汇聚交换机统一对外提供服务，避免了数据输出瓶颈。
该内存数据库优化服务器集群架构，整体架构可以平滑升降级，快速方便的对集群服务器进行水平扩容，也可以直接以内存数据库优化服务器节点为单位大幅增加运算处理能力，满足业务高峰时的需求。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种内存数据库优化服务器集群架构，其特征在于：包括Infiniband汇聚交换机集群和内存数据库优化服务器节点，所述内存数据库优化服务器节点数量为两个以上，Infiniband汇聚交换机集群数量为1个，所述内存数据库优化服务器节点包括Infiniband接入交换机集群、Infiniband优化服务器集群、Infiniband优化磁盘阵列集群，所述Infiniband接入交换机集群都采用Infiniband连接线连接Infiniband汇聚交换机集群。
2.根据权利要求1所述的内存数据库优化服务器集群架构，其特征在于：所述Infiniband优化服务器集群包括8台高内存型服务器。
3.根据权利要求2所述的内存数据库优化服务器集群架构，其特征在于：每台高内存型服务器上有2块双接口的Infiniband HCA卡，4个接口进行汇聚负载设置，每台高内存型服务器通过4根Infiniband连接线连接Infiniband接入交换机集群。
4.根据权利要求1所述的内存数据库优化服务器集群架构，其特征在于：所述Infiniband接入交换机集群包括2台Infiniband接入交换机，2台Infiniband接入交换机采用堆叠技术通过Infiniband连接线连接。
5.根据权利要求1所述的内存数据库优化服务器集群架构，其特征在于：所述Infiniband优化磁盘阵列集群包括2台磁盘阵列。
6.根据权利要求4所述的内存数据库优化服务器集群架构，其特征在于：每台磁盘阵列上有2块双接口的Infiniband HCA卡，4个接口进行汇聚负载设置，每台高内存型服务器通过4根Infiniband连接线连接Infiniband接入交换机集群。
CN201611087429.4A 2016-11-30 2016-11-30 一种内存数据库优化服务器集群架构 Pending CN108123984A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611087429.4A CN108123984A (zh) 2016-11-30 2016-11-30 一种内存数据库优化服务器集群架构

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611087429.4A CN108123984A (zh) 2016-11-30 2016-11-30 一种内存数据库优化服务器集群架构

Publications (1)

Publication Number Publication Date
CN108123984A true CN108123984A (zh) 2018-06-05

Family

ID=62227127

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611087429.4A Pending CN108123984A (zh) 2016-11-30 2016-11-30 一种内存数据库优化服务器集群架构

Country Status (1)

Country Link
CN (1) CN108123984A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020040391A1 (en) * 2000-10-04 2002-04-04 David Chaiken Server farm formed of systems on a chip
CN1928839A (zh) * 2005-09-09 2007-03-14 中国科学院计算技术研究所 一种远程内存服务器及其实现方法
CN102833580A (zh) * 2012-09-19 2012-12-19 南京斯坦德通信股份有限公司 基于infiniband的高清视频应用系统及方法
CN102945251A (zh) * 2012-10-12 2013-02-27 浪潮电子信息产业股份有限公司 一种利用内存数据库技术优化磁盘数据库性能的方法
CN104115471A (zh) * 2012-02-14 2014-10-22 西里克斯系统公司 托管的服务中的客户端带宽模拟
CN105159929A (zh) * 2015-08-05 2015-12-16 北京思特奇信息技术股份有限公司 一种内存数据库通信方法及系统
CN105550309A (zh) * 2015-12-12 2016-05-04 天津南大通用数据技术股份有限公司 Mpp架构数据库集群序列系统及序列管理方法
CN205670776U (zh) * 2016-03-07 2016-11-02 湖北邮电规划设计有限公司 一种数据采集系统
US20160328273A1 (en) * 2015-05-05 2016-11-10 Sap Se Optimizing workloads in a workload placement system
CN206195837U (zh) * 2016-11-30 2017-05-24 天津易遨在线科技有限公司 一种内存数据库优化服务器集群架构

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020040391A1 (en) * 2000-10-04 2002-04-04 David Chaiken Server farm formed of systems on a chip
CN1928839A (zh) * 2005-09-09 2007-03-14 中国科学院计算技术研究所 一种远程内存服务器及其实现方法
CN104115471A (zh) * 2012-02-14 2014-10-22 西里克斯系统公司 托管的服务中的客户端带宽模拟
CN102833580A (zh) * 2012-09-19 2012-12-19 南京斯坦德通信股份有限公司 基于infiniband的高清视频应用系统及方法
CN102945251A (zh) * 2012-10-12 2013-02-27 浪潮电子信息产业股份有限公司 一种利用内存数据库技术优化磁盘数据库性能的方法
US20160328273A1 (en) * 2015-05-05 2016-11-10 Sap Se Optimizing workloads in a workload placement system
CN105159929A (zh) * 2015-08-05 2015-12-16 北京思特奇信息技术股份有限公司 一种内存数据库通信方法及系统
CN105550309A (zh) * 2015-12-12 2016-05-04 天津南大通用数据技术股份有限公司 Mpp架构数据库集群序列系统及序列管理方法
CN205670776U (zh) * 2016-03-07 2016-11-02 湖北邮电规划设计有限公司 一种数据采集系统
CN206195837U (zh) * 2016-11-30 2017-05-24 天津易遨在线科技有限公司 一种内存数据库优化服务器集群架构

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
N. S. ISLAM,ET AL.，: "\"High performance RDMA-based design of HDFS over InfiniBand\"", 《SC \'12: PROCEEDINGS OF THE INTERNATIONAL CONFERENCE ON HIGH PERFORMANCE COMPUTING, NETWORKING, STORAGE AND ANALYSIS》 *
张瑞;: "数据库分布式高可用架构", 程序员, no. 06 *
毛昆明;陈国兴;: "基于Abaqus软件的并行计算异构集群平台的搭建", 地震工程与工程振动, no. 05 *
赵英杰: "\"网络存储服务器缓存替换策略研究\"", 《中国博士学位论文全文数据库 (信息科技辑)》, no. 4 *

Similar Documents

Publication Publication Date Title
US10397670B2 (en) Techniques to process packets in a dual-mode switching environment
CN106293508B (zh) 数据存储系统和方法
US20080052443A1 (en) Cross-coupled peripheral component interconnect express switch
US20180150471A1 (en) Technologies for big data analytics accelerator
CN109426633A (zh) 用于管理网络接口控制器的灵活主机接口的技术
CN110740157A (zh) 存储系统及远程存取方法
US20180107628A1 (en) Computer Subsystem and Computer System with Composite Nodes in an Interconnection Structure
US10491488B2 (en) High-availability computer system, working method and the use thereof
CN103124299A (zh) 一种异构环境下的分布式块级别存储系统
CN204833236U (zh) 一种支持混合式存储的存储系统
CN104539679A (zh) 基于分布式闪存技术的集群数据库系统及其数据传输方法
CN201282471Y (zh) 一种集群式服务器应用装置
CN103914412A (zh) 用于存储设备中的流量优先化的方法，存储设备以及存储系统
CN105138494A (zh) 一种多路计算机系统
CN105530157B (zh) Afdx网络交换机多个虚拟链路共享信用的架构及方法
CN104597977A (zh) 一种前维护式2u4节点高密度服务器系统
CN206212051U (zh) 一种分布式搜索优化服务器集群架构
CN206195837U (zh) 一种内存数据库优化服务器集群架构
CN108123984A (zh) 一种内存数据库优化服务器集群架构
Nooruzzaman et al. Hyperscale data center networks with Transparent HyperX architecture
CN100442256C (zh) 提供用于i/o适配器的队列对的方法、系统和存储介质
CN106054319A (zh) 一种采用非规则间距输出端口阵列的波长选择开关
CN108123975A (zh) 一种分布式搜索优化服务器集群架构
Zhou et al. MDTUpdate: A multi-block double tree update technique in heterogeneous erasure-coded clusters
CN1102311C (zh) 使用光纤通道作互连网络的集线器系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned
AD01 Patent right deemed abandoned

Effective date of abandoning: 20240507