CN109547537A - 基于SAN存储共享卷实现openstack高可用的方法 - Google Patents

基于SAN存储共享卷实现openstack高可用的方法 Download PDF

Info

Publication number
CN109547537A
CN109547537A CN201811306223.5A CN201811306223A CN109547537A CN 109547537 A CN109547537 A CN 109547537A CN 201811306223 A CN201811306223 A CN 201811306223A CN 109547537 A CN109547537 A CN 109547537A
Authority
CN
China
Prior art keywords
volume
cluster
shared
openstack
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811306223.5A
Other languages
English (en)
Inventor
刘晓浩
陈健
朱仲马
何重阳
马腾俊
赵立伟
郭婷婷
周英
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Electric Rice Information System Co ltd
Original Assignee
CETC 28 Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CETC 28 Research Institute filed Critical CETC 28 Research Institute
Priority to CN201811306223.5A priority Critical patent/CN109547537A/zh
Publication of CN109547537A publication Critical patent/CN109547537A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H04L67/1044—Group management mechanisms 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H04L67/1059—Inter-group management mechanisms, e.g. splitting, merging or interconnection of groups
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提出了一种基于SAN存储共享卷实现openstack高可用的方法，其主要针对没有共享文件系统以及缺乏对接cinder的存储驱动的SAN存储场景。该方法首先在SAN存储设备上创建一个共享存储卷，将此卷同时映射给多个服务器上；然后在服务器上，用共享卷设备搭建lvm集群，在lvm集群上创建卷组及逻辑卷，在逻辑卷上搭建集群文件系统。上述创建的卷组给云硬盘服务cinder调用，集群文件系统给镜像服务glance和计算服务nova使用。本发明能够有效解决单点问题，采用多个节点可共享数据的文件系统，在节点宕机时，为虚拟机的疏散提供可能，并且没有增加NFS和ISCSI等额外的数据转发传输，不存储数据转发和协议转换的损耗。

Description

基于SAN存储共享卷实现openstack高可用的方法
技术领域
本发明涉及一种高可用方法，特别是一种基于SAN存储共享卷实现openstack高可用的方法。
背景技术
云计算是利用虚拟化技术，将数据中心的计算、存储、网络等资源整合起来，形成统一的资源池，再将这些资源分配给不同部门或人使用。利用云计算技术，可以实现机房资源的统一管理，并实现资源的按需分配。openstack是一款开源的云计算软件，其核心组件包含镜像服务glance、计算服务nova、网络服务neutron、块存储服务cinder等，其中涉及存储资源的组件包含glance、nova和cinder。
目前常用的存储包含分布式存储、NAS存储和SAN存储，其中分布式存储维护较为复杂，给运维人员带来不小的压力；NAS存储由于IO性能相对较低，无法满足大规模云计算平台对存储IO的需求；SAN存储有者较好的存储性能，但数据在多服务器之间不易共享。
目前大部分存储厂商为实现与openstack对接，针对自家存储设备开发openstack云硬盘cinder的存储驱动，以便自家存储设备可以接入openstack。然而仍有部分型号存储设备没有相应的cinder存储驱动，对于这些设备接入openstack的方式一般是将其上存储卷映射到一个物理机，创建lvm卷组，通过LVMVolumeDriver驱动接入openstack，然而此方法有着单点问题，如果映射的这个物理机出现宕机，从其上分配的云硬盘都无法使用，并且这些云硬盘的cinder-volume服务也在这个物理机上，在宕机机器恢复之前无法对云硬盘操作。鉴于以上问题，SAN存储在openstack上的使用存在高可用的困难。
发明内容
本发明所解决的技术问题在于提供一种能解决openstack在SAN存储上实现数据共享的问题，实现openstack高可用的方法。
实现本发明目的的技术方案为：一种基于SAN存储共享卷实现openstack高可用的方法，包括以下步骤：
(1)在SAN存储设备上创建共享存储卷，将共享存储卷同时映射给两个以上的服务器；
(2)在上述所有服务器上搭建lvm集群，在lvm集群上创建一个卷组，并在卷组上创建两个逻辑卷；
(3)配置openstack云硬盘服务cinder，使用步骤(2)中创建的lvm集群上的卷组；
(4)在步骤(2)的两个逻辑卷上分别搭建集群文件系统,并配置openstack镜像服务glance和计算服务nova分别使用这两个集群文件系统。
在优选实施方案中，步骤(1)中通过FC或者ISCSI将创建的共享存储卷映射到多个服务器。
在优选实施方案中，步骤(2)以步骤(1)的共享存储卷为基础，通过pacemaker和clvm软件搭建lvm集群，并创建卷组和逻辑卷。
在优选实施方案中，步骤(3)中云硬盘服务cinder使用步骤(2)中的卷组为存储后端，创建的云硬盘可以被集群中的所有服务器访问，不需要通过协议转换就可以挂载给虚拟机使用。
在优选实施方案中，步骤(4)中使用步骤(2)的逻辑卷创建两个集群文件系统，并配置openstack的镜像服务glance和计算服务nova将镜像文件和虚拟机数据保存在这个文件系统中。
本发明与现有技术相比，其显著优点为：采用了lvm集群和gfs2文件系统的方式，与单机的lvm相比，解决了单点问题，在任一节点宕机时，其上的服务都可由其它节点来接替；采用了多个节点可共享数据的文件系统，在计算节点宕机时，为虚拟机的疏散提供可能；在有多个镜像服务时，解决了镜像文件的共享问题；没有增加NFS和ISCSI等额外的数据转发传输，数据直接进出存储，不存储数据转发和协议转换的损耗。
附图说明
图1是基于SAN存储共享卷实现openstack高可用的方法结构图。
图2是镜像服务和计算服务使用集群文件系统示意图。
图3是虚拟机使用云硬盘的方式示意图。
具体实施方式：
下面结合附图和具体实施例对本发明作进一步详细说明。
如图1所示，本发明实施例公开的基于SAN存储共享卷实现openstack高可用的方法，包括以下步骤：
步骤1：在SAN存储设备上创建一个共享存储卷，通过FC或者ISCSI方式映射到所有服务器上；
步骤2：安装pacemaker和clvm软件，并配置pacemaker和lvm集群，在集群中创建一个卷组，在卷组上创建两个逻辑卷；
步骤3：安装gfs2软件，如图2所示，以步骤2的两个逻辑卷为基础，创建gfs2文件系统，分别挂载在控制节点的/var/lib/glance/images目录和计算节点的/var/lib/nova/instances目录，更改images目录所属者为glance，更改instances目录所属者为nova，重启openstack的镜像服务glance-api和计算服务nova-compute。
步骤4：在所有服务器上创建cinder-volume服务，并配置后端存储为步骤2中创建的卷组。在创建云硬盘时，cinder-volume服务会在卷组上创建逻辑卷，可以被所有服务器看到。在云硬盘挂载给虚拟机时，nova-compute服务在本节点上找到云硬盘对应的逻辑卷，并将其挂载给指定的虚拟机。

Claims (5)

1.一种基于SAN存储共享卷实现openstack高可用的方法，其特征在于，包括以下步骤：
(1)在SAN存储设备上创建共享存储卷，将共享存储卷同时映射给两个以上的服务器；
(2)在上述所有服务器上搭建lvm集群，在lvm集群上创建一个卷组，并在卷组上创建两个逻辑卷；
(3)配置openstack云硬盘服务cinder，使用步骤(2)中创建的lvm集群上的卷组；
(4)在步骤(2)的两个逻辑卷上分别搭建集群文件系统,并配置openstack镜像服务glance和计算服务nova分别使用这两个集群文件系统。
2.根据权利要求1所述的基于SAN存储共享卷实现openstack高可用的方法，其特征在于，步骤(1)中通过FC或者ISCSI将创建的共享存储卷映射到多个服务器。
3.根据权利要求1所述的基于SAN存储共享卷实现openstack高可用的方法，其特征在于，步骤(2)以步骤(1)的共享存储卷为基础，通过pacemaker和clvm软件搭建lvm集群，并创建卷组和逻辑卷。
4.根据权利要求1所述的基于SAN存储共享卷实现openstack高可用的方法，其特征在于，步骤(3)中云硬盘服务cinder使用步骤(2)中的卷组为存储后端，创建的云硬盘可以被集群中的所有服务器访问，不需要通过协议转换就可以挂载给虚拟机使用。
5.根据权利要求1所述的基于SAN存储共享卷实现openstack高可用的方法，其特征在于，步骤(4)中使用步骤(2)的逻辑卷创建两个集群文件系统，并配置openstack的镜像服务glance和计算服务nova将镜像文件和虚拟机数据保存在这个文件系统中。
CN201811306223.5A 2018-11-05 2018-11-05 基于SAN存储共享卷实现openstack高可用的方法 Pending CN109547537A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811306223.5A CN109547537A (zh) 2018-11-05 2018-11-05 基于SAN存储共享卷实现openstack高可用的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811306223.5A CN109547537A (zh) 2018-11-05 2018-11-05 基于SAN存储共享卷实现openstack高可用的方法

Publications (1)

Publication Number Publication Date
CN109547537A true CN109547537A (zh) 2019-03-29

Family

ID=65846038

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811306223.5A Pending CN109547537A (zh) 2018-11-05 2018-11-05 基于SAN存储共享卷实现openstack高可用的方法

Country Status (1)

Country Link
CN (1) CN109547537A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111104264A (zh) * 2019-12-19 2020-05-05 北京浪潮数据技术有限公司 一种分布式云计算系统的节点主备切换方法及装置
CN111158851A (zh) * 2019-12-10 2020-05-15 航天物联网技术有限公司 一种虚拟机快速部署方法
CN111885169A (zh) * 2020-07-24 2020-11-03 北京浪潮数据技术有限公司 一种云硬盘服务高可用的实现方法、系统及装置
CN113504954A (zh) * 2021-07-08 2021-10-15 华云数据控股集团有限公司 调用CSI LVM Plugin插件、动态持久卷供应的方法、系统及介质
CN113568569A (zh) * 2021-06-21 2021-10-29 长沙证通云计算有限公司 一种基于云平台的san存储对接方法及系统
CN113992657A (zh) * 2021-10-26 2022-01-28 超越科技股份有限公司 一种基于云平台的共享存储的搭建方法、设备及介质
CN114281253A (zh) * 2021-12-10 2022-04-05 招商银行股份有限公司 存储卷的管理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102685219A (zh) * 2012-04-27 2012-09-19 浪潮电子信息产业股份有限公司 San存储系统中通过动态扩容提高存储资源利用率的方法
CN103051710A (zh) * 2012-12-20 2013-04-17 中国科学院深圳先进技术研究院 一种虚拟云平台管理系统及方法
US20140204940A1 (en) * 2013-01-23 2014-07-24 Nexenta Systems, Inc. Scalable transport method for multicast replication
CN104283959A (zh) * 2014-10-14 2015-01-14 国云科技股份有限公司 一种适用于云平台的基于性能分级的存储机制
CN107832093A (zh) * 2017-10-16 2018-03-23 北京易讯通信息技术股份有限公司 一种在私有云中免驱动对接标准iscsi/fc存储的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102685219A (zh) * 2012-04-27 2012-09-19 浪潮电子信息产业股份有限公司 San存储系统中通过动态扩容提高存储资源利用率的方法
CN103051710A (zh) * 2012-12-20 2013-04-17 中国科学院深圳先进技术研究院 一种虚拟云平台管理系统及方法
US20140204940A1 (en) * 2013-01-23 2014-07-24 Nexenta Systems, Inc. Scalable transport method for multicast replication
CN104283959A (zh) * 2014-10-14 2015-01-14 国云科技股份有限公司 一种适用于云平台的基于性能分级的存储机制
CN107832093A (zh) * 2017-10-16 2018-03-23 北京易讯通信息技术股份有限公司 一种在私有云中免驱动对接标准iscsi/fc存储的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
INT32BIT: "OpenStack虚拟机挂载数据卷过程分析", 《知乎》 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111158851A (zh) * 2019-12-10 2020-05-15 航天物联网技术有限公司 一种虚拟机快速部署方法
CN111158851B (zh) * 2019-12-10 2022-04-29 航天物联网技术有限公司 一种虚拟机快速部署方法
CN111104264A (zh) * 2019-12-19 2020-05-05 北京浪潮数据技术有限公司 一种分布式云计算系统的节点主备切换方法及装置
CN111885169A (zh) * 2020-07-24 2020-11-03 北京浪潮数据技术有限公司 一种云硬盘服务高可用的实现方法、系统及装置
CN113568569A (zh) * 2021-06-21 2021-10-29 长沙证通云计算有限公司 一种基于云平台的san存储对接方法及系统
CN113504954A (zh) * 2021-07-08 2021-10-15 华云数据控股集团有限公司 调用CSI LVM Plugin插件、动态持久卷供应的方法、系统及介质
CN113504954B (zh) * 2021-07-08 2024-02-06 华云数据控股集团有限公司 调用CSI LVM Plugin插件、动态持久卷供应的方法、系统及介质
CN113992657A (zh) * 2021-10-26 2022-01-28 超越科技股份有限公司 一种基于云平台的共享存储的搭建方法、设备及介质
CN113992657B (zh) * 2021-10-26 2024-04-12 超越科技股份有限公司 一种基于云平台的共享存储的搭建方法、设备及介质
CN114281253A (zh) * 2021-12-10 2022-04-05 招商银行股份有限公司 存储卷的管理方法
CN114281253B (zh) * 2021-12-10 2024-01-26 招商银行股份有限公司 存储卷的管理方法

Similar Documents

Publication Publication Date Title
CN109547537A (zh) 基于SAN存储共享卷实现openstack高可用的方法
JP5026283B2 (ja) 協調的共用ストレージアーキテクチャ
CN103763383B (zh) 一体化云存储系统及其存储方法
CN103503414B (zh) 一种计算存储融合的集群系统
CN105892943B (zh) 一种分布式存储系统中块存储数据的访问方法及系统
US9256377B2 (en) Consistent distributed storage communication protocol semantics in a clustered storage system
CN103561101A (zh) 一种网络文件系统
US10129357B2 (en) Managing data storage in distributed virtual environment
CN108139941A (zh) 基于网络流控制的动态资源分配
CN102868727B (zh) 一种实现逻辑卷高可用性的方法
US11079968B1 (en) Queue management in multi-site storage systems
US11262918B1 (en) Data storage system with uneven drive wear reduction
US9591079B2 (en) Method and apparatus for managing sessions of different websites
CN102833580A (zh) 基于infiniband的高清视频应用系统及方法
US20170147601A1 (en) Synchronous replication for file access protocol storage
CN103067488A (zh) 一种统一存储的实现方法
US11314447B2 (en) System and method for sustaining single NVMe subsystem by a federated storage array for NVMe-oF connectivity
CN109302494A (zh) 一种网络存储系统的配置方法、装置、设备及介质
CN102611754A (zh) 一种基于iSCSI的云存储中客户端管理方法
CN102137161B (zh) 基于光纤通道的文件级数据共享存储系统
CN105812468A (zh) 一种基于scst的存储高可用方法
CN103209219A (zh) 一种分布式集群文件系统
CN109871363A (zh) 一种冗余架构的共享文件系统及其搭建方法
CN103780591A (zh) 一种公安云计算中心构建方法
US10884888B2 (en) Facilitating communication among storage controllers

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20191219

Address after: 210000 No. 1 East Garden Street, Qinhuai District, Jiangsu, Nanjing

Applicant after: China Electric Rice Information System Co.,Ltd.

Address before: 210003 No. 1 East Garden Street, Qinhuai District, Jiangsu, Nanjing

Applicant before: THE 28TH RESEARCH INSTITUTE OF CHINA ELECTRONICS TECHNOLOGY Group Corp.

TA01 Transfer of patent application right
CB02 Change of applicant information

Address after: No.1 Lingshan South Road, Qixia District, Nanjing City, Jiangsu Province 210046

Applicant after: China Electric Rice Information System Co.,Ltd.

Address before: 210000 No. 1 East Garden Street, Qinhuai District, Jiangsu, Nanjing

Applicant before: China Electric Rice Information System Co.,Ltd.

CB02 Change of applicant information
RJ01 Rejection of invention patent application after publication

Application publication date: 20190329

RJ01 Rejection of invention patent application after publication