CN104202359A - 一种基于刀片服务器的NVMe SSD虚拟化设计方法 - Google Patents

一种基于刀片服务器的NVMe SSD虚拟化设计方法 Download PDF

Info

Publication number
CN104202359A
CN104202359A CN201410393925.7A CN201410393925A CN104202359A CN 104202359 A CN104202359 A CN 104202359A CN 201410393925 A CN201410393925 A CN 201410393925A CN 104202359 A CN104202359 A CN 104202359A
Authority
CN
China
Prior art keywords
nvme
layer
blade
node
virtualization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410393925.7A
Other languages
English (en)
Inventor
范文洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Electronic Information Industry Co Ltd
Original Assignee
Inspur Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Electronic Information Industry Co Ltd filed Critical Inspur Electronic Information Industry Co Ltd
Priority to CN201410393925.7A priority Critical patent/CN104202359A/zh
Publication of CN104202359A publication Critical patent/CN104202359A/zh
Pending legal-status Critical Current

Links

Abstract

本发明提供一种基于刀片服务器的NVMeSSD虚拟化设计方法,包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIEIO拓展模块、管理模块;基于该刀片服务器的虚拟化的详细映射过程为:设置底层虚拟PCIE设备层,该层包括若干刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;设置中间层虚拟化总线桥接层;设置顶层NVMe虚拟化层,将底层所有设备整合为单一NVMe设备。该一种基于刀片服务器的NVMeSSD虚拟化设计方法和现有技术相比,有效提高刀片服务器拓展的灵活性,可靠性高,实用性强,适用范围广泛。

Description

一种基于刀片服务器的NVMe SSD虚拟化设计方法
技术领域
本发明涉及计算机存储虚拟化技术领域,具体的说是一种实用性强、基于刀片服务器的NVMe SSD虚拟化设计方法。
背景技术
随着大数据时代的来临,对数据的处理能力以及响应速度要求越来越高,刀片服务器广泛运用在云计算与大数据处理领域,刀片服务器可以很好的完成多节点刀片数据处理能力的统一,但是IO访问性能由于外围存储速度受限,不能有效的提高。固态存储SSD可以极大的提高服务器存储的IO处理速度并降低IO延迟,NVMe SSD采用PCIE接口,更加靠近处理器CPU,凭借PCIE接口访问的高带宽低延迟优势,更好的发挥了固态存储SSD的性能。
刀片服务器刀片节点的PCIE槽位是独立的,NVMe SSD应用在刀片服务器上时,如果按照刀片服务器的设计特点,用刀片节点PCIE槽位分布式的方式布置NVMe SSD的方式,不能体现刀片服务器计算资源集中的优势。
而存储虚拟化通过将一个(或多个)目标(Target)服务或功能与其它附加的功能集成,统一提供有用的全面功能服务。可以有效的对存储资源进行管理,存储虚拟化技术可以屏蔽异构的存储系统并将其整合为一个统一的存储系统供用户使用。同时,存储虚拟化技术有可以对存储资源进行再分配,将存储资源划分给不同的用户使用。为了方便用户管理对存储虚拟化系统的管理,目前存储虚拟化系统的实现普遍采用BS架构,也即通过浏览器应用程序实现对存储虚拟化系统的管理。
因而,如果将存储虚拟化技术应用在计算机服务器存储方面,将有效提高服务器的存储速度,基于此,现提供一种刀片服务器上NVMe SSD的虚拟化方法,该方法通过整合刀片节点中分布式安装的NVMe SSD资源和管理,通过虚拟化PCIE Crosslink桥接各个节点的NVMe SSD与虚拟化NVMe层,虚拟化NVMe层采用NVMe接口标准,为系统提供统一接口。
发明内容
本发明的技术任务是解决现有技术的不足,提供一种实用性强、基于刀片服务器的NVMe SSD虚拟化设计方法。
本发明的技术方案是按以下方式实现的,该一种基于刀片服务器的NVMe SSD虚拟化设计方法,包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIE IO拓展模块、管理模块;其中PCIE IO拓展模块用于拓展NVMe SSD,各个刀片计算节点的PCIE IO拓展模块则由各个刀片节点独立提供;基于该刀片服务器的虚拟化的详细映射过程为:
设置虚拟PCIE设备层,该虚拟PCIE设备层设置在底层,该层包括若干刀片节点,所述刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;
设置虚拟化总线桥接层,该总线桥接层设置在中间层,通过刀片服务器的高速通信网络虚拟PCIE Crosslink设备,即总线桥设备,该层桥接顶层的NVMe虚拟化层以及底层的各个刀片节点的NVMe SSD闪存;
设置NVMe虚拟化层,该NVMe虚拟化层设置在顶层,该层将底层所有设备整合为单一NVMe设备,并为上层系统提供统一的NVMe标准的接口。
所述NVMe SSD闪存均为PCIE接口且每个节点的NVMe SSD闪存都虚拟映射到PCIE Crosslink上,该NVMe SSD闪存分布安装在各个刀片节点的PCIE槽位上。
所述虚拟化总线桥层的下行端接各个节点的NVMe SSD闪存的PCIE终端设备,上行端为NVMe虚拟化层提供PCIE上行接口。
所述NVMe虚拟化层由操作系统直接操作NVMe SSD闪存的软件接口层,这里的软件接口层包括NVMe SSD闪存的虚拟化层和NVMe SSD闪存的管理虚拟化层;该NVMe虚拟化层将各节点分布式分布的NVMe SSD设备映射为单一的NVMe SSD闪存。
本发明与现有技术相比所产生的有益效果是:
本发明的一种基于刀片服务器的NVMe SSD虚拟化设计方法为刀片服务器的SSD应用提供了高效可靠的应用模型,整体提高刀片服务器的运算以及存储IO性能;通过虚拟化PCIE Crosslink将各个节点的NVMe SSD统一映射到上层系统,方便了NVMe SSD在刀片服务器上的拓展以及动态调整;实现软件可编程实时控制,便捷管理热插拔,功耗以及闪存的寿命管理等;数据可以动态灵活的在各个节点NVMe SSD盘位上动态迁移,并整合各个节点的SSD进行统一使用,并且对热插拔的支持,可以动态调整系统的SSD容量,极大的提高了易用灵活性;NVMe虚拟化层可以灵活配置RAID功能,提高数据使用的可靠性以及整体并行IO访问的性能;通过虚拟化管理接口,管理闪存的寿命,可以动态更换添加以及删除硬盘,有效的提高设备的可靠性;实用性强,适用范围广泛,易于推广。
附图说明
附图1是本发明的NVMe SSD虚拟化系统拓扑示意图。
附图2是本发明的虚拟化层结构示意图。
具体实施方式
下面结合附图对本发明的一种基于刀片服务器的NVMe SSD虚拟化设计方法作以下详细说明。
本发明提供一种基于刀片服务器的NVMe SSD虚拟化设计方法,该方法整合刀片节点中分布式安装的NVMe SSD资源和管理。通过虚拟化PCIE Crosslink桥接各个节点的NVMe SSD与虚拟化NVMe层,虚拟化NVMe层采用NVMe接口标准,为系统提供统一接口。基于此设计思路,如附图1所示,该附图整体展示了刀片服务器中NVMe SSD虚拟化的系统构成的拓扑关系。对于上层系统而言,直接面向NVMe虚拟化层,该层隔离了系统和底层设备之间的直接联系,将刀片节点,高速网络互联以及NVMe SSD设备虚拟化成整体的NVMe SSD供系统使用。
结合附图2,本发明的方法中包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIE IO拓展模块、管理模块;其中PCIE IO拓展模块用于拓展NVMe SSD,各个刀片计算节点的PCIE IO拓展模块则由各个刀片节点独立提供;基于该刀片服务器的虚拟化的详细映射过程为:
设置虚拟PCIE设备层,该虚拟PCIE设备层设置在底层,该层包括若干刀片节点,所述刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;
设置虚拟化总线桥接层,该总线桥接层设置在中间层,通过刀片服务器的高速通信网络虚拟PCIE Crosslink设备,即总线桥设备,该层桥接顶层的NVMe虚拟化层以及底层的各个刀片节点的NVMe SSD闪存;
设置NVMe虚拟化层,该NVMe虚拟化层设置在顶层,该层将底层所有设备整合为单一NVMe设备,并为上层系统提供统一的NVMe标准的接口。
所述NVMe SSD闪存均为PCIE接口且每个节点的NVMe SSD闪存都虚拟映射到PCIE Crosslink上,该NVMe SSD闪存分布安装在各个刀片节点的PCIE槽位上。
所述虚拟化总线桥层的下行端接各个节点的NVMe SSD的PCIE终端设备,上行端为NVMe虚拟化层提供PCIE上行接口。
所述NVMe虚拟化层由操作系统直接操作NVMe SSD闪存的软件接口层,这里的软件接口层包括NVMe SSD闪存的虚拟化层和NVMe SSD闪存的管理虚拟化层。通过NVMe虚拟化层,各节点分布式分布的NVMe SSD设备,映射为独单一的NVMe SSD。通过虚拟化的方案,数据可以动态灵活的在各个节点NVMe SSD盘位上动态迁移,并整合各个节点的SSD进行统一使用,系统对热插拔的支持,可以动态调整系统的SSD容量,极大的提高了易用灵活性。NVMe虚拟化层还可以灵活配置RAID功能,提高数据使用的可靠性以及整体并行IO访问的性能。NVMe的管理接口的虚拟化,实现软件可编程实时控制,便捷管理热插拔,功耗以及闪存的寿命管理等。热插拔的管理也可以配合NVMe SSD虚拟化层,有效地提高刀片服务器拓展的灵活性。
本发明通过虚拟化方案,有效地统一刀片服务器中各刀片中节点分布式分布的遵循NVMe标准设计的PCIE SSD。刀片服务器各节点通过高速网络互联,具有计算能力集中统一的特点,各个节点中的NVMe SSD,通过虚拟化技术,统一映射到系统中,被识别成大容量的NVMe设备,并可以动态迁移各个刀片节点数据,在热插拔基础上可动态调整整个系统的SSD容量, 通过这一虚拟化技术既可以提高NVMe SSD在刀片服务器中的易用性,极大的提高刀片服务器的性能,也可以拓展刀片服务器中NVMe SSD的使用的纵向拓展能力、拓展的灵活性、高效性以及可靠性。同时管理接口的虚拟化,实现软件可编程实时控制,便捷管理热插拔,功耗以及闪存的寿命管理等。 
以上实施方式仅用于说明本发明,而并非对本发明的限制,有关技术领域的普通技术人员,在不脱离本发明的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本发明的范畴,本发明的专利保护范围应由权利要求限定。

Claims (4)

1.一种基于有限状态机的存储虚拟化管理系统,其特征在于包括刀片服务器,该刀片服务器内置若干刀片计算节点、高速网络交换节点、PCIE IO拓展模块、管理模块;其中PCIE IO拓展模块用于拓展NVMe SSD,各个刀片计算节点的PCIE IO拓展模块则由各个刀片节点独立提供;基于该刀片服务器的虚拟化的详细映射过程为:
设置虚拟PCIE设备层,该虚拟PCIE设备层设置在底层,该层包括若干刀片节点,所述刀片节点将本节点的若干个支持NVMe标准的SSD闪存作为PCIE终端设备;
设置虚拟化总线桥接层,该总线桥接层设置在中间层,通过刀片服务器的高速通信网络虚拟PCIE Crosslink设备,即总线桥设备,该层桥接顶层的NVMe虚拟化层以及底层的各个刀片节点的NVMe SSD闪存;
设置NVMe虚拟化层,该NVMe虚拟化层设置在顶层,该层将底层所有设备整合为单一NVMe设备,并为上层系统提供统一的NVMe标准的接口。
2.根据权利要求1所述的一种基于有限状态机的存储虚拟化管理系统,其特征在于:所述NVMe SSD闪存均为PCIE接口且每个节点的NVMe SSD闪存都虚拟映射到PCIE Crosslink上,该NVMe SSD闪存分布安装在各个刀片节点的PCIE槽位上。
3.根据权利要求1所述的一种基于有限状态机的存储虚拟化管理系统,其特征在于:所述虚拟化总线桥层的下行端接各个节点的NVMe SSD闪存的PCIE终端设备,上行端为NVMe虚拟化层提供PCIE上行接口。
4.根据权利要求1所述的一种基于有限状态机的存储虚拟化管理系统,其特征在于:所述NVMe虚拟化层由操作系统直接操作NVMe SSD闪存的软件接口层,这里的软件接口层包括NVMe SSD闪存的虚拟化层和NVMe SSD闪存的管理虚拟化层;该NVMe虚拟化层将各节点分布式分布的NVMe SSD设备映射为单一的NVMe SSD闪存。
CN201410393925.7A 2014-08-12 2014-08-12 一种基于刀片服务器的NVMe SSD虚拟化设计方法 Pending CN104202359A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410393925.7A CN104202359A (zh) 2014-08-12 2014-08-12 一种基于刀片服务器的NVMe SSD虚拟化设计方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410393925.7A CN104202359A (zh) 2014-08-12 2014-08-12 一种基于刀片服务器的NVMe SSD虚拟化设计方法

Publications (1)

Publication Number Publication Date
CN104202359A true CN104202359A (zh) 2014-12-10

Family

ID=52087584

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410393925.7A Pending CN104202359A (zh) 2014-08-12 2014-08-12 一种基于刀片服务器的NVMe SSD虚拟化设计方法

Country Status (1)

Country Link
CN (1) CN104202359A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104601729A (zh) * 2015-02-06 2015-05-06 浪潮集团有限公司 一种采用NVMe实现高性能云存储的方法
CN104615577A (zh) * 2015-02-09 2015-05-13 浪潮集团有限公司 一种大数据服务器
CN107479828A (zh) * 2017-07-31 2017-12-15 山东超越数控电子有限公司 一种提高固态硬盘吞吐量性能的方法
CN107480094A (zh) * 2017-08-11 2017-12-15 郑州云海信息技术有限公司 一种融合架构的池化服务器系统架构
CN110825320A (zh) * 2018-08-07 2020-02-21 马维尔国际贸易有限公司 虚拟化固态存储介质的隔离区域

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070047536A1 (en) * 2005-09-01 2007-03-01 Emulex Design & Manufacturing Corporation Input/output router for storage networks
CN101540685A (zh) * 2008-06-06 2009-09-23 曙光信息产业(北京)有限公司 一种用于刀片服务器的PCIe共享存储刀片
US20100082874A1 (en) * 2008-09-29 2010-04-01 Hitachi, Ltd. Computer system and method for sharing pci devices thereof
CN102063158A (zh) * 2010-12-10 2011-05-18 曙光信息产业(北京)有限公司 刀片服务器的io扩展模块
CN102063160A (zh) * 2010-12-10 2011-05-18 曙光信息产业(北京)有限公司 刀片服务器的io扩展模块、设有该模块的刀片及服务器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070047536A1 (en) * 2005-09-01 2007-03-01 Emulex Design & Manufacturing Corporation Input/output router for storage networks
CN101540685A (zh) * 2008-06-06 2009-09-23 曙光信息产业(北京)有限公司 一种用于刀片服务器的PCIe共享存储刀片
US20100082874A1 (en) * 2008-09-29 2010-04-01 Hitachi, Ltd. Computer system and method for sharing pci devices thereof
CN102063158A (zh) * 2010-12-10 2011-05-18 曙光信息产业(北京)有限公司 刀片服务器的io扩展模块
CN102063160A (zh) * 2010-12-10 2011-05-18 曙光信息产业(北京)有限公司 刀片服务器的io扩展模块、设有该模块的刀片及服务器

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
喻波,胡怀湘,: ""MR-IOV:下一代数据中心I/O虚拟化技术"", 《计算机技术与发展》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104601729A (zh) * 2015-02-06 2015-05-06 浪潮集团有限公司 一种采用NVMe实现高性能云存储的方法
CN104615577A (zh) * 2015-02-09 2015-05-13 浪潮集团有限公司 一种大数据服务器
CN107479828A (zh) * 2017-07-31 2017-12-15 山东超越数控电子有限公司 一种提高固态硬盘吞吐量性能的方法
CN107480094A (zh) * 2017-08-11 2017-12-15 郑州云海信息技术有限公司 一种融合架构的池化服务器系统架构
CN110825320A (zh) * 2018-08-07 2020-02-21 马维尔国际贸易有限公司 虚拟化固态存储介质的隔离区域

Similar Documents

Publication Publication Date Title
US20200192593A1 (en) Distributed host copy migration in a cluster environment using changed block tracking
JP2022003577A (ja) Hci環境でのvm/コンテナおよびボリューム配置決定方法及びストレージシステム
US20180373557A1 (en) System and Method for Virtual Machine Live Migration
Kant Data center evolution: A tutorial on state of the art, issues, and challenges
Darabseh et al. Sdstorage: a software defined storage experimental framework
CN105426245B (zh) 包括分散的部件的动态地组成的计算节点
Nanavati et al. Decibel: Isolation and sharing in disaggregated {Rack-Scale} storage
WO2016206198A1 (zh) 存储系统
CN115039077A (zh) 为实时虚拟化执行环境迁移维护存储命名空间标识符
US9329792B2 (en) Storage thin provisioning and space reclamation
CN104202359A (zh) 一种基于刀片服务器的NVMe SSD虚拟化设计方法
US10331476B1 (en) Storage device sharing among virtual machines
JP7467593B2 (ja) リソース割振り方法、記憶デバイス、および記憶システム
CN103577122B (zh) 分布式应用系统在平台间迁移的实现方法及装置
US10866934B1 (en) Token-based data flow control in a clustered storage system
CN104601684A (zh) 云服务器系统
WO2019011262A1 (zh) 分配资源的方法和装置
CN116069240A (zh) 存储器池管理
US8990815B1 (en) Synchronizing allocated blocks of virtual disk files across primary and secondary volumes by excluding unused blocks
CN104123183A (zh) 集群作业调度方法和装置
US20160364268A1 (en) Computer system, management computer, and management method
CN116389542A (zh) 具有可配置的池化资源的平台
US9465549B1 (en) Dynamic allocation of a high-speed memory pool between a cluster file system and a burst buffer appliance
JP2013539111A (ja) キャッシングに対応したストレージ装置上における効率的なシーケンシャルロギングのためのシステム及び方法
CN103986665A (zh) 云海os中网络负载均衡的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141210